DE4402779C2 - Gas station monitoring system - Google Patents

Gas station monitoring system

Info

Publication number
DE4402779C2
DE4402779C2 DE4402779A DE4402779A DE4402779C2 DE 4402779 C2 DE4402779 C2 DE 4402779C2 DE 4402779 A DE4402779 A DE 4402779A DE 4402779 A DE4402779 A DE 4402779A DE 4402779 C2 DE4402779 C2 DE 4402779C2
Authority
DE
Germany
Prior art keywords
observation system
image
data
signal line
image signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE4402779A
Other languages
German (de)
Other versions
DE4402779A1 (en
Inventor
Birger Dr Ing Mysliwetz
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vodafone GmbH
Original Assignee
Mannesmann AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mannesmann AG filed Critical Mannesmann AG
Priority to DE4402779A priority Critical patent/DE4402779C2/en
Publication of DE4402779A1 publication Critical patent/DE4402779A1/en
Application granted granted Critical
Publication of DE4402779C2 publication Critical patent/DE4402779C2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665Details related to the storage of video surveillance data
    • G08B13/19671Addition of non-video data, i.e. metadata, to video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19634Electrical details of the system, e.g. component blocks for carrying out specific functions
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19654Details concerning communication with a camera
    • G08B13/19658Telephone systems used to communicate with a camera, e.g. PSTN, GSM, POTS
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B17/00Fire alarms; Alarms responsive to explosion
    • G08B17/12Actuation by presence of radiation or particles, e.g. of infrared radiation or of ions
    • G08B17/125Actuation by presence of radiation or particles, e.g. of infrared radiation or of ions by using a video camera to detect fire or smoke
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Description

Die Erfindung betrifft ein Tankstellenbeobachtungssystem mit mindestens einer Videokamera.The invention relates to a gas station observation system with at least one video camera.

Solche Beobachtungs- oder Überwachungssysteme sind bislang für die folgenden Anwendungen bekannt:Such observation or surveillance systems have so far been for the following Applications known:

  • - Gebäude- und Zugangsüberwachung- Building and access monitoring
  • - Prozeßleittechnik und Anlagenfernüberwachung (z. B. Pipeline-Pumpstation)- Process control technology and remote system monitoring (e.g. pipeline pump station)
  • - Förder- und Lagertechnik- Conveying and storage technology
  • - Tankstellenüberwachung- petrol station monitoring
  • - Verkehrsüberwachung- traffic monitoring
  • - Identifikationseinrichtung (z. B. Barcode-Leser)- Identification device (e.g. barcode reader)
  • - Fahrzeugtechnik (z. B. automatische feldweise Spiegelabdunkelung bei Einsatz an Stelle eines herkömmlichen Rückspiegels)- Vehicle technology (e.g. automatic field-by-mirror darkening when used in place a conventional rearview mirror)
  • - Bewegungs- und Lagesensoren.- motion and position sensors.

Im Rahmen der Prozeßüberwachung ergeben sich so insbesondere folgende Anwendungsmöglichkeiten:In the process monitoring, the following result in particular Possible uses:

  • - Erkennen von Flüssigkeits-, Rauch- und Dampfaustritt (Bildveränderung)- Detection of liquid, smoke and steam leakage (image change)
  • - Auswertung der Position von Hebeln und Schiebern (Lageinformation und Lageüberwachung)- Evaluation of the position of levers and sliders (position information and Position monitoring)
  • - Behälterinspektion (Ersatz von Schaugläsern)- container inspection (replacement of sight glasses)
  • - Erfassen von Größen, die mit konventioneller Sensorik nicht oder nur schwer meßbar sind (z. B. Farbänderungen, Formänderungen, Texturänderungen [z. B. Flüssigkeitsoberfläche glatt oder siedend])- Detection of quantities that are difficult or impossible to measure with conventional sensors (e.g. color changes, shape changes, texture changes [e.g. liquid surface smooth or boiling])
  • - Möglichkeit von "Video-Rundgängen" (Fernkontrolle ohne direkten Anlagenzugang).- Possibility of "video tours" (remote control without direct system access).

Im Rahmen der Anwendungsmöglichkeiten in der Förder- und Lagertechnik sind die vorgenannten Punkte teilweise ebenfalls von Bedeutung. Zusätzlich können insbesondere die folgenden Anwendungsmöglichkeiten genannt werden:Within the scope of applications in conveyor and storage technology, the the aforementioned points are also of some importance. In addition, in particular the following possible uses are mentioned:

  • - Bildübertragung von einem Regalbediengerät zum Leitstand- Image transmission from a storage and retrieval machine to the control center
  • - Gefahrgutlager-Überwachung (ausgelaufene Flüssigkeit, defekte Behälter)- Dangerous goods warehouse monitoring (leaked liquid, defective containers)
  • - Konturkontrolle (an Stelle des Einsatzes mehrerer Lichtschranken- Contour control (instead of using several light barriers
  • - Palettentyperkennung und Palettenzustandskontrolle- Pallet type recognition and pallet condition control
  • - Automatisierung der Palettenbe- und -entladung (Lagererkennung von Kartons und Behältern)- Automation of pallet loading and unloading (storage detection of boxes and Containers)
  • - Identifikation (Barcode-Leser)- Identification (barcode reader)
  • - Positionserfassung von Fördergut auf Förderstrecken - Position detection of goods to be conveyed on conveyor lines  
  • - Bestandskontrolle, Zählen (Inventurunterstützung)- inventory control, counting (inventory support)
  • - Kontrolle und Optimierung der Beladung.- Control and optimization of loading.

Stand der Technik bei der Videoüberwachung von Tankstellen sind CCD-Kameras, die die Bildinformationen in analoge Signale umwandeln und diese permanent über Koaxialkabel übertragen. Die analogen Bildsignale dieser Kameras werden am Ende der Übertragungsstrecke durch einen (ggf. speziellen Langzeit-)Videorecorder auf handelsübliche Videokassetten aufgezeichnet. Je nach Bildfrequenz sind damit Aufzeichnungszeiten von 24 h bis zu mehreren hundert Stunden möglich.State of the art in video surveillance of petrol stations are CCD cameras, which Convert image information into analog signals and permanently use coaxial cables transfer. The analog image signals from these cameras are at the end of the Transmission path through a (possibly special long-term) video recorder commercially available video tapes recorded. Depending on the frame rate Recording times from 24 hours up to several hundred hours possible.

Der Tankplatz und Kassenraum wird pauschal gefilmt und aufgezeichnet, unabhängig davon, ob Personen sich im Kassenraum befinden bzw. ob getankt wird oder nicht. Um dabei den Umfang des benötigten Magnetbandmaterials zu reduzieren, werden sogenannte Time/Lapse-Recorder eingesetzt. Diese zeichnen die Signale mehrerer Kameras im Zeitmultiplex nacheinander mit ggf. einstellbarer Frequenz auf, typischerweise ca. 1 bis 2 Bildern pro Sekunde. Dazu ist ein sog. Videomultiplexer nötig, der mehrere eingehende Videosignale in festen zeitlichen Abständen nacheinander auf einen Ausgang schaltet. In speziellen Videorecordern kann die Multiplexerfunktion schon integriert sein.The petrol station and cash desk are filmed and recorded as a flat rate, regardless of whether there are people in the cash desk or whether they are refueling or not. To do that To reduce the amount of magnetic tape material required are so-called Time / lapse recorder used. These draw the signals from several cameras in the Time-division multiplexing in succession with an adjustable frequency, typically approx. 1 to 2 Frames per second. This requires a so-called video multiplexer, which has several incoming ones Switches video signals to an output one after the other at fixed time intervals. In The multiplexer function can already be integrated in special video recorders.

Als Variante zu diesem Verfahren wird von Grundig ein Bildaufzeichnungsgerät angeboten, das Bilder digitalisiert auf eine Festplatte speichert. Dabei werden nur die Bilder gespeichert, die sich zum Vorgängerbild unterscheiden, d. h. längere Passagen, in denen sich nichts ändert, werden nicht aufgezeichnet. Zudem wird der Bildspeicher permanent selbsttätig überschrieben, deshalb muß im Ereignisfall "Kunde hat nicht bezahlt" rechtzeitig die Bildinformation als relevant markiert werden (manuell durch Personal).As an alternative to this process, Grundig offers an image recording device that digitizes images on a hard drive. Only the images are saved, that differ from the previous picture, d. H. longer passages in which there is nothing changes are not recorded. In addition, the image memory is permanently automatic overwritten, so in the event of an event "customer did not pay" the Image information can be marked as relevant (manually by personnel).

In einer Fernsehüberwachungsanlage nach der Schrift DE 41 10 649 A1, bei welcher Bewegungen in von einer Fernsehkamera aufgenommenen Bildern ermittelt werden, wird bei einer erkannten Bewegung der betreffende Bildteil mit den Mustern eines einer Vielzahl von Mustern enthaltenden Musterspeichers verglichen und bei Übereinstimmung mit einem Muster dasselbe zur Darstellung auf einem Monitor der Gegenstelle auf einer Übertragungsleitung übermittelt. Auf diese Weise kann die den Monitor überwachende Person auf die Verwendung eines bestimmten Gegenstandes bei dem zu überwachenden Objekt schnell und eindeutig hingewiesen werden.In a television monitoring system according to DE 41 10 649 A1, in which movements in images recorded by a television camera are determined by a recognized movement of the relevant part of the image with the patterns of a variety of Pattern storage containing patterns compared and if they match Pattern the same for display on a remote site monitor on a Transmission line transmitted. In this way, the monitor monitoring Person on the use of a certain object in the subject to be monitored Object quickly and clearly.

In der Schrift DE 41 38 538 A1 wird eine Videoüberwachungsanlage beschrieben, die sich für eine kostengünstige Fernüberwachung eignet. Hauptbestandteile der Anlage sind datenreduzierende Coder und ein entsprechender Decoder, die jeweils über Steuereinheiten an eine Fernleitung angeschlossen sind. Die Steuereinheiten der Coder tauschen mit der Steuereinheit des Decoders über die Fernleitung Daten aus. In the document DE 41 38 538 A1 a video surveillance system is described, which suitable for cost-effective remote monitoring. The main components of the system are data-reducing coder and a corresponding decoder, each via control units are connected to a long-distance line. The control units of the encoders exchange with the Control unit of the decoder via the transmission line data.  

Die Steuereinheiten der Coder enthalten steuerbare Umschalter, deren Stellung davon abhängt, welche der Kameras der Anlage für die momentane Überwachung eingesetzt werden soll. Ihre Bilder werden auf einem Monitor angezeigt. Das Umschalten auf eine andere Kamera wird mit einem Steuerrechner vorgenommen.The control units of the encoders contain controllable changeover switches, the position of which depends on which of the system's cameras is used for the current monitoring shall be. Your pictures are displayed on a monitor. Switching to one other camera is made with a control computer.

Derartige "intelligente Videokameras" sind grundsätzlich für den Einsatz bei einer Tankstellenüberwachung geeignet, jedoch erfolgt die Ansteuerung der Kameras auf komplizierte Weise von einem Steuerrechner und/oder in Abhängigkeit vom Bildinhalt.Such "intelligent video cameras" are basically for use with a Petrol station monitoring is suitable, but the cameras are activated complicated way from a control computer and / or depending on the image content.

Wie aus dem Aufsatz "EPSI: Ein Feldbus setzt sich durch" im Abschnitt "Messen-Steuern- Regeln" der Zeitschrift Markt & Technik Nr. 42 vom 15. 10. 1993 zu entnehmen ist, sind Tankdatenerfassungs-, -übertragungs- und -verarbeitungssysteme bekannt, an die u. a. auch die Zapfsäulen angeschlossen sind.As from the essay "EPSI: A fieldbus prevails" in the section "Measure-Control- Rules "of the magazine Markt & Technik No. 42 of October 15, 1993 can be found Tank data acquisition, transmission and processing systems known to u. a. also the dispensers are connected.

Der Erfindung lag die Aufgabe zugrunde, ein Tankstellenbeobachungssystem zu schaffen, das die bislang bekannte Kameratechnik ausnutzt und tankstellenspezifisch ansteuerbar ist.The invention had for its object to provide a gas station monitoring system, that uses the previously known camera technology and can be controlled specifically for a petrol station.

Erfindungsgemäß wird die Aufgabe entsprechend den Merkmalen des 1. Patentanspruchs gelöst.According to the invention, the object is in accordance with the features of the first claim solved.

In den Unteransprüchen sind zweckmäßige Ausgestaltungen der Erfindung angegeben.In the subclaims, expedient refinements of the invention are specified.

Im Mittelpunkt steht eine digitale Videokamera, die busfähig ist, zu geringen Kosten herstellbar und wegen der in sie integrierten Auswerteelektronik als "intelligente" Kamera zu bezeichnen ist. Die Kamera kann über die üblichen Kamerafunktionen hinaus selbständig aufgaben-spezifische relevante Szeneninhalte oder Szenenveränderungen erkennen. Die relevanten Bilder können wahlweise in der Kamera komprimiert (Datenreduktion) und bei Bedarf seriell über eine Bildsignalleitung an eine elektronische Leitzentrale übertragen werden. Mit dem Begriff Leitzentrale ist lediglich eine Einrichtung gemeint, in der die übertragenen Bildinformationen elektronisch aufgezeichnet oder für einen Betrachter sichtbar gemacht werden können. Innerhalb einer Gesamtanlage können daher durchaus mehrere "Leitzentralen" vorhanden sein. Für die Bildübertragung ist keine spezielle Video- Koaxialverkabelung erforderlich, sondern wegen der komprimierten seriellen Bildübertragung kann eine eventuell bestehende einfache Leitungsinfrastruktur, wie etwa ein Telefonkabel oder eine 2-Draht-Leitung genutzt werden. Mehrere intelligente Kameras können auch gleichzeitig mit anderen Feldbusgeräten an einem Leitungsstrang angeschlossen sein. Je nach Anforderung an die Bildqualität können standardmäßige Videoobjektive oder vorzugsweise auch kostengünstige Fixfocus-Kunststofflinsen verwendet werden.The focus is on a digital video camera that is bus-compatible at low cost producible and because of the integrated evaluation electronics as an "intelligent" camera is designated. The camera can go beyond the usual camera functions Recognize task-specific relevant scene content or scene changes. The relevant images can optionally be compressed in the camera (data reduction) and at Transfer demand serially to an electronic control center via an image signal line will. The term control center only means a facility in which the transmitted image information electronically recorded or for a viewer can be made visible. Within an overall system can therefore there are several "control centers". No special video is required for image transmission Coaxial cabling required, but because of the compressed serial image transmission a possibly existing simple line infrastructure, such as a Telephone cable or a 2-wire line can be used. Multiple smart cameras can also be used simultaneously with other fieldbus devices on one wiring harness be connected. Depending on the image quality requirement, standard Video lenses or preferably inexpensive fix focus plastic lenses are used will.

Der Öffnungswinkel der Kamera liegt typischerweise zwischen 30 und 80°.The opening angle of the camera is typically between 30 and 80 °.

Die Erfindung soll an einem Ausführungsbeispiel näher erläutert werden.The invention will be explained in more detail using an exemplary embodiment.

1. Tankstellenüberwachung1. Service station monitoring 1.1. Ziele1.1. aims

  • - Frühzeitige(re) Erkennung, Verhinderung bzw. Verfolgung von Tankbetrug und Benzindiebstahl,- Early (re) detection, prevention or tracking of tank fraud and gasoline theft,
  • - Erfassung von Fzg.-Typ, Kennzeichen und Personen beim Tankvorgang,- Registration of vehicle type, number plate and people during the refueling process,
  • - leistungsfähigere, effizientere und kostengünstigere Lösung als mit konventionellen Videoüberwachungsanlagen.- more efficient, more efficient and cheaper solution than with conventional video surveillance systems.
1.2. Motivation und Hintergrund1.2. Motivation and background

  • - Neue technische Entwicklungen (low-cost CMOS-Bildsensoren, Bild­ kompressionstechniken), die intelligente, busfähige, digitale Kameras ermöglichen (icam),- New technical developments (low-cost CMOS image sensors, image compression techniques), the intelligent, bus-compatible, digital cameras enable (icam),
  • - kommende Einführung standardisierter, digitaler Tankdatensysteme,- upcoming introduction of standardized, digital tank data systems,
  • - steigende Tankdiebstahlraten,- increasing tank theft rates,
  • - Initiativen von Mineralölunternehmen zu neuen, tankstellenweiten Gesamt-Überwachungskonzepten.- Initiatives by oil companies to create new, gas station-wide Overall surveillance concepts.
1.3. Beschreibung1.3. description

Digitales Bilderfassungs- und Auswertungssystem (Videoüberwachungssystem), besonders geeignet für Tankstellen mit digitalen Tankdatensystemen, bestehend aus:Digital image acquisition and evaluation system (video surveillance system), Particularly suitable for petrol stations with digital tank data systems, consisting of:

  • - mehreren "intelligenten" Videokameras, die in der Lage sind, kamera-intern
    • - Bildsignale zu digitalisieren (z. B. in 256×256 Bildpunkte mit je 256 Graustufen,
    • - Bilddaten zu speichern (z. B. bis zu 25 Bildern),
    • - Bilddaten zu komprimieren, d. h. Datenreduktion durchzuführen (z. B. Faktor 3-5), komprimierte Bilddaten über digitale Schnittstellen/Übertragungsmedien zu übertragen,
    • - (optional) Bilddaten auf Veränderung, Form (z. B. Erkennung einfacher rechteckiger Strukturen, gerader Kanten) und Bewegung hin zu analysieren.
    - Several "intelligent" video cameras, which are able to camera internally
    • - Digitize image signals (e.g. in 256 × 256 pixels with 256 gray levels each,
    • - save image data (e.g. up to 25 images),
    • - compressing image data, ie performing data reduction (e.g. factor 3-5), transmitting compressed image data via digital interfaces / transmission media,
    • - (Optional) analyze image data for changes, shape (e.g. detection of simple rectangular structures, straight edges) and movement.
  • - (Bild)datenübertragungsmedien (z. B. seriell, leitungsgebunden über 2-Draht-Leitungen wie Feldbusse oder drahtlos via IR-Strecken, RF- oder HF-Funkstrecken), vorzugsweise schon bestehende Leitungs- oder DFÜ-Infrastruktur;- (Image) data transmission media (e.g. serial, line-bound via 2-wire lines such as Fieldbuses or wireless via IR links, RF or HF radio links), preferably already existing line or data transmission infrastructure;
  • - Bilddatenspeicher- und Ausgabeeinheit (z. B. PC mit Festplatte und Grafikdrucker) zum längerfristigen Speichern bzw. Dokumentieren von Alarmbildern und zugehörigen Tankdaten.- Image data storage and output unit (e.g. PC with hard disk and graphic printer) for long-term storage or documentation of alarm images and related Tank data.

Kernpunkte der Anwendung eines solchen Videoüberwachungssystems im Tankstellenbereich sind zum einen die direkte physikalische Ankopplung und zum anderen die logische/informationsbezogene Integration der Videoüberwachung in das (ggf. auch bereits bestehende) digitale Tankdatensystem.Key points of the application of such a video surveillance system in the Petrol station areas are on the one hand the direct physical coupling and on the other hand the logical / information-related integration of video surveillance into the (possibly also existing) digital tank data system.

Erläuterung: Zur Steuerung, Meßwerterfassung und Datenübertragung im Tank­ stellenbereich (d. h. zwischen Zapfsäule, POS-Kasse, Großtank, Waschanlage . . .) sollen künftig standardisierte, digitale, serielle Feldbussysteme eingesetzt werden. In der engeren Auswahl und zum Teil auch schon im Versuchseinsatz stehen das auf dem DIN-Meßbus beruhende "European Petrol Station Interface", EPSI, sowie das "Local Operating Network", LON, von Fa. Echelon.Explanation: For control, data acquisition and data transfer in the tank area (i.e. between the petrol pump, POS cash register, large tank, car wash ...) standardized, digital, serial fieldbus systems will be used in the future. In the closer Selection and in some cases already in test use are on the DIN measurement bus based "European Petrol Station Interface", EPSI, as well as the "Local Operating Network", LON, from Echelon.

Physikalische AnkopplungPhysical coupling

Bisher stellte die Videoüberwachung im Tankstellenbereich ein logisch und physikalisch separates System dar, d. h. mit eigener Verkabelungs-, Datenverarbeitungs- und Speicherinfrastruktur. An das Tankdatensystem angeschlossene, busfähige, bildkomprimierende Kameras können diese digitale Datenübertragungsinfrastruktur mitnutzen, um über sie Steuerkommandos zu empfangen (z. B. zur Bildaufnahme oder zur Bildübertragung) und Bilddaten zur zentralen Abspeicherung zu übertragen (z. B. an einen Bildspeicher-PC im Kassenhaus). Dadurch entfällt die bisher erforderliche, eigene (teure) Koaxial-Verkabelung für die analoge Bildübertragung. Denkbar ist auch eine Fernspeisung (Stromversorgung) der Kameras gleich über die Datenleitungen und damit eine weitere Installationsvereinfachung und Verkabelungsreduktion.So far, video surveillance in the petrol station area was logically and physically separate system, d. H. with its own cabling, data processing and Storage infrastructure. Bus-compatible, image-compressing connected to the tank data system Cameras can use this digital data transmission infrastructure to receive control commands via it (e.g. for image acquisition or for Image transmission) and image data for central storage (e.g. to a Image storage PC in the cash desk). This eliminates the previously required, own (expensive) Coaxial cabling for analog image transmission. Remote supply is also conceivable (Power supply) of the cameras directly via the data lines and thus another Simplification of installation and cabling reduction.

Logische AnkopplungLogical coupling

Das Videoüberwachungssystem "wußte" bzw. "erfuhr" bisher nichts von den relevanten Zuständen und Ereignissen wie "Tanken beginnt", "Tanken beendet" und "Zahlung erfolgt". Diese Information liegt im Tankdatensystem jedoch explizit und bereits elektronisch verarbeitbar vor. Sie kann genutzt werden, um eine gezielte, ereignisgesteuerte Videoauslösung zu realisieren und damit nur relevante Szenen zu erfassen. Damit (und durch digitale Bidkompression) ist deutlich weniger Speicherplatz zur Bildablage erforderlich gegenüber pauschaler, periodischer Bilderfassung. Darüber hinaus können die komprimierten Bilddaten im Betrugsfall automatisch zusammen mit den zugehörigen Tankinformationen (Datum, Uhrzeit, Zapfsäulennummer, Treibstoffsorte, Litermenge, Preis, . . .) digital abgespeichert werden.So far, the video surveillance system "did not know" or "learned" about the relevant ones Conditions and events such as "refueling begins", "refueling finished" and "payment made". However, this information is explicitly and already electronically in the tank data system processable before. It can be used to trigger a targeted, event-controlled video to realize and thus only capture relevant scenes. So (and through digital bid compression), significantly less storage space is required for image storage compared to general, periodic image acquisition. In addition, the compressed Image data in the event of fraud automatically together with the associated tank information (Date, time, dispenser number, type of fuel, quantity of liter, price,...) Digitally saved will.

BildauswertungImage evaluation

Ein dritter Kernaspekt in dieser Anwendung ist die Fähigkeit der Kamera, intern schon Bildauswertungsfunktion ausführen zu können und damit relevante Szenenveränderungen, ggf. auch einfache Formen und Bewegungen, im Blickfeld automatisch erkennen zu können (z. B. den in etwa rechteckigen Umriß eines Fahrzeugs oder die Bewegung der Fzg.-Hinter- oder -Vorderkante beim Wegfahren vom Zapfplatz). Hiermit könnte ein solches Videoüberwachungssystem sofort automatisch Alarm auslösen, wenn nach dem Ereignis "Tanken beendet" sich ein Fahrzeug von der Zapfsäule wegbewegt, bevor "Zahlung erfolgt" signalisiert ist.A third key aspect in this application is the ability of the camera to do so internally To be able to perform image evaluation function and thus relevant scene changes,  possibly also simple shapes and movements, to be able to be recognized automatically in the field of vision (e.g. the roughly rectangular outline of a vehicle or the movement of the vehicle rear or leading edge when driving away from the tap). Such a video surveillance system could hereby immediately automatically trigger an alarm if after the event "Refuel finishes "a vehicle moves away from the pump before" payment is made " is signaled.

1.4 Anwendungsszenario1.4 Application scenario

Möglicher Ablauf: z. B. erstes Bild wird erfaßt, wenn ein Tankvorgang beginnt (Benzin fließt), zweites Bild wird erfaßt, wenn der Tankvorgang beendet ist (Zapfhahn wieder eingehängt). Beide Bilder bleiben zunächst lokal in der Kamera gespeichert, werden also noch nicht zur "Zentrale" (z. B. Bildspeicher-PC) übertragen.Possible process: e.g. B. First image is captured when refueling begins (gasoline flows), second image is captured when the refueling process is finished (tap again mounted). Both images initially remain stored locally in the camera, so they are not yet transferred to the "control center" (e.g. image storage PC).

Wenn der Zahlvorgang für die betreffende Zapfsäule "erfolgreich" beendet wird, werden die lokal zwischengespeicherten Bilder in der (den) Kamera(s) sofort wieder gelöscht. Ist der Zahlvorgang offen und ein Betrug festgestellt (entweder manuell oder durch automatisches Erfassen der Fahrzeugbewegung beim Wegfahren), werden die lokalen Bilder von der (den) Kamera(s) in den zentralen PC-Festplattenspeicher übertragen und dort zusammen mit der zugehörigen Tankinformation abgelegt. Im Fall einer automatischen Fzg.-Bewegungserkennung wird das Personal sofort durch einen Alarm aufmerksam gemacht und die relevanten Bilder und Informationen ausgegeben. Gegebenenfalls ist das System mit einer Schranke oder sonstigen Einrichtung gekoppelt, die das Wegfahren im Alarmfall verhindert.If the payment process for the petrol pump in question is "successfully" completed, the locally cached images in the camera (s) are immediately deleted. Is the Payment process open and fraud detected (either manually or automatically Capturing the vehicle movement when driving away), the local images of the Transfer camera (s) to the central PC hard disk memory and there together with the associated tank information filed. In the case of automatic vehicle motion detection the staff is immediately alerted by an alarm and the relevant Images and information output. If necessary, the system is with a barrier or other Device coupled that prevents the vehicle from moving away in the event of an alarm.

1.5 Verbesserungen gegenüber dem Stand der Technik1.5 Improvements over the state of the art

Durch die Ankopplung an den Tankdatenbus und Steuerung der Bildaufnahmen darüber werden ausschließlich relevante Szenen aufgenommen, z. B. ab Signal "Benzin wird abgefüllt" des Tankdatensystems (siehe auch 1.4).By coupling to the tank data bus and controlling the image recordings above only relevant scenes are recorded, e.g. B. from the signal "petrol filled "of the tank data system (see also 1.4).

In der Kamera können mehrere Bilder zunächst lokal zwischengespeichert werden, bis geklärt ist, ob die aufgenommenen Szenen überhaupt dauerhaft ablagebedürftig sind. Nicht zu dokumentierende Bilder können sofort wieder in der Kamera gelöscht und "vergessen" werden, wenn ein Tankvorgang ordnungsgemäß bezahlt wurde.In the camera, several images can initially be stored locally until It has been clarified whether the recorded scenes are permanently in need of storage. Not Images to be documented can immediately be deleted in the camera and "forgotten" if a refueling operation has been properly paid for.

Das heißt, der überwiegende Anteil selbst der zunächst erfaßten Bilder muß nicht einmal übertragen und daher auch nicht zentral abgespeichert werden.This means that the vast majority of the images captured initially do not even have to transferred and therefore not saved centrally.

Dies ist auch ein rechtlich hinsichtlich Datenschutz vereinfachender Aspekt gegenüber pauschalen Langzeit-Videorekorderaufnahmen.This is also a legally simplifying aspect with regard to data protection general long-term video recorder recordings.

Die busfähige Kamera nutzt die bestehende Leitungsinfrastruktur des digitalen Tankdatenbusses. Mehrere Kameras können an einem Leitungsstrang, zusammen mit anderen Busgeräten (Zapfsäulen), angeschlossen sein. Demgegenüber erfordern analoge Videokameras jeweils ein eigenes Koaxialkabel zur Bildübertragung. Daraus ergibt sich eine ent­ sprechende Materialkostenreduktion, insbesondere aber eine deutliche Installationsvereinfachung, speziell bei Nachrüstungen.The bus-compatible camera uses the existing line infrastructure of the digital tank data bus. Multiple cameras can be on a wiring harness, along with others Bus devices (petrol pumps) must be connected. In contrast, analog video cameras require each with its own coaxial cable for image transmission. This results in an ent  talking material cost reduction, but especially a significant simplification of installation, especially when retrofitting.

Die intelligente digitale Kamera kann auch die im Rahmen digitaler Tankdatensysteme vorhandenen Datenverarbeitungs-, Steuer- und Speichergeräte (zunehmend PC-gestützt) mitnutzen, erfordert somit keine eigene DV-Infrastruktur und Videoaufzeichnungsgeräte.The intelligent digital camera can also be used as part of digital tank data systems existing data processing, control and storage devices (increasingly PC-based) share, does not require your own IT infrastructure and video recording devices.

1.6 Weitere Anwendungsmöglichkeiten1.6 Further possible applications

  • - Videoüberwachung in der Anlagen- und Prozeßleittechnik- Video surveillance in plant and process control technology
  • - Videoüberwachung in der Förder- und Lagertechnik- Video surveillance in conveyor and warehouse technology

Analog zur Tankstellenanwendung ergeben sich auch hier zum einen Vorteile aus der Nutzung existierender, digitaler Datenübertragungs-, Datenverarbeitungs-, Speicher- und Visualisierungsinfrastruktur von Prozeßleitsystemen bzw. Förderanlagen-Leitwarten.Analogous to the petrol station application, there are advantages from the use existing digital data transmission, data processing, storage and Visualization infrastructure of process control systems or conveyor control rooms.

Zum anderen kann die intelligente Kamera neben der reinen Bildlieferung für einen Bediener neue, automatische Überwachungs- und Meßfunktionen ausführen.On the other hand, the intelligent camera can not only deliver images to an operator perform new, automatic monitoring and measuring functions.

Claims (20)

1. Tankstellenbeobachtungssystem mit mindestens einer Videokamera, die über eine Bildsignalleitung mit einer elektronischen Leitzentrale verbunden ist, die eine elektronische Einrichtung zur Aufzeichnung und/oder Sichtbarmachung von Bildsignalen beinhaltet, wobei
  • - die Videokamera als digitale Kamera ausgebildet ist,
  • - die Videokamera einen Bildspeicher umfaßt, der mehrere Bilder, vorzugsweise 2-50 Bilder, speichern kann, die periodisch gelöscht werden,
  • - die Videokamera eine Auswerteelektronik aufweist, durch die vor der Einspeisung von Bilddaten in die Bildsignalleitung wahlweise eine Datenkompression und/oder eine Untersuchung der erfaßten Bildinhalte auf das Vorhandensein bedeutsamer Einzelheiten anhand gespeicherter Entscheidungskriterien erfolgt und
  • - die Erfassung, Löschung und Übertragung der Bilddaten in bzw. aus der Videokamera in Abhängigkeit von Tankzustandssignalen erfolgt, die von einem in der Tankstelle vorhandenen Tankdatensystem erzeugt werden.
1. petrol station observation system with at least one video camera, which is connected via an image signal line to an electronic control center, which includes an electronic device for recording and / or visualizing image signals, wherein
  • the video camera is designed as a digital camera,
  • the video camera comprises an image memory which can store a plurality of images, preferably 2-50 images, which are periodically deleted,
  • - The video camera has evaluation electronics, by means of which, prior to the feeding of image data into the image signal line, either data compression and / or an examination of the captured image contents for the presence of significant details takes place on the basis of stored decision criteria and
  • - The acquisition, deletion and transmission of the image data in or from the video camera takes place as a function of tank status signals which are generated by a tank data system present in the gas station.
2. Beobachtungssystem nach Anspruch 1, dadurch gekennzeichnet, daß der Bildspeicher ein Raster von jeweils mindestens 256×256 Bildpunkten vorsieht.2. observation system according to claim 1, characterized, that the image memory provides a grid of at least 256 × 256 pixels. 3. Beobachtungssystem nach einem der Ansprüche 1 oder 2, dadurch gekennzeichnet, daß der Bildspeicher eine Vielzahl von erfaßbaren Graustufen, vorzugsweise mindestens 256 Graustufen vorsieht.3. observation system according to one of claims 1 or 2, characterized, that the image memory has a large number of detectable gray levels, preferably at least 256 grayscale. 4. Beobachtungssystem nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, daß die Auswerteelektronik derart programmiert ist, daß sie bei der Bilddatenkompression eine Datenreduktion mindestens um den Faktor 3-5 vornimmt.4. Observation system according to one of claims 1 to 3, characterized, that the evaluation electronics is programmed in such a way that it is used for image data compression data reduction at least by a factor of 3-5. 5. Beobachtungssystem nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, daß die Auswerteelektronik derart programmiert ist, daß die Einspeisung der Bilddaten in festgelegten größeren Zeitabständen (vorzugsweise mehrere Sekunden bis wenige Minuten) erfolgt.5. observation system according to one of claims 1 to 4, characterized,  that the evaluation electronics is programmed in such a way that the feeding of the image data into specified longer intervals (preferably several seconds to a few minutes) he follows. 6. Beobachtungssystem nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, daß die Auswerteelektronik derart programmiert ist, daß die Einspeisung der Bilddaten in Abhängigkeit von der Feststellung bedeutsamer Einzelheiten erfolgt.6. observation system according to one of claims 1 to 5, characterized, that the evaluation electronics is programmed in such a way that the feeding of the image data into Depends on the discovery of significant details. 7. Beobachtungssystem nach einem der Ansprüche 1 bis 6, dadurch gekennzeichnet, daß die Auswerteelektronik derart programmiert ist, daß die erfaßten Bilddaten auf zeitliche Veränderungen von Bildeinzelheiten und/oder einfache geometrische Strukturen hin analysiert werden.7. Observation system according to one of claims 1 to 6, characterized, that the evaluation electronics is programmed in such a way that the captured image data is temporal Changes in image details and / or simple geometric structures to be analyzed. 8. Beobachtungssystem nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet, daß in der Leitzentrale zur Aufzeichnung der übertragenen digitalen Signale ein Rechnersystem, vorzugsweise in Form eines PC mit Magnetplattenspeicher und grafikfähigem Drucker, vorgesehen ist.8. observation system according to one of claims 1 to 7, characterized, that in the control center for recording the transmitted digital signals, a computer system, preferably in the form of a PC with magnetic disk storage and graphics capable Printer, is provided. 9. Beobachtungssystem nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, daß die Kamera einen Dateneingang aufweist, über den Signale eingebbar sind, die die Auswerteelektronik beeinflussen.9. Observation system according to one of claims 1 to 8, characterized, that the camera has a data input via which signals can be input that the Influence evaluation electronics. 10. Beobachtungssystem nach Anspruch 9, dadurch gekennzeichnet, daß über den Dateneingang manuell Anforderungen zu einer Bildübertragung eingebbar sind.10. Observation system according to claim 9, characterized, that requirements for image transmission can be entered manually via the data input are. 11. Beobachtungssystem nach Anspruch 9 oder 10, dadurch gekennzeichnet, daß der Dateneingang mit Einzelaggregaten einer technischen Anlage zur Übermittlung von Statusanzeigen der Einzelaggregate verbunden ist. 11. Observation system according to claim 9 or 10, characterized, that the data input with individual units of a technical system for the transmission of Status displays of the individual units is connected.   12. Beobachtungssystem nach einem der Ansprüche 1 bis 11, dadurch gekennzeichnet, daß die Auswerteelektronik derart programmiert ist, daß in Abhängigkeit von der Art einer festgestellten bedeutsamen Einzelheit zusätzlich zu einer Bildübertragung eine Datenausgabe, vorzugsweise in Form einer Alarmmeldung, erfolgt.12. Observation system according to one of claims 1 to 11, characterized, that the evaluation electronics is programmed such that, depending on the type of ascertained significant detail, in addition to an image transmission, a data output, preferably in the form of an alarm message. 13. Beobachtungssystem nach Anspruch 11 bis 12, dadurch gekennzeichnet, daß die technische Anlage ein Tankstellenabrechnungssystem ist.13. observation system according to claim 11 to 12, characterized, that the technical system is a filling station accounting system. 14. Beobachtungssystem nach einem der Ansprüche 1 bis 13, dadurch gekennzeichnet, daß die Bildsignalleitung eine 2-Draht-Leitung ist.14. Observation system according to one of claims 1 to 13, characterized, that the picture signal line is a 2-wire line. 15. Beobachtungssystem nach einem der Ansprüche 1 bis 14, dadurch gekennzeichnet, daß die Bildsignalleitung als Telefonkabel ausgebildet ist.15. Observation system according to one of claims 1 to 14, characterized, that the image signal line is designed as a telephone cable. 16. Beobachtungssystem nach einem der Ansprüche 1 bis 15, dadurch gekennzeichnet, daß die Bildsignalleitung und die zur Energieversorgung der Kamera eingesetzte elektrische Leitungsverbindung körperlich identisch sind.16. Observation system according to one of claims 1 to 15, characterized, that the image signal line and the electrical used to power the camera Line connection are physically identical. 17. Beobachtungssystem nach einem der Ansprüche 1 bis 16, dadurch gekennzeichnet, daß die Bildsignalleitung ein digitaler serieller Feldbus ist.17. Observation system according to one of claims 1 to 16, characterized, that the image signal line is a digital serial fieldbus. 18. Beobachtungssystem nach einem der Ansprüche 1 bis 17, dadurch gekennzeichnet, daß zumindest ein Teil der Bildsignalleitung in Form einer Infrarot-Sendestrecke oder als RF- oder HF-Funkstrecke ausgebildet ist.18. Observation system according to one of claims 1 to 17, characterized, that at least part of the image signal line in the form of an infrared transmission path or as RF or HF radio link is formed. 19. Beobachtungssystem nach einem der Ansprüche 9 bis 18, dadurch gekennzeichnet, daß der Dateneingang der Kamera über die Bildsignalleitung ansteuerbar ist (Identität von Dateneingangsleitung und Bildsignalleitung). 19. Observation system according to one of claims 9 to 18, characterized, that the data input of the camera can be controlled via the image signal line (identity of Data input line and image signal line).   20. Beobachtungssystem nach einem der Ansprüche 12 bis 19, dadurch gekennzeichnet, daß die Bildsignalleitung auch zur Übertragung der zusätzlichen Datenausgaben, insbesondere von Alarmmeldungen, vorgesehen ist.20. Observation system according to one of claims 12 to 19, characterized, that the image signal line is also used to transmit the additional data outputs, in particular of alarm messages, is provided.
DE4402779A 1994-01-27 1994-01-27 Gas station monitoring system Expired - Fee Related DE4402779C2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE4402779A DE4402779C2 (en) 1994-01-27 1994-01-27 Gas station monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE4402779A DE4402779C2 (en) 1994-01-27 1994-01-27 Gas station monitoring system

Publications (2)

Publication Number Publication Date
DE4402779A1 DE4402779A1 (en) 1995-08-03
DE4402779C2 true DE4402779C2 (en) 1997-05-28

Family

ID=6509060

Family Applications (1)

Application Number Title Priority Date Filing Date
DE4402779A Expired - Fee Related DE4402779C2 (en) 1994-01-27 1994-01-27 Gas station monitoring system

Country Status (1)

Country Link
DE (1) DE4402779C2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010009657A1 (en) * 2010-02-27 2011-09-01 Gm Global Technology Operations Llc , ( N. D. Ges. D. Staates Delaware ) Device for monitoring charging cable for vehicle i.e. car, has unit for detecting surrounding of vehicle at region of charging cable, where connection of charging cable to vehicle activates detection of surrounding of vehicle

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19615552C2 (en) * 1996-04-19 1999-02-11 Friedrich Brueck Monitoring device
US6721640B2 (en) * 2000-02-03 2004-04-13 Honeywell International Inc. Event based aircraft image and data recording system
DE10033652A1 (en) * 2000-07-11 2002-01-24 Messer Griesheim Gmbh Monitoring system for remote controlled inventory, has head office with evaluation unit that processes signal sequence of data from receiver to obtain actual state of inventory
DE20018421U1 (en) * 2000-10-27 2002-03-07 Heiland Bernd Monitoring and remote control device for buildings or systems
DE10104080B4 (en) * 2001-01-29 2004-08-26 Robert Bosch Gmbh Procedure for reporting an emergency call
DE10260126A1 (en) * 2002-12-19 2004-07-15 Db Systems Gmbh Communication architecture station
DE10261501A1 (en) * 2002-12-23 2004-07-15 Mobotix Ag Data reduction procedures
DE102004044673B4 (en) * 2004-09-08 2007-04-05 Siemens Ag Method for monitoring at least one installation component of a technical installation
DE102009021974A1 (en) * 2009-05-19 2011-03-03 Mobotix Ag Digital video camera
JP6250899B2 (en) * 2015-08-26 2017-12-20 ファナック株式会社 Injection molding system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3735994A1 (en) * 1987-10-23 1989-05-03 Siemens Ag Device for monitoring the pylons of an overhead line
KR920005058B1 (en) * 1989-12-15 1992-06-26 주식회사 금성사 Four-scene divided display device
DE4110649A1 (en) * 1991-04-02 1992-10-22 Telefonbau & Normalzeit Gmbh TELEVISION MONITORING SYSTEM
DE4138538A1 (en) * 1991-11-23 1993-05-27 Philips Patentverwaltung VIDEO TRANSMISSION SYSTEM

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010009657A1 (en) * 2010-02-27 2011-09-01 Gm Global Technology Operations Llc , ( N. D. Ges. D. Staates Delaware ) Device for monitoring charging cable for vehicle i.e. car, has unit for detecting surrounding of vehicle at region of charging cable, where connection of charging cable to vehicle activates detection of surrounding of vehicle

Also Published As

Publication number Publication date
DE4402779A1 (en) 1995-08-03

Similar Documents

Publication Publication Date Title
DE69933402T2 (en) Automatic multimedia data delivery system
DE4402779C2 (en) Gas station monitoring system
US5751345A (en) Image retention and information security system
DE69637446T2 (en) VIDEO MONITORING AND CONFERENCE SYSTEM
WO2014033087A2 (en) Surveillance of a railway track
DE102006001903A1 (en) Method and device for adjusting output images
DE2250387A1 (en) MONITORING METHOD AND DEVICE
EP0578671B1 (en) Tv-based monitoring system
EP0604009B1 (en) Computer operation of video camera
DE20311262U1 (en) Video surveillance system is built into an automobile in the form of a number of external cameras coupled to a recorder
WO2012104434A1 (en) Display system and measurement data recording system comprising integrated digital interfaces
CN114279549A (en) Safe and reliable anti-cheating intelligent weighing system
EP2433424B1 (en) Digital video camera
DE4225466C2 (en) Method for recording traffic data and device for transmitting speed change sign information
DE19506962C5 (en) Video projection system
DE3827928C2 (en) Videophone
DE3825757B4 (en) Method of monitoring a room
DE10033652A1 (en) Monitoring system for remote controlled inventory, has head office with evaluation unit that processes signal sequence of data from receiver to obtain actual state of inventory
DE10140792A1 (en) Device for automatic recording of a meter count in a supply meter has an optical image-capture device, an evaluatory/control unit to pick up an image signal and a data transmitter to send data to a central data-processing unit
DE4339075C2 (en) Method and camera monitoring device for generating a digital image
EP1254567B1 (en) Method and device for identifying errors in signal processing systems used in the field of security technology
CN202169951U (en) Personal safety protecting system for train inspection work
DE212008000005U1 (en) Vehicle management device
WO2007028698A1 (en) Intelligent monitoring camera
WO1999018731A1 (en) Process and device for monitoring a target zone from a removed site

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
D2 Grant after examination
8364 No opposition during term of opposition
8339 Ceased/non-payment of the annual fee