EP0939387A1 - Einrichtung zur Raumüberwachung - Google Patents

Einrichtung zur Raumüberwachung Download PDF

Info

Publication number
EP0939387A1
EP0939387A1 EP99103260A EP99103260A EP0939387A1 EP 0939387 A1 EP0939387 A1 EP 0939387A1 EP 99103260 A EP99103260 A EP 99103260A EP 99103260 A EP99103260 A EP 99103260A EP 0939387 A1 EP0939387 A1 EP 0939387A1
Authority
EP
European Patent Office
Prior art keywords
image sensor
motion detector
signal
evaluation
detector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP99103260A
Other languages
English (en)
French (fr)
Other versions
EP0939387B1 (de
Inventor
Hansjürg Dr. Mahler
Martin Dr. Rechsteiner
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens Building Technologies AG
Original Assignee
Siemens Building Technologies AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=25685622&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=EP0939387(A1) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Priority claimed from EP98103542A external-priority patent/EP0939386A1/de
Application filed by Siemens Building Technologies AG filed Critical Siemens Building Technologies AG
Priority to EP99103260A priority Critical patent/EP0939387B1/de
Publication of EP0939387A1 publication Critical patent/EP0939387A1/de
Application granted granted Critical
Publication of EP0939387B1 publication Critical patent/EP0939387B1/de
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19604Image analysis to detect motion of the intruder, e.g. by frame subtraction involving reference image or background adaptation with time to compensate for changing conditions, e.g. reference image update on detection of light level change
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19697Arrangements wherein non-video detectors generate an alarm themselves

Definitions

  • the present invention relates to a device for room surveillance, with at least an image sensor and at least one presence or motion detector and with one Control and evaluation electronics.
  • the presence or Motion detector exclusively to reduce the power consumption of the preferred battery powered device by turning on the image sensor when needed. Similar thing applies to the video surveillance system described in GB-A-2 309 133, whose image sensor connected to a VCR. Here the presence or motion detector enables better utilization of the magnetic tape used for image storage, by turning on the VCR only when needed.
  • DE-U-297 18 312 which has an image sensor, a stage for Still image creation and still image storage, a stage for creating difference images and one Contains the stage for image analysis, the analysis result is based on predefined criteria of reportability compared, with a positive result, a message is sent to a central station. While this facility allows for intelligent surveillance by checking the signals of the image sensor for tolerance and reporting reliability are carried out automatically, so that a message is only sent to the head office if a positive analysis result is available.
  • the invention is now intended to provide a device of the type mentioned at the beginning, which intelligent surveillance, optimal security against deception and sufficient Robustness guaranteed.
  • control and evaluation electronics has a processing stage for local signal evaluation to which the at least an image sensor and the at least one presence or motion detector connected are, and that in the processing stage a combined evaluation of the signals of the at least one image sensor and the at least one presence or motion detector he follows.
  • the device according to the invention is therefore a two- or multi-criteria motion detector at least one image sensor.
  • This detector has both known dual detectors as well as significant advantages compared to pure image sensors. Compared to the dual detectors, where no or only a very rough spatial resolution is possible, so that A distinction between humans and animals can often not be made, is the inventive Detectors much more robust.
  • the image sensor also offers the option of Classification of objects based on their geometry and movement and thus the intelligent Monitoring and verification and storage of events and later Accessibility from these.
  • the detector according to the invention has the advantage that it even in poor lighting conditions the performance of a presence or Provides motion detector and is therefore fully functional.
  • the presence or Motion detector the image processing algorithms when interpreting difficult situations support.
  • a first preferred embodiment of the device according to the invention is characterized in that that before the combined evaluation of the signals, a separate pre-evaluation both the signals of the at least one image sensor and that of the at least one a presence or motion detector.
  • the formation of the at least one image sensor as a CMOS image sensor has, among other things the advantage of an order of magnitude lower power consumption than CCD cameras and the ability to access individual pixels. The latter allows images with reduced resolution or only read out interesting areas of the image, whereas with CCD cameras the pixels only can be read out line by line.
  • a third preferred embodiment of the device according to the invention is thereby characterized as a means of determining the distance of one of the at least a presence or motion detector detected object and that the Distance signal of this means is fed to the processing stage.
  • the device for room monitoring shown in Fig. 1 consists essentially of a multi-criteria motion detector 1, hereinafter referred to as a detector, and from one hereinafter referred to as electronics control and evaluation electronics 2 with a control stage 3 and a processing stage 4 for local evaluation of the signals of the detector 1.
  • a detector a multi-criteria motion detector 1
  • electronics control and evaluation electronics 2 with a control stage 3 and a processing stage 4 for local evaluation of the signals of the detector 1.
  • this representation only shows the individual function blocks and not the specific ones apparatus construction of the facility again. For example, certain are usually Parts of the electronics are present in detector 1. The latter applies in particular if the detector signals are processed or pre-evaluated in detector 1.
  • the detector 1 consists of at least one image sensor 5 and at least one following Presence or motion detector 6 designated as P / B detector.
  • the image sensor 5 is included a means for measuring the lighting in the monitored room. Both that Image sensor 5 and the P / B detector 6 are each followed by a preprocessing stage 7 or 8, but also included in detector 1 or, if applicable, in processing level 4 can be.
  • the signals reach the processing stage from the preprocessing stage 7 and 8 4, which also the illumination signal of the means for illumination measurement contained in the image sensor 5 is fed.
  • the detector 1 can have a distance meter 9 for determining the distance from the P / B detector 6 events included.
  • Processing level 4 is autonomous and enables local decisions and / or the display of those recorded by the image sensor 5 Photos; it is preferably also for the transmission of the images to a distant one Central 10 equipped where, for example, additional verification can then take place.
  • the P / B detector 6 is a motion or presence detector based on one of the known detection principles Passive infrared, active infrared, microwaves, ultrasound or any Combination of them.
  • CMOS image sensor a so-called APS [APS: active pixel Sensor] used, which is characterized by a very low power consumption and by the possibility of access to individual pixels.
  • APS active pixel Sensor
  • additional application-specific analog or digital functions for example simple Image processing algorithms such as filters or exposure control can be easily integrated.
  • APS the article "A 128 x 128 CMOS Active Pixel Image Sensor for Highly Integrated Imaging Systems "by Sunetra K. Mendis, Sabrina E. Kennedy and Eric R. Fossum, IEDM 93-538 and "128X128 CMOS Photodiode-Type Active Pixel Sensor With On-Chip Timing, Control and Signal Chain Electronics "by R.H. Nixon, S.E. Kemeny, C.O. Staller and E. R. Fossum in SPIE Vol. 2415/117.
  • the image sensor 5 is directed towards the space to be monitored, detects it in terms of image technology, digitizes the image and stores it as a reference image in a memory. If the image sensor 5 forming APS, for example, consists of 128 by 128 pixels, then would be used a wide-angle lens at a distance of 15 m in front of the image sensor 5 one pixel of approximately 12 by 12 cm. Such a grid is suitable, human and distinguish animal shapes from each other relatively reliably.
  • the image sensor 5 makes intervals stores a picture of the monitored room from fractions of a second Images for a certain time and compare them with the reference image and / or with each other.
  • the storage of the images is preferably controlled in such a way that the images sent by the detector 1 immediately preceding and / or immediately following the event identified until saved further and that the remaining images automatically after the specified time to be deleted.
  • the image sensor 5 In order to make a usable picture even in poor lighting conditions the image sensor 5 is sensitive to light and has a large dynamic range (sufficient recognizability of details with strong light / dark contrast) optimized.
  • the functions integrated on the APS chip allow automatic electronic Integrate closure with a dynamic of 1: 1000.
  • the P / B detector 6 essentially serves to detect the potential weaknesses of the image sensor 5 balance. This includes in particular that the image sensor 5 is below a critical one Lighting does not provide image information, and that also changes the image information greatly is often not caused by an intruder compared to the reference image. Man think, for example, of abrupt changes in lighting that by switching the street lighting on / off, passing vehicles with the lights on Headlights, thunderstorms or the like can be caused. In these and the like In cases where the signal from the P / B detector 6 is taken into account, the robustness of the Detector 1 increased significantly. This is taken into account by a combined evaluation the signals of the image sensor 5 and the P / B detector 6 in the processing stage 4 realized.
  • preprocessing stages 7 and 8 in the respective sensor / detector 5 or 6 or in the processing stage 4 be integrated.
  • the signals of the P / B Detekfors 6 in converted a format suitable for combined evaluation with the signal of the image sensor 5 and collected according to their strength.
  • the pre-evaluation is in the form of hardware and / or in the form of a processor core integrated on the APS chip.
  • the number of compared the modified image of the reference image, their clustering and characteristics of the pixel cluster certainly.
  • the reference image is constantly updated, whereby Changes are only adopted in the reference image after checking their stability.
  • the reference image tracking can be done by including the signals of the P / B detector 6 run more stable.
  • processing stage 4 At the input of processing stage 4 there is a signal of the P / B classified according to strength Detector 6, an image signal of the image sensor 5 with information about the number of changes Pixels and the characteristics of the pixel clusters and possibly a signal from the distance meter 9, the distance of the event triggering the signal of the P / B detector 6 indicates.
  • the processing stage 4 continuously receives information about the image sensor 5 medium lighting in the monitored room and weighted in the combined evaluation the signals the signals of the lighting-independent P / B detector 6 the weaker the more the lighting is.
  • the detailed analysis is carried out both statically and dynamically.
  • the cluster areas examined for size, topology and orientation, in the second case regarding the change in size, shape and position of the cluster areas.
  • an attempt is made to move or move from the fixed reference image Filter out objects and then assign them a clear, alarm-relevant category.
  • the difference between humans and animals is the height / aspect ratio of the frequency range in question, the vertical and the horizontal predominates in animals. From the front there is a distinction between people and Animal very difficult; but you can assume that the detected object is not frontal moved towards the detector 1 but sidesteps and is therefore easier to see.
  • FIG. 2 shows a simple example of signal processing in a device for room monitoring without distance meter 9 (Fig. 1).
  • the representation assumed that the preprocessing stages 7 and 8 in the processing stage 4 (FIG. 1) are integrated, so that the preprocessing of the signals of the image sensor 5 and the P / B detector 6 not locally in the relevant sensor or detector, but instead takes place in processing stage 4.
  • the number of pixels changed compared to the reference image is determined. If this number is zero or very small, then the signal of the P / B detector 6 is compared with a threshold value P 2 with P 2 > P 1 . If the signal of the P / B detector 6 is greater than P 2 , an alarm is triggered, if not, then the processing of the relevant sensor signal is terminated. Possibly, the signals can also be analyzed over a longer time interval.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Alarm Systems (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

Die Einrichtung enthält mindestens einen Bildsensor (5) und mindestens einen Präsenz- oder Bewegungsdetektor (6) und eine Steuerungs- und Auswerteelektronik (2). Die Steuerungs- und Auswerteelektronik (2) weist eine Verarbeitungsstufe (4) zur lokalen Signalauswertung auf, an welche der mindestens eine Bildsensor (5) und der mindestens eine Präsenz- oder Bewegungsdetektor (6) angeschlossen sind. In der Verarbeitungsstufe (4) erfolgt eine kombinierte Auswertung der Signale des mindestens einen Bildsensors (5) und des mindestens einen Präsenz- oder Bewegungsdetektors (6).
Durch die aufgrund der Verwendung des Bildsensors (5) und des Präsenz- oder Bewegungsdetektors (6) mögliche kombinierte Signalauswertung ergibt sich eine wesentlich robustere Überwachungseinrichtung mit dem zusätzlichen Vorteil der Möglichkeit der Klassierung der detektierten Objekte anhand ihrer Geometrie und Bewegung. Ausserdem kann der Präsenz- oder Bewegungsdetektor (6) die Bildverarbeitungsalgorithmen des Bildsensors (5) bei der Interpretation schwieriger Situationen unterstützen.

Description

Die vorliegende Erfindung betrifft eine Einrichtung zur Raumüberwachung, mit mindestens einem Bildsensor und mindestens einem Präsenz- oder Bewegungsdetektor und mit einer Steuerungs- und Auswerteelektronik.
Bei einer in der EP-A-0 772 168 beschriebenen Einrichtung dieser Art dient der Präsenz- oder Bewegungsdetektor ausschliesslich zur Reduktion des Stromverbrauchs der vorzugsweise batteriegespeisten Einrichtung, indem er den Bildsensor im Bedarfsfall einschaltet. Ähnliches gilt für das in der GB-A-2 309 133 beschriebene Video-Überwachungssystem, dessen Bildsensor an einen Videorecorder angeschlossen ist. Hier ermöglicht der Präsenz- oder Bewegungsdetektor eine bessere Ausnutzung des zur Bildspeicherung verwendeten Magnetbandes, indem er den Videorecorder nur im Bedarfsfall einschaltet.
Diese bekannten Einrichtungen stellen also gespeicherte Bildinformation zur Verfügung, die von einer Bedienungsperson ausgewertet werden muss, was bekanntlich ausserordentlich monoton und ermüdend ist. Da keinerlei Unterscheidung der aufgezeichneten Ereignisse nach Tolerierbarkeit und Meldewürdigkeit stattfindet, kann von intelligenter Überwachung nicht gesprochen werden.
Bei einer im DE-U-297 18 312 beschriebenen Einrichtung, die einen Bildsensor, eine Stufe zur Festbilderstellung und Festbildabspeicherung, eine Stufe zur Differenzbilderstellung und eine Stufe zur Bildanalyse enthält, wird das Analyseergebnis mit vorgegebenen Kriterien der Meldewürdigkeit verglichen, wobei bei positivem Ergebnis eine Meldung an eine Zentralstation erfolgt. Diese Einrichtung ermöglicht zwar eine intelligente Überwachung, indem die Überprüfung der Signale des Bildsensors auf Tolerierbarkeit und Meldewürdigkeit automatisch erfolgt, so dass nur dann eine Meldung an die Zentrale geht, wenn ein positives Analyseergebnis vorliegt.
Da aber der Bildsensor auf Beleuchtung im Sichtbaren oder im nahen Infrarot angewiesen ist und daher unterhalb einer bestimmten Minimalbeleuchtung keine auswertbaren Bilder liefern kann, ist es fraglich, ob diese Einrichtung die gewünschte Sicherheit bietet oder, mit anderen Worten, ob sie ausreichend robust ist.
Durch die Erfindung soll nun eine Einrichtung der eingangs genannten Art angegeben werden, die eine intelligente Überwachung, eine optimale Täuschungssicherheit und eine ausreichende Robustheit gewährleistet.
Diese Aufgabe wird erfindungsgemäss dadurch gelöst, dass die Steuerungs- und Auswerteelektronik eine Verarbeitungsstufe zur lokalen Signalauswertung aufweist, an welche der mindestens eine Bildsensor und der mindestens eine Präsenz- oder Bewegungsdetektor angeschlossen sind, und dass in der Verarbeitungsstufe eine kombinierte Auswertung der Signale des mindestens einen Bildsensors und des mindestens einen Präsenz- oder Bewegungsdetektors erfolgt.
Die erfindungsgemässe Einrichtung ist also ein Zwei- oder Mehrkriterienbewegungsmelder mit mindestens einem Bildsensor. Dieser Melder weist sowohl gegenüber bekannten Dual-Meldern als auch gegenüber reinen Bildsensoren wesentliche Vorteile auf. Verglichen mit den Dual-Meldern, bei denen keine oder nur eine sehr grobe räumliche Auflösung möglich ist, so dass eine Unterscheidung zwischen Mensch und Tier oftmals nicht erfolgen kann, ist der erfindungsgemässe Melder wesentlich robuster. Ausserdem bietet der Bildsensor die Möglichkeit der Klassifizierung der Objekte anhand ihrer Geometrie und Bewegung und damit der intelligenten Überwachung sowie der Verifikation und der Speicherung von Ereignissen und der späteren Abrufbarkeit von diesen.
Gegenüber einem reinen Bildsensor hat der erfindungsgemässe Melder den Vorteil, dass er auch bei schlechten Beleuchtungsverhältnissen immer noch die Leistung eines Präsenz- oder Bewegungsdetektors erbringt und damit voll funktionsfähig ist. Zudem kann der Präsenz- oder Bewegungsdetektor die Bildverarbeitungsalgorithmen bei der Interpretation schwieriger Situationen unterstützen.
Eine erste bevorzugte Ausführungsform der erfindungsgemässen Einrichtung ist dadurch gekennzeichnet, dass vor der kombinierten Auswertung der Signale eine getrennte Vorauswertung sowohl der Signale des mindestens einen Bildsensors als auch derjenigen des mindestens einen Präsenz- oder Bewegungsdetektors erfolgt.
Eine zweite bevorzugte Ausführungsform der erfindungsgemässen Einrichtung ist dadurch gekennzeichnet, dass der mindestens eine Bildsensor durch einen CMOS-Bildsensor, vorzugsweise einen Aktiv Pixel Sensor, gebildet ist.
Die Ausbildung des mindestens einen Bildsensors als CMOS-Bildsensor hat unter anderem den Vorteil eines gegenüber CCD-Kameras um Grössenordnungen tieferen Stromverbrauchs und der Zugriffsmöglichkeit auf einzelne Pixel. Letzteres erlaubt, Bilder mit reduzierter Auflösung oder nur interessante Bildbereiche auszulesen, wogegen bei CCD-Kameras die Pixel nur zeilenweise ausgelesen werden können.
Eine dritte bevorzugte Ausführungsform der erfindungsgemässen Einrichtung ist dadurch gekennzeichnet, dass ein Mittel zur Bestimmung der Entfernung eines von dem mindestens einen Präsenz- oder Bewegungsdetektor detektierten Objekts vorgesehen und dass das Distanzsignal dieses Mittels der Verarbeitungsstufe zugeführt ist.
Im folgenden wird die Erfindung anhand eines Ausführungsbeispiels und der Zeichnungen näher erläutert; es zeigt:
  • Fig. 1 ein Blockschema eines erfindungsgemässen Einrichtung zur Raumüberwachung; und
  • Fig. 2 ein Flussdiagramm zur Erläuterung der Signalverarbeitung.
  • Die in Fig. 1 dargestellte Einrichtung zur Raumüberwachung besteht im wesentlichen aus einem nachfolgend als Melder bezeichneten Mehrkriterienbewegungsmelder 1 und aus einer nachfolgend als Elektronik bezeichneten Steuerungs- und Auswerteelektronik 2 mit einer Steuerstufe 3 und einer Verarbeitungsstufe 4 zur lokalen Auswertung der Signale des Melders 1. Selbstverständlich gibt diese Darstellung nur die einzelnen Funktionsblöcke und nicht den konkreten apparativen Aufbau der Einrichtung wieder. So werden beispielsweise in der Regel bestimmte Teile der Elektronik im Melder 1 vorhanden sein. Letzteres gilt insbesondere dann, wenn im Melder 1 eine Aufbereitung oder Vorauswertung der Meldersignale erfolgt.
    Der Melder 1 besteht aus mindestens einem Bildsensor 5 und mindestens einem nachfolgend als P/B Dedektor bezeichneten Präsenz- oder Bewegungsdetektor 6. Der Bildsensor 5 ist mit einem Mittel zur Messung der Beleuchtung im überwachten Raum ausgerüstet. Sowohl dem Bildsensor 5 als auch dem P/B Detektor 6 ist je eine Vorverarbeitungsstufe 7 bzw. 8 nachgeschaltet, die aber auch im Melder 1 oder gegebenenfalls in der Verarbeitungsstufe 4 enthalten sein kann. Von der Vorverarbeitungsstufe 7 und 8 gelangen die Signale in die Verarbeitungsstufe 4, welcher auch das Beleuchtungssignal der im Bildsensor 5 enthaltenen Mittel zur Beleuchtungsmessung zugeführt ist.
    Als Option kann der Melder 1 einen Distanzmesser 9 zur Bestimmung der Entfernung der vom P/B Detektor 6 registrierten Ereignisse enthalten. Die Verarbeitungsstufe 4 ist autonom und ermöglicht lokale Entscheidungen und/oder die Anzeige der vom Bildsensor 5 aufgenommenen Bilder; vorzugsweise ist sie auch zur Übertragung der Bilder an eine räumlich entfernte Zentrale 10 ausgerüstet, wo dann beispielsweise eine zusätzliche Verifikation erfolgen kann.
    Der P/B Detektor 6 ist ein Bewegungs- oder Präsenzmelder nach einem der bekannten Detektionsprinzipien Passiv-Infrarot, Aktiv-Infrarot, Mikrowellen, Ultraschall oder einer beliebigen Kombination davon. Der Bildsensor 5 ist im Bereich des sichtbaren Lichts, im nahen Infrarot oder im langwelligen Infrarot (Wärmestrahlung) empfindlich; er kann auf einem üblichen bildgebenden Verfahren (CCD [CCD: charge-coupled device], CID [CID: charge injection device] oder CMOS [CMOS: complementary metal oxide semiconductor = komplementäre Metall-OxidHalbleiter-Struktur]) basieren.
    Vorzugsweise wird ein spezieller CMOS-Bildsensor, ein sogenannter APS [APS: Aktiv Pixel Sensor] verwendet, der sich durch einen sehr geringen Stromverbrauch und durch die Möglichkeit des Zugriffs auf einzelne Pixel auszeichnet. Ausserdem können in einem solchen APS zusätzliche applikationsspezifische analoge oder digitale Funktionen, zum Beispiel einfache Bildverarbeitungsalgorithmen wie Filter oder Belichtungssteuerung, einfach integriert werden. Bezüglich APS wird auf die Artikel "A 128 x- 128 CMOS Active Pixel Image Sensor for Highly Integrated Imaging Systems" von Sunetra K. Mendis, Sabrina E. Kennedy und Eric R. Fossum, IEDM 93-538 und "128X128 CMOS Photodiode-Type Active Pixel Sensor With On-Chip Timing, Control and Signal Chain Electronics" von R. H. Nixon, S. E. Kemeny, C. O. Staller und E. R. Fossum in SPIE Vol. 2415/117, verwiesen.
    Der Bildsensor 5 ist auf den zu überwachenden Raum gerichtet, erfasst diesen bildtechnisch, digitalisiert das Bild und legt es als Referenzbild in einem Speicher ab. Wenn der den Bildsensor 5 bildende APS beispielsweise aus 128 mal 128 Pixeln besteht, dann würde bei Verwendung einer Weitwinkeloptik im Abstand von 15 m vor dem Bildsensor 5 einem Pixel eine Fläche von ungefähr 12 mal 12 cm entsprechen. Eine solche Rasterung ist geeignet, menschliche und tierische Gestalten relativ zuverlässig voneinander zu unterscheiden.
    Die Möglichkeit der Erkennung eines Menschen im Abstand von 15 m ist sehr vorteilhaft, und die Fläche des überwachten Raums in diesem Erkennungsabstand von etwa 15 mal 15 m ist durchaus realistisch. Im aktiven Zustand der Einrichtung macht dann der Bildsensor 5 in Abständen von Sekundenbruchteilen jeweils ein Bild des überwachten Raums, speichert diese Bilder für eine bestimmte Zeit und vergleicht sie mit dem Referenzbild und/oder untereinander. Die Speicherung der Bilder ist vorzugsweise so gesteuert, dass die Bilder, die einem vom Melder 1 festgestellten Ereignis unmittelbar vorausgehen und/oder diesem unmittelbar folgen, bis auf weiteres gespeichert und dass die restlichen Bilder nach Ablauf der genannten Zeit automatisch gelöscht werden.
    Um auch bei schlechten Beleuchtungsverhältnissen noch ein brauchbares Bild machen zu können, ist der Bildsensor 5 auf grosse Lichtempfindlichkeit und einen grossen Dynamikbereich (ausreichende Erkennbarkeit von Einzelheiten bei starkem Hell/ Dunkel-Kontrast) optimiert. Die auf dem APS-Chip integrierten Funktionen erlauben es, einen automatischen elektronischen Verschluss mit einer Dynamik von 1:1000 mitzuintegrieren.
    Der P/B Detektor 6 dient im wesentlichen dazu, die potentiellen Schwächen des Bildsensors 5 auszugleichen. Dazu gehört insbesondere, dass der Bildsensor 5 unterhalb einer kritischen Beleuchtung keine Bildinformation liefert, und dass auch eine starke Änderung der Bildinformation gegenüber dem Referenzbild oftmals nicht von einem Eindringling verursacht ist. Man denke in diesem Zusammenhang beispielsweise an abrupte Beleuchtungsänderungen, die durch Ein/Ausschalten der Strassenbeleuchtung, vorbeifahrende Fahrzeuge mit aufgeblendeten Scheinwerfern, Gewitter oder dergleichen verursacht sein können. In diesen und ähnlichen Fällen wird durch Mitberücksichtigung des Signals des P/B Detektors 6 die Robustheit des Melders 1 ganz wesentlich erhöht. Diese Mitberücksichtigung wird durch eine kombinierte Auswertung der Signale des Bildsensors 5 und des P/B Detektors 6 in der Verarbeitungsstufe 4 realisiert.
    Es hat sich gezeigt, dass es vorteilhaft ist, die Signale des Bildsensors 5 und des P/B Detektors 6 vor der kombinierten Auswertung einer getrennten Vorauswertung zu unterziehen, welche in den Vorverarbeitungsstufen 7 bzw. 8 erfolgt. Wie schon erwähnt wurde, können die Vorverarbeitungsstufen 7 und 8 in den jeweiligen Sensor/Detektor 5 bzw. 6 oder in die Verarbeitungsstufe 4 integriert sein. Bei der Vorauswertung werden die Signale des P/B Detekfors 6 in ein zur kombinierten Auswertung mit dem Signal des Bildsensors 5 geeignetes Format umgewandelt und nach ihrer Stärke kassiert. Falls der Melder 1 einen Distanzmesser 9 enthält, dann wird dieser bei Vorhandensein eines Signals des P/B Detektors 6 von entsprechender Stärke von der Verarbeitungsstufe 4 über die Steuerstufe 3 aktiviert und liefert an die Verarbeitungsstufe eine Information über die Entfernung des soeben detektierten Ereignisses oder Objekts vom Melder 1. Mit Hilfe dieser Distanzinformation können aus dem Signal des Bildsensors 5 eindeutige Schlüsse auf die Grösse eines detektierten Objekts und damit auf dessen Natur, wie beispielsweise Mensch oder Tier, gezogen werden.
    Beim Bildsensor 5 ist die Vorauswertung als Hardware und/oder in Form eines Prozessorkerns auf dem APS-Chip integriert. Bei der Vorauswertung der Signale werden die Anzahl der gegenüber dem Referenzbild geänderten Pixel, ihre Häufung (clustering) und Merkmale der Pixelhäufung bestimmt. Dabei wird das Referenzbild ständig nachgeführt, wobei festgestellte Änderungen erst nach Überprüfung ihrer Stabilität in das Referenzbild übernommen werden. Die Referenzbildnachführung kann dabei durch Einbezug der Signale des P/B Detektors 6 stabiler ausgeführt werden.
    Am Eingang der Verarbeitungsstufe 4 liegt also ein nach Stärke klassiertes Signal des P/B Detektors 6, ein Bildsignal des Bildsensors 5 mit Informationen über die Anzahl der geänderten Pixel und über die Merkmale der Pixelhäufungen und gegebenenfalls ein Signal des Distanzmessers 9, das die Entfernung des das Signal des P/B Detektors 6 auslösenden Ereignisses angibt. Ausserdem erhält die Verarbeitungsstufe 4 vom Bildsensor 5 laufend Angaben über die mittlere Beleuchtung im überwachten Raum und gewichtet bei der kombinierten Auswertung der Signale die Signale des beleuchtungsunabhängigen P/B Detektors 6 umso mehr je schwächer die Beleuchtung ist.
    Die kombinierte Auswertung der Signale ergibt am Ausgang der Verarbeitungsstufe 4 eine Entscheidung Alarm oder Nicht-Alarm, wobei diese Entscheidung im wesentlichen den Bildinhalt, die Gesamtbeleuchtung, die Information vom P/B Detektor 6 und die Änderung und/oder Vorgeschichte dieser nachfolgend als globale Kriterien bezeichneten Parameter berücksichtigt. Dabei sind Plausibilitätsverknüpfungen sehr hilfreich: Wenn sich beispielsweise Beleuchtung und Bildinhalt rasch und stark ändern, das Signal des P/B Detektors 6 aber schwach ist, dann wird kein Alarm gegeben, sondern es wird die Stabilität des neuen Bildes geprüft und in diesem nach Bewegungen gesucht. Wenn der P/B Detektor 6 keine Bewegung meldet und nur eine Beleuchtungs- und/oder Bildänderung stattgefunden hat, dann wurde ziemlich sicher eine Beleuchtung ein- oder ausgeschaltet, so dass kein Alarmfall vorliegt. Ob tatsächlich ein Beleuchtungswechsel stattgefunden hat, kann anhand der Stabilität des neuen Bildes leicht überprüft werden.
    Die Bildänderungen können in drei Kategorien eingeteilt werden:
    • Geringe Anzahl geänderter Pixel absolut oder pro Häufungsbereich: Unterkritische Änderung, die nicht für ein Alarmereignis genügt. Es findet keine weitere Auswertung statt.
    • Mittlere Anzahl geänderter Pixel absolut oder pro Häufungsbereich: Es findet eine Detailanalyse statt.
    • Grosse Anzahl geänderter Pixel absolut oder pro Häufungsbereich: Es erfolgt zuerst eine Überprüfung der globalen Kriterien und sofern diese keine vernünftige Erklärung liefert, anschliessend eine Detailanalyse.
    Die Detailanalyse erfolgt sowohl statisch als auch dynamisch. Im ersten Fall werden die Häufungsbereiche bezüglich Grösse, Topologie und Orientierung untersucht, im zweiten Fall bezüglich der Veränderung von Grösse, Form und Position der Häufungsbereiche.
    Im wesentlichen wird also versucht, aus dem festen Referenzbild bewegte oder sich bewegende Objekte herauszufiltern und diesen dann eine eindeutige, alarmrelevante Kategorie zuzuordnen. So wird beispielsweise der Unterschied zwischen Mensch und Tier am Höhen-/Seitenverhältnis des betreffenden Häufigkeitsbereichs erkannt, wobei bei Menschen die Vertikale und bei Tieren die Horizontale überwiegt. Von vorne ist eine Unterscheidung zwischen Mensch und Tier sehr schwierig; aber man kann davon ausgehen, dass sich das erfasste Objekt nicht frontal auf den Melder 1 zubewegt sondern seitlich ausweicht und dadurch besser erkennbar wird. Neben diesen quantitativen Kriterien für die statische Detailanalyse kann man für die dynamische Detailanalyse typische Bewegungsabläufe von Menschen und Tieren analysieren und abspeichern und die vom Bildsensor 5 festgestellten Veränderungen mit diesen Mustern vergleichen.
    Das Flussdiagramm von Fig. 2 zeigt ein einfaches Beispiel der Signalverarbeitung in einer Einrichtung zur Raumüberwachung ohne Distanzmesser 9 (Fig. 1). Der Einfachheit halber wird bei der Darstellung davon ausgegangen, dass die Vorverarbeitungsstufen 7 und 8 in die Verarbeitungsstufe 4 (Fig. 1) integriert sind, so dass die Vorverarbeitung der Signale des Bildsensors 5 und des P/B Detektors 6 nicht lokal im betreffenden Sensor beziehungsweise Detektor sondern in der Verarbeitungsstufe 4 stattfindet.
    Darstellungsgemäss erfolgt im Anschluss an die Vorverarbeitung der Sensorsignale eine Entscheidung, ob die Raumhelligkeit für den Bildsensor 5 ausreichend ist. Ist dies nicht der Fall, ist also die Raumhelligkeit sehr gering, dann wird nur das Signal des P/B Detektors 6 untersucht. Bei dieser Untersuchung wird das letztere Signal mit einem Schwellwert P1 verglichen, dessen Grösse ungefähr der Alarmschwelle eines P/B Detektors des betreffenden Typs entspricht. Wenn also der PB Detektor 6 ein Passiv-Infrarot-Detektor ist, dann wird der Schwellwert P1 entsprechend der Alarmschwelle eines solchen Passiv-Infrarot-Detektors gewählt. Wenn das Signal des P/B Detektors 6 grösser als P1 ist, wird Alarm ausgelöst, wenn nicht, dann wird die Verarbeitung des betreffenden Sensorsignals abgebrochen und der nächste Verarbeitungszyklus durchgeführt.
    Wenn die Raumhelligkeit für den Bildsensor 5 ausreichend ist, dann wird die Anzahl der gegenüber dem Referenzbild veränderten Pixel bestimmt. Ist diese Anzahl null oder sehr klein, dann wird das Signal des P/B Detektors 6 mit einem Schwellwert P2 mit P2> P1 verglichen. Wenn das Signal des P/B Detektors 6 grösser als P2 ist, wird Alarm ausgelöst, wenn nicht, dann wird die Verarbeitung des betreffenden Sensorsignals abgebrochen. Eventuell kann auch eine Analyse der Signale über ein längeres Zeitintervall erfolgen.
    Wenn die Anzahl der gegenüber dem Referenzbild veränderten Pixel von mittlerer Grösse ist, dann erfolgt eine Detailanalyse mit Berücksichtigung der Beleuchtungssituation mit nachfolgender Untersuchung, ob von beiden Meldern (Bildsensor 5 und P/B Detektor 6) ein Objekt detektiert wurde. Ist dies der Fall, wird Alarm ausgelöst, wenn nicht, dann wird die Verarbeitung des betreffenden Sensorsignals abgebrochen.
    Wenn die Anzahl der gegenüber dem Referenzbild veränderten Pixel gross ist, dann wird untersucht, ob eine starke Beleuchtungsänderung stattgefunden hat, was anhand der Beleuchtungsmessung durch den Bildsensor 5 erfolgt, und zusätzlich das Signal des P/B Detektors 6 kleiner ist ein Schwellwert P3, mit P3 << P1. Sind beide Bedingungen erfüllt, wird die Verarbeitung des betreffenden Sensorsignals abgebrochen. Sind nicht beide Bedingungen erfüllt, dann erfolgt eine Detailanalyse mit Berücksichtigung der Beleuchtungssituation mit nachfolgender Untersuchung, ob von beiden Meldern (Bildsensor 5 und P/B Detektor 6) ein Objekt detektiert wurde. Ist dies der Fall, wird Alarm ausgelöst, wenn nicht, dann wird die Verarbeitung des betreffenden Sensorsignals abgebrochen.
    Man erreicht auf die beschriebene Weise eine stark verbesserte Unterscheidung zwischen Menschen und Haustieren und Menschen und Insekten, womit zwei der hauptsächlichsten Quellen von Täuschungsalarmen beseitigt sind. Selbstverständlich wird diese Unterscheidung durch das Distanzsignal des Distanzmessers 7 sprunghaft verbessert, weil dann ein eindeutiger Rückschluss auf die Grösse des detektierten Objekts möglich ist.

    Claims (17)

    1. Einrichtung zur Raumüberwachung, mit mindestens einem Bildsensor (5) und mindestens einem Präsenz- oder Bewegungsdetektor (6) und mit einer Steuerungs- und Auswerteelektronik (2), dadurch gekennzeichnet, dass die Steuerungs- und Auswerteelektronik (2) eine Verarbeitungsstufe (4) zur lokalen Signalauswertung aufweist, an welche der mindestens eine Bildsensor (5) und der mindestens eine Präsenz- oder Bewegungsdetektor (6) angeschlossen sind, und dass in der Verarbeitungsstufe (4) eine kombinierte Auswertung der Signale des mindestens einen Bildsensors (5) und des mindestens einen Präsenz- oder Bewegungsdetektors (6) erfolgt.
    2. Einrichtung nach Anspruch 1, dadurch gekennzeichnet, dass vor der kombinierten Auswertung der Signale eine getrennte Vorauswertung (7, 8) sowohl der Signale des mindestens einen Bildsensors (5) als auch derjenigen des mindestens einen Präsenz- oder Bewegungsetektors (6) erfolgt.
    3. Einrichtung nach Anspruch 2, dadurch gekennzeichnet, dass die genannte Vorauswertung (7, 8) im jeweiligen Sensor oder Detektor (5 bzw. 6) oder in der Verarbeitungsstufe (4) erfolgt.
    4. Einrichtung nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass der mindestens eine Bildsensor (5) durch einen CMOS-Bildsensor, vorzugsweise einen Aktiv Pixel Sensor, gebildet ist.
    5. Einrichtung nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass ein Speicher für die vom Bildsensor (5) aufgenommenen Bilder vorgesehen ist, und dass dieser Speicher so gesteuert ist, dass eine Speicherung derjenigen Bilder erfolgt, welche in Kombination mit dem Signal des Präsenz- oder Bewegungsdetektors (6)zu einem Alarmentscheid geführt haben.
    6. Einrichtung nach Anspruch 5, dadurch gekennzeichnet, dass zusätzlich eine Speicherung der den genannten Bildern unmittelbar vorausgehenden und/oder nachfolgenden Bilder erfolgt.
    7. Einrichtung nach Anspruch 5 oder 6, dadurch gekennzeichnet, dass eine Schnittstelle zum Auslesen der gespeicherten Bilder vorgesehen ist, und dass das Auslesen vorzugsweise mit einem PC erfolgt.
    8. Einrichtung nach einem der Ansprüche 5 bis 7, dadurch gekennzeichnet, dass ein Mittel zur Übertragung der genannten gespeicherten Bilder an eine von der Überwachungseinrichtung räumlich getrennte Station vorgesehen ist.
    9. Einrichtung nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass ein Mittel (9) zur Bestimmung der Entfernung eines von dem mindestens einen Präsenz- oder Bewegungsdetektor (6) detektierten Objekts vorgesehen und dass das Distanzsignal dieses Mittels der Verarbeitungsstufe (4) zugeführt ist.
    10. Einrichtung nach Anspruch 4, dadurch gekennzeichnet, dass bei der Vorauswertung (7) der Signale des mindestens einen Bildsensors (5) eine Bestimmung der Anzahl der gegenüber einem Referenzzbild geänderten Pixel und/oder von deren Häufung und/oder von deren Verteilung über das Bild erfolgt.
    11. Einrichtung nach einem der Ansprüche 1 bis 10, dadurch gekennzeichnet, dass die kombinierte Auswertung der Signale durch von diesen abgeleitete Parameter beeinflusst ist.
    12. Einrichtung nach Anspruch 11, dadurch gekennzeichnet, dass durch den mindestens einen Bildsensor (5) eine laufende Messung der mittleren Beleuchtung des überwachten Raumes erfolgt, und dass bei der kombinierten Auswertung der Signale die Gewichtung des Signals des mindestens einen Präsenz- oder Bewegungsdetektors (6) von der mittleren Beleuchtung abhängig ist und mit abnehmender mittlerer Beleuchtung zunimmt.
    13. Einrichtung nach Anspruch 12, dadurch gekennzeichnet, dass bei für den Betrieb des Bildsensors (5) nicht ausreichender Beleuchtung nur eine Auswertung des Signals des Präsenz- oder Bewegungsdetektors (6) erfolgt.
    14. Einrichtung nach Anspruch 13, dadurch gekennzeichnet, dass ein Vergleich des Signals des Präsenz/Bewegungsdetektors (6) mit einem ersten Schwellwert (P1) erfolgt, dessen Grösse ungefähr der Alarmschwelle eines Präsenz- oder Bewegungsdetektors des betreffenden Typs entspricht.
    15. Einrichtung nach einem der Ansprüche 1 bis 12, dadurch gekennzeichnet, dass bei für den Betrieb des Bildsensors (5) ausreichender Beleuchtung ein Vergleich des Signals des Präsenz- oder Bewegungsdetektors (6) mit von der Anzahl der gegenüber einem Referenzbild veränderten Pixel in dem vom Bildsensor (5) aufgenommenen Bild abhängigen Schwellwerten (P2, P3) erfolgt.
    16. Einrichtung nach Anspruch 15, dadurch gekennzeichnet, dass bei nur sehr wenig gegenüber dem Referenzbild veränderten Pixeln ein Vergleich des Signals des Präsenz- oder Bewegungsdetektors (6) mit einem über dem ersten Schwellwert (P1) liegenden zweiten Schwellwert (P2) erfolgt, wobei diese Analyse über ein längeres Zeitintervall erfolgen kann.
    17. Einrichtung nach Anspruch 15, dadurch gekennzeichnet, dass bei vielen gegenüber dem Referenzbild veränderten Pixeln ein Vergleich des Signals des Präsenz- oder Bewegungsmelders (6) mit einem wesentlich unter dem ersten Schwellwert (P1) liegenden dritten Schwellwert (P3) erfolgt, und dass nur dann eine weitere Verarbeitung der Sensorsignale stattfindet, wenn nicht gleichzeitig das Signal des Präsenz- oder Bewegungsmelders (6) unterhalb des dritten Schwellwerts (P3) liegt und vom Bildsensor (5) eine grosse Beleuchtungsänderung registriert wurde.
    EP99103260A 1998-02-28 1999-02-19 Einrichtung zur Raumüberwachung Expired - Lifetime EP0939387B1 (de)

    Priority Applications (1)

    Application Number Priority Date Filing Date Title
    EP99103260A EP0939387B1 (de) 1998-02-28 1999-02-19 Einrichtung zur Raumüberwachung

    Applications Claiming Priority (5)

    Application Number Priority Date Filing Date Title
    EP98103542A EP0939386A1 (de) 1998-02-28 1998-02-28 Einrichtung zur Raumüberwachung
    EP98103542 1998-02-28
    CH76798 1998-03-31
    CH76798 1998-03-31
    EP99103260A EP0939387B1 (de) 1998-02-28 1999-02-19 Einrichtung zur Raumüberwachung

    Publications (2)

    Publication Number Publication Date
    EP0939387A1 true EP0939387A1 (de) 1999-09-01
    EP0939387B1 EP0939387B1 (de) 2003-09-17

    Family

    ID=25685622

    Family Applications (1)

    Application Number Title Priority Date Filing Date
    EP99103260A Expired - Lifetime EP0939387B1 (de) 1998-02-28 1999-02-19 Einrichtung zur Raumüberwachung

    Country Status (5)

    Country Link
    US (1) US6396534B1 (de)
    EP (1) EP0939387B1 (de)
    DE (1) DE59906980D1 (de)
    DK (1) DK0939387T3 (de)
    ES (1) ES2209257T3 (de)

    Cited By (1)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    EP1376502A1 (de) * 2002-06-10 2004-01-02 Siemens Building Technologies AG Objektschutz-Einrichtung

    Families Citing this family (33)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    GB2350510A (en) * 1999-05-27 2000-11-29 Infrared Integrated Syst Ltd A pyroelectric sensor system having a video camera
    US6714977B1 (en) * 1999-10-27 2004-03-30 Netbotz, Inc. Method and system for monitoring computer networks and equipment
    US7330886B2 (en) 1999-10-27 2008-02-12 American Power Conversion Corporation Network appliance management
    US7392309B2 (en) * 1999-10-27 2008-06-24 American Power Conversion Corporation Network appliance management
    JP4146592B2 (ja) * 1999-11-12 2008-09-10 株式会社日立製作所 適応通信方法及び分散システムを構成する機器
    JP2001272708A (ja) * 2000-03-28 2001-10-05 Fuji Photo Optical Co Ltd 可視/赤外両用撮像装置
    DK1360796T3 (da) * 2001-01-26 2010-05-10 American Power Conv Corp Fremgangsmåde og system til at indstille et sæt netværksapparater som kan forbindes for at tilvejebringe forbedret samarbejde, skalerbarhed og pålidelighed
    US8271626B2 (en) 2001-01-26 2012-09-18 American Power Conversion Corporation Methods for displaying physical network topology and environmental status by location, organization, or responsible party
    TWI258312B (en) * 2001-03-22 2006-07-11 Kuang-Yao Lo Monitoring method for comparing image frames
    TW503650B (en) * 2001-04-13 2002-09-21 Huper Lab Co Ltd Method using image screen to detect movement of object
    EP1470026B1 (de) * 2002-02-02 2007-01-24 Qinetiq Limited Kopfpositionssensor
    US6981876B2 (en) * 2002-03-01 2006-01-03 Accelerized Golf, Llc Ergonomic motion and athletic activity monitoring and training system and method
    US20030184672A1 (en) * 2002-04-02 2003-10-02 Quen-Zong Wu Digital image monitoring system with functions of motion detection and auto iris
    EP1502201B1 (de) 2002-05-03 2009-12-23 American Power Conversion Corporation Verfahren und vorrichtung zum sammeln und anzeigen von netzwerkgeräteinformationen
    US8566292B2 (en) 2003-04-14 2013-10-22 Schneider Electric It Corporation Method and system for journaling and accessing sensor and configuration data
    US7542963B2 (en) * 2003-04-14 2009-06-02 American Power Conversion Corporation Method and system for journaling and accessing sensor and configuration data
    WO2004090679A2 (en) * 2003-04-14 2004-10-21 Netbotz, Inc. Environmental monitoring device
    DE602004024296D1 (de) * 2003-04-14 2010-01-07 American Power Conv Corp Erweiterbare sensorüberwachung, warnungsverarbeitungs- und benachrichtigungssystem und verfahren
    US7627651B2 (en) 2003-10-27 2009-12-01 American Power Conversion Corporation System and method for network device communication
    US8184154B2 (en) * 2006-02-27 2012-05-22 Texas Instruments Incorporated Video surveillance correlating detected moving objects and RF signals
    ES2612328T3 (es) 2007-05-15 2017-05-16 Schneider Electric It Corporation Métodos y sistemas para gestionar potencia y enfriamiento de una instalación
    US20110133930A1 (en) * 2009-12-09 2011-06-09 Honeywell International Inc. Filtering video events in a secured area using loose coupling within a security system
    US8990536B2 (en) 2011-06-01 2015-03-24 Schneider Electric It Corporation Systems and methods for journaling and executing device control instructions
    US9965564B2 (en) 2011-07-26 2018-05-08 Schneider Electric It Corporation Apparatus and method of displaying hardware status using augmented reality
    CN104137105B (zh) 2011-12-22 2017-07-11 施耐德电气It公司 关于瞬时事件对数据中心中的温度的影响分析
    US9256781B2 (en) 2012-05-10 2016-02-09 Pointguard Ltd. System and method for computer vision based tracking of an object
    JP6638194B2 (ja) * 2015-02-27 2020-01-29 セイコーエプソン株式会社 3次元画像処理システム、3次元画像処理装置および3次元画像処理方法
    US10134255B2 (en) * 2015-03-03 2018-11-20 Technomirai Co., Ltd. Digital future now security system, method, and program
    US11523090B2 (en) 2015-03-23 2022-12-06 The Chamberlain Group Llc Motion data extraction and vectorization
    IL242928A0 (en) * 2015-12-03 2016-04-21 Pointgrab Ltd A method and system for detecting presence in the area
    US9965841B2 (en) 2016-02-29 2018-05-08 Schneider Electric USA, Inc. Monitoring system based on image analysis of photos
    US10417882B2 (en) 2017-10-24 2019-09-17 The Chamberlain Group, Inc. Direction sensitive motion detector camera
    US11222081B2 (en) 2017-11-27 2022-01-11 Evoqua Water Technologies Llc Off-line electronic documentation solutions

    Citations (7)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    GB2064189A (en) * 1979-11-09 1981-06-10 Ascotts Ltd Surveillance System
    JPH027195A (ja) * 1988-06-27 1990-01-11 Mitsui Eng & Shipbuild Co Ltd 異常監視システム
    EP0543148A1 (de) * 1991-11-21 1993-05-26 GRUNDIG E.M.V. Elektro-Mechanische Versuchsanstalt Max Grundig GmbH &amp; Co. KG Verfahren und Vorrichtung zum Erkennen von Veränderungen im Bildinhalt eines Videobildes
    US5229850A (en) * 1990-07-30 1993-07-20 Kabushiki Kaisha Toshiba Video monitoring system including a memory for storing and transmitting a video signal immediately following the occurrence of an event
    DE29607184U1 (de) * 1995-04-27 1996-07-18 Frauhammer Alfred Gefahrenmeldeanlage mit Videoüberwachung
    WO1997006453A1 (en) * 1995-08-04 1997-02-20 Joseph Lai Motion detection imaging device and method
    DE29718213U1 (de) * 1997-10-14 1997-12-04 Waldmann, Günter, Dipl.-Ing., 91052 Erlangen Vorrichtung zur automatischen, intelligenten Überwachung

    Family Cites Families (5)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    US5473368A (en) * 1988-11-29 1995-12-05 Hart; Frank J. Interactive surveillance device
    US5581297A (en) * 1992-07-24 1996-12-03 Intelligent Instruments Corporation Low power video security monitoring system
    US5825413A (en) 1995-11-01 1998-10-20 Thomson Consumer Electronics, Inc. Infrared surveillance system with controlled video recording
    GB2309133A (en) 1996-01-11 1997-07-16 Richad Thomas Fortescue Video surveillance system including video recorder timing control device
    US5982418A (en) * 1996-04-22 1999-11-09 Sensormatic Electronics Corporation Distributed video data storage in video surveillance system

    Patent Citations (7)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    GB2064189A (en) * 1979-11-09 1981-06-10 Ascotts Ltd Surveillance System
    JPH027195A (ja) * 1988-06-27 1990-01-11 Mitsui Eng & Shipbuild Co Ltd 異常監視システム
    US5229850A (en) * 1990-07-30 1993-07-20 Kabushiki Kaisha Toshiba Video monitoring system including a memory for storing and transmitting a video signal immediately following the occurrence of an event
    EP0543148A1 (de) * 1991-11-21 1993-05-26 GRUNDIG E.M.V. Elektro-Mechanische Versuchsanstalt Max Grundig GmbH &amp; Co. KG Verfahren und Vorrichtung zum Erkennen von Veränderungen im Bildinhalt eines Videobildes
    DE29607184U1 (de) * 1995-04-27 1996-07-18 Frauhammer Alfred Gefahrenmeldeanlage mit Videoüberwachung
    WO1997006453A1 (en) * 1995-08-04 1997-02-20 Joseph Lai Motion detection imaging device and method
    DE29718213U1 (de) * 1997-10-14 1997-12-04 Waldmann, Günter, Dipl.-Ing., 91052 Erlangen Vorrichtung zur automatischen, intelligenten Überwachung

    Non-Patent Citations (2)

    * Cited by examiner, † Cited by third party
    Title
    NIXON R H ET AL: "128X128 CMOS PHOTODIODE-TYPE ACTIVE PIXEL SENSOR WITH ON-CHIP TIMING, CONTROL AND SIGNAL CHAIN ELECTRONICS", PROCEEDINGS OF THE SPIE, vol. 2415, 6 February 1995 (1995-02-06), pages 117 - 123, XP000675532 *
    PATENT ABSTRACTS OF JAPAN vol. 014, no. 141 (P - 1023) 16 March 1990 (1990-03-16) *

    Cited By (1)

    * Cited by examiner, † Cited by third party
    Publication number Priority date Publication date Assignee Title
    EP1376502A1 (de) * 2002-06-10 2004-01-02 Siemens Building Technologies AG Objektschutz-Einrichtung

    Also Published As

    Publication number Publication date
    US6396534B1 (en) 2002-05-28
    DE59906980D1 (de) 2003-10-23
    EP0939387B1 (de) 2003-09-17
    ES2209257T3 (es) 2004-06-16
    DK0939387T3 (da) 2004-02-02

    Similar Documents

    Publication Publication Date Title
    EP0939387B1 (de) Einrichtung zur Raumüberwachung
    EP0973137B1 (de) Bewegungsmelder
    DE69815977T2 (de) Gegen globale veränderungen unempfindlicher videobewegungsdetektor
    DE3634628C2 (de)
    DE3852927T2 (de) Notüberwachungssystem mit Infrarotverarbeitung.
    DE69921237T2 (de) Automatische Videoüberwachungsanlage
    EP0986912B1 (de) Verfahren zum überwachen eines vorgegebenen überwachungsbereiches
    EP1109141A1 (de) Präsenzmelder und dessen Verwendung
    EP3058556B1 (de) Verfahren und vorrichtung zur automatisierten waldbrandfrüherkennung mittels optischer detektion von rauchwolken
    DE3841387C2 (de)
    US5091780A (en) A trainable security system emthod for the same
    DE69731797T2 (de) Gerät zum Feststellen der Zahl der Passanten
    DE60208166T2 (de) Automatisches system zur überwachung von unabhängigen personen, die gelegentlich hilfe brauchen
    EP1281166B1 (de) Bildgebender brandmelder
    DE60213715T2 (de) Bildüberwachungsvorrichtung, -verfahren und -verarbeitungsprogramm
    EP1628260B1 (de) Verfahren und Vorrichtung zur automatischen Waldbranderkennung
    EP1346330B1 (de) Video-rauchdetektionssystem
    DE102016115414A1 (de) Präsenzdetektion bei unbewegten objekten
    EP1496483B1 (de) Verfahren und Einrichtung zur Detektion von Flammen
    DE102019114451A1 (de) Aktivitätsbereiche in Videoinhalten
    DE3842356A1 (de) System zum feststellen einer bewegung bzw. einer veraenderung im ueberwachungsbereich mehrerer fernsehkameras
    EP1376502A1 (de) Objektschutz-Einrichtung
    DE60319346T2 (de) Sensor mit erkennung von verdeckungen
    EP0817145A1 (de) Bewegungsmelder zur Detektion von Wärmestrahlung abgebenden, beweglichen Objekten
    EP3021256A1 (de) Verfahren zur bildverarbeitung, präsenzdetektor und beleuchtungssystem

    Legal Events

    Date Code Title Description
    PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

    Free format text: ORIGINAL CODE: 0009012

    AK Designated contracting states

    Kind code of ref document: A1

    Designated state(s): BE CH DE DK ES FR GB IT LI NL SE

    AX Request for extension of the european patent

    Free format text: AL;LT;LV;MK;RO;SI

    RTI1 Title (correction)

    Free format text: ROOM SUPERVISION DEVICE

    17P Request for examination filed

    Effective date: 20000222

    AKX Designation fees paid

    Free format text: BE CH DE DK ES FR GB IT LI NL SE

    RAP1 Party data changed (applicant data changed or rights of an application transferred)

    Owner name: SIEMENS BUILDING TECHNOLOGIES AG

    17Q First examination report despatched

    Effective date: 20020710

    GRAH Despatch of communication of intention to grant a patent

    Free format text: ORIGINAL CODE: EPIDOS IGRA

    GRAS Grant fee paid

    Free format text: ORIGINAL CODE: EPIDOSNIGR3

    GRAA (expected) grant

    Free format text: ORIGINAL CODE: 0009210

    AK Designated contracting states

    Kind code of ref document: B1

    Designated state(s): BE CH DE DK ES FR GB IT LI NL SE

    REG Reference to a national code

    Ref country code: GB

    Ref legal event code: FG4D

    Free format text: NOT ENGLISH

    REG Reference to a national code

    Ref country code: CH

    Ref legal event code: EP

    GBT Gb: translation of ep patent filed (gb section 77(6)(a)/1977)
    REF Corresponds to:

    Ref document number: 59906980

    Country of ref document: DE

    Date of ref document: 20031023

    Kind code of ref document: P

    REG Reference to a national code

    Ref country code: SE

    Ref legal event code: TRGR

    REG Reference to a national code

    Ref country code: DK

    Ref legal event code: T3

    REG Reference to a national code

    Ref country code: ES

    Ref legal event code: FG2A

    Ref document number: 2209257

    Country of ref document: ES

    Kind code of ref document: T3

    ET Fr: translation filed
    PLBE No opposition filed within time limit

    Free format text: ORIGINAL CODE: 0009261

    STAA Information on the status of an ep patent application or granted ep patent

    Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

    26N No opposition filed

    Effective date: 20040618

    REG Reference to a national code

    Ref country code: CH

    Ref legal event code: PFA

    Owner name: SIEMENS BUILDING TECHNOLOGIES AG C-IPR

    Free format text: SIEMENS BUILDING TECHNOLOGIES AG#BELLERIVESTRASSE 36#8034 ZUERICH (CH) -TRANSFER TO- SIEMENS BUILDING TECHNOLOGIES AG C-IPR#GUBELSTRASSE 22#6300 ZUG (CH)

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: TP

    Ref country code: FR

    Ref legal event code: CD

    REG Reference to a national code

    Ref country code: CH

    Ref legal event code: PUE

    Owner name: SIEMENS AKTIENGESELLSCHAFT

    Free format text: SIEMENS BUILDING TECHNOLOGIES AG C-IPR#GUBELSTRASSE 22#6300 ZUG (CH) -TRANSFER TO- SIEMENS AKTIENGESELLSCHAFT#WITTELSBACHERPLATZ 2#80333 MUENCHEN (DE)

    Ref country code: CH

    Ref legal event code: NV

    Representative=s name: SIEMENS SCHWEIZ AG, INTELLECTUAL PROPERTY

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: ES

    Payment date: 20090310

    Year of fee payment: 11

    Ref country code: DK

    Payment date: 20090212

    Year of fee payment: 11

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: NL

    Payment date: 20090213

    Year of fee payment: 11

    REG Reference to a national code

    Ref country code: GB

    Ref legal event code: 732E

    Free format text: REGISTERED BETWEEN 20090514 AND 20090520

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: BE

    Payment date: 20090218

    Year of fee payment: 11

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: SE

    Payment date: 20090212

    Year of fee payment: 11

    Ref country code: IT

    Payment date: 20090225

    Year of fee payment: 11

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: FR

    Payment date: 20090217

    Year of fee payment: 11

    Ref country code: CH

    Payment date: 20090505

    Year of fee payment: 11

    BERE Be: lapsed

    Owner name: *SIEMENS BUILDING TECHNOLOGIES A.G.

    Effective date: 20100228

    REG Reference to a national code

    Ref country code: NL

    Ref legal event code: V1

    Effective date: 20100901

    REG Reference to a national code

    Ref country code: CH

    Ref legal event code: PL

    REG Reference to a national code

    Ref country code: DK

    Ref legal event code: EBP

    EUG Se: european patent has lapsed
    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: LI

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20100228

    Ref country code: CH

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20100228

    REG Reference to a national code

    Ref country code: FR

    Ref legal event code: ST

    Effective date: 20101029

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: NL

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20100901

    Ref country code: FR

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20100301

    Ref country code: DK

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20100228

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: BE

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20100228

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: IT

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20100219

    REG Reference to a national code

    Ref country code: ES

    Ref legal event code: FD2A

    Effective date: 20110408

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: ES

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20110324

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: ES

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20100220

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: SE

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20100220

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: DE

    Payment date: 20150420

    Year of fee payment: 17

    REG Reference to a national code

    Ref country code: DE

    Ref legal event code: R119

    Ref document number: 59906980

    Country of ref document: DE

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: DE

    Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

    Effective date: 20160901

    PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

    Ref country code: GB

    Payment date: 20180212

    Year of fee payment: 20

    REG Reference to a national code

    Ref country code: GB

    Ref legal event code: PE20

    Expiry date: 20190218

    PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

    Ref country code: GB

    Free format text: LAPSE BECAUSE OF EXPIRATION OF PROTECTION

    Effective date: 20190218