DE102006050379A1 - Method and device for monitoring a room volume and calibration method - Google Patents

Method and device for monitoring a room volume and calibration method Download PDF

Info

Publication number
DE102006050379A1
DE102006050379A1 DE102006050379A DE102006050379A DE102006050379A1 DE 102006050379 A1 DE102006050379 A1 DE 102006050379A1 DE 102006050379 A DE102006050379 A DE 102006050379A DE 102006050379 A DE102006050379 A DE 102006050379A DE 102006050379 A1 DE102006050379 A1 DE 102006050379A1
Authority
DE
Germany
Prior art keywords
camera
space
cameras
volume
monitored
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102006050379A
Other languages
German (de)
Inventor
Norbert Prof. Dr. Link
Claus Wetzel
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vitracom AG
Original Assignee
Norbert Prof. Dr. Link
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Norbert Prof. Dr. Link filed Critical Norbert Prof. Dr. Link
Priority to DE102006050379A priority Critical patent/DE102006050379A1/en
Priority to CN2007800467958A priority patent/CN101601048B/en
Priority to PCT/DE2007/001894 priority patent/WO2008049404A2/en
Priority to CA002667600A priority patent/CA2667600A1/en
Priority to US12/311,924 priority patent/US8384768B2/en
Priority to AU2007308558A priority patent/AU2007308558B2/en
Priority to MX2009004225A priority patent/MX2009004225A/en
Priority to EP07817728.4A priority patent/EP2104904B1/en
Priority to JP2009533653A priority patent/JP2010507846A/en
Publication of DE102006050379A1 publication Critical patent/DE102006050379A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85Stereo camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/55Depth or shape recovery from multiple images
    • G06T7/593Depth or shape recovery from multiple images from stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/53Recognition of crowd images, e.g. recognition of crowd congestion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Vascular Medicine (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Burglar Alarm Systems (AREA)
  • Alarm Systems (AREA)

Abstract

Es ist üblich, zur Gewährleistung der Personenvereinzelung in einer Personenschleuse mittels eines Kamerapaars ein dreidimensionales Bild zu erstellen und hierüber zu prüfen, dass nicht mehr als eine Person gleichzeitig durch die Personenschleuse hindurch tritt. Es ist Aufgabe der Erfindung, bekannte Systeme zu verbessern und zu beschleunigen. Hierzu dient erfindungsgemäß eine Mehrzahl von Kamerapaaren, welche gleichzeitig ein zu überwachendes Raumvolumen aus mehreren Raumrichtungen überwacht. Hierzu wird von jedem Kamerapaar der Raum überwacht, ein Höhenprofil bestimmt und abgeschattete Punkte in diesem Höhenprofil durch Daten anderer Kamerapaare ergänzt. Überwachung eines Raumvolumens, etwa einer Durchgangsschleuse.It is customary to create a three-dimensional image by means of a camera pair in order to ensure the separation of persons in a security gate and to check that no more than one person simultaneously passes through the security gate. It is an object of the invention to improve known systems and accelerate. According to the invention, a plurality of camera pairs which simultaneously monitor a room volume to be monitored from a plurality of spatial directions is used for this purpose. For this purpose, the room is monitored by each pair of cameras, a height profile is determined and shaded points in this height profile are supplemented by data from other camera pairs. Monitoring of a room volume, such as a passage lock.

Description

Die Erfindung betrifft ein Verfahren und eine Vorrichtung zur Überwachung eines Raumvolumens umfassend eine Mehrzahl von Kameras, wobei die Kameras bezüglich des zu überwachenden Raumvolumens derart paarweise angeordnet sind, dass durch die Überlagerung der Kamerabilder jeweils eines Kamerapaares ein dreidimensionales Raumbild erstellbar ist.The The invention relates to a method and a device for monitoring a volume of space comprising a plurality of cameras, the cameras in terms of to be monitored Volume space are arranged in pairs, that by the superposition the camera images of each camera pair a three-dimensional Room image can be created.

Ein entsprechendes Verfahren ist bereits aus der US 2005/0249382 A1 vorbekannt. Das genannte amerikanische Schutzrecht betrifft eine Durchgangsschleuse, welche eine Außen- und eine Innentür umfasst. Im Bereich beider Türen ist jeweils innerhalb der Durchgangschleuse ein zu überwachender Bereich vorgesehen, wobei jeder dieser Bereiche von einem Kamerapaar überwacht wird. Jedes der genannten Kamerapaare hat den von ihm zu überwachenden Bereich im Sichtfeld und ist dazu ertüchtigt, von dem zu überwachenden Bereich ein dreidimensionales Modell zu berechnen. Zur Überwachung des Durchgangs durch die Durchgangsschleuse wird zunächst geprüft, ob eine Person sich im zu überwachenden Bereich vor der Außentür befindet. Sobald dies der Fall ist, wird gleichzeitig geprüft, ob wiederum eine Person sich im zu überwachenden Bereich vor der Innentür aufhält. Demgemäß wird bei einem Einlassbetrieb die Außentür nur dann zur Öffnung freigegeben, wenn sich keine Personen in dem zu überwachenden Bereichen aufhalten, die Innentür, welche zu dem zu sichernden Bereich führt, wird nur dann zur Öffnung freigegeben, wenn sich genau eine Person in dem zu überwachenden Bereich aufhält.A corresponding procedure is already out of the US 2005/0249382 A1 previously known. The said US patent relates to a passage lock comprising an outer and an inner door. In the area of both doors, an area to be monitored is provided in each case within the passage lock, each of these areas being monitored by a pair of cameras. Each of the camera pairs mentioned has the area to be monitored by it in the field of view and is able to calculate a three-dimensional model of the area to be monitored. To monitor the passage through the passage lock is first checked whether a person is located in the area to be monitored in front of the outer door. As soon as this is the case, a check is made at the same time as to whether a person is staying in the area to be monitored in front of the inner door. Accordingly, in an intake operation, the outer door is released for opening only when there are no persons in the areas to be monitored, the inner door leading to the area to be secured is only opened for opening when exactly one person in the zu stops monitoring area.

Mithilfe der Kamerapaare werden jeweils zwei zweidimensionale Bilder der zu überwachenden Bereiche angefertigt, mittels derer die sich in dem Bereich aufhaltenden Elemente durch Bestimmung dreidimensionaler Raumpunkte ermitteln lassen. Durch einen Vergleich der auf diese Weise bestimmten dreidimensionalen Elemente mit vorab eingespeicherten Modellen wird im folgenden bestimmt, ob sich eine Person in dem zu überwachenden Bereich befindet.aid The camera pairs are each two two-dimensional images of areas to be monitored prepared by means of which they are in the area Determine elements by determining three-dimensional space points to let. By comparing the three-dimensional ones determined in this way Elements with pre-stored models are determined below whether a person is in the monitored Area is located.

Das vorbeschriebene Verfahren basiert im wesentlichen darauf, dass zwei getrennte Bereiche mithilfe von dreidimensionalen Bilderfassungssystemen überwacht werden und die Türen der so realisierten Durchgangsschleuse anhand der entsprechenden Informationen gesteuert werden können. Der wesentliche Sinn des Verfahrens besteht vornehmlich darin, zu vermeiden, dass die gesicherte Seite der Durchgangsschleuse nach einer Freigabe derselben für eine Person schließlich gleichzeitig von mehreren Personen betreten wird. Eine mit einer ersten Person "Huckepack" eintretende zweite Person soll aufgrund des erstellten dreidimensionalen Bildes eines jeden Bereichs vorab erkannt werden. Hierzu ist eine Anordnung der jeweiligen Kamerapaare im Bereich oberhalb der Türen der Durchgangsschleuse vorgesehen, so dass eine etwa hinter einer ersten Person stehende zweite Person gleichzeitig von dem Kamerapaar erfasst werden kann.The The method described above is essentially based on the fact that two monitor separate areas using three-dimensional imaging systems be and the doors the realized through lock on the basis of the corresponding Information can be controlled. Of the The essential purpose of the procedure is primarily to avoid that the secured side of the through-lock after a release of the same for one Person finally is entered simultaneously by several people. One with one first person "piggybacking" entering second Person is due to the created three-dimensional image of a each area be recognized in advance. For this purpose, an arrangement of respective camera pairs are provided in the area above the doors of the passage lock, such that a second person standing behind a first person can be detected simultaneously by the camera pair.

Trotz dieser vorteilhaften Anordnung existieren jedoch im Schattenbereich der ersten Person nach wie vor Raumpunkte, die von dem jeweiligen Kamerapaar nicht eingesehen werden können. In diesem Bereich können sich jedoch ebenfalls Elemente aufhalten, welche vorteilhafter Weise von der Überwachung erfasst werden sollten.In spite of However, this advantageous arrangement exist in the shadow area The first person still has space points, that of the respective camera pair can not be viewed. In this area can However, elements also reside, which advantageously from the surveillance should be recorded.

Zudem stellt die Berechnung von dreidimensionalen Modellen aus der Überlagerung mehrerer zweidimensionaler Bilder eines Kamerapaars eine sehr große Anforderung an die hierfür vorzusehende Rechenhardware dar, welche im Bezug auf die Herstellung einer derart realisierten Durchgangsschleuse einen wesentlichen Kostenpunkt darstellt.moreover represents the calculation of three-dimensional models from the overlay several two-dimensional images of a camera couple a huge requirement to the one for that to be provided computing hardware, which in relation to the production Such a realized passage lock a substantial Represents cost.

Vor diesem Hintergrund liegt der vorliegenden Erfindung die Aufgabe zu Grunde, ein Verfahren und eine Vorrichtung zur Überwachung eines Raumvolumens zu schaffen sowie ein Verfahren zur Kalibrierung der eingesetzten Kamerapaare zu lehren, mithilfe derer eine Überwachung eines Raumvolumens weiter verbessert und trotz dieser verbesserten Ergebnisse technisch vereinfacht werden kann.In front In this background, the present invention has the object underlying, a method and apparatus for monitoring a volume of space and a method for calibration teaching the camera pairs used to monitor them room volume and despite these improved results can be technically simplified.

Dies gelingt mittels einer Vorrichtung zur Überwachung eines Raumvolumens gemäß den Merkmalen des Hauptanspruchs sowie ein Verfahren zur Überwachung eines Raumvolumens gemäß den Merkmalen des nebengeordneten Anspruchs 17 und ein Verfahren zur Kalibrierung von Kamerapaaren gemäß den Merkmalen des nebengeordneten Anspruchs 10. Weitere Ausgestaltungen der Vorrichtung und der Verfahren können den jeweiligen Unteransprüchen entnommen werden.This succeeds by means of a device for monitoring a volume of space according to the characteristics of the main claim and a method for monitoring a room volume according to the characteristics of the independent claim 17 and a method for calibration camera pairs according to the characteristics of the independent claim 10. Further embodiments of the device and the method can the respective subclaims be removed.

Erfindungsgemäß sind oberhalb eines zu überwachenden Raumvolumens wenigstens zwei Kamerapaare angeordnet, deren Sichtbereich den zu überwachenden Raumbereich zumindest weitgehend abdeckt. Es ist dabei möglich, die wenigstens zwei Kamerapaare einander gegenüberliegend anzuordnen, so dass der zu überwachende Raumbereich auch nach einem Einbringen eines Gegenstandes beziehungsweise nach dem Eintreten einer Person und den damit verbundenen Sichtschattenwurf noch möglichst weitgehend eingesehen werden kann. Demgemäß ist auch eine Anordnung etwa von drei oder vier Kamerapaaren zur Überwachung eines Raumbereichs möglich, wobei insbesondere eine gleichmäßige Verteilung dieser Kamerapaare durchaus sinnvoll erscheint. Jede der Kameras liefert ein einzelnes Kamerabild, wobei die Bilder jeweils eines Kamerapaars zu einem Stereobild derart kombinierbar sind, dass ein dreidimensionales Raumbild entsteht. Anhand jedes dieser dreidimensionalen Raumbilder kann ein Höhenprofil des zu überwachenden Raumbereichs erstellt werden, wobei durch Schattenwurf auf einem Bild nicht erkennbare Punkte durch solche Punkte ergänzt werden können, die im Sichtbereich anderer Kamerapaare gelegen sind. Aufgrund dieser Überlagerung verschiedener Raumbilder entsteht ein weitgehend vollständiges Höhenprofil des zu überwachenden Bereichs, mit welchem sodann Modelle aus einer Modellbibliothek verglichen werden. Nachdem ein Modell in das erstellte Höhenprofil eingepasst werden konnte, wird im folgenden versucht, in etwa verbleibende Bereiche des Profils weitere Modelle einzupassen. Erst wenn das Höhenprofil insoweit weitestgehend vollständig gefüllt ist, ist die Erkennung abgeschlossen. Anhand der verwendeten Modelle kann nunmehr darauf zurückgeschlossen werden, wie viele Personen und/oder Gegenstände in dem zu überwachenden Bereich vorhanden sind.According to the invention, at least two camera pairs are arranged above a space volume to be monitored, whose viewing area at least largely covers the space area to be monitored. It is possible to arrange the at least two camera pairs opposite one another, so that the area to be monitored can still be viewed as extensively as possible even after an object has been introduced or after a person has entered and the view shadow view associated therewith. Accordingly, an arrangement of about three or four pairs of cameras for monitoring a room area is possible, in particular, a uniform distribution of these camera pairs seems to make sense. Each of the cameras provides a single camera image, with the images one at a time Camera pairs can be combined into a stereo image such that a three-dimensional spatial image is created. On the basis of each of these three-dimensional spatial images, a height profile of the space to be monitored space can be created, which by shadows on an image unrecognizable points can be supplemented by such points that are located in the field of view of other camera pairs. Due to this superimposition of different spatial images, a largely complete height profile of the area to be monitored is created, with which models from a model library are then compared. After a model has been fitted into the created height profile, the following will try to fit further models of the remaining profile. Only when the height profile is largely completely filled so far, the detection is complete. Based on the models used can now be deduced on how many people and / or objects in the area to be monitored are available.

Die Kamerapaare sind mit Vorteil oberhalb des zu überwachenden Raumvolumens oder zumindest in dessen oberem Bereich angeordnet, so dass im zu überwachenden Raumbereich vorhandene Objekte einen möglichst großen Abstand von den Kamerapaaren einnehmen. Zudem ist von einer erhöhten Position herab ein besser geeigneter Betrachtungswinkel einnehmbar, in dem der zu überwachende Raumbereich weitgehend enthalten ist.The Camera pairs are advantageously above the volume to be monitored or arranged at least in its upper region, so that in the monitored Space available objects as large a distance from the camera pair taking. In addition, from a raised position down a better suitable viewing angle in which the to be monitored Space is largely included.

Das zu überwachende Raumvolumen kann zumindest einseitig räumlich begrenzt sein, etwa durch eine Absperrung oder durch eine Wand, so dass auf diese Weise die Positionierung der im zu überwachenden Raumbereich vorhandenen Objekte vereinfacht ist. Wäre die Positionierung der genannten Objekte völlig frei wählbar, so müsste ein wesentlich größerer Bereich überwacht werden. Auch durch entsprechende Markierungen, etwa durch Anzeichnungen auf dem Boden, wäre ein zu überwachender Bereich ohne weiteres abgrenzbar.The to be monitored Room volume can be limited at least on one side, for example by a barrier or by a wall, so that in this way the Positioning of the to be monitored Space area existing objects is simplified. Would be the positioning the mentioned objects completely freely selectable, so would have to monitored a much larger area become. Also by appropriate markings, such as by markings on the ground, would be an area to be monitored readily distinguishable.

Solcherlei Begrenzungen fallen mit besonderem Vorteil zumindest weitgehend mit den Grenzen des Sichtbereichs der Kameras zumindest jeweils einseitig zusammen. Umgekehrt bedeutet dies, dass die Sichtbereiche der Kameras wenigstens einseitig an den Begrenzungen des zu überwachenden Raums enden. Hierdurch wird gewährleistet, dass die Kameras möglichst wenig redundante Information, wie etwa Informationen über die Wandung des Raumbereichs oder außerhalb des zu überwachenden Bereichs liegende Objekte zu verarbeiten hat. Ebenfalls ist es von Vorteil, wenn wenigstens einseitig eine dem Kamerapaar gegenüberliegende Raumbegrenzung oberhalb einer vorgebbaren Kopfhöhe von der Sichtgrenze geschnitten wird. Hierdurch soll bewirkt werden, dass selbst große Personen, welche in den zu überwachenden Raumbereich eintreten, noch vollständig von den Kameras erfasst werden, selbst wenn sie im ungünstigsten Falle direkt an einer der Außenbegrenzungen des Bereichs stehen.These kinds Limitations fall with particular advantage, at least largely with the limits of the field of view of the cameras at least in each case one-sided together. Conversely, this means that the viewing areas of the cameras at least one-sided ends at the boundaries of the space to be monitored. hereby is guaranteed that the cameras as possible less redundant information, such as information about the Wall of the room area or outside of the monitored Has to process area-lying objects. It is also from Advantage, if at least one side of the camera pair opposite room boundary above a predefinable head height of the line of sight is cut. This is to cause that even big Persons who are in the monitored Room area to enter, still completely captured by the cameras even if they are most unfavorable Trap directly on one of the outer boundaries of the area.

In vorteilhafter Weiterbildung dieser Vorrichtung werden die Sichtstrahlen der einzelnen Kameras mithilfe jeweils zumindest einer Spiegelanordnung derart umgeleitet, dass die Kamerapaare trotz einer indirekten Ausrichtung das zuvor beschriebene Sichtfeld haben. Dementsprechend ist es durch eine solche Spiegelanordnung ermöglicht, die Kameras zumindest annähernd waagerecht oberhalb des zu überwachenden Raumvolumens anzuordnen, so dass eine besonders flache Bauform erreicht wird. Die Längsachse der Kameras verläuft dadurch weitgehend waagerecht, während sie bei einer direkten Ausrichtung auf das Objekt weitgehend senkrecht angebracht werden müsste.In Advantageous development of this device are the visual rays the individual cameras using at least one mirror assembly diverted so that the camera pairs despite an indirect orientation have the field of view described above. Accordingly, it is through such a mirror arrangement allows the cameras at least approximate horizontally above the to be monitored Space to arrange, so that achieved a particularly flat design becomes. The longitudinal axis the cameras runs thereby largely horizontal, while they are mounted largely perpendicular to a direct alignment with the object would have to be.

Der vorbeschriebenen Vorrichtung ist mit Vorteil eine Rechenhardware und/oder eine Rechensoftware zugeordnet, mithilfe derer eine Digitalisierung der Kameradaten vorgenommen werden kann. Aufgrund dieser digitalisierten Daten können nachfolgend die dreidimensionalen Raumbilder berechnet werden, auf deren Basis die Bestimmung eines Höhenprofils durchgeführt werden kann.Of the The above-described device is advantageously a computing hardware and / or a computing software assigned by means of which a digitization the camera data can be made. Because of this digitized Data can Subsequently, the three-dimensional spatial images are calculated on whose basis is the determination of a height profile can.

Mit Vorteil ist die vorbeschriebene Anordnung einer Personenschleuse derart zugeordnet, dass innerhalb des Schleusenbereichs befindliche Personen und/oder Gegenstände mithilfe der Kameradaten erfassbar und erkennbar sind.With Advantage is the above-described arrangement of a security gate assigned such that located within the lock area people and / or objects detectable and recognizable using the camera data.

Durch den Vergleich des erstellten Höhenprofils mit Modellen aus einer Modellbibliothek kann entschieden werden, ob zu einem Zeitpunkt lediglich eine oder doch mehrere Personen durch die Personenschleuse hindurchtreten, so dass eine etwa erforderliche Personenvereinzelung durch die erfindungsgemäße Vorrichtung unterstützt werden kann.By the comparison of the created height profile with models from a model library can be decided whether at one time only one or more people pass through the personal lock, so that about required Person separation be supported by the device according to the invention can.

Zur Kalibrierung der jeweiligen Kamerapaare, welche zur Überwachung des Raumvolumens eingesetzt werden, ist es erfindungsgemäß vorgesehen, zunächst eine Laborkalibrierung der inneren Abbildungsparameter vorzunehmen. Das Verfahren benötigt als innere Abbildungsparameter lediglich die Kammerkonstante und die radiale Linsenverzeichnung. Dieser Laborkalibrierung werden zunächst die einzelnen Kameras zugeführt, welche nach der Kalibrierung paarweise zu Kamerapaaren zusammengefasst werden. Vor Ort, das heißt also nach einem Anbringen der Kamerapaare an einem zu überwachenden Raumbereich, wird zur Kalibrierung der äußeren Orientierung des Kamerapaars zunächst für jede der Kameras eine Homographie bestimmt, welche eine Abbildung der von der Kamera aufgenommenen Bildpunkte auf eine Referenzebene darstellt. Die Referenzebene wird im zu überwachenden Raum in geeigneter Weise ausgewählt. Dieser Schritt wird für eine zweite, zur ersten vorzugsweise parallelen, Referenzebene entsprechend durchgeführt. Als letzter Kalibrierungsschritt wird für jedes Kamerapaar eine Epipolargeometrie erstellt, mit deren Hilfe jedem von den Kameras erfassten Raumpunkt ein Höhenwert zugeordnet werden kann.For calibrating the respective camera pairs, which are used for monitoring the volume of space, it is inventively provided to first carry out a laboratory calibration of the internal imaging parameters. The method only requires the chamber constant and the radial lens distortion as internal imaging parameters. This laboratory calibration is first fed to the individual cameras, which are combined in pairs to camera pairs after calibration. On site, that is to say after the camera pairs have been attached to a region of space to be monitored, a homography is firstly determined for each of the cameras to calibrate the outer orientation of the camera pair, which is an image of the image taken by the camera represents points on a reference plane. The reference plane is suitably selected in the space to be monitored. This step is performed accordingly for a second, preferably first, parallel, reference plane. As the last calibration step, an epipolar geometry is created for each camera pair, with the aid of which a height value can be assigned to each spatial point detected by the cameras.

Im Rahmen dieser Kalibrierung wird die zu kalibrierende Kamera bezüglich eines Kalibrierkörpers, vorzugsweise eines Quadratgitters, so aufgestellt, dass dieses Quadratgitter flächig vor der jeweiligen Kamera angeordnet ist. Mithilfe des Kalibrierkörpers wird eine positive oder eine negative Verzerrung festgestellt, wobei das Zentrum der radialen Verzeichnung beziehungsweise der Verzerrung anhand des Lenz'schen Modells bestimmt wird. Zur Bestimmung der Kammerkonstante wird das Quadratgitter in definiertem Abstand vor der Kamera, welche bezüglich der radialen Verzeichnung bereits korrigiert ist, aufgestellt. Gemäß dem Strahlensatz berechnet sich dann die Kammerkonstante c wie folgt: rδ/R = –c/Dwobei R der Abstand eines Gitterpunktes von der Gittermitte, r der Abstand des korrespondierenden Kamerabildpunktes von der Kamerabildmitte, δ der physikalische Abstand zweier Kamerabildpunkte und D der Abstand des optischen Zentrums der Kamera zum Kalibrierkörper ist.As part of this calibration, the camera to be calibrated with respect to a calibration, preferably a square grid, positioned so that this square grid is arranged flat in front of each camera. The calibration body detects a positive or a negative distortion, with the center of the radial distortion or distortion being determined using the Lenz model. To determine the chamber constant, the square grid is placed at a defined distance in front of the camera, which is already corrected with respect to the radial distortion. According to the set of rays, the chamber constant c is then calculated as follows: rδ / R = -c / D where R is the distance of a grid point from the grid center, r is the distance of the corresponding camera image point from the camera image center, δ is the physical distance of two camera pixels and D is the distance of the optical center of the camera to the calibration body.

In einem nächsten Schritt werden die Kamerapaare vor Ort angeordnet und wiederum vorkalibriert. Diese erste vor-Ort-Kalibrierung erfordert zunächst die Einführung einer Referenzebene, sowie einer vorzugsweise zur Referenzebene parallel liegende Hilfsebene. Die Referenzebene wird vorzugsweise durch eine Anordnung zueinander rechtwinklig situierter Markierungen bestimmt, deren Positionen im Raum vorbekannt sind. Durch einen Vergleich der Kamerabilder mit der realen Anordnung auf der Referenzebene wird eine Abbildungsvorschrift zur Abbildung der Referenzebene auf den jeweiligen Kameras, eine so genannte Homographie, bestimmt. Eine solche Homographie wird für beide Kameras eines jeden Kamerapaars ermittelt. Die so erhaltenen Parameterwerte der Homographien werden für die Verwendung im Auswertezyklus der jeweils aktuellen Kamerabilder abgespeichert.In one next Step the camera pairs are arranged on site and in turn pre-calibrated. This first on-site calibration requires first the introduction a reference plane, and one preferably to the reference plane parallel auxiliary plane. The reference plane is preferably by an arrangement of mutually perpendicular markings determined whose positions are already known in the room. Through a Comparison of the camera images with the real arrangement on the reference plane is a mapping rule for mapping the reference plane the respective cameras, a so-called homography determined. Such homography will be for both cameras of each camera pair determined. The thus obtained Parameter values of the homographies are for use in the evaluation cycle the current camera images stored.

Schließlich wird für jedes Kamerapaar zusätzlich eine Epipolargeometrie festgelegt, welche durch Warpen des jeweiligen Kamerabildes auf die Referenzebene ermöglicht wird. Wird ein beliebiger Raumpunkt betrachtet, so liegen bezüglich dieses Raumpunkts die Bildpunkte der jeweiligen Kameras auf einer Linie der Referenzebene. Diese Linien werden Epipolarlinien genannt, mithilfe der normierten Kreuzkorrelationsfunktionen als Ähnlichkeitsmaß werden längs der Epipolarlinien die Koordinaten der homologen Punkte beider Bilder bestimmt.Finally will for each Camera pair additionally an epipolar geometry determined by warping the respective Camera image is made possible on the reference plane. Becomes an arbitrary point in space considered, so are relative of this point of space the pixels of the respective cameras on one Line of the reference plane. These lines are called epipolar lines, using the normalized cross-correlation functions as a measure of similarity along the Epipolar lines the coordinates of the homologous points of both images certainly.

Mit Vorteil wird als Referenzebene die Bodenfläche des zu überwachenden Raumvolumens definiert.With Advantage is defined as a reference plane, the bottom surface of the monitored space volume.

Ein kalibriertes Kamerapaar nimmt an dem erfindungsgemäßen Verfahren zur Überwachung eines Raumvolumens teil. Im Bereich eines zu überwachenden Raumvolumens wird dazu eine Mehrzahl solcher Kamerapaare derart angeordnet, dass das zu überwachende Raumvolumen von den verschiedenen Kameras aus unterschiedlichen Raumrichtungen betrachtet wird. Die dreidimensionalen Raumbilder jedes Kamerapaars werden gemeinsam so ausgewertet, dass aufgrund von Schattenwürfen nicht darstellbare Raumpunkte jeweils mithilfe von Raumbildern anderer Kamerapaare ergänzt werden.One calibrated camera pair takes on the inventive method for monitoring part of a room volume. In the area of a room volume to be monitored For this purpose, a plurality of such camera pairs arranged such that the monitored Volume of different cameras from different Spaces is considered. The three-dimensional images of space each camera pair are evaluated together so that due of shadow throws unrepresentable points in space, each using spatial images of others Camera pairs added become.

Zur Handhabung der jeweiligen Videodaten werden die von den einzelnen Kameras stammenden Videodatenströme digitalisiert und entsprechender Rechenhardware und/oder Rechensoftware zugeführt.to Handling of the respective video data are those of the individual Cameras originating video streams digitized and corresponding computing hardware and / or computing software fed.

Die Kamerabilder der einzelnen Kameras werden aufgrund von Kalibrierdaten korrigiert, erst die solchermaßen korrigierten Kamerabilder werden der weiteren Berechnung zu Grunde gelegt. Die weitere Berechnung sieht dabei vor, ein dreidimensionales Raumbild des Sichtbereichs der jeweiligen Kamerapaare zu erstellen, wonach für jeden Raumpunkt ein Höhenwert berechnet und auf diese Weise ein Höhenprofil des überwachten Raumes bestimmt wird.The Camera images of the individual cameras are based on calibration data corrected, only in such a way corrected camera images are the basis for further calculation placed. The further calculation provides, a three-dimensional To create a spatial image of the field of view of the respective camera pairs, what for every space point an altitude value calculated and in this way a height profile of the monitored Room is determined.

Das Höhenprofil ist mit Vorteil auf die Referenzebene zu beziehen, wobei die einzelnen Raumpunkte mithilfe von Homographien und Geradenschnitten im Raum errechnet werden. Zur schnelleren Berechnung des genannten Höhenprofils wird durch die homographische Abbildung der beiden Bilder eines Kamerapaars auf die Referenzebene die Epipolargeometrie zwischen den beiden Bildern hergestellt, wodurch homologe, also zum gleichen Raumpunkt gehörige, Bildpunkte auf der gleichen Epipolarlinie der Kamerabilder liegen. Der Höhenwert wird dann bestimmt durch den Schnittpunkt zweier Geraden desselben Raumpunktes, welche sich aus den Durchstoßpunkten der Sichtstrahlen durch die Hilfsebene ergeben. Mithilfe jeweils einer zweiten Homographie, nämlich zwischen jeweils einem Kamerabild und der Hilfsebene, werden die gefundenen homologen Punkte auf die Hilfsebene transformiert. Der Schnittpunkt der beiden Sichtstrahlen der Kamerabilder, welche jeweils einen Kamerabildpunkt und den korrespondierenden Punkt auf der Hilfsebene durchstoßen, entspricht dem gesuchten Raumpunkt.The height profile is to be referenced with advantage to the reference plane, whereby the individual points in space are calculated using homographies and straight lines in space. For faster calculation of said height profile, the epipolar geometry between the two images is produced by the homographic imaging of the two images of a camera pair on the reference plane, whereby homologous, ie belonging to the same point in space, pixels are on the same epipolar line of the camera images. The height value is then determined by the intersection of two straight lines of the same spatial point, which result from the penetration points of the visual rays through the auxiliary plane. With the aid of a second homography, namely between one camera image and the auxiliary plane, the homologous points found are transformed to the auxiliary plane. The intersection of the two visual beams of the camera images, each one camera image point and the corresponding point pierced on the auxiliary level, corresponds to the desired point in space.

Dadurch, dass möglicherweise nicht alle Abbildungsfehler beziehungsweise numerische Fehler bei der Ermittlung der Homographien berücksichtigt werden können, werden in der Praxis die Sichtstrahlen keinen gemeinsamen Schnittpunkt aufweisen. Vielmehr werden die beiden Sichtstrahlen eines Kamerapaars zueinander windschief im Raum liegen, wodurch eine Abschätzung der Raumposition des gesuchten Raumpunktes erforderlich wird. Hierzu wird der Abstand der beiden Sichtstrahlen bestimmt und der Mittelpunkt der Abstandstrecke zwischen den beiden Sichtstrahlen als der gesuchte Punkt vermutet.Thereby, that possibly not all aberrations or numerical errors at the determination of the homographies can be considered In practice, the visual rays have no common point of intersection. Much more The two visual beams of a camera pair are skewed to each other lie in the room, thereby providing an estimate of the spatial position of the searched Room point is required. This is the distance between the two Visual rays determined and the center of the distance between the assumed both visual rays as the point sought.

Im Anschluss an die Ermittlung des aus den derart gewonnenen Höhenwerten der einzelnen Raumpunkte bestehenden Höhenprofils wird dieses mit in einer Modellbibliothek gespeicherten Standardmodellen verglichen. Diese Standardmodelle werden in das Höhenprofil eingesetzt und geprüft, ob das Höhenprofil zumindest einem der vorgegebenen Modelle entspricht. Soweit dies der Fall ist, wird das dem Modell entsprechende Objekt als erkannt betrachtet. In vorteilhafter Weiterführung dieses Verfahrens wird nachfolgend geprüft, ob sich weitere Standardmodelle in dem verbleibenden Raum des Höhenprofils einfügen lassen. In der konkreten Anwendung, etwa als Durchgangsschleuse zur Personenvereinzelung, ließe sich diese Anwendung dahingehend erweitern, dass bei der Erkennung von mehr als einem Objekt ein Alarm beziehungsweise eine Sperrung der Durchgangsschleuse bewirkt wird.in the Connection to the determination of the height values obtained in this way the individual room points existing height profile is this with compared to standard models stored in a model library. These standard models are inserted into the height profile and checked if that height profile at least one of the given models. As far as this If the case is, the object corresponding to the model is recognized as considered. In an advantageous continuation of this method will be below checked, whether there are more standard models in the remaining space of the height profile insert to let. In the concrete application, as a through-lock for individual separation, let extend this application to the point of recognition more than one object an alarm or a block the passage lock is effected.

Die vorstehend beschriebene Erfindung wird im folgenden anhand eines in der Zeichnung dargestellten Ausführungsbeispiels näher erläutert.The The invention described above will be described below with reference to a explained in detail in the drawing embodiment.

Es zeigenIt demonstrate

1 eine erfindungsgemäße Vorrichtung mit einem abgegrenzten, zu überwachenden Raumvolumen in einer seitlichen Schnittdarstellung, 1 a device according to the invention with a delimited space volume to be monitored in a lateral sectional view,

2 die Vorrichtung gemäß 1 mit einer Spiegelanordnung und waagerecht angeordneten Kamerapaaren in einer seitlichen Schnittdarstellung, 2 the device according to 1 with a mirror arrangement and horizontally arranged camera pairs in a lateral sectional representation,

3 eine Projektion der Sichtfelder zwei einander gegenüberliegender Kamerapaare auf den Boden eines zu überwachenden Raumbereichs, 3 a projection of the fields of view of two opposing camera pairs on the floor of a space area to be monitored,

4 eine Darstellung eines Quadratgitters mit kissenförmiger beziehungsweise tonnenförmiger Verzeichnung, 4 a representation of a square grid with pincushion-shaped or barrel-shaped distortion,

5 eine Darstellung der Anordnung zweier Kamerabilder in Bezug auf eine Referenzebene zur Kalibrierung eines Kamerapaars, und 5 a representation of the arrangement of two camera images with respect to a reference plane for calibrating a camera pair, and

6 eine Darstellung der Anordnung zweier Kamerabilder in Bezug auf eine Referenzebene sowie eine Hilfsebene zur Berechnung der Position eines Raumpunktes. 6 a representation of the arrangement of two camera images with respect to a reference plane and an auxiliary plane for calculating the position of a point in space.

1 zeigt ein zu überwachendes Raumvolumen 10, welches von zwei Kamerapaaren 11, 11' überwacht wird. Die beiden, im Bild hintereinander liegenden, Kameras jeweils eines Kamerapaars 11, 11' sind derart geneigt, dass die äußersten Sichtstrahlen 20 der Kamerapaare 11, 11' im Bereich der jeweils näher liegenden Wand 13 zumindest weitgehend parallel zu dieser oder entlang dieser verlaufen und im Bereich der jeweils gegenüberliegenden Wand 13 diese Wand 13 in einer Höhe schneiden, die höher ist als die Kopfhöhe einer etwa in dem zu überwachenden Raumvolumen 10 befindlichen Person 12. Durch die Anordnung einander gegenüberliegender Kamerapaare 11, 11' ist gewährleistet, dass sich im von der Person 12 abgeschatteten Bereich kein weiteres Objekt beziehungsweise keine weitere Person 12 befinden kann. Wäre dies der Fall, so könnte dieses Objekt beziehungsweise diese Person 12 von dem zweiten Kamerapaar 11, 11' erfasst werden, welches das zu überwachende Raumvolumen 10 aus einem anderen Blickwinkel betrachtet. Jedes der im Bereich des zu überwachenden Raumvolumens 10 angeordneten Kamerapaare 11, 11' erzeugt ein dreidimensionales Raumbild, mithilfe dessen ein Höhenprofil des zu überwachenden Raumvolumens 10 bestimmt werden kann. Soweit die Raumpunkte des Raumvolumens 10 von einem Kamerapaar 11, 11' nicht erfasst werden können, wird für die nicht einsehbaren Raumpunkte auf das von dem anderen Kamerapaar 11, 11' bereitgestellte dreidimensionale Raumbild zurückgegriffen. Das auf diese Weise vervollständigte Höhenprofil des zu überwachenden Raumvolumens 10 wird nachfolgend mit Standardmodellen verglichen, welche in einer Modellbibliothek vorgehalten werden. Es werden solange Standardmodelle in das Höhenprofil eingefügt, bis festgestellt werden kann, welche Objekte sich in dem zu überwachenden Raumvolumen 10 befinden. 1 shows a room volume to be monitored 10 , which of two camera pairs 11 . 11 ' is monitored. The two cameras, one behind the other, each of a camera pair 11 . 11 ' are inclined so that the outermost visible rays 20 the camera pairs 11 . 11 ' in the area of the nearer wall 13 at least substantially parallel to this or along this and in the region of the respective opposite wall 13 this wall 13 cut at a height which is higher than the head height of about in the space to be monitored 10 person 12 , By the arrangement of opposing camera pairs 11 . 11 ' It is guaranteed that in the person 12 shaded area no further object or no further person 12 can be located. If this were the case, then this object or this person could 12 from the second pair of cameras 11 . 11 ' be detected, which is the space to be monitored 10 viewed from a different angle. Each one in the area of the room volume to be monitored 10 arranged camera pairs 11 . 11 ' creates a three-dimensional space image, with the help of which a height profile of the room volume to be monitored 10 can be determined. As far as the spatial points of the volume of space 10 from a camera couple 11 . 11 ' can not be detected, for the non-observable space points on that of the other camera pair 11 . 11 ' provided three-dimensional spatial image resorted. The completed in this way height profile of the monitored space volume 10 is compared below with standard models, which are kept in a model library. Standard models are inserted in the height profile until it is possible to determine which objects are in the room volume to be monitored 10 are located.

In 2 ist ein ähnlich aufgebautes zu überwachendes Raumvolumen 10 dargestellt, wobei in den Lichtweg der dort waagerecht oberhalb des zu überwachenden Raumbereichs 10 angebrachten Kamerapaare 11, 11' jeweils eine Spiegelanord nung 14, 14' eingebracht ist, so dass sich zwar im Blickfeld der Kamerapaare 11, 11' jeweils das gleiche Objekt, nämlich die Person 12, befindet, die Gesamthöhe der Anordnung jedoch im Vergleich zur vorhergehenden Anordnung der Kamerapaare 11, 11' verringert ist. Eine solche Bauform ist insbesondere für Durchgangsschleusen besonders geeignet, welche häufig Platz sparend mit geringer Bauhöhe ausgeführt sein müssen. Auch ist gerade für den Einsatz zur Personenvereinzelung im Bereich einer Durchgangsschleuse das vorgeschlagene System, nämlich die Ergänzung eines dreidimensionalen Raumbildes durch ein zweites ebensolches Raumbild aus einer anderen Raumrichtung besonders geeignet, da auf diese Weise das Einschleusen mehrerer Personen "Huckepack" verhindert wird. Sobald in einer solchen Durchgangsschleuse mehrere Personen 12 vorhanden sind, wird dies von den Kamerapaaren 11, 11' erkannt und von einer etwaigen Bearbeitungssoftware beziehungsweise -hardware entsprechend reagiert.In 2 is a similarly constructed volume to be monitored 10 represented, wherein in the light path of there horizontally above the space to be monitored area 10 attached camera pairs 11 . 11 ' each a Spiegelanord statement 14 . 14 ' is introduced, so that while in the field of view of the camera pairs 11 . 11 ' each the same object, namely the person 12 , However, the overall height of the arrangement compared to the previous arrangement of camera pairs 11 . 11 ' is reduced. Such a design is particularly suitable for passage locks, which often have to be designed to save space with low overall height. Also is just for use to the Perso singulation in the area of a passage lock the proposed system, namely the addition of a three-dimensional space image by a second just such a room image from another spatial direction particularly suitable, since in this way the introduction of several people "piggyback" is prevented. Once in such a passage lock several people 12 are present, this is from the camera pair 11 . 11 ' recognized and responded by any processing software or hardware accordingly.

3 zeigt eine Projektion der von den einzelnen Kameras der Kamerapaare 11, 11' abgedeckten Sichtfelder auf den Boden 15 des zu überwachenden Raumbereichs 10. Es wird deutlich, dass bereits jede einzelne der verwendeten Kameras der Kamerapaare 11, 11 Strich den vollständigen Bereich des Raumvolumens 10 weitgehend abdeckt. Hierdurch ist gewährleistet, dass jeder Raumpunkt, soweit er von einer der Kameras möglicherweise durch Abschattung nicht erfasst werden kann, sehr wahrscheinlich doch zumindest von einer anderen Kamera überwacht wird. 3 shows a projection of the individual cameras of the camera pairs 11 . 11 ' covered fields of view on the ground 15 of the room area to be monitored 10 , It becomes clear that already each one of the used cameras of the camera pairs 11 . 11 Dash the full area of the room volume 10 largely covers. This ensures that every point in the room, if it can not possibly be detected by one of the cameras due to shading, is most likely at least monitored by another camera.

4 zeigt ein Quadratgitter zur Kalibrierung der einzelnen Kameras eines Kamerapaars 11, 11', wobei die Kalibrierung der Kameras anhand des Quadratgitters im Labor stattfindet. Das Quadratgitter wird vor der zu kalibrierenden Kamera senkrecht aufgestellt, so dass die Mitte des Quadratgitters in der Bildmitte des Kamerabildes zu liegen kommt. Im folgenden werden verschiedene Kameraparameter bestimmt, darunter der Hauptpunkt, die radiale Verzeichnung und die Kammerkonstante. In der 4 sind zwei mögliche Ansichten des Quadratgitters vor einer Kalibrierung dargestellt, nämlich einmal die kissenförmige Verzeichnung im linken Bild und einmal die tonnenförmige Verzeichnung im rechten Bild. Durch die Kalibrierung der einzelnen Kameras wird bewirkt, dass die Verzeichnung der einzelnen Kameras so kompensiert wird, dass das Quadratgitter nach der Fehlerkorrektur quadratisch, also mit geraden Kanten, interpretiert wird. 4 shows a square grid for calibrating the individual cameras of a camera pair 11 . 11 ' , whereby the calibration of the cameras takes place on the basis of the square lattice in the laboratory. The square grid is placed vertically in front of the camera to be calibrated so that the center of the square grid comes to lie in the center of the camera image. In the following, various camera parameters are determined, including the main point, the radial distortion and the chamber constant. In the 4 Two possible views of the square grid before calibration are shown, namely, once the pincushion distortion in the left image and once the barrel distortion in the right image. The calibration of the individual cameras causes the distortion of the individual cameras to be compensated in such a way that the square grid is interpreted quadratically after the error correction, ie with straight edges.

5 zeigt eine Anordnung der Kameras eines Kamerapaars 11, 11', welche bereits vor Ort montiert sind und in ihrer bestimmungsgemäßen Position ebenfalls weitere Kalibrierungsschritte durchlaufen müssen. Zunächst wird hierzu eine Referenzebene 30 eingeführt, zum Beispiel die Bodenfläche 15, auf welche die Höhenpunkte des späteren Höhenprofils bezogen werden. Im Zuge der Kalibrierung wird zunächst jeweils eine Homographie 32, 32' zwischen den jeweiligen Kamerabildern 34, 34' und der Referenzebene dadurch bestimmt, dass Markierungen 22 an definierter Position auf der Referenzebene 30 angeordnet werden und durch einen Vergleich der Realität mit dem Kamerabild 34, 34' eine Abbildungsvorschrift, nämlich eine Homographie 32, 32' zwischen Kamerabild 34, 34' und Referenzebene 30 bestimmt wird. Die so errechneten Homographien 32, 32' werden für den späteren Auswertezyklus gespeichert. In einem weiteren Kalibrierungsschritt wird eine Epipolargeometrie eingeführt, welche so auf die Referenzebene gelegt wird, dass homologe Punkte, also einander korrespondierende Punkte auf den Kamerabildern 34, 34' eines Kamerapaars 11, 11' jeweils auf einer Epipolarlinie 36, 36' des Epipolargeometriesystems zu liegen kommen. Zur Bestimmung der Koordinaten der jeweiligen homologen Punkte wird die Kreuzkorrelationsfunktion als Ähnlichkeitsmaß verwendet. 5 shows an arrangement of the cameras of a camera park 11 . 11 ' , which are already mounted on site and must also go through in their proper position further calibration steps. First, this is a reference plane 30 introduced, for example, the floor area 15 to which the height points of the later height profile are related. In the course of the calibration, each first a homography 32 . 32 ' between the respective camera pictures 34 . 34 ' and the reference plane determined by marks 22 at a defined position on the reference plane 30 be arranged and by comparing the reality with the camera image 34 . 34 ' a mapping rule, namely a homography 32 . 32 ' between camera image 34 . 34 ' and reference level 30 is determined. The thus calculated homographies 32 . 32 ' are stored for the later evaluation cycle. In a further calibration step, an epipolar geometry is introduced, which is placed on the reference plane in such a way that homologous points, that is, corresponding points on the camera images, are produced 34 . 34 ' a camera pair 11 . 11 ' each on an epipolar line 36 . 36 ' of the epipolar geometry system. To determine the coordinates of the respective homologous points, the cross-correlation function is used as a measure of similarity.

6 zeigt schließlich, wie eine Auswertung und die Erstellung eines Höhenprofils im Einzelnen ablaufen. Ein von beiden Kameras des Kamerapaars 11, 11' erfasster Raumpunkt wird herausgegriffen, wobei dieser für beide Kameras auf einer gemeinsamen Epipolarlinie 36 liegt. Der herausgegriffene Raumpunkt liegt dann für beide Kameras auf einem Sichtstrahl 35, 35', welcher durch den Bildpunkt des Kamerabildes 34, 34' und die Homographie 33, 33' des Kamerabildes auf eine zur Referenzebene 30 parallele Hilfsebene 31 hindurchstößt. Im Schnittpunkt der beiden Sichtstrahlen 35, 35' befindet sich dann der gesuchte Raumpunkt. Die Höhenlage des gesuchten Raumpunkts bezüglich des Bodens 15 beziehungsweise der dort angesiedelten Referenzebene 30 kann nachfolgend geometrisch berechnet werden. Durch ein entsprechendes Vorgehen für alle von den Kameras erfassten Bildpunkte entsteht ein Höhenprofil, welches die in dem zu überwachenden Raumvolumen 10 enthaltenen Objekte abbildet. 6 Finally, it shows how an evaluation and the creation of a height profile run in detail. One of both cameras of the camera room 11 . 11 ' detected point of space is picked out, this for both cameras on a common epipolar line 36 lies. The selected point in space then lies on a viewing beam for both cameras 35 . 35 ' which passes through the pixel of the camera image 34 . 34 ' and the homography 33 . 33 ' of the camera image on one to the reference plane 30 parallel auxiliary level 31 through encounters. At the intersection of the two visual rays 35 . 35 ' is then the desired point in space. The altitude of the searched point of the point of the ground 15 or the reference level located there 30 can subsequently be calculated geometrically. By means of a corresponding procedure for all the pixels captured by the cameras, a height profile is created which corresponds to the room volume to be monitored 10 images contained objects.

Vorstehend ist somit ein Verfahren sowie eine Vorrichtung zur Überwachung eines Raumvolumens und ein Verfahren zur Kalibrierung der hierfür vorgesehenen Kamerapaare beschrieben, welche in der Anwendung den Vorteil aufweisen, dass eine vollständige Überwachung des Raumvolumens gewährleistet werden kann, während gleichzeitig eine vereinfachte Vorgehensweise zur Erlangung der dreidimensionalen Informationen gelehrt wird.above is thus a method and a device for monitoring a volume of space and a method of calibrating the space provided for this purpose Camera pairs described, which have the advantage in the application, that complete monitoring of the room volume guaranteed can be while Simultaneously a simplified procedure for obtaining the Three-dimensional information is taught.

1010
Raumvolumenvolume
11, 11'11 11 '
Kamerapaarpair of cameras
1212
Personperson
1313
Wandwall
14, 14'14 14 '
Spiegelanordnungmirror arrangement
1515
Bodenflächefloor area
2020
Sichtstrahlenvisual rays
2121
Sichtbereichviewing area
2222
Markierungmark
3030
Referenzebenereference plane
3131
Hilfsebeneauxiliary plane
32, 32'32 32 '
Homographie zwischen Kamerabild und Referenzebenehomography between camera image and reference plane
33, 33'33 33 '
Homographie zwischen Kamerabild und Hilfsebenehomography between camera image and auxiliary level
34, 34'34 34 '
Kamerabildcamera image
35, 35'35, 35 '
Sichtstrahlenvisual rays
36, 36'36 36 '
Epipolarlinienepipolar
4040
Positive Verzerrungpositive distortion
4141
Negative Verzerrungnegative distortion

Claims (25)

Vorrichtung zur Überwachung eines Raumvolumens (10) umfassend eine Mehrzahl von Kameras, wobei die Kameras bezüglich des zu überwachenden Raumvolumens (10) derart paarweise angeordnet sind, dass durch die Überlagerung der Kamerabilder (34, 34') jeweils eines Kamerapaares (11, 11') ein dreidimensionales Raumbild erstellbar ist, dadurch gekennzeichnet, dass wenigstens zwei Kamerapaare (11, 11') gemeinsam ein Raumvolumen (10) derart abdecken, dass wenigstens zwei dreidimensionale Raumbilder desselben Raumvolumens (10) aus unterschiedlichen Raumrichtungen erstellbar sindDevice for monitoring a volume of space ( 10 ) comprising a plurality of cameras, wherein the cameras with respect to the volume of space to be monitored ( 10 ) are arranged in pairs, that by the superimposition of the camera images ( 34 . 34 ' ) each of a camera pair ( 11 . 11 ' ) a three-dimensional space image can be produced, characterized in that at least two camera pairs ( 11 . 11 ' ) together a volume of space ( 10 ) such that at least two three-dimensional spatial images of the same volume of space ( 10 ) can be created from different spatial directions Vorrichtung gemäß Anspruch 1, dadurch gekennzeichnet, dass die Kameras (11, 11') paarweise im oberen Bereich des zu überwachenden Raumvolumens (10) oder oberhalb desselben angeordnet sind.Device according to claim 1, characterized in that the cameras ( 11 . 11 ' ) in pairs in the upper area of the volume to be monitored ( 10 ) or are arranged above it. Vorrichtung gemäß einem der Ansprüche 1 oder 2, dadurch gekennzeichnet, dass das zu überwachende Raumvolumen (10) wenigstens einseitig räumlich begrenzt, etwa von zumindest einer Wand (13) und/oder zumindest einer Absperrung abgegrenzt oder eingeschlossen ist.Device according to one of claims 1 or 2, characterized in that the space volume to be monitored ( 10 ) at least on one side spatially limited, for example of at least one wall ( 13 ) and / or at least one barrier is delimited or enclosed. Vorrichtung gemäß einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der Sichtbereich (21) der Kameras derart ausgerichtet ist, dass die Grenzen des Sichtbereichs (21) wenigstens einseitig zumindest weitgehend parallel zur Begrenzung des zu überwachenden Raumvolumens (10) verlaufen.Device according to one of the preceding claims, characterized in that the viewing area ( 21 ) of the cameras is oriented such that the boundaries of the field of view ( 21 ) at least on one side at least substantially parallel to the boundary of the space volume to be monitored ( 10 ). Vorrichtung gemäß einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der Sichtbereich (21) der Kameras derart ausgerichtet ist, dass die Grenzen des Sichtbereichs (21) wenigstens einseitig eine dem Kamerapaar (11, 11') gegenüberliegende Raumbegrenzung oberhalb einer vorgebbaren Kopfhöhe schneiden.Device according to one of the preceding claims, characterized in that the viewing area ( 21 ) of the cameras is oriented such that the boundaries of the field of view ( 21 ) at least one side of the camera pair ( 11 . 11 ' ) opposite space boundary above a predetermined head height intersect. Vorrichtung gemäß einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass im Sichtfeld zumindest einer der Kameras eine Spiegelanordnung (14, 14') angeordnet ist.Device according to one of the preceding claims, characterized in that in the field of view of at least one of the cameras a mirror arrangement ( 14 . 14 ' ) is arranged. Vorrichtung gemäß Anspruch 6, dadurch gekennzeichnet, dass die Kameras zumindest annähernd waagrecht derart oberhalb des zu überwachenden Raumvolumens (10) angeordnet sind, dass ihre Längsseiten jeweils zumindest weitgehend parallel zur Bodenfläche (15) des zu überwachenden Raumvolumens (10) ausgerichtet sind.Apparatus according to claim 6, characterized in that the cameras at least approximately horizontally above the space volume to be monitored ( 10 ) are arranged such that their longitudinal sides in each case at least substantially parallel to the bottom surface ( 15 ) of the volume to be monitored ( 10 ) are aligned. Vorrichtung gemäß einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass den Kameras eine Rechenhardware und/oder Rechensoftware zugeordnet ist, welche zur Digitalisierung von Kameradaten, sowie zur Erstel lung eines Höhenprofils des zu überwachenden Raumvolumens (10) über einer Referenzebene (30) auf Basis dieser Kameradaten, ertüchtigt ist.Device according to one of the preceding claims, characterized in that the cameras a computing hardware and / or computer software is assigned, which for the digitization of camera data, as well as for the development of a height profile of the spatial volume to be monitored ( 10 ) above a reference plane ( 30 ) is based on this camera data, is capable. Vorrichtung gemäß einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Vorrichtung einer Personenschleuse derart zugeordnet ist, dass innerhalb des Schleusenbereichs befindliche Personen (12) und/oder Gegenstände mithilfe der Kameras erfassbar sind.Device according to one of the preceding claims, characterized in that the device is assigned to a person lock such that persons located within the lock area ( 12 ) and / or objects are detectable using the cameras. Verfahren zur Kalibrierung von Kamerapaaren zur Überwachung eines Raumvolumens (10), umfassend die Schritte einer Laborkalibrierung der einzelnen Kameras, einer Bestimmung von Homographien von Referenzebenen für jede Kamera und einer Erstellung einer Epipolargeometrie für jedes Kamerapaar (11, 11').Method for calibrating camera pairs for monitoring a room volume ( 10 comprising the steps of laboratory calibration of the individual cameras, determination of homographies of reference planes for each camera, and creation of an epipolar geometry for each camera pair ( 11 . 11 ' ). Verfahren gemäß Anspruch 10, dadurch gekennzeichnet, dass im Rahmen der Laborkalibrierung zumindest die Kammerkonstante, der Hauptpunkt sowie die radiale Linsenverzeichnung jeder Kamera mittels eines senkrecht zur jeweiligen Kamera angeordneten Quadratgitters als Kalibrierkörper bestimmt werden.Method according to claim 10, characterized in that in the context of laboratory calibration at least the chamber constant, the main point and the radial Lens distortion of each camera by means of a perpendicular to each Camera arranged square grating determined as a calibration become. Verfahren gemäß Anspruch 11, dadurch gekennzeichnet, dass die Parameter der Kameras nach dem Lenz'schen Modell bestimmt werden.Method according to claim 11, characterized in that the parameters of the cameras after the Lenz's model be determined. Verfahren gemäß einem der Ansprüche 10 bis 12, dadurch gekennzeichnet, dass zur Bestimmung zumindest zweier Homographien eine Referenzebene (30) sowie eine vorzugsweise dazu parallele Hilfsebene (31) im Raum fest gelegt werden, wobei Höhenwerte jeweils eines Ebenenpunktes mittels eines Geradenschnitts der die jeweiligen Punkte durchstoßenden Sichtstrahlen (35, 35') beider Kameras des Kamerapaares (11, 11') vorgegeben werden.Method according to one of claims 10 to 12, characterized in that for determining at least two homographies a reference plane ( 30 ) as well as a preferably parallel auxiliary level ( 31 ) are fixed in space, whereby height values in each case of a plane point are determined by means of a straight line section of the visual beams (FIG. 35 . 35 ' ) of both cameras of the camera pair ( 11 . 11 ' ). Verfahren gemäß einem der Ansprüche 10 bis 13, dadurch gekennzeichnet, dass eine Epipolargeometrie hergestellt wird, wobei die Bilder der Kameras eines Kamerapaares (11, 11') auf die Referenzebene (30) gewarpt werden.Method according to one of Claims 10 to 13, characterized in that an epipolar geometry is produced, the images of the cameras of a camera pair ( 11 . 11 ' ) to the reference level ( 30 ). Verfahren gemäß Anspruch 14, dadurch gekennzeichnet, dass die homologen Punkte der korrespondierenden Kamerabilder (34, 34') eines Kamerapaares (11, 11') mithilfe der normierten Kreuzkorrelationsfunktion als Ähnlichkeitsmaß bestimmt werden.A method according to claim 14, characterized ge indicates that the homologous points of the corresponding camera images ( 34 . 34 ' ) of a camera pair ( 11 . 11 ' ) can be determined using the normalized cross-correlation function as a measure of similarity. Verfahren gemäß einem der Ansprüche 10 bis 15, dadurch gekennzeichnet, dass die Bodenfläche (15) des zu überwachenden Raumvolumens (10) als Referenzebene (30) gewählt wird.Method according to one of claims 10 to 15, characterized in that the bottom surface ( 15 ) of the volume to be monitored ( 10 ) as a reference plane ( 30 ) is selected. Verfahren zur Überwachung eines Raumvolumens mithilfe einer Mehrzahl von Kamerapaaren (11, 11'), welche das Raumvolumen (10) aus unterschiedlichen Raumrichtungen betrachten und aus deren Kamerabildern (34, 34') jeweils ein dreidimensionales Raumbild erstellbar ist, wobei in dem jeweiligen Raumbild aufgrund von Schattenwürfen nicht darstellbare Raumpunkte mithilfe von Raumbildern anderer Kamerapaare (11, 11') ergänzt werden.Method for monitoring a volume of space using a plurality of camera pairs ( 11 . 11 ' ), which determines the volume of space ( 10 ) from different spatial directions and from their camera images ( 34 . 34 ' ) in each case a three-dimensional space image can be created, wherein in the respective spatial image due to shadow throws not representable spatial points using spatial images of other camera pairs ( 11 . 11 ' ). Verfahren gemäß Anspruch 17, dadurch gekennzeichnet, dass die von den einzelnen Kameras und/oder den Kamera paaren (11, 11') stammenden Videodatenströme digitalisiert werden.A method according to claim 17, characterized in that the pairing of the individual cameras and / or the camera ( 11 . 11 ' ) are digitized video data streams. Verfahren gemäß einem der Ansprüche 17 oder 18, dadurch gekennzeichnet, dass die Kamerabilder (34, 34') der einzelnen Kameras aufgrund von Kalibrierwerten korrigiert werden.Method according to one of claims 17 or 18, characterized in that the camera images ( 34 . 34 ' ) of the individual cameras can be corrected on the basis of calibration values. Verfahren gemäß einem der Ansprüche 17 bis 19, dadurch gekennzeichnet, dass für eine Mehrzahl von Kamerapaaren (11, 11') jeweils ein dreidimensionales Raumbild des von dem jeweiligen Kamerapaar (11, 11') einsehbaren Raumbereichs erstellt wird.Method according to one of claims 17 to 19, characterized in that for a plurality of camera pairs ( 11 . 11 ' ) each have a three-dimensional space image of the respective camera pair ( 11 . 11 ' ) space is created. Verfahren gemäß Anspruch 20, dadurch gekennzeichnet, dass aufgrund der Raumbilder einer Mehrzahl von Kamerapaaren (11, 11') ein möglichst vollständiges Höhenprofil des zu überwachenden Raumvolumens (10) bestimmt wird, wobei die Daten verschiedener Kamerapaare (11, 11') zu einem Raumbild zusammengefügt werden.A method according to claim 20, characterized in that due to the spatial images of a plurality of camera pairs ( 11 . 11 ' ) an as complete as possible height profile of the space volume to be monitored ( 10 ), the data of different camera pairs ( 11 . 11 ' ) are combined to form a spatial image. Verfahren gemäß Anspruch 21, dadurch gekennzeichnet, dass das Höhenprofil auf die Referenzebene (30) bezogen ist, wobei die Raumpunkte mithilfe von Homographien (32, 32' 33, 33') und Geradenschnitten im Raum errechnet werden.A method according to claim 21, characterized in that the height profile to the reference plane ( 30 ), where the spatial points are determined by means of homographies ( 32 . 32 ' 33 . 33 ' ) and straight line sections in space. Verfahren gemäß einem der Ansprüche 21 oder 22, dadurch gekennzeichnet, dass die Lage der einzelnen Raumpunkte als Mittelpunkt der Verbindungsstrecke zwischen den Sichtstrahlen (35, 35') beider Kameras auf den jeweiligen Raumpunkt bestimmt wird.Method according to one of claims 21 or 22, characterized in that the position of the individual points in space as the center of the connecting path between the visual beams ( 35 . 35 ' ) of both cameras is determined on the respective room point. Verfahren gemäß einem der Ansprüche 17 bis 23, dadurch gekennzeichnet, dass das erstellte Höhenprofil mit Standardmodellen verglichen wird.Method according to one the claims 17 to 23, characterized in that the created height profile compared with standard models. Verfahren gemäß Anspruch 24, dadurch gekennzeichnet, dass nach der Erkennung eines Standardmodells geprüft wird, ob ein weiteres Standardmodell im verbleibenden Raum einfügbar ist.Method according to claim 24, characterized in that after the detection of a standard model checked will determine whether another standard model can be inserted in the remaining space.
DE102006050379A 2006-10-25 2006-10-25 Method and device for monitoring a room volume and calibration method Withdrawn DE102006050379A1 (en)

Priority Applications (9)

Application Number Priority Date Filing Date Title
DE102006050379A DE102006050379A1 (en) 2006-10-25 2006-10-25 Method and device for monitoring a room volume and calibration method
CN2007800467958A CN101601048B (en) 2006-10-25 2007-10-24 Method and apparatus for monitoring a spatial volume and a calibration method
PCT/DE2007/001894 WO2008049404A2 (en) 2006-10-25 2007-10-24 Method and apparatus for monitoring a spatial volume and a calibration method
CA002667600A CA2667600A1 (en) 2006-10-25 2007-10-24 Method and apparatus for monitoring a spatial volume and a calibration method
US12/311,924 US8384768B2 (en) 2006-10-25 2007-10-24 Pass-through compartment for persons and method for monitoring a spatial volume enclosed by a pass-through compartment for persons
AU2007308558A AU2007308558B2 (en) 2006-10-25 2007-10-24 Pass-through compartment for persons and method for monitoring a spatial volume enclosed by a pass-through compartment for persons
MX2009004225A MX2009004225A (en) 2006-10-25 2007-10-24 Method and apparatus for monitoring a spatial volume and a calibration method.
EP07817728.4A EP2104904B1 (en) 2006-10-25 2007-10-24 Method and apparatus for monitoring a spatial volume and a calibration method
JP2009533653A JP2010507846A (en) 2006-10-25 2007-10-24 Spatial volume monitoring method and monitoring apparatus, and calibration method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102006050379A DE102006050379A1 (en) 2006-10-25 2006-10-25 Method and device for monitoring a room volume and calibration method

Publications (1)

Publication Number Publication Date
DE102006050379A1 true DE102006050379A1 (en) 2008-05-08

Family

ID=39264594

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102006050379A Withdrawn DE102006050379A1 (en) 2006-10-25 2006-10-25 Method and device for monitoring a room volume and calibration method

Country Status (9)

Country Link
US (1) US8384768B2 (en)
EP (1) EP2104904B1 (en)
JP (1) JP2010507846A (en)
CN (1) CN101601048B (en)
AU (1) AU2007308558B2 (en)
CA (1) CA2667600A1 (en)
DE (1) DE102006050379A1 (en)
MX (1) MX2009004225A (en)
WO (1) WO2008049404A2 (en)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006050379A1 (en) * 2006-10-25 2008-05-08 Norbert Prof. Dr. Link Method and device for monitoring a room volume and calibration method
TW200937348A (en) * 2008-02-19 2009-09-01 Univ Nat Chiao Tung Calibration method for image capturing device
AT507531B1 (en) * 2008-10-31 2011-02-15 Arc Austrian Res Centers Gmbh METHOD OF COUNTING OBJECTS
EP2191788A1 (en) * 2008-11-29 2010-06-02 Braun Gmbh Method and device for three-dimensional measurement of a dental model
EP2549762B1 (en) * 2010-03-19 2017-05-03 Panasonic Intellectual Property Management Co., Ltd. Stereovision-image position matching apparatus, stereovision-image position matching method, and program therefor
EP2375376B1 (en) 2010-03-26 2013-09-11 Alcatel Lucent Method and arrangement for multi-camera calibration
CN102063721B (en) * 2011-01-06 2012-07-18 大连理工大学 Method for compensating inclination of straight calibration object in calibration process of external parameter of vision system
US8619148B1 (en) * 2012-01-04 2013-12-31 Audience, Inc. Image correction after combining images from multiple cameras
JP5843751B2 (en) * 2012-12-27 2016-01-13 株式会社ソニー・コンピュータエンタテインメント Information processing apparatus, information processing system, and information processing method
CN105513122B (en) * 2014-09-24 2019-01-25 中兴通讯股份有限公司 The method for building up and device of umbra volume
FI126498B (en) * 2014-12-29 2017-01-13 Helmee Imaging Oy Optical measuring system

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4303851A (en) * 1979-10-16 1981-12-01 Otis Elevator Company People and object counting system
US4402053A (en) * 1980-09-25 1983-08-30 Board Of Regents For Education For The State Of Rhode Island Estimating workpiece pose using the feature points method
US4982438A (en) * 1987-06-02 1991-01-01 Hitachi, Ltd. Apparatus and method for recognizing three-dimensional shape of object
US5581625A (en) * 1994-01-31 1996-12-03 International Business Machines Corporation Stereo vision system for counting items in a queue
JP3521637B2 (en) * 1996-08-02 2004-04-19 オムロン株式会社 Passenger number measurement device and entrance / exit number management system using the same
US6088612A (en) * 1997-04-04 2000-07-11 Medtech Research Corporation Method and apparatus for reflective glare removal in digital photography useful in cervical cancer detection
US6606404B1 (en) * 1999-06-19 2003-08-12 Microsoft Corporation System and method for computing rectifying homographies for stereo vision processing of three dimensional objects
JP3429280B2 (en) * 2000-09-05 2003-07-22 理化学研究所 How to correct lens distortion in images
US6720874B2 (en) * 2000-09-29 2004-04-13 Ids Systems, Inc. Portal intrusion detection apparatus and method
US7058204B2 (en) * 2000-10-03 2006-06-06 Gesturetek, Inc. Multiple camera control system
IL156250A0 (en) * 2000-12-05 2004-01-04 Yeda Res & Dev Apparatus and method for alignment of spatial or temporal non-overlapping image sequences
US7167576B2 (en) * 2001-07-02 2007-01-23 Point Grey Research Method and apparatus for measuring dwell time of objects in an environment
US7444013B2 (en) * 2001-08-10 2008-10-28 Stmicroelectronics, Inc. Method and apparatus for recovering depth using multi-plane stereo and spatial propagation
US20030058111A1 (en) * 2001-09-27 2003-03-27 Koninklijke Philips Electronics N.V. Computer vision based elderly care monitoring system
US7688349B2 (en) * 2001-12-07 2010-03-30 International Business Machines Corporation Method of detecting and tracking groups of people
WO2003088157A1 (en) * 2002-04-08 2003-10-23 Newton Security Inc. Tailgating and reverse entry detection, alarm, recording and prevention using machine vision
US6917702B2 (en) * 2002-04-24 2005-07-12 Mitsubishi Electric Research Labs, Inc. Calibration of multiple cameras for a turntable-based 3D scanner
US7200266B2 (en) * 2002-08-27 2007-04-03 Princeton University Method and apparatus for automated video activity analysis
JP2004356683A (en) * 2003-05-27 2004-12-16 Fuji Photo Film Co Ltd Image management system
JP4865557B2 (en) * 2003-08-15 2012-02-01 スカーペ テクノロジーズ アクティーゼルスカブ Computer vision system for classification and spatial localization of bounded 3D objects
US7496226B2 (en) * 2003-09-19 2009-02-24 University Of Miami Multi-camera inspection of underwater structures
US7889113B2 (en) * 2003-10-10 2011-02-15 L-3 Communications Security and Detection Systems Inc. Mmw contraband screening system
DE10348684A1 (en) * 2003-10-15 2005-05-19 Link, Norbert, Dr. Distance image video camera
US7623674B2 (en) * 2003-11-05 2009-11-24 Cognex Technology And Investment Corporation Method and system for enhanced portal security through stereoscopy
US20050104960A1 (en) * 2003-11-17 2005-05-19 Mei Han Video surveillance system with trajectory hypothesis spawning and local pruning
DE10359415A1 (en) * 2003-12-16 2005-07-14 Trimble Jena Gmbh Method for calibrating a surveying device
US8050491B2 (en) * 2003-12-17 2011-11-01 United Technologies Corporation CAD modeling system and method
US8098290B2 (en) * 2004-01-30 2012-01-17 Siemens Corporation Multiple camera system for obtaining high resolution images of objects
US7463778B2 (en) * 2004-01-30 2008-12-09 Hewlett-Packard Development Company, L.P Motion estimation for compressing multiple view images
US7429999B2 (en) * 2004-05-24 2008-09-30 CENTRE DE RECHERCHE INDUSTRIELLE DU QUéBEC Camera calibrating apparatus and method
WO2007032819A2 (en) * 2005-07-21 2007-03-22 Regents Of The University Of Minnesota Camera placement and virtual-scene construction
US20070047837A1 (en) * 2005-08-29 2007-03-01 John Schwab Method and apparatus for detecting non-people objects in revolving doors
ITUD20050152A1 (en) * 2005-09-23 2007-03-24 Neuricam Spa ELECTRO-OPTICAL DEVICE FOR THE COUNTING OF PEOPLE, OR OTHERWISE, BASED ON STEREOSCOPIC VISION, AND ITS PROCEDURE
US20070127787A1 (en) * 2005-10-24 2007-06-07 Castleman Kenneth R Face recognition system and method
EP1949334B1 (en) * 2005-10-28 2019-01-02 Connaught Electronics Limited A method and apparatus for calibrating an image capturing device, and a method and apparatus for outputting image frames from sequentially captured image frames with compensation for image capture device offset
US20070268145A1 (en) * 2006-05-19 2007-11-22 Bazakos Michael E Automated tailgating detection via fusion of video and access control
DE102006050379A1 (en) * 2006-10-25 2008-05-08 Norbert Prof. Dr. Link Method and device for monitoring a room volume and calibration method
US7777783B1 (en) * 2007-03-23 2010-08-17 Proximex Corporation Multi-video navigation

Also Published As

Publication number Publication date
CA2667600A1 (en) 2008-05-02
JP2010507846A (en) 2010-03-11
EP2104904B1 (en) 2017-05-17
WO2008049404A2 (en) 2008-05-02
CN101601048A (en) 2009-12-09
AU2007308558B2 (en) 2012-03-08
AU2007308558A1 (en) 2008-05-02
CN101601048B (en) 2013-03-20
US8384768B2 (en) 2013-02-26
MX2009004225A (en) 2009-08-12
EP2104904A2 (en) 2009-09-30
WO2008049404A3 (en) 2009-08-20
US20100026786A1 (en) 2010-02-04

Similar Documents

Publication Publication Date Title
EP2104904B1 (en) Method and apparatus for monitoring a spatial volume and a calibration method
DE102014104712B4 (en) Registration of a scene disintegrating into clusters with visualized clusters
EP2457217B1 (en) Method and device for surveillance of an area
EP2690459B1 (en) Device and method for identifying and documenting at least one object passing through an irradiation field
EP2275989A1 (en) Stereoscopic 3D camera
WO2009095014A1 (en) Method and device for monitoring a spatial volume
DE102016201741A1 (en) Method for height detection
DE102015220031A1 (en) Method for confidence estimation for optical-visual pose determination
EP3142088A1 (en) Method for configuring multiple sub-areas of a desired protection area
AT406422B (en) THEODOLITE
DE102013107597A1 (en) Method for measuring width and height of building opening for producing e.g. rolling gate to close opening in garage, involves determining width and/or height by evaluating obtained distance and image data of opening and calibration device
EP3912127A1 (en) Method and device for inspecting hard-to-reach components
EP3420533B1 (en) Method for calibrating an optical measurement set-up
DE102005010225A1 (en) Method for comparing a real object with a digital model
EP2818824B1 (en) Apparatus comprising an optoelectronic 3D-sensor and method for recognising objects
DE102019133515B3 (en) Method and device for parallax determination of recordings of a multi-lens camera system
DE10128722C1 (en) Device for monitoring objects, evaluates image coarsely to determine displacement relative to last image of monitored object, evaluates more accurately if image offset greater than maximum
WO2020057849A1 (en) Computer-implemented method for compressing measurement data from a measurement of a measurement volume
EP3318838B1 (en) 3d scanning device and method for the three-dimensional scanning of objects
EP2645331A1 (en) Method for verifying the alignment of a traffic monitoring device
DE102023102837B3 (en) Procedure for defining a spatial boundary of a protection area
DE102017130897A1 (en) A method of determining range information from a map of a space area
WO2009068336A2 (en) Image processing module for estimating an object position of a surveillance object, method for detecting a surveillance object and computer program
DE102015200784A1 (en) Multi-camera video fire detection
EP4354083A1 (en) Method and device for generating a three-dimensional plan from a store of a building

Legal Events

Date Code Title Description
8127 New person/name/address of the applicant

Owner name: VITRACOM AG, 76133 KARLSRUHE, DE

R012 Request for examination validly filed

Effective date: 20131010

R082 Change of representative

Representative=s name: GEITZ TRUCKENMUELLER LUCHT CHRIST PATENTANWAEL, DE

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee