WO2004078552A1 - Method and device for monitoring the entry zone of vehicles - Google Patents

Method and device for monitoring the entry zone of vehicles Download PDF

Info

Publication number
WO2004078552A1
WO2004078552A1 PCT/AT2004/000073 AT2004000073W WO2004078552A1 WO 2004078552 A1 WO2004078552 A1 WO 2004078552A1 AT 2004000073 W AT2004000073 W AT 2004000073W WO 2004078552 A1 WO2004078552 A1 WO 2004078552A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
analysis
camera
carried out
vehicle
Prior art date
Application number
PCT/AT2004/000073
Other languages
German (de)
French (fr)
Inventor
Walter Lorenz
Original Assignee
Walter Lorenz
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Walter Lorenz filed Critical Walter Lorenz
Priority to EP04717518A priority Critical patent/EP1599373A1/en
Publication of WO2004078552A1 publication Critical patent/WO2004078552A1/en

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639—Details of the system layout
    • G08B13/19647—Systems specially adapted for intrusion detection in or around a vehicle
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05F—DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00—Power-operated mechanisms for wings
    • E05F15/40—Safety devices, e.g. detection of obstructions or end positions
    • E05F15/42—Detection using safety edges
    • E05F15/43—Detection using safety edges responsive to disruption of energy beams, e.g. light or sound
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/254—Analysis of motion involving subtraction of images
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19606—Discriminating between target movement or movement in an area of interest and other non-signicative movements, e.g. target movements induced by camera shake or movements of pets, falling leaves, rotating fan
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639—Details of the system layout
    • G08B13/19641—Multiple cameras having overlapping views on a single scene
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05F—DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00—Power-operated mechanisms for wings
    • E05F15/40—Safety devices, e.g. detection of obstructions or end positions
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05F—DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00—Power-operated mechanisms for wings
    • E05F15/70—Power-operated mechanisms for wings with automatic actuation
    • E05F15/73—Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05F—DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00—Power-operated mechanisms for wings
    • E05F15/40—Safety devices, e.g. detection of obstructions or end positions
    • E05F15/42—Detection using safety edges
    • E05F15/43—Detection using safety edges responsive to disruption of energy beams, e.g. light or sound
    • E05F2015/434—Detection using safety edges responsive to disruption of energy beams, e.g. light or sound with optical sensors
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05Y—INDEXING SCHEME RELATING TO HINGES OR OTHER SUSPENSION DEVICES FOR DOORS, WINDOWS OR WINGS AND DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION, CHECKS FOR WINGS AND WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05Y2400/00—Electronic control; Power supply; Power or signal transmission; User interfaces
    • E05Y2400/10—Electronic control
    • E05Y2400/52—Safety arrangements
    • E05Y2400/53—Wing impact prevention or reduction
    • E05Y2400/54—Obstruction or resistance detection
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05Y—INDEXING SCHEME RELATING TO HINGES OR OTHER SUSPENSION DEVICES FOR DOORS, WINDOWS OR WINGS AND DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION, CHECKS FOR WINGS AND WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05Y2800/00—Details, accessories and auxiliary operations not otherwise provided for
    • E05Y2800/40—Protection
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05Y—INDEXING SCHEME RELATING TO HINGES OR OTHER SUSPENSION DEVICES FOR DOORS, WINDOWS OR WINGS AND DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION, CHECKS FOR WINGS AND WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05Y2900/00—Application of doors, windows, wings or fittings thereof
    • E05Y2900/50—Application of doors, windows, wings or fittings thereof for vehicles
    • E05Y2900/51—Application of doors, windows, wings or fittings thereof for vehicles for railway cars or mass transit vehicles

Definitions

  • the invention relates to a method and a device for monitoring the entry area of vehicles, in particular rail vehicles, wherein the digital image signals recorded by at least one camera and possibly guided via an analog-digital converter are fed to a data processing device having a memory.
  • the object of the invention is therefore to create a method which on the one hand avoids the disadvantages indicated above and on the other hand is able to recognize fully automatically whether an object, in particular a person, is in the danger zone of the vehicle.
  • the object is achieved by the invention.
  • the method according to the invention is characterized in that the image signals are processed in a signal analyzer provided in the data processing device, with the image signals of individual images broken down into each pixel being summed over a certain period of time and / or a certain number of images for motion analysis and the mean value is formed and that a snapshot image is subtracted from this resulting image, the background image.
  • the invention it is possible for the first time to create a detection security for the boarding area of a vehicle which is equivalent to that of a train attendant.
  • people or objects or objects moving in the monitored area unlike unmoved people or objects, are clearly and unambiguously recognized.
  • the method according to the invention detects movements against a fixed background, the background being separated from the snapshot.
  • the images transmitted by the camera are summed in each pixel over a certain period of time t or a certain number of images and the mean value is formed.
  • the resulting image contains only quasi static, i.e. background information.
  • This motion detection is carried out by a so-called interframe
  • the snapshot is subtracted from the background image. If the resulting image is empty, ie all pixels are 0, there is no moving object in the image. Movements are thus correctly registered.
  • Moving people or objects must be able to be lifted perfectly from the background. If a movement is detected in the danger zone of the surveillance, for example within a range of up to 60 cm from the vehicle, there is a risk, the immobilizer or traction lock of the vehicle must be activated. In the case of immovable objects, it is essential whether they are an integral part of the environment to be monitored. Subsequently, only objects are spoken of and only there, where it is essential to make a distinction between people and objects.
  • the image resulting from the motion analysis is divided into corresponding rectangles, in particular squares, and the pixels contained in each partial rectangle are calculated with regard to mean value, scatter, bandwidth and mean deviation.
  • This image square analysis is used as a first approximation for motion detection.
  • the difference image is preferably subdivided into squares and the values shown above are calculated from each partial square over all pixels.
  • the most meaningful is the bandwidth of the pixels. All squares in which the bandwidth exceeds a presettable value are marked as “Danger”. If the number of these "endangered” squares exceeds a certain percentage, “Danger” is signaled. The percentage is calculated in relation to the size of the monitored area the size of a person or part of a human body as seen from the camera.
  • the calculation is carried out using the methods of statistical observation. This calculation method has proven to be very advantageous.
  • a structure analysis is carried out after the movement analysis, the gray value profile of an image being created along image lines and / or image columns for structure analysis, the structure, preferably shown in a diagram, being created.
  • the motion analysis reacts with video cameras, be it monochrome or color, even if moving shadows appear in the surveillance area.
  • the above The motion analysis described also reacts even if the shadows are moving. In this case, the snapshot changes significantly compared to the background image. A movement is consequently recognized, but this does not pose any danger to a person. Moving shadows in the surveillance area can often be expected, especially at the stops of local transport vehicles.
  • Structure grayscale profile along image lines or image columns.
  • a structure can therefore be represented as a diagram in an x-y curve.
  • two structures in particular the structures of the background image and the instant image, are compared with one another for a shadow analysis, the one structure being multiplied by a multiplication of all pixels by a factor k (k ⁇ > 0) and a shift by an offset d in the other structure is transferred.
  • Two structures are therefore similar if one structure can be transferred to the other. With shadow formation, the similarity of the structures is preserved.
  • the difference between two pixels is calculated globally via the image, a copy of the original image being created, this copy being shifted by one line and a column, and then the copy being subtracted from the original image.
  • intra-frame difference a step is taken to implement the shadow analysis.
  • the difference is formed both with a snapshot and with a background image and the images created in this way are divided. This step is also called interframe division. If one executes the intra-frame difference on the snapshot and background image and divides the resulting images, the corresponding factor k is obtained for each pixel.
  • the two difference images are compared with one another in rows and / or columns.
  • the tolerance setting means that smooth brightness transition at the shadow edges is tolerated.
  • the factor k is calculated at the beginning of an image line and followed up to the end of the line, as a result of which a tolerance bandwidth is created which is compared with the mean tolerance value over the image line. In and outside the shadow, the factor k is almost equal to the mean over the image line. At the shadow edges, it differs significantly from it. The sharper the edges, the greater the deviation. The places of greatest deviation localize the shadow edges. Very diffuse shadow edges are no longer recognized here. Sharp edges are eliminated in the contour analysis described below.
  • a contour analysis is carried out for a shadow analysis, possibly after the structure analysis, the factors k being entered in a matrix congruent with the image and the geometric width of the contour being calculated at the points of greatest deviation.
  • the second step in shadow detection is contour analysis.
  • the structure analysis alone does not allow shadows to be recognized without a doubt.
  • the steps outlined above are required.
  • the locations with the deviations of the factor k lying above the tolerance band are entered in a matrix congruent with the image.
  • the geometric width of the contour is calculated. The sharper the edge of the shadow, the narrower the contour. Margins with less than a specified minimum width can be eliminated here.
  • At least one image of the vehicle is stored in the data processing device, this image is optionally updated periodically and this image is compared in the data processing device with a snapshot, in particular with a snapshot taken shortly before the start of the journey ,
  • This comparative analysis assumes that the image of the vehicle itself does not change.
  • Two images are preferably saved: • The vehicle image with the door open • the vehicle picture with the door closed.
  • the image zone is set once during installation.
  • the update is carried out while driving by distinguishing between the moving and the still image area.
  • an object analysis is carried out, in particular for stationary objects in the entry area of the vehicle, this object analysis being carried out in the background image and a difference image being calculated according to claim 7, and the height layer lines which arise in the value profile and are parallel to the edge of the image with the Contour analysis can be combined.
  • a resting object equivalent to the background. The analysis of stationary objects is therefore only carried out in the background image.
  • the close outer area of a vehicle up to about 60cm distance is characterized by a uniform floor in all known cases. That can be, among other things
  • an object analysis is carried out, in particular for stationary objects in the entrance area of the vehicle, the basic period being determined from the gray value profile diagram of an image line parallel to the vehicle by means of the Fourier analysis.
  • This analysis is carried out when there is no platform, which is particularly the case with full railways, express railways or country roads. It will be a
  • Iteration method selected, consisting of Fourier analysis (spectral analysis) and image square analysis.
  • the contour analysis examines the floor on an existing platform.
  • the intra-frame difference image is first calculated. This creates "contour lines” in the value profile of the difference image. If the camera is arranged correctly, these contour lines lie parallel to the edge of the image. If there is only one elevation line, calculated from the edge of the picture, there is one platform edge, if there are 3 elevation lines, there is also the yellow edge.
  • a smooth structure must prevail between the contour lines, ie values almost zero must appear in the difference image. In any case, these lines must be recognizable in at least about half of the picture, then a platform is assumed and if this line is interrupted, "danger” is signaled or the iteration analysis with subsequent structure analysis is used.
  • Every homogeneous structure has a period in which it repeats itself.
  • the gray value profile of an image line parallel to the vehicle gives a periodic signal.
  • the basic period of this signal is determined by the Fourier analysis.
  • the object detection can be interrupted; there is no danger.
  • an object analysis is carried out, in particular for stationary objects in the entry area of the vehicle, the difference image being subdivided into rectangles, in particular squares, the size of which corresponds to the basic period, and for each rectangle the mean value, the bandwidth, and the scatter and the mean deviation is calculated.
  • the image square analysis already shown is also used here again. However, while the size of the image squares was previously freely selectable, it must match the basic period here. It does not matter whether the basic period shifts locally with the distance to the vehicle or not. If the gray value distribution is drawn in the form of a sine curve, it follows that the mean of the period, bandwidth, scatter and mean Deviation are constant. A deviation from the constant signals a disturbance of the homogeneity.
  • an iteration is carried out, an image being created from the calculated values of the rectangles, in which a rectangle is reduced to a pixel and these methods are carried out repeatedly until the resulting image is only parallel to one line Vehicle exists. From the previously calculated values of the image squares, new images are formed in which a square shrinks to a pixel. The iteration is terminated when there is only one image line parallel to the vehicle. The Fourier analysis of this last line then gives a pure DC component or only a fundamental wave. If significant harmonics are still present, an object can be expected.
  • a structural analysis is carried out after the iteration. Since shadows cannot be differentiated from objects according to the iteration process, a previously described structure analysis must be carried out when an object is recognized.
  • a distance analysis is carried out using two cameras, each camera creating an image at the same time and the contours being filtered from each image, and then aligning both images by line-by-line displacement along the vehicle become.
  • the distance analysis method is of particular importance because it immediately recognizes and hides all shadows. Using two monochrome or color video cameras, for example, the distance of an object from the plane of the cameras is measured as follows:
  • the geometrical arrangement of the cameras relative to the floor and to each other is known.
  • the cameras are set so that they are exactly the same on the ground Take picture. Since the setting is done electronically, this is not a problem.
  • the images are recorded at the same time. This requires two mutually independent image converters with a memory unit.
  • the recording itself is triggered by the image analysis device.
  • both images are made to coincide by shifting them line by line along the vehicle. If both images coincide, the object height can be calculated from the shift. The larger the shift, the larger the object. According to the definition, the images are covered when the subtraction of the overlapping regions approaches zero. In the case of pure shadow formation, there is image coverage without image shift.
  • the calculation according to claim 15 is carried out in the background image of each camera for the detection of stationary objects or for the detection of the floor in the entry area.
  • the calculation according to claim 15 is carried out in the snapshot of each camera for the detection of moving objects to distinguish shadows.
  • the frequency is counted, in particular by people entering and / or leaving the vehicle.
  • this method according to the invention it is also possible to carry out a frequency count.
  • At least one camera is arranged in the entry area of vehicles, in particular rail vehicles, which is connected, possibly via an analog-digital converter, to a data processing device having a memory.
  • the device according to the invention is further characterized in that the camera has optics corresponding to the detection of the entry area, the entry area, with the vehicle door open, being the exterior and interior located in the danger area and that a signal analyzer is provided in the data processing device.
  • a monochrome video camera optionally with integrated infrared lighting, a color video camera, a temperature-sensitive camera, a camera with integrated distance measurement or a distance-sensitive camera is provided as the camera.
  • the method described above can be carried out with all cameras shown here.
  • further camera-specific analyzes can be used as follows: With color video cameras, the additional color information can be analyzed in the same way as the brightness information. Since object colors usually stand out from the ground, this evaluation provides additional security. This applies just as much to motion analysis as it does to the analysis of still objects.
  • Temperature-sensitive cameras can be recognized by people if the ambient temperature deviates from human temperature. However, jammed objects such as handbags, straps, dog leads are not recognized. However, it can be used as a supplement to the video camera, especially when distinguishing resting objects from people by measuring the Object temperature do an excellent job. In the above analysis methods, it is also particularly easy to identify unclothed parts of the body, such as the face, fingers or the like.
  • the distance is based on a distance measurement using a single camera
  • Distance measurement based on the transit time measurement of a transmitted light beam and its reflection. Every object from which the light beam is sufficiently reflected is recognized and its distance from the camera is calculated. With these cameras, the distance information is available in addition to the brightness information. All of the analysis methods described above can also be applied to distance measurement. Since the arrangement of the camera on the floor is known, iteration analysis or structural analysis are particularly suitable for this.
  • distance-sensitive cameras can also be used.
  • At least one data processing device is provided for each vehicle.
  • a computer per vehicle can be used as a minimum, one computer per camera and per vehicle as a maximum.
  • At least one camera is assigned to each signal analyzer. This ensures redundant security.
  • the signal analyzer emits corresponding signals or commands to the traction lock or start-up release or a signal for connecting a camera to a driver's cab monitor.
  • the vehicle status preferably automatically, can be input to the signal analyzer. This configuration also supports full automation.
  • Fig. 1 shows a schematic diagram of the monitoring
  • Fig. 2 is a diagram of the monitoring device.
  • a vehicle 1 shows a vehicle 1, in this case a wagon of a train for passenger transportation.
  • This wagon has two doors 2 and associated areas for boarding and alighting for the passengers.
  • Cameras 3 are provided above the doors 2 for monitoring this area.
  • the entry area 4 to be recorded with the camera 3 is shown schematically - dotted -.
  • a monochrome video camera with integrated infrared lighting is installed in the left half of the wagon above door 2 in order to receive signals that can be evaluated even in poor lighting conditions.
  • Two cameras 3 are installed in the right half of the wagon, which also makes it possible to measure distances to a limited extent. In both variants - with door 2 open - both the outside and the interior are monitored in the danger area of doors 2.
  • the image captured by the camera 3 is spatially divided into zones with different security levels. With the camera 3, the entry area 4 at risk can be set very precisely, thereby defining the area to be monitored.
  • Color cameras, temperature-sensitive cameras, cameras with integrated distance measurement or a distance-sensitive camera can also be provided as cameras 3.
  • the camera 3 is connected, possibly via an analog-digital converter, to a data processing device (not shown) which has a memory.
  • a signal analyzer is also provided in the data processing device.
  • a data processing system can be provided for each vehicle 1 or such a system can also be provided for each camera 3.
  • a circuit diagram of the monitoring device is shown schematically.
  • the digitized signals of the monitored entry areas 4 captured by the cameras 3 are fed to a signal analyzer 5, which in the simplest case can be a portable industrial PC.
  • a signal analyzer 5 which in the simplest case can be a portable industrial PC.
  • the signal analyzer 5 such as computing power, storage space, at least one data processing device per vehicle, a maximum of one system per camera 3 and 1 vehicle can be used.
  • the aim of the present method of image analysis according to the invention aims at a reliable decision between the first two states. Nevertheless, from today's perspective, case 3 cannot be ruled out.
  • the cameras 3 are connected to the signal analyzer 5 via analog-digital converters 6. Furthermore, the vehicle status is entered into the signal analyzer 5 via the inputs 7, in particular fully automatically.
  • the vehicle status can be: Vehicle 1 is standing, door release, door 2 open, closing command or the like.
  • the signal analyzer 5 has at least three outputs.
  • An output 8 is connected to the traction lock and an output 9 to the start enable.
  • the third output 10 is used to switch through from the camera 3 to the driver's cab monitor 11.
  • the image analysis has to recognize in the monitored area:
  • the motion analysis is supplemented with the structure analysis.
  • the structural analysis can be carried out in two steps, namely the intraframe difference and the interframe division.
  • the contour analysis is used as the second step of shadow detection.
  • Another step to optimize the monitoring is to carry out a comparative analysis.
  • the object analysis is preferably used to record the condition of the soil.
  • a contour analysis with an iteration analysis or Fourier analysis and an image square analysis is carried out.
  • the image square analysis is followed by an iteration and possibly a shadow analysis.
  • a distance analysis could further optimize the result of the monitoring.
  • the method shown above can also be used for frequency counting. It is therefore entirely possible to use it to record the frequency of those entering and / or exiting.

Abstract

The invention relates to a method and a device for monitoring the entry zone (4) of vehicles (1), in particular rail vehicles. Digital image signals that are captured by at least one camera (3) and optionally conducted via an analog-digital converter (6) are fed to a data processing device containing a memory. The image signals are processed in a signal analyser (5) that is provided in a data processing device. To carry out a motion analysis, the image signals of individual images, which are broken down into individual pixels, are added together for a specific time period and/or a specific number of images and the average value is calculated. An instant image is subtracted from this resultant, background image. In addition, a shadow analysis can be carried out.

Description

Verfahren und Einrichtung zur Überwachung des Einstieqsbereic es von Method and device for monitoring the entry area of
Fahrzeugenvehicles
Die Erfindung betrifft ein Verfahren und eine Einrichtung zur Überwachung des Einstiegsbereiches von Fahrzeugen, insbesondere von Schienenfahrzeugen, wobei die von mindestens einer Kamera erfassten, gegebenenfalls über einen Analog-Digilal-Wandler geführten, digitalen Bildsignale einem, einen Speicher aufweisenden, Datenverarbeitungseinrichtung zugeführt werden.The invention relates to a method and a device for monitoring the entry area of vehicles, in particular rail vehicles, wherein the digital image signals recorded by at least one camera and possibly guided via an analog-digital converter are fed to a data processing device having a memory.
Beim Betrieb von Fahrzeugen, insbesondere von Schienenfahrzeugen, des öffentlichen Verkehrs ohne Zugbegleiter muß beim Schließen der Türen und bei der Abfahrt des Fahrzeuges sichergestellt sein, dass sich keine Personen im Türbereich befinden. Es ist an sich eine Überwachung des Innenraumes imWhen operating vehicles, especially rail vehicles, in public transport without a train attendant, it must be ensured when closing the doors and when the vehicle is leaving that there are no people in the door area. It is in itself a surveillance of the interior in the
Türbereich mit Lichtschranken, Näherungsschaltern, aktiven Infrarot-Tastern oder passiven Infrarot-Bewegungsmeldern, mit oder ohne Optik bekannt.Door area with light barriers, proximity switches, active infrared buttons or passive infrared motion detectors, known with or without optics.
Alle diese Verfahren haben jedoch entscheidende Nachteile. So wird nicht der gesamte Türbereich überwacht, sondern immer nur Teilbereiche desselben. Weiters ist es nachteilig, dass der Einstellbereich der Überwachungseinrichtung ist nicht exakt definierbar ist. Ferner ist es ein gravierender Nachteil, dass die Sensorik nicht auf kleine Gegenstände, wie beispielsweise eingeklemmte Hundeleinen reagiert. Überwacht wird derzeit nur der Innenraum der Fahrzeuge.However, all of these methods have major disadvantages. This means that not the entire door area is monitored, but only partial areas of the same. Furthermore, it is disadvantageous that the setting range of the monitoring device cannot be exactly defined. It is also a serious disadvantage that the sensor system does not react to small objects, such as pinched dog leads. Only the interior of the vehicles is currently monitored.
Aufgabe der Erfindung ist es daher, ein Verfahren zu schaffen, das einerseits die oben aufgezeigten Nachteile vermeidet und das anderseits in der Lage ist, vollautomatisch zu erkennen, ob sich ein Objekt, insbesondere eine Person, im Gefahrenbereich des Fahrzeuges befindet.The object of the invention is therefore to create a method which on the one hand avoids the disadvantages indicated above and on the other hand is able to recognize fully automatically whether an object, in particular a person, is in the danger zone of the vehicle.
Die Aufgabe wird durch die Erfindung gelöst. Das erfindungsgemäße Verfahren ist dadurch gekennzeichnet, dass in einem, in der Datenverarbeitungseinrichtung vorgesehenen, Signalanalysator die Bildsignale verarbeitet werden, wobei für eine Bewegungsanalyse die Bildsignale einzelner, in jeden Bildpunkt zerlegten, Bilder über einen bestimmten Zeitraum und/oder einer bestimmten Anzahl von Bildern summiert werden und der Mittelwert gebildet wird und dass von diesem daraus resultierenden Bild, dem Hintergrundbild, ein Momentbild subtrahiert wird. Mit der Erfindung ist es erstmals möglich, eine Erkennungssicherheit für den Einstiegsbereich eines Fahrzeuges zu schaffen, die einem Zugbegleiter äquivalent ist. So werden mit dem erfindungsgemäßen Verfahren im überwachten Bereich bewegte Personen oder Objekte bzw. Gegenständen zum Unterschied von unbewegten Personen oder Objekten eindeutig und zweifelsfrei erkannt.The object is achieved by the invention. The method according to the invention is characterized in that the image signals are processed in a signal analyzer provided in the data processing device, with the image signals of individual images broken down into each pixel being summed over a certain period of time and / or a certain number of images for motion analysis and the mean value is formed and that a snapshot image is subtracted from this resulting image, the background image. With the invention it is possible for the first time to create a detection security for the boarding area of a vehicle which is equivalent to that of a train attendant. Thus, with the method according to the invention, people or objects or objects moving in the monitored area, unlike unmoved people or objects, are clearly and unambiguously recognized.
Mit dem erfindungsgemäßen Verfahren werden Bewegungen vor einem festen Hintergrund erfasst, wobei der Hintergrund von der Momentaufnahme getrennt wird. Dabei werden die von der Kamera übertragenen Bilder in jedem Bildpunkt über einen bestimmten Zeitraum t oder eine bestimmte Anzahl von Bildern summiert und der Mittelwert gebildet. Das daraus resultierende Bild enthält ausschließlich quasi statische, also Hintergrundinformationen.The method according to the invention detects movements against a fixed background, the background being separated from the snapshot. The images transmitted by the camera are summed in each pixel over a certain period of time t or a certain number of images and the mean value is formed. The resulting image contains only quasi static, i.e. background information.
Diese Bewegungserkennung erfolgt durch eine so genannte Interframe-This motion detection is carried out by a so-called interframe
Differenzbildung. Das Momentbild wird vom Hintergrundbild subtrahiert. Ist das resultierende Bild leer, sind also alle Bildpunkte 0, so ist kein bewegtes Objekt im Bild. Bewegungen werden somit einwandfrei registriert.Difference. The snapshot is subtracted from the background image. If the resulting image is empty, ie all pixels are 0, there is no moving object in the image. Movements are thus correctly registered.
Bewegte Personen oder Gegenstände müssen einwandfrei vom Hintergrund abgehoben werden können. Wird nämlich eine Bewegung im Gefahrenbereich der Überwachung, etwa im Bereich von bis zu 60 cm Abstand vom Fahrzeug, erkannt, besteht also Gefahr, muss die Wegfahr- oder Traktionssperre des Fahrzeuges aktiviert werden. Bei unbewegten Gegenständen ist es von essentieller Bedeutung, ob diese integrierter Bestandteil der zu überwachenden Umgebung sind. Es wird in weiterer Folge nur mehr von Objekten gesprochen und nur dort, wo es wesentlich ist, eine Unterscheidung zwischen Personen und Objekten gemacht.Moving people or objects must be able to be lifted perfectly from the background. If a movement is detected in the danger zone of the surveillance, for example within a range of up to 60 cm from the vehicle, there is a risk, the immobilizer or traction lock of the vehicle must be activated. In the case of immovable objects, it is essential whether they are an integral part of the environment to be monitored. Subsequently, only objects are spoken of and only there, where it is essential to make a distinction between people and objects.
Nach einer Weiterbildung der Erfindung wird das aus der Bewegungsanalyse resultierende Bild, das Differenzbild, in entsprechende Rechtecke, insbesondere Quadrate, unterteilt und von jedem Teilrechteck werden die enthaltenen Bildpunkte hinsichtlich Mittelwert, Streuung, Bandbreite und mittlere Abweichung berechnet. Diese Bildquadratanalyse wird als erste Näherung zur Bewegungserkennung eingesetzt. Das Differenzbild wird hierbei in vorzugsweise Quadrate unterteilt und von jedem Teilquadrat werden über alle Bildpunkte die oben aufgezeigten Werte berechnet.According to a further development of the invention, the image resulting from the motion analysis, the difference image, is divided into corresponding rectangles, in particular squares, and the pixels contained in each partial rectangle are calculated with regard to mean value, scatter, bandwidth and mean deviation. This image square analysis is used as a first approximation for motion detection. The difference image is preferably subdivided into squares and the values shown above are calculated from each partial square over all pixels.
Am Aussagekräftigsten ist die Bandbreite der Bildpunkte. Alle Quadrate, in denen die Bandbreite einen voreinstellbaren Wert übersteigt, werden als „Gefahr" gekennzeichnet. Übersteigt die Zahl dieser „gefährdeten" Quadrate einen bestimmten Prozentsatz, so wird „Gefahr" signalisiert. Der Prozentsatz wird berechnet aus der Größe des überwachten Bereiches im Verhältnis zur Größe eines Menschen oder eines menschlichen Körperteiles, wie von der Kamera gesehen.The most meaningful is the bandwidth of the pixels. All squares in which the bandwidth exceeds a presettable value are marked as "Danger". If the number of these "endangered" squares exceeds a certain percentage, "Danger" is signaled. The percentage is calculated in relation to the size of the monitored area the size of a person or part of a human body as seen from the camera.
Mit der Bildquadratanalyse werden die häufigsten Fälle, beispielsweise eine Person passiert den Überwachungsbereich, bereits abgedeckt.The most common cases, for example a person passing through the surveillance area, are already covered with the image square analysis.
Gemäß einer Ausgestaltung der Erfindung erfolgt die Berechnung nach den Methoden der statistischen Beobachtung. Diese Berechnungsmethode hat sich als sehr vorteilhaft herausgestellt.According to one embodiment of the invention, the calculation is carried out using the methods of statistical observation. This calculation method has proven to be very advantageous.
Nach einem weiteren besonderen Merkmal der Erfindung wird nach der Bewegungsanalyse eine Strukturanalyse durchgeführt, wobei zur Strukturanalyse das Grau wertprofil eines Bildes entlang von Bildzeilen und/oder Bildspalten, die, vorzugsweise in einem Diagramm dargestellte, Struktur, erstellt wird. Die Bewegungsanalyse reagiert bei Videokameras, seien es monochrome oder Farbe, auch dann, wenn im Überwachungsbereich bewegte Schatten auftreten. Die oben beschriebene Bewegungsanalyse reagiert also auch dann, wenn es sich um bewegte Schatten handelt. In dem Fall verändert sich das Momentbild wesentlich gegenüber dem Hintergrundbild. Es wird folgerichtig eine Bewegung erkannt, die jedoch keine Gefahr für eine Person darstellt. Insbesondere an Haltestellen von Nahverkehrs- Fahrzeugen ist häufig mit bewegten Schatten im Überwachungsbereich zu rechnen.According to a further special feature of the invention, a structure analysis is carried out after the movement analysis, the gray value profile of an image being created along image lines and / or image columns for structure analysis, the structure, preferably shown in a diagram, being created. The motion analysis reacts with video cameras, be it monochrome or color, even if moving shadows appear in the surveillance area. The above The motion analysis described also reacts even if the shadows are moving. In this case, the snapshot changes significantly compared to the background image. A movement is consequently recognized, but this does not pose any danger to a person. Moving shadows in the surveillance area can often be expected, especially at the stops of local transport vehicles.
Die Strukturanalyse geht davon aus, dass sich zwar die Bildpunkte des Momentbildes zum Hintergrundbild absolut verändern, verantwortlich dafür die Helligkeitsänderung, jedoch die Verhältnisse benachbarter Bildpunkte ähnlich sind. Betrachtet man ein monochromes Videobild, dann lauten in diesem hier entwickelten und erfindungsgemäßen Verfahren die Definitionen wie folgt:The structural analysis assumes that although the pixels of the snapshot change absolutely to the background image, the change in brightness is responsible for this, but the ratios of neighboring pixels are similar. If one looks at a monochrome video image, the definitions in this method developed here and according to the invention are as follows:
Struktur = Grauwertprofil entlang von Bildzeilen oder Bildspalten.Structure = grayscale profile along image lines or image columns.
Eine Struktur ist also als Diagramm in einer x-y- Kurve darstellbar.A structure can therefore be represented as a diagram in an x-y curve.
Gemäß einer weiteren Ausgestaltung der Erfindung werden für eine Schattenanalyse zwei Strukturen, insbesondere die Strukturen von Hintergrundbild und Momentbild, miteinander verglichen, wobei die eine Struktur durch Multiplikation aller Bildpunkte mit einem Faktor k (k<>0) und einer Verschiebung um einen Offset d in die andere Struktur übergeführt wird. Zwei Strukturen sind also dann ähnlich, wenn eine Struktur in die andere Struktur übergeführt werden kann. Bei einer Schattenbiidung bleibt die Ähnlichkeit der Strukturen gewahrt.According to a further embodiment of the invention, two structures, in particular the structures of the background image and the instant image, are compared with one another for a shadow analysis, the one structure being multiplied by a multiplication of all pixels by a factor k (k <> 0) and a shift by an offset d in the other structure is transferred. Two structures are therefore similar if one structure can be transferred to the other. With shadow formation, the similarity of the structures is preserved.
Nach einem besonderen Merkmal der Erfindung werden die Differenz zweier Bildpunkte global über das Bild berechnet, wobei eine Kopie des Original-Bildes erstellt wird, diese Kopie um eine Zeile und eine Spalte verschoben wird und anschließend die Kopie vom Original-Bild subtrahiert wird. Mit dieser so genannten Intraframe-Differenz wird ein Schritt zur Realisierung der Schattenanalyse gelegt. Gemäß einem weiteren Merkmal der Erfindung wird die Differenzbildung sowohl mit einem Momentbild als auch mit einem Hintergrundbild durchgeführt und die derart erstellten Bilder werden dividiert. Dieser Schritt wird auch Interframe- Division genannt. Führt man nämlich die Intraframe- Differenz auf Momentbild und Hintergrundbild aus und dividiert die so entstehenden Bilder, erhält man zu jedem Bildpunkt den entsprechenden Faktor k.According to a special feature of the invention, the difference between two pixels is calculated globally via the image, a copy of the original image being created, this copy being shifted by one line and a column, and then the copy being subtracted from the original image. With this so-called intra-frame difference, a step is taken to implement the shadow analysis. According to a further feature of the invention, the difference is formed both with a snapshot and with a background image and the images created in this way are divided. This step is also called interframe division. If one executes the intra-frame difference on the snapshot and background image and divides the resulting images, the corresponding factor k is obtained for each pixel.
Die beiden Differenzbilder werden miteinander Zeilen- und/oder spaltenweise verglichen.The two difference images are compared with one another in rows and / or columns.
Dabei wird die Näherungsformel (1 ) verwendet: sei P, = ein Bildpunkt i aus dem ersten Bild sei Q, = ein Bildpunkt i aus dem zweiten Bild sei K, = (P,+ι - P, )/( Qι+ι - Q, ) der Faktor k (aus Anspruch 5). sei dK das zulässige ToleranzbandThe approximation formula (1) is used here: let P, = a pixel i from the first picture let Q, = a pixel i from the second picture let K, = (P, + ι - P,) / (Q ι + ι - Q,) the factor k (from claim 5). let dK be the permissible tolerance band
Dann muß für strukturelle Ähnlichkeit geltenThen structural similarity must apply
K,+ι <= K, + dKK, + ι <= K, + dK
Bei Verwendung dieser Formel fällt d heraus.When this formula is used, d drops out.
Bzw. nach der Formel (2): sei P, = ein Bildpunkt i aus dem ersten Bild sei Q, = ein Bildpunkt i aus dem zweiten Bild sei K, = P, /Q, der Faktor k (gemäß Anspruch 5) sei D, = P, - Q, der Offset d (gemäß Anspruch 5) sei dK die zulässige Toleranz für k, dD die zulässige Toleranz für D.Respectively. according to the formula (2): let P, = one pixel i from the first picture be Q, = one pixel i from the second picture let K, = P, / Q, the factor k (according to claim 5) be D, = P, - Q, the offset d (according to claim 5) let dK the allowable tolerance for k, dD the allowable tolerance for D.
So muß für alle Punkte i der beiden Bilder geltenSo must apply to all points i of the two pictures
K,+1 <= K, ± dKK, +1 <= K, ± dK
Dι+ι <= D, ± dDD ι + ι <= D, ± dD
Bei beiden Formeln wird, durch die Toleranzvorgabe, gleitender Helligkeitsübergang an den Schattenrändern toleriert. Nach einem weiteren Merkmal der Erfindung wird der Faktor k am Beginn einer Bildzeile berechnet und bis zum Zeilenende verfolgt, wodurch eine Toleranz- Bandbreite erstellt wird, die mit dem Toleranz-Mittelwert über die Bildzeile verglichen wird. Im sowie außerhalb des Schattens ist der Faktor k nahezu gleich dem Mittelwert über die Bildzeile. An den Schattenrändern weicht er deutlich davon ab. Je schärfer die Ränder, desto größer die Abweichung. Die Orte der größten Abweichung lokalisieren somit die Schattenränder. Sehr diffuse Schattenränder werden hier bereits nicht mehr erkannt. Scharfe Ränder werden in der nachstehend beschriebenen Konturenanalyse ausgeschieden.In both formulas, the tolerance setting means that smooth brightness transition at the shadow edges is tolerated. According to a further feature of the invention, the factor k is calculated at the beginning of an image line and followed up to the end of the line, as a result of which a tolerance bandwidth is created which is compared with the mean tolerance value over the image line. In and outside the shadow, the factor k is almost equal to the mean over the image line. At the shadow edges, it differs significantly from it. The sharper the edges, the greater the deviation. The places of greatest deviation localize the shadow edges. Very diffuse shadow edges are no longer recognized here. Sharp edges are eliminated in the contour analysis described below.
Gemäß einer besonderen Weiterbildung der Erfindung wird für eine Schattenanalyse, gegebenenfalls nach der Strukturanalyse, eine Konturenanalyse durchgeführt, wobei die Faktoren k in eine dem Bild deckungsgleiche Matrix eingetragen werden und an den Stellen größter Abweichung die geometrische Breite der Kontur errechnet wird. Der zweite Schritt in der Schattenerkennung besteht in der Konturenanalyse. Durch die Strukturanalyse alleine sind Schatten nicht zweifelsfrei erkennbar. Um die Konturen des Schattens einwandfrei zu lokalisieren, sind die oben aufgezeigten Schritte erforderlich. Dabei werden die Orte mit den über dem Toleranzband liegenden Abweichungen des Faktors k in eine dem Bild deckungsgleiche Matrix eingetragen. Nun wird die geometrische Breite der Kontur berechnet. Je schärfer der Schattenrand, desto schmäler die Kontur. Ränder mit weniger als einer vorgegebenen Mindestbreite können hier ausgeschieden werden.According to a special development of the invention, a contour analysis is carried out for a shadow analysis, possibly after the structure analysis, the factors k being entered in a matrix congruent with the image and the geometric width of the contour being calculated at the points of greatest deviation. The second step in shadow detection is contour analysis. The structure analysis alone does not allow shadows to be recognized without a doubt. In order to correctly localize the contours of the shadow, the steps outlined above are required. The locations with the deviations of the factor k lying above the tolerance band are entered in a matrix congruent with the image. Now the geometric width of the contour is calculated. The sharper the edge of the shadow, the narrower the contour. Margins with less than a specified minimum width can be eliminated here.
Nach einem weiteren besonderen Merkmal der Erfindung wird in der Datenverarbeitungseinrichtung mindestens ein Bild des Fahrzeuges, vorzugsweise mit geschlossener Türe, gespeichert, dieses Bild wird gegebenenfalls periodisch aktualisiert und dieses Bild wird in der Datenverarbeitungseinrichtung mit einem, insbesondere mit einem kurz vor Fahrtantritt erstellten, Momentbild verglichen. Bei dieser vergleichenden Analyse wird vorausgesetzt, dass sich das Bild des Fahrzeuges selbst nicht verändert. Es werden vorzugsweise zwei Bilder gespeichert: • das Fahrzeugbild mit offener Türe • das Fahrzeugbild mit geschlossener Türe.According to a further special feature of the invention, at least one image of the vehicle, preferably with the door closed, is stored in the data processing device, this image is optionally updated periodically and this image is compared in the data processing device with a snapshot, in particular with a snapshot taken shortly before the start of the journey , This comparative analysis assumes that the image of the vehicle itself does not change. Two images are preferably saved: • The vehicle image with the door open • the vehicle picture with the door closed.
Diese beiden Bilder werden automatisch in größeren Zeitabständen aktualisiert, damit eventuelle Verschmutzungen des Fahrzeuges sich nicht auf die Bildanalyse auswirken.These two images are automatically updated at larger intervals so that any soiling of the vehicle does not affect the image analysis.
Die Bildzone wird bei der Installation einmal eingestellt. Die Aktualisierung erfolgt während der Fahrt durch Unterscheidung zwischen dem bewegten und dem unbewegten Bildbereich.The image zone is set once during installation. The update is carried out while driving by distinguishing between the moving and the still image area.
Eine Störung der Bilder, mit der Ausnahme von Schatten, wird in jedem Fall als Gefahr gemeldet. Diese Analyse eignet sich bei Videokameras besonders gut zur Erkennung eingeklemmter Personen und Objekte.A disturbance of the images, with the exception of shadows, is reported as a danger in any case. With video cameras, this analysis is particularly well suited for the detection of trapped people and objects.
Gemäß einer weiteren Ausgestaltung wird eine Objektanalyse, insbesondere nach ruhenden Objekten im Einstiegsbereich des Fahrzeuges, durchgeführt, wobei diese Objektanalyse im Hintergrundbild erfolgt und ein Differenz-Bild nach Anspruch 7 berechnet wird und die im Werteprofil entstehenden Höhenschichtlinien, die parallel zum Bildrand liegen, mit der Konturenanalyse kombiniert werden. Ein ruhendes Objekt dem Hintergrund gleichwertig. Die Analyse ruhender Objekte wird daher ausschließlich im Hintergrundbild durchgeführt.According to a further embodiment, an object analysis is carried out, in particular for stationary objects in the entry area of the vehicle, this object analysis being carried out in the background image and a difference image being calculated according to claim 7, and the height layer lines which arise in the value profile and are parallel to the edge of the image with the Contour analysis can be combined. A resting object equivalent to the background. The analysis of stationary objects is therefore only carried out in the background image.
Der nahe Außenbereich eines Fahrzeuges bis etwa 60cm Abstand ist in allen bekannten Fällen durch einen gleichförmigen Boden gekennzeichnet. Das kann unter anderem seinThe close outer area of a vehicle up to about 60cm distance is characterized by a uniform floor in all known cases. That can be, among other things
• ein Bahnsteig bzw. Gehsteig o ein Straßenbelag o ein Schotterbett o ein Sandbett• a platform or sidewalk o a road surface o a ballast bed o a sand bed
Dass sich im Türbereich die Struktur des Bodens abrupt ändert, kann schon aus Sicherheitsgründen, nämlich einer Stolpergefahr, ausgeschlossen werden. Es wird also ein homogener Boden vorausgesetzt. Ein im Überwachungsbereich ruhendes Objekt führt, aus Sicht der Kamera, zu einer Unterbrechung der Gleichförmigkeit.The fact that the structure of the floor changes abruptly in the door area can be ruled out for safety reasons, namely a risk of stumbling. It will So a homogeneous floor is required. From the point of view of the camera, an object at rest in the surveillance area leads to an interruption in the uniformity.
Um das richtige Analyseverfahren auswählen zu können, ist eine Unterscheidung von Böden mit und ohne Bahnsteig zweckmäßig.In order to be able to select the correct analysis method, it is advisable to differentiate between floors with and without a platform.
Dieser besonders für U- Bahnen, Nahverkehrszüge oder ähnliche Fahrzeuge sehr wichtige Fall wird hier gesondert betrachtet. Wird die Bahnsteigkante im Bild unterbrochen, ist auf jeden Fall Gefahr vorhanden. Ist kein gelber Strich am Bahnsteig, so sollte dieser bis zu etwa 30cm von der Kante frei von Objekten sein. Ist die Kante vollständig im Bild vorhanden, dann ist keine Gefahr vorhanden.This case, which is particularly important for subways, commuter trains or similar vehicles, is considered separately here. If the platform edge is interrupted in the picture, there is definitely a danger. If there is no yellow line on the platform, it should be free of objects up to about 30 cm from the edge. If the edge is completely present in the image, there is no danger.
Ist ein gelber Strich am Bahnsteig, dann muß der Bereich zwischen diesem und der Bahnsteigkante vollständig von Objekten frei sein. Die Erkennung von Bahnsteigkanten wird mit der Konturenanalyse in Kombination mit „Höhenschichtlinien" durchgeführt.If there is a yellow line on the platform, the area between it and the edge of the platform must be completely free of objects. The detection of platform edges is carried out with the contour analysis in combination with "contour lines".
Fehlt ein Bahnsteig, so wird nachstehende Objektanalyse durchgeführt.If a platform is missing, the following object analysis is carried out.
Nach einer weiteren Ausgestaltung der Erfindung wird eine Objektanalyse, insbesondere nach ruhenden Objekten im Einstiegsbereich des Fahrzeuges, durchgeführt, wobei mittels der Fourieranalyse die Grundperiode aus dem Grauwertprofil-Diagramm einer Bildzeile parallel zum Fahrzeug ermittelt wird. Diese Analyse wird bei fehlendem Bahnsteig, was insbesondere bei Vollbahnen, Schnellbahnen oder auf Landstraßen zutrifft, durchgeführt. Es wird einAccording to a further embodiment of the invention, an object analysis is carried out, in particular for stationary objects in the entrance area of the vehicle, the basic period being determined from the gray value profile diagram of an image line parallel to the vehicle by means of the Fourier analysis. This analysis is carried out when there is no platform, which is particularly the case with full railways, express railways or country roads. It will be a
Iterationsverfahren gewählt, bestehend aus Fourieranalyse (Spektralanalyse) und Bildquadratanalyse.Iteration method selected, consisting of Fourier analysis (spectral analysis) and image square analysis.
Mit der Konturenanalyse wird der Boden auf einen vorhandenen Bahnsteig untersucht. Dabei wird zuerst das Intraframe- Differenzbild berechnet. Dabei entstehen „Höhenschichtlinien" im Werteprofil des Differenzbildes. Diese Höhenschichtlinien liegen, bei richtiger Anordnung der Kamera, parallel zum Bildrand. Tritt, vom Bildrand weg gerechnet, nur eine Höhenschichtlinie auf, so gibt es eine Bahnsteigkante, treten 3 Höhenschichtlinien auf, so gibt es zusätzlich die gelbe Kante. Zwischen den Höhenschichtlinien muß eine glatte Struktur vorherrschen, d.h. im Differenzbild müssen Werte annähernd Null auftreten. Es müssen in jedem Fall mindestens in etwa der Hälfte des Bildes diese Linien zu erkennen sein, dann wird von einem Bahnsteig ausgegangen und bei Unterbrechung dieser Linie „Gefahr" signalisiert bzw. die Iterationsanalyse mit anschließender Strukturanalyse verwendet.The contour analysis examines the floor on an existing platform. The intra-frame difference image is first calculated. This creates "contour lines" in the value profile of the difference image. If the camera is arranged correctly, these contour lines lie parallel to the edge of the image. If there is only one elevation line, calculated from the edge of the picture, there is one platform edge, if there are 3 elevation lines, there is also the yellow edge. A smooth structure must prevail between the contour lines, ie values almost zero must appear in the difference image. In any case, these lines must be recognizable in at least about half of the picture, then a platform is assumed and if this line is interrupted, "danger" is signaled or the iteration analysis with subsequent structure analysis is used.
Bei der Iterationsanalyse für ruhende Objekte werden die Fourieranalyse und die Bildquadratanalyse wiederholt angewendet wie folgt:In the iteration analysis for stationary objects, the Fourier analysis and the image square analysis are used repeatedly as follows:
Jede homogene Struktur besitzt eine Periode, in der sie sich wiederholt. Das Grauwertprofil einer Bildzeile parallel zum Fahrzeug ergibt, im Diagramm betrachtet, ein periodisches Signal. Durch die Fourieranalyse wird die Grundperiode dieses Signals festgelegt.Every homogeneous structure has a period in which it repeats itself. When viewed in the diagram, the gray value profile of an image line parallel to the vehicle gives a periodic signal. The basic period of this signal is determined by the Fourier analysis.
Bei einem scharfen Fourierspektrum, also hoher Grundwelle, geringe Oberwelle oder überhaupt reiner Gleichanteil, kann die Objekterkennung abgebrochen werden, es besteht keine Gefahr.In the case of a sharp Fourier spectrum, that is to say a high fundamental wave, a low harmonic wave or a pure DC component at all, the object detection can be interrupted; there is no danger.
Gemäß einer Weiterbildung der Erfindung wird eine Objektanalyse, insbesondere nach ruhenden Objekten im Einstiegsbereich des Fahrzeuges, durchgeführt, wobei das Differenzbild in Rechtecke, insbesondere Quadrate, deren Größe mit der Grundperiode übereinstimmen, unterteilt wird und für jedes Rechteck der Mittelwert, die Bandbreite, die Streuung und die mittlere Abweichung berechnet wird. Die bereits aufgezeigte Bildquadratanalyse wird auch hier wieder angewendet. Während aber vorher die Größe der Bildquadrate frei wählbar war, muß sie hier mit der Grundperiode übereinstimmen. Es spielt hierbei keine Rolle, ob sich die Grundperiode mit dem Abstand zum Fahrzeug örtlich verschiebt oder nicht. Wird die Grauwertverteilung in Form einer Sinuskurve gezeichnet, so folgt daraus, dass der Mittelwert der Periode, Bandbreite, Streuung und mittlere Abweichung Konstant sind. Eine Abweichung von der Konstante signalisiert eine Störung der Homogenität.According to a development of the invention, an object analysis is carried out, in particular for stationary objects in the entry area of the vehicle, the difference image being subdivided into rectangles, in particular squares, the size of which corresponds to the basic period, and for each rectangle the mean value, the bandwidth, and the scatter and the mean deviation is calculated. The image square analysis already shown is also used here again. However, while the size of the image squares was previously freely selectable, it must match the basic period here. It does not matter whether the basic period shifts locally with the distance to the vehicle or not. If the gray value distribution is drawn in the form of a sine curve, it follows that the mean of the period, bandwidth, scatter and mean Deviation are constant. A deviation from the constant signals a disturbance of the homogeneity.
Nach einem weiteren Merkmal der Erfindung wird eine Iteration durchgeführt, wobei aus den berechneten Werten der Rechtecke ein Bild erstellt wird, bei dem ein Rechteck zu einem Bildpunkt reduziert wird und diese Methoden wiederholt durchgeführt werden, bis das resultierende Bild nur mehr aus einer Zeile parallel zum Fahrzeug besteht. Aus den vorher berechneten Werten der Bildquadrate werden also neue Bilder geformt, in denen ein Quadrat zu einem Bildpunkt schrumpft. Die Iteration wird abgebrochen, wenn es nur mehr eine Bildzeile parallel zum Fahrzeug gibt. Die Fourieranalyse dieser letzten Zeile ergibt dann einen reinen Gleichanteil oder nur mehr eine Grundwelle. Sind noch signifikante Oberwellen vorhanden, so ist mit einem Objekt zu rechnen.According to a further feature of the invention, an iteration is carried out, an image being created from the calculated values of the rectangles, in which a rectangle is reduced to a pixel and these methods are carried out repeatedly until the resulting image is only parallel to one line Vehicle exists. From the previously calculated values of the image squares, new images are formed in which a square shrinks to a pixel. The iteration is terminated when there is only one image line parallel to the vehicle. The Fourier analysis of this last line then gives a pure DC component or only a fundamental wave. If significant harmonics are still present, an object can be expected.
Gemäß einem besonderen Merkmal der Erfindung wird nach der Iteration eine Strukturanalyse durchgeführt. Da Schatten nach dem Iterationsverfahren von Objekten nicht unterschieden werden können, muß bei Erkennung eines Objektes noch eine vorher beschriebene Strukturanalyse durchgeführt werden.According to a special feature of the invention, a structural analysis is carried out after the iteration. Since shadows cannot be differentiated from objects according to the iteration process, a previously described structure analysis must be carried out when an object is recognized.
Nach einem weiteren besonderen Merkmal der Erfindung wird unter Verwendung von zwei Kameras eine Distanzanalyse durchgeführt, wobei jede Kamera zum gleichen Zeitpunkt ein Bild erstellt und aus jedem Bild die Konturen gefiltert werden und dass anschließend beide Bilder, durch zeilenweise Verschiebung entlang des Fahrzeuges, zur Deckung gebracht werden. Das Distanzanalyseverfahren ist von besonderer Bedeutung, weil damit alle Schattenbildungen sofort als solche erkannt und ausgeblendet werden. Unter der Verwendung von beispielsweise zwei monochromen oder Farbvideokameras wird die Distanz eines Objektes von der Ebene der Kameras aus wie folgt gemessen:According to a further special feature of the invention, a distance analysis is carried out using two cameras, each camera creating an image at the same time and the contours being filtered from each image, and then aligning both images by line-by-line displacement along the vehicle become. The distance analysis method is of particular importance because it immediately recognizes and hides all shadows. Using two monochrome or color video cameras, for example, the distance of an object from the plane of the cameras is measured as follows:
Die geometrische Anordnung der Kameras relativ zum Boden und zueinander ist bekannt. Die Kameras sind so eingestellt, dass sie am Boden das exakt gleiche Bild aufnehmen. Da die Einstellung elektronisch erfolgt, stellt dies kein Problem dar.The geometrical arrangement of the cameras relative to the floor and to each other is known. The cameras are set so that they are exactly the same on the ground Take picture. Since the setting is done electronically, this is not a problem.
Die Bilder werden zum gleichen Zeitpunkt aufgezeichnet. Dies bedingt zwei voneinander unabhängige Bildwandler mit Speichereinheit. Die Aufzeichnung selbst wird von der Einrichtung zur Bildanalyse ausgelöst.The images are recorded at the same time. This requires two mutually independent image converters with a memory unit. The recording itself is triggered by the image analysis device.
Nach der Filterung der Konturen aus beiden Bildern, werden beide Bilder - durch zeilenweise Verschiebung entlang des Fahrzeuges - zur Deckung gebracht. Decken sich beide Bilder, kann aus der Verschiebung die Objekthöhe berechnet werden. Je größer die Verschiebung, desto größer das Objekt. Eine Deckung der Bilder ist gemäß Definition dann erreicht, wenn die Subtraktion der überlappenden Bereiche gegen Null geht. Bei reiner Schattenbildung ist Bilddeckung ohne Bildverschiebung gegeben.After filtering the contours from both images, both images are made to coincide by shifting them line by line along the vehicle. If both images coincide, the object height can be calculated from the shift. The larger the shift, the larger the object. According to the definition, the images are covered when the subtraction of the overlapping regions approaches zero. In the case of pure shadow formation, there is image coverage without image shift.
Gemäß einer Weiterbildung der Erfindung erfolgt zur Erkennung von unbewegten Objekten oder zur Erkennung des Bodens im Einstiegsbereich die Berechnung gemäß Anspruch 15 im Hintergrundbild jeder Kamera.According to a development of the invention, the calculation according to claim 15 is carried out in the background image of each camera for the detection of stationary objects or for the detection of the floor in the entry area.
Nach einer weiteren Ausgestaltung der Erfindung erfolgt zur Erkennung von bewegten Objekten zur Unterscheidung von Schatten die Berechnung gemäß Anspruch 15 im Momentbild jeder Kamera.According to a further embodiment of the invention, the calculation according to claim 15 is carried out in the snapshot of each camera for the detection of moving objects to distinguish shadows.
Gemäß einem besonderen Merkmal der Erfindung wird eine Zählung der Frequenz, insbesondere von ein- und/oder aussteigenden Personen, durchgeführt. Natürlich ist es mit diesem erfindungsgemäßen Verfahren auch möglich eine Frequenzzählung durchzuführen.According to a special feature of the invention, the frequency is counted, in particular by people entering and / or leaving the vehicle. Of course, with this method according to the invention it is also possible to carry out a frequency count.
Es ist aber auch Aufgabe der Erfindung eine Einrichtung zur Durchführung dieses Verfahrens zu schaffen.However, it is also an object of the invention to provide a device for carrying out this method.
Auch diese Aufgabe wird mit der Erfindung gelöst. Entsprechend der Einrichtung zur Durchführung des Verfahrens ist im Einstiegsbereich von Fahrzeugen, insbesondere von Schienenfahrzeugen, mindestens eine Kamera angeordnet, die, gegebenenfalls über einen Analog- Digital-Wandler, mit einer, einen Speicher aufweisenden, Datenverarbeitungseinrichtung verbunden ist. Die erfindungsgemäße Einrichtung ist weiters dadurch gekennzeichnet, dass die Kamera eine für die Erfassung des Einstiegsbereiches entsprechende Optik aufweist, wobei der Einstiegsbereich, bei offener Fahrzeugtüre, der im Gefahrenbereich liegende Außen- und Innenraum ist und dass in der Datenverarbeitungseinrichtung ein Signalanalysator vorgesehen ist. Mit dieser Erfindung ist es erstmals möglich, eine einfache und wirtschaftliche Einrichtung vorzuschlagen, die vor allem eine ausgezeichnete Erkennungssicherheit für den Einstiegsbereich eines Fahrzeuges gewährleistet. Diese Einrichtung ist vorteilhafterweise betriebssicher und wartungsarm.This object is also achieved with the invention. According to the device for carrying out the method, at least one camera is arranged in the entry area of vehicles, in particular rail vehicles, which is connected, possibly via an analog-digital converter, to a data processing device having a memory. The device according to the invention is further characterized in that the camera has optics corresponding to the detection of the entry area, the entry area, with the vehicle door open, being the exterior and interior located in the danger area and that a signal analyzer is provided in the data processing device. With this invention, it is possible for the first time to propose a simple and economical device which, above all, ensures excellent detection security for the entry area of a vehicle. This device is advantageously reliable and requires little maintenance.
Nach einer Ausgestaltung der Erfindung ist als Kamera eine monochrome Videokamera, gegebenenfalls mit integrierter Infrarotbeleuchtung, eine Farbvideokamera, eine temperaturempfindliche Kamera, eine Kamera mit integrierter Distanzmessung oder eine distanzsensitive Kamera vorgesehen. Mit allen hier aufgezeigten Kameras kann das oben beschriebene Verfahren durchgeführt werden.According to one embodiment of the invention, a monochrome video camera, optionally with integrated infrared lighting, a color video camera, a temperature-sensitive camera, a camera with integrated distance measurement or a distance-sensitive camera is provided as the camera. The method described above can be carried out with all cameras shown here.
Zusätzlich kann man weitere, kameraspezifische Analysen anwenden wie folgt: Bei Farbvideokameras kann die zusätzliche Farbinformation auf die gleiche Weise analysiert werden, wie die Helligkeitsinformation. Da Objektfarben sich meistens vom Boden abheben, gibt diese Auswertung zusätzliche Sicherheit. Dies gilt ebenso für die Bewegungsanalyse wie auch für die Analyse von unbewegten Objekten.In addition, further camera-specific analyzes can be used as follows: With color video cameras, the additional color information can be analyzed in the same way as the brightness information. Since object colors usually stand out from the ground, this evaluation provides additional security. This applies just as much to motion analysis as it does to the analysis of still objects.
Temperaturempfindliche Kameras können Menschen dann einwandfrei erkennen, wenn die Umgebungstemperatur von der menschlichen Temperatur abweicht. Nicht erkannt werden jedoch eingeklemmte Objekte wie Handtaschen, Riemen, Hundeleinen. Sie kann aber als Ergänzung zur Videokamera, insbesondere bei der Unterscheidung ruhender Objekte von Menschen durch die Messung der Objekttemperatur ausgezeichnete Dienste leisten. Besonders gut werden damit in den obigen Analyseverfahren auch unbekleidete Körperteile, wie Gesicht, Finger od. dgl., erkannt.Temperature-sensitive cameras can be recognized by people if the ambient temperature deviates from human temperature. However, jammed objects such as handbags, straps, dog leads are not recognized. However, it can be used as a supplement to the video camera, especially when distinguishing resting objects from people by measuring the Object temperature do an excellent job. In the above analysis methods, it is also particularly easy to identify unclothed parts of the body, such as the face, fingers or the like.
Bei einer Distanzmessung mittels einer einzelnen Kamera beruht dieThe distance is based on a distance measurement using a single camera
Entfernungsmessung auf der Laufzeitmessung eines ausgesendeten Lichtstrahles und seiner Reflexion. Jedes Objekt, von dem der Lichtstrahl ausreichend reflektiert wird, wird damit erkannt und seine Entfernung von der Kamera berechnet werden. Bei diesen Kameras ist die Distanzinformation zusätzlich zu der Helligkeitsinformation verfügbar. Alle oben beschriebenen Analyseverfahren lassen sich auch auf die Distanzmessung anwenden. Da die Anordnung der Kamera zum Boden bekannt ist, eignen sich die Iterationsanalyse oder die Strukturanalyse dafür besonders.Distance measurement based on the transit time measurement of a transmitted light beam and its reflection. Every object from which the light beam is sufficiently reflected is recognized and its distance from the camera is calculated. With these cameras, the distance information is available in addition to the brightness information. All of the analysis methods described above can also be applied to distance measurement. Since the arrangement of the camera on the floor is known, iteration analysis or structural analysis are particularly suitable for this.
In Zukunft werden auch distanzsensitive Kameras einsetzbar sein.In the future, distance-sensitive cameras can also be used.
Gemäß einer Ausgestaltung der Erfindung ist mindestens eine Datenverarbeitungseinrichtung, gegebenenfalls mit einem integrierten Signalanalysator, je Fahrzeug vorgesehen. Je nach Leistungsfähigkeit der Datenverarbeitungseinrichtung bzw. des Signalanalysators, wie Rechenleistung oder Speicherplatz, kann im Minimum ein Rechner je Fahrzeug, im Maximum ein Rechner je Kamera und je Fahrzeug Verwendung finden.According to one embodiment of the invention, at least one data processing device, possibly with an integrated signal analyzer, is provided for each vehicle. Depending on the performance of the data processing device or the signal analyzer, such as computing power or storage space, a computer per vehicle can be used as a minimum, one computer per camera and per vehicle as a maximum.
Nach einer besonderen Ausgestaltung der Erfindung ist jedem Signalanalysator mindestens eine Kamera zugeordnet. Dadurch wird eine redundante Sicherheit erreicht.According to a special embodiment of the invention, at least one camera is assigned to each signal analyzer. This ensures redundant security.
Gemäß einem besonderen Merkmal der Erfindung gibt der Signalanalysator entsprechende Signale bzw. Befehle an die Traktionssperre oder Anfahrfreigabe oder ein Signal für eine Durchschaltung einer Kamera zu einem Führerstands- Monitor ab. Damit wird ein vollautomatisches Überwachungssystem geschaffen. Nach einer weiteren Ausgestaltung der Erfindung ist dem Signalanalysator der Fahrzeugstatus, vorzugsweise automatisch, eingebbar. Auch diese Ausgestaltung kommt der Vollautomatisierung entgegen.According to a special feature of the invention, the signal analyzer emits corresponding signals or commands to the traction lock or start-up release or a signal for connecting a camera to a driver's cab monitor. This creates a fully automatic monitoring system. According to a further embodiment of the invention, the vehicle status, preferably automatically, can be input to the signal analyzer. This configuration also supports full automation.
Die Erfindung wird an Hand eines Ausführungsbeispieles, das in den Zeichnungen dargestellt ist, näher erläutert.The invention is explained in more detail using an exemplary embodiment which is illustrated in the drawings.
Fig. 1 zeigt ein Prinzipschaubild der Überwachung undFig. 1 shows a schematic diagram of the monitoring and
Fig. 2 ein Schema der Überwachungseinrichtung.Fig. 2 is a diagram of the monitoring device.
Einführend sei festgehalten, dass gleiche Teile mit gleichen Bezugszeichen bzw. gleichen Bauteilbezeichnungen versehen werden, wobei die in der gesamten Beschreibung enthaltenen Offenbarungen sinngemäß auf gleiche Teile mit gleichen Bezugszeichen bzw. gleichen Bauteilbezeichnungen übertragen werden können. Auch sind die in der Beschreibung gewählten Lageangaben, wie z.B. oben, unten, seitlich, usw. auf die unmittelbar beschriebene sowie dargestellte Figur bezogen und sind bei einer Lageänderung sinngemäß auf die neue Lage zu übertragen.In the introduction, it should be noted that the same parts are provided with the same reference numerals or the same component names, and the disclosures contained in the entire description can be applied analogously to the same parts with the same reference numerals or the same component names. The location information selected in the description, e.g. above, below, laterally, etc. refer to the figure described and illustrated immediately and are to be transferred to the new position in the event of a change of position.
Gemäß der Fig. 1 ist ein Fahrzeug 1 , in diesem Fall ein Waggon eines Zuges zur Personenbeförderung, dargestellt. Dieser Waggon weist zwei Türen 2 und damit verbunden Bereiche zum Ein- und Aussteigen für die Fahrgäste auf. Über den Türen 2 sind Kameras 3 für die Überwachung dieses Bereiches vorgesehen. Der mit der Kamera 3 zu erfassende Einstiegsbereich 4 ist schematisch - punktiert - aufgezeigt.1 shows a vehicle 1, in this case a wagon of a train for passenger transportation. This wagon has two doors 2 and associated areas for boarding and alighting for the passengers. Cameras 3 are provided above the doors 2 for monitoring this area. The entry area 4 to be recorded with the camera 3 is shown schematically - dotted -.
In der linken Hälfte des Waggons ist über der Tür 2 für den einfachsten Fall eine monochrome Videokamera mit integrierter Infrarotbeleuchtung montiert, um auch bei schlechten Beleuchtungsverhältnissen auswertbare Signale zu erhalten.In the simplest case, a monochrome video camera with integrated infrared lighting is installed in the left half of the wagon above door 2 in order to receive signals that can be evaluated even in poor lighting conditions.
In der rechten Hälfte des Waggons sind zwei Kameras 3 installiert, wodurch es auch ermöglicht wird, in bedingtem Ausmaß auch Entfernungen zu messen. In beiden Varianten wird - bei offener Tür 2 - sowohl der Außen- als auch der Innenraum im Gefahrenbereich der Türen 2 überwacht. Dabei wird das von der Kamera 3 erfasste Bild räumlich in Zonen mit verschiedenen Sicherheitsstufen unterteilt. Mit der Kamera 3 kann der gefährdete Einstiegsbereich 4 ganz genau eingestellt werden, womit der zu überwachende Bereich definiert wird.Two cameras 3 are installed in the right half of the wagon, which also makes it possible to measure distances to a limited extent. In both variants - with door 2 open - both the outside and the interior are monitored in the danger area of doors 2. The image captured by the camera 3 is spatially divided into zones with different security levels. With the camera 3, the entry area 4 at risk can be set very precisely, thereby defining the area to be monitored.
Als Kameras 3 können auch Farbvideokamera, temperaturempfindliche Kameras, Kameras mit integrierter Distanzmessung oder eine distanzsensitive Kamera vorgesehen werden.Color cameras, temperature-sensitive cameras, cameras with integrated distance measurement or a distance-sensitive camera can also be provided as cameras 3.
Die Kamera 3 ist, gegebenenfalls über einen Analog-Digital-Wandler mit einer - nicht dargestellten - Datenverarbeitungseinrichtung, die einen Speicher aufweist, verbunden. Weiters ist in der Datenverarbeitungseinrichtung ein Signalanalysator vorgesehen.The camera 3 is connected, possibly via an analog-digital converter, to a data processing device (not shown) which has a memory. A signal analyzer is also provided in the data processing device.
Entsprechend der Ausrüstungsphilosophie kann je Fahrzeug 1 eine Datenverarbeitungsanlage oder auch je Kamera 3 eine derartige Anlage vorgesehen werden.According to the equipment philosophy, a data processing system can be provided for each vehicle 1 or such a system can also be provided for each camera 3.
Es ist natürlich auch möglich mit der oben aufgezeigten Einrichtung eine lückenlose Überwachung des Fahrzeuges - sowohl im Innen- als auch im Außenbereich - durchzuführen. Durch entsprechende Anordnung von Kameras 3 an der Außenseite der Waggons eines Zuges könnte eine Überwachung des Gesamt-Zuges erreicht werden. Ebenso ist eine Überwachung im Innenraum des Waggons denkbar.It is of course also possible to carry out a complete monitoring of the vehicle - both inside and outside - with the device shown above. A corresponding arrangement of cameras 3 on the outside of the wagons of a train could be used to monitor the entire train. Monitoring in the interior of the wagon is also conceivable.
Gemäß der Fig. 2 ist schematisch ein Schaltbild der Überwachungseinrichtung aufgezeigt. Die von den Kameras 3 erfassten digitalisierten Signale der überwachten Einstiegsbereiche 4 werden einem Signalanalysator 5, der im einfachsten Fall ein portabler Industrie-PC sein kann, zugeführt. Wie bereits erwähnt. Können je nach Leistungsfähigkeit des Signalanalysators 5, wie Rechenleistung, Speicherplatz, im Minimum eine Datenverarbeitungseinrichtung je Fahrzeug, im Maximum eine Anlage je Kamera 3 und je Fahrzeug 1 Verwendung finden.2, a circuit diagram of the monitoring device is shown schematically. The digitized signals of the monitored entry areas 4 captured by the cameras 3 are fed to a signal analyzer 5, which in the simplest case can be a portable industrial PC. As already mentioned. Depending on the performance of the signal analyzer 5, such as computing power, storage space, at least one data processing device per vehicle, a maximum of one system per camera 3 and 1 vehicle can be used.
Durch die nachstehend angeführten Bildanalyseverfahren können drei Zustände entschieden werden:Three conditions can be decided by the image analysis methods listed below:
1. Es kann jemand gefährdet werden, was also „Gefahr" bedeutet. Das Fahrzeug darf nicht wegfahren.1. Someone can be endangered, which means "danger". The vehicle must not drive away.
2. Es ist niemand in Gefahr. Das Wegfahren ist möglich. 3. Es kann nicht einwandfrei erkannt werden, ob jemand gefährdet ist. In diesem Fall wird das Bild des entsprechenden Bereiches an einen Führerstandsmonitor weitergeleitet. Der Fahrzeugführer /-lenker erhält visuelle Sicht auf den Gefahrenbereich und kann dann die erforderlichen Maßnahmen selbst setzen.2. Nobody is in danger. Driving away is possible. 3. It cannot be properly recognized whether someone is at risk. In this case, the image of the corresponding area is forwarded to a driver's cab monitor. The driver / driver receives a visual view of the danger area and can then take the necessary measures himself.
Das Bestreben des vorliegenden erfindungsgemäßen Verfahrens der Bildanalyse zielt aber auf eine sichere Entscheidung zwischen den ersten beiden Zuständen ab. Trotzdem kann der Fall 3 jedoch - aus heutiger Sicht - nicht ausgeschlossen werden.However, the aim of the present method of image analysis according to the invention aims at a reliable decision between the first two states. Nevertheless, from today's perspective, case 3 cannot be ruled out.
Die Kameras 3 sind über Analog-Digital-Wandler 6 mit dem Signalanalysator 5 verbunden. Ferner werden dem Signalanalysator 5 der Fahrzeugstatus über die Eingänge 7, insbesondere vollautomatisch, eingegeben.The cameras 3 are connected to the signal analyzer 5 via analog-digital converters 6. Furthermore, the vehicle status is entered into the signal analyzer 5 via the inputs 7, in particular fully automatically.
Der Fahrzeugstatus kann sein: Fahrzeug 1 steht, Türfreigabe, Tür 2 offen, Schließbefehl oder dergleichen.The vehicle status can be: Vehicle 1 is standing, door release, door 2 open, closing command or the like.
Ferner weist der Signalanalysator 5 mindestens drei Ausgänge auf. Ein Ausgang 8 ist mit der Traktionssperre und ein Ausgang 9 mit der Anfahrfreigabe verbunden. Über den dritten Ausgang 10 wird eine Durchschaltung von der Kamera 3 zum Führerstands-Monitor 11 durchgeführt. Nachstehend wird nochmals kurz das erfindungsgemäße Verfahren zur Überwachung des Einstiegsbereiches 4 von Fahrzeugen 1 , das im Signalanalysator 5 durchgeführt wird, zusammengefasst:Furthermore, the signal analyzer 5 has at least three outputs. An output 8 is connected to the traction lock and an output 9 to the start enable. The third output 10 is used to switch through from the camera 3 to the driver's cab monitor 11. The method according to the invention for monitoring the entry area 4 of vehicles 1, which is carried out in the signal analyzer 5, is briefly summarized below:
Die Bildanalyse hat im überwachten Bereich zu erkennen:The image analysis has to recognize in the monitored area:
o Bewegte Personen o Bewegte Gegenständeo Moving people o Moving objects
• Bildveränderungen durch bewegte Schatten o Unbewegte Personen• Image changes due to moving shadows o Immobile people
• Unbewegte Gegenstände• Immovable objects
Bewegte Personen oder Gegenstände müssen einwandfrei vom Hintergrund abgehoben werden können.Moving people or objects must be able to be lifted perfectly from the background.
Wird eine Bewegung erkannt, so muß zweifelsfrei zwischen Personen/Gegenständen, die „Gefahr" bedeuten oder bewegten Schatten, die keine „Gefahr" bedeuten unterschieden werden.If a movement is detected, a distinction must be made between people / objects that mean "danger" or moving shadows that do not mean "danger".
Bei unbewegten Gegenständen ist es von essentieller Bedeutung, ob dieseIn the case of immovable objects, it is essential whether they are
• integrierter Bestandteil der zu überwachenden Umgebung sind oder ob es• are an integral part of the environment to be monitored or whether it is
• sich um eine bewegungsunfähige, wie eingeklemmte oder ohnmächtige, Person handelt.• is a person who is unable to move, such as being trapped or passed out.
Als erster Schritt der Überwachung wird die Bewegungsanalyse durchgeführt. Ist aus dieser Analyse keine eindeutige Entscheidung abzuleiten, wird die Bildquadratanalyse als erste Näherung zur Bewegungsanalyse eingesetzt.As a first step in monitoring, movement analysis is carried out. If no clear decision can be derived from this analysis, the image square analysis is used as a first approximation to the motion analysis.
Bei einer allfälligen Schattenanalyse wird die Bewegungsanalyse mit der Strukturanalyse ergänzt. Die Strukturanalyse kann in zwei Schritten, nämlich der Intraframe-Differenz und der Interframe-Division, durchgeführt werden. Ergänzend wird als zweiter Schritt der Schattenerkennung die Konturenanalyse eingesetzt. Ein weiterer Schritt die Überwachung zu optimieren ist, eine vergleichende Analyse durchzuführen.If there is a shadow analysis, the motion analysis is supplemented with the structure analysis. The structural analysis can be carried out in two steps, namely the intraframe difference and the interframe division. In addition, the contour analysis is used as the second step of shadow detection. Another step to optimize the monitoring is to carry out a comparative analysis.
Ferner wird vorzugsweise zur Erfassung der Bodenbeschaffenheit die Objektanalyse eingesetzt. Zur Objektanalyse wird eine Konturenanalyse mit einer Iterationsanalyse bzw. Fourieranalyse und einer Bildquadratanalyse durchgeführt. Der Bildquadratanalyse folgt eine Iteration und gegebenenfalls eine Schattenanalyse.Furthermore, the object analysis is preferably used to record the condition of the soil. For object analysis, a contour analysis with an iteration analysis or Fourier analysis and an image square analysis is carried out. The image square analysis is followed by an iteration and possibly a shadow analysis.
Darüber hinaus könnte auch eine Distanzanalyse das Ergebnis der Überwachung noch weiter optimieren.In addition, a distance analysis could further optimize the result of the monitoring.
Natürlich kann das oben aufgezeigte Verfahren auch zu einer Frequenzzählung heran gezogen werden. Es ist durchaus damit möglich, die Frequenz der Ein- und/oder Aussteiger damit zu erfassen.Of course, the method shown above can also be used for frequency counting. It is therefore entirely possible to use it to record the frequency of those entering and / or exiting.
Abschließend sei darauf hingewiesen, dass in den zuvor beschriebenen Ausführungsbeispielen einzelne Teile unproportional vergrößert bzw. schematisch dargestellt sind, um das Verständnis der erfindungsgemäßen Lösung zu verbessern. In conclusion, it should be pointed out that in the exemplary embodiments described above, individual parts are disproportionately enlarged or shown schematically in order to improve understanding of the solution according to the invention.

Claims

PATENTANSPRÜCHE
1. Verfahren zur Überwachung des Einstiegsbereiches von Fahrzeugen, insbesondere von Schienenfahrzeugen, wobei die von mindestens einer Kamera erfassten, gegebenenfalls über einen Analog-Digitai-Wandler geführten, digitalen Bildsignale einer, einen Speicher aufweisenden, Datenverarbeitungseinrichtung zugeführt werden, dadurch gekennzeichnet, dass in einem, in der Datenverarbeitungseinrichtung vorgesehenen,1. A method for monitoring the entry area of vehicles, in particular of rail vehicles, wherein the digital image signals recorded by at least one camera and possibly guided via an analog-digital converter are fed to a data processing device having a memory, characterized in that in a , provided in the data processing device,
Signalanalysator (5) die Bildsignale verarbeitet werden, wobei für eine Bewegungsanalyse die Bildsignale einzelner, in jeden Bildpunkt zerlegten, Bilder über einen bestimmten Zeitraum und/oder einer bestimmten Anzahl von Bildern summiert werden und der Mittelwert gebildet wird und dass von diesem daraus resultierenden Bild, dem Hintergrundbild, ein Momentbild subtrahiert wird.Signal analyzer (5) the image signals are processed, the image signals of individual images broken down into each pixel being summed over a certain period of time and / or a certain number of images for a motion analysis and the mean value being formed and that the resulting image, the background image, a snapshot is subtracted.
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass das aus der Bewegungsanalyse resultierende Bild, das Differenzbild, in entsprechende Rechtecke, insbesondere Quadrate, unterteilt wird und von jedem2. The method according to claim 1, characterized in that the image resulting from the motion analysis, the difference image, is divided into corresponding rectangles, in particular squares, and by each
Teilrechteck die enthaltenen Bildpunkte hinsichtlich Mittelwert, Streuung, Bandbreite und mittlere Abweichung berechnet werden.Partial rectangle the pixels contained in terms of mean value, scatter, bandwidth and mean deviation are calculated.
3. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass die Berechnung nach den Methoden der statistischen Beobachtung erfolgt.3. The method according to claim 2, characterized in that the calculation is carried out according to the methods of statistical observation.
4. Verfahren nach einem oder mehreren der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass nach der Bewegungsanalyse eine Strukturanalyse durchgeführt wird, wobei zur Strukturanalyse das Grauwertprofil eines Bildes entlang von Bildzeilen und/oder Bildspalten als, vorzugsweise in einem Diagramm dargestellte, Struktur erstellt wird.4. The method according to one or more of claims 1 to 3, characterized in that a structural analysis is carried out after the movement analysis, the gray value profile of an image being created along image lines and / or image columns as a structure, preferably shown in a diagram, for the structure analysis ,
5. Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass für eine Schattenanalyse zwei Strukturen, insbesondere die Strukturen von Hintergrundbild und Momentbild, miteinander verglichen werden, wobei die eine Struktur durch Multiplikation aller Bildpunkte mit einem Faktor k (k<>0) und einer Verschiebung um einen Offset d in die andere Struktur übergeführt wird.5. The method according to claim 4, characterized in that for a shadow analysis two structures, in particular the structures of The background image and the snapshot are compared with one another, the one structure being converted into the other structure by multiplying all the pixels by a factor k (k <> 0) and shifting them by an offset d.
6. Verfahren nach Anspruch 4 oder 5, dadurch gekennzeichnet, dass die Differenz zweier Bildpunkte global über das Bild berechnet werden, wobei eine Kopie des Original-Bildes erstellt wird, diese Kopie um eine Zeile und eine Spalte verschoben wird und anschließend die Kopie vom Original-Bild subtrahiert wird.6. The method according to claim 4 or 5, characterized in that the difference between two pixels are calculated globally over the image, wherein a copy of the original image is created, this copy is shifted by one line and one column and then the copy of the original Image is subtracted.
7. Verfahren nach einem oder mehreren der Ansprüche 4 bis 6, dadurch gekennzeichnet, dass die Differenzbildung sowohl mit einem Momentbild als auch mit einem Hintergrundbild durchgeführt wird und die derart erstellten Bilder dividiert werden.7. The method according to one or more of claims 4 to 6, characterized in that the difference is formed both with a snapshot and with a background image and the images created in this way are divided.
8. Verfahren nach Anspruch 6 oder 7, dadurch gekennzeichnet, dass der Faktor k am Beginn einer Bildzeile berechnet und bis zum Zeilenende verfolgt wird, wodurch eine Toleranz-Bandbreite erstellt wird, die mit dem Toleranz-Mittelwert über die Bildzeile verglichen wird.8. The method according to claim 6 or 7, characterized in that the factor k is calculated at the beginning of an image line and followed up to the end of the line, whereby a tolerance bandwidth is created which is compared with the mean tolerance value over the image line.
9. Verfahren nach einem oder mehreren der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass für eine Schattenanalyse, gegebenenfalls nach der Strukturanalyse, eine Konturenanalyse durchgeführt wird, wobei die Faktoren k in eine dem Bild deckungsgleiche Matrix eingetragen werden und an den Stellen größter Abweichung die geometrische Breite der Kontur errechnet wird.9. The method according to one or more of claims 1 to 8, characterized in that for a shadow analysis, optionally after the structural analysis, a contour analysis is carried out, the factors k being entered in a matrix congruent with the image and at the points of greatest deviation geometric width of the contour is calculated.
10. Verfahren nach einem oder mehreren der Ansprüche 1 bis 9, dadurch gekennzeichnet, dass in der Datenverarbeitungseinrichtung mindestens ein10. The method according to one or more of claims 1 to 9, characterized in that in the data processing device at least one
Bild des Fahrzeuges (1 ), vorzugsweise mit geschlossener Türe, gespeichert wird, dieses Bild gegebenenfalls periodisch aktualisiert wird und dieses Bild in der Datenverarbeitungseinrichtung mit einem, insbesondere mit einem kurz vor Fahrtantritt erstellten, Momentbild verglichen wird.Image of the vehicle (1), preferably with the door closed, is stored, this image is optionally updated periodically and this image is processed in the data processing device with a is compared in particular with a snapshot created shortly before the start of the journey.
1 1.Verfahren nach einem oder mehreren der Ansprüche 1 bis 10, dadurch gekennzeichnet, dass eine Objektanalyse, insbesondere nach ruhenden Objekten im Einstiegsbereich (4) des Fahrzeuges (1 ), durchgeführt wird, wobei diese Objektanalyse im Hintergrundbild erfolgt und ein Differenz-Bild nach Anspruch 7 berechnet wird und die im Werteprofil entstehenden Höhenschichtlinien, die parallel zum Bildrand liegen, mit der Konturenanalyse kombiniert werden.1 1.A method according to one or more of claims 1 to 10, characterized in that an object analysis, in particular for resting objects in the entry area (4) of the vehicle (1), is carried out, this object analysis being carried out in the background image and a difference image is calculated according to claim 7 and the resulting elevation lines in the value profile, which are parallel to the edge of the image, are combined with the contour analysis.
12. Verfahren nach einem oder mehreren der Ansprüche 1 bis 11 , dadurch gekennzeichnet, dass eine Objektanalyse, insbesondere nach ruhenden Objekten im Einstiegsbereich (4) des Fahrzeuges (1 ), durchgeführt wird, wobei mittels der Fourieranalyse die Grundperiode aus dem Grauwertprofil- Diagramm einer Bildzeile parallel zum Fahrzeug (1) ermittelt wird.12. The method according to one or more of claims 1 to 11, characterized in that an object analysis, in particular for resting objects in the boarding area (4) of the vehicle (1), is carried out, the basic period from the gray scale profile diagram using a Fourier analysis Image line parallel to the vehicle (1) is determined.
13. Verfahren nach einem oder mehreren der Ansprüche 1 bis 12, dadurch gekennzeichnet, dass eine Objektanalyse, insbesondere nach ruhenden Objekten im Einstiegsbereich (4) des Fahrzeuges (1 ), durchgeführt wird, wobei das Differenzbild in Rechtecke, insbesondere Quadrate, deren Größe mit der Grundperiode übereinstimmen, unterteilt wird und für jedes Rechteck der Mittelwert, die Bandbreite, die Streuung und die mittlere Abweichung berechnet wird.13. The method according to one or more of claims 1 to 12, characterized in that an object analysis, in particular for resting objects in the entry area (4) of the vehicle (1), is carried out, the difference image in rectangles, in particular squares, the size of which of the basic period, is subdivided and the mean value, the bandwidth, the scatter and the mean deviation are calculated for each rectangle.
14. Verfahren nach Anspruch 12 oder 13, dadurch gekennzeichnet, dass eine Iteration durchgeführt wird, wobei aus den berechneten Werten der Rechtecke ein Bild erstellt wird, bei dem ein Rechteck zu einem Bildpunkt reduziert wird und diese Methoden wiederholt durchgeführt werden, bis das resultierende Bild nur mehr aus einer Zeile parallel zum Fahrzeug (1 ) besteht. 14. The method according to claim 12 or 13, characterized in that an iteration is carried out, wherein an image is created from the calculated values of the rectangles, in which a rectangle is reduced to a pixel and these methods are carried out repeatedly until the resulting image only consists of one line parallel to the vehicle (1).
15. Verfahren nach Anspruch 14, dadurch gekennzeichnet, dass nach der Iteration eine Strukturanalyse durchgeführt wird.15. The method according to claim 14, characterized in that a structural analysis is carried out after the iteration.
16. Verfahren nach einem oder mehreren der Ansprüche 1 bis 15, dadurch gekennzeichnet, dass unter Verwendung von zwei Kameras (3) eine Distanzanalyse durchgeführt wird, wobei jede Kamera (3) zum gleichen Zeitpunkt ein Bild erstellt und aus jedem Bild die Konturen gefiltert werden und dass anschließend beide Bilder, durch zeilenweise Verschiebung entlang des Fahrzeuges (1 ), zur Deckung gebracht werden.16. The method according to one or more of claims 1 to 15, characterized in that a distance analysis is carried out using two cameras (3), wherein each camera (3) creates an image at the same time and the contours are filtered from each image and that both images are then made to coincide by line-by-line displacement along the vehicle (1).
17. Verfahren nach Anspruch 16, dadurch gekennzeichnet, dass zur Erkennung von unbewegten Objekten oder zur Erkennung des Bodens im Einstiegsbereich (4) die Berechnung gemäß Anspruch 15 im Hintergrundbild jeder Kamera (3) erfolgt.17. The method according to claim 16, characterized in that for the detection of immobile objects or for the detection of the floor in the entry area (4), the calculation according to claim 15 takes place in the background image of each camera (3).
18. Verfahren nach Anspruch 16, dadurch gekennzeichnet, dass zur Erkennung von bewegten Objekten zur Unterscheidung von Schatten die Berechnung gemäß Anspruch 15 im Momentbild jeder Kamera (3) erfolgt.18. The method according to claim 16, characterized in that for the detection of moving objects to distinguish shadows, the calculation according to claim 15 takes place in the snapshot of each camera (3).
19. Verfahren nach einem oder mehreren der Ansprüche 1 bis 18, dadurch gekennzeichnet, dass eine Zählung der Frequenz, insbesondere von ein- und/oder aussteigenden Personen, durchgeführt wird.19. The method according to one or more of claims 1 to 18, characterized in that a counting of the frequency, in particular of people entering and / or exiting, is carried out.
20. Einrichtung zur Durchführung des Verfahrens nach mindestens einem der Ansprüche 1 bis 19, wobei im Einstiegsbereich von Fahrzeugen, insbesondere von Schienenfahrzeugen, mindestens eine Kamera angeordnet ist, die, gegebenenfalls über einen Analog-Digitai-Wandler, mit einer, einen Speicher aufweisenden, Datenverarbeitungseinrichtung verbunden ist, dadurch gekennzeichnet, dass die Kamera (3) eine für die Erfassung des Einstiegsbereiches (4) entsprechende Optik aufweist, wobei der Einstiegsbereich (4), bei offener Fahrzeugtüre, der im Gefahrenbereich liegende Außen- und Innenraum ist und dass in der Datenverarbeitungseinrichtung ein Signalanalysator (5) vorgesehen ist. 20. Device for carrying out the method according to at least one of claims 1 to 19, wherein at least one camera is arranged in the entry area of vehicles, in particular rail vehicles, which, optionally via an analog-digital converter, with a memory having Data processing device is connected, characterized in that the camera (3) has optics corresponding to the detection of the entry area (4), the entry area (4), with the vehicle door open, being the exterior and interior located in the danger area and in that Data processing device, a signal analyzer (5) is provided.
21. Einrichtung nach Anspruch 20, dadurch gekennzeichnet, dass als Kamera (3) eine monochrome Videokamera, gegebenenfalls mit integrierter Infrarotbeleuchtung, eine Farbvideokamera, eine temperaturempfindliche Kamera, eine Kamera mit integrierter Distanzmessung oder eine distanzsensitive Kamera vorgesehen ist.21. Device according to claim 20, characterized in that a monochrome video camera, optionally with integrated infrared lighting, a color video camera, a temperature-sensitive camera, a camera with integrated distance measurement or a distance-sensitive camera is provided as the camera (3).
22. Einrichtung nach Anspruch 20 oder 21 , dadurch gekennzeichnet, dass mindestens eine Datenverarbeitungseinrichtung, gegebenenfalls mit einem integrierten Signalanalysator (5), je Fahrzeug (1) vorgesehen ist.22. Device according to claim 20 or 21, characterized in that at least one data processing device, optionally with an integrated signal analyzer (5), is provided for each vehicle (1).
23. Einrichtung nach Anspruch 20 oder 21 , dadurch gekennzeichnet, dass jedem Signalanalysator (5) mindestens eine Kamera (3) zugeordnet ist.23. Device according to claim 20 or 21, characterized in that each signal analyzer (5) is assigned at least one camera (3).
24. Einrichtung nach einem oder mehreren der Ansprüche 20 bis 23, dadurch gekennzeichnet, dass der Signalanalysator (5) entsprechende Signale bzw. Befehle an die Traktionssperre oder Anfahrfreigabe oder ein Signal für eine Durchschaltung einer Kamera (3) zu einem Führerstands-Monitor (1 1 ) abgibt.24. Device according to one or more of claims 20 to 23, characterized in that the signal analyzer (5) corresponding signals or commands to the traction lock or start-up release or a signal for connecting a camera (3) to a driver's cab monitor (1 1) delivers.
25. Einrichtung nach einem oder mehreren der Ansprüche 20 bis 23, dadurch gekennzeichnet, dass dem Signalanalysator (5) der Fahrzeugstatus, vorzugsweise automatisch, eingebbar ist. 25. Device according to one or more of claims 20 to 23, characterized in that the vehicle status, preferably automatically, can be input to the signal analyzer (5).
PCT/AT2004/000073 2003-03-05 2004-03-05 Method and device for monitoring the entry zone of vehicles WO2004078552A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
EP04717518A EP1599373A1 (en) 2003-03-05 2004-03-05 Method and device for monitoring the entry zone of vehicles

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
AT0032003A AT500925A1 (en) 2003-03-05 2003-03-05 METHOD AND DEVICE FOR MONITORING THE ENTRY AREA OF VEHICLES
ATA320/2003 2003-03-05

Publications (1)

Publication Number Publication Date
WO2004078552A1 true WO2004078552A1 (en) 2004-09-16

Family

ID=32931998

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/AT2004/000073 WO2004078552A1 (en) 2003-03-05 2004-03-05 Method and device for monitoring the entry zone of vehicles

Country Status (3)

Country Link
EP (1) EP1599373A1 (en)
AT (1) AT500925A1 (en)
WO (1) WO2004078552A1 (en)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006072617A2 (en) * 2005-01-10 2006-07-13 Siemens Aktiengesellschaft System for monitoring the area between a train and the platform edge
DE102005011684A1 (en) * 2005-03-11 2006-09-14 Sick Ag System for securing door entry openings on vehicles for passenger transport
DE102006030639A1 (en) * 2006-01-16 2007-07-19 Conti Temic Microelectronic Gmbh Motor vehicle for operating a motorized door has a door element to be operated by a drive unit and an optical sensor
WO2008071601A1 (en) * 2006-12-13 2008-06-19 Renault S.A.S Method and device for detecting bodies on the trajectory of an opening and vehicle provided with said device
WO2008081026A1 (en) * 2007-01-05 2008-07-10 Continental Automotive Gmbh Contact-free anti-pinch system
DE102009034283A1 (en) * 2009-07-21 2011-01-27 Ficosa International Gmbh Device for monitoring surrounding area of e.g. bus, has camera device coupled with signal processing device in which warning signal and/or inhibiting signal is sent, when object is located within fixed area of camera image
WO2011023602A1 (en) * 2009-08-27 2011-03-03 Knorr-Bremse Gmbh Monitoring device and method for monitoring an entry or exit area of an access opening of a vehicle to a building component
CN102127998A (en) * 2010-12-28 2011-07-20 北京交通大学 Screen door linkage control system
KR101066562B1 (en) 2011-02-15 2011-09-21 지에스네오텍(주) Screen door system using stereo image
EP2397386A1 (en) * 2010-06-21 2011-12-21 Hitachi, Ltd. Status monitoring apparatus of railway vehicle
WO2012112105A1 (en) 2011-02-14 2012-08-23 Scania Cv Ab Method and system for intrusion monitoring of a motor vehicle
CN104499864A (en) * 2014-12-11 2015-04-08 南华大学 Anti-collision anti-jamming bus safety door system
WO2016206917A1 (en) * 2015-06-26 2016-12-29 Siemens Aktiengesellschaft Vehicle door device
DE102017221262B3 (en) 2017-11-28 2019-05-09 Dmw Schwarze Gmbh & Co. Industrietore Kg A method for detecting an object between a door frame and a door leaf of an open door and door security device
CN110525452A (en) * 2019-09-27 2019-12-03 北京埃福瑞科技有限公司 A kind of anti-pinch detection system and method between subway shield door and train
CN111608529A (en) * 2020-06-08 2020-09-01 王洋 Laser scanning anti-clamping device and system for subway platform door
CN113830010A (en) * 2020-06-23 2021-12-24 丰田自动车株式会社 Vehicle with a steering wheel

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE539493C2 (en) * 2014-05-28 2017-10-03 Scania Cv Ab Driver warning and limitation of vehicle performance in the event of an accident
DE102014213864A1 (en) * 2014-07-16 2016-01-21 Bombardier Transportation Gmbh Device and method for positioning an auxiliary device and rail vehicle
DE102014219692A1 (en) * 2014-09-29 2015-10-22 Siemens Aktiengesellschaft A method for detecting a dangerous situation in a vehicle interior of a vehicle and hazard detection system
WO2019026159A1 (en) * 2017-07-31 2019-02-07 株式会社日立国際電気 Video display system and video display method
DE102018115274A1 (en) * 2018-06-26 2020-01-02 Knorr-Bremse Gesellschaft Mit Beschränkter Haftung Monitoring device and method for monitoring a door area of a vehicle door for a vehicle and door system with a monitoring device

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0390471A (en) * 1989-09-01 1991-04-16 Toshiba Corp Safety monitoring device at platform
EP0487236A2 (en) * 1990-11-20 1992-05-27 Hughes Aircraft Company Moving target detection method using two-frame subtraction
EP0855324A2 (en) * 1997-01-22 1998-07-29 Hitachi, Ltd. Automatic open/close operation system for train door
JPH10278787A (en) * 1997-04-11 1998-10-20 Nippon Signal Co Ltd:The Door opening/closing controller
US6345105B1 (en) * 1998-09-01 2002-02-05 Mitsubishi Denki Kabushiki Kaisha Automatic door system and method for controlling automatic door
EP1184809A2 (en) * 2000-08-31 2002-03-06 Hitachi Kokusai Electric Inc. Object detecting method and object detecting apparatus and intruding object monitoring apparatus employing the object detecting method

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5034986A (en) * 1989-03-01 1991-07-23 Siemens Aktiengesellschaft Method for detecting and tracking moving objects in a digital image sequence having a stationary background
ATE183595T1 (en) * 1991-09-12 1999-09-15 Electronic Data Syst Corp IMAGE ANALYZER
JPH07236133A (en) * 1994-02-25 1995-09-05 Hitachi Denshi Ltd Television device
DE59804862D1 (en) * 1997-09-15 2002-08-29 Rms Kleine Gmbh Vertrieb Elekt Method and device for the optical monitoring of a spatial area
DE19941644A1 (en) * 1999-08-27 2001-03-01 Deutsche Telekom Ag Method for realtime segmentation of video objects with known stationary image background
JP3880759B2 (en) * 1999-12-20 2007-02-14 富士通株式会社 Moving object detection method
JP2004510363A (en) * 2000-08-31 2004-04-02 ライテック　コーポレイション Sensors and imaging systems
FR2816088A1 (en) * 2000-10-27 2002-05-03 Dinel Object positioning, with respect to a reference, optical recognition system, uses pixel position and light intensity in a cell of x pixels as means for comparison with reference cell

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0390471A (en) * 1989-09-01 1991-04-16 Toshiba Corp Safety monitoring device at platform
EP0487236A2 (en) * 1990-11-20 1992-05-27 Hughes Aircraft Company Moving target detection method using two-frame subtraction
EP0855324A2 (en) * 1997-01-22 1998-07-29 Hitachi, Ltd. Automatic open/close operation system for train door
JPH10278787A (en) * 1997-04-11 1998-10-20 Nippon Signal Co Ltd:The Door opening/closing controller
US6345105B1 (en) * 1998-09-01 2002-02-05 Mitsubishi Denki Kabushiki Kaisha Automatic door system and method for controlling automatic door
EP1184809A2 (en) * 2000-08-31 2002-03-06 Hitachi Kokusai Electric Inc. Object detecting method and object detecting apparatus and intruding object monitoring apparatus employing the object detecting method

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
PATENT ABSTRACTS OF JAPAN vol. 0152, no. 67 (M - 1133) 8 July 1991 (1991-07-08) *
PATENT ABSTRACTS OF JAPAN vol. 0161, no. 69 (M - 1239) 23 April 1992 (1992-04-23) *
PATENT ABSTRACTS OF JAPAN vol. 1999, no. 01 29 January 1999 (1999-01-29) *

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006072617A2 (en) * 2005-01-10 2006-07-13 Siemens Aktiengesellschaft System for monitoring the area between a train and the platform edge
DE102005002357A1 (en) * 2005-01-10 2006-07-27 Siemens Ag System for monitoring the area between the train and the platform edge
WO2006072617A3 (en) * 2005-01-10 2007-11-08 Siemens Ag System for monitoring the area between a train and the platform edge
DE102005011684A1 (en) * 2005-03-11 2006-09-14 Sick Ag System for securing door entry openings on vehicles for passenger transport
DE102006030639A1 (en) * 2006-01-16 2007-07-19 Conti Temic Microelectronic Gmbh Motor vehicle for operating a motorized door has a door element to be operated by a drive unit and an optical sensor
DE102006030639B4 (en) * 2006-01-16 2018-02-01 Conti Temic Microelectronic Gmbh motor vehicle
WO2008071601A1 (en) * 2006-12-13 2008-06-19 Renault S.A.S Method and device for detecting bodies on the trajectory of an opening and vehicle provided with said device
FR2910045A1 (en) * 2006-12-13 2008-06-20 Renault Sas DEVICE AND METHOD FOR DETECTING BODY ON THE RUN OF AN OPENING VEHICLE WITH THE DEVICE.
WO2008081026A1 (en) * 2007-01-05 2008-07-10 Continental Automotive Gmbh Contact-free anti-pinch system
DE102009034283A1 (en) * 2009-07-21 2011-01-27 Ficosa International Gmbh Device for monitoring surrounding area of e.g. bus, has camera device coupled with signal processing device in which warning signal and/or inhibiting signal is sent, when object is located within fixed area of camera image
DE102009034283B4 (en) * 2009-07-21 2011-06-16 Ficosa International Gmbh Device and method for monitoring a surrounding area of a vehicle
CN102648117A (en) * 2009-08-27 2012-08-22 克诺尔-布里姆斯股份有限公司 Monitoring device and method for monitoring an entry or exit area of an access opening of a vehicle to a building component
WO2011023602A1 (en) * 2009-08-27 2011-03-03 Knorr-Bremse Gmbh Monitoring device and method for monitoring an entry or exit area of an access opening of a vehicle to a building component
EP2397386A1 (en) * 2010-06-21 2011-12-21 Hitachi, Ltd. Status monitoring apparatus of railway vehicle
CN102127998A (en) * 2010-12-28 2011-07-20 北京交通大学 Screen door linkage control system
WO2012112105A1 (en) 2011-02-14 2012-08-23 Scania Cv Ab Method and system for intrusion monitoring of a motor vehicle
EP2676252A4 (en) * 2011-02-14 2016-04-06 Scania Cv Ab Method and system for intrusion monitoring of a motor vehicle
KR101066562B1 (en) 2011-02-15 2011-09-21 지에스네오텍(주) Screen door system using stereo image
CN104499864A (en) * 2014-12-11 2015-04-08 南华大学 Anti-collision anti-jamming bus safety door system
CN104499864B (en) * 2014-12-11 2016-08-24 南华大学 The bus safety door system of crashproof anti-sticking
WO2016206917A1 (en) * 2015-06-26 2016-12-29 Siemens Aktiengesellschaft Vehicle door device
DE102017221262B3 (en) 2017-11-28 2019-05-09 Dmw Schwarze Gmbh & Co. Industrietore Kg A method for detecting an object between a door frame and a door leaf of an open door and door security device
CN110525452A (en) * 2019-09-27 2019-12-03 北京埃福瑞科技有限公司 A kind of anti-pinch detection system and method between subway shield door and train
CN110525452B (en) * 2019-09-27 2020-08-28 北京埃福瑞科技有限公司 Anti-pinch detection system and method used between subway shielding door and train
CN111608529A (en) * 2020-06-08 2020-09-01 王洋 Laser scanning anti-clamping device and system for subway platform door
CN111608529B (en) * 2020-06-08 2022-08-02 广州南骏机械有限公司 Laser scanning anti-clamping device and system for subway platform door
CN113830010A (en) * 2020-06-23 2021-12-24 丰田自动车株式会社 Vehicle with a steering wheel
EP3929057A1 (en) * 2020-06-23 2021-12-29 Toyota Jidosha Kabushiki Kaisha Vehicle with passenger detection units

Also Published As

Publication number Publication date
AT500925A1 (en) 2006-04-15
EP1599373A1 (en) 2005-11-30

Similar Documents

Publication Publication Date Title
EP1599373A1 (en) Method and device for monitoring the entry zone of vehicles
EP1700763B1 (en) System for securing door closed access openings on passenger transport vehicles
EP2090500B1 (en) Device for detecting and displaying the position of components of vehicle couplings
DE202009018205U1 (en) Device for actuating a closing element of a vehicle
EP3083480A1 (en) Arrangement of a monitoring sensor in an escalator or in a moving walkway
DE102019207332A1 (en) Monitoring system for an elevator door, elevator installation and method for monitoring an elevator door
DE202004021614U1 (en) Non-contact sensor system for opening a motor vehicle
DE102005011116B4 (en) Device for controlling and / or monitoring a grand piano
DE102010054626A1 (en) Method for monitoring danger area i.e. entrance area, of door of transportation medium i.e. bus, for transporting persons, involves providing warning notice to driver based on position or movement of detected person in one of partial areas
DE102018217746A1 (en) Method for operating a driver assistance system of a motor vehicle and motor vehicle
EP0978811A2 (en) Method and device to obtain travel times of vehicles
DE102009034283B4 (en) Device and method for monitoring a surrounding area of a vehicle
DE102012109390A1 (en) Monitoring device for safety-critical unit, particularly conveyer of conveyer system, has first video sensor unit, which is adapted to generate first image as representation formed from line by first monitoring area of safety-critical unit
DE19809235C2 (en) Pass-through gate and method for operating such a pass-through gate
DE10102936A1 (en) A monitoring system for personnel lifts has a camera in the roof and a transponder to check the number and authority of the users.
DE102022103638A1 (en) Rescue of people from the elevator car
EP3575666B1 (en) Device for protecting a hazardous area of a system
WO2021219266A1 (en) Display unit for a passage control device
DE102020201309A1 (en) Method and system for monitoring a means of transport environment
EP3680814A1 (en) Method for detecting movements and passenger detection system
WO2019206625A1 (en) Locating system and method for determining a current position in a lift shaft of a lift system
DE202018107098U1 (en) One-way passage system with a backstop for use in buildings and a corresponding building with such a one-way passage system
DE102020201310A1 (en) Method and system for monitoring access to means of transport
WO2021170452A1 (en) Passenger transport system and method for operating a passenger transport system
DE102022203276A1 (en) Automated valet parking with rail-based sensor system

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): BW GH GM KE LS MW MZ SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2004717518

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 90442004

Country of ref document: AT

WWP Wipo information: published in national office

Ref document number: 2004717518

Country of ref document: EP

WWW Wipo information: withdrawn in national office

Ref document number: 2004717518

Country of ref document: EP