EP3516622A1 - Klassifizierung statischer objekte mit beweglicher kamera - Google Patents

Klassifizierung statischer objekte mit beweglicher kamera

Info

Publication number
EP3516622A1
EP3516622A1 EP17758443.0A EP17758443A EP3516622A1 EP 3516622 A1 EP3516622 A1 EP 3516622A1 EP 17758443 A EP17758443 A EP 17758443A EP 3516622 A1 EP3516622 A1 EP 3516622A1
Authority
EP
European Patent Office
Prior art keywords
image
camera
movements
evaluation unit
arrangement according
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP17758443.0A
Other languages
English (en)
French (fr)
Inventor
Alexander Stohr
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZF Friedrichshafen AG
Original Assignee
ZF Friedrichshafen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZF Friedrichshafen AG filed Critical ZF Friedrichshafen AG
Publication of EP3516622A1 publication Critical patent/EP3516622A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle

Definitions

  • the invention relates to an arrangement according to the preamble of claim 1 and a method according to the independent method claim.
  • Document US 4,959,725 discloses an image stabilizer.
  • the video camera is provided with motion sensors whose signals are used to stabilize blurred video images. This is done in such a way that high accelerations registered by the sensors, which exceed a predefined threshold, are used to calculate a stabilized video image cleaned for the accelerations. Accelerations below threshold, such as when the camera is deliberately panned, are ignored.
  • the invention has for its object to reliably classify moving and stationary objects in a camera image.
  • the classification should be possible with low-frequency movements of the camera.
  • the arrangement comprises at least one camera, at least one evaluation unit and at least one sensor.
  • a camera is generally a device for creating images of objects. The images are usually two-dimensional, ie they extend over exactly two spatial dimensions.
  • the camera detects electromagnetic radiation emitted by the objects, such as reflection. The captured rays are converted into images by the camera.
  • the camera according to the invention is a film camera. This is characterized by the fact that it takes moving pictures.
  • a moving image is a sequence of images, which in the present case comprises a first image and a second image.
  • the sensor is designed to detect movements of the camera relative to a stationary reference system.
  • movements of the camera are detected from the time the first image was taken until the time the second image was taken.
  • movements of the camera are about one or more acceleration sensors, the rigid, i. without the possibility of relative movements associated with the camera.
  • the evaluation unit is designed to identify at least one object detected by the camera in the first image and the second image and to classify them as moved or immobile. Classification here means the classification of the object into a group of moving objects or into a group of still objects.
  • Moving objects are those that move in the fixed frame of reference. Immovable objects are arranged in a stationary manner and do not move in the fixed frame of reference.
  • both the first image and the second image contain an image of the object. These images are identified by the evaluation unit. In this case, components of the first image and the second image that belong to the respective image are identified.
  • the object is classified as being moved when it moves relative to the fixed frame of reference between the time the first frame was taken and the time the second frame was taken. Otherwise, that is, if the object is not subject to any motion relative to the fixed frame of reference between the time the first frame was taken and the time the second frame was taken, it is classified as immobile.
  • the evaluation unit is designed to classify the classification of the object taking into account the motion of the camera detected by the sensor. Considering the movements of the camera makes it possible to reliably classify even stationary objects despite a moving camera.
  • the object is classified as immobile if a deviation between the positions of the object or its image in the first image and the second image is caused exclusively by the movements of the camera.
  • the evaluation unit thus checks whether a deviation between the position of the object in the first image and the position of the object in the second image is due to the movements of the camera detected by the sensor, or if the deviation is also based on an intrinsic movement of the object , In the latter case, the object is classified as moving.
  • the evaluation unit can calculate the deviations of the position of a hypothetical object, which is assumed to be immobile, taking into account the movements of the camera.
  • the deviations are calculated in alternative preferred developments relative or absolute.
  • a relative calculation is performed in which the evaluation unit calculates, based on the movements of the camera, a hypothetical deviation between the positions of the object in the first image and the second image on the assumption that the object is stationary. This is possible because the deviation in the case of a stationary Object depends solely on the movements of the camera. These in turn are detected by the sensor and made available to the evaluation unit.
  • the evaluation unit classifies the object as being moved.
  • the evaluation unit calculates an absolute positional deviation in the form of a hypothetical position of the object in the second image on the assumption that the object is immovable.
  • the position of the object in the first image is the actual position of the object or its image.
  • the camera taking into account the movements of the camera detected by the sensor, calculates the expected position of a still object in the second image.
  • the evaluation unit thus assumes that the stationary object is located in the first image in the position of the identified object and calculates therefrom the position of the immovable object in the second image.
  • the object is classified as immovable if an actual position of the object in the second image with the hypothetical position, i. coincides with the calculated position of the assumed immovable object in the second image. If the positions deviate, the object is classified as moving.
  • the absolute calculation may be performed based on a first image taken before the second image or on a second image taken before the first image.
  • the arrangement is preferably further developed with a first means for signal transmission. This serves to transmit signals from the camera to the evaluation unit.
  • the signals are image signals.
  • the first image and the second image are encoded in the signals transmitted by the camera to the evaluation unit.
  • the arrangement is preferably further developed with a second means for signal transmission. This serves to transmit signals from the sensor to the evaluation unit. These are motion signals in which the movements of the camera detected by the sensor are coded.
  • the arrangement is preferably part of a vehicle, in particular of a motor vehicle.
  • the arrangement may be integrated into a driver assistance system, for example.
  • the arrangement transmits to the driver assistance system the classification of the object as moved or unmoved.
  • An inventive method for classifying an object as moved or unmoving comprises the steps
  • process steps are preferably carried out in the order indicated.
  • the method may comprise one or more of the above-described steps carried out by the arrangement according to the invention or one of its further developments.
  • FIG. 3 shows a camera containing arrangement.
  • the camera 101 illustrated in FIGS. 1 to 3 is a video camera, ie a camera which takes moving pictures.
  • the camera 101 is oriented to detect an object 103.
  • the camera 101 generates a first image 105 of the object 103 shown in FIG. 1.
  • the camera 101 is tilted in Fig. 2.
  • the camera 101 continues to capture the object 103, but its image shifts. Accordingly, the position of a second image 201 of the object 103 shown in FIG. 2 within an image plane of the camera 101 differs from the position of the first image 105.
  • the arrangement shown in FIG. 3 comprises, in addition to the camera 101, an acceleration sensor 301 and an evaluation unit 303.
  • the acceleration sensor 301 is rigidly connected to the camera 101 and thus detects their movements.
  • the movements of the camera 101 are transmitted in the form of a movement signal 305 to the evaluation unit 303. Furthermore, an image signal 307 is transmitted from the camera 101 to the evaluation unit 303.
  • the evaluation unit 303 can recognize whether the detected object 103 is a moving or non-moving object.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

Die Erfindung betrifft eine Anordnung mit mindestens einer Kamera (101 ), mindestens einer Auswerteinheit (303) und mindestens einem Sensor (301); wobei die Kamera (101) ausgebildet ist, ein erstes Bild (105) und ein zweites Bild (201) aufzunehmen; wobei der Sensor (301) ausgebildet ist, Bewegungen der Kamera (101) zu erfassen; wobei die Auswerteinheit (303) ausgebildet ist, mindestens ein von der Kamera (101) erfasstes Objekt (103) in dem ersten Bild (105) und dem zweiten Bild (201) zu identifizieren und als bewegt oder unbewegt zu klassifizieren. Die Klassifizierung des Objekts (103) erfolgt unter Berücksichtigung der Bewegungen der Kamera (101).

Description

Klassifizierung statischer Objekte mit beweglicher Kamera
Die Erfindung betrifft eine Anordnung nach dem Oberbegriff von Anspruch 1 und ein Verfahren nach dem unabhängigen Verfahrensanspruch.
Verschiedene Anwendungen aus dem Bereich des autonomen Fahrens erfordern es, bewegte von unbewegten Objekten in Videobildern zu unterscheiden. Dies ist problematisch, wenn sich die Kamera selbst bewegt, etwa wenn sie in einem sich bewegenden Fahrzeug angebracht ist. Infolge von Kamerabewegungen erscheinen auch unbewegte Objekte in dem Videobild bewegt.
Die Druckschrift US 4,959,725 offenbart einen Bildstabilisator. Die Videokamera ist dabei mit Bewegungssensoren versehen, deren Signale verwendet werden, um verwackelte Videobilder zu stabilisieren. Dies geschieht derart, dass von den Sensoren registrierte hohe Beschleunigungen, die einen vordefinierten Schwellwert überschreiten, verwendet werden, um ein stabilisiertes, um die Beschleunigungen bereinigtes Videobild zu berechnen. Beschleunigungen unterhalb des Schwellwerts, die etwa auftreten, wenn die Kamera bewusst verschwenkt wird, werden ignoriert.
Mittels eines Bildstabilisators lassen sich hochfrequente Störbewegungen der Kamera rausfiltern. Bei niederfrequenten Bewegungen bleibt ein Bildstabilisator allerdings wirkungslos.
Der Erfindung liegt die Aufgabe zugrunde, bewegte und unbewegte Objekte in einem Kamerabild zuverlässig zu klassifizieren. Insbesondere soll die Klassifizierung bei niederfrequenten Bewegungen der Kamera möglich sein.
Diese Aufgabe wird gelöst durch eine Anordnung nach Anspruch 1 und ein Verfahren nach dem unabhängigen Verfahrensanspruch. Bevorzugte Weitebildungen sind in den Unteransprüchen enthalten.
Die Anordnung umfasst mindestens eine Kamera, mindestens eine Auswerteeinheit und mindestens einen Sensor. Bei einer Kamera handelt es sich allgemein um eine Vorrichtung zum Erzeugen von Bildern von Objekten. Die Bilder sind gewöhnlich zweidimensional, d.h. erstrecken sich über genau zwei Raumdimensionen. Die Kamera erfasst elektromagnetische Strahlen, die von den Objekten ausgesendet werden, etwa durch Reflektion. Die er- fassten Strahlen werden von der Kamera in Bilder umgewandelt.
Bei der erfindungsgemäßen Kamera handelt es sich um eine Filmkamera. Diese zeichnet sich dadurch aus, dass sie bewegte Bilder aufnimmt. Bei einem bewegten Bild handelt es sich um eine Folge von Bildern, die vorliegend ein erstes Bild und ein zweites Bild umfasst.
Der Sensor ist ausgebildet, Bewegungen der Kamera relativ zu einem ortsfesten Bezugssystem zu erfassen. Insbesondere werden Bewegungen der Kamera vom Zeitpunkt der Aufnahme des ersten Bilds bis zum Zeitpunkt der Aufnahme des zweiten Bilds erfasst. Zur Erfassung der Bewegungen der Kamera eignen sich etwa ein oder mehrere Beschleunigungssensoren, die starr, d.h. ohne die Möglichkeit von Relativbewegungen mit der Kamera verbunden sind.
Die Auswerteeinheit ist ausgebildet, mindestens ein von der Kamera erfasstes Objekt in dem ersten Bild und dem zweiten Bild zu identifizieren und als bewegt oder unbewegt zu klassifizieren. Klassifizieren bedeutet hier die Einordnung des Objekts in eine Gruppe der bewegten Objekte oder in eine Gruppe der unbewegten Objekte.
Bewegte Objekte sind solche, die sich in dem ortsfesten Bezugssystem bewegen. Unbewegte Objekte sind entsprechend ortsfest angeordnet und bewegen sich in dem ortsfesten Bezugssystem nicht.
Wird das Objekt zu dem Zeitpunkt, in dem die Kamera das erste Bild aufnimmt und zu dem Zeitpunkt, in dem die Kamera das zweite Bild aufnimmt, von der Kamera erfasst, enthalten sowohl das erste Bild aus auch das zweite Bild ein Abbild des Objekts. Diese Abbilder werden von der Auswerteeinheit identifiziert. Dabei werden Bestandteile des ersten Bild und des zweiten Bild identifiziert, die zu dem jeweiligen Abbild gehören. Das Objekt wird als bewegt klassifiziert, wenn es sich relativ zu dem ortsfesten Bezugssystem zwischen dem Zeitpunkt, in dem das erste Bild aufgenommen wurde und dem Zeitpunkt, in dem das zweite Bild aufgenommen wurde, bewegt. Andernfalls, d.h. wenn das Objekt zwischen dem Zeitpunkt, in dem das erste Bild aufgenommen wurde, und dem Zeitpunkt, in dem das zweite Bild aufgenommen wurde, keiner Bewegung relativ zu dem ortsfesten Bezugssystem unterliegt, wird es als unbewegt klassifiziert.
Erfindungsgemäß ist die Auswerteeinheit ausgebildet, die Klassifizierung des Objekts unter Berücksichtigung der von dem Sensor erfassten Bewegung der Kamera zu klassifizieren. Die Berücksichtigung der Bewegungen der Kamera ermöglicht es, auch unbewegte Objekte trotz einer sich bewegenden Kamera zuverlässig zu klassifizieren.
In einer bevorzugten Weiterbildung wird das Objekt als unbewegt klassifiziert, wenn eine Abweichung zwischen den Positionen des Objekts bzw. seines Abbilds in dem ersten Bild und dem zweiten Bild ausschließlich durch die Bewegungen der Kamera verursacht wird. Die Auswerteeinheit prüft also, ob eine Abweichung zwischen der Position des Objekts in dem ersten Bild und der Position des Objekts in dem zweiten Bild auf die mittels des Sensors erfassten Bewegungen der Kamera zurückzuführen ist, oder ob die Abweichung darüber hinaus auf einer Eigenbewegung des Objekts basiert. Im letzteren Fall wird das Objekt als bewegt klassifiziert.
Die Auswerteeinheit kann die Abweichungen der Position eines hypothetischen Objekts, das als unbewegt angenommen wird, unter Berücksichtigung der Bewegungen der Kamera berechnen. Die Abweichungen werden in alternativ bevorzugten Weiterbildungen relativ oder absolut berechnet.
Eine relative Berechnung erfolgt, in dem die Auswerteeinheit anhand der Bewegungen der Kamera eine hypothetische Abweichung zwischen den Positionen des Objekts in dem ersten Bild und dem zweiten Bild unter der Annahme berechnet, das Objekt sei unbewegt. Dies ist möglich, da die Abweichung im Falle eines unbewegten Objekts ausschließlich von den Bewegungen der Kamera abhängt. Diese wiederum werden von dem Sensor erfasst und der Auswerteeinheit zur Verfügung gestellt. Wenn eine tatsächliche Abweichung zwischen den Positionen des Objekts in dem ersten Bild und dem zweiten Bild, d.h. eine Abweichung zwischen einer tatsächlichen Position des Objekts in dem ersten Bild und einer tatsächlichen Position des Objekts in dem zweiten Bild mit der hypothetischen Abweichung übereinstimmt, wird das Objekt als unbeweglich klassifiziert. Ist keine Übereinstimmung feststellbar, klassifiziert die Auswerteeinheit das Objekt als bewegt.
Ausgehend von einer Position des Objekts in dem ersten Bild berechnet die Auswerteeinheit eine absolute Positionsabweichung in Gestalt einer hypothetischen Position des Objekts in dem zweiten Bild unter der Annahme, das Objekt sei unbeweglich. Bei der Position des Objekts in dem ersten Bild handelt es sich um die tatsächliche Position des Objekts bzw. seines Abbilds. Ausgehend davon berechnet die Kamera unter Berücksichtigung der von dem Sensor erfassten Bewegungen der Kamera die zu erwartende Position eines unbewegten Objekts in dem zweiten Bild. Die Auswerteeinheit geht also davon aus, das unbewegte Objekt befinde sich in dem ersten Bild in der Position des identifizierten Objekts und berechnet daraus die Position des unbeweglichen Objekts in dem zweiten Bild. Das Objekt wird als unbeweglich klassifiziert, wenn eine tatsächliche Position des Objekts in dem zweiten Bild mit der hypothetischen Position, d.h. mit der berechneten Position des als unbeweglich angenommenen Objekts in dem zweiten Bild übereinstimmt. Bei Abweichungen der Positionen wird das Objekt als bewegt klassifiziert.
Die absolute Berechnung kann sowohl auf Basis eines ersten Bilds durchgeführt werden, das vor dem zweiten Bild aufgenommen wurde, als auch auf Basis eines zweiten Bilds, das vor dem ersten Bild aufgenommen wurde.
Die Anordnung ist bevorzugt mit einem ersten Mittel zur Signalübertragung weitergebildet. Dieses dient der Übertragung von Signalen von der Kamera zu der Auswerteeinheit. Bei den Signalen handelt es sich um Bildsignale. Insbesondere sind das erste Bild und das zweite Bild in den von der Kamera zu der Auswerteeinheit übertragenen Signalen kodiert. Ebenso ist die Anordnung bevorzugt mit einem zweiten Mittel zur Signalübertragung weitergebildet. Dieses dient dazu, Signale von dem Sensor zu der Auswerteeinheit zu übertragen. Dabei handelt es sich um Bewegungssignale, in denen die von dem Sensor erfassten Bewegungen der Kamera kodiert sind.
Die Anordnung ist bevorzugt Teil eines Fahrzeugs, insbesondere eines Kraftfahrzeugs. Dabei kann die Anordnung etwa in ein Fahrassistenzsystem integriert sein. Die Anordnung übermittelt dem Fahrassistenzsystem die Klassifizierung des Objekts als bewegt oder unbewegt.
Ein erfindungsgemäßes Verfahren zur Klassifizierung eines Objekts als bewegt oder unbewegt umfasst die Schritte
- Aufnehmen eines ersten Bilds und eines zweiten Bilds, wobei das Objekt in dem ersten Bild und dem zweiten Bild enthalten ist, mittels einer Kamera;
- Erfassen von Bewegungen der Kamera; und
- Klassifizieren des Objekts als beweglich oder unbeweglich unter Berücksichtigung der Bewegungen der Kamera.
Bevorzugt werden die Verfahrensschritte in der angegebenen Reihenfolge ausgeführt. Das Verfahren kann in bevorzugten Weiterbildungen einen oder mehrere der oben beschriebenen von der erfindungsgemäßen Anordnung oder einer ihrer Weiterbildungen ausgeführten Schritte enthalten.
Bevorzugte Ausführungsbeispiele der Erfindung sind in den Figuren dargestellt. Übereinstimmende Bezugsziffern kennzeichnen dabei gleiche oder funktionsgleiche Merkmale. Im Einzelnen zeigt:
Fig. 1 eine Kamera in einer ersten Position;
Fig. 2 die Kamera in einer zweiten Position; und
Fig. 3 eine die Kamera enthaltende Anordnung. Bei der in den Figuren 1 bis 3 dargestellten Kamera 101 handelt es sich um eine Videokamera, d.h. um eine Kamera, die bewegte Bilder aufnimmt. Die Kamera 101 ist so ausgerichtet, dass sie ein Objekt 103 erfasst. Dabei erzeugt die Kamera 101 ein in Fig. 1 dargestelltes erstes Abbild 105 des Objekts 103.
Gegenüber der Position aus Fig. 1 ist die Kamera 101 in Fig. 2 verkippt. Die Kamera 101 erfasst das Objekt 103 weiterhin, allerdings verschiebt sich dessen Abbild. Entsprechend unterscheidet sich die Position eines in Fig. 2 dargestellten zweiten Abbilds 201 des Objekts 103 innerhalb einer Bildebene der Kamera 101 von der Position des ersten Abbilds 105.
Die in Fig. 3 dargestellte Anordnung umfasst neben der Kamera 101 einen Beschleunigungssensor 301 und eine Auswerteeinheit 303. Der Beschleunigungssensor 301 ist starr mit der Kamera 101 verbunden und erfasst somit deren Bewegungen.
Die Bewegungen der Kamera 101 werden in Gestalt eines Bewegungssignals 305 zu der Auswerteeinheit 303 übertragen. Weiterhin wird ein Bildsignal 307 von der Kamera 101 zu der Auswerteeinheit 303 übertragen. Durch Abgleich des Bewegungssignals 305 mit den Positionen des in dem Bewegungssignal 305 enthaltenen ersten Abbilds 105 und zweiten Abbilds 203 kann die Auswerteeinheit 303 erkennen, ob es sich bei dem erfassten Objekt 103 um ein bewegtes oder unbewegtes Objekt handelt.
Bezugszeichen
101 Kamera
103 Objekt
105 erstes Abbild
201 zweites Abbild
301 Beschleunigungssensor
303 Auswerteinheit
305 Bewegungssignal
307 Bildsignal

Claims

Patentansprüche
1. Anordnung mit mindestens einer Kamera (101 ), mindestens einer Auswerteinheit (303) und mindestens einem Sensor (301 ); wobei
die Kamera (101 ) ausgebildet ist, ein erstes Bild (105) und ein zweites Bild (201 ) aufzunehmen; wobei
der Sensor (301 ) ausgebildet ist, Bewegungen der Kamera (101 ) zu erfassen; und wobei
die Auswerteinheit (303) ausgebildet ist, mindestens ein von der Kamera (101 ) er- fasstes Objekt (103) in dem ersten Bild (105) und dem zweiten Bild (20) zu identifizieren und als bewegt oder unbewegt zu klassifizieren; dadurch gekennzeichnet, dass die Klassifizierung des Objekts (103) unter Berücksichtigung der Bewegungen der Kamera (101 ) erfolgt.
2. Anordnung nach Anspruch 1 ; dadurch gekennzeichnet, dass
das Objekt (103) als unbewegt klassifiziert wird, wenn eine Abweichung zwischen den Positionen des Objekts (103) in dem ersten Bild (105) und dem zweiten
Bild (201 ) ausschließlich auf den Bewegungen der Kamera (101 ) beruht.
3. Anordnung nach Anspruch 2; dadurch gekennzeichnet, dass
die Auswerteinheit (303) anhand der Bewegungen der Kamera (101 ) eine hypothetische Abweichung zwischen den Positionen des Objekts (103) in dem ersten
Bild (105) und dem zweiten Bild (201 ) unter der Annahme berechnet, das Objekt (103) sei unbewegt; wobei
das Objekt (103) als unbewegt klassifiziert wird, wenn eine tatsächliche Abweichung zwischen den Positionen des Objekts (103) in dem ersten Bild (105) und dem zweiten Bild (201 ) mit der hypothetischen Abweichung übereinstimmt.
4. Anordnung nach Anspruch 2; dadurch gekennzeichnet, dass
die Auswerteinheit (303) ausgehend von einer Position des Objekts (103) in dem ersten Bild (105) anhand der Bewegungen der Kamera (101 ) eine hypothetische Position des Objekts (103) in dem zweiten Bild (201 ) unter der Annahme berechnet, das Objekt (103) sei unbewegt; wobei das Objekt (103) als unbewegt klassifiziert wird, wenn eine tatsächliche Position des Objekts (103) in dem zweiten Bild (201 ) mit der hypothetischen Position übereinstimmt.
5. Anordnung nach einem der vorhergehenden Ansprüche; gekennzeichnet durch ein erstes Mittel zur Signalübertragung; wobei
das erste Mittel ausgebildet ist, Signale (307) von der Kamera (101 ) zu der Auswerteinheit (303) zu übertragen.
6. Anordnung nach einem der vorhergehenden Ansprüche; gekennzeichnet durch ein zweites Mittel zur Signalübertragung; wobei
das zweite Mittel ausgebildet ist; Signale (305) von dem Sensor (301 ) zu der Auswerteinheit (303) zu übertragen.
7. Fahrzeug mit einer Anordnung nach einem der vorhergehenden Ansprüche.
8. Verfahren zur Klassifizierung eines Objekts (103) als bewegt oder unbewegt mit den Schritten
-Aufnehmen eines ersten Bildes (105) und eines zweiten Bildes (201 ) mittels einer Kamera (101 ), wobei das Objekt (103) in dem ersten Bild (105) und dem zweiten Bild (201 ) enthalten ist;
- Erfassen von Bewegungen der Kamera (101 );
- Klassifizieren des Objekts (103) als beweglich oder unbeweglich unter Berücksichtigung der Bewegungen der Kamera (101 ).
EP17758443.0A 2016-09-22 2017-08-08 Klassifizierung statischer objekte mit beweglicher kamera Withdrawn EP3516622A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102016218213.7A DE102016218213A1 (de) 2016-09-22 2016-09-22 Klassifizierung statischer Objekte mit beweglicher Kamera
PCT/EP2017/070000 WO2018054598A1 (de) 2016-09-22 2017-08-08 Klassifizierung statischer objekte mit beweglicher kamera

Publications (1)

Publication Number Publication Date
EP3516622A1 true EP3516622A1 (de) 2019-07-31

Family

ID=59738288

Family Applications (1)

Application Number Title Priority Date Filing Date
EP17758443.0A Withdrawn EP3516622A1 (de) 2016-09-22 2017-08-08 Klassifizierung statischer objekte mit beweglicher kamera

Country Status (5)

Country Link
US (1) US20190311481A1 (de)
EP (1) EP3516622A1 (de)
CN (1) CN109716391A (de)
DE (1) DE102016218213A1 (de)
WO (1) WO2018054598A1 (de)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102020117870B4 (de) 2020-07-07 2023-01-12 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Fahrzeug
DE102023127324A1 (de) * 2023-10-06 2025-04-10 Jungheinrich Aktiengesellschaft Flurförderzeug mit einer Auswerteeinheit und wenigstens einer Kamera und Verfahren zur Erhöhung der Fahrsicherheit eines Flurförderzeugs

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4959725A (en) 1988-07-13 1990-09-25 Sony Corporation Method and apparatus for processing camera an image produced by a video camera to correct for undesired motion of the video camera
US9503658B2 (en) * 2011-05-17 2016-11-22 Werth Messtechnik Gmbh Method for generating and evaluating an image
US20130107065A1 (en) * 2011-10-27 2013-05-02 Qualcomm Incorporated Inertial sensor aided stationary object detection in videos
DE102013206707A1 (de) * 2013-04-15 2014-10-16 Robert Bosch Gmbh Verfahren zur Überprüfung eines Umfelderfassungssystems eines Fahrzeugs
CN105898143B (zh) * 2016-04-27 2019-05-17 维沃移动通信有限公司 一种运动物体的抓拍方法及移动终端

Also Published As

Publication number Publication date
US20190311481A1 (en) 2019-10-10
DE102016218213A1 (de) 2018-03-22
CN109716391A (zh) 2019-05-03
WO2018054598A1 (de) 2018-03-29

Similar Documents

Publication Publication Date Title
DE102009004626B4 (de) Vorrichtung zur Überwachung der Umgebung eines Fahrzeugs
DE102016122489A1 (de) Sichtgestützte erfassung von nassen fahrbahnzuständen mittels reifenspuren
EP1330132A2 (de) Verfahren und Vorrichtunng zur Verdeckungsdetektion bei Bildsensorsystemen
EP2736017A2 (de) Verfahren zur Ermittlung der Bewegung eines Kraftfahrzeugs
DE102018005969A1 (de) Verfahren zum Betreiben eines Fahrerassistenzsvstems mit zwei Erfassungseinrichtungen
EP4352538B1 (de) Verfahren und vorrichtung zur detektion einer dekalibrierung eines sensors zur erfassung der umgebung eines fahrzeugs
DE102012015282A1 (de) Verfahren zur Detektion eines verdeckten Zustands einer Bilderfassungseinrichtung eines Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE102012023060A1 (de) Verfahren zum Detektieren eines beweglichen Objekts mithilfe eines Histogramms anhand von Bildern einer Kamera und Kamerasystem für ein Kraftfahrzeug
WO2018095640A1 (de) Verfahren und system zum detektieren eines sich innerhalb eines parkplatzes befindenden erhabenen objekts
EP3516622A1 (de) Klassifizierung statischer objekte mit beweglicher kamera
DE102017204347A1 (de) Verfahren und System zum Bestimmen einer kinematischen Eigenschaft eines Objekts, Verfahren zum Steuern eines Assistenzsystems eines Kraftfahrzeugs und Kraftfahrzeug
DE102006060893A1 (de) Vorrichtung und Verfahren zum Bestimmen eines Freiraums vor einem Fahrzeug
DE102016223094A1 (de) Verfahren und System zum Detektieren eines sich innerhalb eines Parkplatzes befindenden erhabenen Objekts
DE102018208481A1 (de) Abschätzen eines Verlaufs eines Schienenpfads
DE102011079005A1 (de) Verfahren zur Eigendiagnose von Kameras und Bildaufnahmesystem mit mindestens einer Kamera zur Durchführung des Verfahrens
DE102024111289A1 (de) Straßenoberflächenprojektionssystem
DE102017217063A1 (de) Erkennungssystem, Arbeitsverfahren und Trainingsverfahren zum Erzeugen eines 3D-Modells mit Referenzdaten
DE102017221381A1 (de) Verfahren, Vorrichtung und Computerprogramm zum Ermitteln eines Abstandes zu einem Objekt
DE102013210591A1 (de) Bewegungserkennung eines fahrzeugs mittels mehrerer kameras
WO2022167120A1 (de) Verfahren und vorrichtung zur erkennung von beeinträchtigungen im optischen pfad einer stereokamera
DE102017214653B4 (de) Verfahren zum Bereitstellen eines Bildsignals eines Umgebungsbereichs eines Kraftfahrzeugs sowie Kraftfahrzeug
DE102007008543A1 (de) Verfahren und Vorrichtung zum Ermitteln des Bewegungszustands von Objekten
EP4312189B1 (de) System zum ermitteln des abstands eines objekts
DE102018000276A1 (de) Verfahren zum Unterscheiden von Objekten
DE102012011121A1 (de) Verfahren zum Detektieren von Objekten nach der Methode des optischen Flusses, Kamerasystem und Kraftfahrzeug

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20190222

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20191113