DE4222597C2 - Automatic object tracking device of a camcorder - Google Patents

Automatic object tracking device of a camcorder

Info

Publication number
DE4222597C2
DE4222597C2 DE4222597A DE4222597A DE4222597C2 DE 4222597 C2 DE4222597 C2 DE 4222597C2 DE 4222597 A DE4222597 A DE 4222597A DE 4222597 A DE4222597 A DE 4222597A DE 4222597 C2 DE4222597 C2 DE 4222597C2
Authority
DE
Germany
Prior art keywords
movement
camcorder
tracking device
camera
object tracking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
DE4222597A
Other languages
German (de)
Other versions
DE4222597A1 (en
Inventor
Jong-Pil Lee
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of DE4222597A1 publication Critical patent/DE4222597A1/en
Application granted granted Critical
Publication of DE4222597C2 publication Critical patent/DE4222597C2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/78Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using electromagnetic waves other than radio waves
    • G01S3/782Systems for determining direction or deviation from predetermined direction
    • G01S3/785Systems for determining direction or deviation from predetermined direction using adjustment of orientation of directivity characteristics of a detector or detector system to give a desired condition of signal derived from that detector or detector system
    • G01S3/786Systems for determining direction or deviation from predetermined direction using adjustment of orientation of directivity characteristics of a detector or detector system to give a desired condition of signal derived from that detector or detector system the desired condition being maintained automatically
    • G01S3/7864T.V. type tracking systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/269Analysis of motion using gradient-based methods
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)
  • Lens Barrels (AREA)

Description

Die Erfindung betrifft eine automatische Objekt-Nachführvor­ richtung eines Camcorders nach dem Oberbegriff des Patentan­ spruchs 1.The invention relates to an automatic object tracking direction of a camcorder according to the preamble of the patent saying 1.

Durch Objekt-Nachführvorrichtungen soll verhindert werden, daß ein Objekt aus dem Aufnahmewinkel eines Camcorders verloren geht. Aus GB 2 220 319 ist eine Vorrichtung bekannt, mittels der die Bilder gegen Instabilität oder Bewegungen der TV-Ka­ mera stabilisiert werden sollen. Dazu werden die Videosignale digitalisiert und wird aus einem Vergleich der Lage einzelner Bildpunkte in aufeinanderfolgenden Bildern ein Bewegungsvektor abgeleitet, entsprechend dem das Bild dann so verschoben wird, daß die betreffenden Bildpunkte wieder an der gleichen Stelle erscheinen. Das Verfahren kann dabei auch so ausgeführt wer­ den, daß die Kamera einem sich bewegenden Objekt folgt, wobei der Vektor zur Steuerung der Kamerabewegung verwendet wird. Diese Vorrichtung arbeitet zufriedenstellend nur bei Kamera­ objektiven mit fester Brennweite.Object tracking devices are intended to prevent an object is lost from the angle of a camcorder goes. From GB 2 220 319 a device is known by means of of the pictures against instability or movements of the TV-Ka mera should be stabilized. To do this, the video signals digitized and is made from a comparison of the situation of individuals Pixels in successive images are a motion vector derived, according to which the image is then shifted so that the relevant pixels again in the same place appear. The process can also be carried out in this way the camera follows a moving object, whereby the vector is used to control camera movement. This device works satisfactorily only with a camera fixed focal length lenses.

Aus DE-A-40 32 969, Fig. 15, ist es bekannt, aus dem Vergleich der Vektoren, die zu verschiedenen Bildpunkten gehören, eine Zoom-Änderung festzustellen. Die Feststellung der Zoom-Ände­ rung dient dabei dazu, eine fehlerhafte Korrektur des Kamera­ wackelns zu verhindern. Der Mittelwert der Bewegungsvektoren mehrerer über das gesamte Bild verteilter Bildpunkte wird da­ bei als der zu korrigierende Bewegungsvektor angesehen.From DE-A-40 32 969, Fig. 15, it is known from the comparison of the vectors belonging to different pixels, one Determine zoom change. The detection of the zoom changes tion serves to correct the camera incorrectly to prevent jiggling. The mean of the motion vectors several pixels distributed over the entire image is there at as the motion vector to be corrected.

Im allgemeinen ist ein Camcorder (Videokamera) zum Photo­ graphieren eines Objektes so eingerichtet, daß ein Kameramann Bilder aufnimmt und dabei gegebenenfalls eine Nachführung hin­ sichtlich eines sich bewegenden Objektes vornimmt. In general, a camcorder (video camera) is for photo graph an object so that a cameraman Takes pictures and possibly a tracking visually makes a moving object.  

Schwierigkeiten ergeben sich bei Benutzung der Selbstauslöser­ funktion, also für den Fall, daß der Anwender selbst durch den Camcorder photographiert werden soll, wobei nicht nur das Ob­ jekt durch seine Bewegung aus dem Bildwinkel herausgelangte, sondern auch der Fokussierungszustand verlassen wurde.Difficulties arise when using the self-timer function, so in the event that the user himself through the Camcorder to be photographed, not only the Ob ject moved out of the picture angle by its movement, but also the state of focus has been left.

Der Erfindung liegt daher die Aufgabe zugrunde, eine automa­ tische Objekt-Nachführvorrichtung eines Camcorders zu schaf­ fen, die auch bei Zoom-Objektiven das Nachführen der Kamera ermöglicht.The invention is therefore based on the object of an automa table object tracking device of a camcorder the tracking of the camera even with zoom lenses enables.

Die Aufgabe wird durch eine Vorrichtung mit den Merkmalen des Patentanspruchs 1 gelöst. Bevorzugte Ausgestaltungen der Er­ findung sind Gegenstand der Unteransprüche.The task is performed by a device with the features of Claim 1 solved. Preferred embodiments of the Er invention are the subject of the subclaims.

Mittels der erfindungsgemäßen Objekt-Nachführvorrichtung ist es gleichzeitig möglich, auch bei einer Bewegung des Objekts die Scharfeinstellung (Fokussierung) beizubehalten.By means of the object tracking device according to the invention it is possible at the same time, even if the object moves to keep the focus (focus).

Ein Ausführungsbeispiel der Erfindung wird nachfolgend anhand der Zeichnung erläutert. Es zeigen:An embodiment of the invention is described below the drawing explained. Show it:

Fig. 1 ein Blockschaltbild einer automatischen Objektnach­ führvorrichtung eines Camcorders; und Fig. 1 is a block diagram of an automatic object tracking device of a camcorder; and

Fig. 2 ein Diagramm eines Beispiels von Prüfpunkten für eine Erkennung einer Bewegung des Bildes in Fig. 1. FIG. 2 shows a diagram of an example of test points for detecting movement of the image in FIG. 1.

Fig. 1 ist ein Blockschaltbild einer automatischen Objekt-Nachführvorrichtung eines Camcorders, der ein Zoomobjektiv oder eine Linse 1 zum Fokussieren einer Abbildung eines Objek­ tes, ein CCD-Photographierelement 2 zum Umwandeln der durch die Linse 1 fokussierten Abbildung in ein elektrisches Signal und eine Kameraschaltung 3, die das Bildsignal verarbeitet, aufweist. Fig. 1 is a block diagram of an automatic object tracking device of a camcorder, the zoom lens or a lens 1 for focusing an image of an object, a CCD photographing element 2 for converting the image focused by the lens 1 into an electrical signal and a camera circuit 3 , which processes the image signal.

Die Linse 1, das CCD-Photographierelement 2 und die Kamera­ schaltung 3 bilden eine Bildverarbeitungseinheit eines allge­ meinen Camcorders, wobei ein optisches Signal des Objekts, das durch die Linse 1 fokussiert worden ist, photoelektrisch durch das CCD-Photographierelement 2 in ein elektrisches Signal um­ gewandelt wird und dann anschließend in der Kameraschaltung 3 verarbeitet wird, die aus einem Chrominanzsignal- und einer Luminanzsignal-Verarbeitungseinheit, einer automatischen Weiß­ abgleich-Schaltungseinheit, einer Farbdifferenzsignal-Verar­ beitungseinheit und einer Zoomlinsen-Steuereinheit besteht, um dann auf einem Videoband aufgezeichnet zu werden.The lens 1 , the CCD photographing element 2 and the camera circuit 3 form an image processing unit of a general camcorder, an optical signal of the object that has been focused by the lens 1 photoelectrically by the CCD photographing element 2 into an electrical signal is converted and then subsequently processed in the camera circuit 3 consisting of a chrominance signal and a luminance signal processing unit, an automatic white balance circuit unit, a color difference signal processing unit and a zoom lens control unit, to be then recorded on a video tape .

Mittels eines A/D-Wandlers 4 wird das von der Kameraschaltung 3 ausgegebene Videoluminanzsignal in ein digitales Signal um­ gewandelt. Ein Bildspeicher 5 speichert zeitweilig ein Video­ luminanzsignal eines (1) Vollbildes (= 2 Halbbilder), welches in dem A/D-Wandler 4 in ein digitales Signal umgewandelt wird. Ein Bewegungsdetektor 6 vergleicht ein Vollbild des momentan vorhandenen Videoluminanzsignals, welches in dem A/D-Wandler 4 in ein digitales Signal umgewandelt wurde, und ein Vollbild des unmittelbar vorhergehenden Videoluminanzsignals, welches in dem Bildspeicher 5 gespeichert wurde, und erkennt dadurch Größe und Richtung der Bewegung des Bildes in Form eines Vek­ tors. Ein Zoom-Stellungssensor 7 erkennt die Zoomstellung der Linse 1. Ein Mikroprozessor 8 erhält Informationen hinsicht­ lich Größe und Richtung der Bewegung und der Zoomstellung von dem Bewegungsdetektor 6 und dem Zoom-Stellungssensor 7. Eine Bildspeicher-Steuerung 9 steuert den Bildspeicher 5. Eine Mo­ torsteuereinheit 10 erhält Informationen hinsichtlich der Größe und Richtung der Bewegung und der Geschwindigkeit des Objekts von dem Mikroprozessor 8 und steuert auf dieser Grundlage einen Kameraschwenk- oder Drehmotor 11.By means of an A / D converter 4 , the video luminance signal output by the camera circuit 3 is converted into a digital signal. An image memory 5 temporarily stores a video luminance signal of one (1) frame (= 2 fields), which is converted in the A / D converter 4 into a digital signal. A motion detector 6 compares a frame of the currently existing video luminance signal, which has been converted into a digital signal in the A / D converter 4 , and a frame of the immediately preceding video luminance signal, which has been stored in the image memory 5 , and thereby detects the size and direction of the Movement of the image in the form of a vector. A zoom position sensor 7 detects the zoom position of the lens 1 . A microprocessor 8 receives information regarding the size and direction of the movement and the zoom position from the motion detector 6 and the zoom position sensor 7 . An image memory controller 9 controls the image memory 5 . A motor control unit 10 receives information regarding the size and direction of the movement and the speed of the object from the microprocessor 8 and controls a camera pan or rotary motor 11 on the basis thereof.

Bei dem Ausführungsbeispiel besteht der Bildspeicher 5 aus zwei Bildspeichereinheiten. Er gibt nah einer Verzögerung des Videoluminanzsignals Yh zwei Halbbilder (=1 Vollbild) während einer Bilddauer aus, wobei der Kameraschwenkmotor 11 so kon­ struiert ist, daß er die Bewegungsrichtung der Kamera ändert, die von einem Dreifuß 12 gehaltert ist.In the exemplary embodiment, the image memory 5 consists of two image memory units. It outputs close to a delay of the video luminance signal Yh two fields (= 1 frame) during an image period, the camera pivot motor 11 being constructed so that it changes the direction of movement of the camera, which is supported by a tripod 12 .

Beim Photographieren mittels einer Selbstauslöser-Funktion wird demzufolge, wenn das Videoluminanzsignal Yh von der Vi­ deoverarbeitungseinheit des Camcorders ausgegeben wird, der die Linse 1, das Photographierelement 2 und die Kameraschal­ tung 3 aufweist, das analoge Videoluminanzsignal Yh durch den A/D-Wandler 4 in ein digitales Signal umgewandelt.Accordingly, when photographing by means of a self-timer function, when the video luminance signal Yh is output from the video processing unit of the camcorder having the lens 1 , the photographing element 2 and the camera circuit 3 , the analog video luminance signal Yh is output by the A / D converter 4 converted into a digital signal.

Der von der Bildspeichersteuerung 9 gesteuerte Bildspeicher 5 speichert zeitweilig (bis zum Eingabezeitpunkt des nächsten Vollbildes) das Videoluminanzsignal Yh eines Vollbildes, wel­ ches durch den A/D-Wandler 4 in ein digitales Signal umgewan­ delt wurde.The image memory 5 controlled by the image memory controller 9 temporarily stores (until the input point of the next frame) the video luminance signal Yh of a frame, which has been converted by the A / D converter 4 into a digital signal.

Der Bewegungsdetektor 6 vergleicht ein Vollbild des momentan vorhandenen Videoluminanzsignals, welches durch Umwandeln in ein digitales Signal durch den A/D-Wandler 4 eingegeben wurde, mit dem Videoluminanzsignal eines Vollbildes, welches unmit­ telbar zuvor aufgetreten ist und in dem Bildspeicher 5 gespei­ chert wurde, und erkennt dadurch die Bewegungsgröße und Bewe­ gungsrichtung des Bildes als einen Vektor.The motion detector 6 compares a frame of the currently existing video luminance signal, which was input by conversion into a digital signal by the A / D converter 4 , with the video luminance signal of a frame, which occurred immediately before and was stored in the image memory 5 , and thereby recognizes the movement size and direction of movement of the image as a vector.

Der Zoom-Stellungssensor 7 detektiert die Zoomstellung und gibt diese aus, indem eine TELE-, MITTEL- und WEIT-Winkelauf­ teilung von der Linse 1 beim Photographieren mit dem Selbst­ auslöser vorgenommen wird.The zoom position sensor 7 detects the zoom position and outputs it by making a TELE, MEDIUM and WIDE angular division of the lens 1 when photographing with the self-timer.

Der Mikroprozessor 8 empfängt die Information hinsichtlich der Bewegungsgröße und der Bewegungsrichtung von dem Bewe­ gungsdetektor 6, beurteilt, ob die Bewegung des Bildes eine Bewegung der Kamera ist oder eine Bewegung des Objekts, gibt dann, wenn die Beurteilung eine Bewegung des Objekts ergibt, ein Richtungsänderungssignal der Kamera aus, und zwar in Ein­ klang mit der Bewegungsrichtung und der Bewegungsgröße des Objektes, empfängt zur gleichen Zeit eine Information hin­ sichtlich der Zoomstellung von dem Zoom-Stellungssensor 7, bestimmt eine Richtungsänderung bzw. Geschwindigkeit der Ka­ mera und gibt diese als Steuersignal aus. Dies bedeutet, daß ein Richtungsänderungssignal ausgegeben wird, um einen Motor anzutreiben, indem eine Information hinsichtlich der Bewe­ gungsgröße und der Bewegungsrichtung eines Objektes von dem Bewegungsdetektor 6 empfangen wird, so daß die Kamera ent­ sprechend dem Objekt bewegt wird.The microprocessor 8 receives the information regarding the amount of movement and the direction of movement from the movement detector 6 , judges whether the movement of the image is a movement of the camera or a movement of the object, and gives a direction change signal if the judgment results in movement of the object the camera from, in one sound with the direction of movement and the size of movement of the object, at the same time receives information regarding the zoom position from the zoom position sensor 7 , determines a change in direction or speed of the camera and outputs this as a control signal . This means that a direction change signal is output to drive a motor by receiving information regarding the amount of movement and the direction of movement of an object from the motion detector 6 , so that the camera is moved accordingly to the object.

Wenn in diesem Fall die Zoomstellung, die von dem Zoom-Stel­ lungssensor 7 festgestellt wird, die TELE-Stellung ist, so be­ deutet dies, daß das Objekt als nahe angeordnet gesehen wird, obwohl es tatsächlich entfernt gelegen ist, und selbst wenn die Bewegungsgröße, die von dem Bewegungsdetektor 6 detektiert wird, klein ist, wird tatsächlich das Objekt stark bewegt. Um die Kamera dem Objekt nachzuführen, muß die Schwenkgeschwin­ digkeit der Kamera höher sein. Der Mikroprozessor 8 gibt daher das Steuersignal aus, die Richtungsänderungsgeschwindigkeit zu erhöhen. Im Falle der MITTEL-Stellung gibt es das Steuersignal für eine mittlere Richtungsänderungsgeschwindigkeit aus. Im Falle der WEIT-Winkeleinstellung wird das Steuersignal für eine langsame Richtungsänderungsgeschwindigkeit der Kamera ausgegeben, da es dann im Gegensatz zur TELE-Einstellung mög­ lich ist, der Bewegung des Objektes zu folgen, wenn die Rich­ tungsänderungsgeschwindigkeit niedriger ist.In this case, if the zoom position detected by the zoom position sensor 7 is the TELE position, it means that the object is seen as being located close to it even though it is actually distant, and even if the amount of movement detected by the motion detector 6 is small, the object is actually moved a lot. In order to track the camera to the object, the pan speed of the camera must be higher. The microprocessor 8 therefore outputs the control signal to increase the speed of change of direction. In the case of the MIDDLE position, it outputs the control signal for an average direction change speed. In the case of the WIDE angle setting, the control signal for a slow direction change speed is output by the camera, since in contrast to the TELE setting it is possible to follow the movement of the object when the direction change speed is lower.

Das Richtungsänderungssignal und das Steuersignal zum Bestim­ men der Richtungsänderungsgeschwindigkeit der Kamera, welche von dem Mikroprozessor 8 ausgegeben werden, gelangen zur Mo­ torsteuereinheit 10.The direction change signal and the control signal for determining the direction change speed of the camera, which are output from the microprocessor 8 , arrive at the motor control unit 10 .

Die Motorsteuereinheit 10 empfängt das Richtungsänderungs­ signal und das Steuersignal zur Festlegung der Richtungsän­ derungsgeschwindigkeit der Kamera, die von dem Mikroprozessor 8 ausgegeben wurden, und gibt das Steuersignal in Abhängigkeit von der Bewegungsgröße und Bewegungsrichtung des Objektes aus und gibt ferner das Geschwindigkeitssteuersignal abhängig von der Zoomstellung aus, und zwar an den Motor, um die Ausrich­ tung der Kamera zu ändern.The motor control unit 10 receives the direction change signal and the control signal for setting the direction change speed of the camera, which have been output by the microprocessor 8 , and outputs the control signal depending on the movement size and direction of movement of the object and also outputs the speed control signal depending on the zoom position to the motor to change the orientation of the camera.

Der Motor 11 dreht die Kamera, die von einem Dreifuß 12 abge­ stützt ist, entsprechend dem Steuersignal, welches von dem Motorsteuerabschnitt 10 ausgegeben wird, so daß die Kamera dem Objekt nachgeführt wird. Hierbei wird die Photographieropera­ tion ausgeführt.The motor 11 rotates the camera, which is supported by a tripod 12 , in accordance with the control signal which is output from the motor control section 10 , so that the camera tracks the object. Here, the photographing operation is carried out.

Fig. 2 zeigt ein Diagramm eines Beispiels von Prüfpunkten oder Stellen, anhand deren der Mikroprozessor 8 entscheidet, ob die Bewegung des Bildes eine Bewegung der Kamera selbst ist oder eine Bewegung des Objektes, wobei dann eine Vielzahl von Prüf­ punkten 20A bis 20I auf dem Bild bezeichnet werden und dann, wenn der jeweilige Bewegungsvektor des Bildes in gleicher Wei­ se an sich gegenüberliegenden Prüfpunkten (20A und 20C) und/oder (20A und 20F) und/oder (20A und 20I) und/oder (20D und 20C) und/oder (20D und 20F) und/oder (20D und 20I) und/oder (20G und 20C) und/oder (20D und 20F) und/oder (20F und 20I) festgestellt wird, so wird daraus geschlossen, daß sich die Kamera selbst bewegt hat, und wenn der jeweilige Be­ wegungsvektor des Bildes nicht in gleicher Weise an den gegen­ überliegenden Prüfpunkten detektiert wird, wird daraus geschlossen, daß es sich um eine Bewegung des Objektes handelt. Fig. 2 shows a diagram of an example of test points or points, on the basis of which the microprocessor 8 decides whether the movement of the image is a movement of the camera itself or a movement of the object, with a plurality of test points 20 A to 20 I then the image and if the respective motion vector of the image in the same way at opposite test points ( 20 A and 20 C) and / or ( 20 A and 20 F) and / or ( 20 A and 20 I) and / or ( 20 D and 20 C) and / or ( 20 D and 20 F) and / or ( 20 D and 20 I) and / or ( 20 G and 20 C) and / or ( 20 D and 20 F) and / or ( 20 F and 20 I) is determined, it is concluded that the camera has moved itself, and if the respective Be motion vector of the image is not detected in the same way at the opposite test points, it is concluded that it is a movement of the object.

Das bedeutet, daß die Bewegungsvektoren, die bei der Bewegung des Objektes auftreten, in einem bestimmten Abschnitt des Bil­ des unregelmäßig erscheinen, jedoch die Bewegungsvektoren bei einer Bewegung der Kamera gleichmäßig über das gesamte Bild erscheinen.That means the motion vectors that are in motion of the object occur in a certain section of the Bil of appear irregular, but the motion vectors at movement of the camera evenly across the entire image appear.

Wenn sich jedoch das Objekt und gleichzeitig die Kamera bewe­ gen erscheinen die Bewegungsvektoren in dem Abschnitt, der mit dem Objekt belegt ist, unregelmäßig.However, if the object and the camera move at the same time The motion vectors appear in the section with the object is occupied, irregularly.

Wenn daher die Bewegungsvektoren des Bildes in gleicher Form an sich gegenüberliegenden Prüfpunkten detektiert werden, kann geschlossen werden, daß es sich dabei um eine Bewegung der Ka­ mera selbst handelt.Therefore, if the motion vectors of the image are in the same form can be detected at opposite test points be concluded that this is a movement of the Ka  mera acts itself.

Die in Fig. 2 gezeigten Prüfstellen oder Prüfpunkte sind nur als Beispiel gewählt. Wenn die jeweiligen Prüfpunkte an beide oberseitigen Eckenabschnitte des Bildes gesetzt werden und dann aus den gleichen Bewegungsvektoren an jedem Prüfpunkt der beiden Eckabschnitte auf eine Bewegung der Kamera geschlossen wird, so gelangt man selbstverständlich in beiden Fällen zu dem gleichen Ergebnis.The test points or test points shown in FIG. 2 are selected only as an example. If the respective test points are placed on both top corner sections of the image and then the same motion vectors at each test point of the two corner sections are used to conclude that the camera is moving, the same result is of course achieved in both cases.

Die automatische Objekt-Nachführvorrichtung eines Camcorders ermöglicht somit eine Beurteilung, ob es sich bei einer Bewe­ gung um die Bewegung eines Objektes oder um eine Bewegung der Kamera handelt. Falls es sich um eine Bewegung des Objektes handelt, so erfolgt eine Nachführung hinsichtlich des Objektes nicht nur abhängig von der Bewegungsrichtung und dem Bewe­ gungsausmaß des Objektes, sondern wird auch die Nachführge­ schwindigkeit in Abhängigkeit von der Zoomstellung gesteuert, so daß die Kamera ein Objekt verfolgt bzw. diesem Objekt nach­ geführt wird, wenn sich das Objekt z. B. nach rechts oder links bewegt, und dabei nicht nur verhindert wird, daß das Objekt aus dem Bild wandert, sondern auch eine korrekte Fokussie­ rungssteuerung ermöglicht wird.The automatic object tracking device of a camcorder thus enables an assessment of whether a movement movement of an object or a movement of the Camera acts. If it is a movement of the object acts, the object is updated not only depending on the direction of movement and movement scope of the object, but also the tracking speed controlled depending on the zoom position, so that the camera tracks or follows an object is performed when the object z. B. to the right or left moved, and not only prevents the object wanders out of the picture, but also a correct focus control is enabled.

Claims (6)

1. Automatische Objekt-Nachführvorrichtung eines Camcorders, der ein Zoomobjektiv (1) und eine Videoverarbeitungsein­ richtung (3) zur Erzeugung von Video-Luminanzsignalen aufweist,
mit einer A/D-Wandlereinrichtung (4) zum Umwandeln des Video-Luminanzsignals der Videoverarbeitungseinrichtung (3) in ein digitales Video-Luminanzsignal;
mit einem Bewegungsdetektor (6), der ein momentan vorhan­ denes digitales Video-Luminanzsignal mit einem unmittelbar davor erzeugten digitalen Video-Luminanzsignal vergleicht, um das Ausmaß und die Richtung der Bewegung des Objektbil­ des als eines Bewegungsvektores zu detektieren und dadurch eine Bewegungsinformation zu erzeugen;
mit einem Mikroprozessor (8), der auf der Grundlage der von dem Bewegungsdetektor (6) erhaltenen Bewegungsinforma­ tionen beurteilt, ob eine Bewegung des Objekts vorliegt oder nicht, und die Geschwindigkeit einer eventuellen Bewegung des Objekts ermittelt, und
mit einer Motorsteuereinrichtung (10), die die Information über die Bewegung des Objektes von dem Mikroprozessor (8) erhält und den Motor (11) zum Verschwenken des Camcorders so steuert, daß der Camcorder dem Objekt nachgeführt wird,
dadurch gekennzeichnet,
daß eine Einrichtung (7) zum Detektieren der Zoomstellung der Linse (1) vorhanden ist; und
daß der Mikroprozessor (8) die detektierte Zoomstellung berücksichtigt bei der Beurteilung der Geschwindigkeit der Bewegung des Objekts.
1. Automatic object tracking device of a camcorder, which has a zoom lens ( 1 ) and a video processing device ( 3 ) for generating video luminance signals,
A / D converter means ( 4 ) for converting the video luminance signal of the video processing device ( 3 ) into a digital video luminance signal;
a motion detector ( 6 ) which compares a currently existing digital video luminance signal with a digital video luminance signal generated immediately before to detect the extent and direction of movement of the object image as a motion vector and thereby generate motion information;
with a microprocessor ( 8 ) which, based on the movement information obtained from the movement detector ( 6 ), judges whether or not there is movement of the object and determines the speed of any movement of the object, and
with a motor control device ( 10 ) which receives the information about the movement of the object from the microprocessor ( 8 ) and controls the motor ( 11 ) for pivoting the camcorder so that the camcorder tracks the object,
characterized,
that means ( 7 ) for detecting the zoom position of the lens ( 1 ) are provided; and
that the microprocessor ( 8 ) takes into account the detected zoom position when assessing the speed of the movement of the object.
2. Automatische Objekt-Nachführvorrichtung eines Camcorders nach Anspruch 1, dadurch ge­ kennzeichnet, daß der Mikroprozessor (8) auf der Grundlage der Bewegungsvektoren einer Mehrzahl von Prüfpunkten (20A bis 20I) beurteilt, ob eine Bewegung des Camcorders oder eine Bewegung des Objekts vorliegt.2. Automatic object tracking device of a camcorder according to claim 1, characterized in that the microprocessor ( 8 ) on the basis of the motion vectors of a plurality of test points ( 20 A to 20 I) judges whether a movement of the camcorder or a movement of the object is present. 3. Automatische Objekt-Nachführvorrichtung eines Camcorders nach Anspruch 1, dadurch gekennzeichnet, daß die Motor­ steuereinrichtung (10) Richtung und Ausmaß der Drehung und die Geschwindigkeit des Kameraschwenkmotors (11) steuert.3. Automatic object tracking device of a camcorder according to claim 1, characterized in that the motor control device ( 10 ) controls the direction and extent of the rotation and the speed of the camera swivel motor ( 11 ). 4. Automatische Objekt-Nachführvorrichtung eines Camcorders nach Anspruch 1 oder 2, dadurch gekennzeichnet, daß der Mikro­ prozessor (8) eine Eigenbewegung der Kamera dann fest­ stellt, wenn eine gleiche Bewegung des Bildes an gegen­ überliegenden Prüfpunkten (20A-20I) detektiert wird.4. Automatic object tracking device of a camcorder according to claim 1 or 2, characterized in that the micro processor ( 8 ) then determines an intrinsic movement of the camera when a same movement of the image at opposite test points ( 20 A- 20 I) is detected becomes. 5. Automatische Objekt -Nachführvorrichtung eines Camcorders nach Anspruch 1 oder 2, dadurch gekennzeichnet, daß der Mikro­ prozessor (8) die Bewegung eines Objektes feststellt, wenn eine unterschiedliche Bewegung des Bildes an gegenüber­ liegenden Prüfpunkten (20A-20I) auf dem Bildschirm detek­ tiert wird.5. Automatic object tracking device of a camcorder according to claim 1 or 2, characterized in that the micro processor ( 8 ) detects the movement of an object when a different movement of the image at opposite test points ( 20 A- 20 I) on the screen is detected. 6. Automatische Objekt-Nachführvorrichtung eines Camcorders nach Anspruch 3, dadurch gekennzeichnet, daß die Ge­ schwindigkeit des Motors (11), der durch die Motorsteuer­ einrichtung (10) gesteuert wird, schneller eingestellt wird im Falle einer TELE-Einstellung und langsamer ein­ gestellt wird im Falle einer WEIT-Winkeleinstellung.6. Automatic object tracking device of a camcorder according to claim 3, characterized in that the Ge speed of the motor ( 11 ), which is controlled by the motor control device ( 10 ), is set faster in the case of a TELE setting and slower is set in the case of a WIDE angle setting.
DE4222597A 1991-07-09 1992-07-09 Automatic object tracking device of a camcorder Expired - Lifetime DE4222597C2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1019910011623A KR940007163B1 (en) 1991-07-09 1991-07-09 Auto-searching device of camcordor subject

Publications (2)

Publication Number Publication Date
DE4222597A1 DE4222597A1 (en) 1993-01-14
DE4222597C2 true DE4222597C2 (en) 1997-10-23

Family

ID=19316983

Family Applications (1)

Application Number Title Priority Date Filing Date
DE4222597A Expired - Lifetime DE4222597C2 (en) 1991-07-09 1992-07-09 Automatic object tracking device of a camcorder

Country Status (5)

Country Link
US (1) US5467127A (en)
JP (1) JPH0654326A (en)
KR (1) KR940007163B1 (en)
DE (1) DE4222597C2 (en)
GB (1) GB2257544B (en)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5990942A (en) * 1991-05-01 1999-11-23 Canon Kabushiki Kaisha Photographing apparatus using image information for blurring correction
JPH0767015A (en) * 1993-08-24 1995-03-10 Canon Inc Image recorder
SE9501265D0 (en) * 1995-04-05 1995-04-05 Mats Andersson Procedure and apparatus for X-ray equipment
DE19529950C1 (en) * 1995-08-14 1996-11-14 Deutsche Forsch Luft Raumfahrt Guiding method for stereo laparoscope in minimal invasive surgery
KR970024925A (en) * 1995-10-26 1997-05-30 구자홍 Camcorder tracking system and method
DE19701186C2 (en) * 1996-01-12 2001-10-18 Fraunhofer Ges Forschung Interactive surveillance system
DE19639728C2 (en) * 1996-09-26 1998-12-24 Siemens Ag Video surveillance device
KR100220011B1 (en) * 1996-12-27 1999-09-01 구자홍 Camera capable of detecting focus evaluating value in accordance with output picture
DE19710727A1 (en) * 1997-03-14 1998-09-17 Sick Ag Monitoring device
US6545701B2 (en) * 1997-08-13 2003-04-08 Georgia Tech Research Corporation Panoramic digital camera system and method
CN1178467C (en) * 1998-04-16 2004-12-01 三星电子株式会社 Method and apparatus for automatically tracing moving object
DE19827835B4 (en) * 1998-06-23 2012-01-19 Robert Bosch Gmbh Image transmission method and apparatus
KR100336804B1 (en) * 1999-10-27 2002-05-13 김춘호 A telescope auto control system and the control method
US20040189804A1 (en) * 2000-02-16 2004-09-30 Borden George R. Method of selecting targets and generating feedback in object tracking systems
US6674474B2 (en) * 2000-10-23 2004-01-06 Hitachi Kokusai Electric Inc. Method of controlling transmission light amount and television camera apparatus using the method
KR20020095999A (en) * 2001-06-19 2002-12-28 엘지전자 주식회사 Method for following movement of digital camera
KR100426174B1 (en) * 2001-10-29 2004-04-06 삼성전자주식회사 Method for controlling a camera using video compression algorithm
AU2003245283A1 (en) * 2002-05-15 2003-12-02 The Board Of Governors For Higher Education, State Of Rhode Island And Providence Plantations An imaging system and method for tracking the motion of an object
US7231065B2 (en) * 2004-03-15 2007-06-12 Embarcadero Systems Corporation Method and apparatus for controlling cameras and performing optical character recognition of container code and chassis code
JP4241742B2 (en) * 2006-01-31 2009-03-18 パナソニック株式会社 Automatic tracking device and automatic tracking method
KR20090008047A (en) * 2007-07-16 2009-01-21 삼성전자주식회사 Audio input device and karaoke to detect motion and position, and method for accompaniment thereof
JP5409189B2 (en) 2008-08-29 2014-02-05 キヤノン株式会社 Imaging apparatus and control method thereof
EP2620050B1 (en) 2012-01-25 2016-07-27 Honda Research Institute Europe GmbH System, method and apparatus for unsupervised adaptation of the perception of an autonomous mower
JP6539091B2 (en) * 2015-04-09 2019-07-03 キヤノン株式会社 Image pickup apparatus and control method thereof
WO2020042159A1 (en) * 2018-08-31 2020-03-05 深圳市大疆创新科技有限公司 Rotation control method and apparatus for gimbal, control device, and mobile platform

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB1251004A (en) * 1970-05-04 1971-10-27
US5196688A (en) * 1975-02-04 1993-03-23 Telefunken Systemtechnik Gmbh Apparatus for recognizing and following a target
GB1580437A (en) * 1976-06-10 1980-12-03 Emi Ltd Arrangement for producing a stabilised picture
GB2004435B (en) * 1977-09-13 1982-06-30 Secr Defence Image discriminators
JPS5994045A (en) * 1982-11-22 1984-05-30 Toshiba Corp Image input apparatus
JPH0728406B2 (en) * 1985-03-04 1995-03-29 株式会社東芝 Motion vector detector
US4719485A (en) * 1985-06-06 1988-01-12 Canon Kabushiki Kaisha Automatic follow-up device for camera
US4805018A (en) * 1986-03-07 1989-02-14 Matsushita Electric Industrial Co., Ltd. Video signal processing apparatus for separating an image of a moving object from video signals
JPH01220983A (en) * 1988-02-29 1989-09-04 Toshiba Corp Picture input system
GB2220319B (en) * 1988-07-01 1992-11-04 Plessey Co Plc Improvements in or relating to image stabilisation
US4959714A (en) * 1988-08-08 1990-09-25 Hughes Aircraft Company Segmentation method for terminal aimpoint determination on moving objects and apparatus therefor
EP0358196B1 (en) * 1988-09-09 1997-07-30 Canon Kabushiki Kaisha Automatic image stabilization device
US4969739A (en) * 1989-01-09 1990-11-13 Nirsystems Incorporated Spectrometer with direct drive high speed oscillating grating
US5047850A (en) * 1989-03-03 1991-09-10 Matsushita Electric Industrial Co., Ltd. Detector for detecting vector indicating motion of image
JPH0771296B2 (en) * 1989-03-20 1995-07-31 松下電器産業株式会社 Motion vector detector
US4969036A (en) * 1989-03-31 1990-11-06 Bir Bhanu System for computing the self-motion of moving images devices
JP2920941B2 (en) * 1989-07-11 1999-07-19 松下電器産業株式会社 Motor control device
KR910004009A (en) * 1989-07-27 1991-02-28 강진구 Video camera automatic shooting device
GB2239575B (en) * 1989-10-17 1994-07-27 Mitsubishi Electric Corp Motion vector detecting apparatus and image blur correcting apparatus, and video camera including such apparatus
JP2988676B2 (en) * 1989-12-22 1999-12-13 コニカ株式会社 Imaging device

Also Published As

Publication number Publication date
DE4222597A1 (en) 1993-01-14
GB2257544A (en) 1993-01-13
KR940007163B1 (en) 1994-08-06
GB2257544B (en) 1994-12-14
GB9214613D0 (en) 1992-08-19
US5467127A (en) 1995-11-14
JPH0654326A (en) 1994-02-25
KR930003677A (en) 1993-02-24

Similar Documents

Publication Publication Date Title
DE4222597C2 (en) Automatic object tracking device of a camcorder
DE69123926T2 (en) System for correcting camera shake
DE68928217T2 (en) Automatic image stabilization device
DE69127850T2 (en) Motion detection device and focus detector using such a device
DE60003985T2 (en) Autofocus device
DE69219093T2 (en) Video camera with zoom function
DE112010005151B4 (en) PICTURE RECORDING DEVICE AND IMAGE INTERRUPTION CORRECTION
DE602005001189T2 (en) Image stabilizer with automatic deactivation for intended camera movements
DE68905051T2 (en) Device for detecting tremors in the picture.
DE69017509T2 (en) Camera capable of freely adjusting a lens area in a viewed scene.
DE69124777T2 (en) Device for the detection of the motion vector
DE602005000090T2 (en) Autofocus System
DE3700412C2 (en)
DE69827068T2 (en) Automatic focusing device with consideration of panoramic pans and / or camera shake
DE68929480T2 (en) camera system
DE10344058A1 (en) Device and method for reducing image blur in a digital camera
DE69534836T2 (en) Image shift recognition device, image capture and video recorder with panorama mode
DE3913803A1 (en) EXPOSURE CONTROL DEVICE
EP0537803A2 (en) Image vibration suppressing device
DE3829733C2 (en)
DE69031025T2 (en) Automatic focusing device for automatic focus adjustment depending on video signals
DE69634868T2 (en) Imaging device with function to prevent vibration
DE69030048T2 (en) Device for checking lenses
DE69120011T2 (en) Still video camera
DE4143061B4 (en) video camera

Legal Events

Date Code Title Description
8110 Request for examination paragraph 44
D2 Grant after examination
8364 No opposition during term of opposition
R071 Expiry of right
R071 Expiry of right