JP2013162154A - Photographing apparatus and photographing system - Google Patents
Photographing apparatus and photographing system Download PDFInfo
- Publication number
- JP2013162154A JP2013162154A JP2012019880A JP2012019880A JP2013162154A JP 2013162154 A JP2013162154 A JP 2013162154A JP 2012019880 A JP2012019880 A JP 2012019880A JP 2012019880 A JP2012019880 A JP 2012019880A JP 2013162154 A JP2013162154 A JP 2013162154A
- Authority
- JP
- Japan
- Prior art keywords
- area
- image
- video
- camera
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
Description
本発明は、撮影装置および撮影システムに関し、さらに詳細には、ズーム映像を撮影可能な撮影装置および撮影システムに関する。 The present invention relates to a photographing apparatus and a photographing system, and more particularly, to a photographing apparatus and a photographing system that can photograph a zoom image.
なお、本明細書において「映像」とは、動画像だけではなく静止画像を含むものとする。 In this specification, “video” includes not only moving images but also still images.
従来より、複数のカメラにより、画角の異なる映像を撮影し、撮影した映像を切り換えて編集する撮影装置や撮影システムが知られている。 2. Description of the Related Art Conventionally, there are known imaging apparatuses and imaging systems that capture images with different angles of view using a plurality of cameras and switch and edit the captured images.
具体的には、こうした撮影システムにおいては、第１のカメラにより被写体を含む所定の領域の映像を撮影し、第２のカメラにより被写体を含む任意の領域をズームイン（つまり、拡大）してズームイン映像（つまり、拡大映像）を撮影し、スイッチャーなどにより第１のカメラで撮影した映像と、第２のカメラで撮影した映像とを切り換えて出力するようにしている。 Specifically, in such a shooting system, a first camera captures an image of a predetermined area including a subject, and a second camera zooms in (that is, enlarges) an arbitrary area including the subject, thereby zooming in an image. (That is, an enlarged image) is photographed, and the image photographed by the first camera and the image photographed by the second camera are switched and output by a switcher or the like.
つまり、第１のカメラにより広角映像を撮影し、第２のカメラにより当該広角映像中の任意の領域を拡大した拡大映像を撮影し、スイッチャーにより広角映像と拡大映像とを切り換えて出力するようにしていた。 That is, a wide-angle video is captured by the first camera, an enlarged video obtained by enlarging an arbitrary area in the wide-angle video is captured by the second camera, and the wide-angle video and the enlarged video are switched and output by the switcher. It was.
なお、こうした撮影システムでは、第１のカメラおよび第２のカメラを１セットとして、複数セット設けられる場合もあるし、第１のカメラが１台設けられ、第２のカメラが複数台設けられる場合もある。 In such a photographing system, there may be a case where a plurality of sets are provided with the first camera and the second camera as one set, or a case where one first camera is provided and a plurality of second cameras are provided. There is also.
こうした技術としては、例えば、特許文献１に開示された技術が知られており、この特許文献１においては、複数のカメラで撮影した映像を切り換えて出力する映像切り換え装置であって、あるカメラが特定のポジションを撮影することができなくなった場合に、他のカメラによってそのポジションを撮影するようにした技術が開示されている。 As such a technique, for example, a technique disclosed in Patent Document 1 is known. In Patent Document 1, a video switching device that switches and outputs videos captured by a plurality of cameras, A technique is disclosed in which when a specific position cannot be photographed, the position is photographed by another camera.
そして、こうした撮影システムにおいては、第１のカメラにより撮影された映像（広角映像）から第２のカメラにより撮影された映像（ズームイン映像）への切り換えおよび第２のカメラにより撮影された映像（ズームイン映像）から第１のカメラにより撮影された映像（広角映像）への切り換えを行って、映像の表現力を高めることができるものである。 In such a photographing system, switching from an image photographed by the first camera (wide-angle image) to an image photographed by the second camera (zoomed-in image) and an image photographed by the second camera (zoomed-in). By switching from video (video) to video (wide-angle video) taken by the first camera, the expressive power of the video can be enhanced.
例えば、特許文献２に記載されているようにデジタルズームの動作特性を光学ズームの動作特性に合わせるような技術が知られている。 For example, as described in Patent Document 2, a technique is known in which the operation characteristics of digital zoom are matched to the operation characteristics of optical zoom.
しかしながら、この撮影システムでは、スイッチャーを操作して映像を切り換える作業者の指示により、被写体の変更や被写体のズームイン撮影を行うため、第１のカメラおよび第２のカメラにはそれぞれそのカメラを操作するカメラマンが必要となっていた。 However, in this photographing system, the subject is changed and the subject is zoomed in according to an instruction from the operator who operates the switcher to switch the image. Therefore, the first camera and the second camera are each operated by the camera. A photographer was needed.
即ち、スイッチャーを操作する作業者は、各カメラのカメラマンを介して映像を取得し、スイッチャーにより取得した映像を切り換えて出力することにより、表現力を高めた映像をモニターに表示するようにしていた。 In other words, the operator who operates the switcher acquires the video through the cameraman of each camera, switches the video acquired by the switcher and outputs it, and displays the video with enhanced expressiveness on the monitor. .
このため、被写体を変更した映像や被写体をズームインしたズームイン映像を広角映像から速やかに切り換えることができず、作業者にとって思い通りの表現ができないことが問題点として指摘されていた。 For this reason, it has been pointed out as a problem that an image in which the subject is changed or a zoomed-in image in which the subject is zoomed in cannot be quickly switched from the wide-angle image, and the desired expression cannot be expressed for the operator.
さらに、第１のカメラおよび第２のカメラそれぞれにカメラマンが必要であるため、この撮影システムによる撮影では人件費が高くなるとともに、第１のカメラおよび第２のカメラが複数台設けられているような場合には、さらに人件費が高くなり、コスト高を招来することが問題点として指摘されていた。 Furthermore, since a cameraman is required for each of the first camera and the second camera, personnel costs are increased in the photographing by this photographing system, and a plurality of first cameras and second cameras are provided. In such cases, it has been pointed out that the labor cost is further increased, leading to high costs.
ここで、上記したような従来の技術における撮影システムでは、種々の技術が用いられており、そうした技術としては、例えば、下記の特許文献３乃至８に示す技術があり、これらの技術を複合して用いる場合もある。 Here, in the conventional imaging system as described above, various technologies are used. For example, there are technologies shown in Patent Documents 3 to 8 below, and these technologies are combined. Sometimes used.
なお、特許文献３乃至６には、特定の被写体を自動追尾して撮影する撮影システムや特徴点比較の技術が記載されており、また、特許文献７には、被写体の運動状況に合わせてズーム制御を行うビデオカメラが記載されており、また、特許文献８には、タッチパネルディスプレイを用いたユーザーインターフェースが記載されている。 Patent Documents 3 to 6 describe an imaging system that automatically tracks and captures a specific subject and a feature point comparison technique, and Patent Document 7 zooms in accordance with the motion state of the subject. A video camera that performs control is described, and Patent Document 8 describes a user interface using a touch panel display.
本発明は、上記したような従来の技術の有する種々の問題点に鑑みてなされたものであり、その目的とするところは、コスト高を招来することなく、ズームイン映像を速やかに表示する即時性を備えた撮影装置および撮影システムを提供しようとするものである。 The present invention has been made in view of the various problems of the conventional techniques as described above, and an object of the present invention is to immediately display a zoomed-in video without incurring high costs. It is intended to provide a photographing apparatus and a photographing system provided with the above.
上記目的を達成するために、本発明による撮影装置は、被写体を含む第１領域を撮影した第１映像信号を入力する第１入力手段と、駆動部によって遠隔操作されて上記第１領域の任意の領域を光学ズーム撮影可能なカメラにより取得した光学ズーム映像を第２映像信号として入力する第２入力手段と、上記第１領域の一部であって、上記被写体を含む第２領域の設定情報を入力する領域情報入力手段と、上記第１映像信号の上記被写体の動きに応じて上記第２領域の略中央に上記被写体が位置するよう上記第２領域を更新する更新手段と、上記更新手段により更新した上記第２領域をデジタルズームイン処理して上記第２領域のデジタルズーム映像を取得する映像取得手段と、上記カメラにより上記更新手段によって更新した上記第２領域を光学ズーム撮影して、上記第２領域の光学ズーム映像を上記第２映像信号として出力するよう上記駆動部を制御する制御手段と、上記映像取得手段により取得した上記第２領域のデジタルズーム映像と、上記第２入力手段に入力した上記第２領域の光学ズーム映像とのいずれかを選択して出力する出力手段とを有するようにしたものである。 In order to achieve the above object, a photographing apparatus according to the present invention includes a first input unit that inputs a first video signal obtained by photographing a first region including a subject, and an arbitrary one of the first regions that is remotely operated by a driving unit. Second input means for inputting, as a second video signal, an optical zoom image acquired by a camera capable of optical zoom photography of the area, and setting information of a second area that is a part of the first area and includes the subject Region information input means for input, updating means for updating the second area so that the subject is positioned substantially in the center of the second area in accordance with the movement of the subject in the first video signal, and the updating means The second area updated by the digital zoom-in process to obtain a digital zoom image of the second area, and the second area updated by the update means by the camera. A control means for controlling the driving unit to output an optical zoom image of the second area as the second video signal, and a digital zoom image of the second area acquired by the video acquisition means; Output means for selecting and outputting one of the optical zoom images in the second region input to the second input means.
また、本発明による撮影装置は、被写体を含む第１領域を撮影した第１映像信号を入力する第１入力手段と、駆動部によって遠隔操作されて上記第１領域の任意の領域を光学ズーム撮影可能なカメラにより取得した光学ズーム映像を第２映像信号として入力する第２入力手段と、上記第１領域の一部であって、上記被写体を含む第２領域の設定情報を入力する領域情報入力手段と、上記第２領域をデジタルズームイン処理して上記第２領域のデジタルズーム映像を取得する映像取得手段と、上記カメラにより上記第２領域を光学ズーム撮影して、上記第２領域の光学ズーム映像を上記第２映像信号として出力するよう上記駆動部を制御する制御手段と、上記映像取得手段により取得した上記第２領域のデジタルズーム映像と、上記第２入力手段に入力した上記第２領域の光学ズーム映像とのいずれかを選択して出力する出力手段とを有するようにしたものである。 The imaging apparatus according to the present invention also includes a first input unit that inputs a first video signal obtained by imaging a first area including a subject, and optical zoom imaging of an arbitrary area of the first area that is remotely operated by a drive unit. Second input means for inputting an optical zoom image acquired by a possible camera as a second image signal, and region information input for inputting setting information of a second region which is a part of the first region and includes the subject Means for obtaining a digital zoom image of the second area by performing a digital zoom-in process on the second area; and taking an optical zoom image of the second area by the camera to obtain an optical zoom image of the second area. Control means for controlling the drive unit to output the second image signal as the second video signal, the digital zoom video of the second area acquired by the video acquisition means, and the second input hand. It is obtained entered by selecting one of the optical zoom image of the second region so as to have an output means for outputting to.
また、本発明による撮影装置は、上記した撮影装置において、上記出力手段は、上記第２領域のデジタルズーム映像の特徴点と、上記第２領域の光学ズーム映像の特徴点とを抽出し、上記第２領域のデジタルズーム映像の特徴点と上記第２領域の光学ズーム映像の特徴点とが一致しない場合には、上記第２領域のデジタルズーム映像を出力し、上記第２領域のデジタルズーム映像の特徴点と上記第２領域の光学ズーム映像の特徴点とが一致した場合には、上記第２領域の光学ズーム映像を出力するようにしたものである。 In the photographing apparatus according to the present invention, in the photographing apparatus described above, the output unit extracts a feature point of the digital zoom image in the second region and a feature point of the optical zoom image in the second region, and If the feature point of the digital zoom image in the second region does not match the feature point of the optical zoom image in the second region, the digital zoom image in the second region is output, and the feature point of the digital zoom image in the second region When the feature point of the optical zoom image in the second area matches, the optical zoom image in the second area is output.
また、本発明による撮影装置は、上記した撮影装置において、上記出力手段は、領域情報入力手段により上記第２領域の設定情報が入力された直後には、上記第２領域のデジタルズーム映像を出力し、その後、上記第２領域のデジタルズーム映像の特徴点と、上記第２領域の光学ズーム映像の特徴点とを抽出して、上記第２領域のデジタルズーム映像の特徴点と上記第２領域の光学ズーム映像の特徴点とが一致しない場合には、上記第２領域のデジタルズーム映像を出力し続け、上記第２領域のデジタルズーム映像の特徴点と上記第２領域の光学ズーム映像の特徴点とが一致した場合には、上記第２領域のデジタルズーム映像に換えて上記第２領域の光学ズーム映像を出力するようにしたものである。 In the photographing apparatus according to the present invention, in the photographing apparatus described above, the output unit outputs the digital zoom image of the second region immediately after the setting information of the second region is input by the region information input unit. Then, the feature points of the digital zoom image in the second region and the feature points of the optical zoom image in the second region are extracted, and the feature points of the digital zoom image in the second region and the optical zoom of the second region are extracted. If the feature points of the video do not match, the digital zoom video of the second area continues to be output, and the feature points of the digital zoom video of the second area match the feature points of the optical zoom video of the second area In this case, the optical zoom image of the second area is output instead of the digital zoom image of the second area.
また、本発明による撮影装置は、上記した撮影装置において、上記領域情報入力手段はディスプレイを備えたタッチパネルを有し、上記ディスプレイに表示された上記第１映像信号に基づいて作業者が上記第２領域の設定情報を入力するようにしたものである。 In the photographing apparatus according to the present invention, in the photographing apparatus described above, the area information input unit includes a touch panel provided with a display, and an operator can perform the second operation based on the first video signal displayed on the display. Area setting information is input.
また、本発明による撮影装置は、上記した撮影装置において、上記領域情報入力手段は、ディスプレイを備えたタッチパネルを有し、上記ディスプレイに表示された上記第１映像信号に基づいて作業者が上記第２領域の設定情報を入力するようにしたものである。 In the photographing apparatus according to the present invention, in the photographing apparatus described above, the area information input unit includes a touch panel provided with a display, and an operator can perform the first operation based on the first video signal displayed on the display. The setting information of two areas is input.
また、本発明による撮影装置は、上記した撮影装置において、さらに、上記更新手段により更新した上記第２領域を上記第１映像信号に反映した第３映像信号を取得する取得手段と、上記取得手段により取得した上記第３映像信号を上記タッチパネルに出力する第３映像信号出力手段とを有し、上記ディスプレイには上記第３映像信号に基づく映像が表示されるようにしたものである。 The imaging apparatus according to the present invention may further include an acquisition unit that acquires a third video signal in which the second area updated by the update unit is reflected in the first video signal, and the acquisition unit. And a third video signal output means for outputting the third video signal acquired by the above-mentioned touch panel to the touch panel, and a video based on the third video signal is displayed on the display.
また、本発明による撮影システムは、被写体を含む第１領域を撮影する第１カメラと、駆動部によって遠隔操作されて上記第１領域の任意の領域を光学ズーム撮影可能な第２カメラと、上記第１カメラの映像を表示するディスプレイを備えるとともに、上記第１領域の一部であって、上記被写体を含む第２領域を設定するタッチパネルと、上記被写体の動きに応じて上記第２領域の略中央に上記被写体が位置するよう上記第２領域を更新する更新手段と、上記更新手段により更新した上記第２領域をデジタルズームイン処理することにより、上記第２領域のデジタルズーム映像を取得する映像取得手段と、上記第２カメラにより上記更新手段によって更新した上記第２領域を光学ズーム撮影して、上記第２領域の光学ズーム映像を取得して出力するよう上記駆動部を制御する制御手段と、上記映像取得手段により取得した上記第２領域のデジタルズーム映像と、上記第２領域の光学ズーム映像とのいずれかを選択して出力する出力手段とを有するようにしたものである。 In addition, an imaging system according to the present invention includes a first camera that captures a first area that includes a subject, a second camera that can be remotely operated by a drive unit to optically capture an arbitrary area of the first area, and A touch panel that includes a display for displaying the video of the first camera, is a part of the first area, and that sets a second area that includes the subject, and an abbreviation of the second area according to the movement of the subject. Update means for updating the second area so that the subject is located in the center, and video acquisition means for acquiring a digital zoom image of the second area by performing digital zoom-in processing on the second area updated by the update means. And taking an optical zoom image of the second area updated by the updating means with the second camera, and obtaining and outputting an optical zoom image of the second area. Control means for controlling the drive unit, and output means for selecting and outputting either the digital zoom image of the second area acquired by the image acquisition means or the optical zoom image of the second area. It is what you have.
また、本発明による撮影システムは、上記した撮影システムにおいて、上記駆動部は、上記制御手段による制御が正常終了したことを示す正常終了信号を出力する正常信号出力手段を備え、上記出力手段において上記正常終了信号を受信すると上記第２領域の光学ズーム映像を出力するようにしたものである。 In the photographing system according to the present invention, in the photographing system described above, the driving unit includes a normal signal output unit that outputs a normal end signal indicating that the control by the control unit is normally completed, and the output unit includes the normal signal output unit. When the normal end signal is received, the optical zoom image of the second area is output.
本発明は、以上説明したように構成されているので、コスト高を招来することなく、ズームイン映像を速やかに表示する即時性を備えるという優れた効果を奏する。 Since the present invention is configured as described above, the present invention has an excellent effect of providing immediacy to promptly display a zoomed-in video without incurring high costs.
以下、添付の図面を参照しながら、本発明による撮影システムおよび撮影方法の実施の形態の一例を詳細に説明するものとする。
Hereinafter, an example of an embodiment of a photographing system and a photographing method according to the present invention will be described in detail with reference to the accompanying drawings.
図５には、本発明による撮影装置のハードウェア構成を表すブロック構成図が示されている。 FIG. 5 is a block diagram showing the hardware configuration of the photographing apparatus according to the present invention.
この図５に示す撮影装置２０は、ＣＰＵ１０２を有しており、ＣＰＵ１０２はバス１０４を介してグラフィックアクセラレータ１０６に指示を与える。 The imaging apparatus 20 shown in FIG. 5 has a CPU 102, and the CPU 102 gives an instruction to the graphic accelerator 106 via the bus 104.
グラフィックアクセラレータ１０６は、接続されたカメラから入力されたアナログ映像信号をＡ／Ｄ変換器１０８によってデジタル変換したデジタル映像信号を入力し、ＣＰＵ１０２からの指示に従ってデジタル処理、例えば、デジタルズームイン処理などを行って、編集されたものをＤ／Ａ変換器１１０によってアナログ映像信号に変換してモニターなどに供給する。なお、カメラ自体がデジタル映像信号を出力する場合もあるし、モニターがデジタル映像信号を受けることもある。その場合、Ａ／Ｄ変換器１０８およびＤ／Ａ変換器１１０は不要となる。 The graphic accelerator 106 inputs a digital video signal obtained by digitally converting an analog video signal input from a connected camera by the A / D converter 108 and performs digital processing, for example, digital zoom-in processing according to an instruction from the CPU 102. Then, the edited one is converted into an analog video signal by the D / A converter 110 and supplied to a monitor or the like. Note that the camera itself may output a digital video signal, and the monitor may receive the digital video signal. In that case, the A / D converter 108 and the D / A converter 110 are unnecessary.
グラフィックアクセラレータ１０６がデジタル処理をする際や、ＣＰＵ１０２がグラフィックアクセラレータ１０６に指示を与える際に、ワークエリアとして、バス１０４に接続されている内部メモリ１１２が使用される。 When the graphic accelerator 106 performs digital processing or when the CPU 102 gives an instruction to the graphic accelerator 106, the internal memory 112 connected to the bus 104 is used as a work area.
ＣＰＵ１０２がグラフィックアクセラレータ１０６に指示を与えるためのデータは、ユーザーインターフェース１１４を介してユーザーが与える。なお、ユーザーインターフェース１１４には、後述する領域情報入力部３０が含まれる。
Data for the CPU 102 to give an instruction to the graphic accelerator 106 is provided by the user via the user interface 114. The user interface 114 includes an area information input unit 30 described later.
ここで、図１には、本発明による撮影装置および撮影システムの機能的構成を表すブロック構成図が示されている。即ち、図１は、撮影装置２０のＣＰＵ１１０およびグラフィックアクセラレータ１０６などが実行する機能をブロック構成で示したものである。
Here, FIG. 1 is a block diagram showing a functional configuration of the photographing apparatus and photographing system according to the present invention. That is, FIG. 1 shows the functions executed by the CPU 110 and the graphic accelerator 106 of the photographing apparatus 20 in a block configuration.
この図１に示す撮影システム１０は、被写体を含む所定の領域を撮影するデジタルカメラたるカメラ１２と、光学レンズを備え、当該光学レンズにより焦点位置を変更することにより被写体を光学ズームしてズームイン撮影することが可能なデジタルカメラたるカメラ１４と、カメラ１２の映像において所定の領域を指定するタッチパネル１６と駆動部１５を介してカメラ１４を制御するとともにカメラ１２およびカメラ１４により撮影された映像を映像表示モニター１８出力する制御部３６（後述する。）とを備えた撮影装置２０とを有して構成されている。 The imaging system 10 shown in FIG. 1 includes a camera 12 that is a digital camera that captures a predetermined area including a subject and an optical lens. The subject is optically zoomed in by zooming in on the subject by changing the focal position using the optical lens. The camera 14 is a digital camera that can be used, the touch panel 16 that designates a predetermined area in the video of the camera 12, and the drive unit 15 to control the camera 14, and the video taken by the camera 12 and the camera 14 is video. The photographing apparatus 20 includes a control unit 36 (described later) that outputs the display monitor 18.
より詳細には、カメラ１２は、被写体を含む所定の領域を撮影するとともに撮影した映像を撮影装置２０における制御部３６（後述する。）の広角映像入力部２２（後述する。）に入力する。 More specifically, the camera 12 captures a predetermined area including a subject and inputs the captured image to a wide-angle video input unit 22 (described later) of a control unit 36 (described later) in the imaging device 20.
また、カメラ１４は、カメラ１２により撮影される映像と同じ映像を取得可能な位置に配置されている。 Further, the camera 14 is arranged at a position where the same video as the video shot by the camera 12 can be acquired.
制御装置２０を構成するタッチパネル１６は、カメラ１２の映像をディスプレイ１６ａに表示するとともに、作業者が指や専用のペンなどによりディスプレイ１６ａに触れることにより、ディスプレイ１６ａに表示された映像中の任意の領域を設定することが可能である。 The touch panel 16 constituting the control device 20 displays the image of the camera 12 on the display 16a, and when an operator touches the display 16a with a finger or a dedicated pen, any arbitrary image in the image displayed on the display 16a is displayed. It is possible to set the area.
また、制御装置２０を構成する制御部３６は、タッチパネル１６で設定された領域中に存在する被写体を追尾しながらタッチパネル１６で設定された領域で光学ズームによりズームイン撮影するよう駆動部１５を介してカメラ１４を制御する。 In addition, the control unit 36 constituting the control device 20 is configured to perform zoom-in photographing with the optical zoom in the area set on the touch panel 16 while tracking the subject existing in the area set on the touch panel 16 via the driving unit 15. The camera 14 is controlled.
さらに、この制御部３６は、カメラ１４における光学ズームによるズームイン映像（つまり光学ズームにより撮影されたズームイン映像のことであり、以下、「光学ズームにより撮影されたズームイン映像」を「光学ズーム映像」と称することとする。）が取得されるまで、カメラ１２により撮影された映像中のタッチパネル１６で設定された領域を拡大処理するデジタルズームイン処理したズームイン映像（以下、「デジタルズームイン処理したズームイン映像」を「デジタルズーム映像」と称することとする。）を映像表示モニター１８に出力する。 Further, the control unit 36 is a zoomed-in video image obtained by optical zooming in the camera 14 (that is, a zoomed-in video imaged by optical zooming. Hereinafter, “zoomed-in video imaged by optical zooming” is referred to as “optical zoom video”. Digital zoom-in processed zoomed-in video (hereinafter referred to as “digital zoomed-in zoomed-in video”), which enlarges the area set on the touch panel 16 in the video captured by the camera 12 until the video is acquired. (Referred to as “digital zoom video”) is output to the video display monitor 18.
具体的には、制御部３６は、カメラ１２により撮影された映像（広角映像）を入力する広角映像入力部２２と、カメラ１４により撮影された映像（広角映像および光学ズーム映像）を入力する光学ズーム映像入力部２４と、広角映像入力部２２において入力した広角映像および後述する自動追尾・デジタルズーム部２８において作成したデジタルズーム映像をタッチパネル１６に出力するディスプレイ出力部２６と、広角映像入力部２２において入力した広角映像のうち、後述する領域情報入力部３０において入力された領域のデジタルズーム映像を取得するとともに、当該領域中の被写体を自動追尾して当該領域の移動情報を後述する駆動制御部３２に出力する自動追尾・デジタルズーム部２８と、タッチパネル１６において設定された領域を入力する領域入力部３０と、カメラ１４の動きを制御する駆動部１５の制御を行う駆動制御部３２と、自動追尾・デジタルズーム部２８からの映像と光学ズーム映像入力部２４からの映像とを切り換えて映像モニター１８に出力する切換部３４とを有して構成されている。 Specifically, the control unit 36 inputs the video (wide-angle video) captured by the camera 12 and the optical input the video (wide-angle video and optical zoom video) captured by the camera 14. A zoom video input unit 24, a display output unit 26 that outputs a wide-angle video input in the wide-angle video input unit 22 and a digital zoom video created in an automatic tracking / digital zoom unit 28 described later to the touch panel 16, and an input in the wide-angle video input unit 22 Among the wide-angle images, a digital zoom image of an area input by an area information input unit 30 (to be described later) is acquired, and a subject in the area is automatically tracked and movement information of the area is output to a drive control unit 32 (to be described later). Automatic tracking / digital zoom unit 28 and the area set on the touch panel 16 The area input unit 30 for inputting the image, the drive control unit 32 for controlling the drive unit 15 for controlling the movement of the camera 14, the image from the automatic tracking / digital zoom unit 28, and the image from the optical zoom image input unit 24. And a switching unit 34 for switching and outputting to the video monitor 18.
広角映像入力部２２は、カメラ１２により撮影した映像を入力するとともに、入力した映像をディスプレイ出力部２６を介してタッチパネル１６に出力する。 The wide-angle video input unit 22 inputs video shot by the camera 12 and outputs the input video to the touch panel 16 via the display output unit 26.
そして、タッチパネル１６に出力された映像はディスプレイ１６ａに表示され、作業者は、ディスプレイ１６ａに表示された映像を参照しながら、当該映像中でズームイン撮影したい領域（この領域には被写体が含まれている。）を指や専用のペンなどにより指定することによりズームイン領域を設定し、設定したズームイン領域をタッチパネル１６から領域情報入力部３０に出力する。 Then, the video output to the touch panel 16 is displayed on the display 16a, and the operator refers to the video displayed on the display 16a, and an area in which the user wants to zoom in (this area includes the subject). The zoom-in area is set by designating with a finger or a dedicated pen, and the set zoom-in area is output from the touch panel 16 to the area information input unit 30.
なお、このタッチパネル１６のディスプレイ１６ａにおいては、作業者がズームイン領域を設定するとカメラ１２による映像とともに作業者が設定したズームイン領域を解除するための領域解除ボタンが表示され、ディスプレイ１６ａ上に表示された当該領域解除ボタンを作業者が指あるいは専用のペンにより触れることにより領域解除ボタンが選択されて、作業者により設定されたズームイン領域が解除されることとなる。 On the display 16a of the touch panel 16, when the operator sets the zoom-in area, an area cancel button for canceling the zoom-in area set by the worker is displayed together with the video by the camera 12, and is displayed on the display 16a. When the operator touches the area release button with a finger or a dedicated pen, the area release button is selected, and the zoom-in area set by the operator is released.
こうした領域解除ボタンは、自動追尾・デジタルズーム部２８によりディスプレイ出力部２６を介してタッチパネル１６に出力されてディスプレイ１６ａに表示される。 Such an area release button is output to the touch panel 16 via the display output unit 26 by the automatic tracking / digital zoom unit 28 and displayed on the display 16a.
また、光学ズーム映像入力部２４は、カメラ１４により撮影された光学ズーム映像およびカメラ１２による広角映像と同一の広角映像を入力し、こうした映像を切換部３４に出力する。 The optical zoom video input unit 24 inputs the optical zoom video captured by the camera 14 and the wide-angle video identical to the wide-angle video captured by the camera 12, and outputs such video to the switching unit 34.
自動追尾・デジタルズーム部２８は、カメラ１４により撮影された映像がカメラ１２により撮影された映像と同じ映像となった状態から、タッチパネル１６において設定された領域中の被写体を自動追尾するようにして、光学ズームによりズームイン撮影するように駆動制御部３２により駆動部１５を制御して、カメラ１４の動作を制御する。 The automatic tracking / digital zoom unit 28 automatically tracks the subject in the area set on the touch panel 16 from the state in which the image captured by the camera 14 is the same as the image captured by the camera 12. The drive control unit 32 controls the drive unit 15 so as to perform zoom-in photographing with the optical zoom, thereby controlling the operation of the camera 14.
なお、この駆動部１５によってカメラ１４の動作を制御して、被写体の自動追尾、タッチパネル１６において設定された領域の光学ズーム映像の取得、カメラ１２における広角映像と同じ広角映像の取得などが行われる。 The drive unit 15 controls the operation of the camera 14 to perform automatic tracking of a subject, acquisition of an optical zoom image of an area set on the touch panel 16, acquisition of a wide-angle image that is the same as the wide-angle image in the camera 12, and the like. .
また、自動追尾・デジタルズーム部２８は、タッチパネル１６から出力されたズームイン領域中の被写体を自動追尾する際、常に被写体を当該ズームイン領域の略中央に位置させるように当該ズームイン領域を移動させる。即ち、自動追尾・デジタルズーム部２８は、被写体の動きに応じて当該ズームイン領域を自動的に移動させる。 The automatic tracking / digital zoom unit 28 moves the zoom-in area so that the subject is always positioned substantially at the center of the zoom-in area when the subject in the zoom-in area output from the touch panel 16 is automatically tracked. That is, the automatic tracking / digital zoom unit 28 automatically moves the zoom-in area according to the movement of the subject.
そして、自動追尾・デジタルズーム部２８は、こうしたズームイン領域の移動情報をディスプレイ出力部２６に出力し、ディスプレイ出力部２６において、ディスプレイ１６ａに表示される映像（つまり、カメラ１２により撮影された映像であって、広角映像入力部２２からディスプレイ出力部２６に出力された映像である。）において当該被写体を自動追尾するよう当該ズームイン領域を移動させた映像を作成し、作成した映像をタッチパネル１６に出力するとともに、被写体の動きに応じて移動するズームイン領域に対して光学ズームによりズームイン撮影を行うように駆動制御部３２にもズームイン領域の移動情報を出力し、カメラ１４の撮影方向や光学ズームのズーム量などを制御する。 Then, the automatic tracking / digital zoom unit 28 outputs the movement information of the zoom-in area to the display output unit 26, and the display output unit 26 displays the video displayed on the display 16a (that is, the video shot by the camera 12). The video output from the wide-angle video input unit 22 to the display output unit 26) is generated to automatically track the subject, and the generated video is output to the touch panel 16. At the same time, movement information of the zoom-in area is also output to the drive control unit 32 so as to perform zoom-in photographing by optical zoom with respect to the zoom-in area that moves according to the movement of the subject, and the photographing direction of the camera 14 and the zoom amount of the optical zoom are also output. Control etc.
さらに、自動追尾・デジタルズーム部２８は、カメラ１２から入力された広角映像を用いて、被写体の動きの動きに応じて移動するズームイン領域をデジタルズームイン処理して、当該ズームイン領域のデジタルズーム映像を取得し、取得したデジタルズーム映像を切換部３４に出力する。 Further, the automatic tracking / digital zoom unit 28 uses the wide-angle video input from the camera 12 to perform digital zoom-in processing on the zoom-in area that moves according to the movement of the subject, and obtains a digital zoom video of the zoom-in area. The acquired digital zoom video is output to the switching unit 34.
切換部３４は、デジタルズーム映像を映像モニター１８に出力し、映像モニター１８にズームイン領域のデジタルズーム映像を表示する。 The switching unit 34 outputs the digital zoom video to the video monitor 18 and displays the digital zoom video in the zoom-in area on the video monitor 18.
また、切換部３４は、自動追尾・デジタルズーム部２８から入力されたデジタルズーム映像における特徴点を抽出するとともに、カメラ１２から入力された光学ズーム映像における特徴点を抽出し、抽出したデジタルズーム映像における特徴点と光学ズーム映像における特徴点とを比較し、それぞれの映像における特徴点が一致する場合にのみ、カメラ１４による光学ズーム映像を映像モニター１８に出力する。これにより、映像モニター１８においては、デジタルズーム映像から光学ズーム映像に表示映像が変更されることとなる。 Further, the switching unit 34 extracts feature points in the digital zoom image input from the automatic tracking / digital zoom unit 28, extracts feature points in the optical zoom image input from the camera 12, and extracts feature points in the extracted digital zoom image. Are compared with the feature points in the optical zoom image, and the optical zoom image by the camera 14 is output to the image monitor 18 only when the feature points in the respective images match. As a result, on the video monitor 18, the display video is changed from the digital zoom video to the optical zoom video.
なお、撮影装置２０においては、初期状態としてカメラ１２とカメラ１４との映像が一致した状態に設定されると、設定した時点からタイムカウントを開始する。
In the photographing apparatus 20, when the images of the camera 12 and the camera 14 are set as the initial state as the initial state, the time count is started from the set time point.
以上の構成において、本発明による撮影システム１０により撮影を行う場合について、図２を参照しながら説明することとする。 In the above configuration, a case where shooting is performed by the shooting system 10 according to the present invention will be described with reference to FIG.
図２には、本発明の撮影システムにおける撮影処理の処理手順の詳細な処理内容が示されたフローチャートが示されており、撮影システム１０を起動すると、まず、初期設定を行う（ステップＳ２０２）。 FIG. 2 is a flowchart showing the detailed processing contents of the processing procedure of the photographing process in the photographing system of the present invention. When the photographing system 10 is activated, first, initialization is performed (step S202).
即ち、このステップＳ２０２の処理においては、初期設定として、カメラ１４により撮影される映像をカメラ１２により撮影された映像と同じ映像とする。 That is, in the process of step S202, as an initial setting, the video shot by the camera 14 is set to the same video as the video shot by the camera 12.
具体的には、カメラ１４により撮影された映像をカメラ１２により撮影された映像と同じ映像とする際には、カメラ１２により撮影された撮影対象領域にマーカーを設置して位置決めし、作業者がそのマーカーを確認しながら目視によりカメラ１４の画角を設定する。 Specifically, when the video shot by the camera 14 is the same as the video shot by the camera 12, a marker is placed and positioned in the shooting target area shot by the camera 12, and the operator The angle of view of the camera 14 is set visually while checking the marker.
そして、カメラ１４により撮影された映像とカメラ１２により撮影された映像とが同じ映像となると、撮影装置２０において、各カメラによる映像が同じ映像になった時点からタイムカウントを開始する。 When the video shot by the camera 14 and the video shot by the camera 12 become the same video, the shooting device 20 starts time counting from the time when the video from each camera becomes the same video.
なお、こうしたカメラ１２、１４の映像を同じ映像とする際には、例えば、タッチパネル１６のディスプレイ１６ａにカメラ１２とカメラ１４との映像を同じ映像にする作業が完了したことを入力するボタンを表示させておく（図４（ａ）を参照する。）。そして、作業者による各カメラの映像を同じ映像とする作業が完了すると、作業者が当該ボタンを押すことにより、撮影装置２０において各カメラの映像を同じ映像にする作業が完了したことを認識し、撮影装置２０において当該作業が完了したことを認識した時点からタイムカウントを開始する。 When the images of the cameras 12 and 14 are the same image, for example, a button for inputting that the operation for converting the images of the camera 12 and the camera 14 to the same image is completed is displayed on the display 16a of the touch panel 16. (See FIG. 4A). Then, when the worker completes the operation of making the video of each camera the same video, the operator presses the button to recognize that the operation of making the video of each camera the same video is completed in the photographing apparatus 20. The time counting is started from the point in time when the photographing apparatus 20 recognizes that the work is completed.
また、本実施の形態においては、理解を容易にするために、カメラ１２の映像は、以降の処理では、初期設定において設定された画角で固定されているものとする。 In the present embodiment, in order to facilitate understanding, it is assumed that the video of the camera 12 is fixed at the angle of view set in the initial setting in the subsequent processing.
こうして初期設定が完了すると、カメラ１２により撮影された映像が広角映像入力部２２に入力され、ディスプレイ出力部２６を介してタッチパネル１６に出力される。さらに、広角映像入力部２２に入力された当該映像が自動追尾・デジタルズーム部２８に出力され、切換部３４を介して映像モニター１８に出力される。これにより、タッチパネル１６のディスプレイ１６ａおよび映像モニター１８において、カメラ１２により撮影された映像が表示されることとなる（図３（ａ）を参照する。）。 When the initial setting is completed in this way, an image captured by the camera 12 is input to the wide-angle image input unit 22 and output to the touch panel 16 via the display output unit 26. Further, the video input to the wide-angle video input unit 22 is output to the automatic tracking / digital zoom unit 28 and output to the video monitor 18 via the switching unit 34. As a result, the image captured by the camera 12 is displayed on the display 16a and the image monitor 18 of the touch panel 16 (see FIG. 3A).
その後、作業者は、タッチパネル１６において、ディスプレイ１６ａに表示されたカメラ１２による映像を参照しながら、ディスプレイ１６ａ上に指や専用のペンを用いてズームインの対象とする領域たるズームイン領域を設定する（ステップＳ２０４）。 Thereafter, the operator sets a zoom-in area as an area to be zoomed in on the touch panel 16 using a finger or a dedicated pen on the display 16a while referring to the video by the camera 12 displayed on the display 16a ( Step S204).
即ち、ステップＳ２０４の処理では、例えば、作業者が指や専用のペンにより、ディスプレイ１６ａ上の任意の２箇所に触れることにより、映像上に当該任意の２箇所に対応する２点が決定される。すると、映像上において、この２点を結ぶ線を対角線とする矩形形状が作成され、当該矩形形状により囲まれる領域がズームイン領域として設定される（図３（ｂ）を参照する。）。 That is, in the process of step S204, for example, when an operator touches any two places on the display 16a with a finger or a dedicated pen, two points corresponding to the two places on the video are determined. . Then, on the video, a rectangular shape having a line connecting these two points as a diagonal line is created, and an area surrounded by the rectangular shape is set as a zoom-in area (see FIG. 3B).
この際、作業者は、被写体がズームイン領域の略中央に位置するように、指や専用のペンにより映像上に２点を決定するようにする。 At this time, the operator determines two points on the image with a finger or a dedicated pen so that the subject is positioned at the approximate center of the zoom-in area.
こうして設定されたズームイン領域は、タッチパネル１６から領域情報入力部３０に出力され、領域情報入力部３０から自動追尾・デジタルズーム部２８に出力される。 The zoom-in area thus set is output from the touch panel 16 to the area information input unit 30 and is output from the area information input unit 30 to the automatic tracking / digital zoom unit 28.
次に、自動追尾・デジタルズーム部２８により、タッチパネル１６のディスプレイ１６ａの映像上で被写体の動きに応じてズームイン領域を変更するとともに（ステップＳ２０６）、ズームイン領域のデジタルズーム映像を取得する（ステップＳ２０８）。 Next, the automatic tracking / digital zoom unit 28 changes the zoom-in area in accordance with the movement of the subject on the video on the display 16a of the touch panel 16 (step S206), and acquires a digital zoom video in the zoom-in area (step S208).
即ち、ステップＳ２０６の処理においては、ステップＳ２０４の処理により設定したズームイン領域の略中央に位置する被写体の動きに応じて、当該ズームイン領域の略中央に当該被写体が位置するように当該ズームイン領域を移動させる。そして、こうしたズームイン領域の移動情報を自動追尾・デジタルズーム部２８からディスプレイ出力部２６に出力し、ディスプレイ出力部２６においてカメラ１２により撮影された映像と合成してタッチパネル１６に出力する。 That is, in the process of step S206, the zoom-in area is moved so that the subject is positioned approximately at the center of the zoom-in area in accordance with the movement of the subject positioned at the approximate center of the zoom-in area set by the process of step S204. Let Then, the movement information of the zoom-in area is output from the automatic tracking / digital zoom unit 28 to the display output unit 26, and is combined with the video captured by the camera 12 in the display output unit 26 and output to the touch panel 16.
これにより、タッチパネル１６においては、当該移動情報に基づいて、ディスプレイ１６ａに表示された映像上で被写体がズームイン領域内に位置するようにズームイン領域が移動することとなる。 As a result, on the touch panel 16, the zoom-in area moves so that the subject is positioned in the zoom-in area on the video displayed on the display 16a based on the movement information.
なお、このような、映像上の対象物の動きに応じて所定の領域を自動追尾する技術としては、公知の技術を用いることができ、例えば、上記した特許文献３乃至７に開示された技術を用いることができる。 As a technique for automatically tracking a predetermined area according to the movement of an object on a video, a known technique can be used. For example, the techniques disclosed in Patent Documents 3 to 7 described above. Can be used.
また、ステップＳ２０８の処理においては、カメラ１２で撮影された映像中のズームイン領域を自動追尾・デジタルズーム部２８においてデジタルズームイン処理してデジタルズーム映像を取得するとともに、取得したデジタルズーム映像を切換部３４を介して映像モニター１８に出力することで、映像モニター１８に取得したデジタルズーム映像が表示される。 In the process of step S208, the zoom-in area in the video photographed by the camera 12 is digitally zoomed-in by the automatic tracking / digital zoom unit 28 to acquire the digital zoom video, and the acquired digital zoom video is sent via the switching unit 34. By outputting to the video monitor 18, the acquired digital zoom video is displayed on the video monitor 18.
このようにして作業者がズームイン領域を設定すると、まず、作業者の設定したズームイン領域の映像として、比較的速やかに取得することのできるデジタルズーム映像を映像モニター１８に表示するものである。 When the operator sets the zoom-in area in this way, first, a digital zoom video that can be acquired relatively quickly is displayed on the video monitor 18 as an image of the zoom-in area set by the operator.
次に、切換部３４においてデジタルズーム映像を取得すると、当該デジタルズーム映像中の特徴点を抽出する（ステップＳ２１０）。 Next, when a digital zoom image is acquired by the switching unit 34, feature points in the digital zoom image are extracted (step S210).
さらに、このとき、自動追尾・デジタルズーム部２８からズームイン領域の移動情報を駆動制御部３２に出力する。そして、駆動制御部３２において、撮影対象領域（つまり、カメラ１２により撮影されている領域）におけるズームイン領域（つまり、デジタルズームイン処理された領域）の仮想座標を取得する（ステップＳ２１２）。 Further, at this time, the movement information of the zoom-in area is output from the automatic tracking / digital zoom unit 28 to the drive control unit 32. Then, the drive control unit 32 acquires virtual coordinates of a zoom-in area (that is, an area subjected to digital zoom-in processing) in an imaging target area (that is, an area captured by the camera 12) (step S212).
こうしたデジタルズーム映像中の特徴点を抽出する具体的な技術としては、被写体の顔を検出する技術、被写体の輪郭を検出する技術、被写体の位置情報（ビーコン、ＧＰＳ）を検出する技術、被写体に光学的マーカーを用いる技術などの従来より公知の技術を用いることができる。 Specific techniques for extracting feature points in such a digital zoom video include a technique for detecting the face of the subject, a technique for detecting the contour of the subject, a technique for detecting position information (beacon, GPS) of the subject, and optical for the subject. A conventionally known technique such as a technique using a visual marker can be used.
次に、ステップＳ２１２の処理で取得したズームイン領域の仮想座標により、駆動制御部３２においてはズーム撮影位置（つまり、カメラ１４における撮影方向やズーム量などである。）を決定する。その後、駆動制御装置３２により駆動部１５を制御して、カメラ１４によってズームイン領域内の被写体を光学ズームによりズームイン撮影し、ズームイン領域のみの光学ズーム映像を取得する（ステップＳ２１４）。 Next, based on the virtual coordinates of the zoom-in area acquired in the process of step S212, the drive control unit 32 determines the zoom shooting position (that is, the shooting direction and zoom amount of the camera 14, etc.). Thereafter, the drive controller 32 is controlled by the drive control device 32, and the subject in the zoom-in area is zoomed in by the optical zoom by the camera 14, and an optical zoom image of only the zoom-in area is acquired (step S214).
なお、カメラ１４においては、ズームイン領域の解除がなされるまで当該ズームイン領域を光学ズームによりズームイン撮影した状態となっている。 Note that the camera 14 is in a state in which the zoom-in area is zoomed in by optical zoom until the zoom-in area is canceled.
その後、取得された光学ズーム映像がカメラ１４から光学ズーム映像入力部２４に出力され、光学ズーム映像入力部２４から切換部３４に出力される。そして、切換部３４において当該光学ズーム映像中の特徴点を抽出する（ステップＳ２１６）。 Thereafter, the acquired optical zoom video is output from the camera 14 to the optical zoom video input unit 24, and is output from the optical zoom video input unit 24 to the switching unit 34. Then, the switching unit 34 extracts feature points in the optical zoom video (step S216).
なお、ステップＳ２１６の処理における光学ズーム映像中の特徴点を抽出する具体的な技術については、ステップＳ２１０の処理においてデジタルズーム映像中の特徴点を抽出した技術と同様の技術を用いることとする。 Note that as a specific technique for extracting the feature points in the optical zoom image in the process of step S216, the same technique as the technique for extracting the feature points in the digital zoom image in the process of step S210 is used.
こうして、切換部３４において光学ズーム映像中の特徴点を抽出すると、切換部３４において、同じタイムカウントにおけるデジタルズーム映像中の特徴点と光学ズーム映像中の特徴点とが一致しているか否かの判断を行う（ステップＳ２１８）。 Thus, when the switching unit 34 extracts the feature points in the optical zoom image, the switching unit 34 determines whether the feature points in the digital zoom image and the feature points in the optical zoom image at the same time count match. Is performed (step S218).
ステップＳ２１８の判断処理において、同じタイムカウントにおけるデジタルズーム映像中の特徴点と光学ズーム映像中の特徴点とが一致していないと判断されると、ステップＳ２１０の処理に戻り、デジタルズーム映像の特徴点を抽出して、ステップＳ２１２以降の処理を行う。 If it is determined in step S218 that the feature point in the digital zoom image does not match the feature point in the optical zoom image at the same time count, the process returns to step S210, and the feature point of the digital zoom image is determined. Extraction is performed, and the processing after step S212 is performed.
即ち、ステップＳ２１８の判断処理において同じタイムカウントにおけるデジタルズーム映像中の特徴点と光学ズーム映像中の特徴点とが一致していない場合には、映像モニター１８においては、デジタルズーム映像が表示されたままの状態となっている。 In other words, if the feature point in the digital zoom image and the feature point in the optical zoom image at the same time count do not match in the determination processing in step S218, the digital zoom image remains displayed on the image monitor 18. It is in a state.
従って、ズームイン領域について、カメラ１４により光学ズーム映像を取得できなかった場合や、カメラ１４により被写体を捉えられなかった場合などには、デジタルズーム映像が映像モニター１８に表示された状態となる。 Therefore, in the zoom-in area, when the optical zoom image cannot be acquired by the camera 14 or when the subject cannot be captured by the camera 14, the digital zoom image is displayed on the image monitor 18.
一方、ステップＳ２１８の処理において、同じタイムカウントにおけるデジタルズーム映像中の特徴点と光学ズーム映像中の特徴点とが一致したと判断されると、切換部３４から映像モニター１８にカメラ１４により撮影された光学ズーム映像が出力され、モニター１８において表示されていたデジタルズーム映像が光学ズーム映像に変更される（ステップＳ２２０）。 On the other hand, in the process of step S218, when it is determined that the feature point in the digital zoom image and the feature point in the optical zoom image at the same time count match, the image is taken by the camera 14 from the switching unit 34 on the image monitor 18. An optical zoom image is output, and the digital zoom image displayed on the monitor 18 is changed to an optical zoom image (step S220).
このようにして光学ズーム映像がデジタルズーム映像と同様の領域を撮影していることを確認した後に、作業者の設定したズームイン領域の映像として、デジタルズーム映像よりも取得する時間を必要とするが、高画質の光学ズーム映像を映像モニター１８に表示する（図４（ｂ）を参照する。）。 After confirming that the optical zoom image has captured the same area as the digital zoom image in this way, it takes more time to acquire the image of the zoom-in area set by the operator than the digital zoom image. The optical zoom image with the image quality is displayed on the image monitor 18 (see FIG. 4B).
なお、映像モニター１８に表示された映像が、デジタルズーム映像から光学ズーム映像に変更された後も、自動追尾・デジタルズーム部２８および切換部３４においては、カメラ１２により撮影された映像に基づいて、ズームイン領域をデジタルズームイン処理してデジタルズーム映像を取得した状態となる。 Even after the video displayed on the video monitor 18 is changed from the digital zoom video to the optical zoom video, the automatic tracking / digital zoom unit 28 and the switching unit 34 zoom in based on the video shot by the camera 12. The area is digitally zoomed in to obtain a digital zoom image.
その後、切換部３４において、所定のタイミングで（例えば、１秒毎）デジタルズーム映像の特徴点を抽出するとともに、カメラ１４により撮影されている光学ズーム映像の特徴点を抽出する（ステップＳ２２２）。 Thereafter, the switching unit 34 extracts feature points of the digital zoom image at a predetermined timing (for example, every second) and also extracts feature points of the optical zoom image captured by the camera 14 (step S222).
そして、抽出したデジタルズーム映像の特徴点と光学ズーム映像の特徴点とを比較し、デジタルズーム映像の特徴点と光学ズーム映像の特徴点とが一致しているか否の判断を行う（ステップＳ２２４）。 Then, the extracted feature point of the digital zoom image is compared with the feature point of the optical zoom image, and it is determined whether or not the feature point of the digital zoom image matches the feature point of the optical zoom image (step S224).
このステップＳ２２４の判断処理において、デジタルズーム映像の特徴点と光学ズーム映像の特徴点とが一致していないと判断されると、切換部３４から映像モニター１８にデジタルズーム映像を出力し、映像モニター１８に表示されている光学ズーム映像をデジタルズーム映像に変更し（ステップＳ２２６）、ステップＳ２１０の処理に戻り、ステップＳ２１０以降の処理を行う。 If it is determined in the determination process in step S224 that the feature point of the digital zoom image and the feature point of the optical zoom image do not match, the digital zoom image is output from the switching unit 34 to the image monitor 18 and is output to the image monitor 18. The displayed optical zoom image is changed to a digital zoom image (step S226), the process returns to step S210, and the processes after step S210 are performed.
一方、ステップＳ２２４の判断処理において、デジタルズーム映像の特徴点と光学ズーム映像の特徴点とが一致していると判断されると、ステップＳ２２２の処理に戻り、ステップＳ２２２以降の処理を行う。 On the other hand, if it is determined in step S224 that the feature point of the digital zoom image matches the feature point of the optical zoom image, the process returns to step S222, and the processing from step S222 is performed.
なお、ステップＳ２２０〜２２４の処理中に被写体が移動した場合には、自動追尾・デジタルズーム部２８がズームイン領域を移動させ、ズームイン領域のデジタルズーム映像を取得すると同時に、カメラ１４を制御して光学ズーム映像を取得し続ける。そして、ステップＳ２２４の判断処理においてデジタルズーム映像の特徴点と光学ズーム映像の特徴点とが一致していると判断されている間は、切換部３４からは光学ズーム映像が出力され続ける（図７（ａ）を参照する。）。
If the subject moves during the processes of steps S220 to S224, the automatic tracking / digital zoom unit 28 moves the zoom-in area to acquire a digital zoom image of the zoom-in area, and simultaneously controls the camera 14 to control the optical zoom image. Keep getting. Then, while it is determined in step S224 that the feature point of the digital zoom image matches the feature point of the optical zoom image, the switching unit 34 continues to output the optical zoom image (FIG. 7 ( See a)).
なお、この撮影システム１０においては、ズームイン領域を解除する場合には、例えば、タッチパネル１６のディスプレイ１６ａに表示された領域解除ボタン（図４（ｃ）を参照する。）を選択することにより、ズームイン領域の解除を行うことができるものである。 In the photographing system 10, when canceling the zoom-in region, for example, by selecting a region cancel button (see FIG. 4C) displayed on the display 16 a of the touch panel 16, the zoom-in region is selected. The area can be released.
即ち、上記した撮影処理中は、タッチパネル１６のディスプレイ１６ａ上に、ステップＳ２０４において設定したズームイン領域を解除する領域解除ボタンが常に表示されており、ズームイン領域を解除する際には、この領域解除ボタンを作業者が選択することでズームイン領域の解除が行われる。 That is, during the shooting process described above, the area cancel button for canceling the zoom-in area set in step S204 is always displayed on the display 16a of the touch panel 16, and when canceling the zoom-in area, this area cancel button is displayed. The zoom-in area is canceled when the operator selects.
こうしてズームイン領域が解除されると、タッチパネル１６のディスプレイ１６ａに表示された映像上の矩形形状の枠が削除され、駆動制御部３２においてカメラ１２による映像と同一の映像を撮影するよう駆動部１５を介してカメラ１４を制御するとともに、切換部３４においてカメラ１２により撮影された映像を映像モニター１８に出力し、映像モニター１８の表示をカメラ１２により撮影された映像に変更する。 When the zoom-in area is released in this manner, the rectangular frame on the video displayed on the display 16a of the touch panel 16 is deleted, and the drive unit 15 is caused to capture the same video as the video by the camera 12 in the drive control unit 32. In addition, the camera 14 is controlled, and the switching unit 34 outputs the video captured by the camera 12 to the video monitor 18, and changes the display on the video monitor 18 to the video captured by the camera 12.
そして、作業者が、カメラ１２により撮影された映像のうち、再度前回と同じ被写体を含むズーム領域を設定したり、前回とは異なる被写体を含むズーム領域を設定することができるようになる（図７（ｂ）を参照する。）。 Then, the operator can again set a zoom area including the same subject as the previous one in the video photographed by the camera 12, or can set a zoom area including a different subject from the previous time (FIG. (See 7 (b)).
また、こうした撮影システム１０を終了する場合には、例えば、タッチパネル１６のディスプレイ１６ａに表示された終了ボタン（図４（ｄ）を参照する。）を選択することで撮影システム１０を終了することができる。
Moreover, when ending such an imaging system 10, for example, the imaging system 10 may be ended by selecting an end button (see FIG. 4D) displayed on the display 16a of the touch panel 16. it can.
以上において説明したように、本発明による撮影システム１０は、広角の映像を撮影するカメラ１２と、カメラ１２により撮影される領域内に位置する被写体を光学ズームによりズームイン撮影するカメラ１４とを備え、カメラ１２により撮影された映像が表示されるタッチパネル１６においてズームイン撮影を行うズームイン領域を設定するようにしたものである。 As described above, the imaging system 10 according to the present invention includes the camera 12 that captures a wide-angle image, and the camera 14 that zooms in on a subject located in an area captured by the camera 12 using an optical zoom. A zoom-in area for performing zoom-in photographing is set on the touch panel 16 on which an image photographed by the camera 12 is displayed.
さらに、本発明による撮影システム１０は、設定されたズームイン領域について、カメラ１４による光学ズーム映像を取得するまでは、カメラ１２による映像（広角映像）の当該ズームイン領域をデジタルズームイン処理したデジタルズーム映像を作成して映像モニター１８に出力し、カメラ１４による光学ズーム映像を取得した後に、映像モニター１８に出力する映像をデジタルズーム映像から光学ズーム映像に変更するようにしたものである。 Further, the imaging system 10 according to the present invention creates a digital zoom image obtained by digitally zooming in on the zoom-in area of the video (wide-angle video) by the camera 12 until the optical zoom video by the camera 14 is acquired for the set zoom-in area. Then, after outputting to the video monitor 18 and acquiring the optical zoom video by the camera 14, the video output to the video monitor 18 is changed from the digital zoom video to the optical zoom video.
これにより、本発明による撮影システム１０においては、作業者がタッチパネル１６を用いてズームイン領域を設定すると、高画質ではあるが取得に時間を必要とする光学ズーム映像を取得するまでは、低画質ではあるが取得に時間を必要としないデジタルズーム映像を取得して映像モニター１８に表示することとなる。 Thereby, in the photographing system 10 according to the present invention, when an operator sets a zoom-in area using the touch panel 16, until the optical zoom image that has high image quality but takes time to acquire is acquired, the image quality is low. A digital zoom image that does not require time for acquisition is acquired and displayed on the image monitor 18.
このため、本発明による撮影システム１０では、作業者が設定したズームイン領域の映像を映像モニター１８に速やかに表示することができるようになる。 For this reason, in the photographing system 10 according to the present invention, the image of the zoom-in area set by the operator can be quickly displayed on the video monitor 18.
即ち、本発明による撮影システム１０においては、決定的瞬間を逃さない即時性を備えているため、作業者の思い通りの表現を実現することができるようになる。 In other words, the imaging system 10 according to the present invention has immediacy so as not to miss a decisive moment, so that the expression desired by the operator can be realized.
また、本発明による撮影システム１０においては、従来の技術による撮影システムと比較して、カメラマンの人数を減らすことが可能となり、人件費を抑制することができ、コスト高を抑制することができる。
Further, in the photographing system 10 according to the present invention, it is possible to reduce the number of photographers as compared with the photographing system according to the conventional technique, and it is possible to reduce the labor cost and the cost.
なお、上記した実施の形態は、以下の（１）乃至（１５）に示すように変形するようにしてもよい。 The embodiment described above may be modified as shown in the following (1) to (15).
（１）上記した実施の形態においては、カメラ１２の映像は、初期設定において設定された画角で固定されるものとしたが、これに限られるものではないことは勿論であり、カメラマンがカメラ１２を操作して、初期設定において設定された画角を変更するようにしてもよい。 (1) In the above-described embodiment, the video of the camera 12 is fixed at the angle of view set in the initial setting. However, the present invention is not limited to this. 12 may be operated to change the angle of view set in the initial setting.
（２）上記した実施の形態においては、光学ズーム映像を取得するカメラとしてカメラ１４のみを設けるようにしたが、これに限られるものではないことは勿論であり、光学ズーム映像を取得するカメラを複数台設けるようにしてもよい。 (2) In the above embodiment, only the camera 14 is provided as a camera for acquiring an optical zoom image. However, the present invention is not limited to this, and a camera for acquiring an optical zoom image is used. A plurality of units may be provided.
この場合、タッチパネル１６のディスプレイ１６ａでは、例えば、対応するカメラ（ズームイン領域をズームイン撮影するカメラである。）に応じてズームイン領域を示す矩形形状の色彩を変更して表示するようにしてもよい。 In this case, on the display 16a of the touch panel 16, for example, a rectangular color indicating the zoom-in area may be changed and displayed according to a corresponding camera (a camera that zooms in on the zoom-in area).
また、このとき、複数のカメラ１４については、タッチパネル１６で設定された複数の領域をそれぞれズームイン撮影するようにしてもよい。 At this time, as for the plurality of cameras 14, a plurality of regions set on the touch panel 16 may be zoomed in.
あるいは、タッチパネル１６においてカメラ１４で撮影された光学ズーム映像を表示可能な構成とし、例えば、複数のカメラ１４のうちのカメラＮｏ．１による光学ズーム映像をディスプレイ１６ａに表示し、タッチパネル１６において表示した光学ズーム映像中（つまり、カメラＮｏ．１によりズームイン撮影された映像である。）の所定の領域を設定することにより、設定された所定の領域に対してカメラＮｏ．２（つまり、複数のカメラ１４のうち、カメラＮｏ．１とは別のカメラである。）を制御して当該所定の領域の光学ズーム映像を取得するようにしてもよい。 Alternatively, an optical zoom image captured by the camera 14 on the touch panel 16 can be displayed. 1 is displayed on the display 16a and is set by setting a predetermined area in the optical zoom image displayed on the touch panel 16 (that is, an image zoomed in by camera No. 1). Camera No. for a predetermined area. 2 (that is, a camera different from camera No. 1 among the plurality of cameras 14) may be controlled to acquire an optical zoom image of the predetermined area.
（３）上記した実施の形態においては、広角の映像を撮影するカメラ１２および光学ズーム映像を撮影するカメラ１４をそれぞれ１台ずつ設けるようにしたが、これに限られるものではないことは勿論であり、カメラ１２とカメラ１４とを１つのセットとして、こうしたセットを複数セット設けるようにして、作業者によりどのセットにおけるカメラ１２の映像をディスプレイ１６ａに表示するかを選択するようにしてもよい。 (3) In the above-described embodiment, one camera 12 for capturing a wide-angle image and one camera 14 for capturing an optical zoom image are provided. However, the present invention is not limited to this. Yes, the camera 12 and the camera 14 may be set as one set, and a plurality of such sets may be provided, and the operator may select which set the video of the camera 12 is displayed on the display 16a.
（４）上記した実施の形態においては、タッチパネル１６を用いるようにしたが、これに限られるものではないことは勿論であり、各種のユーザーインターフェースを用いるようにしてもよい。 (4) In the above-described embodiment, the touch panel 16 is used. However, the present invention is not limited to this, and various user interfaces may be used.
（５）上記した実施の形態においては、撮影システム１０において、カメラ１２とカメラ１４とを設けるようにしたが、これに限られるものではないことは勿論であり、撮影システム１０においてカメラ１２のみを設けるようにしてもよい。 (5) In the above-described embodiment, the camera 12 and the camera 14 are provided in the photographing system 10. However, the present invention is not limited to this, and only the camera 12 is included in the photographing system 10. You may make it provide.
この場合には、映像モニター１８に表示される映像はデジタルズーム映像のみとなる。具体的には、タッチパネル１６においてズームイン領域が設定されると、自動追尾・デジタルズーム部２８においてカメラ１２により撮影された映像の当該ズームイン領域をデジタルズームイン処理してデジタルズーム映像を取得し、取得したデジタルズーム映像を映像モニター１８に表示するようになる。 In this case, the video displayed on the video monitor 18 is only a digital zoom video. Specifically, when a zoom-in area is set on the touch panel 16, the auto-tracking / digital zoom unit 28 performs digital zoom-in processing on the zoom-in area of the video captured by the camera 12 to obtain a digital zoom video, and the acquired digital zoom video Is displayed on the video monitor 18.
（６）上記した実施の形態においては、ズームイン領域の仮想座標に基づいて、駆動制御部３２により駆動部１５を制御するようにしたが、これに限られるものではないことは勿論であり、ズームイン領域の仮想座標を取得するとともに、切換部３４においてズーム領域の変更前後のデジタルズーム映像の特徴点を比較するようにし、比較した比較結果（差分）を駆動制御部３２に出力して、駆動部１５を介してカメラ１４を制御するようにしてもよい。 (6) In the embodiment described above, the drive unit 15 is controlled by the drive control unit 32 based on the virtual coordinates of the zoom-in area. However, the present invention is not limited to this. The virtual coordinates of the area are acquired, the feature points of the digital zoom image before and after the change of the zoom area are compared in the switching unit 34, the comparison result (difference) compared is output to the drive control unit 32, and the drive unit 15 You may make it control the camera 14 via this.
この場合、ズームイン領域の仮想座標により大まかなズーム撮影位置を決定し、このときの特徴点の当該仮想座標上の差分を算出してズーム撮影位置の微調整を行うようにして駆動部１５を介してカメラ１４を制御することとなる。 In this case, a rough zoom shooting position is determined based on the virtual coordinates of the zoom-in area, and the difference between the feature points on the virtual coordinates is calculated and fine adjustment of the zoom shooting position is performed via the drive unit 15. Thus, the camera 14 is controlled.
光学ズーム映像を取得するカメラ１４の制御において、従来の技術では、カメラ１４の向き角度を指定して動作完了を待つのに対し、上記した構成によれば、デジタルズーム映像により被写体を自動追尾する構成であるため、被写体の動きのベクトルが取得されており、時間のかかる光学ズーム撮影する位置を先回りして指定することができるようになる。 In the control of the camera 14 that acquires the optical zoom image, the conventional technique designates the orientation angle of the camera 14 and waits for the operation to be completed. According to the above configuration, the subject is automatically tracked by the digital zoom image. Therefore, the motion vector of the subject has been acquired, and it becomes possible to specify the position of the time-consuming optical zoom shooting in advance.
（７）上記した実施の形態においは、初期設定後にズームイン領域が設定された直後はデジタルズーム映像を出力するようにしたが、これに限られるものではないことは勿論であり、ズームイン領域を設定されると光学ズーム映像を映像モニター１８に出力し、光学ズーム映像が光学ズーム映像入力部２４に入力されなくなったときには、切換部３４において自動追尾・デジタルズーム部２８において取得したデジタルズーム映像を映像モニター１８に出力するようにしてもよい。 (7) In the above embodiment, the digital zoom image is output immediately after the zoom-in area is set after the initial setting. However, the present invention is not limited to this, and the zoom-in area is set. Then, the optical zoom video is output to the video monitor 18, and when the optical zoom video is no longer input to the optical zoom video input unit 24, the digital zoom video acquired by the automatic tracking / digital zoom unit 28 in the switching unit 34 is output to the video monitor 18. You may make it output.
こうした構成によれば、最初から高画質な光学ズーム映像が出力され、何らかのトラブルが発生して光学ズーム映像が取得できなかったのみ、素早くデジタルズーム映像でバックアップすることができるようになる。 According to such a configuration, a high-quality optical zoom image is output from the beginning, and only when the optical zoom image cannot be acquired due to some trouble, the digital zoom image can be quickly backed up.
（８）上記した実施の形態においては、切換部３４においてデジタルズーム映像の特徴点と光学ズーム映像の特徴点とを比較し、各特徴点が一致するときに映像モニター１８に出力する映像をデジタルズーム映像から光学ズーム映像に切り換えるようにしたが、これに限られるものではないことは勿論であり、切換部３４がカメラ１４の駆動部１５から駆動の正常終了信号を受け取ることにより、光学ズーム映像を出力するよう構成してもよい。 (8) In the embodiment described above, the switching unit 34 compares the feature points of the digital zoom image and the feature points of the optical zoom image, and outputs the image to be output to the image monitor 18 when the feature points coincide with each other. However, the present invention is not limited to this, and when the switching unit 34 receives a drive normal end signal from the drive unit 15 of the camera 14, the optical zoom image is output. You may comprise.
なお、「駆動の正常終了信号」とは、「駆動部１５が駆動制御部３２の指示に基づいて正常にカメラ１４を制御したことを示す信号」である。 The “normal drive end signal” is “a signal indicating that the drive unit 15 has normally controlled the camera 14 based on an instruction from the drive control unit 32”.
これにより、切換部３４において、デジタルズーム映像および光学ズーム映像における特徴点の抽出や当該特徴点の比較が不要になるため、切換部３４の構成がシンプルになる。 This eliminates the need for extracting feature points and comparing the feature points in the digital zoom image and the optical zoom image in the switching unit 34, thereby simplifying the configuration of the switching unit 34.
（９）上記した実施の形態においては、タッチパネル１６のディスプレイ１６ａにおいて矩形形状の対角線の端点２点を決定することによりズームイン領域を設定するようにしたが、これに限られるものではないことは勿論であり、予めズームイン領域となる矩形形状を決めておき、作業者は、ディスプレイ１６ａ上でズームイン領域の中心となる中心点のみを指定することによりズームイン領域を設定するようにしてもよい。 (9) In the above-described embodiment, the zoom-in area is set by determining two end points of the rectangular diagonal line on the display 16a of the touch panel 16. However, the present invention is not limited to this. In this case, a rectangular shape as a zoom-in area may be determined in advance, and the operator may set the zoom-in area by designating only the center point as the center of the zoom-in area on the display 16a.
こうした構成によれば、例えば、サッカーの試合などを撮影する場合には、カメラ１２によりサッカーグラウンド全体を撮影して広角映像を取得するとともに、作業者によりディスプレイ１６ａ上でズーム領域の中心点としてサッカーボールを指定することにより、サッカーボールを中心とした所定の領域がズームイン領域として設定することができ、容易にズームイン領域の設定を行うことができるようになる（図６（ａ）（ｂ）（ｃ）を参照する。）。 According to such a configuration, for example, when shooting a soccer game or the like, the camera 12 captures the entire soccer ground to acquire a wide-angle video, and the operator uses the soccer 16 as the center point of the zoom area on the display 16a. By designating the ball, a predetermined area centered on the soccer ball can be set as the zoom-in area, and the zoom-in area can be easily set (FIGS. 6A and 6B). c)).
即ち、ズームイン領域となる矩形形状の大きさを予め適当なユーザーインターフェースにより設定しておき（図６（ａ）を参照する。）、カメラ１２によりサッカーグラウンド全体を撮影してディスプレイ１６ａにサッカーグラウンド全体の映像を表示する。そして、作業者がディスプレイ１６ａに表示されたサッカーグラウンド全体の映像の中からサッカーボールを指定すると、指定したサッカーボールを中心として設定した大きさの矩形形状がディスプレイ１６ａの映像中に表示される。こうしてサッカーボールを中心として周囲のプレイヤーも含めた領域をズーム領域として設定することができる（図６（ｂ）を参照する。）。 That is, the size of the rectangular shape that becomes the zoom-in area is set in advance by an appropriate user interface (see FIG. 6A), the entire soccer ground is photographed by the camera 12, and the entire soccer ground is displayed on the display 16a. Display the video. When the worker designates a soccer ball from the entire image of the soccer ground displayed on the display 16a, a rectangular shape having a size set around the designated soccer ball is displayed in the image of the display 16a. In this way, an area including the surrounding players around the soccer ball can be set as a zoom area (see FIG. 6B).
（１０）上記した実施の形態においては、広角映像入力部２２には、カメラ１２で撮影中の映像を入力するようにしたが、これに限られるものではないことは勿論であり、録画映像を再生して入力するようにしてもよい。 (10) In the above-described embodiment, the video being captured by the camera 12 is input to the wide-angle video input unit 22, but the present invention is not limited to this. You may make it input by reproducing | regenerating.
こうした構成により、例えば、ライブパフォーマンスのリハーサルの録画映像を広角映像入力部２２に入力するようにし、本番中にライブパフォーマンスがリハーサル通り行われた場合には、切換部３４においてカメラ１４により撮影された光学ズーム映像を映像モニター１８に出力し、本番中にライブパフォーマンスがリハーサル通りに行われなかった場合には、自動追尾・デジタルズーム部２８において録画映像から取得したデジタルズーム映像を切換部３４から出力することができる。 With such a configuration, for example, when a live performance rehearsal recording video is input to the wide-angle video input unit 22 and the live performance is performed in accordance with the rehearsal during the actual performance, the video is captured by the camera 14 in the switching unit 34. The optical zoom video is output to the video monitor 18, and if the live performance is not performed as rehearsal during the actual performance, the digital tracking video acquired from the recorded video in the automatic tracking / digital zoom unit 28 is output from the switching unit 34. Can do.
（１１）上記した実施の形態においては、自動追尾により、被写体の動きに合わせて常にズームイン領域を更新し、更新されたズームイン領域に基づいてデジタルズーム映像や光学ズーム映像を取得するようにしたが、これに限られるものではないことは勿論であり、自動追尾する構成を設けずに、設定されたズームイン領域を固定的に撮影するようカメラ１４を駆動部１５により制御する構成としてもよい。 (11) In the above-described embodiment, the automatic zooming always updates the zoom-in area in accordance with the movement of the subject, and acquires the digital zoom image and the optical zoom video based on the updated zoom-in area. Of course, the present invention is not limited to this, and a configuration may be adopted in which the camera 14 is controlled by the drive unit 15 so that the set zoom-in area is fixedly captured without providing a configuration for automatic tracking.
こうした構成は、例えば、オーケストラの演奏風景を撮影するときのように位置が変わらない複数の被写体を頻繁に変更しながら順次ズームイン撮影した場合に適しており、構成がシンプルになるという利点がある。 Such a configuration is suitable when, for example, a plurality of subjects whose positions do not change are photographed in order while zooming in sequentially while photographing a performance scene of an orchestra, and has an advantage that the configuration becomes simple.
（１２）上記した実施の形態においては、カメラ１４がズームインした被写体を追尾できるように制御装置２０の駆動制御部３２により常にカメラ１４の駆動部１５を制御するようにしたが、これに限られるものではないことは勿論であり、自動追尾機能を備えたカメラ１４を用いる構成としてもよい。 (12) In the embodiment described above, the drive control unit 32 of the control device 20 always controls the drive unit 15 of the camera 14 so that the camera 14 can track the zoomed-in subject. However, the present invention is not limited to this. Needless to say, the camera 14 having an automatic tracking function may be used.
こうした構成によれば、撮影装置２０は、最初にカメラ１４を制御するだけでよいという利点があり、さらに、被写体を変更するために制御したり、デジタルズーム映像との特徴点の比較を定期的に行い必要に応じて修正したりできるという利点がある。 According to such a configuration, the photographing apparatus 20 has an advantage that it is only necessary to control the camera 14 at the beginning. Further, the photographing apparatus 20 can be controlled to change the subject, and the comparison of the feature points with the digital zoom image is periodically performed. It has the advantage that it can be done and modified as needed.
（１３）上記した実施の形態においては、ズームイン領域を設定している場合には、切換部３４はデジタルズーム映像あるいは光学ズーム映像のいずれかを出力するようにしたが、これに限られるものではないことは勿論であり、ズームイン領域を設定しているときに、広角映像入力部２２から自動追尾・デジタルズーム部２８を介して切換部３４に広角映像を出力し、適当なユーザーインターフェース、例えば、タッチパネル１６などを用いて指示を与えることにより、デジタルズームイン処理や自動追尾は解除しないまま、任意のタイミングで広角映像をそのまま変更部３４から出力するようにしてもよい。 (13) In the above-described embodiment, when the zoom-in area is set, the switching unit 34 outputs either a digital zoom image or an optical zoom image. However, the present invention is not limited to this. Of course, when the zoom-in area is set, the wide-angle video is output from the wide-angle video input unit 22 to the switching unit 34 via the automatic tracking / digital zoom unit 28, and an appropriate user interface such as the touch panel 16 is provided. By giving an instruction using, for example, the wide-angle video may be directly output from the changing unit 34 at an arbitrary timing without canceling the digital zoom-in processing and automatic tracking.
こうした構成によれば、撮影装置２０はスイッチャーとしても使用することができ、さらに、作業者の人数を減らすことができる。 According to such a configuration, the imaging device 20 can also be used as a switcher, and the number of workers can be reduced.
（１４）上記した実施の形態においては、タッチパッド１６のディスプレイ１６ａ上でズームイン領域を設定するようにしたが、これに限られるものではないことは勿論であり、領域情報入力部３０にインターネットなどを介してズームイン領域を入力するようにしてもよい。 (14) In the above-described embodiment, the zoom-in area is set on the display 16a of the touch pad 16. However, the present invention is not limited to this, and the area information input unit 30 includes the Internet. The zoom-in area may be input via
（１５）上記した実施の形態ならびに上記した（１）乃至（１４）に示す変形例は、適宜に組み合わせるようにしてもよい。 (15) You may make it combine suitably the embodiment shown above and the modification shown in said (1) thru | or (14).
本発明は、ビデオミキサーやスイッチャーなどの映像機器に用いて好適である。 The present invention is suitable for use in video equipment such as a video mixer and a switcher.
１０ 撮影システム
１２、１４ カメラ（第１カメラ、第２カメラ）
１５ 駆動部（正常信号出力手段）
１６ タッチパネル（領域情報入力手段）
１６ａ ディスプレイ（領域情報入力手段）
１８ 映像モニター
２０ 撮影装置
２２ 広角映像入力部（第１入力手段）
２４ 光学ズーム映像入力部（第２入力手段）
２６ ディスプレイ出力部（取得手段、第３映像信号出力手段）
２８ 自動追尾・デジタルズーム部（更新手段、映像情報取得手段）
３０ 領域情報入力部（領域情報入力手段）
３２ 駆動制御部（制御手段）
３４ 切換部（出力手段）
３６ 制御部
１０２ ＣＰＵ
１０４ バス
１０６ グラフィックアクセラレータ
１０８ Ａ／Ｄ変換器
１１０ Ｄ／Ａ変換器
１１２ 内部メモリ
１１４ ユーザーインターフェース
10 shooting system 12, 14 camera (first camera, second camera)
15 Drive unit (normal signal output means)
16 Touch panel (region information input means)
16a display (region information input means)
18 video monitor 20 photographing device 22 wide-angle video input unit (first input means)
24 Optical zoom image input section (second input means)
26 Display output unit (acquisition means, third video signal output means)
28 Automatic tracking / digital zoom unit (update means, video information acquisition means)
30 area information input section (area information input means)
32 Drive control unit (control means)
34 Switching section (output means)
36 control unit 102 CPU
104 Bus 106 Graphic accelerator 108 A / D converter 110 D / A converter 112 Internal memory 114 User interface
Claims (9)
駆動部によって遠隔操作されて前記第１領域の任意の領域を光学ズーム撮影可能なカメラにより取得した光学ズーム映像を第２映像信号として入力する第２入力手段と、
前記第１領域の一部であって、前記被写体を含む第２領域の設定情報を入力する領域情報入力手段と、
前記第１映像信号の前記被写体の動きに応じて前記第２領域の略中央に前記被写体が位置するよう前記第２領域を更新する更新手段と、
前記更新手段により更新した前記第２領域をデジタルズームイン処理して前記第２領域のデジタルズーム映像を取得する映像取得手段と、
前記カメラにより前記更新手段によって更新した前記第２領域を光学ズーム撮影して、前記第２領域の光学ズーム映像を前記第２映像信号として出力するよう前記駆動部を制御する制御手段と、
前記映像取得手段により取得した前記第２領域のデジタルズーム映像と、前記第２入力手段に入力した前記第２領域の光学ズーム映像とのいずれかを選択して出力する出力手段と
を有することを特徴とする撮影装置。 First input means for inputting a first video signal obtained by photographing a first area including a subject;
A second input means for inputting, as a second video signal, an optical zoom image acquired by a camera capable of optical zoom photographing of an arbitrary region of the first region, which is remotely operated by a drive unit;
Area information input means for inputting setting information of a second area that is a part of the first area and includes the subject;
Updating means for updating the second area so that the subject is positioned substantially in the center of the second area according to the movement of the subject of the first video signal;
Video acquisition means for acquiring a digital zoom image of the second area by performing digital zoom-in processing on the second area updated by the update means;
Control means for controlling the drive unit to optically shoot the second area updated by the updating means by the camera and to output an optical zoom image of the second area as the second video signal;
Output means for selecting and outputting either the digital zoom image of the second area acquired by the image acquisition means or the optical zoom image of the second area input to the second input means. An imaging device.
駆動部によって遠隔操作されて前記第１領域の任意の領域を光学ズーム撮影可能なカメラにより取得した光学ズーム映像を第２映像信号として入力する第２入力手段と、
前記第１領域の一部であって、前記被写体を含む第２領域の設定情報を入力する領域情報入力手段と、
前記第２領域をデジタルズームイン処理して前記第２領域のデジタルズーム映像を取得する映像取得手段と、
前記カメラにより前記第２領域を光学ズーム撮影して、前記第２領域の光学ズーム映像を前記第２映像信号として出力するよう前記駆動部を制御する制御手段と、
前記映像取得手段により取得した前記第２領域のデジタルズーム映像と、前記第２入力手段に入力した前記第２領域の光学ズーム映像とのいずれかを選択して出力する出力手段と
を有することを特徴とする撮影装置。 First input means for inputting a first video signal obtained by photographing a first area including a subject;
A second input means for inputting, as a second video signal, an optical zoom image acquired by a camera capable of optical zoom photographing of an arbitrary region of the first region, which is remotely operated by a drive unit;
Area information input means for inputting setting information of a second area that is a part of the first area and includes the subject;
Image acquisition means for acquiring a digital zoom image of the second area by performing a digital zoom-in process on the second area;
Control means for controlling the drive unit to optically shoot the second area by the camera and to output an optical zoom image of the second area as the second video signal;
Output means for selecting and outputting either the digital zoom image of the second area acquired by the image acquisition means or the optical zoom image of the second area input to the second input means. An imaging device.
前記出力手段は、
前記第２領域のデジタルズーム映像の特徴点と、前記第２領域の光学ズーム映像の特徴点とを抽出し、
前記第２領域のデジタルズーム映像の特徴点と前記第２領域の光学ズーム映像の特徴点とが一致しない場合には、前記第２領域のデジタルズーム映像を出力し、
前記第２領域のデジタルズーム映像の特徴点と前記第２領域の光学ズーム映像の特徴点とが一致した場合には、前記第２領域の光学ズーム映像を出力する
ことを特徴とする撮影装置。 In the imaging device according to claim 1 or 2,
The output means includes
Extracting a feature point of the digital zoom image of the second region and a feature point of the optical zoom image of the second region;
If the feature point of the digital zoom image in the second region does not match the feature point of the optical zoom image in the second region, the digital zoom image of the second region is output,
The imaging device, wherein when the feature point of the digital zoom image in the second region matches the feature point of the optical zoom image in the second region, the optical zoom image in the second region is output.
前記出力手段は、
領域情報入力手段により前記第２領域の設定情報が入力された直後には、前記第２領域のデジタルズーム映像を出力し、
その後、前記第２領域のデジタルズーム映像の特徴点と、前記第２領域の光学ズーム映像の特徴点とを抽出して、
前記第２領域のデジタルズーム映像の特徴点と前記第２領域の光学ズーム映像の特徴点とが一致しない場合には、前記第２領域のデジタルズーム映像を出力し続け、
前記第２領域のデジタルズーム映像の特徴点と前記第２領域の光学ズーム映像の特徴点とが一致した場合には、前記第２領域のデジタルズーム映像に換えて前記第２領域の光学ズーム映像を出力する
ことを特徴とする撮影装置。 In the imaging device according to claim 1 or 2,
The output means includes
Immediately after the setting information of the second area is input by the area information input means, a digital zoom image of the second area is output,
Thereafter, the feature point of the digital zoom image of the second region and the feature point of the optical zoom image of the second region are extracted,
If the feature point of the digital zoom image in the second region does not match the feature point of the optical zoom image in the second region, the digital zoom image in the second region is continuously output;
When the feature point of the digital zoom image in the second region matches the feature point of the optical zoom image in the second region, the optical zoom image in the second region is output instead of the digital zoom image in the second region An imaging device characterized by that.
前記領域情報入力手段はディスプレイを備えたタッチパネルを有し、
前記ディスプレイに表示された前記第１映像信号に基づいて作業者が前記第２領域の設定情報を入力する
ことを特徴とする撮影装置。 The imaging device according to claim 1,
The area information input means has a touch panel with a display,
An imaging device, wherein an operator inputs setting information of the second area based on the first video signal displayed on the display.
前記領域情報入力手段はディスプレイを備えたタッチパネルを有し、
前記ディスプレイに表示された前記第１映像信号に基づいて作業者が前記第２領域の設定情報を入力する
ことを特徴とする撮影装置。 In the imaging device according to any one of claims 2, 3 and 4,
The area information input means has a touch panel with a display,
An imaging device, wherein an operator inputs setting information of the second area based on the first video signal displayed on the display.
前記更新手段により更新した前記第２領域を前記第１映像信号に反映した第３映像信号を取得する取得手段と、
前記取得手段により取得した前記第３映像信号を前記タッチパネルに出力する第３映像信号出力手段と
を有し、
前記ディスプレイには前記第３映像信号に基づく映像が表示される
ことを特徴とする撮影装置。 The imaging device according to claim 5, further comprising:
Obtaining means for obtaining a third video signal reflecting the second area updated by the updating means in the first video signal;
And third video signal output means for outputting the third video signal acquired by the acquisition means to the touch panel,
An image pickup apparatus, wherein an image based on the third image signal is displayed on the display.
駆動部によって遠隔操作されて前記第１領域の任意の領域を光学ズーム撮影可能な第２カメラと、
前記第１カメラの映像を表示するディスプレイを備えるとともに、前記第１領域の一部であって、前記被写体を含む第２領域を設定するタッチパネルと、
前記被写体の動きに応じて前記第２領域の略中央に前記被写体が位置するよう前記第２領域を更新する更新手段と、
前記更新手段により更新した前記第２領域をデジタルズームイン処理することにより、前記第２領域のデジタルズーム映像を取得する映像取得手段と、
前記第２カメラにより前記更新手段によって更新した前記第２領域を光学ズーム撮影して、前記第２領域の光学ズーム映像を取得して出力するよう前記駆動部を制御する制御手段と、
前記映像取得手段により取得した前記第２領域のデジタルズーム映像と、前記第２領域の光学ズーム映像とのいずれかを選択して出力する出力手段と
を有することを特徴とする撮影システム。 A first camera for photographing a first area including a subject;
A second camera that is remotely controlled by a drive unit and is capable of optical zoom photographing of an arbitrary area of the first area;
A touch panel that includes a display that displays the video of the first camera, and that sets a second region that is part of the first region and includes the subject;
Updating means for updating the second region so that the subject is positioned substantially in the center of the second region in accordance with the movement of the subject;
Image acquisition means for acquiring a digital zoom image of the second area by performing digital zoom-in processing on the second area updated by the update means;
Control means for controlling the drive unit to optically capture the second area updated by the updating means by the second camera, and to acquire and output an optical zoom image of the second area;
An imaging system comprising: output means for selecting and outputting either the digital zoom image of the second area acquired by the image acquisition means or the optical zoom image of the second area.
前記駆動部は、前記制御手段による制御が正常終了したことを示す正常終了信号を出力する正常信号出力手段を備え、
前記出力手段において前記正常終了信号を受信すると前記第２領域の光学ズーム映像を出力する
ことを特徴とする撮影システム。 The imaging system according to claim 8, wherein
The drive unit includes a normal signal output unit that outputs a normal end signal indicating that the control by the control unit is normally completed,
When the output means receives the normal end signal, an optical zoom image of the second area is output.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012019880A JP2013162154A (en) | 2012-02-01 | 2012-02-01 | Photographing apparatus and photographing system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012019880A JP2013162154A (en) | 2012-02-01 | 2012-02-01 | Photographing apparatus and photographing system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2013162154A true JP2013162154A (en) | 2013-08-19 |
Family
ID=49174102
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012019880A Pending JP2013162154A (en) | 2012-02-01 | 2012-02-01 | Photographing apparatus and photographing system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2013162154A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20180053242A (en) | 2016-11-11 | 2018-05-21 | 도쿄엘렉트론가부시키가이샤 | Film forming device and film forming method |
| US11509830B2 (en) | 2019-02-19 | 2022-11-22 | Samsung Electronics Co., Ltd. | Electronic device and method for changing magnification of image using multiple cameras |
-
2012
- 2012-02-01 JP JP2012019880A patent/JP2013162154A/en active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20180053242A (en) | 2016-11-11 | 2018-05-21 | 도쿄엘렉트론가부시키가이샤 | Film forming device and film forming method |
| US11131023B2 (en) | 2016-11-11 | 2021-09-28 | Tokyo Electron Limited | Film deposition apparatus and film deposition method |
| US11509830B2 (en) | 2019-02-19 | 2022-11-22 | Samsung Electronics Co., Ltd. | Electronic device and method for changing magnification of image using multiple cameras |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101503333B1 (en) | Image capturing apparatus and control method thereof | |
| JP4140591B2 (en) | Imaging system and imaging method | |
| US8619120B2 (en) | Imaging apparatus, imaging method and recording medium with program recorded therein | |
| WO2016002228A1 (en) | Image-capturing device | |
| JP5591006B2 (en) | Control device for automatic tracking camera system and automatic tracking camera system having the same | |
| JP5809538B2 (en) | Automatic tracking camera system | |
| JP2008003335A (en) | Imaging apparatus, focus control method, focus control program | |
| JP5885395B2 (en) | Image capturing apparatus and image data recording method | |
| JP2010117663A (en) | Autofocus system | |
| JP2006081053A (en) | System for supporting trace of mobile body | |
| JP5084542B2 (en) | Automatic tracking imaging device, automatic tracking imaging method, and automatic tracking imaging program | |
| JP5519376B2 (en) | Electronics | |
| US9137448B2 (en) | Multi-recording image capturing apparatus and control method for multi-recording image capturing apparatus for enabling the capture of two image areas having two different angles of view | |
| TW202002606A (en) | Image-capturing device and method for operating the same | |
| JP5847591B2 (en) | Information processing apparatus, information processing method and program for information processing apparatus | |
| JP2013162154A (en) | Photographing apparatus and photographing system | |
| KR102090271B1 (en) | Photographing apparatus | |
| JP6836306B2 (en) | Imaging control device, its control method, program and recording medium | |
| WO2012099174A1 (en) | Autofocus system | |
| JP2009141606A (en) | Image processing system, video processing apparatus, and image processing method | |
| TW201041379A (en) | Photograph system and auxiliary compositon method using same | |
| JP6824061B2 (en) | Imaging apparatus, control methods, programs, and storage media executed by the imaging apparatus. | |
| JP2008078958A (en) | Video display program and video display system | |
| JP6242425B2 (en) | Imaging apparatus and moving image data recording method | |
| JP2023081712A (en) | Information processing apparatus, imaging system, information processing method and program |