JP2014085438A - Auxiliary imaging device and main imaging device - Google Patents

Auxiliary imaging device and main imaging device Download PDF

Info

Publication number
JP2014085438A
JP2014085438A JP2012232861A JP2012232861A JP2014085438A JP 2014085438 A JP2014085438 A JP 2014085438A JP 2012232861 A JP2012232861 A JP 2012232861A JP 2012232861 A JP2012232861 A JP 2012232861A JP 2014085438 A JP2014085438 A JP 2014085438A
Authority
JP
Japan
Prior art keywords
unit
subject
main
imaging device
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012232861A
Other languages
Japanese (ja)
Other versions
JP6136189B2 (en
Inventor
Yuji Kunigome
祐司 國米
Yutaka Iwasaki
豊 岩崎
Tomomi Takashina
知巳 高階
Tsukasa Murata
司 村田
Hideki Sasaki
秀貴 佐々木
Hironori Yazawa
洋紀 矢澤
Yoshiyuki Yamariku
芳之 山陸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2012232861A priority Critical patent/JP6136189B2/en
Publication of JP2014085438A publication Critical patent/JP2014085438A/en
Application granted granted Critical
Publication of JP6136189B2 publication Critical patent/JP6136189B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To solve a problem of losing a subject when the subject goes outside a picture frame.SOLUTION: Provided is an auxiliary imaging device which comprises: a subject information acquisition part for acquiring information on a main subject imaged by a main imaging device from the main imaging device generating a photograph image by imaging the subject by an operation of a photographer; an imaging part for generating a photograph image by imaging the subject; a movement amount specification part for specifying a movement amount for moving at least the imaging part to image the main subject by the imaging part on the basis of the information on the main subject acquired by the subject information acquisition part; a movement part for moving the imaging part by the movement amount specified by the movement amount specification part; and a transmission part for transmitting information on a position of the main subject to the main imaging device on the basis of the photograph image imaged by the imaging part.

Description

本発明は、補助撮像装置および主撮像装置に関する。   The present invention relates to an auxiliary imaging device and a main imaging device.

複数台のカメラを電気的に接続して連動させることが知られている（例えば、特許文献１参照）。
［先行技術文献］
［特許文献］
［特許文献１］ 特開２００２−１２２９３５号公報 It is known that a plurality of cameras are electrically connected and interlocked (for example, see Patent Document 1).
[Prior art documents]
[Patent Literature]
[Patent Document 1] Japanese Patent Application Laid-Open No. 2002-122935

しかしながら、上記技術においては被写体が画枠から外れてしまうと当該被写体を見失うおそれがあった。   However, in the above technique, there is a risk that the subject may be lost if the subject is out of the image frame.

本発明の第１の態様においては、撮像者の操作により被写体を撮像して撮像画像を生成する主撮像装置から、主撮像装置の撮影する主要被写体に関する情報を取得する被写体情報取得部と、被写体を撮像して撮像画像を生成する撮像部と、被写体情報取得部により取得された主要被写体に関する情報に基づいて、主要被写体を撮像部で撮像すべく少なくとも撮像部を移動させる移動量を特定する移動量特定部と、移動量特定部により特定された移動量で撮像部を移動する移動部と、撮像部により撮像された撮像画像に基づいて、主要被写体の位置に関する情報を主撮像装置に送信する送信部とを備える補助撮像装置が提供される。   In the first aspect of the present invention, a subject information acquisition unit that acquires information about a main subject captured by the main imaging device from a main imaging device that captures an image of the subject by an operator's operation and generates a captured image; An image capturing section that generates a captured image and a movement that specifies at least a moving amount for moving the image capturing section to capture the main subject with the image capturing section based on information about the main subject acquired by the subject information acquiring section Based on the amount specifying unit, the moving unit that moves the imaging unit by the amount of movement specified by the movement amount specifying unit, and the captured image captured by the imaging unit, information on the position of the main subject is transmitted to the main imaging device. An auxiliary imaging apparatus including a transmission unit is provided.

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。   It should be noted that the above summary of the invention does not enumerate all the necessary features of the present invention. In addition, a sub-combination of these feature groups can also be an invention.

撮像システムの構成を模式的に示す。The structure of an imaging system is shown typically. 主撮像装置１０のブロック図を示す。1 is a block diagram of the main imaging device 10. FIG. 補助撮像装置２０のブロック図を示す。A block diagram of the auxiliary imaging device 20 is shown. 主撮像装置１０および補助撮像装置２０の動作を示すフローチャートである。4 is a flowchart illustrating operations of the main imaging device 10 and the auxiliary imaging device 20. 図４のステップＳ２００のシーケンスを示すフローチャートである。It is a flowchart which shows the sequence of step S200 of FIG. 図４のステップＳ２０２のシーケンスを示すフローチャートである。It is a flowchart which shows the sequence of step S202 of FIG. 主撮像装置１０および補助撮像装置２０の画枠、画角および主要被写体の関係を示す模式図である。4 is a schematic diagram illustrating a relationship between an image frame, an angle of view, and a main subject of the main imaging device 10 and the auxiliary imaging device 20. FIG. 主撮像装置１０の表示部１１２の表示の一例である。3 is an example of display on the display unit 112 of the main imaging apparatus 10. 主撮像装置１０の表示部１１２の表示の他の例である。10 is another example of display on the display unit 112 of the main imaging apparatus 10. 他の補助撮像装置２２の例を示す。An example of another auxiliary imaging device 22 is shown.

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。   Hereinafter, the present invention will be described through embodiments of the invention, but the following embodiments do not limit the invention according to the claims. In addition, not all the combinations of features described in the embodiments are essential for the solving means of the invention.

図１は、撮像システムの構成を模式的に示す。撮像システムは、撮像者３２により保持される主撮像装置１０と自律移動する補助撮像装置２０とを備える。主撮像装置１０は、例えば被写体３０としての女性３４、子供３６、花壇３８等を撮像する。補助撮像装置２０は、主撮像装置１０の主要被写体を追跡して、主要被写体の位置に関する情報を主撮像装置１０に送信する。   FIG. 1 schematically shows the configuration of an imaging system. The imaging system includes a main imaging device 10 held by an imager 32 and an auxiliary imaging device 20 that moves autonomously. The main imaging device 10 images, for example, a woman 34, a child 36, a flower bed 38, and the like as the subject 30. The auxiliary imaging device 20 tracks the main subject of the main imaging device 10 and transmits information related to the position of the main subject to the main imaging device 10.

図２は、主撮像装置１０のブロック図を示す。主撮像装置１０は、撮像者３２により保持される撮像用の機器であり、撮像者３２の操作により被写体３０を撮像して画像を生成する。主撮像装置１０は、例えば、一眼カメラ、コンパクトカメラ、又は、カメラ付き携帯端末であってよい。主撮像装置１０は、撮像部１０２、操作部１０４、通信部１０６、発光部１０８、及び、被写体特定部１１０、表示部１１２、センサ１１４、記憶部１１６、及び、制御部１２０を有する。   FIG. 2 shows a block diagram of the main imaging device 10. The main imaging device 10 is an imaging device held by an imager 32 and generates an image by imaging the subject 30 by an operation of the imager 32. The main imaging device 10 may be, for example, a single-lens camera, a compact camera, or a mobile terminal with a camera. The main imaging device 10 includes an imaging unit 102, an operation unit 104, a communication unit 106, a light emitting unit 108, a subject specifying unit 110, a display unit 112, a sensor 114, a storage unit 116, and a control unit 120.

撮像部１０２は、撮像者３２の操作により被写体３０を撮像して撮像画像を生成する。撮像部１０２は、ＣＣＤ又はＣＭＯＳなどの素子に光束を入射・結像させて画像データを生成する撮像手段であってよく、例えば、横３０００画素、縦２０００画素の画素を有してよい。   The imaging unit 102 captures the subject 30 by the operation of the photographer 32 and generates a captured image. The imaging unit 102 may be an imaging unit that generates image data by causing a light beam to enter and form an image on an element such as a CCD or a CMOS. For example, the imaging unit 102 may include pixels of horizontal 3000 pixels and vertical 2000 pixels.

撮像部１０２は、単焦点レンズ、又は、ズームレンズを含んでよく、これらのレンズはオートフォーカス機構を備えてよい。また、撮像部１０２は、交換可能な機能の異なる複数のレンズを備えてよい。また、複数の撮像部１０２が、主撮像装置１０に設けられてもよい。撮像部１０２は、撮像した被写体３０の画像データおよび撮像した時の撮像条件データを含む撮像データを、制御部１２０を介して記憶部１１６に記憶する。撮像条件データには、フォーカス位置のデータ、撮影時のレンズの画角のデータ等が含まれる。   The imaging unit 102 may include a single focus lens or a zoom lens, and these lenses may include an autofocus mechanism. Further, the imaging unit 102 may include a plurality of lenses having different exchangeable functions. In addition, a plurality of imaging units 102 may be provided in the main imaging device 10. The imaging unit 102 stores imaging data including image data of the captured subject 30 and imaging condition data at the time of imaging in the storage unit 116 via the control unit 120. The imaging condition data includes focus position data, lens angle-of-view data at the time of shooting, and the like.

操作部１０４は、主撮像装置１０の任意の場所に設けられ、撮像者３２からの操作の入力を受け付ける。操作部１０４は、例えば、レリーズボタンを用いた撮像部１０２に対する撮像指示、及び、電源のＯＮ／ＯＦＦを含む様々な操作を入力する。操作部１０４は、補助撮像装置２０に対する指示を入力して、補助撮像装置２０の移動及び撮像等を遠隔操作してよい。操作部１０４は、例えば、操作ボタン、操作レバー、タッチパネル、及び、キーボード等の操作部材を含む。   The operation unit 104 is provided at an arbitrary location of the main imaging apparatus 10 and receives an operation input from the photographer 32. The operation unit 104 inputs, for example, an imaging instruction for the imaging unit 102 using a release button and various operations including power ON / OFF. The operation unit 104 may input an instruction to the auxiliary imaging device 20 and remotely control the movement and imaging of the auxiliary imaging device 20. The operation unit 104 includes operation members such as an operation button, an operation lever, a touch panel, and a keyboard, for example.

通信部１０６は、補助撮像装置２０と無線通信を行う。通信部１０６は、例えば、ＵＷＢ、ＺｉｇＢｅｅ（登録商標）、Ｗｉ−Ｆｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、３Ｇ、及び／又は、ＬＴＥ等の無線通信規格に準拠して通信する。   The communication unit 106 performs wireless communication with the auxiliary imaging device 20. The communication unit 106 performs communication based on a wireless communication standard such as UWB, ZigBee (registered trademark), Wi-Fi, Bluetooth (registered trademark), 3G, and / or LTE.

発光部１０８は、主撮像装置１０の一面に設けられた照明である。発光部１０８は、制御部１２０からの指示に応じて、フラッシュ光を出力する。発光部１０８は、キセノン管等のフラッシュライト又はＬＥＤ等を含んでよい。   The light emitting unit 108 is illumination provided on one surface of the main imaging device 10. The light emitting unit 108 outputs flash light in response to an instruction from the control unit 120. The light emitting unit 108 may include a flash light such as a xenon tube or an LED.

被写体特定部１１０は、撮像部１０２が撮像して生成した画像の中から主要被写体を特定する。被写体特定部１１０は、例えば、撮像部１０２により生成された画像データにより示される画像のうち、フォーカスが合っていて主要な範囲を占める部分を主撮像装置１０の主要被写体に特定する。   The subject specifying unit 110 specifies a main subject from images generated by the imaging unit 102. For example, the subject specifying unit 110 specifies, as a main subject of the main imaging apparatus 10, a portion that is in focus and occupies a main range in the image indicated by the image data generated by the imaging unit 102.

被写体特定部１１０は、主要被写体に対する撮像部１０２のフォーカス位置に基づいて、主撮像装置１０から主要被写体までの距離を特定する。被写体特定部１１０は、さらに画像中における主要被写体の中心座標の位置から、主撮像装置１０の正面方向に対する主要被写体の方角を特定する。被写体特定部１１０は、主要被写体までの距離及び方向を、主要被写体に関する主要被写体データとして制御部１２０を介して記憶部１１６に記憶する。   The subject specifying unit 110 specifies the distance from the main imaging device 10 to the main subject based on the focus position of the imaging unit 102 with respect to the main subject. The subject specifying unit 110 further specifies the direction of the main subject with respect to the front direction of the main imaging device 10 from the position of the central coordinates of the main subject in the image. The subject specifying unit 110 stores the distance and direction to the main subject in the storage unit 116 via the control unit 120 as main subject data regarding the main subject.

表示部１１２は、主撮像装置１０の一面に設けられる表示インターフェイスであり、例えば、液晶表示装置、又は、有機ＥＬ表示装置等を含む。表示部１１２は、例えば、撮像部１０２が撮像した画像又はライブビュー画像を表示する。表示部１１２はさらに、主撮像装置１０及び／又は補助撮像装置２０の設定画面を表示する。表示部１１２は、補助撮像装置２０が撮像した画像又はライブビュー画像を表示してもよい。なお、ライブビュー画像はスルー画像と呼ばれることもある。   The display unit 112 is a display interface provided on one surface of the main imaging device 10 and includes, for example, a liquid crystal display device or an organic EL display device. The display unit 112 displays, for example, an image captured by the imaging unit 102 or a live view image. The display unit 112 further displays a setting screen for the main imaging device 10 and / or the auxiliary imaging device 20. The display unit 112 may display an image captured by the auxiliary imaging device 20 or a live view image. The live view image is sometimes called a through image.

センサ１１４は、主撮像装置１０の位置に関する情報を検出する。センサ１１４は、屋内に設置されたＧＰＳ送信機からのＧＰＳ電波を受信する室内用ＧＰＳセンサ、及び／又は、人工衛星からのＧＰＳ電波を受信する屋外用ＧＰＳセンサを含み、これにより主撮像装置１０の室内及び／又は屋外での空間位置情報を取得する。   The sensor 114 detects information related to the position of the main imaging device 10. The sensor 114 includes an indoor GPS sensor that receives a GPS radio wave from a GPS transmitter installed indoors and / or an outdoor GPS sensor that receives a GPS radio wave from an artificial satellite. The spatial position information in the room and / or outdoors is acquired.

センサ１１４は、さらに姿勢センサ、加速度センサ、及び／又は、方位センサ等を含んでよく、これにより主撮像装置１０の向きを取得してよい。センサ１１４は、取得した主撮像装置１０の空間位置情報を示す空間位置データを制御部１２０を介して記憶部１１６に記憶する。   The sensor 114 may further include a posture sensor, an acceleration sensor, and / or an orientation sensor, and the orientation of the main imaging device 10 may be acquired thereby. The sensor 114 stores the acquired spatial position data indicating the spatial position information of the main imaging device 10 in the storage unit 116 via the control unit 120.

記憶部１１６は、撮像部１０２が撮像した撮像データを格納する。記憶部１１６は、被写体特定部１１０から出力された主要被写体データ、および、センサ１１４から出力された空間位置データを格納する。記憶部１１６はさらに、主撮像装置１０に用いられるその他のデータを記録する。   The storage unit 116 stores imaging data captured by the imaging unit 102. The storage unit 116 stores the main subject data output from the subject specifying unit 110 and the spatial position data output from the sensor 114. The storage unit 116 further records other data used in the main imaging device 10.

制御部１２０は、ＣＰＵ等を含み、撮像部１０２、操作部１０４、通信部１０６、発光部１０８、被写体特定部１１０、表示部１１２、及び、記憶部１１６に接続されて、主撮像装置１０を総合的に制御する。   The control unit 120 includes a CPU and the like, and is connected to the imaging unit 102, the operation unit 104, the communication unit 106, the light emitting unit 108, the subject specifying unit 110, the display unit 112, and the storage unit 116. Control comprehensively.

図３は、補助撮像装置２０のブロック図を示す。補助撮像装置２０は、主撮像装置１０とは別体であって、カメラを搭載した自律移動可能な機器であり、例えば、小型車両、又は、小型回転翼航空機等であってよい。以下、本実施形態では、補助撮像装置２０が小型回転翼航空機である場合を例に説明する。補助撮像装置２０は、撮像部２０２、移動部２０４、通信部２０６、センサ２０８、記憶部２１０、及び、制御部２２０を有する。   FIG. 3 is a block diagram of the auxiliary imaging device 20. The auxiliary imaging device 20 is separate from the main imaging device 10 and is an autonomously movable device equipped with a camera. For example, the auxiliary imaging device 20 may be a small vehicle or a small rotary wing aircraft. Hereinafter, in the present embodiment, a case where the auxiliary imaging device 20 is a small rotary wing aircraft will be described as an example. The auxiliary imaging device 20 includes an imaging unit 202, a moving unit 204, a communication unit 206, a sensor 208, a storage unit 210, and a control unit 220.

撮像部２０２は、ＣＣＤ又はＣＭＯＳなどの素子に光束を入射・結像させて画像データを得る撮像手段であり、例えば、横３０００画素、縦２０００画素の画素を有してよい。撮像部２０２は後述する被写体情報取得部２２８により取得された半押信号に基づいて撮像を行う。   The imaging unit 202 is an imaging unit that obtains image data by causing a light beam to enter and form an image on an element such as a CCD or a CMOS, and may include, for example, pixels of 3000 pixels horizontally and 2000 pixels vertically. The imaging unit 202 performs imaging based on a half-press signal acquired by a subject information acquisition unit 228 described later.

撮像部２０２は、撮像により生成した画像データを制御部２２０に供給する。撮像部２０２は、単焦点レンズ、又は、ズームレンズを備えてよい。撮像部２０２は、交換可能な機能の異なる複数のレンズを備え、制御部２２０からの指示により、これらのレンズから撮像に用いるレンズを選択してよい。   The imaging unit 202 supplies image data generated by imaging to the control unit 220. The imaging unit 202 may include a single focus lens or a zoom lens. The imaging unit 202 may include a plurality of lenses with different exchangeable functions, and may select a lens to be used for imaging from these lenses according to an instruction from the control unit 220.

撮像部２０２は垂直方向及び／又は水平方向に向きを変えることができてよい。また、複数の撮像部２０２が、補助撮像装置２０に設けられてもよい。撮像部２０２は、撮像により生成した画像データおよび撮像した時の撮像条件データを含む撮像データを、制御部２２０を介して記憶部２１０に記憶する。   The imaging unit 202 may be able to change the orientation in the vertical direction and / or the horizontal direction. In addition, a plurality of imaging units 202 may be provided in the auxiliary imaging device 20. The imaging unit 202 stores imaging data including image data generated by imaging and imaging condition data at the time of imaging in the storage unit 210 via the control unit 220.

移動部２０４は、制御部２２０からの指示に基づいて、可動部材を駆動させて補助撮像装置２０を移動する。移動部２０４は、例えば、回転翼２０３を回転させるモータを駆動するための駆動回路を有し、これにより補助撮像装置２０は飛行する。移動部２０４は、制御部２２０から、移動方向及び移動距離を含む移動量のデータを受け取り、当該移動量に応じて補助撮像装置２０を移動する。   The moving unit 204 moves the auxiliary imaging device 20 by driving the movable member based on an instruction from the control unit 220. The moving unit 204 includes, for example, a drive circuit for driving a motor that rotates the rotary blade 203, and the auxiliary imaging device 20 thus flies. The moving unit 204 receives movement amount data including a moving direction and a moving distance from the control unit 220, and moves the auxiliary imaging device 20 according to the moving amount.

通信部２０６は、主撮像装置１０の通信部１０６と無線通信を行う。通信部２０６は、例えば、ＵＷＢ、ＺｉｇＢｅｅ（登録商標）、Ｗｉ−Ｆｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、３Ｇ、及び／又は、ＬＴＥ等の無線通信規格に準拠して通信する。   The communication unit 206 performs wireless communication with the communication unit 106 of the main imaging apparatus 10. The communication unit 206 performs communication based on a wireless communication standard such as UWB, ZigBee (registered trademark), Wi-Fi, Bluetooth (registered trademark), 3G, and / or LTE.

センサ２０８は、補助撮像装置２０の位置に関する情報を取得する。センサ２０８は、屋内に設置されたＧＰＳ送信機からのＧＰＳ電波を受信する室内用ＧＰＳセンサ、及び／又は、人工衛星からのＧＰＳ電波を受信する屋外用ＧＰＳセンサを含み、これにより補助撮像装置２０の室内及び／又は屋外での空間位置情報を取得する。   The sensor 208 acquires information related to the position of the auxiliary imaging device 20. The sensor 208 includes an indoor GPS sensor that receives a GPS radio wave from a GPS transmitter installed indoors and / or an outdoor GPS sensor that receives a GPS radio wave from an artificial satellite, and thereby the auxiliary imaging device 20. The spatial position information in the room and / or outdoors is acquired.

センサ２０８は、姿勢センサ、加速度センサ、及び／又は、方位センサ等を含み、これにより補助撮像装置２０の向きを取得してもよい。また、センサ２０８は、補助撮像装置２０の周囲の光源の方向及び光源の光強度を特定する光センサを含んでもよい。センサ２０８は、取得した空間位置情報を示す空間位置データを制御部２２０を介して記憶部２１０に記憶する。   The sensor 208 may include an orientation sensor, an acceleration sensor, and / or an orientation sensor, and thereby acquire the orientation of the auxiliary imaging device 20. The sensor 208 may include an optical sensor that identifies the direction of the light source around the auxiliary imaging device 20 and the light intensity of the light source. The sensor 208 stores the spatial position data indicating the acquired spatial position information in the storage unit 210 via the control unit 220.

記憶部２１０は、主撮像装置１０から受け取った主要被写体データ及び撮像データ等を格納する。記憶部２１０は、撮像部２０２から出力された撮像データおよびセンサ２０８から出力された空間位置データを格納する。   The storage unit 210 stores main subject data, imaging data, and the like received from the main imaging device 10. The storage unit 210 stores the imaging data output from the imaging unit 202 and the spatial position data output from the sensor 208.

制御部２２０は、ＣＰＵ等を含み、撮像部２０２、移動部２０４、通信部２０６、センサ２０８、及び、記憶部２１０に接続されて、補助撮像装置２０を総合的に制御する。制御部２２０は、被写体情報取得部２２８、移動量特定部２２４および被写体情報送信部２３０を含む。   The control unit 220 includes a CPU and the like, and is connected to the imaging unit 202, the moving unit 204, the communication unit 206, the sensor 208, and the storage unit 210, and comprehensively controls the auxiliary imaging device 20. The control unit 220 includes a subject information acquisition unit 228, a movement amount specification unit 224, and a subject information transmission unit 230.

被写体情報取得部２２８は、主撮像装置１０の主要被写体に関する情報を取得する。この場合に被写体情報取得部２２８は、主撮像装置１０のレリーズボタンが半押しされた場合に、通信部１０６により発信される、主要被写体データを含む半押信号を、通信部２０６を介して取得する。さらに、主撮像装置１０のレリーズボタンが全押しされた場合に、通信部１０６により発信される全押信号を通信部２０６を介して取得する。   The subject information acquisition unit 228 acquires information related to the main subject of the main imaging apparatus 10. In this case, the subject information acquisition unit 228 acquires, via the communication unit 206, a half-press signal including main subject data that is transmitted by the communication unit 106 when the release button of the main imaging device 10 is half-pressed. To do. Further, when the release button of the main imaging device 10 is fully pressed, a full press signal transmitted by the communication unit 106 is acquired via the communication unit 206.

移動量特定部２２４は、補助撮像装置２０の移動量を特定する。この場合に移動量特定部２２４は、被写体情報取得部２２８で取得された半押信号に含まれる、主撮像装置１０の空間位置データおよび主要被写体データに基づいて、当該主要被写体を撮像部２０２の画枠に入れることができる位置を算出する。   The movement amount specifying unit 224 specifies the movement amount of the auxiliary imaging device 20. In this case, the movement amount specifying unit 224 detects the main subject of the imaging unit 202 based on the spatial position data and main subject data of the main imaging device 10 included in the half-press signal acquired by the subject information acquisition unit 228. The position that can be put in the image frame is calculated.

移動量特定部２２４は、補助撮像装置２０の現在位置から自らが算出した位置へ移動するための移動量を特定する。なお、移動量には、補助撮像装置２０が移動すべき方向と距離が含まれる。移動量特定部２２４は、当該特定された移動量に基づいて移動部２０４を駆動して、補助撮像装置２０を移動させる。   The movement amount specifying unit 224 specifies a movement amount for moving from the current position of the auxiliary imaging device 20 to a position calculated by the auxiliary imaging device 20. Note that the amount of movement includes the direction and distance to which the auxiliary imaging device 20 should move. The movement amount specifying unit 224 drives the moving unit 204 based on the specified movement amount to move the auxiliary imaging device 20.

被写体情報送信部２３０は、撮像部２０２により撮像されて生成された撮像画像に基づいて、主要被写体の位置に関する情報を示す被写体位置データを主撮像装置１０に送信する。主要被写体の位置に関する情報の例は、撮像画像自体、主要被写体が主撮像装置１０の画枠の外にいるか否か、外にいる場合にはどちらの方向か、外にいる場合に内に向かって移動しているか否か、および、内に向かって移動している場合に内に入るまでの予測時間等を含む。   The subject information transmission unit 230 transmits subject position data indicating information on the position of the main subject to the main imaging device 10 based on the captured image generated by being captured by the imaging unit 202. Examples of information regarding the position of the main subject are the captured image itself, whether or not the main subject is outside the image frame of the main imaging device 10, in which direction when it is outside, and inward when it is outside. And the estimated time until the vehicle enters when the vehicle moves inward.

図４は、主撮像装置１０および補助撮像装置２０の動作を示すフローチャートである。図４のフローチャートは、主撮像装置１０および補助撮像装置２０の電源が投入され、主撮像装置１０において補助撮像装置２０での被写体追跡機能が選択された場合に開始する。   FIG. 4 is a flowchart illustrating operations of the main imaging device 10 and the auxiliary imaging device 20. The flowchart of FIG. 4 starts when the main imaging device 10 and the auxiliary imaging device 20 are turned on and the subject tracking function in the auxiliary imaging device 20 is selected in the main imaging device 10.

主撮像装置１０の制御部１２０は、操作部１０４によりレリーズボタンが半押しされたことが検知されるまで待機する（Ｓ１０２：Ｎｏ）。操作部１０４によりレリーズボタンが半押しされたことが検知された場合に（Ｓ１０２：Ｙｅｓ）、制御部１２０は、通常の撮影動作として、オートフォーカスを行うとともに、モードに応じた絞りおよびシャッタスピード等の撮像条件を設定する（Ｓ１０４）。制御部１２０は当該撮影条件を、センサ１１４から取得した主撮像装置１０の空間位置データと共に、記憶部１１６に記憶する。   The control unit 120 of the main imaging device 10 waits until it is detected by the operation unit 104 that the release button is half-pressed (S102: No). When it is detected by the operation unit 104 that the release button has been half-pressed (S102: Yes), the control unit 120 performs autofocus as a normal shooting operation, and the aperture and shutter speed according to the mode. Imaging conditions are set (S104). The control unit 120 stores the imaging condition in the storage unit 116 together with the spatial position data of the main imaging device 10 acquired from the sensor 114.

被写体特定部１１０は、主撮像装置１０の主要被写体を特定する。被写体特定部１１０は、撮像部１０２がライブビュー画像を生成している場合に、当該ライブビュー画像において、当該画像のうち、フォーカスが合っていて主要な範囲を占める部分を主要被写体であると特定する。被写体特定部１１０は、主要被写体の画像データ、主要被写体までの距離及び方向を、主要被写体に関する主要被写体データとして制御部１２０を介して記憶部１１６に記憶する。   The subject specifying unit 110 specifies a main subject of the main imaging device 10. When the imaging unit 102 generates a live view image, the subject specifying unit 110 specifies a portion of the live view image that is in focus and occupies the main range as the main subject. To do. The subject specifying unit 110 stores the image data of the main subject, the distance to the main subject, and the direction in the storage unit 116 via the control unit 120 as main subject data regarding the main subject.

制御部１２０はさらに、記憶部１１６に記憶されている撮影条件、空間位置データおよび主要被写体データを含む半押信号を通信部１０６を介して発信する（Ｓ１０６）。この場合に、制御部１２０は、半押信号に、互いに通信すべき補助撮像装置２０の識別データをさらに含めてもよい。   The control unit 120 further transmits a half-press signal including the shooting conditions, spatial position data, and main subject data stored in the storage unit 116 via the communication unit 106 (S106). In this case, the control unit 120 may further include identification data of the auxiliary imaging device 20 that should communicate with each other in the half-press signal.

補助撮像装置２０の被写体情報取得部２２８が通信部２０６を介して半押し信号を受信した場合に、補助撮像装置２０の位置を移動するシーケンスが動作し（Ｓ２００）、補助撮像装置２０が移動する。半押信号に補助撮像装置２０の識別データが含まれる場合に、当該識別データが整合した場合に上記シーケンスを開始し、整合しない場合にはシーケンスを開始しないようにしてもよい。   When the subject information acquisition unit 228 of the auxiliary imaging device 20 receives a half-press signal via the communication unit 206, a sequence for moving the position of the auxiliary imaging device 20 operates (S200), and the auxiliary imaging device 20 moves. . When the identification data of the auxiliary imaging device 20 is included in the half-press signal, the sequence may be started when the identification data matches, and the sequence may not start when the identification data does not match.

さらに、撮像部２０２が撮像動作を行い、被写体情報送信部２３０が撮像画像に基づいて、主要被写体の位置に関する情報を生成するシーケンスが動作する（Ｓ２０２）。被写体情報送信部２３０は、主要被写体の位置に関する情報を示す被写体位置データを通信部２０６を介して送信する（Ｓ２０４）。主撮像装置１０の表示部１１２は、通信部１０６を介して受信した、被写体位置データに示された主要被写体の位置に関する情報を表示する（Ｓ１０８）。   Further, a sequence in which the imaging unit 202 performs an imaging operation and the subject information transmission unit 230 generates information on the position of the main subject based on the captured image operates (S202). The subject information transmission unit 230 transmits subject position data indicating information related to the position of the main subject via the communication unit 206 (S204). The display unit 112 of the main imaging apparatus 10 displays information related to the position of the main subject indicated in the subject position data received via the communication unit 106 (S108).

主撮像装置１０の制御部１２０は、操作部１０４によりレリーズボタンが全押しされたことが検知されるまで待機する（Ｓ１１０：Ｎｏ）。操作部１０４によりレリーズボタンが全押しされたことが検知された場合に（Ｓ１１０：Ｙｅｓ）、制御部１２０は、全押信号を通信部１０６を介して発信する（Ｓ１１２）。この場合に、制御部１２０は、半押信号と同様に全押信号に補助撮像装置２０の識別データをさらに含めてもよい。   The control unit 120 of the main imaging apparatus 10 stands by until it is detected by the operation unit 104 that the release button has been fully pressed (S110: No). When it is detected by the operation unit 104 that the release button is fully pressed (S110: Yes), the control unit 120 transmits a full press signal via the communication unit 106 (S112). In this case, the control unit 120 may further include the identification data of the auxiliary imaging device 20 in the full press signal as in the half press signal.

補助撮像装置２０が通信部２０６を介して全押信号を取得した場合に、制御部２２０はステップＳ２０２で生成した情報を初期化する（Ｓ２０６）。さらに制御部２２０は主撮像装置１０の主要被写体データを破棄してもよい。全押信号に補助撮像装置２０の識別データが含まれる場合に、当該識別データが整合した場合に情報を初期化し、整合しない場合には情報を初期化しないようにしてもよい。   When the auxiliary imaging device 20 acquires a full press signal via the communication unit 206, the control unit 220 initializes the information generated in step S202 (S206). Further, the control unit 220 may discard the main subject data of the main imaging apparatus 10. When the identification data of the auxiliary imaging device 20 is included in the full-press signal, the information may be initialized when the identification data matches, and the information may not be initialized when the identification data does not match.

主撮像装置１０の表示部１１２は、撮像部１０２で撮像して生成した撮像画像を表示する（Ｓ１０８）。以上により図４に示すフローチャートが終了する。   The display unit 112 of the main imaging device 10 displays a captured image generated by imaging by the imaging unit 102 (S108). Thus, the flowchart shown in FIG. 4 ends.

図５は、図４のステップＳ２００のシーケンスを示すフローチャートである。当該フローチャートは、被写体情報取得部２２８が半押信号を取得したことにより開始する。   FIG. 5 is a flowchart showing the sequence of step S200 in FIG. The flowchart starts when the subject information acquisition unit 228 acquires a half-press signal.

移動量特定部２２４は、半押信号に含まれる主撮像装置１０の空間位置データおよび主要被写体データを取得する（Ｓ３０２）。移動量特定部２２４は、当該空間位置データおよび主要被写体データに基づいて、当該主要被写体の空間的な位置を算出する（Ｓ３０４）。具体的には、移動量特定部２２４は、主撮像装置１０の空間位置に対して、主撮像装置１０からみた主要被写体の方向および距離を特定することにより、主要被写体の空間的な位置を算出する。   The movement amount specifying unit 224 acquires the spatial position data and main subject data of the main imaging device 10 included in the half-press signal (S302). The movement amount specifying unit 224 calculates the spatial position of the main subject based on the spatial position data and the main subject data (S304). Specifically, the movement amount specifying unit 224 calculates the spatial position of the main subject by specifying the direction and distance of the main subject viewed from the main imaging device 10 with respect to the spatial position of the main imaging device 10. To do.

移動量特定部２２４は、さらに、主撮像装置１０に撮像されない位置を算出する（Ｓ３０６）。この場合に、移動量特定部２２４は、半押信号に含まれる撮像条件および空間位置データに基づいて、主撮像装置１０の空間的な撮像範囲を算出することにより、主撮像装置１０に撮像されない位置を算出する。   The movement amount specifying unit 224 further calculates a position that is not imaged by the main imaging device 10 (S306). In this case, the movement amount specifying unit 224 calculates the spatial imaging range of the main imaging device 10 based on the imaging conditions and the spatial position data included in the half-press signal, so that the main imaging device 10 does not capture an image. Calculate the position.

移動量特定部２２４は、センサ２０８で取得されて記憶部２１０に記憶されている、補助撮像装置２０の空間位置データを取得する（Ｓ３０７）。移動量特定部２２４は、ステップＳ３０４およびＳ３０６の両方の条件を満たす位置と、ステップＳ３０７で取得された位置との差分から、補助撮像装置２０の移動量を特定し、移動部２０４に受け渡す（Ｓ３０８）。移動部２０４は、当該移動量に対応して回転翼２０３等を駆動して、補助撮像装置２０を上記位置まで移動する（Ｓ３１０）。これにより図５のフローチャートが終了する。   The movement amount specifying unit 224 acquires the spatial position data of the auxiliary imaging device 20 acquired by the sensor 208 and stored in the storage unit 210 (S307). The movement amount specifying unit 224 specifies the movement amount of the auxiliary imaging device 20 from the difference between the position that satisfies both the conditions of steps S304 and S306 and the position acquired in step S307, and passes the movement amount to the moving unit 204 ( S308). The moving unit 204 drives the rotary blade 203 and the like according to the amount of movement, and moves the auxiliary imaging device 20 to the above position (S310). This completes the flowchart of FIG.

図６は、図４のステップＳ２０２のシーケンスを示すフローチャートである。図７は、主撮像装置１０および補助撮像装置２０の画枠、画角および主要被写体の関係を示す模式図である。   FIG. 6 is a flowchart showing the sequence of step S202 in FIG. FIG. 7 is a schematic diagram illustrating the relationship between the image frame, the field angle, and the main subject of the main imaging device 10 and the auxiliary imaging device 20.

当該フローチャートは、図５のステップＳ３１０に続いて開始する。補助撮像装置２０の撮像部２０２は、撮像動作を実行する（Ｓ３２０）。ここで、上記図５のフローチャートの動作により、撮像部２０２の画枠には主撮像装置１０の主要被写体が含まれている。よって、当該撮影により撮像部２０２に生成される撮像画像には主要被写体が含まれる。この場合に、図７に示すように、撮像部２０２は、変倍光学系を有している場合に撮像部１０２の画角θ１よりも広い画角θ２で撮像する。   The flowchart starts after step S310 in FIG. The imaging unit 202 of the auxiliary imaging device 20 performs an imaging operation (S320). Here, the main subject of the main imaging apparatus 10 is included in the image frame of the imaging unit 202 by the operation of the flowchart of FIG. Therefore, the captured image generated in the imaging unit 202 by the imaging includes the main subject. In this case, as illustrated in FIG. 7, the imaging unit 202 captures an image with an angle of view θ <b> 2 wider than the angle of view θ <b> 1 of the imaging unit 102 when the variable magnification optical system is included.

被写体情報送信部２３０は、主要被写体が主撮像装置１０の画枠の外にあるか否かを判断する（Ｓ３２２）。この場合に、被写体情報送信部２３０は、当該撮像画像における主要被写体の位置、撮像部２０２から当該主要被写体へのフォーカス距離等から主要被写体の空間的な位置を特定する。さらに、被写体情報送信部２３０は、主撮像装置１０の位置、向きおよび画角と、主要被写体の空間的な位置とから、主要被写体が主撮像装置１０の画枠の外にあるか否かを判断する。   The subject information transmission unit 230 determines whether or not the main subject is outside the image frame of the main imaging device 10 (S322). In this case, the subject information transmission unit 230 specifies the spatial position of the main subject from the position of the main subject in the captured image, the focus distance from the imaging unit 202 to the main subject, and the like. Further, the subject information transmission unit 230 determines whether or not the main subject is outside the image frame of the main imaging device 10 based on the position, orientation, and angle of view of the main imaging device 10 and the spatial position of the main subject. to decide.

被写体情報送信部２３０は、主要被写体が主撮像装置１０の画枠の外にない、すなわち画枠の内にあると判断した場合に（Ｓ３２２：Ｎｏ）、その旨の情報を生成する（Ｓ３２８）。一方、被写体情報送信部２３０は、主要被写体が主撮像装置１０の画枠の外にあると判断した場合に（Ｓ３２２：Ｙｅｓ）、当該主要被写体が主撮像装置１０の画枠に向かっているかどうかを判断する（Ｓ３２４）。この場合に例えば、被写体情報送信部２３０は、撮像部２０２により時系列的に生成された複数の撮像画像の差分を算出することにより、主要被写体が主撮像装置１０の画枠に向かっているかどうかを判断する。   When the subject information transmission unit 230 determines that the main subject is not outside the image frame of the main imaging apparatus 10, that is, is within the image frame (S322: No), the subject information transmission unit 230 generates information to that effect (S328). . On the other hand, when the subject information transmission unit 230 determines that the main subject is outside the image frame of the main imaging device 10 (S322: Yes), whether the main subject is facing the image frame of the main imaging device 10 or not. Is determined (S324). In this case, for example, the subject information transmission unit 230 calculates the difference between a plurality of captured images generated in time series by the imaging unit 202 to determine whether or not the main subject is facing the image frame of the main imaging device 10. Judging.

被写体情報送信部２３０は、主要被写体が主撮像装置１０の画枠に向かっていないと判断した場合に（Ｓ３２４：Ｎｏ）、主要被写体が主撮像装置１０の画枠に対していずれの方向にずれているかを含む情報を生成する（Ｓ３２８）。一方、被写体情報送信部２３０は、主要被写体が主撮像装置１０の画枠に向かっていると判断した場合に（Ｓ３２４：Ｙｅｓ）、主要被写体が主撮像装置１０の画枠に入るまでの時間を予測する（Ｓ３２６）。この場合に例えば、被写体情報送信部２３０は、撮像部２０２により時系列的に生成された複数の撮像画像の差分から主要被写体の速度を算出して、主撮像装置１０の画枠に入るまでの時間を予測する。   When the subject information transmission unit 230 determines that the main subject is not facing the image frame of the main imaging device 10 (S324: No), the main subject is shifted in any direction with respect to the image frame of the main imaging device 10. (S328). On the other hand, when the subject information transmission unit 230 determines that the main subject is facing the image frame of the main imaging device 10 (S324: Yes), the time until the main subject enters the image frame of the main imaging device 10 is determined. Prediction is performed (S326). In this case, for example, the subject information transmission unit 230 calculates the speed of the main subject from the difference between the plurality of captured images generated in time series by the imaging unit 202 and enters the image frame of the main imaging device 10. Predict time.

図７には、主要被写体としての子供３６が主撮像装置１０の画枠の外にいて、主撮像装置１０の画枠に向かっている例が示されている。なお、図７では、主要被写体以外の被写体としての花壇３８が、主撮像装置１０および補助撮像装置２０の両方の画枠に入っている例が示されている。   FIG. 7 shows an example in which the child 36 as the main subject is outside the image frame of the main imaging device 10 and is facing the image frame of the main imaging device 10. FIG. 7 shows an example in which a flower bed 38 as a subject other than the main subject is in the image frames of both the main imaging device 10 and the auxiliary imaging device 20.

被写体情報送信部２３０は、ステップＳ３２６で予測した時間、および、主要被写体が主撮像装置１０の画枠に入ってくる方向を含む情報を生成する（Ｓ３２８）。以上、ステップＳ３２２、Ｓ３２４、Ｓ３２６のいずれを経由した場合でもステップＳ３２８で主要被写体の位置に関する情報が生成されて、図６のフローチャートが終了する。ステップＳ３２８で生成された主要被写体の位置に関する情報を示す被写体位置データは、図４のステップ２０４において主撮像装置１０に送信される。   The subject information transmission unit 230 generates information including the time predicted in step S326 and the direction in which the main subject enters the image frame of the main imaging device 10 (S328). As described above, regardless of which of steps S322, S324, and S326, the information on the position of the main subject is generated in step S328, and the flowchart of FIG. 6 ends. Subject position data indicating information on the position of the main subject generated in step S328 is transmitted to the main imaging apparatus 10 in step 204 of FIG.

図８は、主撮像装置１０の表示部１１２の表示の一例である。表示部１１２には、主撮像装置１０で撮像されたライブビュー画像１２２が全体的に表示される。当該画像の右上部分に重畳して、補助撮像装置２０で撮像されたライブビュー画像１２４が合成されて表示される。   FIG. 8 is an example of a display on the display unit 112 of the main imaging apparatus 10. On the display unit 112, the live view image 122 captured by the main imaging device 10 is displayed as a whole. The live view image 124 captured by the auxiliary imaging device 20 is synthesized and displayed so as to be superimposed on the upper right portion of the image.

図８に示す例においては、図７の例に対応して、ライブビュー画像１２２には花壇３８は写っているが、主要被写体である子供３６は画枠の外にいて写っていない。一方、補助撮像装置２０で撮像されたライブビュー画像１２４は子供３６を追跡しているので、当該子供３６が花壇３８の左に写っている。これにより、撮像者３２は、主撮像装置１０の画枠から子供３６が外れても、補助撮像装置２０からの画像により、当該子供３６が花壇３８の左側にいることを知ることができる。   In the example shown in FIG. 8, corresponding to the example of FIG. 7, the flower bed 38 is shown in the live view image 122, but the child 36, which is the main subject, is not shown outside the image frame. On the other hand, since the live view image 124 captured by the auxiliary imaging device 20 tracks the child 36, the child 36 is shown on the left side of the flower bed 38. As a result, the imager 32 can know that the child 36 is on the left side of the flower bed 38 from the image from the auxiliary imaging device 20 even if the child 36 is removed from the image frame of the main imaging device 10.

さらに図８に示す例においては、主要被写体である子供３６が主撮像装置１０の画枠の左外にいる旨の情報を補助撮像装置２０から取得したことに対応して、ライブビュー画像１２２に左向きの方向表示１２６が重畳されて表示される。よって、撮像者３２は、主要被写体たる子供３６が画枠の左側にいることを知ることができる。   Further, in the example shown in FIG. 8, the live view image 122 is displayed in correspondence with the fact that the child 36 as the main subject has acquired information from the auxiliary imaging device 20 that the child 36 is outside the image frame of the main imaging device 10. A left direction display 126 is superimposed and displayed. Therefore, the photographer 32 can know that the child 36 as the main subject is on the left side of the image frame.

図９は、主撮像装置１０の表示部１１２の表示の他の例である。図９において図８と同じ構成には同じ参照番号を付して説明を省略する。   FIG. 9 is another example of display on the display unit 112 of the main imaging apparatus 10. 9, the same components as those in FIG. 8 are denoted by the same reference numerals, and description thereof is omitted.

図９に示す例においては、主要被写体である子供３６が主撮像装置１０の画枠の左外から５秒後の画枠に入る旨の情報を補助撮像装置２０から取得したことに対応して、ライブビュー画像１２２の左側に右向きの方向表示１３０および「５秒後」の時間表示１３２を含む表示１２８が重畳されて表示される。よって、撮像者３２は、主要被写体たる子供３６が画枠の左外から５秒後に画枠に入ることを知ることができる。なお、図８の方向表示１２６と区別すべく、方向表示１３０を点滅させたりしてもよい。   In the example shown in FIG. 9, corresponding to the fact that the child 36 as the main subject has acquired from the auxiliary imaging device 20 information indicating that the child image enters the image frame 5 seconds after the left outside of the image frame of the main imaging device 10. A display 128 including a rightward direction display 130 and a time display 132 “after 5 seconds” is superimposed and displayed on the left side of the live view image 122. Therefore, the photographer 32 can know that the child 36 as the main subject enters the image frame 5 seconds after the left outside of the image frame. Note that the direction display 130 may be blinked to be distinguished from the direction display 126 of FIG.

なお、上記実施形態においては、主撮像装置１０で主要被写体が特定されるが、これに代えて、補助撮像装置２０で主撮像装置１０の主要被写体を特定して追跡してもよい。この場合に、補助撮像装置２０は例えば、主撮像装置１０の画枠を含む広角の画枠で時間的に連続して撮像し、その差分が大きい被写体すなわち動き変化量の大きい被写体を主要被写体として認定してもよい。その場合に、動き変化量が大きいほど以降の撮像部２０２による撮像をより広角側で行ってもよい。さらに他の例として、補助撮像装置２０にマイクを設けて、大きな音量を発している被写体を主要被写体と認識してもよい。   In the above embodiment, the main subject is specified by the main imaging device 10, but instead, the main subject of the main imaging device 10 may be specified and tracked by the auxiliary imaging device 20. In this case, for example, the auxiliary imaging device 20 continuously captures images in a wide-angle image frame including the image frame of the main imaging device 10 in time, and uses a subject with a large difference, that is, a subject with a large amount of motion change as a main subject. You may be certified. In that case, the larger the amount of motion change, the later imaging by the imaging unit 202 may be performed on the wide angle side. As yet another example, a microphone may be provided in the auxiliary imaging device 20 to recognize a subject that emits a large volume as a main subject.

図１０は他の補助撮像装置２２の例を示す。補助撮像装置２２は、車輪２５４で自走する小型車両である。補助撮像装置２２に搭載された撮像部２５２は、水平方向および垂直方向に向きを変えることができる。   FIG. 10 shows another example of the auxiliary imaging device 22. The auxiliary imaging device 22 is a small vehicle that runs on its own wheels 254. The imaging unit 252 mounted on the auxiliary imaging device 22 can change the direction in the horizontal direction and the vertical direction.

上記実施形態においては、補助撮像装置２０、２２はいずれも自律的に移動する。これに代えて、地面に固定された三脚に補助撮像装置が取り付けられてもよい。この場合に、雲台において補助撮像装置の水平方向および垂直方向の向きが変えられるようになっていてもよい。   In the above embodiment, both the auxiliary imaging devices 20 and 22 move autonomously. Instead of this, the auxiliary imaging device may be attached to a tripod fixed to the ground. In this case, the direction of the auxiliary imaging device in the horizontal direction and the vertical direction may be changed at the pan head.

上記実施形態においては、レリーズボタンが半押しされた場合に半押信号が送信され、レリーズボタンが全押された場合に全押信号が送信される。これに代えてまたはこれに加えて、タッチパネルでの特定の操作に基づいて、半押信号および全押信号がそれぞれ送信されてもよい。   In the above embodiment, a half-press signal is transmitted when the release button is half-pressed, and a full-press signal is transmitted when the release button is fully pressed. Instead of or in addition to this, a half-press signal and a full-press signal may be transmitted based on a specific operation on the touch panel.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。   As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above-described embodiment. It is apparent from the scope of the claims that the embodiments added with such changes or improvements can be included in the technical scope of the present invention.

特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。   The order of execution of each process such as operations, procedures, steps, and stages in the apparatus, system, program, and method shown in the claims, the description, and the drawings is particularly “before” or “prior to”. It should be noted that the output can be realized in any order unless the output of the previous process is used in the subsequent process. Regarding the operation flow in the claims, the description, and the drawings, even if it is described using “first”, “next”, etc. for convenience, it means that it is essential to carry out in this order. It is not a thing.

１０ 主撮像装置、２０ 補助撮像装置、２２ 補助撮像装置、３２ 撮像者、３０ 被写体、３４ 女性、３６ 子供、３８ 花壇、１０２ 撮像部、１０４ 操作部、１０６ 通信部、１０８ 発光部、１１０ 被写体特定部、１１２ 表示部、１１４ センサ、１１６ 記憶部、１２０ 制御部、１２２ 画像、１２４ 画像、１２６ 方向表示、１２８ 表示、１３０ 方向表示、１３２ 時間表示、２０２ 撮像部、２０３ 回転翼、２０６ 通信部、２０４ 移動部、２０８ センサ、２１０ 記憶部、２２０ 制御部、２２４ 移動量特定部、２２８ 被写体情報取得部、２３０ 被写体情報送信部、２５２ 撮像部、２５４ 車輪   10 main imaging devices, 20 auxiliary imaging devices, 22 auxiliary imaging devices, 32 photographers, 30 subjects, 34 women, 36 children, 38 flower beds, 102 imaging units, 104 operation units, 106 communication units, 108 light emitting units, 110 subject identification Unit, 112 display unit, 114 sensor, 116 storage unit, 120 control unit, 122 image, 124 image, 126 direction display, 128 display, 130 direction display, 132 time display, 202 imaging unit, 203 rotor blade, 206 communication unit, 204 moving unit, 208 sensor, 210 storage unit, 220 control unit, 224 movement amount specifying unit, 228 subject information acquiring unit, 230 subject information transmitting unit, 252 imaging unit, 254 wheels

Claims (6)

撮像者の操作により被写体を撮像して撮像画像を生成する主撮像装置から、前記主撮像装置の撮影する主要被写体に関する情報を取得する被写体情報取得部と、
被写体を撮像して撮像画像を生成する撮像部と、
前記被写体情報取得部により取得された前記主要被写体に関する情報に基づいて、前記主要被写体を前記撮像部で撮像すべく少なくとも前記撮像部を移動させる移動量を特定する移動量特定部と、
前記移動量特定部により特定された前記移動量で前記撮像部を移動する移動部と、
前記撮像部により撮像された前記撮像画像に基づいて、前記主要被写体の位置に関する情報を前記主撮像装置に送信する送信部と
を備える補助撮像装置。 A subject information acquisition unit that acquires information about a main subject captured by the main imaging device from a main imaging device that captures an image of the subject by an operation of a photographer and generates a captured image;
An imaging unit that images a subject and generates a captured image;
A movement amount specifying unit that specifies at least a movement amount for moving the imaging unit to image the main subject with the imaging unit, based on information about the main subject acquired by the subject information acquisition unit;
A moving unit that moves the imaging unit by the moving amount specified by the moving amount specifying unit;
An auxiliary imaging device comprising: a transmission unit that transmits information related to the position of the main subject to the main imaging device based on the captured image captured by the imaging unit. 前記移動量特定部は、前記撮像部により生成された前記撮像画像に基づいて、前記移動量を特定する請求項１に記載の補助撮像装置。   The auxiliary imaging apparatus according to claim 1, wherein the movement amount specifying unit specifies the movement amount based on the captured image generated by the imaging unit. 前記送信部は、前記主要被写体の位置に関する情報として、前記撮像部により生成された前記撮像画像を送信する請求項２に記載の補助撮像装置。   The auxiliary imaging apparatus according to claim 2, wherein the transmission unit transmits the captured image generated by the imaging unit as information regarding the position of the main subject. 前記撮像部は、変倍光学系を有し、前記主要被写体の移動速度が早いほど広角側で撮像する請求項２または３に記載の補助撮像装置。   4. The auxiliary imaging apparatus according to claim 2, wherein the imaging unit includes a variable magnification optical system, and images at the wide angle side as the moving speed of the main subject increases. 前記被写体情報取得部は、前記主撮像装置の画枠の情報を取得し、
前記送信部は、前記被写体情報取得部により取得された前記画枠の情報と前記撮像部により生成された前記撮像画像に基づいて、前記主要被写体が前記画枠から外れていると判断した場合に、前記主要被写体の位置に関する情報として、前記主要被写体が前記画枠からいずれの方向に外れているかを示す情報を送信する請求項１から４のいずれか１項に記載の補助撮像装置。 The subject information acquisition unit acquires image information of the main imaging device,
When the transmission unit determines that the main subject is out of the image frame based on the image frame information acquired by the subject information acquisition unit and the captured image generated by the imaging unit. 5. The auxiliary imaging apparatus according to claim 1, wherein information indicating in which direction the main subject deviates from the image frame is transmitted as information relating to the position of the main subject. 6. 前記被写体情報取得部は、前記主撮像装置の画枠の情報を取得し、
前記送信部は、前記被写体情報取得部により取得された前記画枠の情報と前記撮像部により生成された前記撮像画像に基づいて、前記主要被写体が前記画枠から外れていると判断した場合に、前記画枠から外れた位置から前記画枠へ入る時間を予測し、前記主要被写体の位置に関する情報として、前記主要被写体が前記画枠へ入る時間を示す情報を送信する請求項１から５のいずれか１項に記載の補助撮像装置。 The subject information acquisition unit acquires image information of the main imaging device,
When the transmission unit determines that the main subject is out of the image frame based on the image frame information acquired by the subject information acquisition unit and the captured image generated by the imaging unit. The time for entering the image frame from a position outside the image frame is predicted, and information indicating the time for the main subject to enter the image frame is transmitted as information on the position of the main subject. The auxiliary imaging apparatus according to any one of the above.
JP2012232861A 2012-10-22 2012-10-22 Auxiliary imaging device and main imaging device Active JP6136189B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012232861A JP6136189B2 (en) 2012-10-22 2012-10-22 Auxiliary imaging device and main imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012232861A JP6136189B2 (en) 2012-10-22 2012-10-22 Auxiliary imaging device and main imaging device

Publications (2)

Publication Number Publication Date
JP2014085438A true JP2014085438A (en) 2014-05-12
JP6136189B2 JP6136189B2 (en) 2017-05-31

Family

ID=50788562

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012232861A Active JP6136189B2 (en) 2012-10-22 2012-10-22 Auxiliary imaging device and main imaging device

Country Status (1)

Country Link
JP (1) JP6136189B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6409239B1 (en) * 2017-08-28 2018-10-24 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ Imaging apparatus, imaging system, flying object, recording method, and program
WO2020202683A1 (en) * 2019-03-29 2020-10-08 ソニー株式会社 Image processing device, image processing method, program, and imaging device

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07162730A (en) * 1993-12-09 1995-06-23 Ibiden Co Ltd Mobile object image pickup device
JPH08116485A (en) * 1994-10-14 1996-05-07 Sony Corp Device and method for tracking object of video camera
JPH09322051A (en) * 1996-05-24 1997-12-12 Nippon Hoso Kyokai <Nhk> Automatic photographing camera system
JP2000032319A (en) * 1998-07-08 2000-01-28 Canon Inc System, method and device for controlling camera, image processor to be used for the same and record medium
JP2002218288A (en) * 2001-01-15 2002-08-02 Nippon Hoso Kyokai <Nhk> Camera display system
JP2004297675A (en) * 2003-03-28 2004-10-21 Toshiba Corp Moving photographic apparatus
JP2009239392A (en) * 2008-03-26 2009-10-15 Fujifilm Corp Compound eye photographing apparatus, control method therefor, and program
JP2010074327A (en) * 2008-09-17 2010-04-02 Nippon Hoso Kyokai <Nhk> Photographic shot controller, cooperative photographing system and program therefor
JP2010124263A (en) * 2008-11-20 2010-06-03 Nikon Corp Imaging apparatus
JP2012029033A (en) * 2010-07-23 2012-02-09 Olympus Imaging Corp Camera

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07162730A (en) * 1993-12-09 1995-06-23 Ibiden Co Ltd Mobile object image pickup device
JPH08116485A (en) * 1994-10-14 1996-05-07 Sony Corp Device and method for tracking object of video camera
JPH09322051A (en) * 1996-05-24 1997-12-12 Nippon Hoso Kyokai <Nhk> Automatic photographing camera system
JP2000032319A (en) * 1998-07-08 2000-01-28 Canon Inc System, method and device for controlling camera, image processor to be used for the same and record medium
JP2002218288A (en) * 2001-01-15 2002-08-02 Nippon Hoso Kyokai <Nhk> Camera display system
JP2004297675A (en) * 2003-03-28 2004-10-21 Toshiba Corp Moving photographic apparatus
JP2009239392A (en) * 2008-03-26 2009-10-15 Fujifilm Corp Compound eye photographing apparatus, control method therefor, and program
JP2010074327A (en) * 2008-09-17 2010-04-02 Nippon Hoso Kyokai <Nhk> Photographic shot controller, cooperative photographing system and program therefor
JP2010124263A (en) * 2008-11-20 2010-06-03 Nikon Corp Imaging apparatus
JP2012029033A (en) * 2010-07-23 2012-02-09 Olympus Imaging Corp Camera

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6409239B1 (en) * 2017-08-28 2018-10-24 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ Imaging apparatus, imaging system, flying object, recording method, and program
JP2019040128A (en) * 2017-08-28 2019-03-14 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ Imaging apparatus, imaging system, flight vehicle, recording method, and program
WO2020202683A1 (en) * 2019-03-29 2020-10-08 ソニー株式会社 Image processing device, image processing method, program, and imaging device
CN113632448A (en) * 2019-03-29 2021-11-09 索尼集团公司 Image processing apparatus, image processing method, program, and imaging apparatus

Also Published As

Publication number Publication date
JP6136189B2 (en) 2017-05-31

Similar Documents

Publication Publication Date Title
US9641751B2 (en) Imaging apparatus, imaging method thereof, and computer readable recording medium
US9025044B2 (en) Imaging device, display method, and computer-readable recording medium
JP2015148765A (en) Imaging device, display device, optical device and imaging system
JP2011166756A (en) Photographing apparatus and photographing system
JP2013160832A (en) Optical apparatus
JP5974819B2 (en) Auxiliary imaging device and program
US20150381886A1 (en) Camera Controlling Apparatus For Controlling Camera Operation
JP6136189B2 (en) Auxiliary imaging device and main imaging device
JP2006184742A (en) Autofocus system
KR101814714B1 (en) Method and system for remote control of camera in smart phone
JP6098104B2 (en) Auxiliary imaging device and program
JP6044272B2 (en) Auxiliary imaging device
JP6003613B2 (en) Auxiliary imaging device
JP7131541B2 (en) Image processing device, image processing method and image processing program
JP5861420B2 (en) Electronic camera
JP2016143915A (en) Imaging device, imaging system, imaging method and program
JP2010062834A (en) Photographing system, photographing device constituting the same, and operation device
JP2013009204A (en) Imaging device, imaging method and program
JP6080825B2 (en) Imaging apparatus and control method thereof
JP2015152723A (en) Imaging device and imaging program
JP6138632B2 (en) Imaging apparatus, imaging method, and program
JP6176306B2 (en) Electronic camera and program
JP6176305B2 (en) Electronic camera and program
JP6111831B2 (en) Pseudo imaging device and pseudo lens barrel
JP2013201756A (en) Camera

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150928

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160812

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160823

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161017

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170404

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170417

R150 Certificate of patent or registration of utility model

Ref document number: 6136189

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250