JP2019194636A - Imaging system, control method of the same, imaging apparatus, program, and storage medium - Google Patents
Imaging system, control method of the same, imaging apparatus, program, and storage medium Download PDFInfo
- Publication number
- JP2019194636A JP2019194636A JP2018088401A JP2018088401A JP2019194636A JP 2019194636 A JP2019194636 A JP 2019194636A JP 2018088401 A JP2018088401 A JP 2018088401A JP 2018088401 A JP2018088401 A JP 2018088401A JP 2019194636 A JP2019194636 A JP 2019194636A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- pan
- camera
- tilt
- optical system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、複数の撮像装置を有し、少なくとも１つの撮像装置が向きを変えられるように構成された撮像システムに関するものである。 The present invention relates to an imaging system that includes a plurality of imaging devices and is configured such that the orientation of at least one imaging device can be changed.
従来、複数のカメラを搭載した撮影システムとして、第１の撮影装置と第２の撮影装置を備え、第１のレンズ鏡筒の画角が、第２のレンズ鏡筒の画角よりも広角であるように構成されたシステムが知られている。この撮影システムは、２次元画像を取得できる撮影装置を利用して３次元画像を簡易に撮影することができる（特許文献１参照）。 Conventionally, as a photographing system equipped with a plurality of cameras, a first photographing device and a second photographing device are provided, and the angle of view of the first lens barrel is wider than the angle of view of the second lens barrel. Systems configured in such a way are known. This photographing system can easily photograph a three-dimensional image using a photographing device capable of acquiring a two-dimensional image (see Patent Document 1).
上述の特許文献１では、３次元画像の取得を目的とし、２つの撮像装置が同じ方向を向いているため、それぞれの撮像装置において異なる被写体を撮影することは出来なかった。
In the above-mentioned
例えば、舞台の撮影を例に説明すると、第１の撮像装置を広角にして舞台の全体像を撮影し、第２の撮像装置を望遠にして舞台の一部分である演者を撮影している場合を想定する。この場合、演者が動いたとき、もしくは、現在撮影している演者から異なる演者に被写体を変更したいときには、第２の撮像装置の撮像方向を変更する必要がある。ところが、第２の撮像装置の撮像方向を変更すると、第１の撮像装置の撮像方向も変わってしまい、舞台の全体像の撮影が困難になる。 For example, taking shooting of the stage as an example, the case where the first imaging device is set to a wide angle to shoot the entire image of the stage, and the second imaging device is set to telephoto to shoot a performer that is part of the stage. Suppose. In this case, it is necessary to change the imaging direction of the second imaging device when the performer moves or when it is desired to change the subject from the presently performing performer to a different performer. However, if the imaging direction of the second imaging device is changed, the imaging direction of the first imaging device also changes, making it difficult to capture the entire image of the stage.
また、特許文献１に記載の撮影システムでは、設定される画像の画角によっては、一方の撮像装置で撮影された画像に他方の撮像装置の一部が写り込むケラレという状態が生じる場合がある。ケラレが生じた状態のままで記録を行うと、大切な撮影画像に本来記録する必要のない撮像装置の影が記録されてしまう。しかしながら、上述の特許文献１に開示された撮影システムでは、このケラレについては考慮されていない。
Further, in the photographing system described in
本発明は、上述した課題に鑑みてなされたものであり、その目的は、複数の撮像装置がそれぞれ違う被写体を撮影することが可能な撮像システムを提供することである。 The present invention has been made in view of the above-described problems, and an object thereof is to provide an imaging system in which a plurality of imaging devices can capture different subjects.
本発明に係わる撮像システムは、第１の撮像装置と第２の撮像装置とを少なくとも有する撮像システムであって、前記第１の撮像装置は、被写体像を結像させる第１の撮影光学系と、前記第１の撮影光学系により結像された被写体像を撮像する第１の撮像手段とを備え、前記第２の撮像装置は、被写体像を結像させる第２の撮影光学系と、前記第２の撮影光学系により結像された被写体像を撮像する第２の撮像手段と、前記第２の撮影光学系の撮像方向を変更させるための駆動手段と、前記第２の撮影光学系の撮像方向を変更して特定の被写体を追尾するように前記駆動手段を制御する制御手段と、を備えることを特徴とする。 An imaging system according to the present invention is an imaging system including at least a first imaging device and a second imaging device, and the first imaging device includes a first imaging optical system that forms a subject image; A first imaging unit that images a subject image formed by the first photographing optical system, and the second imaging device includes a second photographing optical system that forms a subject image; A second imaging unit that images a subject image formed by the second imaging optical system, a driving unit for changing an imaging direction of the second imaging optical system, and a second imaging optical system. Control means for controlling the drive means so as to change the imaging direction and track a specific subject.
本発明によれば、複数の撮像装置がそれぞれ違う被写体を撮影することが可能な撮像システムを提供することができる。 According to the present invention, it is possible to provide an imaging system in which a plurality of imaging devices can capture different subjects.
以下、本発明の実施形態について添付図面を参照して詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
＜第１の実施形態＞
図１は、本発明の第１の実施形態の撮像システムを示す外観斜視図である。図１（ａ）は、撮像システム１を正面側から見た斜視図であり、図１（ｂ）は、撮像システム１を背面側から見た斜視図である。
<First Embodiment>
FIG. 1 is an external perspective view showing an imaging system according to a first embodiment of the present invention. FIG. 1A is a perspective view of the
図１において、撮像システム１は、光軸の向きを変更できない第１のカメラ（以下、固定カメラ）２と、駆動手段を用いて光軸の向きを変更可能な第２のカメラ（以下、パンチルトカメラ）３とを有する。パンチルトカメラ３は、モーター等のアクチュエーターを用いて、電動で光軸の向きを変更可能である。
In FIG. 1, an
パンチルトカメラ３は、固定カメラ２の上面に配置されており、固定カメラ２の上面を基準にパンチルト可能に配置されている。なお、本実施形態では、パンチルトカメラ３と固定カメラ２は一体の撮影装置として構成しているが、本発明はこの形態に限定されるものではない。例えば、パンチルトカメラ３と固定カメラ２は、それぞれ独立した別体のカメラであって、パンチルトカメラ３を固定カメラ２の上面に着脱可能にした構成でも構わない。
The pan /
ここで、Ｘ軸を固定カメラ２の幅方向（横方向）、Ｙ軸を固定カメラ２の高さ方向（縦方向）、Ｚ軸を固定カメラ２の光軸方向（奥行き方向）として、以下説明する。
Here, the X axis is the width direction (horizontal direction) of the
パンベース部９を台座として、パン駆動部１０が、Ｙ軸と平行な軸１４を中心として左右回転することにより、パン動作が行われる。また、パン駆動部１０を台座として、チルト駆動部１１が、Ｘ軸と平行な軸１３を中心として上下回転することにより、チルト動作が行われる。なお、軸１３と軸１４は直交している。チルト駆動部１１には、パンチルトカメラ３のレンズ鏡筒部１２と、レンズ鏡筒部（第２の撮影光学系）１２により結像された被写体像を撮像する後述する撮像素子３０２が配置されている。
With the
パン動作およびチルト動作は、各々を単独で動作させることが出来るだけでなく、パン動作とチルト動作を同時に組み合わせることも出来る。パン動作とチルト動作を同時に組み合わせることで、パンチルトカメラ３は、パンチルトカメラ３を中心とした上下左右の全周の範囲の方向を撮影することが可能となる。
The pan operation and tilt operation can be operated not only independently, but also the pan operation and tilt operation can be combined at the same time. By combining the pan operation and the tilt operation at the same time, the pan /
図２は、パンチルトカメラ３が、パン動作およびチルト動作をした状態の一例を示す図である。図２では、固定カメラ２の正面から見て、右側に４５度（回転角度）のパン動作、上側に６０度のチルト動作を行った状態を示している。前述のように、パン動作、チルト動作は、パンチルトカメラ３を中心として上下左右の全周の範囲にわたって可能である。
FIG. 2 is a diagram illustrating an example of a state in which the pan /
図１（ａ）に示すように、パンチルトカメラ３が固定カメラ２と同じ正面方向を向いた時には、パンチルトカメラ３の光軸と固定カメラ２の光軸は、Ｘ方向の位置が一致している。言い換えると、パンチルトカメラ３の光軸は、固定カメラ２の光軸の真上に平行に配置される状態となる。また、同様に、後述するパンチルトカメラ３の撮像素子も固定カメラ２の撮像素子の真上に平行に配置される状態となる。
As shown in FIG. 1A, when the pan /
パンチルトカメラ３の光軸と固定カメラ２の光軸のＸ方向の位置を一致させることにより、２つのカメラが同じ被写体を撮影した時の、被写体のずれを少なくできる。本実施形態では、パンチルトカメラ３を固定カメラ２の上面に配置しているが、この構成に限定されるものではない。例えば、パンチルトカメラ３を固定カメラ２の側面または下面に配置してもよい。つまりは、パンチルトカメラ３と固定カメラ２が、同じ被写体を撮影できる位置関係に配置されていればよい。
By matching the positions of the optical axis of the pan /
図１（ｂ）に示すように、固定カメラ２の背面には、画像表示部７が配置されている。画像表示部７の右側には、操作部材（操作ボタン）８ａ〜８ｆが配置されている。操作部材８ａ〜８ｆを操作することにより撮影画像を画像表示部７に表示させたり、カメラの様々な設定を行ったりすることができる。
As shown in FIG. 1B, an
固定カメラ２の前面には、レンズ鏡筒部（第１の撮影光学系）４が配置されている。固定カメラ２の上面部には、撮影時にシャッターを切るためのシャッターボタン５、レンズ鏡筒部４のズーム操作を行うズームレバー６が配置されている。シャッターボタン５をユーザが操作すると、パンチルトカメラ３と固定カメラ２で同時に撮影を行うことが可能である。撮像システム１の設定によっては、シャッターボタン５の操作で、パンチルトカメラ３、固定カメラ２のどちらか一方で撮影することも可能である。ユーザがズームレバー６をテレ側に操作すると、固定カメラ２のレンズ鏡筒部４が固定カメラ２から突出する方向に駆動される。また、ワイド側に操作すると、固定カメラ２のレンズ鏡筒部４が固定カメラ２に繰り込まれる方向に駆動される。また、ズームレバー６を操作した際に、パンチルトカメラ３のズームを動作させるように設定することも可能である。
A lens barrel (first photographing optical system) 4 is disposed on the front surface of the fixed
画像表示部７には、固定カメラ２で撮影された画像（再生画像）、およびパンチルトカメラ３で撮影された画像（再生画像）を表示することが可能である。どちらかのカメラの撮影画像（再生画像）を表示している際に、他方のカメラの撮影画像（再生画像）を表示させたい場合は、操作部材８を操作することにより切り替えが可能である。加えて、２つのカメラの撮影画像（再生画像）を同時に表示させることも可能である。さらには、パンチルトカメラ３で撮影された画像、および固定カメラ２で撮影された画像を、不図示の電子機器に無線送信して表示させることも可能である。同様に、どちらか一方の画像、もしくは両方の画像を表示させることも可能である。
The
画像表示部７は、表示画面上にパンチルトカメラ３の撮影中の画像（パンチルトカメラライブビュー画像）および、固定カメラ２の撮影中の画像（固定カメラライブビュー画像）を表示することが可能である。どちらかのカメラのライブビュー画像を表示している際に、他方のカメラのライブビュー画像を表示させたい場合は、操作部材８を操作することにより切り替えが可能である。加えて、２つのカメラのライブビュー画像を同時に表示することも可能である。
The
さらには、パンチルトカメラ３のライブビュー画像、および固定カメラ２のライブビュー画像を、不図示の電子機器に無線送信し、ライブビュー画像を電子機器の画像表示部に表示させることも可能である。ライブビュー画像を電子機器に無線送信する際には、パンチルトカメラ３のライブビュー画像を電子機器の画像表示部に表示させ、固定カメラ２のライブビュー画像を画像表示部７に表示させてもよい。また、逆に、パンチルトカメラ３のライブビュー画像を画像表示部７に表示させ、固定カメラ２のライブビュー画像を電子機器の画像表示部に表示させてもよい。また、両方のライブビュー画像を電子機器の画像表示部に表示させてもよい。なお、本実施形態では、画像表示部７を一つのみ搭載しているが、パンチルトカメラ３専用の画像表示部と固定カメラ２専用の画像表示部の２つの画像表示部を搭載してもよい。
Furthermore, the live view image of the pan /
パンチルトカメラ３で被写体を自動追尾させるには、画像表示部７、もしくは不図示の電子機器にパンチルトカメラのライブビュー画像を表示させて、表示中の被写体を操作部材８を用いて指定する。操作部材８でなくても、画像表示部７および不図示の電子機器の画像表示部がタッチパネルを備え、タッチ操作可能である場合は、表示されている被写体を画面上でタッチして指定してもよい。
In order to automatically track the subject with the pan /
パンチルトカメラ３で撮影中に、ユーザが追尾する被写体を指定することにより、被写体が移動しても、自動でその被写体を追尾することが可能である。パンチルトカメラ３が自動追尾をしている最中は、パンチルトカメラ３は、前述のパン動作とチルト動作を組み合わせて、被写体を追尾することが可能である。
By specifying the subject to be tracked by the user during shooting with the pan /
パンチルトカメラ３が被写体を自動追尾している最中であっても、固定カメラ２を通常通りに操作、および撮影することが可能である。そのため、ユーザは、一度パンチルトカメラ３を自動追尾の設定にしておくと、固定カメラ２の操作に専念することが可能となる。よって、固定カメラ２は、パンチルトカメラ３の被写体とは別の被写体を撮影することも可能である。このような設定の時には、例えば、パンチルトカメラ３で飛行している飛行体（鳥や飛行機）を撮影中に、固定カメラ２では地上にいる被写体を同時に撮影することが可能となる。これは、両方のカメラが動画撮影中であっても、静止画撮影中であってもよく、一方のカメラが動画撮影中で、他方のカメラが静止画撮影中であってもよい。
Even when the pan /
図３は本実施形態の撮像システム１の構成を示すブロック図である。
FIG. 3 is a block diagram illustrating a configuration of the
まず、パンチルトカメラ３側の構成について説明する。光学系／光学系駆動機構３０１は、レンズ鏡筒部１２を含み、撮影する際の光学系の焦点調節やズームの駆動を行う。撮像素子３０２は、光学系／光学系駆動部３０１により結像された光学情報を電子情報に変換する。画像処理部３０３は、撮像素子３０２により電子情報に変換されたデータに対して、圧縮処理やその他の画像処理を行う。画像記録部３０４は、画像処理部３０３から出力された画像データを格納する。
First, the configuration on the pan /
ＣＰＵ３０５は、パンチルトカメラ３の全ての処理を統合して各種演算を行ったり、各部に指示を出したりする。画像表示部３０６は、画像記録部３０４に格納された画像データを表示したり、撮影中のライブビュー画像を表示したりする。画像表示部３０６は、図１においては不図示であるが、パンチルトカメラ３に備えられている。
The
パンチルト駆動部３０７は、図１に示したパンベース部９、パン駆動部１０、チルト駆動部１１を含み、パンチルトカメラ３のパン動作、チルト動作のための駆動を行う。パンチルト制御部３０８は、パンチルト駆動部３０７がパン動作、チルト動作をするための制御部であり、ＣＰＵ３０５からの指示によりパン動作、チルト動作を制御する。パンチルト位置検出部３０９は、パンチルト駆動部３０７のパン、およびチルトの位置検出を行う。図２の例では、パン角度：右側４５度、チルト角度：上側６０度の位置検出を行い、ＣＰＵ３０５にその情報を入力する。
The pan /
次に固定カメラ２の構成について説明する。光学系／光学系駆動機構２０１は、図１に示したレンズ鏡筒部４を含み、撮影する際の光学系の焦点調節やズームの駆動を行う。撮像素子２０２は、光学系／光学系駆動部２０１により結像された光学情報を電子情報に変換する。画像処理部２０３は、撮像素子２０２により電子情報に変換されたデータに対して、圧縮処理やその他の画像処理を行う。画像記録部２０４は、画像処理部２０３から出力された画像データを格納する。
Next, the configuration of the fixed
ＣＰＵ２０５は、固定カメラ２の全ての処理を統合して各種演算を行ったり、各部に指示を出したりする。画像表示部２０６は、図１に示した画像表示部７を含み、画像記録部２０４で格納された画像データを表示したり、撮影中のライブビュー画像を表示したりする。操作処理部２０７は、操作部材８の操作により入力された指令を受け付ける処理を行い、ＣＰＵ２０５に入力する。
The
外部機器接続部２０８は、外部の電子機器を、無線もしくは有線で撮像システム１に接続する。外部機器接続部２０８によって接続された電子機器は、パンチルトカメラ３の画像表示、撮影操作、その他の操作、固定カメラ２の画像表示、撮影操作、その他の操作などを撮像システム１の外部から指示することができる。
The external
被写体検出部２０９は、操作処理部２０７により指定された被写体の画像データ上の位置や大きさを算出する。被写体像はライブビュー画像として表示される。ライブビュー動作でサンプリングした画像データに対して連続的に被写体検出を行うことにより、パンチルトカメラ３は被写体の動きを追尾することが可能となる。追尾している被写体を後述する被写体追尾領域で検出した場合は、ＣＰＵ３０５は、パンチルト駆動制御部３０８に対して、パンチルト駆動部３０７を駆動して被写体を画角内に収めるよう指示する。
The
画像データ上の被写体の位置は、画像をいくつかのエリアに分けて、被写体がどのエリアに進入しているかを算出し、そのエリアを被写体の位置とすることにより検出する。エリアを細かくすることにより、詳細な位置検出を行うことが可能となる。このような処理により、ユーザは、パンチルトカメラ３の動作を気にせず、固定カメラ２でパンチルトカメラ３とは異なる被写体を撮影することが出来る。
The position of the subject on the image data is detected by dividing the image into several areas, calculating which area the subject has entered, and setting that area as the position of the subject. By making the area fine, detailed position detection can be performed. Through such processing, the user can take an image of a subject different from the pan /
パンチルトカメラ３と固定カメラ２は、お互いのＣＰＵ３０５とＣＰＵ２０５で通信を行うことで、さまざまなデータを相互にやり取りすることが可能である。具体的なデータのやり取りは、以下の通りである。
The pan /
パンチルトカメラ３の撮像素子３０２で撮影中のライブビュー画像のデータを固定カメラ２に送ることにより、固定カメラ２の画像表示部２０６でパンチルトカメラ３のライブビュー画像を表示することが出来る。固定カメラ２の撮像素子２０２で撮影中のライブビュー画像のデータをパンチルトカメラ３に送ることにより、パンチルトカメラ３の画像表示部３０６で固定カメラ２のライブビュー画像を表示することが出来る。
By sending live view image data being captured by the
パンチルトカメラ３の画像記録部３０４に格納された記録画像のデータを固定カメラ２に送ることにより、固定カメラ２の画像表示部２０６でパンチルトカメラ３の記録画像を表示することが出来る。固定カメラ２の画像記録部２０４に格納された記録画像のデータをパンチルトカメラ３に送ることにより、パンチルトカメラ３の画像表示部３０６で固定カメラ２の記録画像を表示することが出来る。
By sending the recorded image data stored in the
パンチルトカメラ３の光学系／光学系駆動機構３０１の画角、ズーム量、レンズ鏡筒部の大きさ（レンズ鏡筒部の長さ、太さ）、ズーム駆動の速さを固定カメラ２側に送ることで、パンチルトカメラ３の光学系に合わせた動作を固定カメラ２が行うことが出来る。例えば、パンチルトカメラ３の光軸の向きを変更中に固定カメラ２のレンズ鏡筒部４が画角に写り込む場合には、固定カメラ２のレンズ鏡筒部をワイド側（つまり繰り込む側）に駆動して、レンズ鏡筒部４が写り込まないように協調動作させることが出来る。
The angle of view of the optical system / optical
固定カメラ２の光学系／光学系駆動機構２０１の画角、ズーム量、レンズ鏡筒部の大きさ（レンズ鏡筒部の長さ、太さ）、ズーム駆動の速さをパンチルトカメラ３側に送ることで、固定カメラ２の光学系に合わせた動作をパンチルトカメラ３が行うことが出来る。例えば、パンチルトカメラ３の光軸の向きを変更中に固定カメラ２のレンズ鏡筒部４が画角に写り込む場合に、パンチルトカメラ３の光軸移動を制限させて、固定カメラ２のレンズ鏡筒部４が写り込まないように協調動作させることが出来る。
The angle of view of the optical system / optical
パンチルトカメラ３のパンチルト位置検出部３０９で検出されたパンチルトカメラ３の位置、パンチルト駆動速度を固定カメラ２側に送ることにより、パンチルトカメラ３のパンチルト位置やパンチルト駆動速度に合わせた動作を固定カメラ２が行うことが出来る。例えば、パンチルトカメラ３の位置情報を固定カメラ２の画像表示部７に表示することにより、パンチルトカメラ３が捉えている被写体を固定カメラ２の操作をしている最中でも認識しやすくなる。
By sending the position of the pan /
固定カメラ２の操作された情報を、操作処理部２０７からパンチルトカメラ３に送ることにより、操作された内容に沿ってパンチルトカメラ３を操作することが可能である。例えば、操作部材８ｃの左側を押すと、パンチルトカメラ３は、固定カメラ２の背面から見て、左側へのパン動作を電動で行う。他の方向への移動も、ユーザがキーの上や下や右、もしくは斜め方向を押すことで、パン動作、チルト動作を任意に組み合わせて行うことが可能となる。
By operating the operation information of the fixed
固定カメラ２の外部機器接続部２０８に外部機器を接続することにより、パンチルトカメラ３の画像表示、撮影操作、その他の操作、固定カメラ２の画像表示、撮影操作、その他の操作を外部機器から行うことが可能である。
By connecting an external device to the external
固定カメラ２とパンチルトカメラ３がそれぞれ電池を備えている場合、固定カメラ２の電池残量情報とパンチルトカメラ３の電池残量情報を相互にやり取りすることが可能である。そして、例えば、一方の電池残量が少ない場合は、他方の電池から電源を供給することもできる。
When the fixed
不図示であるが、パンチルトカメラ３はＧＰＳを備えており、ＧＰＳ情報に基づいて、時刻情報や地図上の位置情報を取得することが可能であり、時刻情報を表示したり、画像データに位置情報を付加したりすることもできる。さらには、パンチルトカメラ３のＧＰＳ情報を固定カメラ２に送信して、固定カメラ２の時刻情報に使用したり、固定カメラ２の画像データに位置情報を付加したりすることもできる。ＧＰＳを備えるのは、パンチルトカメラ３側ではなく、固定カメラ２側であってもよく、その場合は、固定カメラ２のＧＰＳ情報をパンチルトカメラ３に送信してもよい。
Although not shown, the pan /
図４は、被写体（特定の被写体）を追尾する処理を説明する図である。図４は、画像表示部７で表示される画角全体（画面全体）に対して所定の比率よりも外側の領域（表示画面の周囲の領域）を被写体追尾領域１５として示している。例えば、画面の中心点を０％、画面全体を１００％とし、画面全体に対して８０％となる位置を被写体追尾領域１５の境界として設定する場合、画面全体における８０〜１００％の領域が被写体追尾領域１５となる。画像内の被写体追尾領域１５に追尾枠１６の一部が進入すると、パンチルト駆動制御部３０８は、パンチルト動作を開始するよう制御される。また、パンチルト位置検出部３０９は、パンチルト移動前のパンチルトカメラ３の位置を記憶する。パンチルト動作中のパンチルトの駆動速度は、被写体のサイズや移動速度に応じて予め設定される。また、パンチルトの駆動速度を被写体のサイズや移動速度に応じて適宜算出してもよい。これにより、被写体の追尾をすることができる。
FIG. 4 is a diagram illustrating processing for tracking a subject (a specific subject). FIG. 4 shows a
図４（ａ）では、追尾枠１６が被写体追尾領域１５に進入しており、画像処理部３０３は追尾枠１６が画面上のどの位置にあるかの情報を取得する。図４（ａ）の状態では、追尾枠１６は画像中心より左上に位置しているという情報を取得する。画像処理部３０３により取得された位置情報に基づいて、追尾枠１６が被写体追尾領域１５から出るようにパンチルト駆動制御部３０８がパンチルトカメラ３をパンチルト駆動させる。図４（ａ）では、追尾枠１６は画像中心より左上に位置しているため、パンチルトカメラ３を図２に示したように固定カメラ２の正面から見て、右側に４５度パン動作させ、上側に６０度チルト動作させる。このように駆動させると、図４（ｂ）のように、追尾枠１６は被写体追尾領域１５から出る。
In FIG. 4A, the
本実施形態では、被写体追尾領域１５の境界を画面全体に対して８０％となる位置に設定しているが、被写体を画面中央で追尾したい場合は、８０％から例えば２０％に変更して画面中央に集まるようにしてもよい。
In the present embodiment, the boundary of the
図５は、被写体を追尾する処理を示すフローチャートである。 FIG. 5 is a flowchart showing processing for tracking a subject.
Ｓ１０では、追尾枠１６が被写体追尾領域１５に進入しているか否かを判別する。Ｓ１０で、ＹＥＳ判定、すなわち追尾枠１６が被写体追尾領域１５に進入している場合は、Ｓ１１に進む。Ｓ１０で、ＮＯ判定、すなわち追尾枠１６が被写体追尾領域１５に進入していない場合は、Ｓ１０へ戻る。
In S10, it is determined whether or not the
Ｓ１１では、追尾枠１６が画角内のどの位置あるかの位置情報を取得し、被写体の位置を把握する。Ｓ１２では、Ｓ１１で取得した被写体の位置情報に基づいて、パンチルトカメラ３の光軸を追尾枠１６が被写体追尾領域１５から出るようにパンチルト駆動させる。パンチルトカメラ３の光軸を駆動させた後は、Ｓ１３へと進む。
In S11, position information indicating where the
Ｓ１３では、追尾枠１６の大きさ（被写体の大きさ）が所定の大きさか否かを判定する。この処理は、Ｓ１２で、パンチルトカメラ３の光軸駆動の最中に被写体がパンチルトカメラ３に近づいたり、離れたりした場合を想定しており、被写体の大きさの変動があった場合は、Ｓ１４へと進む。Ｓ１３でＹＥＳ判定、すなわち被写体の大きさの変動がない場合は、Ｓ１０へと戻る。
In S13, it is determined whether or not the size of the tracking frame 16 (the size of the subject) is a predetermined size. This process assumes that the subject approaches or moves away from the pan /
以上説明したように、撮像システム１がパンチルトカメラ３と固定カメラ２を備えることにより、一つの被写体を２つのカメラで撮影することもでき、かつ、２つの被写体を２つのカメラで撮影することもできる。また、２つの被写体をパンチルトカメラ３と固定カメラ２で同時に撮影する際は、パンチルトカメラ３が被写体を自動追尾するため、ユーザは、固定カメラ２だけを操作すればよく、２つのカメラを同時に操作するという煩雑な作業を回避することが出来る。
As described above, since the
次に、本実施形態におけるパンチルトカメラ３の撮像方向を画像表示部７に表示する例について説明する。まず、パンチルトカメラ３の方向を画像表示部７に表示する方法について説明し、次にその表示する方法のフローチャートについて説明する。
Next, an example in which the imaging direction of the pan /
パンチルトカメラ３の方向とは、固定カメラ２の光軸に対するパンチルトカメラ３の光軸の方向のずれ量を示すものであり、パンチルトカメラ３の光軸と固定カメラ２の光軸の方位差を算出することにより求められる。パンチルトカメラ３の方向を表示する方法として、本実施形態では矢印を用いる。
The direction of the pan /
図６は、パンチルトカメラ３および固定カメラ２の撮影状態において、固定カメラ２のライブビュー画像を画像表示部７に表示している画面を示す図である。図６（ａ）は、図１に示したパンチルトカメラ３と固定カメラ２の位置関係において、固定カメラ２が撮影しているライブビュー画像を画像表示部７に表示している画面を示している。
FIG. 6 is a diagram showing a screen displaying a live view image of the fixed
図１では、パンチルトカメラ３の光軸は、固定カメラ２の光軸と平行で、かつ、お互いのカメラの光軸の向いている方向が一致している。これは、パンチルトカメラ３がパン動作およびチルト動作を一切していない、初期位置を示している。
In FIG. 1, the optical axis of the pan /
この状態のとき、固定カメラ２のライブビュー画像では、被写体２０の周りに配置されている複数の矢印２１が半透明状態に表示されるか、あるいは何も表示されていない状態となる。つまり、パンチルトカメラ３の方向は表示されない。よって、ユーザは、パンチルトカメラ３と固定カメラ２が同じ方向を向いていることがわかる。同じ方向を向いていることが分かるので、固定カメラ２でパンチルトカメラ３と同じ方向の被写体を撮影することが容易となる。
In this state, in the live view image of the fixed
次に、パンチルトカメラ３がパン動作、チルト動作をした場合について説明する。図６（ｂ）は、図２に示したパンチルトカメラ３と固定カメラ２の位置関係の場合に、画像表示部７に表示される、固定カメラ２が撮影しているライブビュー画像を示している。図２は、前述のように、パンチルトカメラ３が固定カメラ２の正面から見て右側に４５度のパン動作、上側に６０度のチルト動作をした後の状態を示している。
Next, a case where the pan /
この状態のとき、固定カメラ２のライブビュー画像では、図６（ｂ）のように被写体２０の周りに配置されている矢印のうちの矢印２２が実線表示で点灯される状態になり、パンチルトカメラ３の方向を表示する。パンチルトカメラ３が右側へ４５度のパン動作、上側に６０度のチルト動作をしているので、その方向に対応した左上の矢印２２が実線表示で点灯される。つまり、パンチルトカメラ３の方向と矢印２２の方向とが一致するように表示される。ユーザが矢印の方向に固定カメラ２の光軸を動かせば、固定カメラ２の光軸とパンチルトカメラ３の光軸が一致することを表している。
In this state, in the live view image of the fixed
矢印が点灯することによって、ユーザは、パンチルトカメラ３の光軸と固定カメラ２の光軸が異なる方向を向いていることがわかる。そして、ユーザは、画像表示部７から目を離すこと無く、矢印２２を確認することにより、どの方向に固定カメラ２の光軸方向を動かせばよいか把握できるようになり、固定カメラ２の光軸をパンチルトカメラ３の光軸と同じ方向に向けることが容易となる。
When the arrow is lit, the user can see that the optical axis of the pan /
図６（ｃ）は、パンチルトカメラ３が固定カメラ２の正面から見て、１８０度のパン動作、０度のチルト動作をした（チルト動作していない）後に、固定カメラ２の画像表示部７に表示される画面を示す図である。
FIG. 6C shows the
パンチルトカメラ３が１８０度のパン動作のみであることから、パンチルトカメラ３の光軸は、固定カメラ２と光軸が平行であるが、お互いのカメラが向いている方向が逆である。この状態では、固定カメラ２を水平に１８０度回転させると、パンチルトカメラ３と同じ方向を向かせることが出来るので、矢印２３が点灯する。矢印２３は、１８０度回転するような図形となっている。
Since the pan /
図６（ｄ）は、パンチルトカメラ３が一定の閾値を超えてパン動作、チルト動作をした時の固定カメラ２の画像表示部７に表示される画面を示す図である。図６（ｄ）では、パンチルトカメラ３が、固定カメラ２の正面から見て、右側に９０度のパン動作を行い、チルト動作はしていない状態を示しており、パン動作の一定の閾値を仮に７５度とした場合の画面を示している。
FIG. 6D is a diagram showing a screen displayed on the
パンチルトカメラ３が右側に９０度のパン動作を行い、チルト動作はしていない状態であることから、画像表示部７では、矢印２４が点灯するが、閾値の７５度を超えると、通常の矢印表示に加えて、さらに矢印２４の大きさを変えて強調表示する。図６（ｄ）のように矢印の大きさを大きくすることにより、通常の矢印よりも、パンチルトカメラ３のパン動作の角度が大きいことが分かる。ユーザは、矢印２４の大きさを見ることで、パンチルトカメラ３の動作の量が大きいことが分かり、固定カメラ２を操作する角度を大きくすれば、パンチルトカメラ３の向きと合わせられることが分かる。図６（ｄ）は、パン動作のみを強調表示した図であるが、チルト動作のみ、もしくは、パン動作とチルト動作の両方が閾値を越えた場合は、同様にパンチルトカメラ３のパン動作、チルト動作に合わせた方向の矢印を強調表示することが出来る。
Since the pan /
図６（ｄ）では、強調表示を矢印の大きさにしたが、強調表示は、これに限定されるものではない。例えば、図６（ｅ）のように矢印を複数重ねた表示（矢印２５）にしたり、矢印を高速に点滅させたり（不図示）、図６（ｆ）のように矢印の近傍に文字で「ＦＡＲ」や「遠い」などと表示したり、矢印の近傍に数字を付加（不図示）したりして表現してもよい。矢印の近傍に数字を付加して強調表現する際は、矢印の近傍に付加する数字の大さでパンチルトカメラ３の光軸の初期位置からの角度の大きさを示してもよい。逆に、矢印の近傍に付加される数字が小さい方がパンチルトカメラ３の光軸の初期位置からの駆動角度が大きくなっていてもよい。
In FIG. 6 (d), the highlighting is the size of the arrow, but the highlighting is not limited to this. For example, a display in which a plurality of arrows are overlapped (arrow 25) as shown in FIG. 6 (e), the arrow blinks at a high speed (not shown), or a character “ It may be expressed by displaying “FAR” or “far” or by adding a number (not shown) in the vicinity of the arrow. When emphasizing expression by adding a number in the vicinity of the arrow, the magnitude of the angle from the initial position of the optical axis of the pan /
いろいろな強調表現の方法について説明したが、つまりは、光軸のずれ量が閾値以上である場合は、閾値未満である場合と異なる状態の表示を行えばよく、ユーザに、通常か強調かを判別できるものなら何でもよい。また、パンチルトカメラ３の光軸の位置を常に検出しているため、強調表現もリアルタイムで表現が可能である。その一例として、パンチルトカメラ３の光軸の駆動角度によって、矢印の大きさを無段階でリアルタイムに変更させることもできる。
Various methods of emphasis have been described. In other words, if the amount of deviation of the optical axis is greater than or equal to a threshold value, it may be displayed in a different state from when it is less than the threshold value. Anything can be identified. In addition, since the position of the optical axis of the pan /
次に、パンチルトカメラ３の方向を表示する動作について説明する。図７は、パンチルトカメラ３の方向を表示する動作を示すフローチャートである。
Next, an operation for displaying the direction of the pan /
Ｓ１０１で、パンチルトカメラ３の位置検出を行う。パンチルトカメラ３が初期位置に対しどのくらいパン動作および、チルト動作をしているかの位置の検出を行う。位置の検出方法としては、例えば、光学式、磁気式のエンコーダなどをパン及びチルトの回転軸に直接取り付けて、回転対象の絶対回転位置を検出する方法などがある。
In S101, the position of the pan /
Ｓ１０２では、固定カメラ２の光軸に対してパンチルトカメラ３の光軸がずれている方向を前述した回転検出結果に基づいて検出する。Ｓ１０３では、Ｓ１０２の結果に基づいて、固定カメラ２の光軸とパンチルトカメラ３の光軸のズレ角度を詳細に算出する。なお、この結果は、Ｓ１０５で用いられる。
In S102, the direction in which the optical axis of the pan /
Ｓ１０４では、パンチルトカメラ３の光軸と固定カメラ２の光軸が平行であるか否かを判定する。Ｓ１０４で、ＹＥＳ判定、すなわちパンチルトカメラ３の光軸と固定カメラ２の光軸が平行である場合は、Ｓ１０７に進む。
In S104, it is determined whether or not the optical axis of the pan /
Ｓ１０７では、パンチルトカメラ３と固定カメラ２の向いている方向が同じか否かを判定する。Ｓ１０７で、ＹＥＳ判定、すなわちパンチルトカメラ３と固定カメラ２が同じ方向を向いている状態であると判定された場合は、Ｓ１０８へと進む。
In S107, it is determined whether or not the direction in which the pan /
Ｓ１０８では、パンチルトカメラ３の撮影範囲内にある被写体を固定カメラ２の撮影範囲内に捉えているか否かを判定する。この判定についての詳細は後述する。Ｓ１０８で、ＹＥＳ判定、すなわちパンチルトカメラ３と固定カメラ２が同じ被写体を捉えている場合は、Ｓ１１１へと進む。Ｓ１１１では、パンチルトカメラ３と固定カメラ２が同じ方向を向いていて、且つ固定カメラ２がパンチルトカメラ３と同じ被写体を捉えているので、画像表示部７にパンチルトカメラ３の方向を示す矢印を表示しない。その後、Ｓ１０１に戻る。
In S <b> 108, it is determined whether or not a subject within the shooting range of the pan /
Ｓ１０８で、ＮＯ判定、すなわちパンチルトカメラ３と固定カメラ２が同じ被写体を捉えていない場合は、Ｓ１１２へと進む。Ｓ１１２では、パンチルトカメラ３の画角内のどの領域に被写体が位置しているかの位置検出を行う。
In S108, if NO, that is, if the pan /
Ｓ１１３では、パンチルトカメラ３の撮影範囲の画角と固定カメラ２の撮影範囲の画角との差がある一定以上あるか否かを判定する（閾値を越えたか否かを判定する）。Ｓ１１３で、ＹＥＳ判定、すなわちパンチルトカメラ３の画角と固定カメラ２の画角との差が一定以上ある場合は、Ｓ１１０へと進む。Ｓ１１０では、パンチルトカメラ３の方向を強調して、固定カメラ２の撮影画像が表示されている画像表示部７に表示する。その後、Ｓ１０１に戻る。
In S113, it is determined whether or not the difference between the angle of view of the shooting range of the pan /
Ｓ１１３で、ＮＯ判定、すなわちパンチルトカメラ３の画角と固定カメラ２の画角との差が一定未満である場合は、Ｓ１１４へと進み、パンチルトカメラ３の方向を固定カメラ２の撮影画像が表示されている画像表示部７に表示する。その後、Ｓ１０１に戻る。
In S113, if NO is determined, that is, if the difference between the angle of view of the pan /
ここで、Ｓ１０８以下の処理は、以下の状況の場合を想定している。 Here, the processing of S108 and after assumes the following situation.
例えば、パンチルトカメラ３の画角と固定カメラ２の画角を比較し、パンチルトカメラ３の方が広角の場合（画角の広さ：パンチルトカメラ３の画角＞固定カメラ２の画角）について以下に説明する。
For example, the angle of view of the pan /
図４で説明したとおり、被写体追尾領域１５の境界が画面全体に対して８０％となる位置とした場合、パンチルトカメラ３が被写体を画像の中心で捉えているとは限らない。パンチルトカメラ３の撮影範囲の左上の隅に被写体を捉えていた場合では、固定カメラ２の画角はパンチルトカメラ３の画角より狭いため、光軸が平行で、且つ光軸の向きが同じであっても、固定カメラ２はパンチルトカメラ３の被写体を捉えられるとは限らない。もし、画角の差で固定カメラ２がパンチルトカメラ３の被写体を捉えられない場合は、パンチルトカメラ３の画角のどの位置に被写体があるかを算出して、その被写体の位置の表示を行う。また、パンチルトカメラ３の画角と固定カメラ２の画角との差が大きい場合は、固定カメラ２を動かす量が大きくなるため、パンチルトカメラ３の方向を表示する際は、強調して表示する。
As described with reference to FIG. 4, when the boundary of the
図７の説明に戻って、Ｓ１０７で、ＮＯ判定、すなわちパンチルトカメラ３と固定カメラ２が違う方向を向いている状態であると判定された場合は、Ｓ１０９へと進む。Ｓ１０９では、パンチルトカメラ３と固定カメラ２は、向いている方向が１８０度違うので、１８０度回転する表示を行う（前述の図６（ｃ）の画面表示）。その後、Ｓ１０１に戻る。
Returning to the description of FIG. 7, if it is determined NO in S107, that is, if it is determined that the pan /
Ｓ１０４で、ＮＯ判定、すなわちパンチルトカメラ３の光軸と固定カメラ２の光軸の平行が一致してない場合は、Ｓ１０５へと進む。Ｓ１０５では、Ｓ１０３で算出されたパン動作の角度、チルト動作の角度がある一定の値以上か否かを判定する（閾値を越えたか否かを判定する）。Ｓ１０５で、ＮＯ判定、すなわちパン動作の角度、チルト動作の角度が閾値を越えていない場合は、Ｓ１０６へと進み、パンチルトカメラ３の方向を固定カメラ２の撮影画像が表示されている画像表示部７に表示する。その後、Ｓ１０１に戻る。
In S104, if NO, that is, if the parallel optical axis of the pan /
Ｓ１０５で、ＹＥＳ判定、すなわちパン動作の角度、チルト動作の角度が閾値を越えている場合は、Ｓ１１０へと進み、パンチルトカメラ３の方向を強調して、固定カメラ２の撮影画像が表示されている画像表示部７に表示する。その後、Ｓ１０１に戻る。
If the determination in S105 is YES, that is, if the pan operation angle and tilt operation angle exceed the threshold, the process proceeds to S110, where the direction of the pan /
なお、本実施形態では、Ｓ１０４でパンチルトカメラ３の光軸と固定カメラ２の光軸が完全に平行か否かを判定しているが、完全に平行でなくても、平行度合にある程度の幅を持たせて、その幅の範囲内に収まっていれば、平行と判定してもよい。平行度合にある程度の幅を持たせることにより、パンチルトカメラ３の方向を頻繁に表示させないようにすることもできる。
In this embodiment, it is determined in S104 whether or not the optical axis of the pan /
また、本実施形態では、Ｓ１０５の判定における閾値を一つとしたが、閾値は一つだけではなく複数あってもよい。複数の閾値を設定した場合は、例えば、それぞれの閾値での矢印の大きさを変え、段階的に矢印の大きさを変えるようにしてもよい。 In the present embodiment, one threshold is used in the determination in S105, but there may be a plurality of thresholds instead of only one. When a plurality of threshold values are set, for example, the size of the arrow at each threshold value may be changed, and the size of the arrow may be changed step by step.
図８は、本実施形態の変形例を示したフローチャートであり、図７にＳ１２０を加えたものである。図７はパンチルトカメラ３と固定カメラ２が一体化したカメラシステム１を前提としているが、図８はパンチルトカメラ３と固定カメラ２がそれぞれ分かれている撮像装置であって、パンチルトカメラ３と固定カメラ２が着脱可能であることを前提としている。
FIG. 8 is a flowchart showing a modification of the present embodiment, which is obtained by adding S120 to FIG. 7 assumes a
図８と図７は、Ｓ１２０の違いのみであるため、相違点のＳ１２０について説明する。パンチルトカメラ３と固定カメラ２が着脱式であるため、まずＳ１２０において、それぞれのカメラの情報をやり取りする。例えば、パンチルトカメラ３側の情報としては、画角情報、パン動作の範囲、チルト動作の範囲、パン動作の速度、チルト動作の速度、その他撮影に必要な情報である。固定カメラ２側の情報としては、画角情報、ズームする際のレンズ鏡筒の繰り出し量、その他撮影に必要な情報である。Ｓ１２０において、パンチルトカメラ３と固定カメラ２で、お互いのカメラ情報を相互にやり取りした後は、図７に示した通り、Ｓ１０１へと進む。その後は、図７で説明したとおりである。
Since FIG. 8 and FIG. 7 are only differences in S120, the difference S120 will be described. Since the pan /
以上説明したとおり、固定カメラ２の画像表示部７にパンチルトカメラ３の方向を表示することにより、ユーザは、パンチルトカメラ３の方向を画像表示部７から視線を外すことなく認識できる。そのため、固定カメラ２をパンチルトカメラ３の向いている方向に合わせやすくなる。
As described above, by displaying the direction of the pan /
また、パンチルトカメラ３の方向を強調表示することにより、ユーザは固定カメラ２を向ける角度が分かりやすくなる。これにより、被写体の検知可能な範囲を限定することなく、被写体の動きや撮像装置の状態によらず、被写体の位置情報の表示を広範囲にすることが出来る。さらには、被写体の検知可能な範囲が限定されていないため、被写体を見失う可能性も低くなる。
Further, by highlighting the direction of the pan /
次に、本実施形態におけるパンチルトカメラのケラレを回避するシステムについて説明する。図９はパンチルトカメラ３と固定カメラ２を使用した撮影における、パンチルトカメラ３の撮影画像を示した図である。
Next, a system for avoiding vignetting of the pan / tilt camera in the present embodiment will be described. FIG. 9 is a view showing a photographed image of the pan /
図９（ａ）は、図１に示したパンチルトカメラ３と固定カメラ２の光軸が略平行で、且つお互いのカメラが向いている方向が略一致した状態における、ケラレ回避動作を行わない状態のパンチルトカメラ３の撮影画像を示している。撮影画像内に固定カメラ２のレンズ鏡筒部４に装着されているレンズフードが影５０１として映り込んでしまっている。レンズフードが装着された状態のままで記録を行うと、大切な画像に本来記録する必要のない撮像装置の影が記録されてしまう。
FIG. 9A shows a state in which the vignetting avoidance operation is not performed in the state where the optical axes of the pan /
図９（ｂ）は、図１に示したパンチルトカメラ３と固定カメラ２の光軸が略平行で、且つお互いのカメラが向いている方向が略一致した状態における、ケラレ回避動作を行わない状態のパンチルトカメラ３の撮影画像を示している。図９（ｂ）ではレンズフードがないため、図９（ａ）の場合よりもケラレは少ないが、やはり撮影画像内に固定カメラ２のレンズ鏡筒部４が影５０１として映り込んでしまっている。ケラレが生じた状態のままで記録を行うと、大切な画像に本来記録する必要のない撮像装置の影が記録されてしまう。
FIG. 9B shows a state in which the vignetting avoiding operation is not performed in a state where the optical axes of the pan /
図９（ｃ）は後述するパンチルトカメラ３側のケラレ回避制御を行った場合のパンチルトカメラ３の撮影画像を示している。パンチルトカメラ３の光軸を移動させることによりレンズ鏡筒部４が影５０１として写り込むことが回避されている。
FIG. 9C shows a captured image of the pan /
図１０は、パンチルトカメラ３の記録画像に固定カメラ２の鏡筒部４が写り込むことを回避するための、パンチルトカメラ３側の制御用フローチャートである。なお、以下では、固定カメラ２にパンチルトカメラ３が着脱自在に装着されている場合について説明する。
FIG. 10 is a control flowchart on the pan /
Ｓ４０１で、固定カメラ２はパンチルトカメラ３の装着確認を行う。パンチルトカメラ３の装着が確認された場合、固定カメラ２の制御のための動作を開始する。Ｓ４０２では、装着が確認されたパンチルトカメラ３と通信を行い、パンチルトカメラ３の取り付け位置に関する情報や、撮影画角に関する情報、光軸のベクトル情報等を取得する。
In step S <b> 401, the fixed
Ｓ４０３では、Ｓ４０２で得られた情報から、パンチルトカメラ３の撮影画像に固定カメラ２のレンズ鏡筒部４に取り付ケラレたレンズフードなどのアクセサリーが映り込んでいるか否かの判定を行う。Ｓ４０３において、撮影画角内に一定以上のケラレがあると判定された場合は、Ｓ４０４へ進む。Ｓ４０３において、レンズフードなどのアクセサリーが装着されて映り込んでいる場合のパンチルトカメラ３の撮影画像は、図９（ａ）に示したようになる。また、Ｓ４０３において撮影画角内に一定以上のケラレが無いと判定された場合は、Ｓ４０５へ進む。
In S403, it is determined from the information obtained in S402 whether an accessory such as a lens hood attached to the lens barrel portion 4 of the fixed
Ｓ４０４では、レンズフードなどのアクセサリーが装着されているか否かが判定される。Ｓ４０４で、レンズフードなどのアクセサリーが装着されている場合は、Ｓ４０８へと進み、アクセサリーを外して、Ｓ４０１に戻る。Ｓ４０４で、アクセサリーが装着されていない場合は、Ｓ４０５へと進む。 In S404, it is determined whether or not an accessory such as a lens hood is attached. If an accessory such as a lens hood is attached in S404, the process proceeds to S408, the accessory is removed, and the process returns to S401. If no accessory is attached in S404, the process proceeds to S405.
Ｓ４０５では、固定カメラ２のレンズ鏡筒部４を、一旦固定カメラ２から突出する方向（ＴＥＬＥ側）に駆動し、その後レンズ鏡筒部４が固定カメラ２に繰り込まれる方向（ＷＩＤＥ側）に駆動する。Ｓ４０５の動作後に、レンズ鏡筒部４が映り込んでいる場合のパンチルトカメラ３の撮影画像は図９（ｂ）に示すようになる。
In S405, the lens barrel portion 4 of the fixed
Ｓ４０６では、パンチルトカメラ３の撮影画像にまだレンズ鏡筒部４が映り込んでいるか否かが判定される。Ｓ４０６において、レンズ鏡筒部４が映り込んでいないと判定された場合は、Ｓ４０１に戻り、現在の状態が維持される。Ｓ４０６においてレンズ鏡筒部４が映り込んでいると判定された場合は、Ｓ４０７に進む。
In S <b> 406, it is determined whether or not the lens barrel 4 is still reflected in the captured image of the pan /
Ｓ４０７では、パンチルトカメラ３を、撮影画像内にレンズ鏡筒部４が映り込まなくなる方向にチルト動作させる。Ｓ４０７の動作を行った場合のパンチルトカメラ３の撮影画像は図９（ｃ）に示すようになる。
In step S407, the pan /
以上のような動作により、パンチルトカメラ３の撮影画像内に固定カメラ２の鏡筒先端部に装着されたレンズフードが写り込んでしまうことを防止することができる。
By the operation as described above, it is possible to prevent the lens hood attached to the distal end portion of the lens barrel of the fixed
なお、本実施形態では、レンズ鏡筒部４に装着されているアクセサリーは、レンズフードであるが、例えばレンズフィルター、コンバージョンレンズ、アダプターなどが装着されても、同様の効果が得られる。 In the present embodiment, the accessory attached to the lens barrel portion 4 is a lens hood. However, for example, the same effect can be obtained even if a lens filter, a conversion lens, an adapter, or the like is attached.
次に、本実施形態におけるパンチルトカメラのケラレを回避するシステムの変形例について説明する。 Next, a modification of the system for avoiding vignetting of the pan / tilt camera in the present embodiment will be described.
図１１は、パンチルトカメラ３と固定カメラ２を使用した撮影における、パンチルトカメラ３の撮影画像を示した図である。
FIG. 11 is a view showing a captured image of the pan /
図１１（ａ）は、図１に示したパンチルトカメラ３と固定カメラ２の光軸が略平行でかつ、お互いのカメラが向いている方向が略一致した状態における、ケラレ回避動作を行わない状態のパンチルトカメラ３の撮影画像を示している。撮影画像内に固定カメラ２のレンズ鏡筒部４が影５０１として映り込んでしまっている。このようにケラレが生じた状態のままで記録を行うと、大切な画像に本来記録する必要のない撮像装置の影が記録されてしまう。この状態は後述する図１２（ａ）の状態に対応する。
FIG. 11A shows a state in which the vignetting avoiding operation is not performed in a state where the optical axes of the pan /
図１１（ｂ）は、ケラレを生じていない画像を示している。図１１（ａ）に比べて本来記録する必要のない撮像装置の影が記録されないため、良好な画像となっている。 FIG. 11B shows an image in which no vignetting occurs. Compared to FIG. 11 (a), the shadow of the image pickup apparatus that does not need to be recorded is not recorded, so that the image is good.
図１１（ｃ）は、後述するパンチルトカメラ３側の第１の例のケラレ回避制御を行った場合のパンチルトカメラ３の撮影画像を示している。パンチルトカメラ３の光軸を移動させることにより、レンズ鏡筒部４が影５０１として写り込むことが回避されている。
FIG. 11C shows a captured image of the pan /
図１１（ｄ）は後述するパンチルトカメラ３側の第２の例のケラレ回避制御を行った場合のパンチルトカメラ３の撮影画像を示している。パンチルトカメラ３の光軸の移動と、ズーム画角の変更（変倍機能による拡大）により鏡筒部４が影５０１として写り込むことが回避されると共に不要な鏡筒部の映り込みが回避されている。
FIG. 11D shows a captured image of the pan /
第１の例のケラレ回避のようにパンチルト駆動の回転動作のみでケラレ回避を行うと、図１１（ａ）から図１１（ｃ）への変化となり、処理の前後で光軸位置が大きく変化してしまうが、本実施形態ではこの方法でケラレ回避を行うものとする。図１１（ｄ）に示す第２の例のケラレ回避のように、ケラレ回避処理を行う前の撮影範囲を超えない様に撮影画角を変更して、光軸位置の変化量を抑える方法については、第２の実施形態で説明する。 If vignetting is avoided only by pan / tilt drive rotation as in the first example, the change from FIG. 11 (a) to FIG. 11 (c), the optical axis position changes greatly before and after processing. However, in this embodiment, vignetting is avoided by this method. As in the vignetting avoidance of the second example shown in FIG. 11D, a method of suppressing the change amount of the optical axis position by changing the shooting angle of view so as not to exceed the shooting range before performing the vignetting avoiding process. Will be described in a second embodiment.
図１２は図１１で示す撮影状態となる際の撮像システム１の側面図であり、パンチルトカメラの撮影画角５０２を点線で示している。図１２（ａ）では、レンズ鏡筒部４がパンチルトカメラ３の撮影画角５０２の撮影範囲内に存在し、パンチルトカメラ３の撮影画像内に固定カメラ２のレンズ鏡筒部４が影５０１として映り込んでしまっている。これは、図１１（ａ）の撮影状態に相当する。
FIG. 12 is a side view of the
図１２（ｂ）では、レンズ鏡筒部４がパンチルトカメラ３の撮影画角５０２の撮影範囲外に存在するため、パンチルトカメラ３の撮影画像にレンズ鏡筒部４が写り込むことはない。これは、図１１（ｂ）の撮影状態に相当する。
In FIG. 12B, since the lens barrel 4 is outside the shooting range of the shooting angle of
図１２（ｃ）では、パンチルトカメラ３の光軸をレンズ鏡筒部４から離れる方向に移動させ、パンチルトカメラ３の撮影画像にレンズ鏡筒部４が写り込むことを防止している。これは、図１１（ｃ）の撮影状態に相当する。
In FIG. 12C, the optical axis of the pan /
図１２（ｄ）ではパンチルトカメラ３の光軸をレンズ鏡筒部４から離れる方向に移動させ、且つパンチルトカメラ３の撮影画角を図１２（ａ）の状態よりも狭くすることにより、パンチルトカメラ３の撮影画像にレンズ鏡筒部４が写り込むことを防止している。これは、図１１（ｄ）の撮影状態に相当する。これについては、第２の実施形態において詳述する。
In FIG. 12D, the pan /
図１３は、パンチルトカメラ３の記録画像に固定カメラ２の鏡筒部４が写り込むことを回避するためのパンチルトカメラ３側の制御用フローチャートである。
FIG. 13 is a control flowchart on the side of the pan /
Ｓ５１１で、パンチルトカメラ３は固定カメラ２との接続確認を行う。固定カメラ２への装着が確認された場合、パンチルトカメラ３の制御のための動作を開始する。Ｓ５１２では、固定カメラ２と通信を行い、固定カメラ２の取り付け位置に関する情報や、撮影画角に関する情報、光軸のベクトル情報等を取得する。
In step S <b> 511, the pan /
Ｓ５１３では、Ｓ５１２で得られた固定カメラ２の情報と、パンチルトカメラ３の取り付け位置、撮影画角、光軸のベクトル情報を比較し、パンチルトカメラ３の撮影画像に固定カメラ２のレンズ鏡筒部４が写り込むか否か（ケラレがあるか否か）の判定を行う。Ｓ５１３でケラレがあると判定された場合は、Ｓ５１４に進み、ケラレが無いと判定された場合は、Ｓ５１５に進む。なお、Ｓ５１３において固定カメラ２のレンズ鏡筒部４が写り込む（ケラレがある）と判定された場合のパンチルトカメラ３の撮影画像の一例は図１１（ａ）のようになる。
In S513, the information of the fixed
Ｓ５１４では、パンチルトカメラ３の撮影画像に固定カメラ２のレンズ鏡筒部４が写り込むことを回避する動作をパンチルトカメラ３に行わせる。具体的には、パン駆動部１０やチルト駆動部１１を動作させ撮影範囲を変更することにより、レンズ鏡筒部４によるケラレ状態を回避する。Ｓ５１４のケラレ回避動作を行った場合のパンチルトカメラ３の撮影画像の一例は、図１１（ｃ）の実線で囲まれた枠内のようになる。
In S <b> 514, the pan /
Ｓ５１５では、電子ズームを使用しているか否かを判定する。電子ズームを使用している場合は、Ｓ５１６に進み、使用していない場合は、Ｓ５１１に戻り、現在の状態を維持させる。 In S515, it is determined whether or not the electronic zoom is used. If the electronic zoom is being used, the process proceeds to S516. If not, the process returns to S511 to maintain the current state.
Ｓ５１６では、パンチルトカメラ３の撮影画像に固定カメラ２のレンズ鏡筒部４が映り込まない場合において、光学ズーム倍率を増加させることが可能か否かの判定を行う。光学ズーム倍率を増加させることが不可能な場合、現在の状態を維持させる。光学ズーム倍率を増加させることが可能であれば、Ｓ５１７に進む。
In S516, it is determined whether or not the optical zoom magnification can be increased when the lens barrel 4 of the fixed
Ｓ５１７では、パンチルトカメラ３の光学系／光学系駆動機構３０１を作動させ、光学ズーム倍率を上げる。同時に、画像処理部３０３での電子ズーム倍率を下げる。電子ズームよりも光学ズームの方がより鮮明な画像情報が得られることは公知であり、ユーザは画角の変化を感じること無く、より高画質な撮影を行うことが可能となる。
In step S517, the optical system / optical
＜第２の実施形態＞
第２の実施形態では、第１の実施形態と異なるケラレ回避の方法について説明する。ここでは、パンチルトカメラ３の撮影画像のケラレ回避を、パンチルトカメラ３の光軸駆動およびズーム倍率変更を併せて行う制御フローについて説明する。制御フロー以外の要素は言及しない限り第１の実施形態と同一とする。
<Second Embodiment>
In the second embodiment, a method for avoiding vignetting that is different from the first embodiment will be described. Here, a control flow for performing vignetting avoidance of an image captured by the pan /
第１の実施形態では、パンチルトカメラ３の撮影画角変更は実施していない。画角変更を行なわない分、パンチルトカメラ３の光軸移動量は大きくなってしまう。本実施形態ではパンチルトカメラ３の電子ズームや、光学ズーム倍率変更を併せて行うことにより、第１の実施形態に比べて光軸移動量を低減している。
In the first embodiment, the shooting angle of view of the pan /
図１４はパンチルトカメラ３の記録画像に固定カメラ２の鏡筒部４が写り込むことを回避するためのパンチルトカメラ３側の制御用フローチャートである。
FIG. 14 is a control flowchart on the pan /
Ｓ５２１で、パンチルトカメラ３は固定カメラ２との接続確認を行う。固定カメラ２への装着が確認された場合、パンチルトカメラ３の制御のための動作を開始する。Ｓ５２２では、固定カメラ２と通信を行い、固定カメラ２の取り付け位置に関する情報や、撮影画角に関する情報、光軸のベクトル情報等を取得する。
In step S <b> 521, the pan /
Ｓ５２３では、Ｓ５２２で得られた固定カメラ２の情報と、パンチルトカメラ３の取り付け位置、撮影画角、光軸のベクトル情報を比較し、パンチルトカメラ３の撮影画像に固定カメラ２のレンズ鏡筒部４が写り込むか否か（ケラレがあるか否か）の判定を行う。Ｓ５２３でケラレがあると判定された場合は、Ｓ５２４に進み、ケラレが無いと判定された場合は、Ｓ５２７に進む。なお、Ｓ５２３において固定カメラ２のレンズ鏡筒部４が写り込む（ケラレがある）と判定された場合のパンチルトカメラ３の撮影画像の一例は図１１（ａ）のようになる。
In S523, the information of the fixed
Ｓ５２４では、パンチルトカメラ３の撮影画像に固定カメラ２のレンズ鏡筒部４が写り込むことを回避する動作をパンチルトカメラ３に行わせる準備動作として、パンチルトカメラ３の光学ズーム倍率を上げることが可能か否かの判定を行う。Ｓ５２４で、光学ズーム倍率を上げることが不可能と判定された場合は、Ｓ５２５に進み、可能と判定された場合は、Ｓ５２６に進む。
In S524, the optical zoom magnification of the pan /
Ｓ５２５では、パン駆動部１０およびチルト駆動部１１の動作と、パンチルトカメラ３の電子ズームを併用することにより、光軸位置の変化量を抑えながらレンズ鏡筒部４によるケラレ状態を回避する。パンチルト駆動の回転動作のみでケラレ回避を行うと、図１１（ａ）から図１１（ｃ）への変化となり、Ｓ５２５の動作の前後で光軸位置が大きく変化してしまう。本実施形態では、光軸位置の変化量を抑えるために電子ズームを併用し、Ｓ５２５の動作を行う前の撮影範囲を超えない様に、撮影画角を変更する。Ｓ５２５の動作を行った場合のパンチルトカメラ３の撮影画像の一例は、図１１（ｄ）の実線で囲まれた枠内のようになる。
In S525, the operation of the
Ｓ５２６では、パン駆動部１０およびチルト駆動部１１の動作と、パンチルトカメラ３の光学ズームを併用することにより、光軸位置の変化量を抑えながらレンズ鏡筒部４によるケラレ状態を回避する。パンチルト駆動の回転動作のみでケラレ回避を行うと、図１１（ａ）から図１１（ｃ）への変化となり、Ｓ５２６の動作の前後で光軸位置が大きく変化してしまう。本実施形態では、光軸位置の変化量を抑えるために光学ズームを併用し、Ｓ５２６の動作を行う前の撮影範囲を超えない様に、撮影画角を変更する。Ｓ５２６の動作を行った場合のパンチルトカメラ３の撮影画像の一例は、図１１（ｄ）の実線で囲まれた枠内のようになる。
In S526, the operation of the
Ｓ５２７では、電子ズームを使用しているか否かを判定する。電子ズームを使用している場合は、Ｓ５２８に進み、使用していない場合は、Ｓ５２１に戻り、現在の状態を維持させる。 In S527, it is determined whether or not the electronic zoom is used. When the electronic zoom is used, the process proceeds to S528, and when the electronic zoom is not used, the process returns to S521 to maintain the current state.
Ｓ５２８では、パンチルトカメラ３の撮影画像に固定カメラ２のレンズ鏡筒部４が映り込まない場合において、光学ズーム倍率を増加させることが可能か否かの判定を行う。光学ズーム倍率を増加させることが不可能な場合、現在の状態を維持させる。光学ズーム倍率を増加させることが可能であれば、Ｓ５２９に進む。
In S <b> 528, it is determined whether or not the optical zoom magnification can be increased when the lens barrel 4 of the fixed
Ｓ５２９では、パンチルトカメラ３の光学系／光学系駆動機構３０１を作動させ、光学ズーム倍率を上げる。同時に、画像処理部３０３での電子ズーム倍率を下げる。電子ズームよりも光学ズームの方がより鮮明な画像情報が得られることは公知であり、ユーザは画角の変化を感じること無く、より高画質な撮影を行うことが可能となる。
In S529, the optical system / optical
次に、パンチルトカメラ３の光軸が向いている方向を表示する例について説明する。まず、パンチルトカメラ３の光軸が向いている方向を表示する方法について説明し、次にその光軸が向いている方向を表示する方法のフローチャートについて説明する。
Next, an example in which the direction in which the optical axis of the pan /
図１５は、パンチルトカメラ３の光軸が向いている方向を表示した状態と、その方向でパンチルトカメラ３がライブビュー画像を表示している状態を示した図である。図１５の中で、図１５（ａ）、図１５（ｃ） 、図１５（ｅ） 、図１５（ｆ）は、現在のパンチルトカメラ３の光軸の方向（以下、パンチルトカメラ３の位置と呼ぶこともある）を表示した図で、星印３０がパンチルトカメラ３の現在の光軸の向きを示している。星印３０は上下左右に移動する。図１５（ｂ）、図１５（ｄ）は、パンチルトカメラ３のライブビュー画像を表示している図である。図１５（ａ）と図１５（ｂ）が対応しており、パンチルトカメラ３の光軸の向きが図１５（ａ）で示される向きの時にパンチルトカメラ３が撮影している撮影画像が図１５（ｂ）である。図１５（ｃ）と図１５（ｄ）が対応しており、パンチルトカメラ３の光軸の向きが図１５（ｃ）で示される向きの時にパンチルトカメラ３が撮影している撮影画像が図１５（ｄ）である。図１５の表示を行うためのデータは、外部機器接続部２０８を介して不図示の電子機器に無線送信され、その電子機器の表示部に表示される。
FIG. 15 is a diagram illustrating a state in which the direction in which the optical axis of the pan /
パンチルトカメラ３の光軸が向いている方向を示す星印３０の位置は、図１５（ａ）と図１５（ｅ）では図の真ん中、図１５（ｃ）では図の下の方向 、図１５（ｆ）では図の左上の方向にある。星印３０は、パンチルトカメラ３がパン動作、チルト動作をした際に、それに追従して動く。例えば、パンチルトカメラ３をパン動作させた際は、図のＬ方向、もしくはＲ方向に星印３０が動く。パンチルトカメラ３をチルト動作させた際は、図のＵＰ方向、もしくはＤＯＷＮ方向に星印３０が動く。パンチルトカメラ３がパン動作、およびチルト動作を組み合わせた場合は、その動きに合わせて、星印３０の位置が動く。
The position of the
具体的な例としては、図２のパンチルトカメラ３は、固定カメラ２の正面から見て、右側に４５度のパン動作、上側に６０度のチルト動作を行った後であり、この時の星印３０の表示される位置は、図１５（ｆ）のようになる。つまり、図１５（ａ）の真ん中の位置より、左上に星印３０が表示される。影３１は、固定カメラ２のレンズ鏡筒部４がパンチルトカメラ３の撮影画角内に写り込む範囲を示したものである。なお、このレンズ鏡筒４が映り込む範囲は計算により得られた範囲を表示している（重畳表示した）ものであり、実際にパンチルトカメラで撮影した画像でのレンズ鏡筒４を表示しているものではない。
As a specific example, the pan /
図１５（ａ）の星印３０の位置では、パンチルトカメラ３は、パン動作およびチルト動作は一切しておらず、固定カメラ２と同じ方向を向いている。図１５（ａ）の星印３０の位置でのパンチルトカメラ３が撮影しているライブビュー画像は、図１５（ｂ）であり、被写体３３のみが写り込み、被写体３３のみが撮影される。
At the position of the
図１５（ａ）のように、星印３０が影３１の領域の中に入るか、あるいは影３１の領域に近付かなければ、パンチルトカメラ３の撮影画角内に固定カメラ２のレンズ鏡筒部４は写り込まない（図１５（ａ）、図１５（ｂ）参照）。図１５（ｂ）はケラレを生じていない画像である。図１５（ｄ）に比べて本来記録する必要のない撮像装置の影が記録されないため、良好な画像となっている。
As shown in FIG. 15A, if the
図１５（ｃ）の星印３０の位置では、パンチルトカメラ３は、下側方向にチルト動作をされた状態であり、星印３０はＤＯＷＮ方向に移動する。図１５（ｃ）の星印３０の位置でのパンチルトカメラ３が撮影しているライブビュー画像は、図１５（ｄ）である。図１５（ｃ）のように、星印３０が影３１の領域の中に入ると、パンチルトカメラ３の撮影画角内に固定カメラ２のレンズ鏡筒部４が写りこみ、被写体３３とレンズ鏡筒部４が撮影される。撮影画像内に固定カメラ２のレンズ鏡筒部４が影３１として映り込んでしまっている。このようにケラレが生じた状態のままで記録を行うと、大切な画像に本来記録する必要のない撮像装置の影が記録されてしまう。この状態は後述する図１６（ｂ）の状態である。
At the position of the
図１５（ｅ）は、固定カメラ２のズームレバー６をテレ側に操作して、固定カメラ２のレンズ鏡筒部４を固定カメラ２から突出する方向に駆動した時の表示画面である。図１５（ｅ）の影３４は、図１５（ａ）の影３１より大きくなっている（影の大きさ：影３４＞影３１）。これは、レンズ鏡筒部４が固定カメラ２から突出する方向に駆動され、パンチルトカメラ３の撮影画角にレンズ鏡筒部４が写り込む範囲が図１５（ａ）より多くなったためである。ユーザがズームレバー６を操作することにより、レンズ鏡筒部４の突出に合わせて、リアルタイムに影３４の大きさを変化させることが出来る。
FIG. 15E shows a display screen when the zoom lever 6 of the fixed
図１６は、図１５で示す撮影状態となる際の撮像システム１の側面図であり、パンチルトカメラの撮影画角５０２を実線で示している。
FIG. 16 is a side view of the
図１６（ａ）では、レンズ鏡筒部４がパンチルトカメラ３の撮影画角５０２の撮影範囲外に存在するため、パンチルトカメラ３の撮影画像にレンズ鏡筒部４が写り込むことはない。これは、図１５（ａ）、図１５（ｂ）の撮影状態に相当する。
In FIG. 16A, since the lens barrel 4 is outside the shooting range of the shooting angle of
図１６（ｂ）では、パンチルトカメラ３を下側にチルト動作させたため、レンズ鏡筒部４がパンチルトカメラ３の撮影画角５０２の撮影範囲内に入り、パンチルトカメラ３の撮影画像内に固定カメラ２のレンズ鏡筒部４が映り込んでしまっている。これは、図１５（ｃ）、図１５（ｄ）の撮影状態に相当する。
In FIG. 16B, since the pan /
図１６（ｃ）では固定カメラ２のレンズ鏡筒部４が固定カメラ２から突出する方向に駆動されたため、レンズ鏡筒部４がパンチルトカメラ３の撮影画角５０２の撮影範囲に近づいている状態である。図１５（ｅ）の撮影状態に相当する。
In FIG. 16C, since the lens barrel 4 of the fixed
次に、図１７は、パンチルトカメラ３の位置（光軸の方向）を表示する動作を示すフローチャートである。
Next, FIG. 17 is a flowchart showing an operation of displaying the position (direction of the optical axis) of the pan /
Ｓ２０１では、パンチルトカメラ３の位置検出（光軸の方向の検出）を行う。パンチルトカメラ３がどのくらいパン動作および、チルト動作をしているかの位置の検出を行う。Ｓ２０２では、Ｓ２０１で検出されたパンチルトカメラ３の位置を外部接続された電子機器の画面に表示する。
In S201, the position of the pan /
Ｓ２０３では、固定カメラ２の光学系のズーム位置を検出する。Ｓ２０４では、Ｓ２０４で検出された固定カメラ２の光学系のズーム位置において、パンチルトカメラ３が可動した際にパンチルトカメラ３の撮影画角範囲の中にレンズ鏡筒部４が写り込むか否かを判定する。
In S203, the zoom position of the optical system of the fixed
Ｓ２０４において、ＮＯ判定、すなわちレンズ鏡筒部４がパンチルトカメラ３の撮影画角範囲の中に写り込まない場合は、Ｓ２０３へと戻る。Ｓ２０４において、ＹＥＳ判定、すなわちレンズ鏡筒部４がパンチルトカメラ３の撮影画角範囲の中に写り込む場合は、Ｓ２０５へと進む。
In S204, if NO is determined, that is, if the lens barrel 4 is not reflected in the photographing field angle range of the pan /
Ｓ２０５では、固定カメラ２のレンズ鏡筒部４が写り込む領域を計算し、外部接続された電子機器に表示する。このＳ２０５の処理がなされた状態は、前述の図１５（ｃ）での表示である。
In S205, the area in which the lens barrel 4 of the fixed
Ｓ２０６では、Ｓ２０３で検出した固定カメラ２のレンズ鏡筒部４のズーム位置が移動したか否かを判定する。Ｓ２０６において、ＹＥＳ判定、すなわちＳ２０３で検出した固定カメラ２のレンズ鏡筒部４のズーム位置が移動した場合は、Ｓ２０１へと戻る。Ｓ２０６において、ＮＯ判定、すなわちＳ２０３で検出した固定カメラ２のレンズ鏡筒部４のズーム位置が移動していない場合は、Ｓ２０７へと進む。
In S206, it is determined whether or not the zoom position of the lens barrel portion 4 of the fixed
Ｓ２０７では、Ｓ２０１で検出したパンチルトカメラ３の位置からパンチルトカメラ３が移動したか否かを判定する。Ｓ２０７において、ＹＥＳ判定、すなわちＳ２０１で検出したパンチルトカメラ３の位置からパンチルトカメラ３が移動した場合は、Ｓ２０１へと戻る。Ｓ２０７において、ＮＯ判定、すなわちＳ２０１で検出したパンチルトカメラ３の位置からパンチルトカメラ３が移動していない場合は、Ｓ２０６へと戻る。
In S207, it is determined whether or not the pan /
図１８は、図１７にＳ２０８を加えたフローチャートである。図１７はパンチルトカメラ３と固定カメラ２が一体化したカメラシステム１を前提としているが、図１８はパンチルトカメラ３と固定カメラ２がそれぞれ分かれているカメラであって、パンチルトカメラ３と固定カメラ２は着脱可能のカメラシステムを前提としている。図１８と図１７は、Ｓ２０８のみの違いであるため、相違点のＳ２０８について説明する。
FIG. 18 is a flowchart obtained by adding S208 to FIG. FIG. 17 assumes a
パンチルトカメラ３と固定カメラ２が着脱式であるため、まずＳ２０８において、それぞれのカメラの情報をやり取りする。例えば、パンチルトカメラ３側の情報としては、画角情報、パン動作の範囲、チルト動作の範囲、パン動作の速度、チルト動作の速度、その他撮影に必要な情報である。固定カメラ２側の情報としては、画角情報、ズームする際のレンズ鏡筒の繰り出し量、レンズ鏡筒の太さ、その他撮影に必要な情報である。
Since the pan /
Ｓ２０８において、パンチルトカメラ３と固定カメラ２で、お互いのカメラ情報を相互にやり取りした後は、図１７に示した通り、Ｓ２０１へと進む。その後は、前述のとおりである。
In S208, after the pan /
＜第３の実施形態＞
第３の実施形態は、第２の実施形態と共通する部分が多いため、第２の実施形態からの相違点についてのみ説明する。
<Third Embodiment>
Since the third embodiment has many parts in common with the second embodiment, only differences from the second embodiment will be described.
本実施形態においては、図１９に示すように、図１５の星印３０が撮影画角を示す枠３５に変更されている。枠３５は、パンチルトカメラ３の撮影可能な範囲を示すものである。図１９（ａ）と図１９（ｂ）が対応しており、パンチルトカメラ３の位置が図１９（ａ）で示される位置の時のパンチルトカメラ３が撮影できる撮影画像が図１９（ｂ）である。図１９（ｃ）と図１９（ｄ）が対応しており、パンチルトカメラ３の位置が図１９（ｃ）で示される位置の時のパンチルトカメラ３が撮影できる撮影画像が図１９（ｄ）である。図１９（ｅ）と図１９（ｆ）が対応しており、パンチルトカメラ３の位置が図１９（ｅ）で示される位置の時のパンチルトカメラ３が撮影できる撮影画像が図１９（ｆ）である。
In the present embodiment, as shown in FIG. 19, the
枠３５が影３１の領域に入ると、パンチルトカメラ３の撮影画角内にレンズ鏡筒部４が写り込む（図１９（ｃ）、図１９（ｄ）参照）。枠３５は、パンチルトカメラ３の撮影可能な範囲を示していることから、パンチルトカメラ３がズーム動作をした際には、大きさを変化させることが出来る。パンチルトカメラ３をワイド方向に動かした際には枠３５が大きくなり、テレ側に動かした際には枠３５が小さくなる。
When the
図１９（ｅ）においては、パンチルトカメラ３のズーム動作をワイド方向に動かして撮影可能な範囲を広くしたため、枠３６は図１９（ａ）の枠３５より大きくなっている。また、固定カメラ２のズームレバー６をテレ側に操作して、固定カメラ２のレンズ鏡筒部４を固定カメラ２から突出する方向に駆動したため、影３４は図１９（ａ）の影３１より大きくなっている。そのため、枠３６の枠内に影３４が入っている状態となる。図１９（ｅ）の状態では、パンチルトカメラ３が撮影する画像は図１９（ｆ）のようになり、被写体３３は小さく写り、レンズ鏡筒部４は画像内に写り込む。
In FIG. 19 (e), the zoom operation of the pan /
図２０は、パンチルトカメラ３の位置を表示する動作を示すフローチャートである。
FIG. 20 is a flowchart showing an operation of displaying the position of the pan /
Ｓ２２０では、パンチルトカメラ３の位置検出とズーム位置の検出を行う。パンチルトカメラ３がどのくらいパン動作および、チルト動作をしているかの位置の検出とどのくらいズーム動作をしているかの検出を行う。
In S220, the position detection of the pan /
Ｓ２２１では、Ｓ２２０で検出されたパンチルトカメラ３の位置と撮影画角の範囲を外部接続された電子機器の画面に表示する。Ｓ２２２では、固定カメラ２の光学系のズーム位置を検出する。
In S221, the position of the pan /
Ｓ２２３では、Ｓ２２２で検出された固定カメラ２の光学系のズーム位置によって、パンチルトカメラ３が稼働した際にパンチルトカメラ３の撮影画角範囲の中にレンズ鏡筒部４が写り込むか否かを判定する。Ｓ２２３において、ＮＯ判定、すなわちレンズ鏡筒部４がパンチルトカメラ３の撮影画角範囲の中に写り込まない場合は、Ｓ２２２へと戻る。Ｓ２２３において、ＹＥＳ判定、すなわちレンズ鏡筒部４がパンチルトカメラ３の撮影画角範囲の中に写り込む場合は、Ｓ２２４へと進む。
In S223, depending on the zoom position of the optical system of the fixed
Ｓ２２４では、固定カメラ２のレンズ鏡筒部４が写り込む領域を計算し、外部接続された電子機器に表示する。このＳ２２４の処理がなされた状態は、前述の図１９（ａ）の表示状態である。
In S224, an area in which the lens barrel 4 of the fixed
Ｓ２２５では、Ｓ２２２で検出した固定カメラ２のレンズ鏡筒部４のズーム位置が移動したか否かを判定する。Ｓ２２５において、ＹＥＳ判定、すなわちＳ２２２で検出した固定カメラ２のレンズ鏡筒部４のズーム位置が移動した場合は、Ｓ２２０へと戻る。Ｓ２２５において、ＮＯ判定、すなわちＳ２２２で検出した固定カメラ２のレンズ鏡筒部４のズーム位置が移動していない場合は、Ｓ２２６へと進む。
In S225, it is determined whether or not the zoom position of the lens barrel 4 of the fixed
Ｓ２２６では、Ｓ２２０で検出したパンチルトカメラ３の位置とズームの位置からパンチルトカメラ３が移動、もしくはズーム動作をしたか否かを判定する。Ｓ２２６において、ＹＥＳ判定、すなわちＳ２２０で検出したパンチルトカメラ３の位置とズームの位置からパンチルトカメラ３が移動した場合、もしくは、ズームの位置が変更になった場合は、Ｓ２２０へと戻る。Ｓ２２６において、ＮＯ判定、すなわちＳ２２０で検出したパンチルトカメラ３の位置とズームの位置からパンチルトカメラ３が移動していない場合、および、ズームの位置が変更になっていない場合は、Ｓ２２５へと戻る。
In S226, it is determined whether the pan /
図２０では、第２の実施形態の図１７、図１８で説明したことと同じことが言える。図２０はパンチルトカメラ３と固定カメラ２が一体化したカメラシステム１を前提としているが、パンチルトカメラ３と固定カメラ２がそれぞれ分かれているカメラであって、パンチルトカメラ３と固定カメラ２は着脱可能のカメラシステムであってもよい。つまり、図２０のフローチャートのＳ２２０の前に、図１８のＳ２０８を加えてもよく、その処理は、前述した図１８の場合と同じとなる。
In FIG. 20, the same can be said as described in FIGS. 17 and 18 of the second embodiment. FIG. 20 is premised on the
パンチルトカメラ３と固定カメラ２が着脱式であるため、まずＳ２０８において、それぞれのカメラの情報をやり取りする。例えば、パンチルトカメラ３側の情報としては、画角情報、パン動作の範囲、チルト動作の範囲、パン動作の速度、チルト動作の速度、その他撮影に必要な情報である。固定カメラ２側の情報としては、画角情報、ズームする際のレンズ鏡筒の繰り出し量、レンズ鏡筒の太さ、その他撮影に必要な情報である。
Since the pan /
Ｓ２０８において、パンチルトカメラ３と固定カメラ２で、お互いのカメラ情報を相互にやり取りした後は、図２０に示した通り、Ｓ２２０へと進む。その後は、前述のとおりである。
In S208, after the pan /
以上説明したように、パンチルトカメラ３の位置の表示と固定カメラ２のレンズ鏡筒部４の写り込み範囲を同じ画面で表示することにより、ユーザは、パンチルトカメラ３をどれくらい稼働させたら、パンチルトカメラ３の撮影範囲に固定カメラ２のレンズ鏡筒部４が写り込むかが容易に判別できる。
As described above, the display of the position of the pan /
また、リアルタイムで、計算により得られたレンズ鏡筒部４の写り込み範囲の表示を変化させることにより、レンズ鏡筒部４の写り込みの判定が容易となる。 Further, by changing the display of the reflection range of the lens barrel portion 4 obtained by calculation in real time, it is easy to determine the reflection of the lens barrel portion 4.
以上説明したように、上記の第２及び第３の実施形態によれば、複数のカメラを有する撮像システムにおいて、撮影画角内に別のカメラが映り込むか否かを撮影中にユーザが判別できるようなり、別のカメラの一部が写り込むのを防止することができる。 As described above, according to the second and third embodiments, in the imaging system having a plurality of cameras, the user determines whether another camera is reflected within the shooting angle of view during shooting. It becomes possible to prevent a part of another camera from being captured.
（その他の実施形態）
また本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現できる。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現できる。
(Other embodiments)
Further, the present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in a computer of the system or apparatus read the program. It can also be realized by processing to be executed. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.
２：固定カメラ、３：パンチルトカメラ、４：レンズ鏡筒部、７：画像表示部、２０１：光学系／光学系駆動機構、２０３：画像処理部、３０１：光学系／光学系駆動機構、３０３：画像処理部、３０７：パンチルト駆動部、３０８：パンチルト駆動制御部、３０９：パンチルト位置検出部 2: fixed camera, 3: pan / tilt camera, 4: lens barrel unit, 7: image display unit, 201: optical system / optical system drive mechanism, 203: image processing unit, 301: optical system / optical system drive mechanism, 303 : Image processing unit, 307: pan / tilt driving unit, 308: pan / tilt driving control unit, 309: pan / tilt position detecting unit
Claims (20)
前記第１の撮像装置は、
被写体像を結像させる第１の撮影光学系と、
前記第１の撮影光学系により結像された被写体像を撮像する第１の撮像手段とを備え、
前記第２の撮像装置は、
被写体像を結像させる第２の撮影光学系と、
前記第２の撮影光学系により結像された被写体像を撮像する第２の撮像手段と、
前記第２の撮影光学系の撮像方向を変更させるための駆動手段と、
前記第２の撮影光学系の撮像方向を変更して特定の被写体を追尾するように前記駆動手段を制御する制御手段と、
を備えることを特徴とする撮像システム。 An imaging system having at least a first imaging device and a second imaging device,
The first imaging device includes:
A first photographing optical system for forming a subject image;
First imaging means for imaging a subject image formed by the first imaging optical system,
The second imaging device includes:
A second photographing optical system for forming a subject image;
Second imaging means for imaging a subject image formed by the second imaging optical system;
Driving means for changing the imaging direction of the second imaging optical system;
Control means for controlling the drive means so as to track a specific subject by changing the imaging direction of the second imaging optical system;
An imaging system comprising:
撮影光学系により結像された被写体像を撮像する撮像手段と、
前記撮影光学系の撮像方向を変更して特定の被写体を追尾するように駆動手段を制御する制御手段と、
を備えることを特徴とする撮像装置。 An imaging apparatus having a configuration that can be attached to another imaging apparatus,
Imaging means for imaging a subject image formed by the imaging optical system;
Control means for controlling the drive means so as to track a specific subject by changing the imaging direction of the imaging optical system;
An imaging apparatus comprising:
前記第２の撮影光学系の撮像方向を変更して特定の被写体を追尾するように前記駆動手段を制御する制御工程を有することを特徴とする撮像システムの制御方法。 The subject image is connected to a first imaging device including a first imaging optical system that forms a subject image and a first imaging unit that images the subject image formed by the first imaging optical system. A second imaging optical system for imaging, a second imaging means for imaging a subject image formed by the second imaging optical system, and a drive for changing the imaging direction of the second imaging optical system A second imaging device comprising: means for controlling an imaging system comprising:
An imaging system control method comprising: a control step of controlling the driving unit so as to track a specific subject by changing an imaging direction of the second imaging optical system.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018088401A JP7138472B2 (en) | 2018-05-01 | 2018-05-01 | IMAGING SYSTEM AND CONTROL METHOD THEREOF, IMAGING DEVICE, PROGRAM, STORAGE MEDIUM |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018088401A JP7138472B2 (en) | 2018-05-01 | 2018-05-01 | IMAGING SYSTEM AND CONTROL METHOD THEREOF, IMAGING DEVICE, PROGRAM, STORAGE MEDIUM |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2019194636A true JP2019194636A (en) | 2019-11-07 |
| JP7138472B2 JP7138472B2 (en) | 2022-09-16 |
Family
ID=68469040
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018088401A Active JP7138472B2 (en) | 2018-05-01 | 2018-05-01 | IMAGING SYSTEM AND CONTROL METHOD THEREOF, IMAGING DEVICE, PROGRAM, STORAGE MEDIUM |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7138472B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113473010A (en) * | 2021-06-29 | 2021-10-01 | 浙江大华技术股份有限公司 | Snapshot method and device, storage medium and electronic device |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH089227A (en) * | 1994-06-17 | 1996-01-12 | Hitachi Ltd | Image pickup device with automatic tracking function |
| JPH11125853A (en) * | 1997-10-22 | 1999-05-11 | Olympus Optical Co Ltd | Zoom camera |
| JP2002359770A (en) * | 2001-05-31 | 2002-12-13 | Hitachi Kokusai Electric Inc | Television camera with motor-driven swiveling camera platform |
| JP2003087626A (en) * | 2001-09-14 | 2003-03-20 | Olympus Optical Co Ltd | Camera system |
| JP2004135209A (en) * | 2002-10-15 | 2004-04-30 | Hitachi Ltd | Generation device and method for wide-angle view high-resolution video image |
| JP2009231956A (en) * | 2008-03-19 | 2009-10-08 | Fujifilm Corp | Imaging device and imaging control method |
| JP2009244369A (en) * | 2008-03-28 | 2009-10-22 | Sony Corp | Imaging device and imaging method |
| JP2011112809A (en) * | 2009-11-25 | 2011-06-09 | Olympus Imaging Corp | Camera system |
| JP2011244248A (en) * | 2010-05-19 | 2011-12-01 | Nikon Corp | Imaging apparatus |
-
2018
- 2018-05-01 JP JP2018088401A patent/JP7138472B2/en active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH089227A (en) * | 1994-06-17 | 1996-01-12 | Hitachi Ltd | Image pickup device with automatic tracking function |
| JPH11125853A (en) * | 1997-10-22 | 1999-05-11 | Olympus Optical Co Ltd | Zoom camera |
| JP2002359770A (en) * | 2001-05-31 | 2002-12-13 | Hitachi Kokusai Electric Inc | Television camera with motor-driven swiveling camera platform |
| JP2003087626A (en) * | 2001-09-14 | 2003-03-20 | Olympus Optical Co Ltd | Camera system |
| JP2004135209A (en) * | 2002-10-15 | 2004-04-30 | Hitachi Ltd | Generation device and method for wide-angle view high-resolution video image |
| JP2009231956A (en) * | 2008-03-19 | 2009-10-08 | Fujifilm Corp | Imaging device and imaging control method |
| JP2009244369A (en) * | 2008-03-28 | 2009-10-22 | Sony Corp | Imaging device and imaging method |
| JP2011112809A (en) * | 2009-11-25 | 2011-06-09 | Olympus Imaging Corp | Camera system |
| JP2011244248A (en) * | 2010-05-19 | 2011-12-01 | Nikon Corp | Imaging apparatus |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113473010A (en) * | 2021-06-29 | 2021-10-01 | 浙江大华技术股份有限公司 | Snapshot method and device, storage medium and electronic device |
| CN113473010B (en) * | 2021-06-29 | 2023-08-22 | 浙江大华技术股份有限公司 | Snapshot method and device, storage medium and electronic device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7138472B2 (en) | 2022-09-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7561788B2 (en) | Image-capturing device having multiple optical systems | |
| JP5725793B2 (en) | Imaging apparatus and control method thereof | |
| CN110493528B (en) | Image pickup apparatus and control method thereof | |
| JP4843002B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND COMPUTER PROGRAM | |
| US20110267503A1 (en) | Imaging apparatus | |
| EP1560425A1 (en) | Autofocus system | |
| WO2016002228A1 (en) | Image-capturing device | |
| JP4730478B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND PROGRAM | |
| WO2012099175A1 (en) | Auto focus system | |
| KR20120038451A (en) | Control device, control method, program, and control system | |
| JP2010096962A (en) | Auto focus system with af frame auto-tracking function | |
| JP5384172B2 (en) | Auto focus system | |
| JP2010230870A (en) | Auto focus system | |
| JP4596246B2 (en) | Auto focus system | |
| JP2006058431A (en) | Autofocusing system | |
| JPH089219A (en) | Camera | |
| JP7138472B2 (en) | IMAGING SYSTEM AND CONTROL METHOD THEREOF, IMAGING DEVICE, PROGRAM, STORAGE MEDIUM | |
| KR101288881B1 (en) | Set up a number of areas of surveillance and monitoring of surveillance cameras in the area to shoot enlarged system | |
| JP4711073B2 (en) | Auto focus system | |
| JP2004128646A (en) | Monitoring system and controller | |
| JP6836306B2 (en) | Imaging control device, its control method, program and recording medium | |
| JP2012209626A (en) | Conference device, program for conference device and control method | |
| WO2020015754A1 (en) | Image capture method and image capture device | |
| KR20020071567A (en) | A ccd camera system for effectively tracking a motion of objects and a method thereof | |
| JP2011022499A (en) | Autofocus system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20210103 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210113 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210419 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220128 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220228 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220426 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220808 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220906 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 7138472 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |