JP2007049229A - 撮像装置及び撮像方法 - Google Patents
撮像装置及び撮像方法 Download PDFInfo
- Publication number
- JP2007049229A JP2007049229A JP2005228555A JP2005228555A JP2007049229A JP 2007049229 A JP2007049229 A JP 2007049229A JP 2005228555 A JP2005228555 A JP 2005228555A JP 2005228555 A JP2005228555 A JP 2005228555A JP 2007049229 A JP2007049229 A JP 2007049229A
- Authority
- JP
- Japan
- Prior art keywords
- tracking
- imaging
- unit
- imaging apparatus
- status
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Accessories Of Cameras (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
- Indication In Cameras, And Counting Of Exposures (AREA)
Abstract
【解決手段】 撮像した映像における撮像対象物の検出結果に従って撮像方向を制御するとともに、その制御による撮像対象物についての追尾状況を判定し判定結果を離れた場所のユーザーにも認識可能なように映像を表示するための装置とは異なる形態にて、発光デバイスにより提示するようにして、撮像対象物を自動で追尾しながら撮像する際に、撮像装置に対して離れた場所からでもユーザーが撮像対象物についての追尾状況を容易に把握できるようにする。
【選択図】 図1
Description
本発明の撮像方法は、撮像方向を変更可能な撮像手段により撮像して得られる映像から撮像対象物を検出する検出工程と、上記検出工程での検出結果に従って、上記撮像手段を制御する追尾制御工程と、上記追尾制御工程での制御による追尾状況を判定する追尾状況判定工程と、上記追尾状況判定工程での追尾状況判定結果を、上記映像を表示するための装置とは異なる手段にて提示する提示工程とを有することを特徴とする。
本発明のプログラムは、撮像方向を変更可能な撮像手段により撮像して得られる映像から撮像対象物を検出する検出ステップと、上記検出ステップでの検出結果に従って、上記撮像手段を制御する追尾制御ステップと、上記追尾制御ステップでの制御による追尾状況を判定する追尾状況判定ステップと、上記追尾状況判定ステップでの追尾状況判定結果を、上記映像を表示するための装置とは異なる手段にて提示する提示ステップとをコンピュータに実行させることを特徴とする。
本発明のコンピュータ読み取り可能な記録媒体は、上記プログラムを記録したことを特徴とする。
以下、本発明の第1の実施形態による撮像装置を適用した自動追尾撮像装置について説明する。
図1は、本発明の第1の実施形態における自動追尾撮像装置の構成例を示すブロック図である。なお、図1には、本実施形態に係る主要な処理をマイクロプロセッサにてソフトウェアを実行することにより実現する場合の構成を示している。
図2において、601は光学レンズ及びAF機構を内蔵する鏡筒部であり、映像入力部209も当該部位601に内蔵される。602は鏡筒部601を垂直方向に可動させるための回転軸である。当該回転軸602の回転に応じて鏡筒部601がチルト動作する。603は鏡筒部601の支持部であり、水平支持部604に固定されている。605は鏡筒部601を水平方向に可動させるための回転軸である。当該回転軸605の回転に応じて水平支持部604が回転することにより、水平支持部604に固定されている支持部603及び鏡筒部601がパン動作する。このように光学・機構部207は、互いに異なる2軸の回転機構を有することで、パン・チルト動作を実現する。
301は自動追尾撮像装置の本体である。302は光学レンズ等を格納する撮像方向可変な鏡筒を内蔵するユニットである。このユニット302の内部には、例えばパン・チルト機構(図2に示した光学・機構部207)が内蔵される。303はファインダーであり、本装置を手持撮影で利用する場合に使用する。304は操作部であり、装置の各種動作を指定するためのユーザーインターフェースである。305は発光デバイス216を格納する透過性を有するフードであり、ユーザーは離れた場所からでも発光デバイス216の発光状態を視認することができる。この自動追尾撮像装置の本体は上記の形態に限定されるものではなく、例えばパン・チルト駆動が可能な雲台に撮像対象物の検出機能を備えたカメラを固定したものであってもよい。このとき、発光デバイス216は内蔵された光学・機構部207の向きによらず常にユーザーが視認できる位置に設けられることが望ましい。
図6において、501は画像取得ステップS103において取得した画像データであり、502は検出した顔領域を示している。また、検出した顔領域502の検出位置の座標データ情報は、画像501の中心位置を原点(0,0)として、検出した顔領域502の中心位置を(x、y)座標系で表現したものである。なお、追尾対象人物の登録は本実施形態における図4に示す動作に先立ち、所定のユーザーインターフェースで登録されているものとする。この登録処理では、装置の映像取得機能を利用して追尾対象人物の画像データを取得し、取得した画像データに基づいて顔認識に必要な特徴パラメータを抽出又は生成しEEPROM206に格納する。そして、図5に示した顔認識処理ステップS404では、CPU201は、EEPROM206に格納された特徴パラメータを読み出して顔認識処理に使用する。
図7に示すテーブル(a)は、追尾対象人物と当該人物が検出された場合の発光デバイス215の発光色との関係を示している。また、テーブル(b)は、顔検出サイズと発光デバイス215の点滅間隔との関係を示している。テーブル(b)に示す3種類の顔検出サイズは、顔情報中の顔サイズを閾値処理して、その結果に基づきテーブル参照する。例えば、追尾対象検出処理ステップS104においてA氏が検出された場合には、発光色「紫」が選択され、検出された顔のサイズが「大きいサイズ」の場合には、点滅間隔「3秒」が選択される。
図8において、1801はレジスタであり、CPU201から書き込み可能なレジスタセットである。1802は発光デバイス216による点滅動作を実現するためのフリーランカウンタであり、レジスタ1801の設定値に従ってカウント動作を行う。1803はセレクタであり、カウンタ出力の使用の有無を選択する。
以下、本発明の第2の実施形態による撮像装置を適用した自動追尾撮像装置について説明する。
図9は、第2の実施形態における自動追尾撮像装置の構成例を示すブロック図である。なお、図9には、本実施形態に係る主要な処理をマイクロプロセッサにてソフトウェアを実行することにより実現する場合の構成を示している。また、この図9において、図1に示したブロック等と同一の機能を有するブロック等には同一の符号を付し、重複する説明は省略する。
それに続く、追尾状況変化通知判定ステップS909にて、CPU201は、追尾状況に所定の変化があったか否かを判定する。ここでの判定は、追尾対象が入れ替わった等、ユーザーにとって重要な状況の変化を判定する。なお、判定条件は予めユーザーが設定するものである。
図11に示すように、CPU201は、追尾対象人物が入れ替わった場合にはサウンド1を再生させ、追尾対象人物を消失した場合にはサウンド2を再生させる。また、予め定める特定人物の追尾を新たに開始した場合には、サウンド1の代わりにサウンド3を再生させ、特定人物を消失した場合にはサウンド2の代わりにサウンド4を再生させる。
以下、本発明の第3の実施形態による撮像装置を適用した自動追尾撮像装置について説明する。
第3の実施形態における自動追尾撮像装置本体は、第1の実施形態における自動追尾撮像装置に、無線インターフェース部1117及びアンテナ1118を付加したものである。
ステップS1307にて、CPU201は、追尾状況判定ステップS1306における現在の判定結果と前回の結果とを比較して追尾状況の変化を判定する。具体的には、CPU201は、追尾対象の人物が入れ替わった、あるいは撮影状況が変化した等の時間的状況変化を判定する。その判定の結果、追尾状況に変化がある場合には、ステップS1308にてCPU201はその内容を文字情報として無線端末に送信する。このとき、CPU201は、無線インターフェース部1117を制御して所定の通信プロトコルで当該情報を無線端末に送信する。
また、上述した説明では、追尾対象人物に関する情報をテキストデータとして表示する場合について説明したが、無線端末1501の表示部1502に小型の画像表示装置を設け、追尾中の人物のサムネイル画像を本体で生成して表示部1502に画像データを表示するような構成としても良い。
また、追尾状況として、検出された対象人物の顔サイズを提示する場合について説明したが、これに限るわけではなく、例えば追尾対象検出処理ステップS104で画角内の人物の数をカウントし、当該数を追尾状況として提示或いは通知するようにしても良い。また、例えば人数の数を通知する場合には、人数に応じた発光色を決定するテーブルをEEPROM206に用意し、当該テーブルに記録された情報に従って発光デバイスインターフェース部215を制御することで、ユーザーにその内容を提示することも可能である。
4人全員が撮影されている場合には、発光デバイス216は「青色」に発光する。A氏が画角内に収まっていない場合、すなわち追尾対象検出処理ステップS104、S904、S1304でA氏が未検出であった場合には、発光デバイス216は緑色に発光する。更にA氏に加えてB氏が未検出になった場合には、発光デバイス216は緑色と紫色とを所定の間隔で交互切り替えながら点灯する。このように、未検出人物に応じて発光デバイス216の発光色を変化させることで追尾状況を提示し、ユーザーは被写体グループの追尾撮影情報を容易に把握することができる。なお、図17に示すテーブルはEEPROM206に記録された情報であり、実際には発光色に対応するレジスタ値が記録されている。状況変化を通知する場合は、追尾状況変化通知判定ステップS909、S1406で、画角内の追尾対象人物が増減した場合に、その状況を通知するように設定しても良い。このように追尾撮影動作モードが異なる場合には、追尾状況判定ステップS106、S906、S1306では追尾撮影動作モードに対応して適切な判定条件を自動的に選択する。具体的には、例えば、図7及び図17に示す複数のテーブルを用意し、追尾撮影動作モードに応じてテーブルを選択(EEPROM206のアドレスを選択)することで、動作モードに応じた所定の発光パターン・発光色で追尾状況を提示する。
また、上述した説明では、マイクロプロセッサを用いて本発明を実施する場合について説明したが、すべて或いはその一部を論理回路等を用いたワイヤードロジックで実現しても良い。
上述した実施形態の機能を実現するべく各種のデバイスを動作させるように、該各種デバイスと接続された装置あるいはシステム内のコンピュータに対し、上記実施形態の機能を実現するためのソフトウェアのプログラムコードを供給し、そのシステムあるいは装置のコンピュータ(CPUあるいはMPU)に格納されたプログラムに従って上記各種デバイスを動作させることによって実施したものも、本発明の範疇に含まれる。
また、この場合、上記ソフトウェアのプログラムコード自体が上述した実施形態の機能を実現することになり、そのプログラムコード自体は本発明を構成する。また、そのプログラムコードをコンピュータに供給するための手段、例えばかかるプログラムコードを格納した記録媒体は本発明を構成する。かかるプログラムコードを記憶する記録媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。
また、コンピュータが供給されたプログラムコードを実行することにより、上述の実施形態の機能が実現されるだけでなく、そのプログラムコードがコンピュータにおいて稼働しているOS(オペレーティングシステム)あるいは他のアプリケーションソフト等と共同して上述の実施形態の機能が実現される場合にもかかるプログラムコードは本発明の実施形態に含まれることは言うまでもない。
さらに、供給されたプログラムコードがコンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納された後、そのプログラムコードの指示に基づいてその機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって上述した実施形態の機能が実現される場合にも本発明に含まれることは言うまでもない。
205 RAM
206 EEPROM
207 光学・機構部
208 機構制御部
209 映像入力部
210 映像入力インターフェース部
215 発光デバイスインターフェース部
216 発光デバイス
817 音声デバイスインターフェース部
818 スピーカー
1117、1209 無線インターフェース部
1118、1210 アンテナ
Claims (15)
- 撮像方向を変更可能な撮像手段と、
上記撮像手段により撮像して得られる映像から撮像対象物を検出する検出手段と、
上記検出手段での検出結果に従って、上記撮像手段を制御する追尾制御手段と、
上記追尾制御手段の制御による追尾状況を判定する追尾状況判定手段と、
上記追尾状況判定手段による追尾状況判定結果を、上記映像を表示するための装置とは異なる手段にて提示する提示手段とを備えることを特徴とする撮像装置。 - 上記追尾状況判定結果には、上記撮像手段の画角内に存在する特定の物体を識別する情報が含まれることを特徴とする請求項1に記載の撮像装置。
- 上記提示手段が、上記追尾状況判定結果を発光パターン及び発光色の少なくとも一方により提示する発光デバイスであることを特徴とする請求項1又は2記載の撮像装置。
- 上記追尾状況の変化通知を行うか否かを判定する通知判定手段と、
上記通知判定手段での判定結果に応じて、上記追尾状況判定結果を通知する状況変化通知手段とをさらに備えることを特徴とする請求項1〜3の何れか1項に記載の撮像装置。 - 上記状況変化通知手段が音声デバイスであることを特徴とする請求項4記載の撮像装置。
- 上記追尾状況判定結果を出力するための無線インターフェースをさらに有することを特徴とする請求項1〜5の何れか1項に記載の撮像装置。
- 上記撮像手段を含む撮像部本体と分離可能であり、かつ上記追尾状況判定結果を受信する受信手段をさらに備え、
上記受信手段と上記撮像部本体とは、互いに通信可能なようにそれぞれが有する無線インターフェースを介して接続されることを特徴とする請求項1〜5の何れか1項に記載の撮像装置。 - 上記受信手段が、受信する上記追尾状況判定結果をユーザーに提示或いは通知する手段を有することを特徴とする請求項7記載の撮像装置。
- 上記追尾状況判定結果には、上記撮像手段の画角内における撮像対象物の大きさ、上記撮像手段の画角内における撮像対象物の数、及び、上記撮像手段のズーム倍率の少なくとも一つに関する情報が含まれることを特徴とする請求項1〜8の何れか1項に記載の撮像装置。
- 上記追尾状況判定結果には、予め定める時間以上の期間にて撮像対象物が検出されない状態を示す情報が含まれることを特徴とする請求項1〜8の何れか1項に記載の撮像装置。
- 上記追尾状況判定手段は複数の判定条件を有し、追尾撮影の動作モードに応じて上記判定条件を選択することを特徴とする請求項1〜10の何れか1項に記載の撮像装置。
- 上記検出手段は上記撮像対象物として人物を検出し、検出した人物の追尾状況を上記追尾状況判定手段が判定することを特徴とする請求項1〜11の何れか1項に記載の撮像装置。
- 撮像方向を変更可能な撮像手段により撮像して得られる映像から撮像対象物を検出する検出工程と、
上記検出工程での検出結果に従って、上記撮像手段を制御する追尾制御工程と、
上記追尾制御工程での制御による追尾状況を判定する追尾状況判定工程と、
上記追尾状況判定工程での追尾状況判定結果を、上記映像を表示するための装置とは異なる手段にて提示する提示工程とを有することを特徴とする撮像方法。 - 撮像方向を変更可能な撮像手段により撮像して得られる映像から撮像対象物を検出する検出ステップと、
上記検出ステップでの検出結果に従って、上記撮像手段を制御する追尾制御ステップと、
上記追尾制御ステップでの制御による追尾状況を判定する追尾状況判定ステップと、
上記追尾状況判定ステップでの追尾状況判定結果を、上記映像を表示するための装置とは異なる手段にて提示する提示ステップとをコンピュータに実行させるためのプログラム。 - 請求項14記載のプログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005228555A JP2007049229A (ja) | 2005-08-05 | 2005-08-05 | 撮像装置及び撮像方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005228555A JP2007049229A (ja) | 2005-08-05 | 2005-08-05 | 撮像装置及び撮像方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2007049229A true JP2007049229A (ja) | 2007-02-22 |
Family
ID=37851727
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005228555A Pending JP2007049229A (ja) | 2005-08-05 | 2005-08-05 | 撮像装置及び撮像方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2007049229A (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007142866A (ja) * | 2005-11-18 | 2007-06-07 | Fujifilm Corp | 撮像装置 |
JP2009124565A (ja) * | 2007-11-16 | 2009-06-04 | Casio Comput Co Ltd | 撮像装置及びプログラム |
JP2009212713A (ja) * | 2008-03-03 | 2009-09-17 | Panasonic Corp | 撮像装置、撮像装置本体および通知用端末 |
JP2011527841A (ja) * | 2008-07-11 | 2011-11-04 | 三洋電機株式会社 | 画像処理装置およびそれを用いた撮像装置 |
WO2020101062A1 (ko) * | 2018-11-13 | 2020-05-22 | 전자부품연구원 | Ptz 카메라 자동제어를 위한 강화학습 모델 생성 방법 및 강화학습 모델 |
EP4096214A2 (en) | 2021-05-06 | 2022-11-30 | Canon Kabushiki Kaisha | Imaging control apparatus, server apparatus, imaging control method, and program |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06225197A (ja) * | 1991-07-18 | 1994-08-12 | Nippon Telegr & Teleph Corp <Ntt> | ビデオカメラによる監視装置 |
JP2004005511A (ja) * | 2002-03-26 | 2004-01-08 | Toshiba Corp | 監視システム、監視方法および監視プログラム |
JP2004356969A (ja) * | 2003-05-29 | 2004-12-16 | Casio Comput Co Ltd | 発光部付き撮像装置、発光方法、及びプログラム |
JP2005057743A (ja) * | 2003-07-22 | 2005-03-03 | Hitachi Kokusai Electric Inc | 物体追尾方法及び物体追尾装置 |
JP2005086626A (ja) * | 2003-09-10 | 2005-03-31 | Matsushita Electric Ind Co Ltd | 広域監視装置 |
-
2005
- 2005-08-05 JP JP2005228555A patent/JP2007049229A/ja active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06225197A (ja) * | 1991-07-18 | 1994-08-12 | Nippon Telegr & Teleph Corp <Ntt> | ビデオカメラによる監視装置 |
JP2004005511A (ja) * | 2002-03-26 | 2004-01-08 | Toshiba Corp | 監視システム、監視方法および監視プログラム |
JP2004356969A (ja) * | 2003-05-29 | 2004-12-16 | Casio Comput Co Ltd | 発光部付き撮像装置、発光方法、及びプログラム |
JP2005057743A (ja) * | 2003-07-22 | 2005-03-03 | Hitachi Kokusai Electric Inc | 物体追尾方法及び物体追尾装置 |
JP2005086626A (ja) * | 2003-09-10 | 2005-03-31 | Matsushita Electric Ind Co Ltd | 広域監視装置 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007142866A (ja) * | 2005-11-18 | 2007-06-07 | Fujifilm Corp | 撮像装置 |
JP4572815B2 (ja) * | 2005-11-18 | 2010-11-04 | 富士フイルム株式会社 | 撮像装置及び撮像方法 |
JP2009124565A (ja) * | 2007-11-16 | 2009-06-04 | Casio Comput Co Ltd | 撮像装置及びプログラム |
JP4552997B2 (ja) * | 2007-11-16 | 2010-09-29 | カシオ計算機株式会社 | 撮像装置及びプログラム |
JP2009212713A (ja) * | 2008-03-03 | 2009-09-17 | Panasonic Corp | 撮像装置、撮像装置本体および通知用端末 |
US8164671B2 (en) | 2008-03-03 | 2012-04-24 | Panasonic Corporation | Imaging apparatus, imaging apparatus body and reporting terminal |
US8502908B2 (en) | 2008-03-03 | 2013-08-06 | Panasonic Corporation | Imaging apparatus, imaging apparatus body and reporting terminal |
JP2011527841A (ja) * | 2008-07-11 | 2011-11-04 | 三洋電機株式会社 | 画像処理装置およびそれを用いた撮像装置 |
WO2020101062A1 (ko) * | 2018-11-13 | 2020-05-22 | 전자부품연구원 | Ptz 카메라 자동제어를 위한 강화학습 모델 생성 방법 및 강화학습 모델 |
EP4096214A2 (en) | 2021-05-06 | 2022-11-30 | Canon Kabushiki Kaisha | Imaging control apparatus, server apparatus, imaging control method, and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8199221B2 (en) | Image recording apparatus, image recording method, image processing apparatus, image processing method, and program | |
WO2016103610A1 (ja) | ウェアラブルカメラ | |
WO2011013544A1 (ja) | 制御装置、制御方法、プログラム、制御システム | |
JP2008283502A (ja) | デジタルカメラ、及び撮影制御方法、撮影制御プログラム | |
JP2004101616A (ja) | 移動撮影システム、移動撮影方法、移動体、及び信号発生装置 | |
WO2011013562A9 (ja) | 制御装置、制御方法、プログラム | |
JP2007049229A (ja) | 撮像装置及び撮像方法 | |
WO2011013563A1 (ja) | 制御装置、撮像システム、制御方法、プログラム | |
JP2010181725A (ja) | デジタルカメラおよびプログラム | |
US7657568B2 (en) | Image pickup apparatus and control method therefor | |
JP6264459B2 (ja) | 撮像装置、撮像方法、及びプログラム | |
JP2010093432A (ja) | 撮影装置及びその制御方法、並びにプログラム | |
JP4687542B2 (ja) | 撮像装置、撮像方法及びプログラム | |
JP2010087899A (ja) | 撮像装置、その制御方法及びプログラム | |
CN110881096B (zh) | 摄像设备及其控制方法和存储介质 | |
CN101025546A (zh) | 自动拍摄方法及系统 | |
JP5889507B2 (ja) | カメラ装置、及び撮影タイミング報知方法、撮影タイミング報知プログラム | |
CN108574802B (zh) | 图像取得装置、方法和系统、摄像装置和方法、记录介质 | |
JP2009071717A (ja) | 撮像装置及び合焦状態表示方法 | |
JP2008072675A (ja) | 撮像装置 | |
JP2011155692A (ja) | 撮像装置及びそのプログラム | |
JP7001141B2 (ja) | 撮像装置、撮像方法、プログラム、及び、画像取得システム | |
JP4915264B2 (ja) | 撮像装置及びそのプログラム | |
JP2009027462A (ja) | 撮像装置、撮像方法、撮像プログラム | |
JP6702331B2 (ja) | 撮像装置とその制御方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080805 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100812 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100817 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101014 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110531 |