JP2013201643A - 電子機器 - Google Patents

Abstract

【課題】対象者の顔を適切な画角で撮像するように制御できる使い勝手のよい電子機器を提供する。
【解決手段】撮像システム２００は、複数の第２撮像部２２０−１〜２２０−３よりも被写体側に設けられた第１撮像部１１と、複数の第２撮像部の撮像結果に基づいて、第１撮像部の姿勢を調節する駆動部２１１と、被写体の特定部位を撮像する第１撮像部の撮像結果に基づいて、第２撮像部の画角を変更する制御部と、を備えたので、対象者の顔を適切な画角で撮像するように制御できる。
【選択図】図４

Description

本発明は、電子機器に関する。

自分で撮影することができない場面の撮影を、他人に依頼することや、定点カメラで行うことが提案されている。また、撮影時の音声の記録においては、顔検出を行なった場合に音声データを画像データに関連づけて記憶媒体に記録することが提案されている（例えば、特許文献１参照）。

特開２００９−１７７７４０号公報

しかしながら、従来の撮像装置（電子機器）の使い勝手は、かならずしもよいものではなかった。

本発明による電子機器は、複数の撮像部よりも被写体側に設けられた被写体側撮像部と、複数の撮像部の撮像結果に基づいて、被写体側撮像部の姿勢を調節する調節部と、を備えたことを特徴とする。

本発明によれば、使い勝手のよい電子機器を実現することができる。

第一の実施形態による撮像装置のブロック図である。 制御部が実行する録画処理を説明するフローチャートである。 第二の実施形態による撮像システムの概念図である。 図３の撮像システムの構成を例示するブロック図である。 動画撮像部の構成を例示するブロック図である。 マスターの制御部が実行する録画処理を説明するフローチャートである。

以下、図面を参照して本発明を実施するための形態について説明する。
（第一の実施形態）
図１は、第一の実施形態による撮像装置１００のブロック図である。撮像装置１００は、撮影依頼者を被写体として、この被写体に関する音（例えば楽曲、歌、台詞、朗読など）を録音し、動画像を撮影する。撮影依頼者は、あらかじめ撮像装置１００に登録されている。当該依頼者である人物の顔を示す情報は、後述するフラッシュメモリ４３に記憶されている。

図１において、撮像装置１００は、撮像部１０と、検出部２０と、集音部３０と、記録部４０と、表示部５０と、計時部６０と、制御部７０とを有している。撮像部１０は、第１撮像部１１と、駆動部１２と、第２撮像部１３とを有する。第１撮像部１１は、複数のレンズ、CCDやCMOSなどの撮像素子、および画像処理回路を含み、本実施形態では人物の「口」を主に撮像（例えば動画像）して画像データを生成する。

駆動部１２は、リニアモータやボイスコイルモータなどを採用するアクチュエータで構成され、第１撮像部１１の姿勢（撮影方向）を調節する。本実施形態において、駆動部１２は、第２撮像部１３の撮像結果（画像）に応じて第１撮像部１１の姿勢（撮影方向）を調節する。なお、イニシャル位置における第１撮像部１１の撮影光軸は、第２撮像部１３の撮影光軸とほぼ平行である。駆動部１２が第１撮像部１１を駆動することによって撮影方向が変更されると、第１撮像部１１の撮影光軸は第２撮像部１３の撮影光軸と交わる状態となる。

なお、第１撮像部１１を撮像装置１００の筐体に対して着脱可能に構成し、第１撮像部１１を撮像装置１００の筐体の任意の位置に取り付けられるようにしてもよい。また、第１撮像部１１を撮像装置１００から離して配置するようにしてもよい。

第２撮像部１３は、第１撮像部１１が有するレンズよりも画角が広い広角撮影が可能な複数のレンズ、CCDやCMOSなどの撮像素子、および画像処理回路を含む。本実施形態では、第２撮像部１３が第１撮像部１１の撮像領域を包含するような広角の撮像（例えば動画像）を行なって画像データを生成する。

検出部２０は、顔検出部２１と顔認識部２２とを有する。顔検出部２１は、顔の主要なパーツ（目、眉毛、鼻、口）を参照パターンとして、撮像した画像とのパターンマッチングにより顔を検出したり、ある画像が顔か否かを判別したりして顔を検出するブースティング(Boosting)による学習手法を用いた検出を行うことができる。また、顔検出部２１は、「口」が開いているか（動いているか）否かについても、上述のパターンマッチングやブースティング手法により検出する。

顔認識部２２は、顔検出部２１が検出した顔が誰の顔かを認識する。具体的には、公知の認識アルゴリズム（弾性バンチグラフマッチング、隠れマルコフモデルなど）を用いて顔認識を行う。この認識アルゴリズムは、見た目の特徴を直接幾何学的に比較する方法と、画像を統計的に数値化してその数値をテンプレートと比較する方法があるが、いずれの方法を用いることもできる。

集音部３０は、第１マイク３１、駆動部３２、第２マイク３３、および図示しない音声処理回路を有している。第１マイク３１は、指向性を有するマイクで構成され、特定の方向から入力する音声を高感度に集音する。例えば、超指向性ダイナミック型マイクロホンや超指向性コンデンサ型マイクロホン等を用いることができる。

駆動部３２は、リニアモータや、ボイスコイルモータなどを採用するアクチュエータで構成され、第１マイク３１の集音方向を調節する。本実施形態では、第１撮像部１１の撮像結果（画像）に応じて第１マイク３１の集音方向を調節する。なお、第１撮像部１１と第１マイク３１とを一体構成（ユニット化）してもよい。ユニット化した場合には、駆動部１２および駆動部３２のうちいずれか一方を省略することができる。

第２マイク３３は、無指向性のマイクで構成され、第１マイク３１が集音する範囲よりも広い範囲の音を集音する。記録部４０は、バッファメモリ４１と、記録I/F（インターフェース）４２と、フラッシュメモリ４３とを有している。

第１マイク３１、第２マイク３３でそれぞれ集音された音声信号は、音声処理回路（不図示）によって増幅される。増幅後の音声信号は、Ａ／Ｄ変換回路（不図示）によってデジタル音声データに変換される。

バッファメモリ４１は、第１撮像部１１、第２撮像部１３によって撮像された画像データを一時的に格納したり、後述する制御部７０のワークメモリとして用いられたりする。なお、バッファメモリ４１を複数設けて第１撮像部１１用のバッファメモリ４１ａと、第２撮像部１３用のバッファメモリ４１ｂとで別々に構成してもよい。また、バッファメモリ４１は、前述の画像処理回路による画像処理の前工程や後工程での画像データを一時的に格納する。バッファメモリ４１には、揮発性の半導体メモリ等を適宜選択して用いることができる。

記録Ｉ／Ｆ４２には、記憶媒体（例えばＳＤカード）９９を接続するためのコネクタが形成されている。そして、記録Ｉ／Ｆ４２は、コネクタに接続された記憶媒体９９に対してデータの書き込み／読み込みを実行する。本実施形態の記録Ｉ／Ｆ４２は、第２撮像部１３が撮像した画像の一部を記憶媒体９９に記録（保存）し、第１撮像部１１が撮像した画像（本例では、人物の「口」の画像）は記憶媒体９９に記録（保存）しない（記憶媒体９９への記録を禁止する）。

なお、記憶媒体９９は、ハードディスクや、半導体メモリを内蔵したメモリカード等で構成され、本実施形態においてはメモリカードを用いる。記録媒体９９は、画像データや音声データの保存用に用いられる。

フラッシュメモリ４３は、不揮発性のメモリによって構成される。本実施形態では、「口」が開いている状態や動いている状態を検出するための形状を表す画像データ（リファレンス画像データと呼ぶ）、顔認識をするためにあらかじめ登録された顔のデータ（顔情報）、楽器、ホイッスル、および運動会用ピストルの音などを検出するためにあらかじめ用意された音響データ（音情報）などを、フラッシュメモリ４３に記憶させておく。

表示部５０は、例えば液晶パネルによって構成され、画像や操作メニュー画面などを表示する。本実施形態においては、表示部５０は第２撮像部１３が撮像した画像を表示し、第１撮像部１１が撮像した画像（本例では「口」の画像）を表示しない。なお、表示部５０の表面に透明なタッチパネルを積層して設けてもよい。この場合には、ユーザが表示部５０の操作メニューを視認しつつ、タッチパネルをタッチ操作することにより、タッチ操作された座標とその座標に対応して表示された操作メニューを選択することが可能となる。

計時部６０は、例えば水晶発振回路によって構成され、計時処理を行なう。本実施形態においては、第１撮像部１１が「口」の開く（動く）画像を撮像した時点を基準として、その前後の計時情報を後述の制御部７０に出力する。言い換えれば、計時部６０は、第１撮像部１１が「口」の開く（動く）のを撮像した時点を基準とするタイムスタンプ情報を出力する。

制御部７０は図示しないＣＰＵを有し、撮像装置１００全体を制御する。本実施形態においては、被写体の「口」の動きに応じて撮像の制御を行なう。

＜録画処理＞
以上のように構成された撮像装置１００の制御部７０が実行する録画処理について、図２のフローチャートを参照して説明する。制御部７０は、例えば図示しない録画スイッチがオン操作されると、図２による録画処理を行うプログラムを起動させる。図２のステップＳ１において、制御部７０は、第２撮像部１３による撮像を開始させ、動画像データをバッファメモリ４１に逐次記憶させてステップＳ２へ進む。ステップＳ２において、制御部７０は、第２マイク３３を介して集音された音声データをバッファメモリ４１へ逐次記憶させる録音を開始させてステップＳ３へ進む。

ステップＳ３において、制御部７０は、上記撮像および録音の開始とともに、計時部６０による計時を開始させてステップＳ４へ進む。ステップＳ４において、制御部７０は、顔検出部２１を用いて、第２撮像部１３で撮像された画像から顔を検出したか否かを判定する。制御部７０は、第２撮像部１３が撮像した画像に顔が含まれていた場合にステップＳ４を肯定判定してステップＳ５へ進み、顔が含まれていない場合にはステップＳ４を否定判定して当該処理を繰り返す。

ステップＳ５において、制御部７０は、顔認識部２２を用いて、ステップＳ４で検出された顔を認識したか否かを判定する。制御部７０は、フラッシュメモリ４３に記憶されている撮影依頼者（以後、対象者と呼ぶ）の顔情報とステップＳ４で検出した顔とが一致する場合に、ステップＳ５を肯定判定してステップＳ６へ進む。ステップＳ６へ進む場合は、あらかじめ登録されている対象者を認識した場合である。一方、制御部７０は、フラッシュメモリ４３に記憶されている対象者の顔情報とステップＳ４で検出した顔とが一致しない場合には、ステップＳ５を否定判定してステップＳ４へ戻る。すなわち、ステップＳ３で検出した複数の顔について顔認識が済むまでは、ステップＳ４およびステップＳ５の処理を繰り返す。

対象者を顔認識した制御部７０は、ステップＳ６において、第１撮像部１１および第１マイク３１の位置調節（撮影方向および集音方向を調節するための姿勢制御）を行なわせる。具体的には、特定した顔（対象者であると認識した顔）から「口」の位置を検出または推定して、その「口」に第１撮像部１１および第１マイク３１を対向させるように、制御部７０が駆動部１２および駆動部３２をそれぞれ制御する。推定は、「口」を検出できない代わりに「目」や「鼻」を検出した場合において、「目」の位置や「鼻」の位置に基づいて「口」の位置を求めることをいう。

第１撮像部１１および第１マイク３１の位置調節を行なった制御部７０は、ステップＳ７において、ステップＳ５で検出または推定した「口」の撮像を第１撮像部１１に開始させて、動画像データをバッファメモリ４１に逐次記憶させてステップＳ８へ進む。

ステップＳ８において、制御部７０は、第１マイク３１を介して集音された音声データをバッファメモリ４１へ逐次記憶させる録音を開始させてステップＳ９へ進む。ここで、当該ステップＳ８において第１マイク３１による録音を開始する時点では、第１撮像部１１により撮像される「口」の人物が音声を発していないかもしれない。しかしながら、後述するように、第１撮像部１１が撮像している人物が「口」を動かしたり、開いたりしてから第１マイク３１による録音を開始したのでは、録音開始が最初の発声タイミングに間に合わないおそれがあるため、「口」の動きを検出する前のステップＳ８から録音を開始させて音声データをバッファメモリ４１に蓄積しておく。

ステップＳ９において、制御部７０は、第１撮像部１１が撮像している「口」が動いたかどうか（開いたかどうか）を検出する。この場合も、制御部７０はフラッシュメモリ４３に記憶されている上記リファレンス画像データを参照して、検出部２０により「口」が動いたかどうか（開いたかどうか）を検出する。制御部７０は、「口」の動きを検出した場合にステップＳ９を肯定判定してステップＳ１０へ進み、「口」の動きを検出しない場合にはステップＳ９を否定判定してステップＳ７へ戻る。これにより、「口」の動きが検出されるまでステップＳ７からステップＳ９の処理を繰り返す。

「口」の動きを検出した制御部７０は、ステップＳ１０において、ステップＳ３で開始した計時の経過時間を確認、および保存を指示してステップＳ１１へ進む。例えば、ステップＳ３の計時開始から１０秒が経過している場合の制御部７０は、記憶Ｉ/Ｆ４２へ指示を送り、「口」の動きが検出される所定時間前（本例では１秒前とする）から、換言すれば計時開始９秒後から、バッファメモリ４１に記憶されている第２撮像部１３で撮像された画像データを記憶媒体９９に記録（保存）させるとともに、同計時開始９秒後からバッファメモリ４１に記憶されている第１マイク３１および第２マイク３３を介して集音された音声データを記憶媒体９９に記録（保存）させる。画像データと音声データは、例えば１つのファイルに含める。

なお、記憶媒体９９に記録する音声データは、第１マイク３１および第２マイク３３を介して集音された音声データのうちいずれか一方でもよい。異なる２つのマイクを介して集音された音声データのうち、例えば、所定の音圧レベル範囲の音声データを記憶させたり、所定の周波数帯域を含む（あるいは含まない）音声データを記憶させたりすることによって、必要な音声を記録しつつ、不要な音声の記録を排除できる。

また、制御部７０は、「口」の動きが検出されたタイミングで、第２撮像部１３の図示しないズーム光学系を望遠側に移動させる、もしくは電子ズーム処理によってズームアップさせてもよい。これにより、例えば第２撮像部１３は、上記特定した顔（すなわち対象者の顔）をアップで撮像することができる。上記変倍動作に加えて、または変倍動作に代えて、第２撮像部１３が撮像するフレームレートを上げてもよい。これにより、対象者の動きに対する応答性が向上する。

さらに、制御部７０は、「口」の動き方に応じて、第１マイク３１の感度（ゲイン）を変更するようにしてもよい。これは、「口」が大きく開かれるにつれて大きな声が出されることが予想されるので、「口」の大きさに応じて第１マイク３１の感度（ゲイン）を下げることで、大きな音声入力に備えるためである。このようなゲイン制御を行なうことにより、集音部３０のダイナミックレンジを広げることが可能となる。「口」の開く大きさに応じた感度（ゲイン）の変更は、第２マイク３３にも適用するようにしてもよい。ゲインの変更は、例えば、集音部３０の音声処理回路（不図示）における増幅ゲインを変化させることによって実現できる。

第２撮像部１３により撮像されている対象者の「口」は、動いたり動かなかったりする。このため、制御部７０は、ステップＳ１１において対象者の「口」が所定時間動きなし（閉じている）であるか否かを検出する。ここで、所定時間は任意に設定することができるものとし、本実施形態においては、例えば５秒とする。制御部７０は、検出部２０によって「口」の動きが５秒間検出されない場合は、ステップＳ１１を肯定判定してステップＳ１２に進む。制御部７０は、検出部２０によって「口」の動きが検出されている場合は、ステップＳ１１を否定判定して当該判定処理を繰り返す。

つまり、対象者の「口」の動きが検出されている間は、制御部７０がステップＳ１１を否定判定して上記判定処理を繰り返すため、第２撮像部１３で撮像されバッファメモリ４１に記憶されていた画像データが記憶媒体９９に記録（保存）されるとともに、第１マイク３１および第２マイク３３を介して集音されバッファメモリ４１に記憶されていた音声データが記憶媒体９９に記録（保存）される。

ステップＳ１２において、「口」の動きが所定時間ない場合の制御部７０は、撮像を終了するか否かを判断する。例えば、対象者を撮像する場面が学芸会の合唱や演劇である場合、その終了時には大きな拍手があり、終了を告げるアナウンスが行われる。このため、本実施形態の制御部７０は、第２マイク３３を介して大きな拍手や「終了」という言葉が入力された場合に、第１撮像部１１および第２撮像部１３による撮像を終了すべきと判断する。

「大きな拍手」を示す音響データや、「終了」という言葉を示す音声辞書データを上述した音情報としてあらかじめフラッシュメモリ４３に記憶させておけばよい。また、運動会などを撮像する場合は、ピストルの合図により競技が終了する場合があるため、「ピストル合図」を示す音響データを音情報としてフラッシュメモリ４３に記憶しておけばよい。

制御部７０は、ステップＳ１２を肯定判定した場合に所定のオフ処理を行って図２による処理を終了する。オフ処理は、第１撮像部１１および第２撮像部１３による撮像を終了させとともに、第１マイク３１および第２マイク３３による録音を終了させ、バッファメモリ４１に蓄積されていた画像データや音声データを記憶媒体９９へ記録（保存）させる処理も終了させる。

一方、制御部７０はステップＳ１２を否定判定した場合にステップＳ１３へ進む。ステップＳ１３において、制御部７０は、顔認識部２２を用いて、対象者の顔を認識できるか否かを判定する。制御部７０は、フラッシュメモリ４３に記憶されている対象者の顔情報と第２撮像部１３により撮像された画像に含まれる顔とが一致する場合に、ステップＳ１３を肯定判定してステップＳ９へ戻る。ステップＳ９へ戻る場合は、撮像を継続して上述した処理を繰り返す。

制御部７０は、フラッシュメモリ４３に記憶されている対象者の顔情報が、第２撮像部１３により撮像された画像に含まれない場合には、ステップＳ１３を否定判定してステップＳ１４へ進む。ステップＳ１４において、制御部７０は、第１撮像部１１による撮像を終了させてステップＳ１５へ進む。ステップＳ１５において、制御部７０は、第１マイク３１による録音を終了させてステップＳ３へ戻る。

以上説明した第一の実施形態によれば、次の作用効果が得られる。
（１）撮像装置１００は、被写体の特定部位を撮像する第１撮像部１１と、第１撮像部１１の撮像結果に基づいて、第１撮像部１１とは異なる第２撮像部１３の画角を変更する制御部７０と、を備えたので、例えば、対象者の「顔」を適切な画角で撮像するように制御できる。

（２）上記（１）の撮像装置１００において、第２撮像部１３で撮像された画像を記憶媒体９９に保存させる記録Ｉ／Ｆ４２を備え、記録Ｉ／Ｆ４２は、第１撮像部１１で撮像された画像を記憶媒体９９に保存させないようにしたので、例えば、特定部位のみの画像を保存しないように制御できる。

（３）上記（１）または（２）の撮像装置１００において、第２撮像部１３で撮像された画像を表示する表示部５０を備え、表示部５０は、第１撮像部１１で撮像された画像を表示しないようにしたので、例えば、特定部位のみの画像を表示しないように制御できる。

（変形例１）
上述した第一の実施形態においては、バッファメモリ４１を介在させることで、第２撮像部１３が撮像した画像の一部を記憶媒体９９に記録（保存）し、第１撮像部１１が撮像した画像（本例では口の画像）は記憶媒体９９に記録（保存）しないようにした。これに代えて、第１撮像部１１および第２撮像部１３による画像データや、第１マイク３１および第２マイク３３による音声データを記憶媒体９９に記録させ、さらにステップＳ１０で確認した計時データをメタデータとともに記憶媒体９９に記録させておき、後からパソコンなどで計時データに基づいて画像データおよび音声データの編集を行なう（保存するか否かを後から決定する）ように構成してもよい。

（第二の実施形態）
次に、図３〜図６を参照して第二の実施形態について説明する。図３は、第二の実施形態による撮像システム２００の概念図である。撮像システム２００は、撮影依頼者を被写体として、この被写体に関する音（例えば楽曲、歌、台詞、朗読など）を録音し、動画像を撮影する。

図３において、撮像システム２００は、被写体の「口」を検出する動作検出撮像部２１０と、この動作検出撮像部２１０による検出結果に基づいて、被写体の動画撮影を行う複数の動画撮像部２２０（本例では２２０−１〜２２０−３）とを有する。撮影依頼者はあらかじめ登録され、各動画撮像部２２０−１〜２２０−３内のフラッシュメモリ４３に当該依頼者である人物の顔を示す顔情報が記憶されている。本実施形態では、動画撮像部２２０を３台の動画撮像部２２０−１〜２２０−３で構成し、その基本構成は同じとする。なお、動画撮像部２２０の数は３台に限らず、５台でも１０台でもよい。

図４は、図３の撮像システム２００の構成を例示するブロック図である。図５は、上記３台の動画撮像部２２０−１〜２２０−３のうち、１つの動画撮像部２２０−ｎの構成を例示するブロック図である。図４および図５において、動作検出撮像部２１０および複数の動画撮像部２２０−ｎを構成する各構成要件のうち、第一の実施形態で説明した撮像装置１００の構成と同様のものについては同一の符号を付し、その説明を省略する。

図４、図５において、動作検出撮像部２１０は、第一実施形態における撮像部１０に対応する。この動作検出撮像部２１０は、第１撮像部１１と、第１マイク３１と、駆動部２１１と、通信部２１２と、制御部２１３とを有する。第１撮像部１１は、主に対象者の「口」の動きを検出するための撮像を行う。駆動部２１１は、例えばユニット化された第１撮像部１１と第１マイク３１とを駆動して、第１撮像部１１の姿勢（撮影方向）および第１マイク３１の集音方向を調節する。

通信部２１２は無線通信ユニットを有し、動画撮像部２２０−ｎの通信部２２１−ｎとの間で無線通信を行う。また、通信部２１２は、第１マイク３１を介して集音された音声データを動画撮像部２２０−ｎに送信する。制御部２１３は図示しないＣＰＵを有し、動作検出撮像部２１０の全体を制御する他、動画撮像部２２０−ｎとの間で協調制御を行う。

以下、図５を参照して動画撮像部２２０−ｎの詳細を説明する。図５において、動画撮像部２２０−ｎは、第一実施形態における撮像部１０以外のブロックに対応する。この動画撮像部２２０−ｎは、第２撮像部１３と、検出部２０と、第２マイク３３と、記録部４０と、表示部５０と、計時部６０と、通信部２２１と、制御部２２２とを有している。通信部２２１は無線通信ユニットを有し、動作検出撮像部２１０の通信部２１２との間で無線通信を行う。また、通信部２２１は、他の動画撮像部２２０の通信部２２１とも通信を行う。

制御部２２２は図示しないＣＰＵを有し、動画撮像部２２０−ｎの全体を制御する他、動作検出撮像部２１０の制御部２１３との間で協調制御を行なう。本実施形態では、動画撮像部２２０−１（図４）の制御部２２２−１が撮像システム２００の全体を制御するマスターの制御部となり、動画撮像部２２０−２（図４）の制御部２２２−２、動画撮像部２２０−３（図４）の制御部２２２−３が、それぞれスレーブの制御部となるものとして説明する。

以上のように構成された撮像システム２００における動画撮像部２２０−１（マスター）の制御部２２２−１が実行する録画処理について、図６のフローチャートを参照して説明する。制御部２２２−１は、例えば図示しない録画スイッチがオン操作されると、図６による録画処理を行うプログラムを起動させる。

図６のステップＳ１０１において、制御部２２２−１（マスター）は、通信部２２１−１を介して動画撮像部２２０−２および２２０−３に対してそれぞれ撮像を指示するとともに、自身の第２撮像部１３−１へ撮像を指示してステップＳ１０２へ進む。これにより、動画撮像部２２０−１〜２２０−３の第２撮像部１３−１〜１３−３がそれぞれ動画の撮像を開始する。なお、必ずしも全ての動画撮像部２２０−１〜２２０−３による撮像を指示しなくてもよく、適宜その数を設定可能に構成してもよい。

ステップＳ１０２において、制御部２２２−１（マスター）は、動画撮像部２２０−１自身、動画撮像部２２０−２、および２２０−３の少なくとも１つで顔を撮像したかどうかを検出する。具体的には、第２撮像部１３−１の撮像結果に顔が含まれているかどうかを検出部２０−１により検出させる。制御部２２２−１（マスター）はさらに、スレーブとなる動画撮像部２２０−２および２２０−３に対し、それぞれ第２撮像部１３−２および１３−３の撮像結果に顔が含まれているかどうかを検出部２０−２および２０−３により検出させて、その検出結果を通信部２２１−２および２２１−３からマスターである動画撮像部２２０−１へそれぞれ送信させる。制御部２２２−１（マスター）は、自身の第２撮像部１３−１、動画撮像部２２０−２の第２撮像部１３−２、および動画撮像部２２０−３の第２撮像部１３−３のうち、少なくとも１つで顔検出されるまでステップＳ１０２の処理を繰り返す。

ステップＳ１０３において、制御部２２２−１（マスター）は、ステップＳ１０２で検出された顔を認識したか否かを判定させる。具体的には、自身の検出部２０−１へ顔認識を指示するとともに、スレーブとなる動画撮像部２２０−２および２２０−３に対し、それぞれ検出部２０−２および２０−３により顔認識を指示する。この顔認識は、第一の実施形態の場合と同様の手法で各動画撮像部２２０−１〜２２０−３において行わせる。それぞれの動画撮像部２２０−１〜２２０−３において顔認識させることにより、１つの動画撮像部で顔認識処理をまとめて行う場合に比べて、顔認識に要する時間の短縮を行なうことができる。

制御部２２２−１（マスター）は、対象者（撮影依頼者）が顔認識された場合にはステップＳ１０３を肯定判定してステップＳ１０４に進み、対象者が顔認識されない場合にはステップＳ１０３を否定判定してステップＳ１０２に戻る。すなわち、動画撮像部２２０−１、２２０−２、および２２０−３の少なくとも１つで顔認識が済むまでは、ステップＳ１０２およびＳ１０３の処理を繰り返す。

ステップＳ１０４において、制御部２２２−１（マスター）は、動画撮像部２２０−１〜２２０−３の中から動画像を撮像させる機器を選択する。制御部２２２−１（マスター）は、全ての動画撮像部２２０−１〜２２０−３が対象者の顔を認識した場合には、全ての動画撮像部２２０−１〜２２０−３によって撮像を継続させる。しかしながら、いつも全ての動画撮像部２２０−１〜２２０−３が対象者の顔を認識するとは限らない。そこで、本実施形態においては図３の動画撮像部２２０−３のみによって対象者の顔が認識された場合を例にあげて説明する。

この場合の制御部２２２−１（マスター）は、動画撮像部２２０−３の第２撮像部１３−３に加えて、隣接する動画撮像部２２０−２の第２撮像部１３−２を選択して撮像を継続させるとともに、動画撮像部２２０−１の第２撮像部１３−１による撮像を中止させる（オフにする）。これは、対象者が移動するような場合に、動画撮像部２２０−３に隣接する動画撮像部２２０−２では対象者を撮像する可能性があるのに対して、動画撮像部２２０−３から離れた動画撮像部２２０−１では対象者を撮像する可能性が低いからである。

なお、動画撮像部２２０−１および２２０−３の双方に隣接する動画撮像部２２０−２によって対象者の顔が認識された場合には、動画撮像部２２０−２で撮像された画像に基づいて対象者の動きベクトルを検出して、該動きベクトルに基づいて動画撮像部２２０−１もしくは２２０−３を選択するようにすればよい。これは、移動する対象者を撮像する可能性がある動画撮像部が複数存在する場合に、撮像できる可能性がより高い動画撮像部を選ぶためである。

また、図３の動画撮像部２２０−３によって対象者の顔が認識された場合において、例えば当該対象者が合唱している場面など、対象者の移動が予想されない場合（動きベクトルの大きさが所定値未満）には、動画撮像部２２０−３に隣接する動画撮像部２２０−２の第２撮像部１３−２での撮像を中止（オフ）させてもよい。

動画撮像部２２０−１や動画撮像部２２０−２における第２撮像部の撮像を中止（オフ）させる場合の制御部２２２−１（マスター）はさらに、この動画撮像部２２０−１、２２０−２を操作しているユーザに対し、対象者を撮像できる位置への移動を促してもよい。例えば、動画撮像部２２０−１の表示部５０−１に「被写体に近づいて撮影しましょう」というメッセージを表示させたり、通信部２２１−１を介して動画撮像部２２０−２へ「被写体に近づいて撮影しましょう」というメッセージを送ったりする。このメッセージを受信した動画撮像部２２０−２の制御部２２２−２は、表示部５０−２に「被写体に近づいて撮影しましょう」というメッセージを表示させる。

さらにまた、動画撮像部２２０−１、２２０−２がユーザによる操作なしに自動撮影する固定カメラであって、該動画撮像部２２０−１、２２０−２に第２撮像部１３−１、１３−２の姿勢（撮影方向）を制御するための駆動部材（不図示）があらかじめ設けられている場合には、これら駆動部材を駆動させることによって対象者を撮像できる向きに、動画撮影部２２０−１、２２０−２の撮影方向を自動制御させてもよい。

図６のステップＳ１０５において、制御部２２２−１（マスター）は、ステップＳ１０４で選択した動画撮像部２２０−３および２２０−２に対して通信部２２１−１から指示を送り、動画撮像部２２０−３の第２マイク３３−３、および動画撮像部２２０−２の第２マイク３３−２による録音を開始させてステップＳ１０６へ進む。

ステップＳ１０６において、制御部２２２−１（マスター）は、ステップＳ１０４で選択した動画撮像部２２０−３および２２０−２に対して通信部２２１−１から指示を送り、計時部６０−３、および計時部６０−２による計時開始を開始させてステップＳ１０７へ進む。

ステップＳ１０７において、制御部２２２−１（マスター）は、通信部２２１−１から動作検出撮像部２１０へ指示を送り、第１撮像部１１および第１マイク３１の位置調節（撮影方向および集音方向を調節するための姿勢制御）を行なわせる。具体的には、制御部２１３が駆動部２１１を制御して、対象者であると認識された顔から検出または推定される「口」の位置に第１撮像部１１および第１マイク３１を対向させる。「口」の位置情報は、例えば顔認識した動画撮像部（本例では２２０−３）が取得し、その結果を通信部２２１−３から動作検出撮像部２１０へ送信させておく。推定は、上述したように「目」の位置や「鼻」の位置に基づいて「口」の位置を求めることをいう。

なお、複数の動画撮像部２２０によって対象者の顔が検出されている場合には、該対象者の正面の顔を撮像した動画撮像部２２０による撮像結果に基づいて、制御部２１３が、第１撮像部１１および第１マイク３１の姿勢制御をすればよい。また、これに代えて、制御部２１３が、複数の動画撮像部２２０による撮像結果に基づいて対象者の顔の正面位置を推定して、第１撮像部１１と第１マイク３１の姿勢制御を行うようにしてもよい。複数の動画撮像部２２０による撮像結果に基づく場合は、例えば顔認識した複数の動画撮像部（例えば２２０−２および２２０−３）から、それぞれの撮像結果を動作検出撮像部２１０へ送信させておく。

ステップＳ１０８において、制御部２２２−１（マスター）は、通信部２２１−１から動作検出撮像部２１０へ指示を送り、ステップＳ１０７で検出または推定された「口」の撮像を第１撮像部１１により開始させる。この動画像データは、動作検出撮像部２１０の通信部２１２から動画撮像部２２０−１へ送信させ、動画撮像部２２０−１内のバッファメモリ４１−１に逐次記憶させる。

ステップＳ１０９において、制御部２２２−１（マスター）は、通信部２２１−１から動作検出撮像部２１０へ指示を送り、第１マイク３１を介して集音された音声データの録音を開始させる。この音声データは、動作検出撮像部２１０の通信部２１２から動画撮像部２２０−１へ送信させ、動画撮像部２２０−１内のバッファメモリ４１−１に逐次記憶させる。

ステップＳ１１０において、制御部２２２−１（マスター）は、動作検出撮像部２１０の第１撮像部１１が撮像している「口」が動いたかどうか（開いたかどうか）を検出する。具体的には、第一の実施形態の場合と同様のリファレンス画像データを動画撮像部２２０−１内のフラッシュメモリ４３に記憶にあらかじめ記憶させておき、このリファレンス画像データを参照して検出部２０−１によって「口」が動いたかどうか（開いたかどうか）を検出させる。

制御部２２２−１（マスター）は、動作検出撮像部２１０から送信され、バッファメモリ４１−１に逐次記憶した動画像データから「口」の動きを検出した場合にステップＳ１１０を肯定判定してステップＳ１１１へ進み、「口」の動きを検出しない場合にはステップＳ１１０を否定判定してステップＳ１０８へ戻る。これにより、「口」の動きが検出されるまでステップＳ１０８からステップＳ１１０の処理を繰り返す。

「口」の動きを検出した制御部２２２−１は、ステップＳ１１１において、ステップＳ１０６で開始した計時の経過時間を確認、および保存を指示してステップＳ１１２へ進む。例えば、ステップＳ１０６の計時開始から１０秒が経過している場合の制御部２２２−１（マスター）は、通信部２２１−１を介して動画撮像部２２０−３、２２０−２に対して指示（「口」の動きを検出した時刻情報を含める）を送り、「口」の動きを検出した時刻から所定時間前（本例では１秒前とする）からバッファメモリ４１−３、４１−２にそれぞれ記憶されている第２撮像部１３−３、１３−２による画像データを記憶媒体９９−３、９９−２にそれぞれ記録（保存）させる。

また、制御部２２２−１（マスター）は、ステップＳ１１０において対象者の口の動きを検出した場合に、動画撮像部２２０−３へ指示を送り、第２撮像部１３−３の不図示のズーム光学系（もしくは電子ズーム）を望遠側に移動させてもよいし、動画撮像部２２０−３および２２０−２のうちいずれか一方へ指示を送り、第２撮像部１３−３または１３−２のズーム光学系（もしくは電子ズーム）を望遠側に移動させてもよい。また、一方のズーム光学系（もしくは電子ズーム）を望遠側に移動させる場合において、他方のズーム光学系（もしくは電子ズーム）を変化させずに維持してもよいし、ズーム光学系（もしくは電子ズーム）を広角側に移動させてもよい。これにより、一方の動画撮像部で対象者の顔をアップで撮像したり、他方の動画撮像部では広角で撮像したりすることができる。

動画撮像部２２０−３および２２０−２で撮像される対象者の「口」は、動いたり動かなかったりする。このため、制御部２２２−１（マスター）は、ステップＳ１１２において対象者の「口」が所定時間動きなし（閉じている）であるか否かを検出する。ここで、所定時間は任意に設定することができるものとし、本実施形態においては、例えば５秒とする。制御部２２２−１（マスター）は、検出部２０−１によって「口」の動きが５秒間検出されない場合は、ステップＳ１１２を肯定判定してステップＳ１１３に進む。制御部２２２−１（マスター）は、検出部２０−１によって「口」の動きが検出されている場合は、ステップＳ１１２を否定判定して当該判定処理を繰り返す。

つまり、対象者の「口」の動きが検出されている間は、制御部２２２−１（マスター）がステップＳ１１２を否定判定して上記判定処理を繰り返すため、この間に動画撮像部２２０−３、２２０−２は、バッファメモリ４１−３、４１−２にそれぞれ記憶している第２撮像部１３−３、１３−２による画像データを、記憶媒体９９−３、９９−２にそれぞれ記録（保存）させる。また、第２マイク３３−３、３３−２を介して集音されバッファメモリ４１−３、４１−２に記憶している音声データを、記憶媒体９９−３、９９−２にそれぞれ記録（保存）させる。

ステップＳ１１３において、制御部２２２−１（マスター）は、第一の実施形態の場合と同様に、「口」の動きが所定時間ない場合に撮像を終了するか否かを判断する。制御部２２２−１（マスター）は、ステップＳ１１３を肯定判定した場合に所定のオフ処理を行って図６による処理を終了する。オフ処理は、全ての動画撮像部２２０−１〜２２０−３および動作検出撮像部２１０による撮像および録音（集音）を終了させる。

一方、制御部２２２−１（マスター）は、ステップＳ１１３を否定判定した場合にステップＳ１１４へ進む。ステップＳ１１４において、制御部２２２−１（マスター）は、対象者の顔を認識できるか否かを判定させる。撮像中の機器である動画撮像部２２０−２および２２０−３に対し、ステップＳ１０３の場合と同様に、それぞれ検出部２０−２および２０−３により顔認識を指示する。

制御部２２２−１（マスター）は、対象者（撮影依頼者）が顔認識された場合にはステップＳ１１４を肯定判定してステップＳ１１０へ戻り、対象者が顔認識されない場合にはステップＳ１１４を否定判定してステップＳ１１５へ進む。ステップＳ１１０へ戻る場合は、撮像を継続させて上述した処理を繰り返す。

ステップＳ１１５において、制御部２２２−１（マスター）は、通信部２２１−１から指示を送り、動作検出撮像部２１０による撮像を終了させてステップＳ１１６へ進む。ステップＳ１１６において、制御部２２２−１（マスター）は、通信部２２１−１から指示を送り、動作検出撮像部２１０による録音を終了させてステップＳ１０２へ戻る。

以上説明した第二の実施形態によれば、次の作用効果が得られる。
（１）撮像システム２００は、複数の第２撮像部１３−１〜１３−３よりも被写体側に設けられた第１撮像部１１と、複数の第２撮像部１３−１〜１３−３の撮像結果に基づいて、第１撮像部１１の撮影方向を調節する駆動部２１１と、を備えるようにしたので、適切に第１撮像部１１の撮影方向を調節できるようになって、使い勝手が向上する。具体的には、被写体が第１撮像部１１の撮影画角の外に位置していても、複数の第２撮像部１３−１〜１３−３による撮像結果に基づいて第１撮像部１１の撮影方向を合わせることができる。

（２）上記（１）の撮像システム２００において、駆動部２１１は、複数の第２撮像部１３−１〜１３−３のうち被写体の略正面の顔を撮像する第２撮像部１３−３の撮像結果に基づいて、第１撮像部１１の撮影方向を調節するので、「顔」に向けて、適切に第１撮像部１１の撮影方向を調節できる。

（３）上記（１）または（２）の撮像システム２００において、駆動部２１１は、複数の第２撮像部１３−１〜１３−３による撮像結果から推定される被写体の顔の正面に向けて、第１撮像部１１の撮影方向を調節するので、「顔」の正面に向けて、適切に第１撮像部１１の撮影方向を調節できる。

（４）上記（１）から（３）の撮像システム２００において、複数の第２撮像部１３−１〜１３−３（動画撮像部２２０−１〜２２０−３）の撮像結果に基づいて、複数の第２撮像部１３−１〜１３−３（動画撮像部２２０−１〜２２０−３）から撮像を継続する第２撮像部１３−ｎ（動画撮像部２２０−ｎ）を選択する制御部２２２−１を備えたので、適切に選ぶことができる。

（５）上記（４）の撮像システム２００において、制御部２２２−１は、被写体の顔を撮像した第２撮像部１３−３（動画撮像部２２０−３）と、当該第２撮像部１３−３（動画撮像部２２０−３）と隣接する第２撮像部１３−２（動画撮像部２２０−２）を選択するようにしたので、対象者を撮像する可能性が高い動画撮像部２２０−ｎを適切に選ぶことができる。

（６）上記（４）の撮像システム２００において、制御部２２２−１は、被写体の動きに応じて、複数の撮像部１３−１〜１３−３（動画撮像部２２０−１〜２２０−３）から少なくとも１つの撮像部１３−ｎ（２２０−ｎ）を選択するようにしたので、例えば、対象者の動きベクトルに基づいて、対象者を撮像できる可能性がより高い動画撮像部２２０−ｎを適切に選ぶことができる。

（７）上記（１）〜（３）の撮像システム２００において、複数の第２撮像部１３−１〜１３−３の撮像結果に基づいて、複数の第２撮像部１３−１〜１３−３（動画撮像部２２０−１〜２２０−３）から撮像を中止する第２撮像部１３−１（動画撮像部２２０−１）を選択する選択部２２２−１を備えるようにしたので、全ての第２撮像部１３−１〜１３−３（動画撮像部２２０−１〜２２０−３）に撮像を継続させる場合に比べて、消費電力を低減できる。

（８）撮像システム２００は、被写体の特定部位を撮像する第１撮像部１１（動作検出撮像部２１０）と、第１撮像部１１（動作検出撮像部２１０）の撮像結果に基づいて、第１撮像部１１（動作検出撮像部２１０）とは異なる第２撮像部１３−１〜１３−３（動画撮像部２２０−１〜２２０−３）の画角を変更する制御部２２２−１と、を備えたので、例えば、対象者の顔を適切な画角で撮像するように制御できる。

（９）上記（８）の撮像システム２００において、第２撮像部１３−ｎ（動画撮像部２２０−ｎ）で撮像された画像を記憶媒体９９に保存させる記録Ｉ／Ｆ４２−ｎを備え、記録Ｉ／Ｆ４２−ｎは、第１撮像部１１（動作検出撮像部２１０）で撮像された画像を記憶媒体９９に保存させないようにしたので、例えば、特定部位のみの画像を保存しないように制御できる。

（１０）上記（８）または（９）の撮像システム２００において、第２撮像部１３−ｎ（動画撮像部２２０−ｎ）で撮像された画像を表示する表示部５０を備え、表示部５０は、第１撮像部１１（動作検出撮像部２１０）で撮像された画像を表示しないようにしたので、例えば、特定部位のみの画像を表示しないように制御できる。

（変形例２）
上述した第二の実施形態においては、複数の動画撮像部２２０−ｎによって1人の対象者を撮像する場合を例にして説明したが、対象者を複数として、複数の対象者を撮像するようにしてもよい。複数の対象者を撮像する場合には、どの対象者をどの動画撮像部２２０で撮像するかについて割り当ててもよい。例えば、動画撮像部２２０が撮像しやすい対象者を撮像するようにしてもよい。

上記説明では、電子機器の例として撮像装置１００、動作検出撮像部２１０、動画撮像部２２０を例示したが、多機能携帯電話機やタブレット型コンピュータなどを用いて撮像装置１００や撮像システム２００を構成してもよい。

以上の説明はあくまで一例であり、上記の実施形態の構成に何ら限定されるものではない。また、上述した第一実施形態と第二実施形態とを適宜組み合わせてもよいことは言うまでもない。

１０…撮像部
１１…第１撮像部
１２、３２、２１１…駆動部
１３…第２撮像部
２０…検出部
２１…顔検出部
２２…顔認識部
３０…集音部
３１…第１マイク
３３…第２マイク
４０…記録部
４１…バッファメモリ
４２…記録Ｉ／Ｆ
４３…フラッシュメモリ
５０…表示部
６０…計時部
７０、２１３、２２２…制御部
９９…記憶媒体
１００…撮像装置
２００…撮像システム
２１０…動作検出撮像部
２１２、２２１…通信部
２２０（２２０−１〜２２０−３）…動画撮像部

Claims (10)

1. 複数の撮像部よりも被写体側に設けられた被写体側撮像部と、
   前記複数の撮像部の撮像結果に基づいて、前記被写体側撮像部の姿勢を調節する調節部と、を備えたことを特徴とする電子機器。
2. 請求項１に記載の電子機器において、
   前記調節部は、前記複数の撮像部のうち被写体の略正面の顔を撮像する撮像部の撮像結果に基づいて、前記被写体側撮像部の姿勢を調節することを特徴とする電子機器。
3. 請求項１または２記載の電子機器において、
   前記調節部は、前記複数の撮像部による撮像結果から推定される被写体の顔の正面に向けて、前記被写体側撮像部の姿勢を調節することを特徴とする電子機器。
4. 請求項１から３のいずれか一項に記載の電子機器において、
   前記複数の撮像部の撮像結果に基づいて、前記複数の撮像部から撮像を継続する撮像部を選択する選択部を備えたことを特徴とする電子機器。
5. 請求項４に記載の電子機器において、
   前記選択部は、被写体の顔を撮像した撮像部と、当該撮像部と隣接する撮像部を選択することを特徴とする電子機器。
6. 請求項４に記載の電子機器において、
   前記選択部は、被写体の動きに応じて、前記複数の撮像部から少なくとも１つの撮像部を選択することを特徴とする電子機器。
7. 請求項１から３のいずれか一項に記載の電子機器において、
   前記複数の撮像部の撮像結果に基づいて、前記複数の撮像部から撮像を中止する撮像部を選択する選択部を備えたことを特徴とする電子機器。
8. 被写体の特定部位を撮像する第１撮像部と、
   前記第１撮像部の撮像結果に基づいて、前記第１撮像部とは異なる第２撮像部の画角を変更する変更部と、
   を備えたことを特徴とする電子機器。
9. 請求項８に記載の電子機器において、
   前記第２撮像部で撮像された画像を記憶媒体に保存させる記録制御部を備え、
   前記記録制御部は、前記第１撮像部で撮像された画像を前記記憶媒体に保存させないことを特徴とする電子機器。
10. 請求項８または９に記載の電子機器において、
    前記第２撮像部で撮像された画像を表示する表示部を備え、
    前記表示部は、前記第１撮像部で撮像された画像を表示しないことを特徴とする電子機器。
    

Images