JP2015102650A - 撮像制御装置および撮像装置 - Google Patents

Abstract

【課題】しかしながら、上記装置においても、撮像条件は使用者が手で操作しなければならず、不便であるという課題があった。
【解決手段】身体についての特定の動作を想起した場合に生じる脳波の条件である脳波条件を予め格納する条件格納部と、生体からの脳波に関する脳波情報を取得し、取得した前記脳波情報に含まれる脳波が前記条件格納部に格納されている前記脳波条件を満たすか否かを判断する条件判断部と、前記条件判断部により前記条件を満たすと判断された場合に、撮像装置が被写体を撮像する場合の条件である撮像条件を前記撮像装置に出力する条件出力部とを備える。
【選択図】図３

Description

本発明は、撮像制御装置および撮像装置に関する。

使用者から脳波を含む生理学的状態の情報を受け取り、その情報に基づいてカメラのシャッタ操作を制御する信号を出力すべきかどうかを決定する制御するシステムが知られている（例えば、特許文献１参照）。
［先行技術文献］
［特許文献］
［特許文献１］ 特開２００３−１７７４４９号公報

しかしながら、上記装置においても、撮像条件は使用者が手で操作しなければならず、不便であるという課題があった。

本発明の第１の態様においては、身体についての特定の動作を想起した場合に生じる脳波の条件である脳波条件を予め格納する条件格納部と、生体からの脳波に関する脳波情報を取得し、取得した前記脳波情報に含まれる脳波が前記条件格納部に格納されている前記脳波条件を満たすか否かを判断する条件判断部と、前記条件判断部により前記条件を満たすと判断された場合に、撮像装置が被写体を撮像する場合の条件である撮像条件を前記撮像装置に出力する条件出力部とを備える撮像制御装置が提供される。

なお、上記の発明の概要は、本発明の特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。

撮像制御システム１０の模式図を示す。 撮像制御装置１４の電極配置の一例を示す図である。 撮像制御システム１０の機能ブロック図を示す。 脳波条件データベースの一例を示す図である。 撮影条件出力モードにおいて表示部に表示される表示画像の一例を示す。 トレーニングモードにおいて表示部に表示される表示画像の一例を示す。 キャリブレーションモードにおいて表示部に表示される表示画像の一例を示す。 撮像制御装置の撮像条件の変更処理の一例を説明するフローチャートである。 トレーニングモードにおける処理の一例を説明するフローチャートである。 キャリブレーションモードにおける処理の一例を説明するフローチャートである。 ガイドモードにおいて表示部に表示されるガイド画像の一例を示す。 ガイドモードを設けた場合における撮像条件の変更処理の一例を説明するフローチャートである。 他の撮像制御システム１００の模式図を示す。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

図１は、撮像制御システム１０の模式図を示す。撮像制御システム１０は、撮像装置１２と、撮像制御装置１４から構成される。撮像制御システム１０において、撮像制御装置１４は、使用者１１が動作を想起した場合に生じる脳波情報、または使用者１１の生体反応情報を取得して、脳波情報および生体反応情報が、予め撮像制御装置１４に格納された脳波条件または生体反応条件を満たした場合に、撮像制御装置１４は、撮像装置１２へ撮像条件を出力する。撮像装置１２は、取得した撮像条件に変更する。

撮像制御装置１４は、帽子型の装置であり、使用者１１の頭部に装着される。撮像制御装置１４は、帽子１５と、固定ベルト１６と、複数の脳波計１７と、２つの筋電計１８と、生体制御部１９とを有する。帽子１５は、剛性のある布または皮製の帽子である。複数の脳波計１７は、帽子１５の内側であって、使用者１１の頭部に接する側に固定されている。２つの筋電計１８は、帽子に接続して設けられている。複数の脳波計１７および２つの筋電計１８は、配線を介して生体制御部１９と接続している。固定ベルト１６は、帽子１５を使用者１１の頭部に密着させて固定させる。これにより、複数の脳波計１７は、使用者１１の頭部に密着されるとともに、使用者１１の頭部に対する位置が固定される。

脳波計１７は電極を有し、使用者１１の頭皮から脳波を検出する。ここで脳波とは、人体の頭皮から計測できる電位のことである。脳波計１７は、検出した脳波を、配線を通じて生体制御部１９に出力する。

筋電計１８は、筋肉を動かすときに発生する微小電位を測定する。筋電計１８は、測定した電位を、配線を通じて生体制御部１９に出力する。なお、筋肉を動かすときに発生する微小電位は、脳波とは異なる体に対する反応情報の一例であり、他の生体反応の条件として、カメラにより撮影される身体の動作条件、心拍計により測定される心拍条件、使用者の発汗を湿度計により測定する湿度条件を用いてもよい。

生体制御部１９は、脳波計１７から脳波を検出すると、取得した電極の位置、および脳波から、撮像装置１２の撮像条件を変更するか否かを判断する。生体制御部１９は、撮像条件を変更すると判断した場合、撮像装置１２の撮像条件を撮像装置１２へ出力するが、撮像条件を変更しないと判断した場合は、撮像装置１２の撮像条件を撮像装置１２へ出力しない。

図２は、撮像制御装置１４における脳波計１７の配置の一例を示す図である。脳波計１７は、一般的に用いられている国際１０−２０法に従い、定められた場所に２１個の脳波計１７を配置している。脳波計１７には、それぞれ固有のＩＤが予め割り振られている。それぞれの脳波計１７から検出された脳波は、当該固有のＩＤとともに、生体制御部１９へ出力される。なお、脳波計１７は、変更する撮像条件に対応した動作を想起した場合に、脳波が変化する位置に選択的に設けてもよい。これにより、脳波計１７の数を少なくできる。

図３は、撮像制御システム１０の機能ブロック図を示す。上述したように、撮像制御システム１０は、撮像装置１２と、撮像制御装置１４とから構成される。

撮像装置１２は、撮影レンズ２０と、撮像素子２２と、駆動部２４と、Ａ／Ｄ変換回路２８と、メモリ３０と、撮像制御部３２と、メモリカードＩＦ３４と、メモリカード３６と、ＬＣＤ駆動回路３８と、表示部４０と、ＡＦセンサ４２と、操作部４４とを有する。撮像素子２２は、撮影レンズ２０の焦点面近傍に配置されている。撮像素子２２は、二次元的に複数の光電変換素子が配された、例えば、ＣＣＤ、ＣＭＯＳセンサ等のイメージセンサである。

駆動部２４は、操作部４４から使用者１１より撮像の指示が入力されると、撮像素子２２の光電変換素子からの画像信号を読み取るべく撮像素子２２を駆動する。撮像装置１２は、駆動部２４によりタイミング制御されて、受光面上に結像された被写界を画像信号に変換してＡ／Ｄ変換回路２８へ出力する。Ａ／Ｄ変換回路２８は、撮像素子２２が出力する画像信号をデジタル画像信号に変換してメモリ３０へ出力する。

撮像制御部３２は、メモリ３０をワークスペースとして種々の画像処理を施して、画像データを生成する。撮像制御部３２によって生成された画像データは、ＬＣＤ駆動回路３８により表示信号に変換され、表示部４０に表示される。また、メモリカードＩＦ３４に装着されているメモリカード３６に記録される。

ＡＦセンサ４２は、被写体空間に対して複数の測距点が設定された位相差センサであり、それぞれの測距点において被写体像のデフォーカス量を検出する。撮像シーケンスに付随するＡＦ、ＡＥ等の各種動作は、撮像制御部３２に制御されて実行される。例えば、撮像制御部３２は、ＡＦセンサ４２の検出信号を解析して、撮影レンズ２０の一部を構成するフォーカスレンズを移動させる合焦制御を実行する。なお、撮像素子２２をＡＦセンサ４２の代わりに用いてもよく、その場合には別個のＡＦセンサ４２は設けなくてよい。

撮像制御装置１４の生体制御部１９は、条件格納部５０と、条件判断部５２と、条件出力部５４とを有する。条件格納部５０は、使用者１１の身体について、特定の動作を想起した場合に生じる脳波の条件である脳波条件を予め格納している。また、条件格納部５０は、特定の動作を実行した場合に生じる筋電位の条件である筋電条件も予め格納している。なお、筋電条件は、脳波とは異なる生体反応の条件の一例である。

条件判断部５２は、脳波計１７から脳波情報を取得する。条件判断部５２は、取得した脳波情報に含まれる脳波が条件格納部に格納されている脳波条件を満たすか否かを判断する。条件判断部５２は、例えば、使用者が特定の部位の動作を想起する場合に、使用者の頭頂の動作野に生じるμ波（８−１４Ｈｚ）の振幅の減少（ＥＲＤ：ｅｖｅｎｔ−ｒｅｌａｔｅｄ ｄｅｓｙｎｃｈｒｏｎｉｚａｔｉｏｎ 事象関連脱同期）を脳波条件として、取得された脳波情報が脳波条件を満たすか否かを判断する。以後、使用者が特定の部位の動作を想起する場合に、使用者の頭頂の動作野に生じるμ波の振幅の減少を略してＥＲＤということがある。

ＥＲＤは、使用者が動作を想起した後に生じるμ波の振幅の減少であり、使用者が身体について特定の動作を想起した場合に、使用者の頭頂部の特定の位置におよそ２秒間生じることが知られている。例えば、使用者が右手の動作を想起すると、図２におけるＣ３（左頭頂部）に配置した脳波計１７にＥＲＤが観測され、使用者が左手の動作を想起すると、図２におけるＣ４（右頭頂部）に配置した脳波計１７にＥＲＤが観測される。

＜非特許文献１＞：外山純一・安藤惇・田村健・北崎充晃；脳波で制御するドライビングシュミレータ開発のための運動想起時事象関連脱同期・同期の基礎研究；信学技報 ＩＥＩＣＥ Ｔｅｃｎｉｃａｌ Ｒｅｐｏｒｔ ＮＣ２００８−１０２（２００９−１）
＜非特許文献２＞：中村翔太郎・吉川大弘・古橋武・名古屋大学；ＥＲＤに基づく運動想起判別に関する一検討；２４ｔｈ Ｆｕｚｚｙ Ｓｙｍｐｏｓｉｕｍ（Ｏｓａｋａ，Ｓｅｐｔｅｍｂｅｒ ３−５， ２００８）

脳波に含まれるμ波の振幅の減少率は、運動想起によって生じたと判断できる閾値となる。したがって、脳波に含まれるμ波の振幅の減少率が脳波条件の閾値として条件格納部５０に格納される。条件判断部５２は、予めさだめられた時間、例えば、運動想起によるμ波の振幅の減少が継続する時間に対応した２秒間に、脳波計１７から検出された脳波に含まれるμ波成分の振幅の減少率の最大値と、条件格納部５０に格納された脳波条件の閾値とを比較する。条件判断部５２は、脳波に含まれるμ波成分の振幅の減少率の最大値が脳波条件の閾値を上回った場合に、取得した脳波計の位置に対応した動作を想起したと判断する。なお、脳波に含まれるμ波の振幅の減少率で予め定めた閾値は、脳波条件の一例であり、脳波に含まれるμ波の振幅の減少率の最大値は、脳波情報の一例である。以後、上記例を用いて説明する。

条件判断部５２は、脳波条件を満たした脳波情報が測定された脳波計１７のＩＤに基づいて、脳波計の位置を特定する。条件判断部５２は、特定した脳波計の位置から使用者１１の身体のどの部位の動作を想起したかを判断する。上述したように、ＥＲＤは、特定の動作を想起した場合に、使用者１１の頭頂部の特定に位置に生じるので、ＥＲＤが観測された脳波計１７の位置に基づいて、使用者１１がどの部位の動作を想起したかが判断できる。条件判断部５２は、使用者１１が身体のどの部位の動作を想起したかを検出して、当該身体の部位に対応付けて記録された撮像条件を条件格納部５０から読み出して、撮像条件出力部５４に出力する。

また、条件判断部５２は、筋電計１８から、生体反応情報を取得する。条件判断部５２は、使用者１１の瞼の筋電間隔を取得して、使用者１１がどのくらいの早さで瞬きをしたかを判断する。条件判断部５２は、使用者１１の筋電間隔が当該閾値を上回った場合と、上回っていない場合とで異なる撮像条件を条件格納部５０から読み出して、条件出力部５４に出力する。

また、条件判断部５２は、撮像制御装置１４のモードを、撮像条件を出力する条件出力モードと、撮像条件を出力しないトレーニングモードと、撮像条件を出力しないキャリブレーションモードとに切り変えることができる。条件判断部５２は、使用者１１によって撮像装置１２の操作部４４から入力されたモードの切り替え指示に基づいて、撮像制御装置１４のモードを切り替える。なお、当該モード切り替えの指示は、使用者１１により撮像制御装置１４に、直接入力されてもよい。

また、条件判断部５２は、使用者１１が初めて撮像制御装置１４を使用すると検出された場合に、使用者１１から入力されたモードの切り替え指示に関わらず、撮像制御装置１４のモードをトレーニングモードまたはキャリブレーションモードに切り替えてもよい。これにより、使用者１１が撮像制御装置１４に不慣れであっても、使用方法が分からないで困惑させることなく、当該装置を使用させることができる。

また、キャリブレーションモードにおいては、条件判断部５２は、使用者１１が特定の動作を想起した場合に生じた脳波情報を取得する。条件判断部５２は、取得した脳波情報に基づいて、当該特定の動作に対応付けて条件格納部５０に予め格納している脳波条件の閾値を変更できる。

条件出力部５４は、条件判断部５２が条件格納部５０に格納された条件を満たすと判断した場合に、撮像装置１２が被写体を撮像する場合の条件である撮像条件を撮像装置１２に出力する。条件出力部５４は、撮像装置１２と無線通信を行い、当該撮像条件を示す信号を撮像装置１２に出力する。条件出力部５４は、例えば、ＵＷＢ（Ｕｌｔｒａ Ｗｉｄｅ Ｂａｎｄ）、ＺｉｇＢｅｅ（登録商標）、Ｗｉ−Ｆｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、３Ｇ、および／または、ＬＴＥ等の無線通信規格に準拠して通信する。

また、条件出力部５４は、トレーニングモードにおいて、条件判断部５２が、使用者１１から取得した脳波情報が、条件格納部５０に格納された脳波条件を満たすと判断された場合に、条件出力部５４は、変更する撮像条件を撮像装置１２の表示部４０に表示させる。一方、条件出力部５４は、トレーニングモードにおいて、条件判断部５２が使用者１１から取得した脳波情報が、条件格納部５０に格納された脳波条件を満たさないと判断した場合に、条件出力部５４は、脳波条件を満たさなかった表示を撮像装置１２の表示部４０に表示させる。なお、条件出力部５４は、脳波条件を満たさなかった表示に加え、又は当該表示とは別に、取得した脳波情報と条件格納部５０に格納された脳波条件との差を表示部４０に表示させてもよい。

図４は、脳波条件データベースの一例を示す図である。脳波条件データベース６０には、撮像条件と、設定と、想起する動作と、脳波計の位置と、脳波に含まれるμ波の振幅の閾値と、筋電間隔とが記録されている。

撮像条件の欄には、変更される撮像条件が記録されている。図４に示した例において、撮像条件の欄には、「絞りを一段大きく」、「絞りを一段小さく」「シャッタスピードを速く」、「シャッタスピードを遅く」、「ＩＳＯ感度を高く」、「ＩＳＯ感度を低く」、「ＢＭＩ制御の切り替え」が記録されている。したがって、脳波条件データベース６０に記録された上記撮像条件が、撮像制御装置１４によって制御される。動作の欄には、使用者１１が動作を想起する身体の部位が記録されている。

脳波計の位置の欄には、動作の欄に記録された身体部位の動作を想起した場合に、大きなＥＲＤが検出される脳波計１７の位置が記録されている。閾値の欄には、μ波の振幅の減少率が、脳波条件として記録されている。筋電間隔の欄には、筋電間隔の閾値が記録されている。

図５は、撮影条件出力モードにおけて表示部４０に表示される表示画像の一例を示す。表示部４０は、メイン表示欄６１と、サブ表示欄６２とから構成される。メイン表示欄６１には、被写体６３と、状態表示６４とが表示される。

状態表示６４には、ＢＭＩ制御表示、およびモード表示が表示される。ＢＭＩ制御表示には、ＢＭＩ制御のＯＮ・ＯＦＦが表示される。すなわち、撮像装置１２が撮像制御装置１４により制御されている場合には、「ＢＭＩ制御ＯＮ」が表示され、撮像制御装置１４に制御されていない場合には「ＢＭＩ制御ＯＦＦ」が表示される。モード表示には、条件制御装置のモードが表示される。前述したように、条件判断部５２は、撮像制御装置１４を、撮影条件出力モードと、トレーニングモードと、キャリブレーションモードとに切り替えることができる。図５に示した例においては、撮像制御装置１４は、撮影条件出力モードとなっているので、その場合には、状態表示６４には「撮影条件出力モード」が表示される。

サブ表示欄６２には、シャッタスピード値６６と、絞り値６７と、ＩＳＯ感度値６８と、露出インジケータ６９とが表示される。そして、それぞれの表示の上には、当該条件を変更する場合に想起する身体の部位が略図で表示されている。これにより、使用者１１は、当該表示により、身体のどの部位の動作を想起すればよいのか、容易に知ることができる。

図６は、トレーニングモードにおいて表示部４０に表示される表示画像の一例を示す。トレーニングモードにおいて、メイン表示欄６１には、動作アニメーション７０と、動作テキスト７１と、状態表示７２が表示される。動作アニメーション７０には、人物の身体を模したアニメーションであり、使用者１１が入力した撮像条件を変更する場合に想起する動作が表示される。なお、図６は、使用者１１が「ＩＳＯ感度を高める」という撮像条件を入力した例を示しており、当該撮像条件に対応する左足を上げた状態の人物を模したアニメーションが表示される。なお、動作アニメーションは静止画でもよく、動画でもよい。なお、動画の場合は、左足を動かした動画を表示することが好ましい。

動作テキスト７１には、使用者１１が入力した撮像条件を変更する場合に想起する動作が文字で表示される。図６に示した例において、動作テキスト７１は、動作アニメーション７０の頭部からの吹き出し表示としているが、これに限らず、メイン表示欄６１における図６で示した場所とは異なる位置であってもよく、またはサブ表示欄６２に表示してもよい。

状態表示７２には、ＢＭＩ制御表示と、検出値７３と、閾値７４と、結果７５と、モード表示とが表示される。なお、ＢＭＩ制御表示と、モード表示は、図５と同じであるので説明を省略する。検出値７３には、動作アニメーション７０および動作テキスト７１に対応する動作を想起した場合に生じる脳波情報が表示される。

閾値７４には、動作アニメーション７０および動作テキスト７１に表示された動作を想起したと判断する脳波条件が表示される。結果７５には、脳波情報が、脳波条件を満たした場合に、変更する撮像条件が表示される。図６に示した例において、脳波条件が３０であるのに対し、脳波情報が７０であり、脳波条件の閾値を、脳波情報の値が越えているので、結果７５には、「ＩＳＯ感度を高くします」が表示される。

図７は、キャリブレーションモードにおいて表示部４０に表示される表示画像の一例を示す。キャリブレーションモードにおいて、メイン表示欄６１には、動作アニメーション８０と、動作テキスト８１と、状態表示８２が表示される。動作アニメーション８０には、使用者１１が入力した撮像条件を変更する場合に想起する動作が表示される。動作テキスト８１には、同じく、使用者１１が入力した撮像条件を変更する場合に想起する動作が文字で表示される。

状態表示８２には、ＢＭＩ制御表示と、検出値８３と、閾値８４と、モード表示とが表示される。なお、ＢＭＩ制御表示と、モード表示は、図４と同じであるので説明を省略する。検出値８３には、動作アニメーション８０および動作テキスト８１に表示された動作を想起した場合に生じる脳波情報が表示される。また、閾値８４には、動作アニメーション８０および動作テキスト８１に表示された動作を想起したと判断する脳波条件が表示される。これらの表示により、使用者１１は、検出値８３に表示された値に脳波条件の閾値を変更するか否かを判断する。

図８は、撮像制御装置の撮像条件の変更処理の一例を説明するフローチャートである。図８に示したフローチャートは、撮像制御装置１４が起動し、撮像制御装置１４と撮像装置１２との通信が確立し、撮像制御装置１４によって撮像装置１２の撮像条件の制御がなされるようになった場合にスタートする。

まず、条件判断部５２は、撮像制御装置１４がトレーニングモードに設定されているか否かを判断する（Ｓ１０１）。条件判断部５２は、撮像制御装置１４がトレーニングモードに設定されていると判断すると（Ｓ１０１：Ｙｅｓ）、条件判断部５２は、トレーニングモードの処理を実行する（Ｓ１０２）。なお、トレーニングモードの処理については、図９を用いて別途説明する。一方、条件判断部５２は、撮像制御装置１４がトレーニングモードに設定されていないと判断すると、（Ｓ１０１：Ｎｏ）、次に撮像制御装置１４がキャリブレーションモードに設定されているか否かを判断する（Ｓ１０２）。

条件判断部５２は、撮像制御装置１４がキャリブレーションモードに設定されていると判断すると（Ｓ１０２：Ｙｅｓ）、条件判断部５２は、キャリブレーションモードの処理を実行する。キャリブレーションモードの処理については、図１０を用いて別途説明する。一方、条件判断部５２は、撮像制御装置１４がキャリブレーションモードに設定されていないと判断すると、脳波情報を取得したか否かを判断する（Ｓ１０３）。

条件判断部５２は、脳波計１７が検出した脳波に含まれるμ波が、全ての脳波計１７において予め定められた時間、例えば２秒間検出された場合に、脳波情報が取得できたと判断し（Ｓ１０５：Ｙｅｓ）、検出した２秒間の脳波情報を記憶して、処理をステップＳ１０７へ進める。一方、脳波計１７と頭皮とが密着しておらず、脳波計１７が検出した脳波に含まれるμ波の振幅が著しく小さかったり、または２秒間検出されない場合に、条件判断部５２は、脳波情報が取得できないと判断し（Ｓ１０５：Ｎｏ）、例えば、「撮像制御装置１４を装着しなおしてください」といったエラー表示を、条件出力部５４から撮像装置１２の表示部４０に表示させて（Ｓ１０６）、処理をステップＳ１０５へ戻す。

条件判断部５２は、条件格納部５０から脳波条件を全て読み出す（Ｓ１０７）。条件判断部５２は、脳波計１７が検出した脳波情報のうち、読み出した脳波条件を満たすものがあるか否かを判断する（Ｓ１０８）。本実施形態において、条件判断部５２は、脳波情報が、脳波条件の閾値を上回った場合であって、当該脳波情報を検出した脳波計１７の位置が、脳波条件データベース６０に格納されている場合に、条件判断部５２は、脳波条件を満たしたと判断し（Ｓ１０８：Ｙｅｓ）、記憶した脳波情報を消去する。

条件判断部５２は、脳波条件データベース６０を参照して、脳波条件を満たした脳波計１７の位置と同じ行に記録されている撮像条件を読み出す（Ｓ１０９）。条件判断部５２は、読み出した撮像条件を条件出力部５４に出力する。条件出力部５４は、取得した撮像条件から、撮像条件を示す信号を作成して、撮像装置１２へ出力する。撮像装置１２の撮像制御部３２は、当該信号を取得すると、当該信号に基づいて、撮像条件を変更する。

一方、脳波情報が、脳波条件を満たさない場合、または、脳波情報が脳波条件を満たしたが、当該脳波計１７の位置が脳波条件データベース６０に格納されていない場合、または、脳波情報が脳波条件を満たした脳波計が２つ以上あった場合に、条件判断部５２は、脳波条件を満たさないと判断する（Ｓ１０８：Ｎｏ）。この場合、条件判断部５２は、記憶した脳波情報を消去して、ステップＳ１０９およびステップＳ１１０をスキップさせて、処理をステップＳ１１１へ進める。なお、脳波情報が脳波条件を満たした脳波計が２つ以上あった場合、脳波条件を満たさないとしたが、これに代えて、脳波条件を満たすとしてもよく、この場合、複数の撮像条件を示す信号を作成して、撮像装置１２へ出力してもよい。

条件判断部５２は、使用者１１より終了指示があったか否かを判断する（Ｓ１１１）。条件判断部５２は、使用者１１より終了指示があったと判断して（Ｓ１１１：Ｙｅｓ）、撮像条件の変更処理は終了する。一方、条件判断部５２は、使用者１１より終了指示がないと判断した場合（Ｓ１１１：Ｎｏ）、処理をステップＳ１０１に戻して、再びステップＳ１０１より、撮像条件の変更処理を実行する。なお、終了指示の一例は、撮像制御装置１４の脱着である。撮像制御装置１４に、装着検知手段を設け、当該装着検知手段により撮像制御装置１４が脱着されたことが検出された場合に、条件判断部５２は、使用者１１より終了指示があったと判断する。

なお、条件判断部５２は、ステップＳ１０８において、脳波条件を満たすか否かを判断する場合において、シャッタスピードについては、筋電計１８からの筋電情報を取得して、脳波情報と筋電情報とにより、当該撮像条件を変更するか否かを判断している。脳波条件データベース６０に示した例のように、条件判断部５２は、脳波情報から、シャッタスピードを変更するか否かを判断し、筋電情報に含まれる筋電と筋電の間隔に基づいて、シャッタスピードを速くするのか、遅くするのかを判断する。具体的には、筋電間隔が０．５秒より短い場合は、条件判断部５２は、早く瞬きしたと判断して、シャッタスピードを速くする。一方、０．５秒以上の場合には、遅く瞬きしたと判断して、シャッタスピードを遅くする。このように、脳波情報に筋電情報のような、生体反応情報との組み合わせることで、数多くの撮像条件を変更できる撮像条件制御装置とすることができる。

図９は、トレーニングモードにおける処理の一例を説明するフローチャートである。ステップＳ２０１において、条件判断部５２は、使用者１１から撮像条件の入力を待つ（Ｓ２０１：Ｎｏ）。撮像条件が使用者１１から入力されると（Ｓ２０１：Ｙｅｓ）、条件判断部５２は、使用者１１から入力された撮像条件に対応した動作を条件格納部５０から読み出す（Ｓ２０２）。

条件判断部５２は、撮像条件に対応した動作に関する情報を、条件出力部５４に出力すると、条件出力部５４は、動作に関するアニメーションを表示させる信号を、撮像制御部３２に出力する。撮像制御部３２は、当該信号を取得すると、メモリ３０に格納されているアニメーションを読み出して、図６に示したトレーニング表示画面を作成する。撮像制御部３２は、当該表示画面を表示部４０に表示させる（Ｓ２０３）。

条件判断部５２は、脳波情報を取得したか否かを判断する（Ｓ２０４）。条件判断部５２は、脳波計１７が検出した脳波に含まれるμ波が全ての脳波計１７において、予め定められた時間、例えば２秒間検出された場合に、脳波情報が取得できたと判断し（Ｓ２０４：Ｙｅｓ）、検出した２秒間の脳波情報を記憶して、処理をステップＳ２０６へ進める。一方、条件判断部５２は、脳波計１７と頭皮とが密着しておらず、脳波計１７が検出したμ波の振幅が著しく小さかったり、または２秒間観測されなかったりした場合に、条件判断部５２は、脳波情報が取得できないと判断し（Ｓ２０４：Ｎｏ）、例えば、「撮像制御装置１４を装着しなおしてください」といったエラー表示を、条件出力部５４から撮像装置１２の表示部４０に表示させて（Ｓ２０５）、処理をステップＳ２０４へ戻す。

条件判断部５２は、条件格納部５０から、使用者１１によって入力された撮像条件に対応する脳波条件を読み出す（Ｓ２０６）。条件判断部５２は、入力された撮像条件に対応する位置に設けられた脳波計１７で検出された脳波情報が脳波条件を満たすか否かを判断する（Ｓ２０７）。条件判断部５２は、取得した脳波情報が脳波条件の閾値を上回った場合に、脳波情報が脳波条件を満たすと判断して（Ｓ２０７：Ｙｅｓ）、脳波情報を消去して、条件出力部５４に条件を満たしたことを示す情報を出力する。条件出力部５４は、当該情報を取得すると、入力された撮像条件を示す信号を作成して撮像制御部３２に出力する（Ｓ２０８）。

撮像制御部３２は、撮像条件を示す信号を取得すると、入力された撮像条件を変更する表示を状態表示６４に表示させた表示画像を作成して、表示部４０に表示する（Ｓ２０９）。撮像制御部３２により表示される表示画像の一例が、図５に示した表示画像である。

一方、条件判断部５２は、取得した脳波情報が脳波条件を越えない場合に、条件判断部５２は、取得した脳波情報が脳波条件を満たさないと判断して（Ｓ２０７：Ｎｏ）、脳波情報を消去して、脳波情報と脳波条件との差を算出する（Ｓ２１０）。条件判断部５２は、脳波情報と脳波条件との差を示す情報を条件出力部５４に出力する。条件出力部５４は、当該情報を取得すると、脳波情報と脳波条件との差を示す信号を作成して撮像制御部３２へ出力する。撮像制御部３２は、当該差を示す信号を取得すると、脳波情報と脳波条件との差と、撮像条件が変更されないことを状態表示７２に表示させた表示画像を作成して、表示部４０に表示させる（Ｓ２１１）。

ステップＳ２０９およびステップＳ２１１に続いて、条件判断部５２は、トレーニングモードを終了する指示が入力されたか否かを判断する。条件判断部５２は、機器の設定が、トレーニングモードのままであった場合、トレーニングモードを終了する指示がないと判断して（Ｓ２１２：Ｎｏ）、処理をステップＳ２０１へ戻して再び、トレーニングモードの処理を実行する。一方、機器の設定がトレーニングモードでない場合、条件判断部５２は、トレーニングモードを終了する指示があったと判断して（Ｓ２１２：Ｙｅｓ）、トレーニングモードを終了して処理を撮像条件変更処理のステップＳ１０１へ移動させて、撮像条件変更処理を実行する。

学習することによって、ＥＲＤが大きくなることが知られているので、当該トレーニングモードを設けることによって、使用者１１は、運動想起によって撮像条件を容易に変更することができる。また、運動想起による脳波の検出値と、脳波条件との差を表示させることで、使用者１１は、どのようにすれば、ＥＲＤを大きくできるのか、もしくは、今のままの脳波条件では脳波条件を満たすことができないので、脳波条件を変える必要があることを知ることができる。

図１０は、キャリブレーションモードにおける処理の一例を説明するフローチャートである。キャリブレーションモードの処理において、ステップＳ２０１、ステップＳ２０２、ステップＳ２０３、ステップＳ２０４およびステップＳ２０５は、図９に示したトレーニングモードにおける処理と同じであるので説明を省略する。

条件判断部５２は、脳波情報が取得できたと判断すると（Ｓ２０４：Ｙｅｓ）、条件判断部５２は、条件格納部５０から使用者１１が指定した動作に対応する脳波条件を読み出す（Ｓ３０１）。条件判断部５２は、脳波条件と取得した脳波情報を条件出力部５４に出力する。条件出力部５４は、脳波条件と脳波情報を示す信号を作成して、撮像制御部３２へ出力する（Ｓ３０２）。撮像制御部３２は、当該信号を取得すると、当該信号に含まれる脳波情報と脳波条件とから、脳波情報を検出値８３に、脳波条件を閾値８４に表示させた表示画像を作成して、表示部４０に表示させる。この表示画像の一例を示したのが、図７である。

条件判断部５２は、脳波条件を変更する指示があるか否かを判断する（Ｓ３０３）。ステップＳ３０３の処理において、まず、撮像制御部３２が、使用者１１からの脳波条件変更の指示を受け付ける。撮像制御部３２は、使用者１１から脳波条件変更の指示を受け付けると、脳波条件を変更することを示す信号を条件出力部５４に出力する。条件出力部５４は、当該信号を取得すると、直前に出力した脳波情報に、脳波条件を変更することを示す情報を作成して、条件判断部５２に出力する。条件判断部５２は、当該情報を取得すると、脳波条件を変更する指示があったと判断して（Ｓ３０３：Ｙｅｓ）、脳波条件格納部５０に格納している脳波条件の閾値を、ステップＳ３０２にて出力した脳波情報の値に変更する（Ｓ３０４）。

同様にステップＳ３０３の処理において、撮像制御部３２は、使用者１１からの脳波条件変更しない指示を受けた場合、または、予め定められた時間の間に、使用者１１から脳波条件を変更する指示がなかった場合に、脳波条件を変更しないことを示す信号を条件出力部５４へ出力する。条件出力部５４は、当該信号を取得すると、脳波条件を変更しないことを示す情報を、条件判断部５２に出力する。条件判断部５２は、当該情報を取得すると、脳波条件を変更する指示がなかったと判断して（Ｓ３０３：Ｎｏ）、ステップＳ３０４の処理をスキップして、処理をステップＳ３０５へ進める。

ステップＳ３０５において、条件判断部５２は、キャリブレーションモードを終了する指示が入力されたか否かを判断する。条件判断部５２は、機器の設定が、キャリブレーションモードのままであった場合、キャリブレーションモードを終了する指示がないと判断して（Ｓ３０５：Ｎｏ）、処理をステップＳ２０１へ戻して再び、キャリブレーションモードの処理を実行する。一方、機器の設定がキャリブレーションモードでない場合、条件判断部５２は、キャリブレーションモードを終了する指示があったと判断して（Ｓ３０５：Ｙｅｓ）、キャリブレーションモードを終了して処理を撮像条件変更処理のステップＳ１０１へ移動させて、撮像条件変更処理を実行する。

ＥＲＤは、個人差があることが知られている。したがって、キャリブレーションモードを設け、使用者ごとにキャリブレーションモードを実行することで、使用者１１の脳波に最適な脳波条件を設定できる。これにより、使用者１１は、容易に脳波制御により、撮像装置１２の撮像条件を変更できる。

なお、トレーニングモードおよびキャリブレーションモードは、機器の設定により、トレーニングモードおよびキャリブレーションモードに変更する例で説明したが、撮像制御装置１４に使用者１１への装着検知部を設け、当該装着検知部が装着を検知した場合に、条件判断部５２は、トレーニングモードおよびキャリブレーションモードの処理を実行させてもよい。これにより、使用者１１は、使用開始後から、撮像条件を変更する動作を知ることができ、または、最適な脳波条件で、撮像条件を変更できるようになる。

以上説明したおよび撮像制御装置１４により、使用者１１は、脳波情報、または脳波情報と生体情報を用いて撮像条件を変更することができる。これにより使用者１１は、常にレリーズボタンに指をかけてシャッタチャンスを待ちながら、撮像条件を脳波により変更できるので、シャッタチャンスを逃すことがない。さらに、脳波により撮像条件を変更できるので、使用者１１は、撮像装置１２に触れることなく撮像条件を変更できる。これにより、使用者１１は、撮像条件の変更を素早く行うことができ、シャッタチャンスを逃すことなく、最適な撮像条件で被写体を撮影できる。

本実施形態における図８に示したフローチャートにおいて、使用者１１から取得した脳波情報が、脳波条件を満たさない場合、条件判断部５２は、撮像条件を変更することなく、再び、脳波情報を取得する例を示したが、予め定められた時間の間、脳波条件を満たす脳波情報が取得できない場合に、条件判断部５２は、動作がどの撮像条件に対応しているかを示すガイド画像を、撮像装置１２の表示部４０に表示させてもよい。

図１１は、ガイドモードにおいて表示部に表示されるガイド画像の一例を示す。ガイド画像は、メイン表示欄６１と、サブ表示欄６２とから構成される。メイン表示欄６１には、人物アニメーション９０と、複数の動作対応表示９１と、状態表示９２、９４とが表示される。

人物アニメーション９０は、人物の身体を模したアニメーションが表示される。複数の動作対応表示９１は、身体のどの部位の動作が、どの撮像条件に対応しているかをそれぞれ表示する。例えば、図１１に示した例においては、右足の動作は、撮像条件「ＩＳＯ感度を低くする」に対応するので、人物アニメーション９０の右足に対応する位置を矢印で示して、「ＩＳＯ感度（低）」を表示している。同様に、左足に対応する位置には「ＩＳＯ感度（高）」を、右手に対応する位置には「絞り（大）」を、左手に対応する位置には「絞り（小）」を、首に対応する位置には「ＢＭＩ制御切り替え」を、目に対応する位置には「シャッタスピード」を表示している。

また、状態表示９２には、ＢＭＩ制御を行っていることを示す表示「ＢＭＩ制御ＯＮ」と、モードを示すモード表示「ガイドモード」を表示している。また、状態表示９４には、使用者１１の脳波状態を示す表示「脳波が乱れています」を表示している。状態表示９４を表示することによって、使用者１１に、一定時間以上、脳波情報が脳波条件を満たせない状態であることを知らせることができる。

図１２は、ガイドモードを設けた場合における撮像条件の変更処理の一例を説明するフローチャートである。図１２に示したフローチャートにおいて、ステップＳ１０１からステップＳ１０７まで、およびステップＳ１０９からステップＳ１１１までの処理は、図８に示したフローチャートと同じ処理を実行するので説明は省略する。

条件判断部５２は、取得した脳波情報が脳波条件を満たすか否かを判断する（Ｓ４０１）。条件判断部５２は、取得した脳波情報が脳波条件を満たさないと判断した場合（Ｓ４０１：Ｎｏ）、条件判断部５２は、記憶した脳波情報を消去するとともに、脳波条件を取得している時間をカウントし、当該時間のカウント値が、予め定めた時間を経過したか否かを判断する（Ｓ４０２）。条件判断部５２は、時間のカウント値が、予め定めた時間を経過していないと判断した場合（Ｓ４０２：Ｎｏ）、処理をステップＳ１０５に戻し、再び、脳波情報を２秒間取得する処理を実行する（Ｓ１０５）。

一方、条件判断部５２は、時間のカウント値が予め定めた時間を経過したと判断した場合（Ｓ４０２：Ｙｅｓ）、条件判断部５２は、条件出力部５４にガイド画像を出力する情報を出力する（Ｓ４０３）。条件判断部５２は、処理をステップＳ１０１に戻して、機器の設定がトレーニングモードになっているいか否かを判断する処理を実行する（Ｓ１０１）。

なお、ステップＳ４０３の処理において、条件出力部５４は、条件判断部５２が出力した当該情報を取得すると、撮像制御部３２にガイド画像を出力する信号を出力する。撮像制御部３２は、当該信号を取得すると、ガイド画像を作成して、表示部４０にガイド表示を表示する。

一方、条件判断部５２は、脳波条件を満たす脳波情報を取得したと判断すると（Ｓ４０１：Ｙｅｓ）、処理をステップＳ１０９以降へと進める。ステップＳ１０９以降の処理は、図８で示したフローチャートと同じであるので、説明を省略する。

このように、ガイドモードを設けることにより、使用者１１がなかなか脳波条件を満たせない場合に、使用者１１に、撮像条件を変更する動作が、どのような動作なのかを知ることができる。これにより、使用者１１が長時間撮像条件を変更できない状況を早めに解消できる。

また、本実施形態において、表示部４０に表示させるトレーニングモードにおける表示画像、キャリブレーションモードのおける表示画像、およびガイド表示画像は撮像制御部３２で作成する例で説明したが、撮像制御装置１４の条件判断部５２で作成してもよい。この場合、条件格納部５０には、当該表示画像を作成するためのデータが予め格納される。また、本実施形態において、撮像装置１２と撮像制御装置１４とを別の装置として設けた例を示したが、撮像装置１２が撮像制御装置１４を含んでもよい。

図１３は、他の撮像制御システム１００の模式図を示す。撮像制御システム１００は、撮像装置１１２と撮像制御装置１１４とから構成される。撮像制御システム１００において、撮像制御装置１１４は、使用者１１が動作を想起した場合に生じる脳波情報、または使用者１１の生体反応情報を取得して、撮像装置１１２の撮像条件およびレリーズ操作を制御する。したがって、撮像制御システム１００において、使用者１１は、撮像装置１１２に触れることなく遠隔から、脳波情報、または使用者１１の生体反応情報を用いて制御できる。

このような撮像制御システム１００、および撮像制御装置１１４を用いることで、使用者１１は、遠隔から、脳波または生体反応を用いて撮像装置１１２の撮像条件およびレリーズ操作できる。これにより、従来のリモートコントロールによる遠隔操作よりも、単純な動作で撮像条件の変更およびレリーズボタンの操作ができるので、シャッタチャンスを逃すことなく、最適な撮像条件で被写体を撮像することができる。

なお、本実施形態においては、脳波として運動想起によって生じるＥＲＤに基づいて撮像装置の撮像条件を制御する例を示したが、脳波の周波数を用いて、合焦する被写体を特定してもよい。撮像制御部３２は、撮像装置の表示部４０に表示される複数の被写体を、それぞれ周波数を変えて点滅させて表示させる。点滅した被写体を見た使用者１１は、使用者１１の意思に関わらず、脳波には使用者１１が見た被写体の点滅周波数に同期する周波数成分が現れることが知られている。条件判断部５２は、脳波計１７から取得した脳波情報が被写体の点滅周波数に同期した周波数成分を含むか否かを、予め定めた閾値以上の周波数のピークが観測されたこと、および、閾値以上のピークが観測された周波数が被写体の点滅周波数と同じであること、を脳波条件として判断する。周波数成分のピークの検出は、脳波計１７からの脳波の入力を高速フーリエ変換することによって検出できる。条件判断部５２は、脳波計１７から取得した脳波情報が上記脳波条件を満足する周波数成分を含むと判断した場合に、条件判断部５２は、当該周波数の情報を条件出力部５４に出力する。条件出力部５４は、当該検出された周波数を示す信号を、撮像制御部３２に出力する。撮像制御部３２は、上記複数の被写体のうち取得した周波数と同じ周波数に点滅させた被写体に合焦する。使用者１１の撮像指示が操作部４４より入力されることにより、撮像装置１１２は、当該被写体を撮像できる。

また、人物の顔を見た場合に脳波に発生する、事象関連電位Ｎ１７０を用いて被写体を特定してもよい。Ｎ１７０は、人物の顔を見た場合に生じる事象関連電位であり、人物の顔を表示させてから１７０ｍｓ後に左右の後側頭部に陰極電位が生じることが知られている。従って、使用者１１に事象関連電位Ｎ１７０が観測された場合、使用者１１は、被写体として人物を特定していると判断できる。したがって、条件判断部５２は、合焦する被写体として人物以外を候補として除くことができるので、パターンマッチング等で人物と人物でない被写体とを区別することによって、被写体の特定を早めることができる。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

１０、１００ 撮像制御システム、１１ 使用者、１２、１１２ 撮像装置、１４、１１４ 撮像制御装置、１５ 帽子、１６ 固定ベルト、１７ 脳波計、１８ 筋電計、１９ 生体制御部、２０ 撮影レンズ、２２ 撮像素子、２４ 駆動部、２８ Ａ／Ｄ変換回路、３０ メモリ、３２ 撮像制御部、３４ メモリカードＩＦ、３６ メモリカード、３８ ＬＣＤ駆動回路、４０ 表示部、４２ ＡＦセンサ、４４ 操作部、５０ 条件格納部、５２ 条件判断部、５４ 条件出力部、６０ 脳波条件データベース、６１ メイン表示欄、６２ サブ表示欄、６３ 被写体、６４ 状態表示、６６ シャッタスピード値、６７ 絞り値、６８ ＩＳＯ感度値、６９ 露出インジケータ、７０、８０ 動作アニメーション、７１、８１ 動作テキスト、７２、８２ 状態表示、７３、８３ 検出値、７４、８４ 閾値、７５ 結果、９０ 人物アニメーション、９１ 動作対応表示、９２、９４ 状態表示

Claims (8)

1. 身体についての特定の動作を想起した場合に生じる脳波の条件である脳波条件を予め格納する条件格納部と、
   生体からの脳波に関する脳波情報を取得し、取得した前記脳波情報に含まれる脳波が前記条件格納部に格納されている前記脳波条件を満たすか否かを判断する条件判断部と、
   前記条件判断部により前記条件を満たすと判断された場合に、撮像装置が被写体を撮像する場合の条件である撮像条件を前記撮像装置に出力する条件出力部と
   を備える撮像制御装置。
2. 前記脳波条件には周期が含まれ、前記条件判断部は、前記脳波情報に含まれる周期に基づいて前記脳波条件を満たすか否かを判断する請求項１に記載の撮像制御装置。
3. 前記条件判断部は、撮像条件を出力する条件出力モードと、撮像条件を出力しないトレーニングモードとの間を外部からの入力により切り変え可能であり、
   前記トレーニングモードにおいて、前記条件判断部により、前記生体から取得した脳波情報が、前記脳波条件を満たすと判断された場合に、前記条件出力部は、前記撮像条件を表示部に表示させる請求項１又は２に記載の撮像制御装置。
4. 前記条件判断部により、前記生体から取得した脳波情報が前記脳波条件を満たさないと判断した場合に、前記条件出力部は、その旨を前記表示部に表示させる請求項３に記載の撮像制御装置。
5. 前記条件判断部は、撮像条件を出力する条件出力モードと、撮像条件を出力しないキャリブレーションモードとの間を外部からの入力により切り変え可能であり、
   前記キャリブレーションモードにおいて、前記条件判断部は、前記生体が特定の動作を想起した場合に生じた脳波情報を取得して、前記条件格納部に予め格納している脳波条件に含まれる閾値を設定する請求項１から４の何れか１項に記載の撮像制御装置。
6. 前記条件判断部により、予め定められた時間に脳波条件を満たす脳波情報を取得できない場合に、前記条件出力部は、動作の想起を促すガイド表示を前記表示部に表示させる請求項３又は４に記載の撮像制御装置。
7. 前記条件格納部は、前記脳波とは異なる生体反応の条件である生体条件をさらに予め格納し、
   前記条件判断部は、前記脳波情報に加えて、前記生体条件に関する反応情報を生体から取得して、前記脳波条件および前記生体条件を満たすか否かを判断する請求項１から６の何れか１項に記載の撮像制御装置。
8. 請求項１から７の何れか１項に記載の撮像制御装置を備える撮像装置。

Images