JP2008085548A - 撮像装置、撮像方法 - Google Patents

Abstract

【課題】外界状況に応じて的確或いはおもしろみのある撮像動作制御が行われるようにする。
【解決手段】ユーザが眼鏡型もしくは頭部装着型の装着ユニットを装着することで、撮像手段がユーザの視線方向の光景を撮像する状態となるようにし、撮像手段で撮像された画像を表示手段で表示させたり、記録手段で記録媒体に記録させたり、送信手段で外部機器に送信させる。ここで、撮像動作のオン／オフや、撮像動作態様、例えばズーム状態、フォーカス状態、撮像感度調整や輝度レベル等の信号処理、撮像時のフレームレートなど、各種の撮像動作制御を、外界状況を応じて実行する。
【選択図】図１

Description

本発明は、例えば眼鏡型もしくは頭部装着型の装着ユニットなどによりユーザに装着された状態で、ユーザが視認する方向を被写体方向として撮像する撮像装置と撮像方法に関する。

特開２００５−１７２８５１号公報

例えば上記各特許文献１のように、眼鏡型もしくは頭部装着型の装着ユニットに小型のカメラを取り付け、ユーザの視線方向の光景を撮像できるようにした装置が提案されている。

しかしながら従来の装置では、ユーザが操作キー等の操作子の操作を不要としたうえで、状況に応じて、ユーザが見ている光景を、多様な撮像動作態様で的確に撮像する装置は開発されていない。
そこで本発明では、外界の各種の状況に応じて得られる外界情報に応じて、的確な撮像動作制御が行われるようにすることを目的とする。

本発明の撮像装置は、使用者が視認する方向を被写体方向として撮像するようにされる撮像手段と、外界情報を取得する外界情報取得手段と、上記外界情報取得手段で取得された情報に基づいて上記撮像手段の動作を制御する制御手段とを備える。
また上記撮像手段で撮像された画像を表示する表示手段を更に備える。
また上記撮像手段で撮像された画像を記録媒体に記録する記録手段を更に備える。またこの場合、上記制御手段は、上記外界情報取得手段で取得された情報に基づいて、上記記録手段での記録開始又は記録終了の制御を行う。
また上記撮像手段で撮像された画像を外部機器に送信する送信手段を更に備える。又この場合、上記制御手段は、上記外界情報取得手段で取得された情報に基づいて、上記送信手段での送信開始又は送信終了の制御を行う。
また上記撮像手段は、撮像素子としてＣＣＤセンサもしくはＣＭＯＳセンサを用いて構成されている。

また上記外界情報取得手段は、上記外界情報として周囲環境状況を検出するセンサである。
また上記外界情報取得手段は、上記外界情報として、上記撮像手段の撮像対象に関する情報を検出するセンサである。
また上記外界情報取得手段は、上記外界情報として、現在位置情報を取得する。
また上記外界情報取得手段は、上記外界情報として、現在日時を取得する。
また上記外界情報取得手段は、外部機器との通信により、上記外界情報を取得する。
また上記外界情報取得手段は、上記撮像手段により撮像した画像についての画像解析により、上記外界情報を取得する。

また上記外界情報取得手段が取得する上記外界情報は、周囲の明るさ、又は温度、又は湿度、又は気圧、又は天候の情報である。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象までの距離の情報である。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象が発する赤外線の情報又はエネルギーである。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象が発する紫外線の情報又はエネルギーである。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象を判別する情報である。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象として、人物、又は動物、又は建造物、又は自然物、又は機器を判別する情報である。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象の動きの情報である。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象とされた人物の個人を特定する情報である。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象が文字であるか否かを判別する情報である。
また上記外界情報取得手段が取得する上記外界情報は、現在位置に該当する地点の情報である。
また上記外界情報取得手段が取得する上記外界情報は、現在位置に該当する地域における建造物、又は自然物の情報である。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段で撮像された画像の明暗、又は鮮明度の情報である。
また上記外界情報取得手段が取得する上記外界情報は、上記撮像手段で撮像された画像の画像内の部分的な明暗、又は部分的な鮮明度の情報である。

また上記制御手段は、上記撮像手段における撮像動作のオン／オフの制御を行う。
また上記制御手段は、上記撮像手段における望遠撮像から広角撮像の可変制御を行う。
また上記制御手段は、上記撮像手段における焦点制御を行う。
また上記制御手段は、上記撮像手段における撮像感度の可変制御を行う。
また上記制御手段は、上記撮像手段における赤外線撮像感度の可変制御を行う。
また上記制御手段は、上記撮像手段における紫外線撮像感度の可変制御を行う。
また上記制御手段は、上記撮像手段における一部の撮像素子領域の撮像感度の可変制御を行う。
また上記制御手段は、上記撮像手段におけるフレームレートの可変制御を行う。
また上記制御手段は、上記撮像手段における撮像レンズ系の動作制御を行う。
また上記制御手段は、上記撮像手段における撮像素子で得られる撮像信号の処理を行う撮像信号処理部の動作制御を行う。
また上記被写体方向に対して照明を行う照明手段を更に備え、上記制御手段は、上記外界情報取得手段で取得された情報に基づいて、上記照明手段による照明動作の制御を行う。
また上記撮像手段で撮像された画像に含まれる文字に基づいて音声合成を行う音声合成手段と、上記音声合成手段で生成された音声を出力する音声出力手段とを更に備え、上記制御手段は、上記外界情報取得手段で取得された情報に基づいて、上記音声合成手段による合成音声の出力動作の制御を行う。

本発明の撮像方法は、使用者が視認する方向を被写体方向として撮像するようにされる撮像手段を備えた撮像装置の撮像方法として、外界情報を取得する外界情報取得ステップと、上記外界情報取得ステップで取得された情報に基づいて、上記撮像手段の動作を制御する制御ステップとを備える。

以上の本発明では、使用者（ユーザ）が、撮像装置を、例えば眼鏡型もしくは頭部装着型の装着ユニットなどにより装着することで、撮像手段はユーザの視線方向の光景を撮像する状態となる。そして撮像手段で撮像された画像は、表示手段で表示されたり、記録手段で記録媒体に記録されたり、送信手段で外部機器に送信される。
ここで、撮像動作のオン／オフや、撮像動作態様、例えばズーム状態、フォーカス状態、撮像感度調整や輝度レベル等の信号処理、撮像時のフレームレートなど、各種の撮像動作制御として適切な制御が行われることが好ましいが、本発明では、これらをユーザの操作子の操作ではなく、外界の各種状況を示す外界情報を取得し、その外界情報に基づいて各種適切な制御を行うようにする。

本発明によれば、撮像手段によりユーザの視線方向の光景を撮像するが、この場合に、外界情報に基づいて撮像動作の制御を行うことで、ユーザに操作負担がないまま、的確な撮像動作が実行される。これによりユーザの視界方向の光景が的確なタイミングや態様で撮像されるという効果がある。また撮像された画像データを記録媒体に保存したり、外部機器に送信することで、或るユーザの視界の光景を複数の人の間で共有したり、後にユーザの視界光景を再生させて視聴できる。

以下、本発明の撮像装置、撮像方法の実施の形態を、次の順序で説明する。

［１．撮像装置の外観例］
［２．撮像装置の構成例］
［３．撮像画像例］
［４．外界情報の検出］
［５．各種動作例］
［６．実施の形態の効果、変形例及び拡張例］

［１．撮像装置の外観例］

実施の形態として、図１に眼鏡型ディスプレイカメラとした撮像装置１の外観例を示す。撮像装置１は、例えば両側頭部から後頭部にかけて半周回するようなフレームの構造の装着ユニットを持ち、図のように両耳殻にかけられることでユーザに装着される。
そしてこの撮像装置１は、図１のような装着状態において、ユーザの両眼の直前、即ち通常の眼鏡におけるレンズが位置する場所に、左眼用と右眼用の一対の表示部２、２が配置される構成とされている。この表示部２には、例えば液晶パネルが用いられ、透過率を制御することで、図のようなスルー状態、即ち透明又は半透明の状態とできる。表示部２がスルー状態とされることで、眼鏡のようにユーザが常時装着していても、通常の生活には支障がない。

またユーザが装着した状態において、ユーザが視認する方向を被写体方向として撮像するように、前方に向けて撮像レンズ３ａが配置されている。
また撮像レンズ３ａによる撮像方向に対して照明を行う発光部４ａが設けられる。発光部４ａは例えばＬＥＤ（Light Emitting Diode）により形成される。
また、図では左耳側しか示されていないが、装着状態でユーザの右耳孔及び左耳孔に挿入できる一対のイヤホンスピーカ５ａが設けられる。
また右眼用の表示部２の右方と、左眼用の表示部２の左方に、外部音声を集音するマイクロホン６ａ，６ｂが配置される。

なお図１は一例であり、撮像装置１をユーザが装着するための構造は多様に考えられる。一般に眼鏡型、或いは頭部装着型とされる装着ユニットで形成されればよく、少なくとも本実施の形態としては、ユーザの眼の前方に近接して表示部２が設けられ、また撮像レンズ３ａによる撮像方向がユーザが視認する方向、つまりユーザの前方となるようにされていればよい。また表示部２は、両眼に対応して一対設けられる他、片側の眼に対応して１つ設けられる構成でもよい。
またイヤホンスピーカ５ａは、左右のステレオスピーカとせずに、一方の耳にのみ装着するために１つ設けられるのみでもよい。またマイクロホンも、マイクロホン６ａ，６ｂのうちの一方でもよい。さらには、撮像装置１としてマイクロホンやイヤホンスピーカを備えない構成も考えられる。
また発光部４ａを設けない構成も考えられる。

図１の撮像装置１は、撮像のための構成部分と撮像した画像をモニタできる表示部２が一体に形成された例であるが、図２の撮像装置１Ａは、表示部２が別体とされている例である。
図２の撮像装置１Ａは、所定の装着フレームにより頭部に装着される。そして装着状態においてユーザが視認する方向を被写体方向として撮像するように、前方に向けて撮像レンズ３ａが配置されている。
また撮像レンズ３ａによる撮像方向に対して照明を行う発光部４ａが設けられる。発光部４ａは例えばＬＥＤにより形成される。
また外部音声を集音するマイクロホン６ａが配置される。

この場合、後述するが撮像装置１Ａの内部には撮像した画像データを外部機器に送信する通信部が設けられている。例えば外部機器の一例として携帯用の表示装置３０が想定され、撮像装置１Ａはこの表示装置３０に撮像画像データを送信する。表示装置３０は受信した撮像画像データを表示画面３１に表示させる。
ユーザは、このように携帯用の表示装置３０を所持することで、撮像画像のモニタリングを行うことができる。

なお、ここでは別体の表示装置３０として携帯用の表示装置を挙げているが、例えば据置型の表示装置、コンピュータ装置、テレビジョン受像器、携帯電話機、ＰＤＡ（Personal Digital Assistant）などを想定することもできる。即ち撮像装置１Ａ自体にモニタ表示機能を備えない場合（或いは図１の撮像装置１のようにモニタ表示機能を備えていたとしても）、外部の表示装置で撮像された画像データのモニタリングを行う使用形態が想定される。
また、撮像装置１（又は１Ａ）が通信機能により撮像した画像データを送信する先の外部機器としては、上記の各種表示デバイスだけでなく、ビデオストレージ機器、コンピュータ装置、サーバ装置などであってもよい。つまり外部機器で撮像画像データを保存したり、配信することも想定される。

［２．撮像装置の構成例］

図３に撮像装置１の内部構成例を示す。この図３は、図１のように眼鏡型ディスプレイカメラとして撮像機能と表示機能を一体的に備えた場合の構成例である
システムコントローラ１０は、例えばＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、不揮発性メモリ部、インターフェース部を備えたマイクロコンピュータにより構成され、撮像装置１の全体を制御する制御部とされる。
このシステムコントローラ１０は外界の状況に基づいて、撮像装置１内の各部の制御を行う。つまり外界の状況を検知判定し、それに応じて各部の動作制御を実行するようにされた動作プログラムに従って動作する。このため機能的に見れば、図示するように外界の状況を判定する外界状況判定機能１０ａと、外界状況判定機能１０ａの判定結果に従って各部に制御指示を行う動作制御機能１０ｂを有することになる。

撮像装置１内では、ユーザの前方の光景の撮像のための構成として、撮像部３、撮像制御部１１、撮像信号処理部１５が設けられる。
撮像部３は、図１に示した撮像レンズ３ａや、絞り、ズームレンズ、フォーカスレンズなどを備えて構成されるレンズ系や、レンズ系に対してフォーカス動作やズーム動作を行わせるための駆動系、さらにレンズ系で得られる撮像光を検出し、光電変換を行うことで撮像信号を生成する固体撮像素子アレイなどが設けられる。固体撮像素子アレイは、例えばＣＣＤ（Charge Coupled Device）センサアレイや、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサアレイとされる。

撮像信号処理部１５は、撮像部３の固体撮像素子によって得られる信号に対するゲイン調整や波形整形を行うサンプルホールド／ＡＧＣ(Automatic Gain Control)回路や、ビデオＡ／Ｄコンバータを備え、デジタルデータとしての撮像信号を得る。また撮像信号処理部１５は、撮像信号に対してホワイトバランス処理、輝度処理、色信号処理、ぶれ補正処理なども行う。

撮像制御部１１は、システムコントローラ１０からの指示に基づいて、撮像部３及び撮像信号処理部１５の動作を制御する。例えば撮像制御部１１は、撮像部３，撮像信号処理部１５の動作のオン／オフを制御する。また撮像制御部１１は撮像部３に対して、オートフォーカス、自動露出調整、絞り調整、ズームなどの動作を実行させるための制御（モータ制御）を行うものとされる。
また撮像制御部１１はタイミングジェネレータを備え、固体撮像素子及び撮像信号処理部１１のサンプルホールド／ＡＧＣ回路、ビデオＡ／Ｄコンバータに対しては、タイミングジェネレータにて生成されるタイミング信号により信号処理動作を制御する。また、このタイミング制御により撮像フレームレートの可変制御も可能とされる。
さらに撮像制御部１１は、固体撮像素子及び撮像信号処理部１５における撮像感度や信号処理の制御を行う。例えば撮像感度制御として固体撮像素子から読み出される信号のゲイン制御を行ったり、黒レベル設定制御や、デジタルデータ段階の撮像信号処理の各種係数制御、ぶれ補正処理における補正量制御などを行うことができる。撮像感度に関しては、特に波長帯域を考慮しない全体的な感度調整や、例えば赤外線領域、紫外線領域など、特定の波長帯域の撮像感度を調整する感度調整（例えば特定波長帯域をカットするような撮像）なども可能である。波長に応じた感度調整は、撮像レンズ系における波長フィルタの挿入や、撮像信号に対する波長フィルタ演算処理により可能である。これらの場合、撮像制御部１１は、波長フィルタの挿入制御や、フィルタ演算係数の指定等により、感度制御を行うことができる。

撮像部３で撮像され、撮像信号処理部１５で処理された撮像信号（撮像による画像データ）は画像入出力コントロール部２７に供給される。
画像入出力コントロール部２７は、システムコントローラ１０の制御に応じて、画像データの転送を制御する。即ち撮像系（撮像信号処理部１５）、撮像モニタ表示系（表示画像処理部１２）、ストレージ部２５、通信部２６の間の画像データの転送を制御する。
例えば画像入出力コントロール部２７は、撮像信号処理部１５で処理された撮像信号としての画像データを、表示画像処理部１２に供給したり、ストレージ部２５に供給したり、通信部２６に供給する動作を行う。
また画像入出力コントロール部２７は例えばストレージ部２５から再生された画像データを、表示画像処理部１２に供給したり、通信部２６に供給する動作を行う。
また画像入出力コントロール部２７は例えば通信部２６で受信された画像データを、表示画像処理部１２に供給したり、ストレージ部２５に供給する動作を行う。

撮像装置１においてユーザに対して表示を行う構成としては、表示部２、表示画像処理部１２、表示駆動部１３，表示制御部１４が設けられる。
撮像部３で撮像され、撮像信号処理部１５で処理された撮像信号は、画像入出力コントロール部２７を介して表示画像処理部１２に供給することができる。表示画像処理部１２は、例えばいわゆるビデオプロセッサとされ、供給された撮像信号に対して各種表示処理を実行できる部位とされる。例えば撮像信号の輝度レベル調整、色補正、コントラスト調整、シャープネス（輪郭強調）調整などを行うことができる。
また表示画像処理部１２は、撮像信号の一部を拡大した拡大画像の生成、或いは縮小画像の生成、画像内の一部をハイライト表示（強調表示）させる画像処理、撮像画像の分割表示のための画像の分離や合成、キャラクタ画像やイメージ画像の生成及び生成した画像を撮像画像に合成する処理なども行うことができる。つまり撮像信号としてのデジタル映像信号に対しての各種処理を行うことができる。

表示駆動部１３は、表示画像処理部１２から供給される画像信号を、例えば液晶ディスプレイとされる表示部２において表示させるための画素駆動回路で構成されている。即ち表示部２においてマトリクス状に配置されている各画素について、それぞれ所定の水平／垂直駆動タイミングで映像信号に基づく駆動信号を印加し、表示を実行させる。また表示駆動部１３は、表示部２の各画素の透過率を制御して、スルー状態とすることもできる。
表示制御部１４は、システムコントローラ１０の指示に基づいて、表示画像処理部１２の処理動作や表示駆動部１３の動作を制御する。即ち表示画像処理部１２に対しては、上記の各種処理を実行させる。また表示駆動部１３に対してはスルー状態、画像表示状態の切り換えが行われるように制御する。
なお以下では、表示部２を透明もしくは半透明とする「スルー状態」に対して、表示部２で画像表示を行っている動作（及びその状態）を「モニタ表示」（「モニタ表示状態」）と言うこととする。

なお、ストレージ部２５で再生された画像データや、通信部２６で受信された画像データも、画像入出力コントロール部２７を介して表示画像処理部１２に供給できる。その場合、表示画像処理部１２、表示駆動部１３の上記動作により、表示部２において再生画像や受信画像が出力されることになる。

また撮像装置１には、音声入力部６、音声信号処理部１６，音声出力部５が設けられる。
音声入力部６は、図１に示したマイクロホン６ａ，６ｂと、そのマイクロホン６ａ，６ｂで得られた音声信号を増幅処理するマイクアンプ部やＡ／Ｄ変換器を有し、音声データを出力する。

音声入力部６で得られた音声データは音声入出力コントロール部２８に供給される。
音声入出力コントロール部２８は、システムコントローラ１０の制御に応じて、音声データの転送を制御する。即ち音声入力部６、音声信号処理部１６、ストレージ部２５、通信部２６の間の音声信号の転送を制御する。
例えば音声入出力コントロール部２８は、音声入力部６で得られた音声データを、音声信号処理部１６に供給したり、ストレージ部２５に供給したり、通信部２６に供給する動作を行う。
また音声入出力コントロール部２８は例えばストレージ部２５で再生された音声データを、音声信号処理部１６に供給したり、通信部２６に供給する動作を行う。
また音声入出力コントロール部２８は例えば通信部２６で受信された音声データを、音声信号処理部１６に供給したり、ストレージ部２５に供給する動作を行う。

音声信号処理部１６は、例えばデジタルシグナルプロセッサ、Ｄ／Ａ変換器などからなる。この音声信号処理部１６には、音声入力部６で得られた音声データや、ストレージ部２５、或いは通信部２６からの音声データが、音声入出力コントロール部２８を介して供給される。音声信号処理部１６は、供給された音声データに対して、システムコントローラ１０の制御に応じて、音量調整、音質調整、音響エフェクト等の処理を行う。そして処理した音声データをアナログ信号に変換して音声出力部２に供給する。なお、音声信号処理部１６は、デジタル信号処理を行う構成に限られず、アナログアンプやアナログフィルタによって信号処理を行うものでも良い。
音声出力部５は、図１に示した一対のイヤホンスピーカ５ａと、そのイヤホンスピーカ５ａに対するアンプ回路を有する。
この音声入力部６、音声信号処理部１６，音声出力部５により、ユーザは外部音声を聞いたり、ストレージ部２５で再生された音声を聞いたり、通信部２６で受信された音声を聞くことができる。
なお音声出力部５は、いわゆる骨伝導スピーカとして構成されてもよい。

また撮像装置１には音声合成部２９が設けられる。この音声合成部２９はシステムコントローラ１０の指示に応じて音声合成を行い、音声信号を出力する。
音声合成部２９から出力された音声信号は、音声入出力コントロール部２８を介して音声信号処理部１６に供給されて処理され、音声出力部５からユーザに対して出力される。
この音声合成部２７は、例えば後述する読み上げ音声の音声信号を発生させることになる。

ストレージ部２５は、所定の記録媒体に対してデータの記録再生を行う部位とされる。例えばＨＤＤ（Hard Disk Drive）として実現される。もちろん記録媒体としては、フラッシュメモリ等の固体メモリ、固定メモリを内蔵したメモリカード、光ディスク、光磁気ディスク、ホログラムメモリなど各種考えられ、ストレージ部２５としては採用する記録媒体に応じて記録再生を実行できる構成とされればよい。
撮像部３で撮像され、撮像信号処理部１５で処理された撮像信号としての画像データや、通信部２６で受信した画像データは、画像入出力コントロール部２７を介してストレージ部２５に供給することができる。また音声入力部６で得られた音声データや、通信部２６で受信した音声データは、音声入出力コントロール部２８を介してストレージ部２５に供給することができる。
ストレージ部２５はシステムコントローラ１０の制御に従って、供給された画像データや音声データに対して、記録媒体への記録のためのエンコード処理を行い、記録媒体に記録する。
またストレージ部２５はシステムコントローラ１０の制御に従って、記録した画像データや音声データを再生する。再生した画像データは画像入出力コントロール部２７へ出力し、また再生した音声データは音声入出力コントロール部２８へ出力する。

通信部２６は外部機器との間でのデータの送受信を行う。上述したように外部機器としては、図２に示した表示装置３０や、コンピュータ機器、ＰＤＡ（Personal Digital Assistant）、携帯電話機、ビデオ機器、オーディオ機器、チューナ機器など、情報処理及び通信機能を備えたあらゆる機器が想定される。
またインターネット等のネットワークに接続された端末装置、サーバ装置なども通信対象の外部機器として想定される。
さらには、ＩＣチップを内蔵した非接触通信ＩＣカード、ＱＲコード等の二次元バーコード、ホログラムメモリなどを外部機器とし、通信部２６はこれらの外部機器から情報を読み取る構成とすることも考えられる。
さらには他の撮像装置１（１Ａ）も外部機器として想定される。
通信部２６は、無線ＬＡＮ、ブルートゥースなどの方式で、例えばネットワークアクセスポイントに対する近距離無線通信を介してネットワーク通信を行う構成としても良いし、対応する通信機能を備えた外部機器との間で直接無線通信を行うものでも良い。

撮像部３で撮像され、撮像信号処理部１５で処理された撮像信号としての画像データや、ストレージ部２５で再生した画像データは、画像入出力コントロール部２７を介して通信部２６に供給することができる。また音声入力部６で得られた音声データや、ストレージ部２５で再生された音声データは、音声入出力コントロール部２８を介して通信部２６に供給することができる。
通信部２６はシステムコントローラ１０の制御に従って、供給された画像データや音声データに対して、送信のためのエンコード処理、変調処理等を行い、外部機器に送信する。
また通信部２６は外部機器からのデータ受信動作を行う。受信復調した画像データは画像入出力コントロール部２７へ出力し、また受信復調した音声データは音声入出力コントロール部２８へ出力する。

撮像装置１には照明部4と照明制御部１８が設けられる。照明部４は、図１に示した発光部４ａとその発光部４（例えばＬＥＤ）を発光させる発光回路から成る。照明制御部１８は、システムコントローラ１０の指示に基づいて、照明部４に発光動作を実行させる。
照明部４における発光部４ａが図１に示したように前方に対する照明を行うものとして取り付けられていることで、照明部４はユーザの視界方向に対する照明動作を行うことになる。

この撮像装置１は、外界情報を取得するための構成として、周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、画像解析部１７、及び上述した通信部２６を有する。

周囲環境センサ１９としては、具体的には例えば照度センサ、温度センサ、湿度センサ、気圧センサ等が想定され、撮像装置１の周囲環境として、周囲の明るさ、温度、湿度、或いは天候等を検出するための情報を得るセンサとされる。
撮像対象センサ２０は、撮像部３での撮像動作の被写体となっている撮像対象に関する情報を検出するセンサである。例えば当該撮像装置１から撮像対象までの距離の情報を検出する測距センサが想定される。
また、焦電センサなどの赤外線センサのように、撮像対象が発する赤外線の特定の波長などの情報やエネルギーを検出するセンサも想定される。この場合、例えば撮像対象が人や動物などの生体であるか否かの検出が可能となる。
さらに、各種ＵＶ（Ultra Violet）センサのように、撮像対象が発する紫外線の特定の波長などの情報やエネルギーを検出するセンサも想定される。この場合、例えば撮像対象が蛍光物質や蛍光体であるか否かの検出や、日焼け対策に必要な外界の紫外線量の検出が可能となる。

ＧＰＳ受信部２１は、ＧＰＳ（Global Positioning System）の衛星からの電波を受信し、現在位置としての緯度・経度の情報を出力する。
日時計数部２２は、いわゆる時計部として、日時（年月日時分秒）を計数し、現在日時情報を出力する。
画像解析部１７は、撮像部３，撮像信号処理部１５により得られた撮像画像について画像解析を行う。即ち被写体としての画像を解析し、撮像画像に含まれる被写体の情報を得る。
通信部２６は、上記したような各種の外部機器との間でのデータ通信を行うことで、外部機器から多様な情報を取得できる。

これら周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、画像解析部１７、及び通信部２６により、撮像装置１からみての外界の情報が取得され、システムコントローラ１０に供給される。
システムコントローラ１０は外界状況判定機能１０ａの処理により、取得した外界情報に応じて、動作制御機能１０ｂの処理により、撮像動作や表示動作に関する制御を行う。即ちシステムコントローラ１０は撮像制御部１１に指示して撮像部３や撮像信号処理部１５の動作を制御し、また表示制御部１４に指示して表示画像処理部１２や表示駆動部１３の動作を制御する。またシステムコントローラ１０は、ストレージ部２５や通信部２６の動作を制御する。

なお、外界情報を取得するための構成として周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、画像解析部１７、及び通信部２６を示したが、これらは必ずしも全てを備える必要はない。また、周囲の音声を検知・解析する音声解析部など、他のセンサが設けられても良い。

次に図４は、例えば図２のようにモニタ表示機能を有しない撮像装置１Ａの構成例を示すものである。なお、図３と同一機能のブロックには同一符号を付し、重複説明を避ける。
この図４の構成は、図３の構成から、表示部２、表示画像処理部１２、表示駆動部１３，表示制御部１４、音声信号処理部１６、音声出力部５、音声合成部２９を省いたものとなっている。

そして例えば撮像部３で撮像され、撮像信号処理部１５で処理された撮像信号としての画像データや、通信部２６で受信した画像データは、画像入出力コントロール部２７を介してストレージ部２５に供給することができる。また音声入力部６で得られた音声データや、通信部２６で受信した音声データは、音声入出力コントロール部２８を介してストレージ部２５に供給することができる。
ストレージ部２５はシステムコントローラ１０の制御に従って、供給された画像データや音声データに対して、記録媒体への記録のためのエンコード処理を行い、記録媒体に記録する。
またストレージ部２５はシステムコントローラ１０の制御に従って、記録した画像データや音声データを再生する。再生した画像データは画像入出力コントロール部２７へ出力し、また再生した音声データは音声入出力コントロール部２８へ出力する。

また撮像部３で撮像され、撮像信号処理部１５で処理された撮像信号としての画像データや、ストレージ部２５で再生された画像データは、画像入出力コントロール部２７を介して通信部２６に供給することができる。また音声入力部６で得られた音声データや、ストレージ部２５で再生した音声データは、音声入出力コントロール部２８を介して通信部２６に供給することができる。
通信部２６はシステムコントローラ１０の制御に従って、供給された画像データや音声データに対して、送信のためのエンコード処理、変調処理等を行い、外部機器に送信する。例えば撮像部３で撮像され、撮像信号処理部１５で処理された撮像信号としての画像データを図２の表示装置３０に送信することで、表示装置３０において撮像画像のモニタリングを行うことができる。
また通信部２６は外部機器からのデータ受信動作を行う。受信復調した画像データは画像入出力コントロール部２７へ出力し、また受信復調した音声データは音声入出力コントロール部２８へ出力する。

この図４の構成の場合も、外界情報を取得するための構成として周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、画像解析部１７、及び通信部２６が設けられる。
もちろんこの構成の場合も、周囲の音声を検知・解析する音声解析部など、他のセンサが設けられても良い。

［３．撮像画像例］

本例の撮像装置１（１Ａ）ではシステムコントローラ１０が、取得した外界情報に応じて撮像動作に関する制御を行うことで、ユーザがキー操作、ダイヤル操作等の操作子の操作を行わないまま、的確な撮像を実現する。
ここでは図５から図９により、各種の撮像画像の例を示す。

図５（ａ）は、特に図１（図３）のように表示部２を有する撮像装置１の場合において、表示部２にがスルー状態となっている場合（表示部２を介してユーザが視認する光景）を示しているとする。つまり、表示部２は単なる透明の板状体となっており、ユーザが視界光景を透明の表示部２を介して見ている状態である。
図５（ｂ）は、モニタ表示状態として、撮像部３で撮像した画像が表示部２に表示された状態である。例えば図５（ａ）の状態で撮像部３，撮像信号処理部１５，表示画像処理部１２，表示駆動部１３が動作し、これらの部位が撮像画像を通常に表示部２に表示した状態である。この場合の表示部２に表示される撮像画像（通常撮像画像）は、スルー状態の場合とほぼ同様となる。つまりユーザにとっては、通常の視界を、撮像された画像として見ている状態である。

図５（ｃ）は、システムコントローラ１０が撮像制御部１１を介して撮像部３に望遠撮像を実行させた場合の撮像画像例である。例えばこのような望遠撮像としての画像撮像を行うことで、ユーザは図１の表示部２や図２の表示装置３０において、望遠画像を見ることができる。またこのような画像をストレージ部２５において記録したり、通信部２６で外部機器に送信して外部機器側で保存することができる。

図６（ａ）は通常撮像画像を示している。例えばユーザが新聞等を見ている場合である。
図６（ｂ）は、いわゆる広角ズームとした撮像画像である。即ち近距離の焦点位置状態でズーム撮像を行い、例えば新聞等の文字が拡大されるよう処理された画像である。
システムコントローラ１０が撮像制御部１１を介して撮像部３に広角撮像を実行させれば、このように近距離の光景が広角に映し出された画像が得られる。
なお、望遠−広角の制御は、撮像部３におけるズームレンズの駆動制御の他、撮像信号処理部１５での信号処理でも可能である。

図７（ａ）は通常撮像画像を示し、図７（ｂ）は拡大画像を示している。図７（ａ）のような光景を撮像している場合に、システムコントローラ１０が、撮像制御部１１を介して撮像信号処理部１５に対して画像拡大処理を指示することで、図７（ｂ）のような拡大撮像画像を得ることができる。

図８（ａ）は通常撮像画像を示しているが、特に周囲が薄暗く、通常撮像画像は暗い画像となっている状態を示している。
このような場合に、システムコントローラ１０は撮像制御部１１（撮像部３，撮像信号処理部１５）に対して撮像感度を上げることを指示したり、撮像信号処理における輝度レベル、コントラスト、シャープネス調整を指示することなどにより、図８（ｂ）のように、よりはっきりした明るい撮像画像とすることができる。なお、照明部４に照明動作を実行させることも、このような撮像を行う場合に好適となる。

図９（ａ）は、例えばユーザが、子供が寝ている暗い寝室に居る場合の通常撮像画像を示している。この場合、暗い部屋の中であるため、通常撮像画像では、子供の姿等がはっきり現れない状況である。
このときにシステムコントローラ１０が、撮像制御部１１（撮像部３，撮像信号処理部１５）に対して赤外線撮像感度の上昇を指示することで、図９（ｂ）のように赤外線撮像画像が得られ、暗い部屋で子供の寝顔などを確認できる撮像画像となる。

図１０（ａ）は通常撮像画像であるが、システムコントローラ１０が、撮像制御部１１（撮像部３，撮像信号処理部１５）に対して紫外線撮像感度の上昇を指示することで、図１０（ｂ）のように紫外光成分を表した撮像画像が得られる。

図１１（ａ）は通常撮像画像であるが、この画像では、例えばサッカースタジアムにおいてピッチ上に日陰と日なたの境界が生じ、見にくい状況となっている。
システムコントローラ１０は、例えばＣＣＤセンサ又はＣＭＯＳセンサ上で日陰部分に相当する領域の画素について撮像感度を向上させたり輝度を向上させ、一方、日なた部分に相当する領域の画素について撮像感度を低下させたり表示を低下させる処理を指示することで、図１１（ｂ）のように日なた／日陰の影響が低減された画像が表示される。
図１１（ｃ）は特定の対象として、画像内に例えば鳥が含まれている場合に、その鳥を強調させるような画像とした例である。
画像内で、鳥が検知される場合に、その鳥の部分をハイライト処理させることで、ユーザが対象を認識しやすい画像撮像を実現できる。
ハイライト画像処理としては、画像内で注目部分のみを輝度を上げたり、注目部分以外の輝度を下げたり、注目部分をカラーで注目部分以外をモノクロとするなどの手法が考えられる。

ここまで各種の撮像画像例を示したが、これらは一例にすぎない。本例においては、撮像部３，撮像信号処理部１５の各処理や動作を制御することで、多様な撮像態様での撮像画像が実現される。
例えば、望遠撮像画像、広角撮像画像、望遠から広角までの間のズームインもしくはズームアウトを行いながらの撮像画像、拡大撮像画像、縮小撮像画像、フレームレートの可変撮像画像（高フレームレートでの撮像や低フレームレートでの撮像など）、高輝度撮像画像、低輝度撮像画像、コントラスト可変撮像画像、シャープネス可変撮像画像、撮像感度上昇状態の撮像画像、赤外線撮像感度上昇状態の撮像画像、紫外線撮像感度上昇状態の撮像画像、特定波長帯域をカットした撮像画像、モザイク画像／輝度反転画像／ソフトフォーカス／画像内の一部の強調表示／画像全体の色の雰囲気の可変などの画像エフェクトを加えた撮像画像、静止画撮像画像など、非常に多様な撮像画像態様が想定される。

［４．外界情報の検出］

上述したように本例の撮像装置１（１Ａ）は、外界情報を取得するための構成として周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、画像解析部１７、及び通信部２６を有する。

周囲環境センサ１９としては、照度センサ、温度センサ、湿度センサ、気圧センサ等が想定される。
照度センサによっては、撮像装置１の周囲の明るさの情報を検出できる。
また温度センサ、湿度センサ、気圧センサによっては、温度、湿度、気圧或いは天候を判別する情報を得ることができる。
これらの周囲環境センサ１９により、撮像装置１は周囲の明るさや戸外の場合の気象状況などを判定できるため、システムコントローラ１０は、これらを外界情報として用いて、周囲の明るさや気象状況に適した撮像動作を実行制御できる。

撮像対象センサ２０は撮像対象についての情報を検知する。例えば測距センサや焦電センサなどが考えられるが、撮像対象との距離や、撮像対象自体を判定する情報を得ることができる。
撮像対象までの距離を検出することで、システムコントローラ１０は、距離に応じた撮像動作を実行制御できる。また撮像対象が人などの生体であることを検知することで、撮像対象に応じた撮像動作を実行制御できる。

ＧＰＳ受信部２１は、現在位置としての緯度・経度の情報を取得する。緯度・経度を検出した場合、地図データベース等を参照することで、現在位置における地点（地点近辺）の情報を得ることができる。図３，図４の構成では特に述べていないが、例えばシステムコントローラ１０が参照できる記録媒体として、例えばＨＤＤ（Hard Disk Drive）やフラッシュメモリなどであって比較的大容量の記録媒体を搭載し、これらの記録媒体に地図データベースを記憶させることで、現在位置に関連する情報を取得できる。
また撮像装置１（１Ａ）に地図データベースを内蔵していなくても、通信部２６を介して例えばネットワークサーバや地図データベース内蔵機器にアクセスし、緯度・経度を送信して現在位置に応じた情報を要求し、情報を受信するようにしてもよい。
現在位置に関連する情報としては、現在位置近辺の地名、建造物名、施設名、店名、駅名などの名称情報がある。
また現在位置に関連する情報としては、公園、テーマパーク、コンサートホール、劇場、映画館、スポーツ施設など、建造物の種別を示す情報もある。
また現在位置に関連する情報としては、海岸、海上、河川、山間部、山頂部、森林、湖、平野部など、自然物の種別や名称の情報もある。
また、より詳細な位置についての情報として、例えばテーマパーク内でのエリアや、野球場、サッカー場などでの観戦席のエリア、コンサートホールでの座席のエリアの情報なども現在位置についての情報として取得することができる。
これら、現在位置に関する情報を取得することで、システムコントローラ１０は、現在位置や現在地点の近辺の地理的条件や施設などに応じた撮像動作、表示動作を実行制御できる。

日時計数部２２は例えば年月日時分秒を計数する。この日時計数部２２によってシステムコントローラ１０は、現在時刻、昼夜の別、月、季節などを認識できる。このため、例えば昼夜の別（時刻）に応じた撮像動作、表示動作や、現在の季節に適した撮像動作などを実行制御できる。

画像解析部１７によれば、撮像画像から撮像対象についての以下のような各種の情報を検出できる。
まず撮像対象の種別として、撮像画像に含まれている人物、動物、自然物、建造物、機器などを判別できる。例えば動物としては、被写体として鳥が撮像されている状況や猫が撮像されている状況等を判別できる。また自然物としては、海、山、樹木、河川、湖、空、太陽、月などを判別できる。建造物としては、家屋、ビル、競技場などを判別できる。機器としては、パーソナルコンピュータ、ＡＶ（Audio-Visual）機器、携帯電話機、ＰＤＡ、ＩＣカード、二次元バーコードなどが撮像対象となっている状況を判別できる。
これら撮像対象の種別は、予め各種別の形状の特徴を設定しておき、撮像画像内に、形状が該当する被写体が含まれているか否かにより判別可能である。

また画像解析部１７による画像解析によれば、画像の前後フレームの差分検出などの手法で、被写体の動きの検出、例えば素早い動きが画像内も可能である。例えばスポーツ観戦で選手を撮像している際や、走行している自動車等を撮像している場合などに、動きの素早い被写体を撮像しているという状況を検知することができる。
また画像解析部１７による画像解析によれば、周囲の状況を判定することも可能である。例えば昼夜や天候による明るさの状況を判定できるし、雨の強さなども認識可能である。

また、画像解析部１７による画像解析によれば、例えば書籍や新聞などを撮像している状況であることを判別できる。例えば画像内での文字認識を行うことや、書籍や新聞などの形状の認識を行えばよい。
なお画像解析部１７で文字認識を行った場合、システムコントローラ１０は、その認識した文字をテキストデータとして音声合成部２９に供給することができる。

また、画像解析部１７による画像解析によれば、人物が被写体となっている場合に、その人物の顔から人物個人を特定する判別も可能である。既に知られているように、人物の顔は、顔の構成要素の相対位置情報として個人特徴データ化することができる。例えば目の中心と鼻との距離ＥＮと目の間隔の距離Ｅｄの比（Ｅｄ／ＥＮ）や、目の中心と口との距離ＥＭと目の間隔の距離Ｅｄの比（Ｅｄ／ＥＭ）は、個人毎に特有となるとともに、髪型や眼鏡等の装着物などによる、外観上の変化の影響を受けない情報である。さらに加齢によっても変化しないことが知られている。
従って、画像解析部１７は、撮像画像内に或る人物の顔が含まれているときに、その画像を解析すれば上記のような個人特徴データを検出することができる。
撮像画像から個人特徴データを検出した場合、例えばシステムコントローラ１０が参照できる記録媒体として、例えばＨＤＤ（Hard Disk Drive）やフラッシュメモリなどを搭載し、これらの記録媒体に人物データベースを記憶させておけば、被写体となっている個人の情報を取得できる。或いは、撮像装置１（１Ａ）に人物データベースを内蔵していなくても、通信部２６を介して例えばネットワークサーバや人物データベース内蔵機器にアクセスし、個人特徴データを送信して情報を要求し、特定の人物の情報を受信するようにしてもよい。
例えばユーザ自身が、過去に出会った人物の氏名や所属などの人物情報を個人特徴データとともに人物データベースに登録しておけば、或る人物に出会ったとき（撮像されたとき）に、システムコントローラ１０は、その人物の情報を検索できる。
また、有名人の情報を個人特徴データとともに登録した人物データベースが用意されていれば、ユーザが有名人に出会ったときに、その人物の情報を検索できる。

通信部２６によれば、外界情報として、多様な情報を取得できる。
例えば上述したように撮像装置１から送信した緯度・経度、或いは個人特徴データなどに応じて外部機器で検索された情報を取得できる。
また外部機器から天候情報、気温情報、湿度情報など気象に関する情報を取得することができる。
また外部機器から施設の利用情報、施設内での撮像禁止／許可情報、案内情報などを取得することができる。
また外部機器自体の識別情報を取得することができる。例えば所定の通信プロトコルにおいてネットワークデバイスとして識別される機器の種別や機器ＩＤ等である。
また外部機器に格納されている画像データ、外部機器で再生或いは表示している画像データ、外部機器で受信している画像データなどを取得することができる。

以上、周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、画像解析部１７、通信部２６のそれぞれで取得できる情報の例を挙げたが、これらのうちの複数の系統で或る外界情報について検知判別してもよい。
例えば周囲環境センサ１９で得られた湿度等の情報と、通信部２６で受信された天候情報を組み合わせ、より正確に現在の天候を判別することもできる。
またＧＰＳ受信部２１と通信部２６の動作により取得した現在場所に関する情報と、画像解析部１７で得られる情報により、現在位置や撮像対象の状況をより正確に判別することもできる。

［５．各種動作例］

本実施の形態の撮像装置１（１Ａ）は、以上のように周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、画像解析部１７、通信部２６で取得される外界情報により、システムコントローラ１０が周囲の状況や撮像対象の状況などを判別し、それに応じて撮像動作を制御することで、適切な撮像やおもしろみのある撮像を実現するものである。
このためのシステムコントローラ１０の制御に基づく各種動作例を説明していく。

なお、撮像装置１（１Ａ）においては、電源オン状態において撮像処理系（撮像部１３，撮像信号処理部１５、撮像制御部１１）は常時撮像動作を行うようにしても良いし、電源オン状態において撮像開始のトリガが発生した場合に撮像を開始するようにしてもよい。
つまり電源オン制御と撮像開始制御は同時でも良いし、別のタイミングでもよい。
例えば電源操作子を設け、ユーザが電源操作子の操作を行うことでシステムコントローラ１０が電源オンとする処理を行うものとしたり、或いは装着センサを設けてユーザが撮像装置１（１Ａ）を装着したことを検知して、システムコントローラ１０が電源オンとする処理を行うものとする場合には、電源オンとなった後、所定の撮像開始トリガによって撮像を開始させる例が考えられる。
また、例えばシステムコントローラ１０は、所定の撮像開始トリガを検知することによって装置の電源をオンとすると共に撮像を開始させる例も考えられる。

まず図１２，図１３，図１４で、システムコントローラ１０の動作制御機能１０ｂとしての制御処理例を示す。
図１２は、撮像動作の実行中は、モニタ表示動作、ストレージ部２５での記録動作、通信部２６からの送信動作の一部又は全部を同時的に行う例である。
なお、ここで述べるモニタ表示動作とは、図１の撮像装置１の場合は、表示部２に撮像画像を表示させる動作であり、図２の撮像装置１Ａの場合は、通信部２６から表示装置３０に撮像画像データを送信し、表示装置３０においてモニタ表示を実行できる状態とする動作である。
またここで述べる通信部２６からの送信動作とは、表示装置３０に限らず、上述したように想定される多様な外部機器に対して、撮像信号としての画像データ及び音声データを送信する動作である。送信先の機器で画像データ及び音声データがどのように処理されるか（例えば表示／音声出力されるか、記録されるか、さらに他の機器に転送・配信されるかなど）は送信先の機器によるものとなる。

図１２のステップＦ１０１では、システムコントローラ１０は撮像開始トリガが発生したか否かを確認している。ここでは撮像開始トリガの発生とは、外界状況判定機能１０ａによって判定された外界状況により、撮像動作を開始させるとシステムコントローラ１０自身が判断することを意味している。システムコントローラ１０による撮像開始トリガの判断の例は後述する。
なお撮像開始トリガについては、ユーザによる所定の操作や、ユーザが撮像装置１（１Ａ）を装着したことの検知などにより撮像開始トリガ発生と判断し、ステップＦ１０２に進むようにしてもよい。

撮像開始トリガがあったと判別した場合は、システムコントローラ１０は処理をステップＦ１０２に進め、撮像開始制御を行う。即ち撮像制御部１１に撮像開始を指示して撮像部３及び撮像信号処理部１５の通常撮像動作を実行させる。
またこのときシステムコントローラ１０は表示開始制御、記録開始制御、送信開始制御の一部又は全部を実行する。
表示開始制御とは、図１、図３の撮像装置１の場合、表示制御部１４に指示して、表示画像処理部１２及び表示駆動部１３に、撮像信号を通常撮像画像の態様で表示部２に表示させる動作を実行させることになる。また図２，図４の撮像装置１Ａの場合、通信部２６から外部の表示装置３０に対して撮像された画像データ及び音声データを送信する動作を実行させる制御となる。
記録開始制御とは、撮像された画像データ及び音声データの記録をストレージ部２５に開始させる制御となる。
送信開始制御とは、撮像された画像データ及び音声データの外部機器に対する送信を通信部２６に開始させる制御となる。

撮像を開始させた後は、システムコントローラ１０は、ステップＦ１０３で撮像動作制御トリガが発生したか否かを監視し、またステップＦ１０４で撮像終了トリガが発生したか否かを監視する。
撮像動作制御トリガの発生とは、外界状況判定機能１０ａによって判定された外界状況により、撮像動作態様の変更を行うとシステムコントローラ１０自身が判断することを意味している。また撮像終了トリガの発生とは、外界状況判定機能１０ａによって判定された外界状況により、撮像動作を終了するとシステムコントローラ１０自身が判断することを意味している。
システムコントローラ１０による撮像動作制御トリガの有無の判断や撮像終了トリガの有無の判断の例も後述する。
なお撮像終了トリガについては、ユーザによる所定の操作や、ユーザが撮像装置１（１Ａ）の装着を外したことの検知などにより撮像終了トリガ発生と判断してもよい。

撮像動作制御トリガの発生と判断した場合は、システムコントローラ１０は処理をステップＦ１０３からＦ１０５に進め、撮像動作に関しての制御を行う。つまり撮像制御部１１に指示し、その時点の外界の状況に応じた態様の撮像動作を実行させる。
ステップＦ１０５で撮像動作態様に関しての制御を行った後も、ステップＦ１０３，Ｆ１０４でトリガ発生の監視を行う。

撮像終了トリガの発生と判断した場合は、システムコントローラ１０は処理をステップＦ１０４からＦ１０６に進め、撮像終了制御を行う。即ち撮像制御部１１に撮像終了を指示して撮像部３及び撮像信号処理部１５の撮像動作を終了させる。
またこのときシステムコントローラ１０は表示終了制御、記録終了制御、送信終了制御の一部又は全部を実行する。
即ちステップＦ１０２でモニタ表示を開始させていた場合は、その開始させた動作を終了させる。また記録動作を開始させていた場合は、ストレージ部２５における記録動作を終了させる。また送信動作を開始させていた場合は、通信部２６における送信動作を終了させる。
そしてシステムコントローラ１０はステップＦ１０１に戻る。

次に図１３は、撮像動作の実行タイミングとは別に、ストレージ部２５での記録動作、通信部２６からの送信動作の実行タイミングを制御する例である。なお、撮像開始制御、撮像終了制御、表示開始制御、表示終了制御、記録開始制御、記録終了制御、送信開始制御、送信終了制御の各制御の内容は図１２と同様である。

図１３のステップＦ１１０では、システムコントローラ１０は撮像開始トリガが発生したか否かを確認している。
撮像開始トリガがあったと判別した場合は、システムコントローラ１０は処理をステップＦ１１１に進め、撮像開始制御を行う。またこのときシステムコントローラ１０は表示開始制御を行う。

撮像を開始させた後は、システムコントローラ１０は、ステップＦ１１２で記録開始トリガ（又は送信開始トリガ）が発生したか否かを監視し、またステップＦ１１３では記録終了トリガ（又は送信終了トリガ）が発生したか否かを監視し、またステップＦ１１４で撮像終了トリガが発生したか否かを監視する。
記録開始トリガの発生とは、外界状況判定機能１０ａによって判定された外界状況により、ストレージ部２５での記録動作を開始するとシステムコントローラ１０自身が判断することを意味している。
また記録終了トリガの発生とは、外界状況判定機能１０ａによって判定された外界状況により、ストレージ部２５での記録動作を終了するとシステムコントローラ１０自身が判断することを意味している。
送信開始トリガの発生とは、外界状況判定機能１０ａによって判定された外界状況により、通信部２６からの送信動作を開始するとシステムコントローラ１０自身が判断することを意味している。
送信終了トリガの発生とは、外界状況判定機能１０ａによって判定された外界状況により、通信部２６からの送信動作を終了するとシステムコントローラ１０自身が判断することを意味している。
なお、例えば図２，図４の撮像装置１Ａの場合、ステップＦ１１１で表示開始制御を行うことが、通信部２６からの表示装置３０への送信開始の制御を行うことに相当するため、送信開始トリガ、送信終了トリガの発生とは図１，図３の撮像装置１を想定した場合の処理となる。但し、図２，図４の撮像装置１Ａであっても、モニタリング用の表示装置３０以外の他の外部機器に送信することを想定すれば、送信開始トリガ、送信終了トリガは、そのような送信についての送信制御のトリガと考えることができる。

記録開始トリガの発生と判断した場合は、システムコントローラ１０は処理をステップＦ１１２からＦ１１５に進め、ストレージ部２５に撮像による画像データ及び音声データの記録を開始させる制御を行う。
また送信開始トリガの発生と判断した場合も、システムコントローラ１０は処理をステップＦ１１２からＦ１１５に進め、通信部２６から外部機器に対して、撮像による画像データ及び音声データの送信を開始させる制御を行う。
記録開始制御又は送信開始制御を行ったら、システムコントローラ１０はステップＦ１１２，Ｆ１１３，Ｆ１１４のトリガ監視ループに戻る。

記録終了トリガの発生と判断した場合は、システムコントローラ１０は処理をステップＦ１１３からＦ１１６に進め、ストレージ部２５における記録動作を終了させる制御を行う。
また送信終了トリガの発生と判断した場合も、システムコントローラ１０は処理をステップＦ１１３からＦ１１６に進め、通信部２６から外部機器に対する、撮像による画像データ及び音声データの送信を終了させる制御を行う。
記録終了制御又は送信終了制御を行ったら、システムコントローラ１０はステップＦ１１２，Ｆ１１３，Ｆ１１４のトリガ監視ループに戻る。

撮像終了トリガの発生と判断した場合は、システムコントローラ１０は処理をステップＦ１１４からＦ１１７に進め、撮像終了制御を行う。即ち撮像制御部１１に撮像終了を指示して撮像部３及び撮像信号処理部１５の撮像動作を終了させる。またこのときシステムコントローラ１０は表示終了制御を実行する。
なお、撮像終了トリガが発生した時点で、記録動作や送信動作が終了されていない場合は、このときに記録終了制御や送信終了制御も行うことになる。
そしてシステムコントローラ１０はステップＦ１１０に戻る。

次に図１４は、撮像動作の実行タイミングとは別に、ストレージ部２５での記録動作、通信部２６からの送信動作の実行タイミングを制御し、さらに撮像動作態様の制御も行う例である。なお、撮像開始制御、撮像終了制御、表示開始制御、表示終了制御、記録開始制御、記録終了制御、送信開始制御、送信終了制御の各制御の内容は図１２、図１３と同様である。

図１４のステップＦ１２０では、システムコントローラ１０は撮像開始トリガが発生したか否かを確認している。
撮像開始トリガがあったと判別した場合は、システムコントローラ１０は処理をステップＦ１２１に進め、撮像開始制御を行う。またこのときシステムコントローラ１０は表示開始制御を行う。

撮像を開始させた後は、システムコントローラ１０は、ステップＦ１２２で記録開始トリガ（又は送信開始トリガ）が発生したか否かを監視し、またステップＦ１２３では記録終了トリガ（又は送信終了トリガ）が発生したか否かを監視し、またステップＦ１２４で撮像動作制御トリガが発生したか否かを監視し、またステップＦ１２５で撮像終了トリガが発生したか否かを監視する。

記録開始トリガの発生と判断した場合は、システムコントローラ１０は処理をステップＦ１２２からＦ１２６に進め、ストレージ部２５に撮像による画像データ及び音声データの記録を開始させる制御を行う。
また送信開始トリガの発生と判断した場合も、システムコントローラ１０は処理をステップＦ１２２からＦ１２６に進め、通信部２６から外部機器に対して、撮像による画像データ及び音声データの送信を開始させる制御を行う。
記録開始制御又は送信開始制御を行ったら、システムコントローラ１０はステップＦ１２２，Ｆ１２３，Ｆ１２４，Ｆ１２５のトリガ監視ループに戻る。

記録終了トリガの発生と判断した場合は、システムコントローラ１０は処理をステップＦ１２３からＦ１２７に進め、ストレージ部２５における記録動作を終了させる制御を行う。
また送信終了トリガの発生と判断した場合も、システムコントローラ１０は処理をステップＦ１２３からＦ１２７に進め、通信部２６から外部機器に対する、撮像による画像データ及び音声データの送信を終了させる制御を行う。
記録終了制御又は送信終了制御を行ったら、システムコントローラ１０はステップＦ１２２，Ｆ１２３，Ｆ１２４，Ｆ１２５のトリガ監視ループに戻る。

撮像動作制御トリガの発生と判断した場合は、システムコントローラ１０は処理をステップＦ１２４からＦ１２８に進め、撮像動作に関しての制御を行う。つまり撮像制御部１１に指示し、その時点のユーザの意志又は状況に応じた態様の撮像動作を実行させる。
ステップＦ１２８で撮像動作態様に関しての制御を行った後も、システムコントローラ１０はステップＦ１２２，Ｆ１２３，Ｆ１２４，Ｆ１２５のトリガ監視ループに戻る。

撮像終了トリガの発生と判断した場合は、システムコントローラ１０は処理をステップＦ１２５からＦ１２９に進め、撮像終了制御を行う。即ち撮像制御部１１に撮像終了を指示して撮像部３及び撮像信号処理部１５の撮像動作を終了させる。またこのときシステムコントローラ１０は表示終了制御を実行する。
なお、撮像終了トリガが発生した時点で、記録動作や送信動作が終了されていない場合は、このときに記録終了制御や送信終了制御も行うことになる。
そしてシステムコントローラ１０はステップＦ１２０に戻る。

システムコントローラ１０は動作制御機能１０ｂにより例えば以上の図１０又は図１１又は図１２の処理を行って撮像開始／終了や撮像動作態様の切換制御、さらには記録動作や送信動作の開始／終了制御を行う。
なお、ここでは撮像開始／終了制御と表示開始／終了制御を同じタイミングで実行するものとして説明したが、例えば図１，図３のように表示部３がユーザの両眼の直前に配置される構成の場合、撮像を行っている期間にモニタ表示を行わないようにする場合もある。即ち外界状況に応じて、表示部２をスルー状態に切り換える制御も考えられる。例えば図１３、図１４の処理例では、撮像動作と、記録動作又は送信動作を別のタイミングで実行制御しているが、この記録動作又は送信動作のように、モニタ表示開始トリガ、モニタ表示終了トリガの判断を行うものとしてモニタ表示動作の実行制御を行うようにしてもよい。

そしてこれら図１２，図１３，図１４の処理においては、撮像開始トリガ、撮像動作制御トリガ、撮像終了トリガ、記録開始トリガ、記録終了トリガ、送信開始トリガ、送信終了トリガの判断に基づく制御を行っているが、これらのトリガ判断と制御内容の具体例について図１５以降で説明していく。

図１５から図２３は、システムコントローラ１０の外界状況判定機能１０ａとしての処理例を示しており、これらは動作制御機能１０ｂによる上記図１２又は図１３又は図１４の処理と並列的に実行されているとする。なお並列的な処理とは、例えばシステムコントローラ１０が図１２又は図１３又は図１４の処理を実行している期間中に、図１５〜図２３のような検知処理が定期的に割込処理としてに行われればよいものである。これら図１５〜図２３のような処理のプログラムは、図１２又は図１３又は図１４の処理を実行するプログラムに組み込まれていても良いし、定期的に呼び出される別のプログラムとされても良い。つまりプログラムの形態が限定されるものではない。

なお図１５〜図２２は、図１２のステップＦ１０４又は図１４のステップＦ１２４で述べた撮像動作制御トリガの発生判断の例として述べる。撮像開始トリガ、撮像終了トリガ、記録開始トリガ、記録終了トリガ、送信開始トリガ、送信終了トリガについても、図１５〜図２２のような例でトリガ発生判断を行うことができるが、これらはまとめて後述する。

まず図１５では、周囲環境センサ１９もしくは画像解析部１７からの情報に基づいて撮像動作制御トリガ発生と判断する例を示す。
図１５のステップＦ２０１は、システムコントローラ１０が周囲環境センサ１９と画像解析部１７の一方又は両方の情報を監視する処理を示している。ここでは周囲環境センサ１９が照度センサであり、また画像解析部１７は画像から周囲の明るさを解析する処理を行っているものとする。
システムコントローラ１０は周囲環境センサ１９と画像解析部１７の一方又は両方からの情報に基づいて、現在、周囲が暗い状況であるか否か、或いは明るすぎる状況であるか否か判別する。例えば検出照度を数値化し、検出照度がｘルクス以下であれば暗い状況、検出照度がｙルクス以上であれば明るすぎる状況と判断する。

周囲が暗い状況であると判断した場合、システムコントローラ１０は処理をステップＦ２０２からＦ２０４に進め、撮像動作制御トリガ発生と判別する。
そしてステップＦ２０５で、現在の周囲の照度（暗さ）に応じた調整値を算出する。例えば表示輝度、コントラスト、シャープネス、撮像感度等の調整値として、好適な撮像画像が得られる調整値を求める。
このステップＦ２０４，Ｆ２０５の処理により、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、この場合は撮像部１３の撮像感度の調整、撮像信号処理部１５での輝度調整、コントラスト調整、シャープネス調整などの処理を指示する。この処理により撮像画像の画質が調整される。例えば周囲が暗くて図８（ａ）のような画像が撮像されるような場合に、図８（ｂ）のような見やすい撮像画像が得られる状態に切り換えられる。
なお、このように周囲が暗い状況と判断した場合は、システムコントローラ１０は照明部４に照明を実行させる制御を行っても良い。

またシステムコントローラ１０は、周囲が明るすぎる状況であると判断した場合も、処理をステップＦ２０３からＦ２０６に進め、撮像動作制御トリガ発生と判別する。
そしてステップＦ２０７で、現在の周囲の照度に応じた調整値を算出する。例えば表示輝度、コントラスト、シャープネス、撮像感度等の調整値として、好適な撮像画像が得られる。この場合、明るすぎる状況であるため、撮像感度を低下させたり、輝度を低下させる調整値を求めることになる。
このステップＦ２０６，Ｆ２０７の処理により、システムコントローラ１０の処理は図１２のステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、この場合も撮像部１３の撮像感度の調整や撮像信号処理部１５に対して輝度調整、コントラスト調整、シャープネス調整などの処理を指示する。この処理により撮像画像の画質が調整され、周囲が明るすぎても、適度な明るさの画像撮像が実現される。

図１６（ａ）は、周囲環境センサ１９もしくは通信部２６からの情報に基づいて撮像動作制御トリガ発生と判断する例である。
図１６（ａ）のステップＦ３０１は、システムコントローラ１０が周囲環境センサ１９からの検出情報と通信部２６による受信情報の一方又は両方の情報を監視する処理を示している。周囲環境センサ１９としては温度センサ、湿度センサ、気圧センサ等が想定される。また通信部２６では、例えばネットワークサーバ等から逐次気象情報が受信されるものとする。
システムコントローラ１０は、例えば周囲環境センサ１９で得られる気圧、湿度、気温から周囲の天候状況を判別できる。また通信部２６で受信される気象情報でも天候状況を判別できる。なお、ネットワークサーバから天候状況を受信するためには、システムコントローラ１０は逐次ＧＰＳ受信部２１で得られる現在位置情報をネットワークサーバに対して送信するようにし、その現在位置に該当する地域の気象情報をネットワークサーバから受信するようにするとよい。
周囲環境センサ１９の検出情報、又は通信部２６の受信情報により、システムコントローラ１０は周囲の天候状況を判断できるが、この両方の情報を用いれば、より正確に天候状況を判断できることにもなる。

システムコントローラ１０は例えば晴天、曇天、雨天、雷雨、台風、降雪などの状況や、雨が降り出す、雨が止む、曇天となるなど天候状況の変化に応じて、画像調整が必要か否かを判断する。そして調整が必要な状況と判断したら、システムコントローラ１０は処理をステップＦ３０２からＦ３０３に進め、撮像動作制御トリガ発生と判別し、ステップＦ３０４で、現在の天候に応じた調整値を算出する。例えば輝度、コントラスト、シャープネス、撮像感度等の調整値として、好適な撮像画像或いはおもしろみのある撮像画像が得られるような調整値を求める。
このステップＦ３０３，Ｆ３０４の処理により、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５に進む（又は図１４のステップＦ１２４からＦ１２８）ことになり、この場合は撮像部１３の撮像感度の調整や、撮像信号処理部１５に対しての輝度調整、コントラスト調整、シャープネス調整などの処理を指示する。この処理により、撮像画像の画質が天候状況に応じた画質に調整される。天候状況に応じた画質とは、天候状況に応じて視認性をよくした画質であったり、天候状況を強調するような画質などが考えられる。
なお、天候によってはシステムコントローラ１０は照明部４に照明を実行させる制御を行っても良い。
また、ここでは周囲環境センサ１９又は通信部２６の受信情報により天候判断を行うとしたが、画像解析部１７で雨の画像を認識することで、雨が降り出したことや雨が止んだこと、雷が発生したことなども正確に検知できるようになる。

次に図１６（ｂ）により、周囲環境センサ１９からの情報に基づいて暗視機能を発揮させるための撮像動作制御トリガ発生と判断する例を示す。
図１６（ｂ）のステップＦ３１０は、システムコントローラ１０が周囲環境センサ１９の情報を監視する処理を示している。ここでは周囲環境センサ１９が照度センサであるとする。
システムコントローラ１０は周囲環境センサ１９の検出情報に基づいて、現在、周囲が暗い状況であるか否か判別する。例えば検出照度を数値化し、検出照度がｘルクス以下であれば暗い状況と判断する。

周囲が暗い状況であると判断した場合、システムコントローラ１０は処理をステップＦ３１１からＦ３１３に進め、暗視機能をオンとする撮像動作制御トリガ発生と判別する。
このステップＦ３１３の処理により、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、この場合は暗視機能をオンとする制御を行うことになる。即ちシステムコントローラ１０は撮像制御部１１に、撮像部１３の赤外線撮像感度を上昇させる指示を行う。
この処理により、暗視機能が発揮され、例えば図９（ａ）のように暗くて見えない状況において、図９（ｂ）のような画像となる赤外線感度上昇撮像が実行されることになる。

また、システムコントローラ１０は周囲が暗い状態でないと判断した場合は、ステップＦ３１１からＦ３１２に進む。この場合、その時点で暗視機能（赤外線感度上昇撮像）をオンとしていれば、ステップＦ３１４に進むことになり、このときは暗視機能をオフとする撮像動作制御トリガ発生と判別する。このステップＦ３１４の処理により、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、この場合は暗視機能をオフとする制御を行う。即ちシステムコントローラ１０は撮像制御部１１に、撮像部１３の赤外線撮像感度を通常に戻し、通常の撮像を実行させる指示を行う。

この図１６（ｂ）の処理により、ユーザが暗い部屋などに入った場合に自動的に暗視機能がオンとされ、暗いままで被写体が確認できる画像の撮像を行うことができる。また例えば暗い部屋から出たら、自動的に暗視機能がオフとなる。つまり周囲状況に応じてユーザにとって好適な撮像制御が実現される。
なお、周囲が暗い状況であるか否かの検知は、また画像解析部１７での画像解析でも可能である。例えば撮像画像全体の輝度が非常に低くなったときに、周囲が暗状態になったとして暗視機能オンの撮像動作制御トリガの発生と判断しても良い。

図１７は、撮像対象センサ２０又は画像解析部１７からの情報に基づいて撮像動作制御トリガ発生と判断する例である。
図１７のステップＦ４０１は、システムコントローラ１０が撮像対象センサ２０からの検出情報と画像解析部１７からの情報の一方又は両方を監視する処理を示している。撮像対象センサ２０としては例えば測距センサが想定される。また画像解析部１７は撮像画像の解析により、被写体までの距離を算出するものとする。
即ちシステムコントローラ１０は、これらの情報に基づいて、ユーザが見ている対象（撮像対象）が遠方であるか、手元などの近傍であるかを判別する。

例えばユーザが遠くの風景を見ている場合や、スタジアムの遠い席で試合を観戦しているなどであって、撮像対象が遠方であると判断される場合は、システムコントローラ１０はステップＦ４０２からＦ４０４に進んで、望遠ズーム表示に切り換える撮像動作制御トリガの発生と判別する。そしてステップＦ４０５で、その際の撮像対象までの距離に応じて適切なズーム倍率を算出する。
また例えばユーザが近くの風景を見ている場合や、手元の新聞等を見ている場合などであって、撮像対象が近傍であると判断される場合は、システムコントローラ１０はステップＦ４０３からＦ４０６に進んで、ズームアップ（広角ズーム）表示への切換の撮像動作制御トリガの発生と判別する。そしてステップＦ４０７で撮像対象までの距離に応じて適切なズーム倍率を算出する。

このステップＦ４０４，Ｆ４０５の処理、又はステップＦ４０６，Ｆ４０７の処理が行われることで、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、撮像制御部１１に計算した倍率でのズーム動作を指示する。
これにより表示部２では、ユーザが見ようとしている光景に応じて図５（ｃ）のような望遠画像や、図６（ｂ）のような広角ズーム画像が撮像されることになる。
なお、ここでは望遠／広角のズーム動作制御を行う例としたが、撮像対象までの距離に応じて、焦点位置を変更させる制御を行ったり、画像の拡大／縮小動作を実行させるような制御動作も考えられる。

図１８は、撮像対象センサ２０と画像解析部１７からの情報に基づいて撮像動作制御トリガ発生と判断する例であるが、これは特に撮像対象が新聞、書籍等の文字を含むものであるか否かを判別する例である。
図１８のステップＦ５０１は、システムコントローラ１０が撮像対象センサ２０からの検出情報と画像解析部１７からの情報を監視する処理を示している。撮像対象センサ２０は測距センサであるとする。また画像解析部１７は撮像画像の解析により、被写体に文字が含まれているか否かを検出するものとする。
システムコントローラ１０は、これらの情報に基づいて、ユーザが見ている対象（撮像対象）が近傍であって、それが新聞や書籍など文字を含むものであるか否かを判別する。つまり手元の新聞を読んでいるような状況であるか否かを判断する。

撮像対象が近傍であって文字を含んでいると判断された場合、システムコントローラ１０は処理をステップＦ５０２からＦ５０３に進め、撮像動作制御トリガ発生と判別する。
そしてステップＦ５０４で、現在の新聞、書籍を被写体としたときに適した調整値を算出する。例えば輝度、コントラスト、シャープネス、撮像感度等の調整値として、新聞等の文字が良好に撮像できる調整値を求める。
このステップＦ５０３，Ｆ５０４の処理により、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、この場合は撮像部１３の撮像感度の調整、撮像信号処理部１５での輝度調整、コントラスト調整、シャープネス調整などの処理を指示する。この処理により、撮像画像が新聞等に適した画質、例えば文字を明瞭に認識できるような画質に調整される。

なお、文字を含むことの検出に加え、周囲の明るさも検出し、周囲の明るさを上記調整値の算出に反映させてもよい。
また、画像解析の際に書籍や新聞の形状を認識することを、ステップＦ５０３に進む条件に加えても良い。
また、撮像対象が新聞等であると判断した場合は、システムコントローラ１０は照明部４に照明を実行させる制御を行っても良い。
また、画質調整ではなく、例えば表示画像処理部１２に拡大処理を実行させて、文字が拡大された撮像画像を得るようにすることも考えられる。

また、文字を含む画像の場合に、画像解析部１７は文字を判別し、文字をテキストデータとしてシステムコントローラ１０に供給してもよい。例えば図１，図３の構成の場合、システムコントローラ１０は画像から検出されたテキストデータに基づいて音声合成部２９に音声合成処理を実行させることができる。
すると音声合成部２９では、撮像画像に含まれる文字の読み上げ音声としての音声信号が生成される。システムコントローラ１０は、この読み上げ音声を音声出力部５から出力させる。
このようにすると、ユーザは新聞等を見るだけで、その読み上げ音声を聞くことができるようになる。

図１９は、日時計数部２２による現在時刻の情報に基づいて撮像動作制御トリガ発生と判断する例である。
図１９のステップＦ６０１は、システムコントローラ１０が日時計数部２２で計数されている現在日時時刻をチェックする処理を示している。システムコントローラ１０は、現在時刻に基づいて、時間帯を判断する。例えば早朝、朝方、日中、夕方、夜間という時間帯を判別する。例えば４時〜７時を早朝、７時〜９時を朝方、９時〜１７時を日中、１７時〜１９時を夕方、１９時〜４時を夜間などとする。
また、この時間帯毎の時刻の区切りの基準は、月日の判断により変更するとよい。例えば月日によって日の出時間、日没時間の違いを考慮して、上記各時間帯としての判断時刻を変化させる。例えば早朝とする時間帯を夏期は４時〜７時、冬期を６時〜８時とするなどである。

ステップＦ６０１での日時チェックにより判別される時間帯として、時間帯の変化があったと判断した場合は、システムコントローラ１０は処理をステップＦ６０２からＦ６０３以降に進む。
例えば早朝とされる時刻になった時点では、ステップＦ６０３からＦ６０７に進み、早朝用の撮像動作／表示動作の撮像動作制御トリガの発生と判別する。
また朝方とされる時刻になったときは、ステップＦ６０４からＦ６０８に進み、朝方用の撮像動作／表示動作の撮像動作制御トリガの発生と判別する。
また日中とされる時刻になったときは、ステップＦ６０５からＦ６０９に進み、日中用の撮像動作／表示動作の撮像動作制御トリガの発生と判別する。
また夕方とされる時刻になったときは、ステップＦ６０６からＦ６１０に進み、夕方用の撮像動作／表示動作の撮像動作制御トリガの発生と判別する。
また夜間とされる時刻になったときは、ステップＦ６１１に進み、夜間用の撮像動作／表示動作の撮像動作制御トリガの発生と判別する。

ステップＦ６０７、Ｆ６０８，Ｆ６０９，Ｆ６１０，Ｆ６１１のいずれかで撮像動作制御トリガの発生と判断された場合は、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、撮像制御部１１や表示制御部１４に、時間帯に応じた撮像動作の指示を行う。例えば撮像感度の調整、輝度調整、コントラスト調整、シャープネス調整などの処理を指示する。或いはソフトフォーカス表示などの画像エフェクトを指示しても良い。、
この処理により、時間帯に応じたイメージの画像撮像が行われる。例えば早朝では柔らかい画質の画像、日中はコントラストの強いはっきりした画像、夕方はセピア色のような画質の画像、夜間はくすんだ画質の画像などである。このように時間帯毎のユーザの気分に合わせたようなおもしろみのある画像撮像を実現できる。
もちろん、時間帯毎の明るさに応じて画質を調整し、撮像画像の視認性を向上させるという画質調整も考えられる。
なお、時間帯とともに、天候状況、屋内／屋外の別を判断して、状況に好適な画質調整を行うことも考えられる。
また、時間帯ではなく日時情報から季節を判断して、季節に応じた画質調整を行うことも考えられる。例えば撮像画像において、夏は青色成分を強調させ、秋は赤色成分を強調させ、冬は白色成分を強調させ、春は緑／ピンク系統を強調させるなどとして、季節感のある撮像を行うことなどである。

図２０（ａ）はＧＰＳ受信部２１及び通信部２６の受信情報に基づいて撮像動作制御トリガ発生と判断する例である。
図２０（ａ）のステップＦ７０１は、システムコントローラ１０がＧＰＳ受信部２１で得られる現在位置の緯度・経度の情報を通信部２６からネットワークサーバ或いは地図データベース搭載機器に送信し、送信先において現在地点の情報を検索してもらい、その現在地点の情報を受信する動作を示している。なお撮像装置１内に地図データベースが保持されていれば、システムコントローラ１０は、ＧＰＳ受信部２１からの緯度・経度に基づいて、地図データベースから現在地点の情報を検索することができる。

システムコントローラ１０は、取得した現在地点の情報に基づいて、現在、所定の撮像制御を実行する場所にいるか否かを判別する。そして現在位置が所定の撮像制御を実行する場所であると判断したら、ステップＦ７０２からＦ７０３に進み、当該所定の撮像制御を実行すべき撮像動作制御トリガ発生と判断する。
このステップＦ７０３で撮像動作制御トリガの発生と判断されることで、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、撮像制御部１１に対して所定の撮像動作の指示を行う。
この場合の撮像動作制御としては、次のような例が考えられる。

例えば現在位置がスポーツ競技場、サーキットなどであると検出した場合は、ユーザが見る対象（撮像対象）は素早い動きの人物や車などであることから、システムコントローラ１０は撮像制御部１１に対して撮像フレームレートを高くして、速い動きに対応した撮像を実行させる。
また現在位置がコンサート会場、寄席、演芸場、スポーツ競技場などであれば、撮像対象のステージまでの距離に応じて、システムコントローラ１０は撮像制御部１１に対して望遠撮像動作を指示することが考えられる。現在位置情報としてステージ等の撮像対象までの距離までもが判別できれば、それに応じて望遠倍率を設定すればよいし、撮像対象までの距離を撮像対象センサ２０（測距センサ）により検出して望遠倍率を設定すればよい。また、望遠動作ではなく、撮像信号処理部１５に画像拡大処理を指示してもよい。
また現在位置が海岸、山などであれば、システムコントローラ１０は撮像制御部１１に対して紫外線感度向上撮像を指示し、例えば図１０（ｂ）のような画像を表示させ、紫外線の量が表現されるような画像の撮像を実行させることが考えられる。
また、取得された現在地点の情報に基づいて、地名、撮像している施設・店舗等の名称などをキャラクタ画像や文字で撮像画像に重畳させたり、宣伝情報、施設の案内情報、周辺の注意情報などを撮像画像に重畳させるように制御することも考えられる。この場合、例えば撮像信号処理部１５にキャラクタ生成／合成処理機能が備えられていればよい。

図２０（ｂ）もＧＰＳ受信部２１及び通信部２６の受信情報に基づいて撮像動作制御トリガ発生と判断する例であるが、特に赤外線感度向上撮像の実行中における処理例である。
図２０（ｂ）の処理は、現在、撮像部３において赤外線感度向上撮像を実行している場合にステップＦ７１０からＦ７１１に進む。
ステップＦ７１１では、システムコントローラ１０がＧＰＳ受信部２１で得られる現在位置の緯度・経度の情報を通信部２６からネットワークサーバ或いは地図データベース搭載機器に送信し、送信先において現在地点の情報を検索してもらい、その現在地点の情報を受信する。なお撮像装置１内に地図データベースが保持されていれば、システムコントローラ１０は、ＧＰＳ受信部２１からの緯度・経度に基づいて、地図データベースから現在地点の情報を検索する処理となる。

システムコントローラ１０は、現在位置の情報を取得したら、現在位置が赤外線感度向上撮像を禁止すべき場所であるか否かを判断する。
そして禁止すべき場所であると判断したら、ステップＦ７１２からＦ７１３に進み、システムコントローラ１０は、赤外線感度向上撮像の終了の撮像動作制御トリガの発生と判断する。
このステップＦ７１３で撮像動作制御トリガの発生と判断されることで、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、撮像制御部１１に対して赤外線感度向上撮像の終了の指示を行う。
このように、場所に応じて赤外線感度向上撮像が実行できなくすることで、赤外線感度上昇撮像などの特殊撮像機能の悪用防止に有効である。

図２１（ａ）は、画像解析部１７からの情報に基づいて撮像動作制御トリガ発生と判断する例である。
図２１（ａ）のステップＦ８０１は、システムコントローラ１０が画像解析部１７からの情報を監視する処理を示している。画像解析部１７は撮像画像の解析により、被写体に特定の対象が含まれているか否かを検出するものとする。
画像解析結果として、特定の対象が撮像されていると検出された場合は、システムコントローラ１０はステップＦ８０２からＦ８０３に進み撮像動作制御トリガの発生と判断する。
このステップＦ８０３で撮像動作制御トリガの発生と判断されることで、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、撮像制御部１１に対して所定の画像処理の指示を行う。
この場合の画像処理制御としては、次のような例が考えられる。

例えば特定の対象を鳥とした場合、撮像画像内で鳥が検出されることで、図１１（ｃ）のように画像内の鳥の部分をハイライトさせるような画像エフェクトを加えた撮像画像処理を、撮像信号処理部１５に指示することが考えられる。例えばハイキングの際にユーザが撮像した画像を後に再生させる際に、鳥など特定の対象が撮像された部分を発見しやすい画像となる。
また猫を特定の対象とすれば、猫が好きなユーザが、通常に生活している中で、猫が視界に入ったときに、それが強調されるうような撮像が行われ、後に撮像画像を再生するときに猫を認識し易くできる。
また特定の対象を人物した場合、撮像画像内で人物が検出されることで、画像内の人物の部分ついてハイライト表示等で強調させたり、拡大表示、ズーム表示等を実行させるように撮像信号処理部１５或いは撮像部３の動作を指示することが考えられる。
また人物や動物、或いは建造物などの特定の対象において、その特定の対象のみが撮像画像内に現れ、人物等の特定の対象の周囲の光景は全て塗りつぶされるような撮像画像が得られるようにしてもよい。
逆に、特定の対象として人物を検知したら、その人物のみが画像内で消されるような画像処理を撮像画像に対して実行させることも考えられる。例えば自然風景内で人物や車などの人工的なものを排除（マスキング）した画像が得られるようにするなどである。この場合、マスキングしようとする特定対象の周囲の画素からの補間処理で、特定対象の画素部分を埋めるような処理を行っても良い。
また人物等の特定対象についてはモザイク表示などの画像エフェクトを加えることも考えられる。

なお、この図２１（ａ）では画像解析部１７からの情報に基づく例としたが、例えば特定の対象を人物や動物という生体とした場合、撮像対象センサ２０としての焦電センサにより、特定の対象を検知したときに撮像動作制御トリガの発生と判断するようにしてもよい。

図２１（ｂ）も画像解析部１７からの情報に基づいて撮像動作制御トリガ発生と判断する例である。
図２１（ｂ）のステップＦ８１０は、システムコントローラ１０が画像解析部１７からの情報を監視する処理を示している。画像解析部１７は撮像画像の解析により、被写体において素早い動きが発生しているか否かを検出する。例えば各撮像フレームでの差分から動きの素早さを判定する。
画像解析結果として、被写体の素早い動きが検出された場合は、システムコントローラ１０はステップＦ８１１からＦ８１２に進み、撮像動作制御トリガの発生と判断する。
このステップＦ８１２で撮像動作制御トリガの発生と判断されることで、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになる。この場合、撮像制御部１１に対して高フレームレートでの撮像に切り換える指示を行う。
この処理によれば、例えばスポーツ観戦中などで被写体に素早い動きが多い場合などに、それに追従できるような撮像を実現できる。
なお、ここでは撮像対象の素早い動きの検出を高フレームレートへの切換のトリガとしたが、素早い動きがあった撮像対象についてのズーム処理やハイライト処理を行うトリガとしてもよい。

図２２（ａ）も画像解析部１７からの情報に基づいて撮像動作制御トリガ発生と判断する例である。これは特に、人物が撮像された際に、その人物の個人判別を行う例である。
図２２（ａ）のステップＦ９０１は、システムコントローラ１０が画像解析部１７からの情報を監視する処理を示している。画像解析部１７は撮像画像の解析により、被写体において人物の顔が含まれているかを判別し、また人物が顔が含まれていた場合、その顔の画像から個人特徴データを生成する。個人特徴データとは、例えば上述したように目の中心と鼻との距離ＥＮと目の間隔の距離Ｅｄの比（Ｅｄ／ＥＮ）や、目の中心と口との距離ＥＭと目の間隔の距離Ｅｄの比（Ｅｄ／ＥＭ）である。

個人特徴データが抽出された場合、システムコントローラ１０はステップＦ９０２からＦ９０３に進み、個人特徴データに基づいて人物情報を検索する。
例えばシスムコントローラ１０は個人特徴データを通信部２６からネットワークサーバ或いは人物データベース搭載機器に送信し、送信先において人物情報を検索してもらい、その検索結果を受信する。或いは撮像装置１内に人物データベースが保持されていれば、システムコントローラ１０は、個人特徴データに基づいて人物データベースを検索することができる。
外部装置もしくはシステムコントローラ１０自身による検索結果として、特定の人物の人物情報が検索できたら、処理をステップＦ９０４からＦ９０５に進め、撮像動作制御トリガの発生と判断する。
このステップＦ９０５で撮像動作制御トリガの発生と判断されることで、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、撮像制御部１１に対して、例えば検索された人物を強調した画像撮像の実行を指示する。例えばズーム処理、ハイライト処理などを撮像画像に加えるようにする。また、検索された人物情報としての文字を撮像画像に重畳するような処理も考えられる。
これらの処理によれば、例えば道行く人の中で、ユーザが過去に会った人、或いは有名人などで、人物データベースに登録されている人がいた場合に、その人物が強調される画像撮像が行われたり、人物についてのコメント（氏名や所属、過去に出会った場所など、人物データベースに登録されていた情報）が文字として付加された画像撮像が行われることになる。

図２２（ｂ）も画像解析部１７からの情報に基づいて撮像動作制御トリガ発生と判断する例である。これは図１１（ａ）のように日なた、日陰の影響で画像が見づらくなっている場合に対応する処理例である。
図２２（ｂ）のステップＦ９１０は、システムコントローラ１０が画像解析部１７からの情報を監視する処理を示している。画像解析部１７は撮像画像の解析により、撮像画像内で、日照状況によって明るい領域、暗い領域が発生しているか否かを検出する。
画像解析結果として、画像上に日なた／日陰による差が生じていると判別された場合は、システムコントローラ１０はステップＦ９１１からＦ９１２に進み、撮像動作制御トリガの発生と判断する。

このステップＦ９１２で撮像動作制御トリガの発生と判断されることで、システムコントローラ１０の図１２の処理はステップＦ１０３からＦ１０５（又は図１４のステップＦ１２４からＦ１２８）に進むことになり、撮像制御部１１に対して日なた／日陰の差を解消するような画像処理或いは撮像感度の部分的な変更を指示する。これにより、例えば図１１（ｂ）のように日なた／日陰の影響の少ない、見やすい撮像画像を得ることができる。
なお、日照による影響ではなく、家屋や施設内での照明等の影響で部分的な明暗の差が大きく生じているような場合や、画像が部分的に不鮮明となるような場合に、画面内の部分的な輝度調整、撮像感度調整、コントラスト調整などを実行させることも想定される。

以上、図１５〜図２２は、図１２のステップＦ１０４（又は図１４のステップＦ１２４）の撮像動作制御トリガの発生判断の例として述べたが、これらの処理例を、図１２、図１３，図１４における撮像開始トリガ（Ｆ１０１、Ｆ１１０、Ｆ１２０）、撮像終了トリガ（Ｆ１０４、Ｆ１１４、Ｆ１２５）、記録開始トリガ（Ｆ１１２、Ｆ１２２）、記録終了トリガ（Ｆ１１３、Ｆ１２３）、送信開始トリガ（Ｆ１１２、Ｆ１２２）、送信終了トリガ（Ｆ１１３、Ｆ１２３）の判断に適用することもできる。

まず撮像開始トリガの発生判断について述べる。
例えば図１５の処理例のように周囲が暗いこと、或いは明るすぎることを周囲環境センサ１９により検出したら、撮像開始トリガ発生と判別して、図１２のステップＦ１０２（又は図１３のステップＦ１１１、又は図１４のステップＦ１２１）に進み、撮像開始制御を行っても良い。
また図１６（ａ）のように天候による調整が必要と判断した場合に撮像開始トリガ発生と判別し、撮像開始制御を行ってもよい。すると特定の天候の場合に撮像が開始されることになる。
図１６（ｂ）のように周囲が暗状態と判断した場合に撮像開始トリガ発生と判別し、撮像開始制御を行ってもよい。
図１７のように、撮像対象が遠方或いは近傍となったときに撮像開始トリガ発生と判別し、撮像開始制御を行ってもよい。
図１９のように時間帯に応じて撮像開始トリガ発生と判別し、撮像開始制御を行ってもよい。もちろん月日、季節に応じて撮像開始トリガ発生と判別してもよい。
図２０（ａ）のように現在位置が所定の場所となったときに撮像開始トリガ発生と判別し、撮像開始制御を行ってもよい。すると特定の場所や施設の種別において撮像が開始されるようにすることができる。
なお、撮像実行前においては、画像解析部１７で外界状況を検知することはできないため、撮像開始トリガについては、周囲環境センサ１９、撮像対象センサ２０、ＧＰＳ受信部２１、日時計数部２２、通信部２６の情報によりトリガ発生の判断を行うことになる。

撮像終了トリガの発生判断については次の例が考えられる。
例えば図１５の処理例では、周囲が暗いこと、或いは明るすぎることを検出しているが、暗くもなく、また明るすぎることもないような状況となったときに、撮像終了トリガ発生と判別し、図１２のステップＦ１０６（又は図１３のステップＦ１１７、又は図１４のステップＦ１２９）に進み、撮像終了制御を行っても良い。
また図１６（ａ）では天候による調整が必要か否かを判断しているが、特に調整が必要ないと判断されたときに、撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。
図１６（ｂ）のように周囲が暗状態か否かを判断している場合に、暗状態でなくなれば撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。
図１７のように、撮像対象が遠方或いは近傍となったかを判断している場合に、撮像対象が遠方でも近傍でもないと判断されたら、撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。
図１８のように、近傍で文字を含む画像を検知する場合に、それが検知されなくなったら撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。
図１９のように時間帯、月日、季節等に応じて撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。
図２０（ａ）のように現在位置が所定の場所となったときに撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。すると特定の場所や施設の種別において撮像機能を停止させるようにすることができる。例えばコンサート会場、美術館などで撮像が禁止されている場所においての撮像を許可しないという動作が実現できる。
図２０（ｂ）のように赤外線感度向上撮像を停止させる場合においてステップＦ７１３で撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。
図２１（ａ）のように特定の対象が存在したときに撮像終了トリガ発生と判別して、撮像終了制御を行っても良い。例えば特定の対象について撮像を禁止する動作が実現できる。
或いは、特定の対象が存在しないと判別されたときに撮像終了トリガ発生と判別して、撮像終了制御を行っても良い。
図２１（ｂ）のように撮像対象の素早い動きを検出している場合に、素早い動きが検出されなくなったら撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。
図２２（ａ）のように特定の人物を検出したときに撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。特定の人物に対して撮像を禁止する動作が実現できる。
或いは、特定の人物が画像内に存在しなくなったと判別されたときに撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。
図２２（ｂ）のように画像内での明暗の分布を検出している場合に、撮像対象において明暗の差がなくなったら撮像終了トリガ発生と判別し、撮像終了制御を行っても良い。
これらのように撮像終了トリガ発生を判別し、撮像終了制御を行うようにすれば、ユーザにとって撮像の必要性が低下した、或いは必要性が無くなった状況、さらには撮像を禁止させたい状況において、自動的に撮像動作を停止させることができる。

記録開始トリガの発生判断については次の例が考えられる。
例えば図１５の処理例のように周囲が暗いこと、或いは明るすぎることを周囲環境センサ１９により検出したら、記録開始トリガ発生と判別して、図１３のステップＦ１１５（又は図１４のステップＦ１２６）に進み、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。
図１６（ａ）のように天候を検知している場合に、天候に応じて記録開始トリガ発生と判別し、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。例えば晴天になったら記録を行う、雷雨が発生したら記録を行うなどの動作が実現できる。
図１６（ｂ）のように周囲が暗状態と判断した場合に記録開始トリガ発生と判別し、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。
図１７のように、撮像対象が遠方或いは近傍となったときに記録開始トリガ発生と判別し、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。
図１８のように、近傍で文字を含む画像を検知したときに記録開始トリガ発生と判別し、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。
またこのように画像解析部１７が文字を検知した場合、画像解析部１７は文字をテキストデータとしてシステムコントローラ１０に供給するようにし、システムコントローラ１０は当該テキストデータをストレージ部２５に転送して記録させるようにしてもよい。ストレージ部２５は、撮像画像データを記録用にエンコードする際に、テキストデータをメタデータとして付加して記録するようにしても良いし、或いはテキストデータを独立したファイルとして記録媒体に記録しても良い。
図１９のように時間帯を判断する場合に、時間帯に応じて記録開始トリガ発生と判別し、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。すると特定の時間帯で記録が行われるという動作が実現できる。もちろん月日、季節に応じて記録開始トリガ発生と判別してもよい。
図２０（ａ）のように現在位置が所定の場所となったときに記録開始トリガ発生と判別し、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。すると特定の場所や施設の種別において撮像画像を記録する動作を実現できる。
図２１（ａ）のように特定の対象が存在したときに記録開始トリガ発生と判別して、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。特定の対象について撮像画像を記録する動作が実現できる。
図２１（ｂ）のように撮像対象の素早い動きが検出された場合に、記録開始トリガ発生と判別し、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。素早い動きを記録しておいて、後に再生させるという利用が可能となる。
図２２（ａ）のように特定の人物を検出したときに記録開始トリガ発生と判別し、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。特定の人物についての撮像画像を記録する動作が実現できる。
図２２（ｂ）のように画像内での明暗の分布を検出した場合に、記録開始トリガ発生と判別し、撮像画像をストレージ部２５で記録する記録開始制御を行っても良い。
これらのように記録開始トリガ発生を判別し、記録開始制御を行うようにすれば、ユーザにとって画像を記録しておきたい状況で自動的に記録が行われるような動作が可能となる。

記録終了トリガの発生判断については次の例が考えられる。
例えば図１５の処理例では、周囲が暗いこと、或いは明るすぎることを検出しているが、暗くもなく、また明るすぎることもないような状況となったときに、記録終了トリガ発生と判別し、図１３のステップＦ１１６（又は図１４のステップＦ１２７）に進み、ストレージ部における撮像画像の記録終了制御を行っても良い。
図１６（ａ）のように天候を判別している場合に、天候状況に応じて記録終了トリガ発生と判別し、記録終了制御を行っても良い。
図１６（ｂ）のように周囲が暗状態か否かを判断している場合に、暗状態でなくなれば記録終了トリガ発生と判別し、記録終了制御を行っても良い。
図１７のように、撮像対象が遠方或いは近傍となったかを判断している場合に、撮像対象が遠方でも近傍でもないと判断されたら、記録終了トリガ発生と判別し、記録終了制御を行っても良い。
図１８のように、近傍で文字を含む画像を検知する場合に、それが検知されなくなったら記録終了トリガ発生と判別し、記録終了制御を行っても良い。
図１９のように時間帯等を判断する場合に、時間帯、月日、季節等に応じて記録終了トリガ発生と判別し、記録終了制御を行っても良い。
図２０（ａ）のように現在位置が所定の場所となったときに記録終了トリガ発生と判別し、記録終了制御を行っても良い。すると特定の場所や施設の種別において撮像画像の記録機能を停止させるようにすることができる。例えばコンサート会場、美術館などで撮像画像の記録が禁止されている場所においての撮像画像の記録を許可しないという動作が実現できる。
図２０（ｂ）のように赤外線感度向上撮像を停止させる場合においてステップＦ７１３で記録終了トリガ発生と判別し、記録終了制御を行っても良い。
図２１（ａ）のように特定の対象が存在したときに記録終了トリガ発生と判別して、記録終了制御を行っても良い。例えば特定の対象について記録を禁止する動作が実現できる。
或いは、特定の対象が存在しないと判別されたときに記録終了トリガ発生と判別して、記録終了制御を行っても良い。
図２１（ｂ）のように撮像対象の素早い動きを検出している場合に、素早い動きが検出されなくなったら記録終了トリガ発生と判別し、記録終了制御を行っても良い。
図２２（ａ）のように特定の人物を検出したときに記録終了トリガ発生と判別し、記録終了制御を行っても良い。特定の人物に対して撮像画像の記録を禁止する動作が実現できる。
或いは、特定の人物が画像内に存在しなくなったと判別されたときに記録終了トリガ発生と判別し、記録終了制御を行っても良い。
図２２（ｂ）のように画像内での明暗の分布を検出している場合に、撮像対象において明暗の差がなくなったら記録終了トリガ発生と判別し、記録終了制御を行っても良い。
或いは、画像内での明暗の差がある場合に記録終了トリガ発生と判別し、記録終了制御を行っても良い。

これらのように記録終了トリガ発生を判別し、記録終了制御を行うようにすれば、ユーザにとって撮像画像の記録の必要性が低下した、或いは必要性が無くなった状況、さらには撮像画像の記録を禁止させたい状況において、自動的にストレージ部２５における記録動作を終了させることができる。

なおシステムコントローラ１０が、ストレージ部２５における記録動作に関して、記録開始トリガ、記録終了トリガによる記録の開始／終了以外に、各種制御を行うようにすることもできる。
例えばストレージ部２５において撮像画像データとしてのストリーム映像の記録動作を実行している際において、図２１（ａ）や図２２（ａ）のように特定の対象や特定の人物を検知した場合、その映像部分をマーキングさせるようにすることが考えられる。即ち特定の対象や特定の人物が含まれる映像データにマーキング情報としてのメタデータを付加する。このようにすると、後に記録した撮像画像データ（ストリーム映像）を再生させるときに、特定の対象や人物が含まれている映像を容易にサーチできるようになる。
また図２１（ｂ）のように撮像対象の素早い動きを検出した場合や、記録データのビットレートや圧縮率を変更するという制御も考えられる。また天候や時刻に応じて記録データのビットレートや圧縮率を変更するという制御も考えられる。
さらに、撮像画像データについて、その１フレームを静止画データとしてストレージ部２５において記録させるという処理も考えられ、その場合、例えば上記した記録開始トリガのタイミングを静止画記録タイミングと考えて、そのタイミングでの１フレームの画像データを記録するようにしても良い。
また、撮像画像データについて、数秒間乃至数分間のクリップ映像をデータとしてストレージ部２５において記録させるという処理も考えられ、その場合、例えば上記した記録開始トリガのタイミングをクリップ映像記録タイミングと考えて、そのタイミングでクリップ映像を記録するようにしても良い。
もちろん撮像画像データはストリーム映像の場合だけでなく、デジタルスチルカメラなどと同様の静止画像乃至クリップ映像の場合であってもよい。

送信開始トリガの発生判断については次の例が考えられる。
例えば図１５の処理例のように周囲が暗いこと、或いは明るすぎることを周囲環境センサ１９により検出したら、送信開始トリガ発生と判別して、図１３のステップＦ１１５（又は図１４のステップＦ１２６）に進み、撮像画像データを通信部２６から外部機器への送信を開始させる送信開始制御を行っても良い。
図１６（ａ）のように天候を検知している場合に、天候に応じて送信開始トリガ発生と判別し、送信開始制御を行っても良い。
図１６（ｂ）のように周囲が暗状態と判断した場合に送信開始トリガ発生と判別し、送信開始制御を行っても良い。
図１７のように、撮像対象が遠方或いは近傍となったときに送信開始トリガ発生と判別し、送信開始制御を行っても良い。
図１８のように、近傍で文字を含む画像を検知したときに送信開始トリガ発生と判別し、送信開始制御を行っても良い。
またこのように画像解析部１７が文字を検知した場合、画像解析部１７は文字をテキストデータとしてシステムコントローラ１０に供給するようにし、システムコントローラ１０は当該テキストデータを通信部２６に転送して外部機器に送信させるようにしてもよい。通信部２６は、撮像画像データとともにテキストデータを送信してもよいし、テキストデータのみを送信してもよい。
図１９のように時間帯を判断する場合に、時間帯に応じて送信開始トリガ発生と判別し、送信開始制御を行っても良い。すると特定の時間帯になると送信が行われるという動作が実現できる。もちろん月日、季節に応じて送信開始トリガ発生と判別してもよい。
図２０（ａ）のように現在位置が所定の場所となったときに送信開始トリガ発生と判別し、送信開始制御を行っても良い。例えばネットワークアクセスポイントの近傍などでネットワーク送信が可能な場所に居たら送信が行われるような動作を実現できる。
図２１（ａ）のように特定の対象が存在したときに送信開始トリガ発生と判別して、送信開始制御を行っても良い。特定の対象について撮像画像を送信する動作が実現できる。
図２１（ｂ）のように撮像対象の素早い動きが検出された場合に、送信開始トリガ発生と判別し、送信開始制御を行っても良い。
図２２（ａ）のように特定の人物を検出したときに送信開始トリガ発生と判別し、送信開始制御を行っても良い。特定の人物について撮像画像を送信する動作が実現できる。
図２２（ｂ）のように画像内での明暗の分布を検出した場合に、送信開始トリガ発生と判別し、送信開始制御を行っても良い。

また特に送信開始トリガとしては、図２３のような判別例も考えられる。
図２３のステップＦ１００１は、システムコントローラ１０が画像解析部１７からの情報を監視する処理を示している。画像解析部１７は撮像画像の解析により、被写体に通信対象となる電子機器が含まれているか否かを検出するものとする。例えばパーソナルコンピュータ、携帯電話機、ＡＶ機器、ＰＤＡなど、データ通信が実行できる可能性のある機器を外観で判別する。
画像解析結果として、電子機器が撮像されていると検出された場合は、システムコントローラ１０はステップＦ１００２からＦ１００３に進み、通信部２６に指示して、電子機器に対して通信確立要求を送信させる。もし、撮像された電子機器が、本例の撮像装置１（１Ａ）と通信可能な機器であれば、通信確立要求に対してのレスポンスが得られ、通信状態が確立される。このようにして外部の電子機器が通信可能な対応機器であると判別できた場合、システムコントローラ１０はステップＦ１００４からＦ１００５に進み、送信開始トリガ発生と判断する。
このステップＦ１００５で送信開始トリガの発生と判断されることで、システムコントローラ１０の図１３又は図１４の処理で撮像画像データの送信が開始されるように送信開始制御を行っても良い。
また、外部機器からの通信確立要求があった場合に、送信開始トリガ発生と判断することも考えられる。

これらのように送信開始トリガ発生を判別し、送信開始制御を行うようにすれば、ユーザにとって画像を外部機器に送信しておきたい状況や、送信が可能な状況などにおいて自動的に送信が行われるような動作が可能となる。

送信終了トリガの発生判断については次の例が考えられる。
例えば図１５の処理例では、周囲が暗いこと、或いは明るすぎることを検出しているが、暗くもなく、また明るすぎることもないような状況となったときに、送信終了トリガ発生と判別し、図１３のステップＦ１１６（又は図１４のステップＦ１２７）に進み、通信部２６における外部機器への送信を終了させる送信終了制御を行っても良い。
図１６（ａ）のように天候を判別している場合に、天候状況に応じて送信終了トリガ発生と判別し、送信終了制御を行っても良い。
図１６（ｂ）のように周囲が暗状態か否かを判断している場合に、暗状態でなくなれば送信終了トリガ発生と判別し、送信終了制御を行っても良い。
図１７のように、撮像対象が遠方或いは近傍となったかを判断している場合に、撮像対象が遠方でも近傍でもないと判断されたら、送信終了トリガ発生と判別し、送信終了制御を行っても良い。
図１８のように、近傍で文字を含む画像を検知する場合に、それが検知されなくなったら送信終了トリガ発生と判別し、送信終了制御を行っても良い。
図１９のように時間帯等を判断する場合に、時間帯、月日、季節等に応じて送信終了トリガ発生と判別し、送信終了制御を行っても良い。
図２０（ａ）のように現在位置が所定の場所となったときに送信終了トリガ発生と判別し、送信終了制御を行っても良い。
図２０（ｂ）のように赤外線感度向上撮像を停止させる場合においてステップＦ７１３で送信終了トリガ発生と判別し、送信終了制御を行っても良い。
図２１（ａ）のように特定の対象が存在したときに送信終了トリガ発生と判別して、送信終了制御を行っても良い。或いは、特定の対象が存在しないと判別されたときに送信終了トリガ発生と判別して、送信終了制御を行っても良い。
図２１（ｂ）のように撮像対象の素早い動きを検出している場合に、素早い動きが検出されなくなったら送信終了トリガ発生と判別し、送信終了制御を行っても良い。
図２２（ａ）のように特定の人物を検出したときに送信終了トリガ発生と判別し、送信終了制御を行っても良い。或いは、特定の人物が画像内に存在しなくなったと判別されたときに送信終了トリガ発生と判別し、送信終了制御を行っても良い。
図２２（ｂ）のように画像内での明暗の分布を検出している場合に、撮像対象において明暗の差がなくなったら送信終了トリガ発生と判別し、送信終了制御を行っても良い。或いは、画像内での明暗の差がある場合に送信終了トリガ発生と判別し、送信終了制御を行っても良い。
また、外部機器から通信解除の要求があった場合や、外部機器との通信が不能になった場合も、送信終了トリガ発生と判断して送信終了制御を行えばよい。

これらのように送信終了トリガ発生を判別し、送信終了制御を行うようにすれば、ユーザにとって撮像画像の外部機器への送信の必要性が低下した、或いは必要性が無くなった状況、さらには送信ができない状況において、自動的に通信部２６による送信動作を終了させることができる。

以上、撮像動作制御トリガ、撮像開始トリガ、撮像終了トリガ、記録開始トリガ、記録終了トリガ、送信開始トリガ、送信終了トリガについての発生判断の例を述べたが、上記以外にも更に多様な発生判断の例が考えられることは言うまでもない。

［６．実施の形態の効果、変形例及び拡張例］

以上、実施の形態を説明してきたが、実施の形態によれば、眼鏡型もしくは頭部装着型などの装着ユニットに配置された撮像部３による、ユーザが視認する方向を被写体方向とした画像撮像動作に関して、外界情報に基づいて制御することで、ユーザに操作負担をかけずに、状況に応じた的確な撮像動作が実行される。これによりユーザの視線方向の光景の撮像画像として的確なタイミングや態様で撮像されたり、おもしろみのある画像が撮像されるなどという効果がある。
また同様に外界情報に応じて撮像画像データや音声データのストレージ部２５での記録や、通信部２６からの外部機器への送信を行うことで、或るユーザの視界の光景を複数の人の間で共有したり、後にユーザの視界光景を再生させて視聴できる。つまり撮像装置１（１Ａ）を装着したユーザの見ている視界光景を多様に活用できる。

なお、実施の形態では撮像部３の撮像動作や撮像信号処理部１５の信号処理の制御によって実現される撮像動作に関する制御を主に説明したが、例えば電源オン／オフ／スタンバイの切換や、表示画像処理部１２の信号処理制御、音声出力部５から出力される音声の音量や音質の制御などを、外界情報に基づいて行っても良い。例えば外界の騒音レベル、天候等に応じて音量調整を行うことなども考えられる。

また、撮像装置１（１Ａ）の外観や構成は図１，図２，図３，図４の例に限定されるものではなく、各種の変形例が考えられる。
例えばストレージ部２５、通信部２６の一方のみを備える構成としたり、これらを設けずにモニタ表示系を備える構成なども考えられる。
また、撮像画像１（１Ａ）として眼鏡型或いは頭部装着型の装着ユニットを有する例を述べたが、本発明の撮像装置は、ユーザの視界方向を撮像するように構成されればよく、例えばヘッドホン型、ネックバンドタイプ、耳掛け式など、どのような装着ユニットでユーザに装着されるものであってもよい。さらには、例えば通常の眼鏡やバイザー、或いはヘッドホン等に、クリップなどの取付具で取り付けることでユーザに装着させる形態であってもよい。また必ずしもユーザの頭部に装着されなくても良い。

本発明の実施の形態の撮像装置の外観例の説明図である。 実施の形態の他の撮像装置の外観例の説明図である。 実施の形態の撮像装置のブロック図である。 実施の形態の他の撮像装置のブロック図である。 実施の形態のスルー状態、通常撮像画像、望遠撮像画像の説明図である。 実施の形態の広角ズーム画像の説明図である。 実施の形態の拡大画像の説明図である。 実施の形態の調整画像の説明図である。 実施の形態の赤外線感度上昇撮像画像の説明図である。 実施の形態の紫外線感度上昇撮像画像の説明図である。 実施の形態の調整画像、ハイライト画像の説明図である。 実施の形態の制御処理のフローチャートである。 実施の形態の他の制御処理のフローチャートである。 実施の形態の更に他の制御処理のフローチャートである。 実施の形態の撮像動作制御トリガの判別処理のフローチャートである。 実施の形態の撮像動作制御トリガの判別処理のフローチャートである。 実施の形態の撮像動作制御トリガの判別処理のフローチャートである。 実施の形態の撮像動作制御トリガの判別処理のフローチャートである。 実施の形態の撮像動作制御トリガの判別処理のフローチャートである。 実施の形態の撮像動作制御トリガの判別処理のフローチャートである。 実施の形態の撮像動作制御トリガの判別処理のフローチャートである。 実施の形態の撮像動作制御トリガの判別処理のフローチャートである。 実施の形態の送信開始トリガの判別処理のフローチャートである。

符号の説明

１，１Ａ 撮像装置、２ 表示部、３ 撮像部、４ 照明部、５ 音声出力部、６ 音声入力部、１０ システムコントローラ、１１ 撮像制御部、１２ 表示画像処理部、１３ 表示駆動部、１４ 表示制御部、１５ 撮像信号処理部、１６ 音声信号処理部、１７ 画像解析部、１９ 周囲環境センサ、２０ 撮像対象センサ、２１ ＧＰＳ受信部、２２ 日時計数部、２５ ストレージ部、２６ 通信部、２９ 音声合成部

Claims (39)

1. 使用者が視認する方向を被写体方向として撮像するようにされる撮像手段と、
   外界情報を取得する外界情報取得手段と、
   上記外界情報取得手段で取得された情報に基づいて、上記撮像手段の動作を制御する制御手段と、
   を備えることを特徴とする撮像装置。
2. 上記撮像手段で撮像された画像を表示する表示手段を更に備えることを特徴とする請求項１に記載の撮像装置。
3. 上記撮像手段で撮像された画像を記録媒体に記録する記録手段を更に備えることを特徴とする請求項１に記載の撮像装置。
4. 上記制御手段は、上記外界情報取得手段で取得された情報に基づいて、上記記録手段での記録開始又は記録終了の制御を行うことを特徴とする請求項３に記載の撮像装置。
5. 上記撮像手段で撮像された画像を外部機器に送信する送信手段を更に備えることを特徴とする請求項１に記載の撮像装置。
6. 上記制御手段は、上記外界情報取得手段で取得された情報に基づいて、上記送信手段での送信開始又は送信終了の制御を行うことを特徴とする請求項５に記載の撮像装置。
7. 上記撮像手段は、撮像素子としてＣＣＤセンサもしくはＣＭＯＳセンサを用いて構成されていることを特徴とする請求項１に記載の撮像装置。
8. 上記外界情報取得手段は、上記外界情報として周囲環境状況を検出するセンサであることを特徴とする請求項１に記載の撮像装置。
9. 上記外界情報取得手段は、上記外界情報として、上記撮像手段の撮像対象に関する情報を検出するセンサであることを特徴とする請求項１に記載の撮像装置。
10. 上記外界情報取得手段は、上記外界情報として、現在位置情報を取得することを特徴とする請求項１に記載の撮像装置。
11. 上記外界情報取得手段は、上記外界情報として、現在日時を取得することを特徴とする請求項１に記載の撮像装置。
12. 上記外界情報取得手段は、外部機器との通信により、上記外界情報を取得することを特徴とする請求項１に記載の撮像装置。
13. 上記外界情報取得手段は、上記撮像手段により撮像した画像についての画像解析により、上記外界情報を取得することを特徴とする請求項１に記載の撮像装置。
14. 上記外界情報取得手段が取得する上記外界情報は、周囲の明るさ、又は温度、又は湿度、又は気圧、又は天候の情報であることを特徴とする請求項１に記載の撮像装置。
15. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象までの距離の情報であることを特徴とする請求項１に記載の撮像装置。
16. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象が発する赤外線の情報又はエネルギーであることを特徴とする請求項１に記載の撮像装置。
17. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象が発する紫外線の情報又はエネルギーであることを特徴とする請求項１に記載の撮像装置。
18. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象を判別する情報であることを特徴とする請求項１に記載の撮像装置。
19. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象として、人物、又は動物、又は建造物、又は自然物、又は機器を判別する情報であることを特徴とする請求項１に記載の撮像装置。
20. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象の動きの情報であることを特徴とする請求項１に記載の撮像装置。
21. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象とされた人物の個人を特定する情報であることを特徴とする請求項１に記載の撮像装置。
22. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段の撮像対象が文字であるか否かを判別する情報であることを特徴とする請求項１に記載の撮像装置。
23. 上記外界情報取得手段が取得する上記外界情報は、現在位置に該当する地点の情報であることを特徴とする請求項１に記載の撮像装置。
24. 上記外界情報取得手段が取得する上記外界情報は、現在位置に該当する地域における建造物、又は自然物の情報であることを特徴とする請求項１に記載の撮像装置。
25. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段で撮像された画像の明暗、又は鮮明度の情報であることを特徴とする請求項１に記載の撮像装置。
26. 上記外界情報取得手段が取得する上記外界情報は、上記撮像手段で撮像された画像の画像内の部分的な明暗、又は部分的な鮮明度の情報であることを特徴とする請求項１に記載の撮像装置。
27. 上記制御手段は、上記撮像手段における撮像動作のオン／オフの制御を行うことを特徴とする請求項１に記載の撮像装置。
28. 上記制御手段は、上記撮像手段における望遠撮像から広角撮像の可変制御を行うことを特徴とする請求項１に記載の撮像装置。
29. 上記制御手段は、上記撮像手段における焦点制御を行うことを特徴とする請求項１に記載の撮像装置。
30. 上記制御手段は、上記撮像手段における撮像感度の可変制御を行うことを特徴とする請求項１に記載の撮像装置。
31. 上記制御手段は、上記撮像手段における赤外線撮像感度の可変制御を行うことを特徴とする請求項１に記載の撮像装置。
32. 上記制御手段は、上記撮像手段における紫外線撮像感度の可変制御を行うことを特徴とする請求項１に記載の撮像装置。
33. 上記制御手段は、上記撮像手段における一部の撮像素子領域の撮像感度の可変制御を行うことを特徴とする請求項１に記載の撮像装置。
34. 上記制御手段は、上記撮像手段におけるフレームレートの可変制御を行うことを特徴とする請求項１に記載の撮像装置。
35. 上記制御手段は、上記撮像手段における撮像レンズ系の動作制御を行うことを特徴とする請求項１に記載の撮像装置。
36. 上記制御手段は、上記撮像手段における撮像素子で得られる撮像信号の処理を行う撮像信号処理部の動作制御を行うことを特徴とする請求項１に記載の撮像装置。
37. 上記被写体方向に対して照明を行う照明手段を更に備え、
    上記制御手段は、上記外界情報取得手段で取得された情報に基づいて、上記照明手段による照明動作の制御を行うことを特徴とする請求項１に記載の撮像装置。
38. 上記撮像手段で撮像された画像に含まれる文字に基づいて音声合成を行う音声合成手段と、
    上記音声合成手段で生成された音声を出力する音声出力手段と、
    を更に備え、
    上記制御手段は、上記外界情報取得手段で取得された情報に基づいて、上記音声合成手段による合成音声の出力動作の制御を行うことを特徴とする請求項１に記載の撮像装置。
39. 使用者が視認する方向を被写体方向として撮像するようにされる撮像手段を備えた撮像装置の撮像方法として、
    外界情報を取得する外界情報取得ステップと、
    上記外界情報取得ステップで取得された情報に基づいて、上記撮像手段の動作を制御する制御ステップと、
    を備えることを特徴とする撮像方法。

Images