JP2017059870A - 撮像操作ガイド装置および撮像装置の操作ガイド方法 - Google Patents

Abstract

【課題】撮影対象物または観察対象物を見失った際に、この対象物を見出すために、簡単な構成で操作者に分かりやすい撮像操作ガイド装置および撮像装置の操作ガイド方法を提供する。【解決手段】対象物を撮像し、画像データを出力し（Ｓ３）、画像データを補助画像として記憶し（Ｓ５）、撮像にあたっての操作履歴を記録し（Ｓ５）、過去に取得した画像と、記録された操作履歴に従って、過去の画像と現在の差異に関するガイドを決定する（Ｓ１７Ｙｅｓ以下）。【選択図】 図５

Description

本発明は、撮像装置で撮影する際に、対象物を見失った場合でも簡単に対象物を探し出すことが可能な撮像操作ガイド装置および撮像操作ガイド方法に関する。

撮像装置を用いて撮影する際には、モニタ画面を観察しながら行うことが多い。この時、対象物を大きく見ようとする場合や、観察位置や方向を大きく変えた場合には、撮影対象物を見失う場合がある。

上述したように撮影対象物を見失った場合でも、容易に撮影対象物を見出すことができるようにした撮像装置が提案されている。例えば、特許文献１には、第１の画角で表示している際に、この第１の画角よりも広角の第２の画角で表示すること可能な撮像装置が提案されている。

特開２００７−７４０５７号公報

上述の特許文献１に開示の撮像装置は、撮影対象物を見失った際に、この撮影対象物を見出すために、画角の広い撮像部を必要としている。このため、装置が大型化、複雑化し、さらに救済シーン（対象物を再度見出すための処置）が限定され、ユーザに負担を強いてしまう。

本発明は、このような事情を鑑みてなされたものであり、撮影対象物または観察対象物を見失った際に、この対象物を見出すために、簡単な構成で操作者に分かりやすい撮像操作ガイド装置および撮像装置の操作ガイド方法を提供することを目的とする。

上記目的を達成するため第１の発明に係る撮像操作ガイド装置は、対象物を撮像し、画像データを出力する撮像部と、上記撮像部に対する操作履歴を記録する操作履歴部と、上記操作履歴部に記録された操作履歴に従って、過去の画像と現在の差異に関するガイドを決定するガイド部と、を有する。

第２の発明に係る撮像操作ガイド装置は、上記第１の発明において、上記ガイド部は、画像を見失った際の支配的な操作項目に基づいて上記ガイドを決定する。
第３の発明に係る撮像操作ガイド装置は、上記第１の発明において、上記ガイド部は、現在の画像撮影時に、過去の画像と現在の差異に関するガイドとして、上記過去の画像、操作を表す記号およびテキストの少なくとも１つを記録した画像ファイルを作成する。

第４の発明に係る撮像操作ガイド装置は、上記第１の発明において、上記対象物を見出すためのガイド表示を指示するための指示部を有し、上記指示部は、上記ガイド表示を手動操作で指示された際、または上記画像データに基づいて判定する。
第５の発明に係る撮像操作ガイド装置は、上記第１の発明において、上記操作履歴部は、上記撮像部の画角を変化させる操作情報、上記撮像部の左右上下の方向変化させる操作情報、上記撮像部の明るさを変化させる情報、上記撮像部のピントを変化させる情報の少なくとも１つを有する。

第６の発明に係る撮像装置の操作ガイド方法は、対象物を撮像し、画像データを出力し、上記撮像にあたっての操作履歴を記録し、過去に取得した画像と、記録された上記操作履歴に従って、過去の画像と現在の差異に関するガイドを決定する。

第７の発明に係る撮像操作ガイド装置は、対象物を撮像し画像データを出力する撮像部と、上記画像データを補助画像として記憶する画像データ記憶部と、上記対象物を見出すためのガイド表示を指示するための指示部と、上記指示部によってガイド表示が指示された際に、対象物を見失うより前に上記画像データ記憶部に記憶された補助画像を表示させるガイド表示部と、を有する。

第８の発明に係る撮像操作ガイド装置は、上記第７の発明において、上記対象物を見出すためのガイド表示を指示するための指示部を有し、上記指示部は、上記ガイド表示を手動操作で指示された際、または上記画像データに基づいて判定する。
第９の発明に係る撮像操作ガイド装置は、上記第７の発明において、上記ガイド表示部は、現在の画像と上記補助画像の両者を並べて表示する。

第１０の発明に係る撮像操作ガイド装置は、上記第７の発明において、上記撮像部に対する操作履歴を記録する操作履歴部を有し、上記ガイド表示部に表示された上記補助画像のいずれかを選択すると、選択された補助画像が記録された時点からの操作履歴を表示する。
第１１の発明に係る撮像操作ガイド装置は、上記第７の発明において、上記撮像部に対する操作履歴を記録する操作履歴部を有し、上記指示部によってガイド表示が指示されると、過去の類似状況を検索し、検索結果に基づいてガイド表示を行う。

第１２の発明に係る撮像装置の操作ガイド方法は、対象物を撮像し画像データを出力し、上記画像データを補助画像として記憶し、上記対象物を見出すためのガイド表示を指示し、上記ガイド表示が指示された際に、対象物を見失うより前に記憶された補助画像を表示部に表示させる。

本発明によれば、撮影対象物または観察対象物を見失った際に、この対象物を見出すために、簡単な構成で操作者に分かりやすい撮像操作ガイド装置および撮像装置の操作ガイド方法を提供することができる。

本発明の一実施形態に係るカメラの基本的な構成を示すブロック図である。 本発明の一実施形態に係るカメラの具体的な構成を示すブロック図である。 本発明の一実施形態に係るカメラの使用状態を示す図である。 本発明の一実施形態に係るカメラにおいて、表示状態を示す図である。 本発明の一実施形態に係るカメラのメイン動作を示すフローチャートである。 本発明の一実施形態に係るカメラのメイン動作を示すフローチャートである。 本発明の一実施形態に係るカメラの「ガイド必要」の動作を示すフローチャートである。 本発明の一実施形態に係るカメラの「撮像部の移動経路表示」の動作を示すフローチャートである。 本発明の一実施形態に係るカメラの「撮像制御のガイド表示」の動作を示すフローチャートである。 本発明の一実施形態に係るカメラの「撮像制御のガイド表示」の動作を示すフローチャートである。 本発明の一実施形態に係るカメラにおいて、操作履歴を示す図である。 本発明の一実施形態に係るカメラにおいて、操作履歴を示す図である。 本発明の一実施形態に係るカメラにおいて、操作が変化した際の画像変化を示す図である。 本発明の一実施形態に係るカメラにおいて、表示部に表示される対象物の時間的変化を示す図である。 本発明の一実施形態に係るカメラにおいて、ガイド表示の例を示す図である。 本発明の一実施形態に係るカメラにおいて、ガイド表示の第１の変形例を示す図である。 本発明の一実施形態に係るカメラにおいて、ガイド表示の第１の変形例におけるメイン動作を示すフローチャートである。 本発明の一実施形態に係るカメラにおいて、ガイド表示の第２の変形例を示す図である。 本発明の一実施形態に係るカメラにおいて、ガイド表示の第２の変形例におけるメイン動作を示すフローチャートである。 本発明を内視鏡に適用した際の使用例を示す図である。

以下、図を用いて本発明の実施形態について説明する。図１は、本実施形態の基本的な構成を示すブロック図である。画像判定部１ｂは、

操作履歴部１ｃは、撮像装置等、ユーザが使用している装置の操作の履歴を記録する。操作履歴としては、例えば、撮像装置の場合には、撮影レンズの距離情報、画角情報（焦点距離情報）、撮影レンズの光軸方向（上下方向、左右方向）、奥行き方向、露出情報（画面の明るさ情報）等がある。なお、奥行き情報は、通常は、距離情報と一致するが、ユーザが壁面に沿って進む際には、画面の一部に撮像される壁面の距離が一定の場合であっても画面の他の部分の奥行きは変化する場合がある。

差異教示部１ｄｘは、画像判定部１ｂから判定結果を入力し、また操作履歴部１ｃから、記録された操作履歴を入力し、画像が大きく変化した場合に、過去取得画像と現在画像との差異を教示する。すなわち、画像が大きく変化した場合に、変化した際の操作等を表示することにより、見失った対象物を再び捉えることができるようにする。例えば、撮像装置を大きく右方向に向けたことによって、画像が大きく変化したのであれば、その旨を表示してもよく、また左方向に動かすことを教示するようにしてもよい。さらに、過去の画像を記録しておき、操作状態と過去の画像を表示するようにしてもよい。具体的な教示の例については、図４、図１４、図１５等を用いて後述する。

次に、図２を用いて、本実施形態の具体的な構成について説明する。本実施形態は、本発明を撮像装置１０に適用した例である。この撮像装置１０は、カメラ部１１と本体部１２とから構成される。なお、カメラ部１１と本体部１２は、一体に構成してもよく、また別体に構成してもよい。また、本体部１２は、携帯電話やスマートフォンのような情報端末がその機能を担うようにしてもよい。カメラ部１１と本体部１２の間は、接点を介して直接、接続をとるようにしてもよく、また無線通信で接続をとるようにしてもよい。撮像部には、撮影する機能、観察する機能、計測する機能等の基本的な機能や応用機能を含んでいる。

カメラ部１１内には、撮像部２、操作部７ａ、姿勢センサ７ｂを有する。撮像部２は、光学レンズと撮像素子を有し、対象物を光電変換し、画像データを本体部１２に出力する。また、光学レンズ１１は、ズームレンズで構成し、画角を変更するようにしてもよい。ズームレンズを搭載している場合には、画角情報を検出し、本体部１２に出力する。また、所謂オートフォーカス機能を有するようにしてもよく、この場合には、対象物までの距離を検出し、距離情報を本体部１２に出力する。撮像部２は、対象物を撮像し、画像データを出力する撮像部として機能する。

操作部７ａは、カメラ部１１の操作部材、例えば、画角変更部材（焦点距離変更部材）やレリーズ釦等を有し、操作部７ａの操作情報を本体部１２に出力する。姿勢センサ７ｂは、角加速度センサ、加速度センサ、ジャイロ等のカメラ部１１の姿勢状態を検出可能なセンサを有し、このセンサによる検知出力を本体部１２に出力する。姿勢センサ７ｂの検知出力によって、撮像部２の光学レンズの光軸方向が、上下左右、いずれかの方向に向けられたことを検出することができる。

本体部１２内には、制御部１、記録部４、表示部８、タッチパネル８ｂ、時計部９等が設けられている。制御部１内には、撮影制御部１ａ、画像判定部１ｂ、操作履歴部１ｃ、ガイド部１ｄが設けられている。制御部１は、ＣＰＵ（Central Processing Unit）とその周辺回路を有し、記憶部１ｅに記憶されたプログラムに従って、本体部１２内やカメラ部１１内の各部の制御を行うことができる。撮影制御部１ａ、画像判定部１ｂ、操作履歴部１ｃ、ガイド部１ｄは、ハードウエアで構成してもよいが、プログラムよってソフトウエア的に実現してもよい。

撮影制御部１ａは、撮像部２によって取得される画像データの露出制御や、また操作部７ａのレリーズ釦等の撮影指示部材の操作に応じて、画像データの記録制御等を行う。画像判定部１ｂは、図１に示した画像判定部１ｂと同様に、撮像部２等から画像データを入力し、ユーザが画像を観察又は記録している際に、対象物を見失った場合か否かを判定する。対象物を見失ったか否かは、画像が大きく変化したか否かに基づいて判定する。

操作履歴部１ｃは、図１に示した操作履歴部１ｃと同様に、ユーザが撮像装置１０を使用する際の操作履歴を記録する。操作履歴としては、例えば、光学レンズの距離情報、画角情報（焦点距離情報）、光学レンズの光軸方向（上下方向、左右方向）、奥行き方向、露出情報（画面の明るさ情報）等がある。

ガイド部１ｄは、図１では差異教示部１ｄｘに相当し、画像判定部１ｂと操作履歴部１ｃの出力を受け、ユーザが対象物を見失ったことを、画像が大きく変化したか否かによって判定し、画像が大きく変化した際には、対象物を再度、見出すことができるようにガイドを行うための情報を生成し、表示部８に出力する。

ガイド部１ｄは、撮像部で過去に取得した画像と、操作履歴部に記録された操作履歴に従って、過去の画像と現在の差異に関するガイドを決定するガイド部として機能する。このガイド部は、画像を見失った際の支配的な操作項目に基づいてガイドを決定する。また、ガイド部は、過去の画像と現在の差異に関するガイドとして、過去の画像、操作を表す記号（例えば、図１５の矢印３３０）、およびテキスト（例えば、図４の２０９、図１５の３３０ｂ）の少なくとも１つを記録した画像ファイルを作成する。

また、ガイド部１ｄは、指示部によってガイド表示が指示された際に、対象物を見失うより前に上記画像データ記憶部に記憶された補助画像を表示させるガイド表示部として機能する。ガイド表示部は、現在の画像と上記補助画像の両者を並べて表示する（例えば、図４の時刻Ｔ３、図１５（ａ）、図１６、図１８参照）。

記憶部１ｅは、電気的に書き換え可能な不揮発性メモリや揮発性メモリを含み、上述したＣＰＵによる制御を実行させるためのプログラムや、撮像部２から出力された画像データを一時記憶させたり、またプログラムの実行のためのデータの一時記憶を行ったりする。この記憶部１ｅは、撮像部に対する操作履歴を記録する操作履歴部として機能する。また、操作履歴部は、撮像部の画角を変化させる操作情報、撮像部の左右上下の方向変化させる操作情報、撮像部の明るさを変化させる情報、撮像部のピントを変化させる情報の少なくとも１つを有する（後述する図５のＳ１５参照）。また、記憶部１ｅは、画像データを補助画像として記憶する画像データ記憶部としての機能を果たす。

制御部１は、上述の機能以外にも、撮像装置１０としての機能を種々実行する。例えば、撮像部２から入力した画像データに対して画像処理を施し、ライブビュー表示を行い、またレリーズ操作された際には、画像データに対して記録用の画像処理を施し、記録部４に画像データの記録を行わせる。

記録部４は、本体部１２に固定または装脱可能な電気的書き換え可能な不揮発性メモリを有し、撮像部２からの画像データの記録を行う。

表示部８は、液晶モニタや有機ＥＬモニタ等を有し、撮像部２からの画像データに基づいてライブビュー表示や、記録部４に記録された画像データに基づいて再生表示等を行う。また、表示部８のモニタの前面にはタッチパネル８ｂが設けられており、ユーザのタッチ操作等の操作状態を検出し、制御部１に出力する。時計部９は、日時情報を制御部１に出力する。

本体部１２は、前述の各部以外に、通信部６、姿勢センサ７ｃ、方位センサ７ｄ等を必要に応じて設けている。通信部６は、有線または無線により外部機器と通信を行う。また通信部６を介して、外部のサーバー等と通信し、またインターネット等に接続するようにしてもよい。

姿勢センサ７ｃは、カメラ部１１内の姿勢センサ７ｂと同様に、角加速度センサ、加速度センサ、ジャイロ等の本体部１２の姿勢状態を検出可能なセンサを有し、このセンサによる検知出力を制御部１に出力する。方位センサ７ｄは、電子コンパス等を含み、本体部１２が東西南北の何れの方位を向いているかを検出し、制御部１に出力する。撮像時にユーザが行う撮像部の操作やフレーミング等としては、上下のあおりや左右のパンニング等がある。方位センサ７ｄによって、本体部１２がいずれの方位を向いているかを検出することによって、本体部１２の動きについて単純な左右といった以上の情報を取得し、制御部１に出力することが可能となる。

次に、図３および図４を用いて、本実施形態における動作の概略を説明する。図３は、ユーザ１００が、撮像装置１０を構えて、支柱２０１に止まっている対象物２００を撮影している様子を示す。

撮影にあたって、ユーザは、撮像部２の光学レンズの焦点距離を広角側にしているので、図４の時刻Ｔ１に示すように、対象物２００を表示部８内で確認することができる。この状態から、ユーザが対象物２００の画像を大きく映そうと思ってズーミング操作を行い、望遠側に焦点距離を変更すると、図４の時刻Ｔ２の画像に示すように、対象物２００を見失ってしまう。

このように、画像が大きく変化すると、画像判定部１ｂがこの変化を検出し、図４の時刻Ｔ３に示すように、ガイド部１ｄが表示部８にガイド表示を行う。図４に示す例では、時刻Ｔ２に表示部８に表示された範囲を、枠２０３で示し、時刻Ｔ２に表示されていた画像を右上の余白部に現在画像２０５として示す。また、過去の補助画像の枠２０３と、現在画像２０５の位置変化を矢印２０７で示す。これにより、見失った際の撮像部の移動経路が分かる。なお、矢印２０７は画像の中心から中心に向けて表示する等、撮像部の移動経路が分かる表示であれば、図４（ｃ）の表示に限られない。

また、対象物２００を見失った操作を、表示部８の余白部に、ガイド表示２０９として示す。この例では、「ズーム５倍、上方に手振れ」とテキストでガイド表示されている。この表示により、ユーザは、光学レンズのズーミングを行い、また手振れによって光学レンズが上方を向いてしまった為に、対象物を見失ってしまったことが分かる。対象物を見失った理由が分かれば、ユーザは、再度、対象物を見出すことができる。

なお、図４に示したようなズーム操作時のガイド表示のための処理について、図６のＳ３３Ｙｅｓ〜Ｓ４３において詳述する。

次に、図５ないし図１０に示すフローチャートを用いて、本実施形態における動作について説明する。これのフローチャートは、制御部１内のＣＰＵが、記憶部１ｅに記憶されたプログラムに従って撮像装置１０内の各部を制御することによって実行する（後述する図１７、図１９に示すフローチャートも同様である）。

図５に示すメインフローがスタートすると、まず、撮影モードか否かを判定する（Ｓ１）。この撮像装置１０は、撮影モードがデフォルトモードとして設定されており、再生モード等、他のモードが設定されていない場合には、このステップでは撮影モードと判定される。ステップＳ１における判定の結果、撮影モードでない場合には、再生モード等、他のモードが設定されているか否かを判定し、設定されたモードに従って処理がなされる。

ステップＳ１における判定の結果、撮影モードの場合には、撮像を開始し、順次表示を行う（Ｓ３）。ここでは、撮像部２が撮像を開始し、画像データを制御部１に出力する。制御部１は画像データにライブビュー表示用の画像処理を施し、表示部８にライブビュー表示を行う。画像データは、所定のフレームレートで更新され、画像が順次表示される。

続いて、視認性の良い画像なら、補助画像として記録する（Ｓ５）。後述するように、本実施形態においては、ユーザが撮像装置１０によって見ている位置が分からなくなった場合、言い換えると対象物を見失った場合に、対象物を探し出すのをアシストするために、それまで見ていた画像を表示するようにしている。この表示のために、ステップＳ５において、画像の視認性が良ければ、その画像を記憶部１ｅに記憶する。これはもちろん、必要なければ、テンポラリーな別記録部に記録してもよい。最終的に撮影が行われる時などは、その撮影ファイル内に、経過画像、または参考画像を合せて記録してもよく、関連付け記録する等の工夫によって、撮影過程までを後で参照することができ、様々な状況でユーザを補助することができる。また、時計部９から出力される時刻情報等も併せて記録する。

また、ステップＳ５において視認性が良いか否かの判定は、対象物のコントラスト分布、ヒストグラム分布が機械的、人為的な「顔認識」などの画像認識に対して適正か、彩度、ピント、エッジ等が適切な位置にかるか等に基づいて判定する。顔などでは、特定のパーツ、例えば重要な目の部分が入っているかどうか、蝶々の羽の輪郭全部が入っているかどうか等、高度な認識を活用してもよい。最初に取得した画像の特徴を残しているかどうか等も参考になる。特徴情報を画像から取得する方法は広く知られており、その特徴を利用して画像を部分ごとに分類分けし、特徴が残っている部分が画面内にあるかに基づいて判定してもよい。

つぎに、類似画像が新たに記録されたか否かを判定する（Ｓ７）。ステップＳ５において、視認性が良い画像なら記録を行っているが、同じような画像を続けて記録すると、メモリ容量が直ぐに一杯になってしまう。そこで、類似する画像であれば、削除するために、ステップＳ５において、記録された補助画像が前の画像と類似しているか否かを判定している。

ステップＳ７における判定の結果、類似画像が新たに記録された場合には、記録されている補助画像を削除する（Ｓ９）。前述したように、画像が類似している場合には、その類似画像を削除し、メモリ容量の節約を行う。

ステップＳ９において補助画像を削除すると、またはステップＳ７における判定の結果、類似画像が新たに記録されていない場合には、操作がなされたか否かを判定する（Ｓ１１）。ここでは、操作部７ａの操作部材、例えば、ズーム操作部材、手動ピント合わせ部材（リング部材）、絞り操作部材、シャッタ速度操作部材等が操作されたか否かを判定する。さらに、光学系部の姿勢センサ７ｂ、本体操作部の姿勢センサ７ｃ、方位センサ７ｄによって、所定量以上の動きがあったか否についても判定する。

また、ステップＳ１１においては、オートフォーカス（ＡＦ）によって、ピントが所定量以上に変化したか否かについても判定する。この所定量は、撮影時の視野や画角情報に応じ、例えば、画角に合わせて角度に換算して決めるといった方法が有効である。姿勢センサ７ｂ、７ｃはジャイロや加速度センサで構成すれば、角加速度や加速度から時間積分によって角度に換算可能であるし、方位も一周が３６０°であることからコンパスの向きで換算可能である。

ステップＳ１１における判定の結果、操作がなされた場合等には、次に、パラメータ操作処理を行う（Ｓ１３）。ステップＳ１１において、ユーザが操作部７によって操作した場合には、この操作に応じたパラメータ操作処理を行う。例えば、ズーム操作部材が操作された場合には、操作方向や操作量に応じて画角を変化させる。

パラメータ操作処理を行うと、次に、操作記録を行う（Ｓ１５）。ここでは、操作された操作部材の種類と操作量、カメラが動いた場合の動き量（動き方向含む）、およびピントの変化量（変化方向含む）等の情報と、これらの操作等がなされた時刻情報を記憶部１ｅに記録する。なお、動き量は、姿勢センサ７ｂ、７ｃ、方向センサ７ｄ等からの信号に基づいて検知する。これは、前述した角度の情報を時間変化で記録するようにしてもよい。また、操作部材以外にも、絞り値やＩＳＯ感度等の露出制御値、画像データの輝度信号成分等も併せて記憶部１ｅに記憶しておく。これの記憶された情報は、後述するＳ３１の操作履歴判定や、Ｓ３３の判定に使用され、また図９のＳ８１、Ｓ８５、Ｓ９１、Ｓ１０１、Ｓ１０９における判定の際にも使用される。

なお、ステップＳ１５における記録結果は、時系列で記録し、結果は仮記録でもよく、最終的に画像から参照できるように画像ファイルと対応付けした記録してもよい。これは、ＧＰＳ搭載のカメラのような技術を例にすれば分かりやすいが、撮影位置を座標に換算して表し、対象物位置も座標で表せば判定が可能である。絶対座標ではなく、距離や姿勢や画面内の位置などから、相対的な座標を算出すれば良い。これは対象物が動くものであれば撮像位置を原点とし、対象物が動かないものであれば、対象物を原点としても良い。対象物の動きは、画像を判定しても分かるし、動きそのものを周辺の背景との差異で判定しても良い。

図４に示す例では、トンボが止まっている構造物を原点としてもよい。この場合、見下ろす形で撮影していて、この見下ろし角度は３軸加速度センサで重力方向を判定すればよく、距離データでそこからの離れ方が分かり、左右は方位センサから分かる。これを基点に、その後の動きを加速度や角加速度、方位センサのデータ変化として記録してもよい。まず、対象物と撮像部の位置関係を把握して原点（基準の相対位置関係）とし、それを記録して基準として、そこからの変化をモニタした結果を時系列で記録すれば、操作情報が記録される。画面中央にあった画像がどこに動いたかを、撮像時の画角から換算して判定しても良い。また、撮影、観察の起点、基準の位置関係時における方位や重力加速度から基準姿勢も判定できる。撮影や観測の起点（タイミング）は、対象物に対して安定して狙っていた時間が特定時間以上かによって決めれば良い。ユーザは一般に観察対象を見つけ、撮像機器でも撮像状態を特定時間観察して確認、認識して納得してから次の動作に移行する。

ステップＳ１５において操作記録を行うと、またはステップＳ１１における判定の結果、操作がないと判定された場合には、次に、ガイドが必要か否かの判定を行う（Ｓ１７）。ユーザは、表示部８でライブビュー画像を観察中に、対象物を見失うと、操作部７ａのヘルプ釦や表示部８に表示されたヘルプアイコン等、ガイド表示を行うための操作を行う。

このステップＳ１７では、上述の操作がなされたか否かを判定する。また、ユーザの手動操作以外にも、撮像装置１０において、自動的にガイドが必要か否かを判定するようにしてもよい。ステップＳ１７における判定の詳細な動作については、図７を用いて後述する。上述のヘルプ釦やヘルプアイコン等は、対象物を見出すためのガイド表示を指示するための指示部としての機能を果たす。この指示部は、ガイド表示を手動操作で指示された際、または画像データに基づいて、ガイド表示が指示されたか否かを判定する。ガイド表示が必要と判定されると、後述するステップＳ３１以下において、過去に取得した画像と、記録された操作履歴に従って、過去の画像と現在の差異に関するガイドを決定し、またガイド表示が指示された際に、対象物を見失うより前に記憶された補助画像を表示部に表示させる。また、指示部は、ガイド表示を手動操作で指示された際、または画像データに基づいて判定する。

ステップＳ１７における判定の結果、ガイドが必要ない場合には、撮影か否かを判定する（Ｓ１９）。ユーザは、構図がよく、またシャッタタイミングがよいと判断した場合には、操作部７ａ内のレリーズ釦を操作する。このステップでは、レリーズ釦が操作されたか否かに基づいて判定する。

ステップＳ１９における判定の結果、撮影の場合には、撮影と記録を行う（Ｓ２１）。ここでは、撮像部２は、所定の撮影パラメータで撮影を行い、露光時間後に画像データを制御部１に出力する。制御部１は、入力した画像データに対して記録用の画像処理を施し、記録部４に画像データの記録を行う。

ステップＳ１７に戻り、このステップＳ１７における判定の結果、ガイドが必要な場合には、最新の記録された補助画像から操作履歴の判定を行う（Ｓ３１）。ガイドが必要と判定されると、ステップＳ３１以下において、制御部１のガイド部１ｄがガイド表示のための制御を実行する。なお、操作履歴に基づいてガイド表示を決定するが、操作履歴に記録されている操作は、種々の操作が組み合わさっていることから、対象物を見失うにあたって支配的な操作項目に基づいてガイド表示を行う。

まずステップＳ３１において、すでに記録しておいた操作過程の情報を参照し、例えば角度変化などに換算した値の大小を比較し、見失いに支配的な操作を判定する。もちろん、角度変化に限らず、被写体と撮像部の相対位置関係の変化の大きさに換算して判定してもよい。これを併用すればさらに精度が高まる。これは、ＧＰＳ搭載のカメラのような技術を例にすれば分かりやすいが、撮影位置を座標に換算して表し、対象物位置も座標で表せば判定が可能である。絶対座標ではなく、距離や姿勢や画面内の位置などから、相対的な座標を算出すれば良い。これは対象物が動くものであれば撮像を原点とし、対象物が動かないものであれば、対象物を原点としても良い。対象物の動きは、画像を判定しても分かるし、動きそのものを周辺の背景との差異で判定しても良い。

図４に示した例では、トンボが止まっている構造物を原点としてもよい。この場合、見下ろす形で撮影していて、この見下ろし角度は３軸加速度センサで重力方向を判定すればよく、距離データでそこからの離れ方が分かり、左右は方位センサから分かる。これを基点に、その後の動きを加速度や角加速度、方位センサのデータ変化として記録してもよい。まず、対象物と撮像部の位置関係を把握して原点（基準の相対位置関係）とし、それを記録して基準として、そこからの変化をモニタした結果を時系列で記録していけば、操作の情報となるので、この経過の大きさ変化を見れば良い。あらかじめ決められた、あるいは画角など撮影条件から決められた所定の値以上、変化した場合のみをピックアップしてもよい。画面中央にあった画像がどこに動いたかを、撮像時の画角から換算して判定しても良い。また、撮影、観察の起点（タイミング）、基準の位置関係時における方位や重力加速度から基準姿勢も判定できる。

このように、ステップＳ３１においては、ステップＳ５において記録された一連の補助画像やステップＳ１５で記録された操作部材等の操作履歴を読み出し、対象物を見失った原因を判定する。例えば、対象物を見失う前に、画像の画角が変化していた場合や、拡大表示された場合には、ズーム操作や拡大によって対象物を見失ったと推定することができる。なお、ステップＳ１７においてガイド必要と判定された際の画像は、対象物を見失った画像として判定を行う。

ステップＳ３１において操作履歴判定を行うと、次に、ズーム操作や近接で拡大表示を行ったか否かの判定を行う（Ｓ３３）。ここでは、ステップＳ３１における操作履歴判定に基づいて、ガイドが必要になった原因として、ズーム操作または近接による拡大か否かを判定する。

ステップＳ３３における判定の結果、ズーム操作や近接で拡大であった場合には、図４を用いて説明したようなガイド表示を行う。まず、焦点距離や距離の比で拡大率Ｅ判定を行う（Ｓ３５）。ここでは、ズーム操作が行われた場合のズーム比に基づいて、また対象物に近寄った際の距離の比に基づいて、拡大率Ｅを算出する。

続いて、撮像中心位置の変化を判定する（Ｓ３７）。ここでは、姿勢センサ７ｂ、７ｃ、方位センサ７ｄからの検知信号に基づいて、撮像中心位置がどの方向にどれくらい変化したかを判定する。これはすでに述べたように、基準の相対位置関係、または基準姿勢を基点にして、加速度や角加速度の時間変化などから算出できる。もちろん、方位や重力方向の変化は、そのまま使うことが出来る。画面中央にあった画像がどこに動いたかを、撮像時の画角から換算して判定しても良い。

次に、記録された補助画像の表示を行う（Ｓ３９）。ここでは、ユーザが対象物を見失うまでの間に、ステップＳ５において記録された補助画像を、制御部１内の記憶部１ｅから読み出し、一覧できるように並べて表示する。なお、補助画像の表示方法としては、時系列的に順次表示するようにしてもよい。

補助画像の表示を行うと並行して、現状画像を１／Ｅ倍で表示する（Ｓ４１）。ステップＳ３５において拡大率Ｅを算出しているので、このステップでは、撮像部２からの現在の画像データに基づく画像を１／Ｅ倍して表示する。現在の画像は、拡大されていることから、これを縮小して表示する方が視認し易く、また過去に記録された補助画像と並行して表示されることから、対象物を見失うまでの過程を理解しやすくなる。

現状画像の表示を行うと、次に、撮像中心が記録補助画像のどこに移動したかを表示する（Ｓ４３）。ステップＳ３４において撮像中心位置の変化を判定しているので、このステップでは、撮像中心位置の変化が分かるように表示する。例えば、図４（ｃ）を用いて説明したように、矢印２０７によって移動経路を示す。

ステップＳ３３における判定の結果、ズーム操作や近接で拡大でなかった場合には、記録された補助画像と現状画像を並べて表示する（Ｓ５１）。ここでは、ユーザが対象物を見失うまでの過去の一連の補助画像を制御部１内の記憶部１ｅから読み出し、また撮像部２からの画像データに基づいて現在の画像を生成し、これらの画像を表示部８に並べて表示する（後述する図１５（ａ）参照）。両者を比較してみることにより、ユーザが対象物を見失うまでの過程を理解することができる。

次に、対象物を見失った原因が移動に起因しているか否かを判定する（Ｓ５３）。ユーザが撮像装置１０を上下または左右に振ったことにより、また撮像装置１０を移動させたこと等により対象物を見失う場合がある。このステップでは、記録された補助画像や、姿勢センサ７ｂ、７ｃ、方位センサ７ｄ等から検知信号に基づいて、撮像部の移動に起因しているか否かを判定する。

ステップＳ５３における判定の結果、撮像部の移動に起因している場合には、撮像部の移動経路を表示する（Ｓ５５）。ここでは、ステップＳ５において、記録された補助画像を読み出し、この読み出された補助画像を並べて表示する。この補助画像を見ることにより、ユーザは、どのような撮像装置１０の動きによって対象物を見失ってしまったかを理解することができる。なお、この移動経路の表示の詳しい動作については、図８を用いて後述する。

ステップ５５において移動経路を表示すると、またはステップＳ５３における判定の結果、撮像部の移動が起因でない場合には、見失い解消に相応しい撮像制御をガイド表示する（Ｓ５７）。ここでは、ユーザが見失った対象物を再度探して観察できるように、見失った原因に応じたガイド表示を行う。この撮像制御のガイド表示の詳しい動作については、図９および図１０を用いて後述する。

ステップＳ４３において移動表示を行うと、またはステップＳ５７において撮像制御のガイド表示を行うと、前述のステップＳ１９において撮影か否かを判定し、撮影の場合には、ステップＳ２１において撮影および記録を行う。

ステップＳ２１において撮影および記録を行うと、またはステップＳ１９における判定の結果、撮影でなかった場合には、ステップＳ１に戻り、前述の動作を行う。

このように、本実施形態においては、撮像動作中に、画像を補助画像として記録しておき（Ｓ５）、ユーザが対象物を見失ってしまった為にガイドが必要な場合には（Ｓ１７）、見失った原因に応じて（Ｓ３３）、ガイド表示を行っている（Ｓ４３、Ｓ５７）。また、ガイド表示にあたっては、現状画像と補助画像の表示を行うことにより（Ｓ３９、Ｓ４１、Ｓ５１）、見失うまでの経緯を直感的に分かるようにしている。また、撮像中心位置の変化を分かり易く表示するようにしている（Ｓ４３）。

次に、図７を用いて、ステップＳ１７（図５参照）のガイド必要の詳しい動作について説明する。ガイド必要のフローに入ると、まず、ユーザヘルプ操作が有るか否かの判定を行う（Ｓ６１）。ユーザは、表示部８でライブビュー画像を観察中に、対象物を見失うと、操作部７ａのヘルプ釦や表示部８に表示されたヘルプアイコン等、ガイド表示を行うための手動操作を行う。このステップでは、この操作がなされたか否かを判定する。

ステップＳ６１における判定の結果、ユーザのヘルプ操作がなかった場合には、次に、補助画像との一致度大となり、見失いが解消したか否かを判定する（Ｓ６３）。ユーザが対象物を見失ってしまっても、再度、対象物を見出す場合がある。このステップでは、見失う前に記録された補助画像と現在の画像の一致度が大となったか否かに基づいて、この判定を行う。

ステップＳ６３における判定の結果、見失いが解消していない場合には、次に、補助画像との一致度が増加し、見失いが解消する方向にあるか否かを判定する（Ｓ６５）。見失いが解消されていないとしても、補助画像と現在の画像の一致度が、時間と共に増加している場合には、ユーザの操作または撮像装置１０の処理により、見失いが解消する方向にある。このステップでは、一致度の時間的変化に基づいて、見失いが解消しているか否かを判定する。

ステップＳ６５における判定の結果、見失いが解消の方向にある場合には、改善フラグを設定する（Ｓ６７）。この改善フラグは、後述する図１０のＳ１１３における判定の際に使用される。見失いが解消方向にある場合には、ガイド表示において、その旨が分かるようにしている。

ステップＳ６７において改善フラグを設定すると、またはステップＳ６５における判定の結果、見失いが解消する方向にない場合には、画面中央部がローコントラストか否かを判定する（Ｓ６９）。一般に画面の中央部には対象物があり、この対象物はピントがあっている場合が普通である。従って、画面中央部がローコントラストの場合には、対象物を見失っている可能性が高い。

ステップＳ６９における判定の結果、画面中央部がローコントラストであった場合、またはステップＳ６１における判定の結果、ユーザヘルプ操作がなされている場合には、ガイド表示が必要と判定される（Ｓ７３）。

一方、ステップＳ６９における判定の結果、画面中央部がローコントラストでない場合、またはステップＳ６３における判定の結果、見失いが解消した場合には、ガイド表示が必要ないと判定される（Ｓ７１）。

ステップＳ７１、Ｓ７３において、それぞれ判定結果が決まると、元のフローに戻る。このように、ガイド必要のフローにおいては、ユーザの手動操作によってガイド表示をおこなわせる（Ｓ６１参照）以外に、補助画像と現在の画像を比較することにより、ガイド表示が必要か否かを判定している。

このように、本実施形態においては、ユーザが対象物を探し出すためのガイドが必要と判断して操作部材を手動操作する場合に限らず、補助画像と現在の画像の変化度や、画面中央部のコントラスト状態に応じて自動的にガイド表示に切り替えられるようにしている。なお、ガイド表示への切り替えは、手動操作のみでもよく、また自動切替のみでもよい。

次に、図８を用いて、ステップＳ５５（図６参照）の移動経路表示の詳しい動作について説明する。移動経路表示のフローに入ると、まず、Ｔ０１〜Ｔ０までの時間を３分割し、それぞれＴ０１、Ｔ０２、Ｔ０３とする（Ｓ７５）。ここで、Ｔ０１は、ステップＳ５において補助画像を記録した中で、一番古い時刻に対応する。また、時刻Ｔ０は、ユーザが対象物を見失った時刻に対応する。

次に、Ｔ０１、Ｔ０２、Ｔ０３近傍で得られた画像を並べて表示する（Ｓ７７）。ステップＳ５において、補助画像を記録する際に、併せて時間情報も記録している。このステップでは、ステップＳ６１において算出された時刻Ｔ０１、Ｔ０２、Ｔ０３に近い時間情報が記録されている補助画像を読み出し、読み出された補助画像を表示部８に並べて表示する。補助画像の表示を行うと、移動経路表示のフローを終了し、元のフローに戻る。

なお、図８では３分割の例で説明したが、画面の大きさやレイアウト時の煩雑ささえ工夫できれば、４分割でも５分割でもよい。ただし、あまり情報が少ないと、手がかりがなくなる方向で、ガイドが困難となる。特に経過時間が長くなれば、途中での操作が多数になる可能性があり、ガイドは増やした方が良い。対象物を見失い、動転し何回も挽回動作をしてしまった場合などは、挽回動作をすべて記録表示してもよく、また慌て行った挽回動作の結果と見失い時の差異を要約して、３つの操作に整理してもよい。

例えば、カメラ１０を上下に動かして見つからず、右に動かして見つからない場合は、上下に動かした事はすでに試して重要ではなく、右も試し済みであるから、このような対象物を見つけられなかった動作は省略するなどして、手間を省くようなガイドが好ましい。ここでは、まだ試していない左に動かすガイドを優先するのが良い。つまり、ガイド部１ｄは、画像を見失った際の支配的な操作項目に基づいてガイドを決定するが、この「支配的な操作項目」は、「すでに試して見失い解消できなかった項目」を排除した動作などが含まれる方が好ましい。逆に、すでに試して成功しなかった項目は、それはそれで無駄な繰り返しを防止するために有効な情報にもなり得る。もちろん、ガイド部１ｄが指示する、画像を見失った際の支配的な操作項目は、主には、見失い直後の動作であることが多い。そこから、ユーザは見失い焦って他の事をしてしまう可能性があるが、これに関しては見失い直後の状態にするまでの操作をまず示唆し、それから見失い直後の動作を示唆するという方法が有効である。

このように、本実施形態においては、撮像装置１０を上下左右等に動かす等によって、ユーザが対象物を見失った場合には、対象物を把握していた状態から見失うまでの間に記録された補助画像を表示するようにしているので、直感的に移動経路を理解することができる。なお、本実施形態においては、Ｔ０１〜Ｔ０までの時間を３分割していたが、分割数にこれに限られない。表示部の大きさと、ユーザの見易さ等を考慮して分割数を決めればよい。また分割数はユーザが適宜、操作部７ａ等において設定できるようにしてもよい。

次に、図９および図１０を用いて、ステップＳ５７（図６参照）の撮像制御のガイド表示の詳しい動作について説明する。撮像制御のガイド表示のフローに入ると、まず、左右変化か否かを判定する（Ｓ８１）。撮像部２の光学系の光軸が左右に振れると画像が左右に動くので、ステップＳ１５において記録された姿勢センサ７ｂまたは姿勢センサ７ｃからの検知信号の時間的変化に基づいて、撮像装置１０が左右に動いたか否かを判定する。なお、姿勢センサ以外にも、記録された補助画像の画像データと撮像部２からの画像データに基づいて、左右に動いたか否かを判定するようにしてもよい。

ステップＳ８１における判定の結果、左右変化があった場合には、記録された補助画像との左右変化があれば、変化量ΔＸとする（Ｓ８３）。ここでは、記録されている補助画像と、現在の画像を比較し、左右変化量ΔＸを算出する。姿勢センサ７ｂ、７ｃが加速度センサであれば、この加速度センサの出力を時間積分してもよい。

ステップＳ８３において変化量ΔＸを求めると、またはステップＳ８１における判定の結果、左右変化がない場合には、次に、上下変化か否かを判定する（Ｓ８５）。撮像部２の光学系の光軸が上下に振れても画像が動くので、ステップＳ１５において記録された姿勢センサ７ｂまたは姿勢センサ７ｃからの検知信号の時間的変化に基づいて、撮像装置１０が上下に動いたか否かを判定する。なお、姿勢センサ以外にも、記録された補助画像の画像データと撮像部２からの画像データに基づいて、上下に動いたか否かを判定するようにしてもよい。

ステップＳ８５における判定の結果、上下変化があった場合には、記録された補助画像との上下変化があれば、変化量ΔＹとする（Ｓ８７）。ここでは、記録されている補助画像と、現在の画像を比較し、上下変化量ΔＹを算出する。

ステップＳ８５において変化量ΔＹを求めると、またはステップＳ８５における判定の結果、上下変化がない場合には、次に、−ΔＸと−ΔＹによるベクトルを矢印で表示する（Ｓ８９）。ここでは、ステップＳ８３やＳ８７で求められた変化量ΔＸ、ΔＹに基づいて、撮像装置１０が動いた方向と反対方向に向けて同じ大きさで（すなわち、−ΔＸ、−ΔＹ）に矢印を表示部８に表示する。実際には、対象物を見失う場合には、上下と左右の複合的な動きとなる。図１５（ｂ）に示すような矢印を表示することにより、ユーザは、撮像装置１０の光軸方向をいずれの方向に向けて動かせば対象物を再度捉えることができる。

ステップＳ８９においてベクトル表示を行うと、次に、奥行きが変化したか否かを判定する（Ｓ９１）。壁等に沿って移動していくと奥行きが変化し、対象物を見失う場合がある。ここでは、記録補助画像の奥行きと、現在の画像の奥行きを比較することによって判定する。ここで奥行きは、対象物までの距離で、最も近いものなどを候補としてもよい。これが近すぎると、小さな対象物を画角から外してしまうことが多く、見逃しが発生する。距離はピントを合わせの距離等を参考してもよく、距離センサを設けても良い。

ステップＳ９１における判定の結果、奥行きに変化が有った場合には、記録された補助画像との奥行き変化があれば、変化した方向を打ち消すような移動指示を出す（Ｓ９３）。ここでは、画像を見失う際の直前の動きの方向と反対の方向に移動を指示するような指示、例えば、矢印を表示部８に表示する。例えば、下に動かして見失った場合は、画面に上方向の矢印表示を出しても良く、「上に向けて下さい」と表示しても良い。こうした表示情報は記憶部１ｅなどにテーブルを具備しておき、方向などに応じて参照できるようにしてもよい。

ステップＳ９３において移動指示を出すと、またはステップＳ９１における判定の結果、奥行き変化がない場合には、明るさ変化があるか否かを判定する（Ｓ１０１）。被写界が急に明るく（又は暗く）なった場合や、絞り値等の露出制御値が大きく変化した場合には、画像データの輝度信号が大きく変化し、このため対象物を見失うことがある。例えば、急に絞りが開いたり、急に照明がついたりすると、画面が真っ白になり、対象物を見失ってしまう。また逆に、急に絞りが最小絞り値に変化したり、急に照明が消されたりすると、画面が真っ黒になり、対象物を見失ってしまう。

このステップＳ１０１では、ステップＳ１５で記録された画像データの輝度信号成分の変化量に基づいて判定する。この場合の変化量としては、対象物を見失うほどの変化であることか否かを判定できればよく、明る過ぎる場合と、暗すぎる場合で、それぞれ異なる変化量としてもよい。なお、変化量に限らず、見失った際の輝度信号成分を所定値と比較することによって判定してもよい。この場合には、明る過ぎる場合と暗すぎる場合を、それぞれ判定するようにする。

ステップＳ１０１における判定の結果、明るさが変化した場合には、次に、明る過ぎか否かを判定する（Ｓ１０３）。ここでは、ステップＳ１０１において、明る過ぎて明るさ変化があったと判定されたかどうかを判定する。

ステップＳ１０３における判定の結果、明る過ぎた場合には、暗くなるように指示する（Ｓ１０５）。ここでは、画面が真っ白の状態から対象物を判別できる程度に暗くなるように、絞り値やＩＳＯ感度等の調整を行うような指示を表示部８に表示する。なお、撮像装置１０の撮影制御部１ａが自動調整を行うようにしてもよい。

ステップＳ１０３における判定が明る過ぎでなかった場合には、明るくなるように指示する（Ｓ１０７）。対象物を見失ったのが、暗すぎた場合には、対象物を判別できる程度に明るくなるように、絞り値やＩＳＯ感度等を調整するように指示を表示部８に表示する。なお、撮像装置１０の撮影制御部１ａが自動調整を行うようにしてもよい。

ステップＳ１０５において暗く指示すると、またはステップＳ１０７において明るく指示すると、またはステップＳ１０１における判定の結果、明るさ変化がなかった場合には、次に、ピント変化があった否かを判定する（Ｓ１０９）。ここでは、ステップＳ１５において記録されたピント情報、距離情報や、現在のピント情報等に基づいて、ピント合わせをしてずれた場合は、その位置や、距離が大きく変化したか否かに基づいて判定する。

ステップＳ１０９における判定の結果、ピント変化があった場合には、ピント操作指示を行う（Ｓ１１１）。ここでは、表示部８にピントが外れ、ピント操作を行う必要があることを表示する。なお、撮像装置１０内の自動焦点調節装置（ＡＦ）が、オートフォーカスでピント合わせを行うようにしてもよい。特に、マニュアルフォーカス操作時などでは、ピントがずれたかどうかが分かっても、対象物距離に対し、遠近どちらにピントがずれたか分からないので、ここでは再ピント合わせや再度の距離判定で遠近のどちらにピント合わせすべきかをガイド指示する。特定のダイヤルの場合などでは動かす方向を具体的に表示する方が分かりやすい。ただ、距離が近すぎる、という指示でも、ユーザは遠ざかるような動作で解決できる可能性があるので、それをガイドしても良く、並記してもよい。ピント合わせ限界距離付近であればその方が便利である。

ステップＳ１１１においてピント操作指示を行うと、またはステップＳ１０９における判定の結果、ピント変化でなかった場合には、次に、改善フラグが設定されているか否かを判定する（Ｓ１１３）。前述したステップＳ６７（図７参照）において、見失いの程度が解消する方向に向かっている場合には、改善フラグが設定されている。本実施形態においては、ユーザの操作等によって、見失いの程度が解消される方向に向かっている場合には、ステップＳ１１５において、現在、行っている操作の方向で良いことが分かるようなガイド表示を行うようにしている。

ステップＳ１１３における判定の結果、改善フラグが設定されていた場合には、表示を半透明とする（Ｓ１１５）。ここでは、例えば、図４に示したようなガイド表示２０９を半透明で表示する。半透明で表示することにより、ユーザが行っている操作を続ければ、対象物を表示部８の画面内に捉えることができることが分かる。なお、ガイド表示に限らず、補助画像等の画像を半透明としてもよく、ガイド表示と補助画像の両方を半透明とてもよい。また、見失いの程度の解消程度を検出し、この解消程度に応じて、半透明度を変化するようにしてもよい。また、半透明表示以外の表示、例えば、ハイライト等の強調表示であってもよい。

ステップＳ１１５において表示を半透明とすると、またはステップＳ１１３における判定の結果、改善フラグが設定されていない場合には、撮像制御のガイド表示のフローを終了し、元のフローに戻る。

このように、本実施形態においては、対象物を見失った原因を判定し（Ｓ８１、Ｓ８５、Ｓ９１、Ｓ１０１、Ｓ１０９）、原因に応じたガイド表示を行うようにしている（Ｓ８９、Ｓ９３、Ｓ１０５、Ｓ１０７、Ｓ１１１）。このため、ユーザは、見失った対象物を画面内に再び捉えるようにすることができる。

次に、図１１ないし図１５を用いて、本実施形態における動作の具体的な一例について説明する。図１１および図１２は、ステップＳ１５において記録される操作履歴の一例である。図１１および図１２において、横軸は時間を示し、時刻Ｔ０はステップＳ１７においてガイドが必要と判定されるタイミングである。

グラフ３００ａの縦軸は距離であり、対象物までの距離の時間的変化を示す。なお、縦軸は、撮像部２のレンズのピント位置としてもよい。グラフ３００ａに示す例では、距離がＬに対して時間と共に変動しており、ユーザは距離について少し迷っていることが分かる。

グラフ３００ｂの縦軸に左右方向の位置であり、左右方向の位置の時間的変化を示す。グラフ３００ｂに示す例では、左右方向の位置が時間と共に変動しており、撮像装置１０は左右に微動していることが分かる。

グラフ３００ｃの縦軸は上下方向の位置であり、上下方向の位置の時間的変化を示す。グラフ３００ｃの示す例では、上下方向の位置が時間と共に変動しており、撮像装置１０は上下に微動していることが分かり、時刻Ｔ１０１では少し上にずれている。

グラフ３００ｄの縦軸は奥行き方向の距離を示しており、画面の奥行き方向（つまり対象物までの距離）の時間的変化を示す。奥行き方向の距離は、通常は、対象物までの距離と一致するが、壁面に進む場合等では、距離一定でも奥行き方向の距離は変化する。グラフ３００ｄに示す例では、奥行き方向の距離が時間と共に変動していることが分かる。

グラフ３００ｅの縦軸は露出量を示しており、露出量の時間的変化を示す。ここで、露出量は、撮像素子面上に入射する光量に等しく、露出量が大きい場合には明るく、小さい場合には暗くなっていることを示す。絞り値等の露出制御値が変化すると、露出量も変化する。グラフ３００ｅに示す例では、背景が少し暗くなっていくことが分かる。

グラフ３００ｆの縦軸は画角を示しており、画角の時間的変化を示す。ユーザがズーミング操作を行うことにより、画角が変化する。グラフ３００ｆに示す例では、画角が次第に小さくなっている（長焦点側に変化）ことが分かる。

このように、ユーザが撮像装置１０を使用している際に、種々の操作量（距離、左右上下の位置、奥行き方向の距離、露出量、画角）が変化しており、これらの操作量を履歴として記録している（図５のＳ１５）。なお、本実施形態においては、操作履歴としては、ユーザが手動した操作に限らず、保持している際の撮像装置の位置、撮像装置によって自動的に制御される量等の履歴を意味し、広い意味で使用している。

次に、図１３を用いて、補助画像の記録について説明する。前述したように、撮像を開始し、視認性の良い画像は補助画像として記録され（図５のＳ５参照）、類似の画像が記録されている場合には、記録された補助画像を削除している（図５のＳ７Ｎｏ→Ｓ９）。

図１３は、この補助画像の記録の一例を示す。図１３に示すグラフにおける曲線Ｒは、画角や上下左右の位置等の操作量の時間的変化を示す。時刻Ｔ１１に補助画像Ｐ１１が記録されるが、時刻Ｔ１１からＴ１２の直前までは、類似の画像であることから、時刻Ｔ１２の直前に記録された補助画像Ｐ１１ｘが記憶部１ｅに記録され、補助画像Ｐ１１は削除される。

補助画像Ｐ１１ｘを記録した後、時刻Ｔ１２からＴ１３の直前までは類似の画像であり、補助画像Ｐ１２は記録されるものの最終的には削除され、補助画像Ｐ１２ｘのみが補助画像として残る。また時刻Ｔ１３からＴ１４の直前までは類似の画像であり、同様に補助画像Ｐ１３ｘのみが残る。この結果、時刻Ｔ１２、Ｔ１３、Ｔ１４の直前の補助画像Ｐ１１ｘ、Ｐ１２ｘ、Ｐ１３ｘが記憶部１ｅに記録される。

時刻Ｔ１４の付近で、操作量が大きく変化し、画面内から対象物が外れてしまい、ユーザは対象物を見失ってしまう。時刻Ｔ０における現在画像Ｐpreでは対象物を確認することができず、ユーザはガイド表示を必要として、ヘルプ釦の操作やヘルプアイコンのクリック等、ガイド表示を行うための操作を行う。ガイド表示が行われると、ユーザはガイド表示に従って操作・行動をとることにより、対象物を再び捉えることができる。

次に、図１４および図１５を用いて、表示部８に表示される画像の変化と、ガイド表示について説明する。図１４は、対象物を見失ってしまうまでの画像の変化の例を示す。図４では、ズーミングを行うことにより画角が変化し対象物を見失った例を示したが、図１４では、撮像装置１０を左右上下の方向に移動したことにより、対象物を見失った例を示す。

時刻Ｔ１３において対象物２００は表示部８の画面内にある。この状態から時刻Ｔ１４には、ユーザは撮像装置１０のレンズの光軸をやや右上に移動させ、さらに画角を小さくしている（長焦点側へ変更）。時刻Ｔ１４では、図１４の中段の画像が示すように、対象物が画面内に入っているが、さらに撮像装置１０を動かし、時刻Ｔ０になると、表示部８の画面内には、対象物２００が見えなくなってしまう（図１４の下段の画像参照）。

時刻Ｔ０になり、対象物が見えなくなると、ユーザはヘルプ釦の操作やヘルプアイコンをクリックする等によって、ガイド表示を行わせる。図１５を用いて、ガイド表示について説明する。

ガイド表示が必要と判断されると（図５のＳ１７Ｙｅｓ）、操作履歴の判定がなされる（図６のＳ３１）。図１４に示した例では、撮像装置１０が動いたことが支配的であることから、図６のＳ５１〜Ｓ５７に従って、ガイド表示がなされる。まず、図１４（ａ）に示すような補助画像３１０ａ〜３１０ｃが並べて表示される（図６の５１参照）。即ち、現在画像３２０の脇に、時刻Ｔ１３、Ｔ１４、Ｔ０（図１４参照）において記録された補助画像３１０ａ〜３１０ｃが並べて表示される。なお、図１５（ａ）では右側に並べて表示されているが、下側に並べてもよく、画面内の他の位置に並べて表示するようにしてもよい。

次に、見失ったことを解消するための表示を行う。例えば、図１５（ｂ）に示すように、動かす方向を示す矢印３３０ａを表示し、またメッセージ３３０ｂ（この例では、「近づいた時にずれました」）を表示する。このとき、補助画像３１０ａ〜３１０ｃは、表示したままでもよいが、矢印３３０の意味を誤解しないように、解消動作が始まった時点で消去してもよい。

このように、本実施形態においては、撮像部に対する操作履歴を記憶しておき（図５のＳ１５）、対象物を見失った場合には（図５のＳ１７Ｙｅｓ）、操作履歴に基づいて（図６のＳ３１、Ｓ３３、Ｓ５３）、対象物を再び捉えることができるように、ガイド表示を行っている（図６のＳ３５〜Ｓ４３、Ｓ５５、Ｓ５７）。このため、広い画角を有する撮像部がなくても、撮影対象物または観察対象物を見失った際に対象物を見出すことができる。

次に、図１６および図１７を用いて、本実施形態における第１変形例について説明する。本発明の一実施形態においては、図１５に示すように、補助画像３１０ａ〜３１０ｃをただ並べるだけであった。これに対して、第１変形例では、補助画像を選択すると、その補助画像を記録した際の操作履歴をテキストで表示するようにしている。ここの補助画像毎に操作状態が表示されることから、ユーザは対象物を再度表示させるための動作・処理を容易にできる。

図１６は、本変形例において、ガイド表示が必要と判定された場合の表示部８における表示を示す。表示部８の画面には、現在画像３２０が大きく表示され、補助画像３１０ａ〜３１０ｃが現在画像３２０の下側に表示される。ヘルプ表示アイコン３４０は、ユーザのタッチ操作により補助画像３１０ａ〜３１０ｃの上側で移動可能であり、これらの補助画像のいずれかを選択することができる。なお、タッチパネル操作以外にも、操作部７ａの十字釦等の操作により移動させるようにしてもよい。

ヘルプ表示アイコン３４０によって、補助画像３１０ａ〜３１０ｃのいずれかを選択すると、選択された補助画像の記録時の操作状態が履歴表示エリア３５０にテキストで表示される。この表示される操作状態としては、ステップＳ１５において記録された情報に基づき、例えば、ガイド表示が必要と判断されまでの時間、ズーミング操作、ピント合わせ操作、絞り等の露出制御値、フレーミング等の動き情報等、種々の情報がある。

図１６に示す例では、補助画像３１０ｃがヘルプ表示アイコン３４０によって選択されており、この状態では、履歴表示エリア３５０には、１０秒前に記録されたこと、また１０秒前からガイド表示必要の判断までの間に、ズーム操作がなされ、フレーミング操作がなされたことが簡潔に表示されている。

補助画像３１０ａ、３１０ｂは対象物を捉えているが、補助画像３１０ｃは対象物を見失っていることから、ユーザは補助画像３１０ｃを選択することによって、対象物を見失ってから現在に至るまでの操作状態を、履歴表示エリア３５０での表示によって確認することができる。

次に、図１７を用いて、本変形例におけるメイン動作について説明する。本変形例のメイン動作は、一実施形態における図５および図６のメイン動作のフローチャートを図１７のフローチャートに置き換える以外は同じであり、また詳しくは図６の部分を、図１７のステップＳ２３〜Ｓ２７に置き換えているだけである。そこで、この相違点を中心に説明する。

本変形例のメイン動作のフローがスタートし、ステップＳ１７においてガイドが必要か否かの判定において、ガイドが必要と判定されると、補助画像を新しい順に遡って表示する（Ｓ２３）。ガイドが必要であることから、ガイド部１ｄが、ステップＳ２３以下において、ガイド表示の制御を行う。ここでは、図１６に示したように、補助画像３１０ｃ、３１０ｂ、３１０ａを表示部８に示す。補助画像は、ステップＳ５において記憶部１ｅに記憶されているので、こられを読み出し、新しい順に遡って表示する。

次に、補助画像が選択されたか否かを判定する（Ｓ２５）。ここでは、ヘルプ表示アイコン３４０等によって、いずれかの補助画像が選択されたか否かを判定する。この判定の結果、選択されていない場合には、ステップＳ１９に進む。

一方、ステップＳ２５における判定の結果、補助画像が選択された場合には、選択画像までの経過時間、操作、フレーミング等を表示する（Ｓ２７）。ここでは、選択された補助画像について、履歴表示エリア３５０に操作状態等の履歴表示を行う。操作状態等の履歴表示は、ステップＳ１５における操作記録に基づいて行う。この表示を行うと、ステップＳ１９に進む。

このように、本変形例においては、ユーザが表示部８において対象物を見失って、ガイド表示を必要と判断する（又は自動的に判断される）と、現在画像に加えて補助画像の表示を行い、ユーザが補助画像を選択すると、その補助画像を記録した後の操作状態の履歴を表示するようにしている。すなわち、ガイド表示部に表示された補助画像のいずれかを選択すると、選択された補助画像が記録された時点からの操作履歴を表示している。このため、対象物を見失ってからの操作状態の経過を容易に確認することができ、再び、対象物を捉えることが簡単にできる。

なお、本変形例においては、履歴表示エリア３５０には、テキストで表示していたが、テキスト表示に限らず、記号や絵文字等、他の視覚的表示方法でもよく、また音声表示であってもよい。また、補助画像は３画像を表示していたが、２画像でもよく、また４画像以上でもよく、さらにその配置位置も現在画像の下側に限られない。また、補助画像はヘルプ選択アイコンによって選択していたが、これに限らず、例えば、直接タッチ操作や十字釦等によって選択する等、他の選択方法によってもよい。

次に、図１８および図１９を用いて、本実施形態における第２変形例について説明する。本発明の一実施形態や第１変形例においては、ユーザは補助画像や操作履歴によって、過去から現在までの経過を理解することができる。第２変形例においては、更に、類似した履歴がある場合に、この類似状態で再び対象物を捉えるまでの操作をユーザの参考となるように表示する。

図１８は、本変形例において、ガイド表示が必要と判定された場合の表示部８における表示を示す。表示部８の画面には、現在画像３２０が大きく表示され、補助画像３１０ａ〜３１０ｃが現在画像３２０の下側に表示される。

ヘルプ表示アイコン３４１は、現在画像３２０の横側に配置され、ユーザがタッチすると、過去の類似状況を検索して、過去の挽回策を表示させるためのアイコンである。補助画像３６０ａ〜３６０ｅは、ヘルプ表示アイコン３４１がタッチ操作され際に検索された過去の類似状況において記録された補助画像である。挽回策表示エリア３７０は、ヘルプ表示アイコン３４１がタッチ操作された際に検索された挽回策、すなわち再び対象物を捉えるまでの操作・動作・処理等をテキストで表示するエリアである。

図１８に示す例では、現在画像３２０と今回の補助画像３１０ａ〜３１０ｃが表示された状態で、ユーザがヘルプ表示アイコン３４１をタッチ操作すると、制御部１が過去の類似の状況を検索し、類似状況が見つかると、その時の補助画像３６０ａ〜３６０ｅに表示し、更に、そのときの挽回策を挽回策表示エリア３７０に、前回の挽回策はズームを広角側に操作し、左下側にフレーミングしたことを簡潔に表示している。補助画像３６０ｃ、３６０ｄは、対象物を見失った状態であるが、補助画像３６０ｅは再び対象物を捉えている。ユーザは、前回の挽回策に従った動作することにより、容易に対象物を捉えることができ、大変便利である。

次に、図１９を用いて、本変形例におけるメイン動作について説明する。本変形例のメイン動作は、一実施形態における図５および図６のメイン動作のフローチャートを図１９のフローチャートに置き換える以外は同じであり、また詳しくは図６の部分を、図１９のステップＳ２３〜Ｓ２９に置き換えているだけである。そこで、この相違点を中心に説明する。

本変形例のメイン動作のフローがスタートし、ステップＳ１７においてガイドが必要か否かの判定において、ガイドが必要と判定されると、補助画像を新しい順に遡って表示する（Ｓ２３）。ガイドが必要であることから、ガイド部１ｄが、ステップＳ２３以下において、ガイド表示の制御を行う。ここでは、図１８に示したように、補助画像３１０ｃ、３１０ｂ、３１０ａを示す。補助画像は、ステップＳ５において記憶部１ｅに記憶されているので、これを読み出し、新しい順に遡って表示する。

次に、類似状況の検索を行うか否かを判定する（Ｓ２６）。前述したように、ユーザは対象物を見失い、挽回策を知りたい場合には、ヘルプ表示アイコン３４１をタッチ操作する。そこで、このステップではヘルプ表示アイコン３４１がユーザによってタッチされたか否かを判定する。この判定の結果、類似状況検索でない場合には、ステップＳ１９に進む。

一方、ステップＳ２６における判定の結果、類似状況検索であった場合には、次に、見失いから挽回した時の操作を表示する（Ｓ２８）。ここでは、ステップＳ５において記録された補助画像（Ｓ９で削除された画像を除く）や、ステップＳ１５において記録されている操作記録の中から、今回と類似の状況を検索し、類似の状況が見つかった場合に、そのときの補助画像を表示する（図１８の補助画像３６０ａ〜３６０ｅ参照）。なお、この類似状況検索のために、ステップＳ５で記録された補助画像（Ｓ９で削除された画像を除く）や、ステップＳ１５において記録された操作記録は、撮影・記録が終了しても、削除せず、記録したままにしておく。この記録は、ドキュメントやレポートとして役立つ場合がある。

また、ステップＳ２８においては、検索された今回と類似の状況で、対象物を再度捉えるまでの操作を、操作記録の履歴に基づいてテキストに生成し、挽回策表示エリア３７０に表示する。なお、既に挽回策が記憶されている場合には、記憶された挽回策を読み出し表示する。

ステップＳ２８において、挽回策の表示を行うと、挽回時の履歴を記憶する（Ｓ２９）。ここでは、ステップＳ２８において生成した挽回策のテキストデータを記憶部１ｅに記憶する。記憶すると、ステップＳ１９に進む。この挽回記録は、ドキュメントやレポートでは役立ち、画像の変化や機器の制御を時系列に解析して、対応するテキストを参照して、補助的な表示を行ってもよい。これは、「５分後に見逃しました」とか、「それから２分して上を見て発見」といった簡単なレポート文章にすることも可能である。

このように、本変形例においては、ユーザが表示部８において対象物を見失って、ガイド表示を必要と判断する（又は自動的に判断される）と、現在画像に加えて補助画像の表示を行う。そして、ヘルプ表示アイコン３４１が操作されると、過去の来歴を示す補助画像３６０ａ〜３６０ｅが表示され、また過去の挽回策がエリア３７０に表示される。すなわち、指示部によってガイド表示が指示されると、過去の類似状況を検索し、検索結果に基づいてガイド表示を行っている。このため、対象物を見失ってからの再び対象物を捉えるまでの挽回策が分かり、簡単に、対象物を捉えなおすことができる。

なお、本変形例においては、挽回策表示エリア３７０には、テキストで表示していたが、テキスト表示に限らず、記号や絵文字等、他の視覚的表示方法でもよく、また音声表示であってもよい。また、補助画像は３画像、過去来歴の補助画像は５画像を表示していたが、これらの画像の数は異なる数でもよく、さらにその配置位置も現在画像の下側に限られない。また、ヘルプ表示アイコン３４１によってヘルプ操作を行っていたが、他の選択方法によってもよい。

次に、図２０を用いて、本発明を工業用内視鏡に適用した例について説明する。図２０（ａ）は、工業用内視鏡４００を機械５００の内部に挿入した際の機械５００の内部の斜視図である。本発明を工業用内視鏡４００に適用するにあたっては、図２に示した撮像装置１のカメラ部１１の内、撮像部２および姿勢センサ７ｂは、工業用内視鏡４００の先端側に配置し、工業用内視鏡４００の手元側に残りの各部を配置する。その他、工業用内視鏡に特有な部材、例えば、先端部の湾曲用の操作部材等を適宜配置する。

図２０（ｂ）は、機械５００の内部に工業用内視鏡４００を挿入した際の表示部８における表示を示す。時刻Ｔ２１は、図２０（ａ）に示した状態であり、機械５００の内部の壁面５０１から離れている。この状態では、ユーザは機械５００の内部の壁面５０１や棚部５０３が見えており、全体形状を把握することが可能である。

図２０（ｂ）において、時刻Ｔ２２となると、ユーザは工業用内視鏡４００を壁面５０１側に挿入し、壁面に近づきすぎてしまい、機械５００の内部の全体形状の把握が困難である。制御部１は、画像データより、全体形状の把握が困難であると判定すると（図５のＳ１７において、自動的にガイド必要と判定された状態）、図２０（ｂ）に示すように、「全体形状が把握できません」と警告表示を行う。

全体形状の把握が困難であると判定され、時刻Ｔ２３になると、ガイド必要と判定される前に記憶された補助画像３１０ｄがサブ画像として表示される。全体形状が分かる補助画像３１０ｄがサブ画像として表示されると、ユーザは、現在の位置を推測しやすくなり、どちらに回転すれば、元の位置に戻れるかが分かる。時刻Ｔ２４は、工業用内視鏡４００を回転した場合の表示画像を示す。

このように、本発明は、工業用内視鏡や医療用内視鏡に適用することができる。内視鏡のように、機械内部や体内に挿入し、ユーザが直接、装置を見ながら操作ができずない場合には対象物を見失いやすい。この場合に、前述の実施形態や変形例のように、対象物を見失う前の補助画像や操作履歴を参照することができれば、容易に対象物を見出すことが可能となる。

以上説明したように、本発明の一実施形態や変形例においては、対象物を撮像し、画像データを出力し（例えば、図５のＳ３）、撮像にあたっての操作履歴を記録し（例えば、図５のＳ５）、過去に取得した画像と、記録された操作履歴に従って、過去の画像と現在の差異に関するガイドを決定している（図５のＳ１７Ｙｅｓ以下）。このため、撮影対象物または観察対象物を見失った際に、この対象物を見出すために、広い画角を有する撮像部を必要としない。すなわち、操作履歴に従って、過去から現在までの差異に関する情報に従ってガイドされるので、容易に見失う前の観察対象を探し出すことができる。

また、本発明の一実施形態や変形例においては、対象物を撮像し画像データを出力し（例えば、図５のＳ３）、画像データを補助画像として記憶し（例えば、図５のＳ５）、対象物を見出すためのガイド表示を指示し（例えば、図５のＳ１７Ｙｅｓ）、ガイド表示が指示された際に、対象物を見失うより前に記憶された補助画像を表示部に表示させる（例えば、図６、図４の時刻Ｔ３、図１５、１６の補助画像３１０ａ〜３１０ｃ等）。このため、撮影対象物または観察対象物を見失った際に、この対象物を見出すために、広い画角を有する撮像部を必要としない。すなわち、過去から現在までの差異に関する補助画像が表示されるので、容易に見失う前の観察対象を探し出すことができる。

なお、本発明の一実施形態や変形例においては、ガイド表示の例として図４、図１５、図１６、図１８に種々示したが、これらは適宜組み合わせてもよい。特に、補助画像の数やその配置、またガイドのための矢印等の記号や、テキストによるガイド表示等も適宜組み合わせたり変更したりしてもよい。

また、本発明の一実施形態においては、撮影制御部１ａ、画像判定部１ｂ、ガイド部１ｄを、制御部１内の各部として記載したが、各部の全部または一部をソフトウエアで構成し、制御部１内のＣＰＵによって実行するようにしてもよく、逆にハードウエアで構成するようにしてもよい。また、通信部６は、本体部１２に外部のサーバー等と通信を可能とし、ガイド部１ｄ等の制御部１の機能の一部を、外部サーバーで実行し、この外部サーバーからガイド表示を受信して表示するようにしてもよい。

また、本発明の一実施形態や変形例においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話、スマートフォン、携帯情報端末（ＰＤＡ：Personal Digital Assist）、パーソナルコンピュータ（ＰＣ）、タブレット型コンピュータ、ゲーム機器等に内蔵されるカメラでも構わない。

また、本発明は、撮像装置に限らず、種々の装置、例えば、顕微鏡や内視鏡等にも適用可能であり、顕微鏡の試料移動、取り替え比較時の見失いや、手術用内視鏡を挿抜する時の見失いなどにも利用可能である。いずれにしても、連続的に対象物を観察や記録する機器であれば、本発明を適用することができる。

また、本明細書において説明した技術のうち、主にフローチャートで説明した制御に関しては、プログラムで設定可能であることが多く、記録媒体や記録部に収められる場合もある。この記録媒体、記録部への記録の仕方は、製品出荷時に記録してもよく、配布された記録媒体を利用してもよく、インターネットを介してダウンロードしたものでもよい。

また、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず」、「次に」等の順番を表現する言葉を用いて説明したとしても、特に説明していない箇所では、この順で実施することが必須であることを意味するものではない。

本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

１・・・制御部、１ａ・・・撮影制御部、１ｂ・・・画像判定部、１ｃ・・・操作履歴部、１ｄ・・・ガイド部、１ｄｘ・・・差異教示部、１ｅ・・・記憶部、２・・・撮像部、４・・・記録部、６・・・通信部、７ａ・・・操作部、７ｂ・・・姿勢センサ、７ｃ・・・姿勢センサ、７ｄ・・・方位センサ、８・・・表示部、８ａ・・・タッチパネル、９・・・時計部、１０・・・撮像装置、１１・・・カメラ部、１２・・・本体部、１００・・・ユーザ、２００・・・対象物、２０１・・・支柱、２０３・・・枠、２０５・・・現在画像、２０７・・・矢印、２０９・・・ガイド表示、３１０ａ〜３１０ｄ・・・補助画像、３２０・・・現在画像、３３０ａ・・・矢印、３３０ｂ・・・メッセージ、３４０・・・ヘルプ表示アイコン、３４１・・・ヘルプ表示アイコン、３５０・・・履歴表示エリア、３６０ａ〜３６０ｅ・・・補助画像、３７０・・・挽回策表示エリア、４００・・・工業用内視鏡、５００・・・機械、５０１・・・壁面、５０３・・・棚部

Claims (12)

1. 対象物を撮像し、画像データを出力する撮像部と、
   上記撮像部に対する操作履歴を記録する操作履歴部と、
   上記操作履歴部に記録された操作履歴に従って、過去の画像と現在の差異に関するガイドを決定するガイド部と、
   を有することを特徴とする撮像操作ガイド装置。
2. 上記ガイド部は、画像を見失った際の支配的な操作項目に基づいて上記ガイドを決定することを特徴とする請求項１に記載の撮像操作ガイド装置。
3. 上記ガイド部は、現在の画像撮影時に、過去の画像と現在の差異に関するガイドとして、上記過去の画像、操作を表す記号およびテキストの少なくとも１つを記録した画像ファイルを作成することを特徴とする請求項１に記載の撮像操作ガイド装置。
4. 上記対象物を見出すためのガイド表示を指示するための指示部を有し、
   上記指示部は、上記ガイド表示を手動操作で指示された際、または上記画像データに基づいて判定することを特徴とする請求項１に記載の撮像操作ガイド装置。
5. 上記操作履歴部は、上記撮像部の画角を変化させる操作情報、上記撮像部の左右上下の方向変化させる操作情報、上記撮像部の明るさを変化させる情報、上記撮像部のピントを変化させる情報の少なくとも１つを有することを特徴とする請求項１に記載の撮像装置操作ガイド装置。
6. 対象物を撮像し、画像データを出力し、
   上記撮像にあたっての操作履歴を記録し、
   過去に取得した画像と、記録された上記操作履歴に従って、過去の画像と現在の差異に関するガイドを決定する、
   を有することを特徴とする撮像装置の操作ガイド方法。
7. 対象物を撮像し画像データを出力する撮像部と、
   上記画像データを補助画像として記憶する画像データ記憶部と、
   上記対象物を見出すためのガイド表示を指示するための指示部と、
   上記指示部によってガイド表示が指示された際に、対象物を見失うより前に上記画像データ記憶部に記憶された補助画像を表示させるガイド表示部と、
   を有することを特徴とする撮像操作ガイド装置。
8. 上記対象物を見出すためのガイド表示を指示するための指示部を有し、
   上記指示部は、上記ガイド表示を手動操作で指示された際、または上記画像データに基づいて判定することを特徴とする請求項７に記載の撮像操作ガイド装置。
9. 上記ガイド表示部は、現在の画像と上記補助画像の両者を並べて表示することを特徴とする請求項７に記載の撮像操作ガイド装置。
10. 上記撮像部に対する操作履歴を記録する操作履歴部を有し、
    上記ガイド表示部に表示された上記補助画像のいずれかを選択すると、選択された補助画像が記録された時点からの操作履歴を表示することを特徴とする請求項７に記載の撮像操作ガイド装置。
11. 上記撮像部に対する操作履歴を記録する操作履歴部を有し、
    上記指示部によってガイド表示が指示されると、過去の類似状況を検索し、検索結果に基づいてガイド表示を行うことを特徴とする請求項７に記載の撮像操作ガイド装置。
12. 対象物を撮像し画像データを出力し、
    上記画像データを補助画像として記憶し、
    上記対象物を見出すためのガイド表示を指示し、
    上記ガイド表示が指示された際に、対象物を見失うより前に記憶された補助画像を表示部に表示させる、
    ことを特徴とする撮像装置の操作ガイド方法。
    

Images