JP5219929B2 - 情報処理装置および方法、並びにプログラム - Google Patents

Description

本発明は、情報処理装置および方法、並びにプログラムに関し、特に、撮影画像または記録画像に関連する付加情報の確認操作が簡便にできるようになった、情報処理装置および方法、並びにプログラムに関する。

デジタルカメラ（例えば特許文献１参照）で撮影された撮影画像や、そのデジタルカメラに記録された記録画像には、それらに関連する情報（以下、付加情報と称する）が対応づけられる場合がある。従来、ユーザは、このような付加情報を確認する場合、例えば次のような操作をしていた。即ち、従来のデジタルカメラには、DISPLAY釦のような専用ハードキーや、メニューなどが設けられている。ユーザは、これらの釦等を操作して、デジタルカメラが有する複数の機能の設定画面を液晶パネル等に表示させ、所望の付加情報が得られる機能を選択する操作を行う。その結果、液晶パネル等に表示された付加情報を、ユーザは視認していた。

特開2007-019685号公報

しかしながら、上述したような操作はユーザにとって負担となる場合があり、より簡便に付加情報を確認したいという要望があった。さらに、近年GPS（Global Positioning System）をはじめとするアクセサリや、インターネットとの連携などにより、付加情報が増加する傾向にある。このため、かかる要望に応えることが重要となっている状況である。即ち、撮影画像や記録画像の付加情報を表示させる操作（以下、付加情報表示操作と称する）を簡便にすることが要望されているが、その要望に十分に応えられていない状況である。

本発明は、このような状況に鑑みてなされたものであり、付加情報表示操作を簡便にできるようにするものである。

本発明の一側面の情報処理装置は、画像を表示する表示部と、前記表示部に対するユーザの操作を受付ける操作入力受付部と、所定の操作が前記操作入力受付部により受付けられた場合に、前記表示部の表示状態を前記画像が表示されている第１の表示状態と、前記画像に関連する付加情報を１以上含む付加情報画像が表示されている第２の表示状態とのうち一方から他方の状態へ遷移させる表示制御を行う表示制御部とを備え、前記表示制御部は、前記表示制御として、前記第１の表示状態で、前記ユーザが指を前記操作入力受付部に接触させたまま所定距離だけ動かす操作をなぞり操作として、前記なぞり操作を検出した場合に、前記表示部の表示状態を前記なぞり操作の方向に応じて遷移させるとともに、前記表示部の表示状態を遷移させるときに、前記なぞり操作における前記指の軌跡に従って前記画像の縮小率を変更させながら前記表示部に縮小された前記画像を表示させる制御を行う。

前記表示制御部は、前記表示制御として、前記第１の表示状態で、前記操作入力受付部が前記ユーザの前記指を接触させる操作を検出した場合、さらに、前記付加情報を呼び出すための画像として付加情報呼び出し口を前記接触位置に対応した箇所に表示させ、前記付加情報呼び出し口を起点とする前記なぞり操作を検出した場合に、前記表示部の表示状態を遷移させる制御を行う。

前記表示制御部は、前記表示制御として、前記第１の表示状態で、前記操作入力受付部が所定領域に対してユーザが指を接触させる操作が一定時間以上継続していることを検出した場合、前記表示部の表示状態を遷移させる制御を行う。

前記情報処理装置の面のうち、第１の面に前記表示部および前記操作入力部が配置され、前記第１の面と対向する第２の面に配置されるタッチパネルを含むタッチパネル部をさらに備え、前記表示制御部は、前記表示制御として、前記タッチパネル部の所定領域に対してユーザが指を接触させる操作を検出した場合、前記表示部の表示状態を遷移させる制御を行う。

前記情報処理装置の傾きを検出する検出部をさらに備え、前記表示制御部は、前記表示制御として、前記検出部の検出結果に基づいて、前記ユーザが前記情報処理装置を３６０度回転させる操作を検出した場合、前記表示部の表示状態を遷移させる制御を行う。

前記情報処理装置の傾きを検出する検出部をさらに備え、前記表示制御部は、前記表示制御として、前記検出部の検出結果に基づいて、前記ユーザが前記情報処理装置を１８０度または９０度回転させる第１の操作と、前記第１の操作後に前記情報処理装置を逆方向に１８０度または９０度回転させる第２の操作とを検出した場合、前記表示部の表示状態を遷移させる制御を行う。

前記表示制御部は、前記表示部の表示状態が第１の表示状態である場合、前記所定の操作を検出する前に予め、前記付加情報画像に含める前記付加情報を取得する。

本発明の一側面の情報処理装置においては、画像が表示され、ユーザの操作が受付けられ、所定の操作が受付けられた場合に、前記画像が表示されている第１の表示状態と、前記画像に関連する付加情報を１以上含む付加情報画像が表示されている第２の表示状態とのうち一方から他方の状態へ遷移させる表示制御が行われる。そして、前記表示制御として、前記第１の表示状態で、前記ユーザが指を接触させたまま所定距離だけ動かす操作をなぞり操作として、前記なぞり操作を検出した場合に、表示状態を前記なぞり操作の方向に応じて遷移させるとともに、前記表示部の表示状態を遷移させるときに、前記なぞり操作における前記指の軌跡に従って前記画像の縮小率を変更させながら前記表示部に縮小された前記画像を表示させる制御が行われる。

本発明の一側面の情報処理方法およびプログラムは、上述した本発明の一側面の情報処理装置に対応する方法およびプログラムである。

本発明の一側面の情報処理方法およびプログラムにおいては、表示部と操作入力受付部とを備える情報処理装置によって次のような処理が実行される。即ち、前記表示部の表示状態として、画像が前記表示部に表示されている第１の表示状態と、前記画像に関連する付加情報を１以上含む付加情報画像が前記表示部に表示されている第２の表示状態とが存在する。このような場合、前記第１の表示状態で、ユーザが指を前記操作入力受付部に接触させたまま所定距離だけ動かす操作をなぞり操作として、前記なぞり操作が検出されたとき、前記表示部の表示状態が前記なぞり操作の方向に応じて、前記第１の表示状態から前記第２の表示状態へ遷移するとともに、前記表示部の表示状態が遷移するときに、前記なぞり操作における前記指の軌跡に従って前記画像の縮小率を変更させながら前記表示部に縮小された前記画像が表示される。

以上のごとく、本発明によれば、付加情報表示操作が簡便にできるようになる。

本発明が適用される情報処理装置の一実施形態としての撮像装置の構成例を示すブロック図である。 図１の撮像装置の外観の構成例を示す斜視図である。 撮像装置の付加情報表示操作手法の第１の実施例について説明する図である。 第１付加情報表示処理の一例を説明するフローチャートである。 撮像装置の付加情報表示操作手法の第２の実施例について説明する図である。 第２付加情報表示処理の一例を説明するフローチャートである。 撮像装置の付加情報表示操作手法の第３の実施例について説明する図である。 第３付加情報表示処理の一例を説明するフローチャートである。 撮像装置の付加情報表示操作手法の第４の実施例について説明する図である。 第４付加情報表示処理の一例を説明するフローチャートである。 撮像装置の付加情報表示操作手法の第５の実施例について説明する図である。 第５付加情報表示処理の一例を説明するフローチャートである。 基本機能を設定する操作手法の一例を説明する図である。 本発明が適用される情報処理装置の構成例であって、図１とは異なる構成例を示すブロック図である。

以下、図面を参照して、本発明の実施の形態について説明する。

図１は、本発明が適用された情報処理装置の一実施形態としての撮像装置の構成例を示
すブロック図である。

図１の例では、撮像装置は、レンズ部１１乃至タッチパネル２８を含むように構成され
ている。

レンズ部１１は、撮影レンズ、絞り、フォーカスレンズ等から構成される。レンズ部１１を介して入射する被写体光の光路上には、CCD(Charge Coupled Device)等の撮像素子１２が配置されている。

撮像素子１２、アナログ信号処理部１３、A/D(Analog/Digital)変換部１４、およびデジタル信号処理部１５がその順番で接続されている。

デジタル信号処理部１５にはまた、液晶パネル１７、記録デバイス１９およびタッチパネル２８が接続されている。

レンズ部１１には、レンズ部１１を構成する絞りの調整や、フォーカスレンズの移動を行うためのアクチュエータ２０が接続されている。アクチュエータ２０には、モータドライバ２１も接続されている。モータドライバ２１は、アクチュエータ２０の駆動制御を行う。

CPU(Central Processing Unit)２３は、撮像装置全体を制御する。このため、CPU２３には、アナログ信号処理部１３、A/D変換部１４、デジタル信号処理部１５、モータドライブ２１、TG(Timing Generator)２２、操作部２４、EEPROM(Electrically Erasable Programmable ROM)２５、プログラムROM(Read Only Memory)２６、RAM(Random Access Memory)２７、タッチパネル１６、およびタッチパネル２８が接続されている。

タッチスクリーン１８は、タッチパネル１６と液晶パネル１７により構成されている。タッチパネル２８は、タッチスクリーン１８と対向する撮像装置の面、即ち、撮像レンズ側の面に配置されている（後述する図２参照）。

記録デバイス１９は、例えばDVD(Digital Versatile Disc)等の光ディスクやメモリカード等の半導体メモリその他のリムーバブルな記録媒体で構成されている。記録デバイス１９は、撮像装置本体に対して着脱自在となっている。

EEPROM２５は、設定された各種情報を記憶する。その他の情報、例えば、電源状態がオフにされたときにも保持すべき情報等がEEPROM２５に記憶される。

プログラムROM２６は、CPU２３が実行するプログラムおよびプログラムを実行する上で必要なデータを記憶する。

RAM２７は、CPU２３が各種処理を実行する際のワークエリアとして必要なプログラムやデータを一時記憶する。

以下、図１の構成の撮像装置全体の動作の概略について説明する。

CPU２３は、プログラムROM２６に記録されているプログラムを実行することにより、撮像装置を構成する各部を制御する。また、CPU２３は、タッチパネル１６またはタッチパネル２８からの信号や、操作部２４からの信号に応じて、所定の処理を実行する。この処理の具体例については、図４、図６、図８、および図１２の各フローチャートを参照して後述する。

操作部２４は、ユーザによって操作され、その操作に対応する信号をCPU２３に提供する。

すなわち、タッチスクリーン１８またはタッチパネル２８は、任意の位置に指が触れる等して接触されると、つまりユーザにより所定の操作入力がなされると、接触された位置の座標を検出する。検出された座標を示す電気信号（以下、座標信号と称する）がCPU２３に送出される。CPU２３は、座標信号から接触位置の座標を認識し、座標に対応付けられた所定の情報を取得し、その情報に基づいて所定の処理を実行する。

なお、本明細書では、接触とは、静的な接触（所定の一領域のみの接触）だけではなく、動的な接触（指等の接触物体が所定の軌跡を描いて動く接触）も含む。例えば、画像上の紙をめくるような指のなぞりも、接触の一形態である。

アクチュエータ２０の駆動により、レンズ部１１は、撮像装置の筐体から露出または収納される。また、アクチュエータ２０の駆動により、レンズ部１１を構成する絞りの調整や、レンズ部１１を構成するフォーカスレンズの移動が行われる。

TG２２は、CPU２３の制御に基づいて、タイミング信号を撮像素子１２に提供する。タイミング信号により、撮像素子１２における露出時間等が制御される。

撮像素子１２は、TG２２から提供されるタイミング信号に基づいて動作することにより、レンズ部１１を介して入射する被写体光を受光して光電変換を行う。そして、受光量に応じたアナログの画像信号をアナログ信号処理部１３に提供する。このとき、モータドライバ２１は、CPU２３の制御に基づいてアクチュエータ２０を駆動する。

アナログ信号処理部１３は、CPU２３の制御に基づいて、撮像素子１２から提供されたアナログの画像信号に対して増幅等のアナログ信号処理を施す。その結果得られるアナログの画像信号は、アナログ信号処理部１３からA/D変換部１４に提供される。

A/D変換部１４は、CPU２３の制御に基づいて、アナログ信号処理部１３からのアナログの画像信号をA/D変換する。その結果得られるデジタルの画像信号は、A/D変換部１４からデジタル信号処理部１５に提供される。

デジタル信号処理部１５は、CPU２３の制御に基づいてA/D変換部１４から提供されたデジタルの画像信号に対して、ノイズ除去処理等のデジタル信号処理を施す。デジタル信号処理部１５は、そのデジタルの画像信号に対応する画像を、撮影画像として液晶パネル１７に表示させる。

また、デジタル信号処理部１５は、A/D変換部１４から提供されたデジタルの画像信号を、例えばJPEG(Joint Photographic Experts Group)等の所定の圧縮符号化方式に従って圧縮符号化する。デジタル信号処理部１５は、圧縮符号化されたデジタルの画像信号を、記録デバイス１９に記録させる。

デジタル信号処理部１５はまた、記録デバイス１９から圧縮符号化されたデジタルの画像信号を読み出し、所定の圧縮符号化方式に対応する伸張復号方式に従って伸張復号する。デジタル信号処理部１５は、そのデジタルの画像信号に対応する画像を、記録画像として液晶パネル１７表示させる。

その他、デジタル信号処理部１５は、CPU２３の制御に基づいて、AF（auto focus）の機能を発揮させるために用いる枠（以下、AF枠と称する）の画像を生成し、液晶パネル１７に表示させる。

即ち、撮像素子１２によって撮像された画像（撮影画像）は液晶パネル１７に表示される。この場合、液晶パネル１７に表示された画像上にAF枠が設定される。このAF枠の内部の画像に基づいてフォーカスが制御される。

このように、撮像装置はAF機能を有している。AF機能は、フォーカスの制御機能の他、液晶パネル１７に表示された画像上の任意の位置にAF枠を設定する機能を含む。さらに、AF機能は、液晶パネル１７とタッチパネル１６から構成されたタッチスクリーン１８に対する操作だけで、その位置やサイズ等の制御を行う機能を含む。

AF機能を実現させる処理は、CPU２３が、プログラムROM２６のプログラムを読み出して実行することで実現される。また、撮像装置は、その他にも、AE（Automatic Exposure）機能、AWB（Auto White Balance）機能を有している。これらの機能についても、CPU２３が、プログラムROM２６のプログラムを読み出して実行することで実現される。

さらにいえば、AF機能、AE機能、およびAWB機能は、撮像装置が有する機能の例示にしか過ぎない。即ち、撮像装置は、撮影に関する各種機能を有している。以下、各種機能のうち、撮影に関する基本的な機能を、基本機能と称し、撮影に関する応用的な機能を、応用機能と称する。基本機能としては、AF機能、AE機能、およびAWB機能の他、例えば、「撮影モード選択機能」や「撮影タイマの設定機能」等を採用することができる。応用機能としては、例えば、「画素数変更機能」や「色彩調整機能」等を採用することができる。

図２は、図１の例の撮像装置の外観の構成例を示す斜視図である。

なお、以下、撮像装置の面のうち、ユーザが被写体を撮影する場合に被写体と対向する面、即ち、レンズ部１１が配置される面を前面と称する。一方、撮像装置の面のうち、ユーザが被写体を撮影する場合にユーザと対向する面、即ち、前面の反対側の面を後面と称する。また、撮像装置の面のうち、ユーザが被写体を撮影する場合に、上側に配置される面を上面と、下側に配置される面を下面と、それぞれ称する。

図２のＡは、撮像装置の前面の外観の構成例を示す斜視図である。図２のＢは、撮像装置の後面の外観の構成例を示す斜視図である。

撮像装置の前面は、レンズカバー４７で覆うことができる。前面のレンズカバー４７が図中下方に開かれると、図２のＡの状態になる。図２のＡに示されるように、レンズカバー４７の覆いが除かれた前面の上部には、その右方から、レンズ部１１に含まれる撮影レンズ４５とAFイルミネータ４６がその順番で配置されている。また、レンズカバー４７が覆われている前面の下部のうち、撮像装置中央付近の、ユーザが被写体を撮影する場合に保持しない部分には、タッチパネル２８が配置されている。

AFイルミネータ４６は、セルフタイマランプを兼ねている。撮像装置の上面には、図２のＡの左方から、ズームレバー（TELE/WIDE）４１、シャッタボタン４２、再生ボタン４３およびパワーボタン４４がその順番で配置されている。ズームレバー４１、シャッタボタン４２、再生ボタン４３、およびパワーボタン４４は、図１の操作部２４に含まれる。

図２のＢに示されるように、撮像装置の後面の全体には、タッチスクリーン１８が配置されている。

このように、撮像装置の後面にタッチスクリーン１８が設けられているので、ユーザは、被写体を撮影する場合に、撮像装置の前面を被写体に向けたままの状態で、タッチスクリーン１８によるGUI（Graphical User Interface）の操作を行うことができる。

タッチスクリーン１８によるGUIの操作として、例えば本実施の形態では、付加情報表示操作を行うことができる。

図３を参照して、本実施の形態の付加情報表示操作うち、第１の実施例について説明する。

図３のＡは、タッチスクリーン１８に任意の撮影画像または記録画像が表示されている状態を示している。以下、撮影画像がタッチスクリーン１８に表示されることを、撮影画像の再生と表現する。なお、以下、撮影画像の再生に着目して説明していく。もっとも、記録画像についても、後述する付加情報表示操作と基本的に同様の操作を採用することができる。このことは、第１の実施例のみならず他の実施例にもあてはまる。

図３のＡの状態で、ユーザの指f1によって、タッチスクリーン１８に再生された撮影画像の右下の領域が接触されると、タッチスクリーン１８の表示状態は、図３のＢの状態に遷移する。即ち、図３のＢに示されるように、タッチスクリーン１８の表示状態は、その右下の領域の表示が、撮影画像の一領域５１がめくれたような表示状態になる。撮影画像の領域のうち、このめくれたように見える領域５１を、以下、付加情報呼び出し口５１と称する。

撮像措置は、付加情報呼び出し口５１を表示させることにより、ユーザに、例えば「めくれた部分をどうにかしたい」「カードの裏に何かあるのではないか」というような、ごく自然な感情を与えることができる。

なお、付加情報呼び出し口５１の表示形態は、図３のＢに示される表示形態、即ちめくれたような表示形態に特に限定されない。例えば「裏面を見る」というようなメッセージを含む画像を、付加情報呼び出し口５１として採用することもできる。

タッチスクリーン１８の表示状態が図３のＢの状態のまま、ユーザは、図３のＣに示されるように、指f1を付加情報呼び出し口５１に接触させる。ユーザは、指f1を、タッチスクリーン１８への接触を維持したまま、付加情報呼び出し口５１を起点として所定方向に所定距離だけ移動させる操作を行う。以下、かかる操作を、なぞり操作と称する。

図３のＣの状態でユーザが略水平方向のなぞり操作を行うと、タッチスクリーン１８の表示状態は、図３のＤの状態に遷移する。

即ち、CPU２３は、デジタル信号処理部１５を制御して、指f1の軌跡に従って撮影画像の縮小率を変更させていき、変更後の画像をタッチスクリーン１８に順次表示させていくことを繰り返す。これにより、図３のＤに示されるように、撮影画像が１枚のカードであり、このカードをユーザがあたかもめくっている最中であるかのような動画像が、タッチスクリーン１８に表示される。

また、アニメーション処理により、縮小率が変更されていくような画像、即ち、１枚のカード（撮影画像）をユーザがあたかもめくっているような様子を表現してもよい。

なお、このような、CPU２３の処理は、後述する他のGUI操作についても同様に実行されるとする。即ち、以下では、その説明は省略するが、動きのある画像がタッチスクリーン１８に表示される場合、動画像を生成する処理や、アニメーション処理が適宜なされているとする。

さらに、図３のＤの表示状態のまま、一定距離以上のなぞり操作が行われると、図３のＥに示されるように、タッチスクリーン１８の表示状態は、撮影画像の付加情報が表示された状態に遷移する。以下、撮影画像の付加情報が表示された画像を、付加情報画像と称する。上述のごとく、タッチスクリーンに表示される撮影画像を１枚のカード（写真）に見立てると、そのカードの裏側を模した画像が、付加情報画像である。即ち、実世界においても、ユーザは、カード（写真）の裏側に、そのカードに関連する付加情報を書いておくことが多い。このことを模した画像が、付加情報画像である。よって、実世界のカードの裏側に書かれる付加情報が、ユーザによってまちまちな情報、即ち任意の情報でよいのと同様に、付加情報画像に含まれる付加情報は特に限定されず、任意の情報でよい。

図３のＥの例の付加情報画像には、付加情報として、撮影日時６１、ファイルサイズ６２、画像解像度６３、および位置情報６４が含まれている。

位置情報６４は、撮影画像が撮影された位置を示す情報である。位置情報６４の表示形態は、特に限定されず、テキスト表示の形態でもよいが、図３に示されるように、地図表示の形態でもよい。

このような付加情報、即ち、撮影日時６１、ファイルサイズ６２、画像解像度６３、位置情報６４等は、撮影画像が撮像されたときの環境や記録の各種条件を示す情報であり、撮影画像のデータと対応付けられて記憶される情報である。よって、以下、これらの付加情報をまとめて、撮影条件情報と称する。

撮影条件情報は、撮影画像がカード（紙媒体の一面）に印刷された場合に、そのカードの裏側（紙媒体の裏面）にユーザが書き込める情報である。

換言すると、従来、撮影画像が紙媒体に印刷された後、その紙媒体の裏側に、これらの撮影条件情報が書き込まれていた。これに対して、本実施の形態では、紙媒体に印刷せずとも、撮影条件情報は、撮影画像と対応付けられた付加情報画像に含まれている。よって、ユーザは、撮像装置のタッチスクリーン１８の上をなぞり操作するだけで、あたかもカード（撮影画像）を裏返してその裏側を見るのと同様な感覚で、付加情報画像をタッチスクリーン１８に表示させて撮影条件情報を視認することができる。

ここで、付加情報画像がタッチスクリーン１８に表示されるということは、ユーザは、付加情報画像に対して操作することが可能であることを意味している。

そこで、例えば、位置情報６４に対して所定の操作がなされると、撮像装置が所定の機能を発揮するように、付加情報画像を生成することもできる。

例えば図３に示されるように、位置情報６４が地図として表示されている場合、地図内の所定の場所を指定する操作がなされたとき、その指定場所に関する情報を周辺情報として記憶させる、といった機能を撮像装置に発揮させることもできる。また、表示範囲の移動操作がおこなわれたとき、付加情報画像に表示される地図の範囲を変更する、といった機能を撮像装置に発揮させることもできる。

さらに例えば、付加情報画像には、各種操作を行うためのシンボル（アイコンやソフトウエアボタン等）も含めることが可能である。具体的には例えば、図３の例では、ごみ箱アイコン６５、プリンタアイコン６６、およびサーバアイコン６７が付加情報画像に含まれている。

ごみ箱アイコン６５は、撮影画像を削除する機能を撮影装置に発揮させるためのアイコンである。即ち、ユーザは、ごみ箱アイコン６５に対して指f1で所定の操作をすることで、付加情報画像に対応する撮影画像を削除することができる。

プリンタアイコン６６は、撮影画像を印刷する機能を撮影装置に発揮させるためのアイコンである。即ち、ユーザは、プリンタアイコン６６に対して指f1で所定の操作をすることで、付加情報画像に対応する撮影画像の印刷を実行することが可能となる。

サーバアイコン６４は、ネットワーク上のサーバに、撮影画像をアップロードできる機能を撮影装置に発揮させるためのアイコンである。即ち、ユーザはサーバアイコン６４に対して指f1で所定の操作をすることにより、付加情報画像に対応する撮影画像をネットワーク上のサーバにアップロードすることが可能となる。

なお、付加情報画像に表示されている情報は、撮影時に撮影画像に付随している情報でもよいし、ユーザが任意に入力した情報でもよい。

以上の図３のＡ乃至Ｅを用いた操作例、即ち本実施の形態の付加情報表示操作うちの第１の実施例の操作を行うことで、ユーザは、あたかも写真（本実施の形態における撮影画像としてのカードの表面）をめくり、その裏面にあるメモ（本実施の形態における付加情報としてのカードの裏面）を視認したのと同等の感情を抱くことができるようになる。

なお、なぞり操作の起点は、図３の例では上述の如く、タッチスクリーン１８の右下の領域内とされた。もっとも、なぞり操作の起点は、図３の例に限定されない。例えば、タッチスクリーン１８の四隅のうち１つの領域を、なぞり操作の起点の領域として採用することができる。

次に、図３のＡ乃至Ｅを用いた操作例、即ち本実施の形態の付加情報表示操作うちの第１の実施例の操作に対して、図１の撮像装置が実行する処理について説明する。なお、本実施の形態の付加情報表示操作に対して撮像装置が実行する処理を、以下、付加情報表示処理と称する。特に、本実施の形態の付加情報表示操作うちの第Ｋの実施例（Ｋは１以上の整数値）の操作に対する付加情報表示処理を、第Ｋ付加情報表示処理と称する。

図４は、第１付加情報表示処理の一例を説明するフローチャートである。

ここで、撮像装置の動作状態のうち、タッチスクリーン１８に撮影画像が再生されている状態、即ち、撮影画像をユーザが視認できる状態を撮影画像再生状態と称する。この場合の前提事項として、撮像装置の動作状態が、撮影画像再生状態に遷移すると、第１付加情報表示処理が開始される。また、第１付加情報表示処理は、フローチャートに記載の流れで終了する他、撮像装置の動作状態が撮影画像再生状態から別の状態に遷移した場合、再生状態の撮影画像が別の画像に変化した場合にも強制終了する。なお、これらの前提事項は、後述する第２乃至第５付加情報表示処理においても同様にあてはまる。

ステップＳ１において、CPU２３は、デジタル信号処理部１５等を適宜制御して、再生状態の撮影画像に対応する付加情報画像を生成する。即ち、付加情報画像に含まれる付加情報が取得される。

なお、付加情報画像は、ステップＳ９の処理開始時点で生成されていれば足りる。即ち、付加情報画像の生成処理のタイミングは、ステップＳ１のタイミングである必要は特にない。

ステップＳ２において、CPU２３は、タッチスクリーン１８のいずれかの領域が接触されたか否かを判定する。

タッチスクリーン１８のいずれの領域にも接触がなされない場合、ステップＳ２において、ＮＯであると判定されて、処理はステップＳ２に戻さる。即ち、タッチスクリーン１８のいずれかの領域に接触がなされるまでの間、ステップＳ２の判定処理が繰り返し実行される。

その後、タッチスクリーン１８のいずれかの領域に接触がなされると、ステップＳ２においてＹＥＳであると判定されて、処理はステップＳ３に進む。

ステップＳ３において、CPU２３は、接触場所が、タッチスクリーン１８の四隅のいずれかの領域であるのか、そうでないのかを判定する。

例えば図３のＡに示されるようにタッチスクリーン１８のいずれかの領域に指f1が接触した場合、タッチスクリーン１８を構成するタッチパネル１６から座標信号がCPU２３に入力される。

従って、この座標信号がCPU２３に入力されると、CPU２３は、ステップＳ２の処理でＹＥＳであると判定し、この座標信号から、接触場所（タッチスクリーン１８の座標）を認識する。

認識された接触場所が、タッチスクリーン１８の四隅以外の領域の場合、ステップＳ３においてＮＯであると判定されて、処理はステップＳ２に戻され、それ以降の処理が繰り返される。

これに対して、認識された接触場所が、タッチスクリーン１８の四隅のいずれかの領域である場合、ステップＳ３においてＹＥＳであると判定されて、処理はステップＳ４に進む。

ステップＳ４において、CPU２３は、タッチスクリーン１８に付加情報呼び出し口５１が表示されているか否かを判定する。

付加情報呼び出し口５１が表示されていない場合、ステップＳ４においてＮＯであると判定され、処理はステップＳ１０に進む。

ステップＳ１０において、CPU２３は、デジタル信号処理部１５を制御して、タッチスクリーン１８に付加情報呼び出し口５１を表示させる。なお、付加情報呼び出し口５１は、タッチスクリーン１８の接触場所を含む領域、即ち、タッチスクリーン１８の四隅のうちのいずれかの領域に表示される。例えば、図３のＡに示されるように、タッチスクリーン１８の四隅のうち、右下の領域に指f1が接触した場合、即ち、接触場所が右下の領域の場合、図３のＢに示されるように、右下の領域に付加情報呼び出し口５１が表示される。

その後、処理はステップＳ２に戻され、それ以降の処理が繰り返される。この場合、付
加情報呼び出し口５１の上に指f1が接触され続けていると、ステップＳ２ＹＥＳ，Ｓ３Ｙ
ＥＳ，Ｓ４ＹＥＳの各処理でＹＥＳであると判定されて、処理はステップＳ５に進む。

ステップＳ５において、CPU２３は、タッチスクリーン１８に表示された付加情報呼び出し口５１を起点に、なぞり操作が実施されたか否かを判定する。

例えば、図３のＣの状態の場合、即ち、指f1が付加情報呼び出し口５１に接触している状態の場合、タッチスクリーン１８に対して略左方向のなぞり操作が実施されたか否かが判定される。

なお、なぞり操作が行われているか否かは、タッチスクリーン１８を構成するタッチパネル１６から座標信号をCPU２３が監視することで実現できる。即ち、CPU２３は、座標信号の時系列から、指f1の軌跡を認識することができる。そこで、CPU２３は、その認識結果に基づいて、なぞり操作が実施されているか否かを検出する。

従って、CPU２３は、指f1の軌跡の認識結果によりなぞり操作が検出されなかった場合、ステップＳ５でＮＯであると判定して、処理をステップＳ５に戻して、それ以降の処理を繰り返し実行する。即ち、なぞり操作が検出されるまでの間、ステップＳ５の判定処理が繰り返し実行される。

その後、CPU２３は、指f1の軌跡の認識結果により、付加情報呼び出し口５１を起点にしたなぞり操作を検出した場合、ステップＳ５でＹＥＳであると判定して、処理をステップＳ６に進める。

ステップＳ６において、CPU２３は、なぞり操作に対応して、撮影画像がめくれた表示にする。具体的には例えば、図３のＤに示されるように、CPU２３は、デジタル信号処理部１５を制御して、指f1の軌跡に従って撮影画像が水平方向へ縮小していく画像を生成し、タッチスクリーン１８に表示させる。なお、アニメーション処理により、撮影画像がめくられていく様子を表現してもよい。その後、処理はステップＳ７に進む。

ステップＳ７において、CPU２３は、指f1がタッチスクリーン１８からリリースされたか否かを判定する。即ち、なぞり操作とは、指f1をタッチスクリーン１８上に接触状態を保持したまま移動させる操作をいう。従って、ユーザが指f1をタッチスクリーン１８からリリースすることは、なぞり操作の終了を意味している。また、CPU２３は、タッチスクリーン１８を構成するタッチパネル１６から座標信号が入力されなくなった場合、指f1がリリースされたと判定することができる。

そこで、CPU２３は、座標信号が入力され続けている限り、ステップＳ７においてＮＯであると判定して、処理をステップＳ７に戻す。即ち、なぞり操作が継続している限り、ステップＳ７のループ処理が繰り返し実行される。

その後、座標信号の入力が途切れると、即ち、なぞり操作が終了すると、ステップＳ７においてＹＥＳであると判定されて、処理はステップＳ８に進む。

ステップＳ８において、CPU２３は、付加情報呼び出し口５１からリリース位置までの距離が一定距離以上であるか否かを判定する。

付加情報呼び出し口５１からリリース位置までの距離が一定距離以上である場合、ステップＳ８においてＹＥＳであると判定されて、処理はステップＳ９に進む。

ステップＳ９において、CPU２３は、タッチスクリーン１８に付加情報画像を表示させる。その結果、タッチスクリーン１８の表示状態は、例えば図３のＥの表示状態になる。これにより、第１付加情報表示処理は終了する。

これに対して、付加情報呼び出し口５１からリリースした位置までの距離が一定距離未満である場合、ステップＳ８においてＮＯであると判定されて、処理はステップＳ１１に進む。
ステップＳ１１において、CPU２３は、再生状態の撮影画像を再度表示させる。これにより、第１付加情報表示処理は終了する。

なお、図３のＥの表示状態、即ち、タッチスクリーン１８に付加情報画像が表示されている状態で、CPU２３が第１付加情報表示処理と同様の処理を実行することで、タッチスクリーン１８の表示を、付加情報画像から撮影画像に切り替えること、即ち、図３のＡの表示状態に戻すこともできる。

以上、図３を参照して、本実施の形態の付加情報表示操作うち、第１の実施例について説明した。そして、図４のフローチャートを参照して、第１の実施例に対する第１付加情報表示処理の一例について説明した。

次に、図５を参照して、本実施の形態の付加情報表示操作のうち、第２の実施例について説明する。そして、図６のフローチャートを参照して、第２の実施例に対する第２付加情報表示処理の一例について説明する。

図５のＡは、タッチスクリーン１８に任意の撮影画像が表示されている状態を示している。

図５のＡの状態で、ユーザの指f1によって、タッチスクリーン１８に再生された撮影画像の左側の領域が接触されると、タッチスクリーン１８の表示は、図３のＢの状態に遷移する。即ち、図３のＢに示されるように、撮影画像の垂直方向の中心線を軸として、接触された領域が奥に回転するかのような画像が、タッチスクリーン１８に表示される。

なお、CPU２３が、ユーザの指f1による接触を検出するまでの時間は、特に限定されないが、ユーザによる誤操作を防止すべく、一定時間以上にすると好適である

図３のＢの表示状態のままで指f1の接触が継続すると、タッチスクリーン１８の表示状態は、図５のＢの表示状態から図５のＣの表示状態に遷移する。即ちタッチスクリーン１８には、付加情報表示画像が表示される。

なお、図５においては指f1の接触領域は左側の領域として説明したが、右側の領域としてもよい。この場合、図５のＢにおける表示形態とは逆方向に回転したような表示がなされる。

さらに言えば、指f1の接触領域は、特に限定されず、その他、タッチスクリーン１８の上側または下側であっても構わない。この場合、図示はしないが、撮影画像の水平方向の中心線を軸として、接触された領域が奥に回転するかのような画像が、タッチスクリーン１８に表示される。

図６は、図５を用いて説明した付加情報表示操作の第２の実施例に対する付加情報表示処理、即ち第２付加情報表示処理の一例を説明するフローチャートである。

ステップＳ２１において、CPU２３は、デジタル信号処理部１５等を適宜制御して、再生状態の撮影画像に対応する付加情報画像を生成する。即ち、付加情報画像に含まれる付加情報が取得される。

なお、付加情報画像は、ステップＳ２５の処理開始時点で生成されていれば足りる。即ち、付加情報画像の生成処理のタイミングは、ステップＳ２１のタイミングである必要は特にない。

ステップＳ２２において、CPU２３は、タッチスクリーン１８に一定時間指f1が接触しているか否かを判定する。

即ち、ユーザの指f1によって、タッチスクリーン１８のいずれかの領域が接触された場合、タッチスクリーン１８を構成するタッチパネル１６から座標信号がCPU２３に入力される。

よって、座標信号がCPU２３に入力されない場合、ステップＳ２２においてＮＯであると判定されて、処理はステップＳ２２に戻される。また、座標信号が入力された場合であっても、一定時間経過していない場合には、ステップＳ２２においてＮＯであると判定されて、処理はステップＳ２２に戻される。即ち、座標信号が一定時間入力され続けない限り、ステップＳ２２の判定処理が繰り返される。

その後、座標信号が一定時間継続して入力され続けた場合、ステップＳ２２においてＹＥＳであると判定されて、処理はステップＳ２３に進む。

ステップＳ２３において、CPU２３は、接触領域が、タッチスクリーン１８の右側または左側のいずれかの領域であるのか、そうでないかのかを判定する。なお、右側あるいは左側の領域は、任意の幅を持って設定されている領域である。

接触領域が、右側または左側のいずれかの領域ではない、即ち別の領域であった場合、ステップＳ２３においてＮＯであると判定されて、処理はステップＳ２２に戻されそれ以降の処理が繰り返される。

これに対して、接触領域が、右側または左側のいずれかの領域であった場合、ステップＳ２３においてＹＥＳであると判定されて、処理はステップＳ２４に進む。

なお、上述の如く、ステップＳ２３の処理でＹＥＳであると判定される接触領域は、図６の例、即ち、左側または右側の領域である必要は特になく、任意の領域で構わない。ただし、後述するステップＳ２４の処理で撮影画像の回転表示を行った場合、ユーザに違和感を与えない領域であると好適である。そういった意味で、右側または左側の領域以外では、上側または下側の領域を採用すると好適である。

ステップＳ２４において、CPU２３は、撮影画像の回転表示を行う。具体的には例えば、図５のＢに示されるように、CPU２３は、デジタル信号処理部１５を制御して、接触され続けた領域が奥に回転していくような動画像を生成し、タッチパネル１８に表示させる。回転表示が終了すると、処理はステップＳ２５に進む。

ステップＳ２５において、CPU２３は、タッチスクリーン１８に付加情報画像を表示させる。その結果、タッチスクリーン１８の表示状態は、例えば図５のＣの表示状態になる。これにより、第２付加情報表示処理は終了する。

なお、図５のＣの表示状態、即ち、タッチスクリーン１８に付加情報画像が表示されている状態で、CPU２３が第２付加情報表示処理と同様の処理を実行することで、タッチスクリーン１８の表示を、付加情報画像から撮影画像に切り替えること、即ち、図５のＡの表示状態に戻すこともできる。

以上、図５を参照して、本実施の形態の付加情報表示操作うち、第２の実施例について説明した。そして、図６のフローチャートを参照して、第２の実施例に対する第２付加情報表示処理の一例について説明した。

次に、図７を参照して、本実施の形態の付加情報表示操作のうち、第３の実施例について説明する。そして、図８のフローチャートを参照して、第３の実施例に対する第３付加情報表示処理の一例について説明する。

上述した第１，第２の実施例において、CPU２３は、撮像装置の後面に配置されたタッチスクリーン１８を構成するタッチパネル１６から入力された座標信号により、指f1が接触されたか否かを判定していた。

これに対して、第３の実施例においては、CPU２３は、撮像装置の前面に配置されているタッチパネル２８から入力された座標信号により、指f1が接触されたか否かを判定する。

図７のＡは、ユーザが撮像装置を両手で保持し、かつ、タッチスクリーン１８に任意の撮影画像が表示されている状態を示している。

図７のＢは、図７のＡの状態のときの、撮像装置の前面側の外観構成例を示している。第３の実施例においては、ユーザは、撮像装置の後面側に親指を配置し、その前面側に親指以外の４本の指を配置し、親指とそれ以外の４本の指で挟み込むように撮像装置を保持して、操作することを前提としている。

図７のＢにおいて、ユーザは、タッチパネル２８に指f3で接触する。CPU２３が、ユーザの指f1による接触を検出するまでの時間は、特に限定されない。ただし、以下では、タッチパネル２８による座標信号が入力されると直ちに、CPU２３は指f1の接触を検出するとして説明を行う。

また、タッチパネル２８に接触する指としては、図７のＢに示される指f3に限定されない。即ち、親指以外であればいずれの指でもタッチパネル２８に接触する可能性がある。ただし、以下では、説明の簡略上、指f3がタッチパネル２８に接触するとして説明していく。

なお、タッチパネル２８の配置について、図２や図７の例では撮像装置前面の中心付近としたが、特に中心付近でなくてもよい。また、タッチパネル２８は、撮像装置側面に配置してもよい。ただし、上述したように、ユーザが撮像装置を図７のＡ，Ｂに示すように保持することが想定されている場合、誤操作を抑制すべく、タッチパネル２８の配置場所は図７のＢに示す場所が好適である。即ち、撮像装置を保持した状態では、ユーザの何れの指も容易に触れない場所、即ち、ユーザの両手の中間の場所にタッチパネル２８を配置すると好適である。

指f3がタッチパネル２８接触すると、タッチスクリーン１８の表示状態は、図７のＡの表示状態から図７のＣの表示状態に遷移する。即ち、タッチスクリーン１８に、付加情報画像が表示される。

図８は、図７を用いて説明した付加情報表示操作の第３の実施例に対する付加情報表示処理、即ち第３付加情報表示処理の一例を説明するフローチャートである。

ステップＳ３１において、CPU２３は、デジタル信号処理部１５等を適宜制御して、再生状態の撮影画像に対応する付加情報画像を生成する。即ち、付加情報画像に含まれる付加情報が取得される。

なお、付加情報画像は、ステップＳ３３の処理開始時点で生成されていれば足りる。即ち、付加情報画像の生成処理のタイミングは、ステップＳ３１のタイミングである必要は特にない。

ステップＳ３２において、CPU２３は、撮像装置の前面側のタッチパネル２８に指f1が接触したか否かを判定する。

即ち、ユーザの指f3によって、タッチスパネル２８のいずれかの領域が接触された場合、タッチパネル２８から座標信号がCPU２３に入力される。

よって、座標信号がCPU２３に入力されない場合、ステップＳ３２においてＮＯであると判定されて、処理はステップＳ３２に戻される。即ち、座標信号が入力されない限り、ステップＳ３２の判定処理が繰り返される。

その後、座標信号が入力された場合、ステップＳ３２においてＹＥＳであると判定されて、処理はステップＳ３３に進む。

ステップＳ３３において、CPU２３は、タッチスクリーン１８に付加情報画像を表示させる。その結果、タッチスクリーン１８の表示状態は、例えば図７のＣの表示状態になる。これにより、第３付加情報表示処理は終了する。

なお、図７のＣの表示状態、即ち、タッチスクリーン１８に付加情報画像が表示されている状態で、CPU２３が第３付加情報表示処理と同様の処理を実行することで、タッチスクリーン１８の表示を、付加情報画像から撮影画像に切り替えること、即ち、図７のＡの表示状態に戻すこともできる。

以上、図７を参照して、本実施の形態の付加情報表示操作うち、第３の実施例について説明した。そして、図８のフローチャートを参照して、第３の実施例に対する第３付加情報表示処理の一例について説明した。

次に、図９を参照して、本実施の形態の付加情報表示操作のうち、第４の実施例について説明する。そして、図１０のフローチャートを参照して、第４の実施例に対する第４付加情報表示処理の一例について説明する。

上述した第１乃至第３の実施例は、撮像装置の後面に配置されたタッチスクリーン１８、もしくは撮像装置の前面に配置されたタッチパネル２８を用いる付加情報表示操作の例であった。具体的には、ユーザが指f1または指ｆ3をタッチスクリーン１８またはタッチパネル２８に接触させることにより付加情報画像を表示させるという付加情報表示操作の例が、第１乃至第３の実施例であった。

これに対して、第４の実施例は、撮像装置に内蔵されたジャイロセンサを用いて付加情報画像を表示させるという付加情報表示操作の一例である。ジャイロセンサは、撮像装置の傾きを示す情報、例えば速度、角度、角速度、加速度、磁気を検出することができる。なお、以下、ジャイロセンサの検出情報をまとめて、傾き情報と称する。

以下、ジャイロセンサを内蔵した撮像装置を特にジャイロセンサ付撮像装置と称する。本実施の形態では図示はしないが、ジャイロセンサ付撮像装置は、基本的には図１の例の構成に対して、ジャイロセンサがCPU２３に接続された構成を有しているとする。もっとも、ジャイロセンサ付撮像装置にとっては、タッチパネル１６，２８は必須な構成要素ではない。

図９のＡは、ユーザが、ジャイロセンサ付撮像装置を、水平方向または垂直方向に回転させる様子を示している。撮像装置のタッチスクリーン１８には、任意の撮影画像が表示されている。

図９のＡに示されるように、ユーザは、ジャイロセンサ付撮像装置を水平方向または垂直方向に３６０度回転させる回転操作を行う。この回転操作により、タッチスクリーン１８の表示状態は、図９のＢに示される表示状態に遷移する。即ち、タッチスクリーン１８に付加情報画像が表示される。

また、図９のＢの表示状態、即ち、タッチスクリーン１８に付加情報画像が表示されている状態で、ユーザは、ジャイロセンサ付撮像装置を水平方向または垂直方向に３６０度回転させる回転操作を行うことができる。この回転操作により、タッチスクリーン１８の表示が、付加情報画像から撮影画像に切り替わる。

即ち、ジャイロセンサ付撮像装置を水平方向または垂直方向に３６０度回転させる回転操作により、タッチスクリーン１８の表示が、付加情報画像と撮影画像とのうち、一方から他方に切り替わる。

図１０は、図９を用いて説明した付加情報表示操作の第４の実施例に対する付加情報表示処理、即ち第４付加情報表示処理の一例を説明するフローチャートである。

ステップＳ５１において、CPU２３は、デジタル信号処理部１５等を適宜制御して、再生状態の撮影画像に対応する付加情報画像を生成する。即ち、付加情報画像に含まれる付加情報が取得される。

なお、付加情報画像は、ステップＳ５５の処理開始時点で生成されていれば足りる。即ち、付加情報画像の生成処理のタイミングは、ステップＳ５１のタイミングである必要は特にない。

ステップＳ５２において、CPU２３は、ジャイロセンサ付撮像装置の傾きを検出したか否かを判定する。

即ち、ジャイロセンサ付撮像装置が傾けられた場合、ジャイロセンサから傾き情報がCPU２３に入力される。

従って、ジャイロセンサから傾き情報が入力されない限り、ステップＳ５２において、ＮＯであると判定されて、処理はステップＳ５２に戻さる。即ち、ジャイロセンサから傾き情報が入力されるまでの間、ステップＳ５２の判定処理が繰り返し実行される。

その後、ジャイロセンサから傾き情報が入力されると、ステップＳ５２においてＹＥＳであると判定されて、処理はステップＳ５３に進む。

ステップＳ５３において、CPU２３は、ジャイロセンサ付撮像装置が、元の状態から水平方向または垂直方向に３６０度の回転を行ったか否かを判定する。ここで、元の状態とは、ユーザによって傾けられる前のジャイロセンサ付撮像装置の姿勢状態を意味している。即ち、ユーザがタッチスクリーン１８（撮像装置の裏面）と対向するように撮像装置を保持している場合における撮像装置の姿勢状態が、元の状態である。

ジャイロセンサ付撮像装置が回転中の場合、ジャイロセンサ付撮像装置の回転角度は３６０度未満となる。よって、このような場合、ステップＳ５３においてＮＯであると判定されて、処理はステップＳ５７に進む。

ステップＳ５７において、CPU２３は、ジャイロセンサ付撮像装置の傾きを検出してから、一定時間経過したか否かを判定する。

一定時間経過した場合、ステップＳ５７においてＹＥＳと判定され、第４付加情報表示処理は終了となる。

即ち、ユーザは、通常数秒程度で、ジャイロセンサ付撮像装置を３６０度回転させることができるはずである。そこで、例えば１０秒程度の一定時間が経過しても、ジャイロセンサ付撮像装置が３６０度回転されなかった場合、ユーザは回転操作をする意思がないとして、CPU２３は、第４付加情報表示処理を終了させるのである。

よって、一定時間が経過していない場合、ユーザは回転操作をする意思がまだあるとして、ステップＳ５７においてＮＯであると判定されて、処理はステップＳ５２に戻される。

即ち、一定時間が経過しない限り、ユーザによってジャイロセンサ付撮像装置が水平方向または垂直方向に３６０度回転させられている最中は、ステップＳ５２ＹＥＳ，Ｓ５３ＮＯ，Ｓ５７ＮＯのループ処理が繰り返し実行される。

その後、一定時間経過前に、ジャイロセンサ付撮像装置が３６０度回転すると、ステップＳ５３においてＹＥＳであると判定されて、処理はステップＳ５４に進む。

ステップＳ５４において、CPU２３は、タッチスクリーン１８の表示内容は撮影画像であるか否かを判定する。

タッチスクリーン１８の表示内容が撮影画像であった場合、ステップＳ５４においてＹＥＳであると判定されて、処理はステップＳ５５に進む。ステップＳ５５において、CPU２３は、デジタル信号処理部１５を制御してタッチスクリーン１８に付加情報画像を表示させる。即ち、ジャイロセンサ付撮像装置を水平方向または垂直方向に３６０度回転させる回転操作により、タッチスクリーン１８の表示が、撮影画像から付加情報画像に切り替わる。これにより、第４付加情報表示処理は終了となる。なお、その後、第４付加情報表示処理が再開されることで、後述するステップＳ５６の処理により、タッチスクリーン１８の表示が、付加情報画像から撮影画像に切り替わる。

これに対して、タッチスクリーン１８の表示内容が、撮影画像でなかった場合、即ち、付加情報画像であった場合、ステップＳ５４においてＮＯであると判定されて、処理はステップＳ５６に進む。ステップＳ５６において、CPU２３は、デジタル信号処理部１５を制御してタッチスクリーン１８に撮影画像を表示させる。即ち、ジャイロセンサ付撮像装置を水平方向または垂直方向に３６０度回転させる回転操作により、タッチスクリーン１８の表示が、付加情報画像から撮影画像に切り替わる。これにより、第４付加情報表示処理は終了となる。なお、その後、第４付加情報表示処理が再開されることで、上述のステップＳ５５の処理により、タッチスクリーン１８の表示が、撮影画像から付加情報画像に切り替わる。

以上、図９を参照して、本実施の形態の付加情報表示操作うち、第４の実施例について説明した。そして、図１０のフローチャートを参照して、第４の実施例に対する第４付加情報表示処理の一例について説明した。

次に、図１１を参照して、本実施の形態の付加情報表示操作のうち、第５の実施例について説明する。そして、図１２のフローチャートを参照して、第５の実施例に対する第５付加情報表示処理の一例について説明する。

第５の実施例は、第４の実施例と同様に、撮像装置としてはジャイロセンサ付撮像装置が採用されている。即ち、ジャイロセンサにより撮像装置の傾きを検出し、その検出結果に基づいて付加情報画像を表示させる例であって、第４の実施例とは異なる例が第５の実施例である。

即ち、第４の実施例は、ジャイロセンサ付撮像装置を３６０度回転させる回転操作によって付加情報画像を表示させる例であった。これに対して、第５の実施例は、ジャイロセンサ付撮像装置を１８０度または９０度回転させる回転操作を行い、その後さらに、ジャイロセンサ付撮像装置を逆方向に１８０度または９０度回転させる回転操作、即ち、ジャイロセンサ付撮像装置を元の状態に戻す操作を行うことにより、付加情報画像を表示させる例である。

図１１のＡは、タッチスクリーン１８に、任意の撮影画像が表示されている状態を示している。

図１１のＢの左側の図は、ユーザがジャイロセンサ付撮像装置を図１１のＡの状態から１８０度回転させた後の状態を示している。

ジャイロセンサ付撮像装置の配置状態を、図１１のＢの左側の図の状態から、図１１のＡの状態に再度戻すことにより、タッチスクリーン１８の表示状態は、図１１のＡの表示状態から、図１１のＣの表示状態に遷移する。即ち、タッチスクリーン１８に付加情報画像が表示される。

また、図１１のＢの右側の図は、ユーザがジャイロセンサ付撮像装置を図１１のＡの状態から９０度回転させた後の状態を示している。

ジャイロセンサ付撮像装置の配置状態を、図１１のＢの右側の図の状態から、図１１のＡの状態に再度戻すことにより、タッチスクリーン１８の表示状態は、図１１のＡの表示状態から、図１１のＣの表示状態に遷移する。即ち、タッチスクリーン１８に付加情報画像が表示される。

第５の実施例についても第４の実施例と同様に、タッチスクリーン１８の表示状態が図１１のＢの状態であった場合、即ち付加情報画像が表示されていた場合、ユーザは、同様の回転操作、即ち、１８０度または９０度の回転操作の後、逆方向の１８０度または９０度の回転操作をすることもできる。これにより、タッチスクリーン１８の表示状態は、図１１のＣの表示状態から、図１１のＡの表示状態に遷移する。即ち、タッチスクリーン１８に撮影画像が表示される。

図１０は、図９を用いて説明した付加情報表示操作の第４の実施例に対する付加情報表示処理、即ち第４付加情報表示処理の一例を説明するフローチャートである。

ステップＳ７１において、CPU２３は、デジタル信号処理部１５等を適宜制御して、再生状態の撮影画像に対応する付加情報画像を生成する。即ち、付加情報画像に含まれる付加情報が取得される。

なお、付加情報画像は、ステップＳ７６の処理開始時点で生成されていれば足りる。即ち、付加情報画像の生成処理のタイミングは、ステップＳ７１のタイミングである必要は特にない。

ステップＳ７２において、CPU２３は、ジャイロセンサ付撮像装置の傾きを検出したか否かを判定する。

即ち、ジャイロセンサ付撮像装置が傾けられた場合、ジャイロセンサから傾き情報がCPU２３に入力される。

従って、ジャイロセンサから傾き情報が入力されない限り、ステップＳ７２において、ＮＯであると判定されて、処理はステップＳ７２に戻さる。即ち、ジャイロセンサから傾き情報が入力されるまでの間、ステップＳ７２の判定処理が繰り返し実行される。

その後、ジャイロセンサから傾き情報が入力されると、ステップＳ７２においてＹＥＳであると判定されて、処理はステップＳ７３に進む。

ステップＳ７３において、CPU２３は、ジャイロセンサ付撮像装置が、元の状態から水平方向または垂直方向に１８０度または９０度の回転を行ったか否かを判定する。ここで、元の状態とは、ユーザによって傾けられる前のジャイロセンサ付撮像装置の姿勢状態を意味している。即ち、ユーザがタッチスクリーン１８（撮像装置の裏面）と対向するように撮像装置を保持している場合における撮像装置の姿勢状態が、元の状態である。

ジャイロセンサ付撮像装置が回転中の場合、図１０の第４付加情報表示処理と同様に、ステップＳ７３においてＮＯであると判定されて、処理はステップＳ７８に進む。

ステップＳ７８において、CPU２３は、ジャイロセンサ付撮像装置の傾きを検出してから、一定時間経過したか否かを判定する。

一定時間経過した場合、ステップＳ７８においてＹＥＳと判定され、第５付加情報表示処理は終了となる。

即ち、ユーザは、通常数秒程度で、ジャイロセンサ付撮像装置を回転させることができるはずである。そこで、例えば１０秒程度の一定時間が経過しても、ジャイロセンサ付撮像装置が回転されなかった場合、ユーザは回転操作をする意思がないとして、CPU２３は、第５付加情報表示処理を終了させるのである。

よって、一定時間が経過していない場合、ユーザは回転操作をする意思がまだあるとして、ステップＳ７８においてＮＯであると判定されて、処理はステップＳ７２に戻される。

即ち、一定時間が経過しない限り、ユーザによってジャイロセンサ付撮像装置が回転中であると、ステップＳ７２ＹＥＳ，Ｓ７３ＮＯ，Ｓ７８ＮＯのループ処理が繰り返し実行される。

その後、一定時間経過前に、ジャイロセンサ付撮像装置が１８０度または９０度回転すると、ステップＳ７３においてＹＥＳであると判定されて、処理はステップＳ７４に進む。

第５付加情報表示操作によれば、この後、ユーザは、元の状態に戻す操作、即ち、ジャイロセンサ付撮像装置を１８０度または９０度だけ逆回転させる回転操作（以下、逆回転操作と称する）を行うはずである。

そこで、ステップＳ７４において、CPU２３は、元の状態に戻したか否かを判定する。即ち、ステップＳ７４において、CPU２３は、ジャイロセンサ付撮像装置が、水平方向または垂直方向に１８０度または９０度の逆回転を行ったか否かを判定する。

ジャイロセンサ付撮像装置が逆回転中の場合、ステップＳ７３の判定処理と同様に、ステップＳ７４においてＮＯであると判定されて、処理はステップＳ７８に進む。

ステップＳ７８において、CPU２３は、ジャイロセンサ付撮像装置の傾きを検出してから、一定時間経過したか否かを判定する。

一定時間経過した場合、ステップＳ７８においてＹＥＳと判定され、第５付加情報表示処理は終了となる。

これに対して、一定時間が経過していない場合、ユーザは逆回転操作をする意思がまだあるとして、ステップＳ７８においてＮＯであると判定されて、処理はステップＳ７２に戻される。

即ち、一定時間が経過しない限り、ユーザによってジャイロセンサ付撮像装置が逆回転中であると、ステップＳ７２ＹＥＳ，Ｓ７３ＹＥＳ，Ｓ７４ＮＯ，Ｓ７８ＮＯのループ処理が繰り返し実行される。

その後、一定時間経過前に、ジャイロセンサ付撮像装置が１８０度または９０度だけ逆回転すると、ステップＳ７４においてＹＥＳであると判定されて、処理はステップＳ７５に進む。

ステップＳ７５において、CPU２３は、タッチスクリーン１８の表示内容は撮影画像であるか否かを判定する。

タッチスクリーン１８の表示内容が撮影画像であった場合、ステップＳ７５においてＹＥＳであると判定されて、処理はステップＳ７６に進む。ステップＳ７６において、CPU２３は、デジタル信号処理部１５を制御してタッチスクリーン１８に付加情報画像を表示させる。即ち、ジャイロセンサ付撮像装置を水平方向または垂直方向に１８０度または９０度だけ回転させる回転操作とその逆回転操作により、タッチスクリーン１８の表示が、撮影画像から付加情報画像に切り替わる。これにより、第５付加情報表示処理は終了となる。なお、その後、第５付加情報表示処理が再開されることで、後述するステップＳ７７の処理により、タッチスクリーン１８の表示が、付加情報画像から撮影画像に切り替わる。

これに対して、タッチスクリーン１８の表示内容が、撮影画像でなかった場合、即ち、付加情報画像であった場合、ステップＳ７５においてＮＯであると判定されて、処理はステップＳ７７に進む。ステップＳ７７において、CPU２３は、デジタル信号処理部１５を制御してタッチスクリーン１８に撮影画像を表示させる。即ち、ジャイロセンサ付撮像装置を水平方向または垂直方向に１８０度または９０度だけ回転させる回転操作とその逆回転操作により、タッチスクリーン１８の表示が、付加情報画像から撮影画像に切り替わる。これにより、第５付加情報表示処理は終了となる。なお、その後、第５付加情報表示処理が再開されることで、上述のステップＳ５７６の処理により、タッチスクリーン１８の表示が、撮影画像から付加情報画像に切り替わる。

以上、付加情報表示操作の第１乃至第５の実施例として、撮影画像に対する付加情報画像をタッチスクリーン１８に表示させる例について説明した。第１乃至第５の実施例は、撮影画像と付加情報画像が１対１で対応していることを前提としている。即ち、実世界のカードを模擬した例が第１乃至第５の実施例であったため、撮影画像と付加情報画像が、表裏一体となって存在しているという前提事項があった。

しかしながら、ひとつの撮影画像に対して複数の付加情報画像や関連画像が存在する場合も想定される。よって、ユーザは、ひとつの撮影画像に対して複数の付加情報や関連画像を表示させる操作をすることもできると好適である。以下、かかる操作を、付加情報等表示操作と称する。

以下、図１３を参照して、付加情報等表示操作の一例について説明する。なお、図１３の例の付加情報等表示操作の基本的な操作は、第２、第４、および第５の実施例における付加情報表示操作と同様の操作が採用されているとして説明する。

図１３のＡは、タッチスクリーン１８に、任意の撮影画像が表示されている状態を示している。

図１３のＢは、図１３のＡの表示状態でタッチスクリーン１８に対して仮想的な左回り回転操作がなされたことにより、タッチスクリーン１８の表示状態が、複数の付加情報画像のうちのひとつである第１付加情報画像が表示されている状態に遷移した様子を示している。

ここで、仮想的な左回り回転操作とは、撮影画像を左回りにあたかも回転させるための操作であって、第２、第４、および第５の実施例の操作を総称したものである。

即ち、第２の実施例においては、ユーザが、指f1でタッチスクリーン１８の左側の領域を一定時間接触し続ける操作が、仮想的な左回り回転操作である。

また、第４の実施例においては、ユーザが撮像装置を水平方向の左回りに３６０度回転させる回転操作が、仮想的な左回り回転操作である。

また、第５の実施例においては、ユーザが撮像装置を水平方向の左回りに１８０度または９０度回転させた後、右回りに１８０度または９０度逆回転させて、撮像装置を元の状態に戻す操作が、仮想的な左回り回転操作である。

図１３のＣは、図１３のＢの表示状態でさらにタッチスクリーン１８に対して仮想的な左回り回転操作がなされたことにより、タッチスクリーン１８の表示状態が、第１付加情報画像とは別の第２付加情報画像が表示されている状態に遷移した様子を示している。

図１３のＤは、図１３のＡの表示状態でタッチスクリーン１８に対して仮想的な右回り回転操作がなされたことにより、タッチスクリーン１８の表示状態が、複数の関連画像のうちのひとつである第１関連画像が表示されている状態に遷移した様子を示している。

ここで、仮想的な右回り回転操作とは、撮影画像を右回りにあたかも回転させるための操作であって、第２、第４、および第５の実施例の操作を総称したものである。

即ち、第２の実施例においては、ユーザが、指f1でタッチスクリーン１８の右側の領域を一定時間接触し続ける操作が、仮想的な右回り回転操作である。

また、第４の実施例においては、ユーザが撮像装置を水平方向の右回りに３６０度回転させる回転操作が、仮想的な右回り回転操作である。

また、第５の実施例においては、ユーザが撮像装置を水平方向の右回りに１８０度または９０度回転させた後、左回りに１８０度または９０度逆回転させて、撮像装置を元の状態に戻す操作が、仮想的な右回り回転操作である。

図１３のＥは、図１３のＤの表示状態でさらにタッチスクリーン１８に対して仮想的な右回り回転操作がなされたことにより、タッチスクリーン１８の表示状態が、第１関連画像とは別の第２関連画像が表示されている状態に遷移した様子を示している。

なお、図１３のＡ乃至Ｅに示した付加情報等表示操作は、水平方向の回転操作に特に限定されず、その他垂直方向の回転操作を採用してもよい。この場合、図１３のＡの撮影画像に対して、水平方向の中心を軸にして仮想的に上回りまたは下回り操作がなされて、タッチスクリーン１８の表示状態が、各種の付加情報や関連画像が表示されている状態に遷移する。

また、図１３の例では、左回りまたは上回りさせる操作によって付加情報画像を表示し、右回りまたは下回りさせる操作によって関連画像を表示させるとした。しかしながら、各操作によって表示する画像は、上記の例に限定されないことは言うまでもない。

ところで、上述した一連の処理は、ハードウエアにより実行させることもできるが、ソフトウエアにより実行させることができる。

この場合、上述した一連の処理は、図１の撮像装置が実行してもよいことは勿論のこと、その他例えば、図１４に示されるパーソナルコンピュータが実行してもよい。

図１４において、CPU１０１は、ROM（Read Only Memory）１０２に記録されているプログラム、または記憶部１０８からRAM（Random Access Memory）１０３にロードされたプログラムに従って各種の処理を実行する。RAM１０３にはまた、CPU１０１が各種の処理を実行する上において必要なデータなども適宜記憶される。

CPU１０１、ROM１０２、およびRAM１０３は、バス１０４を介して相互に接続されている。このバス１０４にはまた、入出力インタフェース１０５も接続されている。

入出力インタフェース１０５には、キーボード、マウスなどよりなる入力部１０６、出力部１０７、ハードディスクなどより構成される記憶部１０８、モデムおよびターミナルアダプタなどより構成される通信部１０９が接続されている。通信部１０９は、インターネットを含むネットワークを介して他の装置（図示せず）との間で行う通信を制御する。

入出力インタフェース１０５にはまた、必要に応じてドライブ１１０が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどよりなるリムーバブルメディア１１１が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部１０８にインストールされる。

一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。

このようなプログラムを含む記録媒体は、図１または図１４に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フロッピディスクを含む）、光ディスク（CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む）、光磁気ディスク（MD（Mini-Disk）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア（パッケージメディア）１１１（図１４）により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されている図１のプログラムROM２６、図１４のROM１０２、記憶部１０８に含まれるハードディスクなどで構成される。

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

また、以上、本発明が適用された情報処理装置により表示が制御される表示装置として、液晶表示パネル１７といった液晶表示装置について説明してきた。ただし、本発明は、液晶表示パネルのみならず、次のような表示装置にも適用可能である。即ち、動画像を構成するフレームやフィールドといった単位（以下、かかる単位をコマと称する）毎に表示が指示される表示装置であって、所定時間の間、１コマを構成する複数の画素が表示素子により構成されており、それら表示素子のうちの少なくとも一部の表示を保持させることができる表示装置に適用できる。なお、以下、かかる表示素子をホールド型表示素子と称し、かかるホールド型表示素子により画面が構成される表示装置を、ホールド型表示装置と称する。即ち、液晶表示装置はホールド型表示装置の例示にしか過ぎず、本発明は、ホールド型表示装置全体に適用可能である。

さらに、本発明は、ホールド型表示装置のみならず、例えば、発光素子として有機ＥＬ(Electro Luminescent)デバイスを用いた平面自発光型の表示装置等にも適用可能である。即ち、本発明は、画像が複数の画素から構成され、その画素を表示する表示素子を含む表示装置全体に適用可能である。なお、かかる表示装置を、画素型表示装置と称する。ここで、画素型表示装置において、１つの画素に１つの表示素子が必ずしも対応付けられている必要は特に無い。

換言すると、本発明適用された情報処理装置により表示が制御される表示装置は、上述した一連の処理を実行可能とする表示装置であれば足りる。

１１ レンズ部， １２ 撮像素子, １３ アナログ信号処理部， １４ A/D変換部， １５ デジタル信号処理部， １６ タッチパネル， １７ 液晶パネル， １８ タッチスクリーン， １９ 記録デバイス， ２０ アクチュエータ， ２１ モータドライブ， ２２ TG， ２３ CPU， ２４ 操作部， ２５ EEPROM， ２６ プログラムROM， ２７ RAM， ２８ タッチパネル， ４１ ズームレバー， ４２ シャッタボタン， ４３ 再生ボタン， ４４ パワーボタン， ４５ 撮影レンズ， ４６ AFイルミネータ， ４７ レンズカバー， ６１ 位置情報表示， ６２ ごみ箱アイコン， ６３ プリンタアイコン， ６４ サーバアイコン， １０１ CPU， １０２ ROM， １０３ RAM， １０８ 記憶部， １１１ リムーバブルメディア

Claims (10)

1. 画像を表示する表示部と、
   前記表示部に対するユーザの操作を受付ける操作入力受付部と、
   所定の操作が前記操作入力受付部により受付けられた場合に、前記表示部の表示状態を前記画像が表示されている第１の表示状態と、前記画像に関連する付加情報を１以上含む付加情報画像が表示されている第２の表示状態とのうち一方から他方の状態へ遷移させる表示制御を行う表示制御部と
   を備え、
   前記表示制御部は、前記表示制御として、前記第１の表示状態で、前記ユーザが指を前記操作入力受付部に接触させたまま所定距離だけ動かす操作をなぞり操作として、前記なぞり操作を検出した場合に、前記表示部の表示状態を前記なぞり操作の方向に応じて遷移させるとともに、前記表示部の表示状態を遷移させるときに、前記なぞり操作における前記指の軌跡に従って前記画像の縮小率を変更させながら前記表示部に縮小された前記画像を表示させる制御を行う
   情報処理装置。
2. 前記第１の表示状態は、前記画像がカードの表面として表示された状態であり、
   前記第２の表示状態は、前記付加情報画像が前記カードの裏面に表示された状態である
   請求項１に記載の情報処理装置。
3. 前記表示制御部は、前記表示制御として、前記第１の表示状態で、前記操作入力受付部が前記ユーザの前記指を接触させる操作を検出した場合、さらに、前記付加情報を呼び出すための画像として付加情報呼び出し口を前記接触位置に対応した箇所に表示させ、
   前記付加情報呼び出し口を起点とする前記なぞり操作を検出した場合に、前記表示部の表示状態を遷移させる制御を行う
   請求項１に記載の情報処理装置。
4. 前記表示制御部は、前記表示制御として、
   前記第１の表示状態で、前記操作入力受付部が所定領域に対してユーザが指を接触させる操作が一定時間以上継続していることを検出した場合、前記表示部の表示状態を遷移させる制御を行う
   請求項１に記載の情報処理装置。
5. 前記情報処理装置の面のうち、第１の面に前記表示部および前記操作入力部が配置され、
   前記第１の面と対向する第２の面に配置されるタッチパネルを含むタッチパネル部をさらに備え、
   前記表示制御部は、前記表示制御として、
   前記タッチパネル部の所定領域に対してユーザが指を接触させる操作を検出した場合、前記表示部の表示状態を遷移させる制御を行う
   請求項１に記載の情報処理装置。
6. 前記情報処理装置の傾きを検出する検出部をさらに備え、
   前記表示制御部は、前記表示制御として、
   前記検出部の検出結果に基づいて、前記ユーザが前記情報処理装置を３６０度回転させる操作を検出した場合、前記表示部の表示状態を遷移させる制御を行う
   請求項１に記載の情報処理装置。
7. 前記情報処理装置の傾きを検出する検出部をさらに備え、
   前記表示制御部は、前記表示制御として、
   前記検出部の検出結果に基づいて、前記ユーザが前記情報処理装置を１８０度または９０度回転させる第１の操作と、前記第１の操作後に前記情報処理装置を逆方向に１８０度または９０度回転させる第２の操作とを検出した場合、前記表示部の表示状態を遷移させる制御を行う
   請求項１に記載の情報処理装置。
8. 前記表示制御部は、
   前記表示部の表示状態が第１の表示状態である場合、前記所定の操作を検出する前に予め、前記付加情報画像に含める前記付加情報を取得する
   請求項１に記載の情報処理装置。
9. 表示部と操作入力受付部とを備える情報処理装置が、
   前記表示部の表示状態として、
   画像が前記表示部に表示されている第１の表示状態と、
   前記画像に関連する付加情報を１以上含む付加情報画像が前記表示部に表示されている第２の表示状態とが存在する場合、
   前記第１の表示状態で、ユーザが指を前記操作入力受付部に接触させたまま所定距離だけ動かす操作をなぞり操作として、前記なぞり操作を検出した場合、前記表示部の表示状態を前記なぞり操作の方向に応じて、前記第１の表示状態から前記第２の表示状態へ遷移させるとともに、前記表示部の表示状態を遷移させるときに、前記なぞり操作における前記指の軌跡に従って前記画像の縮小率を変更させながら前記表示部に縮小された前記画像を表示させる表示制御を行う
   ステップを含む情報処理方法。
10. 表示部と操作入力受付部とを備える情報処理装置を制御するコンピュータが、
    前記表示部の表示状態として、
    画像が前記表示部に表示されている第１の表示状態と、
    前記画像に関連する付加情報を１以上含む付加情報画像が前記表示部に表示されている第２の表示状態とが存在する場合、
    前記第１の表示状態で、ユーザが指を前記操作入力受付部に接触させたまま所定距離だけ動かす操作をなぞり操作として、前記なぞり操作を検出した場合、前記表示部の表示状態を前記なぞり操作の方向に応じて、前記第１の表示状態から前記第２の表示状態へ遷移させるとともに、前記表示部の表示状態を遷移させるときに、前記なぞり操作における前記指の軌跡に従って前記画像の縮小率を変更させながら前記表示部に縮小された前記画像を表示させる表示制御を行う
    ステップを含む制御処理を実行するプログラム。

Images