JP5686244B2 - 表示制御装置、表示制御方法、及び、プログラム - Google Patents

表示制御装置、表示制御方法、及び、プログラム Download PDF

Info

Publication number
JP5686244B2
JP5686244B2 JP2010284321A JP2010284321A JP5686244B2 JP 5686244 B2 JP5686244 B2 JP 5686244B2 JP 2010284321 A JP2010284321 A JP 2010284321A JP 2010284321 A JP2010284321 A JP 2010284321A JP 5686244 B2 JP5686244 B2 JP 5686244B2
Authority
JP
Japan
Prior art keywords
display
image
display control
target image
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010284321A
Other languages
English (en)
Other versions
JP2012133085A5 (ja
JP2012133085A (ja
Inventor
綾 高岡
綾 高岡
布巻 崇
崇 布巻
綾子 天野
綾子 天野
憲三 西川
憲三 西川
律子 金野
律子 金野
智也 成田
智也 成田
俊一 笠原
俊一 笠原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2010284321A priority Critical patent/JP5686244B2/ja
Priority to EP20110189106 priority patent/EP2469838A2/en
Priority to US13/314,486 priority patent/US10218897B2/en
Priority to CN2011104129287A priority patent/CN102547115A/zh
Publication of JP2012133085A publication Critical patent/JP2012133085A/ja
Publication of JP2012133085A5 publication Critical patent/JP2012133085A5/ja
Application granted granted Critical
Publication of JP5686244B2 publication Critical patent/JP5686244B2/ja
Priority to US16/259,332 priority patent/US10469737B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Description

本発明は、表示制御装置、表示制御方法、及び、プログラムに関し、特に、例えば、画像の全体と細部との両方を、同時に確認することができるようにする表示制御装置、表示制御方法、及び、プログラムに関する。
例えば、ディジタルカメラ(ディジタルスチルカメラ)においては、アスペクト比が4:3や16:9の液晶パネルが設けられており、ディジタルカメラで撮像した画像(例えば、写真としての静止画)は、液晶パネルに表示することができる。
ところで、最近のディジタルカメラでは、ディジタルカメラをパン(又はチルト)しながら撮像し続けることで、横長(又は縦長)のパノラマ画像を撮像することができる。
このようなパノラマ画像のアスペクト比は、ディジタルカメラの液晶パネルのアスペクト比と異なるため、すなわち、例えば、パノラマ画像は、アスペクト比が4:3や16:9の液晶パネルに比較して横長であるため、液晶パネルでのパノラマ画像の表示は、制限される。
具体的には、液晶パネルに、パノラマ画像の全体を表示しようとする場合には、パノラマ画像は、小さく表示される。また、液晶パネルに、パノラマ画像を大きく表示しようとする場合には、パノラマ画像の一部しか表示することができず、全体を表示することができない。
そこで、パノラマ画像の一部を、液晶パネルの全体に大きく表示し、かつ、パノラマ画像のどの部分が液晶パネルに表示されているかを示すスーパインポーズ表示を行う画像再生装置が提案されている(例えば、特許文献1を参照)。
特開2000-152168号公報
例えば、パノラマ画像のように、液晶パネルとアスペクト比が異なる画像等について、その画像の全体と細部との両方を、同時に確認することができれば便利であり、そのような確認をすることができる画像の表示制御の様々な技術の提案が要請されている。
本発明は、このような状況に鑑みてなされたものであり、画像の全体と細部との両方を、同時に確認することができるようにするものである。
本発明の一側面の表示制御装置、又は、プログラムは、画像を表示する表示装置の表示領域のアスペクト比と異なる表示対象の表示対象画像の全体を、前記表示領域に表示制御している状態で受け付けられた、前記表示対象画像の一部の範囲を指定する第1のユーザ指示に基づいて、前記一部の範囲の画像を拡大した一部拡大画像を、前記表示対象画像との位置関係を合わせた状態で、前記表示対象画像と同時前記表示領域に表示させる第1の表示制御を行うとともに、前記第1の表示制御を行っている状態で受け付けられた、前記表示対象画像のスクロール表示の開始を指定する第2のユーザ指示に基づいて、前記表示対象画像のスクロール表示をスクロール表示開始位置から開始する第2の表示制御を行う表示制御手段を備え、前記第2のユーザ指示が、前記スクロール表示開始位置の指示を兼ねる表示制御装置、又は、表示制御装置として、コンピュータを機能させるためのプログラムである。
本発明の一側面の表示制御方法は、画像を表示する表示装置の表示領域のアスペクト比と異なる表示対象の表示対象画像の全体を、前記表示領域に表示制御している状態で受け付けられた、前記表示対象画像の一部の範囲を指定する第1のユーザ指示に基づいて、前記一部の範囲の画像を拡大した一部拡大画像を、前記表示対象画像との位置関係を合わせた状態で、前記表示対象画像と同時前記表示領域に表示させる第1の表示制御を行うとともに、前記第1の表示制御を行っている状態で受け付けられた、前記表示対象画像のスクロール表示の開始を指定する第2のユーザ指示に基づいて、前記表示対象画像のスクロール表示をスクロール表示開始位置から開始する第2の表示制御を行うステップを含み、前記第2のユーザ指示が、前記スクロール表示開始位置の指示を兼ねる表示制御方法である。
以上のような本発明の一側面においては、画像を表示する表示装置の表示領域のアスペクト比と異なる表示対象の表示対象画像の全体を、前記表示領域に表示制御している状態で受け付けられた、前記表示対象画像の一部の範囲を指定する第1のユーザ指示に基づいて、前記一部の範囲の画像を拡大した一部拡大画像を、前記表示対象画像との位置関係を合わせた状態で、前記表示対象画像と同時前記表示領域に表示させる第1の表示制御が行われるとともに、前記第1の表示制御を行っている状態で受け付けられた、前記表示対象画像のスクロール表示の開始を指定する第2のユーザ指示に基づいて、前記表示対象画像のスクロール表示をスクロール表示開始位置から開始する第2の表示制御が行われる。そして、前記第2のユーザ指示が、前記スクロール表示開始位置の指示を兼ねる。
なお、表示制御装置は、独立した装置であっても良いし、1つの装置を構成している内部ブロックであっても良い。
また、プログラムは、伝送媒体を介して伝送することにより、又は、記録媒体に記録して、提供することができる。
本発明の一側面によれば、画像の全体と細部との両方を、同時に確認することができる。
本発明を適用したディジタルカメラの一実施の形態の構成例を示すブロック図である。 ディジタルカメラの外観構成例を示す斜視図である。 表示制御装置の機能的な構成例を示すブロック図である。 全体表示モードでのパノラマ画像の表示の表示例を示す図である。 全体表示モードでのパノラマ画像、及び、一部拡大画像の表示の例を説明する図である。 表示制御装置が行う全体表示モードの表示制御処理を説明するフローチャートである。 スクロールモードでの、表示対象画像の表示の例を示す図である。 表示画面への近接を、一部拡大画像を表示するトリガとして採用し、表示画面へのタッチを、スクロールモードでの表示を行うトリガとして採用する場合の表示画面の表示例を示す図である。 全体表示モードでのパノラマ画像の表示の他の表示例を示す図である。
[本発明を適用したディジタルカメラの一実施の形態]
図1は、本発明を適用したディジタルカメラの一実施の形態の構成例を示すブロック図である。
レンズ部11は、撮影レンズ、絞り、フォーカスレンズ等を含み、レンズ部11に入射する光は、撮像素子12に照射される。
撮像素子12は、例えば、CCD(Charge Coupled Device)や、CMOS(Complementary Metal Oxide Semiconductor)イメージャ等で構成され、レンズ部11からの光を光電変換し、その結果得られるアナログの画像信号を、アナログ信号処理部13に供給する。
アナログ信号処理部13は、撮像素子12からの画像信号に、相関二重サンプリング処理や自動利得調整処理等のアナログ信号処理を施し、A/D(Analog/Digital)変換部14に供給する。
A/D(Analog/Digital)変換部14は、アナログ信号処理部13からの画像信号をA/D変換し、その結果得られるディジタルの画像データを、ディジタル信号処理部15に供給する。
ディジタル信号処理部15は、A/D変換部14からの画像データに、ホワイトバランス調整処理や、ノイズ除去処理、必要な圧縮符号化処理(例えば、JPEG(Joint Photographic Experts Group)符号化等)等のディジタル信号処理を施し、入出力パネル18(の表示部17)や記録デバイス19に供給する。
入出力パネル18は、入力部16と表示部17とで構成される。
入力部16は、外部からの入力を受け付ける(検知する)機能を有するデバイス、すなわち、例えば、静電式等のタッチパネルや、光を照射する光源と、その光の、物体からの反射光を受光するセンサとのセット等で構成される。
入力部16は、外部からの物体、すなわち、例えば、ユーザの指や、ユーザが扱うタッチペン等が近接し、又は、タッチされると、その近接、又は、タッチがされている位置を表す信号を、CPU23に供給する。
表示部17は、画像を表示するデバイス(表示装置)、すなわち、例えば、液晶パネル等で構成され、ディジタル信号処理部15から供給される画像データ等に応じて、画像を表示する。
入出力パネル18は、以上のような入力部16と表示部17とが一体的になっており、表示部17において画像を表示し、入力部16において、表示部17に表示された画像に対する外部からの操作入力を受け付けることができる。
なお、入出力パネル18としては、例えば、いわゆるタッチスクリーン等を採用することができる。
記録デバイス19には、例えば、DVD(Digital Versatile Disc)等のディスクや、メモリカード等の半導体メモリその他のリムーバブルな記録媒体(図示せず)の着脱が可能になっており、記録デバイス19は、装着された記録媒体に対する画像データの記録再生制御を行う。
すなわち、記録デバイス19は、ディジタル信号処理部15からの画像データを、記録媒体に記録し、また、記録媒体に記録された画像データを読み出し、ディジタル信号処理部15に供給する。
アクチュエータ20は、レンズ部11のフォーカスレンズや絞りを調整するモータであり、モータドライブ21によって駆動される。
モータドライブ21は、CPU(Central Processing Unit)23の制御に従い、アクチュエータ20を駆動する。
TG(Timing Generator)22は、CPU23の制御に従い、露出時間等を調整するためのタイミング信号を、撮像素子12に供給する。
CPU23は、プログラムROM(Read Only Memory)26に記憶されたプログラム、さらには、必要に応じて、EEPROM(Electrically Erasable Programmable ROM)25に記憶されたプログラムを実行することにより、ディジタルカメラを構成する各ブロックを制御する。
操作部24は、ユーザによって操作される物理的なボタン等であり、ユーザの操作に対応する信号を、CPU23に供給する。
EEPROM25は、例えば、ユーザが操作部24等を操作することにより設定した撮像パラメータ等の、ディジタルカメラの電源がオフされたときにも保持する必要があるデータや、プログラムを記憶する。
プログラムROM26は、CPU23が実行するプログラム等を記憶している。
RAM27は、CPU23の動作上必要なデータやプログラムを一時記憶する。
以上のように構成されるディジタルカメラでは、CPU23が、プログラムROM26に記録されているプログラムを実行することにより、ディジタルカメラの各部を制御する。
一方、レンズ部11に入射した光は、撮像素子12において光電変換され、その結果得られる画像信号が、アナログ信号処理部13に供給される。アナログ信号処理部13では、撮像素子12からの画像信号に、アナログ信号処理が施され、A/D変換部14に供給される。
A/D変換部14では、アナログ信号処理部13からの画像信号が、A/D変換され、その結果得られるディジタルの画像データが、ディジタル信号処理部15に供給される。
ディジタル信号処理部15では、A/D変換部14からの画像データに、ディジタル信号処理が施され、入出力パネル18(の表示部17)に供給されて、対応する画像、すなわち、いわゆるスルー画が表示される。
また、CPU23は、入出力パネル18(の入力部16)や操作部24からの信号に従い、所定の処理を実行する。
すなわち、入出力パネル18や操作部24が、例えば、撮像を行うように操作されると、CPU23は、ディジタル信号処理部15を制御することにより、A/D変換部14からの画像データに、圧縮符号化処理を施させ、記録デバイス19を介して、記録媒体に記録させる。
また、入出力パネル18や操作部24が、例えば、再生を行うように操作されると、CPU23は、ディジタル信号処理部15を制御することにより、記録デバイス19を介して、記録媒体から、画像データを読み出させる。
さらに、CPU23は、ディジタル信号処理部15に、記録媒体から読み出した画像データを伸張させ、入出力パネル18に供給して表示させる。
その他、CPU23は、ディジタル信号処理部15に、フォーカスの制御に用いるフォーカス枠(AF枠)の画像を生成させ、入出力パネル18に表示させる。
なお、ディジタルカメラは、例えば、AF(Auto focus)機能、AE(Auto Exposure)機能、AWB(Auto White Balance)機能等を有しており、これらの機能は、CPU23がプログラムを実行することにより実現される。
例えば、入出力パネル18でのAF枠の表示は、AF機能によって行われる。入出力パネル18(の表示部17の表示画面)に表示されたAF枠の位置は、入出力パネル18に対する、AF枠の位置を移動するような操作によって移動することができる。また、入出力パネル18(の表示部17の表示画面)に表示されたAF枠のサイズは、入出力パネル18に対する、AF枠のサイズを変更するような操作によって変更することができる。
また、CPU23に実行させるプログラムは、例えば、リムーバブルな記録媒体からディジタルカメラにインストールすることや、ネットワークを介してダウンロードし、ディジタルカメラにインストールすることができる。
図2は、図1のディジタルカメラの外観構成例を示す斜視図である。
すなわち、図2Aは、ディジタルカメラの前面側(撮像時に被写体に向けられる側)の斜視図であり、図2Bは、ディジタルカメラの背面側の斜視図である。
レンズカバー31は、ディジタルカメラの前面を覆うように設けられており、上下に移動可能になっている。
レンズカバー31が上側に位置しているときには、レンズ部11等が覆われた状態になる。また、レンズカバー31が下側に位置しているときには、レンズ部11等が露出し、ディジタルカメラは、撮像可能な状態となる。
図2Aでは、レンズカバー31は、下側に位置しており、レンズ部11が露出している。
レンズ部11の左側には、AFイルミネータ32が設けられている。AFイルミネータ32は、例えば、被写体が暗く、AF機能によってフォーカスを合わせることが困難な場合に、被写体を照明するための光(補助光)を発する。
なお、AFイルミネータ32は、セルフタイマを使用して撮像を行う場合に、ユーザに、セルフタイマによる撮像のタイミングを知らせるために発光するセルフタイマランプとしても機能する。
ディジタルカメラの上部には、図1の操作部24を構成する電源ボタン33、再生ボタン34、シャッタボタン(レリーズボタン)35、及び、ズームレバー36が設けられている。
電源ボタン33は、ディジタルカメラの電源のオンとオフとを切り替えるときに操作され、再生ボタン34は、記録デバイス19(図1)に装着された記録媒体に記録された画像データを再生するときに操作される。
シャッタボタン(レリーズボタン)35は、記録デバイス19(図1)に装着された記録媒体に画像データを記録するときに操作され、ズームレバー36は、ズームを調整するときに操作される。
ディジタルカメラの背面には、入出力パネル18が設けられている。入出力パネル18には、スルー画等の画像が表示される。また、ユーザは、入出力パネル18に、指やタッチペン等を近接、又は、タッチすることで、ディジタルカメラに、各種の(操作)入力を与えることができる。
[表示制御装置の構成例]
図3は、表示制御を行う図1のCPU23としての表示制御装置の機能的な構成例を示すブロック図である。
ここで、図1のディジタルカメラにおいて、入出力パネル18、又は、操作部24が、記録デバイス19に装着された記録媒体に記録された画像を再生するように操作されると、CPU23は、ディジタル信号処理部15を制御し、記録デバイス19に装着された記録媒体に記録された画像を、入出力パネル18(の表示部17)に表示させる表示制御を行う。
図3は、そのような表示制御を行うCPU23としての表示制御装置の機能的な構成例を示している。
表示制御装置は、入力検出部51、拡大画像生成部52、及び、表示制御部53を有する。
入力検出部51には、入出力パネル18(の入力部16)から、その入出力パネル18(の入力部16)に対して与えられる外部からの刺激(入力)に応じた信号(以下、刺激信号ともいう)が供給される。
入力検出部51は、入出力パネル18(の入力部16)からの刺激信号に基づいて、入出力パネル18(の入力部16)に対する外部からの入力、すなわち、例えば、ユーザの指や、ユーザが扱うタッチペン等が近接、又は、タッチしたことや、その近接、又は、タッチがされた(入出力パネル18上の)位置等を検出し、入出力パネル18に対してユーザが行った操作を表す操作情報として、拡大画像生成部52、及び、表示制御部53に供給する。
拡大画像生成部52には、記録デバイス19に装着された記録媒体から、入出力パネル18(の表示部17)に表示する表示対象の表示対象画像が、ディジタル信号処理部15を介して供給される。
拡大画像生成部52は、入力検出部51からの操作情報に応じて、そこに供給される表示対象画像の一部である一部画像を拡大し、その一部画像の拡大により得られる一部拡大画像を、表示制御部53に供給する。
表示制御部53には、記録デバイス19に装着された記録媒体から、表示対象画像が、ディジタル信号処理部15を介して供給される。
表示制御部53は、そこに供給される表示対象画像のサイズを調整し、そのサイズの調整後の表示対象画像の全部、又は、一部を、ディジタル信号処理部15を介して、入出力パネル18(の表示部17)に表示する表示制御を行う。
さらに、表示制御部53は、入力検出部51からの操作情報に応じて、拡大画像生成部52からの一部拡大画像を、ディジタル信号処理部15を介して、入出力パネル18(の表示部17)に表示する表示制御を行う。
ここで、ディジタルカメラは、例えば、画像を撮像する撮像モードとして、入出力パネル18の表示部17の表示画面と(ほぼ)同一のアスペクト比の画像(以下、通常画像ともいう)を撮像する通常撮像モードと、パノラマ画像を撮像するパノラマモードとを有している。
パノラマモードでは、ユーザが、シャッタボタン35を押圧操作しながら、例えば、ディジタルカメラをパンすると、シャッタボタン35を押圧操作している間に、複数枚の画像が連続撮像される。そして、ディジタル信号処理部15において、その複数枚の画像が、パン方向に並ぶ形で位置合わせをして合成され、シャッタボタン35を押圧操作している間に行われたディジタルカメラのパンの範囲を、1回で撮像したかのような横長のパノラマ画像が生成される。
ここで、パノラマ画像の撮像(生成)は、ディジタルカメラをパンする他、チルトすることによっても行うことができる。ディジタルカメラをチルトして、パノラマ画像の撮像を行った場合、パノラマ画像は、縦長の画像となる。
表示対象画像が、通常画像である場合、表示制御部53は、その表示対象画像である通常画像のサイズを、表示部17の表示画面のサイズに調整して、そのサイズの調整後の通常画像を、入出力パネル18の表示部17に表示する。
通常画像のアスペクト比と、表示画面のアスペクト比とは、同一であるので、通常画像は、その全体が、表示画面の全体に表示される。
一方、表示対象画像が、パノラマ画像である場合、パノラマ画像のアスペクト比は、表示画面のアスペクト比と異なるため、すなわち、例えば、パノラマ画像は、表示画面に比較して横長であるため、パノラマ画像のアスペクト比を維持して、パノラマ画像の全体を、表示画面の全体に表示することはできない。
すなわち、例えば、横長のパノラマ画像のアスペクト比を維持して、そのアスペクト比と異なる表示画面に、そのパノラマ画像を表示する場合、横長のパノラマ画像の横及び縦のうちの、長い方の長手方向である横のサイズが、表示画面の横のサイズに(ほぼ)一致するように、パノラマ画像の(横及び縦の)サイズを調整して、パノラマ画像の全体を表示するか、又は、横長のパノラマ画像の横及び縦のうちの、短い方の短手方向である縦のサイズが、表示画面の縦の長さに(ほぼ)一致するように、パノラマ画像のサイズを調整して、パノラマ画像の一部を表示することになる。
ここで、横長のパノラマ画像の横(長手方向)のサイズが、表示画面の横のサイズに一致するように、パノラマ画像のサイズを調整して、そのサイズの調整後のパノラマ画像の全体を表示する表示モードを、全体表示モードという。
また、横長のパノラマ画像の縦(短手方向)のサイズが、表示画面の縦のサイズに一致するように、パノラマ画像のサイズを調整して、そのサイズの調整後のパノラマ画像の一部を表示する表示モードを、一部表示モードという。
一部表示モードには、サイズの調整後のパノラマ画像のうちの、表示画面に表示される部分を、ユーザが指示する指示モードと、サイズの調整後のパノラマ画像のうちの、表示画面に表示される部分が、そのパノラマ画像が撮像されたときのディジタルカメラの移動方向(パノラマ画像の長手方向である、例えば、パン方向等)にスクロールしていくスクロールモードとがある。
全体表示モードでは、表示画面に表示されるパノラマ画像の横のサイズは、表示画面の横のサイズに一致するが、パノラマ画像の縦のサイズは、表示画面の縦のサイズより小さいので、パノラマ画像が、表示画面に表示されたときに、表示画面の上、下、又は、上下の両方には、パノラマ画像が表示されない領域が生じ、また、表示画面に表示されるパノラマ画像は、小さくなる。
一方、一部表示モードでは、表示画面に、パノラマ画像を大きく表示することができるが、表示画面に表示することができるのは、パノラマ画像の一部だけであり、全体を表示することは、できない。
そこで、本実施の形態では、全体表示モードにおいて、表示制御部53が、表示対象画像としてのパノラマ画像の全体を、入出力パネル18の(表示部17の)表示画面に表示し、さらに、その表示対象画像の一部である一部画像を拡大した、表示画面より小さいサイズの一部拡大画像を、一部画像が表示されている位置に、全体が表示されている表示対象画像に重畳して表示する表示制御を行い、これにより、ユーザが、表示対象画像であるパノラマ画像の全体と細部との両方を、同時に確認することができるようになっている。
[全体表示モードの表示例]
図4は、全体表示モードでのパノラマ画像の表示の表示例を示す図である。
図4Aは、ユーザの指が、入出力パネル18にタッチしていない状態での、入出力パネル18の(表示部17の)表示画面の表示例を示す図である。
ユーザの指が、入出力パネル18にタッチしていない状態では、表示制御部53は、表示対象画像としての、例えば、横長のパノラマ画像の長手方向である横のサイズが、表示画面の横のサイズに一致するように、パノラマ画像のサイズを調整し、パノラマ画像の全体を表示する。
ここで、図4Aのように、パノラマ画像の全体を表示することを、全体表示ともいう。
図4B及び図4Cは、ユーザの指が、入出力パネル18にタッチしている状態での、入出力パネル18の表示画面の表示例を示す図である。
図4Bでは、ユーザの指が、入出力パネル18の表示画面の横方向のほぼ中央の位置にタッチしている。
この場合、表示制御部53は、図4Aの場合と同様に、パノラマ画像の全体表示を行う。
さらに、拡大画像生成部52は、全体表示がされているパノラマ画像の、ユーザの指がタッチしている点を中心とする、横方向(パノラマ画像の長手方向)の所定の範囲の画像を、拡大の対象とする一部画像として、その一部画像を表示画面より小さいサイズに拡大し、その結果得られる一部拡大画像を、表示制御部53に供給する。
表示制御部53は、拡大画像生成部52から供給される一部拡大画像を、表示画面の、ユーザの指がタッチしている位置、すなわち、一部画像が表示されている位置に、全体表示がされているパノラマ画像に重畳して表示する。
図4Cでは、ユーザの指が、入出力パネル18の表示画面の横方向の右側寄りの位置にタッチしている。
この場合も、図4Bの場合と同様に、表示制御部53は、パノラマ画像の全体表示を行う。
さらに、拡大画像生成部52は、全体表示がされているパノラマ画像の、ユーザの指がタッチしている点を中心とする、横方向の所定の範囲の画像を、拡大の対象とする一部画像として、その一部画像を拡大し、その結果得られる一部拡大画像を、表示制御部53に供給する。
表示制御部53は、拡大画像生成部52から供給される一部拡大画像を、表示画面の、ユーザの指がタッチしている位置、すなわち、一部画像が表示されている位置に、全体表示がされているパノラマ画像に重畳して表示する。
したがって、ユーザが、指で、パノラマ画像の全体表示がされている表示画面の長手方向のほぼ中央の位置にタッチすると、図4Bに示したように、全体表示がされているパノラマ画像の、ユーザの指がタッチしている点を中心とする、横方向の所定の範囲の画像(一部画像)を拡大した一部拡大画像が、ユーザの指がタッチしている位置に、全体表示がされているパノラマ画像に重畳して表示される。
そして、例えば、ユーザが、指を、入出力パネル18にタッチした状態で、横方向に移動すると、全体表示がされているパノラマ画像の、移動している指の位置を中心とする、横方向の所定の範囲の一部画像を拡大した一部拡大画像が、移動している指を追従するように、全体表示がされているパノラマ画像に重畳して表示される。
以上のように、パノラマ画像が全体表示されるとともに、その全体表示がされたパノラマ画像の一部である一部画像が拡大された一部拡大画像が表示されるので、ユーザは、パノラマ画像の全体と細部との両方を、同時に確認することができる。
また、一部画像を拡大した一部拡大画像が、全体表示がされたパノラマ画像の一部画像の位置に重畳されて表示されるので、一部拡大画像に映っている被写体の、パノラマ画像の全体の中での位置を、容易に把握することができる。
さらに、ユーザは、全体表示がされたパノラマ画像の細部を確認したい部分にタッチするだけで、その部分の細部を確認することができる。
また、ユーザが、全体表示がされたパノラマ画像上の任意の位置に、指をタッチすると、そのタッチした位置に、タッチがされた部分の一部拡大画像が表示され、指をタッチしたまま位置を移動すると、指の移動に追従して、指の位置に映っている被写体が映った一部拡大画像が移動していく、という直感的に分かりやすいユニークなインターフェースを提供することができる。
なお、一部拡大画像の表示は、表示画面に全体表示されたパノラマ画像上にタッチがされた場合の他、パノラマ画像が表示された表示画面上の、パノラマ画像が表示されていない部分にタッチがされた場合にも行うことが可能である。
すなわち、横長のパノラマ画像の縦(短手方向)のサイズは、表示画面の縦のサイズより小さいため、そのようなパノラマ画像の全体表示では、例えば、図4に示したように、パノラマ画像は、表示画面の縦方向の中央の位置に表示され、表示画面の、パノラマ画像の上下には、いわゆる黒帯が表示される。
一部拡大画像の表示は、表示画面に表示されたパノラマ画像上にタッチがされた場合の他、表示画面に表示された黒帯上にタッチがされた場合にも行うことが可能である。
すなわち、タッチがされた表示画面上の位置から、長手方向の座標が所定の範囲のパノラマ画像の部分を、一部拡大画像に拡大する一部画像とすることにより、表示画面上のどの位置がタッチされても、一部拡大画像を表示することができる。
また、一部拡大画像の表示は、ユーザの指やタッチペン等が、表示画面にタッチした場合ではなく、近接した場合に行うことが可能である。
すなわち、入出力パネル18において、表示画面へのタッチの他、近接を検知することができる場合には、表示画面への近接及びタッチのいずれをも、一部拡大画像を表示するトリガとして採用することや、表示画面への近接を、一部拡大画像を表示するトリガとして採用し、表示画面へのタッチを、その他の処理を行うトリガとして採用することができる。
図5は、全体表示モードでのパノラマ画像、及び、一部拡大画像の表示の例を説明する図である。
全体表示モードでは、図3及び図4で説明したように、表示制御部53が、表示対象画像としての、例えば、横長のパノラマ画像の横(長手方向)のサイズが、表示画面の横のサイズに一致するように、パノラマ画像のサイズを調整して、サイズの調整後のパノラマ画像の全体を、表示画面の短手方向の中央の位置に表示する全体表示を行う。
したがって、表示対象画像としての横長のパノラマ画像は、長手方向である横の端部が、表示画面の端部に一致するサイズで表示される。
いま、全体表示がされている横長のパノラマ画像の短手方向である縦方向のサイズを、Hとする。
また、表示対象画像としての横長のパノラマ画像の長手方向である横方向の表示画面のサイズを、nとし、表示対象画像としての横長のパノラマ画像の短手方向である縦方向の表示画面のサイズを、mとする。
さらに、表示画面の左下の点を原点とし、表示画面に表示された表示対象画像としての横長のパノラマ画像の長手方向である横方向のx軸と、短手方向である縦方向のy軸との2軸で定義される2次元座標系において、ユーザの指等がタッチ(、又は、近接)している点である指示点Pのx座標(表示対象画像の長手方向の座標)を、Xとする。
また、2倍した値が、表示対象画像としてのパノラマ画像の長手方向(図5では、x方向)の表示画面のサイズnより小さい正の値を、aとする。
この場合、図3の表示制御装置では、拡大画像生成部52は、入力検出部51からの操作情報から、指示点Pのx座標Xを認識し、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲を、一部拡大画像に拡大する一部画像として、その一部拡大画像を、横(長手方向)×縦(短手方向)が2a×mのサイズの一部拡大画像に拡大する。
すなわち、拡大画像生成部52は、拡大後の縦方向(表示対象画像の短手方向)のサイズが、表示画面の縦方向(表示対象画像の短手方向)のサイズmに一致するように、一部画像の(横及び縦の)サイズを、m/H倍に拡大することにより、2a×mのサイズの一部拡大画像を生成する。
一部拡大画像は、拡大画像生成部52から表示制御部53に供給され、表示制御部53は、拡大画像生成部52からの2a×mのサイズの一部拡大画像(の全体)を、表示画面の、x座標(長手方向の座標)がX-aからX+aまでの範囲(の全体)に表示する。
なお、ここでは、一部拡大画像の縦方向(y方向)のサイズは、表示画面の縦方向のサイズmに等しいので、一部拡大画像は、縦方向については、表示画面の、y座標が0からmまでの範囲に表示される。
以上のように、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲を拡大した2a×mのサイズの一部拡大画像を、表示画面の、x座標がX-aからX+aまでの範囲に表示する場合には、指示点Pのx座標Xが、a以上n-a以下であれば、2a×mのサイズの一部拡大画像の全体が、表示画面に表示される。
しかしながら、指示点Pのx座標Xが、a未満であるときには、2a×mのサイズの一部拡大画像は、その左側の一部が欠けた状態で、表示画面に表示される。
また、指示点Pのx座標Xが、n-aより大であるときには、2a×mのサイズの一部拡大画像は、その右側の一部が欠けた状態で、表示画面に表示される。
そこで、表示制御部53は、指示点Pのx座標Xが、aより大きく、かつ、n-aより小さい場合には、上述したように、2a×mのサイズの一部拡大画像を、表示画面の、x座標がX-aからX+aまでの範囲に表示するが、指示点Pのx座標Xが、a以下である場合には、2a×mのサイズの一部拡大画像を、表示画面の、x座標が0から2aまでの範囲に表示し、指示点Pのx座標Xが、n-a以上である場合には、2a×mのサイズの一部拡大画像を、表示画面の、x座標がn-2aからnまでの範囲に表示する。
ここで、図5Aは、指示点Pのx座標Xが、aより大きく、かつ、n-aより小さく、2a×mのサイズの一部拡大画像が、表示画面の、x座標がX-aからX+aまでの範囲に表示される様子を示している。
また、図5Bは、指示点Pのx座標Xが、a以下であり、2a×mのサイズの一部拡大画像が、表示画面の、x座標が0から2aまでの範囲に表示される様子を示している。
さらに、図5Cは、指示点Pのx座標Xが、n-a以上であり、2a×mのサイズの一部拡大画像が、表示画面の、x座標がn-2aからnまでの範囲に表示される様子を示している。
以上のように、指示点Pのx座標Xが、aより大きく、かつ、n-aより小さい場合には、表示画面の、x座標がX-aからX+aまでの範囲に、指示点Pのx座標Xが、a以下である場合には、表示画面の、x座標が0から2aまでの範囲に、指示点Pのx座標Xが、n-a以上である場合には、表示画面の、x座標がn-2aからnまでの範囲に、2a×mのサイズの一部拡大画像を、それぞれ表示することにより、一部拡大画像が、その左側や右側が欠けて表示されることを防止することができる。
なお、上述したように、拡大画像生成部52は、入力検出部51からの操作情報から、指示点Pのx座標Xを認識し、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲を、一部拡大画像に拡大する一部画像として、その一部拡大画像を、2a×mのサイズの一部拡大画像に拡大するが、この場合、指示点Pのx座標Xが、a×H/mより小さいときや、n-a×H/mより大きいときに、一部画像となるx座標がX-a×H/mからX+a×H/mまでの範囲が、全体表示がされた表示対象画像としてのパノラマ画像の左側や右側にはみ出す。
一部画像となるx座標がX-a×H/mからX+a×H/mまでの範囲が、全体表示がされた表示対象画像としてのパノラマ画像の左側や右側にはみ出すと、そのような一部画像を2a×mのサイズに拡大した一部拡大画像の左側や右側は、いわば空白となる。
そこで、拡大画像生成部52は、指示点Pのx座標Xが、a×H/mより大きくないときには、そのx座標Xを、a×H/mに補正し、指示点Pのx座標Xが、n-a×H/mより小さくないときには、そのx座標Xを、n-a×H/mに補正する。
そして、拡大画像生成部52は、指示点Pのx座標Xの補正後に、その補正後のx座標Xに基づき、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲を、一部拡大画像に拡大する一部画像として、その一部拡大画像を、2a×mのサイズの一部拡大画像に拡大する。
以上のように、指示点Pのx座標Xを補正することにより、一部画像となるx座標がX-a×H/mからX+a×H/mまでの範囲が、全体表示がされた表示対象画像としてのパノラマ画像の左側や右側にはみ出すこと、ひいては、一部画像を2a×mのサイズに拡大した一部拡大画像の左側や右側に空白が生じることを防止することができる。
なお、上述の指示点Pのx座標Xの補正によれば、指示点Pのx座標Xが、a×H/mより大きく、かつ、n-a×H/mより小さい範囲で、表示画面にタッチしている指を動かしている間は、指の位置、つまり、指示点Pのx座標Xに応じて、一部拡大画像(に映る被写体)が変化する。
すなわち、入出力パネル18の表示画面では、指示点Pのx座標Xに応じて、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲を拡大した一部拡大画像が表示される。
そして、表示画面にタッチしている指を、例えば、左側に移動していき、その結果、指示点Pのx座標Xが、a×H/mになった場合、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲、つまり、0から2×a×H/mまでの範囲を拡大した一部拡大画像が表示され、その後は、指を、より左側に移動しても、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、0から2×a×H/mまでの範囲を拡大した一部拡大画像が表示し続けられる。
一方、表示画面にタッチしている指を、例えば、右側に移動していき、その結果、指示点Pのx座標Xが、n-a×H/mになった場合、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲、つまり、n-2×a×H/mからnまでの範囲を拡大した一部拡大画像が表示され、その後は、指を、より右側に移動しても、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、n-2×a×H/mからnまでの範囲を拡大した一部拡大画像が表示し続けられる。
ここで、図5では、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲の画像である一部画像を、m/H倍に拡大して、一部拡大画像を生成することとしたが、一部画像を拡大する倍率は、その他、例えば、ユーザの操作に応じて設定することができる。
なお、一部画像を拡大する倍率として、m/H倍より大の値を採用する場合には、一部画像を拡大した一部拡大画像は、その全体を、表示画面に表示することができなくなる。
また、一部拡大画像の横方向のサイズ(表示対象画像の長手方向の一部拡大画像のサイズ)2a(ひいては、正の整数a)としては、表示画面の横方向のサイズより小さい正の値を、例えば、あらかじめ設定しておくこともできるし、ユーザの操作等に応じて設定することもできる。
[全体表示モードの表示制御処理]
図6は、図3の表示制御装置が行う全体表示モードの表示制御処理を説明するフローチャートである。
ステップS11において、表示制御部53は、表示対象画像の長手方向のサイズが、その長手方向の表示画面のサイズに一致するように、表示対象画像のサイズを調整し、そのサイズの調整後の表示対象画像の全体を、入出力パネル18の表示画面に表示する全体表示を行い、処理は、ステップS12に進む。
ステップS12では、表示制御部53は、表示対象画像のアスペクト比と、入出力パネル18の表示画面のアスペクト比とが異なるかどうかを判定する。
ステップS12において、表示対象画像のアスペクト比と、入出力パネル18の表示画面のアスペクト比とが異ならないと判定された場合、すなわち、表示対象画像のアスペクト比と、入出力パネル18の表示画面のアスペクト比とが(ほぼ)一致する場合、処理は、ステップS11に戻り、以下、同様の処理が繰り返される。
また、ステップS12において、表示対象画像のアスペクト比と、入出力パネル18の表示画面のアスペクト比とが異なると判定された場合、すなわち、例えば、入出力パネル18の表示画面のアスペクト比が、4:3や16:9であり、表示対象画像が、表示画面より横長のパノラマ画像である場合、処理は、ステップS13に進み、拡大画像生成部52は、入力検出部51から供給される操作情報に基づき、入出力パネル18の表示画面に、タッチがされているかどうかを判定する。
ステップS13において、入出力パネル18の表示画面に、タッチがされていないと判定された場合、処理は、ステップS11に戻る。
また、ステップS13において、入出力パネル18の表示画面に、タッチがされていると判定された場合、すなわち、入力検出部51において、入出力パネル18に対するタッチが検出された場合、処理は、ステップS14に進み、拡大画像生成部52及び表示制御部53は、入力検出部51から供給される操作情報に基づき、タッチがされている表示画面上の位置(点)である指示点Pを認識し、処理は、ステップS15に進む。
ここで、図6において、以下では、説明を簡単にするために、表示対象画像が、例えば、横長のパノラマ画像であることとする。
ステップS15では、拡大画像生成部52及び表示制御部53は、指示点Pのx座標(表示対象画像としての横長のパノラマ画像の長手方向の座標)Xが、aより大きく、かつ、n-aより小さいかどうかを判定する。
ステップS15において、指示点Pのx座標Xが、aより大きく、かつ、n-aより小さいと判定された場合、処理は、ステップS16に進み、拡大画像生成部52は、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標(長手方向の座標)が、X-a×H/mからX+a×H/mまでの範囲を、一部拡大画像に拡大する一部画像として、その一部画像を、2a×mのサイズの一部拡大画像に拡大する。
そして、拡大画像生成部52は、一部拡大画像を、表示制御部53に供給して、処理は、ステップS16からステップS17に進む。
ステップS17では、表示制御部53は、拡大画像生成部52からの2a×mのサイズの一部拡大画像を、表示画面の、x座標(長手方向の座標)がX-aからX+aまでの範囲に、表示対象画像に重畳して(例えば、上書きする形で)表示し、処理は、ステップS13に戻る。
また、ステップS15において、指示点Pのx座標Xが、aより大きくないか、又は、n-aより小さくないと判定された場合、処理は、ステップS18に進み、拡大画像生成部52及び表示制御部53は、指示点Pのx座標Xが、a以下であるかどうかを判定する。
ステップS18において、指示点Pのx座標Xが、a以下であると判定された場合、処理は、ステップS19に進み、拡大画像生成部52は、指示点Pのx座標Xが、a×H/mより大きいかどうかを判定する。
ステップS19において、指示点Pのx座標Xが、a×H/mより大きくないと判定された場合、処理は、ステップS20に進み、拡大画像生成部52は、指示点Pのx座標Xを、a×H/mに補正し、処理は、ステップS21に進む。
また、ステップS19において、指示点Pのx座標Xが、a×H/mより大きいと判定された場合、処理は、ステップS20をスキップして、ステップS21に進み、拡大画像生成部52は、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲を、一部拡大画像に拡大する一部画像として、その一部画像を、2a×mのサイズの一部拡大画像に拡大する。
そして、拡大画像生成部52は、一部拡大画像を、表示制御部53に供給して、処理は、ステップS21からステップS22に進む。
ステップS22では、表示制御部53は、拡大画像生成部52からの2a×mのサイズの一部拡大画像を、表示画面の、x座標が0から2aまでの範囲に、表示対象画像に重畳して表示し、処理は、ステップS13に戻る。
一方、ステップS18において、指示点Pのx座標Xが、a以下でないと判定された場合、処理は、ステップS23に進み、拡大画像生成部52及び表示制御部53は、指示点Pのx座標Xが、n-a以上であるかどうかを判定する。
ステップS23において、指示点Pのx座標Xが、n-a以上でないと判定された場合、処理は、ステップS13に戻る。
また、ステップS23において、指示点Pのx座標Xが、n-a以上であると判定された場合、処理は、ステップS24に進み、拡大画像生成部52は、指示点Pのx座標Xが、n-a×H/mより小さいかどうかを判定する。
ステップS24において、指示点Pのx座標Xが、n-a×H/mより小さくないと判定された場合、処理は、ステップS25に進み、拡大画像生成部52は、指示点Pのx座標Xを、n-a×H/mに補正し、処理は、ステップS26に進む。
また、ステップS24において、指示点Pのx座標Xが、n-a×H/mより小さいと判定された場合、処理は、ステップS25をスキップして、ステップS26に進み、拡大画像生成部52は、全体表示がされた表示対象画像としてのパノラマ画像のうちの、x座標が、X-a×H/mからX+a×H/mまでの範囲を、一部拡大画像に拡大する一部画像として、その一部画像を、2a×mのサイズの一部拡大画像に拡大する。
そして、拡大画像生成部52は、一部拡大画像を、表示制御部53に供給して、処理は、ステップS26からステップS27に進む。
ステップS27では、表示制御部53は、拡大画像生成部52からの2a×mのサイズの一部拡大画像を、表示画面の、x座標がn-2aからnまでの範囲に、表示対象画像に重畳して表示し、処理は、ステップS13に戻る。
[他の表示例]
上述したように、入出力パネル18において、表示画面へのタッチの他、近接を検知することができる場合には、表示制御装置(図3)では、表示画面への近接を、一部拡大画像を表示するトリガとして採用し、表示画面へのタッチを、その他の処理を行うトリガとして採用することができる。
すなわち、表示制御装置(図3)では、例えば、表示画面への近接を、一部拡大画像を表示するトリガとして採用し、表示画面へのタッチを、スクロール表示を行うトリガとして採用することができる。
そこで、まず、スクロール表示を行うスクロールモードについて説明する。
図7は、スクロールモードでの、表示対象画像の表示、すなわち、表示対象画像をスクロールしながら表示するスクロール表示の例を示す図である。
スクロールモードでは、表示制御部53(図3)は、表示対象画像としての、例えば、横長のパノラマ画像の縦(短手方向)のサイズが、表示画面の縦のサイズに一致するように、表示対象画像のサイズを調整して、そのサイズの調整後の表示対象画像(以下、調整後画像ともいう)のうちの、表示画面に表示される表示範囲を、表示対象画像としてのパノラマ画像の撮像が行われたときのディジタルカメラの移動方向と同一の方向に移動させていく。
すなわち、表示対象画像としてのパノラマ画像の撮像が、ディジタルカメラを、例えば、左から右にパンしながら行われた場合には、調整後画像の左端を始点とするとともに、右端を終点として、表示範囲が移動されていく。
その結果、表示画面には、先頭(ここでは、左端)から右方向にスクロールされていく調整後画像が表示される。
以上のように、スクロールモードでは、調整後画像(表示対象画像)のスクロールが、その調整後画像の先頭(ここでは、左端側)から開始される。
表示画面への近接を、一部拡大画像を表示するトリガとして採用し、表示画面へのタッチを、スクロール表示を行うトリガとして採用する場合には、表示制御部53(図3)において、スクロールは、上述のように、調整後画像の先頭から開始することができる他、タッチがされた位置から開始することができる。
すなわち、図8は、表示画面への近接を、一部拡大画像を表示するトリガとして採用し、表示画面へのタッチを、スクロール表示を行うトリガとして採用する場合の表示画面の表示例を示す図である。
図8Aは、全体表示モードにおいて、表示対象画像としてのパノラマ画像が、全体表示され、さらに、指が表示画面に近接されることによって、その近接している位置に表示されているパノラマ画像の一部である一部画像が拡大された一部拡大画像が表示されている様子を示している。
図8Bは、図8Aに示したように、表示画面に近接した状態の指で、表示画面にタッチした場合の、そのタッチの直後の表示画面を示している。
表示画面に近接した状態の指で、表示画面にタッチがされた場合、表示画面には、調整後画像のうちの、タッチがされたときに表示されていた一部拡大画像に対応する部分が、スクロールの開始点として表示される。
図8Cは、調整後画像のうちの、タッチがされたときに表示されていた一部拡大画像に対応する部分を、スクロールの開始点として行われるスクロール表示を示している。
表示画面への近接を、一部拡大画像を表示するトリガとして採用し、表示画面へのタッチを、スクロール表示を行うトリガとして採用する場合、スクロールは、調整後画像の先頭からではなく、タッチがされた位置、すなわち、タッチがされたときに表示されていた一部拡大画像に対応する部分から開始される。
図8Cでは、調整後画像の、タッチがされたときに表示されていた一部拡大画像に対応する部分から、右方向へのスクロール(表示範囲の右方向への移動)が開始されている。
スクロールは、表示範囲が、調整後画像の最後(ここでは、右端)に到達したときに終了する。
図8Cでは、タッチがされたときの時刻tをt1として、所定の時間Tだけかけて、調整後画像の、タッチがされたときに表示されていた一部拡大画像に対応する部分から、調整後画像の最後までのスクロールが行われており、時刻t=t1+Tにおいて、スクロールが終了している。
なお、図8では、表示制御部53において、表示画面に対する近接が検出された場合に、一部拡大画像を表示し、その後、表示画面に対するタッチが検出された場合に、表示対象画像のサイズを調整した調整後画像を、表示対象画像の長手方向にスクロールして表示するスクロール表示を、調整後画像の、タッチがされた点に対応する位置から開始することとしたが、その他、表示制御部53では、表示画面に対するタッチが検出された場合に、一部拡大画像を表示し、その後、表示画面に対するタッチが解除された場合に、表示対象画像のサイズを調整した調整後画像を、表示対象画像の長手方向にスクロールして表示するスクロール表示を、調整後画像の、タッチが解除された点に対応する位置から開始すること、つまり、表示画面へのタッチを、一部拡大画像を表示するトリガとして採用し、表示画面に対するタッチの解除を、スクロール表示を行うトリガとして採用することができる。
図9は、全体表示モードでのパノラマ画像の表示の他の表示例を示す図である。
図4では、表示対象画像が、横長のパノラマ画像であることとしたが、図9では、表示対象画像が、縦長のパノラマ画像になっている。
図9Aは、ユーザの指が、入出力パネル18にタッチしていない状態での、入出力パネル18の(表示部17の)表示画面の表示例を示す図である。
ユーザの指が、入出力パネル18にタッチしていない状態では、表示制御部53は、表示対象画像としての、縦長のパノラマ画像の長手方向である縦のサイズが、表示画面の縦(パノラマ画像の長手方向)のサイズに一致するように、パノラマ画像のサイズを調整し、パノラマ画像の全体を表示する(全体表示)。
図9Bは、ユーザの指が、入出力パネル18にタッチしている状態での、入出力パネル18の表示画面の表示例を示す図である。
図9Bでは、ユーザの指が、入出力パネル18の表示画面の縦方向のほぼ中央の位置にタッチしている。
この場合、表示制御部53は、図9Aの場合と同様に、パノラマ画像の全体表示を行う。
また、拡大画像生成部52は、全体表示がされているパノラマ画像の、ユーザの指がタッチしている点を中心とする、縦方向(パノラマ画像の長手方向)の所定の範囲の画像を、拡大の対象とする一部画像として、その一部画像を拡大し、その結果得られる一部拡大画像を、表示制御部53に供給する。
表示制御部53は、拡大画像生成部52から供給される一部拡大画像を、表示画面の、ユーザの指がタッチしている位置、すなわち、一部画像が表示されている位置に、全体表示がされているパノラマ画像に重畳して表示する。
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
すなわち、本発明は、ディジタルカメラの他、画像を表示する装置に適用可能である。
また、本発明は、静止画、及び、動画の表示のいずれにも適用可能である。
さらに、本実施の形態では、表示画面上の、ユーザの指等がタッチ、又は、近接している点を、指示点Pとして採用したが、指示点Pは、その他、例えば、マウス等のポインティングデバイスによって与えることが可能である。
11 レンズ部, 12 撮像素子, 13 アナログ信号処理部, 14 A/D変換部, 15 ディジタル信号処理部, 16 入力部, 17 表示部, 18 入出力パネル, 19 記録デバイス, 20 アクチュエータ, 21 モータドライブ, 22 TG, 23 CPU, 24 操作部, 25 EEPROM, 26 プログラムROM, 27 RAM, 31 レンズカバー, 32 AFイルミネータ, 33 電源ボタン, 34 再生ボタン, 35 シャッタボタン, 36 ズームレバー, 51 入力検出部, 52 拡大画像生成部, 53 表示制御部

Claims (15)

  1. 画像を表示する表示装置の表示領域のアスペクト比と異なる表示対象の表示対象画像の全体を、前記表示領域に表示制御している状態で受け付けられた、前記表示対象画像の一部の範囲を指定する第1のユーザ指示に基づいて、
    前記一部の範囲の画像を拡大した一部拡大画像を、前記表示対象画像との位置関係を合わせた状態で、前記表示対象画像と同時前記表示領域に表示させる第1の表示制御を行うとともに、
    前記第1の表示制御を行っている状態で受け付けられた、前記表示対象画像のスクロール表示の開始を指定する第2のユーザ指示に基づいて、前記表示対象画像のスクロール表示をスクロール表示開始位置から開始する第2の表示制御を行う
    表示制御手段を備え
    前記第2のユーザ指示が、前記スクロール表示開始位置の指示を兼ねる
    表示制御装置。
  2. 前記第1のユーザ指示が、前記表示領域に対する物体の近接であり、
    前記第2のユーザ指示が、前記表示領域のユーザが所望する位置に対するタッチである
    請求項1に記載の表示制御装置。
  3. 前記第1のユーザ指示が、前記表示対象画像のユーザが所望する位置に対するタッチであり、
    前記第2のユーザ指示が、前記タッチの解除である
    請求項1に記載の表示制御装置。
  4. 前記表示制御手段は、前記表示対象画像が、前記表示領域に応じてサイズが調整された画像に対して前記第1の表示制御及び前記第2の表示制御を行う
    請求項1乃至3のいずれかに記載の表示制御装置。
  5. 前記表示制御手段は、前記第1の表示制御として、前記一部拡大画像を前記表示対象画像に重畳させる
    請求項1乃至4のいずれかに記載の表示制御装置。
  6. 画像を表示する表示装置の表示領域のアスペクト比と異なる表示対象の表示対象画像の全体を、前記表示領域に表示制御している状態で受け付けられた、前記表示対象画像の一部の範囲を指定する第1のユーザ指示に基づいて、
    前記一部の範囲の画像を拡大した一部拡大画像を、前記表示対象画像との位置関係を合わせた状態で、前記表示対象画像と同時前記表示領域に表示させる第1の表示制御を行うとともに、
    前記第1の表示制御を行っている状態で受け付けられた、前記表示対象画像のスクロール表示の開始を指定する第2のユーザ指示に基づいて、前記表示対象画像のスクロール表示をスクロール表示開始位置から開始する第2の表示制御を行う
    ステップを含み、
    前記第2のユーザ指示が、前記スクロール表示開始位置の指示を兼ねる
    表示制御方法。
  7. 前記第1のユーザ指示が、前記表示領域に対する物体の近接であり、
    前記第2のユーザ指示が、前記表示領域のユーザが所望する位置に対するタッチである
    請求項6に記載の表示制御方法。
  8. 前記第1のユーザ指示が、前記表示対象画像のユーザが所望する位置に対するタッチであり、
    前記第2のユーザ指示が、前記タッチの解除である
    請求項6に記載の表示制御方法。
  9. スクロール表示するのは、スクロール方向が前記表示領域よりサイズが大きい調整後画像である
    請求項6乃至8のいずれかに記載の表示制御方法。
  10. 前記第1の表示制御時に、前記一部拡大画像を前記表示対象画像に重畳する
    請求項6乃至9のいずれかに記載の表示制御方法。
  11. 画像を表示する表示装置の表示領域のアスペクト比と異なる表示対象の表示対象画像の全体を、前記表示領域に表示制御している状態で受け付けられた、前記表示対象画像の一部の範囲を指定する第1のユーザ指示に基づいて、前記一部の範囲の画像を拡大した一部拡大画像を、前記表示対象画像との位置関係を合わせた状態で、前記表示対象画像と同時前記表示領域に表示させる第1の表示制御を行うとともに、前記第1の表示制御を行っている状態で受け付けられた、前記表示対象画像のスクロール表示の開始を指定する第2のユーザ指示に基づいて、前記表示対象画像のスクロール表示をスクロール表示開始位置から開始する第2の表示制御を行う表示制御手段
    として、コンピュータを機能させ
    前記第2のユーザ指示が、前記スクロール表示開始位置の指示を兼ねる
    プログラム。
  12. 前記第1のユーザ指示が、前記表示領域に対する物体の近接であり、
    前記第2のユーザ指示が、前記表示領域のユーザが所望する位置に対するタッチである
    請求項11に記載のプログラム。
  13. 前記第1のユーザ指示が、前記表示対象画像のユーザが所望する位置に対するタッチであり、
    前記第2のユーザ指示が、前記タッチの解除である
    請求項11に記載のプログラム。
  14. スクロール表示するのは、スクロール方向が前記表示領域よりサイズが大きい調整後画像である
    請求項11乃至13のいずれかに記載のプログラム。
  15. 前記第1の表示制御時に、前記一部拡大画像を前記表示対象画像に重畳する
    請求項11乃至14のいずれかに記載のプログラム。
JP2010284321A 2010-12-21 2010-12-21 表示制御装置、表示制御方法、及び、プログラム Active JP5686244B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2010284321A JP5686244B2 (ja) 2010-12-21 2010-12-21 表示制御装置、表示制御方法、及び、プログラム
EP20110189106 EP2469838A2 (en) 2010-12-21 2011-11-15 Display control device, display control method, and program
US13/314,486 US10218897B2 (en) 2010-12-21 2011-12-08 Display control device and method to display a panoramic image
CN2011104129287A CN102547115A (zh) 2010-12-21 2011-12-13 显示控制装置、显示控制方法和程序
US16/259,332 US10469737B2 (en) 2010-12-21 2019-01-28 Display control device and display control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010284321A JP5686244B2 (ja) 2010-12-21 2010-12-21 表示制御装置、表示制御方法、及び、プログラム

Publications (3)

Publication Number Publication Date
JP2012133085A JP2012133085A (ja) 2012-07-12
JP2012133085A5 JP2012133085A5 (ja) 2014-02-06
JP5686244B2 true JP5686244B2 (ja) 2015-03-18

Family

ID=45092222

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010284321A Active JP5686244B2 (ja) 2010-12-21 2010-12-21 表示制御装置、表示制御方法、及び、プログラム

Country Status (4)

Country Link
US (2) US10218897B2 (ja)
EP (1) EP2469838A2 (ja)
JP (1) JP5686244B2 (ja)
CN (1) CN102547115A (ja)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101402622B1 (ko) * 2009-07-01 2014-06-09 삼성전자주식회사 영상표시장치 및 영상표시방법
JP5686244B2 (ja) 2010-12-21 2015-03-18 ソニー株式会社 表示制御装置、表示制御方法、及び、プログラム
KR101867051B1 (ko) * 2011-12-16 2018-06-14 삼성전자주식회사 촬상장치, 촬상 구도 제공 방법 및 컴퓨터 판독가능 기록매체
JP2015156051A (ja) * 2012-06-06 2015-08-27 ソニー株式会社 画像処理装置、画像処理方法、プログラム
JP2014165763A (ja) * 2013-02-26 2014-09-08 Ricoh Co Ltd 編集装置、編集方法、及び編集プログラム
CN103226806B (zh) * 2013-04-03 2016-08-10 广东欧珀移动通信有限公司 一种图片局部放大的方法及相机系统
WO2014178235A1 (ja) * 2013-04-30 2014-11-06 ソニー株式会社 画像処理装置、画像処理方法、プログラム
CN110401795A (zh) * 2013-04-30 2019-11-01 索尼公司 图像处理装置、图像处理方法和程序
JP6024606B2 (ja) * 2013-07-02 2016-11-16 富士ゼロックス株式会社 画像形成装置、情報処理装置、プログラム
JP6115774B2 (ja) * 2013-07-11 2017-04-19 フリュー株式会社 画像編集装置、画像編集方法、およびプログラム
JP2015060189A (ja) * 2013-09-20 2015-03-30 カシオ計算機株式会社 楽譜表示装置、楽譜表示方法及びプログラム
JP6071866B2 (ja) * 2013-12-18 2017-02-01 キヤノン株式会社 表示制御装置、表示装置、撮像システム、表示制御方法、及びプログラム
US9307138B2 (en) * 2014-04-22 2016-04-05 Convexity Media, Inc. Focusing system for motion picture camera
FR3020884B1 (fr) * 2014-05-12 2016-06-03 Morpho Procede d'affichage d'images
US10043236B2 (en) * 2014-05-20 2018-08-07 Olympus Corporation Display device and display method
US10516829B2 (en) * 2014-05-22 2019-12-24 Lg Electronics Inc. Mobile terminal and method for controlling same
JP6165681B2 (ja) * 2014-06-27 2017-07-19 富士フイルム株式会社 画像表示装置及び画像表示方法
JP6628389B2 (ja) * 2014-11-26 2020-01-08 国立研究開発法人 海上・港湾・航空技術研究所 操船支援システム及びそのシステムを搭載した船舶
WO2016168976A1 (en) * 2015-04-20 2016-10-27 SZ DJI Technology Co., Ltd. Imaging system
CN105162954B (zh) * 2015-07-30 2018-11-20 努比亚技术有限公司 内嵌图片放大方法、装置及移动终端
CN105094614B (zh) * 2015-08-08 2018-04-10 北京奇虎科技有限公司 图像显示方法及装置
WO2017056942A1 (ja) * 2015-09-30 2017-04-06 富士フイルム株式会社 画像処理装置及び撮像装置及び画像処理方法及びプログラム
JP6829015B2 (ja) * 2016-06-23 2021-02-10 マクセル株式会社 携帯端末
JP7031228B2 (ja) * 2017-10-26 2022-03-08 株式会社リコー プログラム、画像表示方法、画像表示システム、情報処理装置
CN108510457B (zh) * 2018-03-28 2022-01-14 京东方科技集团股份有限公司 图像矫正方法、装置、显示设备
CN110709813A (zh) * 2018-06-29 2020-01-17 深圳市大疆创新科技有限公司 一种图像显示方法、设备、云台及存储介质
US11683464B2 (en) 2018-12-28 2023-06-20 Canon Kabushiki Kaisha Electronic device, control method, and non-transitorycomputer readable medium
JP7378243B2 (ja) * 2019-08-23 2023-11-13 キヤノン株式会社 画像生成装置、画像表示装置および画像処理方法
CN111061531B (zh) * 2019-12-10 2022-07-15 维沃移动通信有限公司 一种图片显示方法及电子设备
US11699001B2 (en) * 2020-10-13 2023-07-11 Flyreel, Inc. Generating measurements of physical structures and environments through automated analysis of sensor data
CN113873201B (zh) * 2021-09-27 2023-09-15 北京环境特性研究所 一种超视距制高点反向观察系统及方法

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3303143B2 (ja) * 1992-03-11 2002-07-15 コニカ株式会社 光ディスク用画像記録装置
US5467441A (en) * 1993-07-21 1995-11-14 Xerox Corporation Method for operating on objects in a first image using an object-based model data structure to produce a second contextual image having added, replaced or deleted objects
US5854629A (en) * 1996-12-31 1998-12-29 International Business Machine Corporation Enhanced scrolling technique for context menus in graphical user interfaces
JPH11355617A (ja) * 1998-06-05 1999-12-24 Fuji Photo Film Co Ltd 画像表示器付きカメラ
JP2000152168A (ja) 1998-11-13 2000-05-30 Olympus Optical Co Ltd 画像再生装置
US6769131B1 (en) * 1999-11-18 2004-07-27 Canon Kabushiki Kaisha Image processing apparatus and method, image distribution system and storage medium
US20070072233A1 (en) * 2001-05-01 2007-03-29 Levitt Pat R Methods and systems for facilitating the diagnosis and treatment of schizophrenia
AU2003303787A1 (en) * 2003-01-22 2004-08-13 Nokia Corporation Image control
JP2005123707A (ja) * 2003-10-14 2005-05-12 Casio Comput Co Ltd 撮像投影装置及び撮像投影システムと、表示画像生成装置、表示画像生成方法
JP4882319B2 (ja) * 2005-09-08 2012-02-22 パナソニック株式会社 情報表示装置
CN100498929C (zh) * 2005-09-29 2009-06-10 佳能株式会社 图像显示装置和图像显示方法
JP2007121378A (ja) * 2005-10-25 2007-05-17 Sharp Corp 映像表示装置
WO2007049449A1 (ja) * 2005-10-26 2007-05-03 Matsushita Electric Industrial Co., Ltd. 映像再生装置および映像記録装置、映像再生方法および映像記録方法並びに半導体集積回路
JP4815271B2 (ja) * 2006-05-26 2011-11-16 オリンパスイメージング株式会社 画像表示装置、カメラ及び画像表示制御プログラム
CN101101747A (zh) * 2006-07-03 2008-01-09 日本电脑连合股份有限公司 便携终端装置以及其显示控制方法
US8564543B2 (en) * 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US7810044B2 (en) * 2007-04-30 2010-10-05 Hewlett-Packard Development Company, L.P. Electronic device display adjustment interface
JP4479829B2 (ja) * 2008-04-03 2010-06-09 ソニー株式会社 撮像装置及び撮像方法
US20090267909A1 (en) * 2008-04-27 2009-10-29 Htc Corporation Electronic device and user interface display method thereof
JP5487799B2 (ja) * 2008-08-28 2014-05-07 株式会社ニコン デジタルカメラおよび画像処理プログラム
US8082518B2 (en) * 2008-08-29 2011-12-20 Microsoft Corporation Scrollable area multi-scale viewing
US8159465B2 (en) * 2008-12-19 2012-04-17 Verizon Patent And Licensing Inc. Zooming techniques for touch screens
JP5602391B2 (ja) 2009-06-11 2014-10-08 京楽産業.株式会社 遊技場のメダル循環システム
CN101616281A (zh) * 2009-06-26 2009-12-30 中兴通讯股份有限公司南京分公司 一种将手机电视播放画面局部放大的方法及移动终端
KR101402622B1 (ko) * 2009-07-01 2014-06-09 삼성전자주식회사 영상표시장치 및 영상표시방법
KR101103161B1 (ko) * 2010-02-03 2012-01-04 주식회사 팬택 터치 스크린 입력을 이용해서 화면을 제어하는 방법 및 장치
US8310538B2 (en) * 2010-03-19 2012-11-13 Fujifilm Corporation Imaging apparatus, method, program, and recording medium used in the program
JP5526921B2 (ja) * 2010-03-29 2014-06-18 ソニー株式会社 撮像装置、電子機器および表示制御方法
US20120026181A1 (en) * 2010-07-30 2012-02-02 Google Inc. Viewable boundary feedback
JP5514683B2 (ja) * 2010-09-24 2014-06-04 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、及び情報処理方法
JP5614275B2 (ja) 2010-12-21 2014-10-29 ソニー株式会社 画像表示制御装置および画像表示制御方法
JP5617603B2 (ja) 2010-12-21 2014-11-05 ソニー株式会社 表示制御装置、表示制御方法、及び、プログラム
JP5648844B2 (ja) 2010-12-21 2015-01-07 ソニー株式会社 画像表示制御装置および画像表示制御方法
JP5686244B2 (ja) 2010-12-21 2015-03-18 ソニー株式会社 表示制御装置、表示制御方法、及び、プログラム
JP5652652B2 (ja) 2010-12-27 2015-01-14 ソニー株式会社 表示制御装置および方法

Also Published As

Publication number Publication date
US10469737B2 (en) 2019-11-05
US20190158729A1 (en) 2019-05-23
JP2012133085A (ja) 2012-07-12
EP2469838A2 (en) 2012-06-27
US20120154442A1 (en) 2012-06-21
US10218897B2 (en) 2019-02-26
CN102547115A (zh) 2012-07-04

Similar Documents

Publication Publication Date Title
JP5686244B2 (ja) 表示制御装置、表示制御方法、及び、プログラム
JP4929630B2 (ja) 撮像装置、制御方法、およびプログラム
US8823864B2 (en) Image capturing apparatus and associated methodology for auto-focus and facial detection
JP5652652B2 (ja) 表示制御装置および方法
JP4400611B2 (ja) 撮像装置、ブレ補正方法、およびプログラム
US7880792B2 (en) Image capturing apparatus with through image display function
JP5617603B2 (ja) 表示制御装置、表示制御方法、及び、プログラム
TWI326553B (en) Imaging apparatus, data extraction method, and data extraction program
US8704930B2 (en) Image display apparatus, imaging apparatus, image display method, and program
JP5028574B2 (ja) デジタルカメラシステム
JP2014165609A (ja) 撮影機器
JP2011050038A (ja) 画像再生装置及び撮像装置
JP2009239733A (ja) 撮像装置、撮像方法及びプログラム
JP2007028536A (ja) デジタルカメラ
JP2009010775A (ja) 画像表示装置、撮像装置、画像表示方法、プログラム
JP2008079193A (ja) デジタルカメラ
JP2006319903A (ja) 情報表示画面を備えた携帯機器
JP2011040896A (ja) 撮像装置及びその制御方法
JP2012222387A (ja) 撮像装置
JP5479190B2 (ja) 撮像装置及び撮像装置の制御方法
JP2015036845A (ja) 電子機器およびプログラム
US8896740B2 (en) Projection device, projection method, and program
JP5135985B2 (ja) 撮影装置、撮影装置の処理実行方法及びプログラム
JP2013219440A (ja) 撮像装置
JP2011188057A (ja) 撮像装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131211

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131211

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140520

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140718

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141225

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150107

R151 Written notification of patent or utility model registration

Ref document number: 5686244

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250