JP2017123125A - 表示制御装置及びその制御方法、プログラム、並びに記憶媒体 - Google Patents

Abstract

【課題】ユーザの意図に合った表示制御を行うことができる表示制御装置を提供する。
【解決手段】表示手段へのタッチ操作を検出可能なタッチ検出手段と、表示手段に対する複数箇所へのマルチタッチ操作を検出した場合に、マルチタッチ操作の前から継続するタッチ操作による表示手段に対するタッチ位置の移動を伴う所定のタッチ操作を検出していなかった場合には、表示手段に表示されている表示対象を、マルチタッチ操作を行う複数のタッチ位置に基づく第１の位置を基準として拡大または縮小するように制御を行う。また、所定のタッチ操作を検出し、所定のタッチ操作から少なくとも１つのタッチが離されないまま、表示手段に対するマルチタッチ操作を検出した場合には、表示手段に表示されている表示対象を、マルチタッチ操作を行う複数のタッチ位置には基づかない第２の位置を基準として拡大または縮小するように制御する表示制御手段と、を有する。
【選択図】図５

Description

本発明は、タッチ操作により表示対象を表示する表示制御装置や表示制御方法に関する。

特許文献１には、タッチ操作により表示対象（オブジェクト）を拡大または縮小する技術が記載されている。特許文献１は、タッチ入力可能な操作画面に特定領域が存在するか否かに応じて、同じタッチ操作であってもタッチ位置に基づいた拡大・縮小を行うか、タッチ位置に基づかない拡大・縮小を行うかを切り替えるようにしている。

特開２０１５−０５５８８８号公報

しかしながら、上記特許文献１では、拡大表示または縮小表示の基準がタッチ操作前の画面の表示状態に応じて決定され、ユーザがタッチ位置に基づく拡大・縮小を行うか、タッチ位置に基づかない拡大・縮小を行うかを選択することができない。このため、ユーザの意図に合った表示制御が行われないことがある。

本発明は、上記課題に鑑みてなされ、その目的は、画像を拡大または縮小するタッチ操作前において他のタッチ操作が行われたか否かに応じて拡大・縮小の基準を切り替え、ユーザの意図に合った表示制御を行うことができる技術を実現することである。

上記課題を解決し、目的を達成するために、本発明の表示制御装置は、表示手段へのタッチ操作を検出可能なタッチ検出手段と、前記表示手段に対する複数箇所へのマルチタッチ操作を検出した場合に、当該マルチタッチ操作の前から継続するタッチ操作による前記表示手段に対するタッチ位置の移動を伴う所定のタッチ操作を検出していなかった場合には、当該マルチタッチ操作に応じて前記表示手段に表示されている表示対象を、当該マルチタッチ操作を行う複数のタッチ位置に基づく第１の位置を基準として拡大または縮小するように制御を行い、前記所定のタッチ操作を検出し、前記所定のタッチ操作から少なくとも１つのタッチが離されないまま、前記表示手段に対するマルチタッチ操作を検出した場合には、当該マルチタッチ操作に応じて前記表示手段に表示されている表示対象を、当該マルチタッチ操作を行う複数のタッチ位置には基づかない第２の位置を基準として拡大または縮小するように制御する表示制御手段と、を有する。

本発明によれば、画像を拡大または縮小するタッチ操作前において他のタッチ操作が行われたか否かに応じて拡大・縮小の基準を切り替え、ユーザの意図に合った表示制御を行うことができる。

本実施形態に係る表示制御装置の外観図。 本実施形態に係る表示制御装置の構成を示すブロック図。 本実施形態による表示制御の説明図。 本実施形態によるタッチムーブ後の拡大表示例を示す図。 本実施形態の表示制御処理を示すフローチャート。

以下に、本発明を実施するための形態について詳細に説明する。本実施形態では、表示制御装置を撮像装置であるデジタル一眼レフカメラに適用した例について説明する。

＜装置構成＞図１及び図２を参照して、本実施形態のデジタルカメラの構成及び機能について説明する。

まず、図１を参照して、本実施形態のデジタルカメラ（以下、カメラ）１００の外観構成について説明する。

図１（ａ）はカメラ１００の前面斜視図であり、図１（ｂ）はカメラ１００の背面斜視図である。

図１において、表示部１０１は、画像や各種情報を表示する、カメラ本体の背面に設けられたＬＣＤなどの表示デバイスである。また、表示部１０１は、静止画撮影後の静止画再生や記録中の動画表示、及びライブビュー表示機能を併せ持っている。シャッターボタン１０２は撮影指示を行うための押しボタン式の操作部材である。モードダイヤル１０３はカメラ１００の動作モードを切り替えるための回転式の操作部材である。メインダイヤル１０４は、シャッター速度や絞りなどの設定値が変更できる回転式の操作部材である。

メニューボタン１０５は、各種の設定可能なメニュー画面を表示部１０１に表示するための操作部材である。撮影設定ボタン１０６は、静止画や動画などの撮影モードにおける各種の撮影条件を設定するための操作部材である。十字キー１０７は、上、下、左、右のいずれかを押し込むことで、十字キー１０７の押した部分に応じた操作が可能な移動指示部材である。ＳＥＴボタン１０８は押しボタンであり、主に選択項目の決定などに用いられる。拡大ボタン１０９は、ライブビュー中における拡大表示のオン／オフ、及び拡大表示中の拡大率の変更を行うための操作部材である。また、拡大ボタン１０９は、再生モードでは再生画像を拡大し、拡大率を増加させるための操作部材である。縮小ボタン１１０は、拡大された再生画像の拡大率を減少させ、画面を縮小表示するための操作部材である。なお、拡大ボタン１０９や縮小ボタン１１０による拡大処理および縮小処理では、常に表示部１０１の画面（画像）の中央を基準に画像が拡大または縮小される。

その他、本実施形態のカメラ１００は、電源のオン／オフを切り替える電源スイッチやライブビュー表示のオン／オフを切り替えるライブビューボタンなどを備える。また、カメラ１００には、ユーザがカメラ１００を構えた際に右手で握りやすい形状を有するグリップ部が設けられている。

図２は、本実施形態のカメラ１００の内部構成を示している。

図２において、撮影レンズ２０４はズームレンズ、フォーカスレンズを含むレンズ群である。シャッター２０５は絞り機能を備える。撮像部２０６は被写体の光学像を電気信号に変換するＣＣＤやＣＭＯＳ等で構成される撮像素子である。Ａ／Ｄ変換器２０７は、アナログ信号をデジタル信号に変換する。Ａ／Ｄ変換器２０７は、撮像部２０６から出力されるアナログ信号をデジタル信号に変換するために用いられる。バリア２０３は、カメラ１００の、撮影レンズ２０４を含む撮像系を覆うことにより、撮影レンズ２０４、シャッター２０５、撮像部２０６を含む撮像系の汚れや破損を防止する。なお、撮影レンズ２０４はカメラ１００に固定されているものであっても取り外し可能なものであってもよい。

画像処理部２０２は、Ａ／Ｄ変換器２０７からのデータ、または、メモリ制御部２０８からのデータに対し所定の画素補間、縮小といったリサイズ処理や色変換処理を行う。また、画像処理部２０２では、撮像した画像データを用いて所定の演算処理が行われ、得られた演算結果に基づいてシステム制御部２０１が露光制御、測距制御を行う。これにより、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理が行われる。画像処理部２０２ではさらに、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行っている。

Ａ／Ｄ変換器２０７からの出力データは、画像処理部２０２及びメモリ制御部２０８を介して、或いは、メモリ制御部２０８を介してメモリ２０９に直接書き込まれる。メモリ２０９は、撮像部２０６によって得られ、Ａ／Ｄ変換器２０７によりデジタルデータに変換された画像データや、表示部１０１に表示するための画像データを格納する。メモリ２０９は、所定枚数の静止画や所定時間の動画および音声を格納するのに十分な記憶容量を備えている。

また、メモリ２０９は画像表示用のメモリ（ビデオメモリ）を兼ねている。Ｄ／Ａ変換器２１０は、メモリ２０９に格納されている画像表示用のデータをアナログ信号に変換して表示部１０１に供給する。こうして、メモリ２０９に書き込まれた表示用の画像データはＤ／Ａ変換器２１０を介して表示部１０１により表示される。表示部１０１は、ＬＣＤ等の表示器上に、Ｄ／Ａ変換器２１０からのアナログ信号に応じた表示を行う。Ａ／Ｄ変換器２０７によって一旦Ａ／Ｄ変換され、メモリ２０９に蓄積されたデジタル信号をＤ／Ａ変換器２１０においてアナログ変換し、表示部１０１に逐次転送して表示することで、電子ビューファインダ（ＥＶＦ）として機能し、ライブビューによるスルー画像の表示を行える。表示部１０１は、ユーザが自由にカメラ１００に対して表示面の方向や角度を変更したり、回転させることができるバリアングルモニタである。

不揮発性メモリ２１４は、電気的に消去・記憶可能なメモリであり、例えばＥＥＰＲＯＭ等が用いられる。不揮発性メモリ２１４には、システム制御部２０１の動作用の定数、プログラム等が記憶される。ここでいう、プログラムとは、本実施形態にて後述する表示制御処理のフローチャートを実行するためのプログラムのことである。

システム制御部２０１は、カメラ１００全体を制御する。前述した不揮発性メモリ２１４に記憶されたプログラムを実行することで、後述する本実施形態の表示制御処理を実現する。２１３はシステムメモリであり、ＲＡＭが用いられる。システムメモリ２１３には、システム制御部２０１の動作用の定数、変数、不揮発性メモリ２１４から読み込んだプログラム等を展開する。また、システム制御部２０１はメモリ２０９、Ｄ／Ａ変換器２１０、表示部１０１等を制御することにより表示制御も行う。

システムタイマー２１２は各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。

モードダイヤル１０３、第１シャッタースイッチ１０２ａ、第２シャッタースイッチ１０２ｂ、操作部２１５はシステム制御部２０１に各種の動作指示を入力するための操作手段である。

モードダイヤル１０３は、システム制御部２０１の動作モードを静止画撮影モード、動画記録モード、再生モードなどのいずれかに切り替える。静止画撮影モードに含まれるモードとして、オートモード、オートシーン判別モード、マニュアルモード、シーン別撮影モード、プログラムＡＥモード、カスタムモードなどがある。モードダイヤル１０３で、静止画撮影モードに含まれるこれらのモードのいずれかに直接切り替えられる。あるいは、モードダイヤル１０３で静止画撮影モードに一旦切り替えた後に、静止画撮影モードに含まれるこれらのモードのいずれかに、他の操作部材を用いて切り替えるようにしてもよい。同様に、動画記録モードにも複数のモードが含まれていてもよい。

第１シャッタースイッチ１０２ａは、カメラ１００に設けられたシャッターボタン１０２の操作途中、いわゆる半押し（撮影準備指示）でオンとなり第１シャッタースイッチ信号ＳＷ１を発生する。第１シャッタースイッチ信号ＳＷ１により、ＡＦ処理、ＡＥ処理、ＡＷＢ処理、ＥＦ処理等の動作を開始する。

第２シャッタースイッチ１０２ｂは、シャッターボタン１０２の操作完了、いわゆる全押し（撮影指示）でオンとなり、第２シャッタースイッチ信号ＳＷ２を発生する。システム制御部２０１は、第２シャッタースイッチ信号ＳＷ２により、撮像部２０６からの信号読み出しから記録媒体２２３に画像データを書き込むまでの一連の撮影処理の動作を開始する。

操作部２１５の各操作部材は、表示部１０１に表示される種々の機能アイコンを選択操作することなどにより、シーンごとに適宜機能が割り当てられ、各種機能ボタンとして作用する。機能ボタンとしては、例えば終了ボタン、戻るボタン、画像送りボタン、ジャンプボタン、絞込みボタン、属性変更ボタンなどがある。例えば、メニューボタン１０５が押されると各種の設定可能なメニュー画面が表示部１０１に表示される。ユーザは、表示部１０１に表示されたメニュー画面と、十字キー１０７やＳＥＴボタン１０８とを用いて直感的に各種設定を行うことができる。

なお、操作部２１５の１つとして、表示部１０１に対する接触を検出可能なタッチパネル１０１ｂを有する。タッチパネル１０１ｂと表示部１０１とは一体的に構成することができる。例えば、タッチパネル１０１ｂを光の透過率が表示部１０１の表示を妨げないように構成し、表示部１０１の表示面の上層に取り付ける。そして、タッチパネル１０１ｂにおける入力座標と、表示部１０１上の表示座標とを対応付ける。これにより、あたかもユーザが表示部１０１上に表示された画面を直接的に操作可能であるかのようなＧＵＩを構成することができる。システム制御部２０１はタッチパネル１０１ｂへの以下のタッチ操作、あるいはタッチ状態を検出可能である。
・タッチパネル１０１ｂを指やペンで触れたこと（以下、タッチダウン（Ｔｏｕｃｈ−Ｄｏｗｎ）と呼ぶ）。
・タッチパネル１０１ｂを指やペンで触れている状態であること（以下、タッチオン（Ｔｏｕｃｈ−Ｏｎ）と呼ぶ）。
・タッチパネル１０１ｂを指やペンで触れたまま移動していること（以下、タッチムーブ（Ｔｏｕｃｈ−Ｍｏｖｅ）と呼ぶ）。
・タッチパネル１０１ｂへ触れていた指やペンを離したこと（以下、タッチアップ（Ｔｏｕｃｈ−Ｕｐ）と呼ぶ）。
・タッチパネル１０１ｂに何も触れていない状態（以下、タッチオフ（Ｔｏｕｃｈ−Ｏｆｆ）と呼ぶ）。

これらの操作・状態や、タッチパネル１０１ｂ上に指やペンが触れている位置座標は内部バスを通じてシステム制御部２０１に通知され、システム制御部２０１は通知された情報に基づいてタッチパネル１０１ｂ上にどのような操作が行われたかを判定する。タッチムーブについてはタッチパネル１０１ｂ上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル１０１ｂ上の垂直成分・水平成分毎に判定できる。またタッチパネル１０１ｂ上をタッチダウンから一定のタッチムーブを経てタッチアップをしたとき、ストロークを描いたこととする。素早くストロークを描く操作をフリックと呼ぶ。フリックは、タッチパネル１０１ｂ上に指を触れたままある程度の距離だけ素早く動かして、そのまま離すといった操作であり、言い換えればタッチパネル１０１ｂ上を指ではじくように素早くなぞる操作である。所定距離以上を、所定速度以上でタッチムーブしたことが検出され、そのままタッチアップが検出されるとフリックが行われたと判定できる。また、所定距離以上を、所定速度未満でタッチムーブしたことが検出された場合はドラッグが行われたと判定するものとする。また、タッチパネル１０１ｂに対して２箇所（２点）を同時に指又はペンでタッチしている状態で、２点間の距離を狭める操作をピンチインと呼ぶ。つまり、ピンチインは、タッチパネル１０１ｂ上の２点に指を触れたまま指同士を近づける操作（複数箇所のタッチ位置同士の距離を近づける操作）である。換言すれば、ピンチインは、２本の指でタッチパネル１０１ｂ下に表示されている画像等のオブジェクトをつまむようにタッチパネル１０１ｂをなぞる操作である。ピンチインとは反対に、２点を同時に指又はペンでタッチしている状態で、２点間の距離を広げる操作（複数箇所のタッチ位置同士の距離を広げる操作）をピンチアウトと呼ぶ。タッチパネル１０１ｂは、抵抗膜方式や静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサ方式等、様々な方式のタッチパネル１０１ｂのうちいずれの方式のものを用いても良い。

電源制御部２１９は、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出を行う。また、電源制御部２１９は、その検出結果及びシステム制御部２０１の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体２２３を含む各部へ供給する。

電源部２２０は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、リチウムイオン電池等の二次電池、ＡＣアダプタ等からなる。記録媒体Ｉ／Ｆ２２２は、メモリカードやハードディスク等の記録媒体２２３とのインターフェースである。記録媒体２２３は、撮影された画像を記録するためのメモリカード等の記録媒体であり、半導体メモリや磁気ディスク等から構成される。

その他、本実施形態のカメラ１００は、無線アンテナや有線ケーブルによって外部機器と通信可能に接続し、映像や音声の送受信を行う通信部を有する。外部機器としては、パーソナルコンピュータやプリンタ、他のデジタルカメラや携帯電話の一種であるスマートフォン、各種サービス提供サーバなどが想定される。

なお、ハードウェアの構成は図２に示すものに限定されず、例えば１つのハードウェアが表示制御、通信制御、撮影制御、画像処理制御等を行い、カメラ１００の各手段として機能してもよい。また、複数のハードウェアが協働して１つの手段として機能してもよい。

＜表示制御処理の説明＞次に、図３乃至図５を参照して、本実施形態のカメラ１００の表示制御動作について説明する。

図３は表示部１０１の表示画面に表示されている画像を拡大表示する際に、ピンチアウトによる２点のタッチ位置の中心を基準に拡大表示する第１の拡大処理と、タッチ位置に基づかない画面中央を基準として拡大表示する第２の拡大処理を行ったときの表示例を示している。

図３（ａ）は表示部１０１の表示画面に画像全体を拡大しないで表示した状態である。図３（ｂ）は表示画面へのピンチアウトによるタッチ位置の中心（中点）を基準に拡大表示を行う第１の拡大処理の表示例である。図３（ｂ）では２点のタッチ位置の中心３０１を基準として２点のタッチ位置の距離に応じた拡大率で画像を拡大する。すなわち、拡大の前後（図３（ａ）と図３（ｂ））で、拡大基準となるタッチ位置の中心３０１に位置する被写体部分（図３（ａ）、（ｂ）の例では女性の鼻のあたり）の表示画面上での位置が変わらない。一方、拡大の前後（図３（ａ）と図３（ｂ））で、拡大基準となるタッチ位置の中心３０１以外の被写体部分は、拡大に伴ってタッチ位置の中心３０１を中心とした同心円状に位置が変わる。例えば図３（ｂ）の女性の左耳は、図３（ａ）の女性の左耳より大きくなって左に移動しており、図３（ｂ）の女性の右耳は、図３（ａ）の女性の右耳より大きくなって右に移動している。このような第１の拡大処理では、拡大して見たい位置（例えば女性の顔）に２本の指で同時にタッチした後に指を広げれば、見たい位置が大きく移動することなく拡大される。図３（ｂ）の例では、女性の顔が拡大後に画面外にはみ出すことなく視認できる状態である。このように、第１の拡大処理では、ユーザが拡大して見たい位置を、少ない操作手順で直感的に拡大して確認することができる。

図３（ｃ）はタッチ位置に基づかない画面中央を基準として拡大表示を行う第２の拡大処理の第１の表示例である。図３（ｃ）ではタッチ検出された位置に関わらず、表示画面（画像の表示されている領域）の中央３０２を基準として２点のタッチ位置の距離に応じた拡大率で画像を拡大する。すなわち、拡大の前後（図３（ａ）と図３（ｃ））で、拡大基準となる表示画面の中央３０２に位置している被写体部分（図３（ａ）、（ｃ）の例では女性の胸のあたり）の表示画面上での位置が変わらない。一方、拡大の前後（図３（ａ）と図３（ｃ））で、拡大基準となる表示画面の中央３０２以外の被写体部分は、拡大に伴って表示画面の中央３０２を中心とした同心円状に位置が変わる。このような表示画面の中央３０２と拡大の基準点が一致していると、拡大前後で画面中央を中心とした同心円状で被写体部分の位置が変わるため、拡大前後の画像の位置関係がわかりやすくなる。また、表示画面の中央３０２を拡大基準とする拡大は、拡大前後で画面中央を中心とした同心円状で被写体部分の位置が変わるという意味で撮影時の光学ズームと同じであり、直観的である。また、拡大ボタン１０９を用いた場合にも、画面（画像の表示領域）の中央（画像の表示領域の中央に位置している画像の部分）を基準として拡大表示が行われる（第２の拡大処理が行われる）。また、画像の表示領域と、他の表示物の表示領域とを分けた画面を表示した場合（不図示）に、画像が表示されていない他の表示物の表示領域の位置にピンチ操作が行われた場合にも画像の表示領域の中央を基準として拡大表示が行われる（第２の拡大処理が行われる）。

図３（ｄ）はタッチ位置に基づかない第２の拡大処理の第２の表示例であり、表示画面（画像）の一辺の端部３０３を中心として拡大表示を行う場合を示している。図３（ｄ）は、画像の端部３０３付近にある被写体などを拡大して確認したい場合に有効な処理である。画像を拡大した状態で、画像の端部が表示される範囲を表示している場合、ユーザは、画像の端部に注目していると想定できる。画像の端部３０３は表示画面の端部に表示されることが多いが、ユーザが表示画面の端部においてピンチ操作（ピンチアウト）を行って２点のタッチ位置に基づく拡大表示を行うことは困難である。そこで、本実施形態では、図３（ｄ）のように画像の端部を含む一部分を表示している場合には、ピンチアウト／ピンチインに応じて、表示されている端部（辺）の中央（図３（ｄ）の例では左端部の上下中央である端部３０３）を基準として拡大／縮小処理を行う。これによって、表示画面の端部に対してピンチ操作を行うことなく、画面中央でピンチアウトを行えば画像の端部３０３を基準に拡大表示を行うことができる。図３（ｃ）のように画面中央基準で拡大する場合は、画像の端部３０３は表示画面の表示範囲の外側に移動してしまうが、画像の端部３０３を基準とした拡大では、端部３０３を中心とした同心円状で被写体部分の位置が変わる。従って、図３（ｄ）の状態で画像の左の端部３０３を基準とした拡大を行うと、拡大に伴って左に移動する部分はない。このように拡大表示を行うことで、拡大後に左端部を見るためにタッチムーブで表示位置を変更する必要がなくなるという利点がある。

図３（ｅ）はタッチ位置に基づかない第２の拡大処理の第３の表示例であり、表示画面（画像）の二辺が交差する角部３０４を中心として拡大処理を行う場合を示している。図３（ｅ）では、画像の端部であって、特に表示画面の角部にある被写体などを拡大して見たい場合などに有効な処理である。本実施形態では、図３（ｅ）のように画像の頂点部（角部）を含む一部分を表示している場合には、ピンチアウト／ピンチインに応じて、表示されている頂点部（角部）の中央（図３（ｅ）の例では画像の右下頂点である角部３０４）を基準として拡大／縮小処理を行う。画像の角部３０４を基準とした拡大では、角部３０４を中心とした同心円状で被写体部分の位置が変わる。従って図３（ｅ）の状態で画像の角部３０４を基準とした拡大を行うと、拡大に伴って右及び下に移動する部分はない。すなわち、角部３０４に位置する被写体部分は、拡大前後で表示画面の右下から移動しない。これにより、ユーザは表示画面の角部に対してピンチ操作を行うことなく、画面中央でピンチアウトを行えば２点のタッチ位置の距離に応じた拡大率で画像の角部３０４が表示範囲外とならないように拡大表示を行うことができる。

図４は表示画面へのピンチ操作により画像を拡大表示する際に、タッチ位置に基づいた第１の拡大処理を行うか、タッチ位置に基づかない第２の拡大処理を行うかをピンチ操作前から継続する所定のタッチ操作（タッチムーブ）に応じて切り替えた場合の表示例を示している。本実施形態では、ピンチアウトが検出される前にタッチムーブにより画像の表示位置を変更する操作が行われた場合には第２の拡大処理を行い、ピンチアウトが検出される前にタッチムーブにより画像の表示位置を変更する操作が行われていない場合には第１の拡大処理を行うように制御する。

図４（ａ）は表示部１０１の表示画面に画像全体を拡大しないで表示した状態である。図４（ｂ）は図４（ａ）の表示状態からピンチアウトにより拡大表示を行った状態である。図４（ｂ）では、ピンチアウトが検出される前にタッチムーブにより画像の表示位置が変更されていないため、タッチ位置に基づく第１の拡大処理を行う。すなわち、図４（ｂ）では、２点のタッチ位置の中心４０１を基準として２点のタッチ位置の距離に応じた拡大率で画像を拡大表示するので、ユーザは拡大して見たい部分（タッチ位置の中心付近）の拡大に伴う移動量が少なくなるように拡大でき、ピンチアウトにより２点のタッチ位置の距離を調整しながら拡大表示を行うことができる。

図４（ｃ）は、図４（ｂ）で拡大された画像の表示状態から１点（１箇所）でのタッチムーブにより画像の表示位置（表示範囲）を変更した場合の表示例であり、タッチムーブを行った後もタッチが離されずにタッチオンが維持されている。拡大中のように、表示対象（画像）の一部分を表示している場合に、タッチムーブによって表示範囲を変更した（スクロールした）場合、ユーザは、見たい部分（注目部分）が画面中央に表示されるように表示範囲を変更したものと想定される。図４（ｃ）の例では、タッチムーブによって、画像のうち、図４（ｂ）で大部分が画面左外側（表示範囲外）に位置していた、女性が右手に持った花が表示画面内に収まるように表示位置が変更されている。このように画面中央付近に移動させた花の部分が注目部分であると考えられる。注目被写体である花を画面内に表示させた結果、ユーザは、花をもっと拡大して見たいと考えるかもしれない。

図４（ｄ）は、本実施形態を適用しない場合の例であり、１点目でのタッチムーブによって図４（ｃ）の表示状態とした後、１点目のタッチを離すことなく追加で２点目のタッチを行い、ピンチアウトにより拡大処理した場合を説明した図である。１点目と２点目のタッチの中央４０２を基準として画像を拡大する第１の拡大処理を行うと、拡大後の表示状態は図４（ｄ）のようになる。図４（ｄ）では、タッチムーブにより図４（ｃ）のように画面中央に移動させた被写体の注目部分（花）が画面の表示範囲の外側（左外側）に移動し、注目部分の大部分が見えなくなってしまっている。これでは、ユーザは拡大した花を見ることができない。拡大された注目部分を見るには、ユーザは、更にタッチムーブを行い、注目部分が表示画面に収まるように画像の表示位置を変更し直す必要がある。

一方、図４（ｅ）は、本実施形態を適用した例であり、１点目でのタッチムーブによって図４（ｃ）の表示状態とした後、１点目のタッチを離すことなく追加で２点目のタッチを行い、ピンチアウトにより拡大処理した場合を説明した図である。本実施形態では、この場合は前述の第２の拡大処理を行う。すなわち、この場合の拡大／縮小の基準位置は表示画面の中央４０３となり、図４（ｃ）から拡大した後の表示状態は図４（ｅ）のようになる。図４（ｅ）では、タッチムーブにより図４（ｃ）のように画面中央に移動させた被写体の注目部分（花）が拡大されて表示画面内に位置している。すなわち、ユーザは、更なるタッチムーブを行うことなく、拡大した花を見ることができる。ピンチアウト後に更なるタッチムーブを行うことなく注目部分を見ることができるメリットは、表示部１０１の画面サイズが大きい場合は、タッチ位置を大きく移動するタッチ操作を省くことができるため特に大きい。なお、図４（ｄ）及び図４（ｅ）におけるピンチ操作は同様であるが、第１の拡大処理を行う場合と、第２の拡大処理を行う場合とで拡大処理を行った結果が異なっている。

図４（ｆ）は、図４（ｂ）の拡大画像の表示状態からタッチムーブにより画像の表示位置を変更した状態を示している。図４（ｆ）では画像の右端まで表示範囲を変更（すなわち、画像の右端が表示画面内に達するまで表示範囲を移動）するタッチムーブを行った場合の表示例を示し、タッチムーブを行った後もタッチダウンが維持されている。このように表示対象（画像）の端部まで表示範囲を変更した場合、表示されている表示対象（画像）の端部が注目部分であると考えられる。例えば本実施形態のように表示対象が撮像画像である場合、撮影したかった被写体が画像内に収まっているか、あるいは、余計な被写体が写っていないかを確認するために、端部を注目部分とすることがある。注目被写体である画像端部を画面内に表示させた結果、ユーザは、端部をもっと拡大して見たいと考えるかもしれない。

図４（ｇ）は、本実施形態を適用しない場合の例であり、１点目でのタッチムーブによって図４（ｆ）の表示状態とした後、１点目のタッチを離すことなく追加で２点目のタッチを行い、ピンチアウトにより拡大処理した場合を説明した図である。１点目と２点目のタッチの中央４０４を基準として画像を拡大する第１の拡大処理を行うと、拡大後の表示状態は図４（ｇ）のようになる。図４（ｇ）では、タッチムーブにより図４（ｆ）のように表示範囲に収めた画像の端部（右端）が表示範囲の外側（右外側）に移動し、注目部分であった右端が見えなくなってしまっている。これでは、ユーザは、撮影したかった被写体が画像内に収まっているか、あるいは、余計な被写体が写っていないかを確認することができない。拡大された注目部分（右端部）を見るには、ユーザは、更にタッチムーブを行い、注目部分（右端部）が表示画面に収まるように画像の表示位置を変更し直す必要がある。

一方、図４（ｈ）は、本実施形態を適用した例であり、１点目でのタッチムーブによって図４（ｆ）の表示状態とした後、１点目のタッチを離すことなく追加で２点目のタッチを行い、ピンチアウトにより拡大処理した場合を説明した図である。本実施形態では、この場合は前述の第２の拡大処理を行う。すなわち、この場合の拡大／縮小の基準位置は画像の端部４０５となり、図４（ｆ）から拡大した後の表示状態は図４（ｈ）のようになる。なお、拡大縮小の基準となる端部４０５は、表示されている端部（辺）の長さ方向の中点である。画面の端部の一辺の長さ方向の中点、図４（ｈ）では、タッチムーブにより図４（ｆ）のように表示範囲内に移動させた被写体の注目部分（画像右端）が拡大されて表示画面内に位置している。すなわち、ユーザは、更なるタッチムーブを行うことなく、拡大した右端を見ることができ、撮影したかった被写体が右端より内側に収まっているか、あるいは、余計な被写体が右端に写っていないかを確認することができる。図４（ｇ）及び図４（ｈ）におけるピンチ操作は同様であるが、第１の拡大処理を行う場合と、第２の拡大処理を行う場合とで拡大処理を行った結果が異なっている。また、図３（ｅ）で説明したように、表示範囲が表示対象の頂点／角に達している場合（言い換えれば表示対象の連続した２辺に達している場合）には、表示範囲に達している頂点を基準として拡大縮小を行う。

図５は、本実施形態のカメラ１００による画像を拡大または縮小する表示制御処理を示している。なお、図５の処理は、不揮発性メモリ２１４に格納されたプログラムを、システムメモリ２１３に展開してシステム制御部２０１が実行することにより実現される。また、図５の処理は、カメラ１００の動作モードが再生モードなどに設定され、記録媒体２２３から画像を読み出して表示部１０１に表示している状態で、表示部１０１（タッチパネル１０１ｂ）へのタッチ（タッチダウン）操作が検出されると開始される。

Ｓ５０１では、システム制御部２０１は、タッチムーブフラグをオフに変更し、Ｓ５０２に進む。

Ｓ５０２では、システム制御部２０１は、表示部１０１に表示されている画像が拡大表示中であるか否かを判定し、拡大表示中である場合はＳ５０３に進み、拡大表示中でない場合はＳ５０６に進む。

Ｓ５０３では、システム制御部２０１は、１箇所がタッチされた状態でのタッチムーブが検出されたか否かを判定し、検出された場合はＳ５０４に進み、検出されなかった場合はＳ５０６に進む。

Ｓ５０４では、システム制御部２０１は、Ｓ５０４で検出されたタッチムーブの移動量に応じて拡大表示中の画像の表示位置を変更し、Ｓ５０５に進む。なお、図５のフローチャートでは省略しているが、拡大表示中でない場合（Ｓ５０２でＮＯと判定される場合）に、１箇所がタッチされた状態でのタッチムーブが検出された場合は、表示されている画像を他の画像に切り替える画像切替を行うものとする。

Ｓ５０５では、システム制御部２０１は、タッチムーブフラグをオンに変更し、Ｓ５０６に進む。ただし、Ｓ５０４でタッチムーブが所定量以上移動していない場合（移動量が小さい場合）、タッチムーブフラグは変更しなくてもよい。これは、タッチムーブフラグの設定がオンかオフかに応じて、ピンチアウトによる拡大処理を、タッチ位置に基づく第１の拡大処理とするか、タッチ位置に基づかない第２の拡大処理とするかを切り替えるが、表示位置を微調整するために僅かに移動しただけでタッチムーブフラグがオンに設定されてしまうと、拡大処理の基準位置が不用意に変動してしまい、ユーザの意図に合わないことがあるためである。すなわち、拡大表示位置の移動が行われるタッチムーブがあっても、表示位置の移動が所定量未満のわずかな移動であれば、タッチムーブフラグはオンにしない（後述のピンチ操作による拡大処理は第１の拡大処理となる）。なお、Ｓ５０４、Ｓ５０５の処理は、タッチオフの状態から１点（１箇所）でのタッチダウンを検出した場合に行われる１点（１箇所）のタッチによるタッチ操作(シングルタッチでの操作)に応じた処理である。タッチオフの状態から複数点（複数箇所）での同時または略同時のタッチダウンを検出した場合はＳ５０１，Ｓ５０２の処理の後、Ｓ５０３はＮＯと判定され、後述のＳ５０６に進む。

Ｓ５０６では、システム制御部２０１は、全てのタッチ箇所のタッチアップが検出されたか否か判定し、検出された場合はタッチオフになったので本フローチャートの処理を終了し、検出されなかった場合はＳ５０７に進む。

Ｓ５０７では、システム制御部２０１は、タッチパネルの複数箇所（２箇所）にタッチ操作（２点以上のタッチ）が行われるマルチタッチ操作であるか否か判定し、マルチタッチでない場合はＳ５０２に進み、マルチタッチの場合はＳ５０８に進む。タッチオフの状態から１点（１箇所）でのタッチダウンを検出した後、タッチアップせずに２点目のタッチダウンがあった場合に、Ｓ５０７でマルチタッチ操作であると判定される。また、タッチオフの状態から複数点（複数箇所）での同時または略同時のタッチダウンを検出した場合も、Ｓ５０１、Ｓ５０２の処理の後、Ｓ５０３はＮＯと判定され、Ｓ５０６でマルチタッチ操作であると判定される。なお、本実施形態では３点（３箇所）以上のタッチでも、３点目以上のタッチは無視して２点タッチによるマルチタッチ操作として処理するものとする。ただし、３点（３箇所）以上のタッチ操作に対応する機能を割り当てた場合は、Ｓ５０７ではＮＯと判定し、３点以上のタッチに応じた処理を行うものとしても良い。

Ｓ５０８では、システム制御部２０１は、ピンチ操作（ピンチアウトまたはピンチイン）が行われたか否か判定し、行われた場合はＳ５０９に進み、行われていない場合はＳ５０７に戻る。

Ｓ５０９では、システム制御部２０１は、タッチムーブフラグがオンか否かを判定し、オンの場合はＳ５１１に進み、オフの場合はＳ５１０に進む。

Ｓ５１０では、システム制御部２０１は、ピンチ操作に応じて２点のタッチ位置の中心を基準として画像の拡大処理（第１の拡大処理）または縮小処理を行い、Ｓ５０７に戻る。これによって、前述の図４（ａ）から図４（ｂ）に変化するような拡大処理が行われる。なお、ピンチ操作の途中で表示範囲が画像の端部に達したとしても、拡大縮小の基準は２点のタッチ位置の中心を基準としたままとする。この場合、画像の端部を超えた範囲が表示されないように、拡大または縮小後の表示範囲を随時補正（オフセット）する。すなわち、２点のタッチ位置の中心を基準として拡大または縮小した場合に表示範囲が画像の端部を超える場合には、表示範囲の端と画像の端部が一致するようにする。

Ｓ５１１では、システム制御部２０１は、画像の端部が画像の表示領域（画面）の端部に表示されているか（表示範囲が画像の端まで達しているか）否かを判定し、表示されている場合はＳ５１３に進み、表示されていない場合はＳ５１２に進む。画像の頂点（角）が画像の表示領域（画面）に表示されている場合も画像の端部が画像の表示領域（画面）の端部に表示されている場合に含み、Ｓ５１３に進む。この判定は、シングルタッチでのタッチムーブによるスクロール（表示範囲の変更）操作によって画像の端部が画像の表示領域（画面）の端部に表示されているか否かの判定である。前述の通り、拡大／縮小に伴って画像の端部が画像の表示領域（画面）の端部に達した場合はこの判定ではＹＥＳとは判定されない。

Ｓ５１２では、システム制御部２０１は、表示画面（画像の表示領域）の中央を基準として画像の拡大処理（第２の拡大処理）または縮小処理を行い、Ｓ５０７に戻る。これによって、前述の図４（ｃ）から図４（ｄ）に変化するような拡大処理が行われる。すなわち、シングルタッチのタッチムーブによって注目部分が表示範囲内の中央付近に位置するように表示範囲を変更した後、タッチを離すことなくマルチタッチ操作でのピンチアウトを行うことで、注目部分を拡大して確認することができる。

Ｓ５１３では、システム制御部２０１は、表示画面の端部に位置している画像の端部を基準として画像の拡大処理（第２の拡大処理）または縮小処理を行い、Ｓ５０７に戻る。前述した通り、表示範囲が画像の１端部に達していた場合には、その端部の長さ方向中点が拡大／縮小の基準点となる。表示範囲が画像の連続する２端部に達していた場合（画像の頂点、角に達していた場合）は、その２端部の頂点(角)が拡大／縮小の基準点となる。Ｓ５１３の処理によって、前述の図４（ｆ）から図４（ｈ）に変化するような拡大処理が行われる。

以上の処理によれば、シングルタッチでのタッチムーブによって表示範囲を変更した後、タッチを離すことなくピンチアウトを行うことで、画面中央または画像の端を基準とした第２の拡大処理が行われる。また、シングルタッチでのタッチムーブによって表示範囲を変更することなくピンチアウトを行うことで、２箇所のタッチ位置の中点を基準とした第１の拡大処理が行われる。さらに、タッチオフからのタッチダウンを検出する度にタッチムーブフラグはオフされるので、シングルタッチのタッチムーブによって表示範囲を変更した後であっても、一旦タッチを離してからシングルタッチでのタッチムーブを伴わないピンチアウトを行うことで、２箇所のタッチ位置の中点を基準とした第１の拡大処理が行われる。このように、本実施形態によれば、ピンチアウトを行う前にタッチムーブによる表示範囲の変更が行われたか否かに応じてタッチ位置に基づく拡大表示を行うか、タッチ位置に基づかない拡大表示を行うかを切り替えるので、ユーザの意図に合った拡大表示を行うことができるようになる。

なお、本実施形態において、２点タッチを検出したことに応じて、拡大処理の基準位置に、図３の３０１のような図形や記号の表示や、ハイライト表示を行うことで、拡大の基準位置をユーザに通知するようにしてもよい。ユーザは画面に表示された通知を見ることで、本実施形態のＳ５１０、Ｓ５１２、Ｓ５１３のように状況に応じて変化する拡大縮小の基準位置を把握することができるので、目的の位置（注目部分）を混乱なく快適に拡大する操作を行うことができる。

また、本実施形態では、説明を簡単にするため、ピンチアウトによる拡大処理の例を説明したが、ピンチインによる縮小処理でも同様である。すなわち、本実施形態の表示制御はピンチアウトに限定されず、ピンチインであっても適用可能である。また、本実施形態では、表示対象を画像としたが、これに限らず、表示領域よりも広い表示対象の一部の範囲を表示するものであれば適用可能である。すなわち、文書、画像や文書を含むＷｅｂページ、地図などの少なくともいずれかであってもよい。

＜変形例＞
上述の実施形態では、タッチオフした後、シングルタッチによるタッチムーブを伴わないピンチ操作があった場合は、タッチ位置に基づいた位置を拡大縮小の基準位置とする第１の拡大処理を行う例を説明した。変形例として、一旦タッチオフとなった後であっても、前回のタッチ操作から所定時間内のタッチ操作であれば前回のタッチ操作と同じ基準の拡大処理を行ってもよい。これを実現する処理としてはまず、前述の図５のＳ５０６でＹＥＳと判定されると（全てのタッチがタッチアップしたと判定すると）、次回のタッチ操作までの時間を計るタイマーをスタートする。あるいは、マルチタッチ操作を行っていた複数箇所のタッチのうち１点を残して他のタッチがタッチアップし、シングルタッチの状態となったらタイマーをスタートするものとしても良い。その後、タッチオフの状態を経て、再びタッチダウンがあった場合に、Ｓ５０１の前に、タイマーをスタートしてから所定時間が経過しているか否かを判定する。所定時間は、ユーザが前回のタッチ操作から連続した一連のタッチ操作を行っているとみなせる程度の時間であり、例えば５０〜５００ｍｓｅｃ程度である。所定時間を経過していた場合はＳ５０１に進んでタッチムーブフラグをオフし、続いて前述の図５のＳ５０２以降の処理を行う。一方、所定時間を経過していない場合は前述のＳ５０１の処理を行うことなく、すなわちタッチムーブフラグをオフすることなく、前述の図５のＳ５０２以降の処理を行う。このようにタッチムーブフラグをオフしないようにすれば、タッチオフとなる前の前回のタッチ操作（第１のタッチ操作）でシングルタッチによるタッチムーブを行い、タッチムーブフラグがオンとなっていればオンが継続される。従って今回のタッチ操作（第２のタッチ操作）でシングルタッチによるタッチムーブを伴わないピンチアウト操作を行っても、タッチ位置に基づかない第２の拡大処理（Ｓ５１２またはＳ５１３の処理）が行われる。このようにすると、１回のピンチアウトでは所望の倍率まで拡大できなかった場合に、すぐに次のピンチアウト操作を行って更に拡大する場合に、前回のピンチアウトと拡大の基準位置を同じとすることができる。すなわち、連続したピンチ操作を行う場合に拡大・縮小の基準位置が変わらず、好適である。その他の部分は前述の実施形態と同様である。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

なお、システム制御部２０１の制御は１つのハードウェアが行ってもよいし、複数のハードウェアが処理を分担することで、装置全体の制御を行ってもよい。

また、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。さらに、上述した各実施形態は本発明の一実施形態を示すものにすぎず、各実施形態を適宜組み合わせることも可能である。

また、上述した実施形態においては、本発明をデジタルカメラに適用した場合を例にして説明したが、これはこの例に限定されず、タッチパネルに対するタッチ操作に応じて画像の拡大や縮小、移動などの表示制御が可能な装置であれば適用可能である。すなわち、本発明は、パーソナルコンピュータやその一種であるタブレット端末、携帯電話端末やその一種であるスマートフォン（眼鏡型端末や腕時計型端末を含む）、ＰＤＡ（携帯情報端末）、携帯型の画像ビューワ、音楽プレーヤ、ゲーム機、電子ブックリーダ、プリンタ、スキャナ、ファクシミリ或いは複写機などの機能が搭載された事務機器、医療機器などに適用可能である。

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１０１…表示部、１０１ｂ…タッチパネル、２０１…システム制御部

Claims (16)

1. 表示手段へのタッチ操作を検出可能なタッチ検出手段と、
   前記表示手段に対する複数箇所へのマルチタッチ操作を検出した場合に、当該マルチタッチ操作の前から継続するタッチ操作による前記表示手段に対するタッチ位置の移動を伴う所定のタッチ操作を検出していなかった場合には、当該マルチタッチ操作に応じて前記表示手段に表示されている表示対象を、当該マルチタッチ操作を行う複数のタッチ位置に基づく第１の位置を基準として拡大または縮小するように制御を行い、
   前記所定のタッチ操作を検出し、前記所定のタッチ操作から少なくとも１つのタッチが離されないまま、前記表示手段に対するマルチタッチ操作を検出した場合には、当該マルチタッチ操作に応じて前記表示手段に表示されている表示対象を、当該マルチタッチ操作を行う複数のタッチ位置には基づかない第２の位置を基準として拡大または縮小するように制御する表示制御手段と、を有することを特徴とする表示制御装置。
2. 前記第１の位置は、前記マルチタッチ操作を行う複数のタッチ位置の中央であることを特徴とする請求項１に記載の表示制御装置。
3. 前記第２の位置は、前記表示手段に表示されている表示対象の表示範囲の中央であることを特徴とする請求項１または２に記載の表示制御装置。
4. 前記第２の位置は、前記表示対象の端部が前記表示手段の表示範囲の端部に近い場合には、当該表示対象の端部に基づく位置であることを特徴とする請求項３に記載の表示制御装置。
5. 前記所定のタッチ操作は、タッチしたまま所定量以上移動する操作であることを特徴とする請求項１ないし４のいずれか１項に記載の表示制御装置。
6. 前記所定のタッチ操作は、１箇所へのタッチ操作で行われる操作であることを特徴とする請求項１ないし５のいずれか１項に記載の表示制御装置。
7. 前記表示制御手段は、前記所定のタッチ操作に応じて、前記表示手段の表示領域における前記表示対象の表示範囲を変更することを特徴とする請求項１ないし６のいずれか１項に記載の表示制御装置。
8. 前記表示制御手段は、前記マルチタッチ操作を検出したことに応じて、拡大または縮小する基準位置を表示することを特徴とする請求項１ないし７のいずれか１項に記載の表示制御装置。
9. 前記表示対象は画像であることを特徴とする請求項１ないし８のいずれか１項に記載の表示制御装置。
10. 前記表示対象は文書、Ｗｅｂページおよび地図の少なくとも１つであることを特徴とする請求項１ないし８のいずれか１項に記載の表示制御装置。
11. 前記表示制御装置は撮像装置であることを特徴とする請求項１ないし１０のいずれか１項に記載の表示制御装置。
12. 前記表示制御装置は携帯電話端末、パーソナルコンピュータ、タブレット端末の少なくとも１つであることを特徴とする請求項１ないし１０のいずれか１項に記載の表示制御装置。
13. 第１のタッチ操作で前記所定のタッチ操作が行われた後、１箇所もタッチされていない状態となり、その後に行われた第２のタッチ操作が前記第１のタッチ操作の終了から所定時間内であり、当該第２のタッチ操作によるマルチタッチ操作を検出した場合には、前記表示制御手段は、当該第２のタッチ操作による前記所定のタッチ操作を検出していなくとも、当該第２のタッチ操作によるマルチタッチ操作を行う複数のタッチ位置には基づかない第２の位置を基準として拡大または縮小するように制御することを特徴とする請求項１ないし１２のいずれか１項に記載の表示制御装置。
14. 表示手段へのタッチ操作を検出するステップと、
    前記表示手段に対する複数箇所へのマルチタッチ操作を検出した場合に、当該マルチタッチ操作の前から継続するタッチ操作による前記表示手段に対するタッチ位置の移動を伴う所定のタッチ操作を検出していなかった場合には、当該マルチタッチ操作に応じて前記表示手段に表示されている表示対象を、当該マルチタッチ操作を行う複数のタッチ位置に基づく第１の位置を基準として拡大または縮小するように制御を行い、
    前記所定のタッチ操作を検出し、前記所定のタッチ操作から少なくとも１つのタッチが離されないまま、前記表示手段に対するマルチタッチ操作を検出した場合には、当該マルチタッチ操作に応じて前記表示手段に表示されている表示対象を、当該マルチタッチ操作を行う複数のタッチ位置には基づかない第２の位置を基準として拡大または縮小するように制御するステップと、を有することを特徴とする表示制御装置の制御方法。
15. コンピュータを、請求項１ないし１３のいずれか１項に記載された表示制御装置の各手段として機能させるためのプログラム。
16. コンピュータを、請求項１ないし１３のいずれか１項に記載された表示制御装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。

Images