JP5809202B2 - 画面操作可能な画像表示装置及びその操作方法 - Google Patents

Description

本発明は、表示画面の部分領域に表示されているページ画像又はそのファイルを容易且つ直感的に操作することができる画面操作可能な画像表示装置及びその操作方法に関する。

液晶ディスプレイ等の画像表示装置において、表示画面に表示されているウインドウを操作するためのユーザインターフェイスとして、ウインドウ内に表示されたボタン及びアイコン等のクリック操作、又はプルダウンメニューからの選択操作により、所定の処理を行なう方法が知られている。そのための操作装置としては、コンピュータ用マウスが従来から使用されている。近年では、タッチパネル等のタッチ操作可能な装置を備えた表示装置（以下「タッチパネルディスプレイ」ともいう）が普及しつつあり、ユーザが表示画面にタッチして対象を操作するような直感的な操作を行なうことができる環境が提供可能になっている。これに伴い、タッチ操作の改善が要望されている。

例えば、下記特許文献１には、タッチパネルの操作性を改善する方法として、タッチパネルにおける操作キーの誤入力を防止できる入力装置が開示されている。具体的には、複数の操作キーが表示されたタッチパネルディスプレイにおけるフリック操作（指等をタッチパネルに接触させた状態で所定の方向に素早く移動させた後、タッチパネルから指等を離す操作）に関して、近接する２つの操作キーが互いにフリック方向（フリック操作を受付ける方向）が異なるように設定され、操作者によりフリックが行なわれた場合、接触が終了した領域及びフリック方向に基づいて、操作された操作キーを特定する。これによって、操作キーが近接されて表示されるタッチパネルにおいて、操作キーの誤入力の防止を高精度に実現することができる。

特開２０１２−１５５４９１号公報

しかし、いまだに画面の操作性は十分に改善されているとは言い難い。特に最近では大画面のタッチパネルディスプレイが実用化され、一度に表示可能な情報量が増大しており、これに伴い、便利になる一方、操作すべき対象が増大するため、増大した情報量をさらに有効に活用するために、操作性の改善が求められている。

図１を参照して、タッチパネルディスプレイにおけるタッチ操作の問題を具体的に説明する。図１は、タッチパネルディスプレイの表示画面９００に表示された１つのウインドウ９０２内に、あるファイルの画像がページ単位で表示されている状態を示す。ページ単位で表示された画像を「ページ画像」という。

右上のボタン９０４は、タッチ操作のモードを切換えるためのボタンである。即ち、ボタン９０４がタッチされて選択されると、描画モードになる（ボタンは、選択状態では反転表示される）。描画モードでは、ユーザは、表示画面９００に重畳して配置されたタッチパネルにタッチして描画することができる。即ち、タッチした状態を維持したままタッチ位置を移動させると、表示画面９００上にタッチ位置の軌跡に沿って線が表示される。

描画モードに設定されていない状態では、タッチ操作によってウインドウ９０２に対する操作等を行なうことができる。例えば、左右方向へのフリック操作又はスワイプ操作（画面にタッチした指等を一方向に滑らせる操作）により、表示されているページ画像の前のページ画像又は次のページ画像を表示することができる。また、ウインドウの枠（周縁部）にタッチしてドラッグすることによって、ウインドウの表示位置を、表示画面９００上で変更することができる。図１には、ユーザ９０６による、左方向へのスワイプ操作を左方向の矢印で示している。最初にタッチパネルにタッチしたユーザの手の位置を破線で示している。これによって、ウインドウ９０２には、例えば次のページ画像が表示される。

このようなタッチパネルディスプレイが描画モードに設定されている状態で、ユーザがウインドウ操作を行なうと（例えば、別のページを表示させるために左方向へのスワイプ操作を行なうと）、ウインドウ操作が行なわれずに、タッチ位置の軌跡に沿って描画されてしまう。例えば、図１は、左方向へのスワイプ操作により、線９０８が描画された状態を示す。この場合、ユーザは、描画された線９０８を消去する操作（例えば、右上のボタンの何れかに描画を消去する消しゴム機能が割当てられていれば、そのボタンを操作する）を行なった後、ボタン９０４にタッチして描画モードを解除し、再度同じウインドウ操作（スワイプ操作）を行なう。このような操作は、ユーザにとって非常に煩雑な操作である。

これを回避するには、ユーザは、操作を行なう場合、描画モードにあるか否かを常に認識していること、又は操作の前に確認することが必要であり、このことはユーザにとって負担である。特に、大画面タッチパネルディスプレイに画像を表示し、複数のユーザが画面操作をしながら議論しているような場合には、描画モードであるか否かを全員が正しく認識して、適切な画面操作を行なうことは期待できない。また、描画中に、１回のウインドウ操作のためだけに、描画モードの解除及び再設定をしなければならないことは、煩雑である。

なお、この問題は、タッチ位置の軌跡に沿って描画する場合に限らない。タッチされた位置に、予め設定された図形等が描画される機能を備えた画像表示装置もあり、その場合にも同様の問題が生じる。

特許文献１に開示された技術は、大画面タッチパネルディスプレイに対する操作を想定したものではなく、大画面タッチパネルディスプレイにおけるウインドウ操作時に発生する上記した問題を解決することはできない。

したがって、本発明は、表示画面の部分領域に表示されているページ画像又はそのファイルを容易且つ直感的に操作することができる画面操作可能な画像表示装置及びその操作方法を提供することを目的とする。

本発明に係る画像表示装置は、画像を表示するための表示部と、表示部により表示された画像上の位置を指定する操作により指定された位置を検出する検出部とを含む。表示部は、１つのファイルに含まれるデータから生成されるページ単位の画像を、表示部の一部の所定領域に表示する。画像表示装置は、検出部により位置が検出されていない状態において検出部により最初に検出された位置が所定領域外に位置し、当該位置の指定操作が維持されたまま、指定された位置が変化し、検出部により位置が検出されなくなったことを受けて、検出部により検出された位置の変化に応じてファイルを操作するファイル操作部をさらに含む。

好ましくは、画像表示装置は、検出部により位置が検出されていない状態において検出部により最初に検出された位置が所定領域外に位置していたことを受けて、当該位置の指定操作が維持されたまま、指定された位置が変化し、指定された位置が所定領域内に含まれるようになったか否かを判定する判定部をさらに含む。ファイル操作部は、判定部により、指定された位置が所定領域内に含まれるようになったと判定されたことを受けて、検出部により検出された位置の変化により形成される軌跡と所定領域との位置関係に応じてファイルを操作する。

より好ましくは、所定領域は四角形であり、所定領域外の、四角形の辺の近傍に、ファイルの操作を示す情報が表示される。

さらに好ましくは、検出部は、表示部の画像が表示される表示領域に重畳して配置され、タッチされた位置を検出するタッチ検出部を含み、表示部により表示された画像上の位置を指定する操作は、タッチ操作である。

好ましくは、所定領域は四角形であり、ファイル操作部によるファイル操作は、四角形の４つの辺のうち、検出部により検出された位置の変化により形成される軌跡が交差する辺に応じて異なる。

より好ましくは、ファイルは、ページ単位で表示される画像の表示順序の情報を含み、所定領域に画像が表示された状態で、検出部により検出された位置の変化方向が左右方向であると判定されたときのファイル操作部によるファイル操作は、表示されている画像を、表示順序にしたがって変更する操作である。

さらに好ましくは、ファイルは、ページ単位で表示される画像の表示順序の情報を含み、所定領域に画像が表示された状態で、検出部により検出された位置の変化方向が上下方向であると判定されたときのファイル操作は、ファイルに含まれるデータから生成される画像の表示を止める操作、又は、ファイルに含まれるデータから生成される画像を印刷する操作である。

本発明に係る画像表示装置の操作方法は、画像表示装置の表示画面の全面に画像を表示するステップと、１つのファイルに含まれるデータから生成されるページ単位の画像を、表示画面の一部の所定領域に表示するステップと、表示画面の全面に表示された画像上の位置を指定する操作により指定された位置を検出する検出ステップと、検出ステップにより位置が検出されていない状態において検出ステップにより最初に検出された位置が所定領域外に位置し、当該位置の指定操作が維持されたまま、指定された位置が変化し、検出ステップにより位置が検出されなくなったことを受けて、検出ステップにより検出された位置の変化に応じてファイルを操作するステップとを含む。

本発明によれば、表示画面にページ画像として表示されているファイルの操作を、従来よりもさらに容易且つ直観的な操作とすることができる。例えば、ユーザは、紙のページを捲るような感覚で、ページ画像として表示されているファイルを操作することができる。また、ユーザは、表示されているファイルを閉じる操作、表示されているページ画像を印刷する操作等も従来よりも容易に行なうことができる。

特に、打ち合わせ等において、ファイルを操作して説明するユーザと、説明を受けるユーザとが同時に１つのディスプレイを利用しているような場合、説明する側のユーザがファイルを一旦開いてウインドウ表示させてから改めてウインドウ内のボタンをクリックして目的の操作を行なうといった「もたつき」、又は、操作のためのプルダウンメニュー等の、説明を受ける側にとっては不要な情報を表示することを回避することができる。したがって、ユーザの煩わしさが解消され、操作に関してより好ましいユーザエクスペリエンス（ｕｓｅｒ ｅｘｐｅｒｉｅｎｃｅ）を提供することができる。

従来の画面操作を示す図である。 本発明の実施の形態に係る画像表示装置の構成の概略を示すブロック図である。 タッチ入力の検出方法の一例を示す図である。 図２に示した画像表示装置における表示画面の一例を示す図である。 図２に示した画像表示装置にウインドウ表示されたファイルの操作を実現するプログラムの制御構造を示すフローチャートである。 図２に示した画像表示装置におけるウインドウ表示されたファイルの操作を示す図である。 図６とは別の操作方法を示す図である。 図６及び図７とは別の操作方法を示す図である。 図６〜図８とは別の操作方法を示す図である。

以下の実施の形態では、同一の部品には同一の参照番号を付してある。それらの名称及び機能も同一である。したがって、それらについての詳細な説明は繰返さない。

また、以下において、「タッチ」とは入力位置の検出装置が位置を検出可能な状態になることを意味し、検出装置に接触して押圧する場合、押圧せずに接触する場合、及び、接触せずに近接する場合を含む。後述するように、入力位置の検出装置には、接触型に限らず非接触型の装置を用いることもできる。非接触型の検出装置の場合には「タッチ」とは、入力位置を検出可能な距離まで検出装置に近接した状態を意味する。

図２を参照して、本発明の実施の形態に係る画像表示装置１００は、演算処理部（以下、ＣＰＵと記す）１０２、読出専用メモリ（以下、ＲＯＭと記す）１０４、書換可能メモリ（以下、ＲＡＭと記す）１０６、記録部１０８、インターフェイス部（以下、ＩＦ部と記す）１１０、タッチ検出部１１２、表示部１１４、表示制御部１１６、ビデオメモリ（以下、ＶＲＡＭと記す）１１８、及びバス１２０を備えている。ＣＰＵ１０２は、画像表示装置１００全体を制御する。

ＲＯＭ１０４は不揮発性の記憶装置であり、画像表示装置１００の動作を制御するために必要なプログラム及びデータを記憶している。ＲＡＭ１０６は、通電が遮断された場合にデータが消去される揮発性の記憶装置である。記録部１０８は、通電が遮断された場合にもデータを保持する不揮発性記憶装置であり、例えば、ハードディスクドライブ、又はフラッシュメモリ等である。記録部１０８は着脱可能に構成されていてもよい。ＣＰＵ１０２は、バス１２０を介してＲＯＭ１０４からプログラムをＲＡＭ１０６上に読出して、ＲＡＭ１０６の一部を作業領域としてプログラムを実行する。ＣＰＵ１０２は、ＲＯＭ１０４に格納されているプログラムにしたがって画像表示装置１００を構成する各部の制御を行なう。

バス１２０には、ＣＰＵ１０２、ＲＯＭ１０４、ＲＡＭ１０６、記録部１０８、タッチ検出部１１２、表示制御部１１６、及びＶＲＡＭ１１８が接続されている。各部間のデータ（制御情報を含む）交換は、バス１２０を介して行なわれる。

表示部１１４は、画像を表示するための表示パネル（液晶パネル等）である。表示制御部１１６は、表示部１１４を駆動するための駆動部を備え、ＶＲＡＭ１１８に記憶された画像データを所定のタイミングで読出し、表示部１１４に画像として表示するための信号を生成して、表示部１１４に出力する。表示される画像データは、ＣＰＵ１０２が記録部１０８から読出して、ＶＲＡＭ１１８に伝送する。

タッチ検出部１１２は、例えばタッチパネルであり、ユーザによるタッチ操作を検出する。タッチ検出部１１２は、表示部１１４の表示画面に重畳して配置される。したがって、タッチ検出部１１２へのタッチは、タッチ位置に対応する、表示画面に表示された画像の点を指定する操作になる。タッチ検出部１１２にタッチパネルを用いる場合のタッチ操作の検出について、図３を参照して後述する。

ＩＦ部１１０は、例えばＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）であり、ネットワーク等の外部との接続を行ない、ネットワークに接続されたコンピュータ等との間で画像データを送受信する。ＩＦ部１１０を介して外部から受信した画像データは、記録部１０８に記録される。また、ネットワークに接続されたプリンタ等の画像形成装置への印刷指示は、ＩＦ部１１０を介して行なわれる。

図２の画像表示装置１００は、構成要素が全て近接して配置され、１体に形成されている場合に限定されない。例えば、タッチ検出部１１２及び表示部１１４は一体として配置されているが、それ以外の構成要素はタッチ検出部１１２及び表示部１１４から離隔して配置されていてもよい。例えば、タッチ検出部１１２及び表示部１１４以外の構成要素が、所定のビデオ信号を出力可能な汎用コンピュータであってもよい。その場合、汎用コンピュータから出力されるビデオ信号はケーブル又は無線で表示部１１４に伝送し、タッチ検出部１１２からの出力信号はケーブル又は無線で汎用コンピュータに伝送すればよい。

図３は、赤外線遮断検出方式のタッチパネル（タッチ検出部１１２）を示す。タッチパネルは、長方形の書込面の隣接する２辺にそれぞれ一列に配置された発光ダイオード列（以下、ＬＥＤ列と記す）２００、２０２と、それぞれのＬＥＤ列２００、２０２に対向させて一列に配置された２つのフォトダイオード列（以下、ＰＤ列と記す）２１０、２１２とを備えている。ＬＥＤ列２００、２０２の各ＬＥＤから赤外線を発光し、この赤外線を対向するＰＤ列２１０、２１２の各ＰＤが検出する。図３において、ＬＥＤ列２００、２０２の各ＬＥＤから赤外線を上向き及び左向きの矢印で示す。

タッチパネルは、例えばマイクロコンピュータ（以下、マイコンという）（ＣＰＵ、メモリ、及び入出力回路等を含む素子）を備え、各ＬＥＤの発光を制御する。各ＰＤは、受光した光の強度に応じた電圧を出力する。ＰＤの出力電圧は、アンプによって増幅される。また、各ＰＤ列２１０、２１２の複数のＰＤからは同時に信号が出力されるので、出力信号は一旦バッファに保存された後、ＰＤの配列順序に応じたシリアル信号として出力され、マイコンに伝送される。ＰＤ列２１０から出力されるシリアル信号の順序は、Ｘ座標を表す。ＰＤ列２１２から出力されるシリアル信号の順序は、Ｙ座標を表す。

ユーザがタッチペン２２０でタッチパネル上の１点にタッチすると、タッチペン２２０のペン先によって赤外線が遮断される。したがって、遮断される前まで、その赤外線を受光していたＰＤの出力電圧は減少する。タッチされた位置（ＸＹ座標）に対応するＰＤからの信号部分が減少するので、マイコンは、受信した２つのシリアル信号の信号レベルが低下している部分を検出し、タッチされた位置座標を求める。マイコンは、決定した位置座標をＣＰＵ１０２に伝送する。このタッチ位置を検出する処理は、所定の検出周期で繰返されるので、同じ点が検出周期よりも長い時間タッチされていると、同じ座標データが繰返し出力される。どこにもタッチされていなければ、マイコンは位置座標を伝送しない。タッチペン２２０の代りに、指でタッチ検出部１１２にタッチしても、同様にタッチされた位置を検出することができる。

上記したタッチされた位置の検出技術は公知であるので、これ以上の説明は繰返さない。また、タッチ検出部１１２には、赤外線遮断方式以外のタッチパネル（静電容量方式、表面弾性波方式、抵抗膜方式等）を用いてもよい。なお、静電容量方式では、センサに近接していれば非接触でも位置を検出することができる。

図４は表示部１１４の表示画面に画像が表示された状態を示す。このような表示は、ＲＯＭ１０４に記憶された所定のプログラムが、ＣＰＵ１０２により実行されることによって実現される。

表示画面２３０の左上部分にはトレイ２４０が表示され、その領域内には、ファイルを表すアイコン２４２が表示される。図４では、Ａ〜Ｃの３つのアイコンが表示されている。各アイコンが表すファイルは、例えば記録部１０８に記憶されている。ここでは、各ファイルは複数のページ画像を含んでいるとする。これは、各ファイルが、表示画面２３０上に、複数のページ画像として表示され得るデータを含んでいることを意味する。ここでは、タッチ検出部１１２には、ユーザが指でタッチするとして説明するが、指以外（例えばペン等）でタッチしてもよい。また、便宜上、表示部１１４上に表示されている画像（アイコン等）の上に位置する、タッチ検出部１１２の部分に対するタッチ操作を、表示部１１４上に表示されている画像に対するタッチ操作と記載する。

各アイコンを、指でダブルタップ（タッチ検出部１１２の略同じ位置に連続して２回タッチする操作）する、又はトレイ２４０の外側にドラッグドロップ（アイコン上のタッチ検出部１１２の位置にタッチした状態でタッチ位置を移動させた後、タッチ検出部１１２から指を離す操作）する等により、対応するファイルのデータが、表示画面２３０上に所定の大きさのページ画像として表示される。以下、ページ画像として表示される領域をウインドウといい、アイコンに対する操作をアイコン操作という。また、ファイルのデータからページ画像を生成して表示させるアイコン操作を、ファイルを開く操作（ファイルオープン）という。

図４では、アイコン２４２に対する操作により、対応するファイルが開かれ、表示画面２３０上のウインドウ２５０内にページ画像が表示されている。このとき、ファイル内のどの画像を最初に表示するかは任意である。例えば、予め設定されている所定の順序の先頭（第１ページ）の画像が表示される。

表示画面２３０の右上部分の機能ボタン領域２７０には、画像表示装置１００に各機能の実行を指示するための複数の機能ボタンが表示されている。各機能ボタンには、各々特定の機能が割当てられている。機能ボタン２７２に割当てられる機能は、タッチ操作による描画モードを設定及び解除する機能（タッチされる毎に設定と解除とが切換わり、設定状態では機能ボタンは反転表示される）であるとする。それ以外の機能ボタンに割当てられる機能としては、例えば、記録部１０８に保存されているファイルをトレイ２４０にアイコンとして表示させる機能、ファイルの画像表示を停止（ウインドウを消去）する機能（ファイルクローズ）、表示されているページ画像を記録部１０８に保存する機能、画像表示されているファイルを印刷する機能、及び、描画モードで描画される線の種類（色及び太さ等）を設定する機能等である。

描画モードに設定されている場合、従来技術と同様に、ユーザによるタッチ位置の軌跡に沿って線が描画される。図４は、ユーザ２５２が人差指でタッチ検出部１１２にタッチした後、タッチを維持したまま、矢印で示すように左側にタッチ位置を移動させたことによって、線２５４が描画された状態を示している。最初にタッチしたときのユーザの手の位置が破線で示されている。また、描画モードが解除されている場合、従来技術と同様に、ウインドウ操作を行なうことができる。

以下に、図５を参照して、画像表示装置１００におけるウインドウ表示されているファイルの操作について説明する。以下の説明では、画像表示装置１００は、図４に示した画面において、描画を行なう機能ボタン２７２が選択され、描画モードになっているとする。

ステップ３００において、ＣＰＵ１０２はタッチ検出部１１２がタッチされたか否かを判定する。上記したように、ＣＰＵ１０２は、タッチ検出部１１２から座標データを受信したか否かを判定する。タッチ検出部１１２は、タッチされていなければ位置座標を出力せず、タッチされると、タッチされた点の位置座標（Ｘ座標，Ｙ座標）を出力する。タッチされたと判定された場合、制御はステップ３０２に移行する。そうでなければ、制御はステップ３０４に移行する。

ステップ３０２において、ＣＰＵ１０２は、受信した座標データ（タッチの開始位置）をＲＡＭ１０６に記憶する。

ステップ３０４において、ＣＰＵ１０２は終了するか否かを判定する。ＣＰＵ１０２は、機能ボタンの１つに割当てられた終了ボタンが押された場合、プログラムを終了する。そうでなければ処理はステップ３００に戻り、タッチされるのを待つ。

ステップ３０６において、ＣＰＵ１０２は、ステップ３００でタッチされた位置が、ウインドウ２５０の外側の位置であるか否かを判定する。ここで、ウインドウ２５０は、ユーザのアイコン操作によってＣＰＵ１０２が、指定されたファイルのデータからページ画像を生成して、表示画面２３０に表示したものである。そして、ＣＰＵ１０２は、ウインドウ操作に応じてウインドウ２５０の表示形態を変更できるように、ウインドウ２５０の位置情報を、例えばＲＡＭ１０６に記憶し、管理している（例えば、ウインドウ２５０の左上及び右下の２つの頂点の位置座標が記憶されている）。したがって、ＣＰＵ１０２は、ステップ３０２で記憶した座標が、ウインドウ２５０の位置情報によって特定される矩形領域外に位置するか否かを判定する。ウインドウ２５０の外側に位置すると判定された場合、制御はステップ３０８に移行する。そうでなければ（ウインドウ２５０内に位置する場合）、制御はステップ３２０に移行する。

ステップ３２０において、ＣＰＵ１０２は、従来技術と同様に描画処理を実行する。即ち、タッチが維持された状態でタッチ位置が変化したことが検出された場合、タッチ位置の軌跡に沿った線（受信された位置座標を受信順に接続した線）がウインドウ２５０内に表示される。その後、タッチされなくなった場合（ＣＰＵ１０２が位置座標を受信しなくなった場合）、制御はステップ３００に戻る。

ステップ３０８において、ＣＰＵ１０２は、タッチが維持されているか否かを判定する。即ち、ＣＰＵ１０２は、連続して位置座標を受信しているか否かを判定する。例えば、タッチ検出部１１２の検出周期よりも少し長い期間を所定期間とし、その所定期間内に位置座標を受信すれば、ＣＰＵ１０２はタッチが維持されていると判定し、制御はステップ３１０に移行する。所定期間内に位置座標を受信しなければ、ＣＰＵ１０２は、タッチが維持されなくなった（指がタッチ検出部１１２から離れた）と判定し、制御はステップ３００に戻る。

ステップ３１０において、ＣＰＵ１０２は、ステップ３０８において受信した位置座標を、ＲＡＭ１０６に記憶する。後述するように、ステップ３１０は繰返し実行され得る。したがって、受信された位置座標は、受信順序が分かるように所定数が記憶される。所定数を超えて位置座標を受信した場合には、記憶されている位置座標のうち最も古いもの（受信時刻が最も早いもの）に、最新の位置座標を上書きする。これによって、最新の位置座標から所定数の位置座標が記憶される。

ステップ３１２において、ＣＰＵ１０２は、タッチ位置がウインドウ２５０内であるか否かを判定する。即ち、ＣＰＵ１０２は、ステップ３０８で受信した最新の位置座標が、ウインドウ２５０の位置情報によって特定される矩形領域内の位置を表すか否かを判定する。タッチ位置がウインドウ２５０内であると判定された場合、制御はステップ３１４に移行する。そうでなければ（ウインドウ２５０外）、制御はステップ３０８に戻る。

このように、ステップ３００〜３１２によって、最初にウインドウ２５０外の領域がタッチされた後、タッチが維持された状態でタッチ位置がウインドウ２５０内に移動したことを検知することができる。

ステップ３１４において、ＣＰＵ１０２は、タッチ操作の方向（タッチ位置の変化方向）を決定する。例えば、ＣＰＵ１０２は、ステップ３０８の処理が繰返されてＲＡＭ１０６に記憶された位置座標を結ぶ線が、ウインドウ２５０の４辺のうちのどの辺と交差するかを判定する。ウインドウの右辺、左辺、上辺、及び下辺と交差する場合、それぞれタッチ操作の方向は、左方向、右方向、下方向、及び上方向に決定される。

図６に、種々のタッチ操作を矢印２６０〜２６６で示す。矢印の方向がタッチ操作方向である。各矢印において、最初のタッチ位置から、タッチ位置がウインドウ２５０内に入った直後の位置までを実線で、ウインドウ２５０内に入った位置から、指が離れた位置までを破線で示している。このように、タッチ位置がウインドウ２５０内に入った直後のタッチ位置の座標と、その直近のウインドウ２５０外のタッチ位置の座標から、タッチ操作の軌跡が交差するウインドウ２５０の辺を決定することができる。矢印２６０〜２６６はそれぞれ、ウインドウ２５０の右辺、左辺、上辺、及び下辺と交差している。

ステップ３１６において、ＣＰＵ１０２は、ステップ３１４で決定したタッチ操作の方向に応じて、予め割当てられているファイル操作を実行する。例えば、タッチ操作の方向が左方向であれば、ウインドウ内に表示されているページ画像の次のページ画像を表示する（以下「ページ送り」ともいう）。タッチ操作の方向が右方向であれば、ウインドウ２５０内に表示されているページ画像の前のページ画像を表示する（以下「ページ戻し」ともいう）。タッチ操作の方向が下方向であれば、ウインドウ２５０として表示されているファイルを閉じる（表示画面２３０からウインドウ２５０を消去する）。タッチ操作の方向が上方向であれば、ウインドウ２５０として表示されているファイルの印刷操作を実行する（例えば、印刷設定ウインドウを表示する）。

ステップ３１８において、ＣＰＵ１０２は、ステップ３０８と同様に、タッチが維持されているか否かを判定する。指がタッチ検出部１１２から離れて、タッチが維持されなくなったと判定されるまで、ステップ３１８を繰返す。タッチが維持されなくなったと判定された場合、制御はステップ３００に戻る。

以上により、ユーザは、最初にウインドウ２５０外の領域にタッチした後、タッチを維持した状態でタッチ位置をウインドウ２５０内に移動させると、モードを切換える操作をすることなく、描画モードのまま、そのときのタッチ操作の方向に応じてウインドウ操作を行なうことができる。例えば、図７に左向きの実線の矢印２５６で示すように、ウインドウ２５０外の領域にタッチしてから、左方向にスワイプ操作を行なうことによって、ページ送り操作が実行される。このとき、図７において破線の矢印で示すように、スワイプ操作の軌跡が曲線であっても、ページ送り操作が実行される。

ユーザは、描画したい場合には、最初にウインドウ内にタッチすることにより、ウインドウ内に所望の文字、図形等を描画することができる。

したがって、ユーザに煩雑な操作を強いることがなく、ユーザは、描画モードを常に意識することも、操作の前にモードを確認することも必要なく、ページ送り操作、及びページ戻し操作等の操作を行なうことができる。よって、ユーザに、容易且つ直感的なファイル操作環境を提供することができる。

上記では、ウインドウの４辺のそれぞれに、異なるファイル操作を割当てる場合を説明したが、各辺を複数の領域に区分して、各区分に対して異なるファイル操作を割当ててもよい。例えば、ウインドウの下辺をその中央で２つの領域（線分）に区分し、タッチ位置の軌跡が下辺の左側の線分に交差する場合、ウインドウ２５０内に表示されているファイルの印刷操作を実行し、右側の線分に交差する場合、ウインドウ２５０内に表示されているページ画像の印刷操作を実行するようにしてもよい。

上記のように、タッチ位置の軌跡が交差するウインドウの各辺（又は各辺を区分した線分）に、異なる操作を割当てる場合、操作内容が容易に分かるように、操作説明を表示することが好ましい。例えば、図８に示すように、各辺の近傍に該当する操作説明２８０〜２８８を表示する。下辺は２つに区分され、異なる操作が割当てられているので、２つの操作を区別するために、境界線が表示されているが、境界線は表示されなくてもよい。表示する操作説明は、文字に限定されず、アイコン等の図形であってもよい。さらに、操作説明には、タッチ操作方向示す矢印が含まれていてもよい。なお、操作説明は、ウインドウが移動された場合、ウインドウに付随して移動し、ウインドウが消去された場合（ファイルクローズ）、消去される。

上記では、タッチ位置がウインドウ内に入った直後の位置座標を用いて、タッチ操作方向を決定したが、タッチ操作方向の決定方法はこれに限定されない。例えば、ステップ３１２において、タッチ位置がウインドウ内に入ったことが検知された後にも、タッチ位置の検知を継続し、タッチが維持されなくなったとき（指がタッチ検出部１１２から離れたとき）に、最後に受信した位置座標（指が離れた点の位置座標）と、タッチの開始点の位置座標（ステップ３０２で記憶した位置座標）とを用いて、タッチ操作の方向を決定してもよい。即ち、タッチの開始位置を起点とし、タッチの終了位置を終点とするベクトルから、タッチ操作の方向を決定することができる。

上記のページ送り操作において、タッチ操作速度に応じて、１回の操作で送られるページ数を変更してもよい。例えば、タッチ操作速度が速いほど、１回の操作で送られるページ数を多くする。タッチ操作速度を求めるには、ＣＰＵ１０２は、タッチ検出部１１２から受信した位置座標と、タイマから取得した、位置座標の受信時刻とを対応させてＲＡＭ１０６に記憶すればよい。例えば、タッチ位置の軌跡がウインドウの辺と交差する付近の複数のタッチ位置の座標と、それらに対応する時刻とを用いて、タッチ位置の移動速度を求め、得られた移動速度をタッチ操作速度とすればよい。

上記では、タッチ操作の軌跡によってウインドウ表示されているファイルを操作する場合を説明したが、これに限定されない。例えば、ウインドウの周囲（外側）のタッチされた位置に応じて、所定のファイル操作を実行してもよい。図９は、所定の操作が割当てられた、ウインドウ２５０の周囲領域２９０〜２９８を示している。領域２９０〜２９８の境界を表す線は、表示されても、表示されなくてもよい。図９の場合、領域２９０〜２９８がタッチされた場合、それぞれページ送り操作、ページ戻し操作、ファイルクローズ操作、ファイルの印刷操作、表示されているページ画像の印刷操作が実行される。

従来のユーザインターフェイスでは、タッチ操作は、そのタッチ位置に表示されている対象（アイコン等）を選択する操作と解釈される。例えば、同時に複数のウインドウを表示するマルチウインドウ表示の場合、１つのウインドウが選択されている状態で、そのウインドウの周囲（外側）にタッチした場合、選択されていたウインドウの選択は解除される。タッチ位置に別のウインドウがあれば、その別のウインドウが選択される。しかし、本操作では、選択されているウインドウ周囲の所定領域（例えば、ウインドウの辺に沿った所定幅の外部領域）がタッチされた場合、選択されているウインドウの選択状態を維持したまま、そのウインドウのファイル操作が決定され、実行される。タッチ位置に別の対象が表示されていても、その対象は選択されない。

この場合、ウインドウの上又は下に位置する所定領域における左右方向のスワイプ操作又はフリック操作に、ページ送り操作及びページ戻し操作を割当ててもよい。例えば、図９において、ウインドウ２５０の上側の領域２９４内（又は、下側の領域２９６及び２９８を一体とした領域内）において、左方向にスワイプ操作又はフリック操作された場合、ページ送りを実行し、右方向にスワイプ操作又はフリック操作された場合、ページ戻しを実行する。

画像表示装置１００は、大画面の表示装置に限定されない。本発明は、タブレット型の端末装置等、タッチによって描画及び画面操作を行なうことができる表示装置全般に適用することができる。

上記では、タッチ検出部１１２が操作されることによって、ウインドウ表示されているファイルの操作が実行される場合を説明したが、これに限定されない。例えば、画像表示装置１００が、コンピュータ用のマウスと、そのインターフェイス装置とを備えていれば（タッチ検出部１１２の有無は任意）、マウス操作によって、ウインドウ表示されているファイルの操作が実行されてもよい。その場合には、タッチされた点の位置座標の代りに、表示画面２３０に表示されるマウスカーソルの位置座標を使用して、同様に処理すればよい。

以上、実施の形態を説明することにより本発明を説明したが、上記した実施の形態は例示であって、本発明は上記した実施の形態に限定されるものではなく、種々変更して実施することができる。

１００ 画像表示装置
１０２ 演算処理部（ＣＰＵ）
１０４ 読出専用メモリ（ＲＯＭ）
１０６ 書換可能メモリ（ＲＡＭ）
１０８ 記録部
１１０ インターフェイス部（ＩＦ部）
１１２ タッチ検出部
１１４ 表示部
１１６ 表示制御部
１１８ ビデオメモリ（ＶＲＡＭ）
１２０ バス

Claims (7)

1. 画像を表示するための表示手段と、
   前記表示手段により表示された画像上の位置を指定する操作により指定された位置を検出する検出手段とを含み、
   前記表示手段は、１つのファイルに含まれるデータから生成されるページ単位の画像を、前記表示手段の一部の所定領域に表示し、
   前記検出手段により位置が検出されていない状態において前記検出手段により最初に検出された位置が前記所定領域外に位置し、当該位置の指定操作が維持されたまま、指定された位置が変化し、前記検出手段により位置が検出されなくなったことを受けて、前記検出手段により検出された位置の変化に応じて前記ファイルを操作するファイル操作手段をさらに含み、
   前記所定領域は、四角形であり、
   前記所定領域外の、前記四角形の辺の近傍に、前記ファイルの操作を示す情報が表示されることを特徴とする画像表示装置。
2. 前記検出手段により位置が検出されていない状態において前記検出手段により最初に検出された位置が前記所定領域外に位置していたことを受けて、当該位置の指定操作が維持されたまま、指定された位置が変化し、指定された位置が前記所定領域内に含まれるようになったか否かを判定する判定手段をさらに含み、
   前記ファイル操作手段は、前記判定手段により、指定された位置が前記所定領域内に含まれるようになったと判定されたことを受けて、前記検出手段により検出された位置の変化により形成される軌跡と前記所定領域との位置関係に応じて前記ファイルを操作することを特徴とする請求項１に記載の画像表示装置。
3. 画像を表示するための表示手段と、
   前記表示手段により表示された画像上の位置を指定する操作により指定された位置を検出する検出手段とを含み、
   前記表示手段は、１つのファイルに含まれるデータから生成されるページ単位の画像を、前記表示手段の一部の所定領域に表示し、
   前記検出手段により位置が検出されていない状態において前記検出手段により最初に検出された位置が前記所定領域外に位置し、当該位置の指定操作が維持されたまま、指定された位置が変化し、前記検出手段により位置が検出されなくなったことを受けて、前記検出手段により検出された位置の変化に応じて前記ファイルを操作するファイル操作手段をさらに含み、
   前記ファイルは、ページ単位で表示される前記画像の表示順序の情報を含み、
   前記所定領域に画像が表示された状態で、前記検出手段により検出された位置の変化方向が左右方向であると判定されたときの前記ファイル操作手段によるファイル操作は、表示されている画像を、前記表示順序にしたがって変更する操作であることを特徴とする画像表示装置。
4. 前記検出手段は、前記表示手段の画像が表示される表示領域に重畳して配置され、タッチされた位置を検出するタッチ検出手段を含み、
   前記表示手段により表示された画像上の位置を指定する操作は、タッチ操作であることを特徴とする請求項１から３の何れか１項に記載の画像表示装置。
5. 前記ファイル操作手段によるファイル操作は、前記四角形の４つの辺のうち、前記検出手段により検出された位置の変化により形成される軌跡が交差する辺に応じて異なることを特徴とする請求項１、２及び４の何れか１項に記載の画像表示装置。
6. 前記ファイルは、ページ単位で表示される前記画像の表示順序の情報を含み、
   前記所定領域に画像が表示された状態で、前記検出手段により検出された位置の変化方向が上下方向であると判定されたときのファイル操作は、前記ファイルに含まれるデータから生成される画像の表示を止める操作、又は、前記ファイルに含まれるデータから生成される画像を印刷する操作であることを特徴とする請求項１に記載の画像表示装置。
7. 画像表示装置の表示画面の全面に画像を表示するステップと、
   １つのファイルに含まれるデータから生成されるページ単位の画像を、前記表示画面の一部の所定領域に表示するステップと、
   前記表示画面の全面に表示された画像上の位置を指定する操作により指定された位置を検出する検出ステップと、
   前記検出ステップにより位置が検出されていない状態において前記検出ステップにより最初に検出された位置が前記所定領域外に位置し、当該位置の指定操作が維持されたまま、指定された位置が変化し、前記検出ステップにより位置が検出されなくなったことを受けて、前記検出ステップにより検出された位置の変化に応じて前記ファイルを操作する操作ステップとを含み、
   前記ファイルは、ページ単位で表示される前記画像の表示順序の情報を含み、
   前記所定領域に画像が表示された状態で、前記検出ステップにより検出された位置の変化方向が左右方向であると判定されたときの前記操作ステップによるファイル操作は、表示されている画像を、前記表示順序にしたがって変更する操作であることを特徴とする画像表示装置の操作方法。
   

Images