JP4913834B2 - 情報処理装置、制御方法及びプログラム - Google Patents

Description

本発明はタッチされた位置の検出が同時に複数可能な入力検知部と、表示部とを備えた情報処理装置等に関するものである。

従来から、情報処理装置において様々な入力方法が提案されている。利用者が情報処理装置において行う入力方法には、キー入力を利用したものや、タッチパネルを利用したものが知られている。これらの入力操作は、文字等の文章を入力する場合の他に、機能を選択する場合に行われたり、入退室や決済時に暗証番号等を入力することにより認証が行われたりする場合にも利用されている。

例えば、利用者がキーを利用して認証をする場合、一つずつキー入力をする方法の他に複数のキー入力を行う方法が提案されている（例えば、特許文献１参照）。複数のキー操作によって認証を行うことから、一つずつキー入力をするよりセキュリティ強度を強くすることが出来る。

特開２００８−１５２７５７号公報

近年、入力デバイスとして様々な装置が提供されている。ここで、従前からあるタッチパネルを発展させたものとして、光センサを内蔵したシステム液晶と呼ばれるものがある。

ここで、光センサを内蔵したシステム液晶について、図を用いて簡単に説明する。まず、システム液晶Ｄ８０の概要を図１９にしめす。システム液晶Ｄ８０は、表示信号による表示装置の機能と、読み取り信号による入力装置の機能とを実現する。システム液晶Ｄ８０を画素単位に拡大して記載したのがＤ８２であり、画素（Ｄ９０）毎に光センサが内蔵されており、利用者からの操作（タッチ）を検知できる。

図２０は、システム液晶の１画素分の断面図である。システム液晶の上面（利用者がタッチする側）から保護板Ｄ９０２、ガラス板Ｄ９０４、カラーフィルタＤ９０６、撮像素子Ｄ９０８、ガラス板Ｄ９１０、バックライトＤ９１２が配置されている。また、カラーフィルタＤ９０６は、ＲＧＢ色として、赤色のＤ９０６Ｒ、緑色のＤ９０６Ｇ及び青色のＤ９０６Ｂが配置されており、各色毎に撮像素子が配置されている。

まず、表示用のバックライトＤ９１２から光が照射される。照射された光は、システム液晶の表示面（保護板Ｄ９０２）に接触されている被写体（利用者の指Ｄ８４）で反射される。反射された光は、撮像素子Ｄ９０８により画像処理が施される。これにより、被写体が、システム液晶の表示面（保護板Ｄ９０２）に接触されたこと（タッチ）が検出されることとなる。

そして、画素毎に設置された撮像素子により画像処理が施されるため、複数の被写体の接触位置（座標）を検出することができる。すなわち、従前のタッチパネル（例えば、抵抗膜を利用したタッチパネルや、静電容量の変化を利用したタッチパネル、電磁誘導を利用したタッチパネル等）は、タッチした位置として検知できる箇所は１つであったが、上述のシステム液晶を利用したタッチパネルはタッチした位置を複数同時に検出することができる。

したがって、システム液晶を利用したタッチパネルを利用して、表示された画像、数字、文字、記号等の候補となる項目（候補項目）を表示して利用者に選択させる場合、複数の項目を選択させるといった利用方法が考えられる。

この場合、表示される候補項目は通常表示領域（システム液晶）の任意の位置に表示されることとなる。しかし、表示された候補項目のうち、利用者が選択しようとする候補項目が必ずしも選択しやすい位置に候補となる項目が表示されるとは限らないという問題点があった。

例えば、表示された画像の中から利用者が選択して正当な利用者であることを認証する認証システムについて考える。この場合、利用者がタッチにより、認証する画像を選択することとなる。ここで、利用者は認証をするために、複数の画像を選択するが、画像の表示位置によっては、選択しにくい（タッチしにくい）場合が生じてしまう。具体的には、利用者が人差し指と薬指を使ってタッチした後に次の項目をタッチする場合、残った指が届く範囲に所望する項目が必ず表示されているとは限らなかった。したがって、利用者は、一度タッチした状態を解除し、もう一度選択し直すといった必要があった。

また、メニューを選択する場合についても、利便性が高いシステムが提供されているとは言えなかった。一例として、ユーザが親階層のメニュー項目を選択すると、子階層のメニューが展開され表示されるシステムがある。

しかし、子階層のメニューが必ずしも一画面に収まって表示されるとは限らない。したがって、子階層のメニューの表示を切り替える必要があるが、そのためには別途スクロール操作等を行う必要があり、使い勝手の良い情報処理装置とは言えなかった。

上述した課題に鑑み、本発明が目的としているところは、項目を選択する場合に、選択されていない候補の項目の表示状態を変化させることにより、利用者にとって利便性の高い情報処理装置等を提供することである。

上述した課題に鑑み、本発明の情報処理装置は、
タッチされた位置の検出が同時に複数可能な入力検知部と、表示部とを備えた情報処理装置において、
前記表示部に複数の候補項目を表示する制御を行う候補項目表示制御部と、
前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から選択項目を選択する項目選択部と、
前記項目選択部により、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目を変更して表示する制御を行う表示変更制御部と、
を備え、
前記候補項目表示制御部は、候補項目として、階層構造の項目のうち親階層の項目を表示する制御を行い、
前記項目選択部は、前記入力検知部により検知されたタッチに基づいて、前記表示された親階層の項目を選択する親階層項目選択部を含み、
前記親階層項目選択部により選択された親階層から選択可能な子階層の項目を親階層の項目が選択可能に表示されたまま表示する制御を行う子階層表示制御部を更に有し、
前記表示変更制御部は、前記親階層項目選択部により前記親階層が所定時間以上選択されている場合には、前記子階層の項目を変更して表示する制御を行う子階層表示変更制御部を含むことを特徴とする。

また、本発明の情報処理装置において、前記子階層表示変更制御部は、前記表示部に表示されていない子階層の項目が表示されるように制御を行うことを特徴とする。

また、本発明の制御方法は、タッチされた位置の検出が同時に複数可能な入力検知部と、表示部とを備えた情報処理装置における制御方法において、
前記表示部に複数の候補項目を表示する制御を行う候補項目表示制御ステップと、
前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から選択項目を選択する項目選択ステップと、
前記項目選択ステップにより、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目を変更して表示する制御を行う表示変更制御ステップと、
を備え、
前記候補項目表示制御ステップは、候補項目として、階層構造の項目のうち親階層の項目を表示する制御を行い、
前記項目選択ステップは、前記入力検知部により検知されたタッチに基づいて、前記表示された親階層の項目を選択する親階層項目選択ステップを含み、
前記親階層項目選択ステップにより選択された親階層から選択可能な子階層の項目を親階層の項目が選択可能に表示されたまま表示する制御を行う子階層表示制御ステップを更に有し、
前記表示変更制御ステップは、前記項目選択ステップが、前記親階層が所定時間以上選択されている場合には、前記子階層の項目を変更して表示する制御を行う子階層表示変更制御ステップを含むことを特徴とする。

本発明のプログラムは、タッチされた位置の検出が同時に複数可能な入力検知部と、表示部とを備えたコンピュータに、
前記表示部に複数の候補項目を表示する制御を行う候補項目表示制御機能と、
前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から選択項目を選択する項目選択機能と、
前記項目選択機能により、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目を変更して表示する制御を行う表示変更制御機能と、
を備え、
前記候補項目表示制御機能は、候補項目として、階層構造の項目のうち親階層の項目を表示する制御を行い、
前記項目選択機能は、前記入力検知部により検知されたタッチに基づいて、前記表示された親階層の項目を選択する親階層項目選択機能を含み、
前記親階層項目選択機能により選択された親階層から選択可能な子階層の項目を親階層の項目が選択可能に表示されたまま表示する制御を行う子階層表示制御機能を更に有し、
前記表示変更制御機能は、前記項目選択機能が、前記親階層が所定時間以上選択されている場合には、前記子階層の項目を変更して表示する制御を行う子階層表示変更制御機能を実現させることを特徴としている。

本発明の情報処理装置によれば、表示部に複数の候補項目を表示し、検知されたタッチに基づいて、表示された候補項目の中から選択項目が選択され、所定時間以上選択されている場合（すなわち所定時間以上、タッチが検知されている場合）に、選択項目以外の候補項目が変更して表示されることとなる。したがって、選択している以外の項目が変化することから、次に項目を選択する場合に、選択しやすい位置に表示させることができる利便性の高い情報処理装置を提供することが可能となる。

また、候補画像記憶部に記憶されている画像から複数の候補項目となる画像が表示され、その中から一又は複数の画像が選択される。そして、選択されていない画像については所定時間が経過すると、異なる画像に変化することとなる。そして、選択された項目（画像）と、正解となる画像とが一致した場合には、正当な利用者であるとして認証が行われたと判断されることとなる。したがって、画像を用いて認証を行う場合に、複数の候補を利用者が選択する場合に押しにくい場所に正解画像が表示されているとしても、所定時間経過することにより、画像の場所が変化してタッチしやすい位置に表示されることとなる。

また、項目選択部により選択されている選択項目のうち、一の選択項目において検知されているタッチが解除されたときに認証を行うこととなる。したがって、利用者がタッチを解除するだけで認証を行うことができ、利便性の高い情報処理装置を提供することが可能となる。

また、表示部に親階層の項目を表示し、タッチに基づいて、親階層の項目を選択し、選択された親階層に応じて子階層の項目が表示される。そして、所定時間以上選択されている場合（すなわち所定時間以上タッチが検出されている場合）が所定時間以上検知された場合には、子階層の項目の表示が変更されることとなる。これにより、親階層をタッチで選択しておくことで、子階層の項目の表示が変更されることとなり、利便性の高い情報処理装置を提供することが可能となる。

また、子階層の項目の表示を変更する場合に、表示部に表示されていない子階層の項目が表示されるように制御を行うことができる。

第１実施形態における情報処理装置の外観を説明するための図である。 第１実施形態における情報処理装置の構成を説明するための図である。 （ａ）候補画像ＤＢの構成の一例を示す図である。（ｂ）正解画像ＤＢの構成の一例を示す図である。 第１実施形態における正解登録処理の動作フローである。 第１実施形態における認証処理の動作フローである。 第１実施形態における候補画像の選択動作について説明する図である。 第１実施形態における認証処理の動作フロー（変形例）である。 第１実施形態における動作例を説明するための図である。 第１実施形態における動作例を説明するための図である。 第１実施形態における動作例を説明するための図である。 第１実施形態における動作例を説明するための図である。 第１実施形態における動作例を説明するための図である。 第２実施形態における情報処理装置の構成を説明するための図である。 第２実施形態におけるメニューリストについて説明するための図である。 第２実施形態におけるメニュー表示処理の動作フローである。 第２実施形態における動作例を説明するための図である。 第２実施形態における動作例を説明するための図である。 第２実施形態における動作例を説明するための図である。 システム液晶の原理について説明するための図である。 システム液晶の原理について説明するための図である。

以下添付図面を参照しながら、本発明の実施の形態について説明し、本発明の理解に供する。尚、以下の実施の形態は、本発明を具体化した一例であって、本発明の技術的範囲を限定する性格のものではない。

〔実施の形態〕
［１．第１実施形態］
まず、第１実施形態について説明する。第１実施形態は、利用者が正当な利用者であると認証をする場合に選択する項目として画像を用いる認証システムについて、本発明を適用した場合について説明する。すなわち、まず、候補項目として候補画像を表示する。そして、候補画像の中から選択項目として選択画像が選択されることとなる。以下、図面を用いて詳細に説明する。

［１．１ 装置構成］
まず、本発明を適用した情報処理装置１の装置の概観を示す。本実施形態では、情報処理装置１の一例として携帯電話に適用した場合について説明する。例えば、図１（ａ）は、携帯電話の表示画面が縦表示の場合であり、図１（ｂ）は表示画面が横表示の場合の一例を示す図である。そして、図２に情報処理装置１の機能構成を示す。情報処理装置１は、制御部１００に、認証制御部１１０と、表示データ制御部１２０と、記憶部１４０と、システム液晶１５０とがバスを介して接続されている。また、表示データ制御部１２０には、表示位置制御部１３０が接続されている。

制御部１００は、情報処理装置１の動作を制御するための機能部であり、ＣＰＵ等、情報処理装置１に必要な制御回路によって構成されている。制御部１００は、記憶部１４０に記憶されている各種プログラムを読み出して実行することにより各種処理を実現することとなる。

認証制御部１１０は、利用者により選択された画像が、後述する正解画像ＤＢ１４４に記憶されている画像と一致するか否かを判定することにより利用者が正当な利用者であるか否かを認証する認証制御を行うための機能部である。認証した結果に応じて、情報処理装置は各種処理を実行する。例えば、情報処理装置１が入退室の制御に用いられている場合には、認証が正しく行われた場合には入退室が許可されることとなる。また、情報処理装置１が、決済処理において利用されている場合には、認証が正しく行われた場合に決済処理が実行されることとなる。

表示データ制御部１２０は、制御部１００の指示に基づいて後述するシステム液晶１５０（表示部１５２）に表示するデータを制御する機能部である。表示データ制御部は、制御部１００に表示する画像を表示し、表示位置制御部１３０に基づく表示位置に表示する。

表示位置制御部１３０は、表示する画像（例えば、候補画像）の表示位置を決定し、表示データ制御部１２０を制御する機能部である。表示データ制御部１２０が表示部１５２に出力する表示信号の内容を、具体的に制御することとなる。そして、表示データ制御部１２０は、表示位置制御部１３０から入力される制御信号に基づいて表示部１５２に出力することとなる。

記憶部１４０は、情報処理装置１が動作するための各種データ及びプログラムを記憶しておく機能部である。制御部１００は、記憶部１４０に記憶されているプログラムを読み出して実行する事により、各種機能を実現することとなる。

ここで記憶部１４０には、候補画像ＤＢ１４２と、正解画像ＤＢ１４４と、正解登録プログラム１４６と、認証プログラム１４８とが記憶されている。

候補画像ＤＢ１４２は、図３（ａ）に示すように、認証のときに、選択する候補として表示する画像（候補画像）が記憶されているＤＢである。本実施形態においては、候補画像の一例としてＪＰＥＧ形式にて記憶されているものとするが、他の画像形式でも良いことは勿論である。

正解画像ＤＢ１４４は、利用者により認証の正解画像が登録されているＤＢである。図３（ｂ）に示すように、正解画像ＤＢ１４４には、正解となる画像が登録されている。なお、この正解画像は、候補画像ＤＢ１４２に記憶されている候補画像の中から選択されたものである。

システム液晶１５０は、表示部１５２と、入力検知部１５４とを備えた表示装置である。詳細な動作については上述したが、表示部１５２は、例えば液晶ディスプレイにより構成されており、表示データ制御部１２０の表示制御信号に基づいて、各種情報を表示する。また、入力検知部１５４は、複数のタッチ位置を同時に検知可能なタッチパネルにより構成されており、利用者からタッチされた箇所の座標を検知する。

［１．２ 処理の流れ］
続いて、本実施形態における処理の流れについて説明する。まず、正解画像を登録する正解登録処理について図４に基づいて説明する。ここで、正解登録処理は、制御部１００が、記憶部１４０に記憶されている正解登録プログラム１４６を読み出して実行することにより実現される処理である。

まず、候補画像ＤＢ１４２から候補画像を読み出して画像一覧を作成し表示する（ステップＳ１００）。ここで、利用者により正解とする正解画像が選択される（ステップＳ１０２）。なお、ここで選択される正解画像は、１つ以上であれば良い。

そして、画像が選択され、正解画像として登録される操作がされた場合には（ステップＳ１０４；Ｙｅｓ）、正解画像として、正解画像ＤＢ１４４に登録される（ステップＳ１０６）。

つづいて、認証処理について、図５に基づいて説明する。ここで、認証処理は、制御部１００が、記憶部１４０に記憶されている認証プログラム１４８を読み出して実行することにより実現される処理である。

まず、制御部１００は、候補画像ＤＢ１４２から、候補画像の一覧をランダムに作成し、表示する（ステップＳ１５０）。ここで、表示される候補画像の個数は、予め決められた個数であったり、利用者が設定した個数であったり、表示部１５２の表示領域を考慮して決定された個数であったり、何れでも良い。なお、本実施形態においては、９つの候補画像が表示されることとして説明する。

そして、利用者により何れかの候補画像の一つが選択されると（ステップＳ１５２；Ｙｅｓ）、選択された画像を選択画像として一時記憶する（ステップＳ１５４）。ここで、候補画像を選択する方法としては、入力検知部１５４がタッチを検知し、検知した位置に基づいて、どの候補画像が選択されたかを判定する。

ここで、候補画像の選択について、図６を用いて説明する。図６（ａ）に示すように、
・画像Ａ＜（ｘ１，ｙ１）−（ｘ２，ｙ２）＞
・画像Ｂ＜（ｘ３，ｙ１）−（ｘ４，ｙ２）＞
・画像Ｃ＜（ｘ１，ｙ３）−（ｘ２，ｙ４）＞
・画像Ｄ＜（ｘ３，ｙ３）−（ｘ４，ｙ４）＞
が表示されているとする。

例えば、同時に点Ｍ、点Ｎの２点のタッチが入力検知部１５４により検出され、それぞれ座標Ｍ（Ｘｍ，Ｙｍ）、座標Ｎ（Ｘｎ，Ｙｎ）で表されるとする。点Ｍの座標がｘ１＜Ｘｍ＜ｘ２、ｙ１＜Ｙｍ＜ｙ２の位置にあった場合、点Ｍは（ｘ１，ｙ１）−（ｘ２，ｙ２）の範囲に表示されている画像Ａの領域にあるため、項目選択部は画像Ａが選択されたと判定する。この場合の各表示画像に対応する領域の座標は、表示位置制御部１３０に記憶されている。同様に、点Ｎの座標がｘ１＜Ｘｎ＜ｘ２、ｙ１＜Ｙｎ＜ｙ２の位置にあった場合、点Ｎも画像Ａの領域にあるため、項目選択部は画像Ａを選択したと判定する。この場合、点Ｍ、点Ｎの２点のタッチが検出されたが、項目選択部が選択する画像は画像Ａのみになる（図６（ｂ））。

しかし、点Ｎの座標がｘ３＜Ｘｎ＜ｘ４、ｙ３＜Ｙｎ＜ｙ４の位置にあった場合、点Ｎは（ｘ３，ｙ３）−（ｘ４，ｙ４）の範囲に表示されている画像Ｄの領域にあるため、制御部１００は画像Ｄが選択されたと判定する。この場合は点Ｍ、点Ｎの２点のタッチが検出され、選択される画像は画像Ａと画像Ｄになる。このように同時に複数のタッチが検知されても、前者は画像Ａのみが選択され、後者は画像Ａと画像Ｄの複数画像の選択が行われる（図６（ｃ））。

なお、検出された座標が、どの画像の領域からも外れている場合は、画像の選択は行われない。例えば、点Ｎの座標がｘ２＜Ｘｎ＜ｘ３、ｙ３＜Ｙｎ＜ｙ４の位置にあった場合、点Ｎにより画像は選択されず、点Ｍにより選択された画像のみが選択画像となる（図６（ｄ））。

そして、選択された画像を選択画像として記憶する。なお、画像が選択されたことを表す装飾表示（例えば、選択画像を反転させる、枠線で囲んで表示する、点滅表示させる）等を施してもよい。

そして、選択画像が選択されたまま、すなわち、候補画像が継続してタッチされている（タッチが検知され続けている）状態において、所定時間が経過した場合には（ステップＳ１５６；Ｙｅｓ）、選択画像以外の候補画像の一覧を再作成し、再度表示する（ステップＳ１５８）。なお、本実施形態では選択された選択画像にかかわらず所定時間が経過した際には一覧の再作成を行う場合をあげたが、選択された選択画像が予め設定された特定の画像だった場合には一覧の再作成を行うが、その他の画像だった場合は一覧の再作成を行わないという処理を追加してもよい。また、その逆に、選択された選択画像が予め設定された特定の画像だった場合には一覧の再作成を行わず、その他の画像だった場合は一覧の再作成を行うという処理でもよい。さらに、上記では画像をキーに一覧再作成の有無を判断したが、これが画像ではなく選択されている位置であってもよい。

例えば、候補画像の中から９つの画像が表示されており、選択画像として１つの選択されている場合には、候補画像ＤＢ１４２から選択画像以外の８つ分の候補画像を再度読み出し、一覧表示を再作成して表示する。

なお、現在表示されている候補画像と、再表示された候補画像とを必ず異なる画像としても良いし、そのような制限を設けなくても良い。また、再表示のときに、同一の画像が同じ位置に表示されないよう制限を設けても良い。これらの表示方法については、制約を大きくすることによりセキュリティ強度を強くすることが可能となり、制約を小さくすることにより利便性を向上させることが可能となる。

続いて、更に次の候補画像の中から、次の画像が選択されたか否かを判定する（ステップＳ１６０）。次の画像が選択された場合には（ステップＳ１６０；Ｙｅｓ）、次に選択された画像も選択画像として記憶する（ステップＳ１６２）。

ここで、利用者により画像認証が実行されたか否かを判定する（ステップＳ１６４）。ここで、利用者により画像認証を行う操作がなされた場合はステップＳ１６６に処理を移行し（ステップＳ１６４；Ｙｅｓ→ステップＳ１６６）、画像認証を行う操作がなされていない場合には、ステップＳ１５６から処理を繰り返し実行する（ステップＳ１６４；Ｎｏ→ステップＳ１５６）。

ここで、画像認証を行うための操作としては種々の方法が考えられる。例えば、選択画像の選択状態が解除されたことを画像認証を行うためのトリガーとして判定する（すなわち、入力検知部１５４のタッチが継続しているか否か（利用者の指でタッチしている場合には、離れた指があるか否か）を判定する）場合や、認証ボタンが利用者により選択されたことを画像認証を行うためのトリガーとして判定する場合等である。

そして、画像認証を行う場合は、現在の選択画像が、正解画像ＤＢ１４４に登録されている正解画像と一致するか否かを判定する（ステップＳ１６６）。ここで、選択画像と、正解画像とが一致した場合には認証が成功したと判定する（ステップＳ１６６；Ｙｅｓ→ステップＳ１６８）。他方、選択画像と、正解画像とが一致しない場合には、認証が失敗したと判定する（ステップＳ１６６；Ｎｏ→ステップＳ１７０）。

なお、ステップＳ１６４の画像認証を行う操作のトリガーとして、例えば、選択画像と正解画像が一致した場合には、自動的に認証が行われることとしても良い。この場合の動作フローを図７に示す。

すなわち、ステップＳ１６４を実行せずに、現在選択中の選択画像と、正解画像とが一致しているかをステップＳ１６６にて判定する。そして、選択画像が正解画像と一致している場合には、認証成功と判定し（ステップＳ１６６；Ｙｅｓ→ステップＳ１６８）、一致していない場合にはステップＳ１５６から処理を繰り返し実行する。これにより、利用者は「認証を実行する」といった操作を意識することなく認証処理を実行することが可能となる。

［１．３ 動作例］
続いて、本実施形態の動作例について、説明する。図８は、システム液晶１５０に表示された表示画面Ｗ１００の一例を説明するための図である。

表示画面Ｗ１００には、候補画像ＤＢ１４２から９つの候補画像が読み出され一覧表示されている（図５のステップＳ１５０）。認証に用いる正解画像が表示されていない場合には、利用者は任意の画像を一つ選択する（ステップＳ１５２；Ｙｅｓ→ステップＳ１５４）。本図では、画像Ｍ１００が選択画像として利用者Ｆ１００により選択（タッチ）されている。なお、この場合、画像Ｍ１００は利用者の人差し指でタッチされている。

図８の状態で所定時間経過すると（ステップＳ１５６；Ｙｅｓ）、選択されている画像Ｍ１００以外の候補画像が更新されて表示されることとなる（ステップＳ１５８）。図９は、画像Ｍ１００以外の候補画像が更新表示された場合の表示画面Ｗ１０２の一例である。ここで、利用者Ｆ１０２は、正解画像である画像Ｍ１０２を更に選択する（ステップＳ１６０；Ｙｅｓ→ステップＳ１６２）。ここで、画像Ｍ１００は利用者の人差し指で、画像Ｍ１０２は利用者の薬指で選択されている。

図９の状態で所定時間経過すると、選択されている画像Ｍ１００及び画像Ｍ１０２以外の候補画像が更新されて表示されることとなる（ステップＳ１５８）。図１０は、画像Ｍ１００及び画像Ｍ１０２以外の画像が更新表示された場合の表示画面Ｗ１０４の一例である。ここで、表示画面Ｗ１０４に、正解画像となる画像Ｍ１０４が表示されている。ここで、利用者は画像Ｍ１０４を選択しようとするが、現在の表示位置では選択しにくいため、所定時間経過するまで待つこととする。

図１０の状態で所定時間経過すると、選択されている画像Ｍ１００及び画像Ｍ１０２以外の候補画像が更新されて表示されることとなる（ステップＳ１５６；Ｙｅｓ→ステップＳ１５８）。図１１は、画像Ｍ１００及び画像Ｍ１０２以外の候補画像が更新表示された場合の表示画面Ｗ１０６の一例である。表示画面Ｗ１０６では、画像Ｍ１０４が利用者Ｆ１０６に選択しやすい箇所に表示されている。そこで、利用者Ｆ１０６は正解画像である画像Ｍ１０６を更に選択する（ステップＳ１６０；Ｙｅｓ→ステップＳ１６２）。ここで、画像Ｍ１００は利用者の人差し指、画像Ｍ１０２は利用者の薬指、画像Ｍ１０４は利用者の中指で選択されている。

図１１の状態で正解画像が総て選択されているので、利用者は正解画像ではない画像Ｍ１００の選択状態を解除する（ステップＳ１６４；Ｙｅｓ）。図１２は、図１１において画像Ｍ１００の選択状態が解除された場合の表示画面Ｗ１０８の一例を示す図である。

画像の選択状態が解除されたことから、認証制御部１１０は、現在選択されている選択画像と、正解画像ＤＢ１４４を照合する（ステップＳ１６６）。そして、選択画像と、正解画像が一致する場合には認証が成功したと判定する（ステップＳ１６６；Ｙｅｓ→ステップＳ１６８）。

このように、本実施形態によれば、利用者が複数の画像（項目）を選択する場合に、所定時間が経過する毎に、選択されている画像以外の画像の表示位置、内容が変化することとなる。これにより、利用者は画像（項目）を選択する場合に、無理な押し方をすることなく、自然に画像を選択することが可能となり、利便性の高い認証システムを実現することができる。

なお、上述した実施形態については、候補項目として画像を利用する例について説明したが、例えば数字、文字、図形、記号、写真、色等、他の項目を表示し、当該項目から選択することにより認証を行うこととしても良いことは勿論である。

また、上述した実施形態については、所定時間が経過したタイミングで候補画像の一覧を再作成することとして説明したが、他のタイミングで画像を変更してもよい。例えば、ステップＳ１６０において、次の画像が選択されたタイミングにて、選択画像以外の候補画像の一覧を再作成することとしても良いし、候補画像の一覧を再作成する指示を利用者が任意のタイミングで与えても良い。

また、上述した実施形態については、候補画像の一覧を再作成する場合に、候補画像ＤＢ１４２から読み出して表示することとして説明したが、例えば一度候補画像の一覧として表示された画像の種類はそのままにし、位置を変更することとしても良い。この場合、表示されている画像が変化しないため、利用者が選択するステップが少なくてすむといった効果が期待できる。

さらに、上述した実施形態に加えて、画像の位置及び表示する画像について、例えば、所定時間が経過した場合には候補画像ＤＢ１４２から新たに候補画像を読み出し、候補画像の一覧表示を行う。そして、画像が選択された場合には、表示されている候補画像の位置のみを移動させるといった制御を行っても良い。このように、候補画像を一覧表示する方法については、種々の方法が考えられる。

なお、上述した実施形態については、選択画像を解除することで認証を行う例について説明したが、例えば認証ボタンを他の画像と同じ表示部に表示し、それを選択することで認証を行うこととしても良い。また、認証ボタンは表示部への表示ではなく、端末の表面・側面・裏面などに配置し、それを押下することで認証を行うこととしても良い。特に、側面・裏面に配置した場合、選択画面と認証ボタンを同時に押すことを第三者が視認することを難しくする。

また、上述した実施形態では認証の例について説明したが、例えばメニューの選択や、数字等の入力に用いてもよい。すなわち、本発明を適用する範囲は、タッチされた位置を同時に複数の検出が可能な情報処理装置において、その情報処理装置に表示された項目を押さえたままの状態のときに、他の項目の表示が更新される物であればよい。

［２．第２実施形態］
つづいて、第２実施形態について説明する。第２実施形態は、利用者が選択する項目として、メニュー項目を選択する場合を例にとって説明する。すなわち、まず、親階層の項目として、第１階層のメニュー項目を表示する。そして、選択された第１階層に応じて、子階層の項目である第２階層のメニュー項目が表示されることとなる。以下、図面を用いて詳細に説明する。

［２．１ 装置構成］
図１３に本発明を適用した情報処理装置２の構成を示す。情報処理装置２は、制御部１００と、メニュー制御部２１０と、表示データ制御部１２０と、表示位置制御部１３０と、記憶部２４０と、システム液晶１５０（表示部１５２及び入力検知部１５４）とを備えて構成されている。なお、第１実施形態において説明した構成要素と同一のものについては、同一の符号を付し、その説明を省略する。

メニュー制御部２１０は、表示するメニューの切り替え、更新指示等の制御を行う制御部である。後述するメニューリスト２４２から、必要となるメニュー項目を読み出してメニュー画面を表示する制御を行う。

記憶部２４０は、情報処理装置２が動作するための各種データ及びプログラムを記憶しておく機能部である。制御部１００は、記憶部２４０に記憶されているプログラムを読み出して実行する事により、各種機能を実現することとなる。ここで記憶部２４０は、メニューリスト２４２と、メニュー表示プログラム２４４とを記憶している。

メニューリスト２４２は、情報処理装置２におけるメニュー項目（例えば、「Ｗｅｂ」）を項目番号（例えば、「Ａ」）と対応づけて記憶しているリストである。ここで、「Ａ」「Ｂ」「Ｃ」「Ｄ」等は、第１階層（親階層）のメニューを示している。また、第１階層（親階層）に対応する第２階層（子階層）のメニューもそれぞれ記憶されている。例えば、「Ｂ−１」は、「Ｂ」を親階層とする子階層のメニューである。

［２．２ 処理の流れ］
つづいて、第２実施形態における処理であるメニュー表示処理について、図１５を用いて説明する。メニュー表示処理は、制御部１００が、記憶部２４０に記憶されているメニュー表示プログラム２４４を読み出して実行することにより実現される処理である。

まず、表示データ制御部１２０は、第１階層のメニューを表示する（ステップＳ２００）。そして、表示された第１階層からメニュー項目を選択する（ステップＳ２０２）。

利用者により、メニュー項目が選択されると（ステップＳ２０２；Ｙｅｓ）、選択されたメニュー項目の下位メニュー（第２階層）が表示される（ステップＳ２０４）。ここで、第１階層のメニュー項目の選択が解除された場合は、再度ステップＳ２００から処理を実行し、第１階層のメニュー表示に戻る（ステップＳ２０６；Ｙｅｓ→ステップＳ２００）。

第２階層のメニューが表示された状態で、第２階層のメニュー項目が選択されることなく、所定時間経過した場合には（ステップＳ２０６；Ｎｏ→ステップＳ２０８；Ｎｏ→ステップＳ２１０；Ｙｅｓ）、第２階層のメニュー項目の表示が更新される（ステップＳ２１２）。

他方、第２階層のメニューが表示された状態で、第２階層のメニュー項目が選択された場合には、選択された機能を実行する（ステップＳ２０６；Ｎｏ→ステップＳ２０８；Ｙｅｓ→ステップＳ２１４）。

［２．３ 動作例］
つづいて、第２実施形態における動作例について図を用いて説明する。

図１６は、第１階層（親階層）を表示する表示画面Ｗ２００の一例を示す図である。表示画面Ｗ２００には、第１階層のメニュー項目Ｋ２００が表示されている（図１５のステップＳ２００）。ここで、利用者Ｆ２００がメニュー項目Ｋ２０２「Ｂ Ｍａｉｌ」をタッチし、選択状態とする（ステップＳ２０２；Ｙｅｓ）。なお、利用者Ｆ２００がタッチする方法としては、例えば手（指）でタッチしてもよいし、スタイラスでタッチしても良い。

図１６の状態で、メニュー項目Ｋ２０２が選択された場合に遷移する画面が図１７の表示画面Ｗ２１０である。表示画面Ｗ２１０では、第１階層（親階層）のメニュー項目Ｋ２１０が利用者Ｆ２１０により選択状態となっている。ここで、第１階層（親階層）のうち、選択されていないメニュー項目Ｋ２１２は、淡く表示されている。

また、画面中央には、選択されているメニュー項目Ｋ２１２に関連づけられた第２階層（子階層）のメニュー項目Ｋ２１４が表示されている（ステップＳ２０４）。ここで、メニュー項目Ｋ２１０「Ｂ Ｍａｉｌ」に対応する第２階層のメニューは、図１４に示したメニューリスト２４２を参照すると１２のメニュー項目がある。しかし、表示画面Ｗ２１０には、７つのメニュー項目しか表示できない。したがって、項目番号「Ｂ−１」〜「Ｂ−７」のメニュー項目がＷ２１０には表示されており、「Ｂ−８」〜「Ｂ−１２」のメニュー項目は表示されていないこととなる。

図１７の状態で、メニュー項目Ｋ２１０の選択状態が所定時間経過した場合に遷移する画面が図１８の表示画面Ｗ２２０である。所定時間経過したことから、メニュー制御部２１０は、第２階層のメニュー表示を更新する（ステップＳ２１０；Ｙｅｓ→ステップＳ２１２）。すなわち、表示画面Ｗ２１０に表示されていなかった「Ｂ−１２」を表示し、代わりに「Ｂ−７」を非表示としている。

このように、メニュー項目Ｋ２１０が選択状態のままで、所定時間を経過する度に、第２階層のメニュー項目Ｋ２２０の表示が更新表示されることとなる。

なお、メニューの表示を更新する方法としては、種々の方法が考えられる。例えば、図１７の表示画面Ｗ２１０において選択状態が所定時間経過すると、非表示であるメニュー項目「Ｂ−８」〜「Ｂ−１２」を切り替えて表示しても良い。また、「Ｂ−８」〜「Ｂ−１２」に連続して「Ｂ−１」「Ｂ−２」を表示することにより、第２階層のメニュー項目が連続して表示されるようにしても良い。

また、メニュー制御部２１０は、第２階層のメニュー表示を切り替え表示する場合に、視覚的な効果を施すこととしても良い。例えば、第２階層のメニュー項目の表示を切り替える場合に、第１階層のメニュー項目Ｋ２１０を中心に回転表示するような効果を施すことにより、利用者が直感的な操作ができるようになる。

また、本実施形態においては、メニューリストを記憶しており、当該メニューリストに基づいてメニュー表示を行うこととして説明したが、上述した方法に限定されるものではない。すなわち、プログラム（処理）の中で直接メニュー選択処理として記載するとしても良い。

また、説明の都合上、メニューの階層を第１階層（親階層）と第２階層（子階層）の２つとして説明したが、３つ以上の階層としても良いことは勿論である。

このように、本実施形態によれば、メニュー項目の総てが表示画面に表示しきれない場合であっても、利用者のタッチの状態によりメニュー項目の表示を切り替えることができる。したがって、利用者はより平易な操作で、メニューが表示されることになり、容易に所望するメニューを選択することが出来るようになる。

［３．変形例］
以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も特許請求の範囲に含まれる。

また、上述した実施形態においてはシステム液晶を利用することとして説明したが、同様の装置であれば実現可能であることは勿論である。さらに、表示部１５２及び入力検知部１５４は、情報処理装置１及び２に一体となっているものとして説明したが、外部の機器として接続されるもので有ってもよい。

１、２ 情報処理装置
１００ 制御部
１１０ 認証制御部
１２０ 表示データ制御部
１３０ 表示位置制御部
１４０ 記憶部
１４２ 候補画像ＤＢ
１４４ 正解画像ＤＢ
１４６ 正解登録プログラム
１４８ 認証プログラム
１５０ システム液晶
１５２ 表示部
１５４ 入力検知部
２１０ メニュー制御部
２４０ 記憶部
２４２ メニューリスト
２４４ メニュー表示プログラム

Claims (4)

1. タッチされた位置の検出が同時に複数可能な入力検知部と、表示部とを備えた情報処理装置において、
   前記表示部に複数の候補項目を表示する制御を行う候補項目表示制御部と、
   前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から選択項目を選択する項目選択部と、
   前記項目選択部により、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目を変更して表示する制御を行う表示変更制御部と、
   を備え、
   前記候補項目表示制御部は、候補項目として、階層構造の項目のうち親階層の項目を表示する制御を行い、
   前記項目選択部は、前記入力検知部により検知されたタッチに基づいて、前記表示された親階層の項目を選択する親階層項目選択部を含み、
   前記親階層項目選択部により選択された親階層から選択可能な子階層の項目を親階層の項目が選択可能に表示されたまま表示する制御を行う子階層表示制御部を更に有し、
   前記表示変更制御部は、前記親階層項目選択部により 前記親階層が所定時間以上選択されている場合には、前記子階層の項目を変更して表示する制御を行う子階層表示変更制御部を含むことを特徴とする情報処理装置。
2. 前記子階層表示変更制御部は、前記表示部に表示されていない子階層の項目が表示されるように制御を行うことを特徴とする請求項１に記載の情報処理装置。
3. タッチされた位置の検出が同時に複数可能な入力検知部と、表示部とを備えた情報処理装置における制御方法において、
   前記表示部に複数の候補項目を表示する制御を行う候補項目表示制御ステップと、
   前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から選択項目を選択する項目選択ステップと、
   前記項目選択ステップにより、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目を変更して表示する制御を行う表示変更制御ステップと、
   を備え、
   前記候補項目表示制御ステップは、候補項目として、階層構造の項目のうち親階層の項目を表示する制御を行い、
   前記項目選択ステップは、前記入力検知部により検知されたタッチに基づいて、前記表示された親階層の項目を選択する親階層項目選択ステップを含み、
   前記親階層項目選択ステップにより選択された親階層から選択可能な子階層の項目を親階層の項目が選択可能に表示されたまま表示する制御を行う子階層表示制御ステップを更に有し、
   前記表示変更制御ステップは、前記項目選択ステップが、前記親階層が所定時間以上選択されている場合には、前記子階層の項目を変更して表示する制御を行う子階層表示変更制御ステップを含むことを特徴とする制御方法。
4. タッチされた位置の検出が同時に複数可能な入力検知部と、表示部とを備えたコンピュータに、
   前記表示部に複数の候補項目を表示する制御を行う候補項目表示制御機能と、
   前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から選択項目を選択する項目選択機能と、
   前記項目選択機能により、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目を変更して表示する制御を行う表示変更制御機能と、
   を備え、
   前記候補項目表示制御機能は、候補項目として、階層構造の項目のうち親階層の項目を表示する制御を行い、
   前記項目選択機能は、前記入力検知部により検知されたタッチに基づいて、前記表示された親階層の項目を選択する親階層項目選択機能を含み、
   前記親階層項目選択機能により選択された親階層から選択可能な子階層の項目を親階層の項目が選択可能に表示されたまま表示する制御を行う子階層表示制御機能を更に有し、
   前記表示変更制御機能は、前記項目選択機能が、前記親階層が所定時間以上選択されている場合には、前記子階層の項目を変更して表示する制御を行う子階層表示変更制御機能を実現させるためのプログラム。