JP5029989B2 - 情報処理装置、及びプログラム - Google Patents

Description

本発明は、各種情報を表示画面上に表示する情報処理装置、及びプログラムに関し、特にその表示画面上に表示される表示情報の位置を接触操作（タッチ操作）で指示できるようにするための技術に関する。

ペンではなく、指で表示画面をタッチしてそのタッチ位置に表示される表示項目を選択できるようにした技術が各種存在する。この技術では、指で表示画面に触れる場合はペンで触れる場合に比べてその表示位置とタッチ位置とがずれる場合が多い。そこでそのようなずれを検出して自動調整を行うようにした技術も各種存在する（例えば、特許文献１を参照。）。

このようなずれの検出技術は、ユーザがタッチしようとしているその表示対象（リンク先やアイコン）の大きさがある程度大きく、その対象が明らかな場合には有効である。

特開２００５−１９６２４８号公報

しかしながら、携帯電話機の表示画面（現在は大きくても３インチ程度）にフルブラウザ画面（パーソナルコンピュータ（以下、ＰＣと表記する。）のＷｅｂブラウザに表示される画面）を縮小して表示するような場合には、指で隠れる位置に複数のリンク先文字列が表示されている場合も多く、ユーザがそのリンク先にタッチしようとしたが、その隣の別なリンク先にタッチしてしまい、そのリンク先ページにジャンプしてしまう可能性が高い。

そして他のリンク先にジャンプしてしまったことに気づいたユーザは、前のページに戻るための操作を行い、再度のタッチ操作を行い、今度はリンク先を間違えないように慎重に（指による操作が難しい場合はペンを持ち出すなどして）操作することとなる。

しかしながら、慎重に再操作を行ったとしても、そのような位置ずれが発生していることをユーザが端末装置にきちんと学習させる設定操作をしない限り、次回、別の表示画面で所望するリンク先へタッチ操作をした際に、同様の位置ずれが発生してしまう可能は高く、ユーザにストレスを与える。

本発明はこのような事情に鑑みてなされたもので、操作指示対象となる表示選択項目の表示が小さい場合でも、表示選択項目を誤ることなく適切に指示できるようにすることを目的とする。

本発明のうち請求項１に記載の発明は、各種情報を表示画面上で表示する情報処理装置であって、表示画面上での接触による指示位置を検出する検出手段と、検出された前記指示位置で指示される位置に表示される表示選択項目に対する選択がユーザの所望した正しい選択先か否かを、その選択後におけるユーザの操作状況から判別する判別手段と、正しい選択先でない場合には、その指示位置を誤った指示位置として記憶する記憶手段と、正しい選択先の表示選択項目が表示される位置と前記誤った指示位置として記憶された表示位置との差分を指示位置補正用の情報として記憶する記憶手段と、表示画面上での新たな指示位置操作ではその記憶された前記補正用情報に基づいて指示位置補正を行う補正手段とを備え、前記判別手段は、前記表示選択項目がＷｅｂページへのリンク情報であって、指示選択されたリンク情報へのアクセス後における所定時間内にユーザによる前ページ戻し操作があった場合に、前記表示選択項目に対する選択がユーザの所望した正しい選択先でないと判別し、前記前ページ戻し操作がなかった場合に、前記表示選択項目に対する選択がユーザの所望した正しい選択先であると判別する。

また本発明のうち請求項２に記載の発明は、請求項１に記載の情報処理装置であって、指示された表示選択項目の選択実行処理に先立って当該表示選択項目を別表示位置に確認用に表示する表示手段と、その確認表示後における選択実行指示で当該表示選択項目に基づいた選択実行処理を実行する実行手段と、前記ユーザ操作状況判別は、前記表示選択項目の確認表示中における解除操作の有無に応じて行う判別手段とを備えることとする。

また本発明のうち請求項３に記載の発明は、請求項１に記載の情報処理装置であって、前記正しい選択先の表示選択項目は、前記正しい選択先でないことを判別した後における、他の表示選択項目に対する指示操作で選択実行処理をした場合でのユーザ操作状況で特定することとする。

また本発明のうち請求項４に記載の発明は、請求項１に記載の情報処理装置であって、前記正しい選択先の表示選択項目は、前記正しい選択先でないことを判別した後における、表示選択項目のリスト表示上で表示選択項目を選択することで特定することとする。

また本発明のうち請求項５に記載の発明は、プログラムであって、コンピュータに、表示画面上での接触による指示位置を検出する機能と、検出された前記指示位置で指示される位置に表示される表示選択項目に対する選択がユーザの所望した正しい選択先か否かを、その選択後におけるユーザの操作状況から判別する機能と、正しい選択先でない場合には、その指示位置を誤った指示位置として記憶する機能と、正しい選択先の表示選択項目が表示される位置と前記誤った指示位置として記憶された表示位置との差分を指示位置補正用の情報として記憶する機能と、表示画面上での新たな指示位置操作ではその記憶された前記補正用情報に基づいて指示位置補正を行う機能とを実現させ、前記判別する機能において、前記表示選択項目がＷｅｂページへのリンク情報であって、指示選択されたリンク情報へのアクセス後における所定時間内にユーザによる前ページ戻し操作があった場合に、前記表示選択項目に対する選択がユーザの所望した正しい選択先でないと判別し、前記前ページ戻し操作がなかった場合に、前記表示選択項目に対する選択がユーザの所望した正しい選択先であると判別する。

本発明によれば、操作指示対象となる表示選択項目の表示が小さい場合でも、表示選択項目を誤ることなく適切に指示することができる。

（１）以下、実施形態について説明する。
（１−１）システム構成例

図１に実施形態として説明するシステムの構成図を示している。同図に示す情報処理装置１は、操作部（タッチパネル、操作ボタン等）及び表示部（ディスプレイ）を備えるコンピュータである。情報処理装置１は、移動体通信網３に接続しており、電話網４（又はＩＰ電話網）を介して音声通話の機能を提供する。

情報処理装置１は、移動体通信網３を介してインターネット５に接続し、インターネット５を介した電子メールの送受信やインターネット５上のＷｅｂサイトへのアクセスを行うことができる。情報処理装置１の具体例として、携帯電話機、通話機能付きのＰＤＡ（Personal Digital Assistance）、電子カメラ、電子腕時計、音楽再生機、ノート型又はデスクトップ型のコンピュータがある。

図２Ａに情報処理装置１のブロック図を示す。情報処理装置１は、中央制御部１１、ＲＯＭ１２（ROM : Read Only Memory）、ＲＡＭ１３（RAM : Random Access Memory）、無線通信部１４、音声信号処理部１５、マイクロフォン１５１、スピーカ１５２、表示部１６、操作部１７、及びＲＴＣ１８（RTC : Real Time Clock）を有している。

中央制御部１１は、ＣＰＵ（Central Processing Unit)やＭＰＵ（Micro Processing Unit）等を用いて構成されている。中央制御部１１は、ＲＯＭ１２又はＲＡＭ１３に記憶されるプログラム又はデータを実行／処理することにより情報処理装置１の統括的な制御を行うとともに、音声通話やインターネット５へのアクセス等の情報処理装置１の様々な機能を実現する。

ＲＡＭ１３には、Ｗｅｂブラウザやメーラを実現するためのプログラム（Ｗｅｂブラウザ１３１、メーラ１３２）、及び後述するユーザのタッチパネルのタッチ位置の自動補正を行う機能を実現するためのアプリケーションプログラムである位置補正プログラム１３３が記憶されている。またＲＡＭ１３には、後述する誤り位置１３４、及び補正データ１３５が記憶されている。

無線通信部１４は、音声通話やインターネット５へのアクセスに際し、移動体通信網３の基地局との間で無線通信を行う。

音声信号処理部１５は、マイクロフォン１５１から入力されるアナログの音声信号に基づくデジタル音声信号を出力する。音声信号処理部１５は、通話音声、着信音、操作音等の各種音声信号をアナログ音声信号に変換してスピーカ１５２に出力する。

表示部１６は、液晶パネル、有機ＥＬパネル、ブラウン管モニタ等であり、情報を視覚的に表示する装置である。表示部１６は、中央制御部１１から入力される映像信号に応じて各種の情報を表示する。

操作部１７は、ユーザインタフェース（タッチパネル１７１、操作ボタン１７２、操作ダイヤル、キーボード、マウス等）に対して行われたユーザの操作入力を電気信号に変換して中央制御部１１に伝える。操作部１７のうちタッチパネル１７１は透明又は半透明な素材からなる。タッチパネル１７１は、例えば図２Ｂに示すように、そのＸＹ座標系の各位置と表示部１６のＸＹ座標系の各位置とが一対一に対応するように、表示部１６の映像表示面に重ね合わせるようにして設けられている。

ＲＴＣ１８は、日付や時刻等の現在の時刻情報を出力する。

（１−２）動作例
次に情報処理装置１の動作について説明する。図３Ａ及び図３Ｂはインターネット５上のＷｅｂページにアクセスする際に位置補正プログラム１３３によって行われる処理を説明するフローチャートである。以下、これらの図とともに位置補正プログラム１３３によって行われる処理について説明する。

情報処理装置１は、ユーザが何らかの指示操作を行うに際し、指やペンにより表示部１６の表示画面上のタッチパネルに触れる（タッチ操作）と、そのタッチ位置（以下、「実際指示位置」と称する。）を取得する（Ｓ３１１）。

次に情報処理装置１は、ＲＡＭ１３に補正データ１３５が記憶されているか否かを調べる（Ｓ３１２）。ここで補正データ１３５とは、ユーザがタッチ操作を行った際に取得した位置である実際指示位置にベクトル的に加算されるデータであり、実際指示位置を補正するデータである。ＲＡＭ１３に補正データ１３５が記憶されていた場合には（Ｓ３１２：ＹＥＳ）、Ｓ３１３に進む。記憶されていない場合には（Ｓ３１２：ＮＯ）、Ｓ３１４に進む。

Ｓ３１３において、情報処理装置１は、Ｓ３１１で取得した実際指示位置に補正データ１３５を加算して実際指示位置を補正する。なお、以下、加算後の指示位置のことを「補正指示位置」と称する。

Ｓ３１４では、情報処理装置１は、表示中の画面の補正指示位置の周辺にリンク文字列やアイコン等の被選択オブジェクト（以下、表示選択項目と称する。）が存在するか否かを判断する。なお、「周辺」とは、例えば図４に示すように指４１１（又はペン）がタッチパネルに接触している領域（斜線で示す領域。以下、接触領域４１２と称する。）を意味するものとする。

補正指示位置の周辺（接触領域内）に表示選択項目が存在すれば（Ｓ３１４：ＹＥＳ）、Ｓ３１６に進む。存在しなければ（Ｓ３１４：ＮＯ）、例えば表示選択項目に関して用意されている処理と異なる他の処理（Ｓ３１５）に分岐する。

Ｓ３１６では、情報処理装置１は、ユーザが行ったタッチ操作により表示選択項目を１つに特定できるか否か（１つに絞ることができるか否か）を判断する。例えば図４の場合には、接触領域に複数の表示選択項目４１３（「ＤＥＦ」と「ＭＮＯ」）が存在するため、表示選択項目４１３を特定することができない。

表示選択項目を１つに特定できない場合には（Ｓ３１６：ＮＯ）、Ｓ３１７に進み、１つに特定できる場合には（Ｓ３１６：ＹＥＳ）、Ｓ３２１に進む。なお、表示選択項目を１つに特定できない場合には（Ｓ３１６：ＮＯ）、その事をユーザに確実に報知すべくスピーカ１５２から確認音を出力するようにしてもよい。

Ｓ３１７では、情報処理装置１は、表示選択項目の候補をリスト形式で表示してユーザに選択を促す。例えば図４では、表示選択項目４１３（「ＤＥＦ」と「ＭＮＯ」）をリスト形式で表示して、ユーザに選択を促す。このときに情報処理装置１が表示部１６に表示する画面の一例を図５に示す。

Ｓ３１８では、情報処理装置１は、ユーザの選択操作を待機する。表示選択項目が選択された場合には（Ｓ３１８：ＹＥＳ）、Ｓ３２１に進む。この際、一方で情報処理装置１はユーザがＳ３１１で行ったタッチ操作についての解除操作を行ったか否かをリアルタイムに監視している（Ｓ３１８：ＮＯ，Ｓ３１９）。解除操作が行われた場合には（Ｓ３１９：ＹＥＳ）Ｓ３２０に進む。なお、解除操作は、例えば候補として表示されている表示選択項目に所望のものが含まれていない場合に行われる。

例えば図５では、操作ボタン１７２を操作してカーソルを移動させ候補５１１の１つを指定（又はテンキー等により番号を直接指定）した後、選択ボタン５１２を指示することにより候補を選択することができる。また解除ボタン５１３を指示することにより解除操作を行うことができる。

Ｓ３２０では、情報処理装置１は、実際指示位置を誤り位置１３４としてＲＡＭ１３に記憶する。その後は図３ＢのＳ３５１に進む。

図３ＡのＳ３２１において、情報処理装置１は、特定された（Ｓ３１６：ＹＥＳ）又はユーザにより選択された（Ｓ３１８：ＹＥＳ）表示選択項目について記述されているリンク先のＵＲＬ（Uniform Resource Locator）にアクセスしてＷｅｂページを取得し、取得したＷｅｂページを表示する（Ｓ３２２）。

Ｓ３２３において、情報処理装置１は、Ｓ３２２でＷｅｂページを表示してから所定時間が経過したか否かを判断する。所定時間が経過すると（Ｓ３２３：ＹＥＳ）、Ｓ３２４に進み、経過していなければ（Ｓ３２３：ＮＯ）、Ｓ３２６に進む。

Ｓ３２４では、情報処理装置１は、ＲＡＭ１３に誤り位置１３４が記憶されているか否かを調べる。記憶されている場合には（Ｓ３２４：ＹＥＳ）、Ｓ３２５に進む。記憶されていない場合には（Ｓ３２４：ＮＯ）、処理を終了する。

Ｓ３２５では、情報処理装置１は、実際指示位置と誤り位置１３４との差分を算出し、算出した値を補正データ１３５としてＲＡＭ１３に記憶する。

Ｓ３２６において、情報処理装置１は、ユーザがＷｅｂブラウザの「戻る」ボタンを操作する等の前画面を表示させる操作（前ページ戻し操作）を行ったか否かをリアルタイムに（Ｓ３２６：ＮＯ）判断する。前ページ戻し操作が行われた場合には（Ｓ３２６：ＹＥＳ）、情報処理装置１は前画面を表示する（Ｓ３２７）。Ｓ３２７の後はＳ３２０に進む。

図３ＢのＳ３５１では、情報処理装置１は、表示中の画面の補正指示位置の近傍に表示選択項目が存在するか否かを判断する。ここで「近傍」とは、例えば図６に示すように接触領域（斜線で示す領域）を含む周辺の領域（破線枠で示す領域。以下、近傍領域６１１と称する。）を意味するものとする。なお、近傍領域６１１は、例えば接触領域４１２を所定倍率で拡大した、接触領域に相似する領域に設定される。

補正指示位置の近傍に表示選択項目が存在すれば（Ｓ３５１：ＹＥＳ）、Ｓ３５２に進み、存在しなければ（Ｓ３５１：ＮＯ）、処理が終了する。

Ｓ３５２では、情報処理装置１は、他の表示選択項目の候補を抽出する。例えば図６では、近傍領域６１１に存在する「ＭＮＯ」を表示選択項目の候補として抽出する。Ｓ３５３において、情報処理装置１は、抽出した他の表示選択項目の候補をリスト形式で表示してユーザに選択を促す。ここで表示選択項目をユーザが選択した場合には（Ｓ３５４：ＹＥＳ）、Ｓ３５５に進む。表示選択項目が選択されなかった場合には（Ｓ３５４：ＮＯ）、処理が終了する。

なお、表示選択項目の抽出範囲をユーザが任意に設定することができるように、近傍領域６１１を設定するためのユーザインタフェースを情報処理装置１に設けてもよい。

Ｓ３５５では、情報処理装置１は選択された表示選択項目の表示位置を取得する。Ｓ３５６において、情報処理装置１は、取得した表示位置と、記憶している誤り位置１３４との差分を算出し、算出した値を補正データ１３５としてＲＡＭ１３に記憶する。

以上によれば、表示画面上に表示される任意の表示選択項目に対する位置指示操作の際に、その位置指示操作で選択される表示選択項目がユーザの所望した正しい表示選択項目でないことをユーザの操作状況から判別した際は、その誤って指示した位置と正しい表示選択項目の位置と差分を学習（記憶）し、新たな操作時にはその学習された内容で指示位置の補正を行うようにしたので、ユーザによる実際指示位置とユーザが選択しようとしている表示選択項目の表示位置とがずれていたとしても、ユーザは、正しく選択されなかったことを意志表明する操作を行って、その後に正しい表示選択項目を選択することを行うのみで、以後は自動的に指示位置補正を行うことができる。

またユーザの操作状況の判別を、指示選択されたリンク情報へのアクセス後における所定時間内でのユーザによる前ページ戻し操作の有無に応じて行うようにしたので、ユーザが誤って指示したか否かを確実に判別することができる。

またユーザの操作状況の判別を、表示選択項目の確認表示中における解除操作の有無に応じて行うようにしたので、ユーザが誤って指示したか否かを確実に判別することができる。

また正しい選択先の表示選択項目を、正しい選択先でないことを判別した後における、他の表示選択項目に対する指示操作で選択実行処理をした場合でのユーザ操作状況により特定するようにしたので、正しい選択先の表示選択項目を確実に特定することができる。

また正しい選択先の表示選択項目を、正しい選択先でないことを判別した後における、表示選択項目のリスト表示上で表示選択項目を選択することで特定するようにしたので、正しい選択先の表示選択項目を確実に特定することができる。

また表示画面上に表示される任意の表示選択項目に対する位置指示操作の際に、その位置指示操作で選択される表示選択項目がユーザの所望した正しい表示選択項目でないことをユーザ操作状況から判別した際は、その指示位置近傍に表示される他の表示選択項目に対する選択操作を簡易に行えるようにしたので、ユーザによる指示位置と実際に選択される表示選択項目の表示位置とがずれていたとしても、ユーザは、正しく選択されなかったことを意志表明する操作を行うことで、その指示位置近傍に存在する可能性の高い正しい表示選択項目を簡易に選択し直すことができる。

また表示画面上で指示された指示位置で、本来は１つの表示選択項目が特定されるべきところを複数の表示選択項目が特定されてしまう場合には、そのことを報知するようにしたので、正しくない表示選択項目が選択される可能性がある場合での、その正しくない表示選択項目に対する選択処理の実行を未然に防止することができる。

また上記報知に際し、特定された複数の表示選択項目を表示し、その中の任意の表示選択項目の選択で、その選択された表示選択項目に対応する選択処理を実行するようにしたので、正しくない表示選択項目が選択される可能性がある場合での、その正しくない表示選択項目に対する選択処理の実行を未然に防止することができる。

実施形態として説明するシステムの構成図である。 実施形態として説明する情報処理装置１のブロック図である。 実施形態として説明する表示部１６とタッチパネル１７１の関係を示す図である。 実施形態として説明する情報処理装置２の動作を説明するフローチャートである。 実施形態として説明する情報処理装置２の動作を説明するフローチャートである。 実施形態として説明する表示画面の一例である。 実施形態として説明する表示画面の一例である。 実施形態として説明する表示画面の一例である。

符号の説明

１ 情報処理装置
５ インターネット
１３ ＲＡＭ
１３１ Ｗｅｂブラウザ
１３２ メーラ
１３３ 位置補正プログラム
１３４ 誤り位置
１３５ 補正データ
１６ 表示部
１７ 操作部
１７１ タッチパネル
１７２ 操作ボタン
４１２ 接触領域
５１１ 候補
５１２ 選択ボタン
５１３ 解除ボタン
６１１ 近傍領域

Claims (5)

1. 各種情報を表示画面上で表示する情報処理装置であって、
   表示画面上での接触による指示位置を検出する検出手段と、
   検出された前記指示位置で指示される位置に表示される表示選択項目に対する選択がユーザの所望した正しい選択先か否かを、その選択後におけるユーザの操作状況から判別する判別手段と、
   正しい選択先でない場合には、その指示位置を誤った指示位置として記憶する記憶手段と、
   正しい選択先の表示選択項目が表示される位置と前記誤った指示位置として記憶された表示位置との差分を指示位置補正用の情報として記憶する記憶手段と、
   表示画面上での新たな指示位置操作ではその記憶された前記補正用情報に基づいて指示位置補正を行う補正手段と
   を備え、
   前記判別手段は、前記表示選択項目がＷｅｂページへのリンク情報であって、指示選択されたリンク情報へのアクセス後における所定時間内にユーザによる前ページ戻し操作があった場合に、前記表示選択項目に対する選択がユーザの所望した正しい選択先でないと判別し、前記前ページ戻し操作がなかった場合に、前記表示選択項目に対する選択がユーザの所望した正しい選択先であると判別することを特徴とする情報処理装置。
2. 請求項１に記載の情報処理装置であって、
   指示された表示選択項目の選択実行処理に先立って当該表示選択項目を別表示位置に確認用に表示する表示手段と、
   その確認表示後における選択実行指示で当該表示選択項目に基づいた選択実行処理を実行する実行手段と、
   前記ユーザ操作状況判別は、前記表示選択項目の確認表示中における解除操作の有無に応じて行う判別手段と
   を備えることを特徴とする情報処理装置。
3. 請求項１に記載の情報処理装置であって、
   前記正しい選択先の表示選択項目は、前記正しい選択先でないことを判別した後における、他の表示選択項目に対する指示操作で選択実行処理をした場合でのユーザ操作状況で特定すること
   を特徴とする情報処理装置。
4. 請求項１に記載の情報処理装置であって、
   前記正しい選択先の表示選択項目は、前記正しい選択先でないことを判別した後における、表示選択項目のリスト表示上で表示選択項目を選択することで特定すること
   を特徴とする情報処理装置。
5. コンピュータに、
   表示画面上での接触による指示位置を検出する機能と、
   検出された前記指示位置で指示される位置に表示される表示選択項目に対する選択がユーザの所望した正しい選択先か否かを、その選択後におけるユーザの操作状況から判別する機能と、
   正しい選択先でない場合には、その指示位置を誤った指示位置として記憶する機能と、
   正しい選択先の表示選択項目が表示される位置と前記誤った指示位置として記憶された表示位置との差分を指示位置補正用の情報として記憶する機能と、
   表示画面上での新たな指示位置操作ではその記憶された前記補正用情報に基づいて指示位置補正を行う機能と
   を実現させ、
   前記判別する機能において、前記表示選択項目がＷｅｂページへのリンク情報であって、指示選択されたリンク情報へのアクセス後における所定時間内にユーザによる前ページ戻し操作があった場合に、前記表示選択項目に対する選択がユーザの所望した正しい選択先でないと判別し、前記前ページ戻し操作がなかった場合に、前記表示選択項目に対する選択がユーザの所望した正しい選択先であると判別することを特徴とするプログラム。