JP4773671B2 - Input method using a pointing device - Google Patents

Input method using a pointing device Download PDF

Info

Publication number
JP4773671B2
JP4773671B2 JP2002215327A JP2002215327A JP4773671B2 JP 4773671 B2 JP4773671 B2 JP 4773671B2 JP 2002215327 A JP2002215327 A JP 2002215327A JP 2002215327 A JP2002215327 A JP 2002215327A JP 4773671 B2 JP4773671 B2 JP 4773671B2
Authority
JP
Japan
Prior art keywords
input
page
list
cursor
input target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002215327A
Other languages
Japanese (ja)
Other versions
JP2004054854A (en
Inventor
裕之 小森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Semiconductor Ltd
Original Assignee
Fujitsu Semiconductor Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Semiconductor Ltd filed Critical Fujitsu Semiconductor Ltd
Priority to JP2002215327A priority Critical patent/JP4773671B2/en
Publication of JP2004054854A publication Critical patent/JP2004054854A/en
Application granted granted Critical
Publication of JP4773671B2 publication Critical patent/JP4773671B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、ワークステーションや情報処理端末あるいはパソコン等の表示画面上に表示された複数の入力対象の中から所望の入力対象を選択し実行する入力方法、および入力システムに関わる。さらに本発明は、ポインティングデバイスを用いて表示画面上を移動するカーソルにより入力対象を選択する入力方法、および入力システムに関わる。
【0002】
【従来の技術】
近年、ワークステーション、情報処理端末あるいはパソコン等では、ハイパーテキスト・リンクの技術を利用し、イベント処理(関数)とリンクされた入力対象を表示画面上で選択し、実行する方法が広く利用されている。この技術を用いたシステムでは、表示画面上にはテキスト、あるいはグラフィックスで入力対象が表示され、利用者はポインティングデバイスを操作して表示画面上に表示されたカーソルを移動し、上記入力対象に重ねることで所望の入力対象を選択する。そして選択された状態でポインティングデバイスの入力操作をすることによって、表示画面上に表示され、選択された入力対象のテキスト、あるいはグラフィックスとリンクされているインターネットの所定のwebページに接続したり、入力対象が意味する画面を表示したり、選択された他の文書やデータを表示したり、指定のプログラムを起動するなどの、イベント処理(関数)を実行する。
【0003】
図9を用いて従来技術による入力画面の表示と操作方法について説明する。図9では利用者が選択したwebページの表示画面の例を示している。表示画面上で下線を施した What‘s new?(901)、Favorite link?(902)、http://www.../index.html(903)、はHTML(ハイパー・テキスト・マークアップ・ランゲージ)で記述されていて、それぞれのテキストが選択された際のリンク先のイベント処理が定義されている。また、入力対象はテキストの他に、ボタンYes(904)、No(905)のようなグラフィックスの場合もある。このボタンを選択したときはボタンに定義されたイベント処理が実行される。利用者はマウス等のポインティングデバイス(図示せず)を操作して表示画面上のカーソル(906 )を移動して入力対象の選択および、実行指示を与える。
【0004】
この入力対象の選択操作が容易に行えるように、表示画面上で入力対象となるテキストの部分に下線を引いたり、表示の色を変えたりして他との区別する場合がある。また、ボタンの場合は、ボタンの形状をしたアイコンや特別の表示を用いている。
また、表示画面上のカーソルを移動し入力対象と重なったとき、あるいは一定の距離の中に入って選択可能状態になった場合に、利用者に選択可能状態を知らせるために入力対象あるいはカーソルの表示の色あるいは形を変えたりすることがある。この選択可能状態でポインティングデバイスの入力操作を行うと、その入力対象の選択が確定され、関連付けられたイベント処理が実行される。
【0005】
図10は従来技術における入力システムの構成を示している。本システムでは、パソコン、ワークステーション等の画面表示処理部(1001)が表示装置(1002)およびポインティングデバイス(1003)と接続されている。画像表示処理部(1001)は画面作成部(1010)、入力イベント検知部(1011)、表示/選択受付制御部(1012)、入力対象情報取得部(1020)、被選択要素情報取得部(1022)、イベント処理部(1032)および入力対象テーブル記憶部(1040)で構成されている。
【0006】
先ず、選択されたwebページに接続すると、画面作成部(1010)に画面情報が送られて表示画面が作成される。作成された表示画面の情報が入力対象情報取得部(1020)に送られ(1051)、ここで表示画面上で選択される入力対象を抽出し、画面上の表示位置座標を求め、その結果を入力対象テーブル記憶部(1040)に送出する(1052)。ここで入力対象と関連付けられたイベント処理の情報と位置座標が入力対象テーブルに記憶される。
【0007】
ポインティングデバイスを操作して、カーソルを移動すると移動の情報が逐次入力イベント検知部(1011)に送られ(1053)、ここでカーソルの位置座標を求め、この結果が表示/選択受付制御部(1012)に送られる(1054)。表示/選択受付制御部では、入力対象テーブル(1040)から入力対象とその座標情報を受け取り(1055)カーソルの位置と比較する。カーソルが入力対象に対して選択可能な座標位置にある場合はその入力対象が選択可能な状態にあることを表示する表示信号を表示装置(1002)に送出する(1056)。
【0008】
次に、入力対象が選択可能な状態にあるとき、ポインティングデバイス(1003)に入力操作を行うと(1057)、入力イベント検知部(1011)はカーソルの位置座標を求め、被選択要素情報取得部(1022)に求めたカーソルの位置座標を送出する(1058)。被選択要素情報取得部(1022)は入力対象テーブル記憶部(1040)より対応する座標にある入力対象にリンクしたイベント処理情報を取得し(1059)イベント処理部(1032)に送出する(1060)。イベント処理部では指示された処理を実行する。
【0009】
次に、従来技術の動作についてフローチャートを用いて説明する。図11は従来技術による入力対象を選択する動作を示すフローチャートである。図11(a)は画面の表示情報から、入力対象の座標位置を取得するフローを示している。画面表示処理部が画面の情報を受け取ると、画面作成部が表示画面を作成する(1101)。次に画面上の全ての入力対象に対し、名称、位置、イベント処理等の情報を取得する(1102)。これらの情報は入力対象テーブルの形に整えて、入力対象テーブル記憶部に格納される(1103)。
【0010】
図11(b)はポインティングデバイスのカーソル移動操作に応じて入力対象が選択され、入力操作に応じて選択されたイベントの実行処理を行うフローを示している。先ず、ポインティングデバイスによりカーソルの移動操作を行うと(1104)、逐次カーソルの表示画面上の位置を取得する(1105)。次いで、表示/選択受付制御部において前記入力対象テーブルからカーソル位置の入力対象の情報を取得し(1106)、カーソルが入力対象の選択位置にあるかそうでないかの選択状況を表示する(1107)。
【0011】
次にポインティングデバイスによって入力操作が行われたとき(1108)、入力対象が選択状態かどうかを確認して選択されているとき(1109)、入力対象テーブルから該当するイベント処理の情報を取得し(1110)、イベント処理部でイベント処理を呼出し実行する(1111)。
このように、ハイパーテキスト・リンクの技術を用いると、たとえば表示画面上にあるテキストやグラフィックスに関連する情報先の所在をリンクして設定しておくことができる。利用者は希望の時にテキストあるいはグラフィックスを選択し入力操作を行うだけで、リンクされた関連情報が即座に呼び出され画面上に表示され、容易に関連情報を入手することができる。従って、最初の表示画面には詳細な注釈を設ける必要がなくて見易い画面構成にすることができる。
【0012】
【発明が解決しようとする課題】
このように、ハイパーテキスト・リンク技術は画面を操作する上で便利な方法であるが、一方では以下のような改善を要する課題がある。(1)表示画面上で複数の入力対象が近接して配置されている場合、間違って選択する可能性が高く、選択操作に注意を要求される。(2)画面上でカーソルから離れた場所の入力対象を選択する場合はポインティングデバイスを大きく動作させる必要がある。(3)表示画面からはみだしていてページ全体を表示できず、スクロール操作を行うことで表示されるような入力対象がある場合、事前に入力対象の情報が得られないため、画面の入力対象を選択する場合に余分な画面操作が要求される。また、複数入力対象が類似であったりして比較する場合にその場で並べて選択することが行いづらい。(4)複数の入力条件を引続き連続して選択したい場合でも、一度ある入力対象を選択したその目標の表示画面に移動してしまうと、再度元の画面に戻ってもう一つの入力対象を探し選択する必要があるため思考の連続性を保つことが困難になる場合が多い。
【0013】
【課題を解決するための手段】
本発明の一側面は、ポインティングデバイスによるカーソルの移動操作によって、第1のページ上の複数の第1ページ入力対象の中の一つを選択する入力操作によって、前記第1ページ入力対象に関連付けられたイベント処理を実行する入力方法において、前記第1のページの第1の表示画面上の前記第1ページ入力対象の位置以外の任意の位置に前記カーソルを移動した後に行う第1の入力操作に応じて、前記第1のページ上のすべての前記第1ページ入力対象の位置と前記第1の入力操作を行ったカーソル位置との第1ページ内距離を算出し、次いで、すべての前記第1ページ入力対象を前記第1ページ内距離が小さい順に並べた、第1の一覧表を前記第1の表示画面上の前記カーソル位置の近傍に表示し、次いで、前記第1の一覧表中の一つの前記第1ページ入力対象を選択する第2の入力操作によって、複数の第2ページ入力対象を有する第2のページを取得し、次いで、前記第2のページの第2の表示画面上の前記第2ページ入力対象の位置以外の任意の位置に前記カーソルを移動した後に行う第3の入力操作に応じて、前記第2のページ上のすべての前記第2ページ入力対象の位置と前記第3の入力操作を行ったカーソル位置との第2ページ内距離を算出し、次いで、すべての前記第2ページ入力対象を前記第2ページ内距離が小さい順に並べ、かつ前記第1の一覧表への遷移を指示する入力対象を付加した第2の一覧表を、前記第1の一覧表とともに前記第2の表示画面上の前記カーソル位置の近傍に表示し、次いで、前記第1の一覧表中の前記第1ページ入力対象の位置または、前記第2の一覧表中の前記第2ページ入力対象の位置と前記カーソル位置が重なった場合に、第4の入力操作が行われると、前記入力対象に関連付けられたイベント処理を実行することを特徴とするポインティングデバイスによる入力方法である。
このようにすることで、カーソルを入力対象に正確に重ねなくてもカーソルの近くに一覧表として表示されるので選択操作が楽になる。また、選択しようとする入力対象に近い場所で第1の入力操作を行うと、その入力対象が一覧表の上段に表示されるので、利用者の意向が反映されて選択操作を楽に行うことができる。また、近接した入力対象は一覧表で明確に表示されるので誤って選択する可能性を少なくすることができる。さらに、表示画面上でカーソルから離れた場所にある入力対処を選択するときもカーソルのわずかな移動操作で選択することができる。また、現在表示画面上に表示されていない入力対象も一覧表に表示されているので画面のスクロール動作を行うことなく選択することができる。
また、前のページの表示画面に表示された入力対象を選択するときに一々前のページの表示画面に戻って選択操作を行う手間を省くことができ、連続した思考を妨げられる可能性が少なくなる。
【0015】
また、本発明の他の側面は、ポインティングデバイスによるカーソルの移動操作によって、第1のページ上の複数の第1ページ入力対象の中の一つを選択する入力操作によって、前記第1ページ入力対象に関連付けられたイベント処理を実行する入力方法において、前記第1のページの第1の表示画面上の前記第1ページ入力対象の位置以外の任意の位置に前記カーソルを移動した後に行う第1の入力操作に応じて、前記第1のページ上のすべての前記第1ページ入力対象の位置と前記第1の入力操作を行ったカーソル位置との第1ページ内距離を算出し、前記第1のページのアクセス以前にアクセス履歴のあるページを取得可能な、ページ名称を含む入力対象を最新アクセス順に並べた、第3の一覧表を記憶し、次いで、すべての前記第1ページ入力対象を前記第1ページ内距離が小さい順に並べ、かつ前記第3の一覧表への遷移を指示する入力対象を付加した第1の一覧表を、前記第3の一覧表とともに前記第1の表示画面上の前記カーソル位置の近傍に表示し、次いで、前記第1の一覧表内の入力対象の位置または、前記第3の一覧表内の入力対象の位置と前記カーソル位置が重なった場合に、第5の入力操作が行われると、前記入力対象に関連付けられたイベント処理を実行することを特徴とするポインティングデバイスによる入力方法である。
こうすることで、以前に表示したページを容易に再度表示することができ、連続した思考を妨げられる可能性が少なくなる。
【0017】
【発明の実施の形態】
図1を用いて本発明の入力画面の表示と入力操作方法について説明を行う。表示画面は利用者が選択したwebページ(第1のページ)一部をディスプレー上に表示した表示画面(第1の表示画面)の例を示している。本表示画面上での入力対象は従来例の図9で説明した表示画面と同じである。
さらに本発明を説明するために、それぞれの入力対象の位置座標を代表位置座標で表示し、それぞれについて、What's new?(101)の位置座標を(x1、y1)で、Favorite link(102)を(x2、y2)で、http://www.../index.html(103)を(x3、y3)表し、ボタンYes(104)の位置座標を(x4、y4)で、ボタンNo(105)を(x5、y5)でそれぞれ定義する。更にカーソル(106)の位置座標は(x、y)と定義する。各入力対象の位置座標は画面表示を行う際に予め計算処理を行って求められている。
【0018】
次に前記の各入力対象位置とカーソル位置との距離(第1ページ内距離)を(x1−x、y1−y)、(x2−x、y2−y)、(x3−x、y3−y)・・で表す。なお、上記の距離の算出方法は後で詳しく述べる。
利用者がマウス等のポインティングデバイス(図示せず)の左クリックボタンを押す第1の入力操作を行うと、その時のカーソルの位置座標(x、y)に基づいて前記入力対象との距離(第1ページ内距離)を求める。次いで、求まった距離の小さい順に入力対象を並べ直して一覧表(107)(第1の一覧表)を作成し、これを表示画面のカーソルに近い位置に表示する。カーソルに近い位置に表示することで、引続き入力対象を選択する操作を行う際にカーソルの移動量を少なくすることができる。また、利用者は選択しようとする入力対象の近くで第1の入力操作を行えば、その入力対象が一覧表の上段に表示されるので、わずかなカーソルの移動でその入力対象を選択することができる。
【0019】
図2に前記一覧表(107)(第1の一覧表)の詳細を示す。図1に示したカーソル位置の場合、http://www.../index.html(103)の位置とカーソルの位置との距離(第1ページ内距離)が最も近いので、一覧表(第1の一覧表)の最上列に表示されている。以下、距離が近い順番に並べられて行く。なお、同じ入力対象には同じ番号を付与してある。一覧表に表示する入力対象の表記法は表示画面に表示されたテキストそのままであっても良いし、長い場合はその一部を選択表示しても良い。また、図2の一覧表の最下列に表示されている Adderess Book(109)は、図1の表示画面上(第1の表示画面)では隠れているために、現在の画面上に表示されてはいないが、スクロールバー(108)等を操作して画面スクロールを行うと現れてくる同一ページ(第1のページ)上の入力対象(第1ページ入力対象)である。上記第1の入力操作を行って入力対象(第1ページ入力対象)の位置座標を求めた時に、同一ページ上に存在する入力対象の全ての位置座標を求めておくことにより隠れている入力対象を上記一覧表上(第1の一覧表)に表示することが可能になる。このように表示画面上(第1の表示画面)で隠れている入力対象(第1ページ入力対象)を併せて表示できるので選択の操作性が良くなる。
【0020】
上記一覧表には表示項目の文字を並べるだけでも良いが、罫線で囲んでカーソルが表示項目の上に来た時罫線で囲まれた枠の全部の表示色が変わるようにすると、利用者に選択状態を容易に把握させることができる。
次に、入力対象を選択して入力する操作について説明する。図1において、一覧表が表示された状態でポインティングデバイスの左クリックボタンを押し続けカーソルを画面上で移動し、一覧表の表示項目の上に重ねると入力対象が選択可能な状態になる。選択可能な状態で、ポインティングデバイスの左クリックボタンを押す動作を開放する第2の入力操作を行うと選択入力指示が確定し、入力対象に関連付けられたイベント処理が実行される。例えば、What's new?(101)を選択した場合は、最新情報を示す画面を表示し、http://www.../index.htmlの場合にはインターネット上の指定されたサイトの表示画面を表示する。また、選択された入力対象がボタンYes(104)であれば、Yesが意味する所定の処理が実行される。
【0021】
また、カーソルを一覧表の外に置いて、ポインティングデバイスの左クリックボタンを押している動作を開放する異なる入力操作を行うと一覧表が消去されるようにすることができる。あるいは、右ボタンをクリックする入力操作を行うか、一覧表が表示されてから一定の時間を経過した後もの入力操作が行われない場合に一覧表を消去するように設定しても良い。そうすれば、一つの表示画面上で何度か試行を行い、最適の場所で選択することができる。
【0022】
次に、前ページ(第1のページ)の表示画面(第1の表示画面)で表示した一覧表(第1の一覧表)を、次のページ(第2のページ)の表示画面(第2の表示画面)に併せて表示する、本発明の第2の実施形態について図3を用いて説明する。本画面は図1において What's new?(101)を選択したことによって表示される次のページ(第2のページ)の表示画面(第2の表示画面)を想定している。このページ上では、最近行われたイベント(301)、(302)、・・や募集(303)等が並べられ、これらが本ページ(第2のページ)の表示画面(第2の表示画面)での入力対象である。また前ページの表示画面(第1の表示画面)と同様にボタンYes(304)、ボタンNo(305)が表示されている。そしてそれぞれの表示位置は位置座標(x31、y31)、(x32、y32)・・で定義されている。本表示画面上においてもカーソル(306)の座標は(x、y)で定義する。本表示画面においてポインティングデバイスを操作して左クリックを押す第の入力操作を行うと、カーソルの位置座標(x、y)と前記ページ(第2のページ)上の全ての入力対象(301)、(302)、・・の位置座標との距離(第2ページ内距離)を求め、求まった距離が小さい順に入力対象を並べ直した一覧表−1(307)(第2の一覧表)を表示画面のカーソルに近い位置に表示する。
【0023】
図4(a)に、本実施例の一覧表の詳細を示す。第2の表示画面における一覧表(307)(第2の一覧表)の最上段には、前画面の第1の一覧表への遷移を指示する入力対象を示す「前画面」(318)と表示されている。この状態でポインティングデバイスの左クリックボタンを押し続けカーソルを画面上で移動し、「前画面」の表示と重ねると一覧表−2(308)が表示される。一覧表−2の表示内容は前ページの表示画面で表示した一覧表(107)、すなわち第1の一覧表と同じである。この状態で引続きカーソルを入力対象に重ねて選択し、ポインティングデバイスの左クリックボタンを押す動作を開放する第の入力操作を行うと、選択された入力対象の入力イベントが実行される。この一覧表−2の内容は前の画面(第1の表示画面)で表示されたものと同一であっても構わないし、予め指定した件数の上位表示対象であっても良い。また、前ページ(第1のページ)の表示画面(第1の表示画面)で第1の入力操作を行ったときのカーソルから指定の距離(第1ページ内距離)の範囲内にあった入力対象を表示するようにしても良い。また、一覧表−1(307)(第2の一覧表)に表示した「前画面」を選択しなくても一覧表−2(第1の一覧表)を同時に並べて表示するようにしても良い。これらの表示方法の選択は、所定の画面でモード設定を行うことで利用者が任意に設定することができる。
【0024】
表示する前画面の一覧表は、前ページの表示画面で第2の入力操作を行ってイベント処理の実行を行った場合はそのときの一覧表を使用する。前ページの表示画面では一覧表の表示を行っただけで実行の操作を行わなかった場合は表示しただけの一覧表を表示する。同じページの表示画面上で複数回一覧表の表示を行った場合は、最後に表示した一覧表を表示するようにすると良い。
【0025】
また、図3においては1ページ前の表示場面の一覧表を表示する例について説明したが、次々と順番に前画面の表示内容の一覧表を表示するようにしても良い。図4(b)に3個の前画面を表示した例(430)を示す。カーソルを一覧表に表示される「前画面」に重ねることにより、次々と選択した一覧表の前に表示した一覧表が表示されてゆく。このようにして表示された一覧表の中から所望の入力対象にカーソルを重ね、第2の入力操作を行うとそのときカーソルが選択した入力対象に関連付けられたイベント処理が実行される。
【0026】
次に、本発明の第三の実施形態である、前回アクセスしたページの表示画面の名称を、例えば最新アクセス順に並べた一覧表(第3の一覧表)を表示する場合について、図5を用いて説明する。図5は表示画面上にカーソルが表示された状態でポインティングデバイスによる入力操作を行ったときに表示される一覧表を示している。一覧表−1(510)(第1の一覧表)は最上段に、第3の一覧表への遷移し他のページを表示する「他ページにジャンプ」(518)の入力対象が付加され、以下の行の表示項目は、図1で述べたものと同じでカーソルに近い順に入力対象が表示されている。ここでカーソルを「他ページにジャンプ」(518)の項目に重ねると、これまでにアクセスしたページの表示画面の名称を最新のアクセス順に並べた一覧表−2(520)(第3の一覧表)が一覧表−1に並んで表示される。表示された状態でカーソルを入力対象の表示に重ねて入力対象を選択しポインティングデバイスで第の入力操作を行うと、指定されたページにジャンプする。このように、以前アクセスしたページから必要な情報を得たい場合、容易に目的とする表示画面にジャンプすることができる。
【0027】
次に、本発明の入力対象の選択と入力操作を実現するシステムの構成とその動作について図6を用いて説明する。本システムでは、パソコン、ワークステーション等の中の画面表示処理部(601)が表示装置(602)およびポインティングデバイス(603)と接続されている。画面表示処理部(601)は画面作成部(610)、入力イベント検知部(611)、表示/選択受付制御部(612)、入力対象情報取得部(620)、距離算出・並べ替え部(621)、被選択要素情報取得部(622)、入力対象選択一覧作成部(631)、イベント処理部(632)、入力対象テーブル記憶部(640)、入力対象選択一覧表記憶部(641)および表示形態記憶部(642)で構成されている。
【0028】
先ず、webページ等に接続されて表示画面が選択されると、画面作成部(610)に画面の情報が送られて表示画面を作成する。作成された表示画面の情報が入力対象情報取得部(620)に送られて(651)、表示画面の中からイベント処理とリンクされた入力対象の情報を取得する。そして該入力対象の画面表示座標位置を算出し、その結果を入力対象テーブル記憶部(640)に送出し(652)入力対象テーブルに記憶させる。また、このテーブルには表示画面を示すページ名称を併せて記憶させる。
【0029】
また、一覧表に表示する件数の設定や、「前画面」あるいは「他ページにジャンプ」のいずれを表示するか等のモード設定は表示操作の中の適当な時期に別途入力操作で表示形態記憶部(642)に設定しておく。
次に、ポインティングデバイス(603)の左クリックボタンを押す第1の入力操作を行うと、その信号が入力イベント検知部(611)に送られ(653)、入力イベント検知部(611)において表示画面上のカーソルの位置座標を求め、その結果を距離算出・並べ替え部(621)に送出する(654)。距離算出・並べ替え部(621)では入力対象テーブル記憶部(640)から各入力対象の位置座標を受け取り(655)、各入力対象とカーソルとの距離を算出し、距離小さい順に入力対象を並べ替える。そして、並べ替えられた入力対象は入力対象選択一覧作成部(631)に送られ(656)ここで一覧表が作成される。このとき、表示形態記憶部(642)から一覧表の表示形態に関する情報を受け取り(657)、指定された形態の一覧表を作成する。この一覧表は入力対象選択一覧表記憶部(641)に送られ(658)ここで記憶される。入力対象選択一覧表記憶部(641)は記憶動作が完了すると完了信号に併せて入力対象の位置座標を入力イベント検知部(611)に送出する(659)。
【0030】
入力イベント検知部(611)は、完了信号を受信すると入力対象選択一覧標示/選択受付制御部(612)に標示要求信号を送る(660)。表示/選択受付制御部(612)は、入力対象選択一覧記憶部(641)から最新情報と標示された一覧標示の標示データを受け取り(661)、これを標示装置(602)に送出し(662)標示画面上に一覧標示が標示される。
【0031】
この状態でポインティングデバイス(603)を操作してカーソルを移動すると(663)、入力イベント検知部(611)はカーソル位置座標を算出し、入力対象の位置座標と比較する。そして、カーソルが入力対象と重なったときは選択状態にあると判断し、選択状態にある入力対象の情報を表示/選択受付制御部(612)に送出する(664)。表示/選択受付制御部(612)は選択受付状態にある入力対象の表示色等を変更した制御信号を標示装置(602)に送出する(665)。
【0032】
次に、ポインティングデバイス(603)のボタンを押す動作を開放する第2の入力操作を行うと(666)、入力イベント検知部(611)はカーソルが入力対象の選択状態にあるかどうかの判断を行い、選択状態にあれば、カーソルの位置座標と選択信号を被選択要素情報取得部(622)に送出する(667)。被選択要素情報取得部(622)は入力対象テーブル記憶部(640)からカーソル位置座標に対応する入力対象の情報を受け取り(668)、入力対象テーブルから入力対象がリンクするイベント処理の情報を取得し、その情報をイベント処理部(632)に送出する(669)。イベント処理部(632)は指定された処理を実行する。前記第2の入力操作を行った時、カーソルが入力対象の選択状態にないときは、入力イベント検知部(611)が一覧表表示消去の情報を表示/選択受付制御部(612)に送出し、表示装置(602)は一覧表の表示を消去する。
【0033】
また、第1の入力操作を行った状態でカーソルを移動して、一覧表の「前画面」あるいは「他ページにジャンプ」の表示と重なったときは(670)、入力イベント検知部(611)は併せて一覧表を表示するための情報を表示/選択受付制御部(612)に送出する(671)。表示/選択受付制御部(612)は「前画面」あるいは「他ページにジャンプ」に対応する一覧表の情報を入力対象選択一覧表記憶部(641)に要求し(672)、一覧表を受け取り(673)、その結果を表示装置に送ることで(674)対応する一覧表が表示画面上に併せて表示される。
【0034】
次に本発明において、ポインティングデバイスで入力操作を行ったときの処理のフローを図7を用いて説明する。図7(a)はポインティングデバイスの左クリックボタンを押す第1の入力操作を行ったときのフローを示している。ポインティングデバイスを用いて第1の入力操作を行うと(701)一覧表表示の指示であるかどうかの確認を行った(702)後、カーソルの位置情報を取得する(703)。そして、入力対象テーブルを参照して全ての入力対象とカーソルとの距離を算出し(704)、距離の小さい順に入力対象を並べ替える(705)。次いで、表示形態記憶部から表示形態の情報を取得し(706)、表示形態に応じて作成した入力対象の一覧表を表示画面のカーソルの位置に表示する(707)。この状態がポインティングデバイスによる一覧表の中から入力対象の選択を受け付ける状態(708)である。
【0035】
図7(b)はポインティングデバイスの左クリックボタンを押す動作を開放する第2の入力操作を行ったときの処理のフローを示している。ポインティングデバイスにより第2の入力操作が行われると(711)、カーソルが選択状態にあるかどうかを判断し(712)選択状態にある場合、入力対象の取得を行う(713)。入力対象の取得を行うと、入力対象テーブルから該入力対象のイベント処理の情報を取得し(714)、イベント処理を実行する(715)。こうして一連の入力操作の処理が終了する。
【0036】
また、第2の入力操作が行われたときカーソルが選択状態に無い場合(716)、ポインティングデバイスによる一覧表選択の受付を終了し(717)、入力対象の一覧表の表示を消去する(718)。同様に、前記イベント処理を行う際に一覧表の消去動作を行っても良い。
次に、本発明において入力対象の選択一覧表を作成する際に用いたカーソルと入力対象との間の最短距離を求める方法について図8を用いて説明する。ここでは、入力対象(801)の位置座標を囲む矩形の頂点で定義する。そしてその矩形の各頂点の座標を左上隅から半時計周り方向に(xa、ya)、(xa、yb)、(xb、yb)、(xb、ya)で表す。カーソル(802)の位置座標は(x、y)で表す。一般的に言って、カーソルと入力対象の距離はカーソルと頂点の距離、またはカーソルから各辺に下した垂線の長さで表すことができる。
【0037】
一覧表を作るときカーソルと入力対象との距離を比較するが、カーソルが入力対象のどの位置にあるかによってどちらを選ぶのが適当かについて説明する。カーソルが図8のPで表示されている位置にある場合はX軸方向、Y軸方向いずれの方向においても、カーソルの各軸の位置座標が上記各辺の範囲内には無い場合に相当する。この場合は、カーソルからY軸に沿った辺に下した垂線(803)の長さの方が、カーソルに最も近い頂点との距離(804)よりも小さな値を示しているが、頂点との距離(804)を用いてカーソルと入力対象の距離と定義する方が利用者の視覚的な距離感に一致している。
【0038】
一方、カーソルがQで表される位置にある場合は、カーソルのX軸方向の座標(x)が矩形を定義する辺のX軸方向の座標(xa),(xb)の範囲内にある場合であって、矩形の上辺に下した垂線(805)の長さの方が、4個の各頂点との間で求めた距離の最短の距離(806)より短くなっている。そして視覚的な距離感から、この垂線の長さを用いてカーソルと入力対象との距離を表す方が適当と考えられる。
【0039】
上記の説明に従って距離を求める式を表すと、下記になる。
ここに、
なお、本説明では入力対象の位置座標を矩形を用いて定義したが、楕円に置き換え、矩形の各辺を楕円の長径、短径に置き換えることで同様に視覚に近い距離を定義することができる。
【0040】
【発明の効果】
本発明では、表示画面上の複数の入力対象をポインティングデバイスを操作して選択し、入力対象に関連付けられたイベント処理(関数)を実行する入力方法において、ポインティングデバイスの第1の入力操作に応じて複数の入力対象とカーソルの距離を計算し、距離の近い順に並べた一覧表を作成し、カーソルの近くに表示する。その中から所望の入力対象を選択し、第2の入力操作を行うことで入力対象に関連付けられたイベント(関数)を実行することを特徴としている。このように、入力対象の一覧表がカーソルの近くに表示されるので、入力選択を行う操作が簡便になる。
【0041】
さらに、現在のページの表示画面上に表示された一覧表に併せて、前のページの表示画面で表示した一覧表、または本表示画面の前に表示した表示画面のページ名称の一覧表を併せて表示し、この中から選択、入力実行処理を可能にし、一連の入力対象の選択作業を効率よく行うことができる。
さらに、一覧表に表示する順番を決めるカーソルと入力対象との距離を視覚的に近い感覚で定義することにより、操作を行う人の直感に近い一覧表を作成することができる。
【図面の簡単な説明】
【図1】本発明の第1の実施例による入力対象を選択するときの画面表示を示す図面である。
【図2】図1の一覧表の表示内容を示す図面である。
【図3】本発明の第2の実施例による入力対象を選択するときの画面表示を示す図面である。
【図4】図3の一覧表の表示内容を示す図面である。
【図5】本発明の第3の実施例を示す一覧表の表示内容を示す図面である。
【図6】本発明による入力システムの構成を示す図面である。
【図7】本発明の入力操作による画面表示とイベント実行の処理フローを示す図面である。
【図8】本発明によるカーソルと入力対象の距離を説明する図面である。
【図9】従来技術による入力対象を選択するときの画面表示を示す図面である。
【図10】従来技術による入力システムの構成を示す図面である。
【図11】従来技術による入力操作で画面表示とイベント実行を行う処理のフローを示す図面である。
【符号の説明】
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an input method and an input system for selecting and executing a desired input object from a plurality of input objects displayed on a display screen of a workstation, an information processing terminal, a personal computer, or the like. Furthermore, the present invention relates to an input method and an input system for selecting an input target with a cursor that moves on a display screen using a pointing device.
[0002]
[Prior art]
In recent years, workstations, information processing terminals, personal computers, etc. have widely used a method of selecting and executing an input target linked with event processing (function) on a display screen by using hypertext link technology. Yes. In a system using this technology, an input target is displayed as text or graphics on the display screen, and the user operates the pointing device to move the cursor displayed on the display screen so that the input target is displayed. A desired input object is selected by overlapping. Then, by performing an input operation of the pointing device in the selected state, it is connected to a predetermined web page displayed on the display screen and linked to the selected input target text or graphics, Event processing (function) is executed, such as displaying a screen that the input target means, displaying another selected document or data, or starting a specified program.
[0003]
The input screen display and operation method according to the prior art will be described with reference to FIG. FIG. 9 shows an example of the display screen of the web page selected by the user. What ’s new underlined on the display screen? (901), Favorite link? (902), http: // www. . . / Index. html (903) is described in HTML (Hyper Text Markup Language), and defines event processing of a link destination when each text is selected. In addition to text, the input target may be graphics such as buttons Yes (904) and No (905). When this button is selected, event processing defined for the button is executed. The user operates a pointing device (not shown) such as a mouse to move the cursor (906) on the display screen to give an input target selection and execution instruction.
[0004]
In order to facilitate the selection operation of the input target, there is a case where the text portion to be input on the display screen is underlined or the display color is changed to distinguish it from others. In the case of a button, an icon in the shape of a button or a special display is used.
In addition, when the cursor on the display screen moves and overlaps with the input target, or when it enters the selectable state within a certain distance, the input target or cursor is displayed to inform the user of the selectable state. The color or shape of the display may change. When an input operation of the pointing device is performed in this selectable state, the selection of the input target is confirmed and the associated event processing is executed.
[0005]
FIG. 10 shows the configuration of an input system in the prior art. In this system, a screen display processing unit (1001) such as a personal computer or a workstation is connected to a display device (1002) and a pointing device (1003). The image display processing unit (1001) includes a screen creation unit (1010), an input event detection unit (1011), a display / selection reception control unit (1012), an input target information acquisition unit (1020), and a selected element information acquisition unit (1022). ), An event processing unit (1032), and an input target table storage unit (1040).
[0006]
First, when connected to the selected web page, screen information is sent to the screen creation unit (1010) to create a display screen. The generated display screen information is sent to the input target information acquisition unit (1020) (1051), where the input target selected on the display screen is extracted, the display position coordinates on the screen are obtained, and the result is obtained. The data is sent to the input target table storage unit (1040) (1052). Here, event processing information and position coordinates associated with the input target are stored in the input target table.
[0007]
When the cursor is moved by operating the pointing device, movement information is sequentially sent to the input event detection unit (1011) (1053), where the position coordinates of the cursor are obtained, and this result is displayed in the display / selection reception control unit (1012). (1054). The display / selection reception control unit receives the input target and its coordinate information from the input target table (1040) (1055) and compares it with the position of the cursor. When the cursor is at a selectable coordinate position with respect to the input target, a display signal indicating that the input target is in a selectable state is sent to the display device (1002) (1056).
[0008]
Next, when the input target is in a selectable state, when an input operation is performed on the pointing device (1003) (1057), the input event detection unit (1011) obtains the position coordinates of the cursor, and the selected element information acquisition unit The calculated position coordinates of the cursor are sent to (1022) (1058). The selected element information acquisition unit (1022) acquires event processing information linked to the input target at the corresponding coordinates from the input target table storage unit (1040) (1059) and sends it to the event processing unit (1032) (1060). . The event processing unit executes the instructed process.
[0009]
Next, the operation of the prior art will be described using a flowchart. FIG. 11 is a flowchart showing an operation of selecting an input target according to the prior art. FIG. 11A shows a flow for acquiring the coordinate position of the input target from the display information on the screen. When the screen display processing unit receives screen information, the screen creation unit creates a display screen (1101). Next, information such as name, position, and event processing is acquired for all input objects on the screen (1102). These pieces of information are arranged in the form of an input target table and stored in the input target table storage unit (1103).
[0010]
FIG. 11B shows a flow in which an input target is selected according to the cursor movement operation of the pointing device, and execution processing of the event selected according to the input operation is performed. First, when the cursor is moved by the pointing device (1104), the position of the cursor on the display screen is sequentially acquired (1105). Next, the display / selection reception control unit acquires information on the input target at the cursor position from the input target table (1106), and displays the selection status as to whether or not the cursor is at the input target selection position (1107). .
[0011]
Next, when the input operation is performed by the pointing device (1108), when the input target is selected by checking whether it is in the selected state (1109), the corresponding event processing information is acquired from the input target table ( 1110), the event processing unit calls and executes the event processing (1111).
As described above, by using the hypertext link technology, for example, the location of an information destination related to text or graphics on the display screen can be linked and set. The user simply selects text or graphics at a desired time and performs an input operation. The linked related information is immediately called up and displayed on the screen, and the related information can be easily obtained. Therefore, it is not necessary to provide detailed annotations on the first display screen, and the screen configuration can be easily viewed.
[0012]
[Problems to be solved by the invention]
  As described above, the hypertext link technology is a convenient method for operating the screen, but on the other hand, there is a problem that requires the following improvements. (1) When a plurality of input objects are arranged close to each other on the display screen, there is a high possibility that selection will be made erroneously, and attention is required for the selection operation. (2) When selecting an input target at a location away from the cursor on the screen, the pointing device needs to be operated largely. (3) Beyond the display screenWhole pageWhen there is an input target that cannot be displayed and is displayed by scrolling, information about the input target cannot be obtained in advance, so an extra screen operation is required when selecting the input target of the screen . In addition, when a plurality of input objects are similar and are compared, it is difficult to select them side by side. (4) Even if you want to select multiple input conditions in succession, once you move to the target display screen where you have selected an input target, you will return to the original screen and search for another input target. It is often difficult to maintain continuity of thinking because it is necessary to make a choice.
[0013]
[Means for Solving the Problems]
  One aspect of the present invention is:An input for executing event processing associated with the first page input target by an input operation for selecting one of a plurality of first page input targets on the first page by a cursor movement operation by a pointing device. In the method, in accordance with a first input operation performed after the cursor is moved to an arbitrary position other than the position of the first page input target on the first display screen of the first page, First distances within the first page between the positions of all the first page input objects on the page and the cursor position where the first input operation is performed are calculated, and then all the first page input objects are set to the first A first list arranged in ascending order of the in-page distance is displayed in the vicinity of the cursor position on the first display screen, and then one first page in the first list is displayed. A second page having a plurality of second page input targets is acquired by a second input operation for selecting the second page input target, and then the second page input on the second display screen of the second page In response to a third input operation performed after the cursor is moved to any position other than the target position, all the second page input target positions on the second page and the third input operation are performed. The distance within the second page with respect to the performed cursor position is calculated, and then all the second page input targets are arranged in ascending order of the distance within the second page, and a transition to the first list is instructed. A second list to which an input target is added is displayed in the vicinity of the cursor position on the second display screen together with the first list, and then the first page in the first list is displayed. The input target position or the above When the fourth input operation is performed when the position of the second page input target in the list of 2 and the cursor position overlap, the event processing associated with the input target is executed. This is an input method using a pointing device.
  In this way, even if the cursor is not accurately overlaid on the input target, it is displayed as a list near the cursor, so the selection operation becomes easy. In addition, when the first input operation is performed at a location close to the input target to be selected, the input target is displayed at the top of the list, so that the user's intention can be reflected and the selection operation can be easily performed. it can. In addition, since the close input objects are clearly displayed in the list, the possibility of erroneous selection can be reduced. Further, when selecting an input countermeasure located away from the cursor on the display screen, it can be selected by a slight movement operation of the cursor. In addition, since the input target that is not currently displayed on the display screen is also displayed in the list, it can be selected without scrolling the screen.
  Also, when selecting the input target displayed on the previous page display screen, it is possible to save the trouble of returning to the previous page display screen and performing the selection operation, and there is less possibility of hindering continuous thinking. Become.
[0015]
  Another aspect of the present invention is:An input for executing event processing associated with the first page input target by an input operation for selecting one of a plurality of first page input targets on the first page by a cursor movement operation by a pointing device. In the method, in accordance with a first input operation performed after the cursor is moved to an arbitrary position other than the position of the first page input target on the first display screen of the first page, A first page distance between all the first page input target positions on the page and the cursor position where the first input operation is performed is calculated, and a page having an access history before the first page is accessed A third list in which the input objects including the page name are arranged in the order of the latest access is stored, and then all the first page input objects are stored in the first page. The first list that is arranged in ascending order of the distance within the table and to which an input target for instructing the transition to the third list is added is displayed together with the third list and the cursor on the first display screen. When the position of the input object in the first list or the position of the input object in the third list overlaps the cursor position, the fifth input operation is displayed. Is performed, an event process associated with the input target is executed, and an input method using a pointing device is provided.
  By doing so, the previously displayed page can be easily displayed again, and the possibility of hindering continuous thinking is reduced.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
  The input screen display and input operation method of the present invention will be described with reference to FIG. The display screen is the web page selected by the user(First page)ofPartially displayed on the displayDisplay screen(First display screen)An example is shown. The input target on this display screen is the same as the display screen described in FIG. 9 of the conventional example.
  In order to further explain the present invention, the position coordinates of each input target are displayed as representative position coordinates, and for each, What's new? The position coordinate of (101) is (x1, y1) and Favorite link (102) at (x2, y2), http: // www. . . / Index. html (103) is represented by (x3, y3), the position coordinates of the button Yes (104) are defined by (x4, y4), and the button No (105) is defined by (x5, y5). Further, the position coordinate of the cursor (106) is defined as (x, y). The position coordinates of each input target are obtained by performing a calculation process in advance when performing screen display.
[0018]
  Next, each input objectpositionAnd cursorpositionDistance to(Distance within the first page)Is represented by (x1-x, y1-y), (x2-x, y2-y), (x3-x, y3-y). The distance calculation method will be described in detail later.
  When the user performs a first input operation of pressing a left click button of a pointing device (not shown) such as a mouse, the distance from the input object based on the position coordinates (x, y) of the cursor at that time(Distance within the first page)Ask for. Next, the input objects are rearranged in ascending order of the obtained distance, and the list (107)(First list)Is created and displayed near the cursor on the display screen. By displaying it at a position close to the cursor, it is possible to reduce the amount of movement of the cursor when performing an operation for selecting an input target. In addition, if the user performs the first input operation near the input target to be selected, the input target is displayed at the top of the list, so that the input target can be selected with a slight cursor movement. Can do.
[0019]
  FIG. 2 shows the list (107).(First list)Details are shown. In the case of the cursor position shown in FIG. . . / Index. html (103)Position ofAnd cursorPosition ofDistance to(Distance within the first page)Is the closest list(First list)It is displayed in the top row of. In the following, they are arranged in order of increasing distance. The same number is assigned to the same input object. The notation of the input object displayed on the list may be the text displayed on the display screen as it is, or if it is long, a part of the text may be selected and displayed. In addition, the Address Book (109) displayed in the bottom row of the list of FIG. 2 is displayed on the display screen of FIG.(First display screen)However, it is not displayed on the current screen because it is hidden, but the same appears when scrolling the screen by operating the scroll bar (108) etc.Page (first page)Input target above(First page input target)It is. Input target by performing the first input operation(First page input target)When the position coordinates ofpageThe input target hidden by finding all the position coordinates of the input target existing above is listed above.(First list)Can be displayed. in this wayOn the display screen (first display screen)Hidden input target(First page input target)Can be displayed together, so that the operability of selection is improved.
[0020]
You can just arrange the characters of the display items in the above list, but if the display color of the frame surrounded by the ruled line changes when the cursor is over the display item, The selected state can be easily grasped.
Next, an operation for selecting and inputting an input target will be described. In FIG. 1, when the list is displayed, the left click button of the pointing device is continuously pressed and the cursor is moved on the screen. When the cursor is overlaid on the display items of the list, the input target can be selected. When the second input operation for releasing the operation of pressing the left click button of the pointing device is performed in the selectable state, the selection input instruction is confirmed, and the event processing associated with the input target is executed. For example, What's new? If (101) is selected, a screen showing the latest information is displayed, and http: // www. . . / Index. In the case of html, a display screen of a designated site on the Internet is displayed. If the selected input target is the button Yes (104), a predetermined process meaning Yes is executed.
[0021]
  Also, put the cursor outside the list and release the action of pressing the left click button of the pointing device.DifferentThe list can be deleted when an input operation is performed. Alternatively, you can perform an input operation by clicking the right button, or even after a certain time has passed since the list was displayed.NextIf the input operation is not performed, the list may be deleted. Then, you can try several times on one display screen and select the optimal location.
[0022]
  Next, the previous page(First page)Display screen(First display screen)List displayed in(First list) on the display screen (second display screen) of the next page (second page)A second embodiment of the present invention displayed together will be described with reference to FIG. This screen is shown in FIG. 1 What's new? Next page displayed by selecting (101)(Second page)Display screen(Second display screen)Is assumed. thispageAbove, recent events (301), (302), ..., recruitment (303), etc. are lined up, and these are displayed on this page.(Second page)Display screen(Second display screen)It is an input target. Also the previous page display screen(First display screen)Similarly to the above, a button Yes (304) and a button No (305) are displayed. Each display position is defined by position coordinates (x31, y31), (x32, y32). Also on this display screen, the coordinates of the cursor (306) are defined by (x, y). Operate the pointing device on this display screen and press the left click.3When the input operation is performed, the cursor position coordinates (x, y)Page (second page)Distance from the position coordinates of all input objects (301), (302),.(Distance on page 2)Table-1 (307) in which the input objects are rearranged in ascending order of the obtained distance.(Second list)Is displayed near the cursor on the display screen.
[0023]
  In FIG.Of this exampleDetails of the list are shown. SecondDisplay screenList in (307)(Second list)In the upper row,Indicates the input target for instructing the transition to the first list on the previous screen“Previous screen” (318) is displayed. ThisIn this state, if the left click button of the pointing device is continuously pressed and the cursor is moved on the screen and overlapped with the display of “Previous screen”, the list-2 (308) is displayed. The display contents of List-2 are the list (107) displayed on the display screen of the previous pageThat is, the first listIs the same. In this state, continue to select the cursor over the input target and release the action of pressing the left click button of the pointing device.4When the input operation is performed, the input event of the selected input target is executed. The contents of this list-2 are the previous screen(First display screen)It may be the same as that displayed in, or may be the upper display target of the number designated in advance. Also, the previous page(First page)Display screen(First display screen)The specified distance from the cursor when the first input operation is performed with(Distance within the first page)It is also possible to display an input target that was within the range of. List-1 (307)(Second list)List-2 without selecting “Previous screen” displayed in(First list)May be displayed side by side at the same time. The selection of these display methods can be arbitrarily set by the user by setting the mode on a predetermined screen.
[0024]
When the second input operation is performed on the display screen of the previous page and the event process is executed, the list of the previous screen to be displayed is used. In the display page of the previous page, if only the list is displayed but no execution operation is performed, only the displayed list is displayed. When the list is displayed a plurality of times on the display screen of the same page, it is preferable to display the last displayed list.
[0025]
In addition, although an example in which a list of display scenes one page before is displayed in FIG. 3, a list of display contents on the previous screen may be displayed one after another. FIG. 4B shows an example (430) in which three previous screens are displayed. By overlaying the cursor on the “previous screen” displayed in the list, the list displayed before the selected list is displayed one after another. When the cursor is placed on a desired input object from the list displayed in this way and a second input operation is performed, event processing associated with the input object selected by the cursor is executed.
[0026]
  Next, the name of the display screen of the page accessed last time, which is the third embodiment of the present inventionFor example, the latest accessList arranged in order(Third list)The case of displaying will be described with reference to FIG. FIG. 5 shows a state where the cursor is displayed on the display screen and the pointing device is used.EnterA list displayed when a force operation is performed is shown. List-1 (510)(First list)Is at the top,Transition to the third list"Jump to other page" to display another page (518)Input target is addedThe display items in the following lines are the same as those described with reference to FIG. Here, when the cursor is overlaid on the item “jump to other page” (518), the display screen names of the pages accessed so far are listed in the latest access order-2 (520).(Third list)Are displayed side by side in List-1. In the displayed state, place the cursor on the input target display and select the input target.5When the input operation is performed, jump to the specified page. Thus, when it is desired to obtain necessary information from a previously accessed page, it is possible to easily jump to the target display screen.
[0027]
Next, the configuration and operation of a system that realizes selection of an input target and input operation according to the present invention will be described with reference to FIG. In this system, a screen display processing unit (601) in a personal computer, a workstation, or the like is connected to a display device (602) and a pointing device (603). The screen display processing unit (601) includes a screen creation unit (610), an input event detection unit (611), a display / selection reception control unit (612), an input target information acquisition unit (620), a distance calculation / sorting unit (621). ), Selected element information acquisition unit (622), input target selection list creation unit (631), event processing unit (632), input target table storage unit (640), input target selection list table storage unit (641) and display It is comprised by the form memory | storage part (642).
[0028]
First, when a display screen is selected by connecting to a web page or the like, screen information is sent to the screen creation unit (610) to create a display screen. The generated display screen information is sent to the input target information acquisition unit (620) (651), and the input target information linked to the event processing is acquired from the display screen. The screen display coordinate position of the input target is calculated, and the result is sent to the input target table storage unit (640) (652) and stored in the input target table. This table also stores a page name indicating the display screen.
[0029]
Also, the number of items to be displayed in the list and the mode setting such as whether to display “Previous screen” or “Jump to other page” can be stored in the display mode separately at an appropriate time during the display operation. Part (642).
Next, when the first input operation of pressing the left click button of the pointing device (603) is performed, the signal is sent to the input event detection unit (611) (653), and the display screen is displayed in the input event detection unit (611). The position coordinates of the upper cursor are obtained, and the result is sent to the distance calculation / sorting unit (621) (654). The distance calculation / sorting unit (621) receives the position coordinates of each input target from the input target table storage unit (640) (655), calculates the distance between each input target and the cursor, and arranges the input targets in ascending order of distance. Change. The rearranged input objects are sent to the input object selection list creating unit (631) (656), where a list is created. At this time, information on the display form of the list is received from the display form storage unit (642) (657), and a list of the designated form is created. This list is sent to the input target selection list storage unit (641) (658) and stored therein. When the storage operation is completed, the input target selection list storage unit (641) sends the position coordinates of the input target to the input event detection unit (611) together with the completion signal (659).
[0030]
When the input event detection unit (611) receives the completion signal, the input event detection unit (611) sends an indication request signal to the input target selection list indication / selection reception control unit (612) (660). The display / selection reception control unit (612) receives the latest information and the label data of the list label indicated by the latest information from the input target selection list storage unit (641) (661), and sends it to the labeling device (602) (662). ) A list sign is displayed on the sign screen.
[0031]
When the cursor is moved by operating the pointing device (603) in this state (663), the input event detection unit (611) calculates the cursor position coordinate and compares it with the position coordinate of the input target. When the cursor overlaps with the input target, it is determined that it is in the selected state, and information on the input target in the selected state is sent to the display / selection reception control unit (612) (664). The display / selection reception control unit (612) sends a control signal in which the display color or the like of the input target in the selection reception state is changed to the display device (602) (665).
[0032]
Next, when a second input operation for releasing the operation of pressing the button of the pointing device (603) is performed (666), the input event detection unit (611) determines whether the cursor is in an input target selection state. If it is selected, the cursor position coordinates and selection signal are sent to the selected element information acquisition unit (622) (667). The selected element information acquisition unit (622) receives input target information corresponding to the cursor position coordinates from the input target table storage unit (640) (668), and acquires event processing information to which the input target is linked from the input target table. Then, the information is sent to the event processing unit (632) (669). The event processing unit (632) executes the designated process. When the second input operation is performed, if the cursor is not in the input target selection state, the input event detection unit (611) sends information for deleting the list display to the display / selection reception control unit (612). The display device (602) erases the display of the list.
[0033]
Further, when the cursor is moved in a state where the first input operation is performed and the display overlaps with the display of “previous screen” or “jump to other page” in the list (670), the input event detection unit (611) In addition, information for displaying the list is sent to the display / selection reception control unit (612) (671). The display / selection reception control unit (612) requests the input target selection list storage unit (641) for information on a list corresponding to “previous screen” or “jump to other page” (672), and receives the list. (673) By sending the result to the display device (674), the corresponding list is displayed together on the display screen.
[0034]
Next, the flow of processing when an input operation is performed with a pointing device in the present invention will be described with reference to FIG. FIG. 7A shows a flow when the first input operation of pressing the left click button of the pointing device is performed. When the first input operation is performed using the pointing device (701), it is confirmed whether the instruction is a list display instruction (702), and then the cursor position information is acquired (703). Then, the distance between all the input objects and the cursor is calculated with reference to the input object table (704), and the input objects are rearranged in ascending order of distance (705). Next, display mode information is acquired from the display mode storage unit (706), and a list of input targets created according to the display mode is displayed at the cursor position on the display screen (707). This state is a state (708) in which selection of an input target is accepted from the list by the pointing device.
[0035]
FIG. 7B shows a processing flow when the second input operation for releasing the operation of pressing the left click button of the pointing device is performed. When the second input operation is performed by the pointing device (711), it is determined whether or not the cursor is in a selected state (712). If the cursor is in the selected state, an input target is acquired (713). When the input target is acquired, the event processing information of the input target is acquired from the input target table (714), and the event processing is executed (715). Thus, a series of input operation processing is completed.
[0036]
If the cursor is not in the selected state when the second input operation is performed (716), the list selection acceptance by the pointing device is terminated (717), and the display of the input target list is deleted (718). ). Similarly, a list deletion operation may be performed when the event processing is performed.
Next, a method for obtaining the shortest distance between the cursor and the input object used when creating the input object selection list in the present invention will be described with reference to FIG. Here, it is defined by a rectangular vertex surrounding the position coordinates of the input target (801). The coordinates of each vertex of the rectangle are represented by (xa, ya), (xa, yb), (xb, yb), (xb, ya) in the counterclockwise direction from the upper left corner. The position coordinate of the cursor (802) is represented by (x, y). Generally speaking, the distance between the cursor and the input target can be expressed by the distance between the cursor and the vertex, or the length of a perpendicular line extending from the cursor to each side.
[0037]
The distance between the cursor and the input object is compared when creating the list, and it will be explained which one is appropriate depending on where the cursor is located on the input object. When the cursor is at the position indicated by P in FIG. 8, this corresponds to the case where the position coordinates of each axis of the cursor are not within the range of each side in either the X-axis direction or the Y-axis direction. . In this case, the length of the vertical line (803) drawn from the cursor to the side along the Y axis shows a smaller value than the distance (804) from the vertex closest to the cursor. Defining the distance between the cursor and the input target using the distance (804) matches the visual sense of the user.
[0038]
On the other hand, when the cursor is at the position represented by Q, the coordinate (x) in the X-axis direction of the cursor is within the range of the coordinates (xa) and (xb) in the X-axis direction of the side defining the rectangle In this case, the length of the perpendicular line (805) down to the upper side of the rectangle is shorter than the shortest distance (806) of the distances obtained from the four vertices. From the sense of visual distance, it is considered appropriate to represent the distance between the cursor and the input object using the length of the perpendicular line.
[0039]
The equation for obtaining the distance according to the above description is as follows.
here,
In this description, the position coordinates of the input target are defined using rectangles. However, by replacing each side of the rectangle with the major axis and minor axis of the ellipse, a distance close to vision can be defined similarly. .
[0040]
【The invention's effect】
According to the present invention, in an input method in which a plurality of input objects on a display screen are selected by operating a pointing device and an event process (function) associated with the input object is executed, according to the first input operation of the pointing device To calculate the distance between multiple input objects and the cursor, create a list arranged in the order of distance, and display it near the cursor. An event (function) associated with the input object is executed by selecting a desired input object from among them and performing a second input operation. As described above, since the input target list is displayed near the cursor, an operation for performing input selection is simplified.
[0041]
In addition to the list displayed on the display screen of the current page, the list displayed on the display screen of the previous page or the list of page names of the display screen displayed before this display screen is also displayed. Display, enabling selection and input execution processing from among them, and a series of input object selection operations can be performed efficiently.
Furthermore, by defining the distance between the cursor that determines the order of display in the list and the input object with a visually close sense, it is possible to create a list that is close to the intuition of the person performing the operation.
[Brief description of the drawings]
FIG. 1 is a diagram illustrating a screen display when an input target is selected according to a first embodiment of the present invention.
FIG. 2 is a diagram showing display contents of the list of FIG. 1;
FIG. 3 is a diagram illustrating a screen display when an input target is selected according to a second embodiment of the present invention.
4 is a diagram showing display contents of the list of FIG. 3;
FIG. 5 is a diagram showing display contents of a list showing a third embodiment of the present invention.
FIG. 6 is a diagram showing a configuration of an input system according to the present invention.
FIG. 7 is a diagram showing a processing flow of screen display and event execution by an input operation of the present invention.
FIG. 8 is a diagram illustrating a distance between a cursor and an input target according to the present invention.
FIG. 9 is a diagram illustrating a screen display when an input target is selected according to the related art.
FIG. 10 is a diagram illustrating a configuration of an input system according to a conventional technique.
FIG. 11 is a diagram illustrating a flow of processing for performing screen display and event execution by an input operation according to a conventional technique.
[Explanation of symbols]

Claims (2)

ポインティングデバイスによるカーソルの移動操作によって、第1のページ上の複数の第1ページ入力対象の中の一つを選択する入力操作によって、前記第1ページ入力対象に関連付けられたイベント処理を実行する入力方法において、
前記第1のページの第1の表示画面上の前記第1ページ入力対象の位置以外の任意の位置に前記カーソルを移動した後に行う第1の入力操作に応じて、前記第1のページ上のすべての前記第1ページ入力対象の位置と前記第1の入力操作を行ったカーソル位置との第1ページ内距離を算出し、
次いで、すべての前記第1ページ入力対象を前記第1ページ内距離が小さい順に並べた、第1の一覧表を前記第1の表示画面上の前記カーソル位置の近傍に表示し、
次いで、前記第1の一覧表中の一つの前記第1ページ入力対象を選択する第2の入力操作によって、複数の第2ページ入力対象を有する第2のページを取得し、
次いで、前記第2のページの第2の表示画面上の前記第2ページ入力対象の位置以外の任意の位置に前記カーソルを移動した後に行う第3の入力操作に応じて、前記第2のページ上のすべての前記第2ページ入力対象の位置と前記第3の入力操作を行ったカーソル位置との第2ページ内距離を算出し、
次いで、すべての前記第2ページ入力対象を前記第2ページ内距離が小さい順に並べ、かつ前記第1の一覧表への遷移を指示する入力対象を付加した第2の一覧表を、前記第1の一覧表とともに前記第2の表示画面上の前記カーソル位置の近傍に表示し、
次いで、前記第1の一覧表中の前記第1ページ入力対象の位置または、前記第2の一覧表中の前記第2ページ入力対象の位置と前記カーソル位置が重なった場合に、第4の入力操作が行われると、前記入力対象に関連付けられたイベント処理を実行することを特徴とするポインティングデバイスによる入力方法。
An input for executing event processing associated with the first page input target by an input operation for selecting one of a plurality of first page input targets on the first page by a cursor movement operation by a pointing device. In the method
On the first page in response to a first input operation performed after the cursor is moved to an arbitrary position other than the position of the first page input target on the first display screen of the first page Calculating the distance in the first page between all the positions of the first page input target and the cursor position where the first input operation is performed;
Then, all of the pre-Symbol first page input object arranged in this order in the distance is smaller the first page, and displays the first table in the vicinity of the cursor position on the first display screen,
Next, a second page having a plurality of second page input targets is acquired by a second input operation for selecting one of the first page input targets in the first list,
Next, in response to a third input operation performed after moving the cursor to an arbitrary position other than the position of the second page input target on the second display screen of the second page, the second page Calculating the distance in the second page between all the positions of the second page input target above and the cursor position where the third input operation has been performed ,
Then, arranging all the previous SL second page input object in order the second page in the distance is smaller, and the second list obtained by adding the input object that instructs transition to the first table, the second Display with a list of 1 near the cursor position on the second display screen,
Next, when the position of the first page input target in the first list or the position of the second page input target in the second list and the cursor position overlap, the fourth input An input method using a pointing device, wherein when an operation is performed, an event process associated with the input target is executed.
ポインティングデバイスによるカーソルの移動操作によって、第1のページ上の複数の第1ページ入力対象の中の一つを選択する入力操作によって、前記第1ページ入力対象に関連付けられたイベント処理を実行する入力方法において、An input for executing event processing associated with the first page input target by an input operation for selecting one of a plurality of first page input targets on the first page by a cursor movement operation by a pointing device. In the method
前記第1のページの第1の表示画面上の前記第1ページ入力対象の位置以外の任意の位置に前記カーソルを移動した後に行う第1の入力操作に応じて、前記第1のページ上のすべての前記第1ページ入力対象の位置と前記第1の入力操作を行ったカーソル位置との第1ページ内距離を算出し、On the first page in response to a first input operation performed after the cursor is moved to an arbitrary position other than the position of the first page input target on the first display screen of the first page Calculating the distance in the first page between all the positions of the first page input target and the cursor position where the first input operation is performed;
前記第1のページのアクセス以前にアクセス履歴のあるページを取得可能な、ページ名称を含む入力対象を最新アクセス順に並べた、第3の一覧表を記憶し、Storing a third list in which input objects including a page name are arranged in the order of latest access, and a page having an access history can be acquired before accessing the first page;
次いで、すべての前記第1ページ入力対象を前記第1ページ内距離が小さい順に並べ、かつ前記第3の一覧表への遷移を指示する入力対象を付加した第1の一覧表を、前記第3の一覧表とともに前記第1の表示画面上の前記カーソル位置の近傍に表示し、Next, the first list to which all the first page input objects are arranged in ascending order of the first page distance and an input object for instructing the transition to the third list is added is the third list. Along with the list of the cursors on the first display screen in the vicinity of the cursor position,
次いで、前記第1の一覧表内の入力対象の位置または、前記第3の一覧表内の入力対象の位置と前記カーソル位置が重なった場合に、第5の入力操作が行われると、前記入力対象に関連付けられたイベント処理を実行することを特徴とするポインティングデバイスによる入力方法。Next, when a fifth input operation is performed when the position of the input target in the first list or the position of the input target in the third list and the cursor position overlap, the input An input method using a pointing device, wherein event processing associated with an object is executed.
JP2002215327A 2002-07-24 2002-07-24 Input method using a pointing device Expired - Fee Related JP4773671B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002215327A JP4773671B2 (en) 2002-07-24 2002-07-24 Input method using a pointing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002215327A JP4773671B2 (en) 2002-07-24 2002-07-24 Input method using a pointing device

Publications (2)

Publication Number Publication Date
JP2004054854A JP2004054854A (en) 2004-02-19
JP4773671B2 true JP4773671B2 (en) 2011-09-14

Family

ID=31937387

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002215327A Expired - Fee Related JP4773671B2 (en) 2002-07-24 2002-07-24 Input method using a pointing device

Country Status (1)

Country Link
JP (1) JP4773671B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8875052B2 (en) 2009-01-26 2014-10-28 International Business Machines Corporation Keystroke activated dynamic task menu
JP5384194B2 (en) * 2009-05-18 2014-01-08 シャープ株式会社 Display control device, display control method, information processing apparatus, display control program, and recording medium storing the program
JP2011134273A (en) 2009-12-25 2011-07-07 Sony Corp Information processor, information processing method, and program
JP5614173B2 (en) 2010-08-25 2014-10-29 ソニー株式会社 Information processing apparatus, information processing method, and program
JP5703873B2 (en) 2011-03-17 2015-04-22 ソニー株式会社 Information processing apparatus, information processing method, and program
WO2013179468A1 (en) * 2012-05-31 2013-12-05 富士通株式会社 Operation process creation program, operation process creation method, and information-processing device
JP5962755B2 (en) 2012-05-31 2016-08-03 富士通株式会社 Operation process creation program, operation process creation method, and information processing apparatus
CN103294547A (en) * 2013-04-28 2013-09-11 华为终端有限公司 Input method calling method, input method calling device and terminal
CN112307909B (en) * 2020-10-15 2024-02-20 上海东方投资监理有限公司 Steel structure calculation method, system and storage medium thereof

Also Published As

Publication number Publication date
JP2004054854A (en) 2004-02-19

Similar Documents

Publication Publication Date Title
JP3919789B2 (en) Information processing apparatus, image movement instruction method, and program
US6643824B1 (en) Touch screen region assist for hypertext links
EP1233330A2 (en) Input system, program, and recording medium
JP6313395B1 (en) Drawing processing method, drawing processing program, and drawing processing apparatus
JPS6324462A (en) Window state display system
JP2008287323A (en) Information input display device
JP2004192573A (en) Information processor and information display method
JP5861637B2 (en) Information terminal device and touch panel display method
JP4922625B2 (en) Electronic device device by touch panel input, program for input operation of touch panel
JP4773671B2 (en) Input method using a pointing device
JP2000172398A (en) Interface control for performing switching among display areas on display device
JP4876699B2 (en) Display control apparatus and display control program
JP4406410B2 (en) Information processing apparatus, image movement instruction method, and program
JPWO2017018384A1 (en) Touch panel type information terminal device and information input processing method and program thereof
JP5039312B2 (en) Program, method and apparatus for controlling multiple pointers
JPH07220109A (en) Information processing device/method
JP2001195170A (en) Portable electronic equipment, input controller and storage medium
JP2001022496A (en) Display control device and program recording medium for the device
JP3284272B2 (en) Data input method and device / data input program recording medium
JPS62156721A (en) Document producing device
JP2000039941A (en) Character input device and character input method
JP4179197B2 (en) Linked content simultaneous browsing method, linked content simultaneous browsing device, and linked content simultaneous browsing program
JP2018092681A (en) Control program, control method, and information processing apparatus
WO2007129502A1 (en) Information display device
JPH09244858A (en) Control method for window system and information processor

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20040610

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20040610

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050627

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071120

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080124

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20080520

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080619

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20080728

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20080731

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20080905

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101126

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110624

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140701

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4773671

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees