JP2004164307A - Display device, scroll information generation method and program - Google Patents

Display device, scroll information generation method and program Download PDF

Info

Publication number
JP2004164307A
JP2004164307A JP2002329689A JP2002329689A JP2004164307A JP 2004164307 A JP2004164307 A JP 2004164307A JP 2002329689 A JP2002329689 A JP 2002329689A JP 2002329689 A JP2002329689 A JP 2002329689A JP 2004164307 A JP2004164307 A JP 2004164307A
Authority
JP
Japan
Prior art keywords
switch
display screen
information
image
mouse
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002329689A
Other languages
Japanese (ja)
Inventor
Mitsuru Sato
満 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2002329689A priority Critical patent/JP2004164307A/en
Publication of JP2004164307A publication Critical patent/JP2004164307A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To execute the scroll instruction of an image displayed on a display screen having a so-called touch panel function by easy operation. <P>SOLUTION: In this display system 100, when moving a touch pen mouse 5 on the display screen 113 with a prescribed switch of the touch pen mouse 5 turned on, a coordinate input device 1 and a coordinate detection device 3 detect information about its movement position and an effect that the switch is turned on, and a driver 108 of a host device 4 generates mouse data for scrolling an image displayed on the display screen 113 on the basis of a detection result. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
この発明は、表示画面上でユーザが指示した位置に基づく情報を生成する表示装置、スクロール情報生成方法およびプログラムに関する。
【0002】
【従来の技術】
従来より、ユーザが指やタッチペン等で指示した表示画面上の位置を検出し、検出した指示位置に基づいてコマンド等の情報を生成する機能、いわゆるタッチパネル機能を備えたシステムが用いられている。このようなシステムにおいて、ユーザが指等で指示した表示画面上の位置を検出するための方式として光遮断方式を採用したものが知られている。光遮断方式では、表示画面上から所定の距離を隔てた面上に照射光を発し、この照射光が遮られた場合にユーザが表示画面のいずれかを指示したものと判断し、その指示位置を検出する。
【0003】
上記のように光遮断方式では、表示画面から所定の距離を隔てた位置に指などが達した時点で表示画面を指示したものとしてその指示位置に応じたコマンド生成等の処理を行うようになっている。このため、実際には表示画面に指等が接触していない場合であっても、コマンド生成処理等がなされてしまうことがあり、かかる場合ユーザの意図に沿わない処理等が実行されてしまうおそれがある。
【0004】
このような不具合を抑制し、タッチパネル機能を備えた表示画面をタッチして所望の指示をユーザが行えるようにするため、タッチパネル専用ペン等の補助デバイスを利用して表示画面上の指示位置を検出する方式を採用するものも知られている。この方式では、タッチパネル専用ペンの先端にセンサを設け、当該センサによってタッチパネル専用ペンの先端が表示画面に実際に接触したことを検出することで、光遮断方式のように非接触状態で何らかのコマンド生成処理がなされてしまうことを抑制することができるようになっている。
【0005】
しかし、ユーザが指や通常の鉛筆などを用いてタッチパネル機能を利用したい場合もあり、タッチパネル専用ペンを用いる方式では、この要求を満たすことができない。このため、両方式を併用したタッチパネル機能を有するシステムも開発されている(パイオニア株式会社:商品名「CYBERBOARD」)。このシステムでは、ユーザがスイッチを切り替えることでいずれの方式でタッチパネル機能を動作させるかを設定することができるようになっている。
【0006】
また、従来より、表示画面に表示される画像をホイールマウス等の操作に応じてスクロールさせる技術が用いられている。そのような技術のうち、比較的容易な操作によって画像をスクロールさせようとする技術もあり、かかる技術ではキーボード上の特定キーを押下した後でマウスを移動させることでその移動方向に画像をスクロールさせている(例えば、特許文献1)。また、マウスがマウスパットや机などの接地面から離れたか否かを検出し、離れている状態でマウスが移動させられた場合にその移動方向に画像をスクロールさせる技術も提案されている(例えば、特許文献2)。
【0007】
また、従来のタッチパネル機能を備えたシステムにおいても、その表示画面にスクロール可能な画像が表示されている場合に、その画像をスクロールさせることができるようになっている。
【0008】
従来のタッチパネル機能付きのシステムでは、画像のスクロールはユーザが表示画面に表示されたスクロールバーなどを指等で指示することによって行っていたが、別のスクロール指示方法として、タッチパネルをタッチするための専用ペンに回転ダイヤルを設け、当該ダイヤル操作に応じて画像をスクロールさせる方法が提案されている(例えば、特許文献3参照)。
【0009】
【特許文献1】
特開2000−20211号公報
【特許文献2】
特開2001−142636号公報
【特許文献3】
特開2001−142632号公報
【0010】
【発明が解決しようとする課題】
しかし、上述した光遮断方式と専用ペンを用いる方式とを併用したシステムでは、専用ペンを用いる方式で動作している場合に、ユーザが誤って光遮断方式で動作しているものと思って指で指示をした場合には、その指示がシステム側で認識されず、指示に応じた処理等もなされなくなる。この場合、ユーザはシステムが故障してしまったと勘違いしてしまうおそれがあり、故障コールをする等無駄な作業等を招来させることにもつながる。
【0011】
また、上述したように従来のタッチパネル機能付きシステムでは、画像のスクロールはユーザが表示画面に表示されたスクロールバーなどを指等で指示することによって行う必要があり、表示されるスクロールバーが小さい場合などには、かかる指示操作は煩雑かつ困難であった。また、タッチパネルをタッチするための専用ペンに回転ダイヤルを設け、当該ダイヤル操作に応じて画像をスクロールさせる方法を用いた場合でも、表示画面上の所望の位置を指し示しながら、ダイヤルを回転させるといった操作は煩雑である。
【0012】
この発明は上記に鑑みてなされたもので、光遮断方式と専用ペンを用いる方式とを併用した装置であっても、ユーザに故障が発生したものとの勘違い等を起こさせることを抑制することができる表示装置およびプログラムを得ることを目的とする。
【0013】
また、この発明は、いわゆるタッチパネル機能を備えた表示画面に表示された画像のスクロール指示を容易な操作によってなし得る表示装置、スクロール情報生成方法およびプログラムを得ることを目的とする。
【0014】
【課題を解決するための手段】
上記目的を達成するため、請求項1にかかる発明は、表示画面を備え、当該表示画面上のユーザが指示した位置に基づく情報を生成する表示装置であって、ユーザが前記表示画面のいずれかの位置を指示するために用いるデバイスであって、当該デバイスの所定の部位が前記表示画面に接触したか否かを検出するポインティングデバイスと、前記表示画面上から所定の距離を隔てた位置に物体がある場合に、当該物体が指し示す前記表示画面上の位置を検出する位置検出手段と、前記ポインティングデバイスが前記表示画面に接触したか否かを問わず前記位置検出手段によって検出された位置に基づく情報を生成する非接触モードと、前記ポインティングデバイスの前記所定の部位が前記表示画面に接触したことが検出されている間における前記位置検出手段によって検出された位置に基づく情報を生成する接触モードのいずれかの選択されたモードで動作する情報生成手段とを備え、前記情報生成手段は、当該装置に電源が投入された際に前記非接触モードで動作することを特徴とする。
【0015】
請求項1にかかる発明によれば、ユーザは、ポインティングデバイスを用いて表示画面に接触した際の位置に基づいて情報を生成する接触モードと、指などの物体で表示画面に接触しない状態でも指示した位置に基づく情報が生成される非接触モードの両者を選択して情報生成のための指示をすることができる。そして、このような両モードを選択できる場合において、装置が接触モードで動作しているにもかかわらず、ユーザが非接触モードで動作していると誤信しているときには、ユーザが指で表示画面を指示したとき、その指示は装置側で認識されず、指示に応じた処理がなされないのでユーザは装置が故障してしまったと勘違いしてしまうおそれがある。このようなケースにおいては、ユーザは故障コール等をする前に電源を一旦オフして再投入するといった操作を行うのが一般的である。このような操作が行われるのが一般的であることを考慮した本発明では、情報生成手段は電源投入時には非接触モードで動作するようになっているので、電源が再投入された場合にはその後のユーザの指による指示は装置側によって認識され、その指示に応じた処理等が実行されてユーザの勘違いが解消される。したがって、故障コール等の無駄な作業等の招来を抑制することができる。
【0016】
また、請求項2にかかる発明は、表示画面を備え、当該表示画面上のユーザが指示した位置に基づく情報を生成する表示装置であって、ユーザが前記表示画面のいずれかの位置を指示するために用いるデバイスであって、オン/オフスイッチを有するポインティングデバイスと、前記ポインティングデバイスが指し示す前記表示画面上の位置を検出する位置検出手段と、前記スイッチがオンの間に前記位置検出手段によって検出された前記ポインティングデバイスが指し示す位置に基づいて、前記表示画面に表示される画像をスクロールさせるスクロール手段とを具備することを特徴とする。
【0017】
請求項2にかかる発明によれば、ポインティングデバイスに設けられたオン/オフスイッチをオンにしてポインティングデバイスを移動させるといった容易な操作で表示画面に表示される画像をスクロールさせることができる。
【0018】
また、請求項3にかかる発明は、請求項2にかかる発明の構成において、前記スクロール手段が、前記スイッチがオンの間に前記位置検出手段によって検出される位置に基づいて前記表示画面に表示されるある表示領域の画像をスクロールさせている際に、前記位置検出手段によって検出される位置が当該ある表示領域外となったときにも当該ある表示領域の画像のスクロールを続行することを特徴とする。
【0019】
請求項3にかかる発明によれば、表示画面に複数の表示領域があり、ある表示領域に表示された画像をスクロールさせるためにポインティングデバイスを移動させた場合において、ポインティングデバイスが当該ある表示領域外の位置に移動した場合であっても、当該ある表示領域の画像のスクロールが続行される。したがって、ポインティングデバイスが他の表示領域に移動した場合に当該ある表示領域ではなく、他の表示領域の画像がスクロールされてしまうことを抑止できる。
【0020】
また、請求項4にかかる発明は、請求項2または3にかかる発明の構成において、前記スクロール手段が、前記スイッチがオンの間に前記位置検出手段によって検出される前記ポインティングデバイスが指示する位置が移動した量に応じて画像のスクロール量を決定することを特徴とする。
【0021】
請求項4にかかる発明によれば、ポインティングデバイスの移動量に応じて画像のスクロール量が決定されるので、ユーザはポインティングデバイスを移動させる量を調整するといった容易な作業で画像のスクロール量を指示することができる。
【0022】
また、請求項5にかかる発明は、表示画面を備える表示装置において、当該表示画面に表示される画像をスクロールさせるための制御情報を生成する方法であって、オン/オフスイッチを有するポインティングデバイスが指し示す前記表示画面上の位置を検出する位置検出ステップと、前記スイッチがオンの間に前記位置検出ステップで検出された前記ポインティングデバイスが指し示す位置に基づいて、前記表示画面に表示される画像をスクロールさせるための制御情報を生成するスクロール情報生成ステップとを具備することを特徴とする。
【0023】
請求項5にかかる発明によれば、ポインティングデバイスに設けられたオン/オフスイッチをオンにしてポインティングデバイスを移動させるといった容易な操作で表示画面に表示される画像をスクロールさせることができる。
【0024】
また、請求項6にかかる発明は、請求項5にかかる発明の構成において、前記スクロール情報生成ステップでは、前記スイッチがオンの間に前記位置検出ステップで検出される位置に基づいて前記表示画面に表示されるある表示領域の画像をスクロールさせている際に、前記位置検出ステップで検出される位置が当該ある表示領域外の位置となったときにも当該ある表示領域の画像のスクロールのための制御情報を生成することを特徴とする。
【0025】
請求項6にかかる発明によれば、表示画面に複数の表示領域があり、ある表示領域に表示された画像をスクロールさせるためにポインティングデバイスを移動させた場合において、ポインティングデバイスが当該ある表示領域外の位置に移動した場合であっても、当該ある表示領域の画像のスクロールが続行される。したがって、ポインティングデバイスが他の表示領域に移動した場合に当該ある表示領域ではなく、他の表示領域の画像がスクロールされてしまうことを抑止できる。
【0026】
また、請求項7にかかる発明は、請求項5または6に記載の発明の構成において、前記スクロール情報生成ステップでは、前記スイッチがオンの間に前記位置検出手段によって検出される前記ポインティングデバイスが指示する位置が移動した量に応じて画像のスクロール量を決定し、当該スクロール量を含む制御情報を生成することを特徴とする。
【0027】
請求項7にかかる発明によれば、ポインティングデバイスの移動量に応じて画像のスクロール量が決定されるので、ユーザはポインティングデバイスを移動させる量を調整するといった容易な作業で画像のスクロール量を指示することができる。
【0028】
また、請求項8にかかる発明は、専用のポインティングデバイスが表示画面のいずれかの位置に接触したか否かを示す情報と、前記表示画面上から所定の距離を隔てた位置に物体がある場合に当該物体が指し示す前記表示画面上の位置を示す位置情報とが供給されるコンピュータを、前記ポインティングデバイスが前記表示画面に接触したか否かを問わず供給される位置情報に基づく情報を生成する非接触モードと、前記ポインティングデバイスの前記所定の部位が前記表示画面に接触したことが検出されている間に供給される位置情報に基づく情報を生成する接触モードのいずれかの選択されたモードで動作する手段であって、当該コンピュータに電源が投入された際に前記非接触モードで動作する情報生成手段として機能させることを特徴とする。
【0029】
請求項8にかかる発明によれば、ユーザは、ポインティングデバイスを用いて表示画面に接触した際の位置に基づいて情報を生成する接触モードと、指などの物体で表示画面に接触しない状態でも指示した位置に基づく情報が生成される非接触モードの両者を選択して情報生成のための指示をすることができる。そして、このような両モードを選択できる場合において、装置が接触モードで動作しているにもかかわらず、ユーザが非接触モードで動作していると誤信しているときには、ユーザが指で表示画面を指示したとき、その指示は装置側で認識されず、指示に応じた処理がなされないのでユーザは装置が故障してしまったと勘違いしてしまうおそれがある。このようなケースにおいては、ユーザは故障コール等をする前に電源を一旦オフして再投入するといった操作を行うのが一般的である。このような操作が行われるのが一般的であることを考慮した本発明では、情報生成手段が電源投入時には非接触モードで動作するようになっているので、電源が再投入された場合にはその後のユーザの指による指示は装置側によって認識され、その指示に応じた処理等が実行されてユーザの勘違いが解消される。したがって、故障コール等の無駄な作業等の招来を抑制することができる。
【0030】
また、請求項9にかかる発明は、オン/オフスイッチを有するポインティングデバイスが指し示す表示画面上の位置情報と、前記オン/オフスイッチのオン/オフ状態とを示すスイッチ情報とが供給されるコンピュータを、前記スイッチ情報に示されるスイッチ状態がオンの間に前記位置情報に基づいて、前記表示画面に表示される画像をスクロールさせるための制御情報を生成する情報生成手段として機能させることを特徴とする。
【0031】
請求項9にかかる発明によれば、ポインティングデバイスに設けられたオン/オフスイッチをオンにしてポインティングデバイスを移動させるといった容易な操作で表示画面に表示される画像をスクロールさせることができる。
【0032】
また、請求項10にかかる発明は、請求項9にかかる発明の構成において、前記情報生成手段が、前記スイッチ情報に示されるスイッチ状態がオンの間に前記位置情報に基づいて前記表示画面に表示されるある表示領域の画像をスクロールさせている際に、前記表示装置から供給される前記位置情報に示される位置が当該ある表示領域外の位置となったときにも当該ある表示領域の画像のスクロールのための制御情報を生成することを特徴とする。
【0033】
請求項10にかかる発明によれば、表示画面に複数の表示領域があり、ある表示領域に表示された画像をスクロールさせるためにポインティングデバイスを移動させた場合において、ポインティングデバイスが当該ある表示領域外の位置に移動した場合であっても、当該ある表示領域の画像のスクロールが続行される。したがって、ポインティングデバイスが他の表示領域に移動した場合に当該ある表示領域ではなく、他の表示領域の画像がスクロールされてしまうことを抑止できる。
【0034】
また、請求項11にかかる発明は、請求項9または10にかかる発明の構成において、前記情報生成手段が、前記スイッチ情報に示されるスイッチ状態がオンの間に前記位置情報に示される位置が移動した量に応じて画像のスクロール量を決定し、当該スクロール量を含む制御情報を生成することを特徴とする。
【0035】
請求項11にかかる発明によれば、ポインティングデバイスの移動量に応じて画像のスクロール量が決定されるので、ユーザはポインティングデバイスを移動させる量を調整するといった容易な作業で画像のスクロール量を指示することができる。
【0036】
【発明の実施の形態】
以下に添付図面を参照して、この発明にかかる表示装置、スクロール情報生成方法およびプログラムの好適な実施の形態を詳細に説明する。
【0037】
図1は、この発明の実施形態であるタッチパネル機能付きディスプレイシステム(表示装置)100の構成を示す図である。同図に示すように、タッチパネル付きディスプレイシステム100は、タッチパネル式の座標入力装置1と、座標入力装置1に入力された座標等を検出する座標検知装置3と、座標検知装置3が検出した座標等に基づいて画像データを制御するホスト装置4(本実施の形態ではPC(Personal Computer)を利用している)と、ホスト装置4によって制御された画像データ(R、G、B)を液晶画面やPDP(Plasma Display Panel)といったディスプレイ画面113に表示する表示装置2と、ユーザが座標入力装置1を指し示すための専用のタッチペンマウス(ポインティングデバイス)5とを備えている。
【0038】
なお、本明細書中では、座標入力装置1と座標検知装置3とを合わせた構成をタッチパネルとも記す。また、ディスプレイシステム100は、ディスプレイ画面113が座標入力装置1の座標入力面112とほぼ重なって設けられている。座標入力面とは、座標検知装置3が座標を検出できる領域である。詳細は後述するが、本実施の形態のディスプレイシステム100は、ディスプレイ画面113に直接タッチしなくてもディスプレイ画面113上から所定の距離を隔てた位置にある面である座標入力面112上に指やタッチペンマウス5などの物体がある場合に、その物体が指し示すディスプレイ画面113上の位置を検出できる構成となっている。
【0039】
座標入力装置1は、後述する光学検出器を備えていて、座標入力面112上に物体があることを光学的に検出し、当該光学検出器が検出したデータを座標検知装置3に出力する。
【0040】
座標検知装置3は、座標入力装置1から供給されるデータに基づいて、検出された物体が指し示す座標入力面112上の指示点tの座標(x、y)を算出する。算出される座標は、ディスプレイ画面113の画素数(例えばx:1024、y:768)によって表され、10ms、あるいは20msといった時間で周期的にホスト装置4に出力する。なお、座標検知装置3の指示点tの座標の算出については、後に詳述する。
【0041】
座標検知装置3は、後述する光学検出器が検出したデータを入力するための左光学検出器I/F(Inter Face)101、右光学検出器I/F102、座標検知装置3全般を制御する中央演算装置104、中央演算装置104で使用されるプログラムが格納されているROM105、中央演算装置104の作業データが一時保存されるRAM106、周期的に時間を計測して中央演算装置104に入力するタイマ(TIMER)107と、タッチペンマウス5がディスプレイ画面113上に接触しているか否か、および後述するタッチペンマウス5に設けられたスイッチの状態を検出するための情報を含む赤外線信号を受信する赤外線検出器I/F109とを備えている。
【0042】
ホスト装置4は、PC(Personal Computer)であって、Windows(R)、Macintosh(R)、Linux(R)といった汎用的なOS(Operating System)を搭載しており、画像データの制御は、OSの制御下で実行されている。そして、汎用的なOSの制御下で実行されるプログラム(ドライバソフト)であるドライバ108と、共通の汎用的なOSの制御下で動作するアプリケーションAPL111と、画像データが一時的に保存される画像RAM115とを有している。
【0043】
図2に示すように、タッチペンマウス5はペン形状の部材であり、その先端部分に設けられるオン/オフに切り替わるスイッチ51と、その胴部分に設けられる2つのオン/オフスイッチ52、53とを有している。タッチペンマウス5をユーザが使用しているときに、その先端部分に設けられたスイッチ51がディスプレイ画面113に接触するとスイッチ51がオンとなり、先端部分がディスプレイ画面113から離れるとスイッチ51がオフとなるようになっている。また、本実施形態におけるスイッチ52、53は押下操作によってオンオフを切り替えることができるようになっている。なお、本実施形態においてスイッチ51は上記のようにタッチペンマウス5の所定の部位である先端部分がディスプレイ画面113に接触したか否かを検出するための手段であるが、ディスプレイ画面113に接触したか否かを検出することができるものであればよく、スイッチ51に代えて接触検知センサ等を設けるようにしてもよい。
また、タッチペンマウス5は、スイッチ51、52、53のオン/オフ状態を検出するスイッチ検知部54と、スイッチ検知部54によって検出された各スイッチのオン/オフ状態を示す情報を含んだ赤外線を発射する赤外線発信部55とを有している。かかる赤外線発信部55が発した赤外線信号が赤外線検出器I/F109を介して座標検知装置3に取り込まれるようになっている。
【0044】
座標検知装置3は、座標入力装置1の光学検出器が取得したデータ、およびタッチペンマウス5の赤外線発信部55から発信される赤外線信号に基づいて、指示点の座標データと指示検出の有無、タッチペンマウス5の各スイッチのオン/オフ状態など(デタッチ、タッチ、スタート、スイッチのオン/オフ)とを示す検出データ(位置情報、スイッチ情報)を生成し、ホスト装置4に供給する。
【0045】
なお、本実施形態において、タッチとはディスプレイ画面113ではなく、座標入力面112に指やタッチペンマウス5等の物体が達したことをスタートといい、このスタート位置の座標をスタート座標という。また、座標入力面112から指やタッチペンマウス5等が離れたことをデタッチといいその位置をデタッチ座標という。また、デタッチすることなく指等が座標入力面112上を移動した際の指等の指示する位置をタッチ座標という。
【0046】
図3に示したように、検出データは、指示点のx座標、y座標、さらに座標イベントの情報を含んでいる。座標イベントは、その検出データが、スタート座標、タッチ座標、デタッチ座標のいずれであるかを1または0によって示すものである。なお、座標検知装置3がスタート、デタッチ、タッチを検出した場合、各タッチを示すフィールドに1が設定される。また、座標イベントには、タッチペンマウス5のスイッチ51、52、53のオン/オフ状態を示す情報が含まれており、オンである場合には「1」がオフである場合には「0」が設定される。
【0047】
次に、座標検知装置3による上記形式の検出データの生成送信処理について図4を参照しながら説明する。同図に示すように、電源が投入されると、座標検知装置3は現在のステータスフラグを非検知に設定する(ステップS1)。ステータスフラグは座標入力面112上に指やタッチペンマウス5等の物体を検知しているか否かを示す情報である。
【0048】
次に、座標検知装置3は、座標入力面112上に指などの物体の検知があるか否かを判別する(ステップS2)。物体が検知された場合には(判別「Yes」)、新たな検出データ生成のため座標イベントをクリアするとともに(ステップS3)、検出された物体の座標を算出する処理を行う(ステップS4)。ここでの座標算出手法について図5を参照しながら説明する。
【0049】
同図に示すように座標入力装置1は、図中の縦方向の長さがH、横の長さがWの矩形の座標入力面112と、座標入力面の三辺に設けられた再帰性反射部材201と、再帰性反射部材201が設けられていない1辺の両端に設けられた左光学検出器202L、右光学検出器202Rとを備えている。
【0050】
左光学検出器202L、右光学検出器202Rは、いずれも半導体レーザである光源(図示せず)と、例えばCCD(Charged Coupled Device)を利用した受光部(図示せず)とを一体化したユニットである。図5および図6に示すように光源は、ディスプレイ画面113上から所定の距離dを隔てた座標入力面112の全域に光源を要とする扇状に光を照射する。左光学検出器202L、右光学検出器202Rが扇状の光を照射することによって、レーザ光は座標入力面112の全域に照射される。
【0051】
座標入力面112に照射された光は、再帰性反射部材201に反射される。再帰性反射部材201は、光を180度の角度で反射する部材であって、例えば図中に示す照射光P1を反射して照射光P1の光軸に平行な光軸を通る反射光P2とする。座標入力面上112に光を遮るものが存在しない場合、左光学検出器202L、右光学検出器202R、は照射された光のすべての反射光を受光する。一方、指やタッチペンマウス5などの物体が座標入力面112に存在したとき、その存在位置である指示点tを通る光(P3、P4)が左光学検出器202L、右光学検出器202Rに受光されない。
【0052】
以上のように左光学検出器202L、右光学検出器202Rによって検出される光の情報は、アナログデータとして座標検知装置3に入力される。座標検知装置3は、このようにして座標入力装置1から供給されるデータに基づいて座標を算出する。より具体的には、まず扇状に照射された光のうち、受光部の光を受光しなかった位置で本来受光されるはずの光の光軸から左光学検出器202L、右光学検出器202Rの受光部を通る直線と各受光部と指示点tとを通る直線との角度(光遮蔽角度)θL、θRとを求める。そして、指示点tの座標(x、y)は、角度θL、θRを使って以下のように算出する。
x=W×tanθR/(tanθL+tanθR)
y=H−W×tanθL×tanθR/(tanθL+tanθR)
【0053】
図3に戻り、座標検知装置3は以上のようにして座標を算出すると(ステップS4)、タッチペンマウス5の赤外線発信部55から供給される赤外線信号に基づいて、タッチペンマウス5のスイッチ51、52、53のオン/オフ状態を検出し、検出した各スイッチの状態を座標イベントにセットする。
【0054】
ここで、図7を参照しながら各スイッチ51、52、53のオン/オフ状態の検知手法について説明する。同図に示すように、座標入力装置1は、赤外線検出器58を有している。赤外線検出器58はタッチペンマウス5の赤外線発信部55(図2参照)から発信される各スイッチのオン/オフ状態を表す赤外線信号を受信し、これを座標検知装置3に出力する。赤外線検出器58から出力された赤外線信号は赤外線検出器I/F109(図1参照)を介して座標検知装置3に取り込まれる。このようにして取り込まれた赤外線信号に基づいて、座標検知装置3はタッチペンマウス5の各スイッチ51、52、53のオン/オフ状態を検出する。
【0055】
図8はタッチペンマウス5の赤外線発信部55が発射する赤外線信号の内容を示すタイミングチャートである。図2に示す赤外線発信部55は、一定の時間間隔(6ms)毎にスイッチ検知部54による検知結果、つまり各スイッチ51、52、53のオン/オフ状態を取得し、取得したオン/オフ状態を反映させた赤外線信号を生成して発射する。より具体的には、赤外線発信部55は各スイッチのオン/オフ状態に応じて異なる波形の赤外線信号を生成し、本実施形態では、▲1▼スイッチ53(Aスイッチとする)のみがオン、▲2▼スイッチ52(Bスイッチとする)のみがオン、▲3▼スイッチ51(接触スイッチとする)のみがオン、▲4▼Aスイッチ、Bスイッチがオン、▲5▼接触スイッチ、Aスイッチがオン、▲6▼接触スイッチ、Bスイッチがオン、▲7▼すべてのスイッチがオンの各ケースにおいては図6に示すような赤外線信号が生成されて発射される。すなわち、1500msのスタート信号に続いて、各スイッチ状態に応じた波形の信号が生成されるようになっており、スタート信号から500ms〜1000msの区間の信号がAスイッチのオン/オフを表し、スタート信号から1500ms〜2000msの区間の信号がBスイッチのオン/オフを表し、スタート信号から2500ms〜3000msの区間の信号が接触スイッチのオン/オフを表すようになっている。このような赤外線信号を取り込んだ座標検知装置3では、それぞれの区間の信号をモニタリングすることで各スイッチ51、52、53のオン/オフ状態を検出することができる。
【0056】
図3に戻り、座標検知装置3は以上のようにして得られた検出結果に基づいて各スイッチオン/オフ状態を座標イベントにセットする。まず、Aスイッチ、Bスイッチ、接触スイッチの各スイッチがオンであるか否かを判別し(ステップS5、ステップS7、ステップS9)、スイッチがオンである場合には座標イベントに各スイッチの状態を示すオン(「1」)をセットし、オフである場合にはオフ(「0」)をセットする(ステップS6、ステップS8、ステップS10)。以上のように各スイッチ状態のオン/オフセットが終了すると、座標検知装置3は、ステータスが検知中であるか否かを判別する(ステップS11)。ステータスが非検知であれば、この時点ではステップS2で物体が検知されているので、ステータスを検知にセットするとともに(ステップS12)、当該検出データをスタート座標データとしてホスト装置4に送信する(ステップS13)。すなわち、ステータスが非検知から検知に変更されたということは、座標入力面112上に指やタッチペンマウス5等の物体が達したことを意味するのでスタート座標データとして送信するのである。
【0057】
一方、ステップS11の判別において、ステータスが検知中であった場合(判別「Yes」)、その検出がデタッチ、つまり座標入力面112から指やタッチペンマウス5等が離れた際のものであり、その後物体が検知されなくなったか否かを判別する(ステップS14)。ここで、その検知がデタッチでない場合には継続して物体が座標入力面112上に存在しているので、検出データをタッチ座標データとして送信する(ステップS15)。一方、デタッチである場合には、ステータスを非検知に設定するとともに(ステップS16)、当該検出データをデタッチ座標データとして送信する(ステップS17)。
【0058】
以上のように座標検知装置3によって生成された検出データがUSB(Universal Serial Bus)やRS232Cなどの通信インターフェースを介して図1に示すホスト装置104のドライバ108に供給される。ホスト装置4のドライバ108は、汎用的なOSの制御下で座標検知装置3から検出データをRS232CあるいはUSBを介して受け取る。そして、ドライバ108は、受け取った検出データに基づいてマウスデータを生成してマウスI/Fを介してAPL111に渡し、これによりマウスデータに応じた処理などが実行される。
【0059】
また本実施形態では、ユーザはタッチペンマウス5のスイッチ52、53のオン/オフ状態や、スイッチ51のオン/オフ状態、つまりタッチペンマウス5の先端部分がディスプレイ画面113に接触しているか否か等の操作内容に応じてどのような内容のマウスデータを生成するかを選択設定できるようになっており、ドライバ108はこの設定内容にしたがい、供給される検出データ、つまりタッチペンマウス5の各スイッチの操作状態やユーザの指の動き等に応じたマウスデータを生成する。このようなドライバ108によるマウスデータの生成処理動作についての詳細は後述する。
【0060】
APL111は、マウスI/Fから受け取ったマウスデータに含まれる座標に関する情報、ボタンのオン、オフの情報等にしたがって予め座標に設定されている機能などを実行する。ここでいう機能とは、例えば、ドラッグの軌跡を特定の色や太さの線で描画する文字描画、図形描画、罫線描画をいう。
【0061】
APL111の機能の実行によって作成された画像データは、R、G、Bで表される形式で画像RAM115に展開されて表示装置2に送出する。表示装置2は、画像データに対応する画像をディスプレイ画面113に表示する。
【0062】
次に、座標検知装置103から供給される検出データ、つまりタッチペンマウス5の操作内容やユーザの指の動き等に応じた情報であるマウスデータを生成するドライバ(情報生成手段)108の処理動作について説明する。
【0063】
上述したように本実施形態では、タッチペンマウス5の各スイッチの状態に応じてドライバ108がどのような内容のマウスデータを生成するかを、ユーザが選択設定できるようになっており、まずユーザがかかる選択設定を行った際のドライバ108の動作について説明する。
【0064】
ユーザからマウスデータ生成に関する選択設定を行う旨の指示を受けると、ドライバ108は図9に示す設定画面を表示装置2のディスプレイ画面113に表示させるよう動作する。同図に示すように、この設定画面には、タッチペンマウス5による操作を有効にするか否かをユーザに選択させるためのチェックボックスCB1が表示される。ユーザがタッチペンマウス5の操作を有効にし、その操作内容に応じたマウスデータを生成させること望む場合にはこのチェックボックスCB1をチェックする。以下、このチェックボックスCB1がチェックされた後、つまりタッチペンマウス5の各スイッチの状態をマウスデータ生成に反映させるようドライバ108が動作するモードをタッチペンマウス検知モードといい、チェックボックスCB1がチェックされないとき、つまりタッチペンマウス5の各スイッチの状態をマウスデータ生成に反映させないようドライバ108が動作するモードを指検知モードという。
【0065】
また、設定画面には、タッチペンマウス5のスイッチ52、53(図2参照)の各々にどのような機能を与えるかを選択するための表示がなされている。図9に示すように、各々のスイッチ毎にプルダウンメニューが表示され、かかるプルダウンメニューには「右ボタン」、「中ボタン」、「ホイール」、「ダブルクリック」などのマウスの操作内容が表示されており、ユーザはこれらのいずれかを選択することで各々のスイッチをオンにした際に生成されるマウスデータを選択することができる。例えば、Aスイッチに対して「右ボタン」を選択した場合において、ユーザがタッチペンマウス5のAスイッチをオンにする操作を行うと、マウスの「右ボタン」をクリックしたときと同様のマウスデータが生成され、Bスイッチに対して「ホイール」を選択した場合において、ユーザがタッチペンマウス5のBスイッチをオンにする操作を行うと、ホイールマウスとしてのマウスデータ、つまり表示画像をスクロールさせるため制御情報が生成されることになる。
【0066】
以上のような設定画面を参照しながらユーザがタッチペンマウス5の操作内容に対する設定を行い、図9に示す画面に表示される「OK」ボタンをクリックすると、ドライバ108はその設定内容を図示せぬ設定テーブルに記憶し、その後設定変更がなされる、または装置電源がオフになされるまでその設定テーブルに記憶された内容にしたがい、座標検知装置3から供給される検出データに含まれるタッチペンマウス5の操作状態に応じたマウスデータを生成する。
【0067】
次に、図10、図11および図12を参照しながら、座標検知装置3から供給される検出データに基づいてドライバ108がマウスデータを生成するときの動作について説明する。
【0068】
まず、ホスト装置104に電源が投入されると、当該ドライバ108が起動され、図10に示すように、ドライバ108の動作モードが指検知モードに設定される(ステップSa1)。このように本実施形態では、電源投入時には動作モードが指検知モードに設定されるようになっており、ユーザによる設定変更指示(図9参照)がない限り、指検知モードでドライバ108が動作するようになっている。すなわち、本実施形態においてドライバ108は、電源投入時にタッチペンマウス5がディスプレイ画面113に接触したか否かを問わず、供給された検出データに基づくマウスデータを生成する指検知モード(非接触モード)に動作モードする情報生成手段を構成している。
【0069】
この後、ドライバ108は座標検知装置3からの検出データの待ち受け状態となり、検出データを受信したか否かを判別する(ステップSa2)。ここで、検出データを受信しない場合には(判別「No」)、受信するまで待ち受け状態を維持する(ステップSa2)。一方、検出データを受信した場合(判別「Yes」)、その時点での検知モードが指検知モードであるか否かを判別する(ステップSa3)。電源投入後ユーザによる設定変更がなされていない場合や、一度タッチペンマウス検知モードに設定された後再度指検知モードに設定変更されている場合には、当該判別は「Yes」となり、受信した検出データがデタッチ座標についてのものであるか否かを判別する(ステップSa4)。受信した検出データがデタッチ座標であるか否かは座標イベントのデタッチ座標に「1」が設定されているか否かにより判別できる(図3参照)。
【0070】
そして、受信した検出データがデタッチ座標についてのものでない場合(判別「No」)、これは指やタッチペンマウス5などの物体がディスプレイ画面113のいずれかの位置を指示している状態であるから、ドライバ108によって左ボタンオンマウスデータが生成される(ステップSa5)。ここで、左ボタンオンマウスデータとは、通常のマウスの左ボタンをクリックしたとき同様の処理をAPL111等に行わせるためのマウスデータである。図13に示すように、マウスデータは、指示点のx座標、y座標、さらにマウスイベントおよびホイール移動量といった情報を含んでいる。マウスイベントは、マウスの右ボタンのオン、オフ、左ボタンのオン、オフ、中ボタンのオン、オフ、ホイールマウスとして動作するか否かを1または0によって示すものである。
【0071】
一方、受信した検出データがデタッチ座標についてのものである場合(ステップSa4の判別「No」)、指などの物体が座標入力面112から離れたことを意味するので、ドライバ108は左ボタンオフマウスデータを生成してマウスI/Fに出力する(ステップSa6)。ここで、左ボタンオフマウスデータとは、通常のマウスのクリックされていた左ボタンをオフにしたときと同様の処理をAPL111等に行わせるためのデータである。
【0072】
以上がドライバ108の動作モードが指検知モードである場合のマウスデータ生成のための処理動作であり、かかるモードでは検出データにスイッチ52、52、53がオンである旨のデータが含まれている場合であっても(図3参照)、その内容はマウスデータ生成について一切考慮されない。したがって、ユーザがタッチペンマウス5を用いて指示した場合であっても、指や他の物体で座標入力面112を指示した場合と同様のマウスデータが生成される。
【0073】
次に、ユーザが設定変更を行い(図9参照)、動作モードがタッチペンマウス検知モードになっている場合について説明する。この場合、ステップSa3の判別において、動作モードが指検知モードでないと判別され、受信した検出データがスタート座標についてのものであるか否かが判別される(ステップSa7)。
【0074】
ここで、検出データがスタート座標についてのものである場合(判別「Yes」)、つまり指やタッチペンマウス5等の物体が座標入力面112にあることが検出された始期の検出データである場合には、接触ステータスがオフに設定される(ステップSa8)。接触ステータスとは、タッチペンマウス5の先端部分がディスプレイ画面113に接触しているか否かを示すステータス情報であり、かかるステータスがオフである場合には、スイッチ51がオフでありタッチペンマウス5の先端部分がディスプレイ画面113に接触していない状態であることを意味する。一方、検出データがスタート座標以外のデタッチ座標またはタッチ座標についてのものである場合には(ステップSa7の判別「No」)、ステップSa8を経由せずステップSa9に進む。
【0075】
そして、スイッチ51がオンであるか否か、つまりタッチペンマウス5の先端部分がディスプレイ画面113に接触したか否かが判別される(ステップSa9)。スイッチ51がオンであるか否かは検出データに含まれる各スイッチのオン/オフを示すフィールド(図3参照)を参照することで判別できる。スイッチ51がオンであると判別した場合には、接触ステータスをオンに設定し(ステップSa10)、スイッチ53(Aスイッチ)がオンであるか否かを判別する(ステップSa11)。スイッチ53(Aスイッチ)がオンである場合には、Aスイッチオン機能制御が行われる(ステップSa12)。
【0076】
図11に示すように、Aスイッチオン機能制御では、まずAスイッチに割り当てられた機能が「右ボタン」であるか否かを判別する(ステップSb1)。ここで、Aスイッチにどのような機能が割り当てられているといった情報は、上述したユーザが図9に示す画面を参照しながら選択した設定内容を記憶した設定テーブルを参照することにより得られる。なお、電源投入後ユーザによる選択設定が一度もなされていない場合には、デフォルトの設定内容に従うことになる。
【0077】
Aスイッチが「右ボタン」に設定されている場合には、ドライバ108は右ボタンオンマウスデータ(図13参照)を生成し(ステップSb2)、スイッチオン機能制御処理を終了する。一方、Aスイッチが「右ボタン」に設定されていない場合には、「中ボタン」に設定されているか否かを判別する(ステップSb3)。そして、Aスイッチが「中ボタン」に設定されている場合には、ドライバ108は中ボタンオンマウスデータ(図13参照)を生成し(ステップSb4)、当該スイッチオン機能制御処理を終了する。
【0078】
さらに、Aスイッチが「中ボタン」に設定されていない場合には、「ダブルクリック」に設定されているか否かを判別する(ステップSb5)。Aスイッチが「ダブルクリック」に設定されている場合には、ドライバ108は、左ボタンオンマウスデータ、左ボタンオフマウスデータ、左ボタンオンマウスデータ、左ボタンオフマウスデータといった順序でマウスデータを生成する(ステップSb6、ステップSb7、ステップSb8、ステップSb9)。これによりAスイッチをオン操作することで、通常のマウスの左ボタンをダブルクリックしたとき同様のコマンド情報がAPL111等に供給されることになる。
【0079】
Aスイッチが「ダブルクリック」に設定されていない場合には、Aスイッチが「ホイール」に設定されているか否かを判別する(ステップSb10)。Aスイッチが「ホイール」に設定されている場合には、受信した現在処理対象となっている検出データに示される座標データ(x座標、y座標)を保存する(ステップSb11)。そして、今回受信した検出データに示される座標と、前回受信した検出データに示される座標(前回の処理時にステップSb10で保存されている座標)とから、ホイールマウスのホイールの操作量と同様の意義、つまり表示画像のスクロール量を表すホイール移動量を設定する(ステップSb12)。より具体的には、ドライバ108は前回に受信した検出データに示される座標と、今回受信した現在処理対象となっている検出データに示される座標との距離Nを以下の式により求める。
N=√((x1−x2)+(y1−y2)
【0080】
ここで、x1、y1は前回受信した検出データに示される座標、x2、y2は今回受信した検出データに示される座標を示す。
【0081】
そして、ドライバ108は距離Nにあらかじめ設定されている調整係数Hを乗算し、その乗算結果をホイール移動量として設定する。ドライバ108は、このようにして求められたホイール移動量を含むマウスデータ(図13参照)を生成する(ステップSb13)。このようなホイール移動量を含むマウスデータを受け取ったAPL111では、当該マウスデータに示される座標を含む表示画像領域に表示される画像がスクロール可能な画像であるときには、その表示画像領域に表示される画像がホイール移動量に応じた分だけスクロールされる。このようにすることでユーザはタッチペンマウス5を移動させる量を調整するといった容易な作業で画像のスクロール量を指示することができる。すなわち、本実施形態において、ホイールマウスデータは表示画像をスクロールさせるための制御情報であり、ドライバ108およびAPL111は、検出データに示される座標等に基づいて表示画像をスクロールさせるスクロール手段を構成している。
【0082】
なお、調整係数Hはあらかじめ実験等により求められた値であり、タッチペンマウス5の移動量と、それに応じたホイール移動量によって定まる表示画像のスクロール量が違和感のないようなものとなる値である。
【0083】
Aスイッチが「ホイール」にも設定されていない場合には、Aスイッチが「無効」に設定されているか否かを判別する(ステップSb14)。Aスイッチが「無効」に設定されている場合には、ドライバ108によって左ボタンオンマウスデータが生成され(ステップSb15)、Aスイッチオン機能制御処理が終了する。
【0084】
以上のように接触ステータスがオンである、つまりタッチペンマウス5の先端部分がディスプレイ画面113に接触している場合にAスイッチがオンされると(図10のステップSa11の判別「Yes」)、Aスイッチにあらかじめ割り当てられた機能に応じたマウスデータを生成する処理が行われる。
【0085】
図10に戻り、ステップSa11の判別が「No」の場合、Bスイッチがオンであるか否かが判別される(ステップSa13)。ここで、Bスイッチがオンである場合には、Bスイッチオン機能制御が行われる(ステップSa14)。Bスイッチオン機能制御は、Bスイッチにあらかじめ割り当てられた機能に応じたマウスデータを生成する処理であり、上述したAスイッチオン機能制御処理と同様の処理(図11参照)であるため、その説明を割愛する。
【0086】
一方、ステップSa13の判別においてBスイッチがオフである場合にはAスイッチ、Bスイッチともにオフであるため、Aスイッチ、Bスイッチに割り当てられた機能に応じたマウスデータは生成されず、左ボタンオンマウスデータが生成される(ステップSa15)。
【0087】
以上のようにタッチペンマウス5の先端部分であるスイッチ51がディスプレイ画面113に接触している状態において、AスイッチやBスイッチがオンされると、各々のスイッチにあらかじめ割り当てられた機能に応じたマウスデータが生成されることになる一方で、ステップSa9の判別においてスイッチ51がオフの場合(判別「No」)、接触ステータスがオフであるか否かが判別される(ステップSa16)。そして、接触ステータスがオフである場合には今回受信した検出データに対する処理は終了し、新たな検出データの待ち受け状態に移行する(ステップSa2)。一方、接触ステータスがオンである場合には、接触ステータスをオフに設定し(ステップSa17)、Aスイッチがオンであるか否かが判別される(ステップSa18)。ここで、Aスイッチがオンである場合には、ドライバ108によってAスイッチオフ機能制御が行われる(ステップSa19)。
【0088】
Aスイッチオフ機能制御は、以下のような理由によって行われる。すなわち、接触ステータスがオンからオフに切り替わった際、つまりタッチペンマウス5の先端部分がディスプレイ画面113から離れる直前にAスイッチがオンであるとすると、その時点まではAスイッチオンに対応したマウスデータ(右ボタンオンマウスデータや中ボタンオンマウスデータなど)が生成されている。しかしながら、タッチペンマウス検知モードは、タッチペンマウス5のスイッチ51がディスプレイ画面113から離れた場合には、各スイッチの操作を無効とするモードであるため、接触ステータスがオフに切り替わった後も右ボタンオンマウスデータに対応した処理がAPL111等によって継続して行われることを禁止する必要がある。そこで、接触ステータスがオンからオフに切り替わった場合には、Aスイッチがオンである場合にも、Aスイッチオンに対応した右ボタンオンマウスデータ等に対応した処理が継続されないようAスイッチオフ機能制御を行うのである。
【0089】
図12に示すように、Aスイッチオフ機能制御では、まずAスイッチに割り当てられた機能が「右ボタン」であるか否かを判別する(ステップSc1)。ここで、Aスイッチが「右ボタン」に設定されている場合には、ドライバ108は右ボタンオフマウスデータ(図13参照)を生成し(ステップSc2)、スイッチオン機能制御処理を終了する。一方、Aスイッチが「右ボタン」に設定されていない場合には、「中ボタン」に設定されているか否かを判別する(ステップSc3)。そして、Aスイッチが「中ボタン」に設定されている場合には、ドライバ108は中ボタンオフマウスデータ(図13参照)を生成し(ステップSc4)、当該スイッチオン機能制御処理を終了する。
【0090】
さらに、Aスイッチが「中ボタン」に設定されていない場合には、「ダブルクリック」に設定されているか否かを判別する(ステップSc5)。Aスイッチが「ダブルクリック」に設定されている場合には、図11のステップSb9で左ボタンオフマウスデータが生成されており、左ボタンオンの状態はすでにオフされているので新たにオフにする必要がないため、ドライバ108は何ら処理を行わず当該Aスイッチオフ機能制御処理を終了する。
【0091】
Aスイッチが「ダブルクリック」に設定されていない場合には、Aスイッチが「ホイール」に設定されているか否かを判別する(ステップSc6)。Aスイッチが「ホイール」に設定されている場合には、今回受信した検出データに示される座標と、前回受信した検出データに示される座標とから、通常のホイールマウスのホイールの操作量と同様の意義、つまり表示画像のスクロール量を表すホイール移動量を設定する(ステップSc7)。ホイール移動量の決定手法は、スイッチオン機能制御と同様に前回座標と今回座標との距離に基づいて求められるものであるため、その具体的手法についての説明は割愛する。
【0092】
そして、ドライバ108は、求めたホイール移動量を含むマウスデータ(図13参照)を生成する(ステップSc8)。
【0093】
Aスイッチが「ホイール」にも設定されていない場合には、Aスイッチが「無効」に設定されているか否かを判別する(ステップSc9)。Aスイッチが「無効」に設定されている場合には、ドライバ108によって左ボタンオフマウスデータが生成され(ステップSc10)、Aスイッチオフ機能制御処理が終了する。
【0094】
以上のように接触ステータスがオンからオフに切り替わった時点でAスイッチがオンである場合には、Aスイッチオフ機能制御が行われ、Aスイッチオンに対応した右ボタンオンマウスデータ等がその後も継続して生成されるといったことが禁止されるようになっている。
【0095】
図10に戻り、ステップSa18の判別が「No」の場合、Bスイッチがオンであるか否かが判別される(ステップSa20)。ここで、Bスイッチがオンである場合には、Bスイッチオフ機能制御が行われる(ステップSa21)。Bスイッチオフ機能制御は、上述したAスイッチオフ機能制御と同様の処理であり(図12参照)、かかる処理を行うことで接触ステータスがオンからオフに切り替わった時点でBスイッチがオンである場合にも、Bスイッチオンに対応した右ボタンオンマウスデータ等に対応する処理がその後も継続して行われるといったことが禁止されるようになっている。
【0096】
一方、Bスイッチがオフである場合には、AスイッチおよびBスイッチともにオフであるためその直前まで左ボタンオンマウスデータが生成されていることになる(ステップSa15)。したがって、かかる場合には、左ボタンオフマウスデータが生成され(ステップSa22)、接触ステータスがオフに切り替わった後に継続して左ボタンオンマウスデータに対応する処理が継続することを抑止している。
【0097】
以上が座標検知装置103から供給される検出データ、つまりタッチペンマウス5の操作内容やユーザの指の動き等に応じたマウスデータを生成するドライバ108の処理動作の詳細である。
【0098】
以上説明したように本実施形態に係るディスプレイシステム100では、タッチペンマウス5の先端部分に設けられたスイッチ51がディスプレイ画面113に接触していなければ動作しないモードであって、タッチペンマウス5のスイッチ52、53のオン/オフ状態をマウスデータ生成に反映させることができるタッチペンマウス検知モード(接触モード)と、タッチペンマウス5を用いることなく指などの任意の物体がディスプレイ画面113に接触しない状態であってもその近傍の座標入力面112に存在すれば、その座標位置等に応じたマウスデータを生成させることができる指検知モード(非接触モード)とで動作することができる。したがって、ユーザは状況に応じて都合のよい動作モードを選択して当該ディスプレイシステム100を利用することができる。
【0099】
また、このようにタッチペンマウス検知モードと指検知モードを併用するシステムにおいて、システムがタッチペンマウス検知モードで動作しているにもかかわらず、ユーザが指検知モードで動作していると誤信している場合、ユーザが指でディスプレイ画面113を指示したとき、その指示はシステム側で認識されず、指示に応じた処理がなされないのでユーザはシステムが故障してしまったと勘違いしてしまうおそれがある。本実施形態によれば以下のような理由から、このような場合にもユーザの勘違いによって故障コールをする等無駄な作業等を招来させることを抑制することができる。すなわち、上記のようなケースにおいては、ユーザは故障コール等をする前に電源を一旦オフして再投入するといった操作を行うのが一般的である。このような操作が行われるのが一般的であることを考慮した本実施形態におけるディスプレイシステム100では、上述したように電源投入時には必ず指検知モードに設定されるようになっているので、電源が再投入された場合にはその後のユーザの指による指示はシステム側によって認識され、その指示に応じた処理等が実行されてユーザの勘違いが解消される。したがって、故障コール等の無駄な作業等の招来を抑制することができるのである。
【0100】
また、本実施形態では、タッチペンマウス5のAスイッチまたはBスイッチのいずれかにホイールマウスの機能を割り当てておくことで、割り当てたAスイッチ(またはBスイッチ)をオンにしてタッチペンマウス5の先端部分であるスイッチ51をディスプレイ画面113に接触させて移動させることにより、その接触点の表示画像をその移動量に応じた分だけスクロールさせることができる。したがって、スクロールバーを指やタッチペンマウスで指示して移動させるという煩雑な操作を行うことなく、容易な操作で表示画像をスクロールさせることができる。例えば、本実施形態に係るディスプレイシステム100をプレゼンテーションに利用する場合、ユーザは容易な操作で画像をスクロールさせることができるので、円滑なプレゼンテーションの妨げとなってしまうといったことを抑制できる。
【0101】
なお、本発明は上記実施形態に限定されるものではなく、例えば以下に例示するような変形も可能である。
【0102】
上述した実施形態においてドライバ108が実行していたスイッチオン機能制御(図10のステップSa12、ステップSa14、図11参照)に代えて、図14に示すようなスイッチオン機能制御を行うようにしてもよい。
【0103】
同図に示すように、このスイッチオン機能制御では、AスイッチまたはBスイッチの機能として「ホイール」が割り当てられている場合の処理が図11に示す処理と相違しており(ステップSd10〜ステップSd16)、他の処理(ステップSd1〜ステップSd9、ステップSd17〜ステップSd18)は図11に示す処理と同様であるため、以下ステップSd10〜ステップSd16までの処理について説明する。
【0104】
まず、A(またはB)スイッチが「ホイール」に設定されているか否かを判別する(ステップSd10)。A(またはB)スイッチが「ホイール」に設定されている場合には、受信した現在処理対象となっている検出データに示される座標データ(x標、y座標)を保存する(ステップSd11)。そして、今回受信した検出データに示される座標と、前回受信した検出データに示される座標とから、図11に示すステップSb12と同様にしてホイール移動量を設定する(ステップSd12)。
【0105】
次に、ドライバ108は、切り替え直後座標データが保存されているか否かを判別する(ステップSd13)。切り替え直後座標データとは、スイッチ51がオン、かつ「ホイール機能」が割り当てられたA(またはB)スイッチがオンの状態に切り替わった直後にドライバ108に供給された検出データに示される座標データである。ここで、切り替え直後座標データが保存されていない場合には(判別「No」)、今回受信した検出データに示される座標データを含む通常のホイールマウスデータ(図13参照)を生成するとともに(ステップSd14)、今回受信した検出データに示される座標データを切り替え直後座標データとして保存する(ステップSd15)。なお、保存された切り替え直後座標データは、スイッチ51がオン、かつ「ホイール」機能が割り当てられたA(またはBスイッチ)がオンの状態でない検出データがドライバ108に供給された時点で削除されるようになっている。
【0106】
一方、切り替え直後座標データが保存されている場合には、上記ステップSd12で導出したホイール移動量と、今回の検出データに示される座標ではなく保存されている切り替え直後座標データを座標データとして含む特別なホイールマウスデータ(図13参照)を生成する(ステップSd16)。
【0107】
以上のようなスイッチオン機能制御をドライバ108が実行することで、ユーザがタッチペンマウス5を移動させた場合にも、スイッチ51がオン、かつ「ホイール機能」が割り当てられたA(またはB)スイッチがオンの状態に切り替わった時、つまりユーザがホイールマウス機能を利用しようとしてタッチペンマウス5を操作した時にタッチペンマウス5が指示していた座標を含むホイールマウスデータが継続して生成され、これらのホイールマウスデータに基づいて画像スクロールが実行される。
【0108】
このようなホイールマウスデータを生成することで、例えば図15に示すようにディスプレイ画面113に複数の表示画像領域GA1、GA2、GA3が表示されており、各々の表示画像領域に表示される画像のスクロールが可能である場合にいずれかの表示画像領域の画像のスクロールを指示する際に以下のような効果が得られる。すなわち、このディスプレイシステム100では、タッチペンマウス5の移動させることで、その移動量に応じて画像をスクロールさせるようにしている。したがって、スクロールさせるためにはタッチペンマウス5を移動させる必要があり、表示画像領域GA1に表示される画像をスクロールさせるためにタッチペンマウス5を移動させていたところ、タッチペンマウス5の指示位置が表示画像領域GA1以外の他の表示画像領域GA2、GA3に移動してしまうこともある。このような場合に、生成されるホイールマウスデータが移動する位置毎の座標データを含む場合、ユーザは表示画像領域GA1に表示される画像をスクロールさせたいにもかかわらず、移動した位置を含む他の表示画像領域GA2、GA3に表示される画像のスクロールが実行されてしまうという不都合が生じる。これに対し、上記のようなスイッチオン機能制御を行うことで、タッチペンマウス5の指示位置が移動させようとしていた表示画像領域外に移動した場合であっても、ユーザがホイールマウス機能を利用しようとしてタッチペンマウス5を操作した時に最初にタッチペンマウス5が指示していた座標を含む表示画像領域の画像をスクロールさせることができ、上記のような不都合を解消することができる。
【0109】
また、上述した実施形態では、ホスト装置4がプログラム(ドライバソフト)にしたがって動作することにより、上述したマウスデータ生成のための処理(図10、図11、図12、図14参照など)が実行されるようになっていたが、コンピュータに上記処理を実行させるためのプログラムをインターネット等の通信回線を介してユーザに提供するようにしてもよいし、当該プログラムをCD−ROM(Compact Disc)などのコンピュータ読み取り可能な記録媒体に記録してユーザに提供するようにしてもよい。
【0110】
【発明の効果】
以上説明したように、請求項1にかかる発明によれば、光遮断方式と専用ペンを用いる方式とを併用した装置であっても、ユーザに故障が発生したものとの勘違い等を起こさせることを抑制することができるという効果を奏する。
【0111】
また、請求項2にかかる発明によれば、ポインティングデバイスに設けられたオン/オフスイッチをオンにしてポインティングデバイスを移動させるといった容易な操作で表示画面に表示される画像をスクロールさせることができるという効果を奏する。
【0112】
また、請求項3にかかる発明によれば、表示画面に複数の表示領域があり、ある表示領域に表示された画像をスクロールさせるためにポインティングデバイスを移動させた場合において、ポインティングデバイスが当該ある表示領域外の位置に移動した場合であっても、当該ある表示領域の画像のスクロールが続行される。したがって、ポインティングデバイスが他の表示領域に移動した場合に当該ある表示領域ではなく、他の表示領域の画像がスクロールされてしまうことを抑止できるという効果を奏する。
【0113】
また、請求項4にかかる発明によれば、ポインティングデバイスの移動量に応じて画像のスクロール量が決定されるので、ユーザはポインティングデバイスを移動させる量を調整するといった容易な作業で画像のスクロール量を指示することができるという効果を奏する。
【0114】
また、請求項5にかかる発明によれば、ポインティングデバイスに設けられたオン/オフスイッチをオンにしてポインティングデバイスを移動させるといった容易な操作で表示画面に表示される画像をスクロールさせることができるという効果を奏する。
【0115】
また、請求項6にかかる発明によれば、表示画面に複数の表示領域があり、ある表示領域に表示された画像をスクロールさせるためにポインティングデバイスを移動させた場合において、ポインティングデバイスが当該ある表示領域外の位置に移動した場合であっても、当該ある表示領域の画像のスクロールが続行される。したがって、ポインティングデバイスが他の表示領域に移動した場合に当該ある表示領域ではなく、他の表示領域の画像がスクロールされてしまうことを抑止できるという効果を奏する。
【0116】
また、請求項7にかかる発明によれば、ポインティングデバイスの移動量に応じて画像のスクロール量が決定されるので、ユーザはポインティングデバイスを移動させる量を調整するといった容易な作業で画像のスクロール量を指示することができるという効果を奏する。
【0117】
また、請求項8にかかる発明によれば、光遮断方式と専用ペンを用いる方式とを併用した装置であっても、ユーザに故障が発生したものとの勘違い等を起こさせることを抑制することができるという効果を奏する。
【0118】
また、請求項9にかかる発明によれば、ポインティングデバイスに設けられたオン/オフスイッチをオンにしてポインティングデバイスを移動させるといった容易な操作で表示画面に表示される画像をスクロールさせることができるという効果を奏する。
【0119】
また、請求項10にかかる発明によれば、表示画面に複数の表示領域があり、ある表示領域に表示された画像をスクロールさせるためにポインティングデバイスを移動させた場合において、ポインティングデバイスが当該ある表示領域外の位置に移動した場合であっても、当該ある表示領域の画像のスクロールが続行される。したがって、ポインティングデバイスが他の表示領域に移動した場合に当該ある表示領域ではなく、他の表示領域の画像がスクロールされてしまうことを抑止できるという効果を奏する。
【0120】
また、請求項11にかかる発明によれば、ポインティングデバイスの移動量に応じて画像のスクロール量が決定されるので、ユーザはポインティングデバイスを移動させる量を調整するといった容易な作業で画像のスクロール量を指示することができるという効果を奏する。
【図面の簡単な説明】
【図1】本発明の実施形態にかかるディスプレイシステムの構成を示す図である。
【図2】前記ディスプレイシステムの構成要素であるタッチペンマウスの構成を示すブロック図である。
【図3】前記ディスプレイシステムの構成要素である座標検知装置によって生成される検出データの形式を説明するための図である。
【図4】前記座標検知装置によって行われる検出データ生成のための処理動作を示すフローチャートである。
【図5】前記ディスプレイシステムの構成要素である座標入力装置による指示点座標検出手法を説明するための図である。
【図6】前記ディスプレイシステムのタッチパネル機能により物体を検出する座標入力面を説明するための図である。
【図7】前記タッチペンマウスに設けられた各スイッチのオン/オフ状態を検出するための手法を説明するための図である。
【図8】前記タッチペンマウスの赤外線発信部から発射される赤外線信号の内容を示すタイミングチャートである。
【図9】前記タッチペンマウスの操作内容と生成されるマウスデータとの対応を選択設定するための表示される画面の一例を示す図である。
【図10】前記座標検知装置から供給される検出データに基づいて、マウスデータを生成する処理手順を示すフローチャートである。
【図11】前記座標検知装置から供給される検出データに基づいて、マウスデータを生成する処理手順を示すフローチャートである。
【図12】前記座標検知装置から供給される検出データに基づいて、マウスデータを生成する処理手順を示すフローチャートである。
【図13】前記座標検知装置から供給される検出データに基づいて生成されるマウスデータの形式を示す図である。
【図14】前記座標検知装置から供給される検出データに基づいて、マウスデータを生成する処理手順の変形例を示すフローチャートである。
【図15】前記ディスプレイシステムのディスプレイ画面の一例を示す図であって、前記座標検知装置から供給される検出データに基づいて、マウスデータを生成する処理の変形例によってもたらされる効果を説明するための図である。
【符号の説明】
1 座標入力装置
2 表示装置
3 座標検知装置
4 ホスト装置
5 タッチペンマウス
51、52、53 スイッチ
54 スイッチ検知部
55 赤外線発信部
58 赤外線検出器
100 ディスプレイシステム
103 座標検知装置
104 中央演算装置
108 ドライバ
112 座標入力面
113 ディスプレイ画面
201 再帰性反射部材
202R 右光学検出器
202L 左光学検出器
APL111 アプリケーション
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a display device that generates information based on a position specified by a user on a display screen, a scroll information generation method, and a program.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, a system having a function of detecting a position on a display screen designated by a user with a finger or a touch pen and generating information such as a command based on the detected designated position, a so-called touch panel function, has been used. In such a system, there is known a system employing a light blocking system as a system for detecting a position on a display screen designated by a user with a finger or the like. In the light blocking method, irradiation light is emitted on a surface separated by a predetermined distance from the display screen, and when the irradiation light is blocked, it is determined that the user has designated one of the display screens, and the designated position is determined. Is detected.
[0003]
As described above, in the light blocking method, when a finger or the like reaches a position at a predetermined distance from the display screen, it is assumed that the display screen has been instructed, and processing such as command generation according to the indicated position is performed. ing. For this reason, even when the finger or the like is not actually touching the display screen, command generation processing or the like may be performed, and in such a case, processing or the like not intended by the user may be performed. There is.
[0004]
In order to suppress such problems and allow the user to perform a desired instruction by touching the display screen with the touch panel function, the pointing position on the display screen is detected using an auxiliary device such as a pen dedicated to the touch panel. There is also known a method that adopts a method of performing the following. In this method, a sensor is provided at the tip of the touch panel dedicated pen, and the sensor detects that the tip of the touch panel dedicated pen has actually touched the display screen. It is possible to suppress the processing from being performed.
[0005]
However, there are cases where the user wants to use the touch panel function using a finger, a normal pencil, or the like, and a method using a touch panel dedicated pen cannot satisfy this demand. For this reason, a system having a touch panel function using both types has been developed (Pioneer Corporation: trade name “CYBERBOARD”). In this system, the user can set which method to operate the touch panel function by switching the switch.
[0006]
Conventionally, a technique of scrolling an image displayed on a display screen in accordance with an operation of a wheel mouse or the like has been used. Among such technologies, there is a technology that attempts to scroll the image by relatively easy operation.In such technology, the image is scrolled in the moving direction by moving the mouse after pressing a specific key on the keyboard (For example, Patent Document 1). In addition, a technology has been proposed in which it is detected whether or not a mouse is separated from a ground surface such as a mouse pad or a desk, and when the mouse is moved in a state where the mouse is separated, an image is scrolled in the moving direction (eg, , Patent Document 2).
[0007]
Further, even in a system having a conventional touch panel function, when a scrollable image is displayed on the display screen, the image can be scrolled.
[0008]
In a conventional system with a touch panel function, an image is scrolled by a user instructing a scroll bar or the like displayed on a display screen with a finger or the like, but as another scroll instruction method, there is a method for touching a touch panel. A method has been proposed in which a dedicated dial is provided with a rotary dial and an image is scrolled according to the dial operation (for example, see Patent Document 3).
[0009]
[Patent Document 1]
JP-A-2000-20211
[Patent Document 2]
JP 2001-142636 A
[Patent Document 3]
JP 2001-142632 A
[0010]
[Problems to be solved by the invention]
However, in a system using both the light blocking method and the method using the dedicated pen as described above, when operating in the method using the dedicated pen, the user mistakenly thinks that the system is operating in the light blocking method and performs finger operation. When the instruction is given by the user, the instruction is not recognized on the system side, and the processing according to the instruction is not performed. In this case, the user may misunderstand that the system has failed, which may lead to useless work or the like such as making a failure call.
[0011]
Further, as described above, in the conventional system with a touch panel function, it is necessary for the user to perform scrolling of the image by instructing a scroll bar or the like displayed on the display screen with a finger or the like. In such a case, such an instruction operation is complicated and difficult. In addition, even when a rotary pen is provided on a dedicated pen for touching the touch panel and a method of scrolling an image according to the dial operation is used, an operation of rotating the dial while pointing to a desired position on the display screen. Is complicated.
[0012]
The present invention has been made in view of the above, and even in a device that uses both a light blocking method and a method using a dedicated pen, it is possible to suppress a user from misunderstanding that a failure has occurred. It is an object of the present invention to obtain a display device and a program capable of performing the following.
[0013]
It is another object of the present invention to provide a display device, a scroll information generation method, and a program that allow a user to easily perform an instruction to scroll an image displayed on a display screen having a so-called touch panel function.
[0014]
[Means for Solving the Problems]
In order to achieve the above object, the invention according to claim 1 is a display device that includes a display screen and generates information based on a position designated by a user on the display screen. A pointing device for detecting whether or not a predetermined portion of the device has contacted the display screen, and an object at a position separated by a predetermined distance from the display screen. When there is, a position detecting means for detecting a position on the display screen indicated by the object, and a position detected by the position detecting means regardless of whether the pointing device has contacted the display screen. In the non-contact mode for generating information, and during the time when it is detected that the predetermined portion of the pointing device has contacted the display screen. An information generating unit that operates in any one of a contact mode that generates information based on the position detected by the position detecting unit, wherein the information generating unit is configured to operate when the device is powered on. And operating in the non-contact mode.
[0015]
According to the first aspect of the present invention, the user gives an instruction in a contact mode in which information is generated based on a position when the user touches the display screen using the pointing device, and in a state in which the display screen is not touched by an object such as a finger. The user can select both the non-contact mode in which the information based on the determined position is generated, and give an instruction for information generation. In a case where both modes can be selected, when the user misunderstands that the device is operating in the non-contact mode even though the device is operating in the contact mode, the user may use the finger to display the display screen. Is instructed on the device side, and the processing corresponding to the instruction is not performed, so that the user may misunderstand that the device has failed. In such a case, it is common for the user to perform an operation of once turning off and on the power before making a failure call or the like. In the present invention in consideration of the fact that such an operation is generally performed, the information generating means operates in the non-contact mode when the power is turned on, so that when the power is turned on again, The subsequent instruction by the user's finger is recognized by the apparatus side, and processing corresponding to the instruction is executed, thereby eliminating the user's misunderstanding. Therefore, it is possible to suppress the occurrence of useless work such as a failure call.
[0016]
The invention according to claim 2 is a display device that includes a display screen and generates information based on a position indicated by a user on the display screen, wherein the user specifies any position on the display screen. A pointing device having an on / off switch, position detecting means for detecting a position on the display screen indicated by the pointing device, and detecting by the position detecting means while the switch is on. Scrolling means for scrolling an image displayed on the display screen based on the position indicated by the pointing device.
[0017]
According to the invention according to claim 2, the image displayed on the display screen can be scrolled by an easy operation such as turning on the on / off switch provided on the pointing device and moving the pointing device.
[0018]
According to a third aspect of the invention, in the configuration of the second aspect, the scroll means is displayed on the display screen based on a position detected by the position detection means while the switch is on. When scrolling an image of a certain display area, scrolling of the image of the certain display area is continued even when the position detected by the position detection means is outside the certain display area. I do.
[0019]
According to the invention according to claim 3, when the display screen has a plurality of display areas, and the pointing device is moved to scroll an image displayed in a certain display area, the pointing device moves outside the certain display area. , The scrolling of the image in the certain display area is continued. Therefore, when the pointing device moves to another display area, it is possible to suppress scrolling of an image of another display area instead of the certain display area.
[0020]
According to a fourth aspect of the present invention, in the configuration according to the second or third aspect, the scroll means may determine a position indicated by the pointing device detected by the position detection means while the switch is on. The scroll amount of the image is determined according to the moved amount.
[0021]
According to the fourth aspect of the present invention, the scroll amount of the image is determined in accordance with the moving amount of the pointing device. Therefore, the user instructs the scroll amount of the image by an easy operation such as adjusting the moving amount of the pointing device. can do.
[0022]
The invention according to claim 5 is a method for generating control information for scrolling an image displayed on the display screen in a display device having a display screen, wherein the pointing device having an on / off switch is provided. A position detecting step of detecting a position on the display screen to be pointed, and scrolling an image displayed on the display screen based on a position indicated by the pointing device detected in the position detecting step while the switch is on. A scroll information generating step of generating control information for causing the control information to be generated.
[0023]
According to the invention according to claim 5, the image displayed on the display screen can be scrolled by an easy operation such as turning on the on / off switch provided on the pointing device and moving the pointing device.
[0024]
According to a sixth aspect of the present invention, in the configuration of the fifth aspect of the invention, in the scroll information generation step, the display screen is displayed on the display screen based on a position detected in the position detection step while the switch is on. When scrolling an image of a certain display area to be displayed, even when the position detected in the position detection step becomes a position outside the certain display area, the scrolling of the image of the certain display area is performed. It is characterized by generating control information.
[0025]
According to the invention according to claim 6, when the display screen has a plurality of display areas, and the pointing device is moved to scroll an image displayed in a certain display area, the pointing device moves outside the certain display area. , The scrolling of the image in the certain display area is continued. Therefore, when the pointing device moves to another display area, it is possible to suppress scrolling of an image of another display area instead of the certain display area.
[0026]
According to a seventh aspect of the present invention, in the configuration of the fifth or sixth aspect, in the scroll information generating step, the pointing device detected by the position detecting unit while the switch is on is instructed by the pointing device. The scroll amount of the image is determined in accordance with the amount by which the position to be moved is moved, and control information including the scroll amount is generated.
[0027]
According to the seventh aspect of the present invention, the scroll amount of the image is determined according to the moving amount of the pointing device, so that the user can instruct the scroll amount of the image by an easy operation such as adjusting the moving amount of the pointing device. can do.
[0028]
Further, according to the invention according to claim 8, information indicating whether a dedicated pointing device has touched any position on the display screen and an object at a position separated by a predetermined distance from the display screen A computer that is supplied with position information indicating a position on the display screen indicated by the object, and generates information based on the supplied position information regardless of whether the pointing device has contacted the display screen. A non-contact mode, and a selected mode of any one of a contact mode for generating information based on positional information supplied while the predetermined portion of the pointing device is detected to be in contact with the display screen. Operating means, characterized in that it functions as information generating means operating in the non-contact mode when the computer is powered on. To.
[0029]
According to the invention according to claim 8, the user gives an instruction in a contact mode in which information is generated based on a position when the user touches the display screen using the pointing device, and in a state in which the user does not touch the display screen with an object such as a finger. The user can select both the non-contact mode in which the information based on the determined position is generated, and give an instruction for information generation. In a case where both modes can be selected, when the user misunderstands that the device is operating in the non-contact mode even though the device is operating in the contact mode, the user may use the finger to display the display screen. Is instructed on the device side, and the processing corresponding to the instruction is not performed, so that the user may misunderstand that the device has failed. In such a case, it is common for the user to perform an operation of once turning off and on the power before making a failure call or the like. In the present invention in consideration of the fact that such an operation is generally performed, since the information generating means operates in the non-contact mode when the power is turned on, when the power is turned on again, The subsequent instruction by the user's finger is recognized by the apparatus side, and processing corresponding to the instruction is executed, thereby eliminating the user's misunderstanding. Therefore, it is possible to suppress the occurrence of useless work such as a failure call.
[0030]
According to a ninth aspect of the invention, there is provided a computer to which position information on a display screen indicated by a pointing device having an on / off switch and switch information indicating an on / off state of the on / off switch are supplied. And functioning as information generating means for generating control information for scrolling an image displayed on the display screen based on the position information while the switch state indicated by the switch information is on. .
[0031]
According to the ninth aspect of the present invention, the image displayed on the display screen can be scrolled by an easy operation such as turning on the on / off switch provided on the pointing device and moving the pointing device.
[0032]
According to a tenth aspect of the present invention, in the configuration according to the ninth aspect, the information generation unit displays the information on the display screen based on the position information while the switch state indicated by the switch information is on. While scrolling an image of a certain display area, the image of the certain display area is also displayed when the position indicated by the position information supplied from the display device becomes a position outside the certain display area. It is characterized in that control information for scrolling is generated.
[0033]
According to the invention according to claim 10, when the display screen has a plurality of display areas, and the pointing device is moved to scroll an image displayed in a certain display area, the pointing device moves outside the certain display area. , The scrolling of the image in the certain display area is continued. Therefore, when the pointing device moves to another display area, it is possible to suppress scrolling of an image of another display area instead of the certain display area.
[0034]
According to an eleventh aspect of the present invention, in the configuration according to the ninth or tenth aspect, the information generating means moves the position indicated by the position information while the switch state indicated by the switch information is on. The scroll amount of the image is determined according to the amount of the scroll, and control information including the scroll amount is generated.
[0035]
According to the eleventh aspect of the present invention, the scroll amount of the image is determined according to the moving amount of the pointing device. Therefore, the user instructs the scroll amount of the image by an easy operation such as adjusting the moving amount of the pointing device. can do.
[0036]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, preferred embodiments of a display device, a scroll information generation method, and a program according to the present invention will be described in detail with reference to the accompanying drawings.
[0037]
FIG. 1 is a diagram showing a configuration of a display system (display device) 100 with a touch panel function according to an embodiment of the present invention. As shown in FIG. 1, the display system with a touch panel 100 includes a coordinate input device 1 of a touch panel type, a coordinate detection device 3 for detecting coordinates and the like input to the coordinate input device 1, and coordinates detected by the coordinate detection device 3. A host device 4 (in this embodiment, a PC (Personal Computer) is used) for controlling image data based on the image data (R, G, B) controlled by the host device 4 on a liquid crystal screen. And a display device 113 such as a PDP (Plasma Display Panel), which is displayed on a display screen 113, and a dedicated touch pen mouse (pointing device) 5 for the user to point to the coordinate input device 1.
[0038]
In this specification, a configuration in which the coordinate input device 1 and the coordinate detection device 3 are combined is also referred to as a touch panel. In the display system 100, the display screen 113 is provided so as to substantially overlap the coordinate input surface 112 of the coordinate input device 1. The coordinate input surface is an area where the coordinate detection device 3 can detect coordinates. Although the details will be described later, the display system 100 according to the present embodiment does not touch the display screen 113 directly, but instead touches the coordinate input surface 112 which is a surface at a predetermined distance from the display screen 113. When an object such as the touch pen and the mouse 5 is present, the position on the display screen 113 indicated by the object can be detected.
[0039]
The coordinate input device 1 includes an optical detector described below, optically detects that an object is present on the coordinate input surface 112, and outputs data detected by the optical detector to the coordinate detection device 3.
[0040]
The coordinate detection device 3 calculates the coordinates (x, y) of the designated point t on the coordinate input surface 112 indicated by the detected object based on the data supplied from the coordinate input device 1. The calculated coordinates are represented by the number of pixels (for example, x: 1024, y: 768) of the display screen 113, and are output to the host device 4 periodically at a time such as 10 ms or 20 ms. The calculation of the coordinates of the designated point t by the coordinate detection device 3 will be described later in detail.
[0041]
The coordinate detecting device 3 is a central device that controls the left optical detector I / F (Inter Face) 101, the right optical detector I / F 102, and the coordinate detecting device 3 as a whole for inputting data detected by an optical detector described later. A central processing unit 104, a ROM 105 storing programs used by the central processing unit 104, a RAM 106 for temporarily storing work data of the central processing unit 104, a timer for periodically measuring time and inputting it to the central processing unit 104 (TIMER) 107 and infrared detection for receiving an infrared signal including information for detecting whether or not the touch pen mouse 5 is in contact with the display screen 113 and for detecting a state of a switch provided on the touch pen mouse 5 described later. Device I / F 109.
[0042]
The host device 4 is a PC (Personal Computer), and is equipped with a general-purpose OS (Operating System) such as Windows (R), Macintosh (R), or Linux (R). Running under the control of Then, a driver 108 which is a program (driver software) executed under the control of a general-purpose OS, an application APL 111 which operates under the control of a common general-purpose OS, and an image in which image data is temporarily stored And a RAM 115.
[0043]
As shown in FIG. 2, the touch pen mouse 5 is a pen-shaped member, and includes a switch 51 provided on the tip thereof for switching on / off and two on / off switches 52 and 53 provided on the body. Have. When the user uses the touch pen mouse 5, the switch 51 provided on the tip thereof contacts the display screen 113 to turn on the switch 51, and when the tip is separated from the display screen 113, the switch 51 turns off. It has become. Further, the switches 52 and 53 in the present embodiment can be turned on and off by a pressing operation. In this embodiment, the switch 51 is a means for detecting whether or not the tip portion, which is a predetermined portion of the touch pen mouse 5, has contacted the display screen 113 as described above. Any switch that can detect whether or not it is possible may be provided with a contact detection sensor or the like instead of the switch 51.
The touch pen mouse 5 also includes a switch detection unit 54 that detects the on / off state of the switches 51, 52, and 53, and an infrared ray that includes information indicating the on / off state of each switch detected by the switch detection unit 54. And an infrared transmitter 55 for emitting light. An infrared signal emitted by the infrared transmitter 55 is taken into the coordinate detector 3 via the infrared detector I / F 109.
[0044]
Based on the data acquired by the optical detector of the coordinate input device 1 and the infrared signal transmitted from the infrared transmitter 55 of the touch pen mouse 5, the coordinate detecting device 3 determines the coordinate data of the designated point, the presence / absence of the indication detection, and the touch pen. It generates detection data (position information, switch information) indicating the on / off state of each switch of the mouse 5 (detach, touch, start, switch on / off), and supplies it to the host device 4.
[0045]
In the present embodiment, the touch refers to the arrival of an object such as a finger or a touch pen mouse 5 on the coordinate input surface 112 instead of the display screen 113, and the coordinates of the start position are referred to as start coordinates. The detachment of the finger, the touch pen mouse 5 and the like from the coordinate input surface 112 is called detaching, and the position is called detached coordinates. A position pointed by a finger or the like when the finger or the like moves on the coordinate input surface 112 without detaching is referred to as touch coordinates.
[0046]
As shown in FIG. 3, the detection data includes the x-coordinate and the y-coordinate of the designated point, and information on the coordinate event. The coordinate event indicates, by 1 or 0, whether the detected data is start coordinates, touch coordinates, or detach coordinates. When the coordinate detection device 3 detects a start, a detachment, and a touch, 1 is set in a field indicating each touch. The coordinate event includes information indicating the on / off state of the switches 51, 52, and 53 of the touch pen mouse 5, and is "1" when the switch is on and "0" when the switch is off. Is set.
[0047]
Next, a process of generating and transmitting detection data of the above format by the coordinate detection device 3 will be described with reference to FIG. As shown in the figure, when the power is turned on, the coordinate detection device 3 sets the current status flag to non-detection (step S1). The status flag is information indicating whether an object such as a finger or a touch pen mouse 5 is detected on the coordinate input surface 112.
[0048]
Next, the coordinate detecting device 3 determines whether or not an object such as a finger is detected on the coordinate input surface 112 (Step S2). If an object is detected (determination "Yes"), a coordinate event is cleared to generate new detection data (step S3), and a process of calculating the coordinates of the detected object is performed (step S4). The coordinate calculation method here will be described with reference to FIG.
[0049]
As shown in the figure, the coordinate input device 1 has a rectangular coordinate input surface 112 having a vertical length H and a horizontal length W in the figure, and recursiveness provided on three sides of the coordinate input surface. It includes a reflection member 201, and a left optical detector 202L and a right optical detector 202R provided at both ends of one side where the retroreflective member 201 is not provided.
[0050]
Each of the left optical detector 202L and the right optical detector 202R is an integrated unit of a light source (not shown), which is a semiconductor laser, and a light receiving unit (not shown) using, for example, a CCD (Charged Coupled Device). It is. As shown in FIGS. 5 and 6, the light source irradiates the entire area of the coordinate input surface 112 at a predetermined distance d from the display screen 113 with light in a fan shape requiring a light source. When the left optical detector 202L and the right optical detector 202R radiate fan-shaped light, the laser light is radiated to the entire area of the coordinate input surface 112.
[0051]
The light applied to the coordinate input surface 112 is reflected by the retroreflective member 201. The retroreflective member 201 is a member that reflects light at an angle of 180 degrees, and reflects, for example, reflected light P2 shown in the drawing and reflected light P2 passing through an optical axis parallel to the optical axis of the irradiated light P1. I do. If there is no light blocking object on the coordinate input surface 112, the left optical detector 202L and the right optical detector 202R receive all reflected light of the irradiated light. On the other hand, when an object such as a finger or a touch pen / mouse 5 exists on the coordinate input surface 112, light (P3, P4) passing through the designated point t, which is the existing position, is received by the left optical detector 202L and the right optical detector 202R. Not done.
[0052]
The light information detected by the left optical detector 202L and the right optical detector 202R as described above is input to the coordinate detection device 3 as analog data. The coordinate detecting device 3 calculates coordinates based on the data supplied from the coordinate input device 1 in this manner. More specifically, first, the left optical detector 202L and the right optical detector 202R from the optical axis of the light that should have been received at the position where the light from the light receiving unit was not received among the light radiated in a fan shape. The angles (light shielding angles) θL and θR between the straight lines passing through the light receiving units and the straight lines passing through each light receiving unit and the designated point t are obtained. Then, the coordinates (x, y) of the designated point t are calculated as follows using the angles θL and θR.
x = W × tan θR / (tan θL + tan θR)
y = H−W × tan θL × tan θR / (tan θL + tan θR)
[0053]
Referring back to FIG. 3, when the coordinate detecting device 3 calculates the coordinates as described above (step S4), based on the infrared signal supplied from the infrared transmitting unit 55 of the touch pen mouse 5, the switches 51 and 52 of the touch pen mouse 5 are switched. , 53 are detected, and the detected state of each switch is set as a coordinate event.
[0054]
Here, a method of detecting the on / off state of each of the switches 51, 52, 53 will be described with reference to FIG. As shown in the figure, the coordinate input device 1 has an infrared detector 58. The infrared detector 58 receives an infrared signal indicating the on / off state of each switch transmitted from the infrared transmitter 55 (see FIG. 2) of the touch pen mouse 5 and outputs the signal to the coordinate detector 3. The infrared signal output from the infrared detector 58 is taken into the coordinate detecting device 3 via the infrared detector I / F 109 (see FIG. 1). The coordinate detecting device 3 detects the on / off state of each of the switches 51, 52, and 53 of the touch pen mouse 5 based on the infrared signal thus captured.
[0055]
FIG. 8 is a timing chart showing the content of the infrared signal emitted by the infrared transmitter 55 of the touch pen mouse 5. The infrared transmitting unit 55 shown in FIG. 2 acquires the detection result by the switch detecting unit 54 at regular time intervals (6 ms), that is, the on / off states of the switches 51, 52, and 53, and acquires the acquired on / off states. Generate and launch an infrared signal that reflects the More specifically, the infrared transmitter 55 generates an infrared signal having a different waveform according to the on / off state of each switch. In the present embodiment, only the (1) switch 53 (referred to as the A switch) is turned on. Only (2) switch 52 (referred to as B switch) is on, (3) only switch 51 (referred to as contact switch) is on, (4) A switch and B switch are on, (5) contact switch and A switch are In each case of ON, (6) contact switch and B switch, and (7) all switches ON, an infrared signal as shown in FIG. 6 is generated and emitted. That is, following the start signal of 1500 ms, a signal having a waveform corresponding to each switch state is generated. A signal in a section of 500 ms to 1000 ms from the start signal indicates ON / OFF of the A switch. A signal in a section of 1500 ms to 2000 ms from the signal indicates ON / OFF of the B switch, and a signal in a section of 2500 ms to 3000 ms from the start signal indicates ON / OFF of the contact switch. In the coordinate detection device 3 that has received such an infrared signal, the on / off state of each of the switches 51, 52, and 53 can be detected by monitoring the signal in each section.
[0056]
Returning to FIG. 3, the coordinate detecting device 3 sets each switch ON / OFF state as a coordinate event based on the detection result obtained as described above. First, it is determined whether or not each of the A switch, the B switch, and the contact switch is on (steps S5, S7, and S9). If the switch is on, the state of each switch is set to a coordinate event. On ("1") is set, and if it is off, off ("0") is set (steps S6, S8, and S10). When the on / offset of each switch state is completed as described above, the coordinate detecting device 3 determines whether or not the status is being detected (step S11). If the status is not detected, the object is detected in step S2 at this point, so that the status is set to detection (step S12) and the detection data is transmitted to the host device 4 as start coordinate data (step S12). S13). That is, the fact that the status has been changed from non-detection to detection means that an object such as a finger or a touch pen mouse 5 has reached the coordinate input surface 112, and is transmitted as start coordinate data.
[0057]
On the other hand, in the determination of step S11, if the status is being detected (determination "Yes"), the detection is detachment, that is, when the finger or the touch pen mouse 5 is separated from the coordinate input surface 112, and thereafter, It is determined whether or not the object is no longer detected (step S14). Here, if the detection is not detachment, since the object is continuously present on the coordinate input surface 112, the detection data is transmitted as touch coordinate data (step S15). On the other hand, if it is detached, the status is set to non-detection (step S16), and the detection data is transmitted as detached coordinate data (step S17).
[0058]
The detection data generated by the coordinate detection device 3 as described above is supplied to the driver 108 of the host device 104 shown in FIG. 1 via a communication interface such as USB (Universal Serial Bus) or RS232C. The driver 108 of the host device 4 receives detection data from the coordinate detection device 3 via RS232C or USB under the control of a general-purpose OS. Then, the driver 108 generates mouse data based on the received detection data and transfers the mouse data to the APL 111 via the mouse I / F, whereby a process according to the mouse data is executed.
[0059]
In the present embodiment, the user turns on / off the switches 52 and 53 of the touch pen mouse 5 and turns on / off the switch 51, that is, whether the tip of the touch pen mouse 5 is in contact with the display screen 113. The driver 108 can select and set what kind of mouse data is to be generated in accordance with the operation content of the touch pen / mouse 5 according to the setting content. It generates mouse data according to the operation state, the movement of the user's finger, and the like. Details of the mouse data generation processing operation by the driver 108 will be described later.
[0060]
The APL 111 executes a function set in advance in accordance with information on coordinates included in the mouse data received from the mouse I / F, on / off information of buttons, and the like. The functions referred to here include, for example, character drawing, figure drawing, and ruled line drawing in which the trajectory of the drag is drawn with a line of a specific color and thickness.
[0061]
The image data created by the execution of the function of the APL 111 is developed in the image RAM 115 in a format represented by R, G, and B and transmitted to the display device 2. The display device 2 displays an image corresponding to the image data on the display screen 113.
[0062]
Next, the processing operation of the driver (information generation unit) 108 that generates detection data supplied from the coordinate detection device 103, that is, mouse data that is information corresponding to the operation content of the touch pen mouse 5, the movement of the user's finger, and the like. explain.
[0063]
As described above, in this embodiment, the user can select and set what kind of mouse data the driver 108 generates in accordance with the state of each switch of the touch pen mouse 5. The operation of the driver 108 when such selection setting is performed will be described.
[0064]
Upon receiving an instruction from the user to perform selection setting relating to mouse data generation, the driver 108 operates to display the setting screen shown in FIG. 9 on the display screen 113 of the display device 2. As shown in the figure, a check box CB1 for allowing the user to select whether or not to enable the operation with the touch pen mouse 5 is displayed on the setting screen. If the user wants to enable the operation of the touch pen mouse 5 and generate mouse data according to the operation, the user checks this check box CB1. Hereinafter, a mode in which the driver 108 operates so that the state of each switch of the touch pen mouse 5 is reflected in mouse data generation after the check box CB1 is checked is referred to as a touch pen mouse detection mode, and the check box CB1 is not checked. That is, a mode in which the driver 108 operates so that the state of each switch of the touch pen mouse 5 is not reflected in the generation of mouse data is called a finger detection mode.
[0065]
Further, on the setting screen, a display for selecting a function to be given to each of the switches 52 and 53 (see FIG. 2) of the touch pen mouse 5 is displayed. As shown in FIG. 9, a pull-down menu is displayed for each switch, and the operation contents of the mouse such as “right button”, “middle button”, “wheel”, and “double-click” are displayed in the pull-down menu. By selecting any one of these, the user can select the mouse data generated when each switch is turned on. For example, when the “right button” is selected for the A switch and the user performs an operation of turning on the A switch of the touch pen mouse 5, the same mouse data as when the “right button” of the mouse is clicked is displayed. When the user performs an operation of turning on the B switch of the touch pen mouse 5 when the “wheel” is selected for the B switch, the mouse data as a wheel mouse, that is, control information for scrolling the display image is generated. Is generated.
[0066]
When the user makes a setting for the operation content of the touch pen mouse 5 with reference to the above setting screen and clicks an “OK” button displayed on the screen shown in FIG. 9, the driver 108 does not show the setting content. In accordance with the contents stored in the setting table until the setting is changed or the device is turned off, the touch pen mouse 5 included in the detection data supplied from the coordinate detecting device 3 is stored. Generate mouse data according to the operation status.
[0067]
Next, an operation when the driver 108 generates mouse data based on the detection data supplied from the coordinate detection device 3 will be described with reference to FIGS. 10, 11, and 12.
[0068]
First, when the power is supplied to the host device 104, the driver 108 is activated, and the operation mode of the driver 108 is set to the finger detection mode as shown in FIG. 10 (step Sa1). As described above, in the present embodiment, when the power is turned on, the operation mode is set to the finger detection mode, and the driver 108 operates in the finger detection mode unless a setting change instruction is issued by the user (see FIG. 9). It has become. That is, in the present embodiment, the driver 108 generates the mouse data based on the supplied detection data regardless of whether or not the touch pen mouse 5 touches the display screen 113 when the power is turned on. The information generating means is configured to operate in an operation mode.
[0069]
Thereafter, the driver 108 enters a state of waiting for the detection data from the coordinate detection device 3 and determines whether or not the detection data has been received (step Sa2). Here, when the detection data is not received (determination “No”), the standby state is maintained until the detection data is received (step Sa2). On the other hand, when the detection data is received (determination “Yes”), it is determined whether or not the detection mode at that time is the finger detection mode (step Sa3). If the setting has not been changed by the user since the power was turned on, or if the setting has been changed to the finger detection mode again after being set to the touch pen mouse detection mode, the determination is “Yes”, and the received detection data Is determined for the detached coordinates (step Sa4). Whether or not the received detection data is the detached coordinates can be determined based on whether or not “1” is set in the detached coordinates of the coordinate event (see FIG. 3).
[0070]
If the received detection data is not for the detached coordinates (determination “No”), this is a state in which an object such as a finger or a touch pen mouse 5 is pointing to any position on the display screen 113. Driver 108 generates left button on mouse data (step Sa5). Here, the left button-on-mouse data is mouse data for causing the APL 111 or the like to perform the same processing when the left button of a normal mouse is clicked. As shown in FIG. 13, the mouse data includes information such as an x coordinate and a y coordinate of the designated point, a mouse event, and a wheel movement amount. The mouse event indicates, by 1 or 0, whether the right mouse button is turned on / off, the left button is turned on / off, the middle button is turned on / off, and the mouse operates as a wheel mouse.
[0071]
On the other hand, if the received detection data is for the detached coordinates (determination “No” in step Sa4), it means that an object such as a finger has left the coordinate input surface 112, and the driver 108 uses the left button off mouse. Data is generated and output to the mouse I / F (step Sa6). Here, the left button off mouse data is data for causing the APL 111 or the like to perform the same processing as when the left button of the normal mouse is clicked off.
[0072]
The above is the processing operation for generating mouse data when the operation mode of the driver 108 is the finger detection mode. In such a mode, the detection data includes data indicating that the switches 52, 52, and 53 are on. Even in this case (see FIG. 3), its contents are not considered at all for mouse data generation. Therefore, even when the user gives an instruction using the touch pen mouse 5, the same mouse data as when the user gives an instruction on the coordinate input surface 112 with a finger or another object is generated.
[0073]
Next, a case where the user changes the setting (see FIG. 9) and the operation mode is the touch pen mouse detection mode will be described. In this case, in the determination in step Sa3, it is determined that the operation mode is not the finger detection mode, and it is determined whether the received detection data is for the start coordinates (step Sa7).
[0074]
Here, when the detection data is for the start coordinates (determination “Yes”), that is, when the detection data is the initial detection data that an object such as a finger or a touch pen mouse 5 is detected on the coordinate input surface 112, , The contact status is set to off (step Sa8). The contact status is status information indicating whether or not the tip of the touch pen mouse 5 is in contact with the display screen 113. When the status is off, the switch 51 is off and the tip of the touch pen mouse 5 is turned off. This means that the portion is not in contact with the display screen 113. On the other hand, if the detection data is for the detached coordinates or the touched coordinates other than the start coordinates (determination “No” in step Sa7), the process proceeds to step Sa9 without passing through step Sa8.
[0075]
Then, it is determined whether or not the switch 51 is turned on, that is, whether or not the tip of the touch pen mouse 5 has contacted the display screen 113 (step Sa9). Whether or not the switch 51 is on can be determined by referring to a field (see FIG. 3) indicating on / off of each switch included in the detection data. If it is determined that the switch 51 is on, the contact status is set to on (step Sa10), and it is determined whether the switch 53 (A switch) is on (step Sa11). When the switch 53 (A switch) is ON, the A switch ON function control is performed (step Sa12).
[0076]
As shown in FIG. 11, in the A switch on function control, first, it is determined whether or not the function assigned to the A switch is a “right button” (step Sb1). Here, information indicating what function is assigned to the A switch can be obtained by referring to the setting table storing the setting contents selected by the user while referring to the screen shown in FIG. 9 described above. If the user does not make any selection after power-on, the default settings are followed.
[0077]
If the A switch is set to the “right button”, the driver 108 generates right button-on mouse data (see FIG. 13) (step Sb2), and ends the switch-on function control processing. On the other hand, when the A switch is not set to the “right button”, it is determined whether or not the “switch” is set to the “middle button” (step Sb3). If the A switch is set to the “middle button”, the driver 108 generates middle button-on mouse data (see FIG. 13) (step Sb4), and ends the switch-on function control processing.
[0078]
Further, when the A switch is not set to the "middle button", it is determined whether or not the switch is set to "double click" (step Sb5). When the A switch is set to “double click”, the driver 108 generates mouse data in the order of left button on mouse data, left button off mouse data, left button on mouse data, left button off mouse data, and the like. (Step Sb6, Step Sb7, Step Sb8, Step Sb9). Thus, by turning on the A switch, the same command information is supplied to the APL 111 and the like when the left button of the normal mouse is double-clicked.
[0079]
If the A switch is not set to "double click", it is determined whether the A switch is set to "wheel" (step Sb10). If the A switch is set to "wheel", the coordinate data (x coordinate, y coordinate) indicated by the received detection data to be currently processed is stored (step Sb11). Then, based on the coordinates shown in the detection data received this time and the coordinates shown in the detection data received last time (coordinates stored in step Sb10 at the time of the previous processing), the same significance as the operation amount of the wheel of the wheel mouse is obtained. That is, the wheel movement amount indicating the scroll amount of the display image is set (step Sb12). More specifically, the driver 108 obtains a distance N between the coordinates shown in the previously received detection data and the coordinates shown in the currently received detection data to be processed by the following equation.
N = √ ((x1-x2) 2 + (Y1-y2) 2 )
[0080]
Here, x1 and y1 indicate the coordinates indicated in the previously received detection data, and x2 and y2 indicate the coordinates indicated in the currently received detection data.
[0081]
Then, the driver 108 multiplies the distance N by a preset adjustment coefficient H, and sets the multiplication result as a wheel movement amount. The driver 108 generates mouse data (see FIG. 13) including the wheel movement amount thus obtained (step Sb13). In the APL 111 that receives the mouse data including the wheel movement amount, when the image displayed in the display image area including the coordinates indicated by the mouse data is a scrollable image, the image is displayed in the display image area. The image is scrolled by an amount corresponding to the amount of wheel movement. By doing so, the user can instruct the scroll amount of the image by an easy operation such as adjusting the amount by which the touch pen mouse 5 is moved. That is, in the present embodiment, the wheel mouse data is control information for scrolling the display image, and the driver 108 and the APL 111 constitute scroll means for scrolling the display image based on the coordinates and the like indicated in the detection data. I have.
[0082]
Note that the adjustment coefficient H is a value obtained in advance by an experiment or the like, and is a value such that the amount of movement of the touch pen mouse 5 and the amount of scrolling of the display image determined by the amount of movement of the wheel corresponding thereto do not cause a sense of incongruity. .
[0083]
If the A switch is not set to "wheel", it is determined whether the A switch is set to "invalid" (step Sb14). If the A switch is set to “invalid”, the driver 108 generates left button on mouse data (step Sb15), and the A switch on function control processing ends.
[0084]
As described above, when the A switch is turned on when the contact status is on, that is, when the tip of the touch pen mouse 5 is in contact with the display screen 113 (determination “Yes” in step Sa11 in FIG. 10), A A process for generating mouse data according to a function assigned to the switch in advance is performed.
[0085]
Returning to FIG. 10, when the determination in step Sa11 is “No”, it is determined whether or not the B switch is on (step Sa13). Here, when the B switch is on, the B switch on function control is performed (step Sa14). The B-switch-on function control is a process of generating mouse data according to a function assigned to the B-switch in advance, and is the same process as the above-described A-switch-on function control process (see FIG. 11). Omit.
[0086]
On the other hand, when the switch B is off in the determination in step Sa13, since both the switches A and B are off, mouse data corresponding to the functions assigned to the switches A and B is not generated, and the left button is turned on. Mouse data is generated (step Sa15).
[0087]
As described above, when the switch A or the switch B is turned on while the switch 51, which is the tip of the touch pen mouse 5, is in contact with the display screen 113, a mouse corresponding to the function assigned to each switch in advance. On the other hand, if the switch 51 is off in the determination of step Sa9 (determination "No"), it is determined whether the contact status is off (step Sa16). If the contact status is OFF, the processing for the currently received detection data ends, and the process shifts to a state of waiting for new detection data (step Sa2). On the other hand, when the contact status is on, the contact status is set to off (step Sa17), and it is determined whether the A switch is on (step Sa18). If the A switch is on, the driver 108 controls the A switch off function (step Sa19).
[0088]
The A-switch-off function control is performed for the following reason. That is, when the contact status is switched from on to off, that is, when the A switch is on immediately before the tip of the touch pen mouse 5 separates from the display screen 113, the mouse data corresponding to the A switch on up to that point ( Right button on mouse data, middle button on mouse data, etc.). However, the touch pen mouse detection mode is a mode in which the operation of each switch is invalidated when the switch 51 of the touch pen mouse 5 is separated from the display screen 113, so that the right button is turned on even after the contact status is turned off. It is necessary to prohibit the processing corresponding to the mouse data from being continuously performed by the APL 111 or the like. Therefore, when the contact status is switched from on to off, even if the A switch is on, the A switch off function control is performed so that the processing corresponding to the right button on mouse data corresponding to the A switch on is not continued. It does.
[0089]
As shown in FIG. 12, in the A switch off function control, first, it is determined whether or not the function assigned to the A switch is a “right button” (step Sc1). Here, when the A switch is set to the “right button”, the driver 108 generates right button off mouse data (see FIG. 13) (step Sc2), and ends the switch on function control processing. On the other hand, if the A switch is not set to the "right button", it is determined whether or not the "switch" is set to the "middle button" (step Sc3). If the A switch is set to the “middle button”, the driver 108 generates middle button off mouse data (see FIG. 13) (step Sc4), and ends the switch-on function control processing.
[0090]
Further, when the A switch is not set to the "middle button", it is determined whether or not the switch is set to "double click" (step Sc5). When the A switch is set to “double click”, the left button off mouse data is generated in step Sb9 of FIG. 11, and the left button on state is already off, so it is turned off anew. Since there is no need, the driver 108 does not perform any processing and ends the A-switch-off function control processing.
[0091]
If the A switch is not set to "double click", it is determined whether the A switch is set to "wheel" (step Sc6). When the A-switch is set to “wheel”, the coordinates shown in the detection data received this time and the coordinates shown in the previously received detection data are used to calculate the same amount of wheel operation as a normal wheel mouse. The significance, that is, the wheel movement amount indicating the scroll amount of the display image is set (step Sc7). The method of determining the wheel movement amount is obtained based on the distance between the previous coordinate and the current coordinate, as in the case of the switch-on function control, and therefore the description of the specific method is omitted.
[0092]
Then, the driver 108 generates mouse data (see FIG. 13) including the calculated wheel movement amount (step Sc8).
[0093]
If the A switch is not set to "wheel", it is determined whether the A switch is set to "invalid" (step Sc9). If the A switch is set to "invalid", the driver 108 generates left button off mouse data (step Sc10), and the A switch off function control processing ends.
[0094]
If the A switch is on when the contact status switches from on to off as described above, the A switch off function control is performed, and the right button on mouse data and the like corresponding to the A switch on continue thereafter. Is prohibited.
[0095]
Returning to FIG. 10, when the determination in step Sa18 is "No", it is determined whether or not the B switch is on (step Sa20). Here, if the B switch is on, the B switch off function control is performed (step Sa21). The B-switch-off function control is the same process as the above-described A-switch-off function control (see FIG. 12), and when the B switch is on when the contact status is switched from on to off by performing this process. In addition, it is prohibited that the processing corresponding to the right button-on mouse data and the like corresponding to the B switch-on is continuously performed thereafter.
[0096]
On the other hand, when the B switch is off, since both the A switch and the B switch are off, the left button on mouse data has been generated until immediately before that (Step Sa15). Therefore, in such a case, the left button off mouse data is generated (step Sa22), and the processing corresponding to the left button on mouse data is prevented from continuing after the contact status is switched to off.
[0097]
The above is the details of the processing operation of the driver 108 that generates the detection data supplied from the coordinate detection device 103, that is, the mouse data according to the operation content of the touch pen mouse 5 and the movement of the user's finger.
[0098]
As described above, the display system 100 according to the present embodiment is a mode in which the switch 51 provided at the tip portion of the touch pen mouse 5 does not operate unless the switch 51 is in contact with the display screen 113, and the switch 52 of the touch pen mouse 5 And a touch pen mouse detection mode (contact mode) that can reflect the on / off state of the touch pen 53 on mouse data generation, and a state where an arbitrary object such as a finger does not touch the display screen 113 without using the touch pen mouse 5. However, if it exists on the coordinate input surface 112 in the vicinity, it can operate in a finger detection mode (non-contact mode) in which mouse data can be generated according to the coordinate position and the like. Therefore, the user can use the display system 100 by selecting a convenient operation mode according to the situation.
[0099]
Further, in such a system using both the touch pen mouse detection mode and the finger detection mode, it is erroneously believed that the user is operating in the finger detection mode even though the system is operating in the touch pen mouse detection mode. In this case, when the user instructs the display screen 113 with a finger, the instruction is not recognized on the system side, and a process corresponding to the instruction is not performed, so that the user may misunderstand that the system has failed. According to the present embodiment, for the following reasons, even in such a case, it is possible to suppress the occurrence of useless work or the like caused by the user's misunderstanding such as making a fault call. That is, in the above case, it is common for the user to perform an operation of once turning off and on the power before making a failure call or the like. In the display system 100 according to the present embodiment considering that such an operation is generally performed, the finger detection mode is always set when the power is turned on as described above. In the case of reinsertion, the subsequent instruction by the user's finger is recognized by the system side, and a process or the like according to the instruction is executed to eliminate the user's misunderstanding. Therefore, it is possible to suppress the occurrence of useless work such as a failure call.
[0100]
In the present embodiment, by assigning the function of the wheel mouse to either the A switch or the B switch of the touch pen mouse 5, the assigned A switch (or B switch) is turned on and the tip portion of the touch pen mouse 5 is turned on. By moving the switch 51 in contact with the display screen 113, the display image of the contact point can be scrolled by an amount corresponding to the amount of movement. Therefore, the display image can be scrolled by an easy operation without performing the complicated operation of pointing and moving the scroll bar with a finger or a touch pen mouse. For example, when the display system 100 according to the present embodiment is used for a presentation, the user can scroll the image by an easy operation, so that it is possible to suppress a hindrance to a smooth presentation.
[0101]
Note that the present invention is not limited to the above embodiment, and for example, modifications as exemplified below are possible.
[0102]
In place of the switch-on function control performed by the driver 108 in the above-described embodiment (see steps Sa12, Sa14, and FIG. 11 in FIG. 10), switch-on function control as illustrated in FIG. 14 may be performed. Good.
[0103]
As shown in the figure, in this switch-on function control, the processing when "wheel" is assigned as the function of the A switch or the B switch is different from the processing shown in FIG. 11 (steps Sd10 to Sd16). ) And other processes (steps Sd1 to Sd9, steps Sd17 to Sd18) are the same as the processes shown in FIG. 11, and thus the processes from step Sd10 to step Sd16 will be described below.
[0104]
First, it is determined whether or not the A (or B) switch is set to “wheel” (step Sd10). If the A (or B) switch is set to "wheel", the coordinate data (x coordinate, y coordinate) indicated by the received detection data to be currently processed is stored (step Sd11). Then, based on the coordinates shown in the detection data received this time and the coordinates shown in the detection data received last time, the amount of wheel movement is set in the same manner as in step Sb12 shown in FIG. 11 (step Sd12).
[0105]
Next, the driver 108 determines whether or not the coordinate data immediately after switching is stored (step Sd13). The coordinate data immediately after switching is the coordinate data indicated in the detection data supplied to the driver 108 immediately after the switch 51 is turned on and the A (or B) switch to which the “wheel function” is assigned is switched on. is there. Here, if the coordinate data immediately after the switching is not stored (determination “No”), normal wheel mouse data (see FIG. 13) including the coordinate data indicated by the detection data received this time is generated (see FIG. 13). Sd14) The coordinate data indicated in the detection data received this time is stored as coordinate data immediately after switching (step Sd15). Note that the stored coordinate data immediately after switching is deleted when the detection data is supplied to the driver 108 when the switch 51 is on and the A (or B switch) to which the “wheel” function is assigned is not on. It has become.
[0106]
On the other hand, when the coordinate data immediately after the switching is stored, the wheel movement amount derived in step Sd12 and the coordinate data including the stored coordinate data immediately after the switching instead of the coordinates shown in the current detection data are used. Then, a new wheel mouse data (see FIG. 13) is generated (step Sd16).
[0107]
When the driver 108 executes the switch-on function control as described above, even when the user moves the touch pen mouse 5, the switch 51 is turned on and the A (or B) switch to which the “wheel function” is assigned. Is turned on, that is, wheel mouse data including coordinates indicated by the touch pen mouse 5 when the user operates the touch pen mouse 5 in order to use the wheel mouse function is continuously generated, and these wheels are generated. Image scrolling is performed based on the mouse data.
[0108]
By generating such wheel mouse data, for example, a plurality of display image areas GA1, GA2, GA3 are displayed on the display screen 113 as shown in FIG. 15, and the image of each image displayed in each display image area is displayed. When scrolling is possible, the following effects are obtained when instructing scrolling of an image in any of the display image areas. That is, in the display system 100, moving the touch pen mouse 5 causes the image to be scrolled according to the amount of movement. Therefore, in order to scroll, it is necessary to move the touch pen mouse 5, and when the touch pen mouse 5 is moved to scroll the image displayed in the display image area GA1, the pointing position of the touch pen mouse 5 is changed to the displayed image. It may move to another display image area GA2, GA3 other than the area GA1. In such a case, if the generated wheel mouse data includes the coordinate data for each position to be moved, the user may want to scroll the image displayed in the display image area GA1, but may include the moved position. Of the image displayed on the display image areas GA2 and GA3. On the other hand, by performing the switch-on function control as described above, even when the designated position of the touch pen mouse 5 moves out of the display image area to be moved, the user will use the wheel mouse function. As a result, when the touch pen mouse 5 is operated, the image of the display image area including the coordinates pointed by the touch pen mouse 5 first can be scrolled, and the above-described inconvenience can be solved.
[0109]
In the above-described embodiment, the processing for generating the mouse data (see FIGS. 10, 11, 12, and 14) is executed by the host device 4 operating according to the program (driver software). However, a program for causing a computer to execute the above processing may be provided to a user via a communication line such as the Internet, or the program may be provided on a CD-ROM (Compact Disc) or the like. May be recorded on a computer-readable recording medium and provided to the user.
[0110]
【The invention's effect】
As described above, according to the first aspect of the present invention, it is possible to cause a user to misunderstand that a failure has occurred even in a device using both a light blocking method and a method using a dedicated pen. Can be suppressed.
[0111]
According to the second aspect of the present invention, it is possible to scroll the image displayed on the display screen by an easy operation such as turning on the on / off switch provided on the pointing device and moving the pointing device. It works.
[0112]
According to the third aspect of the present invention, when the display screen has a plurality of display areas and the pointing device is moved to scroll an image displayed in a certain display area, the pointing device is moved to the certain display area. Even when the image moves to a position outside the area, scrolling of the image in the certain display area is continued. Therefore, when the pointing device moves to another display area, it is possible to prevent an image in another display area from being scrolled, not in a certain display area.
[0113]
According to the fourth aspect of the present invention, the scroll amount of the image is determined in accordance with the moving amount of the pointing device, so that the user can easily scroll the image by adjusting the moving amount of the pointing device. Is provided.
[0114]
According to the fifth aspect of the present invention, it is possible to scroll the image displayed on the display screen by an easy operation such as turning on the on / off switch provided on the pointing device and moving the pointing device. It works.
[0115]
Further, according to the invention according to claim 6, when the display screen has a plurality of display areas, and the pointing device is moved to scroll an image displayed in a certain display area, the pointing device is moved to the certain display area. Even when the image moves to a position outside the area, scrolling of the image in the certain display area is continued. Therefore, when the pointing device moves to another display area, it is possible to prevent an image in another display area from being scrolled, not in a certain display area.
[0116]
According to the seventh aspect of the present invention, the scroll amount of the image is determined in accordance with the moving amount of the pointing device, so that the user can easily adjust the moving amount of the pointing device by adjusting the moving amount of the pointing device. Is provided.
[0117]
In addition, according to the invention according to claim 8, even if the apparatus uses both the light blocking method and the method using the dedicated pen, it is possible to prevent the user from misunderstanding that a failure has occurred. This has the effect that it can be performed.
[0118]
According to the ninth aspect of the present invention, it is possible to scroll the image displayed on the display screen by an easy operation such as turning on the on / off switch provided on the pointing device to move the pointing device. It works.
[0119]
According to the tenth aspect of the present invention, when the display screen has a plurality of display areas and the pointing device is moved to scroll an image displayed in a certain display area, the pointing device is moved to the certain display area. Even when the display area moves to a position outside the area, scrolling of the image in the certain display area is continued. Therefore, when the pointing device moves to another display area, it is possible to prevent an image in another display area from being scrolled, not in a certain display area.
[0120]
According to the eleventh aspect of the present invention, since the scroll amount of the image is determined according to the moving amount of the pointing device, the user can easily adjust the moving amount of the pointing device by adjusting the moving amount of the pointing device. Is provided.
[Brief description of the drawings]
FIG. 1 is a diagram showing a configuration of a display system according to an embodiment of the present invention.
FIG. 2 is a block diagram showing a configuration of a touch pen mouse which is a component of the display system.
FIG. 3 is a diagram for explaining a format of detection data generated by a coordinate detection device that is a component of the display system.
FIG. 4 is a flowchart showing a processing operation for generating detection data performed by the coordinate detection device.
FIG. 5 is a diagram for explaining a pointing point coordinate detection method by a coordinate input device which is a component of the display system.
FIG. 6 is a diagram for explaining a coordinate input surface for detecting an object by a touch panel function of the display system.
FIG. 7 is a diagram for explaining a method for detecting the on / off state of each switch provided on the touch pen mouse.
FIG. 8 is a timing chart showing the contents of an infrared signal emitted from an infrared transmitter of the touch pen mouse.
FIG. 9 is a diagram showing an example of a screen displayed for selecting and setting a correspondence between operation contents of the touch pen mouse and generated mouse data.
FIG. 10 is a flowchart showing a processing procedure for generating mouse data based on detection data supplied from the coordinate detection device.
FIG. 11 is a flowchart showing a processing procedure for generating mouse data based on detection data supplied from the coordinate detection device.
FIG. 12 is a flowchart showing a processing procedure for generating mouse data based on detection data supplied from the coordinate detection device.
FIG. 13 is a diagram showing a format of mouse data generated based on detection data supplied from the coordinate detection device.
FIG. 14 is a flowchart illustrating a modified example of a processing procedure for generating mouse data based on detection data supplied from the coordinate detection device.
FIG. 15 is a diagram showing an example of a display screen of the display system, for explaining an effect brought about by a modification of the process of generating mouse data based on detection data supplied from the coordinate detection device. FIG.
[Explanation of symbols]
1 Coordinate input device
2 Display device
3 Coordinate detection device
4 Host device
5 touch pen mouse
51, 52, 53 switch
54 Switch detector
55 infrared transmitter
58 Infrared detector
100 display system
103 Coordinate detection device
104 Central Processing Unit
108 Driver
112 coordinate input surface
113 Display screen
201 retroreflective member
202R right optical detector
202L left optical detector
APL111 application

Claims (11)

表示画面を備え、当該表示画面上のユーザが指示した位置に基づく情報を生成する表示装置であって、
ユーザが前記表示画面のいずれかの位置を指示するために用いるデバイスであって、当該デバイスの所定の部位が前記表示画面に接触したか否かを検出するポインティングデバイスと、
前記表示画面上から所定の距離を隔てた位置に物体がある場合に、当該物体が指し示す前記表示画面上の位置を検出する位置検出手段と、
前記ポインティングデバイスが前記表示画面に接触したか否かを問わず前記位置検出手段によって検出された位置に基づく情報を生成する非接触モードと、前記ポインティングデバイスの前記所定の部位が前記表示画面に接触したことが検出されている間における前記位置検出手段によって検出された位置に基づく情報を生成する接触モードのいずれかの選択されたモードで動作する情報生成手段とを備え、
前記情報生成手段は、当該装置に電源が投入された際に前記非接触モードで動作する
ことを特徴とする表示装置。
A display device comprising a display screen and generating information based on a position designated by a user on the display screen,
A pointing device that is used by the user to indicate any position on the display screen, and detects whether a predetermined portion of the device has touched the display screen,
When an object is located at a position separated by a predetermined distance from the display screen, position detection means for detecting a position on the display screen indicated by the object,
A non-contact mode for generating information based on the position detected by the position detection unit regardless of whether the pointing device has touched the display screen, and the predetermined portion of the pointing device touching the display screen. Information generation means operating in one of the selected modes of the contact mode to generate information based on the position detected by the position detection means while it is detected,
The display device, wherein the information generating means operates in the non-contact mode when the device is turned on.
表示画面を備え、当該表示画面上のユーザが指示した位置に基づく情報を生成する表示装置であって、
ユーザが前記表示画面のいずれかの位置を指示するために用いるデバイスであって、オン/オフスイッチを有するポインティングデバイスと、
前記ポインティングデバイスが指し示す前記表示画面上の位置を検出する位置検出手段と、
前記スイッチがオンの間に前記位置検出手段によって検出された前記ポインティングデバイスが指し示す位置に基づいて、前記表示画面に表示される画像をスクロールさせるスクロール手段と
を具備することを特徴とする表示装置。
A display device comprising a display screen and generating information based on a position designated by a user on the display screen,
A pointing device having an on / off switch, the device being used by a user to indicate any position on the display screen;
Position detecting means for detecting a position on the display screen indicated by the pointing device,
A display device, comprising: scroll means for scrolling an image displayed on the display screen based on a position indicated by the pointing device detected by the position detection means while the switch is on.
前記スクロール手段は、前記スイッチがオンの間に前記位置検出手段によって検出される位置に基づいて前記表示画面に表示されるある表示領域の画像をスクロールさせている際に、前記位置検出手段によって検出される位置が当該ある表示領域外となったときにも当該ある表示領域の画像のスクロールを続行する
ことを特徴とする請求項2に記載の表示装置。
The scrolling means detects the position detected by the position detecting means while scrolling an image of a display area displayed on the display screen based on the position detected by the position detecting means while the switch is on. 3. The display device according to claim 2, wherein the scroll of the image in the certain display area is continued even when the position to be performed is outside the certain display area.
前記スクロール手段は、前記スイッチがオンの間に前記位置検出手段によって検出される前記ポインティングデバイスが指示する位置が移動した量に応じて画像のスクロール量を決定する
ことを特徴とする請求項2または3に記載の表示装置。
3. The scrolling device according to claim 2, wherein the scrolling means determines a scrolling amount of the image in accordance with an amount of movement of a position indicated by the pointing device detected by the position detection means while the switch is on. 4. The display device according to 3.
表示画面を備える表示装置において、当該表示画面に表示される画像をスクロールさせるための制御情報を生成する方法であって、
オン/オフスイッチを有するポインティングデバイスが指し示す前記表示画面上の位置を検出する位置検出ステップと、
前記スイッチがオンの間に前記位置検出ステップで検出された前記ポインティングデバイスが指し示す位置に基づいて、前記表示画面に表示される画像をスクロールさせるための制御情報を生成するスクロール情報生成ステップと
を具備することを特徴とするスクロール情報生成方法。
In a display device including a display screen, a method for generating control information for scrolling an image displayed on the display screen,
A position detecting step of detecting a position on the display screen indicated by a pointing device having an on / off switch;
A scroll information generating step of generating control information for scrolling an image displayed on the display screen based on a position indicated by the pointing device detected in the position detecting step while the switch is on. Scroll information generating method.
前記スクロール情報生成ステップでは、前記スイッチがオンの間に前記位置検出ステップで検出される位置に基づいて前記表示画面に表示されるある表示領域の画像をスクロールさせている際に、前記位置検出ステップで検出される位置が当該ある表示領域外の位置となったときにも当該ある表示領域の画像のスクロールのための制御情報を生成する
ことを特徴とする請求項5に記載のスクロール情報生成方法。
In the scroll information generating step, when scrolling an image of a certain display area displayed on the display screen based on the position detected in the position detecting step while the switch is on, the position detecting step 6. The scroll information generation method according to claim 5, wherein control information for scrolling an image in the certain display area is generated even when the position detected in step (c) is outside the certain display area. .
前記スクロール情報生成ステップでは、前記スイッチがオンの間に前記位置検出手段によって検出される前記ポインティングデバイスが指示する位置が移動した量に応じて画像のスクロール量を決定し、当該スクロール量を含む制御情報を生成する
ことを特徴とする請求項5または6に記載のスクロール情報生成方法。
In the scroll information generating step, a scroll amount of an image is determined in accordance with an amount by which the position indicated by the pointing device detected by the position detection means has been moved while the switch is on, and a control including the scroll amount is performed. 7. The scroll information generation method according to claim 5, wherein information is generated.
専用のポインティングデバイスが表示画面のいずれかの位置に接触したか否かを示す情報と、前記表示画面上から所定の距離を隔てた位置に物体がある場合に当該物体が指し示す前記表示画面上の位置を示す位置情報とが供給されるコンピュータを、
前記ポインティングデバイスが前記表示画面に接触したか否かを問わず供給される位置情報に基づく情報を生成する非接触モードと、前記ポインティングデバイスが前記表示画面に接触したことが検出されている間に供給される位置情報に基づく情報を生成する接触モードのいずれかの選択されたモードで動作する手段であって、当該コンピュータに電源が投入された際に前記非接触モードで動作する情報生成手段
として機能させることを特徴とするプログラム。
Information indicating whether the dedicated pointing device has touched any position on the display screen, and information on the display screen indicated by the object when there is an object at a position separated by a predetermined distance from the display screen A computer to which position information indicating the position is supplied,
A non-contact mode that generates information based on the supplied position information regardless of whether the pointing device has touched the display screen, and a mode in which it is detected that the pointing device has touched the display screen. Means for operating in any one of the contact modes for generating information based on the supplied position information, wherein the information generating means operates in the non-contact mode when the computer is turned on. A program characterized by functioning.
オン/オフスイッチを有するポインティングデバイスが指し示す表示画面上の位置情報と、前記オン/オフスイッチのオン/オフ状態とを示すスイッチ情報とが供給されるコンピュータを、
前記スイッチ情報に示されるスイッチ状態がオンの間に前記位置情報に基づいて、前記表示画面に表示される画像をスクロールさせるための制御情報を生成する情報生成手段
として機能させることを特徴とするプログラム。
A computer to which position information on a display screen indicated by a pointing device having an on / off switch and switch information indicating an on / off state of the on / off switch are supplied;
A program for functioning as information generating means for generating control information for scrolling an image displayed on the display screen based on the position information while a switch state indicated by the switch information is on. .
前記情報生成手段は、前記スイッチ情報に示されるスイッチ状態がオンの間に前記位置情報に基づいて前記表示画面に表示されるある表示領域の画像をスクロールさせている際に、前記表示装置から供給される前記位置情報に示される位置が当該ある表示領域外の位置となったときにも当該ある表示領域の画像のスクロールのための制御情報を生成する
ことを特徴とする請求項9に記載のプログラム。
The information generating means supplies the information from the display device when an image in a display area displayed on the display screen is scrolled based on the position information while the switch state indicated by the switch information is on. The control information for scrolling an image in a certain display area is generated even when a position indicated by the position information is outside the certain display area. program.
前記情報生成手段は、前記スイッチ情報に示されるスイッチ状態がオンの間に前記位置情報に示される位置が移動した量に応じて画像のスクロール量を決定し、当該スクロール量を含む制御情報を生成する
ことを特徴とする請求項9または10に記載のプログラム。
The information generation means determines a scroll amount of an image according to an amount by which a position indicated by the position information has moved while a switch state indicated by the switch information is on, and generates control information including the scroll amount. The program according to claim 9, wherein the program is executed.
JP2002329689A 2002-11-13 2002-11-13 Display device, scroll information generation method and program Pending JP2004164307A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002329689A JP2004164307A (en) 2002-11-13 2002-11-13 Display device, scroll information generation method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002329689A JP2004164307A (en) 2002-11-13 2002-11-13 Display device, scroll information generation method and program

Publications (1)

Publication Number Publication Date
JP2004164307A true JP2004164307A (en) 2004-06-10

Family

ID=32807616

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002329689A Pending JP2004164307A (en) 2002-11-13 2002-11-13 Display device, scroll information generation method and program

Country Status (1)

Country Link
JP (1) JP2004164307A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006085387A (en) * 2004-09-15 2006-03-30 Ricoh Co Ltd Pc conference system, scroll display system, and document correction system
JP2012148059A (en) * 2010-12-27 2012-08-09 Kochi Univ Of Technology Biological image processing system equipped with tangible device
JP2015056844A (en) * 2013-09-13 2015-03-23 株式会社リコー Communication terminal and communication method
CN108027695A (en) * 2015-01-21 2018-05-11 微软技术许可有限责任公司 Application user interface based on experience mode conversion reconfigures
US10203856B2 (en) 2016-06-07 2019-02-12 Samsung Electronics Co., Ltd. Display apparatus and controlling method thereof

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006085387A (en) * 2004-09-15 2006-03-30 Ricoh Co Ltd Pc conference system, scroll display system, and document correction system
JP2012148059A (en) * 2010-12-27 2012-08-09 Kochi Univ Of Technology Biological image processing system equipped with tangible device
JP2015056844A (en) * 2013-09-13 2015-03-23 株式会社リコー Communication terminal and communication method
CN108027695A (en) * 2015-01-21 2018-05-11 微软技术许可有限责任公司 Application user interface based on experience mode conversion reconfigures
US10203856B2 (en) 2016-06-07 2019-02-12 Samsung Electronics Co., Ltd. Display apparatus and controlling method thereof
US10564830B2 (en) 2016-06-07 2020-02-18 Samsung Electronics Co., Ltd. Display apparatus and controlling method thereof

Similar Documents

Publication Publication Date Title
US8432362B2 (en) Keyboards and methods thereof
US5995083A (en) Coordinates input apparatus
JP3630153B2 (en) Information display input device, information display input method, and information processing device
EP2291726B1 (en) User interface of a small touch sensitive display for an electronic data and communication device
EP1016952B1 (en) Personal computer system
US20040104894A1 (en) Information processing apparatus
JPH1078850A (en) Device for inputting coordinate and method for controlling the same
US6963349B1 (en) Information processing apparatus, control method therefor, and computer-readable memory
JP5808712B2 (en) Video display device
JP2004265450A6 (en) Coordinate input device
JP5513266B2 (en) Conversion device and program
JP2011028524A (en) Information processing apparatus, program and pointing method
JP2004265453A6 (en) Coordinate input device
JPH10149254A6 (en) Coordinate input device
JP2004265451A6 (en) Coordinate input device
JP2010145861A (en) Head mount display
US20060143580A1 (en) Method and system for quick screen switching in a multi-monitor environment
JP2006107092A (en) Information processor and program used in information processor
JP3744116B2 (en) Display input device
US8610668B2 (en) Computer keyboard with input device
JPH10228350A (en) Input device
JP2004030536A (en) Information processor and character input support method used in the processor
JP2004164307A (en) Display device, scroll information generation method and program
JP5128991B2 (en) Information processing apparatus and input device
JP2004046797A (en) Display device with touch panel, control method for it, and program for operating it by computer