JP2004280590A

JP2004280590A - Touch panel input device and touch panel input control method

Info

Publication number: JP2004280590A
Application number: JP2003072441A
Authority: JP
Inventors: Takao Oku; 孝雄奥
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2003-03-17
Filing date: 2003-03-17
Publication date: 2004-10-07
Anticipated expiration: 2023-03-17
Also published as: JP4526235B2

Abstract

<P>PROBLEM TO BE SOLVED: To provide a touch panel input device and touch panel input control method capable of improving a user's operability by performing a correction with further high precision. <P>SOLUTION: A touch input 41 to a GUI part 31 is detected by a touch panel 12 provided corresponding to a display part 15, the input coordinates (x, y) corresponding to this touch input 41 are detected, and input coordinate history 41-1 to 41-n is stored regardless the validity or invalidity of the touch input 41 to the GUI part 31. The tendency of the touch input 41 to the GUI part 31 displayed on the display part 51 is analyzed from the input coordinate history 41-1 to 41-n, and the touch input 41 to the GUI part 31 displayed on the display part 15 is corrected based on the analysis result. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、ＰＤＡ（ＰｅｒｓｏｎａｌＤｉｇｉｔａｌＡｓｓｉｓｔａｎｔ）、電子手帳等において、ＬＣＤ（ＬｉｑｕｉｄＣｒｙｓｔａｌＤｉｓｐｌａｙ）等の表示部に重ねて設けられ、ペンや指先等の押圧位置に反応して画面上の座標を得るタッチパネルを使用したタッチパネル入力装置及びタッチパネル入力制御方法に関する。
【０００２】
【従来の技術】
従来、タッチパネル入力装置においては、表示装置に表示するグラフィカルユーザーインターフェース（ＧｒａｐｈｉｃａｌＵｓｅｒＩｎｔｅｒｆａｃｅ、以下、ＧＵＩと略称する）のパターンが複雑になるにつれ、各ＧＵＩ部品のタッチパネル上の入力可能領域が狭くなり、隣接する別のＧＵＩ部品や、無反応領域に対する誤入力が発生し易くなっていた。
【０００３】
特開平６−１７５７６８号公報には、ユーザの操作を必要とせずに、基準点入力手段から複数の基準点を入力することによって、この入力された基準点の座標情報に基づき、校正手段が入力検出領域における検出座標のキャリブレーション（校正）を自動的に行うことが可能なタッチパネル入力装置が記載されている。
【０００４】
また、特開平７−３１１６５５号公報には、表示部に表示される所定の表示パターンに対し、タッチパネルによるタッチ入力を行った際に、タッチパネルからの出力値の変化が検出された場合には、その出力変化値に基づきタッチパネルと表示部との位置合わせ調整を行い、所定表示パターンに対するタッチ入力操作時にキャリブレーション調整を行うタッチパネル入力装置が記載されている。
【０００５】
また、特開２００１−６７１８６号公報には、意図されない座標データが入力された場合に、これを想定されている一番近い座標が入力されたものとして、自動キャリブレーションを行う、タッチパネルのキャリブレーション方法が記載されている。
【０００６】
【特許文献１】
特開平６−１７５７６８号公報
【特許文献２】
特開平７−３１１６５５号公報
【特許文献３】
特開２００１−６７１８６号公報
【０００７】
【発明が解決しようとする課題】
しかしながら、特開平６−１７５７６８号記載の座標入力装置では、入力領域の表示（のユーザに対する見え方）とタッチパネルの位置関係については考慮されていないため、これらの間にずれがあった場合には校正することができないという問題があった。また、この方式を用いない場合の従来構成に比べ、基準点入力手段を構成するマイクロソレノイド等といった追加のハードウェアが必要となる問題もあった。
【０００８】
また、特開平７−３１１６５５号記載のタッチパネル入力装置では、ユーザが有効操作をした場合にのみ入力履歴を保存するため、無効操作の入力値を活かすことができなかった。また、入力領域の形状は固定されたものとしているため、この形状をユーザに的確に把握させるようなアイコン（ＧＵＩ部品）を用いる必要があった。
【０００９】
また、特開２００１−６７１８６号記載のタッチパネルのキャリブレーション方法では、意図されない座標データが入力された場合に限り再キャリブレーションが行われるため、想定されている範囲の座標が入力されている限りは微調整が行われないという制限がある。
【００１０】
本発明は、上記問題点に鑑み、ユーザの入力毎に補正を行う場合に比べて、複数の入力座標値をもとに、統計的な手段を用いて補正値を算出することができ、より高い精度で補正を行い、ユーザの操作性を向上することができるタッチパネル入力装置及びタッチパネル入力制御方法を提供することを目的とする。
【００１１】
また、本発明は、有効・無効に関わらず全ての入力座標を履歴として保存した上で、補正の材料とするため、より自由度の高い補正を行うことができるタッチパネル入力装置及びタッチパネル入力制御方法を提供することを目的とする。
【００１２】
【課題を解決するための手段】
上記目的を達成するために、本発明の請求項１記載のタッチパネル入力制御方式は、グラフィカルユーザーインターフェースを表示する表示手段と、該表示手段に対応させて設けられ、該表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力を検知するためのタッチパネルと、該タッチパネルによって検知された、前記表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力に対応する入力座標を検出する入力座標検出手段と、前記表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力の有効・無効にかかわらず、該入力座標検出手段によって検出された入力座標の履歴を記憶する入力座標履歴記憶手段と、該入力座標履歴記憶手段に記憶されている入力座標の履歴から、前記表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力の傾向を分析する分析手段と、該分析手段による分析結果に基づいて、前記表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力の補正を行う補正手段とを備えていることを特徴とする。
【００１３】
また、本発明の請求項２記載のタッチパネル入力制御方法は、グラフィカルユーザーインターフェースを表示手段に表示する表示ステップと、前記表示手段に対応させて設けられたタッチパネルにより、前記表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力を検知するタッチ入力検知ステップと、該タッチ入力検知ステップによって検知された、前記表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力に対応した入力座標を検出する入力座標検出ステップと、前記表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力の有効・無効にかかわらず、該入力座標検出ステップによって検出された入力座標の履歴を記憶する入力座標履歴記憶ステップと、該入力座標履歴記憶ステップによって記憶された入力座標の履歴から、前記表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力の傾向を分析する分析ステップと、該分析ステップの分析結果に基づいて、前記表示手段に表示されたグラフィカルユーザーインターフェースに対するタッチ入力の補正を行う補正ステップとを備えていることを特徴とする。
【００１４】
また、本発明のタッチパネル入力制御方法では、前記分析ステップは、前記入力座標履歴保存ステップによって記憶された入力座標の履歴の重心を用いることを特徴とする。
また、本発明のタッチパネル入力制御方法では、前記補正ステップは、前記分析ステップの分析結果に基づいて、前記入力座標検出ステップによって検出された入力座標をずらすことを特徴とする。
【００１５】
また、本発明のタッチパネル入力制御方法では、前記補正ステップは、前記分析ステップの分析結果に基づいて、前記表示ステップによって表示手段に表示されるグラフィカルユーザーインターフェースの反応領域をずらすことを特徴とする。
また、本発明のタッチパネル入力制御方法では、前記補正ステップは、前記分析ステップの分析結果に基づいて、前記表示ステップによって表示手段に表示されるグラフィカルユーザーインターフェースの反応領域を拡大することを特徴とする。
【００１６】
これら本発明によれば、保存された入力座標履歴とグラフィカルユーザーインターフェースの配置パターンをもとに、グラフィカルユーザーインターフェースに対するタッチ入力の無効を減少させるように、その入力座標をずらすことができる。
これら本発明によれば、保存された入力座標履歴とグラフィカルユーザーインターフェースの配置パターンをもとに、グラフィカルユーザーインターフェースのより望ましい反応領域を再生成することができる。
【００１７】
【発明の実施の形態】
以下、添付図面を参照しながら本発明の好適な実施の形態について詳細に説明する。
図１は、本発明の一実施の形態によるタッチパネル入力装置の構成を示すブロック図である。
図１において、本実施の形態によるタッチパネル入力装置１は、ＣＰＵ１１、タッチパネル１２、タッチパネル制御部１３、座標検出部１４、表示部１５、表示制御部１６、表示メモリ１７、及び記憶装置１８を備えている。そして、記憶装置１８には、制御プログラム２１、ＧＵＩ部品座標テーブル２２、入力座標履歴記憶部２３を備えている。
【００１８】
ＣＰＵ１１は、記憶装置１８に記憶されている制御プログラム２１に基づき、タッチパネル入力装置１のタッチパネル入力制御処理を行う。
ＣＰＵ１１は、ユーザに対して入力情報を伝える際は、表示メモリ１７に蓄えられるＧＵＩパターンの情報を適宜変更して表示制御部１６を駆動することにより、表示部１５に入力情報としてのＧＵＩパターンの表示を行う。その際、ＣＰＵ１１は、ＧＵＩパターンを構成するＧＵＩ部品の表示を、記憶装置１８のＧＵＩ部品座標テーブル２２に蓄えられた情報をもとにして行う。
【００１９】
一方、ユーザが、表示部１５に表示されたＧＵＩパターンのＧＵＩ部品に対して、タッチパネル１２から入力操作を行うと、タッチパネル制御部１３がこれを検知し、座標検出部１４に伝える。座標検出部１４は、タッチパネル制御部１３による検知出力をタッチパネル１２のタブレット座標系上の入力座標（ｖ，ｗ）に変換し、この変換した入力座標（ｖ，ｗ）をＣＰＵ１１に伝える。ＣＰＵ１１は、座標検出部１４によって検出されたタッチパネル１２上の入力座標（ｖ，ｗ）を、記憶装置１８に蓄えられた補正値に基づいて、表示部１５の表示座標系上上の表示座標（ｘ，ｙ）に変換する。
前記ユーザによる入力操作の結果、得られた表示座標（ｘ，ｙ）は、逐一記憶装置１８内の入力座標履歴記憶部２３に入力座標履歴として蓄えられる。
【００２０】
次に、本実施の形態によるタッチパネル入力装置１のタッチパネル入力制御方法（キャリブレーション方法）について、実施例毎に分けて詳細に説明する。
［第一の実施例］
図２は、本実施の形態のタッチパネル入力装置による表示部の表示座標系上における一のＧＵＩ部品の反応領域と、このＧＵＩ部品に対するタッチ入力に対応した入力座標との関係例を示した図である。
図２においては、太実線で示された反応領域３１ａを有する一のＧＵＩ部品３１及びその近傍の無効操作領域３１ｂに対して行われた入力座標履歴４１が、塗りつぶし又は中抜きの各点４１−１〜４１−ｎで表されている。
【００２１】
この各点４１−１〜４１−ｎの中、塗りつぶした各点に対応する、ＧＵＩ部品３１の反応領域３１ａに含まれる入力座標履歴４１ａは、当該ＧＵＩ部品３１に対するＧＵＩ操作としては有効であったことを意味する。これに対し、中抜きの各点に対応する、ＧＵＩ部品３１の反応領域３１ａの外側の無効操作領域３１ｂに位置する入力座標履歴４１ｂは、当該ＧＵＩ部品３１に対するＧＵＩ操作としては無効であったことを意味する。
【００２２】
図２の例では、ＧＵＩ部品３１の反応領域３１ａに対して、図中右下方向に位置する無効操作領域３１ｂ部分の無効入力４１ｂが多かったことが分かる。結果として、このＧＵＩ部品３１に関しては、タッチパネル１２のタブレット座標系上の入力座標（ｖ，ｗ）全体を当該座標系上の左上方向に補正する必要があるのではないか、と予測される。望ましい補正が行われた場合、結果として、タブレット座標系上の入力座標（ｖ，ｗ）それぞれを表示座標系上の入力座標（ｘ，ｙ）それぞれに変換した入力座標履歴４１−１〜４１−ｎは、図２において、図中左上方向にずれ、この入力座標履歴４１−１〜４１−ｎの中、前述の反応領域３１ａの右下方向に位置する無効操作領域３１ｂ部分の無効入力４１ｂが有効入力４１ａに換わり、有効に処理できるようになる。
【００２３】
以下に、上述した補正処理を行うためのアルゴリズムの一例を示す。
図３は、表示部の表示座標系上における一のＧＵＩ部品の反応領域に関して、その入力座標の補正処理を説明するための、当該ＧＵＩ部品の反応領域と入力座標との関係例を示した図である。
図３において、図中左上に原点Ｏを設定し、ｘ軸の正を右向き、ｙ軸の正を下向きとした表示座標系上で、ある方形ＧＵＩ部品３１の反応領域３１ａが、記憶装置１８のＧＵＩ部品座標テーブル２２をもとに、左上座標３１Ｌｈが（ａｘ，ａｙ）、右下座標３１Ｒｌが（Ａｘ，Ａｙ）として、表示メモリ１７上に記憶されているものとする。
【００２４】
また、タッチパネル１２のタブレット座標系上の入力座標（ｖ，ｗ）は、記憶装置１８の制御プログラム２１によって、補正値ｐ，ｑ，ｒ，ｓを用いて、次に示す式（１），式（２）により、表示座標系上の入力座標（ｘ，ｙ）に変換されるものとする。なお、補正値ｐ，ｒは、両座標間の変換のための倍率を表し、補正値ｑ，ｓは、両座標間の変換のためのオフセット値を表すものとする。
ｘ＝ｐｖ＋ｑ，ｙ＝ｒｗ＋ｓ式（１），式（２）
【００２５】
その上で、補正処理によって、着目するＧＵＩ部品３１以外の別の図示せぬＧＵＩ部品等への入力の影響を除くため、入力座標履歴４１−１〜４１−ｎの中、補正処理に利用する入力４１ｅ−１〜４１ｅ−ｍを、まず選別する。
【００２６】
ここでは、各入力４１−ｉ（ただし、ｉは１〜ｎのいずれか）の表示座標系上における入力座標を（ｘｉ，ｙｉ）とし、選別判定値として、例えば正の数値ｄを用い、
ａｘ−ｄ＜ｘｉ＜Ａｘ＋ｄ、ａｙ−ｄ＜ｙｉ＜Ａｙ＋ｄ式（３）
という条件を満たす入力４１ｅ−１〜４１ｅ−ｍのみを補正処理に用いることにする。すなわち、式（３）によれば、前述の正の数値ｄはＧＵＩ部品３１に対する入力４１−１〜４１−ｎの校正対象範囲を規定する。
【００２７】
ここでは、この校正対象範囲内の入力４１ｅ−１〜４１ｅ−ｍそれぞれの表示座標系上における入力座標を、（ｘ１，ｙ１），（ｘ２，ｙ２），．．．，（ｘｍ，ｙｍ）として、これらも入力座標履歴記憶部２３に記憶されているものとする（ただし、ｍ＜ｎとする）。
【００２８】
図４は、本実施例による補正処理を実行するためのアルゴリズム（手順）を示したフローチャートである。
図４に示したアルゴリズムは、本実施の形態のタッチパネル入力装置１では、記憶装置１８における制御プログラム２１の一部として構成され、記憶装置１８におけるＧＵＩ部品座標テーブル２２及び入力座標履歴記憶部２３に含まれる記憶データ（ｘ１，ｙ１），（ｘ２，ｙ２），．．．，（ｘｍ，ｙｍ）をもとにして、ＣＰＵ１１によって実行される。
【００２９】
まず、ＣＰＵ１１は、前述した式（３）に示す、校正対象範囲内の入力４１ｅ−１〜４１ｅ−ｍにそれぞれ対応する表示座標系上の入力座標（ｘ１，ｙ１），．．．，（ｘｍ，ｙｍ）の重心４１ｅｇの座標（ｇｘ，ｇｙ）を求める（ステップＳ４０１）。
【００３０】
ただし、
ｇｘ＝（ｘ１＋ｘ２＋．．．＋ｘｍ）／ｍ式（４）
ｇｙ＝（ｙ１＋ｙ２＋．．．＋ｙｍ）／ｍ式（５）
である。
【００３１】
そして、ＣＰＵ１１は、上記重心４１ｅｇの座標（ｇｘ，ｇｙ）と、ＧＵＩ部品３１の中心３１ｃの座標（Ｃｘ，Ｃｙ）との差分Ｆを求める（ステップＳ４０２）。なお、この差分Ｆは、ｘ軸，ｙ軸方向それぞれに関しての差分（Ｆｘ，Ｆｙ）で表されるものとする。
【００３２】
したがって、本実施例では、ＧＵＩ部品３１の中心３１ｃの座標（Ｃｘ，Ｃｙ）は、
Ｃｘ＝（ａｘ＋Ａｘ）／２，Ｃｙ＝（ａｙ＋Ａｙ）／２式（６），式（７）
であり、差分Ｆは、表示座標系上で
Ｆｘ＝ｇｘ−Ｃｘ，Ｆｙ＝ｇｙ−Ｃｙ式（８），式（９）
で表される。
【００３３】
そして、ＣＰＵ１１は、もし、この差分Ｆのｘ軸方向又はｙ軸方向に関しての距離｜Ｆｘ｜、｜Ｆｙ｜のいずれもが、予め設定した校正実行条件としての所定値Ｄ１以下の場合には、補正処理を実行しない。すなわち、タッチパネル１２のタブレット座標系上の入力座標（ｖ，ｗ）を表示座標系上の入力座標（ｘ，ｙ）への変換する場合に用いられる、前述の式（１），式（２）で示した変換式の補正値ｐ，ｑ，ｒ，ｓについて、その更新の必要はないと判定し（ステップＳ４０３）、その更新を中止する。
【００３４】
これに対し、ＣＰＵ１１は、この差分Ｆのｘ軸方向又はｙ軸方向に関しての距離｜Ｆｘ｜、｜Ｆｙ｜の中、少なくともいずれ一方が校正実行条件としての所定値Ｄ１よりも大きい場合には、補正処理を実行する。すなわち、前述の式（１），式（２）で示した変換式の補正値ｐ，ｑ，ｒ，ｓについて、更新の必要があると判定し（ステップＳ４０３）、次の手順に進む。
【００３５】
この場合、ＣＰＵ１１は、差分（Ｆｘ，Ｆｙ）の値に応じて、タッチパネル１２のタブレット座標系上の入力座標（ｖ，ｗ）の、表示座標系上の入力座標（ｘ，ｙ）への変換式（前述の式（１），式（２））における補正値ｐ，ｑ，ｒ，ｓを、新しい補正値ｐ’，ｑ’，ｒ’，ｓ’に更新する。（ステップＳ４０４）
【００３６】
この新しい補正値ｐ’，ｑ’，ｒ’，ｓ’の求め方は、オフセットを変更する場合は、

となる。
【００３７】
したがって、変換された表示座標系上の入力座標（ｘ，ｙ）は、
ｘ＝ｐ’ｖ＋ｑ’＝ｐｖ＋（ｑ−Ｆｘ）式（１２）
ｙ＝ｒ’ｗ＋ｓ’＝ｒｗ＋（ｓ−Ｆｙ）式（１３）
となる。
【００３８】
この結果、重心４１ｅｇの座標（ｇｘ，ｇｙ）と、ＧＵＩ部品３１の中心３１ｃの座標（Ｃｘ，Ｃｙ）との差分（Ｆｘ，Ｆｙ）だけ、表示座標系上の入力座標（ｘ，ｙ）がオフセットされる。
【００３９】
一方、倍率を変更する場合の新しい補正値ｐ’，ｑ’，ｒ’，ｓ’の求め方は、

である。
【００４０】
したがって、変換された表示座標系上の入力座標（ｘ，ｙ）は、

となる。
【００４１】
この結果、重心４１ｅｇの座標（ｇｘ，ｇｙ）と、ＧＵＩ部品３１の中心３１ｃの座標（Ｃｘ，Ｃｙ）との比だけ、表示座標系上の入力座標（ｘ，ｙ）への変換のための倍率ｐ，ｒが変更される。
【００４２】
［第二の実施例］
第一の実施例によるタッチパネル入力装置１のタッチパネル入力制御方法によるキャリブレーションでは、タブレット座標、すなわちタッチパネル１２のタブレット座標系上の入力座標（ｖ，ｗ）から表示座標系上の表示座標（ｘ，ｙ）への変換式における補正値ｐ，ｑ，ｒ，ｓを変更して、入力のずれに対応した。
【００４３】
これに代えて、方形ＧＵＩ部品３１の表示座標系上の反応領域３１ａの更新、すなわち、左上座標３１Ｌｈが（ａｘ，ａｙ）、右下座標３１Ｒｌが（Ａｘ，Ａｙ）によって規定された反応領域３１ａの更新によって対応することもできる。
【００４４】
まず、方形ＧＵＩ部品３１の新しい反応領域３１ａ’における左上座標３１Ｌｈを（ａ’ｘ，ａ’ｙ）、右下座標３１Ｒｌを（Ａ’ｘ，Ａ’ｙ）とすると、方形ＧＵＩ部品３１の反応領域３１ａを領域の大きさはそのままでシフトする場合、校正対象範囲内の入力４１ｅ−１〜４１ｅ−ｍの表示座標系上における重心４１ｅｇの座標（ｇｖ，ｇｗ）と、ＧＵＩ部品３１の中心３１ｃの座標（Ｃｘ，Ｃｙ）との差分（Ｆｘ、Ｆｙ）を用いて、例えば、次式（１８）のように更新する。
ａ’ｘ＝ａｘ＋Ｆｘｖ，ａ’ｙ＝ａｙ＋Ｆｙｗ，Ａ’ｘ＝ＡＸ＋Ｆｘｖ，Ａ’ｙ＝Ａｙ＋Ｆｙｗ式（１８）
【００４５】
この結果として、ＧＵＩ部品３１の反応領域３１ａの位置は、図２に示すように、入力各点４１−１〜４１−ｎに対して相対的に右下方向にずれ、反応領域３１ａ’になる。これにより、反応領域３１ａの右下方向に位置する無効操作領域３１ｂ部分が反応領域３１ａ’の範囲内となり、有効に処理できるようになる。
【００４６】
また、方形ＧＵＩ部品３１の反応領域３１ａを広げる場合は、例えば、次式（１９）のように更新する。
ａ’ｘ＝ａｘ＋ｍｉｎ（０，Ｆｘ），ａ’ｙ＝ａｙ＋ｍｉｎ（０，Ｆｙ），Ａ’ｘ＝Ａｘ＋ｍａｘ（０，Ｆｘ），Ａ’ｙ＝Ａｙ＋ｍａｘ（０，Ｆｙ）式（１９）
（ただし、ｍｉｎ（Ａ，Ｂ）はＡ，Ｂの中の最小値、ｍａｘ（Ａ，Ｂ）はＡ，Ｂの中の最大値を表す）
【００４７】
この結果として、ＧＵＩ部品３１の反応領域３１ａは、差分（Ｆｘ、Ｆｙ）に対応して、反応領域３１ａがｘ軸，ｙ軸方向に沿って拡大し、反応領域３１ａは、当該反応領域３１ａを含む、より大きな反応領域３１ａ’になる。
【００４８】
［第三の実施例］
第二の実施例によるタッチパネル入力装置１のタッチパネル入力制御方法によるキャリブレーションでは、例えば、方形ＧＵＩ部品３１の反応領域３１ａの大きさがある程度以上に大きく、元々ユーザや使用状況によって、校正対象範囲内と判定された入力座標履歴４１ｅ−１〜４１ｅ−ｍの重心４１ｅｇに偏りがある場合も考えられる。
【００４９】
このような場合に対応するため、第一の実施例において、式（４），式（５）で表した、校正対象範囲内と判定された入力座標履歴４１ｅ−１〜４１ｅ−ｍの重心４１ｇの座標（ｇｘ，ｇｙ）の代わりに、図３に示すように、無効操作領域３１ｂに対する入力４１ｂと判定された入力座標履歴４１ｂ−１〜４１ｂ−ｍ’の重心４１ｂｇの座標（Ｇｘ，Ｇｙ）を用いる方法がある（ただし、ｍ’＜ｎ）。
【００５０】
この重心４１ｂｇの座標（Ｇｘ，Ｇｙ）を含むように、方形ＧＵＩ部品３１の、左上座標３１Ｌｈが（ａｘ，ａｙ）、右下座標３１Ｒｌが（Ａｘ，Ａｙ）となった反応領域３１ａを広げる場合、新しい反応領域３１ａ’における左上座標３１Ｌｈを（ａ’ｘ，ａ’ｙ）、右下座標３１Ｒｌを（Ａ’ｘ，Ａ’ｙ）とすると、例えば、次式（２０）のように更新する。
ａ’ｘ＝ｍｉｎ（ａｘ，Ｇｖ），ａ’ｙ＝ｍｉｎ（ａｙ，Ｇｗ），
Ａ’ｘ＝ｍａｘ（Ａｘ，Ｇｖ），Ａ’ｙ＝ｍａｘ（Ａｙ，Ｇｗ）式（２０）
【００５１】
［第四の実施例］
第一の実施例によるタッチパネル入力装置１のタッチパネル入力制御方法によるキャリブレーションで説明したような判定を、複数あるＧＵＩ部品３１−１，３１−２，．．．，３１−ｎにそれぞれに対してキャリブレーションを総合的に行うことにより、より判定の精度を向上させることが可能となる。
【００５２】
すなわち、どのＧＵＩ部品３１−１，３１−２，．．．，３１−ｎについても、それぞれの反応領域３１ａに対して右下方向に位置する無効操作領域３１ｂ部分に対する無効入力４１ｂが多いという結果が得られれば、すなわちタッチパネル１２の入力値である入力座標（ｖ，ｗ）は、タッチパネル１２のタブレット座標系上を左上方向に補正が必要だと判断することができる。又は、表示座標系上の複数あるＧＵＩ部品３１−１，３１−２，．．．，３１−ｎそれぞれの反応領域３１ａを、右下方向に補正が必要だと判断することができる。
【００５３】
以下に、そのアルゴリズムの一例を示す。
第一の実施例で示したようなＧＵＩ部品３１が、ＧＵＩ部品３１−１，３１−２，．．．，３１−ｎといったように複数あり、それぞれのＧＵＩ部品３１−１，３１−２，．．．，３１−ｎの座標が（ａｘ１，ａｙ１），（Ａｘ１，Ａｙ１）、．．．、（ａｘｎ，ａｙｎ），（Ａｘｎ，Ａｙｎ）と記憶されているとする。
【００５４】
第一の実施例と同様に、各ＧＵＩ部品３１−１，３１−２，．．．，３１−ｎの差分（Ｆｘ１，Ｆｙ１），．．．，（Ｆｘｎ，Ｆｙｎ）を求める。
その上で、差分（Ｆｘ１，Ｆｙ１），．．．，（Ｆｘｎ，Ｆｙｎ）それぞれの校正実行条件としての所定値Ｄ１に対する関係から、補正値ｐ，ｑ，ｒ，ｓの更新の必要があるか否かを判定する。
【００５５】
この場合、例えば、各ＧＵＩ部品３１−１，３１−２，．．．，３１−ｎそれぞれの中央の座標が（Ｃｘ１，Ｃｙ１），．．．，（Ｃｘｎ，Ｃｙｎ）と表されるとして、上記（Ｆｘ１，Ｆｙ１），．．．，（Ｆｘｎ，Ｆｙｎ）相互の相関関係、例えばＦｘ１／Ｃｘ１，Ｆｘ２／Ｃｘ２，．．．，Ｆｘｎ／Ｃｘｎ、及びＦｙ１／Ｃｙ１，Ｆｙ２／Ｃｙ２，．．．，Ｆｙｎ／Ｃｙｎの相互関係から、補正値ｐ，ｒの更新の必要があるか否かを判定する。
【００５６】
また、別例として、各ＧＵＩ部品３１−１，３１−２，．．．，３１−ｎそれぞれの中央の座標（Ｃｘ１，Ｃｙ１），．．．，（Ｃｘｎ，Ｃｙｎ）の座標の大小に関わらず、それぞれの差分（Ｆｘ１，Ｆｙ１），．．．，（Ｆｘｎ，Ｆｙｎ）それぞれが、正の一定の範囲の所定値を持っている場合には、補正値ｐ，ｑ，ｒ，ｓとして、タッチパネル１２のタブレット座標系上の入力座標（ｖ，ｗ）の、表示座標系上の入力座標（ｘ，ｙ）への変換を、現在よりも小さい値（ｘ’，ｙ’）に変換する必要があると判断できる。
【００５７】
［第五の実施例］
図５は、ＧＵＩ部品の一種としてのスクロールバーに関する入力座標と反応領域との関係例を示した図である。
図５は、ＧＵＩ部品３１の一種類である、スクロールバー３２の反応領域３２ａ、及びその近傍で行われた入力座標履歴４２−１〜４２−ｎを、図２と同様の形式で示している。スクロールバー３２の形状の特性上、スクロールバー３２の移動可能な方向（図５においては、図中、左右方向（横方向））には、表示座標系上に対応する入力座標（ｘｉ，ｙｉ）のばらつきが大きい。これは、ユーザ又はその他の使用条件によって、スクロールバー３２のどの部分を使うかが異なるため、図５での横方向、すなわちスクロールバー３２の移動可能な方向の入力位置ｘ１，ｘ２，．．．，ｘｎには、個人差があるものと考えられる。
【００５８】
しかし、縦方向、すなわちスクロールバー３２の移動可能な方向に対して垂直な入力位置ｙ１，ｙ２，．．．，ｙｎに対しては、比較的精度の高い入力が求められるため、得られた入力座標履歴４２−１〜４２−ｎの入力座標（ｘｉ，ｙｉ）の中のｙｉを、補正情報の更新のために用いることができる。
【００５９】
図５の例では、入力が上方向にずれている傾向が見られるため、入力座標履歴４２−１〜４２−ｎの表示座標系上のｙ軸成分を用いて、補正値の更新を行うことができる。
つまり、入力座標履歴４２−１〜４２−ｎを用いて、校正対象範囲内の入力４２ｅ−１〜４２ｅ−ｍにそれぞれ対応する表示座標系上の座標（ｘ１，ｙ１），．．．，（ｘｍ，ｙｍ）に係り、ｙ軸方向に関する重心座標ｇｙを、第一の実施例の式（５）で示したように、ｇｙ＝（ｙ１＋ｙ２＋．．．＋ｙｍ）／ｍとし、同じく第一の実施例の式（２）で示した、ｙ＝ｒｗ＋ｓにおける補正値ｒ，ｓの更新等を行ったり、第三の実施例で示したように、スクロールバー３２の反応領域３２ａをはじめとする同じ表示画面上のＧＵＩ部品３１の反応領域３１ａの縦方向（表示座標系のｙ軸方向）の位置の更新を行ったりすることができる。
【００６０】
［第六の実施例］
図６は、表示座標系上におけるＧＵＩ部品の表示形状と反応領域形状が異なる場合の入力座標と当該ＧＵＩ部品の反応領域との関係例を示した図である。
図６において、ＧＵＩ部品３１は、楕円で示した表示形状３１’と、この表示形状３１’と異なる太線で示した方形反応領域３１ａを有し、このＧＵＩ部品３１に対する入力座標履歴４１−１〜４１−ｎを、図２と同様な形式で示している。
【００６１】
本実施例では、タッチパネル入力制御処理の簡便化のために反応領域３１ａは方形であるものとして処理されていため、楕円形の表示形状３１’を元にユーザが操作したことによって無効操作と判定された入力座標履歴４１ｂが多いことが分かる。
【００６２】
しかし、第一の実施例で用いた、校正対象範囲内の入力４２ｅ−１〜４２ｅ−ｍにそれぞれ対応する表示座標系上の座標（ｘ１，ｙ１），．．．，（ｘｍ，ｙｍ）の重心（ｇｘ，ｇｙ）は、反応領域３１ａの中心３１ｃの座標（Ｃｘ，Ｃｙ）とほぼ一致しており、補正値ｐ，ｑ，ｒ，ｓ、反応領域３１ａの更新の必要はないかのように見える。
【００６３】
このような場合に、反応領域３１ａを校正対象範囲内の個々の入力履歴４２ｅ−１〜４２ｅ−ｍを全て含むような形状に更新（６０７）することで、以降の無効操作と判定される入力座標履歴４１ｂを減らすことができる。
【００６４】
例えば、入力履歴（ｘ１，ｙ１），（ｘ２，ｙ２），．．．，（ｘｍ，ｙｍ）とした場合に、新たな反応領域（ａ’ｘ，ａ’ｙ），．．．，（Ａ’ｘ，Ａ’ｙ）を、次式（２１）のように、
ａ’ｘ＝ｍｉｎ（ａｘ，ｘ１，ｘ２，．．．，ｘｎ），ａ’ｙ＝ｍｉｎ（ａｙ，ｙ１，ｙ２，．．．，ｙｎ）
Ａ’ｘ＝ｍａｘ（Ａｘ，ｘ１，ｘ２，．．．，ｘｎ），Ａ’ｙ＝ｍａｘ（Ａｙ，ｙ１，ｙ２，．．．，ｙｎ）式（２１）
として更新する。
【００６５】
本発明のタッチパネル入力装置及びタッチパネル入力制御方法の実施の形態及び実施例は、以上説明したとおりであるが、本発明の実施の形態及び実施例は、これらに限定されるものではない。
【００６６】
例えば、上記説明した実施の形態では、表示座標系上で、入力座標履歴を作成し、補正処理を行うように構成したが、タッチパネルのタブレット座標系上で入力座標履歴を作成し、補正処理を行うこともできる。この場合には、例えば、ＧＵＩ部品の表示座標系上の反応領域をタッチパネルのタブレット座標系上に変換して、同様に行うことで可能である。
【００６７】
【発明の効果】
以上のように、本発明によれば、ユーザの入力毎に補正を行う場合に比べて、複数の入力座標値、及び複数の入力領域情報を元に、統計的な手段を用いて補正値を算出することができ、より高い精度で補正を行い、ユーザの操作性を向上することができる。
また、有効・無効に関わらず全ての入力座標を履歴として保存した上で、補正の材料とするため、より自由度の高い補正を行うことができる。
【図面の簡単な説明】
【図１】本発明の一実施の形態によるタッチパネル入力装置の構成を示すブロック図である。
【図２】本実施の形態のタッチパネル入力装置による表示部の表示座標系上における一のＧＵＩ部品の反応領域と、このＧＵＩ部品に対するタッチ入力に対応した入力座標との関係例を示した図である。
【図３】表示部の表示座標系上における一のＧＵＩ部品の反応領域に関して、その入力座標の補正処理を説明するための、入力座標と当該ＧＵＩ部品の反応領域との関係例を示した図である。
【図４】本実施の形態のタッチパネル入力装置による補正処理の一実施例を実行するためのアルゴリズム（手順）を示したフローチャートである。
【図５】ＧＵＩ部品の一種としてのスクロールバーに関する入力座標と反応領域との関係例を示した図である。
【図６】表示座標系上におけるＧＵＩ部品の表示形状と反応領域形状が異なる場合の入力座標と当該ＧＵＩ部品の反応領域との関係例を示した図である。
【符号の説明】
１タッチパネル入力装置
１１ＣＰＵ
１２タッチパネル
１３タッチパネル制御部
１４座標検出部
１５表示部
１６表示制御部
１７表示メモリ
１８記憶装置
２１制御プログラム
２２ＧＵＩ部品座標テーブル
２３入力座標履歴記憶部
３１ＧＵＩ部品
３１ａ反応領域
３１ｂ無効操作領域
４１，４１−１〜４１−ｎ入力座標履歴
４１ａ入力として有効な入力座標履歴
４１ｂ入力として無効な座標履歴[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a touch panel that is provided on a display unit such as a liquid crystal display (LCD) in a PDA (Personal Digital Assistant), an electronic organizer, or the like, and obtains coordinates on a screen in response to a pressing position of a pen, a fingertip, or the like. The present invention relates to a touch panel input device and a touch panel input control method using the same.
[0002]
[Prior art]
Conventionally, in a touch panel input device, as a pattern of a graphical user interface (Graphical User Interface, hereinafter abbreviated as GUI) displayed on a display device becomes more complicated, an input enabled area of each GUI component on the touch panel becomes narrower. An erroneous input to another adjacent GUI component or a non-reaction area has been apt to occur.
[0003]
JP-A-6-175768 discloses that a plurality of reference points are input from a reference point input unit without a user's operation, so that a calibration unit can input an input based on the coordinate information of the input reference point. A touch panel input device capable of automatically calibrating detection coordinates in a detection area is described.
[0004]
Japanese Patent Application Laid-Open No. 7-31655 discloses that when a change in the output value from the touch panel is detected when a touch input is performed on the predetermined display pattern displayed on the display unit using the touch panel, There is described a touch panel input device that performs alignment adjustment between a touch panel and a display unit based on the output change value and performs calibration adjustment at the time of a touch input operation on a predetermined display pattern.
[0005]
Japanese Unexamined Patent Application Publication No. 2001-67186 discloses a touch panel calibration in which, when unintended coordinate data is input, automatic calibration is performed on the assumption that the closest coordinate is assumed to have been input. A method is described.
[0006]
[Patent Document 1]
JP-A-6-175768
[Patent Document 2]
JP-A-7-31655
[Patent Document 3]
JP 2001-67186 A
[0007]
[Problems to be solved by the invention]
However, in the coordinate input device described in JP-A-6-175768, the display of the input area (how the user sees it) and the positional relationship of the touch panel are not taken into consideration. There was a problem that calibration could not be performed. In addition, there is a problem that additional hardware such as a micro solenoid which constitutes the reference point input means is required as compared with the conventional configuration in which this method is not used.
[0008]
Further, in the touch panel input device described in JP-A-7-31655, the input history is stored only when the user performs an effective operation, so that the input value of the invalid operation cannot be utilized. In addition, since the shape of the input area is fixed, it is necessary to use an icon (GUI component) that allows the user to accurately grasp the shape.
[0009]
In the touch panel calibration method described in JP-A-2001-67186, re-calibration is performed only when unintended coordinate data is input, so long as coordinates in an expected range are input. There is a limitation that fine adjustment is not performed.
[0010]
In view of the above problems, the present invention can calculate a correction value using statistical means, based on a plurality of input coordinate values, as compared to a case where correction is performed for each user input, It is an object of the present invention to provide a touch panel input device and a touch panel input control method capable of performing correction with high accuracy and improving user operability.
[0011]
The present invention also provides a touch panel input device and a touch panel input control method capable of performing a correction with a higher degree of freedom since all input coordinates, whether valid or invalid, are stored as a history and used as a material for correction. The purpose is to provide.
[0012]
[Means for Solving the Problems]
In order to achieve the above object, a touch panel input control system according to claim 1 of the present invention is provided with display means for displaying a graphical user interface, provided in correspondence with the display means, and a graphical display provided on the display means. A touch panel for detecting a touch input on a user interface, an input coordinate detection unit for detecting input coordinates detected by the touch panel and corresponding to the touch input on the graphical user interface displayed on the display unit, and the display unit Input coordinate history storage means for storing a history of input coordinates detected by the input coordinate detection means, regardless of whether the touch input to the graphical user interface displayed on the screen is valid or invalid, and stored in the input coordinate history storage means. Input seat Analyzing means for analyzing the tendency of the touch input to the graphical user interface displayed on the display means from the history of the input means; and analyzing the touch input to the graphical user interface displayed on the display means based on the analysis result by the analyzing means. And a correction means for performing correction.
[0013]
Further, according to a touch panel input control method according to claim 2 of the present invention, a display step of displaying a graphical user interface on a display means, and a graphical display displayed on the display means by a touch panel provided corresponding to the display means. A touch input detecting step of detecting a touch input on the user interface; and an input coordinate detecting step of detecting input coordinates corresponding to the touch input on the graphical user interface displayed on the display means, detected by the touch input detecting step. Irrespective of whether the touch input to the graphical user interface displayed on the display means is valid or invalid, an input coordinate history storing step of storing a history of the input coordinates detected by the input coordinate detecting step; An analyzing step of analyzing a tendency of a touch input to the graphical user interface displayed on the display means from a history of the input coordinates stored in the input coordinate history storing step; and displaying the display means based on an analysis result of the analyzing step. And correcting the touch input to the graphical user interface displayed on the display.
[0014]
Further, in the touch panel input control method according to the present invention, the analysis step uses a center of gravity of the input coordinate history stored in the input coordinate history storage step.
In the touch panel input control method according to the present invention, the correction step shifts the input coordinates detected by the input coordinate detection step based on an analysis result of the analysis step.
[0015]
Further, in the touch panel input control method according to the present invention, the correction step shifts a reaction area of a graphical user interface displayed on a display unit by the display step based on an analysis result of the analysis step.
Further, in the touch panel input control method according to the present invention, the correction step enlarges a reaction area of a graphical user interface displayed on a display unit by the display step based on an analysis result of the analysis step. .
[0016]
According to the present invention, the input coordinates can be shifted based on the stored input coordinate history and the arrangement pattern of the graphical user interface so as to reduce the invalidity of the touch input to the graphical user interface.
According to the present invention, a more desirable reaction area of the graphical user interface can be regenerated based on the stored input coordinate history and the arrangement pattern of the graphical user interface.
[0017]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.
FIG. 1 is a block diagram showing a configuration of a touch panel input device according to one embodiment of the present invention.
1, the touch panel input device 1 according to the present embodiment includes a CPU 11, a touch panel 12, a touch panel control unit 13, a coordinate detection unit 14, a display unit 15, a display control unit 16, a display memory 17, and a storage device 18. I have. The storage device 18 includes a control program 21, a GUI component coordinate table 22, and an input coordinate history storage unit 23.
[0018]
The CPU 11 performs a touch panel input control process of the touch panel input device 1 based on the control program 21 stored in the storage device 18.
When transmitting the input information to the user, the CPU 11 appropriately changes the information of the GUI pattern stored in the display memory 17 and drives the display control unit 16 to thereby display the GUI pattern as the input information on the display unit 15. Display. At that time, the CPU 11 displays the GUI components constituting the GUI pattern based on the information stored in the GUI component coordinate table 22 of the storage device 18.
[0019]
On the other hand, when the user performs an input operation on the GUI component of the GUI pattern displayed on the display unit 15 from the touch panel 12, the touch panel control unit 13 detects the input operation and notifies the coordinate detection unit 14. The coordinate detection unit 14 converts the detection output from the touch panel control unit 13 into input coordinates (v, w) on the tablet coordinate system of the touch panel 12, and transmits the converted input coordinates (v, w) to the CPU 11. The CPU 11 converts the input coordinates (v, w) on the touch panel 12 detected by the coordinate detection unit 14 into display coordinates (v) on the display coordinate system of the display unit 15 based on the correction values stored in the storage device 18. x, y).
The display coordinates (x, y) obtained as a result of the input operation by the user are stored one by one in the input coordinate history storage unit 23 in the storage device 18 as the input coordinate history.
[0020]
Next, a touch panel input control method (calibration method) of the touch panel input device 1 according to the present embodiment will be described in detail for each example.
[First embodiment]
FIG. 2 is a diagram illustrating an example of a relationship between a reaction area of one GUI component on a display coordinate system of a display unit by the touch panel input device of the present embodiment and input coordinates corresponding to a touch input on the GUI component. is there.
In FIG. 2, the input coordinate history 41 performed on one GUI component 31 having a reaction region 31 a indicated by a thick solid line and an invalid operation region 31 b in the vicinity thereof is represented by a solid or hollow point 41- 1 to 41-n.
[0021]
The input coordinate history 41a included in the reaction area 31a of the GUI component 31 corresponding to each filled-in point among the points 41-1 to 41-n was effective as a GUI operation for the GUI component 31. Means that. On the other hand, the input coordinate history 41b located in the invalid operation area 31b outside the reaction area 31a of the GUI component 31 corresponding to each hollow point was invalid as a GUI operation on the GUI component 31. Means
[0022]
In the example of FIG. 2, it can be seen that the invalid input 41 b of the invalid operation area 31 b located in the lower right direction in the figure is larger than the reaction area 31 a of the GUI component 31. As a result, it is predicted that the entire input coordinates (v, w) of the touch panel 12 on the tablet coordinate system need to be corrected in the upper left direction on the coordinate system for the GUI component 31. When the desired correction is performed, as a result, the input coordinate history 41-1 to 41- converted from the input coordinates (v, w) on the tablet coordinate system to the input coordinates (x, y) on the display coordinate system. In FIG. 2, n is shifted in the upper left direction in the figure, and in the input coordinate history 41-1 to 41-n, the invalid input 41b of the invalid operation area 31b located in the lower right direction of the reaction area 31a described above. Instead of the valid input 41a, processing can be performed effectively.
[0023]
Hereinafter, an example of an algorithm for performing the above-described correction processing will be described.
FIG. 3 is a diagram illustrating an example of a relationship between a reaction region of a GUI component and an input coordinate for explaining a process of correcting an input coordinate of the reaction region of one GUI component on a display coordinate system of a display unit. It is.
In FIG. 3, the origin O is set at the upper left in the drawing, the reaction area 31 a of a certain square GUI component 31 is stored in the storage device 18 on a display coordinate system in which the positive direction of the x axis is rightward and the positive direction of the y axis is downward. Based on the GUI part coordinate table 22, it is assumed that the upper left coordinate 31Lh is stored in the display memory 17 as (ax, ay) and the lower right coordinate 31Rl is stored as (Ax, Ay).
[0024]
The input coordinates (v, w) on the tablet coordinate system of the touch panel 12 are calculated by the control program 21 of the storage device 18 using the correction values p, q, r, and s, and By (2), it is assumed that the coordinates are converted into input coordinates (x, y) on the display coordinate system. Note that the correction values p and r represent magnifications for conversion between the two coordinates, and the correction values q and s represent offset values for conversion between the two coordinates.
x = pv + q, y = rw + s Equation (1), Equation (2)
[0025]
Then, the correction process is used for the correction process in the input coordinate histories 41-1 to 41-n in order to eliminate the influence of input to another GUI component (not shown) other than the GUI component 31 of interest by the correction process. First, the inputs 41e-1 to 41e-m are sorted out.
[0026]
Here, the input coordinates of each input 41-i (where i is any one of 1 to n) on the display coordinate system are (xi, yi), and for example, a positive numerical value d is used as a sorting determination value.
ax-d <xi <Ax + d, ay-d <yi <Ay + d Equation (3)
Only the inputs 41e-1 to 41e-m satisfying the condition are used for the correction processing. That is, according to the equation (3), the above-described positive numerical value d defines the calibration target range of the inputs 41-1 to 41-n to the GUI component 31.
[0027]
Here, the input coordinates on the display coordinate system of each of the inputs 41e-1 to 41e-m within the calibration target range are (x1, y1), (x2, y2),. . . , (Xm, ym) are also stored in the input coordinate history storage unit 23 (where m <n).
[0028]
FIG. 4 is a flowchart illustrating an algorithm (procedure) for executing the correction processing according to the present embodiment.
The algorithm illustrated in FIG. 4 is configured as a part of the control program 21 in the storage device 18 in the touch panel input device 1 of the present embodiment, and is stored in the GUI component coordinate table 22 and the input coordinate history storage unit 23 in the storage device 18. The stored data (x1, y1), (x2, y2),. . . , (Xm, ym) is executed by the CPU 11.
[0029]
First, the CPU 11 calculates the input coordinates (x1, y1),... On the display coordinate system corresponding to the inputs 41e-1 to 41e-m in the calibration target range, respectively, as shown in the above-described equation (3). . . , (Xm, ym) at the coordinates (gx, gy) of the center of gravity 41eg (step S401).
[0030]
However,
gx = (x1 + x2 + ... + xm) / m Equation (4)
gy = (y1 + y2 + ... + ym) / m Equation (5)
It is.
[0031]
Then, the CPU 11 obtains a difference F between the coordinates (gx, gy) of the center of gravity 41eg and the coordinates (Cx, Cy) of the center 31c of the GUI component 31 (step S402). The difference F is represented by a difference (Fx, Fy) in each of the x-axis and y-axis directions.
[0032]
Therefore, in this embodiment, the coordinates (Cx, Cy) of the center 31c of the GUI component 31 are:
Cx = (ax + Ax) / 2, Cy = (ay + Ay) / 2 Equations (6) and (7)
And the difference F is expressed on the display coordinate system.
Fx = gx-Cx, Fy = gy-Cy Equations (8) and (9)
Is represented by
[0033]
Then, if any of the distances | Fx | and | Fy | of the difference F in the x-axis direction or the y-axis direction is equal to or less than a predetermined value D1 as a preset calibration execution condition, the CPU 11 Do not execute correction processing. That is, the above equations (1) and (2) used when converting the input coordinates (v, w) on the tablet coordinate system of the touch panel 12 into the input coordinates (x, y) on the display coordinate system. It is determined that there is no need to update the correction values p, q, r, and s of the conversion formula shown by (step S403), and the update is stopped.
[0034]
On the other hand, if at least one of the distances | Fx | and | Fy | in the x-axis direction or the y-axis direction of the difference F is larger than the predetermined value D1 as the calibration execution condition, Execute the correction process. That is, it is determined that the correction values p, q, r, and s of the conversion equations shown in the above-described equations (1) and (2) need to be updated (step S403), and the procedure proceeds to the next procedure.
[0035]
In this case, the CPU 11 converts the input coordinates (v, w) on the tablet coordinate system of the touch panel 12 into the input coordinates (x, y) on the display coordinate system according to the value of the difference (Fx, Fy). The correction values p, q, r, and s in the equations (the above-described equations (1) and (2)) are updated to new correction values p ′, q ′, r ′, and s ′. (Step S404)
[0036]
The method of obtaining the new correction values p ′, q ′, r ′, and s ′ is as follows.

It becomes.
[0037]
Therefore, the input coordinates (x, y) on the converted display coordinate system are
x = p′v + q ′ = pv + (q−Fx) Equation (12)
y = r′w + s ′ = rw + (s−Fy) Equation (13)
It becomes.
[0038]
As a result, the input coordinates (x, y) on the display coordinate system are the difference (Fx, Fy) between the coordinates (gx, gy) of the center of gravity 41eg and the coordinates (Cx, Cy) of the center 31c of the GUI component 31. Offset.
[0039]
On the other hand, how to obtain new correction values p ′, q ′, r ′, and s ′ when changing the magnification is as follows.

It is.
[0040]
Therefore, the input coordinates (x, y) on the converted display coordinate system are

It becomes.
[0041]
As a result, the ratio between the coordinates (gx, gy) of the center of gravity 41eg and the coordinates (Cx, Cy) of the center 31c of the GUI component 31 is converted into the input coordinates (x, y) on the display coordinate system. The magnifications p and r are changed.
[0042]
[Second embodiment]
In the calibration by the touch panel input control method of the touch panel input device 1 according to the first embodiment, the tablet coordinates, that is, the input coordinates (v, w) of the touch panel 12 on the tablet coordinate system are converted from the display coordinates (x, The correction values p, q, r, and s in the conversion formula to y) were changed to cope with the input deviation.
[0043]
Instead, the reaction area 31a on the display coordinate system of the rectangular GUI part 31 is updated, that is, the upper left coordinate 31Lh is defined by (ax, ay) and the lower right coordinate 31Rl is defined by (Ax, Ay). Can also be addressed by updating.
[0044]
First, assuming that the upper left coordinate 31Lh in the new reaction area 31a 'of the rectangular GUI part 31 is (a'x, a'y) and the lower right coordinate 31Rl is (A'x, A'y), the reaction of the square GUI part 31 is as follows. When shifting the area 31a while keeping the size of the area as it is, the coordinates (gv, gw) of the center of gravity 41eg on the display coordinate system of the inputs 41e-1 to 41e-m in the calibration target range and the center 31c of the GUI component 31 Is updated using the difference (Fx, Fy) from the coordinates (Cx, Cy).
a'x = ax + Fxv, a'y = ay + Fyw, A'x = AX + Fxv, A'y = Ay + Fyw Equation (18)
[0045]
As a result, as shown in FIG. 2, the position of the reaction area 31a of the GUI component 31 is shifted to the lower right relative to each of the input points 41-1 to 41-n, and becomes the reaction area 31a '. . As a result, the invalid operation area 31b located in the lower right direction of the reaction area 31a falls within the range of the reaction area 31a ', and processing can be performed effectively.
[0046]
When the reaction area 31a of the square GUI component 31 is expanded, for example, the following equation (19) is used.
a'x = ax + min (0, Fx), a'y = ay + min (0, Fy), A'x = Ax + max (0, Fx), A'y = Ay + max (0, Fy) Equation (19)
(However, min (A, B) represents the minimum value of A and B, and max (A, B) represents the maximum value of A and B.)
[0047]
As a result, the reaction region 31a of the GUI component 31 is expanded in the x-axis and y-axis directions in accordance with the difference (Fx, Fy), and the reaction region 31a is defined by the reaction region 31a. And a larger reaction area 31a '.
[0048]
[Third embodiment]
In the calibration by the touch panel input control method of the touch panel input device 1 according to the second embodiment, for example, the size of the reaction area 31a of the square GUI component 31 is larger than a certain level, and the size of the reaction area 31 It is also conceivable that the center of gravity 41eg of the input coordinate history 41e-1 to 41e-m determined to be biased.
[0049]
In order to cope with such a case, in the first embodiment, the center of gravity 41g of the input coordinate history 41e-1 to 41e-m determined to be within the calibration target range, expressed by Expressions (4) and (5). Instead of the coordinates (gx, gy), as shown in FIG. 3, the coordinates (Gx, Gy) of the center of gravity 41bg of the input coordinate history 41b-1 to 41b-m 'determined as the input 41b to the invalid operation area 31b. (Where m ′ <n).
[0050]
When expanding the reaction region 31a of the rectangular GUI component 31 in which the upper left coordinate 31Lh is (ax, ay) and the lower right coordinate 31Rl is (Ax, Ay) so as to include the coordinates (Gx, Gy) of the center of gravity 41bg. If the upper left coordinate 31Lh in the new reaction area 31a 'is (a'x, a'y) and the lower right coordinate 31Rl is (A'x, A'y), for example, the following equation (20) is updated. .
a'x = min (ax, Gv), a'y = min (ay, Gw),
A'x = max (Ax, Gv), A'y = max (Ay, Gw) Equation (20)
[0051]
[Fourth embodiment]
The determination as described in the calibration by the touch panel input control method of the touch panel input device 1 according to the first embodiment is performed by a plurality of GUI components 31-1, 31-2,. . . , 31-n, it is possible to further improve the accuracy of the determination.
[0052]
That is, any of the GUI components 31-1, 31-2,. . . , 31-n, the result is that there are many invalid inputs 41b to the invalid operation area 31b located in the lower right direction with respect to the respective reaction areas 31a, that is, the input coordinates (input values of the touch panel 12). v, w), it can be determined that correction is necessary in the upper left direction on the tablet coordinate system of the touch panel 12. Alternatively, a plurality of GUI parts 31-1, 31-2,. . . , 31-n can be determined to require correction in the lower right direction.
[0053]
The following is an example of the algorithm.
The GUI components 31 as shown in the first embodiment are GUI components 31-1, 31-2,. . . , 31-n, and the respective GUI parts 31-1, 31-2,. . . , 31-n are (ax1, ay1), (Ax1, Ay1),. . . , (Axn, ayn), (Axn, Ayn).
[0054]
As in the first embodiment, each of the GUI components 31-1, 31-2,. . . , 31-n (Fx1, Fy1),. . . , (Fxn, Fyn).
Then, the differences (Fx1, Fy1),. . . , (Fxn, Fyn), it is determined whether or not it is necessary to update the correction values p, q, r, and s from the relationship with respect to the predetermined value D1 as the calibration execution condition.
[0055]
In this case, for example, each of the GUI parts 31-1, 31-2,. . . , 31-n are (Cx1, Cy1),. . . , (Cxn, Cyn), the above (Fx1, Fy1),. . . , (Fxn, Fyn), for example, Fx1 / Cx1, Fx2 / Cx2,. . . , Fxn / Cxn, and Fy1 / Cy1, Fy2 / Cy2,. . . , Fyn / Cyn, it is determined whether the correction values p and r need to be updated.
[0056]
As another example, each of the GUI parts 31-1, 31-2,. . . , 31-n at the center (Cx1, Cy1),. . . , (Cxn, Cyn), regardless of the magnitude of the coordinates, the respective differences (Fx1, Fy1),. . . , (Fxn, Fyn) each have a predetermined value in a positive fixed range, and the input coordinates (v, w) on the tablet coordinate system of the touch panel 12 as the correction values p, q, r, s. ) To the input coordinates (x, y) on the display coordinate system can be determined to need to be converted to a value (x ′, y ′) smaller than the current value.
[0057]
[Fifth embodiment]
FIG. 5 is a diagram illustrating an example of a relationship between input coordinates and a reaction region regarding a scroll bar as a type of GUI component.
FIG. 5 shows, in a format similar to that of FIG. 2, a reaction area 32a of the scroll bar 32, which is one type of the GUI component 31, and input coordinate histories 42-1 to 42-n performed in the vicinity thereof. . Due to the characteristics of the shape of the scroll bar 32, the input coordinate (xi, yi) corresponding to the display coordinate system is set in the direction in which the scroll bar 32 can move (in FIG. 5, the horizontal direction (horizontal direction in FIG. 5)). Is large. This is because, depending on the user or other usage conditions, which part of the scroll bar 32 is used, the input positions x1, x2,... In the horizontal direction in FIG. . . , Xn are considered to have individual differences.
[0058]
However, the input positions y1, y2,. . . , Yn, a relatively high-precision input is required, so that yi in the input coordinates (xi, yy) of the obtained input coordinate history 42-1 to 42-n is used for updating the correction information. Can be used for
[0059]
In the example of FIG. 5, since the input tends to be shifted upward, the correction value is updated using the y-axis component on the display coordinate system of the input coordinate history 42-1 to 42-n. Can be.
That is, using the input coordinate history 42-1 to 42-n, the coordinates (x1, y1),... On the display coordinate system corresponding to the inputs 42e-1 to 42e-m within the calibration target range, respectively. . . , (Xm, ym), the center-of-gravity coordinate gy in the y-axis direction is set to gy = (y1 + y2 +... + Ym) / m as shown in the equation (5) of the first embodiment. The correction values r and s at y = rw + s shown in equation (2) of the third embodiment are updated, and the reaction area 32a of the scroll bar 32 is used as shown in the third embodiment. The position of the reaction area 31a of the GUI component 31 on the same display screen in the vertical direction (y-axis direction of the display coordinate system) can be updated.
[0060]
[Sixth embodiment]
FIG. 6 is a diagram illustrating an example of a relationship between input coordinates and a reaction region of the GUI component when the display shape of the GUI component and the reaction region shape on the display coordinate system are different.
6, the GUI part 31 has a display shape 31 ′ indicated by an ellipse and a square reaction area 31a indicated by a bold line different from the display shape 31 ′, and the input coordinate history 41-1 to the GUI part 31. 41-n are shown in a format similar to FIG.
[0061]
In the present embodiment, since the reaction area 31a is processed as a square for simplicity of the touch panel input control processing, it is determined that the operation is invalid by the user operating based on the elliptical display shape 31 ′. It can be seen that the input coordinate history 41b is large.
[0062]
However, the coordinates (x1, y1),... On the display coordinate system corresponding to the inputs 42e-1 to 42e-m within the calibration target range used in the first embodiment, respectively. . . , (Xm, ym) substantially coincide with the coordinates (Cx, Cy) of the center 31c of the reaction area 31a, and the correction values p, q, r, s and the update of the reaction area 31a Looks like there is no need for.
[0063]
In such a case, by updating (607) the reaction area 31a to a shape that includes all of the individual input histories 42e-1 to 42e-m within the calibration target range, the input determined to be a subsequent invalid operation is made. The coordinate history 41b can be reduced.
[0064]
For example, input histories (x1, y1), (x2, y2),. . . , (Xm, ym), new reaction regions (a′x, a′y),. . . , (A′x, A′y) as in the following equation (21):
a′x = min (ax, x1, x2,..., xn), a′y = min (ay, y1, y2,.
A′x = max (Ax, x1, x2,..., Xn), A′y = max (Ay, y1, y2,.
Update as
[0065]
The embodiments and examples of the touch panel input device and the touch panel input control method of the present invention are as described above, but the embodiments and examples of the present invention are not limited to these.
[0066]
For example, in the embodiment described above, the input coordinate history is created on the display coordinate system and the correction process is performed. However, the input coordinate history is created on the tablet coordinate system of the touch panel, and the correction process is performed. You can do it too. In this case, for example, it is possible to convert the reaction area on the display coordinate system of the GUI component on the tablet coordinate system of the touch panel and perform the same operation.
[0067]
【The invention's effect】
As described above, according to the present invention, a correction value is calculated using statistical means based on a plurality of input coordinate values and a plurality of input area information, as compared with a case where correction is performed for each user input. It can be calculated, corrected with higher accuracy, and user operability can be improved.
In addition, since all input coordinates, whether valid or invalid, are stored as a history and used as a material for correction, correction with a higher degree of freedom can be performed.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a touch panel input device according to an embodiment of the present invention.
FIG. 2 is a diagram illustrating a relationship example between a reaction area of one GUI component on a display coordinate system of a display unit by a touch panel input device according to the present embodiment and input coordinates corresponding to a touch input on the GUI component; is there.
FIG. 3 is a diagram illustrating an example of a relationship between input coordinates and a reaction area of the GUI component for explaining a correction process of the input coordinates with respect to a reaction area of one GUI component on a display coordinate system of a display unit. It is.
FIG. 4 is a flowchart showing an algorithm (procedure) for executing an example of a correction process by the touch panel input device of the present embodiment.
FIG. 5 is a diagram illustrating an example of a relationship between input coordinates and a reaction area regarding a scroll bar as a type of GUI component.
FIG. 6 is a diagram illustrating an example of a relationship between input coordinates and a reaction region of the GUI component when a display shape of the GUI component and a reaction region shape on the display coordinate system are different.
[Explanation of symbols]
1 Touch panel input device
11 CPU
12 Touch panel
13 Touch panel control unit
14 Coordinate detector
15 Display
16 Display control unit
17 Display memory
18 Storage device
21 Control program
22 GUI part coordinate table
23 Input coordinate history storage
31 GUI components
31a Reaction zone
31b Invalid operation area
41, 41-1 to 41-n Input coordinate history
41a Input coordinate history valid as input
41b Invalid coordinate history as input

Claims

Display means for displaying a graphical user interface;
A touch panel provided corresponding to the display means, for detecting a touch input on a graphical user interface displayed on the display means,
Input coordinate detecting means for detecting input coordinates corresponding to a touch input on the graphical user interface displayed on the display means, detected by the touch panel,
Input coordinate history storage means for storing a history of input coordinates detected by the input coordinate detection means, regardless of whether the touch input to the graphical user interface displayed on the display means is valid or invalid;
Analysis means for analyzing the tendency of touch input to the graphical user interface displayed on the display means, from the history of input coordinates stored in the input coordinate history storage means;
A touch panel input device comprising: a correction unit configured to correct a touch input to a graphical user interface displayed on the display unit based on an analysis result by the analysis unit.

A display step of displaying a graphical user interface on a display means;
By a touch panel provided corresponding to the display means, a touch input detection step of detecting a touch input to the graphical user interface displayed on the display means,
An input coordinate detecting step of detecting input coordinates corresponding to a touch input on the graphical user interface displayed on the display means, detected by the touch input detecting step;
An input coordinate history storing step of storing a history of input coordinates detected by the input coordinate detecting step, regardless of whether the touch input to the graphical user interface displayed on the display means is valid or invalid;
An analysis step of analyzing a tendency of a touch input to a graphical user interface displayed on the display unit from a history of the input coordinates stored in the input coordinate history storage step;
A correction step of correcting a touch input to a graphical user interface displayed on the display means based on an analysis result of the analysis step.

3. The touch panel input control method according to claim 2, wherein the analyzing step uses a center of gravity of the input coordinate history stored in the input coordinate history storing step.

4. The touch panel input control method according to claim 2, wherein the correcting step shifts the input coordinates detected by the input coordinate detecting step based on an analysis result of the analyzing step. 5.

4. The touch panel input control method according to claim 2, wherein the correcting step shifts a reaction area of a graphical user interface displayed on a display unit in the displaying step based on an analysis result of the analyzing step. 5.

4. The touch panel input control method according to claim 2, wherein the correcting step enlarges a reaction area of a graphical user interface displayed on a display unit by the displaying step based on an analysis result of the analyzing step. 5. .