JP6952942B2 - タッチパネル装置、操作識別方法、及び操作識別プログラム - Google Patents
タッチパネル装置、操作識別方法、及び操作識別プログラム Download PDFInfo
- Publication number
- JP6952942B2 JP6952942B2 JP2021543853A JP2021543853A JP6952942B2 JP 6952942 B2 JP6952942 B2 JP 6952942B2 JP 2021543853 A JP2021543853 A JP 2021543853A JP 2021543853 A JP2021543853 A JP 2021543853A JP 6952942 B2 JP6952942 B2 JP 6952942B2
- Authority
- JP
- Japan
- Prior art keywords
- touch
- pressing
- threshold value
- value
- touch panel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
- G06F3/04144—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position using an array of force sensing means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
- G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
- G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04105—Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
Description
図1は、実施の形態1に係るタッチパネル装置1のハードウェア構成の例を示す図である。図1に示されるように、タッチパネル装置1は、タッチパネル20と、圧力センサ部30と、表示器50と、制御装置100とを有している。タッチパネル20は、ユーザによってタッチ操作が行われる操作面を有している。表示器50は、例えば、タッチパネル20と重なるように配置された液晶ディスプレイである。表示器50は、タッチパネル20と一体に構成されてもよい。表示器50は、制御装置100によって制御されて、操作用画面などを表示する。操作用画面は、アイコンなどの操作部品であるオブジェクトを含むユーザインタフェース(UI)画面である。タッチパネル20は、例えば、操作面における導体の接触箇所の静電容量が変化する静電容量式のタッチパネルである。タッチパネル20は、タッチ操作に対応する位置情報であるタッチ情報T0を制御装置100に出力する。
ステップST1において、座標検出部101及び押圧力検出部104は、検出処理を開始する。
ステップST2において、座標検出部101は、タッチパネル20から出力されたタッチ情報T0を受け取る。タッチ情報T0は、例えば、タッチ位置の座標であるタッチ座標、タッチ操作による接触の状態、タッチ箇所の静電容量の検出値、などを含む。また、押圧力検出部104は、圧力センサ部30から出力された圧力情報を示す検出信号D0を受け取る。
ステップST3において、座標検出部101は、タッチ情報T0に基づいて、タッチパネル20におけるタッチ位置を示す座標情報T1を生成する。押圧力検出部104は、検出信号D0に基づいて、タッチパネル20に付与された押圧力F0を示す圧力情報である押圧値D1を算出する。
ステップST4において、操作ログ収集部102は、操作データを収集し、操作ログとして保存する。
ステップST5において、領域決定部103は、操作ログ収集部102に保存されている操作ログのタッチ座標を、階層的クラスタリングを用いて複数のグループに分割し(「以下「グルーピング」ともいう。)、各グループを囲む領域であるグループ領域を生成する。
図10のステップST6において、閾値決定部106は、グループ領域である通常タッチ操作領域の押圧値と、グループ領域である押し込み操作領域の押圧値とに基づいて、各グループ領域における新しい閾値を設定する。閾値決定部106は、通常タッチ操作のM個の操作ログ又は押し込みタッチ操作のM個の操作ログを収集した際に、押圧値の頻度分布の傾向に基づいて、押圧値のガウス分布の平均μと3σとを予想し、通常タッチ操作と押し込み操作との境界となる閾値を更新する。ここで、σは標準偏差を示し、Mは正の整数を示す。
(閾値)
=(1−W)*(前回更新された閾値)
+V*W*(μpr−P*σpr)+(1−V)*W*(μto+3σto)
…(1)
(閾値)=(1−W)*(前回更新された閾値)+W*(μto+3σto)
…(2)
(閾値)=(1−W)*(前回更新された閾値)+W*μpr …(3)
グループ領域をクラスタリングにより自動的に生成した場合、いくつかのグループ領域には、十分に多くの個数の操作ログが蓄積されていない可能性がある。そこで、図10のステップST7において、閾値決定部106は、十分に多くの個数の操作ログが得られていないグループ領域については、他のグループ領域の閾値の更新量を反映させてもよい。例えば、閾値決定部106は、グループ領域同士の距離をLとしたときに、それぞれのグループ領域についての影響度F(L)を、以下の式(4)ように規定する。
F(L)=K*exp(−(L−A)2/B) …(4)
ここで、A,B,Kは、パラメータである。パラメータは、実験的に求めることができる。影響度F(L)は、距離Lが大きいほど小さくなる。影響度F(L)の最大値は、1.0である。
(閾値)=(1−F(L))*(前回更新された閾値)
+F(L)*(最も近いグループ領域における閾値)…(5)
実施の形態1に係るタッチパネル装置1は、タッチパネル20で行われたタッチ操作の操作ログに基づいて操作領域に対応するグループ領域を推定し、各グループ領域における押圧値の頻度分布を取得し、取得された頻度分布に基づいて押し込み操作の閾値を更新する。これに対し、実施の形態2に係るタッチパネル装置2は、表示器50に表示されているUI画面であるGUI(Graphical User Interface)を構成するオブジェクトを示すオブジェクト情報を利用することで、操作領域の推定の精度を向上させている。ここで、GUIを構成するオブジェクトは、アイコンなどの操作部品である。
産業用のタッチパネル装置においては、ある特定のパターンのタッチ操作が繰り返し行われる場合がある。このような操作は、「流れ操作」と呼ばれる。流れ操作は、主に、操作に熟練したユーザによって頻繁に実行される。流れ操作では、流れ操作以外における押圧力とは異なる押圧力でタッチ操作が行われる傾向がある。
(新しい閾値)=直前H回の通常タッチ操作の押圧値の平均+α
ここで、αは、予め実験などで決められた値であり、Hは、正の整数である。
実施の形態2に係るタッチパネル装置2を使用するユーザは、押し込み操作用の複数のオブジェクトを使用する際に、各オブジェクトに必要な押圧値がどの程度であるのかが分からなくなることがあり得る。また、ユーザは、押し込み操作の閾値を変更したい場合に、閾値をどの程度の値に設定すればよいのかが分からない場合がある。そこで、実施の形態4に係るタッチパネル装置4は、操作面21の操作領域が押下されたときに、押圧値、オブジェクトごとの操作履歴としての各押圧値に対する操作回数、頻度分布、押し込み操作の閾値などを、インジケータ表示する。
実施の形態1〜3に係るタッチパネル装置1〜3は、十分に多い個数の操作ログを収集するために、ユーザによる多数回の操作を必要としている。このため、押し込み操作の閾値の更新が繰り返されて、閾値が適切な値になるまでには、或る程度の時間が必要である。閾値が適切な値になるまでの時間を短縮するために、事前モデルを用いた実験又は事前モデルのシミュレーションなどを行い、その結果に基づいて押し込み操作の閾値を設定することも考えられる。しかし、タッチパネル装置を設置する実環境によって、押し込み操作の好適な閾値は変わるので、事前モデルのみによって押し込み操作の閾値を適切に設定することは困難である。さらに、製品の個体差によって押し込み操作の閾値の適切な値が変動することも考えられる。
「押し込み操作は、想定よりも弱く押されている可能性があります。押し込み操作の閾値を弱く押した場合にのみ反応するように設定し直しますか?」
「通常タッチ操作が想定よりも強く行われているようです。押し込み操作の閾値は、推奨値に近い状態ですが、閾値を通常タッチ操作から調整しますか?」
上記実施の形態1から5のタッチパネル装置1から5の構成を適宜組み合わせることが可能である。
Claims (9)
- タッチパネルの操作面に対して行われるタッチ操作によって前記タッチパネルから出力される信号に基づいて、前記タッチ操作の位置を示す座標情報を生成する座標検出部と、
前記タッチ操作によって前記タッチパネルの操作面に付与された押圧力に対応する押圧値を生成する押圧力検出部と、
前記座標情報と前記押圧値を示す情報とを含むデータである操作ログであって、操作ログ収集部によって収集され保存された前記操作ログに含まれる複数のタッチ操作の位置を複数のグループに分割し、前記複数のグループの各々に対応するグループ領域を決定する領域決定部と、
前記操作ログに基づいて、前記複数のグループ領域の各々における前記押圧値の閾値を決定する閾値決定部と、
前記押圧値が前記閾値以上であれば、前記タッチ操作が押圧力を伴う押し込み操作であると判断し、前記押圧値が前記閾値未満であれば、前記タッチ操作が前記押し込み操作以外の通常タッチ操作であると判断する操作識別部と、
を有することを特徴とするタッチパネル装置。 - 前記領域決定部は、前記操作ログに含まれる複数のタッチ操作の位置をクラスタリングによって前記複数のグループに分割することを特徴とする請求項1に記載のタッチパネル装置。
- 特定のパターンのタッチ操作の繰り返しである流れ操作を検知する流れ操作検知部をさらに有し、
前記閾値決定部は、前記流れ操作を検知したときに、前記流れ操作の直前の通常タッチ操作の押圧値に基づいて前記閾値を決定する
ことを特徴とする請求項1又は2に記載のタッチパネル装置。 - 表示器に表示されるユーザインタフェース画面のオブジェクトを検出するオブジェクト検出部をさらに有し、
前記操作ログ収集部は、
前記座標情報と前記押圧値を示す情報とに、前記オブジェクトを対応付けた操作ログを保存する
ことを特徴とする請求項1から3のいずれか1項に記載のタッチパネル装置。 - 表示器にユーザインタフェース画面を表示させる表示制御部と、
前記ユーザインタフェース画面のオブジェクトを検出するオブジェクト検出部と、
をさらに有し、
前記表示器に、前記オブジェクトの押圧値、前記オブジェクトに対する操作回数、前記押圧値の頻度分布、及び前記押し込み操作の閾値のうちの1つ以上を示すインジケータが表示される
ことを特徴とする請求項1から3のいずれか1項に記載のタッチパネル装置。 - 表示器にキャリブレーション画面を表示させる表示制御部と、
キャリブレーション画面におけるタッチ操作で操作ログ収集部に入力されたデータを検出する押圧力分布検出部と、
をさらに有し、
前記閾値決定部は、キャリブレーション画面におけるタッチ操作に基づいて閾値を設定する
ことを特徴とする請求項1から3のいずれか1項に記載のタッチパネル装置。 - 前記閾値決定部は、前記複数のグループ領域の各々に操作ログの個数が予め決められた値に達していないときに、他のグループ領域における他の閾値の更新量を用いて、前記グループ領域の閾値を更新することを特徴とする請求項1から6のいずれか1項に記載のタッチパネル装置。
- タッチパネルの操作面に対して行われるタッチ操作によって前記タッチパネルから出力される信号に基づいて、前記タッチ操作の位置を示す座標情報を生成するステップと、
前記タッチ操作によって前記タッチパネルの操作面に付与された押圧力に対応する押圧値を生成するステップと、
前記座標情報と前記押圧値を示す情報とを含むデータである操作ログを収集し、保存するステップと、
前記操作ログに含まれる複数のタッチ操作の位置を複数のグループに分割し、前記複数のグループの各々に対応するグループ領域を決定するステップと、
前記操作ログに基づいて、前記複数のグループ領域の各々における前記押圧値の閾値を決定するステップと、
前記押圧値が前記閾値以上であれば、前記タッチ操作が押圧力を伴う押し込み操作であると判断し、前記押圧値が前記閾値未満であれば、前記タッチ操作が前記押し込み操作以外の通常タッチ操作であると判断するステップと、
を有することを特徴とする操作識別方法。 - コンピュータに、
タッチパネルの操作面に対して行われるタッチ操作によって前記タッチパネルから出力される信号に基づいて、前記タッチ操作の位置を示す座標情報を生成する処理と、
前記タッチ操作によって前記タッチパネルの操作面に付与された押圧力に対応する押圧値を生成する処理と、
前記座標情報と前記押圧値を示す情報とを含むデータである操作ログを収集し、保存する処理と、
前記操作ログに含まれる複数のタッチ操作の位置を複数のグループに分割し、前記複数のグループの各々に対応するグループ領域を決定する処理と、
前記操作ログに基づいて、前記複数のグループ領域の各々における前記押圧値の閾値を決定する処理と、
前記押圧値が前記閾値以上であれば、前記タッチ操作が押圧力を伴う押し込み操作であると判断し、前記押圧値が前記閾値未満であれば、前記タッチ操作が前記押し込み操作以外の通常タッチ操作であると判断する処理と、
を実行させることを特徴とする操作識別プログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/034687 WO2021044535A1 (ja) | 2019-09-04 | 2019-09-04 | タッチパネル装置、操作識別方法、及び操作識別プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2021044535A1 JPWO2021044535A1 (ja) | 2021-10-21 |
JP6952942B2 true JP6952942B2 (ja) | 2021-10-27 |
Family
ID=74852198
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021543853A Active JP6952942B2 (ja) | 2019-09-04 | 2019-09-04 | タッチパネル装置、操作識別方法、及び操作識別プログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US11726615B2 (ja) |
JP (1) | JP6952942B2 (ja) |
CN (1) | CN114270299A (ja) |
DE (1) | DE112019007585B4 (ja) |
TW (1) | TW202111500A (ja) |
WO (1) | WO2021044535A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022083296A (ja) * | 2020-11-24 | 2022-06-03 | シャープ株式会社 | タッチパネルシステム、表示装置及びタッチパネルシステムの制御方法 |
JP2022166512A (ja) | 2021-04-21 | 2022-11-02 | シャープディスプレイテクノロジー株式会社 | タッチパネルシステム及び表示装置 |
CN113268162A (zh) * | 2021-06-02 | 2021-08-17 | 广州绿怡信息科技有限公司 | 屏幕更换检测方法及装置 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011034216A (ja) * | 2009-07-30 | 2011-02-17 | Canon Inc | 選択オブジェクト決定方法、オブジェクトの前後関係の決定方法及びその装置 |
JP2013161208A (ja) * | 2012-02-03 | 2013-08-19 | Sony Corp | 情報処理装置、情報処理方法およびプログラム |
CN102722238B (zh) * | 2012-04-20 | 2016-04-27 | 深圳市汇顶科技股份有限公司 | 一种触摸终端识别确认型触摸手势的方法及系统 |
JP2013246482A (ja) * | 2012-05-23 | 2013-12-09 | Sharp Corp | 操作入力装置 |
JP2015052819A (ja) * | 2013-09-05 | 2015-03-19 | シャープ株式会社 | 電子機器 |
JP6038202B2 (ja) | 2015-02-06 | 2016-12-07 | 京セラドキュメントソリューションズ株式会社 | 入力装置および電子機器 |
US10222889B2 (en) * | 2015-06-03 | 2019-03-05 | Microsoft Technology Licensing, Llc | Force inputs and cursor control |
CN106325574B (zh) * | 2015-06-26 | 2019-11-15 | 小米科技有限责任公司 | 在触摸屏上监测触摸的方法及装置 |
JP6462519B2 (ja) * | 2015-07-23 | 2019-01-30 | シャープ株式会社 | 情報処理装置、情報処理プログラムおよび情報処理方法 |
CN106708310A (zh) * | 2015-12-31 | 2017-05-24 | 深圳市汇顶科技股份有限公司 | 通过压力检测有效触摸点的方法及装置 |
JP2017138644A (ja) * | 2016-02-01 | 2017-08-10 | 東洋インキScホールディングス株式会社 | センサ装置、タッチ・プッシュ判定方法及びタッチ・プッシュ判定プログラム |
DE112016007545T5 (de) * | 2016-12-26 | 2019-09-19 | Mitsubishi Electric Corporation | Tastfeld-eingabeeinrichtung, tastgesten-beurteilungseinrichtung, tastgesten-beurteilungsverfahren und tastgesten-beurteilungs-programm |
CN109656493A (zh) * | 2017-10-10 | 2019-04-19 | 中兴通讯股份有限公司 | 控制方法及装置 |
WO2019150468A1 (ja) * | 2018-01-31 | 2019-08-08 | 三菱電機株式会社 | タッチパネル装置 |
-
2019
- 2019-09-04 DE DE112019007585.3T patent/DE112019007585B4/de active Active
- 2019-09-04 CN CN201980099492.5A patent/CN114270299A/zh active Pending
- 2019-09-04 WO PCT/JP2019/034687 patent/WO2021044535A1/ja active Application Filing
- 2019-09-04 JP JP2021543853A patent/JP6952942B2/ja active Active
- 2019-12-13 TW TW108145723A patent/TW202111500A/zh unknown
-
2022
- 2022-02-01 US US17/590,168 patent/US11726615B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN114270299A (zh) | 2022-04-01 |
TW202111500A (zh) | 2021-03-16 |
US11726615B2 (en) | 2023-08-15 |
WO2021044535A1 (ja) | 2021-03-11 |
US20220155901A1 (en) | 2022-05-19 |
DE112019007585B4 (de) | 2023-10-12 |
JPWO2021044535A1 (ja) | 2021-10-21 |
DE112019007585T5 (de) | 2022-04-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6952942B2 (ja) | タッチパネル装置、操作識別方法、及び操作識別プログラム | |
CN107690609B (zh) | 力输入和光标控制 | |
JP5598104B2 (ja) | 情報処理装置、情報処理方法及びコンピュータプログラム | |
CN105556443B (zh) | 使用动态阈值对压感板的点击检测的方法和设备 | |
KR101424259B1 (ko) | 휴대단말에서 입력 피드백 제공 방법 및 장치 | |
KR100259452B1 (ko) | 터치스크린용 가상 포인팅 디바이스 | |
KR100255284B1 (ko) | 가상 포인팅 디바이스를 생성하기 위한 컴퓨터 장치, 컴퓨터 시스템의 지시 방법 및 컴퓨터 사용가능 매체를 구비한 제조 물품 | |
KR100260866B1 (ko) | 터치스크린포인팅디바이스의분리를위한방법및시스템 | |
KR100255285B1 (ko) | 가상 포인팅 디바이스를 생성하기 위한 컴퓨터 시스템, 컴퓨터 시스템의 지시 방법, 및 컴퓨터 사용가능 매체를 구비한 제조 물품 | |
US7737955B2 (en) | Electronic device and method providing a touch-based interface for a display control | |
US20090066659A1 (en) | Computer system with touch screen and separate display screen | |
KR20140145579A (ko) | 사용자 입력 의도 분류 기법 | |
KR20100129424A (ko) | 터치스크린의 접촉위치 및 접촉힘의 세기를 이용한 사용자 인터페이스 제공 방법 및 장치 | |
WO2005022372A1 (en) | Method and device for recognizing a dual point user input on a touch based user input device | |
KR19980032332A (ko) | 터치스크린 포인팅 디바이스의 분리 및 합체 | |
US9405393B2 (en) | Information processing device, information processing method and computer program | |
KR20170061560A (ko) | 사용자 입력을 획득하기 위한 방법 및 전자장치 | |
CN107179849B (zh) | 终端及其输入控制方法、计算机可读存储介质 | |
CN107037874B (zh) | 重压和移动手势 | |
CN107980116B (zh) | 悬浮触控感测方法、悬浮触控感测系统及悬浮触控电子设备 | |
US9134843B2 (en) | System and method for distinguishing input objects | |
CN106126099B (zh) | 信息处理方法及电子设备 | |
KR100859882B1 (ko) | 터치 기반 사용자 입력 장치상의 듀얼 포인트 사용자입력을 인지하기 위한 방법 및 장치 | |
CN107949825B (zh) | 针对降落-抬起事件的位置过滤 | |
CN103064557A (zh) | 基于触屏坐标与加速度向电子设备输入信息的方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210730 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20210730 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210831 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210928 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6952942 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |