JP5881824B2 - タッチスクリーン端末における方法及びタッチスクリーン端末 - Google Patents

タッチスクリーン端末における方法及びタッチスクリーン端末 Download PDF

Info

Publication number
JP5881824B2
JP5881824B2 JP2014513906A JP2014513906A JP5881824B2 JP 5881824 B2 JP5881824 B2 JP 5881824B2 JP 2014513906 A JP2014513906 A JP 2014513906A JP 2014513906 A JP2014513906 A JP 2014513906A JP 5881824 B2 JP5881824 B2 JP 5881824B2
Authority
JP
Japan
Prior art keywords
touch screen
application program
mapping
input device
touch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014513906A
Other languages
English (en)
Other versions
JP2014516185A (ja
Inventor
劍 邱
劍 邱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Snail Technology Digital Co Ltd
Suzhou Snail Digital Technology Co Ltd
Original Assignee
Suzhou Snail Technology Digital Co Ltd
Suzhou Snail Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Snail Technology Digital Co Ltd, Suzhou Snail Digital Technology Co Ltd filed Critical Suzhou Snail Technology Digital Co Ltd
Publication of JP2014516185A publication Critical patent/JP2014516185A/ja
Application granted granted Critical
Publication of JP5881824B2 publication Critical patent/JP5881824B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

本発明は、電子技術に関し、特に、タッチスクリーン端末の制御に関する。
タッチスクリーン(touch screen)は、タッチパネルとも称し、接触などの入力信号を受信することができる感応式の液晶表示装置である。タッチスクリーン上の仮想ボタンに指又はスタイラスが接触すると、タッチスクリーン上の触覚フィードバックが予めプログラミングされたプログラムに基づき、各種連結装置を駆動し、機械式の押しボタンの代わりに使用することができる。また、液晶表示画面に様々な映像効果を表示することができる。タッチスクリーンは、最新のコンピュータ入力設備であり、簡単で便利で自然なマンマシンコミュニケーション方式であるため、広く運用されている。また、タッチスクリーンに対応するアプリケーションプログラムが多く開発されている。
タッチ操作とは、ユーザが指又はスタイラスを使用してタッチスクリーン上をクリックして操作することを指す。このような操作は、良好な相互作用性を有するため、操作を簡単に直感的に行うことができる。しかし、マンマシンコミュニケーションインターフェースとして、タッチスクリーンの操作は、以下(1)及び(2)の欠点を有する。(1)タッチスクリーンの操作は、現実的な操作感触がなく、ハードウェアの押しボタンを押すような反発作用がないため、タッチスクリーンでアプリケーションプログラムを操作する場合、操作感が悪い。(2)操作を正確に行いにくく、指又はスタイラスで操作する際、実際のタッチ領域とユーザが認識するタッチ領域との間に偏移が生じたり、タッチスクリーン自身に偏移が存在し、ユーザがタッチ領域を操作しても反応がない場合があるため、操作感が悪い。
本発明は、従来技術におけるタッチスクリーン用アプリケーションプログラムの仮想アイコン操作の操作感触がなく、正確に位置決めできず、操作感が悪い問題を解決することができるタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法及びタッチスクリーン端末を提供することにある。
上述の課題を解決するために、請求項1の発明は、タッチスクリーン用アプリケーションプログラムを実行するステップと、タッチスクリーン用アプリケーションプログラムに対応し、タッチイベントとハードウェア入力装置との間のマッピングルール情報を有するマッピング配置ファイルをロードするステップと、ハードウェア入力装置の操作コマンドを取得し、マッピング配置ファイル中のマッピングルール情報に基づき、操作コマンドを解析し、操作コマンドをタッチイベントに変換するステップと、変換したタッチイベントに基づき、タッチスクリーン用アプリケーションプログラムに対して操作を行うステップと、を含むことを特徴とするタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法である。
請求項2の発明は、タッチスクリーン用アプリケーションプログラムを実行するステップの前に、タッチスクリーン用アプリケーションプログラムに対応するマッピング配置ファイルを準備し、マッピング配置ファイルを保存するステップを更に含むことを特徴とする請求項1に記載のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法である。
請求項3の発明は、ハードウェア入力装置の操作コマンドを取得し、マッピング配置ファイル中のマッピングルール情報に基づき、操作コマンドを解析し、操作コマンドをタッチイベントに変換するステップは、ハードウェア入力装置の動作を検出すると、ハードウェア入力装置に対応するハードウェア番号を取得するステップと、ハードウェア番号に基づき、マッピング配置ファイル中から対応するタッチスクリーンの幾何パラメータ情報を照会するステップと、ハードウェア入力装置の動作をタッチイベントに変換するステップと、を含むことを特徴とする請求項2に記載のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法である。
請求項4の発明は、ハードウェア入力装置は、押しボタン及び/又は操作レバーを有することを特徴とする請求項1乃至3に記載のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法である。
請求項5の発明は、タッチイベントとハードウェア入力装置との間のマッピングルール情報は、タッチスクリーン用アプリケーションプログラム中の仮想アイコンの位置のタッチイベント及び押しボタンのマッピングルール情報及び/又は、タッチスクリーン用アプリケーションプログラム中の仮想アイコンの位置のタッチイベント及び操作レバーのマッピングルール情報を有することを特徴とする請求項1乃至4に記載のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法である。
請求項6の発明は、タッチスクリーン用アプリケーションプログラムを実行する起動実行モジュールと、タッチスクリーン用アプリケーションプログラムに対応し、タッチイベントとハードウェア入力装置との間のマッピングルール情報を有するマッピング配置ファイルをロードするロード解析モジュールと、ハードウェア入力装置の操作コマンドを取得し、マッピング配置ファイル中のマッピングルール情報に基づき、操作コマンドを解析し、操作コマンドをタッチイベントに変換する取得変換モジュールと、変換されたタッチイベントに基づき、タッチスクリーン用アプリケーションプログラムに対して操作を行うイベント実行モジュールと、を備えることを特徴とするタッチスクリーン端末である。
請求項7の発明は、タッチスクリーン用アプリケーションプログラムに対応するマッピング配置ファイルを準備し、マッピング配置ファイルを保存する準備保存モジュールを更に備えることを特徴とする請求項6に記載のタッチスクリーン端末である。
請求項8の発明は、取得変換モジュールは、ハードウェア入力装置の動作を検出すると、ハードウェア入力装置に対応するハードウェア番号を取得する番号取得ユニットと、ハードウェア番号に基づき、マッピング配置ファイル中から対応するタッチスクリーンの幾何パラメータ情報を照会する照会ユニットと、ハードウェア入力装置の動作をタッチイベントに変換する変換ユニットと、を更に有することを特徴とする請求項7に記載のタッチスクリーン端末である。
請求項9の発明は、ハードウェア入力装置は、押しボタン及び/又は操作レバーを有することを特徴とする請求項6乃至8に記載のタッチスクリーン端末である。
請求項10の発明は、タッチイベントとハードウェア入力装置との間のマッピングルール情報は、タッチスクリーン用アプリケーションプログラム中の仮想アイコンの位置のタッチイベント及び押しボタンのマッピングルール情報及び/又は、タッチスクリーン用アプリケーションプログラム中の仮想アイコンの位置のタッチイベント及び操作レバーのマッピングルール情報を有することを特徴とする請求項6乃至9に記載のタッチスクリーン端末である。
本発明を実施することにより、ハードウェア入力装置を使用してタッチスクリーン用アプリケーションプログラムを操作することができるため、従来技術におけるタッチスクリーンを操作する際の操作感触がなく、正確に位置決めできず、操作感が悪い問題を解決することができる。
本発明のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法の第1実施例を示す流れ図である。 本発明のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法の第2実施例を示す流れ図である。 図2中のステップS204の詳細内容を示す流れ図である。 本発明のタッチスクリーン端末の第1実施例を示すブロック図である。 本発明のタッチスクリーン端末の第2実施例を示すブロック図である。 本発明のタッチスクリーン用アプリケーションプログラムのインターフェースを示す平面図である。
本発明の実施例を図面と合わせて説明し、本発明の技術を詳細且つ完全に説明するが、以下に示す実施例は、本発明の一部の実施例であり、全ての実施例ではない。また、本発明の実施例に基づき、当業者が創造的な労働を行わない前提の下で実現可能な他の全ての実施例は、何れも本発明の保護範囲に属する。
図1を参照する。図1は、本発明のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法の第1実施例を示す流れ図である。図1に示すように、本実施例における発明のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法は、以下S101〜S104のステップを含む。
S101:タッチスクリーン用アプリケーションプログラムを実行する。
S102:タッチスクリーン用アプリケーションプログラムに対応し、タッチイベントとハードウェア入力装置との間のマッピングルール情報を有するマッピング配置ファイルをロードする。
具体的に述べると、タッチスクリーン用アプリケーションプログラムによって対応するマッピング配置ファイルが異なるため、タッチスクリーン用アプリケーションプログラムを起動実行した後、システムは、マッチングするマッピング配置ファイルを呼び出す必要がある。仮に、タッチスクリーン端末内にタッチスクリーン用アプリケーションプログラムA、タッチスクリーン用アプリケーションプログラムB及びタッチスクリーン用アプリケーションプログラムCがインストールされており、それぞれ対応するマッピング配置ファイルをファイル1、ファイル2及びファイル3とする。ユーザがタッチスクリーン用アプリケーションプログラムAを起動実行すると、システムは、対応するマッピング配置ファイルであるファイル1を呼び出し、マッピング配置ファイル中のハードウェア入力装置とタッチスクリーン用アプリケーションプログラムの仮想アイコン部分のタッチイベントとのマッピング関係を解析し、マッピング関係をシステムの内部メモリにロードする。
S103:ハードウェア入力装置の操作コマンドを取得し、マッピング配置ファイル中のマッピングルール情報に基づき、操作コマンドを解析し、操作コマンドをタッチイベントに変換する。
具体的に述べると、タッチスクリーン端末がハードウェア入力装置の操作コマンドを取得すると、システムは、ハードウェア入力装置とタッチスクリーン用アプリケーションプログラムの仮想アイコン部分のタッチイベントとのマッピング関係に基づき、ハードウェア入力装置の操作コマンドをタッチスクリーン用アプリケーションプログラムの対応動作の実行をトリガするタッチイベントに変換する。タッチスクリーン端末が2つ以上のハードウェア入力装置の操作コマンドを取得すると、システムは、マッピングルール情報に基づき、複数の操作コマンドを同数のタッチイベントに変換する。
S104:変換したタッチイベントに基づき、タッチスクリーン用アプリケーションプログラムに対して操作を行う。
具体的に述べると、システムは、タッチイベントをタッチスクリーン用アプリケーションプログラムのフォーカスウィンドウに配布し、対応する操作を実行する。
ここで、本発明中のタッチスクリーン用アプリケーションプログラムとは、プログラムインターフェース上に仮想アイコンを有するタッチスクリーン用アプリケーションプログラムを指す。仮想アイコンは、タッチスクリーンの固定位置に位置する。ユーザは、所定の仮想アイコンに接触することにより、所定の操作を実行することができる。タッチスクリーン上に仮想アイコンが表示されず、タッチスクリーンの所定領域により、所定操作を実行することができるタッチスクリーン用アプリケーションプログラムの場合、所定領域は、背景色が透明の仮想アイコンに属する。
本発明は、外部入力装置とタッチイベントとのマッピングにより、タッチスクリーンの操作をハードウェア入力装置上で行うことができるため、正確な制御を実現し、ユーザの操作感を高めることができる。
図2を参照する。図2は、本発明のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法の第2実施例を示す流れ図である。図2に示すように、本実施例における発明のタッチスクリーン用アプリケーションプログラムの仮想アイコン操作変換方法は、以下S201〜S205のステップを含む。
S201:タッチスクリーン用アプリケーションプログラムに対応するマッピング配置ファイルを準備し、マッピング配置ファイルを保存する。
具体的に述べると、タッチスクリーン用アプリケーションプログラムの操作インターフェース上の仮想アイコンの特徴に応じ、異なるハードウェア入力装置を設置し、タッチスクリーンとマッピングを行う。仮想アイコンが操作レバーである場合、ハードウェアの操作レバーを設置してマッピングを行う。仮想アイコンが押しボタンである場合、ハードウェアの押しボタンを設置してマッピングを行う。仮想アイコンがスライドブロックである場合、ハードウェアの圧力センサボタンを設置してマッピングを行う。設置が完了した後、マッピング関係の情報をマッピング配置ファイルに保存する。
S202:タッチスクリーン用アプリケーションプログラムを実行する。
S203:タッチスクリーン用アプリケーションプログラムに対応し、タッチイベントとハードウェア入力装置との間のマッピングルール情報を有するマッピング配置ファイルをロードする。
具体的に述べると、タッチスクリーン用アプリケーションプログラムによって対応するマッピング配置ファイルが異なるため、タッチスクリーン用アプリケーションプログラムを起動実行した後、システムは、マッチングするマッピング配置ファイルを呼び出す必要がある。仮に、タッチスクリーン端末内にタッチスクリーン用アプリケーションプログラムA、タッチスクリーン用アプリケーションプログラムB及びタッチスクリーン用アプリケーションプログラムCがインストールされており、それぞれ対応するマッピング配置ファイルをファイル1、ファイル2及びファイル3とする。ユーザがタッチスクリーン用アプリケーションプログラムAを起動実行すると、システムは、対応するマッピング配置ファイルであるファイル1を呼び出し、マッピング配置ファイル中のハードウェア入力装置とタッチスクリーン用アプリケーションプログラムの仮想アイコン部分のタッチイベントとのマッピング関係を解析し、マッピング関係をシステムの内部メモリにロードする。
S204:ハードウェア入力装置の操作コマンドを取得し、マッピング配置ファイル中のマッピングルール情報に基づき、操作コマンドを解析し、操作コマンドをタッチイベントに変換する。
具体的に述べると、タッチスクリーン端末がハードウェア入力装置の操作コマンドを取得すると、システムは、ハードウェア入力装置とタッチスクリーン用アプリケーションプログラムの仮想アイコン部分のタッチイベントとのマッピング関係に基づき、ハードウェア入力装置の操作コマンドをタッチスクリーン用アプリケーションプログラムの対応動作の実行をトリガするタッチイベントに変換する。タッチスクリーン端末が2つ以上のハードウェア入力装置の操作コマンドを取得すると、システムは、マッピングルール情報に基づき、複数の操作コマンドを同数のタッチイベントに変換する。
図3に示すように、ステップS204は、ステップS2041〜S2043を更に含む。
S2041:ハードウェア入力装置の動作を検出すると、ハードウェア入力装置に対応するハードウェア番号を取得する。
具体的に述べると、システムは、ハードウェア入力装置の動作を検出すると、即座に、ハードウェアに対応するハードウェア番号を照会して取得する。例えば、システムが操作レバーの揺動を検出すると、即座に、操作レバーのハードウェア番号11を照会して取得し、その後、次のステップを実行する。
S2042:ハードウェア番号に基づき、マッピング配置ファイル中から対応するタッチスクリーンの幾何パラメータ情報を照会する。
具体的に述べると、マッピング配置ファイル中のマッピング関係は、仮想アイコン部分のタッチイベントの幾何パラメータ情報とハードウェア入力装置のハードウェア番号とのマッピング関係である。システムは、取得した操作レバーのハードウェア番号11を使用してマッピングされるタッチイベントの幾何パラメータ情報(中心点座標(77、450)、最大偏移量50画素)を照会する。
S2043:ハードウェア入力装置の動作をタッチイベントに変換する。
具体的に述べると、ハードウェアの操作レバーは、アナログ量入力装置であり、水平方向及び垂直方向の変移情報を入力することができる。ハードウェアの操作レバーと仮想の操作レバーのタッチイベントとの変換を行うために、ハードウェアの操作レバーのアナログ量入力と仮想の操作レバーの画素移動とをマッチングする必要がある。仮に、ハードウェアの操作レバーの最大偏移量が65535スケールで、仮想の操作レバーの最大偏移量が50画素の場合、上記2つの偏移量パラメータの比例関係により、ハードウェアの操作レバーの入力を仮想の操作レバーの画素出力に変換することができる。仮想の操作レバーの中心点座標が確定しているため、ハードウェアの操作レバーを左にフルスケールの半分揺動させると、対応する仮想の操作レバーのタッチイベントは、タッチスクリーンの座標(77、450)から左に25画素偏移したタッチイベントとなる。
S205:変換したタッチイベントに基づき、タッチスクリーン用アプリケーションプログラムに対して操作を行う。
本発明の実施例においては、アプリケーションプログラムのインターフェースは必要なく、ハードウェア入力装置とタッチスクリーンのマッピング関係を設置すれば、タッチスクリーンの操作をハードウェア入力装置上で行うことができ、正確な制御を実現し、ユーザの操作感を高めることができる。
図4を参照する。図4は、本発明のタッチスクリーン端末の第1実施例を示すブロック図である。図4に示すように、本発明のタッチスクリーン端末の第1実施例においては、起動実行モジュール41、ロード解析モジュール42、取得変換モジュール43及びイベント実行モジュール44を含む。
起動実行モジュール41は、タッチスクリーン用アプリケーションプログラムを実行する。
ロード解析モジュール42は、タッチスクリーン用アプリケーションプログラムに対応し、タッチイベントとハードウェア入力装置との間のマッピングルール情報を有するマッピング配置ファイルをロードする。
具体的に述べると、タッチスクリーン用アプリケーションプログラムによって対応するマッピング配置ファイルが異なるため、起動実行モジュール41がタッチスクリーン用アプリケーションプログラムを起動実行した後、システムは、マッチングするマッピング配置ファイルを呼び出す必要がある。仮に、タッチスクリーン端末内にタッチスクリーン用アプリケーションプログラムA、タッチスクリーン用アプリケーションプログラムB及びタッチスクリーン用アプリケーションプログラムCがインストールされており、それぞれ対応するマッピング配置ファイルをファイル1、ファイル2及びファイル3とする。起動実行モジュール41がタッチスクリーン用アプリケーションプログラムAを起動実行すると、ロード解析モジュール42は、対応するマッピング配置ファイルであるファイル1を呼び出し、マッピング配置ファイル中のハードウェア入力装置とタッチスクリーン用アプリケーションプログラムの仮想アイコン部分のタッチイベントとのマッピング関係を解析し、マッピング関係をシステムの内部メモリにロードする。
取得変換モジュール43は、ハードウェア入力装置の操作コマンドを取得し、マッピング配置ファイル中のマッピングルール情報に基づき、操作コマンドを解析し、操作コマンドをタッチイベントに変換する。
具体的に述べると、タッチスクリーン端末がハードウェア入力装置の操作コマンドを取得すると、取得変換モジュール43は、ハードウェア入力装置とタッチスクリーン用アプリケーションプログラムの仮想アイコン部分のタッチイベントとのマッピング関係に基づき、ハードウェア入力装置の操作コマンドをタッチスクリーン用アプリケーションプログラムの対応動作の実行をトリガするタッチイベントに変換する。タッチスクリーン端末が2つ以上のハードウェア入力装置の操作コマンドを取得すると、取得変換モジュール43は、マッピングルール情報に基づき、複数の操作コマンドを同数のタッチイベントに変換する。
イベント実行モジュール44は、変換されたタッチイベントに基づき、タッチスクリーン用アプリケーションプログラムに対して操作を行う。
具体的に述べると、イベント実行モジュール44は、タッチイベントをタッチスクリーン用アプリケーションプログラムのフォーカスウィンドウに配布し、対応する操作を実行する。
ここで、本発明中のタッチスクリーン用アプリケーションプログラムとは、プログラムインターフェース上に仮想アイコンを有するタッチスクリーン用アプリケーションプログラムを指す。仮想アイコンは、タッチスクリーンの固定位置に位置する。ユーザは、所定の仮想アイコンに接触することにより、所定の操作を実行することができる。タッチスクリーン上に仮想アイコンが表示されず、タッチスクリーンの所定領域により、所定操作を実行することができるタッチスクリーン用アプリケーションプログラムの場合、所定領域は、背景色が透明の仮想アイコンに属する。
本発明は、外部入力装置とタッチイベントとのマッピングにより、タッチスクリーンの操作をハードウェア入力装置上で行うことができるため、正確な制御を実現し、ユーザの操作感を高めることができる。
図5を参照する。図5は、本発明のタッチスクリーン端末の第2実施例を示すブロック図である。図5に示すように、本発明のタッチスクリーン端末の第2実施例においては、起動実行モジュール41、ロード解析モジュール42、取得変換モジュール43及びイベント実行モジュール44を含む以外に、準備保存モジュール45を更に含む。
準備保存モジュール45は、タッチスクリーン用アプリケーションプログラムに対応するマッピング配置ファイルを準備し、マッピング配置ファイルを保存する。
具体的に述べると、タッチスクリーン用アプリケーションプログラムの操作インターフェース上の仮想アイコンの特徴に応じ、準備保存モジュール45は、異なるハードウェア入力装置に設置され、タッチスクリーンとマッピングを行う。仮想アイコンが操作レバーである場合、準備保存モジュール45は、ハードウェアの操作レバーに設置されてマッピングを行う。仮想アイコンが押しボタンである場合、準備保存モジュール45は、押しボタンに設置されてマッピングを行う。仮想アイコンがスライドブロックである場合、準備保存モジュール45は、圧力センサボタンに設置されてマッピングを行う。設置が完了した後、準備保存モジュール45は、マッピング関係の情報をマッピング配置ファイルに保存する。
取得変換モジュール43は、番号取得ユニット431、照会ユニット432及び変換ユニット433を含む。
番号取得ユニット431は、ハードウェア入力装置の動作を検出すると、ハードウェア入力装置に対応するハードウェア番号を取得する。
照会ユニット432は、ハードウェア番号に基づき、マッピング配置ファイル中から対応するタッチスクリーンの幾何パラメータ情報を照会する。
変換ユニット433は、ハードウェア入力装置の動作をタッチイベントに変換する。
ここで、押しボタンで制御するカーレースゲームを例示して説明を行う。図6を参照する。図6は、本発明のタッチスクリーン用アプリケーションプログラムのインターフェースを示す平面図である。図6に示すように、矩形領域61は、ブレーキ制御領域である。矩形領域61内の任意の一点をクリックすると、レースカーにブレーキをかけることができる。矩形領域62は、表示領域である。矩形領域63は、加速減速制御領域である。上部から下部に矩形領域63内の画素点をクリックすることにより、レースカーの速度を制御することができる。ボタンAは、ハードウェアの押しボタン64であり、ボタンBは、ハードウェアの圧力センサボタンである。ボタンAと矩形領域61部分のタッチイベントとがマッピングされ、ボタンBと矩形領域63部分のタッチイベントとがマッピングされる。
加速減速制御領域の制御は、連続変化するため、テープ状センサを有するボタンにマッピングを行う。一般に、センサは、連続変化する信号であるアナログ量信号を検出するため、外部から実際に入力される連続変化する信号に基づき、タッチスクリーン上で画素を連続変化させることができる。本実施例中、ハードウェアの圧力センサボタンであるボタンBに加速減速制御領域のタッチイベントをマッピングし、ハードウェアの押しボタンであるボタンAにブレーキ制御領域をマッピングする。
ボタンAを押すと、システムに割り込みが発生し、番号取得ユニット431がボタンAに対応するキーバリュー14を取得する。照会ユニット432は、キーバリュー14に基づき、マッピング配置ファイル中の対応するタッチスクリーンの幾何パラメータ情報(中心点座標(28、228)、最大偏移量0画素)を照会する。変換ユニット433は、ボタンAを押す動作をタッチスクリーン(28、228)部分のクリックイベントに変換する。中心点座標は、ブレーキ制御領域の任意の一点の座標値である。
ボタンBを押すと、システムに割り込みが発生し、番号取得ユニット431がボタンBに対応するキーバリュー15を取得する。照会ユニット432は、キーバリュー15に基づき、マッピング配置ファイル中の対応するタッチスクリーンの幾何パラメータ情報(中心点座標(763、2)、最大偏移量−470画素、偏移角度−270)を照会する。変換ユニット433は、ボタンBを押す動作をタッチスクリーン座標(763、2)を起点とし、Y軸に沿った負の方向のタッチイベントに変換する。圧力センサの最大スケールは、Mであり、加速減速制御領域のY軸の負の方向の最大偏移画素は、Nであり、比例係数k=N/Mである。ボタンBから入力されるアナログ量をPとすると、対応するタッチスクリーン上の画素偏移量は、k・P画素である。M、N及びPは整数であるため、この際、変換ユニット433は、ボタンBを押す動作をタッチスクリーン座標(763、2+k・P)部分のタッチ動作に変換する。
本発明の実施例においては、アプリケーションプログラムのインターフェースは必要なく、ハードウェア入力装置とタッチスクリーンのマッピング関係を設置すれば、タッチスクリーンの操作をハードウェア入力装置上で行うことができ、正確な制御を実現し、ユーザの操作感を高めることができる。
当該者は、上述の実施例中の全て又は一部のステップを理解して実施することができ、コンピュータプログラムにより、関連するハードウェアにコマンドを出すことができる。上述のステップは、コンピュータの記憶媒体に保存することができる。上述のステップを実行する際、上述の各方法の実施例のステップを含むことができる。ここで、上述の記憶媒体は、磁気ディスク、光ディスク、ROM(Read−Only Memory)、RAM(Random Access Memory)などである。
以上の説明は、本発明の好適な実施例を示すものであり、本発明の権利範囲を限定するものではない。当業者は、上述の実施例の全て又は一部のステップを理解して実施することができ、本発明の特許請求の範囲に基づく、同等効果の変更は、本発明の範囲に含まれる。
4 タッチスクリーン端末
41 起動実行モジュール
42 ロード解析モジュール
43 取得変換モジュール
431 番号取得ユニット
432 照会ユニット
433 変換モジュール
44 イベント実行モジュール
45 準備保存モジュール
61 矩形領域
62 矩形領域
63 矩形領域
64 ハードウェアの押しボタン
65 ハードウェアの圧力センサボタン

Claims (6)

  1. タッチスクリーン端末における方法であって、
    タッチスクリーン用アプリケーションプログラムを実行するステップと、
    前記タッチスクリーン用アプリケーションプログラムに対応し、タッチイベントとハードウェア入力装置との間のマッピングルール情報を有するマッピング配置ファイルをロードするステップと、
    前記ハードウェア入力装置の操作コマンドを取得し、前記マッピング配置ファイル中の前記マッピングルール情報に基づき、前記操作コマンドを解析し、前記操作コマンドをタッチイベントに変換するステップと、
    前記変換したタッチイベントに基づき、前記タッチスクリーン用アプリケーションプログラムに対して操作を行うステップと、を含み、
    前記タッチスクリーン用アプリケーションプログラムを実行するステップの前に、
    前記タッチスクリーン用アプリケーションプログラムに対応する前記マッピング配置ファイルを準備し、前記マッピング配置ファイルを保存するステップを更に含み、
    前記ハードウェア入力装置の操作コマンドを取得し、前記マッピング配置ファイル中の前記マッピングルール情報に基づき、前記操作コマンドを解析し、前記操作コマンドをタッチイベントに変換するステップは、
    前記ハードウェア入力装置の動作を検出すると、前記ハードウェア入力装置に対応するハードウェア番号を取得するステップと、
    前記ハードウェア番号に基づき、前記マッピング配置ファイル中から対応するタッチスクリーンの幾何パラメータ情報を照会するステップと、
    前記ハードウェア入力装置の動作をタッチイベントに変換するステップと、を含むことを特徴とする方法。
  2. 前記ハードウェア入力装置は、押しボタン及び/又は操作レバーを有することを特徴とする請求項1に記載の方法。
  3. 前記タッチイベントと前記ハードウェア入力装置との間のマッピングルール情報は、
    前記タッチスクリーン用アプリケーションプログラム中の仮想アイコンの位置のタッチスクリーンイベント及び押しボタンのマッピングルール情報及び/又は、
    前記タッチスクリーン用アプリケーションプログラム中の仮想アイコンの位置のタッチイベント及び操作レバーのマッピングルール情報を有することを特徴とする請求項2に記載の方法。
  4. タッチスクリーン用アプリケーションプログラムを実行する起動実行モジュールと、
    前記タッチスクリーン用アプリケーションプログラムに対応し、タッチイベントとハードウェア入力装置との間のマッピングルール情報を有するマッピング配置ファイルをロードするロード解析モジュールと、
    前記ハードウェア入力装置の操作コマンドを取得し、前記マッピング配置ファイル中のマッピングルール情報に基づき、前記操作コマンドを解析し、前記操作コマンドをタッチイベントに変換する取得変換モジュールと、
    前記変換されたタッチイベントに基づき、前記タッチスクリーン用アプリケーションプログラムに対して操作を行うイベント実行モジュールと、
    前記タッチスクリーン用アプリケーションプログラムに対応する前記マッピング配置ファイルを準備し、前記マッピング配置ファイルを保存する準備保存モジュールと、を備え、
    前記取得変換モジュールは、
    前記ハードウェア入力装置の動作を検出すると、前記ハードウェア入力装置に対応するハードウェア番号を取得する番号取得ユニットと、
    前記ハードウェア番号に基づき、前記マッピング配置ファイル中から対応するタッチスクリーンの幾何パラメータ情報を照会する照会ユニットと、
    前記ハードウェア入力装置の動作をタッチイベントに変換する変換ユニットと、を有することを特徴とするタッチスクリーン端末。
  5. 前記ハードウェア入力装置は、押しボタン及び/又は操作レバーを有することを特徴とする請求項4に記載のタッチスクリーン端末。
  6. 前記タッチイベントと前記ハードウェア入力装置との間のマッピングルール情報は、
    前記タッチスクリーン用アプリケーションプログラム中の仮想アイコンの位置のタッチイベント及び押しボタンのマッピングルール情報及び/又は、
    前記タッチスクリーン用アプリケーションプログラム中の仮想アイコンの位置のタッチイベント及び操作レバーのマッピングルール情報を有することを特徴とする請求項5に記載のタッチスクリーン端末。
JP2014513906A 2012-04-27 2012-11-29 タッチスクリーン端末における方法及びタッチスクリーン端末 Active JP5881824B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201210126872.3 2012-04-27
CN2012101268723A CN102707882A (zh) 2012-04-27 2012-04-27 虚拟图标触摸屏应用程序的操控转换方法及触摸屏终端
PCT/CN2012/085568 WO2013159521A1 (zh) 2012-04-27 2012-11-29 虚拟图标触摸屏应用程序的操控转换方法及触摸屏终端

Publications (2)

Publication Number Publication Date
JP2014516185A JP2014516185A (ja) 2014-07-07
JP5881824B2 true JP5881824B2 (ja) 2016-03-09

Family

ID=46900727

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014513906A Active JP5881824B2 (ja) 2012-04-27 2012-11-29 タッチスクリーン端末における方法及びタッチスクリーン端末

Country Status (7)

Country Link
US (1) US20140137014A1 (ja)
EP (1) EP2843521A4 (ja)
JP (1) JP5881824B2 (ja)
KR (1) KR20140148492A (ja)
CN (1) CN102707882A (ja)
EA (1) EA201491853A1 (ja)
WO (1) WO2013159521A1 (ja)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102707882A (zh) * 2012-04-27 2012-10-03 深圳瑞高信息技术有限公司 虚拟图标触摸屏应用程序的操控转换方法及触摸屏终端
CN104423818A (zh) * 2013-08-26 2015-03-18 联想(北京)有限公司 一种信息处理方法、装置及电子设备
KR20150051663A (ko) * 2013-11-05 2015-05-13 삼성전자주식회사 터치 입력에 반응하여 기능을 실행하는 방법 및 이를 구현하는 전자장치
CN103729065B (zh) * 2013-12-17 2018-01-30 深圳市慧为智能科技股份有限公司 触控操作映射到实体按键的系统及方法
US9227141B2 (en) * 2013-12-31 2016-01-05 Microsoft Technology Licensing, Llc Touch screen game controller
US20150202533A1 (en) * 2014-01-21 2015-07-23 Nvidia Corporation Mapping touchscreen gestures to ergonomic controls across application scenes
CN103914305B (zh) * 2014-04-10 2019-02-12 Oppo广东移动通信有限公司 一种移动终端上自由控制应用的方法及系统
CN104166480B (zh) * 2014-08-15 2018-09-04 小米科技有限责任公司 使用实体按键操控终端的方法及装置
US10162509B2 (en) * 2015-01-16 2018-12-25 Sharp Kabushiki Kaisha Terminal device
US20170024086A1 (en) * 2015-06-23 2017-01-26 Jamdeo Canada Ltd. System and methods for detection and handling of focus elements
KR101637165B1 (ko) * 2015-10-30 2016-07-07 주식회사 온매칭 다기능 컨트롤러
KR101637161B1 (ko) * 2015-10-30 2016-07-07 주식회사 온매칭 다기능 컨트롤 시스템
CN105320297A (zh) * 2015-11-16 2016-02-10 海信集团有限公司 一种终端设备的控制方法和装置
CN107493450A (zh) * 2016-06-12 2017-12-19 中兴通讯股份有限公司 视频呼叫业务按键管理方法及业务平台、终端
US10235809B2 (en) * 2016-06-30 2019-03-19 Microsoft Technology Licensing, Llc Reality to virtual reality portal for dual presence of devices
US11054894B2 (en) 2017-05-05 2021-07-06 Microsoft Technology Licensing, Llc Integrated mixed-input system
CN107908467A (zh) * 2017-10-30 2018-04-13 广东小天才科技有限公司 一种应用程序切换方法、装置及智能设备
ES2947297T3 (es) * 2017-11-07 2023-08-04 Huawei Tech Co Ltd Método y dispositivo de control táctil
CN108008992B (zh) * 2017-11-24 2020-08-18 南昌黑鲨科技有限公司 一种输入操作处理方法、处理装置及计算机可读存储介质
CN108762746A (zh) * 2018-05-28 2018-11-06 北京酷我科技有限公司 一种移动手势优化方法
CN108897457B (zh) * 2018-08-16 2024-03-01 上海飞智电子科技有限公司 触控装置组件以及触控系统
CN108992924A (zh) * 2018-08-21 2018-12-14 苏州蜗牛数字科技股份有限公司 一种触发有序触摸屏操作事件的方法
CN112394860B (zh) * 2019-08-14 2023-07-14 比亚迪股份有限公司 基于车辆的游戏触控方法和车辆
CN112328356B (zh) * 2020-10-21 2023-09-29 成都安易迅科技有限公司 Android与Windows的互通方法、装置、存储介质及计算机设备
CN113467654A (zh) * 2021-03-23 2021-10-01 中科创达软件股份有限公司 应用程序的控制方法、装置、电子设备及存储介质

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2939392B2 (ja) * 1992-06-09 1999-08-25 株式会社フジクラ エミュレータ
US20070061126A1 (en) * 2005-09-01 2007-03-15 Anthony Russo System for and method of emulating electronic input devices
US20090079702A1 (en) * 2007-09-25 2009-03-26 Nokia Corporation Method, Apparatus and Computer Program Product for Providing an Adaptive Keypad on Touch Display Devices
CN101498973B (zh) * 2008-01-30 2013-04-10 义隆电子股份有限公司 一种以多指手势进行触控操作的触控解译装置与方法
US20090213083A1 (en) * 2008-02-26 2009-08-27 Apple Inc. Simulation of multi-point gestures with a single pointing device
US20090273569A1 (en) * 2008-05-01 2009-11-05 Microsoft Corporation Multiple touch input simulation using single input peripherals
KR101511819B1 (ko) * 2008-09-04 2015-04-13 익스트림 리얼리티 엘티디. 영상 센서에 기반한 인간 기계장치 인터페이스를 제공하는 방법 시스템 및 소프트웨어
US8527894B2 (en) * 2008-12-29 2013-09-03 International Business Machines Corporation Keyboard based graphical user interface navigation
CN201489455U (zh) * 2009-08-05 2010-05-26 梁立人 带显示触摸屏的键盘
US20110157015A1 (en) * 2009-12-25 2011-06-30 Cywee Group Limited Method of generating multi-touch signal, dongle for generating multi-touch signal, and related control system
JP5513266B2 (ja) * 2010-06-09 2014-06-04 富士通コンポーネント株式会社 変換装置及びプログラム
CN202004841U (zh) * 2010-12-17 2011-10-05 北京文和时代科技有限公司 一种方便对游戏进行控制的终端通讯设备
US20120212422A1 (en) * 2011-02-21 2012-08-23 Iasolution Inc. Software Aided Physical Keyboard for a Touch-Screen
CN102209146B (zh) * 2011-05-20 2014-05-28 惠州Tcl移动通信有限公司 一种智能手机模拟平板电脑游戏杆的系统与方法
US9513799B2 (en) * 2011-06-05 2016-12-06 Apple Inc. Devices, methods, and graphical user interfaces for providing control of a touch-based user interface absent physical touch capabilities
CN102331822A (zh) * 2011-10-31 2012-01-25 靖江喜悦科技咨询有限公司 一种带有键盘功能的平板电脑皮套
CN102436308A (zh) * 2011-11-11 2012-05-02 陈文博 触摸屏虚拟按键实体化映射的方法及使用该方法的触摸屏游戏手机
US20130162519A1 (en) * 2011-12-23 2013-06-27 Sap Ag Cross-platform human input customization
CN102707882A (zh) * 2012-04-27 2012-10-03 深圳瑞高信息技术有限公司 虚拟图标触摸屏应用程序的操控转换方法及触摸屏终端

Also Published As

Publication number Publication date
WO2013159521A8 (zh) 2014-01-30
EA201491853A1 (ru) 2015-04-30
CN102707882A (zh) 2012-10-03
EP2843521A4 (en) 2016-01-20
JP2014516185A (ja) 2014-07-07
KR20140148492A (ko) 2014-12-31
EP2843521A1 (en) 2015-03-04
WO2013159521A1 (zh) 2013-10-31
US20140137014A1 (en) 2014-05-15

Similar Documents

Publication Publication Date Title
JP5881824B2 (ja) タッチスクリーン端末における方法及びタッチスクリーン端末
JP5922598B2 (ja) マルチタッチ利用、ジェスチャ及び実装
CN110417988B (zh) 一种界面显示方法、装置及设备
US9389981B2 (en) Hierarchical live graphs for performance data display
US8810509B2 (en) Interfacing with a computing application using a multi-digit sensor
US9348501B2 (en) Touch modes
KR20110036005A (ko) 가상 터치패드
CN106020678A (zh) 一种在移动设备进行触控操作的方法和装置
WO2016165066A1 (zh) 一种手势控制方法、装置、终端设备和存储介质
US9367230B2 (en) Interaction models for indirect interaction devices
KR20140033839A (ko) 터치스크린을 구비한 단말에서 한 손을 이용한 사용자 인터페이스 방법 및 장치
JP5713180B2 (ja) 検知領域がディスプレイの表示領域よりも小さくても同等時のように動作するタッチパネル装置
EP2801012B1 (en) Supporting different event models using a single input source
CN102520946A (zh) 一种基于嵌入式Linux的桌面系统的实现方法
EP2711805A1 (en) Method for handling a gesture-based user interface
CN113093961B (zh) 窗口切换方法、存储介质及相关设备
CN114760513A (zh) 一种显示设备及光标定位方法
EP2711804A1 (en) Method for providing a gesture-based user interface
CN102956098B (zh) 远距离光线遥控方法、遥控终端、显示设备及系统
KR20130115037A (ko) 마우스를 이용하여 터치 입력을 구현하기 위한 방법, 장치, 및 컴퓨터 판독 가능한 기록 매체
KR101229947B1 (ko) 스마트 드래그 제공 방법
CN114339343A (zh) 控制方法、装置、电子设备、介质和产品
WO2011093092A1 (ja) 情報端末装置および入力制御方法
TW201010302A (en) Touch apparatus and method for multi-function remote control
KR20120081307A (ko) Android 기반의 스마트폰에서 Gesture 입력을 사용한 그림 그리기 프로그램

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140423

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141015

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141028

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20150109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20150109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150128

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20150401

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20150401

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150707

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151007

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160202

R150 Certificate of patent or registration of utility model

Ref document number: 5881824

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250