JP2021117907A - Display control device - Google Patents
Display control device Download PDFInfo
- Publication number
- JP2021117907A JP2021117907A JP2020012679A JP2020012679A JP2021117907A JP 2021117907 A JP2021117907 A JP 2021117907A JP 2020012679 A JP2020012679 A JP 2020012679A JP 2020012679 A JP2020012679 A JP 2020012679A JP 2021117907 A JP2021117907 A JP 2021117907A
- Authority
- JP
- Japan
- Prior art keywords
- touch
- component
- display control
- touch panel
- control device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明はタッチパネルおよび触覚提示装置を備えた表示制御装置に関する。 The present invention relates to a display control device including a touch panel and a tactile presentation device.
近年、ユーザに対して様々な触覚情報を提示可能なタッチパネルが提供されている。このようなタッチパネルの応用例として、タッチ位置に表示されているUI部品、そのUI部品の論理状態、およびタッチ圧力に応じて異なる触覚情報を提示する技術が開示されている(例えば、特許文献1参照)。係る技術によれば、ユーザはタッチパネルを注視しなくても、タッチパネルをなぞって得られた触覚情報を頼りにUI部品を識別することができる。 In recent years, a touch panel capable of presenting various tactile information to a user has been provided. As an application example of such a touch panel, a technique for presenting different tactile information according to a UI component displayed at a touch position, a logical state of the UI component, and a touch pressure is disclosed (for example, Patent Document 1). reference). According to such a technique, a user can identify a UI component by relying on tactile information obtained by tracing the touch panel without gazing at the touch panel.
一方、一般的なタッチパネルの操作でUI部品を選択するには、その部品上でタッチダウンし、部品外にムーブすることなく、その部品上でタッチアップする必要がある。タッチパネルをなぞってUI部品を識別した際、そのUI部品を選択するには一度タッチアップして再度タッチする必要があるため、タッチ位置が変わり誤操作につながる課題があった。 On the other hand, in order to select a UI component by a general touch panel operation, it is necessary to touch down on the component and touch up on the component without moving outside the component. When a UI component is identified by tracing the touch panel, it is necessary to touch up and touch again to select the UI component, so that there is a problem that the touch position changes and leads to an erroneous operation.
本発明は前記の問題を鑑みてなされたものであり、触覚情報に基づいてUI部品を識別可能な表示制御装置において、誤操作を低減することを目的とする。 The present invention has been made in view of the above problems, and an object of the present invention is to reduce erroneous operations in a display control device capable of identifying UI components based on tactile information.
前記目的を達成するため、本発明の表示制御装置は1つ以上のUI部品を含むUI画面を表示するタッチパネルであって、タッチ位置に対応するUI部品を特定する手段、タッチ圧を検知する手段、特定したUI部品に応じた触覚情報を提示する手段を備え、タッチ圧が一定以上となった時に前記特定したUI部品に応じた処理を実行することを特徴とする。 In order to achieve the above object, the display control device of the present invention is a touch panel that displays a UI screen including one or more UI components, and is a means for identifying a UI component corresponding to a touch position and a means for detecting a touch pressure. It is characterized in that it includes means for presenting tactile information corresponding to the specified UI component, and executes processing according to the specified UI component when the touch pressure exceeds a certain level.
本発明の表示制御装置によれば、ユーザが触覚情報に基づいてUI部品を識別した際、タッチアップ後に再度タッチすることなく前記UI部品を選択することができるため、誤操作が低減される。 According to the display control device of the present invention, when a user identifies a UI component based on tactile information, the UI component can be selected without touching again after touch-up, so that erroneous operation is reduced.
[実施例1]
図1は、本発明の各実施形態を適用可能な表示制御装置100の一例の構成を示す。図1に示されるように、表示制御装置100は、一般的なパーソナルコンピュータ(以下、PC)を用いて構成可能なものである。
[Example 1]
FIG. 1 shows a configuration of an example of a
図1において、内部バス111に対してCPU101、ハードディスク(HD)102、メモリ103、表示制御部104、入力部105および触覚制御部106が接続される。内部バス111に接続される各部は、内部バス111を介して互いにデータのやりとりを行うことができる。
In FIG. 1, a
ハードディスク102は、画像データやその他のデータ、CPU101が動作するための各種プログラムなどが格納される。メモリ103は、例えばRAMからなる。表示制御手段、変更手段および算出手段としてのCPU101は、例えばハードディスク102に格納されるプログラムに従い、メモリ103をワークメモリとして用いて、この表示制御装置100の各部を制御する。なお、CPU101が動作するためのプログラムは、ハードディスク102に格納されるのに限られず、例えば図示されないROMに予め記憶しておいてもよい。
The
表示制御部104は、ディスプレイ110に対して画像を表示させるための表示信号を出力する。例えば、表示制御部104に対して、CPU101がプログラムに従い生成した表示制御信号が供給される。表示制御部104は、この表示制御信号に基づき表示信号を生成してディスプレイ110に対して出力する。例えば、表示制御部104は、CPU101が生成する表示制御信号に基づき、GUI(Graphical User Interface)を構成するGUI画面をディスプレイ110に対して表示させる。
The
入力部105は圧力センサを備えたタッチパネルであり、ユーザ操作を受け付け、操作に応じた制御信号を生成し、CPU101に供給する。タッチパネルは、例えば平面的に構成された入力部に対して接触された位置に応じた座標情報および接触の圧力が出力されるようにした入力デバイスである。CPU101は、入力デバイスに対してなされたユーザ操作に応じて入力部105で生成され供給される制御信号に基づき、プログラムに従いこの表示制御装置100の各部を制御する。これにより、表示制御装置100に対し、ユーザ操作に応じた動作を行わせることができる。
The
入力部105とディスプレイ110とは一体的に構成することができる。例えば、タッチパネルを光の透過率がディスプレイ110の表示を妨げないように構成し、ディスプレイ110の表示面の上層に取り付ける。そして、タッチパネルにおける入力座標と、ディスプレイ110上の表示座標とを対応付ける。これにより、恰もユーザがディスプレイ110上に表示された画面を直接的に操作可能であるかのようなGUIを構成することができる。
The
CPU101はタッチパネルへの以下の操作を検出できる。タッチパネルを指やペンで触れたこと(以下、タッチダウンと称する)。タッチパネルを指やペンで触れている状態であること(以下、タッチオンと称する)。タッチパネルを指やペンで触れたまま移動していること(以下、ムーブと称する)。タッチパネルへ触れていた指やペンを離したこと(以下、タッチアップと称する)。タッチパネルに何も触れていない状態(以下、タッチオフと称する)。これらの操作や、タッチパネル上に指やペンが触れている位置座標は内部バス111を通じてCPU101に通知され、CPU101は通知された情報に基づいてタッチパネル上にどのような操作が行なわれたかを判定する。ムーブについてはタッチパネル上で移動する指やペンの移動方向についても、位置座標の変化に基づいて、タッチパネル上の垂直成分・水平成分毎に判定できる。
The
触覚制御部106は、CPU101がプログラムに従い生成した触覚制御信号に基づき、タッチパネルに接触したユーザの指やユーザの持つペンに対して触覚情報を提示する。触覚制御部106は、例えば触覚制御信号に基づいた波形でタッチパネルを振動させるように構成することができる。
The
CPU101が生成する表示制御信号に基づきディスプレイ110に表示させるGUI画面の一例を図2に示す。図2はユーザの意図を確認するためのGUI画面であり、背景部201、確認内容を示す文字列部202、OKボタン203、およびキャンセルボタン204の4つのUI部品により構成される。それぞれのUI部品は、CPU101により実行されるプログラムにおいて、図3に示す管理情報によって管理される。符号311は背景部201に、符号312は文字列部202に、符号313はOKボタン203に、符号314はキャンセルボタン204に、それぞれ対応する管理情報である。
FIG. 2 shows an example of a GUI screen displayed on the
各UI部品の管理情報は、部品ID301、配置情報302、触覚情報303および選択時の処理304で構成される。部品ID301は該UI部品を一意に識別する整数値である。配置情報302は、GUI画面200の左上端を原点、右をX軸正方向、下をY軸正方向とするスクリーン座標系における該UI部品の配置を表す情報であり、top、bottom、left、right、z−orderからなる。topは前記スクリーン座標系における該UI部品の上端のY座標である。同様に、bottomは前記スクリーン座標系における該UI部品の下端のY座標、leftは前記スクリーン座標系における該UI部品の左端のX座標、rightは前記スクリーン座標系における該UI部品の右端のX座標である。z−orderはUI部品間の重なり順序を表す。触覚情報303は該UI部品にユーザが触れているときに触覚制御部106によって生成される振動の周波数と振幅であり、CPU101が本情報に基づいて触覚制御信号を生成し触覚制御部106に供給する。選択時の処理304は該UI部品がユーザによって選択されたときにCPU101によって実行されるプログラムである。
The management information of each UI component is composed of the
次に、GUI画面を表示している表示制御装置100のタッチパネルにユーザがタッチダウンした際に、CPU101によって実行されるタッチ制御処理について、図4のフローチャートに従って説明する。
Next, the touch control process executed by the
まず、CPU101は入力部105からユーザのタッチ座標を取得する(ステップS400)。タッチ座標は前記スクリーン座標系におけるX座標UxおよびY座標Uyとして得られる。次に、CPU101は前記ユーザのタッチ座標に対応するUI部品の部品ID301を特定する(ステップS401)。タッチ座標に対応するUI部品とは、配置情報302がtop≦Uy<bottomおよびleft≦Ux<rightの両方を満たすUI部品のなかで、z−orderの値が最も大きいものとする。ステップS401で得られた部品IDに対応する触覚情報303を用い、CPU101は触覚制御部106に対して触覚制御信号を供給する(ステップS402)。
First, the
次にCPU101は、ユーザがタッチアップしたか否かを判定する(ステップS403)。タッチアップしていた場合、CPU101は触覚制御部106による振動発生を停止させるよう触覚制御信号を供給し(ステップS404)、タッチ制御処理を終了する。タッチアップしていなかった場合、CPU101は入力部へのタッチ圧が一定以上か判断する(ステップS405)。一定以上でなかった場合はS400に戻り処理を繰り返し実行する。一定以上だった場合、CPU101は触覚制御部106による振動発生を停止させるよう触覚制御信号を供給する(ステップS406)。最後にCPU101はステップS401にて得られた部品IDに対応する選択時の処理304を実行し(ステップS407)、タッチ制御処理を終了する。
Next, the
図5に示すユーザ操作の一例に沿って、上記タッチ制御処理の具体例を説明する。図5は、ユーザがGUI画面200の(a)点にタッチダウンし、(b)点(c)点(d)点の順にムーブし、(d)点でタッチパネルを強く押し込んだことを表す。ユーザはOKボタン203に触れている間は高周波の振動が感じられること、キャンセルボタン204に触れている間は低周波の振動が感じられること、それ以外の位置に触れている間は振動が感じられないことを知っており、キャンセルボタン204を選択するべくタッチ操作を行うものとする。
A specific example of the touch control process will be described with reference to an example of the user operation shown in FIG. FIG. 5 shows that the user touches down to the point (a) on the
まずユーザが(a)点にタッチダウンしたことにより、CPU101はタッチ制御処理を開始する。タッチ座標が(a)点である時、ステップS401において得られる部品ID301の値は「0」となり、対応する触覚情報303は「なし」であるため触覚制御部106は振動を発生させない。ユーザは振動が発生していないことをもって、現在のタッチ座標がOKボタン203でもキャンセルボタン204でもないことを判断できる。
First, when the user touches down to the point (a), the
ユーザがムーブ操作を行いタッチ座標が(b)点に達すると、ステップS401において得られる部品ID301の値は「2」となり、対応する触覚情報303に基づいた高周波の振動が触覚制御部106によって発生される。ユーザは高周波の振動を感知することで、現在のタッチ座標がOKボタン203であることを判断できる。
When the user performs a move operation and the touch coordinates reach point (b), the value of the
さらにユーザがムーブ操作を行いタッチ座標が(c)点に達すると、ステップS401において得られる部品ID301の値は再び「0」となり、対応する触覚情報303は「なし」であるため触覚制御部106は振動を発生させない。ユーザは振動が感知されなくなったことをもって、タッチ座標がOKボタン203から外れたことを判断できる。
Further, when the user performs a move operation and the touch coordinates reach the point (c), the value of the
さらにユーザがムーブ操作を行いタッチ位置が(d)点に達すると、ステップS401において得られる部品ID301の値は「3」となり、対応する触覚情報303に基づいた低周波の振動が触覚制御部106によって発生される。ユーザは低周波の振動を感知することで、現在のタッチ座標がキャンセルボタン204であることを判断できる。
Further, when the user performs a move operation and the touch position reaches the point (d), the value of the
所望のタッチ座標に達したと判断したユーザは、(d)点からムーブすることなくタッチパネルを強く押し込む操作をする。CPU101はステップS405でタッチアップされたことを判断し、S406にて触覚制御部106による振動発生を停止させ、ステップS407にて部品ID301の値「3」に対応する選択時の処理304である「キャンセル処理」を実行する。
The user who determines that the desired touch coordinates have been reached performs an operation of strongly pressing the touch panel without moving from the point (d). The
上記に示した通り、本発明を適用した実施形態では、ユーザが触覚情報に基づいてUI部品を識別した際、タッチアップ後に再度タッチすることなく前記UI部品を選択することができるため、誤操作が低減される。 As shown above, in the embodiment to which the present invention is applied, when the user identifies the UI component based on the tactile information, the UI component can be selected without touching again after the touch-up, so that an erroneous operation is performed. It will be reduced.
[実施例2]
実施例1に記載の表示制御装置では、ユーザがムーブ操作をし、あるUI部品から別のUI部品へとタッチ位置が変わった直後にタッチパネルを強く押し込む操作をした場合、後者のUI部品が選択されることになる。しかしユーザは後者のUI部品にタッチしたことを認識する前に強く押し込む操作をしている可能性があり、その場合はユーザの意図とは異なるUI部品が選択されることとなる。
[Example 2]
In the display control device according to the first embodiment, when the user performs a move operation and strongly presses the touch panel immediately after the touch position is changed from one UI component to another, the latter UI component is selected. Will be done. However, there is a possibility that the user presses strongly before recognizing that the latter UI component has been touched, and in that case, a UI component different from the user's intention is selected.
そこで前述の表示制御装置100に本発明を適用した他の実施形態として、あるUI部品から別のUI部品へとムーブした直後に強く押し込む操作をした場合の誤操作を低減したタッチ制御処理について述べる。実施例1と同様、CPU101が生成する表示制御信号に基づきディスプレイ110には図2のGUI画面200が表示される。GUI画面200を構成するUI部品は、CPU101によって実行されるプログラムにおいて、図3に示す管理情報によって管理される。
Therefore, as another embodiment in which the present invention is applied to the above-mentioned
GUI画面を表示している表示制御装置100のタッチパネルにユーザがタッチダウンした際に、CPU101によって実行されるタッチ制御処理について、図6のフローチャートに従って説明する。図6のフローチャートの多くのステップは、図4に示した実施例1におけるタッチ制御処理と一致する。一致するステップには同じ符号を付し、ここでは図6のフローチャートに特有のステップを中心に説明する。
The touch control process executed by the
まず、CPU101は入力部105からユーザのタッチ座標を取得し(ステップS400)、取得したタッチ座標に対応するUI部品の部品IDを特定する(ステップS401)。次に、CPU101は前記特定した部品IDが変わったか判定する(ステップS600)。タッチ制御処理を開始してから初めてステップS600を実行する場合はYesと判定する。ステップS600の実行が2回目以降の場合、前回実行時の部品UIと今回の部品UIが一致すればNo、不一致であればYesと判定する。ステップS600においてNoと判定した場合はステップS402に進み、Yesと判定した場合はステップS601において現在時刻を取得しステップS402に進む。ステップS402、ステップS403、ステップS404、ステップS405、ステップS406については実施例1にて説明した通りである。
First, the
ステップS406の実行後、CPU101は現在時刻とステップS601で取得した時刻の差分を求め、差分が一定値(例えば500ミリ秒)以上であるかを判定する。一定値以上である場合、CPU101はステップS401にて得られた部品IDに対応する選択時の処理304を実行し(ステップS407)、タッチ制御処理を終了する。一定値以上でない場合、タッチ制御処理を終了する。
After executing step S406, the
上記に示した通り、本実施形態では、ユーザが触覚情報に基づいてUI部品を識別した際、タッチアップ後に再度タッチすることなく前記UI部品を選択することができるため、誤操作が低減される。また、UI部品にタッチした状態での経過時間が短い場合には強く押し込む操作をした時に前記UI部品に対応した処理を実行しないため、あるUI部品から別のUI部品へとムーブした直後に強く押し込む操作をした場合の誤操作を低減することができる。 As shown above, in the present embodiment, when the user identifies the UI component based on the tactile information, the UI component can be selected without touching again after touching up, so that erroneous operation is reduced. In addition, if the elapsed time while touching a UI component is short, the process corresponding to the UI component is not executed when a strong push operation is performed, so that the UI component is strongly pushed immediately after being moved to another UI component. It is possible to reduce erroneous operations when the pushing operation is performed.
100 表示制御装置
101 CPU
102 ハードディスク
103 メモリ
104 表示制御部
105 入力部
106 触覚制御部
110 ディスプレイ
111 内部バス
200 GUI画面
201 背景部
202 文字列部
203 OKボタン
204 キャンセルボタン
100
102
Claims (3)
The display control device according to claim 2, wherein the history of the touch operation is the length of time that the specified UI component has been touched.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020012679A JP2021117907A (en) | 2020-01-29 | 2020-01-29 | Display control device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020012679A JP2021117907A (en) | 2020-01-29 | 2020-01-29 | Display control device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021117907A true JP2021117907A (en) | 2021-08-10 |
Family
ID=77175014
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020012679A Pending JP2021117907A (en) | 2020-01-29 | 2020-01-29 | Display control device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2021117907A (en) |
-
2020
- 2020-01-29 JP JP2020012679A patent/JP2021117907A/en active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5295328B2 (en) | User interface device capable of input by screen pad, input processing method and program | |
KR100830467B1 (en) | Display device having touch pannel and Method for processing zoom function of display device thereof | |
TWI428812B (en) | Method for controlling application program, electronic device thereof, recording medium thereof, and computer program product using the method | |
WO2003104967A1 (en) | Information processing method for specifying an arbitrary point in 3-dimensional space | |
US20110216015A1 (en) | Apparatus and method for directing operation of a software application via a touch-sensitive surface divided into regions associated with respective functions | |
US20100328236A1 (en) | Method for Controlling a Computer System and Related Computer System | |
JP5640486B2 (en) | Information display device | |
JPWO2009031214A1 (en) | Portable terminal device and display control method | |
JP2010224764A (en) | Portable game machine with touch panel display | |
US10956030B2 (en) | Multi-touch based drawing input method and apparatus | |
JP2010146032A (en) | Mobile terminal device and display control method | |
US20120297336A1 (en) | Computer system with touch screen and associated window resizing method | |
JP2019514097A (en) | Method for inserting characters in a string and corresponding digital device | |
US20120218308A1 (en) | Electronic apparatus with touch screen and display control method thereof | |
JP5848732B2 (en) | Information processing device | |
JP4924164B2 (en) | Touch input device | |
US20230359279A1 (en) | Feedback method and related device | |
JP2013222263A (en) | Information processing device, method for controlling the same, and computer program | |
JP2012099005A (en) | Input device, input method, and input program | |
US20110285517A1 (en) | Terminal apparatus and vibration notification method thereof | |
WO2013080425A1 (en) | Input device, information terminal, input control method and input control program | |
JP2013196465A (en) | User interface device for applying tactile response in object selection, tactile response application method and program | |
JP2021117907A (en) | Display control device | |
JP2011100385A (en) | Display device, method, and program | |
KR101682527B1 (en) | touch keypad combined mouse using thin type haptic module |