JP2014157578A - Touch panel device, control method of touch panel device, and program - Google Patents

Touch panel device, control method of touch panel device, and program Download PDF

Info

Publication number
JP2014157578A
JP2014157578A JP2013029345A JP2013029345A JP2014157578A JP 2014157578 A JP2014157578 A JP 2014157578A JP 2013029345 A JP2013029345 A JP 2013029345A JP 2013029345 A JP2013029345 A JP 2013029345A JP 2014157578 A JP2014157578 A JP 2014157578A
Authority
JP
Japan
Prior art keywords
touch panel
gesture
panel
application
contact
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013029345A
Other languages
Japanese (ja)
Inventor
Akihiko Iketani
明彦 池谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Casio Mobile Communications Ltd
Original Assignee
NEC Casio Mobile Communications Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Casio Mobile Communications Ltd filed Critical NEC Casio Mobile Communications Ltd
Priority to JP2013029345A priority Critical patent/JP2014157578A/en
Publication of JP2014157578A publication Critical patent/JP2014157578A/en
Pending legal-status Critical Current

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a touch panel device, a control method of the touch panel device and a program which can simplify start-up operation of an application in the touch panel device.SOLUTION: A touch panel device comprises: a contact determination unit 111 which determines whether contact on a touch panel is a normal input operation including a click on a touch panel or an operation that continuously or discontinuously having contact of a finger or the like on the touch panel (on-panel gesture); a first application execution unit 112 which, in response to the normal input operation, executes predetermined operation including start-up of an application; and a second application execution unit 113 which, in response to the on-panel gesture, starts up or operates a predetermined application registered in advance. When the on-panel gesture is detected, the touch panel device executes control of the second application execution unit 113 in preference to control of the first application execution unit 112.

Description

本発明は、携帯端末等のタッチパネルを有するタッチパネル装置、タッチパネル装置の制御方法及びプログラムに関し、特にタッチパネルにおける操作の向上を図ったタッチパネル装置、タッチパネル装置の制御方法及びプログラムに関する。   The present invention relates to a touch panel device having a touch panel such as a portable terminal, a control method for the touch panel device, and a program, and more particularly to a touch panel device for improving operations on the touch panel, a control method for the touch panel device, and a program.

現在のタッチパネルを搭載した端末(以下、タッチパネル装置という。)の多くは、プログラム(アプリケーション)を起動する動作は、大きく分けると以下の2工程に分けられる。
1.アプリケーションのアイコンが表示される画面まで画面を遷移させる(以下、アプリケーション起動準備工程という。)
2.アイコンをタップする等して実際にアプリケーションを起動する(以下、アプリケーション起動工程という。)
In many terminals (hereinafter referred to as touch panel devices) equipped with a current touch panel, an operation for starting a program (application) is roughly divided into the following two steps.
1. The screen is changed to a screen on which an application icon is displayed (hereinafter referred to as an application activation preparation step).
2. An application is actually activated by tapping an icon or the like (hereinafter referred to as an application activation process).

端末使用者は、この2工程を踏むことにより該当アプリケーションを起動することができる。例えば、ユーザがスマートフォンにてメールソフト等を起動している状態でブラウザなどの他のアプリケーションを起動したい場合を考える。アプリケーション起動準備工程では、ホームキーやメニューキーをタップして、メールソフト画面を切り替え、当該他のアプリケーションを探す動作が必要となる。   The terminal user can start the corresponding application by taking these two steps. For example, let us consider a case where the user wants to start another application such as a browser while starting mail software or the like on a smartphone. In the application startup preparation process, an operation of tapping the home key or menu key to switch the mail software screen and searching for another application is required.

また、一般的なスマートフォンなどが画面ロック状態になっているときに、特定のアプリケーションを利用したい場合は、アプリケーション起動準備工程の前工程として、予め登録した、指をパネル上でスライドする等方法でタッチしたりパスワードを打ち込んだりして画面ロックを解除する画面ロック解除工程が必要となる。なお、アプリケーション起動準備工程が必要ない場合は、画面ロック解除工程の次の工程として、アプリケーション起動工程、すなわち特定のアプリケーションのショートカットのアイコンをタップする工程により、アプリケーションを起動する方法が最短の起動方法となる。   Also, when you want to use a specific application when a general smartphone is in the screen lock state, as a pre-process of the application startup preparation process, use a method such as sliding your finger on the panel. A screen unlock process for unlocking the screen by touching or typing in a password is required. If the application startup preparation process is not required, the application startup process, that is, the process of tapping the shortcut icon of a specific application as the next process of the screen unlocking process, is the shortest startup method. It becomes.

このように、現在利用されているタッチパネル装置の多くは以下の2つの課題がある。1つ目の課題は、上述のように、アプリケーションを起動する際には、画面ロック解除工程及び/又はアプリケーション起動準備工程を経て、アプリケーション起動工程を実施するため、アプリケーションを起動するために必要な動作が多いことである。   As described above, many of the touch panel devices currently used have the following two problems. The first problem is that, as described above, when starting an application, the application starting process is performed through the screen unlocking process and / or the application starting preparation process, which is necessary for starting the application. There are many actions.

2つ目の課題は、アプリケーションを起動する際にアイコンがどこにあるのか分かりづらいことが挙げられる。上述のアプリケーション起動準備工程では、起動したいアプリケーションのアイコンを探す必要があるが、メニュー画面内に多くのアイコンが折りたたまれて表示されていたり、同様の機能を有するアプリケーションが多くある場合等においては、端末使用者に混乱を招く可能性が高いほかアイコンを探す手間がかかるという問題点がある。   The second problem is that it is difficult to know where the icon is when starting the application. In the application startup preparation process described above, it is necessary to search for an icon of the application to be started, but in the case where many icons are displayed in a collapsed manner in the menu screen or when there are many applications having similar functions, There is a high possibility of causing confusion for terminal users, and there is a problem that it takes time and effort to search for icons.

ところで、特許文献1には、マルチポイント能力を有するタッチ・センシティブ・デバイスに関連するタッチ入力に属するデータをタッチ・センシティブ・デバイスから読み取るステップと、タッチ・センシティブ・デバイスからのデータに基づき、少なくとも1つマルチポイント・ジェスチャを識別するステップを有するタッチ入力を処理する方法が開示されている。この技術においては、タッチを認識するとともに、タッチ・センシティブ面上のタッチの位置と大きさも認識し、特定のタッチに従ってタスクを開始するほか、同時に生じた複数のタッチを識別すると同時に生じた複数のタッチを識別するマルチポイント感知に基づく処理も実施する。   By the way, Patent Document 1 describes at least one step based on the step of reading data belonging to a touch input related to a touch sensitive device having multipoint capability from the touch sensitive device, and the data from the touch sensitive device. A method for processing a touch input having the step of identifying one multipoint gesture is disclosed. This technology recognizes the touch and also recognizes the position and size of the touch on the touch-sensitive surface, starts the task according to a specific touch, and identifies multiple touches that occur simultaneously. A process based on multipoint sensing to identify touch is also performed.

また、特許文献2には、入力装置の操作部が有する入力面に入力手段で接触することにより、入力対象機器が実行する処理を制御する制御信号を該入力対象機器に入力する入力方法が開示されている。当該入力方法においては、入力面に入力手段が接触した接触位置を検出する検出ステップと、検出ステップにより検出した複数の接触位置の組み合わせに基づいて、制御信号を生成する制御信号生成ステップを有し、タッチパネル(操作部)上での手のひら又は指の開き具合に応じて、受像機の表示部に表示されるトランジションの表示切替速度を切り替える。ここで、手のひら又は指の開き具合の違いにより、タッチパネル上で検出される複数の接触座標が構成する多角形のサイズは異なる。よって、接触座標を全て結んで構成される多角形の面積の違いに応じて、受像機の表示部に表示されるトランジションの表示切替速度を切り替える場合、例えば、小さな多角形の面積が検出される場合は、トランジションの表示切替速度を大きくし、大きな多角形の面積が検出される場合は、トランジションの表示切替速度を小さくするなどの方法が記載されている。また、携帯電話にタッチパネルを設置し、1本指が描く直線の長さに応じて、起動するカメラ、ブラウザ、メーラー等のソフトの種類を切り替えたり、映像再生装置にタッチパネルを設置し、2本指の開き具合に応じて映像再生装置の映像再生速度を切り替える技術が開示されている。   Patent Document 2 discloses an input method in which a control signal for controlling processing executed by an input target device is input to the input target device by contacting an input surface of an operation unit of the input device with an input unit. Has been. The input method includes a detection step for detecting a contact position where the input means is in contact with the input surface, and a control signal generation step for generating a control signal based on a combination of a plurality of contact positions detected by the detection step. The display switching speed of the transition displayed on the display unit of the receiver is switched according to the degree of opening of the palm or finger on the touch panel (operation unit). Here, the size of the polygon formed by the plurality of contact coordinates detected on the touch panel differs depending on the degree of opening of the palm or finger. Therefore, when switching the display switching speed of the transition displayed on the display unit of the receiver according to the difference in the area of the polygon formed by connecting all the contact coordinates, for example, the area of a small polygon is detected. In this case, a method is described in which the display switching speed of the transition is increased, and when a large polygonal area is detected, the display switching speed of the transition is decreased. In addition, a touch panel is installed on the mobile phone, and depending on the length of the straight line drawn by one finger, the type of software such as a camera, browser, mailer, etc. to be activated is switched, or a touch panel is installed on the video playback device. A technique for switching the video playback speed of the video playback device in accordance with the degree of opening of the finger is disclosed.

また、特許文献3には、2以上の特性値に依存する信号のうち、それらの特性値が特定の範囲にあるものについて、座標系における位置を指定する操作により、その信号の値を調整することを目的とするインタフェースの技術が記載されている。この特許文献3には、ユーザが指で指定領域の内側部分に環や十字、チェックマークなどを描いた場合にジェスチャーとして検出し、これを状態遷移のきっかけとする技術が開示されている。   In Patent Document 3, among signals that depend on two or more characteristic values, those whose characteristic values are in a specific range are adjusted by specifying the position in the coordinate system. The technology of the interface for the purpose is described. This patent document 3 discloses a technique for detecting a gesture when a user draws a ring, a cross, a check mark, or the like on the inner part of a designated area with a finger and using this as a trigger for state transition.

特表2008−508601号公報Special table 2008-508601 gazette 特開2011−3074号公報JP 2011-3074 A 特開2012−164225号公報JP 2012-164225 A

しかしながら、上記特許文献1乃至特許文献3の技術においても、例えばメールソフトを使用しているときに、インターネットを閲覧しようとすると、やはり、同様に一旦メールソフトの画面を最小化し、インターネットを閲覧するためのアイコンを探し、これをクリックする必要がある。すなわち、ホーム画面等にいる場合には、上記の技術のようにジェスチャーにより、所定のアプリケーションを起動することができても、一のアプリケーションを使用している最中に、他のアプリケーションを立ち上げようとすると複数の工程が必要になる場合がある。また起動中のアプリケーション上でジェスチャーを行うと、当該起動中のアプリケーション、例えばメールソフトにおいては、インターネットを閲覧するためのジェスチャーを行うと新規作成動作や、メール送信等の意図していない動作を指定してしまう場合がある。   However, in the techniques of Patent Document 1 to Patent Document 3 described above, if the user tries to browse the Internet while using mail software, for example, the screen of the mail software is once again minimized and the Internet is browsed. You need to find an icon for it and click on it. In other words, when you are on the home screen, you can launch a given application while using one application, even if you can activate a given application by gesture as in the above technology. In some cases, a plurality of steps may be required. When a gesture is performed on a running application, a new creation operation or an unintended operation such as sending an e-mail is specified when the gesture for browsing the Internet is performed in the running application, for example, mail software. May end up.

このように、従来のタッチパネル装置においては、アプリケーションの起動に必要となる動作工程が複数あるためアプリケーションの起動に時間がかかり、ユーザが即座にアプリケーションを起動する手法が確立されていない。また、起動したいアプリケーションアイコンを探す必要がある等、アプリケーションを起動する動作が煩雑である。更に、ジェスチャーによって指定したアプリケーションを立ち上げようとする際に、意図していない動作を行ってしまう場合もある。したがって、ユーザが起動したいときに最小の動作で誤動作することなく即座にアプリケーションを起動できる方法が望まれる。   As described above, in the conventional touch panel device, since there are a plurality of operation steps necessary for starting the application, it takes time to start the application, and a method for immediately starting the application by the user has not been established. In addition, the operation of starting an application is complicated, such as the need to search for an application icon to be started. Further, when trying to launch an application designated by a gesture, an unintended operation may be performed. Therefore, there is a demand for a method that can immediately start an application without malfunctioning with the minimum operation when the user wants to start it.

本発明は、このような問題点を解決するためになされたものであり、タッチパネル装置におけるアプリケーションの起動動作を簡略にすることができるタッチパネル装置、タッチパネル装置の制御方法及びプログラムを提供することを目的とする。   The present invention has been made to solve such problems, and an object of the present invention is to provide a touch panel device, a touch panel device control method, and a program that can simplify an application activation operation in the touch panel device. And

本発明に係るタッチパネル装置は、タッチパネルを有するタッチパネル装置であって、前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定部と、前記接触判定部により前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行部と、前記接触判定部により前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行部と、を有し、前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行部の制御に優先して前記第2アプリ実行部の制御が実行されるものである。   The touch panel device according to the present invention is a touch panel device having a touch panel, and when receiving a contact from a contact body including a user's finger or a touch pen with respect to the touch panel, normal input including a click by the contact body on the touch panel The normal input operation is detected by the contact determination unit that determines either the operation or the gesture on the panel that is the operation that causes the contact body to contact the touch panel continuously or discontinuously for a predetermined time or more, and the contact determination unit. If the gesture on the panel is detected by the first application execution unit that executes a predetermined operation including the activation of the application according to the input position and the contact determination unit, it is registered in advance according to the gesture. A second application execution unit that activates or operates the predetermined application. , If the panel on the gesture is detected, in which control of in preference to the control of the first application executing unit and the second application executing unit is executed.

本発明に係るタッチパネル装置の動作制御方法は、タッチパネルを有するタッチパネル装置の動作制御方法であって、前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定ステップと、前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行ステップと、前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行ステップとを有し、前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップにおける制御が実行されるものである。   An operation control method for a touch panel device according to the present invention is an operation control method for a touch panel device having a touch panel, and when receiving a contact from a contact body including a user's finger or a touch pen with respect to the touch panel, the operation on the touch panel is performed. A contact determination step of determining either a normal input operation including a click by a contact body, or a gesture on the panel which is an operation in which the contact body is continuously or discontinuously contacted on the touch panel for a predetermined time or more, and the contact determination When the normal input operation is detected in the step, the gesture on the panel is detected in the first application execution step for executing a predetermined operation including the activation of the application according to the input position and the contact determination step. Then, depending on the gesture, a predetermined application registered in advance A second application execution step for starting or operating the application, and when the gesture on the panel is detected, the control in the second application execution step is executed in preference to the control in the first application execution step. It is what is done.

また、本発明に係るプログラムは、タッチパネルを有するタッチパネル装置における動作制御をコンピュータに実行させるためのプログラムであって、前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定制御と、前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行制御と、前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行制御とを有し、前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行制御に優先して前記第2アプリ実行制御が実施されるものである。   The program according to the present invention is a program for causing a computer to execute operation control in a touch panel device having a touch panel, and when the touch panel receives a contact from a contact body including a user's finger or a touch pen, the touch panel Contact determination control for determining either a normal input operation including a click by the contact body on the above, or a gesture on the panel which is an operation in which the contact body is continuously or discontinuously contacted on the touch panel for a predetermined time or more When the normal input operation is detected in the contact determination step, a first application execution control for executing a predetermined operation including application activation according to the input position; and on the panel in the contact determination step If a gesture is detected, register in advance according to the gesture Second application execution control that activates or operates the predetermined application, and when the gesture on the panel is detected, the second application execution control is performed in preference to the first application execution control. Is.

本発明に係るタッチパネル装置、タッチパネル装置の制御方法及びプログラムによれば、タッチパネル装置におけるアプリケーションの起動動作を簡略にすることができる。   According to the touch panel device, the control method of the touch panel device, and the program according to the present invention, it is possible to simplify the application activation operation in the touch panel device.

(a)及び(b)は、スマートフォン100を示す外観図である。(A) And (b) is an external view which shows the smart phone 100. FIG. 本発明の実施の形態にかかるスマートフォン100の内部構成を示すブロック図であるIt is a block diagram which shows the internal structure of the smart phone 100 concerning embodiment of this invention. 本発明の実施の形態にかかるアプリケーションプロセッサを更に詳細に示す図である。It is a figure which shows the application processor concerning embodiment of this invention in detail. 本発明の実施の形態にかかるアプリケーションプロセッサの動作を示すフローチャートである。It is a flowchart which shows operation | movement of the application processor concerning embodiment of this invention. 本発明の実施の形態にかかるアプリケーションプロセッサの他の例を示すブロック図である。It is a block diagram which shows the other example of the application processor concerning embodiment of this invention. (a)及び(b)は、パネル上ジェスチャーを行うユーザを示す図である。(A) And (b) is a figure which shows the user who performs a gesture on a panel. 同じく、パネル上ジェスチャーを行うユーザを示す図である。Similarly, it is a figure which shows the user who performs a gesture on a panel. 同じく、パネル上ジェスチャーを行うユーザを示す図である。Similarly, it is a figure which shows the user who performs a gesture on a panel. 本発明の実施の形態にかかるアプリケーションプロセッサの動作の詳細を示すフローチャートである。It is a flowchart which shows the detail of operation | movement of the application processor concerning embodiment of this invention. パネル上ジェスチャーを行うユーザの他の例を示す図であるIt is a figure which shows the other example of the user who performs a gesture on a panel. 同じく、パネル上ジェスチャーを行うユーザの他の例を示す図であるSimilarly, it is a figure which shows the other example of the user who performs a gesture on a panel 同じく、パネル上ジェスチャーを行うユーザの他の例を示す図であるSimilarly, it is a figure which shows the other example of the user who performs a gesture on a panel 本発明の実施の形態にかかるアプリケーションプロセッサの他の例における動作方法を示す図である。It is a figure which shows the operation | movement method in the other example of the application processor concerning embodiment of this invention.

以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。この実施の形態は、本発明を、タッチパネルを有する携帯電話に適用したものであるが、その他、タッチパネル機能を有する装置であれば、携帯電話に限らず携帯ゲーム端末、タブレットPC(Personal Computer)、及びノートPC等のその他のタッチパネル装置にも適用することができる。   Hereinafter, specific embodiments to which the present invention is applied will be described in detail with reference to the drawings. In this embodiment, the present invention is applied to a mobile phone having a touch panel, but any other device having a touch panel function is not limited to a mobile phone, a portable game terminal, a tablet PC (Personal Computer), It can also be applied to other touch panel devices such as notebook PCs.

本実施の形態においては、タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での接触体をタッチパネル上で連続又は不連続に所定時間以上接触させる動作(以下、パネル上ジェスチャーという。)を検出し、そのパネル上ジェスチャーに応じ、所定のアプリケーションの起動等、予め登録された動作を実行するものである。本実施の形態においては、接触体の一例として、ユーザが指でタッチパネルをタッチする場合について説明するが、タッチペン等、タッチパネル上の接触を検出できるものであれば、ユーザの指以外であってもよいことは勿論である。   In the present embodiment, when contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, the contact body on the touch panel is continuously or discontinuously contacted on the touch panel for a predetermined time or longer (hereinafter, referred to as a touch panel). A gesture on the panel) is detected, and a pre-registered operation such as activation of a predetermined application is executed in accordance with the gesture on the panel. In this embodiment, the case where the user touches the touch panel with a finger will be described as an example of the contact body. However, any touch device other than the user's finger can be used as long as the touch on the touch panel can be detected. Of course it is good.

ここで、パネル上ジェスチャーとは、複数の点に同時に触れて操作することができるマルチタップ(マルチタッチ)等も含み、1又は複数の指により、タッチパネル上で多角形の形状にタッチパネルをなぞる動作や、タッチパネルを所定間隔でタップする動作を示す。これらのパネル上ジェスチャーのジェスチャー毎に、例えば起動するアプリケーションを対応付けて記憶しておき、タッチパネル上であるパネル上ジェスチャーが検出された場合に、そのパネル上ジェスチャーに対応付けられたアプリケーションを起動するものである。すなわち、通常のタッチパネル装置において、アプリケーションを起動する際には、該当のアイコンをクリックするのが一般的であるが、本実施の形態においては、パネル上ジェスチャーがタッチパネルで検出された場合、対応付けて登録したアプリケーションを即座に起動させることができるため、アイコンの表示されている画面に切り替え、該当するアイコンを探し、これをクリックする等の複数の工程が不要となる。   Here, the gesture on the panel includes a multi-tap (multi-touch) that can be operated by simultaneously touching a plurality of points, and the operation of tracing the touch panel in a polygonal shape on the touch panel with one or a plurality of fingers. And an operation of tapping the touch panel at predetermined intervals. For example, an application to be activated is stored in association with each gesture on the panel, and when an on-panel gesture on the touch panel is detected, the application associated with the on-panel gesture is activated. Is. That is, in a normal touch panel device, when an application is started, it is common to click on the corresponding icon. However, in this embodiment, if a gesture on the panel is detected on the touch panel, the corresponding icon is associated. Since the registered application can be started immediately, a plurality of processes such as switching to a screen on which icons are displayed, searching for the corresponding icon, and clicking the icon are not required.

ここで、タッチパネル上でジェスチャーとして認識される多角形とは、例えばマルチタッチ時に検出された各座標を頂点としたものとすることができる。例えば、重心などの一定の法則を用いて1つの多角形に対して1つ座標を決め、そこを頂点とした多角形を使用することも可能である。更に、マルチタップ時に検出された多角形や面積と登録された多角形や面積と比較を行う際、一致の判定にはある程度の幅を誤差範囲として設定すれば、判定を容易にすることができ、ユーザへの負担も少ない。このように、タッチパネルにユーザ自身がアプリケーションと対応付けて登録した多角形の形状又は接触方法により、アプリケーションを起動させるため、上述のアプリケーション起動準備工程で必要であった動作を省略してアプリケーションを起動することができ、アプリケーションをより少ない手順で起動・操作することができる。   Here, the polygon recognized as a gesture on the touch panel can be, for example, a vertex at each coordinate detected during multi-touch. For example, it is possible to determine one coordinate for one polygon using a certain rule such as the center of gravity, and use a polygon having that as a vertex. Furthermore, when comparing polygons and areas detected at the time of multi-tap with registered polygons and areas, it is possible to make the determination easier by setting a certain amount of width as an error range. , Less burden on the user. In this way, the application is started by the polygonal shape or the contact method registered by the user in association with the application on the touch panel. The application can be activated and operated with fewer procedures.

さらに、他のアプリケーションが起動されていない場合は勿論、例えばメールソフトなどの他のアプリケーションを起動し、使用していた場合にもパネル上ジェスチャーを行うことも可能である。すなわち、本実施の形態にかかるタッチパネル装置は、ユーザのタッチがパネル上ジェスチャーか、通常のクリックなどかを判定し、パネル上ジェスチャーを検出した場合は、当該ジェスチャーにかかる動作を優先して実行する。このことにより、例えばメールソフトを起動し、メールを作成中に、インターネットに接続し何かを調べようとした場合に、メールソフトの画面を一旦閉じ、あらためて、インターネット接続用アイコンをクリックする必要がなく、また、インターネットに接続する動作によってメッセージを送信してしまうなどの誤動作なども防止することができ、きわめて簡単に他のアプリケーションを起動することができるものである。   Furthermore, it is possible to perform gestures on the panel not only when other applications are not activated but also when other applications such as e-mail software are activated and used. That is, the touch panel device according to the present embodiment determines whether the user's touch is a gesture on the panel or a normal click, and when the gesture on the panel is detected, the operation related to the gesture is preferentially executed. . For this reason, for example, if you are trying to connect to the Internet and check something while starting up your email software and creating an email, you need to close the email software screen and click the Internet connection icon again. In addition, it is possible to prevent a malfunction such as sending a message by an operation to connect to the Internet, and to start another application very easily.

ここでは、先ず、一般的なスマートフォンの構成について説明し、次に、本実施の形態にかかるタッチパネル装置の構成及び動作制御方法の詳細について説明する。   Here, first, the configuration of a general smartphone will be described, and then the configuration of the touch panel device and the details of the operation control method according to the present embodiment will be described.

[スマートフォン概要]
図1(a)及び図1(b)は、スマートフォン100を示す外観図である。図1(a)は、スマートフォン100の筐体101の一方の主面(前面)側から見たスマートフォン100の外観を示している。スマートフォン100は、筐体101の主面のほぼ全領域に配置された液晶パネル(Liquid Cristal Panel)102と、後述タッチパネル103と、幾つかの操作ボタン104と、カメラデバイス105とが配置されている。一方、図1(b)は、筐体101の他方の主面(背面)側から見たスマートフォン100の外観を示している。筐体101の背面には、カメラデバイス106が配置されている。
[Smartphone overview]
FIG. 1A and FIG. 1B are external views showing the smartphone 100. FIG. 1A illustrates the appearance of the smartphone 100 as viewed from one main surface (front surface) side of the housing 101 of the smartphone 100. The smartphone 100 includes a liquid crystal panel (Liquid Cristal Panel) 102, a touch panel 103 (described later), several operation buttons 104, and a camera device 105 that are arranged in almost the entire area of the main surface of the housing 101. . On the other hand, FIG. 1B shows the appearance of the smartphone 100 as viewed from the other main surface (back surface) side of the housing 101. A camera device 106 is disposed on the back surface of the housing 101.

液晶パネル102は、その表示面が筐体101の前面に位置するように配置されている。なお、液晶パネル102の代わりに有機ELパネル(Organic Light-Emitting Diode Panel)等とすることも可能である。   The liquid crystal panel 102 is arranged so that its display surface is located on the front surface of the housing 101. Instead of the liquid crystal panel 102, an organic EL panel (Organic Light-Emitting Diode Panel) or the like can be used.

タッチパネル103は、液晶パネル102の表示面を覆うように配置されるか、又は液晶パネル102の裏面側に配置される。そして、ユーザの指又はユーザが操作する専用の操作ペン(スタイラス)等の操作部等(以下、接触体ともいう。)で液晶パネル102のタッチ領域内に触れることで、スマートフォン100を直感的に操作することができる。   The touch panel 103 is disposed so as to cover the display surface of the liquid crystal panel 102 or is disposed on the back side of the liquid crystal panel 102. The smartphone 100 is intuitively touched by touching the touch area of the liquid crystal panel 102 with an operation unit or the like (hereinafter also referred to as a contact body) such as a user's finger or a dedicated operation pen (stylus) operated by the user. Can be operated.

そして、本実施の形態にかかるタッチパネル103は、ユーザの指又は専用のペンが接触するタッチ画面領域において、その指やペンの接触を検出すると、それがクリックなのか、パネル上ジェスチャーなのかを判定し、パネル上ジェスチャーを検出した場合は、予め登録してある動作、例えば特定のアプリケーションの起動などを実施する。   When the touch panel 103 according to the present embodiment detects the touch of the finger or the pen in the touch screen area where the user's finger or the dedicated pen touches, the touch panel 103 determines whether the touch is a click or a gesture on the panel. When a gesture on the panel is detected, an operation registered in advance, for example, activation of a specific application is performed.

操作ボタン104は、スマートフォン100に対する補助的な操作に用いられるもので、パネル上の接触方法によらず、所定の動作を指示可能なハードキーとなっている。例えば、このボタンを押している場合は、パネル上ジェスチャーによる動作のみを実行させるなどの制御が可能となる。なお、無線通信端末によっては、このような操作ボタンが設けられないこともある。カメラデバイス106は、そのレンズユニットが筐体101の背面に位置するように配置されたメインカメラである。一方、カメラデバイス105は、そのレンズユニットが筐体101の前面に位置するように配置されたサブカメラである。なお、このようなカメラデバイスは設けられなくてもよい。   The operation button 104 is used for an auxiliary operation on the smartphone 100, and is a hard key capable of instructing a predetermined operation regardless of a touch method on the panel. For example, when this button is pressed, it is possible to perform control such as executing only an operation by a gesture on the panel. Note that such operation buttons may not be provided depending on the wireless communication terminal. The camera device 106 is a main camera arranged so that its lens unit is located on the back surface of the housing 101. On the other hand, the camera device 105 is a sub camera arranged such that its lens unit is positioned on the front surface of the housing 101. Note that such a camera device may not be provided.

次に、本実施の形態にかかるスマートフォン100の内部構成について説明する。図2は、本発明の実施の形態1にかかるスマートフォン100の内部構成を示すブロック図である。図2に示すように、スマートフォン100のメインボード10には、アプリケーションプロセッサ11、無線処理部12、メインメモリ13、フラッシュメモリ14、電源関連15、ボイス回路16、オーディオ回路17、及びセンサ18等が搭載されている。このメインボード10には、上述した液晶パネル102、タッチパネル103、及びカメラデバイス105、106が接続される他、マイク107、スピーカ108、バッテリ109、USB130、メモリカード131、及びアンテナ132等が接続される。   Next, the internal configuration of the smartphone 100 according to the present embodiment will be described. FIG. 2 is a block diagram showing an internal configuration of the smartphone 100 according to the first embodiment of the present invention. 2, the main board 10 of the smartphone 100 includes an application processor 11, a wireless processing unit 12, a main memory 13, a flash memory 14, a power source 15, a voice circuit 16, an audio circuit 17, a sensor 18, and the like. It is installed. The main board 10 is connected to the above-described liquid crystal panel 102, touch panel 103, and camera devices 105 and 106, as well as a microphone 107, a speaker 108, a battery 109, a USB 130, a memory card 131, an antenna 132, and the like. The

アプリケーションプロセッサ11は、一般的には、さまざまな周辺回路が1つのパッケージに統合されたSoC(System On Chip)デバイスであり、無線処理部12等の通信関連のデバイスやタッチパネル103、カメラデバイス105、106等の周辺機器を接続するためのインタフェースなど、多くのインタフェース回路が含まれる。   The application processor 11 is generally a SoC (System On Chip) device in which various peripheral circuits are integrated into one package, and includes a communication-related device such as a wireless processing unit 12, a touch panel 103, a camera device 105, Many interface circuits such as an interface for connecting peripheral devices such as 106 are included.

このアプリケーションプロセッサ11は、メインメモリ13に格納されたアプリケーションを読み出して、スマートフォン100の各種機能を実現するための処理を行う。例えば、アプリケーションプロセッサ11は、メインメモリ13からOS(Operating System)アプリケーションを読み出し実行すると共に、このOSアプリケーションを動作基板とするアプリケーションアプリケーションを実行する。より具体的には、アプリケーションプロセッサ11は、送信データをアプリケーションプロセッサ11ら受け取り、受け取った送信データに対して符号化処理を施し、さらに、搬送波により変調処理して送信信号を生成し、アンテナ112を介して送信信号を外部へ送信する。また、ベースバンドプロセッサ121は、アンテナ112を介して受信信号を受信し、この受信信号を搬送波により復調処理して受信データを生成し、さらにこの受信データに対して復号化処理を施してアプリケーションプロセッサ11に送信する。   The application processor 11 reads an application stored in the main memory 13 and performs processing for realizing various functions of the smartphone 100. For example, the application processor 11 reads and executes an OS (Operating System) application from the main memory 13 and executes an application application using the OS application as an operation board. More specifically, the application processor 11 receives the transmission data from the application processor 11, performs an encoding process on the received transmission data, further performs a modulation process using a carrier wave, generates a transmission signal, and sets the antenna 112. The transmission signal is transmitted to outside. The baseband processor 121 receives a reception signal via the antenna 112, demodulates the reception signal with a carrier wave to generate reception data, and further performs a decoding process on the reception data to perform application processing. 11 to send.

[アプリケーションプロセッサの構成]
図3は、本実施の形態にかかるアプリケーションプロセッサ11を更に詳細に示す図である。図3に示すように、アプリケーションプロセッサ11は、接触判定部111、第1アプリ実行部112、及び第2アプリ実行部113を有する。接触判定部111は、タッチパネル103に対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での記接触体によるクリックを含む通常入力動作か、又は接触体をタッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する。なお、通常入力動作とは、タッチパネル上のアイコンなどをクリックする動作、ウェブブラウザ上でリンクをクリックする動作、メール作成ソフト等で文章を入力する動作などの入力動作をいう。
[Application processor configuration]
FIG. 3 is a diagram showing the application processor 11 according to the present embodiment in more detail. As illustrated in FIG. 3, the application processor 11 includes a contact determination unit 111, a first application execution unit 112, and a second application execution unit 113. When the contact determination unit 111 receives contact from the contact body including the user's finger or touch pen with respect to the touch panel 103, the contact determination unit 111 performs a normal input operation including a click by the contact body on the touch panel, or continues the contact body on the touch panel. Alternatively, any one of the gestures on the panel, which is an operation of discontinuously making contact for a predetermined time or more, is determined. The normal input operation refers to an input operation such as an operation of clicking an icon or the like on the touch panel, an operation of clicking a link on a web browser, or an operation of inputting a sentence using mail creation software or the like.

パネル上ジェスチャーとは、通常入力動作以外のジェスチャーをいう。後述するように、接触判定部111が、ユーザのタッチパネルに対する接触を検知するが、連続又は不連続の接触動作が所定時間以上検出されると、当該接触(ジェスチャー)がパネル上ジェスチャーであるか否かの判定を開始する。そして、当該ジェスチャーが登録情報と一致するジェスチャーである場合にパネル上ジェスチャーと判定する。なお、このユーザの接触とは、例えば複数本の指をタッチパネル103に接触させる動作G1、1又は複数本の指をタッチパネル103に接触させながら多角形や円形の軌跡をなぞる動作G2、1又は複数本の指でタッチパネル103を複数回、所望の間隔でタップする動作G3、これらの組み合わせの動作G4等が考えらえる。   The gesture on the panel means a gesture other than the normal input operation. As will be described later, the contact determination unit 111 detects contact of the user with the touch panel. If a continuous or discontinuous contact operation is detected for a predetermined time or more, whether or not the contact (gesture) is a gesture on the panel. Start the determination. When the gesture is a gesture that matches the registered information, it is determined as a gesture on the panel. The user contact is, for example, an operation G1 that makes a plurality of fingers contact the touch panel 103, or an operation G2 that traces a polygonal or circular locus while bringing one or more fingers into contact with the touch panel 103. An operation G3 of tapping the touch panel 103 with a finger a plurality of times at a desired interval, an operation G4 of a combination of these, and the like can be considered.

なお、パネル上ジェスチャーとして登録する動作は、タッチパネル装置100が通常入力動作ではないと判定できればよいので、これらのジェスチャーに限るものではない。動作G1が検出された場合には、例えば当該指を頂点とする多角形を検出することで、パネル上ジェスチャーと判定することができる。動作G2が検出された場合には、ユーザの指がなぞった軌跡を検出し、その形状に基づきパネル上ジェスチャーと判定することができる。さらに、動作G3が検出された場合には、ユーザの指の本数(接触点の数)とタップの回数及びパターン(間隔)に基づきパネル上ジェスチャーと判定することができる。   Note that the operation registered as a gesture on the panel is not limited to these gestures as long as it can be determined that the touch panel device 100 is not a normal input operation. When the motion G1 is detected, it can be determined as a gesture on the panel, for example, by detecting a polygon having the finger as a vertex. When the motion G2 is detected, a trajectory traced by the user's finger can be detected, and the gesture on the panel can be determined based on the shape. Furthermore, when the motion G3 is detected, it can be determined as a gesture on the panel based on the number of user's fingers (number of contact points), the number of taps, and a pattern (interval).

また、第1アプリ実行部112は、接触判定部111によりクリックが検出されるとそのクリック位置に応じた、アプリケーションの起動を含む所定の動作を実行する。また、第2アプリ実行部113は、接触判定部111によりパネル上ジェスチャーが検出されるとそのジェスチャーに応じて、予め登録された所定のアプリケーションを起動又は操作する等の所定の動作を行う。   In addition, when a click is detected by the contact determination unit 111, the first application execution unit 112 executes a predetermined operation including activation of an application according to the click position. Further, when the touch determination unit 111 detects an on-panel gesture, the second application execution unit 113 performs a predetermined operation such as starting or operating a predetermined application registered in advance according to the gesture.

そして、アプリケーションプロセッサ11は、パネル上ジェスチャーが検出された場合は、第1アプリ実行部112の制御に優先して第2アプリ実行部113の制御を実行する。ここで、例えば第1アプリ実行部112又は第2アプリ実行部113が接触判定部111の動作を行ってもよい。また、接触判定部111はパネル上ジェスチャーが検出されると、第1アプリ実行部112に対し、動作停止の指示を出し、第2アプリ実行部113に対し、パネル上ジェスチャーに対応する処理をするよう指示するものとしてもよい。   Then, when a gesture on the panel is detected, the application processor 11 executes control of the second application execution unit 113 in preference to the control of the first application execution unit 112. Here, for example, the first application execution unit 112 or the second application execution unit 113 may perform the operation of the contact determination unit 111. In addition, when a gesture on the panel is detected, the contact determination unit 111 instructs the first application execution unit 112 to stop the operation, and performs a process corresponding to the gesture on the panel to the second application execution unit 113. It may be instructed to do so.

図2に戻って、無線処理部12は、ベースバンドプロセッサ121、無線LAN122、及びBluetooth(登録商標)123等を有する。ベースバンドプロセッサ121は、スマートフォン100が送受信するデータに対して符号化(例えば、畳み込み符号やターボ符号等の誤り訂正符号化)処理又は復号化処理等を含むベースバンド処理を行う。   Returning to FIG. 2, the wireless processing unit 12 includes a baseband processor 121, a wireless LAN 122, and Bluetooth (registered trademark) 123. The baseband processor 121 performs baseband processing including encoding (for example, error correction encoding such as convolutional code and turbo code) processing or decoding processing on data transmitted and received by the smartphone 100.

メインメモリ13は、アプリケーションプロセッサ11により利用されるアプリケーション及びデータを格納する。さらに、アプリケーションプロセッサ11には、電源が遮断されても記憶したデータを保持する不揮発性メモリ(フラッシュメモリ)14と接続される。   The main memory 13 stores applications and data used by the application processor 11. Further, the application processor 11 is connected to a nonvolatile memory (flash memory) 14 that retains stored data even when the power is turned off.

バッテリ109は、電池であり、スマートフォン100が外部電源によらずに動作する場合に利用される。なお、スマートフォン100に外部電源が接続されている場合においてもバッテリ109の電源を利用してもよい。また、バッテリ109としては、二次電池を利用することが好ましい。   The battery 109 is a battery, and is used when the smartphone 100 operates without depending on an external power source. Even when an external power source is connected to the smartphone 100, the power source of the battery 109 may be used. As the battery 109, a secondary battery is preferably used.

電源管理部15は、バッテリ109又は外部電源から内部電源を生成する。この内部電源は、スマートフォン100の各ブロックに与えられる。このとき電源管理部15は、アプリケーションプロセッサ11からの指示に基づき内部電源の電圧制御を行って、各ブロック回路毎に同一又は異なる内部電源を供給する。さらに、電源管理部15は、各ブロック回路毎に内部電源の遮断を制御することもできる。また、電源管理部15は、外部電源の供給がある場合、バッテリ109への充電制御も行う。   The power management unit 15 generates an internal power supply from the battery 109 or an external power supply. This internal power supply is given to each block of the smartphone 100. At this time, the power management unit 15 performs voltage control of the internal power supply based on an instruction from the application processor 11 and supplies the same or different internal power supply for each block circuit. Further, the power management unit 15 can also control the interruption of the internal power for each block circuit. The power management unit 15 also performs charge control on the battery 109 when external power is supplied.

オーディオ17は、アプリケーションプロセッサ11から送信される音声データをデコードしてスピーカ108を駆動する。ボイス16は、マイク107から得た音声情報をエンコードして音声データを生成し、この音声データをアプリケーションプロセッサ11に出力する。   The audio 17 decodes the audio data transmitted from the application processor 11 and drives the speaker 108. The voice 16 encodes voice information obtained from the microphone 107 to generate voice data, and outputs the voice data to the application processor 11.

センサ部18には、温度センサ、GPS(Global Positioning System)システム等が含まれる。温度センサにより本体側が充電時にバッテリ温度を管理することができる。また、GPSを備えることで、スマートフォン100の位置を高精度に測定することが可能であり、位置を正確に把握することで、目的地までのナビゲーションが可能になる。ここで、スマートフォン100のGPSシステムは、通信により位置測定を補助し、短期間での位置を測定するための機能を備える(A-GPS(Assisted GPS))。   The sensor unit 18 includes a temperature sensor, a GPS (Global Positioning System) system, and the like. The temperature sensor allows the main body to manage the battery temperature during charging. Moreover, by providing GPS, the position of the smartphone 100 can be measured with high accuracy, and navigation to a destination can be performed by accurately grasping the position. Here, the GPS system of the smartphone 100 has a function for assisting position measurement by communication and measuring a position in a short period (A-GPS (Assisted GPS)).

液晶パネル102は、アプリケーションプロセッサ11における処理に従い様々な画像を表示する。この液晶パネル102において表示される画像には、ユーザがスマートフォン100に動作指示を与えるユーザーインタフェース画像、カメラ画像、又は動画等が表される。   The liquid crystal panel 102 displays various images according to processing in the application processor 11. The image displayed on the liquid crystal panel 102 represents a user interface image, a camera image, a moving image, or the like that gives an operation instruction to the smartphone 100 by the user.

さらに、本実施の形態におけるスマートフォン100は、上述したように、高解像度の背面のカメラデバイス106だけでなく、ディスプレイ側にもカメラデバイス105を装備し、カメラデバイス105、106は、アプリケーションプロセッサ11からの指示に従い、画像を取得する。   Furthermore, as described above, the smartphone 100 according to the present embodiment includes not only the high-resolution rear camera device 106 but also the camera device 105 on the display side, and the camera devices 105 and 106 are connected to the application processor 11. Follow the instructions to obtain an image.

[アプリケーションプロセッサの動作]
次に、アプリケーションプロセッサ11の動作について説明する。図4は、アプリケーションプロセッサ11の動作を示すフローチャートである。図4に示すように、アプリケーションプロセッサ11は、タッチパネル103にユーザの指やタッチペン等による接触を待つ。以下、ユーザの指でタッチする場合について説明すると、接触判定部111は、ユーザの指がタッチパネル103に接触を検出すると(ステップS1:Yes)、これがタッチパネル103上で所定のアイコンをタップする動作(クリック)やリンクを指定する等の通常入力動作であるか、又は当該通常入力動作以外の動作(ジェスチャ)、例えばタッチパネル上でユーザの指を連続又は不連続に所定時間以上接触させる動作(パネル上ジェスチャ)であるのかを判定する(ステップS2)。
[Operation of application processor]
Next, the operation of the application processor 11 will be described. FIG. 4 is a flowchart showing the operation of the application processor 11. As shown in FIG. 4, the application processor 11 waits for a touch with a user's finger or a touch pen on the touch panel 103. Hereinafter, the case of touching with the user's finger will be described. When the user's finger detects contact with the touch panel 103 (step S1: Yes), this is an operation of tapping a predetermined icon on the touch panel 103 ( Normal input operation such as clicking or specifying a link, or an operation other than the normal input operation (gesture), for example, an operation of touching the user's finger continuously or discontinuously on the touch panel for a predetermined time or longer (on the panel) It is determined whether it is a gesture) (step S2).

このとき、接触判定部111が通常入力動作を検出すると、入力位置(タップ位置)に応じたアプリケーションの起動等の動作を実行する(ステップS3)。一方、パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する(ステップS4)。   At this time, when the contact determination unit 111 detects a normal input operation, an operation such as activation of an application corresponding to the input position (tap position) is executed (step S3). On the other hand, when a gesture on the panel is detected, a predetermined application registered in advance is activated or operated in accordance with the gesture (step S4).

[アプリケーションプロセッサの他の構成]
図5は、アプリケーションプロセッサ11の他の例を示すブロック図である。アプリケーションプロセッサ11は、図3の構成に加え、ジェスチャー記憶部114及びロック機能制御部115を有する。例えば、パネル上ジェスチャーを、タッチパネル103上で多角形の形状にタッチパネル103をなぞる動作(ジェスチャー)とすると、ジェスチャー記憶部114は、パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及びユーザの指等がタッチパネル103上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、タッチパネル装置100にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する。
[Other configuration of application processor]
FIG. 5 is a block diagram illustrating another example of the application processor 11. The application processor 11 includes a gesture storage unit 114 and a lock function control unit 115 in addition to the configuration of FIG. For example, if the gesture on the panel is an operation (gesture) of tracing the touch panel 103 in a polygonal shape on the touch panel 103, the gesture storage unit 114 may have a vertex angle of a part or all of the polygon formed by the gesture on the panel. A first value relating to the angle of the polygon, a second value relating to the length of each side of the polygon, a third value relating to the area of the polygon, and a value relating to the speed at which the user's finger traces on the touch panel 103. Any one or a combination of one or more of the four values is used as registration information, and the registration information and activation or operation of a predetermined application installed in the touch panel device 100 are stored in association with each other.

また、パネル上ジェスチャーをユーザの指によりタッチパネル103を所定間隔でタップする動作とすると、ジェスチャー記憶部114は、タッチパネル103がタップされる回数、タップ間隔、タップの際の接触時間、及び一連の動作のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、タッチパネル装置100にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する。   When the gesture on the panel is an operation of tapping the touch panel 103 with a user's finger at a predetermined interval, the gesture storage unit 114 displays the number of times the touch panel 103 is tapped, the tap interval, the contact time when tapping, and a series of operations. Any one or a combination of one or more of them is used as registration information, and the registration information and activation or operation of a predetermined application installed in the touch panel device 100 are stored in association with each other.

図6(a)及び図6(b)、及び図7は、パネル上ジェスチャーを行うユーザを示す図である。図6(a)に示すように、ユーザが親指、人差し指、中指の3つの指をタッチパネル103に一定時間押し当てたり、図7に示すように、三角形を作った状態で3つの指の接触位置を、くの字を書くように摺動させたりする動作として登録しておき、3回タップする動作をパネル上ジェスチャーとして登録しておく等することで、接触判定部111は、三角形200を検出する。   FIG. 6A, FIG. 6B, and FIG. 7 are diagrams showing a user who performs a gesture on the panel. As shown in FIG. 6A, the user presses the three fingers of the thumb, the index finger, and the middle finger on the touch panel 103 for a certain period of time, or as shown in FIG. Is registered as an operation of sliding to write a character, and an operation of tapping three times is registered as a gesture on the panel, so that the contact determination unit 111 detects the triangle 200. To do.

このとき、図6(b)に示すように、三角形200の第1頂角α1、第2頂角α3、第3頂角α3のいずれか1以上の角度と、第1辺の長さL1、第2辺の長さL3、及び第3辺の長さL3のうち1以上の長さを登録しておくことで、この三角形を判別することができる。例えば、最も長い辺(この場合は第1辺の長さL1)とその両側の頂角(この場合は、第2頂角α2及び第3頂角α3)を登録情報T1とし、この登録情報T1が検出された場合は、オーディオ再生ソフトを起動する等とすればよい。   At this time, as shown in FIG. 6B, one or more of the first apex angle α1, the second apex angle α3, and the third apex angle α3 of the triangle 200, and the length L1 of the first side, By registering at least one of the length L3 of the second side and the length L3 of the third side, this triangle can be determined. For example, the longest side (in this case, the length L1 of the first side) and the apex angles on both sides thereof (in this case, the second apex angle α2 and the third apex angle α3) are set as registration information T1, and the registration information T1 If it is detected, the audio playback software may be activated.

また、三角形の他の登録方法としては、頂角に対応する三角比、逆三角比などの値を、最も角度が大きい頂角を出発点として時計回り又は反時計回りなどの一定の順列で登録することができる。更にまた、縮尺や大きさを判定できる辺の長さ若しくは多角形の面積を保存することも可能である。   As another registration method for triangles, values such as triangle ratio and inverse triangle ratio corresponding to the apex angle are registered in a certain permutation such as clockwise or counterclockwise starting from the apex angle having the largest angle. can do. Furthermore, it is also possible to store the length of a side or the area of a polygon that can be determined in scale or size.

ここで、ジェスチャー記憶部114にパネル上ジェスチャーにかかる登録情報を登録するタイミングとしては、プリインストールされているアプリケーションの場合であれば、端末の初期設定時等とすることができる。また、ユーザが新たにインストールする場合には、インストール時に登録情報も併せて設定することができるが、登録のタイミングはこのタイミングに限らない。なお、全てのアプリケーションについて登録情報を設定してもよいが、ユーザがパネル上ジェスチャーを記憶する必要があることから、使用頻度の高いものについてだけ、登録情報を設定しておくことも可能である。   Here, the timing for registering the registration information related to the gesture on the panel in the gesture storage unit 114 can be the initial setting of the terminal in the case of a preinstalled application. When a user newly installs, registration information can be set at the time of installation, but the registration timing is not limited to this timing. Registration information may be set for all applications. However, since the user needs to memorize gestures on the panel, it is also possible to set registration information only for frequently used items. .

更には、接触判定部111が、ユーザが使用するアプリケーションの頻度を検出し、例えば10回目の起動時や、1日1回以上起動するアプリケーションなどを検出し、信用頻度が一定基準を上回った場合に、パネル上ジェスチャーを登録するか否かをユーザに促しようにしてもよい。反対に、アプリケーションの使用頻度がある一定基準を下回った場合に、当該登録情報を削除するか否かをユーザに判定させるようにしてもよい。このようにすることで、ユーザは使用頻度の低いアプリケーションを起動するためのパネル上ジェスチャーを覚えておく必要がなくなり、更に、必要のなくなったパネル上ジェスチャーを他のアプリケーションを起動するために割り当てることができる。   Furthermore, when the contact determination unit 111 detects the frequency of the application used by the user, for example, when the application is started for the 10th time or an application that is started at least once a day, and the credit frequency exceeds a certain standard. In addition, the user may be prompted to register a gesture on the panel. On the contrary, when the usage frequency of the application falls below a certain standard, the user may determine whether or not to delete the registration information. This eliminates the need for the user to remember on-panel gestures for launching less frequently used applications, and assigns on-panel gestures that are no longer needed to launch other applications. Can do.

また、図8に示すように、三角形200の形状がある程度変化しても、同一の三角形として認識するようにするものとする。すなわち、接触判定部111は、接触体によるパネル上ジェスチャーが所定の誤差範囲で一致するときは、登録情報に該当すると判定するものとする。このことにより、ユーザの入力を容易にすることができる。   Further, as shown in FIG. 8, even if the shape of the triangle 200 changes to some extent, it is assumed that it is recognized as the same triangle. That is, the contact determination unit 111 determines that the contact information corresponds to the registration information when the on-panel gesture by the contact body matches within a predetermined error range. This facilitates user input.

そして、接触判定部111は、パネル上ジェスチャーのジェスチャーが、ジェスチャー記憶部114に登録されているいずれの登録情報と一致するかを検出し、第2アプリ実行部113は、接触判定部111により検出された登録情報に対応付けられたアプリケーションの起動又は操作を実行する。   Then, the contact determination unit 111 detects which registered information registered in the gesture storage unit 114 matches the gesture of the gesture on the panel, and the second application execution unit 113 detects by the contact determination unit 111. The application associated with the registered information is started or operated.

図9は、アプリケーションプロセッサ11の動作の詳細を示すフローチャートである。図9に示すように、タッチパネル装置100を起動した状態で(ステップS101)、ユーザからの接触を待機する(ステップS102)。このとき、アプリケーションを何も起動していない状態であっても、起動している状態であっても、ユーザからの接触待機となる。そして、タッチパネル103にユーザからの接触が検知され(ステップS103)、一定時間以上、その動作が続いた場合、例えば一定時間以上、指をスライドしたり、複数回タップしたり、一定時間以上ある連続した動作を検出した場合(ステップS104)に、接触判定部111が当該動作(ジェスチャー)の判定動作を開始する(ステップS105)。そして、例えばユーザの指が3本接触している状態であれば、それを三角形と認識し、その頂角αや辺の長さLを検出することで、パネル上ジェスチャーであるか否かの判定を行う(ステップS106)。   FIG. 9 is a flowchart showing details of the operation of the application processor 11. As shown in FIG. 9, the touch panel device 100 is activated (step S101), and a user contact is waited (step S102). At this time, even if no application is activated or activated, the user is placed in a standby state. Then, when a touch from the user is detected on the touch panel 103 (step S103) and the operation continues for a certain time or more, for example, a finger is slid for a certain time or more, tapped a plurality of times, or continuously for a certain time or more. When the detected motion is detected (step S104), the contact determination unit 111 starts the determination operation for the motion (gesture) (step S105). And, for example, if the user's fingers are in contact with each other, it is recognized as a triangle, and by detecting its apex angle α and side length L, whether or not it is a gesture on the panel A determination is made (step S106).

ここで、ステップS103乃至ステップS106において、接触を検出したものの、一定時間以上のジェスチャーではなかったり、一定時間以上のジェスチャーではあるものの、登録情報に該当するパネル上ジェスチャーではない場合であって、クリックやリンク指定などの通常入力動作であると判定できる場合には、当該通常入力動作に該当する動作制御、例えばアプリケーションを起動する動作の他、ファイルを開く、リンクを指定する、文字や数字を入力する等を実施する(ステップS107)。一方、ジェスチャー記憶部114に登録されているパネル上ジェスチャーが検出された場合には、該当するアプリケーションを起動する等の第2アプリ実行部113における制御を実施する(ステップS108)。   Here, in step S103 to step S106, a touch is detected, but the gesture is not a certain time or more, or is a gesture for a certain time or more, but is not a gesture on the panel corresponding to the registration information, and is clicked. If it can be determined that the input operation is a normal input operation, such as specifying a link or a link, operation control corresponding to the normal input operation, for example, an operation for starting an application, opening a file, specifying a link, entering characters or numbers And so on (step S107). On the other hand, when the on-panel gesture registered in the gesture storage unit 114 is detected, the second application execution unit 113 performs control such as starting the corresponding application (step S108).

図5に戻って、ロック機能制御部115は、予め登録された所定のパネル上ジェスチャーが検出されると、タッチパネルの誤動作を防止するロック機能を解除する。この場合、例えば全パネル上ジェスチャーを、ロック解除ジェスチャーとして登録してもよいし、ある一部のパネル上ジェスチャーのみ、ロック解除ジェスチャーとして登録してもよい。これにより、タッチパネル装置100がロック状態のときにが、従来であれば、ロック機能を解除し、アイコンを探し、これをクリックするという2又は3段階の工程が必要であったが、本実施の形態においては、登録済みのパネル上ジェスチャーが検出されると、ロック解除すると共に、第2アプリ実行部113の制御により、アプリケーションを起動又は操作することができる。   Returning to FIG. 5, when a predetermined on-panel gesture registered in advance is detected, the lock function control unit 115 releases the lock function that prevents the touch panel from malfunctioning. In this case, for example, gestures on all the panels may be registered as unlock gestures, or only some of the gestures on the panel may be registered as unlock gestures. As a result, when the touch panel device 100 is in the locked state, a conventional two- or three-step process of releasing the lock function, searching for an icon, and clicking the icon is necessary. In the embodiment, when a registered gesture on the panel is detected, the lock can be released, and the application can be activated or operated under the control of the second application execution unit 113.

更に、ジェスチャー記憶部114は、登録情報として、上述の第1乃至第4の値の大きさ及び/又はパネル上ジェスチャーのパネル上の位置に応じて、起動するアプリケーションにおける再生速度、音量、及び文字の大きさ等の値をパラメータ値とし、このパラメータ値を対応づけて記憶することも可能である。すなわち、当該登録情報はアプリケーションの起動のみならず、起動するアプリケーションにおける再生速度等もパネル上ジェスチャのみで設定変更することが可能である。   Furthermore, the gesture storage unit 114 has, as the registration information, the playback speed, volume, and character in the application to be activated according to the size of the first to fourth values and / or the position of the gesture on the panel on the panel. It is also possible to use a value such as the size of the parameter as a parameter value and store the parameter value in association with each other. That is, the registration information can be set not only by starting the application, but also by changing the playback speed and the like of the application to be started only by gestures on the panel.

すなわち、図10乃至図12は、パネル上ジェスチャーを行うユーザの他の例を示す図である。図10に示すように、3本の指で三角形210の形で所定時間以上接触したり、3回以上タップしたりして、パネル上ジェスチャーと判定可能なジェスチャーを行うのみならず、以下に説明するようなジェスチャーを更に追加することも可能である。すなわち、パネル上ジェスチャーとして登録する登録情報を、この三角形210の形状を一回り大きい三角形220の形状となるよう3本の指を外側にスライドさせるジェスチャーとすることができる。   That is, FIGS. 10 to 12 are diagrams illustrating other examples of the user who performs the gesture on the panel. As shown in FIG. 10, not only a gesture that can be determined as a gesture on the panel is performed by touching in the shape of a triangle 210 with three fingers for a predetermined time or more and tapping three or more times. It is also possible to add more gestures such as That is, the registration information registered as a gesture on the panel can be a gesture in which three fingers are slid outward so that the shape of the triangle 210 is slightly larger than the shape of the triangle 210.

そして、三角形210を検出可能なジェスチャーを、オーディオ再生ソフトを起動する動作と対応付けて登録情報T1とすると共に、三角形210→大きい三角形220を検出可能なジェスチャーを、オーディオ再生ソフトを起動すると共に、音量を大きくする動作と対応付け、登録情報T2とする。これにより、接触判定部111が、三角形210のパネル上ジェスチャーを検出した場合は、オーディオ再生ソフトを起動し、三角形210→大きい三角形220を検出した場合は、オーディオ生成ソフトを起動すると共に音量を大きくする動作を実行させることができる。なお、オーディオ再生ソフトを起動すると共に、音量を変更するための音量ミキーサ等を表示し、オーディオ再生ソフトの起動と共にユーザが即座に音量を変更できるようにすることも可能である。更に、この音量の変化量等はパネル上ジェスチャーの大きさにより動的に調節できるようにしてもよい。例えばパ寝r上ジェスチャーで三角形を割く角形220より大きくした場合はその拡大度合に応じて音量をさらに大きくする等してもよい。   A gesture that can detect the triangle 210 is associated with an operation of starting the audio playback software as registration information T1, and a gesture that can detect the triangle 210 → the large triangle 220 is started up of the audio playback software. The registration information T2 is associated with the operation for increasing the volume. As a result, when the touch determination unit 111 detects a gesture on the panel of the triangle 210, the audio playback software is activated, and when the triangle 210 → the large triangle 220 is detected, the audio generation software is activated and the volume is increased. The operation to perform can be executed. It is also possible to activate the audio playback software and display a volume mikeyer or the like for changing the volume so that the user can immediately change the volume when the audio playback software is activated. Further, the amount of change in volume may be adjusted dynamically according to the size of the gesture on the panel. For example, when the size is larger than the square 220 that divides the triangle by the upper sleep gesture, the volume may be further increased according to the degree of enlargement.

これにより、パネル上ジェスチャーにより、アプリケーションを起動させるのみならず、所望のアプリケーションの起動動作のみならず、音量の変更などの設定値の変更や、所定のファイルの再生などを指定しておくことも可能となる。   In this way, it is possible to specify not only the activation of the application, the activation operation of the desired application, the change of the setting value such as the change of the volume, the reproduction of the predetermined file, etc. by the gesture on the panel. It becomes possible.

一方、ジェスチャー記憶部114により、相似形の三角形を接触した後、反対に三本の指を内側にスライドさせる動作と音量を小さくする動作とを対応付けて登録情報とすることも可能である。これにより、接触判定部111がこれを検出すると、オーディオ再生ソフトを起動すると共に音量を小さくする動作を一緒に行うことができる。   On the other hand, after the gesture storage unit 114 touches the similar triangle, it is also possible to associate the operation of sliding the three fingers inward with the operation of reducing the volume to make the registration information. Thereby, when the contact determination part 111 detects this, the operation | movement which reduces audio | voice volume while starting audio | voice reproduction | regeneration software can be performed together.

また、図11に示すように、三角形210を、三角形の大きさを変化させることなく、そのまま3本の指を上にスライドさせた三角形230とするパネル上ジェスチャーと、オーディオ再生ソフトの起動及び再生速度をアップさせる動作と対応づけて登録情報とすることも可能である。これにより、接触判定部111が三角形210→三角形230を検出した場合は、オーディオ再生ソフトを再生すると同時に再生速度を速くする動作を行わせることができる。同じく、三角形230をそのまま下方にスライドさせた三角形210とするパネル上ジェスチャーと、オーディオ再生ソフトの起動及び再生速度を遅くする動作と対応付けて登録情報とすることで、当該パネル上ジェスチャーを行うことで、オーディオ再生ソフトを起動すると共に再生速度を遅くする動作を行わせることも可能である。   Also, as shown in FIG. 11, the triangle 210 is made into a triangle 230 in which three fingers are slid up without changing the size of the triangle, and the activation and reproduction of the audio reproduction software is performed. It is also possible to use registration information in association with an operation for increasing the speed. Thereby, when the contact determination unit 111 detects the triangle 210 → the triangle 230, it is possible to perform an operation of increasing the reproduction speed at the same time as reproducing the audio reproduction software. Similarly, the gesture on the panel can be performed by using the registration information in association with the gesture on the panel as the triangle 210 by sliding the triangle 230 as it is and the operation of starting the audio playback software and slowing down the playback speed. Thus, it is possible to start the audio playback software and perform an operation of reducing the playback speed.

更にまた、これらの動作を組み合わせることも可能である。すなわち、図12に示すように、ユーザが指で三角形210のジェスチャーを行い、接触させた指3本を外側にスライドさせて三角形220とし、さらに、この三角形220の形状のまま指を上にスライドさせて三角形230とするジェスチャーと、オーディオ再生ソフトの起動、再生音量のアップ、及び再生速度のアップの動作と対応付けて登録情報とすることで、当該パネル上ジェスチャーを検出した場合は、オーディオ再生ソフトを起動すると共に、音量を大きくし、かつ再生速度をアップする動作を一気に行わせることも可能である。   Furthermore, these operations can be combined. That is, as shown in FIG. 12, the user performs a gesture of the triangle 210 with a finger, and slides the three touched fingers outward to form the triangle 220, and then slides the finger upward while maintaining the shape of the triangle 220. If the gesture on the panel is detected by correlating the gesture to the triangle 230 with registration information associated with the operation of starting the audio playback software, increasing the playback volume, and increasing the playback speed, the audio playback is performed. It is possible to start the software, increase the volume and increase the playback speed at once.

なお、これらの反対の動作、すなわち、三角形の形状を小さくして音量を下げたり、三角形を下にスライドさせて再生速度を下げたりする動作をそれぞれ組み合わせることも可能であることは言うまでもない。更に上述したように、オーディオ再生ソフトの起動と同時に、音量調整用ボタン及び再生速度調整用ボタンを表示させる等して、再生ソフトが起動されると同時に、ユーザが音量調整及び再生速度調整を容易にできるようすることも可能である。自動的に音量や再生速度を調整するようにするか、即時に調整可能とするよう当該動作を補助する手段を表示させるかをユーザ自身の設定で選択できるようにしてもよい。   Needless to say, it is also possible to combine these opposite operations, that is, the operation of decreasing the volume by reducing the triangle shape and the operation of sliding the triangle downward to decrease the reproduction speed. Furthermore, as described above, the user can easily adjust the volume and the playback speed at the same time as the playback software is started by displaying the volume adjustment button and the playback speed adjustment button simultaneously with the start of the audio playback software. It is also possible to make it possible. The user may be able to select whether to automatically adjust the volume and playback speed or to display means for assisting the operation so that the adjustment can be made immediately.

こうして第2アプリ実行部113は、接触判定部111により検出された登録情報に対応付けられたアプリケーションを起動すると共に、スライドする方向、速さ等のパラメータ値に応じた当該アプリケーションの動作を実行する。これにより、パネル上ジェスチャーを行うのみで、ユーザの所望のアプリケーションを所望の動作で実行することができる。   In this way, the second application execution unit 113 activates the application associated with the registration information detected by the contact determination unit 111 and executes the operation of the application according to the parameter values such as the sliding direction and the speed. . Thereby, a user's desired application can be executed with a desired operation only by performing a gesture on the panel.

さらに、タッチパネル装置100は、上述したように操作ボタン104を有するが、この操作ボタン104を、パネル上の接触方法によらず、所定の動作を指示可能なものとしてもよい。これにより、接触判定部111は、ユーザの接触があったときは、この操作ボタン104が押下されているか否かを検出し、操作ボタン104が押下されている場合はユーザからの接触を即座にパネル上ジェスチャーと判定することができ、確実に第2アプリ実行部113の動作を優先させることができる。この場合は、ジェスチャー記憶部114は、接触体のパネル上ジェスチャーの接触方法と共に、操作ボタン104に対する操作を登録情報として記憶しておけばよい。   Furthermore, the touch panel device 100 includes the operation button 104 as described above, but the operation button 104 may be capable of instructing a predetermined operation regardless of the contact method on the panel. Thereby, the contact determination unit 111 detects whether or not the operation button 104 is pressed when the user touches, and immediately contacts the user when the operation button 104 is pressed. It can be determined as a gesture on the panel, and the operation of the second application execution unit 113 can be surely prioritized. In this case, the gesture storage unit 114 may store the operation on the operation button 104 as registration information together with the contact method of the gesture on the panel of the contact body.

また、操作ボタン104が複数ある場合は、同一パネル上ジェスチャーであっても異なる操作ボタン毎に異なる起動動作等を対応づけておくことも可能となり、この場合、パネル上ジェスチャー×操作ボタン104の数の異なる起動動作等を実行させることができる。   In addition, when there are a plurality of operation buttons 104, it is possible to associate different activation operations for different operation buttons even if the gestures are on the same panel. In this case, the number of the gestures on the panel × the number of the operation buttons 104 Different starting operations can be executed.

[アプリケーションプロセッサの他の動作]
図13は、アプリケーションプロセッサの他の例における動作方法を示す図である。図13に示すように、ステップS1乃至ステップS3は、図4に示す例と同様である。ここで、接触判定部111がパネル上ジェスチャーを検出すると、図5に示すアプリケーションプロセッサ11においては、ロック機能制御部115によりロック機能を解除すると共に、第2アプリ実行部113は、ジェスチャー記憶部114に登録された対応するアプリケーションの起動等を実施する(ステップS5)。
[Other operations of application processor]
FIG. 13 is a diagram illustrating an operation method in another example of the application processor. As shown in FIG. 13, steps S1 to S3 are the same as the example shown in FIG. Here, when the contact determination unit 111 detects a gesture on the panel, in the application processor 11 shown in FIG. 5, the lock function control unit 115 releases the lock function, and the second application execution unit 113 displays the gesture storage unit 114. The corresponding application registered in (1) is activated (step S5).

本実施の形態においては、タッチパネルを搭載したタッチパネル装置において、マルチタップ等のパネル上ジェスチャーGのみで、アプリケーションの起動又は操作を行うことができ、また、接触判定部111により、当該タッチパネル上での接触体によるクリックを含む通常入力動作か、当該通常入力動作以外のジェスチャーであるパネル上ジェスチャーGかを判定し、パネル上ジェスチャーGが検出された場合には、第2アプリ実行部113の制御、すなわち登録されているアプリケーションの起動動作又は操作動作を通常動作に優先して実行するため、タッチパネル装置100が、登録したアプリケーションを起動又は操作しようとして通常動作をしてしまう等の誤動作を抑制することができる。したがって、他のプリケーションを起動中であっても、所望のアプリケーションの起動又は操作動作を簡単に行うことができ、ユーザのタッチパネル装置100の操作性を向上させることができる。   In the present embodiment, in a touch panel device equipped with a touch panel, an application can be activated or operated with only a gesture G on the panel such as a multi-tap, and the contact determination unit 111 can perform the operation on the touch panel. It is determined whether the gesture is a normal input operation including a click by a contact body or a gesture on the panel G that is a gesture other than the normal input operation, and if the gesture G on the panel is detected, control of the second application execution unit 113, That is, since the activation operation or the operation operation of the registered application is executed with priority over the normal operation, the touch panel device 100 suppresses a malfunction such as a normal operation trying to activate or operate the registered application. Can do. Therefore, even when another application is being activated, a desired application can be activated or operated easily, and the operability of the user's touch panel device 100 can be improved.

パネル上ジェスチャーGによりアプリケーションを起動するため、ユーザは該当アプリケーションの起動用アイコンを探す必要がなくなり、アプリケーション起動用アイコンの位置を覚えたり、使用頻度の高いアプリケーションの起動アイコンが前にくるように並び替えたりする必要がなくなる。さらに、アプリケーションの起動手順を体で覚えることができ。直感的な動作をジェスチャーとして登録することができるので操作が容易となる。よって、まだ漢字が読めないような子供や、細かい文字を読むことが苦手なお年寄りにとっても、操作性を向上したタッチパネル装置を提供することができる。   Since the application is activated by the gesture G on the panel, the user does not need to search for the activation icon of the application, and remembers the position of the application activation icon or arranges the activation icons of frequently used applications in front. There is no need to change. In addition, you can learn the application startup procedure with your body. Intuitive movements can be registered as gestures, making operation easier. Therefore, it is possible to provide a touch panel device with improved operability for children who cannot read kanji yet and elderly people who are not good at reading fine characters.

[具体例]
以下、アプリケーションの起動方法の具体例として、アプリケーションの状態を選択した状態で起動、状態の変更、又は操作方法の例を、下記[起動・変更方法]において説明する。更に、変更する具体的な状態や操作内容を、下記[変更する状態]において説明する。
[Concrete example]
Hereinafter, as a specific example of the application activation method, an example of activation, state change, or operation method with the application state selected will be described in [Activation / Change Method] below. Further, a specific state to be changed and an operation content will be described in [Changed state] below.

[起動・変更方法]
<1>
第1の起動・変更方法としては、もっとも簡便な方法としてユーザの複数の指で多角形を認識させたり、所定回数、所定タイミングでタッチパネルをタップする方法である。例えば、タッチパネル103において、図6に示す三角形200に、ユーザの指を所定時間接触させる動作をパネル上ジェスチャーG1とし登録する。ここで、パネル上ジェスチャーG1として、3つの頂角α1、α2、α3と、最も大きい頂角α1と向かい合う第1辺の長さL1を、登録情報T1とし、この登録情報T1が検出された場合には、アプリケーションA1を起動させるものとし、登録情報T1とアプリケーションA1とを対応づけて登録する等である。
[How to start / change]
<1>
As the first activation / change method, the simplest method is a method of recognizing a polygon with a plurality of user's fingers or tapping a touch panel at a predetermined number of times. For example, on the touch panel 103, an operation of bringing the user's finger into contact with the triangle 200 shown in FIG. 6 for a predetermined time is registered as the on-panel gesture G1. Here, as the on-panel gesture G1, the three apex angles α1, α2, and α3 and the length L1 of the first side facing the largest apex angle α1 are set as registration information T1, and this registration information T1 is detected. For example, the application A1 is activated, and the registration information T1 and the application A1 are registered in association with each other.

この場合、上述のパラメータ値を合わせて登録することができる。すなわち、3つの頂角α1、α2、α3が等しく、辺の長さL1が登録情報T1より大きい場合、反対に辺の長さL1が登録情報T1より小さい場合などに、アプリケーションAに特有の動作を割り当てておくことができる。すなわち、アプリケーションA1がメール作成ソフトである場合に、登録情報T1より辺の長さL1が大きい場合には、メール作成ソフトを起動させると同時に、メールの新規作成画面を開いたり、登録情報T1より辺の長さL1が小さい場合には、メール作成ソフトを起動させると同時に、受信メール一覧を表示する画面を開いたりすることができる。なお、これらは一具体例であって本具体例に限定されるものではない。例えば、登録情報T1を基に何らかの変化量を検出すると特定のアプリケーション(ソフトウェア)を操作できるようにしてもよい。例えば三角形200の面積の量の変化量を特定のアプリケーションの操作と対応づけて登録情報とすれば、当該変化量を検出して起動又は操作を実行させることができる。   In this case, the above parameter values can be registered together. That is, when the three apex angles α1, α2, and α3 are equal and the side length L1 is larger than the registration information T1, on the contrary, when the side length L1 is smaller than the registration information T1, the operation peculiar to the application A is performed. Can be assigned. That is, when the application A1 is mail creation software and the side length L1 is larger than the registration information T1, the mail creation software is started and at the same time a new mail creation screen is opened or the registration information T1 is used. When the length L1 of the side is small, the screen for displaying the received mail list can be opened at the same time as starting the mail creating software. Note that these are specific examples and are not limited to the specific examples. For example, a specific application (software) may be operated when some amount of change is detected based on the registration information T1. For example, if a change amount of the area amount of the triangle 200 is associated with an operation of a specific application and used as registration information, the change amount can be detected and an activation or operation can be executed.

<2>
第2の起動・変更方法としては、指3本で三角形を形成する等のパネル上ジェスチャーG1に動きを加える方法である。すなわち、各ジェスチャーに動きを追加し、この動きに応じてアプリケーションの状態(起動画面を開く他、SNS(social networking service)における日記の記録画面のように特定ページにスキップする等)やアプリケーション特有の値(再生速度、ボリューム、表示画像又は表示文字の大き、動画又は静止画の撮影の指定、撮影する画像のズーム)を、所望の値に対応づける。動きを加える一例を下記に示す。
(1)ピンチアウトする:例えば3本の指を外側にスライドさせて三角形200を拡大するジェスチャー
(2)ピンチインする:例えば3本の指を内側にスライドさせて三角形200をすぼめるジェスチャー
(3)スワイプする:例えば、3本の指を左右にスライドさせるジェスチャー
(4)ローテートする:例えば、3本の指を回転するようにスライドさせるジェスチャー
(5)フリックする:例えば、画面をスクロールさせるときのように、素早く払うようなジェスチャー
<2>
The second activation / change method is a method of adding a motion to the on-panel gesture G1 such as forming a triangle with three fingers. In other words, a motion is added to each gesture, and the application state (opening the start screen, skipping to a specific page like a diary recording screen in SNS (social networking service)) according to this motion, or application-specific The values (reproduction speed, volume, size of display image or display character, designation of shooting of moving image or still image, zoom of image to be shot) are associated with desired values. An example of adding motion is shown below.
(1) Pinch out: for example, a gesture to slide the three fingers outward to enlarge the triangle 200 (2) Pinch in: for example, a gesture to slide the three fingers inward to squeeze the triangle 200 (3) Swipe: For example, gesture to slide left and right three fingers (4) Rotate: For example, gesture to slide three fingers to rotate (5) Flick: For example, when scrolling the screen Gestures like paying quickly

この場合、上述したように、広げる動作で音量をアップさせたり、上にスワップする動作で再生速度をアップさせる等直感的に指定することが可能となる。これにより、アプリケーション起動後に設定を変更する動作を省略又は容易にし、使用頻度の高いアプリケーションのユーザ負担を軽減することができる。   In this case, as described above, it is possible to specify intuitively, for example, by increasing the volume by an operation of widening or by increasing the playback speed by an operation of swapping up. Thereby, the operation | movement which changes a setting after application starting can be abbreviate | omitted or made easy, and the user burden of the application with high use frequency can be reduced.

<3>
第3の起動・変更方法としては、上記第2の方法の動きを加える他の例が挙げられる。図7に示したように、ユーザの指などを接触した状態で、くの字や何らかの文字の形状や、円形やタッチパネル103と同じ四角の形状などに指やタッチペンを接触したまま摺動させるジェスチャーを利用する方法である。例えば、上記の第1、第2の方法と合わせて登録することで、更に異なるパネル上ジェスチャーGとして登録することができる。例えば、オーディオ再生ソフト、画像再生ソフト等を異なるジェスチャー(例えば異なる三角形等)とし、その三角形のジェスチャーの後又はジェスチャーをする前に、当該接触位置を横にスライドするジェスチャーを組み合わせた場合は、アプリケーション(ソフトウェア)の起動と共に、所定の動作を開始させるよう登録しておくことも可能である。さらにまた、アプリケーションの起動と共に、複数のアプリケーション(ソフトウェア)に共通の動作を対応付けておくことで、ユーザがパネル上ジェスチャーGの記憶量を低減することも可能となる。
<3>
As the third activation / change method, there is another example in which the movement of the second method is added. As shown in FIG. 7, a gesture in which a finger or a touch pen is slid while a finger or a touch pen is in contact with a shape of a character or some character, a circle or the same square shape as the touch panel 103, etc. with a user's finger in contact It is a method of using. For example, by registering together with the above first and second methods, it is possible to register as a different gesture G on the panel. For example, if the audio playback software, image playback software, etc. are different gestures (for example, different triangles), and the gesture that slides the contact position sideways is combined after the triangle gesture or before performing the gesture, It is also possible to register to start a predetermined operation together with the activation of (software). Furthermore, by associating a common operation with a plurality of applications (software) together with the activation of the application, the user can also reduce the storage amount of the gesture G on the panel.

組み合わせるジェスチャーとしては、三角形の形状を維持した状態でもよいし、単に何本かの指を左右、上下にスライドする動作を組み合わせるのみとしてもよい。更に、手の形を維持したままのスライド動作を複数回行う、すなわち、手を開いた状態等として図形や線や文字を描いたり、三角形を回転させたり、当該動作を繰り返す回数に応じた動作とすることも可能である。   The gesture to be combined may be a state in which the shape of the triangle is maintained, or may be a combination of simply sliding several fingers left and right and up and down. Furthermore, the slide operation is performed multiple times while maintaining the shape of the hand, that is, an operation corresponding to the number of times the operation is repeated, such as drawing a figure, a line or a character with the hand open, rotating the triangle, etc. It is also possible.

<4>
第4の起動・変更方法としては、指紋認証によりロックを外す機能を有するタッチパネル装置100を使用する方法がある。このようなタッチパネル装置100においては、通常、指紋認証部に指定の指をスライドするが、例えば人差し指→中指の順でスライドする(指紋認証させる)動作をパネル上ジェスチャーG2、人差し指→薬指の順で指紋認証させる動作をパネル上ジェスチャーG3等とし、異なるパネル上ジェスチャーGとして登録し、この順序で指紋認証した場合には、ロック解除と共に、対応づけられたアプリケーションを起動させることが可能となる。
<4>
As a fourth activation / change method, there is a method of using the touch panel device 100 having a function of unlocking by fingerprint authentication. In such a touch panel device 100, a designated finger is normally slid on the fingerprint authentication unit. For example, an operation of sliding in the order of the index finger → middle finger (permit fingerprint authentication) is performed in the order of gesture G2 on the panel, index finger → ring finger. When the fingerprint authentication operation is registered as a gesture G3 on the panel and registered as a different gesture G on the panel, and fingerprint authentication is performed in this order, the associated application can be activated together with unlocking.

<5>
第5の起動・変更方法としては、操作ボタン104を利用する方法がある。すなわち、操作ボタン104を押下しながらジェスチャーを行う場合を、パネル上ジェスチャーGとして検出するよう登録することも可能である。また、画面ロックされていない場合等においては、ハードキー(操作ボタン104)のみならず、ソフトキーを利用してもよい。例えば、タッチパネル装置100のトップ画面に戻すボタン(以下、ホームボタンという。)を押しながら、上述の第1乃至第4の起動方法・変更方法でタップやスライド等のジェスチャーを行った場合、該当アプリケーションを起動させたり、起動と共に所定の動作を実行させたりすることができる。これにより、現在起動中のアプリケーションへの入力(通常のクリック動作や、文字入力、インターネットブラウザのリンクの指定)等の通常入力動作との、接触判定部111における区別が容易となり、これにより小さいジェスチャーでも判別が可能となるため、ユーザが複雑なパネル上ジェスチャーを記憶する必要がなくなる。
<5>
As a fifth activation / change method, there is a method of using the operation button 104. That is, it is also possible to register so as to detect a case where a gesture is performed while pressing the operation button 104 as a gesture G on the panel. In addition, when the screen is not locked, not only hard keys (operation buttons 104) but also soft keys may be used. For example, when a gesture such as a tap or a slide is performed by the above-described first to fourth activation methods / change methods while pressing a button for returning to the top screen of the touch panel device 100 (hereinafter referred to as a home button), the corresponding application Or a predetermined operation can be executed at the same time as the activation. This makes it easy to distinguish in the contact determination unit 111 from normal input operations such as input to the currently running application (normal click operation, character input, Internet browser link designation), etc. However, since discrimination is possible, the user does not need to memorize complicated gestures on the panel.

さらに、上記第2の方法又はその組み合わせをパネル上ジェスチャーとして登録している場合に、他のアプリケーション上で、パネル上ジェスチャーではなく、本来のピンチインやピンチアウトの動作を行う場合があるが、接触判定部111において、これらの動作とパネル上ジェスチャーとの区別がより簡単になるため、誤動作等が低減され、ユーザにとってより使いやすい機能となる。   Furthermore, when the second method or a combination thereof is registered as a gesture on the panel, an original pinch-in or pinch-out operation may be performed on another application instead of the gesture on the panel. Since the determination unit 111 can more easily distinguish between these operations and the gestures on the panel, malfunctions and the like are reduced, and the user can use the functions more easily.

さらにまた、操作ボタン104が複数ある場合には、同一のジェスチャーであっても操作ボタン104毎に異なるパネル上ジェスチャーGとして、異なるアプリケーションの起動や動作を対応づけることができ、複数のジェスチャーを記憶する必要がなくなり、操作性が向上する。   Furthermore, when there are a plurality of operation buttons 104, even when the gesture is the same, different application activations and actions can be associated as different gestures G on the panel for each operation button 104, and a plurality of gestures are stored. The operability is improved.

なお、これら第1乃至第5の起動・変更方法のうち、複数を組み合わせて1つのパネル上ジェスチャーとすることができる他、例えば第1、第2及び第5の方法を組みわせる場合に、第1及び第2の起動・変更方法の順序を入れ替えたものを、異なるパネル上ジェスチャーとして登録することも可能であり、より多くの起動・動作を実行させることができる。この場合、実行順序と、起動・動作とをある一定の法則で関係づけることにより、ユーザのパネル上ジェスチャーの記憶をより容易とすることができる。   Of these first to fifth activation / change methods, a plurality of methods can be combined into a single panel gesture. For example, when the first, second, and fifth methods can be combined, Those in which the order of the first and second activation / change methods is changed can be registered as different panel gestures, and more activation / operations can be executed. In this case, it is possible to more easily memorize the user's gestures on the panel by associating the execution order with the activation / action according to a certain rule.

[変更する状態]
<1>
状態を変更する例としては、各アプリケーションに特有の値を変化させる場合やモードを指定する場合が挙げられる。各アプリケーションに特有の値とは、音楽再生ソフト・動画再生ソフトにおける音量の大小・再生速度の大小を指定する値、カメラ撮影用ソフトにおけるズームの大小を指定する値、メールソフトやインターネット検索ソフト、辞書ソフト等において文字を閲覧したり、文字を書き込む場合の大きさを指定する値等が考えらえる。また、モードを指定する値とは、静止画・動画撮影用ソフトにおける自動撮影モード、録画モード、室内、屋内、風景撮影モード、人物撮影モードなどのモードを指定する値、SNS投稿アプリケーションにおける投稿内容の閲覧モードやユーザ自身による投稿モードのモードを指定する値等が考えられる。これらの値も登録情報として登録しておくことで、アプリケーションを起動するのみでなく、更に何段階か通常であれば操作が必要な設定値や状態にまでスキップさせた状態でアプリケーションを実行することが可能となる。これにより、ユーザはより短時間で自分の操作したい状態とすることができ、タッチパネル装置100における操作性を向上させることができる。
[Status to be changed]
<1>
Examples of changing the state include a case where a value specific to each application is changed or a mode is specified. Values specific to each application include values that specify the volume level and playback speed of music playback software and video playback software, values that specify the zoom size of camera shooting software, mail software and Internet search software, A value that specifies the size when the character is viewed or written in dictionary software or the like can be considered. The value for specifying the mode is a value for specifying a mode such as an automatic shooting mode, recording mode, indoor, indoor, landscape shooting mode, portrait shooting mode, etc. in still image / moving image shooting software. For example, a value for specifying the viewing mode or the posting mode by the user can be considered. By registering these values as registration information, not only the application is started, but also the application is executed in a state where it is skipped to the setting value or state that requires operation in some stages. Is possible. Thereby, the user can be in a state where he / she wants to operate himself / herself in a shorter time, and the operability of the touch panel device 100 can be improved.

<2>
状態を変更する例としては、アプリケーションの起動や所定の動作を開始させるだけでなく、終了動作を行うことも可能である。この場合は、アプリケーション毎に異なるパネル上ジェスチャーを登録する必要がなく、きわめて簡単な動作でアプリケーションを終了させることができる。具体的には、直感的にわかりやすい動作終了方法として、例えば、ある程度指を広げた状態から指を内側にスライドさせ指をすぼめるジェスチャーをアプリケーション終了のパネル上ジェスチャーGとして登録することができる。
<2>
As an example of changing the state, it is possible not only to start an application or start a predetermined operation, but also to perform an end operation. In this case, there is no need to register a different gesture on the panel for each application, and the application can be terminated with a very simple operation. Specifically, as an operation end method that is intuitively easy to understand, for example, a gesture that slides a finger inward from a state where the finger is spread to a certain extent and depresses the finger can be registered as an on-panel gesture G on the application end.

このように、本実施の形態においては、複数の指やタッチペンなどのタッチ想定物(接触体)でタッチパネルを接触しながら行うジェスチャー(パネル上ジェスチャー)のみで、他のアプリケーションを実施中であっても誤動作させることなく、所望のアプリケーションの起動や終了を含む所望の動作を行わせることができる。   As described above, in the present embodiment, other applications are being executed only with gestures (gestures on the panel) performed while touching the touch panel with a touch assumption object (contact body) such as a plurality of fingers or a touch pen. In addition, it is possible to perform a desired operation including activation and termination of a desired application without causing a malfunction.

パネル上ジェスチャーとして認識させるジェスチャーとしては、ユーザの複数本の指で指定した多角形の面積の大きさやその変更、その前後に接触部分が加えるジェスチャー等による、連続又は不連続に所定時間以上接触させる動作とすることができ、ジェスチャーの違いにより、起動するアプリケーションやその状態、アプリケーションの内部の値を指定することができる。これにより、タッチパネル装置100においてタッチパネルが反応する状態ならばいかなるときでも当該機能を利用することができ、ユーザの操作性を向上させることができる。   As gestures to be recognized as gestures on the panel, contact is performed continuously or discontinuously for a predetermined time or more, depending on the size of the polygon specified by the user's multiple fingers, a change in the polygon area, or a gesture added by a contact part before and after that. It is possible to specify an application to be activated, its state, and an internal value of the application depending on the gesture. Accordingly, the function can be used at any time as long as the touch panel reacts in the touch panel device 100, and the operability for the user can be improved.

また、例えば速いジェスチャーには、高速で再生するよう設定したアプリケーションが起動するよう対応付ける等、アプリケーションの状態をユーザが直感的に決定することができる。さらに、ユーザがパネル上ジェスチャーの方法を覚えるだけで、アプリケーションを起動することができ、起動用のアイコンを探したり、又は起動用のアイコンがいずれか認識できないようなユーザであっても、アプリケーションを動作させることができる。   Further, for example, the user can intuitively determine the state of the application, such as associating a fast gesture with an application set to be played back at high speed. Furthermore, the user can start the application simply by learning the gesture method on the panel, and even if the user is searching for a startup icon or cannot recognize any of the startup icons, It can be operated.

なお、本発明は上述した実施の形態のみに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能であることは勿論である。   It should be noted that the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the scope of the present invention.

例えば、上述の実施の形態では、ハードウェアの構成として説明したが、これに限定されるものではなく、任意の処理を、CPU(Central Processing Unit)にコンピュータアプリケーションを実行させることにより実現することも可能である。この場合、コンピュータアプリケーションは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD−ROM(Read Only Memory)、CD−R、CD−R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(random access memory))を含む。また、アプリケーションは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、アプリケーションをコンピュータに供給できる。   For example, in the above-described embodiment, the hardware configuration has been described. However, the present invention is not limited to this, and arbitrary processing may be realized by causing a CPU (Central Processing Unit) to execute a computer application. Is possible. In this case, the computer application can be stored and supplied to the computer using various types of non-transitory computer readable media. Non-transitory computer readable media include various types of tangible storage media. Examples of non-transitory computer-readable media include magnetic recording media (for example, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (for example, magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, CD-R / W and semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (random access memory)) are included. The application may also be supplied to the computer by various types of transitory computer readable media. Examples of transitory computer readable media include electrical signals, optical signals, and electromagnetic waves. The transitory computer readable medium can supply the application to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.

さらにまた、本願発明の観点は以下のように捉えることもできる。
(付記1)
タッチパネルを有するタッチパネル装置であって、
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定部と、
前記接触判定部により前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行部と、
前記接触判定部により前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行部と、を有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行部の制御に優先して前記第2アプリ実行部の制御が実行される、タッチパネル装置。
(付記2)
前記パネル上ジェスチャーは、前記タッチパネル上で多角形の形状に前記タッチパネルをなぞる動作とし、
前記パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及び前記接触体が前記タッチパネル上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶部を有し、
前記接触判定部は、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかを検出し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションの起動又は操作を実行する
付記1記載のタッチパネル装置。
(付記3)
前記パネル上ジェスチャーは、前記接触体により前記タッチパネルを所定間隔でタップする動作とし、
前記タッチパネルがタップされる回数、タップ間隔、タップの際の接触時間、及び一連の動作のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶部を有し、
前記接触判定部は、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかを検出し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションの起動又は操作を実行する
付記1又は2記載のタッチパネル装置。
(付記4)
前記タッチパネルの誤動作を防止するロック機能を制御するロック機能制御部をさらに備え、
前記ロック機能制御部は、予め登録された所定のパネル上ジェスチャーが検出されると前記ロック機能を解除するものであって、
前記接触判定部により前記所定のパネル上ジェスチャーを検出すると、前記タッチパネルのロック機能が解除されると共に、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップの制御が実行される、
付記1乃至3のいずれか1項記載のタッチパネル装置。
(付記5)
前記記憶部は、前記登録情報として、前記第1乃至第4の値の大きさ及び/又は前記パネル上ジェスチャーの前記パネル上の位置に応じて、起動するアプリケーションと共に当該アプリケーションにおける再生速度、音量、及び文字の大きさを含む特有のパラメータ値を対応付けて記憶し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションを起動すると共に前記パラメータ値に応じた当該アプリケーションの動作を実行する
付記2記載のタッチパネル装置。
(付記6)
前記タッチパネル装置は、前記パネル上の接触方法によらず、所定の動作を指示可能なハードキーを有し、
前記記憶部は、前記接触体の前記パネル上ジェスチャーの接触方法と共に、前記ハードキーに対する操作を前記登録情報として記憶し、
前記接触判定部は、前記パネル上ジェスチャー及び前記ハードキーに対する操作を前記登録情報として検出する
付記1乃至5のいずれか1項記載のタッチパネル装置。
(付記7)
前記接触判定部は、前記接触体による前記パネル上ジェスチャーが所定の誤差範囲で一致するとき、前記登録情報に該当すると判定する
付記1乃至6のいずれか1項記載のタッチパネル装置。
(付記8)
タッチパネルを有するタッチパネル装置の動作制御方法であって、
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定ステップと、
前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行ステップと、
前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行ステップとを有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップにおける制御が実行される、タッチパネル装置の動作制御方法。
(付記9)
前記パネル上ジェスチャーは、前記タッチパネル上で多角形の形状に前記接触体をなぞる動作とし、
前記パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及び前記接触体が前記タッチパネル上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶ステップを有し、
前記接触判定ステップでは、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかが検出され、
前記第2アプリ実行ステップでは、前記登録情報に対応付けられたアプリケーションの起動又は操作が実行される
付記8記載のタッチパネル装置の動作制御方法。
(付記10)
前記パネル上ジェスチャーは、前記接触体により前記タッチパネルを所定間隔でタップする動作とし、
前記タッチパネルがタップされる回数、タップ間隔、タップの際の接触時間、及び一連の動作のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶ステップを有し、
前記接触判定ステップでは、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかが検出され、
前記第2アプリ実行ステップでは、前記登録情報に対応付けられたアプリケーションの起動又は操作が実行される
付記8又は9記載のタッチパネル装置の動作制御方法。
(付記11)
前記タッチパネルの誤動作を防止するロック機能を制御するロック機能制御ステップを更に有し、
前記ロック機能制御ステップでは、予め登録された所定のパネル上ジェスチャーが検出されると前記ロック機能を解除するものであって、
前記所定のパネル上ジェスチャーが検出されると、前記タッチパネルのロック機能が解除されると共に、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップの制御が実行される、
付記8乃至10のいずれか1項記載のタッチパネル装置の動作制御方法。
(付記12)
前記記憶ステップでは、前記登録情報として、前記第1乃至第4の値の大きさ及び/又は前記パネル上ジェスチャーの前記パネル上の位置に対応付けて、起動するアプリケーションと共に当該アプリケーションにおける再生速度、音量、及び文字の大きさを含む特有のパラメータ値が記憶され、
前記第2アプリ実行ステップでは、前記登録情報に対応付けられたアプリケーションが起動されると共に前記パラメータ値に応じた当該アプリケーションの動作が実行される
付記9記載のタッチパネル装置の動作制御方法。
(付記13)
前記記憶ステップでは、前記登録情報として、前記接触体の前記パネル上ジェスチャーの接触方法と共に、前記パネル上の接触方法によらず、所定の動作を指示可能なハードキーに対する操作が記憶され、
前記接触判定ステップでは、前記パネル上ジェスチャー及び前記ハードキーに対する操作が前記登録情報として検出される
付記8乃至12のいずれか1項記載のタッチパネル装置の動作制御方法。
(付記14)
前記接触判定ステップでは、前記接触体による前記パネル上ジェスチャーが所定の誤差範囲で一致するとき、前記登録情報に該当すると判定される
付記8乃至13のいずれか1項記載のタッチパネル装置の動作制御方法。
(付記15)
タッチパネルを有するタッチパネル装置における動作処理をコンピュータに実行させるためのプログラムであって、
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定処理と、
前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行処理と、
前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行処理とを有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行処理に優先して前記第2アプリ実行処理が実施される、プログラム。
Furthermore, the viewpoint of this invention can also be grasped | ascertained as follows.
(Appendix 1)
A touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination unit that determines one of the gestures on the panel, which is an operation of making contact for a predetermined time or more,
A first application execution unit that executes a predetermined operation including activation of an application according to the input position when the normal determination operation is detected by the contact determination unit;
A second application execution unit that activates or operates a predetermined application registered in advance according to the gesture when the touch determination unit detects the gesture on the panel;
The touch panel device in which the control of the second application execution unit is executed in preference to the control of the first application execution unit when the gesture on the panel is detected.
(Appendix 2)
The gesture on the panel is an operation of tracing the touch panel in a polygonal shape on the touch panel,
A first value relating to the apex angle of a part or all of the polygon formed by the gesture on the panel, a second value relating to the length of each side of the polygon, and a third value relating to the area of the polygon. A value and a value relating to a speed at which the contact body traces on the touch panel are registered as one or a combination of one or more of the fourth values, and the registration information and a predetermined installed in the touch panel device A storage unit for storing the activation or operation of the application in association with each other,
The contact determination unit detects which registration information matches the gesture of the gesture on the panel,
The touch panel device according to supplementary note 1, wherein the second application execution unit executes activation or operation of an application associated with the registration information detected by the contact determination unit.
(Appendix 3)
The gesture on the panel is an operation of tapping the touch panel with the contact body at a predetermined interval,
One or a combination of one or more of the number of times the touch panel is tapped, the tap interval, the contact time at the time of tapping, and a series of operations is set as registration information, and the registration information and the touch panel device are installed. A storage unit that stores the activation or operation of a predetermined application in association with each other,
The contact determination unit detects which registration information matches the gesture of the gesture on the panel,
The touch panel device according to appendix 1 or 2, wherein the second application execution unit executes activation or operation of an application associated with the registration information detected by the contact determination unit.
(Appendix 4)
A lock function control unit for controlling a lock function for preventing malfunction of the touch panel;
The lock function control unit is to release the lock function when a pre-registered gesture on the panel is detected,
When the touch determination unit detects the predetermined gesture on the panel, the lock function of the touch panel is released, and the control of the second application execution step is executed in preference to the control of the first application execution step. ,
The touch panel device according to any one of appendices 1 to 3.
(Appendix 5)
The storage unit, as the registration information, according to the size of the first to fourth values and / or the position of the gesture on the panel on the panel, together with the application to be started, the playback speed, volume, And a specific parameter value including the character size is stored in association with each other,
The touch panel device according to claim 2, wherein the second application execution unit activates an application associated with the registration information detected by the contact determination unit and executes an operation of the application according to the parameter value.
(Appendix 6)
The touch panel device has a hard key capable of instructing a predetermined operation regardless of a contact method on the panel,
The storage unit stores an operation on the hard key as the registration information together with a contact method of the gesture on the panel of the contact body,
The touch panel device according to claim 1, wherein the contact determination unit detects an operation on the gesture on the panel and the hard key as the registration information.
(Appendix 7)
The touch panel device according to any one of appendices 1 to 6, wherein the contact determination unit determines that the contact information corresponds to the registration information when the on-panel gestures by the contact body match within a predetermined error range.
(Appendix 8)
An operation control method for a touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination step of determining any of the gestures on the panel, which is an operation of making contact for a predetermined time or more;
A first application execution step for executing a predetermined operation including activation of an application according to the input position when the normal input operation is detected in the contact determination step;
A second application execution step of activating or operating a predetermined application registered in advance according to the gesture when the gesture on the panel is detected in the contact determination step;
An operation control method for a touch panel device, wherein when the gesture on the panel is detected, the control in the second application execution step is executed in preference to the control in the first application execution step.
(Appendix 9)
The gesture on the panel is an operation of tracing the contact body in a polygonal shape on the touch panel,
A first value relating to the apex angle of a part or all of the polygon formed by the gesture on the panel, a second value relating to the length of each side of the polygon, and a third value relating to the area of the polygon. A value and a value relating to a speed at which the contact body traces on the touch panel are registered as one or a combination of one or more of the fourth values, and the registration information and a predetermined installed in the touch panel device A storage step for storing the activation or operation of the application in association with each other,
In the contact determination step, it is detected which registered information matches the gesture of the gesture on the panel,
The operation control method for a touch panel device according to appendix 8, wherein in the second application execution step, activation or operation of an application associated with the registration information is executed.
(Appendix 10)
The gesture on the panel is an operation of tapping the touch panel with the contact body at a predetermined interval,
One or a combination of one or more of the number of times the touch panel is tapped, the tap interval, the contact time at the time of tapping, and a series of operations is set as registration information, and the registration information and the touch panel device are installed. A storage step for storing the activation or operation of a predetermined application in association with each other;
In the contact determination step, it is detected which registered information matches the gesture of the gesture on the panel,
The operation control method for a touch panel device according to appendix 8 or 9, wherein in the second application execution step, activation or operation of an application associated with the registration information is executed.
(Appendix 11)
A lock function control step for controlling a lock function for preventing malfunction of the touch panel;
In the lock function control step, when a predetermined pre-registered gesture on the panel is detected, the lock function is released,
When the predetermined gesture on the panel is detected, the lock function of the touch panel is released, and the control of the second application execution step is executed in preference to the control of the first application execution step.
The operation control method for a touch panel device according to any one of appendices 8 to 10.
(Appendix 12)
In the storing step, as the registration information, the first to fourth values and / or the position of the gesture on the panel in association with the position on the panel, together with the application to be started, the playback speed and volume in the application , And unique parameter values including character size are stored,
The operation control method for a touch panel device according to claim 9, wherein, in the second application execution step, an application associated with the registration information is activated and an operation of the application according to the parameter value is executed.
(Appendix 13)
In the storage step, as the registration information, together with a contact method of the gesture on the panel of the contact body, an operation on a hard key capable of instructing a predetermined operation is stored regardless of the contact method on the panel.
The operation control method for a touch panel device according to any one of appendices 8 to 12, wherein in the contact determination step, an operation on the gesture on the panel and the hard key is detected as the registration information.
(Appendix 14)
The operation control method for a touch panel device according to any one of appendices 8 to 13, wherein in the contact determination step, the gesture on the panel by the contact body is determined to correspond to the registration information when they coincide with each other within a predetermined error range. .
(Appendix 15)
A program for causing a computer to execute operation processing in a touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination process for determining any one of the gestures on the panel, which is an operation of making contact for a predetermined time or more,
A first application execution process for executing a predetermined operation including activation of an application according to the input position when the normal input operation is detected in the contact determination step;
A second application execution process for activating or operating a predetermined application registered in advance according to the gesture when the gesture on the panel is detected in the contact determination step;
A program in which the second application execution process is executed in preference to the first application execution process when the gesture on the panel is detected.

10 メインボード
11 アプリケーションプロセッサ
12 無線処理部
11 アプリケーションプロセッサ
13 メインメモリ
14 フラッシュメモリ
15 電源管理部
16 ボイス回路
17 オーディオ回路
18 センサ
100 タッチパネル装置
101 筐体
102 液晶パネル
103 タッチパネル
104 操作ボタン
105 カメラデバイス
106 カメラデバイス
107 マイク
108 スピーカ
109 バッテリ
111 接触判定部
112 第1アプリ実行部
113 第2アプリ実行部
114 ジェスチャー記憶部
115 ロック機能制御部
121 ベースバンドプロセッサ
122 無線LAN
130 USB
131 メモリカード
132 アンテナ
DESCRIPTION OF SYMBOLS 10 Main board 11 Application processor 12 Wireless processing part 11 Application processor 13 Main memory 14 Flash memory 15 Power supply management part 16 Voice circuit 17 Audio circuit 18 Sensor 100 Touch panel apparatus 101 Case 102 Liquid crystal panel 103 Touch panel 104 Operation button 105 Camera device 106 Camera Device 107 Microphone 108 Speaker 109 Battery 111 Contact determination unit 112 First application execution unit 113 Second application execution unit 114 Gesture storage unit 115 Lock function control unit 121 Baseband processor 122 Wireless LAN
130 USB
131 Memory card 132 Antenna

Claims (10)

タッチパネルを有するタッチパネル装置であって、
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定部と、
前記接触判定部により前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行部と、
前記接触判定部により前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行部と、を有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行部の制御に優先して前記第2アプリ実行部の制御が実行される、タッチパネル装置。
A touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination unit that determines one of the gestures on the panel, which is an operation of making contact for a predetermined time or more,
A first application execution unit that executes a predetermined operation including activation of an application according to the input position when the normal determination operation is detected by the contact determination unit;
A second application execution unit that activates or operates a predetermined application registered in advance according to the gesture when the touch determination unit detects the gesture on the panel;
The touch panel device in which the control of the second application execution unit is executed in preference to the control of the first application execution unit when the gesture on the panel is detected.
前記パネル上ジェスチャーは、前記タッチパネル上で多角形の形状に前記タッチパネルをなぞる動作とし、
前記パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及び前記接触体が前記タッチパネル上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶部を有し、
前記接触判定部は、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかを検出し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションの起動又は操作を実行する
請求項1記載のタッチパネル装置。
The gesture on the panel is an operation of tracing the touch panel in a polygonal shape on the touch panel,
A first value relating to the apex angle of a part or all of the polygon formed by the gesture on the panel, a second value relating to the length of each side of the polygon, and a third value relating to the area of the polygon. A value and a value relating to a speed at which the contact body traces on the touch panel are registered as one or a combination of one or more of the fourth values, and the registration information and a predetermined installed in the touch panel device A storage unit for storing the activation or operation of the application in association with each other,
The contact determination unit detects which registration information matches the gesture of the gesture on the panel,
The touch panel device according to claim 1, wherein the second application execution unit executes activation or operation of an application associated with the registration information detected by the contact determination unit.
前記パネル上ジェスチャーは、前記接触体により前記タッチパネルを所定間隔でタップする動作とし、
前記タッチパネルがタップされる回数、タップ間隔、タップの際の接触時間、及び一連の動作のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶部を有し、
前記接触判定部は、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかを検出し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションの起動又は操作を実行する
請求項1又は2記載のタッチパネル装置。
The gesture on the panel is an operation of tapping the touch panel with the contact body at a predetermined interval,
One or a combination of one or more of the number of times the touch panel is tapped, the tap interval, the contact time at the time of tapping, and a series of operations is set as registration information, and the registration information and the touch panel device are installed. A storage unit that stores the activation or operation of a predetermined application in association with each other,
The contact determination unit detects which registration information matches the gesture of the gesture on the panel,
The touch panel device according to claim 1, wherein the second application execution unit executes activation or operation of an application associated with the registration information detected by the contact determination unit.
前記タッチパネルの誤動作を防止するロック機能を制御するロック機能制御部をさらに備え、
前記ロック機能制御部は、予め登録された所定のパネル上ジェスチャーが検出されると前記ロック機能を解除するものであって、
前記接触判定部により前記所定のパネル上ジェスチャーを検出すると、前記タッチパネルのロック機能が解除されると共に、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップの制御が実行される、
請求項1乃至3のいずれか1項記載のタッチパネル装置。
A lock function control unit for controlling a lock function for preventing malfunction of the touch panel;
The lock function control unit is to release the lock function when a pre-registered gesture on the panel is detected,
When the touch determination unit detects the predetermined gesture on the panel, the lock function of the touch panel is released, and the control of the second application execution step is executed in preference to the control of the first application execution step. ,
The touch panel device according to any one of claims 1 to 3.
前記記憶部は、前記登録情報として、前記第1乃至第4の値の大きさ及び/又は前記パネル上ジェスチャーの前記パネル上の位置に応じて、起動するアプリケーションと共に当該アプリケーションにおける再生速度、音量、及び文字の大きさを含む特有のパラメータ値を対応付けて記憶し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションを起動すると共に前記パラメータ値に応じた当該アプリケーションの動作を実行する
請求項2記載のタッチパネル装置。
The storage unit, as the registration information, according to the size of the first to fourth values and / or the position of the gesture on the panel on the panel, together with the application to be started, the playback speed, volume, And a specific parameter value including the character size is stored in association with each other,
The touch panel device according to claim 2, wherein the second application execution unit starts an application associated with the registration information detected by the contact determination unit and executes an operation of the application according to the parameter value.
前記タッチパネル装置は、前記パネル上の接触方法によらず、所定の動作を指示可能なハードキーを有し、
前記記憶部は、前記接触体の前記パネル上ジェスチャーの接触方法と共に、前記ハードキーに対する操作を前記登録情報として記憶し、
前記接触判定部は、前記パネル上ジェスチャー及び前記ハードキーに対する操作を前記登録情報として検出する
請求項1乃至5のいずれか1項記載のタッチパネル装置。
The touch panel device has a hard key capable of instructing a predetermined operation regardless of a contact method on the panel,
The storage unit stores an operation on the hard key as the registration information together with a contact method of the gesture on the panel of the contact body,
The touch panel device according to claim 1, wherein the contact determination unit detects an operation on the gesture on the panel and the hard key as the registration information.
前記接触判定部は、前記接触体による前記パネル上ジェスチャーが所定の誤差範囲で一致するとき、前記登録情報に該当すると判定する
請求項1乃至6のいずれか1項記載のタッチパネル装置。
The touch panel device according to any one of claims 1 to 6, wherein the contact determination unit determines that the information corresponds to the registration information when the gestures on the panel by the contact body coincide with each other within a predetermined error range.
タッチパネルを有するタッチパネル装置の動作制御方法であって、
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定ステップと、
前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行ステップと、
前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動する第2アプリ実行ステップとを有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップにおける制御が実行される、タッチパネル装置の動作制御方法。
An operation control method for a touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination step of determining any of the gestures on the panel, which is an operation of making contact for a predetermined time or more;
A first application execution step for executing a predetermined operation including activation of an application according to the input position when the normal input operation is detected in the contact determination step;
A second application execution step of starting a predetermined application registered in advance according to the gesture when the gesture on the panel is detected in the contact determination step;
An operation control method for a touch panel device, wherein when the gesture on the panel is detected, the control in the second application execution step is executed in preference to the control in the first application execution step.
前記パネル上ジェスチャーは、前記タッチパネル上で多角形の形状に前記接触体をなぞる動作とし、
前記パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及び前記接触体が前記タッチパネル上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶ステップを有し、
前記接触判定ステップでは、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかが検出され、
前記第2アプリ実行ステップでは、前記登録情報に対応付けられたアプリケーションの起動又は操作が実行される
請求項8記載のタッチパネル装置の動作制御方法。
The gesture on the panel is an operation of tracing the contact body in a polygonal shape on the touch panel,
A first value relating to the apex angle of a part or all of the polygon formed by the gesture on the panel, a second value relating to the length of each side of the polygon, and a third value relating to the area of the polygon. A value and a value relating to a speed at which the contact body traces on the touch panel are registered as one or a combination of one or more of the fourth values, and the registration information and a predetermined installed in the touch panel device A storage step for storing the activation or operation of the application in association with each other,
In the contact determination step, it is detected which registered information matches the gesture of the gesture on the panel,
9. The operation control method for a touch panel device according to claim 8, wherein in the second application execution step, activation or operation of an application associated with the registration information is executed.
タッチパネルを有するタッチパネル装置における動作処理をコンピュータに実行させるためのプログラムであって、
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定処理と、
前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行処理と、
前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行処理とを有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行処理に優先して前記第2アプリ実行処理が実施される、プログラム。
A program for causing a computer to execute operation processing in a touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination process for determining any one of the gestures on the panel, which is an operation of making contact for a predetermined time or more,
A first application execution process for executing a predetermined operation including activation of an application according to the input position when the normal input operation is detected in the contact determination step;
A second application execution process for activating or operating a predetermined application registered in advance according to the gesture when the gesture on the panel is detected in the contact determination step;
A program in which the second application execution process is executed in preference to the first application execution process when the gesture on the panel is detected.
JP2013029345A 2013-02-18 2013-02-18 Touch panel device, control method of touch panel device, and program Pending JP2014157578A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013029345A JP2014157578A (en) 2013-02-18 2013-02-18 Touch panel device, control method of touch panel device, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013029345A JP2014157578A (en) 2013-02-18 2013-02-18 Touch panel device, control method of touch panel device, and program

Publications (1)

Publication Number Publication Date
JP2014157578A true JP2014157578A (en) 2014-08-28

Family

ID=51578394

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013029345A Pending JP2014157578A (en) 2013-02-18 2013-02-18 Touch panel device, control method of touch panel device, and program

Country Status (1)

Country Link
JP (1) JP2014157578A (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105306821A (en) * 2015-10-20 2016-02-03 广东欧珀移动通信有限公司 Method and device for opening camera function of mobile terminal
KR101604552B1 (en) 2014-10-27 2016-03-18 한국과학기술원 Electronic device, and method thereof
EP3007091A1 (en) 2014-10-10 2016-04-13 Fujitsu Limited Authentication information managing method, storage medium, and information processing device
JP2016062397A (en) * 2014-09-19 2016-04-25 ヤフー株式会社 Terminal device, information processing method, and information processing program
KR101663909B1 (en) * 2015-09-01 2016-10-07 한국과학기술원 Electronic device, and method thereof
CN109241714A (en) * 2016-01-06 2019-01-18 阿里巴巴集团控股有限公司 A kind of information image display methods and device
JP2019049870A (en) * 2017-09-11 2019-03-28 日本電気株式会社 Similar program specifying device, similar program specifying method, and control program
JP2019101814A (en) * 2017-12-04 2019-06-24 アルプスアルパイン株式会社 Input control device, input device, operated device, and program
JP2019532436A (en) * 2016-10-14 2019-11-07 ホアウェイ・テクノロジーズ・カンパニー・リミテッド Screen display method and terminal
JP7468580B2 (en) 2020-09-11 2024-04-16 カシオ計算機株式会社 Terminal device and program

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016062397A (en) * 2014-09-19 2016-04-25 ヤフー株式会社 Terminal device, information processing method, and information processing program
EP3007091A1 (en) 2014-10-10 2016-04-13 Fujitsu Limited Authentication information managing method, storage medium, and information processing device
KR101604552B1 (en) 2014-10-27 2016-03-18 한국과학기술원 Electronic device, and method thereof
KR101663909B1 (en) * 2015-09-01 2016-10-07 한국과학기술원 Electronic device, and method thereof
CN105306821A (en) * 2015-10-20 2016-02-03 广东欧珀移动通信有限公司 Method and device for opening camera function of mobile terminal
JP2019504566A (en) * 2016-01-06 2019-02-14 アリババ グループ ホウルディング リミテッド Information image display method and apparatus
CN109241714A (en) * 2016-01-06 2019-01-18 阿里巴巴集团控股有限公司 A kind of information image display methods and device
JP2019532436A (en) * 2016-10-14 2019-11-07 ホアウェイ・テクノロジーズ・カンパニー・リミテッド Screen display method and terminal
US11442600B2 (en) 2016-10-14 2022-09-13 Huawei Technologies Co., Ltd. Screen display method and terminal
JP2019049870A (en) * 2017-09-11 2019-03-28 日本電気株式会社 Similar program specifying device, similar program specifying method, and control program
JP2019101814A (en) * 2017-12-04 2019-06-24 アルプスアルパイン株式会社 Input control device, input device, operated device, and program
JP7037344B2 (en) 2017-12-04 2022-03-16 アルプスアルパイン株式会社 Input control device, input device, operation target device, and program
JP7468580B2 (en) 2020-09-11 2024-04-16 カシオ計算機株式会社 Terminal device and program

Similar Documents

Publication Publication Date Title
US11269575B2 (en) Devices, methods, and graphical user interfaces for wireless pairing with peripheral devices and displaying status information concerning the peripheral devices
US11861159B2 (en) Devices, methods, and graphical user interfaces for selecting and interacting with different device modes
CN105335001B (en) Electronic device having curved display and method for controlling the same
JP4801503B2 (en) Item selection device, computer program and recording medium therefor, and information processing device
JP2014157578A (en) Touch panel device, control method of touch panel device, and program
US8839155B2 (en) Accelerated scrolling for a multifunction device
EP2555497B1 (en) Controlling responsiveness to user inputs
US9483175B2 (en) Device, method, and graphical user interface for navigating through a hierarchy
US20110175826A1 (en) Automatically Displaying and Hiding an On-screen Keyboard
US20110163966A1 (en) Apparatus and Method Having Multiple Application Display Modes Including Mode with Display Resolution of Another Apparatus
US20110242138A1 (en) Device, Method, and Graphical User Interface with Concurrent Virtual Keyboards
US9459704B2 (en) Method and apparatus for providing one-handed user interface in mobile device having touch screen
US20120032891A1 (en) Device, Method, and Graphical User Interface with Enhanced Touch Targeting
US20110074830A1 (en) Device, Method, and Graphical User Interface Using Mid-Drag Gestures
US20110179372A1 (en) Automatic Keyboard Layout Determination
US20120030624A1 (en) Device, Method, and Graphical User Interface for Displaying Menus
US20140331146A1 (en) User interface apparatus and associated methods
US9703418B2 (en) Mobile terminal and display control method
US20110074695A1 (en) Device, Method, and Graphical User Interface Using Mid-Drag Gestures
JP2012242851A (en) Portable electronic device having touch screen and control method
US20110074696A1 (en) Device, Method, and Graphical User Interface Using Mid-Drag Gestures
TWI659353B (en) Electronic apparatus and method for operating thereof
JP5173001B2 (en) Information processing apparatus, screen display method, control program, and recording medium
CN108983960A (en) Display methods, intelligent terminal and the storage medium of terminal device