JP2014157578A - Touch panel device, control method of touch panel device, and program - Google Patents
Touch panel device, control method of touch panel device, and program Download PDFInfo
- Publication number
- JP2014157578A JP2014157578A JP2013029345A JP2013029345A JP2014157578A JP 2014157578 A JP2014157578 A JP 2014157578A JP 2013029345 A JP2013029345 A JP 2013029345A JP 2013029345 A JP2013029345 A JP 2013029345A JP 2014157578 A JP2014157578 A JP 2014157578A
- Authority
- JP
- Japan
- Prior art keywords
- touch panel
- gesture
- panel
- application
- contact
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、携帯端末等のタッチパネルを有するタッチパネル装置、タッチパネル装置の制御方法及びプログラムに関し、特にタッチパネルにおける操作の向上を図ったタッチパネル装置、タッチパネル装置の制御方法及びプログラムに関する。 The present invention relates to a touch panel device having a touch panel such as a portable terminal, a control method for the touch panel device, and a program, and more particularly to a touch panel device for improving operations on the touch panel, a control method for the touch panel device, and a program.
現在のタッチパネルを搭載した端末(以下、タッチパネル装置という。)の多くは、プログラム(アプリケーション)を起動する動作は、大きく分けると以下の2工程に分けられる。
1.アプリケーションのアイコンが表示される画面まで画面を遷移させる(以下、アプリケーション起動準備工程という。)
2.アイコンをタップする等して実際にアプリケーションを起動する(以下、アプリケーション起動工程という。)
In many terminals (hereinafter referred to as touch panel devices) equipped with a current touch panel, an operation for starting a program (application) is roughly divided into the following two steps.
1. The screen is changed to a screen on which an application icon is displayed (hereinafter referred to as an application activation preparation step).
2. An application is actually activated by tapping an icon or the like (hereinafter referred to as an application activation process).
端末使用者は、この2工程を踏むことにより該当アプリケーションを起動することができる。例えば、ユーザがスマートフォンにてメールソフト等を起動している状態でブラウザなどの他のアプリケーションを起動したい場合を考える。アプリケーション起動準備工程では、ホームキーやメニューキーをタップして、メールソフト画面を切り替え、当該他のアプリケーションを探す動作が必要となる。 The terminal user can start the corresponding application by taking these two steps. For example, let us consider a case where the user wants to start another application such as a browser while starting mail software or the like on a smartphone. In the application startup preparation process, an operation of tapping the home key or menu key to switch the mail software screen and searching for another application is required.
また、一般的なスマートフォンなどが画面ロック状態になっているときに、特定のアプリケーションを利用したい場合は、アプリケーション起動準備工程の前工程として、予め登録した、指をパネル上でスライドする等方法でタッチしたりパスワードを打ち込んだりして画面ロックを解除する画面ロック解除工程が必要となる。なお、アプリケーション起動準備工程が必要ない場合は、画面ロック解除工程の次の工程として、アプリケーション起動工程、すなわち特定のアプリケーションのショートカットのアイコンをタップする工程により、アプリケーションを起動する方法が最短の起動方法となる。 Also, when you want to use a specific application when a general smartphone is in the screen lock state, as a pre-process of the application startup preparation process, use a method such as sliding your finger on the panel. A screen unlock process for unlocking the screen by touching or typing in a password is required. If the application startup preparation process is not required, the application startup process, that is, the process of tapping the shortcut icon of a specific application as the next process of the screen unlocking process, is the shortest startup method. It becomes.
このように、現在利用されているタッチパネル装置の多くは以下の2つの課題がある。1つ目の課題は、上述のように、アプリケーションを起動する際には、画面ロック解除工程及び/又はアプリケーション起動準備工程を経て、アプリケーション起動工程を実施するため、アプリケーションを起動するために必要な動作が多いことである。 As described above, many of the touch panel devices currently used have the following two problems. The first problem is that, as described above, when starting an application, the application starting process is performed through the screen unlocking process and / or the application starting preparation process, which is necessary for starting the application. There are many actions.
2つ目の課題は、アプリケーションを起動する際にアイコンがどこにあるのか分かりづらいことが挙げられる。上述のアプリケーション起動準備工程では、起動したいアプリケーションのアイコンを探す必要があるが、メニュー画面内に多くのアイコンが折りたたまれて表示されていたり、同様の機能を有するアプリケーションが多くある場合等においては、端末使用者に混乱を招く可能性が高いほかアイコンを探す手間がかかるという問題点がある。 The second problem is that it is difficult to know where the icon is when starting the application. In the application startup preparation process described above, it is necessary to search for an icon of the application to be started, but in the case where many icons are displayed in a collapsed manner in the menu screen or when there are many applications having similar functions, There is a high possibility of causing confusion for terminal users, and there is a problem that it takes time and effort to search for icons.
ところで、特許文献1には、マルチポイント能力を有するタッチ・センシティブ・デバイスに関連するタッチ入力に属するデータをタッチ・センシティブ・デバイスから読み取るステップと、タッチ・センシティブ・デバイスからのデータに基づき、少なくとも1つマルチポイント・ジェスチャを識別するステップを有するタッチ入力を処理する方法が開示されている。この技術においては、タッチを認識するとともに、タッチ・センシティブ面上のタッチの位置と大きさも認識し、特定のタッチに従ってタスクを開始するほか、同時に生じた複数のタッチを識別すると同時に生じた複数のタッチを識別するマルチポイント感知に基づく処理も実施する。
By the way,
また、特許文献2には、入力装置の操作部が有する入力面に入力手段で接触することにより、入力対象機器が実行する処理を制御する制御信号を該入力対象機器に入力する入力方法が開示されている。当該入力方法においては、入力面に入力手段が接触した接触位置を検出する検出ステップと、検出ステップにより検出した複数の接触位置の組み合わせに基づいて、制御信号を生成する制御信号生成ステップを有し、タッチパネル(操作部)上での手のひら又は指の開き具合に応じて、受像機の表示部に表示されるトランジションの表示切替速度を切り替える。ここで、手のひら又は指の開き具合の違いにより、タッチパネル上で検出される複数の接触座標が構成する多角形のサイズは異なる。よって、接触座標を全て結んで構成される多角形の面積の違いに応じて、受像機の表示部に表示されるトランジションの表示切替速度を切り替える場合、例えば、小さな多角形の面積が検出される場合は、トランジションの表示切替速度を大きくし、大きな多角形の面積が検出される場合は、トランジションの表示切替速度を小さくするなどの方法が記載されている。また、携帯電話にタッチパネルを設置し、1本指が描く直線の長さに応じて、起動するカメラ、ブラウザ、メーラー等のソフトの種類を切り替えたり、映像再生装置にタッチパネルを設置し、2本指の開き具合に応じて映像再生装置の映像再生速度を切り替える技術が開示されている。 Patent Document 2 discloses an input method in which a control signal for controlling processing executed by an input target device is input to the input target device by contacting an input surface of an operation unit of the input device with an input unit. Has been. The input method includes a detection step for detecting a contact position where the input means is in contact with the input surface, and a control signal generation step for generating a control signal based on a combination of a plurality of contact positions detected by the detection step. The display switching speed of the transition displayed on the display unit of the receiver is switched according to the degree of opening of the palm or finger on the touch panel (operation unit). Here, the size of the polygon formed by the plurality of contact coordinates detected on the touch panel differs depending on the degree of opening of the palm or finger. Therefore, when switching the display switching speed of the transition displayed on the display unit of the receiver according to the difference in the area of the polygon formed by connecting all the contact coordinates, for example, the area of a small polygon is detected. In this case, a method is described in which the display switching speed of the transition is increased, and when a large polygonal area is detected, the display switching speed of the transition is decreased. In addition, a touch panel is installed on the mobile phone, and depending on the length of the straight line drawn by one finger, the type of software such as a camera, browser, mailer, etc. to be activated is switched, or a touch panel is installed on the video playback device. A technique for switching the video playback speed of the video playback device in accordance with the degree of opening of the finger is disclosed.
また、特許文献3には、2以上の特性値に依存する信号のうち、それらの特性値が特定の範囲にあるものについて、座標系における位置を指定する操作により、その信号の値を調整することを目的とするインタフェースの技術が記載されている。この特許文献3には、ユーザが指で指定領域の内側部分に環や十字、チェックマークなどを描いた場合にジェスチャーとして検出し、これを状態遷移のきっかけとする技術が開示されている。
In
しかしながら、上記特許文献1乃至特許文献3の技術においても、例えばメールソフトを使用しているときに、インターネットを閲覧しようとすると、やはり、同様に一旦メールソフトの画面を最小化し、インターネットを閲覧するためのアイコンを探し、これをクリックする必要がある。すなわち、ホーム画面等にいる場合には、上記の技術のようにジェスチャーにより、所定のアプリケーションを起動することができても、一のアプリケーションを使用している最中に、他のアプリケーションを立ち上げようとすると複数の工程が必要になる場合がある。また起動中のアプリケーション上でジェスチャーを行うと、当該起動中のアプリケーション、例えばメールソフトにおいては、インターネットを閲覧するためのジェスチャーを行うと新規作成動作や、メール送信等の意図していない動作を指定してしまう場合がある。
However, in the techniques of
このように、従来のタッチパネル装置においては、アプリケーションの起動に必要となる動作工程が複数あるためアプリケーションの起動に時間がかかり、ユーザが即座にアプリケーションを起動する手法が確立されていない。また、起動したいアプリケーションアイコンを探す必要がある等、アプリケーションを起動する動作が煩雑である。更に、ジェスチャーによって指定したアプリケーションを立ち上げようとする際に、意図していない動作を行ってしまう場合もある。したがって、ユーザが起動したいときに最小の動作で誤動作することなく即座にアプリケーションを起動できる方法が望まれる。 As described above, in the conventional touch panel device, since there are a plurality of operation steps necessary for starting the application, it takes time to start the application, and a method for immediately starting the application by the user has not been established. In addition, the operation of starting an application is complicated, such as the need to search for an application icon to be started. Further, when trying to launch an application designated by a gesture, an unintended operation may be performed. Therefore, there is a demand for a method that can immediately start an application without malfunctioning with the minimum operation when the user wants to start it.
本発明は、このような問題点を解決するためになされたものであり、タッチパネル装置におけるアプリケーションの起動動作を簡略にすることができるタッチパネル装置、タッチパネル装置の制御方法及びプログラムを提供することを目的とする。 The present invention has been made to solve such problems, and an object of the present invention is to provide a touch panel device, a touch panel device control method, and a program that can simplify an application activation operation in the touch panel device. And
本発明に係るタッチパネル装置は、タッチパネルを有するタッチパネル装置であって、前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定部と、前記接触判定部により前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行部と、前記接触判定部により前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行部と、を有し、前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行部の制御に優先して前記第2アプリ実行部の制御が実行されるものである。 The touch panel device according to the present invention is a touch panel device having a touch panel, and when receiving a contact from a contact body including a user's finger or a touch pen with respect to the touch panel, normal input including a click by the contact body on the touch panel The normal input operation is detected by the contact determination unit that determines either the operation or the gesture on the panel that is the operation that causes the contact body to contact the touch panel continuously or discontinuously for a predetermined time or more, and the contact determination unit. If the gesture on the panel is detected by the first application execution unit that executes a predetermined operation including the activation of the application according to the input position and the contact determination unit, it is registered in advance according to the gesture. A second application execution unit that activates or operates the predetermined application. , If the panel on the gesture is detected, in which control of in preference to the control of the first application executing unit and the second application executing unit is executed.
本発明に係るタッチパネル装置の動作制御方法は、タッチパネルを有するタッチパネル装置の動作制御方法であって、前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定ステップと、前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行ステップと、前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行ステップとを有し、前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップにおける制御が実行されるものである。 An operation control method for a touch panel device according to the present invention is an operation control method for a touch panel device having a touch panel, and when receiving a contact from a contact body including a user's finger or a touch pen with respect to the touch panel, the operation on the touch panel is performed. A contact determination step of determining either a normal input operation including a click by a contact body, or a gesture on the panel which is an operation in which the contact body is continuously or discontinuously contacted on the touch panel for a predetermined time or more, and the contact determination When the normal input operation is detected in the step, the gesture on the panel is detected in the first application execution step for executing a predetermined operation including the activation of the application according to the input position and the contact determination step. Then, depending on the gesture, a predetermined application registered in advance A second application execution step for starting or operating the application, and when the gesture on the panel is detected, the control in the second application execution step is executed in preference to the control in the first application execution step. It is what is done.
また、本発明に係るプログラムは、タッチパネルを有するタッチパネル装置における動作制御をコンピュータに実行させるためのプログラムであって、前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定制御と、前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行制御と、前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行制御とを有し、前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行制御に優先して前記第2アプリ実行制御が実施されるものである。 The program according to the present invention is a program for causing a computer to execute operation control in a touch panel device having a touch panel, and when the touch panel receives a contact from a contact body including a user's finger or a touch pen, the touch panel Contact determination control for determining either a normal input operation including a click by the contact body on the above, or a gesture on the panel which is an operation in which the contact body is continuously or discontinuously contacted on the touch panel for a predetermined time or more When the normal input operation is detected in the contact determination step, a first application execution control for executing a predetermined operation including application activation according to the input position; and on the panel in the contact determination step If a gesture is detected, register in advance according to the gesture Second application execution control that activates or operates the predetermined application, and when the gesture on the panel is detected, the second application execution control is performed in preference to the first application execution control. Is.
本発明に係るタッチパネル装置、タッチパネル装置の制御方法及びプログラムによれば、タッチパネル装置におけるアプリケーションの起動動作を簡略にすることができる。 According to the touch panel device, the control method of the touch panel device, and the program according to the present invention, it is possible to simplify the application activation operation in the touch panel device.
以下、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。この実施の形態は、本発明を、タッチパネルを有する携帯電話に適用したものであるが、その他、タッチパネル機能を有する装置であれば、携帯電話に限らず携帯ゲーム端末、タブレットPC(Personal Computer)、及びノートPC等のその他のタッチパネル装置にも適用することができる。 Hereinafter, specific embodiments to which the present invention is applied will be described in detail with reference to the drawings. In this embodiment, the present invention is applied to a mobile phone having a touch panel, but any other device having a touch panel function is not limited to a mobile phone, a portable game terminal, a tablet PC (Personal Computer), It can also be applied to other touch panel devices such as notebook PCs.
本実施の形態においては、タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での接触体をタッチパネル上で連続又は不連続に所定時間以上接触させる動作(以下、パネル上ジェスチャーという。)を検出し、そのパネル上ジェスチャーに応じ、所定のアプリケーションの起動等、予め登録された動作を実行するものである。本実施の形態においては、接触体の一例として、ユーザが指でタッチパネルをタッチする場合について説明するが、タッチペン等、タッチパネル上の接触を検出できるものであれば、ユーザの指以外であってもよいことは勿論である。 In the present embodiment, when contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, the contact body on the touch panel is continuously or discontinuously contacted on the touch panel for a predetermined time or longer (hereinafter, referred to as a touch panel). A gesture on the panel) is detected, and a pre-registered operation such as activation of a predetermined application is executed in accordance with the gesture on the panel. In this embodiment, the case where the user touches the touch panel with a finger will be described as an example of the contact body. However, any touch device other than the user's finger can be used as long as the touch on the touch panel can be detected. Of course it is good.
ここで、パネル上ジェスチャーとは、複数の点に同時に触れて操作することができるマルチタップ(マルチタッチ)等も含み、1又は複数の指により、タッチパネル上で多角形の形状にタッチパネルをなぞる動作や、タッチパネルを所定間隔でタップする動作を示す。これらのパネル上ジェスチャーのジェスチャー毎に、例えば起動するアプリケーションを対応付けて記憶しておき、タッチパネル上であるパネル上ジェスチャーが検出された場合に、そのパネル上ジェスチャーに対応付けられたアプリケーションを起動するものである。すなわち、通常のタッチパネル装置において、アプリケーションを起動する際には、該当のアイコンをクリックするのが一般的であるが、本実施の形態においては、パネル上ジェスチャーがタッチパネルで検出された場合、対応付けて登録したアプリケーションを即座に起動させることができるため、アイコンの表示されている画面に切り替え、該当するアイコンを探し、これをクリックする等の複数の工程が不要となる。 Here, the gesture on the panel includes a multi-tap (multi-touch) that can be operated by simultaneously touching a plurality of points, and the operation of tracing the touch panel in a polygonal shape on the touch panel with one or a plurality of fingers. And an operation of tapping the touch panel at predetermined intervals. For example, an application to be activated is stored in association with each gesture on the panel, and when an on-panel gesture on the touch panel is detected, the application associated with the on-panel gesture is activated. Is. That is, in a normal touch panel device, when an application is started, it is common to click on the corresponding icon. However, in this embodiment, if a gesture on the panel is detected on the touch panel, the corresponding icon is associated. Since the registered application can be started immediately, a plurality of processes such as switching to a screen on which icons are displayed, searching for the corresponding icon, and clicking the icon are not required.
ここで、タッチパネル上でジェスチャーとして認識される多角形とは、例えばマルチタッチ時に検出された各座標を頂点としたものとすることができる。例えば、重心などの一定の法則を用いて1つの多角形に対して1つ座標を決め、そこを頂点とした多角形を使用することも可能である。更に、マルチタップ時に検出された多角形や面積と登録された多角形や面積と比較を行う際、一致の判定にはある程度の幅を誤差範囲として設定すれば、判定を容易にすることができ、ユーザへの負担も少ない。このように、タッチパネルにユーザ自身がアプリケーションと対応付けて登録した多角形の形状又は接触方法により、アプリケーションを起動させるため、上述のアプリケーション起動準備工程で必要であった動作を省略してアプリケーションを起動することができ、アプリケーションをより少ない手順で起動・操作することができる。 Here, the polygon recognized as a gesture on the touch panel can be, for example, a vertex at each coordinate detected during multi-touch. For example, it is possible to determine one coordinate for one polygon using a certain rule such as the center of gravity, and use a polygon having that as a vertex. Furthermore, when comparing polygons and areas detected at the time of multi-tap with registered polygons and areas, it is possible to make the determination easier by setting a certain amount of width as an error range. , Less burden on the user. In this way, the application is started by the polygonal shape or the contact method registered by the user in association with the application on the touch panel. The application can be activated and operated with fewer procedures.
さらに、他のアプリケーションが起動されていない場合は勿論、例えばメールソフトなどの他のアプリケーションを起動し、使用していた場合にもパネル上ジェスチャーを行うことも可能である。すなわち、本実施の形態にかかるタッチパネル装置は、ユーザのタッチがパネル上ジェスチャーか、通常のクリックなどかを判定し、パネル上ジェスチャーを検出した場合は、当該ジェスチャーにかかる動作を優先して実行する。このことにより、例えばメールソフトを起動し、メールを作成中に、インターネットに接続し何かを調べようとした場合に、メールソフトの画面を一旦閉じ、あらためて、インターネット接続用アイコンをクリックする必要がなく、また、インターネットに接続する動作によってメッセージを送信してしまうなどの誤動作なども防止することができ、きわめて簡単に他のアプリケーションを起動することができるものである。 Furthermore, it is possible to perform gestures on the panel not only when other applications are not activated but also when other applications such as e-mail software are activated and used. That is, the touch panel device according to the present embodiment determines whether the user's touch is a gesture on the panel or a normal click, and when the gesture on the panel is detected, the operation related to the gesture is preferentially executed. . For this reason, for example, if you are trying to connect to the Internet and check something while starting up your email software and creating an email, you need to close the email software screen and click the Internet connection icon again. In addition, it is possible to prevent a malfunction such as sending a message by an operation to connect to the Internet, and to start another application very easily.
ここでは、先ず、一般的なスマートフォンの構成について説明し、次に、本実施の形態にかかるタッチパネル装置の構成及び動作制御方法の詳細について説明する。 Here, first, the configuration of a general smartphone will be described, and then the configuration of the touch panel device and the details of the operation control method according to the present embodiment will be described.
[スマートフォン概要]
図1(a)及び図1(b)は、スマートフォン100を示す外観図である。図1(a)は、スマートフォン100の筐体101の一方の主面(前面)側から見たスマートフォン100の外観を示している。スマートフォン100は、筐体101の主面のほぼ全領域に配置された液晶パネル(Liquid Cristal Panel)102と、後述タッチパネル103と、幾つかの操作ボタン104と、カメラデバイス105とが配置されている。一方、図1(b)は、筐体101の他方の主面(背面)側から見たスマートフォン100の外観を示している。筐体101の背面には、カメラデバイス106が配置されている。
[Smartphone overview]
FIG. 1A and FIG. 1B are external views showing the
液晶パネル102は、その表示面が筐体101の前面に位置するように配置されている。なお、液晶パネル102の代わりに有機ELパネル(Organic Light-Emitting Diode Panel)等とすることも可能である。
The
タッチパネル103は、液晶パネル102の表示面を覆うように配置されるか、又は液晶パネル102の裏面側に配置される。そして、ユーザの指又はユーザが操作する専用の操作ペン(スタイラス)等の操作部等(以下、接触体ともいう。)で液晶パネル102のタッチ領域内に触れることで、スマートフォン100を直感的に操作することができる。
The
そして、本実施の形態にかかるタッチパネル103は、ユーザの指又は専用のペンが接触するタッチ画面領域において、その指やペンの接触を検出すると、それがクリックなのか、パネル上ジェスチャーなのかを判定し、パネル上ジェスチャーを検出した場合は、予め登録してある動作、例えば特定のアプリケーションの起動などを実施する。
When the
操作ボタン104は、スマートフォン100に対する補助的な操作に用いられるもので、パネル上の接触方法によらず、所定の動作を指示可能なハードキーとなっている。例えば、このボタンを押している場合は、パネル上ジェスチャーによる動作のみを実行させるなどの制御が可能となる。なお、無線通信端末によっては、このような操作ボタンが設けられないこともある。カメラデバイス106は、そのレンズユニットが筐体101の背面に位置するように配置されたメインカメラである。一方、カメラデバイス105は、そのレンズユニットが筐体101の前面に位置するように配置されたサブカメラである。なお、このようなカメラデバイスは設けられなくてもよい。
The
次に、本実施の形態にかかるスマートフォン100の内部構成について説明する。図2は、本発明の実施の形態1にかかるスマートフォン100の内部構成を示すブロック図である。図2に示すように、スマートフォン100のメインボード10には、アプリケーションプロセッサ11、無線処理部12、メインメモリ13、フラッシュメモリ14、電源関連15、ボイス回路16、オーディオ回路17、及びセンサ18等が搭載されている。このメインボード10には、上述した液晶パネル102、タッチパネル103、及びカメラデバイス105、106が接続される他、マイク107、スピーカ108、バッテリ109、USB130、メモリカード131、及びアンテナ132等が接続される。
Next, the internal configuration of the
アプリケーションプロセッサ11は、一般的には、さまざまな周辺回路が1つのパッケージに統合されたSoC(System On Chip)デバイスであり、無線処理部12等の通信関連のデバイスやタッチパネル103、カメラデバイス105、106等の周辺機器を接続するためのインタフェースなど、多くのインタフェース回路が含まれる。
The
このアプリケーションプロセッサ11は、メインメモリ13に格納されたアプリケーションを読み出して、スマートフォン100の各種機能を実現するための処理を行う。例えば、アプリケーションプロセッサ11は、メインメモリ13からOS(Operating System)アプリケーションを読み出し実行すると共に、このOSアプリケーションを動作基板とするアプリケーションアプリケーションを実行する。より具体的には、アプリケーションプロセッサ11は、送信データをアプリケーションプロセッサ11ら受け取り、受け取った送信データに対して符号化処理を施し、さらに、搬送波により変調処理して送信信号を生成し、アンテナ112を介して送信信号を外部へ送信する。また、ベースバンドプロセッサ121は、アンテナ112を介して受信信号を受信し、この受信信号を搬送波により復調処理して受信データを生成し、さらにこの受信データに対して復号化処理を施してアプリケーションプロセッサ11に送信する。
The
[アプリケーションプロセッサの構成]
図3は、本実施の形態にかかるアプリケーションプロセッサ11を更に詳細に示す図である。図3に示すように、アプリケーションプロセッサ11は、接触判定部111、第1アプリ実行部112、及び第2アプリ実行部113を有する。接触判定部111は、タッチパネル103に対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での記接触体によるクリックを含む通常入力動作か、又は接触体をタッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する。なお、通常入力動作とは、タッチパネル上のアイコンなどをクリックする動作、ウェブブラウザ上でリンクをクリックする動作、メール作成ソフト等で文章を入力する動作などの入力動作をいう。
[Application processor configuration]
FIG. 3 is a diagram showing the
パネル上ジェスチャーとは、通常入力動作以外のジェスチャーをいう。後述するように、接触判定部111が、ユーザのタッチパネルに対する接触を検知するが、連続又は不連続の接触動作が所定時間以上検出されると、当該接触(ジェスチャー)がパネル上ジェスチャーであるか否かの判定を開始する。そして、当該ジェスチャーが登録情報と一致するジェスチャーである場合にパネル上ジェスチャーと判定する。なお、このユーザの接触とは、例えば複数本の指をタッチパネル103に接触させる動作G1、1又は複数本の指をタッチパネル103に接触させながら多角形や円形の軌跡をなぞる動作G2、1又は複数本の指でタッチパネル103を複数回、所望の間隔でタップする動作G3、これらの組み合わせの動作G4等が考えらえる。
The gesture on the panel means a gesture other than the normal input operation. As will be described later, the
なお、パネル上ジェスチャーとして登録する動作は、タッチパネル装置100が通常入力動作ではないと判定できればよいので、これらのジェスチャーに限るものではない。動作G1が検出された場合には、例えば当該指を頂点とする多角形を検出することで、パネル上ジェスチャーと判定することができる。動作G2が検出された場合には、ユーザの指がなぞった軌跡を検出し、その形状に基づきパネル上ジェスチャーと判定することができる。さらに、動作G3が検出された場合には、ユーザの指の本数(接触点の数)とタップの回数及びパターン(間隔)に基づきパネル上ジェスチャーと判定することができる。
Note that the operation registered as a gesture on the panel is not limited to these gestures as long as it can be determined that the
また、第1アプリ実行部112は、接触判定部111によりクリックが検出されるとそのクリック位置に応じた、アプリケーションの起動を含む所定の動作を実行する。また、第2アプリ実行部113は、接触判定部111によりパネル上ジェスチャーが検出されるとそのジェスチャーに応じて、予め登録された所定のアプリケーションを起動又は操作する等の所定の動作を行う。
In addition, when a click is detected by the
そして、アプリケーションプロセッサ11は、パネル上ジェスチャーが検出された場合は、第1アプリ実行部112の制御に優先して第2アプリ実行部113の制御を実行する。ここで、例えば第1アプリ実行部112又は第2アプリ実行部113が接触判定部111の動作を行ってもよい。また、接触判定部111はパネル上ジェスチャーが検出されると、第1アプリ実行部112に対し、動作停止の指示を出し、第2アプリ実行部113に対し、パネル上ジェスチャーに対応する処理をするよう指示するものとしてもよい。
Then, when a gesture on the panel is detected, the
図2に戻って、無線処理部12は、ベースバンドプロセッサ121、無線LAN122、及びBluetooth(登録商標)123等を有する。ベースバンドプロセッサ121は、スマートフォン100が送受信するデータに対して符号化(例えば、畳み込み符号やターボ符号等の誤り訂正符号化)処理又は復号化処理等を含むベースバンド処理を行う。
Returning to FIG. 2, the
メインメモリ13は、アプリケーションプロセッサ11により利用されるアプリケーション及びデータを格納する。さらに、アプリケーションプロセッサ11には、電源が遮断されても記憶したデータを保持する不揮発性メモリ(フラッシュメモリ)14と接続される。
The
バッテリ109は、電池であり、スマートフォン100が外部電源によらずに動作する場合に利用される。なお、スマートフォン100に外部電源が接続されている場合においてもバッテリ109の電源を利用してもよい。また、バッテリ109としては、二次電池を利用することが好ましい。
The
電源管理部15は、バッテリ109又は外部電源から内部電源を生成する。この内部電源は、スマートフォン100の各ブロックに与えられる。このとき電源管理部15は、アプリケーションプロセッサ11からの指示に基づき内部電源の電圧制御を行って、各ブロック回路毎に同一又は異なる内部電源を供給する。さらに、電源管理部15は、各ブロック回路毎に内部電源の遮断を制御することもできる。また、電源管理部15は、外部電源の供給がある場合、バッテリ109への充電制御も行う。
The
オーディオ17は、アプリケーションプロセッサ11から送信される音声データをデコードしてスピーカ108を駆動する。ボイス16は、マイク107から得た音声情報をエンコードして音声データを生成し、この音声データをアプリケーションプロセッサ11に出力する。
The audio 17 decodes the audio data transmitted from the
センサ部18には、温度センサ、GPS(Global Positioning System)システム等が含まれる。温度センサにより本体側が充電時にバッテリ温度を管理することができる。また、GPSを備えることで、スマートフォン100の位置を高精度に測定することが可能であり、位置を正確に把握することで、目的地までのナビゲーションが可能になる。ここで、スマートフォン100のGPSシステムは、通信により位置測定を補助し、短期間での位置を測定するための機能を備える(A-GPS(Assisted GPS))。
The sensor unit 18 includes a temperature sensor, a GPS (Global Positioning System) system, and the like. The temperature sensor allows the main body to manage the battery temperature during charging. Moreover, by providing GPS, the position of the
液晶パネル102は、アプリケーションプロセッサ11における処理に従い様々な画像を表示する。この液晶パネル102において表示される画像には、ユーザがスマートフォン100に動作指示を与えるユーザーインタフェース画像、カメラ画像、又は動画等が表される。
The
さらに、本実施の形態におけるスマートフォン100は、上述したように、高解像度の背面のカメラデバイス106だけでなく、ディスプレイ側にもカメラデバイス105を装備し、カメラデバイス105、106は、アプリケーションプロセッサ11からの指示に従い、画像を取得する。
Furthermore, as described above, the
[アプリケーションプロセッサの動作]
次に、アプリケーションプロセッサ11の動作について説明する。図4は、アプリケーションプロセッサ11の動作を示すフローチャートである。図4に示すように、アプリケーションプロセッサ11は、タッチパネル103にユーザの指やタッチペン等による接触を待つ。以下、ユーザの指でタッチする場合について説明すると、接触判定部111は、ユーザの指がタッチパネル103に接触を検出すると(ステップS1:Yes)、これがタッチパネル103上で所定のアイコンをタップする動作(クリック)やリンクを指定する等の通常入力動作であるか、又は当該通常入力動作以外の動作(ジェスチャ)、例えばタッチパネル上でユーザの指を連続又は不連続に所定時間以上接触させる動作(パネル上ジェスチャ)であるのかを判定する(ステップS2)。
[Operation of application processor]
Next, the operation of the
このとき、接触判定部111が通常入力動作を検出すると、入力位置(タップ位置)に応じたアプリケーションの起動等の動作を実行する(ステップS3)。一方、パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する(ステップS4)。
At this time, when the
[アプリケーションプロセッサの他の構成]
図5は、アプリケーションプロセッサ11の他の例を示すブロック図である。アプリケーションプロセッサ11は、図3の構成に加え、ジェスチャー記憶部114及びロック機能制御部115を有する。例えば、パネル上ジェスチャーを、タッチパネル103上で多角形の形状にタッチパネル103をなぞる動作(ジェスチャー)とすると、ジェスチャー記憶部114は、パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及びユーザの指等がタッチパネル103上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、タッチパネル装置100にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する。
[Other configuration of application processor]
FIG. 5 is a block diagram illustrating another example of the
また、パネル上ジェスチャーをユーザの指によりタッチパネル103を所定間隔でタップする動作とすると、ジェスチャー記憶部114は、タッチパネル103がタップされる回数、タップ間隔、タップの際の接触時間、及び一連の動作のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、タッチパネル装置100にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する。
When the gesture on the panel is an operation of tapping the
図6(a)及び図6(b)、及び図7は、パネル上ジェスチャーを行うユーザを示す図である。図6(a)に示すように、ユーザが親指、人差し指、中指の3つの指をタッチパネル103に一定時間押し当てたり、図7に示すように、三角形を作った状態で3つの指の接触位置を、くの字を書くように摺動させたりする動作として登録しておき、3回タップする動作をパネル上ジェスチャーとして登録しておく等することで、接触判定部111は、三角形200を検出する。
FIG. 6A, FIG. 6B, and FIG. 7 are diagrams showing a user who performs a gesture on the panel. As shown in FIG. 6A, the user presses the three fingers of the thumb, the index finger, and the middle finger on the
このとき、図6(b)に示すように、三角形200の第1頂角α1、第2頂角α3、第3頂角α3のいずれか1以上の角度と、第1辺の長さL1、第2辺の長さL3、及び第3辺の長さL3のうち1以上の長さを登録しておくことで、この三角形を判別することができる。例えば、最も長い辺(この場合は第1辺の長さL1)とその両側の頂角(この場合は、第2頂角α2及び第3頂角α3)を登録情報T1とし、この登録情報T1が検出された場合は、オーディオ再生ソフトを起動する等とすればよい。
At this time, as shown in FIG. 6B, one or more of the first apex angle α1, the second apex angle α3, and the third apex angle α3 of the
また、三角形の他の登録方法としては、頂角に対応する三角比、逆三角比などの値を、最も角度が大きい頂角を出発点として時計回り又は反時計回りなどの一定の順列で登録することができる。更にまた、縮尺や大きさを判定できる辺の長さ若しくは多角形の面積を保存することも可能である。 As another registration method for triangles, values such as triangle ratio and inverse triangle ratio corresponding to the apex angle are registered in a certain permutation such as clockwise or counterclockwise starting from the apex angle having the largest angle. can do. Furthermore, it is also possible to store the length of a side or the area of a polygon that can be determined in scale or size.
ここで、ジェスチャー記憶部114にパネル上ジェスチャーにかかる登録情報を登録するタイミングとしては、プリインストールされているアプリケーションの場合であれば、端末の初期設定時等とすることができる。また、ユーザが新たにインストールする場合には、インストール時に登録情報も併せて設定することができるが、登録のタイミングはこのタイミングに限らない。なお、全てのアプリケーションについて登録情報を設定してもよいが、ユーザがパネル上ジェスチャーを記憶する必要があることから、使用頻度の高いものについてだけ、登録情報を設定しておくことも可能である。
Here, the timing for registering the registration information related to the gesture on the panel in the
更には、接触判定部111が、ユーザが使用するアプリケーションの頻度を検出し、例えば10回目の起動時や、1日1回以上起動するアプリケーションなどを検出し、信用頻度が一定基準を上回った場合に、パネル上ジェスチャーを登録するか否かをユーザに促しようにしてもよい。反対に、アプリケーションの使用頻度がある一定基準を下回った場合に、当該登録情報を削除するか否かをユーザに判定させるようにしてもよい。このようにすることで、ユーザは使用頻度の低いアプリケーションを起動するためのパネル上ジェスチャーを覚えておく必要がなくなり、更に、必要のなくなったパネル上ジェスチャーを他のアプリケーションを起動するために割り当てることができる。
Furthermore, when the
また、図8に示すように、三角形200の形状がある程度変化しても、同一の三角形として認識するようにするものとする。すなわち、接触判定部111は、接触体によるパネル上ジェスチャーが所定の誤差範囲で一致するときは、登録情報に該当すると判定するものとする。このことにより、ユーザの入力を容易にすることができる。
Further, as shown in FIG. 8, even if the shape of the
そして、接触判定部111は、パネル上ジェスチャーのジェスチャーが、ジェスチャー記憶部114に登録されているいずれの登録情報と一致するかを検出し、第2アプリ実行部113は、接触判定部111により検出された登録情報に対応付けられたアプリケーションの起動又は操作を実行する。
Then, the
図9は、アプリケーションプロセッサ11の動作の詳細を示すフローチャートである。図9に示すように、タッチパネル装置100を起動した状態で(ステップS101)、ユーザからの接触を待機する(ステップS102)。このとき、アプリケーションを何も起動していない状態であっても、起動している状態であっても、ユーザからの接触待機となる。そして、タッチパネル103にユーザからの接触が検知され(ステップS103)、一定時間以上、その動作が続いた場合、例えば一定時間以上、指をスライドしたり、複数回タップしたり、一定時間以上ある連続した動作を検出した場合(ステップS104)に、接触判定部111が当該動作(ジェスチャー)の判定動作を開始する(ステップS105)。そして、例えばユーザの指が3本接触している状態であれば、それを三角形と認識し、その頂角αや辺の長さLを検出することで、パネル上ジェスチャーであるか否かの判定を行う(ステップS106)。
FIG. 9 is a flowchart showing details of the operation of the
ここで、ステップS103乃至ステップS106において、接触を検出したものの、一定時間以上のジェスチャーではなかったり、一定時間以上のジェスチャーではあるものの、登録情報に該当するパネル上ジェスチャーではない場合であって、クリックやリンク指定などの通常入力動作であると判定できる場合には、当該通常入力動作に該当する動作制御、例えばアプリケーションを起動する動作の他、ファイルを開く、リンクを指定する、文字や数字を入力する等を実施する(ステップS107)。一方、ジェスチャー記憶部114に登録されているパネル上ジェスチャーが検出された場合には、該当するアプリケーションを起動する等の第2アプリ実行部113における制御を実施する(ステップS108)。
Here, in step S103 to step S106, a touch is detected, but the gesture is not a certain time or more, or is a gesture for a certain time or more, but is not a gesture on the panel corresponding to the registration information, and is clicked. If it can be determined that the input operation is a normal input operation, such as specifying a link or a link, operation control corresponding to the normal input operation, for example, an operation for starting an application, opening a file, specifying a link, entering characters or numbers And so on (step S107). On the other hand, when the on-panel gesture registered in the
図5に戻って、ロック機能制御部115は、予め登録された所定のパネル上ジェスチャーが検出されると、タッチパネルの誤動作を防止するロック機能を解除する。この場合、例えば全パネル上ジェスチャーを、ロック解除ジェスチャーとして登録してもよいし、ある一部のパネル上ジェスチャーのみ、ロック解除ジェスチャーとして登録してもよい。これにより、タッチパネル装置100がロック状態のときにが、従来であれば、ロック機能を解除し、アイコンを探し、これをクリックするという2又は3段階の工程が必要であったが、本実施の形態においては、登録済みのパネル上ジェスチャーが検出されると、ロック解除すると共に、第2アプリ実行部113の制御により、アプリケーションを起動又は操作することができる。
Returning to FIG. 5, when a predetermined on-panel gesture registered in advance is detected, the lock
更に、ジェスチャー記憶部114は、登録情報として、上述の第1乃至第4の値の大きさ及び/又はパネル上ジェスチャーのパネル上の位置に応じて、起動するアプリケーションにおける再生速度、音量、及び文字の大きさ等の値をパラメータ値とし、このパラメータ値を対応づけて記憶することも可能である。すなわち、当該登録情報はアプリケーションの起動のみならず、起動するアプリケーションにおける再生速度等もパネル上ジェスチャのみで設定変更することが可能である。
Furthermore, the
すなわち、図10乃至図12は、パネル上ジェスチャーを行うユーザの他の例を示す図である。図10に示すように、3本の指で三角形210の形で所定時間以上接触したり、3回以上タップしたりして、パネル上ジェスチャーと判定可能なジェスチャーを行うのみならず、以下に説明するようなジェスチャーを更に追加することも可能である。すなわち、パネル上ジェスチャーとして登録する登録情報を、この三角形210の形状を一回り大きい三角形220の形状となるよう3本の指を外側にスライドさせるジェスチャーとすることができる。
That is, FIGS. 10 to 12 are diagrams illustrating other examples of the user who performs the gesture on the panel. As shown in FIG. 10, not only a gesture that can be determined as a gesture on the panel is performed by touching in the shape of a
そして、三角形210を検出可能なジェスチャーを、オーディオ再生ソフトを起動する動作と対応付けて登録情報T1とすると共に、三角形210→大きい三角形220を検出可能なジェスチャーを、オーディオ再生ソフトを起動すると共に、音量を大きくする動作と対応付け、登録情報T2とする。これにより、接触判定部111が、三角形210のパネル上ジェスチャーを検出した場合は、オーディオ再生ソフトを起動し、三角形210→大きい三角形220を検出した場合は、オーディオ生成ソフトを起動すると共に音量を大きくする動作を実行させることができる。なお、オーディオ再生ソフトを起動すると共に、音量を変更するための音量ミキーサ等を表示し、オーディオ再生ソフトの起動と共にユーザが即座に音量を変更できるようにすることも可能である。更に、この音量の変化量等はパネル上ジェスチャーの大きさにより動的に調節できるようにしてもよい。例えばパ寝r上ジェスチャーで三角形を割く角形220より大きくした場合はその拡大度合に応じて音量をさらに大きくする等してもよい。
A gesture that can detect the
これにより、パネル上ジェスチャーにより、アプリケーションを起動させるのみならず、所望のアプリケーションの起動動作のみならず、音量の変更などの設定値の変更や、所定のファイルの再生などを指定しておくことも可能となる。 In this way, it is possible to specify not only the activation of the application, the activation operation of the desired application, the change of the setting value such as the change of the volume, the reproduction of the predetermined file, etc. by the gesture on the panel. It becomes possible.
一方、ジェスチャー記憶部114により、相似形の三角形を接触した後、反対に三本の指を内側にスライドさせる動作と音量を小さくする動作とを対応付けて登録情報とすることも可能である。これにより、接触判定部111がこれを検出すると、オーディオ再生ソフトを起動すると共に音量を小さくする動作を一緒に行うことができる。
On the other hand, after the
また、図11に示すように、三角形210を、三角形の大きさを変化させることなく、そのまま3本の指を上にスライドさせた三角形230とするパネル上ジェスチャーと、オーディオ再生ソフトの起動及び再生速度をアップさせる動作と対応づけて登録情報とすることも可能である。これにより、接触判定部111が三角形210→三角形230を検出した場合は、オーディオ再生ソフトを再生すると同時に再生速度を速くする動作を行わせることができる。同じく、三角形230をそのまま下方にスライドさせた三角形210とするパネル上ジェスチャーと、オーディオ再生ソフトの起動及び再生速度を遅くする動作と対応付けて登録情報とすることで、当該パネル上ジェスチャーを行うことで、オーディオ再生ソフトを起動すると共に再生速度を遅くする動作を行わせることも可能である。
Also, as shown in FIG. 11, the
更にまた、これらの動作を組み合わせることも可能である。すなわち、図12に示すように、ユーザが指で三角形210のジェスチャーを行い、接触させた指3本を外側にスライドさせて三角形220とし、さらに、この三角形220の形状のまま指を上にスライドさせて三角形230とするジェスチャーと、オーディオ再生ソフトの起動、再生音量のアップ、及び再生速度のアップの動作と対応付けて登録情報とすることで、当該パネル上ジェスチャーを検出した場合は、オーディオ再生ソフトを起動すると共に、音量を大きくし、かつ再生速度をアップする動作を一気に行わせることも可能である。
Furthermore, these operations can be combined. That is, as shown in FIG. 12, the user performs a gesture of the
なお、これらの反対の動作、すなわち、三角形の形状を小さくして音量を下げたり、三角形を下にスライドさせて再生速度を下げたりする動作をそれぞれ組み合わせることも可能であることは言うまでもない。更に上述したように、オーディオ再生ソフトの起動と同時に、音量調整用ボタン及び再生速度調整用ボタンを表示させる等して、再生ソフトが起動されると同時に、ユーザが音量調整及び再生速度調整を容易にできるようすることも可能である。自動的に音量や再生速度を調整するようにするか、即時に調整可能とするよう当該動作を補助する手段を表示させるかをユーザ自身の設定で選択できるようにしてもよい。 Needless to say, it is also possible to combine these opposite operations, that is, the operation of decreasing the volume by reducing the triangle shape and the operation of sliding the triangle downward to decrease the reproduction speed. Furthermore, as described above, the user can easily adjust the volume and the playback speed at the same time as the playback software is started by displaying the volume adjustment button and the playback speed adjustment button simultaneously with the start of the audio playback software. It is also possible to make it possible. The user may be able to select whether to automatically adjust the volume and playback speed or to display means for assisting the operation so that the adjustment can be made immediately.
こうして第2アプリ実行部113は、接触判定部111により検出された登録情報に対応付けられたアプリケーションを起動すると共に、スライドする方向、速さ等のパラメータ値に応じた当該アプリケーションの動作を実行する。これにより、パネル上ジェスチャーを行うのみで、ユーザの所望のアプリケーションを所望の動作で実行することができる。
In this way, the second
さらに、タッチパネル装置100は、上述したように操作ボタン104を有するが、この操作ボタン104を、パネル上の接触方法によらず、所定の動作を指示可能なものとしてもよい。これにより、接触判定部111は、ユーザの接触があったときは、この操作ボタン104が押下されているか否かを検出し、操作ボタン104が押下されている場合はユーザからの接触を即座にパネル上ジェスチャーと判定することができ、確実に第2アプリ実行部113の動作を優先させることができる。この場合は、ジェスチャー記憶部114は、接触体のパネル上ジェスチャーの接触方法と共に、操作ボタン104に対する操作を登録情報として記憶しておけばよい。
Furthermore, the
また、操作ボタン104が複数ある場合は、同一パネル上ジェスチャーであっても異なる操作ボタン毎に異なる起動動作等を対応づけておくことも可能となり、この場合、パネル上ジェスチャー×操作ボタン104の数の異なる起動動作等を実行させることができる。
In addition, when there are a plurality of
[アプリケーションプロセッサの他の動作]
図13は、アプリケーションプロセッサの他の例における動作方法を示す図である。図13に示すように、ステップS1乃至ステップS3は、図4に示す例と同様である。ここで、接触判定部111がパネル上ジェスチャーを検出すると、図5に示すアプリケーションプロセッサ11においては、ロック機能制御部115によりロック機能を解除すると共に、第2アプリ実行部113は、ジェスチャー記憶部114に登録された対応するアプリケーションの起動等を実施する(ステップS5)。
[Other operations of application processor]
FIG. 13 is a diagram illustrating an operation method in another example of the application processor. As shown in FIG. 13, steps S1 to S3 are the same as the example shown in FIG. Here, when the
本実施の形態においては、タッチパネルを搭載したタッチパネル装置において、マルチタップ等のパネル上ジェスチャーGのみで、アプリケーションの起動又は操作を行うことができ、また、接触判定部111により、当該タッチパネル上での接触体によるクリックを含む通常入力動作か、当該通常入力動作以外のジェスチャーであるパネル上ジェスチャーGかを判定し、パネル上ジェスチャーGが検出された場合には、第2アプリ実行部113の制御、すなわち登録されているアプリケーションの起動動作又は操作動作を通常動作に優先して実行するため、タッチパネル装置100が、登録したアプリケーションを起動又は操作しようとして通常動作をしてしまう等の誤動作を抑制することができる。したがって、他のプリケーションを起動中であっても、所望のアプリケーションの起動又は操作動作を簡単に行うことができ、ユーザのタッチパネル装置100の操作性を向上させることができる。
In the present embodiment, in a touch panel device equipped with a touch panel, an application can be activated or operated with only a gesture G on the panel such as a multi-tap, and the
パネル上ジェスチャーGによりアプリケーションを起動するため、ユーザは該当アプリケーションの起動用アイコンを探す必要がなくなり、アプリケーション起動用アイコンの位置を覚えたり、使用頻度の高いアプリケーションの起動アイコンが前にくるように並び替えたりする必要がなくなる。さらに、アプリケーションの起動手順を体で覚えることができ。直感的な動作をジェスチャーとして登録することができるので操作が容易となる。よって、まだ漢字が読めないような子供や、細かい文字を読むことが苦手なお年寄りにとっても、操作性を向上したタッチパネル装置を提供することができる。 Since the application is activated by the gesture G on the panel, the user does not need to search for the activation icon of the application, and remembers the position of the application activation icon or arranges the activation icons of frequently used applications in front. There is no need to change. In addition, you can learn the application startup procedure with your body. Intuitive movements can be registered as gestures, making operation easier. Therefore, it is possible to provide a touch panel device with improved operability for children who cannot read kanji yet and elderly people who are not good at reading fine characters.
[具体例]
以下、アプリケーションの起動方法の具体例として、アプリケーションの状態を選択した状態で起動、状態の変更、又は操作方法の例を、下記[起動・変更方法]において説明する。更に、変更する具体的な状態や操作内容を、下記[変更する状態]において説明する。
[Concrete example]
Hereinafter, as a specific example of the application activation method, an example of activation, state change, or operation method with the application state selected will be described in [Activation / Change Method] below. Further, a specific state to be changed and an operation content will be described in [Changed state] below.
[起動・変更方法]
<1>
第1の起動・変更方法としては、もっとも簡便な方法としてユーザの複数の指で多角形を認識させたり、所定回数、所定タイミングでタッチパネルをタップする方法である。例えば、タッチパネル103において、図6に示す三角形200に、ユーザの指を所定時間接触させる動作をパネル上ジェスチャーG1とし登録する。ここで、パネル上ジェスチャーG1として、3つの頂角α1、α2、α3と、最も大きい頂角α1と向かい合う第1辺の長さL1を、登録情報T1とし、この登録情報T1が検出された場合には、アプリケーションA1を起動させるものとし、登録情報T1とアプリケーションA1とを対応づけて登録する等である。
[How to start / change]
<1>
As the first activation / change method, the simplest method is a method of recognizing a polygon with a plurality of user's fingers or tapping a touch panel at a predetermined number of times. For example, on the
この場合、上述のパラメータ値を合わせて登録することができる。すなわち、3つの頂角α1、α2、α3が等しく、辺の長さL1が登録情報T1より大きい場合、反対に辺の長さL1が登録情報T1より小さい場合などに、アプリケーションAに特有の動作を割り当てておくことができる。すなわち、アプリケーションA1がメール作成ソフトである場合に、登録情報T1より辺の長さL1が大きい場合には、メール作成ソフトを起動させると同時に、メールの新規作成画面を開いたり、登録情報T1より辺の長さL1が小さい場合には、メール作成ソフトを起動させると同時に、受信メール一覧を表示する画面を開いたりすることができる。なお、これらは一具体例であって本具体例に限定されるものではない。例えば、登録情報T1を基に何らかの変化量を検出すると特定のアプリケーション(ソフトウェア)を操作できるようにしてもよい。例えば三角形200の面積の量の変化量を特定のアプリケーションの操作と対応づけて登録情報とすれば、当該変化量を検出して起動又は操作を実行させることができる。
In this case, the above parameter values can be registered together. That is, when the three apex angles α1, α2, and α3 are equal and the side length L1 is larger than the registration information T1, on the contrary, when the side length L1 is smaller than the registration information T1, the operation peculiar to the application A is performed. Can be assigned. That is, when the application A1 is mail creation software and the side length L1 is larger than the registration information T1, the mail creation software is started and at the same time a new mail creation screen is opened or the registration information T1 is used. When the length L1 of the side is small, the screen for displaying the received mail list can be opened at the same time as starting the mail creating software. Note that these are specific examples and are not limited to the specific examples. For example, a specific application (software) may be operated when some amount of change is detected based on the registration information T1. For example, if a change amount of the area amount of the
<2>
第2の起動・変更方法としては、指3本で三角形を形成する等のパネル上ジェスチャーG1に動きを加える方法である。すなわち、各ジェスチャーに動きを追加し、この動きに応じてアプリケーションの状態(起動画面を開く他、SNS(social networking service)における日記の記録画面のように特定ページにスキップする等)やアプリケーション特有の値(再生速度、ボリューム、表示画像又は表示文字の大き、動画又は静止画の撮影の指定、撮影する画像のズーム)を、所望の値に対応づける。動きを加える一例を下記に示す。
(1)ピンチアウトする:例えば3本の指を外側にスライドさせて三角形200を拡大するジェスチャー
(2)ピンチインする:例えば3本の指を内側にスライドさせて三角形200をすぼめるジェスチャー
(3)スワイプする:例えば、3本の指を左右にスライドさせるジェスチャー
(4)ローテートする:例えば、3本の指を回転するようにスライドさせるジェスチャー
(5)フリックする:例えば、画面をスクロールさせるときのように、素早く払うようなジェスチャー
<2>
The second activation / change method is a method of adding a motion to the on-panel gesture G1 such as forming a triangle with three fingers. In other words, a motion is added to each gesture, and the application state (opening the start screen, skipping to a specific page like a diary recording screen in SNS (social networking service)) according to this motion, or application-specific The values (reproduction speed, volume, size of display image or display character, designation of shooting of moving image or still image, zoom of image to be shot) are associated with desired values. An example of adding motion is shown below.
(1) Pinch out: for example, a gesture to slide the three fingers outward to enlarge the triangle 200 (2) Pinch in: for example, a gesture to slide the three fingers inward to squeeze the triangle 200 (3) Swipe: For example, gesture to slide left and right three fingers (4) Rotate: For example, gesture to slide three fingers to rotate (5) Flick: For example, when scrolling the screen Gestures like paying quickly
この場合、上述したように、広げる動作で音量をアップさせたり、上にスワップする動作で再生速度をアップさせる等直感的に指定することが可能となる。これにより、アプリケーション起動後に設定を変更する動作を省略又は容易にし、使用頻度の高いアプリケーションのユーザ負担を軽減することができる。 In this case, as described above, it is possible to specify intuitively, for example, by increasing the volume by an operation of widening or by increasing the playback speed by an operation of swapping up. Thereby, the operation | movement which changes a setting after application starting can be abbreviate | omitted or made easy, and the user burden of the application with high use frequency can be reduced.
<3>
第3の起動・変更方法としては、上記第2の方法の動きを加える他の例が挙げられる。図7に示したように、ユーザの指などを接触した状態で、くの字や何らかの文字の形状や、円形やタッチパネル103と同じ四角の形状などに指やタッチペンを接触したまま摺動させるジェスチャーを利用する方法である。例えば、上記の第1、第2の方法と合わせて登録することで、更に異なるパネル上ジェスチャーGとして登録することができる。例えば、オーディオ再生ソフト、画像再生ソフト等を異なるジェスチャー(例えば異なる三角形等)とし、その三角形のジェスチャーの後又はジェスチャーをする前に、当該接触位置を横にスライドするジェスチャーを組み合わせた場合は、アプリケーション(ソフトウェア)の起動と共に、所定の動作を開始させるよう登録しておくことも可能である。さらにまた、アプリケーションの起動と共に、複数のアプリケーション(ソフトウェア)に共通の動作を対応付けておくことで、ユーザがパネル上ジェスチャーGの記憶量を低減することも可能となる。
<3>
As the third activation / change method, there is another example in which the movement of the second method is added. As shown in FIG. 7, a gesture in which a finger or a touch pen is slid while a finger or a touch pen is in contact with a shape of a character or some character, a circle or the same square shape as the
組み合わせるジェスチャーとしては、三角形の形状を維持した状態でもよいし、単に何本かの指を左右、上下にスライドする動作を組み合わせるのみとしてもよい。更に、手の形を維持したままのスライド動作を複数回行う、すなわち、手を開いた状態等として図形や線や文字を描いたり、三角形を回転させたり、当該動作を繰り返す回数に応じた動作とすることも可能である。 The gesture to be combined may be a state in which the shape of the triangle is maintained, or may be a combination of simply sliding several fingers left and right and up and down. Furthermore, the slide operation is performed multiple times while maintaining the shape of the hand, that is, an operation corresponding to the number of times the operation is repeated, such as drawing a figure, a line or a character with the hand open, rotating the triangle, etc. It is also possible.
<4>
第4の起動・変更方法としては、指紋認証によりロックを外す機能を有するタッチパネル装置100を使用する方法がある。このようなタッチパネル装置100においては、通常、指紋認証部に指定の指をスライドするが、例えば人差し指→中指の順でスライドする(指紋認証させる)動作をパネル上ジェスチャーG2、人差し指→薬指の順で指紋認証させる動作をパネル上ジェスチャーG3等とし、異なるパネル上ジェスチャーGとして登録し、この順序で指紋認証した場合には、ロック解除と共に、対応づけられたアプリケーションを起動させることが可能となる。
<4>
As a fourth activation / change method, there is a method of using the
<5>
第5の起動・変更方法としては、操作ボタン104を利用する方法がある。すなわち、操作ボタン104を押下しながらジェスチャーを行う場合を、パネル上ジェスチャーGとして検出するよう登録することも可能である。また、画面ロックされていない場合等においては、ハードキー(操作ボタン104)のみならず、ソフトキーを利用してもよい。例えば、タッチパネル装置100のトップ画面に戻すボタン(以下、ホームボタンという。)を押しながら、上述の第1乃至第4の起動方法・変更方法でタップやスライド等のジェスチャーを行った場合、該当アプリケーションを起動させたり、起動と共に所定の動作を実行させたりすることができる。これにより、現在起動中のアプリケーションへの入力(通常のクリック動作や、文字入力、インターネットブラウザのリンクの指定)等の通常入力動作との、接触判定部111における区別が容易となり、これにより小さいジェスチャーでも判別が可能となるため、ユーザが複雑なパネル上ジェスチャーを記憶する必要がなくなる。
<5>
As a fifth activation / change method, there is a method of using the
さらに、上記第2の方法又はその組み合わせをパネル上ジェスチャーとして登録している場合に、他のアプリケーション上で、パネル上ジェスチャーではなく、本来のピンチインやピンチアウトの動作を行う場合があるが、接触判定部111において、これらの動作とパネル上ジェスチャーとの区別がより簡単になるため、誤動作等が低減され、ユーザにとってより使いやすい機能となる。
Furthermore, when the second method or a combination thereof is registered as a gesture on the panel, an original pinch-in or pinch-out operation may be performed on another application instead of the gesture on the panel. Since the
さらにまた、操作ボタン104が複数ある場合には、同一のジェスチャーであっても操作ボタン104毎に異なるパネル上ジェスチャーGとして、異なるアプリケーションの起動や動作を対応づけることができ、複数のジェスチャーを記憶する必要がなくなり、操作性が向上する。
Furthermore, when there are a plurality of
なお、これら第1乃至第5の起動・変更方法のうち、複数を組み合わせて1つのパネル上ジェスチャーとすることができる他、例えば第1、第2及び第5の方法を組みわせる場合に、第1及び第2の起動・変更方法の順序を入れ替えたものを、異なるパネル上ジェスチャーとして登録することも可能であり、より多くの起動・動作を実行させることができる。この場合、実行順序と、起動・動作とをある一定の法則で関係づけることにより、ユーザのパネル上ジェスチャーの記憶をより容易とすることができる。 Of these first to fifth activation / change methods, a plurality of methods can be combined into a single panel gesture. For example, when the first, second, and fifth methods can be combined, Those in which the order of the first and second activation / change methods is changed can be registered as different panel gestures, and more activation / operations can be executed. In this case, it is possible to more easily memorize the user's gestures on the panel by associating the execution order with the activation / action according to a certain rule.
[変更する状態]
<1>
状態を変更する例としては、各アプリケーションに特有の値を変化させる場合やモードを指定する場合が挙げられる。各アプリケーションに特有の値とは、音楽再生ソフト・動画再生ソフトにおける音量の大小・再生速度の大小を指定する値、カメラ撮影用ソフトにおけるズームの大小を指定する値、メールソフトやインターネット検索ソフト、辞書ソフト等において文字を閲覧したり、文字を書き込む場合の大きさを指定する値等が考えらえる。また、モードを指定する値とは、静止画・動画撮影用ソフトにおける自動撮影モード、録画モード、室内、屋内、風景撮影モード、人物撮影モードなどのモードを指定する値、SNS投稿アプリケーションにおける投稿内容の閲覧モードやユーザ自身による投稿モードのモードを指定する値等が考えられる。これらの値も登録情報として登録しておくことで、アプリケーションを起動するのみでなく、更に何段階か通常であれば操作が必要な設定値や状態にまでスキップさせた状態でアプリケーションを実行することが可能となる。これにより、ユーザはより短時間で自分の操作したい状態とすることができ、タッチパネル装置100における操作性を向上させることができる。
[Status to be changed]
<1>
Examples of changing the state include a case where a value specific to each application is changed or a mode is specified. Values specific to each application include values that specify the volume level and playback speed of music playback software and video playback software, values that specify the zoom size of camera shooting software, mail software and Internet search software, A value that specifies the size when the character is viewed or written in dictionary software or the like can be considered. The value for specifying the mode is a value for specifying a mode such as an automatic shooting mode, recording mode, indoor, indoor, landscape shooting mode, portrait shooting mode, etc. in still image / moving image shooting software. For example, a value for specifying the viewing mode or the posting mode by the user can be considered. By registering these values as registration information, not only the application is started, but also the application is executed in a state where it is skipped to the setting value or state that requires operation in some stages. Is possible. Thereby, the user can be in a state where he / she wants to operate himself / herself in a shorter time, and the operability of the
<2>
状態を変更する例としては、アプリケーションの起動や所定の動作を開始させるだけでなく、終了動作を行うことも可能である。この場合は、アプリケーション毎に異なるパネル上ジェスチャーを登録する必要がなく、きわめて簡単な動作でアプリケーションを終了させることができる。具体的には、直感的にわかりやすい動作終了方法として、例えば、ある程度指を広げた状態から指を内側にスライドさせ指をすぼめるジェスチャーをアプリケーション終了のパネル上ジェスチャーGとして登録することができる。
<2>
As an example of changing the state, it is possible not only to start an application or start a predetermined operation, but also to perform an end operation. In this case, there is no need to register a different gesture on the panel for each application, and the application can be terminated with a very simple operation. Specifically, as an operation end method that is intuitively easy to understand, for example, a gesture that slides a finger inward from a state where the finger is spread to a certain extent and depresses the finger can be registered as an on-panel gesture G on the application end.
このように、本実施の形態においては、複数の指やタッチペンなどのタッチ想定物(接触体)でタッチパネルを接触しながら行うジェスチャー(パネル上ジェスチャー)のみで、他のアプリケーションを実施中であっても誤動作させることなく、所望のアプリケーションの起動や終了を含む所望の動作を行わせることができる。 As described above, in the present embodiment, other applications are being executed only with gestures (gestures on the panel) performed while touching the touch panel with a touch assumption object (contact body) such as a plurality of fingers or a touch pen. In addition, it is possible to perform a desired operation including activation and termination of a desired application without causing a malfunction.
パネル上ジェスチャーとして認識させるジェスチャーとしては、ユーザの複数本の指で指定した多角形の面積の大きさやその変更、その前後に接触部分が加えるジェスチャー等による、連続又は不連続に所定時間以上接触させる動作とすることができ、ジェスチャーの違いにより、起動するアプリケーションやその状態、アプリケーションの内部の値を指定することができる。これにより、タッチパネル装置100においてタッチパネルが反応する状態ならばいかなるときでも当該機能を利用することができ、ユーザの操作性を向上させることができる。
As gestures to be recognized as gestures on the panel, contact is performed continuously or discontinuously for a predetermined time or more, depending on the size of the polygon specified by the user's multiple fingers, a change in the polygon area, or a gesture added by a contact part before and after that. It is possible to specify an application to be activated, its state, and an internal value of the application depending on the gesture. Accordingly, the function can be used at any time as long as the touch panel reacts in the
また、例えば速いジェスチャーには、高速で再生するよう設定したアプリケーションが起動するよう対応付ける等、アプリケーションの状態をユーザが直感的に決定することができる。さらに、ユーザがパネル上ジェスチャーの方法を覚えるだけで、アプリケーションを起動することができ、起動用のアイコンを探したり、又は起動用のアイコンがいずれか認識できないようなユーザであっても、アプリケーションを動作させることができる。 Further, for example, the user can intuitively determine the state of the application, such as associating a fast gesture with an application set to be played back at high speed. Furthermore, the user can start the application simply by learning the gesture method on the panel, and even if the user is searching for a startup icon or cannot recognize any of the startup icons, It can be operated.
なお、本発明は上述した実施の形態のみに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能であることは勿論である。 It should be noted that the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the scope of the present invention.
例えば、上述の実施の形態では、ハードウェアの構成として説明したが、これに限定されるものではなく、任意の処理を、CPU(Central Processing Unit)にコンピュータアプリケーションを実行させることにより実現することも可能である。この場合、コンピュータアプリケーションは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD−ROM(Read Only Memory)、CD−R、CD−R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(random access memory))を含む。また、アプリケーションは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、アプリケーションをコンピュータに供給できる。 For example, in the above-described embodiment, the hardware configuration has been described. However, the present invention is not limited to this, and arbitrary processing may be realized by causing a CPU (Central Processing Unit) to execute a computer application. Is possible. In this case, the computer application can be stored and supplied to the computer using various types of non-transitory computer readable media. Non-transitory computer readable media include various types of tangible storage media. Examples of non-transitory computer-readable media include magnetic recording media (for example, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (for example, magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, CD-R / W and semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (random access memory)) are included. The application may also be supplied to the computer by various types of transitory computer readable media. Examples of transitory computer readable media include electrical signals, optical signals, and electromagnetic waves. The transitory computer readable medium can supply the application to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
さらにまた、本願発明の観点は以下のように捉えることもできる。
(付記1)
タッチパネルを有するタッチパネル装置であって、
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定部と、
前記接触判定部により前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行部と、
前記接触判定部により前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行部と、を有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行部の制御に優先して前記第2アプリ実行部の制御が実行される、タッチパネル装置。
(付記2)
前記パネル上ジェスチャーは、前記タッチパネル上で多角形の形状に前記タッチパネルをなぞる動作とし、
前記パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及び前記接触体が前記タッチパネル上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶部を有し、
前記接触判定部は、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかを検出し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションの起動又は操作を実行する
付記1記載のタッチパネル装置。
(付記3)
前記パネル上ジェスチャーは、前記接触体により前記タッチパネルを所定間隔でタップする動作とし、
前記タッチパネルがタップされる回数、タップ間隔、タップの際の接触時間、及び一連の動作のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶部を有し、
前記接触判定部は、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかを検出し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションの起動又は操作を実行する
付記1又は2記載のタッチパネル装置。
(付記4)
前記タッチパネルの誤動作を防止するロック機能を制御するロック機能制御部をさらに備え、
前記ロック機能制御部は、予め登録された所定のパネル上ジェスチャーが検出されると前記ロック機能を解除するものであって、
前記接触判定部により前記所定のパネル上ジェスチャーを検出すると、前記タッチパネルのロック機能が解除されると共に、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップの制御が実行される、
付記1乃至3のいずれか1項記載のタッチパネル装置。
(付記5)
前記記憶部は、前記登録情報として、前記第1乃至第4の値の大きさ及び/又は前記パネル上ジェスチャーの前記パネル上の位置に応じて、起動するアプリケーションと共に当該アプリケーションにおける再生速度、音量、及び文字の大きさを含む特有のパラメータ値を対応付けて記憶し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションを起動すると共に前記パラメータ値に応じた当該アプリケーションの動作を実行する
付記2記載のタッチパネル装置。
(付記6)
前記タッチパネル装置は、前記パネル上の接触方法によらず、所定の動作を指示可能なハードキーを有し、
前記記憶部は、前記接触体の前記パネル上ジェスチャーの接触方法と共に、前記ハードキーに対する操作を前記登録情報として記憶し、
前記接触判定部は、前記パネル上ジェスチャー及び前記ハードキーに対する操作を前記登録情報として検出する
付記1乃至5のいずれか1項記載のタッチパネル装置。
(付記7)
前記接触判定部は、前記接触体による前記パネル上ジェスチャーが所定の誤差範囲で一致するとき、前記登録情報に該当すると判定する
付記1乃至6のいずれか1項記載のタッチパネル装置。
(付記8)
タッチパネルを有するタッチパネル装置の動作制御方法であって、
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定ステップと、
前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行ステップと、
前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行ステップとを有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップにおける制御が実行される、タッチパネル装置の動作制御方法。
(付記9)
前記パネル上ジェスチャーは、前記タッチパネル上で多角形の形状に前記接触体をなぞる動作とし、
前記パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及び前記接触体が前記タッチパネル上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶ステップを有し、
前記接触判定ステップでは、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかが検出され、
前記第2アプリ実行ステップでは、前記登録情報に対応付けられたアプリケーションの起動又は操作が実行される
付記8記載のタッチパネル装置の動作制御方法。
(付記10)
前記パネル上ジェスチャーは、前記接触体により前記タッチパネルを所定間隔でタップする動作とし、
前記タッチパネルがタップされる回数、タップ間隔、タップの際の接触時間、及び一連の動作のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶ステップを有し、
前記接触判定ステップでは、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかが検出され、
前記第2アプリ実行ステップでは、前記登録情報に対応付けられたアプリケーションの起動又は操作が実行される
付記8又は9記載のタッチパネル装置の動作制御方法。
(付記11)
前記タッチパネルの誤動作を防止するロック機能を制御するロック機能制御ステップを更に有し、
前記ロック機能制御ステップでは、予め登録された所定のパネル上ジェスチャーが検出されると前記ロック機能を解除するものであって、
前記所定のパネル上ジェスチャーが検出されると、前記タッチパネルのロック機能が解除されると共に、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップの制御が実行される、
付記8乃至10のいずれか1項記載のタッチパネル装置の動作制御方法。
(付記12)
前記記憶ステップでは、前記登録情報として、前記第1乃至第4の値の大きさ及び/又は前記パネル上ジェスチャーの前記パネル上の位置に対応付けて、起動するアプリケーションと共に当該アプリケーションにおける再生速度、音量、及び文字の大きさを含む特有のパラメータ値が記憶され、
前記第2アプリ実行ステップでは、前記登録情報に対応付けられたアプリケーションが起動されると共に前記パラメータ値に応じた当該アプリケーションの動作が実行される
付記9記載のタッチパネル装置の動作制御方法。
(付記13)
前記記憶ステップでは、前記登録情報として、前記接触体の前記パネル上ジェスチャーの接触方法と共に、前記パネル上の接触方法によらず、所定の動作を指示可能なハードキーに対する操作が記憶され、
前記接触判定ステップでは、前記パネル上ジェスチャー及び前記ハードキーに対する操作が前記登録情報として検出される
付記8乃至12のいずれか1項記載のタッチパネル装置の動作制御方法。
(付記14)
前記接触判定ステップでは、前記接触体による前記パネル上ジェスチャーが所定の誤差範囲で一致するとき、前記登録情報に該当すると判定される
付記8乃至13のいずれか1項記載のタッチパネル装置の動作制御方法。
(付記15)
タッチパネルを有するタッチパネル装置における動作処理をコンピュータに実行させるためのプログラムであって、
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定処理と、
前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行処理と、
前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行処理とを有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行処理に優先して前記第2アプリ実行処理が実施される、プログラム。
Furthermore, the viewpoint of this invention can also be grasped | ascertained as follows.
(Appendix 1)
A touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination unit that determines one of the gestures on the panel, which is an operation of making contact for a predetermined time or more,
A first application execution unit that executes a predetermined operation including activation of an application according to the input position when the normal determination operation is detected by the contact determination unit;
A second application execution unit that activates or operates a predetermined application registered in advance according to the gesture when the touch determination unit detects the gesture on the panel;
The touch panel device in which the control of the second application execution unit is executed in preference to the control of the first application execution unit when the gesture on the panel is detected.
(Appendix 2)
The gesture on the panel is an operation of tracing the touch panel in a polygonal shape on the touch panel,
A first value relating to the apex angle of a part or all of the polygon formed by the gesture on the panel, a second value relating to the length of each side of the polygon, and a third value relating to the area of the polygon. A value and a value relating to a speed at which the contact body traces on the touch panel are registered as one or a combination of one or more of the fourth values, and the registration information and a predetermined installed in the touch panel device A storage unit for storing the activation or operation of the application in association with each other,
The contact determination unit detects which registration information matches the gesture of the gesture on the panel,
The touch panel device according to
(Appendix 3)
The gesture on the panel is an operation of tapping the touch panel with the contact body at a predetermined interval,
One or a combination of one or more of the number of times the touch panel is tapped, the tap interval, the contact time at the time of tapping, and a series of operations is set as registration information, and the registration information and the touch panel device are installed. A storage unit that stores the activation or operation of a predetermined application in association with each other,
The contact determination unit detects which registration information matches the gesture of the gesture on the panel,
The touch panel device according to
(Appendix 4)
A lock function control unit for controlling a lock function for preventing malfunction of the touch panel;
The lock function control unit is to release the lock function when a pre-registered gesture on the panel is detected,
When the touch determination unit detects the predetermined gesture on the panel, the lock function of the touch panel is released, and the control of the second application execution step is executed in preference to the control of the first application execution step. ,
The touch panel device according to any one of
(Appendix 5)
The storage unit, as the registration information, according to the size of the first to fourth values and / or the position of the gesture on the panel on the panel, together with the application to be started, the playback speed, volume, And a specific parameter value including the character size is stored in association with each other,
The touch panel device according to claim 2, wherein the second application execution unit activates an application associated with the registration information detected by the contact determination unit and executes an operation of the application according to the parameter value.
(Appendix 6)
The touch panel device has a hard key capable of instructing a predetermined operation regardless of a contact method on the panel,
The storage unit stores an operation on the hard key as the registration information together with a contact method of the gesture on the panel of the contact body,
The touch panel device according to
(Appendix 7)
The touch panel device according to any one of
(Appendix 8)
An operation control method for a touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination step of determining any of the gestures on the panel, which is an operation of making contact for a predetermined time or more;
A first application execution step for executing a predetermined operation including activation of an application according to the input position when the normal input operation is detected in the contact determination step;
A second application execution step of activating or operating a predetermined application registered in advance according to the gesture when the gesture on the panel is detected in the contact determination step;
An operation control method for a touch panel device, wherein when the gesture on the panel is detected, the control in the second application execution step is executed in preference to the control in the first application execution step.
(Appendix 9)
The gesture on the panel is an operation of tracing the contact body in a polygonal shape on the touch panel,
A first value relating to the apex angle of a part or all of the polygon formed by the gesture on the panel, a second value relating to the length of each side of the polygon, and a third value relating to the area of the polygon. A value and a value relating to a speed at which the contact body traces on the touch panel are registered as one or a combination of one or more of the fourth values, and the registration information and a predetermined installed in the touch panel device A storage step for storing the activation or operation of the application in association with each other,
In the contact determination step, it is detected which registered information matches the gesture of the gesture on the panel,
The operation control method for a touch panel device according to appendix 8, wherein in the second application execution step, activation or operation of an application associated with the registration information is executed.
(Appendix 10)
The gesture on the panel is an operation of tapping the touch panel with the contact body at a predetermined interval,
One or a combination of one or more of the number of times the touch panel is tapped, the tap interval, the contact time at the time of tapping, and a series of operations is set as registration information, and the registration information and the touch panel device are installed. A storage step for storing the activation or operation of a predetermined application in association with each other;
In the contact determination step, it is detected which registered information matches the gesture of the gesture on the panel,
The operation control method for a touch panel device according to appendix 8 or 9, wherein in the second application execution step, activation or operation of an application associated with the registration information is executed.
(Appendix 11)
A lock function control step for controlling a lock function for preventing malfunction of the touch panel;
In the lock function control step, when a predetermined pre-registered gesture on the panel is detected, the lock function is released,
When the predetermined gesture on the panel is detected, the lock function of the touch panel is released, and the control of the second application execution step is executed in preference to the control of the first application execution step.
The operation control method for a touch panel device according to any one of appendices 8 to 10.
(Appendix 12)
In the storing step, as the registration information, the first to fourth values and / or the position of the gesture on the panel in association with the position on the panel, together with the application to be started, the playback speed and volume in the application , And unique parameter values including character size are stored,
The operation control method for a touch panel device according to claim 9, wherein, in the second application execution step, an application associated with the registration information is activated and an operation of the application according to the parameter value is executed.
(Appendix 13)
In the storage step, as the registration information, together with a contact method of the gesture on the panel of the contact body, an operation on a hard key capable of instructing a predetermined operation is stored regardless of the contact method on the panel.
The operation control method for a touch panel device according to any one of appendices 8 to 12, wherein in the contact determination step, an operation on the gesture on the panel and the hard key is detected as the registration information.
(Appendix 14)
The operation control method for a touch panel device according to any one of appendices 8 to 13, wherein in the contact determination step, the gesture on the panel by the contact body is determined to correspond to the registration information when they coincide with each other within a predetermined error range. .
(Appendix 15)
A program for causing a computer to execute operation processing in a touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination process for determining any one of the gestures on the panel, which is an operation of making contact for a predetermined time or more,
A first application execution process for executing a predetermined operation including activation of an application according to the input position when the normal input operation is detected in the contact determination step;
A second application execution process for activating or operating a predetermined application registered in advance according to the gesture when the gesture on the panel is detected in the contact determination step;
A program in which the second application execution process is executed in preference to the first application execution process when the gesture on the panel is detected.
10 メインボード
11 アプリケーションプロセッサ
12 無線処理部
11 アプリケーションプロセッサ
13 メインメモリ
14 フラッシュメモリ
15 電源管理部
16 ボイス回路
17 オーディオ回路
18 センサ
100 タッチパネル装置
101 筐体
102 液晶パネル
103 タッチパネル
104 操作ボタン
105 カメラデバイス
106 カメラデバイス
107 マイク
108 スピーカ
109 バッテリ
111 接触判定部
112 第1アプリ実行部
113 第2アプリ実行部
114 ジェスチャー記憶部
115 ロック機能制御部
121 ベースバンドプロセッサ
122 無線LAN
130 USB
131 メモリカード
132 アンテナ
DESCRIPTION OF
130 USB
131
Claims (10)
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定部と、
前記接触判定部により前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行部と、
前記接触判定部により前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行部と、を有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行部の制御に優先して前記第2アプリ実行部の制御が実行される、タッチパネル装置。 A touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination unit that determines one of the gestures on the panel, which is an operation of making contact for a predetermined time or more,
A first application execution unit that executes a predetermined operation including activation of an application according to the input position when the normal determination operation is detected by the contact determination unit;
A second application execution unit that activates or operates a predetermined application registered in advance according to the gesture when the touch determination unit detects the gesture on the panel;
The touch panel device in which the control of the second application execution unit is executed in preference to the control of the first application execution unit when the gesture on the panel is detected.
前記パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及び前記接触体が前記タッチパネル上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶部を有し、
前記接触判定部は、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかを検出し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションの起動又は操作を実行する
請求項1記載のタッチパネル装置。 The gesture on the panel is an operation of tracing the touch panel in a polygonal shape on the touch panel,
A first value relating to the apex angle of a part or all of the polygon formed by the gesture on the panel, a second value relating to the length of each side of the polygon, and a third value relating to the area of the polygon. A value and a value relating to a speed at which the contact body traces on the touch panel are registered as one or a combination of one or more of the fourth values, and the registration information and a predetermined installed in the touch panel device A storage unit for storing the activation or operation of the application in association with each other,
The contact determination unit detects which registration information matches the gesture of the gesture on the panel,
The touch panel device according to claim 1, wherein the second application execution unit executes activation or operation of an application associated with the registration information detected by the contact determination unit.
前記タッチパネルがタップされる回数、タップ間隔、タップの際の接触時間、及び一連の動作のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶部を有し、
前記接触判定部は、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかを検出し、
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションの起動又は操作を実行する
請求項1又は2記載のタッチパネル装置。 The gesture on the panel is an operation of tapping the touch panel with the contact body at a predetermined interval,
One or a combination of one or more of the number of times the touch panel is tapped, the tap interval, the contact time at the time of tapping, and a series of operations is set as registration information, and the registration information and the touch panel device are installed. A storage unit that stores the activation or operation of a predetermined application in association with each other,
The contact determination unit detects which registration information matches the gesture of the gesture on the panel,
The touch panel device according to claim 1, wherein the second application execution unit executes activation or operation of an application associated with the registration information detected by the contact determination unit.
前記ロック機能制御部は、予め登録された所定のパネル上ジェスチャーが検出されると前記ロック機能を解除するものであって、
前記接触判定部により前記所定のパネル上ジェスチャーを検出すると、前記タッチパネルのロック機能が解除されると共に、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップの制御が実行される、
請求項1乃至3のいずれか1項記載のタッチパネル装置。 A lock function control unit for controlling a lock function for preventing malfunction of the touch panel;
The lock function control unit is to release the lock function when a pre-registered gesture on the panel is detected,
When the touch determination unit detects the predetermined gesture on the panel, the lock function of the touch panel is released, and the control of the second application execution step is executed in preference to the control of the first application execution step. ,
The touch panel device according to any one of claims 1 to 3.
前記第2アプリ実行部は、前記接触判定部により検出された前記登録情報に対応付けられたアプリケーションを起動すると共に前記パラメータ値に応じた当該アプリケーションの動作を実行する
請求項2記載のタッチパネル装置。 The storage unit, as the registration information, according to the size of the first to fourth values and / or the position of the gesture on the panel on the panel, together with the application to be started, the playback speed, volume, And a specific parameter value including the character size is stored in association with each other,
The touch panel device according to claim 2, wherein the second application execution unit starts an application associated with the registration information detected by the contact determination unit and executes an operation of the application according to the parameter value.
前記記憶部は、前記接触体の前記パネル上ジェスチャーの接触方法と共に、前記ハードキーに対する操作を前記登録情報として記憶し、
前記接触判定部は、前記パネル上ジェスチャー及び前記ハードキーに対する操作を前記登録情報として検出する
請求項1乃至5のいずれか1項記載のタッチパネル装置。 The touch panel device has a hard key capable of instructing a predetermined operation regardless of a contact method on the panel,
The storage unit stores an operation on the hard key as the registration information together with a contact method of the gesture on the panel of the contact body,
The touch panel device according to claim 1, wherein the contact determination unit detects an operation on the gesture on the panel and the hard key as the registration information.
請求項1乃至6のいずれか1項記載のタッチパネル装置。 The touch panel device according to any one of claims 1 to 6, wherein the contact determination unit determines that the information corresponds to the registration information when the gestures on the panel by the contact body coincide with each other within a predetermined error range.
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定ステップと、
前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行ステップと、
前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動する第2アプリ実行ステップとを有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行ステップの制御に優先して前記第2アプリ実行ステップにおける制御が実行される、タッチパネル装置の動作制御方法。 An operation control method for a touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination step of determining any of the gestures on the panel, which is an operation of making contact for a predetermined time or more;
A first application execution step for executing a predetermined operation including activation of an application according to the input position when the normal input operation is detected in the contact determination step;
A second application execution step of starting a predetermined application registered in advance according to the gesture when the gesture on the panel is detected in the contact determination step;
An operation control method for a touch panel device, wherein when the gesture on the panel is detected, the control in the second application execution step is executed in preference to the control in the first application execution step.
前記パネル上ジェスチャーにより形成される多角形の一部又は全部の頂角の角度に関する第1の値、当該多角形の各辺の長さに関する第2の値、当該多角形の面積に関する第3の値、及び前記接触体が前記タッチパネル上をなぞる速度に関する値を第4の値のうちいずれか1つ又は1以上の組み合わせを登録情報とし、当該登録情報と、前記タッチパネル装置にインストールされている所定のアプリケーションの起動又は操作とを対応づけて記憶する記憶ステップを有し、
前記接触判定ステップでは、前記パネル上ジェスチャーのジェスチャーがいずれの登録情報と一致するかが検出され、
前記第2アプリ実行ステップでは、前記登録情報に対応付けられたアプリケーションの起動又は操作が実行される
請求項8記載のタッチパネル装置の動作制御方法。 The gesture on the panel is an operation of tracing the contact body in a polygonal shape on the touch panel,
A first value relating to the apex angle of a part or all of the polygon formed by the gesture on the panel, a second value relating to the length of each side of the polygon, and a third value relating to the area of the polygon. A value and a value relating to a speed at which the contact body traces on the touch panel are registered as one or a combination of one or more of the fourth values, and the registration information and a predetermined installed in the touch panel device A storage step for storing the activation or operation of the application in association with each other,
In the contact determination step, it is detected which registered information matches the gesture of the gesture on the panel,
9. The operation control method for a touch panel device according to claim 8, wherein in the second application execution step, activation or operation of an application associated with the registration information is executed.
前記タッチパネルに対するユーザの指又はタッチペンを含む接触体からの接触を受けると、当該タッチパネル上での前記接触体によるクリックを含む通常入力動作か、又は前記接触体を前記タッチパネル上で連続又は不連続に所定時間以上接触させる動作であるパネル上ジェスチャーのいずれかを判定する接触判定処理と、
前記接触判定ステップにて前記通常入力動作が検出されるとその入力位置に応じた、アプリケーションの起動を含む所定の動作を実行する第1アプリ実行処理と、
前記接触判定ステップにて前記パネル上ジェスチャーが検出されるとそのジェスチャーに応じ、予め登録された所定のアプリケーションを起動又は操作する第2アプリ実行処理とを有し、
前記パネル上ジェスチャーが検出された場合は、前記第1アプリ実行処理に優先して前記第2アプリ実行処理が実施される、プログラム。 A program for causing a computer to execute operation processing in a touch panel device having a touch panel,
When contact is received from a contact body including a user's finger or a touch pen with respect to the touch panel, a normal input operation including a click by the contact body on the touch panel, or the contact body is continuously or discontinuously on the touch panel. A contact determination process for determining any one of the gestures on the panel, which is an operation of making contact for a predetermined time or more,
A first application execution process for executing a predetermined operation including activation of an application according to the input position when the normal input operation is detected in the contact determination step;
A second application execution process for activating or operating a predetermined application registered in advance according to the gesture when the gesture on the panel is detected in the contact determination step;
A program in which the second application execution process is executed in preference to the first application execution process when the gesture on the panel is detected.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013029345A JP2014157578A (en) | 2013-02-18 | 2013-02-18 | Touch panel device, control method of touch panel device, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013029345A JP2014157578A (en) | 2013-02-18 | 2013-02-18 | Touch panel device, control method of touch panel device, and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2014157578A true JP2014157578A (en) | 2014-08-28 |
Family
ID=51578394
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013029345A Pending JP2014157578A (en) | 2013-02-18 | 2013-02-18 | Touch panel device, control method of touch panel device, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2014157578A (en) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105306821A (en) * | 2015-10-20 | 2016-02-03 | 广东欧珀移动通信有限公司 | Method and device for opening camera function of mobile terminal |
KR101604552B1 (en) | 2014-10-27 | 2016-03-18 | 한국과학기술원 | Electronic device, and method thereof |
EP3007091A1 (en) | 2014-10-10 | 2016-04-13 | Fujitsu Limited | Authentication information managing method, storage medium, and information processing device |
JP2016062397A (en) * | 2014-09-19 | 2016-04-25 | ヤフー株式会社 | Terminal device, information processing method, and information processing program |
KR101663909B1 (en) * | 2015-09-01 | 2016-10-07 | 한국과학기술원 | Electronic device, and method thereof |
CN109241714A (en) * | 2016-01-06 | 2019-01-18 | 阿里巴巴集团控股有限公司 | A kind of information image display methods and device |
JP2019049870A (en) * | 2017-09-11 | 2019-03-28 | 日本電気株式会社 | Similar program specifying device, similar program specifying method, and control program |
JP2019101814A (en) * | 2017-12-04 | 2019-06-24 | アルプスアルパイン株式会社 | Input control device, input device, operated device, and program |
JP2019532436A (en) * | 2016-10-14 | 2019-11-07 | ホアウェイ・テクノロジーズ・カンパニー・リミテッド | Screen display method and terminal |
JP7468580B2 (en) | 2020-09-11 | 2024-04-16 | カシオ計算機株式会社 | Terminal device and program |
-
2013
- 2013-02-18 JP JP2013029345A patent/JP2014157578A/en active Pending
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016062397A (en) * | 2014-09-19 | 2016-04-25 | ヤフー株式会社 | Terminal device, information processing method, and information processing program |
EP3007091A1 (en) | 2014-10-10 | 2016-04-13 | Fujitsu Limited | Authentication information managing method, storage medium, and information processing device |
KR101604552B1 (en) | 2014-10-27 | 2016-03-18 | 한국과학기술원 | Electronic device, and method thereof |
KR101663909B1 (en) * | 2015-09-01 | 2016-10-07 | 한국과학기술원 | Electronic device, and method thereof |
CN105306821A (en) * | 2015-10-20 | 2016-02-03 | 广东欧珀移动通信有限公司 | Method and device for opening camera function of mobile terminal |
JP2019504566A (en) * | 2016-01-06 | 2019-02-14 | アリババ グループ ホウルディング リミテッド | Information image display method and apparatus |
CN109241714A (en) * | 2016-01-06 | 2019-01-18 | 阿里巴巴集团控股有限公司 | A kind of information image display methods and device |
JP2019532436A (en) * | 2016-10-14 | 2019-11-07 | ホアウェイ・テクノロジーズ・カンパニー・リミテッド | Screen display method and terminal |
US11442600B2 (en) | 2016-10-14 | 2022-09-13 | Huawei Technologies Co., Ltd. | Screen display method and terminal |
JP2019049870A (en) * | 2017-09-11 | 2019-03-28 | 日本電気株式会社 | Similar program specifying device, similar program specifying method, and control program |
JP2019101814A (en) * | 2017-12-04 | 2019-06-24 | アルプスアルパイン株式会社 | Input control device, input device, operated device, and program |
JP7037344B2 (en) | 2017-12-04 | 2022-03-16 | アルプスアルパイン株式会社 | Input control device, input device, operation target device, and program |
JP7468580B2 (en) | 2020-09-11 | 2024-04-16 | カシオ計算機株式会社 | Terminal device and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11269575B2 (en) | Devices, methods, and graphical user interfaces for wireless pairing with peripheral devices and displaying status information concerning the peripheral devices | |
US11861159B2 (en) | Devices, methods, and graphical user interfaces for selecting and interacting with different device modes | |
CN105335001B (en) | Electronic device having curved display and method for controlling the same | |
JP4801503B2 (en) | Item selection device, computer program and recording medium therefor, and information processing device | |
JP2014157578A (en) | Touch panel device, control method of touch panel device, and program | |
US8839155B2 (en) | Accelerated scrolling for a multifunction device | |
EP2555497B1 (en) | Controlling responsiveness to user inputs | |
US9483175B2 (en) | Device, method, and graphical user interface for navigating through a hierarchy | |
US20110175826A1 (en) | Automatically Displaying and Hiding an On-screen Keyboard | |
US20110163966A1 (en) | Apparatus and Method Having Multiple Application Display Modes Including Mode with Display Resolution of Another Apparatus | |
US20110242138A1 (en) | Device, Method, and Graphical User Interface with Concurrent Virtual Keyboards | |
US9459704B2 (en) | Method and apparatus for providing one-handed user interface in mobile device having touch screen | |
US20120032891A1 (en) | Device, Method, and Graphical User Interface with Enhanced Touch Targeting | |
US20110074830A1 (en) | Device, Method, and Graphical User Interface Using Mid-Drag Gestures | |
US20110179372A1 (en) | Automatic Keyboard Layout Determination | |
US20120030624A1 (en) | Device, Method, and Graphical User Interface for Displaying Menus | |
US20140331146A1 (en) | User interface apparatus and associated methods | |
US9703418B2 (en) | Mobile terminal and display control method | |
US20110074695A1 (en) | Device, Method, and Graphical User Interface Using Mid-Drag Gestures | |
JP2012242851A (en) | Portable electronic device having touch screen and control method | |
US20110074696A1 (en) | Device, Method, and Graphical User Interface Using Mid-Drag Gestures | |
TWI659353B (en) | Electronic apparatus and method for operating thereof | |
JP5173001B2 (en) | Information processing apparatus, screen display method, control program, and recording medium | |
CN108983960A (en) | Display methods, intelligent terminal and the storage medium of terminal device |