JP4728019B2 - Button control apparatus and method, and program - Google Patents

Button control apparatus and method, and program Download PDF

Info

Publication number
JP4728019B2
JP4728019B2 JP2005069794A JP2005069794A JP4728019B2 JP 4728019 B2 JP4728019 B2 JP 4728019B2 JP 2005069794 A JP2005069794 A JP 2005069794A JP 2005069794 A JP2005069794 A JP 2005069794A JP 4728019 B2 JP4728019 B2 JP 4728019B2
Authority
JP
Japan
Prior art keywords
drag
button
button control
drag operation
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2005069794A
Other languages
Japanese (ja)
Other versions
JP2006252322A5 (en
JP2006252322A (en
Inventor
康洋 海老原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Electronics Inc
Original Assignee
Canon Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Electronics Inc filed Critical Canon Electronics Inc
Priority to JP2005069794A priority Critical patent/JP4728019B2/en
Publication of JP2006252322A publication Critical patent/JP2006252322A/en
Publication of JP2006252322A5 publication Critical patent/JP2006252322A5/ja
Application granted granted Critical
Publication of JP4728019B2 publication Critical patent/JP4728019B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

本発明は、ボタン制御装置及び方法、並びにプログラムに関し、特に、グラフィカルユーザインタフェースとしてのボタンコントロールによる機能の選択技術に関する。 The present invention, the button control apparatus and method, and a program, for the selection techniques function by button control as a graphical user interface.

従来、グラフィカルユーザインタフェースの1つとして、ボタンコントロールが知られている(例えば、非特許文献1参照)。このボタンコントロールによる機能の選択処理は、例えばマウスカーソルをボタンコントロール上に移動し、クリックする、又は方向キー(矢印キー)でフォーカスをボタンコントロール上に移動して「Enter」キー等の所定のキーを操作する、又はスタイラスペンや指等でタッチする等の操作に応じて実行されている。   Conventionally, a button control is known as one of graphical user interfaces (see, for example, Non-Patent Document 1). The function selection processing by the button control is performed by, for example, moving the mouse cursor on the button control and clicking or moving the focus on the button control with a direction key (arrow key) and pressing a predetermined key such as an “Enter” key. Is performed in response to an operation such as touching with a stylus pen or a finger.

なお、マウスを利用する場合には、一旦マウスボタンを押下した状態のまま、ボタンコントロールの領域外にカーソルを移動した後にマウスボタンの押上を行うことで、当該ボタンコントロールによる機能の選択をキャンセルすることができる。
「プログラミングWindows(登録商標) 第5版(上)」、株式会社アスキー、ISBN:4756136001
When using a mouse, the function selection by the button control is canceled by moving the cursor outside the button control area while holding down the mouse button and then pushing the mouse button up. be able to.
"Programming Windows (registered trademark) 5th edition (top)", ASCII, Inc., ISBN: 4751366001

しかしながら、従来のボタンコントロールによる機能の選択処理は、上記のように単純な操作に応じて実行されるため、意図していないボタンコントロールが誤って選択されてしまう場合があった。このボタンコントロールの誤操作は、マウスや矢印キー等の操作に慣れていない初心者が操作する場合、タッチパネルを有する携帯情報端末など機器がぶれてしまう状態の場合、この携帯情報端末を鞄などに入れて持ち運ぶ場合、タッチパネルの調整が不十分で実際のタッチ位置と機器が認識したタッチ位置とがずれている場合等に生じやすい。   However, since the function selection processing by the conventional button control is executed according to a simple operation as described above, an unintended button control may be erroneously selected. This button control operation error can be caused by a beginner who is not familiar with the operation of the mouse or arrow keys, or when a device such as a portable information terminal with a touch panel is shaken. In the case of carrying, this is likely to occur when the touch panel is not sufficiently adjusted and the actual touch position deviates from the touch position recognized by the device.

そこで、前述のようなボタンコントロールによる機能の選択操作がなされた後に、所定の確認操作がなされることを条件に当該ボタンコントロールによる機能の選択処理を実行する、又はボタンコントロールを複数回クリックしたり、ボタンコントロールと他のコントロールを同時に操作したりすることにより、当該ボタンコントロールによる機能の選択処理を実行するようにグラフィカルユーザインタフェースを構成するなどして、ボタンコントロールの誤操作を防止している。   Therefore, after the function selection operation by the button control as described above is performed, the function selection process by the button control is executed on condition that a predetermined confirmation operation is performed, or the button control is clicked a plurality of times. By operating the button control and other controls at the same time, a graphical user interface is configured to execute a function selection process based on the button control, thereby preventing erroneous operation of the button control.

しかし、操作数を増やすことで操作時間が長くなる、複数のコントロールを構成すると表示領域を広く必要としてしまうといった問題がある。また、携帯情報端末など画面が狭く一画面内に表示できる情報が限られているときには後者の策を実施することも難しくなる。また、従来のボタンコントロール選択のキャンセル方法では、マウスボタンの押上を行う前にマウスカーソルを移動させなければならないため、利用者は注意してマウスボタンを操作する必要がある。   However, there are problems that the operation time becomes longer by increasing the number of operations, and that a plurality of controls constitute a large display area. Also, when the information such as a portable information terminal is narrow and the information that can be displayed in one screen is limited, it is difficult to implement the latter measure. Further, in the conventional method for canceling button control selection, the mouse cursor must be moved before the mouse button is pushed up, so the user needs to operate the mouse button with care.

本発明は、このような背景の下になされたもので、簡単な構成・操作、狭い表示部でボタンコントロールの誤操作を低減し得るボタン制御装置、制御方法、及びプログラムを提供することを目的とする。   The present invention has been made under such a background, and an object thereof is to provide a button control device, a control method, and a program that can reduce the erroneous operation of the button control with a simple configuration and operation and a narrow display unit. To do.

上記課題を解決するため、請求項1記載のボタン制御装置は、グラフィカルユーザインタフェース画面上にボタンコントロールを表示する表示制御手段と、前記表示制御手段により表示された前記ボタンコントロールに対してドラッグ操作を行なうドラッグ操作手段と、前記ドラッグ操作手段により前記ボタンコントロールに対して行なわれるドラッグ操作の方向と距離を検出する検出手段と、前記検出手段により検出されたドラッグの方向が所定方向であり、ドラッグの距離が所定値以上の場合に当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定する確定手段と、を有し、前記確定手段は、前記検出手段により検出されたドラッグの方向が所定方向の場合、前記検出手段により検出されたドラッグの距離が前記所定値に達するまで、該所定値に対する前記検出手段により検出されたドラッグの距離の割合を算出して前記表示制御手段に送信し、前記表示制御手段は、前記確定手段から受信した割合に応じて該ボタンコントロールの表示態様を変化させることを特徴とする。
請求項6記載のボタン制御装置は、グラフィカルユーザインタフェース画面上にボタンコントロールを表示する表示制御手段と、前記表示制御手段により表示された前記ボタンコントロールに対してドラッグ操作を行なうドラッグ操作手段と、前記ドラッグ操作手段により前記ボタンコントロールに対して行なわれるドラッグ操作の方向と速さを検出する検出手段と、前記検出手段により検出されたドラッグの方向が所定方向であり、ドラッグの速さが所定値以上の場合に当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定する確定手段と、を有し、前記確定手段は、前記検出手段により検出されたドラッグの方向が所定方向の場合、前記検出手段により検出されたドラッグの距離が前記所定値に達するまで、該所定値に対する前記検出手段により検出されたドラッグの速さの割合を算出して前記表示制御手段に送信し、前記表示制御手段は、前記確定手段から受信した割合に応じて該ボタンコントロールの表示態様を変化させることを特徴とする。
請求項7記載のボタン制御方法は、グラフィカルユーザインタフェース画面上にボタンコントロールを表示する表示制御工程と、前記表示制御工程により表示された前記ボタンコントロールに対してドラッグ操作を行なうドラッグ操作工程と、前記ドラッグ操作工程により前記ボタンコントロールに対して行なわれるドラッグ操作の方向と距離を検出する検出工程と、前記検出工程により検出されたドラッグの方向が所定方向であり、ドラッグの距離が所定値以上の場合に当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定する確定工程と、を有し、前記確定工程は、前記検出工程により検出されたドラッグの方向が所定方向の場合、前記検出工程により検出されたドラッグの距離が前記所定値に達するまで、該所定値に対する前記検出工程により検出されたドラッグの距離の割合を算出して前記表示制御工程に送信し、前記表示制御工程は、前記確定工程から受信した割合に応じて該ボタンコントロールの表示態様を変化させることを特徴とする。
請求項8記載のプログラムは、ボタン制御方法をコンピュータに実行させるプログラムであって、前記ボタン制御方法は、グラフィカルユーザインタフェース画面上にボタンコントロールを表示する表示制御工程と、前記表示制御工程により表示された前記ボタンコントロールに対してドラッグ操作を行なうドラッグ操作工程と、前記ドラッグ操作工程により前記ボタンコントロールに対して行なわれるドラッグ操作の方向と距離を検出する検出工程と、前記検出工程により検出されたドラッグの方向が所定方向であり、ドラッグの距離が所定値以上の場合に当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定する確定工程と、を有し、前記確定工程は、前記検出工程により検出されたドラッグの方向が所定方向の場合、前記検出工程により検出されたドラッグの距離が前記所定値に達するまで、該所定値に対する前記検出工程により検出されたドラッグの距離の割合を算出して前記表示制御工程に送信し、前記表示制御工程は、前記確定工程から受信した割合に応じて該ボタンコントロールの表示態様を変化させることを特徴とする。
In order to solve the above problems, the button control apparatus comprising: a display control means for displaying a button control on the graphical user interface screen, the drag operation on the button control displayed by the display control means A drag operation means for performing a drag operation, a detection means for detecting a direction and a distance of the drag operation performed on the button control by the drag operation means, and a drag direction detected by the detection means is a predetermined direction. Confirming function selection by the button control related to the drag operation when the distance is equal to or greater than a predetermined value, and the confirming means has a drag direction detected by the detecting means in a predetermined direction. case, the distance dragged detected by the detection means the predetermined value Reach, by calculating the ratio of the distance of the drag, which is detected by said detecting means with respect to the predetermined value and transmitted to the display control means, wherein the display control unit, the button control according to the ratio received from said determining means The display mode is changed.
The button control device according to claim 6 is a display control means for displaying a button control on a graphical user interface screen, a drag operation means for performing a drag operation on the button control displayed by the display control means, Detection means for detecting the direction and speed of the drag operation performed on the button control by the drag operation means, the direction of the drag detected by the detection means is a predetermined direction, and the drag speed is equal to or higher than a predetermined value In this case, a confirming means for confirming selection of a function by button control related to the drag operation is provided, and the confirming means, when the direction of the drag detected by the detecting means is a predetermined direction, by the detecting means up to a distance of the detected drag it reaches the predetermined value, against the predetermined value The ratio of the drag speed detected by the detection means is calculated and transmitted to the display control means, and the display control means changes the display mode of the button control according to the ratio received from the confirmation means. It is characterized by making it.
The button control method according to claim 7 is a display control step of displaying a button control on a graphical user interface screen, a drag operation step of performing a drag operation on the button control displayed by the display control step, A detection step of detecting a direction and a distance of a drag operation performed on the button control by a drag operation step, and a drag direction detected by the detection step is a predetermined direction, and the drag distance is a predetermined value or more A confirmation step for confirming selection of a function by button control related to the drag operation, and the confirmation step is detected by the detection step when the direction of the drag detected by the detection step is a predetermined direction. and distance of dragging reaches the predetermined value, against the predetermined value The ratio of the distance of the drag detected by the detection step is calculated and transmitted to the display control step, and the display control step changes the display mode of the button control according to the ratio received from the determination step. It is characterized by that.
The program according to claim 8 is a program for causing a computer to execute a button control method, wherein the button control method is displayed by a display control step of displaying a button control on a graphical user interface screen, and the display control step. A drag operation step for performing a drag operation on the button control; a detection step for detecting a direction and a distance of the drag operation performed on the button control by the drag operation step; and a drag detected by the detection step And confirming the selection of the function by the button control related to the drag operation when the drag distance is a predetermined value or more, and the confirming step is detected by the detecting step If the direction of been dragged in a predetermined direction, before Up to a distance of the detected drag by detection step reaches a predetermined value, and calculates the ratio of the distance of the drag, which is detected by the detection step for the predetermined value is transmitted to the display control step, the display control step The display mode of the button control is changed in accordance with the ratio received from the confirmation step .

本発明によれば、ボタンコントロールを所定方向に所定距離だけドラッグすること等により、当該ボタンコントロールによる機能の選択を確定するようにしたので、簡単な構成・操作、狭い表示部でボタンコントロールの誤操作を低減し得According to the present invention, since the selection of the function by the button control is confirmed by dragging the button control in a predetermined direction by a predetermined distance, the button control is erroneously operated with a simple configuration / operation and a narrow display unit. that give reduced.

以下、本発明を実施するための最良の形態を図面に基づいて説明する。   Hereinafter, the best mode for carrying out the present invention will be described with reference to the drawings.

[第1の実施の形態]
図1は、本発明のボタン制御装置を適用した携帯端末のハードウエアの概略構成を示すブロック図である。
[First Embodiment]
FIG. 1 is a block diagram showing a schematic configuration of hardware of a portable terminal to which a button control device of the present invention is applied.

本携帯端末は、CPU1を中核として情報処理等の所定の処理を行なうものであり、このCPU1には、ROM2、RAM3、フラッシュメモリ4、表示・操作部6が接続されている。また、表示・操作部6は、液晶ディスプレイ62とタッチパネル61を有し、このタッチパネル61は液晶ディスプレイ62上に積層されている。また、タッチパネル61へのスタイラスペン7の接触で入力操作が行われる。   The portable terminal performs predetermined processing such as information processing with the CPU 1 as a core. A ROM 2, a RAM 3, a flash memory 4, and a display / operation unit 6 are connected to the CPU 1. The display / operation unit 6 includes a liquid crystal display 62 and a touch panel 61, and the touch panel 61 is stacked on the liquid crystal display 62. Further, an input operation is performed by touching the touch panel 61 with the stylus pen 7.

ROM2には、CPU1により実行される各種のプログラムが格納されている。このプログラムには、後述する図4,5,7,9のフローチャートに対応するプログラム、及び、外部処理部25(図2参照)に係るプログラムが含まれている。CPU1は、これらプログラムを実行する際、RAM3をワークエリア等として利用する。フラッシュメモリ4には、CPU1により処理されたデータ等が格納される。   The ROM 2 stores various programs executed by the CPU 1. This program includes a program corresponding to the flowcharts of FIGS. 4, 5, 7, and 9 described later, and a program related to the external processing unit 25 (see FIG. 2). The CPU 1 uses the RAM 3 as a work area or the like when executing these programs. The flash memory 4 stores data processed by the CPU 1.

また、CPU1は、液晶ディスプレイ62上に各種のGUI(Graphical User Interface)画面を表示する。タッチパネル61は、当該GUI画面がスタイラスペン7等でタッチされた場合のタッチ位置座標を検知してCPU1に通知する。なお、GUI画面には、ボタンコントロール、すなわち、ボタンコントロールを示すアイコンも表示される。   In addition, the CPU 1 displays various GUI (Graphical User Interface) screens on the liquid crystal display 62. The touch panel 61 detects the touch position coordinates when the GUI screen is touched with the stylus pen 7 or the like, and notifies the CPU 1 of the touch position coordinates. Note that button controls, that is, icons indicating button controls are also displayed on the GUI screen.

図2は、上記携帯端末の機能ブロック図である。入力操作検知部21は、図1に示したタッチパネル61の感圧部に相当し、スタイラスペン7等でタッチされたGUI画面上の位置座標を検知する。ドラッグ操作監視部22は、GUI画面上のボタンコントロールに対してドラッグ操作が実行されるのを監視しており、そのドラッグ開始位置をRAM3上のドラッグ開始位置記憶領域32に格納する。なお、ドラッグ操作監視部22は、本実施の形態では、プログラムにより構成されている。   FIG. 2 is a functional block diagram of the portable terminal. The input operation detection unit 21 corresponds to the pressure-sensitive unit of the touch panel 61 shown in FIG. 1 and detects the position coordinates on the GUI screen touched with the stylus pen 7 or the like. The drag operation monitoring unit 22 monitors whether a drag operation is performed on the button control on the GUI screen, and stores the drag start position in the drag start position storage area 32 on the RAM 3. Note that the drag operation monitoring unit 22 is configured by a program in the present embodiment.

また、RAM3上のボタンコントロール位置記憶領域31には、GUI画面上のボタンコントロールの表示位置の情報が格納されており、ドラッグ操作監視部22は、このボタンコントロール位置記憶領域31の情報と入力操作検知部21からのタッチ位置情報とに基づいて、ボタンコントロールがタッチされたか否かを判別する。また、ドラッグ操作監視部22は、入力操作検知部21にて順次検知されるタッチ位置と上記のドラッグ開始位置とに基づいてドラッグ方向とドラッグ距離を算出し、そのドラッグ方向とドラッグ距離をボタン選択判断部23に通知する。   Further, the button control position storage area 31 on the RAM 3 stores information on the display position of the button control on the GUI screen, and the drag operation monitoring unit 22 receives the information on the button control position storage area 31 and the input operation. Based on the touch position information from the detection unit 21, it is determined whether or not the button control is touched. Further, the drag operation monitoring unit 22 calculates the drag direction and the drag distance based on the touch position sequentially detected by the input operation detection unit 21 and the drag start position, and selects the drag direction and the drag distance as a button. The determination unit 23 is notified.

ボタン選択判断部23は、プログラムにより構成され、ボタンコントロールに対するドラッグ操作の態様に基づいて、当該ボタンコントロールによる機能を選択処理するか否かを判断する。   The button selection determining unit 23 is configured by a program, and determines whether or not to select a function based on the button control based on a drag operation mode with respect to the button control.

すなわち、ボタン選択判断部23は、従来のように或るボタンコントロールに対してタッチ操作がなされた時点で当該ボタンコントロールによる機能の選択を確定するのではなく、或るボタンコントロールに対して所定方向に所定距離だけドラッグ操作されることを条件として、当該ボタンコントロールによる機能の選択を確定するようにしている。なお、ボタン選択判断部23は、ボタンコントロールによる機能の選択を確定した場合は、その旨を外部処理部25に通知する。   That is, the button selection determination unit 23 does not determine the selection of the function by the button control at the time when the touch operation is performed on the button control as in the conventional case, but in a predetermined direction with respect to the button control. On the condition that the button is dragged by a predetermined distance, the selection of the function by the button control is confirmed. In addition, when the selection of the function by the button control is confirmed, the button selection determination unit 23 notifies the external processing unit 25 to that effect.

この外部処理部25は、GUI画面上に表示されるボタンコントロールに係る各処理を行なうプログラムの集合体である。   The external processing unit 25 is a collection of programs that perform each process related to button control displayed on the GUI screen.

ボタン選択判断部23は、RAM3上のボタン完全押下閾値記憶領域33に記憶された閾値とボタン押下度記憶領域34に記憶されたボタンコントロールの押下度に基づいて当該ボタンコントロールによる機能の選択を確定する。なお、ボタン完全押下閾値記憶領域33に記憶された閾値は、ドラッグ距離に係る閾値であり、ドラッグ方向と共に予め設定されたものである。また、ボタン押下度記憶領域34に記憶されたボタンコントロールの押下度は、上記の閾値に対するドラッグ方向及びドラッグ距離の割合を示すものであり、ボタン選択判断部23により算出されて記憶されると共に表示制御部24に通知されるものである。なお、ボタンコントロールの押下度の初期値は、全く押下されていないことを示す「0」となっている。   The button selection determining unit 23 determines the function selection by the button control based on the threshold value stored in the button complete pressing threshold storage area 33 on the RAM 3 and the button control pressing degree stored in the button pressing degree storage area 34. To do. The threshold value stored in the button complete pressing threshold storage area 33 is a threshold value related to the drag distance, and is set in advance together with the drag direction. Further, the degree of pressing of the button control stored in the button pressing degree storage area 34 indicates the ratio of the drag direction and the drag distance to the threshold value, and is calculated and stored by the button selection determination unit 23 and displayed. This is notified to the control unit 24. Note that the initial value of the degree of pressing the button control is “0” indicating that the button control is not pressed at all.

表示制御部24は、プログラムにより構成され、ボタン選択判断部23から通知されたボタンコントロールの押下度に応じて、液晶ディスプレイ62上の当該ボタンコントロールの表示態様を変更する。すなわち、本実施の形態では、ドラッグ方向としてはGUI画面の下方向と規定しており、図3、図6に示したように、ボタンコントロールB(ここではOKボタンB)の形状は、立体的となっている。そこで、表示制御部24は、ボタン選択判断部23から通知されたボタンコントロールの押下度が、例えば50%であれば、図3の左から3番目のようにキートップ部(ボタン部)以外のストローク部分が50%だけ沈み込んだ態様でOKボタンBを表示し、100%であれば、図3の右から2番目のようにキートップ部以外のストローク部分が100%沈み込んだ態様でOKボタンBを表示する。   The display control unit 24 is configured by a program, and changes the display mode of the button control on the liquid crystal display 62 according to the degree of pressing of the button control notified from the button selection determination unit 23. That is, in this embodiment, the drag direction is defined as the downward direction of the GUI screen, and the shape of the button control B (here, the OK button B) is three-dimensional as shown in FIGS. It has become. Therefore, if the degree of pressing of the button control notified from the button selection determination unit 23 is 50%, for example, the display control unit 24 is the third one from the left in FIG. 3 except for the key top part (button part). The OK button B is displayed in a state where the stroke part is depressed by 50%, and if it is 100%, the stroke part other than the key top part is depressed 100% as in the second from the right in FIG. Button B is displayed.

次に、ドラッグ操作監視部22による接触(タッチ)監視処理の概要を、図4のフローチャートに基づいて説明する。   Next, an outline of contact (touch) monitoring processing by the drag operation monitoring unit 22 will be described based on the flowchart of FIG.

ドラッグ操作監視部22は、入力操作検知部21から受け取った検知情報、すなわち、タッチの有無、タッチ位置座標の情報に基づいて(ステップS01)、GUI画面上のボタンコントロールがタッチされたか否かを判別する(ステップS02)。この場合、ドラッグ操作監視部22は、入力操作検知部21から受け取ったタッチ位置座標がボタンコントロール記憶領域31に記憶されているボタンコントロールの座標内に収まっているか否かにより、ボタンコントロールがタッチされたか否かを判別する。その結果、ボタンコントロールがタッチされていなければ、ステップS01に戻る。   The drag operation monitoring unit 22 determines whether or not the button control on the GUI screen is touched based on the detection information received from the input operation detection unit 21, that is, the presence / absence of touch and the information on the touch position coordinates (step S01). A determination is made (step S02). In this case, the drag operation monitoring unit 22 is touched by the button control depending on whether or not the touch position coordinates received from the input operation detection unit 21 are within the button control coordinates stored in the button control storage area 31. It is determined whether or not. As a result, if the button control is not touched, the process returns to step S01.

一方、ボタンコントロールがタッチされた場合は、ドラッグ操作監視部22は、そのタッチ位置座標をドラッグ開始位置としてドラッグ開始位置記憶領域32に記憶し(ステップS03)、後述のドラッグ監視処理を行なう(ステップS04)。   On the other hand, when the button control is touched, the drag operation monitoring unit 22 stores the touch position coordinates as the drag start position in the drag start position storage area 32 (step S03), and performs a drag monitoring process described later (step S03). S04).

次に、図4のステップS04におけるドラッグ監視処理の詳細を、図5のフローチャートに基づいて説明する。   Next, details of the drag monitoring process in step S04 of FIG. 4 will be described based on the flowchart of FIG.

ドラッグ操作監視部22は、入力操作検知部21から受け取った検知情報、すなわち、タッチの有無、タッチ位置座標の情報に基づいて(ステップS11)、現在GUI画面がタッチされているか否かを判別する(ステップS12)。この場合、ドラッグ操作監視部22は、図4のステップS02の処理とは異なり、GUI画面がタッチされているか否かを判別するだけであり、ボタンコントロールがタッチされているか否かは考慮しない。従って、ボタンコントロールがタッチされていなくてもGUI画面がタッチされていれば、ドラッグ操作が続けられているものと見做されることとなる。   The drag operation monitoring unit 22 determines whether or not the GUI screen is currently touched based on the detection information received from the input operation detection unit 21, that is, the presence / absence of touch and the information on the touch position coordinates (step S11). (Step S12). In this case, unlike the process of step S02 of FIG. 4, the drag operation monitoring unit 22 only determines whether or not the GUI screen is touched, and does not consider whether or not the button control is touched. Therefore, even if the button control is not touched, if the GUI screen is touched, it is considered that the drag operation is continued.

ドラッグ操作監視部22は、ドラッグ操作が続けられている場合は、ドラッグ開始位置記憶領域32に記憶されたドラッグ操作の開始位置と、現在のドラッグ操作位置とに基づいてドラッグ方向とドラッグ距離を算出し、それら情報をボタン選択判断部23に通知し(ステップS13)、ステップS11に戻る。   When the drag operation is continued, the drag operation monitoring unit 22 calculates the drag direction and the drag distance based on the start position of the drag operation stored in the drag start position storage area 32 and the current drag operation position. Then, the information is notified to the button selection determination unit 23 (step S13), and the process returns to step S11.

一方、ドラッグ操作が続けられていない場合は、ドラッグ操作監視部22は、ボタン選択判断部23に、ドラッグ距離として「0」を通知することにより、ドラッグ操作が終了したことを通知して(ステップS14)、図4の接触監視処理に戻る(ステップS15)。   On the other hand, when the drag operation is not continued, the drag operation monitoring unit 22 notifies the button selection determining unit 23 that the drag operation has ended by notifying the button selection determining unit 23 of “0” as a drag distance (step). S14), the process returns to the contact monitoring process of FIG. 4 (step S15).

このように、ドラッグ操作監視部22は、GUI画面上のボタンコントロールに対するドラッグ操作の状況を監視し、ボタン選択判断部23にドラッグ方向とドラッグ距離を通知する。   As described above, the drag operation monitoring unit 22 monitors the status of the drag operation on the button control on the GUI screen, and notifies the button selection determination unit 23 of the drag direction and the drag distance.

次に、ボタン選択判断部23によるボタン選択判断処理を、図7のフローチャートに基づいて説明する。なお、図7のフローチャートにおけるステップS22,S23の処理は、ドラッグ操作監視部22からドラッグ距離「0」、すなわちドラッグ操作の終了が通知された場合には実行されない処理である。   Next, button selection determination processing by the button selection determination unit 23 will be described based on the flowchart of FIG. Note that the processes in steps S22 and S23 in the flowchart of FIG. 7 are processes that are not executed when the drag operation monitoring unit 22 notifies the drag distance “0”, that is, the end of the drag operation.

ボタン選択判断部23は、ドラッグ操作監視部22から通知されたドラッグ方向とドラッグ距離を用いて、ボタンコントロールの押下の度合いを算出する(ステップS21,S22)。   The button selection determining unit 23 calculates the degree of pressing of the button control using the drag direction and the drag distance notified from the drag operation monitoring unit 22 (steps S21 and S22).

この場合、ボタン選択判断部23は、ドラッグ操作監視部22から通知されたドラッグ方向がGUI画面の下の方向、すなわち、ボタンコントロールを押下する方向である場合に、ボタン完全押下閾値記憶領域33に記憶されている閾値に対するドラッグ操作監視部22から通知されたドラッグ距離の割合を算出することにより、ボタンコントロールの押下の度合いを算出する。なお、ボタン完全押下閾値記憶領域33に記憶されている閾値は、図6に示したように、ボタンコントロールが全く押下されていない状態と完全に押下された状態との間の仮想的な距離、すなわち、仮想的な最大の押下ストローク量に相当するものである。   In this case, when the drag direction notified from the drag operation monitoring unit 22 is the lower direction of the GUI screen, that is, the direction in which the button control is pressed, the button selection determination unit 23 stores the button complete press threshold storage area 33. The degree of pressing of the button control is calculated by calculating the ratio of the drag distance notified from the drag operation monitoring unit 22 to the stored threshold value. The threshold value stored in the button complete pressing threshold storage area 33 is a virtual distance between a state where the button control is not pressed at all and a state where the button control is completely pressed, as shown in FIG. That is, it corresponds to the virtual maximum pressing stroke amount.

次に、ボタン選択判断部23は、ステップS22で算出された押下の度合いを表示制御部24に通知することにより、現在ドラッグ操作されているボタンコントロールの表示態様を変更させる(ステップ23)。この場合、表示制御部24は、図3に示したように、上記押下の度合いに応じて、当該ボタンコントロールBのキートップ部分(図3の台形の部分)が下方向に移動し、ストローク部分(図3の台形の下の矩形の部分)が狭くなるようにする。すなわち、仮想的なボタンであるボタンコントロールBは、下方向にドラッグすることにより、実際に押下されて基台部分に沈み込んでいくかのように表示される。   Next, the button selection determination unit 23 changes the display mode of the button control currently being dragged by notifying the display control unit 24 of the degree of pressing calculated in step S22 (step 23). In this case, as shown in FIG. 3, the display control unit 24 moves the key top portion (the trapezoidal portion in FIG. 3) of the button control B downward according to the degree of pressing, and the stroke portion. (A rectangular portion under the trapezoid in FIG. 3) is made narrower. That is, the button control B, which is a virtual button, is displayed as if it is actually depressed and sinks into the base portion by dragging downward.

次に、ボタン選択判断部23は、ステップS21でドラッグ操作監視部22から通知されたドラッグ距離が「0」であるか否かを判別することにより、ドラッグ操作が終了しているか否かを判別する(ステップS24)。その結果、ドラッグ操作が終了していない場合は、ボタン選択判断部23は、ステップS22にて算出した押下の度合いをボタン押下度記憶領域34に記憶し(ステップS25)、ステップS21に戻る。   Next, the button selection determining unit 23 determines whether or not the drag operation has ended by determining whether or not the drag distance notified from the drag operation monitoring unit 22 in step S21 is “0”. (Step S24). As a result, if the drag operation has not ended, the button selection determination unit 23 stores the degree of pressing calculated in step S22 in the button pressing degree storage area 34 (step S25), and returns to step S21.

一方、ドラッグ操作が終了している場合は、ボタン選択判断部23は、ボタン押下度記憶領域34に記憶されている押下の度合い、すなわちドラッグ操作が終了した時点におけるドラッグ操作に係るボタンコントロールBの押下の度合いが100%であるか否かを判別する(ステップS26)。その結果、100%に達していれば、ボタン選択判断部23は、当該ドラッグ操作に係るボタンコントロールによる機能が選択されたことを外部処理部25に通知することにより、外部処理部25により当該ボタンコントロールに対応する処理が実行されるようにする(ステップS27)。   On the other hand, when the drag operation has ended, the button selection determination unit 23 determines the degree of press stored in the button press degree storage area 34, that is, the button control B related to the drag operation when the drag operation ends. It is determined whether or not the degree of pressing is 100% (step S26). As a result, if it reaches 100%, the button selection determination unit 23 notifies the external processing unit 25 that the function by the button control related to the drag operation has been selected, so that the button is selected by the external processing unit 25. A process corresponding to the control is executed (step S27).

なお、ドラッグ操作を継続中にタッチ位置がドラッグ開始点に戻った場合も、ドラッグ距離は「0」となるが、ドラッグ距離が「0」の場合は、上記のようにステップS22〜S25をスキップしてステップS26に進むので、このステップS26にて押下の度合いが100%であると判別されることはなく、ドラッグ操作を継続中にドラッグ開始点を再度タッチしたとしても、ボタンコントロールが完全に押下されたと判断されることはない。また、第1の実施の形態では、ボタンコントロールBの押下の度合いが100%に達した後に当該ボタンコントロールBを下方向にドラッグし続けても、その表示態様は、押下の度合いが100%の場合の表示態様のまま変化しないようにしている。   If the touch position returns to the drag start point while continuing the drag operation, the drag distance is “0”, but if the drag distance is “0”, steps S22 to S25 are skipped as described above. In step S26, the degree of pressing is not determined to be 100%. Even if the drag start point is touched again while the drag operation is continued, the button control is completely performed. It is not determined that the button has been pressed. Further, in the first embodiment, even when the button control B is continuously dragged downward after the degree of pressing of the button control B reaches 100%, the display mode is that the degree of pressing is 100%. The display mode of the case remains unchanged.

次に、ボタン選択判断部23は、当該ボタンコントロールの表示形態を初期の押上状態に戻すように表示制御部24に指示して(ステップS28)、ステップS21に戻る。また、ボタン選択判断部23は、ステップS26にて、ドラッグ操作が終了した時点におけるドラッグ操作に係るボタンコントロールBの押下の度合いが100%に達していないと判別した場合(図3の右端のキャンセル時参照)は、ステップS27,S28の処理を行なうことなく、ステップS21に戻る。   Next, the button selection determination unit 23 instructs the display control unit 24 to return the button control display form to the initial push-up state (step S28), and returns to step S21. Further, when the button selection determining unit 23 determines in step S26 that the degree of pressing of the button control B related to the drag operation at the time when the drag operation is finished does not reach 100% (cancel the right end of FIG. 3). Return to step S21 without performing steps S27 and S28.

このようにして、第1の実施の形態では、ボタンコントロールをその最大ストローク分だけドラッグ操作することにより、当該ボタンコントロールによる機能の選択処理がなされるので、簡単な構成・操作、狭い表示部でボタンコントロールの誤操作を低減することが可能となる。この場合、ボタンコントロールによる機能の選択の確定状況は、ボタンコントロールのストローク部分が完全に消えることで判断することができるので、操作性も良好となる。また、ドラッグ操作を中断するだけで、ボタンコントロールによる機能の選択操作を簡単にキャンセルすることが可能となる。   In this way, in the first embodiment, the button control is dragged by the maximum stroke, so that the function selection process is performed by the button control. It is possible to reduce erroneous button control operations. In this case, since the final state of selection of the function by the button control can be determined by the disappearance of the stroke part of the button control, the operability is also improved. Further, it is possible to easily cancel the function selection operation by the button control only by interrupting the drag operation.

なお、規定のドラッグ方向は、必ずしも下方向に限定する必要はなく、例えば横方向等の任意の方向を規定のドラッグ方向とすることも可能である。また、ボタンコントロールによる機能の選択を確定するための上記の閾値を、最大ストローク量とすることなく、所定のストローク量とすることも可能である。この場合、閾値を最大ストローク量よりも大きな値にすると、ボタンコントロールを選択するためにはドラッグ距離を長くする必要があるため、ボタンコントロールの誤操作をより一層低減することができる。この場合は、重要度が高いボタンコントロールや使用頻度の低いボタンコントロールは、閾値を大きくすることにより、ボタンコントロールの誤操作の低減を重視し、重要度が低いボタンコントロールや使用頻度の高いボタンコントロールは、閾値を小さくすることにより、操作速度を重視することが考えられる。また、GUI画面が狭くドラッグ距離を大きく採れない場合は、閾値を小さくすることも考えられる。   Note that the prescribed drag direction is not necessarily limited to the downward direction, and an arbitrary direction such as a horizontal direction can be set as the prescribed drag direction. In addition, the above-described threshold value for confirming selection of a function by button control can be set to a predetermined stroke amount without using the maximum stroke amount. In this case, if the threshold value is set to a value larger than the maximum stroke amount, it is necessary to increase the drag distance in order to select the button control, so that erroneous operation of the button control can be further reduced. In this case, button control with high importance and low-use button control emphasize the reduction of erroneous button control by increasing the threshold. Button control with low importance and high-use button control It can be considered that the operation speed is emphasized by reducing the threshold value. In addition, when the GUI screen is narrow and a large drag distance cannot be taken, it is conceivable to reduce the threshold value.

さらに、ドラッグ距離に基づいてボタンコントロールによる機能の選択を確定するのではなく、ドラッグ操作の速度に基づいてボタンコントロールによる機能の選択を確定するようにすることも可能である。   Furthermore, it is also possible to determine the selection of the function by the button control based on the speed of the drag operation, instead of determining the selection of the function by the button control based on the drag distance.

[第2の実施の形態]
第2の実施の形態に係るコントロール(ボタンコントロールの一種)の形状は、第1の実施の形態に係るボタンコントロールBのような「ボタン」状ではなく、図8に示したように、「つまみ」状となっている。すなわち、第2の実施の形態に係るつまみコントロール81は、スライダ溝(一種のボックス)82内で移動可能に構成されている。
[Second Embodiment]
The shape of the control (a type of button control) according to the second embodiment is not a “button” shape like the button control B according to the first embodiment, but as shown in FIG. "". That is, the knob control 81 according to the second embodiment is configured to be movable in a slider groove (a kind of box) 82.

また、図示省略したが、第2の実施の形態では、RAM3上に、第1の実施の形態におけるボタン完全押下閾値記憶領域33の代わりにつまみ完全移動閾値記憶領域が形成され、このつまみ完全移動閾値記憶領域には、スライダ溝82内でのつまみコントロール81の最大移動距離が記憶されている。また、第2の実施の形態では、RAM3上に、第1の実施の形態におけるボタン押下度記憶領域34の代わりにつまみ移動度記憶領域が形成されている。さらに、第2の実施の形態では、RAM3上に、前回のつまみ移動度記憶領域が新たに形成されている。   Although not shown, in the second embodiment, a knob complete movement threshold storage area is formed on the RAM 3 instead of the button complete pressing threshold storage area 33 in the first embodiment. In the threshold storage area, the maximum moving distance of the knob control 81 within the slider groove 82 is stored. In the second embodiment, a knob mobility storage area is formed on the RAM 3 instead of the button press degree storage area 34 in the first embodiment. Furthermore, in the second embodiment, a previous knob mobility storage area is newly formed on the RAM 3.

次に、第2の実施の形態におけるボタン選択判断処理を、図9のフローチャートに基づいて説明する。なお、図9のフローチャートにおけるステップS122,S123の処理は、ドラッグ操作監視部22からドラッグ距離「0」、すなわちドラッグ操作の終了が通知された場合には実行されない処理である。また、つまみコントロール81の初期位置は、本実施形態ではスライダ溝82の左端とするが右端でもよく、つまみ移動度は、スライダ溝82の右端を100%と規定している。   Next, the button selection determination process in the second embodiment will be described based on the flowchart of FIG. Note that the processing in steps S122 and S123 in the flowchart of FIG. 9 is processing that is not executed when the drag operation monitoring unit 22 notifies the drag distance “0”, that is, the end of the drag operation. The initial position of the knob control 81 is the left end of the slider groove 82 in this embodiment, but it may be the right end. The knob mobility defines the right end of the slider groove 82 as 100%.

ボタン選択判断部23は、ドラッグ操作監視部22から通知されたドラッグ方向とドラッグ距離を用いて、つまみコントロール81の移動の度合いを算出する(ステップS121,S122)。   The button selection determination unit 23 calculates the degree of movement of the knob control 81 using the drag direction and the drag distance notified from the drag operation monitoring unit 22 (steps S121 and S122).

この場合、ボタン選択判断部23は、ドラッグ操作監視部22から通知されたドラッグ方向がGUI画面の左右の方向、すなわち、つまみコントロール81を左右向に移動する方向である場合に、つまみ完全移動閾値記憶領域に記憶されている閾値(スライダ溝82の右端の位置に対応)に対するドラッグ操作監視部22から通知されたドラッグ距離の割合を算出することにより、つまみコントロール81の移動の度合いを算出する。   In this case, when the drag direction notified from the drag operation monitoring unit 22 is the left-right direction of the GUI screen, that is, the direction in which the knob control 81 is moved leftward or rightward, the button selection determination unit 23 moves the knob complete movement threshold. The degree of movement of the knob control 81 is calculated by calculating the ratio of the drag distance notified from the drag operation monitoring unit 22 to the threshold value (corresponding to the right end position of the slider groove 82) stored in the storage area.

次に、ボタン選択判断部23は、ステップS122で算出された移動の度合いを表示制御部24に通知することにより、現在ドラッグ操作されているつまみコントロール81の表示位置を変更させる(ステップ123)。この場合、表示制御部24は、図8に示したように、上記移動の度合いに応じて、当該つまみコントロール81を左右方向に移動する。   Next, the button selection determination unit 23 notifies the display control unit 24 of the degree of movement calculated in step S122, thereby changing the display position of the knob control 81 currently being dragged (step 123). In this case, as shown in FIG. 8, the display control unit 24 moves the knob control 81 in the left-right direction in accordance with the degree of movement.

次に、ボタン選択判断部23は、ステップS121でドラッグ操作監視部22から通知されたドラッグ距離が「0」であるか否かを判別することにより、ドラッグ操作が終了しているか否かを判別する(ステップS124)。その結果、ドラッグ操作が終了していない場合は、ボタン選択判断部23は、ステップS122にて算出した移動の度合いをつまみ移動度記憶領域に記憶し(ステップS125)、ステップS121に戻る。   Next, the button selection determining unit 23 determines whether or not the drag operation has ended by determining whether or not the drag distance notified from the drag operation monitoring unit 22 in step S121 is “0”. (Step S124). As a result, if the drag operation has not ended, the button selection determination unit 23 stores the degree of movement calculated in step S122 in the knob mobility storage area (step S125), and returns to step S121.

一方、ドラッグ操作が終了している場合は、ボタン選択判断部23は、つまみ移動度記憶領域に記憶されている移動の度合い、すなわちドラッグ操作が終了した時点におけるドラッグ操作に係るつまみコントロール81の移動の度合いが100%であり、かつ前回のつまみ移動度が100%以外であるか否かを判別する(ステップS126)。なお、ステップS126にて、前回のつまみ移動度が100%以外であるか否かをも判別しているのは、つまみコントロール81がスライダ溝82の右端、すなわち移動の度合いが100%の位置に位置している状態で、つまみコントロール81のドラッグを開始した場合に、直ちにつまみコントロール81による機能が選択処理されるのを回避するためである。   On the other hand, when the drag operation is finished, the button selection determination unit 23 moves the knob control 81 related to the drag operation when the drag operation is finished, that is, the degree of movement stored in the knob mobility storage area. Is determined to be 100% and whether the previous knob mobility is other than 100% (step S126). In step S126, it is also determined whether or not the previous knob mobility is other than 100% because the knob control 81 is positioned at the right end of the slider groove 82, that is, at a position where the degree of movement is 100%. This is for avoiding that the function of the knob control 81 is immediately selected when the dragging of the knob control 81 is started in the positioned state.

ボタン選択判断部23は、ステップS126にて、ドラッグ操作が終了した時点におけるドラッグ操作に係るつまみコントロール81の移動の度合いが100%であり、かつ前回のつまみ移動度が100%以外であると判別した場合は、当該ドラッグ操作に係るつまみンコントロール81による機能が選択されたことを外部処理部25に通知することにより、外部処理部25により当該つまみコントロール81に対応する処理が実行されるようにする(ステップS127)。次に、ボタン選択判断部23は、前回のつまみ移動度記憶領域に100%を記憶して(ステップS128)、ステップS121に戻る。   In step S126, the button selection determining unit 23 determines that the degree of movement of the knob control 81 related to the drag operation at the time when the drag operation is completed is 100%, and the previous knob movement is other than 100%. In such a case, by notifying the external processing unit 25 that the function by the knob control 81 related to the drag operation has been selected, the processing corresponding to the knob control 81 is executed by the external processing unit 25. (Step S127). Next, the button selection determination unit 23 stores 100% in the previous knob mobility storage area (step S128), and returns to step S121.

また、ボタン選択判断部23は、ステップS126にて、ドラッグ操作が終了した時点におけるドラッグ操作に係るつまみコントロール81の移動の度合いが100%であり、かつ前回のつまみ移動度が100%以外であるという2つの条件を満足していないと判別した場合は、ステップS127,S128の処理を行なうことなく、ステップS121に戻る。このような処理により、つまみ状のボタンコントロールを用いた場合にも、第1の実施の形態と同様の効果を奏することが可能となる。   In step S126, the button selection determining unit 23 determines that the degree of movement of the knob control 81 related to the drag operation at the time when the drag operation is completed is 100%, and the previous knob mobility is other than 100%. If it is determined that the two conditions are not satisfied, the process returns to step S121 without performing the processes of steps S127 and S128. By such processing, even when a knob-shaped button control is used, the same effects as those of the first embodiment can be obtained.

なお、第2の実施の形態において、スライダ溝を縦長に形成したり、つまみ部(山の部分)を1つだけにしたりすることも可能である。また、つまみが右端に到達したとき当該つまみコントロールに対応した処理を実行するよう構成したが、左端または左右両端で処理を実行させるよう構成することも可能である。第1の実施形態では、ボタン選択判断部23は、ボタンコントロールの表示形態を初期の押上状態に戻すように表示制御部24に指示して(ステップS28)いたが、第2の実施の形態では、つまみを初期の位置に戻すことはしない。つまみを初期位置に戻すためには、ユーザが左向きにつまみをドラッグする。   In the second embodiment, it is possible to form the slider groove vertically long or to have only one knob portion (mountain portion). Further, although the processing corresponding to the knob control is executed when the knob reaches the right end, the processing can be executed at the left end or both the left and right ends. In the first embodiment, the button selection determination unit 23 instructs the display control unit 24 to return the button control display form to the initial push-up state (step S28). However, in the second embodiment, Do not return the knob to the initial position. In order to return the knob to the initial position, the user drags the knob to the left.

また、本発明は、携帯端末だけでなく、据え置き型のコンピュータや、多機能画像形成装置等に適用することも可能である。   Further, the present invention can be applied not only to a portable terminal but also to a stationary computer, a multifunction image forming apparatus, and the like.

さらに、本発明の目的は、実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)が記憶媒体に格納されたプログラムコードを読み出して実行することによっても達成される。   Furthermore, an object of the present invention is to supply a storage medium in which a program code of software for realizing the functions of the embodiment is recorded to a system or apparatus, and a computer (or CPU, MPU, etc.) of the system or apparatus as the storage medium. This can also be achieved by reading and executing the stored program code.

この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコード及び該プログラムコードを記憶した記憶媒体は本発明を構成することになる。   In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiments, and the program code and the storage medium storing the program code constitute the present invention.

又、プログラムコードを供給するための記憶媒体としては、例えば、フロッピー(登録商標)ディスク、ハードディスク、光磁気ディスク、CD−ROM、CD−R、CD−RW、DVD−ROM、DVD−RAM、DVD−RW、DVD+RW、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。または、プログラムコードをネットワークを介してダウンロードしてもよい。   Examples of the storage medium for supplying the program code include a floppy (registered trademark) disk, a hard disk, a magneto-optical disk, a CD-ROM, a CD-R, a CD-RW, a DVD-ROM, a DVD-RAM, and a DVD. -RW, DVD + RW, magnetic tape, nonvolatile memory card, ROM, etc. can be used. Alternatively, the program code may be downloaded via a network.

また、コンピュータが読み出したプログラムコードを実行することにより、上記実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(オペレーティングシステム)等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。   Further, by executing the program code read by the computer, not only the functions of the above-described embodiments are realized, but also an OS (operating system) running on the computer based on the instruction of the program code. A case where part or all of the actual processing is performed and the functions of the above-described embodiments are realized by the processing is also included.

更に、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。   Further, after the program code read from the storage medium is written in a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function expansion is performed based on the instruction of the program code. This includes the case where the CPU or the like provided in the board or function expansion unit performs part or all of the actual processing, and the functions of the above-described embodiments are realized by the processing.

本発明のボタン制御装置を適用した携帯端末のハードウエアの概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the hardware of the portable terminal to which the button control apparatus of this invention is applied. 上記携帯端末の機能ブロック図である。It is a functional block diagram of the said portable terminal. ドラッグ操作によるボタンコントロールの表示態様の変化を示す図である(第1の実施の形態)。It is a figure which shows the change of the display mode of the button control by drag operation (1st Embodiment). 接触監視処理を示すフローチャートである(第1、第2の実施の形態で共通)。It is a flowchart which shows a contact monitoring process (common in 1st, 2nd embodiment). 図4のステップS04本におけるドラッグ監視処理の詳細を示すフローチャートである。5 is a flowchart showing details of a drag monitoring process in step S04 in FIG. ボタンコントロールの完全押下を判断するための閾値を示す図である。It is a figure which shows the threshold value for judging complete press of button control. ボタン選択判断処理を示すフローチャートである(第1の実施の形態)。It is a flowchart which shows a button selection judgment process (1st Embodiment). ドラッグ操作によるつまみボタンコントロール(ボタンコントロールの一種)の表示態様の変化を示す図である(第2の実施の形態)。It is a figure which shows the change of the display mode of knob button control (a kind of button control) by drag operation (2nd Embodiment). ボタン選択判断処理を示すフローチャートである(第2の実施の形態)。It is a flowchart which shows a button selection judgment process (2nd Embodiment).

符号の説明Explanation of symbols

1…CPU
2…ROM
3…RAM
6…表示・操作部
7…スタイラスペン
21…入力操作検知部
22…ドラッグ操作監視部
23…ボタン選択判断部
24…表示制御部
61…タッチパネル
62…液晶ディスプレイ
1 ... CPU
2 ... ROM
3 ... RAM
6 ... Display / operation unit 7 ... Stylus pen 21 ... Input operation detection unit 22 ... Drag operation monitoring unit 23 ... Button selection determination unit 24 ... Display control unit 61 ... Touch panel 62 ... Liquid crystal display

Claims (8)

グラフィカルユーザインタフェース画面上にボタンコントロールを表示する表示制御手段と、
前記表示制御手段により表示された前記ボタンコントロールに対してドラッグ操作を行なうドラッグ操作手段と、
前記ドラッグ操作手段により前記ボタンコントロールに対して行なわれるドラッグ操作の方向と距離を検出する検出手段と、
前記検出手段により検出されたドラッグの方向が所定方向であり、ドラッグの距離が所定値以上の場合に当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定する確定手段と、
を有し、
前記確定手段は、前記検出手段により検出されたドラッグの方向が所定方向の場合、前記検出手段により検出されたドラッグの距離が前記所定値に達するまで、該所定値に対する前記検出手段により検出されたドラッグの距離の割合を算出して前記表示制御手段に送信し、
前記表示制御手段は、前記確定手段から受信した割合に応じて該ボタンコントロールの表示態様を変化させることを特徴とするボタン制御装置。
Display control means for displaying button controls on a graphical user interface screen;
Drag operation means for performing a drag operation on the button control displayed by the display control means;
Detecting means for detecting the direction and distance of the drag operation performed on the button control by the drag operation means;
Confirming means for confirming selection of a function by button control related to the drag operation when the drag direction detected by the detection means is a predetermined direction and the distance of the drag is a predetermined value or more;
Have
The determination means is detected by the detection means for the predetermined value until the distance of the drag detected by the detection means reaches the predetermined value when the direction of the drag detected by the detection means is a predetermined direction. Calculate the drag distance ratio and send it to the display control means,
The button control device, wherein the display control means changes a display mode of the button control in accordance with a ratio received from the confirmation means.
前記表示制御手段は、押しボタン部と押下ストローク部を有する形状のボタンコントロールを表示し、該ボタンコントロールが前記ドラッグ操作手段により前記グラフィカルユーザインタフェース画面上の下方向にドラッグされるに従って押下ストローク部が減少していくように該ボタンコントロールの表示態様を変化させることを特徴とする請求項1に記載のボタン制御装置。   The display control means displays a button control having a push button part and a push stroke part, and the push stroke part is dragged downward on the graphical user interface screen by the drag operation means. 2. The button control device according to claim 1, wherein a display mode of the button control is changed so as to decrease. 前記確定手段は、前記表示制御手段により前記押下ストローク部が表示されなくなった時点で、当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定することを特徴とする請求項2に記載のボタン制御装置。   3. The button control device according to claim 2, wherein the determination unit determines the selection of the function by the button control related to the drag operation when the pressing stroke part is not displayed by the display control unit. . 前記表示制御手段は、所定の領域内で移動可能な前記ボタンコントロールを表示し、前記ドラッグ操作手段によるドラッグ操作に応じて該領域内での該ボタンコントロールの表示位置を変化させることを特徴とする請求項1に記載のボタン制御装置。   The display control means displays the button control movable within a predetermined area, and changes the display position of the button control in the area in accordance with the drag operation by the drag operation means. The button control device according to claim 1. 前記確定手段は、前記表示制御手段により前記ボタンコントロールが前記領域の端部に移動表示された時点で、当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定することを特徴とする請求項4に記載のボタン制御装置。   5. The function according to claim 4, wherein the confirming unit confirms selection of a function by the button control related to the drag operation when the button control is moved and displayed at an end of the area by the display control unit. The button control device described. グラフィカルユーザインタフェース画面上にボタンコントロールを表示する表示制御手段と、
前記表示制御手段により表示された前記ボタンコントロールに対してドラッグ操作を行なうドラッグ操作手段と、
前記ドラッグ操作手段により前記ボタンコントロールに対して行なわれるドラッグ操作の方向と速さを検出する検出手段と、
前記検出手段により検出されたドラッグの方向が所定方向であり、ドラッグの速さが所定値以上の場合に当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定する確定手段と、
を有し、
前記確定手段は、前記検出手段により検出されたドラッグの方向が所定方向の場合、前記検出手段により検出されたドラッグの距離が前記所定値に達するまで、該所定値に対する前記検出手段により検出されたドラッグの速さの割合を算出して前記表示制御手段に送信し、
前記表示制御手段は、前記確定手段から受信した割合に応じて該ボタンコントロールの表示態様を変化させることを特徴とするボタン制御装置。
Display control means for displaying button controls on a graphical user interface screen;
Drag operation means for performing a drag operation on the button control displayed by the display control means;
Detecting means for detecting the direction and speed of the drag operation performed on the button control by the drag operation means;
Confirming means for confirming selection of a function by button control related to the drag operation when the drag direction detected by the detection means is a predetermined direction and the drag speed is equal to or higher than a predetermined value;
Have
The determination means is detected by the detection means for the predetermined value until the distance of the drag detected by the detection means reaches the predetermined value when the direction of the drag detected by the detection means is a predetermined direction. Calculate the rate of drag speed and send it to the display control means,
The button control device, wherein the display control means changes a display mode of the button control in accordance with a ratio received from the confirmation means.
グラフィカルユーザインタフェース画面上にボタンコントロールを表示する表示制御工程と、
前記表示制御工程により表示された前記ボタンコントロールに対してドラッグ操作を行なうドラッグ操作工程と、
前記ドラッグ操作工程により前記ボタンコントロールに対して行なわれるドラッグ操作の方向と距離を検出する検出工程と、
前記検出工程により検出されたドラッグの方向が所定方向であり、ドラッグの距離が所定値以上の場合に当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定する確定工程と、
を有し、
前記確定工程は、前記検出工程により検出されたドラッグの方向が所定方向の場合、前記検出工程により検出されたドラッグの距離が前記所定値に達するまで、該所定値に対する前記検出工程により検出されたドラッグの距離の割合を算出して前記表示制御工程に送信し、
前記表示制御工程は、前記確定工程から受信した割合に応じて該ボタンコントロールの表示態様を変化させることを特徴とするボタン制御方法。
A display control process for displaying button controls on the graphical user interface screen;
A drag operation step of performing a drag operation on the button control displayed by the display control step;
A detection step of detecting a direction and a distance of the drag operation performed on the button control by the drag operation step;
A confirming step of confirming selection of a function by button control related to the drag operation when the drag direction detected by the detection step is a predetermined direction and the drag distance is a predetermined value or more;
Have
The determining step is detected by the detecting step for the predetermined value until the distance of the drag detected by the detecting step reaches the predetermined value when the direction of the drag detected by the detecting step is a predetermined direction. Calculate the drag distance ratio and send it to the display control step,
The button control method, wherein the display control step changes a display mode of the button control in accordance with a ratio received from the determination step.
ボタン制御方法をコンピュータに実行させるプログラムであって、
前記ボタン制御方法は、
グラフィカルユーザインタフェース画面上にボタンコントロールを表示する表示制御工程と、
前記表示制御工程により表示された前記ボタンコントロールに対してドラッグ操作を行なうドラッグ操作工程と、
前記ドラッグ操作工程により前記ボタンコントロールに対して行なわれるドラッグ操作の方向と距離を検出する検出工程と、
前記検出工程により検出されたドラッグの方向が所定方向であり、ドラッグの距離が所定値以上の場合に当該ドラッグ操作に係るボタンコントロールによる機能の選択を確定する確定工程と、
を有し、
前記確定工程は、前記検出工程により検出されたドラッグの方向が所定方向の場合、前記検出工程により検出されたドラッグの距離が前記所定値に達するまで、該所定値に対する前記検出工程により検出されたドラッグの距離の割合を算出して前記表示制御工程に送信し、
前記表示制御工程は、前記確定工程から受信した割合に応じて該ボタンコントロールの表示態様を変化させることを特徴とするプログラム。
A program for causing a computer to execute a button control method,
The button control method is:
A display control process for displaying button controls on the graphical user interface screen;
A drag operation step of performing a drag operation on the button control displayed by the display control step;
A detection step of detecting a direction and a distance of the drag operation performed on the button control by the drag operation step;
A confirming step of confirming selection of a function by button control related to the drag operation when the drag direction detected by the detection step is a predetermined direction and the drag distance is a predetermined value or more;
Have
The determining step is detected by the detecting step for the predetermined value until the distance of the drag detected by the detecting step reaches the predetermined value when the direction of the drag detected by the detecting step is a predetermined direction. Calculate the drag distance ratio and send it to the display control step,
The display control step changes the display mode of the button control according to the ratio received from the confirmation step .
JP2005069794A 2005-03-11 2005-03-11 Button control apparatus and method, and program Active JP4728019B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005069794A JP4728019B2 (en) 2005-03-11 2005-03-11 Button control apparatus and method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005069794A JP4728019B2 (en) 2005-03-11 2005-03-11 Button control apparatus and method, and program

Publications (3)

Publication Number Publication Date
JP2006252322A JP2006252322A (en) 2006-09-21
JP2006252322A5 JP2006252322A5 (en) 2008-04-17
JP4728019B2 true JP4728019B2 (en) 2011-07-20

Family

ID=37092742

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005069794A Active JP4728019B2 (en) 2005-03-11 2005-03-11 Button control apparatus and method, and program

Country Status (1)

Country Link
JP (1) JP4728019B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101376894B1 (en) 2007-02-28 2014-03-20 엘지전자 주식회사 Method of dialling in mobile communication terminal and the mobile communication terminal with a thouch screen
JP5446769B2 (en) * 2009-11-20 2014-03-19 富士通モバイルコミュニケーションズ株式会社 3D input display device
JP5799628B2 (en) 2011-07-15 2015-10-28 ソニー株式会社 Information processing apparatus, information processing method, and program
JP5704655B2 (en) * 2012-04-12 2015-04-22 株式会社Nttドコモ Display device and program
CN103309673B (en) * 2013-06-24 2017-03-01 小米科技有限责任公司 A kind of conversation processing method based on gesture, device
JP6399834B2 (en) * 2014-07-10 2018-10-03 キヤノン株式会社 Information processing apparatus, information processing apparatus control method, and program
JP6090389B2 (en) * 2015-08-14 2017-03-08 ソニー株式会社 Information processing apparatus, information processing method, and program
KR20170024453A (en) * 2015-08-25 2017-03-07 한신대학교 산학협력단 Pointing device using three dimensional virtual button

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05128707A (en) * 1991-10-31 1993-05-25 Sony Corp Disk player
JPH10269021A (en) * 1997-03-25 1998-10-09 Sharp Corp Touch panel input device
JP2000022994A (en) * 1998-07-01 2000-01-21 Minolta Co Ltd Image display system
JP2004272354A (en) * 2003-03-05 2004-09-30 Sanyo Electric Co Ltd Stereoscopic display type operation panel

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05128707A (en) * 1991-10-31 1993-05-25 Sony Corp Disk player
JPH10269021A (en) * 1997-03-25 1998-10-09 Sharp Corp Touch panel input device
JP2000022994A (en) * 1998-07-01 2000-01-21 Minolta Co Ltd Image display system
JP2004272354A (en) * 2003-03-05 2004-09-30 Sanyo Electric Co Ltd Stereoscopic display type operation panel

Also Published As

Publication number Publication date
JP2006252322A (en) 2006-09-21

Similar Documents

Publication Publication Date Title
JP4728019B2 (en) Button control apparatus and method, and program
JP5668355B2 (en) Information processing apparatus, information processing method, and computer program
JP5407950B2 (en) Information processing apparatus, information processing method, and program
JP4752887B2 (en) Information processing apparatus, information processing method, and computer program
JP5310403B2 (en) Information processing apparatus, information processing method, and program
TWI564757B (en) Computer device with touch screen, method, and computer readable medium for operating the same
JP5402322B2 (en) Information processing apparatus and information processing method
WO2010044151A1 (en) Selection input accepting program, information processing device and selection input accepting method
CN108733303B (en) Touch input method and apparatus of portable terminal
JP2010033455A (en) Information processing method and apparatus
JP2011053974A (en) Device and method for controlling operation, and computer program
KR20120050971A (en) Display control device, display control method, and computer program
JP6141301B2 (en) Dialogue model of indirect dialogue device
CN103809903B (en) Method and apparatus for controlling virtual screen
KR20160018268A (en) Apparatus and method for controlling content by using line interaction
US8243101B2 (en) Image display processing apparatus, image display processing method, and recording medium
JP3809424B2 (en) Selection area control device, selection area control method, and selection area control program
US20160179352A1 (en) Information processing apparatus, computer-readable recording medium storing display control program, and display control method
JP2014174764A (en) Information processing device and control method of the same
US20150143295A1 (en) Method, apparatus, and computer-readable recording medium for displaying and executing functions of portable device
KR101436585B1 (en) Method for providing user interface using one point touch, and apparatus therefor
WO2011152224A1 (en) Terminal, process selection method, control program, and recording medium
JP5446617B2 (en) Selection support apparatus and program
WO2018159414A1 (en) Terminal device and operation control program
JP3979156B2 (en) Data input device, method and program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080228

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100223

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100423

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20101116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110215

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20110222

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110412

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110414

R150 Certificate of patent or registration of utility model

Ref document number: 4728019

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140422

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250