JP2014174926A - Information processor and control method - Google Patents

Information processor and control method Download PDF

Info

Publication number
JP2014174926A
JP2014174926A JP2013049585A JP2013049585A JP2014174926A JP 2014174926 A JP2014174926 A JP 2014174926A JP 2013049585 A JP2013049585 A JP 2013049585A JP 2013049585 A JP2013049585 A JP 2013049585A JP 2014174926 A JP2014174926 A JP 2014174926A
Authority
JP
Japan
Prior art keywords
input operation
display
change
unit
gui component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013049585A
Other languages
Japanese (ja)
Inventor
Seigo Ito
誠悟 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2013049585A priority Critical patent/JP2014174926A/en
Publication of JP2014174926A publication Critical patent/JP2014174926A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

PROBLEM TO BE SOLVED: To enable a user to recognize an operation possibility of a GUI component corresponding to an input operation with a movement of an indication body.SOLUTION: A smart phone (1) of this invention includes an input operation determination part (51) for specifying whether an input operation is a second input operation having a direction different from that of a predetermined first input operation, and a display form determination part (52) for causing second change different from first change corresponding to the first input operation in display of the GUI component on the basis of the specified second input operation.

Description

本発明は、指または入力ペンなどの指示体の移動を伴う所定の入力操作を受け付けて、表示状態に所定の変化を生じるグラフィック要素を表示する情報処理装置等に関する。   The present invention relates to an information processing apparatus that receives a predetermined input operation accompanied by movement of an indicator such as a finger or an input pen and displays a graphic element that causes a predetermined change in a display state.

従来、表示画面にグラフィカルユーザインターフェース（ＧＵＩ）部品を表示し、当該ＧＵＩ部品に対してなされたユーザの入力操作に応じて、アプリケーションを制御する技術が知られている。   2. Description of the Related Art Conventionally, a technique for displaying a graphical user interface (GUI) component on a display screen and controlling an application according to a user input operation performed on the GUI component is known.

また近年、ＧＵＩ部品への入力操作が可能か否か（操作可能性）を示す技術が普及している。例えば、マウスなどのポインティングデバイスを有する情報処理装置の場合、ＧＵＩ部品にカーソルを合わせたとき、カーソルやＧＵＩ部品自体の表示を変化させることで、そのＧＵＩ部品は操作できるのかどうか（操作可能性）を示すことができる。   In recent years, a technique for indicating whether or not an input operation to a GUI component is possible (operation possibility) has become widespread. For example, in the case of an information processing apparatus having a pointing device such as a mouse, whether or not the GUI part can be operated by changing the display of the cursor or the GUI part itself when the cursor is placed on the GUI part (operability) Can be shown.

一方、タッチパネルを有する情報処理装置においても、操作可能性を示す技術が知られている。例えば、下掲の特許文献１には、タッチパネルを有する表示・入力装置において、操作可能なオブジェクト（ＧＵＩ部品）には、ユーザの指示入力がなされると影を生成して表示することで、そのＧＵＩ部品の操作可能性を示すことができる。   On the other hand, a technique that shows the operability of an information processing apparatus having a touch panel is also known. For example, in Patent Document 1 listed below, in a display / input device having a touch panel, an operable object (GUI component) generates and displays a shadow when a user's instruction is input. The operability of GUI parts can be shown.

特開２０００−９９２３７号公報（２０００年４月７日公開）JP 2000-99237 A (published April 7, 2000) 特開２０１１−１５９０４０号公報（２０１１年８月１８日公開）JP 2011-159040 A (released on August 18, 2011) 特開平１０−１０５７３５号公報（１９９８年４月２４日公開）Japanese Patent Laid-Open No. 10-105735 (published on April 24, 1998)

しかしながら、特許文献１等に開示された従来技術では、フリック操作やドラッグ操作といった、タッチパネル上で指示体の移動を伴う操作（移動操作）を受け付けてアプリケーションを制御するＧＵＩ部品の操作可能性を示すには十分とはいえない。つまり、ユーザは、移動操作を受け付けてアプリケーションを制御するＧＵＩ部品の操作可能性を確認するためには、当該移動操作を行ってみる必要があり、その結果、アプリケーションにおいて、ユーザが望まない処理が実行されてしまうという課題がある。   However, in the prior art disclosed in Patent Document 1 and the like, the possibility of operating a GUI component that controls an application by accepting an operation (moving operation) involving movement of an indicator on the touch panel such as a flick operation or a drag operation is shown. Is not enough. In other words, in order to confirm the operability of the GUI component that accepts the moving operation and controls the application, the user needs to perform the moving operation. There is a problem of being executed.

本発明は、上記の課題に鑑みてなされたものであって、その目的は、アプリケーションの処理を実行するための指示体の移動操作を受け付けるグラフィック要素（ＧＵＩ部品）の操作可能性を、ユーザがアプリケーションの処理を実行するための移動操作を行わなくても認識することができる情報処理装置等を提供することにある。   The present invention has been made in view of the above-described problems, and the purpose of the present invention is to enable the user to operate the graphic element (GUI component) that accepts the movement operation of the indicator for executing the processing of the application. An object of the present invention is to provide an information processing apparatus and the like that can be recognized without performing a moving operation for executing an application process.

本発明の一態様に係る情報処理装置は、指示体による入力操作を受け付ける操作部と、上記指示体の移動を伴う所定の第１の入力操作を受け付けて、表示に所定の第１の変化を生じるグラフィック要素を表示する表示部と、上記所定の第１の入力操作に対応付けられた所定の処理をアプリケーションに対して実行するアプリケーション制御手段と、を備えた情報処理装置であって、上記操作部を介した上記入力操作を検知し、上記検知した入力操作が、上記第１の入力操作と方向が異なり、かつ上記所定の処理に対応付けられていない第２の入力操作であるかどうかを特定する入力操作判定手段と、上記入力操作判定手段によって特定された第２の入力操作に基づいて、上記グラフィック要素の表示に上記第１の変化と異なる第２の変化を生じさせる表示様態変更手段と、を備えている。   An information processing apparatus according to an aspect of the present invention receives an operation unit that receives an input operation using an indicator and a predetermined first input operation that involves movement of the indicator, and performs a predetermined first change in display. An information processing apparatus comprising: a display unit that displays a generated graphic element; and an application control unit that executes a predetermined process associated with the predetermined first input operation on an application. Whether or not the detected input operation is a second input operation having a direction different from that of the first input operation and not associated with the predetermined process. Based on the input operation determining means to be specified and the second input operation specified by the input operation determining means, a second change different from the first change is generated in the display of the graphic element. And a, a display manner changing means for.

本発明の一態様によれば、アプリケーションの処理を実行するための指示体の移動操作を受け付けるグラフィック要素（ＧＵＩ部品）の操作可能性を、ユーザがアプリケーションの処理を実行するための移動操作を行わなくても認識することができる。   According to one aspect of the present invention, the operation of a graphic element (GUI component) that accepts a moving operation of a pointer for executing an application process is performed, and the user performs a moving operation for executing the application process. It can be recognized without it.

実施形態１のスマートフォンの要部構成を示すブロック図である。It is a block diagram which shows the principal part structure of the smart phone of Embodiment 1. FIG. 実施形態１のスマートフォンにて表示されるＧＵＩ部品を示す図である。It is a figure which shows the GUI component displayed on the smart phone of Embodiment 1. FIG. 実施形態１のスマートフォンの処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process of the smart phone of Embodiment 1. 実施形態２のスマートフォンにて表示されるＧＵＩ部品を示す図である。It is a figure which shows the GUI component displayed with the smart phone of Embodiment 2. FIG. 実施形態２のスマートフォンにて表示される別のＧＵＩ部品を示す図である。It is a figure which shows another GUI component displayed with the smart phone of Embodiment 2. FIG. 実施形態３のスマートフォンにて表示されるＧＵＩ部品を示す図である。It is a figure which shows the GUI components displayed on the smart phone of Embodiment 3. 実施形態３のスマートフォンにて表示される別のＧＵＩ部品を示す図である。It is a figure which shows another GUI component displayed with the smart phone of Embodiment 3. FIG.

〔実施形態１〕
以下、図１〜３に基づき、本発明の情報処理装置の一態様であるスマートフォン１について詳細に説明する。本発明の一態様のスマートフォン１は、図２に示すように、ユーザの指または入力ペンなどの指示体２０を移動させる操作（移動操作）に応じてアクティブになり、所定の処理を起動させるグラフィック要素（ＧＵＩ部品）２１を少なくとも表示するものである。そのＧＵＩ部品の一例として、図２の（ａ）に、ノブ２２とレール２３とで構成されるＧＵＩ部品２１を示す。スマートフォン１は、指示体２０がノブ２２の位置に接触した後、接触を維持したまま指示体２０をレール２３に沿って移動させる操作（ドラッグ操作：第１の入力操作）を検出して、ノブ２２の表示をレール２３に対して水平方向に移動させる。ＧＵＩ部品２１は、第１の入力操作を受け付けて、所定の処理を起動する。また、第１の入力操作に応じたＧＵＩ部品２１の表示の変化を第１の変化と呼ぶ。 Embodiment 1
Hereinafter, based on FIGS. 1-3, the smart phone 1 which is one aspect | mode of the information processing apparatus of this invention is demonstrated in detail. As shown in FIG. 2, the smartphone 1 according to one aspect of the present invention is activated in response to an operation (moving operation) for moving the indicator 20 such as a user's finger or an input pen and starts a predetermined process. At least the element (GUI component) 21 is displayed. As an example of the GUI component, FIG. 2A shows a GUI component 21 including a knob 22 and a rail 23. The smartphone 1 detects an operation (drag operation: first input operation) of moving the indicator 20 along the rail 23 while maintaining the contact after the indicator 20 contacts the position of the knob 22, and the knob 1 The display of 22 is moved with respect to the rail 23 in the horizontal direction. The GUI component 21 accepts the first input operation and starts a predetermined process. In addition, a change in the display of the GUI component 21 according to the first input operation is referred to as a first change.

なお、ＧＵＩ部品２１は、図２の（ｂ）に示すように、ノブ２２とレール２３との間に、一定の幅の空間２５を有するように構成されている。ＧＵＩ部品２１は例えば、動画を再生するためのアプリケーションなどに利用でき、ユーザは上述したようなＧＵＩ部品２１へのドラッグ操作によって、望みの場面から動画を再生することができる。なお、ＧＵＩ部品２１の形状は、直線的（図２の場合レール２３に沿った水平方向）な移動を伴う操作でアプリケーションを制御するといった所定の処理を実行できるものであれば特に限定されない。   Note that the GUI component 21 is configured to have a space 25 having a certain width between the knob 22 and the rail 23 as shown in FIG. The GUI component 21 can be used for, for example, an application for reproducing a moving image, and the user can reproduce the moving image from a desired scene by a drag operation to the GUI component 21 as described above. The shape of the GUI component 21 is not particularly limited as long as it can execute a predetermined process such as controlling an application by an operation involving a linear movement (horizontal direction along the rail 23 in FIG. 2).

そこで、スマートフォン１は、図２の（ｃ）および（ｄ）に示すように、ＧＵＩ部品２１外からノブ２２の位置に達するような、レール２３に対して垂直方向の、指示体２０のドラッグ操作を検出して、ノブ２２をレール２３に対して空間２５の幅だけ垂直方向に移動させる。また、スマートフォン１は、図２の（ｅ）および（ｆ）に示すように、ノブ２２へ指示体２０が接触する操作を検出して、ノブ２２を水平面２４に対して垂直方向（図３の（ｆ）の奥方向）へ傾いたように表示する。ＧＵＩ部品２１はこれらの操作によって、上記所定の処理を起動することはない。レール２３に対して垂直方向の上記ドラッグ操作は、ＧＵＩ部品をアクティブにするための上記第１の入力操作と方向が異なる第２の入力操作である。つまり、第２の入力操作によってＧＵＩ部品２１の表示が上記のように、第１の変化とは異なる第２の変化をすることで、ユーザは、望まない処理を起動させることなく、ＧＵＩ部品２１、特にノブ２２の操作可能性を認識することができる。   Therefore, as shown in FIGS. 2C and 2D, the smartphone 1 performs a drag operation of the indicator 20 in a direction perpendicular to the rail 23 so as to reach the position of the knob 22 from the outside of the GUI component 21. And the knob 22 is moved in the vertical direction by the width of the space 25 with respect to the rail 23. Further, as shown in FIGS. 2E and 2F, the smartphone 1 detects an operation in which the indicator 20 contacts the knob 22, and moves the knob 22 in a direction perpendicular to the horizontal plane 24 (in FIG. 3). The image is displayed so as to be inclined toward the back direction (f). The GUI component 21 does not start the predetermined process by these operations. The drag operation in the direction perpendicular to the rail 23 is a second input operation having a direction different from that of the first input operation for activating the GUI component. In other words, the display of the GUI component 21 by the second input operation makes the second change different from the first change as described above, so that the user can start the GUI component 21 without starting an undesired process. In particular, the operability of the knob 22 can be recognized.

なお、「操作可能性」とは、ＧＵＩ部品への入力操作が可能か否か、すなわち、アプリケーションの操作が可能か否かを示す。そして、操作可能である場合、ＧＵＩ部品に対してユーザが操作を行ったときに、ＧＵＩ部品の表示を変化させることで、ユーザに操作可能であることを認識させることができる。   Note that “operability” indicates whether an input operation to a GUI component is possible, that is, whether an application operation is possible. When the operation is possible, when the user performs an operation on the GUI component, the user can recognize that the operation is possible by changing the display of the GUI component.

また、本実施形態におけるＧＵＩ部品２１は、以下のようにも表現できる。すなわち、ＧＵＩ部品２１に対して仮想の３次元直交座標系を設定し、ディスプレイ面内の２次元（平面に構築される２次元）のうちの１つの方向への入力操作を、アプリケーションを制御するための第１の入力操作とする。このとき、ＧＵＩ部品２１に対して設定した仮想の３次元座標系において、アプリケーションを制御することなく、操作可能性を示すための第２の入力操作に使用できる方向（次元）は２である。具体的には、ＧＵＩ部品２１では、ディスプレイ面内の２次元のうちの第１の入力操作が割り当てられていない１つの方向と、ディスプレイ面と直交する方向とが、第２の入力操作を割り当てることができる方向となる。なお、ディスプレイ面と直交する方向への入力操作とは、移動を伴うことなくディスプレイ面を押下するような操作、例えばタップ操作や長押し操作などである。このように、ＧＵＩ部品に対して設定した仮想の３次元座標系において、アプリケーションを制御するための第１の入力操作を割り当てた方向（次元）を除いた、アプリケーションを制御することなく、操作可能性を示すための第２の入力操作を割り当てることのできる方向（次元）を「自由度」と言うこととする。   The GUI component 21 in the present embodiment can also be expressed as follows. That is, a virtual three-dimensional orthogonal coordinate system is set for the GUI component 21, and an input operation in one direction of two dimensions (two dimensions constructed on a plane) within the display surface is controlled by the application. For this purpose. At this time, in the virtual three-dimensional coordinate system set for the GUI component 21, the direction (dimension) that can be used for the second input operation for indicating the operation possibility is 2 without controlling the application. Specifically, in the GUI component 21, one direction in which the first input operation of the two dimensions in the display surface is not assigned and the direction orthogonal to the display surface assign the second input operation. It becomes the direction that can be. The input operation in the direction orthogonal to the display surface is an operation of pressing the display surface without moving, for example, a tap operation or a long press operation. As described above, in the virtual three-dimensional coordinate system set for the GUI component, the operation can be performed without controlling the application except the direction (dimension) to which the first input operation for controlling the application is assigned. The direction (dimension) to which the second input operation for indicating the sex can be assigned is referred to as “degree of freedom”.

続いて、スマートフォン１の構成を詳細に説明する。図１に示すように、スマートフォン１は、少なくとも、入力部２、表示部３、制御部４、および記憶部６を備えている。   Next, the configuration of the smartphone 1 will be described in detail. As shown in FIG. 1, the smartphone 1 includes at least an input unit 2, a display unit 3, a control unit 4, and a storage unit 6.

表示部３は、スマートフォン１にて処理される情報を画像として表示する表示デバイスである。表示部３には、後述する表示制御部４４などによって処理された情報が表示される。表示部３は、例えばＬＣＤ（液晶ディスプレイ）等の表示装置で構成される。   The display unit 3 is a display device that displays information processed by the smartphone 1 as an image. The display unit 3 displays information processed by a display control unit 44 described later. The display unit 3 is configured by a display device such as an LCD (liquid crystal display).

入力部（操作部）２は、表示部３の表示領域を覆う透明カバー（入力面）に接触する指示体２０の位置（座標値）を検出し、検出結果を後述する入力操作特定部４１に出力するタッチセンサである。つまり、入力部２と表示部３とが一体となってタッチパネルを構成している。なお、タッチセンサとしては、圧力センサ、静電容量センサ、光センサなどが挙げられる。また、本実施形態では、ユーザの指を指示体２０とするが、スタイラスペンやタッチペンなどを指示体２０としてもよい。さらに、「入力操作」は、「接触」に限らず、入力部２に指示体２０が直接接触しない、いわゆる「近接」も含む。   The input unit (operation unit) 2 detects the position (coordinate value) of the indicator 20 in contact with the transparent cover (input surface) covering the display area of the display unit 3, and the detection result is input to the input operation specifying unit 41 described later. It is a touch sensor that outputs. That is, the input unit 2 and the display unit 3 are integrated to form a touch panel. Note that examples of the touch sensor include a pressure sensor, a capacitance sensor, and an optical sensor. In this embodiment, the user's finger is the indicator 20, but a stylus pen, a touch pen, or the like may be the indicator 20. Furthermore, the “input operation” is not limited to “contact” but also includes so-called “proximity” in which the indicator 20 does not directly contact the input unit 2.

記憶部６は、アプリケーション６１を格納している。アプリケーション６１は、後述するアプリケーション制御部４３が実行する任意のアプリケーションプログラムである。また、アプリケーション６１は、当該アプリケーションの操作に用いるＧＵＩ部品の機能や表示を規定した情報であるＧＵＩ部品６２を含む。なお、記憶部６としては、従来から公知の種々の記憶手段、例えば、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、フラッシュメモリ、ＨＤＤ（Hard Disk Drive）などを用いることができる。また、記憶部６は、制御部４が実行する各種アプリケーションプログラム、ＯＳプログラム、制御プログラム、これらプログラムを実行するときに読み出す各種データ（設定値、テーブルなど）を記憶していてもよい。また、制御部４にて取り扱われている各種データや処理中のデータは、記憶部６のワーキングメモリに一時的に記憶されてもよい。   The storage unit 6 stores an application 61. The application 61 is an arbitrary application program executed by the application control unit 43 described later. The application 61 includes a GUI component 62 that is information defining the function and display of the GUI component used for the operation of the application. As the storage unit 6, various conventionally known storage means such as ROM (Read Only Memory), RAM (Random Access Memory), flash memory, HDD (Hard Disk Drive), and the like can be used. In addition, the storage unit 6 may store various application programs, OS programs, control programs executed by the control unit 4, and various data (setting values, tables, etc.) read when these programs are executed. Further, various data handled by the control unit 4 and data being processed may be temporarily stored in the working memory of the storage unit 6.

次に、制御部４の構成を詳細に説明する。制御部４は、図１に示すように、入力操作特定部４１、ＧＵＩ部品制御部４２、アプリケーション制御部４３、および表示制御部４４を含む。   Next, the configuration of the control unit 4 will be described in detail. As illustrated in FIG. 1, the control unit 4 includes an input operation specifying unit 41, a GUI component control unit 42, an application control unit 43, and a display control unit 44.

入力操作特定部４１は、入力部２の検出結果を参照して、入力操作の位置、移動方向、移動速度、および移動距離などを特定し、これらを含む入力操作情報を生成する。また、入力操作特定部４１は、入力部２に指示体２０が直接接触した場合、図示しない圧力センサで接触位置での押し圧（圧力）の値を特定してもよい。圧力が特定可能な場合は、上記圧力の値も入力操作情報に含まれる。なお、圧力の特定機能は必須ではなく、情報処理装置の用途などに応じて、適宜追加すればよい。また、入力操作特定部４１は、生成した入力操作情報を、ＧＵＩ部品制御部４２に供給する。また、入力操作特定部４１は、指示体２０が入力部２から離れたことを特定し、その旨をＧＵＩ部品制御部４２に供給する。   The input operation specifying unit 41 refers to the detection result of the input unit 2 to specify the position, moving direction, moving speed, moving distance, and the like of the input operation, and generates input operation information including these. Moreover, the input operation specific | specification part 41 may specify the value of the pressing pressure (pressure) in a contact position with the pressure sensor which is not shown in figure, when the indicator 20 contacts the input part 2 directly. When the pressure can be specified, the pressure value is also included in the input operation information. The pressure specifying function is not essential, and may be added as appropriate according to the use of the information processing apparatus. Further, the input operation specifying unit 41 supplies the generated input operation information to the GUI component control unit 42. Further, the input operation specifying unit 41 specifies that the indicator 20 has left the input unit 2 and supplies the fact to the GUI component control unit 42.

ＧＵＩ部品制御部４２は、上記入力操作情報に応じて、ＧＵＩ部品の表示を制御する。ＧＵＩ部品制御部４２は、入力操作判定部（入力操作判定手段）５１および表示形態決定部（表示態様変更手段）５２を含む。   The GUI component control unit 42 controls the display of the GUI component according to the input operation information. The GUI component control unit 42 includes an input operation determination unit (input operation determination unit) 51 and a display mode determination unit (display mode change unit) 52.

入力操作判定部５１は、入力操作特定部４１が特定した入力操作情報を用いて、当該入力操作が、アプリケーションの制御のための所定の操作（第１の入力操作）と方向が異なる第２の入力操作であるかを判定する。具体的には、入力操作判定部５１は、予めＧＵＩ部品制御部４２に供給されている、第１の入力操作および第２の入力操作を判別するための情報に基づいて、特定された入力操作情報の入力操作が第１の入力操作あるいは第２の入力操作に該当するかを判定する。そして、入力操作判定部５１は、入力操作が第１の入力操作に該当すると判定した場合、入力操作情報をアプリケーション制御部４３に供給する。また、入力操作判定部５１は、入力操作が第２の入力操作に該当すると判定した場合、入力操作情報を表示形態決定部５２に供給する。また、入力操作判定部５１は、入力操作が第１の入力操作にも第２の入力操作にも該当しないと判定した場合、当該入力操作を無効な操作として、処理を終了する。   The input operation determination unit 51 uses the input operation information specified by the input operation specifying unit 41, and the input operation has a direction different from a predetermined operation (first input operation) for controlling the application. It is determined whether it is an input operation. Specifically, the input operation determination unit 51 is specified based on the information for determining the first input operation and the second input operation that are supplied in advance to the GUI component control unit 42. It is determined whether the information input operation corresponds to the first input operation or the second input operation. When the input operation determination unit 51 determines that the input operation corresponds to the first input operation, the input operation determination unit 51 supplies the input operation information to the application control unit 43. The input operation determination unit 51 supplies the input operation information to the display form determination unit 52 when it is determined that the input operation corresponds to the second input operation. When the input operation determination unit 51 determines that the input operation does not correspond to the first input operation or the second input operation, the input operation determination unit 51 sets the input operation as an invalid operation and ends the process.

また、入力操作判定部５１は、上記判定処理の前に、得られた圧力値あるいは移動速度の値が、所定の閾値を超えるか否かを判定してもよい。ここで、所定の閾値を超えた場合、当該所定の閾値を圧力値あるいは移動速度の値とする。一方、所定の閾値を超えない場合、得られた値を圧力値あるいは移動速度の値として使用する。これにより、ＧＵＩ部品の表示は、閾値に応じた変化が最大限の変化となるので、ユーザのメンタルモデルを損なうことなくユーザに操作可能性を示唆することができる。   Further, the input operation determination unit 51 may determine whether or not the obtained pressure value or moving speed value exceeds a predetermined threshold before the determination process. Here, when a predetermined threshold value is exceeded, the predetermined threshold value is set as a pressure value or a moving speed value. On the other hand, when the predetermined threshold value is not exceeded, the obtained value is used as the pressure value or the moving speed value. Thereby, since the change according to the threshold value is the maximum change in the display of the GUI component, it is possible to suggest the operability to the user without impairing the user's mental model.

表示形態決定部５２は、表示部３に表示されているＧＵＩ部品の表示の変化を決定する。具体的には、表示形態決定部５２は、入力操作判定部５１から供給された入力操作情報から、当該入力操作情報が示す第２の入力操作に応じたＧＵＩ部品の変化（第２の変化）を特定する。さらに具体的には、例えば、入力操作情報が、図２の（ｅ）（ｆ）に示すような、ノブ２２の下半分に指示体２０が接触する操作の場合、ノブ２２の下端を水平面２４に近づくように傾ける変化をＧＵＩ部品２１の変化と特定する。また、表示形態決定部５２は、ＧＵＩ部品の第２の変化の情報を表示制御部４４に供給する。   The display form determination unit 52 determines a change in display of the GUI component displayed on the display unit 3. Specifically, from the input operation information supplied from the input operation determination unit 51, the display form determination unit 52 changes the GUI component according to the second input operation indicated by the input operation information (second change). Is identified. More specifically, for example, when the input operation information is an operation in which the indicator 20 contacts the lower half of the knob 22 as shown in (e) and (f) of FIG. A change that is tilted so as to approach is specified as a change in the GUI component 21. Further, the display form determination unit 52 supplies information on the second change of the GUI component to the display control unit 44.

また、表示形態決定部５２は、圧力値あるいは移動速度の値に応じて、ＧＵＩ部品の表示を変化させてもよい。例えば、ＧＵＩ部品が、図２のＧＵＩ部品２１である場合、圧力値の値に応じてノブ２２の傾きを大きくしてもよい。さらに、表示形態決定部５２は、入力操作特定部４１から、指示体２０が入力部２から離れた旨を通知されたとき、表示制御部４４に指示して、タッチされていない状態のＧＵＩ部品を表示部３に表示させる。   The display form determination unit 52 may change the display of the GUI component according to the pressure value or the value of the moving speed. For example, when the GUI component is the GUI component 21 of FIG. 2, the inclination of the knob 22 may be increased according to the pressure value. Furthermore, when the display operation determining unit 52 is notified from the input operation specifying unit 41 that the indicator 20 has moved away from the input unit 2, the display form determining unit 52 instructs the display control unit 44 to display a GUI component that is not touched. Is displayed on the display unit 3.

アプリケーション制御部４３は、アプリケーションの制御を行う。具体的には、アプリケーション制御部４３は、入力操作判定部５１から供給された入力操作情報に基づいて、アプリケーションを制御する。例えば、ＧＵＩ部品が、図２のＧＵＩ部品２１である場合、レール２３に対して水平方向のドラッグ操作の入力操作情報を受け、再生している動画の場面を変更する。また、アプリケーション制御部４３は、入力操作情報およびアプリケーションの制御結果に応じて、ＧＵＩ部品の第１の変化を特定する。例えば、ＧＵＩ部品が図２のＧＵＩ部品２１である場合、入力操作情報およびアプリケーションの制御結果に応じて、ノブ２２をレール２３に対して水平方向に移動させる距離を特定する。さらに、アプリケーション制御部４３は、アプリケーションの制御結果およびＧＵＩ部品の第１の変化の情報を表示制御部４４に供給する。なお、アプリケーション制御部４３が制御するアプリケーションは、動画を再生するアプリケーションに限定されない。すなわち、スマートフォン１で利用可能なアプリケーションであれば、どのようなアプリケーションであってもよい。   The application control unit 43 controls the application. Specifically, the application control unit 43 controls the application based on the input operation information supplied from the input operation determination unit 51. For example, when the GUI component is the GUI component 21 of FIG. 2, the input operation information of the drag operation in the horizontal direction with respect to the rail 23 is received, and the scene of the moving image being reproduced is changed. In addition, the application control unit 43 identifies the first change of the GUI component according to the input operation information and the application control result. For example, when the GUI component is the GUI component 21 in FIG. 2, the distance for moving the knob 22 in the horizontal direction with respect to the rail 23 is specified according to the input operation information and the control result of the application. Further, the application control unit 43 supplies the display control unit 44 with the control result of the application and information on the first change of the GUI component. The application controlled by the application control unit 43 is not limited to an application that reproduces a moving image. That is, any application that can be used by the smartphone 1 may be used.

最後に、表示制御部４４は、アプリケーション制御部４３または表示形態決定部５２から送られる表示制御情報に従って表示部３の表示制御を行う。   Finally, the display control unit 44 performs display control of the display unit 3 in accordance with the display control information sent from the application control unit 43 or the display form determination unit 52.

続いて、アプリケーションを起動する処理について説明する。入力操作特定部４１が、入力部２への操作を検出すると、当該入力操作における入力操作情報を特定し、アプリケーション制御部４３に供給する。アプリケーション制御部４３は、入力操作情報に基づいてアプリケーション６１を特定し、読み出す。そして、アプリケーション制御部４３は、アプリケーション６１に基づいてアプリケーションを実行する。   Next, processing for starting an application will be described. When the input operation specifying unit 41 detects an operation on the input unit 2, the input operation information in the input operation is specified and supplied to the application control unit 43. The application control unit 43 identifies and reads the application 61 based on the input operation information. Then, the application control unit 43 executes the application based on the application 61.

このとき、ＧＵＩ部品制御部４２は、アプリケーション６１に対応付けられて記憶部６に格納されている、アプリケーションの操作に用いるＧＵＩ部品の機能や表示を規定した情報（ＧＵＩ部品６２）を読み出す。これにより、ＧＵＩ部品への入力操作が行われたとき、ＧＵＩ部品制御部４２は、第１の入力操作および第２の入力操作を判別することができる。   At this time, the GUI component control unit 42 reads information (GUI component 62) defining the function and display of the GUI component used for the operation of the application, which is stored in the storage unit 6 in association with the application 61. As a result, when an input operation to the GUI component is performed, the GUI component control unit 42 can determine the first input operation and the second input operation.

続いて、図３のフローチャートを参照して、スマートフォン１の処理の流れを説明する。なお、ここでは、ＧＵＩ部品を表示するアプリケーションが起動された後の処理について説明する。   Next, the processing flow of the smartphone 1 will be described with reference to the flowchart of FIG. Here, the processing after the application for displaying the GUI component is started will be described.

まず入力操作特定部４１が入力操作を検出する（Ｓ１）と、入力操作特定部４１は、検出した入力操作の位置を特定し、操作されたＧＵＩ部品を特定する（Ｓ２）。そして、入力操作特定部４１は、入力操作の位置、移動方向、移動速度、移動距離、および、圧力の検出が可能であれば入力操作の圧力値を特定し、これらを含む入力操作情報を生成する（Ｓ３）。また、入力操作特定部４１は、生成した入力操作情報をＧＵＩ部品制御部４２に供給する。   First, when the input operation specifying unit 41 detects an input operation (S1), the input operation specifying unit 41 specifies the position of the detected input operation and specifies the operated GUI component (S2). Then, the input operation specifying unit 41 specifies the pressure value of the input operation if it is possible to detect the position, moving direction, moving speed, moving distance, and pressure of the input operation, and generates input operation information including these (S3). Further, the input operation specifying unit 41 supplies the generated input operation information to the GUI component control unit 42.

次に、入力操作情報として得られた各種数値が閾値を超えるかを判定する（Ｓ４）。具体的には、入力操作判定部５１が、得られた圧力値あるいは移動速度等の値が、所定の閾値を超えるか否かを判定する。これらの値が所定の閾値を超えないと判定された場合（Ｓ４でＮＯ）、入力操作判定部５１は、得られた圧力値あるいは移動速度の値を入力操作情報として使用することを決定する（Ｓ５）。一方、これらの値が所定の閾値を超えると判定された場合（Ｓ４でＹＥＳ）、閾値の値を入力操作情報として使用することを決定する（Ｓ６）。   Next, it is determined whether or not various numerical values obtained as input operation information exceed a threshold value (S4). Specifically, the input operation determination unit 51 determines whether or not a value such as the obtained pressure value or moving speed exceeds a predetermined threshold value. When it is determined that these values do not exceed the predetermined threshold (NO in S4), the input operation determination unit 51 determines to use the obtained pressure value or moving speed value as input operation information ( S5). On the other hand, when it is determined that these values exceed the predetermined threshold value (YES in S4), it is determined to use the threshold value as input operation information (S6).

次に、入力操作判定部５１は、入力操作が所定の第１の入力操作と異なるかを判定する（Ｓ７：入力操作判定ステップ）。具体的には、第１の入力操作を識別するための情報に基づいて、特定された入力操作情報の入力操作が第１の入力操作に該当するかを判定する。検出された入力操作が第１の入力操作と異なる場合（Ｓ７でＹＥＳ）、入力操作判定部５１は、検出された入力操作が第２の入力操作であるかを判定する（Ｓ８）。検出された入力操作が第２の入力操作である場合（Ｓ８でＹＥＳ）、入力操作判定部５１は、検出された入力操作の入力操作情報を表示形態決定部５２に供給する。なお、検出された入力操作が第２の入力操作でない場合（Ｓ８でＮＯ）は、入力操作判定部５１は、当該処理を終了する。   Next, the input operation determination unit 51 determines whether the input operation is different from the predetermined first input operation (S7: input operation determination step). Specifically, based on information for identifying the first input operation, it is determined whether the input operation of the specified input operation information corresponds to the first input operation. When the detected input operation is different from the first input operation (YES in S7), the input operation determination unit 51 determines whether the detected input operation is the second input operation (S8). When the detected input operation is the second input operation (YES in S8), the input operation determination unit 51 supplies the input operation information of the detected input operation to the display form determination unit 52. If the detected input operation is not the second input operation (NO in S8), the input operation determination unit 51 ends the process.

次に、表示形態決定部５２は、ＧＵＩ部品の表示を変更する（Ｓ９：表示様態変更ステップ）。このＧＵＩ部品の変化は、アプリケーションの制御に伴う第１の変化とは異なる第２の変化である。具体的には、表示形態決定部５２は、入力操作判定部５１から供給された入力操作情報から、当該入力操作情報が示す第２の入力操作に応じたＧＵＩ部品の変化（第２の変化）を特定し、特定した第２の変化の情報を表示制御部４４に供給する。そして、表示制御部４４は、表示部３に表示されたＧＵＩ部品に第２の変化を生じさせる。   Next, the display form determination unit 52 changes the display of the GUI component (S9: display state change step). This change of the GUI component is a second change different from the first change accompanying the control of the application. Specifically, from the input operation information supplied from the input operation determination unit 51, the display form determination unit 52 changes the GUI component according to the second input operation indicated by the input operation information (second change). And the specified second change information is supplied to the display control unit 44. Then, the display control unit 44 causes the second change in the GUI component displayed on the display unit 3.

一方、検出された入力操作が第１の入力操作である場合（Ｓ７でＮＯ）、入力操作判定部５１は、入力操作情報をアプリケーション制御部４３に供給する。   On the other hand, when the detected input operation is the first input operation (NO in S7), the input operation determination unit 51 supplies the input operation information to the application control unit 43.

次に、アプリケーション制御部４３は、供給された入力操作情報に応じてアプリケーションを制御し（Ｓ１０：アプリケーション制御ステップ）、ＧＵＩ部品の表示を変更する（Ｓ１０）。このＧＵＩ部品の変化は、アプリケーションの制御に伴う第１の変化である。具体的には、アプリケーション制御部４３が、供給された入力操作情報に基づいて、アプリケーションを制御し、アプリケーションの制御結果および供給された入力操作情報に応じて、上記第１の変化を特定する。そして、アプリケーション制御部４３は、特定した第１の変化の情報を表示制御部４４に供給する。そして、表示制御部４４は、アプリケーションの制御結果およびＧＵＩ部品の変化を表示部３に表示させる。   Next, the application control unit 43 controls the application according to the supplied input operation information (S10: application control step), and changes the display of the GUI component (S10). This change in the GUI component is a first change associated with application control. Specifically, the application control unit 43 controls the application based on the supplied input operation information, and identifies the first change according to the control result of the application and the supplied input operation information. Then, the application control unit 43 supplies the specified first change information to the display control unit 44. Then, the display control unit 44 causes the display unit 3 to display the application control result and the GUI component change.

最後に、指示体２０が入力部２から離れたかを判定する（Ｓ１２）。指示体２０が入力部２から離れた場合（Ｓ１２でＹＥＳ）、入力操作特定部４１が、指示体２０が入力部２から離れたことを特定し、その旨をＧＵＩ部品制御部４２に供給する。そして、ＧＵＩ部品制御部４２（表示形態決定部５２）が、ＧＵＩ部品の変化の情報、具体的には、第１の変化あるいは第２の変化が起こる前のＧＵＩ部品の状態への変化の情報を、表示制御部４４に供給する。表示制御部４４は、ＧＵＩ部品の表示を、変化を起こす前の表示に変更する（Ｓ１３）。   Finally, it is determined whether the indicator 20 has left the input unit 2 (S12). When the indicator 20 is separated from the input unit 2 (YES in S12), the input operation specifying unit 41 specifies that the indicator 20 is separated from the input unit 2, and supplies the fact to the GUI component control unit 42. . Then, the GUI component control unit 42 (display mode determination unit 52) performs information on the change of the GUI component, specifically, information on the change to the state of the GUI component before the first change or the second change occurs. Is supplied to the display control unit 44. The display control unit 44 changes the display of the GUI component to the display before the change occurs (S13).

〔実施形態２〕
本発明の別の実施形態について、図４および図５に基づいて説明すれば、以下のとおりである。実施形態２のスマートフォンの構成は実施形態１のスマートフォンと同様であり、表示するＧＵＩ部品のみが異なる。すなわち、実施形態２のスマートフォンが表示するＧＵＩ部品は、図４の（ａ）に示すように、ダイヤルの形状を有するＧＵＩ部品３１である。よって、以下では、実施形態１と同じ部材については同じ参照符号を付し、実施形態１と異なる内容を中心に説明し、同じ点については説明を省略する。 [Embodiment 2]
Another embodiment of the present invention will be described below with reference to FIGS. 4 and 5. The configuration of the smartphone of the second embodiment is the same as that of the smartphone of the first embodiment, and only the GUI parts to be displayed are different. That is, the GUI component displayed by the smartphone according to the second embodiment is a GUI component 31 having a dial shape as illustrated in FIG. Therefore, in the following, the same members as those in the first embodiment are denoted by the same reference numerals, and the description is focused on the content different from the first embodiment, and the description of the same points is omitted.

図４の（ｂ）に示すように、ＧＵＩ部品３１は、水平面３２上にダイヤル３３および軸３４を備えたイメージとして表示されている。ここで、入力操作特定部４１がダイヤル３３の位置での、軸３４を中心に円を描画するドラッグ操作を特定したとき、入力操作判定部５１は、当該操作をＧＵＩ部品３１の第１の入力操作と判定する。すなわち、ＧＵＩ部品３１は、実施形態１に係るＧＵＩ部品２１と異なり、当該円を描画するドラッグ操作がアプリケーションを制御するための第１の入力操作である。よって、指示体２０が直線的な軌跡でダイヤル３３に達する操作および指示体２０がダイヤル３３の位置に接触する操作が、第２の入力操作として利用できる。   As shown in FIG. 4B, the GUI component 31 is displayed as an image having a dial 33 and a shaft 34 on a horizontal plane 32. Here, when the input operation specifying unit 41 specifies a drag operation for drawing a circle around the axis 34 at the position of the dial 33, the input operation determining unit 51 performs the operation on the first input of the GUI component 31. Judge as operation. That is, unlike the GUI component 21 according to the first embodiment, the GUI component 31 is a first input operation for controlling the application by a drag operation for drawing the circle. Therefore, an operation in which the indicator 20 reaches the dial 33 along a linear locus and an operation in which the indicator 20 contacts the position of the dial 33 can be used as the second input operation.

つまり、入力操作特定部４１が、ＧＵＩ部品３１の外部からダイヤル３３の位置に達するような直線的なドラッグ操作を特定すると、ＧＵＩ部品制御部４２（表示形態決定部５２）が、ＧＵＩ部品３１が傾く表示の変化を特定する。これにより、図４の（ｃ）および（ｄ）に示すように、ＧＵＩ部品３１においてダイヤル３３が傾く表示の変化（第２の変化）が生じる。なお、実施形態１と異なり、ダイヤル３３に達する直線的なドラッグ操作であれば、当該ドラッグ操作の移動方向はどの方向でもよい。すなわち、本実施形態においては、指の移動方向に応じて傾いたＧＵＩ部品３１を、表示部３に表示することができる。また、入力操作特定部４１が、ダイヤル３３に指示体２０が接触する操作を特定した場合は、表示形態決定部５２が、図４の（ｅ）および（ｆ）に示すような、ＧＵＩ部品３１が傾く表示の変化を特定する。   That is, when the input operation specifying unit 41 specifies a linear drag operation that reaches the position of the dial 33 from the outside of the GUI component 31, the GUI component control unit 42 (display form determining unit 52) Identify tilted display changes. As a result, as shown in FIGS. 4C and 4D, a display change (second change) occurs in which the dial 33 is inclined in the GUI component 31. Unlike the first embodiment, the direction of movement of the drag operation may be any direction as long as the drag operation reaches the dial 33. That is, in the present embodiment, the GUI component 31 tilted according to the finger moving direction can be displayed on the display unit 3. When the input operation specifying unit 41 specifies an operation in which the indicator 20 contacts the dial 33, the display form determining unit 52 uses the GUI component 31 as shown in (e) and (f) of FIG. Identify the display change that tilts.

以上より、本実施形態において、スマートフォン１は、ＧＵＩ部品３１が円を描画するドラッグ操作を受け付けたとき、アプリケーションを通常どおり制御する。そのため、ＧＵＩ部品３１の外部からダイヤル３３の位置に達するような直線的なドラッグ操作であれば、方向を問わず操作可能性を示唆するための操作として利用できる。また、実施形態１と同様に、ダイヤル３３へ指示体２０が接触する操作も、操作可能性を示す表示変化を誘起するための操作として利用できる。   As described above, in the present embodiment, the smartphone 1 controls the application as usual when the GUI component 31 receives a drag operation for drawing a circle. Therefore, a linear drag operation that reaches the position of the dial 33 from the outside of the GUI component 31 can be used as an operation for suggesting the possibility of operation regardless of the direction. Similarly to the first embodiment, an operation in which the indicator 20 contacts the dial 33 can also be used as an operation for inducing a display change indicating the operation possibility.

〔変形例〕
本実施形態のＧＵＩ部品は、例えば図５の（ａ）に示すようなＧＵＩ部品７１であってもよい。図５の（ｂ）に示すように、ＧＵＩ部品７１は、水平面７２上に、棒７３、棒７４、および軸７５を備えたイメージとして表示されているＧＵＩ部品である。ＧＵＩ部品７１におけるアプリケーションを制御するための操作は、ＧＵＩ部品３１と同様の操作である。 [Modification]
The GUI component of the present embodiment may be a GUI component 71 as shown in FIG. As shown in FIG. 5B, the GUI part 71 is a GUI part displayed as an image including a bar 73, a bar 74, and a shaft 75 on the horizontal plane 72. The operation for controlling the application in the GUI component 71 is the same as that in the GUI component 31.

一方、図５の（ｃ）〜（ｆ）に示すような操作、すなわちＧＵＩ部品７１の外部から棒７３あるいは棒７４の位置に達するような直線的なドラッグ操作、あるいは棒７３あるいは棒７４へ指示体２０が接触する操作を入力操作特定部４１が第２の入力操作として特定し、棒７３あるいは棒７４が傾く変化を、表示形態決定部５２がＧＵＩ部品７１の表示の第２の変化として特定する。   On the other hand, an operation as shown in FIGS. 5C to 5F, that is, a linear drag operation to reach the position of the rod 73 or 74 from the outside of the GUI component 71, or an instruction to the rod 73 or 74 The operation that the body 20 contacts is specified as the second input operation by the input operation specifying unit 41, and the change in which the rod 73 or 74 is tilted is specified as the second change in the display of the GUI component 71 by the display form determining unit 52. To do.

以上のように、本実施形態におけるＧＵＩ部品は、軸を中心として円を描画するドラッグ操作によってアプリケーションを制御するものであれば特に限定されない。例えば、ＧＵＩ部品３１において、ダイヤル３３の形状が変更されてもよいし、ＧＵＩ部品７１において棒の本数が変更されてもよい。   As described above, the GUI component in the present embodiment is not particularly limited as long as the application is controlled by a drag operation for drawing a circle around the axis. For example, the shape of the dial 33 may be changed in the GUI part 31, or the number of bars may be changed in the GUI part 71.

なお、本実施形態におけるＧＵＩ部品３１およびＧＵＩ部品７１は、以下のようにも表現できる。すなわち、ＧＵＩ部品３１あるいはＧＵＩ部品７１に対して仮想の円柱座標系を設定し、ＧＵＩ部品３１およびＧＵＩ部品７１の円周方向への入力操作を、アプリケーションを制御するための第１の入力操作とする。このとき、自由度は２である。具体的には、ＧＩ部品３１およびＧＵＩ部品７１では、円の中心に向かう方向と、ディスプレイ面と直交する方向とが、操作可能性を示すための第２の入力操作を割り当てることができる方向となる。   The GUI component 31 and the GUI component 71 in this embodiment can be expressed as follows. That is, a virtual cylindrical coordinate system is set for the GUI component 31 or the GUI component 71, and the input operation in the circumferential direction of the GUI component 31 and the GUI component 71 is the first input operation for controlling the application. To do. At this time, the degree of freedom is two. Specifically, in the GI component 31 and the GUI component 71, the direction toward the center of the circle and the direction orthogonal to the display surface can be assigned a second input operation for indicating the operation possibility. Become.

〔実施形態３〕
本発明のさらに別の実施形態について、図６および図７に基づいて説明すれば、以下のとおりである。実施形態３のスマートフォンの構成は実施形態１および実施形態２のスマートフォンと同様であり、表示するＧＵＩ部品のみが異なる。すなわち、実施形態３のスマートフォンが表示するＧＵＩ部品は、図６の（ａ）に示すように、矩形状のＧＵＩ部品８１である。よって、以下では、実施形態３と同じ部材については同じ参照符号を付し、実施形態１と異なる内容を中心に説明し、同じ点については説明を省略する。 [Embodiment 3]
Still another embodiment of the present invention will be described below with reference to FIGS. 6 and 7. The configuration of the smartphone according to the third embodiment is the same as that of the smartphone according to the first and second embodiments, and only the displayed GUI parts are different. That is, the GUI component displayed by the smartphone according to the third embodiment is a rectangular GUI component 81 as illustrated in FIG. Therefore, in the following, the same members as those in the third embodiment are denoted by the same reference numerals, and the description is focused on the content different from the first embodiment, and the description of the same points is omitted.

図６の（ｂ）に示すように、ＧＵＩ部品８１は、水平面８２上においてその一端が浮き上がっているイメージとして表示された矩形状のＧＵＩ部品である。ここで、入力操作特定部４１がＧＵＩ部品８１の表示位置と同じ位置から始まるドラッグ操作を特定したとき、入力操作判定部５１は、当該操作をＧＵＩ部品８１に対する第１の入力操作と判定する。すなわち、ＧＵＩ部品８１は、実施形態１および実施形態２に係るＧＵＩ部品と異なり、当該ドラッグ操作がアプリケーションプログラムを実行させるための操作である。よって、ＧＵＩ部品８１に指示体２０がタッチする操作が、第２の入力操作として利用できる。なお、ＧＵＩ部品８１は、その一端が浮き上がっているイメージの矩形状なので、図６の（ａ）に示すように、浮き上がっている箇所に対応する水平面８２の位置には影が表示されている。   As shown in FIG. 6B, the GUI part 81 is a rectangular GUI part displayed as an image in which one end of the GUI part 81 is raised on the horizontal plane 82. Here, when the input operation specifying unit 41 specifies a drag operation starting from the same position as the display position of the GUI component 81, the input operation determining unit 51 determines that the operation is a first input operation for the GUI component 81. That is, the GUI component 81 is an operation for causing the drag operation to execute the application program, unlike the GUI component according to the first and second embodiments. Therefore, the operation in which the indicator 20 touches the GUI component 81 can be used as the second input operation. Since the GUI part 81 has a rectangular shape in which one end of the GUI part 81 is lifted, a shadow is displayed at the position of the horizontal plane 82 corresponding to the floating part, as shown in FIG.

つまり、入力操作特定部４１が、ＧＵＩ部品８１の浮き上がった位置への、指示体２０が接触する操作を特定すると、ＧＵＩ部品制御部（表示形態決定部５２）が、水平面８２に表示されていた影が消える表示の変化を特定する。これにより、図６の（ｃ）および（ｄ）に示すように、ＧＵＩ部品８１において、ＧＵＩ部品８１全体が水平面８２に対して水平となり、水平面８２に表示されていた影が消える表示の変化（第２の変化）が生じる。   That is, when the input operation specifying unit 41 specifies an operation in which the indicator 20 comes into contact with the position where the GUI part 81 is lifted, the GUI part control unit (display form determining unit 52) is displayed on the horizontal plane 82. Identify changes in the display where the shadow disappears. As a result, as shown in FIGS. 6C and 6D, in the GUI part 81, the entire GUI part 81 is horizontal with respect to the horizontal plane 82, and the display change (the shadow displayed on the horizontal plane 82 disappears) ( A second change) occurs.

なお、ＧＵＩ部品８１の浮き上がる箇所は端でなくてもよい。例えば、図６の（ｅ）および（ｆ）に示すように、中央が浮き上がっているように見せてもよい。この場合、入力操作特定部４１が、ＧＵＩ部品８１の浮き上がった位置への、指示体２０が接触する操作を特定すると、ＧＵＩ部品制御部（表示形態決定部５２）が、操作前よりＧＵＩ部品８１の面積が広がる表示の変化を特定する。これにより、図６の（ｇ）および（ｈ）に示すように、ＧＵＩ部品８１において、ＧＵＩ部品８１全体が水平となり、操作前よりＧＵＩ部品８１の面積が広がる表示の変化（第２の変化）が生じる。   The part where the GUI part 81 is lifted up may not be the end. For example, as shown in (e) and (f) of FIG. 6, the center may appear to be raised. In this case, when the input operation specifying unit 41 specifies an operation in which the indicator 20 contacts the position where the GUI component 81 is lifted, the GUI component control unit (display form determining unit 52) starts the GUI component 81 before the operation. Identify changes in display that increase the area of the. As a result, as shown in FIGS. 6G and 6H, in the GUI part 81, the entire GUI part 81 becomes horizontal, and the display changes (second change) in which the area of the GUI part 81 increases before the operation. Occurs.

以上より、本実施形態において、ＧＵＩ部品８１は、ＧＵＩ部品８１に対するドラッグ操作によってアプリケーションを制御する。そのため、ＧＵＩ部品８１へ指示体２０が接触する操作のみが、操作可能性を示す表示変化を誘起するための操作として利用できる。   As described above, in this embodiment, the GUI component 81 controls the application by a drag operation on the GUI component 81. Therefore, only an operation in which the indicator 20 contacts the GUI component 81 can be used as an operation for inducing a display change indicating the operation possibility.

〔変形例〕
本実施形態のＧＵＩ部品は、例えば図７の（ａ）に示すようなＧＵＩ部品９１であってもよい。図７の（ｂ）に示すように、ＧＵＩ部品９１は、枠９３および枠９３よりも大きな画像９２で構成されており、画像９２は枠９３と接触したイメージとして表示されている。なお、枠９３は、スマートフォン１の表示領域の外縁であってもよいし、表示部３に任意の大きさの枠として表示されてもよい。また、画像９２は、スマートフォン１内に格納されている画像であれば特に限定されない。また、ＧＵＩ部品９１に対応づけられたアプリケーションを制御するための操作は、ＧＵＩ部品８１と同様の操作である。 [Modification]
The GUI component of the present embodiment may be a GUI component 91 as shown in FIG. As shown in FIG. 7B, the GUI component 91 is composed of a frame 93 and an image 92 larger than the frame 93, and the image 92 is displayed as an image in contact with the frame 93. The frame 93 may be the outer edge of the display area of the smartphone 1 or may be displayed as a frame of any size on the display unit 3. The image 92 is not particularly limited as long as it is an image stored in the smartphone 1. The operation for controlling the application associated with the GUI component 91 is the same as that for the GUI component 81.

つまり、入力操作特定部４１が、画像９２の領域のうち、枠９３内の領域へ指示体２０が接触する操作を特定すると、ＧＵＩ部品制御部４２（表示形態決定部５２）が、画像９２と枠９３とが非接触となる変化を特定する。これにより、図７の（ｃ）および（ｄ）に示すように、ＧＵＩ部品９１において、画像９２と枠９３とが非接触となる表示の変化（第２の変化）が生じる。   That is, when the input operation specifying unit 41 specifies an operation in which the indicator 20 comes into contact with an area in the frame 93 among the areas of the image 92, the GUI part control unit 42 (display form determining unit 52) A change that makes no contact with the frame 93 is specified. As a result, as shown in FIGS. 7C and 7D, in the GUI component 91, a display change (second change) occurs in which the image 92 and the frame 93 are not in contact with each other.

以上のように、本実施形態におけるＧＵＩ部品は、ＧＵＩ部品からのドラッグ操作によってアプリケーションを制御するものであれば特に限定されない。例えば、ＧＵＩ部品９１の形状が矩形状以外であってもよい。   As described above, the GUI component in the present embodiment is not particularly limited as long as the application is controlled by a drag operation from the GUI component. For example, the shape of the GUI component 91 may be other than a rectangular shape.

なお、本実施形態におけるＧＵＩ部品８１およびＧＵＩ部品９１は、以下のようにも表現できる。すなわち、ＧＵＩ部品８１あるいはＧＵＩ部品９１に対して仮想の３次元座標系を設定し、ＧＵＩ部品８１およびＧＵＩ部品９１のディスプレイ面上の２次元（平面に構築される２次元）方向への入力操作を、アプリケーションを制御するための第１の入力操作とする。このとき、自由度は１である。具体的には、ＧＵＩ部品８１およびＧＵＩ部品９１では、ディスプレイ面と直交する方向への入力操作が、操作可能性を示すための第２の入力操作を割り当てることができる方向となる。   The GUI component 81 and the GUI component 91 in the present embodiment can also be expressed as follows. That is, a virtual three-dimensional coordinate system is set for the GUI component 81 or the GUI component 91, and an input operation in the two-dimensional (two-dimensionally constructed on a plane) direction on the display surface of the GUI component 81 and the GUI component 91 is performed. Is the first input operation for controlling the application. At this time, the degree of freedom is 1. Specifically, in the GUI component 81 and the GUI component 91, the input operation in the direction orthogonal to the display surface is a direction in which the second input operation for indicating the operation possibility can be assigned.

〔ソフトウェアによる実現例〕
スマートフォン１の制御ブロック（特に入力操作特定部４１、ＧＵＩ部品制御部４２、アプリケーション制御部４３、および表示制御部４４）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ＣＰＵを用いてソフトウェアによって実現してもよい。後者の場合、スマートフォン１は、各機能を実現するソフトウェアであるプログラムの命令を実行するＣＰＵ、上記プログラムおよび各種データがコンピュータ（またはＣＰＵ）で読み取り可能に記録されたＲＯＭまたは記憶装置（これらを「記録媒体」と称する）、上記プログラムを展開するＲＡＭなどを備えている。そして、コンピュータ（またはＣＰＵ）が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピュータに供給されてもよい。なお、本発明は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。 [Example of software implementation]
The control blocks of the smartphone 1 (in particular, the input operation specifying unit 41, the GUI component control unit 42, the application control unit 43, and the display control unit 44) are performed by a logic circuit (hardware) formed on an integrated circuit (IC chip) or the like. It may be realized or may be realized by software using a CPU. In the latter case, the smartphone 1 includes a CPU that executes instructions of a program that is software that implements each function, a ROM or a storage device in which the above-described program and various types of data are recorded so as to be readable by a computer (or CPU). The recording medium is called a “recording medium”) and a RAM for developing the program. And the objective of this invention is achieved when a computer (or CPU) reads the said program from the said recording medium and runs it. As the recording medium, a “non-temporary tangible medium” such as a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used. The program may be supplied to the computer via an arbitrary transmission medium (such as a communication network or a broadcast wave) that can transmit the program. The present invention can also be realized in the form of a data signal embedded in a carrier wave in which the program is embodied by electronic transmission.

〔まとめ〕
本発明の態様１に係る情報処理装置（スマートフォン１）は、指示体による入力操作を受け付ける操作部（入力部２）と、上記指示体の移動を伴う所定の第１の入力操作を受け付けて、表示に所定の第１の変化を生じるグラフィック要素を表示する表示部（３）と、上記所定の第１の入力操作に対応付けられた所定の処理をアプリケーションに対して実行するアプリケーション制御手段（アプリケーション制御部４３）と、を備えた情報処理装置であって、上記操作部を介した上記入力操作を検知し、上記検知した入力操作が、上記第１の入力操作と方向が異なり、かつ上記所定の処理に対応付けられていない第２の入力操作であるかどうかを特定する入力操作判定手段（入力操作判定部５１）と、上記入力操作判定手段によって特定された第２の入力操作に基づいて上記グラフィック要素の表示に上記第１の変化と異なる第２の変化を生じさせる表示様態変更手段（表示形態決定部５２）と、を備えている。 [Summary]
The information processing apparatus (smart phone 1) according to aspect 1 of the present invention receives an operation unit (input unit 2) that receives an input operation by an indicator, and a predetermined first input operation that involves movement of the indicator, A display unit (3) for displaying a graphic element that causes a predetermined first change in display, and application control means (application for executing predetermined processing associated with the predetermined first input operation on the application Control unit 43), detecting the input operation via the operation unit, the detected input operation having a direction different from the first input operation, and the predetermined The input operation determination means (input operation determination unit 51) for specifying whether or not the second input operation is not associated with the process, and the input operation determination means It includes a display manner changing means for producing a second change different from the first change to the display of the graphic elements on the basis of the second input operation (display type determining unit 52), the.

また、本発明の態様１に係る情報処理装置の制御方法は、指示体による入力操作を受け付ける操作部と、上記指示体の移動を伴う所定の第１の入力操作を受け付けて、表示に所定の第１の変化を生じるグラフィック要素を表示する表示部と、を備え、上記所定の第１の入力操作に対応付けられた所定の処理をアプリケーションに対して実行するアプリケーション制御ステップ（Ｓ１０）を含む情報処理装置の制御方法であって、上記操作部を介した上記入力操作を検知し、上記検知した入力操作が、上記第１の入力操作と方向が異なり、かつ上記所定の処理に対応付けられていない第２の入力操作であるかどうかを特定する入力操作判定ステップ（Ｓ７）と、上記入力操作判定ステップにて特定された第２の入力操作に基づいて上記グラフィック要素の表示に上記第１の変化と異なる第２の変化を生じさせる表示様態変更ステップ（Ｓ９）と、を含む。   In addition, the control method of the information processing apparatus according to aspect 1 of the present invention includes an operation unit that receives an input operation by an indicator and a predetermined first input operation that involves the movement of the indicator, A display unit that displays a graphic element that causes a first change, and includes an application control step (S10) that executes a predetermined process associated with the predetermined first input operation on the application. A control method for a processing apparatus, wherein the input operation via the operation unit is detected, and the detected input operation has a direction different from that of the first input operation and is associated with the predetermined process. An input operation determination step (S7) for specifying whether the second input operation is not present, and the graphic operation based on the second input operation specified in the input operation determination step. It includes a display manner changing step generating display different second change from the first change to the click element and (S9), the.

上記の構成によれば、検知した入力操作が第１の入力操作と方向が異なり、アプリケーションに対する所定の処理に対応付けられていない第２の入力操作である場合、第２の入力操作に基づいてグラフィック要素の表示に第１の変化と異なる第２の変化を生じさせる。これにより、ユーザは移動を伴う所定の第１の入力操作（移動操作）を行わずに、グラフィック要素の操作可能性、すなわちグラフィック要素への入力が可能か否かを認識することができる。よって、ユーザが望まない処理がアプリケーションに対して実行されることがないので、グラフィック要素に対してアプリケーションの処理を実行するための移動操作を行わずに、その操作可能性をユーザに認識させることができる。   According to the above configuration, when the detected input operation is a second input operation that has a different direction from the first input operation and is not associated with a predetermined process for the application, based on the second input operation. A second change different from the first change is caused in the display of the graphic element. As a result, the user can recognize whether or not the graphic element can be operated, that is, whether or not the graphic element can be input, without performing a predetermined first input operation (moving operation) involving movement. Therefore, since processing that is not desired by the user is not executed on the application, the user can recognize the operability without performing a moving operation for executing processing on the graphic element. Can do.

本発明の態様２に係る情報処理装置は、上記態様１において、上記第２の変化は、グラフィック要素のサイズおよび色の少なくとも一方を維持し、かつグラフィック要素の表示位置、あるいは三次元的な表示様態の変化を生じさせるものであってもよい。   In the information processing apparatus according to aspect 2 of the present invention, in the aspect 1, the second change maintains at least one of the size and color of the graphic element, and the display position of the graphic element or three-dimensional display It may be one that causes a change in appearance.

上記の構成によれば、上記第２の変化は、グラフィック要素の表示状態を大きく変えることがない。これにより、グラフィック要素のレイアウトを含む表示の同一性を維持できるので、ユーザが情報処理装置を操作しているときの画面認知または操作意識（メンタルモデル）の連続性を壊すことなく、ユーザにグラフィック要素の操作可能性を認識させることができる。   According to the above configuration, the second change does not greatly change the display state of the graphic element. As a result, it is possible to maintain the same display including the layout of graphic elements, so it is possible to display graphics to the user without breaking the continuity of screen recognition or operation awareness (mental model) when the user operates the information processing device. Recognize the operability of elements.

本発明の態様３に係る情報処理装置は、上記態様１または２において、上記特定された第２の入力操作を上記入力操作判定手段が検知しなくなったとき、上記表示様態変更手段は、上記第２の変化を生じさせたグラフィック要素の表示を、変化前の表示に戻してもよい。   In the information processing apparatus according to aspect 3 of the present invention, when the input operation determination unit no longer detects the specified second input operation in the aspect 1 or 2, the display state change unit The display of the graphic element that caused the change of 2 may be returned to the display before the change.

上記の構成によれば、第２の入力操作を検知しなくなったとき、グラフィック要素の表示を第２の変化前の表示に戻す。これにより、操作可能性を認識した後も、ユーザはメンタルモデルを維持した状態でアプリケーションを利用できる。   According to the above configuration, when the second input operation is no longer detected, the display of the graphic element is returned to the display before the second change. Thereby, even after recognizing the operability, the user can use the application while maintaining the mental model.

本発明の態様４に係る情報処理装置は、上記態様１から３の何れかにおいて、上記入力操作判定手段は、検知された上記第２の入力操作の圧力あるいは移動速度が所定の閾値を超えるか否かを判定し、上記圧力あるいは移動速度が所定の閾値を超える場合、上記所定の閾値を上記圧力あるいは移動速度の値として、上記表示様態変更手段へ出力してもよい。   The information processing apparatus according to aspect 4 of the present invention is the information processing apparatus according to any one of the aspects 1 to 3, wherein the input operation determination unit determines whether the detected pressure or moving speed of the second input operation exceeds a predetermined threshold value. If the pressure or moving speed exceeds a predetermined threshold value, the predetermined threshold value may be output to the display mode changing means as the pressure or moving speed value.

上記の構成によれば、入力操作の圧力あるいは移動速度が所定の閾値を超えたときは、所定の閾値を圧力あるいは移動速度の値として表示様態変更手段へ出力する。これにより、表示様態変更手段は、第２の変化の変化量を上記閾値に対応させて制限することができる。この結果、ユーザが必要以上に高い圧力あるいは速い移動速度で第２の入力操作を行った場合でも、グラフィック要素が大きく変化することはない。よって、グラフィック要素の表示の同一性を維持しながら、ユーザのメンタルモデルを損なうことなく、ユーザに操作可能性を認識させることができる。   According to the above configuration, when the pressure or moving speed of the input operation exceeds a predetermined threshold value, the predetermined threshold value is output to the display mode changing means as the pressure or moving speed value. Thereby, the display mode changing means can limit the change amount of the second change in correspondence with the threshold value. As a result, even when the user performs the second input operation at an unnecessarily high pressure or a high moving speed, the graphic element does not change greatly. Therefore, it is possible to make the user recognize the operability without damaging the mental model of the user while maintaining the same display of the graphic elements.

本発明の各態様に係る情報処理装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記情報処理装置が備える各手段として動作させることにより上記情報処理装置をコンピュータにて実現させる情報装置の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。   The information processing apparatus according to each aspect of the present invention may be realized by a computer. In this case, the information processing apparatus is realized by the computer by causing the computer to operate as each unit included in the information processing apparatus. An information device control program and a computer-readable recording medium on which the control program is recorded also fall within the scope of the present invention.

本発明は上記各実施形態に限定されない。また、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態に開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。   The present invention is not limited to the above embodiments. Various modifications can be made within the scope of the claims, and embodiments obtained by appropriately combining technical means disclosed in different embodiments are also included in the technical scope of the present invention. Furthermore, a new technical feature can be formed by combining the technical means disclosed in each embodiment.

本発明は、指示体の移動を伴う所定の入力操作を受け付けて所定の変化を生じるグラフィック要素を表示できる情報処理装置に適用することができる。特に、スマートフォン、タブレットＰＣ、ＰＤＡ（Personal Digital Assistant）などの情報処理装置に好適に用いることができる。   The present invention can be applied to an information processing apparatus that can receive a predetermined input operation accompanied by movement of a pointer and display a graphic element that causes a predetermined change. In particular, it can be suitably used for information processing apparatuses such as smartphones, tablet PCs, and PDAs (Personal Digital Assistants).

１ スマートフォン（情報処理装置）
２ 入力部（操作部）
３ 表示部
５１ 入力操作判定部（入力操作判定手段）
５２ 表示形態決定部（表示様態変更手段）
４３ アプリケーション制御部（アプリケーション制御手段） 1 Smartphone (information processing device)
2 Input unit (operation unit)
3 Display Unit 51 Input Operation Determination Unit (Input Operation Determination Unit)
52. Display mode determining unit (display mode changing means)
43 Application control unit (application control means)

Claims (5)

指示体による入力操作を受け付ける操作部と、上記指示体の移動を伴う所定の第１の入力操作を受け付けて、表示に所定の第１の変化を生じるグラフィック要素を表示する表示部と、上記所定の第１の入力操作に対応付けられた所定の処理をアプリケーションに対して実行するアプリケーション制御手段と、を備えた情報処理装置であって、
上記操作部を介した上記入力操作を検知し、上記検知した入力操作が、上記第１の入力操作と方向が異なり、かつ上記所定の処理に対応付けられていない第２の入力操作であるかどうかを特定する入力操作判定手段と、
上記入力操作判定手段によって特定された第２の入力操作に基づいて、上記グラフィック要素の表示に上記第１の変化と異なる第２の変化を生じさせる表示様態変更手段と、を備えていることを特徴とする情報処理装置。 An operation unit that receives an input operation by an indicator, a display unit that receives a predetermined first input operation accompanied by movement of the indicator and displays a graphic element that causes a predetermined first change in display, and the predetermined unit An information processing apparatus comprising: application control means for executing predetermined processing associated with the first input operation on the application;
Whether the input operation via the operation unit is detected, and whether the detected input operation is a second input operation that has a different direction from the first input operation and is not associated with the predetermined process. Input operation determination means for specifying whether or not,
Display mode change means for causing a second change different from the first change in the display of the graphic element based on the second input operation specified by the input operation determination means. A characteristic information processing apparatus. 上記第２の変化は、グラフィック要素のサイズおよび色の少なくとも一方を維持し、かつグラフィック要素の表示位置、あるいは三次元的な表示様態の変化を生じさせるものであることを特徴とする請求項１に記載の情報処理装置。   2. The second change is characterized in that at least one of a size and a color of a graphic element is maintained, and a change in a display position of the graphic element or a three-dimensional display mode is caused. The information processing apparatus described in 1. 上記特定された第２の入力操作を上記入力操作判定手段が検知しなくなったとき、上記表示様態変更手段は、上記第２の変化を生じさせたグラフィック要素の表示を、変化前の表示に戻すことを特徴とする請求項１または２に記載の情報処理装置。   When the input operation determining unit no longer detects the specified second input operation, the display mode changing unit returns the display of the graphic element causing the second change to the display before the change. The information processing apparatus according to claim 1, wherein the information processing apparatus is an information processing apparatus. 上記入力操作判定手段は、検知された上記第２の入力操作の圧力あるいは移動速度が所定の閾値を超えるか否かを判定し、
上記圧力あるいは移動速度が所定の閾値を超える場合、上記所定の閾値を上記圧力あるいは移動速度の値として、上記表示様態変更手段へ出力することを特徴とする請求項１から３の何れか１項に記載の情報処理装置。 The input operation determination means determines whether the detected pressure or moving speed of the second input operation exceeds a predetermined threshold value,
4. If the pressure or moving speed exceeds a predetermined threshold value, the predetermined threshold value is output to the display mode changing means as the pressure or moving speed value. The information processing apparatus described in 1. 指示体による入力操作を受け付ける操作部と、上記指示体の移動を伴う所定の第１の入力操作を受け付けて、表示に所定の第１の変化を生じるグラフィック要素を表示する表示部と、を備え、上記所定の第１の入力操作に対応付けられた所定の処理をアプリケーションに対して実行するアプリケーション制御ステップを含む情報処理装置の制御方法であって、
上記操作部を介した上記入力操作を検知し、上記検知した入力操作が、上記第１の入力操作と方向が異なり、かつ上記所定の処理に対応付けられていない第２の入力操作であるかどうかを特定する入力操作判定ステップと、
上記入力操作判定ステップにて特定された第２の入力操作に基づいて、上記グラフィック要素の表示に上記第１の変化と異なる第２の変化を生じさせる表示様態変更ステップと、を含むことを特徴とする情報処理装置の制御方法。 An operation unit that receives an input operation by an indicator, and a display unit that receives a predetermined first input operation accompanied by the movement of the indicator and displays a graphic element that causes a predetermined first change in display. An information processing apparatus control method including an application control step of executing a predetermined process associated with the predetermined first input operation on an application,
Whether the input operation via the operation unit is detected, and whether the detected input operation is a second input operation that has a different direction from the first input operation and is not associated with the predetermined process. An input operation determination step for specifying whether or not,
A display mode changing step for causing a second change different from the first change in the display of the graphic element based on the second input operation specified in the input operation determining step. A method for controlling the information processing apparatus.
JP2013049585A 2013-03-12 2013-03-12 Information processor and control method Pending JP2014174926A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013049585A JP2014174926A (en) 2013-03-12 2013-03-12 Information processor and control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013049585A JP2014174926A (en) 2013-03-12 2013-03-12 Information processor and control method

Publications (1)

Publication Number Publication Date
JP2014174926A true JP2014174926A (en) 2014-09-22

Family

ID=51696044

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013049585A Pending JP2014174926A (en) 2013-03-12 2013-03-12 Information processor and control method

Country Status (1)

Country Link
JP (1) JP2014174926A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015207036A (en) * 2014-04-17 2015-11-19 日本電信電話株式会社 user interface component control device and user interface component control program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010028364A (en) * 2008-07-17 2010-02-04 Nikon Systems Inc Image capturing apparatus
JP2011048686A (en) * 2009-08-27 2011-03-10 Kyocera Corp Input apparatus
JP2012018535A (en) * 2010-07-07 2012-01-26 Sony Corp Information processing device, information processing method and program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010028364A (en) * 2008-07-17 2010-02-04 Nikon Systems Inc Image capturing apparatus
JP2011048686A (en) * 2009-08-27 2011-03-10 Kyocera Corp Input apparatus
JP2012018535A (en) * 2010-07-07 2012-01-26 Sony Corp Information processing device, information processing method and program

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
""静止画を撮影する"", ＡＱＵＯＳケータイ ９４１ＳＨ 取扱説明書, JPN6017001806, 30 November 2009 (2009-11-30), JP, pages 8 - 5, ISSN: 0003484644 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015207036A (en) * 2014-04-17 2015-11-19 日本電信電話株式会社 user interface component control device and user interface component control program

Similar Documents

Publication Publication Date Title
US10126914B2 (en) Information processing device, display control method, and computer program recording medium
US9367238B2 (en) Terminal apparatus and input correction method
US8860730B2 (en) Information processing apparatus, animation method, and program
US8633909B2 (en) Information processing apparatus, input operation determination method, and input operation determination program
US20140292697A1 (en) Portable terminal having double-sided touch screens, and control method and storage medium therefor
JP2015035092A (en) Display controller and method of controlling the same
US20140223298A1 (en) Method of editing content and electronic device for implementing the same
JP2015176558A (en) Information processing device and computer program
JP5628991B2 (en) Display device, display method, and display program
KR20140082434A (en) Method and apparatus for displaying screen in electronic device
JP2014182652A (en) Information processor and method for controlling the same and program
JP2014146127A (en) Information processing device, information processing method, and program
JP6566767B2 (en) Information processing apparatus, information processing apparatus control method, computer program, and storage medium
WO2013047023A1 (en) Display apparatus, display method, and program
JP6197559B2 (en) Object operation system, object operation control program, and object operation control method
JP6294597B2 (en) Information display device, program, recording medium, and information display method
JP2014174926A (en) Information processor and control method
JP2015114975A (en) Electronic device and display method
JP2013196564A (en) Touch-panel input device, touch panel sensitivity control device, touch panel sensitivity control method and touch panel sensitivity control program
JP2014182497A (en) Information display unit
US10712872B2 (en) Input apparatus and program
JP6093635B2 (en) Information processing device
JPWO2014147718A1 (en) Electronic device, display control method and program
JP6282876B2 (en) Information processing device
JP2014130449A (en) Information processor and control method therefor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150916

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160715

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160726

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160921

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170131