JP5539415B2 - Information processing apparatus and program - Google Patents

Information processing apparatus and program Download PDF

Info

Publication number
JP5539415B2
JP5539415B2 JP2012008925A JP2012008925A JP5539415B2 JP 5539415 B2 JP5539415 B2 JP 5539415B2 JP 2012008925 A JP2012008925 A JP 2012008925A JP 2012008925 A JP2012008925 A JP 2012008925A JP 5539415 B2 JP5539415 B2 JP 5539415B2
Authority
JP
Japan
Prior art keywords
item
display
candidate
image
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2012008925A
Other languages
Japanese (ja)
Other versions
JP2012074089A (en
Inventor
克彦 梅津
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2012008925A priority Critical patent/JP5539415B2/en
Publication of JP2012074089A publication Critical patent/JP2012074089A/en
Application granted granted Critical
Publication of JP5539415B2 publication Critical patent/JP5539415B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明はタッチされた位置の検出が同時に複数可能な入力検知部と、表示部とを備えた情報処理装置等に関するものである。   The present invention relates to an information processing apparatus including an input detection unit capable of simultaneously detecting a touched position and a display unit.

従来から、情報処理装置において様々な入力方法が提案されている。利用者が情報処理装置において行う入力方法には、キー入力を利用したものや、タッチパネルを利用したものが知られている。これらの入力操作は、文字等の文章を入力する場合の他に、機能を選択する場合に行われたり、入退室や決済時に暗証番号等を入力することにより認証が行われたりする場合にも利用されている。   Conventionally, various input methods have been proposed in information processing apparatuses. As an input method performed by the user in the information processing apparatus, a method using key input or a method using a touch panel is known. These input operations are performed not only when entering text such as text, but also when selecting a function, or when authentication is performed by entering a PIN number during entry / exit or settlement. It's being used.

例えば、利用者がキーを利用して認証をする場合、一つずつキー入力をする方法の他に複数のキー入力を行う方法が提案されている(例えば、特許文献1参照)。複数のキー操作によって認証を行うことから、一つずつキー入力をするよりセキュリティ強度を強くすることが出来る。   For example, when a user performs authentication using a key, a method of performing a plurality of key inputs in addition to a method of performing key input one by one has been proposed (for example, see Patent Document 1). Since authentication is performed by operating a plurality of keys, it is possible to increase the security strength compared to inputting keys one by one.

特開2008−152757号公報JP 2008-152757 A

近年、入力デバイスとして様々な装置が提供されている。ここで、従前からあるタッチパネルを発展させたものとして、光センサを内蔵したシステム液晶と呼ばれるものがある。   In recent years, various apparatuses have been provided as input devices. Here, as a development of a conventional touch panel, there is a so-called system liquid crystal with a built-in optical sensor.

ここで、光センサを内蔵したシステム液晶について、図を用いて簡単に説明する。まず、システム液晶D80の概要を図19にしめす。システム液晶D80は、表示信号による表示装置の機能と、読み取り信号による入力装置の機能とを実現する。システム液晶D80を画素単位に拡大して記載したのがD82であり、画素(D90)毎に光センサが内蔵されており、利用者からの操作(タッチ)を検知できる。   Here, the system liquid crystal incorporating the optical sensor will be briefly described with reference to the drawings. First, an outline of the system liquid crystal D80 is shown in FIG. The system liquid crystal D80 realizes a display device function based on a display signal and an input device function based on a read signal. The system liquid crystal D80 is described in an enlarged manner in units of pixels, and is D82, and an optical sensor is built in each pixel (D90), and an operation (touch) from the user can be detected.

図20は、システム液晶の1画素分の断面図である。システム液晶の上面(利用者がタッチする側)から保護板D902、ガラス板D904、カラーフィルタD906、撮像素子D908、ガラス板D910、バックライトD912が配置されている。また、カラーフィルタD906は、RGB色として、赤色のD906R、緑色のD906G及び青色のD906Bが配置されており、各色毎に撮像素子が配置されている。   FIG. 20 is a cross-sectional view of one pixel of the system liquid crystal. A protective plate D902, a glass plate D904, a color filter D906, an image sensor D908, a glass plate D910, and a backlight D912 are arranged from the upper surface of the system liquid crystal (the side touched by the user). In the color filter D906, red D906R, green D906G, and blue D906B are arranged as RGB colors, and an image sensor is arranged for each color.

まず、表示用のバックライトD912から光が照射される。照射された光は、システム液晶の表示面(保護板D902)に接触されている被写体(利用者の指D84)で反射される。反射された光は、撮像素子D908により画像処理が施される。これにより、被写体が、システム液晶の表示面(保護板D902)に接触されたこと(タッチ)が検出されることとなる。   First, light is emitted from the display backlight D912. The irradiated light is reflected by the subject (user's finger D84) in contact with the display surface (protection plate D902) of the system liquid crystal. The reflected light is subjected to image processing by the image sensor D908. As a result, it is detected that the subject has touched (touched) the display surface (protection plate D902) of the system liquid crystal.

そして、画素毎に設置された撮像素子により画像処理が施されるため、複数の被写体の接触位置(座標)を検出することができる。すなわち、従前のタッチパネル(例えば、抵抗膜を利用したタッチパネルや、静電容量の変化を利用したタッチパネル、電磁誘導を利用したタッチパネル等)は、タッチした位置として検知できる箇所は1つであったが、上述のシステム液晶を利用したタッチパネルはタッチした位置を複数同時に検出することができる。   Since image processing is performed by an image sensor installed for each pixel, it is possible to detect contact positions (coordinates) of a plurality of subjects. That is, a conventional touch panel (for example, a touch panel using a resistive film, a touch panel using a change in capacitance, a touch panel using electromagnetic induction, etc.) has a single location that can be detected as a touched position. The touch panel using the system liquid crystal described above can simultaneously detect a plurality of touched positions.

したがって、システム液晶を利用したタッチパネルを利用して、表示された画像、数字、文字、記号等の候補となる項目(候補項目)を表示して利用者に選択させる場合、複数の項目を選択させるといった利用方法が考えられる。   Accordingly, when displaying a candidate item (candidate item) such as a displayed image, number, character, symbol, and the like using a touch panel using a system liquid crystal, the user is allowed to select a plurality of items. The usage method is considered.

この場合、表示される候補項目は通常表示領域(システム液晶)の任意の位置に表示されることとなる。しかし、表示された候補項目のうち、利用者が選択しようとする候補項目が必ずしも選択しやすい位置に候補となる項目が表示されるとは限らないという問題点があった。   In this case, the displayed candidate item is displayed at an arbitrary position in the normal display area (system liquid crystal). However, among the displayed candidate items, there is a problem in that candidate items are not always displayed at positions where the candidate items to be selected by the user can be easily selected.

例えば、表示された画像の中から利用者が選択して正当な利用者であることを認証する認証システムについて考える。この場合、利用者がタッチにより、認証する画像を選択することとなる。ここで、利用者は認証をするために、複数の画像を選択するが、画像の表示位置によっては、選択しにくい(タッチしにくい)場合が生じてしまう。具体的には、利用者が人差し指と薬指を使ってタッチした後に次の項目をタッチする場合、残った指が届く範囲に所望する項目が必ず表示されているとは限らなかった。したがって、利用者は、一度タッチした状態を解除し、もう一度選択し直すといった必要があった。   For example, consider an authentication system in which a user selects from displayed images and authenticates that the user is a valid user. In this case, the user selects an image to be authenticated by touching. Here, the user selects a plurality of images for authentication, but depending on the display position of the images, there are cases where it is difficult to select (touch). Specifically, when the user touches the next item after touching with the index finger and the ring finger, the desired item is not always displayed within the reach of the remaining finger. Therefore, the user needs to cancel the touched state and select again.

また、メニューを選択する場合についても、利便性が高いシステムが提供されているとは言えなかった。一例として、ユーザが親階層のメニュー項目を選択すると、子階層のメニューが展開され表示されるシステムがある。   In addition, when selecting a menu, it cannot be said that a highly convenient system is provided. As an example, there is a system in which when a user selects a menu item in the parent hierarchy, a menu in the child hierarchy is expanded and displayed.

しかし、子階層のメニューが必ずしも一画面に収まって表示されるとは限らない。したがって、子階層のメニューの表示を切り替える必要があるが、そのためには別途スクロール操作等を行う必要があり、使い勝手の良い情報処理装置とは言えなかった。   However, the menu of the child hierarchy is not always displayed on one screen. Therefore, it is necessary to switch the display of the menu of the child hierarchy, but for that purpose, it is necessary to separately perform a scroll operation or the like, and it cannot be said that the information processing apparatus is easy to use.

上述した課題に鑑み、本発明が目的としているところは、項目を選択する場合に、選択されていない候補の項目の表示状態を変化させることにより、利用者にとって利便性の高い情報処理装置等を提供することである。   In view of the above-described problems, an object of the present invention is to provide an information processing apparatus that is highly convenient for the user by changing the display state of candidate items that are not selected when selecting an item. Is to provide.

上述した課題に鑑み、本発明の情報処理装置は、
タッチされた位置の検出が同時に複数可能な入力検知部(例えば、図2の入力検知部154)と、表示部(例えば、図2の表示部152)とを備えた情報処理装置において、
前記表示部に複数の候補項目をランダムに作成して表示する制御を行う候補項目表示制御部(例えば、図2の制御部100;図5のステップS150)と、
前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から選択項目を選択する項目選択部(例えば、図2の制御部100;図5のステップS152、S154)と、
前記項目選択部により、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目から次の選択項目が選択される迄の間、前記選択項目以外の候補項目を、当該候補項目の表示位置と異なる位置に繰り返し変更して表示する制御を行う表示変更制御部(例えば、図2の制御部100;図5のステップS156、S158)と、
を備えることを特徴とする。
In view of the above-described problems, the information processing apparatus of the present invention
In an information processing apparatus including an input detection unit (for example, the input detection unit 154 in FIG. 2) capable of simultaneously detecting a touched position and a display unit (for example, the display unit 152 in FIG. 2),
A candidate item display control unit (for example, the control unit 100 in FIG. 2; step S150 in FIG. 5) that performs control to randomly generate and display a plurality of candidate items on the display unit;
While a touch is detected by the input detection unit, an item selection unit (for example, the control unit 100 in FIG. 2; FIG. 5) that selects a selection item from the displayed candidate items based on the touched position. Steps S152 and S154),
When the selection item is selected by the item selection unit for a predetermined time or longer, the candidate item other than the selection item is selected until the next selection item is selected from the candidate items other than the selection item. A display change control unit (for example, the control unit 100 in FIG. 2; steps S156 and S158 in FIG. 5) that performs control to repeatedly change and display the candidate item at a position different from the display position ;
It is characterized by providing.

また、本発明の情報処理装置は、前記候補項目として複数の画像を記憶する候補画像記憶部(例えば、図2の候補画像DB142)と、前記候補画像の中から正解の画像を記憶する正解画像記憶部(例えば、図2の正解画像DB144)と、を備え、前記候補項目表示制御部は、前記候補画像記憶部に記憶されている画像を複数表示する制御を行い(例えば、図2の制御部100;図5のステップS158)、前記項目選択部は、前記表示されている候補の画像の中から、一又は複数の画像を選択画像として選択し(例えば、図2の制御部100;図5のステップS160)、前記選択画像と、前記正解画像記憶部に記憶されている正解の画像とが一致する場合には、正当な利用者であると認証する認証部(例えば、図2の認証制御部110;図5のステップS166、S168)を更に有することを特徴とする。   The information processing apparatus according to the present invention includes a candidate image storage unit (for example, candidate image DB 142 in FIG. 2) that stores a plurality of images as the candidate items, and a correct image that stores a correct image from the candidate images. And the candidate item display control unit performs control to display a plurality of images stored in the candidate image storage unit (for example, the control of FIG. 2). Unit 100; step S158 in FIG. 5), the item selection unit selects one or a plurality of images from the displayed candidate images (for example, the control unit 100 in FIG. 2; FIG. Step S160 of FIG. 5, if the selected image matches the correct image stored in the correct image storage unit, an authentication unit that authenticates that the user is a valid user (for example, the authentication in FIG. 2). Control unit 110 Characterized by further comprising the step S166, S168) in FIG.

また、本発明の情報処理装置において、前記認証部は、前記項目選択部により選択されている選択項目のうち、一の選択項目において検知されているタッチが解除されたときに認証を行う(例えば、図2の制御部100;図5のステップS164)ことを特徴とする。   In the information processing apparatus of the present invention, the authentication unit performs authentication when a touch detected in one selection item among the selection items selected by the item selection unit is released (for example, 2, the control unit 100 in FIG. 2; step S164 in FIG. 5).

本発明のプログラムは、タッチされた位置の検出が同時に複数可能な入力検知部(例えば、図2の入力検知部154)と、表示部(例えば、図2の表示部152)とに接続されたコンピュータに、
前記表示部に複数の候補項目をランダムに作成して表示する制御を行う候補項目表示制御機能(例えば、図2の制御部100;図5のステップS150)と、
前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から一又は複数の選択項目を選択する項目選択機能(例えば、図2の制御部100;図5のステップS152、S154)と、
前記項目選択機能により、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目から次の選択項目が選択される迄の間、前記選択項目以外の候補項目を、当該候補項目の表示位置と異なる位置に繰り返し変更して表示する制御を行う表示変更制御機能(例えば、図2の制御部100;図5のステップS156、S158)と、
を実現させることを特徴とする。
The program of the present invention is connected to an input detection unit (for example, the input detection unit 154 in FIG. 2) capable of simultaneously detecting a touched position and a display unit (for example, the display unit 152 in FIG. 2). On the computer,
A candidate item display control function (for example, the control unit 100 in FIG. 2; step S150 in FIG. 5) for performing control for randomly generating and displaying a plurality of candidate items on the display unit;
While a touch is detected by the input detection unit, an item selection function for selecting one or a plurality of selection items from the displayed candidate items based on the touched position (for example, the control unit in FIG. 2) 100; Steps S152 and S154) of FIG.
When the selection item is selected for a predetermined time or more by the item selection function, the candidate item other than the selection item is selected until the next selection item is selected from the candidate items other than the selection item. A display change control function (for example, the control unit 100 in FIG. 2; steps S156 and S158 in FIG. 5) that performs control to repeatedly change and display the candidate item at a position different from the display position of the candidate item ;
It is characterized by realizing.

本発明の情報処理装置によれば、表示部に複数の候補項目を表示し、検知されたタッチに基づいて、表示された候補項目の中から選択項目が選択され、所定時間以上選択されている場合(すなわち所定時間以上、タッチが検知されている場合)に、選択項目以外の候補項目が変更して表示されることとなる。したがって、選択している以外の項目が変化することから、次に項目を選択する場合に、選択しやすい位置に表示させることができる利便性の高い情報処理装置を提供することが可能となる。   According to the information processing apparatus of the present invention, a plurality of candidate items are displayed on the display unit, and based on the detected touch, a selection item is selected from the displayed candidate items and selected for a predetermined time or more. In this case (that is, when a touch is detected for a predetermined time or longer), candidate items other than the selected item are changed and displayed. Accordingly, since items other than the selected item change, it is possible to provide a highly convenient information processing apparatus that can be displayed at a position where it can be easily selected when the item is selected next time.

また、候補画像記憶部に記憶されている画像から複数の候補項目となる画像が表示され、その中から一又は複数の画像が選択される。そして、選択されていない画像については所定時間が経過すると、異なる画像に変化することとなる。そして、選択された項目(画像)と、正解となる画像とが一致した場合には、正当な利用者であるとして認証が行われたと判断されることとなる。したがって、画像を用いて認証を行う場合に、複数の候補を利用者が選択する場合に押しにくい場所に正解画像が表示されているとしても、所定時間経過することにより、画像の場所が変化してタッチしやすい位置に表示されることとなる。   In addition, images as a plurality of candidate items are displayed from the images stored in the candidate image storage unit, and one or a plurality of images are selected from the images. And about the image which is not selected, if predetermined time passes, it will change to a different image. If the selected item (image) matches the correct image, it is determined that the user has been authenticated as a valid user. Therefore, when authentication is performed using an image, even if the correct image is displayed at a location that is difficult to press when the user selects a plurality of candidates, the location of the image changes after a predetermined time has elapsed. Will be displayed at a position where it is easy to touch.

また、項目選択部により選択されている選択項目のうち、一の選択項目において検知されているタッチが解除されたときに認証を行うこととなる。したがって、利用者がタッチを解除するだけで認証を行うことができ、利便性の高い情報処理装置を提供することが可能となる。   Moreover, authentication will be performed when the touch detected in one selection item is cancelled | released among the selection items selected by the item selection part. Therefore, authentication can be performed only by the user releasing the touch, and a highly convenient information processing apparatus can be provided.

第1実施形態における情報処理装置の外観を説明するための図である。It is a figure for demonstrating the external appearance of the information processing apparatus in 1st Embodiment. 第1実施形態における情報処理装置の構成を説明するための図である。It is a figure for demonstrating the structure of the information processing apparatus in 1st Embodiment. (a)候補画像DBの構成の一例を示す図である。(b)正解画像DBの構成の一例を示す図である。(A) It is a figure which shows an example of a structure of candidate image DB. (B) It is a figure which shows an example of a structure of correct image DB. 第1実施形態における正解登録処理の動作フローである。It is an operation | movement flow of the correct answer registration process in 1st Embodiment. 第1実施形態における認証処理の動作フローである。It is an operation | movement flow of the authentication process in 1st Embodiment. 第1実施形態における候補画像の選択動作について説明する図である。It is a figure explaining selection operation of a candidate picture in a 1st embodiment. 第1実施形態における認証処理の動作フロー(変形例)である。It is an operation | movement flow (modification) of the authentication process in 1st Embodiment. 第1実施形態における動作例を説明するための図である。It is a figure for demonstrating the operation example in 1st Embodiment. 第1実施形態における動作例を説明するための図である。It is a figure for demonstrating the operation example in 1st Embodiment. 第1実施形態における動作例を説明するための図である。It is a figure for demonstrating the operation example in 1st Embodiment. 第1実施形態における動作例を説明するための図である。It is a figure for demonstrating the operation example in 1st Embodiment. 第1実施形態における動作例を説明するための図である。It is a figure for demonstrating the operation example in 1st Embodiment. 第2実施形態における情報処理装置の構成を説明するための図である。It is a figure for demonstrating the structure of the information processing apparatus in 2nd Embodiment. 第2実施形態におけるメニューリストについて説明するための図である。It is a figure for demonstrating the menu list | wrist in 2nd Embodiment. 第2実施形態におけるメニュー表示処理の動作フローである。It is an operation | movement flow of the menu display process in 2nd Embodiment. 第2実施形態における動作例を説明するための図である。It is a figure for demonstrating the operation example in 2nd Embodiment. 第2実施形態における動作例を説明するための図である。It is a figure for demonstrating the operation example in 2nd Embodiment. 第2実施形態における動作例を説明するための図である。It is a figure for demonstrating the operation example in 2nd Embodiment. システム液晶の原理について説明するための図である。It is a figure for demonstrating the principle of a system liquid crystal. システム液晶の原理について説明するための図である。It is a figure for demonstrating the principle of a system liquid crystal.

以下添付図面を参照しながら、本発明の実施の形態について説明し、本発明の理解に供する。尚、以下の実施の形態は、本発明を具体化した一例であって、本発明の技術的範囲を限定する性格のものではない。   Embodiments of the present invention will be described below with reference to the accompanying drawings for understanding of the present invention. In addition, the following embodiment is an example which actualized this invention, Comprising: It is not the thing of the character which limits the technical scope of this invention.

〔実施の形態〕
[1.第1実施形態]
まず、第1実施形態について説明する。第1実施形態は、利用者が正当な利用者であると認証をする場合に選択する項目として画像を用いる認証システムについて、本発明を適用した場合について説明する。すなわち、まず、候補項目として候補画像を表示する。そして、候補画像の中から選択項目として選択画像が選択されることとなる。以下、図面を用いて詳細に説明する。
Embodiment
[1. First Embodiment]
First, the first embodiment will be described. 1st Embodiment demonstrates the case where this invention is applied about the authentication system which uses an image as an item selected when authenticating that a user is a valid user. That is, first, a candidate image is displayed as a candidate item. Then, the selected image is selected as a selection item from the candidate images. Hereinafter, it explains in detail using a drawing.

[1.1 装置構成]
まず、本発明を適用した情報処理装置1の装置の概観を示す。本実施形態では、情報処理装置1の一例として携帯電話に適用した場合について説明する。例えば、図1(a)は、携帯電話の表示画面が縦表示の場合であり、図1(b)は表示画面が横表示の場合の一例を示す図である。そして、図2に情報処理装置1の機能構成を示す。情報処理装置1は、制御部100に、認証制御部110と、表示データ制御部120と、記憶部140と、システム液晶150とがバスを介して接続されている。また、表示データ制御部120には、表示位置制御部130が接続されている。
[1.1 Device configuration]
First, an overview of the information processing apparatus 1 to which the present invention is applied will be described. In the present embodiment, a case where the present invention is applied to a mobile phone as an example of the information processing apparatus 1 will be described. For example, FIG. 1A shows a case where the display screen of the mobile phone is displayed vertically, and FIG. 1B shows an example where the display screen is displayed horizontally. FIG. 2 shows a functional configuration of the information processing apparatus 1. In the information processing apparatus 1, an authentication control unit 110, a display data control unit 120, a storage unit 140, and a system liquid crystal 150 are connected to the control unit 100 via a bus. A display position control unit 130 is connected to the display data control unit 120.

制御部100は、情報処理装置1の動作を制御するための機能部であり、CPU等、情報処理装置1に必要な制御回路によって構成されている。制御部100は、記憶部140に記憶されている各種プログラムを読み出して実行することにより各種処理を実現することとなる。   The control unit 100 is a functional unit for controlling the operation of the information processing apparatus 1 and includes a control circuit necessary for the information processing apparatus 1 such as a CPU. The control unit 100 implements various processes by reading and executing various programs stored in the storage unit 140.

認証制御部110は、利用者により選択された画像が、後述する正解画像DB144に記憶されている画像と一致するか否かを判定することにより利用者が正当な利用者であるか否かを認証する認証制御を行うための機能部である。認証した結果に応じて、情報処理装置は各種処理を実行する。例えば、情報処理装置1が入退室の制御に用いられている場合には、認証が正しく行われた場合には入退室が許可されることとなる。また、情報処理装置1が、決済処理において利用されている場合には、認証が正しく行われた場合に決済処理が実行されることとなる。   The authentication control unit 110 determines whether or not the user is a valid user by determining whether or not an image selected by the user matches an image stored in a correct image DB 144 described later. It is a functional unit for performing authentication control for authentication. The information processing apparatus executes various processes according to the authentication result. For example, when the information processing apparatus 1 is used for entrance / exit control, entry / exit is permitted when authentication is performed correctly. Further, when the information processing apparatus 1 is used in the payment process, the payment process is executed when the authentication is correctly performed.

表示データ制御部120は、制御部100の指示に基づいて後述するシステム液晶150(表示部152)に表示するデータを制御する機能部である。表示データ制御部は、制御部100に表示する画像を表示し、表示位置制御部130に基づく表示位置に表示する。   The display data control unit 120 is a functional unit that controls data to be displayed on a system liquid crystal 150 (display unit 152), which will be described later, based on an instruction from the control unit 100. The display data control unit displays an image to be displayed on the control unit 100 and displays it at a display position based on the display position control unit 130.

表示位置制御部130は、表示する画像(例えば、候補画像)の表示位置を決定し、表示データ制御部120を制御する機能部である。表示データ制御部120が表示部152に出力する表示信号の内容を、具体的に制御することとなる。そして、表示データ制御部120は、表示位置制御部130から入力される制御信号に基づいて表示部152に出力することとなる。   The display position control unit 130 is a functional unit that determines the display position of an image to be displayed (for example, a candidate image) and controls the display data control unit 120. The content of the display signal output from the display data control unit 120 to the display unit 152 is specifically controlled. Then, the display data control unit 120 outputs to the display unit 152 based on the control signal input from the display position control unit 130.

記憶部140は、情報処理装置1が動作するための各種データ及びプログラムを記憶しておく機能部である。制御部100は、記憶部140に記憶されているプログラムを読み出して実行する事により、各種機能を実現することとなる。   The storage unit 140 is a functional unit that stores various data and programs for the information processing apparatus 1 to operate. The control unit 100 implements various functions by reading and executing the program stored in the storage unit 140.

ここで記憶部140には、候補画像DB142と、正解画像DB144と、正解登録プログラム146と、認証プログラム148とが記憶されている。   Here, the storage unit 140 stores a candidate image DB 142, a correct image DB 144, a correct registration program 146, and an authentication program 148.

候補画像DB142は、図3(a)に示すように、認証のときに、選択する候補として表示する画像(候補画像)が記憶されているDBである。本実施形態においては、候補画像の一例としてJPEG形式にて記憶されているものとするが、他の画像形式でも良いことは勿論である。   As shown in FIG. 3A, the candidate image DB 142 is a DB that stores images (candidate images) to be displayed as candidates to be selected at the time of authentication. In this embodiment, the candidate image is stored in the JPEG format as an example, but it is needless to say that other image formats may be used.

正解画像DB144は、利用者により認証の正解画像が登録されているDBである。図3(b)に示すように、正解画像DB144には、正解となる画像が登録されている。なお、この正解画像は、候補画像DB142に記憶されている候補画像の中から選択されたものである。   The correct image DB 144 is a DB in which a correct image for authentication is registered by the user. As shown in FIG. 3B, correct images are registered in the correct image DB 144. This correct image is selected from candidate images stored in the candidate image DB 142.

システム液晶150は、表示部152と、入力検知部154とを備えた表示装置である。詳細な動作については上述したが、表示部152は、例えば液晶ディスプレイにより構成されており、表示データ制御部120の表示制御信号に基づいて、各種情報を表示する。また、入力検知部154は、複数のタッチ位置を同時に検知可能なタッチパネルにより構成されており、利用者からタッチされた箇所の座標を検知する。   The system liquid crystal 150 is a display device that includes a display unit 152 and an input detection unit 154. Although the detailed operation has been described above, the display unit 152 is configured by a liquid crystal display, for example, and displays various types of information based on the display control signal of the display data control unit 120. The input detection unit 154 includes a touch panel that can simultaneously detect a plurality of touch positions, and detects the coordinates of the location touched by the user.

[1.2 処理の流れ]
続いて、本実施形態における処理の流れについて説明する。まず、正解画像を登録する正解登録処理について図4に基づいて説明する。ここで、正解登録処理は、制御部100が、記憶部140に記憶されている正解登録プログラム146を読み出して実行することにより実現される処理である。
[1.2 Process flow]
Next, the flow of processing in this embodiment will be described. First, correct registration processing for registering a correct image will be described with reference to FIG. Here, the correct answer registration process is a process realized by the control unit 100 reading and executing the correct answer registration program 146 stored in the storage unit 140.

まず、候補画像DB142から候補画像を読み出して画像一覧を作成し表示する(ステップS100)。ここで、利用者により正解とする正解画像が選択される(ステップS102)。なお、ここで選択される正解画像は、1つ以上であれば良い。   First, candidate images are read out from the candidate image DB 142 to create and display an image list (step S100). Here, the correct image that is the correct answer is selected by the user (step S102). Note that the number of correct images selected here may be one or more.

そして、画像が選択され、正解画像として登録される操作がされた場合には(ステップS104;Yes)、正解画像として、正解画像DB144に登録される(ステップS106)。   When an image is selected and an operation for registration as a correct image is performed (step S104; Yes), the correct image is registered in the correct image DB 144 (step S106).

つづいて、認証処理について、図5に基づいて説明する。ここで、認証処理は、制御部100が、記憶部140に記憶されている認証プログラム148を読み出して実行することにより実現される処理である。   Next, the authentication process will be described with reference to FIG. Here, the authentication process is a process realized by the control unit 100 reading and executing the authentication program 148 stored in the storage unit 140.

まず、制御部100は、候補画像DB142から、候補画像の一覧をランダムに作成し、表示する(ステップS150)。ここで、表示される候補画像の個数は、予め決められた個数であったり、利用者が設定した個数であったり、表示部152の表示領域を考慮して決定された個数であったり、何れでも良い。なお、本実施形態においては、9つの候補画像が表示されることとして説明する。   First, the control unit 100 randomly creates a list of candidate images from the candidate image DB 142 and displays the list (step S150). Here, the number of candidate images to be displayed is a predetermined number, a number set by the user, or a number determined in consideration of the display area of the display unit 152. But it ’s okay. In the present embodiment, it is assumed that nine candidate images are displayed.

そして、利用者により何れかの候補画像の一つが選択されると(ステップS152;Yes)、選択された画像を選択画像として一時記憶する(ステップS154)。ここで、候補画像を選択する方法としては、入力検知部154がタッチを検知し、検知した位置に基づいて、どの候補画像が選択されたかを判定する。   When one of the candidate images is selected by the user (step S152; Yes), the selected image is temporarily stored as a selected image (step S154). Here, as a method of selecting a candidate image, the input detection unit 154 detects a touch, and determines which candidate image is selected based on the detected position.

ここで、候補画像の選択について、図6を用いて説明する。図6(a)に示すように、
・画像A<(x1,y1)−(x2,y2)>
・画像B<(x3,y1)−(x4,y2)>
・画像C<(x1,y3)−(x2,y4)>
・画像D<(x3,y3)−(x4,y4)>
が表示されているとする。
Here, selection of candidate images will be described with reference to FIG. As shown in FIG.
Image A <(x1, y1)-(x2, y2)>
Image B <(x3, y1)-(x4, y2)>
Image C <(x1, y3) − (x2, y4)>
Image D <(x3, y3)-(x4, y4)>
Is displayed.

例えば、同時に点M、点Nの2点のタッチが入力検知部154により検出され、それぞれ座標M(Xm,Ym)、座標N(Xn,Yn)で表されるとする。点Mの座標がx1<Xm<x2、y1<Ym<y2の位置にあった場合、点Mは(x1,y1)−(x2,y2)の範囲に表示されている画像Aの領域にあるため、項目選択部は画像Aが選択されたと判定する。この場合の各表示画像に対応する領域の座標は、表示位置制御部130に記憶されている。同様に、点Nの座標がx1<Xn<x2、y1<Yn<y2の位置にあった場合、点Nも画像Aの領域にあるため、項目選択部は画像Aを選択したと判定する。この場合、点M、点Nの2点のタッチが検出されたが、項目選択部が選択する画像は画像Aのみになる(図6(b))。   For example, it is assumed that two touches of point M and point N are simultaneously detected by the input detection unit 154 and are represented by coordinates M (Xm, Ym) and coordinates N (Xn, Yn), respectively. When the coordinates of the point M are in the position of x1 <Xm <x2, y1 <Ym <y2, the point M is in the area of the image A displayed in the range of (x1, y1)-(x2, y2). Therefore, the item selection unit determines that the image A has been selected. The coordinates of the area corresponding to each display image in this case are stored in the display position control unit 130. Similarly, when the coordinates of the point N are in the positions of x1 <Xn <x2 and y1 <Yn <y2, the point selection unit determines that the image A has been selected because the point N is also in the area of the image A. In this case, two touches of point M and point N have been detected, but the image selected by the item selection unit is only image A (FIG. 6B).

しかし、点Nの座標がx3<Xn<x4、y3<Yn<y4の位置にあった場合、点Nは(x3,y3)−(x4,y4)の範囲に表示されている画像Dの領域にあるため、制御部100は画像Dが選択されたと判定する。この場合は点M、点Nの2点のタッチが検出され、選択される画像は画像Aと画像Dになる。このように同時に複数のタッチが検知されても、前者は画像Aのみが選択され、後者は画像Aと画像Dの複数画像の選択が行われる(図6(c))。   However, when the coordinates of the point N are in the positions of x3 <Xn <x4 and y3 <Yn <y4, the point N is an area of the image D displayed in the range of (x3, y3)-(x4, y4). Therefore, the control unit 100 determines that the image D is selected. In this case, touches at two points M and N are detected, and images A and D are selected. Thus, even when a plurality of touches are detected simultaneously, only the image A is selected as the former, and a plurality of images A and D are selected as the latter (FIG. 6C).

なお、検出された座標が、どの画像の領域からも外れている場合は、画像の選択は行われない。例えば、点Nの座標がx2<Xn<x3、y3<Yn<y4の位置にあった場合、点Nにより画像は選択されず、点Mにより選択された画像のみが選択画像となる(図6(d))。   Note that if the detected coordinates are out of any image area, the image is not selected. For example, when the coordinates of the point N are in the positions of x2 <Xn <x3 and y3 <Yn <y4, no image is selected by the point N, and only the image selected by the point M becomes the selected image (FIG. 6). (D)).

そして、選択された画像を選択画像として記憶する。なお、画像が選択されたことを表す装飾表示(例えば、選択画像を反転させる、枠線で囲んで表示する、点滅表示させる)等を施してもよい。   Then, the selected image is stored as a selected image. Note that a decorative display indicating that an image has been selected (for example, the selected image is reversed, displayed in a frame, or blinked) may be performed.

そして、選択画像が選択されたまま、すなわち、候補画像が継続してタッチされている(タッチが検知され続けている)状態において、所定時間が経過した場合には(ステップS156;Yes)、選択画像以外の候補画像の一覧を再作成し、再度表示する(ステップS158)。なお、本実施形態では選択された選択画像にかかわらず所定時間が経過した際には一覧の再作成を行う場合をあげたが、選択された選択画像が予め設定された特定の画像だった場合には一覧の再作成を行うが、その他の画像だった場合は一覧の再作成を行わないという処理を追加してもよい。また、その逆に、選択された選択画像が予め設定された特定の画像だった場合には一覧の再作成を行わず、その他の画像だった場合は一覧の再作成を行うという処理でもよい。さらに、上記では画像をキーに一覧再作成の有無を判断したが、これが画像ではなく選択されている位置であってもよい。   When the selected image is selected, that is, in a state where the candidate image is continuously touched (touch is continuously detected) (step S156; Yes), the selection is performed. A list of candidate images other than images is recreated and displayed again (step S158). In this embodiment, the list is recreated when a predetermined time has passed regardless of the selected selected image. However, when the selected selected image is a specific image set in advance. The list may be recreated, but a process may be added in which the list is not recreated for other images. Conversely, the processing may be such that the list is not recreated when the selected selected image is a specific image set in advance, and the list is recreated when the selected image is another image. Further, in the above description, whether or not to recreate the list is determined using the image as a key, but this may be a selected position instead of the image.

例えば、候補画像の中から9つの画像が表示されており、選択画像として1つの選択されている場合には、候補画像DB142から選択画像以外の8つ分の候補画像を再度読み出し、一覧表示を再作成して表示する。   For example, when nine images are displayed from the candidate images, and one selected image is selected, eight candidate images other than the selected image are read again from the candidate image DB 142, and a list display is performed. Recreate and display.

なお、現在表示されている候補画像と、再表示された候補画像とを必ず異なる画像としても良いし、そのような制限を設けなくても良い。また、再表示のときに、同一の画像が同じ位置に表示されないよう制限を設けても良い。これらの表示方法については、制約を大きくすることによりセキュリティ強度を強くすることが可能となり、制約を小さくすることにより利便性を向上させることが可能となる。   Note that the currently displayed candidate image and the redisplayed candidate image may be different images, or such a restriction may not be provided. In addition, a restriction may be provided so that the same image is not displayed at the same position during redisplay. With respect to these display methods, it is possible to increase the security strength by increasing the restrictions, and it is possible to improve convenience by reducing the restrictions.

続いて、更に次の候補画像の中から、次の画像が選択されたか否かを判定する(ステップS160)。次の画像が選択された場合には(ステップS160;Yes)、次に選択された画像も選択画像として記憶する(ステップS162)。   Subsequently, it is determined whether or not the next image is selected from the next candidate images (step S160). When the next image is selected (step S160; Yes), the next selected image is also stored as a selected image (step S162).

ここで、利用者により画像認証が実行された否かを判定する(ステップS164)。ここで、利用者により画像認証を行う操作がなされた場合はステップS166に処理を移行し(ステップS164;Yes→ステップS166)、画像認証を行う操作がなされていない場合には、ステップS156から処理を繰り返し実行する(ステップS164;No→ステップS156)。   Here, it is determined whether image authentication has been executed by the user (step S164). If the user performs an operation for performing image authentication, the process proceeds to step S166 (step S164; Yes → step S166). If an operation for performing image authentication is not performed, the process starts from step S156. Are repeatedly executed (step S164; No-> step S156).

ここで、画像認証を行うための操作としては種々の方法が考えられる。例えば、選択画像の選択状態が解除されたことを画像認証を行うためのトリガーとして判定する(すなわち、入力検知部154のタッチが継続しているか否か(利用者の指でタッチしている場合には、離れた指があるか否か)を判定する)場合や、認証ボタンが利用者により選択されたことを画像認証を行うためのトリガーとして判定する場合等である。   Here, various methods are conceivable as operations for performing image authentication. For example, it is determined that the selection state of the selected image has been released as a trigger for performing image authentication (that is, whether or not the input detection unit 154 continues to be touched (when touching with a user's finger) For example, whether or not there is a distant finger), or when the authentication button is selected by the user as a trigger for performing image authentication.

そして、画像認証を行う場合は、現在の選択画像が、正解画像DB144に登録されている正解画像と一致するか否かを判定する(ステップS166)。ここで、選択画像と、正解画像とが一致した場合には認証が成功したと判定する(ステップS166;Yes→ステップS168)。他方、選択画像と、正解画像とが一致しない場合には、認証が失敗したと判定する(ステップS166;No→ステップS170)。   When performing image authentication, it is determined whether or not the currently selected image matches the correct image registered in the correct image DB 144 (step S166). Here, if the selected image matches the correct image, it is determined that the authentication is successful (step S166; Yes → step S168). On the other hand, if the selected image does not match the correct image, it is determined that the authentication has failed (step S166; No → step S170).

なお、ステップS164の画像認証を行う操作のトリガーとして、例えば、選択画像と正解画像が一致した場合には、自動的に認証が行われることとしても良い。この場合の動作フローを図7に示す。   As a trigger for the operation for performing image authentication in step S164, for example, when the selected image and the correct image match, authentication may be automatically performed. The operation flow in this case is shown in FIG.

すなわち、ステップS164を実行せずに、現在選択中の選択画像と、正解画像とが一致しているかをステップS166にて判定する。そして、選択画像が正解画像と一致している場合には、認証成功と判定し(ステップS166;Yes→ステップS168)、一致していない場合にはステップS156から処理を繰り返し実行する。これにより、利用者は「認証を実行する」といった操作を意識することなく認証処理を実行することが可能となる。   That is, without executing step S164, it is determined in step S166 whether the currently selected image matches the correct image. If the selected image matches the correct image, it is determined that the authentication is successful (step S166; Yes → step S168). If the selected image does not match, the process is repeatedly executed from step S156. As a result, the user can execute the authentication process without being aware of the operation “execute authentication”.

[1.3 動作例]
続いて、本実施形態の動作例について、説明する。図8は、システム液晶150に表示された表示画面W100の一例を説明するための図である。
[1.3 Example of operation]
Subsequently, an operation example of the present embodiment will be described. FIG. 8 is a diagram for explaining an example of the display screen W100 displayed on the system liquid crystal 150. FIG.

表示画面W100には、候補画像DB142から9つの候補画像が読み出され一覧表示されている(図5のステップS150)。認証に用いる正解画像が表示されていない場合には、利用者は任意の画像を一つ選択する(ステップS152;Yes→ステップS154)。本図では、画像M100が選択画像として利用者F100により選択(タッチ)されている。なお、この場合、画像M100は利用者の人差し指でタッチされている。   On the display screen W100, nine candidate images are read from the candidate image DB 142 and displayed in a list (step S150 in FIG. 5). If the correct image used for authentication is not displayed, the user selects one arbitrary image (step S152; Yes → step S154). In this figure, the image M100 is selected (touched) by the user F100 as the selected image. In this case, the image M100 is touched with the user's index finger.

図8の状態で所定時間経過すると(ステップS156;Yes)、選択されている画像M100以外の候補画像が更新されて表示されることとなる(ステップS158)。図9は、画像M100以外の候補画像が更新表示された場合の表示画面W102の一例である。ここで、利用者F102は、正解画像である画像M102を更に選択する(ステップS160;Yes→ステップS162)。ここで、画像M100は利用者の人差し指で、画像M102は利用者の薬指で選択されている。   When a predetermined time elapses in the state of FIG. 8 (step S156; Yes), candidate images other than the selected image M100 are updated and displayed (step S158). FIG. 9 is an example of a display screen W102 when a candidate image other than the image M100 is updated and displayed. Here, the user F102 further selects an image M102 that is a correct image (step S160; Yes → step S162). Here, the image M100 is selected with the user's index finger, and the image M102 is selected with the user's ring finger.

図9の状態で所定時間経過すると、選択されている画像M100及び画像M102以外の候補画像が更新されて表示されることとなる(ステップS158)。図10は、画像M100及び画像M102以外の画像が更新表示された場合の表示画面W104の一例である。ここで、表示画面W104に、正解画像となる画像M104が表示されている。ここで、利用者は画像M104を選択しようとするが、現在の表示位置では選択しにくいため、所定時間経過するまで待つこととする。   When a predetermined time elapses in the state of FIG. 9, candidate images other than the selected image M100 and image M102 are updated and displayed (step S158). FIG. 10 is an example of a display screen W104 when an image other than the image M100 and the image M102 is updated and displayed. Here, an image M104 that is a correct image is displayed on the display screen W104. Here, the user tries to select the image M104. However, since it is difficult to select the image at the current display position, the user waits until a predetermined time elapses.

図10の状態で所定時間経過すると、選択されている画像M100及び画像M102以外の候補画像が更新されて表示されることとなる(ステップS156;Yes→ステップS156)。図11は、画像M100及び画像M102以外の候補画像が更新表示された場合の表示画面W106の一例である。表示画面W106では、画像M104が利用者F106に選択しやすい箇所に表示されている。そこで、利用者F106は正解画像である画像M106を更に選択する(ステップS160;Yes→ステップS162)。ここで、画像M100は利用者の人差し指、画像M102は利用者の薬指、画像M104は利用者の中指で選択されている。   When a predetermined time elapses in the state of FIG. 10, candidate images other than the selected image M100 and image M102 are updated and displayed (step S156; Yes → step S156). FIG. 11 is an example of a display screen W106 when candidate images other than the images M100 and M102 are updated and displayed. On the display screen W106, the image M104 is displayed at a location that can be easily selected by the user F106. Therefore, the user F106 further selects an image M106 that is a correct image (step S160; Yes → step S162). Here, the image M100 is selected by the user's index finger, the image M102 is selected by the user's ring finger, and the image M104 is selected by the user's middle finger.

図11の状態で正解画像が総て選択されているので、利用者は正解画像ではない画像M100の選択状態を解除する(ステップS164;Yes)。図12は、図11において画像M100の選択状態が解除された場合の表示画面W108の一例を示す図である。   Since all the correct images have been selected in the state of FIG. 11, the user cancels the selected state of the image M100 that is not the correct image (step S164; Yes). FIG. 12 is a diagram illustrating an example of the display screen W108 when the selection state of the image M100 in FIG. 11 is cancelled.

画像の選択状態が解除されたことから、認証制御部110は、現在選択されている選択画像と、正解画像DB144を照合する(ステップS166)。そして、選択画像と、正解画像が一致する場合には認証が成功したと判定する(ステップS166;Yes→ステップS168)。   Since the selected state of the image is released, the authentication control unit 110 collates the currently selected image with the correct image DB 144 (step S166). If the selected image matches the correct image, it is determined that the authentication has been successful (step S166; Yes → step S168).

このように、本実施形態によれば、利用者が複数の画像(項目)を選択する場合に、所定時間が経過する毎に、選択されている画像以外の画像の表示位置、内容が変化することとなる。これにより、利用者は画像(項目)を選択する場合に、無理な押し方をすることなく、自然に画像を選択することが可能となり、利便性の高い認証システムを実現することができる。   As described above, according to the present embodiment, when a user selects a plurality of images (items), the display position and contents of an image other than the selected image change every time a predetermined time elapses. It will be. As a result, when the user selects an image (item), the user can select an image naturally without pressing it, and a highly convenient authentication system can be realized.

なお、上述した実施形態については、候補項目として画像を利用する例について説明したが、例えば数字、文字、図形、記号、写真、色等、他の項目を表示し、当該項目から選択することにより認証を行うこととしても良いことは勿論である。   In addition, about embodiment mentioned above, although the example using an image as a candidate item was demonstrated, for example, by displaying other items, such as a number, a character, a figure, a symbol, a photograph, and a color, and selecting from the item concerned Of course, authentication may be performed.

また、上述した実施形態については、所定時間が経過したタイミングで候補画像の一覧を再作成することとして説明したが、他のタイミングで画像を変更してもよい。例えば、ステップS160において、次の画像が選択されたタイミングにて、選択画像以外の候補画像の一覧を再作成することとしても良いし、候補画像の一覧を再作成する指示を利用者が任意のタイミングで与えても良い。   In the above-described embodiment, the list of candidate images is re-created at a timing when a predetermined time has elapsed. However, the images may be changed at other timings. For example, in step S160, a list of candidate images other than the selected image may be re-created at the timing when the next image is selected, and the user can arbitrarily instruct to re-create the list of candidate images. You may give by timing.

また、上述した実施形態については、候補画像の一覧を再作成する場合に、候補画像DB142から読み出して表示することとして説明したが、例えば一度候補画像の一覧として表示された画像の種類はそのままにし、位置を変更することとしても良い。この場合、表示されている画像が変化しないため、利用者が選択するステップが少なくてすむといった効果が期待できる。   In the above-described embodiment, when recreating a list of candidate images, it has been described as being read from the candidate image DB 142 and displayed. However, for example, the types of images once displayed as a list of candidate images are left as they are. The position may be changed. In this case, since the displayed image does not change, an effect that the user can select fewer steps can be expected.

さらに、上述した実施形態に加えて、画像の位置及び表示する画像について、例えば、所定時間が経過した場合には候補画像DB142から新たに候補画像を読み出し、候補画像の一覧表示を行う。そして、画像が選択された場合には、表示されている候補画像の位置のみを移動させるといった制御を行っても良い。このように、候補画像を一覧表示する方法については、種々の方法が考えられる。   Further, in addition to the above-described embodiment, for example, when a predetermined time has elapsed with respect to the position of the image and the image to be displayed, a new candidate image is read from the candidate image DB 142 and a list of candidate images is displayed. And when an image is selected, you may perform control of moving only the position of the displayed candidate image. As described above, various methods for displaying a list of candidate images are conceivable.

なお、上述した実施形態については、選択画像を解除することで認証を行う例について説明したが、例えば認証ボタンを他の画像と同じ表示部に表示し、それを選択することで認証を行うこととしても良い。また、認証ボタンは表示部への表示ではなく、端末の表面・側面・裏面などに配置し、それを押下することで認証を行うこととしても良い。特に、側面・裏面に配置した場合、選択画面と認証ボタンを同時に押すことを第三者が視認することを難しくする。   In addition, about embodiment mentioned above, although the example which authenticates by canceling | releases a selection image was demonstrated, for example, an authentication button is displayed on the same display part as another image, and authentication is performed by selecting it. It is also good. Further, the authentication button may be arranged on the front surface, side surface, back surface, etc. of the terminal instead of being displayed on the display unit, and authentication may be performed by pressing the button. In particular, when it is arranged on the side surface / back surface, it is difficult for a third party to visually recognize that the selection screen and the authentication button are pressed simultaneously.

また、上述した実施形態では認証の例について説明したが、例えばメニューの選択や、数字等の入力に用いてもよい。すなわち、本発明を適用する範囲は、タッチされた位置を同時に複数の検出が可能な情報処理装置において、その情報処理装置に表示された項目を押さえたままの状態のときに、他の項目の表示が更新される物であればよい。   Moreover, although the example of authentication was demonstrated in embodiment mentioned above, you may use for selection of a menu, input of a number etc., for example. That is, the scope of application of the present invention is that an information processing apparatus capable of detecting a plurality of touched positions at the same time, when an item displayed on the information processing apparatus is being pressed, Any object whose display is updated may be used.

[2.第2実施形態]
つづいて、第2実施形態について説明する。第2実施形態は、利用者が選択する項目として、メニュー項目を選択する場合を例にとって説明する。すなわち、まず、親階層の項目として、第1階層のメニュー項目を表示する。そして、選択された第1階層に応じて、子階層の項目である第2階層のメニュー項目が表示されることとなる。以下、図面を用いて詳細に説明する。
[2. Second Embodiment]
Next, the second embodiment will be described. In the second embodiment, a case where a menu item is selected as an item selected by the user will be described as an example. That is, first, the menu item of the first hierarchy is displayed as the item of the parent hierarchy. Then, according to the selected first hierarchy, menu items of the second hierarchy that are child hierarchy items are displayed. Hereinafter, it explains in detail using a drawing.

[2.1 装置構成]
図13に本発明を適用した情報処理装置2の構成を示す。情報処理装置2は、制御部100と、メニュー制御部210と、表示データ制御部120と、表示位置制御部130と、記憶部240と、システム液晶150(表示部152及び入力検知部154)とを備えて構成されている。なお、第1実施形態において説明した構成要素と同一のものについては、同一の符号を付し、その説明を省略する。
[2.1 Device configuration]
FIG. 13 shows the configuration of the information processing apparatus 2 to which the present invention is applied. The information processing apparatus 2 includes a control unit 100, a menu control unit 210, a display data control unit 120, a display position control unit 130, a storage unit 240, and a system liquid crystal 150 (the display unit 152 and the input detection unit 154). It is configured with. In addition, the same code | symbol is attached | subjected about the same component demonstrated in 1st Embodiment, and the description is abbreviate | omitted.

メニュー制御部210は、表示するメニューの切り替え、更新指示等の制御を行う制御部である。後述するメニューリスト242から、必要となるメニュー項目を読み出してメニュー画面を表示する制御を行う。   The menu control unit 210 is a control unit that controls switching of menus to be displayed, update instructions, and the like. Control is performed to read out necessary menu items from a menu list 242 to be described later and display a menu screen.

記憶部240は、情報処理装置2が動作するための各種データ及びプログラムを記憶しておく機能部である。制御部100は、記憶部240に記憶されているプログラムを読み出して実行する事により、各種機能を実現することとなる。ここで記憶部240は、メニューリスト242と、メニュー表示プログラム244とを記憶している。   The storage unit 240 is a functional unit that stores various data and programs for the information processing apparatus 2 to operate. The control unit 100 implements various functions by reading and executing the program stored in the storage unit 240. Here, the storage unit 240 stores a menu list 242 and a menu display program 244.

メニューリスト242は、情報処理装置2におけるメニュー項目(例えば、「Web」)を項目番号(例えば、「A」)と対応づけて記憶しているリストである。ここで、「A」「B」「C」「D」等は、第1階層(親階層)のメニューを示している。また、第1階層(親階層)に対応する第2階層(子階層)のメニューもそれぞれ記憶されている。例えば、「B−1」は、「B」を親階層とする子階層のメニューである。   The menu list 242 is a list that stores menu items (for example, “Web”) in the information processing apparatus 2 in association with item numbers (for example, “A”). Here, “A”, “B”, “C”, “D”, and the like indicate menus in the first layer (parent layer). In addition, menus of the second hierarchy (child hierarchy) corresponding to the first hierarchy (parent hierarchy) are also stored. For example, “B-1” is a menu of a child hierarchy having “B” as a parent hierarchy.

[2.2 処理の流れ]
つづいて、第2実施形態における処理であるメニュー表示処理について、図15を用いて説明する。メニュー表示処理は、制御部100が、記憶部240に記憶されているメニュー表示プログラム244を読み出して実行することにより実現される処理である。
[2.2 Process flow]
Subsequently, a menu display process which is a process in the second embodiment will be described with reference to FIG. The menu display process is a process realized by the control unit 100 reading and executing the menu display program 244 stored in the storage unit 240.

まず、表示データ制御部120は、第1階層のメニューを表示する(ステップS200)。そして、表示された第1階層からメニュー項目を選択する(ステップS202)。   First, the display data control unit 120 displays the first layer menu (step S200). Then, a menu item is selected from the displayed first hierarchy (step S202).

利用者により、メニュー項目が選択されると(ステップS202;Yes)、選択されたメニュー項目の下位メニュー(第2階層)が表示される(ステップS204)。ここで、第1階層のメニュー項目の選択が解除された場合は、再度ステップS200から処理を実行し、第1階層のメニュー表示に戻る(ステップS206;Yes→ステップS200)。   When the menu item is selected by the user (step S202; Yes), a lower menu (second layer) of the selected menu item is displayed (step S204). Here, when the selection of the menu item of the first layer is canceled, the process is executed again from Step S200, and the menu display of the first layer is returned (Step S206; Yes → Step S200).

第2階層のメニューが表示された状態で、第2階層のメニュー項目が選択されることなく、所定時間経過した場合には(ステップS206;No→ステップS208;No→ステップS210;Yes)、第2階層のメニュー項目の表示が更新される(ステップS212)。   When a predetermined time has passed without the menu item of the second layer being selected in the state where the menu of the second layer is displayed (Step S206; No → Step S208; No → Step S210; Yes), The display of the menu item in the second hierarchy is updated (step S212).

他方、第2階層のメニューが表示された状態で、第2階層のメニュー項目が選択された場合には、選択された機能を実行する(ステップS206;No→ステップS208;Yes→ステップS214)。   On the other hand, when the menu item of the second hierarchy is selected in the state where the menu of the second hierarchy is displayed, the selected function is executed (Step S206; No → Step S208; Yes → Step S214).

[2.3 動作例]
つづいて、第2実施形態における動作例について図を用いて説明する。
[2.3 Example of operation]
Subsequently, an operation example in the second embodiment will be described with reference to the drawings.

図16は、第1階層(親階層)を表示する表示画面W200の一例を示す図である。表示画面W200には、第1階層のメニュー項目K200が表示されている(図15のステップS200)。ここで、利用者F200がメニュー項目K202「B Mail」をタッチし、選択状態とする(ステップS202;Yes)。なお、利用者F200がタッチする方法としては、例えば手(指)でタッチしてもよいし、スタイラスでタッチしても良い。   FIG. 16 is a diagram showing an example of a display screen W200 that displays the first hierarchy (parent hierarchy). On the display screen W200, a menu item K200 in the first hierarchy is displayed (step S200 in FIG. 15). Here, the user F200 touches the menu item K202 “B Mail” to select it (step S202; Yes). As a method of touching by the user F200, for example, the user F200 may touch with a hand (finger) or may touch with a stylus.

図16の状態で、メニュー項目K202が選択された場合に遷移する画面が図17の表示画面W210である。表示画面W210では、第1階層(親階層)のメニュー項目K210が利用者F210により選択状態となっている。ここで、第1階層(親階層)のうち、選択されていないメニュー項目K212は、淡く表示されている。   In the state of FIG. 16, the screen that is transitioned when the menu item K202 is selected is the display screen W210 of FIG. On display screen W210, menu item K210 in the first layer (parent layer) is selected by user F210. Here, in the first hierarchy (parent hierarchy), the menu item K212 that is not selected is displayed lightly.

また、画面中央には、選択されているメニュー項目K212に関連づけられた第2階層(子階層)のメニュー項目K214が表示されている(ステップS204)。ここで、メニュー項目K210「B Mail」に対応する第2階層のメニューは、図14に示したメニューリスト242を参照すると12のメニュー項目がある。しかし、表示画面W210には、7つのメニュー項目しか表示できない。したがって、項目番号「B−1」〜「B−7」のメニュー項目がW210には表示されており、「B−8」〜「B−12」のメニュー項目は表示されていないこととなる。   In the center of the screen, a menu item K214 in the second hierarchy (child hierarchy) associated with the selected menu item K212 is displayed (step S204). Here, the menu of the second layer corresponding to the menu item K210 “B Mail” has 12 menu items with reference to the menu list 242 shown in FIG. However, only seven menu items can be displayed on the display screen W210. Accordingly, the menu items having the item numbers “B-1” to “B-7” are displayed on the W210, and the menu items “B-8” to “B-12” are not displayed.

図17の状態で、メニュー項目K210の選択状態が所定時間経過した場合に遷移する画面が図18の表示画面W220である。所定時間経過したことから、メニュー制御部210は、第2階層のメニュー表示を更新する(ステップS210;Yes→ステップS212)。すなわち、表示画面W210に表示されていなかった「B−12」を表示し、代わりに「B−7」を非表示としている。   In the state of FIG. 17, the screen that transitions when the selection state of the menu item K210 has elapsed for a predetermined time is the display screen W220 of FIG. Since the predetermined time has elapsed, the menu control unit 210 updates the menu display of the second hierarchy (step S210; Yes → step S212). That is, “B-12” not displayed on the display screen W210 is displayed, and “B-7” is not displayed instead.

このように、メニュー項目K210が選択状態のままで、所定時間を経過する度に、第2階層のメニュー項目K220の表示が更新表示されることとなる。   As described above, the display of the menu item K220 in the second hierarchy is updated and displayed every time a predetermined time elapses while the menu item K210 remains selected.

なお、メニューの表示を更新する方法としては、種々の方法が考えられる。例えば、図17の表示画面W210において選択状態が所定時間経過すると、非表示であるメニュー項目「B−8」〜「B−12」を切り替えて表示しても良い。また、「B−8」〜「B−12」に連続して「B−1」「B−2」を表示することにより、第2階層のメニュー項目が連続して表示されるようにしても良い。   Various methods can be considered as a method for updating the display of the menu. For example, when the selected state has elapsed on the display screen W210 of FIG. 17, the menu items “B-8” to “B-12” that are not displayed may be switched and displayed. Further, by displaying “B-1” and “B-2” in succession from “B-8” to “B-12”, the menu items in the second layer may be displayed in succession. good.

また、メニュー制御部210は、第2階層のメニュー表示を切り替え表示する場合に、視覚的な効果を施すこととしても良い。例えば、第2階層のメニュー項目の表示を切り替える場合に、第1階層のメニュー項目K210を中心に回転表示するような効果を施すことにより、利用者が直感的な操作ができるようになる。   Further, the menu control unit 210 may provide a visual effect when switching and displaying the second layer menu display. For example, when switching the display of the menu item of the second hierarchy, the user can perform an intuitive operation by providing an effect of rotating the menu item K210 of the first hierarchy.

また、本実施形態においては、メニューリストを記憶しており、当該メニューリストに基づいてメニュー表示を行うこととして説明したが、上述した方法に限定されるものではない。すなわち、プログラム(処理)の中で直接メニュー選択処理として記載するとしても良い。   In the present embodiment, the menu list is stored and the menu display is performed based on the menu list. However, the present invention is not limited to the method described above. That is, it may be described as a menu selection process directly in the program (process).

また、説明の都合上、メニューの階層を第1階層(親階層)と第2階層(子階層)の2つとして説明したが、3つ以上の階層としても良いことは勿論である。   Further, for convenience of explanation, the menu hierarchy has been described as two levels, a first hierarchy (parent hierarchy) and a second hierarchy (child hierarchy), but it is needless to say that three or more hierarchies may be used.

このように、本実施形態によれば、メニュー項目の総てが表示画面に表示しきれない場合であっても、利用者のタッチの状態によりメニュー項目の表示を切り替えることができる。したがって、利用者はより平易な操作で、メニューが表示されることになり、容易に所望するメニューを選択することが出来るようになる。   As described above, according to the present embodiment, even when all the menu items cannot be displayed on the display screen, the display of the menu items can be switched depending on the state of the user's touch. Therefore, the user can display the menu with a simpler operation, and can easily select the desired menu.

すなわち、例えば、情報処理装置における候補項目表示制御部において、候補項目として、階層構造の項目のうち親階層の項目を表示する制御を行い(例えば、図13の制御部100;図15のステップS200)、項目選択部において、入力検知部により検知されたタッチに基づいて、前記表示された親階層の項目を選択する親階層項目選択部(例えば、図13の制御部100;図15のステップS202)を含み、前記親階層項目選択部により選択された親階層から選択可能な子階層の項目を表示する制御を行う子階層表示制御部(例えば、図13の制御部100;図15のステップS204)を更に有し、表示変更制御部として、前記項目選択部が、所定時間以上選択されている場合には、前記子階層の項目を変更して表示する制御を行う子階層表示変更制御部(例えば、図13の制御部100;図15のステップS210、S212)を含むことができる。   That is, for example, the candidate item display control unit in the information processing apparatus performs control to display, as candidate items, items in the parent hierarchy among the items in the hierarchical structure (for example, the control unit 100 in FIG. 13; step S200 in FIG. 15). ), In the item selection unit, based on the touch detected by the input detection unit, the parent hierarchy item selection unit (for example, the control unit 100 in FIG. 13; step S202 in FIG. 15) selects the item in the displayed parent hierarchy. ), And a child hierarchy display control unit (for example, the control unit 100 in FIG. 13; step S204 in FIG. 15) that performs control to display items of child hierarchies that can be selected from the parent hierarchy selected by the parent hierarchy item selection unit. ), And as the display change control unit, when the item selection unit has been selected for a predetermined time or more, control to change and display the item of the child hierarchy Uco hierarchical display change controller (e.g., controller 100 in FIG. 13; step S210, S212 of FIG. 15) may include.

また、情報処理装置における子階層表示変更制御部において、表示部に表示されていない子階層の項目が表示されるように制御を行う(例えば、図13の制御部100;図15のステップS212)こととすることもできる。   Further, in the child hierarchy display change control unit in the information processing apparatus, control is performed so that the items of the child hierarchy not displayed on the display unit are displayed (for example, the control unit 100 in FIG. 13; step S212 in FIG. 15). It can also be.

したがって、表示部に親階層の項目を表示し、タッチに基づいて、親階層の項目を選択し、選択された親階層に応じて子階層の項目が表示される。そして、所定時間以上選択されている場合(すなわち所定時間以上タッチが検出されている場合)が所定時間以上検知された場合には、子階層の項目の表示が変更されることとなる。これにより、親階層をタッチで選択しておくことで、子階層の項目の表示が変更されることとなり、利便性の高い情報処理装置を提供することが可能となる。   Accordingly, the parent hierarchy item is displayed on the display unit, and the parent hierarchy item is selected based on the touch, and the child hierarchy item is displayed according to the selected parent hierarchy. When the selection is made for a predetermined time or longer (that is, when a touch is detected for a predetermined time or more), the display of the child hierarchy item is changed. Accordingly, by selecting the parent hierarchy by touch, the display of the child hierarchy items is changed, and it is possible to provide a highly convenient information processing apparatus.

また、子階層の項目の表示を変更する場合に、表示部に表示されていない子階層の項目が表示されるように制御を行うことができる。   In addition, when changing the display of the child hierarchy items, it is possible to perform control so that the child hierarchy items that are not displayed on the display unit are displayed.

[3.変形例]
以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も特許請求の範囲に含まれる。
[3. Modified example]
The embodiment of the present invention has been described in detail with reference to the drawings. However, the specific configuration is not limited to this embodiment, and the design and the like within the scope of the present invention are also within the scope of the claims. include.

また、上述した実施形態においてはシステム液晶を利用することとして説明したが、同様の装置であれば実現可能であることは勿論である。さらに、表示部152及び入力検知部154は、情報処理装置1及び2に一体となっているものとして説明したが、外部の機器として接続されるもので有ってもよい。   In the above-described embodiment, the system liquid crystal is used. However, it is needless to say that the same device can be realized. Furthermore, although the display unit 152 and the input detection unit 154 have been described as being integrated with the information processing apparatuses 1 and 2, they may be connected as external devices.

1、2 情報処理装置
100 制御部
110 認証制御部
120 表示データ制御部
130 表示位置制御部
140 記憶部
142 候補画像DB
144 正解画像DB
146 正解登録プログラム
148 認証プログラム
150 システム液晶
152 表示部
154 入力検知部
210 メニュー制御部
240 記憶部
242 メニューリスト
244 メニュー表示プログラム
DESCRIPTION OF SYMBOLS 1, 2 Information processing apparatus 100 Control part 110 Authentication control part 120 Display data control part 130 Display position control part 140 Storage part 142 Candidate image DB
144 Correct image DB
146 Correct registration program 148 Authentication program 150 System liquid crystal 152 Display unit 154 Input detection unit 210 Menu control unit 240 Storage unit 242 Menu list 244 Menu display program

Claims (4)

タッチされた位置の検出が同時に複数可能な入力検知部と、表示部とを備えた情報処理装置において、
前記表示部に複数の候補項目をランダムに作成して表示する制御を行う候補項目表示制御部と、
前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から選択項目を選択する項目選択部と、
前記項目選択部により、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目から次の選択項目が選択される迄の間、前記選択項目以外の候補項目を、当該候補項目の表示位置と異なる位置に繰り返し変更して表示する制御を行う表示変更制御部と、
を備えることを特徴とする情報処理装置。
In an information processing apparatus including an input detection unit capable of simultaneously detecting a touched position and a display unit,
A candidate item display control unit for performing control to randomly generate and display a plurality of candidate items on the display unit;
While a touch is detected by the input detection unit, an item selection unit that selects a selection item from the displayed candidate items based on the touched position;
When the selection item is selected by the item selection unit for a predetermined time or longer, the candidate item other than the selection item is selected until the next selection item is selected from the candidate items other than the selection item. A display change control unit that performs control to repeatedly change and display a position different from the display position of the candidate item ;
An information processing apparatus comprising:
前記候補項目として複数の画像を記憶する候補画像記憶部と、
前記候補画像の中から正解の画像を記憶する正解画像記憶部と、
を備え、
前記候補項目表示制御部は、前記候補画像記憶部に記憶されている画像を複数表示する制御を行い、
前記項目選択部は、前記表示されている候補の画像の中から、一又は複数の画像を選択画像として選択し、
前記選択画像と、前記正解画像記憶部に記憶されている正解の画像とが一致する場合には、正当な利用者であると認証する認証部を更に有することを特徴とする請求項1に記載の情報処理装置。
A candidate image storage unit for storing a plurality of images as the candidate items;
A correct image storage unit for storing a correct image from the candidate images;
With
The candidate item display control unit performs control to display a plurality of images stored in the candidate image storage unit,
The item selection unit selects one or a plurality of images as selected images from the displayed candidate images,
The authentication unit according to claim 1, further comprising: an authentication unit configured to authenticate a valid user when the selected image matches a correct image stored in the correct image storage unit. Information processing device.
前記認証部は、前記項目選択部により選択されている選択項目のうち、一の選択項目において検知されているタッチが解除されたときに認証を行うことを特徴とする請求項2に記載の情報処理装置。   The information according to claim 2, wherein the authentication unit performs authentication when a touch detected in one selection item among the selection items selected by the item selection unit is released. Processing equipment. タッチされた位置の検出が同時に複数可能な入力検知部と、表示部と備えたコンピュータに、
前記表示部に複数の候補項目をランダムに作成して表示する制御を行う候補項目表示制御機能と、
前記入力検知部によりタッチが検知されている間、タッチされた位置に基づいて、前記表示された候補項目の中から選択項目を選択する項目選択機能と、
前記項目選択機能により、選択項目が所定時間以上選択されている場合には、前記選択項目以外の候補項目から次の選択項目が選択される迄の間、前記選択項目以外の候補項目を、当該候補項目の表示位置と異なる位置に繰り返し変更して表示する制御を行う表示変更制御機能と、
を実現させるためのプログラム。
A computer equipped with an input detection unit capable of simultaneously detecting a touched position and a display unit,
A candidate item display control function for performing control to randomly create and display a plurality of candidate items on the display unit;
While the touch is detected by the input detection unit, an item selection function for selecting a selection item from the displayed candidate items based on the touched position;
When the selection item is selected for a predetermined time or more by the item selection function, the candidate item other than the selection item is selected until the next selection item is selected from the candidate items other than the selection item. A display change control function for performing control to repeatedly change and display a position different from the display position of the candidate item ;
A program to realize
JP2012008925A 2012-01-19 2012-01-19 Information processing apparatus and program Expired - Fee Related JP5539415B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012008925A JP5539415B2 (en) 2012-01-19 2012-01-19 Information processing apparatus and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012008925A JP5539415B2 (en) 2012-01-19 2012-01-19 Information processing apparatus and program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2009012552A Division JP4913834B2 (en) 2009-01-23 2009-01-23 Information processing apparatus, control method, and program

Publications (2)

Publication Number Publication Date
JP2012074089A JP2012074089A (en) 2012-04-12
JP5539415B2 true JP5539415B2 (en) 2014-07-02

Family

ID=46170094

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012008925A Expired - Fee Related JP5539415B2 (en) 2012-01-19 2012-01-19 Information processing apparatus and program

Country Status (1)

Country Link
JP (1) JP5539415B2 (en)

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2708358B1 (en) * 1993-07-01 1995-09-01 Bull Cp8 Method for entering confidential information, terminal and associated verification system.
JP2001216264A (en) * 2000-02-04 2001-08-10 Atsushi Kara Individual collation method and individual collation device
JP2002015132A (en) * 2000-06-28 2002-01-18 Pfu Ltd Method and device for individual authentication
JP2002032176A (en) * 2000-07-18 2002-01-31 Dainippon Printing Co Ltd Input device and its key arranging method
JP2002229948A (en) * 2001-02-01 2002-08-16 Matsushita Electric Ind Co Ltd Authentication system and program
JP2002312105A (en) * 2001-04-17 2002-10-25 Toshiba Corp Input device, key function guidance method and input method
JP2003122721A (en) * 2001-10-16 2003-04-25 Media House Kk Data input authentication system, data input authentication method, and input terminal for data authentication system
JP4327441B2 (en) * 2002-11-05 2009-09-09 独立行政法人科学技術振興機構 Personal authentication system using images
KR20050030541A (en) * 2003-09-25 2005-03-30 황재엽 The method of safe certification service
JP2006040235A (en) * 2004-07-22 2006-02-09 Takashi Nishihira Method for registering and collating personal identification number
JP4422088B2 (en) * 2005-09-27 2010-02-24 Necネクサソリューションズ株式会社 Image array type authentication system
JP2007264929A (en) * 2006-03-28 2007-10-11 Pioneer Electronic Corp User authentication system, user authentication method, operation terminal and server or the like
JP4062707B2 (en) * 2006-05-01 2008-03-19 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 Information processing device, information processing method, information processing program, and portable terminal device
US20070277224A1 (en) * 2006-05-24 2007-11-29 Osborn Steven L Methods and Systems for Graphical Image Authentication
JP2008009856A (en) * 2006-06-30 2008-01-17 Victor Co Of Japan Ltd Input device
JP4925121B2 (en) * 2006-07-04 2012-04-25 独立行政法人産業技術総合研究所 PIN code input device and PIN code input method using fake pointer
US7864163B2 (en) * 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
KR20080032901A (en) * 2006-10-11 2008-04-16 삼성전자주식회사 Apparatus and method for multi-touch decision
JP4863211B2 (en) * 2006-12-15 2012-01-25 株式会社日立ソリューションズ Character data input device
JP4991351B2 (en) * 2007-03-02 2012-08-01 Necディスプレイソリューションズ株式会社 Image display apparatus, authentication method, and program
JP2008217640A (en) * 2007-03-07 2008-09-18 Sharp Corp Item selection device by tree menu, and computer program
JP5101373B2 (en) * 2007-04-10 2012-12-19 古野電気株式会社 Information display device

Also Published As

Publication number Publication date
JP2012074089A (en) 2012-04-12

Similar Documents

Publication Publication Date Title
USRE49669E1 (en) Information processing apparatus
US20100214239A1 (en) Method and touch panel for providing tactile feedback
JP4818036B2 (en) Touch panel control device and touch panel control method
US20130159927A1 (en) Electronic device with touch screen and screen unlocking method thereof
US20090289916A1 (en) Electronic device and method for switching between locked state and unlocked state
JP5333397B2 (en) Information processing terminal and control method thereof
JP2013238935A (en) Input device, input device controlling method, controlling program, and recording medium
US20150253925A1 (en) Display control device, display control method and program
CN104461336B (en) Electronic device and unlocking method thereof
CN108733303A (en) The touch inputting method and equipment of portable terminal
TW201604705A (en) Electronic device for fingerprint sensing and method for invoking applications thereof
JP2011034169A (en) Information input device and information input method
JP2008065504A (en) Touch panel control device and touch panel control method
JP4913834B2 (en) Information processing apparatus, control method, and program
JP2014016743A (en) Information processing device, information processing device control method and information processing device control program
CN108700990B (en) Screen locking method, terminal and screen locking device
JP4880003B2 (en) Information processing apparatus, control method, and program
JP5986456B2 (en) Mobile terminal device, program, and password input method
JP2011209929A (en) Mobile terminal and character color change method in the same
JP5539415B2 (en) Information processing apparatus and program
KR20130095606A (en) Mobile terminal based on 3d function key and method for converting of display 3d function key
KR20120081422A (en) Terminal having touch screen and method for inputting letter according to touch event thereof
JP5801728B2 (en) Touch panel device and touch panel device operation processing method
JP2012173997A (en) Display device, display method and display program
KR20140114145A (en) Operation method of personal portable device having touch panel

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120119

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130820

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131015

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140408

R150 Certificate of patent or registration of utility model

Ref document number: 5539415

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140430

LAPS Cancellation because of no payment of annual fees