WO2009147755A1 - 情報処理装置および入力制御方法 - Google Patents

情報処理装置および入力制御方法 Download PDF

Info

Publication number
WO2009147755A1
WO2009147755A1 PCT/JP2008/069679 JP2008069679W WO2009147755A1 WO 2009147755 A1 WO2009147755 A1 WO 2009147755A1 JP 2008069679 W JP2008069679 W JP 2008069679W WO 2009147755 A1 WO2009147755 A1 WO 2009147755A1
Authority
WO
WIPO (PCT)
Prior art keywords
fingerprint sensor
finger
detected
movement
key
Prior art date
Application number
PCT/JP2008/069679
Other languages
English (en)
French (fr)
Inventor
雅之 後藤
細井 誠
嘉宏 高松屋
山田 茂史
Original Assignee
富士通株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士通株式会社 filed Critical 富士通株式会社
Priority to JP2010515730A priority Critical patent/JP5287855B2/ja
Publication of WO2009147755A1 publication Critical patent/WO2009147755A1/ja
Priority to US12/926,689 priority patent/US8446382B2/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547Touch pads, in which fingers can move on a surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/033Indexing scheme relating to G06F3/033
    • G06F2203/0338Fingerprint track pad, i.e. fingerprint sensor used as pointing device tracking the fingertip image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/23Construction or mounting of dials or of equivalent devices; Means for facilitating the use thereof
    • H04M1/233Construction or mounting of dials or of equivalent devices; Means for facilitating the use thereof including a pointing device, e.g. roller key, track ball, rocker switch or joystick
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/23Construction or mounting of dials or of equivalent devices; Means for facilitating the use thereof
    • H04M1/236Construction or mounting of dials or of equivalent devices; Means for facilitating the use thereof including keys on side or rear faces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Definitions

  • the present invention relates to an information processing apparatus and an input control method using a fingerprint sensor, and more particularly to an information processing apparatus and an input control method that can prevent malfunction due to an unintended operation.
  • Patent Document 1 discloses a portable terminal device that can be operated by a jog dial, which is provided with a fingerprint authentication function integrally with the jog dial and restricts or cancels the terminal operation function by the jog dial according to a fingerprint collation result. It has been.
  • the finger touches the fingerprint sensor unintentionally regardless of how it is held or gripped.
  • the fingerprint sensor detects the touch of the finger and outputs operation information.
  • An object of the present invention is to prevent a malfunction caused by an unintended operation in an information processing apparatus such as a portable terminal by an operation using a fingerprint sensor.
  • the information processing apparatus disclosed in the present application is equivalent to a fingerprint sensor that detects the movement of a finger, and the finger movement detected by the fingerprint sensor corresponds to an operation instruction to an application that operates on the information processing apparatus.
  • a conversion unit that converts the input event to an input event, and the conversion unit detects a finger movement detected by the fingerprint sensor when a movement amount of the finger detected by the fingerprint sensor is larger than a threshold value related to the movement amount. Is converted to the input event.
  • FIG. 1 is a diagram illustrating a configuration of a mobile phone according to an embodiment.
  • FIG. 2 is a block diagram showing an operation input function of the mobile phone.
  • FIG. 3 is a flowchart of processing executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 4 is a flowchart of the process 1 among the processes executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 5 is a flowchart of the process 2 among the processes executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 6 is a flowchart of process 3 among the processes executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 7 is a flowchart of the process 4 among the processes executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 3 is a flowchart of processing executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 8 is a flowchart of processes 5 to 8 following process 4 executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 9 is a diagram showing a finger pointer setting screen of the mobile phone.
  • FIG. 10A is a diagram illustrating a scene in which a human intentionally touches the fingerprint sensor for operation.
  • FIG. 10B is a diagram illustrating an example of an image obtained by the fingerprint sensor in the scene illustrated in FIG.
  • FIG. 11A is a diagram illustrating a scene in which a human touches the fingerprint sensor unintentionally.
  • FIG. 11B is a diagram illustrating an example of an image obtained by the fingerprint sensor in the scene illustrated in FIG.
  • FIG. 12 is a diagram for explaining threshold processing regarding the movement amount.
  • a fingerprint device capable of detecting finger fingerprints and finger movements is mounted as an input device on a portable terminal or the like.
  • Fingerprint authentication inherits the conventional technology.
  • the movement of the finger that performs the pointing operation is characterized by the addition of an extended function in the device system, and the tuning, double-tap, and drag mode functions according to the user's operability, providing comfortable usability. .
  • FIG. 1 is a diagram illustrating a configuration of a mobile phone according to an embodiment.
  • 1 is a display
  • 2 is an operation key
  • 3 is a multi-cursor key
  • 4 indicates a fingerprint sensor
  • 5 indicates a camera.
  • the mobile phone is a foldable type comprising an upper housing 13 and a lower housing 14, and in the opened state, a front side comprising a display 1, operation keys 2 and multifunction keys 3, and a back side comprising a fingerprint sensor 4 and a camera 5.
  • the upper housing 13 accommodates the display 1 on the front surface side and the camera 5 on the back surface side
  • the lower housing 14 has operation keys 2 and multi-cursor keys 3 on the front surface side and a fingerprint sensor 4 on the back surface side. Is housed.
  • the fingerprint sensor 4 is very small compared to the display 1 and is approximately 10 mm in the longitudinal direction.
  • the cellular phone detects the direction and size of finger movement by pattern matching the fingerprint image obtained every 8 ms by the fingerprint sensor 4. Since the maximum speed at which a human moves his / her finger is about 20 cm / s, even if the image is obtained by the fingerprint sensor 4 of about 10 mm in the longitudinal direction, the image obtained at an interval of 8 ms has a fingerprint pattern. Matching parts are included. Then, if a portion where the fingerprint pattern matches is detected, it is possible to know how much the finger has moved in which direction while those images are obtained.
  • FIG. 10-1 is a diagram showing a scene in which a human is intentionally touching the fingerprint sensor 4 for operation.
  • FIG. 10A when a human intentionally touches the fingerprint sensor 4, the finger 20 is placed at a position covering the entire fingerprint sensor 4.
  • an image 31a and an image 31b as shown in FIG. 10-2 are obtained continuously.
  • the fingerprint pattern is shown on almost the entire surface.
  • an image 31c is obtained. Since the finger 20 is stationary, the image 31c is the entire image 31b superimposed on the image 31a. In this case, the movement of the finger 20 is not detected.
  • FIG. 11A is a diagram illustrating a scene in which a human touches the fingerprint sensor 4 unintentionally.
  • the finger 20 may be placed at a corner such as the right end of the fingerprint sensor 4.
  • an image 32a and an image 32b as shown in FIG.
  • the sharpness of the fingerprint image input to the fingerprint sensor 4 varies depending on the strength with which the finger is pressed and the degree of wetness. Therefore, the fingerprint sensor 4 adjusts the level of the detected signal by AGC (Automatic Gain Control) so that the sharpness of the fingerprint is constant in the output image. Therefore, when the finger 20 is placed at the right end of the fingerprint sensor 4, the detected signal is excessively amplified so that an image corresponding to the fingerprint can be obtained even in a portion where the finger 20 is not placed.
  • AGC Automatic Gain Control
  • the right end portion where the image of the fingerprint should originally appear is darkened, and noise appears due to amplification in the other portions. Since noise is generated randomly, the noise portions of the image 32a and the image 32b are images having different patterns.
  • an image 32c is obtained. Since the noise portions of the image 32a and the image 32b have different patterns, the image 32a and the image 32b do not completely overlap in the image 32c, and the movement of the finger 20 is erroneously detected.
  • the signal is excessively amplified by the AGC, so that the movement of the finger 20 is erroneously detected, causing the mobile phone to malfunction.
  • the case where the finger is not moving has been described.
  • a movement different from the movement is erroneously detected by the action of the AGC, A malfunction may occur in the mobile phone.
  • the mobile phone according to the present embodiment performs threshold processing on the detected movement of the finger 20. Specifically, the mobile phone according to the present embodiment detects when the movement amount of the finger detected by the fingerprint sensor 4 exceeds a threshold corresponding to the maximum movement amount that a human finger can move. Discard the result.
  • a curve a shows a distribution of detection frequencies of finger movement amounts detected by the fingerprint sensor 4 when a human intentionally operates.
  • a curve c represents a distribution of detection frequencies of the amount of movement of the finger detected by the fingerprint sensor 4 when a human touches the end of the fingerprint sensor 4 unintentionally.
  • the curve a and the curve c have an overlapping part, but the curve c is wider than the curve a. This is because the amount of movement erroneously detected by the action of AGC may be larger than the amount of movement that a human finger can move. Therefore, by setting the upper limit value Ta of the movement amount of the curve a as a threshold value, only the movement amount erroneously detected by the action of AGC is discarded without discarding the movement amount detected when the human intentionally operates. Can be discarded.
  • Ta may be calculated in advance based on the maximum value (about 20 cm / s) of the amount of movement that a human finger can move, and the interval at which the finger movement is detected. It is also possible to determine for each user by multiplying the maximum value of the movement amount obtained by instructing the above operation a plurality of times by a margin rate (coefficient of 1 or more).
  • a curve b in FIG. 12 shows the distribution of the detection frequency of the finger movement amount detected by the fingerprint sensor 4 together with the change of the finger movement direction when a human intentionally operates.
  • the amount of finger movement is reduced by that amount, and the curve b is narrowed. Therefore, when a change in the finger movement direction is detected by the fingerprint sensor 4, the movement amount erroneously detected by the action of the AGC is discarded by setting the upper limit value Tb of the movement amount of the curve b as a threshold value. Probability can be increased.
  • the movement amount is discarded a predetermined number of times or more, that is, when an erroneous detection due to the action of the AGC occurs a predetermined number of times or more, a state where the human touches the end of the fingerprint sensor 4 unintentionally. Is ignored, and all the detection results of the fingerprint sensor 4 are ignored until a predetermined operation is detected.
  • the predetermined operation is, for example, an operation in which a finger leaves the fingerprint sensor 4 and touches the fingerprint sensor 4 again.
  • FIG. 2 is a block diagram showing an operation input function of the mobile phone.
  • 3 is a multi-cursor key
  • 4 is a fingerprint sensor
  • 6 is a fingerprint sensor driver
  • 7 is a key driver
  • 8 is a wrapper
  • 9 is a framework
  • 10 is an application
  • 11 is a pointer application
  • 12 is a key application.
  • the fingerprint sensor driver 6 determines the operation of the finger based on the image information of the finger detected by the fingerprint sensor 4 and notifies various types of events.
  • the event includes types such as up / down / left / right keys, coordinates, right click, and sensor touch.
  • the up / down / left / right key is an event converted into up / down / left / right movement from the traced direction or movement amount when the fingerprint sensor 4 is traced.
  • the coordinates are events converted into relative coordinates (moving coordinates) from the traced direction and moving amount when the fingerprint sensor 4 is traced.
  • the right click is an event indicating that the fingerprint sensor 4 has been tapped.
  • the sensor touch is an event indicating when the finger touches the fingerprint sensor 4 or when the finger is released.
  • the key driver 7 When the multi-cursor key 3 is pressed, the key driver 7 notifies the framework 9 of an event indicating the pressed key.
  • the wrapper 8 corrects the coordinate and the up / down / left / right key event notified from the fingerprint sensor driver 6 so as to operate without any sense of incongruity, and notifies the complaint work 9 of the correction.
  • the wrapper 8 converts the application 10 into an event required by the right click event or sensor touch event notified from the fingerprint sensor driver 6.
  • the wrapper 8 is an event in which the finger is placed on the fingerprint sensor 4 from the sensor touch event and the coordinate event notified from the fingerprint sensor driver 6 and the finger is not moved for a certain period of time.
  • the framework 9 notifies the application 10 of the event notified from the wrapper 8 or the key driver 7. Further, the framework 9 notifies the event to be notified by pulling down the finger pointer on the finger pointer setting screen of FIG. 9 in the form of [1] all functions valid, [2] full browser / i-appli valid, [3] invalid 3 If [2] is selected and set, the application to be notified can be limited, or if [3] is selected and set, the notification can be disabled.
  • the pointer system 11 in the application 10 operates based on events of up / down / left / right keys, coordinates, determination keys, and drag keys from the framework 9.
  • the key system 12 in the application 10 operates based on the events of the up / down / left / right keys and the decision key from the framework 9.
  • FIG. 3 shows a flowchart of processing executed by the operation input function of the mobile phone shown in FIG. 2 and 3, an event is received from fingerprint sensor driver 6 at S1.
  • S2 the following operation is performed for each event received from the fingerprint sensor driver 6.
  • S3 if a coordinate event is received, the operation proceeds to S3. If a key event is received, the operation proceeds to S4. If a right click event is received, the operation proceeds to S9. If a sensor touch event is received, the operation proceeds to S5.
  • S12 it is determined whether or not the notification impossibility flag is OFF. If OFF, the process proceeds to S13. If ON, that is, if a malfunction is recognized, the coordinate event is discarded and nothing is notified to the framework 9 in S14. In S13, it is determined whether the coordinate X of the coordinate event is equal to or less than the threshold value. If the threshold value is less than the threshold value, the process proceeds to S15. If the threshold value is exceeded, the abnormal coordinate notification counter is updated as an invalid coordinate event in S17, and the coordinate event is discarded in S18. And nothing is notified to the framework 9.
  • S15 it is determined whether the coordinate Y of the coordinate event is equal to or less than the threshold value. If the threshold value is not greater than the threshold value, the process proceeds to S19. If the threshold value is exceeded, the abnormal coordinate notification counter is updated as an invalid coordinate event in S17. And nothing is notified to the framework 9.
  • the coordinate event (coordinate X, Y) is compared with the previous coordinate event (coordinate X, Y), and if both the X axis and the Y axis have the same sign, the process proceeds to S23, where either the X axis or the Y axis.
  • the process proceeds to S20.
  • the movement amount (axis difference) of the inverted axis is calculated. If the calculated movement amount is equal to or less than the threshold value, the process proceeds to S23. If the calculated movement amount exceeds the threshold value, the abnormal coordinate notification counter is updated as an invalid coordinate event in S21, and the coordinate event is discarded in S22. None is notified to 9.
  • the process proceeds to process 1. If the abnormal coordinate value counter exceeds the threshold value, the abnormal coordinate value counter is cleared (0) in S25, and the notification disabled flag is set to “ "ON”.
  • step 9 if it is a right click event, it is determined whether the notification disable flag is OFF. If OFF, the process proceeds to step 2. If ON, that is, if a malfunction is recognized, the right click event is discarded in S11 and the framework 9 is discarded. Do not notify anything.
  • FIG. 4 shows a flowchart of the process 1 among the processes executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 5 shows a flowchart of the process 2 among the processes executed by the operation input function of the mobile phone shown in FIG.
  • the process proceeds to S30, and the right click event is the right click Up key (the finger touches the fingerprint sensor 4 and is released immediately). If so, in step S31, the right-click Up key is discarded because it is an unnecessary right-click event, and nothing is notified to the framework 9.
  • the event that the right click is notified twice in a fixed time is referred to as a double tap.
  • the double tap monitoring timer for monitoring the fixed time is not set, to S32, the double tap monitoring timer is set To S33.
  • FIG. 6 shows a flowchart of the process 3 among the processes executed by the operation input function of the mobile phone shown in FIG.
  • the drag mode monitoring is performed in S36 if the sensor touch event is in the state with a finger (touched by the fingerprint sensor). Set the timer.
  • the process ends (END). If the drag mode monitoring timer has been set, the drag mode monitoring timer is canceled in S38 and dragged to the framework 9 in S39. Notify OFF (drag end).
  • FIG. 7 shows a flowchart of the process 4 among the processes executed by the operation input function of the mobile phone shown in FIG.
  • S40 the type of the key event is determined. If the key is Down, go to S41. If the key is Down, go to S43. If the key is Down, go to S45. If the key is Down, go to S47. If the key is Up, go to S49. If the left key is Up, the process proceeds to S55. If the right key is Up, the process proceeds to S58.
  • the upper key counter is updated (+1) in order to monitor the number of notified upper key events.
  • the upper key timer is set in order to monitor that the upper key event has been continuously notified within a predetermined time. If the upper key timer has been set, the timer is reset and the process proceeds to step 5.
  • the upper key counter is cleared (0).
  • the lower key counter is updated (+1) in order to monitor the number of notified lower key events.
  • the lower key timer is set. If the lower key timer has been set, the timer is reset and the process proceeds to step 6.
  • the lower key counter is cleared (0).
  • the left key counter is updated (+1) in order to monitor the number of notifications of the left key event.
  • the left key timer is set in order to monitor that the left key event is continuously notified within a predetermined time. If the left key timer has been set, the timer is reset, and the process proceeds to processing 7.
  • the left key counter is cleared (0).
  • the right key counter is updated (+1) in order to monitor the number of notifications of the right key event.
  • the right key timer is set in order to monitor that the right key event is continuously notified within a predetermined time. If the right key timer has been set, the timer is reset, and the process proceeds to step 8.
  • the right key counter is cleared (0).
  • the up key Up is notified to the framework 9.
  • the upper key counter is cleared (0).
  • the up key timer is canceled.
  • the left key Up is notified to the framework 9.
  • the left key counter is cleared (0).
  • the left key timer is released.
  • FIG. 8 shows a flowchart of processes 5 to 8 following process 4 executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 8A shows a flowchart of the process 5 following the process 4 executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 8B shows a flowchart of the process 6 following the process 4 executed by the operation input function of the mobile phone shown in FIG.
  • step S66 If the lower key counter is greater than or equal to n in S66, the process proceeds to S67. If the lower key counter is less than n, the lower key event is discarded and no notification is sent to the framework 9 in S68. In step S67, the down key timer is canceled. In step S69, the down key counter is cleared (0). In step S70, the framework 9 is notified of the down key Down.
  • FIG. 8C shows a flowchart of the process 7 following the process 4 executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 8D shows a flowchart of the process 8 following the process 4 executed by the operation input function of the mobile phone shown in FIG.
  • FIG. 9 shows a finger pointer setting screen of the mobile phone.
  • the finger pointer pulls down, [1] When all functions are enabled, the framework 9 notifies the application 11 (pointer application) and the application 12 (key application) of the event. [2] When full browser / i-appli valid is selected, the framework 9 restricts notification of an event only to the application 11 (pointer application). [3] When invalid is selected, the framework 9 does not notify all events.
  • Fingerprint sensor sensitivity can be selected from [1] fast, [2] normal, and [3] slow by pull-down to select the up / down / left / right keys notified from the fingerprint sensor and the correction amount for correcting coordinates. If the fast item is selected, the focus of the list display such as the menu and the browser pointer can be moved up and down and left and right quickly by sliding the finger slightly with the fingerprint sensor.
  • the correction coordinate of S27 described in the flowchart of FIG. 4 the notified coordinate ⁇ the correction value a ⁇ the correction value b varies depending on the setting of the fingerprint sensor sensitivity on the finger pointer setting screen. Depending on the setting “fast”, “normal”, and “slow”, a and b become “1/1”, “3/2”, and “4/2”, which are 1 time, 1.5 times, and 2 times. a and b can have different numerical values.
  • n can have different numerical values at the top, bottom, left and right.
  • the double-tap sensitivity can be adjusted from the first to the second time of right-click by selecting one of [1] fast, [2] normal, and [3] slow by pull-down.
  • the double tap monitoring timer x in S32 described in the flowchart of FIG. 5 varies depending on the double tap sensitivity setting on the finger pointer setting screen. Depending on the setting “fast”, “normal”, and “slow”, x becomes “200 ms”, “300 ms”, and “400 ms”.
  • the application uses an i-appli map, even if the finger touches the fingerprint sensor, the finger moves and the coordinate event appears three times, and then the coordinate event is not output from the fingerprint sensor driver.
  • the pointer can continuously operate with the movement amount of the last coordinate event, here the third coordinate event. At this time, when the finger is removed from the fingerprint sensor, the absence of a finger of the sensor touch event is notified, and the continuous operation of the pointer can be stopped.
  • a mobile phone has been described as an example.
  • An information processing apparatus equipped with a fingerprint sensor, which monitors the value of operation information output from the fingerprint sensor by a certain number of samplings and determines whether the number of times that the allowable value has been exceeded within a certain range has exceeded a certain number
  • a determination unit and a suppression processing unit that discards operation information until an operation with the fingerprint sensor is not detected when the determination unit determines that a certain number has been exceeded may be included.
  • a processing method of an information processing apparatus equipped with a fingerprint sensor wherein the number of samplings, which are operation information output from the fingerprint sensor, is monitored, and if the number of times exceeding an allowable value within the range exceeds a certain number, the fingerprint The operation information may be invalidated until no operation on the sensor is detected.

Abstract

 本願発明は、情報処理装置において、指紋センサを用いた操作で、意図しない操作による誤作動を防止することを目的とする。この目的を達成するため、本願の情報処理装置は、指の動きを検出する指紋センサと、前記指紋センサによって検出された指の動きを、情報処理装置上で動作するアプリケーションへの操作指示に相当する入力イベントへ変換する変換部とを備え、前記変換部は、前記指紋センサによって検出された指の移動量が、移動量に関する閾値よりも大きい場合に、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制する。

Description

情報処理装置および入力制御方法
 本発明は、指紋センサを使用した情報処理装置および入力制御方法に関し、特に、意図しない操作による誤動作を防止することができる情報処理装置および入力制御方法に関する。
 近年、携帯電話機は一般に広く普及している。初期の頃の携帯電話機は縦に長い板状のものが主流であったが、長さを縮めて携帯性を向上させるため、最近は携帯電話機の筐体を上筐体と下筐体に分けて重ね合わせ、その一辺に設けた回転軸を中心にして開閉する折り畳み式の携帯電話機が主流となっている。
 また、特許文献1には、ジョグダイヤルにより操作可能な携帯端末装置であって、指紋認証機能をジョグダイヤルと一体的に備え、指紋照合結果に応じてジョグダイヤルによる端末操作機能を規制あるいは解除することが開示されています。
特開2001-265507号公報
 昨今、携帯端末等に搭載している指紋センサデバイスを使って、指紋認証やポインティング操作が使えるデバイスが増加しています。
 ポインティング操作は、通常どの場面においても操作が有効となっている傾向があります。
 指紋センサの搭載場所によって異なりますが、携帯端末の持ち方・握り方によって操作とは関係なく無意識に指が指紋センサに触れることは多々発生します。この無意識に指が触れるとき(非常に軽い接触でも)、指紋センサは指の接触を感知して、操作情報を出力します。
 無意識による接触の場合、指紋センサのセンサ部への接地が不安定状態になり、指の特徴点が著しく変動する傾向が見受けられ、上位アプリ(フルブラウザ等)にて誤作動・誤動作が発生し続けることが問題となっています。
 本発明は、携帯端末等の情報処理装置において、指紋センサを用いた操作で、意図しない操作による誤作動を防止することを目的とする。
 本願の開示する情報処理装置は、一つの態様において、指の動きを検出する指紋センサと、前記指紋センサによって検出された指の動きを、情報処理装置上で動作するアプリケーションへの操作指示に相当する入力イベントへ変換する変換部とを備え、前記変換部は、前記指紋センサによって検出された指の移動量が、移動量に関する閾値よりも大きい場合に、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制する。
 本発明によれば、情報処理装置において、意図しない操作による誤作動を防止することができ、操作性が向上され、快適なユーザビリティが得られる。
図1は、実施例の携帯電話機の構成を示す図である。 図2は、携帯電話機の操作入力機能を示すブロック図である。 図3は、図2に示した携帯電話機の操作入力機能で実行される処理のフローチャートである。 図4は、図2に示した携帯電話機の操作入力機能で実行される処理のうち、処理1のフローチャートである。 図5は、図2に示した携帯電話機の操作入力機能で実行される処理のうち、処理2のフローチャートである。 図6は、図2に示した携帯電話機の操作入力機能で実行される処理のうち、処理3のフローチャートである。 図7は、図2に示した携帯電話機の操作入力機能で実行される処理のうち、処理4のフローチャートである。 図8は、図7に示した携帯電話機の操作入力機能で実行される処理4に続く、処理5から8のフローチャートである。 図9は、携帯電話機のフィンガーポインタ設定画面を示す図である。 図10-1は、人間が操作のために意図的に指紋センサに触れている場面を示す図である。 図10-2は、図10-1の場面で指紋センサにおいて得られる画像の一例を示す図である。 図11-1は、人間が意図せずに指紋センサに触れている場面を示す図である。 図11-2は、図11-1の場面で指紋センサにおいて得られる画像の一例を示す図である。 図12は、移動量に関する閾値処理について説明するための図である。
符号の説明
1 ディスプレイ
2 操作キー
3 マルチキーソルキー
4 指紋センサ
5 カメラ
6 指紋センサドライバ
7 キードライバ
8 ラッパー
9 フレームワーク
10 アプリケーション
11 ポインタ系アプリ
12 キー系アプリ
13 上部筐体
14 下部筐体
 本発明の実施例の一態様においては、携帯端末等に指の指紋と指の動きが検出可能な指紋デバイスを入力装置として搭載します。
 指のスライドによる指紋認証と指の動き(上下左右斜め)に追従したポインティング操作の機能を兼ね備えることを特徴とします。
 指の指紋認証は、従来技術を継承する。ポインティング操作を行う指の動きは、装置システム内に拡張機能を追加し、使用者の操作性に応じたチューニングやダブルタップ、ドラッグモードの機能を揃え、快適なユーザビリティを得られることを特徴とします。
 以下、図面を用いて本発明の実施の形態について説明する。
(全体構成)
 図1は実施例の携帯電話機の構成を示す図である。
 図1(A)において、1はディスプレイ、2は操作キー、3はマルチカーソルキーを示す。また、図1(B)において、4は指紋センサ、5はカメラを示す。
 携帯電話機は、上部筐体13と下部筐体14からなる折りたたみ型で、開いた状態において、ディスプレイ1と操作キー2とマルチファンクションキー3からなる表面側と、指紋センサ4とカメラ5からなる裏面側がある。また、上部筐体13には、表面側にディスプレイ1と裏面側にカメラ5を収容し、下部筐体14には、表面側に操作キー2とマルチカーソルキー3と、裏面側に指紋センサ4を収容している。指紋センサ4は、図1を見てわかるように、ディスプレイ1に比べてサイズが非常に小さく、長手方向に10mm程度の大きさである。
(無意識の接触による誤作動)
 ここで、無意識に指が指紋センサ4に触れることによって生じる誤作動について説明しておく。本実施例に係る携帯電話機は、指紋センサ4によって8ms毎に得られる指紋の画像をパターンマッチングすることによって、指の動きの方向と大きさを検出する。人間が指を動かす速度は、最大で20cm/s程度であるので、長手方向10mm程度の指紋センサ4によって得られた画像であっても、8ms間隔で得られた画像には、指紋のパターンが一致する部分が含まれる。そして、指紋のパターンが一致する部分が検出されれば、それらの画像が得られる間に、指がどの方向にどれだけ移動したのかが分かる。
 図10-1は、人間が操作のために意図的に指紋センサ4に触れている場面を示す図である。図10-1に示すように、人間が意図的に指紋センサ4に触れる場合、指20は、指紋センサ4の全体を覆うような位置に置かれる。そして、指20が静止していると、図10-2に示すような画像31aと画像31bが連続して得られる。画像31aと画像32bには、指紋のパターンがほぼ全面に写っている。
 そして、画像31aと画像31bをパターンマッチングして、指紋のパターンが一致する部分が重なるように連結すると、画像31cが得られる。指20が静止していたため、画像31cは、画像31bの全体が画像31aに重なったものとなる。この場合、指20の移動は検出されない。
 図11-1は、人間が意図せずに指紋センサ4に触れている場面を示す図である。図11-1に示すように、人間が意図せずに指紋センサ4に触れる場合、指20は、指紋センサ4の右端等の隅に位置に置かれることがある。そして、指20が静止していると、図11-2に示すような画像32aと画像32bが連続して得られる。
 指紋センサ4に入力される指紋の像の鮮明度は、指を押し付ける強さや湿潤の度合いによって異なる。そこで、指紋センサ4は、出力する画像において指紋の鮮明度が一定になるように、検出した信号のレベルをAGC(Automatic Gain Control)によって調整する。そのため、指20が、指紋センサ4の右端に置かれると、指20が置かれていない部分でも指紋に相当する像が得られるように、検出した信号を過度に増幅してしまう。
 その結果、画像32aと画像32bは、本来であれば指紋の像が写るはずの右端の部分が黒ずみ、他の部分には増幅によりノイズが浮き出たものとなる。そして、ノイズはランダムに生じるため、画像32aと画像32bのノイズ部分は、異なるパターンの像となる。
 そして、画像32aと画像32bをパターンマッチングして、指紋のパターンが一致する部分が重なるように連結すると、画像32cが得られる。画像32aと画像32bのノイズ部分が異なるパターンを有するため、画像32cにおいては、画像32aと画像32bが完全に重なることはなく、指20の移動が誤検出される。
 このように、指20が、指紋センサ4の端に触れている場合、AGCによって信号が過度に増幅されるために、指20の移動が誤検出され、携帯電話機に誤作動を生じさせる。なお、上記の説明では、指が動いていない場合について説明したが、指20が指紋センサ4の端で動いている場合にも、AGCの作用によって、その動きとは異なる動きが誤検出され、携帯電話機に誤作動を生じさせることがある。
 このような誤作動を抑止するため、本実施例に係る携帯電話機は、検出された指20の動きを閾値処理する。具体的には、本実施例に係る携帯電話機は、指紋センサ4によって検出された指の移動量が、人間の指が動きうる移動量の最大値に相当する閾値を超える場合には、その検出結果を破棄する。
 このように、移動量に関する閾値判定を行うことにより、AGCの作用によって誤検出されることはあるが、正常な指の動きでは検出されることがない検出結果を無視し、誤作動を防止することができる。
 ここで、移動量に関する閾値処理で用いられる閾値について図12を参照しながら説明する。図12において、曲線aは、人間が意図的に操作を行った場合に指紋センサ4によって検出される指の移動量の検出頻度の分布を示す。また、曲線cは、人間が意図せずに指紋センサ4の端に触れた場合に指紋センサ4によって検出される指の移動量の検出頻度の分布を示す。
 図12に示すように、曲線aと曲線cは、重複する部分はあるものの、曲線cの方が曲線aよりも広くなっている。これは、AGCの作用によって誤検出される移動量は、人間の指が動きうる移動量よりも大きくなることがあるからである。そこで、曲線aの移動量の上限値Taを閾値とすることにより、人間が意図的に操作した場合に検出された移動量を廃棄することなく、AGCの作用によって誤検出された移動量のみを廃棄することができる。
 なお、Taは、人間の指が動きうる移動量の最大値(20cm/s程度)と、指の動きを検出する間隔とに基づいて予め算出することとしてもよいし、利用者に指紋センサ4の操作を複数回指示して得られた移動量の最大値に余裕率(1以上の係数)を乗じて利用者毎に決定することとしてもよい。
 また、閾値処理において指の移動方向の変化を考慮することとしてもよい。図12の曲線bは、人間が意図的に操作を行った場合に、指紋センサ4によって指の移動方向の変化とともに検出される指の移動量の検出頻度の分布を示す。図12に示すように、人間が指の方向を変化させた場合、指の移動量はその分だけ小さくなり、曲線bは狭くなる。そこで、指紋センサ4によって指の移動方向の変化が検出された場合には、曲線bの移動量の上限値Tbを閾値とすることにより、AGCの作用によって誤検出された移動量が廃棄される確率を高めることができる。
 また、移動量の廃棄を所定の回数以上行った場合、すなわち、AGCの作用による誤検出が所定の回数以上発生した場合には、人間が意図せずに指紋センサ4の端に触れている状態が継続しているとみなして、所定の動作が検出されるまで、指紋センサ4の検出結果をすべて無視する。所定の動作とは、たとえば、指が指紋センサ4から離れて、再び指紋センサ4に触れる動作である。
 このように、検出回数に関する閾値判定を行うことにより、検出された移動量が、AGCの作用によるものであるのか正常な指の動きによるものであるか判別できない範囲である場合でも、AGCの作用による誤検出を判別し、誤作動を防止することができる。
(操作入力機能)
 図2は、携帯電話機の操作入力機能を示すブロック図である。3はマルチカーソルキー、4は指紋センサ、6は指紋センサドライバ、7は、キードライバ、8はラッパー、9はフレームワーク、10はアプリケーション、11はポインタ系アプリケーション、12はキー系アプリケーションを示す。指紋センサドライバ6は、指紋センサ4で検出する指の画像情報を基に、指の動作を判断して、様々な種類のイベントを通知する。そのイベントは、上下左右キー、座標、右クリックおよびセンサタッチなどの種類からなる。上下左右キーは、指紋センサ4をなぞったときに、なぞった方向や移動量より上下左右の移動に変換したイベントである。座標は、指紋センサ4をなぞった時に、なぞった方向や移動量より相対座標(移動座標)に変換したイベントである。右クリックは、指紋センサ4をタップしたことを示すイベントである。センサタッチは、指紋センサ4に指が触れたとき、指が離れたときを示すイベントである。
 キードライバ7は、マルチカーソルキー3の上下左右、決定キーが押されると、押されたキーを示すイベントがフレームワーク9へ通知される。
 ラッパー8は、指紋センサドライバ6から通知される座標、上下左右キーイベントについて、違和感がなく動作できる補正をして、クレームワーク9へ通知する。ラッパー8は、指紋センサドライバ6から通知される右クリックイベントやセンサタッチイベントでアプリケーション10が必要なイベントに変換する。ラッパー8は、指紋センサドライバ6から通知されるセンサタッチイベントと座標イベントから、指紋センサ4に指が置いて、一定時間指の移動がない、つまり座標イベントに変更なければ、ドラッグモードとするイベントをフレームワーク9へ通知する。
 フレームワーク9は、ラッパー8やキードライバ7から通知されたイベントを、アプリケーション10へ通知する。また、フレームワーク9は、通知するイベントを、図9のフィンガーポインタ設定画面のフィンガーポインタをプルダウン形式で〔1〕すべての機能有効、〔2〕フルプラウザ/iアプリ有効、〔3〕無効の3つから選択して設定することで、〔2〕を選択して設定すると、通知するアプリケーションを限定したり、〔3〕を選択して設定すると、通知しない無効とすることができる。
 アプリケーション10内のポインタ系11は、フレームワーク9からの上下左右キー、座標、決定キーおよびドラッグキーのイベントに基づき動作する。アプリケーション10内のキー系12は、フレームワーク9からの上下左右キーと決定キーのイベントに基づき動作する。
 図3は、図2に示した携帯電話機の操作入力機能で実行される処理のフローチャートを示す。図2および図3を参照して、S1で、指紋センサドライバ6からイベントを受信する。次に、S2で、指紋センサドライバ6から受信したイベント毎に次の動作をする。S2で、座標イベントを受信したらS3へ、キーイベントを受信したらS4へ、右クリックイベントを受信したらS9へ、センサタッチイベントを受信したらS5へと次の動作をする。
 S3で、座標イベントであると、ドラッグモード監視タイマが設定されているか判断し、未設定ならS12へ、設定されていると、S6でドラッグモード監視タイマを解除する。
 S12で、通知不可フラグがOFFかどうか判断し、OFFならS13へ、ONの場合、つまり誤動作を認識した場合、S14で、座標イベントを廃棄してフレームワーク9には何も通知しない。S13で、座標イベントの座標Xは閾値以下か判断し、閾値以下ならS15へ、閾値を越えるならS17で、無効な座標イベントとして、異常座標通知カウンタを更新し、S18で、座標イベントを廃棄してフレームワーク9に何も通知しない。
 S15で、座標イベントの座標Yは閾値以下か判断し、閾値以下ならS19へ、閾値を越えるならS17で、無効な座標イベントとして、異常座標通知カウンタを更新し、S18で、座標イベントを廃棄してフレームワーク9に何も通知しない。
 S19で、座標イベント(座標X,Y)と前回座標イベント(座標X,Y)を比較して、X軸かY軸どちらも同じ符号であれば、S23へ、X軸かY軸どちらかの符号が反転している場合、S20へ移行する。S20で、反転している軸の移動量(軸の差分)を計算する。計算された移動量が閾値以下ならS23へ、計算された移動量が閾値を越える場合、S21で、無効な座標イベントとして異常座標通知カウンタを更新し、S22で、座標イベントを廃棄してフレームワーク9には何も通知しない。
 S23で、座標イベントの受信数がサンプリング数m以上ならS24へ、m未満なら処理1へ移行する。
 S24で、異常座標値カウンタが閾値以下なら、処理1へ移行し、異常座標値カウンタが閾値を越える場合、S25で、異常座標値カウンタをクリア(0)し、S26で、通知不可フラグを「ON」にする。
 S4で、キーイベントであると、ドラッグモード監視タイマが設定されているか判断し、未設定ならS8へ、設定されていると、S7でドラッグモード監視タイマを解除する。
 S8で、通知不可フラグがOFFかどうか判断し、OFFなら処理4へ、ONの場合、つまり誤動作を認識した場合、S10で、キーイベントを廃棄してフレームワーク9には何も通知しない。
 S9で、右クリックイベントであると、通知不可フラグがOFFかどうか判断し、OFFなら処理2へ、ONの場合、つまり誤動作を認識した場合、S11で、右クリックイベントを廃棄してフレームワーク9には何も通知しない。
 S5で、センサタッチイベントであると、通知不可フラグをOFFに設定し、処理3へ移行する。
 図4は、図2に示した携帯電話機の操作入力機能で実行される処理のうち、処理1のフローチャートを示す。
 S27で、座標イベントのX座標と補正値a,bより、補正座標X=通知されたX座標×補正値a÷補正値bという計算式で補正座標Xを計算する。また、座標イベントのY座標と補正値a,bより、補正座標Y=通知されたY座標×補正値a÷補正値bという計算式で補正座標Yを計算する。
 S28で、S27で計算された補正座標X,Yで座標イベントをフレームワーク9に通知する。
 図5は、図2に示した携帯電話機の操作入力機能で実行される処理のうち、処理2のフローチャートを示す。
 S29で、右クリックイベントが右クリックDownキー(指紋センサ4に指がタッチしたときを示す)ならS30へ、右クリックイベントが右クリックUpキー(指紋センサ4に指がタッチして、すぐ離したときを示す)なら、S31で、不要な右クリックイベントであるため右クリックUpキーを廃棄してフレームワーク9には何も通知しない。S30で、右クリックが一定時間に2回イベントが通知された場合をダブルタップといい、その一定時間を監視するダブルタップ監視タイマが未設定の場合、S32へ、ダブルタップ監視タイマが設定の場合、S33へ移行する。
 S32で、1回目の右クリックと判断して、ダブルタップ監視を行うためにダブルタップ監視タイマを設定する。
 ダブルタップ監視タイマがタイムアウトした場合、何もしない。(1回目の右クリックがあったことを忘れる。)S33で、2回目の右クリックと判断して、ダブルタップ監視タイマを解除して、フレームワーク9にダブルタップ(決定キー)を通知する。
 図6は、図2に示した携帯電話機の操作入力機能で実行される処理のうち、処理3のフローチャートを示す。
 S35で、センサタッチイベントが指あり(指紋センサに指が触れた)状態でない場合、S37へ、センサタッチイベントが指あり(指紋センサに指が触れた)状態の場合、S36で、ドラッグモード監視タイマを設定する。
 ドラッグモード監視タイマがタイムアウトした場合、フレームワーク9にドラッグON(ドラッグ開始)を通知する。
 S37で、ドラッグモード監視タイマが設定済みでなければ、終了(END)となり、ドラッグモード監視タイマが設定済みであれば、S38で、ドラッグモード監視タイマを解除し、S39で、フレームワーク9にドラッグOFF(ドラッグ終了)を通知する。
 図7は、図2に示した携帯電話機の操作入力機能で実行される処理のうち、処理4のフローチャートを示す。
 S40で、キーイベントの種別を判断し、上キーDownならS41へ、下キーDownならS43へ、左キーDownならS45へ、右キーDownならS47へ、上キーUpならS49へ、下キーUpならS52へ、左キーUpならS55へ、右キーUpならS58へ移行する。
 S41で、上キーイベントが通知された数を監視するため、上キーカウンタを更新(+1)する。S42で、上キーイベントが一定時間以内に継続して通知されたことを監視するため、上キータイマを設定し、上キータイマが設定済みの場合、タイマの再設定を行い、処理5へ移行する。
 上キータイマがタイムアウトした場合、上キーカウンタをクリア(0)する。
 S43で、下キーイベントが通知された数を監視するため、下キーカウンタを更新(+1)する。S44で、下キーイベントが一定時間以内に継続して通知されたことを監視するため、下キータイマを設定し、下キータイマが設定済みの場合、タイマの再設定を行い、処理6へ移行する。
 下キータイマがタイムアウトした場合、下キーカウンタをクリア(0)する。
 S45で、左キーイベントが通知された数を監視するため、左キーカウンタを更新(+1)する。S46で、左キーイベントが一定時間以内に継続して通知されたことを監視するため、左キータイマを設定し、左キータイマが設定済みの場合、タイマの再設定を行い、処理7へ移行する。
 左キータイマがタイムアウトした場合、左キーカウンタをクリア(0)する。
 S47で、右キーイベントが通知された数を監視するため、右キーカウンタを更新(+1)する。S48で、右キーイベントが一定時間以内に継続して通知されたことを監視するため、右キータイマを設定し、右キータイマが設定済みの場合、タイマの再設定を行い、処理8へ移行する。
 右キータイマがタイムアウトした場合、右キーカウンタをクリア(0)する。
 S49で、フレームワーク9に上キーUpを通知する。S50で、上キーカウンタをクリア(0)する。S51で、上キータイマを解除する。
 S52で、フレームワーク9に下キーUpを通知する。S53で、下キーカウンタをクリア(0)する。S54で、下キータイマを解除する。
 S55で、フレームワーク9に左キーUpを通知する。S56で、左キーカウンタをクリア(0)する。S57で、左キータイマを解除する。
 S58で、フレームワーク9に右キーUpを通知する。S59で、右キーカウンタをクリア(0)する。S60で、右キータイマを解除する。
 図8は、図7に示した携帯電話機の操作入力機能で実行される処理4に続く、処理5から8のフローチャートを示す。
 図8(A)は、図7に示した携帯電話機の操作入力機能で実行される処理4に続く、処理5のフローチャートを示す。
 S61で、上キーカウンタがn以上の場合、S62へ、上キーカウンタがn未満の場合、S63で、上キーイベントを廃棄してフレームワーク9には何も通知しない。S62で、上キータイマを解除し、S64で、上キーカウンタのクリア(0)を行い、S65で、フレームワーク9に上キーDownを通知する。
 図8(B)は、図7に示した携帯電話機の操作入力機能で実行される処理4に続く、処理6のフローチャートを示す。
 S66で、下キーカウンタがn以上の場合、S67へ、下キーカウンタがn未満の場合、S68で、下キーイベントを廃棄してフレームワーク9には何も通知しない。S67で、下キータイマを解除し、S69で、下キーカウンタのクリア(0)を行い、S70で、フレームワーク9に下キーDownを通知する。
 図8(C)は、図7に示した携帯電話機の操作入力機能で実行される処理4に続き、処理7のフローチャートを示す。
 S71で、左キーカウンタがn以上の場合、S72へ、左キーカウンタがn未満の場合、S73で、左キーイベントを廃棄してフレームワーク9には何も通知しない。S72で、左キータイマを解除し、S74で、左キーカウンタのクリア(0)を行い、S75で、フレームワーク9に左キーDownを通知する。
 図8(D)は、図7に示した携帯電話機の操作入力機能で実行される処理4に続く、処理8のフローチャートを示す。
 S76で、右キーカウンタがn以上の場合、S77へ、右キーカウンタがn未満の場合、S78で、右キーイベントを廃棄してフレームワーク9には何も通知しない。S77で、右キータイマを解除し、S79で、右キーカウンタのクリア(0)を行い、S80で、フレームワーク9に右キーDownを通知する。
 図9は、携帯電話機のフィンガーポインタ設定画面を示す。
 フィンガーポインタ設定画面のすべてのプルダウンで、〔1〕から〔3〕までいずれかを選択し、画面下の登録を押すと、設定される。
 まず、フィンガーポインタは、プルダウンにより、〔1〕すべての機能有効を選択すると、フレームワーク9がアプリケーション11(ポインタ系アプリ)とアプリケーション12(キー系アプリ)へイベントを通知する。〔2〕フルブラウザ/iアプリ有効を選択すると、フレームワーク9が、アプリケーション11(ポインタ系アプリ)にのみイベントを通知する制限を行う。〔3〕無効を選択すると、フレームワーク9が、すべてのイベントを通知しない。
 指紋センサ感度は、プルダウンにより〔1〕速い、〔2〕普通、〔3〕遅いの3つのいずれかを選択すると、指紋センサから通知される上下左右キーや座標の補正する補正量を選択できる。速いという項目を選択すると、指紋センサで指を少し滑らすだけで、メニューなどのリスト表示のフォーカスやブラウザのポインタが上下左右の移動が早くなる。図4のフローチャートに記載されているS27の補正座標=通知された座標×補正値a÷補正値bは、フィンガーポインタ設定画面の指紋センサ感度の設定により変わる。設定の「速い」「普通」「遅い」により、a,bが「1/1」「3/2」「4/2」となり1倍、1.5倍、2倍となる。a,bは別々の数値をもつことができる。
 図8のフローチャートに記載されているS61、S66、S71、S77のキーカウンタnはフィンガーポインタ設定画面の指紋センサ感度の設定により変わる。設定の「速い」「普通」「遅い」により、nが「5」「10」「15」となる。nは上下左右で別々の数値をもつことができる。
 ダブルタップ感度は、プルダウンにより〔1〕速い、〔2〕普通、〔3〕遅いの3つのいずれかを選択すると、右クリックの1回目から2回目までの時間を調整できる。図5のフローチャートに記載されているS32のダブルタップ監視タイマxはフィンガーポインタ設定画面のダブルタップ感度の設定により変わる。設定の「速い」「普通」「遅い」により、xが「200ms」、「300ms」、「400ms」となる。
 アプリケーションでは、iアプリの地図を使用している場合、指紋センサに指を触れた状態で、指を動かして座標イベントが3回出て、その後に座標イベントが指紋センサドライバから出力されなくても、最後の座標イベント、ここでは3回目の座標イベントの移動量で、ポインタは継続的に動作することが可能である。このとき、指紋センサから指を離すとセンサタッチイベントの指なしが通知され、ポインタの継続的な動作を止めることが可能である。
 本発明の一実施形態として、携帯電話機を例に説明したが、携帯電話機に限らず、パソコンやPDAやi-PADなどの情報処理装置にも適用できる。
 また、指紋センサを搭載した情報処理装置であって、前記指紋センサから出力される操作情報の値をあるサンプリング数監視を行い、その範囲内で許容値を超えた回数が一定数超えたか判断する判断部と、前記判断部で一定数超えたと判断したら、前記指紋センサでの操作が未検出になるまで、操作情報を廃棄する抑圧処理部とを有してもよい。
 指紋センサを搭載した情報処理装置の処理方法であって、前記指紋センサから出力される操作情報であるサンプリング数監視を行い、その範囲内で許容値を超えた回数が一定数超えたら、前記指紋センサでの操作が未検出になるまで、その操作情報を無効としてもよい。

Claims (6)

  1.  情報処理装置であって、
     指の動きを検出する指紋センサと、
     前記指紋センサによって検出された指の動きを、前記情報処理装置上で動作するアプリケーションへの操作指示に相当する入力イベントへ変換する変換部とを備え、
     前記変換部は、前記指紋センサによって検出された指の移動量が、移動量に関する閾値よりも大きい場合に、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制することを特徴とする情報処理装置。
  2.  前記変換部は、前記指紋センサによって指の移動方向の変化が検出され、かつ、前記指紋センサによって検出された指の移動量が、移動量に関する第2の閾値よりも大きい場合に、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制することを特徴とする請求項1に記載の情報処理装置。
  3.  前記変換部は、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制した回数を計数し、該回数が、回数に関する閾値よりも多い場合に、前記指紋センサによって前記所定の動作が検出されるまで、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制することを特徴とする請求項1に記載の情報処理装置。
  4.  情報処理装置における入力制御方法であって、
     指紋センサが指の動きを検出する検出ステップと、
     前記検出ステップにおいて検出された指の動きを、前記情報処理装置上で動作するアプリケーションへの操作指示に相当する入力イベントへ変換する変換ステップとを含み、
     前記変換ステップは、前記指紋センサによって検出された指の移動量が、移動量に関する閾値よりも大きい場合に、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制することを特徴とする入力制御方法。
  5.  前記変換ステップは、前記指紋センサによって指の移動方向の変化が検出され、かつ、前記指紋センサによって検出された指の移動量が、移動量に関する第2の閾値よりも大きい場合に、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制することを特徴とする請求項4に記載の入力制御方法。
  6.  前記変換ステップは、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制した回数を計数し、該回数が、回数に関する閾値よりも多い場合に、前記指紋センサによって前記所定の動作が検出されるまで、前記指紋センサによって検出された指の動きを前記入力イベントへ変換することを抑制することを特徴とする請求項4に記載の入力制御方法。
PCT/JP2008/069679 2008-06-04 2008-10-29 情報処理装置および入力制御方法 WO2009147755A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2010515730A JP5287855B2 (ja) 2008-06-04 2008-10-29 情報処理装置および入力制御方法
US12/926,689 US8446382B2 (en) 2008-06-04 2010-12-03 Information processing apparatus and input control method

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2008146638 2008-06-04
JP2008146637 2008-06-04
JP2008-146638 2008-06-04
JP2008-146637 2008-06-04

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US12/926,689 Continuation US8446382B2 (en) 2008-06-04 2010-12-03 Information processing apparatus and input control method

Publications (1)

Publication Number Publication Date
WO2009147755A1 true WO2009147755A1 (ja) 2009-12-10

Family

ID=41397847

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2008/069679 WO2009147755A1 (ja) 2008-06-04 2008-10-29 情報処理装置および入力制御方法

Country Status (3)

Country Link
US (1) US8446382B2 (ja)
JP (1) JP5287855B2 (ja)
WO (1) WO2009147755A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013134714A (ja) * 2011-12-27 2013-07-08 Lenovo Singapore Pte Ltd 情報処理装置、ポインティングデバイスの誤操作検出方法、及びコンピュータが実行可能なプログラム
JP2016162331A (ja) * 2015-03-04 2016-09-05 セイコーエプソン株式会社 情報処理装置

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI474215B (zh) * 2011-11-17 2015-02-21 Pixart Imaging Inc 鍵盤模組及顯示系統
EP3594797A1 (en) 2012-05-09 2020-01-15 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
JP6103835B2 (ja) * 2012-06-29 2017-03-29 キヤノン株式会社 情報処理装置およびその制御方法
EP2939097B1 (en) * 2012-12-29 2018-12-26 Apple Inc. Device, method, and graphical user interface for navigating user interface hierarchies
US9411446B2 (en) 2013-11-04 2016-08-09 Google Technology Holdings LLC Electronic device with a touch sensor and method for operating the same
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10360428B2 (en) 2017-06-28 2019-07-23 Synaptics Incorporated Fingerprint sensor to support wake on finger and navigation
SE1751288A1 (en) * 2017-10-17 2019-04-18 Fingerprint Cards Ab Method of controlling an electronic device
US10977470B1 (en) * 2019-11-27 2021-04-13 Novatek Microelectronics Corp. Touch-panel control apparatus and operation method thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005106639A1 (ja) * 2004-04-30 2005-11-10 Kabushiki Kaisha Dds 操作入力装置及び操作入力プログラム
JP2006186837A (ja) * 2004-12-28 2006-07-13 Sharp Corp 携帯端末装置、プログラムおよび記録媒体
JP2007122522A (ja) * 2005-10-28 2007-05-17 Digital Electronics Corp 入力装置、タッチパネルの入力受け付け方法、操作表示器
JP2007189395A (ja) * 2006-01-12 2007-07-26 Japan Radio Co Ltd 携帯電話機

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2256605B1 (en) * 1998-01-26 2017-12-06 Apple Inc. Method and apparatus for integrating manual input
JP2001265507A (ja) 2000-03-17 2001-09-28 Canon Inc 携帯端末装置およびその操作方法
KR20040000954A (ko) * 2002-06-26 2004-01-07 삼성전자주식회사 이동통신단말기에 있어서 지문인식 방향 선택 방법
JP3924558B2 (ja) * 2003-11-17 2007-06-06 富士通株式会社 生体情報採取装置
JP4468896B2 (ja) * 2004-01-13 2010-05-26 富士通株式会社 生体情報による認証装置
JP4148187B2 (ja) * 2004-06-03 2008-09-10 ソニー株式会社 携帯型電子機器、入力操作制御方法及びそのプログラム
JP2006260054A (ja) 2005-03-16 2006-09-28 Sharp Corp 認証装置、認証方法、認証方法をコンピュータに実行させるための認証プログラムおよび当該プログラムを記録した機械読取り可能な記録媒体
JP4832826B2 (ja) * 2005-07-26 2011-12-07 任天堂株式会社 オブジェクト制御プログラムおよび情報処理装置
JP4508062B2 (ja) * 2005-09-30 2010-07-21 三菱電機株式会社 指紋画像撮像装置
JP5129478B2 (ja) * 2006-03-24 2013-01-30 株式会社デンソーアイティーラボラトリ 画面表示装置
JP2007264958A (ja) * 2006-03-28 2007-10-11 Casio Comput Co Ltd 認証装置及びプログラム
US8730213B2 (en) * 2007-07-02 2014-05-20 Elo Touch Solutions, Inc. Method and system for detecting touch events based on redundant validation
JP4229201B2 (ja) * 2007-07-27 2009-02-25 セイコーエプソン株式会社 入力装置、情報装置及び制御情報生成方法
US20090207130A1 (en) * 2008-02-16 2009-08-20 Pixart Imaging Incorporation Input device and input method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005106639A1 (ja) * 2004-04-30 2005-11-10 Kabushiki Kaisha Dds 操作入力装置及び操作入力プログラム
JP2006186837A (ja) * 2004-12-28 2006-07-13 Sharp Corp 携帯端末装置、プログラムおよび記録媒体
JP2007122522A (ja) * 2005-10-28 2007-05-17 Digital Electronics Corp 入力装置、タッチパネルの入力受け付け方法、操作表示器
JP2007189395A (ja) * 2006-01-12 2007-07-26 Japan Radio Co Ltd 携帯電話機

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013134714A (ja) * 2011-12-27 2013-07-08 Lenovo Singapore Pte Ltd 情報処理装置、ポインティングデバイスの誤操作検出方法、及びコンピュータが実行可能なプログラム
JP2016162331A (ja) * 2015-03-04 2016-09-05 セイコーエプソン株式会社 情報処理装置

Also Published As

Publication number Publication date
US8446382B2 (en) 2013-05-21
JP5287855B2 (ja) 2013-09-11
JPWO2009147755A1 (ja) 2011-10-20
US20110074721A1 (en) 2011-03-31

Similar Documents

Publication Publication Date Title
JP5287855B2 (ja) 情報処理装置および入力制御方法
JP5120460B2 (ja) 携帯端末および入力制御方法
EP3046017B1 (en) Unlocking method, device and terminal
EP3514667B1 (en) Method and terminal for preventing false touch
JP5105127B2 (ja) 携帯端末、そのキー操作制御方法およびプログラム
JP4395408B2 (ja) タッチパネル付き入力装置
EP2565764B1 (en) Information processing terminal and operation control method for same
US8599163B2 (en) Electronic device with dynamically adjusted touch area
JP5957834B2 (ja) 携帯情報端末、タッチ操作制御方法、及びプログラム
EP2620844B1 (en) Apparatus and method for adjusting touch sensitivity in mobile terminal
US20150058786A1 (en) Mobile terminal and storage medium storing mobile terminal controlling program
US20100283754A1 (en) Input device of electronic device, input operation processing method, and input control program
US20110043372A1 (en) Remote controller, remote control system and program
WO2012086133A1 (ja) タッチパネル装置
CN107450820B (zh) 界面控制方法及移动终端
CN111026321A (zh) 一种触控方法及电子设备
JP2011243157A (ja) 電子機器、ボタンサイズ制御方法、及びプログラム
CN111104001B (zh) 一种屏幕防误触的方法、装置、移动终端和存储介质
CN111930296A (zh) 电子设备的控制方法、装置及电子设备
KR20110010522A (ko) 드래그 동작을 활용한 사용자 인터페이스 방법 및 단말기
JP5067345B2 (ja) 携帯通信端末、携帯通信端末の制御方法、プログラム、及び記録媒体
WO2013190857A1 (ja) 処理装置、感度調整方法およびプログラム
KR20210045354A (ko) 터치스크린 상의 터치의 신뢰성을 향상시키기 위한 모바일 디바이스 및 방법
JP2016225688A (ja) 端末装置および情報処理方法
JP2020129333A (ja) 表示入力装置およびそれを備える画像形成装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 08874539

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2010515730

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 08874539

Country of ref document: EP

Kind code of ref document: A1