WO2017208519A1 - 生体認証装置、携帯端末装置、制御プログラム - Google Patents

生体認証装置、携帯端末装置、制御プログラム Download PDF

Info

Publication number
WO2017208519A1
WO2017208519A1 PCT/JP2017/006173 JP2017006173W WO2017208519A1 WO 2017208519 A1 WO2017208519 A1 WO 2017208519A1 JP 2017006173 W JP2017006173 W JP 2017006173W WO 2017208519 A1 WO2017208519 A1 WO 2017208519A1
Authority
WO
WIPO (PCT)
Prior art keywords
authentication
unit
posture
image
biometric authentication
Prior art date
Application number
PCT/JP2017/006173
Other languages
English (en)
French (fr)
Inventor
孝弘 森
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Priority to JP2018520360A priority Critical patent/JP6667628B2/ja
Publication of WO2017208519A1 publication Critical patent/WO2017208519A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing

Definitions

  • the present invention relates to a biometric authentication device, a portable terminal device, and the like that authenticate a captured subject.
  • authentication technology based on the human eye is known, and such authentication technology identifies and authenticates a user having a predetermined authority using an iris pattern, a blood vessel pattern of a white-eye portion, or the like. Furthermore, recently, a user is imaged using a camera, and unlocking is performed by performing user authentication based on an image corresponding to an eye in the captured image, and various functions can be activated to enable operation input. Mobile phones and smartphones that transition to a state are also becoming popular.
  • Patent Document 1 includes an imaging camera that captures an image of an eye, a display that is arranged on the same plane as the lens arrangement position of the imaging camera, and guide character generation means, and displays a guide character on the display
  • an imaging camera that captures an image of an eye
  • a display that is arranged on the same plane as the lens arrangement position of the imaging camera
  • guide character generation means and displays a guide character on the display
  • a portable terminal device that guides the position of the eye of the person to be authenticated who looks at the guide character is disclosed.
  • a portable terminal that captures a part of a face such as a user's eye and performs authentication based on the image (authentication image)
  • the user appropriately captures an image used for authentication and authenticates the user accurately.
  • a guide character is displayed on the display device, and the user is guided to adjust the position of the eyes according to the guide character.
  • the user can adjust the position of the mobile terminal device to be a position suitable for authentication while looking at the displayed guide character.
  • biometric authentication such as iris authentication, white-eye authentication, and face authentication is used in authentication processing (unlocking) of mobile terminals such as mobile phones and smartphones
  • the position of the user's eyes and face is given to the user.
  • the captured image (preview image) which imaged the user with the camera etc. is displayed.
  • notification information such as the clock, weather forecast, presence / absence of unread mail is displayed on the lock screen, and the user uses these information displayed on the lock screen without releasing the lock. it can.
  • the lock screen information is displayed by displaying the preview image. Will be inhibited. If authentication is started at such an inappropriate timing, the display of the lock screen clock, notification information, or the like is hindered by the preview image, and there is a problem that the convenience is impaired.
  • One aspect of the present invention has been made in view of the above-described problems, and its purpose is to start and display authentication processing at an appropriate timing while ensuring the accuracy of authentication processing in a biometric authentication device. It is to provide a technique for preventing the convenience of information from being impaired.
  • a biometric authentication device is a biometric authentication device that performs authentication of a subject using an authentication image obtained by imaging the subject with an imaging unit, the imaging unit And a detection unit that detects the posture of the biometric authentication device, and an authentication unit that authenticates the subject based on the authentication image, wherein the detection unit detects a predetermined posture. Accordingly, authentication of the subject based on the authentication image is started.
  • a biometric authentication device is a biometric authentication device that performs authentication of a subject using an authentication image obtained by imaging the subject with an imaging unit, the imaging unit, the display unit, A detection unit that detects a posture of a biometric authentication device; a display control unit that displays the authentication image on the display unit; and an authentication unit that performs authentication of the subject based on the authentication image.
  • the control unit displays the authentication image on the display unit when the detection unit detects a predetermined posture.
  • a biometric authentication device is a biometric authentication device that performs authentication of a subject using an authentication image obtained by imaging the subject by an imaging unit, the imaging unit and the biometric authentication device
  • a detection unit that detects a posture
  • an authentication unit that authenticates the subject based on the authentication image, and a large change in posture when the posture of the biometric authentication device changes from the first posture to the second posture.
  • a posture change value deriving unit for deriving a posture change value indicating the height, and the authentication unit authenticates the subject based on the authentication image when the posture change value is equal to or greater than a predetermined threshold.
  • a biometric authentication device is a biometric authentication device that performs authentication of a subject using an authentication image obtained by imaging the subject with an imaging unit, the imaging unit, the display unit, A detection unit that detects a posture of the biometric authentication device, a display control unit that displays the authentication image on the display unit, an authentication unit that authenticates the subject based on the authentication image, and a biometric authentication device.
  • a posture change value deriving unit for deriving a posture change value indicating a magnitude of the posture change when the posture changes from the first posture to the second posture, and the display control unit The authentication image is displayed on the display unit in response to being equal to or greater than a predetermined threshold.
  • a control program is a control program for causing a computer to function as an apparatus that performs authentication of an object using an authentication image obtained by imaging the object by an imaging unit, the attitude of the apparatus When the camera assumes a predetermined posture, the computer is caused to function as an authentication unit that starts authentication of the subject based on the authentication image.
  • a control program is a control program for causing a computer to function as an apparatus for performing authentication of a subject using an authentication image obtained by imaging the subject by an imaging unit, the authentication image
  • the computer is caused to function as an authentication unit that performs authentication of the subject based on the above and a display control unit that displays the authentication image when the posture of the device becomes a predetermined posture.
  • a control program is a control program for causing a computer to function as an apparatus that performs authentication of an object using an authentication image obtained by imaging the object by an imaging unit, the attitude of the apparatus
  • a posture change value deriving unit for deriving a posture change value indicating the magnitude of the posture change when the position changes from the first posture to the second posture, and the posture change value is equal to or greater than a predetermined threshold value
  • the computer is caused to function as an authentication unit that starts authentication of the subject based on the authentication image.
  • a control program is a control program for causing a computer to function as an apparatus for performing authentication of a subject using an authentication image obtained by imaging the subject by an imaging unit, the authentication image
  • An authentication unit that performs authentication of the subject based on a posture change value deriving unit that derives a posture change value indicating a magnitude of a posture change when the posture of the device changes from a first posture to a second posture;
  • the computer is caused to function as a display control unit that displays the authentication image.
  • the biometric authentication device has an effect that convenience can be improved while ensuring accuracy of authentication processing.
  • the mobile terminal 1 may be a communication device such as a mobile phone and a smartphone, or may be a mobile game machine, an electronic notebook, or the like. That is, in the biometric authentication apparatus according to one aspect of the present invention, the communication function and the call function are not essential components.
  • the mobile terminal 1 uses an authentication image (for example, an image of the user U such as an eye image or a preview image) obtained by imaging the user U (subject) with the camera 31 (imaging unit).
  • the user U is authenticated.
  • the mobile terminal 1 includes a camera 31, a direction sensor 32 (detection unit) that detects the attitude of the mobile terminal 1, and a biometric authentication unit 22 (authentication unit) that authenticates the user U based on an authentication image. ing.
  • the portable terminal 1 starts authentication of the user U based on the authentication image in response to the direction sensor 32 detecting a predetermined posture of the portable terminal 1.
  • the lock screen includes a time display and notification information display. For example, weather information ("weather: sunny” in the figure), presence / absence of incoming mail ("with mail” in the figure), date Information such as “January 21” shown in the figure and time (“10:20” shown in the figure) are displayed.
  • the mobile terminal 1 includes a direction sensor 32 that detects the attitude of the mobile terminal 1. The mobile terminal 1 does not display a preview image until the attitude of the mobile terminal 1 reaches a predetermined attitude, and displays the time and notification on the lock screen. Continue displaying information. When the attitude of the mobile terminal 1 becomes a predetermined attitude, the display of the preview image is started as shown in FIG. The “tilt angle” and “rotation angle” will be described later.
  • FIG. 2 is a diagram illustrating a change in posture of the mobile terminal 1 and a display example when the user U is authenticated when the user U is standing (standing) or sitting (sitting). is there.
  • the posture of the mobile terminal 1 when the power key is pressed by the user U is 15 ° as shown in FIG. 2A
  • the lock screen is continuously displayed on the display unit 371.
  • the display unit 371 starts displaying a preview image. Note that a preview image may be displayed on the entire display unit 371.
  • a configuration may be adopted in which a preview image is displayed in the display area 371a, and a part of the lock image display (time in the illustrated example) is displayed in the display area 371b.
  • FIG. 3 is a diagram illustrating a change in the attitude of the mobile terminal 1 when the user U is authenticated when the user U is lying on his back (in a supine position). That is, the user U visually recognizes the display unit 371 as if looking up from below.
  • the posture of the mobile terminal 1 is an inclination angle of 120 ° as shown in FIG. 3A
  • the lock screen is continuously displayed on the display unit 371.
  • the user U moves the mobile terminal 1 closer to the face and moves the mobile terminal 1 to a position in front of the face, and the attitude of the mobile terminal 1 reaches an inclination angle of 180 °
  • a preview image is displayed on the display unit 371.
  • FIG. 4 is a diagram illustrating a change in the posture of the mobile terminal 1 when the user U is authenticated when the user U is leaning sideways (side down). That is, the user U visually recognizes the display unit 371 with the face sideways.
  • the attitude of the mobile terminal 1 is 15 ° as shown in FIG. 4A
  • the display of the lock screen is continued on the display unit 371.
  • FIG. 4B when the orientation of the mobile terminal 1 is 90 °, where the face of the user U faces the display unit 371, display of a preview image is started on the display unit 371. .
  • the display of the preview image is not displayed when the mobile terminal 1 is in a predetermined posture without starting the display of the preview image by itself. To start. Thereby, it is possible to appropriately control the display period of the preview image for biometric authentication so as not to prevent the user U from using the information displayed on the lock screen.
  • FIG. 5 is a block diagram illustrating an example of a hardware configuration of the mobile terminal 1.
  • the portable terminal 1 includes a CPU (Central Processing Unit) 2, a camera 31 (imaging unit), a direction sensor 32 (detection unit), an input key unit 33 (input reception unit), a storage unit 4, a communication unit 34, and an audio output unit 35.
  • a voice input unit 36, a touch panel 37 (input reception unit), and a temporary memory 38 may be provided.
  • the configuration of the illustrated mobile terminal 1 is merely an example, and is used, for example, in addition to a direction sensor, a sensor such as a proximity sensor, a temperature sensor, and an illuminance sensor, and transmission / reception and charging of data by wired connection.
  • a jack or the like for inserting a plug or the like is not directly related to one embodiment of the present invention. For this reason, illustration and description of the sensor, jack, etc. are omitted.
  • the communication unit 34 transmits and receives data and audio signals via the Internet and a telephone line.
  • the communication unit 34 performs a voice call or packet communication using, for example, 3G / LTE communication.
  • the CPU 2 reads out and operates the program stored in the program storage area 41 of the storage unit 4 to activate, execute, and control various functions. For example, the CPU 2 compares the eye image obtained by photographing the user U's eye (specific part) with the eye image data stored in the biological information storage area 42, and features of both (for example, iris pattern and / or Or, if the white blood line patterns match, it is determined that the authentication is OK (the user U is authenticated as the user U who has the authority to use the mobile terminal 1). A functional block when the CPU 2 reads out and executes a control program for performing biometric authentication from the program storage area 41 will be described later.
  • the CPU 2 displays a lock screen on the display unit 371, and then authenticates the user U, and the user U If the authentication result is OK, the lock is released and the lock screen is switched to the home screen. A specific example of this processing will be described in detail later.
  • the audio output unit 35 includes a speaker and a receiver, and outputs audio from the other party during a call, and outputs audio of the content when the received content is played back.
  • the voice input unit 36 is composed of a microphone, and receives a voice input from the user U during a call.
  • the touch panel 37 includes a display unit 371 and a touch sensor unit 372.
  • the touch panel 37 displays information on a display screen (see the display unit 371 in FIG. 2) and accepts an input by a touch operation of the user U.
  • the display unit 371 constitutes a display screen that displays a lock screen, a home screen, a preview screen, and the like, and is a display device such as a liquid crystal display (LCD), for example.
  • the touch sensor unit 372 is superimposed on the display unit 371 and detects a position where the user U touches the display screen using a finger or the like, or performs a gesture operation (swipe operation, tap operation, slide operation, etc.). This is a sensor for detecting the occurrence. That is, the touch panel 37 has a function of displaying information and a function of accepting various inputs from the user U.
  • the direction sensor 32 is a sensor that detects the attitude of the mobile terminal 1.
  • the direction sensor 32 may be realized by a combination of a geomagnetic sensor and an acceleration sensor, and how much the mobile terminal 1 is inclined with respect to the vertical direction (gravity direction) and the horizontal direction (direction orthogonal to gravity). It is a sensor that acquires whether or not. The correspondence relationship between the output of the detection result of the direction sensor 32 and the attitude of the mobile terminal 1 will be described later.
  • the input key section 33 is a physical key such as a power key.
  • the CPU 2 turns on the display unit 371 and displays the lock screen.
  • the camera 31 is, for example, a camera mounted on the mobile terminal 1 (that is, stored in the casing of the mobile terminal 1). In response to an imaging start instruction from the CPU 2, the camera 31 acquires image data of an image (authentication image) obtained by imaging the user U's face (specific part), eyes, skin (specific part), and the like. , Output to CPU2.
  • the storage unit 4 has storage areas for various data and various programs.
  • the storage unit 4 can be configured from a flash ROM or the like.
  • the storage unit 4 may include a program storage area 41, a biological information storage area 42, and a setting information storage area 43.
  • the program storage area 41 is an area for storing application programs corresponding to various functions executable by the mobile terminal 1 and various data referred to when executing the various functions.
  • the biometric information storage area 42 is an area for storing eye image data obtained by imaging the user U's eyes in advance in order to perform biometric authentication of the user U.
  • the biometric information storage area 42 may store the entire captured image data, and includes an area (for example, skin around the eyes and eyes) where a predetermined part of the user U is captured. Partial image data (feature data) obtained by cutting out a partial image may be stored.
  • the setting information storage area 43 is an area for storing setting information input by the user U regarding biometric authentication.
  • the setting information storage area 43 stores setting information such as whether biometric authentication is used for unlocking or another authentication method (such as password input) is used.
  • the temporary memory 38 is a memory that temporarily stores control information that is referred to or used when performing various controls in the mobile terminal 1, information on the orientation (vertical or horizontal) of the mobile terminal 1, and the like. is there.
  • FIG. 6 is a diagram for explaining the tilt angle and the rotation angle of the mobile terminal 1.
  • the portable terminal 1 is drawn as a rectangular parallelepiped shape, it is not limited to this.
  • a description will be given assuming that the axis parallel to the thickness direction of the mobile terminal 1 is the Z axis, the axis parallel to the width direction is the X axis, and the axis parallel to the vertical direction is the Y axis.
  • the direction sensor 32 acquires information related to the attitude of the mobile terminal at a constant cycle (for example, 30 times per second) in response to a sampling request from the CPU 2.
  • the attitude of the mobile terminal is represented by, for example, three angles: Azimuth, Pitch, and Roll.
  • Azimuth is expressed as a rotation angle with the Z axis as a rotation axis
  • inclination is expressed as a rotation angle with the X axis as a rotation axis
  • rotation is expressed as a rotation angle with the Y axis as a rotation axis. Note that azimuth is not directly related to the feature of one embodiment of the present invention, and thus description thereof is omitted here.
  • Rotation angle about the X axis is called “Pitch angle”.
  • the inclination angle is 0 ° when the portable terminal 1 is placed in a horizontal position and the surface (main surface) including the display unit 371 is facing upward.
  • the tilt angle when the mobile terminal 1 is in a vertical (parallel to gravity) posture is 90 °.
  • the inclination angle when the portable terminal 1 is placed in a horizontal place and the surface (main surface) including the display unit 371 faces downward (so-called prone state) is 180 °.
  • Rotation angle with the Y axis as the rotation axis is called “Roll angle”. Similar to the tilt angle, the mobile terminal 1 is placed in a horizontal place, and the tilt angle when the surface (main surface) including the display unit 371 is facing upward is 0 °. The tilt angle when the mobile terminal 1 is in a vertical (parallel to gravity) posture is 90 °. As shown in FIG. 3B, the mobile terminal 1 is placed in a horizontal place, and the surface (main surface) including the display unit 371 faces downward (so-called prone state). The inclination angle is 180 °.
  • FIG. 1 is a functional block diagram illustrating an example of a main configuration of a mobile terminal 1 according to an embodiment of the present invention. For convenience of explanation, members having the same functions as those already described with reference to FIG.
  • the authentication function control unit 20 includes a lock control unit 21, a biometric authentication unit 22, a biometric information registration unit 23, an eye image acquisition unit 24, an eye image display control unit 25 (display control unit), an inclination acquisition unit 26, and an orientation determination unit 27. And a rotation angle acquisition unit 28.
  • the lock control unit 21 turns on the display unit 371 and displays the lock screen in response to the input key unit 33 receiving a press from the screen off state. Further, the lock control unit 21 controls the unlocking based on the setting information read from the setting information storage area 43. For example, when the lock release unit is set to be unlocked by a password or PIN number, the lock control unit 21 displays a guide for allowing the user U to input the password or PIN number on the display screen of the display unit 371. On the other hand, when unlocking is performed using biometric authentication using an eye image, the lock control unit 21 requests the biometric authentication unit 22 to execute an authentication process (for example, the process illustrated in FIGS. 7 to 10). To do. When the lock control unit 21 receives an authentication result indicating authentication OK from the biometric authentication unit 22, the lock control unit 21 releases the lock and displays a predetermined home screen on the display unit 371.
  • the biometric authentication unit 22 performs biometric authentication of the user U by comparing the eye image data acquired from the eye image acquisition unit 24 with registration data stored in advance in the biometric information storage area 42. If the degree of similarity exceeds the specified value, the biometric authentication unit 22 sets authentication OK and returns the result to the lock control unit. In addition, the acquired eye image data is sent to the eye image display control unit 25 to display the eye image on the display unit 371 (preview display). This facilitates eye alignment.
  • the biometric information registration unit 23 When the use of biometric authentication is selected by the user U via the touch panel 37, the biometric information registration unit 23 requests the eye image acquisition unit 24 for the eye image of the user U before executing biometric authentication processing for the first time. .
  • the biometric information registration unit 23 acquires the eye image data received from the camera 31 by the eye image acquisition unit 24 and stores (registers) it in the biometric information storage area 42.
  • the eye image acquisition unit 24 controls the activation and imaging of the camera 31 according to instructions from the biometric authentication unit 22 and the biometric information registration unit 23 and acquires the eye image data of the user U.
  • the eye image acquisition unit 24 outputs the acquired eye image data to the biometric authentication unit 22 or the biometric information registration unit 23 that is an instruction transmission source.
  • the eye image display control unit 25 acquires the image data of the image obtained by capturing the user U acquired by the eye image acquisition unit 24 via the camera 31 and displays the image data on the display unit 371 as a preview image.
  • the preview image displayed on the display unit 371 by the eye image display control unit 25 may be an image obtained by imaging the entire face of the user U, or may be an image obtained by imaging the user U's eyes and the periphery thereof.
  • the preview image is an eye image of the user U
  • the user U having a predetermined authority can be identified and authenticated using an iris pattern, a blood-line pattern of a white-eye portion, or the like.
  • the image used for biometric authentication of the user U is not limited to an eye image, and may be another image as long as the physical feature for identifying and authenticating the user U is captured.
  • the inclination acquisition unit 26 makes a sampling request to the direction sensor 32 and acquires information related to the attitude of the mobile terminal 1. Specifically, the inclination acquisition unit 26 may acquire detection of an inclination angle with respect to the X axis (see FIG. 6) of the mobile terminal 1 detected by the direction sensor 32. Note that the inclination acquisition unit may acquire the inclination angle, for example, 30 times per second.
  • the rotation angle acquisition unit 28 makes a sampling request to the direction sensor 32 and acquires information on the attitude of the mobile terminal 1. Specifically, the rotation angle with respect to the Y axis (see FIG. 6) may be acquired. The rotation angle acquisition unit 28 may acquire the rotation angle, for example, 30 times per second.
  • the orientation determination unit 27 determines whether the attitude of the mobile terminal 1 is currently in the portrait or landscape orientation based on the rotation angle acquired from the rotation angle acquisition unit 28.
  • “vertical” means a posture as shown in FIG. 2 and FIG. 3, and means a posture in which a side parallel to the Y axis of the casing of the mobile terminal 1 is orthogonal to the direction of gravity. Yes.
  • FIG. 7 is a flowchart illustrating an example of a flow of processing from when the mobile terminal 1 displays the lock screen until the user U is authenticated, unlocked, and displayed on the home screen.
  • the portable terminal 1 will be described by taking as an example a case where the mobile terminal 1 has a biometric authentication function for identifying and authenticating a user U having a predetermined authority using an iris pattern, a blood-line pattern of a white-eye portion, or the like.
  • An image used for biometric authentication is not limited to an eye image. It is assumed that the eye image of the user U is registered in the biometric information storage area 42 by the biometric information registration unit 23 in advance.
  • the mobile terminal 1 has a function of unlocking the mobile terminal 1 by biometric authentication using an eye image
  • the present invention is not limited to this, and the image used by the mobile terminal 1 for biometric authentication may be a face image or the like.
  • the lock control unit 21 lights the display screen and displays the lock screen ( S101: Pre-authentication display step).
  • the lock screen accepts information such as time, date, weather, presence / absence of incoming mail and the number of received mails (see FIG. 2A), remaining battery level, news headline, and contact to an emergency contact. An indication such as “Emergency” may be included.
  • the lock control unit 21 refers to the setting information storage area 43 and acquires information related to an authentication method for unlocking (S102). If the user U has not been set to use biometric authentication based on an eye image (NO in S102), the lock control unit 21 performs authentication for the user U in order to perform authentication by, for example, verification of a password or PIN number. A screen prompting the user to input a password or PIN number is displayed on the display unit 371. On the other hand, when the setting using biometric authentication based on an eye image has been made (YES in S102), lock control unit 21 instructs biometric authentication unit 22 to start biometric authentication processing.
  • the biometric authentication unit 22 instructs the inclination acquisition unit 26 to acquire an inclination angle that is information about the attitude of the mobile terminal 1.
  • the inclination acquisition unit 26 requests the direction sensor 32 to start sampling (S103), and based on the value output from the direction sensor 32, the inclination angle (inclination data) at regular intervals. (S104: detection step) and transmitted to the biometric authentication unit 22.
  • the biometric authentication unit 22 determines whether or not the posture of the mobile terminal 1 is a predetermined posture based on the tilt angle acquired in S104 (S105). For example, the biometric authentication unit 22 determines whether or not the angle is within a predetermined angle range (indicated as “within a specified angle” in the drawing) based on the tilt angle acquired in S104.
  • the biometric authentication unit 22 uses the eye image acquisition unit 24. Is instructed to acquire an eye image.
  • the eye image acquisition unit 24 activates the camera 31 in response to an instruction from the biometric authentication unit 22 (S106: imaging step), and image data (preview image data) of an image captured (captured) by the camera 31. To get.
  • the biometric authentication unit 22 transmits the image data acquired from the camera 31 by the eye image acquisition unit 24 to the eye image display control unit 25.
  • the eye image display control unit 25 displays the received preview image on the display unit 371 (S107: display step).
  • the preview image may be displayed on the entire display screen of the display unit 371.
  • a display area 371a for displaying a preview image (((b) in FIG. 2) (a display area 371b in FIG. 2B) separate from an area for displaying a part of the information that has been displayed on the lock screen so far. b) may be displayed.
  • the process returns to S104, and biometric authentication unit 22 continues until the tilt angle is within the predefined angle range.
  • the range of the tilt angle defined in advance is not limited to this, but for example, an angle close to vertical (parallel to the direction of gravity) such as 75 ° to 90 °, 65 ° to 85 °, etc. A range is desirable. It is possible to obtain a better eye image by capturing from the same height as the eye than when capturing from the lower direction with respect to the eye of the user U.
  • a range of inclination angles defined in advance with respect to the posture of the mobile terminal 1 is set to an angle range corresponding to a posture in which the mobile terminal 1 is nearly vertical.
  • the authentication process can be performed under favorable conditions.
  • the mobile terminal 1 may instantaneously have a predetermined posture while the posture of the mobile terminal 1 is changing.
  • the biometric authentication unit 22 has an inclination angle within a predetermined angular range continuously in sampling ( That is, it is desirable to instruct the eye image acquisition unit 24 to acquire an eye image when the attitude of the mobile terminal 1 is a predetermined attitude and the attitude continues for a certain period of time.
  • the biometric authentication process is not performed until the tilt angle of the mobile terminal 1 is within a predetermined angle range. Thereby, the display of the lock screen is not hindered by the display of the preview image until the portable terminal 1 assumes a predetermined posture.
  • the user U may select whether to enable the operation of starting display of the preview image when the tilt angle falls within a predetermined angle range. Further, only when the function of displaying news and weather forecasts on the lock screen is enabled, the display control of the preview image according to the attitude of the mobile terminal 1 as shown in FIG. 7 may be enabled. .
  • the biometric authentication unit 22 compares the eye image acquired from the eye image acquisition unit 24 with the eye image of the user U stored (registered) in advance in the biometric information storage area, and the difference is smaller than a predetermined threshold value. Or not, an authentication process is performed (S108: authentication step). As a result of the authentication process, if the authentication is OK (YES in S109), the biometric authentication unit 22 instructs the lock control unit 21 to release the lock, and the lock control unit 21 locks according to the instruction. The home screen is displayed (S120). In addition, the biometric authentication unit 22 instructs the inclination acquisition unit 26 to end the acquisition of the inclination angle. In response to the instruction, the inclination acquisition unit 26 ends the sampling of the direction sensor 32 (S121).
  • the mobile terminal 1 starts authentication when it becomes an appropriate predetermined posture for authenticating the user U, and does not start authentication when it does not have such a predetermined posture.
  • the portable terminal 1 can start the authentication of the user U smoothly and correctly. Therefore, convenience can be improved while ensuring the accuracy of the authentication process.
  • portable terminals such as mobile phones and smartphones that are set for authentication are in a locked state until the authentication is completed, and a lock screen different from the home screen displayed after the authentication is displayed on the display screen.
  • This lock screen may include a display that informs the user of information such as time, weather forecast, whether or not there is unread mail, and the user can display the time, weather forecast, unread mail without unlocking. It is possible to easily view information such as the presence or absence.
  • the photographed image (preview image) by the guide character and the imaging camera is displayed, so that it is displayed on the display unit 371 by being disturbed by the display of the preview image.
  • the information on the lock screen is not available.
  • the user U is displayed on the display unit 371 without being disturbed by the display of the preview image.
  • Information on the lock screen (news, weather forecast, etc.) can be used.
  • the biometric authentication unit 22 determines whether to start biometric authentication processing according to the attitude of the mobile terminal 1, activates the camera, acquires an eye image,
  • the display unit 371 may be displayed.
  • the biometric authentication unit 22 may start acquiring an eye image and start authentication processing regardless of the posture of the mobile terminal 1. That is, the mobile terminal 1 of the present embodiment can start the authentication process before the mobile terminal 1 assumes a predetermined posture, and then displays a preview on the display unit 371 when the mobile terminal 1 assumes a predetermined posture. Start displaying images.
  • FIG. 8 is a flowchart showing another example of the flow of processing from when the mobile terminal 1 displays the lock screen to when the user is authenticated, the lock is released, and the home screen is displayed.
  • the lock control unit 21 turns on the display screen and displays the lock screen (S201: Authentication). Previous display step).
  • the lock control unit 21 refers to the setting information storage area 43 and acquires information related to the authentication method for unlocking (S202). If the user U has not been set to use biometric authentication based on an eye image (NO in S202), the lock control unit 21 authenticates the user U, for example, to perform authentication by collating a password or a PIN number. A screen prompting the user to input a password or PIN number is displayed on the display unit 371. On the other hand, when the setting using biometric authentication based on an eye image has been made (YES in S202), lock control unit 21 instructs biometric authentication unit 22 to start biometric authentication processing.
  • the biometric authentication unit 22 instructs the inclination acquisition unit 26 to acquire an inclination angle that is information about the attitude of the mobile terminal 1.
  • the inclination acquisition unit 26 requests the direction sensor 32 to start sampling (S203).
  • the direction sensor 32 outputs a value detected in response to this request, but at this stage, the inclination acquisition unit 26 does not start acquiring an inclination angle (inclination data) based on the output value.
  • the biometric authentication unit 22 instructs the eye image acquisition unit 24 to acquire an eye image in accordance with an instruction from the lock control unit 21.
  • the eye image acquisition unit 24 activates the camera 31 in response to an instruction from the biometric authentication unit 22 (S204: imaging step).
  • the biometric authentication unit 22 acquires an image (preview image) captured (captured) by the camera 31, and the acquired image and the eye image of the user U stored (registered) in the biometric information storage area in advance.
  • an authentication process is performed based on whether the difference is smaller than a predetermined threshold (S205: authentication step). That is, the mobile terminal 1 according to the present embodiment proceeds with the biometric authentication process of the user U based on the preview image regardless of whether or not the attitude of the mobile terminal 1 is a predetermined attitude.
  • the biometric authentication unit 22 instructs the inclination acquisition unit 26 to acquire an inclination angle that is information about the attitude of the mobile terminal 1 after starting the biometric authentication process or in parallel.
  • the inclination acquisition unit 26 acquires an inclination angle (inclination data) at regular intervals based on the value output from the direction sensor 32 (S206a: detection step), and transmits it to the biometric authentication unit 22.
  • the biometric authentication unit 22 proceeds to S206a.
  • Whether or not the attitude of the mobile terminal 1 is a predetermined attitude is determined based on the obtained inclination angle (S207). For example, the biometric authentication unit 22 determines based on the acquired tilt angle whether the angle is within a predetermined angle range (indicated as “within a specified angle” in the drawing).
  • the eye image display control unit 25 receives the received preview Display of an image (for example, an eye image) on the display unit 371 is started (S208: display step).
  • the biometric authentication unit 22 instructs the lock control unit 21 to release the lock, and the lock control unit 21 responds to the instruction. In response, the lock is released and the home screen is displayed (S210). In addition, the biometric authentication unit 22 instructs the inclination acquisition unit 26 to end the acquisition of the inclination angle. In response to the instruction, the inclination acquisition unit 26 ends the sampling of the direction sensor 32 (S211). On the other hand, if the authentication is not OK (NO in S209), the process returns to S205 and starts again from the authentication process.
  • the mobile terminal 1 starts the authentication process without displaying the preview image.
  • the display of the lock screen is not hindered by the display of the preview image.
  • the display of the preview image can be omitted. In this case, the authentication of the user U can be completed with a small amount of processing.
  • the biometric authentication unit 22 when the authentication start button (for example, the touch panel 37 or the input key unit 33) is pressed even when the mobile terminal 1 is not in a predetermined posture, the biometric authentication unit 22 The eye image acquisition may be started and the authentication process may be started. In this case, the angle range defined in advance for the attitude of the mobile terminal 1 may be changed so as to include the attitude of the mobile terminal 1 when the authentication start button is pressed.
  • the portable terminal 1 having such a configuration will be described.
  • the biometric authentication unit 22 7 is different from the mobile terminal 1 shown in FIG. 7 in that the eye image acquisition can be started and the authentication process can be started.
  • the angle range defined in advance for the attitude of the mobile terminal 1 may be changed so as to include the attitude of the mobile terminal 1 when the authentication start button is pressed.
  • FIG. 9 is a flowchart showing another example of the flow of processing from when the mobile terminal 1 displays the lock screen until user authentication is performed, the lock is released, and the home screen is displayed.
  • S301 (pre-authentication display step) to 305 and S308 (imaging step) to S313 in FIG. 9 are the same as S101 to S121 in FIG.
  • the mobile terminal 1 includes a storage unit 4 that stores information that defines a predetermined posture.
  • the biometric authentication unit 22 authenticates the user U when the posture of the mobile terminal 1 when the input receiving unit such as the input key unit 33 and the touch panel 37 receives an input for initiating authentication is different from the predetermined posture.
  • the information defining the predetermined posture of the storage unit 4 is updated so as to include the posture at the time of reception. With such a configuration, the user U can instruct the start of authentication even when the attitude of the mobile terminal 1 is out of the predetermined attitude.
  • the biometric authentication unit 22 is, for example, when the authentication start button of the touch panel 37 or the input key unit 33 is pressed. (YES in S306), the angle range defined in advance for the attitude of the mobile terminal 1 is changed (S307), and the process proceeds to S308. On the other hand, if the authentication start button has not been pressed (NO in S306), the process returns to S304 (detection step).
  • the mobile terminal 1 can start authentication in an arbitrary state desired by the user U regardless of the attitude of the mobile terminal 1. It has. Thereby, when the input of the authentication start instruction by the user U is received, the portable terminal 1 can start the biometric authentication process according to the instruction. Therefore, even if the posture deviates from the posture assumed as the posture of the mobile terminal when performing biometric authentication, the authentication processing can be started (the user is forced to perform the authentication processing even before the authentication). Can be instructed to start).
  • the configuration may be such that the condition for displaying the preview image is switched according to the orientation of the mobile terminal 1 (for example, whether it is portrait orientation or landscape orientation).
  • a flow of biometric authentication processing performed by the mobile terminal 1 having such a configuration will be described with reference to FIG.
  • FIG. 10 is a flowchart illustrating another example of the flow of processing from when the mobile terminal 1 displays the lock screen to when the user is authenticated, the lock is released, and the home screen is displayed. Note that S410 (imaging step) to S415 in FIG. 10 are the same as S106 to S121 in FIG.
  • the lock control unit 21 turns on the display screen and displays the lock screen (S401: Authentication). Previous display step).
  • the lock control unit 21 refers to the setting information storage area 43 and acquires information related to the authentication method for unlocking (S402). If the user U has not been set to use biometric authentication based on an eye image (NO in S402), the lock control unit 21 may authenticate the user U, for example, by performing authentication by verifying a password or PIN number. A screen prompting the user to input a password or PIN number is displayed on the display unit 371. On the other hand, when the setting using biometric authentication based on an eye image has been made (YES in S402), lock control unit 21 instructs biometric authentication unit 22 to start biometric authentication processing.
  • the orientation determination unit 27 determines the orientation (vertical or horizontal) of the mobile terminal 1 serving as a reference for displaying the preview image based on the tilt angle and the rotation angle, and the determination. The result is transmitted to the biometric authentication unit 22.
  • the biometric authentication unit 22 since the orientation of the mobile terminal 1 can be appropriately changed by the user U, the biometric authentication unit 22 preferably stores and updates the received information on the orientation of the mobile terminal in the temporary memory 38 as needed. Note that the biometric authentication unit 22 may hold information related to the orientation of the mobile terminal 1 in the setting information storage area 43.
  • the biometric authentication unit 22 instructs the inclination acquisition unit 26 to acquire an inclination angle that is information about the attitude of the mobile terminal 1.
  • the biometric authentication unit 22 instructs the rotation angle acquisition unit 28 to acquire a rotation angle, which is another information about the posture of the mobile terminal 1.
  • the inclination acquisition unit 26 and / or the rotation angle acquisition unit 28 requests the direction sensor 32 to start sampling (S404).
  • the inclination acquisition unit 26 acquires an inclination angle (inclination data) at regular intervals based on the value output from the direction sensor 32 (S405: detection step), and transmits it to the biometric authentication unit 22.
  • the rotation angle acquisition unit 28 acquires a rotation angle (rotation data) at regular intervals based on the value output from the direction sensor 32 (S405), and transmits it to the biometric authentication unit 22.
  • the biometric authentication unit 22 determines that the tilt angle of the mobile terminal 1 is within a predetermined angle range that is close to vertical. It is determined whether or not (S407). If the tilt angle of portable terminal 1 is within a predetermined angle range close to vertical (YES in S407), the process proceeds to S410, and the tilt angle of mobile terminal 1 is from a predetermined angle range close to vertical. If not (NO in S407), the process proceeds to S408.
  • the biometric authentication unit 22 determines whether or not the inclination angle of the mobile terminal 1 is within a predetermined angle range close to the horizontal. If the tilt angle of portable terminal 1 is within a predetermined angle range close to horizontal (YES in S408), the process proceeds to S410. On the other hand, if the tilt angle of portable terminal 1 is out of the predetermined angle range close to horizontal (NO in S408), the process returns to S405. This is a process for starting authentication in the case of FIG.
  • the biometric authentication unit 22 indicates that the rotation angle of the mobile terminal 1 is vertical. It is determined whether or not the angle is within a pre-defined angle range (S409). If the rotation angle of portable terminal 1 is within a predetermined angle range close to vertical (YES in S409), the process proceeds to S410, and from the predetermined angle range where the rotation angle of portable terminal 1 is close to vertical. If not (NO in S409), the process returns to S405.
  • the range of the rotation angle defined in advance is not limited to this, but it is desirable that the range of angles is, for example, 75 ° to 90 °.
  • the mobile terminal 1 displays the lock screen. It is possible to display a preview image (for example, an eye image) at an appropriate timing that does not hinder.
  • a preview image for example, an eye image
  • the amount of the change is a predetermined threshold value.
  • the angle is (for example, 45 °) or more, display of the preview image may be started.
  • the “amount of change” is, for example, an inclination angle or a rotation angle.
  • the biometric authentication unit 22 stores the orientation of the mobile terminal 1 and also stores the orientation of the mobile terminal 1 (for example, an inclination angle and a rotation angle). is doing. Then, the biometric authentication unit 22 changes from the posture (first posture) indicated by the tilt angle or rotation angle at the start of unlocking to the posture (second posture) indicated by the current tilt angle or rotation angle.
  • the posture change value indicating the magnitude of the posture change is equal to or greater than an angle (for example, 45 °) defined as a predetermined threshold (above the predetermined threshold) defined as a predetermined threshold (above the predetermined threshold)
  • biometric authentication processing is started or a preview image is displayed. The display may be started.
  • the posture change value may be derived by the biometric authentication unit 22 or may be configured by a posture change evaluation unit (not shown) provided separately from the biometric authentication unit 22. Good.
  • the inclination angle (inclination at (a) in FIG. 2) at the start of unlocking (that corresponds to the value acquired in the initial sampling in S404) is 30 ° (first posture), and is acquired in S405.
  • the tilt angle (the tilt in FIG. 2B) is 75 ° (second posture)
  • the amount of change in the angle is 45 ° (posture change value). Since the change amount of the angle is 45 ° or more (the posture change value is equal to or greater than the predetermined threshold) that is an angle defined as the predetermined threshold, the mobile terminal 1 starts displaying a preview image (for example, an eye image).
  • the mobile terminal 1 When the final tilt angle of the mobile terminal 1 changes from 30 ° to 75 °, the mobile terminal 1 can be used even if the tilt is not 90 ° as shown in FIG. It is sufficiently possible to acquire U eye images. Therefore, as described above, the display of the preview image may be started when a change greater than the angle defined as the predetermined threshold is detected. Thereby, authentication processing can be smoothly performed without providing restrictions on the final posture and inclination of the mobile terminal 1 when performing biometric authentication processing.
  • the angle defined as the predetermined threshold value may be defined for each of the tilt angle and the rotation angle.
  • Control blocks (particularly lock control unit 21, biometric authentication unit 22, biometric information registration unit 23, eye image acquisition unit 24, eye image display control unit 25, tilt acquisition unit 26, orientation determination unit 27, and rotation angle of portable terminal 1
  • the acquisition unit 28 may be realized by a logic circuit (hardware) formed in an integrated circuit (IC chip) or the like, or may be realized by software using a CPU (Central Processing Unit).
  • the portable terminal 1 includes a CPU that executes instructions of a program that is software that implements each function, a ROM (Read Only Memory) in which the above-described program and various data are recorded so as to be readable by a computer (or CPU) or A storage device (these are referred to as “recording media”), a RAM (Random Access Memory) for expanding the program, and the like are provided.
  • the computer (or CPU) reads the program from the recording medium and executes the program, thereby achieving the object of one embodiment of the present invention.
  • a “non-temporary tangible medium” such as a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used.
  • the program may be supplied to the computer via an arbitrary transmission medium (such as a communication network or a broadcast wave) that can transmit the program.
  • an arbitrary transmission medium such as a communication network or a broadcast wave
  • one embodiment of the present invention can also be realized in the form of a data signal embedded in a carrier wave, in which the program is embodied by electronic transmission.
  • a biometric authentication device (portable terminal 1) according to an aspect 1 of the present invention is a biometric authentication device that performs authentication of a subject using an authentication image obtained by imaging the subject with an imaging unit (camera 31).
  • a detection unit (direction sensor 32) that detects the posture of the biometric authentication device, and an authentication unit (biometric authentication unit 22) that authenticates the subject based on the authentication image.
  • authentication of the subject based on the authentication image is started.
  • the subject authentication based on the authentication image is started when the posture of the biometric authentication device becomes a predetermined posture at which the authentication image can be appropriately captured.
  • the authentication unit starts authentication of the subject based on the authentication image in response to the detection unit detecting a predetermined posture.
  • the biometric authentication device starts authentication when it becomes a predetermined posture suitable for authentication, and does not start authentication when it does not have such a predetermined posture.
  • the biometric authentication device is the biometric authentication apparatus according to aspect 1, wherein the authentication unit detects the authentication image when the detection unit detects that the predetermined posture continues for a certain period of time. Authentication of the subject based on the above may be started.
  • subject authentication is not started when the posture of the biometric authentication device instantaneously becomes a predetermined posture, and subject authentication is started when the posture continues for a certain period of time. To do. As a result, it is possible to avoid a malfunction that authentication of a subject starts when it is not intended.
  • the biometric authentication apparatus further includes an input receiving unit (input key unit 33, touch panel 37) that receives an input for instructing start of authentication of the subject in the above aspect 1 or 2, wherein the authentication unit includes: The authentication of the subject based on the authentication image may be started in response to an input from the input receiving unit.
  • an input receiving unit input key unit 33, touch panel 37
  • authentication of the subject based on the authentication image is started in response to an input from the input receiving unit.
  • the biometric authentication device further includes a storage unit 4 that stores information that defines the predetermined posture of the biometric authentication device in the above-described aspect 3, and the authentication unit includes the input receiving unit.
  • the posture of the biometric authentication device when the input for instructing authentication is received is different from the predetermined posture, authentication of the subject is started, and information defining the predetermined posture of the storage unit is The configuration may be updated so as to include the attitude when accepted.
  • the authentication unit authenticates the subject when the posture of the biometric authentication device is different from the predetermined posture when the input receiving unit receives an input for instructing start of authentication.
  • the information defining the predetermined posture of the storage unit is updated so as to include the posture when the information is received.
  • the subject can instruct the start of authentication.
  • the information defining the predetermined posture of the storage unit as described above, even if the posture of the biometric authentication device deviates from the predetermined posture originally defined, authentication is performed in the past. If the posture has received a start instruction, authentication can be started in the same manner as the predetermined posture.
  • the biometric authentication device is the biometric authentication device according to any one of the aspects 1 to 4, further comprising a display unit and a display control unit that displays the authentication image on the display unit. May display the authentication image on the display unit when the detection unit detects a predetermined posture of the biometric authentication device.
  • the detection unit detects the predetermined posture
  • the authentication image is displayed on the display unit.
  • the timing which displays the image for authentication can be controlled appropriately. Therefore, the convenience of the image (for example, a lock image) displayed on the display unit can be prevented from being impaired without displaying the authentication image when the subject is not intended.
  • a biometric authentication device (portable terminal 1) according to an aspect 6 of the present invention is a biometric authentication device that performs authentication of a subject using an authentication image obtained by imaging the subject with an imaging unit (camera 31).
  • An authentication unit (biometric authentication unit 22) that authenticates the subject based on an authentication image, and the display control unit displays the authentication image when the detection unit detects a predetermined posture. Display on the display.
  • the display control unit displays the authentication image on the display unit when the detection unit detects a predetermined posture. Accordingly, it is possible to perform control so that the authentication image is not displayed until the posture of the biometric authentication device becomes a predetermined posture. Therefore, the subject can use the image displayed on the display unit without being disturbed by the display of the authentication image.
  • a biometric authentication device (portable terminal 1) according to an aspect 7 of the present invention is a biometric authentication device that performs authentication of a subject using an authentication image obtained by imaging the subject with an imaging unit (camera 31).
  • a detection unit (direction sensor 32) that detects the posture of the biometric authentication device
  • an authentication unit (biometric authentication unit 22) that authenticates the subject based on the authentication image
  • a posture of the biometric authentication device A posture change value deriving unit (biometric authentication unit 22) for deriving a posture change value indicating a magnitude of the posture change when the posture is changed from the first posture to the second posture, and the authentication unit includes the posture
  • the change value being equal to or greater than a predetermined threshold
  • the posture of the biometric authentication device changes from the first posture before the start of authentication to the second posture in which the authentication image can be appropriately captured. If the magnitude of the posture change of the biometric authentication device is greater than or equal to a predetermined threshold, the biometric authentication device may be sufficiently capable of authenticating the subject. Therefore, according to the above configuration, when the posture of the biometric authentication device changes from the first posture to the second posture, the magnitude of the posture change is greater than or equal to a predetermined threshold value, and the authentication Authentication of the subject based on the image is started. That is, the biometric authentication device starts authentication when the posture change from the first posture to the second posture is equal to or greater than a predetermined threshold, and the posture change is less than the predetermined threshold. If it is, authentication is not started. With this configuration, the subject can be smoothly and accurately authenticated without requiring the subject to perform a special operation or operation. In addition, the biometric authentication device having such a configuration can start authentication regardless of the posture of the subject when performing authentication.
  • the biometric authentication device further includes the display unit 371 and a display control unit (eye image display control unit 25) that displays the authentication image on the display unit in the above aspect 7.
  • the display control unit may display the authentication image on the display unit in response to the posture change value being a predetermined threshold value or more.
  • the display control unit displays the authentication image on the display unit when the posture change of the biometric authentication device is equal to or greater than a predetermined threshold. If comprised in this way, the biometrics apparatus can control appropriately the timing which displays the image for authentication. Therefore, the subject can use an image (for example, a lock image) displayed on the display unit without being disturbed by the display of the authentication image.
  • a biometric authentication device (portable terminal 1) according to an aspect 9 of the present invention is a biometric authentication device that performs authentication of a subject using an authentication image obtained by imaging the subject with an imaging unit (camera 31).
  • An authentication unit (biometric authentication unit 22) that performs authentication of the subject based on an authentication image and a magnitude of a posture change when the posture of the biometric authentication device is changed from the first posture to the second posture.
  • a posture change value deriving unit (biometric authentication unit 22) for deriving a posture change value, and the display control unit displays the authentication image in response to the posture change value being a predetermined threshold value or more. Display on the display.
  • the display control unit displays the authentication image on the display unit in response to the posture change value being equal to or greater than the predetermined threshold value. That is, the biometric authentication device displays an authentication image when the magnitude of the posture change from the first posture to the second posture is equal to or greater than a predetermined threshold, and the magnitude of the posture change is predetermined. When it is less than the threshold value, it can be controlled not to display the authentication image. Therefore, the subject can use the image displayed on the display unit without being disturbed by the display of the authentication image.
  • the biometric authentication device is the configuration according to any one of the above aspects 1 to 9, wherein the authentication unit performs authentication of the subject based on an image obtained by imaging a specific part of the subject. Also good.
  • the subject can be imaged and authentication can be performed appropriately.
  • the biometric authentication device is the biometric authentication device according to any one of the aspects 1 to 10, wherein the authentication unit performs authentication of the subject based on an image obtained by imaging the face, eyes, or skin of the subject. Also good.
  • a mobile terminal device (mobile terminal 1) according to aspect 12 of the present invention includes the biometric authentication device according to any one of aspects 1 to 11.
  • the biometric authentication apparatus may be realized by a computer.
  • the biometric authentication apparatus is operated on each computer by causing the computer to operate as each unit (software element) included in the biometric authentication apparatus.
  • the control program for the biometric authentication apparatus to be realized in this manner and the computer-readable recording medium on which the control program is recorded also fall within the category of one aspect of the present invention.
  • biometric authentication device biometric authentication device, mobile terminal device, device
  • 4 storage unit 22 biometric authentication unit (authentication unit, posture change value deriving unit), 25 eye image display control unit (display control unit), 31 camera (imaging) Part), 32 direction sensor (detection part), 33 input key part (input reception part), 37 touch panel (input reception part), 371 display part, S101, S201, S301, S401 pre-authentication display steps S106, S204, S308, S410 imaging step, S104, S206a, S304, S405 detection step, S108, S205, S310, S412 authentication step, S107, S208, S309, S411 display step

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephone Function (AREA)
  • Image Input (AREA)

Abstract

認証処理の正確性を担保しつつ、利便性を向上させる。生体認証部(22)は、方向センサ(32)が携帯端末(1)の所定の姿勢を検知したことに応じてユーザの認証を開始する。

Description

生体認証装置、携帯端末装置、制御プログラム
 本発明は、撮像された被写体の認証を行う生体認証装置、携帯端末装置などに関する。
 従来から、管理対象となる区域への入退出者を管理したり、機器を利用する権限を有するユーザを限定したりするために、さまざまな認証技術が利用されている。また、携帯電話およびスマートフォンなどは、例えば、使用権限を有するユーザではない第三者から、記憶されている個人情報および電子メールなどのさまざまなデータなどを守るために、認証設定を行うことが可能である。近年、このような認証技術として、個人の身体的特徴に基づいて認証を行う生体認証技術の適用が広がっている。例えば、顔認証技術では、カメラで撮像されたデジタル画像から、人の顔に対応する画像領域を自動的に抽出し、抽出された画像の特徴量と、予めデータベースに登録されている、認証を受けることができる者の顔画像の特徴量とを比較することにより認証を行う。
 また、人の眼に基づく認証技術も知られており、このような認証技術は、虹彩パターンや白眼部分の血脈パターンなどを用いて所定の権限を有するユーザを特定・認証する。さらに、最近では、カメラを用いてユーザを撮像し、その撮像画像における眼に対応する画像に基づいて、ユーザの認証を行うことでロック解除を行い、各種機能を起動させ、操作入力が可能な状態に遷移する携帯電話およびスマートフォンなども普及しつつある。
 例えば、携帯電話およびスマートフォンなどに、眼の虹彩パターンを用いて使用権限を有するユーザを特定・認証する虹彩認証機能を搭載させる場合、携帯電話およびスマートフォンなどが備えるカメラによってユーザの眼を撮像する必要がある。しかし、その場合にはカメラと眼との位置合わせが適切に行われた上で、撮像する必要がある。そこで、携帯電話およびスマートフォンなどが備えるカメラに対する眼の位置合わせを円滑に行うためのさまざまな技術が考案されている。
 例えば、特許文献1には、目の画像を取り込む撮像カメラと、撮像カメラのレンズ配置位置と同一面上に配置される表示器と、ガイドキャラクタ発生手段とを設け、表示器にガイドキャラクタを表示させることで、ガイドキャラクタを見る被認証者の目の位置を誘導する携帯端末装置などが開示されている。
日本国公開特許公報「特開2003-108983号公報(2003年4月11日公開)」
 一般に、ユーザの眼など顔の一部を撮像して、その画像(認証用画像)に基づいて認証を行う携帯端末では、認証に用いる画像の撮像を適切に行い、正確にユーザを認証するために、携帯端末をユーザの顔に対して近づけ、顔に正対させる(顔に向かい合わせる)ことが望ましい。
 そこで、特許文献1に記載の携帯端末装置では、表示器にガイドキャラクタを表示させて、ユーザにこのガイドキャラクタに合わせて目の位置を調節するように誘導する。これにより、ユーザは表示されているガイドキャラクタを見ながら、携帯端末装置の位置が、認証を行うために適した位置となるように調節することができる。
 以上のとおり、携帯電話機およびスマートフォンなどの携帯端末の認証処理(ロックの解除)において虹彩認証、白眼認証、および顔認証などの生体認証が使用される場合、ユーザの眼や顔の位置をユーザに適切に調節させるために、カメラなどでユーザを撮像した撮像画像(プレビュー画像)を表示させる。
 ところで、多くの携帯端末では、ロック画面に時計や天気予報、未読メールの有無などの通知情報などが表示され、ユーザはロックを解除することなく、ロック画面に表示されているこれらの情報を利用できる。しかし、例えばユーザがロック画面に表示されている時計などを確認したいだけであり、認証処理の実行を意図していないときに認証処理が開始された場合、プレビュー画像の表示によってロック画面の情報表示が阻害されることになる。このように適切ではないタイミングで認証が開始されると、ロック画面の時計や通知情報などの表示がプレビュー画像によって妨げられてしまい、その利便性が損なわれてしまうという問題が生じる。
 本発明の一態様は、前記の問題点に鑑みてなされたものであり、その目的は、生体認証装置において、認証処理の正確性を担保しつつ適切なタイミングで認証処理を開始し、表示する情報の利便性を損なわないようにするための技術を提供することにある。
 上記の課題を解決するために、本発明の一態様に係る生体認証装置は、撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、前記撮像部と、前記生体認証装置の姿勢を検知する検知部と、前記認証用画像に基づいて前記被写体の認証を行う認証部と、を備え、前記認証部は、前記検知部が所定の姿勢を検知したことに応じて、前記認証用画像に基づく前記被写体の認証を開始する。
 また、本発明の一態様に係る生体認証装置は、撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、前記撮像部と、表示部と、前記生体認証装置の姿勢を検知する検知部と、前記認証用画像を前記表示部に表示させる表示制御部と、前記認証用画像に基づいて前記被写体の認証を行う認証部と、を備え、前記表示制御部は、前記検知部が所定の姿勢を検知した場合に、前記認証用画像を前記表示部に表示させる。
 また、本発明の一態様に係る生体認証装置は、撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、前記撮像部と、前記生体認証装置の姿勢を検知する検知部と、前記認証用画像に基づいて前記被写体の認証を行う認証部と、前記生体認証装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部と、を備え、前記認証部は、前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像に基づく前記被写体の認証を開始する。
 また、本発明の一態様に係る生体認証装置は、撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、前記撮像部と、表示部と、前記生体認証装置の姿勢を検知する検知部と、前記認証用画像を前記表示部に表示させる表示制御部と、前記認証用画像に基づいて前記被写体の認証を行う認証部と、前記生体認証装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部と、を備え、前記表示制御部は、前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像を前記表示部に表示させる。
 また、本発明の一態様に係る制御プログラムは、撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う装置としてコンピュータを機能させるための制御プログラムであって、前記装置の姿勢が所定の姿勢になった場合に、前記認証用画像に基づく前記被写体の認証を開始する認証部としてコンピュータを機能させる。
 また、本発明の一態様に係る制御プログラムは、撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う装置としてコンピュータを機能させるための制御プログラムであって、前記認証用画像に基づいて前記被写体の認証を行う認証部、および、前記装置の姿勢が所定の姿勢になった場合に、前記認証用画像を表示させる表示制御部としてコンピュータを機能させる。
 また、本発明の一態様に係る制御プログラムは、撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う装置としてコンピュータを機能させるための制御プログラムであって、前記装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部、および前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像に基づく前記被写体の認証を開始する認証部としてコンピュータを機能させる。
 また、本発明の一態様に係る制御プログラムは、撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う装置としてコンピュータを機能させるための制御プログラムであって、前記認証用画像に基づいて前記被写体の認証を行う認証部、前記装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部、および、前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像を表示させる表示制御部としてコンピュータを機能させる。
 本発明の一態様によれば、生体認証装置において、認証処理の正確性を担保しつつ、利便性を向上させることができる、という効果を奏する。
本発明の一実施形態に係る携帯端末の要部構成の一例を示す機能ブロック図である。 ユーザが立っているか、あるいは座っているときに、ユーザの認証を行う場合の、携帯端末の姿勢の変化と表示例とを示す図である。 ユーザが仰向けに臥しているときに、ユーザの認証を行う場合の、携帯端末の姿勢の変化を示す図である。 ユーザが横向きに臥しているときに、ユーザの認証を行う場合の、携帯端末の姿勢の変化を示す図である。 携帯端末のハードウェア構成の一例を示すブロック図である。 携帯端末の傾き角度および回転角度を説明する図である。 携帯端末がロック画面を表示してから、ユーザの認証を行い、ロックを解除しホーム画面を表示するまでの処理の流れの一例を示すフローチャートである。 携帯端末がロック画面を表示してから、ユーザの認証を行い、ロックを解除しホーム画面を表示するまでの処理の流れの別の一例を示すフローチャートである。 携帯端末がロック画面を表示してから、ユーザの認証を行い、ロックを解除しホーム画面を表示するまでの処理の流れの他の一例を示すフローチャートである。 携帯端末がロック画面を表示してから、ユーザの認証を行い、ロックを解除しホーム画面を表示するまでの処理の流れのさらに他の一例を示すフローチャートである。
 〔実施形態1〕
 以下、本発明の実施の形態について、詳細に説明する。なお、以下では、本発明の一態様に係る生体認証装置と同じ機能を備える携帯端末1(生体認証装置、携帯端末装置、装置)を例に挙げて説明する。なお、携帯端末1は、携帯電話およびスマートフォンなどの通信機器であってもよいし、携帯ゲーム機および電子手帳などであってもよい。すなわち、本発明の一態様に係る生体認証装置において、通信機能および通話機能は必須の構成ではない。
 本発明の態様1に係る携帯端末1は、カメラ31(撮像部)によってユーザU(被写体)を撮像した認証用画像(例えば、眼画像、プレビュー画像などの、ユーザUを撮像した画像)を用いて該ユーザUの認証を行う。携帯端末1は、カメラ31と、携帯端末1の姿勢を検知する方向センサ32(検知部)と、認証用画像に基づいてユーザUの認証を行う生体認証部22(認証部)と、を備えている。携帯端末1は、方向センサ32が携帯端末1に所定の姿勢を検知したことに応じて、認証用画像に基づくユーザUの認証を開始する。
 (携帯端末1の動作例)
 まず、携帯端末1が生体認証を行う場合の動作について、図2から図4を用いて説明する。なお、携帯端末1が備えるロック解除を行う処理としては、生体認証に限定されず、ユーザは、生体認証か、パスワードまたはPIN番号の入力による認証か、を選択できるように構成されていてもよい。
 携帯端末1は、ユーザUによって把持され、電源キー(図1および図5の入力キー部33)が押下される(起動操作の入力)と、図2の(a)に示すように、表示部371にロック画面を表示させる。ロック画面(認証前画像)には時刻表示や通知情報の表示が含まれており、例えば、天気情報(図示の「天気:晴れ」)、着信メールの有無(図示の「メールあり」)、日付(図示の「1月21日」)、および、時刻(図示の「10:20」)などの情報が表示される。携帯端末1は、携帯端末1の姿勢を検知する方向センサ32を備えており、携帯端末1の姿勢が所定の姿勢になるまでは、プレビュー画像の表示を行わず、ロック画面の時刻表示や通知情報の表示を継続する。携帯端末1の姿勢が所定の姿勢になったとき、図2の(b)に示すようにプレビュー画像の表示を開始する。なお、「傾き角度」および「回転角度」については後に説明する。
 図2は、ユーザUが立っている(立位)か、あるいは座っている(座位)ときに、ユーザUの認証を行う場合の、携帯端末1の姿勢の変化と表示例とを示す図である。ユーザUによって電源キーが押下されたときの携帯端末1の姿勢が、図2の(a)に示すように、傾き角度15°である場合には、表示部371にはロック画面の表示を継続する。ユーザUが、携帯端末をさらに高く持ち上げ、携帯端末1の姿勢が、図2の(b)に示すように、傾き角度90°になった場合、表示部371にプレビュー画像の表示を開始する。なお、表示部371全体に、プレビュー画像を表示してもよい。あるいは、図2の(b)に示すように、表示領域371aにプレビュー画像を表示し、表示領域371bにロック画像の表示の一部(図示の例では、時刻)を表示する構成でもよい。
 図3は、ユーザUが仰向けに臥している(臥位)ときに、ユーザUの認証を行う場合の、携帯端末1の姿勢の変化を示す図である。すなわち、ユーザUは、表示部371を下から見上げるようにして視認する。携帯端末1の姿勢が、図3の(a)に示すように、傾き角度120°である場合には、表示部371にはロック画面の表示を継続する。ユーザUが、携帯端末1をさらに顔の方に近づけ、顔の正面の位置まで移動させて、携帯端末1の姿勢が、傾き角度180°になった場合、表示部371にプレビュー画像の表示を開始する。
 図4は、ユーザUが横向きに臥している(臥位)ときに、ユーザUの認証を行う場合の、携帯端末1の姿勢の変化を示す図である。すなわち、ユーザUは顔を横に向けて、表示部371を視認する。携帯端末1の姿勢が、図4の(a)に示すように、回転角度15°である場合には、表示部371にはロック画面の表示が継続される。図4の(b)に示すように、携帯端末1の姿勢が、ユーザUの顔と表示部371と正対する、回転角度90°になった場合、表示部371にプレビュー画像の表示を開始する。
 このように、携帯端末1は、ユーザUによって把持され、電源キーが押下されても、それだけではプレビュー画像の表示を開始せずに、携帯端末1が所定の姿勢である場合にプレビュー画像の表示を開始する。これにより、生体認証のためのプレビュー画像の表示期間を適切に制御して、ユーザUによるロック画面に表示されている情報の利用を妨げないようにすることができる。
 (ハードウェア構成)
 続いて、携帯端末1のハードウェア構成について、図5を用いて説明する。図5は、携帯端末1のハードウェア構成の一例を示すブロック図である。携帯端末1は、CPU(Central Processing Unit)2、カメラ31(撮像部)、方向センサ32(検知部)、入力キー部33(入力受付部)、記憶部4、通信部34、音声出力部35、音声入力部36、タッチパネル37(入力受付部)、および一時メモリ38を備えていてもよい。なお、図示の携帯端末1の構成は一例にすぎず、例えば、方向センサの他に、近接センサ、温度センサ、照度センサ等のセンサ、有線接続によるデータの送受信および充電を行う場合に利用されるプラグなどを挿入するジャックなどは、本発明の一態様と直接関係がない。このため、上記センサ、ジャックなどの図示と説明とを省略している。
 通信部34は、インターネットおよび電話回線を介した、データおよび音声信号などの送受信を行う。通信部34は、例えば、3G/LTE通信を用いて、音声通話やパケット通信を行う。
 CPU2は、記憶部4のプログラム保存領域41に格納されたプログラムを読み出して動作させ、各種機能の起動、実行、および制御を行う。例えば、CPU2は、ユーザUの眼(特定の部位)を撮影した眼画像と、生体情報保存領域42に保存されている眼画像データとの比較を行い、両者の特徴(例えば、虹彩パターンおよび/または白眼の血脈パターン)が一致すれば認証OK(ユーザUが、携帯端末1の使用権限を有するユーザUであると認証)と判断する。なお、CPU2が生体認証を行うための制御プログラムをプログラム保存領域41から読み出して実行しているときの機能ブロックについては、後に説明する。また、携帯端末1が備える電源キー(入力キー部33のうちの1つ)が押下されると、CPU2は表示部371にロック画面を表示させ、その後、ユーザUの認証を行い、該ユーザUの認証結果がOKであれば、ロックを解除して、ロック画面からホーム画面へ切り替える。この処理の具体例については、後に詳述する。
 音声出力部35は、スピーカおよびレシーバから構成されており、通話時に通話相手からの音声の出力を行ったり、受信したコンテンツの再生時に、該コンテンツの音声を出力したりする。
 音声入力部36は、マイクロフォンから構成され、通話時にユーザUが発する音声の入力を受け付ける。
 タッチパネル37は、表示部371およびタッチセンサ部372を含んでおり、表示画面(図2の表示部371参照)に情報の表示を行うとともに、ユーザUのタッチ操作による入力を受け付ける。表示部371は、ロック画面、ホーム画面、プレビュー画面などを表示する表示画面を構成するものであり、例えば、液晶ディスプレイ(LCD)などの表示デバイスである。一方、タッチセンサ部372は表示部371に重畳され、ユーザUが指などを用いて表示画面上をタッチした位置を検出したり、ジェスチャ操作(スワイプ操作、タップ操作、スライド操作など)を行ったりしたことを検出するセンサである。すなわち、タッチパネル37は、情報を表示する機能とユーザUからの各種入力を受け付ける機能とを備えている。
 方向センサ32は、携帯端末1の姿勢を検知するセンサである。例えば、方向センサ32は、地磁気センサおよび加速度センサとの組み合わせにより実現してもよく、垂直方向(重力方向)および水平方向(重力と直交する方向)に対して、携帯端末1がどれだけ傾いているかを取得するセンサである。方向センサ32の検知結果の出力と、携帯端末1の姿勢との対応関係については、後に説明する。
 入力キー部33は、電源キーなどの物理キーである。携帯端末1の表示部371の表示が消灯状態のときに、入力キー部33がユーザUによって押下されると、CPU2は、表示部371を点灯させて、ロック画面を表示させる。
 カメラ31は、例えば、携帯端末1に搭載された(すなわち、携帯端末1の筐体に格納された)カメラである。カメラ31は、CPU2からの撮像開始指示に応じて、ユーザUの顔(特定の部位)、眼、および皮膚(特定の部位)などを撮像した画像(認証用画像)の画像データを取得して、CPU2に出力する。
 記憶部4は、各種データおよび各種プログラムの格納領域を有している。例えば、記憶部4は、フラッシュROMなどから構成され得る。記憶部4は、プログラム保存領域41、生体情報保存領域42、および設定情報保存領域43を備えていてもよい。
 プログラム保存領域41は、携帯端末1が実行可能な各種機能に対応するアプリケーションプログラム、および各種機能を実行するときに参照される各種データを格納するための領域である。
 生体情報保存領域42は、ユーザUの生体認証を行うために、該ユーザUの眼を予め撮像した眼画像データを保存するための領域である。なお、生体情報保存領域42には、撮像した画像データ全体が保存されていてもよいし、ユーザUの所定の部位が撮像されている領域(例えば、眼および目の周辺の皮膚など)を含む一部分の画像を切り出した部分画像データ(特徴データ)が保存されていてもよい。
 設定情報保存領域43は、生体認証に関する、ユーザUによって入力された設定情報を保存する領域である。設定情報保存領域43は、例えば、ロック解除のために生体認証を用いるか、あるいは他の認証方法(パスワード入力など)を用いるか、などの設定情報を保存する。
 一時メモリ38は、携帯端末1における各種制御を行う場合に参照されたり使用されたりする制御情報、および携帯端末1の向き(縦向きか、横向きか)に関する情報などを一時的に記憶するメモリである。
 (方向センサ32による携帯端末1の姿勢の検知)
 次に、図6を用いて、方向センサ32によって検知される、携帯端末1の姿勢について、説明する。図6は、携帯端末1の傾き角度および回転角度を説明する図である。なお、図6では、携帯端末1を直方体形状として描画しているがこれに限定されない。ここでは、図6に示すように、携帯端末1の厚さ方向の平行な軸をZ軸、幅方向に平行な軸をX軸、縦方向に平行な軸をY軸として説明する。
 例えば、方向センサ32は、CPU2からのサンプリング要求に応じて、一定の周期(例えば、1秒間に30回など)で携帯端末の姿勢に関する情報を取得する。携帯端末の姿勢は、例えば、アジマス(Azimuth)、傾き(Pitch)、および回転(Roll)の3つの角度によって表される。アジマスは、Z軸を回転軸とする回転角度として表され、傾きは、X軸を回転軸とする回転角度として表され、回転はY軸を回転軸とする回転角度として表される。なお、本発明の一態様の特徴においてアジマスは直接関係しないため、ここではその説明を省略する。
 X軸を回転軸とする回転角度は「傾き(Pitch)角度」と呼ばれる。携帯端末1が水平な場所に置かれており、その表示部371を含む面(主面)が上方を向いている姿勢のときの傾き角度は0°である。携帯端末1が垂直(重力に平行)に立てられた姿勢のときの傾き角度は90°である。携帯端末1が水平な場所に置かれており、その表示部371を含む面(主面)が下方を向いている姿勢(いわゆる、うつ伏せの状態)のときの傾き角度は180°である。
 Y軸を回転軸とする回転角度は「回転(Roll)角度」と呼ばれる。傾き角度と同様、携帯端末1が水平な場所に置かれており、その表示部371を含む面(主面)が上方を向いている姿勢のときの傾き角度は0°である。携帯端末1が垂直(重力に平行)に立てられた姿勢のときの傾き角度は90°である。携帯端末1が水平な場所に置かれており、その表示部371を含む面(主面)が下方を向いている姿勢(いわゆる、うつ伏せの状態)、および図3の(b)に示すように、の傾き角度は180°である。
 (携帯端末1の構成)
 次に、CPU2が生体認証を行うための制御プログラムを実行し、認証機能制御部20として機能しているときの機能ブロックについて図1を用いて説明する。図1は、本発明の一実施形態に係る携帯端末1の要部構成の一例を示す機能ブロック図である。なお、説明の便宜上、既に図5にて説明した部材と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
 認証機能制御部20は、ロック制御部21、生体認証部22、生体情報登録部23、眼画像取得部24、眼画像表示制御部25(表示制御部)、傾き取得部26、向き判定部27、および回転角度取得部28を備えている。
 ロック制御部21は、画面消灯状態から、入力キー部33が押下を受け付けたことに応じて、表示部371を点灯させ、ロック画面を表示させる。また、ロック制御部21は、設定情報保存領域43から読み出した設定情報に基づき、ロック解除の制御を行う。例えば、パスワードまたはPIN番号によりロック解除を行う設定がなされている場合、ロック制御部21は、表示部371の表示画面内に、パスワードまたはPIN番号をユーザUに入力させるためのガイド表示を行う。他方、眼画像を使用した生体認証を用いてロック解除を行う場合は、ロック制御部21は、生体認証部22に対して、認証処理(例えば、図7~10に示す処理)の実行を要求する。ロック制御部21が生体認証部22から認証OKを示す認証結果を受け取った場合、ロック制御部21はロックを解除し、表示部371に所定のホーム画面を表示する。
 生体認証部22は、眼画像取得部24から取得した眼画像データを生体情報保存領域42に予め記憶された登録データと比較することで、ユーザUの生体認証を行う。生体認証部22は、類似度が規定値を超えていた場合に、認証OKとし、ロック制御部に結果を返す。また、取得した眼画像データを眼画像表示制御部25に送ることで、表示部371に眼画像を表示させる(プレビュー表示)。これにより、眼の位置合わせを容易にする。
 生体情報登録部23は、ユーザUによってタッチパネル37を介して生体認証の利用が選択された場合、生体認証処理を最初に実行する前に、ユーザUの眼画像を眼画像取得部24に要求する。生体情報登録部23は、眼画像取得部24がカメラ31から受信した眼画像データを取得し、生体情報保存領域42に格納(登録)する。
 眼画像取得部24は、生体認証部22および生体情報登録部23からの指示に従い、カメラ31の起動と撮像とを制御し、ユーザUの眼画像データを取得する。眼画像取得部24は、取得した眼画像データを、指示の送信元である生体認証部22または生体情報登録部23に出力する。
 眼画像表示制御部25は、眼画像取得部24がカメラ31を介して取得した、ユーザUを撮像した画像の画像データを取得してプレビュー画像として表示部371に表示させる。眼画像表示制御部25が表示部371に表示させるプレビュー画像は、ユーザUの顔全体を撮像した画像であってもよいし、ユーザUの眼とその周辺を撮像した画像であってもよい。プレビュー画像がユーザUの眼画像である場合、虹彩パターンや白眼部分の血脈パターンなどを用いて、所定の権限を有するユーザUを特定・認証することができる。なお、ユーザUの生体認証に用いる画像は眼画像に限定されず、ユーザUを特定し認証するための身体的特徴が撮像されている画像であれば、他の画像であってもよい。
 傾き取得部26は、方向センサ32に対してサンプリング要求を行い、携帯端末1の姿勢に関する情報を取得する。具体的には、傾き取得部26は、方向センサ32によって検出された、携帯端末1のX軸(図6参照)に対する傾き角度の検出を取得してもよい。なお、傾き取得部は、傾き角度を、例えば毎秒30回取得してもよい。
 回転角度取得部28は、方向センサ32に対してサンプリング要求を行い、携帯端末1の姿勢に関する情報を取得する。具体的には、Y軸(図6参照)に対する回転角度を取得してもよい。なお、回転角度取得部28は、回転角度を、例えば毎秒30回取得してもよい。
 向き判定部27は、回転角度取得部28から取得した回転角度に基づいて、携帯端末1の姿勢が現在縦向きなのか、横向きなのかを判定する。ここで、「縦向き」とは、図2および図3に示すような姿勢であり、携帯端末1の筐体のY軸に平行な辺が、重力方向に直交するような姿勢を意味している。
 (生体認証処理の流れ)
 次に、本実施形態に係る携帯端末1が行う生体認証処理の流れについて、図7を用いて説明する。図7は、携帯端末1がロック画面を表示してから、ユーザUの認証を行い、ロックを解除しホーム画面を表示するまでの処理の流れの一例を示すフローチャートである。以下では、携帯端末1は、虹彩パターンや白眼部分の血脈パターンなどを用いて、所定の権限を有するユーザUを特定・認証する生体認証機能を備えている場合を例に挙げて説明するが、生体認証に用いる画像は眼画像に限定されない。なお、事前に生体情報登録部23によって、生体情報保存領域42にユーザUの眼画像の登録が行われているものとする。
 なお、以下では、携帯端末1が、眼画像による生体認証により、携帯端末1のロック解除を行う機能を備えている場合を例に挙げて説明する。しかし、これに限定されず、携帯端末1が生体認証に利用する画像としては、顔画像などであってもよい。
 ユーザUが表示部371の表示画面が消灯している状態のときに、ユーザUによって入力キー部33が押下されると、ロック制御部21が表示画面を点灯させて、ロック画面を表示する(S101:認証前表示ステップ)。ロック画面には、時刻、日付、天気、着信メールの有無および件数などの情報(図2の(a)参照)、電池残量、ニュースのヘッドライン、および、緊急連絡先への連絡を受け付ける「Emergency」などの表示が含まれていてもよい。
 次に、ロック制御部21は、設定情報保存領域43を参照して、ロック解除を行うための認証方法に関する情報を取得する(S102)。ユーザUによって、眼画像による生体認証を用いる設定がなされていなかった場合(S102にてNO)、ロック制御部21は、例えば、パスワードまたはPIN番号の照合により認証を行うために、ユーザUに対してパスワードまたはPIN番号の入力を促す画面を表示部371に表示させる。一方、眼画像による生体認証を用いる設定がなされていた場合(S102にてYES)、ロック制御部21は、生体認証部22に対して生体認証処理の開始を指示する。
 生体認証部22は、傾き取得部26に対して、携帯端末1の姿勢についての情報である傾き角度の取得を指示する。該指示に応じて、傾き取得部26は、方向センサ32に対してサンプリングの開始要求を行い(S103)、方向センサ32から出力される値に基づいて、一定時間ごとに傾き角度(傾きデータ)を取得し(S104:検知ステップ)、生体認証部22に送信する。
 次に、生体認証部22は、S104にて取得した傾き角度に基づいて、携帯端末1の姿勢が所定の姿勢であるか否かを判定する(S105)。例えば、生体認証部22は、S104にて取得した傾き角度に基づいて、予め規定された角度範囲内(図中では、「規定角度内」と表記している)か否かを判定する。
 携帯端末1の姿勢が所定の姿勢である場合、すなわち、携帯端末1の傾き角度が予め規定された角度範囲内であれば(S105にてYES)、生体認証部22は、眼画像取得部24に対して眼画像の取得を指示する。眼画像取得部24は、生体認証部22からの指示に応じて、カメラ31を起動させ(S106:撮像ステップ)、カメラ31によって撮像された(キャプチャされた)画像の画像データ(プレビュー画像データ)を取得する。生体認証部22は、眼画像取得部24がカメラ31から取得した画像データを、眼画像表示制御部25に送信する。眼画像表示制御部25は、受信したプレビュー画像を表示部371にて表示させる(S107:表示ステップ)。なお、プレビュー画像は、表示部371の表示画面全体に表示させてもよい。また、これまでロック画面に表示していた情報の一部を表示する領域(例えば、図2の(b)の表示領域371b)とは別に、プレビュー画像を表示する表示領域371a(図2の(b)参照)に表示させてもよい。
 一方、携帯端末1の傾き角度が予め規定された角度範囲内でなかった場合(S105にてNO)、S104に戻り、生体認証部22は、傾き角度が予め規定された角度範囲内になるまで、傾き角度の取得を継続する。ここで、予め規定された傾き角度の範囲としては、これに限定されるものではないが、例えば、75°~90°、65°~85°など、垂直(重力方向に平行)に近い角度の範囲であることが望ましい。ユーザUの眼に対して下方向から撮像するよりも、眼と同じ高さから撮像した方が、より良好な眼画像を取得することができる。そこで、生体認証のための撮像を開始するための条件として、携帯端末1の姿勢に関して予め規定された傾き角度の範囲を、携帯端末1が垂直に近い姿勢に対応する角度範囲に設定することにより、好条件で認証処理を行うことができる。
 なお、携帯端末1の姿勢が変化する途中において瞬間的に所定の姿勢となる場合がある。このような瞬間的な姿勢を検出しカメラ31を起動させてしまう誤動作を回避するために、例えば、生体認証部22は、傾き角度がサンプリングにおいて連続して予め規定された角度範囲内である(すなわち、携帯端末1の姿勢が所定の姿勢であり、その姿勢が一定期間継続している)場合に、眼画像取得部24に対して眼画像の取得を指示することが望ましい。
 上記のように構成することで、携帯端末1の傾き角度が予め規定された角度範囲内になるまでは、生体認証の処理を行わない。これにより、携帯端末1が所定の姿勢になるまでは、ロック画面の表示がプレビュー画像の表示によって妨げられない。
 なお、傾き角度が予め規定された角度範囲内になった場合にプレビュー画像の表示を開始する、という動作を有効にするか否かを、ユーザUが選択できるように構成してもよい。また、ロック画面にニュースおよび天気予報などを表示する機能が有効になっている場合にのみ、図7に示すような、携帯端末1の姿勢に応じたプレビュー画像の表示制御を有効にしてもよい。
 生体認証部22は、眼画像取得部24から取得した眼画像と、生体情報保存領域に予め記憶(登録)された、ユーザUの眼画像とを比較して、その差異が所定の閾値より小さいか否かに基づいて、認証処理を行う(S108:認証ステップ)。認証処理の結果、認証OKであれば(S109にてYES)、生体認証部22は、ロックを解除するようにロック制御部21に指示し、ロック制御部21は該指示に応じて、ロックを解除し、ホーム画面を表示する(S120)。また生体認証部22は、傾き取得部26に対して、傾き角度の取得を終了するように指示する。該指示に応じて、傾き取得部26は、方向センサ32のサンプリングを終了させる(S121)。
 (本実施形態の効果)
 携帯端末1は、ユーザUの認証を行うために適当な所定の姿勢になったときに認証を開始し、そのような所定の姿勢になっていないときには認証を開始しない。このように構成することにより、携帯端末1はユーザUの認証を円滑かつ正確に開始することができる。よって、認証処理の正確性を担保しつつ、利便性を向上させることができる。
 さらに、携帯端末1の姿勢が所定の姿勢となるまではプレビュー画像を表示しないように制御することにより得られる効果について、以下に説明する。
 例えば、認証設定された携帯電話およびスマートフォンなどの携帯端末は、認証が完了するまではロック状態にあり、表示画面には認証後に表示するホーム画面とは異なるロック画面を表示している。このロック画面には、時刻、天気予報、未読メールの有無などの情報をユーザに知らせる表示が含まれている場合があり、ユーザは、ロック解除をしなくても、時刻、天気予報、未読メールの有無などの情報を手軽に視認することが可能である。
 しかしながら、ユーザUの眼などを撮像した画像を認証用画像として用いる場合、パスワードの入力およびタッチパネル37上で指先を動かすパターンなどによる認証と異なり、認証処理が行われている間、ユーザUはロック画面に表示されている時刻表示や各種通知などの情報を利用できないという問題が生じる。なぜならば、特許文献1に記載の技術のように、眼の画像を取得するために、ユーザ(被写体)の目の位置を所定の位置へと誘導するためのガイドキャラクタ、およびカメラ31によって撮影したプレビュー画像を表示部371に表示させる必要があるからである。そして、認証を開始してから完了するまでの間は、ガイドキャラクタ、および撮像カメラによる撮影画像(プレビュー画像)の表示を行うため、プレビュー画像の表示に邪魔されて、表示部371に表示されているロック画面の情報を利用することができない。
 そこで、携帯端末1の姿勢が所定の姿勢となるまではプレビュー画像を表示しないように制御することにより、ユーザUは、プレビュー画像の表示に邪魔されることなく、表示部371に表示されているロック画面の情報(ニュースおよび天気予報など)を利用することができる。
 〔実施形態2〕
 図7に示す携帯端末1は、生体認証部22が、携帯端末1の姿勢に応じて生体認証処理を開始するかどうかを判定し、カメラを起動させて眼画像を取得したり、眼画像を表示部371に表示させたりする構成であった。しかしながら、生体認証部22は、携帯端末1の姿勢に関係なく、眼画像の取得を開始し、認証処理を開始してもよい。すなわち、本実施形態の携帯端末1は、携帯端末1が所定の姿勢になる以前から認証処理を開始可能であり、その後、携帯端末1が所定の姿勢になったときに、表示部371にプレビュー画像の表示を開始する。
 このような構成を備える携帯端末1が行う生体認証処理の流れについて、図8を用いて説明する。図8は、携帯端末1がロック画面を表示してから、ユーザの認証を行い、ロックを解除しホーム画面を表示するまでの処理の流れの別の一例を示すフローチャートである。
 表示部371の表示画面が消灯している状態のときに、ユーザUによって入力キー部33が押下されると、ロック制御部21が表示画面を点灯させて、ロック画面を表示する(S201:認証前表示ステップ)。
 次に、ロック制御部21は、設定情報保存領域43を参照して、ロック解除を行うための認証方法に関する情報を取得する(S202)。ユーザUによって、眼画像による生体認証を用いる設定がなされていなかった場合(S202にてNO)、ロック制御部21は、例えば、パスワードまたはPIN番号の照合により認証を行うために、ユーザUに対してパスワードまたはPIN番号の入力を促す画面を表示部371に表示させる。一方、眼画像による生体認証を用いる設定がなされていた場合(S202にてYES)、ロック制御部21は、生体認証部22に対して生体認証処理の開始を指示する。
 生体認証部22は、傾き取得部26に対して、携帯端末1の姿勢についての情報である傾き角度の取得を指示する。該指示に応じて、傾き取得部26は、方向センサ32に対してサンプリングの開始要求を行う(S203)。方向センサ32は、この要求に応じて検出した値を出力するが、この段階では、傾き取得部26は、出力された値に基づく傾き角度(傾きデータ)の取得を開始しない。
 また、生体認証部22は、ロック制御部21からの指示に従い、眼画像取得部24に対して眼画像の取得を指示する。眼画像取得部24は、生体認証部22からの指示に応じて、カメラ31を起動させる(S204:撮像ステップ)。生体認証部22は、カメラ31によって撮像された(キャプチャされた)画像(プレビュー画像)を取得し、取得した画像と、生体情報保存領域に予め記憶(登録)された、ユーザUの眼画像とを比較して、その差異が所定の閾値より小さいか否かに基づいて、認証処理を行う(S205:認証ステップ)。すなわち、本実施形態に係る携帯端末1は、携帯端末1の姿勢が所定の姿勢であるか否かに関係なく、プレビュー画像に基づくユーザUの生体認証処理を進める。
 生体認証部22は、生体認証処理を開始した後に、あるいは並行して、傾き取得部26に対して、携帯端末1の姿勢についての情報である傾き角度を取得するよう指示する。傾き取得部26は、方向センサ32から出力される値に基づいて、一定時間ごとに傾き角度(傾きデータ)を取得し(S206a:検知ステップ)、生体認証部22に送信する。
 生体認証部22から眼画像表示制御部25に眼画像が出力されておらず、まだ表示部371にて眼画像を表示していない場合(S206bにてNO)、生体認証部22は、S206aにて取得した傾き角度に基づいて、携帯端末1の姿勢が所定の姿勢であるか否かを判定する(S207)。例えば、生体認証部22は、取得した傾き角度に基づいて、予め規定された角度範囲内(図中では、「規定角度内」と表記している)か否かを判定する。
 携帯端末1の姿勢が所定の姿勢である場合、すなわち、携帯端末1の傾き角度が予め規定された角度範囲内であれば(S207にてYES)、眼画像表示制御部25は、受信したプレビュー画像(例えば、眼画像など)の表示部371への表示を開始する(S208:表示ステップ)。
 一方、S206bにおいて表示部371にて眼画像の表示を既に開始していた場合(S206bにてYES)には引き続き眼画像の表示を継続する。また、携帯端末1の傾き角度が予め規定された角度範囲内でなかった場合(S207にてNO)には、プレビュー画像の表示を開始することなく、S209に進む。
 生体認証部22による認証処理の結果、認証OKであれば(S209にてYES)、生体認証部22は、ロックを解除するようにロック制御部21に指示し、ロック制御部21は該指示に応じて、ロックを解除し、ホーム画面を表示する(S210)。また生体認証部22は、傾き取得部26に対して、傾き角度の取得を終了するように指示する。該指示に応じて、傾き取得部26は、方向センサ32のサンプリングを終了させる(S211)。一方、認証OKでない場合(S209にてNO)、S205に戻り、認証処理からやり直す。
 上記のように、本実施形態に係る携帯端末1は、プレビュー画像の表示を行なわずに認証処理を開始する。これにより、ロック画面の表示がプレビュー画像の表示によって妨げられることはない。また、プレビュー画像の表示を省略できる場合もあり、この場合には、ユーザUの認証を少ない処理量により完了させることができる。
 〔実施形態3〕
 本実施形態に係る携帯端末1では、携帯端末1が所定の姿勢ではないときであっても認証開始ボタン(例えば、タッチパネル37、または入力キー部33)が押下された場合、生体認証部22は、眼画像の取得を開始し、認証処理を開始してもよい。この場合、認証開始ボタンが押下されたときの携帯端末1の姿勢を含むように、携帯端末1の姿勢について予め規定された角度範囲を変更してもよい。ここでは、このような構成を備える携帯端末1の一例について説明する。
 本実施形態に係る携帯端末1では、携帯端末1が所定の姿勢ではないときであっても認証開始ボタン(例えば、タッチパネル37、または入力キー部33)が押下された場合、生体認証部22は、眼画像の取得を開始し、認証処理を開始することができる点で、図7に示す携帯端末1とは異なっている。この場合、認証開始ボタンが押下されたときの携帯端末1の姿勢を含むように、携帯端末1の姿勢について予め規定された角度範囲を変更してもよい。
 このような構成を備える携帯端末1が行う生体認証処理の流れについて、図9を用いて説明する。図9は、携帯端末1がロック画面を表示してから、ユーザの認証を行い、ロックを解除しホーム画面を表示するまでの処理の流れの他の一例を示すフローチャートである。なお、図9のS301(認証前表示ステップ)~305、およびS308(撮像ステップ)~S313はそれぞれ、図7のS101~S121と同様であるため、ここでは説明を省略する。
 携帯端末1は、所定の姿勢を規定する情報を記憶する記憶部4を備える。生体認証部22は、入力キー部33およびタッチパネル37などの入力受付部が認証開始を指示する入力を受け付けた時の携帯端末1の姿勢と前記所定の姿勢とが異なる場合、ユーザUの認証を開始するとともに、記憶部4の前記所定の姿勢を規定する情報を前記受け付けたときの姿勢を含むように更新する。このような構成を備えることにより、携帯端末1の姿勢が所定の姿勢から外れた姿勢であっても、ユーザUは認証の開始を指示することができる。
 携帯端末1の傾き角度が予め規定された角度範囲内でなかった場合(S305にてNO)、生体認証部22は、例えば、タッチパネル37または入力キー部33の認証開始ボタンが押下された場合には(S306にてYES)、携帯端末1の姿勢について予め規定された角度範囲を変更し(S307)、S308に進む。一方、認証開始ボタンが押下されていない場合には(S306にてNO)、S304(検知ステップ)に戻る。
 このように、本実施形態に係る携帯端末1は、図7に示す携帯端末1と異なり、携帯端末1の姿勢に依らずユーザUが所望する任意の状態での認証開始を行うことができる構成を備えている。これにより、ユーザUによる認証開始指示の入力を受け付けた場合、携帯端末1は生体認証処理を該指示に従って開始することができる。よって、生体認証を行うときの携帯端末の姿勢として想定された姿勢から外れた姿勢であっても、認証処理を開始することができる(認証前であっても、ユーザは、強制的に認証処理の開始を指示することができる)。また、携帯端末1の傾き角度について所定の姿勢として予め規定された角度範囲を、ユーザUによる認証開始指示の入力を受け付けたときの携帯端末1の姿勢が含まれるように変更することにより、当該ユーザUの個性的なまたは多様な操作状況に適した生体認証処理を行うことができる。
 〔実施形態4〕
 携帯端末1の向き(例えば、縦向きか横向きかなど)に応じて、プレビュー画像の表示を行う条件を切り替える構成であってもよい。このような構成を備える携帯端末1が行う生体認証処理の流れについて、図10を用いて説明する。図10は、携帯端末1がロック画面を表示してから、ユーザの認証を行い、ロックを解除しホーム画面を表示するまでの処理の流れの他の一例を示すフローチャートである。なお、図10のS410(撮像ステップ)~S415は、図7のS106~S121と同様であるため、ここでは説明を省略する。
 表示部371の表示画面が消灯している状態のときに、ユーザUによって入力キー部33が押下されると、ロック制御部21が表示画面を点灯させて、ロック画面を表示する(S401:認証前表示ステップ)。
 次に、ロック制御部21は、設定情報保存領域43を参照して、ロック解除を行うための認証方法に関する情報を取得する(S402)。ユーザUによって、眼画像による生体認証を用いる設定がなされていなかった場合(S402にてNO)、ロック制御部21は、例えば、パスワードまたはPIN番号の照合により認証を行うために、ユーザUに対してパスワードまたはPIN番号の入力を促す画面を表示部371に表示させる。一方、眼画像による生体認証を用いる設定がなされていた場合(S402にてYES)、ロック制御部21は、生体認証部22に対して生体認証処理の開始を指示する。
 生体認証処理を開始する際に、向き判定部27は、プレビュー画像を表示する基準となる携帯端末1の向き(縦向きか、横向きか)を、傾き角度および回転角度に基づいて判定し、判定結果を生体認証部22に送信する。ここで、携帯端末1の向きはユーザUによって適宜変更され得るものであるため、生体認証部22は、受信した携帯端末の向きに関する情報を例えば一時メモリ38に随時記憶・更新することが望ましい。なお、生体認証部22が携帯端末1の向きに関する情報を設定情報保存領域43に保持する構成であってもよい。
 生体認証部22は、傾き取得部26に対して、携帯端末1の姿勢についての情報である傾き角度の取得を指示する。また、生体認証部22は、回転角度取得部28に対して、携帯端末1の姿勢についての別の情報である回転角度の取得を指示する。該指示に応じて、傾き取得部26および/または回転角度取得部28は、方向センサ32に対してサンプリングの開始要求を行う(S404)。傾き取得部26は、方向センサ32から出力される値に基づいて、一定時間ごとに傾き角度(傾きデータ)を取得し(S405:検知ステップ)、生体認証部22に送信する。一方、回転角度取得部28は、方向センサ32から出力される値に基づいて、一定時間ごとに回転角度(回転データ)を取得し(S405)、生体認証部22に送信する。
 一時メモリ38に記憶されている携帯端末1の向きが縦向きである場合(S406にてYES)、生体認証部22は、携帯端末1の傾き角度が垂直に近い予め規定された角度範囲内か否かを判定する(S407)。そして、携帯端末1の傾き角度が垂直に近い予め規定された角度範囲内であれば(S407にてYES)、S410に進み、携帯端末1の傾き角度が垂直に近い予め規定された角度範囲から外れていれば(S407にてNO)、S408に進む。
 S408では、生体認証部22は、携帯端末1の傾き角度が水平に近い予め規定された角度範囲内か否かを判定する。そして、携帯端末1の傾き角度が水平に近い予め規定された角度範囲内であれば(S408にてYES)、S410に進む。一方、携帯端末1の傾き角度が水平に近い予め規定された角度範囲から外れていれば(S408にてNO)、S405に戻る。これは図3の(b)の場合に、認証を開始させるための処理である。
 一方、一時メモリ38に記憶されている携帯端末1の向きが縦向きではない場合(すなわち、横向きである場合:S406にてNO)、生体認証部22は、携帯端末1の回転角度が垂直に近い予め規定された角度範囲内か否かを判定する(S409)。そして、携帯端末1の回転角度が垂直に近い予め規定された角度範囲内であれば(S409にてYES)、S410に進み、携帯端末1の回転角度が垂直に近い予め規定された角度範囲から外れていれば(S409にてNO)、S405に戻る。ここで、予め規定された回転角度の範囲としては、これに限定されるものではないが、例えば、75°~90°などの角度の範囲であることが望ましい。
 このように構成することにより、例えば、図3および図4に示すように、ユーザUが、寝ころんだままの姿勢で携帯端末1の使用を開始する場合においても、携帯端末1は、ロック画面表示を阻害しない適切なタイミングでプレビュー画像(例えば、眼画像など)の表示を行うことができる。
 〔変形例〕
 例えば、携帯端末1が所定の姿勢にならなくても、所定の姿勢とは異なる姿勢から、所定の姿勢へと携帯端末1の姿勢が所定以上に変化した場合、その変化の量が所定の閾値(例えば45°)以上であった場合に、プレビュー画像の表示を開始してもよい。ここで、「変化の量」とは、例えば、傾き角度または回転角度の角度である。
 すなわち、図10のS403において、生体認証部22(認証部、姿勢変化値導出部)は、携帯端末1の向きを記憶するとともに、携帯端末1の姿勢(例えば、傾き角度および回転角度)を記憶している。そして、生体認証部22は、ロック解除開始時の傾き角度や回転の角度が示す姿勢(第1の姿勢)から現在の傾き角度や回転の角度が示す姿勢(第2の姿勢)に変化した場合の姿勢変化の大きさ意を示す姿勢変化値が、所定の閾値として規定された角度(例えば45°)以上(所定の閾値以上)であった場合に、生体認証処理を開始したり、プレビュー画像の表示を開始したりする構成であってもよい。なお、姿勢変化値の導出を生体認証部22にて行う構成であってもよいし、生体認証部22とは別に設けられた姿勢変化評価部(図示せず)にて行う構成であってもよい。
 以下では、所定の閾値として規定された角度を45°に設定した場合を例に挙げてについて、図2を参照して説明する。
 ロック解除開始時(すなわち、S404にてサンプリング初期に取得された値に対応)の傾き角度(図2の(a)における傾き)が30°(第1の姿勢)であり、S405にて取得した傾き角度(図2の(b)における傾き)が75°(第2の姿勢)である場合、その角度の変化量は45°(姿勢変化値)である。角度の変化量が所定の閾値として規定された角度である45°以上(姿勢変化値が所定の閾値以上)であるため、携帯端末1はプレビュー画像(例えば、眼画像)の表示を開始する。
 携帯端末1の最終的な傾きの角度が、30°から75°にまで変化した場合、携帯端末1は、図2の(b)に示すように傾きが90°になっていなくても、ユーザUの眼画像を取得することが十分に可能となっている。そこで、上記のように、所定の閾値として規定された角度以上の変化を検出した場合に、プレビュー画像の表示を開始してもよい。これにより、生体認証処理を行うときの携帯端末1の最終的な姿勢および傾きに制約を設けることなく、認証処理を円滑に行うことができる。なお、所定の閾値として規定された角度は、傾き角度および回転角度に対して、それぞれ規定されていてもよい。
 〔ソフトウェアによる実現例〕
 携帯端末1の制御ブロック(特にロック制御部21、生体認証部22、生体情報登録部23、眼画像取得部24、眼画像表示制御部25、傾き取得部26、向き判定部27、および回転角度取得部28)は、集積回路(ICチップ)等に形成された論理回路(ハードウェア)によって実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェアによって実現してもよい。
 後者の場合、携帯端末1は、各機能を実現するソフトウェアであるプログラムの命令を実行するCPU、上記プログラムおよび各種データがコンピュータ(またはCPU)で読み取り可能に記録されたROM(Read Only Memory)または記憶装置(これらを「記録媒体」と称する)、上記プログラムを展開するRAM(Random Access Memory)などを備えている。そして、コンピュータ(またはCPU)が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の一態様の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体(通信ネットワークや放送波等)を介して上記コンピュータに供給されてもよい。なお、本発明の一態様は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
 〔まとめ〕
 本発明の態様1に係る生体認証装置(携帯端末1)は、撮像部(カメラ31)によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、前記撮像部と、前記生体認証装置の姿勢を検知する検知部(方向センサ32)と、前記認証用画像に基づいて前記被写体の認証を行う認証部(生体認証部22)と、を備え、前記認証部は、前記検知部が所定の姿勢を検知したことに応じて、前記認証用画像に基づく前記被写体の認証を開始する。
 認証用画像に基づく被写体の認証は、生体認証装置の姿勢が認証用画像が適切に撮像され得る所定の姿勢となったときに開始することが望ましい。上記の構成によれば、前記認証部は、前記検知部が所定の姿勢を検知したことに応じて、前記認証用画像に基づく前記被写体の認証を開始する。すなわち、生体認証装置は、認証を行うために適当な所定の姿勢になったときに認証を開始し、そのような所定の姿勢になっていないときには認証を開始しない。このように構成することにより、被写体の認証を円滑かつ正確に開始することができる。よって、認証処理の正確性を担保しつつ、利便性を向上させることができる。
 本発明の態様2に係る生体認証装置は、上記態様1において、前記認証部は、前記検知部が前記所定の姿勢が一定期間継続していることを検知したことに応じて、前記認証用画像に基づく前記被写体の認証を開始してもよい。
 このように構成することにより、生体認証装置の姿勢が瞬間的に所定の姿勢となった場合には被写体の認証を開始せず、その姿勢が一定期間継続している場合に被写体の認証を開始する。これにより、意図しないときに被写体の認証を開始してしまうという誤動作を回避することができる。
 本発明の態様3に係る生体認証装置は、上記態様1または2において、前記被写体の認証開始を指示する入力を受け付ける入力受付部(入力キー部33、タッチパネル37)をさらに備え、前記認証部は、前記入力受付部からの入力に応じて、前記認証用画像に基づく前記被写体の認証を開始してもよい。
 上記の構成によれば、前記入力受付部からの入力に応じて、前記認証用画像に基づく前記被写体の認証を開始する。これにより、生体認証装置の姿勢が例えば上記所定の姿勢から外れた姿勢であっても、被写体は認証の開始を指示することができる。
 本発明の態様4に係る生体認証装置は、上記態様3において、前記生体認証装置の前記所定の姿勢を規定する情報を記憶する記憶部4をさらに備え、前記認証部は、前記入力受付部が認証開始を指示する入力を受け付けた時の前記生体認証装置の姿勢と前記所定の姿勢とが異なる場合、前記被写体の認証を開始するとともに、前記記憶部の前記所定の姿勢を規定する情報を前記受け付けたときの姿勢を含むように更新する構成であってもよい。
 上記の構成によれば、前記認証部は、前記入力受付部が認証の開始を指示する入力を受け付けた時の前記生体認証装置の姿勢と前記所定の姿勢とが異なる場合、前記被写体の認証を開始するとともに、前記記憶部の前記所定の姿勢を規定する情報を前記受け付けたときの姿勢を含むように更新する。これにより、生体認証装置の姿勢が所定の姿勢から外れた姿勢であっても、被写体は認証の開始を指示することができる。また、記憶部の前記所定の姿勢を規定する情報を上記のように更新することにより、生体認証装置の姿勢が当初に規定されていた所定の姿勢から外れた姿勢であっても、過去に認証開始の指示を受け付けた姿勢であれば前記所定の姿勢と同様にして認証を開始することができる。
 本発明の態様5に係る生体認証装置は、上記態様1から4のいずれかにおいて、表示部と、前記認証用画像を前記表示部に表示させる表示制御部と、をさらに備え、前記表示制御部は、前記検知部が前記生体認証装置の所定の姿勢を検知した場合に、前記表示部に前記認証用画像を表示させてもよい。
 このように構成すれば、前記検知部が前記所定の姿勢を検知した場合に、前記表示部に前記認証用画像を表示させる。これにより、認証用画像を表示するタイミングを適切に制御することができる。よって、認証用画像を被写体が意図しないときに表示させることなく、表示部に表示されている画像(例えばロック画像など)の利便性を損なわないようにすることができる。
 本発明の態様6に係る生体認証装置(携帯端末1)は、撮像部(カメラ31)によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、前記撮像部と、表示部371と、前記生体認証装置の姿勢を検知する検知部(方向センサ32)と、前記認証用画像を前記表示部に表示させる表示制御部(眼画像表示制御部25)と、前記認証用画像に基づいて前記被写体の認証を行う認証部(生体認証部22)と、を備え、前記表示制御部は、前記検知部が所定の姿勢を検知した場合に、前記認証用画像を前記表示部に表示させる。
 上記の構成によれば、表示制御部は、前記検知部が所定の姿勢を検知した場合に、前記認証用画像を前記表示部に表示させる。これにより、生体認証装置の姿勢が所定の姿勢となるまでは認証用画像を表示しないように制御することができる。よって、被写体は、認証用画像の表示に邪魔されることなく、表示部に表示されている画像を利用することができる。
 本発明の態様7に係る生体認証装置(携帯端末1)は、撮像部(カメラ31)によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、前記撮像部と、前記生体認証装置の姿勢を検知する検知部(方向センサ32)と、前記認証用画像に基づいて前記被写体の認証を行う認証部(生体認証部22)と、前記生体認証装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部(生体認証部22)と、を備え、前記認証部は、前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像に基づく前記被写体の認証を開始する。
 認証用画像に基づく認証を行う場合、生体認証装置の姿勢は、認証開始前の第1の姿勢から認証用画像が適切に撮像され得る第2の姿勢に変化する。この生体認証装置の姿勢変化の大きさが所定の閾値以上であった場合、生体認証装置は被写体の認証を行うことが十分に可能となっている場合がある。そこで、上記の構成によれば、前記生体認証装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさが所定の閾値以上であることに応じて、前記認証用画像に基づく前記被写体の認証を開始する。すなわち、生体認証装置は、第1の姿勢から第2の姿勢になるまでの姿勢変化の大きさが所定の閾値以上であったときに認証を開始し、姿勢変化の大きさが所定の閾値未満であったときには認証を開始しない。このように構成することにより、特別な動作や操作を被写体に要求することなく、該被写体の認証を円滑かつ正確に行うことができる。また、このような構成を備える生体認証装置は、認証するときの被写体の姿勢によらず、認証を開始することができる。
 本発明の態様8に係る生体認証装置は、上記態様7において、表示部371と、前記認証用画像を前記表示部に表示させる表示制御部(眼画像表示制御部25)と、をさらに備え、前記表示制御部は、前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像を前記表示部に表示させてもよい。
 上記の構成によれば、表示制御部は、前記生体認証装置の姿勢変化が所定の閾値以上であることに応じて、前記認証用画像を前記表示部に表示させる。このように構成すれば、生体認証装置は、認証用画像を表示するタイミングを適切に制御することができる。よって、被写体は、認証用画像の表示に邪魔されることなく、表示部に表示されている画像(例えばロック画像など)を利用することができる。
 本発明の態様9に係る生体認証装置(携帯端末1)は、撮像部(カメラ31)によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、前記撮像部と、表示部371と、前記生体認証装置の姿勢を検知する検知部(方向センサ32)と、前記認証用画像を前記表示部に表示させる表示制御部(眼画像表示制御部25)と、前記認証用画像に基づいて前記被写体の認証を行う認証部(生体認証部22)と、前記生体認証装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部(生体認証部22)と、を備え、前記表示制御部は、前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像を前記表示部に表示させる。
 上記の構成によれば、表示制御部は、姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像を前記表示部に表示させる。すなわち、生体認証装置は、第1の姿勢から第2の姿勢になるまでの姿勢変化の大きさが所定の閾値以上であったときに認証用画像を表示し、姿勢変化の大きさが所定の閾値未満であったときには認証用画像を表示しないように制御することができる。よって、被写体は、認証用画像の表示に邪魔されることなく、表示部に表示されている画像を利用することができる。
 本発明の態様10に係る生体認証装置は、上記態様1から9のいずれかにおいて、前記認証部は、前記被写体の特定の部位を撮像した画像に基づいて前記被写体の認証を行う構成であってもよい。
 これにより、被写体が任意の姿勢であっても、該被写体を撮像し認証を適切に行うことができる。
 本発明の態様11に係る生体認証装置は、上記態様1から10のいずれかにおいて、前記認証部は、前記被写体の顔、眼、または皮膚を撮像した画像に基づいて前記被写体の認証を行ってもよい。
 本発明の態様12に係る携帯端末装置(携帯端末1)は、前記態様1から11のいずれかの生体認証装置を備えている。
 本発明の各態様に係る生体認証装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記生体認証装置が備える各部(ソフトウェア要素)として動作させることにより上記生体認証装置をコンピュータにて実現させる生体認証装置の制御プログラム、およびそれを記録したコンピュータ読み取り可能な記録媒体も、本発明の一態様の範疇に入る。
 本発明の一態様は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の一態様の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。
 1 携帯端末(生体認証装置、携帯端末装置、装置)、   4 記憶部、   22 生体認証部(認証部、姿勢変化値導出部)、   25 眼画像表示制御部(表示制御部)、   31 カメラ(撮像部)、   32 方向センサ(検知部)、   33 入力キー部(入力受付部)、   37 タッチパネル(入力受付部)、   371 表示部、   S101、S201、S301、S401 認証前表示ステップ   S106、S204、S308、S410 撮像ステップ、   S104、S206a、S304、S405 検知ステップ、   S108、S205、S310,S412 認証ステップ、   S107、S208、S309、S411 表示ステップ

Claims (16)

  1.  撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、
     前記撮像部と、
     前記生体認証装置の姿勢を検知する検知部と、
     前記認証用画像に基づいて前記被写体の認証を行う認証部と、を備え、
     前記認証部は、前記検知部が所定の姿勢を検知したことに応じて、前記認証用画像に基づく前記被写体の認証を開始する
    ことを特徴とする生体認証装置。
  2.  前記認証部は、前記検知部が前記所定の姿勢が一定期間継続していることを検知したことに応じて、前記認証用画像に基づく前記被写体の認証を開始する
    ことを特徴とする請求項1に記載の生体認証装置。
  3.  前記被写体の認証開始を指示する入力を受け付ける入力受付部をさらに備え、
     前記認証部は、前記入力受付部からの入力に応じて、前記認証用画像に基づく前記被写体の認証を開始する
    ことを特徴とする請求項1または2に記載の生体認証装置。
  4.  前記生体認証装置の前記所定の姿勢を規定する情報を記憶する記憶部をさらに備え、
     前記認証部は、前記入力受付部が認証開始を指示する入力を受け付けた時の前記生体認証装置の姿勢と前記所定の姿勢とが異なる場合、前記被写体の認証を開始するとともに、前記記憶部の前記所定の姿勢を規定する情報を前記受け付けたときの姿勢を含むように更新する
    ことを特徴とする請求項3に記載の生体認証装置。
  5.  表示部と、
     前記認証用画像を前記表示部に表示させる表示制御部と、をさらに備え、
     前記表示制御部は、前記検知部が前記所定の姿勢を検知した場合に、前記表示部に前記認証用画像を表示させる
    ことを特徴とする請求項1から4のいずれか1項に記載の生体認証装置。
  6.  撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、
     前記撮像部と、
     表示部と、
     前記生体認証装置の姿勢を検知する検知部と、
     前記認証用画像を前記表示部に表示させる表示制御部と、
     前記認証用画像に基づいて前記被写体の認証を行う認証部と、を備え、
     前記表示制御部は、前記検知部が所定の姿勢を検知した場合に、前記認証用画像を前記表示部に表示させる
    ことを特徴とする生体認証装置。
  7.  撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、
     前記撮像部と、
     前記生体認証装置の姿勢を検知する検知部と、
     前記認証用画像に基づいて前記被写体の認証を行う認証部と、
     前記生体認証装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部と、を備え、
     前記認証部は、前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像に基づく前記被写体の認証を開始する
    ことを特徴とする生体認証装置。
  8.  表示部と、
     前記認証用画像を前記表示部に表示させる表示制御部と、をさらに備え、
     前記表示制御部は、前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像を前記表示部に表示させる
    ことを特徴とする請求項7に記載の生体認証装置。
  9.  撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う生体認証装置であって、
     前記撮像部と、
     表示部と、
     前記生体認証装置の姿勢を検知する検知部と、
     前記認証用画像を前記表示部に表示させる表示制御部と、
     前記認証用画像に基づいて前記被写体の認証を行う認証部と、
     前記生体認証装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部と、を備え、
     前記表示制御部は、前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像を前記表示部に表示させる
    ことを特徴とする生体認証装置。
  10.  前記認証部は、前記被写体の特定の部位を撮像した画像に基づいて前記被写体の認証を行うことを特徴とする請求項1から9のいずれか1項に記載の生体認証装置。
  11.  前記認証部は、前記被写体の顔、眼、または皮膚を撮像した画像に基づいて前記被写体の認証を行うことを特徴とする請求項1から10のいずれか1項に記載の生体認証装置。
  12.  請求項1から11のいずれか1項に記載の生体認証装置を備えることを特徴とする携帯端末装置。
  13.  撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う装置としてコンピュータを機能させるための制御プログラムであって、
     前記装置の姿勢が所定の姿勢になった場合に、前記認証用画像に基づく前記被写体の認証を開始する認証部としてコンピュータを機能させる
    ことを特徴とする制御プログラム。
  14.  撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う装置としてコンピュータを機能させるための制御プログラムであって、
     前記認証用画像に基づいて前記被写体の認証を行う認証部、および、
     前記装置の姿勢が所定の姿勢になった場合に、前記認証用画像を表示させる表示制御部としてコンピュータを機能させる
    ことを特徴とする制御プログラム。
  15.  撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う装置としてコンピュータを機能させるための制御プログラムであって、
     前記装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部、および
     前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像に基づく前記被写体の認証を開始する認証部としてコンピュータを機能させる
    ことを特徴とする制御プログラム。
  16.  撮像部によって被写体を撮像した認証用画像を用いて該被写体の認証を行う装置としてコンピュータを機能させるための制御プログラムであって、
     前記認証用画像に基づいて前記被写体の認証を行う認証部、
     前記装置の姿勢が第1の姿勢から第2の姿勢に変化した場合の姿勢変化の大きさを示す姿勢変化値を導出する姿勢変化値導出部、および、
     前記姿勢変化値が所定の閾値以上であることに応じて、前記認証用画像を表示させる表示制御部としてコンピュータを機能させる
    ことを特徴とする制御プログラム。
PCT/JP2017/006173 2016-05-31 2017-02-20 生体認証装置、携帯端末装置、制御プログラム WO2017208519A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018520360A JP6667628B2 (ja) 2016-05-31 2017-02-20 生体認証装置、携帯端末装置、制御プログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016108835 2016-05-31
JP2016-108835 2016-05-31

Publications (1)

Publication Number Publication Date
WO2017208519A1 true WO2017208519A1 (ja) 2017-12-07

Family

ID=60479166

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/006173 WO2017208519A1 (ja) 2016-05-31 2017-02-20 生体認証装置、携帯端末装置、制御プログラム

Country Status (2)

Country Link
JP (1) JP6667628B2 (ja)
WO (1) WO2017208519A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2018139116A1 (ja) * 2017-01-27 2019-11-07 シャープ株式会社 端末装置、および制御プログラム
EP3696695A4 (en) * 2018-02-23 2020-10-14 Samsung Electronics Co., Ltd. PROCESS FOR PERFORMING A BIOMETRIC AUTHENTICATION BASED ON THE DISPLAY OF AN OBJECT RELATED TO A BIOMETRIC AUTHENTICATION AND ASSOCIATED ELECTRONIC DEVICE
WO2021186606A1 (ja) * 2020-03-18 2021-09-23 日本電気株式会社 プログラム、携帯端末、認証処理装置、画像送信方法、及び認証処理方法
JP2021535503A (ja) * 2018-08-28 2021-12-16 華為技術有限公司Huawei Technologies Co., Ltd. 顔認識方法および装置
WO2022191074A1 (ja) * 2021-03-09 2022-09-15 日本電気株式会社 画像処理装置、画像処理方法、記録媒体

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006079427A (ja) * 2004-09-10 2006-03-23 Toshiba Tec Corp 携帯情報機器
US20070009139A1 (en) * 2005-07-11 2007-01-11 Agere Systems Inc. Facial recognition device for a handheld electronic device and a method of using the same
JP2009135705A (ja) * 2007-11-29 2009-06-18 Kyocera Corp 携帯端末装置
US20140085460A1 (en) * 2012-09-27 2014-03-27 Lg Electronics Inc. Display apparatus and method for operating the same
US20140123275A1 (en) * 2012-01-09 2014-05-01 Sensible Vision, Inc. System and method for disabling secure access to an electronic device using detection of a predetermined device orientation

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006079427A (ja) * 2004-09-10 2006-03-23 Toshiba Tec Corp 携帯情報機器
US20070009139A1 (en) * 2005-07-11 2007-01-11 Agere Systems Inc. Facial recognition device for a handheld electronic device and a method of using the same
JP2009135705A (ja) * 2007-11-29 2009-06-18 Kyocera Corp 携帯端末装置
US20140123275A1 (en) * 2012-01-09 2014-05-01 Sensible Vision, Inc. System and method for disabling secure access to an electronic device using detection of a predetermined device orientation
US20140085460A1 (en) * 2012-09-27 2014-03-27 Lg Electronics Inc. Display apparatus and method for operating the same

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2018139116A1 (ja) * 2017-01-27 2019-11-07 シャープ株式会社 端末装置、および制御プログラム
EP3696695A4 (en) * 2018-02-23 2020-10-14 Samsung Electronics Co., Ltd. PROCESS FOR PERFORMING A BIOMETRIC AUTHENTICATION BASED ON THE DISPLAY OF AN OBJECT RELATED TO A BIOMETRIC AUTHENTICATION AND ASSOCIATED ELECTRONIC DEVICE
US11907345B2 (en) 2018-02-23 2024-02-20 Samsung Electronics Co., Ltd. Method for performing biometric authentication according to display of object related to biometric authentication and electronic device therefor
JP2021535503A (ja) * 2018-08-28 2021-12-16 華為技術有限公司Huawei Technologies Co., Ltd. 顔認識方法および装置
JP7203955B2 (ja) 2018-08-28 2023-01-13 華為技術有限公司 顔認識方法および装置
WO2021186606A1 (ja) * 2020-03-18 2021-09-23 日本電気株式会社 プログラム、携帯端末、認証処理装置、画像送信方法、及び認証処理方法
JPWO2021186606A1 (ja) * 2020-03-18 2021-09-23
JP7435741B2 (ja) 2020-03-18 2024-02-21 日本電気株式会社 プログラム、携帯端末、認証処理装置、画像送信方法、及び認証処理方法
WO2022191074A1 (ja) * 2021-03-09 2022-09-15 日本電気株式会社 画像処理装置、画像処理方法、記録媒体

Also Published As

Publication number Publication date
JP6667628B2 (ja) 2020-03-18
JPWO2017208519A1 (ja) 2019-02-28

Similar Documents

Publication Publication Date Title
US11461446B2 (en) Information processing device, application software start-up system, and application software start-up method
WO2017208519A1 (ja) 生体認証装置、携帯端末装置、制御プログラム
JP6613740B2 (ja) 表示制御装置、表示制御方法および表示制御プログラム
KR101688168B1 (ko) 이동 단말기 및 그 제어방법
US20130007876A1 (en) System and method of providing biometric quick launch
WO2015172515A1 (zh) 用于移动终端的虹膜识别方法和装置
CA2769898C (en) Login method based on direction of gaze
JP2011022687A (ja) 認証機能を有する電子機器および認証方法
EP3559847B1 (en) Electronic device for biometric authentication of a user
US20150161837A1 (en) Methods and systems for providing control of a device using a fingerprint sensor
US20220417359A1 (en) Remote control device, information processing method and recording program
CN110096865B (zh) 下发验证方式的方法、装置、设备及存储介质
JP7023139B2 (ja) 解錠システム、解錠装置、解錠方法、端末装置及びプログラム
JP6267025B2 (ja) 通信端末及び通信端末の認証方法
EP2634719B1 (en) System and method of providing biometric quick launch
JP4957016B2 (ja) 情報処理装置及びキーロック解除方法並びにプログラム
CN111027374A (zh) 一种图像识别方法及电子设备
CN111079112B (zh) 应用控制方法、应用控制装置及存储介质
KR100693592B1 (ko) 지문인식을 이용한 키 설정/실행 방법 및 그를 이용한무선통신 단말기
JP2022117757A (ja) 端末装置、情報処理方法、及びプログラム
CN113556734A (zh) 一种认证方法及装置
JP5783441B2 (ja) 入力装置、入力方法
JP5071006B2 (ja) 電子機器、該電子機器における操作制御方法及び制御プログラム
JP5017905B2 (ja) 使用者認証方法、使用者認証装置、及びコンピュータプログラム
CN110192384A (zh) 终端装置及控制程序

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2018520360

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17806081

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17806081

Country of ref document: EP

Kind code of ref document: A1