WO2022145437A1 - 個人認証システム、個人認証装置、表示装置、及び個人認証方法 - Google Patents

個人認証システム、個人認証装置、表示装置、及び個人認証方法 Download PDF

Info

Publication number
WO2022145437A1
WO2022145437A1 PCT/JP2021/048693 JP2021048693W WO2022145437A1 WO 2022145437 A1 WO2022145437 A1 WO 2022145437A1 JP 2021048693 W JP2021048693 W JP 2021048693W WO 2022145437 A1 WO2022145437 A1 WO 2022145437A1
Authority
WO
WIPO (PCT)
Prior art keywords
detection
area
divided
personal authentication
password
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2021/048693
Other languages
English (en)
French (fr)
Inventor
剛 邵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Display Inc
Original Assignee
Japan Display Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Japan Display Inc filed Critical Japan Display Inc
Priority to JP2022573092A priority Critical patent/JP7512441B2/ja
Priority to DE112021005679.4T priority patent/DE112021005679T5/de
Publication of WO2022145437A1 publication Critical patent/WO2022145437A1/ja
Priority to US18/212,602 priority patent/US12299102B2/en
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • G06V40/1306Sensors therefor non-optical, e.g. ultrasonic or capacitive sensing
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1335Combining adjacent partial images (e.g. slices) to create a composite input or reference pattern; Tracking a sweeping finger movement

Definitions

  • the present invention relates to a personal authentication system, a personal authentication device, a display device, and a personal authentication method.
  • An object of the present invention is to provide a personal authentication system, a personal authentication device, a display device, and a personal authentication method that can achieve both enhancement of security and improvement of authentication accuracy without impairing convenience.
  • the personal authentication system is a detection device having a first period for detecting an object to be detected that is in contact with or near the sensor unit, and a second period for detecting unevenness on the surface of the object to be detected.
  • a control device that performs processing according to the output of the detection device, the detection device is provided with a plurality of first areas in the detection area of the sensor unit as a password input key, and the password.
  • a relatively different divided area is assigned in the second area whose center coordinate is the touch detection coordinate in the first area detected in the first period, and each key input of the password is performed.
  • the divided image acquired in the divided area in the second period is output to the control device, and the control device synthesizes a plurality of divided images acquired for each key input of the password to generate a fingerprint image.
  • the personal authentication device has a detection unit having a first period for detecting an object to be detected that is in contact with or close to the sensor unit, and a second period for detecting unevenness on the surface of the object to be detected.
  • a processing unit that performs processing according to the output of the detection unit is provided, and the detection unit is provided with a plurality of first areas in the detection area of the sensor unit as a password input key, and the password.
  • a relatively different divided area is assigned in the second area whose center coordinate is the touch detection coordinate in the first area detected in the first period, and each key input of the password is performed.
  • the divided image acquired in the divided area in the second period is output to the processing unit, and the processing unit synthesizes a plurality of divided images acquired for each key input of the password to generate a fingerprint image.
  • the display device includes the personal authentication device and a display panel provided with a display area for displaying an image overlapping the detection area of the personal authentication device.
  • the personal authentication method includes a first period for detecting an object to be detected that is in contact with or near the sensor unit, and a second period for detecting unevenness on the surface of the object to be detected.
  • a plurality of first areas are provided in the detection area of the sensor unit as password input keys, and each time the password key is input, the touch detection coordinates in the first area detected in the first period are centered.
  • a relatively different divided area is assigned in the second area as coordinates, and a plurality of divided images acquired in the divided area in the second period are combined for each key input of the password to generate a fingerprint image.
  • FIG. 1 is a plan view of a display device having a detection device constituting the personal authentication system according to the embodiment.
  • FIG. 2 is a cross-sectional view taken along the line II-II'of FIG.
  • FIG. 3A is a plan view showing a personal authentication system according to an embodiment.
  • FIG. 3B is a plan view showing the personal authentication device according to the embodiment.
  • FIG. 4A is a block diagram showing a configuration example of the personal authentication system according to the first embodiment.
  • FIG. 4B is a block diagram showing a configuration example of the personal authentication device according to the first embodiment.
  • FIG. 5 is an explanatory diagram for explaining the basic principle of touch detection of the mutual capacitance method.
  • FIG. 6 is a plan view of the sensor substrate.
  • FIG. 7 is an enlarged plan view showing a part of the first electrode and the second electrode.
  • FIG. 8 is a cross-sectional view taken along the line VII-VII'of FIG.
  • FIG. 9 is a timing chart showing an example of the switching operation between the first period and the second period.
  • FIG. 10 is a diagram showing an example of the first detection mode.
  • FIG. 11 is a diagram showing an example of the second detection mode.
  • FIG. 12 is a diagram showing an example of the third detection mode.
  • FIG. 13 is a diagram showing an example of the fourth detection mode.
  • FIG. 14 is a diagram showing an example of a detection region in the personal authentication method according to the first embodiment.
  • FIG. 15 is a diagram showing the positional relationship between the first region and the second region.
  • FIG. 15 is a diagram showing the positional relationship between the first region and the second region.
  • FIG. 16 is a diagram showing a fingerprint image after image composition in the first embodiment.
  • FIG. 17A is a diagram illustrating an area for acquiring a divided image in the personal authentication method according to the first embodiment.
  • FIG. 17B is a second diagram illustrating an area for acquiring a divided image in the personal authentication method according to the first embodiment.
  • FIG. 17C is a third diagram illustrating an area for acquiring a divided image in the personal authentication method according to the first embodiment.
  • FIG. 17D is a fourth diagram illustrating an area for acquiring a divided image in the personal authentication method according to the first embodiment.
  • FIG. 18 is a flowchart showing an example of personal authentication data acquisition processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 18 is a flowchart showing an example of personal authentication data acquisition processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 19 is a flowchart showing an example of personal authentication processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 20 is a sub-flow chart showing an example of password authentication processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 21 is a sub-flow chart showing an example of fingerprint authentication processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 22 is a sequence diagram showing a specific example of processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 23A is a diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the first embodiment.
  • FIG. 23B is a second diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the first embodiment.
  • FIG. 23C is a third diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the first embodiment.
  • FIG. 23D is a fourth diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the first embodiment.
  • FIG. 24 is a diagram showing a fingerprint image after image composition in the second embodiment.
  • FIG. 25A is a diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 25B is a second diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 25C is a third diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 25A is a diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 25B is a second diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 25C is
  • FIG. 25D is a fourth diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 26A is a diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the second embodiment.
  • FIG. 26B is a second diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the second embodiment.
  • FIG. 26C is a third diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the second embodiment.
  • FIG. 26D is a fourth diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the second embodiment.
  • FIG. 1 is a plan view of a display device having a detection device constituting the personal authentication system according to the embodiment.
  • FIG. 2 is a cross-sectional view taken along the line II-II'of FIG.
  • the display device 100 of the present embodiment has a display area AA, a frame area GA, and a detection area FA.
  • the display area AA is an area for displaying the image of the display panel 30.
  • the frame area GA is an area outside the display area AA.
  • the detection area FA is a region for detecting unevenness on the surface of a finger or the like that is in contact with or in close proximity to the detection area FA.
  • the detection area FA is provided so as to overlap the entire surface of the display area AA.
  • the display device 100 of the present embodiment includes a cover member 101, a detection device 2, and a display panel 30.
  • the cover member 101 is a plate-shaped member having a first surface 101a and a second surface 101b opposite to the first surface 101a.
  • the first surface 101a of the cover member 101 is the detection surface of the detection device 2, and when the detected body comes into contact with the detected surface, the plane coordinate position on the detected surface of the detected body and the detected object are detected. Unevenness on the surface of the body is detected.
  • the object to be detected is the finger of the user, and the unevenness on the surface of the object to be detected includes a fingerprint.
  • the first surface 101a of the cover member 101 is a display surface for displaying an image of the display panel 30, and is also an observation surface for the user to observe the image.
  • the display panel 30 and the sensor unit 10 of the detection device 2 are provided on the second surface 101b side of the cover member 101.
  • the cover member 101 is a member for protecting the sensor unit 10 and the display panel 30, and is provided so as to cover the sensor unit 10 and the display panel 30.
  • the cover member 101 is, for example, a glass substrate or a resin substrate.
  • the cover member 101, the sensor unit 10, and the display panel 30 are not limited to having a rectangular shape in a plan view, but have a circular shape, an oval shape, or an irregular shape in which a part of these external shapes is omitted. It may be a configuration. Further, for example, when the cover member 101 has a circular shape and the sensor unit 10 and the display panel 30 have a regular polygonal shape or the like, the external shapes of the cover member 101 and the sensor unit 10 and the display panel 30 are different. May be.
  • As the cover member 101 not only a flat plate shape but also a curved surface display having a curved surface such that the display area AA is formed of a curved surface or the frame area GA is curved toward the display panel 30 can be adopted.
  • the decorative layer 110 is provided on the second surface 101b of the cover member 101.
  • the decorative layer 110 is a colored layer having a smaller light transmittance than the cover member 101.
  • the decorative layer 110 can prevent the observer from seeing the wiring, the circuit, or the like superimposed on the frame region GA.
  • the decorative layer 110 is provided on the second surface 101b, but may be provided on the first surface 101a.
  • the decorative layer 110 is not limited to a single layer, and may have a configuration in which a plurality of layers are stacked.
  • the detection device 2 includes a sensor unit 10 that detects surface irregularities such as a finger Fin that is in contact with or is close to the first surface 101a of the cover member 101.
  • the sensor unit 10 of the detection device 2 is provided on the display panel 30. That is, the sensor unit 10 is provided between the cover member 101 and the display panel 30, and overlaps with the display panel 30 when viewed from a direction perpendicular to the first surface 101a.
  • a flexible printed circuit board 76 is connected to the sensor unit 10, and a detection signal from the sensor unit 10 can be output to the outside.
  • the adhesive layer 71 is, for example, an optical transparent resin (OCR: Optical Clear Resin or LOCA: Liquid Optically Clear Adhesive) which is a liquid UV curable resin.
  • the adhesive layer 72 is, for example, an optical adhesive film (OCA: Optical Clear Adhesive).
  • the display panel 30 has a first substrate 31, a second substrate 32, a polarizing plate 34 provided on the lower side of the first substrate 31, and a polarizing plate 35 provided on the upper side of the second substrate 32.
  • a flexible printed circuit board 75 is connected to the first board 31.
  • a liquid crystal display element is provided as a display functional layer between the first substrate 31 and the second substrate 32. That is, the display panel 30 is a liquid crystal panel.
  • the display panel 30 is not limited to this, and may be, for example, an organic EL display panel (OLED: Organic Light Emitting Diode) or an inorganic EL display (micro LED, mini LED).
  • the display panel may be a liquid crystal display panel (LCD: Liquid Crystal Display) using a liquid crystal element as a display element, or an electrophoresis type display panel (EPD: Electrophoretic Display) using an electrophoresis element as a display element. good.
  • LCD Liquid Crystal Display
  • EPD Electrophoretic Display
  • the sensor unit 10 is arranged at a position closer to the cover member 101 than the display panel 30 in the direction perpendicular to the second surface 101b of the cover member 101. Therefore, for example, the distance between the detection electrode and the first surface 101a, which is the detection surface, can be reduced as compared with the case where the detection electrode for fingerprint detection is provided integrally with the display panel 30. Therefore, according to the display device 100 including the detection device 2 of the present embodiment, the detection performance can be improved.
  • the display device 100 has a so-called out-cell configuration in which the sensor unit 10 and the display panel 30 are independent of each other, but the sensor unit 10 and a part of the display panel 30 or electrodes are also used. It may be an in-cell system or an on-cell system.
  • FIG. 3A is a plan view showing a personal authentication system according to an embodiment.
  • the personal authentication system 1 includes a detection device 2 and a control device 9.
  • the detection device 2 includes a substrate 3 and a wiring board 4.
  • the control device 9 has a control board 5.
  • the control board 5 is electrically connected to the board 3 via the wiring board 4.
  • the substrate 3 has the above-mentioned detection region AA and peripheral region GA.
  • the sensor unit 10 is provided in the detection area AA.
  • the first electrode selection circuit 15 and the detection electrode selection circuit 16 are provided in the peripheral region GA.
  • the wiring board 4 is provided with a detection circuit 6.
  • the detection circuit 6 is provided in, for example, a detection IC.
  • a control circuit 7 is provided on the control board 5.
  • the control circuit 7 is provided in, for example, a host IC composed of an FPGA (Field Programmable Gate Array).
  • the control circuit 7 supplies a control signal to the sensor unit 10, the first electrode selection circuit 15, the detection electrode selection circuit 16, and the detection circuit 6 to control the detection operation of the sensor unit 10. It is also possible to adopt a configuration in which one or both of the first electrode selection circuit 15 and the detection electrode selection circuit 16 is provided in the detection circuit 6 or the control circuit 7.
  • the first electrode selection circuit 15 is provided in a region extending along the second direction Dy in the peripheral region GA.
  • the detection electrode selection circuit 16 is provided in a region extending along the first direction Dx in the peripheral region GA, and is provided between the sensor unit 10 and the detection circuit 6.
  • the first direction Dx is one direction in a plane parallel to the substrate 3.
  • the second direction Dy is one direction in a plane parallel to the substrate 3 and is a direction orthogonal to the first direction Dx.
  • the second direction Dy may intersect with the first direction Dx without being orthogonal to each other.
  • the third direction Dz is a direction orthogonal to the first direction Dx and the second direction Dy, and is a normal direction of the substrate 3.
  • FIG. 3B is a plan view showing the personal authentication device according to the embodiment. As shown in FIG. 3B, the personal authentication device 1a corresponds to the detection device 2 of the personal authentication system 1 shown in FIG. 3A.
  • the personal authentication circuit 8 is provided on the wiring board 4.
  • the personal authentication circuit 8 is provided in, for example, a detection IC.
  • control circuit 7a is provided on the control board 5 of the control device 9a.
  • the detection circuit 6 of the personal authentication system 1 shown in FIG. 3A and the personal authentication circuit 8 of the personal authentication device 1a shown in FIG. 3B have different assigned functions.
  • FIG. 4A is a block diagram showing a configuration example of the personal authentication system according to the first embodiment.
  • the personal authentication system 1 includes a detection device 2 and a control device 9 as a host device of the detection device 2.
  • the detection device 2 includes a sensor unit 10, a detection control unit 11, a first electrode selection circuit 15, a detection electrode selection circuit 16, and a detection circuit 6 including a detection unit 40.
  • the control device 9 includes a control circuit 7 including a processing unit 50.
  • FIG. 4B is a block diagram showing a configuration example of the personal authentication device according to the first embodiment.
  • the personal authentication device 1a includes a sensor unit 10, a detection control unit 11, a first electrode selection circuit 15, a detection electrode selection circuit 16, a detection unit 40, and a processing unit 50.
  • the authentication circuit 8 and the like are included. That is, in the personal authentication device 1a shown in FIGS. 3B and 4B, the personal authentication circuit 8 has the function of the processing unit 50 of the control circuit 7 of the personal authentication system 1 shown in FIGS. 3A and 4A.
  • Each component in the following description is applicable to any of the personal authentication system 1 shown in FIGS. 3A and 4A, and the personal authentication device 1a shown in FIGS. 3B and 4B.
  • the sensor unit 10 performs detection according to the second drive signal Vtx2 supplied from the first electrode selection circuit 15. That is, a plurality of first electrodes Tx (see FIG. 6) are individually or simultaneously selected by the operation of the first electrode selection circuit 15. Then, the first electrode selection circuit 15 supplies the second drive signal Vtx2 whose phase is determined based on a predetermined code to each of the selected plurality of first electrodes Tx. Based on the detection principle of the mutual capacitance method, the sensor unit 10 converts the change in the unevenness of the surface of the finger Fin or the hand close to or in contact with the change of the electric signal and outputs it to the detection circuit 6.
  • the sensor unit 10 can also detect the position (coordinates) of a finger Fin or the like that is in contact with or is close to the sensor unit 10 according to the first drive signal Vtx1 supplied from the first electrode selection circuit 15.
  • the sensor unit 10 scans the first electrode Tx for each first electrode block containing the plurality of first electrode Tx or at a ratio of one for each of the plurality of first electrodes Tx, and detects the entire detection region FA.
  • the sensor unit 10 outputs to the detection circuit 6 a change in the electric signal due to the presence or absence of a finger Fin in contact with the detection surface, based on the detection principle of the mutual capacitance method.
  • the touch detection of the detection surface by the first drive signal Vtx1 requires only the coordinates of the finger to be detected and specified, so that the detection resolution is lower than the detection by the second drive signal Vtx2.
  • the detection control unit 11 is a circuit that supplies control signals to the first electrode selection circuit 15, the detection electrode selection circuit 16, and the detection unit 40, respectively, and controls their operations.
  • the detection control unit 11 includes a drive unit 11a and a clock signal output unit 11b.
  • the drive unit 11a supplies the power supply voltage VP to the first electrode selection circuit 15.
  • the detection control unit 11 supplies various control signals Vctrl to the first electrode selection circuit 15 based on the clock signal of the clock signal output unit 11b.
  • the first electrode selection circuit 15 is a circuit that simultaneously or individually selects a plurality of first electrode Tx based on various control signals Vctrl.
  • the first electrode selection circuit 15 supplies a first drive signal Vtx1 or a second drive signal Vtx2 to a plurality of selected first electrodes Tx based on various control signals Vctrl and one or a plurality of power supply voltage VPs.
  • the first drive signal Vtx1 and the second drive signal Vtx2 have different waveforms themselves including wavelengths and amplitudes, and also include those having the same waveform but different periods of output to the sensor unit 10.
  • the sensor unit 10 makes the selection state of the first electrode Tx different by the first electrode selection circuit 15, so that the first detection mode M1, the second detection mode M2, the third detection mode M3, and the fourth detection mode M4 ( (See FIGS. 10 to 13) can be realized.
  • the detection electrode selection circuit 16 is a switch circuit that simultaneously selects a plurality of second electrodes Rx (see FIG. 6).
  • the detection electrode selection circuit 16 selects a plurality of second electrodes Rx based on the second electrode selection signal Vhsel supplied from the detection control unit 11, and connects the plurality of second electrodes Rx to the detection circuit 6. ..
  • the detection unit 40 is a finger on the detection surface at a relatively large pitch based on the control signal supplied from the detection control unit 11 and the first detection signal Vdet1 and the second detection signal Vdet2 supplied from the sensor unit 10. It is a circuit that detects the presence or absence of a touch and detects the fingerprint of the finger at a relatively fine pitch. Each component of the detection unit 40 operates synchronously based on the control signal supplied from the detection control unit 11.
  • the detection unit 40 includes a detection signal amplification unit 42, an A / D conversion unit 43, a signal processing unit 44, a coordinate extraction unit 45, a fingerprint detection area setting unit 46, and a divided image generation unit 47 as each component unit. And a detection timing control unit 48. When it is not necessary to distinguish between the first detection signal Vdet1 and the second detection signal Vdet2 in the following description, it is simply referred to as a detection signal Vdet.
  • the detection timing control unit 48 includes a detection signal amplification unit 42, an A / D conversion unit 43, a signal processing unit 44, a coordinate extraction unit 45, and a divided image based on the control signal supplied from the detection control unit 11.
  • the generation unit 47 and the generation unit 47 are controlled to operate in synchronization with each other.
  • the detection signal amplification unit 42 amplifies the detection signal Vdet.
  • the A / D conversion unit 43 converts the analog signal output from the detection signal amplification unit 42 into a digital signal.
  • the signal processing unit 44 performs a predetermined decoding process based on the output signal of the A / D conversion unit 43. Specifically, the signal processing unit 44 performs a process of extracting a signal (absolute value
  • the coordinate extraction unit 45 extracts the coordinates of the object to be detected (hereinafter, also referred to as “touch detection coordinates”) in contact with or close to the sensor unit 10 based on the decoding processing result of the signal processing unit 44, and causes the processing unit 50 to extract the coordinates. Output.
  • the fingerprint detection area setting unit 46 sets an area for detection from the detection start coordinates output from the processing unit 50.
  • the detection start coordinates and the detection area will be described later.
  • the divided image generation unit 47 generates a divided image by extracting the unevenness of the surface of the detected object based on the decoding processing result of the signal processing unit 44. Although the divided image will be described later, the present disclosure is not limited by the method for generating the divided image.
  • the personal authentication system 1 shown in FIG. 4A and the personal authentication device 1a shown in FIG. 4B detect a finger Fin in contact with the detection surface of the sensor unit 10 based on the capacitance type detection principle ( Hereinafter referred to as "touch detection”). Further, the personal authentication system 1 and the personal authentication device 1a detect fingerprints by detecting the unevenness of the surface of the finger Fin in contact with the sensor unit 10 based on the capacitance type detection principle (hereinafter,). Called “fingerprint detection").
  • touch state the state in which the capacitance is changed by the contact of the finger Fin.
  • non-touch state a state in which the capacity is not changed by the finger Fin.
  • FIG. 5 is an explanatory diagram for explaining the basic principle of touch detection of the mutual capacitance method. Note that FIG. 5 also shows a detection circuit.
  • the capacitive element C1 includes a pair of electrodes, a drive electrode E1 and a detection electrode E2 that are arranged so as to face each other with the dielectric D interposed therebetween.
  • an electric field (not shown) formed between the facing surfaces of the drive electrode E1 and the detection electrode E2
  • an electric field extending from the end of the drive electrode E1 toward the upper surface of the detection electrode E2 is generated. ..
  • One end of the capacitive element C1 is connected to an AC signal source (drive signal source), and the other end is connected to the voltage detector DET.
  • the voltage detector DET is, for example, an integrating circuit included in the detection unit 40 shown in FIG.
  • An AC rectangular wave Sg having a predetermined frequency (for example, about several kHz to several hundred kHz) is applied from the AC signal source to the drive electrode E1 (one end of the capacitive element C1).
  • a current corresponding to the capacitance value of the capacitance element C1 flows through the voltage detector DET.
  • the voltage detector DET converts the fluctuation of the current corresponding to the AC square wave Sg into the fluctuation of the voltage.
  • the capacitive element C1 gradually acts as a capacitive element having a smaller capacitive value in response to the approach than the capacitive value in the non-contact state.
  • the amplitude of the voltage signal output from the voltage detector DET becomes smaller as the finger Fin approaches the contact state as compared with the non-contact state.
  • of this voltage difference changes according to the influence of the finger Fin in contact with the detection surface.
  • the detection unit 40 determines whether the finger Fin is in contact with or not in contact with the detection surface by comparing the absolute value
  • the detection unit 40 determines the unevenness of the finger Fin based on the absolute value
  • the fingerprint image is data as surface information formed based on outputs from a plurality of second electrodes Rx, and is a touch that specifies one or several coordinate positions on the detection surface. It is different from the coordinates (point information). More specifically, the fingerprint image is a collection of detection data in a plurality of detection unit regions, and each detection data includes, for example, the coordinates of the detection unit region and the determination result of unevenness at each coordinate position. As for the judgment of the unevenness, it is possible to adopt a binary judgment result such that the detection result is judged to be concave when the detection result is larger than the threshold value and the detection result is judged to be convex when the detection result is larger than the threshold value as described above. can.
  • the actual detection signal may be more finely digitized data based on a plurality of threshold values.
  • the data may be provided with the magnitude of the output signal at each coordinate as RAW data as it is. By accumulating the data for each of these coordinates, surface information with a two-dimensional spread is formed.
  • the present embodiment targets the finger Fin as the detected body and its fingerprint, it goes without saying that the detected body is not limited to the finger and the unevenness of the detected body is not limited to the fingerprint.
  • FIG. 6 is a plan view of the sensor substrate.
  • FIG. 7 is an enlarged plan view showing a part of the first electrode and the second electrode.
  • FIG. 8 is a cross-sectional view taken along the line VII-VII'of FIG.
  • the sensor substrate 21 is a glass substrate having a translucency capable of transmitting visible light.
  • the sensor substrate 21 may be a translucent resin substrate or a resin film made of a resin such as polyimide.
  • the sensor unit 10 is a translucent sensor.
  • the first electrode Tx extends in the first direction Dx, and a plurality of the first electrodes Tx are arranged in the second direction Dy.
  • the second electrode Rx extends in the second direction Dy, and a plurality of the second electrodes Rx are arranged in the first direction Dx.
  • the second electrode Rx extends in a direction intersecting the first electrode Tx in a plan view.
  • Each second electrode Rx is connected to a flexible printed circuit board 76 provided on the short side of the frame region GA of the sensor substrate 21 via a frame wiring (not shown).
  • the first electrode Tx and the second electrode Rx are provided in the detection region FA.
  • the first electrode Tx is made of a translucent conductive material such as ITO (Indium Tin Oxide).
  • the second electrode Rx is made of a metal material such as aluminum or an aluminum alloy.
  • the first electrode Tx may be made of a metal material, and the second electrode Rx may be made of ITO. However, by using the second electrode Rx as a metal material, the resistance related to the detection signal Vdet can be reduced.
  • the first direction Dx is one direction in a plane parallel to the sensor substrate 21, for example, a direction parallel to one side of the detection region FA.
  • the second direction Dy is one direction in a plane parallel to the sensor substrate 21 and is a direction orthogonal to the first direction Dx.
  • the second direction Dy may intersect with the first direction Dx without being orthogonal to each other.
  • plane view refers to a case of being viewed from a direction perpendicular to the sensor substrate 21.
  • Capacitance is formed at the intersection of the second electrode Rx and the first electrode Tx.
  • the first electrode selection circuit 15 selects the first electrode Tx, and at the same time, the first drive signal Vtx1 or the first drive signal Vtx1 or the first is sent to the selected first electrode Tx. 2 Drive signal Vtx2 is supplied.
  • fingerprint detection is performed by outputting a detection signal Vdet corresponding to a capacitance change due to surface irregularities of a finger or the like that is in contact with or adjacent to the second electrode Rx.
  • touch detection is performed by outputting a detection signal Vdet corresponding to a change in capacitance due to contact or a nearby finger or the like from the second electrode Rx.
  • the first electrode selection circuit 15 includes a first selection circuit 151, a second selection circuit 152, a third selection circuit 153, and a first electrode block selection circuit 154.
  • first selection circuit 151, the second selection circuit 152, the third selection circuit 153, and the first electrode block selection circuit 154 are not limited to the configurations provided as individual circuits.
  • the first electrode selection circuit 15 may be provided as one integrated circuit including the functions of the first selection circuit 151, the second selection circuit 152, the third selection circuit 153, and the first electrode block selection circuit 154.
  • the first electrode selection circuit 15 may be a semiconductor integrated circuit (IC).
  • the second electrode Rx is a zigzag-shaped line and has a longitudinal axis in the second direction Dy as a whole.
  • the second electrode Rx has a plurality of first straight line portions 26a, a plurality of second straight line portions 26b, and a plurality of bending portions 26x.
  • the second straight line portion 26b extends in a direction intersecting with the first straight line portion 26a.
  • the bent portion 26x connects the first straight line portion 26a and the second straight line portion 26b.
  • the first straight line portion 26a extends in a direction intersecting the first direction Dx and the second direction Dy.
  • the second straight line portion 26b also extends in a direction intersecting the first direction Dx and the second direction Dy.
  • the first straight line portion 26a and the second straight line portion 26b are arranged so as to be symmetrical with respect to a virtual line (not shown) parallel to the first direction Dx.
  • the first straight line portion 26a and the second straight line portion 26b are alternately connected in the second direction Dy.
  • the arrangement interval of the bent portion 26x in the second direction Dy is set to Pry. Further, the arrangement interval of the bent portions 26x in the first direction Dx between the adjacent second electrodes Rx is defined as Prx. In this embodiment, for example, Prx ⁇ Pry is preferable.
  • the second electrode Rx is not limited to the zigzag shape, and may have other shapes such as a wavy line shape and a linear shape.
  • the plurality of first electrodes Tx-1, Tx-2, Tx-3, Tx-4 ... Have a plurality of electrode portions 23a, 23b and a plurality of connection portions 24, respectively.
  • the first electrode Tx when it is not necessary to distinguish and explain the first electrode Tx-1, Tx-2, Tx-3, Tx-4 ..., it is simply referred to as the first electrode Tx.
  • the first electrodes Tx-1 and Tx-2 intersecting the second straight line portion 26b of the second electrode Rx include an electrode portion 23a having two sides parallel to the second straight line portion 26b.
  • the first electrodes Tx-3 and Tx-4 intersecting the first straight line portion 26a of the second electrode Rx include an electrode portion 23b having two sides parallel to the first straight line portion 26a.
  • a plurality of electrode portions 23a and 23b are arranged along the second electrode Rx. As a result, the separation distance between the zigzag-shaped second electrode Rx and the electrode portions 23a and 23b can be made constant in a plan view.
  • the plurality of electrode portions 23a are arranged in the first direction Dx and are arranged apart from each other. Further, in each of the plurality of first electrodes Tx, the connecting portion 24 connects the adjacent electrode portions 23a among the plurality of electrode portions 23a. Further, in a plan view, each of the plurality of second electrodes Rx passes between the adjacent electrode portions 23a and intersects with the connecting portion 24.
  • the first electrodes Tx-3 and Tx-4 have the same configuration.
  • the second electrode Rx is a thin metal wire, and the width of the first direction Dx of the second electrode Rx is smaller than the width of the first direction Dx of the electrode portions 23a and 23b. With such a configuration, the area where the first electrode Tx and the second electrode Rx overlap is reduced, and the parasitic capacitance can be suppressed.
  • the arrangement interval of the first electrode Tx in the second direction Dy is Pt.
  • the arrangement interval Pt is about 1 ⁇ 2 of the arrangement interval Pry of the bent portion 26x of the second electrode Rx.
  • the arrangement interval Pt is not limited to this, and may be other than a half-integer multiple of the arrangement interval Pry.
  • the arrangement interval Pt is, for example, 50 ⁇ m or more and 100 ⁇ m or less.
  • the connecting portions 24 adjacent to the first direction Dx have an arrangement interval Pb in the second direction Dy and are arranged alternately.
  • the electrode portions 23a and 23b have parallel four-sided shapes, respectively, but may have other shapes.
  • the electrode portions 23a and 23b may have a rectangular shape, a polygonal shape, or an irregular shape.
  • the cross section of the frame region GA is a cross section obtained by cutting a portion including the thin film transistor Tr included in the first electrode selection circuit 15.
  • FIG. 8 in order to show the relationship between the layer structure of the detection region FA and the layer structure of the frame region GA, a cross section of the detection region FA along the VII-VII'line and a cross section of the portion of the frame region GA including the thin film transistor Tr are shown. And are shown schematically connected.
  • a thin film transistor Tr is provided in the frame region GA on the sensor substrate 21.
  • the thin film transistor Tr includes a semiconductor layer 61, a source electrode 62, a drain electrode 63, and a gate electrode 64.
  • the gate electrode 64 is provided on the sensor substrate 21.
  • the first interlayer insulating film 81 is provided on the sensor substrate 21 and covers the gate electrode 64.
  • As the material of the gate electrode 64 aluminum (Al), copper (Cu), silver (Ag), molybdenum (Mo) or an alloy thereof is used.
  • the first interlayer insulating film 81 is not limited to a single layer, and may be a film having a laminated structure.
  • the first interlayer insulating film 81 may be a film having a laminated structure in which a silicon nitride film is formed on a silicon oxide film.
  • the semiconductor layer 61 is provided on the first interlayer insulating film 81.
  • the second interlayer insulating film 82 is provided on the first interlayer insulating film 81 and covers the semiconductor layer 61.
  • the semiconductor layer 61 is exposed at the bottom of the contact hole provided in the second interlayer insulating film 82.
  • As the material of the semiconductor layer 61 polysilicon or an oxide semiconductor is used.
  • As the material of the second interlayer insulating film 82 a silicon oxide film, a silicon nitride film, or a silicon oxide nitride film is used.
  • the second interlayer insulating film 82 is not limited to a single layer, and may be a film having a laminated structure.
  • the second interlayer insulating film 82 may be a film having a laminated structure in which a silicon nitride film is formed on a silicon oxide film.
  • the source electrode 62 and the drain electrode 63 are provided on the second interlayer insulating film 82.
  • the source electrode 62 and the drain electrode 63 are connected to the semiconductor layer 61 via contact holes provided in the second interlayer insulating film 82, respectively.
  • titanium aluminum (TiAl) which is an alloy of titanium and aluminum, is used.
  • an insulating resin layer 27, an electrode portion 23b of the first electrode Tx, and a connecting portion 24 are provided on the second interlayer insulating film 82.
  • the resin layer 27 provided in the frame region GA covers the source electrode 62 and the drain electrode 63. Further, the drain electrode 63 is electrically connected to the first electrode Tx via a contact hole provided in the resin layer 27 provided in the frame region GA.
  • the resin layer 27 provided in the detection region FA has a first resin layer 27A and a second resin layer 27B that is thinner than the first resin layer 27A.
  • the first resin layer 27A covers a portion of the connecting portion 24 located directly below the second electrode Rx.
  • the second resin layer 27B provided in the detection region FA covers a portion of the connecting portion 24 located directly below the electrode portion 23b.
  • Contact holes H1 and H2 are provided in the second resin layer 27B.
  • the peripheral edge portion of the electrode portion 23b is connected to the connection portion 24 via the contact holes H1 and H2.
  • the electrode portion 23b is in contact with the second interlayer insulating film 82.
  • the second electrode Rx is provided on the first resin layer 27A.
  • the second electrode Rx has, for example, a first metal layer 141, a second metal layer 142, and a third metal layer 143.
  • the second metal layer 142 is provided on the third metal layer 143, and the first metal layer 141 is provided on the second metal layer 142.
  • molybdenum or a molybdenum alloy is used as the material of the first metal layer 141 and the third metal layer 143.
  • Aluminum or an aluminum alloy is used as the material of the second metal layer 142.
  • the molybdenum or molybdenum alloy constituting the first metal layer 141 has a lower visible light reflectance than the aluminum or aluminum alloy constituting the second metal layer 142. This makes it possible to make the second electrode Rx invisible.
  • An insulating film 83 is provided on the resin layer 27, the electrode portion 23b, and the second electrode Rx. The upper surface and the side surface of the second electrode Rx are covered with the insulating film 83.
  • a film having a high refractive index and a low reflectance such as a silicon nitride film, is used.
  • the first electrode Tx and the second electrode Rx are formed on the same sensor substrate 21.
  • the first electrode Tx and the second electrode Rx are provided in different layers via the resin layer 27 which is an insulating layer.
  • the personal authentication data acquisition period in the personal authentication system 1 and the personal authentication device 1a is a first period in which a touch detection period (coordinate detection period) for executing touch detection is provided, and a fingerprint detection for performing fingerprint detection. It has a second period with a period (plane information detection period).
  • FIG. 9 is a timing chart showing an example of the switching operation between the first period and the second period.
  • TP indicates a touch detection period (coordinate detection period)
  • FP indicates a fingerprint detection period (plane information detection period).
  • the personal authentication system 1 and the personal authentication device 1a according to the present embodiment shift from the first period to the second period based on the first control signal output from the processing unit 50. Further, the personal authentication system 1 and the personal authentication device 1a according to the present embodiment shift from the second period to the first period based on the second control signal output from the processing unit 50.
  • FIG. 10 is a diagram showing an example of the first detection mode.
  • FIG. 11 is a diagram showing an example of the second detection mode.
  • FIG. 12 is a diagram showing an example of the third detection mode.
  • the personal authentication system 1 and the personal authentication device 1a have a first detection pitch Pts larger than that of the second detection mode M2 (see FIG. 11), and the detection region FA.
  • the first electrode selection circuit 15 bundles a plurality of first electrodes Tx adjacent to each other or arranged at a predetermined pitch to form a first electrode block, and first drives each of the first electrode blocks.
  • the signal Vtx1 is supplied.
  • the same first drive signal Vtx1 is supplied to the plurality of first electrodes Tx included in each first electrode block.
  • the detection electrode selection circuit 16 bundles a plurality of second electrodes Rx adjacent to each other or arranged at a predetermined pitch to form a second electrode block, and each second electrode block is second.
  • the drive signal Vtx2 may be supplied. Further, all the second electrodes Rx may be connected to the detection unit 40, respectively.
  • the personal authentication system 1 and the personal authentication device 1a have a second detection pitch Pf smaller than that of the first detection mode M1 (see FIG. 10), and the detection region FA.
  • the first electrode selection circuit 15 supplies the second drive signal Vtx2 whose phase is determined based on a predetermined code to each of the plurality of first electrodes Tx.
  • the first electrode selection circuit 15 can also adopt a configuration in which each first electrode Tx is individually scanned and a pulse wave as a second drive signal Vtx2 is supplied along with the scanning.
  • the supply of the second drive signal Vtx2 includes any of these aspects.
  • the personal authentication system 1 and the personal authentication device 1a can perform detection at a second detection pitch Pf smaller than that of the first detection mode M1. More specifically, even if the finger is in contact with the detection surface when viewed from a macro perspective, a part of the finger is detected due to the unevenness of the finger surface when viewed from a micro perspective. It comes into contact with the surface, and a part of it is slightly separated from the detection surface.
  • the unevenness of the surface of the object to be detected (here, the unevenness of the surface of the finger, that is, the fingerprint) when viewed from the microscopic point of view is detected.
  • the second detection pitch may be smaller than the first detection pitch, and the smallest second detection pitch is two adjacent first electrodes or two adjacent detection electrodes intersecting them. Is the pitch formed by.
  • the personal authentication system 1 and the personal authentication device 1a perform detection on the entire surface of the detection area FA. Therefore, the personal authentication system 1 and the personal authentication device 1a are not limited to fingerprint detection only, and can detect, for example, a palm print. Alternatively, the personal authentication system 1 and the personal authentication device 1a can detect the shape of the hand in contact with or close to the detection area FA and specify the position of the fingertip. In this case, the fingerprint can be detected by performing signal processing or arithmetic processing only in the area where the fingertips are in contact with or close to each other.
  • the area where fingerprint detection is performed on the detection surface may be a part of the detection surface.
  • the personal authentication system 1 and the personal authentication device 1a perform detection at the second detection pitch Pf in the first partial region FA1 of a part of the detection region FA.
  • the first electrode selection circuit 15 supplies the second drive signal Vtx2 only to the plurality of first electrodes Tx included in the first partial region FA1. Even in the third detection mode M3, the personal authentication system 1 and the personal authentication device 1a can perform detection at the second detection pitch Pf.
  • the time required for the detection can be shortened, and the processing performed by the detection unit 40 (see FIGS. 4A and 4B) can be reduced.
  • the first partial region FA1 is a preset fixed region. However, the position and size of the first partial region FA1 may be changed as appropriate.
  • the fingerprint detection may be executed in the third detection mode M3. Specifically, in the first period, touch detection is executed by the first detection mode M1, and in the second period, fingerprint detection is executed by the third detection mode M3. As a result, the fingerprint detection period FP can be shortened, and the time required for detection can be shortened.
  • FIG. 13 is a diagram showing an example of the fourth detection mode.
  • the personal authentication system 1 and the personal authentication device 1a execute the touch detection of the first detection mode M1 in the first period, and detect whether or not the finger is in contact with the detection surface.
  • the personal authentication system 1 and the personal authentication device 1a shift to the second period and execute fingerprint detection in the fourth detection mode M4.
  • the personal authentication system 1 and the personal authentication device 1a detect at the second detection pitch Pf only in the second partial region FA2 which is a predetermined region including the position where the finger Fin or the like is detected. conduct.
  • the position and size of the second partial region FA2 can be changed based on the information such as the finger Fin detected in the touch detection period TP.
  • fingerprint detection in the fourth detection mode M4 may be performed based on the detection result in the first detection mode M1.
  • the area of the second partial region FA2 can be reduced, so that the time required for fingerprint detection can be significantly shortened as compared with the case where the fingerprint is detected over the entire detection region.
  • the personal authentication method of this disclosure will be described below.
  • the personal authentication method in the personal authentication system 1 and the personal authentication device 1a is not limited to the personal authentication methods shown below.
  • FIG. 14 is a diagram showing an example of a detection area in the personal authentication method according to the first embodiment.
  • a plurality of first area KYs to which different input keys are assigned are provided in the detection area FA.
  • the input key is not limited to numbers, and may include, for example, uppercase or lowercase alphabets or symbols such as "#" and "*".
  • touch detection is performed by the second detection mode M2 described above, and the key input by the user is identified.
  • the input key "5" is input. Identify as being done.
  • the coordinates on the detection area FA touched by the user are any of the first area KY “0", “1", “2”, ..., "9".
  • a predetermined area having these coordinates as the center coordinate C is defined as a second area FG, and the second area FG is used as an area for acquiring a fingerprint image.
  • FIG. 15 is a diagram showing the positional relationship between the first region and the second region.
  • FIG. 15 shows an example in which the coordinates identified as the input key “5” in the password input for personal authentication are set as the center coordinates C (Cx, Cy) of the second region FG. That is, the user touches the detection surface to touch the input key "5", but touches a position slightly deviated from the center position of the input key "5", and performs arithmetic processing on the touch via the detection unit and the processing unit. As a result, the center position touched by the user is recognized as the center coordinate C (Cx, Cy). Then, the second region FG for fingerprint detection is determined in relation to the center coordinate C.
  • each time each key of the password is input an image of an area smaller than the second area FG shown in FIG. 15 is acquired.
  • the detection area to be detected during the time when the touched state of each input key is maintained when the password is input and the image acquired as a result can be made as small as possible. Therefore, it is possible to improve the accuracy of the image acquired for each key input of the password.
  • the image acquired for each password key input is combined to generate a fingerprint image for personal authentication. This makes it possible to acquire a highly accurate fingerprint image.
  • the scanning direction in touch detection and fingerprint detection is the direction along the second direction Dy.
  • FIG. 16 is a diagram showing a fingerprint image after image composition in the first embodiment.
  • the divided regions SF1, SF2, SF3, and SF4 for acquiring each divided image are assigned so as to be relatively aligned in the fingerprint scanning direction. The example given is shown.
  • the number of divisions of the second region FG that is, the number of division region SFs is not limited to four.
  • the number of divisions of the second area FG depends on the number of digits of the password. For example, as shown in FIG. 16, when allocating four divided areas SF1, SF2, SF3, SF4 corresponding to the second area FG, the number of digits of the password needs to be 4 or more. In other words, the number of divisions of the second area FG needs to be equal to or less than the number of digits of the password.
  • the processing unit 50 includes a touch determination unit 51, a detection start coordinate setting unit 52, a divided image receiving unit 53, a first storage unit 54, a fingerprint image generation unit 55, and a second.
  • a personal authentication result storage unit 515 may be, for example, a RAM (Random).
  • first storage unit 54, the second storage unit 56, the third storage unit 57, the fingerprint authentication result storage unit 59, the password storage unit 511, the password authentication result storage unit 513, and the personal authentication result storage unit 515 are one. It may be a RAM, a ROM, a register circuit, or the like.
  • the touch determination unit 51 determines whether or not the touch state is valid in the personal authentication method of the present disclosure, based on the touch detection coordinates output from the detection unit 40 in the first period described above.
  • the "effective touch state in the personal authentication method of the present disclosure” means that the coordinates on the detection area FA touched by the user, that is, the touch detection coordinates output from the detection unit 40 are shown in FIG. It is shown that the coordinates are in the first region KY shown in. Specifically, when the touch determination unit 51 determines that the touch state is in the coordinates in the first region KY shown in FIG. 14, the touch determination unit 51 transmits a first control signal for shifting to the second period to the detection control unit 11. Output.
  • the above-mentioned "effective touch state in the personal authentication method of the present disclosure” is referred to as "key input”.
  • the touch determination unit 51 detects that the key has been input, the touch determination unit 51 outputs a first control signal for shifting to the second period to the detection control unit 11.
  • the touch determination unit 51 sequentially stores the key input key (“5” in the example shown in FIG. 15) in the password storage unit 511.
  • the touch determination unit 51 issues a password authentication start command to the password authentication unit 512 in the subsequent stage. Output.
  • the detection start coordinate setting unit 52 uses the key-input touch detection coordinates to determine the fingerprint detection start coordinates (hereinafter, simply referred to as “detection start coordinates”). To set.
  • FIG. 17A is a diagram illustrating an area for acquiring a divided image in the personal authentication method according to the first embodiment.
  • FIG. 17B is a second diagram illustrating an area for acquiring a divided image in the personal authentication method according to the first embodiment.
  • FIG. 17C is a third diagram illustrating an area for acquiring a divided image in the personal authentication method according to the first embodiment.
  • FIG. 17D is a fourth diagram illustrating an area for acquiring a divided image in the personal authentication method according to the first embodiment.
  • FIG. 17A shows an example of allocating the divided area SF1 for acquiring the divided image in the second area FG1 at the time of key input of the first digit of the password.
  • FIG. 17B shows an example of allocating the divided area SF2 for acquiring the divided image in the second area FG2 at the time of key input of the second digit of the password.
  • FIG. 17C shows an example of allocating the divided area SF3 for acquiring the divided image in the second area FG3 at the time of key input of the third digit of the password.
  • FIG. 17D shows an example of allocating the divided area SF4 for acquiring the divided image in the second area FG4 at the time of key input of the fourth digit of the password.
  • the divided regions SF1, SF2, SF3, and SF4 are relatively fingerprints in the second region FG1, FG2, FG3, and FG4 when each divided image is acquired.
  • An example is shown in which they are assigned to line up in the scanning direction.
  • the size of the second region FG is 256 ⁇ 256 in the first direction Dx and 256 in the second direction Dy.
  • the detection start coordinate setting unit 52 first inputs the first digit of the password to the center coordinates C1 of the second region FG1 as shown in FIG. 17A.
  • the detection start coordinates S1 (Cx1-128, Cy1-128) are set for (Cx1, Cy1).
  • the fingerprint detection area setting unit 46 of the detection unit 40 has a size of 256 ⁇ 64 starting from the detection start coordinates S1 (Cx1-128, Cy1-128) shown in FIG. 17A as the fingerprint detection area for acquiring the divided image. Allocate the division area SF1 of.
  • the detection start coordinate setting unit 52 performs a key input of the second digit of the password, as shown in FIG. 17B, at the center coordinates C2 of the second region FG2.
  • the detection start coordinates S2 (Cx2-128, Cy2-128 + 64) are set for (Cx2, Cy2).
  • the center coordinate of the second digit of the password is shown as the center coordinate C2 (Cx2, Cy2).
  • the fingerprint detection area setting unit 46 of the detection unit 40 has a size of 256 ⁇ 64 starting from the detection start coordinates S2 (Cx2-128, Cy2-128 + 64) shown in FIG. 17B as the fingerprint detection area for acquiring the divided image. Allocate the division area SF2 of. That is, when the detection area of 256 ⁇ 256 defined based on the center coordinates of the finger is divided into four in the second direction Dy, the detection area (divided area SF2) in the second stage from the top is assigned.
  • the detection start coordinate setting unit 52 performs the key input of the third digit of the password, as shown in FIG. 17C, at the center coordinates C3 of the second region FG3.
  • the detection start coordinates S3 (Cx3-128, Cy3-128 + 64 ⁇ 2) are set for (Cx3, Cy3).
  • the center coordinate of the third digit of the password is shown as the center coordinate C3 (Cx3, Cy3).
  • the fingerprint detection area setting unit 46 of the detection unit 40 has 256 ⁇ starting from the detection start coordinates S3 (Cx3-128, Cy3-128 + 64 ⁇ 2) shown in FIG. 17C as the fingerprint detection area for acquiring the divided image. Allocate a division area SF3 of 64 size. That is, when the detection area of 256 ⁇ 256 defined based on the center coordinates of the finger is divided into four in the second direction Dy, the detection area (divided area SF3) in the third stage from the top is assigned.
  • the detection start coordinate setting unit 52 performs a key input of the fourth digit of the password, as shown in FIG. 17D, at the center coordinates C4 of the second region FG4.
  • the detection start coordinates S4 (Cx4-128, Cy4-128 + 64 ⁇ 3) are set for (Cx4, Cy4).
  • the center coordinate of the fourth digit of the password is shown as the center coordinate C4 (Cx4, Cy4).
  • the fingerprint detection area setting unit 46 of the detection unit 40 has 256 ⁇ starting from the detection start coordinates S4 (Cx4-128, Cy4-128 + 64 ⁇ 3) shown in FIG. 17D as the fingerprint detection area for acquiring the divided image. Allocate a division area SF4 of 64 size. That is, when the detection area of 256 ⁇ 256 defined based on the center coordinates of the finger is divided into four in the second direction Dy, the detection area (divided area SF4) in the fourth stage from the top is assigned.
  • the divided image receiving unit 53 receives the divided image output from the detection unit 40 in the second period described above, and stores the divided image as buffering data in the first storage unit 54. ..
  • the fingerprint image generation unit 55 reads out the divided image stored as buffering data in the first storage unit 54, and sequentially stores it as buffering data in the second storage unit 56. At this time, the fingerprint image generation unit 55 outputs a second control signal for shifting to the first period to the detection control unit 11.
  • the accumulated number m of the divided images stored in the second storage unit 56 is a predetermined number M (in the example shown in FIG. 16, the divided images in the four divided areas SF1, SF2, SF3, SF4).
  • M the number M
  • the divided images stored in the second storage unit 56 are combined to generate a fingerprint image for personal authentication, and the generated fingerprint image for personal authentication is stored in the third storage unit 57.
  • a fingerprint authentication start command is output to the fingerprint authentication unit 58 in the subsequent stage.
  • the fingerprint authentication unit 58 performs authentication determination processing of the fingerprint image for personal authentication stored in the third storage unit 57 based on the fingerprint authentication start command from the fingerprint image generation unit 55, and fingerprints the fingerprint authentication determination result. It is stored in the result storage unit 59.
  • the present disclosure is not limited by this authentication determination method. For example, the fingerprint image for collation acquired in advance is collated with the fingerprint image for personal authentication stored in the third storage unit 57, and if the predetermined feature points match, the authentication is successful. Is also good.
  • the password authentication unit 512 synthesizes the keys stored in the password storage unit 511 to generate a password for personal authentication based on the password authentication start command from the touch determination unit 51, and determines the authentication of the password for personal authentication. Processing is performed, and the password authentication determination result is stored in the password authentication result storage unit 513. Specifically, for example, the preset password for verification and the generated password for personal authentication are collated, and if they match, the authentication is successful.
  • the personal authentication unit 514 refers to the password authentication determination result stored in the password authentication result storage unit 513 and the fingerprint authentication determination result stored in the fingerprint authentication result storage unit 59, performs personal authentication determination processing, and performs the individual authentication determination process.
  • the authentication processing result is stored in the personal authentication result storage unit 515. Specifically, the personal authentication unit 514 assumes that the personal authentication is successful when the password authentication determination result is the authentication success and the fingerprint authentication determination result is the authentication success.
  • FIG. 18 is a flowchart showing an example of personal authentication data acquisition processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 19 is a flowchart showing an example of personal authentication processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 20 is a sub-flow chart showing an example of password authentication processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 21 is a sub-flow chart showing an example of fingerprint authentication processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • FIG. 22 is a sequence diagram showing a specific example of processing in the personal authentication system and the personal authentication device according to the first embodiment.
  • the touch determination unit 51 of the processing unit 50 determines whether or not a key has been input based on the touch detection coordinates acquired in the first period (step S101). If the key is not input (step S101; No), the touch determination unit 51 repeatedly executes the process of step S101 until the key is input (step S101; Yes).
  • step S101 When it is determined that the key has been input (step S101; Yes), the touch determination unit 51 counts up (increments) the key accumulation number n (step S102), and the key input key (example shown in FIG. 15). Then, "5") is stored in the password storage unit 511 (step S103).
  • the touch determination unit 51 determines whether or not the accumulated number m of the divided images stored in the second storage unit 56 is equal to or greater than a predetermined number M (the number M of the divided area SFs in the second area FG) (step). S104). For example, at this stage, it is assumed that the divided images have not been accumulated at all even when the key input of the first digit of the password is performed. In this case, the number of accumulated divided images is 0, which is smaller than a predetermined number (4 in this embodiment). In this case, the process proceeds to the next step S106.
  • step S105 If the accumulated number n of the keys stored in the password storage unit 511 does not reach the predetermined number N (number of digits N of the password) (step S105; No), the process returns to the process of step S101 and is stored in the password storage unit 511. The process up to step S105 is repeated until the accumulated number n of the keys reaches a predetermined number N (step S105; Yes).
  • N number of digits N of the password
  • step S104 When the accumulated number m of the divided images stored in the second storage unit 56 is less than a predetermined number M (step S104; No), the touch determination unit 51 performs fingerprint detection from the first period of touch detection.
  • the first control signal for shifting to the two periods is output to the detection control unit 11 (step S106).
  • the detection control unit 11 has the first electrode selection circuit 15 and the detection electrode so as to perform fingerprint detection in the divided region set by the fingerprint detection area setting unit 46 based on the first control signal output from the touch determination unit 51.
  • the selection circuit 16 is controlled. As a result, the process shifts to the second period in which fingerprint detection is performed. As described above, at the present stage, the key input of the first digit of the password is performed, so the control for acquiring the divided image shown in FIG. 17A will be performed below.
  • the detection start coordinate setting unit 52 sets the detection start coordinates described in FIG. 17A from the touch detection coordinates input by the key (step S107), and outputs the detection start coordinates to the fingerprint detection area setting unit 46 of the detection unit 40. do.
  • the fingerprint detection area setting unit 46 allocates the division area described in FIG. 17A as a region for acquiring the division image, starting from the detection start coordinates output from the detection start coordinate setting unit 52 (step S108).
  • the divided image generation unit 47 of the detection unit 40 generates a divided image of the divided area allocated by the fingerprint detection area setting unit 46 based on the decoding processing result of the signal processing unit 44 (step S109), and the processing unit 50 generates the divided image. Output.
  • the divided image shown in FIG. 17A is generated along with the key input of the first digit of the password, and is output to the divided image receiving unit 53 of the processing unit 50.
  • the divided image receiving unit 53 of the processing unit 50 receives the divided image output from the divided image generation unit 47 of the detection unit 40, and stores the divided image as buffering data in the first storage unit 54 (step S110). .. Therefore, in the processing process, the divided image shown in FIG. 17A is stored in the first storage unit 54.
  • the fingerprint image generation unit 55 determines whether or not the divided image is stored in the first storage unit 54 (step S111). If the divided image is not stored in the first storage unit 54 (step S111; No), the fingerprint image generation unit 55 repeatedly executes the process of step S111.
  • the fingerprint image generation unit 55 reads out the divided image stored as buffering data (step S112) and stores the divided image. A few meters are counted up (incremented) (step S113), and the divided image read from the first storage unit 54 is stored in the second storage unit 56 as buffering data (step S114). Therefore, in the processing process, the divided image shown in FIG. 17A is stored in the second storage unit 56.
  • the fingerprint image generation unit 55 outputs a second control signal for shifting from the second period for performing fingerprint detection to the first period for performing touch detection to the detection control unit 11 (step S115).
  • the detection control unit 11 controls the first electrode selection circuit 15 and the detection electrode selection circuit 16 so as to perform touch detection in the entire detection region FA based on the second control signal output from the fingerprint image generation unit 55. .. As a result, the process shifts to the first period in which touch detection is performed.
  • the fingerprint image generation unit 55 determines whether or not the accumulated number m of the divided images stored in the second storage unit 56 reaches a predetermined number M (the number of divisions of the second region FG) (step S116). ..
  • step S116 If the accumulated number m of the divided images stored in the second storage unit 56 does not reach the predetermined number M (step S116; No), the process returns to the process of step S101 and the accumulated number of the divided images stored in the second storage unit 56.
  • the process up to step S116 is repeated until m reaches a predetermined number M (step S116; Yes). That is, by going through the processing processes from S101 to S114, the input of the input key of the first digit of the password is confirmed, and the acquisition of the divided image of the fingerprint accompanying the input of the input key is completed. Further, it was confirmed that the fingerprint authentication mode was changed to the normal touch detection mode by going through the processing processes of S115 to S116, and the accumulated number of divided images had not reached the predetermined number yet.
  • the process returns to S101, and by going through the processes of S101 to S114 again, the input key of the second digit of the password is acquired and the divided image shown in FIG. 17B is acquired. After that, the input key of each password is acquired by undergoing the same processing, and the processing is sequentially performed in order to acquire the divided image of the fingerprint shown in FIGS. 17C and 17D.
  • the fingerprint image generation unit 55 stores the divided image stored in the second storage unit 56 in the third storage unit 57 as one fingerprint image for personal authentication (step S117), and stores it in the fingerprint authentication unit 58 in the subsequent stage.
  • the fingerprint authentication start command is output (step S118).
  • step S105 the process returns to step S101, and when the stored number n of the keys stored in the password storage unit 511 reaches a predetermined number N (step S105; Yes), the touch determination unit 51 has the divided image storage number m and the key storage number n. Is reset (step S119), and a password authentication start command is output to the password authentication unit 512 in the subsequent stage (step S120).
  • the password authentication unit 512 executes the password authentication process shown in FIG. 20 (step S201 in FIG. 19).
  • the password authentication unit 512 determines whether or not there is a password authentication start command from the touch determination unit 51 (step S301). If the password authentication start command is not output (step S301; No), the password authentication unit 512 repeats the process of step S301 until the password authentication start command is output from the touch determination unit 51 (step S301; Yes). Run.
  • the password authentication unit 512 reads out the key stored in the password storage unit 511 (step S302) and inputs the password for personal authentication.
  • the password is generated and the authentication determination process of the password is executed (step S303), and the password authentication determination result is stored in the password authentication result storage unit 513 (step S304).
  • the personal authentication unit 514 reads out the password authentication determination result stored in the password authentication result storage unit 513 (step S202), and determines whether or not the password authentication is successful (step S203).
  • step S203 the fingerprint authentication unit 58 executes the fingerprint authentication process shown in FIG. 21 (step S204 in FIG. 19).
  • the fingerprint authentication unit 58 determines whether or not there is a fingerprint authentication start command from the fingerprint image generation unit 55 (step S401). If the fingerprint authentication start command is not output (step S401; No), the fingerprint authentication unit 58 processes the step S401 until the fingerprint authentication start command is output from the fingerprint image generation unit 55 (step S401; Yes). Is repeated.
  • the fingerprint authentication unit 58 reads out the fingerprint image for personal authentication stored in the third storage unit 57 (step S402). ), The fingerprint authentication determination process is executed (step S403), and the fingerprint authentication determination result is stored in the fingerprint authentication result storage unit 59 (step S404).
  • the personal authentication unit 514 reads out the fingerprint authentication determination result stored in the fingerprint authentication result storage unit 59 (step S205), and determines whether or not the fingerprint authentication is successful (step S206).
  • the personal authentication unit 514 stores the personal authentication processing result indicating that the personal authentication is successful in the personal authentication result storage unit 515 (step S207).
  • step S203 If password authentication fails (step S203; No) or fingerprint authentication fails (step S206; No), the personal authentication unit 514 outputs a password re-entry request to a higher-level processing device (not shown). (Step S208).
  • a highly accurate fingerprint image can be acquired when entering a password, so that the authentication accuracy can be improved. Moreover, since the fingerprint image can be acquired when the password is input, the security can be enhanced without impairing the convenience.
  • a personal authentication system 1 a personal authentication device 1a, a display device 100, and a personal authentication method that can achieve both enhancement of security and improvement of authentication accuracy without impairing convenience.
  • FIG. 23A is a diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the first embodiment.
  • FIG. 23B is a second diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the first embodiment.
  • FIG. 23C is a third diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the first embodiment.
  • FIG. 23D is a fourth diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the first embodiment.
  • the size of the fingerprint detection region is 256 ⁇ 256 in the first direction Dx and 256 in the second direction Dy, which is the same as the size of the second region FG. ..
  • FIG. 23A shows an example of allocating the divided area SF1 for acquiring the divided image in the second area FG1 at the time of key input of the first digit of the password.
  • FIG. 23B shows an example of allocating the divided area SF2 for acquiring the divided image in the second area FG2 at the time of key input of the second digit of the password.
  • FIG. 23C shows an example of allocating the divided area SF3 for acquiring the divided image in the second area FG3 at the time of key input of the third digit of the password.
  • FIG. 23D shows an example of allocating the divided area SF4 for acquiring the divided image in the second area FG4 at the time of key input of the fourth digit of the password.
  • the divided regions SF1, SF2, SF3, and SF4 are relatively fingerprints in the second region FG1, FG2, FG3, and FG4 when each divided image is acquired.
  • An example is shown in which they are assigned to line up in the scanning direction.
  • step S107 by the detection start coordinate setting unit 52, step S108 by the fingerprint detection area setting unit 46, and step S109 by the divided image generation unit 47 are different. ing.
  • processing different from FIG. 18 of the detection start coordinate setting unit 52, the fingerprint detection area setting unit 46, and the divided image generation unit 47 will be described.
  • the detection start coordinate setting unit 52 receives the detection start coordinate S1 (Cx1-128) with respect to the center coordinate C1 (Cx1, Cy1) of the second region FG1 by the key input of the first digit of the password. , Cy1-128) (see FIG. 23A).
  • the fingerprint detection area setting unit 46 of the detection unit 40 allocates a 256 ⁇ 256 size area starting from the detection start coordinates S1 (Cx1-128, Cy1-128) shown in FIG. 23A as the fingerprint detection area.
  • the area is divided into four subframes having a size of 256 ⁇ 64, which are divided into four in the scanning direction.
  • the divided image generation unit 47 in the subsequent stage generates divided images of four subframes
  • the divided image receiving unit 53 of the processing unit 50 includes the division area including the detection start coordinates S1 (Cx1-128, Cy1-128).
  • the divided image of the subframe corresponding to SF1 is stored in the first storage unit 54 as buffering data, and the divided image of the remaining three subframes is discarded.
  • the detection start coordinate setting unit 52 sets the detection start coordinates S2 (Cx2-128, Cy2-128 + 64) with respect to the center coordinates C2 (Cx2, Cy2) of the second region FG2 by the key input of the second digit of the password. Set (see FIG. 23B).
  • the center coordinate of the finger on the detection surface are different from the first digit of the password. Therefore, here, the center coordinate of the second digit of the password is shown as the center coordinate C2 (Cx2, Cy2).
  • the fingerprint detection area setting unit 46 of the detection unit 40 allocates a 256 ⁇ 256 size area starting from the detection start coordinates S2 (Cx2-128, Cy2-128 + 64) shown in FIG. 23B as the fingerprint detection area.
  • the area is divided into four subframes having a size of 256 ⁇ 64, which are divided into four in the scanning direction. That is, based on the center coordinates of the finger, the detection area of 256 ⁇ 256 starting from the detection start coordinates S2 (Cx2-128, Cy2-128 + 64) shown in FIG. 23B is divided into four in the second direction Dy. Subframes are assigned in order from the upper detection area (divided area SF2).
  • the divided image generation unit 47 in the subsequent stage generates divided images of four subframes
  • the divided image receiving unit 53 of the processing unit 50 includes the division area including the detection start coordinates S2 (Cx2-128, Cy2-128 + 64).
  • the divided image of the subframe corresponding to SF2 is stored in the first storage unit 54 as buffering data, and the divided image of the remaining three subframes is discarded.
  • the detection start coordinate setting unit 52 receives the detection start coordinate S3 (Cx3-128, Cy3-128 + 64 ⁇ 2) with respect to the center coordinate C3 (Cx3, Cy3) of the second region FG3 by the key input of the third digit of the password. ) (See FIG. 23C).
  • the center coordinate of the third digit of the password is shown as the center coordinate C3 (Cx3, Cy3).
  • the fingerprint detection area setting unit 46 of the detection unit 40 uses a 256 ⁇ 256 size area starting from the detection start coordinates S3 (Cx3-128, Cy3-128 + 64 ⁇ 2) shown in FIG. 23C as the fingerprint detection area. Allocate and divide the area into four subframes of size 256 ⁇ 64 divided into four in the scanning direction. That is, when the detection area of 256 ⁇ 256 starting from the detection start coordinates S3 (Cx3-128, Cy3-128 + 64 ⁇ 2) shown in FIG. 23C is divided into four in the second direction Dy based on the center coordinates of the finger. , Subframes are assigned in order from the top detection area (divided area SF3).
  • the divided image generation unit 47 in the subsequent stage generates divided images of four subframes
  • the divided image receiving unit 53 of the processing unit 50 includes the detection start coordinates S3 (Cx3-128, Cy3-128 + 64 ⁇ 2).
  • the divided image of the subframe corresponding to the divided area SF3 is stored in the first storage unit 54 as buffering data, and the divided image of the remaining three subframes is discarded.
  • the detection start coordinate setting unit 52 receives the detection start coordinate S4 (Cx4-128, Cy4-128 + 64 ⁇ 3) with respect to the center coordinate C4 (Cx4, Cy4) of the second region FG4 by the key input of the fourth digit of the password. ) (See Fig. 23D).
  • the center coordinate of the fourth digit of the password is shown as the center coordinate C4 (Cx4, Cy4).
  • the fingerprint detection area setting unit 46 of the detection unit 40 uses a 256 ⁇ 256 size area starting from the detection start coordinates S4 (Cx4-128, Cy4-128 + 64 ⁇ 3) shown in FIG. 23D as the fingerprint detection area. Allocate and divide the area into four subframes of size 256 ⁇ 64 divided into four in the scanning direction. That is, when the detection area of 256 ⁇ 256 starting from the detection start coordinates S4 (Cx4-128, Cy4-128 + 64 ⁇ 3) shown in FIG. 23D is divided into four in the second direction Dy based on the center coordinates of the finger. , Subframes are assigned in order from the top detection area (divided area SF4).
  • the divided image generation unit 47 in the subsequent stage generates divided images of four subframes
  • the divided image receiving unit 53 of the processing unit 50 includes the detection start coordinates S4 (Cx4-128, Cy4-128 + 64 ⁇ 3).
  • the divided image of the subframe corresponding to the divided area SF4 is stored in the first storage unit 54 as buffering data, and the divided image of the remaining three subframes is discarded.
  • each of the fingerprint detection is divided into four subframes, but the final required subframe is only the uppermost subframe in each fingerprint detection. Therefore, in any fingerprint detection, it is possible to adopt a fingerprint detection flow in which only 256 ⁇ 64 is recognized as a subframe from the detection start coordinates of the uppermost subframe, and the rest is not recognized as a subframe in the first place.
  • FIG. 24 is a diagram showing a fingerprint image after image composition in the second embodiment.
  • the second region FG is combined with the second direction Dy, that is, the divided images divided into four in the scanning direction to generate a fingerprint image
  • the present embodiment as shown in FIG. 24.
  • An example of generating a fingerprint image by synthesizing a second region FG into two in the scanning direction and synthesizing the divided images in the first direction Dx different from the scanning direction will be described.
  • the same components as those described in the above-described first embodiment are designated by the same reference numerals, duplicate explanations will be omitted, and points different from those in the first embodiment will be described.
  • FIG. 25A is a diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 25B is a second diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 25C is a third diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 25D is a fourth diagram illustrating an area for acquiring a divided image in the personal authentication method according to the second embodiment.
  • FIG. 25A shows an example of allocating the divided area SF1 for acquiring the divided image in the second area FG1 at the time of key input of the first digit of the password.
  • FIG. 25B shows an example of allocating the divided area SF2 for acquiring the divided image in the second area FG2 at the time of key input of the second digit of the password.
  • FIG. 25C shows an example of allocating the divided area SF3 for acquiring the divided image in the second area FG3 at the time of key input of the third digit of the password.
  • FIG. 25D shows an example of allocating the divided area SF4 for acquiring the divided image in the second area FG4 at the time of key input of the fourth digit of the password.
  • the divided regions SF1, SF2, SF3, and SF4 are relatively fingerprints in the second region FG1, FG2, FG3, and FG4 when each divided image is acquired. They are assigned to line up in two directions, a scan direction (second direction Dy) and a direction different from the scan direction (first direction Dx).
  • the size of the second region FG is 256 ⁇ 256 in the first direction Dx and 256 in the second direction Dy.
  • step S107 by the detection start coordinate setting unit 52 and step S108 by the fingerprint detection area setting unit 46 are different from the first embodiment.
  • processing different from that in FIG. 18 of the detection start coordinate setting unit 52 and the fingerprint detection area setting unit 46 will be described.
  • the detection start coordinate setting unit 52 receives the detection start coordinates S1 (Cx1-128, Cy1-) with respect to the center coordinates C1 (Cx1, Cy1) of the second region FG1 by the key input of the first digit of the password. 128) is set (FIG. 25A).
  • the fingerprint detection area setting unit 46 of the detection unit 40 has a size of 128 ⁇ 128 starting from the detection start coordinates S1 (Cx1-128, Cy1-128) shown in FIG. 25A as the fingerprint detection area for acquiring the divided image. Allocate the division area SF1 of.
  • the detection start coordinate setting unit 52 sets the detection start coordinates S2 (Cx2, Cy2-128) with respect to the center coordinates C2 (Cx2, Cy2) of the second region FG2 in the key input of the second digit of the password. (FIG. 25B).
  • the center coordinate of the second digit of the password is shown as the center coordinate C2 (Cx2, Cy2).
  • the fingerprint detection area setting unit 46 of the detection unit 40 divides the fingerprint detection area 46 into 128 ⁇ 128 size starting from the detection start coordinates S2 (Cx2, Cy2-128) shown in FIG. 25B as the fingerprint detection area for acquiring the divided image.
  • the detection start coordinate setting unit 52 sets the detection start coordinates S3 (Cx3-128, Cy3) with respect to the center coordinates C3 (Cx3, Cy3) of the second region FG3 by the key input of the third digit of the password. (FIG. 25C).
  • the center coordinate of the third digit of the password is shown as the center coordinate C3 (Cx3, Cy3).
  • the fingerprint detection area setting unit 46 of the detection unit 40 divides the size of 128 ⁇ 128 starting from the detection start coordinates S3 (Cx3-128, Cy3) shown in FIG. 25C as the fingerprint detection area for acquiring the divided image.
  • the detection start coordinate setting unit 52 sets the detection start coordinates S4 (Cx4, Cy4) with respect to the center coordinates C4 (Cx4, Cy4) of the second region FG4 by the key input of the fourth digit of the password (FIG. 25D).
  • the center coordinate of the fourth digit of the password is shown as the center coordinate C4 (Cx4, Cy4).
  • the fingerprint detection area setting unit 46 of the detection unit 40 has a 128 ⁇ 128 size division area SF4 starting from the detection start coordinates S4 (Cx4, Cy4) shown in FIG. 25D as a fingerprint detection area for acquiring the division image.
  • a 128 ⁇ 128 division region SF4 starting from the detection start coordinates S4 (Cx4, Cy4) shown in FIG. 25D is assigned.
  • FIG. 26A is a diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the second embodiment.
  • FIG. 26B is a second diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the second embodiment.
  • FIG. 26C is a third diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the second embodiment.
  • FIG. 26D is a fourth diagram illustrating an image acquisition area in the personal authentication method according to the modified example of the second embodiment.
  • the size of the second region FG is 256 ⁇ 256 in the first direction Dx and 256 in the second direction Dy.
  • FIG. 26A shows an example of allocating the divided area SF1 for acquiring the divided image in the second area FG1 at the time of key input of the first digit of the password.
  • FIG. 26B shows an example of allocating the divided area SF2 for acquiring the divided image in the second area FG2 at the time of key input of the second digit of the password.
  • FIG. 26C shows an example of allocating the divided area SF3 for acquiring the divided image in the second area FG3 at the time of key input of the third digit of the password.
  • FIG. 26D shows an example of allocating the divided area SF4 for acquiring the divided image in the second area FG4 at the time of key input of the fourth digit of the password.
  • the divided regions SF1, SF2, SF3, and SF4 are relatively fingerprints in the second region FG1, FG2, FG3, and FG4 when each divided image is acquired. They are assigned to line up in two directions, a scan direction (second direction Dy) and a direction different from the scan direction (first direction Dx).
  • step S107 by the detection start coordinate setting unit 52, step S108 by the fingerprint detection area setting unit 46, and step S109 by the divided image generation unit 47 are performed. It is different from the first form.
  • processing different from FIG. 18 of the detection start coordinate setting unit 52, the fingerprint detection area setting unit 46, and the divided image generation unit 47 will be described.
  • the detection start coordinate setting unit 52 receives the detection start coordinate S1 (Cx1-128) with respect to the center coordinate C1 (Cx1, Cy1) of the second region FG1 by the key input of the first digit of the password. , Cy1-128) (see FIG. 26A).
  • the fingerprint detection area setting unit 46 of the detection unit 40 allocates a 128 ⁇ 128 size area starting from the detection start coordinates S1 (Cx1-128, Cy1-128) shown in FIG. 26A as the fingerprint detection area. Further, the fingerprint detection area setting unit 46 further divides the area into two subframes having a size of 128 ⁇ 64, which are divided into upper and lower parts in the scanning direction, and instructs the detection control unit 11 to sequentially scan the subframes. put out. In response to this, the detection control unit 11 performs a scan of 128 ⁇ 64 size with the detection start coordinates S1 (Cx1-128, Cy1-128) as a start point, and then performs a second detection start coordinate (Cx1-128, Cx1-128,). A 128 ⁇ 64 size scan is performed with Cy1-64) as the second starting point.
  • the divided image generation unit 47 in the subsequent stage the divided images of the two subframes are generated respectively.
  • the divided image is output to the divided image receiving unit 53 of the sequential processing unit 50.
  • the divided images of the two subframes corresponding to the divided area SF1 including the detection start coordinates S1 (Cx1-128, Cy1-128) are used as buffering data in the first storage unit 54, respectively. Store in.
  • the detection start coordinate setting unit 52 sets the detection start coordinates S2 (Cx2, Cy2-128) with respect to the center coordinates C2 (Cx2, Cy2) of the second region FG2 in the key input of the second digit of the password. (See FIG. 26B).
  • the center coordinate of the second digit of the password is shown as the center coordinate C2 (Cx2, Cy2).
  • the fingerprint detection area setting unit 46 of the detection unit 40 allocates a 128 ⁇ 128 size area starting from the detection start coordinates S2 (Cx2, Cy2-128) shown in FIG. 26B as the fingerprint detection area, and the area is concerned. Is further divided into two 128 ⁇ 64 size subframes divided into upper and lower parts in the scanning direction. That is, when the 128 ⁇ 128 division region SF2 starting from the detection start coordinate S2 (Cx2, Cy2-128) shown in FIG. 26B is divided into two in the second direction Dy based on the center coordinates of the finger, the upper row. Subframes are assigned in order from the area.
  • the divided image generation unit 47 in the subsequent stage generates divided images of two subframes, and the divided image receiving unit 53 of the processing unit 50 in the divided region SF2 including the detection start coordinates S2 (Cx2, Cy2-128).
  • the divided images of the two corresponding subframes are stored in the first storage unit 54 as buffering data, respectively.
  • the detection start coordinate setting unit 52 sets the detection start coordinates S3 (Cx3-128, Cy3) with respect to the center coordinates C3 (Cx3, Cy3) of the second region FG3 by the key input of the third digit of the password. (See FIG. 26C).
  • the center coordinate of the third digit of the password is shown as the center coordinate C3 (Cx3, Cy3).
  • the fingerprint detection area setting unit 46 of the detection unit 40 allocates a 128 ⁇ 128 size area starting from the detection start coordinates S3 (Cx3-128, Cy3) shown in FIG. 26C as the fingerprint detection area, and the area is concerned. Is further divided into two 128 ⁇ 64 size subframes divided into upper and lower parts in the scanning direction. That is, based on the center coordinates of the finger, the 128 ⁇ 128 division region SF3 starting from the detection start coordinates S3 (Cx3-128, Cy3) shown in FIG. 26C is divided into two in the second direction Dy. Subframes are assigned in order from the area.
  • the divided image generation unit 47 in the subsequent stage generates divided images of two subframes, and the divided image receiving unit 53 of the processing unit 50 in the divided region SF3 including the detection start coordinates S3 (Cx3-128, Cy3).
  • the divided images of the two corresponding subframes are stored in the first storage unit 54 as buffering data, respectively.
  • the detection start coordinate setting unit 52 sets the detection start coordinates S4 (Cx4, Cy4) with respect to the center coordinates C4 (Cx4, Cy4) of the second region FG4 by the key input of the fourth digit of the password (FIG. See 26D).
  • the center coordinate of the fourth digit of the password is shown as the center coordinate C4 (Cx4, Cy4).
  • the fingerprint detection area setting unit 46 of the detection unit 40 allocates a 128 ⁇ 128 size area starting from the detection start coordinates S4 (Cx4, Cy4) shown in FIG. 26D as the fingerprint detection area, and further allocates the area. It is divided into two 128 x 64 size subframes that are divided into upper and lower parts in the scanning direction. That is, from the upper region when the 128 ⁇ 128 divided region SF4 starting from the detection start coordinate S4 (Cx4, Cy4) shown in FIG. 26D is divided into two in the second direction Dy based on the center coordinates of the finger. Subframes are assigned in order.
  • the divided image generation unit 47 in the subsequent stage generates divided images of two subframes
  • the divided image receiving unit 53 of the processing unit 50 corresponds to the divided region SF4 including the detection start coordinates S4 (Cx4, Cy4).
  • the divided images of the two subframes are stored in the first storage unit 54 as buffering data.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Image Input (AREA)
  • Collating Specific Patterns (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

センサ部に接触又は近接する被検出体を検出する第1期間と、被検出体の表面の凹凸を検出する第2期間と、を有する。パスワードの入力キーとして、センサ部の検出領域内に複数の第1領域が設けられ、パスワードのキー入力ごとに、第1期間において検出された第1領域内のタッチ検出座標を中心座標とする第2領域内において相対的に異なる分割領域を割り当て、パスワードのキー入力ごとに第2期間において分割領域で取得される複数の分割イメージを合成して、指紋イメージを生成する。

Description

個人認証システム、個人認証装置、表示装置、及び個人認証方法
 本発明は、個人認証システム、個人認証装置、表示装置、及び個人認証方法に関する。
 既存の個人認証の手法として、パスワードによる個人認証のセキュリティレベルが高いとされている。一方、パスワードによる個人認証では、パスワードが分かれば本人以外であっても認証可能であるため、なりすましによる不正アクセスが懸念される。このため、パスワード認証と指紋や顔等の生体認証とを組み合わせてセキュリティを強化する手法が考えられるが、複数の認証手段を設けるとユーザーの利便性が損なわれる可能性がある。例えば、ユーザーが入力したキーの指紋を検出し、パスワード認証と指紋認証とを組み合わせてセキュリティを強化する個人認証手段が開示されている(例えば、特許文献1参照)。
特開2006-85559号公報
 パスワード入力の際にキーにタッチした状態が維持される時間は極めて短い。このため、上記従来技術では高精度な指紋読み取りが出来ず、指紋イメージが登録されている場合でも認証に失敗する可能性がある。
 本発明は、利便性を損ねずセキュリティの強化と認証精度の向上とを両立することができる個人認証システム、個人認証装置、表示装置、及び個人認証方法を提供することを目的とする。
 本開示の一態様に係る個人認証システムは、センサ部に接触又は近接する被検出体を検出する第1期間と、前記被検出体の表面の凹凸を検出する第2期間と、を有する検出装置と、前記検出装置の出力に応じた処理を行う制御装置と、を備え、前記検出装置は、パスワードの入力キーとして、前記センサ部の検出領域内に複数の第1領域が設けられ、前記パスワードのキー入力ごとに、前記第1期間において検出された前記第1領域内のタッチ検出座標を中心座標とする第2領域内において相対的に異なる分割領域を割り当て、前記パスワードのキー入力ごとに、前記第2期間において分割領域で取得される分割イメージを前記制御装置に出力し、前記制御装置は、前記パスワードのキー入力ごとに取得した複数の分割イメージを合成して、指紋イメージを生成する。
 本開示の一態様に係る個人認証装置は、センサ部に接触又は近接する被検出体を検出する第1期間と、前記被検出体の表面の凹凸を検出する第2期間と、を有する検出部と、前記検出部の出力に応じた処理を行う処理部と、を備え、前記検出部は、パスワードの入力キーとして、前記センサ部の検出領域内に複数の第1領域が設けられ、前記パスワードのキー入力ごとに、前記第1期間において検出された前記第1領域内のタッチ検出座標を中心座標とする第2領域内において相対的に異なる分割領域を割り当て、前記パスワードのキー入力ごとに、前記第2期間において分割領域で取得される分割イメージを前記処理部に出力し、前記処理部は、前記パスワードのキー入力ごとに取得した複数の分割イメージを合成して、指紋イメージを生成する。
 本開示の一態様に係る表示装置は、上記個人認証装置と、画像を表示するための表示領域が前記個人認証装置の検出領域に重なって設けられている表示パネルと、を有する。
 本開示の一態様に係る個人認証方法は、センサ部に接触又は近接する被検出体を検出する第1期間と、前記被検出体の表面の凹凸を検出する第2期間と、を有し、パスワードの入力キーとして、前記センサ部の検出領域内に複数の第1領域が設けられ、前記パスワードのキー入力ごとに、前記第1期間において検出された前記第1領域内のタッチ検出座標を中心座標とする第2領域内において相対的に異なる分割領域を割り当て、前記パスワードのキー入力ごとに前記第2期間において分割領域で取得される複数の分割イメージを合成して、指紋イメージを生成する。
図1は、実施形態に係る個人認証システムを構成する検出装置を有する表示装置の平面図である。 図2は、図1のII-II’線に沿う断面図である。 図3Aは、実施形態に係る個人認証システムを示す平面図である。 図3Bは、実施形態に係る個人認証装置を示す平面図である。 図4Aは、実施形態1に係る個人認証システムの構成例を示すブロック図である。 図4Bは、実施形態1に係る個人認証装置の構成例を示すブロック図である。 図5は、相互静電容量方式のタッチ検出の基本原理を説明するための説明図である。 図6は、センサ基板の平面図である。 図7は、第1電極及び第2電極の一部を拡大して示す平面図である。 図8は、図7のVII-VII’線に沿う断面図である。 図9は、第1期間と第2期間との切替動作の一例を示すタイミングチャートである。 図10は、第1検出モードの一例を示す図である。 図11は、第2検出モードの一例を示す図である。 図12は、第3検出モードの一例を示す図である。 図13は、第4検出モードの一例を示す図である。 図14は、実施形態1に係る個人認証方法における検出領域の一例を示す図である。 図15は、第1領域と第2領域との位置関係を示す図である。 図16は、実施形態1におけるイメージ合成後の指紋イメージを示す図である。 図17Aは、実施形態1に係る個人認証方法における分割イメージの取得領域を説明する第1図である。 図17Bは、実施形態1に係る個人認証方法における分割イメージの取得領域を説明する第2図である。 図17Cは、実施形態1に係る個人認証方法における分割イメージの取得領域を説明する第3図である。 図17Dは、実施形態1に係る個人認証方法における分割イメージの取得領域を説明する第4図である。 図18は、実施形態1に係る個人認証システム及び個人認証装置における個人認証用データ取得処理の一例を示すフローチャートである。 図19は、実施形態1に係る個人認証システム及び個人認証装置における個人認証処理の一例を示すフローチャートである。 図20は、実施形態1に係る個人認証システム及び個人認証装置におけるパスワード認証処理の一例を示すサブフローチャートである。 図21は、実施形態1に係る個人認証システム及び個人認証装置における指紋認証処理の一例を示すサブフローチャートである。 図22は、実施形態1に係る個人認証システム及び個人認証装置における処理の具体例を示すシーケンス図である。 図23Aは、実施形態1の変形例に係る個人認証方法におけるイメージ取得領域を説明する第1図である。 図23Bは、実施形態1の変形例に係る個人認証方法におけるイメージ取得領域を説明する第2図である。 図23Cは、実施形態1の変形例に係る個人認証方法におけるイメージ取得領域を説明する第3図である。 図23Dは、実施形態1の変形例に係る個人認証方法におけるイメージ取得領域を説明する第4図である。 図24は、実施形態2におけるイメージ合成後の指紋イメージを示す図である。 図25Aは、実施形態2に係る個人認証方法における分割イメージの取得領域を説明する第1図である。 図25Bは、実施形態2に係る個人認証方法における分割イメージの取得領域を説明する第2図である。 図25Cは、実施形態2に係る個人認証方法における分割イメージの取得領域を説明する第3図である。 図25Dは、実施形態2に係る個人認証方法における分割イメージの取得領域を説明する第4図である。 図26Aは、実施形態2の変形例に係る個人認証方法におけるイメージ取得領域を説明する第1図である。 図26Bは、実施形態2の変形例に係る個人認証方法におけるイメージ取得領域を説明する第2図である。 図26Cは、実施形態2の変形例に係る個人認証方法におけるイメージ取得領域を説明する第3図である。 図26Dは、実施形態2の変形例に係る個人認証方法におけるイメージ取得領域を説明する第4図である。
 発明を実施するための形態(実施形態)につき、図面を参照しつつ詳細に説明する。以下の実施形態に記載した内容により本発明が限定されるものではない。また、以下に記載した構成要素には、当業者が容易に想定できるもの、実質的に同一のものが含まれる。さらに、以下に記載した構成要素は適宜組み合わせることが可能である。なお、開示はあくまで一例にすぎず、当業者において、発明の主旨を保っての適宜変更について容易に想到し得るものについては、当然に本発明の範囲に含有されるものである。また、図面は説明をより明確にするため、実際の態様に比べ、各部の幅、厚さ、形状等について模式的に表される場合があるが、あくまで一例であって、本発明の解釈を限定するものではない。また、本明細書と各図において、既出の図に関して前述したものと同様の要素には、同一の符号を付して、詳細な説明を適宜省略することがある。
 図1は、実施形態に係る個人認証システムを構成する検出装置を有する表示装置の平面図である。図2は、図1のII-II’線に沿う断面図である。図1及び図2に示すように、本実施形態の表示装置100は、表示領域AAと、額縁領域GAと、検出領域FAとを有する。表示領域AAは表示パネル30の画像を表示する領域である。額縁領域GAは、表示領域AAの外側の領域である。検出領域FAは、接触又は近接する指等の表面の凹凸を検出する領域である。検出領域FAは、表示領域AAの全面に重なって設けられる。
 図2に示すように、本実施形態の表示装置100は、カバー部材101と、検出装置2と、表示パネル30とを含む。カバー部材101は、第1面101aと、第1面101aと反対側の第2面101bとを有する板状の部材である。カバー部材101の第1面101aは、検出装置2の検出面であり、検出面に被検出体が接触することにより、当該被検出体の検出面上における平面的な座標位置、及び当該被検出体の表面の凹凸が検出される。なお、本実施形態においては、被検出体は使用者の手指であり、被検出体の表面の凹凸とは指紋を含む。同時に、カバー部材101の第1面101aは、表示パネル30の画像を表示する表示面であり、使用者が当該画像を観察する観察面ともなる。カバー部材101の第2面101b側に、表示パネル30及び検出装置2のセンサ部10が設けられる。カバー部材101はセンサ部10及び表示パネル30を保護するための部材であり、センサ部10及び表示パネル30を覆って設けられる。カバー部材101は、例えばガラス基板、又は樹脂基板である。
 なお、カバー部材101、センサ部10及び表示パネル30は、平面視で長方形状である場合に限られず、円形状、長円形状、或いは、これらの外形形状の一部を欠落させた異形状の構成であってもよい。また、例えば、カバー部材101が円形状であり、センサ部10及び表示パネル30が正多角形状等である場合のように、カバー部材101と、センサ部10及び表示パネル30との外形形状が異なっていてもよい。カバー部材101は、平板状のみならず、例えば表示領域AAが曲面で構成され、或いは額縁領域GAが表示パネル30側に湾曲する等、曲面を有する曲面ディスプレイも採用可能である。
 図1及び図2に示すように、額縁領域GAにおいて、カバー部材101の第2面101bに加飾層110が設けられている。加飾層110は、カバー部材101よりも光の透過率が小さい着色層である。加飾層110は、額縁領域GAに重畳して設けられる配線や回路等が観察者に視認されることを抑制することができる。図2に示す例では、加飾層110は第2面101bに設けられているが、第1面101aに設けられていてもよい。また、加飾層110は、単層に限定されず、複数の層を重ねた構成であってもよい。
 検出装置2は、カバー部材101の第1面101aに接触又は近接する指Fin等の表面の凹凸を検出するセンサ部10を含む。図2に示すように、検出装置2のセンサ部10は、表示パネル30の上に設けられる。すなわち、センサ部10は、カバー部材101と表示パネル30との間に設けられ、第1面101aに対して垂直な方向から見たときに、表示パネル30と重なっている。センサ部10には、フレキシブルプリント基板76が接続されており、センサ部10からの検出信号を外部に出力することができる。
 センサ部10の一方の面は、接着層71を介してカバー部材101と貼り合わされる。また、センサ部10の他方の面は、接着層72を介して、表示パネル30の偏光板35と貼り合わされる。接着層71は、例えば、液状のUV硬化型樹脂である光学透明樹脂(OCR:Optical Clear Resin又は、LOCA:Liquid Optically Clear Adhesive)である。接着層72は、例えば、光学粘着フィルム(OCA:Optical Clear Adhesive)である。
 表示パネル30は、第1基板31と、第2基板32と、第1基板31の下側に設けられた偏光板34と、第2基板32の上側に設けられた偏光板35とを有する。第1基板31にフレキシブルプリント基板75が接続されている。第1基板31と、第2基板32との間には、表示機能層として液晶表示素子が設けられる。すなわち、表示パネル30は、液晶パネルである。これに限定されず、表示パネル30は、例えば、有機ELディスプレイパネル(OLED: Organic Light Emitting Diode)や無機ELディスプレイ(マイクロLED、ミニLED)であってもよい。或いは、表示パネルは、表示素子として液晶素子を用いた液晶表示パネル(LCD:Liquid Crystal Display)や、表示素子として電気泳動素子を用いた電気泳動型表示パネル(EPD:Electrophoretic Display)であってもよい。
 図2に示すように、センサ部10は、カバー部材101の第2面101bと垂直な方向において、表示パネル30よりもカバー部材101に近い位置に配置される。このため、例えば、表示パネル30と一体に指紋検出用の検出電極を設けた場合に比べ、検出電極と、検出面である第1面101aとの距離を小さくすることができる。したがって、本実施形態の検出装置2を備える表示装置100によれば、検出性能を向上させることができる。
 なお、表示装置100は、センサ部10と表示パネル30がそれぞれ独立している所謂アウトセル方式の構成であるが、センサ部10と表示パネル30の一部の基板、又は、電極が兼用された所謂インセル方式やオンセル方式の構成であってもよい。
(実施形態1)
 図3Aは、実施形態に係る個人認証システムを示す平面図である。図3Aに示すように、個人認証システム1は、検出装置2と、制御装置9と、を含む。検出装置2は、基板3と、配線基板4と、を有する。制御装置9は、制御基板5を有する。基板3には、配線基板4を介して制御基板5が電気的に接続される。
 基板3は、上述した検出領域AA及び周辺領域GAを有する。センサ部10は、検出領域AAに設けられる。第1電極選択回路15及び検出電極選択回路16は、周辺領域GAに設けられる。
 配線基板4には、検出回路6が設けられている。検出回路6は、例えば検出用ICに設けられている。
 制御基板5には、制御回路7が設けられている。制御回路7は、例えばFPGA(Field Programmable Gate Array)で構成されるホストICに設けられている。制御回路7は、センサ部10、第1電極選択回路15、検出電極選択回路16、及び検出回路6に制御信号を供給して、センサ部10の検出動作を制御する。なお、第1電極選択回路15及び検出電極選択回路16のいずれかのうち一方又は両方を検出回路6又は制御回路7に設ける構成も採用可能である。
 第1電極選択回路15は、周辺領域GAのうち第2方向Dyに沿って延在する領域に設けられる。検出電極選択回路16は、周辺領域GAのうち第1方向Dxに沿って延在する領域に設けられ、センサ部10と検出回路6との間に設けられる。
 なお、第1方向Dxは、基板3と平行な面内の一方向である。第2方向Dyは、基板3と平行な面内の一方向であり、第1方向Dxと直交する方向である。なお、第2方向Dyは、第1方向Dxと直交しないで交差してもよい。また、第3方向Dzは、第1方向Dx及び第2方向Dyと直交する方向であり、基板3の法線方向である。
 図3Bは、実施形態に係る個人認証装置を示す平面図である。図3Bに示すように、個人認証装置1aは、図3Aに示す個人認証システム1の検出装置2に対応する。
 図3Bに示す個人認証装置1aにおいて、配線基板4には、個人認証回路8が設けられている。個人認証回路8は、例えば検出用ICに設けられている。
 図3Bに示す例において、制御装置9aの制御基板5には、制御回路7aが設けられている。図3Aに示す個人認証システム1の検出回路6と図3Bに示す個人認証装置1aの個人認証回路8とは、割り当てられた機能が異なる。
 次に個人認証システム1及び個人認証装置1aの詳細な構成について説明する。
 図4Aは、実施形態1に係る個人認証システムの構成例を示すブロック図である。図4Aに示すように、個人認証システム1は、検出装置2と、検出装置2のホストデバイスとしての制御装置9とを含む。検出装置2は、センサ部10と、検出制御部11と、第1電極選択回路15と、検出電極選択回路16と、検出部40を備えた検出回路6と、を含む。制御装置9は、処理部50を備えた制御回路7を含む。
 図4Bは、実施形態1に係る個人認証装置の構成例を示すブロック図である。図4Bに示すように、個人認証装置1aは、センサ部10と、検出制御部11と、第1電極選択回路15と、検出電極選択回路16と、検出部40及び処理部50を備えた個人認証回路8と、を含む。すなわち、図3B及び図4Bに示す個人認証装置1aでは、図3A及び図4Aに示す個人認証システム1の制御回路7が有する処理部50の機能を、個人認証回路8が有する構成としている。以下の説明における各構成部は、図3A及び図4Aに示す個人認証システム1、及び、図3B及び図4Bに示す個人認証装置1aの何れにも適用可能である。
 センサ部10は、第1電極選択回路15から供給される第2駆動信号Vtx2に従って検出を行う。すなわち、第1電極選択回路15の動作により複数の第1電極Tx(図6参照)を個々に又は同時に選択する。そして、第1電極選択回路15は、選択された複数の第1電極Txのそれぞれに対して、所定の符号に基づいて位相が決められた第2駆動信号Vtx2を供給する。センサ部10は、相互静電容量方式の検出原理に基づいて、接触又は近接する指Fin又は手の表面の凹凸の変化を電気信号の変化に変換して検出回路6に出力する。
 また、センサ部10は、第1電極選択回路15から供給される第1駆動信号Vtx1に従って、接触又は近接する指Fin等の位置(座標)の検出も可能となっている。センサ部10は、複数の第1電極Txを含む第1電極ブロックごと又は複数本に1本の割合で第1電極Txを走査し、検出領域FA全体にわたって検出する。センサ部10は、相互静電容量方式の検出原理に基づいて、検出面に接触している指Finの有無に伴う電気信号の変化を検出回路6に出力する。なお、上記第1駆動信号Vtx1による検出面のタッチ検出は、指の座標さえ検出・特定できればよいので、検出解像度は第2駆動信号Vtx2による検出よりも低い。
 検出制御部11は、第1電極選択回路15、検出電極選択回路16及び検出部40に対してそれぞれ制御信号を供給し、これらの動作を制御する回路である。検出制御部11は、駆動部11aと、クロック信号出力部11bとを含む。駆動部11aは、電源電圧VPを第1電極選択回路15に供給する。検出制御部11は、クロック信号出力部11bのクロック信号に基づいて、各種制御信号Vctrlを第1電極選択回路15に供給する。
 第1電極選択回路15は、各種制御信号Vctrlに基づいて複数の第1電極Txを同時に又は個々に選択する回路である。第1電極選択回路15は、各種制御信号Vctrlと1又は複数の電源電圧VPに基づいて、選択された複数の第1電極Txに第1駆動信号Vtx1又は第2駆動信号Vtx2を供給する。第1駆動信号Vtx1と第2駆動信号Vtx2は、それぞれ波長や振幅を含む波形そのものが異なるものであることはもちろん、波形を同じくする一方センサ部10に出力される期間が異なるものも含む。センサ部10は、第1電極選択回路15による第1電極Txの選択の状態を異ならせることで、第1検出モードM1、第2検出モードM2、第3検出モードM3、第4検出モードM4(図10から図13参照)を実現できる。
 検出電極選択回路16は、複数の第2電極Rx(図6参照)を同時に選択するスイッチ回路である。検出電極選択回路16は、検出制御部11から供給される第2電極選択信号Vhselに基づいて、複数の第2電極Rxを選択し、当該複数の第2電極Rxと検出回路6とを接続する。
 検出部40は、検出制御部11から供給される制御信号と、センサ部10から供給される第1検出信号Vdet1及び第2検出信号Vdet2に基づいて、比較的大きなピッチで検出面への指のタッチの有無を検出し、また、比較的細かいピッチで当該指の指紋を検出する回路である。検出部40の各構成部は、検出制御部11から供給される制御信号に基づき、同期して動作する。検出部40は、各構成部として、検出信号増幅部42と、A/D変換部43と、信号処理部44と、座標抽出部45と、指紋検出領域設定部46と、分割イメージ生成部47と、検出タイミング制御部48と、を備える。なお、以下の説明において第1検出信号Vdet1及び第2検出信号Vdet2を区別して説明する必要がない場合には、単に検出信号Vdetと表す。
 検出タイミング制御部48は、検出制御部11から供給される制御信号に基づいて、検出信号増幅部42と、A/D変換部43と、信号処理部44と、座標抽出部45と、分割イメージ生成部47と、が同期して動作するように制御する。
 検出信号増幅部42は、検出信号Vdetを増幅する。A/D変換部43は、検出信号増幅部42から出力されるアナログ信号をデジタル信号に変換する。
 信号処理部44は、A/D変換部43の出力信号に基づいて、所定の復号処理を行う。具体的に、信号処理部44は、検出信号Vdetの差分の信号(絶対値|ΔV|)を取り出す処理を行う。信号処理部44は、絶対値|ΔV|を所定のしきい値電圧と比較して出力する。
 座標抽出部45は、信号処理部44の復号処理結果に基づいて、センサ部10に接触又は近接する被検出体の座標(以下、「タッチ検出座標」とも称する)を抽出し、処理部50に出力する。
 指紋検出領域設定部46は、処理部50から出力される検出開始座標から、検出を行う領域を設定する。検出開始座標及び検出を行う領域については後述する。
 分割イメージ生成部47は、信号処理部44の復号処理結果に基づき、被検出体の表面の凹凸を抽出して分割イメージを生成する。分割イメージについては後述するが、この分割イメージの生成手法により本開示が限定されるものではない。
 本実施形態において、図4Aに示す個人認証システム1及び図4Bに示す個人認証装置1aは、静電容量型の検出原理に基づいて、センサ部10の検出面に接触する指Finを検出する(以下、「タッチ検出」と称する)。また、個人認証システム1及び個人認証装置1aは、静電容量型の検出原理に基づいて、センサ部10に接触している指Finの表面の凹凸を検出することで指紋を検出する(以下、「指紋検出」と称する)。
 なお、静電容量型のタッチ検出動作において、指Finの接触によって容量変化が生じている状態を、以下「タッチ状態」と称する。また、指Finによる容量変化が生じていない状態を、以下「非タッチ状態」と称する。
 ここで、図5を参照して、本実施形態の個人認証システム1及び個人認証装置1aの相互静電容量方式によるタッチ検出の基本原理について説明する。図5は、相互静電容量方式のタッチ検出の基本原理を説明するための説明図である。なお、図5は、検出回路を併せて示している。
 図5に示すように、容量素子C1は、誘電体Dを挟んで互いに対向配置された一対の電極、駆動電極E1及び検出電極E2を備えている。容量素子C1は、駆動電極E1と検出電極E2との対向面同士の間に形成される電界(図示しない)に加え、駆動電極E1の端部から検出電極E2の上面に向かって延びる電界が生じる。容量素子C1は、その一端が交流信号源(駆動信号源)に接続され、他端は電圧検出器DETに接続される。電圧検出器DETは、例えば、図4に示す検出部40に含まれる積分回路である。
 交流信号源から駆動電極E1(容量素子C1の一端)に所定の周波数(例えば数kHz~数百kHz程度)の交流矩形波Sgが印加される。電圧検出器DETには、容量素子C1の容量値に応じた電流が流れる。電圧検出器DETは、交流矩形波Sgに応じた電流の変動を電圧の変動に変換する。
 指によって形成される静電容量C2が、検出電極E2と接触し、又は接触と同視し得るほど近傍近づくにつれて、駆動電極E1と検出電極E2との間にあるフリンジ分の電気力線が導体(指)により遮られる。このため、容量素子C1は、非接触状態での容量値よりも接近に応じて徐々に容量値の小さい容量素子として作用する。
 電圧検出器DETから出力される電圧信号の振幅は、非接触状態に比べて指Finが接触状態に近づくにつれて小さくなる。この電圧差分の絶対値|ΔV|は、検出面に接触する指Finの影響に応じて変化することになる。検出部40は、絶対値|ΔV|を所定のしきい値電圧と比較することで、指Finの検出面への接触/非接触を判断する。なお、本実施形態においては、かかる判断は、検出部40の信号処理部44と座標抽出部45のいずれか一方又は両方の協働によってなされる。
 また、検出部40は、絶対値|ΔV|に基づいて指Finの凹凸等を判断する。当該凹凸の判断においても絶対値|ΔV|と所定のしきい値と比較することで判断することも可能であるが、当該しきい値は指Finの接触/近接を判断するしきい値とは異なる値を採用することもできるし、複数のしきい値を用いることも可能である。なお、本実施形態においては、かかる判断は、検出部40の信号処理部44によってなされる。このようにして、検出部40は相互静電容量方式のタッチ検出の基本原理に基づいてタッチ検出及び指紋の検出が可能となる。
 なお、本開示において、指紋イメージとは、複数の第2電極Rxからの出力に基づいて形成される面情報としてのデータであって、検出面における1又は数か所の座標位置を特定するタッチ座標(点情報)とは異なる。より具体的には、指紋イメージとは、複数の検出単位領域における検出データの集合体で、各検出データとは、例えば、検出単位領域の座標及び各座標位置における凹凸の判断結果を含む。当該凹凸の判断は、上述の如くあるしきい値を境としてしきい値よりも検出結果が大きいと凹と判断し、小さいと凸と判断するといったような2値の判断結果を採用することができる。また、これに替えて、実際の検出信号を複数のしきい値に基づいてより細かくデジタル化したデータであっても構わない。また、各座標における出力信号の大きさをそのままRAWデータとして備えたデータであっても構わない。これら座標ごとのデータが集積されることにより、二次元の広がりを持った面情報が形成される。
 なお、本実施形態は被検出体としての指Fin及びその指紋を検出対象としているが、被検出体は指に限定されず、被検出体の凹凸としても、指紋に限定されないことは言うまでもない。
 次に、第1電極Tx及び第2電極Rxの構成について説明する。図6は、センサ基板の平面図である。図7は、第1電極及び第2電極の一部を拡大して示す平面図である。図8は、図7のVII-VII’線に沿う断面図である。
 図6に示すように、センサ基板21上に複数の第1電極Tx及び第2電極Rxが設けられる。センサ基板21は、可視光を透過可能な透光性を有するガラス基板である。又は、センサ基板21は、ポリイミド等の樹脂で構成された透光性の樹脂基板又は樹脂フィルムであってもよい。センサ部10は、透光性を有するセンサである。
 第1電極Txは、第1方向Dxに延びており、第2方向Dyに複数配列される。第2電極Rxは、第2方向Dyに延びており、第1方向Dxに複数配列される。第2電極Rxは、平面視で、第1電極Txと交差する方向に延びている。各第2電極Rxは、額縁配線(図示せず)を介して、センサ基板21の額縁領域GAの短辺側に設けられたフレキシブルプリント基板76に接続される。第1電極Tx及び第2電極Rxは、検出領域FAに設けられている。第1電極Txは、ITO(Indium Tin Oxide)等の透光性の導電材料で構成されている。第2電極Rxは、アルミニウム又はアルミニウム合金などの金属材料で構成されている。なお、第1電極Txを金属材料で構成し、第2電極RxをITOで形成してもよい。ただし、第2電極Rxを金属材料とすることで、検出信号Vdetに係る抵抗を低減することができる。
 なお、第1方向Dxは、センサ基板21と平行な面内の一方向であり、例えば、検出領域FAの一辺と平行な方向である。また、第2方向Dyは、センサ基板21と平行な面内の一方向であり、第1方向Dxと直交する方向である。なお、第2方向Dyは、第1方向Dxと直交しないで交差してもよい。また、本明細書において、「平面視」とは、センサ基板21に垂直な方向から見た場合を示す。
 第2電極Rxと第1電極Txとの交差部分に、それぞれ静電容量が形成される。センサ部10において、相互静電容量方式のタッチ検出動作を行う際、第1電極選択回路15は、第1電極Txを選択し、選択された第1電極Txに同時に第1駆動信号Vtx1又は第2駆動信号Vtx2を供給する。そして、接触又は近接する指等の表面の凹凸による容量変化に応じた検出信号Vdetが第2電極Rxから出力されることにより、指紋検出が行われる。又は、接触又は近接する指等による容量変化に応じた検出信号Vdetが第2電極Rxから出力されることにより、タッチ検出が行われる。
 図6に示すように、第1電極選択回路15及び検出電極選択回路16等の各種回路は、センサ基板21の額縁領域GAに設けられている。第1電極選択回路15は、第1選択回路151、第2選択回路152、第3選択回路153及び第1電極ブロック選択回路154を含む。ただし、これはあくまで一例である。各種回路の少なくとも一部は、フレキシブルプリント基板76に実装された検出用IC(Integrated Circuit)に含まれていてもよい。或いは、各種回路の少なくとも一部は、外部の制御基板に設けられていてもよい。また、第1選択回路151、第2選択回路152、第3選択回路153及び第1電極ブロック選択回路154は、それぞれ個別の回路として設けられる構成に限定されない。第1選択回路151、第2選択回路152、第3選択回路153及び第1電極ブロック選択回路154の機能を含む1つの集積回路として、第1電極選択回路15が設けられていてもよい。第1電極選択回路15は、半導体集積回路(IC)であってもよい。
 次に、第1電極Tx及び第2電極Rxの構成について説明する。図7に示すように、第2電極Rxは、ジグザグ状の線であり、全体として第2方向Dyに長手を有する。例えば、第2電極Rxは、複数の第1直線部26aと、複数の第2直線部26bと、複数の屈曲部26xと、を有する。第2直線部26bは、第1直線部26aと交差する方向に延びている。また、屈曲部26xは、第1直線部26aと第2直線部26bとを接続している。
 第1直線部26aは、第1方向Dx及び第2方向Dyと交差する方向に延びている。第2直線部26bも、第1方向Dx及び第2方向Dyと交差する方向に延びている。第1直線部26aと第2直線部26bは、第1方向Dxに平行な仮想線(図示せず)を軸に、対称となるように配置されている。第2電極Rxは、第1直線部26aと第2直線部26bとが第2方向Dyに交互に接続される。
 複数の第2電極Rxの各々において、第2方向Dyにおける屈曲部26xの配置間隔をPryとする。また、隣り合う第2電極Rx間において、第1方向Dxにおける屈曲部26xの配置間隔をPrxとする。本実施形態では、例えば、Prx<Pryであることが好ましい。なお、第2電極Rxは、ジグザグ状に限定されず、波線状、直線状など他の形状であってもよい。
 図7に示すように、複数の第1電極Tx-1、Tx-2、Tx-3、Tx-4…は、複数の電極部23a、23bと、複数の接続部24と、をそれぞれ有する。なお、以下の説明において、第1電極Tx-1、Tx-2、Tx-3、Tx-4…を区別して説明する必要がない場合には、単に第1電極Txと表す。
 第2電極Rxの第2直線部26bと交差する第1電極Tx-1、Tx-2は、第2直線部26bと平行な2辺を有する電極部23aを備える。また、第2電極Rxの第1直線部26aと交差する第1電極Tx-3、Tx-4は、第1直線部26aと平行な2辺を有する電極部23bを備える。言い換えると、電極部23a、23bは、第2電極Rxに沿って複数配置されている。これにより、平面視で、ジグザグ状の第2電極Rxと、電極部23a、23bとの離隔距離を一定の大きさにすることができる。
 複数の第1電極Tx-1、Tx-2において、複数の電極部23aは第1方向Dxに並んでおり、互いに離れて配置されている。また、複数の第1電極Txの各々において、接続部24は、複数の電極部23aのうち隣り合う電極部23aを接続している。また、平面視で、複数の第2電極Rxの各々は、隣り合う電極部23aの間を通って接続部24と交差している。第1電極Tx-3、Tx-4も同様の構成である。第2電極Rxは、金属細線であり、第2電極Rxの第1方向Dxの幅は、電極部23a、23bの第1方向Dxの幅よりも小さい。このような構成により、第1電極Txと第2電極Rxとが重なり合う面積が小さくなり、寄生容量を抑制することができる。
 また、第2方向Dyにおける第1電極Txの配置間隔をPtとする。配置間隔Ptは、第2電極Rxの屈曲部26xの配置間隔Pryの1/2程度である。なお、これに限定されず、配置間隔Ptは、配置間隔Pryの半整数倍以外であってもよい。配置間隔Ptは、例えば50μm以上、100μm以下である。また、1つの第1電極Txにおいて、第1方向Dxに隣り合う接続部24は、第2方向Dyでの配置間隔Pbを有して、互い違いに配置される。なお、電極部23a、23bは、それぞれ平行四辺形状であるが、その他の形状であってもよい。例えば、電極部23a、23bは、矩形状、多角形状、異形状であってもよい。
 次に、図7のVII-VII’線に沿う断面構造について説明する。なお、図8において、額縁領域GAの断面は、第1電極選択回路15に含まれる薄膜トランジスタTrを含む部分を切断した断面である。図8では、検出領域FAの層構造と額縁領域GAの層構造との関係を示すために、検出領域FAのVII-VII’線に沿う断面と、額縁領域GAの薄膜トランジスタTrを含む部分の断面とを、模式的に繋げて示している。
 図8に示すように、センサ基板21上の額縁領域GAに薄膜トランジスタTrが設けられている。薄膜トランジスタTrは、半導体層61と、ソース電極62と、ドレイン電極63と、ゲート電極64と、を含む。ゲート電極64は、センサ基板21上に設けられる。第1層間絶縁膜81は、センサ基板21上に設けられてゲート電極64を覆う。ゲート電極64の材料としては、アルミニウム(Al)、銅(Cu)、銀(Ag)、モリブデン(Mo)又はこれらの合金が用いられる。第1層間絶縁膜81の材料としては、シリコン酸化膜(SiO)、シリコン窒化膜(SiN)又はシリコン酸化窒化膜(SiON)が用いられる。また、第1層間絶縁膜81は単層に限定されず、積層構造の膜でもよい。例えば、第1層間絶縁膜81は、シリコン酸化膜上にシリコン窒化膜が形成された、積層構造の膜であってもよい。
 また、半導体層61は、第1層間絶縁膜81上に設けられる。第2層間絶縁膜82は、第1層間絶縁膜81上に設けられて半導体層61を覆う。第2層間絶縁膜82に設けられたコンタクトホールの底部では、半導体層61が露出している。半導体層61の材料としては、ポリシリコン又は酸化物半導体が用いられる。第2層間絶縁膜82の材料としては、シリコン酸化膜、シリコン窒化膜又はシリコン酸化窒化膜が用いられる。また、第2層間絶縁膜82は単層に限定されず、積層構造の膜でもよい。例えば、第2層間絶縁膜82は、シリコン酸化膜上にシリコン窒化膜が形成された、積層構造の膜であってもよい。
 また、ソース電極62と、ドレイン電極63とは、第2層間絶縁膜82上に設けられる。ソース電極62と、ドレイン電極63とは、それぞれ第2層間絶縁膜82に設けられたコンタクトホールを介して半導体層61に接続される。ソース電極62と、ドレイン電極63及び接続部24の材料としては、チタンとアルミニウムとの合金である、チタンアルミニウム(TiAl)が用いられる。
 さらに、第2層間絶縁膜82上には、絶縁性の樹脂層27と、第1電極Txの電極部23b及び接続部24が設けられている。額縁領域GAに設けられた樹脂層27は、ソース電極62及びドレイン電極63を覆っている。また、額縁領域GAに設けられた樹脂層27に設けられたコンタクトホールを介して、ドレイン電極63は、第1電極Txと電気的に接続される。
 一方、検出領域FAに設けられた樹脂層27は、第1樹脂層27Aと、第1樹脂層27Aよりも薄膜の第2樹脂層27Bとを有する。第1樹脂層27Aは、接続部24において、第2電極Rxの直下に位置する部位を覆っている。また、検出領域FAに設けられた第2樹脂層27Bは、接続部24において、電極部23bの直下に位置する部位を覆っている。
 第2樹脂層27BにはコンタクトホールH1、H2が設けられている。検出領域FAにおいて、電極部23bの周縁部は、コンタクトホールH1、H2を介して接続部24に接続されている。なお、この例では、電極部23bは第2層間絶縁膜82に接している。
 第2電極Rxは、第1樹脂層27A上に設けられている。第2電極Rxは、例えば、第1金属層141、第2金属層142及び第3金属層143を有する。第3金属層143上に第2金属層142が設けられており、第2金属層142上に第1金属層141が設けられている。例えば、第1金属層141、第3金属層143の材料には、モリブデン又はモリブデン合金が用いられている。第2金属層142の材料には、アルミニウム又はアルミニウム合金が用いられる。第1金属層141を構成するモリブデン又はモリブデン合金は、第2金属層142を構成するアルミニウム又はアルミニウム合金よりも可視光の反射率が低い。これにより、第2電極Rxの不可視化を図ることができる。
 樹脂層27、電極部23b及び第2電極Rx上に絶縁膜83が設けられている。絶縁膜83によって、第2電極Rxの上面及び側面は覆われている。絶縁膜83には、シリコン窒化膜など、高屈折率で低反射率の膜が用いられる。
 以上のような構成により、第1電極Txと第2電極Rxとは、同一のセンサ基板21の上に形成される。そして、第1電極Txと第2電極Rxとは、絶縁層である樹脂層27を介して異なる層に設けられる。
 以下、本実施形態に係る個人認証システム1及び個人認証装置1aにおける個人認証用データ取得期間について説明する。
 本開示において、個人認証システム1及び個人認証装置1aにおける個人認証用データ取得期間は、タッチ検出を実行するタッチ検出期間(座標検出期間)を設けた第1期間と、指紋検出を実行する指紋検出期間(面情報検出期間)を設けた第2期間と、を有している。図9は、第1期間と第2期間との切替動作の一例を示すタイミングチャートである。図9において、TPはタッチ検出期間(座標検出期間)を示し、FPは指紋検出期間(面情報検出期間)を示している。
 図9に示すように、本実施形態に係る個人認証システム1及び個人認証装置1aは、処理部50から出力される第1制御信号に基づき、第1期間から第2期間に移行する。また、本実施形態に係る個人認証システム1及び個人認証装置1aは、処理部50から出力される第2制御信号に基づき、第2期間から第1期間に移行する。
 次に、個人認証システム1及び個人認証装置1aにおける検出モードの具体例について説明する。図10は、第1検出モードの一例を示す図である。図11は、第2検出モードの一例を示す図である。図12は、第3検出モードの一例を示す図である。
 図10に示すように、第1検出モードM1において、個人認証システム1及び個人認証装置1aは、第2検出モードM2(図11参照)に比べて大きい第1検出ピッチPtsで、検出領域FAの全面を走査することで、指Fin等の検出、より具体的には、検出面における指の位置(検出面における指の座標位置)の検出を行う。第1検出モードM1では、第1電極選択回路15は、隣り合う又は所定のピッチで配される複数の第1電極Txを束ねて第1電極ブロックとし、該第1電極ブロックごとに第1駆動信号Vtx1を供給する。各第1電極ブロックに含まれる複数の第1電極Txには、同じ第1駆動信号Vtx1が供給される。これにより、第1検出モードM1では、後述する第2検出モードM2と比較して大きい第1検出ピッチPtsで検出ができる。なお、第1検出モードM1では、検出電極選択回路16は、隣り合う又は所定のピッチで配される複数の第2電極Rxを束ねて第2電極ブロックとし、該第2電極ブロックごとに第2駆動信号Vtx2を供給する構成としても良い。また、全ての第2電極Rxがそれぞれ検出部40に接続される態様であっても良い。
 図11に示すように、第2検出モードM2において、個人認証システム1及び個人認証装置1aは、第1検出モードM1(図10参照)に比べて小さい第2検出ピッチPfで、検出領域FAの全面を走査することで、指Fin等の検出、より具体的には、検出面における被検出体の表面の凹凸(例えば、検出面に接触している被検出体の指紋イメージ)の検出を行う。第2検出モードM2では、第1電極選択回路15は、複数の第1電極Txにそれぞれ所定の符号に基づいて位相が定められた第2駆動信号Vtx2を供給する。また、第1電極選択回路15は、各第1電極Txを個々に走査し、当該走査に伴って第2駆動信号Vtx2としてのパルス波を供給する構成も採用可能である。以下、第2駆動信号Vtx2を供給とは、これらいずれの態様も含むものとする。これにより、第2検出モードM2において、個人認証システム1及び個人認証装置1aは、第1検出モードM1と比較してより小さい第2検出ピッチPfで検出を行うことができる。より具体的には、マクロ的な視点で見た場合には検出面に指が接触している状態であっても、ミクロの視点で見ると指の表面の凹凸によって当該指の一部は検出面に接触し、一部は検出面からやや離間している、という状態になる。該第2検出モードM2では、当該ミクロ的な観点で見たときの被検出体の表面の凹凸(ここでは指の表面の凹凸、すなわち指紋)を検出するものである。なお、当該第2検出ピッチは、第1検出ピッチよりも小さいものであればよく、最も小さい第2検出ピッチは、隣り合う2本の第1電極又はそれらに交差する隣り合う2本の検出電極によって形成されるピッチである。
 第2検出モードM2において、個人認証システム1及び個人認証装置1aは、検出領域FAの全面で検出を行う。このため、個人認証システム1及び個人認証装置1aは、指紋検出のみに限定されず、例えば掌紋を検出することができる。或いは、個人認証システム1及び個人認証装置1aは、検出領域FAに接触又は近接する手の形状を検出し、指先の位置を特定することができる。この場合、指先が接触又は近接する領域のみで、信号処理や演算処理を行うことで指紋を検出することができる。
 指紋検出では、検出面において指紋検出を行う領域を検出面の一部の領域としても良い。例えば、図12に示すように、第3検出モードM3において、個人認証システム1及び個人認証装置1aは、検出領域FAのうち一部分の第1部分領域FA1において第2検出ピッチPfで検出を行う。この第3検出モードM3において、第1電極選択回路15は、第1部分領域FA1に含まれる複数の第1電極Txにのみ第2駆動信号Vtx2を供給する。第3検出モードM3においても、個人認証システム1及び個人認証装置1aは、第2検出ピッチPfで検出を行うことができる。例えば、第3検出モードM3では、第1部分領域FA1のみで検出を行うため、検出に要する時間を短縮し、また、検出部40(図4A、図4B参照)が行う処理を低減できる。第1部分領域FA1は、あらかじめ設定された固定領域である。ただし、第1部分領域FA1の位置や大きさは、適宜変更してもよい。
 上述した第2検出モードM2に代えて、第3検出モードM3により指紋検出を実行する態様であっても良い。具体的に、第1期間では、第1検出モードM1によりタッチ検出を実行し、第2期間では、第3検出モードM3による指紋検出を実行する。これにより、指紋検出期間FPを短縮することができ、検出に要する時間を短縮できる。
 図13は、第4検出モードの一例を示す図である。例えば、個人認証システム1及び個人認証装置1aは、第1期間に第1検出モードM1のタッチ検出を実行し、検出面上に指が接触しているか否かを検出する。指Fin等が検出された場合、個人認証システム1及び個人認証装置1aは、第2期間に移行し、第4検出モードM4による指紋検出を実行する。この第4検出モードM4において、個人認証システム1及び個人認証装置1aは、指Fin等が検出された位置を含む所定の領域である第2部分領域FA2においてのみ、第2検出ピッチPfで検出を行う。第2部分領域FA2の位置や大きさは、タッチ検出期間TPにおいて検出された指Fin等の情報に基づいて変更できる。このように、第1検出モードM1の検出結果に基づいて第4検出モードM4の指紋検出を行ってもよい。これにより、第2部分領域FA2の面積を小さくすることができるため、検出領域全面に亘って指紋を検出する場合と比べて指紋検出に要する時間を大幅に短縮できる。
 以下、本開示の個人認証方法について説明する。なお、個人認証システム1及び個人認証装置1aにおける個人認証方法は、以下に示す個人認証方法に限定されるものではない。
 図14は、実施形態1に係る個人認証方法における検出領域の一例を示す図である。本実施形態に係る個人認証方法では、図14に示すように、検出領域FA内にそれぞれ異なる入力キーが割り当てられた複数の第1領域KYが設けられている。図14では、入力キーとして「0」から「9」までの10個の数字がそれぞれ割り当てられた10個の第1領域KY「0」,「1」,「2」,・・・,「9」が設けられた例を示している。なお、入力キーは数字に限らず、例えば大文字や小文字のアルファベットや、「♯」や「*」等の記号を含む態様であっても良い。
 本実施形態に係る個人認証方法において、個人認証システム1及び個人認証装置1aでは、上述した第2検出モードM2によりタッチ検出を行い、ユーザーが入力したキーを識別する。具体的に、個人認証システム1及び個人認証装置1aは、ユーザーがタッチした検出領域FA上の座標が、例えば第1領域KY「5」内の座標である場合に、入力キー「5」が入力されたと識別する。
 また、本実施形態に係る個人認証方法では、ユーザーがタッチした検出領域FA上の座標が、第1領域KY「0」,「1」,「2」,・・・,「9」内の何れかに該当するとき、この座標を中心座標Cとする所定領域を第2領域FGとし、当該第2領域FGを、指紋イメージを取得する際の領域とする。
 図15は、第1領域と第2領域との位置関係を示す図である。図15では、個人認証用のパスワード入力において、入力キー「5」が入力されたと識別した座標を第2領域FGの中心座標C(Cx,Cy)とした例を示している。すなわち、ユーザーは入力キー「5」をタッチすべく検出面をタッチしたが、当該入力キー「5」の中心位置からややずれた位置をタッチし、検出部や処理部を経てかかるタッチを演算処理した結果、当該ユーザーがタッチした中心位置を中心座標C(Cx,Cy)として認識された、ということになる。そして、当該中心座標Cとの関係で指紋検出のための第2領域FGが決定される。
 本実施形態に係る個人認証方法では、パスワードの各キーが入力されるごとに、図15に示す第2領域FGよりも小さい領域のイメージを取得する。これにより、パスワード入力の際に各入力キーにタッチした状態が維持される時間に検出すべき検出領域、及びその結果として取得されるイメージを可及的小さくできる。このため、パスワードのキー入力ごとに取得するイメージの精度を高めることができる。
 そして、パスワードのキー入力ごとに取得したイメージを合成して、個人認証用の指紋イメージを生成する。これにより、高精度な指紋イメージを取得することができる。
 本実施形態に係る個人認証方法において、タッチ検出及び指紋検出におけるスキャン方向は、第2方向Dyに沿う方向である。図16は、実施形態1におけるイメージ合成後の指紋イメージを示す図である。本実施形態では、図16に示すように、指紋のスキャン方向に4分割された分割イメージを合成して指紋イメージを生成する例について説明する。図16では、指紋イメージを取得するための第2領域FGに対応して、各分割イメージを取得するための分割領域SF1,SF2,SF3,SF4が相対的に指紋のスキャン方向に並ぶように割り当てられた例を示している。
 なお、第2領域FGの分割数、すなわち、分割領域SFの数は4つに限らない。第2領域FGの分割数は、パスワードの桁数に依存する。例えば、図16に示すように、第2領域FGに対応して4つの分割領域SF1,SF2,SF3,SF4を割り当てる場合、パスワードの桁数は4以上である必要がある。換言すれば、第2領域FGの分割数は、パスワードの桁数以下である必要がある。
 図4A及び図4Bに戻り、処理部50は、タッチ判定部51と、検出開始座標設定部52と、分割イメージ受信部53と、第1記憶部54と、指紋イメージ生成部55と、第2記憶部56と、第3記憶部57と、指紋認証部58と、指紋認証結果記憶部59と、パスワード記憶部511と、パスワード認証部512と、パスワード認証結果記憶部513と、個人認証部514と、個人認証結果記憶部515と、を備える。第1記憶部54、第2記憶部56、第3記憶部57、指紋認証結果記憶部59、パスワード記憶部511、パスワード認証結果記憶部513、及び個人認証結果記憶部515は、例えばRAM(Random Access Memory)、ROM(Read Only Memory)、レジスタ回路等であっても良い。また、第1記憶部54、第2記憶部56、第3記憶部57、指紋認証結果記憶部59、パスワード記憶部511、パスワード認証結果記憶部513、及び個人認証結果記憶部515は、1つのRAM、ROM、レジスタ回路等であっても良い。
 タッチ判定部51は、上述した第1期間において検出部40から出力されたタッチ検出座標に基づき、本開示の個人認証方法において有効なタッチ状態であるか否かを判定する。
 ここで、「本開示の個人認証方法において有効なタッチ状態」とは、上述したように、ユーザーがタッチした検出領域FA上の座標、すなわち検出部40から出力されたタッチ検出座標が、図14に示す第1領域KY内の座標であることを示している。具体的に、タッチ判定部51は、図14に示す第1領域KY内の座標においてタッチ状態であると判定した場合に、第2期間に移行するための第1制御信号を検出制御部11に出力する。以下、上述した「本開示の個人認証方法において有効なタッチ状態」であることを、「キー入力された」と称する。具体的には、例えば、検出部40から出力されたタッチ検出座標が、図15に示すように、第1領域KY「5」内の座標である場合には、「5」がキー入力されたとする。すなわち、タッチ判定部51は、キー入力されたことを検出した場合に、第2期間に移行するための第1制御信号を検出制御部11に出力する。
 また、タッチ判定部51は、キー入力されたキー(図15に示す例では、「5」)をパスワード記憶部511に順次格納する。
 タッチ判定部51は、パスワード記憶部511に格納されたキーの蓄積数nが所定数N(予め設定されたパスワードの桁数N)に達すると、後段のパスワード認証部512にパスワード認証開始指令を出力する。
 検出開始座標設定部52は、タッチ判定部51がキー入力されたことを検出した場合に、キー入力されたタッチ検出座標から、指紋検出の開始座標(以下、単に「検出開始座標」と称する)を設定する。
 図17Aは、実施形態1に係る個人認証方法における分割イメージの取得領域を説明する第1図である。図17Bは、実施形態1に係る個人認証方法における分割イメージの取得領域を説明する第2図である。図17Cは、実施形態1に係る個人認証方法における分割イメージの取得領域を説明する第3図である。図17Dは、実施形態1に係る個人認証方法における分割イメージの取得領域を説明する第4図である。
 図17Aは、パスワードの1桁目のキー入力の際の第2領域FG1において、分割イメージを取得するための分割領域SF1を割り当てる例を示している。図17Bは、パスワードの2桁目のキー入力の際の第2領域FG2において、分割イメージを取得するための分割領域SF2を割り当てる例を示している。図17Cは、パスワードの3桁目のキー入力の際の第2領域FG3において、分割イメージを取得するための分割領域SF3を割り当てる例を示している。図17Dは、パスワードの4桁目のキー入力の際の第2領域FG4において、分割イメージを取得するための分割領域SF4を割り当てる例を示している。図17A、図17B、図17C、図17Dにおいて、分割領域SF1,SF2,SF3,SF4は、各分割イメージを取得する際の第2領域FG1,FG2,FG3,FG4内において、相対的に指紋のスキャン方向に並ぶように割り当てられる例を示している。
 ここでは、検出装置2及び個人認証装置1aにおいて、指紋検出領域、すなわち、本実施形態における分割イメージの取得領域を任意に指定可能である例について説明する。図17A、図17B、図17C、図17Dにおいて、第2領域FGのサイズは、第1方向Dxに256、第2方向Dyに256の256×256サイズである。
 検出開始座標設定部52は、後述する個人認証用データ取得処理(図18参照)において、パスワードの1桁目のキー入力では、まず、図17Aに示すように、第2領域FG1の中心座標C1(Cx1,Cy1)に対し、検出開始座標S1(Cx1-128,Cy1-128)を設定する。
 このとき、検出部40の指紋検出領域設定部46は、分割イメージを取得する指紋検出領域として、図17Aに示す検出開始座標S1(Cx1-128,Cy1-128)を始点とする256×64サイズの分割領域SF1を割り当てる。
 また、検出開始座標設定部52は、後述する個人認証用データ取得処理(図18参照)において、パスワードの2桁目のキー入力では、図17Bに示すように、第2領域FG2の中心座標C2(Cx2,Cy2)に対し、検出開始座標S2(Cx2-128,Cy2-128+64)を設定する。ここでは、パスワード2桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目とは異なる。このため、ここではパスワード2桁目の中心座標が中心座標C2(Cx2,Cy2)として示される。
 このとき、検出部40の指紋検出領域設定部46は、分割イメージを取得する指紋検出領域として、図17Bに示す検出開始座標S2(Cx2-128,Cy2-128+64)を始点とする256×64サイズの分割領域SF2を割り当てる。すなわち、指の中心座標に基づいて規定される256×256の検出領域を第2方向Dyに4分割した際の、上から2段目の検出領域(分割領域SF2)が割り当てられる。
 また、検出開始座標設定部52は、後述する個人認証用データ取得処理(図18参照)において、パスワードの3桁目のキー入力では、図17Cに示すように、第2領域FG3の中心座標C3(Cx3,Cy3)に対し、検出開始座標S3(Cx3-128,Cy3-128+64×2)を設定する。ここでは、パスワード3桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目及び2桁目とは異なる。このため、ここではパスワード3桁目の中心座標が中心座標C3(Cx3,Cy3)として示される。
 このとき、検出部40の指紋検出領域設定部46は、分割イメージを取得する指紋検出領域として、図17Cに示す検出開始座標S3(Cx3-128,Cy3-128+64×2)を始点とする256×64サイズの分割領域SF3を割り当てる。すなわち、指の中心座標に基づいて規定される256×256の検出領域を第2方向Dyに4分割した際の、上から3段目の検出領域(分割領域SF3)が割り当てられる。
 また、検出開始座標設定部52は、後述する個人認証用データ取得処理(図18参照)において、パスワードの4桁目のキー入力では、図17Dに示すように、第2領域FG4の中心座標C4(Cx4,Cy4)に対し、検出開始座標S4(Cx4-128,Cy4-128+64×3)を設定する。ここでは、パスワード4桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目、2桁目、及び3桁目とは異なる。このため、ここではパスワード4桁目の中心座標が中心座標C4(Cx4,Cy4)として示される。
 このとき、検出部40の指紋検出領域設定部46は、分割イメージを取得する指紋検出領域として、図17Dに示す検出開始座標S4(Cx4-128,Cy4-128+64×3)を始点とする256×64サイズの分割領域SF4を割り当てる。すなわち、指の中心座標に基づいて規定される256×256の検出領域を第2方向Dyに4分割した際の、上から4段目の検出領域(分割領域SF4)が割り当てられる。
 このように設定した分割領域SF1,SF2,SF3,SF4の各分割イメージを取得して合成することで、認証精度が高い個人認証用の指紋イメージを生成することができる。
 図4A及び図4Bに戻り、分割イメージ受信部53は、上述した第2期間において検出部40から出力された分割イメージを受信し、当該分割イメージをバッファリングデータとして第1記憶部54に格納する。
 指紋イメージ生成部55は、第1記憶部54にバッファリングデータとして格納された分割イメージを読み出し、第2記憶部56に順次バッファリングデータとして格納する。このとき、指紋イメージ生成部55は、第1期間に移行するための第2制御信号を検出制御部11に出力する。
 また、指紋イメージ生成部55は、第2記憶部56に格納された分割イメージの蓄積数mが所定数M(図16に示す例では、4つの分割領域SF1,SF2,SF3,SF4における分割イメージ数M)に達すると、第2記憶部56に格納された分割イメージを合成して個人認証用の指紋イメージを生成し、生成した個人認証用の指紋イメージを第3記憶部57に格納し、後段の指紋認証部58に指紋認証開始指令を出力する。
 指紋認証部58は、指紋イメージ生成部55からの指紋認証開始指令に基づき、第3記憶部57に格納された個人認証用の指紋イメージの認証判定処理を行い、当該指紋認証判定結果を指紋認証結果記憶部59に格納する。この認証判定手法により本開示が限定されるものではない。例えば、予め取得された照合用の指紋イメージと、第3記憶部57に格納された個人認証用の指紋イメージとを照合し、所定の特徴点が一致する場合に認証成功とする態様であっても良い。
 パスワード認証部512は、タッチ判定部51からのパスワード認証開始指令に基づき、パスワード記憶部511に格納されたキーを合成して個人認証用のパスワードを生成し、当該個人認証用のパスワードの認証判定処理を行い、当該パスワード認証判定結果をパスワード認証結果記憶部513に格納する。具体的には、例えば、予め設定された照合用のパスワードと、生成した個人認証用のパスワードとを照合し、一致する場合に認証成功とする。
 個人認証部514は、パスワード認証結果記憶部513に記憶されたパスワード認証判定結果と、指紋認証結果記憶部59に記憶された指紋認証判定結果とを参照し、個人認証判定処理を行い、当該個人認証処理結果を個人認証結果記憶部515に格納する。具体的に、個人認証部514は、パスワード認証判定結果が認証成功であり、かつ、指紋認証判定結果が認証成功である場合に、個人認証が成功したものとする。
 以下、実施形態1に係る個人認証システム1及び個人認証装置1aの検出部40及び処理部50において実現する個人認証方法の具体例について、図18、図19、図20、及び図21を参照して説明する。図18は、実施形態1に係る個人認証システム及び個人認証装置における個人認証用データ取得処理の一例を示すフローチャートである。図19は、実施形態1に係る個人認証システム及び個人認証装置における個人認証処理の一例を示すフローチャートである。図20は、実施形態1に係る個人認証システム及び個人認証装置におけるパスワード認証処理の一例を示すサブフローチャートである。図21は、実施形態1に係る個人認証システム及び個人認証装置における指紋認証処理の一例を示すサブフローチャートである。図22は、実施形態1に係る個人認証システム及び個人認証装置における処理の具体例を示すシーケンス図である。
 まず、実施形態1に係る個人認証システム1及び個人認証装置1aにおける個人認証用データ取得処理について、図18及び図22を参照して説明する。
 図18に示す個人認証用データ取得処理の前提条件として、個人認証システム1及び個人認証装置1aは、第1期間において検出領域FAへのタッチの有無を検出すべくタッチ検出を連続して実行しているものとする。また、分割イメージ蓄積数m及びキー蓄積数nがリセット(m=0,n=0)されているものとする。
 処理部50のタッチ判定部51は、第1期間において取得されたタッチ検出座標に基づき、キー入力されているか否かを判定する(ステップS101)。キー入力されていなければ(ステップS101;No)、タッチ判定部51は、キー入力されるまで(ステップS101;Yes)、ステップS101の処理を繰り返し実行する。
 キー入力されていると判定した場合に(ステップS101;Yes)、タッチ判定部51は、キー蓄積数nをカウントアップ(インクリメント)し(ステップS102)、キー入力されたキー(図15に示す例では、「5」)をパスワード記憶部511に格納する(ステップS103)。
 タッチ判定部51は、第2記憶部56に格納された分割イメージの蓄積数mが所定数M(第2領域FG内の分割領域SFの数M)以上であるか否かを判定する(ステップS104)。例えば現段階においてはパスワードの1桁目のキー入力を実施したところで、まだ分割イメージが全く蓄積されていない状態とする。この場合、分割イメージの蓄積数は0であり、所定数(本実施例においては4)より小さい。この場合、次ステップS106に移行する。
 第2記憶部56に格納された分割イメージの蓄積数mが所定数M以上となると(ステップS104;Yes)、続いて、タッチ判定部51は、パスワード記憶部511に格納されたキーの蓄積数nが所定数N(パスワードの桁数N)に達したか否かを判定する(ステップS105)。すなわち、本実施形態においては4つのパスワード入力に伴って4つの分割イメージを順次取得していくので、4つのパスワードの入力キーの入力後は、分割イメージの蓄積数がm=4となり、所定数M=4と等しくなるとパスワードのキーの蓄積数n=4が所定数N=4と等しくなる(ステップS104;YesかつステップS105;Yes)。
 パスワード記憶部511に格納されたキーの蓄積数nが所定数N(パスワードの桁数N)に達していなければ(ステップS105;No)、ステップS101の処理に戻り、パスワード記憶部511に格納されたキーの蓄積数nが所定数Nに達するまで(ステップS105;Yes)、ステップS105までの処理を繰り返し実施する。なお、上記の通り、本実施形態においては、分割イメージの蓄積数と、パスワードの入力キーの蓄積数nの数は等しくなり、また、いずれの蓄積数も等しくなることが想定される(m=nかつM=N)。この場合、S105を省略する構成も採用可能である。
 第2記憶部56に格納された分割イメージの蓄積数mが所定数M未満である場合(ステップS104;No)、タッチ判定部51は、タッチ検出を行う第1期間から、指紋検出を行う第2期間に移行するための第1制御信号を検出制御部11に出力する(ステップS106)。
 検出制御部11は、タッチ判定部51から出力される第1制御信号に基づき、指紋検出領域設定部46により設定された分割領域において指紋検出を行うように、第1電極選択回路15及び検出電極選択回路16を制御する。これにより、指紋検出を行う第2期間に移行する。上記の通り、現段階においてはパスワードの1桁目のキー入力を実施した段階であるので、以下、図17Aに示される分割イメージを取得する制御を実施していく。
 検出開始座標設定部52は、キー入力されたタッチ検出座標から、図17Aにおいて説明した検出開始座標を設定し(ステップS107)、当該検出開始座標を検出部40の指紋検出領域設定部46に出力する。
 指紋検出領域設定部46は、分割イメージを取得する領域として、検出開始座標設定部52から出力される検出開始座標を始点として、図17Aにおいて説明した分割領域を割り当てる(ステップS108)。
 検出部40の分割イメージ生成部47は、信号処理部44の復号処理結果に基づいて、指紋検出領域設定部46において割り当てられた分割領域の分割イメージを生成し(ステップS109)、処理部50に出力する。上記ステップを経ることで、現段階においては、パスワードの1桁目のキー入力に伴って図17Aに示す分割イメージが生成され、処理部50の分割イメージ受信部53に出力される。
 処理部50の分割イメージ受信部53は、検出部40の分割イメージ生成部47から出力された分割イメージを受信し、当該分割イメージをバッファリングデータとして第1記憶部54に格納する(ステップS110)。したがって、当該処理過程においては、図17Aに示す分割イメージが第1記憶部54に格納される。
 なお、指紋イメージ生成部55は、第1記憶部54に分割イメージが格納されているか否かを判定する(ステップS111)。第1記憶部54に分割イメージが格納されていなければ(ステップS111;No)、指紋イメージ生成部55は、ステップS111の処理を繰り返し実行する。
 第1記憶部54に分割イメージが格納されていると判定した場合(ステップS111;Yes)、指紋イメージ生成部55は、バッファリングデータとして格納された分割イメージを読み出し(ステップS112)、分割イメージ蓄積数mをカウントアップ(インクリメント)し(ステップS113)、第1記憶部54から読み出した分割イメージをバッファリングデータとして第2記憶部56に格納する(ステップS114)。したがって、当該処理過程においては、図17Aに示す分割イメージが第2記憶部56に格納される。
 そして、指紋イメージ生成部55は、指紋検出を行う第2期間からタッチ検出を行う第1期間に移行するための第2制御信号を検出制御部11に出力する(ステップS115)。
 検出制御部11は、指紋イメージ生成部55から出力される第2制御信号に基づき、検出領域FAの全域においてタッチ検出を行うように、第1電極選択回路15及び検出電極選択回路16を制御する。これにより、タッチ検出を行う第1期間に移行する。
 続いて、指紋イメージ生成部55は、第2記憶部56に格納した分割イメージの蓄積数mが所定数M(第2領域FGの分割数)に達したか否かを判定する(ステップS116)。
 第2記憶部56に格納した分割イメージの蓄積数mが所定数Mに達していなければ(ステップS116;No)、ステップS101の処理に戻り、第2記憶部56に格納した分割イメージの蓄積数mが所定数Mに達するまで(ステップS116;Yes)、ステップS116までの処理を繰り返し実施する。すなわち、当該S101~S114までの処理過程を経ることで、パスワードの1桁目の入力キーの入力が確認されると共に、当該入力キーの入力に伴う指紋の分割イメージの取得も完了した。また、S115~S116の処理過程を経ることで、指紋認証のモードから通常のタッチ検出モードに移行すると共に、いまだ分割イメージの蓄積数が所定数に到達していないことが確認された。この結果、当該処理はS101に戻り、再度S101~S114の処理を経ることでパスワードの2桁目の入力キーを取得すると共に図17Bに示される分割イメージを取得する。その後、同じような処理を経ることで各パスワードの入力キーを取得すると共に、図17C、図17Dに示される指紋の分割イメージを取得するため処理を順次実施する。
 図17Dに示す分割イメージの取得が完了すると、第2記憶部56に格納した分割イメージの蓄積数mが所定数Mに達する(ステップS116;Yes)。ここで、指紋イメージ生成部55は、第2記憶部56に格納した分割イメージを1つの個人認証用の指紋イメージとして第3記憶部57に格納し(ステップS117)、後段の指紋認証部58に指紋認証開始指令を出力する(ステップS118)。
 その後、ステップS101に戻り、パスワード記憶部511に格納されたキーの蓄積数nが所定数Nに達すると(ステップS105;Yes)、タッチ判定部51は、分割イメージ蓄積数m及びキー蓄積数nをリセットして(ステップS119)、後段のパスワード認証部512にパスワード認証開始指令を出力する(ステップS120)。
 続いて、実施形態1に係る個人認証システム1及び個人認証装置1aにおける個人認証処理について、図19、図20、図21、図22を参照して説明する。
 個人認証処理を開始すると、パスワード認証部512は、図20に示すパスワード認証処理(図19のステップS201)を実行する。
 パスワード認証部512は、タッチ判定部51からのパスワード認証開始指令の有無を判定する(ステップS301)。パスワード認証開始指令が出力されていなければ(ステップS301;No)、パスワード認証部512は、タッチ判定部51からパスワード認証開始指令が出力されるまで(ステップS301;Yes)、ステップS301の処理を繰り返し実行する。
 タッチ判定部51からパスワード認証開始指令が出力されると(ステップS301;Yes)、パスワード認証部512は、パスワード記憶部511に格納されたキーを読み出して(ステップS302)、個人認証用のパスワードを生成して当該パスワードの認証判定処理を実行し(ステップS303)、パスワード認証判定結果をパスワード認証結果記憶部513に格納する(ステップS304)。
 図19に戻り、個人認証部514は、パスワード認証結果記憶部513に記憶されたパスワード認証判定結果を読み出し(ステップS202)、パスワード認証が成功したか否かを判定する(ステップS203)。
 パスワード認証が成功すると(ステップS203;Yes)、指紋認証部58は、図21に示す指紋認証処理(図19のステップS204)を実行する。
 指紋認証部58は、指紋イメージ生成部55からの指紋認証開始指令の有無を判定する(ステップS401)。指紋認証開始指令が出力されていなければ(ステップS401;No)、指紋認証部58は、指紋イメージ生成部55からの指紋認証開始指令が出力されるまで(ステップS401;Yes)、ステップS401の処理を繰り返し実行する。
 指紋イメージ生成部55からの指紋認証開始指令が出力されると(ステップS401;Yes)、指紋認証部58は、第3記憶部57に格納された個人認証用の指紋イメージを読み出して(ステップS402)、当該指紋イメージの認証判定処理を実行し(ステップS403)、指紋認証判定結果を指紋認証結果記憶部59に格納する(ステップS404)。
 図19に戻り、個人認証部514は、指紋認証結果記憶部59に記憶された指紋認証判定結果を読み出し(ステップS205)、指紋認証が成功したか否かを判定する(ステップS206)。
 指紋認証が成功すると(ステップS206;Yes)、個人認証部514は、個人認証が成功したことを示す個人認証処理結果を個人認証結果記憶部515に格納する(ステップS207)。
 パスワード認証が失敗(ステップS203;No)、あるいは、指紋認証が失敗(ステップS206;No)した場合、個人認証部514は、上位の処理装置(不図示)に対してパスワードの再入力要求を出力する(ステップS208)。
 上述した個人認証用データ取得処理、及び個人認証処理により、パスワード入力の際に高精度な指紋イメージを取得することができるので、認証精度を向上することができる。また、パスワード入力の際に指紋イメージを取得することができるので、利便性を損ねずセキュリティを強化することができる。
 本実施形態により、利便性を損ねずセキュリティの強化と認証精度の向上とを両立することができる個人認証システム1、個人認証装置1a、表示装置100、及び個人認証方法を得ることができる。
(変形例)
 以下、実施形態1の変形例について説明する。上述した実施形態1では、検出装置2及び個人認証装置1aにおいて、指紋検出領域が任意に指定可能である例について説明したが、実施形態1の変形例では、指紋検出領域の大きさが固定されている例について説明する。
 図23Aは、実施形態1の変形例に係る個人認証方法におけるイメージ取得領域を説明する第1図である。図23Bは、実施形態1の変形例に係る個人認証方法におけるイメージ取得領域を説明する第2図である。図23Cは、実施形態1の変形例に係る個人認証方法におけるイメージ取得領域を説明する第3図である。図23Dは、実施形態1の変形例に係る個人認証方法におけるイメージ取得領域を説明する第4図である。図23A、図23B、図23C、図23Dにおいて、指紋検出領域の大きさは、第2領域FGのサイズと同じく、第1方向Dxに256、第2方向Dyに256の256×256サイズである。
 図23Aは、パスワードの1桁目のキー入力の際の第2領域FG1において、分割イメージを取得するための分割領域SF1を割り当てる例を示している。図23Bは、パスワードの2桁目のキー入力の際の第2領域FG2において、分割イメージを取得するための分割領域SF2を割り当てる例を示している。図23Cは、パスワードの3桁目のキー入力の際の第2領域FG3において、分割イメージを取得するための分割領域SF3を割り当てる例を示している。図23Dは、パスワードの4桁目のキー入力の際の第2領域FG4において、分割イメージを取得するための分割領域SF4を割り当てる例を示している。図23A、図23B、図23C、図23Dにおいて、分割領域SF1,SF2,SF3,SF4は、各分割イメージを取得する際の第2領域FG1,FG2,FG3,FG4内において、相対的に指紋のスキャン方向に並ぶように割り当てられる例を示している。
 実施形態1の変形例では、図18に示す個人認証用データ取得処理において、検出開始座標設定部52によるステップS107、指紋検出領域設定部46によるステップS108、分割イメージ生成部47によるステップS109が異なっている。以下、検出開始座標設定部52、指紋検出領域設定部46、分割イメージ生成部47の図18とは異なる処理について説明する。
 実施形態1の変形例において、検出開始座標設定部52は、パスワードの1桁目のキー入力では、第2領域FG1の中心座標C1(Cx1,Cy1)に対し、検出開始座標S1(Cx1-128,Cy1-128)を設定する(図23A参照)。
 このとき、検出部40の指紋検出領域設定部46は、指紋検出領域として、図23Aに示す検出開始座標S1(Cx1-128,Cy1-128)を始点とする256×256サイズの領域を割り当て、当該領域をスキャン方向に4分割した256×64サイズの4つのサブフレームに分割する。
 そして、後段の分割イメージ生成部47において、4つのサブフレームの分割イメージを生成し、処理部50の分割イメージ受信部53において、検出開始座標S1(Cx1-128,Cy1-128)を含む分割領域SF1に対応したサブフレームの分割イメージをバッファリングデータとして第1記憶部54に格納し、残る3つのサブフレームの分割イメージを破棄する。
 また、検出開始座標設定部52は、パスワードの2桁目のキー入力では、第2領域FG2の中心座標C2(Cx2,Cy2)に対し、検出開始座標S2(Cx2-128,Cy2-128+64)を設定する(図23B参照)。ここでは、パスワード2桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目とは異なる。このため、ここではパスワード2桁目の中心座標が中心座標C2(Cx2,Cy2)として示される。
 このとき、検出部40の指紋検出領域設定部46は、指紋検出領域として、図23Bに示す検出開始座標S2(Cx2-128,Cy2-128+64)を始点とする256×256サイズの領域を割り当て、当該領域をスキャン方向に4分割した256×64サイズの4つのサブフレームに分割する。すなわち、指の中心座標に基づいて、図23Bに示す検出開始座標S2(Cx2-128,Cy2-128+64)を始点とする256×256の検出領域を第2方向Dyに4分割した際の、最上段の検出領域(分割領域SF2)から順にサブフレームが割り当てられる。
 そして、後段の分割イメージ生成部47において、4つのサブフレームの分割イメージを生成し、処理部50の分割イメージ受信部53において、検出開始座標S2(Cx2-128,Cy2-128+64)を含む分割領域SF2に対応したサブフレームの分割イメージをバッファリングデータとして第1記憶部54に格納し、残る3つのサブフレームの分割イメージを破棄する。
 また、検出開始座標設定部52は、パスワードの3桁目のキー入力では、第2領域FG3の中心座標C3(Cx3,Cy3)に対し、検出開始座標S3(Cx3-128,Cy3-128+64×2)を設定する(図23C参照)。ここでは、パスワード3桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目及び2桁目とは異なる。このため、ここではパスワード3桁目の中心座標が中心座標C3(Cx3,Cy3)として示される。
 このとき、検出部40の指紋検出領域設定部46は、指紋検出領域として、図23Cに示す検出開始座標S3(Cx3-128,Cy3-128+64×2)を始点とする256×256サイズの領域を割り当て、当該領域をスキャン方向に4分割した256×64サイズの4つのサブフレームに分割する。すなわち、指の中心座標に基づいて、図23Cに示す検出開始座標S3(Cx3-128,Cy3-128+64×2)を始点とする256×256の検出領域を第2方向Dyに4分割した際の、最上段の検出領域(分割領域SF3)から順にサブフレームが割り当てられる。
 そして、後段の分割イメージ生成部47において、4つのサブフレームの分割イメージを生成し、処理部50の分割イメージ受信部53において、検出開始座標S3(Cx3-128,Cy3-128+64×2)を含む分割領域SF3に対応したサブフレームの分割イメージをバッファリングデータとして第1記憶部54に格納し、残る3つのサブフレームの分割イメージを破棄する。
 また、検出開始座標設定部52は、パスワードの4桁目のキー入力では、第2領域FG4の中心座標C4(Cx4,Cy4)に対し、検出開始座標S4(Cx4-128,Cy4-128+64×3)を設定する(図23D参照)。ここでは、パスワード4桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目、2桁目、及び3桁面とは異なる。このため、ここではパスワード4桁目の中心座標が中心座標C4(Cx4,Cy4)として示される。
 このとき、検出部40の指紋検出領域設定部46は、指紋検出領域として、図23Dに示す検出開始座標S4(Cx4-128,Cy4-128+64×3)を始点とする256×256サイズの領域を割り当て、当該領域をスキャン方向に4分割した256×64サイズの4つのサブフレームに分割する。すなわち、指の中心座標に基づいて、図23Dに示す検出開始座標S4(Cx4-128,Cy4-128+64×3)を始点とする256×256の検出領域を第2方向Dyに4分割した際の、最上段の検出領域(分割領域SF4)から順にサブフレームが割り当てられる。
 そして、後段の分割イメージ生成部47において、4つのサブフレームの分割イメージを生成し、処理部50の分割イメージ受信部53において、検出開始座標S4(Cx4-128,Cy4-128+64×3)を含む分割領域SF4に対応したサブフレームの分割イメージをバッファリングデータとして第1記憶部54に格納し、残る3つのサブフレームの分割イメージを破棄する。
 このように設定した分割領域SF1,SF2,SF3,SF4に対応する各分割イメージを取得して合成することで、認証精度が高い個人認証用の指紋イメージを生成することができる。なお、上記ではそれぞれ指紋検出において4つのサブフレームに分割するとしているが、最終的に必要とされるサブフレームはそれぞれの指紋検出においていずれも最上段のサブフレームのみである。したがって、いずれの指紋検出においても、最上段のサブフレームの検出開始座標から256×64だけをサブフレームとして認識し、残りはサブフレームとしてそもそも認識しない、とした指紋検出フローも採用可能である。
(実施形態2)
 図24は、実施形態2におけるイメージ合成後の指紋イメージを示す図である。実施形態1では、第2領域FGを第2方向Dy、すなわちスキャン方向に4分割された分割イメージを合成して指紋イメージを生成する例について説明したが、本実施形態では、図24に示すように、第2領域FGをスキャン方向に2分割、スキャン方向とは異なる第1方向Dxに2分割された分割イメージを合成して指紋イメージを生成する例について説明する。なお、以下の説明では、上述した実施形態1で説明したものと同じ構成要素には同一の符号を付して重複する説明は省略し、実施形態1とは異なる点について説明する。
 図25Aは、実施形態2に係る個人認証方法における分割イメージの取得領域を説明する第1図である。図25Bは、実施形態2に係る個人認証方法における分割イメージの取得領域を説明する第2図である。図25Cは、実施形態2に係る個人認証方法における分割イメージの取得領域を説明する第3図である。図25Dは、実施形態2に係る個人認証方法における分割イメージの取得領域を説明する第4図である。
 図25Aは、パスワードの1桁目のキー入力の際の第2領域FG1において、分割イメージを取得するための分割領域SF1を割り当てる例を示している。図25Bは、パスワードの2桁目のキー入力の際の第2領域FG2において、分割イメージを取得するための分割領域SF2を割り当てる例を示している。図25Cは、パスワードの3桁目のキー入力の際の第2領域FG3において、分割イメージを取得するための分割領域SF3を割り当てる例を示している。図25Dは、パスワードの4桁目のキー入力の際の第2領域FG4において、分割イメージを取得するための分割領域SF4を割り当てる例を示している。図25A、図25B、図25C、図25Dにおいて、分割領域SF1,SF2,SF3,SF4は、各分割イメージを取得する際の第2領域FG1,FG2,FG3,FG4内において、相対的に指紋のスキャン方向(第2方向Dy)と当該スキャン方向とは異なる方向(第1方向Dx)との2方向に並ぶように割り当てられている。
 ここでは、検出装置2及び個人認証装置1aにおいて、指紋検出領域、すなわち、本実施形態における分割イメージの取得領域を任意に指定可能である例について説明する。図25A、図25B、図25C、図25Dにおいて、第2領域FGのサイズは、第1方向Dxに256、第2方向Dyに256の256×256サイズである。
 実施形態2では、図18に示す個人認証用データ取得処理において、検出開始座標設定部52によるステップS107、指紋検出領域設定部46によるステップS108が実施形態1とは異なっている。以下、検出開始座標設定部52、指紋検出領域設定部46の図18とは異なる処理について説明する。
 実施形態2において、検出開始座標設定部52は、パスワードの1桁目のキー入力では、第2領域FG1の中心座標C1(Cx1,Cy1)に対し、検出開始座標S1(Cx1-128,Cy1-128)を設定する(図25A)。
 このとき、検出部40の指紋検出領域設定部46は、分割イメージを取得する指紋検出領域として、図25Aに示す検出開始座標S1(Cx1-128,Cy1-128)を始点とする128×128サイズの分割領域SF1を割り当てる。
 また、検出開始座標設定部52は、パスワードの2桁目のキー入力では、第2領域FG2の中心座標C2(Cx2,Cy2)に対し、検出開始座標S2(Cx2,Cy2-128)を設定する(図25B)。ここでは、パスワード2桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目とは異なる。このため、ここではパスワード2桁目の中心座標が中心座標C2(Cx2,Cy2)として示される。
 このとき、検出部40の指紋検出領域設定部46は、分割イメージを取得する指紋検出領域として、図25Bに示す検出開始座標S2(Cx2,Cy2-128)を始点とする128×128サイズの分割領域SF2を割り当てる。すなわち、指の中心座標に基づいて、図25Bに示す検出開始座標S2(Cx2,Cy2-128)を始点とする128×128の分割領域SF2が割り当てられる。
 また、検出開始座標設定部52は、パスワードの3桁目のキー入力では、第2領域FG3の中心座標C3(Cx3,Cy3)に対し、検出開始座標S3(Cx3-128,Cy3)を設定する(図25C)。ここでは、パスワード3桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目及び2桁目とは異なる。このため、ここではパスワード3桁目の中心座標が中心座標C3(Cx3,Cy3)として示される。
 このとき、検出部40の指紋検出領域設定部46は、分割イメージを取得する指紋検出領域として、図25Cに示す検出開始座標S3(Cx3-128,Cy3)を始点とする128×128サイズの分割領域SF3を割り当てる。すなわち、指の中心座標に基づいて、図25Cに示す検出開始座標S3(Cx3-128,Cy3)を始点とする128×128の分割領域SF3が割り当てられる。
 また、検出開始座標設定部52は、パスワードの4桁目のキー入力では、第2領域FG4の中心座標C4(Cx4,Cy4)に対し、検出開始座標S4(Cx4,Cy4)を設定する(図25D)。ここでは、パスワード4桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目、2桁目、及び3桁目とは異なる。このため、ここではパスワード4桁目の中心座標が中心座標C4(Cx4,Cy4)として示される。
 このとき、検出部40の指紋検出領域設定部46は、分割イメージを取得する指紋検出領域として、図25Dに示す検出開始座標S4(Cx4,Cy4)を始点とする128×128サイズの分割領域SF4を割り当てる。すなわち、指の中心座標に基づいて、図25Dに示す検出開始座標S4(Cx4,Cy4)を始点とする128×128の分割領域SF4が割り当てられる。
 このように設定した分割領域SF1,SF2,SF3,SF4の各分割イメージを取得して合成することで、認証精度が高い個人認証用の指紋イメージを生成することができる。
(変形例)
 以下、実施形態2の変形例について説明する。上述した実施形態2では、指紋認証を行う領域が任意に指定可能である例について説明したが、実施形態2の変形例では、指紋検出領域の大きさが固定されている例について説明する。
 図26Aは、実施形態2の変形例に係る個人認証方法におけるイメージ取得領域を説明する第1図である。図26Bは、実施形態2の変形例に係る個人認証方法におけるイメージ取得領域を説明する第2図である。図26Cは、実施形態2の変形例に係る個人認証方法におけるイメージ取得領域を説明する第3図である。図26Dは、実施形態2の変形例に係る個人認証方法におけるイメージ取得領域を説明する第4図である。図26A、図26B、図26C、図26Dにおいて、第2領域FGのサイズは、第1方向Dxに256、第2方向Dyに256の256×256サイズである。
 図26Aは、パスワードの1桁目のキー入力の際の第2領域FG1において、分割イメージを取得するための分割領域SF1を割り当てる例を示している。図26Bは、パスワードの2桁目のキー入力の際の第2領域FG2において、分割イメージを取得するための分割領域SF2を割り当てる例を示している。図26Cは、パスワードの3桁目のキー入力の際の第2領域FG3において、分割イメージを取得するための分割領域SF3を割り当てる例を示している。図26Dは、パスワードの4桁目のキー入力の際の第2領域FG4において、分割イメージを取得するための分割領域SF4を割り当てる例を示している。図26A、図26B、図26C、図26Dにおいて、分割領域SF1,SF2,SF3,SF4は、各分割イメージを取得する際の第2領域FG1,FG2,FG3,FG4内において、相対的に指紋のスキャン方向(第2方向Dy)と当該スキャン方向とは異なる方向(第1方向Dx)との2方向に並ぶように割り当てられている。
 実施形態2の変形例では、図18に示す個人認証用データ取得処理において、検出開始座標設定部52によるステップS107、指紋検出領域設定部46によるステップS108、分割イメージ生成部47によるステップS109が実施形態1とは異なっている。以下、検出開始座標設定部52、指紋検出領域設定部46、分割イメージ生成部47の図18とは異なる処理について説明する。
 実施形態2の変形例において、検出開始座標設定部52は、パスワードの1桁目のキー入力では、第2領域FG1の中心座標C1(Cx1,Cy1)に対し、検出開始座標S1(Cx1-128,Cy1-128)を設定する(図26A参照)。
 このとき、検出部40の指紋検出領域設定部46は、指紋検出領域として、図26Aに示す検出開始座標S1(Cx1-128,Cy1-128)を始点とする128×128サイズの領域を割り当てる。また、指紋検出領域設定部46は、当該領域をさらにスキャン方向である上下2分割した128×64サイズの2つのサブフレームに分割し、かかるサブフレームを順次走査するよう検出制御部11に指示を出す。これを受けて検出制御部11は、検出開始座標S1(Cx1-128,Cy1-128)を開始点として128×64サイズの走査を実施し、その後、第2の検出開始座標(Cx1-128,Cy1-64)を第2の開始点として128×64サイズの走査を実施する。
 そして、後段の分割イメージ生成部47において、2つのサブフレームの分割イメージをそれぞれ生成する。かかる分割イメージは、順次処理部50の分割イメージ受信部53に出力される。処理部50の分割イメージ受信部53において、検出開始座標S1(Cx1-128,Cy1-128)を含む分割領域SF1に対応した2つのサブフレームの分割イメージをそれぞれバッファリングデータとして第1記憶部54に格納する。
 また、検出開始座標設定部52は、パスワードの2桁目のキー入力では、第2領域FG2の中心座標C2(Cx2,Cy2)に対し、検出開始座標S2(Cx2,Cy2-128)を設定する(図26B参照)。ここでは、パスワード2桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目とは異なる。このため、ここではパスワード2桁目の中心座標が中心座標C2(Cx2,Cy2)として示される。
 このとき、検出部40の指紋検出領域設定部46は、指紋検出領域として、図26Bに示す検出開始座標S2(Cx2,Cy2-128)を始点とする128×128サイズの領域を割り当て、当該領域をさらにスキャン方向に上下2分割した128×64サイズの2つのサブフレームに分割する。すなわち、指の中心座標に基づいて、図26Bに示す検出開始座標S2(Cx2,Cy2-128)を始点とする128×128の分割領域SF2を第2方向Dyに2分割した際の、上段の領域から順にサブフレームが割り当てられる。
 そして、後段の分割イメージ生成部47において、2つのサブフレームの分割イメージを生成し、処理部50の分割イメージ受信部53において、検出開始座標S2(Cx2,Cy2-128)を含む分割領域SF2に対応した2つのサブフレームの分割イメージをそれぞれバッファリングデータとして第1記憶部54に格納する。
 また、検出開始座標設定部52は、パスワードの3桁目のキー入力では、第2領域FG3の中心座標C3(Cx3,Cy3)に対し、検出開始座標S3(Cx3-128,Cy3)を設定する(図26C参照)。ここでは、パスワード3桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目及び2桁目とは異なる。このため、ここではパスワード3桁目の中心座標が中心座標C3(Cx3,Cy3)として示される。
 このとき、検出部40の指紋検出領域設定部46は、指紋検出領域として、図26Cに示す検出開始座標S3(Cx3-128,Cy3)を始点とする128×128サイズの領域を割り当て、当該領域をさらにスキャン方向に上下2分割した128×64サイズの2つのサブフレームに分割する。すなわち、指の中心座標に基づいて、図26Cに示す検出開始座標S3(Cx3-128,Cy3)を始点とする128×128の分割領域SF3を第2方向Dyに2分割した際の、上段の領域から順にサブフレームが割り当てられる。
 そして、後段の分割イメージ生成部47において、2つのサブフレームの分割イメージを生成し、処理部50の分割イメージ受信部53において、検出開始座標S3(Cx3-128,Cy3)を含む分割領域SF3に対応した2つのサブフレームの分割イメージをそれぞれバッファリングデータとして第1記憶部54に格納する。
 また、検出開始座標設定部52は、パスワードの4桁目のキー入力では、第2領域FG4の中心座標C4(Cx4,Cy4)に対し、検出開始座標S4(Cx4,Cy4)を設定する(図26D参照)。ここでは、パスワード4桁目を入力しているので、検出面上における指の中心座標はパスワード1桁目、2桁目、及び3桁目とは異なる。このため、ここではパスワード4桁目の中心座標が中心座標C4(Cx4,Cy4)として示される。
 このとき、検出部40の指紋検出領域設定部46は、指紋検出領域として、図26Dに示す検出開始座標S4(Cx4,Cy4)を始点とする128×128サイズの領域を割り当て、当該領域をさらにスキャン方向に上下2分割した128×64サイズの2つのサブフレームに分割する。すなわち、指の中心座標に基づいて、図26Dに示す検出開始座標S4(Cx4,Cy4)を始点とする128×128の分割領域SF4を第2方向Dyに2分割した際の、上段の領域から順にサブフレームが割り当てられる。
 そして、後段の分割イメージ生成部47において、2つのサブフレームの分割イメージを生成し、処理部50の分割イメージ受信部53において、検出開始座標S4(Cx4,Cy4)を含む分割領域SF4に対応した2つのサブフレームの分割イメージをそれぞれバッファリングデータとして第1記憶部54に格納する。
 このように設定した分割領域SF1,SF2,SF3,SF4に対応する各分割イメージを取得して合成することで、認証精度が高い個人認証用の指紋イメージを生成することができる。
 以上、本開示の好適な実施の形態を説明したが、本開示このような実施の形態に限定されるものではない。実施の形態で開示された内容はあくまで一例にすぎず、本開示の趣旨を逸脱しない範囲で種々の変更が可能である。本開示の趣旨を逸脱しない範囲で行われた適宜の変更についても、当然に本開示の技術的範囲に属する。
 1 個人認証システム
 1a 個人認証装置
 2 検出装置
 3 基板
 4 配線基板
 5 制御基板
 6 検出回路
 7 制御回路
 8 個人認証回路
 9 制御装置
 10 センサ部
 11 検出制御部
 21 センサ基板
 23a,23b 電極部
 24 接続部
 30 表示パネル
 31 第1基板
 32 第2基板
 40 検出部
 42 検出信号増幅部
 43 A/D変換部
 44 信号処理部
 45 座標抽出部
 46 指紋検出領域設定部
 47 分割イメージ生成部
 48 検出タイミング制御部
 50 処理部
 51 タッチ判定部
 52 検出開始座標設定部
 53 分割イメージ受信部
 54 第1記憶部
 55 指紋イメージ生成部
 56 第2記憶部
 57 第3記憶部
 58 指紋認証部
 59 指紋認証結果記憶部
 100 表示装置
 101 カバー部材
 110 加飾層
 151 第1選択回路
 152 第2選択回路
 153 第3選択回路
 154 第1電極ブロック選択回路
 511 パスワード記憶部
 512 パスワード認証部
 513 パスワード認証結果記憶部
 514 個人認証部
 515 個人認証結果記憶部
 Vctrl 各種制御信号
 VP 電源電圧
 Vtx1 第1駆動信号
 Vtx2 第2駆動信号

Claims (20)

  1.  センサ部に接触又は近接する被検出体を検出する第1期間と、前記被検出体の表面の凹凸を検出する第2期間と、を有する検出装置と、
     前記検出装置の出力に応じた処理を行う制御装置と、
     を備え、
     前記検出装置は、
     パスワードの入力キーとして、前記センサ部の検出領域内に複数の第1領域が設けられ、
     前記パスワードのキー入力ごとに、前記第1期間において検出された前記第1領域内のタッチ検出座標を中心座標とする第2領域内において相対的に異なる分割領域を割り当て、
     前記パスワードのキー入力ごとに、前記第2期間において分割領域で取得される分割イメージを前記制御装置に出力し、
     前記制御装置は、
     前記パスワードのキー入力ごとに取得した複数の分割イメージを合成して、指紋イメージを生成する、
     個人認証システム。
  2.  前記検出装置は、
     前記制御装置から出力される第1制御信号に応じて、前記第1期間から前記第2期間に移行し、前記制御装置から出力される第2制御信号に応じて、前記第2期間から前記第1期間に移行し、
     前記制御装置は、
     前記第1期間において前記検出装置から出力されるタッチ検出座標が前記第1領域内の座標である場合に、前記第1制御信号を出力し、
     前記第2期間において分割イメージを取得した場合に、前記第2制御信号を出力する、
     請求項1に記載の個人認証システム。
  3.  前記第2領域の分割数は、前記パスワードの桁数以下である、
     請求項1又は2に記載の個人認証システム。
  4.  前記制御装置は、
     前記パスワードのキー入力ごとに分割イメージの取得を開始する検出開始座標を設定し、
     前記検出装置は、
     前記検出開始座標を始点として分割イメージを取得する分割領域を割り当てる、
     請求項1から3の何れか一項に記載の個人認証システム。
  5.  前記パスワードのキー入力ごとに分割イメージが取得される複数の分割領域は、第2領域内において相対的に指紋のスキャン方向に並ぶように割り当てられている、
     請求項4に記載の個人認証システム。
  6.  前記検出開始座標は、前記パスワードのキー入力ごとに、第2領域内において相対的に指紋のスキャン方向に所定間隔となるように設定される、
     請求項5に記載の個人認証システム。
  7.  前記検出装置は、
     前記パスワードのキー入力ごとに、分割領域を含む領域のイメージを生成し、
     前記制御装置は、
     当該分割領域に含まれる領域のイメージを分割イメージとして取得し、当該分割領域に含まれない領域のイメージを破棄する、
     請求項6に記載の個人認証システム。
  8.  前記パスワードのキー入力ごとに分割イメージが取得される複数の分割領域は、第2領域内において相対的に指紋のスキャン方向と当該スキャン方向とは異なる方向との2方向に並ぶように割り当てられている、
     請求項4に記載の個人認証システム。
  9.  前記検出装置は、
     前記パスワードのキー入力ごとに、分割領域を指紋のスキャン方向に複数のサブフレームに分割して各サブフレームのイメージを生成し、
     前記制御装置は、
     当該分割領域に対応する各サブフレームのイメージを1つの分割イメージとして取得する、
     請求項8に記載の個人認証システム。
  10.  センサ部に接触又は近接する被検出体を検出する第1期間と、前記被検出体の表面の凹凸を検出する第2期間と、を有する検出部と、
     前記検出部の出力に応じた処理を行う処理部と、
     を備え、
     前記検出部は、
     パスワードの入力キーとして、前記センサ部の検出領域内に複数の第1領域が設けられ、
     前記パスワードのキー入力ごとに、前記第1期間において検出された前記第1領域内のタッチ検出座標を中心座標とする第2領域内において相対的に異なる分割領域を割り当て、
     前記パスワードのキー入力ごとに、前記第2期間において分割領域で取得される分割イメージを前記処理部に出力し、
     前記処理部は、
     前記パスワードのキー入力ごとに取得した複数の分割イメージを合成して、指紋イメージを生成する、
     個人認証装置。
  11.  前記検出部は、
     前記処理部から出力される第1制御信号に応じて、前記第1期間から前記第2期間に移行し、前記処理部から出力される第2制御信号に応じて、前記第2期間から前記第1期間に移行し、
     前記処理部は、
     前記第1期間において前記検出部から出力されるタッチ検出座標が前記第1領域内の座標である場合に、前記第1制御信号を出力し、
     前記第2期間において分割イメージを取得した場合に、前記第2制御信号を出力する、
     請求項10に記載の個人認証装置。
  12.  前記第2領域の分割数は、前記パスワードの桁数以下である、
     請求項10又は11に記載の個人認証装置。
  13.  前記処理部は、
     前記パスワードのキー入力ごとに分割イメージの取得を開始する検出開始座標を設定し、
     前記検出部は、
     前記検出開始座標を始点として分割イメージを取得する分割領域を割り当てる、
     請求項10から12の何れか一項に記載の個人認証装置。
  14.  前記パスワードのキー入力ごとに分割イメージが取得される複数の分割領域は、第2領域内において相対的に指紋のスキャン方向に並ぶように割り当てられている、
     請求項13に記載の個人認証装置。
  15.  前記検出開始座標は、前記パスワードのキー入力ごとに、第2領域内において相対的に指紋のスキャン方向に所定間隔となるように設定される、
     請求項14に記載の個人認証装置。
  16.  前記検出部は、
     前記パスワードのキー入力ごとに、分割領域を含む領域のイメージを生成し、
     前記処理部は、
     当該分割領域に含まれる領域のイメージを分割イメージとして取得し、当該分割領域に含まれない領域のイメージを破棄する、
     請求項15に記載の個人認証装置。
  17.  前記パスワードのキー入力ごとに分割イメージが取得される複数の分割領域は、第2領域内において相対的に指紋のスキャン方向と当該スキャン方向とは異なる方向との2方向に並ぶように割り当てられている、
     請求項13に記載の個人認証装置。
  18.  前記検出部は、
     前記パスワードのキー入力ごとに、分割領域を指紋のスキャン方向に複数のサブフレームに分割して各サブフレームのイメージを生成し、
     前記処理部は、
     当該分割領域に対応する各サブフレームのイメージを1つの分割イメージとして取得する、
     請求項17に記載の個人認証装置。
  19.  請求項10から18の何れか一項に記載の個人認証装置と、
     画像を表示するための表示領域が前記個人認証装置の検出領域に重なって設けられている表示パネルと、
     を有する、
     表示装置。
  20.  センサ部に接触又は近接する被検出体を検出する第1期間と、前記被検出体の表面の凹凸を検出する第2期間と、を有し、
     パスワードの入力キーとして、前記センサ部の検出領域内に複数の第1領域が設けられ、
     前記パスワードのキー入力ごとに、前記第1期間において検出された前記第1領域内のタッチ検出座標を中心座標とする第2領域内において相対的に異なる分割領域を割り当て、
     前記パスワードのキー入力ごとに前記第2期間において分割領域で取得される複数の分割イメージを合成して、指紋イメージを生成する、
     個人認証方法。
PCT/JP2021/048693 2020-12-28 2021-12-27 個人認証システム、個人認証装置、表示装置、及び個人認証方法 Ceased WO2022145437A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2022573092A JP7512441B2 (ja) 2020-12-28 2021-12-27 個人認証システム、個人認証装置、表示装置、及び個人認証方法
DE112021005679.4T DE112021005679T5 (de) 2020-12-28 2021-12-27 Personenauthentifizierungssystem, personenauthentifizierungsvorrichtung, anzeigevorrichtung und personenauthentifizierungsverfahren
US18/212,602 US12299102B2 (en) 2020-12-28 2023-06-21 Personal authentication system, personal authentication device, display device, and personal authentication method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-218840 2020-12-28
JP2020218840 2020-12-28

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US18/212,602 Continuation US12299102B2 (en) 2020-12-28 2023-06-21 Personal authentication system, personal authentication device, display device, and personal authentication method

Publications (1)

Publication Number Publication Date
WO2022145437A1 true WO2022145437A1 (ja) 2022-07-07

Family

ID=82260727

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/048693 Ceased WO2022145437A1 (ja) 2020-12-28 2021-12-27 個人認証システム、個人認証装置、表示装置、及び個人認証方法

Country Status (4)

Country Link
US (1) US12299102B2 (ja)
JP (1) JP7512441B2 (ja)
DE (1) DE112021005679T5 (ja)
WO (1) WO2022145437A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001167274A (ja) * 1999-12-10 2001-06-22 Sony Corp 指紋照合装置および指紋照合方法
JP2015184717A (ja) * 2014-03-20 2015-10-22 ソフトバンク株式会社 認証装置及びプログラム
JP2017504853A (ja) * 2013-11-04 2017-02-09 クアルコム,インコーポレイテッド モバイルデバイスにおけるユーザ認証バイオメトリクス

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006085559A (ja) 2004-09-17 2006-03-30 Canon Inc 個人認証装置および個人認証方法および記憶媒体
CN101626417A (zh) * 2008-07-08 2010-01-13 鸿富锦精密工业(深圳)有限公司 移动终端身份认证的方法
US20140359757A1 (en) 2013-06-03 2014-12-04 Qualcomm Incorporated User authentication biometrics in mobile devices
EP4243428A3 (en) * 2014-03-21 2023-12-06 Samsung Electronics Co., Ltd. User terminal apparatus, electronic apparatus, system, and control method thereof
CN105426729B (zh) * 2015-12-21 2018-08-31 联想(北京)有限公司 一种信息处理方法及电子设备
EP3547187B1 (en) * 2018-02-01 2021-08-04 Shenzhen Goodix Technology Co., Ltd. Fingerprint login method, micro-control unit, fingerprint power supply assembly, and electronic terminal
KR102065912B1 (ko) * 2018-05-09 2020-01-14 주식회사 슈프리마 압력 감지를 이용한 사용자 인증 영상 획득 장치 및 방법
CN113924569A (zh) * 2019-05-31 2022-01-11 伊格鲁私人有限公司 认证输入设备
US11620367B2 (en) * 2020-11-06 2023-04-04 International Business Machines Corporation Key specific fingerprint based access control

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001167274A (ja) * 1999-12-10 2001-06-22 Sony Corp 指紋照合装置および指紋照合方法
JP2017504853A (ja) * 2013-11-04 2017-02-09 クアルコム,インコーポレイテッド モバイルデバイスにおけるユーザ認証バイオメトリクス
JP2015184717A (ja) * 2014-03-20 2015-10-22 ソフトバンク株式会社 認証装置及びプログラム

Also Published As

Publication number Publication date
JP7512441B2 (ja) 2024-07-08
US20230334134A1 (en) 2023-10-19
US12299102B2 (en) 2025-05-13
JPWO2022145437A1 (ja) 2022-07-07
DE112021005679T5 (de) 2023-09-14

Similar Documents

Publication Publication Date Title
TWI566156B (zh) 具指紋辨識功能的觸控裝置
US6628810B1 (en) Hand biometrics sensing device
EP3252578B1 (en) Display device including fingerprint sensor
US12300017B2 (en) Elongated fingerprint sensor
AU2013396757A1 (en) Improvements in or relating to user authentication
CN116894239A (zh) 个人认证系统、个人认证装置以及个人认证方法
US9569007B2 (en) Touch pad using piezo effect
US11580772B2 (en) Method and device for monitoring a mobile input device
US10318785B2 (en) Creation of virtual intersection points on a touchscreen to permit static, non swiping fingerprint user authentication
WO2019138621A1 (ja) 指紋センサ付きタッチパネル
EP3043474A2 (en) Touch pad using piezo effect
JP7512441B2 (ja) 個人認証システム、個人認証装置、表示装置、及び個人認証方法
JP2023044288A (ja) 個人認証システム、個人認証装置、表示装置、及び個人認証方法
CN113553561A (zh) 包括指纹传感器的显示装置及驱动该显示装置的方法
CN104978552A (zh) 指纹识别装置及包含其的电子设备
CN203773561U (zh) 指纹识别装置及包含其的电子装置
WO2022025271A1 (ja) 検出装置、表示装置、検出システム、及び検出方法
US20140153790A1 (en) Biometrics Touchscreen
CN104978556B (zh) 指纹识别装置及包含其的电子装置
WO2021071762A1 (en) Techniques for fingerprint detection and user authentication
JP2005028152A (ja) 指紋認識集積回路

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21915295

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022573092

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 112021005679

Country of ref document: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21915295

Country of ref document: EP

Kind code of ref document: A1