WO2019050212A1 - 지문을 인식하기 방법, 전자 장치 및 저장 매체 - Google Patents

지문을 인식하기 방법, 전자 장치 및 저장 매체 Download PDF

Info

Publication number
WO2019050212A1
WO2019050212A1 PCT/KR2018/009995 KR2018009995W WO2019050212A1 WO 2019050212 A1 WO2019050212 A1 WO 2019050212A1 KR 2018009995 W KR2018009995 W KR 2018009995W WO 2019050212 A1 WO2019050212 A1 WO 2019050212A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
processor
external object
biometric information
input
Prior art date
Application number
PCT/KR2018/009995
Other languages
English (en)
French (fr)
Inventor
서금석
이봉재
김선아
김정후
조치현
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020180066616A external-priority patent/KR102620077B1/ko
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to US16/642,104 priority Critical patent/US11275458B2/en
Publication of WO2019050212A1 publication Critical patent/WO2019050212A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/13—Sensors therefor
    • G06V40/1318—Sensors therefor using electro-optical elements or layers, e.g. electroluminescent sensing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04184—Synchronisation with the driving of the display or the backlighting unit to avoid interferences generated internally
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/94—Hardware or software architectures specially adapted for image or video understanding
    • G06V10/955—Hardware or software architectures specially adapted for image or video understanding using specific electronic processors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/13—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/13—Sensors therefor
    • G06V40/1306—Sensors therefor non-optical, e.g. ultrasonic or capacitive sensing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1347—Preprocessing; Feature extraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1347—Preprocessing; Feature extraction
    • G06V40/1359—Extracting features related to ridge properties; Determining the fingerprint type, e.g. whorl or loop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/60—Static or dynamic means for assisting the user to position a body part for biometric acquisition
    • G06V40/67—Static or dynamic means for assisting the user to position a body part for biometric acquisition by interactive indications to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105—Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position

Definitions

  • Various embodiments relate to electronic devices and methods of fingerprint recognition of electronic devices.
  • biometric technologies As the performance of electronic devices has improved, various biometric technologies have been applied to portable electronic devices.
  • biometric technologies One of the most widely used biometric technologies is fingerprint recognition technology.
  • User authentication through fingerprint recognition is advantageous in that it has excellent security and simple authentication method.
  • the fingerprint recognition rate can be determined according to the position of the touch region for fingerprint recognition, the change of the fingerprint image according to the finger pressed state, and the time of fingerprint image acquisition and the activation of the light source.
  • an electronic device includes a display including a plurality of pixels; A display driving circuit for driving the plurality of pixels; A pressure sensor disposed adjacent the display; A biometric sensor connected to the display driving circuit through a designated interface and disposed in at least a part of the display; And a processor, wherein the processor is configured to: receive, using the pressure sensor, an input of an external object for the at least a portion of the region; Wherein the receiving operation comprises ascertaining an intensity of a pressure corresponding to the input to the at least a portion of the region, and if the intensity of the pressure satisfies a specified condition, Transmitting an instruction to turn on at least some pixels corresponding to the area to the display driving circuit; And the biometric sensor acquires biometric information on the external object in response to a signal corresponding to the command transmitted from the display driving circuit through the designated interface, Lt; / RTI >
  • an electronic device includes a display including a plurality of pixels; A display driving circuit for driving the plurality of pixels; A pressure sensor disposed adjacent the display; A biometric sensor connected to the display driving circuit through a designated interface and disposed in at least a part of the display; And a processor, wherein the processor is configured to: receive, using the pressure sensor, an input of an external object for the at least a portion of the region; Wherein the receiving operation comprises the act of ascertaining the intensity of the pressure corresponding to the input to the at least a portion of the region, and if the intensity of the pressure satisfies a specified condition, To the biometric sensor, a command for acquiring biometric information on the biometric sensor; And the display driving circuit turns on at least some pixels corresponding to the at least a part of the plurality of pixels in response to a signal corresponding to the instruction transmitted from the biosensor through the designated interface, And to transmit another instruction related to acquisition to the display driving circuit.
  • an electronic device includes a display including a plurality of pixels; A display driving circuit for driving the plurality of pixels; A pressure sensor disposed adjacent the display; A biometric sensor disposed in at least a portion of the display; And a processor, the processor using the pressure sensor to receive an input of an external object for the at least partial region; Wherein the receiving operation comprises ascertaining an intensity of a pressure corresponding to the input to the at least a portion of the region, and if the intensity of the pressure satisfies a specified condition, Outputting light using at least some pixels corresponding to the region, and using the light to obtain biometric information for the external object.
  • a fingerprint recognition method for an electronic device includes receiving an input of an external object to at least a portion of the display using a pressure sensor disposed adjacent the display; Confirming the intensity of the pressure corresponding to the input of the external object; Sending, to the display drive circuit, an instruction to turn on at least some pixels corresponding to the at least some of the plurality of pixels included in the display if the intensity of the pressure satisfies a specified condition; And a biometric sensor disposed in at least a partial area of the display acquires biometric information on the external object in response to a signal corresponding to the command transmitted from the display driving circuit through a designated interface, And transmitting other related commands to the biosensor.
  • a fingerprint recognition method for an electronic device includes receiving an input of an external object to at least a portion of the display using a pressure sensor disposed adjacent the display; Confirming the intensity of the pressure corresponding to the input of the external object; Transmitting an instruction to acquire biometric information on the external object using the biometric sensor to a biometric sensor disposed in at least a part of the display; And the display driving circuit turns on at least some pixels corresponding to the at least a part of the plurality of pixels in response to a signal corresponding to the instruction transmitted from the biosensor through a designated interface, To the display drive circuit.
  • ≪ RTI ID 0.0 >
  • a fingerprint recognition method for an electronic device includes receiving an input of an external object to at least a portion of the display using a pressure sensor disposed adjacent the display; Confirming the intensity of the pressure corresponding to the input of the external object; Outputting light using at least some pixels corresponding to the at least some of the plurality of pixels included in the display if the intensity of the pressure satisfies a specified condition; And acquiring biometric information on the external object using the light.
  • the electronic device comprises: a display; At least one sensor disposed adjacent the display; A biometric sensor disposed in at least a portion of the display; And at least one processor, wherein the at least one processor is configured to receive input by an external object for the at least partial region using the at least one sensor or the biosensor, And may be configured to acquire biometric information on the external object using the biometric sensor based at least in part on the input.
  • a non-volatile storage medium storing instructions, wherein the instructions are configured to cause the at least one processor to perform at least one operation when executed by at least one processor,
  • the operation may include receiving an input by an external object for the at least partial region using at least one sensor disposed adjacent to the display or a biosensor disposed in at least a portion of the display; And acquiring biometric information on the external object using the biometric sensor based at least in part on input by the external object.
  • the fingerprint recognition rate is increased according to the accuracy of the position of the touch region for fingerprint recognition, the accuracy of the fingerprint image according to the finger state (wet state / dry state), or the coincidence between the fingerprint image acquisition timing and the light source activation timing .
  • FIG. 1 is a block diagram of an electronic device in a network environment in accordance with various embodiments.
  • FIG. 2 is a block diagram of an electronic device according to various embodiments.
  • 3A is a perspective view illustrating an electronic device according to various embodiments.
  • FIG. 3B is a perspective view showing a state in which the electronic device is viewed from another direction.
  • FIG. 4 is a view for explaining a biometric information recognition area in a display device of an electronic device according to various embodiments.
  • FIG. 5 is a diagram for explaining touch pressure according to a biometric information state in a display device of an electronic device according to various embodiments.
  • FIGS. 6A and 6B are diagrams for explaining a time point at which light of a display is outputted and a time point at which biometric information is acquired in a display device of an electronic device according to various embodiments.
  • FIG. 7 is a block diagram of an electronic device according to various embodiments.
  • FIG. 8 is a flowchart for explaining a biometric information recognition method in an electronic device according to various embodiments
  • FIG. 9 is a flowchart for explaining a biometric information recognition method in an electronic device according to various embodiments.
  • FIG. 10 is a flowchart for explaining a biometric information recognition method in an electronic device according to various embodiments.
  • FIG. 11 is a flowchart for explaining a biometric information recognition method in an electronic device according to various embodiments.
  • FIG. 12 is a flowchart for explaining a biometric information recognition method in an electronic device according to various embodiments.
  • FIG. 13 is a flowchart for explaining a biometric information recognition method in an electronic device according to various embodiments.
  • Figs. 14 to 16B are diagrams for explaining a biometric information recognition method of an electronic device according to various embodiments. Fig.
  • 17 is a flowchart for explaining a biometric information recognition method in an electronic device according to various embodiments.
  • FIG. 18 is a flowchart for explaining a biometric information recognition method in an electronic device according to various embodiments.
  • 19 is a flowchart for explaining a biometric information recognition method in an electronic device according to various embodiments.
  • 20 is a flowchart for explaining a biometric information recognition method by an electronic device according to various embodiments.
  • FIG. 1 is a block diagram of an electronic device 101 in a network environment 100, in accordance with various embodiments.
  • an electronic device 101 in a network environment 100 communicates with an electronic device 102 via a first network 198 (e.g., near-field wireless communication) or a second network 199 (E. G., Remote wireless communication).
  • a first network 198 e.g., near-field wireless communication
  • a second network 199 E. G., Remote wireless communication
  • ≪ / RTI &gt the electronic device 101 is capable of communicating with the electronic device 104 through the server 108.
  • the electronic device 101 includes a processor 120, a memory 130, an input device 150, an audio output device 155, a display device 160, an audio module 170, a sensor module 176, an interface 177, a haptic module 179, a camera module 180, a power management module 188, a battery 189, a communication module 190, a subscriber identity module 196, and an antenna module 197 ).
  • at least one (e.g., display 160 or camera module 180) of these components may be omitted from the electronic device 101, or other components may be added.
  • some components such as, for example, a sensor module 176 (e.g., a fingerprint sensor, an iris sensor, or an illuminance sensor) embedded in a display device 160 Can be integrated.
  • Processor 120 may be configured to operate at least one other component (e.g., hardware or software component) of electronic device 101 connected to processor 120 by driving software, e.g., And can perform various data processing and arithmetic operations.
  • Processor 120 loads and processes commands or data received from other components (e.g., sensor module 176 or communication module 190) into volatile memory 132 and processes the resulting data into nonvolatile memory 134.
  • the processor 120 may operate in conjunction with a main processor 121 (e.g., a central processing unit or an application processor) and, independently, or additionally or alternatively, Or a co-processor 123 (e.g., a graphics processing unit, an image signal processor, a sensor hub processor, or a communications processor) specific to the designated function.
  • a main processor 121 e.g., a central processing unit or an application processor
  • a co-processor 123 e.g., a graphics processing unit, an image signal processor, a sensor hub processor, or a communications processor
  • the coprocessor 123 may be operated separately from or embedded in the main processor 121.
  • the coprocessor 123 may be used in place of the main processor 121, for example, while the main processor 121 is in an inactive (e.g., sleep) state, At least one component (e.g., display 160, sensor module 176, or communications module 176) of the components of electronic device 101 (e.g., 190) associated with the function or states.
  • the coprocessor 123 e.g., an image signal processor or communications processor
  • the coprocessor 123 is implemented as a component of some other functionally related component (e.g., camera module 180 or communication module 190) .
  • Memory 130 may store various data used by at least one component (e.g., processor 120 or sensor module 176) of electronic device 101, e.g., software (e.g., program 140) ), And input data or output data for the associated command.
  • the memory 130 may include a volatile memory 132 or a non-volatile memory 134.
  • the program 140 may be software stored in the memory 130 and may include, for example, an operating system 142, a middleware 144,
  • the input device 150 is an apparatus for receiving a command or data to be used for a component (e.g., processor 120) of the electronic device 101 from the outside (e.g., a user) of the electronic device 101,
  • a component e.g., processor 120
  • a microphone, a mouse, or a keyboard may be included.
  • the sound output device 155 is a device for outputting a sound signal to the outside of the electronic device 101.
  • the sound output device 155 may be a speaker for general use such as a multimedia reproduction or a sound reproduction, .
  • the receiver may be formed integrally or separately with the speaker.
  • Display device 160 may be an apparatus for visually providing information to a user of electronic device 101 and may include, for example, a display, a hologram device, or a projector and control circuitry for controlling the projector. According to one embodiment, the display device 160 may include a touch sensor or a pressure sensor capable of measuring the intensity of the pressure on the touch.
  • the audio module 170 is capable of bi-directionally converting sound and electrical signals. According to one embodiment, the audio module 170 may acquire sound through the input device 150, or may be connected to the audio output device 155, or to an external electronic device (e.g., Electronic device 102 (e.g., a speaker or headphone)).
  • an external electronic device e.g., Electronic device 102 (e.g., a speaker or headphone)
  • the sensor module 176 may generate an electrical signal or data value corresponding to an internal operating state (e.g., power or temperature) of the electronic device 101, or an external environmental condition.
  • the sensor module 176 may be a gesture sensor, a gyro sensor, a barometric sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor, an infrared sensor, Or an illuminance sensor.
  • the term module may be referred to as a device / element / member or may be omitted.
  • the interface 177 may support a designated protocol that may be wired or wirelessly connected to an external electronic device (e.g., the electronic device 102).
  • the interface 177 may include a high definition multimedia interface (HDMI), a universal serial bus (USB) interface, an SD card interface, or an audio interface.
  • HDMI high definition multimedia interface
  • USB universal serial bus
  • SD card interface Secure Digital interface
  • audio interface an audio interface
  • the connection terminal 178 may be a connector such as an HDMI connector, a USB connector, an SD card connector, or an audio connector that can physically connect the electronic device 101 and an external electronic device (e.g., the electronic device 102) (E.g., a headphone connector).
  • an HDMI connector such as an HDMI connector, a USB connector, an SD card connector, or an audio connector that can physically connect the electronic device 101 and an external electronic device (e.g., the electronic device 102) (E.g., a headphone connector).
  • the haptic module 179 may convert electrical signals into mechanical stimuli (e.g., vibrations or movements) or electrical stimuli that the user may perceive through tactile or kinesthetic sensations.
  • the haptic module 179 may include, for example, a motor, a piezoelectric element, or an electrical stimulation device.
  • the camera module 180 can capture a still image and a moving image.
  • the camera module 180 may include one or more lenses, an image sensor, an image signal processor, or a flash.
  • the power management module 188 is a module for managing the power supplied to the electronic device 101, and may be configured as at least a part of, for example, a power management integrated circuit (PMIC).
  • PMIC power management integrated circuit
  • the battery 189 is an apparatus for supplying power to at least one component of the electronic device 101 and may include, for example, a non-rechargeable primary battery, a rechargeable secondary battery, or a fuel cell.
  • the communication module 190 is responsible for establishing a wired or wireless communication channel between the electronic device 101 and an external electronic device (e.g., electronic device 102, electronic device 104, or server 108) Lt; / RTI > Communication module 190 may include one or more communication processors that support wired communication or wireless communication, operating independently of processor 120 (e.g., an application processor).
  • the communication module 190 may include a wireless communication module 192 (e.g., a cellular communication module, a short range wireless communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module 194 (E.g., a local area network (LAN) communication module, or a power line communication module), and the corresponding communication module may be used to communicate with a first network 198 (e.g., Bluetooth, WiFi direct, Communication network) or a second network 199 (e.g., a telecommunications network such as a cellular network, the Internet, or a computer network (e.g., a LAN or WAN)).
  • a wireless communication module 192 e.g., a cellular communication module, a short range wireless communication module, or a global navigation satellite system (GNSS) communication module
  • GNSS global navigation satellite system
  • wired communication module 194 E.g., a local area network (LAN) communication module, or a power line communication module
  • the wireless communication module 192 may use the user information stored in the subscriber identification module 196 to identify and authenticate the electronic device 101 within the communication network.
  • the antenna module 197 may include one or more antennas for externally transmitting or receiving signals or power.
  • the communication module 190 e.g., the wireless communication module 192 may transmit or receive signals to or from an external electronic device via an antenna suitable for the communication scheme.
  • Some of the components are connected to each other via a communication method (e.g., bus, general purpose input / output (GPIO), serial peripheral interface (SPI), or mobile industry processor interface (MIPI) (Such as commands or data) can be exchanged between each other.
  • a communication method e.g., bus, general purpose input / output (GPIO), serial peripheral interface (SPI), or mobile industry processor interface (MIPI) (Such as commands or data) can be exchanged between each other.
  • the command or data may be transmitted or received between the electronic device 101 and the external electronic device 104 via the server 108 connected to the second network 199.
  • Each of the electronic devices 102 and 104 may be the same or a different kind of device as the electronic device 101.
  • all or a portion of the operations performed in the electronic device 101 may be performed in another or a plurality of external electronic devices.
  • the electronic device 101 in the event that the electronic device 101 has to perform some function or service automatically or upon request, the electronic device 101 may be capable of executing the function or service itself, And may request the external electronic device to perform at least some functions associated therewith.
  • the external electronic device receiving the request can execute the requested function or additional function and transmit the result to the electronic device 101.
  • the electronic device 101 can directly or additionally process the received result to provide the requested function or service.
  • cloud computing, distributed computing, or client-server computing technology may be used.
  • FIG. 2 is a block diagram of an electronic device (e.g., electronic device 101, 102, 104 of FIG. 1) in accordance with various embodiments.
  • an electronic device may include a display device 260 (e.g., display device 160 of FIG. 1 and a processor 220 (e.g., processor 120 of FIG. 1).
  • a display device 260 e.g., display device 160 of FIG. 1
  • a processor 220 e.g., processor 120 of FIG. 1.
  • the display device 260 may include a display 210 including a plurality of pixels, and a display driver IC (DDI) 230 for driving the plurality of pixels.
  • a display driver IC DAI
  • the display 210 may include a display panel, and a display panel (not shown) may include a plurality of pixels capable of outputting light
  • the display drive circuit 230 may include an interface module 231, a memory 233 (e.g., a buffer memory), an image processing module 235, or a mapping module 237.
  • the display driving circuit 230 receives image data including image control data corresponding to a command for controlling the image data or the image data from the processor 220 via the interface module 231 .
  • the display driving circuit 230 can communicate with the sensor module 250 (e.g., the sensor module 176 in Fig. 1) through the interface module 231.
  • the display driving circuit 230 may store at least a part of the received image information in the memory 233, for example, on a frame basis.
  • the image processing module 235 may perform a preprocessing or post-processing (e.g., resolution, brightness, or resizing) of at least a portion of the image data based at least on characteristics of the image data or characteristics of the display 210, Can be performed.
  • the mapping module 237 may be configured to provide the image processing module 235 with at least a portion of the attributes of the pixels of the display 210 (e.g., an array of pixels (e.g., RGB stripe or pentile)
  • the pre-processed or post-processed image data may be converted into a voltage value or a current value capable of driving the pixels. At least some pixels of the display 210 may be displayed based on, for example, the voltage value or the current value so that visual information (e.g., text, image, or icon) corresponding to the image data is displayed on the display 210 .
  • the display drive circuit 230 is configured to receive at least some of the pixels corresponding to at least some of the plurality of pixels included in the display 210, when receiving an instruction to turn on the pixels from the processor 220 You can turn on the light output.
  • the at least partial area may include a biometric information recognition area (e.g., a fingerprint recognition area) capable of receiving an input of an external object for biometric information authentication.
  • the display drive circuit 230 may include at least some of the pixels corresponding to at least some of the plurality of pixels included in the display 210 upon receipt of an instruction to turn on the pixel from the processor 220 And outputs a light signal to the living body sensor module 255 indicating that the light source is being output from the display 210.
  • the display drive circuit 230 turns on at least some pixels corresponding to at least some of the plurality of pixels (e.g., biometric information recognition area) contained in the display 210 from the processor 220 And a signal indicating that the biometric sensor module 255 is ready for acquiring biometric information is received, at least some pixels corresponding to at least some of the plurality of pixels included in the display 210 are turned on Light can be output.
  • the plurality of pixels e.g., biometric information recognition area
  • the biometric sensor module 255 when a signal indicating that the biometric sensor module 255 is ready for acquiring biometric information is received from the biometric sensor module 255, at least some of the plurality of pixels included in the display 210 To turn on at least some of the pixels corresponding to the light emitting element.
  • the display device 260 may include a sensor module 250 (e.g., the sensor module 176 of FIG. 1) and the sensor module 250 may include a touch sensor module 251, a pressure sensor module 253, Module 255. < / RTI > According to one embodiment, the sensor module 250 may be disposed between pixels of the pixel layer of the display 210, or above or below the pixel layer.
  • a sensor module 250 e.g., the sensor module 176 of FIG. 1
  • the sensor module 250 may include a touch sensor module 251, a pressure sensor module 253, Module 255. < / RTI > According to one embodiment, the sensor module 250 may be disposed between pixels of the pixel layer of the display 210, or above or below the pixel layer.
  • the touch sensor module 251 senses a touch input or hovering input to the specific position by measuring a change in a signal (e.g., voltage, light amount, resistance, or charge amount) with respect to a specific position of the display 210, (E.g., position, area, pressure, or time) for the touch input or hovering input to the processor 220.
  • a signal e.g., voltage, light amount, resistance, or charge amount
  • the touch sensor module 251 senses a touch input or hovering input to the specific position by measuring a change in a signal (e.g., voltage, light amount, resistance, or charge amount) with respect to a specific position of the display 210, (E.g., position, area, pressure, or time) for the touch input or hovering input to the processor 220.
  • a signal e.g., voltage, light amount, resistance, or charge amount
  • the touch sensor module 251 is coupled to the display drive circuit 230, or to a portion of the display 210, May be included as part
  • the touch sensor module 251 may include at least one of a touch input of an external object input in at least a partial area (e.g., a biometric information recognition area) of the display 210 or a first area in at least a partial area May send a signal to the processor 220.
  • a partial area e.g., a biometric information recognition area
  • the pressure sensor module 253 may generate a touch pressure corresponding to a touch input of an external object input to a part or at least a part of the area of the display 210 (e.g., a biometric information recognition area) Information can be obtained.
  • a touch input of an external object is generated in at least a partial area (e.g., a biometric information area) of the display 210 or a first area in at least a partial area for biometric information authentication
  • the sensor module 250 embedded in the display device 260 includes a pressure sensor module
  • the electronic device according to various embodiments disclosed herein can be various types of devices.
  • the electronic device can include, for example, at least one of a portable communication device (e.g., a smart phone), a computer device, a portable multimedia device, a portable medical device, a camera, a wearable device, or a home appliance.
  • a portable communication device e.g., a smart phone
  • a computer device e.g., a laptop, a desktop, a tablet, or a smart phone
  • portable multimedia device e.g., a portable medical device
  • a camera e.g., a camera
  • a wearable device e.g., a smart watch
  • a home appliance e.g., a smart watch, or a smart watch.
  • the electronic device according to the embodiment of the present document is not limited to the above-described devices.
  • the pressure sensor module 253 may transmit a signal to the biosensor module 255 to activate the biosensor module 255, based at least in part on the input by the external object.
  • the biometric sensor module 255 is an image sensor module for biometric information recognition and can acquire biometric information (e.g., a fingerprint image) associated with a touch input through a part of the display 210.
  • biometric information e.g., a fingerprint image
  • the biosensor module 255 may include an optical fingerprint sensor.
  • the biosensor module 255 may use a light source of the display 210 or may include a separate light source.
  • the biosensor module 255 may include an image sensor that irradiates light emitted from a light source to a finger of a user and receives light reflected from a user's fingerprint and outputs a fingerprint image.
  • the biosensor module 255 may obtain fingerprint images in an area and / or swipe manner.
  • the biosensor module 255 can capture the entire fingerprint placed on the surface of the display 210 at one time.
  • the swipe manner the biosensor module 255 can acquire the entire fingerprint image by continuously capturing and combining the fingerprint images of the fingers moving across the surface of the display 210.
  • the biosensor module 255 may include an ultrasonic fingerprint sensor.
  • the biosensor module 255 may include an ultrasonic receiver for irradiating a user's finger with an ultrasonic signal generated from an ultrasonic transmitter and receiving an ultrasonic signal reflected from the fingerprint of a user to output a fingerprint image.
  • the biometric sensor module 255 receives a command for acquiring biometric information of an external object from the processor 220 for biometric information authentication, and receives light from the display 210 from the display driving circuit 230 (E.g., a fingerprint image) for an external object from at least a part of the area (e.g., a biometric information area) of the display 210 and transmits the biometric information to the processor 220.
  • a command for acquiring biometric information of an external object from the processor 220 for biometric information authentication receives light from the display 210 from the display driving circuit 230 (E.g., a fingerprint image) for an external object from at least a part of the area (e.g., a biometric information area) of the display 210 and transmits the biometric information to the processor 220.
  • the biometric sensor module 255 displays at least a part of the area of the display 210 (E.g., a fingerprint image) to the display driving circuit 230, and acquires biometric information (e.g., a fingerprint image) for the external object And transmit it to the processor 220.
  • a command for acquiring biometric information of the external object is received from the processor 220 for biometric information authentication for the biometric information module 255
  • the biometric sensor module 255 displays at least a part of the area of the display 210 (E.g., a fingerprint image) to the display driving circuit 230, and acquires biometric information (e.g., a fingerprint image) for the external object And transmit it to the processor 220.
  • biometric information authentication for the biometric sensor module 255, (For example, a fingerprint image) of the external object from the fingerprint image (for example, a biometric information area) and transmit the biometric information to the processor 220.
  • the biosensor module 255 may send a signal to the processor 220 to activate the processor 220 based, at least in part, on input by an external object.
  • Processor 220 may control the overall operation of an electronic device (e.g., electronic device 101. 102 or 103 of FIG. 1).
  • the processor 220 may acquire the biometric information of the external object according to the intensity of the pressure corresponding to the touch pressure of the external object received from the pressure sensor module 253.
  • the processor 220 may be configured to receive a touch input of an external object generated in at least a portion of an area (e.g., a biometric information area) of the display 210 received from the pressure sensor module 253 for biometric information authentication
  • the display driving circuit 230 is controlled to display at least a part of the plurality of pixels included in the display 210 (e.g., biometric information area) At least some pixels may be used to output light, and the biometric sensor module 255 may be controlled to acquire biometric information for the external entity using the light.
  • the processor 220 instructs the display driving circuit 230 to display a plurality of Or at least some of the pixels corresponding to the at least a part of the pixels or the biometric sensor module 255 to display biometric information (e.g., : Fingerprint image) of the fingerprint image.
  • biometric information e.g., : Fingerprint image
  • the processor 220 instructs the display driving circuit 230 to display a plurality of In response to a signal corresponding to the command transmitted from the display driving circuit (230) through an interface specified to the biosensor module (255), or to turn on at least some pixels corresponding to the at least some of the pixels of the biosensor module And instructions for instructing acquisition of biometric information on the external object.
  • the processor 220 transmits the biometric information of the external object to the biometric sensor module 255, Corresponding to the at least a part of the plurality of pixels in response to a signal corresponding to the command transmitted from the biosensor module 255 via an interface specified to the display driving circuit 230 And at least one of instructions for turning on at least some pixels.
  • the processor 220 may acquire biometric information of an external object according to a touch input of an external object received from the touch sensor module 251.
  • the processor 220 receives a touch input of an external object from at least a portion of the display 210 (e.g., a biometric information area) from the touch sensor module 251 for biometric information authentication, If the area of the touch input corresponding to the touch input of the external object includes the first area in the at least a partial area, the touch input of the external object generated in at least a part of the area (e.g., the biometric information area) When the intensity of the corresponding touch input satisfies the specified condition, the display driving circuit 230 is controlled to display at least a part of the plurality of pixels included in the display 210 (e.g., biometric information area) At least some pixels may be used to output light, and the biometric sensor module 255 may be controlled to acquire biometric information for the external entity using the light.
  • a biometric information area e.g., a biometric information area
  • the processor 220 instructs the display driving circuit 230 to display a plurality of Or at least some pixels corresponding to the at least a part of the pixels of the display 210, or a command for turning on the at least some pixels corresponding to the at least some of the pixels of the display 210 (e.g., For example, a fingerprint image).
  • the processor 220 instructs the display driving circuit 230 to display, A signal for turning on at least some pixels corresponding to the at least a part of the plurality of pixels or a signal corresponding to the instruction transmitted from the display driving circuit 230 through the interface specified to the biosensor module 255
  • the instruction at least one of instructions for instructing acquisition of biometric information on the external object may be transmitted.
  • the processor 220 instructs the biosensor module 255, Corresponding to the at least a part of the plurality of pixels in response to a signal corresponding to the command transmitted from the biosensor module (255) via an interface for instructing the display drive circuit (230) Or at least some of the commands for turning on at least some of the pixels.
  • the processor 220 obtains the biometric information of the external object based on the intensity of the pressure corresponding to the touch pressure of the external object received from the pressure sensor module 253 and the touch input of the external object received from the touch sensor module 251 can do.
  • the processor 220 may be configured to receive a touch input of an external object generated in at least a portion of an area (e.g., a biometric information area) of the display 210 received from the pressure sensor module 253 for biometric information authentication
  • the touch input of the external object is received from the touch sensor module 251 for at least a part of the area (for example, the biometric information area) of the display 210 and the intensity of the corresponding touch input satisfies the specified condition
  • the display driving circuit 230 is controlled to control at least a part of the plurality of pixels included in the display 210 (For example, a biometric information area), and controls the biometric sensor module 255 to generate light for the external object You can obtain the information.
  • the processor 220 determines that the intensity of the touch input corresponding to the touch input of the external object satisfies a specified condition, and the region of the touch input corresponding to the touch input of the external object is at least A command for turning on at least some pixels corresponding to the at least some of the plurality of pixels included in the display 210 to the display driving circuit 230 or a command for turning on the biosensor module 255 To at least the display 210 It is possible to transmit at least one of instructions for instructing acquisition of biometric information (e.g., fingerprint image) of an external object in some area (e.g., biometric information area).
  • biometric information e.g., fingerprint image
  • the processor 220 determines that the intensity of the touch input corresponding to the touch input of the external object satisfies a specified condition, and the touch corresponding to the touch input of the external object Instructions for turning on at least some of the pixels corresponding to the at least some of the plurality of pixels included in the display 210 if the area of the input includes a first area within the at least some area, Or at least one of instructions instructing the biosensor module 255 to acquire biometric information on the external object in response to a signal corresponding to the command transmitted from the display driving circuit 230 through the interface specified by the biosensor module 255 Lt; / RTI >
  • the processor 220 determines that the intensity of the touch input corresponding to the touch input of the external object satisfies a specified condition, and the region of the touch input corresponding to the touch input of the external object is at least
  • the biometric sensor module 255 may be provided with an interface for acquiring biometric information for the external object or an interface designated to the display driving circuit 230, And to turn on at least some pixels corresponding to the at least some of the plurality of pixels in response to a signal corresponding to the command sent from the at least one of the plurality of pixels.
  • the processor 220 may be configured to be activated if input by an external object satisfies a specified condition.
  • the processor 220 may authenticate biometric information (e.g., a fingerprint image) received from the biosensor module 255 and then perform an action associated with authentication of the electronic device (e.g., Financial settlement authentication).
  • biometric information e.g., a fingerprint image
  • an action associated with authentication of the electronic device e.g., Financial settlement authentication
  • first component is "(functionally or communicatively) connected” or “connected” to another (second) component, May be connected directly to the component, or may be connected through another component (e.g., a third component).
  • module includes units comprised of hardware, software, or firmware and may be used interchangeably with terms such as, for example, logic, logic blocks, components, or circuits.
  • a module may be an integrally constructed component or a minimum unit or part thereof that performs one or more functions.
  • the module may be configured as an application-specific integrated circuit (ASIC).
  • ASIC application-specific integrated circuit
  • Various embodiments of the present document may include instructions stored on a machine-readable storage medium (e.g., internal memory 136 or external memory 138) readable by a machine (e.g., a computer) Software (e.g., program 140).
  • the device may include an electronic device (e.g., electronic device 101) in accordance with the disclosed embodiments as an apparatus capable of calling stored instructions from the storage medium and operating according to the called instructions.
  • a processor e.g., processor 120
  • the processor may perform the function corresponding to the instruction, either directly or using other components under the control of the processor.
  • the instructions may include code generated or executed by the compiler or interpreter.
  • a device-readable storage medium may be provided in the form of a non-transitory storage medium.
  • 'non-temporary' means that the storage medium does not include a signal and is tangible, but does not distinguish whether data is stored semi-permanently or temporarily on the storage medium.
  • a method according to various embodiments disclosed herein may be provided in a computer program product.
  • a computer program product can be traded between a seller and a buyer as a product.
  • a computer program product may be distributed in the form of a machine readable storage medium (eg, compact disc read only memory (CD-ROM)) or distributed online through an application store (eg PlayStore TM ).
  • an application store eg PlayStore TM
  • at least a portion of the computer program product may be temporarily stored, or temporarily created, on a storage medium such as a manufacturer's server, a server of an application store, or a memory of a relay server.
  • Each of the components may be comprised of a single entity or a plurality of entities, and some of the subcomponents described above may be omitted, or other subcomponents May be further included in various embodiments.
  • some components e.g., modules or programs
  • FIG. 3A is a perspective view illustrating an electronic device according to various embodiments.
  • FIG. 3B is a perspective view showing an electronic device according to various embodiments viewed from a different direction.
  • FIG. 3A is a perspective view illustrating an electronic device according to various embodiments.
  • FIG. 3B is a perspective view showing an electronic device according to various embodiments viewed from a different direction.
  • FIG. 3A is a perspective view illustrating an electronic device according to various embodiments.
  • FIG. 3B is a perspective view showing an electronic device according to various embodiments viewed from a different direction.
  • the electronic device 301 may include a housing 303 and a display 360 (e.g., display 160).
  • the housing 303 may include a front surface 305 facing the first direction or a rear surface 307 or second surface facing the first direction and a second direction opposite to the front surface 305 direction.
  • the rear surface 307 of the housing 303 may be a rear cover.
  • Display 360 may include a transparent cover 361 (or window, or cover glass).
  • the display 360 may be mounted to the housing 303 such that the cover 361 forms at least a portion of the front surface 305 of the electronic device 301 /
  • the cover 361 may be arranged to close the open front 305 of the housing 303.
  • the electronic device 301 includes a mechanically actuated button, touch keys 11a, 11b, 11c, or a plurality of touch keys 11a, 11b, 11c, on the front face 305 of the housing 303, And a keypad including at least one of these.
  • the touch keys 11a, 11b, and 11c can detect the touch input of the user.
  • the housing 303 can accommodate various electronic components and the like. At least a portion of the housing 303 may be made of a conductive material.
  • the housing 303 may include sidewalls forming the outer surface of the electronic device 301.
  • a printed circuit (not shown) and / or a battery (e.g., a battery 189) may be housed inside the housing 303.
  • a printed circuit may include a processor (e.g., processor 120), a communication module (e.g., communication module 190), various interfaces (e.g., interface 177) : Power management module 188) may be mounted in the form of an integrated circuit chip.
  • the electronic device 301 may include a first camera 12a (e.g., a camera module 180), a light source portion 12b, or an iris camera 12c in the front upper region.
  • the light source unit 12b may include an IR LED
  • the iris camera 12c may photograph a user's eye or iris illuminated with red near-infrared light output from the IR LED.
  • the electronic device 301 may include a light source section light 12d, an illuminance sensor, and / or a proximity sensor 12e in the front upper end region.
  • the electronic device 301 includes a second camera 13a (e.g., a camera module 180), a heart rate monitor (HRM) 13d and / (flash) 13b.
  • the electronic device 301 may include a microphone 13c at an upper portion thereof.
  • the display 360 may be exposed through the front face 305 of the housing 303.
  • the display 360 may include a cover 361 and a display panel.
  • the display 360 may include a cover 361 and a touch panel disposed between the display panel.
  • the display 360 may output a home screen or an application screen.
  • the display 360 may detect a touch input on a home screen or an application screen.
  • the electronic device 301 may include a back cover that protects the backside 307 of the housing 303.
  • the rear cover may be mounted on the housing 303 to face the display 360 in a direction opposite to the display 360 (second direction).
  • the rear cover can form the appearance of the electronic device 301 together with the housing 303, the display 360, and the like.
  • At least a portion of the active area of the display 360 (or the area where the actual display pixels are arranged, or the area that displays the screen) or the biometric information recognition area 363, (E.g., a fingerprint sensor) for recognizing a fingerprint (e.g., a fingerprint), or a part thereof.
  • a fingerprint e.g., a fingerprint
  • a biosensor e. G., A display device
  • the areas 363 of the active area of the display 360 or the area where the actual display pixels are arranged, (E.g., a fingerprint) can be authenticated through an image corresponding to a user input obtained through the partial area 363.
  • the partial area 363 may be provided as a biometric information area (e.g., a fingerprint recognition area).
  • the biometric sensor 376 may be provided on the back surface 307 of the electronic device 301, as shown in Fig. 3B.
  • FIG. 4 is a view for explaining a biometric information recognition area in a display device of an electronic device according to various embodiments.
  • the biometric information recognition region 400 may include a first region 410 for recognition of substantial biometric information.
  • the first region includes a quarter region of the biometric information recognition region 400 and may be located at the center of the biometric information recognition region 400.
  • a touch input of an external object is generated in the biometric information recognition area 400 and a touch area corresponding to a touch input of the external object includes the first area 410, For example, 230 in FIG. 2) or a biosensor module (e.g., 255 in FIG.
  • biometric information of the external object when the touch region corresponding to the touch input of the external object includes the first region 410 included in the biometric information recognition region 400, the biometric information of the external object is acquired, Even if a user's finger as an external object is touched at the center of the biometric information recognition area 400 or touch input is performed to the side of the biometric information recognition area 400 as shown in FIG. It can be maintained without changing the quality of biometric information (e.g., fingerprint image).
  • biometric information e.g., fingerprint image
  • 5 is a diagram for explaining touch pressure according to a biometric information state in a display device of an electronic device according to various embodiments.
  • 5 shows biometric information (e.g., a fingerprint image) that changes according to a touch input for biometric information recognition and a state of an external object (e.g., a finger) (a wet state / a dry state).
  • biometric information e.g., a fingerprint image
  • an external object e.g., a finger
  • a condition in order to obtain biometric information on an external object, a condition may be preliminarily specified for the strength of the touch pressure corresponding to the touch input of the external object received from the pressure sensor module (e.g., 253 in FIG. 2) And the designated condition can be changed by the user's selection or by the finger state.
  • a processor may receive a pressure of a touch input corresponding to a touch input of an external object received from a pressure sensor module (e.g., pressure sensor module 253 of FIG. 2)
  • a pressure sensor module e.g., pressure sensor module 253 of FIG. 2
  • the intensity satisfies the specified condition
  • at least one of the body sensor module (for example, the biosensor module 255 in FIG. 2) or the display drive circuit (for example, the display drive circuit 230 in FIG. 2) Biometric information can be obtained.
  • the specified condition may be, for example, a condition that the intensity of the touch input corresponding to the touch input to the external object includes " 100-150 ".
  • the range of intensity values may include, for example, " 100 - 150 ".
  • the range of the pressure intensity value corresponding to the specified condition includes a pressure intensity value capable of preventing breakage of the display and may include a pressure intensity value that does not exceed the pressure required for operating the home key or the power key of the electronic device have.
  • FIGS. 6A and 6B are views for explaining a point of time when light of a display is outputted and a time of acquiring biometric information in a display device of an electronic device according to various embodiments.
  • the processor e.g., processor 220 of FIG. 2
  • the biometric sensor module for example, the biometric sensor module 255 in FIG. 2
  • Variable delays are generated according to the driving state of the processor,
  • the outputting time point T1 may be different from the acquiring time point T2 of the biometric information and the biometric rate may be lowered when the display time T1 of the display light source is different from the acquiring time T2 of the biometric information .
  • a wake up signal is received from a processor (e.g., the processor 220 of FIG. 2) 601 and a biometric sensor module (e.g., biometric sensor module 255 of FIG. 2) 603 denotes a state in which the bio-sensor module 603 displays a state of an external object (e.g., a bio-information recognition area) in which at least a part of the display 210 of FIG. 2
  • the biometric sensor module acquires biometric information about the external object by transmitting an instruction to acquire biometric information.
  • the display driving circuit outputs the biometric information of the plurality of pixels included in the display Transmitting at least some of the pixels corresponding to at least some of the areas by transmitting an instruction to turn on at least some pixels corresponding to at least some of the areas (B1) shows a state in which the light of the display is substantially output according to the control of the drive circuit of the display 601.
  • Biometric information for example, fingerprint image (B2) represents the time during which light is substantially output from the display.
  • the time T1 at which light of the display is output is delayed (T1> T2) than the acquisition time (T2) of the biometric information
  • the light of the display is output during the acquisition of biometric information (capture)
  • the image can not be acquired.
  • the acquisition time T2 of the biometric information is delayed (T2> T1) than the time T1 at which light of the display is outputted, the fingerprint image acquisition (capture) by the biosensor module after the light of the display is outputted, An operation may occur, and an unnecessary delay may occur in the fingerprint image acquisition.
  • the processor 620 receives the touch pressure corresponding to the touch input of the external object received from the pressure sensor module (e.g., the pressure sensor module 253 of FIG. 2)
  • the area of the touch input of the external object received from the touch sensor module satisfies the specified condition, 1 area, the wake-up signal can be transmitted to the biometric sensor module 655 (e.g., the fingerprint sensor module 255 in Fig. 2) in operation 611.
  • the processor 620 may cause the display drive circuit 630 (e.g., the display drive circuit 230 of Figure 2) to turn on at least some of the pixels corresponding to the at least some of the plurality of pixels included in the display Command (for example, high bright mode on).
  • the processor 620 may transmit a command (e.g., high bright mode on) for acquiring biometric information of an external object to the biometric sensor module 655 (e.g., the biometric sensor module 255 of FIG. 2) have.
  • the display driving circuit 630 activates the light source by turning on at least some pixels corresponding to the at least a part of the plurality of pixels included in the display, and outputs light of the display to the biosensor module 655 State can be transmitted.
  • the biometric sensor module 655 receives a command for acquiring biometric information of an external object from the processor 620 in a wakeup state
  • the biometric sensor module 655 prepares to acquire biometric information of the external object, (E.g., a fingerprint image) to the processor 620 when receiving a signal indicating that the light of the fingerprint image is in the output state.
  • FIG. 7 is a block diagram of an electronic device (e.g., electronic device 101, 102, 104 of FIG. 1) in accordance with various embodiments.
  • an electronic device e.g., electronic device 101, 102, 104 of FIG. 1.
  • an electronic device may include a display device 760, e.g., display device 160 of FIG. 1 and a processor 720 (e.g., processor 120 of FIG. 1).
  • a display device 760 e.g., display device 160 of FIG. 1
  • a processor 720 e.g., processor 120 of FIG. 1.
  • Display device 760 may include a display 710 including a plurality of pixels and a display driver IC 730 (DDI) for driving the plurality of pixels.
  • a display driver IC 730 DPI
  • Display 710 may include a display panel, and a display panel (not shown) may include a plurality of pixels capable of outputting a light source
  • the display drive circuit 730 may include an interface module 731, a memory 733 (e.g., a buffer memory), an image processing module 735, or a mapping module 737.
  • the display drive circuit 730 receives image data including image control data corresponding to a command for controlling the image data or the image data from the processor 720 via the interface module 731 .
  • the display drive circuit 730 can communicate with the touch sensor 751 and the touch drive circuit 757 for controlling the pressure sensor 753 and the biosensor module 755 via the interface module 731.
  • the display driving circuit 730 may store at least a part of the received image information in the memory 733, for example, on a frame basis.
  • the image processing module 735 may perform preprocessing or postprocessing (e.g., resolution, brightness, or resizing) based on, for example, at least a portion of the image data based at least on characteristics of the image data or characteristics of the display 710. [ Can be performed.
  • the mapping module 737 may perform preprocessing through the image processing module 735 based at least in part on the attributes of the pixels of the display 710 (e.g., the array of pixels (RGB stripe or pentile) Or convert the post-processed image data into a voltage value or a current value capable of driving the pixels. At least some pixels of the display 710 may be displayed on the display 710 by being driven based on, for example, the voltage value or current value, such that visual information (e.g., text, image, .
  • the display drive circuit 730 when an instruction to turn on a pixel from the first processor 721 is received, displays at least some of the pixels corresponding to at least some of the plurality of pixels included in the display 710 You can turn on the pixels to output the light.
  • the at least partial area may include a biometric information recognition area (e.g., a fingerprint recognition area) capable of receiving an input of an external object for biometric information authentication.
  • the display drive circuit 730 is operable to receive at least some of the plurality of pixels included in the display 710, in response to receipt of an instruction to turn on the pixel from the first processor 721 At least some of the pixels may be turned on to output the light source, and the biosensor module 755 may transmit a signal indicating that the light source is being output from the display 710.
  • the display drive circuit 730 receives at least some of the pixels (e. G., Biometric information) corresponding to at least some of the plurality of pixels included in the display 710 from the first processor 721 When a command to turn on a pixel is received and a signal is received from the biosensor module 255 indicating that it is ready for acquiring biometric information, at least some of the plurality of pixels included in the display 710 You can turn on the pixels to output the light.
  • the pixels e. G., Biometric information
  • the display driving circuit 730 displays at least some of the plurality of pixels included in the display 710 To turn on at least some of the pixels corresponding to the light emitting element.
  • display device 760 may include a sensor module (not shown, e.g., sensor module 176 of FIG. 1), which may include a touch sensor 751 and a pressure sensor 753 And a living body sensor module 755 including a living body sensor driving circuit for controlling the living body sensor or the living body sensor.
  • the sensor module may be disposed between pixels of the pixel layer of the display 710, or above or below the pixel layer.
  • the touch driving circuit 757 may be incorporated in the touch sensor 751 and the pressure sensor 753, respectively.
  • the touch sensor 751 and the pressure sensor 753 each having the touch driving circuit 757 may be implemented as separate sensors, or may be implemented as a single sensor.
  • the touch driving circuit 757 measures a change in a signal (e.g., a voltage, a light amount, a resistance, or a charge amount) of the touch sensor 751 with respect to a specific position of the display 710, And provide information (e.g., position, area, pressure, or time) about the sensed touch input or hovering input to the processor 720.
  • the touch drive circuit 757 may be coupled to the display drive circuit 730, or to a portion of the display 710, or to other components located outside the display 760, (E.g., memory card 123).
  • the touch driving circuit 757 corresponds to the touch input of an external object input from the pressure sensor 753 to a part or at least a part of the display 710 (for example, a biometric information recognition area) or a first area within the at least partial area And provide it to the processor 720.
  • the processor 720 may be operable to obtain the touch intensity information.
  • the touch-driving circuit 757 is configured to generate a touch signal on the basis of a signal received from the touch sensor 751, which is sensed in at least some areas (e.g., a biometric information recognition area) of the display 210 for biometric information authentication
  • the first processor 721 and the biosensor module 755 may provide instructions related to biometric information acquisition if it is determined that the area corresponding to the input of the external object includes the first area in the at least partial area.
  • the touch-driving circuit 757 is configured to display, based on the signal received from the pressure sensor 753, a first region (for example, a biometric information area) Acquires the intensity of the touch pressure corresponding to the touch input of the external object in the step of acquiring the biometric information when the intensity of the touch pressure corresponding to the touch input of the obtained external object satisfies the specified condition, To the first processor 721 and the biometric sensor module 755.
  • the touch-driving circuit 757 determines that the area corresponding to the input of the external object based on the signal received from the touch sensor 751 includes the first area in the at least partial area
  • the first processor 721 receives a command related to acquiring biometric information when the intensity of the touch pressure corresponding to the touch input of the external object satisfies the specified condition based on the signal received from the pressure sensor 753.
  • the biometric sensor module 755 respectively.
  • the touch-driving circuit 757 or the pressure sensor 753 transmits a signal for activating the biosensor module 755 to the biosensor module 755 based at least in part on the input by the external object .
  • the biometric sensor module 755 is an image sensor module for biometric information recognition, and can acquire biometric information (e.g., a fingerprint image) associated with a touch input through a partial area of the display 710.
  • biometric information e.g., a fingerprint image
  • the biosensor module 755 may include an optical fingerprint sensor.
  • the biological sensor module 755 may use a light source of the display 710 or may include a separate light source.
  • the biosensor module 755 may include an image sensor for irradiating the user's finger with light generated from the light source and receiving the light reflected from the fingerprint of the user to output a fingerprint image.
  • the biosensor module 755 may obtain fingerprint images in an area and / or swipe manner.
  • the biosensor module 755 may include an ultrasonic fingerprint sensor.
  • the biological sensor module 755 may include an ultrasonic receiver for irradiating an ultrasonic signal generated from an ultrasonic transmitter to a finger of a user and receiving an ultrasonic signal reflected from a fingerprint of a user and outputting a fingerprint image.
  • the biosensor module 755 may send a signal to the processor 720 to activate the processor 720 based, at least in part, on input by an external object.
  • the biometric sensor module 755 when a command related to acquiring biometric information is received from the touch driving circuit 757, the biometric sensor module 755 prepares to acquire biometric information (e.g., a fingerprint image) with respect to an external object, When the signal indicating that the light source is being output from the display 710 is received from the circuit 730, the biometric information can be obtained.
  • the biometric sensor module 755 can transmit the acquired biometric information to the second processor 723 when a signal indicating completion of communication preparation is received from the second processor 723.
  • the biometric sensor module 255 acquires biometric information from at least some regions (e.g., biometric information area) of the display 710 (E.g., a fingerprint image) to the display drive circuit 730, acquires biometric information (e.g., a fingerprint image) of the external object, and transmits the biometric information to the second processor 723, Lt; / RTI >
  • the processor 720 may include a first processor 721 and a second processor 723.
  • the first processor 721 may control the overall operation of the electronic device (e. G., Electronic device 101. 102 or 103 of FIG. 1).
  • the first processor 721 may cause the display driving circuit 730 to receive at least some of the plurality of pixels included in the display 710 when a command related to acquiring biometric information is received from the touch driving circuit 757. [ You can send a command to turn on the pixel.
  • the first processor 721 enters a wake-up state when a command related to acquiring biometric information is received from the touch driving circuit 757 while the display screen is turned off, Up signal to the second processor 723 for the second processor 723.
  • the processor 720 may be configured to be activated if input by an external object meets a specified condition.
  • the first processor 721 may be configured to send a signal to the second processor 723 to activate the second processor 723 if the input by the external object satisfies the specified condition .
  • the first processor 721 authenticates biometric information (e.g., a fingerprint image) based on the received biometric information (E.g., unlock status, payment settlement authentication or financial settlement authentication) associated with authentication of the electronic device.
  • biometric information e.g., a fingerprint image
  • the second processor 723 can control the security operation of the electronic device and, for example, can control operations for biometric authentication in the electronic device.
  • the second processor 723 may be included in or separate from the first processor 721 as a separate module from the first processor 721.
  • the second processor 723 may be a trustzone that provides a trusted execution environment that is independent of an open operating system.
  • (E.g., SPI (serial peripheral interface) communication) with the biometric sensor module 755 when the wake-up signal is received from the first processor 721 in a state that the screen of the biometric sensor module 755 is off
  • the communication ready signal can be transmitted to the biological sensor module 755.
  • the second processor 723 when biometric information (e.g., fingerprint image) is received from the biometric sensor module 755 after the preparation for communication with the biometric sensor module 755 is completed, the second processor 723 transmits the biometric information And may transmit the biometric information to the first processor 721 after performing an image processing operation.
  • biometric information e.g., fingerprint image
  • the electronic device 701 may include a display 710 including a plurality of pixels, a display drive circuit 730 for driving the plurality of pixels, a display 710 disposed adjacent to the display 710, A sensor 753 coupled to the display drive circuit 730 via a designated interface and a biometric sensor 755 disposed in at least a portion of the display 710 and a processor 720, 720) receives an input of an external object for the at least partial region using the pressure sensor (753), and the receiving operation includes an intensity of pressure corresponding to the input to the at least partial region, For at least some pixels corresponding to the at least some of the plurality of pixels, if the intensity of the pressure satisfies a specified condition, In response to a signal corresponding to the instruction transmitted from the display driving circuit (730) through the designated interface, the biometric sensor (755) transmits a command to the display driving circuit (730) It may be configured to transmit another command related to the acquisition of the biometric information to the biosensor 755 to acquire biometric information.
  • the display 710 further includes a touch sensor 751 disposed adjacent to the display 710, wherein the processor 720 is operable to determine, using the touch sensor 751,
  • the method comprising: receiving an input of an external object, the receiving operation comprising: confirming whether an area corresponding to an input of the external object includes a first area within the at least partial area,
  • the display driving circuit 730 transmits the instruction for turning on at least some pixels corresponding to the at least a part of the plurality of pixels to the display driving circuit 730 when acquiring biometric information for the external object, And to transmit the other related command to the biosensor 755.
  • the display 710 further includes a touch sensor 751 disposed adjacent to the display 710, wherein the processor 720 is responsive to the input of the received external object using the pressure sensor 755 And the area corresponding to the input of the external object received using the touch sensor 751 includes the first area in the at least partial area, Transmits the instruction for turning on at least some pixels corresponding to the at least a partial area to the display driving circuit 730 and transmits the other instruction related to the acquisition of biometric information to the external object to the biosensor 755 . ≪ / RTI >
  • the electronic device 701 may include a display 710 including a plurality of pixels, a display drive circuit 730 for driving the plurality of pixels, a display 710 disposed adjacent to the display 710, A sensor 753 coupled to the display drive circuit 730 via a designated interface and a biometric sensor 755 disposed in at least a portion of the display 710 and a processor 720, 720 uses the pressure sensor 753 to receive an input of an external object for the at least partial region; Wherein the receiving operation comprises the act of ascertaining the intensity of the pressure corresponding to the input to the at least a portion of the region, and if the intensity of the pressure satisfies the specified condition, the biosensor (755) The biometric sensor 755 transmits a command for acquiring biometric information about the external object to the biometric sensor 755.
  • the display driving circuit 730 responds to the command transmitted from the biosensor 755 through the designated interface To turn on at least some of the pixels corresponding to the at least some of the plurality of pixels in response to a signal from the display driver circuit 730 that is associated with the acquisition of the biometric information.
  • the display 710 further includes a touch sensor 751 disposed adjacent to the display 710, wherein the processor 720 is operable to determine, using the touch sensor 751,
  • the method comprising: receiving an input of an external object, the receiving operation comprising: confirming whether an area corresponding to an input of the external object includes a first area within the at least partial area, 1, the biometric sensor 755 transmits the command for acquiring biometric information on the external object to the biosensor 755, and transmits the command to the biosensor 755 to turn on at least some pixels corresponding to the at least some of the plurality of pixels May be set to transmit another command to the display driving circuit 730,
  • the system further includes a touch sensor 751 disposed adjacent to the display 710, wherein the processor 720 is responsive to the input of the received external object using the pressure sensor 753 When the intensity of the inputted input satisfies the specified condition and an area corresponding to the input of the external object received using the touch sensor 751 includes the first area in the at least partial area, To transmit the instruction for acquiring biometric information on the external object to the biosensor (755), and to transmit the other instruction for turning on at least some pixels corresponding to the at least a part of the plurality of pixels And may be set to be transmitted to the display driving circuit 730.
  • the electronic device 701 may include a display 710 including a plurality of pixels, a display drive circuit 730 for driving the plurality of pixels, a display 710 disposed adjacent to the display 710, Sensor 753, a biometric sensor 755 disposed in at least a portion of the display 710 and a processor 720.
  • the processor 720 uses the pressure sensor 753, The method comprising: receiving an input of an external object for at least a portion of an area, the act of receiving identifying an intensity of pressure corresponding to the input to the at least a portion of the region, Outputting light using at least some of the pixels corresponding to the at least some of the plurality of pixels, and using the light, A may be set to obtain.
  • the display 710 further includes a touch sensor 751 disposed adjacent to the display 710, wherein the processor 720 is operable to determine, using the touch sensor 751,
  • the method comprising: receiving an input of an external object, the receiving operation comprising: confirming whether an area corresponding to an input of the external object includes a first area within the at least partial area, 1 region, it may be configured to output light using at least some pixels corresponding to the at least a part of the plurality of pixels.
  • the system further includes a touch sensor 751 disposed adjacent to the display 710, wherein the processor 720 is responsive to the input of the received external object using the pressure sensor 753 And the area corresponding to the input of the external object received using the touch sensor 751 includes the first area in the at least partial area, And may be configured to output light using at least some pixels corresponding to the at least some regions.
  • the processor 720 may be configured to cause the display to be driven to output light using at least some of the pixels corresponding to the at least some of the plurality of pixels if the intensity of the pressure satisfies a specified condition
  • the biometric sensor 755 may be configured to transmit an instruction to the circuit 730 and transmit another command to the biosensor 755 to acquire biometric information on the external object using the light.
  • electronic device 701 includes a display 710, at least one sensor 751, 753 disposed adjacent to display 710, at least one sensor 752, And at least one processor (720) is configured to use the at least one sensor (751, 753) or the biosensor (755) May be configured to receive an input by an external object for at least a partial region and acquire biometric information for the external object using the biometric sensor 755 based at least in part on the input by the external object.
  • the at least one processor 720 may be configured to acquire biometric information for the external object using the biometric sensor 755 when the input by the external object satisfies a specified condition .
  • the at least one processor 720 may send a signal to the biosensor 755 to acquire biometric information for the external object when the input by the external object satisfies a specified condition . ≪ / RTI >
  • the display 710 further includes a display drive circuit 730 for driving the display 710, wherein the at least one processor 720, when the input by the external object satisfies the specified condition, To the display driving circuit 730, a signal for activating pixels corresponding to the at least a part of the pixels of the display 710.
  • the biometric sensor 755 may be configured to obtain biometric information for the external object based, at least in part, upon receipt of a signal associated with the operational state of the display 710.
  • the specified condition includes at least one of a condition that a value indicating the pressure of the external object with respect to the at least partial area is equal to or greater than a specified threshold value, or a condition that the at least partial area includes a specified area .
  • the biometric sensor (755) further comprises a display drive circuit (730) for driving the display (710), wherein the biosensor (755) And to transmit a signal to the display driving circuit 730 to activate the pixels corresponding to the at least a part of the pixels.
  • the biometric sensor 755 may send a signal to the at least one processor 720 to activate the at least one processor 720 based, at least in part, on input by the external object . ≪ / RTI >
  • the at least one sensor 751, 753 may be configured to transmit a signal for activating the biosensor 755 to the biosensor 755 based at least in part on the input by the external object Can be set.
  • the at least one processor 720 may be configured to be activated if the input by the external object satisfies a specified condition.
  • the at least one processor 720 includes a first processor 721 for authentication of the biometric information and a second processor 723 for image processing of the biometric information,
  • the processor 721 may be configured to send a signal to the second processor 723 to activate the second processor if the input by the external object satisfies a specified condition.
  • the biometric information recognition method may include operations 801 through 810.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI >
  • at least one of the operations 801 to 810 may be omitted, some operations may be performed in parallel, some operations may be reordered, or other operations may be added.
  • a processor receives input of an external object for at least a portion of an area (e.g., biometric area) of a display (e.g., 210 of Figure 2) from a pressure sensor module Lt; / RTI >
  • the processor can verify that the intensity of the pressure corresponding to the input of the outer object satisfies the specified condition.
  • the processor causes the display driving circuit (e.g., 230 of FIG. 2) (E.g., a high bright mode on command) for turning on at least some pixels corresponding to at least some areas.
  • the processor receives biometric information from a biosensor module that acquires biometric information (e.g., a fingerprint image) of the external object in response to a signal indicating a state of outputting light of a display received from the display driving circuit can do.
  • biometric information e.g., a fingerprint image
  • the processor may process the biometric information to perform a biometric information authentication operation (e.g., unlocking an electronic device, performing a payment, entering a password, etc.).
  • a biometric information authentication operation e.g., unlocking an electronic device, performing a payment, entering a password, etc.
  • the biometric information recognition method may include 901 through 910 operations.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI >
  • at least one of operations 901 through 910 may be omitted, some operations may be performed in parallel, some operations may be reordered, or other operations may be added.
  • the processor receives input of an external object for at least a portion of an area (e.g., a biometric area) of a display (e.g., 210 of FIG. 2) from a pressure sensor module (e.g., Lt; / RTI >
  • a pressure sensor module e.g., Lt; / RTI >
  • the processor can verify that the intensity of the pressure corresponding to the input of the external object satisfies the specified condition.
  • the processor performs a process of acquiring biometric information of the external object to the biometric sensor module (e.g., 255 in FIG. 2) Command (such as the High bright mode on command).
  • the processor transmits a signal indicating that the display driving circuit is ready to acquire biometric information of an external object, and then transmits biometric information from the biometric sensor module obtained from the biometric information (e.g., fingerprint image) .
  • the processor may process the biometric information to perform a biometric information authentication operation (e.g., unlocking an electronic device, performing a payment, entering a password, etc.).
  • a biometric information authentication operation e.g., unlocking an electronic device, performing a payment, entering a password, etc.
  • the biometric information recognition method may include operations 1001 through 1009.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI >
  • at least one of the operations 1001 to 1009 may be omitted, some operations may be performed in parallel, some operations may be reordered, or other operations may be added.
  • a processor receives input of an external object for at least a portion of an area (e.g., a biometric area) of a display (e.g., 210 of FIG. 2) from a pressure sensor module Lt; / RTI >
  • the processor can check that the intensity of the pressure corresponding to the input of the external object satisfies the specified condition.
  • the processor controls the display driving circuit (e.g., 230 in FIG. 2) At least some of the pixels corresponding to the at least some regions may be turned on to output light.
  • the processor can receive the biometric information of the external object obtained using the light from the biometric sensor module by controlling the biometric sensor module (e.g., 255 in FIG. 2).
  • the processor may process the biometric information to perform a biometric information authentication operation (e.g., unlocking an electronic device, performing a payment, inputting a password, etc.).
  • a biometric information authentication operation e.g., unlocking an electronic device, performing a payment, inputting a password, etc.
  • the biometric information recognition method may include operations 1101 through 1119.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI >
  • at least one of the operations 1101 through 1119 may be omitted, or some operations may be performed in parallel, some operations may be reordered, or other operations may be added.
  • a touch sensor module may transmit a touch input of an external object to at least a portion of a display (e.g., biometric information recognition area) 210 .
  • the pressure sensor module (e.g., 253 of FIG. 2) may transmit the pressure intensity corresponding to the input of the external object to the processor.
  • a wake-up signal can be transmitted to the biological sensor module (e.g., 255 in Fig. 2).
  • the processor may cause the display drive circuit (e.g., 230 of FIG. 2) to issue a command (e.g., a high bright mode on command) to turn on at least some pixels corresponding to the at least some of the plurality of pixels provided in the display,
  • the processor may transmit an instruction (e.g., a high bright mode on command) for acquiring biometric information of the external object to the biometric sensor module.
  • the display drive circuit may turn on at least some of the pixels corresponding to the at least some of the plurality of pixels provided in the display to output light.
  • the display drive circuit may transmit a signal to the biosensor module indicating that the display light is being output.
  • the biosensor module receives a command (e.g., a high bright mode on command) for acquiring biometric information of the external object from the processor, and outputs a signal informing the display driving circuit of a state of outputting light of the display Upon reception, biometric information (e.g., fingerprint image) of the external object can be obtained using the light.
  • a command e.g., a high bright mode on command
  • biometric information e.g., fingerprint image
  • the biosensor module may transmit the obtained biometric information to the processor.
  • the processor may process the biometric information to perform a biometric information authentication operation (e.g., unlocking an electronic device, performing a payment, or entering a password).
  • a biometric information authentication operation e.g., unlocking an electronic device, performing a payment, or entering a password.
  • the biometric information recognition method may include operations 1201 through 1229.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI > 12 illustrates an example in which the screen of the display is turned off.
  • at least one of operations 1201 to 1229 may be omitted, some operations may be performed in parallel, some operations may be reordered, or other operations may be added.
  • the touch driving circuit determines whether the intensity of the touch pressure corresponding to the touch input of the external object on the basis of the signal received from the pressure sensor (for example, 753 in FIG. 7) .
  • the input of an external object based on a signal received from the touch sensor includes a first area of the at least partial area and / or a touch pressure corresponding to a touch input of an external object based on a signal received from the pressure sensor
  • the touch operation circuit (e.g., 757 in Fig. 7) acquires biometric information including the wake-up signal from the first processor (e.g., 721 in Fig. 7) Related commands can be transmitted.
  • the touch driving circuit e.g., 757 in Fig. 7 can transmit a command related to acquisition of biometric information including the wake-up signal to the biosensor module (e.g., 755 in Fig. 7).
  • the first processor e.g., 721 of FIG. 7 in a sleep state wakes up upon receipt of a command associated with acquiring biometric information received from a touch drive circuit (e.g., 757 of FIG. 7) Thereafter, the display driving circuit may transmit a command to turn on a pixel corresponding to at least some of the plurality of pixels included in the display (e.g., 710 of FIG. 7).
  • a first processor (e.g., 721 of FIG. 7) may send a wakeup signal to a second processor in a sleep state (e.g., 723 of FIG. 8).
  • the biosensor module (e.g., 755 in Fig. 7) wakes up according to reception of a command related to acquiring biometric information received from a touch driving circuit (e.g., 757 in Fig. 7) It is possible to wait for reception of a signal indicating the state in which light of the display is being output from the display driving circuit (for example, 730 in Fig. 7) while preparing for acquiring information.
  • the display drive circuit (e.g., 730 of FIG. 7) turns on the display screen upon receipt of a command to turn on the pixels received from the first processor (e.g., 721 of FIG. 7) can do.
  • the display drive circuit (e.g., 730 of FIG. 7) includes at least some pixels (e.g., pixels) corresponding to at least some of the plurality of pixels included in the display (e.g., 710 of FIG. 7) Can be turned on to output light
  • the display drive circuit (e.g., 730 of FIG. 7) may transmit a signal to the biosensor module (e.g., 755 of FIG. 7) informing that the light of the display is being output.
  • biometric information e.g., fingerprint image
  • the second processor e.g., 723 of FIG. 7 is awakened based on the wake up signal received from the first processor (e.g., 721 of FIG. 7)
  • the base station e.g., 755 of FIG.
  • the second processor may transmit a signal to the biosensor module that communication preparation is complete when the preparation for communication with the biosensor module (e.g., 755 of FIG. 7) .
  • the biosensor module receives the acquired biometric information (e.g., fingerprint image) from the second processor (e.g., 723 in Fig. 7) To the second processor.
  • biometric information e.g., fingerprint image
  • the second processor (e.g., 723 of FIG. 7) performs image processing operations on the biometric information received from the biosensor module (e.g., 755 of FIG. 7)
  • the biometric information that has been completed can be transmitted to the first processor (e.g., 721 in Fig. 7).
  • the first processor e.g., 721 of Figure 7 authenticates the biometric information (e.g., fingerprint image) based on the biometric information received from the second processor (e.g., 723 of Figure 7) (E.g., releasing the lock state, payment settlement authentication, or financial settlement authentication).
  • biometric information e.g., fingerprint image
  • the biometric information recognition method may include operations 1301 to 1321.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI >
  • at least one of the operations 1301 to 1321 may be omitted, some operations may be performed in parallel, some operations may be reordered, or other operations may be added.
  • 13 illustrates an example in which the screen of the display is turned on.
  • step 1301 the touch driving circuit determines whether the intensity of the touch pressure corresponding to the touch input of the external object based on the signal received from the pressure sensor (e.g., 753 in FIG. 7) satisfies the specified condition .
  • the input of the external object based on the signal received from the touch sensor includes a first area of the at least partial area and / or a touch corresponding to the touch input of the external object based on the signal received from the pressure sensor
  • the touch driver circuit e.g., 757 of FIG. 7
  • the touch driving circuit can transmit a command related to acquiring biometric information to the biosensor module (e.g., 755 in Fig. 7).
  • the touch driver circuit e.g., 757 in Fig. 7
  • the first processor e.g., 721 in Fig. 7 It may transmit an instruction to turn on a pixel corresponding to at least some of the plurality of pixels included in the display (e.g., 710 of FIG. 7).
  • the biosensor module receives the biometric information acquisition command from the touch driving circuit (e.g., 757 in Fig. 7) : 730 in Fig. 7), it is possible to wait for reception of a signal indicating the state in which light of the display is being output.
  • a display e.g., 710 of FIG. 7
  • an instruction to turn on a received pixel from a first processor e.g., 721 of FIG. 7
  • At least some pixels corresponding to at least some of the plurality of pixels may be turned on to output light
  • the display drive circuit (e.g., 730 of FIG. 7) may transmit a signal to the biosensor module (e.g., 755 of FIG.
  • biometric information e.g., fingerprint image
  • the biometric sensor module (e.g., 755 in Fig. 7) confirms that the communication with the second processor (e.g., 723 in Fig. 7) is not in the sleep state and the acquired biometric information To the second processor.
  • the second processor (e.g., 723 of FIG. 7) performs image processing operations on the biometric information received from the biosensor module (e.g., 755 of FIG. 7)
  • the biometric information that has been completed can be transmitted to the first processor (e.g., 721 in Fig. 7).
  • the first processor e.g., 721 of Figure 7
  • authenticates the biometric information e.g., fingerprint image
  • the second processor e.g., 723 of Figure 7
  • the first processor authenticates the biometric information (e.g., fingerprint image) based on the biometric information received from the second processor (e.g., 723 of Figure 7) (E.g., releasing the lock state, payment settlement authentication or financial settlement authentication, etc.).
  • Figs. 14 to 16B are diagrams for explaining a biometric information recognition method of an electronic device according to various embodiments. Fig.
  • an electronic device 1401 e.g., an electronic device 101
  • a processor e.g., a processor 120 or 720
  • the user interface 1010 for inputting may be displayed on the display 1406 (e.g., the display 160 or the display 210 or 710).
  • the user interface 1410 may include a first graphic element 1420 for displaying a fingerprint input location.
  • the electronic device 1401 may obtain fingerprint images with the user's finger placed over the first graphic element 1420 and generate user authentication information including fingerprint images and / or pressure information.
  • the electronic device 1401 may display the user interface 1410 in response to user input.
  • the user input may include a predetermined touch / hovering gesture (e.g., at least one of a swipe gesture, a drag gesture, or a scroll) on the display 1406, a selection of graphic elements displayed through the display 1406, Command, or motion input.
  • a predetermined touch / hovering gesture e.g., at least one of a swipe gesture, a drag gesture, or a scroll
  • the electronic device 1401 is deteriorated in the display 1406 due to the fact that the first graphic element 1420 is fixedly displayed at a position corresponding to the biosensor module (e.g., the biosensor module 755)
  • the second graphic element 1422 may be replaced with the first graphic element 1420 to prevent the second graphic element 1422 from being displayed.
  • the electronic device 1401 may periodically switch and display the first graphical element 1420 and the second graphical element 1422.
  • the second graphical element 1422 corresponds to the inverted image of the first graphical element 1420, or the second graphical element 1422 includes at least a portion of the inverted image of the first graphical element 1420 can do.
  • the graphic element 1610 for displaying the fingerprint input position may have the form of a fingerprint, and the graphic element 1610 may include at least one line 1620.
  • the electronic device 1401 may periodically or continuously change the position of the cut-off portion 1630 on at least one line 1620.
  • the electronic device 1401 may control the display 1406 to cause the interruption portion 1630 to move along the line 1620.
  • the biometric information recognition method may include 1711-1723 operations.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI >
  • at least one of the 1711 to 1723 operations may be omitted, some of the operations may be performed in parallel, some of the operations may be reordered, or other operations may be added.
  • 17 illustrates an example in which the screen of the display (e.g., the display device 160 or the display 210 or 710) is turned off.
  • a biosensor module (e.g., biosensor module 255 or 755) may detect an external object (e.g., a user's finger) and may detect (or respond to) , And may transmit the first designated signal to the first processor (e.g., the first processor 721).
  • an external object e.g., a user's finger
  • the first processor e.g., the first processor 721.
  • the first designated signal may be a wake up signal / message / data or an interrupt signal / message / data.
  • the first processor in the sleep state may wake up (or transition to the normal / active state) or be activated based at least in part on the reception of the first designated signal (or in response) .
  • the first processor in the inactive state, may be in a state unable to perform at least a portion of its function that could be performed in the normal mode or the activated state.
  • some of the constituent circuits of the first processor in the activated state, may be in a power-on state. In the deactivated state, some of the constituent circuits of the first processor may be in the power off state.
  • the first processor may send a second designated signal to the second processor (e.g., second processor 723) based at least in part on (or in response to) the reception of the first designated signal.
  • the second processor e.g., second processor 723
  • the second designated signal may be a wake up signal / message / data.
  • a second processor in a sleep state may wake up (or transition to a normal / active state) or be activated based at least in part on (or in response to) receiving a second designated signal .
  • the biosensor module can acquire biometric information (e.g., fingerprint image).
  • biometric information e.g., fingerprint image
  • a biosensor module that is in a sleep state (or in an inactive state) based at least in part on (or in response to) the detection of an external object may wake up (or transition to a steady state) or be activated.
  • the biosensor module can prepare for acquiring biometric information after waking up. When the preparations are completed, the biosensor module can automatically acquire biometric information (e.g., a fingerprint image).
  • biometric information e.g., a fingerprint image
  • the biosensor module may transmit biometric information to the second processor.
  • the biometric sensor module may transmit a signal / message / data to the second processor to inform acquisition or transmission of the biometric information before transmitting the biometric information.
  • the second processor may perform communication preparation to perform communication with the biosensor module after waking up.
  • the second processor can transmit a signal to the biosensor module that communication preparation is completed.
  • the biosensor module may transmit the biometric information to the second processor in response to receiving the communication ready signal.
  • the second processor may perform image processing operations on biometric information (e.g., a fingerprint image) received from the biometric sensor module.
  • biometric information e.g., a fingerprint image
  • the second processor may change the image characteristics (e.g., resolution, brightness, or size of the image) of the fingerprint image based at least in part on the specified image processing settings, characteristics of the fingerprint image, or characteristics of the display.
  • image characteristics e.g., resolution, brightness, or size of the image
  • the second processor may send the image processed biometric information to the first processor.
  • the first processor may authenticate the biometric information received from the second processor.
  • the first processor may compare biometric information previously stored in a memory (e.g., memory 130) prior to receipt of the received biometric information and biometric information. The first processor can determine whether authentication is successful based on the comparison result.
  • the first processor can determine the degree of coincidence / degree of match / degree of similarity between the received biometric information and the previously stored biometric information.
  • the degree of coincidence / degree of match / degree of similarity may be a number of feature values / data / patterns / images of the received biometric information corresponding to feature values / data / patterns / images of biometric information stored in advance, Data / pattern / image < / RTI >
  • the first processor can determine that the fingerprint authentication is successful when the value of the matching or similarity between the received biometric information and the previously stored biometric information is equal to or greater than a preset threshold value.
  • the first processor may determine that fingerprint authentication has failed if the value of the match or similarity is less than a preset threshold value.
  • the first processor can execute the first function when the fingerprint authentication is successful, and can block the execution of the first function or execute the second function when the fingerprint authentication fails.
  • the first function may include at least one of an unlock function, an application execution function, a personal authentication function, a payment settlement authentication, a financial settlement authentication, a multimedia control function, an input interface change function, or a mode change function.
  • the unlock function may include unlocking a particular function or graphical element via fingerprint input.
  • the application execution function may include the ability to execute at least one of a game application, an SNS application, a document creation application, or a multimedia application, or a function to connect to the contact via a communication application (e.g., a phone application or a message application) .
  • the personal authentication function transmits at least one of fingerprint information, other personal / authentication / secret information stored in the memory, information on the authentication result, and information set at the time of authentication success to the external electronic device (e.g., the electronic device 102 or 104) .
  • Multimedia control functions include the ability to display control menus (such as the volume control menu or the playback menu), volume controls (such as volume up, volume down, or silence), or playback controls (such as rewind, Pause, or playback).
  • the interface change function may include a function of changing at least one of an input interface, an output interface, or a communication interface.
  • the mode change function may include a function of changing from a first mode (e.g., normal mode, guest mode, or restricted mode) to a second mode (e.g., edit mode, administrator mode, or unrestricted mode).
  • the second function may be a function of notifying the user of an authentication failure.
  • the first processor may display a designated user interface (e.g., message, window, screen, or indicator) or a guidance screen on the display.
  • 1711 operation and 1713 operation when performing biometric information recognition while the screen of the display is turned on, 1711 operation and 1713 operation may be omitted.
  • the biometric information recognition method may include 1811 through 1829 operations.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI >
  • at least one of the 1811 to 1829 operations may be omitted, some of the operations may be performed in parallel, some of the operations may be reordered, or other operations may be added.
  • 18 illustrates an example in which the screen of the display (e.g., the display device 160 or the display 210 or 710) is turned off.
  • the pressure sensor module (e.g., pressure sensor module 253 or 753) may be configured to detect the presence or absence of at least some of the area of the display (e.g., the touch area of the biometric information recognition area) (E.g., biometric sensor module 255 or 755) to detect a pressure of an object (e.g., a user's finger) based on at least a portion of (or in response to) The designated signal can be transmitted.
  • the first designated signal may be a signal / message / data for acquisition / processing of wakeup signal / message / data, interrupt signal / message / data or biometric information.
  • the biosensor module that is in the sleep state (or inactive state) based at least in part on (or in response to) reception of the first designated signal may wake up (or transition to a normal / active state) .
  • the pressure sensor module may transmit pressure information indicative of the pressure intensity / value of the external object to at least some area of the display (e.g., the touched area of the biometric information recognition area) to a first processor )).
  • a touch sensor module (e.g., touch sensor module 251 or 751) transmits touch information of an external object to at least a portion of the display (e.g., a touched area of the biometric information recognition area) to the first processor .
  • a first processor in a sleep state (or deactivated state) based on at least a portion of (or in response to) reception of pressure information and / or touch information may be woken up (or transitioned to a normal / .
  • the first processor determines whether a first condition that at least some of the area of the display (e.g., a touched area of the biometric information-aware area) includes a designated first area and / Or more can be determined.
  • the first processor may perform the 1819 operation if the first condition and / or the second condition is met, and if the first condition and / or the second condition are not satisfied, until the next pressure information and / It can be queued or deactivated.
  • the first processor may send the second designated signal to the second processor (e.g., second processor 723).
  • the second designated signal may be a signal / message / data for acquisition / processing of wakeup signal / message / data, interrupt signal / message / data or biometric information.
  • a second processor in a sleep state may wake up (or transition to a normal / active state) or be activated based at least in part on (or in response to) receiving a second designated signal .
  • 1821 operation for obtaining biometric information 1823 operation for transmitting biometric information
  • 1825 operation for image processing of biometric information 1827 operation for transmission of image processed biometric information
  • the biometric information recognition method may include 1911 to 1929 operations.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI >
  • at least one of the 1911 to 1929 operations may be omitted, some of the operations may be performed in parallel, some of the operations may be reordered, or other operations may be added.
  • 19 illustrates an example in which the screen of the display (e.g., the display device 160 or the display 210 or 710) is turned off.
  • the pressure sensor module (e.g., pressure sensor module 253 or 753) may be configured to detect the presence or absence of an external portion of at least a portion of the display (e.g., the touched region of the biometric information recognition region) (E.g., the user's finger), and may transmit pressure information indicative of the pressure intensity / value of the external object to the first processor (e.g., the first processor 721).
  • the first processor e.g., the first processor 721.
  • the touch sensor module (e.g., touch sensor module 251 or 751) transmits touch information of an external object to at least some area of the display (e.g., a touched area of the biometric information recognition area) to the first processor .
  • a first processor in a sleep state (or deactivated state) based on at least a portion of (or in response to) reception of pressure information and / or touch information may be woken up (or transitioned to a normal / .
  • the first processor determines whether a first condition that at least some of the area of the display (e.g., a touched area of the biometric information recognition area) includes a designated first area and / or the first condition that the pressure strength / Or more can be determined.
  • the first processor can perform the operation 1917 if the first condition and / or the second condition is satisfied, and if the first condition and / or the second condition are not satisfied, It can be queued or deactivated.
  • the first processor may transmit the first designated signal to the biosensor module (e.g., biosensor module 255 or 755).
  • the biosensor module e.g., biosensor module 255 or 755.
  • the first processor may send a second designated signal to the second processor (e.g., second processor 723).
  • each of the first and second designated signals may be a signal / message / data for acquisition / processing of a wakeup signal / message / data, an interrupt signal / message / data or biometric information.
  • a second processor or biosensor module that is in a sleep state (or in a disabled state) based at least in part on (or in response to) reception of a first or second designated signal wakes up Transition) or activated.
  • the biometric information recognition method may include 2011-2013 operations.
  • the biometric information recognition method may be applied to at least one of an electronic device (e.g., electronic device 101, 201 or 701), at least one processor (e.g., processor 120, 220 or 720) ≪ / RTI >
  • at least one of 2011 to 2013 operations may be omitted, some of the operations may be performed in parallel, some of the operations may be reordered, or other operations may be added.
  • the electronic device includes at least one sensor (e. G., A touch sensor module (e. G., A touch sensor module (Such as a touch sensor module 251 or 751) and / or a pressure sensor module (e.g., a pressure sensor module 253 or 753)) or a biosensor (e.g., a biosensor module 255 or 755 ) Can be used to receive input by an external object for at least some regions.
  • a touch sensor module e. G., A touch sensor module (Such as a touch sensor module 251 or 751) and / or a pressure sensor module (e.g., a pressure sensor module 253 or 753)
  • a biosensor e.g., a biosensor module 255 or 755
  • the electronic device may transmit a signal to the biometric sensor for acquiring biometric information on the external object.
  • the biosensor may transmit a signal for activating pixels corresponding to at least some of the pixels of the display to a display drive circuit for driving the display based at least in part on reception of the signal.
  • the biosensor may send a signal to at least one processor to activate at least one processor based, at least in part, on input by an external object.
  • the at least one sensor may transmit a signal to the biometric sensor to activate the biometric sensor, based at least in part on the input by the external object.
  • the at least one processor may be activated if the input by the external object satisfies a specified condition.
  • At least one processor is coupled to a first processor (e.g., a first processor 721) for authentication of biometric information and a second processor (e.g., a second processor 723) . ≪ / RTI > The first processor may send a signal to the second processor to activate the second processor if the input by the external object satisfies a specified condition.
  • a first processor e.g., a first processor 721
  • a second processor e.g., a second processor 723
  • the first processor may send a signal to the second processor to activate the second processor if the input by the external object satisfies a specified condition.
  • the electronic device may obtain biometric information for an external object using a biometric sensor, based at least in part on input by an external object.
  • the electronic device can acquire biometric information on an external object using a biometric sensor when an input by an external object satisfies a specified condition.
  • the electronic device can transmit a signal for acquiring biometric information to an external object to the biometric sensor.
  • the electronic device further comprises a display drive circuit for driving the display (e. G., For activating the pixels corresponding to the at least some of the pixels of the display, if the input by the external object meets a specified condition) : Display drive circuit 730).
  • the biometric sensor may obtain biometric information for an external object based, at least in part, upon receipt of a signal associated with an operational state of the display.
  • the specified condition may include at least one of a condition that a value representing the pressure of an external object for at least a partial region is equal to or greater than a specified threshold, or a condition that at least a partial region includes a specified region.
  • a fingerprint recognition method for an electronic device includes receiving an input of an external object to at least a portion of the display using a pressure sensor disposed adjacent the display, responding to input of the external object Determining a magnitude of pressure to be applied to the at least some of the plurality of pixels included in the display if the intensity of the pressure satisfies a specified condition; And a biometric sensor disposed in at least a part of the display to acquire biometric information on the external object in response to a signal corresponding to the command transmitted from the display driving circuit through a designated interface , Another instruction related to the acquisition of the biometric information To the biometric sensor.
  • a method comprising: receiving an input of an external object to the at least a portion of a region using a touch sensor disposed adjacent to the display; And transmitting the instruction for turning on at least some pixels corresponding to the at least a part of the plurality of pixels to the display drive circuit if an operation including an area corresponding to the input includes the first area And transmitting the other instruction related to the acquisition of biometric information to the external object to the biometric sensor.
  • the strength of an input corresponding to an input of an external object received using the pressure sensor satisfies a specified condition
  • the input of the external object received using a touch sensor disposed adjacent to the display To the display driving circuit, the instruction for turning on at least some pixels corresponding to the at least a part of the plurality of pixels if the area corresponding to the at least part of the plurality of pixels includes the first area, And transmitting the other command related to the acquisition of the biometric information to the biosensor.
  • a fingerprint recognition method for an electronic device includes receiving an input of an external object to at least a portion of the display using a pressure sensor disposed adjacent the display, responding to input of the external object The method comprising the steps of: identifying an intensity of a pressure to be applied to the external object by using the biosensor when the intensity of the pressure satisfies a specified condition; And responsive to a signal corresponding to the command sent from the biosensor via the designated interface, the display drive circuit transmits at least some of the pixels corresponding to the at least some of the plurality of pixels Another instruction related to the acquisition of the biometric information It may include the operation of transmitting to the display driving circuit.
  • a method comprising: receiving an input of an external object to the at least a portion of a region using a touch sensor disposed adjacent to the display; Determining whether the region corresponding to the input includes the first region, determining whether the region corresponding to the input includes the first region, receiving the instruction for acquiring biometric information on the external object using the biometric sensor, And transmitting the other instruction for turning on at least some pixels corresponding to the at least some of the plurality of pixels to the display driving circuit.
  • the strength of an input corresponding to an input of an external object received using the pressure sensor satisfies a specified condition
  • the input of the external object received using a touch sensor disposed adjacent to the display Transmits the command for acquiring biometric information on the external object to the biometric sensor using the biometric sensor if the region corresponding to the external object includes the first region in the at least partial region, And transmitting the other instruction to the display driving circuit to turn on at least some pixels corresponding to the at least some area.
  • a fingerprint recognition method for an electronic device includes receiving an input of an external object to at least a portion of the display using a pressure sensor disposed adjacent the display, responding to input of the external object And outputting light using at least some pixels corresponding to the at least some of the plurality of pixels included in the display if the intensity of the pressure meets a specified condition And an operation of acquiring biometric information on the external object using the light.
  • a method comprising: receiving an input of an external object to the at least a portion of a region using a touch sensor disposed adjacent to the display; And outputting light using at least some of the pixels corresponding to the at least some of the plurality of pixels if the input includes the first area, have.
  • the strength of an input corresponding to an input of an external object received using the pressure sensor satisfies a specified condition
  • the input of the external object received using a touch sensor disposed adjacent to the display And outputting light using at least some of the pixels corresponding to the at least some of the plurality of pixels if the area corresponding to the at least some of the plurality of pixels includes the first area.
  • the display driver circuit if the intensity of the pressure meets a specified condition, the display driver circuit sends an instruction to the display driver circuit to output light using at least some pixels corresponding to the at least some of the plurality of pixels, And transmitting another command to the biosensor disposed in at least a part of the display to acquire biometric information on the external object using the light.
  • a storage medium storing instructions, the instructions being configured to cause the at least one circuit to perform at least one operation when executed by at least one circuit, Receiving an input of an external object to at least a portion of the display using a pressure sensor disposed adjacent the display, confirming the intensity of the pressure corresponding to the input of the external object, Sending an instruction to the display drive circuit to turn on at least some pixels corresponding to the at least some of the plurality of pixels included in the display if the intensity of the pressure meets a specified condition;
  • the biosensor placed in the area is connected to the designated interface And transmitting another instruction related to the acquisition of the biometric information to the biometric sensor so as to acquire biometric information on the external object in response to a signal corresponding to the command transmitted from the display driving circuit .
  • a storage medium storing instructions, the instructions being configured to cause the at least one circuit to perform at least one operation when executed by at least one circuit, Receiving an input of an external object to at least a portion of the display using a pressure sensor disposed adjacent the display, confirming the intensity of the pressure corresponding to the input of the external object, Transmitting an instruction to acquire biometric information on the external object using the biometric sensor to a biometric sensor disposed in at least a partial area of the display when the intensity of the pressure satisfies a specified condition, Circuit from the biosensor via a designated interface And transmitting to the display drive circuit another instruction related to the acquisition of the biometric information so as to turn on at least some pixels corresponding to the at least a part of the plurality of pixels in response to the signal corresponding to the transmitted instruction can do.
  • a storage medium storing instructions, the instructions being configured to cause the at least one circuit to perform at least one operation when executed by at least one circuit, Receiving an input of an external object to at least a portion of the display using a pressure sensor disposed adjacent the display, confirming the intensity of the pressure corresponding to the input of the external object, Outputting light using at least some of the pixels corresponding to the at least some of the plurality of pixels included in the display if the intensity of the pressure meets a specified condition, And acquiring biometric information about the user.
  • a storage medium storing instructions, the instructions being configured to cause the at least one circuit to perform at least one operation when executed by at least one circuit, Receiving input by an external object relative to the at least partial region using at least one sensor disposed adjacent to the display or a biosensor disposed in at least a portion of the display, And acquiring biometric information on the external object using the biometric sensor based at least in part on the biometric information.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Input (AREA)
  • Collating Specific Patterns (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

다양한 실시예들에 따르면, 전자 장치는, 디스플레이; 상기 디스플레이와 인접하여 배치된 적어도 하나의 센서; 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서; 및 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 상기 적어도 하나의 센서 또는 상기 생체 센서를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체에 의한 입력을 수신하고, 및 상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하도록 설정될 수 있다. 다른 실시예가 가능하다.

Description

지문을 인식하기 방법, 전자 장치 및 저장 매체
다양한 실시예들은 전자 장치 및 전자 장치의 지문 인식 방법에 관한 것이다.
스마트폰 등 휴대용 전자 장치를 통해 제공되는 다양한 서비스 및 부가 기능들이 점차 확대되고 있다. 이러한 전자 장치의 효용 가치를 높이고, 다양한 사용자들의 욕구를 만족시키기 위해서 통신 서비스 제공자 또는 전자 장치 제조사들은 다양한 기능들을 제공하고 있다.
전자 장치에 제공되는 다양한 기능들에는 다양한 생체 인식 기술이 포함되어 있으며, 전자 장치의 성능이 고도화됨에 따라 휴대용 전자 장치에도 다양한 생체 인식 기술이 적용되고 있다. 다양한 생체 인식 기술 중 가장 보편적으로 사용되고 있는 것은 지문 인식 기술이다. 지문 인식을 통한 사용자 인증은 보안성이 뛰어나며 인증 방법이 간단하다는 장점이 있다.
광원을 이용한 광학식 지문 센서에서는, 특히 지문 인식을 위한 터치 영역의 위치, 손가락 눌림 상태에 따른 지문이미지 변화 및 터치 시 지문이미지 획득시점과 광원이 활성화되는 시점에 따라 지문 인식률이 결정될 수 있다.
지문 인식을 위한 터치 영역의 위치가 정확하지 않거나, 손가락 상태(Wet 상태 / Dry 상태)에 따라 지문 이미지가 정확하지 않거나, 또는 생체 정보 획득시점과 광원이 활성화되는 시점이 차이가 발생되는 경우 지문 인식률이 낮아질 수 있다.
다양한 실시예들에 따르면, 전자 장치는, 복수의 픽셀들을 포함하는 디스플레이; 상기 복수의 픽셀들을 구동하기 위한 디스플레이 구동 회로; 상기 디스플레이와 인접하여 배치된 압력 센서; 상기 디스플레이 구동 회로와 지정된 인터페이스를 통해 연결되고, 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서; 및 프로세서;를 포함하고, 상기 프로세서는, 상기 압력 센서를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체의 입력을 수신하고; 상기 수신하는 동작은 상기 적어도 일부 영역에 대한 상기 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작을 포함하고, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어를, 상기 디스플레이 구동 회로로 전송하고; 및 상기 생체 센서가 상기 지정된 인터페이스를 통해 상기 디스플레이 구동 회로로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 외부 객체에 대한 생체 정보를 획득하도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 생체 센서로 전송하도록 설정될 수 있다.
다양한 실시예들에 따르면, 전자 장치는, 복수의 픽셀들을 포함하는 디스플레이; 상기 복수의 픽셀들을 구동하기 위한 디스플레이 구동 회로; 상기 디스플레이와 인접하여 배치된 압력 센서; 상기 디스플레이 구동 회로와 지정된 인터페이스를 통해 연결되고, 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서; 및 프로세서;를 포함하고, 상기 프로세서는, 상기 압력 센서를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체의 입력을 수신하고; 상기 수신하는 동작은 상기 적어도 일부 영역에 대한 상기 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작을 포함하고, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하기 위한 명령어를, 상기 생체 센서로 전송하고; 및 상기 디스플레이 구동 회로가 상기 지정된 인터페이스를 통해 상기 생체 센서로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 디스플레이 구동 회로로 전송하도록 설정될 수 있다.
다양한 실시예들에 따르면, 전자 장치는, 복수의 픽셀들을 포함하는 디스플레이; 상기 복수의 픽셀들을 구동하기 위한 디스플레이 구동 회로; 상기 디스플레이와 인접하여 배치된 압력 센서; 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서; 및 프로세서를 포함하고, 상기 프로세서는, 상기 압력 센서를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체의 입력을 수신하고; 상기 수신하는 동작은 상기 적어도 일부 영역에 대한 상기 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작을 포함하고, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하고, 및 상기 광을 이용하여, 상기 외부 객체에 대한 생체 정보를 획득하도록 설정될 수 있다.
다양한 실시예들에 따르면, 전자 장치의 지문 인식 방법은, 디스플레이와 인접하여 배치된 압력 센서를 이용하여, 상기 디스플레이의 적어도 일부 영역에 대한 외부 객체의 입력을 수신하는 동작; 상기 외부 객체의 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작; 상기 압력의 강도가 지정된 조건을 만족하면, 상기 디스플레이에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어를, 디스플레이 구동 회로로 전송하는 동작; 및 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서가 지정된 인터페이스를 통해 상기 디스플레이 구동 회로로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 외부 객체에 대한 생체 정보를 획득하도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 생체 센서로 전송하는 동작을 포함할 수 있다.
다양한 실시예들에 따르면, 전자 장치의 지문 인식 방법은, 디스플레이와 인접하여 배치된 압력 센서를 이용하여, 상기 디스플레이의 적어도 일부 영역에 대한 외부 객체의 입력을 수신하는 동작; 상기 외부 객체의 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작; 상기 압력의 강도가 지정된 조건을 만족하면, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하기 위한 명령어를, 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서로 전송하는 동작; 및 상기 디스플레이 구동 회로가 지정된 인터페이스를 통해 상기 생체 센서로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 디스플레이 구동 회로로 전송하는 동작을 포함할 수 있다.
다양한 실시예들에 따르면, 전자 장치의 지문 인식 방법은, 디스플레이와 인접하여 배치된 압력 센서를 이용하여, 상기 디스플레이의 적어도 일부 영역에 대한 외부 객체의 입력을 수신하는 동작; 상기 외부 객체의 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작; 상기 압력의 강도가 지정된 조건을 만족하면, 상기 디스플레이에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하는 동작; 및 상기 광을 이용하여, 상기 외부 객체에 대한 생체 정보를 획득하는 동작을 포함할 수 있다.
다양한 실시예들에 따르면, 전자 장치는, 디스플레이; 상기 디스플레이와 인접하여 배치된 적어도 하나의 센서; 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서; 및 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 상기 적어도 하나의 센서 또는 상기 생체 센서를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체에 의한 입력을 수신하고, 및 상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하도록 설정될 수 있다.
다양한 실시예들에 따르면, 명령들을 저장하고 있는 비일시적 저장 매체는, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정되며, 상기 적어도 하나의 동작은, 디스플레이와 인접하여 배치된 적어도 하나의 센서 또는 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체에 의한 입력을 수신하는 동작; 및 상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하는 동작을 포함할 수 있다.
다양한 실시 예들에서는, 지문 인식을 위한 터치 영역의 위치의 정확성, 손가락 상태(Wet 상태 / Dry 상태)에 따른 지문이미지의 정확성 또는 지문이미지 획득시점과 광원이 활성화되는 시점의 일치에 따라 지문 인식률이 높일 수 있다.
도 1은 다양한 실시예들에 따른 네트워크 환경 내의 전자 장치의 블럭도이다.
도 2는 다양한 실시예들에 따른 전자 장치의 블록도이다.
도 3a는 다양한 실시예들에 따른 전자 장치를 나타내는 사시도이다.
도 3b는 전자 장치를 다른 방향에서 바라본 모습을 나타내는 사시도이다.
도 4는 다양한 실시예들에 따른 전자 장치의 표시장치에서 생체정보 인식 영역을 설명하기 위한 도면이다.
도 5는 다양한 실시 예들에 따른 전자 장치의 표시장치에서 생체 정보 상태에 따른 터치 압력을 설명하기 위한 도면이다.
도 6a 내지 도 6b는 다양한 실시 예들에 따른 전자 장치의 표시장치에서 디스플레이의 광이 출력되는 시점과 생체 정보의 획득시점을 설명하기 위한 도면들이다.
도 7은 다양한 실시예들에 따른 전자 장치의 블록도이다.
도 8은 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다
도 9는 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다.
도 10은 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다.
도 11은 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다.
도 12는 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다.
도 13은 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다.
도 14 내지 도 16b는 다양한 실시예들에 따른 전자 장치의 생체 정보 인식 방법을 설명하기 위한 도면들이다.
도 17은 다양한 실시 예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다.
도 18은 다양한 실시 예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다.
도 19는 다양한 실시 예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다.
도 20은 다양한 실시예들에 따른 전자 장치에 의한 생체 정보 인식 방법을 설명하기 위한 흐름도이다.
도 1은, 다양한 실시예들에 따른, 네트워크 환경(100) 내의 전자 장치(101)의 블럭도이다. 도 1을 참조하면, 네트워크 환경(100)에서 전자 장치(101)는 제 1 네트워크(198)(예: 근거리 무선 통신)를 통하여 전자 장치(102)와 통신하거나, 또는 제 2 네트워크(199)(예: 원거리 무선 통신)를 통하여 전자 장치(104) 또는 서버(108)와 통신할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 서버(108)를 통하여 전자 장치(104)와 통신할 수 있다. 일 실시예에 따르면, 전자 장치(101)는 프로세서(120), 메모리(130), 입력 장치(150), 음향 출력 장치(155), 표시 장치(160), 오디오 모듈(170), 센서 모듈(176), 인터페이스(177), 햅틱 모듈(179), 카메라 모듈(180), 전력 관리 모듈(188), 배터리(189), 통신 모듈(190), 가입자 식별 모듈(196), 및 안테나 모듈(197)을 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)에는, 이 구성 요소들 중 적어도 하나(예: 표시 장치(160) 또는 카메라 모듈(180))가 생략되거나 다른 구성 요소가 추가될 수 있다. 어떤 실시예에서는, 예를 들면, 표시 장치(160)(예: 디스플레이)에 임베디드된 센서 모듈(176)(예: 지문 센서, 홍채 센서, 또는 조도 센서)의 경우와 같이, 일부의 구성 요소들이 통합되어 구현될 수 있다.
프로세서(120)는, 예를 들면, 소프트웨어(예: 프로그램(140))를 구동하여 프로세서(120)에 연결된 전자 장치(101)의 적어도 하나의 다른 구성 요소(예: 하드웨어 또는 소프트웨어 구성 요소)을 제어할 수 있고, 다양한 데이터 처리 및 연산을 수행할 수 있다. 프로세서(120)는 다른 구성 요소(예: 센서 모듈(176) 또는 통신 모듈(190))로부터 수신된 명령 또는 데이터를 휘발성 메모리(132)에 로드하여 처리하고, 결과 데이터를 비휘발성 메모리(134)에 저장할 수 있다. 일 실시예에 따르면, 프로세서(120)는 메인 프로세서(121)(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 운영되고, 추가적으로 또는 대체적으로, 메인 프로세서(121)보다 저전력을 사용하거나, 또는 지정된 기능에 특화된 보조 프로세서(123)(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 여기서, 보조 프로세서(123)는 메인 프로세서(121)와 별개로 또는 임베디드되어 운영될 수 있다.
이런 경우, 보조 프로세서(123)는, 예를 들면, 메인 프로세서(121)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(121)를 대신하여, 또는 메인 프로세서(121)가 액티브(예: 어플리케이션 수행) 상태에 있는 동안 메인 프로세서(121)와 함께, 전자 장치(101)의 구성 요소들 중 적어도 하나의 구성 요소(예: 표시 장치(160), 센서 모듈(176), 또는 통신 모듈(190))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일 실시예에 따르면, 보조 프로세서(123)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성 요소(예: 카메라 모듈(180) 또는 통신 모듈(190))의 일부 구성 요소로서 구현될 수 있다. 메모리(130)는, 전자 장치(101)의 적어도 하나의 구성 요소(예: 프로세서(120) 또는 센서 모듈(176))에 의해 사용되는 다양한 데이터, 예를 들어, 소프트웨어(예: 프로그램(140)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 저장할 수 있다. 메모리(130)는, 휘발성 메모리(132) 또는 비휘발성 메모리(134)를 포함할 수 있다.
프로그램(140)은 메모리(130)에 저장되는 소프트웨어로서, 예를 들면, 운영 체제(142), 미들 웨어(144) 또는 어플리케이션(146)을 포함할 수 있다.
입력 장치(150)는, 전자 장치(101)의 구성 요소(예: 프로세서(120))에 사용될 명령 또는 데이터를 전자 장치(101)의 외부(예: 사용자)로부터 수신하기 위한 장치로서, 예를 들면, 마이크, 마우스, 또는 키보드를 포함할 수 있다.
음향 출력 장치(155)는 음향 신호를 전자 장치(101)의 외부로 출력하기 위한 장치로서, 예를 들면, 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용되는 스피커와 전화 수신 전용으로 사용되는 리시버를 포함할 수 있다. 일 실시예에 따르면, 리시버는 스피커와 일체 또는 별도로 형성될 수 있다.
표시 장치(160)는 전자 장치(101)의 사용자에게 정보를 시각적으로 제공하기 위한 장치로서, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일 실시예에 따르면, 표시 장치(160)는 터치 회로(touch circuitry) 또는 터치에 대한 압력의 세기를 측정할 수 있는 압력 센서를 포함할 수 있다.
오디오 모듈(170)은 소리와 전기 신호를 쌍방향으로 변환시킬 수 있다. 일 실시예에 따르면, 오디오 모듈(170)은, 입력 장치(150)를 통해 소리를 획득하거나, 음향 출력 장치(155), 또는 전자 장치(101)와 유선 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(102)(예: 스피커 또는 헤드폰))를 통해 소리를 출력할 수 있다.
센서 모듈(176)은 전자 장치(101)의 내부의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 센서 모듈(176)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다. 이하, 모듈이란 용어는 장치/소자/부재로 지칭되거나 생략될 수 있다.
인터페이스(177)는 외부 전자 장치(예: 전자 장치(102))와 유선 또는 무선으로 연결할 수 있는 지정된 프로토콜을 지원할 수 있다. 일 실시예에 따르면, 인터페이스(177)는 HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.
연결 단자(178)는 전자 장치(101)와 외부 전자 장치(예: 전자 장치(102))를 물리적으로 연결시킬 수 있는 커넥터, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.
햅틱 모듈(179)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 햅틱 모듈(179)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.
카메라 모듈(180)은 정지 영상 및 동영상을 촬영할 수 있다. 일 실시예에 따르면, 카메라 모듈(180)은 하나 이상의 렌즈, 이미지 센서, 이미지 시그널 프로세서, 또는 플래시를 포함할 수 있다.
전력 관리 모듈(188)은 전자 장치(101)에 공급되는 전력을 관리하기 위한 모듈로서, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구성될 수 있다.
배터리(189)는 전자 장치(101)의 적어도 하나의 구성 요소에 전력을 공급하기 위한 장치로서, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.
통신 모듈(190)은 전자 장치(101)와 외부 전자 장치(예: 전자 장치(102), 전자 장치(104), 또는 서버(108))간의 유선 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(190)은 프로세서(120)(예: 어플리케이션 프로세서)와 독립적으로 운영되는, 유선 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일 실시예에 따르면, 통신 모듈(190)은 무선 통신 모듈(192)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(194)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함하고, 그 중 해당하는 통신 모듈을 이용하여 제 1 네트워크(198)(예: 블루투스, WiFi direct 또는 IrDA(infrared data association) 같은 근거리 통신 네트워크) 또는 제 2 네트워크(199)(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부 전자 장치와 통신할 수 있다. 상술한 여러 종류의 통신 모듈(190)은 하나의 칩으로 구현되거나 또는 각각 별도의 칩으로 구현될 수 있다.
일 실시예에 따르면, 무선 통신 모듈(192)은 가입자 식별 모듈(196)에 저장된 사용자 정보를 이용하여 통신 네트워크 내에서 전자 장치(101)를 구별 및 인증할 수 있다.
안테나 모듈(197)은 신호 또는 전력을 외부로 송신하거나 외부로부터 수신하기 위한 하나 이상의 안테나들을 포함할 수 있다. 일 실시예에 따르면, 통신 모듈(190)(예: 무선 통신 모듈(192))은 통신 방식에 적합한 안테나를 통하여 신호를 외부 전자 장치로 송신하거나, 외부 전자 장치로부터 수신할 수 있다.
상기 구성 요소들 중 일부 구성 요소들은 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input/output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))를 통해 서로 연결되어 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.
일 실시예에 따르면, 명령 또는 데이터는 제 2 네트워크(199)에 연결된 서버(108)를 통해서 전자 장치(101)와 외부의 전자 장치(104)간에 송신 또는 수신될 수 있다. 전자 장치(102, 104) 각각은 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 일 실시예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 다른 하나 또는 복수의 외부 전자 장치에서 실행될 수 있다. 일 실시예에 따르면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로 또는 요청에 의하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 그와 연관된 적어도 일부 기능을 외부 전자 장치에게 요청할 수 있다. 상기 요청을 수신한 외부 전자 장치는 요청된 기능 또는 추가 기능을 실행하고, 그 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 수신된 결과를 그대로 또는 추가적으로 처리하여 요청된 기능이나 서비스를 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
도 2는 다양한 실시예들에 따른 전자 장치(예를 들어, 도 1의 전자장치(101, 102, 104))의 블록 도이다.
도 2를 참조하며, 전자 장치는 표시 장치(260, 예를 들어 도 1의 표시장치(160) 및 프로세서(220, 예를 들어 도 1의 프로세서(120))를 포함할 수 있다.
표시 장치(260)는 복수의 픽셀들을 포함하는 디스플레이(210), 및 상기 복수의 픽셀들을 구동하기 위한, 디스플레이 구동 회로(230, DDI(Display Driver IC))를 포함할 수 있다.
디스플레이(210)는 디스플레이 패널을 포함할 수 있으며, 디스플레이 패널(미도시)은 광을 출력할 수 있는 복수의 픽셀들을 포함할 수 있다
디스플레이 구동 회로(230)는 인터페이스 모듈(231), 메모리(233)(예: 버퍼 메모리), 이미지 처리 모듈(235), 또는 맵핑 모듈(237)을 포함할 수 있다. 디스플레이 구동 회로(230)는, 예를 들면, 인터페이스 모듈(231)을 통하여 프로세서(220)로부터 영상 데이터, 또는 상기 영상 데이터를 제어하기 위한 명령에 대응하는 영상 제어 신호를 포함하는 영상 정보를 수신할 수 있다. 디스플레이 구동 회로(230)는 센서 모듈(250, 예: 도 1의 센서 모듈(176))과 상기 인터페이스 모듈(231)을 통하여 커뮤니케이션할 수 있다. 또한, 디스플레이 구동 회로(230)는 상기 수신된 영상 정보 중 적어도 일부를 메모리(233)에, 예를 들면, 프레임 단위로 저장할 수 있다. 이미지 처리 모듈(235)은, 예를 들면, 상기 영상 데이터의 적어도 일부를 상기 영상 데이터의 특성 또는 디스플레이(210)의 특성에 적어도 기반하여 전처리 또는 후처리(예: 해상도, 밝기, 또는 크기 조정)를 수행할 수 있다. 맵핑 모듈(237)은 디스플레이(210)의 픽셀들의 속성(예: 픽셀들의 배열(예: RGB stripe 또는 pentile), 또는 서브 픽셀들 각각의 크기)에 적어도 일부 기반하여, 이미지 처리 모듈(235)를 통해 전처리 또는 후처리된 상기 영상 데이터를 상기 픽셀들을 구동할 수 있는 전압 값 또는 전류 값으로 변환할 수 있다. 디스플레이(210)의 적어도 일부 픽셀들은, 예를 들면, 상기 전압 값 또는 전류 값에 기반하여 구동됨으로써 상기 영상 데이터에 대응하는 시각적 정보(예: 텍스트, 이미지, 또는 아이콘)가 디스플레이(210)에 표시될 수 있다.
일 실시예에 따르면, 디스플레이 구동 회로(230)는, 프로세서(220)로부터 픽셀을 켜기 위한 명령어가 수신되면, 디스플레이 (210)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광을 출력할 수 있다. 상기 적어도 일부 영역은 생체 정보 인증을 위해 외부 객체의 입력을 수신할 수 있는 생체 정보 인식 영역(예: 지문 인식 영역)을 포함할 수 있다. 일 실시예에 따르면, 디스플레이 구동 회로(230)는, 프로세서(220)로부터 상기 픽셀을 켜기 위한 명령어의 수신에 따라 디스플레이(210)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광원을 출력하고, 생체 센서 모듈(255)에게 디스플레이(210)에서 광원이 출력되고 있음을 알리는 신호를 전송할 수 있다.
일 실시예에 따르면, 디스플레이 구동 회로(230)는, 프로세서(220)로부터 디스플레이(210)에 포함된 복수의 픽셀들 중 적어도 일부 영역(예: 생체 정보 인식 영역)에 대응되는 적어도 일부 픽셀을 켜기 위한 명령어가 수신되고, 생체 센서 모듈(255)로부터 생체 정보 획득을 위해 준비가 되었음을 알리는 신호가 수신되면, 디스플레이 (210)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광을 출력할 수 있다.
일 실시예에 따르면, 디스플레이 구동 회로(230)는, 생체 센서 모듈(255)로부터 생체 정보 획득을 위해 준비가 되었음을 알리는 신호가 수신되면, 디스플레이 (210)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광을 출력할 수 있다.
표시 장치(260)는 센서 모듈(250, 예: 도 1의 센서 모듈(176))을 포함할 수 있으며, 센서 모듈(250)은 터치 센서 모듈(251), 압력 센서 모듈(253) 또는 생체 센서 모듈(255)을 포함할 수 있다. 일 실시예에 따르면, 센서 모듈(250)은 디스플레이(210)의 픽셀 레이어의 픽셀들 사이에, 또는 상기 픽셀 레이어의 위에 또는 아래에 배치될 수 있다.
터치 센서 모듈(251)은 디스플레이(210)의 특정 위치에 대한 신호(예: 전압, 광량, 저항, 또는 전하량)의 변화를 측정함으로써 상기 특정 위치에 대한 터치 입력 또는 호버링 입력을 감지하고, 감지된 터치 입력 또는 호버링 입력에 관한 정보(예: 위치, 면적, 압력, 또는 시간)를 프로세서(220)에 제공할 수 있다. 일 실시예에 따르면, 터치 센서 모듈(251)의 적어도 일부(예: 터치 센서 IC)는 디스플레이 구동 회로(230), 또는 디스플레이(210)의 일부로, 또는 표시 장치(260)의 외부에 배치된 다른 구성요소(예: 도 1의 보조 프로세서(123))의 일부로 포함될 수 있다.
일 실시예에 따르면, 터치 센서 모듈(251)은 생체 정보 인증을 위해 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 인식 영역) 또는 적어도 일부 영역 내의 제1 영역에서 입력되는 외부 객체의 터치 입력 신호를 프로세서(220)에게 전송할 수 있다.
압력 센서 모듈(253)은 디스플레이(210)의 일부 또는 적어도 일부 영역(예: 생체 정보 인식 영역) 또는 상기 적어도 일부 영역 내의 제1 영역에 입력되는 외부 객체의 터치 입력에 대응되는 터치 압력(intensity) 정보를 획득할 수 있다.
일 실시예에 따르면, 압력 센서 모듈(253)은 생체 정보 인증을 위해 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역) 또는 적어도 일부 영역 내의 제1 영역에서 외부 객체의 터치 입력이 발생되면 상기 외부 객체의 터치 입력에 대응되는 터치 압력의 강도(intensity) 정보를 획득하여 프로세서(220)에게 전송할 수 있다. 다른 예를 들면, 표시 장치(260)에 임베디드된 센서 모듈(250)이 압력 센서 모듈을 포함할 경우, 본 문서에 개시된 다양한 실시예들에 따른 전자 장치는 다양한 형태의 장치가 될 수 있다. 전자 장치는, 예를 들면, 휴대용 통신 장치 (예: 스마트폰), 컴퓨터 장치, 휴대용 멀티미디어 장치, 휴대용 의료 기기, 카메라, 웨어러블 장치, 또는 가전 장치 중 적어도 하나를 포함할 수 있다. 본 문서의 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않는다.
일 실시예에 따르면, 압력 센서 모듈(253)은 외부 객체에 의한 입력에 적어도 일부 기반하여, 생체 센서 모듈(255)을 활성화하기 위한 신호를 생체 센서 모듈(255)로 전송할 수 있다.
생체 센서 모듈(255)은, 생체정보 인식을 위한 이미지 센서 모듈로서, 디스플레이(210)의 일부 영역을 통해 터치 입력과 연관된 생체 정보(예: 지문 이미지)를 획득할 수 있다.
일 실시예에 따르면, 생체 센서 모듈(255)은 광학식 지문 센서를 포함할 수 있다. 생체 센서 모듈(255)은 디스플레이(210)의 광원을 이용하거나, 별도의 광원을 포함할 수 있다. 생체 센서 모듈(255)은 광원으로부터 발생된 광을 사용자의 손가락에 조사하고, 사용자의 손가락 지문으로부터 반사된 광을 수신하여 지문 이미지를 출력하는 이미지 센서를 포함할 수 있다.
일 실시예에서, 생체 센서 모듈(255)은 영역(area) 방식 및/또는 스와이프(swipe) 방식으로 지문 이미지를 획득할 수 있다. 영역 방식에서, 생체 센서 모듈(255)은 디스플레이(210)의 표면 위에 배치된 지문 전체를 한번에 캡쳐할 수 있다. 스와이프 방식에서, 생체 센서 모듈(255)은 디스플레이(210)의 표면 위에서 가로질러 이동하는 손가락의 지문 이미지를 연속적으로 캡쳐하여 결합함으로써 전체 지문 이미지를 획득할 수 있다.
일 실시예에서, 생체 센서 모듈(255)은 초음파 지문 인식 센서를 포함할 수 있다. 생체 센서 모듈(255)은, 초음파 전송기로부터 발생된 초음파 신호를 사용자의 손가락에 조사하고, 사용자의 손가락 지문으로부터 반사된 초음파 신호를 수신하여 지문 이미지를 출력하는 초음파 수신기를 포함할 수 있다.
일 실시예에 따르면, 생체 센서 모듈(255)은 생체 정보 인증을 위해 프로세서(220)로부터 외부 객체의 생체 정보 획득을 위한 명령어가 수신되고, 디스플레이 구동 회로(230)로부터 디스플레이(210)의 광이 출력되고 있음을 알리는 신호가 수신되면, 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에서 외부 객체에 대한 생체 정보(예: 지문 이미지)를 획득하여 프로세서(220)에게 전송할 수 있다.
일 실시예에 따르면, 생체 센서 모듈(255)은 생체 정보 인증을 위해 프로세서(220)로부터 상기 외부 객체의 생체 정보 획득을 위한 명령어가 수신되면, 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에서 외부 객체에 대한 생체 정보(예: 지문 이미지)를 획득하기 위한 준비가 되었음을 알리는 신호를 디스플레이 구동 회로(230)에게 전송하고, 상기 외부 객체에 대한 생체 정보(예: 지문 이미지)를 획득하여 프로세서(220)에게 전송할 수 있다.
일 실시예에 따르면, 생체 센서 모듈(255)은 생체 정보 인증을 위해 디스플레이 구동 회로(230)부터 디스플레이(210)로부터 광이 출력되고 있음을 알리는 신호가 수신되면, 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에서 상기 외부 객체에 대한 생체 정보(예: 지문 이미지)를 획득하여 프로세서(220)에게 전송할 수 있다.
일 실시예에 따르면, 생체 센서 모듈(255)은 외부 객체에 의한 입력에 적어도 일부 기반하여, 프로세서(220)를 활성화하기 위한 신호를 프로세서(220)로 전송할 수 있다. 프로세서(220)는 전자 장치(예를 들어, 도 1의 전자 장치(101. 102 또는 103)의 전반적인 동작을 제어할 수 있다.
프로세서(220)는 압력 센서 모듈(253)로부터 수신된 외부 객체의 터치 압력에 대응되는 압력의 강도에 따라 외부 객체의 생체 정보를 획득할 수 있다.
일 실시예에 따르면, 상기 프로세서(220)는 생체 정보 인증을 위해 압력 센서 모듈(253)로부터 수신된 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에서 발생된 외부 객체의 터치 입력에 대응되는 터치 입력의 강도(intensity)가 지정된 조건을 만족하면, 디스플레이 구동 회로(230)를 제어하여 디스플레이(210)에 포함된 복수의 픽셀들 중 적어도 일부 영역(예: 생체 정보 영역)에 대응되는 적어도 일부 픽셀을 이용하여 광을 출력하고, 생체 센서 모듈(255)을 제어하여 상기 광을 이용하여 상기 외부 개체에 대한 생체 정보를 획득할 수 있다.
일 실시예에 따르면, 프로세서(220)는 상기 외부 객체의 터치 입력에 대응되는 터치 입력의 강도(intensity)가 지정된 조건을 만족하면, 디스플레이 구동 회로(230)에게 디스플레이(210)에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어, 또는 생체 센서 모듈(255)에게 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에서 외부 객체에 대한 생체 정보(예: 지문 이미지)의 획득을 지시하는 명령어 중 적어도 하나를 전송할 수 있다.
일 실시예에 따르면, 상기 프로세서(220)는 상기 외부 객체의 터치 입력에 대응되는 터치 입력의 강도(intensity)가 지정된 조건을 만족하면, 디스플레이 구동 회로(230)에게 디스플레이(210)에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어, 또는 상기 생체 센서 모듈(255)에게 지정된 인터페이스를 통해 상기 디스플레이 구동 회로(230)로부터 전송된 상기 명령어에 대응하는 신호에 응답하여, 상기 외부 객체에 대한 생체 정보를 획득하도록 지시하는 명령어 중 적어도 하나를 전송할 수 있다.
일 실시예에 따르면, 상기 프로세서(220)는 상기 외부 객체의 터치 입력에 대응되는 터치 입력의 강도(intensity)가 지정된 조건을 만족하면, 상기 생체 센서 모듈(255)에게 상기 외부 객체에 대한 생체 정보를 획득하기 위한 명령어, 또는 디스플레이 구동 회로(230)에게 지정된 인터페이스를 통해 상기 생체 센서 모듈(255)로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어 중 적어도 하나를 전송할 수 있다.
프로세서(220)는 터치 센서 모듈(251)로부터 수신된 외부 객체의 터치 입력에 따라 외부 객체의 생체 정보를 획득할 수 있다.
일 실시예에 따르면, 상기 프로세서(220)는 생체 정보 인증을 위해 터치 센서 모듈(251)로부터 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에 대한 외부 객체의 터치 입력이 수신되고, 상기 외부 객체의 터치 입력에 대응되는 터치입력의 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에서 발생된 외부 객체의 터치 입력에 대응되는 터치 입력의 강도(intensity)가 지정된 조건을 만족하면, 디스플레이 구동 회로(230)를 제어하여 디스플레이(210)에 포함된 복수의 픽셀들 중 적어도 일부 영역(예: 생체 정보 영역)에 대응되는 적어도 일부 픽셀을 이용하여 광을 출력하고, 생체 센서 모듈(255)을 제어하여 상기 광을 이용하여 상기 외부 개체에 대한 생체 정보를 획득할 수 있다.
일 실시예에 따르면, 프로세서(220)는 상기 외부 객체의 터치 입력에 대응되는 터치 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 디스플레이 구동 회로(230)에게 디스플레이(210)에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어, 또는 생체 센서 모듈(255)에게 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에서 외부 객체에 대한 생체 정보(예: 지문 이미지)의 획득을 지시하는 명령어 중 적어도 하나를 전송할 수 있다.
일 실시예에 따르면, 상기 프로세서(220)는 상기 외부 객체의 터치 입력에 대응되는 터치 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 디스플레이 구동 회로(230)에게 디스플레이(210)에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어, 또는 상기 생체 센서 모듈(255)에게 지정된 인터페이스를 통해 상기 디스플레이 구동 회로(230)로부터 전송된 상기 명령어에 대응하는 신호에 응답하여, 상기 외부 객체에 대한 생체 정보를 획득하도록 지시하는 명령어 중 적어도 하나를 전송할 수 있다.
일 실시예에 따르면, 상기 프로세서(220)는 상기 외부 객체의 터치 입력에 대응되는 터치 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 상기 생체 센서 모듈(255)에게 상기 외부 객체에 대한 생채 정보를 획득하기 위한 명령어, 또는 디스플레이 구동 회로(230)에게 지정된 인터페이스를 통해 상기 생체 센서 모듈(255)로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어 중 적어도 하나를 전송할 수 있다.
프로세서(220)는 압력 센서 모듈(253)로부터 수신된 외부 객체의 터치 압력에 대응되는 압력의 강도 및 터치 센서 모듈(251)로부터 수신된 외부 객체의 터치 입력에 따라, 외부 객체의 생체 정보를 획득할 수 있다.
일 실시예에 따르면, 상기 프로세서(220)는 생체 정보 인증을 위해 압력 센서 모듈(253)로부터 수신된 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에서 발생된 외부 객체의 터치 입력에 대응되는 터치 입력의 강도(intensity)가 지정된 조건을 만족하고, 터치 센서 모듈(251)로부터 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에 대한 외부 객체의 터치 입력이 수신되고, 상기 외부 객체의 터치 입력에 대응되는 터치입력의 영역이 상기 적어도 일부 영역 내의 제1 영역 을 포함하면, 디스플레이 구동 회로(230)를 제어하여 디스플레이(210)에 포함된 복수의 픽셀들 중 적어도 일부 영역(예: 생체 정보 영역)에 대응되는 적어도 일부 픽셀을 이용하여 광을 출력하고, 생체 센서 모듈(255)을 제어하여 상기 광을 이용하여 상기 외부 개체에 대한 생체 정보를 획득할 수 있다.
일 실시예에 따르면, 프로세서(220)는 상기 외부 객체의 터치 입력에 대응되는 터치 입력의 강도(intensity)가 지정된 조건을 만족하고, 상기 외부 객체의 터치 입력에 대응되는 터치입력의 영역이 상기 적어도 일부 역 내의 제1 영역을 포함하면, 디스플레이 구동 회로(230)에게 디스플레이(210)에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어, 또는 생체 센서 모듈(255)에게 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역)에서 외부 객체에 대한 생체 정보(예: 지문 이미지)의 획득을 지시하는 명령어 중 적어도 하나를 전송할 수 있다.
일 실시예에 따르면, 상기 프로세서(220)는 프로세서(220)는 상기 외부 객체의 터치 입력에 대응되는 터치 입력의 강도(intensity)가 지정된 조건을 만족하고, 상기 외부 객체의 터치 입력에 대응되는 터치입력의 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 디스플레이 구동 회로(230)에게 디스플레이(210)에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어, 또는 상기 생체 센서 모듈(255)에게 지정된 인터페이스를 통해 상기 디스플레이 구동 회로(230)로부터 전송된 상기 명령어에 대응하는 신호에 응답하여, 상기 외부 객체에 대한 생체 정보를 획득하도록 지시하는 명령어 중 적어도 하나를 전송할 수 있다.
일 실시예에 따르면, 프로세서(220)는 상기 외부 객체의 터치 입력에 대응되는 터치 입력의 강도(intensity)가 지정된 조건을 만족하고, 상기 외부 객체의 터치 입력에 대응되는 터치입력의 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 상기 생체 센서 모듈(255)에게 상기 외부 객체에 대한 생채 정보를 획득하기 위한 명령어, 또는 디스플레이 구동 회로(230)에게 지정된 인터페이스를 통해 상기 생체 센서 모듈(255)로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어 중 적어도 하나를 전송할 수 있다.
일 실시예에 따르면, 프로세서(220)는 외부 객체에 의한 입력이 지정된 조건을 만족하면 활성화되도록 설정될 수 있다.
일 실시예에 따르면, 프로세서(220)는 생체 센서 모듈(255)로부터 수신된 생체 정보(예: 지문이미지)를 인증한 후 전자 장치의 인증과 관련된 동작(예: 잠금 상태 해제, 지불 결제 인증 또는 금융 결제 인증)을 수행할 수 있다.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 및/또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성 요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및/또는 B 중 적어도 하나", "A, B 또는 C" 또는 "A, B 및/또는 C 중 적어도 하나" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", "첫째" 또는 "둘째" 등의 표현들은 해당 구성 요소들을, 순서 또는 중요도에 상관없이 수식할 수 있고, 한 구성 요소를 다른 구성 요소와 구분하기 위해 사용될 뿐 해당 구성 요소들을 한정하지 않는다. 어떤(예: 제 1) 구성 요소가 다른(예: 제 2) 구성 요소에 "(기능적으로 또는 통신적으로) 연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기 어떤 구성 요소가 상기 다른 구성 요소에 직접적으로 연결되거나, 다른 구성 요소(예: 제 3 구성 요소)를 통하여 연결될 수 있다.
본 문서에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구성된 유닛을 포함하며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로 등의 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 모듈은 ASIC(application-specific integrated circuit)으로 구성될 수 있다.
본 문서의 다양한 실시예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)(예: 내장 메모리(136) 또는 외장 메모리(138))에 저장된 명령어를 포함하는 소프트웨어(예: 프로그램(140))로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시예들에 따른 전자 장치(예: 전자 장치(101))를 포함할 수 있다. 상기 명령이 프로세서(예: 프로세서(120))에 의해 실행될 경우, 프로세서가 직접, 또는 상기 프로세서의 제어하에 다른 구성 요소들을 이용하여 상기 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, ‘비일시적’은 저장매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.
일 실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
도 3a는 다양한 실시예들에 따른 전자 장치를 나타내는 사시도이다. 도 3b는 다양한 실시예들에 따른 전자 장치를 다른 방향에서 바라본 모습을 나타내는 사시도이다.
전자 장치(301)(예: 전자 장치(101))는 하우징(303) 및 디스플레이(360)(예: 표시 장치(160))를 포함할 수 있다. 하우징(303)은 제 1 방향으로 향하는 전면(305) 또는 제 1 면과 전면(305) 방향의 반대인 제 2 방향으로 향하는 후면(307) 또는 제 2 면을 포함할 수 있다. 하우징(303)의 후면(307)은 후면 커버일 수 있다.
하우징(303)의 전면(305)은 적어도 일부가 개방될 수 있다. 디스플레이(360)는 투명한 커버(361)(또는 윈도우, 또는 커버 글래스)를 포함할 수 있다. 디스플레이(360)는, 커버(361)가 전자 장치(301)/하우징(303) 전면(305)의 적어도 일부를 형성하도록, 하우징(303)에 장착될 수 있다. 커버(361)는 하우징(303)의 개방된 전면(305)을 폐쇄하도록 배치될 수 있다.
일 실시예에서, 전자 장치(301)는, 하우징(303)의 전면(305)에, 또는 디스플레이(360)의 일측 영역에, 기계적으로 작동하는 버튼, 터치 키(11a, 11b, 11c), 또는 이들 중의 적어도 하나를 포함하는 키패드를 포함할 수 있다. 터치 키(11a, 11b, 11c)는 사용자의 터치 입력을 검출할 수 있다.
하우징(303)은 각종 전자 부품 등을 수용할 수 있다. 하우징(303)은 적어도 일부분이 도전성 재질로 이루어질 수 있다. 하우징(303)은 전자 장치(301)의 외측면을 형성하는 측벽들을 포함할 수 있다. 하우징(303)의 내부에는 인쇄 회로부(미도시) 및/또는 배터리(예: 배터리(189))가 수용될 수 있다. 예를 들어, 인쇄 회로부(미도시)에는 프로세서(예: 프로세서(120)), 통신 모듈(예: 통신 모듈(190)), 각종 인터페이스(예: 인터페이스(177)), 또는 전력 관리 모듈(예: 전력 관리 모듈(188)) 중의 적어도 하나가 집적회로 칩 형태로 탑재될 수 있다.
일 실시예에 따르면, 전자 장치(301)는, 전면 상단 영역에 제 1 카메라(12a)(예: 카메라 모듈(180)), 광원부(12b) 또는 홍채 카메라(12c)를 포함할 수 있다. 예를 들어, 광원부(12b)는 IR LED를 포함할 수 있으며, 홍채 카메라(12c)는 IR LED에서 출력되는 적색 근적외선으로 조명된 사용자의 눈 또는 홍채를 촬영할 수 있다.
일 실시예에 따르면, 전자 장치(301)는, 전면 상단 영역에 광원부 표시등(12d), 조도 센서 및/또는 근접 센서(12e)를 포함할 수 있다.
일 실시예에 따르면, 전자 장치(301)는, 후면(307)에 제 2 카메라(13a)(예: 카메라 모듈(180)), 심박수 센서(HRM, heart rate monitor)(13d) 및/또는 플래시(flash)(13b)를 포함할 수 있다. 전자 장치(301)는, 상부에 마이크(13c)를 포함될 수 있다.
디스플레이(360)는 하우징(303)의 전면(305)을 통해 노출될 수 있다. 디스플레이(360)는 커버(361) 및 디스플레이 패널을 포함할 수 있다. 일 실시예에 따르면, 디스플레이(360)는 커버(361) 및 디스플레이 패널의 사이에 배치되는 터치 패널을 포함할 수 있다. 디스플레이(360)는 홈 화면 또는 어플리케이션 화면을 출력할 수 있다. 디스플레이(360)는 홈 화면 또는 어플리케이션 화면 상의 터치 입력을 검출할 수 있다.
일 실시예에 따르면, 전자 장치(301)는 하우징(303)의 후면(307)을 보호하는 후면 커버를 포함할 수 있다. 후면 커버는 디스플레이(360)와는 반대편 방향(제 2 방향)을 대면하도록 하우징(303)에 장착될 수 있다. 후면 커버는 하우징(303), 디스플레이(360)와 함께 전자 장치(301)의 외관을 형성할 수 있다.
다양한 실시예들에 따르면, 디스플레이(360)의 액티브 영역(active area)(또는 실제 디스플레이 픽셀이 배치된 영역, 또는 화면을 표시하는 영역) 중 적어도 일부 또는 생체 정보 인식 영역(363)은, 생체 정보(예: 지문)를 인식하기 위한 생체 센서(예: 지문 센서) 또는 그 일부로서 제공될 수 있다.
다양한 실시예들에 따르면, 디스플레이(360)의 액티브 영역(active area)(또는 실제 디스플레이 픽셀이 배치된 영역, 또는 화면을 표시하는 영역) 중 적어도 일부 영역(363)의 아래에는 생체 센서(예: 지문 센서)가 배치되고 상기 일부 영역(363)을 통해 획득되는 사용자 입력에 대응하는 이미지를 통하여 생채 정보(예: 지문)를 인증할 수 있다. 상기 일부 영역(363)은 생체 정보 영역(예: 지문 인식 영역)으로서 제공될 수 있다.
일 실시예에 따르면, 도 3b에 도시된 바와 같이, 생체 센서(376)는 전자 장치(301)의 후면(307)에 제공될 수도 있다.
도 4는 다양한 실시예들에 따른 전자 장치의 표시장치에서 생체정보 인식 영역을 설명하기 위한 도면이다.
도 4에 따르면, 전자 장치의 생체 정보 인증을 수행하기 위하여 디스플레이의 적어도 일부 영역(400, 예: 지문 인식 영역))을 통해 생체와 관련된 정보를 획득할 수 있다. 일 실시예에 따르면, 생체 정보 인식 영역(400)은 실질적인 생체 정보의 인식을 위한 제1 영역(410)을 포함할 수 있다. 제1 영역은 생체 정보 인식 영역(400)의 1/4 영역을 포함하고, 생체 정보 인식 영역(400)의 중앙에 위치될 수 있다. 일 실시예에 따르면, 생체 정보 인식 영역(400)에서 외부 객체의 터치 입력이 발생되고, 상기 외부 객체의 터치 입력에 대응되는 터치 영역이 상기 제1 영역(410)을 포함하면, 디스플레이 구동 회로(예: 도 2의 230) 또는 생체 센서 모듈(예: 도 2의 255)을 제어하여 상기 외부 객체의 생체 정보를 획득할 수 있다. 일 실시예에 따르면, 외부 객체의 터치 입력에 대응되는 터치 영역이 생체 정보 인식 영역(400)에 포함된 제1 영역(410)을 포함하는 경우에 외부 객체의 생체 정보를 획득함에 따라, 도 4의 (a)와 같이 외부 객체인 사용자의 손가락이 생체 정보 인식 영역(400)의 중앙에 터치 입력되거나, 또는 도 4의 (b)와 같이 생체 정보 인식 영역(400)의 측면에 터치 입력되어도, 생체 정보(예: 지문 이미지)의 품질에 대한 변화 없이 그대로 유지할 수 있다.
도 5는 다양한 실시 예들에 따른 전자 장치의 표시장치에서 생체 정보 상태에 따른 터치 압력을 설명하기 위한 도면이다. 도 5에서는 생체 정보 인식을 위한 터치 입력 및 외부 객체(예: 손가락)의 상태(Wet 상태 / Dry 상태)에 따라 변화되는 생체 정보(예: 지문이미지)를 보여주고 있다.
일 실시예에 따르면, 외부 객체에 대한 생체 정보를 획득하기 위해, 압력 센서 모듈(예: 도 2의 253)로부터 수신된 외부 객체의 터치 입력에 대응되는 터치 압력의 강도에 대해 조건을 미리 지정할 수 있으며, 상기 지정된 조건은 사용자의 선택에 의해 또는 손가락 상태에 의해 변경될 수 있다.
일 실시예에 따르면, 프로세서(예: 도 2의 프로세서(220))는 압력 센서 모듈(예: 도 2의 압력 센서 모듈(253))로부터 수신되는 외부 객체의 터치 입력에 대응되는 터치 입력의 압력 강도가 지정된 조건을 만족하면, 셍체 센서 모듈(예: 도 2의 생체 센서 모듈(255)) 또는 디스플레이 구동 회로(예: 도 2의 디스플레이 구동 회로(230)) 중 적어도 하나를 제어하여 외부 객체에 대한 생체 정보를 획득할 수 있다.
일 실시예에 따르면, 상기 지정된 조건은 예를 들어 외부 객체에 대한 터치 입력에 대응되는 터치 입력의 강도가 "100 - 150"을 포함하는 조건이 될 수 있다.
도 5에 따르면, Wet 상태(501a, 501b)의 외부 객체인 손가락으로 터치 입력이 발생되고 상기 터치 입력의 압력 강도 값이 "10" 및 "150"일 때, 이미지 스코어는 "25.05"로 양호한 상태이다. Dry 상태(503a, 503b)의 손가락으로 터치 입력이 발생되고 상기 터치 입력의 압력 강도 값이 "10"일 때, 이미지 스코어는 "21.36"으로 양호하지 못한 상태이다. 또한 Dry 상태(503a, 503b)의 손가락으로 터치 입력이 발생되고 상기 터치 입력의 압력 강도 값이 "150"일 때, 이미지 스코어는 "25.02"으로 양호한 상태이다. 따라서, Wet 상태(501a, 501b)의 손가락으로 터치를 입력할 때와 Dry 상태(503a, 503b)의 손가락으로 터치를 입력할 때 양호한 생체 정보인 지문 이미지를 획득할 수 있는 지정된 조건에 대응되는 압력 강도 값의 범위는 예를 들어 "100 - 150"을 포함할 수 있다. 상기 지정된 조건에 대응되는 압력 강도 값의 범위는 디스플레이의 파손을 방지할 수 있는 압력 강도 값을 포함하며, 전자 장치의 홈 키 또는 전원 키의 작동에 필요한 압력을 초과하지 압력 강도 값을 포함할 수 있다.
도 6a 내지 도 6b는 다양한 실시 예들에 따른 전자 장치의 표시장치에서 디스플레이의 광이 출력되는 시점과 생체 정보의 획득시점을 설명하기 위한 도면이다.
디스플레이의 적어도 일부 영역(예: 생체 정보 인식 영역)에서 외부 객체에 대한 터치 입력이 감지되면, 프로세서(예: 도 2의 프로세서(220))는 디스플레이 구동 회로(예: 도 2의 디스플레이 구동 회로(230) 및 생체 센서 모듈(예: 도 2의 생체 센서 모듈(255))를 제어하여 외부 객체의 생체 정보를 획득할 수 있다. 상기 프로세서의 구동 상황에 따라 가변적인 지연이 발생되어 디스플레이의 광이 출력되는 시점(T1)과 생체 정보의 획득시점(T2)이 상이할 수 있으며, 디스플레이의 광원이 출력되는 시점(T1)과 생체 정보의 획득 시점(T2)이 상이할 경우 생체 인식률이 낮아질 수 있다.
도 6a을 참조하면, 601은 프로세서(예: 도 2의 프로세서(220))로부터 웨이크 업(wake up) 신호가 수신되어 생체 센서 모듈(예: 도 2의 생체 센서 모듈(255)이 웨이크 업(wake up)된 상태를 나타내고 있다. 603은 상기 프로세서에서 상기 생체 센서 모듈에게 디스플레이(예: 도 2의 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 인식 영역)에서 터치 입력을 발생한 외부 객체의 생체 정보를 획득하기 위한 명령어를 전송함에 따라 상기 생체 센서 모듈에서 상기 외부 객체에 대한 생체 정보를 획득하는 상태를 나타내고 있다. 605는 상기 프로세서에서 상기 디스플레이 구동 회로에게 디스플레이에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜기 위한 명령어를 전송함에 따라 상기 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광이 출력되고 있는 상태를 나타내고 있다. 607은 상기 디스플레이의 구동 회로의 제어에 따라 디스플레이의 광이 실질적으로 출력된 상태를 나타내고 있다. (b1)은 상기 생체 센서 모듈에서 생체 정보(예: 지문 이미지)를 획득하는 시간을 나타내고 있다. (b2)는 상기 디스플레이에서 실질적으로 광이 출력되고 있는 시간을 나타내고 있다.
생체 정보의 획득시점(T2) 보다 디스플레이의 광이 출력되는 시점(T1)이 지연되면(T1 > T2), 상기 생체 센서 모듈에서 생체 정보 획득(캡쳐)하는 도중에 상기 디스플레이의 광이 출력됨으로 정확한 지문이미지를 획득할 수 없게 될 수 있다. 또한 디스플레이의 광이 출력되는 시점(T1) 보다 생체 정보의 획득시점(T2)이 지연되면(T2 > T1), 상기 디스플레이의 광이 출력된 이후에 상기 생체 센서 모듈에 의한 지문이미지 획득(캡쳐) 동작이 발생되어, 지문이미지 획득에 있어서 불필요한 지연이 발생할 수 있다.
도 6b를 참조하면, 프로세서(620, 예: 도 2의 프로세서(220))는 압력센서 모듈(예: 도 2의 압력센서 모듈(253))로부터 수신된 외부 객체의 터치 입력에 대응되는 터치 압력의 강도가 지정된 조건을 만족하고, 터치센서 모듈(예: 도 2의 터치센서 모듈(251))로부터 수신된 외부 객체의 터치입력의 영역이 디스플레이의 적어도 일부 영역(예: 생체인식 영역) 내의 제1 영역을 포함하면, 611 동작에서, 생체 센서 모듈(655, 예: 도 2의 지문 인식 센서 모듈(255))에게 웨이크 업(wake up) 신호를 전송할 수 있다. 613a 동작에서, 프로세서(620)는 디스플레이 구동 회로(630, 예: 도 2의 디스플레이 구동 회로(230))에게 디스플레이에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜기 위한 명령어(예: High bright mode on)를 전송할 수 있다. 또한 613b 동작에서, 프로세서(620)는 생체 센서 모듈(655, 예: 도 2의 생채 센서 모듈(255))에게 외부 객체의 생체 정보를 획득하기 위한 명령어(예: High bright mode on)를 전송할 수 있다.
605 동작에서, 디스플레이 구동 회로(630)는 디스플레이에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광원을 활성화하고, 생체 센서 모듈(655)에게 디플레이의 광이 출력 상태임을 알리는 신호를 전송할 수 있다. 생체 센서 모듈(655)은 웨이크 업 상태에서, 프로세서(620)로부터 외부 객체의 생체 정보를 획득하기 위한 명령어가 수신되면 외부 객체의 생체 정보를 획득을 준비하고, 디스플레이 구동 회로(630)로부터 디플레이의 광이 출력 상태임을 알리는 신호가 수신되면, 상기 생체 정보(예: 지문 이미지)를 획득하여 프로세서(620)에게 전송할 수 있다.
도 7은 다양한 실시예들에 따른 전자 장치(예를 들어, 도 1의 전자장치(101, 102, 104))의 블록 도이다.
도 7을 참조하며, 전자 장치는 표시 장치(760, 예: 도 1의 표시장치(160) 및 프로세서(720, 예: 도 1의 프로세서(120))를 포함할 수 있다.
표시 장치(760)는 복수의 픽셀들을 포함하는 디스플레이(710), 및 상기 복수의 픽셀들을 구동하기 위한, 디스플레이 구동 회로(730, DDI(Display Driver IC))를 포함할 수 있다.
디스플레이(710)는 디스플레이 패널을 포함할 수 있으며, 디스플레이 패널(미도시)은 광원을 출력할 수 있는 복수의 픽셀들을 포함할 수 있다
디스플레이 구동 회로(730)는 인터페이스 모듈(731), 메모리(733)(예: 버퍼 메모리), 이미지 처리 모듈(735), 또는 맵핑 모듈(737)을 포함할 수 있다. 디스플레이 구동 회로(730)는, 예를 들면, 인터페이스 모듈(731)을 통하여 프로세서(720)로부터 영상 데이터, 또는 상기 영상 데이터를 제어하기 위한 명령에 대응하는 영상 제어 신호를 포함하는 영상 정보를 수신할 수 있다. 디스플레이 구동 회로(730)는 터치 센서(751) 및 압력 센서(753)를 제어하는 터치 구동회로(757)와 생체센서 모듈(755)과 상기 인터페이스 모듈(731)을 통하여 커뮤니케이션할 수 있다. 또한, 디스플레이 구동 회로(730)는 상기 수신된 영상 정보 중 적어도 일부를 메모리(733)에, 예를 들면, 프레임 단위로 저장할 수 있다. 이미지 처리 모듈(735)은, 예를 들면, 상기 영상 데이터의 적어도 일부를 상기 영상 데이터의 특성 또는 디스플레이(710)의 특성에 적어도 기반하여 전처리 또는 후처리(예: 해상도, 밝기, 또는 크기 조정)를 수행할 수 있다. 맵핑 모듈(737)은 디스플레이(710)의 픽셀들의 속성(예: 픽셀들의 배열(RGB stripe 또는 pentile), 또는 서브 픽셀들 각각의 크기)에 적어도 일부 기반하여, 이미지 처리 모듈(735)를 통해 전처리 또는 후처리된 상기 영상 데이터를 상기 픽셀들을 구동할 수 있는 전압 값 또는 전류 값으로 변환할 수 있다. 디스플레이(710)의 적어도 일부 픽셀들은, 예를 들면, 상기 전압 값 또는 전류 값에 기반하여 구동됨으로써 상기 영상 데이터에 대응하는 시각적 정보(예: 텍스트, 이미지, 또는 아이콘)가 디스플레이(710)에 표시될 수 있다.
일 실시예에 따르면, 디스플레이 구동 회로(730)는, 제1 프로세서(721)로부터 픽셀을 켜기 위한 명령어가 수신되면, 디스플레이 (710)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광을 출력할 수 있다. 상기 적어도 일부 영역은 생체 정보 인증을 위해 외부 객체의 입력을 수신할 수 있는 생체 정보 인식 영역(예: 지문 인식 영역)을 포함할 수 있다.
일 실시예에 따르면, 디스플레이 구동 회로(730)는, 제1 프로세서(721))로부터 상기 픽셀을 켜기 위한 명령어의 수신에 따라 디스플레이(710)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광원을 출력하고, 생체 센서 모듈(755)에게 디스플레이(710)에서 광원이 출력되고 있음을 알리는 신호를 전송할 수 있다.
일 실시예에 따르면, 디스플레이 구동 회로(730)는, 제1 프로세서(721))로부터 디스플레이 (710)에 포함된 복수의 픽셀들 중 적어도 일부 영역(예: 생체 정보 인식 영역)에 대응되는 적어도 일부 픽셀을 켜기 위한 명령어가 수신되고, 생체 센서 모듈(255)로부터 생체 정보 획득을 위해 준비가 되었음을 알리는 신호가 수신되면, 디스플레이 (710)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광을 출력할 수 있다.
일 실시예에 따르면, 디스플레이 구동 회로(730)는, 생체 센서 모듈(755)로부터 생체 정보 획득을 위해 준비가 되었음을 알리는 신호가 수신되면, 디스플레이(710)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광을 출력할 수 있다.
일 실시예에 따르면, 표시 장치(760)는 센서 모듈(미도시, 예: 도 1의 센서 모듈 (176))을 포함할 수 있으며, 센서 모듈은 터치 센서(751) 및 압력 센서 (753)를 제어하는 터치 구동 회로(757)와 생체 센서 또는 생체센서 제어를 위한 생체 센서 구동 회로를 포함하는 생체 센서 모듈(755)을 포함할 수 있다. 일 실시예에 따르면, 센서 모듈은 디스플레이(710)의 픽셀 레이어의 픽셀들 사이에, 또는 상기 픽셀 레이어의 위에 또는 아래에 배치될 수 있다. 일 실시예에 따르면, 터치 구동 회로(757)는 터치 센서(751) 및 압력 센서 (753)에 각각 내장될 수 있다.
일 실시예에 따르면, 터치 구동 회로(757)가 각각 내장된 터치 센서(751) 및 압력 센서 (753)은 별도의 센서들로 구현되거나, 하나의 센서로 구현될 수 있다.
터치 구동 회로(757)는 디스플레이(710)의 특정 위치에 대한 터치 센서(751)의 신호(예: 전압, 광량, 저항, 또는 전하량)의 변화를 측정함으로써 상기 특정 위치에 대한 터치 입력 또는 호버링 입력을 감지하고, 감지된 터치 입력 또는 호버링 입력에 관한 정보(예: 위치, 면적, 압력, 또는 시간)를 프로세서(720)에 제공할 수 있다. 일 실시예에 따르면, 터치 구동 회로(757)는 디스플레이 구동 회로(730), 또는 디스플레이(710)의 일부로, 또는 표시 장치(760)의 외부에 배치된 다른 구성요소(예: 도 1의 보조 프로세서(123))의 일부로 포함될 수 있다.
터치 구동 회로(757)는 압력 센서(753)로부터 디스플레이(710)의 일부 또는 적어도 일부 영역(예: 생체 정보 인식 영역) 또는 상기 적어도 일부 영역 내의 제1 영역에 입력되는 외부 객체의 터치 입력에 대응되는 터치 압력(intensity) 정보를 획득하여 프로세서(720)에게 제공할 수 있다.
일 실시예에 따르면, 터치 구동 회로(757)는 터치 센서(751)로부터 수신된 신호를 기반으로, 생체 정보 인증을 위해 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 인식 영역)에서 감지된 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하는 것을 결정되면, 생체 정보 획득과 관련된 명령어를 제1 프로세서(721)와 생체센서 모듈(755)에게 제공할 수 있다.
일 실시예에 따르면, 터치 구동 회로(757)는 압력 센서(753)로부터 수신된 신호를 기반으로, 생체 정보 인증을 위한 디스플레이(210)의 적어도 일부 영역(예: 생체 정보 영역) 내의 제1 영역에서 상기 외부 객체의 터치 입력에 대응되는 터치 압력의 강도(intensity)를 획득하고, 상기 획득된 외부 객체의 터치 입력에 대응되는 터치 압력의 강도(intensity)가 지정된 조건을 만족하는 경우, 생체 정보 획득과 관련된 명령어를 제1 프로세서(721)와 생체센서 모듈(755)에게 전송할 수 있다.
일 실시예에 따르면, 터치 구동 회로(757)는 상기 터치 센서(751)로부터 수신된 신호를 기반으로 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하는 것으로 결정하고, 상기 압력 센서(753)로부터 수신된 신호를 기반으로 외부 객체의 터치 입력에 대응되는 터치 압력의 강도(intensity)가 지정된 조건을 만족하는 경우, 생체 정보 획득과 관련된 명령어를 제1 프로세서(721)와 생체센서 모듈(755)에게 전송할 수 있다.
일 실시예에 따르면, 터치 구동 회로(757) 또는 압력 센서(753)는 외부 객체에 의한 입력에 적어도 일부 기반하여, 생체 센서 모듈(755)을 활성화하기 위한 신호를 생체 센서 모듈(755)로 전송할 수 있다.
생체 센서 모듈(755)은, 생체정보 인식을 위한 이미지 센서 모듈로서, 디스플레이(710)의 일부 영역을 통해 터치 입력과 연관된 생체 정보(예: 지문 이미지)를 획득할 수 있다.
일 실시예에 따르면, 생체 센서 모듈(755)은 광학식 지문 센서를 포함할 수 있다. 생체 센서 모듈(755)은 디스플레이(710)의 광원을 이용하거나, 별도의 광원을 포함할 수 있다. 생체 센서 모듈(755)은 광원으로부터 발생된 광을 사용자의 손가락에 조사하고, 사용자의 손가락 지문으로부터 반사된 광을 수신하여 지문 이미지를 출력하는 이미지 센서를 포함할 수 있다.
일 실시예에서, 생체 센서 모듈(755)은 영역(area) 방식 및/또는 스와이프(swipe) 방식으로 지문 이미지를 획득할 수 있다.
일 실시예에서, 생체 센서 모듈(755)은 초음파 지문 인식 센서를 포함할 수 있다. 생체 센서 모듈(755)은, 초음파 전송기로부터 발생된 초음파 신호를 사용자의 손가락에 조사하고, 사용자의 손가락 지문으로부터 반사된 초음파 신호를 수신하여 지문 이미지를 출력하는 초음파 수신기를 포함할 수 있다.
일 실시예에 따르면, 생체 센서 모듈(755)은 외부 객체에 의한 입력에 적어도 일부 기반하여, 프로세서(720)를 활성화하기 위한 신호를 프로세서(720)로 전송할 수 있다.
일 실시예에 따르면, 생체 센서 모듈(755)은 터치 구동 회로(757)로부터 생체 정보 획득과 관련된 명령어가 수신되면, 외부 객체에 대한 생체 정보(예: 지문 이미지)의 획득을 준비하고, 디스플레이 구동 회로(730)로부터 디스플레이(710)로부터 광원이 출력되고 있음을 알리는 신호가 수신되면 생체 정보를 획득할 수 있다. 생체 센서 모듈(755)은 제2 프로세서(723)로부터 통신준비 완료를 알리는 신호가 수신되면, 상기 획득된 생체 정보를 제2 프로세서(723)에게 전송할 수 있다.
일 실시예에 따르면, 생체 센서 모듈(255)은 터치 구동 회로(757)로부터 생체 정보 획득과 관련된 명령어가 수신되면, 디스플레이(710)의 적어도 일부 영역(예: 생체 정보 영역)에서 외부 객체에 대한 생체 정보(예: 지문 이미지)를 획득하기 위한 준비가 되었음을 알리는 신호를 디스플레이 구동 회로(730)에게 전송하고, 상기 외부 객체에 대한 생체 정보(예: 지문 이미지)를 획득하여 제2 프로세서(723)에게 전송할 수 있다.
프로세서(720)는 제1 프로세서(721)과 제2 프로세서(723)을 포함할 수 있다.
제1 프로세서(721)는 전자 장치(예를 들어, 도 1의 전자 장치(101. 102 또는 103)의 전반적인 동작을 제어할 수 있다.
일 실시예에 따르면, 제1 프로세서(721)는 터치 구동 회로(757)로부터 생체 정보 획득과 관련된 명령어가 수신되면 디스플레이 구동 회로(730)에게 디스플레이(710)에 포함된 복수의 픽셀들 중 적어도 일부 픽셀을 켜기 위한 명령어를 전송할 수 있다.
일 실시예에 따르면, 제1 프로세서(721)는 디스플레이의 화면이 오프인 상태에서 터치 구동 회로(757)로부터 생체 정보 획득과 관련된 명령어가 수신되면 웨이크 업(wake up) 상태가 되고, 생체 정보 인증을 위해 제2 프로세서(723)에게 웨이크 업(wake up) 신호를 전송할 수 있다.
일 실시예에 따르면, 프로세서(720)는 외부 객체에 의한 입력이 지정된 조건을 만족하면 활성화되도록 설정될 수 있다.
일 실시예에 따르면, 제1 프로세서(721)는, 외부 객체에 의한 입력이 지정된 조건을 만족하면 제2 프로세서(723)를 활성화하기 위한 신호를 제2 프로세서(723)로 전송하도록 설정될 수 있다.
일 실시예에 따르면, 제1 프로세서(721)는 제2 프로세서(723)로부터 외부객체에 대한 생체정보가 수신되면, 상기 수신된 생체 정보를 기반으로 생체 정보(예: 지문이미지)를 인증한 후 전자 장치의 인증과 관련된 동작(예: 잠금 상태 해제, 지불 결제 인증 또는 금융 결제 인증)을 수행할 수 있다.
제2 프로세서(723)는 전자 장치의 보안 동작을 제어할 수 있으며, 예를 들어, 전자 장치에서 생체 인증을 위한 동작을 제어할 수 있다. 제2 프로세서(723)는 제1 프로세서(721)와는 별도의 모듈로서 제1 프로세서(721)에 포함되거나 분리되어 구성될 수 있다. 제2 프로세서(723)는 개방형 운영 시스템(operating system)에 독립적으로 격리된 실행 환경(trusted execution environment)을 제공하는 trustzone 일 수 있다.일 실시예에 따르면, 제2 프로세서(723)는 디스플레이(710)의 화면이 오프된 상태에서 제1 프로세서(721)로부터 웨이크 업(wake up) 신호가 수신되면, 생체 센서 모듈(755)과의 통신(예: SPI(serial peripheral interface) 통신) 준비를 수행하고, 통신 준비가 완료되면, 생체 센서 모듈(755)에게 통신 준비 완료 신호를 전송할 수 있다.
일 실시예에 따르면, 제2 프로세서(723)는 생체 센서 모듈(755)과의 통신 준비가 완료된 이후 생체 센서 모듈(755)로부터 생체 정보(예: 지문 이미지)가 수신되면, 상기 생체 정보에 대한 이미지를 처리 동작을 수행 후 상기 생체 정보를 제1 프로세서(721)에게 전송할 수 있다.
다양한 실시예에 따르면, 전자 장치(701)는, 복수의 픽셀들을 포함하는 디스플레이(710), 상기 복수의 픽셀들을 구동하기 위한 디스플레이 구동 회로(730), 상기 디스플레이(710)와 인접하여 배치된 압력 센서(753), 상기 디스플레이 구동 회로(730)와 지정된 인터페이스를 통해 연결되고, 상기 디스플레이(710)의 적어도 일부 영역에 배치된 생체 센서(755), 및 프로세서(720)를 포함하고, 상기 프로세서(720)는, 상기 압력 센서(753)를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체의 입력을 수신하고, 상기 수신하는 동작은 상기 적어도 일부 영역에 대한 상기 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작을 포함하고, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어를, 상기 디스플레이 구동 회로(730)로 전송하며, 상기 생체 센서(755)가 상기 지정된 인터페이스를 통해 상기 디스플레이 구동 회로(730)로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 외부 객체에 대한 생체 정보를 획득하도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 생체 센서(755)로 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 디스플레이(710)와 인접하여 배치된 터치 센서(751)를 더 포함하고, 상기 프로세서(720)는, 상기 터치 센서(751)를 이용하여, 상기 적어도 일부 영역에 대한 상기 외부 객체의 입력을 수신하고, 상기 수신하는 동작은 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하는지 확인하는 동작을 포함하고, 상기 입력에 대응되는 영역이 상기 제1 영역을 포함하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 상기 명령어를, 상기 디스플레이 구동 회로(730)로 전송하고, 상기 외부 객체에 대한 생체 정보의 획득과 관련된 상기 다른 명령어를 상기 생체 센서(755)에게 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 디스플레이(710)와 인접하여 배치된 터치 센서(751)를 더 포함하고, 상기 프로세서(720)는, 상기 압력 센서(755)를 이용하여 수신된 외부 객체의 입력에 대응되는 입력의 강도가 지정된 조건을 만족하고, 상기 터치 센서(751)를 이용하여 수신된 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 상기 명령어를 상기 디스플레이 구동 회로(730)로 전송하고, 상기 외부 객체에 대한 생체 정보의 획득과 관련된 상기 다른 명령어를 상기 생체 센서(755)에게 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 전자 장치(701)는, 복수의 픽셀들을 포함하는 디스플레이(710),상기 복수의 픽셀들을 구동하기 위한 디스플레이 구동 회로(730), 상기 디스플레이(710)와 인접하여 배치된 압력 센서(753), 상기 디스플레이 구동 회로(730)와 지정된 인터페이스를 통해 연결되고, 상기 디스플레이(710)의 적어도 일부 영역에 배치된 생체 센서(755), 및 프로세서(720)를 포함하고, 상기 프로세서(720)는,상기 압력 센서(753)를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체의 입력을 수신하고; 상기 수신하는 동작은 상기 적어도 일부 영역에 대한 상기 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작을 포함하고, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 생체 센서(755)를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하기 위한 명령어를, 상기 생체 센서(755)로 전송하며, 상기 디스플레이 구동 회로(730)가 상기 지정된 인터페이스를 통해 상기 생체 센서(755)로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 디스플레이 구동 회로(730)로 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 디스플레이(710)와 인접하여 배치된 터치 센서(751)를 더 포함하고, 상기 프로세서(720)는, 상기 터치 센서(751)를 이용하여, 상기 적어도 일부 영역에 대한 상기 외부 객체의 입력을 수신하고, 상기 수신하는 동작은 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하는지 확인하는 동작을 포함하고, 상기 입력에 대응되는 영역이 상기 제1 영역을 포함하면, 상기 외부 객체에 대한 생체 정보를 획득하기 위한 상기 명령어를 상기 생체 센서(755)로 전송하고, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 상기 다른 명령어를 상기 디스플레이 구동 회로(730)로 전송하도록 설정될 수 있다,
다양한 실시예에 따르면, 상기 디스플레이(710)와 인접하여 배치된 터치 센서(751)를 더 포함하고, 상기 프로세서(720)는, 상기 압력 센서(753)를 이용하여 수신된 외부 객체의 입력에 대응되는 입력의 강도가 지정된 조건을 만족하고, 상기 터치 센서(751)를 이용하여 수신된 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 상기 생체 센서(755)를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하기 위한 상기 명령어를 상기 생체 센서(755)로 전송하고, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 상기 다른 명령어를 상기 디스플레이 구동 회로(730)로 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 전자 장치(701)는, 복수의 픽셀들을 포함하는 디스플레이(710), 상기 복수의 픽셀들을 구동하기 위한 디스플레이 구동 회로(730), 상기 디스플레이(710)와 인접하여 배치된 압력 센서(753), 상기 디스플레이(710)의 적어도 일부 영역에 배치된 생체 센서(755), 및 프로세서(720)를 포함하고, 상기 프로세서(720)는, 상기 압력 센서(753)를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체의 입력을 수신하고, 상기 수신하는 동작은 상기 적어도 일부 영역에 대한 상기 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작을 포함하고, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하고, 및 상기 광을 이용하여, 상기 외부 객체에 대한 생체 정보를 획득하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 디스플레이(710)와 인접하여 배치된 터치 센서(751)를 더 포함하고, 상기 프로세서(720)는, 상기 터치 센서(751)를 이용하여, 상기 적어도 일부 영역에 대한 상기 외부 객체의 입력을 수신하고, 상기 수신하는 동작은 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하는지 확인하는 동작을 포함하고, 상기 입력에 대응되는 영역이 상기 제1 영역을 포함하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 디스플레이(710)와 인접하여 배치된 터치 센서(751)를 더 포함하고, 상기 프로세서(720)는, 상기 압력 센서(753)를 이용하여 수신된 외부 객체의 입력에 대응되는 입력의 강도가 지정된 조건을 만족하고, 상기 터치 센서(751)를 이용하여 수신된 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 프로세서(720)는, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하도록 상기 디스플레이 구동 회로(730)에게 명령어를 전송하고, 상기 광을 이용하여 상기 외부 객체에 대한 생체 정보를 획득하도록 상기 생체 센서(755)에게 다른 명령어를 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 전자 장치(701)는, 디스플레이(710), 상기 디스플레이(710)와 인접하여 배치된 적어도 하나의 센서(751, 753), 상기 디스플레이(710)의 적어도 일부 영역에 배치된 생체 센서(755), 및 적어도 하나의 프로세서(720)를 포함하고, 상기 적어도 하나의 프로세서(720)는, 상기 적어도 하나의 센서(751, 753) 또는 상기 생체 센서(755)를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체에 의한 입력을 수신하고, 상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 생체 센서(755)를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 적어도 하나의 프로세서(720)는, 상기 외부 객체에 의한 입력이 지정된 조건을 만족하면, 상기 생체 센서(755)를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 적어도 하나의 프로세서(720)는, 상기 외부 객체에 의한 입력이 지정된 조건을 만족하면, 상기 외부 객체에 대한 생체 정보를 획득하기 위한 신호를 상기 생체 센서(755)로 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 디스플레이(710)를 구동하기 위한 디스플레이 구동 회로(730)를 더 포함하고, 상기 적어도 하나의 프로세서(720)는, 상기 외부 객체에 의한 입력이 상기 지정된 조건을 만족하면, 상기 디스플레이(710)의 픽셀들 중 상기 적어도 일부 영역에 대응하는 픽셀들을 활성화하기 위한 신호를 상기 디스플레이 구동 회로(730)로 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 생체 센서(755)는, 상기 디스플레이(710)의 동작 상태와 관련된 신호의 수신에 적어도 일부 기반하여, 상기 외부 객체에 대한 생체 정보를 획득하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 지정된 조건은, 상기 적어도 일부 영역에 대한 상기 외부 객체의 압력을 나타내는 값이 지정된 임계값 이상인 조건, 또는 상기 적어도 일부 영역이 지정된 영역을 포함한다는 조건 중의 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 상기 디스플레이(710)를 구동하기 위한 디스플레이 구동 회로(730)를 더 포함하고, 상기 생체 센서(755)는, 상기 신호의 수신에 적어도 일부 기반하여, 상기 디스플레이(710)의 픽셀들 중 상기 적어도 일부 영역에 대응하는 픽셀들을 활성화하기 위한 신호를 상기 디스플레이 구동 회로(730)로 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 생체 센서(755)는, 상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 적어도 하나의 프로세서(720)를 활성화하기 위한 신호를 상기 적어도 하나의 프로세서(720)로 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 적어도 하나의 센서(751, 753)는, 상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 생체 센서(755)를 활성화하기 위한 신를 상기 생체 센서(755)로 전송하도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 적어도 하나의 프로세서(720)는, 상기 외부 객체에 의한 입력이 지정된 조건을 만족하면 활성화되도록 설정될 수 있다.
다양한 실시예에 따르면, 상기 적어도 하나의 프로세서(720)는 상기 생체 정보의 인증을 위한 제1 프로세서(721) 및 상기 생체 정보의 이미지 처리를 위한 제2 프로세서(723)를 포함하고, 상기 제1 프로세서(721)는, 상기 외부 객체에 의한 입력이 지정된 조건을 만족하면 상기 제2 프로세서를 활성화하기 위한 신호를 상기 제2 프로세서(723)로 전송하도록 설정될 수 있다.
도 8은 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 801 내지 810 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 한 실시예에서, 801 내지 810 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다.
도 8을 참조하면, 801 동작에서, 프로세서는 압력 센서 모듈(예: 도 2의 253)로부터 디스플레이(예: 도 2의 210)의 적어도 일부 영역(예: 생체 인식 영역)에 대한 외부 객체의 입력을 수신할 수 있다.
803 동작에서, 프로세서는 상기 외부 객체의 입력에 대응되는 압력의 강도가 지정된 조건을 만족하는지 확인할 수 있다. 상기 803 동작에서 프로세서는 상기 외부 객체의 입력에 대응되는 압력의 강도가 지정된 조건을 만족하는 경우, 805 동작에서 디스플레이 구동 회로(예: 도 2의 230)에게 디스플레이에 구비된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜기 위한 명령어(예: High bright mode on 명령어)을 전송할 수 있다.
807 동작에서, 프로세서는 생체 센서 모듈(예: 도 2의 255)에게 디스플레이 구동 회로로부터 디스플레이의 광이 출력되고 있는 상태를 알리는 신호에 응답으로, 외부 객체의 생체 정보를 획득하기 위한 명령어 예: High bright mode on 명령어)를 전송할 수 있다.
809 동작에서, 프로세서는, 디스플레이 구동 회로로부터 수신되는 디스플레이의 광이 출력되고 있는 상태를 알리는 신호에 응답으로 상기 외부 객체의 생체 정보(예: 지문 이미지)를 획득한 생체 센서 모듈로부터 생체 정보를 수신할 수 있다.
810 동작에서, 프로세서는 상기 생체 정보를 처리하여 생체 정보 인증 동작(예: 전자 장치의 잠금 해제, 페이먼트 수행, 비밀번호 입력 등)을 수행할 수 있다.
도 9는 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 901 내지 910 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 한 실시예에서, 901 내지 910 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다.
도 9를 참조하면, 901 동작에서, 프로세서는 압력 센서 모듈(예: 도 2의 253)로부터 디스플레이(예: 도 2의 210)의 적어도 일부 영역(예: 생체 인식 영역)에 대한 외부 객체의 입력을 수신할 수 있다.
903 동작에서, 프로세서는 상기 외부 객체의 입력에 대응되는 압력의 강도가 지정된 조건을 만족하는지 확인할 수 있다. 상기 903 동작에서 프로세서는 상기 외부 객체의 입력에 대응되는 압력의 강도가 지정된 조건을 만족하는 경우, 905 동작에서 생체 센서 모듈(예: 도 2의 255)에게 상기 외부 객체의 생체 정보를 획득하기 위한 명령어(예: High bright mode on 명령어)를 전송할 수 있다.
907 동작에서, 프로세서는 디스플레이 구동 회로(예: 도 2의 230)에게 생체 센서 모듈로부터 수신되는 외부 객체의 생체 정보를 획득하기 위한 준비가 되었음을 알리는 신호에 응답으로, 디스플레이에 구비된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜기 위한 명령어(예: High bright mode on 명령어)를 전송할 수 있다.
909 동작에서, 프로세서는, 디스플레이 구동 회로에게 외부 객체의 생체 정보를 획득하기 위한 준비가 되었음을 알리는 신호를 전송 후 상기 외부 객체의 생체 정보(예: 지문 이미지)를 획득한 생체 센서 모듈로부터 생체 정보를 수신할 수 있다.
910 동작에서, 프로세서는 상기 생체 정보를 처리하여 생체 정보 인증 동작(예: 전자 장치의 잠금 해제, 페이먼트 수행, 비밀번호 입력 등)을 수행할 수 있다.
도 10은 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 1001 내지 1009 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 한 실시예에서, 1001 내지 1009 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다.
도 10을 참조하면, 1001 동작에서, 프로세서는 압력 센서 모듈(예: 도 2의 253)로부터 디스플레이(예: 도 2의 210)의 적어도 일부 영역(예: 생체 인식 영역)에 대한 외부 객체의 입력을 수신할 수 있다.
1003 동작에서, 프로세서는 상기 외부 객체의 입력에 대응되는 압력의 강도가 지정된 조건을 만족하는 지 확인할 수 있다. 상기 1003 동작에서 프로세서는 상기 외부 객체의 입력에 대응되는 압력의 강도가 지정된 조건을 만족하는 경우, 1005 동작에서 디스플레이 구동 회로(예: 도 2의 230)를 제어하여 디스플레이에 구비된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응되는 적어도 일부 픽셀을 켜서 광을 출력할 수 있다.
1007 동작에서, 프로세서는 생체 센서 모듈(예: 도 2의 255)를 제어하여 생체 센서 모듈로부터 상기 광을 이용하여 획득된 외부 객체의 생체 정보를 수신할 수 있다.
1009 동작에서, 프로세서는 상기 생체 정보를 처리하여 생체 정보 인증 동작(예: 전자 장치의 잠금 해제, 페이먼트 수행, 비밀번호 입력 등)을 수행할 수 있다.
도 11은 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 1101 내지 1119 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 한 실시예에서, 1101 내지 1119 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다.
1101 동작에서, 터치 센서 모듈(예: 도 2의 251)은 디스플레이(예: 도 2의 210)의 적어도 일부 영역(예: 생체 정보 인식 영역)에 대한 외부 객체의 터치 입력을 프로세서에게 전송할 수 있다.
1103 동작에서, 압력 센서 모듈(예: 도 2의 253)은 상기 외부 객체의 입력에 대응되는 압력 강도를 프로세서에게 전송할 수 있다.
1105 동작에서, 프로세서는 상기 외부 객체의 터치 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하고, 상기 외부 객체의 입력에 대응되는 압력의 강도가 지정된 조건을 만족하면, 1107 동작에서 생체 센서 모듈(예: 도 2의 255)에게 웨이크 업 신호를 전송할 수 있다.
1109a 동작에서, 프로세서는 디스플레이 구동 회로(예: 도 2의 230)에게 디스플레이에 구비된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응되는 적어도 일부 픽셀들을 켜기 위한 명령어(예: High bright mode on 명령어)를 전송하고, 1109b 동작에서, 프로세서는 생체 센서 모듈에게 상기 외부 객체의 생체 정보를 획득하기 위한 명령어(예: High bright mode on 명령어)를 전송할 수 있다.
1111 동작에서, 디스플레이 구동 회로는 디스플레이에 구비된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응되는 적어도 일부 픽셀들을 켜서 광을 출력할 수 있다.
1113 동작에서, 디스플레이 구동 회로는 디스플레이의 광이 출력되고 있는 상태를 알리는 신호를 생체 센서 모듈에게 전송할 수 있다.
1115 동작에서, 생체 센서 모듈은 프로세서로부터 상기 외부 객체의 생체 정보를 획득하기 위한 명령어(예: High bright mode on 명령어)를 수신하고, 디스플레이 구동 회로로부터 디스플레이의 광이 출력되고 있는 상태를 알리는 신호를 수신하면, 상기 광을 이용하여 상기 외부 객체의 생체 정보(예: 지문 이미지)를 획득할 수 있다.
1117 동작에서, 생체 센서 모듈은 상기 획득된 생체 정보를 프로세서에게 전송할 수 있다.
1119 동작에서, 프로세서는 상기 생체 정보를 처리하여 생체 정보 인증 동작(예: 전자 장치의 잠금 해제, 페이먼트 수행, 또는 비밀번호 입력)을 수행할 수 있다.
도 12는 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 1201 내지 1229 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 도 12는 디스플레이의 화면이 오프된 상태를 예로 설명하고 있다. 한 실시예에서, 1201 내지 1229 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다.
1201 동작에서, 터치 구동 회로(예: 도 7의 757)는 터치 센서(예: 도 7의 751)로부터 수신된 신호를 기반으로 디스플레이(예: 도 7의 710)의 적어도 일부 영역(예: 생체 정보 인식 영역)에 대한 외부 객체의 입력이 상기 적어도 일부 영역의 제1 영역을 포함하는지 결정할 수 있다. 상기 1201 동작에서, 상기 터치 구동 회로는 압력 센서(예: 도 7의 753)로부터 수신된 신호를 기반으로 상기 외부 객체의 터치 입력에 대응되는 터치 압력의 강도(intensity)가 지정된 조건을 만족하는지 확인할 수 있다.
상기 터치 센서로부터 수신된 신호를 기반으로 외부 객체의 입력이 상기 적어도 일부 영역의 제1 영역을 포함하고, 또는/및 상기 압력 센서로부터 수신된 신호를 기반으로 외부 객체의 터치 입력에 대응되는 터치 압력의 강도(intensity)가 지정된 조건을 만족하면, 1203a 동작에서, 터치 구동 회로(예: 도 7의 757)는 제1 프로세서(예: 도 7의 721)에게 웨이크 업 신호가 포함된 생체 정보 획득과 관련된 명령어를 전송할 수 있다. 동시에 1203b 동작에서, 터치 구동 회로(예: 도 7의 757)은 생체 센서 모듈(예: 도 7의 755)에게 웨이크 업 신호가 포함된 생체 정보 획득과 관련된 명령어를 전송할 수 있다.
1205 동작에서, 슬립 상태인 제1 프로세서(예: 도 7의 721)는 터치 구동 회로(예: 도 7의 757)로부터 수신된 생체정보 획득과 관련된 명령어의 수신에 따라 웨이크 업(wake up)된 이후, 상기 디스플레이 구동 회로에게 디스플레이(예: 도 7의 710)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 픽셀을 켜기 위한 명령어를 전송할 수 있다.
1207동작에서, 제1 프로세서(예: 도 7의 721)는 슬립 상태인 제2 프로세서(예: 도 8의 723)에게 웨이크 업 신호를 전송할 수 있다.
1209 동작에서, 생체 센서 모듈(예: 도 7의 755)은 터치 구동 회로(예: 도 7의 757)로부터 수신된 생체정보 획득과 관련된 명령어의 수신에 따라 웨이크 업(wake up)된 이후, 생체 정보를 획득하기 위한 준비를 하면서 디스플레이 구동 회로(예: 도 7의 730)로부터 디스플레이의 광이 출력되고 있는 상태를 알리는 신호의 수신을 대기할 수 있다.
1211 동작에서, 디스플레이 구동 회로(예: 도 7의 730)는 제1 프로세서(예: 도 7의 721)로부터 수신된 픽셀을 켜기 위한 명령어의 수신에 따라 디스플레이의 화면을 온 시키고 대응되는 화면을 표시할 수 있다.
1213 동작에서, 디스플레이 구동 회로(예: 도 7의 730)는 디스플레이(예: 도 7의 710)에 포함된 복수의 픽셀들 중 적어도 일부 영역(예: 생체 정보 인식영역)에 대응되는 적어도 일부 픽셀을 켜서 광을 출력할 수 있다
1215 동작에서, 디스플레이 구동 회로(예: 도 7의 730)는 생체 센서 모듈(예: 도 7의 755)에게 디스플레이의 광이 출력되고 있는 상태를 알리는 신호를 전송할 수 있다.
1217 동작에서, 생체 센서 모듈(예: 도 7의 755)은 생체 정보 획득을 준비하고 있는 동안, 디스플레이 구동 회로(예: 도 7의 730)로부터 디스플레이의 광이 출력되고 있는 상태를 알리는 신호가 수신되면, 생체 정보(예: 지문 이미지)를 획득할 수 있다.
1219 동작에서, 제2 프로세서(예: 도 7의 723)는 제1 프로세서(예:도 7의 721)로부터 수신된 웨이크 업(wake up)신호에 따라 웨이크 업된 이후 생체 센서 모듈(예:도 7의 755)과 통신을 수행할 수 있도록 통신 준비를 수행할 수 있다.
1221 동작에서, 제2 프로세서(예: 도 7의 723)는 생체 센서 모듈(예: 도 7의 755)와 통신수행 준비가 완료되면, 상기 생체 센서 모듈에게 통신준비가 완료되었다는 신호를 전송할 수 있다.
1223 동작에서, 생체 센서 모듈(예: 도 7의 755)은 제2 프로세서(예: 도 7의 723)로부터 통신준비가 완료되었다는 신호가 수신되면, 상기 획득된 생체 정보(예: 지문 이미지)를 상기 제2 프로세서에게 전송할 수 있다.
1225 동작에서, 제2 프로세서(예: 도 7의 723)는 생체 센서 모듈(예: 도 7의 755)로부터 수신된 생체 정보에 대한 이미지 처리 동작을 수행하고, 1227동작에서 제2 프로세서는 이미지 처리 동작이 완료된 생체 정보를 제1 프로세서(예: 도 7의 721)에게 전송할 수 있다.
1229 동작에서, 제1 프로세서(예: 도 7의 721)는 제2 프로세서(예: 도 7의 723)로부터 수신된 생체 정보를 기반으로, 생체 정보(예: 지문이미지)를 인증한 후 전자 장치의 인증과 관련된 동작(예: 잠금 상태 해제, 지불 결제 인증 또는 금융 결제 인증)을 수행할 수 있다.
도 13은 다양한 실시예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 1301 내지 1321 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 한 실시예에서, 1301 내지 1321 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다. 도 13은 디스플레이의 화면이 온 된 상태를 예로 설명하고 있다.
1301 동작에서, 터치 구동 회로(예: 도 7의 757)는 터치 센서(예: 도 7의 751)로부터 수신된 신호를 기반으로 디스플레이(예: 도 7의 710)의 적어도 일부 영역(예: 생체 정보 인식 영역)에 대한 외부 객체의 입력이 상기 적어도 일부 영역의 제1 영역을 포함하는지 확인할 수 있다. 상기 1301 동작에서, 상기 터치 구동 회로는 압력 센서(예: 도 7의 753)로부터 수신된 신호를 기반으로 상기 외부 객체의 터치 입력에 대응되는 터치 압력의 강도(intensity)가 지정된 조건을 만족하는지 확인할 수 있다.
상기 터치 센서로부터 수신된 신호를 기반으로 대한 외부 객체의 입력이 상기 적어도 일부 영역의 제1 영역을 포함하고, 또는/및 상기 압력 센서로부터 수신된 신호를 기반으로 외부 객체의 터치 입력에 대응되는 터치 압력의 강도(intensity)가 지정된 조건을 만족하면, 1303a 동작에서, 터치 구동 회로(예: 도 7의 757)는 제1 프로세서(예: 도 7의 721)에게 생체 정보 획득과 관련된 명령어를 전송할 수 있다. 동시에 1303b 동작에서, 터치 구동 회로(예: 도 7의 757)는 생체센서 모듈(예: 도 7의 755)에게 생체 정보 획득과 관련된 명령어를 전송할 수 있다.
1305 동작에서, 제1 프로세서(예: 도 7의 721)는 터치 구동 회로(예: 도 7의 757)로부터 생체정보 획득과 관련된 명령어가 수신되면, 디스플레이 구동 회로(예: 도 7의 430)에게 디스플레이(예: 도 7의 710)에 포함된 복수의 픽셀들 중 적어도 일부 영역에 대응되는 픽셀을 켜기 위한 명령어를 전송할 수 있다.
1307 동작에서, 생체 센서 모듈(예: 도 7의 755)은 터치 구동 회로(예: 도 7의 757)로부터 생체정보 획득과 관련된 명령어가 수신되면 생체 정보의 획득을 준비하면서, 디스플레이 구동 회로(예: 도 7의 730)로부터 디스플레이의 광이 출력되고 있는 상태를 알리는 신호의 수신을 대기할 수 있다.
1309 동작에서, 디스플레이 구동 회로(예: 도 7의 730)는 제1 프로세서(예: 도 7의 721)로부터 수신된 픽셀을 켜기 위한 명령어가 수신되면, 디스플레이(예: 도 7의 710)에 포함된 복수의 픽셀들 중 적어도 일부 영역(예: 생체 정보 인식영역)에 대응되는 적어도 일부 픽셀을 켜서 광을 출력할 수 있다
1311 동작에서, 디스플레이 구동 회로(예: 도 7의 730)는 생체 센서 모듈(예: 도 7의 755)에게 디스플레이의 광이 출력되고 있는 상태를 알리는 신호를 전송할 수 있다.
1313 동작에서, 생체 센서 모듈(예: 도 7의 755)은 생체 정보 획득을 준비하고 있는 동안, 디스플레이 구동 회로(예: 도 7의 730)로부터 디스플레이의 광이 출력되고 있는 상태를 알리는 신호가 수신되면, 생체 정보(예: 지문 이미지)를 획득할 수 있다.
1315 동작에서, 생체 센서 모듈(예: 도 7의 755)은 슬립 상태가 아닌 제2 프로세서(예: 도 7의 723)와 통신이 연결된 상태임을 확인하고, 상기 획득된 생체 정보(예: 지문 이미지)를 상기 제2 프로세서에게 전송할 수 있다.
1317 동작에서, 제2 프로세서(예: 도 7의 723)는 생체 센서 모듈(예: 도 7의 755)로부터 수신된 생체 정보에 대한 이미지 처리 동작을 수행하고, 1319 동작에서 제2 프로세서는 이미지 처리 동작이 완료된 생체 정보를 제1 프로세서(예: 도 7의 721)에게 전송할 수 있다.
1321 동작에서, 제1 프로세서(예: 도 7의 721)는 제2 프로세서(예: 도 7의 723)로부터 수신된 생체 정보를 기반으로, 생체 정보(예: 지문이미지)를 인증한 후 전자 장치의 인증과 관련된 동작(예: 잠금 상태 해제, 지불 결제 인증 또는 금융 결제 인증등)을 수행할 수 있다.
도 14 내지 도 16b는 다양한 실시예들에 따른 전자 장치의 생체 정보 인식 방법을 설명하기 위한 도면들이다.
도 14를 참고하면, 전자 장치(1401)(예: 전자 장치(101)) 또는 프로세서(예: 프로세서(120 또는 720))(이하, 전자 장치(1401)를 예시함)는, 사용자의 지문을 입력하기 위한 사용자 인터페이스(1010)를 디스플레이(1406)(예: 표시 장치(160) 또는 디스플레이(210 또는 710)) 상에 표시할 수 있다.
사용자 인터페이스(1410)는 지문 입력 위치를 표시하기 위한 제1 그래픽 요소(1420)를 포함할 수 있다.
전자 장치(1401)는 사용자의 손가락이 제1 그래픽 요소(1420) 위에 배치된 상태에서 지문 이미지를 획득하고, 지문 이미지 및/또는 압력 정보를 포함하는 사용자 인증 정보를 생성할 수 있다.
일 실시예에서, 전자 장치(1401)는 사용자 입력에 응답하여 사용자 인터페이스(1410)를 표시할 수 있다.
일 실시예에서, 사용자 입력은, 디스플레이(1406) 상의 미리 설정된 터치/호버링 제스처(예: 스와입 제스처, 드래그 제스처, 또는 스크롤 중의 적어도 하나), 디스플레이(1406)를 통해 표시된 그래픽 요소의 선택, 음성 명령, 또는 모션 입력 중의 적어도 하나를 포함할 수 있다.
도 15를 참고하면, 전자 장치(1401)는, 제1 그래픽 요소(1420)가 생체센서 모듈(예: 생체센서 모듈(755))와 대응되는 위치에 고정되게 표시됨으로 인한 디스플레이(1406)의 열화를 방지하기 위해, 제1 그래픽 요소(1420)를 대체하여 제2 그래픽 요소(1422)를 표시할 수 있다.
일 실시예에서, 전자 장치(1401)는 제1 그래픽 요소(1420) 및 제2 그래픽 요소(1422)를 주기적으로 스위칭하여 표시할 수 있다.
일 실시예에서, 제2 그래픽 요소(1422)는 제1 그래픽 요소(1420)의 반전 이미지에 대응하거나, 제2 그래픽 요소(1422)는 제1 그래픽 요소(1420)의 반전 이미지의 적어도 일부를 포함할 수 있다.
도 16a를 참고하면, 지문 입력 위치를 표시하기 위한 그래픽 요소(1610)는 지문의 형태를 가질 수 있으며, 그래픽 요소(1610)는 적어도 하나의 라인(1620)을 포함할 수 있다. 도 16a 내지 도 16c를 참고하면, 디스플레이(1406)의 열화를 방지하기 위해, 전자 장치(1401)는 적어도 하나의 라인(1620) 상의 단절부(1630)의 위치를 주기적 또는 연속적으로 변경할 수 있다. 전자 장치(1401)는 단절부(1630)가 라인(1620)을 따라 이동하도록 디스플레이(1406)를 제어할 수 있다.
도 17은 다양한 실시 예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 1711 내지 1723 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 한 실시예에서, 1711 내지 1723 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다. 도 17은 디스플레이(예: 표시 장치(160) 또는 디스플레이(210 또는 710))의 화면이 오프된 상태를 예로 설명하고 있다.
1711 동작에서, 생체 센서 모듈(예: 생체 센서 모듈(255 또는 755))은, 외부 객체(예: 사용자의 손가락)를 검출할 수 있고, 외부 객체의 검출에 적어도 일부 기반하여(또는 응답하여), 제1 프로세서(예: 제1 프로세서(721))로 제1 지정된 신호를 전송할 수 있다.
일 실시예에서, 제1 지정된 신호는 웨이크 업 신호/메시지/데이터 또는 인터럽트 신호/메시지/데이터일 수 있다.
일 실시예에서, 제1 지정된 신호의 수신에 적어도 일부 기반하여(또는 응답하여), 슬립 상태(또는 비활성화 상태)인 제1 프로세서는 웨이크 업(또는 정상/활성화 상태로 천이)하거나 활성화될 수 있다.
일 실시예에서, 비활성화 상태에서, 제1 프로세서는 정상 모드 또는 활성화 상태에서 수행할 수 있었던 자신의 기능의 적어도 일부를 수행할 수 없는 상태에 있을 수 있다.
일 실시예에서, 활성화 상태에서, 제1 프로세서의 일부 구성 회로는 파워 온 상태에 있을 수 있다. 비활성화 상태에서, 제1 프로세서의 일부 구성 회로는 파워 오프 상태에 있을 수 있다.
1713 동작에서, 제1 지정된 신호의 수신에 적어도 일부 기반하여(또는 응답하여), 제1 프로세서는 제2 프로세서(예: 제2 프로세서(723))로 제2 지정된 신호를 전송할 수 있다.
일 실시예에서, 제2 지정된 신호는 웨이크 업 신호/메시지/데이터일 수 있다.
일 실시예에서, 제2 지정된 신호의 수신에 적어도 일부 기반하여(또는 응답하여), 슬립 상태(또는 비활성화 상태)인 제2 프로세서는 웨이크 업(또는 정상/활성화 상태로 천이)하거나 활성화될 수 있다.
1715 동작에서, 생체 센서 모듈은 생체 정보(예: 지문 이미지)를 획득할 수 있다.
일 실시예에서, 외부 객체의 검출에 적어도 일부 기반하여(또는 응답하여), 슬립 상태(또는 비활성화 상태)인 생체 센서 모듈은 웨이크 업(또는 정상 상태로 천이)하거나 활성화될 수 있다.
일 실시예에서, 생체 센서 모듈은 웨이크 업한 이후 생체 정보를 획득하기 위한 준비를 할 수 있다. 준비가 완료되면, 생체 센서 모듈은 자동으로 생체 정보(예: 지문 이미지)를 획득할 수 있다.
1717 동작에서, 생체 센서 모듈은 생체 정보를 제2 프로세서로 전송할 수 있다.
일 실시예에서, 생체 정보를 획득하면, 생체 정보를 전송하기 이전에, 생체 센서 모듈은 생체 정보의 획득 또는 전송을 알리는 신호/메시지/데이터를 제2 프로세서로 전송할 수 있다.
일 실시예에서, 제2 프로세서는 웨이크 업한 이후 생체 센서 모듈과 통신을 수행할 수 있도록 통신 준비를 수행할 수 있다. 준비가 완료되면, 제2 프로세서는 통신 준비가 완료되었다는 신호를 생체 센서 모듈로 전송할 수 있다. 생체 센서 모듈은 통신 준비 완료 신호의 수신에 응답하여 생체 정보를 제2 프로세서로 전송할 수 있다.
1719 동작에서, 제2 프로세서는 생체 센서 모듈로부터 수신된 생체 정보(예: 지문 이미지)에 대한 이미지 처리 동작을 수행할 수 있다.
일 실시예에서, 지정된 이미지 처리 설정, 지문 이미지의 특성 또는 디스플레이의 특성에 적어도 일부 기반하여, 제2 프로세서는 지문 이미지의 이미지 특성(예: 이미지의 해상도, 밝기, 또는 크기)을 변경할 수 있다.
1721 동작에서, 제2 프로세서는 이미지 처리된 생체 정보를 제1 프로세서로 전송할 수 있다.
1723 동작에서, 제1 프로세서는 제2 프로세서로부터 수신한 생체 정보를 인증할 수 있다.
일 실시예에서, 제1 프로세서는 수신한 생체 정보와 생체 정보의 수신 이전에 메모리(예: 메모리(130))에 미리 저장된 생체 정보를 비교할 수 있다. 제1 프로세서는 비교 결과에 근거하여 인증의 성공 여부를 결정할 수 있다.
일 실시예에서, 제1 프로세서는 수신한 생체 정보와 미리 저장된 생체 정보의 일치 정도/정합 정도/유사도를 결정할 수 있다.
일 실시예에서, 일치 정도/정합 정도/유사도는 미리 저장된 생체 정보의 특징 값/데이터/패턴/이미지와 일치하는 수신한 생체 정보의 특징 값/데이터/패턴/이미지의 개수, 또는 미리 저장된 생체 정보의 특징 값/데이터/패턴/이미지의 전체 개수에 대한 일치하는 개수의 비율에 근거하여 결정될 수 있다.
일 실시예에서, 제1 프로세서는 수신한 생체 정보와 미리 저장된 생체 정보의 일치 또는 유사도의 값이 미리 설정된 임계값 이상인 경우에, 지문 인증이 성공한 것으로 결정할 수 있다. 제1 프로세서는 일치 또는 유사도의 값이 미리 설정된 임계값 미만인 경우에, 지문 인증이 실패한 것으로 결정할 수 있다.
일 실시예에서, 제1 프로세서는, 지문 인증이 성공하면 제1 기능을 실행할 수 있고, 지문 인증이 실패하면 제1 기능의 실행을 차단하거나 제2 기능을 실행할 수 있다.
일 실시예에서, 제1 기능은, 언락 기능, 어플리케이션 실행 기능, 개인 인증 기능, 지불 결제 인증, 금융 결제 인증, 멀티미디어 제어 기능, 입력 인터페이스 변경 기능 또는 모드 변경 기능 중의 적어도 하나를 포함할 수 있다.
일 실시예에서, 언락 기능은 지문 입력을 통해 특정 기능 또는 그래픽 요소의 잠금을 해제하는 기능을 포함할 수 있다. 어플리케이션 실행 기능은 게임 애플리케이션, SNS 애플리케이션, 문서 작성 애플리케이션, 또는 멀티미디어 애플리케이션 중의 적어도 하나를 실행하는 기능, 또는 통신 어플리케이션(예: 전화 애플리케이션 또는 메시지 애플리케이션)을 통해 해당 연락처로 연결하는 기능을 포함할 수 있다. 개인 인증 기능은 외부 전자 장치(예: 전자 장치(102 또는 104))로 지문 정보, 메모리에 저장된 다른 개인/인증/비밀 정보, 인증 결과에 대한 정보, 인증 성공시에 설정된 정보 중의 적어도 하나를 전송하는 기능을 포함할 수 있다. 멀티미디어 제어 기능은 제어 메뉴(예: 볼륨 제어 메뉴 또는 재생 메뉴)를 표시하는 기능, 볼륨 제어 기능(예: 볼륨 증가, 볼륨 감소, 또는 무음 처리), 또는 재생 제어 기능(예: 되감기, 빨리 감기, 일시 정지, 또는 재생)을 포함할 수 있다. 인터페이스 변경 기능은 입력 인터페이스, 출력 인터페이스, 또는 통신 인터페이스 중의 적어도 하나를 변경하는 기능을 포함할 수 있다. 모드 변경 기능은 제1 모드(예: 일반 모드, 게스트 모드, 또는 제한된 모드)에서 제2 모드(예: 편집 모드, 관리자 모드, 또는 제한 해제 모드)로 변경하는 기능을 포함할 수 있다.
일 실시예에서, 제2 기능은, 사용자에게 인증 실패를 통지하는 기능일 수 있다. 일 실시예에서, 제1 프로세서는 지정된 사용자 인터페이스(예: 메시지, 창, 화면, 또는 지시자) 또는 안내 화면을 디스플레이 상에 표시할 수 있다.
다양한 실시예들에 따르면, 디스플레이의 화면이 온된 상태에서 생체 정보 인식을 수행하는 경우에, 1711 동작 및 1713 동작은 생략될 수도 있다.
도 18은 다양한 실시 예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 1811 내지 1829 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 한 실시예에서, 1811 내지 1829 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다. 도 18은 디스플레이(예: 표시 장치(160) 또는 디스플레이(210 또는 710))의 화면이 오프된 상태를 예로 설명하고 있다.
1811 동작에서, 압력 센서 모듈(예: 압력 센서 모듈(253 또는 753))은, 디스플레이의 적어도 일부 영역(예: 생체 정보 인식 영역 중 터치된 영역)(또는 터치 영역이라고도 할 수 있음)에 대한 외부 객체(예: 사용자의 손가락)의 압력을 검출할 수 있고, 외부 객체의 압력 검출에 적어도 일부 기반하여(또는 응답하여), 생체 센서 모듈(예: 생체 센서 모듈(255 또는 755))로 제1 지정된 신호를 전송할 수 있다.
일 실시예에서, 제1 지정된 신호는 웨이크 업 신호/메시지/데이터, 인터럽트 신호/메시지/데이터 또는 생체 정보의 획득/처리를 위한 신호/메시지/데이터일 수 있다.
일 실시예에서, 제1 지정된 신호의 수신에 적어도 일부 기반하여(또는 응답하여), 슬립 상태(또는 비활성화 상태)인 생체 센서 모듈은 웨이크 업(또는 정상/활성화 상태로 천이)하거나 활성화될 수 있다.
1813 동작에서, 압력 센서 모듈은 디스플레이의 적어도 일부 영역(예: 생체 정보 인식 영역 중 터치된 영역)에 대한 외부 객체의 압력 강도/값을 나타내는 압력 정보를 제1 프로세서(예: 제1 프로세서(721))로 전송할 수 있다.
1815 동작에서, 터치 센서 모듈(예: 터치 센서 모듈(251 또는 751))은 디스플레이의 적어도 일부 영역(예: 생체 정보 인식 영역 중 터치된 영역)에 대한 외부 객체의 터치 정보를 제1 프로세서로 전송할 수 있다.
일 실시예에서, 압력 정보 및/또는 터치 정보의 수신에 적어도 일부 기반하여(또는 응답하여), 슬립 상태(또는 비활성화 상태)인 제1 프로세서는 웨이크 업(또는 정상/활성화 상태로 천이)하거나 활성화될 수 있다.
1817 동작에서, 제1 프로세서는 디스플레이의 적어도 일부 영역(예: 생체 정보 인식 영역 중 터치된 영역)이 지정된 제1 영역을 포함한다는 제1 조건 및/또는 외부 객체의 압력 강도/값이 지정된 임계값 이상인 제2 조건이 만족되는지를 결정할 수 있다.
제1 프로세서는, 제1 조건 및/또는 제2 조건이 만족되면 1819 동작을 수행할 수 있고, 제1 조건 및/또는 제2 조건이 만족되지 않으면 다음 압력 정보 및/또는 다음 터치 정보의 수신까지 대기하거나 비활성화될 수 있다.
1819 동작에서, 제1 조건 및/또는 제2 조건이 만족되면, 제1 프로세서는 제2 프로세서(예: 제2 프로세서(723))로 제2 지정된 신호를 전송할 수 있다.
일 실시예에서, 제2 지정된 신호는 웨이크 업 신호/메시지/데이터, 인터럽트 신호/메시지/데이터 또는 생체 정보의 획득/처리를 위한 신호/메시지/데이터일 수 있다.
일 실시예에서, 제2 지정된 신호의 수신에 적어도 일부 기반하여(또는 응답하여), 슬립 상태(또는 비활성화 상태)인 제2 프로세서는 웨이크 업(또는 정상/활성화 상태로 천이)하거나 활성화될 수 있다.
생체 정보의 획득을 위한 1821 동작, 생체 정보의 전송을 위한 1823 동작, 생체 정보의 이미지 처리를 위한 1825 동작, 이미지 처리된 생체 정보의 전송을 위한 1827 동작 및 생체 정보의 인증을 위한 1829 동작은 도 17에 도시된 1715 동작 내지 1723 동작과 동일하므로, 중복되는 설명은 생략하기로 한다.
도 19는 다양한 실시 예들에 따른 전자 장치에서 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 1911 내지 1929 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 한 실시예에서, 1911 내지 1929 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다. 도 19는 디스플레이(예: 표시 장치(160) 또는 디스플레이(210 또는 710))의 화면이 오프된 상태를 예로 설명하고 있다.
1911 동작에서, 압력 센서 모듈(예: 압력 센서 모듈(253 또는 753))은, 디스플레이의 적어도 일부 영역(예: 생체 정보 인식 영역 중 터치된 영역)(또는 터치 영역이라고도 할 수 있음)에 대한 외부 객체(예: 사용자의 손가락)의 압력을 검출할 수 있고, 외부 객체의 압력 강도/값을 나타내는 압력 정보를 제1 프로세서(예: 제1 프로세서(721))로 전송할 수 있다.
1913 동작에서, 터치 센서 모듈(예: 터치 센서 모듈(251 또는 751))은 디스플레이의 적어도 일부 영역(예: 생체 정보 인식 영역 중 터치된 영역)에 대한 외부 객체의 터치 정보를 제1 프로세서로 전송할 수 있다.
일 실시예에서, 압력 정보 및/또는 터치 정보의 수신에 적어도 일부 기반하여(또는 응답하여), 슬립 상태(또는 비활성화 상태)인 제1 프로세서는 웨이크 업(또는 정상/활성화 상태로 천이)하거나 활성화될 수 있다.
1915 동작에서, 제1 프로세서는 디스플레이의 적어도 일부 영역(예: 생체 정보 인식 영역 중 터치된 영역)이 지정된 제1 영역을 포함한다는 제1 조건 및/또는 외부 객체의 압력 강도/값이 지정된 임계값 이상인 제2 조건이 만족되는지를 결정할 수 있다.
제1 프로세서는, 제1 조건 및/또는 제2 조건이 만족되면 1917 동작을 수행할 수 있고, 제1 조건 및/또는 제2 조건이 만족되지 않으면 다음 압력 정보 및/또는 다음 터치 정보의 수신까지 대기하거나 비활성화될 수 있다.
1917 동작에서, 제1 조건 및/또는 제2 조건이 만족되면, 제1 프로세서는 생체 센서 모듈(예: 생체 센서 모듈(255 또는 755))로 제1 지정된 신호를 전송할 수 있다.
1919 동작에서, 제1 조건 및/또는 제2 조건이 만족되면, 제1 프로세서는 제2 프로세서(예: 제2 프로세서(723))로 제2 지정된 신호를 전송할 수 있다.
일 실시예에서, 제1 및 제2 지정된 신호들의 각각은 웨이크 업 신호/메시지/데이터, 인터럽트 신호/메시지/데이터 또는 생체 정보의 획득/처리를 위한 신호/메시지/데이터일 수 있다.
일 실시예에서, 제1 또는 제2 지정된 신호의 수신에 적어도 일부 기반하여(또는 응답하여), 슬립 상태(또는 비활성화 상태)인 제2 프로세서 또는 생체 센서 모듈은 웨이크 업(또는 정상/활성화 상태로 천이)하거나 활성화될 수 있다.
생체 정보의 획득을 위한 1921 동작, 생체 정보의 전송을 위한 1923 동작, 생체 정보의 이미지 처리를 위한 1925 동작, 이미지 처리된 생체 정보의 전송을 위한 1927 동작 및 생체 정보의 인증을 위한 1929 동작은 도 17에 도시된 1715 동작 내지 1723 동작과 동일하므로, 중복되는 설명은 생략하기로 한다.
도 20은 다양한 실시예들에 따른 전자 장치에 의한 생체 정보 인식 방법을 설명하기 위한 흐름도이다. 생체 정보 인식 방법은 2011 내지 2013 동작들을 포함할 수 있다. 생체 정보 인식 방법은, 전자 장치(예: 전자 장치(101, 201 또는 701)), 전자 장치의 적어도 하나의 프로세서(예: 프로세서(120, 220 또는 720)) 또는 전자 장치의 제어부 중의 적어도 하나에 의해 수행될 수 있다. 한 실시예에서, 2011 내지 2013 동작들 중 적어도 하나가 생략되거나, 일부 동작들이 동시에 병렬로 수행되거나, 일부 동작들의 순서가 바뀌거나, 다른 동작이 추가될 수 있다.
2011 동작에서, 전자 장치(또는 적어도 하나의 프로세서)는, 적어도 디스플레이(예: 표시 장치(160) 또는 디스플레이(210 또는 710))와 인접하여 배치된 적어도 하나의 센서(예: 터치 센서 모듈(예: 터치 센서 모듈(251 또는 751)) 및/또는 압력 센서 모듈(예: 압력 센서 모듈(253 또는 753))) 또는 디스플레이의 적어도 일부 영역에 배치된 생체 센서(예: 생체 센서 모듈(255 또는 755))를 이용하여, 적어도 일부 영역에 대한 외부 객체에 의한 입력을 수신할 수 있다.
일 실시예에서, 외부 객체에 의한 입력이 지정된 조건을 만족하면, 전자 장치는 외부 객체에 대한 생체 정보의 획득하기 위한 신호를 생체 센서로 전송할 수 있다. 생체 센서는, 신호의 수신에 적어도 일부 기반하여, 디스플레이의 픽셀들 중 적어도 일부 영역에 대응하는 픽셀들을 활성화하기 위한 신호를 디스플레이를 구동하기 위한 디스플레이 구동 회로로 전송할 수 있다.
일 실시예에서, 생체 센서는, 외부 객체에 의한 입력에 적어도 일부 기반하여, 적어도 하나의 프로세서를 활성화하기 위한 신호를 적어도 하나의 프로세서로 전송할 수 있다.
일 실시예에서, 적어도 하나의 센서는, 외부 객체에 의한 입력에 적어도 일부 기반하여, 생체 센서를 활성화하기 위한 신호를 생체 센서로 전송할 수 있다.
일 실시예에서, 적어도 하나의 프로세서는, 외부 객체에 의한 입력이 지정된 조건을 만족하면 활성화될 수 있다.
일 실시예에서, 적어도 하나의 프로세서는 생체 정보의 인증을 위한 제1 프로세서(예: 제1 프로세서(721)) 및 생체 정보의 이미지 처리를 위한 제2 프로세서(예: 제2 프로세서(723))를 포함할 수 있다. 제1 프로세서는, 외부 객체에 의한 입력이 지정된 조건을 만족하면 제2 프로세서를 활성화하기 위한 신호를 제2 프로세서로 전송할 수 있다.
2013 동작에서, 전자 장치(또는 적어도 하나의 프로세서)는, 외부 객체에 의한 입력에 적어도 일부 기반하여, 생체 센서를 이용하여 외부 객체에 대한 생체 정보를 획득할 수 있다.
일 실시예에서, 전자 장치는, 외부 객체에 의한 입력이 지정된 조건을 만족하면, 생체 센서를 이용하여 외부 객체에 대한 생체 정보를 획득할 수 있다.
일 실시예에서, 전자 장치는, 외부 객체에 의한 입력이 지정된 조건을 만족하면, 외부 객체에 대한 생체 정보의 획득하기 위한 신호를 생체 센서로 전송할 수 있다.
일 실시예에서, 전자 장치는, 외부 객체에 의한 입력이 지정된 조건을 만족하면, 디스플레이의 픽셀들 중 상기 적어도 일부 영역에 대응하는 픽셀들을 활성화하기 위한 신호를 디스플레이를 구동하기 위한 디스플레이 구동 회로(예: 디스플레이 구동 회로(730))로 전송할 수 있다.
일 실시예에서, 생체 센서는, 디스플레이의 동작 상태와 관련된 신호의 수신에 적어도 일부 기반하여, 외부 객체에 대한 생체 정보를 획득할 수 있다.
일 실시예에서, 지정된 조건은, 적어도 일부 영역에 대한 외부 객체의 압력을 나타내는 값이 지정된 임계값 이상인 조건, 또는 적어도 일부 영역이 지정된 영역을 포함한다는 조건 중의 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 전자 장치의 지문 인식 방법은, 디스플레이와 인접하여 배치된 압력 센서를 이용하여, 상기 디스플레이의 적어도 일부 영역에 대한 외부 객체의 입력을 수신하는 동작, 상기 외부 객체의 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 디스플레이에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어를, 디스플레이 구동 회로로 전송하는 동작, 및 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서가 지정된 인터페이스를 통해 상기 디스플레이 구동 회로로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 외부 객체에 대한 생체 정보를 획득하도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 생체 센서로 전송하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 상기 디스플레이와 인접하여 배치된 터치 센서를 이용하여, 상기 적어도 일부 영역에 대한 상기 외부 객체의 입력을 수신하는 동작, 상기 외부 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하는 동작, 및 상기 입력에 대응되는 영역이 상기 제1 영역을 포함하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 상기 명령어를 상기 디스플레이 구동 회로로 전송하고, 상기 외부 객체에 대한 생체 정보의 획득과 관련된 상기 다른 명령어를 상기 생체 센서에게 전송하는 동작을 더 포함할 수 있다.
다양한 실시예에 따르면, 상기 압력 센서를 이용하여 수신된 외부 객체의 입력에 대응되는 입력의 강도가 지정된 조건을 만족하고, 상기 디스플레이와 인접하여 배치된 터치 센서를 이용하여 수신된 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 상기 명령어를 상기 디스플레이 구동 회로로 전송하고, 상기 외부 객체에 대한 생체 정보의 획득과 관련된 상기 다른 명령어를 상기 생체 센서에게 전송하는 동작을 더 포함할 수 있다.
다양한 실시예에 따르면, 전자 장치의 지문 인식방법은, 디스플레이와 인접하여 배치된 압력 센서를 이용하여, 상기 디스플레이의 적어도 일부 영역에 대한 외부 객체의 입력을 수신하는 동작, 상기 외부 객체의 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하기 위한 명령어를, 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서로 전송하는 동작, 및 상기 디스플레이 구동 회로가 지정된 인터페이스를 통해 상기 생체 센서로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 디스플레이 구동 회로로 전송하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 상기 디스플레이와 인접하여 배치된 터치 센서를 이용하여, 상기 적어도 일부 영역에 대한 상기 외부 객체의 입력을 수신하는 동작, 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하는지 확인하는 동작, 및 상기 입력에 대응되는 영역이 상기 제1 영역을 포함하면, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하기 위한 상기 명령어를 상기 생체 센서로 전송하고, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 상기 다른 명령어를 상기 디스플레이 구동 회로로 전송하는 동작을 더 포함할 수 있다.
다양한 실시예에 따르면, 상기 압력 센서를 이용하여 수신된 외부 객체의 입력에 대응되는 입력의 강도가 지정된 조건을 만족하고, 상기 디스플레이와 인접하여 배치된 터치 센서를 이용하여 수신된 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하기 위한 상기 명령어를 상기 생체 센서로 전송하고, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 상기 다른 명령어를 상기 디스플레이 구동 회로로 전송하는 동작을 더 포함할 수 있다.
다양한 실시예에 따르면, 전자 장치의 지문 인식 방법은, 디스플레이와 인접하여 배치된 압력 센서를 이용하여, 상기 디스플레이의 적어도 일부 영역에 대한 외부 객체의 입력을 수신하는 동작, 상기 외부 객체의 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 디스플레이에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하는 동작, 및 상기 광을 이용하여, 상기 외부 객체에 대한 생체 정보를 획득하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 상기 디스플레이와 인접하여 배치된 터치 센서를 이용하여, 상기 적어도 일부 영역에 대한 상기 외부 객체의 입력을 수신하는 동작, 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하는지 확인하는 동작, 및 상기 입력이 상기 제1 영역을 포함하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 상기 압력 센서를 이용하여 수신된 외부 객체의 입력에 대응되는 입력의 강도가 지정된 조건을 만족하고, 상기 디스플레이와 인접하여 배치된 터치 센서를 이용하여 수신된 상기 외부 객체의 입력에 대응되는 영역이 상기 적어도 일부 영역 내의 제1 영역을 포함하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하는 동작을 더 포함할 수 있다.
다양한 실시예에 따르면, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하도록 상기 디스플레이 구동 회로에게 명령어를 전송하고, 상기 광을 이용하여 상기 외부 객체에 대한 생체 정보를 획득하도록 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서에게 다른 명령어를 전송하는 동작을 더 포함할 수 있다.
다양한 실시예에 따르면, 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 회로에 의하여 실행될 때에 상기 적어도 하나의 회로로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 디스플레이와 인접하여 배치된 압력 센서를 이용하여, 상기 디스플레이의 적어도 일부 영역에 대한 외부 객체의 입력을 수신하는 동작, 상기 외부 객체의 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 디스플레이에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜기 위한 명령어를, 디스플레이 구동 회로로 전송하는 동작, 및 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서가 지정된 인터페이스를 통해 상기 디스플레이 구동 회로로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 외부 객체에 대한 생체 정보를 획득하도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 생체 센서로 전송하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 회로에 의하여 실행될 때에 상기 적어도 하나의 회로로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 디스플레이와 인접하여 배치된 압력 센서를 이용하여, 상기 디스플레이의 적어도 일부 영역에 대한 외부 객체의 입력을 수신하는 동작, 상기 외부 객체의 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하기 위한 명령어를, 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서로 전송하는 동작, 및 상기 디스플레이 구동 회로가 지정된 인터페이스를 통해 상기 생체 센서로부터 전송된 상기 명령어에 대응하는 신호에 응답하여 상기 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 켜도록, 상기 생체 정보의 획득과 관련된 다른 명령어를 상기 디스플레이 구동 회로로 전송하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 회로에 의하여 실행될 때에 상기 적어도 하나의 회로로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 디스플레이와 인접하여 배치된 압력 센서를 이용하여, 상기 디스플레이의 적어도 일부 영역에 대한 외부 객체의 입력을 수신하는 동작, 상기 외부 객체의 입력에 대응하는 압력의 강도(intensity)를 확인하는 동작, 상기 압력의 강도가 지정된 조건을 만족하면, 상기 디스플레이에 포함된 복수의 픽셀들 중 상기 적어도 일부 영역에 대응하는 적어도 일부 픽셀을 이용하여 광을 출력하는 동작, 및 상기 광을 이용하여, 상기 외부 객체에 대한 생체 정보를 획득하는 동작을 포함할 수 있다.
다양한 실시예에 따르면, 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 회로에 의하여 실행될 때에 상기 적어도 하나의 회로로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 디스플레이와 인접하여 배치된 적어도 하나의 센서 또는 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체에 의한 입력을 수신하는 동작, 및 상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하는 동작을 포함할 수 있다.

Claims (15)

  1. 전자 장치에서,
    디스플레이;
    상기 디스플레이와 인접하여 배치된 적어도 하나의 센서;
    상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서; 및
    적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는,
    상기 적어도 하나의 센서 또는 상기 생체 센서를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체에 의한 입력을 수신하고, 및
    상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하도록 설정된 전자 장치.
  2. 제1항에 있어서, 상기 적어도 하나의 프로세서는,
    상기 외부 객체에 의한 입력이 지정된 조건을 만족하면, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하도록 설정된 전자 장치.
  3. 제1항에 있어서, 상기 적어도 하나의 프로세서는,
    상기 외부 객체에 의한 입력이 지정된 조건을 만족하면, 상기 외부 객체에 대한 생체 정보를 획득하기 위한 신호를 상기 생체 센서로 전송하도록 설정된 전자 장치.
  4. 제1항에 있어서,
    상기 디스플레이를 구동하기 위한 디스플레이 구동 회로를 더 포함하고, 상기 적어도 하나의 프로세서는,
    상기 외부 객체에 의한 입력이 지정된 조건을 만족하면, 상기 디스플레이의 픽셀들 중 상기 적어도 일부 영역에 대응하는 픽셀들을 활성화하기 위한 신호를 상기 디스플레이 구동 회로로 전송하도록 설정된 전자 장치.
  5. 제1항에 있어서,
    상기 생체 센서는, 상기 디스플레이의 동작 상태와 관련된 신호의 수신에 적어도 일부 기반하여, 상기 외부 객체에 대한 생체 정보를 획득하도록 설정된 전자 장치.
  6. 제2항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 적어도 일부 영역에 대한 상기 외부 객체의 압력을 나타내는 값이 지정된 임계값을 만족하거나,
    상기 적어도 일부 영역이 지정된 영역에 포함되면 상기 지정된 조건을 만족하는 것으로 결정하도록 설정된 전자 장치.
  7. 제3항에 있어서,
    상기 디스플레이를 구동하기 위한 디스플레이 구동 회로를 더 포함하고,
    상기 생체 센서는, 상기 외부 객체에 대한 생체 정보를 획득하기 위한 신호의 수신에 적어도 일부 기반하여, 상기 디스플레이의 픽셀들 중 상기 적어도 일부 영역에 대응하는 픽셀들을 활성화하기 위한 신호를 상기 디스플레이 구동 회로로 전송하도록 설정된 전자 장치.
  8. 제1항에 있어서,
    상기 생체 센서는, 상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 적어도 하나의 프로세서를 활성화하기 위한 신호를 상기 적어도 하나의 프로세서로 전송하도록 설정된 전자 장치.
  9. 제1항에 있어서,
    상기 적어도 하나의 센서는, 상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 생체 센서를 활성화하기 위한 신호를 상기 생체 센서로 전송하도록 설정된 전자 장치.
  10. 제1항에 있어서,
    상기 적어도 하나의 프로세서는 상기 생체 정보의 인증을 위한 제1 프로세서 및 상기 생체 정보의 이미지 처리를 위한 제2 프로세서를 포함하고,
    상기 제1 프로세서는, 상기 외부 객체에 의한 입력이 지정된 조건을 만족하면 상기 제2 프로세서를 활성화하기 위한 신호를 상기 제2 프로세서로 전송하도록 설정된 전자 장치.
  11. 명령들을 저장하고 있는 비일시적 저장 매체에 있어서, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정되며, 상기 적어도 하나의 동작은,
    디스플레이와 인접하여 배치된 적어도 하나의 센서 또는 상기 디스플레이의 적어도 일부 영역에 배치된 생체 센서를 이용하여, 상기 적어도 일부 영역에 대한 외부 객체에 의한 입력을 수신하는 동작; 및
    상기 외부 객체에 의한 입력에 적어도 일부 기반하여, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하는 동작을 포함하는 비일시적 저장 매체.
  12. 제11항에 있어서, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하는 동작은,
    상기 외부 객체에 의한 입력이 지정된 조건을 만족하면, 상기 디스플레이의 픽셀들 중 상기 적어도 일부 영역에 대응하는 픽셀들을 활성화하기 위한 신호를 상기 디스플레이를 구동하기 위한 디스플레이 구동 회로로 전송하는 동작을 포함하는 비일시적 저장 매체.
  13. 제11항에 있어서,
    상기 생체 센서는, 상기 디스플레이의 동작 상태와 관련된 신호의 수신에 적어도 일부 기반하여, 상기 외부 객체에 대한 생체 정보를 획득하는 비일시적 저장 매체.
  14. 제12항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 적어도 일부 영역에 대한 상기 외부 객체의 압력을 나타내는 값이 지정된 임계값을 만족하거나,
    상기 적어도 일부 영역이 지정된 영역에 포함되면 상기 지정된 조건을 만족하는 것으로 결정하는 비일시적 저장 매체.
  15. 제11항에 있어서, 상기 생체 센서를 이용하여 상기 외부 객체에 대한 생체 정보를 획득하는 동작은,
    상기 외부 객체에 의한 입력이 지정된 조건을 만족하면, 상기 외부 객체에 대한 생체 정보를 획득하기 위한 신호를 상기 생체 센서로 전송하는 동작을 포함하고,
    상기 생체 센서는, 상기 외부 객체에 대한 생체 정보를 획득하기 위한 신호의 수신에 적어도 일부 기반하여, 상기 디스플레이의 픽셀들 중 상기 적어도 일부 영역에 대응하는 픽셀들을 활성화하기 위한 신호를 상기 디스플레이를 구동하기 위한 디스플레이 구동 회로로 전송하는 비일시적 저장 매체.
PCT/KR2018/009995 2017-09-07 2018-08-29 지문을 인식하기 방법, 전자 장치 및 저장 매체 WO2019050212A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/642,104 US11275458B2 (en) 2017-09-07 2018-08-29 Method, electronic device, and storage medium for fingerprint recognition

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2017-0114645 2017-09-07
KR20170114645 2017-09-07
KR10-2018-0066616 2018-06-11
KR1020180066616A KR102620077B1 (ko) 2017-09-07 2018-06-11 전자 장치 및 전자 장치의 지문 인식 방법

Publications (1)

Publication Number Publication Date
WO2019050212A1 true WO2019050212A1 (ko) 2019-03-14

Family

ID=65634500

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/009995 WO2019050212A1 (ko) 2017-09-07 2018-08-29 지문을 인식하기 방법, 전자 장치 및 저장 매체

Country Status (2)

Country Link
US (1) US11275458B2 (ko)
WO (1) WO2019050212A1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110826479B (zh) * 2018-12-27 2022-07-19 神盾股份有限公司 电子装置与其屏下指纹感测方法
KR102671087B1 (ko) * 2018-12-31 2024-05-31 엘지디스플레이 주식회사 광학 방식 지문 인식 디스플레이 및 그 작동 방법
CN110944073A (zh) * 2019-10-29 2020-03-31 武汉华星光电技术有限公司 屏下指纹识别装置及显示装置
US20210333921A1 (en) * 2020-04-28 2021-10-28 Novatek Microelectronics Corp. Display device, multi-fingerprint detection device and operation method thereof
WO2021260773A1 (ja) * 2020-06-22 2021-12-30 日本電気株式会社 認証システム、認証端末、認証端末の制御方法及び記憶媒体
US11625955B1 (en) 2021-09-20 2023-04-11 Qualcomm Incorporated Fingerprint sensor with force or pressure feedback

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130057637A (ko) * 2011-11-24 2013-06-03 삼성전기주식회사 접촉 감지 장치
KR20150073539A (ko) * 2013-12-23 2015-07-01 삼성전자주식회사 전자장치의 입력 감지장치 및 방법
WO2016036304A1 (en) * 2014-09-03 2016-03-10 Fingerprint Cards Ab Pseudo random guided fingerprint enrolment
KR20160071887A (ko) * 2014-12-12 2016-06-22 엘지전자 주식회사 이동단말기 및 그것의 제어방법
US9727156B2 (en) * 2014-02-21 2017-08-08 Samsung Electronics Co., Ltd. Method for recognizing biometrics information and electronic device thereof

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8611919B2 (en) * 2002-05-23 2013-12-17 Wounder Gmbh., Llc System, method, and computer program product for providing location based services and mobile e-commerce
AU2013262488A1 (en) 2012-05-18 2014-12-18 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
US20140062899A1 (en) * 2012-08-31 2014-03-06 Au Optronics Corporation Dynamic stop display driving mechanism for touch sensing
KR20160135318A (ko) 2014-10-06 2016-11-25 선전 후이딩 테크놀로지 컴퍼니 리미티드 능동 증폭된 픽셀을 구비하는 셀프 정전용량식 지문 센서
CN106155504B (zh) 2015-03-26 2019-09-10 小米科技有限责任公司 模组唤醒方法及装置
KR102396514B1 (ko) 2015-04-29 2022-05-11 삼성전자주식회사 지문 정보 처리 방법 및 이를 지원하는 전자 장치
US10282579B2 (en) * 2016-01-29 2019-05-07 Synaptics Incorporated Initiating fingerprint capture with a touch screen

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130057637A (ko) * 2011-11-24 2013-06-03 삼성전기주식회사 접촉 감지 장치
KR20150073539A (ko) * 2013-12-23 2015-07-01 삼성전자주식회사 전자장치의 입력 감지장치 및 방법
US9727156B2 (en) * 2014-02-21 2017-08-08 Samsung Electronics Co., Ltd. Method for recognizing biometrics information and electronic device thereof
WO2016036304A1 (en) * 2014-09-03 2016-03-10 Fingerprint Cards Ab Pseudo random guided fingerprint enrolment
KR20160071887A (ko) * 2014-12-12 2016-06-22 엘지전자 주식회사 이동단말기 및 그것의 제어방법

Also Published As

Publication number Publication date
US11275458B2 (en) 2022-03-15
US20200210004A1 (en) 2020-07-02

Similar Documents

Publication Publication Date Title
AU2019231476B2 (en) Electronic device with flexible display and method for operating same
WO2020213915A1 (en) Foldable electronic device including sliding structure and method for controlling the same
WO2021107506A1 (en) Electronic device for providing augmented reality service and operating method thereof
WO2020242273A1 (en) Electronic device and method for switching network connection between plurality of electronic devices
WO2019050212A1 (ko) 지문을 인식하기 방법, 전자 장치 및 저장 매체
WO2017030223A1 (ko) 카드유닛을 구비하는 이동 단말기 및 이의 제어방법
WO2019039892A1 (en) METHOD AND ELECTRONIC MODE SWITCHING DEVICE AND CORRESPONDING INFORMATION CARRIER
WO2020209549A1 (en) Electronic device and method for controlling and operating foldable display
WO2017047854A1 (ko) 이동 단말기 및 그 제어방법
WO2018105806A1 (ko) 이동 단말기 및 그 제어 방법
WO2021049869A1 (en) Vehicle electronic device for performing authentication, mobile device used for vehicle authentication, vehicle authentication system, and vehicle authentication method
WO2018124343A1 (ko) 전자장치
WO2020091505A1 (en) Electronic device and method for intelligent interaction thereof
WO2020032510A1 (en) Electronic device including electronic pen and method of controlling communication connection between electronic device and electronic pen
WO2019198978A1 (en) Electronic device equipped with flexible display and wireless charging method using the same
WO2016129778A1 (ko) 이동 단말기 및 그 제어 방법
WO2021020801A1 (ko) 이벤트에 따라 형태가 전환되는 접이식 전자 장치 및 그 접이식 전자 장치의 형태를 전환하는 방법
WO2019164290A1 (en) Method of biometric authenticating using plurality of camera with different field of view and electronic apparatus thereof
WO2021025376A1 (en) Electronic device for processing wheel input and operation method thereof
WO2021162320A1 (en) Electronic device and method for operating high speed screen of electronic device
WO2016114437A1 (ko) 이동 단말기 및 그것의 제어방법
WO2016190484A1 (ko) 이동 단말기 및 그 제어방법
WO2020054942A1 (ko) 액세서리를 이용하여 인증을 수행하는 전자 장치 및 전자 장치의 동작 방법
WO2021210795A1 (ko) 전자 장치들의 무선 연결 방법 및 장치
WO2018048098A1 (en) Portable camera and controlling method therefor

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18853302

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18853302

Country of ref document: EP

Kind code of ref document: A1