KR102521333B1 - 사용자 인증과 관련된 사용자 인터페이스 표시 방법 및 이를 구현한 전자 장치 - Google Patents

사용자 인증과 관련된 사용자 인터페이스 표시 방법 및 이를 구현한 전자 장치 Download PDF

Info

Publication number
KR102521333B1
KR102521333B1 KR1020160148535A KR20160148535A KR102521333B1 KR 102521333 B1 KR102521333 B1 KR 102521333B1 KR 1020160148535 A KR1020160148535 A KR 1020160148535A KR 20160148535 A KR20160148535 A KR 20160148535A KR 102521333 B1 KR102521333 B1 KR 102521333B1
Authority
KR
South Korea
Prior art keywords
fingerprint
electronic device
display
user
authentication
Prior art date
Application number
KR1020160148535A
Other languages
English (en)
Other versions
KR20180051782A (ko
Inventor
이혜미
신형우
임경수
윤필주
이해동
한용길
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020160148535A priority Critical patent/KR102521333B1/ko
Priority to AU2017358278A priority patent/AU2017358278B2/en
Priority to EP17870395.5A priority patent/EP3510517B1/en
Priority to PCT/KR2017/012636 priority patent/WO2018088809A1/en
Priority to US15/808,249 priority patent/US10635879B2/en
Publication of KR20180051782A publication Critical patent/KR20180051782A/ko
Application granted granted Critical
Publication of KR102521333B1 publication Critical patent/KR102521333B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45—Structures or tools for the administration of authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G06Q20/40145—Biometric identity checks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/13—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1365—Matching; Classification

Abstract

다양한 실시예는 디스플레이, 상기 디스플레이의 표시 영역의 적어도 일부의 영역에 형성된 지문 센서, 및 프로세서를 포함하고, 상기 프로세서는, 상기 디스플레이에 표시될 적어도 하나의 객체를 포함하는 컨텐츠를 확인하고, 상기 컨텐츠가 지문 정보의 획득과 관련되지 않는 경우, 상기 적어도 하나의 객체를 지정된 위치에 표시하고, 및 상기 컨텐츠가 지문 정보의 획득과 관련된 경우, 상기 적어도 하나의 객체를 상기 지문 센서가 형성된 상기 적어도 일부 영역에 표시하도록 설정된 방법 및 장치를 제공한다. 또한, 다른 실시예도 가능하다.

Description

사용자 인증과 관련된 사용자 인터페이스 표시 방법 및 이를 구현한 전자 장치{METHOD FOR DISPLAYING USER INTERFACE RELATED TO USER AUTHENTICATION AND ELECTRONIC DEVICE FOR THE SAME}
다양한 실시예는 사용자 인증과 관련된 사용자 인터페이스 표시 방법 및 장치에 관한 것이다.
최근 디지털 기술의 발달과 함께 이동통신 단말기, PDA(personal digital assistant), 전자수첩, 스마트 폰, 태블릿 PC(personal computer), 웨어러블 디바이스(wearable device) 등과 같은 다양한 유형의 전자 장치가 널리 사용되고 있다. 이러한, 전자 장치는 기능 지지 및 증대를 위해, 전자 장치의 하드웨어적인 부분 및/또는 소프트웨어적인 부분이 지속적으로 개량되고 있다.
일례로, 전자 장치는 카메라를 이용하여 사진을 촬영하고, 네비게이션을 이용하여 길찾기 서비스를 제공하며, 비밀번호 입력(또는 비밀패턴 입력) 또는 지문 센서를 이용하여 결제 서비스를 제공하고 있다. 전자 장치는 지문 센서를 이용하여 사용자를 인증하는 경우, 비밀번호 입력을 이용한 사용자 인증에 비해 높은 보안성을 유지할 수 있다. 따라서, 전자 장치는 지문 센서를 이용하여 결제 서비스뿐만 아니라, 금융 거래와 같은 다양한 서비스를 제공하기 위해 개발되고 있다.
지문 센서는 전자 장치의 버튼(예: 홈 버튼)에 구비되어 있어, 사용자는 지문 인식 시 전자 장치의 버튼에 손가락을 접촉시킬 수 있다. 한 실시예에 따르면, 지문 센서가 전자 장치의 버튼이 아닌 전자 장치의 표시 영역에 구비되고 있다. 일례로, 지문 센서가 표시 영역의 일부에 구비되고, 표시 영역에 사용자 인터페이스가 표시되는 경우, 사용자는 지문 센서가 배치된 위치를 잘 알지 못해 지문 인식에 어려움이 있을 수 있다.
다양한 실시예들은 사용자 인터페이스에 사용자 인증을 위한 UI 컴포넌트가 포함되어 있는 경우 사용자 인증을 위한 UI 컴포넌트를 지문 인식 가능한 위치로 변경하여 표시하는 방법 및 장치를 제공할 수 있다.
다양한 실시예들에 따른 전자 장치는 디스플레이, 상기 디스플레이의 표시 영역의 적어도 일부 영역에 형성된 지문 센서, 및 프로세서를 포함하고, 상기 프로세서는, 상기 디스플레이에 표시될 적어도 하나의 객체를 포함하는 컨텐츠를 확인하고, 상기 컨텐츠가 지문 정보의 획득과 관련되지 않는 경우, 상기 적어도 하나의 객체를 지정된 위치에 표시하고, 및 상기 컨텐츠가 지문 정보의 획득과 관련된 경우, 상기 적어도 하나의 객체를 상기 지문 센서가 형성된 상기 적어도 일부 영역에 표시하도록 설정될 수 있다.
다양한 실시예들에 따른 전자 장치의 동작 방법은 상기 전자 장치와 기능적으로 연결된 디스플레이를 통해 표시될 컨텐츠를 구성하는 적어도 하나의 객체를 식별하는 동작, 상기 식별된 객체 중에서 사용자 인증을 위한 객체가 존재하는지 판단하는 동작, 및 상기 페이지에 사용자 인증을 위한 객체가 포함된 경우, 상기 사용자 인증을 위한 객체를 상기 적어도 일부의 표시 영역에 표시하는 동작을 포함할 수 있다.
다양한 실시예들에 따른 컴퓨터로 판독 가능한 기록 매체는 전자 장치의 디스플레이에 표시될 적어도 하나의 객체를 포함하는 컨텐츠를 확인하는 동작, 상기 컨텐츠가 지문 정보의 획득과 관련되지 않는 경우, 상기 적어도 하나의 객체를 지정된 위치에 표시하는 동작, 및 상기 컨텐츠가 지문 정보의 획득과 관련된 경우, 상기 적어도 하나의 객체를 상기 지문 센서가 형성된 상기 적어도 일부 영역에 표시하는 동작을 실행시키기 위한 프로그램을 기록할 수 있다.
다양한 실시예들에 따르면, 컨텐츠에 사용자 인증을 위한 객체가 포함되어 있는 경우 사용자 인증을 위한 객체를 지문 인식 가능한 위치로 변경하여 표시함으로써, 사용자 편의성을 향상시킬 수 있다.
다양한 실시예들에 따르면, 디스플레이에 내장된 지문 센서를 이용하여 사용자 인증과 관련된 동작을 사용자가 직관적으로 빠르게 수행할 수 있다.
다양한 실시예들에 따르면, 별도의 지문 인증 버튼을 누를 필요없이 사용자 인터페이스 내 지문 인증이 필요한 객체를 누르는 사용자 의도를 파악하여 한번의 사용자 입력만으로 사용자의 지문을 인식하여 사용자 인증을 수행할 수 있다.
다양한 실시예들에 따르면, 사용자에 의해 지문 인증이 한번 수행된 후 일정 시간 이내에 사용자 인증이 필요한 경우, 반복해서 사용자 인증을 수행하지 않고 기존의 지문 인증을 통한 사용자 인증을 유지함으로써, 전자 장치의 사용성을 향상시킬 수 있다.
도 1은 다양한 실시예들에 따른 전자 장치의 구성을 도시한 도면이다.
도 2a 내지 도 2d는 다양한 실시예들에 따른 지문 센서를 구비한 전자 장치의 계층 구조를 도시한 도면들이다.
도 2e는 다양한 실시예들에 따른 전자 장치의 아키텍처를 도시한 도면이다.
도 3은 다양한 실시예들에 따른 전자 장치의 프로세서 구성을 도시한 도면이다.
도 4a 및 도 4b는 다양한 실시예들에 따른 전자 장치의 동작 방법을 도시한 흐름도이다.
도 5a 및 도 5b는 다양한 실시예들에 따른 사용자 인터페이스를 표시하는 일례를 도시한 도면들이다.
도 6a 내지 도 6e는 다양한 실시예들에 따른 사용자 인터페이스를 구성하는 일례를 도시한 도면들이다.
도 7은 다양한 실시예들에 따른 전자 장치의 사용자 인증 방법을 도시한 흐름도이다.
도 8은 다양한 실시예들에 따른 사용자 인증을 유지하는 일례를 도시한 도면들이다.
도 9는 다양한 실시예들에 따른 전자 장치의 지문 인증 방법을 도시한 흐름도이다.
도 10은 다양한 실시예들에 따른 서로 다른 페이지에서 지문 정보를 이용하는 일례를 도시한 도면이다.
도 11은 다양한 실시예들에 따른 전자 장치의 인증 결과 적용 방법을 도시한 흐름도이다.
도 12는 다양한 실시예들에 따른 멀티 윈도우에서의 인증 결과를 적용하는 일례를 도시한 도면이다.
도 13a 및 도 13b는 다양한 실시예들에 따른 양면 디스플레이에서의 인증 결과를 적용하는 일례를 도시한 도면들이다.
이하, 본 발명의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 발명에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 실시예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성 요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 그리고 본 발명에 개시된 실시 예는 개시된 기술 내용의 설명 및 이해를 위해 제시된 것이며, 본 발명에서 기재된 기술의 범위를 한정하는 것은 아니다. 따라서, 본 발명의 범위는, 본 발명의 기술적 사상에 근거한 모든 변경 또는 다양한 다른 실시 예를 포함하는 것으로 해석되어야 한다.
본 발명의 실시 예에서 전자 장치는 본 발명의 다양한 실시 예들에 따른 기능(예: 표시 기능)을 지원하는 모든 정보통신기기, 멀티미디어기기, 웨어러블 디바이스(Wearable Device) 및 그에 대한 응용기기와 같이 AP(Application Processor)), CP(Communication Processor), GPU(Graphic Processing Unit), 및 CPU(Central Processing Unit) 등의 다양한 프로세서 중 하나 또는 그 이상을 사용하는 모든 장치를 포함할 수 있다.
본 발명의 실시 예에 따른 전자 장치는, 예를 들면, 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 영상 전화기, 전자책 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), 워크스테이션(workstation), 서버, PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 스마트 안경, 머리 착용형 장치(HMD, head-mounted-device) 등), 또는 스마트 와치(smart watch)) 중 적어도 하나를 포함할 수 있다.
또한 본 발명의 실시 예에서 전자 장치는 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 냉장고, 에어컨, 청소기, 세탁기, 셋톱 박스(set-top box), 홈 오토매이션 컨트롤 패널(home automation control panel), TV 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(예: XboxTM, PlayStationTM), 또는 전자 액자 중 적어도 하나를 포함할 수 있다. 또한 본 발명의 실시 예에서 전자 장치는 네비게이션(navigation) 장치, 또는 사물 인터넷 장치(internet of things) 중 적어도 하나를 포함할 수 있다.
다양한 실시 예들에서, 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 어떤 실시 예에 따른 전자 장치는 플렉서블 전자 장치일 수 있다. 또한, 본 발명의 실시 예에 따른 전자 장치는 전술한 기기들에 한정되지 않으며, 기술 발전에 따른 새로운 전자 장치를 포함할 수 있다.
또한 본 발명의 실시 예에서 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다. 본 발명의 실시 예에서 모듈 또는 프로그램 모듈은 본 발명의 다양한 구성 요소들 중 적어도 하나를 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성 요소를 더 포함할 수 있다. 다양한 실시 예들에 따른 모듈, 프로그램 모듈 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
이하에서, 첨부 도면을 참조하여 본 발명의 실시 예에 따른 베젤 기반 인터랙션에 따른 비주얼 이팩트 제공 방법 및 장치에 대하여 살펴보기로 한다. 하지만, 본 발명의 다양한 실시 예들이 하기에서 기술하는 내용에 의해 제한되거나 한정되는 것은 아니므로, 하기의 실시 예에 의거하여 다양한 실시 예들에 적용할 수 있음에 유의하여야 한다. 이하에서 설명되는 본 발명의 다양한 실시 예들에서는 하드웨어적인 접근 방법을 예시로서 설명한다. 하지만, 본 발명의 다양한 실시 예들에서는 하드웨어와 소프트웨어를 모두 사용하는 기술을 포함하고 있으므로, 본 발명의 다양한 실시 예들이 소프트웨어 기반의 접근 방법을 제외하는 것은 아니다.
도 1은 다양한 실시예들에 따른 전자 장치의 구성을 도시한 도면이다.
도 1을 참조하면, 본 발명의 다양한 실시 예들에 따른 전자 장치(100)는 무선 통신부(110), 사용자 입력부(120), 터치스크린(Touch screen)(130), 오디오 처리부(140), 메모리(150), 인터페이스부(160), 카메라 모듈(170), 제어부(180), 그리고 전원 공급부(190)를 포함할 수 있다. 본 발명의 다양한 실시 예들에서 전자 장치(100)는 도 1에 도시된 구성들이 필수적인 것은 아니어서, 도 1에 도시된 구성들보다 많은 구성들을 가지거나, 또는 그보다 적은 구성들을 가지는 것으로 구현될 수 있다.
무선 통신부(110)는 전자 장치(100)와 다른 외부 전자 장치 사이의 무선 통신을 가능하게 하는 하나 또는 그 이상의 모듈들을 포함할 수 있다. 다양한 실시 예들에서, 무선 통신부(110)는 주변의 외부 전자 장치와 통신을 수행하기 위한 모듈(예: 근거리 통신 모듈, 원거리 통신 모듈 등)을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 이동통신 모듈(111), 무선 랜(WLAN, wireless local area network) 모듈(113), 근거리 통신 모듈(115), 그리고 위치 산출 모듈(117) 등을 포함하여 구성될 수 있다.
이동통신 모듈(111)은 이동통신 네트워크 상에서 기지국, 외부의 전자 장치, 그리고 다양한 서버들(예: 통합 서버(Integration Server), 프로바이더 서버(Provider Server), 컨텐츠 서버(Content Server), 인터넷 서버(Internet Server), 또는 클라우드 서버(Cloud Server)) 중 적어도 하나와 무선 신호를 송수신할 수 있다. 상기 무선 신호는 음성 신호, 데이터 신호 또는 다양한 형태의 제어 신호를 포함할 수 있다. 이동통신 모듈(111)은 전자 장치(100)의 동작에 필요한 다양한 데이터들을 사용자 요청에 응답하여 외부 장치(예: 서버 또는 다른 전자 장치 등)로 전송할 수 있다.
다양한 실시 예들에서, 이동통신 모듈(111)은 다양한 통신 방식에 기반하여 무선 신호를 송수신 할 수 있다. 예를 들어, 상기 통신 방식은, 이들에 한정하지는 않지만, LTE(Long-Term Evolution), LTE-A(LTE Advance), GSM(Global System for Mobile communication), EDGE(Enhanced Data GSM Environment), CDMA(Code Division Multiple Access), WCDMA(Wideband CDMA), UMTS(Universal Mobile Telecommunications System), 또는 OFDMA(Orthogonal Frequency Division Multiple access) 등의 통신 방식을 포함할 수 있다.
무선 랜 모듈(113)은 무선 인터넷 접속 및 다른 외부 전자 장치와 무선 랜 링크(link)를 형성하기 위한 모듈을 나타낼 수 있다. 무선 랜 모듈(113)은 전자 장치(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WiFi(Wireless Fidelity), Wibro(Wireless broadband), WiMax(World interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access), 또는 mmWave(millimeter Wave) 등이 이용될 수 있다. 무선 랜 모듈(113)은 전자 장치(100)와 네트워크(예: 무선 인터넷 네트워크)를 통해 연결되어 있는 다른 외부 전자 장치와 연동하여, 전자 장치(100)의 다양한 데이터들을 외부(예: 외부 전자 장치 또는 서버)로 전송하거나, 또는 외부로부터 수신할 수 있다. 무선 랜 모듈(113)은 상시 온(on) 상태를 유지하거나, 전자 장치(100)의 설정 또는 사용자 입력에 따라 턴-온(turn-on)될 수 있다.
근거리 통신 모듈(115)은 근거리 통신(Short Range Communication)을 수행하기 위한 모듈을 나타낼 수 있다. 근거리 통신 기술로 블루투스(Bluetooth), 저전력 블루투스(BLE, Bluetooth Low Energy), RFID(Radio Frequency Identification), 적외선 통신(IrDA, Infrared Data Association), UWB(Ultra Wideband), 지그비(Zigbee), 또는 NFC(Near Field Communication) 등이 이용될 수 있다. 근거리 통신 모듈(115)은 전자 장치(100)와 네트워크(예: 근거리 통신 네트워크)를 통해 연결되어 있는 다른 외부 전자 장치(예: 외부 음향 장치)와 연동하여, 전자 장치(100)의 다양한 데이터들을 외부 전자 장치로 전송하거나 수신 받을 수 있다. 근거리 통신 모듈(115)은 상시 온 상태를 유지하거나, 전자 장치(100)의 설정 또는 사용자 입력에 따라 턴-온(turn-on)될 수 있다.
위치 산출 모듈(117)은 전자 장치(100)의 위치를 획득하기 위한 모듈로서, 대표적인 예로는 GPS(global position system) 모듈을 포함할 수 있다. 위치 산출 모듈(117)은 삼각 측량의 원리로 전자 장치(100)의 위치를 측정할 수 있다. 예를 들어, 위치 산출 모듈(117)은 3개 이상의 기지국들로부터 떨어진 거리 정보와 시간 정보를 산출한 다음 상기 산출된 정보에 삼각법을 적용함으로써, 위도(Latitude), 경도(Longitude), 및 고도(Altitude)에 따른 3차원의 현 위치 정보를 산출할 수 있다. 또는 위치 산출 모듈(117)은 3개 이상의 위성들로부터 전자 장치(100)의 위치 정보를 실시간으로 계속 수신함으로써 위치 정보를 산출할 수 있다. 전자 장치(100)의 위치 정보는 다양한 방법에 의해 획득될 수 있다.
사용자 입력부(120)는 전자 장치(100)의 동작 제어를 위한 입력 데이터를 사용자 입력에 응답하여 발생할 수 있다. 사용자 입력부(120)는 사용자의 다양한 입력을 검출하기 위한 적어도 하나의 입력 수단을 포함할 수 있다. 예를 들어, 사용자 입력부(120)는 키패드(key pad), 돔 스위치(dome switch), 물리 버튼, 터치패드(정압/정전), 조그셔틀(jog & shuttle), 그리고 센서 등을 포함할 수 있다. 사용자 입력부(120)는 일부가 전자 장치(100)의 외부에 버튼 형태로 구현될 수 있으며, 일부 또는 전체가 터치 패널(touch panel)로 구현될 수도 있다. 사용자 입력부(120)는 본 발명의 다양한 실시 예들에 따른 전자 장치(100)의 동작을 개시(initiation)하기 위한 사용자 입력을 수신할 수 있고, 사용자 입력에 따른 입력 신호를 발생할 수 있다.
터치스크린(130)은 입력 기능과 디스플레이 기능을 동시에 수행할 수 있는 입출력 장치를 나타내며, 디스플레이(131), 터치감지부(133), 지문 센서(135)를 포함할 수 있다. 터치스크린(130)은 전자 장치(100)와 사용자 사이에 입출력 인터페이스를 제공하며, 사용자의 터치 입력을 전자 장치(100)에게 전달할 수 있고, 또한 전자 장치(100)로부터의 출력을 사용자에게 보여주는 매개체 역할을 포함할 수 있다. 터치스크린(130)은 사용자에게 시각적인 출력(visual output)을 보여줄 수 있다. 상기 시각적 출력은 텍스트(text), 그래픽(graphic), 비디오(video)와 이들의 조합의 형태로 나타날 수 있다. 본 발명의 실시 예에서 터치스크린(130)은 디스플레이(131)를 통해 전자 장치(100)의 동작에 따른 다양한 화면을 디스플레이 할 수 있다. 터치스크린(130)은 디스플레이(131)를 통해 특정 화면을 디스플레이 하는 중에 터치감지부(133)를 통해 사용자로부터 터치(touch), 호버링(hovering) 또는 에어 제스처(air gesture) 중 적어도 하나에 기반하는 이벤트(예: 터치 이벤트, 근접 이벤트, 호버링 이벤트, 에어 제스처 이벤트)를 감지할 수 있고, 상기 이벤트에 따른 입력 신호를 상기 제어부(180)에게 전달할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 디스플레이(131)는 전자 장치(100)에서 처리되는 다양한 정보를 디스플레이(출력)할 수 있다. 예를 들어, 디스플레이(131)는 표시될 적어도 하나의 객체를 포함하는 컨텐츠가 지문 정보의 획득과 관련되지 않은 경우 적어도 하나의 객체를 지정된 위치에 표시하고, 상기 컨텐츠가 지문 정보의 획득과 관련된 경우, 상기 적어도 하나의 객체를 지문 센서(135)가 형성된 적어도 일부 영역에 표시하는 동작과 관련된 유저 인터페이스 또는 그래픽 유저 인터페이스(GUI, graphical UI)를 디스플레이 할 수 있다.
디스플레이(131)는 전자 장치(100)의 회전 방향(또는 놓인 방향)에 따라 가로모드에 의한 화면 디스플레이, 세로모드에 의한 화면 디스플레이, 또는 가로모드와 세로모드 간의 변화에 따른 화면 디스플레이를 지원할 수 있다. 디스플레이(131)는 다양한 디스플레이가 사용될 수 있다. 다양한 실시 예들에서 디스플레이(131)는 벤디드 디스플레이가 사용될 수 있다. 예를 들어, 디스플레이(131)는 종이처럼 얇고 유연한 기판을 통해 손상 없이 휘거나 구부리거나 말 수 있는 벤디드 디스플레이를 포함할 수 있다.
벤디드 디스플레이는 하우징(예: 본체)에 체결되어 구부러진 형태를 유지할 수 있다. 다양한 실시 예들에서 전자 장치(100)는 벤디드 디스플레이와 같은 형태를 비롯하여, 플렉서블 디스플레이(flexible display)와 같이 구부렸다가 폈다가를 자유자재로 할 수 있는 디스플레이 장치로 구현될 수도 있다. 다양한 실시 예들에서 디스플레이(131)는 액정 디스플레이(LCD, Liquid Crystal Display), 발광다이오드(LED, Light Emitting Diode) 디스플레이, 유기 발광 다이오드(OLED, Organic LED) 디스플레이, 능동형 OLED(AMOLED, Active Matrix OLED) 디스플레이, 또는 전자 종이(electronic paper) 등에서 액정을 싸고 있는 유리 기판을 플라스틱 필름으로 대체하여, 접고 펼 수 있는 유연성을 부여할 수 있다. 다양한 실시 예들에서 디스플레이(131)는 전자 장치(100)의 적어도 하나의 측면(side)(예: 좌측, 우측, 상측, 하측 중 적어도 하나의 면)까지 연장되어 체결될 수 있다.
터치감지부(133)는 디스플레이(131)에 안착될 수 있으며, 상기 터치스크린(130) 표면에 접촉 또는 근접하는 사용자 입력을 감지할 수 있다. 터치감지부(133)는 본 발명의 실시 예에서 전자 장치(100)의 사용과 관련된 동작을 개시하기 위한 사용자 입력을 수신할 수 있고, 사용자 입력에 따른 입력 신호를 발생할 수 있다. 상기 사용자 입력은 싱글터치(single-touch), 멀티터치(multi-touch), 호버링(hovering), 또는 에어 제스처 중 적어도 하나에 기반하여 입력되는 터치 이벤트 또는 근접 이벤트를 포함할 수 있다. 예를 들어, 상기 사용자 입력은 탭(tap), 드래그(drag), 스윕(sweep), 스와이프(swipe), 플릭(flick), 드래그앤드롭(drag & drop), 또는 드로잉 제스처(drawing gesture)(예: 필기) 등)의 방식으로 입력될 수 있다.
지문 센서(135)는 지문을 감지(또는 인식)하기 위한 지문 센싱부가 디스플레이(131)에 대응하는 일부 영역에 배치되거나, 다수의 영역 또는 전체 영역에 대응하는 위치에 구비될 수 있다. 지문 센서(135)는 광학식, 정전식, 또는 초음파식 중 어느 하나의 방식이 적용될 수 있다. 광학식은 감광 다이오드를 이용하여 손가락 표면의 지문의 이미지를 캡쳐하여 지문을 획득하는 방식일 수 있다. 정전식은 지문이 전극에 닿는 부분(마루)은 감지되고, 닿지 않는 부분(골)은 감지되지 않는 원리를 이용해 지문을 획득하는 방식일 수 있다. 초음파식은 피에조를 이용해 초음파를 생성하고, 지문의 골과 마루에 맞고 반사되는 초음파의 경로차를 이용하여 지문을 획득하는 방식일 수 있다. 다양한 실시예들에 따른 지문 센서(135)는 인 온 커버 글라스(in/on cover glass) 구조, 오버 디스플레이(over display) 구조, 언더 디스플레이(under display) 구조, 인 디스플레이(in display) 구조 중 어느 하나의 구조를 가질 수 있다.
예를 들어, 인 온 커버 글라스 구조는 지문 센싱을 위한 센싱부 또는 전극을 디스플레이(131)를 보호하기 위해 디스플레이(131) 위에 구비된 커버 글래스의 표면에 프린팅 또는 식각을 통해 배치되는 구조일 수 있다. 오버 디스플레이 구조는 지문 센싱을 위한 센싱부 또는 전극을 디스플레이(131) 위에 배치한 구조일 수 있다. 이러한 오버 디스플레이 구조는 인 온 커버 글라스 구조를 포함할 수 있다. 언더 디스플레이 구조는 지문 센싱을 위한 센싱부 또는 전극을 디스플레이(131) 아래에 배치한 구조일 수 있다. 인 디스플레이 구조는 지문 센싱을 위한 센싱부 또는 전극을 디스플레이(131)의 픽셀들 내부 또는 픽셀과 픽셀 사이의 블랙 매트릭스(black matrix) 영역에 배치한 구조일 수 있다.
오디오 처리부(140)는 제어부(180)로부터 입력 받은 오디오 신호를 스피커(SPK, speaker, 141)로 전송하고, 마이크(MIC, microphone, 143)로부터 입력 받은 음성 등의 오디오 신호를 제어부(180)에 전달하는 기능을 수행할 수 있다. 오디오 처리부(140)는 음성/음향 데이터를 제어부(180)의 제어에 따라 스피커(141)를 통해 가청음으로 변환하여 출력하고, 마이크(143)로부터 수신되는 음성 등의 오디오 신호를 디지털 신호로 변환하여 제어부(180)에게 전달할 수 있다. 오디오 처리부(140)는 데이터에 삽입된 오디오 처리 정보(예: 효과음, 음악 파일 등)에 따라 사용자 입력에 반응하는 오디오 신호를 출력할 수 있다.
스피커(141)는 무선 통신부(110)으로부터 수신되거나, 또는 메모리(150)에 저장된 오디오 데이터를 출력할 수 있다. 스피커(141)는 전자 장치(100)에서 수행되는 다양한 동작(기능)과 관련된 음향 신호를 출력할 수도 있다. 본 발명의 실시 예에서는 도시하지 않았지만, 스피커(141)는 탈부착 가능한(attachable and detachable) 이어폰(ear phone), 헤드폰(head phone) 또는 헤드셋(head set)이 외부 포트를 통해 전자 장치(100)에 연결될 수 있다.
마이크(143)는 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리할 수 있다. 마이크(143)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘(noise reduction algorithm)이 구현될 수 있다. 마이크(143)는 음성 명령(예: 음악 어플리케이션 동작을 개시하기 위한 음성 명령) 등과 같은 오디오 스트림의 입력을 담당할 수 있다. 마이크(143)는 전자 장치(100)에 실장되는 내장 마이크와 전자 장치에 연결되는 외장 마이크를 포함할 수 있다.
메모리(150)는 제어부(180)에 의해 실행되는 하나 또는 그 이상의 프로그램들(one or more programs)을 저장할 수 있고, 입/출력되는 데이터들의 임시 저장을 위한 기능을 수행할 수도 있다. 상기 입/출력되는 데이터들은 예를 들어, 동영상, 이미지, 사진, 오디오 등의 파일을 포함할 수 있다. 메모리(150)는 획득된 데이터를 저장하는 역할을 담당하며, 실시간으로 획득된 데이터는 일시적인 저장 장치에 저장할 수 있고, 저장하기로 확정된 데이터는 오래 보관 가능한 저장 장치에 저장할 수 있다.
다양한 실시 예들에서 메모리(150)는 실행 시에, 제어부(180)(예: 하나 또는 그 이상의 프로세서들)가, 전자 장치(100)의 디스플레이(131)에 표시될 적어도 하나의 객체를 포함하는 컨텐츠를 확인하는 동작, 상기 컨텐츠가 지문 정보의 획득과 관련되지 않는 경우, 상기 적어도 하나의 객체를 지정된 위치에 표시하는 동작, 및 상기 컨텐츠가 지문 정보의 획득과 관련된 경우, 상기 적어도 하나의 객체를 지문 센서(135)가 형성된 상기 적어도 일부 영역에 표시하는 동작을 실행하도록 하는 인스트럭션들(instructions)을 저장할 수 있다. 메모리(150)는 전자 장치(100)의 디스플레이(131)에 표시될 컨텐츠에 포함된 적어도 하나의 객체에 대한 지정된 위치를 프레임워크 상에 저장하고, 적어도 하나의 지문 정보, 적어도 하나의 사용자 정보(예: 웹 주소별 사용자 아이디 및 비밀번호) 또는 적어도 하나의 결제 정보(예: 계좌 번호, 카드 번호)를 저장할 수 있다.
메모리(150)는 제어부(180)에서 수행될 수 있는 다양한 인스트럭션(instruction)들을 저장할 수 있다. 이와 같은 인스트럭션들은 제어부(180)에 의해 인식될 수 있는 산술 및 논리 연산, 데이터 이동, 입출력 등의 제어 명령을 포함할 수 있으며, 메모리(150)에 저장된 프레임워크(framework) 상에서 정의될 수 있다. 다양한 실시예에 따르면, 메모리(150)는 지문 센서(135)와 관련된 다양한 화면 리소스들을 저장할 수 있다. 이와 같은 화면 리소스들은 프레임워크(framework) 상에 저장될 수 있다.
메모리(150)는 전자 장치(100)의 운영 체제(OS, operating system), 터치스크린(130)을 이용한 입력 및 디스플레이 제어와 관련된 프로그램, 전자 장치(100)의 다양한 동작(기능)들의 제어와 관련된 프로그램, 그리고 각 프로그램들의 동작에 의해 발생되는 다양한 데이터 등을 지속적으로 또는 일시적으로 저장할 수 있다.
메모리(150)는 확장 메모리(예: 외장 메모리) 또는 내부 메모리를 포함할 수 있다. 메모리(150)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 마이크로 타입(micro type), 및 카드 타입(예컨대, SD 카드(Secure Digital Card) 또는 XD 카드(eXtream Digital Card)) 등의 메모리와, DRAM(Dynamic Random Access Memory), SRAM(Static RAM), ROM(Read-Only Memory), PROM(Programmable ROM), EEPROM(Electrically Erasable PROM), 자기 메모리(MRAM, Magnetic RAM), 자기 디스크(magnetic disk), 및 광디스크(optical disk) 타입의 메모리 중 적어도 하나의 타입의 저장 매체(storage medium)를 포함할 수 있다. 전자 장치(100)는 인터넷 상에서 상기 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.
메모리(150)는 다양한 소프트웨어를 저장할 수 있다. 예를 들어, 소프트웨어 구성 요소는 운영 체제(operating system) 소프트웨어 모듈, 통신 소프트웨어 모듈, 그래픽 소프트웨어 모듈, 유저 인터페이스 소프트웨어 모듈, MPEG(Moving Picture Experts Group) 모듈 및 카메라 소프트웨어 모듈, 하나 이상의 어플리케이션 소프트웨어 모듈 등을 포함할 수 있다. 또한 소프트웨어 구성 요소인 모듈은 명령어들의 집합으로 표현할 수 있으므로, 모듈을 명령어 세트(instruction set)라고 표현하기도 한다. 모듈은 또한 프로그램으로 표현하기도 한다.
상기 운영 체제 소프트웨어 모듈은 일반적인 시스템 동작(system operation)을 제어하는 여러 가지의 소프트웨어 구성 요소를 포함할 수 있다. 이러한 일반적인 시스템 작동의 제어는, 예를 들면, 메모리 관리 및 제어, 전력 제어 및 관리 등을 의미할 수 있다. 또한 운영 체제 소프트웨어 모듈은 여러 가지의 하드웨어(장치)와 소프트웨어 구성 요소(모듈) 사이의 통신을 원활하게 하는 기능도 수행할 수 있다. 상기 통신 소프트웨어 모듈은 무선 통신부(110)을 통해 컴퓨터, 서버 또는 휴대용 단말기 등 다른 전자 장치와 통신을 가능하게 할 수 있다. 그리고, 통신 소프트웨어 모듈은 해당 통신 방식에 해당하는 프로토콜 구조로 구성될 수 있다.
상기 그래픽 소프트웨어 모듈은 터치스크린(130) 상에 그래픽을 제공하고 디스플레이 하기 위한 여러 가지 소프트웨어 구성 요소를 포함할 수 있다. 상기 그래픽(graphics)이란 용어는 텍스트(text), 웹 페이지(web page), 아이콘(icon), 디지털 이미지(digital image), 비디오(video), 애니메이션(animation) 등을 포함하는 의미로 사용될 수 있다. 상기 유저 인터페이스 소프트웨어 모듈은 유저 인터페이스(UI)에 관련한 여러 가지 소프트웨어 구성 요소를 포함할 수 있다. 예를 들어, 유저 인터페이스의 상태가 어떻게 변경되는지 또는 유저 인터페이스 상태의 변경이 어떤 조건에서 이루어지는지 등에 대한 내용을 포함할 수 있다.
상기 MPEG 모듈은 디지털 컨텐츠(예: 비디오, 오디오) 관련 프로세스 및 기능들(예: 컨텐츠의 생성, 재생, 배포 및 전송 등)을 가능하게 하는 소프트웨어 구성 요소를 포함할 수 있다. 상기 카메라 소프트웨어 모듈은 카메라 관련 프로세스 및 기능들을 가능하게 하는 카메라 관련 소프트웨어 구성 요소를 포함할 수 있다.
상기 어플리케이션 모듈은 렌더링 엔진(rendering engine)을 포함하는 웹브라우저(browser), 이메일(email), 즉석 메시지(instant message), 워드 프로세싱(word processing), 키보드 에뮬레이션(keyboard emulation), 어드레스 북(address book), 위젯(widget), 디지털 저작권 관리(DRM, digital right management), 홍채 인식(iris scan), 상황 인지(context cognition), 음성 인식(voice recognition), 위치 기반 서비스(location based service) 등을 포함할 수 있다.
인터페이스부(160)는 외부 다른 외부 전자 장치로부터 데이터를 전송 받거나, 전원을 공급받아 전자 장치(100) 내부의 각 구성들에 전달할 수 있다. 인터페이스부(160)는 전자 장치(100) 내부의 데이터가 다른 외부 전자 장치로 전송되도록 할 수 있다. 예를 들어, 유/무선 헤드폰 포트(port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 오디오 입/출력(Input/Output) 포트, 비디오 입/출력 포트, 이어폰 포트 등이 인터페이스부(160)에 포함될 수 있다.
카메라 모듈(170)은 전자 장치(100)의 촬영 기능을 지원하는 구성을 나타낸다. 카메라 모듈(170)은 제어부(180)의 제어에 따라 임의의 피사체를 촬영하고, 촬영된 데이터(예: 이미지)를 디스플레이(131) 및 제어부(180)에 전달할 수 있다. 카메라 모듈(170)은 하나 이상의 이미지 센서를 포함할 수 있다. 예를 들어, 카메라 모듈(170)은 전자 장치(100)의 전면(예: 디스플레이(131)와 동일한 평면) 상에 구비되는 전면 센서(예: 전면 카메라)와 전자 장치(100)의 후면(예: 배면) 상에 구비되는 후면 센서(예: 후면 카메라)를 포함할 수 있다.
제어부(180)는 전자 장치(100)의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(180)는 음악 플레이, 음악적 속성의 시각화 처리, 음성 통신, 데이터 통신, 화상 통신 등에 관련된 다양한 제어를 수행할 수 있다. 제어부(180)는 하나 또는 그 이상의 프로세서들(one or more processors)로 구현되거나, 또는 제어부(180)을 프로세서로 칭할 수도 있다. 예를 들어, 제어부(180)는 커뮤니케이션 프로세서(CP, communication processor), 어플리케이션 프로세서(AP, application processor), 인터페이스(예: GPIO(general purpose input/output)), 또는 내부 메모리 등을 별개의 구성 요소로 포함하거나, 또는 하나 이상의 집적화된 회로에 집적화될 수 있다. 상기 어플리케이션 프로세서는 여러 가지의 소프트웨어 프로그램을 실행하여 전자 장치(100)을 위한 여러 기능을 수행할 수 있고, 상기 커뮤니케이션 프로세서는 음성 통신 및 데이터 통신을 위한 처리 및 제어를 수행할 수 있다. 또한, 제어부(180)는 메모리(150)에 저장되어 있는 특정한 소프트웨어 모듈(명령어 세트(instruction set))을 실행하여 그 모듈에 대응하는 특정한 여러 가지의 기능을 수행하는 역할을 담당할 수 있다.
본 발명의 다양한 실시 예들에서, 제어부(180)는 전자 장치(100)의 디스플레이(131)에 표시될 적어도 하나의 객체를 포함하는 컨텐츠를 확인하고, 상기 컨텐츠가 지문 정보의 획득과 관련되지 않는 경우, 상기 적어도 하나의 객체를 지정된 위치에 표시하고, 및 상기 컨텐츠가 지문 정보의 획득과 관련된 경우, 상기 적어도 하나의 객체를 지문 센서(135)가 형성된 상기 적어도 일부 영역에 표시할 수 있다. 상기 제어부(180)의 본 발명의 다양한 실시 예들에 따른 제어 동작은 후술하는 도면들을 참조하여 설명된다.본 발명의 실시 예에 따른 제어부(180)는 상기의 기능 외에 전자 장치(100)의 통상적인 기능과 관련된 각종 동작을 제어할 수 있다. 예를 들어, 제어부(180)는 특정 어플리케이션 실행 시 그의 운영 및 화면 디스플레이를 제어할 수 있다. 또한 제어부(180)는 터치 기반 또는 근접 기반의 입력 인터페이스(예: 터치스크린(130))에서 지원하는 다양한 터치 이벤트 또는 근접 이벤트 입력에 대응하는 입력 신호를 수신하고 그에 따른 기능 운영을 제어할 수 있다. 또한 제어부(180)는 유선 통신 기반 또는 무선 통신 기반으로 각종 데이터의 송수신을 제어할 수도 있다.
전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가 받아 각 구성 요소들의 동작에 필요한 전원을 공급할 수 있다. 본 발명의 실시 예에서 전원 공급부(190)는 제어부(180)의 제어에 의해 디스플레이(131), 카메라 모듈(170) 등에 전원을 공급 또는 차단(on/off)할 수 있다.
본 발명에서 설명되는 다양한 실시 예들은 소프트웨어(software), 하드웨어(hardware) 또는 이들의 조합된 것을 이용하여 컴퓨터(computer) 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 하드웨어적인 구현에 의하면, 본 발명에서 설명되는 실시 예들은 ASICs(application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛(unit) 중 적어도 하나를 이용하여 구현될 수 있다.
그리고 일부의 경우에 본 명세서에서 설명되는 실시 예들이 제어부(180) 자체로 구현될 수 있다. 또한 소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수도 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 동작을 수행할 수 있다.
도 2a 내지 도 2d는 다양한 실시예들에 따른 지문 센서를 구비한 전자 장치의 계층 구조를 도시한 도면들이다.
도 2a는 지문 센서(250)를 구비하는 전자 장치(200)의 계층 구조를 도시한 것이다.
도 2a를 참고하면, 위쪽 방향은 전자 장치(200)의 전면 방향, 아래쪽 방향은 전자 장치(200)의 배면 방향일 수 있으며, 하우징(housing, 미도시) 내에 각각의 구성이 포함될 수 있다.
하우징의 전면에는 커버 윈도우(cover window, 210)가 형성될 수 있다. 투명 기판은 빛이 투과할 수 있도록 투명한 소재로 형성되며, 외부의 충격으로부터 디스플레이(240)를 보호하기 위해 형성될 수 있다.
커버 윈도우(210)의 하단에는 터치 센서(220) 및 디스플레이(240)가 형성되며, 커버 윈도우(210)와 디스플레이(240)(또는 터치 센서(220))는 OCA(optically clear adhesive, 230)로 서로 접착될 수 있다. 도 2a에서는 터치 센서(220)가 디스플레이(240)의 상단에 구비되는 것으로 도시 하였으나, 이에 한정되지 않으며, 온-셀(on-cell), 인-셀(in-cell), 레이어드(layred) 방식 등 다양한 방식으로 구현될 수 있다. 예를 들어, 인-셀 방식은 디스플레이 패널 또는 BM(Black Matrix) 영역에 지문 센서가 내장된 것이고, 레이어드 방식은 디스플레이 패널 상단 혹은 하단에 레이어드된 구조일 수 있다.
터치 센서(220)는 커버 윈도우(210) 상에 발생하는 오브젝트(예를 들어, 사용자의 손가락 또는 스타일러스)의 터치를 감지할 수 있다.
디스플레이(240)(또는 터치 센서(220))의 하단에는 지문 센서(250)가 구비될 수 있다. 지문 센서(250)는 커버 윈도우(210)의 상단에 사용자의 손가락이 위치하는 경우, 사용자의 지문 정보를 획득하도록 형성될 수 있다. 다양한 실시예에 따르면, 지문 센서(250)는 디스플레이(240) 및 터치 센서(220)의 배면의 일 영역에 형성되므로, 사용자가 지문을 인식하기 위해서는 디스플레이(240) 및 터치 센서(220)에 손가락을 터치해야 할 수 있다.
예를 들어, 지문 센서(250)는 지문 센싱을 위한 센싱부 또는 전극을 커버 글래스의 표면에 프린팅 또는 식각(etching)을 통해 배치한 구조인 인/온 커버 글래스 방식(in/on cover glass), 상기 센싱부 또는 전극을 디스플레이 패널 위에 배치한 오버 디스플레이 방식(over display), 상기 센싱부 또는 전극을 디스플레이 패널 아래에 배치한 언더 디스플레이 방식(under display), 상기 센싱부 또는 전극을 디스플레이 패널의 픽셀들 내부 또는 픽셀과 픽셀 사이의 BM(black matrix) 영역에 배치한 인 디스플레이(in display) 방식 등을 예로 들 수 있다.
또한, 아래 설명에 의해 지문 센서(250)의 종류가 한정되지 않는다. 예를 들어, 지문 센서(250)는 감광 다이오드 (photosensitive diode)를 이용하여 손가락 표면의 지문 이미지를 캡쳐하여 지문을 획득하는 광학식, 지문이 전극에 닿는 부분(마루)은 감지되고 닿지 않는 부분(골)은 감지되지 않는 원리를 이용해 지문을 획득하는 정전식, 피에조를 이용해 초음파를 생성하고 지문의 골과 마루에 맞고 반사되는 초음파의 경로 차를 이용해 지문을 획득하는 초음파식 등을 예로 들 수 있다.
이하에서는, 광학식 지문 센서가 디스플레이(240) 및 터치 센서(220) 아래에 배치된 경우(언더 디스플레이)를 대표로 하여 설명하나, 상기 설명한 다양한 실시예들이 본 발명에 적용될 수 있다.
도 2b는 본 발명의 다양한 실시 예들에 따른 도 1의 전자 장치(100)의 디스플레이(131)에 위치한 지문 센서(135)의 예를 도시한다
도시된 바와 같이, 터치 센서는 디스플레이(240)의 배면에 형성되어, 사용자에게 시각적으로 인지되지 않을 수 있다. 이 경우, 커버 윈도우, OCA, 터치 센서 및 디스플레이(240)의 적어도 일 영역은 소정 이상의 빛이 투과할 수 있도록 투명 또는 반투명한 영역을 포함하며, 터치 센서는 해당 투명 또는 반투명 영역의 배면에 배치되어 사용자의 지문 이미지를 획득할 수 있다. 한 실시예에 따르면, 전자 장치(200)는 디스플레이(240)의 적어도 일 영역에 소정 이상의 빛이 투과 할 수 있도록 픽셀과 픽셀 사이에 홀을 형성 할 수 있다. 일 실시예에 따르면, 디스플레이(240)의 지문 센싱 영역(251) 상에는 지문 인식 기능과 관련된 사용자 인터페이스가 표시될 수 있다.
다양한 실시예에 따르면, 지문 센싱 영역(251)의 크기 및/또는 위치는 한정되지 않는다. 예를 들어, 전자 장치(200)는 도 2c와 같이 보다 큰 크기의 지문 센싱 영역(450c)을 구비할 수 있다. 또한, 다른 실시예에 따르면, 전자 장치(200)는 도 2d와 같이 2개 이상의 지문 센서를 구비하고, 각 지문 센서에 대응하는 지문 센싱 영역(251d, 252d)이 디스플레이(240) 상에 형성될 수 있다.
이와 같이, 전자 장치(200) 상에 구비되는 지문 센서의 종류, 위치, 개수, 크기, 밀도 등은 다양할 수 있으며, 전자 장치(200)는 상기 지문 센서와 관련된 정보들을 저장 및 관리할 수 있다. 예를 들어, 지문 센서의 종류는 센싱 방식에 따라 광학식, 정전식, 초음파식 등으로 구분되고, 입력 방식에 따라 터치, 스윕 방식 등으로 구분될 수 있으며, 전자 장치(200)는 상기 예시 중 전자 장치(200)에 구비된 지문 센서의 종류에 대한 정보를 저장할 수 있다. 지문 센서의 위치는 좌표 값(예를 들어, 디스플레이 상에서의 x축, y축의 좌표 값), 기구적 위치 값(예를 들어, 전/후/좌/우/상/하 등), 컴포넌트에 대응하는 위치 값(예를 들어, 홈 키, 메뉴 키, 카메라 등) 등으로 정의될 수 있으며, 크기는 가로 및 세로의 길이로 정의될 수 있으며, 밀도(또는 dpi)는 하/중/상/최상 등으로 구분되어 정의될 수 있다.
다양한 실시예에 따르면, 전자 장치(200)는 디스플레이(240)의 배면에 적어도 하나의 지문 센서를 구비할 수 있다. 이와 같이, 디스플레이(240)에 통합된 지문 센서(display integrated fingerprint)는 소형의 휴대용 전자 장치부터 대형의 TV에 이르기 까지 다양한 크기의 화면 및 다양한 크기/밀도의 지문 센서로 지원 될 수 있다. 또한, 지문 센서(250)는 전자 장치(200)의 디스플레이(240) 상에서 다양한 위치에 구비될 수 있다. 또한, 지문 센서(250)는 지문을 획득하기 위한 센싱 방식이 다양할 수 있다. 따라서, 지문 인식 기능을 사용하는 어플리케이션이 다양한 종류의 전자 장치(200)에서 실행될 수 있기 위해서는, 다양한 화면의 크기 및 지문 센서의 종류, 위치, 크기, 밀도와 호환되어 최대한 제공하고자 하는 서비스를 화면 상의 정확한 위치에 제공할 수 있어야 한다. 또한, 단순히 디스플레이(210)의 크기와 방향만을 고려하는 종래의 UI(user interface)/UX(user experience)가 효율적으로 제공되기 위해서는 지문 센서의 종류, 위치, 크기, 밀도 등에 대응하는 리소스를 저장하고 관리하는 방법이 필요하다. 또한, 전자 장치(200)에 구비된 지문 센서의 종류, 위치, 크기, 밀도 정보에 기반하여 리소스로부터 이에 적합한 이미지 세트를 선택하고, 적절한 레이아웃에 이미지 세트를 그려주는 그래픽 처리가 필요할 수 있다.
도 2e는 다양한 실시예들에 따른 전자 장치의 아키텍처를 도시한 도면이다.
도 2e를 참조하면, 전자 장치(100)의 아키텍처는 서비스(260), 어플리케이션(270), 프레임워크(280)를 포함하는 소프트웨어와 하드웨어(290)로 구성될 수 있다. 서비스(260)는 어플리케이션(270)에서 제공하는 다양한 서비스(또는 기능)를 예를 들어, 웹서비스(261)를 제공할 수 있다. 어플리케이션(270)은 전자 장치(100)에 설치된 어플리케이션 프로그램을 의미할 수 있다. 예를 들어, 어플리케이션(270)은 홈, 다이얼러, SMS/MMS, IM(instant message), 브라우저, 카메라, 알람, 연락처, 음성 다이얼, 이메일, 달력, 미디어 플레이어, 앨범, 시계, 헬스 케어(예: 운동량 또는 혈당 등을 측정), 또는 환경 정보(예: 기압, 습도, 또는 온도 정보) 제공 어플리케이션을 포함할 수 있다. 또한, 어플리케이션(270)은 지문 등록(271) 또는 지문 인증(273)과 연관된 어플리케이션을 포함할 수 있다.
프레임워크(280)는 어플리케이션(220)의 구체적인 기능을 사용자 작성 코드에 의해 구현된 것으로 소프트웨어 플랫폼을 의미할 수 있다. 프레임워크(280)는 어플리케이션(270)와 연관된 사용자 인터페이스 및 사용자 경험(281)을 제공할 수 있다. 하드웨어(290)는 전자 장치(100)에 포함된 전자 부품과 기계부품을 포함할 수 있다. 예를 들어, 하드웨어(290)는 터치(291), 디스플레이(293) 및 DIF(display intergrated fingerprint, 295)를 포함할 수 있다. 또한, 하드웨어(290)는 프로세서, 통신 모듈, 카메라 모듈, 사용자 입력부, 메모리 등과 같은 구성요소를 더 포함할 수 있다.
도 3은 다양한 실시예들에 따른 전자 장치의 프로세서 구성을 도시한 도면이다.
도 3을 참조하면, 전자 장치(예: 전자 장치(100))는 프로세서(310) 및 디스플레이(320)를 포함할 수 있다. 프로세서(310)는 도 1의 제어부(180)에 포함될 수 있다. 프로세서(310)는 객체 식별 모듈(311), 디스플레이 구성 모듈(313) 및 인증 모듈(315)을 포함할 수 있다. 디스플레이(320)는 지문 센서(321)를 포함할 수 있다. 디스플레이(320)는 도 1의 터치스크린(131) 또는 디스플레이(131)일 수 있다.
객체 식별 모듈(311)은 디스플레이(320)를 통해 표시되는 객체(또는 UI(user interface) 컴포넌트)들 중에서 지문 정보의 획득과 관련된 적어도 하나의 객체가 포함되어 있는지 판단할 수 있다. 예를 들어, 디스플레이(320)에 컨텐츠를 표시하는 경우, 컨텐츠를 구성하는 객체들 중에서 사용자 인증을 필요로 하는 객체(예: 결제, 로그인 등)가 포함되어 있는지 판단할 수 있다. 디스플레이 구성 모듈(313)은 사용자 인증을 위한 객체가 포함되어 있는 경우 지문 센서(321)를 이용하여 지문 센서(321)가 배치된(또는 내장된) 위치에 사용자 인증을 위한 객체가 표시되도록 상기 페이지를 구성할 수 있다. 지문 센서(321)는 디스플레이(320)의 일부 또는 전체에 포함될 수 있다. 지문 센서(321)가 디스플레이(320)의 일부에 배치되어 있는 경우, 디스플레이 구성 모듈(313)은 페이지 내 사용자 인증을 위한 객체를 지문 센서(321)가 배치된 위치로 이동시킬 수 있다. 디스플레이(320)는 구성된 페이지를 표시할 수 있다. 인증 모듈(315)은 사용자 인증을 위한 객체 상에 사용자 입력을 검출하고, 검출된 사용자 입력으로부터 지문 센서(321)를 이용하여 지문 정보를 획득할 수 있다. 인증 모듈(315)은 획득한 지문 정보를 이용하여 사용자 인증을 수행할 수 있다.
다양한 실시예에 따르면, 프로세서(310)는 컨텐츠과 관련된 화면 리소스 정보를 획득할 수 있다. 일 실시예에 따르면, 상기 컨텐츠는 어플리케이션의 실행 화면일 수 있다. 상기 어플리케이션은 전자 장치(100)의 제조사가 아닌 제3자(3rd party)에 의해 제작된 어플리케이션으로써, 지문 인식 기능과 관련된 사용자 인터페이스의 생성에 필요한 헤더, 라이브러리, 기타 도구들을 포함하는 SDK(software development kit)를 포함할 수 있다.
여기서, 화면 리소스 정보는 지문 인식 기능과 관련된 사용자 인터페이스를 구성하는 이미지, 애니메이션, 메뉴, 레이아웃 등의 리소스를 포함할 수 있다. 일 실시예에 따르면, 화면 리소스 정보는 프레임워크 상에 저장되며, 어플리케이션의 호출에 따라 프로세서(310)는 어플리케이션에서 요구하는 화면 리소스 정보를 사용하여 사용자 인터페이스를 구성할 수 있다. 다른 일 실시예에 따르면, 화면 리소스 정보는 어플리케이션 상에 저장되며, 어플리케이션은 설치 및 실행 된 전자 장치(100)의 속성을 참고 하여 적절한 화면 리소스 정보를 사용하여 사용자 인터페이스를 생성할 수 있다.
일 실시예에 따르면, 전자 장치(100)는 어플리케이션의 속성에 기초하여, 지문 센서(321)와 관련된 사용자 인터페이스를 프로세서(310)에서 제공하는 사용자 인터페이스를 사용할 지 결정할 수 있다. 다시 말하면, 전자 장치(100)는 어플리케이션의 속성이 프로세서(310)에서 제공하는 사용자 인터페이스를 사용하도록 결정된 어플리케이션인 경우 앞서 설명한 바와 같이 프레임워크의 화면 리소스 정보로부터 프로세서(310)가 사용자 인터페이스를 생성하며, 어플리케이션 레벨에서 직접 사용자 인터페이스를 생성하도록 결정된 어플리케이션인 경우 어플리케이션 상에 정의된 화면 리소스 정보들을 사용하여 사용자 인터페이스를 생성할 수 있다. 일 실시예에 따르면, 메모리(150) 상에는 어플리케이션 자체 적으로 지문 인식 기능과 관련된 화면 리소스 정보를 사용하여 사용자 인터페이스를 생성할 수 있는 어플리케이션들에 대한 화이트 리스트가 저장될 수 있다.
다양한 실시예들에 따른 전자 장치는 디스플레이, 상기 디스플레이의 표시 영역의 적어도 일부 영역에 형성된 지문 센서, 및 프로세서를 포함하고, 상기 프로세서는, 상기 디스플레이에 표시될 적어도 하나의 객체를 포함하는 컨텐츠를 확인하고, 상기 컨텐츠가 지문 정보의 획득과 관련되지 않는 경우, 상기 적어도 하나의 객체를 지정된 위치에 표시하고, 및 상기 컨텐츠가 지문 정보의 획득과 관련된 경우, 상기 적어도 하나의 객체를 상기 지문 센서가 형성된 상기 적어도 일부 영역에 표시하도록 설정될 수 있다.
상기 프로세서는, 상기 컨텐츠 내 지정된 위치에서 상기 적어도 하나의 객체를 삭제하고, 상기 지문 센서가 형성된 위치로 상기 적어도 하나의 객체의 위치를 이동하도록 설정될 수 있다.
상기 프로세서는, 상기 지문 센서의 속성 정보에 기반하여 상기 적어도 하나의 객체의 속성을 변경하도록 설정될 수 있다.
상기 프로세서는, 상기 지문 센서가 형성된 위치에 표시된 상기 적어도 하나의 객체 상에 사용자 입력을 검출하고, 상기 사용자 입력에 기반하여 상기 지문 센서를 이용하여 지문을 인식하도록 설정될 수 있다.
상기 프로세서는, 지문 인증이 완료되면, 상기 적어도 하나의 객체와 연관된 기능을 수행하도록 설정될 수 있다.
상기 전자 장치는 상기 적어도 하나의 객체에 대한 지정된 위치를 프레임워크 상에 저장하고, 적어도 하나의 지문 정보, 적어도 하나의 사용자 정보 또는 적어도 하나의 결제 정보 중 적어도 하나를 저장하는 메모리를 더 포함할 수 있다.
상기 프로세서는, 사용자로부터 획득한 지문이 상기 메모리에 저장된 지문 정보와 일치하는지 여부를 판단하고, 일치하는 경우 상기 적어도 하나의 객체에 기반하여 상기 사용자 정보 또는 상기 결제 정보를 상기 전자 장치에 대한 외부 전자 장치로 전송하도록 설정될 수 있다.
상기 지문 센서는, 상기 디스플레이의 일부 영역, 다수의 영역 또는 전체 영역 중 적어도 하나에 포함되도록 설정될 수 있다.
상기 디스플레이는, 상기 전자 장치의 전면 및 후면에 각각 배치되고, 서로 다른 지문 인식율을 갖는 지문 센서가 상기 전자 장치의 전면 및 후면에 각각 배치되도록 설정될 수 있다.
상기 프로세서는, 상기 적어도 하나의 객체의 보안 레벨에 기반하여 지문 인식에 이용할 지문 센서를 선택하도록 설정될 수 있다.
상기 프로세서는, 지문 인증 후 일정 시간 동안 사용자 인증 상태를 유지하도록 설정될 수 있다.
상기 프로세서는, 지속적인 사용자 입력이 검출되는 동안, 상기 사용자 입력에 기반하여 지문 데이터를 획득하고, 획득한 지문 데이터가 등록된 지문과 일치하는지 여부에 따라 지문 인증을 수행하도록 설정될 수 있다.
상기 프로세서는, 제1 어플리케이션 내 인증된 지문 정보를 이용하여 제2 어플리케이션 내 사용자 인증을 수행하도록 설정될 수 있다.
상기 프로세서는, 멀티 윈도우 내 제1 윈도우에서 인증된 지문 정보를 이용하여 제2 윈도우 내 사용자 인증을 수행하도록 설정될 수 있다.
다양한 실시예들에 따른 전자 장치는 디스플레이, 지문 센서, 및 상기 디스플레이 또는 상기 메모리와 기능적으로 연결된 프로세서를 포함하고, 상기 프로세서는, 컨텐츠 내 객체를 식별하고, 상기 식별된 객체 중에서 사용자 인증을 위한 객체가 존재하는지 판단하고, 상기 컨텐츠에 사용자 인증을 위한 객체가 포함된 경우, 상기 지문 센서의 위치로 상기 사용자 인증을 위한 객체의 위치를 이동시켜 표시하도록 설정될 수 있다.
다양한 실시예들에 따른 전자 장치는 디스플레이, 지문 센서, 및 프로세서를 포함하고, 상기 프로세서는 상기 디스플레이를 통해 표시될 화면을 구성하는 적어도 하나의 객체들을 확인하고, 상기 적어도 하나의 객체들 중 하나의 객체가 사용자 인증을 위한 객체인지 판단하고, 상기 하나의 객체가 상기 사용자 인증을 위한 객체가 아닌 경우, 상기 하나의 객체를 제1 지정된 위치에 표시하고, 및 상기 하나의 객체가 상기 사용자 인증을 위한 객체인 경우, 상기 하나의 객체에 대응하는 다른 객체를 제2 지정된 위치에 표시하도록 설정될 수 있다.
도 4a는 다양한 실시예들에 따른 전자 장치의 동작 방법을 도시한 흐름도이다.
도 4a를 참조하면, 동작(451)에서, 전자 장치(100)(예: 객체 식별 모듈(311))는 디스플레이(320)에 표시될 적어도 하나의 객체를 포함하는 컨텐츠를 확인할 수 있다. 상기 컨텐츠는 디스플레이(320)에 표시되는 사용자 인터페이스 또는 사용자 경험을 의미할 수 있다. 예를 들어, 상기 컨텐츠는 텍스트, 이미지 또는 비디오 중 적어도 하나로 구성된 페이지(예: 어플리케이션의 실행 화면)일 수 있다.
동작(453)에서, 전자 장치(100)(예: 객체 식별 모듈(311))는 상기 컨텐츠가 지문 정보의 획득과 관련있는지 여부를 판단할 수 있다. 상기 컨텐츠는 사용자 인터페이스를 의미하는 것으로, 적어도 하나 객체(예: UI 컴포넌트)로 구성될 수 있다. 예를 들어, 상기 적어도 객체는 URL(uniform resource locator), 버튼(또는 키), 입력 항목을 포함하는 것으로, 사용자에 의해 선택 가능한 것일 수 있다. 또한 상기 컨텐츠에는 사용자가 선택하더라도 아무런 반응이 없는(예: 선택 불가능한 객체) 객체가 더 포함될 수도 있다.
전자 장치(100)는 상기 컨텐츠가 지문 정보의 획득과 관련있는 경우 동작(455)을 수행하고, 상기 컨텐츠가 지문 정보의 획득과 관련 없는 경우 동작(457)을 수행할 수 있다.
동작(455)에서, 전자 장치(100)(예: 디스플레이 구성 모듈(313))는 상기 적어도 하나의 객체를 지문 센서(예: 지문 센서(321))가 형성된 적어도 일부 영역에 표시하도록 제어할 수 있다. 예를 들어, 디스플레이 구성 모듈(313)은 사용자 인증이 요구되는 객체가 지문 센서(321)가 배치된(또는 내장된) 위치에 표시되도록 상기 컨텐츠를 구성할 수 있다. 디스플레이 구성 모듈(313)은 상기 적어도 하나의 객체에 대응하는 다른 객체가 제2 지정된 위치(예: 지문 센서(321)가 배치된 위치)에 표시되도록 구성할 수 있다. 디스플레이(320)는 디스플레이 구성 모듈(313)에 의해 구성된 컨텐츠를 표시할 수 있다.
동작(457)에서, 전자 장치(100)(예: 디스플레이 구성 모듈(313))는 상기 적어도 하나의 객체를 지정된 위치에 표시하도록 제어할 수 있다. 예를 들어, 상기 지정된 위치는 메모리(예: 150))에 저장된 프레임워크에서 지정될 수 있다. 디스플레이 구성 모듈(313)은 상기 하나의 객체가 제1 지정된 위치(예: 컨텐츠 내 객체가 표시될 원래 위치)에 표시되도록 구성할 수 있다. 디스플레이(320)는 지정된 위치에 상기 적어도 하나의 객체를 표시할 수 있다.
도 4b는 다양한 실시예들에 따른 전자 장치의 동작 방법을 도시한 흐름도이다.
도 4b를 참조하면, 동작(401)에서, 전자 장치(100)(예: 디스플레이(320))는 컨텐츠를 표시할 수 있다. 상기 컨텐츠는 디스플레이(320)에 표시되는 사용자 인터페이스 또는 사용자 경험을 의미할 수 있다. 예를 들어, 상기 컨텐츠는 문자, 전화, 웹, 게임, 결제와 연관된 어플리케이션의 실행 화면일 수 있다.
동작(403)에서, 전자 장치(100)(예: 객체 식별 모듈(311))는 상기 컨텐츠 내 객체를 식별할 수 있다. 상기 객체는 상기 컨텐츠를 구성하는 텍스트, 이미지, 비디오 등의 데이터를 의미할 수 있다. 상기 객체는 사용자 인터페이스를 구성하는 것으로 UI 컴포넌트라고 할 수도 있다. 예를 들어, 상기 객체는 URL(uniform resource locator), 버튼(또는 키), 입력 항목을 포함하는 것으로, 사용자에 의해 선택 가능한 것일 수 있다. 또한 상기 컨텐츠에는 사용자가 선택하더라도 아무런 반응이 없는(예: 선택 불가능한 객체) 객체가 더 포함될 수도 있다.
동작(405)에서, 전자 장치(100)(예: 객체 식별 모듈(311))는 상기 식별된 객체에서 사용자 인증을 위한 객체가 존재하는지 판단할 수 있다. 예를 들어, 상기 사용자 인증을 위한 객체는 계정 등록(예: 회원 가입) 서비스, 로그인 서비스, 결제 서비스, 또는 금융 서비스와 같이 사용자가 누구인지 식별한 후 이후 동작이 수행되는 객체를 의미할 수 있다. 예를 들어, 사용자가 온라인 상에 글을 등록하기 위해서는 사용자 아이디와 비밀번호를 입력하는 등의 사용자 정보를 확인한 후, 사용자 정보가 올바른 경우(예: 로그인 완료)에만 글을 등록할 수 있다. 또는, 사용자가 온라인 상에서 상품을 구매하는 경우, 상품을 구매할 사용자 정보와 함께 상품을 결제할 결제 정보(예: 계좌번호, 카드번호 등)를 함께 입력해야 한다. 상기 사용자 인증을 위한 객체는 사용자 정보가 요구되는 객체를 의미할 수 있다.
동작(407)에서, 전자 장치(100)(예:디스플레이 구성 모듈(313))는 지문 센서의 위치를 식별할 수 있다. 상기 지문 센서(예: 지문 센서(321))는 지문을 감지(또는 인식)하기 위한 지문 센싱부가 디스플레이(320)에 대응하는 일부 영역에 배치되거나, 다수의 영역 또는 전체 영역에 대응하는 위치에 구비될 수 있다. 일반적으로, 지문 센서는 전자 장치(100)의 홈 버튼에 구비되고 있는데, 지문 센서(321)는 디스플레이(320)의 표시 영역에 배치될 수 있다. 지문 센서(321)가 디스플레이(320)의 표시 영역에 배치되더라도 홈 버튼에 구비되었던 것을 고려하여 지문 센서(321)는 디스플레이(320)의 하단 중앙에 배치될 수 있다. 예를 들어, 지문 센서(321)는 디스플레이(320)의 상, 하, 좌, 우 등의 일부 영역에 배치되거나, 다수개의 지문 센서가 다수의 영역에 각각 배치되거나, 디스플레이(320)의 전체 영역에 지문 센서가 배치될 수도 있다. 이하에서는 지문 센서가 디스플레이(320)의 하단 중앙에 배치되는 것으로 설명하지만, 지문 센서의 위치가 설명에 의해 제한되는 것은 아니다.
동작(409)에서, 전자 장치(100)(예: 디스플레이 구성 모듈(313))는 지문 센서(321)의 위치로 사용자 인증을 위한 객체의 위치를 이동시킬 수 있다. 예를 들어, 지문 센서(321)의 위치는 디스플레이(320)의 하단 중앙이고, 상기 사용자 인증을 위한 객체는 디스플레이(320)의 상단 오른쪽에 배치되어 있을 수 있다. 디스플레이 구성 모듈(313)은 상기 사용자 인증을 위한 객체를 상단 오른쪽에서 하단 중앙으로 이동시킬 수 있다.
다양한 실시예들에 따른 디스플레이 구성 모듈(313)은 상기 사용자 인증을 위한 객체의 위치 이동 시, 원래의 사용자 인증을 위한 객체를 삭제할 수 있다. 또는, 디스플레이 구성 모듈(313)은 상기 사용자 인증을 위한 객체의 위치 이동 시, 원래의 사용자 인증을 위한 객체를 삭제하지 않고 유지시킬 수 있다.
다양한 실시예들에 따른 디스플레이 구성 모듈(313)은 상기 지문 센서의 속성 정보에 기반하여 상기 사용자 인증을 위한 객체의 속성을 변경할 수 있다. 예를 들어, 상기 지문 센서의 속성 정보는 상기 지문 센서의 크기, 위치, 모양 또는 밀도 중 적어도 하나를 포함할 수 있다. 디스플레이 구성 모듈(313)은 지문 센서(321)의 속성 정보를 이용하여 상기 사용자 인증을 위한 객체의 크기, 위치, 모양 또는 색상 중 적어도 하나를 변경할 수 있다.
동작(411)에서, 전자 장치(100)(예: 디스플레이(320))는 위치가 이동된 객체를 표시할 수 있다. 예를 들어, 디스플레이(320)은 디스플레이 구성 모듈(313)에 의해 컨텐츠 내 사용자 인증을 위한 객체가 지문 센서의 위치로 이동시킨 변경된 컨텐츠를 표시할 수 있다. 동작(401)에서 표시된 컨텐츠는 원본 컨텐츠이고, 동작(411)에서 표시되는 컨텐츠는 변경된 컨텐츠일 수 있다. 즉, 변경된 컨텐츠는 원본 컨텐츠에서 객체 위치가 이동된 컨텐츠일 수 있다.
다양한 실시예들에 따르면, 지문 센서(321)는 사용자로부터 동작(411)에서 표시된 컨텐츠에 사용자 인증을 위한 객체가 선택되는 사용자 입력에 기반하여 지문을 인식할 수 있다. 사용자는 사용자 인증을 위한 객체에 사용자 입력(예: 터치 입력)을 가할 수 있다. 지문 센서(321)는 사용자가 상기 표시된 객체를 누를 때 지문을 획득할 수 있다. 인증 모듈(315)은 획득한 지문이 메모리(150)에 등록된(또는 저장된) 지문과 일치하는지 판단할 수 있다. 인증 모듈(315)은 지문이 일치하는 경우, 메모리(150)에 저장된 사용자 정보를 이용하여 사용자 인증을 수행할 수 있다.
다양한 실시예들에 따르면, 메모리(150)는 적어도 하나의 지문 정보, 적어도 하나의 사용자 정보, 및 적어도 하나의 결제 정보를 저장할 수 있다. 상기 사용자 정보는 웹 주소별 사용자 아이디 및 비밀번호를 포함할 수 있다. 예를 들어, 사용자의 입력에 의해 'A'라는 웹 주소의 사용자 아이디 및 비밀번호와 'B'라는 웹 주소의 사용자 아이디 및 비밀번호가 사용자 정보로서 메모리에(150)에 저장될 수 있다. 상기 결제 정보는 은행 별 계좌번호, 입금자 이름 또는 비밀번호 중 적어도 하나를 포함할 수 있다. 상기 결제 정보는 카드 별 카드번호, 유효기간 또는 비밀번호 중 적어도 하나를 포함할 수 있다.
프로세서(310)는 동작(405)에서 검출된 사용자 인증을 위한 객체가 로그인과 연관된 경우, 로그인한 웹 주소의 사용자 정보를 메모리(150)로부터 추출하고, 추출된 사용자 정보를 외부 전자 장치(예: POS 장치 또는 웹 서버)로 전송할 수 있다. 다양한 실시예들에 따르면, 사용자가 로그인에 필요한 사용자 아이디 및 비밀번호를 직접 입력하지 않고도, 로그인 버튼을 누르는 사용자 입력 만으로 지문 인식을 통해 메모리(150)에 저장된 사용자 정보를 이용하여 로그인할 수 있다. 프로세서(310)는 동작(405)에서 검출된 사용자 인증을 위한 객체가 결제와 연관된 경우, 결제할 결제 정보를 메모리(150)로부터 추출하고, 추출된 결제 정보를 외부 전자 장치(예: POS 장치 또는 웹 서버)로 전송할 수 있다. 다양한 실시예들에 따르면, 사용자가 결제에 필요한 카드 번호, 유효 기간, 또는 비밀번호를 직접 입력하지 않고도, 결제 버튼을 누르는 사용자 입력 만으로 지문 인식을 통해 메모리(150)에 저장된 결제 정보를 이용하여 결제할 수 있다.
다양한 실시예들에 따르면, 원본 컨텐츠를 표시(예: 동작(401))한 후 객체를 이동시킨 변경된 컨텐츠(예: 동작(411))를 표시하는 것으로 설명하였지만, 원본 컨텐츠를 표시하기 전에 객체를 이동시켜 변경된 컨텐츠를 표시할 수도 있다. 즉, 동작(401)은 생략 가능할 수 있다.
도 5a 및 도 5b는 다양한 실시예들에 따른 사용자 인터페이스를 표시하는 일례를 도시한 도면들이다.
도 5a는 로그인과 연관된 사용자 인터페이스를 변경하여 표시하는 일례를 도시한 것이다.
도 5a를 참조하면, 전자 장치(100)(예: 제어부(180))는 소셜 네트워크 서비스와 연관된 페이지(510)를 표시할 수 있다. 페이지(510)는 소셜 네트워크 서비스와 연관된 사용자 인터페이스의 화면일 수 있다. 사용자는 페이지(510) 내 특정 객체(예: 댓글 작성 버튼(511))를 선택함으로써, 자신의 글을 등록할 수 있다. 글을 등록하기 위해서는 사용자 아이디 및 비밀번호를 입력하는 로그인 프로세스가 필요할 수 있다. 일반적으로, 페이지(510)에서 댓글 작성 버튼(511)을 선택한 경우, 제어부(180)는 로그인 페이지(520)를 표시할 수 있다.
로그인 페이지(520)는 사용자 이름(또는 아이디) 입력 항목(521), 비밀번호 입력 항목(523) 및 로그인 버튼(525)을 포함할 수 있다. 사용자는 사용자 이름 입력 항목(521)에 커서를 위치시켜 사용자 이름을 입력하고, 비밀번호 입력 항목(523)에 커서를 위치시켜 비밀번호를 입력하고, 사용자 이름과 비밀번호 입력이 완료되면 로그인 버튼(525)을 선택할 수 있다. 제어부(180)는 사용자 이름 입력 항목(521)을 사용자가 선택하면, 커서를 위치시키고 키패드를 제공할 수 있다. 제어부(180)는 비밀번호 입력 항목(523)을 사용자가 선택하면, 커서를 위치시키고 키패드를 제공할 수 있다. 즉, 사용자는 사용자 정보(예: 사용자 이름 및 비밀번호)를 입력하기 위하여 여러 번 선택 및 입력이 필요하다.
다양한 실시예들에 따른 전자 장치(100)(예: 제어부(180))는 페이지(510)의 리소스 정보를 이용하여 페이지(510)내 사용자 인증을 위한 객체(예: 댓글 작성 버튼(511))가 포함되어 있는 경우, 댓글 작성 버튼(511)을 지문 센서의 위치로 이동시킨 페이지(530)를 표시할 수 있다. 이하에서는 설명의 편의를 위해 페이지(510)를 원본 페이지(510)라 하고, 페이지(530)를 변경된 페이지(530)라 할 수 있다. 변경된 페이지(530)는 원본 페이지(510)와 유사하고, 사용자 인증을 위한 객체의 위치만 변경된 것일 수 있다. 제어부(180))는 변경된 페이지(530) 내 댓글 작성 버튼(531)을 선택하는 사용자 입력을 검출하고, 사용자 입력에 기반하여 지문 인증을 수행하여 지문 인증 성공 시 댓글 작성 버튼(531)에 해당하는 기능을 수행할 수 있다.
예를 들어, 제어부(180)는 상기 사용자 입력에 기반하여 지문을 획득하고, 획득한 지문이 등록된 지문과 일치하는지 여부(예: 지문 인식)를 판단할 수 있다. 제어부(180)는 획득한 지문이 등록된 지문과 일치하는 경우, 로그인에 필요한 사용자 정보를 메모리(150)로부터 추출하고, 추출된 사용자 정보를 소셜 네트워크 서비스와 연관된 웹 서버로 전송할 수 있다. 상기 웹 서버는 상기 사용자 정보를 수신하고, 수신된 사용자 정보가 상기 웹 서버에 저장된 사용자 정보와 일치하는 경우 로그인을 허용할 수 있다. 따라서, 상기 사용자는 로그인에 필요한 사용자 아이디 및 비밀번호를 직접 입력하지 않고도, 상기 전송된 사용자 정보에 의해 소셜 네트워크 서비스에 로그인할 수 있다. 로그인이 완료되면, 제어부(180)는 상기 웹 서버로부터 글 작성을 위한 페이지를 수신하여 표시할 수 있다.
종래에는 사용자가 원본 페이지(510)에서 댓글 작성 버튼(511)을 선택한 경우, 로그인 페이지(520)를 제공하고, 로그인 페이지(520) 내 입력한 사용자 정보가 올바른 경우에만 글 작성을 위한 페이지를 제공할 수 있다. 본 발명의 한 실시예에 따르면, 지문 인식을 통해 로그인 페이지(520)를 표시하지 않고, 원본 페이지(510) 또는 변경된 페이지(530)에서 바로 글 작성을 위한 페이지를 표시할 수 있다.
도 5b는 결제와 연관된 사용자 인터페이스를 변경하여 표시하는 일례를 도시한 것이다.
도 5b를 참조하면, 전자 장치(100)(예: 제어부(180))는 상품 구매와 연관된 페이지(550)를 표시할 수 있다. 페이지(550)는 상품 정보(551) 또는 결제 버튼(553)으로 구성된 상품 구매 페이지와 연관된 사용자 인터페이스의 화면일 수 있다. 또한, 제어부(180)는 페이지(550) 내 지문 센서의 위치(555)를 표시할 수도 있다. 사용자는 페이지(550) 내 결제 버튼(553)을 선택함으로써, 상품을 구매할 수 있다. 상품을 구매하기 위해서는 로그인 프로세스 또는 결제 프로세스가 필요할 수 있다. 일반적으로, 페이지(550)에서 결제 버튼(553)을 선택한 경우, 제어부(180)는 로그인 페이지(예: 로그인 페이지(520)) 또는 결제 페이지를 표시할 수 있다. 로그인 상태에서 결제 버튼(553)을 선택한 경우, 카드 번호, 유효 기간, 비밀 번호를 입력하는 결제 페이지가 표시될 수 있다.
다양한 실시예들에 따른 전자 장치(100)(예: 제어부(180))는 페이지(550)의 리소스 정보를 이용하여 페이지(550)내 사용자 인증을 위한 객체(예: 결제 버튼(553))가 포함되어 있는 경우, 결제 버튼(553)을 지문 센서의 위치로 이동시킨 페이지(560) 또는 페이지(570)를 표시할 수 있다. 이하에서는 설명의 편의를 위해 페이지(550)를 제1 페이지(550)라 하고, 페이지(560)를 제2 페이지(560)라 하고, 페이지(570)를 제3 페이지(570)라 할 수 있다. 제2 페이지(560) 및 제3 페이지(570)는 제1 페이지(550)와 유사하고, 사용자 인증을 위한 객체의 위치가 변경된 것일 수 있다. 제2 페이지(560)는 상품 정보(561)를 포함하고, 제1 페이지(550)의 결제 버튼(553)과 동일한 결제 버튼(563)이 위치만 변경된 것일 수 있다. 제어부(180)는 지문 센서의 속성 정보를 이용하여 사용자 인증을 위한 객체의 속성을 변경시킬 수 있다. 제3 페이지(570)는 상품 정보(571)를 포함하고, 제1 페이지(550)의 결제 버튼(553)을 지문 센서의 속성과 유사하게 크기를 변경시킨 것일 수 있다. 즉, 제3 페이지(570) 내 결제 버튼(573)은 지문 센서의 크기와 유사하게 제1 페이지(550)의 결제 버튼(553)보다 작게 변경된 것일 수 있다.
한 실시예에 따르면, 지문 센서(135)는 광학식 지문 센서로 디스플레이(131)와 레이어드(layered) 구조로 배치될 수 있다. 상기 광학식 지문 센서는 발광부로써 디스플레이(131)의 광원을 이용할 수 있다. 디스플레이(131)로부터 발광된 광원은 사용자의 손가락에 반사되어 디스플레이(131)를 통과하여 상기 광학식 지문 센서의 수광부에 들어갈 수 있다. 제어부(180)는 지문 센서(135)가 획득한 지문 이미지의 인식률을 향상시키기 위해 디스플레이(131)로부터 발광된 광원을 미리 정한 색상(예: 녹색 또는 흰색)으로 변경할 수 있다. 따라서, 제어부(189)는 제3 페이지(570) 내 결제 버튼(573)의 색상을 상기 미리 정한 색상으로 변경하여 표시할 수 있다. 또는, 제어부(180)는 사용자 입력(예: 결제 버튼(573)에 대한 터치 입력)에 반응하여 결제 버튼(573)의 적어도 일부 영역의 색상을 상기 미리 정한 색상으로 변경하여 표시할 수 있다.
제어부(180)는 제2 페이지(560) 또는 제3 페이지(570) 내 결제 버튼을 선택하는 사용자 입력을 검출하고, 사용자 입력에 기반하여 지문 인증을 수행하여 지문 인증 성공 시 결제 버튼에 해당하는 기능을 수행할 수 있다. 예를 들어, 제어부(180)는 상기 사용자 입력에 기반하여 지문을 획득하고, 획득한 지문이 등록된 지문과 일치하는지 여부(예: 지문 인식)를 판단할 수 있다. 제어부(180)는 획득한 지문이 등록된 지문과 일치하는 경우, 결제에 필요한 결제 정보를 메모리(150)로부터 추출하고, 추출된 결제 정보를 결제 서버로 전송할 수 있다. 상기 결제 서버는 상기 결제 정보를 수신하고, 수신된 결제 정보가 유효한 경우 결제를 허용할 수 있다. 따라서, 상기 사용자는 결제에 필요한 카드 번호, 유효 기간 및 비밀번호를 직접 입력하지 않고도, 상기 전송된 결제 정보에 의해 상품을 구매할 수 있다. 결제가 승인되면, 제어부(180)는 상품 판매와 연관된 웹 서버로부터 결제 완료 페이지를 수신하여 표시할 수 있다.
종래에는 사용자가 제1 페이지(550)에서 결제 버튼(553)을 선택한 경우, 로그인 페이지 또는 결제 페이지를 제공하고, 사용자 인증(예: 지문 인증 또는 로그인)하고, 결제 페이지 내 입력한 결제 정보가 올바른 경우에만 결제 완료 페이지를 제공할 수 있다. 본 발명의 한 실시예에 따르면, 별도의 사용자 인증(지문 인증 또는 로그인) 화면(혹은 페이지)을 표시하지 않고, 제2 페이지(560)또는 제3 페이지(570)에서 바로 사용자 인증과 함께 결제 기능을 수행할 수 있다.
도 6a 내지 도 6e는 다양한 실시예들에 따른 사용자 인터페이스를 구성하는 일례를 도시한 도면들이다.
도 6a는 사용자 인증을 위한 객체의 위치를 변경하는 일례를 도시한 것이다.
도 6a를 참조하면, 전자 장치(100)(예: 제어부(180))는 원본 페이지(610) 내 사용자 인증을 위한 객체(611)가 포함되어 있는 경우, 사용자 인증을 위한 객체(611)를 지문 센서(예: 지문 센서(135))에 대응하는(예: 배치된 또는 장착된) 위치(613)로 이동시켜 표시할 수 있다. 제어부(810)는 원래의 사용자 인증을 위한 객체(611)를 삭제하고, 사용자 인증을 위한 객체(617)가 지문 센서의 위치로 이동시킨 페이지(615)를 구성할 수 있다. 즉, 제어부(810)는 사용자 인증을 위한 객체(617)를 지문 센서의 위치에 오버레이하여 구성함으로써, 사용자 인증을 위한 객체(617)는 지문 센서의 위치에 배치된 다른 객체들과 오버레이되어 표시될 수 있다.
도 6b는 사용자 인증을 위한 객체가 포함된 영역의 위치를 변경하는 일례를 도시한 것이다.
도 6b를 참조하면, 전자 장치(100)(예: 제어부(180))는 원본 페이지(620)가 A 영역(621)(또는 A 레이어), B 영역(622), 및 C 영역(623)으로 구성된 것으로 분석할 수 있다. 제어부(180)는 원본 페이지(620)를 구성하는 코드를 파싱하여 원본 페이지(620)를 분석할 수 있다. 제어부(180)는 원본 페이지(620)의 B 영역(622)에 사용자 인증을 위한 객체(624)가 포함되어 있고, 원본 페이지(620)의 C 영역(623)에 지문 센서(626)가 배치된 것으로 식별할 수 있다. 제어부(810)는 사용자 인증을 위한 객체(624)가 포함된 B 영역(622)과 지문 센서(526)가 배치된 C 영역(623)을 스위칭할 수 있다. 예를 들어, 제어부(810)는 사용자 인증을 위한 객체(624)가 포함된 B 영역(622)을 지문 센서(626)가 배치된 위치로 이동시키고, 지문 센서(626)가 배치된 C 영역(623)을 원래 B 영역(622)으로 이동시킬 수 있다. 즉, 제어부(810)는 B 영역(627)을 지문 센서가 배치된 영역으로 이동시키고, B 영역(627)에 포함된 사용자 인증을 위한 객체(628)의 위치를 지문 센서가 배치된 위치로 이동시킨 페이지(625)를 구성할 수 있다. 제어부(810)는 B 영역(627)에 포함된 객체들을 재구성하여 사용자 인증을 위한 객체(628)의 위치를 지문 센서가 배치된 위치로 이동시킬 수 있다.
도 6c는 페이지 내 영역을 축소하고 사용자 인증을 위한 객체의 위치를 변경하는 일례를 도시한 것이다.
도 6c를 참조하면, 전자 장치(100)(예: 제어부(180))는 원본 페이지(630)가 A 영역(631)(또는 A 레이어), B 영역(632), 및 C 영역(633)으로 구성된 것으로 분석할 수 있다. 제어부(180)는 원본 페이지(630)의 B 영역(632)에 사용자 인증을 위한 객체(633)가 포함되어 있는 것으로 판단할 수 있다. 제어부(810)는 원본 페이지(630)를 구성하는 영역의 크기를 축소할 수 있다. 예를 들어, 제어부(180)는 사용자 인증을 위한 객체(633)의 위치를 지문 센서가 배치된 위치로 이동시키고, A 영역(636)의 크기, B 영역(637)의 크기 및 C 영역(638)의 크기를 줄인 페이지(635)를 구성할 수 있다. Margin 영역(639)의 배경 색상이나 스타일은 A 영역(636), B 영역(637) 또는 C 영역(638)의 배경 색상이나 스타일에 기반하여 결정될 수 있다. 따라서 시각적으로 이질감이 느껴지지 않도록 디스플레이(131)를 통해 표시할 수 있다.
도 6d는 지문 센서가 배치된 위치의 영역을 미리 마련하고, 사용자 인증을 위한 객체의 위치를 변경하는 일례를 도시한 것이다.
도 6d를 참조하면, 전자 장치(100)(예: 제어부(180))는 원본 페이지(640)에 지문 센서가 배치된 위치(644)의 영역(643)을 미리 마련할 수 있다. 제어부(180)는 원본 페이지(640)에 사용자 인증을 위한 객체(641)가 포함되어 있는지 판단할 수 있다. 제어부(810)는 원본 페이지(640)에 사용자 인증을 위한 객체(641)가 포함되어 있는 경우, 미리 마련된 지문 센서가 배치된 위치(644)로 사용자 인증을 위한 객체(641)를 이동시킬 수 있다. 예를 들어, 제어부(180)는 사용자 인증을 위한 객체(647)의 위치를 지문 센서가 배치된 위치로 이동시킨 페이지(645)를 구성할 수 있다.
도 6e는 다중 리소스 중 적합한 리소스를 선택하여 사용자 인증을 위한 객체의 위치를 변경하는 일례를 도시한 것이다.
도 6e를 참조하면, 전자 장치(100)(예: 제어부(180))는 원본 페이지(650)가 A 영역(651), B 영역(652), C 영역(654) 및 D 영역(655)으로 구성된 것으로 분석할 수 있다. 또한, 제어부(180)는 B 영역(652)과 근접하게 사용자 인증을 위한 객체(653)가 포함되어 있고, D 영역(655) 내에 지문 센서(656)가 배치된 것으로 식별할 수 있다. 제어부(180)는 지문 센서(656)가 배치된 위치 및 프레임워크 상에 저장된 원본 페이지(650)를 구성하는 화면 리소스 정보에 기반하여 원본 페이지(650)의 일부 영역을 재구성할 수 있다. 예를 들어, 제어부(180)는 사용자 인증을 위한 객체(653)에 근접한 B 영역(662)을 지문 센서가 배치된 위치로 이동시키고, C 영역(654) 및 D 영역(655)을 위쪽으로 이동시킬 수 있다. 또한, 제어부(180)는 제어부(180)는 사용자 인증을 위한 객체(653)를 지문 센서가 배치된 위치로 이동시키기 위해 B 영역(662)을 재구성할 수 있다. 제어부(180)는 지문 센서가 배치된 위치로 사용자 인증을 위한 객체(667)를 이동시키고, B 영역(652)을 B 영역(664)과 B' 영역(665)으로 재구성한 페이지(660)를 구성할 수 있다. 변경된 페이지(660)를 원본 페이지(650)와 비교해 보면, A 영역(661)을 제외한 C 영역(662) 및 D 영역(663)의 위치가 이동되고, B 영역(652)을 B 영역(664)과 B' 영역(665)으로 재구성된 것을 알 수 있다.
도 7은 다양한 실시예들에 따른 전자 장치의 사용자 인증 방법을 도시한 흐름도이다.
도 7을 참조하면, 동작(701)에서, 전자 장치(100)(예: 제어부(180))는 사용자 인증을 위한 객체를 선택할 수 있다. 제어부(180)는 사용자 인증을 위한 객체를 선택(또는 터치)하는 사용자 입력이 검출되면, 사용자 인증을 위한 객체가 선택된 것으로 판단할 수 있다. 상기 사용자 인증을 위한 객체는 계정 등록 서비스, 로그인 서비스, 결제 서비스, 금융 서비스와 연관된 객체를 포함할 수 있다.
동작(703)에서, 전자 장치(100)(예: 제어부(180))는 이전에 지문 인증을 수행하였는지 판단할 수 있다. 제어부(180)는 상기 객체를 선택하기 전에 한번이라도 지문 인증을 수행한 적이 있는지 판단할 수 있다. 상기 지문 인증은 사용자로부터 지문을 획득하고, 획득한 지문이 등록된 지문과 일치하는지 판단하는 것일 수 있다. 예를 들어, 사용자는 지문 인식을 통해 전자 장치(100)를 잠금 해제하고, 원하는 기능(또는 어플리케이션)을 실행시킬 수 있다. 이 경우, 제어부(180)는 전자 장치(100)의 잠금 해제에 따른 지문 인증을 수행한 것으로 판단할 수 있다.
제어부(180)는 이전에 지문 인증을 수행한 경우 동작(705)을 수행하고, 이전에 지문 인증을 수행하지 않은 경우 동작(711)을 수행할 수 있다.
동작(705)에서, 전자 장치(100)(예: 제어부(180))는 인증 경과 시간이 기준치 이하인지 판단할 수 있다. 다양한 실시예들에 따른 제어부(180)는 지문 인증 후 일정 시간 동안 인증 상태를 유지할 수 있다. 제어부(180)는 인증 상태와 연관된 인디케이터를 안내할 수 있다. 예를 들어, 제어부(180)는 인디케이터 영역에 인증 상태를 표시하거나, 인증 상태와 연관된 색상을 변경하여 표시하거나, 인증 시간에 대한 타이머를 표시할 수 있다. 상기 인디케이터 영역은 전자 장치(101)와 연관된 다양한 정보(예: 신호 세기, 배터리 양, 시간 등)를 표시하는 영역일 수 있다.
예를 들어, 제어부(180)는 사용자가 지문 인증 후 기준치(예: 5분, 10분) 이내에 다시 사용자 인증을 요청한 경우 별도의 지문 인증 없이 이전에 인증된 지문 정보를 이용히여 사용자 인증을 수행할 수 있다. 그러나, 사용자가 지문 인증 후 기준치를 초과한 후(예: 한시간)에 다시 사용자 인증을 요청한 경우 제어부(180)는 재인증을 요청할 수 있다.
제어부(180)는 인증 경과 시간이 기준치 이하인 경우 동작(707)을 수행하고, 인증 경과 시간이 기준치를 초과하는 경우 동작(711)을 수행할 수 있다.
동작(707)에서, 전자 장치(100)(예: 제어부(180))는 이전 지문 정보를 이용하여 사용자 인증을 수행할 수 있다. 예를 들어, 전자 장치(100)의 잠금 해제 시 입력된 지문을 이용하여 지문 인식할 수 있다. 또는, 사용자가 이전에 사용자 인증을 위한 객체를 선택한 경우 획득한 지문을 이용하여 지문 인식할 수 있다.
동작(709)에서, 전자 장치(100)(예: 제어부(180))는 사용자 인증에 따른 페이지를 표시할 수 있다. 예를 들어, 제어부(180)는 동작(701)에서 표시된 사용자 인증을 위한 객체에 해당하는 기능을 수행할 수 있다. 사용자 인증을 위한 객체가 로그인 버튼인 경우, 제어부(180)는 로그인에 필요한 사용자 정보를 웹 서버로 전송하여 로그인을 수행하고, 로그인 완료 후 제공되는 페이지를 표시할 수 있다. 사용자 인증을 위한 객체가 결제 버튼인 경우, 제어부(180)는 결제에 필요한 결제 정보를 결제 서버로 전송하여 결제를 수행하고, 결제 완료 후 제공되는 페이지를 표시할 수 있다.
동작(711)에서, 전자 장치(100)(예: 제어부(180))는 사용자 인증을 위한 프로세스를 수행할 수 있다. 사용자 인증을 위한 프로세스는 동작(701)에서 표시된 사용자 인증을 위한 객체를 지문 센서가 배치된 위치로 이동시켜 표시하고, 표시된 사용자 인증을 위한 객체를 선택하는 사용자 입력에 기반하여 지문 인증을 수행하는 것일 수 있다. 즉, 상기 사용자 인증을 위한 프로세스는 도 4의 (407) 내지 동작(411)을 포함할 수 있다. 또한, 상기 사용자 인증을 위한 프로세스는 사용자 인증과 연관된 페이지(예: 로그인 페이지, 결제 페이지 등)를 제공하고, 페이지 내 사용자 인증에 필요한 정보를 입력받고, 입력된 정보를 이용하여 사용자 인증을 수행하는 것일 수 있다.
도 8은 다양한 실시예들에 따른 사용자 인증을 유지하는 일례를 도시한 도면들이다.
도 8을 참조하면, 전자 장치(100)(예: 제어부(180))는 전자 장치(100)의 잠금 상태(810)에서 지문 센서를 이용하여 지문 인식을 수행할 수 있다. 제어부(180)는 지문 센서를 통해 획득한 지문과 등록된 지문이 일치하는 경우, 전자 장치(100)를 잠금 해제하고, 잠금 해제된 화면(820)을 표시할 수 있다. 잠금 해제된 화면(820)은 전자 장치(100)의 홈스크린(또는 바탕화면)이거나, 어플리케이션의 실행 화면일 수 있다. 여기서, 잠금 해제된 화면(820)은 홈스크린 화면일 수 있다. 제어부(180)는 홈스크린 화면에서 어플리케이션의 아이콘(815)을 선택하는 사용자 입력을 검출할 수 있다. 제어부(180)는 선택된 어플리케이션을 실행하고, 어플리케이션의 실행 화면(830)을 표시할 수 있다.
어플리케이션의 실행 화면(830)은 사용자 이름 및 비밀번호를 입력하는 로그인 페이지일 수 있다. 제어부(180)는 어플리케이션의 실행 화면(830)에 사용자 인증을 위한 객체가 포함되어 있는지 판단할 수 있다. 어플리케이션의 실행 화면(830)은 로그인 페이지이므로, 사용자 인증을 위한 객체가 포함되어 있다. 제어부(180)는 이전에 지문 인증을 수행하였는지 판단하고, 지문 인증을 수행한 경우, 인증 경과 시간이 기준치 이하인지 판단할 수 있다. 제어부(180)는 인증 경과 시간이 기준치 이하인 경우, 로그인 완료 후 제공되는 페이지(840)를 표시할 수 있다. 즉, 제어부(180)는 사용자 인증을 위한 객체를 지문 센서의 위치로 이동시켜 표시하고, 표시된 객체를 통한 지문 인식을 수행하는 사용자 인증 프로세스를 거치지 않고, 로그인 완료 후 제공되는 페이지(840)를 표시할 수 있다.
도 9는 다양한 실시예들에 따른 전자 장치의 지문 인증 방법을 도시한 흐름도이다.
도 9를 참조하면, 동작(901)에서, 전자 장치(100)(예: 제어부(180))는 사용자 인터페이스를 표시할 수 있다. 상기 사용자 인터페이스는 전자 장치(100)의 디스플레이(131)를 통해 제공되는 화면일 수 있다. 예를 들어, 상기 사용자 인터페이스는 전자 장치(100)의 홈스크린 또는 어플리케이션의 실행 화면일 수 있다.
동작(903)에서, 전자 장치(100)(예: 제어부(180))는 사용자 입력을 검출할 수 있다. 상기 사용자 입력은 디스플레이(131)를 터치하는 터치 입력일 수 있다. 예를 들어, 동작(901)에서 표시된 사용자 인터페이스가 키패드를 포함하는 경우, 상기 사용자 입력은 상기 키패드를 터치하는 입력일 수 있다. 또는, 동작(901)에서 표시된 사용자 인터페이스가 홈스크린인 경우, 상기 사용자 입력은 상기 홈스크린 내에 어플리케이션의 아이콘을 선택하거나, 아이콘이 배치되지 않은 영역을 터치하는 입력일 수 있다. 이때의 사용자 입력은 지속적인 터치 입력일 수 있다.
동작(905)에서, 전자 장치(100)(예: 제어부(180))는 사용자 입력에 기반하여 지문을 획득할 수 있다. 예를 들어, 지문 센서는 디스플레이(131)의 일부 영역, 다수의 영역, 전체 영역 중 적어도 하나에 배치될 수 있다. 제어부(180)는 지문 센서가 배치된 위치에서 사용자 입력이 검출된 경우, 지문을 획득할 수 있다. 즉, 제어부(180)는 지문 센서가 배치되지 않은 위치에서 사용자 입력이 검출된 경우, 사용자 입력에 대응하는 기능을 실행할 수 있다. 예를 들어, 상기 사용자 입력이 키패드에 키를 선택하는 입력인 경우, 제어부(180)는 지문 센서가 배치되지 않은 위치에서 키를 선택하는 사용자 입력에 대해서는 선택된 키에 대응하는 문자를 입력 필드에 입력할 수 있다. 또한, 제어부(180)는 지문 센서가 배치된 위치에서 사용자 입력이 검출된 경우, 선택된 키에 대응하는 문자를 입력 필드에 입력하고, 동시에 상기 키를 누를 때 지문을 획득할 수 있다. 다양한 실시예들에 따르면, 동작(905)에서 획득한 지문은 사용자가 입력해야할 지문의 일부(예: 30%, 50%) 또는 전체일 수 있다.
동작(907)에서, 전자 장치(100)(예: 제어부(180))는 획득한 지문을 버퍼에 저장할 수 있다. 다양한 실시예들에 따른 제어부(180)는 획득한 모든 지문에 대해 버퍼에 저장할 수 있다. 또는, 제어부(180)는 획득한 지문 중 지문 인식에 사용 가능한 지문만 선별적으로 버퍼에 저장할 수 있다. 다양한 실시예에 따른 버퍼는 선입선출(first in first out; FIFO) 방식으로 정해진 시간 동안 지문(또는 지문 데이터)을 저장할 수 있다. 예를 들어, 버퍼에 지문이 저장되면 저장된 지문은 정해진 시간 동안(예: 3분, 5분, 10분 등)만 저장되고, 정해진 시간이 경과하면 저장된 지문이 삭제될 수 있다.
동작(909)에서, 전자 장치(100)(예: 제어부(180))는 사용자 인증을 위한 객체를 선택할 수 있다. 제어부(180)는 동작(903)의 사용자 입력에 의해 동작(901)과 다른 사용자 인터페이스를 제공할 수 있다. 제어부(180)는 사용자 입력에 의해 제공된 사용자 인터페이스 내에 사용자 인증을 위한 객체를 터치하는 사용자 입력을 검출할 수 있다.
동작(911)에서, 전자 장치(100)(예: 제어부(180))는 저장된 지문으로 지문 이미지를 생성할 수 있다. 제어부(180)는 버퍼에 저장된 하나 이상의 지문을 이용하여 지문 이미지를 생성할 수 있다. 예를 들어, 버퍼에 저장된 지문은 엄지, 검지, 중지 등 사용자의 서로 다른 손가락에 의한 지문일 수 있다. 이 경우, 제어부(180)는 유사한 또는 동일한 손가락별로 하나의 지문 이미지를 생성할 수 있다. 예를 들어, 제어부(180)는 상기 버퍼에 저장된 지문으로 엄지 및 검지에 대한 지문 이미지를 각각 생성할 수 있다.
다양한 실시예들에 따른 제어부(180)는 선택적으로 동작(911)을 수행할 수 있다. 즉, 제어부(180)는 동작(909)을 수행한 후 동작(911)을 수행하지 않고 동작(913)을 수행할 수 있다. 또는, 제어부(180)는 동작(909) 및 동작(911)을 수행하고 동작(913)을 수행할 수 있다. 동작(911)은 생략 가능하다.
동작(913)에서, 전자 장치(100)(예: 제어부(180))는 지문이 등록된 지문과 일치하는지 여부를 판단할 수 있다. 제어부(180)는 버퍼에 저장된 지문이 등록된 지문과 정해진 비율 이상 일치하는지 여부를 판단할 수 있다. 상기 버퍼에 저장된 지문은 100% 일치 여부를 판단할 만큼의 지문 크기가 아닐 수 있다. 이 경우, 제어부(180)는 일부의 지문만이라도 등록된 지문과 일치하는지 여부를 판단할 수 있다. 상기 정해진 비율은 상기 사용자 인증을 위한 객체의 보안 등급에 따라 결정될 수 있다.
예를 들어, 상기 사용자 인증을 위한 객체가 로그인 서비스에 대한 것이라 보안 등급이 '하'인 경우, 상기 정해진 비율은 50%일 수 있다. 이 경우, 제어부(180)는 버퍼에 저장된 지문이 등록된 지문과 50% 이상 일치하지 않는 경우 보안을 위해 동작(917)을 수행할 수 있다. 또는, 상기 사용자 인증을 위한 객체가 결제 서비스에 대한 것이라 보안 등급이 '중'인 경우, 상기 정해진 비율은 70%일 수 있다. 이 경우, 제어부(180)는 버퍼에 저장된 지문이 등록된 지문과 70% 이상 일치하지 않는 경우 보안을 위해 동작(917)을 수행할 수 있다. 상기 사용자 인증을 위한 객체가 금융 서비스에 대한 것이라 보안 등급이 '상'인 경우, 상기 정해진 비율은 100%일 수 있다. 이 경우, 제어부(180)는 버퍼에 저장된 지문이 등록된 지문과 100% 이상 일치하지 않는 경우 보안을 위해 동작(917)을 수행할 수 있다.
다양한 실시예들에 따르면, 지문이 저장된 후 일정 시간이 경과하면 지문이 삭제되므로, 지문 이미지를 생성하는 시점에 버퍼에 아무런 지문 데이터가 저장되어 있지 않을 수 있다. 예를 들어, 동작(903) 내지 동작(907)을 수행한 후 한시간 이후에 동작(909)이 수행되는 경우 버퍼에는 지문 데이터가 저장되어 있지 않을 수 있다. 이 경우, 제어부(180)는 재인증이 필요하다고 판단하고, 동작(917)을 수행할 수 있다.
제어부(180)는 상기 지문이 등록된 지문과 일치하는 경우 동작(915)을 수행하고, 일치하지 않는 경우 동작(917)을 수행할 수 있다.
동작(915)에서, 전자 장치(100)(예: 제어부(180))는 사용자 인증에 따른 페이지를 표시할 수 있다. 예를 들어, 제어부(180)는 사용자 인증을 위한 객체에 해당하는 기능을 수행할 수 있다. 사용자 인증을 위한 객체가 로그인 버튼인 경우, 제어부(180)는 로그인에 필요한 사용자 정보를 웹 서버로 전송하여 로그인을 수행하고, 로그인 완료 후 제공되는 페이지를 표시할 수 있다. 사용자 인증을 위한 객체가 결제 버튼인 경우, 제어부(180)는 결제에 필요한 결제 정보를 결제 서버로 전송하여 결제를 수행하고, 결제 완료 후 제공되는 페이지를 표시할 수 있다.
동작(917)에서, 전자 장치(100)(예: 제어부(180))는 사용자 인증을 위한 프로세스를 수행할 수 있다. 사용자 인증을 위한 프로세스는 사용자 인증을 위한 객체를 지문 센서가 배치된 위치로 이동시켜 표시하고, 표시된 사용자 인증을 위한 객체를 선택하는 사용자 입력에 기반하여 지문 인증을 수행하는 것일 수 있다. 즉, 상기 사용자 인증을 위한 프로세스는 도 4의 (407) 내지 동작(411)을 포함할 수 있다. 또는, 상기 사용자 인증을 위한 객체가 이미 지문 센서가 배치된 위치로 이동되어 표시된 경우, 제어부(180)는 사용자 인증을 위한 객체를 선택하는 사용자 입력에 기반하여 지문 인증을 수행할 수 있다.
다양한 실시예들에 따른 제어부(180)는 지속적인 사용자 입력이 검출되는 동안, 사용자 입력에 기반하여 획득한 지문을 이용하여 지문 인증을 수행함으로써, 인증된 사용자가 사용 중이라는 사실을 미리 확인할 수 있다. 이 경우, 제어부(180)는 지문 인증이 필요한 상황에서 별도의 지문 인증 과정 없이 이전에 확인된 지문 정보를 이용하여 사용자 인증을 수행할 수 있다.
다양한 실시예들에 따른 제어부(180)는 사용자 입력에 기반하여 획득한 지문을 이용하여 인증된 사용자가 사용 중이라는 사실을 확인하고, 지속적인 사용자 입력이 검출되는 경우에는 인증된 사용자가 계속해서 사용 중이라고 판단하고, 사용자 인증 상태를 유지할 수 있다. 또한, 제어부(180)는 사용자 입력이 일정 시간 동안 중단된 후, 사용자 인증이 필요한 경우 인증된 사용자가 아니라고 판단하고, 재인증을 요청할 수 있다.
도 10은 다양한 실시예들에 따른 서로 다른 페이지에서 지문 정보를 이용하는 일례를 도시한 도면이다.
도 10을 참조하면, 전자 장치(100)(예: 제어부(180))는 메시지 어플리케이션의 실행 화면(1010) 내 키패드(1011) 상에 사용자 입력을 검출할 수 있다. 상기 사용자 입력이 지문 센서가 배치된 위치(1013)에서 검출되는 경우, 제어부(180)는 검출된 사용자 입력을 이용하여 지문을 획득할 수 있다. 제어부(180)는 획득한 지문으로 지문 인증을 수행하고, 획득한 지문이 등록된 지문과 일치하는 경우 사용자 인증을 완료한 것으로 판단할 수 있다. 제어부(180)는 메시지 어플리케이션의 실행 화면(1020) 내 URL을 선택하는 사용자 입력에 의해 브라우저 어플리케이션의 실행 화면(1030)을 표시할 수 있다.
제어부(180)는 브라우저 어플리케이션의 실행 화면(1030) 내 사용자 인증을 위한 객체가 포함되어 있는지 판단할 수 있다. 브라우저 어플리케이션의 실행 화면(1030)은 사용자 이름 및 비밀번호를 입력하는 로그인 페이지이고, 사용자 인증을 위한 객체가 포함되어 있을 수 있다. 제어부(180)는 사용자 이름을 입력하기 위한 항목을 선택하는 사용자 입력(1031)에 응답하여 이전에 지문 인증을 수행한 적이 있는지 판단할 수 있다. 예를 들어, 제어부(180)는 브라우저 어플리케이션의 실행 화면(1030) 전에 표시한 메시지 어플리케이션에서 지문 인증을 수행하였는지 판단할 수 있다. 제어부(180)는 메시지 어플리케이션의 실행 화면(1010) 내 키패드(1011) 상에서 검출된 사용자 입력에 의해 지문 인증이 완료된 경우, 완료된 지문 인증에 사용한 지문 정보를 이용하여 브라우저 어플리케이션의 실행 화면(1030) 내 사용자 인증을 수행할 수 있다. 사용자 인증을 완료하면, 제어부(180)는 로그인 완료 후 제공되는 페이지(1040)를 제공할 수 있다.
다양한 실시예들에 따른 제어부(180)는 메시지 어플리케이션의 실행 화면(1010) 내에서 지문 인증을 완료한 후 기준치(또는 기준 시간) 이내에 브라우저 어플리케이션의 실행 화면(1030) 내에 사용자 인증이 요청된 경우에만 완료된 지문 인증에 사용한 지문 정보를 이용하여 브라우저 어플리케이션의 실행 화면(1030) 내 사용자 인증을 수행할 수 있다. 제어부(180)는 메시지 어플리케이션의 실행 화면(1010) 내에서 지문 인증을 완료한 후 기준치를 초과한 후 브라우저 어플리케이션의 실행 화면(1030) 내에 사용자 인증이 요청된 경우 재인증을 요청할 수 있다.
도 11은 다양한 실시예들에 따른 전자 장치의 인증 결과 적용 방법을 도시한 흐름도이다.
도 11을 참조하면, 동작(1101)에서, 전자 장치(100)(예: 제어부(180))는 제1 윈도우에 사용자 인증을 수행할 수 있다. 상기 제1 윈도우는 멀티 윈도우 상에 어느 하나의 윈도우일 수 있다. 또는, 상기 제1 윈도우는 멀티 디스플레이 상에 어느 하나의 디스플레이를 의미할 수도 있다. 상기 사용자 인증은 지문 인식을 통한 사용자 인증을 의미할 수 있다. 상기 사용자 인증은 도 4, 도 7, 도 9에서 설명한 지문 인증을 포함할 수 있다.
동작(1103)에서, 전자 장치(100)(예: 제어부(180))는 제2 윈도우에서 사용자 인증을 요청할 수 있다. 상기 제2 윈도우는 사용자 인증이 완료한 제1 윈도우 이외의 다른 윈도우를 의미할 수 있다. 상기 사용자 인증 요청이란 상기 제2 윈도우 상에서 회원 가입 서비스, 로그인 서비스, 결제 서비스, 금융 서비스와 같은 사용자 인증을 위한 객체가 선택되는 것일 수 있다.
동작(1105)에서, 전자 장치(100)(예: 제어부(180))는 제1 윈도우의 인증 정보를 이용하여 제2 윈도우에서 사용자 인증을 수행할 수 있다. 제어부(180)는 상기 제1 윈도우에서 획득한 지문 정보를 이용하여 상기 제2 윈도우에서의 사용자 인증을 수행할 수 있다. 제어부(180)는 상기 사용자 인증이 완료되면, 상기 제2 윈도우 내 사용자 인증 완료 후 제공되는 페이지를 표시할 수 있다.
도 12는 다양한 실시예들에 따른 멀티 윈도우에서의 인증 결과를 적용하는 일례를 도시한 도면이다.
도 12를 참조하면, 전자 장치(100)(예: 제어부(180))는 소셜 네트워크 서비스와 관련된 페이지를 표시한 제1 윈도우(1211) 및 로그인 페이지와 관련된 페이지를 표시한 제2 윈도우(1213)를 포함하는 멀티 윈도우(1210)를 제공할 수 있다. 제어부(180)는 제2 윈도우(1213) 내 사용자 인증이 필요한 경우, 지문 센서가 배치된 위치에 플로팅 버튼(1215)을 표시할 수 있다. 제어부(180)는 플로팅 버튼(1221) 상에 사용자 입력을 검출하고, 검출된 사용자 입력에 의한 지문을 획득할 수 있다. 두번째 멀티 윈도우(1220)는 플로팅 버튼(1221)을 통해 지문을 획득하는 일례를 도시한 것이다. 제어부(180)는 획득한 지문을 등록된 지문과 비교하여 지문 인증할 수 있다. 제2 윈도우 상에서 지문 인증 완료된 후, 제어부(180)는 플로팅 버튼(1231)의 표시를 유지할 수 있다. 제어부(180)는 세번째 멀티 윈도우(1230) 상에 제2 윈도우 내 플로팅 버튼(1231)을 제1 윈도우로 이동시키는 사용자 입력을 검출할 수 있다. 제어부(180)는 제2 윈도우 내 플로팅 버튼(1231)을 제1 윈도우로 이동시키는 사용자 입력을 제2 윈도우에서 사용자 인증을 요청한 것으로 판단할 수 있다. 제어부(180)는 플로팅 버튼(1233)이 제1 윈도우로 이동되면, 제2 윈도우에서 지문 인증에 사용한 지문 정보를 사용자 인증에 이용할 수 있다. 제어부(180)는 제2 윈도우에서의 지문 정보를 이용하여 제1 윈도우 내 사용자 인증을 수행할 수 있다.
도 13a 및 도 13b는 다양한 실시예들에 따른 양면 디스플레이에서의 인증 결과를 적용하는 일례를 도시한 도면들이다.
도 13a는 디스플레이에 지문 센서를 배치한 일례를 도시한 것이다.
도 13a를 참조하면, 전자 장치(100)는 전자 장치(100)의 전면에 제1 디스플레이(1310) 및 전자 장치(100)의 후면에 제2 디스플레이(1320)를 각각 포함할 수 있다. 제1 디스플레이(1310) 및 제2 디스플레이(1320)에는 서로 다른 지문 인식율을 갖는 지문 센서가 배치될 수 있다. 지문 인식율이 높을수록 지문 정확도가 높을 수 있다. 또는, 제1 디스플레이(1310) 또는 제2 디스플레이(1320) 중 하나에만 지문 센서가 내장될 수 있다. 예를 들어, 제1 디스플레이(1310)에는 제1 지문 센서(1311)가 배치되고, 제2 디스플레이(1320)에는 제2 지문 센서(1321)가 배치될 수 있다. 예를 들어, 제1 지문 센서(1311)가 제2 지문 센서(1321)보다 지문 인식율이 낮을 수 있다. 또는, 제2 지문 센서(1321)가 제1 지문 센서(1311)보다 지문 인식율이 낮을 수 있다.
다양한 실시예들에 따른 전자 장치(100)의 제어부(180)는 사용자 인증에 대한 보안 레벨에 기반하여 지문 인식에 이용할 지문 센서를 결정할 수 있다. 예를 들어, 제어부(180)는 결제 및 금융 거래와 같은 사용자 인증에는 지문 인식율이 높은 지문 센서를 이용하고, 회원 가입 또는 로그인과 같은 사용자 인증에는 지문 인식율이 낮은 지문 센서를 이용할 수 있다.
도 13b는 양면 디스플레이에 지문 센서를 이용하는 일례를 도시한 것이다.
도 13b를 참조하면, 전자 장치(100)의 전면에 구비된 제1 디스플레이(1350)에는 지문 센서가 내장되어 있고, 전자 장치(100)의 후면에 구비된 제2 디스플레이(1360)에는 지문 센서가 내장되어 있지 않을 수 있다. 이 경우, 전자 장치(100)의 제어부(180)는 제1 디스플레이(1350)에서 지문 인증한 결과를 제2 디스플레이(1360)에서 이용 가능하도록 제어할 수 있다. 즉, 제어부(180)는 일정 시간 이내에 제2 디스플레이(1360)에서 사용자 인증이 필요한 객체를 선택한 경우, 제1 디스플레이(1350)에서 인증한 결과를 이용할 수 있다. 예를 들어, 제어부(180)는 사용자가 제1 디스플레이(1350)에서 상품 정보(1351)를 확인하고, 결제 버튼(1353)을 선택하면, 결제 버튼(1353) 선택 시 획득한 지문을 이용하여 지문 인증을 수행할 수 있다. 지문 인증이 완료되면, 제어부(180)는 제1 디스플레이(1350)에서 획득한 지문 정보를 제2 디스플레이(1360)에서 이용 가능하도록 유지할 수 있다.
다양한 실시예들에 따른 제어부(180)는 동일한 객체(예: 상품 정보 및 결제 버튼)를 포함하는 동일한 페이지에 대하여 지문 센서가 포함된 제1 디스플레이(1350)에는 결제 버튼(1353)을 지문 센서가 배치된 위치에 표시하고, 지문 센서가 포함되지 않은 제2 디스플레이(1360)에는 결제 버튼(1363)을 원래 위치에 표시할 수 있다. 사용자가 제2 디스플레이(1360)에서 상품 정보(1361)를 확인하고, 결제 버튼(1363)을 선택한 경우, 제어부(180)는 빠른 사용자 인증을 위해 제1 디스플레이(1350)를 통해 지문 인증할 것을 안내할 수 있다. 제어부(180)는 사용자가 제1 디스플레이(1350)로 전환하도록 안내 메시지(예: 팝업 메시지, 아이콘, 화살표 등)를 표시할 수 있다. 사용자가 빠른 사용자 인증을 위해 제2 디스플레이(1360)에서 제1 디스플레이(1350)로 전환한 경우, 제어부(180)는 제1 디스플레이(1350) 상에 결제 버튼(1353) 상에 사용자 입력을 검출하여 지문 인증을 수행할 수 있다. 지문 인증이 완료된 후, 사용자는 다시 제1 디스플레이(1350)에서 제2 디스플레이(1360)로 전환할 수 있다.
다양한 실시예들에 따른 전자 장치의 동작 방법은 상기 전자 장치와 기능적으로 연결된 디스플레이를 통해 표시될 컨텐츠를 구성하는 적어도 하나의 객체를 식별하는 동작, 상기 식별된 객체 중에서 사용자 인증을 위한 객체가 존재하는지 판단하는 동작, 및 상기 페이지에 사용자 인증을 위한 객체가 포함된 경우, 상기 사용자 인증을 위한 객체를 상기 적어도 일부의 표시 영역에 표시하는 동작을 포함할 수 있다.
다양한 실시예들에 따른 전자 장치의 동작 방법은 상기 전자 장치와 기능적으로 연결된 디스플레이를 통해 표시될 화면을 구성하는 적어도 하나의 객체들을 확인하는 동작, 상기 적어도 하나의 객체들 중 하나의 객체가 사용자 인증을 위한 객체인지 판단하는 동작, 상기 하나의 객체가 상기 사용자 인증을 위한 객체가 아닌 경우, 상기 하나의 객체를 제1 지정된 위치에 표시하는 동작, 및 상기 하나의 객체가 상기 사용자 인증을 위한 객체인 경우, 상기 하나의 객체에 대응하는 다른 객체를 제2 지정된 위치에 표시하는 동작을 포함할 수 있다.
상기 제1 지정된 위치는 상기 컨텐츠 내 원래 상기 적어도 하나의 객체가 표시될 위치이고, 상기 제2 지정된 위치는, 상기 디스플레이에 지문 센서가 배치된 위치인 것을 포함할 수 있다.
상기 동작 방법은 상기 지문 센서가 배치된 적어도 일부의 표시 영역에 표시된 사용자 인증을 위한 객체 상에 사용자 입력을 검출하는 동작, 상기 사용자 입력에 기반하여 상기 지문 센서를 이용하여 지문을 인식하는 동작, 및 지문 인증이 완료되면, 상기 사용자 인증을 위한 객체와 연관된 기능을 수행하는 동작을 더 포함할 수 있다.
상기 기능을 수행하는 동작은, 상기 사용자 입력에 기반하여 획득한 지문이 상기 전자 장치의 메모리에 저장된 지문 정보와 일치하는지 여부를 판단하는 동작, 및 상기 획득한 지문과 상기 메모리에 저장된 지문 정보가 일치하는 경우 상기 사용자 인증을 위한 객체에 기반하여 상기 메모리에 저장된 사용자 정보 또는 결제 정보를 상기 전자 장치에 대한 외부 전자 장치로 전송하는 동작을 포함할 수 있다.
상기 동작 방법은 상기 적어도 하나의 객체에 대한 지정된 위치를 프레임워크 상에 저장하고, 적어도 하나의 지문 정보, 적어도 하나의 사용자 정보 또는 적어도 하나의 결제 정보 중 적어도 하나를 메모리에 저장하는 동작을 더 포함할 수 있다.
상기 동작 방법은 상기 적어도 하나의 객체의 보안 레벨에 기반하여 지문 인식에 이용할 지문 센서를 선택하는 동작을 더 포함할 수 있다.
상기 동작 방법은 지문 인증 후 일정 시간 동안 사용자 인증 상태를 유지하는 동작을 더 포함할 수 있다.
상기 동작 방법은 지속적인 사용자 입력이 검출되는 동안, 상기 사용자 입력에 기반하여 지문 데이터를 획득하고, 획득한 지문 데이터가 등록된 지문과 일치하는지 여부에 따라 지문 인증을 수행하는 동작을 더 포함할 수 있다.
상기 동작 방법은 제1 어플리케이션 내 인증된 지문 정보를 이용하여 제2 어플리케이션 내 사용자 인증을 수행하는 동작을 더 포함할 수 있다.
상기 동작 방법은 멀티 윈도우 내 제1 윈도우에서 인증된 지문 정보를 이용하여 제2 윈도우 내 사용자 인증을 수행하는 동작을 더 포함할 수 있다.
다양한 실시예들에 따른 컴퓨터로 판독 가능한 기록 매체는 전자 장치의 디스플레이에 표시될 적어도 하나의 객체를 포함하는 컨텐츠를 확인하는 동작, 상기 컨텐츠가 지문 정보의 획득과 관련되지 않는 경우, 상기 적어도 하나의 객체를 지정된 위치에 표시하는 동작, 및 상기 컨텐츠가 지문 정보의 획득과 관련된 경우, 상기 적어도 하나의 객체를 상기 지문 센서가 형성된 상기 적어도 일부 영역에 표시하는 동작을 실행시키기 위한 프로그램을 기록할 수 있다.그리고 본 명세서와 도면에 개시된 실시 예들은 본 발명의 내용을 쉽게 설명하고, 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 전자 장치
131: 디스플레이 135: 지문 센서
150: 메모리 180: 제어부
310: 프로세서
311: 객체 식별 모듈 313: 디스플레이 구성 모듈
315: 인증 모듈
320: 디스플레이 321: 지문 센서

Claims (20)

  1. 디스플레이;
    상기 디스플레이의 표시 영역의 적어도 일부의 영역 아래 배치된 지문 센서; 및
    프로세서를 포함하고, 상기 프로세서는,
    상기 디스플레이 상에서 제1 지정된 위치 및 제2 지정된 위치에 표시될 제1 선택 가능한 객체 및 제2 선택 가능한 객체를 포함하는 컨텐츠를 확인하고,
    상기 컨텐츠 내 상기 제1 선택 가능한 객체가 지문 정보의 획득과 관련되지 않는 경우, 상기 제1 선택 가능한 객체를 상기 제1 지정된 위치에 표시하고, 및
    상기 컨텐츠 내 상기 제2 선택 가능한 객체가 지문 정보의 획득과 관련된다는 결정에 응답하여, 상기 제2 선택 가능한 객체를 상기 제2 지정된 위치에서 상기 지문 센서가 배치된 위치로 이동하여 표시하도록 설정된 전자 장치.
  2. 삭제
  3. 제1항에 있어서, 상기 프로세서는,
    상기 지문 센서의 속성 정보에 기반하여 상기 제1 선택 가능한 객체 및 상기 제2 선택 가능한 객체의 속성을 변경하도록 설정된 전자 장치.
  4. 제1항에 있어서, 상기 프로세서는,
    상기 지문 센서가 배치된 위치에 표시된 상기 제2 선택 가능한 객체 상에 사용자 입력을 검출하고, 상기 사용자 입력에 기반하여 상기 지문 센서를 이용하여 지문을 인식하도록 설정된 전자 장치.
  5. 제4항에 있어서, 상기 프로세서는,
    지문 인증이 완료되면, 상기 제2 선택 가능한 객체와 연관된 기능을 수행하도록 설정된 전자 장치.
  6. 제1항에 있어서, 상기 제1 선택 가능한 객체 및 상기 제2 선택 가능한 객체에 대한 상기 제1 지정된 위치 및 상기 제2 지정된 위치를 프레임워크 상에 저장하고, 적어도 하나의 지문 정보, 적어도 하나의 사용자 정보 또는 적어도 하나의 결제 정보 중 적어도 하나를 저장하는 메모리를 더 포함하는 전자 장치.
  7. 제6항에 있어서, 상기 프로세서는,
    사용자로부터 획득한 지문이 상기 메모리에 저장된 지문 정보와 일치하는지 여부를 판단하고, 일치하는 경우 상기 제2 선택 가능한 객체에 기반하여 상기 사용자 정보 또는 상기 결제 정보를 상기 전자 장치에 대한 외부 전자 장치로 전송하도록 설정된 전자 장치.
  8. ◈청구항 8은(는) 설정등록료 납부시 포기되었습니다.◈
    제1항에 있어서, 상기 지문 센서는,
    상기 디스플레이의 일부 영역, 다수의 영역 또는 전체 영역 중 적어도 하나에 포함되도록 설정된 전자 장치.
  9. ◈청구항 9은(는) 설정등록료 납부시 포기되었습니다.◈
    제1항에 있어서,
    상기 디스플레이는, 상기 전자 장치의 전면 및 후면에 각각 배치되고,
    서로 다른 지문 인식율을 갖는 지문 센서가 상기 전자 장치의 전면 및 후면에 각각 배치되도록 설정된 전자 장치.
  10. ◈청구항 10은(는) 설정등록료 납부시 포기되었습니다.◈
    제9항에 있어서, 상기 프로세서는,
    상기 제1 선택 가능한 객체 또는 상기 제2 선택 가능한 객체 중 적어도 하나의 보안 레벨에 기반하여 지문 인식에 이용할 지문 센서를 선택하도록 설정된 전자 장치.
  11. ◈청구항 11은(는) 설정등록료 납부시 포기되었습니다.◈
    제1항에 있어서, 상기 프로세서는,
    지문 인증 후 일정 시간 동안 사용자 인증 상태를 유지하도록 설정된 전자 장치.
  12. 제1항에 있어서, 상기 프로세서는,
    지속적인 사용자 입력이 검출되는 동안, 상기 사용자 입력에 기반하여 지문 데이터를 획득하고, 획득한 지문 데이터가 등록된 지문과 일치하는지 여부에 따라 지문 인증을 수행하도록 설정된 전자 장치.
  13. 제1항에 있어서, 상기 프로세서는,
    제1 어플리케이션 내 인증된 지문 정보를 이용하여 제2 어플리케이션 내 사용자 인증을 수행하도록 설정된 전자 장치.
  14. 제1항에 있어서, 상기 프로세서는,
    멀티 윈도우 내 제1 윈도우에서 인증된 지문 정보를 이용하여 제2 윈도우 내 사용자 인증을 수행하도록 설정된 전자 장치.
  15. 전자 장치의 동작 방법에 있어서,
    상기 전자 장치와 기능적으로 연결된 디스플레이를 통해 제1 지정된 위치 및 제2 지정된 위치에 표시될 컨텐츠를 구성하는 제1 선택 가능한 객체 및 제2 선택 가능한 객체를 식별하는 동작;
    상기 컨텐츠 내 상기 제1 선택 가능한 객체가 지문 정보의 획득과 관련되지 않는 경우, 상기 제1 선택 가능한 객체를 상기 제1 지정된 위치에 표시하는 동작; 및
    상기 컨텐츠 내 상기 제2 선택 가능한 객체가 지문 정보의 획득과 관련된다는 결정에 응답하여, 상기 제2 선택 가능한 객체를 상기 제2 지정된 위치에서 상기 디스플레이에 지문 센서가 배치된 위치로 이동하여 표시하는 동작을 포함하는 방법.
  16. 삭제
  17. 삭제
  18. ◈청구항 18은(는) 설정등록료 납부시 포기되었습니다.◈
    제15항에 있어서,
    상기 지문 센서가 배치된 위치에 표시된 상기 제2 선택 가능한 객체 상에 사용자 입력을 검출하는 동작;
    상기 사용자 입력에 기반하여 상기 지문 센서를 이용하여 지문을 인식하는 동작; 및
    지문 인증이 완료되면, 상기 제2 선택 가능한 객체와 연관된 기능을 수행하는 동작을 더 포함하는 방법.
  19. ◈청구항 19은(는) 설정등록료 납부시 포기되었습니다.◈
    제18항에 있어서, 상기 기능을 수행하는 동작은,
    상기 사용자 입력에 기반하여 획득한 지문이 상기 전자 장치의 메모리에 저장된 지문 정보와 일치하는지 여부를 판단하는 동작; 및
    상기 획득한 지문과 상기 메모리에 저장된 지문 정보가 일치하는 경우 상기 제2 선택 가능한 객체에 기반하여 상기 메모리에 저장된 사용자 정보 또는 결제 정보를 상기 전자 장치에 대한 외부 전자 장치로 전송하는 동작을 포함하는 방법.
  20. 삭제
KR1020160148535A 2016-11-09 2016-11-09 사용자 인증과 관련된 사용자 인터페이스 표시 방법 및 이를 구현한 전자 장치 KR102521333B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020160148535A KR102521333B1 (ko) 2016-11-09 2016-11-09 사용자 인증과 관련된 사용자 인터페이스 표시 방법 및 이를 구현한 전자 장치
AU2017358278A AU2017358278B2 (en) 2016-11-09 2017-11-09 Method of displaying user interface related to user authentication and electronic device for implementing same
EP17870395.5A EP3510517B1 (en) 2016-11-09 2017-11-09 Method of displaying user interface related to user authentication and electronic device for implementing same
PCT/KR2017/012636 WO2018088809A1 (en) 2016-11-09 2017-11-09 Method of displaying user interface related to user authentication and electronic device for implementing same
US15/808,249 US10635879B2 (en) 2016-11-09 2017-11-09 Method of displaying user interface related to user authentication and electronic device for implementing same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160148535A KR102521333B1 (ko) 2016-11-09 2016-11-09 사용자 인증과 관련된 사용자 인터페이스 표시 방법 및 이를 구현한 전자 장치

Publications (2)

Publication Number Publication Date
KR20180051782A KR20180051782A (ko) 2018-05-17
KR102521333B1 true KR102521333B1 (ko) 2023-04-14

Family

ID=62064004

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160148535A KR102521333B1 (ko) 2016-11-09 2016-11-09 사용자 인증과 관련된 사용자 인터페이스 표시 방법 및 이를 구현한 전자 장치

Country Status (5)

Country Link
US (1) US10635879B2 (ko)
EP (1) EP3510517B1 (ko)
KR (1) KR102521333B1 (ko)
AU (1) AU2017358278B2 (ko)
WO (1) WO2018088809A1 (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10325134B2 (en) * 2015-11-13 2019-06-18 Fingerprint Cards Ab Method and system for calibration of an optical fingerprint sensing device
WO2018137276A1 (zh) 2017-01-26 2018-08-02 华为技术有限公司 数据处理的方法及移动设备
EP3602366A1 (en) * 2017-05-15 2020-02-05 Microsoft Technology Licensing, LLC Headset with fingerprint authentication
CN107808600A (zh) * 2017-12-08 2018-03-16 京东方科技集团股份有限公司 显示装置及其控制方法
US11210832B2 (en) * 2018-04-24 2021-12-28 Hewlett-Packard Development Company, L.P. Animated gazes on head mounted displays
CN109240630A (zh) * 2018-08-30 2019-01-18 中兴通讯股份有限公司 一种显示方法、装置和计算机存储介质
CN109740496B (zh) * 2018-12-28 2021-02-05 维沃移动通信有限公司 移动终端及识别方法
CN110276307A (zh) 2019-06-25 2019-09-24 Oppo广东移动通信有限公司 显示组件装置、电子设备和显示组件装置的组装方法
KR20210027633A (ko) * 2019-08-29 2021-03-11 삼성디스플레이 주식회사 표시 장치 및 그것의 구동 방법
CN115079922B (zh) * 2022-07-14 2024-02-02 北京字跳网络技术有限公司 一种页面显示方法、装置、电子设备及介质

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6898301B2 (en) * 2000-07-10 2005-05-24 Casio Computer Co., Ltd. Authentication system based on fingerprint and electronic device employed for the system
KR101405924B1 (ko) * 2007-03-19 2014-06-12 엘지전자 주식회사 윈도우 제어 방법 및 이를 구현할 수 있는 단말기
US8402533B2 (en) * 2010-08-06 2013-03-19 Google Inc. Input to locked computing device
US8564314B2 (en) * 2010-11-02 2013-10-22 Atmel Corporation Capacitive touch sensor for identifying a fingerprint
JP2013229003A (ja) 2012-03-27 2013-11-07 Ntt Docomo Inc 携帯端末、端末表示方法、及び端末表示プログラム
KR101451870B1 (ko) * 2012-08-20 2014-10-16 네이버 주식회사 인증 공유에 의한 애플리케이션 로그인 시스템, 방법 및 컴퓨터 판독 가능한 기록 매체
KR20140118281A (ko) * 2013-03-28 2014-10-08 인텔렉추얼디스커버리 주식회사 사용자 인터페이스의 동적 재구성 방법 및 이를 위한 스마트 디바이스
US20140359757A1 (en) * 2013-06-03 2014-12-04 Qualcomm Incorporated User authentication biometrics in mobile devices
KR20150034832A (ko) * 2013-09-24 2015-04-06 삼성전자주식회사 지문인식 센서를 포함하는 전자기기 및 지문인식 센서를 포함하는 전자기기의 사용자 인증 수행 및 사용자 지문 이미지 등록 방법, 및 이 방법을 실행하기 위한 프로그램이 기록되어 있는 비휘발성 기록매체
CN105745669A (zh) * 2013-11-04 2016-07-06 高通股份有限公司 移动装置中的用户验证生物计量技术
KR102264808B1 (ko) 2014-06-23 2021-06-14 삼성전자주식회사 지문 처리 방법 및 그 전자 장치
KR20160022541A (ko) 2014-08-20 2016-03-02 삼성전자주식회사 지문 인식 방법 및 장치
US9465930B2 (en) * 2014-08-29 2016-10-11 Dropbox, Inc. Fingerprint gestures
KR102277155B1 (ko) * 2015-01-29 2021-07-14 삼성전자주식회사 지문 인식을 통해 사용자를 인증하는 방법 및 이를 위한 전자 장치
KR102277453B1 (ko) * 2015-02-05 2021-07-14 삼성전자주식회사 터치 센서를 구비한 전자 장치 및 그 구동 방법
KR102460459B1 (ko) * 2015-02-27 2022-10-28 삼성전자주식회사 전자 장치를 이용한 카드 서비스 방법 및 장치
US20170161382A1 (en) * 2015-12-08 2017-06-08 Snapchat, Inc. System to correlate video data and contextual data

Also Published As

Publication number Publication date
EP3510517A1 (en) 2019-07-17
EP3510517B1 (en) 2020-10-21
US20180129853A1 (en) 2018-05-10
US10635879B2 (en) 2020-04-28
AU2017358278B2 (en) 2020-06-11
KR20180051782A (ko) 2018-05-17
AU2017358278A1 (en) 2019-06-20
WO2018088809A1 (en) 2018-05-17
EP3510517A4 (en) 2019-08-07

Similar Documents

Publication Publication Date Title
KR102521333B1 (ko) 사용자 인증과 관련된 사용자 인터페이스 표시 방법 및 이를 구현한 전자 장치
US10841265B2 (en) Apparatus and method for providing information
US10698564B2 (en) User terminal device and displaying method thereof
US10133310B2 (en) Mobile terminal and method for controlling the same
US10078421B2 (en) User terminal apparatus and method of controlling the same
CN110476189B (zh) 用于在电子装置中提供增强现实功能的方法和设备
US9767338B2 (en) Method for identifying fingerprint and electronic device thereof
US20150378557A1 (en) Foldable electronic apparatus and interfacing method thereof
US11636192B2 (en) Secure login with authentication based on a visual representation of data
US9690456B2 (en) Method for controlling window and electronic device for supporting the same
US10928948B2 (en) User terminal apparatus and control method thereof
KR102527291B1 (ko) 사용자 단말 장치, 전자 장치, 시스템 및 그 제어 방법
US10409439B2 (en) User terminal apparatus and controlling method thereof
US10990748B2 (en) Electronic device and operation method for providing cover of note in electronic device
US10481790B2 (en) Method and apparatus for inputting information by using on-screen keyboard
US10055119B2 (en) User input method and apparatus in electronic device
US20150370786A1 (en) Device and method for automatic translation
US20180024976A1 (en) Annotation providing method and device
US11409410B2 (en) User input interfaces
KR20160009323A (ko) 사용자 인터페이스를 활성화하는 방법 및 이를 제공하는 전자 장치
KR20170009688A (ko) 전자 장치 및 이의 제어 방법

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant