KR102443632B1 - 전자 장치, 전자 시스템 및 그 제어 방법 - Google Patents

전자 장치, 전자 시스템 및 그 제어 방법 Download PDF

Info

Publication number
KR102443632B1
KR102443632B1 KR1020170174050A KR20170174050A KR102443632B1 KR 102443632 B1 KR102443632 B1 KR 102443632B1 KR 1020170174050 A KR1020170174050 A KR 1020170174050A KR 20170174050 A KR20170174050 A KR 20170174050A KR 102443632 B1 KR102443632 B1 KR 102443632B1
Authority
KR
South Korea
Prior art keywords
word
password
words
user
processor
Prior art date
Application number
KR1020170174050A
Other languages
English (en)
Other versions
KR20190072898A (ko
Inventor
최찬희
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020170174050A priority Critical patent/KR102443632B1/ko
Priority to PCT/KR2018/015387 priority patent/WO2019124830A1/en
Priority to EP18890533.5A priority patent/EP3662398B1/en
Priority to US16/214,552 priority patent/US11158323B2/en
Publication of KR20190072898A publication Critical patent/KR20190072898A/ko
Application granted granted Critical
Publication of KR102443632B1 publication Critical patent/KR102443632B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/42User authentication using separate channels for security data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/28Constructional details of speech recognition systems
    • G10L15/30Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/602Providing cryptographic facilities or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/24Speech recognition using non-acoustical features
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification techniques
    • G10L17/22Interactive procedures; Man-machine interfaces
    • G10L17/24Interactive procedures; Man-machine interfaces the user being prompted to utter a password or a predefined phrase
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/083Network architectures or network communication protocols for network security for authentication of entities using passwords
    • H04L63/0838Network architectures or network communication protocols for network security for authentication of entities using passwords using one-time-passwords
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0853Network architectures or network communication protocols for network security for authentication of entities using an additional device, e.g. smartcard, SIM or a different communication terminal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2117User registration
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification techniques
    • G10L17/22Interactive procedures; Man-machine interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Biomedical Technology (AREA)
  • Bioethics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)
  • Telephone Function (AREA)

Abstract

전자 장치가 개시된다. 본 전자 장치는 통신부 및 암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택하며, 선택된 복수의 단어를 통신부를 통해 단말 장치로 전송하고, 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성이 수신되면 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증을 수행하는 프로세서를 포함한다.

Description

전자 장치, 전자 시스템 및 그 제어 방법 { ELECTRONIC APPARATUS, ELECTRONIC SYSTEM AND CONTROL METHOD THEREOF }
본 발명은 전자 장치 및 그 제어 방법에 대한 것으로, 더욱 상세하게는 암호 인증을 수행하는 전자 장치 및 그 제어 방법에 대한 것이다.
사용자가 특정 서비스나 어플리케이션 등에 로그인을 시도할 경우 사용자 인증을 위한 비밀번호 입력 과정이 필요하다. 특히, 음성 인식을 통해 비밀번호를 입력하는 경우, 기존에 설정된 비밀번호의 알파벳, 숫자, 특수 기호 등을 정해진 형태에 맞추어 발화하거나, 특정 문장을 사전에 등록하여 발화하는 방법 등이 있을 수 있다. 또한, 보안을 강화하기 위해 화자 인식, 얼굴 인식, 지문 인식 등의 생체 인식을 병행할 수도 있다.
다만, 비밀번호를 직접 발화할 경우 비밀번호가 노출될 우려가 있으며, 알파벳, 숫자, 특수 기호 등은 발화의 형태가 다양하고 발화 길이가 짧아 오인식 문제가 발생할 수도 있다.
일반적인 비밀번호가 아닌 사용자가 지정한 문장을 비밀번호로서 등록하는 경우에도 발화를 하게 됨으로써 비밀번호가 노출될 우려가 있으며, 여전히 오인식 문제가 발생할 수도 있다.
또한, 음성 인식기의 사용에 있어서도 발화의 내용이 서버에 저장되는 형태의 인식기는 비밀번호의 내용을 그대로 저장할 경우 개인정보 보호 문제에서 자유로울 수 없기 때문에 별도의 임베디드 인식기를 사용해야 하는 제한 사항이 있을 수도 있다.
그에 따라, 음성 인식을 통해 비밀번호를 입력하더라도 보안 상의 문제 및 오인식의 문제가 발생하지 않는 인증 방법이 개발될 필요가 있다.
본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은 암호 인증 과정에서의 보안 성능을 향상시키기 위한 전자 장치, 전자 시스템 및 그 제어 방법을 제공함에 있다.
이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따르면, 전자 장치는 통신부 및 암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택하며, 상기 선택된 복수의 단어를 상기 통신부를 통해 단말 장치로 전송하고, 상기 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성이 수신되면 상기 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증을 수행하는 프로세서를 포함한다.
또한, 적어도 하나의 문자를 포함하는 암호 정보가 저장된 스토리지를 더 포함하고, 상기 프로세서는 상기 적어도 하나의 단어에 대응되는 문자가 상기 암호 정보와 일치하면 상기 암호 인증을 수행할 수 있다.
그리고, 상기 프로세서는 상기 복수의 단어 중 제1 단어 및 제2 단어를 포함하는 사용자 음성이 수신되면 상기 제1 단어 및 상기 제2 단어의 수신 순서에 기초하여 상기 제1 단어에 대응되는 제1 문자와 상기 제2 단어에 대응되는 제2 문자를 조합하고, 상기 조합된 문자열이 상기 암호 정보와 일치하면 상기 암호 인증을 수행할 수 있다.
또한, 상기 프로세서는 상기 제1 단어의 수신 시점 및 상기 제2 단어의 수신 시점의 차이가 기설정된 시간 이내이면 상기 제1 문자와 상기 제2 문자를 조합하여 상기 암호 인증을 수행하고, 상기 제1 단어의 수신 시점 및 상기 제2 단어의 수신 시점의 차이가 상기 기설정된 시간을 초과하면 상기 제1 문자 및 상기 제2 문자 각각으로 상기 암호 인증을 수행할 수 있다.
그리고, 디스플레이를 더 포함하고, 상기 프로세서는 상기 암호 입력 이벤트에 따라 암호가 입력되는 UI를 상기 디스플레이를 통해 디스플레이하고, 상기 사용자 음성이 수신되면 상기 수신된 사용자 음성에 대응되는 적어도 하나의 단어를 상기 UI에 입력할 수 있다.
또한, 상기 프로세서는 기설정된 이벤트가 발생되면 상기 UI에 입력된 상기 적어도 하나의 단어에 대응되는 문자가 상기 암호 정보와 일치하는지 식별하고, 상기 적어도 하나의 단어에 대응되는 문자가 상기 암호 정보와 일치하면 상기 암호 인증을 수행할 수 있다.
그리고, 상기 프로세서는 상기 암호 정보에 기초하여 상기 암호 인증에 필요한 문자 타입을 식별하고, 상기 문자 타입에 해당하는 복수의 문자 각각에 대응되는 서로 다른 복수의 단어를 선택할 수 있다.
또한, 상기 복수의 문자는 알파벳, 숫자, 기호, 한글 및 한자 중 적어도 하나를 포함하고, 상기 프로세서는 상기 복수의 문자 및 상기 복수의 단어를 매칭시켜 상기 단말 장치로 전송할 수 있다.
그리고, 상기 프로세서는 상기 사용자의 얼굴 인식, 상기 사용자의 정보 입력, 상기 사용자의 음성 및 상기 전자 장치의 사용 상태 중 적어도 하나에 기초하여 사용자를 식별하고, 상기 식별된 사용자에 기초하여 상기 단말 장치를 식별할 수 있다.
또한, 디스플레이를 더 포함하고, 상기 프로세서는 상기 사용자가 식별되면 상기 단말 장치에 대한 확인을 요청하는 UI를 상기 디스플레이를 통해 디스플레이하고, 상기 사용자의 확인 입력이 수신되면 상기 복수의 단어를 상기 단말 장치로 전송할 수 있다.
그리고, 상기 사용자 음성은 상기 전자 장치에 구비된 마이크를 통해 수신되거나, 외부 장치로부터 수신될 수 있다.
한편, 본 발명의 일 실시 예에 따르면, 전자 시스템은 암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택하며, 선택된 복수의 단어를 단말 장치로 전송하는 전자 장치 및 상기 전자 장치로부터 상기 복수의 단어가 수신되면, 수신된 복수의 단어를 디스플레이하는 단말 장치를 포함하고, 상기 전자 장치는 상기 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성이 수신되면 상기 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증을 수행할 수 있다.
한편, 본 발명의 일 실시 예에 따르면, 전자 장치의 제어 방법은 암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택하는 단계, 상기 선택된 복수의 단어를 단말 장치로 전송하는 단계 및 상기 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성이 수신되면 상기 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증을 수행하는 단계를 포함한다.
또한, 상기 암호 인증을 수행하는 단계는 상기 적어도 하나의 단어에 대응되는 문자가 적어도 하나의 문자를 포함하는 기 저장된 암호 정보와 일치하면 상기 암호 인증을 수행할 수 있다.
그리고, 상기 암호 인증을 수행하는 단계는 상기 복수의 단어 중 제1 단어 및 제2 단어를 포함하는 사용자 음성이 수신되면 상기 제1 단어 및 상기 제2 단어의 수신 순서에 기초하여 상기 제1 단어에 대응되는 제1 문자와 상기 제2 단어에 대응되는 제2 문자를 조합하는 단계 및 상기 조합된 문자열이 상기 암호 정보와 일치하면 상기 암호 인증을 수행하는 단계를 포함할 수 있다.
또한, 상기 암호 인증을 수행하는 단계는 상기 제1 단어의 수신 시점 및 상기 제2 단어의 수신 시점의 차이가 기설정된 시간 이내이면 상기 제1 문자와 상기 제2 문자를 조합하여 상기 암호 인증을 수행하고, 상기 제1 단어의 수신 시점 및 상기 제2 단어의 수신 시점의 차이가 상기 기설정된 시간을 초과하면 상기 제1 문자 및 상기 제2 문자 각각으로 상기 암호 인증을 수행할 수 있다.
그리고, 상기 암호 입력 이벤트에 따라 암호가 입력되는 UI를 디스플레이하는 단계 및 상기 사용자 음성이 수신되면 상기 수신된 사용자 음성에 대응되는 적어도 하나의 단어를 상기 UI에 입력하는 단계를 더 포함할 수 있다.
또한, 상기 암호 인증을 수행하는 단계는 기설정된 이벤트가 발생되면 상기 UI에 입력된 상기 적어도 하나의 단어에 대응되는 문자가 상기 암호 정보와 일치하는지 식별하는 단계 및 상기 적어도 하나의 단어에 대응되는 문자가 상기 암호 정보와 일치하면 상기 암호 인증을 수행하는 단계를 포함할 수 있다.
그리고, 상기 선택하는 단계는 상기 암호 정보에 기초하여 상기 암호 인증에 필요한 문자 타입을 식별하는 단계 및 상기 문자 타입에 해당하는 복수의 문자 각각에 대응되는 서로 다른 복수의 단어를 선택하는 단계를 포함할 수 있다.
또한, 상기 복수의 문자는 알파벳, 숫자, 기호, 한글 및 한자 중 적어도 하나를 포함하고, 상기 전송하는 단계는 상기 복수의 문자 및 상기 복수의 단어를 매칭시켜 상기 단말 장치로 전송할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 전자 장치는 사용자 음성으로 암호 인증을 수행하여 사용자 편의성을 향상시키면서도 암호의 노출을 방지하여 향상된 보안 성능을 제공할 수 있다.
도 1은 전자 시스템의 구성의 일 예를 나타내는 블럭도이다.
도 2a는 전자 장치의 구성의 일 예를 나타내는 블럭도이다.
도 2b는 전자 장치의 세부 구성의 일 예를 나타내는 블럭도이다.
도 3a 내지 도 3c는 복수의 단어를 단말 장치로 전송하는 방법의 일 예를 설명하기 위한 도면들이다.
도 4a는 단말 장치가 복수의 단어를 디스플레이하는 방법의 일 예를 설명하기 위한 도면이다.
도 4b는 단말 장치가 복수의 단어를 디스플레이하는 방법의 다른 예를 설명하기 위한 도면이다.
도 5a는 사용자의 음성에 따른 전자 장치의 동작의 일 예를 설명하기 위한 도면이다.
도 5b는 사용자의 음성에 따른 전자 장치의 동작의 다른 예를 설명하기 위한 도면이다.
도 6은 전자 시스템의 동작을 설명하기 위한 시퀀스도이다.
도 7은 암호 인증 방법의 확장 실시 예를 설명하기 위한 도면이다.
도 8은 암호 인증 방법의 다른 확장 실시 예를 설명하기 위한 도면이다.
도 9는 전자 장치의 제어 방법의 일 예를 설명하기 위한 흐름도이다.
이하에서, 첨부된 도면을 이용하여 본 발명의 다양한 실시 예들에 대하여 구체적으로 설명한다.
도 1은 전자 시스템(1000)의 구성의 일 예를 나타내는 블럭도이다. 도 1에 도시된 바와 같이, 전자 시스템(1000)는 전자 장치(100) 및 단말 장치(200)를 포함한다.
전자 장치(100)는 암호 인증을 수행하는 장치로서, 셋탑박스(STB), 데스크탑 PC, 노트북, 스마트폰, 태블릿 PC, 서버, TV 등일 수 있다. 다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 암호 인증이 필요한 장치라면 어떤 장치라도 무방하다.
전자 장치(100)는 단말 장치(200)와 통신을 수행할 수 있다. 예를 들어, 전자 장치(100)는 단말 장치(200)로 복수의 단어(word)를 전송할 수 있다.
여기서, 전자 장치(100)는 단말 장치(200)에 대한 정보를 저장할 수 있다. 다만, 이에 한정되는 것은 아니며, 전자 장치(100)가 단말 장치(200)에 대한 정보를 저장하고 있지 않은 경우, 전자 장치(100)는 사용자에게 단말 장치(200)에 대한 정보의 입력을 요청할 수 있다.
전자 장치(100)는 사용자 음성을 수신할 수 있다. 예를 들어, 전자 장치(100)는 마이크를 구비하고, 직접 사용자 음성을 수신할 수 있다. 또는, 전자 장치(100)는 단말 장치(200)에 의해 입력된 사용자 음성을 단말 장치(200)로부터 수신할 수도 있다. 또는, 전자 장치(100)는 원격 제어 장치(미도시)와 같은 별도의 장치에 의해 입력된 사용자 음성을 해당 장치로부터 수신할 수도 있다.
여기서, 원격 제어 장치는 전자 장치(100)를 제어하기 위해 제조된 장치일 수 있다. 다만, 이에 한정되는 것은 아니며, 원격 제어 장치는 스마트폰과 같은 장치에 전자 장치(100)를 제어하기 위한 어플리케이션이 설치된 장치일 수도 있다.
전자 장치(100)는 IR 수신부를 포함하며, IR 수신부를 통해 원격 제어 장치로부터의 제어 신호를 수신할 수 있다. 다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 블루투스, 와이파이 등을 통해 원격 제어 장치로부터 제어 신호를 수신할 수도 있으며, 원격 제어 장치로부터 제어 신호를 수신할 수 있는 통신 규격이라면 어떠한 것이라도 무방하다.
원격 제어 장치는 사용자 음성을 수신하기 위한 마이크 및 수신된 사용자 음성을 전자 장치(100)로 전송하기 위한 통신부를 포함할 수 있다.
전자 장치(100)는 사용자 음성으로부터 복수의 단어 중 적어도 하나의 단어를 인식하고, 인식된 단어에 기초하여 암호 인증을 수행할 수 있다. 여기서, 전자 장치(100)는 사용자 음성을 텍스트로 변환하고, 텍스트로부터 적어도 하나의 단어를 인식할 수 있다. 또는, 전자 장치(100)는 사용자 음성을 외부 서버(미도시)로 전송하고, 외부 서버로부터 사용자 음성에 대응되는 텍스트를 수신하여 복수의 단어를 인식할 수도 있다. 인식된 단어를 통해 암호 인증을 수행하는 방법에 대하여는 후술한다.
단말 장치(200)는 전자 장치(100)로부터 복수의 단어를 수신하여 디스플레이하는 장치로서, 사용자의 스마트폰, 태블릿 PC, 데스크탑 PC, 노트북 등일 수 있다. 다만, 이에 한정되는 것은 아니며, 단말 장치(200)는 디스플레이를 구비한 장치이면 어떠한 장치라도 무방하다.
단말 장치(200)는 사용자 음성을 수신하기 위한 마이크를 포함할 수 있다. 이 경우, 단말 장치(200)는 수신된 사용자 음성을 전자 장치(100)로 전송할 수 있다.
한편, 이상에서는 단말 장치(200)가 사용자 소유인 것으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 단말 장치(200)는 전자 장치(100)에 등록된 장치이며, 사용자 소유가 아닐 수도 있다.
이상에서는 전자 시스템(1000)에 포함된 전자 장치(100) 및 단말 장치(200)의 동작에 대해 간략하게 설명하였다. 이하에서는 전자 장치(100)의 동작을 중심으로 암호 인증 방법에 대하여 구체적으로 설명한다.
도 2a는 전자 장치(100)의 구성의 일 예를 나타내는 블럭도이다.
도 2a에 따르면, 전자 장치(100)는 통신부(110) 및 프로세서(120)를 포함한다.
통신부(110)는 단말 장치(200)와 통신을 수행하기 위한 구성이다. 예를 들어, 통신부(110)는 BT(BlueTooth), BLE(Bluetooth Low Energy), WI-FI(Wireless Fidelity), Zigbee 등과 같이 다양한 통신 방식을 지원할 수 있다. 다만, 이에 한정되는 것은 아니며, 통신 규격 중 단말 장치(200)와의 무선 통신이 가능하다면 어떤 것이라도 무방하다.
또는, 통신부(110)는 단말 장치(200)와의 유선 통신이 가능한 통신 인터페이스를 포함할 수 있다. 예를 들어, 통신부(110)는 HDMI, MHL, USB, RGB, D-SUB, DVI 등과 같은 통신 인터페이스를 포함할 수 있다.
또한, 전자 장치(100)는 외부 디스플레이 장치와 연결되어 암호 인증을 위한 UI를 외부 디스플레이 장치로 전송할 수도 있다. 이 경우, 전자 장치(100)는 HDMI, DP, 썬더볼트, USB, RGB, D-SUB, DVI 등과 같은 통신 인터페이스를 통해 외부 디스플레이 장치와 연결될 수 있으며, 통신부(110)는 유선 통신 인터페이스를 모두 포함할 수 있다. 또한, 유선 통신 인터페이스는 비디오 출력 및 오디오 출력을 하나의 포트를 통해 수행하는 규격 뿐만 아니라 비디오 출력 및 오디오 출력을 두 개의 포트를 통해 수행하는 규격도 포함할 수 있다.
다만, 이에 한정되는 것은 아니며, 유선 통신 인터페이스는 비디오 출력 및 오디오 출력 중 적어도 하나를 수행할 수 있는 규격이라면 어떠한 것이라도 무방하다.
통신부(110)는 이상에서 설명한 유선 통신 인터페이스 외에도 외부 디스플레이 장치 또는 단말 장치(200)와 유선 통신이 가능한 모든 통신 규격의 인터페이스를 포함할 수 있다.
프로세서(120)는 전자 장치(100)의 동작을 전반적으로 제어한다.
일 실시 예에 따라 프로세서(120)는 디지털 시그널 프로세서(digital signal processor(DSP), 마이크로 프로세서(microprocessor), TCON(Time controller)으로 구현될 수 있다. 다만, 이에 한정되는 것은 아니며, 중앙처리장치(central processing unit(CPU)), MCU(Micro Controller Unit), MPU(micro processing unit), 컨트롤러(controller), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)), ARM 프로세서 중 하나 또는 그 이상을 포함하거나, 해당 용어로 정의될 수 있다. 또한, 프로세서(120)는 프로세싱 알고리즘이 내장된 SoC(System on Chip), LSI(large scale integration)로 구현될 수도 있고, FPGA(Field Programmable gate array) 형태로 구현될 수도 있다.
프로세서(120)는 암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택할 수 있다. 예를 들어, 프로세서(120)는 암호 입력 이벤트가 발생되면, 0부터 9까지의 문자 각각에 대응되는 dove, guide, lady, girl, boy, go, soft, code, suit, bird를 선택할 수 있다. 여기서, 프로세서(120)는 전자 장치(100)에 저장된 단어 풀에서 임의로 서로 다른 복수의 단어를 선택할 수 있다.
단어 풀은 복수의 영어 단어 뿐만 아니라 복수의 한글 단어를 포함할 수도 있다. 다만, 이에 한정되는 것은 아니며, 음성 인식이 가능한 언어에 해당하는 단어라면 어떠한 것이라도 무방하다.
프로세서(120)는 복수의 언어 중 하나의 언어 뿐만 아니라 적어도 두 개의 언어에 대응되는 단어 풀로부터 복수의 단어를 선택할 수도 있다. 예를 들어, 프로세서(120)는 암호 입력 이벤트가 발생되면, 0부터 9까지의 문자 각각에 대응되는 dove, guide, lady, girl, 학교, go, soft, 전자, suit, bird를 선택할 수도 있다.
한편, 암호 입력 이벤트는 웹 싸이트에 로그인하는 경우, 외부 서버에 접속하는 경우 등과 같이 다양한 경우를 포함할 수 있으며, 암호 입력이 요구되는 경우라면 어떠한 경우라도 무방하다.
프로세서(120)는 선택된 복수의 단어를 통신부(110)를 통해 단말 장치(200)로 전송할 수 있다. 프로세서(120)는 전송된 복수의 단어가 단말 장치(200)에서 디스플레이되로독 제어 명령을 더 전송할 수 있다.
이때, 프로세서(120)는 복수의 단어를 순서대로 전송할 수 있다. 예를 들어, 0부터 9까지의 문자 각각에 대응되는 dove, guide, lady, girl, boy, go, soft, code, suit, bird가 선택된 경우, 프로세서(120)는 선택된 단어를 순서대로 전송할 수 있다. 단말 장치(200)는 전송된 순서대로 복수의 단어를 디스플레이할 수 있다.
또는, 프로세서(120)는 각 단어에 순서에 따른 식별자를 부여한 상태로 단말 장치(200)로 전송할 수도 있다. 단말 장치(200)는 식별자에 기초하여 복수의 단어를 순서대로 디스플레이할 수 있다.
또는, 프로세서(120)는 각 단어에 대응되는 문자를 매칭하여 단말 장치(200)로 전송할 수도 있다. 이 경우, 단말 장치(200)는 복수의 문자 각각을 복수의 단어 각각에 매칭시킨 상태로 디스플레이할 수도 있다.
한편, 이상에서는 복수의 문자가 0부터 9인 경우를 예로 들어 설명하였으나, 복수의 문자는 알파벳, 숫자, 기호, 한글 및 한자 중 적어도 하나를 포함할 수 있다. 이 경우, 프로세서(120)는 복수의 문자 및 복수의 단어를 매칭시켜 단말 장치(200)로 전송할 수 있다. 그리고, 단말 장치(200)는 복수의 문자 각각을 복수의 단어 각각에 매칭시킨 상태로 디스플레이할 수 있다.
한편, 전자 장치(100)는 적어도 하나의 문자를 포함하는 암호 정보가 저장된 스토리지를 더 포함할 수 있다. 예를 들어, 사용자가 "abc"를 암호로 설정하면, 프로세서(120)는 암호 "abc"를 사용자 정보와 함께 스토리지에 저장할 수 있다. 여기서, 사용자 정보는 사용자 이름을 의미할 수도 있으나, 이에 한정되는 것은 아니다. 예를 들어, 사용자 정보는 ID, 사용자 얼굴 이미지, 사용자 음성 등과 같이 사용자를 식별할 수 있는 정보라면 어떠한 것이라도 무방하다.
프로세서(120)는 암호 정보에 기초하여 암호 인증에 필요한 문자 타입을 식별하고, 문자 타입에 해당하는 복수의 문자 각각에 대응되는 서로 다른 복수의 단어를 선택할 수 있다. 예를 들어, 암호가 "abc"인 경우, 프로세서(120)는 알파벳 전체에 대응되는 서로 다른 단어를 선택할 수 있다. 또는, 암호가 "abc123"인 경우, 프로세서(120)는 알파벳 및 숫자 전체에 대응되는 서로 다른 단어를 선택할 수 있다.
여기서, 문자 타입은 알파벳, 숫자, 기호, 한글 및 한자 등일 수 있다. 다만, 이에 한정되는 것은 아니며, 문자 타입은 암호로 사용할 수 있는 문자라면 그 종류에 제한이 없다.
한편, 프로세서(120)는 사용자의 얼굴 인식, 사용자의 정보 입력, 사용자의 음성 및 전자 장치(100)의 사용 상태 중 적어도 하나에 기초하여 사용자를 식별하고, 식별된 사용자에 기초하여 단말 장치(200)를 식별할 수 있다.
예를 들어, 프로세서(120)는 사용자가 입력한 ID에 기초하여 스토리지에 저장된 사용자 정보를 식별하고, 사용자 정보에 포함된 사용자의 스마트폰을 식별할 수 있다.
또는, 프로세서(120)는 전자 장치(100)에 구비된 카메라에 의해 촬영된 사용자 이미지로부터 사용자를 식별할 수도 있다. 또는, 프로세서(120)는 전자 장치(100)에 구비된 마이크에 의해 수신된 사용자 음성으로부터 사용자를 식별할 수도 있다. 또는, 프로세서(120)는 전자 장치(100)의 사용자별 주사용 기능, 사용 패턴 등을 저장하고, 현재 사용자의 사용 상태를 분석하여 사용자를 식별할 수도 있다.
여기서, 프로세서(120)는 암호 입력 이벤트가 발생하면 사용자 식별을 위한 동작을 수행할 수 있다. 다만, 이에 한정되는 것은 아니며, 프로세서(120)는 암호 입력 이벤트가 발생하기 전이라도 이상과 같은 방법을 통해 사용자를 식별해둘 수도 있다.
프로세서(120)는 식별된 사용자에 기초하여 스토리지에 기 저장된 복수의 암호 정보 중 하나를 식별할 수 있다. 예를 들어, 스토리지에는 사용자 1부터 사용자 10까지의 복수의 사용자 정보 및 각 사용자의 암호 정보를 저장할 수 있다. 프로세서(120)는 식별된 사용자에 대응되는 암호 정보를 식별하고, 식별된 암호 정보에 기초하여 서로 다른 복수의 단어를 선택할 수 있다.
한편, 전자 장치(100)는 디스플레이를 더 포함하고, 프로세서(120)는 사용자가 식별되면 단말 장치(200)에 대한 확인을 요청하는 UI를 디스플레이를 통해 디스플레이하고, 사용자의 확인 입력이 수신되면 복수의 단어를 단말 장치(200)로 전송할 수도 있다.
이상과 같이 사용자를 식별하기 위한 정보 및 사용자에 대응되는 단말 장치(200)에 대한 정보는 스토리지에 기 저장되어 있을 수 있다. 다만, 이에 한정되는 것은 아니며, 사용자를 식별하기 위한 정보만이 스토리지에 기 저장되어 있을 수도 있다. 이 경우, 프로세서(120)는 사용자를 식별하고, 식별된 사용자에 대응되는 단말 장치(200)에 대한 정보가 없으므로, 단말 장치(200)에 대한 정보의 입력을 요구할 수도 있다.
또는, 프로세서(120)는 사용자를 식별하고, 식별된 사용자에 대응되는 단말 장치(200)에 대한 정보가 없는 경우, 전자 장치(100) 주변의 외부 장치를 식별하기 위한 동작을 수행할 수 있다. 그리고, 프로세서(120)는 전자 장치(100) 주변에서 식별된 외부 장치의 리스트를 제공하고, 사용자에게 복수의 단어를 전송받을 장치의 선택을 요구할 수도 있다.
예를 들어, 프로세서(120)는 블루투스 기능을 턴 온하고, 전자 장치(100) 주변의 외부 장치를 감지하여 감지된 외부 장치의 리스트를 제공할 수도 있다. 만약, 사용자가 리스트 상의 외부 장치 하나를 선택하면, 프로세서(120)는 선택된 외부 장치로 복수의 단어를 전송할 수 있다. 사용자가 리스트 상의 외부 장치를 선택하지 않으면, 프로세서(120)는 복수의 단어를 전송할 단말 장치(200)의 입력을 요청하거나 단말 장치(200)에 대한 정보가 없음을 안내할 수 있다. 이때, 사용자는 사용자의 스마트폰의 폰 번호를 입력함으로써 단말 장치(200)에 정보를 입력할 수도 있다.
한편, 스토리지는 한 명의 사용자에 대해 복수의 단말 장치(200)에 대한 정보를 저장하고, 프로세서(120)는 식별된 사용자에 대응되는 복수의 단말 장치(200)가 식별되면, 단말 장치(200)의 타입에 기초하여 복수의 단어를 전송할 단말 장치(200)를 결정할 수 있다.
예를 들어, 프로세서(120)는 식별된 사용자에 대응되는 태블릿 PC 및 스마트폰이 식별되면, 스마트폰으로 복수의 단어를 전송할 수 있다.
프로세서(120)는 식별된 사용자에 대응되는 동일한 타입의 복수의 단말 장치(200)가 식별되면, 디스플레이의 크기에 기초하여 복수의 단어를 전송할 단말 장치(200)를 결정할 수 있다.
예를 들어, 프로세서(120)는 식별된 사용자에 대응되는 스마트폰 1 및 스마트폰 2가 식별되면, 디스플레이의 크기가 더 작은 스마트폰 1로 복수의 단어를 전송할 수 있다.
한편, 프로세서(120)는 식별된 사용자에 기초하여 복수의 문자를 결정할 수도 있다. 예를 들어, 프로세서(120)는 스토리지에 저장된 암호는 "abc"이고, 식별된 사용자가 어린 아이인 경우 알파벳 각각에 대응되는 서로 다른 복수의 단어를 선택할 수 있다. 또는, 프로세서(120)는 스토리지에 저장된 암호는 "abc"이고, 식별된 사용자가 어른인 경우 알파벳, 숫자 및 기호 각각에 대응되는 서로 다른 복수의 단어를 선택할 수 있다.
다만, 스토리지에 저장된 암호가 "abc123*"와 같이 알파벳, 숫자 및 기호를 모두 포함하는 경우에는 식별된 사용자가 어린 아이더라도, 프로세서(120)는 알파벳, 숫자 및 기호 각각에 대응되는 서로 다른 복수의 단어를 선택할 수 있다.
또한, 프로세서(120)는 식별된 사용자에 대응되는 단말 장치(200)에 기초하여 복수의 문자를 결정할 수도 있다. 예를 들어, 프로세서(120)는 스토리지에 저장된 암호는 "abc"이고, 식별된 단말 장치(200)가 디스플레이의 크기가 작은 스마트폰인 경우 알파벳 각각에 대응되는 서로 다른 복수의 단어를 선택할 수 있다. 또는, 프로세서(120)는 스토리지에 저장된 암호는 "abc"이고, 식별된 단말 장치(200)가 디스플레이의 크기가 큰 태블릿 PC인 경우 알파벳, 숫자 및 기호 각각에 대응되는 서로 다른 복수의 단어를 선택할 수 있다.
다만, 스토리지에 저장된 암호가 "abc123*"와 같이 알파벳, 숫자 및 기호를 모두 포함하는 경우에는 식별된 단말 장치(200)가 디스플레이의 크기가 작은 스마트폰인 경우라도, 프로세서(120)는 알파벳, 숫자 및 기호 각각에 대응되는 서로 다른 복수의 단어를 선택할 수 있다.
이상에서는 프로세서(120)가 선택된 복수의 단어를 단말 장치(200)로 전송하는 동작에 대하여 설명하였다. 이하에서는 프로세서(120)가 복수의 단어를 단말 장치(200)로 전송한 후, 사용자 음성을 수신함에 따른 동작에 대하여 설명한다. 또한, 설명의 편의를 위하여, 프로세서(120)는 0부터 9까지의 문자 각각에 대응되는 dove, guide, lady, girl, boy, go, soft, code, suit, bird를 단말 장치(200)로 전송한 것으로 설명한다.
프로세서(120)는 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성이 수신되면 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증을 수행할 수 있다. 구체적으로, 프로세서(120)는 적어도 하나의 단어에 대응되는 문자가 암호 정보와 일치하면 암호 인증을 수행할 수 있다.
예를 들어, 암호 "75"가 스토리지에 저장되어 있고 dove, guide, lady, girl, boy, go, soft, code, suit, bird가 단말 장치(200)로 전송된 후 사용자가 code, go를 발화하면, 프로세서(120)는 code, go 각각에 대응되는 문자인 7, 5를 식별하고, 스토리지에 저장된 암호 정보와 비교하여 인증을 수행할 수 있다.
여기서, 프로세서(120)는 복수의 단어 중 제1 단어 및 제2 단어를 포함하는 사용자 음성이 수신되면 제1 단어 및 제2 단어의 수신 순서에 기초하여 제1 단어에 대응되는 제1 문자와 제2 단어에 대응되는 제2 문자를 조합하고, 조합된 문자열이 암호 정보와 일치하면 암호 인증을 수행할 수 있다.
예를 들어, 상술한 예에서 사용자가 go, code를 발화하면, 프로세서(120)는 사용자의 발화 순서에 따라 5, 7을 식별하고, 인증을 거부하거나 재인증을 요구할 수 있다.
그리고, 프로세서(120)는 제1 단어의 수신 시점 및 제2 단어의 수신 시점의 차이가 기설정된 시간 이내이면 제1 문자와 제2 문자를 조합하여 암호 인증을 수행하고, 제1 단어의 수신 시점 및 제2 단어의 수신 시점의 차이가 기설정된 시간을 초과하면 제1 문자 및 제2 문자 각각으로 암호 인증을 수행할 수도 있다.
예를 들어, 프로세서(120)는 code의 수신 시점 및 go의 수신 시점의 차이가 3초 이내이면, 7, 5를 식별하고, 7, 5와 암호 정보를 비교하여 암호 인증을 수행할 수 있다. 또는, 프로세서(120)는 code의 수신 시점 및 go의 수신 시점의 차이가 3초를 초과하면, 7과 암호 정보를 비교하여 인증을 거부하고, 5와 암호 정보를 비교하여 인증을 거부할 수 있다.
한편, 전자 장치(100)는 디스플레이를 더 포함하고, 프로세서(120)는 암호 입력 이벤트에 따라 암호가 입력되는 UI를 디스플레이를 통해 디스플레이하고, 사용자 음성이 수신되면 수신된 사용자 음성에 대응되는 적어도 하나의 단어를 UI에 입력할 수 있다.
상술한 예에서, 프로세서(120)는 암호가 입력되는 UI를 디스플레이를 통해 디스플레이하고, code, go를 발화한 사용자 음성이 수신되면 code, go를 UI에 입력하여 디스플레이할 수 있다.
다만, 이에 한정되는 것은 아니며, 프로세서(120)는 하나의 단어가 수신되고 수신된 단어에 대응되는 문자가 식별될 때마다 "*"를 UI에 입력하여 디스플레이할 수 있다. 사용자는 UI에 입력된 "*"에 기초하여 단어의 입력 여부를 판단할 수 있다. 여기서, "*"는 일 실시 예에 불과하고, 단어가 입력되고 있음을 나타낼 수 있는 문자라면 어떠한 것이라도 무방하다.
프로세서(120)는 기설정된 이벤트가 발생되면 UI에 입력된 적어도 하나의 단어에 대응되는 문자가 암호 정보와 일치하는지 식별하고, 적어도 하나의 단어에 대응되는 문자가 암호 정보와 일치하면 암호 인증을 수행할 수 있다.
예를 들어, 프로세서(120)는 하나의 단어가 수신되고 수신된 단어에 대응되는 단어가 식별될 때마다 기 식별된 문자열이 암호 정보와 일치하는지 식별할 수 있다. 상술한 예에서, 프로세서(120)는 code가 수신되고 7이 식별되면, 식별된 7이 암호 정보와 일치하는지 식별할 수 있다. 이 경우, 프로세서(120)는 code가 수신된 후 기설정된 시간이 경과한 후, 인증을 거부할 수 있다. 또는, 프로세서(120)는 code의 수신 후기설정된 시간 이내에 go가 수신되고 5가 식별되면, 기 식별된 7, 5가 암호 정보와 일치하는지 식별할 수 있다.
또는, 기설정된 이벤트는 사용자 음성의 수신 완료 후 기설정된 시간의 경과를 의미할 수도 있다. 상술한 예에서, 프로세서(120)는 code 및 go가 수신되고 사용자의 추가 음성이 수신되지 않는 상태로 2초가 경과하면 code 및 go에 대응되는 7, 5가 암호 정보와 일치하는지 식별할 수 있다.
또는, 프로세서(120)는 기설정된 사용자 음성의 입력에 따라 UI에 입력된 적어도 하나의 단어에 대응되는 문자가 암호 정보와 일치하는지 식별할 수도 있다. 상술한 예에서, 사용자가 code 및 go를 발화한 후 "확인"을 추가 발화하면, 프로세서(120)는 code 및 go에 대응되는 7, 5를 식별하고, "확인"이라는 발화에 따라 식별된 7, 5가 암호 정보와 일치하는 식별할 수 있다. 여기서, "확인"은 복수의 단어를 선택하기 위한 단어 풀에서 제외될 수 있다.
또는, 전자 장치(100)가 컴퓨터와 같은 입력 수단을 구비한 장치인 경우, 기설정된 이벤트는 엔터키를 입력하는 동작일 수도 있다.
한편, 프로세서(120)는 단말 장치(200)로 전송한 복수의 단어 및 복수의 단어 각각에 대응되는 문자를 기설정된 시간 동안 스토리지에 저장하고, 기설정된 시간이 경과하면 복수의 단어 및 복수의 단어 각각에 대응되는 문자를 삭제할 수 있다.
상술한 예에서, 프로세서(120)는 단말 장치(200)로 전송한 dove, guide, lady, girl, boy, go, soft, code, suit, bird 및 전송한 복수의 단어 각각에 대응되는 0부터 9까지의 문자를 스토리지에 저장하고, 60초 내에 암호 인증이 이루어지지 않으면 dove, guide, lady, girl, boy, go, soft, code, suit, bird 및 전송한 복수의 단어 각각에 대응되는 0부터 9를 스토리지에서 삭제할 수 있다.
이상과 같이 프로세서(120)는 암호 인증을 수행할 수 있다.
도 2b는 전자 장치(100)의 세부 구성의 일 예를 나타내는 블럭도이다. 전자 장치(100)는 통신부(110) 및 프로세서(120)를 포함할 수 있다. 또한, 도 2b에 따르면, 전자 장치(100)는 스토리지(130), 디스플레이(140), 사용자 인터페이스부(150), 오디오 처리부(160), 비디오 처리부(170), 스피커(180), 버튼(181), 마이크(182)를 더 포함할 수도 있다. 도 2b에 도시된 구성요소들 중 도 2a에 도시된 구성요소와 중복되는 부분에 대해서는 자세한 설명을 생략하도록 한다.
프로세서(120)는 스토리지(130)에 저장된 각종 프로그램을 이용하여 전자 장치(100)의 동작을 전반적으로 제어한다.
구체적으로, 프로세서(120)는 RAM(121), ROM(122), 메인 CPU(123), 그래픽 처리부(124), 제1 내지 n 인터페이스(125-1 ~ 125-n), 버스(126)를 포함한다.
RAM(121), ROM(122), 메인 CPU(123), 그래픽 처리부(124), 제1 내지 n 인터페이스(125-1 ~ 125-n) 등은 버스(126)를 통해 서로 연결될 수 있다.
제1 내지 n 인터페이스(125-1 내지 125-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
메인 CPU(123)는 스토리지(130)에 액세스하여, 스토리지(130)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 스토리지(130)에 저장된 각종 프로그램 등을 이용하여 다양한 동작을 수행한다.
ROM(122)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴온 명령이 입력되어 전원이 공급되면, 메인 CPU(123)는 ROM(122)에 저장된 명령어에 따라 스토리지(130)에 저장된 O/S를 RAM(121)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU(123)는 스토리지(130)에 저장된 각종 어플리케이션 프로그램을 RAM(121)에 복사하고, RAM(121)에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.
그래픽 처리부(124)는 연산부(미도시) 및 렌더링부(미도시)를 이용하여 아이콘, 이미지, 텍스트 등과 같은 다양한 객체를 포함하는 화면을 생성한다. 연산부(미도시)는 수신된 제어 명령에 기초하여 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성값을 연산한다. 렌더링부(미도시)는 연산부(미도시)에서 연산한 속성값에 기초하여 객체를 포함하는 다양한 레이아웃의 화면을 생성한다. 렌더링부(미도시)에서 생성된 화면은 디스플레이(140)의 디스플레이 영역 내에 표시된다.
한편, 상술한 프로세서(120)의 동작은 스토리지(130)에 저장된 프로그램에 의해 이루어질 수 있다.
스토리지(130)는 전자 장치(100)를 구동시키기 위한 O/S(Operating System) 소프트웨어 모듈, 사용자 정보 모듈 및 암호 인증 모듈 등과 같이 다양한 데이터를 저장한다.
통신부(110)는 다양한 유형의 통신방식에 따라 다양한 유형의 외부 장치와 통신을 수행하는 구성이다. 통신부(110)는 와이파이 칩(111), 블루투스 칩(112), 무선 통신 칩(113), NFC 칩(114) 등을 포함한다. 프로세서(120)는 통신부(110)를 이용하여 각종 외부 장치와 통신을 수행한다.
와이파이 칩(111), 블루투스 칩(112)은 각각 WiFi 방식, 블루투스 방식으로 통신을 수행한다. 와이파이 칩(111)이나 블루투스 칩(112)을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 무선 통신 칩(113)은 IEEE, 지그비(zigbee), 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evoloution) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다. NFC 칩(114)은 135kHz, 13.56MHz, 433MHz, 860~960MHz, 2.45GHz 등과 같은 다양한 RF-ID 주파수 대역들 중에서 13.56MHz 대역을 사용하는 NFC(Near Field Communication) 방식으로 동작하는 칩을 의미한다.
또한, 통신부(110)는 HDMI, MHL, USB, DP, 썬더볼트, RGB, D-SUB, DVI 등과 같은 유선 통신 인터페이스를 더 포함할 수 있다. 프로세서(120)는 통신부(110)의 유선 통신 인터페이스를 통해 디스플레이 장치와 연결될 수 있다. 이 경우, 프로세서(120)는 유선 통신 인터페이스를 통해 암호 인증을 수행하기 위한 UI를 디스플레이 장치로 전송할 수 있다.
디스플레이(140)는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 디스플레이, PDP(Plasma Display Panel) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 디스플레이(140) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다. 한편, 디스플레이(140)는 터치 감지부와 결합하여 터치 스크린으로 구현될 수 있다.
사용자 인터페이스부(150)는 다양한 사용자 인터랙션(interaction)을 수신한다. 여기서, 사용자 인터페이스부(150)는 전자 장치(100)의 구현 예에 따라 다양한 형태로 구현 가능하다. 예를 들어, 사용자 인터페이스부(150)는 전자 장치(100)에 구비된 버튼, 사용자 음성을 수신하는 마이크, 사용자 모션을 감지하는 카메라 등일 수 있다. 또는, 전자 장치(100)가 터치 기반의 단말 장치로 구현되는 경우 사용자 인터페이스부(150)는 터치패드와 상호 레이어 구조를 이루는 터치 스크린 형태로 구현될 수도 있다. 이 경우, 사용자 인터페이스부(150)는 상술한 디스플레이(150)로 사용될 수 있게 된다.
오디오 처리부(160)는 오디오 데이터에 대한 처리를 수행하는 구성요소이다. 오디오 처리부(160)에서는 오디오 데이터에 대한 디코딩이나 증폭, 노이즈 필터링 등과 같은 다양한 처리가 수행될 수 있다.
비디오 처리부(170)는 비디오 데이터에 대한 처리를 수행하는 구성요소이다. 비디오 처리부(170)에서는 비디오 데이터에 대한 디코딩, 스케일링, 노이즈 필터링, 프레임 레이트 변환, 해상도 변환 등과 같은 다양한 이미지 처리를 수행할 수 있다.
스피커(180)는 오디오 처리부(160)에서 처리된 각종 오디오 데이터 뿐만 아니라 각종 알림 음이나 음성 메시지 등을 출력하는 구성요소이다.
버튼(181)은 전자 장치(100)의 본체 외관의 전면부나 측면부, 배면부 등의 임의의 영역에 형성된 기계적 버튼, 터치 패드, 휠 등과 같은 다양한 유형의 버튼이 될 수 있다.
마이크(182)는 사용자 음성이나 기타 소리를 입력받아 오디오 데이터로 변환하기 위한 구성이다.
이상과 같은 방법을 통해 프로세서(120)는 보안을 유지하면서도 음성을 통한 암호 인증을 수행할 수 있다.
이하에서는 도면을 통해 전자 장치(100)의 동작을 구체적으로 설명한다.
도 3a 내지 도 3c는 복수의 단어를 단말 장치(200)로 전송하는 방법의 일 예를 설명하기 위한 도면들이다.
도 3a에 도시된 바와 같이, 전자 장치(100)는 디스플레이 장치와 유선 연결될 수 있다. 다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 디스플레이 장치와 무선 연결될 수도 있다.
전자 장치(100)는 디스플레이 장치로 컨텐츠를 제공하고, 디스플레이 장치는 컨텐츠를 디스플레이할 수 있다. 이때, 컨텐츠의 디스플레이 중 물품 구매를 위한 결제 등과 같이 암호 입력 이벤트가 발생되면, 전자 장치(100)의 프로세서(120)는 먼저 사용자를 식별하기 위한 동작을 수행할 수 있다.
예를 들어, 프로세서(120)는 사용자의 얼굴 인식, 사용자의 정보 입력, 사용자의 음성 및 전자 장치의 사용 상태 중 적어도 하나에 기초하여 사용자를 식별할 수 있다. 도 3a는 사용자가 Mike라는 아이디(ID)를 입력한 상태를 나타내며, 프로세서(120)는 사용자의 정보 입력에 기초하여 사용자를 식별할 수 있다.
도 3b는 스토리지(130)에 저장된 정보의 일 예를 나타내는 도면으로, 프로세서(120)는 스토리지(130)에 저장된 정보에서 Mike에 대응되는 암호 정보 "abc" 및 단말 장치(200) "smartphone #1"을 식별할 수 있다.
프로세서(120)는 암호 정보에 포함된 문자에 기초하여 서로 다른 복수의 단어를 선택할 수 있다. 예를 들어, 프로세서(120)는 알파벳 각각에 대응되는 서로 다른 복수의 단어를 선택할 수 있다.
프로세서(120)는 서로 다른 복수의 단어를 선택하는 경우에 룰 기반의 랜덤 선택 방식을 이용할 수 있다. 다만, 이에 한정되는 것은 아니며, 프로세서(120)는 서로 다른 복수의 단어를 선택하는 경우에 룰이 적용되지 않는 랜덤 선택 방식을 이용할 수도 있다. 랜덤 선택 방식은 공지된 기술이므로 구체적인 설명은 생략한다.
프로세서(120)는 선택된 복수의 단어를 단말 장치(200)로 전송할 수 있다. 상술한 예에서, 프로세서(120)는 Mike에 대응되는 "smartphone #1"으로 선택된 복수의 단어를 전송할 수 있다.
이때, 프로세서(120)는 복수의 단어를 전송하기 위한 확인 절차를 거칠 수도 있다. 예를 들어, 프로세서(120)는 도 3c에 도시된 바와 같이, "Smartphone #1로 인증을 위한 정보를 전송할까요?"와 같은 화면을 디스플레이 장치로 전송할 수 있다. 디스플레이 장치는 해당 문구를 디스플레이하고, 사용자로부터 확인 입력이 수신되면, 확인 입력에 대응되는 신호를 전자 장치(100)로 전송할 수 있다. 프로세서(120)는 디스플레이 장치로부터 확인 입력에 대응되는 신호가 수신되면, Smartphone #1로 선택된 복수의 단어를 전송할 수 있다.
도 4a는 단말 장치(200)가 복수의 단어를 디스플레이하는 방법의 일 예를 설명하기 위한 도면이다.
단말 장치(200)는 전자 장치(100)로부터 복수의 단어를 수신할 수 있다. 이때, 전자 장치(100)는 무선 통신을 통해 단말 장치(200)로 복수의 단어를 전송할 수 있다. 다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 유선 통신을 통해 단말 장치(200)로 복수의 단어를 전송할 수도 있다.
도 4a에 도시된 바와 같이, 단말 장치(200)는 수신된 복수의 단어를 디스플레이할 수 있다. 예를 들어, 0부터 9에 각각 대응되는 W0부터 W9의 복수의 단어가 수신되면, 단말 장치(200)는 W0부터 W9를 디스플레이할 수 있다.
도 4b는 단말 장치(200)가 복수의 단어를 디스플레이하는 방법의 다른 예를 설명하기 위한 도면이다.
또는, 전자 장치(100)는 선택된 복수의 단어 및 복수의 단어 각각에 대응되는 문자를 단말 장치(200)로 전송할 수도 있다. 이 경우, 단말 장치(200)는 도 4b에 도시된 바와 같이, 복수의 단어 및 복수의 단어 각각에 대응되는 문자를 매칭시켜 디스플레이할 수도 있다.
한편, 도 4a 및 도 4b에서는 단말 장치(200)가 수신된 복수의 단어를 곧바로 디스플레이하는 것으로 설명하였으나, 단말 장치(200)는 수신된 복수의 단어를 디스플레이하기 전에 사용자를 확인하는 동작을 더 수행할 수도 있다.
예를 들어, 단말 장치(200)는 복수의 단어가 수신되면 사용자의 얼굴 인식, 지문 인식, 홍채 인식, 음성 인식 및 사용자의 정보 입력 중 적어도 하나를 통해 사용자를 식별할 수 있다. 단말 장치(200)는 식별된 사용자가 단말 장치(200)에 등록된 사용자인 경우, 복수의 단어를 디스플레이할 수 있다.
또는, 전자 장치(100)는 복수의 단어와 함께 사용자에 대한 정보를 단말 장치(200)로 전송할 수도 있다. 이 경우, 단말 장치(200)는 식별된 사용자가 수신된 사용자에 대한 정보와 일치하는 경우, 복수의 단어를 디스플레이할 수도 있다.
도 5a는 사용자의 음성에 따른 전자 장치(100)의 동작의 일 예를 설명하기 위한 도면이다.
도 5a에 도시된 바와 같이, 프로세서(120)는 사용자의 음성이 수신할 수 있다. 여기서, 프로세서(120)는 전자 장치(100)에 구비된 마이크(182)를 통해 사용자 음성을 직접 수신할 수 있다. 또는, 프로세서(120)는 디스플레이 장치로부터 사용자 음성을 수신할 수도 있다.
프로세서(120)는 수신된 사용자의 음성으로부터 적어도 하나의 단어를 식별하고, 식별된 단어를 디스플레이 장치로 전송할 수 있다. 이 경우, 디스플레이 장치는 Password에 수신된 단어를 디스플레이할 수 있다.
또는, 프로세서(120)는 식별된 단어를 암호가 입력되는 UI에 포함시켜 디스플레이 장치로 전송할 수 있다. 이 경우, 디스플레이 장치는 수신된 UI를 그대로 디스플레이할 수 있다.
도 5b는 사용자의 음성에 따른 전자 장치(100)의 동작의 다른 예를 설명하기 위한 도면이다.
프로세서(120)는 수신된 사용자의 음성으로부터 적어도 하나의 단어를 식별하고, 식별된 단어의 개수를 디스플레이 장치로 전송할 수 있다. 이 경우, 디스플레이 장치는 식별된 단어의 개수에 기초하여 Password에 "*"를 디스플레이할 수 있다.
또는, 프로세서(120)는 식별된 단어의 개수에 대응되는 개수의 "*"를 암호가 입력되는 UI에 포함시켜 디스플레이 장치로 전송할 수도 있다. 이 경우, 디스플레이 장치는 수신된 UI를 그대로 디스플레이할 수 있다.
한편, 도 3a 내지 도 3c, 도 5a 및 도 5b에서는 전자 장치(100)와 디스플레이 장치가 별도의 장치인 것으로 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 전자 장치(100)와 디스플레이 장치는 하나의 장치로 구현될 수 있다. 이 경우, 도 3a 내지 도 3c, 도 5a 및 도 5b에서 설명했던 전자 장치(100)와 디스플레이 장치 간의 데이터 송수신 동작은 전자 장치(100) 내부의 프로세서(120)와 디스플레이(140) 간의 데이터 송수신 동작으로 볼 수 있다.
도 3a 내지 도 3c, 도 5a 및 도 5b의 경우, 전자 장치(100)는 디스플레이 장치로 화면을 전송할 수 있다. 반면, 전자 장치(100)와 디스플레이 장치가 하나의 장치로 구현되는 경우, 전자 장치(100)의 프로세서(120)는 디스플레이(140)를 통해 화면을 디스플레이할 수 있다. 즉, 후자의 경우 프로세서(120)는 디스플레이(140)를 직접적으로 제어할 수 있다.
도 6은 전자 시스템(1000)의 동작을 설명하기 위한 시퀀스도이다. 도 6에 도시된 바와 같이, 전자 시스템(1000)은 전자 장치(100) 및 단말 장치(200)를 포함할 수 있다.
먼저, 전자 장치(100)는 암호 입력 이벤트 발생을 감지할 수 있다(S610). 그리고, 전자 장치(100)는 복수의 문자 각각에 대응되는 서로 다른 단어를 선택할 수 있다(S620). 전자 장치(100)는 복수의 단어를 단말 장치(200)로 전송할 수 있다(S630).
단말 장치(200)는 전자 장치(100)로부터 복수의 단어를 수신하고, 수신된 복수의 단어를 디스플레이할 수 있다(S640).
전자 장치(100)는 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성을 수신할 수 있다(S650). 여기서, 전자 장치(100)는 사용자 음성을 직접 수신할 수도 있고, 단말 장치(200)를 포함하는 외부 장치로부터 수신할 수도 있다.
그리고, 전자 장치(100)는 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증을 수행할 수 있다(S610).
도 7은 암호 인증 방법의 확장 실시 예를 설명하기 위한 도면이다.
도 7에 도시된 바와 같이, 암호 인증 방법은 하나의 디스플레이 장치를 통해 수행될 수도 있다. 예를 들어, 디스플레이 장치는 암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어를 선택하며, 선택된 복수의 단어를 디스플레이를 통해 디스플레이할 수 있다. 그리고, 디스플레이 장치는 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성이 수신되면 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증을 수행할 수 있다.
도 8은 암호 인증 방법의 다른 확장 실시 예를 설명하기 위한 도면이다.
도 8에 도시된 바와 같이, 전자 시스템은 전자 장치(100), 단말 장치(200) 및 음성 인식 서버(300)를 포함할 수 있다.
먼저, 전자 장치(100)는 암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택하며, 선택된 복수의 단어를 단말 장치(200)로 전송할 수 있다.
단말 장치(200)는 수신된 복수의 단어를 디스플레이할 수 있다.
전자 장치(100)는 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성을 수신할 수 있다. 이때, 전자 장치(100)는 사용자 음성을 직접 수신할 수 있다. 이 경우, 전자 장치(100)에 구비된 마이크를 통해 수신된 아날로그 음성 신호는 디지털화되어 전자 장치(100)의 프로세서(120)로 전송될 수 있다.
또는, 전자 장치(100)는 사용자 음성을 외부 장치로부터 수신할 수도 있다. 예를 들어, 전자 장치(100)는 원격 제어 장치와 같은 외부 장치로부터 사용자 음성을 수신할 수 있다. 이 경우, 외부 장치는 외부 장치에 구비된 마이크를 통해 아날로그 음성 신호를 수신하고, 수신된 아날로그 음성 신호를 디지털화하며, 디지털화된 음성 신호를 블루투스 등을 통해 전자 장치(100)로 전송할 수 있다.
전자 장치(100)는 수신된 사용자 음성을 음성 인식 서버(300)로 전송할 수 있다. 음성 인식 서버(300)는 수신된 사용자 음성을 텍스트로 변환하여 전자 장치(100)로 전송할 수 있다. 전자 장치(100)는 수신된 텍스트에 기초하여 암호 인증을 수행할 수 있다.
한편, 전자 장치(100)는 암호 입력 이벤트가 발생되면, 암호 입력 이벤트의 발생을 음성 인식 서버(300)로 전송할 수도 있다. 음성 인식 서버(300)는 복수의 문자 각각에 대응되는 서로 다른 복수의 단어를 선택하며, 선택된 복수의 단어를 단말 장치(200)로 전송할 수 있다. 이 경우, 음성 인식 서버(300)는 암호 정보, 사용자 정보 등이 저장된 스토리지를 포함할 수 있다.
그리고, 전자 장치(100)는 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성이 수신되면, 수신된 사용자 음성을 음성 인식 서버(300)로 전송할 수 있다.
음성 인식 서버(300)는 수신된 사용자 음성을 텍스트로 변환하고, 변환된 텍스트로부터 암호 인증을 수행할 수도 있다. 음성 인식 서버(300)는 변환된 텍스트로부터 대응되는 문자를 식별하고, 식별된 문자가 암호 정보에 일치하면 암호 인증을 수행할 수 있다. 음성 인식 서버(300)는 암호 인증 수행 결과를 전자 장치(100)로 전송할 수 있다.
한편, 이상에서는 하나의 음성 인식 서버(300)에 대하여만 설명하였으나, 이에 한정되는 것은 아니다. 예를 들어, 음성 인식 서버(300)는 사용자 음성을 텍스트로 변환하여 전자 장치(100) 또는 제2 서버로 전송하는 제1 서버 및 나머지 동작을 수행하는 제2 서버를 포함할 수도 있다. 이 경우, 제2 서버는 암호 입력 이벤트의 발생에 따라 복수의 단어를 선택하여 단말 장치(200)로 전송하며, 제1 서버 또는 전자 장치(100)로부터 텍스트로 변환된 사용자 음성을 수신하여 암호 인증을 수행할 수 있다.
한편, 전자 장치(100)와 단말 장치(200)의 통신 규격 및 전자 장치(100)와 음성 인식 서버(300)의 통신 규격은 서로 다를 수 있다. 예를 들어, 전자 장치(100)는 블루투스를 통해 단말 장치(200)와 통신을 수행하고, 이더넷 모뎀을 통해 음성 인식 서버(300)와 통신을 수행할 수 있다.
다만, 이에 한정되는 것은 아니며, 전자 장치(100)는 동일한 통신 규격을 통해 단말 장치(200) 및 음성 인식 서버(300)와 통신을 수행할 수도 있다.
도 9는 전자 장치의 제어 방법의 일 예를 설명하기 위한 흐름도이다.
먼저, 암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택한다(S910). 그리고, 선택된 복수의 단어를 단말 장치로 전송한다(S920). 그리고, 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성이 수신되면 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증을 수행한다(S930).
여기서, 암호 인증을 수행하는 단계(S930)는 적어도 하나의 단어에 대응되는 문자가 적어도 하나의 문자를 포함하는 기 저장된 암호 정보와 일치하면 암호 인증을 수행할 수 있다.
또한, 암호 인증을 수행하는 단계(S930)는 복수의 단어 중 제1 단어 및 제2 단어를 포함하는 사용자 음성이 수신되면 제1 단어 및 제2 단어의 수신 순서에 기초하여 제1 단어에 대응되는 제1 문자와 제2 단어에 대응되는 제2 문자를 조합하는 단계 및 조합된 문자열이 암호 정보와 일치하면 암호 인증을 수행하는 단계를 포함할 수 있다.
그리고, 암호 인증을 수행하는 단계(S930)는 제1 단어의 수신 시점 및 제2 단어의 수신 시점의 차이가 기설정된 시간 이내이면 제1 문자와 제2 문자를 조합하여 암호 인증을 수행하고, 제1 단어의 수신 시점 및 제2 단어의 수신 시점의 차이가 기설정된 시간을 초과하면 제1 문자 및 제2 문자 각각으로 암호 인증을 수행할 수 있다.
한편, 암호 입력 이벤트에 따라 암호가 입력되는 UI를 디스플레이하는 단계 및 사용자 음성이 수신되면 수신된 사용자 음성에 대응되는 적어도 하나의 단어를 UI에 입력하는 단계를 더 포함할 수 있다.
여기서, 암호 인증을 수행하는 단계(S930)는 기설정된 이벤트가 발생되면 UI에 입력된 적어도 하나의 단어에 대응되는 문자가 암호 정보와 일치하는지 식별하는 단계 및 적어도 하나의 단어에 대응되는 문자가 암호 정보와 일치하면 암호 인증을 수행하는 단계를 포함할 수 있다.
한편, 선택하는 단계(S910)는 암호 정보에 기초하여 암호 인증에 필요한 문자 타입을 식별하는 단계 및 문자 타입에 해당하는 복수의 문자 각각에 대응되는 서로 다른 복수의 단어를 선택하는 단계를 포함할 수 있다.
또한, 복수의 문자는 알파벳, 숫자, 기호, 한글 및 한자 중 적어도 하나를 포함하고, 전송하는 단계(S920)는 복수의 문자 및 복수의 단어를 매칭시켜 단말 장치로 전송할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 전자 장치는 사용자 음성으로 암호 인증을 수행하여 사용자 편의성을 향상시키면서도 암호의 노출을 방지하여 향상된 보안 성능을 제공할 수 있다.
한편, 본 발명의 일시 예에 따르면, 이상에서 설명된 다양한 실시 예들은 기기(machine)(예: 컴퓨터)로 읽을 수 있는 저장 매체(machine-readable storage media)에 저장된 명령어를 포함하는 소프트웨어로 구현될 수 있다. 기기는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 동작이 가능한 장치로서, 개시된 실시 예들에 따른 전자 장치(예: 전자 장치(A))를 포함할 수 있다. 명령이 프로세서에 의해 실행될 경우, 프로세서가 직접, 또는 프로세서의 제어 하에 다른 구성요소들을 이용하여 명령에 해당하는 기능을 수행할 수 있다. 명령은 컴파일러 또는 인터프리터에 의해 생성 또는 실행되는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.
또한, 본 발명의 일 실시 예에 따르면, 이상에서 설명된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 온라인으로 배포될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
또한, 본 발명의 일 실시 예에 따르면, 이상에서 설명된 다양한 실시 예들은 소프트웨어(software), 하드웨어(hardware) 또는 이들의 조합을 이용하여 컴퓨터(computer) 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 일부 경우에 있어 본 명세서에서 설명되는 실시 예들이 프로세서 자체로 구현될 수 있다. 소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 동작을 수행할 수 있다.
한편, 상술한 다양한 실시 예들에 따른 기기의 프로세싱 동작을 수행하기 위한 컴퓨터 명령어(computer instructions)는 비일시적 컴퓨터 판독 가능 매체(non-transitory computer-readable medium)에 저장될 수 있다. 이러한 비일시적 컴퓨터 판독 가능 매체에 저장된 컴퓨터 명령어는 특정 기기의 프로세서에 의해 실행되었을 때 상술한 다양한 실시 예에 따른 기기에서의 처리 동작을 특정 기기가 수행하도록 한다. 비일시적 컴퓨터 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 비일시적 컴퓨터 판독 가능 매체의 구체적인 예로는, CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등이 있을 수 있다.
또한, 상술한 다양한 실시 예들에 따른 구성 요소(예: 모듈 또는 프로그램) 각각은 단수 또는 복수의 개체로 구성될 수 있으며, 전술한 해당 서브 구성 요소들 중 일부 서브 구성 요소가 생략되거나, 또는 다른 서브 구성 요소가 다양한 실시 예에 더 포함될 수 있다. 대체적으로 또는 추가적으로, 일부 구성 요소들(예: 모듈 또는 프로그램)은 하나의 개체로 통합되어, 통합되기 이전의 각각의 해당 구성 요소에 의해 수행되는 기능을 동일 또는 유사하게 수행할 수 있다. 다양한 실시예들에 따른, 모듈, 프로그램 또는 다른 구성 요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱하게 실행되거나, 적어도 일부 동작이 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
이상에서는 본 개시의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 개시는 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 개시의 요지를 벗어남이 없이 당해 개시에 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 개시의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
1000 : 전자 시스템 100 : 전자 장치
200 : 단말 장치 300 : 음성 인식 서버
110 : 통신부 120 : 프로세서
130 : 스토리지 140 : 디스플레이
150 : 사용자 인터페이스부 160 : 오디오 처리부
170 : 비디오 처리부 180 : 스피커
181 : 버튼 182 : 카메라

Claims (20)

  1. 디스플레이;
    통신부; 및
    암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택하며, 상기 선택된 복수의 단어를 상기 통신부를 통해 단말 장치로 전송하고,
    상기 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성 입력이 수신되면 상기 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증에 대응되는 기능을 수행하고,
    상기 암호 입력 이벤트에 기초하여 암호가 입력되는 UI를 디스플레이에 출력하도록 제어하고,
    상기 사용자 음성 입력이 수신되면 상기 수신된 사용자 음성 입력에 대응되는 적어도 하나의 단어를 상기 UI에 제공하는 프로세서;를 포함하는, 전자 장치.
  2. 제1항에 있어서,
    적어도 하나의 문자를 포함하는 암호 정보가 저장된 스토리지;를 더 포함하고,
    상기 프로세서는,
    상기 적어도 하나의 단어에 대응되는 문자가 상기 암호 정보와 일치하면 상기 암호 인증을 수행하는, 전자 장치.
  3. 제2항에 있어서,
    상기 프로세서는,
    상기 복수의 단어 중 제1 단어 및 제2 단어를 포함하는 사용자 음성 입력이 수신되면 상기 제1 단어 및 상기 제2 단어의 수신 순서에 기초하여 상기 제1 단어에 대응되는 제1 문자와 상기 제2 단어에 대응되는 제2 문자를 조합하고, 상기 조합된 문자열이 상기 암호 정보와 일치하면 상기 암호 인증을 수행하는, 전자 장치.
  4. 제3항에 있어서,
    상기 프로세서는,
    상기 제1 단어의 수신 시점 및 상기 제2 단어의 수신 시점의 차이가 기설정된 시간 이내이면 상기 제1 문자와 상기 제2 문자를 조합하여 상기 암호 인증을 수행하고,
    상기 제1 단어의 수신 시점 및 상기 제2 단어의 수신 시점의 차이가 상기 기설정된 시간을 초과하면 상기 제1 문자 및 상기 제2 문자 각각으로 상기 암호 인증을 수행하는, 전자 장치.
  5. 삭제
  6. 제1항에 있어서,
    상기 프로세서는,
    기설정된 이벤트가 발생되면 상기 UI에 입력된 상기 적어도 하나의 단어에 대응되는 문자가 암호 정보와 일치하는지 식별하고, 상기 적어도 하나의 단어에 대응되는 문자가 상기 암호 정보와 일치하면 상기 암호 인증을 수행하는, 전자 장치.
  7. 제2항에 있어서,
    상기 프로세서는,
    상기 암호 정보에 기초하여 상기 암호 인증에 필요한 문자 타입을 식별하고, 상기 문자 타입에 해당하는 복수의 문자 각각에 대응되는 서로 다른 복수의 단어를 선택하는, 전자 장치.
  8. 제1항에 있어서,
    상기 복수의 문자는, 알파벳, 숫자, 기호, 한글 및 한자 중 적어도 하나를 포함하고,
    상기 프로세서는,
    상기 복수의 문자 및 상기 복수의 단어를 매칭시켜 상기 단말 장치로 전송하는, 전자 장치.
  9. 제1항에 있어서,
    상기 프로세서는,
    상기 사용자의 얼굴 인식, 상기 사용자의 정보 입력, 상기 사용자의 음성 및 상기 전자 장치의 사용 상태 중 적어도 하나에 기초하여 사용자를 식별하고, 상기 식별된 사용자에 기초하여 상기 단말 장치를 식별하는, 전자 장치.
  10. 제9항에 있어서,
    디스플레이;를 더 포함하고,
    상기 프로세서는,
    상기 사용자가 식별되면 상기 단말 장치에 대한 확인을 요청하는 UI를 상기 디스플레이를 통해 디스플레이하고,
    상기 사용자의 확인 입력이 수신되면 상기 복수의 단어를 상기 단말 장치로 전송하는, 전자 장치.
  11. 제1항에 있어서,
    상기 사용자 음성 입력은,
    상기 전자 장치에 구비된 마이크를 통해 수신되거나, 외부 장치로부터 수신되는, 전자 장치.
  12. 전자 시스템에 있어서,
    암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택하며, 선택된 복수의 단어를 단말 장치로 전송하는 전자 장치; 및
    상기 전자 장치로부터 상기 복수의 단어가 수신되면, 수신된 복수의 단어를 디스플레이하는 단말 장치;를 포함하고,
    상기 전자 장치는,
    상기 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성 입력이 수신되면 상기 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증에 대응되는 기능을 수행하고,
    상기 암호 입력 이벤트에 기초하여 암호가 입력되는 UI를 디스플레이에 출력하도록 제어하고,
    상기 사용자 음성 입력이 수신되면 상기 수신된 사용자 음성 입력에 대응되는 적어도 하나의 단어를 상기 UI에 제공하는, 전자 시스템.
  13. 전자 장치의 제어 방법에 있어서,
    암호 입력 이벤트가 발생되면, 복수의 문자 각각에 대응되는 서로 다른 복수의 단어(word)를 선택하는 단계;
    상기 선택된 복수의 단어를 단말 장치로 전송하는 단계; 및
    상기 복수의 단어 중 적어도 하나의 단어를 포함하는 사용자 음성 입력이 수신되면 상기 적어도 하나의 단어에 대응되는 문자에 기초하여 암호 인증에 대응되는 기능을 수행하는 단계;
    상기 암호 입력 이벤트에 기초하여 암호가 입력되는 UI를 디스플레이하는 단계; 및
    상기 사용자 음성 입력이 수신되면 상기 수신된 사용자 음성 입력에 대응되는 적어도 하나의 단어를 상기 UI에 제공하는 단계;를 포함하는, 제어 방법.
  14. 제13항에 있어서,
    상기 암호 인증을 수행하는 단계는,
    상기 적어도 하나의 단어에 대응되는 문자가 적어도 하나의 문자를 포함하는 기 저장된 암호 정보와 일치하면 상기 암호 인증을 수행하는, 제어 방법.
  15. 제14항에 있어서,
    상기 암호 인증을 수행하는 단계는,
    상기 복수의 단어 중 제1 단어 및 제2 단어를 포함하는 사용자 음성 입력이 수신되면 상기 제1 단어 및 상기 제2 단어의 수신 순서에 기초하여 상기 제1 단어에 대응되는 제1 문자와 상기 제2 단어에 대응되는 제2 문자를 조합하는 단계; 및
    상기 조합된 문자열이 상기 암호 정보와 일치하면 상기 암호 인증을 수행하는 단계;를 포함하는, 제어 방법.
  16. 제15항에 있어서,
    상기 암호 인증을 수행하는 단계는,
    상기 제1 단어의 수신 시점 및 상기 제2 단어의 수신 시점의 차이가 기설정된 시간 이내이면 상기 제1 문자와 상기 제2 문자를 조합하여 상기 암호 인증을 수행하고,
    상기 제1 단어의 수신 시점 및 상기 제2 단어의 수신 시점의 차이가 상기 기설정된 시간을 초과하면 상기 제1 문자 및 상기 제2 문자 각각으로 상기 암호 인증을 수행하는, 제어 방법.
  17. 삭제
  18. 제13항에 있어서,
    상기 암호 인증을 수행하는 단계는,
    기설정된 이벤트가 발생되면 상기 UI에 입력된 상기 적어도 하나의 단어에 대응되는 문자가 상기 암호 정보와 일치하는지 식별하는 단계; 및
    상기 적어도 하나의 단어에 대응되는 문자가 암호 정보와 일치하면 상기 암호 인증을 수행하는 단계;를 포함하는, 제어 방법.
  19. 제14항에 있어서,
    상기 선택하는 단계는,
    상기 암호 정보에 기초하여 상기 암호 인증에 필요한 문자 타입을 식별하는 단계; 및
    상기 문자 타입에 해당하는 복수의 문자 각각에 대응되는 서로 다른 복수의 단어를 선택하는 단계;를 포함하는, 제어 방법.
  20. 제13항에 있어서,
    상기 복수의 문자는, 알파벳, 숫자, 기호, 한글 및 한자 중 적어도 하나를 포함하고,
    상기 전송하는 단계는,
    상기 복수의 문자 및 상기 복수의 단어를 매칭시켜 상기 단말 장치로 전송하는, 제어 방법.
KR1020170174050A 2017-12-18 2017-12-18 전자 장치, 전자 시스템 및 그 제어 방법 KR102443632B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020170174050A KR102443632B1 (ko) 2017-12-18 2017-12-18 전자 장치, 전자 시스템 및 그 제어 방법
PCT/KR2018/015387 WO2019124830A1 (en) 2017-12-18 2018-12-06 Electronic apparatus, electronic system and control method thereof
EP18890533.5A EP3662398B1 (en) 2017-12-18 2018-12-06 Electronic apparatus, electronic system and control method thereof
US16/214,552 US11158323B2 (en) 2017-12-18 2018-12-10 Electronic apparatus, electronic system and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170174050A KR102443632B1 (ko) 2017-12-18 2017-12-18 전자 장치, 전자 시스템 및 그 제어 방법

Publications (2)

Publication Number Publication Date
KR20190072898A KR20190072898A (ko) 2019-06-26
KR102443632B1 true KR102443632B1 (ko) 2022-09-15

Family

ID=66814583

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170174050A KR102443632B1 (ko) 2017-12-18 2017-12-18 전자 장치, 전자 시스템 및 그 제어 방법

Country Status (4)

Country Link
US (1) US11158323B2 (ko)
EP (1) EP3662398B1 (ko)
KR (1) KR102443632B1 (ko)
WO (1) WO2019124830A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112019006868T5 (de) * 2019-02-15 2021-11-04 Sony Group Corporation Datenverarbeitungseinrichtung und datenverarbeitungsverfahren
KR20220013732A (ko) * 2020-07-27 2022-02-04 삼성전자주식회사 전자 장치 및 이의 제어 방법
CN114467283B (zh) * 2021-11-24 2024-02-09 百果园技术(新加坡)有限公司 身份认证方法、装置、终端、存储介质及程序产品

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002342288A (ja) * 2001-05-21 2002-11-29 Casio Comput Co Ltd 認証装置、認証システム、認証方法、認証プログラム及び記録媒体
JP2009093256A (ja) * 2007-10-04 2009-04-30 Panasonic Corp 認証装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005174023A (ja) * 2003-12-11 2005-06-30 Canon Inc 認証システムおよびその方法
KR101424962B1 (ko) 2011-11-29 2014-08-01 주식회사 지티티비 음성 기반 인증시스템 및 방법
JP5841252B2 (ja) * 2012-06-28 2016-01-13 株式会社ソニー・コンピュータエンタテインメント 情報処理システム、情報処理装置、情報端末装置、情報処理方法、情報処理プログラム
US9336779B1 (en) * 2013-04-10 2016-05-10 Google Inc. Dynamic image-based voice entry of unlock sequence
KR20150146061A (ko) 2014-06-20 2015-12-31 주식회사 에버스핀 음성인식 인증 서비스를 제공하는 음성인식 인증 시스템 및 방법
CN104468522B (zh) * 2014-11-07 2017-10-03 百度在线网络技术(北京)有限公司 一种声纹验证方法和装置
CN104821934B (zh) 2015-03-20 2018-11-20 百度在线网络技术(北京)有限公司 基于人工智能的声纹登录方法和装置
JP6759613B2 (ja) 2016-02-10 2020-09-23 大日本印刷株式会社 携帯型デバイス及びプログラム
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002342288A (ja) * 2001-05-21 2002-11-29 Casio Comput Co Ltd 認証装置、認証システム、認証方法、認証プログラム及び記録媒体
JP2009093256A (ja) * 2007-10-04 2009-04-30 Panasonic Corp 認証装置

Also Published As

Publication number Publication date
EP3662398B1 (en) 2023-02-01
KR20190072898A (ko) 2019-06-26
WO2019124830A1 (en) 2019-06-27
US20190189127A1 (en) 2019-06-20
EP3662398A4 (en) 2020-08-19
US11158323B2 (en) 2021-10-26
EP3662398A1 (en) 2020-06-10

Similar Documents

Publication Publication Date Title
US10614200B2 (en) Login interface selection for computing environment user login
US10381004B2 (en) Display apparatus and method for registration of user command
US9484029B2 (en) Electronic apparatus and method of speech recognition thereof
US20150029089A1 (en) Display apparatus and method for providing personalized service thereof
KR102443632B1 (ko) 전자 장치, 전자 시스템 및 그 제어 방법
US11589222B2 (en) Electronic apparatus, user terminal, and method for controlling the electronic apparatus and the user terminal
KR102615950B1 (ko) 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
KR20220080270A (ko) 전자 장치 및 전자 장치의 제어 방법
TWI652648B (zh) 一種使用者端驗票的方法、系統及智慧設備
US11152008B2 (en) Electronic apparatus, method for controlling thereof and computer readable recording medium
US11175789B2 (en) Electronic apparatus and method for controlling the electronic apparatus thereof
KR20200006991A (ko) 생체 서명을 사용하여 사용자를 인증하는 방법, 시스템 및 매체
KR20150058027A (ko) 디스플레이 장치 및 제어 방법
US11455990B2 (en) Electronic device and control method therefor
US20140136991A1 (en) Display apparatus and method for delivering message thereof
KR102582332B1 (ko) 전자 장치, 이의 모바일 장치 제어 방법 및 컴퓨터 판독가능 기록 매체
KR102585875B1 (ko) 영상 표시 장치 및 그 동작방법
KR102401506B1 (ko) 전자 장치 및 그 제어 방법
US20210049998A1 (en) Information processing apparatus, information processing method, and program
KR20170138356A (ko) 간편 패스워드 서비스 제공 방법 및 이를 위한 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right