KR101908711B1 - 인공 지능을 기반으로 하는 성문 로그인 방법 및 장치 - Google Patents

인공 지능을 기반으로 하는 성문 로그인 방법 및 장치 Download PDF

Info

Publication number
KR101908711B1
KR101908711B1 KR1020167033617A KR20167033617A KR101908711B1 KR 101908711 B1 KR101908711 B1 KR 101908711B1 KR 1020167033617 A KR1020167033617 A KR 1020167033617A KR 20167033617 A KR20167033617 A KR 20167033617A KR 101908711 B1 KR101908711 B1 KR 101908711B1
Authority
KR
South Korea
Prior art keywords
user
login
string
character
information
Prior art date
Application number
KR1020167033617A
Other languages
English (en)
Other versions
KR20160147280A (ko
Inventor
차오 리
용 관
레이 지아
Original Assignee
바이두 온라인 네트웍 테크놀러지 (베이징) 캄파니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 바이두 온라인 네트웍 테크놀러지 (베이징) 캄파니 리미티드 filed Critical 바이두 온라인 네트웍 테크놀러지 (베이징) 캄파니 리미티드
Publication of KR20160147280A publication Critical patent/KR20160147280A/ko
Application granted granted Critical
Publication of KR101908711B1 publication Critical patent/KR101908711B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3226—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
    • H04L9/3231—Biological data, e.g. fingerprint, voice or retina
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N7/00—Computing arrangements based on specific mathematical models
    • G06N7/01—Probabilistic graphical models, e.g. probabilistic networks
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/16—Speech classification or search using artificial neural networks
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/02—Preprocessing operations, e.g. segment selection; Pattern representation or modelling, e.g. based on linear discriminant analysis [LDA] or principal components; Feature selection or extraction
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/04—Training, enrolment or model building
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/22—Interactive procedures; Man-machine interfaces
    • G10L17/24—Interactive procedures; Man-machine interfaces the user being prompted to utter a password or a predefined phrase
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40—Network security protocols
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L2015/088—Word spotting

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computational Linguistics (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Mathematical Analysis (AREA)
  • Computational Mathematics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Algebra (AREA)
  • Probability & Statistics with Applications (AREA)
  • Telephonic Communication Services (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은, 사용자의 로그인 청구를 수신하고, 사용자의 사용자 정보를 획득하는 S1 단계; 로그인 문자열을 생성하고, 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 로그인 문자열 중의 적어도 하나의 문자를 교체하는 S2 단계; 교체한 이후의 로그인 문자열을 사용자에게 제공하고, 사용자가 리딩한 로그인 문자열의 음성 정보를 수신하는 S3 단계; 및 사용자가 리딩한 로그인 문자열의 음성 정보에 의하여 사용자에 대하여 로그인 인증을 행하는 S4 단계를 포함하는 인공 지능을 기반으로 하는 성문 로그인 방법을 공개한다. 상기 방법은 한편으로는, 성문 및 사용자가 설정한 문자 대체 대조 정보를 결합시킨 성문 인증 방식을 통하여, 성문 암호의 안전성을 향상시켰고, 다른 한편으로는 사용자의 애호에 따라 은폐된 문자는 사용자가 암호가 명문 텍스트로 표시되는 것을 원하지 않는 심리적 수요를 만족시켰으며, 사용자의 체험도를 향상시켰고, 암호의 안전성을 향상시켰다. 본 발명은 인공 지능을 기반으로 하는 성문 로그인 장치를 더 공개한다.

Description

인공 지능을 기반으로 하는 성문 로그인 방법 및 장치{ARTIFICIAL INTELLIGENCE BASED VOICEPRINT LOGIN METHOD AND DEVICE}
본 출원은 바이두온라인네트워크기술(베이징)유한회사에서 2015년 3월 20일에 제출한 발명 명칭이 '인공 지능을 기반으로 하는 성문 로그인 방법 및 장치'이며, 중국 특허 출원 번호가 201510125685.7인 우선권을 청구한다.
본 발명은 로그인 인증 기술 분야에 관한 것으로, 특히 인공 지능(Artificial Intelligence) 성문(voiceprint) 로그인 방법 및 장치에 관한 것이다.
기존의 웹사이트(또는 장치)의 로그인 시스템은 주로 사용자가 계정 및 암호(또는 제스처 동작)를 입력하는 것을 통하여 신원 인증을 행하고, 인증을 통과한 후 로그인을 행한다. 하지만 존재하는 문제는 다음과 같다. 암호 및 제스처 동작에 기초하여 입력한 로그인 방식은, 일단 암호 또는 제스처가 타인에 유출되면 마찬가지로 로그인을 완성할 수 있음으로써, 안전 문제가 존재하고, 또한, 안전성을 증가시키기 위해, 사용자는 통상적으로 상이한 대상에 상이하고 또한 특수 문자를 구비하는 암호를 설정하는 것이 필요되나, 이는 사용자에 비교적 큰 기억 부담을 가져다 준다.
이외에, 현재는 또한 성문을 암호로 하여 로그인 인증을 하게 하는 방식도 나타났다. 하지만, 전통적인 성문 암호는 환경 소음, 경로 차이 등 요소의 영향을 받아 신뢰도가 높지 않고, 특히 기밀 및 금융 등 분야에 관한 것일 경우 안전 문제가 존재하게 된다.
본 발명의 목적은 일정한 정도에서 전술한 기술적 문제 중의 적어도 하나를 해결하는 것이다.
이를 위해, 본 발명의 하나의 목적은, 인공 지능을 기반으로 하는 성문 로그인 방법을 제공하는 것이다. 상기 방법은 한편으로는, 성문 및 사용자가 설정한 문자 대체 대조 정보를 결합시킨 성문 인증 방식을 통하여 성문 암호의 안전성을 향상시켰고, 다른 한편으로는 사용자의 애호에 따라 은폐된 문자는 사용자가 암호가 명문 텍스트로 표시되는 것을 원하지 않는 심리적 수요를 만족시켰으며, 사용자의 체험도를 향상시켰고, 암호의 안전성을 향상시켰다.
본 발명의 다른 하나의 목적은 인공 지능을 기반으로 하는 성문 로그인 장치를 제공하는 것이다.
상기 목적을 구현하기 위해, 본 발명의 제1 측면의 실시예의 인공 지능을 기반으로 하는 성문 로그인 방법은, 사용자의 로그인 청구를 수신하고, 상기 사용자의 사용자 정보를 획득하는S1 단계; 로그인 문자열을 생성하고, 상기 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 상기 로그인 문자열 중의 적어도 하나의 문자를 교체하는 S2 단계; 교체한 이후의 상기 로그인 문자열을 상기 사용자에게 제공하고, 상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보를 수신하는 S3 단계; 및 상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 상기 사용자에 대하여 로그인 인증을 행하는 S4 단계를 포함한다.
본 발명의 실시예의 인공 지능을 기반으로 하는 성문 로그인 방법은, 우선 사용자의 로그인 청구를 수신하고, 사용자의 사용자 정보를 획득하며, 다음 로그인 문자열을 생성할 수 있고, 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 로그인 문자열 중의 적어도 하나의 문자를 교체하고; 다음, 교체한 이후의 로그인 문자열을 사용자에게 제공하고, 사용자가 리딩한 로그인 문자열의 음성 정보를 수신하고; 및 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 사용자에 대하여 로그인 인증을 행하는 단계를 포함하는 바, 이는 적어도 아래의 여러가지 장점을 구비한다. (1) 성문 및 사용자가 설정한 문자 대체 대조 정보를 결합시킨 성문 인증 방식을 통하여, 성문 암호의 안전성과 전통적인 암호의 안전성이 누가되는 효과를 달성할 수 있어, 성문 암호의 안전성을 향상시켰고; (2) 사용자의 애호에 따라 은폐된 문자는 사용자의 암호가 명문 텍스트로 표시되는 것을 원하지 않는 심리적 수요를 만족시키는 동시에 사용자가 다만 여러개의 교체 문자만을 설정하기만 하면 되기에, 일부러 긴 암호를 기억할 필요가 없어 체험도를 향상시켰고, 또한 암호의 안전성을 향상시켰다.
상기 목적을 구현하기 위해, 본 발명의 제2 측면의 실시예의 인공 지능을 기반으로 하는 성문 로그인 장치는, 사용자의 로그인 청구를 수신하고, 상기 사용자의 사용자 정보를 획득하기 위한 획득 모듈; 로그인 문자열을 생성하고, 상기 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 상기 로그인 문자열 중의 적어도 하나의 문자를 교체하기 위한 교체 모듈; 교체한 이후의 상기 로그인 문자열을 상기 사용자에게 제공하기 위한 제1 제공 모듈; 상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보를 수신하기 위한 제1 수신 모듈; 및 상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 상기 사용자에 대하여 로그인 인증을 행하기 위한 인증 모듈을 포함한다.
본 발명의 실시예의 인공 지능을 기반으로 하는 성문 로그인 장치는, 획득 모듈을 통하여 사용자의 로그인 청구를 획득하고, 사용자의 사용자 정보를 획득하며, 교체 모듈이 로그인 문자열을 생성하고, 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 로그인 문자열 중의 적어도 하나의 문자를 교체하며; 제1 제공 모듈이 교체한 이후의 로그인 문자열을 사용자에게 제공하고; 제1 수신 모듈이 사용자가 리딩한 로그인 문자열의 음성 정보를 수신하고; 인증 모듈이 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 사용자에 대하여 로그인 인증을 행할 수 있는 것을 통하여, 적어도 아래의 여러가지 장점을 구비한다. (1) 성문 및 사용자가 설정한 문자 대체 대조 정보를 결합시킨 성문 인증 방식을 통하여 성문 암호의 안전성과 전통적인 암호의 안전성이 누가되는 효과를 달성할 수 있어, 성문 암호의 안전성을 향상시켰고; (2) 사용자의 애호에 따라 은폐된 문자는 사용자의 암호가 명문 텍스트로 표시되는 것을 원하지 않는 심리적 수요를 만족시키는 동시에 사용자가 다만 여러개의 교체 문자만을 설정하기만 하면 되기에, 일부러 긴 암호를 기억할 필요가 없어 체험도를 향상시켰고, 또한 암호의 안전성을 향상시켰다.
본 발명의 추가된 측면 및 장점은 아래의 설명에서 부분적으로 제기되고, 부분은 아래의 설명에서 더 뚜렷해지거나 본 발명의 실천을 통하여 이해하게 된다.
본 발명의 상기 및/또는 추가된 측면 및 장점은 아래의 첨부 도면을 결부하여 실시예에 대한 설명으로부터 뚜렷해지고 용이하게 이해된다. 여기서,
도1은 본 발명의 일 실시예에 따른 인공 지능을 기반으로 하는 성문 로그인 방법의 흐름도이다.
도2(a)는 본 발명의 일 실시예에 따른 사용자에게 제공한 편집 인터페이스의 사시도이다.
도2(b)는 본 발명의 일 실시예에 따른 사용자에게 제공한 교체한 이후의 등록 문자열의 사시도이다.
도2(c)는 본 발명의 일 실시예에 따른 사용자에게 제공한 교체한 이후의 로그인 문자열의 사시도이다.
도3은 본 발명의 일 실시예에 따른 인공 지능을 기반으로 하는 성문 로그인 장치의 구조 모식도이다.
도4는 본 발명의 다른 실시예에 따른의 인공 지능을 기반으로 하는 성문 로그인 장치의 구조 모식도이다.
도5는 본 발명의 또 다른 인공 지능을 기반으로 하는 성문 로그인 장치의 구조 모식도이다.
아래에 본 발명의 실시예를 구체적으로 설명하며, 상기 실시예의 예시는 첨부된 도면에 도시되고, 여기서 시종일관하게 동일하거나 유사한 부호는 동일하거나 유사한 소자 또는 동일하거나 유사한 기능을 구비하는 소자를 나타낸다. 아래의 첨부된 도면에서 설명하는 실시예는 예시적인 것으로 본 발명을 해석하기 위한 것이지, 본 발명을 제한하는 것이 아님으로 이해할 수 있다.
아래에 첨부된 도면을 참조하여 본 발명의 실시예의 인공 지능을 기반으로 하는 성문 로그인 방법 및 장치를 설명한다.
본 발명의 실시예는 인공 지능을 기반으로 하는 성문 로그인 방법을 제공하는 바, 사용자의 로그인 청구를 수신하고, 사용자의 사용자 정보를 획득하는 S1 단계; 로그인 문자열을 생성하고, 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 로그인 문자열 중의 적어도 하나의 문자를 교체하는 S2 단계; 교체한 이후의 로그인 문자열을 사용자에게 제공하고, 사용자가 리딩(reading)한 로그인 문자열의 음성 정보를 수신하는 S3 단계; 및 음성 정보에 의하여 사용자에 대하여 로그인 인증을 행하는 S4 단계를 포함한다.
도1은 본 발명의 일 실시예에 따른 인공 지능을 기반으로 하는 성문 로그인 방법의 흐름도이다. 도1에 도시된 바와 같이, 상기 인공 지능을 기반으로 하는 성문 로그인 방법은 다음 단계를 포함할 수 있다.
S101: 사용자의 로그인 청구를 수신하고, 사용자의 사용자 정보를 획득한다.
예를 들어 말하자면, 본 발명의 실시예의 인공 지능 성문 로그인 방법을 웹사이트의 로그인 시스템에 응용한다고 가정할 경우, 사용자가 웹사이트를 오픈(open)하여 로그인을 준비할 경우, 사용자는 클라이언트를 통하여 로그인 시스템에 로그인 청구를 전송할 수 있고, 로그인 시스템은 사용자가 클라이언트를 통하여 전송하는 로그인 청구를 수신한 후, 사용자의 사용자 정보를 획득한다. 여기서, 본 발명의 실시예에서, 사용자 정보는 계정/사용자명, 사용자ID(Identity, 신원 인식 번호) 등을 포함할 수 있지만 이에 한정되지 않는다.
더 나아가, 본 발명의 일 실시예에서, 로그인하기 이전에, 사용자는 우선 등록을 행할 수 있는 바, 즉 사용자의 로그인 청구를 수신하고, 사용자의 사용자 정보(즉 상기 S101 단계)를 획득하기 이전에, 상기 인공 지능을 기반으로 하는 성문 로그인 방법은, 사용자의 등록 청구를 수신하고, 등록 문자열을 사용자에게 제공하는 단계; 사용자가 리딩한 등록 문자열의 음성 정보를 수신하고, 사용자의 성문을 추출하는 단계를 더 포함할 수 있다. 여기서, 본 발명의 실시예에서, 등록 문자열은 랜덤으로 생성된 숫자 문자열일 수 있다. 이 외에, 더 큰 샘플 공간을 커버할 수 있도록, 등록 문자열 중의 숫자는 다만 한번만 표시된다.
구체적으로, 본 발명의 실시예의 인공 지능 성문 로그인 방법을 웹사이트 로그인 시스템에 응용한다고 가정할 경우, 사용자가 웹사이트를 오픈하여 등록을 준비할 경우, 사용자는 클라이언트를 통하여 로그인 시스템에 등록 청구를 전송할 수 있고, 로그인 시스템은 사용자의 등록 청구를 수신한 후, 랜덤으로 하나의 등록 문자열을 생성하며, 상기 등록 문자열을 사용자에게 제공할 수 있다. 다음, 사용자가 제공된 등록 문자열에 따라 리딩하여 생성한 음성 정보를 수신하고, 상기 음성 정보에 대하여 음성 인식을 행하여 대응되는 텍스트 정보를 획득하며, 상기 텍스트 정보를 시스템에 사전 저장한 등록 문자열의 텍스트 정보와 매칭시킬 수 있고, 매칭에 성공하지 못할 경우, 사용자에게 매칭 오류를 리턴하고, 사용자가 다시 제공된 등록 문자열에 따라 리딩하도록 제시할 수 있으며; 매칭에 성공할 경우, 사용자의 등록이 성공하였음을 판단할 수 있다. 동시에, 또한 ivector(identity-vector) 모델링 방법을 통하여 사용자가 리딩한 등록 문자열의 음성 정보를 추출하여 사용자의 성문을 획득하도록 하고, 상기 사용자의 사용자 정보와 성문의 대응관계를 셋업하고 또한 저장할 수도 있다. 이로써, 사용자는 음성 정보를 통하여 등록을 완성할 수 있어, 사용자의 조작 절차를 간편화하였다.
여기서, 본 발명의 실시예에서, 상기 ivector(identity-vector) 모델링 방법은, 사용자가 리딩한 등록 문자열의 음성 정보를 추출하는 단계; 리딩한 등록 문자열의 음성 정보 중의 멀티 세그먼트 음성의 음향학 특징을 일반 배경 모델 UBM(Universal Background Model) 조건 하에서 Baum-Welch 통계를 행하고, 멀티 세그먼트 음성의 복수개의 ivector를 추출하는 단계; 멀티 세그먼트 음성의 복수개의 ivector에 의하여 사용자의 등록 ivector를 획득하는 단계를 포함할 수 있다. 구체적으로, ivector(identity-vector) 모델링 방법은, 신호 처리 및 모델링 2개 단계를 포함할 수 있다. 신호 처리는 신호의 사전 증가, 음성의 엔드 포인트 검측(VAD), 특징 음향학 추출 및 특징 처리 등 여러가지 부분을 포함할 수 있다. 모델링 단계는 매 세그먼트 음성의 음향학 특징(예를 들어 MFCC)을 일반 배경 모델 UBM 조건 하에서 Baum-Welch 통계를 행하여 그의 사후 확률(posterior probability)을 계산하도록 한다. 상기 사후 확률은 가우스 분포에 복종하고 기대(expectation)가 바로 ivector이다. 예를 들어 한 세그먼트의 음성 u를 L 프레임의 음향학 특징{y1, y2,..., yL}으로 절단할 경우, 특징 차원은 D이고, C개의 가우스를 포함하는 UBM 모델
Figure 112016117499743-pct00001
상에서 Baum-Welch의 0 오더(zero order) 통계 및 1 오더(first order) 통계를 행하며, 그 계산은 다음과 같다.
Figure 112016117499743-pct00002
（1）
Figure 112016117499743-pct00003
（2）
여기서, c = 1, 2,..., C는 가우스 모델의 인덱스이고,
Figure 112016117499743-pct00004
는 yt가 제
Figure 112016117499743-pct00005
번째 가우스에서의 사후 확률이며, mc는 제c번째 가우스의 기대이다. 아래의 공식(3)을 사용하여 음성 u의 ivector를 획득할 수 있다.
Figure 112016117499743-pct00006
（3）
여기서, N은 대각 원소가
Figure 112016117499743-pct00007
인 CDxCD 차원의 정방 행렬(square matrix)이고, F는 모든 1 오더 통계 Fc를 조합시킨 CDx1의 벡터이며,
Figure 112016117499743-pct00008
및
Figure 112016117499743-pct00009
는 ivector 추출기의 전달 행열(transfer matrix) 및 공분산 행열이고, 트레이닝 단계에서 요소 분석 방법을 통하여 획득하는 바, 여기서 직접 옮겨서 취하기만 하면 되고, 오퍼레이터 ()t는 행렬 전치이고, I는 유닛 행렬을 표시한다.
등록 과정에서 사용자가 등록 문자열을 리딩할 경우의 음성 정보가 K마디 말을 구비한다고 가정하고, 매 마디의 말에서 모두 하나의 독립 ivector를 추출하며, 사용자가 모든 숫자 문자열을 리딩하였음을 검측한 후, 이 K개의 ivector를 함께 조합시켜 사용자의 유일한 ivector를 계산하여 사용자의 성문 특징을 표시할 수 있는 바, 즉 계산은 다음과 같다.
Figure 112016117499743-pct00010
（4）
여기서, norm() 오퍼레이터는 길이의 정규화를 표시하는 바, 즉 괄호 내의 벡터의 모드 변경(moding)은 1이다. 동시에, 또한
Figure 112016117499743-pct00011
의 성문 표시 특징 형식도 지원한다.
이로써, 상기 ivector(identity-vector) 모델링 방법을 통하여 사용자가 리딩한 등록 문자열의 음성 정보를 추출하여 사용자의 성문을 획득하게 한다.
더 나아가, 본 발명의 일 실시예에서, 사용자의 등록 과정에서, 우선 사용자가 수요 및 애호에 의하여 교체 문자를 설정하도록 할 수 있다. 구체적으로, 상기 인공 지능을 기반으로 하는 성문 로그인 방법은, 편집 인터페이스를 제공하고, 편집 인터페이스에서 문자열 중의 문자를 교체하기 위한 교체 부호를 제공하는 단계; 사용자가 선택한 교체되는 문자 및 대응되는 교체 부호를 수신하여 문자 대체 대조 정보를 생성하게 하는 단계를 더 포함할 수 있다. 여기서, 본 발명의 실시예에서, 교체 부호는 문자(예를 들어, !@#$%^&*() 등), 이미지(예를 들어 '수', '화', '풍' 등) 또는 한자(예를 들어 '수', '화', '풍' 등) 등을 포함할 수 있지만 이에 한정되지 않는다. 이로써, 특수 문자, 이미지, 한자 등 부호에 대한 결합을 통하여 암호가 더 우호적이도록 하며, 암호의 안전성을 향상시켰다.
더 구체적으로, 사용자의 등록 과정에서, 등록 문자열을 사용자에게 제공하기 이전에, 사용자에게 하나의 편집 인터페이스를 제공하고, 상기 편집 인터페이스에서 문자열 중 키보드의 특수 문자, 한자 또는 이미지 등과 같은 문자를 교체하는 교체 부호를 제공하며, 사용자는 자체 수요 및 애호에 의하여 교체되는 문자 및 대응되는 교체 부호를 선택할 수 있다. 사용자가 선택한 교체되는 문자 및 대응되는 교체 부호를 수신한 후, 사용자의 선택에 의하여 문자 대체 대조 정보를 생성할 수 있다. 예를 들어, 사용자는 자체 애호에 의하여 문자 2를 부호 ?로 교체하고, 문자 8을 부호 &로 교체할 수 있다. 또 예를 들어, 사용자는 자체 애호에 의하여 문자 1을 부호 #로 교체하고, 문자 6을 부호 @로 교체할 수 있으며, 이와 같이, 사용자의 설정에 의하여 상기 사용자의 문자 대체 대조 정보를 생성할 수 있는 바, 즉 문자 2를 부호 ?로 교체하고, 문자 8을 부호 &로 교체하며, 문자 1을 부호 #로 교체하고, 문자 6을 부호 @로 교체할 수 있다.
설명이 필요한 것은, 본 발명의 일 실시예에서, 등록 문자열은 사용자가 선택한 교체되는 문자를 포함할 수 있다. 이와 같이, 문자 대체 대조 정보를 생성한 후, 랜덤으로 하나의 등록 문자열을 생성할 경우, 상기 사용자의 문자 대체 대조 정보에 의하여 상기 등록 문자열(예를 들면 32149658)에서 사용자가 선택한 교체되는 문자(즉 문자 1 및 문자 6)를 문자 교체하는 바, 즉 등록 문자열 32149658을 32#49@58로 교체할 수 있고, 상기 교체한 이후의 등록 문자열 32#49@58을 사용자에게 제공하며, 사용자는 등록 문자열을 리딩할 경우, 자신이 이전에 설정한 교체 부호에 의하여 상기 등록 문자열 중의 교체 문자 # 및 @를 상응한 문자 1 및 6으로 대응되게 리딩할 수 있는 바, 즉 사용자가 등록 문자열(예를 들면 32#49@5)을 리딩할 경우, 32149658로 리딩해야 하는 것이다.
S102, 로그인 문자열을 생성하고, 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 로그인 문자열 중의 적어도 하나의 문자를 교체한다. 여기서, 본 발명의 실시예에서, 로그인 문자열은 랜덤으로 생성된 숫자 문자열일 수 있다. 이로써, 녹음 사기를 방지할 수 있어 로그인의 안전성을 향상시킨다.
구체적으로, 사용자의 로그인 청구를 수신하고 사용자의 사용자 정보를 획득한 후, 상기 사용자를 위해 하나의 로그인 문자열을 랜덤으로 생성할 수 있고, 사용자 정보에 의하여 상기 사용자가 예전에 설정한 문자 대체 대조 정보를 찾아내며, 상기 문자 대체 대조 정보에 의하여 랜덤으로 생성된 로그인 문자열 중의 문자를 교체하는 바, 여기서, 교체되는 문자 및 교체 후의 문자는 모두 사용자가 예전에 설정한 문자 대체 대조 정보에서 기원된다. 예를 들어, 사용자의 문자 대체 대조 정보는, 문자 1을 부호 #로 교체하고, 문자 6을 부호 @으로 교체하는 것을 포함하는 바, 랜덤으로 생성된 로그인 문자열이 91765이면, 문자 대체 대조 정보에 의하여 상기 로그인 문자열을 9#7@5로 교체할 수 있다. 여기서, 본 발명의 실시예에서, 랜덤으로 생성된 로그인 문자열과 등록 문자열 중의 복수개의 숫자는 모두 상이할 수 있음을 이해할 것이다. 이 외에, 로그인 인증 과정에서 사용자가 말한 숫자 열을 사용자가 등록한 성문 특징에 최대한 근접시키기 위해, 로그인 문자열 중의 매 하나의 숫자 또한 다만 한번만 표시될 수 있으며, 동시에, 상기 로그인 문자열은 반드시 사용자가 선택한 교체되는 숫자를 포함해야 한다.
S103, 교체한 이후의 로그인 문자열을 사용자에게 제공하고, 사용자가 리딩한 로그인 문자열의 음성 정보를 수신한다.
구체적으로, 교체한 이후의 로그인 문자열을 사용자에게 제공하고, 사용자는 제시에 따라 상기 로그인 문자열을 리딩할 수 있다. 사용자의 리딩이 완료되었음을 검측한 후, 사용자가 리딩한 상기 로그인 문자열의 음성을 수신할 수 있다.
S104, 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 사용자에 대하여 로그인 인증을 행한다.
구체적으로 말하자면, 본 발명의 실시예에서, 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 대하여 음성 인식을 행하여 음성 정보에 대응되는 텍스트 정보를 획득하고; 텍스트 정보를 로그인 문자열과 매칭시키며; 만약 일치하면, 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 대하여 성문 매칭을 더 행하고; 및 만약 성문 매칭이 통과되었으면, 사용자가 로그인 인증을 통과하였음을 판단할 수 있다.
더 구체적으로, 사용자가 리딩한 로그인 문자열의 음성 정보를 수신한 후, 상기 음성 정보에 대하여 음성 인식을 행하여 대응되는 텍스트 정보를 획득할 수 있고; 다음, 상기 텍스트 정보를 사전 생성된 로그인 문자열과 매칭시킬수 있고; 만약 매칭되지 않으면, 사용자에게 오류를 리턴하고, 사용자가 다시 제공된 로그인 문자열에 따라 리딩하도록 제시할 수 있으며; 다만 매칭될 경우, 음성 정보에 의하여 성문 매칭을 더 행할 수 있고; 만약 상기 음성 정보 중의 성문이 사전 저장한 상기 사용자의 성문과 매칭되면, 사용자가 로그인 인증을 통과하였음을 판단하고, 그렇지 않으면, 로그인에 실패하였다고 간주할 수 있다.
여기서, 로그인 문자열은 하나의 숫자 문자열이고, 사용자가 상기 문자열을 리딩할 경우, 일반적으로 한 마디 말로 상기 문자열을 리딩한다. 즉, 생성된 음성 정보 중의 상기 음성은 한 세그먼트의 음성인 바, 음성 정보 중 한 세그먼트의 음성을 구비하는 것을 예를 들면, 본 발명의 실시예에서, 사용자가 리딩한 로그인 문자열의 음성 정보에 대하여 성문 매칭을 행하는 구체적인 구현 과정은 다음과 같을 수 있다. 사용자가 리딩한 로그인 문자열의 음성 정보를 추출하고; 리딩한 로그인 문자열의 음성 정보 중의 음성의 음향학 특징을 일반 배경 모델 UBM 조건 하에서 Baum-Welch 통계를 행하며, 상기 음성의 ivector를 추출하여 사용자의 로그인 ivector로 하며, 로그인 ivector를 등록 ivector와 비교하여 성문이 매칭되는지의 여부를 판단한다. 구체적으로, 성문 매칭 과정은 신호 처리, 성문 비교 및 일치성 판단, 3개의 단계를 포함할 수 있다. 여기서, 성문 매칭 과정 중의 신호 처리와 등록 과정 중의 신호 처리는 완전히 일치한 바, 상기 등록 과정 중의 신호 처리의 설명을 참조할 수 있으며, 여기서는 더이상 설명하지 않기로 한다. 성문 비교 단계는 로그인 과정에서 생성된 ivector 및 사용자가 등록 시 생성된 ivector를 비교하여 채점하며, 여기서, 코사인 거리, 서포트 벡터 머신(SVM), 베이지안 분류기 및 GPLDA(가우시안 확률 선형 판별 분석) 등 방법을 사용하여 구현할 수 있다. 아래에 기존 시스템에서 사용하는 GPLDA 방법으로 성문 비교 과정을 구체적으로 설명하기로 한다.
인증 과정으로부터 온 ivector가 n1이고, 서버 상에 사용자가 등록한 성문 ivector가 n2이라고 가정할 때, 아래 두가지 가설이 존재한다. H1 양자는 동일한 말한 사람에 속하고; H0 양자는 상이한 말한 사람에 속한다. 따라서, 이 가설에 의해 검측된 대수 공산비(log-likelihood ratio) 점수는 다음과 같다.
Figure 112016117499743-pct00012
（5）
여기서, 분자 분모의 조건 확률의 분포가 모두 가우스 분포에 복종한다고 가정하고, 기대치가 0이다. 이로써, 상기 대수 공산비 점수는 아래 공식(6)으로 간편화할 수 있다.
Figure 112016117499743-pct00013
（6）
여기서, 상기 식(6) 중의
Figure 112016117499743-pct00014
및
Figure 112016117499743-pct00015
는 각기 아래 식(7)로 표시된다.
Figure 112016117499743-pct00016
（7）
여기서,
Figure 112016117499743-pct00017
및
Figure 112016117499743-pct00018
는 GPLDA 모델의 트레이닝 단계로부터 온 것으로, 여기서 직접 추출하기만 하면 된다. 여기서, GPLDA의 모델은 하기 식(8)로 표시된다.
Figure 112016117499743-pct00019
（8）
여기서, 관측된 제r 번째 사람의 ivector를 표시하고, β는 상기 말한 사람의 성문의 진실값이며, 그는 숨은 값이 직접적으로 획득할 수 없고,
Figure 112016117499743-pct00020
는 전달 행열이며,
Figure 112016117499743-pct00021
는 관측 오차이고, N(0,
Figure 112016117499743-pct00022
)의 가우스 분포에 복종한다.
이 외에, 본 발명의 실시예의 성문 인증 과정은 복수 분류기의 점수 융합을 지원할 수 있다. 다시 말하자면, 인증 단계는 여러가지의 분류 계산법을 사용하는 바, 예를 들면, 동시에 SVM, GPLDA 및 코사인 거리 3가지 분류기를 사용하고, 다음 3가지 분류기의 점수를 융합시켜 하나의 최종적인 점수를 획득한다.
이 외에, 본 발명의 실시예의 성문 인증 과정에서는 또 복수 특징의 융합을 지원할 수도 있고, 다시 말하자면, 여러가지의 음향학 특징을 추출할 수 있으며, 다음 동일하거나 상이한 분류기를 사용하여 채점하고, 다시 점수를 함께 융합시킨다. 예를 들어, 한 세그먼트 음성의 MFCC 및 PLP 특징을 동시에 추출하고, 다음, MFCC 및 PLP를 기반으로 하는 ivector를 각각 획득하며, 다시 GPLDA 분류기에 진입하여 2개의 점수를 획득하고, 나중에 이 2개의 점수를 하나의 점수로 융합시킨다.
나중에, 성문의 매칭 과정의 일치성 판단 단계에서, 상기에서 획득한 점수와 하나의 기설정된 임계치를 판단할 수 있고, 만약 상기 점수가 기설정된 임계치보다 클 경우, 동일한 말한 사람(즉, 동일한 사용자)으로 간주하는 바, 즉 상기 사용자가 로그인에 성공하였음을 판단하며, 그렇지 않으면, 상이한 말한 사람으로 간주하고, 상기 사용자가 로그인에 실패하였음을 판단한다.
설명이 필요한 것은, 본 발명의 실시예에서, 등록 문자열 및 로그인 문자열은 랜덤으로 생성된 것이기에, 사용자에게 제공하는 교체한 이후의 등록 문자열 및 로그인 문자열 중의 교체 문자의 위치는 랜덤으로 분포되며, 사용자가 이러한 등록 문자열 및 로그인 문자열을 리딩할 경우, 등록 문자열 및 로그인 문자열 중의 교체 문자를 자신이 설정한 문자로 교체하여 발음하기만 하면 된다. 이로써, 사용자의 수요 및 애호에 따라 은폐된 문자는 사용자가 암호가 명문 텍스트로 표시되는 것을 원하지 않는 심리적 수요를 만족시켰으며, 사용자의 체험도를 향상시켰다.
본 영역의 기술분야에서 통상적인 지식을 가진 자들이 본 발명을 더 명확히 이해할 수 있도록 아래에 예를 들어 설명하기로 한다.
예를 들어 말하자면, 사용자의 로그인 청구를 수신할 경우, 우선 사용자에게 편집 인터페이스를 제공하되, 상기 편집 인터페이스에는 문자열 중의 문자를 교체하기 위한 교체부호가 제공되어 있고, 도2(a)에 도시된 바와 같이, 상기 편집 인터페이스에는 '문자' 및 '로 표시된다' 이 2개의 속성을 구비할 수 있으며, 사용자는 상기 편집 인터페이스에 어떠한 문자를 교체 문자로 교체하여야 하는가 설정하는 바, 예를 들면 문자2를 ?로 교체하여 표시하며, 문자 8을 &로 교체하여 표시할 수 있다. 사용자가 설정을 완료한 후, 사용자의 설정에 의하여 문자 대체 대조 정보를 생성할 수 있다. 다음, 하나의 등록 문자열(예를 들면 67925843)을 랜덤으로 생성하고, 상기 문자 대체 대조 정보에 의하여 상기 등록 문자열을 교체하며, 교체한 이후의 등록 문자열을 사용자에게 제공할 수 있다. 도2(b)에 도시된 바는 바로 사용자에게 제공한 교체한 이후의 등록 문자열 679?5&43이며, 사용자가 리딩할 경우, 상기 문자열 중의 교체 부호를 자신이 설정한 문자로 교체하여 발음하기만 하면 되는 바, 즉 사용자 리딩할 경우, 67925843에 대응되는 발음을 해야 한다. 이때, 사용자의 음성에 의하여 사용자의 성문을 추출하여 후속적인 로그인 인증에 사용하도록 할 수도 있다. 사용자의 로그인 청구를 수신할 경우, 915238과 같은 하나의 로그인 문자열을 랜덤으로 생성할 수 있고, 다음 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 상기 로그인 문자열 915238을 교체하고, 교체한 이후의 로그인 문자열을 사용자에게 제공할 수 있다. 도2(c)에 도시된 바는 바로 사용자에게 제공하는 교체한 이후의 로그인 문자열 915?3&이고, 마찬가지로, 사용자가 리딩할 경우, 상기 문자열 중의 교체 부호를 자신이 설정한 문자로 교체하여 발음하기만 하면 되는 바, 즉 사용자는 리딩할 경우, 915238에 대응되는 발음을 해야 하고, 사용자가 리딩한 로그인 문자열의 음성 정보가 정확함을 인정할 경우, 음성에 의하여 성문 인증을 더 행하며, 만약 성문 매칭이 성공하면, 상기 사용자가 로그인에 성공하였음을 판단할 수 있다.
본 발명의 실시예의 인공 지능을 기반으로 하는 성문 로그인 방법은, 우선 사용자의 로그인 청구를 수신하고, 사용자의 사용자 정보를 획득하며, 다음 로그인 문자열을 생성할 수 있고, 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 로그인 문자열 중의 적어도 하나의 문자를 교체하며, 다음 교체한 이후의 로그인 문자열을 사용자에게 제공하고, 사용자가 리딩한 로그인 문자열의 음성 정보를 수신하며, 및 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 사용자에 대하여 로그인 인증을 행하는 단계를 포함하는 바, 이는 적어도 아래의 여러가지 장점을 구비한다. (1) 성문 및 사용자가 설정한 문자 대체 대조 정보를 결합시킨 성문 인증 방식을 통하여, 성문 암호의 안전성과 전통적인 암호의 안전성이 누가되는 효과를 달성할 수 있어, 성문 암호의 안전성을 향상시켰고; (2) 사용자의 애호에 따라 은폐된 문자는 사용자의 암호가 명문 텍스트로 표시되는 것을 원하지 않는 심리적 수요를 만족시키는 동시에 사용자가 다만 여러개의 교체 문자만을 설정하기만 하면 되기에, 일부러 긴 암호를 기억할 필요가 없어 체험도를 향상시켰고, 또한 암호의 안전성을 향상시켰다.
상기 실시예를 구현하기 위해, 본 발명은, 사용자의 로그인 청구를 수신하고, 상기 사용자의 사용자 정보를 획득하기 위한 획득 모듈; 로그인 문자열을 생성하고, 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 로그인 문자열 중의 적어도 하나의 문자를 교체하기 위한 교체 모듈; 교체한 이후의 로그인 문자열을 사용자에게 제공하기 위한 제1 제공 모듈; 사용자가 리딩한 로그인 문자열의 음성 정보를 수신하기 위한 제1 수신 모듈; 및 사용자가 리딩한 로그인 문자열의 음성 정보에 의하여 사용자에 대한 로그인 인증을 행하기 위한 인증 모듈을 포함하는 인공 지능을 기반으로 하는 성문 로그인 장치를 더 제공한다.
도3은 본 발명의 일 실시예에 따른 인공 지능을 기반으로 하는 성문 로그인 장치의 구조 모식도이다. 도3에 도시된 바와 같이, 상기 인공 지능을 기반으로 하는 성문 로그인 장치는 획득 모듈(10), 교체 모듈(20), 제1 제공 모듈(30), 제1 수신 모듈(40) 및 인증 모듈(50)을 포함할 수 있다.
구체적으로, 획득 모듈(10)은 사용자의 로그인 청구를 수신하고, 사용자의 사용자 정보를 획득하기 위한 것이다. 예를 들어 말하자면, 본 발명의 실시예의 인공 지능 성문 로그인 장치를 웹사이트의 로그인 시스템에 응용한다고 가정할 경우, 사용자가 웹사이트를 오픈하여 로그인을 준비할 경우, 사용자는 클라이언트를 통하여 로그인 시스템에 로그인 청구를 전송할 수 있고, 획득 모듈(10)이 사용자가 클라이언트를 통하여 전송하는 로그인 청구를 수신한 후, 사용자의 사용자 정보를 획득한다. 여기서, 본 발명의 실시예에서, 사용자 정보는 계정/사용자명, 사용자ID 등을 포함할 수 있지만 이에 한정되지 않는다.
교체 모듈(20)은 로그인 문자열을 생성하고, 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 로그인 문자열 중의 적어도 하나의 문자를 교체하기 위한 것이다. 여기서, 본 발명의 실시예에서, 로그인 문자열은 랜덤으로 생성된 문자열일 수 있다. 이로써, 녹음 사기를 방지할 수 있어 로그인의 안전성을 향상시킨다. 더 구체적으로, 획득 모듈(10)이 사용자의 로그인 청구를 수신하고 사용자의 사용자 정보를 획득한 후, 교체 모듈(20)이 상기 사용자를 위해 하나의 로그인 문자열을 랜덤으로 생성할 수 있고, 사용자 정보에 의하여 대응되는 문자 대체 대조 정보를 찾아내며, 상기 문자 대체 대조 정보에 의하여 랜덤으로 생성된 로그인 문자열 중의 문자를 교체하는 바, 여기서, 교체되는 문자 및 교체 후의 문자는 모두 문자 대체 대조 정보에서 기원된다. 예를 들어, 사용자의 문자 대체 대조 정보는, 문자 1을 부호 #로 교체하고, 문자 6을 부호 @으로 교체하는 것을 포함하는 바, 랜덤으로 생성된 로그인 문자열이 91765이면, 문자 대체 대조 정보에 의하여 상기 로그인 문자열을 9#7@5로 교체할 수 있다. 여기서, 로그인 인증 과정에서 사용자가 말한 숫자 문자열을 사용자가 등록한 성문 특징에 최대한 근접시키기 위해, 로그인 문자열 중의 매 하나의 숫자 또한 다만 한번만 표시될 수 있으며, 동시에, 상기 로그인 문자열은 반드시 사용자가 선택한 교체되는 숫자를 포함해야 한다.
제1 제공 모듈(30)은 교체한 이후의 로그인 문자열을 사용자에게 제공하기 위한 것이다. 제1 수신 모듈(40)은 사용자가 리딩한 로그인 문자열의 음성 정보를 수신하기 위한 것이다. 더 구체적으로, 제1 제공 모듈(30)은 교체한 이후의 로그인 문자열을 사용자에게 제공하고, 사용자는 제시에 따라 상기 로그인 문자열을 리딩할 수 있다. 제1 수신 모듈(40)은 사용자가 리딩을 완료하였음을 검측한 후, 사용자가 리딩한 상기 로그인 문자열의 음성을 수신할 수 있다.
인증 모듈(50)은 사용자가 리딩한 로그인 문자열의 음성 정보에 의하여 사용자에 대하여 로그인 인증을 행하기 위한 것이다. 구체적으로 말하자면, 본 발명의 실시예에서, 인증 모듈(50)이 사용자가 리딩한 로그인 문자열의 음성 정보에 의하여 사용자에 대하여 로그인 인증을 행하는 구체적인 구현 과정은 다음과 같을 수 있다. 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 대하여 음성 인식을 행하여 음성 정보에 대응되는 텍스트 정보를 획득하고; 텍스트 정보를 로그인 문자열과 매칭시키며; 만약 일치하면, 음성 정보에 대하여 성문 매칭을 더 행하고; 및 만약 성문 매칭이 통과되었으면, 사용자가 로그인 인증을 통과하였음을 판단한다.
더 구체적으로, 인증 모듈(50)은 사용자가 리딩한 로그인 문자열의 음성 정보를 수신한 후, 상기 음성 정보에 대하여 음성 인식을 행하여 대응되는 텍스트 정보를 획득할 수 있고; 다음, 상기 텍스트 정보를 사전 생성된 로그인 문자열과 매칭시킬 수 있고; 만약 매칭되지 않으면, 사용자에게 매칭 오류를 리턴하고, 사용자가 다시 제공된 로그인 문자열에 따라 리딩하도록 제시할 수 있으며; 다만 매칭될 경우, 음성 정보에 의하여 성문 매칭을 더 행할 수 있고; 만약 상기 음성 정보 중의 성문이 사전 저장한 상기 사용자의 성문과 매칭되면, 사용자가 로그인 인증을 통과하였음을 판단하고, 그렇지 않으면, 로그인에 실패하였다고 간주할 수 있다.
여기서, 로그인 문자열은 하나의 숫자 문자열이고, 사용자가 상기 문자열을 리딩할 경우, 일반적으로 한 마디 말로 상기 문자열을 리딩하는 바, 즉, 생성된 음성 정보 중의 상기 음성은 한 세그먼트의 음성이어야 하고, 음성 정보 중 한 세그먼트의 음성을 구비하는 것을 예를 들면, 본 발명의 실시예에서, 인증 모듈(50)이 사용자가 리딩한 로그인 문자열의 음성 정보에 대하여 성문 매칭을 행하는 구체적인 구현 과정은 다음과 같을 수 있다. 사용자가 리딩한 로그인 문자열의 음성 정보를 추출하고; 리딩한 로그인 문자열의 음성 정보 중의 음성의 음향학 특징을 일반 배경 모델 UBM 조건 하에서 Baum-Welch 통계를 행하며, 상기 음성의 ivector를 추출하여 사용자의 로그인 ivector로 하며, 로그인 ivector를 등록 ivector와 비교하여 성문이 매칭되는지의 여부를 판단한다. 구체적으로, 구현 과정은 본 발명의 실시예의 인공 지능을 기반으로 하는 성문 로그인 방법 중의 설명을 참조할 수 있으며, 여기서는 더이상 설명하지 않기로 한다.
더 나아가, 본 발명의 일 실시예에서, 도4에 도시된 바와 같이, 상기 인공 지능을 기반으로 하는 성문 로그인 장치는 제2 수신 모듈(60) 및 추출 모듈(70)을 더 포함할 수 있다. 구체적으로, 제2 수신 모듈(60)은 획득 모듈(10)이 사용자의 로그인 청구를 수신하고, 사용자의 사용자 정보를 획득하기 이전에, 사용자의 등록 청구를 수신하며, 등록 문자열을 사용자에게 제공하기 위한 것이다. 추출 모듈(70)은 사용자가 리딩한 등록 문자열의 음성 정보를 수신하고, 사용자의 성문을 추출하기 위한 것이다. 여기서, 본 발명의 실시예에서, 등록 문자열은 랜덤으로 생성된 숫자 문자열일 수 있다. 이 외에, 더 큰 샘플 공간을 커버할 수 있도록, 등록 문자열 중의 숫자는 다만 한번만 표시된다. 본 발명의 실시예에서, 랜덤으로 생성된 로그인 문자열과 등록 문자열 중의 복수개의 숫자는 모두 상이할 수 있음을 이해할 것이다.
더 구체적으로, 본 발명의 실시예의 인공 지능 성문 로그인 장치를 웹사이트 로그인 시스템에 응용한다고 가정할 경우, 사용자가 웹사이트를 오픈하여 등록을 준비할 경우, 사용자는 클라이언트를 통하여 로그인 시스템에 등록 청구를 전송할 수 있고, 제2 수신 모듈(60)은 사용자의 등록 청구를 수신한 후, 랜덤으로 하나의 등록 문자열을 생성하며, 상기 등록 문자열을 사용자에게 제공할 수 있다. 추출 모듈(70)은 사용자가 제공된 등록 문자열에 따라 리딩하여 생성한 음성 정보를 수신하고, 상기 음성 정보에 대하여 음성 인식을 행하여 대응되는 텍스트 정보를 획득하며, 상기 텍스트 정보를 시스템에 사전 저장한 등록 문자열의 텍스트 정보와 매칭시키고, 매칭에 성공하지 못할 경우, 사용자에게 매칭 오류를 리턴하고, 사용자가 다시 제공된 등록 문자열에 따라 리딩하도록 제시할 수 있으며; 매칭에 성공할 경우, 사용자의 등록이 성공하였음을 판단할 수 있다. 동시에, 추출 모듈(70)은 또한 ivector(identity-vector) 모델링 방법을 통하여 사용자가 리딩한 등록 문자열의 음성 정보를 추출하여 사용자의 성문을 획득하도록 하고, 상기 사용자의 사용자 정보와 성문의 대응관계를 셋업하고 또한 저장할 수도 있다. 이로써, 사용자는 음성 정보를 통하여 등록을 완성할 수 있어, 사용자의 조작 절차를 간편화하였다.
여기서, 본 발명의 실시예에서, 상기 ivector(identity-vector) 모델링 방법은, 사용자가 리딩한 등록 문자열의 음성 정보를 추출하는 단계; 리딩한 등록 문자열의 음성 정보 중의 멀티 세그먼트 음성의 음향학 특징을 일반 배경 모델 UBM 조건 하에서 Baum-Welch 통계를 행하고, 멀티 세그먼트 음성의 복수개의 ivector를 추출하는 단계; 멀티 세그먼트 음성의 복수개의 ivector에 의하여 사용자의 등록 ivector를 획득하는 단계를 포함할 수 있다. 구체적인 구현 과정은 상기 본 발명의 실시예의 인공 지능을 기반으로 하는 성문 로그인 방법 중의 구체적인 설명을 참조할 수 있으며, 여기서는 더 이상 설명하지 않기로 한다.
더 나아가, 본 발명의 실시예에서, 도5에 도시된 바와 같이, 상기 인공 지능을 기반으로 하는 성문 로그인 장치는 또한 제2 제공 모듈(80) 및 생성 모듈(90)을 포함할 수 있다. 구체적으로, 제2 제공 모듈(80)은 편집 인터페이스를 제공하고, 편집 인터페이스에서 문자열 중의 문자를 교체하기 위한 교체 부호를 제공하기 위한 것이다. 생성 모듈(90)은 사용자가 선택한 교체되는 문자 및 대응되는 교체 부호를 수신하여 문자 대체 대조 정보를 생성하기 위한 것이다. 여기서, 본 발명의 실시예에서, 교체 부호는 문자(예를 들어, !@#$%^&*() 등), 이미지(예를 들어 '수', '화', '풍' 등) 또는 한자(예를 들어 '수', '화', '풍' 등) 등을 포함할 수 있지만 이에 한정되지 않는다. 이로써, 특수 문자, 이미지, 한자 등 부호에 대한 결합을 통하여 암호가 더 우호적이도록 하며, 암호의 안전성을 향상시켰다.
더 구체적으로, 사용자의 등록 과정에 있어서, 제2 수신 모듈(60)이 등록 문자열을 사용자에게 제공하기 이전에, 제2 제공 모듈(80)은 사용자에게 하나의 편집 인터페이스를 제공할 수 있고, 상기 편집 인터페이스에 교체 문자열 중의 키보드의 특수 문자, 한자 또는 이미지 등과 같은 문자를 교체하는 교체 부호를 제공하며, 사용자는 자체 수요 및 애호에 의하여 교체되는 문자 및 대응되는 교체 부호를 선택할 수 있다. 생성 모듈(90)은 사용자가 선택한 교체되는 문자 및 대응되는 교체 부호를 수신한 후, 사용자의 선택에 의하여 문자 대체 대조 정보를 생성할 수 있다. 예를 들어, 사용자는 자체 애호에 의하여 문자 2를 부호 ?로 교체하고, 문자 8을 부호 &로 교체할 수 있다. 또 예를 들어, 사용자는 자체 애호에 의하여 문자 1을 부호 #로 교체하고, 문자 6을 부호 @로 교체할 수 있으며, 이와 같이, 사용자의 설정에 의하여 상기 사용자의 문자 대체 대조 정보를 생성할 수 있는 바, 즉 문자 2를 부호 ?로 교체하고, 문자 8을 부호 &로 교체하며, 문자 1을 부호 #로 교체하고, 문자 6을 부호 @로 교체할 수 있다.
설명이 필요한 것은, 본 발명의 일 실시예에서, 등록 문자열은 사용자가 선택한 교체되는 문자를 포함할 수 있다. 이와 같이, 생성 모듈(90)이 문자 대체 대조 정보를 생성한 후, 제2 수신 모듈(60)이 랜덤으로 하나의 등록 문자열을 생성할 경우, 상기 사용자의 문자 대체 대조 정보에 의하여 상기 등록 문자열(예를 들면 32149658)에서 사용자가 선택한 교체되는 문자(즉 문자 1 및 문자 6)를 문자 교체하는 바, 즉 등록 문자열 32149658을 32#49@58로 교체할 수 있고, 상기 교체한 이후의 등록 문자열 32#49@58을 사용자에게 제공하며, 사용자는 등록 문자열을 리딩할 경우, 자신이 이전에 설정한 교체 부호에 의하여 상기 등록 문자열 중의 교체 문자 # 및 @를 상응한 문자 1 및 6으로 대응되게 리딩할 수 있는 바, 즉 사용자가 등록 문자열(예들 들면 32#49@5)을 리딩할 경우, 32149658로 리딩하는 것이다.
설명이 필요한 것은, 본 발명의 실시예에서, 등록 문자열 및 로그인 문자열은 랜덤으로 생성된 것이기에, 사용자에게 제공하는 교체한 이후의 등록 문자열 및 로그인 문자열 중의 교체 문자의 위치는 랜덤으로 분포되며, 사용자가 이와 같은 등록 문자열 및 로그인 문자열을 리딩할 경우, 등록 문자열 및 로그인 문자열 중의 교체 문자를 자신이 설정한 문자로 교체하여 발음하기만 하면 된다. 이로써, 사용자의 수요 및 애호에 따라 은폐한 문자는 사용자가 암호가 명문 텍스트로 표시되는 것을 원하지 않는 심리적 수요를 만족시켰으며, 사용자의 체험도를 향상시켰다.
본 발명의 실시예의 인공 지능을 기반으로 하는 성문 로그인 장치는, 획득 모듈을 통하여 사용자의 로그인 청구를 수신하고, 사용자의 사용자 정보를 획득하며, 교체 모듈이 로그인 문자열을 생성하고, 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 로그인 문자열 중의 적어도 하나의 문자를 교체하며, 제1 제공 모듈이 교체한 이후의 로그인 문자열을 사용자에게 제공하고, 제1 수신 모듈이 사용자가 리딩한 로그인 문자열의 음성 정보를 수신하고, 인증 모듈이 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 사용자에 대하여 로그인 인증을 행할 수 있는 것을 통하여 적어도 아래의 여러가지 장점을 구비한다. (1) 성문 및 사용자가 설정한 문자 대체 대조 정보를 결합시킨 성문 인증 방식을 통하여, 성문 암호의 안전성과 전통적인 암호의 안전성이 누가되는 효과를 달성할 수 있어, 성문 암호의 안전성을 향상시켰고; (2) 사용자의 애호에 따라 은폐된 문자는 사용자의 암호가 명문 텍스트로 표시되는 것을 원하지 않는 심리적 수요를 만족시키는 동시에 사용자가 다만 여러개의 교체 문자만을 설정하기만 하면 되기에, 일부러 긴 암호를 기억할 필요가 없어 체험도를 향상시켰고, 또한 암호의 안전성을 향상시켰다.
본 발명의 설명에 있어서, 용어"제1", "제2"는 단지 설명의 목적인 것일 뿐, 상대적인 중요성을 지시하거나 암시하는 것 또는 지시된 기술 특징의 수량을 함축적으로 제시하는 것으로 이해해서는 안된다. 이에 따라, "제1", "제2"로 한정된 특징은 적어도 하나의 당해 특징을 명시하거나 함춤적으로 포함할 수 있다. 본 발명의 설명에서, 별도로 명확하게 구체적인 한정을 하지 않는 한 "복수개"의 함의는 두개 또는 두개 이상이다.
본 명세서의 설명에서, 참조 용어 "일 실시예", "일부 실시예", "예시", "구체적인 예시" 또는 "일부 예시"등의 설명은 당해 실시예 또는 예시를 결부하여 설명되는 구체적인 특징, 구조, 재료 또는 특점이 본 발명의 적어도 하나의 실시예 또는 예시에 포함된다는 것을 뜻한다. 본 명세서에서, 상기 용어에 대한 함축적인 표달은 반드시 동일한 실시예 또는 예시를 겨냥 하는 것은 아니다. 그리고, 설명의 구체적인 특징, 구조, 재료 또는 특점은 임의의 하나의 또는 복수개의 실시예 또는 예시에서 적합한 방식으로 결합될 수 있다. 이 외에, 서로 모순되지 않는 상황에서, 본 발명이 속하는 분야의 통상의 지식을 가진 자들은 본 명세서에서 설명한 다른 실시예 또는 예시 및 다른 실시예 또는 예시의 특징에 대해 결합과 조합을 행할 수 있다.
흐름도에서 또는 여기에서 기타 방식으로 설명되는 어떠한 과정 또는 방법 설명은 한개 또는 더 많은 수량의 특정 로직 기능이나 과정의 단계를 실현하기 위한 수행가능 명령의 코드의 모듈, 단락 또는 부분을 포함하는 것을 나타내는것으로 이해할 수 있다. 그리고 본 발명의 바람직한 실시 방식의 범위는 별도의 실현을 포함하는바, 여기서 관련되는 기능은 제시되거나 토론된 순서대로가 아닌, 거의 동시의 방식 또는 상반되는 순서를 포함한 순서에 따라 수행될 수 있는바, 이는 본 발명의 실시예가 속하는 기술 분야의통상의 지식을 가진 자들에 의해 이해될 수 있다.
흐름도에서 표시되거나 여기서 기타 방식으로 설명되는 로직 및/또는 단계, 예를 들면, 로직 기능을 실현하기 위한 수행가능 명령의 서열 리스트로 여길 수 있으며, 구체적으로 어떠한 컴퓨터 판독가능 매개물에서 실현되어 명령 수행 시스템, 장치 또는 설비(예를 들면, 컴퓨터에 기초한 시스템, 프로세서를 포함한 시스템 또는 기타 명령 수행 시스템, 장치나 설비로부터 명령을 취득하고 명령을 수행할 수 있는 시스템)에 제공되어 사용될 수 있거나 또는 이런 명령 수행 시스템, 장치 또는 설비를 결부하여 사용할 수 있다. 본 명세서에 대해 말하자면, "컴퓨터 판독가능 매개물"은 어떠한 프로그램을 포함, 저장, 통신, 전파 또는 전송하여 명령 수행 시스템, 장치 또는 설비에 제공할 수 있거나 또는 이런 명령 수행 시스템, 장치 또는 설비를 결부하여 사용하는 장치 일 수 있다. 컴퓨터 판독가능 매개물의 더 구체적인 예시(비 전면 리스트임)하기와 같은 것을 포함한다. 하나의 또는 복수개의 배선을 갖는 전기 연결부(전자 장치), 휴대용 컴퓨터 디스크 케이스(자기 장치), 랜덤 액세스 메모리(RAM), 판독 전용 기억 장치(ROM), 소거 프로그램 가능 랜덤 액세스 메모리(EPROM또는 플래시 메모리), 광섬유 장치 및 시디롬(CDROM). 이 외에, 컴퓨터 판독 가능 매개물은 심지어 그 위에 상기 프로그램을 프린트할 수 있는 종이나 기타 적합한 매개물일 수 있다. 종이 또는 기타 매개물에 대해 광학 스캐닝을 행하고 이어 편집, 해독을 행하거나 필요할 때 기타 적합한 방식으로 처리하는 것을 통하여 전자 방식으로 상기 프로그램을 획득하고, 다음 그를 컴퓨터 메모리에 저장할 수 있기 때문이다.
본 발명의 각 부분은 하드웨어, 소프트웨어, 펌웨어 또는 그들의 조합으로 실현될 수 있다는 것으로 이해되어야 한다. 상기 실시 방식에서, 복수개의 단계나 방법은 메모리에 저장된 적합한 명령 수행 시스템이 수행하는 소프트웨어 또는 펌웨어로 실현할 수 있다. 예를 들면, 만약 하드웨어로 실현한다면 다른 한 실시 방식에서처럼 본 분야에서 공지된 아래에 열거한 기술 중의 어느 한 항 또는 그들의 조합으로 실현할 수 있다. 데이터 신호에 대해 로직 기능을 실현하기 위한 로직 게이트 회로를 구비한 이산 로직 회로, 적합한 조합 로직 게이트 회로를 구비한 전용 집적 회로, 프로그램 가능 게이트 어레이(PGA), 필드 프로그램 가능 게이트 어레이(FPGA)등이다.
본 발명이 속하는 기술 분야의 통상의 지식을 가진 자들은, 상기 실시예 방법이 지닌 전부 또는 일부 단계를 실현하는 것은 프로그램을 통하여 관련 하드웨어를 명령하여 완성할 수 있고, 상기 프로그램은 컴퓨터 판독가능 저장 매개물에 저장될 수 있으며, 당해 프로그램이 수행될 때 방법 실시예의 단계 중의 하나 또는 그 조합을 포함한다는 것을 이해할 수 있다.
이 외에, 본 발명의 각각의 실시예에서 각 기능 유닛은 하나의 처리 모듈에 집적될 수 있고, 각 유닛이 단독으로 물리적으로 존재할 수도 있으며 두개 또는 두개 이상의 유닛이 하나의 모듈에 집적될 수도 있다. 상기 집적된 모듈은 하드웨어의 형식으로 실현될 수도 있고, 소프트웨어 기능 모듈의 형식을 적용하여 실현할 수도 있다. 상기 통합된 모듈이 만약 소프트웨어 기능 모듈의 형식으로 실현되고 독립된 제품으로 판매되거나 사용될 때 하나의 컴퓨터 판독가능 저장 매개물에 저장될 수도 있다.
위에서 언급된 저장 매개물은 읽기 전용 기억 장치, 디스크 또는 CD일 수 있다.
비록 위에서 이미 본 발명의 실시예를 제시하고 설명하였지만 상기 실시예는 예시적인 것이고 본 발명에 대한 한정으로 이해해서는 안되고 본 발명이 속하는 기술 분야의 통상의 지식을 가진 자들은 본 발명의 범위내에서 상기 실시예에 대해 변화, 수정, 대체, 변형을 행할 수 있다는 것을 이해할 수 있다.

Claims (22)

  1. 사용자의 로그인 청구를 수신하고, 상기 사용자의 사용자 정보를 획득하는 S1 단계;
    로그인 문자열을 생성하고, 상기 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 상기 로그인 문자열 중의 적어도 하나의 문자를 교체하는 S2 단계;
    교체한 이후의 상기 로그인 문자열을 상기 사용자에게 제공하고, 상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보를 수신하는 S3 단계; 및
    상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 상기 사용자에 대하여 로그인 인증을 행하는 S4단계를 포함하고,
    상기 문자 대체 대조 정보는 사용자가 선택한 교체되는 문자에 대한 정보를 포함하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  2. 제1항에 있어서,
    상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 상기 사용자에 대하여 로그인 인증을 행하는 단계는 구체적으로,
    상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 대하여 음성 인식을 행하여 상기 음성 정보에 대응되는 텍스트 정보를 획득하도록 하는 S41 단계;
    상기 텍스트 정보를 상기 로그인 문자열과 매칭시키는 S42 단계;
    만약 일치하면, 상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 대하여 성문 매칭을 더 행하는 S43 단계;
    만약 성문 매칭이 통과되면, 상기 사용자가 로그인 인증을 통과하였음을 판단하는 S44 단계를 포함하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  3. 제1항 또는 제2항에 있어서,
    상기 S1 단계의 이전에,
    상기 사용자의 등록 청구를 수신하고, 등록 문자열을 상기 사용자에게 제공하는 S5 단계; 및
    상기 사용자가 리딩한 상기 등록 문자열의 음성 정보를 수신하고, 상기 사용자의 성문을 추출하는 S6 단계를 더 포함하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  4. 제3항에 있어서,
    편집 인터페이스를 제공하고, 상기 편집 인터페이스에 문자열 중의 문자를 교체하기 위한 교체 부호를 제공하는 S7 단계; 및
    사용자가 선택한 교체되는 문자 및 대응되는 교체 부호를 수신하여 상기 문자 대체 대조 정보를 생성하도록 하는 S8 단계를 더 포함하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  5. 제4항에 있어서,
    상기 교체 부호는 문자, 이미지 또는 한자인 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  6. 제3항에 있어서,
    상기 등록 문자열 및 상기 로그인 문자열은 랜덤으로 생성된 숫자 문자열이고, 여기서 상기 등록 문자열 및 상기 로그인 문자열 중의 복수개의 숫자는 모두 상이한 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  7. 제6항에 있어서,
    상기 등록 문자열에는 상기 사용자가 선택한 교체되는 문자가 포함되는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  8. 제3항에 있어서,
    Ivector(identity-vector) 모델링 방법을 통하여 상기 사용자의 성문을 추출하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  9. 제8항에 있어서,
    Ivector(identity-vector) 모델링 방법은,
    상기 사용자가 리딩한 상기 등록 문자열의 음성 정보를 추출하는 단계;
    리딩한 상기 등록 문자열의 상기 음성 정보 중의 멀티 세그먼트 음성의 음향학 특징을 일반 배경 모델 UBM 조건 하에서 Baum-Welch 통계를 행하고, 상기 멀티 세그먼트 음성의 복수개의 ivector를 추출하는 단계;
    상기 멀티 세그먼트 음성의 복수개의 ivector에 의하여 상기 사용자의 등록 ivector를 획득하는 단계를 포함하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  10. 제6항에 있어서,
    상기 로그인 문자열에는 상기 사용자가 선택한 교체되는 문자가 포함되는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  11. 제9항에 있어서,
    상기 사용자가 리딩한 상기 등록 문자열의 음성 정보를 성문 매칭시키는 단계는 구체적으로,
    상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보를 추출하는 단계;
    상기 사용자가 리딩한 상기 로그인 문자열의 상기 음성 정보 중의 음성의 음향학 특징을 일반 배경 모델 UBM 조건 하에서 Baum-Welch 통계를 행하고, 상기 음성의 ivector를 추출하여 상기 사용자의 로그인 ivector로 하는 단계;
    상기 로그인 ivector를 상기 등록 ivector와 비교하여 성문이 매칭되는지의 여부를 판단하도록 하는 단계를 포함하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 방법.
  12. 사용자의 로그인 청구를 수신하고, 상기 사용자의 사용자 정보를 획득하기 위한 획득 모듈;
    로그인 문자열을 생성하고, 상기 사용자 정보에 대응되는 문자 대체 대조 정보에 의하여 상기 로그인 문자열 중의 적어도 하나의 문자를 교체하기 위한 교체 모듈;
    교체한 이후의 상기 로그인 문자열을 상기 사용자에게 제공하기 위한 제1 제공 모듈;
    상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보를 수신하기 위한 제1 수신 모듈; 및
    상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 의하여 상기 사용자에 대하여 로그인 인증을 행하기 위한 인증 모듈을 포함하고,
    상기 문자 대체 대조 정보는 사용자가 선택한 교체되는 문자에 대한 정보를 포함하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
  13. 제12항에 있어서,
    상기 인증 모듈은 구체적으로,
    상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 대하여 음성 인식을 행하여 상기 음성 정보에 대응되는 텍스트 정보를 획득하고;
    상기 텍스트 정보를 상기 로그인 문자열과 매칭시키며;
    만약 일치하면, 상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보에 대하여 성문 매칭을 더 행하고;
    만약 성문 매칭이 통과되면, 상기 사용자가 로그인 인증을 통과하였음을 판단하기 위한 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
  14. 제12항 또는 제13항에 있어서,
    상기 획득 모듈이 상기 사용자의 로그인 청구를 수신하고, 상기 사용자의 사용자 정보를 획득하기 이전에, 상기 사용자의 등록 청구를 수신하며, 등록 문자열을 상기 사용자에게 제공하기 위한 제2 수신 모듈; 및
    상기 사용자가 리딩한 상기 등록 문자열의 음성 정보를 수신하고, 상기 사용자의 성문을 추출하기 위한 추출 모듈을 더 포함하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
  15. 제14항에 있어서,
    편집 인터페이스를 제공하고, 상기 편집 인터페이스에 문자열 중의 문자를 교체하기 위한 교체 부호를 제공하기 위한 제2 제공 모듈; 및
    사용자가 선택한 교체되는 문자 및 대응되는 교체 부호를 수신하여 상기 문자 대체 대조 정보를 생성하도록 하기 위한 생성 모듈을 더 포함하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
  16. 제15항에 있어서,
    상기 교체 부호는 문자, 이미지 또는 한자인 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
  17. 제14항에 있어서,
    상기 등록 문자열 및 상기 로그인 문자열은 랜덤으로 생성된 숫자 문자열이고, 상기 등록 문자열 및 상기 로그인 문자열 중의 복수개의 숫자는 모두 상이한 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
  18. 제17항에 있어서,
    상기 등록 문자열에는 상기 사용자가 선택한 교체되는 문자가 포함되는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
  19. 제14항에 있어서,
    상기 추출 모듈은 Ivector(identity-vector) 모델링 방법을 통하여 상기 사용자의 성문을 추출하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.

  20. 제19항에 있어서,
    상기 Ivector(identity-vector) 모델링 방법은,
    상기 사용자가 리딩한 상기 등록 문자열의 음성 정보를 추출하고;
    리딩한 상기 등록 문자열의 상기 음성 정보 중의 멀티 세그먼트 음성의 음향학 특징을 일반 배경 모델 UBM 조건 하에서 Baum-Welch 통계를 행하고, 상기 멀티 세그먼트 음성의 복수개의 ivector를 추출하며;
    상기 멀티 세그먼트 음성의 복수개의 ivector에 의하여 상기 사용자의 등록 ivector를 획득하는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
  21. 제17항에 있어서,
    상기 로그인 문자열에는 상기 사용자가 선택한 교체되는 문자가 포함되는 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
  22. 제20항에 있어서,
    상기 인증 모듈은 구체적으로,
    상기 사용자가 리딩한 상기 로그인 문자열의 음성 정보를 추출하고;
    상기 사용자가 리딩한 상기 로그인 문자열의 상기 음성 정보 중의 음성의 음향학 특징을 일반 배경 모델 UBM 조건 하에서 Baum-Welch 통계를 행하고, 상기 음성의 ivector를 추출하여 상기 사용자의 로그인 ivector로 하며;
    상기 로그인 ivector를 상기 등록 ivector와 비교하여 성문이 매칭되는지의 여부를 판단하도록 하기 위한 것을 특징으로 하는 인공 지능을 기반으로 하는 성문 로그인 장치.
KR1020167033617A 2015-03-20 2015-07-15 인공 지능을 기반으로 하는 성문 로그인 방법 및 장치 KR101908711B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201510125685.7 2015-03-20
CN201510125685.7A CN104821934B (zh) 2015-03-20 2015-03-20 基于人工智能的声纹登录方法和装置
PCT/CN2015/084038 WO2016150032A1 (zh) 2015-03-20 2015-07-15 基于人工智能的声纹登录方法和装置

Publications (2)

Publication Number Publication Date
KR20160147280A KR20160147280A (ko) 2016-12-22
KR101908711B1 true KR101908711B1 (ko) 2018-10-16

Family

ID=53732097

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167033617A KR101908711B1 (ko) 2015-03-20 2015-07-15 인공 지능을 기반으로 하는 성문 로그인 방법 및 장치

Country Status (6)

Country Link
US (1) US10380332B2 (ko)
EP (1) EP3174262B1 (ko)
JP (1) JP6567040B2 (ko)
KR (1) KR101908711B1 (ko)
CN (1) CN104821934B (ko)
WO (1) WO2016150032A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102227418B1 (ko) 2020-01-13 2021-03-12 (주)인에이블 화자 인증 방법

Families Citing this family (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
KR102103057B1 (ko) 2013-02-07 2020-04-21 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
CN105227557A (zh) * 2015-10-10 2016-01-06 北京云知声信息技术有限公司 一种帐号处理方法及装置
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
CN105656887A (zh) 2015-12-30 2016-06-08 百度在线网络技术（北京）有限公司 基于人工智能的声纹认证方法以及装置
CN105450665B (zh) * 2015-12-30 2018-11-06 宇龙计算机通信科技(深圳)有限公司 安全登录方法及装置、终端
CN105631295A (zh) * 2015-12-30 2016-06-01 宇龙计算机通信科技(深圳)有限公司 一种基于声纹信息的解密方法及装置
CN107104922B (zh) * 2016-02-22 2020-07-03 阿里巴巴集团控股有限公司 一种权限管理和资源控制的方法及装置
US10446143B2 (en) * 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US20190121949A1 (en) * 2016-03-30 2019-04-25 Huawei Technologies Co., Ltd. Voice Unlocking Method For Terminal And Terminal
KR102558139B1 (ko) * 2016-04-28 2023-07-21 에스케이플래닛 주식회사 개인화 템플릿을 이용한 보안 메시지 전송 방법 및 이를 이용한 장치
CN105933323B (zh) * 2016-06-01 2019-05-31 百度在线网络技术（北京）有限公司 声纹注册、认证方法及装置
CN106057206B (zh) * 2016-06-01 2019-05-03 腾讯科技（深圳）有限公司 声纹模型训练方法、声纹识别方法及装置
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10964329B2 (en) * 2016-07-11 2021-03-30 FTR Labs Pty Ltd Method and system for automatically diarising a sound recording
US10607148B1 (en) * 2016-12-21 2020-03-31 Facebook, Inc. User identification with voiceprints on online social networks
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US10445519B2 (en) * 2017-08-29 2019-10-15 Blackberry Limited System and method for data input resistant to capture
KR102087202B1 (ko) * 2017-09-13 2020-03-10 (주)파워보이스 인공 지능 비서 서비스 제공 방법, 및 이에 사용되는 음성 인식 장비
CN107863108B (zh) * 2017-11-16 2021-03-23 百度在线网络技术（北京）有限公司 信息输出方法和装置
CN107977557A (zh) * 2017-11-30 2018-05-01 广州势必可赢网络科技有限公司 一种基于声纹识别的电子合同签署服务认证协议及服务器
KR102443632B1 (ko) 2017-12-18 2022-09-15 삼성전자주식회사 전자 장치, 전자 시스템 및 그 제어 방법
US10929258B1 (en) * 2017-12-21 2021-02-23 Innovative Defense Technologies, LLC Method and system for model-based event-driven anomalous behavior detection
CN108682414A (zh) * 2018-04-20 2018-10-19 深圳小祺智能科技有限公司 语音控制方法、语音系统、设备和存储介质
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
CN108932946B (zh) * 2018-06-29 2020-03-13 百度在线网络技术（北京）有限公司 客需服务的语音交互方法和装置
KR102637339B1 (ko) * 2018-08-31 2024-02-16 삼성전자주식회사 음성 인식 모델을 개인화하는 방법 및 장치
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
JP7326033B2 (ja) * 2018-10-05 2023-08-15 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 話者認識装置、話者認識方法、及び、プログラム
CN111199729B (zh) * 2018-11-19 2023-09-26 阿里巴巴集团控股有限公司 声纹识别方法及装置
CN109473108A (zh) * 2018-12-15 2019-03-15 深圳壹账通智能科技有限公司 基于声纹识别的身份验证方法、装置、设备及存储介质
EP3906508B1 (en) * 2018-12-31 2024-03-13 Intel Corporation Securing systems employing artificial intelligence
CN109801634B (zh) * 2019-01-31 2021-05-18 北京声智科技有限公司 一种声纹特征的融合方法及装置
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
CN114175149A (zh) * 2019-07-01 2022-03-11 谷歌有限责任公司 自适应日志模型和用户界面
CN110491389B (zh) * 2019-08-19 2021-12-14 效生软件科技(上海)有限公司 一种话务系统的声纹识别方法
CN110689906A (zh) * 2019-11-05 2020-01-14 江苏网进科技股份有限公司 一种基于语音处理技术的执法检测方法及系统
CN111090846B (zh) * 2019-12-06 2023-07-21 中信银行股份有限公司 登录认证方法、装置、电子设备及计算机可读存储介质
US11183193B1 (en) 2020-05-11 2021-11-23 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
CN112054997B (zh) * 2020-08-06 2022-11-18 博泰车联网科技(上海)股份有限公司 一种声纹登录认证方法及其相关产品
CN112101947A (zh) * 2020-08-27 2020-12-18 江西台德智慧科技有限公司 一种提高语音支付安全性的方法
CN115394304A (zh) * 2021-03-30 2022-11-25 北京百度网讯科技有限公司 声纹判定方法、装置、系统、设备和存储介质
CN113257266B (zh) * 2021-05-21 2021-12-24 特斯联科技集团有限公司 基于声纹多特征融合的复杂环境门禁方法及装置
US11545159B1 (en) 2021-06-10 2023-01-03 Nice Ltd. Computerized monitoring of digital audio signals

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102413100A (zh) * 2010-09-25 2012-04-11 盛乐信息技术（上海）有限公司 声纹密码图片提示的声纹认证系统及其实现方法
US20130225128A1 (en) * 2012-02-24 2013-08-29 Agnitio Sl System and method for speaker recognition on mobile devices
CN104270338A (zh) * 2014-09-01 2015-01-07 刘文印 一种电子身份注册及认证登录的方法及其系统
JP5670001B1 (ja) * 2014-06-03 2015-02-18 パスロジ株式会社 取引システム、取引方法、ならびに、情報記録媒体

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0237456A (ja) 1988-07-27 1990-02-07 Nec Corp パスワード交換方式
JPH0816189A (ja) 1994-06-28 1996-01-19 Alpha Corp 音声認識錠装置および音声認識解錠方法
JP2871561B2 (ja) * 1995-11-30 1999-03-17 株式会社エイ・ティ・アール音声翻訳通信研究所 不特定話者モデル生成装置及び音声認識装置
US6640211B1 (en) * 1999-10-22 2003-10-28 First Genetic Trust Inc. Genetic profiling and banking system and method
US8812319B2 (en) * 2001-01-31 2014-08-19 Ibiometrics, Inc. Dynamic pass phrase security system (DPSS)
JP4574889B2 (ja) * 2001-04-13 2010-11-04 富士通株式会社 話者認証装置
US20030037004A1 (en) * 2001-08-14 2003-02-20 Chuck Buffum Dialog-based voiceprint security for business transactions
US20050018054A1 (en) * 2003-07-22 2005-01-27 Akihiro Kato Chroma compensation circuit and its method
US7231019B2 (en) * 2004-02-12 2007-06-12 Microsoft Corporation Automatic identification of telephone callers based on voice characteristics
US20070219801A1 (en) * 2006-03-14 2007-09-20 Prabha Sundaram System, method and computer program product for updating a biometric model based on changes in a biometric feature of a user
JP4742022B2 (ja) 2006-12-26 2011-08-10 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 携帯端末及びプログラム
JP2008176407A (ja) * 2007-01-16 2008-07-31 Toshiba Corp 生体認証システム、装置及びプログラム
US20080256613A1 (en) * 2007-03-13 2008-10-16 Grover Noel J Voice print identification portal
JP5121009B2 (ja) 2007-11-19 2013-01-16 日本電信電話株式会社 認証方法及びシステム
US9225531B2 (en) * 2009-06-18 2015-12-29 Visa International Service Association Automated test to tell computers and humans apart
CN102254559A (zh) * 2010-05-20 2011-11-23 盛乐信息技术（上海）有限公司 基于声纹的身份认证系统及方法
JP5641058B2 (ja) * 2010-12-28 2014-12-17 富士通株式会社 プログラム、情報処理装置および方法
GB2489527B (en) * 2011-04-01 2014-01-01 Voicevault Ltd Voice verification system
US20140046664A1 (en) * 2012-08-13 2014-02-13 Plantronics, Inc. Secure Device Pairing Using Voice Input
US9491167B2 (en) * 2012-09-11 2016-11-08 Auraya Pty Ltd Voice authentication system and method
US9372602B2 (en) * 2012-11-04 2016-06-21 International Business Machines Corporation Password presentation management
WO2014107618A1 (en) * 2013-01-04 2014-07-10 Gary Stephen Shuster Cognitive-based captcha system
CN103973441B (zh) 2013-01-29 2016-03-09 腾讯科技（深圳）有限公司 基于音视频的用户认证方法和装置
US8694315B1 (en) * 2013-02-05 2014-04-08 Visa International Service Association System and method for authentication using speaker verification techniques and fraud model
CN104036780B (zh) * 2013-03-05 2017-05-24 阿里巴巴集团控股有限公司 一种人机识别方法及系统
US9336779B1 (en) * 2013-04-10 2016-05-10 Google Inc. Dynamic image-based voice entry of unlock sequence
CN103679932B (zh) * 2013-05-01 2016-05-11 汪风珍 一种能读写银行卡的电脑系统
US9171143B2 (en) * 2013-12-19 2015-10-27 Verizon Patent And Licensing Inc. System for and method of generating visual passwords
US10192219B2 (en) * 2014-01-09 2019-01-29 Capital One Services, Llc Voice recognition to authenticate a mobile payment
US11206266B2 (en) * 2014-06-03 2021-12-21 Passlogy Co., Ltd. Transaction system, transaction method, and information recording medium
CN105306209B (zh) * 2014-07-30 2019-08-09 阿里巴巴集团控股有限公司 密码设置方法、登录方法及设备
CN104168270B (zh) 2014-07-31 2016-01-13 腾讯科技（深圳）有限公司 身份验证方法、服务器、客户端及系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102413100A (zh) * 2010-09-25 2012-04-11 盛乐信息技术（上海）有限公司 声纹密码图片提示的声纹认证系统及其实现方法
US20130225128A1 (en) * 2012-02-24 2013-08-29 Agnitio Sl System and method for speaker recognition on mobile devices
JP5670001B1 (ja) * 2014-06-03 2015-02-18 パスロジ株式会社 取引システム、取引方法、ならびに、情報記録媒体
CN104270338A (zh) * 2014-09-01 2015-01-07 刘文印 一种电子身份注册及认证登录的方法及其系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102227418B1 (ko) 2020-01-13 2021-03-12 (주)인에이블 화자 인증 방법
WO2021145634A1 (ko) * 2020-01-13 2021-07-22 주식회사 인에이블 화자 인증 방법

Also Published As

Publication number Publication date
JP2017530387A (ja) 2017-10-12
JP6567040B2 (ja) 2019-08-28
EP3174262A1 (en) 2017-05-31
KR20160147280A (ko) 2016-12-22
WO2016150032A1 (zh) 2016-09-29
CN104821934B (zh) 2018-11-20
US20170124311A1 (en) 2017-05-04
US10380332B2 (en) 2019-08-13
EP3174262B1 (en) 2020-06-17
CN104821934A (zh) 2015-08-05
EP3174262A4 (en) 2018-01-17

Similar Documents

Publication Publication Date Title
KR101908711B1 (ko) 인공 지능을 기반으로 하는 성문 로그인 방법 및 장치
KR101757990B1 (ko) 성문 인증 방법 및 장치
JP6561219B1 (ja) 話者照合
WO2017113658A1 (zh) 基于人工智能的声纹认证方法以及装置
US20210327431A1 (en) 'liveness' detection system
JP5695709B2 (ja) 生体認証および自己学習アルゴリズムを用いた個人用アカウント識別子の有効化方法およびシステム。
CN104509065B (zh) 使用说话能力作为人类交互证明
JP6464650B2 (ja) 音声処理装置、音声処理方法、およびプログラム
WO2017206375A1 (zh) 声纹注册、认证方法及装置
KR20160011709A (ko) 지불 확인을 위한 방법, 장치 및 시스템
JP2017009980A (ja) 声紋認証方法および装置
US20200296098A1 (en) Voiceprint security with messaging services
CN104462912B (zh) 改进的生物密码安全
CN107346568A (zh) 一种门禁系统的认证方法和装置
CN111091837A (zh) 一种基于在线学习的时变声纹认证方法及系统
CN110379433A (zh) 身份验证的方法、装置、计算机设备及存储介质
CN111613230A (zh) 声纹验证方法、装置、设备及存储介质
US20140163986A1 (en) Voice-based captcha method and apparatus
CN112397072B (zh) 语音检测方法、装置、电子设备及存储介质
WO2023274028A1 (zh) 声纹锁控制方法、装置、电子设备
WO2006027844A1 (ja) 話者照合装置
JP2004295586A (ja) 音声認証装置、音声認証方法及び音声認証プログラム
Stewart et al. LIVENESS'DETECTION SYSTEM
CN116246637A (zh) 生成用户自定义身份确认信息的方法、身份验证方法、存储介质和电子设备
CN117892277A (zh) 一种登录认证方法及装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant