KR102379068B1 - 커뮤니케이션 방법 및 그를 위한 전자 장치 - Google Patents

커뮤니케이션 방법 및 그를 위한 전자 장치 Download PDF

Info

Publication number
KR102379068B1
KR102379068B1 KR1020160027710A KR20160027710A KR102379068B1 KR 102379068 B1 KR102379068 B1 KR 102379068B1 KR 1020160027710 A KR1020160027710 A KR 1020160027710A KR 20160027710 A KR20160027710 A KR 20160027710A KR 102379068 B1 KR102379068 B1 KR 102379068B1
Authority
KR
South Korea
Prior art keywords
audio signal
information
receiver
sender
audio
Prior art date
Application number
KR1020160027710A
Other languages
English (en)
Other versions
KR20170027260A (ko
Inventor
씨앙 쥬오
쉬엔 쥬
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to PCT/KR2016/002880 priority Critical patent/WO2017039102A1/ko
Priority to EP16842068.5A priority patent/EP3309783B1/en
Priority to US15/756,892 priority patent/US10650827B2/en
Publication of KR20170027260A publication Critical patent/KR20170027260A/ko
Application granted granted Critical
Publication of KR102379068B1 publication Critical patent/KR102379068B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/018—Audio watermarking, i.e. embedding inaudible data in the audio signal
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/02—Preprocessing operations, e.g. segment selection; Pattern representation or modelling, e.g. based on linear discriminant analysis [LDA] or principal components; Feature selection or extraction
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/18—Vocoders using multiple modes
    • G10L19/24—Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/08—Key distribution or management, e.g. generation, sharing or updating, of cryptographic keys or passwords
    • H04L9/0816—Key establishment, i.e. cryptographic processes or cryptographic protocols whereby a shared secret becomes available to two or more parties, for subsequent use
    • H04L9/0819—Key transport or distribution, i.e. key establishment techniques where one party creates or otherwise obtains a secret value, and securely transfers it to the other(s)
    • H04L9/0825—Key transport or distribution, i.e. key establishment techniques where one party creates or otherwise obtains a secret value, and securely transfers it to the other(s) using asymmetric-key encryption or public key infrastructure [PKI], e.g. key signature or public key certificates
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/08—Key distribution or management, e.g. generation, sharing or updating, of cryptographic keys or passwords
    • H04L9/088—Usage controlling of secret information, e.g. techniques for restricting cryptographic keys to pre-authorized uses, different access levels, validity of crypto-period, different key- or password length, or different strong and weak cryptographic algorithms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/03—Protecting confidentiality, e.g. by encryption
    • H04W12/033—Protecting confidentiality, e.g. by encryption of the user plane, e.g. user's traffic
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/16—Hidden Markov models [HMM]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06—Authentication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/60—Context-dependent security
    • H04W12/65—Environment-dependent, e.g. using captured environmental data

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Telephonic Communication Services (AREA)
  • Telephone Function (AREA)
  • Spectroscopy & Molecular Physics (AREA)

Abstract

전송자의 오디오 신호를 수신하는 단계; 상기 오디오 신호에 있는 중요 정보를 상기 오디오 신호의 컨텐츠에 기초하여 검출하는 단계; 수신자의 특성 정보를 이용해서 상기 중요 정보를 암호화 하는 단계; 및 암호화 된 상기 중요 정보가 포함된 오디오 신호를 전송하는 단계를 포함하는 방법 등이 개시된다.

Description

커뮤니케이션 방법 및 그를 위한 전자 장치{communication method and electronic devices thereof}
본 개시는 오디오 커뮤니케이션 암호화 방법 및 장치, 오디오 커뮤니케이션 복호화 방법 및 장치, 및 오디오 커뮤니케이션 암호화 및 복호화 시스템과 관련된다.
데이터 암호화 및 복호화가 각광받고 있으며 데이터 암호화 및 복호화는 커뮤니케이션 기술분야에 있어서 중요한 필요 조건이다. 최근 스마트폰과 같은 개인 디지털 장치의 인기와 함께 오디오(audio)는 점차 커뮤니케이션 매체의 주류가 되고 있다. 이러한 상황에서 오디오 신호의 암호화 및 복호화 과정에 대한 필요성이 점차 증가하고 있다. 오디오 신호의 암호화 및 복호화를 위해 공개 키(public key) 및 개인 키(private key)에 기초한 암호화 및 복호화 알고리즘(algorithm)이 주로 사용될 수 있다. 공개 키 및 개인 키에 기초한 암호화 및 복호화 알고리즘에서, 전송자는 오디오 신호를 암호화하기 위해 반드시 수신자의 공개 키를 사용해야 한다. 오디오 신호가 암호화 된 이후에는, 앞서 공개 키를 제공한 수신자만이 본인의 개인 키를 이용함으로써 오디오 신호를 복호화할 수 있다. 하지만, 공개 키 및 개인 키에 기초한 암호화 및 복호화 알고리즘을 이용하는 방법은 비용이 많이 든다. 더욱이, WeChat과 같이 여러 명이 오디오 커뮤니케이션을 하는 상황에서는 비용이 훨씬 증가할 수 있으며 정보 전달의 비밀성도 보장(guaranteed)되지 못할 수 있다.
다양한 실시예들은, 오디오 신호의 암호화 및 복호화 과정에서 기존 기술처럼 공개 키 및 개인 키를 사용하는 경우와 비교하여 절감된 비용 및 정보 전달 비밀성의 향상을 제공하는데 목적이 있다.
일부 실시예에 따른 전자 장치를 이용한 커뮤니케이션 방법에 있어서: 전송자의 오디오 신호를 수신하는 단계; 상기 오디오 신호에 있는 중요 정보(sensitive information)를 상기 오디오 신호의 컨텐츠에 기초하여 검출하는 단계; 수신자의 특성 정보를 이용해서 상기 중요 정보를 암호화하는 단계; 및 암호화 된 상기 중요 정보가 포함된 오디오 신호를 전송하는 단계를 포함하는 방법이다.
일 실시예에서, 상기 오디오 신호의 컨텐츠는, 상기 오디오 신호의 의미(meaning) 또는 상기 오디오 신호의 오디오 특성일 수 있다.
일 실시예에서, 상기 오디오 신호의 컨텐츠는 상기 오디오 신호의 의미이며, 상기 오디오 신호의 의미에 기초하여 상기 중요 정보를 검출하는 단계는: 상기 전송자의 상기 오디오 신호가 미리 지정된 중요 키워드 또는 미리 지정된 중요 키워드 타입을 포함하고 있는지 여부, 또는 상기 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥(context)에 기초하여 상기 중요 정보를 검출하는 단계를 포함할 수 있다.
일 실시예에서, 상기 중요 정보를 암호화하는 단계는, 상기 중요 정보를 포함하는 상기 오디오 신호를 암호화 하는 단계를 포함할 수 있다.
일 실시예에서, 상기 수신자의 상기 특성 정보는 상기 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 포함할 수 있다.
일 실시예에서, 상기 전송자의 상기 오디오 신호에 상기 미리 지정된 중요 키워드 또는 상기 미리 지정된 중요 키워드 타입의 포함 여부에 기초하여 상기 중요 정보를 검출하는 단계는: 상기 전송자의 상기 오디오 신호를 단어 리스트로 식별하는 단계; 및 상기 식별된 단어 리스트와, 미리 지정된 상기 중요 키워드 또는 상기 중요 키워드 타입을 텍스트 매치(text match)하는 단계를 포함할 수 있다.
일 실시예에서, 상기 오디오 신호에 대한 의미 분석(semantic analysis)에 기초하여 상기 오디오 신호를 적어도 하나 이상의 세그먼트들로 분할하며, 상기 분할된 적어도 하나 이상의 세그먼트들을 적어도 하나 이상의 수신자들에게 분배하여 전송할 수 있다.
일부 실시예에 따른 전자 장치를 이용한 커뮤니케이션 방법에 있어서: 오디오 신호의 컨텐츠에 기초하여 검출되고 수신자의 특성 정보를 이용하여 암호화 된, 중요 정보를 포함하는 오디오 신호를 수신하는 단계; 상기 수신자의 특성 정보를 획득하는 단계; 및 상기 수신자의 특성 정보를 이용하여 상기 암호화 된 중요 정보를 복호화하는 단계를 포함하는, 방법이다.
일 실시예에서, 상기 오디오 신호의 컨텐츠는, 상기 오디오 신호의 의미(meaning) 또는 상기 전송자의 오디오 신호의 오디오 특성일 수 있다.
일 실시예에서, 상기 특성 정보는 상기 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 포함할 수 있다.
일 실시예에서, 상기 성문 정보를 획득하는 단계는: 상기 수신자로부터의 호흡(respiratory) 신호를 검출하는 단계; 및 상기 호흡 신호에 기초하여, 상기 성문 정보가 상기 수신자로부터 발생된 것인지 판별하는 단계를 포함할 수 있다.
일부 실시예에 따른 전자 장치는, 전송자의 오디오 신호를 수신하는 수신부; 상기 오디오 신호에 있는 중요 정보를 상기 오디오 신호의 컨텐츠에 기초하여 검출하고, 수신자의 특성 정보를 이용하여 상기 중요 정보를 암호화 하는 제어부; 및 암호화 된 상기 중요 정보를 포함하는 오디오 신호를 전송하는 전송부를 포함하는 전자 장치이다.
일 실시예에서, 상기 오디오 신호의 컨텐츠는, 상기 오디오 신호의 의미(meaning) 또는 상기 오디오 신호의 오디오 특성일 수 있다.
일 실시예에서, 상기 제어부는: 상기 오디오 신호에서 검출된 상기 수신자의 이름 또는 상기 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥에 기초하여 상기 오디오 신호에 대한 상기 수신자를 결정할 수 있다.
일부 실시예에 따른 전자 장치는, 오디오 신호의 컨텐츠에 기초하여 검출되고 수신자의 특성 정보를 이용하여 암호화 된, 중요 정보를 포함하는 오디오 신호를 수신하는 수신부; 및 상기 수신자의 특성 정보를 획득하며, 상기 수신자의 특성 정보를 이용하여 상기 암호화 된 오디오 신호를 복호화 하는 제어부를 포함하는, 전자 장치이다.
일 실시예에서, 상기 오디오 신호의 컨텐츠는, 상기 오디오 신호의 의미(meaning) 또는 상기 오디오 신호의 오디오 특성일 수 있다.
일 실시예에서, 상기 특성 정보는 상기 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 포함할 수 있다.
일 실시예에서, 상기 제어부는, 상기 성문 정보가 획득되면, 상기 수신자로부터의 호흡 신호를 검출하고, 상기 검출된 호흡 신호에 기초하여 상기 성문정보가 상기 수신자로부터 발생된 것인지 판별할 수 있다.
일부 실시예에 따른 기록 매체는, 전자 장치를 이용한 커뮤니케이션 방법에 있어서: 전송자의 오디오 신호를 수신하는 단계; 상기 오디오 신호에 있는 중요 정보(sensitive information)를 상기 오디오 신호의 컨텐츠에 기초하여 검출하는 단계; 수신자의 특성 정보를 이용해서 상기 중요 정보를 암호화하는 단계; 및 암호화 된 상기 중요 정보가 포함된 오디오 신호를 전송하는 단계를 포함하는 방법 또는 전자 장치를 이용한 커뮤니케이션 방법에 있어서: 오디오 신호의 컨텐츠에 기초하여 검출되고 수신자의 특성 정보를 이용하여 암호화 된, 중요 정보를 포함하는 오디오 신호를 수신하는 단계; 수신자의 특성 정보를 획득하는 단계; 및 상기 수신자의 특성 정보를 이용하여 상기 암호화 된 중요 정보를 복호화하는 단계를 포함하는, 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체이다.
도 1은 일 실시예에 따라, 커뮤니케이션이 전자 장치를 통해 이루어지는 모습을 나타낸 도면이다.
도 2는 일 실시예에 따른 전자 장치를 이용한 오디오 커뮤니케이션 방법에 대한 플로우 차트이다.
도 3은 일 실시예에 따라 오디오 신호가 중요 정보를 포함하고 있는지 검출하는 과정을 나타내는 플로우 차트이다.
도 4는 일 실시예에 따라 전자 장치를 이용한 다수간의 커뮤니케이션에 있어서 오디오 커뮤니케이션 방법에 대한 플로우 차트이다.
도 5는 일 실시예에 따라 전송자의 오디오 신호를 수신할 수신자를 결정하는 과정을 나타내는 플로우 차트이다.
도 6은 일 실시예에 따른 전자 장치를 이용한 오디오 커뮤니케이션 방법에 있어서, 수신자의 오디오 신호에서 성문(voiceprint) 정보를 검출하는 과정을 나타내는 플로우 차트이다.
도 7은 일 실시예에 따라 전자 장치를 이용한 오디오 커뮤니케이션 방법에 대한 플로우 차트이다.
도 8은 일 실시예에 따른 전자 장치를 이용한 오디오 커뮤니케이션 방법에 있어서, 수신자의 오디오 신호에서 성문 정보를 획득하는 과정을 나타내는 플로우 차트이다.
도 9는 일 실시예에 따른 전자 장치를 이용한 오디오 커뮤니케이션 방법에 있어서, 수신자의 오디오 신호에서 성문 정보를 획득하는 또 다른 과정을 나타내는 플로우 차트이다.
도 10은 일 실시예에 따라 오디오 커뮤니케이션을 위한 전자 장치의 구조를 설명하는 개략도(schematic diagram)이다.
도 11은 일 실시예에 따라 오디오 커뮤니케이션을 위한 전자 장치의 구조를 설명하는 개략도이다.
도 12는 일 실시예에 따라 오디오 커뮤니케이션 암호화 및 복호화 시스템의 구조를 설명하는 개략도이다.
아래에서는 첨부한 도면을 참조하여 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 실시예를 상세히 설명한다. 그러나 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서에서 사용된 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 다른 부분과 "연결"되어 있다고 함은 어떤 부분이 다른 부분과 신호 송수신을 통해 데이터 통신을 수행할 수 있는 상태가 되어 있는 경우를 포함한다.
또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
첨부된 도면은 발명의 일 실시예를 설명하기 위하여 개략적으로 도시될 수 있으며, 몇몇 치수는 보다 명확한 표현을 위해 과장될 수 있다. 이와 유사하게, 도면의 상당 부분은 임의로 표현될 수 있다.
개시에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 발명을 한정하려는 의도가 아니다. 개시에서 사용한 용어는 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나 이는 당 분야에 종사하는 기술자의 의도, 판례, 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 개시에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 개시에 기재된 실시예 및 첨부된 도면은 발명의 다양한 실시예 중 일부를 통해 발명을 설명하기 위한 것이며, 본 개시에 기재된 실시예 및 첨부된 도면만으로 발명이 한정되는 것은 아니다.
이하 첨부된 도면을 참고하여 개시를 상세히 설명하기로 한다.
도 1은 일 실시예에 따라, 커뮤니케이션이 전자 장치(110)를 통해 이루어지는 모습을 나타낸 도면이다.
도 1에서 볼 수 있듯이, 전자 장치(110)는 스마트폰일 수 있으나, 이는 일 실시예에 불과하며, 스마트폰에 한정되지 않는다. 예를 들어, 전자 장치(110)는 태블릿 PC, 노트북 컴퓨터(laptop computer), 데스크탑, 웨어러블 장치(wearable device), 스마트 TV, 이동 전화, 패널PC(panel computer), 휴대용 멀티미디어 플레이어(PMP), 개인용 정보 단말기(PDA) 등과 같이 오디오 신호 수신 기능 및 오디오 신호 재생 기능을 가진 장치 등일 수 있으며, 전자 장치(110)의 종류는 이에 한정되지 않는다.
도 1은 전자 장치를 통해 다수간의 커뮤니케이션이 이루어지는 일 실시예에 대해서 보여준다. 특히, 도 1은 일 실시예에서 커뮤니케이션에 참가하고 있는 사람들 중에 가장 최근에 말한 사람 또는 현재 말하고 있는 사람인 Tommy(120)의 전자 장치에 표시되는 화면이다.
일 실시예에서, 커뮤니케이션에 참가하고 있는 사람들은 전자 장치의 화면 상에 아이콘(140)으로 표시될 수 있고, 아이콘 아래 커뮤니케이션 참가자 각자의 이름(120, 130)이 표시될 수 있다. 일 실시예에서, 아이콘(140) 대신 참가자 각자의 프로필 사진이 표시될 수 있다. 다른 일 실시예에서, 현재 말하고 있는 사람의 아이콘과 현재 말하고 있지 않은 사람의 아이콘은 다를 수 있다. 예를 들어, 도 1에서 볼 수 있듯이 최근에 말한 또는 현재 말하고 있는 Tommy(120)를 표시하는 아이콘은, 다른 참가자들의 아이콘과 다르게 입을 벌리고 말을 하는 모양의 아이콘으로 표시되어 있는 것을 확인할 수 있다.
일 실시예에서, 도 1은 Tommy(120)가 "Hey Mike, my account password number is 1111." 라고 말한 상황을 나타낸다. 이 때, Tommy(120)는 오디오 신호를 전송하는 전송자가 될 수 있고, Mike(130)는, 도 5에서 후술하는 내용에 의해, Tommy(120)의 말을 수신할 수신자가 될 수 있다. 오디오 신호는 오디오 음역의 신호로서, 사람의 가청 주파수인 20Hz 내지 20kHz의 신호를 가리키며, 이에 한정되지 않는다.
일 실시예에서, Tommy(120)가 전송한 오디오 신호를 수신할 수신자로 결정된 Mike(130)는, Tommy(120)가 전송한 오디오 신호를 음성으로 들을 수 있다. 이 때 일 실시예에서, 음성 표시(150)는 Mike(130)가 Tommy(120)가 전송한 오디오 신호를 음성으로 들을 수 있음을 나타내는 표시이다. 음성 표시(150)를 나타내는 방법은 도 1에 제시된 모양에 한정되지 않고 다양할 수 있으며, 음성 표시(150)가 따로 화면에 나타나지 않을 수도 있다. 일 실시예에서, 전자 장치(110)의 사용자는 음성 표시(150)를 누름으로써 음성을 들을 수 있고, 음성 표시(150)를 누르지 않음으로써 음성을 듣지 않을 수 있다. 다른 일 실시예에서, 전송자 Tommy(120)의 오디오 신호는 음성뿐만 아니라 텍스트(160, 170)로도 변환되어 커뮤니케이션에 이용될 수 있다.
도 1의 일 실시예에서, 중요 정보는 계좌 비밀 번호(account password number)인 숫자 1111(180)임을 확인할 수 있다. 이 때, 수신자가 볼 수 있는 텍스트(160)에는 중요 정보가 암호화 되어 가려진 XXXX(190)로 보일 수 있다. 중요 정보가 암호화 되어 텍스트 상에서 가려질 때 XXXX(190)로 표시되는 것은 일 실시예에 불과하며, 이에 한정되지 않고 다른 표시로도 나타날 수 있다. 일 실시예에서, 텍스트(160)에서 중요 정보가 암호화 되어 XXXX(190)로 가려진 것과 대응하여, 오디오 신호에서는 암호화 된 부분이 노이즈(noise)로 들릴 수 있다.
일 실시예에서, 암호화 된 오디오 신호는, 암호화 된 채로 커뮤니케이션 참가자 모두에게 전송될 수 있고, 또는 암호화 된 채로 특정 수신자에게만 전송될 수 있다. 커뮤니케이션 전자 장치 사용자를 노이즈로부터 보호하기 위해, 보호 오디오 파일(shielded audio file) 또는 빈 오디오 파일(blank audio file) 등이 이용될 수 있으며, 자세한 사항은 후술하기로 한다.
일 실시예에서, 다수의 사용자들 각자의 특성 정보를 이용함으로써, 각 사용자의 오디오 신호는 개별적으로 암호화 될 수 있다. 일 실시예에서, 다른 사용자들에게는 비밀인 오디오 신호는, 사용자 각자의 특성 정보를 이용함으로써 복호화 될 수 있다.
암호화 및 복호화 과정, 및 그 구체적인 원리에 대해서는 후술하기로 한다.
도 2는 일 실시예에 따른 전자 장치를 이용한 오디오 커뮤니케이션 방법에 대한 플로우 차트이다.
단계 S210에서 전송자(transmitter)의 오디오 신호를 수신한다. 일 실시예에서, 전송자로부터의 오디오 신호는 전자 장치의 수신부가 수신할 수 있다.
단계 S220에서 오디오 신호에 있는 중요 정보(sensitive information)를 오디오 신호의 컨텐츠에 기초하여 검출한다. 일 실시예에서, 중요 정보에는 은행 계좌 번호, 비밀 번호 등이 포함될 수 있으며, 이에 한정되지 않는다.
일 실시예에서, 단계 S220에서 전송자의 오디오 신호가 중요 정보를 포함하고 있지 않다고 판단한 경우, 암호화 없이 수신자에게 오디오 신호를 전송할 수 있다.
일 실시예에서, 전송자의 오디오 신호가 미리 지정된 중요 키워드 또는 미리 지정된 중요 키워드 타입을 포함하고 있으면, 오디오 신호가 중요 정보를 포함하고 있다고 판단할 수 있다. 예를 들어, 전송자의 오디오 신호 "패스워드는 XXXXXX"에서 "패스워드"라는 중요 키워드가 포함되어 있으므로, 오디오 신호가 중요 정보를 포함하고 있다고 판단할 수 있다. 이 때 중요 키워드인 "패스워드" 뒤에 나오는 "XXXXXX"는 중요 정보로 검출될 수 있다.
일 실시예에서, 전송자의 오디오 신호가 숫자 타입의 오디오 세그먼트(segment)의 시리즈(series)를 포함하고 있는 경우, 숫자 타입의 오디오 세그먼트는 중요 정보일 확률이 높은 중요 키워드 타입에 해당하므로, 오디오 세그먼트를 중요 정보로 취급할 수 있다.
일 실시예에서, 전송자의 오디오 신호가 중요 정보를 포함하고 있는지는 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥(context)을 이용하여 판단할 수 있다. 예를 들어 커뮤니케이션 히스토리 검토 결과, 이전 오디오 신호에서 "은행 계좌 번호"와 같은 단어가 있고 현재 오디오 신호에 숫자 정보를 포함한다면, 숫자 정보를 은행 계좌 번호로 보아 중요 정보로 취급할 수 있다.
일 실시예에서, 전송자의 오디오 신호가 중요 정보를 포함하고 있는지는 전송자 오디오 신호의 오디오 특성(characteristic)을 이용함으로써 검출할수 있다. 오디오 특성은 오디오 신호의 소리(volume) 특성을 포함할 수 있으며 이에 한정되지 않는다. 예를 들어, 사용자들 사이에서 오디오 대화(chat)가 이루어지고 있는 경우, 중요 정보가 포함되어 있을 때는 소리가 줄어들 수 있다. 즉, 전송자의 오디오 신호에서 특정 세그먼트의 소리가 오디오 신호의 다른 컨텐츠 부분의 소리보다 작거나, 또는 그 소리 차이가 설정된 임계치(threshold)보다 큰 경우, 그 특정 세그먼트는 중요 정보에 해당할 수 있다.
일 실시예에서, 전송자의 뇌파 신호를 분석하여 중요 정보를 검출할 수 있다. 전송자의 뇌파 신호를 분석한 결과, 오디오 신호의 특정 부분에 대해 전송자가 중요하다고 인지하면 오디오 신호의 특정 부분을 중요 정보로 분류하고, 오디오 신호의 특정 부분에 대해 전송자가 중요하지 않다고 인지하면 오디오 신호의 특정 부분을 중요 정보로 분류하지 않을 수 있다.
단계 S230에서, 수신자의 특성 정보를 이용하여 중요 정보를 암호화 할 수 있다.
일 실시예에서, 수신자의 특성 정보가 추출될 수 있다.
일 실시예에서, 수신자의 특성 정보는 수신자의 성문 정보, 수신자의 지문 정보, 수신자의 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채(iris) 정보 중에 적어도 하나일 수 있고, 이에 제한되지 않는다. 수신자의 독특한 특성을 보여주는 어떤(any) 정보라도 특성 정보로 취급될 수 있다. 예를 들어, 스피치 정보를 전달하는 음향 스펙트럼(acoustic spectrum)에서, 성문 정보는 강한 식별성 및 높은 안정성을 가질 수 있다. 성문 정보는 암호화의 비밀성을 높이기 위해 오디오 신호 암호화에서 효과적으로 이용될 수 있다.
일 실시예에서, 수신자의 특성 정보를 이용하여 중요 정보를 포함하는 오디오 신호를 암호화 할 수 있다.
단계 S240에서, 암호화 된 중요 정보가 포함된 오디오 신호를 전송할 수 있다. 일 실시예에서는, 암호화 된 중요 정보가 포함된 오디오 신호를 복호화 장치로 전송할 수 있다. 일 실시예에서, 암호화 된 오디오 신호를 전송할 때 오디오 신호와 함께 보호(shielded) 오디오 파일 또는 빈(blank) 오디오 파일을 전송할 수 있다.
일 실시예에서, 보호 오디오 파일은 전자 장치(110)의 사용자가 듣기 좋은 음악, 노래, 또는 자연의 소리 등의 음성을 담은 오디오 파일로서, 보호 오디오 파일은 중요 정보를 포함하는 암호화 된 오디오 신호 또는 암호화 된 중요 정보를 재생시키면 발생할 수 있는 노이즈(noise)로부터 사용자를 보호하기 위해 이용될 수 있다. 이 때 보호 오디오 파일이 담을 수 있는 음성의 종류는 사용자가 듣기 좋은 음악, 노래, 또는 자연의 소리에 한정되지 않는다.
일 실시예에서, 빈 오디오 파일은 아무런 음성도 발생하지 않는 오디오 파일일 수 있다. 일 실시예에서, 보호 오디오 파일 또는 빈 오디오 파일은 노이즈와 함께 재생되거나 노이즈 대신 재생되면서 사용자가 노이즈를 듣지 않도록 보호해 줄 수 있다. 일 실시예에서, 수신자가 암호화 된 오디오 신호를 복호화 할 수 없거나 또는 오디오 신호에서 암호화 된 중요 정보를 복호화 할 수 없는 경우, 수신자는 노이즈 대신 보호 오디오 파일 또는 빈 오디오 파일을 들을 수 있다.
도 3은 일 실시예에 따라 오디오 신호가 중요 정보를 포함하고 있는지 검출하는 과정을 나타내는 플로우 차트이다. 전송자의 오디오 신호가 미리 지정된 중요 키워드 또는 미리 지정된 중요 키워드 타입을 포함하고 있는 경우, 전송자의 오디오 신호가 중요 정보를 포함하고 있다고 판단할 수 있다.
단계 S310에서는 전송자의 오디오 신호를 단어 리스트로 식별할 수 있다. 일 실시예에서, 오디오 식별은 Hidden Markov Model(HMM)-deep neural network(DNN)에 기초한 방법을 이용함으로써 수행될 수 있고, 이에 한정되지 않는다. 전송자의 오디오 신호를 식별하기 위해 다양한 오디오 식별 방법이 이용될 수 있다.
단계 S320에서, 전송자의 오디오 신호가 중요 정보를 포함하고 있는지 검출하기 위해 식별된 단어 리스트에 대한 의미 분석(semantic analysis)이 수행될 수 있다.
일 실시예에서, 전송자의 오디오 신호가 중요 정보를 포함하고 있는지 검출하기 위해 미리 지정된 중요 단어 리스트와 식별된 단어 리스트를 텍스트 매치(text match) 할 수 있다.
일 실시예에서, 전송자의 오디오 신호가 중요 정보를 포함하고 있는지 검출해 낸 후에, 확인 결과에 따라서 오디오 신호가 중요 정보를 포함하고 있는지 알려주는 상태 지표(state indicator)를 설정할 수 있다. 예를 들어, 오디오 신호가 중요 정보를 포함하고 있음이 확인되면, 상태 지표를 1로 설정하고, 중요 정보를 포함하고 있지 않음이 확인되면 상태 지표를 0으로 설정할 수 있다.
도 4는 일 실시예에 따라 전자 장치를 이용한 다수간의 커뮤니케이션에 있어서 오디오 커뮤니케이션 방법에 대한 플로우 차트이다.
도 4는 도 2의 암호화 방법에서, 단계 S430의 오디오 신호를 수신할 수신자를 결정하는 단계를 추가한 플로우 차트이다. 단계 S430은 수신자가 여러 명이 있는 커뮤니케이션의 경우에 수신자를 결정하는 단계로서, 수신자가 한 명인 경우에는 생략될 수 있다.
단계 S410, S420, S440 및 S450 은, 도 2의 단계 S210, S220, S230 및 S240 과 동일한 원칙을 수행하므로, 설명의 간단을 위해 상세한 설명은 생략 한다.
단계 S410에서 전송자(transmitter)의 오디오 신호를 수신한다.
단계 S420에서 오디오 신호에 있는 중요 정보를 오디오 신호의 컨텐츠에 기초하여 검출한다.
단계 S430에서, 오디오 신호를 수신할 수신자를 결정할 수 있다. 단계 S430에 대한 구체적인 설명은 하기의 도 5에 대한 발명의 상세한 설명 부분에 제시되어 있다.
단계 S440에서, 수신자의 특성 정보를 이용하여 중요 정보를 암호화 할 수 있다.
단계 S450에서, 암호화 된 중요 정보가 포함된 오디오 신호를 전송할 수 있다. 일 실시예에서, 암호화 된 중요 정보가 포함된 오디오 신호를 복호화 장치로 전송할 수 있다.
도 5는 일 실시예에 따라 전송자의 오디오 신호를 수신할 수신자를 결정하는 과정을 나타내는 플로우차트이다.
단계 S510에서는 오디오 신호에서 수신자의 이름을 검출할 수 있다. 일 실시예에서, 전송자의 오디오 신호는 중요 정보와 함께, 수신자의 이름도 포함하고 있을 수 있다. "암호 123456을 사용자 A에게 전송하라"는 문장이 일 예시이다. 단계 S510에서는 미리 지정된 이름 리스트와 전송자의 오디오 신호에 대한 의미 분석 결과를 텍스트 매치 할 수 있다. 의미 분석 결과는 단계 S310에서 식별된 단어 리스트 및 단계 S320에서 수행된 의미 분석을 포함할 수 있으며, 이에 한정되지 않는다. 텍스트 매치의 결과로 전송자의 오디오 신호에 대한 수신자를 결정할 수 있다.
단계 S520에서는 일 실시예에서, 단계 S510에서 전송자의 오디오 신호에서 수신자의 이름이 검출되지 않은 경우, 전송자의 커뮤니케이션 히스토리에서 수신자의 이름을 검출할 수 있다.
일 실시예에서, 커뮤니케이션 히스토리가 수신자의 이름을 포함하고 있는 경우, 수신자의 이름에 기초해서 현재 오디오 신호에 대한 수신자를 결정할 수 있다. 예를 들어, 커뮤니케이션 히스토리가 "사용자 A, 내 은행 계좌를 기록해 주세요"라는 문장을 포함하고 있는 경우, 현재 오디오 신호의 수신자는 사용자 A가 될 수 있는 것이다.
단계 S530에서는 일 실시예에서, 단계 S520에서 전송자의 오디오 신호에 대한 수신자가 결정되지 않는 경우, 수신자의 이름을 제공할 것을 전송자에게 요청할 수 있다.
전송자는 오디오 합성 또는 텍스트 정보를 이용함으로써 수신자의 이름을 제공할 수 있다. 수신자의 이름을 제공하는 방법은 오디오 커뮤니케이션 플랫폼에 따라 결정될 수 있다. 예를 들어, 커뮤니케이션 플랫폼이 텍스트 인터페이스(text interface)인 경우, 수신자 이름을 제공하도록 요청하는 텍스트 정보를 담은 다이얼로그 박스(dialog box)가 팝업(popping up)될 수 있다. 커뮤니케이션 플랫폼이 텍스트 없이 순수한 오디오 인터페이스인 경우, 합성된 오디오 요청을 통해서 수신자 이름을 제공해달라고 전송자에 요청할 수 있다.
상기 살펴본 바와 같이, 단계 S510, 단계 S520 및 단계 S530 중 적어도 한 단계를 수행함으로써 전송자의 오디오 신호를 수신하는 수신자를 결정할 수 있다.
일 실시예에서, 사용자는 사전에 단계 S510, 단계 S520 및 단계 S530 중 적어도 한 단계를 선택할 수 있다.
일 실시예에서, 오디오 신호를 수신할 수신자를 결정하는 단계 S510, 단계 S520 및 단계 S530의 상호간의 순서는 달라질 수 있다.
단계 S510, 단계 S520 및 단계 S530 중 적어도 한 단계를 거친 후에 전송자의 오디오 신호를 수신할 수신자가 여러 명이 있다고 판단한 경우, 전송자의 오디오 신호에 대한 의미 분석에 기초하여 전송자의 오디오 신호를 적어도 한 세그먼트 이상으로 분할할 수 있다.
다수의 수신자가 있는 경우의 일 실시예에서, 분할되지 않은 오디오 신호 전체가 다수의 수신자에 전송될 수도 있다.
일 실시예에서, 다수의 수신자가 있는 경우, 전송자의 오디오 신호의 세그먼트들은 나뉘어서 일부의 세그먼트는 몇몇 수신자에 전송되고, 나머지 일부의 세그먼트는 나머지 다른 수신자에 전송될 수 있다. 이 때, 전송자의 오디오 신호를 여러 세그먼트로 분할할 수 있다. 각각의 세그먼트는 적어도 하나의 수신자에 대응될 수 있다. 예를 들어, 오디오 신호가 "수학적 성취는 사용자 A에게 전송하고, 언어적 성취는 사용자 B에게 전송하라"는 것이면 오디오 신호를 2개의 세그먼트로 분할해서 각각 사용자 A 및 사용자 B에게 전송할 수 있다. 다른 실시예에서, 오디오 신호가 "A와 B, 내 은행 계좌는 XXXXXX; C, 내 메일박스 암호는 XXXXXX; D,E 및 F, 내 QQ 넘버(QQ number)는 XXXXXX."인 경우, 수신자 A와 B와 대응하는 첫 번째 세그먼트, 수신자 C와 대응하는 두 번째 세그먼트 및 수신자 D,E 및 F와 대응하는 세 번째 세그먼트로 분할할 수 있다.
도 6은 일 실시예에 따른 전자 장치를 이용한 오디오 커뮤니케이션 방법에 있어서, 수신자의 오디오 신호에서 성문(voiceprint) 정보를 검출하는 과정을 나타내는 플로우 차트이다.
단계 S610에서, 오디오 파일의 커뮤니케이션 히스토리에서 수신자의 이름과 대응하는 오디오 신호를 검색하여 수신자의 성문 정보를 포함하는 오디오 파일을 검출할 수 있다. 일 실시예에서, 수신자가 여러 명이 있는 경우, 각각의 수신자에 대응하는 오디오 파일 각각에 대해 찾아볼 수 있다. 일 실시예에서, 각각의 수신자에 대응하는 오디오 파일은 이전 오디오 커뮤니케이션에서 수신된 로컬 메모리(local memory)에 있는 오디오 파일, 비디오 파일 및 비디오 파일 안에 있는 오디오 파일을 포함할 수 있다. 일 실시예에서, 비디오 파일은 주소록(address book) 안의 연락처(contact)와 관련될 수 있다.
단계 S620에서, 검출된 오디오 파일에서 수신자의 성문 정보를 추출해 낼 수 있다. 성문 정보는 일 실시예에 따라, i-vector 방법을 이용하여 오디오 파일로부터 추출해 낼 수 있으며 이에 한정되지 않는다.
일 실시예에서, 수신자의 특성 정보가 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나인 경우, 이전에 수신 혹은 저장된 이미지 파일에서 수신자와 대응하는, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나와 관련된 이미지 파일을 선택할 수 있다. 다음으로, 선택된 이미지 파일로부터 수신자의 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 추출할 수 있다.
일 실시예에서, 오디오 신호가 중요 정보를 포함하고 있음을 검출해 낸 경우, 전송자의 오디오 신호를 암호화하고 암호화 한 오디오 신호를 전송하기 전에, 수신자에게 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 요청할 수 있다.
일 실시예에서, 전송자의 오디오 신호에 대한 수신자가 한 명인 경우, 모든 오디오 신호, 즉 전송자가 말한 모든 문장을 수신자의 특성 정보를 이용함으로써 암호화 할 수 있다.
일 실시예에 따라, 수신자의 성문 정보를 이용하여 오디오 신호에서 중요 정보만을 암호화 할 수 있다.
일 실시예에서, 다수의 수신자가 같은 오디오 신호를 수신하는 경우, 각 수신자의 특성 정보를 이용함으로써 오디오 신호를 암호화 할 수 있고, 암호화 된 오디오 신호는 각 수신자에게 전송될 수 있다. 이 때, 각 수신자는 본인의 특성 정보를 이용하여 오디오 신호를 복호화 할 수 있다.
일 실시예에서, 각 수신자의 특성 정보를 이용하여 오디오 신호에 있는 여러 중요 정보 중에서 중요 정보 각각을 암호화 할 수 있다. 오디오 신호의 몇몇 세그먼트들이 일부의 수신자에게 전송되고, 다른 세그먼트들이 또 다른 일부의 수신자에게 전송될 때, 수신자의 특성 정보를 이용함으로써 수신자와 대응하는 오디오 신호의 세그먼트 각각을 암호화 할 수 있다. 이 때 일 실시예에서, BlowFish 알고리즘과 같은 암호화 알고리즘을 이용함으로써 오디오 신호 암호화에 성문 정보가 적용될 수 있으며, 암호화 방법은 이에 한정되지 않고 성문 정보와 관련된 다른 암호화 방법도 이용될 수 있다.
일 실시예에서, 암호화 된 오디오 신호를 전송하면서, 오디오 신호와 함께, 보호 (shielded) 오디오 파일 또는 빈(blank) 오디오 파일이 전송될 수 있다. 보호 오디오 파일은 암호화 된 오디오 신호를 보호하거나 오디오 신호에 있는 암호화 된 중요 정보를 보호하는데 이용될 수 있다. 수신자가 암호화 된 오디오 신호 또는 오디오 신호에 있는 암호화 된 중요 정보를 복호화 할 수 없는 경우, 수신자는 노이즈(noise)를 듣는 대신 보호 오디오 파일 또는 빈 오디오 파일의 오디오 신호를 들을 수 있다.
도 7은 일 실시예에 따라 전자 장치를 이용한 오디오 커뮤니케이션 방법에 대한 플로우 차트이다.
단계 S710에서, 오디오 신호의 컨텐츠에 기초하여 검출되고 수신자의 특성 정보를 이용하여 암호화 된, 중요 정보를 포함하는 오디오 신호를 수신한다. 일 실시예에서, 오디오 신호는 오디오 신호 전체가 암호화 된 오디오 신호일 수 있고, 오디오 신호 중에서도 중요 정보를 포함하는 일부의 오디오 신호만이 암호화 된 오디오 신호일 수 있다.
일 실시예에서, 오디오 신호가 암호화 된 오디오 신호를 포함하고 있는지 여부를 판별한다. 여기서, 오디오 신호의 인코딩(encoding) 방법의 종류는 오디오 신호가 암호화 된 오디오 신호를 포함하고 있는지 검출하는데 이용될 수 있다. 예를 들어, 오디오 신호의 인코딩 방법이 본 개시의 전자 장치가 일반적으로 사용하는 인코딩 방법인 경우, 오디오 신호는 암호화 된 오디오 신호를 포함하고 있지 않다고 판단할 수 있다. 오디오 신호의 인코딩 방법이본 개시의 전자 장치가 일반적으로 사용하지 않는 인코딩 방법인 경우, 오디오 신호는 암호화 된 오디오 신호를 포함하고 있다고 판단할 수 있다. 오디오 신호가 암호화 된 오디오 신호가 아닌 경우, 수신자에게 바로 오디오 신호를 재생할 수 있다.
단계 S720에서, 수신자의 특성 정보를 획득할 수 있다. 수신자의 특성 정보는 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 포함할 수 있으며 이에 한정되지 않는다. 예를 들어 성문 정보를 특성 정보로 하는 경우, 단계 S720에서 수신자의 오디오 신호에 있는 성문 정보를 검출할 수 있다.
일 실시예에서 수신자의 특성 정보가 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나인 경우, 미리 수신 또는 저장된 이미지 파일에서 수신자와 대응하는 이미지 파일을 결정할 수 있고, 결정된 이미지 파일로부터 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 획득할 수 있다.
일 실시예에서, 수신자의 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 또는 홍채 정보를 수신자에게 직접적으로 요구할 수 있다.
단계 S730에서 수신자의 특성 정보를 이용하여 암호화 된 중요 정보를 복호화 할 수 있다.
일 실시예에 따라, 단계 S730의 복호화 방법은 오디오 신호를 암호화 할 때의 암호화 방법과 대응될 수 있다.
일 실시예에서, 암호화 된 오디오 신호를 복호화 한 후에, 수신자를 위해 복호화 된 오디오 신호를 재생할 수 있다. 또한, 복호화 된 오디오 신호를 재생하면서, 오디오 신호와 함께 수신한 보호 오디오 파일 또는 빈 오디오 파일도 재생할 수 있다.
도 8은 일 실시예에 따른 전자 장치를 이용한 오디오 커뮤니케이션 방법에 있어서, 수신자의 오디오 신호에서 성문 정보를 획득하는 과정을 나타내는 플로우 차트이다.
단계 S810에서, 커뮤니케이션 히스토리에서 수신자의 오디오 신호가 포함된 오디오 파일을 검색할 수 있다.
단계 S820에서, 검색된 오디오 파일에서 수신자의 성문 정보를 획득할 수 있다. 일 실시예에서, 아이벡터(i-vector) 방법을 이용함으로써 오디오 파일로부터 성문 정보를 추출해 낼 수 있으나 이에 한정되지 않는다. 오디오 파일로부터 성문 정보를 추출하기 위한 다른 방법도 이용될 수 있다.
도 9는 일 실시예에 따른 전자 장치를 이용한 오디오 커뮤니케이션 방법에 있어서, 수신자의 오디오 신호에서 성문 정보를 찾아내는 또 다른 과정을 나타내는 플로우 차트이다.
일 실시예에서, 도 9의 단계 S910 및 S920 의 순서는 도 9와 달라질 수 있으며, 단계 S910, S920 중 일부의 단계만 수행될 수 있다.
단계 S910에서 수신자로부터의 호흡 신호를 검출할 수 있다. 일 실시예에서, 요청은 오디오 커뮤니케이션 플랫폼에 의존하는 오디오 합성 또는 텍스트 정보를 이용함으로써 수신자에 전송될 수 있다. 예를 들어, 텍스트 인터페이스의 커뮤니케이션 플랫폼에서, 다이얼로그 박스(dialog box)를 팝업 시킴으로써 수신자에 오디오 신호를 제공할 것을 요청할 수 있다. 일 실시예에서, 텍스트 없는 순수 오디오 인터페이스의 커뮤니케이션 플랫폼에서, 합성된 오디오를 재생함으로써 수신자에게 오디오 신호를 제공할 것을 요청할 수 있다.
일 실시예에서, 수신자에 의해 제공된 오디오 신호에서 호흡(respiratory) 신호를 검출해 낼 수 있다. 예를 들어, 압력 감지 장치의 센서를 이용함으로써 호흡 신호를 검출해 낼 수 있으며 이에 한정되지 않는다.
단계 S920에서, 검출된 호흡 신호에 기초하여, 성문 정보가 수신자로부터 발생된 것인지 판별할 수 있다. 일 실시예에서, 서포트 벡터 머신(support vector machine)과 같은 머신 러닝 알고리즘(machine learning algorithm)은 오디오 신호가 실제로 수신자의 성문 정보를 포함하고 있는 오디오 신호인지 판단하는데 이용될 수 있으며, 실제로 수신자의 성문 정보를 포함하고 있는지 판단하는 방법은 이에 한정되지 않는다.
일 실시예에서, 검출된 호흡 신호에 기초해서 수신자로부터 제공 받은 오디오 신호가 실제로 수신자의 성문 정보를 포함하고 있는 오디오 신호인지 판단한 결과를 이용하여 오디오 신호가 실제 오디오 신호인지 알려주는 상태 지표를 사용할 수 있다. 예를 들어, 오디오 신호가 실제 오디오 신호인 경우는 상태 지표가 1을 가리킬 수 있고, 녹음된 오디오 신호처럼 오디오 신호가 실제로 수신자의 성문 정보를 포함하고 있지 않은 경우에는 상태 지표가 0을 가리킬 수 있다.
일 실시예에서, 수신자에 의해 제공된 오디오 신호로부터 수신자의 성문 정보를 획득할 수 있다. 일 실시예에서, 수신자에 의해 제공된 오디오 신호가 실제로는 수신자의 성문 정보를 포함하고 있지 않다고 판단한 경우, 암호화 된 오디오 신호를 보호하기 위해 보호 오디오 파일 또는 빈 오디오 파일을 이용할 수 있다. 예를 들어, 수신된 오디오 신호를 재생하면서 미리 지정된 오디오 파일을 함께 재생하여 암호화 된 부분이 재생되면서 노이즈가 발생하는 것을 방지할 수 있다.
도 10은 일 실시예에 따라 오디오 커뮤니케이션을 위한 전자 장치의 구조를 설명하는 개략도(schematic diagram)이다.
일 실시예에서, 전자 장치(1000)는 수신부(1010), 제어부(1020), 및 전송부(1030)를 포함할 수 있다.
수신부(1000)는 전송자로부터 오디오 신호를 수신할 수 있다.
제어부(1020)는, 일 실시예에서 오디오 신호에 있는 중요 정보를 오디오 신호의 컨텐츠에 기초하여 검출할 수 있다.
일 실시예에서, 제어부(1020)는 전송자의 오디오 신호가 미리 지정된 중요 키워드 또는 미리 지정된 중요 키워드 타입을 포함하고 있는 경우 전송자의 오디오 신호가 중요 정보를 포함하고 있다고 판단할 수 있다. 일 실시예에서, 제어부(1020)는 전송자의 오디오 신호의 커뮤니케이션 히스토리에 있는 문맥에 기초하여 전송자의 오디오 신호가 중요 정보를 포함하고 있는지 판단할 수 있다. 또 다른 일 실시예에서, 제어부(1020)는 전송자의 오디오 신호의 오디오 특성에 기초하여 전송자의 오디오 신호가 중요 정보를 포함하고 있는지 검출해 낼 수 있다.
일 실시예에서, 제어부(1020)는 전송자의 오디오 신호를 단어 리스트로 식별하고, 전송자의 오디오 신호가 중요 정보를 포함하고 있는지 검출해 내기 위해 식별된 단어 리스트에 대해 의미 분석을 수행할 수 있다. 구체적으로, 제어부(1020)는 전송자의 오디오 신호가 중요 정보를 포함하고 있는지 검출해 내기 위해 미리 지정된 키워드 또는 키워드 타입과 식별된 단어 리스트를 텍스트 매치할 수 있다. 텍스트 매치의 결과 미리 지정된 키워드 또는 키워드 타입과 식별된 단어 리스트 중 일부가 일치하는 경우, 오디오 신호가 중요 정보를 포함하고 있다고 검출해 낼 수 있다.
일 실시예에서, 제어부(1020)는 검출 결과에 기초하여 오디오 신호가 중요 정보를 포함하고 있는지 여부를 나타내는 상태 지표를 설정할 수 있다. 예를 들어, 오디오 신호가 중요 정보를 포함하고 있는 것을 발견한 경우, 제어부(1020)는 상태 지표를 1로 나타낼 수 있다. 오디오 신호가 중요 정보를 포함하고 있지 않다고 판단한 경우, 제어부(1020)는 상태 지표를 0으로 나타낼 수 있다.
일 실시예에서, 제어부(1020)는 수신자의 특성 정보를 추출할 수 있다. 수신자의 특성 정보는 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 수신자의 홍채 정보 중 적어도 하나일 수 있으며, 이에 한정되지 않는다. 성문 정보를 특성 정보로 취급하는 경우, 제어부(1020)는 전송자의 오디오 신호에 있는 '수신자의 이름'에 대응되는 수신자에 관한 오디오 파일의 커뮤니케이션 히스토리를 검색할 수 있고, 검색된 오디오 신호 또는 파일로부터 수신자의 성문 정보를 추출해 낼 수 있다.
일 실시예에서, 제어부(1020)가 다수의 수신자가 있다고 판단한 경우, 제어부(1120)는 각각의 수신자와 대응되는 오디오 파일 각각을 검색할 수 있고, 검색된 오디오 파일 각각으로부터 대응되는 수신자의 성문 정보를 추출해 낼 수 있다.
일 실시예에서, 수신자의 특성 정보가 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나인 경우, 제어부(1020)는 미리 수신 또는 저장한 이미지 파일들 중에 수신자와 상응하는 이미지 파일을 결정할 수 있고, 그리고 나서 결정된 이미지 파일로부터 수신자의 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 또는 홍채 정보를 추출할 수 있다.
일 실시예에서, 오디오 신호가 중요 정보를 검출한 경우, 제어부(1020)는 중요 정보 또는 중요 정보를 포함하는 오디오 신호를 암호화 하고, 암호화 된 중요 정보 또는 중요 정보를 포함하는 오디오 신호를 전송하기 전에 수신자의 성문 정보, 지문 정보, 얼굴 정보, 홍채 정보, 정맥 패턴 정보, 손금 정보 또는 기타 다른 정보를 제공하도록 수신자에 요청할 수 있다.
제어부(1020)는, 일 실시예에서, 추출한 특성 정보를 이용하여 전송자의 오디오 신호를 암호화 할 수 있다.
일 실시예에서, 전송자의 오디오 신호에 대한 수신자가 하나밖에 없는 경우, 즉 일대일 오디오 커뮤니케이션인 경우, 제어부는 오디오 신호에 대한 수신자를 결정하는 단계를 수행하지 않을 수 있다.
일 실시예에서, 제어부(1020)에 의해 접근 가능한 특성 정보는 오디오 신호의 중요 정보 또는 오디오 신호를 암호화 하기 위해서만 사용될 수 있다.
일 실시예에서, 전송자의 오디오 신호에 대한 수신자가 여러 명인 경우, 제어부(1020)는 다수의 수신자 중에 각각의 수신자의 특성 정보를 이용함으로써 각각의 수신자와 대응하는 분할된 오디오 신호 세그먼트를 각각 암호화 할 수 있다. 제어부(1020)는 각각의 수신자의 특성 정보를 이용함으로써 오디오 신호에 있는 중요 정보를 각각 암호화 할 수 있다.
일 실시예에서, 전자 장치(1000)는 암호화 된 오디오 신호를 전송하기 위한 전송부(1030)를 포함할 수 있다. 암호화 된 오디오 신호를 전송할 때, 전송부는 오디오 신호와 함께, 보호 오디오 파일을 전송할 수 있다. 보호 오디오 파일은 암호화 된 오디오 신호 또는 오디오 신호에서 암호화 된 중요 정보를 보호하는데 이용될 수 있다. 일 실시예에서, 수신자가 암호화 된 오디오 신호를 복호화 할 수 없거나 또는 오디오 신호에서 암호화 된 중요 정보를 복호화 할 수 없는 경우, 수신자는 노이즈 대신 빈 오디오 파일 또는 보호 오디오 파일을 들을 수 있다.
도 11은 일 실시예에 따라 오디오 커뮤니케이션을 위한 전자 장치의 구조를 설명하는 개략도이다.
일 실시예에서, 전자 장치(1100)는 수신부(1110)및 제어부(1120)를 포함할 수 있다.
수신부(1110)는 오디오 신호의 컨텐츠에 기초하여 검출되고 수신자의 특성 정보를 이용하여 암호화 된 중요 정보를 포함하는 오디오 신호를 수신할 수 있다. 일 실시예에서, 수신된 오디오 신호는 암호화 된 오디오 신호를 포함하고 있지 않은 오디오 신호일 수 있고, 암호화 된 오디오 신호를 포함하고 있는 오디오 신호일 수 있다.
일 실시예에서, 제어부(1120)는 수신한 오디오 신호가 암호화 된 오디오 신호인지 검출할 수 있다. 제어부(1120)는 오디오 신호의 인코딩 모드를 이용함으로써 오디오 신호가 암호화 된 오디오 신호인지 검출할 수 있다. 예를 들어, 오디오 신호의 인코딩 방법이 본 개시의 전자 장치가 일반적으로 사용하는 인코딩 방법인 경우, 오디오 신호는 암호화 된 오디오 신호를 포함하고 있지 않다고 판단할 수 있다. 오디오 신호의 인코딩 방법이 본 개시의 전자 장치가 일반적으로 사용하지 않는 인코딩 방법인 경우, 오디오 신호는 암호화 된 오디오 신호를 포함하고 있다고 판단할 수 있다.
일 실시예에서, 제어부(1120)는 오디오 신호가 암호화 된 오디오 신호가 아닌 경우 수신자를 위해 오디오 신호를 재생할 수 있다.
제어부(1120)는, 일 실시예에서 전송자의 오디오 신호가 암호화 된 오디오 신호임을 검출한 경우, 이어서 수신자의 특성 정보를 획득할 수 있다. 수신자의 특성 정보는 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 또는 홍채 정보일 수 있으며, 이에 한정되지 않는다.
일 실시예에서, 성문 정보가 특성 정보라고 가정하는 경우, 제어부(1120)는 커뮤니케이션 히스토리에서 수신자의 오디오 신호가 포함된 오디오 파일을 검색할 수 있고, 검색된 오디오 파일로부터 수신자의 성문 정보를 획득해 낼 수 있다.
제어부(1120)는, 일 실시예에서 수신자의 특성 정보를 이용함으로써 암호화 된 중요 정보를 복호화할 수 있다. 여기서 제어부(1120)가 이용하는 복호화 방법은 오디오 신호를 암호화 하는데 이용되는 암호화 방법과 대응될 수 있다. 일 실시예에서, 중요 정보를 포함하는 오디오 신호가 암호화 된 경우, 오디오 신호를 복호화 할 수 있다.
일 실시예에서, 제어부(1120)는 암호화 된 오디오 신호를 복호화 한 후에 수신자를 위해 복호화 된 오디오 신호를 재생할 수 있다.
일 실시예에서, 전송자의 암호화 된 오디오 신호를 복호화 하는데 실패한 경우, 제어부(1120)는 암호화 된 오디오 신호를 보호하기 위해 미리 지정된 오디오 파일을 이용할 수 있다. 일 실시예에서, 미리 지정된 오디오 파일은 보호 오디오 파일 또는빈 오디오 파일을 포함할 수 있으며, 이에 한정되지 않는다. 보호 오디오 파일 또는 빈 오디오 파일은 암호화 된 오디오 신호와 함께 암호화 장치로부터 복호화 장치로 전송될 수 있다. 다음으로, 제어부(1120)는 보호 오디오 파일 또는 빈 오디오 파일을 수신자를 위해 재생할 수 있다.
제어부(1120)는 후술하는 과정들을 이용함으로써 성문 정보를 검출할 수 있다. 일 실시예에서, 제어부(1120)는 오디오 신호를 제공하도록 수신자에게 요청할 수 있다. 요청에 대한 응답으로 수신자는 오디오 신호를 제공할 수 있다. 일 실시예에서, 제어부(1120)는 수신자에 의해 제공된 오디오 신호에 있는 호흡 신호를 검출할 수 있으며, 수신자에 의해 제공된 오디오 신호가 실제로 수신자의 성문 정보를 포함하는 오디오 신호인지를 호흡 신호에 기초하여 판단할 수 있다. 수신자에 의해 제공된 오디오 신호가 실제로 수신자의 성문 정보를 포함하는 오디오 신호라고 판단한 경우, 제어부(1120)는 수신자에 의해 제공된 오디오 신호로부터 수신자의 성문 정보를 추출해 낼 수 있다. 하지만, 수신자에 의해 제공된 오디오 신호가 실제로 수신자의 성문 정보를 포함하는 오디오 신호가 아니라고 판단한 경우, 제어부(1120)는 암호화 된 오디오 신호를 보호하기 위해 미리 지정된 오디오 파일을 이용할 수 있다. 일 실시예에서, 미리 지정된 오디오 파일은 보호 오디오 파일 또는 빈 오디오 파일을 포함할 수 있으며, 이에 한정되지 않는다.
일 실시예에서, 수신자의 특성 정보가 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 또는 홍채 정보인 경우, 제어부(1120)는 이전에 수신 또는 저장한 이미지 파일 중에 수신자와 대응하는 이미지 파일을 결정할 수 있고, 결정된 이미지 파일에서 수신자의 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 또는 홍채 정보를 획득할 수 있다.
일 실시예에서, 제어부(1120)는 수신자의 지문 정보, 얼굴 정보, 홍채 정보, 정맥 패턴 정보, 손금 정보 또는 기타 정보를 수신자에 직접 요청할 수 있다.
도 12는 일 실시예에 따라 오디오 커뮤니케이션 암호화 및 복호화 시스템의 구조를 설명하는 개략도이다.
일 실시예에서, 오디오 커뮤니케이션 암호화 및 복호화 시스템(1200)은 오디오 커뮤니케이션 암호화 장치(1210) 및 오디오 커뮤니케이션 복호화 장치(1220)를 포함할 수 있다. 오디오 커뮤니케이션 암호화 장치(1210)는 수신부(1212), 제어부(1214) 및 전송부(1216)를 포함할 수 있다.
수신부(1212), 제어부(1214) 및 전송부(1216)는 도 10의 수신부(1010), 제어부(1020) 및 전송부(1030)와 동일한 동작을 수행하므로, 상세한 설명은 생략한다.
수신부(1212)는 전송자로부터 오디오 신호를 수신할 수 있다.
제어부(1214)는, 일 실시예에서 오디오 신호에 있는 중요 정보를 오디오 신호의 컨텐츠에 기초하여 검출할 수 있다.
제어부(1214)는, 일 실시예에서, 수신자의 특성 정보를 이용하여 중요 정보를 암호화 할 수 있다.
전송부(1216)는, 일 실시예에서 암호화 된 중요 정보가 포함된 오디오 신호를 전송할 수 있다.
오디오 커뮤니케이션 복호화 장치(1220)는 수신부(1222)및 제어부(1224)를 포함할 수 있다.
수신부(1222) 및 제어부(1224)는 도 11의 수신부(1110) 및 제어부(1120) 와 동일한 동작을 수행하므로, 상세한 설명은 생략한다.
수신부(1222)는 오디오 신호의 컨텐츠에 기초하여 검출되고 수신자의 특성 정보를 이용하여 암호화 된, 중요 정보를 포함하는 오디오 신호를 수신할 수 있다. 수신된 오디오 신호는 암호화 된 오디오 신호를 포함하고 있지 않은 오디오 신호일 수 있고, 암호화 된 오디오 신호를 포함하고 있는 오디오 신호일 수 있다.
제어부(1224)는, 일 실시예에서 수신자의 특성 정보를 획득할 수 있다. 수신자의 특성 정보는 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 또는 홍채 정보일 수 있으며, 이에 한정되지 않는다.
제어부(1224)는, 일 실시예에서 수신자의 특성 정보를 이용하여 암호화 된 중요 정보를 복호화 할 수 있다. 여기서 제어부(1224)가 이용하는 복호화 방법은 오디오 신호를 암호화 하는데 이용되는 암호화 방법과 대응될 수 있다.
일 실시예에서, 전자 장치(1000, 1100)를 이용한 커뮤니케이션 방법, 전자 장치(1000, 1100) 및 오디오 커뮤니케이션 암호화 및 복호화 시스템은 다음의 특성을 가진다. 우선, 암호화 과정 중에 오디오 신호에 있는 중요 정보만을 암호화 함으로써 계산 비용을 절감할 수 있다. 다음으로, 오디오 신호가 수신자의 특성 정보를 이용함으로써 암호화 또는 복호화 되기 때문에 오디오 커뮤니케이션의 비밀성이 향상될 수 있다. 다음으로, 복호화 과정 중에 수신자가 제공한 오디오 파일 또는 오디오 신호에서 수신자의 호흡 신호를 검출함으로써, 수신자가 제공한 오디오 파일 또는 오디오 신호가 녹음된 오디오 파일 또는 녹음된 오디오 신호가 아니라 실제로 수신자로부터 유래한 오디오 파일 또는 오디오 신호임을 판단할 수 있으므로, 오디오 커뮤니케이션의 비밀성은 더 향상될 수 있다. 일 실시예에서, 공기압에 기초하여 사람의 음성인지 녹음기의 음성인지 여부를 전자 장치가 구별할 수 있다.
일 실시예에서, 오디오 커뮤니케이션 암호화 방법 및 오디오 커뮤니케이션 복호화 방법은 하드웨어, 펌웨어, 소프트웨어, 컴퓨터 코드 또는 그들의 조합으로 수행될 수 있다. 추가로, 소프트웨어 또는 컴퓨터 코드는 비일시적인 기록 매체(판독 전용 기억 장치(ROM), 임의 접근 기억 장치(RAM), CD-ROM, 자기 테이프(magnetic tape), 플로피 디스크, 광학 데이터 저장 장치 및 캐리어(예를 들어 인터넷을 통한 데이터 전송)) 또는 네트워크에서 다운 받은 컴퓨터 코드에 저장될 수 있다. 컴퓨터 코드는 리모트 기록 매체(remote recording medium), 컴퓨터 인식 가능 기록 매체(computer readable recording medium) 또는 비일시적인 기계 인식 가능 매체에 최초에 저장될 수 있고, 후에 로컬 기록 매체(local recording medium)에 저장될 수 있다. 다음으로, 상기 언급된 방법들은 소프트웨어, 컴퓨터 코드, 소프트웨어 모듈, 소프트웨어 오브젝트, 인스트럭션(instructions), 어플리케이션 프로그램, 애플릿(applet), 앱(app) 및 그와 유사한 것들이 수행될 수 있고, 소프트웨어, 컴퓨터 코드, 소프트웨어 모듈, 소프트웨어 오브젝트, 인스트럭션(instructions), 어플리케이션 프로그램, 애플릿(applet), 앱(app) 및 그와 유사한 것들은 일반 목적의 컴퓨터, 디지털 컴퓨터 또는 전용 프로세서(dedicated processor)를 이용하여 기록 매체에 저장될 수 있다.
일 실시예에서, 상기 언급된 방법들은 프로그래머블(programmable) 하드웨어 또는 전용 하드웨어(예를 들어, 애플리케이션 전용 회로(ASIC) 또는 필드-프로그래머블 게이트 어레이(FPGA))에 의해 수행될 수 있다. 컴퓨터, 프로세서, 마이크로 프로세서 컨트롤러 또는 프로그래머블 하드웨어가 일시적인 및/또는 비일시적인 메모리 및 메모리 구성 요소(예를 들어, RAM, ROM, 플래쉬 메모리, 및 기타)를 포함하는 것은 당해 기술 분야에서 통상의 기술 수준을 가진 자에게 용이할 수 있다. 메모리 및 메모리 구성 요소는 소프트웨어 또는 컴퓨터 코드를 저장 또는 수신할 수 있다. 컴퓨터에 의해 접근되고 수행되는 경우, 프로세서 또는 하드웨어, 소프트웨어 또는 컴퓨터 코드는 위에 언급된 프로세싱 방법을 수행할 수 있다.
일 실시예에서, 일반적인 목적의 컴퓨터가 위에서 언급된 프로세스를 수행하기 위해 이용되는 코드에 접근하는 경우, 코드의 실행은 일반적인 목적의 컴퓨터를 위에서 언급된 프로세스를 수행하는 전용 컴퓨터로 전환할 수 있다.
일 실시예에서, 프로그램은 일렉트로닉 모드에서, 커뮤니케이션 신호가 유선/무선 및 등가를 통해서 전송되는 어떠한 매체에 의해서든 전송될 수 있다. 프로그램 및 컴퓨터 인식 가능 기록 매체는 네트워크와 연결된 컴퓨터 시스템 내에서 분배될 수 있다. 다음으로, 컴퓨터 인식 가능 코드는 분배되어 저장 및 실행될 수 있다.
전술한 개시의 설명은 예시를 위한 것이며, 개시가 속하는 기술분야의 통상의 지식을 가진 자는 개시의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
개시의 권리범위는 후술하는 특허청구범위에 의하여 나타내어 질 수 있으며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함될 수 있는 것으로 해석되어야 한다.

Claims (20)

  1. 전자 장치가 복수의 다른 전자 장치들과 커뮤니케이션하는 방법에 있어서:
    전송자로부터 전송자의 음성 신호를 포함하는 제1 오디오 신호를 수신하는 단계;
    상기 제1 오디오 신호에 포함된 중요 정보(sensitive information)를 상기 제1 오디오 신호의 컨텐츠 및 상기 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥(context)에 기초하여 검출하는 단계;
    복수의 수신자들 중에서 상기 중요 정보를 전송하기 위한 적어도 하나의 수신자를 결정하는 단계;
    상기 적어도 하나의 수신자로, 상기 적어도 하나의 수신자 각각을 식별하는 정보를 포함하는 수신자의 특성 정보 및 수신자의 음성 신호를 포함하는 제2 오디오 신호를 요청하는 메시지를 전송하는 단계;
    상기 적어도 하나의 수신자로부터, 상기 제2 오디오 신호 및 상기 수신자의 특성 정보를 수신하는 단계;
    상기 제2 오디오 신호에 기초하여, 상기 제2 오디오 신호를 전송한 수신자의 호흡 (respiratory) 신호를 검출하는 단계;
    상기 호흡 신호에 기초하여, 상기 제2 오디오 신호가 수신자의 성문 정보를 포함하는지 여부를 식별하는 단계;
    상기 제2 오디오 신호가 상기 수신자의 성문 정보를 포함하는 경우, 상기 제1 오디오 신호, 상기 수신자의 성문 정보 및 상기 적어도 하나의 수신자 각각을 식별하는 정보를 포함하는 수신자의 특성 정보에 기초하여, 상기 중요 정보를 암호화하는 단계; 및
    암호화 된 상기 중요 정보가 포함된 제3 오디오 신호를 전송하는 단계;를 포함하는 방법.
  2. 제 1항에 있어서,
    상기 제1 오디오 신호의 컨텐츠는 상기 제1 오디오 신호의 오디오 특성을 포함하는, 방법.
  3. 제 1항에 있어서,
    상기 중요 정보를 검출하는 단계는:
    상기 전송자의 상기 제1 오디오 신호가 미리 지정된 중요 키워드 또는 미리 지정된 중요 키워드 타입을 포함하고 있는지 여부, 또는 상기 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥(context)에 기초하여 상기 중요 정보를 검출하는 단계를 포함하는, 방법.
  4. 제 1항에 있어서,
    상기 적어도 하나의 수신자를 결정하는 단계;는,
    상기 오디오 신호에서 검출된 상기 적어도 하나의 수신자의 이름 또는 상기 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥에 기초하여 상기 적어도 하나의 수신자를 결정하는 단계를 더 포함하는, 방법.
  5. 제 1항에 있어서,
    상기 중요 정보를 암호화하는 단계는, 상기 중요 정보를 포함하는 상기 제1 오디오 신호를 암호화 하는 단계를 포함하는, 방법.
  6. 제 1항에 있어서,
    상기 수신자의 상기 특성 정보는 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 포함하는, 방법
  7. 제 3항에 있어서,
    상기 전송자의 상기 제1 오디오 신호에 상기 미리 지정된 중요 키워드 또는 상기 미리 지정된 중요 키워드 타입의 포함 여부에 기초하여 상기 중요 정보를 검출하는 단계는:
    상기 전송자의 상기 오디오 신호를 단어 리스트로 식별하는 단계; 및
    상기 식별된 단어 리스트와, 미리 지정된 상기 중요 키워드 또는 상기 중요 키워드 타입을 텍스트 매치(text match)하는 단계를 포함하는, 방법.
  8. 제 1항에 있어서,
    상기 제1 오디오 신호에 대한 의미 분석(semantic analysis)에 기초하여 상기 제1 오디오 신호를 적어도 하나 이상의 세그먼트들로 분할하는 단계; 및
    상기 분할된 적어도 하나 이상의 세그먼트들을 적어도 하나 이상의 수신자들에게 분배하여 전송하는 단계;를 더 포함하는, 방법.
  9. 전자 장치가 복수의 다른 전자 장치들과 커뮤니케이션하는 방법에 있어서:
    다른 전자 장치로부터, 수신자를 식별하는 정보를 포함하는 수신자의 특성 정보 및 수신자의 음성 신호를 포함하는 수신자의 제2 오디오 신호를 요청하는 메시지를 수신하는 단계;
    상기 다른 전자 장치로, 상기 수신자의 제2 오디오 신호 및 상기 수신자의 특성 정보를 전송하는 단계;
    상기 다른 전자 장치로부터, 수신자의 성문 정보 및 상기 수신자의 특성 정보를 이용하여 암호화 된 중요 정보를 포함하는 전송자의 제3 오디오 신호를 수신하는 단계;
    상기 수신자를 식별하는 정보를 포함하는 상기 수신자의 특성 정보를 획득하는 단계;
    상기 제2 오디오 신호에 기초하여, 상기 수신자의 호흡 (respiratory) 신호를 검출하는 단계;
    상기 호흡 신호에 기초하여, 상기 제2 오디오 신호가 상기 수신자의 성문 정보를 포함하는지 여부를 식별하는 단계; 및
    상기 제2 오디오 신호가 상기 수신자의 성문 정보를 포함하는 경우, 상기 제3 오디오 신호, 상기 수신자의 성문 정보 및 상기 수신자의 특성 정보에 기초하여 상기 중요 정보를 복호화하는 단계를 포함하고,
    상기 중요 정보는, 전송자의 음성 신호를 포함하는 제1 오디오 신호에서 상기 제1 오디오 신호의 컨텐츠 및 상기 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥(context)에 기초하여 검출되는, 방법.
  10. 제 9항에 있어서,
    상기 제1 오디오 신호의 컨텐츠는 상기 제1 오디오 신호의 오디오 특성을 포함하는, 방법.
  11. 제 9항에 있어서,
    상기 특성 정보는 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 포함하는, 방법.
  12. 삭제
  13. 복수의 다른 전자 장치들과 커뮤니케이션하는 전자 장치에 있어서,
    수신부;
    전송부; 및
    제어부;를 포함하고,
    상기 제어부는,
    전송자로부터 전송자의 음성 신호를 포함하는 제1 오디오 신호를 수신하도록 상기 수신부를 제어하고,
    상기 제1 오디오 신호에 포함된 중요 정보(sensitive information)를 상기 제1 오디오 신호의 컨텐츠 및 상기 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥(context)에 기초하여 검출하고,
    복수의 수신자들 중에서 상기 중요 정보를 전송하기 위한 적어도 하나의 수신자를 결정하고,
    상기 적어도 하나의 수신자로, 상기 적어도 하나의 수신자 각각을 식별하는 정보를 포함하는 수신자의 특성 정보 및 수신자의 음성 신호를 포함하는 제2 오디오 신호를 요청하는 메시지를 전송하도록 상기 전송부를 제어하고,
    상기 적어도 하나의 수신자로부터, 상기 제2 오디오 신호 및 상기 수신자의 특성 정보를 수신하도록 상기 수신부를 제어하고,
    상기 제2 오디오 신호에 기초하여, 상기 제2 오디오 신호를 전송한 수신자의 호흡 (respiratory) 신호를 검출하고,
    상기 호흡 신호에 기초하여, 상기 제2 오디오 신호가 수신자의 성문 정보를 포함하는지 여부를 식별하고,
    상기 제2 오디오 신호가 상기 수신자의 성문 정보를 포함하는 경우, 상기 제1 오디오 신호, 상기 수신자의 성문 정보 및 상기 적어도 하나의 수신자 각각을 식별하는 정보를 포함하는 수신자의 특성 정보에 기초하여, 상기 중요 정보를 암호화하고,
    암호화 된 상기 중요 정보를 포함하는 제3 오디오 신호를 전송하도록 전송부를 제어하는, 전자 장치.
  14. 제 13항에 있어서,
    상기 제1 오디오 신호의 컨텐츠는 상기 제1 오디오 신호의 오디오 특성을 포함하는, 전자 장치.
  15. 제 13항에 있어서,
    상기 제어부는:
    상기 오디오 신호에서 검출된 상기 적어도 하나의 수신자의 이름 또는 상기 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥에 기초하여 상기 오디오 신호에 대한 상기 수신자를 결정하는, 전자 장치.
  16. 복수의 다른 전자 장치들과 커뮤니케이션하는 전자 장치에 있어서:
    수신부;
    전송부; 및
    제어부;를 포함하고,
    상기 제어부는,
    다른 전자 장치로부터, 수신자를 식별하는 정보를 포함하는 수신자의 특성 정보 및 수신자의 음성 신호를 포함하는 수신자의 제2 오디오 신호를 요청하는 메시지를 수신하도록 상기 수신부를 제어하고,
    상기 다른 전자 장치로, 상기 수신자의 제2 오디오 신호 및 상기 수신자의 특성 정보를 전송하도록 상기 전송부를 제어하고,
    상기 다른 전자 장치로부터, 수신자의 성문 정보 및 상기 수신자의 특성 정보를 이용하여 암호화 된 중요 정보를 포함하는 전송자의 제3 오디오 신호를 수신하도록 상기 수신부를 제어하고,
    상기 수신자를 식별하는 정보를 포함하는 상기 수신자의 특성 정보를 획득하고,
    상기 제2 오디오 신호에 기초하여, 상기 수신자의 호흡 (respiratory) 신호를 검출하고,
    상기 호흡 신호에 기초하여, 상기 제2 오디오 신호가 상기 수신자의 성문 정보를 포함하는지 여부를 식별하고,
    상기 제2 오디오 신호가 상기 수신자의 성문 정보를 포함하는 경우, 상기 제3 오디오 신호, 상기 수신자의 성문 정보 및 상기 수신자의 특성 정보에 기초하여 상기 중요 정보를 복호화하고,
    상기 중요 정보는, 전송자의 음성 신호를 포함하는 제1 오디오 신호에서 상기 제1 오디오 신호의 컨텐츠 및 상기 전송자의 커뮤니케이션 히스토리에 있는 오디오 신호의 문맥(context)에 기초하여 검출되는, 전자 장치.
  17. 제 16항에 있어서,
    상기 제1 오디오 신호의 컨텐츠는 상기 제1 오디오 신호의 오디오 특성을 포함하는, 전자 장치.
  18. 제 16항에 있어서,
    상기 특성 정보는 상기 수신자의 성문 정보, 지문 정보, 얼굴 정보, 정맥 패턴 정보, 손금 정보 및 홍채 정보 중 적어도 하나를 포함하는, 전자 장치.
  19. 삭제
  20. 제 1항 내지 제 11항 중 어느 한 항의 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체.
KR1020160027710A 2015-09-01 2016-03-08 커뮤니케이션 방법 및 그를 위한 전자 장치 KR102379068B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/KR2016/002880 WO2017039102A1 (ko) 2015-09-01 2016-03-22 커뮤니케이션 방법 및 그를 위한 전자 장치
EP16842068.5A EP3309783B1 (en) 2015-09-01 2016-03-22 Communication method, and electronic device therefor
US15/756,892 US10650827B2 (en) 2015-09-01 2016-03-22 Communication method, and electronic device therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201510552749.1 2015-09-01
CN201510552749.1A CN106487514A (zh) 2015-09-01 2015-09-01 语音通信加密方法、解密方法及其装置

Publications (2)

Publication Number Publication Date
KR20170027260A KR20170027260A (ko) 2017-03-09
KR102379068B1 true KR102379068B1 (ko) 2022-03-25

Family

ID=58238369

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160027710A KR102379068B1 (ko) 2015-09-01 2016-03-08 커뮤니케이션 방법 및 그를 위한 전자 장치

Country Status (4)

Country Link
US (1) US10650827B2 (ko)
EP (1) EP3309783B1 (ko)
KR (1) KR102379068B1 (ko)
CN (2) CN106487514A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024090797A1 (ko) * 2022-10-24 2024-05-02 삼성전자주식회사 전자 장치 및 그 제어 방법

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108447471B (zh) * 2017-02-15 2021-09-10 腾讯科技（深圳）有限公司 语音识别方法及语音识别装置
US10861463B2 (en) * 2018-01-09 2020-12-08 Sennheiser Electronic Gmbh & Co. Kg Method for speech processing and speech processing device
CN108880811B (zh) * 2018-09-30 2021-11-23 北京集创北方科技股份有限公司 生物特征识别系统及其通信方法
CN109951844A (zh) * 2019-01-31 2019-06-28 维沃移动通信有限公司 一种信息保护方法和装置
US11411734B2 (en) * 2019-10-17 2022-08-09 The Toronto-Dominion Bank Maintaining data confidentiality in communications involving voice-enabled devices in a distributed computing environment
CN110990849A (zh) * 2019-11-20 2020-04-10 维沃移动通信有限公司 一种隐私数据的加密、解密方法及终端
CN111508469A (zh) * 2020-04-26 2020-08-07 北京声智科技有限公司 一种文语转换方法及装置
CN111768789B (zh) * 2020-08-03 2024-02-23 上海依图信息技术有限公司 电子设备及其语音发出者身份确定方法、装置和介质
CN111899741A (zh) * 2020-08-06 2020-11-06 上海明略人工智能(集团)有限公司 音频关键词加密方法、装置、存储介质及电子装置
CN113724735A (zh) * 2021-09-01 2021-11-30 广州博冠信息科技有限公司 语音流处理方法及装置、计算机可读存储介质、电子设备
US20230259653A1 (en) * 2022-02-14 2023-08-17 Twilio Inc. Personal information redaction and voice deidentification
CN115050390B (zh) * 2022-08-12 2022-12-06 杭州海康威视数字技术股份有限公司 一种语音隐私保护方法、装置、电子设备及存储介质
CN115565539B (zh) * 2022-11-21 2023-02-07 中网道科技集团股份有限公司 一种实现自助矫正终端防伪身份验证的数据处理方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070208867A1 (en) 2006-02-17 2007-09-06 Kun-Lang Yu Portable voiceprint-lock remote transmitting system and operation method thereof
US20090019553A1 (en) 2007-07-10 2009-01-15 International Business Machines Corporation Tagging private sections in text, audio, and video media
US20090199015A1 (en) * 2008-01-31 2009-08-06 International Business Machines Corporation Method for protecting audio content

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4694491A (en) * 1985-03-11 1987-09-15 General Instrument Corp. Cryptographic system using interchangeable key blocks and selectable key fragments
TW242206B (ko) * 1993-08-27 1995-03-01 At & T Corp
US5815577A (en) * 1994-03-18 1998-09-29 Innovonics, Inc. Methods and apparatus for securely encrypting data in conjunction with a personal computer
US6266412B1 (en) 1998-06-15 2001-07-24 Lucent Technologies Inc. Encrypting speech coder
US20030101349A1 (en) 2001-11-26 2003-05-29 Po-Tong Wang Method of using cryptography with biometric verification on security authentication
KR20030083273A (ko) 2002-04-20 2003-10-30 주식회사 디젠트 온라인 지문인증을 이용한 보안문서 생성/해제 시스템 및방법
US7921292B1 (en) * 2003-04-04 2011-04-05 Voltage Security, Inc. Secure messaging systems
US7593579B2 (en) 2004-04-20 2009-09-22 Symantec Corporation Method for secure encoding of data
US8266452B2 (en) * 2005-06-01 2012-09-11 Cisco Technology, Inc. System and method for communicating confidential messages
JP2007172294A (ja) * 2005-12-22 2007-07-05 Hitachi Ltd 利用者の認証機能を備えた情報処理装置
KR100888340B1 (ko) 2006-09-25 2009-03-10 에스케이 텔레콤주식회사 단말 브라우저 기반의 멀티모달 플러그인을 이용한 음성메시지 전송 시스템 및 그 방법
JP2008217652A (ja) 2007-03-07 2008-09-18 Toshiba Corp データ管理システム、データ管理サーバ、およびデータ管理プログラム
DE102007033667A1 (de) 2007-07-17 2009-01-22 GSMK Gesellschaft für sichere mobile Kommunikation mbH Verfahren und Vorrichtung für eine anonyme verschlüsselte mobile Daten- und Sprachkommunikation
KR20090011477A (ko) 2007-07-26 2009-02-02 엘지전자 주식회사 단말기의 메시지 송신 방법 및 이를 이용한 단말기
KR100945245B1 (ko) 2007-08-10 2010-03-03 한국전자통신연구원 안전하고 효율적인 음성 패킷 부분 암호화 방법 및 장치
WO2009067322A1 (en) * 2007-11-19 2009-05-28 General Instrument Corporation Method and apparatus for encrypting and decrypting encoded audio information
KR101277149B1 (ko) 2008-11-06 2013-06-20 삼성전자주식회사 사용자 데이터 암호화 방법 및 장치
JP5321174B2 (ja) * 2009-03-18 2013-10-23 ブラザー工業株式会社 端末装置、通信制御方法、及び通信制御プログラム
CN101951601A (zh) * 2010-08-25 2011-01-19 中兴通讯股份有限公司 移动通讯网中加密语音通话的方法和系统、终端及网络侧
JP2012080152A (ja) 2010-09-30 2012-04-19 Mitsubishi Space Software Kk 暗号化システム、暗号化装置、復号装置、暗号化システムプログラム及び暗号化方法
CN102064937B (zh) * 2011-01-10 2013-01-02 杭州电子科技大学 基于声纹的通话双方语音加解密方法
US8503645B1 (en) * 2011-04-08 2013-08-06 Symantec Corporation Systems and methods for providing protection against a solicitation for information during a telephone call
TW201342873A (zh) 2012-04-11 2013-10-16 Blucrypt Technologies Inc 語音保密方法、加密／解密方法及保密設備
US8782409B2 (en) 2012-06-04 2014-07-15 Private Giant Confidential message exchange using benign, context-aware cover message generation
CN102916869B (zh) * 2012-10-24 2015-07-01 鹤山世达光电科技有限公司 即时通信方法和系统
US9032219B2 (en) * 2012-11-16 2015-05-12 Nuance Communications, Inc. Securing speech recognition data
US9344414B2 (en) * 2013-02-01 2016-05-17 Interman Corporation User similarity provision method
US20140237256A1 (en) 2013-02-17 2014-08-21 Mourad Ben Ayed Method for securing data using a disposable private key
CN103236926B (zh) * 2013-03-28 2016-12-28 金硕澳门离岸商业服务有限公司 基于点对点的数据传输系统及传输方法
CN104284328A (zh) * 2013-07-09 2015-01-14 北京鼎普科技股份有限公司 一种加密手机通话内容的方法及装置
JP6347938B2 (ja) 2013-11-20 2018-06-27 日本電信電話株式会社 発話内重要語抽出装置とその装置を用いた発話内重要語抽出システムと、それらの方法とプログラム
CN104023332B (zh) * 2014-06-25 2018-01-16 上海斐讯数据通信技术有限公司 一种电子终端及其短信加密、解密方法
CN105357007B (zh) * 2014-08-21 2019-05-31 深圳市中兴微电子技术有限公司 加密通信方法及通信终端
CN104270517B (zh) * 2014-09-23 2019-06-14 中兴通讯股份有限公司 信息加密方法和移动终端
CN104601818B (zh) * 2015-01-26 2018-02-13 宇龙计算机通信科技(深圳)有限公司 一种在通讯过程中切换操作系统的方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070208867A1 (en) 2006-02-17 2007-09-06 Kun-Lang Yu Portable voiceprint-lock remote transmitting system and operation method thereof
US20090019553A1 (en) 2007-07-10 2009-01-15 International Business Machines Corporation Tagging private sections in text, audio, and video media
US20090199015A1 (en) * 2008-01-31 2009-08-06 International Business Machines Corporation Method for protecting audio content

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Hua-Hong Zhu, et al. Voiceprint-biometric template design and authentication based on cloud computing security. IEEE International Conference on Cloud and Service Computing. 2011.*
PATEL, Vishal M.; RATHA, Nalini K.; CHELLAPPA, Rama. Cancelable biometrics: A review. IEEE Signal Processing Magazine, 2015.08.12.

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024090797A1 (ko) * 2022-10-24 2024-05-02 삼성전자주식회사 전자 장치 및 그 제어 방법

Also Published As

Publication number Publication date
CN113206737A (zh) 2021-08-03
EP3309783A4 (en) 2018-04-18
KR20170027260A (ko) 2017-03-09
EP3309783B1 (en) 2020-04-29
CN106487514A (zh) 2017-03-08
US20180268824A1 (en) 2018-09-20
EP3309783A1 (en) 2018-04-18
US10650827B2 (en) 2020-05-12

Similar Documents

Publication Publication Date Title
KR102379068B1 (ko) 커뮤니케이션 방법 및 그를 위한 전자 장치
US10212593B2 (en) Context-related arrangements
US11568876B2 (en) Method and device for user registration, and electronic device
JP6592583B1 (ja) 情報交換用の方法及び装置
US9826329B2 (en) System and method for playing media
Schönherr et al. Unacceptable, where is my privacy? exploring accidental triggers of smart speakers
CN107463247B (zh) 一种文本阅读处理的方法、装置以及终端
WO2020051357A1 (en) Communicating context to a device using an imperceptible audio identifier
JP6454741B2 (ja) 低電力関連コンテンツ提供システム、方法、及びプログラムを記録したコンピューターで読むことができる記録媒体
US20120300923A1 (en) Encryption using real-world objects
US11031010B2 (en) Speech recognition system providing seclusion for private speech transcription and private data retrieval
US11425072B2 (en) Inline responses to video or voice messages
US20180286388A1 (en) Conference support system, conference support method, program for conference support device, and program for terminal
JPWO2014141413A1 (ja) 情報処理装置、出力方法およびプログラム
WO2020119692A1 (zh) 一种视频流播放方法及装置
CN113257246B (zh) 提示方法、装置、设备、系统及存储介质
US20220020387A1 (en) Interrupt for noise-cancelling audio devices
US20220272131A1 (en) Method, electronic device and system for generating record of telemedicine service
CN116257159A (zh) 多媒体内容的分享方法、装置、设备、介质及程序产品
US20220199096A1 (en) Information processing apparatus and information processing method
WO2017039102A1 (ko) 커뮤니케이션 방법 및 그를 위한 전자 장치
JP2015146528A (ja) コンテンツ評価装置およびコンテンツ評価プログラム
US20240071396A1 (en) System and Method for Watermarking Audio Data for Automated Speech Recognition (ASR) Systems
CN117558272A (zh) 一种基于沙发的分享方法及相关产品
JP2020056907A (ja) クラウド音声変換システム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant