KR20170121545A - 이어셋 및 그 제어 방법 - Google Patents

이어셋 및 그 제어 방법 Download PDF

Info

Publication number
KR20170121545A
KR20170121545A KR1020160050134A KR20160050134A KR20170121545A KR 20170121545 A KR20170121545 A KR 20170121545A KR 1020160050134 A KR1020160050134 A KR 1020160050134A KR 20160050134 A KR20160050134 A KR 20160050134A KR 20170121545 A KR20170121545 A KR 20170121545A
Authority
KR
South Korea
Prior art keywords
voice
signal
unit
voice signal
earset
Prior art date
Application number
KR1020160050134A
Other languages
English (en)
Inventor
신두식
Original Assignee
해보라 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 해보라 주식회사 filed Critical 해보라 주식회사
Priority to KR1020160050134A priority Critical patent/KR20170121545A/ko
Priority to US15/342,130 priority patent/US20170311068A1/en
Priority to CN201610962811.9A priority patent/CN107306368A/zh
Priority to PCT/KR2017/004167 priority patent/WO2017188648A1/ko
Publication of KR20170121545A publication Critical patent/KR20170121545A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1016Earpieces of the intra-aural type
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • G10L21/0364Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083Reduction of ambient noise
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/003Changing voice quality, e.g. pitch or formants
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/78Detection of presence or absence of voice signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041Mechanical or electronic switches, or control elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/02Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L2021/02082Noise filtering the noise being echo, reverberation of the speech
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/02Casings; Cabinets ; Supports therefor; Mountings therein
    • H04R1/04Structural association of microphone with electric circuitry therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/22Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only 
    • H04R1/222Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only  for microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H04R2201/107Monophonic and stereophonic headphones with microphone for two-way hands free communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/009Signal processing in [PA] systems to enhance the speech intelligibility
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00Microphones
    • H04R2410/05Noise reduction with a separate noise microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07Applications of wireless loudspeakers or wireless microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/11Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Otolaryngology (AREA)
  • General Health & Medical Sciences (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Telephone Function (AREA)

Abstract

사용자의 귀에서 나오는 음성을 사용자의 입에서 나오는 음성으로 보정할 수 있는 이어셋 및 그 제어 방법이 개시된다.
일 실시예에 따른 이어셋 시스템은 제1 마이크를 포함하되 사용자의 귓속에 삽입되는 제1 이어폰부를 포함하는 이어셋; 및 상기 사용자의 귀에서 나오는 음성이 상기 제1 마이크로 입력되면, 상기 제1 마이크를 통해 획득된 제1 음성 신호를 보정 값에 기초하여 상기 사용자의 입에서 나오는 기준 음성 신호로 보정하는 제어부를 포함한다.

Description

이어셋 및 그 제어 방법{Earset and the control method for the same}
이어셋 및 그 제어 방법이 개시된다. 더욱 상세하게는 귀에서 나오는 음성 신호를 입에서 나오는 음성 신호로 보정하여 출력하는 이어셋 및 그 제어 방법이 개시된다.
휴대 전화의 사용이 늘어남에 따라 이어셋의 사용이 증가하고 있다. 이어셋은 마이크와 스피커가 장착된 기기를 말하는데, 이어셋을 사용하면 손이 자유로워지므로, 통화 중에도 다른 일을 할 수 있다.
그런데 종래의 이어셋은 스피커만 사용자의 귓속에 위치하고, 마이크는 귀 밖에 배치되는 구조를 갖는다. 따라서, 통화 시 주변 소음이 마이크로 입력되어, 스피커로 다시 출력되는 하울링 현상이 일어난다. 이는 통화 품질을 저하시키는 원인이 된다.
이러한 어려움을 극복하기 위해 스피커와 마이크가 모두 귓속에 배치함으로써, 사용자의 귀에서 나오는 소리만을 이용하여 통화를 진행시키고, 귀 밖의 소리는 차단시키는 귓속 삽입형 마이크를 포함하는 이어셋이 개발되었다.
그러나 귓속 삽입형 마이크를 포함하는 이어셋을 사용하는 경우, 이관(耳管)을 통해서 음성이 나오기 때문에 사용 중 울림 현상이 발생할 수 있으며, 명확한 의사 전달이 어려울 수 있다는 문제가 있다.
한국등록특허 제10-1504661호 (발명의 명칭: 이어셋, 등록일: 2015년 3월 16일)
사용자의 귀에서 나오는 음성을 사용자의 입에서 나오는 음성으로 보정하거나, 사용자의 입에서 나오는 음성을 사용자의 귀에서 나오는 음성으로 보정할 수 있는 이어셋 및 그 제어 방법이 개시된다.
상술한 과제를 해결하기 위하여 일 실시예에 따른 이어셋 시스템은 사용자의 귀에서 나오는 음성이 입력되는 제1 마이크를 포함하되 사용자의 귓속에 삽입되는 제1 이어폰부를 포함하는 이어셋; 및 상기 제1 마이크를 통해 획득된 제1 음성 신호나 상기 사용자의 입에서 나오는 음성 신호를 보정 값에 기초하여 기준 음성 신호로 보정하는 제어부를 포함한다.
상기 제어부는 상기 보정 값에 기초하여 상기 제1 음성 신호를 상기 기준 음성 신호인 상기 사용자의 입에서 나오는 음성 신호로 보정하거나, 상기 사용자의 입에서 나오는 음성 신호를 상기 기준 음성 신호인 상기 제1 음성 신호로 보정하는 보정부를 포함한다.
상기 보정 값은 상기 기준 음성 신호를 사전에 분석하여 획득된다.
상기 보정 값은 상기 이어셋 및 상기 이어셋과 연동된 상기 사용자의 외부 기기 중 적어도 하나에 저장된다.
상기 이어셋에 저장된 상기 보정 값은 유무선 통신 방식에 따라 상기 외부 기기로 전송되거나, 상기 외부 기기에 저장된 상기 보정 값은 유무선 통신 방식에 따라 상기 이어셋으로 전송된다.
상기 보정 값은 상기 제1 음성 신호로부터 실시간으로 획득되거나 추정된다.
상기 보정 값은 하나 이상의 외부 마이크를 통해 획득된 외부 음성 신호로부터 실시간으로 획득되거나 추정된다.
상기 하나 이상의 외부 마이크는 상기 제1 이어폰부와 연결된 본체 및 상기 이어셋과 연동된 외부 기기 중 적어도 하나에 배치된다.
상기 하나 이상의 외부 마이크는 상기 사용자의 입에서 나오는 음성이 감지되는 경우 자동으로 활성화된다.
상기 하나 이상의 외부 마이크는 상기 사용자의 입에서 나오는 음성이 입력된 후 자동으로 비활성화된다.
상기 하나 이상의 외부 마이크는 상기 사용자의 입에서 나오는 음성이 감지되지 않는 경우, 자동으로 비활성화된다.
상기 보정부는 상기 기준 음성 신호로부터 검출된 정보에 기초하여 상기 기준 음성 신호의 종류를 판별하되, 상기 기준 음성 신호의 종류가 여성의 음성 신호에 해당하는 경우, 상기 제1 음성 신호의 주파수 대역을 여성의 음성을 분석하여 획득한 제1 기준 주파수 대역으로 보정하고, 상기 기준 음성 신호의 종류가 남성의 음성 신호에 해당하는 경우, 상기 제1 음성 신호의 주파수 대역을 남성의 음성을 분석하여 획득한 제2 기준 주파수 대역으로 보정한다.
상기 제어부는 상기 기준 음성 신호로부터 상기 정보를 검출하는 검출부를 포함한다.
상기 검출부 및 상기 보정부 중 적어도 하나는 상기 이어셋 및 상기 이어셋과 연동된 상기 사용자의 외부 기기 중 적어도 하나에 회로적으로 설치되거나 소프트웨어적으로 저장된다.
상기 제어부는 상기 제1 음성 신호 및 상기 사용자의 입에서 나오는 음성 신호 중 적어도 하나에 대하여 음성 신호 처리를 수행한다.
상기 음성 신호 처리는 음성 신호의 주파수를 변환하는 것, 상기 음성 신호의 주파수를 확장하는 것, 상기 음성 신호의 이득을 조절하는 것, 상기 음성 신호의 진동수 특성을 조절하는 것, 상기 음성 신호에서 음향 반향을 제거하는 것, 상기 음성 신호에서 잡음을 제거하는 것, 상기 음성 신호에서 잡음을 억제하는 것, 상기 음성 신호에서 잡음을 취소하는 것, Z-변환, S-변환, 고속 푸리에 변환, 또는 이들의 조합을 포함한다.
상기 제1 이어폰부는 외부 기기로부터 수신한 음향 신호나 음성 신호를 출력하는 제1 스피커를 더 포함한다.
상기 이어셋은 상기 사용자의 귓속에 삽입되는 제2 이어폰부를 더 포함하되, 상기 제2 이어폰부는 제2 마이크 및 제2 스피커 중 적어도 하나를 더 포함한다.
상기 이어셋은 상기 사용자의 외부 기기와 통신하기 위한 통신부를 더 포함하되, 상기 통신부는 유선 통신 방식 또는 무선 통신 방식을 지원한다.
상기 통신부는 상기 이어셋에 저장된 상기 보정 값을 상기 외부 기기로 전송하거나, 상기 외부 기기에 저장된 상기 보정 값을 상기 외부 기기로부터 수신한다.
사용자의 귀에서 나오는 음성을 입에서 나오는 음성으로 보정하므로, 통화 품질을 향상시킬 수 있다.
도 1은 일 실시예에 따른 이어셋 시스템의 구성을 도시한 도면이다.
도 2는 일 실시에에 따른 이어셋의 구성을 도시한 도면이다.
도 3은 다른 실시예에 따른 이어셋의 구성을 도시한 도면이다.
도 4는 또 다른 실시예에 따른 이어셋의 구성을 도시한 도면이다.
도 5는 또 다른 실시예에 따른 이어셋의 구성을 도시한 도면이다.
도 6은 또 다른 실시예에 따른 이어셋의 구성을 도시한 도면이다.
도 7은 도 2 내지 도 6에 도시된 제어부의 구성에 대한 일 실시예를 도시한 도면이다.
도 8은 도 2 내지 도 6에 도시된 제어부의 구성에 대한 다른 실시예를 도시한 도면이다.
도 9는 또 다른 실시예에 따른 이어셋의 구성 및 외부 기기의 구성을 도시한 도면이다.
도 10은 도 9에 도시된 외부 기기의 제어부의 구성에 대한 일 실시예를 도시한 도면이다.
도 11은 도 9에 도시된 외부 기기의 제어부의 구성에 대한 다른 실시예를 도시한 도면이다.
도 12는 도 2 내지 도 11에 도시된 이어셋의 제어 방법에 대한 일 실시예를 도시한 순서도이다.
도 13은 도 2 내지 도 11에 도시된 이어셋의 제어 방법에 대한 다른 실시예를 도시한 순서도이다.
도 14는 또 다른 실시예에 따른 이어셋의 구성을 도시한 도면이다.
도 15는 도 14의 제어부의 구성을 도시한 도면이다.
도 16은 도 14 및 도 15에 도시된 이어셋의 제어 방법에 대한 일 실시예를 도시한 순서도이다.
도 17은 도 14 및 도 15에 도시된 이어셋의 제어 방법에 대한 다른 실시예를 도시한 순서도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 게시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 게시가 완전하도록 하고, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다.
이하, 첨부된 도면들을 참조하여 본 발명의 실시예들을 설명한다. 도면에서 동일한 도면 부호는 동일한 구성 요소를 나타낸다.
도 1은 일 실시예에 따른 이어셋 시스템의 구성을 도시한 도면이다.
도 1을 참조하면, 이어셋 시스템(1)은 사용자의 이어셋(10) 및 사용자의 외부 기기(30)를 포함할 수 있다. 이에 더하여 이어셋 시스템(1)은 상대방의 외부 기기(30'), 상대방의 이어셋(10') 및 서버(40) 중 적어도 하나를 더 포함할 수 있다. 사용자의 이어셋(10)과 상대방의 이어셋(10')은 실질적으로 동일한 장치일 수 있으며, 사용자의 외부 기기(30)와 상대방의 외부 기기(30')는 실질적으로 동일한 장치일 수 있다. 이하의 설명에서는 사용자의 이어셋(10) 및 사용자의 외부 기기(30)를 위주로 설명하기로 한다.
이어셋(10)은 사용자의 귓속에 삽입되는 장치이다. 이어셋(10)은 사용자의 귀에서 나오는 음성신호를 입에서 나오는 음성 신호로 변환하거나, 사용자의 입에서 나오는 음성을 귀에서 나오는 음성 신호로 변환하여 유무선 네트워크(20)를 통해 외부 기기(30)로 전송할 수 있다. 또한, 이어셋(10)은 유무선 네트워크(20)를 통해 외부 기기(30)로부터 음향 신호나 음성 신호를 수신할 수 있다. 이어셋(10)의 구성에 대한 보다 구체적인 설명은 도 2 내지 도 6을 참조하여 후술하기로 한다.
외부 기기(30)는 유무선 네트워크(20)를 통해 음향 신호나 상대방의 음성 신호를 이어셋(10)으로 전송하고, 이어셋(10)으로부터 사용자의 음성 신호를 수신한다. 일 실시예에 따르면, 외부 기기(30)는 보정된 음성 신호를 이어셋(10)으로부터 수신할 수 있다. 다른 실시예에 따르면, 외부 기기(30)는 제1 마이크(도 4의 112 참조)의 음성 신호(이하, '제1 음성 신호'라 한다) 및/또는 제2 마이크(도 4의 122)의 음성 신호(이하, '제2 음성 신호'라 한다)를 이어셋(10)으로부터 수신한 다음, 외부 음성 신호에 기초하여 제1 음성 신호 및/또는 제2 음성 신호를 보정한다. 여기서, 외부 음성 신호란 사용자의 입에서 나오는 음성에 대응하는 음성 신호를 말한다.
외부 음성 신호는 외부 마이크를 통해 획득될 수 있다. 일 예로, 외부 마이크는 이어셋(10)의 본체에 배치된 마이크(도 13의 140 참조)를 의미할 수 있다. 다른 예로, 외부 마이크는 외부 기기(30)에 배치된 마이크(도시되지 않음)를 의미할 수 있다. 외부 음성 신호는 외부 마이크를 통해 사전에 획득되거나, 외부 마이크를 통해 실시간으로 획득될 수 있다.
한편, 외부 기기(30)는 외부 음성 신호에 기초하여 제1 음성 신호 및/또는 제2 음성 신호를 보정하는 것과는 다른 실시예로서, 제1 음성 신호 및/또는 제2 음성 신호에 기초하여 외부 음성 신호를 보정할 수도 있다. 어떠한 음성 신호를 보정할 것인지는 외부 기기(30) 또는 이어셋(10)을 통해 사용자에 의해 설정될 수 있다. 이하, 설명의 편의를 위해, 음성 신호를 보정하는 기준이 되는 음성 신호를 '기준 음성 신호'라 한다. 앞서 설명한 예에서, 외부 음성 신호에 기초하여 제1 음성 신호 및/또는 제2 음성 신호를 보정하려는 경우, 외부 음성 신호가 기준 음성 신호에 해당될 수 있다. 만약, 제1 음성 신호나 제2 음성 신호에 기초하여 외부 음성 신호를 보정하려는 경우, 제1 음성 신호나 제2 음성 신호가 기준 음성 신호에 해당될 수 있다.
외부 기기(30)가 무선 네트워크를 통해 신호를 송수신하는 경우, 외부 기기(30)와 이어셋(10) 간에는 울트라와이드밴드(Ultrawideband), 지그비(Zigbee), 와이파이(WiFi), 및 블루투스(Bluetooth) 중 하나의 무선 통신 방식이 사용될 수 있다. 그러나 무선 통신 방식이 예시된 것들로 반드시 한정되는 것은 아니다.
외부 기기(30)가 무선 통신 방식에 따라 이어셋(10)과 통신하는 경우, 외부 기기(30)와 이어셋(10) 간에는 사전에 페어링(pairing) 과정이 수행될 수 있다. 페어링은 이어셋(10)의 기기 정보를 외부 기기(30)에 등록하고, 외부 기기(30)의 기기 정보를 이어셋(10)에 등록하는 과정을 말한다. 페어링 과정이 완료된 상태에서 신호를 송수신하면, 송수신되는 신호의 보안을 유지할 수 있다.
외부 기기(30)는 유무선 통신 장치를 포함할 수 있다. 유무선 통신 장치로는 팜 PC(Palm Personal Computer), 개인용 디지털 보조기(PDA: Personal Digital Assistant), 왑폰(WAP phone: Wireless application protocol phone), 스마트폰(Smart phone), 스마트패드 및 모바일 게임기(mobile play-station) 등의 이동 단말기를 예로 들 수 있다. 예시된 바와 같은 외부 기기(30)는 사용자의 신체 일부 예를 들어, 머리, 손목, 손가락, 팔, 또는 허리에 착용될 수 있는 착용형 장치일 수 있다. 도면에 도시되지는 않았지만, 예시된 바와 같은 외부 기기(30)는 마이크 및 스피커를 포함할 수 있다. 이 때, 마이크는 사용자의 입에서 나오는 음성을 입력받아 외부 음성 신호를 출력할 수 있다.
도 2 내지 도 6은 이어셋(10)의 구성에 대한 다양한 실시예들을 도시한 도면이다.
먼저, 도 2를 참조하면, 일 실시예에 따른 이어셋(10A)은 제1 이어폰부(110) 및 본체(100)를 포함한다.
제1 이어폰부(110)는 제1 스피커(111) 및 제1 마이크(112)를 포함하며, 사용자의 제1 외이도(예를 들어, 왼쪽 귀의 외이도)에 삽입된다. 제1 이어폰부(110)의 형상은 제1 외이도의 형상에 대응하는 형상을 가질 수 있다. 또는 제1 이어폰부(110)는 제1 외이도의 형상과는 상관 없이, 귓속에 삽입 가능한 형상을 가질 수 있다.
제1 스피커(111)는 외부 기기(30)로부터 수신한 음향 신호나 음성 신호를 출력한다. 출력된 신호는 제1 외이도를 따라 고막으로 전달된다. 제1 마이크(112)는 사용자의 귀에서 나오는 음성을 입력받는다. 이처럼 제1 스피커(111)와 제1 마이크(112)를 모두 제1 이어폰부(110) 내에 배치하면, 외부의 소음이 제1 마이크(112)로 입력되는 것을 방지할 수 있으므로, 시끄러운 환경에서도 깨끗한 통화 품질을 유지할 수 있다.
한편, 도 3을 참조하면, 다른 실시예에 따른 이어셋(10B)은 제1 이어폰부(110)를 포함하되, 제1 이어폰부(110)는 제1 마이크(112)만을 포함할 수 있다.
도 4를 참조하면, 또 다른 실시예에 따른 이어셋(10C)은 제1 이어폰부(110) 및 제2 이어폰부(120)를 포함하되, 제1 이어폰부(110)는 제1 스피커(111) 및 제1 마이크(112)를 포함하고, 제2 이어폰부(120)는 제2 스피커(121) 및 제2 마이크(122)를 포함할 수 있다. 제2 이어폰부(120)는 사용자의 제2 외이도에 삽입된다.
도 5를 참조하면, 또 다른 실시예에 따른 이어셋(10D)는 제1 이어폰부(110) 및 제2 이어폰부(120)를 포함하되, 제1 이어폰부(110)는 제1 스피커(111) 및 제1 마이크(112)를 포함하고, 제2 이어폰부(120)는 제2 스피커(121)만을 포함할 수 있다.
도 6을 참조하면, 또 다른 실시예에 따른 이어셋(10E)는 제1 이어폰부(110) 및 제2 이어폰부(120)를 포함하되, 제1 이어폰부(110)는 제1 스피커(111) 및 제1 마이크(112)를 포함하고, 제2 이어폰부(120)는 제2 마이크(122)만을 포함할 수 있다.
도 2 내지 도 6을 참조하면, 본체(100)는 제1 이어폰부(110)와 전기적으로 연결된다. 본체(100)는 사용자의 귀 밖으로 노출될 수 있다. 본체(100)는 사용자의 귀속에서 나오는 음성을 사용자의 입에서 나오는 음성으로 보정하고, 보정된 음성 신호를 외부 기기(30)로 전송한다. 이를 위해 본체(100)는 버튼부(130), 제어부(150) 및 통신부(160)를 포함할 수 있다.
버튼부(130)는 이어셋(10A)의 동작에 필요한 명령을 입력할 수 있는 버튼들을 포함할 수 있다. 예를 들면, 버튼부(130)는 이어셋(10A)으로 전원을 공급하기 위한 전원 버튼, 외부 기기(30)와의 페어링(pairing) 동작을 실행하기 위한 페어링 실행 버튼, 기준 음성 신호 설정 버튼, 음성 보정 모드 설정 버튼 및 음성 보정 실행 버튼을 포함할 수 있다.
기준 음성 신호 설정 버튼은 제1 음성 신호, 제2 음성 신호 및 외부 음성 신호 중에서 기준 음성 신호를 설정하기 위한 버튼이다. 즉, 사용자는 기준 음성 신호 설정 버튼을 이용하여, 외부 음성 신호에 기초하여 제1 음성 신호 및/또는 제2 음성 신호를 보정할 것인지, 제1 음성 신호 및/또는 제2 음성 신호에 기초하여 외부 음성 신호를 보정할 것인지를 설정할 수 있다.
음성 보정 모드 설정 버튼은 음성 신호 보정에 관한 모드를 설정할 수 있는 버튼이다. 음성 신호 보정 모드로는 일반 보정 모드 및 실시간 보정 모드를 예로 들 수 있다. 일반 보정 모드는 음성 신호를 기 저장되어 있는 기준 음성 신호에 기초하여 보정하는 것을 말한다. 실시간 보정 모드는 음성 신호를 실시간으로 획득된 기준 음성 신호에 기초하여 보정하는 것을 말한다.
음성 보정 실행 버튼은 음성 보정 기능을 활성화시키거나 비활성화시킬 수 있다. 예를 들어, 음성 보정 실행 버튼은 온/오프 버튼으로 구현될 수 있는데, 음성 보정 실행 버튼이 온 상태인 경우 음성 보정 기능이 활성화되고, 음성 보정 실행 버튼이 오프 상태인 경우 음성 보정 기능은 비활성화될 수 있다.
예시된 버튼들은 하드웨어적으로 별도의 버튼들로 구현될 수도 있고, 하드웨어적으로 하나의 버튼으로 구현될 수도 있다. 예시된 버튼들이 하드웨어적으로 하나의 버튼으로 구현된 경우에는 버튼의 조작 패턴에 따라 서로 다른 명령이 입력되도록 구현될 수 있다. 예를 들면, 소정 시간 내에 버튼이 인가되는 횟수, 버튼이 인가되는 시간 등의 조작 패턴에 따라, 서로 다른 명령이 입력되도록 구현될 수 있다.
이상 버튼부(130)에 구비되는 버튼들에 대해서 설명하였으나, 버튼부(130)에 예시된 버튼들이 반드시 구비되어야 하는 것은 아니며, 버튼의 개수나 종류는 경우에 따라 달라질 수 있음은 물론이다. 예를 들어, 음성 보정 실행 버튼은 생략될 수 있다. 이 경우, 사용자가 이어셋(10A)을 이용하여 통화하는 것이 감지되는 경우, 음성 보정이 자동으로 실행될 수 있다. 또는 사전에 획득된 보정 신호가 출력될 수 있다.
다른 실시예에 따르면, 버튼부(130)는 생략될 수도 있다. 이 경우, 이어셋(10A)의 동작을 제어하기 위한 명령은 외부 기기(30)로부터 수신될 수 있다. 구체적으로, 사용자는 외부 기기(30)에 설치된 음성 보정 애플리케이션을 통해 기준 음성 신호의 종류, 음성 보정 모드의 종류, 음성 보정 실행 여부 등과 관련된 명령을 입력할 수 있다. 이하, 설명의 편의를 위하여 음성 보정 실행 버튼이 구비된 경우를 예로 들어 설명하기로 한다.
통신부(160)는 외부 기기(30)와 유무선 네트워크(20)를 통해 신호를 송수신한다. 예를 들어, 통신부(160)는 외부 기기(30)로부터 음향 신호나 음성 신호를 수신한다. 다른 예로, 통신부(160)는 사용자의 귓속에서 나오는 음성이 사용자의 입에서 나오는 음성으로 보정되면, 보정된 음성 신호를 외부 기기(30)로 송신한다. 이외에도 통신부(160)는 이어셋(10A, 10B, 10C, 10D, 10E)과 외부 기기(30) 간의 페어링 과정에 필요한 제어 신호를 송수신할 수 있다. 이를 위해 통신부(160)는 울트라와이드밴드(Ultrawideband), 지그비(Zigbee), 와이파이(WiFi), 및 블루투스(Bluetooth) 중 적어도 하나의 무선 통신 방식을 지원하거나 유선 통신 방식을 지원할 수 있다.
제어부(150)는 이어셋(10A, 10B, 10C, 10D, 10E)의 각 구성요소들을 연결할 수 있다. 또한, 제어부(150)는 음성 보정 기능의 활성화 여부를 판단하고, 판단 결과에 따라 이어셋(10A, 10B, 10C, 10D, 10E)의 각 구성요소들을 제어할 수 있다.
구체적으로, 음성 보정 기능이 활성화된 상태라면, 제어부(150)는 제1 마이크(112) 및/또는 제2 마이크(122)로 입력된 음성을 사용자의 입에서 나온 음성으로 보정하거나, 사용자의 입에서 나온 음성을 사용자의 귀에서 나온 음성으로 보정한다. 만약, 음성 보정 기능이 비활성화된 상태라면, 제어부(150)는 제1 마이크(112)로 입력된 음성 및 제2 마이크(140)로 입력된 음성을 각각 처리하여, 외부 기기(30)로 전송한다.
만약, 버튼부(130)에서 음성 보정 실행 버튼이 생략되어, 음성 보정 기능의 활성화 또는 비활성화를 선택할 수 없는 경우라면, 제어부(150)는 사전에 획득된 보정 신호를 외부 기기(30)로 전송한다.
도 7은 이어셋(10A, 10B, 10C, 10D, 10E)의 제어부(150)의 구성에 대한 일 실시예를 도시한 도면이다. 도 8은 이어셋(10A, 10B, 10C, 10D, 10E)의 제어부(150)의 구성에 대한 다른 실시예를 도시한 도면이다.
먼저, 도 7을 참조하면, 일 실시예에 따른 제어부(150A)는 보정부(153), 필터부(154), AD 변환부(157) 및 음성 부호화부(158)를 포함할 수 있다.
보정부(153)는 제1 음성 신호, 제2 음성 신호 및 외부 음성 신호 중 적어도 하나를 기준 음성 신호로 보정한다. 예를 들어, 기준 음성 신호가 외부 음성 신호인 경우, 보정부(153)는 제1 음성 신호의 주파수 대역 및/또는 제2 음성 신호의 주파수 대역을 기준 음성 신호인 외부 음성 신호의 주파수 대역으로 보정한다. 제1 음성 신호 및/또는 제2 음성 신호는 사용자의 귀에서 나온 음성에 기초한 음성 신호이고, 기준 음성 신호인 외부 음성 신호는 사용자의 입에서 나온 음성에 기초한 음성 신호이므로, 보정부(153)는 사용자의 귀에서 나오는 음성을 사용자의 입에서 나오는 음성으로 보정하는 것으로 이해될 수 있다.
다른 예로, 기준 음성 신호가 제1 음성 신호인 경우, 보정부(153)는 외부 음성 신호의 주파수 대역을 기준 음성 신호인 제1 음성 신호의 주파수 대역으로 보정한다. 즉, 보정부(153)는 사용자의 입에서 나오는 음성을 사용자의 귀에서 나오는 음성으로 보정하는 것으로 이해될 수 있다. 이하, 설명의 편의를 위하여, 기준 음성 신호가 외부 음성 신호인 경우를 예로 들어 설명하기로 한다.
보정부(153)는 보정 값을 참조하여, 제1 음성 신호 및/또는 제2 음성 신호를 기준 음성 신호로 보정한다. 이 때, 상기 보정 값은 사전에 실험적으로 획득될 수 있다. 사전에 획득된 보정 값은 이어셋(10A, 10B, 10C, 10D, 10E)의 생산 시에 보정부(153)에 저장될 수 있다. 다른 예로, 보정 값은 외부 기기(30)에 설치된 음성 보정 애플리케이션을 통해 획득되어, 유무선 통신 방식에 따라 이어셋(10A, 10B, 10C, 10D, 10E)의 보정부(153)로 전송되어 저장될 수도 있다.
도면에 도시되어 있지는 않으나, 보정부(153)는 필터부, 이퀄라이저, 이득 조절부, 또는 이들의 조합을 더 포함할 수 있다.
필터부(154)는 보정된 음성 신호를 필터링하여 음향 반향(Acoustic Ehod) 및 잡음을 제거한다. 이를 위해 필터부(154)는 하나 이상의 필터 예를 들어, 음향 반향 제거 필터 및 잡음 제거 필터를 포함할 수 있다. 음향 반향 및 잡음이 제거된 음성 신호는 AD 변환부(155)로 제공된다.
AD 변환부(157)는 음향 반향 및 잡음이 제거된 음성 신호를 아날로그 신호에서 디지털 신호로 변환한다. 디지털 신호로 변환된 음성 신호는 음성 부호화부(158)로 제공된다.
음성 부호화부(158)는 디지털 신호로 변환된 음성 신호를 부호화한다. 부호화된 음성 신호는 통신부(160)를 통해 외부 기기(30)로 전송될 수 있다. 음성 부호화부(158)는 음성 신호를 부호화할 때, 음성 파형 부호화 방식, 보코딩 방식, 및 혼성 부호화 방식 중 하나의 방식을 사용할 수 있다.
음성 파형 부호화 방식은 음성 파형 자체에 대한 정보를 전송하는 기술을 말한다. 보코딩 방식은 음성 신호의 생성 모델에 기초하여 음성 신호로부터 특성 파라미터를 추출하고 추출된 특성 파라미터를 외부 기기(30)로 전송하는 방식이다. 혼성 부호화 방식은 파형 부호화 방식과 보코딩 방식의 장점을 결합한 방식으로, 보코딩 방식으로 음성 신호를 분석하여 음성의 특성을 제거하고 특성이 제거된 오차 신호를 파형 부호화 방식으로 전송하는 방식이다. 음성 신호를 어떤 방식으로 부호화할 것인지는 사전에 설정될 수 있으며, 설정된 값은 사용자에 의해 변경 가능하도록 구현될 수도 있다.
예시된 부호화 방식들 중에서 보코딩 방식을 사용하는 경우, 음성 부호화부(158)는 디지털 신호로 변환된 음성 신호의 속도와 음량을 판단하여 부호화율을 가변하여 음성 신호를 부호화할 수 있다.
도 7을 참조한 설명에서는 보정부(153)가 필터부(154)의 전단에 배치되는 경우를 예로 들어 설명하였다. 도면에 도시되지는 않았으나, 보정부(153)는 필터부(154)의 후단에 배치될 수도 있다.
다음으로, 도 8을 참조하면, 다른 실시예에 따른 제어부(150B)는 보정부(153), 필터부(154), 이퀄라이저(155), 이득 조절부(156), AD 변환부(157) 및 음성 부호화부(158)를 포함할 수 있다. 도 8에 도시된 구성요소들은 도 7에 도시된 구성요소들과 거의 유사하거나 동일하므로, 중복되는 설명은 생략하고 차이점 위주로 설명하기로 한다.
필터부(154)는 보정부(153)에 의해 보정된 음성 신호를 필터링하여 음향 반향 및 잡음을 제거한다. 음향 반향 및 잡음이 제거된 음성 신호는 이퀄라이저(155)로 제공된다.
이퀄라이저(155)는 필터부(154)에서 출력된 음성 신호의 전체적인 진동수 특성을 조절한다. 진동수 특성이 조절된 음성 신호는 이득 조절부(156)으로 제공된다.
이득 조절부(Gain Control; 156)는 이퀄라이저(155)에서 출력된 음성 신호에 이득을 가하여, 음성 신호의 크기를 조절한다. 즉, 이퀄라이저(155)에서 출력된 음성 신호의 크기가 작은 경우에는 음성 신호의 크기를 증폭시키고, 이퀄라이저(155)에서 출력된 음성 신호의 크기가 큰 경우에는 음성 신호의 크기를 감소시킨다. 이로써, 사용자의 외부 기기(30)로 일정한 크기의 음성 신호가 전송될 수 있도록 한다. 이득 조절부(156)는 예를 들어, 자동 이득 조절부(Automatic Gain Control)를 포함할 수 있다.
AD 변환부(157)는 이득 조절부(156)에서 출력된 음성 신호를 아날로그 신호에서 디지털 신호로 변환한다.
음성 부호화부(158)는 디지털 신호로 변환된 음성 신호를 부호화한다. 부호화된 음성 신호는 통신부(160)를 통해 외부 기기(30)로 전송될 수 있다. 음성 부호화부(158)는 음성 신호를 부호화할 때, 음성 파형 부호화 방식, 보코딩 방식, 및 혼성 부호화 방식 중 하나의 방식을 사용할 수 있다.
도 8을 참조한 설명에서는 보정부(153)가 필터부(154)의 전단에 배치되는 경우를 예로 들어 설명하였다. 도면에 도시되지는 않았으나, 보정부(153)는 필터부(154)의 후단에 배치될 수도 있다.
이상 도 2 내지 도 6을 참조하여 다양한 실시예들에 따른 이어셋(10A, 10B, 10C, 10D, 10E, 10F)에 대해서 설명하였으며, 도 7 및 도 8을 참조하여 이어셋(10A, 10B, 10C, 10D, 10E, 10F)의 제어부(150)에 대한 다양한 실시예들에 대해서 설명하였다. 도 2 내지 도 6에서는, 제1 마이크(112)로 입력된 음성 및/또는 제2 마이크(112)로 입력된 음성을 보정하는 동작이 음성 보정 기능의 활성화 여부에 따라, 이어셋(10A, 10B, 10C, 10D, 10E)에서 이루어지는 경우를 예로 들어 설명하였다. 그러나 이러한 동작이 반드시 이어셋(10A, 10B, 10C, 10D, 10E)에서 이루어저야하는 것은 아니다.
또 다른 실시예에 따르면, 제1 마이크(112)로 입력된 음성 및/또는 제2 마이크(112)로 입력된 음성을 보정하는 동작은 음성 보정 기능의 활성화 여부에 따라, 외부 기기(30)에서 이루어질 수도 있다. 이하, 도 9 내지 도 11을 참조하여, 또 다른 실시에에 따른 이어셋(10F)에 대해서 설명하기로 한다.
도 9는 또 다른 실시예에 따른 이어셋(10F)의 구성과 외부 기기(30)의 구성을 도시한 도면이다.
도 9를 참조하면, 이어셋(10F)은 제1 이어폰부(110) 및 본체(100)를 포함한다. 제1 이어폰부(110)는 제1 스피커(111) 및 제1 마이크(112)를 포함한다. 본체(100)는 버튼부(130), 제어부(150F) 및 통신부(160)를 포함한다.
도 9에 도시된 제1 스피커(111), 제1 마이크(112), 버튼부(130), 및 통신부(160)는 도 2 내지 도 6을 참조하여 설명한 제1 스피커(111), 제1 마이크(112), 버튼부(130), 및 통신부(160)와 유사하거나 동일하므로, 중복되는 설명은 생략하고 차이점 위주로 설명하기로 한다.
도 9에 도시된 이어셋(10F)의 제어부(150F)는 필터부(154), AD 변환부(157) 및 음성 부호화부(158)만을 포함한다. 이어셋(10F)의 제어부(150F)가 도 9와 같이 구성되는 경우, 제어부(150F)는 제1 마이크(112)로 입력된 음성을 처리하고, 처리 결과로 얻어진 음성 신호를 외부 기기(30)로 전송할 수 있다. 즉, 제어부(150F)의 필터부(154)는 제1 마이크(112)에서 출력된 제1 음성 신호를 필터링하여 음향 반향 및 잡음을 제거한다. 그리고, 제어부(150F)의 AD 변환부(157)는 필터링된 제1 음성 신호를 아날로그 신호에서 디지털 신호로 변환한다. 그리고, 제어부(150F)의 음성 부호화부(158)는 디지털 신호로 변환된 제1 음성 신호를 부호화한다.
한편, 도 9에 도시된 이어셋(10F)에서 제1 이어폰부(110)는 도 3에 도시된 제1 이어폰부(110)로 대체되거나, 도 4 내지 도 6에 도시된 제1 이어폰부(110) 및 제2 이어폰부(120)로 대체될 수 있다.
도 9를 참조하면, 외부 기기(30)는 입력부(320), 표시부(330), 제어부(350), 및 통신부(360)를 포함할 수 있다.
입력부(320)는 사용자로부터 명령을 입력받는 부분으로 터치 패드, 키 패드, 버튼, 스위치, 조그 휠, 또는 이들의 조합으로 이루어진 입력 수단을 포함할 수 있다. 터치 패드는 후술될 표시부(330)의 디스플레이(도시되지 않음)에 적층되어 터치 스크린(touch screen)을 구성할 수 있다.
표시부(330)는 명령 처리 결과를 표시하는 부분으로, 평판형 디스플레이 또는 플렉서블 디스플레이로 구현될 수 있다. 표시부(330)는 입력부(320)와 하드웨어적으로 별도로 구현될 수도 있고, 터치 스크린과 같이 입력부(320)와 통합된 형태로 구현될 수 있다.
통신부(360)는 유무선 네트워크(20)를 통해 이어셋(10F)의 통신부(160)와 신호 및/또는 데이터를 송수신한다. 예를 들어, 통신부(360)는 이어셋(10F)에서 전송된 제1 음성 신호를 수신할 수 있다.
제어부(350)는 음성 보정 기능의 활성화 여부를 판단하고, 판단 결과에 따라 외부 기기(30)의 각 구성요소들을 제어할 수 있다. 구체적으로, 음성 보정 기능이 활성화된 상태라면, 제어부(350)는 제1 음성 신호를 기준 음성 신호로 보정한다. 만약 음성 보정 기능이 비활성화된 상태라면, 제어부(350)는 제1 음성 신호를 처리하여, 사용자와 통화 중인 상대방의 외부 기기(30')으로 전송한다.
도 10은 외부 기기(30)의 제어부(350A)의 구성에 대한 일 실시예를 도시한 도면이다. 도 11은 외부 기기(30)의 제어부(350B)의 구성에 대한 다른 실시예를 도시한 도면이다.
먼저, 도 10을 참조하면, 일 실시예에 따른 제어부(350A)는 음성 복호화부(358), AD 변환부(357), 필터부(354) 및 보정부(353)를 포함할 수 있다.
음성 복호화부(358)는 이어셋(10F)으로부터 수신한 제1 음성 신호를 복호화한다. 복호화된 제1 음성 신호는 AD 변환부(357)로 제공된다.
AD 변환부(357)는 복호화된 제1 음성 신호를 디지털 신호로 변환한다. 디지털 신호로 변환된 제1 음성 신호는 필터부(354)로 제공된다.
필터부(354)는 디지털 신호로 변환된 제1 음성 신호를 필터링하여, 잡음을 제거한다. 잡음이 제거된 제1 음성 신호는 보정부(353)로 제공된다.
보정부(353)는 제1 음성 신호를 기준 음성 신호로 보정한다. 예를 들어, 보정부(353)는 보정 값을 참조하여, 제1 음성 신호의 주파수 대역을 기준 음성 신호의 주파수 대역으로 보정한다. 이 때, 상기 보정 값은 사전에 획득될 수 있다. 예를 들어, 이어셋(10F)의 제조사에 의해 사전에 획득된 보정 값은 유무선 네트워크(20)를 통해 외부 기기(30)로 배포되어, 보정부(353)에 저장될 수 있다.
다음으로, 도 11을 참조하면, 다른 실시예에 따른 제어부(350B)는 음성 복호화부(358), AD 변환부(357), 이득 조절부(356), 이퀄라이저(355), 필터부(354) 및 보정부(353)를 포함할 수 있다.
이득 조절부(356)는 AD 변환부(357)에서 출력된 제1 음성 신호에 이득을 가하여, 제1 음성 신호의 크기를 자동으로 조절한다. 이로써, 상대방의 외부 기기(30')로 일정한 크기의 제1 음성 신호가 전송될 수 있도록 한다.
이퀄라이저(355)는 이득 조절부(356)에서 출력된 제1 음성 신호에 대해서 전체적인 진동수 특성을 조절한다. 진동수 특성이 조절된 제1 음성 신호는 필터부(354)로 제공된다.
이상, 도 2 내지 도 11을 참조하여 이어셋(10)의 제어부(150)의 구성과 관련된 다양한 실시예들 및 외부 기기(30)의 제어부(350)의 구성과 관련된 다양한 실시예들에 대해서 설명하였다.
일 실시예에 따르면, 이어셋(10)의 제어부(150)에 포함된 구성요소들 중 적어도 하나와 외부 기기(30)의 제어부(350)에 포함된 구성요소들 중 적어도 하나는 하드웨어적으로 구현될 수 있다. 예를 들면, 이어셋(10)의 제어부(150)에 포함된 적어도 하나의 구성요소는 이어셋(10)의 내부에 회로적으로 구현되거나, 외부 기기(30)의 제어부(350)에 포함된 적어도 하나의 구성요소는 외부 기기(30)의 내부에 회로적으로 구현될 수 있다.
다른 실시예에 따르면, 이어셋(10)의 제어부(150)에 포함된 구성요소들 중 적어도 하나와 외부 기기(30)의 제어부(350)의 구성요소들 중 적어도 하나는 소프트웨어적으로 구현될 수 있다. 예를 들면, 펌웨어(Firmware), 음성 보정 프로그램, 또는 음성 보정 애플리케이션으로 구현될 수 있다. 이 경우, 펌웨어, 음성 보정 프로그램, 또는 음성 보정 애플리케이션은 이어셋(10)의 제조사로부터 제공되거나, 다른 외부 장치(미도시)로부터 유무선 네트워크(20)를 통해 제공될 수 있다. 펌웨어, 음성 보정 프로그램, 또는 음성 보정 애플리케이션는 이어셋(10), 외부 기기(30), 또는 서버(40)에 의해 구동될 수 있다.
또 다른 실시예에 따르면, 제어부(150, 350)를 구성하는 각 구성요소들의 배치 순서는 서로 바뀔 수도 있다. 또한 제어부(150, 350)를 구성하는 각 구성요소들 중에서 하나 이상의 구성요소는 생략될 수도 있다. 예를 들어, 제어부(150, 350)는 보정부(153, 353)만을 포함할 수도 있고, 필터부(154, 354)만을 포함할 수도 있고, 이퀄라이저(155, 355)만을 포함할 수도 있고, 이득조절부(156, 356)만을 포함할 수도 있고, 이들의 조합을 포함할 수도 있다.
도 12는 도 2 내지 도 8을 참조하여 설명한 이어셋(10A, 10B, 10C, 10D, 10E)의 제어 방법에 대한 일 실시예를 도시한 순서도이다. 그리고 도 13은 도 2 내지 도 8을 참조하여 설명한 이어셋(10A, 10B, 10C, 10D, 10E)의 제어 방법에 대한 다른 실시예를 도시한 순서도이다.
설명에 앞서, 사용자의 귀에 이어셋(10A, 10B, 10C, 10D, 10E)이 착용된 상태임을 가정한다. 또한, 기준 음성 신호는 외부 음성 신호인 경우를 가정한다.
먼저, 도 12를 참조하면, 음성 보정 기능이 활성화되었는지에 대한 판단이 이루어진다(S900). 음성 보정 기능의 활성화 여부는 이어셋(10A, 10B, 10C, 10D, 10E)의 버튼부(130)에 마련된 음성 보정 실행 버튼의 조작 상태, 또는 외부 기기(30)로부터 수신된 제어 신호의 유무에 기초하여 판단될 수 있다.
S900 단계의 판단 결과, 음성 보정 기능이 활성화되지 않은 경우(S900, 아니오), 제1 마이크(112)를 통해 획득된 제1 음성 신호가 외부 기기(30)로 전송된다(S910). 이 때, 외부 기기는 사용자의 외부 기기(30)를 의미할 수도 있고, 상대방의 외부 기기(30')를 의미할 수도 있다.
상기 S910 단계는 제1 마이크(112)에서 출력된 제1 음성 신호를 필터링하는 단계와, 필터링된 제1 음성 신호를 디지털 신호로 변환하는 단계와, 변환된 제1 음성 신호를 부호화하는 단계와, 부호화된 제1 음성 신호를 외부 기기(30)로 전송하는 단계를 포함할 수 있다. 이 때, 외부 기기(30)는 사용자의 외부 기기(30)를 의미할 수도 있고, 상대방의 외부 기기(30')를 의미할 수도 있다.
S900 단계의 판단 결과, 음성 보정 기능이 활성화된 경우(S900, 예), 제1 마이크(112)를 통해 획득된 제1 음성 신호가 기준 음성 신호로 보정된다(S940). 실시예에 따르면, 상기 S940 단계는 제1 마이크(112)를 통해 획득된 제1 음성 신호의 주파수 대역이 기준 음성 신호의 주파수 대역으로 보정되는 단계를 포함한다. 이 때, 기준 음성 신호의 주파수 대역은 사전에 획득되어 저장된 것일 수도 있고, 실시간으로 획득된 것일 수도 있다.
보정된 제1 음성 신호는 통신부(160)를 통해 외부 기기(30)로 전송된다(S950). 이 때, 외부 기기(30)는 사용자의 외부 기기(30)를 의미할 수도 있고, 상대방의 외부 기기(30')를 의미할 수도 있다. 이처럼 사용자의 귀에서 나오는 음성을 사용자의 입에서 나오는 음성으로 보정하면, 통화 품질을 향상시킬 수 있다.
한편, 도 12에서는 음성 보정 기능 활성화 여부를 판단하고(S900), 판단 결과에 따라 이어셋(10A, 10B, 10C, 10D, 10E)에서 제1 음성 신호를 보정하여 외부 기기(30)로 전송하거나(S940 내지 S980), 보정 전의 제1 음성 신호를 외부 기기(30)로 전송(S910) 하는 경우를 설명하였다. 그러나 음성 보정 기능 활성화 여부를 판단하는 단계(S900)가 반드시 수행되어야하는 것은 아니다.
예를 들어, 이어셋(10A, 10B, 10C, 10D, 10E)에 버튼부(130)가 구비되지 않거나, 버튼부(130)에 음성 보정 실행 버튼이 구비되지 않은 경우, 이어셋(10A, 10B, 10C, 10D, 10E)의 제어 방법은 도 13에 도시된 바와 같을 수 있다.
도 13을 참조하면, 이어셋(10A, 10B, 10C, 10D, 10E)을 이용한 통화가 감지되었는지에 대한 판단이 이루어진다(S905).
상기 S905 단계의 판단 결과, 이어셋(10A, 10B, 10C, 10D, 10E)을 이용한 통화가 감지되지 않은 경우, 제1 마이크(112)를 통해 획득된 제1 음성 신호가 외부 기기(30)로 전송된다(S910).
상기 S9050 단계의 판단 결과, 이어셋(10A, 10B, 10C, 10D, 10E)을 이용한 통화가 감지된 경우, 제1 마이크를 통해 획득된 제1 음성 신호가 기준 음성 신호로 보정된다(S940). 보정된 제1 음성 신호는 통신부(160)를 통해 외부 기기(30)로 전송된다(S950).
한편, 도 12 또는 도 13에 도시되어 있는 단계들은 모두 이어셋(10)에서 수행될 수 있다. 이 때, 도 12 또는 도 13에 도시되어 있는 단계들 중 일부 단계는 다른 단계들로 대체될 수 있다. 일 예로, 이어셋(10)이 도 7에 도시된 제어부(150A)를 포함하는 경우, S950 단계는, 보정된 제1 음성 신호를 필터링하는 단계, 필터링된 제1 음성 신호를 디지털 신호로 변환하는 단계, 디지털 신호로 변환된 제1 음성 신호를 부호화하는 단계, 부호화된 제1 음성 신호를 외부 기기(30)로 전송하는 단계로 대체될 수 있다.
다른 예로, 이어셋(10)이 도 8에 도시된 제어부(150B)를 포함하는 경우, S950 단계는, 보정된 제1 음성 신호를 필터링하는 단계, 필터링된 제1 음성 신호의 전체적인 진동수 특성을 조절하는 단계, 진동수 특성이 조절된 제1 음성 신호에 이득을 가하여 제1 음성 신호의 크기를 조절하는 단계, 이득이 조절된 제1 음성 신호를 디지털 신호로 변환하는 단계, 디지털 신호로 변환된 제1 음성 신호를 부호화하는 단계, 부호화된 제1 음성 신호를 외부 기기(30)로 전송하는 단계로 대체될 수 있다.
또한, 도 12에 도시되어 있는 단계들은 모두 외부 기기(30)에서 수행될 수 있다. 이 때, 도 12에 되어 있는 단계들 외에도 다른 단계들이 더 포함될 수 있다. 일 예로, 외부 기기(30)가 도 10에 도시된 제어부(350A)를 포함하는 경우, S900 단계와 S940 단계 사이에는 제1 마이크(112)에서 출력된 제1 음성 신호를 복호화하는 단계, 복호화된 제1 음성 신호를 디지털 신호로 변환하는 단계, 디지털 신호로 변환된 제1 음성 신호를 필터링하는 단계 등이 더 포함될 수 있다. 이 경우, S950 단계에서 외부 기기는 상대방의 외부 기기(30')를 의미할 수 있다.
다른 예로, 외부 기기(30)가 도 11에 도시된 제어부(350B)를 포함하는 경우, S900 단계와 S940 단계 사이에는 제1 마이크(112)에서 출력된 제1 음성 신호를 복호화하는 단계, 복호화된 제1 음성 신호를 디지털 신호로 변환하는 단계, 디지털 신호로 변환된 제1 음성 신호의 이득을 자동으로 조절하는 단계, 이득이 조절된 제1 음성 신호의 전체적인 진동수 특성을 조절하는 단계, 진동수가 조절된 제1 음성 신호를 필터링하는 단계 등이 더 포함될 수 있다. 이 경우, S950 단계에서 외부 기기는 상대방의 외부 기기(30')를 의미할 수 있다.
이상, 도 2 내지 도 13을 참조하여, 제1 마이크(112) 및/또는 제2 마이크(122) 포함하는 이어셋(10A, 10B, 10C, 10D, 10E, 10F) 및 그 제어 방법에 대해서 설명하였다. 이하, 도 14 내지 도 16을 참조하여, 제1 마이크(112) 및 외부 마이크(140)를 포함하는 포함하는 이어셋(10G) 및 그 제어 방법에 대해서 설명하기로 한다.
도 14는 또 다른 실시예에 따른 이어셋(10G)의 구성을 도시한 도면이다.
도 14를 참조하면, 이어셋(10G)은 제1 이어폰부(110) 및 본체(100)를 포함할 수 있다.
제1 이어폰부(110)는 사용자의 제1 외이도(왼쪽 귀의 외이도) 또는 제2 외이도에 삽입되는 부분으로, 제1 스피커(111) 및 제1 마이크(112)를 포함한다. 제1 마이크(112)는 귀에서 나오는 음성을 입력받는다.
한편, 도 14에 도시된 이어셋(10G)에서 제1 이어폰부(110)는 도 3에 도시된 제1 이어폰부(110)로 대체되거나, 도 4 내지 도 6에 도시된 제1 이어폰부(110) 및 제2 이어폰부(120)로 대체될 수 있다.
다시 도 14를 참조하면, 본체(100)는 제1 이어폰부(110)와 전기적으로 연결된다. 본체(100)는 버튼부(130), 외부 마이크(140), 제어부(150G) 및 통신부(160)를 포함한다.
도 14의 버튼부(130) 및 통신부(160)는 도 2의 버튼부(130) 및 통신부(160)와 유사하거나 동일하므로, 중복되는 설명은 생략하고, 외부 마이크(140) 및 제어부(150G)를 중심으로 설명하기로 한다.
외부 마이크(140)는 사용자의 입에서 나오는 음성을 입력받는다. 일 예로, 외부 마이크(140)는 항상 활성화된 상태를 유지할 수 있다. 다른 예로, 외부 마이크(140)는 버튼부(130)에 구비된 버튼의 조작 상태나, 외부 기기(30)로부터 수신된 제어 신호에 따라 활성화되거나 비활성화될 수 있다. 또 다른 예로, 외부 마이크(140)는 사용자의 음성이 감지되는 경우에는 활성화되고 사용자의 음성이 감지되지 않는 경우에는 비활성화될 수 있다.
본체(100)가 사용자의 귀 밖에 노출되므로, 외부 마이크(140)도 사용자의 귀 밖에 노출된다. 따라서 사용자의 입에서 나오는 음성은 외부 마이크(140)로 입력된다. 외부 마이크(140)로 음성이 입력되면, 외부 마이크(140)는 입력된 음성에 대한 음성 신호인 외부 음성 신호를 출력한다. 이후, 외부 마이크(140)에서 출력된 외부 음성 신호를 대상으로 분석이 수행되어, 외부 음성 신호의 정보가 검출된다. 일 예로, 외부 음성 신호의 정보는 주파수 대역에 대한 정보를 포함할 수 있다. 그러나 외부 음성 신호의 정보가 예시된 것으로 반드시 한정되는 것은 아니다.
외부 마이크(140)는 통화 중에 계속 활성화 상태로 유지될 수도 있고, 비활성화 상태로 변경될 수도 있다. 일 실시예에 따르면, 외부 마이크(140)의 상태 변경은 수동으로 이루어질 수 있다. 예를 들어, 사용자가 버튼부(130)를 조작하거나 외부 기기(30)를 조작하는 경우, 외부 마이크(140)는 활성화 상태에서 비활성화 상태로 전환될 수 있다. 다른 예로, 외부 마이크(140)는 활성화된 후, 일정 시간이 지나면 자동적으로 비활성화될 수도 있다.
도 14는 외부 마이크(140)가 하나인 경우를 도시하고 있으나, 외부 마이크(140)는 하나 이상 배치될 수도 있다. 복수의 외부 마이크(140)는 각각 서로 다른 위치에 배치될 수 있다.
제어부(150G)는 음성 보정 실행 기능이 활성화된 경우, 기준 음성 신호의 종류를 확인하고, 확인 결과에 따라 음성 신호를 보정한다.
일 예로, 기준 음성 신호가 외부 음성 신호인 경우, 제어부(150G)는 사용자의 귀에서 나오는 음성을 기준 음성 즉, 사용자의 입에서 나오는 음성으로 보정한다. 구체적으로, 제어부(150G)는 제1 마이크(112)로 입력된 음성의 주파수 대역을 사용자의 입에서 나오는 음성의 주파수 대역으로 보정하여 외부 기기(30)로 전송한다.
다른 예로, 기준 음성 신호가 제1 음성 신호인 경우, 제어부(150G)는 사용자의 입에서 나오는 음성을 기준 음성 즉, 사용자의 귀에서 나오는 음성으로 보정한다. 구체적으로, 제어부(150G)는 외부 마이크(140)로 입력된 음성의 주파수 대역을 제1 마이크(112)로 입력된 음성의 주파수 대역으로 보정하여 외부 기기(30)로 전송한다.
음성 보정 실행 기능이 비활성화된 경우, 제어부(150G)는 제1 마이크(112)로 입력된 음성을 처리하여 외부 기기(30)로 전송한다. 이를 위하여 제어부(150G)는 도 15에 도시된 바와 같이, 검출부(151), 보정부(153G), 필터부(154), AD 변환부(157) 및 음성 부호화부(158)를 포함할 수 있다.
도 15를 참조하면, 검출부(151)는 기준 음성 신호의 정보를 검출할 수 있다. 여기서, 기준 음성 신호는 제1 마이크(112)를 통해 획득된 제1 음성 신호를 의미할 수도 있고, 외부 마이크(140)를 통해 획득된 외부 음성 신호를 의미할 수도 있다.
또한, 기준 음성 신호의 정보는 기준 주파수 대역에 대한 정보를 포함할 수 있으나, 이것으로 반드시 한정되는 것은 아니다. 검출부(151)에서 검출된 기준 주파수 대역의 정보는 음성 신호를 보정하는 기준값으로 사용될 수 있다. 일 예로, 기준 음성 신호가 외부 음성 신호인 경우, 검출부(151)에서 검출된 기준 주파수 대역의 정보는 제1 마이크(112)를 통해 획득된 제1 음성 신호를 보정하는 기준값으로 사용될 수 있다. 다른 예로, 기준 음성 신호가 제1 음성 신호인 경우, 검출부(151)에서 검출된 기준 주파수 대역의 정보는 외부 마이크(140)를 통해 획득된 외부 음성 신호를 보정하는 기준값으로 사용될 수 있다.
보정부(153G)는 제1 마이크(112)에서 출력된 제1 음성 신호 또는 외부 마이크(140)에서 출력된 외부 음성 신호를 기준 음성 신호로 보정한다. 예를 들어, 보정부(153G)는 제1 음성 신호의 주파수 대역을 기준 음성 신호인 외부 음성 신호의 주파수 대역으로 보정한다. 다른 예로, 보정부(153G)는 외부 음성 신호의 주파수 대역을 기준 음성 신호인 제1 음성 신호의 주파수 대역으로 보정한다.
일 실시예에 따르면, 보정부(153G)는 검출부(151)에서 검출된 기준 음성 신호의 정보를 참조하여, 제1 마이크(112)에서 출력된 제1 음성 신호의 주파수 대역을 기준 음성 신호의 기준 주파수 대역으로 보정하거나, 외부 마이크(140)에서 출력된 외부 음성 신호의 주파수 대역을 기준 음성 신호의 주파수 대역으로 보정한다.
다른 실시예에 따르면, 보정부(153G)는 검출부(151)에서 검출된 기준 음성 신호의 정보에 기초하여, 제1 마이크(112)에서 출력된 음성 신호의 종류 예를 들어, 음성 성별을 판단할 수 있다. 판단 결과, 제1 마이크(112)에서 출력된 제1 음성 신호가 여성의 음성 신호에 해당하는 경우, 보정부(153G)는 제1 음성 신호의 주파수 대역을 제1 기준 주파수 대역으로 보정한다. 만약, 제2 마이크(112)에서 출력된 제1 음성 신호가 남성의 음성 신호에 해당한다면, 보정부(153G)는 제1 음성 신호의 주파수 대역을 제2 기준 주파수 대역으로 보정한다.
여기서, 제1 기준 주파수 대역의 정보란 여성의 음성에 대한 기준 주파수 대역의 정보를 말한다. 이러한 제1 기준 주파수 대역의 정보는 예를 들어, 여성 100명의 음성을 수집 및 분석하여 얻을 수 있다. 이에 비하여, 제2 기준 주파수 대역의 정보란 남성의 음성에 대한 기준 주파수 대역의 정보를 말한다. 이러한 제2 기준 주파수 대역의 정보는 예를 들어, 남성 100명의 음성을 수집 및 분석하여 얻을 수 있다. 이처럼 사전에 실험적으로 획득된 제1 기준 주파수 대역의 정보 및 제2 기준 주파수 대역의 정보는 보정부(153G)에 저장될 수 있다.
필터부(154)는 주파수 대역이 보정된 음성 신호를 필터링하여 음향 반향 및 잡음을 제거하고, AD 변환부(157) 음향 반향 및 잡음이 제거된 음성 신호를 아날로그 신호에서 디지털 신호로 변환하며, 음성 부호화부(158)는 디지털 신호로 변환된 음성 신호를 부호화한다.
도 16은 도 14 및 도 15를 참조하여 설명한 이어셋(10G)의 제어 방법에 대한 일 실시예를 도시한 순서도이다.
설명에 앞서, 이어셋(10G)과 외부 기기(30)가 무선 통신 방식에 따라 서로 통신하는 경우이며, 이어셋(10G)과 외부 기기(30) 간에는 페어링 과정이 완료된 상태임을 가정한다. 또한, 사용자의 귀에 이어셋(10G)이 착용된 상태임을 가정한다. 또한, 외부 마이크(140)를 통해 획득된 외부 음성 신호가 기준 음성 신호인 경우를 가정한다.
먼저, 음성 보정 기능이 활성화되었는지에 대한 판단이 이루어진다(S700). 음성 보정 기능의 활성화 여부는 버튼부(130)에 마련된 음성 보정 실행 버튼의 조작 상태, 또는 외부 기기(30)로부터 수신된 제어 신호의 유무에 기초하여 판단될 수 있다.
S700 단계의 판단 결과, 음성 보정 기능이 활성화되지 않은 경우(S700, 아니오), 제1 마이크(112)를 통해 획득된 제1 음성 신호 및 외부 마이크(140)를 통해 획득된 외부 음성 신호가 각각 외부 기기(30)로 전송된다(S710). 이 때, 외부 기기는 사용자의 외부 기기(30)를 의미할 수도 있고, 상대방의 외부 기기(30')를 의미할 수도 있다.
S700 단계의 판단 결과, 음성 보정 기능이 활성화된 경우(S700, 예), 외부 마이크(140)를 통해 획득된 외부 음성 신호인 기준 음성 신호의 정보가 검출된다(S720).
일 실시예에 따르면, 기준 음성 신호의 정보가 검출된 후에는, 제1 마이크(112)를 통해 획득된 제1 음성 신호가 검출된 정보에 기초하여 보정된다(S730).
다른 실시예에 따르면, 기준 음성 신호의 정보가 검출된 후에는, 검출된 정보에 기초하여, 제1 마이크(112)를 통해 획득된 제1 음성 신호의 종류 예를 들어, 음성 성별을 판단하는 단계가 수행된다. 판단 결과, 제1 마이크(112)를 통해 획득된 제1 음성 신호가 여성의 음성 신호인 경우, 제1 음성 신호의 주파수 대역을 제1 기준 주파수 대역으로 보정하는 단계가 수행된다. 판단 결과, 제1 마이크(112)를 통해 획득된 제1 음성 신호가 남성의 음성 신호인 경우, 제1 음성 신호의 주파수 대역을 제2 기준 주파수 대역으로 보정하는 단계가 수행된다.
보정된 제1 음성 신호는 통신부(160)를 통해 외부 기기(30)로 전송된다(S750). 상기 S750 단계는 보정된 제1 음성 신호가 필터부(154)에 의해 필터링되어 음향 반향 및 잡음이 제거되는 단계, 필터링된 제1 음성 신호가 AD 변환부(155)에 의해 아날로그 신호에서 디지털 신호로 변환되는 단계, 디지털 신호로 변환된 제1 음성 신호가 음성 부호화부(158)에 의해 부호화되는 단계를 포함할 수 있다.
이처럼, 사용자의 귀에서 나오는 음성의 주파수 대역을 기준 주파수 대역으로 보정하면, 사용자의 귀에서 나오는 음성의 주파수 대역을 사용자의 입에서 나오는 음성의 주파수 대역으로 보정한 것과 유사한 효과를 얻을 수 있으므로, 통화 품질을 향상시킬 수 있다.
한편, 도 16에서는 음성 보정 기능 활성화 여부를 판단하고(S700), 판단 결과에 따라 이어셋(10G)에서 음성 신호를 보정하거나(S720 내지 S750), 보정 전의 음성 신호를 외부 기기(30)로 전송(S710)하는 경우를 설명하였다. 그러나 음성 보정 기능 활성화 여부를 판단하는 단계(S700)가 반드시 수행되어야하는 것은 아니다. 예를 들어, 버튼부(130)가 구비되지 않거나, 버튼부(130)에 음성 보정 실행 버튼이 구비되지 않은 경우, 도 15에서 S700 단계 및 S710 단계는 생략될 수 있다.
도 17은 이어셋(10G)의 제어 방법에 대한 다른 실시예를 도시한 순서도로서, 도 16에 도시된 순서도를 좀 더 구체화한 것이다.
도 17을 참조하면, 음성 보정 기능이 활성화되었는지에 대한 판단이 이루어진다(S600).
S600 단계의 판단 결과, 음성 보정 기능이 활성화되지 않은 경우, 제1 마이크(112)를 통해 획득된 제1 음성 신호 및 외부 마이크(140)를 통해 획득된 외부 음성 신호가 각각 외부 기기(30)로 전송된다(S660).
S600 단계의 판단 결과, 음성 보정 기능이 활성화된 경우, 기준 음성 신호가 외부 음성 신호인지에 대한 판단이 이루어진다(S605).
S605 단계의 판단 결과, 기준 음성 신호가 외부 음성 신호로 설정되어 있는 경우, 사용자의 귀에서 나오는 음성 신호를 사용자의 입에서 나오는 음성 신호로 보정하도록 설정된 것으로 판단된다.
이후, 설정된 음성 보정 모드가 실시간 보정 모드인지에 대한 판단이 이루어진다(S610).
S610 단계의 판단 결과, 음성 보정 모드가 실시간 보정 모드가 아닌 경우 즉, 일반 보정 모드인 경우, 제1 마이크(112)를 통해 획득된 제1 음성 신호가 기 저장된 정보에 기초하여 보정된다(S630).
S610 단계의 판단 결과, 음성 보정 모드가 실시간 보정 모드인 경우, 외부 마이크(140)를 통해 획득된 외부 음성 신호인 기준 음성 신호로부터 정보가 검출된다(S615).
이후, 제1 마이크(112)를 통해 획득된 제1 음성 신호가 검출된 정보에 기초하여 보정된다(S620).
보정된 음성 신호는 통신부(160)를 통해 외부 기기(30)로 전송된다(S625). 상기 S625 단계는 보정된 음성 신호가 필터부(154)에 의해 필터링되어 음향 반향 및 잡음이 제거되는 단계, 필터링된 음성 신호가 AD 변환부(155)에 의해 아날로그 신호에서 디지털 신호로 변환되는 단계, 디지털 신호로 변환된 음성 신호가 음성 부호화부(158)에 의해 부호화되는 단계를 포함할 수 있다.
한편, S605 단계의 판단 결과, 기준 음성 신호가 외부 음성 신호가 아닌 경우 즉, 기준 음성 신호가 제1 음성 신호로 설정되어 있는 경우, 사용자의 입에서 나오는 음성 신호를 사용자의 귀에서 나오는 음성 신호로 보정하도록 설정된 것으로 판단된다.
이후, 설정된 음성 보정 모드가 실시간 보정 모드인지에 대한 판단이 이루어진다(S640).
S640 단계의 판단 결과, 음성 보정 모드가 실시간 보정 모드가 아닌 경우 즉, 일반 보정 모드인 경우, 외부 마이크(140)를 통해 획득된 외부 음성 신호가 기 저장된 정보에 기초하여 보정된다(S655).
S640 단계의 판단 결과, 음성 보정 모드가 실시간 보정 모드인 경우, 제1 마이크(112)를 통해 획득된 제1 음성 신호인 기준 음성 신호로부터 정보가 검출된다(S645).
이후, 외부 마이크(140)를 통해 획득된 외부 음성 신호가 검출된 정보에 기초하여 보정된다(S650).
도 14 내지 도 17을 참조한 설명에서는 이어셋(10G)의 보정부(150G)가 실시간으로 획득된 기준 주파수 대역 정보 또는 사전에 획득된 기준 주파수 대역 정보에 기초하여 제1 음성 신호나 외부 음성 신호를 기준 음성 신호로 보정하는 경우를 예로 들어 설명하였다.
다른 실시예에 따르면, 이어셋(150G)의 보정부(150G)는 외부 기기(30)의 제어부(350)에서 실시간으로 획득된 기준 주파수 대역 정보에 기초하여 제1 음성 신호나 외부 음성 신호를 보정할 수도 있다. 이 경우, 외부 기기(30)의 제어부(350)는 필터부(354)의 후단에 배치된 검출부(351)를 더 포함하되, 보정부(353)는 생략될 수 있다(도 10 및 도 11 참조). 이 때, 검출부(351)는 외부 기기(30)에 배치된 마이크(도시되지 않음)로 사용자의 입에서 나온 음성이 입력되면, 외부 기기(30)의 마이크에서 출력된 음성 신호를 분석하여 기준 주파수 대역 정보를 검출할 수 있다.
검출부(351) 외에도 외부 기기(30)의 제어부(350)는 음성 복화화부(358), AD 변환부(357), 이득 조절부(356), 이퀄라이저(355) 및 필터부(354) 중 적어도 하나를 더 포함할 수 있다.
또 다른 실시예에 따르면, 이어셋(10G)의 보정부(153G)는 제1 마이크(112)에서 출력된 제1 음성 신호를 분석하여 기준 주파수 대역 정보를 추정하고, 추정된 기준 주파수 대역 정보에 기초하여 제1 음성 신호를 보정할 수도 있다. 또는 이어셋(10G)의 보정부(153G)는 외부 마이크(140)에서 출력된 외부 음성 신호를 분석하여 기준 주파수 대역 정보를 추정하고, 추정된 기준 주파수 대역 정보에 기초하여 외부 음성 신호를 보정할 수도 있다. 이를 위해 보정부(153G)는 추정 알고리즘을 참조할 수 있다. 실시예에 따르면, 추정 알고리즘은 주파수 보정 알고리즘, 이득 보정 알고리즘, 이퀄라이저 보정 알고리즘, 또는 이들의 조합을 더 포함할 수 있다. 이러한 추정 알고리즘은 이어셋(10G)의 생산 시에 보정부(153G)에 저장될 수 있다. 또한, 보정부(153G)에 저장되어 있는 추정 알고리즘은 외부 기기(30)와의 통신에 의해 갱신될 수도 있다.
또 다른 실시예에 따르면, 음성 보정 기능 활성화 여부를 판단하는 대신, 제1 마이크(112)를 통해 획득된 제1 음성 신호 및 외부 마이크(140)를 통해 획득된 외부 음성 신호를 비교한 결과에 기초하여, 음성 신호 보정이 수행될 수도 있다. 구체적으로, 제1 마이크(112)를 통해 획득된 제1 음성 신호가 외부 마이크(140)를 통해 획득된 외부 음성 신호보다 품질이 우수한 경우, 제1 음성 신호를 기준으로 외부 음성 신호가 보정될 수 있다. 만약, 외부 마이크(140)를 통해 획득된 외부 음성 신호가 제1 마이크(112)를 통해 획득된 제1 음성 신호보다 품질이 우수한 경우, 외부 음성 신호를 기준으로 제1 음성 신호가 보정될 수 있다.
이상으로 첨부된 도면들을 참조하며, 본 발명의 실시 예들을 설명하였다. 전술한 실시예들에서, 이어셋(10)의 제어부(150) 또는 외부 기기(30)의 제어부(350)가 사용자의 귀에서 나오는 음성을 사용자의 입에서 나오는 음성으로 보정하거나, 사용자의 입에서 나오는 음성을 사용자의 귀에서 나오는 음성으로 보정하기 위하여, 제1 음성 신호 및/또는 외부 음성 신호의 주파수를 변환하거나, 음향 반향 및 잡음을 제거하거나, 진동수 특성을 조절하는 경우(즉, 이퀄라이저 특성을 조절하는 것)를 예로 들어 설명하였다. 이외에도, 주파수 확장(frequency extension), 잡음 억제(noise suppression), 잡음 취소(noise cancelatioon), Z-변환, S-변환, 고속 푸리에 변환(Fast Fourier Transform, FFT), 또는 이들의 조합으로 이루어진 음성 신호 처리가 더 수행될 수 있다. 또한, 이상의 설명에서는 이어셋(10)이 본체(100)를 포함하는 경우를 예로 들어 설명하였다. 도면에 도시되지는 않았지만 다른 실시예에 따르면, 이어셋(10)에서 본체(100)는 생략될 수도 있다. 이 경우, 이어셋(10)의 본체(100)에 구비되는 구성요소들은 외부 기기(30)에 배치될 수 있다.
전술한 실시예들에 더하여, 본 발명의 실시 예들은 전술한 실시예의 적어도 하나의 처리 요소를 제어하기 위한 컴퓨터 판독 가능한 코드/명령을 포함하는 매체 예를 들면, 컴퓨터 판독 가능한 매체를 통해 구현될 수도 있다. 상기 매체는 상기 컴퓨터 판독 가능한 코드의 저장 및/또는 전송을 가능하게 하는 매체/매체들에 대응할 수 있다.
상기 컴퓨터 판독 가능한 코드는, 매체에 기록될 수 있을 뿐만 아니라, 인터넷을 통해 전송될 수도 있는데, 상기 매체는 예를 들어, 마그네틱 저장 매체(예를 들면, ROM, 플로피 디스크, 하드 디스크 등) 및 광학 기록 매체(예를 들면, CD-ROM, Blu-Ray, DVD)와 같은 기록 매체, 반송파(carrier wave)와 같은 전송매체를 포함할 수 있다. 상기 매체들은 분산 네트워크일 수도 있으므로, 컴퓨터로 읽을 수 있는 코드는 분산 방식으로 저장/전송되고 실행될 수 있다. 또한 더 나아가, 단지 일 예로써, 처리 요소는 프로세서 또는 컴퓨터 프로세서를 포함할 수 있고, 상기 처리 요소는 하나의 디바이스 내에 분산 및/또는 포함될 수 있다.
이상과 같이 예시된 도면을 참조로 하여, 본 발명의 실시예들을 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며, 한정적이 아닌 것으로 이해해야만 한다.
1: 이어셋 시스템
10: 이어셋
30: 외부 기기
100: 본체
110: 제1 이어폰부
120: 제2 이어폰부

Claims (22)

  1. 사용자의 귀에서 나오는 음성이 입력되는 제1 마이크를 포함하되 사용자의 귓속에 삽입되는 제1 이어폰부를 포함하는 이어셋; 및
    상기 제1 마이크를 통해 획득된 제1 음성 신호나 상기 사용자의 입에서 나오는 음성 신호를 보정 값에 기초하여 기준 음성 신호로 보정하는 제어부를 포함하는, 이어셋 시스템.
  2. 제1항에 있어서,
    상기 제어부는
    상기 보정 값에 기초하여 상기 제1 음성 신호를 상기 기준 음성 신호인 상기 사용자의 입에서 나오는 음성 신호로 보정하거나, 상기 사용자의 입에서 나오는 음성 신호를 상기 기준 음성 신호인 상기 제1 음성 신호로 보정하는 보정부를 포함하는, 이어셋 시스템.
  3. 제2항에 있어서,
    상기 보정 값은
    상기 기준 음성 신호를 사전에 분석하여 획득되는, 이어셋 시스템.
  4. 제3항에 있어서,
    상기 보정 값은
    상기 이어셋 및 상기 이어셋과 연동된 상기 사용자의 외부 기기 중 적어도 하나에 저장되는, 이어셋 시스템.
  5. 제4항에 있어서,
    상기 이어셋에 저장된 상기 보정 값은 유무선 통신 방식에 따라 상기 외부 기기로 전송되거나,
    상기 외부 기기에 저장된 상기 보정 값은 유무선 통신 방식에 따라 상기 이어셋으로 전송되는, 이어셋 시스템.
  6. 제2항에 있어서,
    상기 보정 값은
    상기 제1 음성 신호로부터 실시간으로 획득되거나 추정되는, 이어셋 시스템.
  7. 제2항에 있어서,
    상기 보정 값은
    하나 이상의 외부 마이크를 통해 획득된 외부 음성 신호로부터 실시간으로 획득되거나 추정되는, 이어셋 시스템.
  8. 제7항에 있어서,
    상기 하나 이상의 외부 마이크는
    상기 제1 이어폰부와 연결된 본체 및 상기 이어셋과 연동된 외부 기기 중 적어도 하나에 배치되는, 이어셋 시스템.
  9. 제7항에 있어서,
    상기 하나 이상의 외부 마이크는
    상기 사용자의 입에서 나오는 음성이 감지되는 경우 자동으로 활성화되는, 이어셋 시스템.
  10. 제9항에 있어서,
    상기 하나 이상의 외부 마이크는
    상기 사용자의 입에서 나오는 음성이 입력된 후 자동으로 비활성화되는, 이어셋 시스템.
  11. 제7항에 있어서,
    상기 하나 이상의 외부 마이크는
    상기 사용자의 입에서 나오는 음성이 감지되지 않는 경우, 자동으로 비활성화되는, 이어셋 시스템.
  12. 제2항에 있어서,
    상기 보정부는
    상기 기준 음성 신호로부터 검출된 정보에 기초하여 상기 기준 음성 신호의 종류를 판별하되,
    상기 기준 음성 신호의 종류가 여성의 음성 신호에 해당하는 경우, 상기 제1 음성 신호의 주파수 대역을 여성의 음성을 분석하여 획득한 제1 기준 주파수 대역으로 보정하고,
    상기 기준 음성 신호의 종류가 남성의 음성 신호에 해당하는 경우, 상기 제1 음성 신호의 주파수 대역을 남성의 음성을 분석하여 획득한 제2 기준 주파수 대역으로 보정하는, 이어셋 시스템.
  13. 제12항에 있어서,
    상기 제어부는
    상기 기준 음성 신호로부터 상기 정보를 검출하는 검출부를 포함하는, 이어셋 시스템.
  14. 제13항에 있어서,
    상기 검출부 및 상기 보정부 중 적어도 하나는
    상기 이어셋 및 상기 이어셋과 연동된 상기 사용자의 외부 기기 중 적어도 하나에 회로적으로 설치되거나 소프트웨어적으로 저장되는, 이어셋 시스템.
  15. 제2항에 있어서,
    상기 보정부는
    필터부, 이퀄라이저 및 이득 조절부 중 적어도 하나를 더 포함하는, 이어셋 시스템.
  16. 제1항에 있어서,
    상기 제어부는
    필터부, 이퀄라이저 및 이득 조절부 중 적어도 하나를 더 포함하는, 이어셋 시스템.
  17. 제1항에 있어서,
    상기 제어부는
    상기 제1 음성 신호 및 상기 사용자의 입에서 나오는 음성 신호 중 적어도 하나에 대하여 음성 신호 처리를 수행하는, 이어셋 시스템.
  18. 제17항에 있어서,
    상기 음성 신호 처리는
    음성 신호의 주파수를 변환하는 것, 상기 음성 신호의 주파수를 확장하는 것, 상기 음성 신호의 이득을 조절하는 것, 상기 음성 신호의 진동수 특성을 조절하는 것, 상기 음성 신호에서 음향 반향을 제거하는 것, 상기 음성 신호에서 잡음을 제거하는 것, 상기 음성 신호에서 잡음을 억제하는 것, 상기 음성 신호에서 잡음을 취소하는 것, Z-변환, S-변환, 고속 푸리에 변환, 또는 이들의 조합을 포함하는, 이어셋 시스템.
  19. 제1항에 있어서,
    상기 제1 이어폰부는
    외부 기기로부터 수신한 음향 신호나 음성 신호를 출력하는 제1 스피커를 더 포함하는, 이어셋 시스템.
  20. 제1항에 있어서,
    상기 이어셋은
    상기 사용자의 귓속에 삽입되는 제2 이어폰부를 더 포함하되,
    상기 제2 이어폰부는 제2 마이크 및 제2 스피커 중 적어도 하나를 더 포함하는, 이어셋 시스템.
  21. 제1항에 있어서,
    상기 이어셋은
    상기 사용자의 외부 기기와 통신하기 위한 통신부를 더 포함하되,
    상기 통신부는 유선 통신 방식 또는 무선 통신 방식을 지원하는, 이어셋 시스템.
  22. 제21항에 있어서,
    상기 통신부는
    상기 이어셋에 저장된 상기 보정 값을 상기 외부 기기로 전송하거나, 상기 외부 기기에 저장된 상기 보정 값을 상기 외부 기기로부터 수신하는, 이어셋 시스템.
KR1020160050134A 2016-04-25 2016-04-25 이어셋 및 그 제어 방법 KR20170121545A (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020160050134A KR20170121545A (ko) 2016-04-25 2016-04-25 이어셋 및 그 제어 방법
US15/342,130 US20170311068A1 (en) 2016-04-25 2016-11-03 Earset and method of controlling the same
CN201610962811.9A CN107306368A (zh) 2016-04-25 2016-11-04 耳机及其控制方法
PCT/KR2017/004167 WO2017188648A1 (ko) 2016-04-25 2017-04-19 이어셋 및 그 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160050134A KR20170121545A (ko) 2016-04-25 2016-04-25 이어셋 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20170121545A true KR20170121545A (ko) 2017-11-02

Family

ID=60090548

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160050134A KR20170121545A (ko) 2016-04-25 2016-04-25 이어셋 및 그 제어 방법

Country Status (4)

Country Link
US (1) US20170311068A1 (ko)
KR (1) KR20170121545A (ko)
CN (1) CN107306368A (ko)
WO (1) WO2017188648A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102287975B1 (ko) * 2020-05-11 2021-08-09 경기도 소방 헬멧용 통신 장치 및 이의 음성 신호 전송 방법
US11361785B2 (en) 2019-02-12 2022-06-14 Samsung Electronics Co., Ltd. Sound outputting device including plurality of microphones and method for processing sound signal using plurality of microphones

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107180627B (zh) * 2017-06-22 2020-10-09 潍坊歌尔微电子有限公司 去除噪声的方法和装置
US20200075272A1 (en) 2018-08-29 2020-03-05 Soniphi Llc Earbud With Rotary Switch
US10924868B2 (en) 2018-08-29 2021-02-16 Soniphi Llc Earbuds with scalar coil
US20210195308A1 (en) * 2018-08-29 2021-06-24 Soniphi Llc Earbuds With Enhanced Features
JP7040393B2 (ja) * 2018-10-05 2022-03-23 株式会社Jvcケンウッド 端末装置、プログラム
US11064284B2 (en) * 2018-12-28 2021-07-13 X Development Llc Transparent sound device
CN113038318B (zh) * 2019-12-25 2022-06-07 荣耀终端有限公司 一种语音信号处理方法及装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NO314429B1 (no) * 2000-09-01 2003-03-17 Nacre As Öreterminal med mikrofon for naturlig stemmegjengivelse
US7502484B2 (en) * 2006-06-14 2009-03-10 Think-A-Move, Ltd. Ear sensor assembly for speech processing
EP2362678B1 (en) * 2010-02-24 2017-07-26 GN Audio A/S A headset system with microphone for ambient sounds
EP2833645B1 (en) * 2012-03-29 2017-02-15 Haebora Wired and wireless earset using ear-insertion-type microphone
KR101381289B1 (ko) * 2012-10-25 2014-04-04 신두식 귓속 삽입형 마이크를 사용하는 유무선 이어셋
US9245527B2 (en) * 2013-10-11 2016-01-26 Apple Inc. Speech recognition wake-up of a handheld portable electronic device
KR101504661B1 (ko) * 2013-11-27 2015-03-20 해보라 주식회사 이어셋
KR101595270B1 (ko) * 2014-08-18 2016-02-18 해보라 주식회사 유무선 이어셋
KR101592422B1 (ko) * 2014-09-17 2016-02-05 해보라 주식회사 이어셋 및 그 제어 방법
KR101598400B1 (ko) * 2014-09-17 2016-02-29 해보라 주식회사 이어셋 및 그 제어 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11361785B2 (en) 2019-02-12 2022-06-14 Samsung Electronics Co., Ltd. Sound outputting device including plurality of microphones and method for processing sound signal using plurality of microphones
KR102287975B1 (ko) * 2020-05-11 2021-08-09 경기도 소방 헬멧용 통신 장치 및 이의 음성 신호 전송 방법

Also Published As

Publication number Publication date
WO2017188648A1 (ko) 2017-11-02
US20170311068A1 (en) 2017-10-26
CN107306368A (zh) 2017-10-31

Similar Documents

Publication Publication Date Title
KR20170121545A (ko) 이어셋 및 그 제어 방법
JP7098771B2 (ja) ノイズ低減のためのオーディオ信号処理
EP3217686B1 (en) System and method for enhancing performance of audio transducer based on detection of transducer status
US9691409B2 (en) Earset and control method for the same
JP6850954B2 (ja) 補聴装置との間のストリーミング通信のための方法および装置
JP5400166B2 (ja) 受話器およびステレオとモノラル信号を再生する方法
EP3169085B1 (en) Hearing assistance system with own voice detection
CN111149369B (zh) 头戴式受话器耳上状态检测
EP3081009B1 (en) Systems and methods for sharing secondary path information between audio channels in an adaptive noise cancellation system
JP5388379B2 (ja) 補聴装置、及び補聴方法
EP2148527B1 (en) System for reducing acoustic feedback in hearing aids using inter-aural signal transmission, method and use
CN114521333A (zh) 主动降噪音频装置和系统
US8358797B2 (en) Switch for a hearing aid
TW200834541A (en) Ambient noise reduction system
CN106416299A (zh) 具有用于控制至少一个助听器的操作的应用软件的个人通信设备
US11863938B2 (en) Hearing aid determining turn-taking
WO2021039004A1 (ja) 音響処理装置、音響処理方法及びプログラム
US20230254649A1 (en) Method of detecting a sudden change in a feedback/echo path of a hearing aid
DK2619997T3 (en) Communication system with phone and hearing aid and transfer process
US11696065B2 (en) Adaptive active noise cancellation based on movement
CN114374921A (zh) 用于运行听力辅助设备的方法和听力辅助设备

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right