KR101442027B1 - Sound processing system to recognize earphones for portable devices using sound patterns, mathod for recognizing earphone for portable devices using sound patterns, and mathod for sound processing using thereof - Google Patents

Sound processing system to recognize earphones for portable devices using sound patterns, mathod for recognizing earphone for portable devices using sound patterns, and mathod for sound processing using thereof Download PDF

Info

Publication number
KR101442027B1
KR101442027B1 KR1020130047341A KR20130047341A KR101442027B1 KR 101442027 B1 KR101442027 B1 KR 101442027B1 KR 1020130047341 A KR1020130047341 A KR 1020130047341A KR 20130047341 A KR20130047341 A KR 20130047341A KR 101442027 B1 KR101442027 B1 KR 101442027B1
Authority
KR
South Korea
Prior art keywords
earphone
sound
microphone
pattern
input
Prior art date
Application number
KR1020130047341A
Other languages
Korean (ko)
Inventor
범재룡
김희윤
배영식
Original Assignee
(주)다하미 커뮤니케이션즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)다하미 커뮤니케이션즈 filed Critical (주)다하미 커뮤니케이션즈
Priority to KR1020130047341A priority Critical patent/KR101442027B1/en
Priority to PCT/KR2013/009426 priority patent/WO2014088202A1/en
Application granted granted Critical
Publication of KR101442027B1 publication Critical patent/KR101442027B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033—Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041—Portable telephones adapted for handsfree use
    • H04M1/6058—Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/08—Mouthpieces; Microphones; Attachments therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephone Function (AREA)

Abstract

The present invention relates to a sound processing system for recognizing an earphone for a portable terminal using sound patterns. The sound processing system includes a specific earphone recognizing module (310) for receiving click sound for a call switching button mounted to an earphone, which is inputted through a microphone mounted in the earphone of a portable terminal, through an audio processing unit (140), recognizing a specific earphone by searching a sound pattern/setting information DB (330) based on the click sound, and transmitting information on the recognized specific earphone as earphone search information; a sound processing module (320) for receiving the earphone search information from the specific earphone recognizing module (310), linking the input sound of the microphone inputted through the microphone with the search information of the specific earphone, and processing and outputting the input sound with a preset sound processing method; and the sound pattern/setting information DB for linking and storing the specific earphone information with the sound pattern information of the click sound for the call switching button mounted to the earphone. The sound inputted through the microphone of the earphone can be processed and outputted with a preset method according to the input characteristics of the microphone of the recognized specific earphone.

Description

음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템, 음향패턴을 이용한 휴대형 단말기용 이어폰 인식방법 및 이를 이용한 입력음향 처리 방법.{Sound processing system to recognize earphones for portable devices using sound patterns, mathod for recognizing earphone for portable devices using sound patterns, and mathod for sound processing using thereof} TECHNICAL FIELD [0001] The present invention relates to a sound processing system for recognizing an earphone for a portable terminal using a sound pattern, an earphone recognition method for a portable terminal using a sound pattern, and an input sound processing method using the same earphone for portable devices using sound patterns, and mathod for sound processing using them}

본 발명은 휴대형 단말기용 이어폰 인식하는 음향처리 시스템, 이어폰 인식방법 및 이를 이용한 입력음향 처리 방법에 관한 것으로서, 더욱 상세하게는, 마이크가 장착된 휴대형 단말기용 이어폰의 버튼작동에 의하여 발생하는 음향을 이어폰에 장착된 마이크를 통하여 입력받아 음향패턴을 분석함으로써, 특정 이어폰의 장착을 인식하는, 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템, 음향패턴을 이용한 휴대형 단말기용 이어폰 인식방법 및 이를 이용한 입력음향 처리 방법에 관한 것이다. BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a sound processing system for recognizing an earphone for a portable terminal, an earphone recognition method, and an input sound processing method using the same, and more particularly, A sound processing system recognizing an earphone for a portable terminal using a sound pattern and recognizing the mounting of the specific earphone by analyzing a sound pattern received through a microphone mounted on the earphone, To an input sound processing method.

최근 스마트 폰 등 휴대형 단말기는 범용 운영 체제(Operating System; OS) 예컨데 스마트폰의 OS로서 안드로이드, 바다, iOS 등 범용 OS가 탑재되며, 상기 OS에서 구동되어 특정기능을 수행하며 사용자가 설치 및 삭제 가능한 다양한 프로그램 형태의 애플리케이션(즉, 앱(APP)이라고도 한다)이 사용되고 있다. 이를 통하여 웹브라우저가 탑재되어 다양한 소프트웨어(S/W) 및 프로그램을 직접 설치하여 이용하거나 인터넷 콘텐츠를 자유롭게 활용할 수 있으며, 자체 탑재된 프로그램 또는 앱에 의하여 오디오 파일 및 비디오 파일을 청취 또는 시청할 수 있는 파일 재생 기능, 방송 재생 등 부가기능을 제공하여 변화하는 사용자의 욕구에 부합하고 있다.2. Description of the Related Art Recently, portable terminals such as smart phones have been equipped with a general-purpose operating system (OS), for example, a general-purpose OS such as Android, sea, and iOS as an OS of a smart phone, Applications in various program forms (also referred to as APP) are being used. By this, a web browser can be installed, and various software (S / W) and programs can be directly installed and used, or the Internet contents can be freely utilized. A file that can listen or watch an audio file and a video file by the self- Playback function, broadcast playback, and so on, thereby meeting the needs of users who are changing.

휴대형 단말기에서 재생되는 오디오를 외부로 출력하는 이어폰 인터페이스가 구비되어 내장된 스피커뿐만 아니라 외부 이어폰의 사용이 가능하며, 상기 이어폰 인터페이스는 이동통신 기능에 따른 음성 통화 지원을 위하여 마이크와 기능버튼 즉, 통화연결 또는 종료동작을 수행하며 마이크의 활성화 비활성화를 제어하는 통화전환버튼의 기능이 가능한 형태의 이어폰, 예컨대 4극 이어폰을 지원하는 헤드셋 플러그를 포함한다.The earphone interface is provided with an earphone interface for outputting audio reproduced from the portable terminal to the outside so that it is possible to use an external earphone as well as a built-in speaker. The earphone interface includes a microphone and a function button A headset plug that supports a type of earphone capable of performing a connection or termination operation and a function of a call conversion button for controlling activation of the microphone, for example, a quadrupole earphone.

한편, 위와 같은 휴대형 단말기의 다양한 프로그램 형태의 애플리케이션(즉, 앱(APP)이라고도 한다)의 수행이 가능하고 음성입력이 마이크가 설치된 이어폰이 사용되는 환경에서, 단순한 통화기능을 넘어 이어폰의 마이크를 통하여 입력되는 음향을 특정 목적에 맞게 처리하여, 이어폰을 통하여 출력하는 다양한 수요자의 요구를 충족시키는 기능의 애플리케이션 예컨대, 보청기 애플리케이션의 구현이 가능해진다. 이에 따라, 휴대형 단말기는 보청기의 역할을 수행하게 된다. On the other hand, in an environment where earphone equipped with a microphone can be operated and an application (also referred to as an app (APP)) of various programs of the portable terminal can be performed, It is possible to implement an application, for example, a hearing aid application, which satisfies the needs of various consumers who process the inputted sound according to a specific purpose and output through the earphone. Accordingly, the portable terminal plays a role of a hearing aid.

그러나, 상기 보청기 애플리케이션의 구현시 가장 핵심적인 사항으로, 4극 이어폰에 설치된 마이크의 성능 예컨대, 주파수 특성, 신호대 잡음비, 임펄스 특성, 감도, 임피던스, 과도응답(Transient Response) 등에 따라, 입력음향을 처리하여 출력하는 것이 중요하며, 나아가, 보청기 애플리케이션의 구현을 위하여, 감도(mV/Pa와 dB/μbar)가 통상의 4극 이어폰의 마이크보다 큰 전용 이어폰이 사용될 수 있다. 마이크 감도가 높다는 것은 일정한 음압에 대하여 마이크로폰의 출력전압이 높은 것을 의미한다.However, the most important point in implementing the above-mentioned hearing aid application is that the input sound is processed according to the performance of the microphone installed in the quadrupole earphone, such as the frequency characteristic, the signal-to-noise ratio, the impulse characteristic, the sensitivity, the impedance, Furthermore, for the implementation of a hearing aid application, a dedicated earphone whose sensitivity (mV / Pa and dB / μbar) is larger than that of a conventional quadrupole earphone can be used. A high microphone sensitivity means that the output voltage of the microphone is high for a certain sound pressure.

이러한 상황에서, 휴대형 단말기에서 이어폰의 장착을 인식하는 하기 문헌1 과 문헌2와 같은 다양한 기술이 공개되어 있으나, 이들은 이어폰의 장착을 인식하는 기술일 뿐이며, 이어폰 예컨데 4극 이어폰에 설치된 마이크의 성능 내지 입력특성에 따른 입력음향의 처리를 위하여, 특정 성능을 가지는 특정 이어폰을 식별하는 기술이 절실히 요청되고 있다.In this situation, various technologies such as Document 1 and Document 2 which recognize the mounting of the earphone in the portable terminal are disclosed, but they are technologies for recognizing the mounting of the earphone. For example, the performance of the microphone installed in the earphone, In order to process the input sound according to the input characteristics, a technique for identifying a specific earphone having a specific performance is desperately required.

[문헌1] 대한민국 공개특허공보 공개번호 10-2011-0064339 호(발명의 명칭: 휴대용 단말기에서 이어폰 장착을 인식하기 위한 장치 및 방법, 출원인: 삼성전자주식회사)[Patent Document 1] Korean Patent Laid-Open Publication No. 10-2011-0064339 (Title: Apparatus and method for recognizing earphone mounting in a portable terminal, applicant: Samsung Electronics Co., Ltd.) [문헌2] 대한민국 공개특허공보 공개번호 공개번호 10-2012-0121057 호(발명의 명칭: 휴대용 단말기에서 이어폰 인식 장치 및 방법, 출원인: 삼성전자주식회사)[Patent Document 2] Korean Unexamined Patent Publication No. 10-2012-0121057 (entitled " Earphone Recognition Device and Method in Portable Terminal, Applicant: Samsung Electronics Co., Ltd.)

따라서 본 발명은 별도의 추가 구성없이 통상의 휴대형 단말기에 사용되는 마이크가 장착된 이어폰을 이어폰 자체에서 발생하는 음향 예컨대, 통화전환버튼의 클릭음향의 음향패턴을 이용하여 휴대형 단말기용 특정 이어폰 인식하는 음향처리 시스템, 음향패턴을 이용한 휴대형 단말기용 이어폰 인식방법 및 이를 이용한 입력음향 처리 방법을 제공하는 것을 목적으로 한다. Accordingly, the present invention can be applied to an earphone equipped with a microphone, which is used in a conventional portable terminal, without any additional configuration, by using an acoustic pattern of a click sound of a call switch button, A processing system, an earphone recognition method for a portable terminal using an acoustic pattern, and an input sound processing method using the same.

본 발명은 별도의 추가 구성없이 단순한 방법으로 보청기용 이어폰을 이어폰 자체의 사용과정에서 발생하는 통화전환버튼의 클릭음향과 같은 음향의 음향패턴을 이용하여 보청기용 이어폰 인식하는 음향처리 시스템, 음향패턴을 이용한 휴대형 단말기용 이어폰 인식방법 및 이를 이용한 입력음향 처리 방법을 제공하는 것을 목적으로 한다.The present invention can be applied to a sound processing system for recognizing an earphone for a hearing aid by using an acoustic pattern of a sound such as a click sound of a call switch button generated in a process of using the earphone itself, And an input sound processing method using the same.

위와 같은 목적을 달성하기 위하여, 일 측면에서 본 발명은 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템으로, 상기 휴대형 단말기의 이어폰에 장착된 마이크를 통하여 입력되는 이어폰에 장착된 통화전환버튼의 클릭 음향을 오디오 처리부(140)를 통하여 입력받아 이를 기초로 미리 저장된 음향패턴/설정정보 DB(330)을 검색하여 특정 이어폰을 인식하며 인식된 특정 이어폰의 정보를 이어폰 검색정보로서 전송하는 특정 이어폰 인식 모듈(310); 상기 특정 이어폰 인식 모듈(320)로부터 이어폰의 검색정보를 수신하여 마이크를 통하여 입력되는 마이크의 입력음향을 상기 특정 이어폰의 검색정보와 연동하여 미리 설정된 음향처리 방법으로 처리하여 출력하는 음향처리 모듈(320);및 이어폰에 장착된 통화전환버튼의 클릭 음향의 음향패턴 정보를 특정 이어폰 정보와 연관하여 저장하는 음향패턴/설정정보DB를 포함하며, 상기 이어폰의 마이크 입력음향을 상기 인식된 특정 이어폰의 마이크의 입력특성에 따라 사전 설정된 방식으로 처리하여 출력하는 것을 특징으로 한다.In order to achieve the above object, in one aspect, the present invention provides a sound processing system for recognizing an earphone for a portable terminal using a sound pattern, the earphone comprising: A specific earphone for receiving the click sound of the specific earphone through the audio processor 140 and searching the previously stored sound pattern / setting information database 330 on the basis of the click sound, Recognition module 310; A sound processing module 320 for receiving the search information of the earphone from the specific earphone recognition module 320 and processing the input sound of the microphone input through the microphone in accordance with a predetermined sound processing method in conjunction with the search information of the specific earphone, And a sound pattern / setting information DB for storing the sound pattern information of the click sound of the call switching button mounted on the earphone in association with the specific earphone information, wherein the microphone input sound of the earphone is detected by the microphone And outputs the processed data in a predetermined manner.

바람직하게는 상기 음향패턴에는 입력음향의 파형, 진폭 및 주파수의 하나 이상의 정보가 포함된다.Preferably, the acoustic pattern includes at least one information of the waveform, amplitude and frequency of the input sound.

또한, 상기 마이크의 입력특성은 마이크의 주파수 특성, 신호대 잡음비, 임펄스 특성, 감도, 임피던스, 과도응답(Transient Response) 중 하나 이상의 정보가 포함하는 것이 바람직하다.The input characteristic of the microphone preferably includes at least one of a frequency characteristic of a microphone, a signal-to-noise ratio, an impulse characteristic, a sensitivity, an impedance, and a transient response.

아울러, 바람직하게는 상기 특정 이어폰 인식 모듈(310)은 오디오 처리부(140)로부터 A/D컨버팅된 통화전환버튼의 클릭 음향을 입력받아 디지털 사운드 프로세스 과정을 거쳐 음향패턴을 추출하는 패턴추출부(311); 음향패턴/설정정보DB(330)을 조회하여 상기 추출된 음향패턴과 동일한 음향패턴을 검색하여 이와 연관된 이어폰 정보를 이어폰 검색정보로서 추출하는 음향패턴 검색부(312); 상기 이어폰 검색정보를 음향처리모듈로 전송하는 이어폰 검색정보 전송부(313)을 포함한다. The specific earphone recognition module 310 preferably includes a pattern extracting unit 311 for receiving a click sound of the A / D converted call conversion button from the audio processing unit 140 and extracting a sound pattern through a digital sound process process ); A sound pattern search unit (312) for inquiring the sound pattern / setting information DB (330) to search for the same sound pattern as the extracted sound pattern and extracting the earphone information associated therewith as earphone search information; And an earphone search information transmitting unit 313 for transmitting the earphone search information to the sound processing module.

여기서, 상기 특정 이어폰 인식 모듈(310)은 상기 패턴추출부(311)로부터 추출된 음향패턴을 특정 이어폰의 이어폰 정보와 연관하여 상기 음향패턴/설정정보DB(330)에 저장하는 음향패턴 입력부(314)를 더 포함하는 것이 바람직하다.The specific earphone recognition module 310 includes a sound pattern input unit 314 for storing the sound pattern extracted from the pattern extraction unit 311 in association with the earphone information of the specific earphone and storing the sound pattern in the sound pattern / ). ≪ / RTI >

나아가 바람직하게는 상기 음향패턴/설정정보DB(330)에는 이어폰의 마이크의 입력특성에 따른 마이크 입력 음향의 처리 방식이 이어폰 정보와 연관되어 설정정보로서 저장되고, 음향처리 모듈(320)은 상기 특정 이어폰 인식 모듈(320)로부터 이어폰의 검색정보를 수신하는 이어폰 검색정보 수신부(321); 상기 이어폰 검색정보에 기초하여 상기 음향패턴/설정정보DB(330)로부터 특정 설정정보를 검색하여, 이에 따라, 마이크 입력음향의 처리 방식을 설정하는 마이크 입력음향 설정부(322); 상기 설정된 마이크 입력음향의 처리 방식에 따라, 마이크 입력음향을 처리하는 마이크 입력음향 처리부(323); 및 상기 처리된 마이크 입력음향을 출력하는 처리음향 출력부(324)를 포함한다.The sound processing module 320 may store the setting information of the microphone input sound according to the input characteristics of the microphone of the earphone in association with the earphone information, An earphone search information receiving unit 321 for receiving search information of the earphone from the earphone recognition module 320; A microphone input sound setting unit 322 for searching specific setting information from the sound pattern / setting information DB 330 based on the earphone search information and setting a processing method of a microphone input sound accordingly; A microphone input sound processing unit 323 for processing a microphone input sound according to the set processing method of the microphone input sound; And a processing sound output unit 324 for outputting the processed microphone input sound.

다른 측면에서 본 발명은 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법으로, 휴대형 단말기의 인터페이스에 마이크 및 통화전환버튼이 설치된 이어폰의 삽입을 인식하는 이어폰 삽입 인식 단계(S10); 상기 마이크를 활성화하며 상기 통화전환버튼의 클릭 음향을 상기 마이크를 통하여 입력받아 처리하여 상기 클릭 음향의 음향패턴을 추출하는 마이크 음향입력/처리 단계(S20); 상기 추출된 클릭 음향의 음향패턴에 기초하여 동일한 클릭 음향의 음향패턴을 가지는 특정 이어폰을 검색하여 삽입된 특정 이어폰을 인식하는 특정 이어폰 인식 단계(S30)을 포함하여 이루어진다.According to another aspect of the present invention, there is provided a method of recognizing an earphone for a portable terminal using an acoustic pattern, comprising: an earphone insert recognition step (S10) for recognizing insertion of an earphone in which an interface of a portable terminal is provided with a microphone and a call conversion button; A microphone sound input / processing step (S20) for activating the microphone and receiving a click sound of the call switching button through the microphone to extract an acoustic pattern of the click sound; And a specific earphone recognizing step (S30) for recognizing a specific earphone inserted by searching for a specific earphone having an acoustic pattern of the same click sound based on the extracted acoustic pattern of the click sound.

바람직하게는, 상기 이어폰의 마이크 입력음향을 상기 인식된 특정 이어폰에 따라 사전 설정된 방식으로 처리하여 출력하는 마이크 입력 음향 처리/출력 단계(S40)을 더 포함한다. Preferably, the method further includes a microphone input sound processing / output step (S40) for processing the microphone input sound of the earphone in a predetermined manner according to the recognized specific earphone and outputting it.

여기서, 마이크 입력 음향 처리/출력 단계(S40)는 상기 인식된 특정 이어폰의 마이크의 입력특성에 따라 마이크를 통하여 입력되는 음향을 처리하여 출력하는 것이 바람직하다. Here, it is preferable that the microphone input sound processing / output step S40 processes and outputs the sound input through the microphone according to the input characteristics of the recognized microphone of the specific earphone.

또한, 바람직하게는, 상기 마이크를 활성화하며 상기 통화전환버튼의 클릭 음향을 상기 마이크를 통하여 입력받아 처리하여 상기 클릭 음향의 음향패턴을 추출하여 사용된 이어폰의 정보와 연관하여 저장하는 패턴정보 입력 단계를 더 포함한다. Preferably, the microphone is activated and a click sound of the call switching button is input through the microphone to extract a sound pattern of the click sound, and a pattern information input step of storing the sound pattern of the click sound in association with the used earphone information .

나아가, 상기 음향패턴에는 입력음향의 파형, 진폭 및 주파수의 하나 이상의 정보가 포함되는 것이 바람직하다.Further, it is preferable that the acoustic pattern includes at least one information of the waveform, amplitude, and frequency of the input sound.

아울러, 상기 마이크의 입력특성은 마이크의 주파수 특성, 신호대 잡음비, 임펄스 특성, 감도, 임피던스, 과도응답(Transient Response) 중 하나 이상의 정보가 포함하는 것이 바람직하다.The input characteristics of the microphone preferably include at least one of a frequency characteristic of a microphone, a signal-to-noise ratio, an impulse characteristic, a sensitivity, an impedance, and a transient response.

또 다른 측면에서 본 발명은 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법을 이용하는 입력음향 처리 방법으로, 휴대형 단말기의 인터페이스에 마이크 및 통화전환버튼이 설치된 이어폰의 삽입을 인식하는 이어폰 삽입 인식 단계(S10); 상기 마이크를 활성화하며 상기 통화전환버튼의 클릭 음향을 상기 마이크를 통하여 입력받아 처리하여 상기 클릭 음향의 음향패턴을 추출하는 마이크 음향입력/처리 단계(S20); 상기 추출된 클릭 음향의 음향패턴에 기초하여 동일한 클릭 음향의 음향패턴을 가지는 특정 이어폰을 검색하여 삽입된 특정 이어폰을 인식하는 특정 이어폰 인식 단계(S30); 및 상기 이어폰의 마이크 입력음향을 상기 인식된 특정 이어폰에 따라 사전 설정된 방식으로 처리하여 출력하는 마이크 입력 음향 처리/출력 단계(S40)를 포함하여, 마이크 입력 음향 처리/출력 단계(S40)는 상기 인식된 특정 이어폰의 마이크의 감도에 따라 마이크를 통하여 입력되는 음향을 증폭 처리하여 출력하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided an input sound processing method using an earphone recognition method for a portable terminal using a sound pattern, the method comprising: an earphone insertion recognition step (S10) for recognizing insertion of an earphone, ); A microphone sound input / processing step (S20) for activating the microphone and receiving a click sound of the call switching button through the microphone to extract an acoustic pattern of the click sound; A specific earphone recognizing step (S30) for recognizing a specific earphone inserted by searching for a specific earphone having an acoustic pattern of the same click sound based on the extracted acoustic pattern of the click sound; And a microphone input sound processing / output step (S40) for processing the microphone input sound of the earphone in a predetermined manner according to the recognized specific earphone and outputting the microphone input sound processing / output step (S40) And amplifies the sound input through the microphone according to the sensitivity of the microphone of the specific earphone.

바람직하게는, 이어폰의 삽입 요청 메시지 및 통화전환버튼의 클릭의 메시지 중 하나 이상의 메시지를 출력하는 것이 바람직하다.Preferably, it is preferable to output at least one of a message of an earphone insert request message and a message of a click of a call conversation button.

여기서, 바람직하게는 상기 이어폰은 4극 이어폰이다. Preferably, the earphone is a four-pole earphone.

상술한 바와 같은 본 발명에 의하면, 추가 구성없이 통상의 휴대형 단말기에 사용되는 마이크가 장착된 이어폰을 이어폰 자체에서 발생하는 음향 예컨대, 통화전환버튼의 클릭음향의 음향패턴을 이용하여 휴대형 단말기용 특정 이어폰 인식하는 음향처리 시스템, 음향패턴을 이용한 휴대형 단말기용 이어폰 인식방법 및 이를 이용한 입력음향 처리 방법을 제공하는 것이 가능해진다.According to the present invention as described above, it is possible to provide an earphone equipped with a microphone used in a general portable terminal, without additional configuration, to a specific earphone for a portable terminal by using an acoustic pattern of a click sound of a call conversation button, It is possible to provide an earphone recognition method for a portable terminal using an acoustic pattern and an input sound processing method using the same.

별도의 추가 구성없이 단순한 방법으로 보청기용 이어폰을 이어폰 자체의 사용과정에서 발생하는 통화전환버튼의 클릭음향과 같은 음향의 음향패턴을 이용하여 보청기용 이어폰 인식하는 음향처리 시스템, 음향패턴을 이용한 휴대형 단말기용 이어폰 인식방법 및 이를 이용한 입력음향 처리 방법을 제공하여, 최적의 휴대형 단말기를 이용한 보청기 애플리케이션 내지 시스템의 구현이 가능해진다.A sound processing system for recognizing an earphone for a hearing aid using a sound pattern of a sound similar to a click sound of a call switch button generated in a process of using the earphone itself by a simple method without any additional configuration, It is possible to realize a hearing aid application or a system using an optimal portable terminal by providing an earphone recognizing method and an input sound processing method using the same.

도 1은 본 발명이 적용되는 휴대 단말기 및 4극 이어폰의 구성을 개략적으로 나타낸 도면.
도 2는 본 발명의 실시 예에 따른 휴대 단말기의 구성을 개략적으로 나타낸 블록도.
도 3은 본 발명의 일 실시예에 따른 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템의 구성 블록도이다.
도 4a는 본 발명의 일 실시예에 따른 특정 이어폰의 인식에 사용되는 다양한 이어폰의 통화전환버튼 클릭시 마이크 입력음향의 측정 결과의 캡쳐화면.
도 4b는 측정된 통화전환버튼 클릭시 마이크 입력음향의 확대도.
도 4c는 본 발명의 일 실시예에 따른 음향패턴 데이터의 추출 및 비교를 설명하기 위한 도면.
도 5은 본 발명의 휴대형 단말기용 이어폰 인식방법과 이를 이용한 입력음향 처리 방법의 흐름도.
도 6은 본 발명의 휴대형 단말기용 이어폰 인식방법과 이를 이용한 입력음향 처리 방법의 구현예의 세부 흐름도. BRIEF DESCRIPTION OF THE DRAWINGS Fig. 1 is a schematic view of a portable terminal and a quadrupole earphone to which the present invention is applied; Fig.
2 is a block diagram schematically illustrating the configuration of a mobile terminal according to an embodiment of the present invention;
3 is a block diagram of a sound processing system for recognizing an earphone for a portable terminal using an acoustic pattern according to an embodiment of the present invention.
FIG. 4A is a view illustrating a result of measurement of a microphone input sound when a call switching button is clicked on various earphones used to recognize a specific earphone according to an exemplary embodiment of the present invention. FIG.
4B is an enlarged view of the microphone input sound when the measured call switching button is clicked.
FIG. 4C is a diagram for explaining extraction and comparison of acoustic pattern data according to an embodiment of the present invention; FIG.
5 is a flowchart of an earphone recognition method for a portable terminal of the present invention and an input sound processing method using the same.
6 is a detailed flowchart of an embodiment of an earphone recognition method for a portable terminal and an input sound processing method using the same according to the present invention.

이하, 도면을 참조하여 본 발명을 실시하기 위한 구체적인 내용을 실시예에 기초하여 설명한다. Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. These embodiments are described in sufficient detail to enable those skilled in the art to practice the invention. It should be understood that the various embodiments of the present invention are different, but need not be mutually exclusive. For example, certain features, structures, and characteristics described herein may be implemented in other embodiments without departing from the spirit and scope of the invention in connection with an embodiment.

또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는 적절하게 설명된다면 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.It is also to be understood that the position or arrangement of the individual components within each disclosed embodiment may be varied without departing from the spirit and scope of the invention. The following detailed description is, therefore, not to be taken in a limiting sense, and the scope of the present invention is to be limited only by the appended claims, along with the full scope of equivalents to which the claims are entitled, if properly explained. In the drawings, like reference numerals refer to the same or similar functions throughout the several views.

<음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템>&Lt; Acoustic processing system recognizing earphone for portable terminal using acoustic pattern >

먼저, 본 발명의 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템의 실시예를 설명한다. First, an embodiment of a sound processing system for recognizing an earphone for a portable terminal using the acoustic pattern of the present invention will be described.

본 실시예에 있어서는 휴대형 단말기로서 통상의 스마트폰과 4극 이어폰이 사용된 경우로서, 본 발명의 휴대형 단말기의 예로서 스마트폰을 예시하고 있으나, 본 발명이 이에 한정되지는 않으며, 음향의 입출력 장치로서 이어(Ear)용 스피커를 통하여 음향의 출력이 가능하고, 마이크를 통하여 음향의 입력이 가능한 이어폰의 사용이 가능한 어떠한 전자 장치에도 본 발명이 적용될 수 있다. In this embodiment, a smart phone and a quadrupole earphone are used as a portable terminal, and a smart phone is exemplified as an example of the portable terminal of the present invention. However, the present invention is not limited to this, The present invention can be applied to any electronic device capable of outputting sound through a speaker for ear and capable of using an earphone capable of inputting sound through a microphone.

본 실시예의 경우 4극 이어폰을 이어폰의 예로서 예시하나 본 발명은 이에 한정되지 않으며, 통화전환버튼과 마이크를 포함하는 어떠한 형태의 리모콘부를 가지는 유선 방식이나 무선 접속 방식, 다양한 단자의 형태를 가지는 이어폰에도 본 발명이 적용될 수 있다. In the present embodiment, the four-pole earphone is illustrated as an example of an earphone, but the present invention is not limited thereto. The earphone may be a wired type or a wireless connection type having any type of remote control unit including a call conversion button and a microphone, The present invention can also be applied.

또한, 통화전환버튼 및 통화전환버튼 클릭시 마이크 입력음향을 사용하는 것으로 상세한 설명 및 청구항에 개시됨에도 불구하고, 이에 한정되지 않고, 이어폰의 리모콘에 장착될 수 있는 다양한 형태의 버튼 및 해당 버튼의 클릭시 마이크 입력음향을 사용하는 것에도 본 발명이 적용될 수 있다. In addition, although the present invention is described in detail in the detailed description and the claims that the microphone input sound is used when the call conversation button and the call conversation button are clicked, various types of buttons that can be mounted on the remote controller of the earphone, The present invention can also be applied to the use of a microphone input sound.

도 1은 본 발명이 적용되는 휴대 단말기 및 4극 이어폰의 구성을 개략적으로 나타낸 도면이다.FIG. 1 is a schematic view illustrating a configuration of a portable terminal and a quadrupole earphone to which the present invention is applied.

도 1을 참조하면, 본 발명이 적용되는 휴대 단말기는 휴대 단말기 본체(100)와 상기 휴대 단말기 본체(100)에 탈착 가능하며 통화전환버튼(211)과 마이크(212)를 포함하는 리모콘(210)부를 가지는 이어폰(200)을 포함하여 구성되며, 휴대 단말기 본체(100)에는 상기 이어폰이 삽입되어 작동 가능한 헤드셋 연결단자가 구비되어 있다.1, a portable terminal to which the present invention is applied includes a portable terminal body 100, a remote controller 210 detachable from the portable terminal body 100 and including a call switching button 211 and a microphone 212, And a headset connection terminal that is operable by inserting the earphone into the portable terminal main body 100. [

통상 리모콘(210)부를 가지는 이어폰(200)은 4극 이어폰의 형태가 사용되며, 4극 이어폰의 경우 TRS용 헤드셋 단자 표준인 TRRs(Total Resource Requirements)라는 표준을 따르고 있으며, 상기 표준은 OMTP 표준과 CITA 표준으로 나뉜다. OMTP 표준 커넥터(유럽식)는 Left-Right-Mic-Ground 배열이며, CITA 표준 커넥터(미국식)는 Left-Right-Ground-Mic 배열로 구성된다. 도1의 경우 플러그(220)는 CITA방식의 경우로 4극 (Tip-Ring-Ring-Sleeve)중 꼭지(Tip)부분은 Left, 첫번째 링은 Right, 두번째 링은 Ground, 마지막 Sleeve는 마이크 신호 단자이며, 플러그의 내부에는 다양한 단자가 구성되어 4극 또는 3극 이어폰을 식별하거나 및 착탈을 감지할 수 있고, 마이크 신호 단자와 GND 단자 사이에 연결되어 통화전환버튼(211)의 동작에 연동하는 스위치가 연결되어 통화전환버튼(211)의 동작을 인식하도록 구성될 수 있다. In general, the earphone 200 having a remote controller 210 uses a four-pole earphone. In the case of a four-pole earphone, a TRS (Total Resource Requirements) standard is used. CITA standard. The OMTP standard connector (European type) is a Left-Right-Mic-Ground array and the CITA standard connector (American type) is a Left-Right-Ground-Mic array. In the case of FIG. 1, the plug 220 is of the Tip-Ring-Ring-Sleeve type in the case of the CITA method. The tip portion is Left, the first ring is right, the second ring is ground, And a switch that is connected between the microphone signal terminal and the GND terminal and is linked to the operation of the call switching button 211, May be connected to recognize the operation of the call switch button 211. [

도 2는 본 발명의 실시예에 따른 이어폰의 마이크를 통하여 입력되는 음향패턴을 이용하여 이어폰의 인식이 가능한 휴대형 단말기의 구조를 나타내는 블록도이다. 2 is a block diagram illustrating a structure of a portable terminal capable of recognizing an earphone using an acoustic pattern input through a microphone of an earphone according to an embodiment of the present invention.

본 발명의 실시예에 따른 휴대형 단말기(100)는 제어부(110), 메모리(120), 인터페이스부(130), 오디오 처리부(140), RF 통신부(150), 디스플레이부(160) 등으로 구성된다. The portable terminal 100 according to the embodiment of the present invention includes a controller 110, a memory 120, an interface 130, an audio processor 140, an RF communication unit 150, a display unit 160, .

상기 제어부(110)는 휴대 단말기의 전반적인 동작 및 휴대 단말기의 내부 블록들 간 신호 내지 데이터의 흐름을 제어하는 기능을 수행하며, 휴대 단말기의 입출력 주변장치를 내부의 CPU(미도시) 및 메모리(120)와 연결시키며,다른 구성블록에 의한 메모리(120)으로의 액서스를 제어하여, 다양한 소프트웨어 프로그램 및/또는 메모리(120)에 저장되어 있는 어플리케이션을 실행하여 휴대 단말기(100)를 위한 여러 기능 및 부가 기능을 수행한다.The controller 110 controls the overall operation of the portable terminal and the flow of signals and data between the internal blocks of the portable terminal. The controller 110 includes an internal CPU (not shown) and a memory 120 And controls access to the memory 120 by other constituent blocks to execute various software programs and / or applications stored in the memory 120 to perform various functions and functions for the mobile terminal 100 Function.

특히, 본 발명에서의 제어부(110)는 상기 인터페이스부(130)에 접속되는 이어폰(200)의 삽입을 인식하고, 통화전환키(211)의 동작을 인식하여, 메모리(120)에 어플리케이션 형태로 저장되어 실행되는 본 발명의 음향 처리 시스템에 이를 통지하도록 구현될 수 있다.Particularly, the control unit 110 of the present invention recognizes the insertion of the earphone 200 connected to the interface unit 130, recognizes the operation of the call switching key 211, And notify it to the sound processing system of the present invention which is stored and executed.

메모리(120)에는 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템이 어플리케이션 형태로 저장되며, 본 발명의 음향패턴을 이용한 휴대형 단말기용 이어폰 인식방법 및 이를 이용한 입력음향 처리 방법을 수행하는 시스템이 저장된 다수의 어플리케이션의 하나로 저장되며, 본 발명의 어플리케이션 형태의 입력음향 처리 방법을 수행하는 시스템은 특정 이어폰 인식모듈(310), 음향처리모듈(320), 및 음향패턴/설정정보DB(330)을 기본 구성으로 포함되며, 제어부(110)의 메모리 제어명령에 따라 호출되어 스마트 폰에서 수행되며, 제어부로부터 이어폰(200)의 삽입 및 통화전환버튼(211)의 동작을 통지받으며, 마이크로 입력되는 음향을 전송받아 음향처리 한다. The memory 120 stores a sound processing system for recognizing an earphone for a portable terminal using an acoustic pattern in the form of an application. The earphone recognition method for a portable terminal using the acoustic pattern of the present invention and the system for performing an input sound processing method using the same A sound processing module 320 and a sound pattern / setting information DB 330. The system for performing the input sound processing method according to the present invention includes a specific earphone recognition module 310, a sound processing module 320, And is called in accordance with a memory control command of the controller 110 to be executed in the smartphone and is informed of the operation of the insertion of the earphone 200 and the operation of the call switch button 211 from the control unit, And performs sound processing.

인터페이스부(130)는 이어폰(200)이 휴대 단말기(100)에 접속하여 오디오 신호를 송수신할 수 있도록 하는 접속 수단을 제공하여, 상기 이어폰(200)의 마이크(MIC)에서 전달되는 음향 신호를 상기 제어부(110)로 전송하기 위한 경로를 제공하며, 휴대 단말기(100)에서 전송하는 음향신호를 상기 이어폰(200)에 전송하는 전송하는 경로를 제공한다. 이어폰의 삽입이 가능한 헤드셋 연결단자(도시하지 않음)를 포함한다. 인터페이스부(130)에는 이어폰(200)이 삽입됨을 감지하여, 특정 전기 신호를 제어부로 전송하는 회로 및 단자가 설치된다.The interface unit 130 provides connection means for allowing the earphone 200 to connect to the portable terminal 100 to transmit and receive an audio signal so that the sound signal transmitted from the microphone (MIC) And provides a path for transmitting the sound signal transmitted from the portable terminal 100 to the earphone 200. And a headset connection terminal (not shown) into which an earphone can be inserted. The interface unit 130 is provided with a circuit and a terminal for detecting that the earphone 200 is inserted and transmitting a specific electric signal to the controller.

오디오 처리부(140)는 음향 데이터를 상기 제어부(110)의 제어에 상응하여 스피커(SPK)를 통해 가청음으로 변환하여 출력하고, 마이크(MIC)로부터 수신되는 음성 등의 오디오 신호를 A/D컨버팅하여 디지털 데이터화 하여 제어부(110)로 전달하는 기능을 수행하며, 제어부로부터 출력되는 음향을 처리하여, 인터페이스부(130)을 통하여 이어폰 등 외부출력기기로 출력한다. The audio processing unit 140 converts the audio data into audible sound through the speaker SPK according to the control of the controller 110 and outputs the audio data to the audio processing unit 140. The audio processing unit 140 performs A / D conversion of the audio signal, And outputs the digital data to an external output device such as an earphone through the interface unit 130. The control unit 110 processes the sound output from the control unit 110,

RF 통신부(150)는 전기 신호를 전자파로 또는 그 반대로 변환하며 이 전자파를 통하여 통신 네트워크 및 다른 통신 장치와 통신하기 위한 안테나 시스템, RF 트랜시버, 하나 이상의 증폭기, 튜너, 하나 이상의 오실레이터, 디지털 신호 처리기, CODEC 칩셋, 가입자 식별 모듈(subscriber identity module, SIM) 카드, 메모리 등을 포함하여 다양한 무선 네트워크를 통하여 다양한 방식으로 무선통신이 가능하도록 한다.The RF communication unit 150 includes an antenna system for converting electrical signals to electromagnetic waves and vice versa and for communicating with the communication network and other communication devices through the electromagnetic waves, an RF transceiver, at least one amplifier, a tuner, at least one oscillator, A CODEC chipset, a subscriber identity module (SIM) card, a memory, and the like through various wireless networks.

도 3은 본 발명의 일 실시예에 따른 휴대형 단말기용 어플리케이션의 형태로 구현된 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템의 구성 블록도이다. 3 is a block diagram of an acoustic processing system for recognizing an earphone for a portable terminal using an acoustic pattern implemented in the form of an application for a portable terminal according to an embodiment of the present invention.

도 3을 참조하면, 본 발명의 휴대형 단말기용 이어폰 인식하는 음향처리 시스템은 특정 이어폰 인식모듈(310), 음향처리모듈(320), 및 음향패턴/설정정보DB(330)을 기본 구성으로 포함하여, 이어폰의 마이크 입력음향을 인식된 특정 이어폰의 마이크의 입력특성에 따라 사전 설정된 방식으로 음향 처리하여 이어폰으로 출력하는 시스템으로 휴대형 단말기를 이용한 보청기용으로 사용될 수 있다.Referring to FIG. 3, the sound processing system for recognizing an earphone for a portable terminal according to the present invention includes a specific earphone recognition module 310, a sound processing module 320, and a sound pattern / setting information DB 330 A system for acoustically processing a microphone input sound of an earphone in accordance with an input characteristic of a recognized earphone of a specific earphone, and outputting the sound to an earphone, can be used for a hearing aid using a portable terminal.

특정 이어폰 인식 모듈(310)은 휴대형 단말기의 이어폰에 장착된 마이크를 통하여 입력되는 이어폰에 장착된 통화전환버튼의 클릭 음향을 오디오 처리부(140)를 통하여 입력받아 이를 기초로 미리 저장된 음향패턴/설정정보DB(330)를 검색하여 특정 이어폰을 인식하며 인식된 특정 이어폰의 정보를 이어폰 검색정보로서 전송하도록 구성된다.The specific earphone recognition module 310 receives the click sound of the call switch button mounted on the earphone input through the microphone mounted on the earphone of the portable terminal through the audio processor 140, Searches the DB 330 to recognize a specific earphone, and transmits information of the recognized earphone as earphone search information.

특정 이어폰 인식모듈(310)은 패턴추출부(311), 음향패턴 검색부(312) 및 이어폰 검색정보 전송부(313)으로 구성되고, 음향패턴 입력부(314)를 포함하여 구성될 수 있다.The specific earphone recognition module 310 may include a pattern extraction unit 311, a sound pattern search unit 312 and an earphone search information transmission unit 313 and may include an acoustic pattern input unit 314.

4극 이어폰의 통화전환버튼의 클릭에 따라, 마이크를 통하여 입력되는 음향을 오디오 처리부(140)에서 A/D컨버팅하여 제어부(110)를 통하여 특정 이어폰 인식모듈(310)에 전송되며, 패턴추출부(311)는 이를 수신하여, 입력된 디지털 음향을 디지털 음향 처리하여 음향패턴을 추출하게 된다.The A / D converter converts the sound input through the microphone to the specific earphone recognition module 310 through the control unit 110 according to the click of the call switch button of the quadrupole earphone, (311) receives the digital sound and digitally processes the inputted digital sound to extract a sound pattern.

이 경우, A/D컨버팅된 PCM 데이터를 그대로 사용하거나, 연속되는 PCM 데이터의 증감형태로 가공하여 가공된 데이터를 음향패턴 데이터로 사용할 수도 있으며, A/D컨버팅된 데이터를 FFT 및/또는 Wavelet 변환 등 다양한 공지의 디지털음향처리방법이 하나 이상 사용하여 음향패턴 데이터로 사용하여 그 정밀도를 높일 수도 있다. 예를 들어, 디지털로 변환된 음향을 FFT 변환이나 Wavelet 변환 등 사용하여 불필요한 주파수 대역을 필터링하여 제거하고, 각각의 정보 추출단위마다 필요한 형태로 입력음향 신호를 가공하여, 주파수 변환된 음향 정보를 주파수 및/또는 음압별로 변환하여, 패턴정보를 주파수 및/또는 음압의 데이터로 추출하는 방식으로 수행될 수 있다.In this case, the processed data may be used as acoustic pattern data by using the A / D converted PCM data as it is or processed in the form of increasing / decreasing sequential PCM data. The A / D converted data may be subjected to FFT and / May be used as one or more acoustic pattern data to increase the accuracy thereof. For example, unnecessary frequency bands are filtered and removed using FFT or Wavelet transform, and the input sound signals are processed in necessary form for each information extraction unit to convert the frequency-converted sound information to frequency And / or the sound pressure, and extracting pattern information as frequency and / or sound pressure data.

상기 음향패턴 내지 음향패턴 데이터에는 입력음향의 파형, 진폭 및 주파수의 하나 이상의 정보가 포함되며, 이어폰의 통화전환버튼의 클릭에 따라 마이크를 통하여 입력되는 음향의 진폭이 큰 차이를 갖는 경우, 즉, 통화전환버튼의 클릭음의 크기 또는 마이크의 감도가 사용가능한 4극 이어폰마다 큰 차이를 가지는 경우 진폭 정보만을 추출하거나 가공된 데이터로 음향패턴정보로서 사용할 수 있다.The acoustic pattern or the acoustic pattern data includes at least one of the waveform, the amplitude, and the frequency of the input sound. When the amplitude of the sound input through the microphone is large due to the click of the call conversation button of the earphone, If the magnitude of the click sound of the call switching button or the sensitivity of the microphone has a large difference between the available four-pole earphones, only the amplitude information can be extracted or used as the acoustic pattern information as the processed data.

이러한 음향패턴 데이터는 패턴추출부(311)로부터 추출되어 음향패턴/설정정보DB(330)에 이어폰 정보와 연관되어 미리 저장될 수 있으며, 상기 음향패턴/설정정보DB(330)에는 이어폰의 마이크의 입력특성에 따른 마이크 입력 음향의 처리 방식이 이어폰 정보와 연관되어 설정정보로서 저장된다.The sound pattern data may be extracted from the pattern extraction unit 311 and stored in advance in association with the earphone information in the sound pattern / setting information DB 330. The sound pattern / setting information DB 330 may include a microphone The processing method of the microphone input sound according to the input characteristics is stored as the setting information in association with the earphone information.

음향패턴 검색부(312)는 패턴추출부(311)로부터 추출된 음향패턴 데이터를 전송받아 음향패턴/설정정보DB(330)를 검색하여 추출된 음향패턴 데이터와 동일한 음향패턴을 검색하여 이와 연관된 특정이어폰을 검색한다. 검색결과는 특정 이어폰의 식별번호형태로 이어폰 검색정보 전송부(313)로 출력된다.The acoustic pattern searching unit 312 receives the acoustic pattern data extracted from the pattern extracting unit 311 and searches the acoustic pattern / setting information DB 330 to search for the same acoustic pattern as the extracted acoustic pattern data, Search for earphones. The search result is output to the earphone search information transmitting unit 313 in the form of an identification number of a specific earphone.

나아가, 상기 특정 이어폰 인식 모듈(310)은 상기 패턴추출부(311)로부터 추출된 음향패턴을 특정 이어폰의 이어폰 정보와 연관하여 상기 음향패턴/설정정보DB(330)에 저장하는 음향패턴 입력부(314)를 포함하여, 최초 음향패턴을 특정 이어폰과 연관하여 상기 음향패턴/설정정보DB(330)에 사용자가 사용하는 이어폰의 음향패턴을 저장할 수 있도록 구성될 수 있으며, 실시예에 따라서는 시스템 즉, 어플리케이션의 관리자가 사전입력하여 제공할 수도 있다.The specific earphone recognition module 310 further includes a sound pattern input unit 314 that stores the sound pattern extracted from the pattern extraction unit 311 in association with earphone information of a specific earphone and stores the sound pattern in the sound pattern / May be configured to store the acoustic pattern of the earphone used by the user in the acoustic pattern / setting information DB 330 by associating the initial acoustic pattern with a specific earphone, and in some embodiments, Or may be provided by an administrator of the application in advance.

이어폰 검색정보 전송부(313)은 검색결과인 특정 이어폰의 식별번호를 음향처리모듈(320)로 전송한다.The earphone search information transmitting unit 313 transmits the identification number of the specific earphone as a search result to the sound processing module 320. [

음향처리모듈(320)은 상기 특정 이어폰 인식 모듈(310)로부터 이어폰의 검색정보를 수신하여 마이크를 통하여 입력되는 마이크의 입력음향을 상기 특정 이어폰의 검색정보와 연동하여 미리 설정된 음향처리 방법으로 처리하여 출력한다.The sound processing module 320 receives the search information of the earphone from the specific earphone recognition module 310 and processes the input sound of the microphone input through the microphone in accordance with a predetermined sound processing method in association with the search information of the specific earphone Output.

음향처리모듈(320)은 이어폰 검색정보 수신부(321), 마이크 입력음향처리 설정부(322), 마이크 입력음향 처리부(323) 및 처리음향출력부(324)로 구성된다. The sound processing module 320 includes an earphone search information receiving unit 321, a microphone input sound processing setting unit 322, a microphone input sound processing unit 323, and a process sound output unit 324.

이어폰 검색정보 수신부(321)는 상기 특정 이어폰 인식 모듈(320)로부터 이어폰의 검색정보를 수신하며, 구체적으로는 이어폰 검색정보 전송부(313)로부터 검색된 특정 이어폰의 식별변호를 전송받아, 마이크 입력음향 설정부(322)로 전송한다.The earphone search information receiving unit 321 receives the search information of the earphone from the specific earphone recognition module 320. Specifically, the earphone search information receiving unit 321 receives the identification code of the specific earphone retrieved from the earphone search information transmitting unit 313, To the setting unit 322.

마이크 입력음향 설정부(322)는 상기 이어폰 검색정보인 이어폰의 식별번호에 기초하여 상기 음향패턴/설정정보DB(330)로부터 이와 연관된 설정정보를 검색하여, 이에 따라, 마이크 입력음향의 처리방식을 설정한다.The microphone input sound setting unit 322 searches the sound pattern / setting information DB 330 for the related setting information based on the identification number of the earphone, which is the earphone search information, Setting.

마이크 입력음향 처리부(323)는 상기 설정된 마이크 입력음향의 처리 방식에 따라, 마이크 입력음향을 처리하여, 처리음향 출력부(324)로 전달한다. The microphone input sound processing unit 323 processes the microphone input sound according to the set processing method of the microphone input sound and transmits the processed sound to the processing sound output unit 324. [

상기 설정된 마이크 입력음향의 처리방식의 결정에는 인식된 특정 이어폰의 마이크의 입력특성이 고려된다. 상기 마이크의 입력특성은 마이크의 주파수 특성, 신호대 잡음비, 임펄스 특성, 감도, 임피던스, 과도응답(Transient Response) 중 하나 이상을 포함하며, 실시예에 따라서는, 인식된 특정 이어폰의 출력특성이 고려될 수 있다.The input characteristics of the recognized microphone of the specific earphone are taken into consideration in the determination of the processing method of the set microphone input sound. The input characteristics of the microphone include at least one of a frequency characteristic of a microphone, a signal-to-noise ratio, an impulse characteristic, a sensitivity, an impedance, and a transient response. In some embodiments, .

도 4a는 본 발명의 일 실시예에 따른 특정 이어폰의 인식에 사용되는 다양한 입력음향의 측정 결과의 캡쳐화면이고, 도 4b는 측정된 다양한 입력음향의 확대도이다. 도 4a 및 도 4b의 경우 현재 시중에 있는 4종류의 일반 4극 이어폰( ①, ②, ③, ⑤ )과 보청기 전용 4극 이어폰 (⑤)의 통화전환버튼의 클릭에 의한 해당 이어폰의 마이크입력음향의 측정 결과의 측정기 화면표시를 캡쳐한 것이다.FIG. 4A is a view illustrating a measurement result of various input sounds used for recognizing a specific earphone according to an embodiment of the present invention, and FIG. 4B is an enlarged view of various measured input sounds. 4A and 4B, the microphone input sound of the corresponding earphone by clicking the call switching button of the four types of general four-pole earphones (①, ②, ③, ⑤) currently in use and the quadrupole earphone (⑤) Of the measurement result of the measuring device.

보청기 전용 4극 이어폰 (⑤)의 경우, 통상 4극 이어폰 보다 감도가 높은 마이크가 장착되므로, 클릭 시 입력음향의 측정된 진폭이 일반 4극 이어폰( ①, ②, ③, ⑤ )보다 크게 나타난다. In case of a 4-pole earphone (⑤) for hearing aids, the measured amplitude of the input sound is larger than that of a regular 4-pole earphone (①, ②, ③, ⑤).

각 입력음향의 파형, 진폭 및 주파수에 있어서 차이를 보일 뿐만 아니라, 도 4b에서와 같이, 통화전환버튼의 클릭에 따라 통화전환버튼을 누를때(PUSH) 및 놓을때(RELEASE) 구분되는 입력음향이 발생하게 되며, 누를때(PUSH) 및 놓을때(RELEASE)의 입력음향 각각을 처리하여 음향패턴으로 사용할 수도 있고, 경우에 따라서는 둘을 함께 처리하여 음향패턴으로 사용할 수도 있다. Not only the difference in the waveforms, amplitudes, and frequencies of the respective input sounds, but also the input sound that is distinguished when the call switching button is pressed (PUSH) and when the call switching is released (RELEASE) And the input sound of the pushing (PUSH) and the sounding of the release (RELEASE) may be processed to be used as an acoustic pattern. In some cases, the input sound may be used as an acoustic pattern.

도 4c는 본 발명의 일 실시예에 따른 음향패턴 데이터의 추출 및 비교를 설명하기 위한 도면이다. 도 4c를 참조하면, 실제 음향패턴 데이터의 생성 및 검색의 구현에 있어서, 도 4a에서와 같이 각각 구분되는 통화전환버튼의 클릭에 마이크를 통하여 입력되는 음향의 음향패턴의 추출에 있어서, 도 4c (a)와 같이 통화전환버튼의 클릭 음의 PCM 데이터를 그대로 패턴화하여 음향패턴정보로 저장하여 입력되는 통화전환버튼의 오디오 처리부(140)에서 A/D컨버팅된 PCM 데이터와 비교하는 방식으로 구현될 수 있으며, 도 4c (b)와 같이, 연속되는 PCM 데이터의 증감을 별도의 데이터로 가공하여 이를 음향패턴 데이터로 사용함으로써 실제로 입력음향이 발생하거나 변경되는 구간을 중심으로 음향패턴을 분석/검색하여 특정 이어폰을 식별할 수 있도록 구현할 수 있다. 4C is a diagram for explaining extraction and comparison of acoustic pattern data according to an embodiment of the present invention. Referring to FIG. 4C, in the actual sound pattern data creation and retrieval, in extracting the acoustic pattern of the sound input through the microphone at the click of the call conversion button, as shown in FIG. 4A, the PCM data of the click sound of the call switch button is directly patterned and stored as the sound pattern information and is compared with the A / D converted PCM data in the audio processing unit 140 of the incoming call switch button As shown in FIG. 4C (b), the increase / decrease of the continuous PCM data is processed as separate data and used as the acoustic pattern data, thereby analyzing / searching the acoustic pattern around the section where the input sound is actually generated or changed It can be implemented so as to identify a specific earphone.

또한, PCM 데이터를 일정시간 캡쳐하여 FFT를 이용하여 주파수 대역을 분석함으로써 특정 패턴의 주파수대 확인과 이들간의 간격 정보 내지 특정 음향의 딜레이 정보 등을 음향패턴/설정정보DB(330)에 특정 이어폰과 연관하여 저장된 음향패턴 데이터와 비교연산함으로써 특정 이어폰을 식별할 수 있다.Also, by capturing the PCM data for a predetermined time and analyzing the frequency band using the FFT, it is possible to identify the frequency band of the specific pattern, and the interval information and the delay information of the specific sound to the acoustic pattern / setting information DB 330 And comparing it with stored acoustic pattern data, thereby identifying a specific earphone.

통상은 통화전환버튼의 클릭에 따라 사전 설정된 바에 따라 패턴데이터를 추출하기 전 도4c (c)와 PCM 데이터를 입력받으면, 이를 통화전환버튼의 클릭으로 인식하여, 입력된 PCM 데이터로부터 음향패턴 데이터를 추출하여 저장된 음향패턴 데이터와 비교하는 과정으로 수행되며, 노이즈 제거를 위한 부가 과정을 포함할 수도 있다. 노이즈 제거를 위한 부가 과정으로 PCM 데이터를 입력받으면 이를 PCM 데이터의 AND 연산자 처이를 통하여 노이즈를 제거된 PCM 데이터가 추출된다.4C and the PCM data before extracting the pattern data according to a predetermined set according to the click of the call conversion button, the PCM data is recognized as a click of the call conversion button and the sound pattern data is extracted from the input PCM data Extracting and comparing the extracted acoustic pattern data with the stored acoustic pattern data, and may include an adding process for removing noise. When the PCM data is input as an additive process for removing noise, PCM data from which noises are removed is extracted through the AND operator of the PCM data.

도4c (a)는 클릭음향에 따른 실제 PCM 데이터의 예시로서, PCM 데이터를 그대로 특정 이어폰의 음향패턴 데이터로 음향패턴/설정정보DB(330) 저장하여 비교하는 경우에는 A/D컨버팅된 PCM 데이터는 FFT 등 별도의 디지털 음향처리를 수행하지 않고 미리 저장된 음향패턴 데이터와 비교한다. 이때 진폭의 차이는 있으나 실제 데이터 형태는 그 차이가 작을 수 있으므로, 대략 80% 정도 일치하는 경우를 동일 이어폰으로 검색하는 것이 바람직하다.4C illustrates an example of actual PCM data according to a click sound. In the case where PCM data is directly stored in the acoustic pattern / setting information DB 330 as acoustic pattern data of a specific earphone, the A / D converted PCM data Is compared with previously stored sound pattern data without performing separate digital sound processing such as FFT. At this time, although there is a difference in amplitude, since the difference between the actual data types may be small, it is preferable to search for the case where the same data is about 80% with the same earphone.

도4c (b)는 실제 PCM 데이터의 증감형태로 본 수치로서 PCM 데이터의 음향패턴/설정정보DB(330) 저장 및 검색시 증감수치를 이용하여 저장 및 검색함으로써 음향의 변동이 있는 특정 구간을 중점적으로 비교하는 것이 바람직하다.FIG. 4C shows a specific interval in which the sound is varied by storing and retrieving the PCM data by using the increase / decrease value when storing and retrieving the acoustic pattern / setting information DB 330 of the PCM data in the increasing / .

또한, 도4c (c)에서와 같이 클릭음향이 경우 버튼의 물리적 특성에 따라 입력음향간 특정 간격 예컨데, 도4c (c)의 경우 0.028sec 을 가지는 경우 클릭에 따른 특정 음향 사이의 간격을 기초로 음향패턴 데이터 생성하여 특정 이어폰의 검색에 사용할 수도 있다. Further, as shown in FIG. 4C (c), when the click sound has a specific interval between input sounds, for example, 0.028 sec in FIG. 4C, depending on the physical characteristics of the button, Acoustic pattern data can also be generated and used to search for specific earphones.

<음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법 및 이를 이용한 음향 처리방법>&Lt; Recognition method of earphone for portable terminal using acoustic pattern and sound processing method using the same &

도 5은 본 발명의 휴대형 단말기용 이어폰 인식방법과 이를 이용한 입력음향 처리 방법의 흐름도이며, 도 6은 본 발명의 휴대형 단말기용 이어폰 인식방법과 이를 이용한 입력음향 처리 방법의 구현예의 세부 흐름도이다. FIG. 5 is a flowchart of an earphone recognition method for a portable terminal of the present invention and an input sound processing method using the method. FIG. 6 is a detailed flowchart of an earphone recognition method and an input sound processing method using the same.

본 발명의 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법 및 이를 이용한 음향 처리방법은 상기 도 2 및 도 3을 참조하여 설명된 휴대형 단말기용 이어폰 인식하는 음향처리 시스템에 의하여 수행된다. 이하 중복되지 않는 범위에서 설명한다.A method of recognizing an earphone for a portable terminal using the acoustic pattern and an acoustic processing method using the acoustic pattern of the present invention is performed by the acoustic processing system for recognizing an earphone for a portable terminal described with reference to FIGS. The description will be made in the range not overlapping with the following description.

도 5를 참조하면,본 발명의 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법은 휴대형 단말기의 인터페이스에 마이크 및 통화전환버튼이 설치된 이어폰의 삽입을 인식하는 이어폰 삽입 인식 단계(S10), 상기 마이크를 활성화하며 상기 통화전환버튼의 클릭 음향을 상기 마이크를 통하여 입력받아 처리하여 상기 클릭 음향의 음향패턴을 추출하는 마이크 음향입력/처리 단계(S20), 및 상기 추출된 클릭 음향의 음향패턴에 기초하여 동일한 클릭 음향의 음향패턴을 가지는 특정 이어폰을 검색하여 삽입된 특정 이어폰을 인식하는 특정 이어폰 인식 단계(S30)을 포함하여 수행된다.Referring to FIG. 5, a method for recognizing an earphone for a portable terminal using an acoustic pattern according to the present invention includes an earphone insert recognition step (S10) for recognizing insertion of an earphone provided with a microphone and a call conversion button in an interface of the portable terminal, A microphone sound input / processing step (S20) for activating and processing a click sound of the call switching button through the microphone to extract an acoustic pattern of the click sound, and a microphone sound input / And a specific earphone recognizing step (S30) for recognizing a specific earphone inserted by searching for a specific earphone having a sound pattern of a click sound.

본 발명의 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법에 있어, 상기 이어폰의 마이크 입력음향을 상기 인식된 특정 이어폰에 따라 사전 설정된 방식으로 처리하여 출력하는 마이크 입력 음향 처리/출력 단계(S40)을 더 포함하여 수행될 수 있으며, 마이크 입력 음향 처리/출력 단계(S40)를 더 포함하여 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법을 이용한 음향 처리방법으로 정의된다.In the method for recognizing an earphone for a portable terminal using the acoustic pattern of the present invention, a microphone input sound processing / output step S40 for processing the microphone input sound of the earphone in a predetermined manner according to the recognized specific earphone and outputting And further includes a microphone input sound processing / output step (S40), which is defined as a sound processing method using a recognition method of an earphone for a portable terminal using a sound pattern.

이어폰 삽입 인식 단계(S10)는 이어폰(200)이 삽입됨을 감지하여 특정 전기 신호를 제어부로 전송하는 회로 및 단자가 설치된 인터페이스부(130)로부터 제어부(110)가 이어폰(200)의 삽입을 감지한 신호를 수신하여 이를 본 발명의 일실시예의 어플리케이션(300)에 전송하는 방식으로 수행되어, 휴대형 단말기의 인터페이스에 마이크 및 통화전환버튼이 설치된 이어폰의 삽입을 인식하게 된다. 도 6에서와 같이, 본 발명의 일실시예의 어플리케이션(300)이 실행되면, 4극 이어폰 삽입 메시지를 사용자에게 디스플레이부(160) 또는 오디오처리부(140)을 통하여 시각적 또는 청각적으로 출력하고, 사용자가 4극 이어폰 삽입하도록 하는 과정을 포함하여 수행될 수 있다. The earphone inserting step S10 recognizes that the earphone 200 is inserted and detects the insertion of the earphone 200 from the interface 130 in which a circuit for transmitting a specific electric signal to the controller and a terminal is installed, And transmits the received signal to the application 300 of the embodiment of the present invention to recognize the insertion of the earphone in which the microphone and the call conversion button are installed in the interface of the portable terminal. 6, when the application 300 of the embodiment of the present invention is executed, the 4-pole earphone insertion message is visually or audibly output to the user through the display unit 160 or the audio processor 140, So as to insert a 4-pole earphone.

마이크 음향입력/처리 단계(S20)는 특정 이어폰 인식 모듈(310)에 의하여 수행되며, 상기 마이크를 활성화하며 상기 통화전환버튼의 클릭 음향을 상기 마이크를 통하여 입력받아 처리하여 상기 클릭 음향의 음향패턴을 추출하며, 도 6에서와 같이, 어플리케이션에서 제어부(110)으로 마이크의 활성화를 요청하고, 통화전환버튼의 클릭하도록 하는 버튼클릭 메시지를 디스플레이부(160) 또는 오디오처리부(140)을 통하여 시각적 또는 청각적으로 출력하는 과정을 포함하여 수행될 수 있다. 해당 통화전환버튼의 클릭으로 음향패턴의 추출 및 인식에 성공하지 못한 경우에는 통화전환버튼의 클릭하도록 하는 과정을 수행할 수 있으며, 이 과정은 음향패턴의 추출 및 인식에 성공시 또는 미리 설정된 횟수까지 반복적으로 수행될 수 있다.The microphone sound input / processing step S20 is performed by a specific earphone recognition module 310, activates the microphone, inputs a click sound of the call switching button through the microphone, processes the sound sound of the click sound, 6, the application requests the activation of the microphone from the control unit 110 and displays a button click message for clicking the call conversation button through the display unit 160 or the audio processing unit 140, And then outputting the resultant signal. If the extraction and recognition of the acoustic pattern is unsuccessful by clicking the corresponding call conversation button, the process of making the call conversation button click may be performed. In this case, when the extraction and recognition of the acoustic pattern is succeeded or until a predetermined number of times Can be repeatedly performed.

상기 음향패턴에는 입력음향의 파형, 진폭 및 주파수의 하나 이상이 포함된다. 이어폰의 통화전환버튼의 클릭에 따라 마이크를 통하여 입력되는 음향의 진폭이 큰 차이를 갖는 경우, 즉, 통화전환버튼의 클릭음의 크기 또는 마이크의 감도가 사용가능한 4극 이어폰마다 큰 차이를 가지는 경우 진폭 정보만을 추출하여 음향패턴정보로서 사용할 수 있다. The acoustic pattern includes at least one of the waveform, amplitude, and frequency of the input sound. When the magnitude of the sound input through the microphone has a large difference according to the click of the call conversation button of the earphone, that is, the magnitude of the click sound of the call conversation button or the sensitivity of the microphone has a large difference Only amplitude information can be extracted and used as acoustic pattern information.

특정 이어폰 인식 단계(S30)는 상기 추출된 클릭 음향의 음향패턴에 기초하여 동일한 클릭 음향의 음향패턴을 가지는 특정 이어폰을 검색하여 삽입된 특정 이어폰을 인식하는 과정으로, 특정 이어폰 인식모듈(310) 구체적으로는 음향패턴 검색부(312)에서 음향패턴/설정정보DB(330)에 저장된 음향패턴 중 동일한 음향패턴을 검색하고, 이와 연관된 특정 이어폰을 식별하게 되며, 식별된 이어폰에 관하여 할당된 식별번호 등을 출력한다. 도 6에서와 같이 검색에 성공하지 못하는 경우 해당 4극 이어폰의 인식불가 또는 타 이어폰의 재삽입 메시기를 출력하고, 이어폰 삽입 인식 단계(S10) 내지 특정 이어폰 인식 단계(S30)를 재 수행하도록 구현될 수 있다.The specific earphone recognizing step S30 is a process of recognizing a specific earphone inserted by searching for a specific earphone having a sound pattern of the same click sound based on the extracted acoustic pattern of the click sound, The acoustic pattern searching unit 312 searches for the same acoustic pattern among the acoustic patterns stored in the acoustic pattern / setting information DB 330, identifies the specific earphone associated therewith, and identifies the identified earphone . If the search is unsuccessful as shown in FIG. 6, the 4-pole earphone can not be recognized or the re-insertion message of the earphone is output and the earphone insertion recognition step (S10) to the specific earphone recognition step (S30) .

마이크 음향입력/처리 단계(S20) 및 특정 이어폰 인식 단계(S30)에 있어, 음향패턴 내지 음향패턴 데이터로 통화전환버튼 클릭에 의한 마이크 입력음향의 음향패턴 내지 음향패턴 데이터는 A/D컨버팅된 PCM 데이터를 그대로 사용하거나, 연속되는 PCM 데이터의 증감형태로 가공하여 가공된 데이터를 음향패턴으로 사용할 수도 있다. 특히, PCM 데이터의 증감형태로 가공하여 가공된 데이터를 음향패턴으로 사용하는 경우 통화전환버튼 클릭의 단속적인 음향 특성이 고려되어 클릭음향이 있는 구간을 중점적으로 비교하게 되므로, 검색의 정확도 및 효율을 증가 시킬수 있다. 검색시, 통화전환버튼의 클릭의 음향패턴은 비교적 단순한 패턴을 가지므로, 노이즈등을 감안하여 PCM 데이터 또는 가공된 데이터가 대략 80% 정도 일치하는 경우를 동일 이어폰으로 검색하는 것이 바람직하다. In the microphone sound input / process step S20 and the specific earphone recognition step S30, the acoustic pattern or the acoustic pattern data of the microphone input sound by the call switching button click from the acoustic pattern or the acoustic pattern data is converted into the A / D converted PCM The data may be used as is, or the processed data may be used as an acoustic pattern by processing the data in the form of increasing or decreasing consecutive PCM data. Particularly, when the processed data is processed as an increase / decrease of PCM data and used as an acoustic pattern, the intermittent acoustic characteristics of the call conversion button click are taken into consideration, and the sections with click sound are focused on. . In searching, the acoustic pattern of the click of the call conversion button has a relatively simple pattern. Therefore, it is preferable to search for the case where the PCM data or the processed data coincide with each other by about 80% considering the noise or the like with the same earphone.

또한, 앞서 살핀 바와 같이, A/D컨버팅된 데이터를 FFT 및/또는 Wavelet 변환 등 다양한 공지의 디지털음향처리방법이 하나 이상 사용하여 음향패턴 데이터로 사용하여 그 정밀도를 높일 수도 있다. 예를 들어, 디지털로 변환된 음향을 FFT 변환이나 Wavelet 변환 등 사용하여 불필요한 주파수 대역을 필터링하여 제거하고, 각각의 정보 추출단위마다 필요한 형태로 입력음향 신호를 가공하여, 주파수 변환된 음향 정보를 주파수 및/또는 음압별로 변환하여, 패턴정보를 주파수 및/또는 음압의 데이터로 추출하는 방식으로 수행된다. FFT 변환을 수행하여 음향패턴을 추출하여 사용하는 경우 특정 주파수대 및 클릭의 특정 딜레이 등을 분석하여 검색의 정확도를 높일 수 있다. As described above, it is also possible to increase the accuracy of the A / D converted data by using one or more known digital sound processing methods such as FFT and / or Wavelet transform as acoustic pattern data. For example, unnecessary frequency bands are filtered and removed using FFT or Wavelet transform, and the input sound signals are processed in necessary form for each information extraction unit to convert the frequency-converted sound information to frequency And / or the sound pressure, and extracting pattern information as frequency and / or sound pressure data. When the acoustic pattern is extracted by performing the FFT transform, it is possible to improve the accuracy of the search by analyzing a specific delay of a specific frequency band and a click.

또한, 사전 단계로서, 상기 마이크를 활성화하며 상기 통화전환버튼의 클릭 음향을 상기 마이크를 통하여 입력받아 처리하여 상기 클릭 음향의 음향패턴을 추출하여 사용된 이어폰의 정보와 연관하여 저장하는 패턴정보 입력 단계를 더 포함하여 사용자로 하여금 음향패턴을 특정 이어폰과 연관하여 상기 음향패턴/설정정보DB(330)에 자신이 사용하는 이어폰의 음향패턴을 저장할 수 있도록 구성될 수 있으며, 실시예에 따라서는 시스템 즉, 어플리케이션의 관리자가 사전입력하여 제공하는 경우 이 과정은 생략될 수 있다.As a pre-step, a pattern information input step of activating the microphone and inputting and processing the click sound of the call switching button through the microphone to extract the sound pattern of the click sound and storing it in association with information of the used earphone May be configured to allow a user to store an acoustic pattern of an earphone used by the user in the acoustic pattern / setting information database 330 by associating the acoustic pattern with a specific earphone, , This process may be omitted if the application manager pre-inputs and provides it.

마이크 입력 음향 처리/출력 단계(S40)는 상술한 음향처리모듈(320)에 의하여 수행되며, 상기 이어폰의 마이크 입력음향을 상기 인식된 특정 이어폰에 따라 사전 설정된 방식으로 처리하여 출력한다. 상기 인식된 특정 이어폰의 마이크의 입력특성에 따라 마이크를 통하여 입력되는 음향을 처리하여 출력하는 것이 특히, 보청기용 어플리케이션에 있어서 바람직하며, 상기 마이크의 입력특성은 마이크의 주파수 특성, 신호대 잡음비, 임펄스 특성, 감도, 임피던스, 과도응답(Transient Response) 중 하나 이상을 포함한다. 또한, 실시예에 따라서는 이어폰의 출력특성을 고려하여 이어폰의 마이크 입력음향을 처리하도록 사전설정될 수 있다.The microphone input sound processing / output step S40 is performed by the sound processing module 320 described above, and processes the microphone input sound of the earphone in a predetermined manner according to the recognized specific earphone and outputs the sound. The input characteristics of the microphone are preferably a frequency characteristic, a signal-to-noise ratio, an impulse characteristic, and a frequency characteristic of a microphone. , Sensitivity, impedance, and transient response. Also, depending on the embodiment, it may be preset to process the earphone's microphone input sound considering the output characteristics of the earphone.

음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법을 이용하는 입력음향 처리 방법은 상술한 바와 같이, 음향의 증폭이 중요한 요소인 휴대형 단말기에 적용되는 보청기용 어플리케이션에 적용되므로, 마이크 입력 음향 처리/출력 단계(S40)는 상기 인식된 특정 이어폰의 마이크의 감도에 따라 마이크를 통하여 입력되는 음향을 증폭 처리하여 출력하는 것이 바람직하다. As described above, since the input sound processing method using the earphone for the portable terminal using the acoustic pattern is applied to the application for the hearing aid applied to the portable terminal, which is an important factor of amplifying the sound, the microphone input sound processing / S40) amplifies the sound input through the microphone according to the sensitivity of the recognized microphone of the specific earphone, and outputs the amplified sound.

또한, 도 6에 도시된 바와 같이, 이어폰의 삽입 요청 메시지를 출력하는 과정(610), 통화전환버튼의 클릭의 메시지를 출력하는 과정(620), 버튼 재클릭 메시지 출력과정(633), 인식불가/재삽입메시지 출력과정(642) 중 하나 이상의 메시지 출력과정을 포함하여 구현될 수 있으며, 도 6의 각 과정을 그래픽 또는 음성으로 사용자에게 제공하여 사용자 친화적 어플리케이션으로 구현될 수 있다. 6, a process of outputting an earphone insert request message 610, a process of outputting a click message of a call conversation button 620, a button click message output process 633, / Reinsertion message output process 642, and the process of FIG. 6 may be provided to the user in the form of a graphic or a voice to be implemented as a user-friendly application.

100: 휴대형 단말기 200: 4극 이어폰
110: 제어부 120: 메모리
130: 인터페이스부 140: 오디오처리부
150: RF 통신부 160: 디스플레이부
300: 어플리케이션 310:특정이어폰 인식모듈
320: 음향처리모듈 330: 음향패턴/설정정보DB 100: Portable terminal 200: 4-pole earphone
110: control unit 120: memory
130: interface unit 140: audio processing unit
150: RF communication unit 160:
300: Application 310: Specific earphone recognition module
320: Acoustic processing module 330: Acoustic pattern / setting information DB

Claims (15)

음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템에 있어서,
상기 휴대형 단말기의 이어폰에 장착된 마이크를 통하여 입력되는 이어폰에 장착된 통화전환버튼의 클릭 음향을 오디오 처리부(140)를 통하여 입력받아 이를 기초로 미리 저장된 음향패턴/설정정보 DB(330)을 검색하여 특정 이어폰을 인식하며 인식된 특정 이어폰의 정보를 이어폰 검색정보로서 전송하는 특정 이어폰 인식 모듈(310);
상기 특정 이어폰 인식 모듈(320)로부터 이어폰의 검색정보를 수신하여 마이크를 통하여 입력되는 마이크의 입력음향을 상기 특정 이어폰의 검색정보와 연동하여 미리 설정된 음향처리 방법으로 처리하여 출력하는 음향처리 모듈(320); 및
이어폰에 장착된 통화전환버튼의 클릭 음향의 음향패턴 정보를 특정 이어폰 정보와 연관하여 저장하는 음향패턴/설정정보DB를 포함하며, 상기 이어폰의 마이크 입력음향을 상기 인식된 특정 이어폰의 마이크의 입력특성에 따라 사전 설정된 방식으로 처리하여 출력하는 것을 특징으로 하는 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템. 1. A sound processing system for recognizing an earphone for a portable terminal using an acoustic pattern,
A click sound of a call switching button mounted on an earphone input through a microphone mounted on the earphone of the portable terminal is inputted through the audio processor 140 and a sound pattern / setting information database 330 previously stored is searched based on the click sound A specific earphone recognition module 310 for recognizing a specific earphone and transmitting information of the recognized earphone as earphone search information;
A sound processing module 320 for receiving the search information of the earphone from the specific earphone recognition module 320 and processing the input sound of the microphone input through the microphone in accordance with a predetermined sound processing method in conjunction with the search information of the specific earphone, ); And
And a sound pattern / setting information DB for storing the sound pattern information of the click sound of the call switching button mounted on the earphone in association with the specific earphone information, wherein the microphone input sound of the earphone is input to the input characteristics And outputting the processed acoustic signal to the portable terminal in a predetermined manner. 제 1항에 있어서,
상기 음향패턴에는 입력음향의 파형, 진폭 및 주파수의 하나 이상이 포함되는 것을 특징으로 하는 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템.The method according to claim 1,
Wherein the acoustic pattern includes at least one of a waveform, an amplitude, and a frequency of an input sound, wherein the sound pattern recognizes an earphone for a portable terminal. 제 1항에 있어서,
상기 마이크의 입력특성은 마이크의 주파수 특성, 신호대 잡음비, 임펄스 특성, 감도, 임피던스, 과도응답(Transient Response) 중 하나 이상을 포함하는 것을 특징으로 하는 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템. The method according to claim 1,
Wherein the input characteristic of the microphone includes at least one of a frequency characteristic of a microphone, a signal-to-noise ratio, an impulse characteristic, a sensitivity, an impedance, and a transient response. system. 제 1항에 있어서,
상기 특정 이어폰 인식 모듈(310)은 오디오 처리부(140)로부터 A/D컨버팅된 통화전환버튼의 클릭 음향을 입력받아 디지털 사운드 프로세스 과정을 거쳐 음향패턴을 추출하는 패턴추출부(311); 음향패턴/설정정보DB(330)을 조회하여 상기 추출된 음향패턴과 동일한 음향패턴을 검색하여 이와 연관된 이어폰 정보를 이어폰 검색정보로서 추출하는 음향패턴 검색부(312); 상기 이어폰 검색정보를 음향처리모듈로 전송하는 이어폰 검색정보 전송부(313)을 포함하여 이루어지는 것을 특징으로 하는 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템. The method according to claim 1,
The specific earphone recognition module 310 includes a pattern extracting unit 311 for receiving a click sound of the A / D converted call conversion button from the audio processing unit 140 and extracting a sound pattern through a digital sound process. A sound pattern search unit (312) for inquiring the sound pattern / setting information DB (330) to search for the same sound pattern as the extracted sound pattern and extracting the earphone information associated therewith as earphone search information; And an earphone search information transmitting unit (313) for transmitting the earphone search information to the sound processing module. 제 4항에 있어서,
상기 특정 이어폰 인식 모듈(310)은 상기 패턴추출부(311)로부터 추출된 음향패턴을 특정 이어폰의 이어폰 정보와 연관하여 상기 음향패턴/설정정보DB(330)에 저장하는 음향패턴 입력부(314)를 더 포함하는 것을 특징으로 하는 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템.5. The method of claim 4,
The specific earphone recognition module 310 includes a sound pattern input unit 314 for storing the sound pattern extracted from the pattern extraction unit 311 in association with the earphone information of a specific earphone and storing the sound pattern in the sound pattern / Wherein the earphone of the portable terminal is recognized by using the acoustic pattern. 제 1항에 있어서,
상기 음향패턴/설정정보DB(330)에는 이어폰의 마이크의 입력특성에 따른 마이크 입력 음향의 처리 방식이 이어폰 정보와 연관되어 설정정보로서 저장되고,
음향처리 모듈(320)은 상기 특정 이어폰 인식 모듈(320)로부터 이어폰의 검색정보를 수신하는 이어폰 검색정보 수신부(321); 상기 이어폰 검색정보에 기초하여 상기 음향패턴/설정정보DB(330)로부터 특정 설정정보를 검색하여, 이에 따라, 마이크 입력음향의 처리 방식을 설정하는 마이크 입력음향 설정부(322);
상기 설정된 마이크 입력음향의 처리 방식에 따라, 마이크 입력음향을 처리하는 마이크 입력음향 처리부(323); 및
상기 처리된 마이크 입력음향을 출력하는 처리음향 출력부(324)를 포함하는 것을 특징으로 하는 음향패턴을 이용하여 휴대형 단말기용 이어폰 인식하는 음향처리 시스템. The method according to claim 1,
In the sound pattern / setting information DB 330, a processing method of a microphone input sound according to an input characteristic of a microphone of an earphone is stored as setting information in association with earphone information,
The sound processing module 320 includes an earphone search information receiving unit 321 for receiving search information of the earphone from the specific earphone recognition module 320; A microphone input sound setting unit 322 for searching specific setting information from the sound pattern / setting information DB 330 based on the earphone search information and setting a processing method of a microphone input sound accordingly;
A microphone input sound processing unit 323 for processing a microphone input sound according to the set processing method of the microphone input sound; And
And a processing sound output unit (324) for outputting the processed microphone input sound to the earphone. 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법에 있어서,
휴대형 단말기의 인터페이스에 마이크 및 통화전환버튼이 설치된 이어폰의 삽입을 인식하는 이어폰 삽입 인식 단계(S10);
상기 마이크를 활성화하며 상기 통화전환버튼의 클릭 음향을 상기 마이크를 통하여 입력받아 처리하여 상기 클릭 음향의 음향패턴을 추출하는 마이크 음향입력/처리 단계(S20);
상기 추출된 클릭 음향의 음향패턴에 기초하여 동일한 클릭 음향의 음향패턴을 가지는 특정 이어폰을 검색하여 삽입된 특정 이어폰을 인식하는 특정 이어폰 인식 단계(S30)을 포함하여 이루어지는 것을 특징으로 하는 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법.A method of recognizing an earphone for a portable terminal using an acoustic pattern,
An earphone insert recognition step (S10) of recognizing insertion of an earphone in which a microphone and a call conversion button are installed in an interface of the portable terminal;
A microphone sound input / processing step (S20) for activating the microphone and receiving a click sound of the call switching button through the microphone to extract an acoustic pattern of the click sound;
And a specific earphone recognizing step (S30) for recognizing a specific earphone inserted by searching for a specific earphone having an acoustic pattern of the same click sound based on the extracted acoustic pattern of the click sound. A method of recognizing an earphone for a portable terminal. 제 7항에 있어서,
상기 이어폰의 마이크 입력음향을 상기 인식된 특정 이어폰에 따라 사전 설정된 방식으로 처리하여 출력하는 마이크 입력 음향 처리/출력 단계(S40)을 더 포함하여 이루어지는 것을 특징으로 하는 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법.8. The method of claim 7,
And a microphone input sound processing / output step (S40) for processing the microphone input sound of the earphone in a predetermined manner according to the recognized specific earphone and outputting the processed sound input signal. Recognition method. 제 8항에 있어서,
마이크 입력 음향 처리/출력 단계(S40)는 상기 인식된 특정 이어폰의 마이크의 입력특성에 따라 마이크를 통하여 입력되는 음향을 처리하여 출력하는 것을 특징으로 하는 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법. 9. The method of claim 8,
And the microphone input sound processing / output step (S40) processes the sound input through the microphone according to the input characteristics of the recognized specific earphone, and outputs the processed sound to the earphone. 제 7항에 있어서,
상기 마이크를 활성화하며 상기 통화전환버튼의 클릭 음향을 상기 마이크를 통하여 입력받아 처리하여 상기 클릭 음향의 음향패턴을 추출하여 사용된 이어폰의 정보와 연관하여 저장하는 패턴정보 입력 단계를 더 포함하는 것을 특징으로 하는 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법. 8. The method of claim 7,
And a pattern information input step of activating the microphone and receiving the click sound of the call switching button through the microphone and extracting the acoustic pattern of the click sound and storing it in association with the information of the used earphone A method for recognizing an earphone for a portable terminal using an acoustic pattern. 제 7항 내지 제 10항 중 어느 한 항에 있어서,
상기 음향패턴에는 입력음향의 파형, 진폭 및 주파수의 하나 이상이 포함되는 것을 특징으로 하는 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법.11. The method according to any one of claims 7 to 10,
Wherein the acoustic pattern includes at least one of a waveform, an amplitude, and a frequency of an input sound. 제 9항에 있어서,
상기 마이크의 입력특성은 마이크의 주파수 특성, 신호대 잡음비, 임펄스 특성, 감도, 임피던스, 과도응답(Transient Response) 중 하나 이상을 포함하는 것을 특징으로 하는 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법.10. The method of claim 9,
Wherein the input characteristic of the microphone includes at least one of a frequency characteristic of a microphone, a signal-to-noise ratio, an impulse characteristic, a sensitivity, an impedance, and a transient response. 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법을 이용하는 입력음향 처리 방법에 있어서,
휴대형 단말기의 인터페이스에 마이크 및 통화전환버튼이 설치된 이어폰의 삽입을 인식하는 이어폰 삽입 인식 단계(S10);
상기 마이크를 활성화하며 상기 통화전환버튼의 클릭 음향을 상기 마이크를 통하여 입력받아 처리하여 상기 클릭 음향의 음향패턴을 추출하는 마이크 음향입력/처리 단계(S20);
상기 추출된 클릭 음향의 음향패턴에 기초하여 동일한 클릭 음향의 음향패턴을 가지는 특정 이어폰을 검색하여 삽입된 특정 이어폰을 인식하는 특정 이어폰 인식 단계(S30); 및
상기 이어폰의 마이크 입력음향을 상기 인식된 특정 이어폰에 따라 사전 설정된 방식으로 처리하여 출력하는 마이크 입력 음향 처리/출력 단계(S40)를 포함하여, 마이크 입력 음향 처리/출력 단계(S40)는 상기 인식된 특정 이어폰의 마이크의 감도에 따라 마이크를 통하여 입력되는 음향을 증폭 처리하여 출력하는 것을 특징으로 하는 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법을 이용하는 입력음향 처리 방법.An input sound processing method using an earphone for a portable terminal using a sound pattern,
An earphone insert recognition step (S10) of recognizing insertion of an earphone in which a microphone and a call conversion button are installed in an interface of the portable terminal;
A microphone sound input / processing step (S20) for activating the microphone and receiving a click sound of the call switching button through the microphone to extract an acoustic pattern of the click sound;
A specific earphone recognizing step (S30) for recognizing a specific earphone inserted by searching for a specific earphone having an acoustic pattern of the same click sound based on the extracted acoustic pattern of the click sound; And
And a microphone input sound processing / output step (S40) for processing the microphone input sound of the earphone in a predetermined manner according to the recognized specific earphone and outputting the microphone input sound processing / output step (S40) The method comprising the steps of: amplifying a sound input through a microphone according to a sensitivity of a microphone of a specific earphone and outputting the amplified sound; and outputting the processed sound signal. 제 13항에 있어서,
이어폰의 삽입 요청 메시지 및 통화전환버튼의 클릭의 메시지 중 하나 이상의 메시지를 출력하는 것을 특징으로 하는 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법을 이용하는 입력음향 처리 방법. 14. The method of claim 13,
A message of an earphone insert request message, and a message of a click of a call conversation button are outputted. [Claim 6] The method of claim 1, 제 13항 또는 제 14항에 있어서,
상기 이어폰은 4극 이어폰인 것을 특징으로 하는 음향패턴을 이용한 휴대형 단말기용 이어폰의 인식방법을 이용하는 입력음향 처리 방법. The method according to claim 13 or 14,
Wherein the earphone is a quadrupole earphone, and wherein the earphone is a quadrupole earphone.
KR1020130047341A 2012-12-04 2013-04-29 Sound processing system to recognize earphones for portable devices using sound patterns, mathod for recognizing earphone for portable devices using sound patterns, and mathod for sound processing using thereof KR101442027B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130047341A KR101442027B1 (en) 2013-04-29 2013-04-29 Sound processing system to recognize earphones for portable devices using sound patterns, mathod for recognizing earphone for portable devices using sound patterns, and mathod for sound processing using thereof
PCT/KR2013/009426 WO2014088202A1 (en) 2012-12-04 2013-10-22 Sound-processing system recognizing earphones for mobile terminal using sound pattern, method for recognizing mobile terminal earphones and method for processing input sound using same, method for automatically converting audio signal amplification output based on earphones/microphone set, and computer-readable recording medium therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130047341A KR101442027B1 (en) 2013-04-29 2013-04-29 Sound processing system to recognize earphones for portable devices using sound patterns, mathod for recognizing earphone for portable devices using sound patterns, and mathod for sound processing using thereof

Publications (1)

Publication Number Publication Date
KR101442027B1 true KR101442027B1 (en) 2014-09-25

Family

ID=51760550

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130047341A KR101442027B1 (en) 2012-12-04 2013-04-29 Sound processing system to recognize earphones for portable devices using sound patterns, mathod for recognizing earphone for portable devices using sound patterns, and mathod for sound processing using thereof

Country Status (1)

Country Link
KR (1) KR101442027B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101628330B1 (en) * 2015-03-18 2016-06-08 김상진 Apparatus for playing play sound synchronization
CN108401066A (en) * 2017-02-08 2018-08-14 北京奇虎科技有限公司 The method, apparatus and intelligent terminal of voice control are carried out in intelligent terminal
CN115037831A (en) * 2021-03-05 2022-09-09 深圳市万普拉斯科技有限公司 Mode control method and device, electronic equipment and earphone

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004117892A (en) 2002-09-26 2004-04-15 Clarion Co Ltd Adapter for mobile karaoke
KR20060112544A (en) * 2005-04-27 2006-11-01 주식회사 팬택 Call control apparatus and method by using click button of ear phone or headset connected with wireless telecommunication terminal
KR20110064339A (en) * 2009-12-08 2011-06-15 삼성전자주식회사 Apparatus and method for recognizing earphone mounting in portable terminal

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004117892A (en) 2002-09-26 2004-04-15 Clarion Co Ltd Adapter for mobile karaoke
KR20060112544A (en) * 2005-04-27 2006-11-01 주식회사 팬택 Call control apparatus and method by using click button of ear phone or headset connected with wireless telecommunication terminal
KR20110064339A (en) * 2009-12-08 2011-06-15 삼성전자주식회사 Apparatus and method for recognizing earphone mounting in portable terminal

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101628330B1 (en) * 2015-03-18 2016-06-08 김상진 Apparatus for playing play sound synchronization
CN108401066A (en) * 2017-02-08 2018-08-14 北京奇虎科技有限公司 The method, apparatus and intelligent terminal of voice control are carried out in intelligent terminal
CN115037831A (en) * 2021-03-05 2022-09-09 深圳市万普拉斯科技有限公司 Mode control method and device, electronic equipment and earphone

Similar Documents

Publication Publication Date Title
JP6489563B2 (en) Volume control method, system, device and program
US10349176B1 (en) Method for processing signals, terminal device, and non-transitory computer-readable storage medium
US9818423B2 (en) Method of improving sound quality and headset thereof
CN104185132B (en) Channel configuration method, intelligent terminal and corresponding system
CN108710615B (en) Translation method and related equipment
CN106936987B (en) Method and device capable of identifying voice source of Bluetooth headset
US20180293982A1 (en) Voice assistant extension device and working method therefor
WO2014117722A1 (en) Speech processing method, device and terminal apparatus
CN204616044U (en) Based on the music share system of Bluetooth technology
CN109151789B (en) Translation method, device and system and Bluetooth headset
CN108886653A (en) A kind of earphone sound channel control method, relevant device and system
CN107633849B (en) Bluetooth device volume adjusting method, device and computer readable storage medium
CN112272346A (en) In-ear detection method, earphone and computer readable storage medium
CN106302997A (en) A kind of output control method, electronic equipment and system
CN113542960B (en) Audio signal processing method, system, device, electronic equipment and storage medium
CN112804610B (en) Method for controlling Microsoft Teams on PC through TWS Bluetooth headset
US20180279048A1 (en) Binaural recording system and earpiece set
KR101442027B1 (en) Sound processing system to recognize earphones for portable devices using sound patterns, mathod for recognizing earphone for portable devices using sound patterns, and mathod for sound processing using thereof
CN114333886A (en) Audio processing method and device, electronic equipment and storage medium
WO2018035868A1 (en) Method for outputting audio, electronic device, and storage medium
KR101722686B1 (en) Method and Apparatus for outputting bell sound
CN109473096B (en) Intelligent voice equipment and control method thereof
WO2014088202A1 (en) Sound-processing system recognizing earphones for mobile terminal using sound pattern, method for recognizing mobile terminal earphones and method for processing input sound using same, method for automatically converting audio signal amplification output based on earphones/microphone set, and computer-readable recording medium therefor
CN105208514A (en) Slave equipment and master and slave equipment automatic matching system and method
KR20170047634A (en) System and method for transceiving data using non-audible frequency band

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170911

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180910

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190930

Year of fee payment: 6