KR101058003B1 - 소음 적응형 이동통신 단말장치 및 이 장치를 이용한통화음 합성방법 - Google Patents

소음 적응형 이동통신 단말장치 및 이 장치를 이용한통화음 합성방법 Download PDF

Info

Publication number
KR101058003B1
KR101058003B1 KR1020040008924A KR20040008924A KR101058003B1 KR 101058003 B1 KR101058003 B1 KR 101058003B1 KR 1020040008924 A KR1020040008924 A KR 1020040008924A KR 20040008924 A KR20040008924 A KR 20040008924A KR 101058003 B1 KR101058003 B1 KR 101058003B1
Authority
KR
South Korea
Prior art keywords
noise
sound
call
mobile communication
communication terminal
Prior art date
Application number
KR1020040008924A
Other languages
English (en)
Other versions
KR20050080813A (ko
Inventor
유명현
김재우
박준아
정승녕
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020040008924A priority Critical patent/KR101058003B1/ko
Priority to US11/055,220 priority patent/US8108217B2/en
Publication of KR20050080813A publication Critical patent/KR20050080813A/ko
Application granted granted Critical
Publication of KR101058003B1 publication Critical patent/KR101058003B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • HELECTRICITY
    • H02GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
    • H02PCONTROL OR REGULATION OF ELECTRIC MOTORS, ELECTRIC GENERATORS OR DYNAMO-ELECTRIC CONVERTERS; CONTROLLING TRANSFORMERS, REACTORS OR CHOKE COILS
    • H02P5/00Arrangements specially adapted for regulating or controlling the speed or torque of two or more electric motors
    • H02P5/74Arrangements specially adapted for regulating or controlling the speed or torque of two or more electric motors controlling two or more ac dynamo-electric motors
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02165Two microphones, one receiving mainly the noise signal and the other one mainly the speech signal

Abstract

소음 적응형 이동통신 단말장치 및 이 장치를 이용한 통화음 합성방법이 개시된다. 이 장치는 수집된 소음을 감지하는 소음 감지부, 감지된 소음의 주파수 성분을 검출하는 주파수 성분 검출부, 검출된 주파수 성분으로부터 소음 적응형 음향을 생성하는 음향 생성부, 수신된 통화음과 소음 적응형 음향을 합성하는 통화음 합성부 및 통화음 합성부가 소정 시간마다 동작하도록 제어하는 동작 제어부를 구비하는 것을 특징으로 한다. 따라서, 본 발명에 따르면, 이동통신 단말장치의 사용시에 돌발적으로 발생하는 소음에 대해 인간의 청각 기관의 특성인 선행 효과와 순응 효과를 이용하여 사용자의 통화음에 대한 인식 능력을 향상시키도록 한다.

Description

소음 적응형 이동통신 단말장치 및 이 장치를 이용한 통화음 합성방법{Mobile communication apparatus for noise adaptation and method for composing telephone audio using the apparatus}
도 1은 본 발명에 의한 소음 적응형 이동통신 단말장치를 설명하기 위한 일 실시예의 블록도이다.
도 2는 이동통신 단말장치의 스피커(180)와 스피커(180)의 인접한 거리에 설치된 소음 수집 마이크(100)의 일 예를 도시한 도면이다.
도 3a 내지 도 3e는 도 1에 도시된 소음 적응형 이동통신 단말장치를 설명하기 위한 도면이다.
도 4는 도 1에 도시된 본 발명에 따른 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법을 설명하기 위한 일 실시예의 플로차트이다.
도 5는 도 4에 도시된 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법의 제208 단계를 설명하기 위한 일 실시예의 플로차트이다.
〈도면의 주요 부호에 대한 간단한 설명〉
100: 소음 수집 마이크 110: 소음 감지부
120: 주파수 성분 검출부 130: 음향 생성부
140: 동작 제어부 150: 통화음 합성부
160: 주파수 데이터 베이스
본 발명은 이동통신 단말장치에 관한 것으로, 보다 상세하게는 이동통신 단말장치를 통해 통화음을 수신하는 경우에 주변환경의 소음에도 불구하고 통화음을 용이하게 인식할 수 있도록 하는 소음 적응형 이동통신 단말장치 및 이 장치를 이용한 통화음 합성방법에 관한 것이다.
이동통신 단말장치란 휴대폰, 개인 휴대정보 단말기(PDA: personal digital assistant) 등 상대방과 커뮤니케이션을 수행할 수 있는 통신기기를 말한다. 이러한 이동통신 단말장치는 통화음 이외에 외부로부터 또는 내부로부터 발생되는 소음을 제거하거나 감소시킴으로써, 통화 품질을 향상시키고 있다. 소음 제거와 관련된 기술은 모두 기계적 방식의 노이즈 켄슬링(Noise-Canceling) 기법을 사용한다.
그러나, 수신자 측의 주변 환경에서 발생되는 소음은 수신자 측의 이동통신 단말장치에서 출력되는 통화음과 뒤섞여서 수신자의 청각기관으로 수용될 수밖에 없다. 이로 인해, 종래에는 수신자가 소음에 노출될 경우에는 통화음을 알아들을 수 없다는 문제점이 발생된다. 예를 들어 주변환경이 지하철역 또는 도로 등이라고 했을 때, 사람의 청각기관은 송신자로부터 전송된 통화음을 지하??역 또는 도로의 소음으로 인해 효과적으로 알아들을 수 없다. 사람의 청각기관이 이동통신 단말장치의 스피커에서 출력되는 통화음을 수신할 때, 사람의 청각기관은 통화음과 함께 수신되는 소음의 간섭으로 인해 통화음을 제대로 인식할 수 없게 된다.
종래의 기술은 이러한 수신자 측 이동통신 단말장치의 소음을 제거하거나 감소시키는 기술을 제시하는 것이 아니며, 또한, 사람의 청각기관의 특성을 고려한 기술도 제시된 바가 없다.
본 발명이 이루고자 하는 기술적 과제는, 인간의 청각 기관의 특성인 선행 효과와 순응 효과를 이용하여 이동통신 단말장치를 사용하는 사용자의 통화음에 대한 인식 능력을 향상시키는 소음 적응형 이동통신 단말장치를 제공하는데 있다.
본 발명이 이루고자 하는 다른 기술적 과제는, 전술한 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법을 제공하는데 있다.
상기의 과제를 이루기 위해, 본 발명에 따른 소음 적응형 이동통신 단말장치는 수집된 소음을 감지하는 소음 감지부, 감지된 소음의 주파수 성분을 검출하는 주파수 성분 검출부, 검출된 주파수 성분으로부터 소음 적응형 음향을 생성하는 음향 생성부, 수신된 통화음과 소음 적응형 음향을 합성하는 통화음 합성부 및 통화음 합성부가 소정 시간마다 동작하도록 제어하는 동작 제어부로 구성됨이 바람직하다.
상기의 다른 과제를 이루기 위해, 본 발명에 따른 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법은 주변 환경의 소음을 수집하는 단계, 수집된 소음이 소정 크기 이상의 소음인가를 감지하는 단계, 수집된 소음이 소정 크기 이상 의 소음이라면, 감지된 소음의 주파수 성분을 검출하는 단계, 검출된 주파수 성분으로부터 소음 적응형 음향을 생성하는 단계 및 수신된 통화음과 생성된 소음 적응형 음향을 소정 시간마다 합성하는 단계로 이루어짐이 바람직하다.
본 발명의 설명에 앞서서, 사람의 청각 기관이 갖는 두 가지 특성에 해당하는 선행 효과(Precedence Effect) 및 순응 효과(Adaptation Effect)를 먼저 설명한다. 이러한 두 가지 특성은 본 발명이 이루고자 하는 목적의 달성을 위한 배경 지식이 된다.
선행 효과라 함은 사람의 청각 기관으로 입력된 첫 신호 후 대략 수십[ms] 이내에 입력되는 동일 신호에 대해 청각 기관이 자동적으로 억제하는 효과를 말한다. 예를 들어, 콘서트홀처럼 폐쇄된 공간에서 소리를 들을 때 사람은 처음에 직접음을 듣고 그리고 직접음에 따라오는 반향음을 듣게 된다. 반향음은 폐쇄 공간의 벽면 등에 직접음이 부딪쳐서 반사되어 생긴다. 사람의 청각기관이 직접음과 반향음을 모두 수용할 경우에 반향음에 대한 인식을 억제함으로써, 보다 명확하게 소리를 인식할 수 있도록 하는 효과를 선행 효과라고 한다.
순응 효과는 사람의 청각 기관이 동일 신호에 지속적으로 노출되면 청각기관의 민감도가 점차로 저하되는 신경 특성을 말한다. 동일한 소리를 지속적으로 수용하게 되면, 사람의 청각기관은 소리를 수용하는 기능이 떨어지는데 이러한 효과를 순응 효과라고 한다.
이하, 본 발명에 의한 소음 적응형 이동통신 단말장치를 첨부된 도면을 참조하여 다음과 같이 설명한다.
도 1은 본 발명에 의한 소음 적응형 이동통신 단말장치를 설명하기 위한 일 실시예의 블록도로서, 소음 수집 마이크(100), 소음 감지부(110), 주파수 성분 검출부(120), 음향 생성부(130), 동작 제어부(140), 통화음 합성부(150) 및 주파수 데이터 베이스(160)로 구성된다.
소음 수집 마이크(100)는 주변 환경의 소음을 수집한다. 소음 수집 마이크(100)는 음파 또는 초음파를 받아서 그 진동에 따라 전기신호를 발생하는 유닛이다.
소음 수집 마이크(100)는 수신된 통화음이 출력되는 스피커의 위치로부터 소정거리 내에 설치되는 것을 특징으로 한다. 스피커는 수신자가 청각 기관으로 통화음을 수용할 수 있도록 통화음이 출력되는 이동통신 단말장치의 출력유닛이다. 소음 수집 마이크(100)는 이러한 스피커로부터 근거리에 설치하는 것이 바람직하다. 스피커로부터 출력되는 통화음과 주변환경의 소음을 수집하는 소음 수집 마이크(100)가 인접해 있음으로 해서, 수신자가 청각기관으로 수용하는 소음의 정도를 보다 정확히 수집할 수 있다.
도 2는 이동통신 단말장치의 스피커(180)와 스피커(180)의 인접한 거리에 설치된 소음 수집 마이크(100)의 일 예를 도시한 도면이다. 다만, 도 2에 도시된 소음 수집 마이크(100)의 설치 위치는 일 예에 지나지 않는 것으로 스피커(180)에 인접한 다양한 위치에 설치될 수 있음을 지적한다.
소음 수집 마이크(100)는 수집된 소음을 소음 감지부(110)로 출력한다.
소음 감지부(110)는 수집된 소음을 감지하고, 감지한 결과를 소음 감지신호 로서 출력한다. 소음 감지부(110)는 수집된 소음이 소정 크기 이상일 경우에 소음으로 감지하는 것을 특징으로 한다. 소음 감지부(110)는 소음 수집 마이크(100)에서 수집된 소음이 소정 데시벨[dB]이상일 때에 소음으로서 감지하고, 소정 데시벨 이하일 때에는 소음으로서 감지하지 않는다. 소음 감지부(110)는 감지한 소음 감지신호를 주파수 성분 검출부(120)로 출력한다.
주파수 성분 검출부(120)는 소음 감지신호에 응답하여, 감지된 소음의 주파수 성분을 검출하고, 검출한 결과를 주파수 검출신호로서 출력한다. 소음 감지부(110)로부터 소음 감지신호를 입력받으면, 주파수 성분 검출부(120)는 감지된 소음의 주요 주파수 성분을 검출하는 것을 특징으로 한다.
감지된 소음은 다수의 주파수 성분들로 구성된다. 이러한 다수의 주파수 성분들을 모두 검출하는 것도 생각해 볼 수 있지만, 소음의 주된 원인이 되는 주요 주파수 성분들을 검출하는 것이 바람직하다. 주파수 성분 검출부(120)는 검출한 주파수 검출신호를 음향 생성부(130)로 출력한다.
음향 생성부(130)는 주파수 검출신호에 응답하여, 검출된 주파수 성분으로부터 소음 적응형 음향을 생성하고, 생성한 소음 적응형 음향을 음향 생성신호로서 출력한다. 음향 생성부(130)는 주파수 성분 검출부(120)로부터 입력된 주파수 검출신호에 응답하여, 검출된 주파수 성분으로부터 아날로그 성분에 해당하는 소음 적응형 음향을 생성한다.
소음 적응형 음향이란, 통화음과 합성되어지는 음향으로서, 전술한 선행 효과를 얻기 위해 생성되는 음향이다. 즉, 소음 적응형 음향은 소음 수집 마이크(100)로 입력되는 소음을 통화음과 합성하기 위해 가공한 음향을 말한다. 소음 적응형 음향은 수십[ms] 이내의 길이를 갖는다. 적절한 길이는 40[ms] 내지 50[ms] 정도의 길이가 적절하다.
음향 생성부(130)는 주파수 성분 검출부(120)로부터 입력된 주요 주파수 성분들의 크기를 축소하여 소음 적응형 음향을 생성하는 것이 바람직하다. 주요 주파수 성분들의 크기를 축소함으로써, 소음 적응형 음향이 통화음과 합성될 때, 오히려 소음으로 작용하지 않도록 하기 위함이다.
음향 생성부(130)는 생성한 소음 적응형 음향을 음향 생성신호로서 동작 제어부(140) 및 통화음 합성부(150)로 출력한다.
동작 제어부(140)는 음향 생성신호에 응답하여, 통화음 합성부(150)가 소정 시간마다 동작하도록 제어한다. 음향 생성부(130)로부터 입력된 음향 생성신호에 응답하여, 동작 제어부(140)는 통화음 합성부(150)의 동작을 제어한다. 사람의 청각기관이 소음에 대해 인식하는 기능이 억제되도록 하기 위해, 동작 제어부(140)는 대략 70[ms]마다 통화음 합성부(150)가 동작하도록 제어한다. 즉, 동작 제어부(140)는 통화음 합성부(150)에서 70[ms]마다 합성된 통화음이 생성되도록 한다. 선행 효과로 인해, 사람의 청각기관이 소음을 인식하는 것을 억제하도록 하기 위해 대략 70[ms]마다 합성된 통화음이 생성되도록 한 것이다.
합성된 통화음의 요소인 소음 적응형 음향이 청각기관에 수용됨으로써, 이 후에 청각 기관으로 수용되는 소음에 대해 억제하는 효과를 갖는다. 70[ms]마다 합성된 통화음이 생성되어 청각기관에 수신됨으로써, 사람은 원래의 통화음을 수용할 때 보다 오히려 합성된 통화음으로부터 송신자의 음성이나 텍스트 투 스피치 기능에 의한 기계음을 보다 적절히 인식할 수 있다. 다만, 이러한 70[ms]의 시간은 일 예에 해당하는 것으로 필요에 따라 변경이 가능하다.
이후, 동작 제어부(140)는 통화 지속시간에 비례하여 소정 시간을 증가시키는 것을 특징으로 한다. 통화 지속시간이 길어짐에 따라 사람의 청각기관으로 유사한 크기의 소음이 계속 수용되면, 사람의 청각기관이 소음에 대해 인식하는 기능이 점점 저하된다. 이것은 사람의 청각기관이 전술한 순응 효과를 나타내기 때문이다. 따라서, 통화 지속시간이 증가하면, 전술한 70[ms]마다 통화음 합성부(150)가 동작하도록 제어할 필요가 없이 동작되는 시간의 주기를 증가시켜도 무방하다. 이렇게 함으로써, 합성된 통화음의 생성되는 횟수가 줄어들면서도 소음에 대해 통화음을 효과적으로 수신할 수 있다.
통화음 합성부(150)는 수신된 통화음과 소음 적응형 음향을 합성한다. 동작 제어부(140)로부터 소정시간마다 입력되는 제어신호에 응답하여, 통화음 합성부(150)는 입력단자 IN1을 통해 수신된 통화음과 음향 생성부(130)로부터 입력된 소음 적응형 음향을 합성한다. 또한, 동작 제어부(140)로부터 증가된 소정시간마다 입력되는 제어신호에 응답하여, 통화음 합성부(150)는 통화음과 소음 적응형 음향을 합성한다.
통화음 합성부(150)는 수신된 통화음이 송신자의 음성 및 텍스트 투 스피치(TTS: Text To Speech) 기능에 의한 기계음 중 어느 하나에 해당하는 경우에, 수신된 통화음과 소음 적응형 음향을 합성하는 것을 특징으로 한다. 텍스트 투 스피치(TTS: Text To Speech) 기능은 문자정보를 음성정보로 변환시키는 음성 합성기술을 말한다. 즉, 통화음 합성부(150)는 송신자의 음성과 소음 적응형 음향을 합성하여 출력할 수도 있고, 텍스트 투 스피치 기능에 의한 기계음과 소음 적응형 음향을 합성하여 출력할 수도 있다.
통화음 합성부(150)에서 합성된 통화음을 사람의 청각기관이 수용하게 되면, 이후에 수용되는 소음에 대해 청각기관에서는 소음 적응형 음향에 의한 선행 효과로 인해 소음을 인식하는 기능이 떨어지게 된다. 따라서, 청각기관에서 원래의 통화음을 수용할 때 보다 오히려 합성된 통화음을 수용함으로써, 수신된 통화음을 적절히 인식할 수 있게 된다.
통화음 합성부(150)는 합성된 통화음을 출력단자 OUT1을 통해 출력한다.
주파수 데이터 베이스(160)는 주변 환경들의 소음 패턴에 따른 샘플 주파수 성분들을 저장한다. 예를 들어, 주파수 데이터 베이스(160)는 지하철역의 소음 패턴에 해당하는 샘플 주파수 성분, 도로변의 소음 패턴에 해당하는 샘플 주파수 성분 및 상가의 소음 패턴에 해당하는 샘플 주파수 성분 등의 메타 데이터(meta data)를 저장한다.
주파수 데이터 베이스(160)는 주변 환경들에 대응하는 샘플 주파수 성분들을 룩 업 테이블(LUT: Look Up Table)로 구성하여 저장하는 것을 특징으로 한다. 표 1은 룩 업 테이블의 일 예이다.
<표 1>
주변 환경 샘플 주파수 성분
지하철 역 제1 샘플 주파수 성분
도로 제2 샘플 주파수 성분
상가 제3 샘플 주파수 성분
건설 현장 제4 샘플 주파수 성분
표 1에서 보는 바와 같이, 주변 환경에 따른 샘플 주파수 성분들을 미리 마련해 놓는다.
한편, 동작 제어부(140)는 위치 추적 서비스에 의해 위치정보를 수신하고, 수신된 위치정보에 대응하는 주변 환경의 샘플 주파수 성분을 음향 생성부(130)로 출력하도록 주파수 데이터 베이스(160)를 제어하는 것을 특징으로 한다. 위치 추적 서비스에 의해 위치정보를 입력단자 IN2를 통해 수신하면, 동작 제어부(140)는 수신된 위치정보에 대응하는 주변 환경이 어디인가를 감지한다.
동작 제어부(140)는 감지된 주변 환경이 소음을 발생시키는 장소임을 인식할 수 있다. 동작 제어부(140)는 감지된 주변 환경이 소음을 발생시키는 장소라고 인식하면, 감지된 주변환경에 대응하는 샘플 주파수 성분을 음향 생성부(130)로 출력하도록 주파수 데이터 베이스(160)에 제어신호를 출력한다. 표 1를 예로 들어 설명하면, 동작 제어부(140)는 위치 정보로부터 주변 환경이 "지하철역"이라고 감지하고, "지하철역"에 대응하는 "제1 샘플 주파수 성분"을 음향 생성부(130)로 출력하도록 주파수 데이터 베이스(160)에 제어신호를 출력한다.
동작 제어부(140)의 제어신호에 의해, 주파수 데이터 베이스(160)의 샘플 주파수 성분들 중 주변환경에 대응하는 샘플 주파수 성분이 음향 생성부(130)로 출력된다.
음향 생성부(130)는 소음 감지부(110)에서 감지되는 소음이 존재하지 않을 경우, 주파수 데이터 베이스(160)에 저장된 샘플 주파수 성분들 중 위치 추적 서비스에 의해 파악된 주변 환경에 대응하는 샘플 주파수 성분을 수신하여, 수신된 샘플 주파수 성분으로부터 소음 적응형 음향을 생성하는 것을 특징으로 한다. 예를 들어, 주파수 데이터 베이스(160)로부터 "제1 샘플 주파수 성분"을 입력받으면, 음향 생성부(130)는 "제1 샘플 주파수 성분'으로부터 소음 적응형 음향을 생성하고, 생성된 소음 적응형 음향을 동작 제어부(140) 및 통화음 합성부(150)로 출력한다.
도 3a 내지 도 3e는 도 1에 도시된 소음 적응형 이동통신 단말장치를 설명하기 위한 도면이다. 도 3a는 소음 수집 마이크(100)에 의해 수집된 소음의 일 예를 나타내는 도면이다. 도 3b는 주파수 성분 검출부(120)에 의해 검출된 소음의 주요 주파수 성분의 일 예를 나타내는 도면이다. 도 3c는 도 3b에서 검출된 주요 주파수 성분에 대하여 음향 생성부(130)에서 생성된 아날로그의 소음 적응형 음향의 일 예를 나타내는 도면이다. 도 3d는 도 3c에서 생성된 소음 적응형 음향에 대하여 크기가 축소된 소음 적응형 음향의 일 예를 나타내는 도면이다. 도 3e는 도 3d에서 생성된 크기가 축소된 소음 적응형 음향과 통화음의 합성에 대한 일 예를 나타내는 도면이다.
원래의 통화음에 소음 적응형 음향이 합성되어 수신자의 청각기관에 수용됨으로써, 수신자는 이후에 들어오는 소음에 대해 인식하는 감각 능력이 저하됨으로 인해 용이하게 통화음을 수신할 수 있다.
이하, 본 발명에 의한 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법을 첨부된 도면을 참조하여 다음과 같이 설명한다.
도 4는 본 발명에 의한 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법을 설명하기 위한 일 실시예의 플로차트로서, 소음의 주파수 성분으로부터 소음 적응형 음향을 생성하여 통화음과 합성하는 단계(제200 ~ 제212 단계들)로 이루어진다.
먼저, 주변 환경의 소음을 수집한다(제200 단계).
제200 단계 후에, 수집된 소음이 소정 크기 이상의 소음인가를 감지한다(제202 단계). 미리 정해진 소정 데시벨 이상의 소음이 입력되는가를 감지한다.
만일, 수집된 소음이 소정 크기 이상의 소음이라면, 감지된 소음의 주파수 성분을 검출한다(제204 단계). 제204 단계는 감지된 소음의 주요 주파수 성분을 검출하는 것을 특징으로 한다.
제204 단계 후에, 검출된 주파수 성분으로부터 소음 적응형 음향을 생성한다(제206 단계). 제206 단계는 제204 단계에서 검출된 주요 주파수 성분의 크기를 축소하여 소음 적응형 음향을 생성하는 것을 특징으로 한다.
제206 단계 후에, 수신된 통화음과 생성된 소음 적응형 음향을 소정 시간마다 합성한다(제208 단계). 제208 단계는 통화 지속시간에 비례하여 소정 시간을 증가시키는 것을 특징으로 한다. 또한, 제208 단계는 수신된 통화음이 송신자의 음성인 경우에, 송신자의 음성과 소음 적응형 음향을 합성하고, 수신된 통화음이 텍스트 투 스피치 기능에 의한 기계음인 경우에, 텍스트 투 스피치 기능에 의한 기계음과 소음 적응형 음향을 합성하는 것을 특징으로 한다.
도 5는 도 4에 도시된 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법의 제208 단계를 설명하기 위한 일 실시예의 플로차트로서, 통화 상태가 온 상태인가 여부에 따라 통화음을 합성하는 단계(제300 ~ 제304 단계들)로 이루어진다.
먼저, 수신된 통화음과 생성된 소음 적응형 음향을 합성한다(제300 단계).
제300 단계 후에, 통화 상태가 온 상태인가를 감지한다(제302 단계). 통화 상태가 온 상태인지 여부는 이동통신 단말장치의 통화 상태 검출부(미도시)로부터 제공받는다. 통화 상태가 온이라 함은 수신자가 송신자와 통화를 계속하고 있음을 의미한다.
만일, 통화 상태가 온 상태가 아니라면, 즉 통화 상태가 오프(off) 상태라면, 전술한 과정을 종료한다.
그러나, 통화 상태가 온 상태라면, 소정 시간이 경과하였는가를 감지한다(제304 단계). 여기서, 소정 시간은 전술한 선행 효과를 얻기 위해 대략 70[ms] 정도의 시간이 적절하다. 또한, 소정 시간은 전술한 순응 효과를 얻기 위해 점차 증가되는 것을 특징으로 한다.
만일, 소정 시간이 경과하였다면, 전술한 제300 단계로 진행한다. 소정 시간이 경과하였다면, 다시 통화음이 소음 적응형 음향과 합성되어야 하므로 제300 단계로 진행하여 전술한 제300 및 제302 단계를 수행한다.
그러나, 소정 시간이 경과하지 않았다면, 전술한 제302 단계로 진행한다. 소정 시간이 경과하지 않았다면, 아직 통화음이 소음 적응형 음향과 합성되어야 할 시간이 아니므로 제302 단계로 진행하여 통화 상태가 온 상태인가를 다시 판단한 다.
한편, 도 4의 제202 단계에서, 수집된 소음이 소정 크기 이상의 소음이 아니라면, 위치 추적 서비스의 위치정보에 대응하는 주변 환경에서 소음이 발생될 가능성이 있는가를 검사한다(제210 단계). 이동통신 단말장치가 위치한 현재의 주변환경에서 소음이 발생되지는 않고 있지만, 이 주변 환경이 소음이 발생할 가능성이 있는 장소인가를 검사하는 것이다.
만일, 주변 환경에서 소음이 발생될 가능성이 없다면, 전술한 제200 단계로 진행한다. 주변 환경에서 소음이 발생될 가능성이 없다면, 제200 단계로 진행하여 제200 단계 및 제202 단계를 수행한다.
그러나, 주변 환경에서 소음이 발생될 가능성이 있다면, 주변환경에 대응하는 샘플 주파수 성분을 인출하고 전술한 제206 단계로 진행한다(제212 단계). 현재, 주변 환경에서 소음이 발생되지는 않지만, 소음이 발생될 가능성이 있는 주변 환경이라고 판단되면, 이러한 주변환경에 대응하는 샘플 주파수 성분을 인출한다. 제212 단계 후에, 제206 단계로 진행하여, 인출된 샘플 주파수 성분으로부터 소음 적응형 음향을 생성한다. 제208 단계에서, 생성된 소음 적응형 음향은 통화음과 합성된다.
이러한 본 발명인 소음 적응형 이동통신 단말장치 및 이 장치를 이용한 통화음 합성방법은 이해를 돕기 위하여 도면에 도시된 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 분야에서 통상적 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위에 한해서 정해져야 할 것이다.
이상에서 설명한 바와 같이, 본 발명에 의한 소음 적응형 이동통신 단말장치 및 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법은 이동통신 단말장치의 사용시에 돌발적으로 발생하는 소음에 대해 인간의 청각 기관의 특성인 선행 효과와 순응 효과를 이용하여 사용자의 통화음에 대한 인식 능력을 향상시키도록 한다.
또한, 사용자의 현재 주변환경을 고려하여, 사용자의 통화음에 대한 인식 능력을 향상시킨다.

Claims (19)

  1. 주변 환경의 소음을 수집하는 소음 수집 마이크;
    상기 수집된 소음을 감지하는 소음 감지부;
    상기 감지된 소음의 주파수 성분을 검출하는 주파수 성분 검출부;
    상기 검출된 주파수 성분으로부터 소음 적응형 음향을 생성하는 음향 생성부;
    수신된 통화음과 상기 소음 적응형 음향을 합성하는 통화음 합성부; 및
    상기 통화음 합성부가 소정 시간마다 동작하도록 제어하는 동작 제어부를 구비하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  2. 제1 항에 있어서, 상기 소음 수집 마이크는
    상기 수신된 통화음이 출력되는 스피커의 위치로부터 소정거리 내에 설치되는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  3. 제1 항에 있어서, 상기 소음 감지부는
    상기 수집된 소음이 소정 크기 이상일 경우에 상기 소음으로 감지하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  4. 제1 항에 있어서, 상기 주파수 성분 검출부는
    상기 감지된 소음의 주요 주파수 성분을 검출하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  5. 제4 항에 있어서, 상기 음향 생성부는
    상기 주요 주파수 성분의 크기를 축소하여 상기 소음 적응형 음향을 생성하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  6. 제1 항에 있어서, 상기 통화음 합성부는
    상기 수신된 통화음이 송신자의 음성 및 텍스트 투 스피치 기능에 의한 기계음 중 어느 하나에 해당하는 경우, 상기 수신된 통화음과 상기 소음 적응형 음향을 합성하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  7. 제1 항에 있어서, 상기 소음 적응형 이동통신 단말장치는
    주변 환경들의 소음 패턴에 따른 샘플 주파수 성분들을 저장하는 주파수 데이터 베이스를 더 구비하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  8. 제7 항에 있어서, 상기 주파수 데이터 베이스는
    상기 주변 환경들에 대응하는 상기 샘플 주파수 성분들을 룩 업 테이블로 구성하여 저장하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  9. 제7 항에 있어서, 상기 음향 생성부는
    상기 소음 감지부에서 감지되는 소음이 존재하지 않을 경우, 상기 주파수 데이터 베이스에 저장된 상기 샘플 주파수 성분들 중 위치 추적 서비스에 의해 파악된 주변 환경에 대응하는 샘플 주파수 성분을 수신하여, 상기 수신된 샘플 주파수 성분으로부터 상기 소음 적응형 음향을 생성하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  10. 제9 항에 있어서, 상기 동작 제어부는
    상기 위치 추적 서비스에 의해 위치정보를 수신하고, 상기 수신된 위치정보에 대응하는 주변 환경의 상기 샘플 주파수 성분을 상기 음향 생성부로 출력하도록 상기 주파수 데이터 베이스를 제어하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  11. 제1 항에 있어서, 상기 동작 제어부는
    통화 지속시간에 비례하여 상기 소정 시간을 증가시키는 것을 특징으로 하는 소음 적응형 이동통신 단말장치.
  12. (a) 주변 환경의 소음을 수집하는 단계;
    (b) 상기 수집된 소음이 소정 크기 이상의 소음인가를 감지하는 단계;
    (c) 상기 수집된 소음이 상기 소정 크기 이상의 소음이라면, 상기 감지된 소음의 주파수 성분을 검출하는 단계;
    (d) 상기 검출된 주파수 성분으로부터 소음 적응형 음향을 생성하는 단계; 및
    (e) 수신된 통화음과 상기 생성된 소음 적응형 음향을 소정 시간마다 합성하는 단계를 구비하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법.
  13. 제12 항에 있어서, 상기 (c) 단계는
    상기 감지된 소음의 주요 주파수 성분을 검출하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법.
  14. 제13 항에 있어서, 상기 (d) 단계는
    상기 주요 주파수 성분의 크기를 축소하여 상기 소음 적응형 음향을 생성하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법.
  15. 제12 항에 있어서, 상기 (e) 단계는
    상기 수신된 통화음이 송신자의 음성 및 텍스트 투 스피치 기능에 의한 기계음 중 어느 하나에 해당하는 경우, 상기 수신된 통화음과 상기 소음 적응형 음향을 합성하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법.
  16. 제12 항에 있어서, 상기 (e) 단계는
    (e1) 상기 수신된 통화음과 상기 생성된 소음 적응형 음향을 합성하는 단계;
    (e2) 통화 상태가 온 상태인가를 감지하는 단계; 및
    (e3) 상기 통화 상태가 상기 온 상태라면, 상기 소정 시간이 경과하였는가를 감지하는 단계를 구비하고,
    상기 소정 시간이 경과하였다면, 상기 (e1) 단계로 진행하고, 상기 소정 시간이 경과하지 않았다면, 상기 (e2) 단계로 진행하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법.
  17. 제12 항에 있어서, 상기 소음 적응형 이동통신 단말장치를 이용한 통화음 합 성방법은
    상기 (b) 단계에서, 상기 수집된 소음이 상기 소정 크기 이상의 소음이 아니라면, 위치 추적 서비스의 위치정보에 대응하는 주변 환경에서 상기 소음이 발생될 가능성이 있는가를 검사하는 단계; 및
    상기 주변 환경에서 상기 소음이 발생될 가능성이 있다면, 상기 주변환경에 대응하는 샘플 주파수 성분을 인출하고 상기 (d) 단계로 진행하는 단계를 더 구비하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법.
  18. 제17 항에 있어서, 상기 (d) 단계는
    상기 인출된 샘플 주파수 성분으로부터 상기 소음 적응형 음향을 생성하는 것을 특징으로 하는 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법.
  19. 제12 항에 있어서, 상기 (e) 단계는
    통화 지속시간에 비례하여 상기 소정 시간을 증가시키는 것을 특징으로 하는 소음 적응형 이동통신 단말장치를 이용한 통화음 합성방법.
KR1020040008924A 2004-02-11 2004-02-11 소음 적응형 이동통신 단말장치 및 이 장치를 이용한통화음 합성방법 KR101058003B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020040008924A KR101058003B1 (ko) 2004-02-11 2004-02-11 소음 적응형 이동통신 단말장치 및 이 장치를 이용한통화음 합성방법
US11/055,220 US8108217B2 (en) 2004-02-11 2005-02-11 Noise adaptive mobile communication device, and call sound synthesizing method using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040008924A KR101058003B1 (ko) 2004-02-11 2004-02-11 소음 적응형 이동통신 단말장치 및 이 장치를 이용한통화음 합성방법

Publications (2)

Publication Number Publication Date
KR20050080813A KR20050080813A (ko) 2005-08-18
KR101058003B1 true KR101058003B1 (ko) 2011-08-19

Family

ID=34825163

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040008924A KR101058003B1 (ko) 2004-02-11 2004-02-11 소음 적응형 이동통신 단말장치 및 이 장치를 이용한통화음 합성방법

Country Status (2)

Country Link
US (1) US8108217B2 (ko)
KR (1) KR101058003B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2014102938A1 (ja) * 2012-12-26 2017-01-12 トヨタ自動車株式会社 音検知装置及び音検知方法
KR102245098B1 (ko) 2014-05-23 2021-04-28 삼성전자주식회사 휴대 단말 및 그 제어 방법
TWI588819B (zh) * 2016-11-25 2017-06-21 元鼎音訊股份有限公司 語音處理之方法、語音通訊裝置及其電腦程式產品

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002051108A (ja) 2000-08-04 2002-02-15 Matsushita Electric Ind Co Ltd 電話装置および着信音制御方法
JP2002314637A (ja) 2001-04-09 2002-10-25 Denso Corp 雑音低減装置
US20030003944A1 (en) 2001-06-27 2003-01-02 Rosenzweig Michael D. Reducing undesirable audio signals

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0559962B1 (en) * 1992-03-11 1998-09-16 Mitsubishi Denki Kabushiki Kaisha Silencing apparatus
US5465401A (en) * 1992-12-15 1995-11-07 Texas Instruments Incorporated Communication system and methods for enhanced information transfer
US5617472A (en) * 1993-12-28 1997-04-01 Nec Corporation Noise suppression of acoustic signal in telephone set
US5485515A (en) * 1993-12-29 1996-01-16 At&T Corp. Background noise compensation in a telephone network
FI100840B (fi) * 1995-12-12 1998-02-27 Nokia Mobile Phones Ltd Kohinanvaimennin ja menetelmä taustakohinan vaimentamiseksi kohinaises ta puheesta sekä matkaviestin
US5970446A (en) * 1997-11-25 1999-10-19 At&T Corp Selective noise/channel/coding models and recognizers for automatic speech recognition
US6377680B1 (en) * 1998-07-14 2002-04-23 At&T Corp. Method and apparatus for noise cancellation
US7031460B1 (en) * 1998-10-13 2006-04-18 Lucent Technologies Inc. Telephonic handset employing feed-forward noise cancellation
WO2001086639A1 (en) * 2000-05-06 2001-11-15 Nanyang Technological University System for noise suppression, transceiver and method for noise suppression
IT1320364B1 (it) * 2000-05-25 2003-11-26 A E Assemblaggi Elettromeccani Dispositivo sensore di usura di una cinghia o catena di trasmissione,particolarmente per una trasmissione di comando dell'albero di
US6741873B1 (en) * 2000-07-05 2004-05-25 Motorola, Inc. Background noise adaptable speaker phone for use in a mobile communication device
US7206418B2 (en) * 2001-02-12 2007-04-17 Fortemedia, Inc. Noise suppression for a wireless communication device
US6662027B2 (en) * 2001-03-16 2003-12-09 Motorola, Inc. Method of arbitrating speakerphone operation in a portable communication device for eliminating false arbitration due to echo
US20020141599A1 (en) * 2001-04-03 2002-10-03 Philips Electronics North America Corp. Active noise canceling headset and devices with selective noise suppression
US20030103632A1 (en) * 2001-12-03 2003-06-05 Rafik Goubran Adaptive sound masking system and method
US6978010B1 (en) * 2002-03-21 2005-12-20 Bellsouth Intellectual Property Corp. Ambient noise cancellation for voice communication device
US7283956B2 (en) * 2002-09-18 2007-10-16 Motorola, Inc. Noise suppression
US7343283B2 (en) * 2002-10-23 2008-03-11 Motorola, Inc. Method and apparatus for coding a noise-suppressed audio signal
US6845338B1 (en) * 2003-02-25 2005-01-18 Symbol Technologies, Inc. Telemetric contextually based spatial audio system integrated into a mobile terminal wireless system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002051108A (ja) 2000-08-04 2002-02-15 Matsushita Electric Ind Co Ltd 電話装置および着信音制御方法
JP2002314637A (ja) 2001-04-09 2002-10-25 Denso Corp 雑音低減装置
US20030003944A1 (en) 2001-06-27 2003-01-02 Rosenzweig Michael D. Reducing undesirable audio signals

Also Published As

Publication number Publication date
US20050177366A1 (en) 2005-08-11
US8108217B2 (en) 2012-01-31
KR20050080813A (ko) 2005-08-18

Similar Documents

Publication Publication Date Title
CN101163354B (zh) 用于运行助听器的方法以及助听器
US6415034B1 (en) Earphone unit and a terminal device
JP2007019898A (ja) 携帯電話機
US20120101819A1 (en) System and a method for providing sound signals
EP1385324A1 (en) A system and method for reducing the effect of background noise
KR101647974B1 (ko) 스마트 믹싱 모듈을 갖춘 스마트 이어폰, 스마트 믹싱 모듈을 갖춘 기기, 외부음과 기기음을 혼합하는 방법 및 시스템
KR20140145108A (ko) 이동 통신 장치에서의 음성 통신 개선방법 및 시스템
US6952672B2 (en) Audio source position detection and audio adjustment
JP2003520469A (ja) 雑音低減装置及び方法
CN101277331A (zh) 声音再现设备和声音再现方法
US20030061049A1 (en) Synthesized speech intelligibility enhancement through environment awareness
CN108235181A (zh) 在音频处理装置中降噪的方法
JP5027127B2 (ja) 背景雑音に応じてバイブレータの動作を制御することによる移動通信装置の音声了解度の向上
JP2010062663A (ja) 音声信号処理装置、音声信号処理方法、及び、通信端末
JP2016170405A (ja) 音声処理装置、音声処理方法及び音声処理プログラム
EP2482566A1 (en) Method for generating an audio signal
CN105100367A (zh) 交通鸣笛安全警示系统与方法
JP4640801B2 (ja) 電話機
CN103731541A (zh) 对通话中的音频进行控制的方法及终端
JP3482465B2 (ja) モバイルフィッティングシステム
US20110105034A1 (en) Active voice cancellation system
KR101058003B1 (ko) 소음 적응형 이동통신 단말장치 및 이 장치를 이용한통화음 합성방법
EP4258689A1 (en) A hearing aid comprising an adaptive notification unit
CN109040473B (zh) 终端音量调节方法、系统和手机
CN113411715B (zh) 说话声音音量的提示方法、耳机及可读存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140730

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150730

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160728

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170728

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190730

Year of fee payment: 9