KR101062870B1 - 멀티미디어 훈련 신호를 구비한 음향 반향 제거기 - Google Patents

멀티미디어 훈련 신호를 구비한 음향 반향 제거기 Download PDF

Info

Publication number
KR101062870B1
KR101062870B1 KR1020067017518A KR20067017518A KR101062870B1 KR 101062870 B1 KR101062870 B1 KR 101062870B1 KR 1020067017518 A KR1020067017518 A KR 1020067017518A KR 20067017518 A KR20067017518 A KR 20067017518A KR 101062870 B1 KR101062870 B1 KR 101062870B1
Authority
KR
South Korea
Prior art keywords
audio
acoustic echo
echo canceller
application
electronic device
Prior art date
Application number
KR1020067017518A
Other languages
English (en)
Other versions
KR20070015374A (ko
Inventor
폴 곳하드 크넛슨
안드레아스 맷씨아스 아우스트
스니그드하 베르마
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20070015374A publication Critical patent/KR20070015374A/ko
Application granted granted Critical
Publication of KR101062870B1 publication Critical patent/KR101062870B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M9/00Arrangements for interconnection not involving centralised switching
    • H04M9/08Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic
    • H04M9/082Two-way loud-speaking telephone systems with means for conditioning the signal, e.g. for suppressing echoes for one or both directions of traffic using echo cancellers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S5/00Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)

Abstract

음향 반향 제거기를 가지고 오디오 애플리케이션과, 회의 애플리케이션과 전화통신 애플리케이션 중 적어도 하나를 구현할 수 있는 전자 디바이스에는, 음향 반향 제거기에 관한 배경 훈련 방법이 제공된다. 이 방법은 음향 반향 제거기를 훈련하기 위한 비훈련 오디오 애플리케이션에 대응하는 사운드를 이용하는 단계(650)를 포함한다.

Description

멀티미디어 훈련 신호를 구비한 음향 반향 제거기 {ACCOUSTIC ECHO CANCELLER WITH MULTIMEDIA TRAINING SIGNAL}
본 발명은 일반적으로 음향 반향 제거기에 관한 것으로, 특히 회의나 전화통신 음향 반향 제거기에 관한 배경 훈련 방법에 관한 것이다.
음향 반향은, 마이크로폰으로 피드백되는 스피커로부터 나오는 사운드로부터 생기는 원하지 않는 상태이다. 그러한 반향을 감소시키거나 제거하기 위해서는 음향 반향 제거기가 사용된다. 하지만 음향 반향 제거기가 효과적이 되기 위해서는, 훈련되어야만 한다.
불행하게도, 음향 반향 제거기의 중요한 문제점은 그것의 훈련기간 동안 음향 반향이 존재한다는 점이다. 이러한 반향을 최소화하기 위해서는, 훈련 신호를 사용할 수 있지만, 이는 사용자로 하여금 성가신 사운드(예컨대, 높은 에너지와 전체 대역폭을 가진)를 받게 한다. 대안적으로, 반향 제거기의 마지막 작동으로부터의 계수의 세트를 가지고 시작할 수 있지만, 음향 환경이 바뀌면 저장된 계수는 쓸모없게 되거나, 0의 계수 포인트로부터 시작하는 것보다 아마도 더 나빠지게 된다. 이 계수는 음향 반향 제거기에 포함된 적응 필터에 대응한다. 이 적응 필터는 그것이 이용되는 환경에 음향 반향 제거기를 적응시키는 기능을 한다.
반향 기간을 최소화하는 더 복잡한 접근법은, 리모트(remote) 스테이션에 있는 원격 사용자가 말할 때 귀환 채널을 일시적으로 약음화시키고 반향 제거기가 이 시간 동안 훈련받는 것을 허용하는 것을 수반한다. 하지만 이러한 접근법은 훈련 동안 이 시스템을 불리하게 반이중(half-duplex) 통신으로 감소시킨다. 또 다른 접근법은 적응 필터의 제거 요구 사항을 감소시키도록 로컬 사용자가 마이크로폰에 이야기할 때 국부 스피커 볼륨을 감소시키는 것을 수반한다.
따라서, 종래 기술의 전술한 문제점들을 극복하는 반향 제거기에 관한 배경 훈련 방법을 가지는 것이 바람직하고 크게 유리하게 된다.
전술한 문제점과 종래 기술의 다른 관련된 문제점은 본 발명인 회의 또는 전화통신 반향 제거기에 관한 배경 훈련 방법에 의해 해결된다. 본 발명은 오디오 애플리케이션과 함께 회의(비디오 회의와 원격 화상 회의를 포함하는) 및/또는 전화통신{인터넷 프로토콜(IP) 전화통신} 애플리케이션을 구현할 수 있는 디바이스에 제공되어, 배경에서의 반향 제거기를 훈련시키도록 오디오 애플리케이션이 사용된다. 또한, 반향 제거기를 훈련시키는 데 있어 필수적인 모든 주파수를 포함하는 미리 명시된 오디오 시퀀스가, 예정된 회의 호출이 일어날 것이라는 것 등을 상기시키는 것으로서 "인입 호출(incoming call)"로서 사용될 수 있다.
본 발명의 일 양상에 따르면, 음향 반향 제거기를 가지고 오디오 애플리케이션과, 회의 애플리케이션과 전화통신 애플리케이션 중 적어도 하나를 구현할 수 있는 전자 디바이스에는, 음향 반향 제거기에 관한 배경 훈련 방법이 제공된다. 이 방법은 음향 반향 제거기를 훈련하기 위한 비훈련(non-training) 오디오 애플리케이션에 대응하는 사운드를 이용하는 단계를 포함한다.
본 발명의 또 다른 양상에 따르면, 오디오 애플리케이션과, 회의 애플리케이션과 전화통신 애플리케이션 중 적어도 하나를 구현할 수 있는 전자 디바이스에서 사용하기 위한 음향 반향 제거기가 제공된다. 이 음향 반향 제거기는 비훈련 오디오 애플리케이션에 대응하는 사운드를 사용하여 훈련되도록 적응된 적응 필터를 포함한다.
본 발명의 또 다른 양상에 따르면, 주변 디바이스에 포함된 음향 반향 제거기에 관한 배경 훈련 방법이 제공된다. 주변 디바이스는 오디오 애플리케이션을 구현할 수 있고, 회의 애플리케이션과 전화통신 애플리케이션 중 적어도 하나를 구현할 수 있는 컴퓨터에 연결하기 위한 범용 직렬 버스(USB) 인터페이스와 IEEE 1394 인터페이스 중 적어도 하나를 더 포함한다. 이 방법은 USB 인터페이스와 IEEE 1394 인터페이스 중 적어도 하나를 거쳐 컴퓨터로부터 사운드를 수신하는 단계를 포함한다. 이 사운드는 비훈련 오디오 애플리케이션에 대응한다. 이 방법은 또한 주변 디바이스에서 음향 반향 제거기를 훈련하기 위해 비훈련 오디오 애플리케이션에 대응하는 사운드를 이용하는 단계와, 주변 디바이스에서의 음향 반향 제거기를 사용하여 컴퓨터에 의해 구현된 회의 애플리케이션과 전화통신 애플리케이션 중 적어도 하나 동안에 반향 제거를 수행하는 단계를 포함한다.
본 발명의 이들 및 다른 양상, 특징 및 장점은, 첨부 도면과 함께 읽혀질 바람직한 실시예의 다음 상세한 설명으로부터 분명해진다.
도 1은 본 발명의 예시적인 일 실시예에 따라 본 발명이 적용될 수 있는 전자 디바이스(100)를 예시하는 블록도.
도 2는 본 발명의 예시적인 일 실시예에 따라 본 발명이 적용될 수 있는 음향 반향 제거기 시스템(200)을 예시하는 블록도.
도 3a, 도 3b 및 도 3c는 개인용 컴퓨터(399), 모바일 컴퓨터(398)(예컨대, 랩톱) 및 PDA(Personal Digital Assistant)(397) 각각의 마이크로폰 입력으로의 스피커 출력의 피드백에 관련된 음향 반향 경로(320)를 예시하는 도면.
도 4는 본 발명의 또 다른 예시적인 실시예에 따라 본 발명이 적용될 수 있는 음향 반향 제거기(400)를 예시하는 블록도.
도 5는 본 발명의 또 다른 예시적인 실시예에 따라 본 발명이 적용될 수 있는 음향 반향 제거기(500)를 예시하는 블록도.
도 6은 본 발명의 예시적인 일 실시예에 따라 원격 회의 또는 전화통신 반향 제거기에 관한 배경 훈련 방법을 예시하는 흐름도.
도 7은 본 발명의 예시적인 일 실시예에 따라 본 발명이 적용될 수 있는 스테레오 음향 반향 제거기(700)를 도시하는 블록도.
도 8은 본 발명의 또 다른 예시적인 일 실시예에 따라 본 발명이 적용될 수 있는 음향 반향 제거기(800)를 예시하는 블록도.
도 9는 본 발명의 또 다른 예시적인 일 실시예에 따라 본 발명이 적용될 수 있는 음향 반향 제거기(900)를 예시하는 블록도.
본 발명은 회의(원격 화상 회의와 비디오 회의를 포함하는) 또는 전화통신{인터넷 프로토콜(IP) 전화통신} 음향 반향 제거기에 관한 배경 훈련 방법에 관한 것이다. 본 발명은 회의 또는 전화통신 애플리케이션을 구현할 수 있고, 또한 오디오 애플리케이션을 구현할 수 있는 디바이스 상에 제공된다. 본 발명이 구현되는 디바이스는 회의 또는 전화통신 중 하나를 행할 수 있을 뿐만 아니라 둘 다 행할 수 있다는 점을 알아야 한다. 하지만 본 명세서에서 사용된 바와 같이 "비디오 회의(video conferencing)"라는 어구는 비디오와 오디오 모두를 포함하는 회의 애플리케이션을 가리킨다는 점을 또한 알아야 한다. 유리하게 본 발명은 음향 반향 제거기를 훈련하기 위해 오디오 애플리케이션이 사용될 수 있게 허용함으로써, 음향 반향 제거기에 관한 연속 훈련을 제공할 수 있다. 즉 오디오 애플리케이션의 오디오 출력을 사용함으로써, 오디오 애플리케이션의 사용 중에 음향 반향 제거기가 훈련된다. 또한, 반향 제거기를 훈련하기 위한 모든 필요 주파수를 포함하는 미리 명시된 오디오 시퀀스 또는 일부 다른 사운드가, 예정된 회의 호출이나 미팅이 막 시작한다고 상기시키는 것, 에러나 경고 표시기로서, 운영 시스템이나 애플리케이션에 의해 입력에 관한 요청이 이루어짐을 표시하는 것 등으로서 인입 호출이나 전자 우편 통지로서 사용될 수 있다. 미리 명시된 오디오 시퀀스는 전술한 필수 주파수만을 포함하거나 필수 주파수 외의 다른 주파수를 포함할 수 있어, 오디오 시퀀스의 훈련 성질을 감추게 된다는 것이 인식될 것이다.
본 발명은 개인용 컴퓨터(PC), 휴대용 컴퓨팅 디바이스(예컨대, 랩톱 컴퓨 터, PDA 등) 및 개선된 다용도 전화기 등에 구현될 수 있지만 이들에 제한되지는 않는다. 오디오 애플리케이션은, 스트리밍 오디오, 동화상 전문가 그룹 레이어-3 오디오(MP3) 플래이백(playback), 컴팩트 디스크(CD) 플래이백, 디지털 다기능(versatile) 디스크(DVD) 플래이백, 라디오, 연관된 오디오를 가지는 비디오 게임 등을 포함하지만 이들에 제한되지는 않는다.
"오디오 애플리케이션"과 "비훈련 오디오 애플리케이션"이라는 어구는, 본 명세서에서 적어도 오디오(즉, 오디오 출력을 가지는)를 포함하고, 음향 반향 제거기를 훈련할 목적으로만 설계되지 않고 오락(예컨대, 음악, 멀티미디어 등)이나 다른 목적을 위해 설계되는 임의의 애플리케이션을 가리키기 위해 교환가능하게 사용된다. 이들 유형의 오디오 애플리케이션은, 음향 오디오 제거기를 훈련시키는 목적만을 위해 설계되지 않으면서, 배경에서의 반향 제거기를 훈련시켜 음향 반향 제거기에 관한 종래 기술의 훈련 방법의 상기 및 다른 확인된 문제들을 최소화하거나 완전히 제거하기 위해 본 발명에 따라 이용된다. 그러므로 오디오와 비디오 모두를 포함하는(예컨대, DVD의 플래이백) 애플리케이션은 본 발명에 따라 반향 제거기를 훈련시키는 데 사용될 수 있다. 게다가, 심지어 음향 제거기를 훈련시키기 위해 필수적인 모든 주파수를 포함하는 특별히 설계된 오디오 사운드나 시퀀스가, 그러한 특별히 설계된 오디오 사운드나 시퀀스가 일부 이벤트(예컨대, 인입 호출, 전자 우편, 다가오는 원격 회의나 비디오 회의, 경고, 에러 등)의 사용자에게 표시를 제공하는 것과 같은 일부 다른 비훈련 목적을 위해 이용될 때, 또한 본 발명에 따라 사용될 수 있다.
반향 제거기의 훈련을 위한 오디오 애플리케이션의 사용은, 반향 제거기가 구현되는 환경에 관해 반향 제거기를 계속해서 훈련시켜, 반향 제거기가 회의나 전화통신과 같은 양방향 통신 애플리케이션을 위해 항상 준비되게 유지시킨다. 그러므로 본 발명은, 예컨대 반향 제거기도 포함하는 플랫폼/전자 디바이스 상에서 재생되는 멀티미디어를 이용함으로써, 반향 제거기의 훈련을 유리하게 감춘다.
본 발명은 다양한 형태의 하드웨어, 소프트웨어, 펌웨어, 특별한 목적의 프로세서나 이들의 결합으로 구현될 수 있음을 이해해야 한다. 바람직하게, 본 발명은 하드웨어와 소프트웨어의 결합으로서 구현된다. 게다가, 이 소프트웨어는 프로그램 저장 디바이스 상에 명백히 구현된 애플리케이션 프로그램이나 디바이스 드라이버로서 구현될 수 있다. 이러한 애플리케이션 프로그램이나 디바이스 드라이버는 임의의 적합한 아키텍처를 포함하는 기계에 업로드되고 그러한 기계에 의해 실행될 수 있다. 바람직하게, 그러한 기계는 하나 이상의 중앙 처리 유닛(CPU), 랜덤 액세스 메모리(RAM), 입력/출력(I/O) 인터페이스(들)과 같은 하드웨어를 가지는 컴퓨터 플랫폼 상에서 구현된다. 컴퓨터 플랫폼은 또한 운영 시스템과 마이크로명령어 코드를 포함한다. 본 명세서에서 설명된 다양한 공정과 기능은, 마이크로명령어 코드의 부분, 애플리케이션 프로그램의 부분 또는 운영 시스템을 거쳐 실행되는 디바이스 드라이버(또는 그들의 결합체)의 부분일 수 있다. 또한, 다양한 다른 주변 디바이스가 추가 데이터 저장 디바이스와 프린팅 디바이스와 같은 컴퓨터 플랫폼에 연결될 수 있다. 오디오 카드의 부분인 메모리 디바이스 상에 저장된 디바이스 드라이버는 오디오 카드에 적용 가능할 수 있다는 점을 알아야 한다. 그러한 경우, 반 향 제거기는 도 1에 관해 도시되고 아래에 설명된 것과 같은 입력 및 출력용 오디오 카드를 이용하게 된다. 그렇지 않다면, 반향 제거기는 예컨대 도 1에 관해 도시되고 아래에 설명된 것과 같은 개인용 컴퓨터나, 도 9에 관해 도시되고 아래에 설명된 바와 같은 범용 직렬 버스(USB) 인터페이스를 거쳐 개인용 컴퓨터에 결합된 주변 디바이스 상의 하드웨어로 구현될 수 있다.
첨부 도면에 도시된 구성 시스템 성분과 방법 단계의 일부가 바람직하게 소프트웨어로 구현되기 때문에, 시스템 성분(또는 공정 단계들) 사이의 실제 연결은 본 발명이 프로그래밍되는 방식에 따라 달라질 수 있다는 점이 또한 이해되어야 한다. 본 명세서에 주어진 가르침에 따르면, 당업자는 본 발명의 이들 및 유사한 구현예나 구성예를 예측할 수 있을 것이다.
도 1은 본 발명이 본 발명의 예시적인 일 실시예에 따라 적용될 수 있는 전자 디바이스(100)를 예시하는 블록도이다. 이 전자 디바이스(100)는 전화통신 및 회의 애플리케이션을 구현할 수 있고 또한 오디오 애플리케이션을 구현할 수 있다. 본 발명이 구현되는 전자 디바이스(100)는, 개인용 컴퓨터(PC), 휴대용 컴퓨팅 디바이스(예컨대, 랩톱 컴퓨터, PDA 등), 개선된 다용도 전화기 등일 수 있지만 이들에 제한되지는 않는다.
전자 디바이스(100)는 시스템 버스(104)를 거쳐 다른 성분에 작동 가능하게 결합된 적어도 하나의 프로세서(CPU)(102)를 포함한다. 읽기 전용 메모리(ROM)(106), 랜덤 액세스 메모리(RAM)(108), 디스플레이 어댑터(110), I/O 어댑터(112), 사용자 인터페이스 어댑터(114), 사운드 어댑터(또한 본 명세서에서 "오 디오 카드"라고도 부름)(199) 및 네트워크 어댑터(198)가 시스템 버스(104)에 작동 가능하게 결합된다.
디스플레이 디바이스(116)는 디스플레이 어댑터(110)에 의해 시스템 버스(104)에 작동 가능하게 결합된다. 디스크 저장 디바이스(예컨대, 자기 또는 광학 디스크 저장 디바이스)(118)는 I/O 어댑터(112)에 의해 시스템 버스(114)에 작동 가능하게 결합된다.
사용자 인터페이스(120)는 사용자 인터페이스 어댑터(114)에 의해 시스템 버스(104)에 작동 가능하게 결합된다. 사용자 인터페이스(120)는 전자 디바이스(100)에 정보를 입력하고 전자 디바이스(100)로부터 정보를 출력하기 위해 사용된다. 사용자 인터페이스(120)는, 예컨대 마우스, 키보드, 터치패드 등일 수 있다.
적어도 하나의 스피커(이후, "스피커")(150)와 적어도 하나의 마이크로폰(이후 "마이크로폰")(151)은 반향 제거기(152)에 작동 가능하게 결합된다. 스피커(150), 마이크로폰(151) 및 반향 제거기(152)는 사운드 어댑터(199)에 의해 시스템 버스(104)에 작동 가능하게 결합된다. 도 1에 별개의 분리된 요소로서 도시되었지만, 반향 제거기(152)는 본 발명에 관해 위에서 언급한 대로 하드웨어, 소프트웨어, 또는 이들의 임의의 결합체로서 구현될 수 있다는 점을 알아야 한다. 따라서, 본 발명의 다른 실시예에서, 반향 제거기는 디스크 저장 디바이스(118), RAM(108) 등과 같은 시스템 메모리 디바이스에서 전체적으로 또는 부분적으로 존재할 수 있다.
(디지털 및/또는 아날로그) 모뎀(196)은 네트워크 어댑터(198)에 의해 시스 템 버스(104)에 작동 가능하게 결합된다. 네트워크 어댑터(198)에 의한 시스템 버스(104)에 결합된 모뎀(196)의 이전 배치는 외부 모뎀에 관한 것이다. 내부 모뎀의 경우, 모뎀은 네트워크 어댑터(198)에 관한 필요성 없이 시스템 버스(104)에 직접 결합된다.
전자 디바이스(100)는 또한 RAM(108)에 포함되는 버퍼(171)와 사운드 어댑터(199)에 포함되는 버퍼(172)를 포함한다.
본 발명이 적용될 수 있는 음향 반향 제거기는 "전이중(full-duplex)" 스피커폰" 작동 모드에서 사용될 디바이스의 오디오 입력 경로에 삽입된다. 도 2는 본 발명의 예시적인 일 실시예에 따라 본 발명이 적용될 수 있는 음향 반향 제거기 시스템(200)을 예시하는 블록도이다.
음향 반향 제거기 시스템(200)은, 네트워크(299)를 통해 연결된 국부 스테이션(210)과 원격 스테이션(250)을 포함한다. 회의 및/또는 전화통신은 국부 스테이션(210)과 원격 스테이션(250)에 있는 관련자 사이에서 처리될 수 있다.
국부 스테이션(210)은 마이크로폰(212), 스피커(214), 적응 필터(216), 가산기(218) 및 승산기(220)를 포함한다. 원격 스테이션(250)은 마이크로폰(252), 스피커(254), 적응 필터(256), 가산기(258) 및 승산기(260)를 포함한다.
도 3a, 도 3b 및 도 3c는 개인용 컴퓨터(399), 모바일 컴퓨터(398)(예컨대, 랩톱) 및 PDA(397) 각각에서 마이크로폰 입력으로의 스피커 출력의 피드백에 관련된 음향 반향 경로(320)를 예시하는 도면이다. AEP(320)는 도 3a, 도 3b 및 도 3c에 도시된 개인용 컴퓨터(399), 모바일 컴퓨터(398) 및 PDA(397)를 포함하지만 이 들에 제한되지는 않는 임의의 개수의 디바이스에 영향을 미칠 수 있다.
도 4는 본 발명의 또 다른 예시적인 일 실시예에 따라 본 발명이 적용될 수 있는 음향 반향 제거기(400)를 예시하는 블록도이다. 음향 반향 제거기(400)는 오디오 입력(498)과 오디오 출력(497)을 가지는 개인용 컴퓨터(499)의 스피커(414)와 마이크로폰(412) 사이에 삽입된다. 음향 반향 제거기(400)는 적응 필터(416), 가산기(418) 및 승산기(420)를 포함한다.
개인용 컴퓨터(499)의 오디오 출력은 스피커(414)와 적응 필터(416)에 입력된다. 마이크로폰(412)의 출력과 적응 필터(416)의 출력은 가산기(418)에 입력된다. 가산기(418)의 출력은 승산기(420)에 입력되고, 개인용 컴퓨터(499)의 오디오 입력에 입력된다. 적응 속도 제어(u)는 또한 승산기(420)에 입력된다. 승산기(420)의 출력(예컨대 에러 신호)은 음향 반향을 최소화하거나 제거하는 데 사용하기 위해 적응 필터(416)에 입력된다.
적응 속도 제어(u)는 명목상 작은 값으로, 통상 필터 신호 크기의 1/100보다 작다. u를 감소시키면 적응 필터가 적응하는데 걸리는 시간을 증가시키고 반향을 더 정확하게 제거한다는 이익을 얻게 된다. 하지만 반향 상태는 종종 시간에 따라 변하고, 시간에 따라 변하는 반향을 상대적으로 신속하게 제거하도록 적응시키는 것이 필수적이다. u의 최대값은 공지 기술을 사용하여 추정될 수 있다.
도 5는, 본 발명의 또 다른 예시적인 실시예에 따라 본 발명이 적용될 수 있는 음향 반향 제거기(500)를 예시하는 블록도이다. 이러한 음향 반향 제거기(500)는 오디오 입력(598)과 오디오 출력(597)을 가지는 개인용 컴퓨터(599)의 스피 커(514)와 마이크로폰(512) 사이에 삽입된다. 음향 반향 제거기(500)는 상이한 오디오 샘플 속도를 가지고 작동할 수 있다. 음향 반향 제거기(500)는 적응 필터(516), 가산기(518), 승산기(520), 제 1 지연 매칭 버퍼(532), 제 1 저역 필터(LPF)(534), 제 1 샘플 속도 변환기(536), 제 2 지연 매칭 버퍼(542), 제 2 저역 필터(LPF)(544) 및 제 2 샘플 속도 변환기(546)를 포함한다.
제 1 LPF(534)와 제 2 LPF(544)는 에일리어싱 제거(anti-aliasing)를 위해 사용된다.
제 1 샘플 속도 변환기(536)와 제 2 샘플 속도 변환기(546)는 오락 샘플 속도(통상 44.1 또는 48Ksps)를 통신 샘플 속도(통상 8Ksps)에 매칭하기 위해 샘플 속도 변환을 수행하기 위해 이용된다. 제 1 LPF(534)와 제 2 LPF(544)는 오디오 통신 대역폭만을 보존하기 위해 이용된다. 오디오 통신 대역폭은 오디오 회의 및 전화통신에 대응하고, 300㎐ 내지 3.3㎑일 수 있으나 이들에 제한되지는 않는다. 본 발명에 따른 이러한 대역폭에 걸친 반향 제거는 처리 전력을 절약하게 된다. 예컨대, 더 낮은 샘플 속도로 처리함으로써, 각 샘플은 더 많은 시간을 커버하게 되고, 원하는 시간 범위(span)를 커버하기 위해 더 작은 개수의 탭이 적응 필터에서 요구되며, 적응 필터의 결과를 계산하기 위해 더 많은 시간이 이용 가능하게 된다. 도 5에 도시된 음향 반향 제거기(500)가 적용될 시스템에서는, 아날로그-디지털 변환(ADC)과 디지털-아날로그 변환(DAC)이 오락 품질 오디오용으로 높은 샘플 속도로 샘플 속도 변환기(536, 546)에 의해 수행되지만, 통신 애플리케이션(회의 및 전화통신)에 관해서는, 표준 8Ksps 오디오 샘플링이 이용될 수 있다.
제 1 지연 매칭 버퍼(532)와 제 2 지연 매칭 버퍼(542)는 상이한 샘플 속도로 버퍼 지연을 매칭하기 위해 이용된다. 제 1 지연 매칭 버퍼(532)와 제 2 지연 매칭 버퍼(542)에 의해 매칭될 버퍼는, 예컨대 본 명세서에서 설명된 바와 같이 소프트웨어 버퍼(예컨대, 버퍼 171) 및/또는 하드웨어 버퍼(예컨대, 172)일 수 있다.
본 발명이 적용되는 컴퓨터나 다른 전자 디바이스가 비디오 회의를 위해 반드시 항상 사용되는 것은 아니므로, 다른 애플리케이션은 반향 제거기를 필요로 하지 않게 된다. 반향 제거기가 오디오 출력을 만들어내는 애플리케이션의 작동 중에 동작한다면, 반향 제거기는 다음 양방향 오디오 통신 애플리케이션에 관해 준비된 훈련된 상태로 유지된다. 간단한 LMS(Least Mean Squared) 적응 필터 기반의 반향 제거기가 상당한 양의 처리 전력을 사용하므로, 적응 필터 계수(반향 프로파일)를 최근의 것으로 유지하기 위해 종종 활성화되는 배경 훈련은 연속적으로 작동할 필요가 없게 되지만, 시스템 프로세서에 부담이 될 정도로 연속적이지는 않다. 예컨대, 프로세서의 휴지(idle) 사이클이 컴퓨터의 스피커가 사용될 때는 언제나, 비디오 게임, MP3, CD 또는 다른 오디오 파일을 재생, 비디오 파일의 재생에서나 심지어 사용자에게 전자 우편과 다른 경고를 알리는 PC의 통상적인 벨이나 휘슬(whistle)이 울리는 동안에도 반향 제거기를 훈련시키기 위해 사용될 수 있다.
마이크로소프트사의 윈도우 및 다른 비실시간 운영 시스템에서, 스피커로 가는 데이터와 마이크로폰으로부터의 데이터를 버퍼링함으로써 오디오가 구현되므로, 그러한 시스템은 운용 시스템에 의해 지시받은 대로, 버스트로 작동하고, 데이터로 가득찬 버퍼를 처리한다. 필터 계수 적응은 전술한 바와 같이 진행되고, 도 6에 관해 예시되어 있다.
도 8은 본 발명의 또 다른 예시적인 실시예에 따라, 본 발명이 적용될 수 있는 음향 반향 제거기(800)를 예시하는 블록도이다. 이 음향 반향 제거기(800)는 복수의 오디오 소스(898)를 가지는 개인용 컴퓨터의 스피커(814)와 마이크로폰(812) 사이에 삽입된다. 데이터 흐름은 도 8에 도시된 것과 같아.
플래이백 볼륨 제어 사용자 인터페이스(820)는 복수의 오디오 소스(898)의 플래이백 볼륨을 제어할 수 있다. 복수의 오디오 소스(898)가 플래이백 볼륨 제어 사용자 인터페이스(820)로 입력되기 전에 유도된 임의의 스트림 버퍼 지연은 반향 제거 문제에 적용되지 않음을 알아야 한다. 플래이백 볼륨 제어 사용자 인터페이스(820)는 하드웨어 출력 버퍼(822)와 윈도우 스트림 버퍼(824)에 결합된다. 하드웨어 출력 버퍼(822)는 또한 스피커(814)에 결합된다. 윈도우 스트림 버퍼(824)는 저역 필터(LPF)(828)에 결합되는 출력 지연 매칭 버퍼(826)에 결합된다. LPF(828)는 적응 필터(832)에 결합되는 샘플 속도 변환 디바이스(830)에 결합된다. 적응 필터(832)는 승산기(834)와 가산기(836)에 결합된다. 승산기(834)는 또한 가산기(836)에 직접 결합된다.
마이크로폰(812)은 기록 제어 사용자 인터페이스(844)에 결합되는 하드웨어 입력 버퍼(840)에 결합된다. 기록 제어 사용자 인터페이스(844)는 입력 지연 매칭 버퍼(848)에 결합되는 윈도우 스트림 버퍼(846)에 결합된다. 입력 지연 매칭 버퍼(848)는 샘플 속도 변환 디바이스(852)에 결합되는 저역 필터 LPF(850)에 결합된다. 샘플 속도 변환 디바이스(852)는 또한 가산기(836)에 결합된다.
적응 카운터(854)는 본 발명이 적용되는 시스템의 프로세서(미도시)에 의해 액세스 가능하다. 적응 카운터(854)는 저항이나 메모리 위치일 수 있지만 그것들에 제한되지는 않는다. 적응 카운터(854)는 음향 반향 제거기를 훈련할 때 배경 처리를 제한하기 위해 사용된다.
즉, 적응 카운터(854)는 적응 필터의 적응 속도를 감소시키는 한 가지 방식을 제공한다. 프로세서가 높은 프로세서 부하를 가지게 되면, 반향 제거 적응 일은, 오직 모든 다른 호출에 대해 반향 제거 적응 일에 적응시킴으로써 또는 적응 카운터(854)에 의해 설정된 비율(ratio)로, 프로세서 부하를 경감할 수 있다. 적응 카운터(854)는 또한 도 6의 방법에 관해 아래에 더 설명된다.
반드시 그래야 하지는 않지만 음향 반향 제거기(800)가 적용될 시스템은 사운드 카드를 포함한다고 가정한다. 본 발명이 사운드 카드를 가지는 시스템에 적용되는 경우, 버퍼{예컨대, 윈도우 스트림 버퍼(824, 846}가 사운드 카드와 샘플의 스트림을 교환하기 위해 사용된다. 이러한 경우의 버퍼는 윈도우 애플리케이션이 OS 작업(task) 스위치 사이에서 고갈되거나 넘치지 않으면서 버퍼를 채우고 비울 수 있도록, 충분한 샘플을 저장하는 소프트웨어 구조체{예컨대, 도 1에 도시된 버퍼(171)와 같은}이다. 또한 오디오 플래이백이나 캡처(capture)(마이크로폰으로부터의)를 위한 사운드 카드{예컨대, 도 1에 도시된 버퍼(172)와 같은} 상에는 하드웨어 버퍼가 존재한다. 버퍼 지연은 윈도우 환경에서 중요할 수 있다. 그러므로 적응 필터(832)의 지연이, 적응 필터(832)의 지연 범위에서의 버퍼 지연을 통합할 필요없이 음향 반향 지연 한계(range)에 미치도록 조정될 필요가 있다. 최대 100㎳의 방향을 다루기 위해서는, 절대적으로 최소한 800개의 탭들이 8Ksps에서 필요하게 된다. 각각의 반향이 위상, 진폭 및 각각의 반향 경로의 일반적인 주파수 응답을 매칭하기 위한 필터가 될 수 있도록, 더 많은 탭이 제공된다(예컨대, 1024개의 탭).
윈도우 버퍼{예컨대, 도 1에 도시된 버퍼(171)와 같은}와 하드웨어 입력 버퍼 및 하드웨어 출력 버퍼{예컨대, 도 1에 도시된 버퍼(172)와 같은}가 동일한 시스템에서는, 지연 매칭 버퍼{예컨대, 버퍼(826, 846)}가 존재하지 않을 수 있다. 하지만, 지연 매칭 버퍼(826, 846)가 도 8에 포함되어, 스피커(814)로부터 적응 필터(832)로 되돌아가는 경로는 마이크로폰(812)으로부터 적응 필터(832)로 되돌아가는 경로와 동일한 지연을 가진다.
도 6은 본 발명의 예시적인 일 실시예에 따라, 원격 회의 또는 전화통신 반향 제거기에 관한 배경 훈련 방법을 예시하는 흐름도이다.
적응 카운터의 값은 0으로 초기화되거나 리셋된다(단계 601).
적응 및 필터링은 오직 오디오가 시스템으로부터 나올 때 실용적이 된다. 오디오 애플리케이션이 실행되어야 하거나 운영 시스템(OS)이 사운드를 생성해야 한다. 그러므로 오디오 애플리케이션이 현재 OS에 의해 실행중인지 또는 사운드의 재생이 OS에 의해 시작되고 있는지가 결정된다(단계 605). 만약 그렇다면, 방법은 단계 610으로 진행한다. 그렇지 않으면, 운영 시스템으로의 복귀가 이루어진다. 사운드는 전자 우편의 도착에 관련된 사운드, 일부 이벤트의 표시 사운드(예컨대, 인입 호출, 회의 호출 리마인더, 경고 등의 통지) 및 심지어는 오직 반향 제거기를 훈련 시키는 것 외의 목적을 위해 또한 사용된 미리 명시된 사운드 시퀀스일 수 있지만 이들에 제한되지 않는다는 점을 알아야 한다.
평균 프로세서 부하에 따라, 상이한 접근이 반향 제거기 필터를 적응시키기 위해 이루어질 수 있다. 그러므로 단계 610에서는 평균 프로세서 부하가 낮거나 높은지가 결정된다. 평균 프로세서 부하가 낮다면, 반향 제거기는 모든 오디오 샘플을 사용하여 연속으로 작동할 수 있고(단계 650), 이후 운영 시스템으로의 복귀가 이루어진다. 그렇지 않고 평균 프로세서 부하가 높다면, 필터는 간헐적으로 적응된다. 필터를 간헐적으로 적응시키기 위해서는, 카운터(이후, "적응 카운터"라고 한다)가 사용되고, 적응 카운터의 값이 증가된다(단계 615). 적응 필터를 간헐적으로 적응시키기 위해 카운터를 사용하는 것에 본 발명이 제한되지 않고, 따라서 본 발명의 취지를 유지하면서, 다른 접근이 또한 이용될 수 있다는 점을 알아야 한다.
적응 및 필터링은 오직 도 6의 방법/루틴(routine)으로의 모든 적응 호출 동안 완성된다. 그렇지 않으면, 데이터는 오직 샘플당 2n개의 연산으로부터 샘플당 1개의 연산까지 계산상 부하를 감소시키는 필터 입력 버퍼(하지만 적응은 수행되지 않음)에 저장되고, 여기서 n은 전역(full-band) LMS 반향 제거기가 주어진 경우, 필터에서의 탭의 개수이다.
그러므로 적응 카운터의 값이 미리 명시된 적응 카운터 비교 값 이상인지가 결정된다(단계 620). 만약 그렇다면 적응 카운터의 값이 리셋되고(0으로)(단계 625), 방법은 단계 630으로 진행한다. 그렇지 않다면 입력 버퍼와 적응 필터 버퍼가 갱신되지만 적응 필터는 작동하지 않고(단계 655), 운영 시스템으로의 복귀가 이루어진다.
적응 카운터 비교 값은 원하는 바대로 변경될 수 있고, 영구적으로 정해질 필요는 없다는 것을 알아야 한다. 적응 카운터 비교 값이 0으로 설정되면, 적응 필터는 항상 전체 시간에 걸쳐 적응된다. 만약 적응 카운터 비교 값이 1로 설정되었다면, 반향 제거기 프로그램으로의 모든 다른 호출은 적응 필터를 적응시키게 된다. 적응 카운터 비교 값이 2로 설정되었다면, 3개의 호출 중 1개의 호출이 적응 필터를에 적응시키게 되는 식이 된다.
단계 630에서는, 하나의 샘플을 가지며 에러는 0으로 설정된 적응 필터가 실행된다. 이후 나머지 샘플들은, 훈련 동안 프로세서 요구 사항을 최소화하기 위해 선택적으로 작동하는 적응 필터 작동을 통해 실행되고(단계 635), 운영 시스템으로의 복귀가 이루어진다.
이제 배경 훈련을 위해 프로세서 요구 사항을 최소화하기 위한 방법론에 대한 간단한 설명이 주어진다. 배경 훈련을 위한 프로세서 요구 사항을 최소화하는 한 가지 방식은, 그러한 훈련을 위한 오직 필요한 작동이 적응 필터를 스피커로 가는 데이터로 채워지게 유지시킨다는 사실에 기초한다. 필터가 통상 순환(circular) 버퍼로서 취급되므로, 필요한 모든 것은 각각의 새로운 샘플이 필터 버퍼에서 기입되는 것이다. 동작 중인 마이크로폰은 그 동작이 유지되고 마이크로폰 샘플은 버퍼에 공급된다. CPU가 이용 가능할 때, 필터 출력 버스트가 계산되어 적응이 가능하게 된다. 적응 필터 출력은 마이크로폰 신호로부터 빼지고, 필터를 적응시키기 위해 에러가 계산된다. 적응은 제 1 필터 출력에 관해서는 금지되는데, 이는 이전 에 러가 필터 상태와 상관되지 않기 때문이며, 이는 프로세서가 바쁜 동안에는 필터가 쉬고 있기 때문이다. 간헐적인 작동도 허용 가능한데, 이는 필터가 오직 계수를 적응시키도록 작동하기 때문이다. 오락 애플리케이션이 실행중일 때는, 마이크로폰으로 들리는 것이 통신시 사용되지 않는다.
본 발명은, 예컨대 반향 제거에 대한 하위 대역 및 변환 접근과 같은 다른 반향 제거기 아키텍처로 구현될 수 있고, 여기서 하위 대역 또는 변환에 기초한 반향 제거기는 전술한 전체 대역 반향 제거기를 대체하게 된다. 대안적인 적응 필터 알고리즘이 또한 사용될 수 있는데, 가령 정규화된 최소 평균 제곱(LMS), 어파인(affine) 프로젝션 LMS 및 귀납 최소 제곱(RLS) 알고리즘이 있다. 마지막으로, 이러한 알고리즘은 심지어 스테레오 애플리케이션에서의 다수의 마이크로폰을 가지고 좌우측 스피커에 적용될 수 있다(도 7 참조). 지연, 필터 및 샘플 속도 변환기는 도 5에서와 같이 더해질 수 있다.
도 7은 본 발명의 예시적인 일 실시예에 따라 본 발명이 적용될 수 있는 스테레오 음향 반향 제거기(700)를 예시하는 블록도이다. 스테레오 음향 반향 제거기(700)가 개인용 컴퓨터(799)의 스피커{좌측 스피커(792)와 우측 스피커(794)}와 마이크로폰{제 1 마이크로폰(796)과 제 2 마이크로폰(798)} 사이에 삽입된다. 개인용 컴퓨터(799)는 좌측 오디오 소스 출력(798)과 우측 오디오 소스 출력(797), 제 1 오디오 입력(796) 및 제 2 오디오 입력(795)을 포함한다.
스테레오 음향 반향 제거기(700)는 제 1 적응 필터(712), 제 2 적응 필터(714), 제 1 가산기(716) 및 제 1 승산기(718)를 포함한다. 스테레오 음향 반향 제거기(700)는 또한 제 3 적응 필터(722), 제 4 적응 필터(724), 제 2 가산기(716) 및 제 2 승산기(718)를 더 포함한다.
도 9는 본 발명의 또 다른 예시적인 실시예에 따라 본 발명이 적용될 수 있는 음향 반향 제거기(900)를 예시하는 블록도이다. 음향 반향 제거기(900)는 범용 직렬 버스(USB) 인터페이스와, 개인용 컴퓨터(PC) 등을 연결하기 위한 버퍼(이후, 또한 총체적으로 "USB 인터페이스"라고 한다)(920)를 가지는 주변 디바이스의 스피커(999)와 마이크로폰(998) 사이에 삽입된다.
PC로부터의 오디오는 USB 인터페이스(910)로부터의 출력되고, 디지털-아날로그 변환기(DAC)(920)와 적응 필터(925)로 입력된다. 아날로그 오디오는 이후 스피커(999)로부터 출력된다.
오디오는 음향 에너지를 아날로그 전기 신호로 변환하는 마이크로폰(998)에 입력되고, 이러한 아날로그 전기 신호는 그 다음에 아날로그-디지털 변환(ADC)(940)에 의해 디지털 신호로 변환된다.
(ADC)(940)로부터의 디지털 신호 출력과 적응 필터(925)의 출력은 가산기(942)에 입력된다. 가산기(942)의 출력{즉, 마이크로폰(998)으로부터의 반향이 제거된 오디오}은 USB 인터페이스(910)와 승산기(944)에 입력된다. 승산기(944)는 또한 입력으로서 적응 속도 제어(u)를 수신한다. 승산기(944)의 출력은 적응 필터(925)에 입력된다.
도 9의 실시예는 음향 반향 제거기를 가지는 주변 디바이스가 반향 제거 기능을 수행하는 것을 허용하여, USB 인터페이스를 거쳐 주변 디바이스가 부착되는 컴퓨터 상의 프로세서를 자유롭게 한다는 것을 알아야 한다.
또한 도 9의 예시적인 실시예가 USB 인터페이스에 관해 도시되고 설명되지만, IEEE 1394 FIREWIRE 인터페이스를 포함하나 이에 제한되지 않는 다른 유형의 인터페이스가 또한 본 발명에 따라 이용될 수 있다는 점을 알아야 한다.
비록 첨부 도면을 참조하여 본 명세서에 예시적인 실시예가 설명되었지만, 본 발명은 이들 정밀한 실시예에 제한되지 않고, 본 발명의 범주와 취지를 벗어나지 않으면서 당업자에 의해 다양한 다른 변경예와 수정예가 이루어질 수 있다는 점이 이해되어야 한다. 모든 그러한 변경예와 수정예는 첨부된 청구항에 의해 정의된 바와 같은 본 발명의 범주 내에 포함되는 것으로 의도된다.
전술한 바와 같이, 본 발명은 음향 반향 제거기, 특히 회의나 전화통신 음향 반향 제거기에 관한 배경 훈련 방법에 이용 가능하다.

Claims (27)

  1. 음향 반향을 제거하기 위한 방법으로서,
    개인용 컴퓨터와, 개인용 컴퓨터와 사용하기 위한 주변 디바이스 중 하나를 포함하는 전자 디바이스의 텔레커뮤니케이션 애플리케이션을 구현하는 단계,
    제 1 샘플링 속도로 상기 텔레커뮤니케이션 애플리케이션의 텔레커뮤니케이션 신호를 샘플링하는 단계, 및
    상기 전자 디바이스의 오락 사운드 어댑터의 사운드 출력을 이용하는 단계를 포함하고,
    상기 오락 사운드 어댑터의 사운드 출력은 상기 제 1 샘플링 속도보다 높은 제 2 샘플링 속도로 샘플링되어 출력되며, 상기 오락 사운드 어댑터의 사운드 출력은 상기 텔레커뮤니케이션 애플리케이션의 배경에서 음향 반향 제거기를 훈련하기 위한 상기 전자 디바이스의 비훈련(non-training) 오디오 애플리케이션의 사운드 출력인, 음향 반향을 제거하기 위한 방법.
  2. 제 1항에 있어서,
    상기 비훈련 오디오 애플리케이션은 오락 애플리케이션이고, 상기 오락 사운드 어댑터의 상기 사운드 출력은 프로그램 오디오 출력을 포함하는, 음향 반향을 제거하기 위한 방법.
  3. 제 2항에 있어서,
    오락 애플리케이션의 프로그램 오디오를 포함하는 상기 오락 사운드 어댑터 의 상기 사운드 출력은 스트리밍 오디오 사운드 출력인, 음향 반향을 제거하기 위한 방법.
  4. 제 1항에 있어서,
    상기 전자 디바이스는 상기 개인용 컴퓨터이고, 상기 전자 디바이스의 상기 비훈련 오디오 애플리케이션은 상기 개인용 컴퓨터의 오락 애플리케이션을 포함하는, 음향 반향을 제거하기 위한 방법.
  5. 제 1항에 있어서,
    상기 이용하는 단계는 비훈련 오디오 애플리케이션의 더 높은 제 2 샘플링 속도를 텔레커뮤니케이션 애플리케이션의 제 1 샘플링 속도에 매칭시키기 위해 샘플 속도 변환을 수행하는 단계를 포함하는, 음향 반향을 제거하기 위한 방법.
  6. 제 1항에 있어서,
    상기 전자 디바이스는 마이크로폰과 스피커를 포함하고, 상기 음향 반향 제거기는 적응 필터를 포함하며, 상기 스피커로부터 적응 필터까지 제 1 경로가 형성되고, 상기 마이크로폰으로부터 적응 필터까지 제 2 경로가 형성되며, 상기 이용하는 단계는 상기 제 1 경로의 지연을 상기 제 2 경로의 지연과 매칭시키는 단계를 포함하는, 음향 반향을 제거하기 위한 방법.
  7. 제 6항에 있어서,
    상기 전자 디바이스는 프로세서를 포함하고, 상기 이용하는 단계는 프로세서의 현재 부하가 그 프로세서에 관한 평균 부하 임계치보다 위에 있을 때 상기 프로세서의 사용을 최소화하는 단계를 더 포함하는, 음향 반향을 제거하기 위한 방법.
  8. 제 7항에 있어서,
    상기 최소화하는 단계는 마이크로폰과 스피커 중 하나로부터 오디오 데이터 샘플들을 수집하는 단계와, 프로세서의 현재 부하가 그 프로세서에 관한 평균 부하 임계치 아래에 있을 때까지 적응 필터의 사용을 제한하는 단계를 포함하는, 음향 반향을 제거하기 위한 방법.
  9. 제 8항에 있어서,
    상기 제한 단계는
    음향 반향 제거기에의 훈련 호출의 개수를 카운트하기 위해 적응 카운터를 이용하는 단계와,
    훈련 호출의 개수가 적응 필터 비교 임계치보다 클 때에만 적응 필터를 훈련시키는 단계를 포함하는, 음향 반향을 제거하기 위한 방법.
  10. 음향 반향을 제거하기 위한 방법으로서,
    개인용 컴퓨터와, 개인용 컴퓨터에 사용하기 위한 주변 디바이스 중 하나를 포함하는 전자 디바이스의 오락 사운드 어댑터의 사운드 출력을 이용하는 단계를 포함하되,
    상기 오락 사운드 어댑터의 상기 사운드 출력은 오디오를 포함하고, 상기 오디오는 상기 전자 디바이스의 비훈련 오디오 애플리케이션의 사운드 출력이고, 상기 오락 사운드 어댑터의 상기 사운드 출력은 상기 전자 디바이스의 텔레커뮤니케이션 애플리케이션의 배경에서 상기 전자 디바이스의 음향 반향 제거기를 훈련하기 위해 이용되며,
    상기 전자 디바이스의 비훈련 오디오 애플리케이션의 사운드 출력은, 음향 반향 제거기의 훈련에 관련되지 않은 이벤트의 통지이며, 상기 음향 반향 제거기를 훈련시키기 위한 주파수들을 포함하는 주파수의 시퀀스를 포함하는, 음향 반향을 제거하기 위한 방법.
  11. 제 10항에 있어서,
    상기 이벤트는 인입 호출, 인입 전자 우편 메시지, 다가오는(upcoming) 회의, 다가오는 미팅, 에러, 경고, 입력 요청 중 하나인, 음향 반향을 제거하기 위한 방법.
  12. 음향 반향 제거기로서,
    개인용 컴퓨터와, 개인용 컴퓨터와 사용하기 위한 주변 디바이스 중 하나를 포함하고, 제 1 샘플링 속도로 샘플링된 사운드를 수반하는 텔레커뮤니케이션 애플리케이션을 가지는 전자 디바이스의 오락 사운드 어댑터와,
    상기 제 1 샘플링 속도보다 더 높은 제 2 샘플링 속도로 샘플링된 상기 전자 디바이스의 상기 오락 사운드 어댑터의 오디오 출력을 포함하는 사운드를 사용하여 훈련되도록 적응된 적응 필터를 포함하고,
    상기 오락 사운드 어댑터의 상기 오디오 출력은 텔레커뮤니케이션 애플리케이션의 배경에서 상기 적응 필터를 훈련하기 위한 비훈련 오디오 애플리케이션의 오디오 출력인, 음향 반향 제거기.
  13. 제 12항에 있어서,
    상기 비훈련 오디오 애플리케이션은 프로그램 오디오 출력을 포함하는 애플리케이션인, 음향 반향 제거기.
  14. 제 13항에 있어서,
    프로그램 오디오 출력을 포함하는 상기 비훈련 오디오 애플리케이션은 스트리밍 오디오 출력이고, 상기 전자 디바이스의 상기 텔레커뮤니케이션 애플리케이션과는 상이한 상기 전자 디바이스의 오락 애플리케이션을 포함하는, 음향 반향 제거기.
  15. 제 12항에 있어서,
    상기 전자 디바이스는 상기 개인용 컴퓨터인, 음향 반향 제거기.
  16. 제 12항에 있어서,
    비훈련 오디오 애플리케이션의 더 높은 제 2 샘플 속도를, 상기 전자 디바이스의 상기 비훈련 오디오 애플리케이션과는 상이한 텔레커뮤니케이션 애플리케이션의 제 1 샘플링 속도에 매칭시키기 위해, 샘플 속도 변환을 수행하기 위한 샘플 속도 변환 디바이스를 더 포함하는, 음향 반향 제거기.
  17. 제 12항에 있어서,
    상기 전자 디바이스는 마이크로폰과 스피커를 포함하고, 스피커로부터 적응 필터까지 제 1 경로가 형성되고, 마이크로폰으로부터 적응 필터까지 제 2 경로가 형성되며, 상기 음향 반향 제거기는 상기 제 1 경로의 지연을 상기 제 2 경로의 지연과 매칭시키기 위한 지연 매칭 버퍼를 더 포함하는, 음향 반향 제거기.
  18. 제 12항에 있어서,
    상기 전자 디바이스는 프로세서를 포함하고, 상기 음향 반향 제거기는 프로세서의 현재 부하가 프로세서의 평균 부하 임계치보다 위에 있을 때 상기 프로세서의 사용을 최소화하기 위한 수단을 더 포함하는, 음향 반향 제거기.
  19. 제 18항에 있어서,
    상기 전자 디바이스는 마이크로폰과 스피커를 포함하고, 상기 음향 반향 제거기는
    마이크로폰과 스피커 중 하나로부터 오디오 데이터 샘플을 수집하기 위한 수단과,
    프로세서의 현재 부하가 프로세서 평균 부하 임계치 아래에 있을 때까지 적응 필터의 사용을 제한하기 위한 수단을
    더 포함하는, 음향 반향 제거기.
  20. 제 19항에 있어서,
    상기 제한하기 위한 수단은
    음향 반향 제거기에의 훈련 호출의 개수를 카운트하기 위한 적응 카운터와,
    훈련 호출의 개수와 적응 필터 비교 임계치를 비교하기 위한 수단을 포함하고,
    상기 적응 필터는 상기 훈련 호출의 개수가 적응 필터 비교 임계치보다 클 때에만 훈련되는, 음향 반향 제거기.
  21. 음향 반향 제거기로서,
    비훈련 오디오 애플리케이션에 대응하는 오디오를 포함하는 사운드를 사용하여 훈련되도록 적응된 적응 필터와,
    상기 비훈련 오디오 애플리케이션의 오디오 사운드를 출력하기 위해, 상기 적응 필터에 결합된 전자 디바이스의 오락 사운드 어댑터를
    포함하고, 상기 비훈련 오디오 애플리케이션의 사운드 출력인 출력 오디오 사운드는 상기 음향 반향 제거기의 훈련과 관련되지 않은 이벤트의 통지이고, 상기 음향 반향 제거기를 훈련하기 위한 주파수들을 포함하는 주파수의 시퀀스를 포함하는, 음향 반향 제거기.
  22. 제 21항에 있어서,
    상기 이벤트는, 인입 호출, 인입 전자 우편 메시지, 다가오는 회의, 다가오는 미팅, 에러, 경고, 입력 요청 중 하나인, 음향 반향 제거기.
  23. 음향 반향을 제거하기 위한 방법으로서,
    제 1 샘플링 속도로 샘플링된 텔레커뮤니케이션 신호를 가지는 컴퓨터의 텔레커뮤니케니션 애플리케이션을 구현하는 단계,
    상기 컴퓨터의 주변 디바이스에 있는 음향 반향 제거기에서, 상기 컴퓨터와 상기 주변 디바이스 사이의 범용 직렬 버스(USB) 인터페이스와 IEEE 1394 인터페이스 중 하나를 통해, 상기 컴퓨터로부터 오락 사운드 어댑터의 사운드 출력을 수신하는 단계로서, 상기 오락 사운드 어댑터의 사운드 출력은 비훈련 오디오 애플리케이션의 사운드 출력이고, 상기 오락 사운드 어댑터의 사운드 출력은 상기 제 1 샘플링 속도보다 높은 제 2 샘플링 속도로 샘플링되어 출력되는, 수신하는 단계,
    상기 텔레커뮤니케이션 애플리케이션의 배경에서 주변 디바이스에서 음향 반향 제거기를 훈련하기 위해 비훈련 오디오 애플리케이션의 사운드 출력인 상기 오락 사운드 어댑터의 상기 사운드 출력을 이용하는 단계, 및
    상기 컴퓨터에 의해 구현된 텔레커뮤니케이션 애플리케이션 동안, 주변 디바이스에서의 음향 반향 제거기를 사용하여 반향 제거를 수행하는 단계를 포함하는, 음향 반향을 제거하기 위한 방법.
  24. 제 23항에 있어서,
    상기 비훈련 오디오 애플리케이션은 프로그램 오디오 출력을 포함하는 오락 애플리케이션인, 음향 반향을 제거하기 위한 방법.
  25. 제 23항에 있어서,
    비훈련 오디오 애플리케이션에 대응하는 상기 오락 사운드 어댑터의 사운드 출력은, 상기 음향 반향 제거기의 훈련에 관련되지 않은 이벤트의 통지이고, 상기 음향 반향 제거기를 훈련시키기 위한 주파수를 포함하는 주파수의 시퀀스를 포함하는, 음향 반향을 제거하기 위한 방법.
  26. 제 25항에 있어서, 상기 이벤트는 인입 호출, 인입 전자 우편 메시지, 다가오는 회의, 다가오는 미팅, 에러, 경고, 입력 요청 중 하나인, 음향 반향을 제거하기 위한 방법.
  27. 제 1항에 있어서,
    상기 전자 디바이스는 프로세서를 포함하고, 상기 방법은
    상기 전자 디바이스의 상기 프로세서의 처리 부하가 상기 전자 디바이스의 상기 프로세서의 평균 부하 임계값보다 낮을 때, 상기 음향 반향 제거기를 훈련하기 위해, 상기 비훈련 오디오 애플리케이션을 작동시키는 단계를 더 포함하는, 음향 반향을 제거하기 위한 방법.
KR1020067017518A 2004-03-05 2004-03-05 멀티미디어 훈련 신호를 구비한 음향 반향 제거기 KR101062870B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2004/006803 WO2005099231A1 (en) 2004-03-05 2004-03-05 Accoustic echo canceller with multimedia training signal

Publications (2)

Publication Number Publication Date
KR20070015374A KR20070015374A (ko) 2007-02-02
KR101062870B1 true KR101062870B1 (ko) 2011-09-07

Family

ID=35125449

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020067017518A KR101062870B1 (ko) 2004-03-05 2004-03-05 멀티미디어 훈련 신호를 구비한 음향 반향 제거기

Country Status (6)

Country Link
US (2) US7769162B2 (ko)
EP (1) EP1721442B1 (ko)
JP (1) JP4386379B2 (ko)
KR (1) KR101062870B1 (ko)
CN (1) CN1926841B (ko)
WO (1) WO2005099231A1 (ko)

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8457614B2 (en) 2005-04-07 2013-06-04 Clearone Communications, Inc. Wireless multi-unit conference phone
US8494203B2 (en) * 2006-05-30 2013-07-23 Polycom, Inc. Speaker and speaker enclosure
JP4928922B2 (ja) * 2006-12-01 2012-05-09 株式会社東芝 情報処理装置、およびプログラム
US8599704B2 (en) 2007-01-23 2013-12-03 Microsoft Corporation Assessing gateway quality using audio systems
US8406415B1 (en) 2007-03-14 2013-03-26 Clearone Communications, Inc. Privacy modes in an open-air multi-port conferencing device
US8654955B1 (en) 2007-03-14 2014-02-18 Clearone Communications, Inc. Portable conferencing device with videoconferencing option
US8121260B2 (en) * 2007-03-22 2012-02-21 Audiocodes Ltd. Method and apparatus for retraining of echo cancellation
US8090077B2 (en) 2007-04-02 2012-01-03 Microsoft Corporation Testing acoustic echo cancellation and interference in VoIP telephones
US8050398B1 (en) 2007-10-31 2011-11-01 Clearone Communications, Inc. Adaptive conferencing pod sidetone compensator connecting to a telephonic device having intermittent sidetone
US8199927B1 (en) 2007-10-31 2012-06-12 ClearOnce Communications, Inc. Conferencing system implementing echo cancellation and push-to-talk microphone detection using two-stage frequency filter
US8290142B1 (en) * 2007-11-12 2012-10-16 Clearone Communications, Inc. Echo cancellation in a portable conferencing device with externally-produced audio
CN101878637B (zh) * 2007-11-29 2013-09-18 艾利森电话股份有限公司 用于对语音信号进行回声消除的方法和配置
TWI399741B (zh) * 2009-07-20 2013-06-21 C Media Electronics Inc 具有防止爆音產生的音源訊號傳輸裝置及其方法
US8364298B2 (en) * 2009-07-29 2013-01-29 International Business Machines Corporation Filtering application sounds
CN102008820B (zh) * 2009-09-07 2013-04-10 骅讯电子企业股份有限公司 防止爆音产生的音源信号传输装置及防止爆音产生的方法
US8441515B2 (en) * 2009-09-17 2013-05-14 Sony Corporation Method and apparatus for minimizing acoustic echo in video conferencing
US8478359B2 (en) * 2010-06-04 2013-07-02 Apple Inc. User interface tone echo cancellation
CN103119641B (zh) 2010-12-22 2014-12-03 英派尔科技开发有限公司 音频控制系统
US8411132B2 (en) 2011-01-27 2013-04-02 Audio Properties, Inc. System and method for real-time media data review
US9729687B2 (en) * 2012-08-10 2017-08-08 Silverplus, Inc. Wearable communication device
TWI476679B (zh) * 2012-11-21 2015-03-11 C Media Electronics Inc 虛擬訊號源產生裝置及其方法
US20170187884A1 (en) * 2015-12-23 2017-06-29 Microsoft Technology Licensing, Llc Controlling output volume levels
JP6798392B2 (ja) * 2017-03-31 2020-12-09 ブラザー工業株式会社 効果付与装置及び効果付与プログラム
US10354673B2 (en) * 2018-01-24 2019-07-16 Hisense Mobile Communications Technology Co., Ltd. Noise reduction method and electronic device

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0691576B2 (ja) * 1987-08-21 1994-11-14 株式会社日立製作所 拡声電話機
EP0537370B1 (en) 1991-04-30 2001-09-12 Kabushiki Kaisha Toshiba Voice communication device provided with echo canceler
US5553137A (en) * 1994-12-05 1996-09-03 Motorola, Inc. Method and apparatus for echo canceling in a communication system
JPH08335976A (ja) 1995-06-06 1996-12-17 Kobe Steel Ltd 拡声通話装置
JP3199155B2 (ja) * 1995-10-18 2001-08-13 日本電信電話株式会社 反響消去装置
US5991640A (en) 1996-11-22 1999-11-23 Ericsson Inc. Docking and electrical interface for personal use communication devices
US6185300B1 (en) * 1996-12-31 2001-02-06 Ericsson Inc. Echo canceler for use in communications system
KR100212577B1 (ko) 1997-02-25 1999-08-02 윤종용 음성사서함시스템에서 반향제거를 위한 백색잡음 송출 방법
JPH11150711A (ja) 1997-11-17 1999-06-02 Nec Corp ビデオ会議データ転送装置
DE19935587A1 (de) * 1998-08-04 2000-02-17 Motorola Inc Verfahren und Vorrichtung zum Detektieren einer Nahendestimme
JP2003249996A (ja) 2002-02-25 2003-09-05 Kobe Steel Ltd 音声信号入出力装置
JP3870861B2 (ja) * 2002-07-10 2007-01-24 株式会社デンソー エコーキャンセラ装置、及び音声通信装置

Also Published As

Publication number Publication date
US8401176B2 (en) 2013-03-19
JP2007528646A (ja) 2007-10-11
EP1721442A4 (en) 2009-05-20
JP4386379B2 (ja) 2009-12-16
CN1926841B (zh) 2011-05-18
EP1721442A1 (en) 2006-11-15
US20070189508A1 (en) 2007-08-16
US7769162B2 (en) 2010-08-03
US20100329440A1 (en) 2010-12-30
WO2005099231A1 (en) 2005-10-20
CN1926841A (zh) 2007-03-07
KR20070015374A (ko) 2007-02-02
EP1721442B1 (en) 2016-06-29

Similar Documents

Publication Publication Date Title
KR101062870B1 (ko) 멀티미디어 훈련 신호를 구비한 음향 반향 제거기
US7272224B1 (en) Echo cancellation
JP5562309B2 (ja) エコーキャンセラ
JP5085556B2 (ja) エコー除去の構成
US20180041833A1 (en) Digital signal routing circuit
US8942370B2 (en) Filter bank optimization for acoustic echo cancellation
US20090046866A1 (en) Apparatus capable of performing acoustic echo cancellation and a method thereof
US8694326B2 (en) Communication terminal and communication method
US20070019802A1 (en) Audio data stream synchronization
CN111883158B (zh) 一种回声消除方法和装置
US7062039B1 (en) Methods and apparatus for improving adaptive filter performance by inclusion of inaudible information
CN113630494A (zh) 集成电路及电子设备
JP2016503262A (ja) エコー抑圧
US8874175B2 (en) Converting samples of a signal at a sample rate into samples of another signal at another sample rate
US5666407A (en) Software-based bridging system for full duplex audio telephone conferencing
US20120243676A1 (en) Method and System for Echo Cancellation in Presence of Streamed Audio
US11984110B2 (en) Heterogeneous computing for hybrid acoustic echo cancellation
CN114979344A (zh) 回声消除方法、装置、设备及存储介质
KR100743062B1 (ko) 휴대단말기에서의 에코 제거 방법 및 그 휴대단말기
CN112750452A (zh) 语音处理方法、装置、系统、智能终端以及电子设备
KR20060049382A (ko) 주기 신호 향상 시스템
US11057703B2 (en) Apparatus and method for audio user interface processing with disparate sampling rates
CN117577123A (zh) 基于音频编解码器的回声消除装置及电子终端
WO2023212441A1 (en) Systems and methods for reducing echo using speech decomposition
CN113571077A (zh) 回声消除方法、终端设备、电子设备及介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140825

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150730

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160727

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180730

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20190725

Year of fee payment: 9