KR20120029839A - 비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법 - Google Patents

비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법 Download PDF

Info

Publication number
KR20120029839A
KR20120029839A KR1020100091920A KR20100091920A KR20120029839A KR 20120029839 A KR20120029839 A KR 20120029839A KR 1020100091920 A KR1020100091920 A KR 1020100091920A KR 20100091920 A KR20100091920 A KR 20100091920A KR 20120029839 A KR20120029839 A KR 20120029839A
Authority
KR
South Korea
Prior art keywords
microphones
frequency
sound
signal
microphone
Prior art date
Application number
KR1020100091920A
Other languages
English (en)
Other versions
KR101782050B1 (ko
Inventor
오광철
김정수
정재훈
정소영
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020100091920A priority Critical patent/KR101782050B1/ko
Priority to US13/114,746 priority patent/US8965002B2/en
Priority to EP11181569.2A priority patent/EP2431973B1/en
Priority to CN201110288677.6A priority patent/CN102421050B/zh
Publication of KR20120029839A publication Critical patent/KR20120029839A/ko
Application granted granted Critical
Publication of KR101782050B1 publication Critical patent/KR101782050B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/22—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only 
    • H04R1/227—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only  using transducers reproducing the same frequency band
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R9/00—Transducers of moving-coil, moving-strip, or moving-wire type
    • H04R9/08—Microphones
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02166—Microphone arrays; Beamforming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2205/00—Details of stereophonic arrangements covered by H04R5/00 but not provided for in any of its subgroups
    • H04R2205/022—Plurality of transducers corresponding to a plurality of sound channels in each earpiece of headphones or in a single enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/03—Synergistic effects of band splitting and sub-band processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)

Abstract

비등간격으로 배치된 마이크로폰 어레이를 이용하여 작은 사이즈의 마이크로폰 어레이를 이용하면서도 고주파 대역 및 저주파 대역을 포함하는 광대역의 주파수 대역에서 원하는 방향의 빔 패턴을 얻을 수 있는 음질 향상 장치 및 방법이 제공된다. 음질 향상 장치는, 비등간격으로 배치된 3개 이상의 마이크로폰과, 마이크로폰으로부터 입력된 음향 신호들을 주파수 영역의 음향 신호들로 변환하는 주파수 변환부와, 마이크로폰의 간격에 따라 변환된 음향 신호들의 주파수 대역을 분할하고, 분할된 주파수 대역에 기초하여 주파수 영역의 음향 신호들을 2채널의 신호로 병합하는 대역 분할 및 병합부와, 2채널의 신호를 이용하여 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력하는 빔포밍부를 포함한다.

Description

비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법{Apparatus and method for enhancing audio quality using non-uniform configuration of microphones}
음향 신호 처리에 관한 것으로, 보다 상세하게는, 비등간격으로 배치된 마이크로폰을 이용하여 잡음을 감소시켜서 음질을 향상시키는 장치 및 방법에 관한 것이다.
고정밀 보청기 등의 첨단 의료기기와 휴대폰, UMPC, 캠코더 등의 모바일 컨버전스 단말이 확산됨에 따라 마이크로폰 어레이를 이용한 응용제품의 수요가 증가하고 있다. 마이크로폰 어레이는 다수의 마이크로폰들을 조합하여 사운드 자체뿐만 아니라 취득하려는 사운드의 방향이나 위치와 같은 지향성(directivity)에 관한 부가적인 정보를 얻을 수 있다. 지향성이라 함은 음원 신호가 어레이를 구성하는 다수의 마이크로폰들 각각에 도달하는 시간 차이를 이용하여 특정 방향에 위치한 음원으로부터 방사되는 음원 신호에 대한 감도를 크게 하는 것을 말한다. 따라서, 이러한 마이크로폰 어레이를 이용하여 음원 신호들을 취득함으로써 특정 방향으로부터 입력되는 음원 신호를 강조하거나 억제할 수 있다.
대부분의 마이크로폰 어레이를 이용한 알고리즘에서는 빔포밍(beamforming) 알고리즘을 기본으로 하는 잡음제거 방법이 적용되고 있다. 예를 들어, 방향성 잡음 제거를 통한 음성 통화 및 녹음 음질을 개선하는 방법, 화자(speaker)의 위치를 자동으로 추정 및 추적할 수 있는 원격 화상 회의 시스템 및 지능형 회의기록 시스템, 목표음을 추적하는 로봇기술 등이 활발히 연구되고 있다. 또한, 초소형 보청기에서 마이크로폰 어레이 기술이 활용되고 있다.
빔포밍 방법 중, 입력 신호의 특성에 무관하게 빔을 형성하기 위한 고정 빔포밍 기술에서, 마이크로폰 어레이의 사이즈 및 마이크로폰 어레이에 포함되는 요소 즉, 마이크로폰의 개수에 따라 빔 패턴이 변화한다. 상대적으로 낮은 주파수 대역에서는, 마이크로폰 어레이의 사이즈가 큰 경우에는, 원하는 빔 패턴을 얻을 수 있지만, 마이크로폰 어레이의 사이즈가 작아지면 무향성(omni-directional)의 패턴이 형성되어 원하는 빔 패턴을 얻을 수 없게 된다. 반대로, 상대적으로 높은 주파수 대역에서는, 마이크로폰 어레이의 사이즈가 크면 사이드로브(sidelobe) 또는 그레이팅 로브(grating lobe)가 발생하여 원하는 방향 이외의 방향에서 들어오는 사운드가 크게 취득될 위험이 있다.
한편, 기존의 마이크로폰 어레이 기술은 10개 이상의 마이크로폰을 배치하여야 원하는 빔 패턴을 형성할 수 있어서 실제 제품에 응용하는 경우 제품 제조 및 음향 신호 처리 등 다양한 측면에서 많은 비용을 감수하여야 한다.
비등간격으로 배치된 마이크로폰 어레이를 이용하여 작은 사이즈의 마이크로폰 어레이를 이용하면서도 고주파 대역 및 저주파 대역을 포함하는 광대역의 주파수 대역에서 원하는 방향의 빔 패턴을 얻을 수 있는 음질 향상 장치 및 방법이 제공된다.
일 측면에 따른 음질 향상 장치는, 비등간격으로 배치된 3개 이상의 마이크로폰과, 마이크로폰으로부터 입력된 음향 신호들을 주파수 영역의 음향 신호들로 변환하는 주파수 변환부와, 마이크로폰의 간격에 따라 변환된 음향 신호들의 주파수 대역을 분할하고, 분할된 주파수 대역에 기초하여 주파수 영역의 음향 신호들을 2채널의 신호로 병합하는 대역 분할 및 병합부와, 2채널의 신호를 이용하여 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력하는 빔포밍부를 포함한다.
3개 이상의 마이크로폰은 마이크로폰들 간의 간격에 대한 잉여 성분이 최소화되도록 배치되는 최소 잉여 선형 어레이 구조를 가질 수 있다.
대역 분할 및 병합부는, 마이크로폰의 간격에 따라 변환된 음향 신호들의 주파수 대역을 분할할 때, 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 주파수 대역을 분할할 수 있다. 대역 분할 및 병합부는, 음속(c)을 마이크로폰 간격(d)의 2배수인 값으로 나눈 값보다 작게 되도록, 주파수의 최대값(fo)을 결정할 수 있다.
대역 분할 및 병합부는, 마이크로폰의 간격에 따라 변환된 음향 신호들의 주파수 대역을 분할할 때, 마이크로폰의 간격의 개수에 대응하는 개수로 주파수 대역을 분할할 수 있다. 대역 분할 및 병합부는, 마이크로폰의 간격의 모든 세트에 대해서, 마이크로폰의 간격을 형성하는 2개의 마이크로폰들로부터 입력된 주파수 영역의 음향 신호에서, 마이크로폰의 간격에 따라 분할된 주파수 대역의 음향 신호를 추출하여 2채널의 음향 신호로 병합할 수 있다.
일 측면에 따른 음질 향상 장치는, 출력된 신호를 시간 영역의 음향 신호로 변환하는 주파수 역변환부를 더 포함할 수 있다.
다른 측면에 따른 음질 향상 장치는, 비등간격으로 배치된 3개 이상의 마이크로폰과, 마이크로폰들로부터 입력된 음향 신호가 마이크로폰들의 간격에 따라 분할된 주파수 대역을 통과하도록 형성된 복수 개의 대역 통과 필터를 포함하는 필터링부와, 필터링부를 통과한 음향 신호를 주파수 영역의 음향 신호로 변환하는 주파수 변환부와, 복수 개의 대역 통과 필터에서 동일한 대역 통과 필터를 통과한 주파수 대역별 2채널의 음향 신호들마다 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력하는 빔포밍부와, 주파수 대역별 음향 신호들마다 생성되는 잡음이 감소된 신호들을 병합하는 병합부와, 병합된 신호를 시간 영역의 음향 신호로 변환하는 주파수 역변환부를 포함한다.
필터링부에 포함된 각각의 대역 통과 필터는, 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 분할된 주파수 대역의 음향 신호를 통과시키도록 구성될 수 있다.
또 다른 측면에 따른 음질 향상 방법은, 비등간격으로 배치된 3개 이상의 마이크로폰으로부터 입력된 음향 신호들을 주파수 영역의 음향 신호들로 변환하는 단계와, 마이크로폰의 간격에 따라 변환된 음향 신호들의 주파수 대역을 분할하는 단계와, 분할된 주파수 대역에 기초하여 주파수 영역의 음향 신호들을 2채널의 신호로 병합하는 단계와, 2채널의 신호를 이용하여 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력하는 단계를 포함한다.
또 다른 측면에 따른 음질 향상 방법은, 비등간격으로 배치된 3개 이상의 마이크로폰들로부터 입력된 음향 신호를 마이크로폰들의 간격에 따라 분할된 주파수 대역별로 통과시키는 단계와, 주파수 대역별로 통과된 음향 신호들을 주파수 영역의 음향 신호로 변환하는 단계와, 분할된 주파수 대역별로 통과시키는 단계에서 동일한 대역 통과 필터를 통과한 2채널의 주파수 대역별 음향 신호들마다 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력하는 단계와, 주파수 대역별 음향 신호들마다 생성되는 잡음이 감소된 신호들을 병합하는 단계와, 병합된 신호를 시간 영역의 음향 신호로 변환하는 단계를 포함한다.
일 실시예에 따르면, 비등간격으로 배치된 마이크로폰 어레이를 이용하여 작은 사이즈의 마이크로폰 어레이를 이용하면서도, 고주파 대역 및 저주파 대역을 포함하는 광대역의 주파수 대역에서 원하는 방향의 빔 패턴을 얻을 수 있다.
도 1은 음질 향상 장치의 구성의 일 예를 나타내는 도면이다.
도 2는 최소 잉여 어레이 구조의 일 예를 나타내는 도면이다.
도 3은 마이크로폰 간격별 공간적 엘리어싱이 일어나지 않은 주파수 영역 할당의 일 예를 나타내는 도면이다.
도 4는 도 1의 음질 향상 장치의 대역 선택 및 병합부의 동작의 일 예를 나타내는 도면이다.
도 5는 음질 향상 장치의 구성의 다른 예를 나타내는 도면이다.
도 6은 음질 향상 방법의 일 예를 나타내는 순서도이다.
도 7은 음질 향상 방법의 다른 예를 나타내는 순서도이다.
도 8은 일 실시예에 따른 음질 향상 장치 및 방법에 따라 형성되는 빔 패턴의 일 예를 나타내는 도면이다.
이하, 첨부된 도면을 참조하여 본 발명의 일 실시예를 상세하게 설명한다. 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 음질 향상 장치의 구성의 일 예를 나타내는 도면이다.
음질 향상 장치(100)는 다수 개의 마이크로폰(10, 20, 30, 40)을 포함하는 마이크로폰 어레이, 주파수 변환부(110), 대역 분할 및 병합부(120), 2채널 빔포밍부(130) 및 주파수 역변환부(140)를 포함한다. 음질 향상 장치(100)는 개인용 컴퓨터, 서버 컴퓨터, 핸드헬드 또는 랩탑 장치, 멀티프로세서 시스템, 마이크로프로세서 시스템, 셋탑 박스 등 다양한 형태의 전자 제품으로 구현될 수 있다.
다수 개의 마이크로폰(10, 20, 30, 40)은 3개 이상의 마이크로폰으로 구성되며, 각 마이크로폰은 음향 증폭기, A/D 변환기 등을 포함하여 입력되는 음향 신호를 전기적 신호로 변환한다. 도 1의 음질 향상 장치(100)에는 4개의 마이크로폰들(10, 20, 30, 40)이 포함되어 있는 것으로 도시되어 있으나, 3개 이상의 마이크로폰이 포함되는 한 개수에 제한되지 않는다.
마이크로폰들(10, 20, 30, 40)은 서로 비등간격으로 배치된다. 또한, 마이크로폰들(10, 20, 30, 40)은 마이크로폰들이 마이크로폰들 간의 간격에 대한 잉여 성분이 최소화되도록 배치되는 최소 잉여 선형 어레이 구조로 배치될 수 있다. 이러한 배열은, 일반적인 고정 빔포밍에서, 마이크로폰 간격을 작게 하면 마이크로폰 어레이의 사이즈가 작아져서 고주파 대역에서는 그레이팅 로브 등에 의한 공간적 앨리어싱을 피할 수 있지만, 저주파 대역에서는 방향성(uni-directional) 특성을 잃는 한계를 극복하는데 이용될 수 있다. 최소 잉여 선형 어레이 구조의 상세에 대해서는 도 2를 참조하여 후술한다.
마이크로폰들(10, 20, 30, 40)은, 음질 향상 장치(100)의 동일한 면상에 위치할 수 있다. 예를 들어, 마이크로폰들(10, 20, 30, 40) 모두는 음질 향상 장치(100)의 전면에 배열되거나, 측면에 배열될 수 있다.
주파수 변환부(110)는 각각의 마이크로폰(10, 20, 30, 40)으로부터 각각 시간 영역(domain)의 음향 신호를 수신하여, 주파수 영역의 음향 신호로 변환한다. 예를 들어, 주파수 변환부(110)는 DFT(Discrete Fourier Transform) 또는 FFT(Fast Fourier Transform)을 이용하여 시간 영역의 음향 신호를 주파수 영역의 음향 신호로 변환할 수 있다.
주파수 변환부(110)는 각각의 음향 신호를 프레임화한 다음, 프레임 단위의 음향 신호를 주파수 영역의 음향 신호로 변환할 수 있다. 프레임화의 단위는 샘플링 주파수, 애플리케이션의 종류 등에 의해 결정될 수 있다.
대역 분할 및 병합부(120)는 마이크로폰의 간격에 따라 변환된 음향 신호들의 주파수 대역을 분할하고, 분할된 주파수 대역에 기초하여, 주파수 영역으로 변환된 음향 신호들을 2채널의 신호로 병합한다. 대역 분할 및 병합부(120)는, 마이크로폰의 간격에 따라 변환된 음향 신호들의 주파수 대역을 분할할 때, 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 주파수 대역을 분할할 수 있다.
대역 분할 및 병합부(120)는, 주파수의 최대값(fo)을 음속(c)을 마이크로폰 간격(d)의 2배수인 값으로 나눈 값보다 작게 되도록 결정할 수 있다. 또한, 대역 분할 및 병합부(120)는, 마이크로폰의 간격에 따라 변환된 음향 신호들의 주파수 대역을 분할할 때, 마이크로폰의 간격의 개수에 대응하는 개수로 주파수 대역을 분할할 수 있다. 대역 분할 및 병합부(120)는, 마이크로폰의 간격의 모든 조합에 대해서, 마이크로폰의 간격을 형성하는 2개의 마이크로폰들로부터 입력된 주파수 영역의 음향 신호에서, 마이크로폰의 간격에 따라 분할된 주파수 대역의 음향 신호를 추출하여 2채널의 음향 신호로 병합할 수 있다.
대역 분할 및 병합부(120)의 동작의 상세에 대해서는 도 3 및 도 4를 참조하여 후술한다.
2채널 빔포밍부(130)는 대역 분할 및 병합부(120)에서 병합되어 입력되는 2채널의 신호를 이용하여 2채널 빔 포밍을 수행하여, 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력한다. 2채널 빔포밍부(130)는 2채널 신호의 위상차를 이용하여 빔 패턴을 형성할 수 있다.
2채널의 음향 신호를 제1 신호 x1(t, r) 및 제2 신호 x2(t, r)라고 할 때, 제1 신호 및 제2 신호 간의 위상 차(ΔP)는 다음의 수학식 1과 같이 계산될 수 있다.
Figure pat00001
여기에서, c는 음파의 속도(330m/s)이고, f는 주파수이고, d는 마이크로폰간 거리이고, θt는 음원의 방향각다.
따라서, 음원의 방향각 θt를 목적음의 방향각 θt라고 가정하면, 목적음의 방향각 θt를 미리 알고 있는 경우, 수학식 1로부터 주파수별 위상차를 예측할 수 있음을 알 수 있다. 특정 위치로부터 방향(θt)의 각도로 유입되는 음향 신호에 대하여 주파수 별로 위상 차(ΔP)는 다른 값을 가질 수 있다.
한편, 잡음의 영향을 고려하여 목적음 방향각(θt)를 포함하는 소정의 목적음 허용각 범위(또는 허용 목적음 방향 범위)인 θΔ 을 설정할 수 있다. 예를 들어, 목적음 방향각(θt)이 π/2이면, 잡음의 영향을 고려하여 목적음 허용각 범위를 약 5π/12에서 7π/12 이내에 해당하는 방향 범위 θΔ로 설정할 수 있다. 목적음 방향각(θt)를 알고 목적음 허용각 범위(θΔ)을 결정하면 수학식 1을 이용하여 목적음 위상차 허용 범위가 계산될 수 있다.
목적음 위상차 허용 범위의 하위 임계값(ThL(m))과 상위 임계값(ThH(m))은 수학식 2 및 3과 같이 정의될 수 있다.
Figure pat00002
Figure pat00003
여기에서, m은 주파수 인덱스를 나타내고, d는 마이크로폰 사이의 간격을 나타낸다. 따라서, 주파수(f), 마이크로폰 간격(d) 및 목적음 허용각 범위(θΔ)에 따라 목적음 위상차 허용 범위의 하위 임계값(ThL(m))과 상위 임계값(ThH(m))이 변경될 수 있다.
목적음 방향각(θt)은 사용자 인터페이스 장치를 통한 사용자 입력 신호에 의해 입력되는 등 외부로부터 가변적으로 조정되어 입력될 수 있다. 목적음 방향각을 포함하는 목적음 허용각 범위 또한 가변적으로 조정될 수 있다.
이와 같은 목적음 허용각 범위과 목적음 위상차 허용 범위와의 관계를 고려하면, 현재 입력되는 음향 신호의 소정의 주파수에 대한 위상 차(ΔP)가 목적음 위상차 허용 범위에 포함되는 경우는 목적음이 존재하는 것으로 판별될 수 있으며, 소정의 주파수에 대한 위상 차(ΔP)가 목적음 위상차 허용 범위에 포함되지 않는 경우는 목적음이 존재하지 않는 것으로 판별될 수 있다.
2채널 빔포밍부(130)는 결정된 주파수 성분별 위상차 각각이 목적음 위상차 허용 범위에 포함되는 정도를 나타내는 특징값을 추출할 수 있다. 특징값은 주파수 성분별 위상차가 목적음 위상차 허용 범위에 포함되는 개수를 이용하여 계산될 수 있다. 일예로, 특징값은 각 주파수 성분별로 목적음 위상차 허용 범위에 포함되는 주파수 성분의 개수를 더하여 주파수 성분의 총수(M)로 나누어 획득되는 평균 유효 주파수 성분의 개수로 나타낼 수 있다.
전술한 바와 같이, 목적음 위상차 허용 범위는 목적음 방향(θt)과 목적음 허용각(θΔ)이 입력되면 2채널 빔포밍부(130)에서 계산될 수 있다. 또는, 2채널 빔포밍부(130)내에 소정의 저장 공간을 두어 목적음 방향과 목적음 허용각별 목적음 위상차 허용 범위를 나타내는 정보가 저장되어 이용될 수도 있다.
2채널 빔포밍부(130)는 처리되는 프레임에서 특정 주파수에 목적음이 있다고 판별되는 경우, 해당 주파수 성분을 증폭하여 출력하고, 처리되는 프레임에서 특정 주파수에 목적음이 없다고 판별되는 경우, 해당 주파수 성분을 감쇄하여 출력할 수 있다. 예를 들어, 2채널 빔포밍부(130)는 분석되는 프레임에서 주파수 성분별 목적음의 진폭을 추정하고, 추정된 주파수 성분별 목적음의 진폭에 결정된 주파수 성분별 위상차 각각이 목적음 위상차 허용 범위에 포함되는 정도를 나타내는 특징값을 곱하면, 추정된 주파수 성분별 목적음의 진폭에서 목적음이 없는 것으로 판단되는 주파수 성분은 감쇄되어 잡음이 감쇄 또는 제거될 수 있다. 2채널 빔포밍부(130)는 기존의 다양한 방법에 따라 2채널 빔 포밍을 수행하여 잡음을 감소시킬 수 있다.
주파수 역변환부(140)는 출력된 신호를 시간 영역의 음향 신호로 변환한다. 변환된 신호는 저장 매체(도시되지 않음)에 저장되거나 스피커(도시되지 않음)를 통해 출력될 수 있다.
일 실시예에 따르면, 일반적인 고정 빔포밍에서, 마이크로폰 간격을 작게 하면 마이크로폰 어레이의 사이즈가 작아져서 고주파 대역에서는 그레이팅 로브에 의한 공간적 앨리어싱을 피할 수 있지만, 저주파 대역에서는 방향성(uni-directional) 특성을 잃는 한계를 극복하는데 이용될 수 있다. 또한, 마이크로폰의 개수가 커지면, 빔포밍에 필요한 데이터 처리 비용이 증가하게 되므로, 전술한 바와 같이, 2 채널 빔포밍을 이용하여 효율적으로 빔 포밍을 달성할 수 있다. 주파수 대역 분할 및 병합을 통해서 공간적 앨리어싱을 방지하면서도 3개 이상의 비등간격으로 배치된 마이크로폰으로 입력되는 3개 이상의 음향 신호를 2 채널 빔포밍을 위한 2개의 음향 신호로 효과적으로 변환할 수 있다.
도 2는 최소 잉여 선형 어레이 구조의 일 예를 나타내는 도면이다.
최소 잉여 선형 어레이(Minimum Redundant Linear Array)는 레이더 안테나의 구조에 관한 기술 중 하나이다. 최소 잉여 선형 어레이는 어레이 요소들 간의 간격에 대한 잉여 성분이 최소화되도록 어레이를 배치하는 비균등 어레이 구조이다. 어레이 요소가 4개인 경우에는 6개의 공간적 민감도를 얻을 수 있다.
도 2는 마이크로폰 어레이에 도 1에 도시된 바와 같이 4개의 마이크로폰(10, 20, 30, 40)이 포함된 경우의 최소 잉여 선형 어레이 구조를 나타낸다. 도 2에서 마이크로폰(10)과 마이크로폰(20) 사이의 간격이 마이크로폰 어레이에서 최소 간격을 가진다. 이와 같이, 최소 간격을 기본 간격이라고 하면, 마이크로폰(30)과 마이크로폰(40)의 간격은 기본 간격의 2배가 되고, 마이크로폰(20)과 마이크로폰(30)의 간격은 기본 간격의 3배가 된다. 또한, 마이크로폰(10)과 마이크로폰(30)의 간격은 기본 간격의 4배가 되며, 마이크로폰(20)과 마이크로폰(40)의 간격을 기본 간격의 5배가 되며, 마이크로폰(10)과 마이크로폰(40)의 간격은 기본 간격의 6배가 된다. 즉, 도 2의 마이크로폰 어레이에서 마이크로폰들 사이의 간격은 기본 간격의 1배에서 6배로 다양한 간격을 갖추게 된다.
이러한 배열은, 일반적인 고정 빔포밍에서, 마이크로폰 간격을 작게 하면 마이크로폰 어레이의 사이즈가 작아져서 고주파 대역에서는 그레이팅 로브에 의한 공간적 앨리어싱을 피할 수 있지만, 저주파 대역에서는 방향성(uni-directional) 특성을 잃는 한계를 극복하는데 이용될 수 있다. 즉, 고주파 대역에서 공간적 앨리어싱을 피하는 최소 마이크 간격과 저주파 대역에서 왜곡없이 빔포밍을 할 수 있는 최대 마이크 간격을 쉽게 얻을 수 있다. 최소 잉여 선형 어레이는 마이크로폰의 개수 및 배열에 따라 다양한 구조를 가질 수 있다.
도 3은 마이크로폰 간격별 공간적 엘리어싱이 일어나지 않은 주파수 영역 할당의 일 예를 나타내는 도면이다.
도 1의 대역 분할 및 병합부(120)는 마이크로폰들(10, 20, 30, 40)로부터 입력되는 음향 신호들에 대하여, 마이크로폰의 간격별로 공간적 엘리어싱이 일어나지 않는 주파수 대역을 분할한다. 임의의 마이크로폰 사이의 간격 d에 대해, 대역 분할 및 병합부(120)는, 음속(c)을 마이크로폰 간격(d)의 2배수인 값으로 나눈 값보다 작게 되도록, 주파수의 최대값(fo)을 결정할 수 있으며, 이는 수학식 4와 같이 나타낼 수 있다.
Figure pat00004
예를 들어, 마이크로폰 간격(d)이 10㎝이고 음속(c)가 340m/s인 경우, 주파수(fo)가 1700㎐ 이하의 신호에 대해서는 엘리어싱이 일어나지 않는다. 도 2에서, 넓은 마이크로폰 간격 즉, 양 끝의 마이크로폰 간격은 저주파에 적합하고, 고주파는 마이크로폰 사이의 간격이 좁아야 한다. 이를 바탕으로, 대역 분할 및 병합부(120)는 가장 넓은 마이크로폰 간격을 이루는 마이크로폰들로부터 얻은 음향 신호에는 가장 저주파 영역을 할당하고, 차례로 그 다음 저주파 영역을 담당하도록 하여 주파수 대역을 할당한다.
가장 좁은 마이크로폰 간격(d)이 2㎝이고, 마이크로폰을 4개 사용할 때, 도 3에 도시된 바와 같이 주파수 대역이 분할될 수 있다.
즉, 가장 넓은 마이크로폰 간격을 형성하는 마이크로폰(10) 및 마이크로폰(40)은 1400㎐ 이하의 신호를 담당하고, 그 다음으로 넓은 간격을 형성하는 마이크로폰(20)와 마이크로폰(40)은 1417~1700㎐를 담당하도록 할 수 있다. 마이크로폰(10)과 마이크로폰(30)은 1700~2125㎐를 담당하도록 할 수 있다. 마이크로폰(20)과 마이크로폰(30)은 2125~2833㎐를 담당하도록 할 수 있다. 마이크로폰(30)과 마이크로폰(40)은 2833~4250㎐를 담당하도록 할 수 있다. 마이크로폰(10)과 마이크로폰(20)은 4250~8500㎐를 담당하도록 할 수 있다.
최소 마이크로폰 사이의 간격이 달라지면, 각각 담당 주파수 대역이 달라질 수 있다. 또한, 계산된 주파수는 공간적 앨리어싱이 일어나지 않는 최대치이므로, 그 이하의 주파수를 담당하게 할 수도 있다. 예를 들어, 양 끝의 마이크로폰(10)과 마이크로폰(40)이 담당하는 저주파 대역을 0~1400㎐로 하지 않고, 0~1000㎐로 하고, 두 번째로 간격이 넓은 마이크로폰(20)과 마이크로폰(40)은 1000~1690㎐를 담당하도록 할 수 있다. 이런 방식으로 도 1의 대역 분할 및 통합부(120)는 각 마이크로폰 간격이 담당하는 주파수 대역을 분할할 수 있다.
도 4는 도 1의 음질 향상 장치의 대역 분할 및 병합부(120)의 동작의 일 예를 나타내는 도면이다.
도 4는 도 1 및 도 2에서와 같이, 4개의 마이크로폰(10, 20, 30, 40)이 최소 잉여 선형 어레이 구조로 배치된 경우의 대역 분할 및 병합부(120)의 동작을 나타낸다.
4개의 마이크로폰(10, 20, 30, 40)으로부터 각각 얻은 4개의 주파수 영역의 음향 신호(Ch1, Ch2, Ch3, Ch4)는 오른쪽 2개의 음향 신호(Ch11, Ch12)로 매핑되어 병합될 수 있다. 이 2개의 주파수 영역의 음향 신호가 2채널 빔포밍부(130)에 대한 입력 신호가 된다.
4개의 마이크로폰(10, 20, 30, 40)이 최소 잉여 선형 어레이 구조로 배치된 경우, 마이크로폰의 간격에 따라 6개의 주파수 대역이 6개로 분할될 수 있다. 이들 6개의 주파수 대역은 4개의 주파수 영역의 음향 신호(Ch1, Ch2, Ch3, Ch4) 및 오른쪽 2개의 음향 신호(Ch11, Ch12)에 대해 표시되어 있다.
마이크로폰(10)과 마이크로폰(20) 사이의 기본 간격에 따라, 4220~8500㎐의 주파수 대역이 결정된다. 2810~4220㎐의 주파수 대역은 기본 간격의 2배인 마이크로폰 간격에 대응하며, 2090~2810㎐의 주파수 대역은 기본 간격의 3배인 마이크로폰 간격에 대응하며, 1690~2090㎐의 주파수 대역은 기본 간격의 4배인 마이크로폰 간격에 대응하며, 1400~1690㎐의 주파수 대역은 기본 간격의 5배인 마이크로폰 간격에 대응하며, 0~1400㎐의 주파수 대역은 기본 간격의 6배인 마이크로폰 간격에 대응한다.
도 5는 음질 향상 장치의 구성의 다른 예를 나타내는 도면이다.
음질 향상 장치(500)는 다수 개의 마이크로폰(10, 20, 30, 40)을 포함하는 마이크로폰 어레이, 필터링부(510), 주파수 변환부(520), 2채널 빔포밍부(530), 병합부(540) 및 주파수 역변환부(550)를 포함한다. 도 1의 음질 향상 장치(100)는 주파수 영역의 음향 신호에 대하여 주파수 대역의 분할 및 병합 동작을 수행하는데 비하여, 도 5의 음질 향상 장치(500)는 시간 영역의 음향 신호에 대하여 주파수 대역의 분할을 수행하고 주파수 영역의 음향 신호에 대하여 주파수 대역의 병합 동작을 수행하는 점에서 차이가 있다.
도 5의 마이크로폰 어레이는 도 1을 참조하여 설명한 바와 같이, 비등간격으로 배치된 3개 이상의 마이크로폰(10, 20, 30, 40)을 포함한다. 3개 이상의 마이크로폰(10, 20, 30, 40)은 마이크로폰들 간의 간격에 대한 잉여 성분이 최소화되도록 배치될 수 있다.
필터링부(510)는 마이크로폰들로부터 입력된 음향 신호가 마이크로폰들의 간격에 따라 분할된 주파수 대역을 통과하도록 형성된, 복수 개의 대역 통과 필터를 포함한다. 필터링부(510)에 포함된 각각의 대역 통과 필터는, 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 분할된 주파수 대역의 음향 신호를 통과시키도록 구성된다.
음질 향상 장치(500)의 4개의 마이크로폰(10, 20, 30, 40)이 최소 잉여 선형 어레이 구조를 가지는 경우, 필터링부(510)는 6개의 대역 통과 필터(BPF1, BPF2, BPF3, BPF4, BPF5, BPF6)를 포함할 수 있다.
6개의 대역 통과 필터(BPF1, BPF2, BPF3, BPF4, BPF5, BPF6)는 마이크로폰들(10, 20, 30, 40)의 간격에 따라 분할된 6개의 주파수 대역을 각각 통과하도록 구성된다. 상세하게는, 대역 통과 필터(BPF1)는 마이크로폰(10)으로부터 입력된 제1 음향 신호 및 마이크로폰(20)으로부터 입력된 제2 음향 신호에 대해서 4220~8500㎐의 주파수 대역을 통과시키도록 구성될 수 있다. 대역 통과 필터(BPF2)는 마이크로폰(30)으로부터 입력된 제3 음향 신호 및 마이크로폰(40)으로부터 입력된 제4 음향 신호에 대하여, 2810~4220㎐의 주파수 대역을 통과시키도록 구성될 수 있다. 대역 통과 필터(BPF3)는 제2 음향 신호 및 제3 음향 신호에 대하여, 2090~2810㎐의 주파수 대역을 통과시키도록 구성될 수 있다. 대역 통과 필터(BPF4)는 제1 음향 신호 및 제3 음향 신호에 대하여, 1690~2090㎐의 주파수 대역을 통과시키도록 구성될 수 있다. 대역 통과 필터(BPF5)는 제2 음향 신호 및 제4 음향 신호에 대해서, 1400~1690㎐의 주파수 대역을 통과시키도록 구성될 수 있다. 대역 통과 필터(BPF6)는 제1 음향 신호 및 제4 음향 신호에 대해서, 0~1400㎐의 주파수 대역을 통과시키도록 구성될 수 있다.
주파수 변환부(520)는 필터링부(510)를 통과한 음향 신호들을 각각 주파수 영역의 음향 신호로 변환한다. 주파수 변환부(520)는 4개의 마이크로폰들(10, 20, 30, 40)으로부터 입력되는 음향 신호를 처리하는 경우, 필터링부(510)로부터 12개의 음향 신호를 입력받아서 각각 주파수 영역의 음향 신호로 변환할 수 있다.
2채널 빔포밍부(530)는 복수 개의 대역 통과 필터에서 동일한 대역 통과 필터를 통과한 주파수 대역별 2개의 음향 신호들마다 2채널 빔포밍을 수행하여, 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력한다. 2채널 빔포밍부(530)는 6개의 빔 포머(BP1, BP2, BP3, BP4, BP5, BP6)를 포함할 수 있다.
빔 포머(BP1)는 4220~8500㎐의 주파수 대역의 제1 음향 신호 및 제2 음향 신호를 이용하여 2채널 빔 포밍을 수행할 수 있다. 빔 포머(BP2)는 2810~4220㎐의 주파수 대역의 제3 음향 신호 및 제4 음향 신호를 이용하여 2채널 빔 포밍을 수행할 수 있다. 빔 포머(BP3)는 2090~2810㎐의 주파수 대역의 제2 음향 신호 및 제3 음향 신호를 이용하여 2채널 빔 포밍을 수행할 수 있다. 빔 포머(BP4)는 1690~2090㎐의 주파수 대역의 제1 음향 신호 및 제3 음향 신호를 이용하여 2채널 빔 포밍을 수행할 수 있다. 빔 포머(BP5)는 1400~1690㎐의 주파수 대역의 제2 음향 신호 및 제4 음향 신호를 이용하여, 2채널 빔 포밍을 수행할 수 있다. 빔 포머(BP6)는 0~1400㎐의 주파수 대역의 제1 음향 신호 및 제4 음향 신호를 이용하여 2채널 빔 포밍을 수행할 수 있다.
병합부(540)는 주파수 대역별 음향 신호들마다 생성되는 잡음이 감소된 신호들을 병합한다. 일 실시예에서, 병합부(540)는 2채널 빔포밍부(530)에서 각 주파수 대역별로 2채널 빔 포밍을 통해 출력되는 6개의 음향 신호를 합하여 전 주파수 대역(0~8500㎐)에서의 음향 신호를 획득할 수 있다.
주파수 역변환부(550)는 병합된 신호를 시간 영역의 음향 신호로 변환한다.
도 6은 음질 향상 방법의 일 예를 나타내는 순서도이다.
도 1 및 도 6을 참조하면, 음질 향상 장치(100)는 비등간격으로 배치된 3개 이상의 마이크로폰으로부터 입력된 음향 신호들을 주파수 영역의 음향 신호들로 변환한다(610). 3개 이상의 마이크로폰은 마이크로폰들 간의 간격에 대한 잉여 성분이 최소화되도록 배치되는 최소 잉여 선형 어레이 구조를 가질 수 있다.
음질 향상 장치(100)는 마이크로폰의 간격에 따라 변환된 음향 신호들의 주파수 대역을 분할한다(620). 음질 향상 장치(100)는, 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 주파수 대역을 분할할 수 있다. 음질 향상 장치(100)는, 음속(c)을 마이크로폰 간격(d)의 2배수인 값으로 나눈 값보다 작게 되도록, 주파수의 최대값(fo)을 결정할 수 있다. 또한, 음질 향상 장치(100)는 마이크로폰의 간격의 개수에 대응하는 개수로 주파수 대역을 분할할 수 있다.
음질 향상 장치(100)는 분할된 주파수 대역에 기초하여, 주파수 영역의 음향 신호들을 2채널의 신호로 병합한다(630). 음질 향상 장치(100)는, 마이크로폰의 간격의 모든 조합(또는 세트)에 대해서, 마이크로폰의 간격을 형성하는 2개의 마이크로폰들로부터 입력된 주파수 영역의 음향 신호에서, 마이크로폰의 간격에 따라 분할된 주파수 대역의 음향 신호를 추출하여 2채널의 음향 신호로 병합할 수 있다.
음질 향상 장치(100)는 2채널의 신호를 이용하여 2채널 빔 포밍을 수행하여, 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력한다(640).
도 7은 음질 향상 방법의 다른 예를 나타내는 순서도이다.
도 5 및 도 7을 참조하면, 음질 향상 장치(500)는 비등간격으로 배치된 3개 이상의 마이크로폰들로부터 입력된 음향 신호들을 마이크로폰들의 간격에 따라 분할된 주파수 대역별로 통과시킨다(710). 음질 향상 장치(500)는 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 분할된 주파수 대역의 음향 신호를 통과시킬 수 있다.
음질 향상 장치(500)는 주파수 대역별로 통과된 음향 신호들을 주파수 영역의 음향 신호로 변환한다(720).
음질 향상 장치(500)는 비등간격으로 배치된 3개 이상의 마이크로폰들로부터 입력된 음향 신호들을 마이크로폰들의 간격에 따라 분할된 주파수 대역별로 통과시키는 과정(710)에서 동일한 대역 통과 필터를 통과한 주파수 대역별 음향 신호들마다 2채널 빔 포밍을 수행하여, 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력한다(730).
음질 향상 장치(500)는 주파수 대역별 음향 신호들마다 생성되는 잡음이 감소된 신호들을 병합한다(740).
음질 향상 장치(500)는 병합된 신호를 시간 영역의 음향 신호로 변환한다(750).
도 8은 일 실시예에 따른 음질 향상 장치 및 방법에 따라 형성되는 빔 패턴의 일 예를 나타내는 도면이다.
도 8에 도시된 바와 같이, 비등간격 마이크로폰 어레이와 2채널 빔포밍을 채용하는 일 실시예에 따른 음질 향상 장치 및 방법에 따르면, 저주파 대역에서 무지향성 특성이 나타나거나 고주파 대역에서 공간적 앨리어싱에 의해 그레이팅 로브가 발생되지 않으면서 1200~2000㎐, 3000~4000㎐, 6200~7200㎐ 광대역의 주파수 대역에 대해 빔 패턴이 고르게 잘 형성될 수 있다.
본 발명의 일 양상은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있다. 상기의 프로그램을 구현하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 디스크 등을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드로 저장되고 실행될 수 있다.
이상의 설명은 본 발명의 일 실시예에 불과할 뿐, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 본질적 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현할 수 있을 것이다. 따라서, 본 발명의 범위는 전술한 실시예에 한정되지 않고 특허 청구범위에 기재된 내용과 동등한 범위 내에 있는 다양한 실시 형태가 포함되도록 해석되어야 할 것이다.

Claims (20)

  1. 비등간격으로 배치된 3개 이상의 마이크로폰;
    상기 마이크로폰으로부터 입력된 음향 신호들을 주파수 영역의 음향 신호들로 변환하는 주파수 변환부;
    상기 마이크로폰의 간격에 따라 상기 변환된 음향 신호들의 주파수 대역을 분할하고, 상기 분할된 주파수 대역에 기초하여 상기 주파수 영역의 음향 신호들을 2채널의 신호로 병합하는 대역 분할 및 병합부; 및
    상기 2채널의 신호를 이용하여 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력하는 2채널 빔포밍부를 포함하는 음질 향상 장치.
  2. 제1항에 있어서,
    상기 3개 이상의 마이크로폰은 마이크로폰들 간의 간격에 대한 잉여 성분이 최소화되도록 배치되는 최소 잉여 선형 어레이 구조를 가지는 음질 향상 장치.
  3. 제1항에 있어서,
    상기 대역 분할 및 병합부는, 상기 마이크로폰의 간격에 따라 상기 변환된 음향 신호들의 주파수 대역을 분할할 때, 상기 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 주파수 대역을 분할하는 음질 향상 장치.
  4. 제3항에 있어서,
    상기 대역 분할 및 병합부는, 음속(c)을 마이크로폰 간격(d)의 2배수인 값으로 나눈 값보다 작게 되도록, 상기 주파수의 최대값(fo)을 결정하는 음질 향상 장치.
  5. 제1항에 있어서,
    상기 대역 분할 및 병합부는, 상기 마이크로폰의 간격에 따라 상기 변환된 음향 신호들의 주파수 대역을 분할할 때, 상기 마이크로폰의 간격의 개수에 대응하는 개수로 주파수 대역을 분할하는 음질 향상 장치.
  6. 제1항에 있어서,
    상기 대역 분할 및 병합부는, 상기 마이크로폰의 간격의 모든 세트에 대해서, 상기 마이크로폰의 간격을 형성하는 2개의 마이크로폰들로부터 입력된 주파수 영역의 음향 신호에서, 상기 마이크로폰의 간격에 따라 분할된 주파수 대역의 음향 신호를 추출하여 2채널의 음향 신호로 병합하는 음질 향상 장치.
  7. 제1항에 있어서,
    상기 출력된 신호를 시간 영역의 음향 신호로 변환하는 주파수 역변환부를 더 포함하는 음질 향상 장치.
  8. 비등간격으로 배치된 3개 이상의 마이크로폰;
    상기 마이크로폰들로부터 입력된 음향 신호가 상기 마이크로폰들의 간격에 따라 분할된 주파수 대역을 통과하도록 형성된 복수 개의 대역 통과 필터를 포함하는 필터링부;
    상기 필터링부를 통과한 음향 신호를 주파수 영역의 음향 신호로 변환하는 주파수 변환부;
    상기 복수 개의 대역 통과 필터에서 동일한 대역 통과 필터를 통과한 주파수 대역별 2채널의 음향 신호들마다 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력하는 2채널 빔포밍부;
    상기 주파수 대역별 음향 신호들마다 생성되는 잡음이 감소된 신호들을 병합하는 병합부; 및
    상기 병합된 신호를 시간 영역의 음향 신호로 변환하는 주파수 역변환부를 포함하는 음질 향상 장치.
  9. 제8항에 있어서,
    상기 3개 이상의 마이크로폰은 마이크로폰들 간의 간격에 대한 잉여 성분이 최소화되도록 배치되는 최소 잉여 선형 어레이 구조를 가지는 음질 향상 장치.
  10. 제8항에 있어서,
    상기 필터링부에 포함된 각각의 대역 통과 필터는, 상기 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 분할된 주파수 대역의 음향 신호를 통과시키도록 구성된 음질 향상 장치.
  11. 비등간격으로 배치된 3개 이상의 마이크로폰으로부터 입력된 음향 신호들을 주파수 영역의 음향 신호들로 변환하는 단계;
    상기 마이크로폰의 간격에 따라 상기 변환된 음향 신호들의 주파수 대역을 분할하는 단계;
    상기 분할된 주파수 대역에 기초하여 상기 주파수 영역의 음향 신호들을 2채널의 신호로 병합하는 단계; 및
    상기 2채널의 신호를 이용하여 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력하는 단계를 포함하는 음질 향상 방법.
  12. 제11항에 있어서,
    상기 3개 이상의 마이크로폰은 마이크로폰들 간의 간격에 대한 잉여 성분이 최소화되도록 배치되는 최소 잉여 선형 어레이 구조를 가지는 음질 향상 방법.
  13. 제11항에 있어서,
    상기 마이크로폰의 간격에 따라 상기 변환된 음향 신호들의 주파수 대역을 분할하는 단계는,
    상기 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 주파수 대역을 분할하는 단계를 포함하는 음질 향상 방법.
  14. 제13항에 있어서,
    상기 주파수의 최대값(fo)은 음속(c)을 마이크로폰 간격(d)의 2배수인 값으로 나눈 값보다 작게 되도록 결정되는 음질 향상 방법.
  15. 제11항에 있어서,
    상기 마이크로폰의 간격에 따라 상기 변환된 음향 신호들의 주파수 대역을 분할하는 단계는, 상기 마이크로폰의 간격의 개수에 대응하는 개수로 주파수 대역을 분할하는 단계를 포함하는 음질 향상 방법.
  16. 제11항에 있어서,
    상기 2채널의 신호로 병합하는 단계는, 상기 마이크로폰의 간격의 모든 세트에 대해서, 상기 마이크로폰의 간격을 형성하는 2개의 마이크로폰들로부터 입력된 주파수 영역의 음향 신호에서, 상기 마이크로폰의 간격에 따라 분할된 주파수 대역의 음향 신호를 추출하여 2채널의 음향 신호로 병합하는 단계를 포함하는 음질 향상 방법.
  17. 제11항에 있어서,
    상기 출력된 신호를 시간 영역의 음향 신호로 변환하는 단계를 더 포함하는 음질 향상 방법.
  18. 비등간격으로 배치된 3개 이상의 마이크로폰들로부터 입력된 음향 신호들을 상기 마이크로폰들의 간격에 따라 분할된 주파수 대역별로 통과시키는 단계;
    상기 주파수 대역별로 통과된 음향 신호들을 주파수 영역의 음향 신호로 변환하는 단계;
    상기 분할된 주파수 대역별로 통과시키는 단계에서 동일한 대역 통과 필터를 통과한 2채널의 주파수 대역별 음향 신호들마다 목적음 방향 이외의 방향으로부터 입력되는 잡음을 감소시켜 잡음이 감소된 신호를 출력하는 단계;
    상기 주파수 대역별 음향 신호들마다 생성되는 잡음이 감소된 신호들을 병합하는 단계; 및
    상기 병합된 신호를 시간 영역의 음향 신호로 변환하는 단계를 포함하는 음질 향상 방법.
  19. 제18항에 있어서,
    상기 3개 이상의 마이크로폰은 마이크로폰들 간의 간격에 대한 잉여 성분이 최소화되도록 배치되는 최소 잉여 선형 어레이 구조를 가지는 음질 향상 방법.
  20. 제18항에 있어서,
    입력된 음향 신호를 상기 마이크로폰들의 간격에 따라 분할된 주파수 대역별로 통과시키는 단계는,
    상기 마이크로폰의 간격마다 공간적 앨리어싱이 일어나지 않도록 하는 주파수의 최대값을 이용하여 분할된 주파수 대역의 음향 신호를 통과시키는 단계를 포함하는 음질 향상 방법.
KR1020100091920A 2010-09-17 2010-09-17 비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법 KR101782050B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020100091920A KR101782050B1 (ko) 2010-09-17 2010-09-17 비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법
US13/114,746 US8965002B2 (en) 2010-09-17 2011-05-24 Apparatus and method for enhancing audio quality using non-uniform configuration of microphones
EP11181569.2A EP2431973B1 (en) 2010-09-17 2011-09-16 Apparatus and method for enhancing audio quality using non-uniform configuration of microphones
CN201110288677.6A CN102421050B (zh) 2010-09-17 2011-09-19 使用麦克风的非均匀布局来增强音频质量的设备和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100091920A KR101782050B1 (ko) 2010-09-17 2010-09-17 비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20120029839A true KR20120029839A (ko) 2012-03-27
KR101782050B1 KR101782050B1 (ko) 2017-09-28

Family

ID=44905397

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100091920A KR101782050B1 (ko) 2010-09-17 2010-09-17 비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법

Country Status (4)

Country Link
US (1) US8965002B2 (ko)
EP (1) EP2431973B1 (ko)
KR (1) KR101782050B1 (ko)
CN (1) CN102421050B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101713748B1 (ko) * 2015-12-09 2017-03-08 현대자동차주식회사 마이크로폰 및 그 제조 방법

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101782050B1 (ko) * 2010-09-17 2017-09-28 삼성전자주식회사 비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법
CN102306496B (zh) * 2011-09-05 2014-07-09 歌尔声学股份有限公司 一种多麦克风阵列噪声消除方法、装置及系统
DE102012204877B3 (de) * 2012-03-27 2013-04-18 Siemens Medical Instruments Pte. Ltd. Hörvorrichtung für eine binaurale Versorgung und Verfahren zum Bereitstellen einer binauralen Versorgung
FR2992459B1 (fr) * 2012-06-26 2014-08-15 Parrot Procede de debruitage d'un signal acoustique pour un dispositif audio multi-microphone operant dans un milieu bruite.
JP6107151B2 (ja) 2013-01-15 2017-04-05 富士通株式会社 雑音抑圧装置、方法、及びプログラム
CN104065798B (zh) * 2013-03-21 2016-08-03 华为技术有限公司 声音信号处理方法及设备
DE102013217367A1 (de) * 2013-05-31 2014-12-04 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und verfahren zur raumselektiven audiowiedergabe
CN104751853B (zh) * 2013-12-31 2019-01-04 辰芯科技有限公司 双麦克风噪声抑制方法及系统
WO2015137146A1 (ja) * 2014-03-12 2015-09-17 ソニー株式会社 音場収音装置および方法、音場再生装置および方法、並びにプログラム
EP2928210A1 (en) * 2014-04-03 2015-10-07 Oticon A/s A binaural hearing assistance system comprising binaural noise reduction
JP6411780B2 (ja) * 2014-06-09 2018-10-24 ローム株式会社 オーディオ信号処理回路、その方法、それを用いた電子機器
US10609475B2 (en) 2014-12-05 2020-03-31 Stages Llc Active noise control and customized audio system
DK3057340T3 (da) * 2015-02-13 2019-08-19 Oticon As Partnermikrofonenhed og et høresystem, der omfatter en partnermikrofonenhed
CN104936096B (zh) 2015-05-29 2018-07-17 京东方科技集团股份有限公司 骨导声音传播装置和方法
GB2549922A (en) 2016-01-27 2017-11-08 Nokia Technologies Oy Apparatus, methods and computer computer programs for encoding and decoding audio signals
CN106251877B (zh) * 2016-08-11 2019-09-06 珠海全志科技股份有限公司 语音声源方向估计方法及装置
GB2554446A (en) 2016-09-28 2018-04-04 Nokia Technologies Oy Spatial audio signal format generation from a microphone array using adaptive capture
US9980042B1 (en) * 2016-11-18 2018-05-22 Stages Llc Beamformer direction of arrival and orientation analysis system
US10945080B2 (en) 2016-11-18 2021-03-09 Stages Llc Audio analysis and processing system
US9980075B1 (en) 2016-11-18 2018-05-22 Stages Llc Audio source spatialization relative to orientation sensor and output
US10334360B2 (en) * 2017-06-12 2019-06-25 Revolabs, Inc Method for accurately calculating the direction of arrival of sound at a microphone array
EP3499915B1 (en) * 2017-12-13 2023-06-21 Oticon A/s A hearing device and a binaural hearing system comprising a binaural noise reduction system
EP3804356A1 (en) 2018-06-01 2021-04-14 Shure Acquisition Holdings, Inc. Pattern-forming microphone array
US11297423B2 (en) * 2018-06-15 2022-04-05 Shure Acquisition Holdings, Inc. Endfire linear array microphone
CN109040884A (zh) * 2018-08-31 2018-12-18 上海联影医疗科技有限公司 基于医疗设备的语音系统
CN109358317B (zh) * 2018-09-30 2021-06-08 科大讯飞股份有限公司 一种鸣笛信号检测方法、装置、设备及可读存储介质
US10887467B2 (en) 2018-11-20 2021-01-05 Shure Acquisition Holdings, Inc. System and method for distributed call processing and audio reinforcement in conferencing environments
TW202044236A (zh) 2019-03-21 2020-12-01 美商舒爾獲得控股公司 具有抑制功能的波束形成麥克風瓣之自動對焦、區域內自動對焦、及自動配置
WO2020237206A1 (en) 2019-05-23 2020-11-26 Shure Acquisition Holdings, Inc. Steerable speaker array, system, and method for the same
WO2020241050A1 (ja) * 2019-05-28 2020-12-03 ソニー株式会社 音声処理装置、音声処理方法およびプログラム
CN111385685A (zh) * 2019-06-28 2020-07-07 深圳国威电子有限公司 一种具有拾音器排列矩阵呈非线性的无线通讯装置
TWI731391B (zh) * 2019-08-15 2021-06-21 緯創資通股份有限公司 麥克風裝置、電子裝置及其音訊信號處理方法
EP4018680A1 (en) 2019-08-23 2022-06-29 Shure Acquisition Holdings, Inc. Two-dimensional microphone array with improved directivity
JP2024505068A (ja) 2021-01-28 2024-02-02 シュアー アクイジッション ホールディングス インコーポレイテッド ハイブリッドオーディオビーム形成システム
CN113411698B (zh) * 2021-06-21 2022-11-25 歌尔科技有限公司 音频信号处理方法及智能音箱
CN115452141B (zh) * 2022-11-08 2023-03-31 杭州兆华电子股份有限公司 一种非均匀声学成像方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7099821B2 (en) 2003-09-12 2006-08-29 Softmax, Inc. Separation of target acoustic signals in a multi-transducer arrangement
GB0405455D0 (en) * 2004-03-11 2004-04-21 Mitel Networks Corp High precision beamsteerer based on fixed beamforming approach beampatterns
DE602004015987D1 (de) 2004-09-23 2008-10-02 Harman Becker Automotive Sys Mehrkanalige adaptive Sprachsignalverarbeitung mit Rauschunterdrückung
US7464029B2 (en) 2005-07-22 2008-12-09 Qualcomm Incorporated Robust separation of speech signals in a noisy environment
WO2007026827A1 (ja) * 2005-09-02 2007-03-08 Japan Advanced Institute Of Science And Technology マイクロホンアレイ用ポストフィルタ
CN100578622C (zh) * 2006-05-30 2010-01-06 北京中星微电子有限公司 一种自适应麦克阵列系统及其语音信号处理方法
CN100505041C (zh) * 2006-09-08 2009-06-24 联想移动通信科技有限公司 一种声音信号采集处理系统及方法
US8934640B2 (en) * 2007-05-17 2015-01-13 Creative Technology Ltd Microphone array processor based on spatial analysis
KR20090098426A (ko) 2008-03-14 2009-09-17 (주)엘리더스 적응 필터를 이용한 마이크로폰 어레이 시스템에서 음원 방향 자동추출 방법
JP5195652B2 (ja) * 2008-06-11 2013-05-08 ソニー株式会社 信号処理装置、および信号処理方法、並びにプログラム
JP2010091912A (ja) 2008-10-10 2010-04-22 Equos Research Co Ltd 音声強調システム
KR101475864B1 (ko) 2008-11-13 2014-12-23 삼성전자 주식회사 잡음 제거 장치 및 잡음 제거 방법
US8654990B2 (en) * 2009-02-09 2014-02-18 Waves Audio Ltd. Multiple microphone based directional sound filter
KR101782050B1 (ko) * 2010-09-17 2017-09-28 삼성전자주식회사 비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101713748B1 (ko) * 2015-12-09 2017-03-08 현대자동차주식회사 마이크로폰 및 그 제조 방법
US9866968B2 (en) 2015-12-09 2018-01-09 Hyundai Motor Company Microphone and manufacturing method of microphone

Also Published As

Publication number Publication date
US20120070015A1 (en) 2012-03-22
CN102421050A (zh) 2012-04-18
US8965002B2 (en) 2015-02-24
EP2431973B1 (en) 2015-11-25
CN102421050B (zh) 2017-04-12
KR101782050B1 (ko) 2017-09-28
EP2431973A1 (en) 2012-03-21

Similar Documents

Publication Publication Date Title
KR101782050B1 (ko) 비등간격으로 배치된 마이크로폰을 이용한 음질 향상 장치 및 방법
KR101117936B1 (ko) 마이크로폰 어레이를 사용하는 빔성형 시스템 및 방법
KR101456866B1 (ko) 혼합 사운드로부터 목표 음원 신호를 추출하는 방법 및장치
EP3384684B1 (en) Conference system with a microphone array system and a method of speech acquisition in a conference system
US8654990B2 (en) Multiple microphone based directional sound filter
KR101555416B1 (ko) 음향 삼각 측량에 의한 공간 선택적 사운드 취득 장치 및 방법
KR101415026B1 (ko) 마이크로폰 어레이를 이용한 다채널 사운드 획득 방법 및장치
CN103856866B (zh) 低噪微分麦克风阵列
WO2014085978A1 (en) Low noise differential microphone arrays
JP2020098365A (ja) 音場記述を生成する装置、方法、及びコンピュータプログラム
Quaegebeur et al. Enhancement of time-domain acoustic imaging based on generalized cross-correlation and spatial weighting
KR20110106715A (ko) 후방 잡음 제거 장치 및 방법
JP2008054071A (ja) 紙擦れ音除去装置
Derkx et al. Theoretical analysis of a first-order azimuth-steerable superdirective microphone array
JP2018170717A (ja) 収音装置、プログラム及び方法
KR20090037845A (ko) 혼합 신호로부터 목표 음원 신호를 추출하는 방법 및 장치
US10764676B1 (en) Loudspeaker beamforming for improved spatial coverage
JP2020120261A (ja) 収音装置、収音プログラム及び収音方法
JPWO2016136284A1 (ja) 信号処理装置、信号処理方法および信号処理プログラム並びに端末装置
CN117711418A (zh) 一种定向拾音方法、系统、设备及存储介质
Sugiyama et al. A tablet personal computer with diagonal microphone placement for the landscape/portrait interchangeable mode

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant