KR20130125227A - 하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템 - Google Patents

하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템 Download PDF

Info

Publication number
KR20130125227A
KR20130125227A KR1020120048808A KR20120048808A KR20130125227A KR 20130125227 A KR20130125227 A KR 20130125227A KR 1020120048808 A KR1020120048808 A KR 1020120048808A KR 20120048808 A KR20120048808 A KR 20120048808A KR 20130125227 A KR20130125227 A KR 20130125227A
Authority
KR
South Korea
Prior art keywords
signal
harmonic frequency
demixing
frequency
harmonic
Prior art date
Application number
KR1020120048808A
Other languages
English (en)
Other versions
KR101356039B1 (ko
Inventor
이수영
최충환
장원일
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020120048808A priority Critical patent/KR101356039B1/ko
Priority to PCT/KR2012/004825 priority patent/WO2013168848A1/ko
Publication of KR20130125227A publication Critical patent/KR20130125227A/ko
Application granted granted Critical
Publication of KR101356039B1 publication Critical patent/KR101356039B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0272—Voice signal separating
    • G10L21/028—Voice signal separating using properties of sound source

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

본 발명에 따른 암묵 신호 분리 방법은 주파수 영역에서 신호를 분리하는 방법으로서, 2개 이상의 음원으로부터의 신호가 혼합되어 수신되는 단계 및 복수의 하모닉 주파수 집단 중 동일한 하모닉 주파수 집단에 포함된 주파수빈 사이에 종속성을 가정하여 상기 수신된 신호를 디믹싱하는 단계를 포함한다.

Description

하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템 {BLIND SOURCE SEPARATION METHOD USING HARMONIC FREQUENCY DEPENDENCY AND DE-MIXING SYSTEM THEREFOR}
본 발명은 하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템에 관한 것이며, 보다 구체적으로 음성 및/또는 음악 신호에서 하모닉 주파수 사이에 종속관계를 바탕으로 독립 벡터 분석을 통해 신호를 분리하는 암묵 신호 분리 알고리즘에 관한 것이다.
독립 성분 분석(ICA: Independent Component Analysis)은 출력 신호들 사이에 통계적 독립성을 이용하는 암묵 신호 분리(BSS: Blind Source Separation) 알고리즘이다. 주파수 도메인 독립 성분 분석(FDICA: Frequency Domain ICA)가 콘볼루티브 BSS 알고리즘을 위해 이용되어 왔는바, 이는 상기 알고리즘에서 시간 도메인에서의 콘볼루티브 혼합신호가 주파수 도메인에서 순간 혼합신호(instantaneous mixture)로 모델링될 수 있기 때문이다. 이러한 모델링에 따라 분리 문제가 단순화될 수 있다. FDCIA는 각 주파수 채널의 신호 성분을 성공적으로 분리한다. 그러나, 주파수 빈들(bins) 사이에서 분리된 주파수 성분들의 임의적인 퍼뮤테이션(random permutation) 문제가 발생된다.
독립 성분 분석의 다변수 확장인 독립 벡터 분석(IVA: Independent Vector Analysis)은 주파수 성분들 사이의 종속성을 이용함으로써 상기 퍼뮤테이션 불확정성 문제를 해소한다. 종래의 기본 IVA 모델에 따른 연구(참조: KIM, T., ATTIAS, H.T., LEE, S.-Y., and LEE, T.-W.: 'Blind source separation exploiting higher-order frequency dependencies', IEEE Trans. Audio Speech Lang. Process., 2007, 15, (1), pp. 70-79)에서, 음원 신호는 주파수 성분 벡터로서 표현되고, 독립 벡터 분석은 선험적으로 전대역에서 방사상 대칭인 결합 확률 밀도 함수(PDF: Probability Density function)를 이용하여 음원 신호를 모델링하여 신호를 분리할 수 있다. 여기서, 상기 확률 밀도 함수는 주파수 성분 사이의 종속성을 가정한다. 보다 구체적으로, 이상에서 살펴본 바와 같은 기본 IVA(Original IVA) 모델에서는 혼합되기 전의 각각의 신호 사이에는 확률적으로 독립적인 관계가 있다는 제1가정과 각 신호의 서로 다른 주파수 성분 사이에는 종속적인 관계가 존재한다는 제2가정을 이용하였다.
이후, 개선된 주파수 종속성 모델을 나타내는 독립 벡터 분석법이 제시되었다. 이는 부대역 국부 집단 IVA 모델(참조: LEE, I., JANG, G.-J., and LEE, T.-W.: 'Independent vector analysis using densities represented by chain-like overlapped cliques in graphical models for separation of convolutedly mixed signals', Electronics Letters, 2009, 45, (13), pp. 710-711)로 지칭된다. 이 방법은 상기 기본 IVA 모델의 제1가정은 유지하되 각 신호의 서로 다른 주파수 성분 사이에서도 가까운 주파수 성분 사이에는 종속적인 관계를 가정하고, 먼 주파수 성분 사이에는 종속성이 없는 것으로 수정된 제2가정을 나타낸다.
최근 들어, 우리가 주로 접할 수 있는 음성 또는 음악과 같은 음원 신호에서 효과적으로 신호를 분리할 수 있는 기술에 대한 필요성이 커지고 있다.
한국공개공보 제10-2008-0019879호 (2008.03.05)
본 발명은 종래기술의 문제점을 해결하기 위해 안출된 것으로, 하모닉 주파수 구조를 갖는 음원 신호, 예컨대 음성 및/또는 음악 신호에 대해서 독립 벡터 분석을 통해 효과적으로 신호를 분리할 수 있는 기법을 제공하는 것을 목적으로 한다.
본 발명이 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 본 발명의 기재로부터 당해 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명에 따른 암묵 신호 분리 방법은 주파수 영역에서 신호를 분리하는 방법으로서 2개 이상의 음원으로부터의 신호가 혼합되어 수신되는 단계; 및 복수의 하모닉 주파수 집단 중 동일한 하모닉 주파수 집단에 포함된 주파수빈 사이에 종속성을 가정하여 상기 수신된 신호를 디믹싱하는 단계를 포함한다.
본 발명에 따라 수신된 음원 신호를 디믹싱하는 단계는 독립 벡터 분석법을 통해 수행될 수 있다.
본 발명에 따른 암묵 신호 분리를 위한 디믹싱 시스템은 주파수 영역에서 신호를 분리하는 디믹싱 시스템으로서, 2개 이상의 음원으로부터의 신호가 혼합되어 수신되는 신호 수신부; 및 복수의 하모닉 주파수 집단 중 동일한 하모닉 주파수 집단에 포함된 주파수빈 사이에 종속성을 가정하여 상기 수신된 신호를 디믹싱하는 디믹싱 필터를 포함한다.
본 발명에 따르면 하모닉 주파수 구조를 갖는 음원 신호, 예컨대 음성 및/또는 음악 신호에 대해서 독립 벡터 분석을 통해 효과적으로 신호를 분리할 수 있는 알고리즘 및 방법을 제공할 수 있다. 또한, 본 발명에 따르면 암묵 신호 분리시에 주파수 빈들 퍼뮤테이션 문제를 방지할 수 있다.
도1은 본 발명의 실시예에 따른 암묵 신호 분리 알고리즘이 실행될 수 있는 디믹싱 시스템의 환경을 예시한다.
도2는 (a)에 기본 IVA 모델의 광역 주파수 집단, (b)에 부대역 국부 IVA 모델의 부대역 국부 주파수 집단, 및 (c)에 본 발명의 실시예에 따른 하모닉 주파수 집단 IVA 모델의 하모닉 주파수 집단을 나타낸다.
도3은 본 발명의 실시예에 따른 암묵 신호 분리 알고리즘의 성능을 실험하기 위함 모의 실험 환경을 나타낸다.
이하, 본 발명의 바람직한 실시예의 상세한 설명이 첨부된 도면들을 참조하여 설명된다. 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있으며, 도면들 중 인용부호들 및 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 인용부호들로 표시됨을 유의해야 한다. 참고로 본 발명을 설명함에 있어서 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
인간이 주로 다루는 신호는 음성이나 음악신호이다. 이러한 음성 신호와 음악 신호의 스펙트럼을 살펴보면 이들의 주파수 성분 사이에 하모닉 관계가 존재함을 알 수 있다. 즉, 음성 신호와 음악 신호는 강한 하모닉 구조를 갖는 것으로 지칭될 수 있다.
본 발명의 실시예에서는, 음성 신호와 음악 신호 이외에도, 하모닉 주파수(harmonic frequency) 성분들을 갖는 음원 신호에 대해서 하모닉 주파수 성분 사이의 종속성을 이용함으로써 신호를 분리할 수 있는 기술을 제시한다. 즉, 본 발명의 실시예에서는 하모닉 주파수 성분 사이에 종속 관계를 이용하여 독립 벡터 분석법을 위한 개선된 주파수 종속 모델을 제시한다. 종래의 주파수 종속 모델에 비해, 본 발명의 실시예에 따른 주파수 종속 모델은 음성 및 음악 신호와 같이 강한 하모닉 구조를 갖는 소리 신호를 분리하는데 매우 효과적이다.
도1은 본 발명의 실시예에 따른 암묵 신호 분리 알고리즘이 실행될 수 있는 디믹싱 시스템의 환경을 예시한다. 도1에 도시된 바와 같이, 2이상의 소스(10, 12)로부터 음원 신호가 혼합되어 1이상의 신호 수신부(20, 22)에 의해 수신되는 경우를 고려할 수 있다. 도1에서는 실내 환경을 예시한다. 따라서, 소스(10, 12)로부터의 신호는 직접 경로(D11, D12, D21, D22)를 통해서 신호 수신부(20, 22)에 도달할 뿐 아니라, 실내에 반향되어 반향 경로(R11, R12, R21, R22)를 통해서도 도달할 수 있다. 이렇게 수신된 음원 신호는 디믹싱 시스템(30)에 입력될 수 있다. 상기 디믹싱 시스템(30)을 통해 수행되는 디믹싱(de-mixing)을 통해 혼합되어 수신된 음원 신호가 분리될 수 있다. 이하에서는 디믹싱 시스템(30)에 신호 수신부(20, 22)를 포괄하는 개념으로 지칭될 수 있다.
이때, 음원 신호나 혼합 환경에 대한 정보가 없는 상태가 "암묵" 상태로 지칭된다. 즉, 본 발명의 실시예에서는 암묵 상태에서 수신된 신호를 분리하는 알고리즘을 제공한다.
이하에서는 본 발명의 실시예에 따라 하모닉 주파수 집단(harmonic frequency clique) 내에서의 종속성에 근거한 독립 벡터 분석법에 대해서 설명한다.
우선, 상기 디믹싱 시스템(30)에 수신된 혼합 신호는 단기 푸리에 변환(STFT: Short-Time Fourier Transform)을 통해 주파수 도메인에서 표현된다. 주파수 도메인에서 콘볼루티브 암목 신호 분리 알고리즘은 빈별(bin-wise) 순간 혼합 모델을 근사화하는 것으로부터 시작된다. 각각의 주파수빈에 대해서, 상기 모델은 아래와 같이 공식화될 수 있다:
Figure pat00001
수학식 (1)
여기서, 아래 첨자 k는 주파수 빈의 색인(frequency bin index)를 나타낸다. yk는 디믹싱 시스템(30)에 의해 디믹싱이 완료되어 분리된 신호를 나타내고, xk는 신호 수신부(20,22)에서 수신되어 디믹싱 시스템(30)에 입력되는 신호를 나타내고, 그리고 sk는 음원(10, 12)으로부터의 신호를 나타낸다.
비록 도1에서는 2개의 음원과 2개의 마이크를 예시하지만, N개의 음원 신호와 N개의 마이크(microphone)가 존재하는 것으로 가정한다. N X N 행렬인 A k 와 W k 각각은 순간 믹싱(mixing) 및 디믹싱(de-mixing) 행렬을 나타낸다. 즉, A k는 음원 신호의 경로에 대한 전달함수를 나타내고, W k는 디믹싱 필터의 전달함수를 나타낸다. 따라서, 수신된 신호(xk)에 디믹싱 행렬(W k)를 곱함으로써 음원으로부터의 신호(sk)를 획득할 수 있어야 한다. 또한, K는 주파수 빈의 개수를 나타내고 t는 프레임의 시간 색인을 나타낸다.
본 발명의 실시예에서 분리 신호(y)는 아래 수학식(2)로 제안되는 다변수 확률 밀도 함수가 이용되어 표현될 수 있다.
Figure pat00002
수학식 (2)
여기서, yik는 yk=[ylk, ..., yNk]T의 i번째 원소를 나타낸다. H는 하모닉 집단의 총 개수를, 그리고 σhk는 하모닉 집단 h에 속하는 k번째 주파수 빈 그룹의 분리 신호의 절대값의 표준편차이며, 예컨대 1로 설정될 수 있다. Ch는 하모닉 집단 h에 속하는 주파수 빈 그룹을 나타낸다. H의 기본 주파수(fundamental frequency)는 Fh로 표시되고 아래와 같이 정의된다.
Figure pat00003
수학식 (3)
본 발명의 실시예에서, F1은 예컨대 55Hz로 설정될 수 있다. 또한, 하모닉 집단의 총 개수는 49로 예시될 수 있다. 이들 하모닉 집단들의 기본 주파수들은 A1(55Hz)로부터 A5(880Hz)까지의 음계 주파수(note frequency)들을 나타낸다. 이러한 주파수 범위는 인간 음성 신호의 전체 주파수를 포괄할 수 있다. 1≤h≤H-1인 조건하에서, 아래와 같은 수학식이 성립될 수 있다.
Figure pat00004
수학식 (4)
여기서, fk는 k번째 빈의 주파수를 나타내고, Ch는 h번째 국부 주파수 집단(clique)을 나타낸다. 집단 Ck는 Fh의 처음 8개의 배수 주파수로 이루어진 주파수 빈들을 포함한다(즉, M=8). Fh의 m번째 배수 주파수의 대역폭(즉, mFh)은 2δmFh이고, 두 개의 연속적은 하모닉 집단들은 서로 중첩될 수 있다. 이때, 연속적인 하모닉 집단들이 50%가 중첩되는 것이 예시된다. 집단 CH={1,K, K}은 모든 주파수 빈들을 포함한다. 이를 통해 55Hz 보다 작은 주파수를 갖는 주파수 빈들의 퍼뮤테이션이 방지되고 디믹싱 필터의 학습 속도가 향상될 수 있다. 도2(c)에는 본 발명의 실시예에 따른 하모닉 주파수 집단 IVA 모델의 하모닉 주파수 집단을 나타낸다. 도2(c)로부터 세로축에 49개의 하모닉 주파수 집단이 예시되고, 동일한 하모닉 주파수 집단에는 8개의 하모닉 주파수 빈들이 포함됨을 알 수 있다. 이때, 하모닉 주파수 집단의 개수, 하모닉 주파수 집단에 포함되는 하모닉 주파수 빈들의 개수, 및 연속적인 하모닉 집단들의 중첩 정도는 발명의 실시예에 따라 다양하게 변경될 수 있다.
디믹싱 시스템(30)에 수신된 신호를 디믹싱 하기 위해서 디믹싱 필터에서 디믹싱을 위한 전달함수(W)를 산출해야 한다. 예컨대, 전달함수(W)의 파라미터는 아래와 같은 방식으로 필터 파라미터 산출부에서 구해질 수 있다.
주파수 빈들 사이의 종속성 모델의 특성을 최대화하면서 독립 벡터 분석을 수행하기 위해서 아래와 같은 로그 우도 함수(log-likelihood)가 비용함수로서 사용될 수 있다.
Figure pat00005
수학식 (5)
최적화된 분리 신호를 획득하기 위해 아래와 같은 자연 경도 학습규칙(natural gradient learning rule)이 적용될 수 있다.
Figure pat00006
수학식 (6)
여기서, I는 N X N의 단위 행렬을 나타낸다. Φ(yk)는 N X 1의 컬럼 벡터(column vector)를 나타내며, 여기서 i번째 원소는 아래와 같이 정의된다.
Figure pat00007
수학식 (7)
여기서, Sk는 k번째 주파수 빈을 포함하는 집단들의 색인 그룹이다.
본 발명의 실시예에서, 디믹싱 시스템(30)에 포함된 필터 파라미터 산출부(미도시)는 수학식(5)와 같이 표현되는 비용함수를 이용하여 디믹싱을 위한 전달함수(W)를 구할 수 있다. 이후, 산출된 전달함수(W)를 이용하여 디믹싱 시스템(30)에 수신된 신호를 디믹싱 필터에서 디믹싱한다.
이때, 필터 파라미터 산출부는 디믹싱 필터로부터의 출력을 수신하고, 이에 기초하여 상기 수학식 (6)과 같이 표현되는 학습규칙에 따라 반복적으로 필터 파라미터를 구하여 디믹싱 필터에 공급할 수 있다. 이에 따라 디믹싱 필터는 적응적으로 동작할 수 있다. 즉, 전달함수(W)는, 수학식(6)의 학습규칙에 따라 반복적으로 연산을 수행함으로써, 적응적으로 얻어질 수 있다. 이후, 전달함수(W)가 수렴하는지 여부를 판단하여, 그러하지 않은 경우에는 이전 단계로 돌아가 전달함수(W)를 다시 산출하여 디믹싱을 수행할 수 있다.
이와 같이 적응적인 방식으로 획득된 전달함수(W)를 이용하여 분리된 신호(y)를 획득할 수 있으며, 이는 이후 필요에 따라 시간 도메인에서 표현되도록 변환될 수 있다.
시뮬레이션 결과( Simulation Results ):
본 발명의 실시예에 따라 제안된 알고리즘의 성능을 평가하기 위해 다양한 2 X 2 BSS 실험을 수행하였다. 본 실험에서 TIMIT 데이터베이스에서 8-s-길이 실제 음성 신호들, 8kHz 샘플링 레이트(sampling rate)의 바이올린 단선율 음악 신호들(monophonic music signals), 그리고 영상법(참조: ALLEN, J.B., and BERKLEY, D.A.: 'Image method for efficiently simulating small-room acoustics', J. Acoust. Soc. Am., 1979, 65, (4), pp. 943-950)에 의해 생성된 룸 임펄스 응답(room impulse response)들이 이용되었다.
도3은 본 발명의 실시예에 따른 암묵 신호 분리 알고리즘의 성능을 실험하기 위함 모의 실험 환경을 나타낸다. 두 개의 마이크(1,2)와 두 개의 소스 신호들(A 내지 K)이 7m X 5m X 2.75m 크기의 입방체의 룸에 배치되었다. 반향 시간(reverberation time)은 100ms로, 그리고 벽, 마루, 및 천장의 반사 계수는 0.57로 설정되었다. 본 실험에서 2048-포인트 FFT(Fast Fourier Transform), 2048-탭 해닝 윈도우(tab hanning window), 및 512 샘플의 쉬프트 크기(shift size)를 사용하였다.
본 발명의 실시예에 따라 제안된 모델의 성능을 다른 모델의 성능과 비교하기 위해서, 본 실험에서는 대조군으로 기본 IVA(참조: KIM, T., ATTIAS, H.T., LEE, S.-Y., and LEE, T.-W.: 'Blind source separation exploiting higher-order frequency dependencies', IEEE Trans. Audio Speech Lang. Process., 2007, 15, (1), pp. 70-79)와 부대역 국부 집단 IVA(참조: LEE, I., JANG, G.-J., and LEE, T.-W.: 'Independent vector analysis using densities represented by chain-like overlapped cliques in graphical models for separation of convolutedly mixed signals', Electronics Letters, 2009, 45, (13), pp. 710-711)를 이용하여 동일한 실험을 진행하였다. 상기 부대역 국부 집단은 128-빈 쉬프트된 7개의 256-빈 집단들로 구성된다. 도2(a) 및 도2(b)는 각각 기본 IVA 모델의 광역 주파수 집단과 부대역 국부 IVA 모델의 부대역 국부 주파수 집단을 나타낸다.
암묵 신호 분리 알고리즘의 분리 성능은 아래 수학식(8)에 의해 정의되는 신호 대 간섭비(SIR: Signal-to-Interference Ratio)의 관점에서 측정될 수 있다.
Figure pat00008
수학식 (8)
여기서, q(i)는 i번째 음원이 나타나는 분리된 음원 색인을 나타내고, 그리고 hiq (j)는
Figure pat00009
와 같이 정의되는 전역 임펄스 응답을 나타내며, 여기서 aijk 및 wijk는 각각 A k와 W k의 (i, j)번째 성분을 나타낸다.
두 개의 음성 신호를 분리한 실험 결과와, 음성 신호와 음악 신호를 분리한 실험 결과가 각각 아래 표1 및 표2에 표시되어 있다. 표1에서는 실험에 두 개의 음성 신호가 이용된 것을 나타내고, 표2에서는 실험에 하나의 음성 신호와 하나의 음악 신호가 이용된 것을 나타낸다.
Experiment number 1 2 3 4 5 6 7
Source locations A, I B, G E, G I, K C, D E, F I, J
Input SIR 0.7 0.0 0.0 -0.4 -0.0 0.0 -0.4
Original IVA 16.1 14.2 14.5 8.7 10.2 14.5 14.1
Sub-band local clique IVA 19.9 17.3 17.3 8.3 11.9 18.3 15.0
Harmonic clique IVA 21.3 18.6 18.1 10.1 13.4 19.2 15.8
Experiment number 1 2 3 4 5 6 7
Source locations A, I B, G E, G I, K C, D E, F I, J
Input SIR 0.2 0.4 0.3 -0.5 -0.1 0.1 -0.4
Original IVA 10.2 8.9 9.7 6.8 7.0 9.2 10.0
Sub-band local clique IVA 14.2 13.2 10.8 9.2 8.9 12.6 12.4
Harmonic clique IVA 15.4 14.7 14.4 9.6 10.2 14.1 13.0
표1 및 표2로부터 알 수 있는 바와 같이, Harmonic clique IVA로 표시된, 본 발명의 실시예에 따른 암묵 신호 분리 알고리즘을 이용한 경우 SIR 관점에서 기본 IVA(original IVA) 및 부대역 국부 집단 IVA(Sub-band local clique IVA)보다 일관적으로 더 나은 성능을 나타내고 있다.
이상에서 살펴본 바와 같이, 본 발명의 실시예에서는, 음성 및 음악 신호와 같이 하모닉 구조를 갖는 음원 신호에 대해서, 이러한 강력한 하모닉 구조를 고려한 BSS 알고리즘을 제안한다. 하모닉 집단들은 선험적으로 음원의 기본 주파수들의 배수 주파수들에 대한 주파수 빈들 사이에 종속성을 할당한다. 전술한 시뮬레이션 결과로부터 본 발명의 실시예에 따라 제안된 암묵 신호 분리 알고리즘에 따르면 종래의 BSS 알고리즘보다 음성 및 음악 신호들의 분리를 보다 효과적으로 달성할 수 있다.
이상 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해되어야 하고, 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
10, 12: 소스
20, 22: 신호 수신부
30: 디믹싱 시스템

Claims (12)

  1. 주파수 영역에서 신호를 분리하는 방법에 있어서,
    2개 이상의 음원으로부터의 신호가 혼합되어 수신되는 단계; 및
    복수의 하모닉 주파수 집단 중 동일한 하모닉 주파수 집단에 포함된 주파수빈 사이에 종속성을 가정하여 상기 수신된 신호를 디믹싱하는 단계;
    를 포함하는 것을 특징으로 하는 암묵 신호 분리 방법.
  2. 제1항에 있어서,
    상기 디믹싱하는 단계는:
    독립 벡터 분석법을 통해 수행되는 것을 특징으로 하는 암묵 신호 분리 방법.
  3. 제1항에 있어서,
    상기 디믹싱하는 단계는:
    비용함수
    Figure pat00010
    를 이용하여 전달함수(W)를 산출하되, 학습규칙
    Figure pat00011
    에 따라 반복적으로 상기 전달함수를 산출하는 단계; 및
    상기 전달함수를 이용하여 상기 수신된 신호를 디믹싱하는 단계를 포함하며,
    여기서, L은 로그우도 함수이고
    Figure pat00012
    인 것을 특징으로 하는 암묵 신호 분리 방법.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 음원으로부터의 신호는 음성 신호와 음악 신호 중 어느 하나 이상을 포함하는 것을 특징으로 하는 암묵 신호 분리 방법.
  5. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 복수의 하모닉 주파수 집단 중 연속적인 하모닉 주파수 집단은 서로 중첩되는 것을 특징으로 하는 암묵 신호 분리 방법.
  6. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 복수의 하모닉 주파수 집단은 49개의 하모닉 주파수 집단을 포함하며, 상기 복수의 하모닉 주파수 집단 각각은 해당 기본 주파수(Fh)의 최초 8개의 배수 주파수로 이루어진 주파수 빈들을 포함하는 것을 특징으로 하는 암묵 신호 분리 방법.
  7. 주파수 영역에서 신호를 분리하는 디믹싱 시스템에 있어서,
    2개 이상의 음원으로부터의 신호가 혼합되어 수신되는 신호 수신부; 및
    복수의 하모닉 주파수 집단 중 동일한 하모닉 주파수 집단에 포함된 주파수빈 사이에 종속성을 가정하여 상기 수신된 신호를 디믹싱하는 디믹싱 필터;
    를 포함하는 것을 특징으로 하는 암묵 신호 분리를 위한 디믹싱 시스템.
  8. 제7항에 있어서,
    상기 암묵 신호 분리는 독립 벡터 분석법을 통해 수행되는 것을 특징으로 하는 암묵 신호 분리를 위한 디믹싱 시스템.
  9. 제7항에 있어서,
    비용함수
    Figure pat00013
    를 이용하여 전달함수(W)를 산출하되, 학습규칙
    Figure pat00014
    에 따라 반복적으로 상기 전달함수를 산출하는 필터 파라미터 산출부를 더 포함하며,
    여기서, L은 로그우도 함수이고
    Figure pat00015
    인 것을 특징으로 하는 암묵 신호 분리를 위한 디믹싱 시스템.
  10. 제7항 내지 제9항 중 어느 한 항에 있어서,
    상기 음원으로부터의 신호는 음성 신호와 음악 신호 중 어느 하나 이상을 포함할 수 있는 것을 특징으로 하는 암묵 신호 분리를 위한 디믹싱 시스템.
  11. 제7항 내지 제9항 중 어느 한 항에 있어서,
    상기 복수의 하모닉 주파수 집단 중 연속적인 하모닉 주파수 집단은 서로 중첩되는 것을 특징으로 하는 암묵 신호 분리를 위한 디믹싱 시스템.
  12. 제7항 내지 제9항 중 어느 한 항에 있어서,
    상기 복수의 하모닉 주파수 집단은 49개의 하모닉 주파수 집단을 포함하며, 상기 복수의 하모닉 주파수 집단 각각은 해당 기본 주파수(Fh)의 최초 8개의 배수 주파수로 이루어진 주파수 빈들을 포함하는 것을 특징으로 하는 암묵 신호 분리를 위한 디믹싱 시스템.
KR1020120048808A 2012-05-08 2012-05-08 하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템 KR101356039B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120048808A KR101356039B1 (ko) 2012-05-08 2012-05-08 하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템
PCT/KR2012/004825 WO2013168848A1 (ko) 2012-05-08 2012-06-19 하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120048808A KR101356039B1 (ko) 2012-05-08 2012-05-08 하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템

Publications (2)

Publication Number Publication Date
KR20130125227A true KR20130125227A (ko) 2013-11-18
KR101356039B1 KR101356039B1 (ko) 2014-01-29

Family

ID=49550869

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120048808A KR101356039B1 (ko) 2012-05-08 2012-05-08 하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템

Country Status (2)

Country Link
KR (1) KR101356039B1 (ko)
WO (1) WO2013168848A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107390025A (zh) * 2017-07-31 2017-11-24 集美大学 基于盲源分离的电力系统多谐波源辨识方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105910701B (zh) * 2016-04-15 2019-04-30 天津大学 基于短样本频谱校正旋转机械振动信号盲分离方法及装置
CN112834821B (zh) * 2020-12-31 2023-08-11 国网上海市电力公司 一种多直流馈入全电缆供电区域多谐波源谐波责任量化方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006337851A (ja) * 2005-06-03 2006-12-14 Sony Corp 音声信号分離装置及び方法
JP4630203B2 (ja) * 2006-02-24 2011-02-09 日本電信電話株式会社 信号分離装置、信号分離方法、信号分離プログラム及び記録媒体、並びに、信号到来方向推定装置、信号到来方向推定方法、信号到来方向推定プログラム及び記録媒体
US8874439B2 (en) * 2006-03-01 2014-10-28 The Regents Of The University Of California Systems and methods for blind source signal separation
KR101280253B1 (ko) * 2008-12-22 2013-07-05 한국전자통신연구원 음원 분리 방법 및 그 장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107390025A (zh) * 2017-07-31 2017-11-24 集美大学 基于盲源分离的电力系统多谐波源辨识方法
CN107390025B (zh) * 2017-07-31 2019-07-26 集美大学 基于盲源分离的电力系统多谐波源辨识方法

Also Published As

Publication number Publication date
WO2013168848A1 (ko) 2013-11-14
KR101356039B1 (ko) 2014-01-29

Similar Documents

Publication Publication Date Title
Vincent et al. Oracle estimators for the benchmarking of source separation algorithms
CN102903368B (zh) 用于卷积盲源分离的方法和设备
Venkataramani et al. Adaptive front-ends for end-to-end source separation
CN103426437A (zh) 使用利用混合多元概率密度函数的独立分量分析的源分离
Zhao et al. Noisy-Reverberant Speech Enhancement Using DenseUNet with Time-Frequency Attention.
US10718742B2 (en) Hypothesis-based estimation of source signals from mixtures
WO2016050725A1 (en) Method and apparatus for speech enhancement based on source separation
Fitzgerald et al. Projet—spatial audio separation using projections
US20060256978A1 (en) Sparse signal mixing model and application to noisy blind source separation
KR101356039B1 (ko) 하모닉 주파수 사이의 종속관계를 이용한 암묵 신호 분리 방법 및 이를 위한 디믹싱 시스템
Choi et al. Multichannel signal separation for cocktail party speech recognition: A dynamic recurrent network
KR101043114B1 (ko) 소리의 복원 방법, 소리의 복원 방법을 기록한 기록매체 및 소리의 복원 방법을 수행하는 장치
Shashanka et al. Sparse overcomplete decomposition for single channel speaker separation
CN107924685B (zh) 信号处理装置和方法
Sarmiento et al. A contrast function based on generalized divergences for solving the permutation problem in convolved speech mixtures
King New methods of complex matrix factorization for single-channel source separation and analysis
Casebeer et al. Deep tensor factorization for spatially-aware scene decomposition
Kindt et al. 2d acoustic source localisation using decentralised deep neural networks on distributed microphone arrays
Xiang et al. A deep representation learning speech enhancement method using β-vae
CN114283833A (zh) 语音增强模型训练方法、语音增强方法、相关设备及介质
Minhas et al. A hybrid algorithm for blind source separation of a convolutive mixture of three speech sources
JP2003271168A (ja) 信号抽出方法および信号抽出装置、信号抽出プログラムとそのプログラムを記録した記録媒体
Delfarah et al. A two-stage deep learning algorithm for talker-independent speaker separation in reverberant conditions
Moir et al. Decorrelation of multiple non‐stationary sources using a multivariable crosstalk‐resistant adaptive noise canceller
Oh et al. Preprocessing of independent vector analysis using feed-forward network for robust speech recognition

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161227

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180102

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190107

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20200122

Year of fee payment: 7