KR20090066186A - 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그방법 - Google Patents

음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그방법 Download PDF

Info

Publication number
KR20090066186A
KR20090066186A KR1020080036085A KR20080036085A KR20090066186A KR 20090066186 A KR20090066186 A KR 20090066186A KR 1020080036085 A KR1020080036085 A KR 1020080036085A KR 20080036085 A KR20080036085 A KR 20080036085A KR 20090066186 A KR20090066186 A KR 20090066186A
Authority
KR
South Korea
Prior art keywords
cross
sound source
multitrack
downmixing
correlation
Prior art date
Application number
KR1020080036085A
Other languages
English (en)
Other versions
KR100932790B1 (ko
Inventor
장대영
백승권
김민제
강경옥
홍진우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20090066186A publication Critical patent/KR20090066186A/ko
Application granted granted Critical
Publication of KR100932790B1 publication Critical patent/KR100932790B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)

Abstract

본 발명은 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그 방법에 관한 것으로, 개별 음원 신호를 각 음원 간 상호상관을 이용하여 상호상관 값이 높은 조합을 가지는 멀티트랙 신호로 다운믹싱함으로써, 다운믹싱된 멀티트랙 신호로부터 개별 음원을 더욱 충실하게 복원할 수 있는, 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그 방법을 제공하고자 한다.
이를 위하여, 본 발명은 멀티트랙 다운믹싱 장치에 있어서, 개별 음원 신호를 주파수 대역으로 변환하기 위한 신호 변환 수단; 상기 변환된 개별 음원 신호로부터 각 음원 간 공간정보를 산출하기 위한 공간정보 산출 수단; 상기 산출된 각 음원 간 공간정보를 이용하여 상호상관 값에 따라 믹싱조합 정보를 결정하기 위한 믹싱조합 결정 수단; 및 상기 결정된 믹싱조합 정보에 따라 상기 변환된 개별 음원 신호를 멀티트랙 신호로 다운믹싱하기 위한 멀티트랙 다운믹싱 수단을 포함한다.
상호상관, 멀티트랙, 개별 음원 신호, 공간정보, 믹싱조합, 폐루프, 믹싱 매트릭스 정보, 멀티트랙 다운믹싱

Description

음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그 방법{APPARATUS AND METHOD OF MULTI-TRACK DOWN-MIXING USING CROSS CORRELATION BETWEEN VOICE SOURCE}
본 발명은 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그 방법에 관한 것으로, 더욱 상세하게는 개별 음원 신호를 각 음원 간 상호상관을 이용하여 상호상관 값이 높은 조합을 가지는 멀티트랙 신호로 다운믹싱함으로써, 다운믹싱된 멀티트랙 신호로부터 개별 음원을 더욱 충실하게 복원할 수 있는, 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그 방법에 관한 것이다.
본 발명은 정보통신부 및 정보통신연구진흥원의 IT성장동력기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2007-S-004-01, 과제명: 무안경 개인형 3D 방송기술개발].
현재의 음향 콘텐츠들은 완성된 후에는 볼륨제어, 음색변환 등 극히 제한된 조정 외에는 상호작용이 불가능하다. 이러한 조정은 전체적인 신호의 조정을 말하 며, 음향 콘텐츠에 포함되어 있는 개별 음원에 대한 조정은 현재로서는 불가능하다.
최근에, 음악의 개별 악기 및 가수의 목소리를 별도의 개별 음원으로 처리함으로써, 사용자에게 각 개별 음원의 다양한 조정(예를 들어, 선택 및 레벨 조정 등)이 가능하도록 하는 대화형 음악 서비스가 출시되었다. 그러나 대화형 음악 서비스는 개별 음원을 별도로 처리해야 하기 때문에, 대용량의 전송 및 저장 장치가 필요하다는 문제점이 있다.
이러한 문제점을 해결하기 위해, 종래의 "MPEG 서라운드(Surround)"라는 멀티채널 오디오 부호화 기술과, 객체 단위의 오디오 부호화 기술인 SAOC(Spatial Audio Object Coding) 기술은 모노 또는 멀티채널의 다운믹스를 이용하여 압축을 수행한다.
종래의 오디오 다운믹싱/업믹싱 기술에 대해서 구체적으로 살펴보면, 이러한 종래의 오디오 다운믹싱 기술은 양이 요인(예를 들면, 양이 간 레벨 차이, 양이 간 지연, 양이 간 상호상관 등)을 이용하여 멀티채널 또는 다수의 객체 음원을 분석한다. 그리고 이러한 종래의 다운믹싱 기술은 분석 결과를 토대로 멀티채널 또는 다수의 객체 음원을 하나의 신호로 다운믹싱하여 양이 요인과 함께 전송한다.
그리고 종래의 오디오 업믹싱 기술에서 사용자 단말은 상기 전송된 양이 요인을 이용하여 다운믹싱된 신호로부터 원래의 멀티채널 혹은 객체 음원을 복원한다.
요컨대, 종래의 오디오 다운믹싱/업믹싱 기술은 다수의 객체 음원을 하나의 다운믹스 신호에 혼합한 후, 양이 요인을 이용하여 복원한다. 여기서, 양이 요인은 청각 특성을 반영한 비선형 필터뱅크를 통해 나누어진 대역별로 산출된다. 대역 내에서 혼합된 신호로부터 상호상관에 의해 비상관화(De-correlation)함으로써 음상이 가운데로 몰리는 현상을 완화한다.
하지만, 이러한 종래의 오디오 다운믹싱/업믹싱 기술은 다운믹스 신호로부터 원음을 복원하는 과정을 수행해야 하기 때문에, 복원된 개별 채널이나 음원 신호의 음질이 저하되어 독립적인 서비스가 불가능하다는 문제점이 있다.
따라서 상기와 같은 종래 기술은 다운믹스 신호로부터 원음을 복원하는 과정에서 오류가 발생하기 때문에, 복원된 개별 채널이나 음원 신호의 음질이 저하되어 독립적인 서비스가 불가능하다는 문제점이 있으며, 이러한 문제점을 해결하고자 하는 것이 본 발명의 과제이다.
따라서 본 발명은 개별 음원 신호를 각 음원 간 상호상관을 이용하여 상호상관 값이 높은 조합을 가지는 멀티트랙 신호로 다운믹싱함으로써, 다운믹싱된 멀티트랙 신호로부터 개별 음원을 더욱 충실하게 복원할 수 있는, 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그 방법을 제공하는데 그 목적이 있다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
본 발명은 상기 문제점을 해결하기 위하여, 개별 음원 신호를 각 음원 간 상호상관을 이용하여 상호상관 값이 높은 조합을 가지는 멀티트랙 신호로 다운믹싱하는 것을 특징으로 한다.
더욱 구체적으로, 본 발명은, 멀티트랙 다운믹싱 장치에 있어서, 개별 음원 신호를 주파수 대역으로 변환하기 위한 신호 변환 수단; 상기 변환된 개별 음원 신호로부터 각 음원 간 공간정보를 산출하기 위한 공간정보 산출 수단; 상기 산출된 각 음원 간 공간정보를 이용하여 상호상관 값에 따라 믹싱조합 정보를 결정하기 위한 믹싱조합 결정 수단; 및 상기 결정된 믹싱조합 정보에 따라 상기 변환된 개별 음원 신호를 멀티트랙 신호로 다운믹싱하기 위한 멀티트랙 다운믹싱 수단을 포함한다.
한편, 본 발명은, 멀티트랙 다운믹싱 방법에 있어서, 개별 음원 신호를 주파수 대역으로 변환하는 신호 변환 단계; 상기 변환된 개별 음원 신호로부터 각 음원 간 공간정보를 산출하는 공간정보 산출 단계; 상기 산출된 각 음원 간 공간정보를 이용하여 상호상관 값에 따라 믹싱조합 정보를 결정하는 믹싱조합 결정 단계; 및 상기 결정된 믹싱조합 정보에 따라 상기 변환된 개별 음원 신호를 멀티트랙 신호로 다운믹싱하는 멀티트랙 다운믹싱 단계를 포함한다.
상기와 같은 본 발명은, 개별 음원 신호를 각 음원 간 상호상관을 이용하여 상호상관 값이 높은 조합을 가지는 멀티트랙 신호로 다운믹싱함으로써, 다운믹싱된 멀티트랙 신호로부터 개별 음원을 더욱 충실하게 복원할 수 있는 효과가 있다. 즉, 본 발명은, 다수의 음원들을 하나의 신호로 다운믹싱하는 경우보다 여러 개의 트랙에 상호상관 값이 높은 음원들을 조합하여 다운믹싱함으로써, 혼합된 음원들을 더욱 충실하게 분리할 수 있다.
따라서 본 발명은 사용자 제어에 의해 임의 음원을 제거하거나 단독으로 재생할 때 다른 음원의 혼입을 최대한 줄이고, 개별 음원을 별도로 전송할 때보다 채널용량을 줄일 수 있는 효과가 있다.
상술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술되어 있는 상세한 설명을 통하여 보다 명확해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예를 상세히 설명하기로 한다.
도 1 은 본 발명에 따른 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치의 일실시예 구성도이다.
도 1에 도시된 바와 같이, 본 발명에 따른 멀티트랙 다운믹싱 장치(100)는 신호 변환부(110), 공간정보 산출부(120), 믹싱조합 결정부(130) 및 멀티트랙 다운믹싱부(140)를 포함한다. 여기서, 신호 변환부(110)는 다수의 필터 뱅크(111)를 포함한다.
본 발명에 따른 멀티트랙 다운믹싱 장치(100)는 다수 개의 개별 음원 신호를 입력받아 주파수 대역마다 각 음원 신호 간 상호상관을 이용하여 멀티트랙 다운믹싱을 수행한다. 이는 멀티트랙 오디오 압축을 수행하기 위함이다. 여기서, 개별 음원은 음을 발생시키는 기본 단위로 정의되며, 대화형 음악 서비스에서의 객체 음원으로 이용되기도 한다. 개별 음원 신호는 필요에 따라 하나의 마이크로 녹음한 음향 신호가 포함될 수 있다. 또한, 개별 음원 신호는 개별 음원 신호들의 일부가 믹싱되어 생성된 모노 또는 스테레오 채널의 음향 신호가 포함될 수 있다.
구체적으로 살펴보면, 신호 변환부(110)는 다수의 개별 음원 신호(예를 들어, 음원 신호 1, 음원 신호 2, 내지 음원 신호 n)를 각각 입력받는다. 그리고 다수의 개별 음원 신호는 개별 음원 각각에 해당하는 필터 뱅크(111)에서 신호 변환된다. 즉, 다수의 필터 뱅크(111)는 각각 입력받은 개별 음원 신호를 다수의 주파수 대역으로 변환한다. 이때, 개별 음원 신호는 다수의 부대역으로 구분된 전체 주파수 대역폭(예를 들어, 20 kHz) 중에서 해당 대역폭에 대한 주파수 대역으로 변환 된다.
각각의 필터 뱅크(111)는 다수의 개별 음원 신호와 대응되어 개별 음원 신호를 변환하는 기능을 수행한다. 예를 들면, 필터 뱅크(111)는 음원 1을 입력받아 각 주파수 대역폭에 해당하는 다수의 주파수 대역 신호로 변환한다. 즉, 필터 뱅크(111)는 전체 주파수 대역(예를 들면, 20 kHz) 중 음원 1이 해당되는 다수의 부대역 신호로 변환한다.
공간정보 산출부(120)는 신호 변환부(110)에서 변환된 다수의 주파수 대역 신호를 분석하여 해당 대역폭에 포함된 각 음원에 대한 공간정보를 산출한다. 공간정보에는 각 음원 간 레벨 차이값 및 상호상관 값이 포함되어 있다. 즉, 공간정보 산출부(120)는 각 음원 단위의 공간정보로서, 음원 간 레벨 차이값 및 상호상관 값을 산출하게 된다. 이때, 공간정보 산출부(120)는 스테레오 채널의 음원인 경우, 두 채널에 대한 상호상관 값을 모두 구하고 이를 평균한 상호상관 값으로 최종 상호상관 값을 결정한다.
여기서, 상호상관 값은 "0" ~ "1" 사이의 값을 가진다. 상호상관 값이 "0"에 근접하면 두 음원 간의 상호상관이 작아짐을 알 수 있다. 또한, 상호상관 값이 "1"에 근접하면 두 음원 간의 상호상관이 커짐을 알 수 있다. 한편, 음원 간 레벨 차이값은 해당 주파수 대역에 포함되어 있는 다수의 음원 신호를 비교할 수 있는 각 음원 간의 레벨 차이값을 말한다.
그리고 믹싱조합 결정부(130)는 공간정보 산출부(120)에서 산출된 공간정보 즉, 음원 간 레벨 차이값 및 상호상관 값을 이용하여 상호상관이 높은 음원들을 선 택하여 믹싱조합 정보를 결정한다. 믹싱조합 정보는 다수의 음원 중에서 함께 믹싱하려는 음원들에 관한 것이다. 즉, 믹싱조합 결정부(130)는 상호상관이 높은 음원들을 선택한다. 여기서, 상호상관이 높은 음원들을 믹싱조합으로 선택하는 것은 멀티트랙 다운믹싱된 신호를 업믹싱할 때, 음원 간 오류 없이 업믹싱하기 위함이다. 또한, 이는 음원 신호의 음질 저하를 방지하여 업믹싱하기 위함이다.
이때, 믹싱조합 결정부(130)는 음원 간 상호상관 값의 크기에 따라 다수의 그룹으로 그룹핑한다. 여기서, 다수의 그룹은 멀티트랙을 의미한다. 믹싱조합 결정부(130)는 상호상관이 높은 음원들을 순서대로 그룹핑하고 다운믹싱할 트랙의 음원 구성 즉, 믹싱조합을 결정한다.
한편, 믹싱조합 결정부(130)는 입력되는 음원의 채널에 따라, 모노와 스테레오 음원을 별도로 처리하게 된다. 즉, 스테레오 음원의 조합은 스테레오 채널로 다운믹싱되며, 모노 음원은 믹싱 매트릭스에 의해 모노 혹은 스테레오 채널로 믹싱된다. 모노 음원들이 스테레오로 다운믹싱될 때, 두 개의 채널 사이의 패닝 정보가 믹싱 매트릭스에 포함되어 있다.
멀티트랙 다운믹싱부(140)는 신호 변환부(110)에서 변환된 각 음원 신호들을 전달받고, 믹싱조합 결정부(130)에서 결정된 믹싱조합 정보 및 부가적으로 외부로부터의 믹싱 매트릭스 정보에 따라 상기 신호 변환부(110)로부터의 각 음원 신호들을 멀티트랙 신호로 다운믹싱한다. 여기서, 믹싱 매트릭스 정보는 본 발명에서 부가적인 정보로서, 사용자에 의해 입력받거나 다양한 규격에 맞게 믹싱 매트릭스에 대해서 미리 정해져 있다.
그리고 멀티트랙 다운믹싱부(140)는 다운믹싱된 멀티트랙 신호를 부가정보(예를 들면, 레벨차이, 상호상관 값, 믹싱조합 정보 및 믹싱 매트릭스 정보 등)와 함께 저장하거나 전송한다. 멀티트랙 다운믹싱부(140)는 필요에 따라 종래의 압축 코덱을 이용할 수 있다.
도 2 는 본 발명에 따른 멀티트랙 업믹싱 장치의 일실시예 구성도이다.
도 2에 도시된 바와 같이, 본 발명에 따른 멀티트랙 업믹싱 장치(200)는 멀티트랙 업믹싱부(210) 및 신호 변환부(220)를 포함한다.
멀티트랙 다운믹싱 장치(100)에서 다운믹싱된 멀티트랙 신호는 매체를 통해 멀티트랙 업믹싱 장치(200)로 전송된다. 여기서, 멀티트랙 업믹싱 장치(200)는 사용자 단말에 포함될 수 있다.
구체적으로 살펴보면, 멀티트랙 업믹싱부(210)는 다운믹싱된 멀티트랙 신호 및 부가정보를 전송받는다. 그리고 멀티트랙 업믹싱부(210)는 다운믹싱된 멀티트랙 신호를 상기 전송받은 부가정보를 이용하여 업믹싱한다. 즉, 멀티트랙 업믹싱부(210)는 부가정보에 포함되어 있는 음원 간 레벨 차이값, 믹싱조합 정보 및 믹싱 매트릭스 정보를 이용하여 멀티트랙 업믹싱 과정을 수행한다.
그리고 신호 변환부(220)는 멀티트랙 업믹싱부(210)에서 업믹싱된 신호를 변환하여 원래의 개별 음원 신호(예를 들어, 음원 1, 음원 2, 내지 음원 n)로 복원한다. 이때, 각 대역의 음원 신호는 음원 간 레벨차이에 의해 전달된 다운믹싱 멀티트랙 신호로부터 이득을 적용함으로써 복원될 수 있다.
한편, 멀티트랙 다운믹싱 장치(100)로부터 전송된 하나의 트랙 신호는 다운 믹싱 장치(100)에서 상호상관 값이 큰 음원 신호로 조합되어 다운믹싱된 상태이다. 따라서 멀티트랙 업믹싱 장치(200)는 상호상관 값이 큰 음원 신호 즉, 음원 간의 유사성이 높은 각 음원의 이득만을 적용하여 복원할 수 있게 된다.
또한, 멀티트랙 업믹싱 장치(200)는 각 음원 간 비상관화 과정을 통해 원래의 상호상관 값에 따라 상호상관을 조절함으로써, 복원된 음원의 방향이 변화되는 것을 방지할 수도 있다.
도 3 은 상호상관 값의 크기에 따라 그룹핑하는 방법에 대한 일실시예 설명도이다.
전술한 바와 같이, 공간정보 산출부(120)는 각 음원 간 상호상관 값을 산출하게 된다. 이러한 각 음원 간 상호상관에 대한 일례가 도 3에 나타나 있다.
도 3에 도시된 바와 같이, 각 음원(음원 1 내지 음원 6)(301 내지 306)은 원주 상에 배치되어 있다. 각 음원(음원 1 내지 6) 간의 상호상관 값의 크기 순서(예를 들어, 1, 2, …, 15)가 표시되어 있다. 여기서, 상호상관 값 크기 순서는 해당 값이 나와 있는 것이 아니라, 상호상관 값의 크기 순서를 표시한 것이다.
상호상관 값에 따라 다운믹싱할 트랙의 음원을 그룹핑하는 방법은, 상호상관이 높은 순서로 연결해 나갈 때 폐루프가 형성되는 음원들을 하나의 트랙에 다운믹싱하게 된다.
그리고 그룹핑 방법은 상호상관 값이 미리 정한 임계값(예를 들면, 0.5)에 미달하면 그룹핑을 종료하게 된다. 그리고 남은 음원들을 두 개씩 상호상관 값이 큰 쌍으로 조합되어 하나의 트랙으로 다운믹싱된다. 또한, 마지막에 남는 하나의 음원은 다운믹싱하지 않고 하나의 트랙으로 전송된다.
이러한 그룹핑 과정을 통해, 각 음원(음원 1 내지 음원 6)(301 내지 306)은 세 개의 음원으로 구성되는 제1 트랙, 두 개의 음원으로 구성되는 제2 트랙, 하나의 음원으로 구성되는 제3 트랙으로 그룹핑된다. 즉, 세 개의 다운믹싱 트랙이 생성되었음을 알 수 있다.
도 4 는 본 발명에 따른 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 방법에 대한 일실시예 흐름도이다.
도 4에서 이러한 믹싱조합 결정부(130)의 처리 절차를 상세하게 나타내고 있다.
먼저, 신호 변환부(110)가 다수의 개별 음원 신호(예를 들어, 음원 신호 1, 음원 신호 2, 내지 음원 신호 n)를 입력받아 개별 음원 신호에 해당하는 다수의 주파수 대역으로 변환한다(402). 이때, 개별 음원 신호는 다수의 부대역으로 구분된 전체 주파수 대역폭(예를 들어, 20 kHz) 중에서 해당 대역폭에 대한 주파수 대역으로 변환된다.
이후, 공간정보 산출부(120)가 신호 변환부(110)에서 변환된 다수의 주파수 대역 신호를 해당 대역폭에 포함된 각 음원에 대한 공간정보를 산출한다(404). 공간정보에는 각 음원 간 레벨 차이값 및 상호상관 값이 포함되어 있다. 즉, 공간정보 산출부(120)는 각 음원 단위로 공간정보로서, 음원 간 레벨차이 및 상호상관을 산출하게 된다.
이후, 믹싱조합 결정부(130)가 공간정보 산출부(120)에서 산출된 공간정보 중 상호상관 값을 각 음원별 대역별로 전달받고, 음원 간 상호상관 중 가장 큰 상호상관 값을 가지는 음원 쌍을 검색한다(406).
그리고 믹싱조합 결정부(130)는 가장 큰 상호상관 값을 가지는 음원 쌍의 상호상관 값과 임계값(예를 들어, 0.5 등)을 비교하여, 가장 큰 상호상관 값이 임계값 미만인지를 확인한다(408).
상기 확인 결과(408), 상호상관 값이 임계값 이상이면, 믹싱조합 결정부(130)는 가장 큰 상호상관 값을 가지는 음원 간 연결이 폐루프와 연결되어 있는지를 확인한다(410). 이는 각 음원 간의 상호상관이 높은 순서대로 음원 신호를 연결할 때, 하나의 트랙에 연결된 음원 신호가 폐루프 형태를 이루는지 여부를 확인하기 위함이다.
상기 확인 결과(410), 가장 큰 상호상관 값을 가지는 음원 간 연결이 이미 등록된 폐루프와 연결되어 있다면, 믹싱조합 결정부(130)는 이미 꽉 찬 트랙이므로 연결을 끊고 "406" 과정으로 천이하게 된다. 이후, 믹싱조합 결정부(130)는 남은 음원 간 상호상관 값 중 가장 큰 상호상관 값을 검색하는 "406" 과정을 수행한다. 반면에, 가장 큰 상호상관 값을 가지는 음원 간 연결이 등록된 폐루프와 연결되어 있지 않다면, 믹싱조합 결정부(130)는 등록된 트랙이 폐루프에 연결되어 있지 않고 이미 등록된 트랙에 연결되어 있는지를 확인한다(412).
상기 확인 결과(412), 음원 간 연결이 등록된 트랙에 연결되어 있다면, 믹싱조합 결정부(130)는 그 트랙의 구성에 현재 음원을 추가한다(414). 그리고 믹싱조합 결정부(130)는 추가된 트랙의 구성이 폐루프를 형성하는지 여부를 확인한 다(418). 반면에, 등록된 트랙에 연결되어 있지 않다면, 믹싱조합 결정부(130)는 새로운 트랙을 등록하고(416), "406" 과정부터 다시 수행하게 된다.
상기 확인 결과(418), 추가된 트랙의 구성이 폐루프를 형성하게 되면, 믹싱조합 결정부(130)는 폐루프를 등록하고(420), "406" 과정부터 다시 수행하게 된다. 반면에, 추가된 트랙의 구성이 폐루프를 형성하지 않으면, 믹싱조합 결정부(130)는 "406" 과정부터 다시 수행하게 된다. 즉, 믹싱조합 결정부(130)는 폐루프에 연결되어 있지 않고 이미 등록된 트랙에도 연결되어 있지 않으면, 새로운 트랙을 등록하고 현재 음원을 트랙의 구성에 추가한 후 "406" 과정부터 다시 수행하게 된다.
한편, 상기 확인 결과(408), 가장 큰 상호상관 값이 임계값에 미달하면, 믹싱조합 결정부(130)는 믹싱조합을 결정하고, 결정된 믹싱조합에 따라 믹싱조합 정보를 생성한다(422).
이후, 멀티트랙 다운믹싱부(140)가 신호 변환부(110)에서 변환된 각 음원 신호들을 전달받고, 믹싱조합 결정부(130)에서 결정된 믹싱조합 정보, 및 부가적으로 믹싱 매트릭스 정보에 따라 상기 변환된 각 음원 신호들을 멀티트랙 신호로 다운믹싱한다(424).
한편, 전술한 바와 같은 본 발명의 방법은 컴퓨터 프로그램으로 작성이 가능하다. 그리고 상기 프로그램을 구성하는 코드 및 코드 세그먼트는 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다.　또한, 상기 작성된 프로그램은 컴퓨터가 읽을 수 있는 기록매체(정보저장매체)에 저장되고, 컴퓨터에 의하여 판독되고 실행됨으로써 본 발명의 방법을 구현한다. 그리고 상기 기록매체는 컴퓨 터가 판독할 수 있는 모든 형태의 기록매체를 포함한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
도 1 은 본 발명에 따른 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치의 일실시예 구성도,
도 2 는 본 발명에 따른 멀티트랙 업믹싱 장치의 일실시예 구성도,
도 3 은 상호상관 값의 크기에 따라 그룹핑하는 방법에 대한 일실시예 설명도,
도 4 는 본 발명에 따른 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 방법에 대한 일실시예 흐름도이다.
* 도면의 주요 부분에 대한 부호의 설명
100: 멀티트랙 다운믹싱 장치 110: 신호 변환부
120: 공간정보 산출부 130: 믹싱조합 결정부
140: 멀티트랙 다운믹싱부 200: 멀티트랙 업믹싱 장치
210: 멀티트랙 업믹싱부 220: 신호 변환부

Claims (10)

  1. 멀티트랙 다운믹싱 장치에 있어서,
    개별 음원 신호를 주파수 대역으로 변환하기 위한 신호 변환 수단;
    상기 변환된 개별 음원 신호로부터 각 음원 간 공간정보를 산출하기 위한 공간정보 산출 수단;
    상기 산출된 각 음원 간 공간정보를 이용하여 상호상관 값에 따라 믹싱조합 정보를 결정하기 위한 믹싱조합 결정 수단; 및
    상기 결정된 믹싱조합 정보에 따라 상기 변환된 개별 음원 신호를 멀티트랙 신호로 다운믹싱하기 위한 멀티트랙 다운믹싱 수단
    을 포함하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치.
  2. 제 1 항에 있어서,
    상기 믹싱조합 결정 수단은,
    상기 산출된 각 음원 간 공간정보를 이용하여 상호상관 값이 높은 음원들을 그룹핑하는 것을 특징으로 하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치.
  3. 제 2 항에 있어서,
    상기 믹싱조합 결정 수단은,
    상기 상호상관 값이 높은 음원 순서대로 연결시켜 폐루프를 이루는 음원들을 하나의 트랙에 그룹핑되는 음원들로 결정하는 것을 특징으로 하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치.
  4. 제 3 항에 있어서,
    상기 믹싱조합 결정 수단은,
    상기 상호상관 값이 미리 정해진 임계값에 미달하면, 그룹핑되지 않은 나머지 음원들을 조합하는 것을 특징으로 하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치.
  5. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
    상기 멀티트랙 다운믹싱 수단은,
    상기 결정된 믹싱조합 정보 및 외부로부터의 믹싱 매트릭스 정보에 따라 상기 변환된 개별 음원 신호를 멀티트랙 신호로 다운믹싱하는 것을 특징으로 하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치.
  6. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
    상기 공간정보 산출 수단은,
    상기 변환된 개별 음원 신호가 스테레오 채널을 가지면, 좌/우 채널에 대한 평균 상호상관 값을 산출하는 것을 특징으로 하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치.
  7. 멀티트랙 다운믹싱 방법에 있어서,
    개별 음원 신호를 주파수 대역으로 변환하는 신호 변환 단계;
    상기 변환된 개별 음원 신호로부터 각 음원 간 공간정보를 산출하는 공간정보 산출 단계;
    상기 산출된 각 음원 간 공간정보를 이용하여 상호상관 값에 따라 믹싱조합 정보를 결정하는 믹싱조합 결정 단계; 및
    상기 결정된 믹싱조합 정보에 따라 상기 변환된 개별 음원 신호를 멀티트랙 신호로 다운믹싱하는 멀티트랙 다운믹싱 단계
    를 포함하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 방법.
  8. 제 7 항에 있어서,
    상기 믹싱조합 결정 단계는,
    상기 산출된 각 음원 간 공간정보를 이용하여 상호상관 값이 높은 음원들을 그룹핑하는 것을 특징으로 하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 방법.
  9. 제 8 항에 있어서,
    상기 믹싱조합 결정 단계는,
    상기 상호상관 값이 높은 음원 순서대로 연결시켜 폐루프를 이루는 음원들을 하나의 트랙에 그룹핑되는 음원들로 결정하는 것을 특징으로 하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 방법.
  10. 제 9 항에 있어서,
    상기 믹싱조합 결정 단계는,
    상기 상호상관 값이 미리 정해진 임계값에 미달하면, 그룹핑되지 않은 나머지 음원들을 조합하는 것을 특징으로 하는 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 방법.
KR1020080036085A 2007-12-18 2008-04-18 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그방법 KR100932790B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20070133709 2007-12-18
KR1020070133709 2007-12-18

Publications (2)

Publication Number Publication Date
KR20090066186A true KR20090066186A (ko) 2009-06-23
KR100932790B1 KR100932790B1 (ko) 2009-12-21

Family

ID=40994303

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080036085A KR100932790B1 (ko) 2007-12-18 2008-04-18 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그방법

Country Status (1)

Country Link
KR (1) KR100932790B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011122731A1 (ko) * 2010-03-29 2011-10-06 삼성전자 주식회사 멀티채널 오디오의 다운믹스 방법 및 장치

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101666465B1 (ko) 2010-07-22 2016-10-17 삼성전자주식회사 다채널 오디오 신호 부호화/복호화 장치 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011122731A1 (ko) * 2010-03-29 2011-10-06 삼성전자 주식회사 멀티채널 오디오의 다운믹스 방법 및 장치
US9478223B2 (en) 2010-03-29 2016-10-25 Samsung Electronics Co., Ltd. Method and apparatus for down-mixing multi-channel audio

Also Published As

Publication number Publication date
KR100932790B1 (ko) 2009-12-21

Similar Documents

Publication Publication Date Title
RU2551797C2 (ru) Способы и устройства кодирования и декодирования объектно-ориентированных аудиосигналов
JP4603037B2 (ja) マルチチャネルオーディオ信号を表示するための装置と方法
TWI431610B (zh) 用以將以物件為主之音訊信號編碼與解碼之方法與裝置
JP4601669B2 (ja) マルチチャネル信号またはパラメータデータセットを生成する装置および方法
JP5625032B2 (ja) マルチチャネルシンセサイザ制御信号を発生するための装置および方法並びにマルチチャネル合成のための装置および方法
KR100754220B1 (ko) Ｍｐｅｇ 서라운드를 위한 바이노럴 디코더 및 그 디코딩방법
JP4616349B2 (ja) ステレオ互換性のあるマルチチャネルオーディオ符号化
RU2406166C2 (ru) Способы и устройства кодирования и декодирования основывающихся на объектах ориентированных аудиосигналов
US8355921B2 (en) Method, apparatus and computer program product for providing improved audio processing
JP2009506373A (ja) オーディオ信号をエンコーディング及びデコーディングするための装置とその方法
RU2455708C2 (ru) Способы и устройства кодирования и декодирования объектно-ориентированных аудиосигналов
KR20180009337A (ko) 저연산 포맷 변환을 위한 인터널 채널 처리 방법 및 장치
KR100932790B1 (ko) 음원 간 상호상관을 이용한 멀티트랙 다운믹싱 장치 및 그방법
KR100891685B1 (ko) 오디오 신호의 인코딩 및 디코딩 장치, 및 방법
CA3142638A1 (en) Packet loss concealment for dirac based spatial audio coding
JP2007104601A (ja) マルチチャンネル符号化における頭部伝達関数をサポートするための装置
RU2807473C2 (ru) Маскировка потерь пакетов для пространственного кодирования аудиоданных на основе dirac
KR20070003600A (ko) 오디오 신호 인코딩 및 디코딩 방법 및 장치
KR20080030848A (ko) 오디오 신호 인코딩 및 디코딩 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee