KR100891665B1 - Apparatus for processing a mix signal and method thereof - Google Patents

Apparatus for processing a mix signal and method thereof Download PDF

Info

Publication number
KR100891665B1
KR100891665B1 KR20070063180A KR20070063180A KR100891665B1 KR 100891665 B1 KR100891665 B1 KR 100891665B1 KR 20070063180 A KR20070063180 A KR 20070063180A KR 20070063180 A KR20070063180 A KR 20070063180A KR 100891665 B1 KR100891665 B1 KR 100891665B1
Authority
KR
Grant status
Grant
Patent type
Prior art keywords
signal
additional information
information
source
remix
Prior art date
Application number
KR20070063180A
Other languages
Korean (ko)
Other versions
KR20080033839A (en )
Inventor
오현오
정양원
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Images

Abstract

본 발명은 믹스 신호의 처리 방법 및 장치에 관한 것이다. The present invention relates to a method and apparatus of the mix signal. 이를 위해, 본 발명은 하나 이상의 소스 신호를 포함하는 믹스 신호를 획득하는 단계와; To this end, the present invention provides a method comprising: obtaining a mixed signal comprising at least one source signal; 제1 부가 정보를 획득하는 단계와; The method comprising: obtaining a first additional information; 믹스 파라미터를 획득하는 단계와; Obtaining mix parameters and; 상기 믹스 신호, 상기 제1 부가 정보, 및 상기 믹스 파라미터를 이용하여 리믹스 신호를 생성하는 단계를 포함하되, 상기 제1 부가 정보는 상기 소스 신호들 중 리믹스될 소스 신호와 상기 믹스 신호와의 관계를 나타내는 제2 부가 정보를 변형한 정보인 것을 특징으로 하는 신호 처리 방법을 제공한다. Comprising the step of generating a remix signal using the first additional information, and the mix parameters on the mixed signal, the first additional information is the relation between the source signal and the mixed signal to be remixed of said source signal represents provides a second additional information signal processing method, characterized in that the variant information.
믹스 신호, 부가 정보, 부가 정보 변형 Mix signal, the additional information, the additional information modification

Description

믹스 신호의 처리 방법 및 장치{APPARATUS FOR PROCESSING A MIX SIGNAL AND METHOD THEREOF} Method and apparatus of the mix signal {APPARATUS FOR PROCESSING A MIX SIGNAL AND METHOD THEREOF}

도 1은 본 발명의 일실시예에 따른 제1 리믹스 신호 인코딩 장치에 대한 블록도. 1 is a first block diagram of a remix signal encoding apparatus according to an embodiment of the present invention.

도 2는 스테레오 신호를 이용하는 경우, 도 1의 제1 리믹스 신호 인코딩 장치에 대한 상세 블록도. Figure 2 is a case of using a stereo signal, a detailed block diagram for a first remix signal encoding apparatus of Fig.

도 3은 본 발명의 일실시예에 따른 믹스 신호를 처리하기 위한 도메인. Figure 3 is a domain for processing the downmix signal according to one embodiment of the present invention.

도 4는 본 발명의 일실시예에 따른 제2 리믹스 신호 인코딩 장치에 대한 블록도. Figure 4 is a block diagram of a second remix signal encoding apparatus according to an embodiment of the present invention.

도 5는 본 발명의 일실시예에 따른 제1 리믹스 신호 디코딩 장치에 대한 블록도. Figure 5 is a block diagram for a first remix signal decoding apparatus according to an embodiment of the present invention.

도 6은 스테레오 신호를 이용하는 경우, 도 5의 제1 리믹스 신호 디코딩 장치에 대한 상세도. 6 is a case of using a stereo signal, the details of the first remix signal decoding apparatus of FIG. 5 FIG.

도 7은 본 발명의 일실시예에 따른 제2 리믹스 신호 디코딩 장치에 대한 블록도. 7 is a second block diagram of a remix signal decoding apparatus according to an embodiment of the present invention.

도 8A는 통상적인 인코딩 장치 및 본 발명의 일실시예에 따른 리믹스 신호 인코딩 장치의 결합을 나타내는 블록도. 8A is a conventional encoding apparatus and a block diagram showing the combination of a remix signal encoding apparatus according to an embodiment of the present invention.

도 8B는 종래의 디코딩 장치와 결합하여 이용되는 본 발명의 일실시예에 따른 제2 리믹스 신호 디코딩 장치에 대한 블록도. Figure 8B is a block diagram for a second remix signal decoding apparatus according to an embodiment of the present invention is used in combination with a conventional decoding device.

도 9는 본 발명의 일실시예에 따른 리믹스 신호 디코딩 장치에 상세 블록도. Figure 9 is a detailed block diagram to remix signal decoding apparatus according to an embodiment of the present invention.

도 10은 본 발명의 일실시예에 따른 리믹스 신호 인코딩 장치에 대한 블록도. 10 is a block diagram of a remix signal encoding apparatus according to an embodiment of the present invention.

도 11은 도 10의 리믹스 신호 인코딩 장치에 대한 상세 블록도. Figure 11 is a detailed block diagram of a remix signal encoding apparatus of Fig.

도 12는 본 발명의 일실시예에 따른 리믹스 신호 인코딩 장치의 블록도. Figure 12 is a block diagram of a remix signal encoding apparatus according to an embodiment of the present invention.

도 13은 본 발명의 일실시예에 따른 부가 정보 처리부를 나타낸 블록도. Figure 13 is a block diagram showing an additional information processing unit according to an embodiment of the present invention.

도 14는 본 발명의 일실시예에 따른 부가 정보를 새로 적용할 믹스 신호에 적합하도록 변환하는 트랜스코더. Figure 14 is a transcoder that converts to suit the mix signal to a new application of the additional information according to an embodiment of the present invention.

도 15는 본 발명의 일실시예에 따른 디코딩 장치의 블록도. Figure 15 is a block diagram of a decoding apparatus according to an embodiment of the present invention.

도 16은 본 발명의 일실시예에 따른 부가 정보 처리 방법을 나타낸 순서도. 16 is a flowchart illustrating an additional information processing method according to an embodiment of the present invention.

도 17은 본 발명의 일실시예에 따른 신호 처리 방법을 나타낸 순서도. 17 is a flowchart showing a signal processing method according to an embodiment of the present invention.

본 발명은 믹스 신호의 처리 방법 및 장치에 관한 것이다. The present invention relates to a method and apparatus of the mix signal. 현재까지는 믹스 신호로서 스테레오 신호가 가장 흔하게 생성되고, 소비자들에게 가장 널리 이용된다. Currently, as a mixed signal is generated most frequently it is a stereo signal, it is most widely used to consumers. 최근에는 멀티채널 신호가 점점 널리 이용되고 있다. Recently, it is a multi-channel signal widely used increasingly. 그러나, 상기 믹스 신호는 상기 믹스 신호를 구성하는 소스 신호 단위가 아니라, 채널 단위로 처리된다는 한계가 있다. However, the mixed signal is a limitation that not the source signal unit constituting said mixed signal processing on a channel-by-channel basis. 따라서, 채널 단위로 믹스 신호를 처리하는 경우, 믹스 신호를 구성하는 특정 소스 신호만을 독립적으로 처리할 수 없는 문제점이 있다. Thus, there is, a problem that can not be treated only with a specific source signal configuring the downmix signal independently when processing the mixed signal on a channel-by-channel basis. 예를 들면, 영화를 보면서 배우들 음성에 대한 볼륨은 일정하게 유지하면서, 배경음악의 볼륨만을 높이는 것은 불가능하다. For example, while watching a movie on the volume of the voice actors are, it is only possible to increase the volume of the background music while keeping constant.

상기와 같은 문제점을 해결하기 위해, 본 발명은 부가 정보를 낮은 정보량으로 변형하는 인코딩 방법 및 장치를 제공하는 데 그 목적이 있다. In order to solve the above problems, an object of the present invention is to provide an encoding method and apparatus for modifying the additional information in a low amount of information.

또한, 본 발명은 변형된 부가 정보를 이용하여 믹스 신호를 소스 신호 단위로 제어할 수 있는 믹스 신호 디코딩 방법 및 장치를 제공하는 데 그 목적이 있다. Further, an object of the present invention is to provide a mixed signal decoding method and apparatus capable of controlling the mix signal using the modified side information to the source signal unit.

상기의 목적을 달성하기 위하여, 본 발명은 하나 이상의 소스 신호를 포함하는 믹스 신호를 획득하는 단계와; In order to achieve the above object, the present invention provides a method comprising: obtaining a mixed signal comprising at least one source signal; 제1 부가 정보를 획득하는 단계와; The method comprising: obtaining a first additional information; 믹스 파라미터를 획득하는 단계와; Obtaining mix parameters and; 상기 믹스 신호, 상기 제1 부가 정보, 및 상기 믹스 파라미터를 이용하여 리믹스 신호를 생성하는 단계를 포함하되, 상기 제1 부가 정보는 상기 소스 신호들 중 리믹스될 소스 신호와 상기 믹스 신호와의 관계를 나타내는 제2 부가 정보를 변형한 정보인 것을 특징으로 하는 신호 처리 방법을 제공한다. Comprising the step of generating a remix signal using the first additional information, and the mix parameters on the mixed signal, the first additional information is the relation between the source signal and the mixed signal to be remixed of said source signal represents provides a second additional information signal processing method, characterized in that the variant information.

또한, 상기의 목적을 달성하기 위하여, 본 발명은 하나 이상의 소스 신호를 포함하는 믹스 신호를 획득하는 단계와; Further, in order to achieve the above object, the present invention provides a method comprising: obtaining a mixed signal comprising at least one source signal; 상기 소스 신호들 중 리믹스될 소스 신호를 획득하는 단계와; And obtaining a source signal to be remixed of said source signal; 상기 믹스 신호 및 상기 리믹스될 소스 신호를 이용하여 제1 부가 정보를 생성하는 단계와; And generating first additional information by using the downmix signal and the source signal to be remixed; 상기 제1 부가 정보를 제2 부가 정보로 변형하는 단 계를 포함하되, 상기 제1 부가 정보는 상기 리믹스될 소스 신호와 상기 믹스 신호와의 관계를 나타내는 정보인 것을 특징으로 하는 신호 처리 방법을 제공한다. Wherein the first, but one additional information includes a step of modifying the second additional information, the additional information is provided to a signal processing method characterized in that the information indicating the relation between the source to be the remix signal and the mixed signal do.

또한, 상기의 목적을 달성하기 위하여, 본 발명은 제1 믹스 신호 및 제1 부가 정보를 획득하는 단계와; Further, in order to achieve the above object, the present invention includes the steps of obtaining a first mixed signal and the first additional information; 제2 믹스 신호를 획득하는 단계와; The method comprising: obtaining a second mixed signal; 상기 제1 믹스 신호와 상기 제2 믹스 신호를 비교한 결과를 이용하여 상기 제1 부가 정보를 제2 부가 정보를 변형하는 단계를 포함하되, 상기 제1 부가 정보는 상기 제1 믹스 신호를 리믹스하기 위해 필요한 정보이고, 상기 제2 부가 정보는 상기 제2 믹스 신호를 리믹스하기 위해 필요한 정보인 것을 특징으로 하는 신호 처리 방법을 제공한다. The first additional information is to remix the first mixed signal, but by using the first result of comparing the first mix signal and the second mixed signal comprising the step of transforming the second sub information to the first additional information information, and the second additional information that is needed to provide a signal processing method characterized in that the information required to remix the second mixed signal.

또한, 상기의 목적을 달성하기 위하여, 본 발명은 하나 이상의 소스 신호를 포함하는 믹스 신호를 획득하는 믹스신호디코딩부; Further, in order to achieve the above object, the present invention is mixed signal decoding unit to obtain a mixed signal comprising at least one source signal; 제1 부가 정보를 획득하는 부가정보디코딩부; The additional information decoding unit for acquiring first additional information; 및 상기 믹스 신호, 상기 제1 부가 정보, 및 믹스 파라미터를 이용하여 리믹스 신호를 생성하는 리믹스렌더링부를 포함하되, 상기 제1 부가 정보는 상기 소스 신호들 중 리믹스될 소스 신호와 상기 믹스 신호와의 관계를 나타내는 제2 부가 정보를 변형한 정보이고, 상기 믹스 파라미터는 사용자로부터 획득된 제어 정보를 이용하여 생성되는 것을 특징으로 하는 신호 처리 장치를 제공한다. And the relationship between the mixed signal, the first additional information, and a mix using parameters comprising parts remix rendering to generate a remix signal, the first additional information sources to be remixed of said source signal signal and the mixed signal a is a variation of the second additional information, the information indicating the mix parameters provides a signal processing apparatus being generated by using the control information obtained from the user.

또한, 상기의 목적을 달성하기 위하여, 본 발명은 하나 이상의 소스 신호를 포함하는 믹스 신호 및 리믹스될 소스 신호를 이용하여 제1 부가 정보를 생성하는 부가정보생성부; Further, in order to achieve the above object, the present invention provides the additional information generation unit for generating first additional information by using the downmix signal and the source signal to be remixed comprising at least one source signal; 상기 제1 부가 정보를 제2 부가 정보로 변형하는 부가정보변형부; The additional information modification unit for modifying the first additional information as the second additional information; 및 상기 제2 부가 정보를 부호화하는 부가정보인코딩부를 포함하되, 상기 제1 부가 정보는 상기 리믹스될 소스 신호와 상기 믹스 신호와의 관계를 나타내는 정보인 것 을 특징으로 하는 신호 처리 장치를 제공한다. And comprising parts of the additional information encoding for encoding the second sub information, the first additional information provides a signal processing apparatus, characterized by that the information indicating the relation between the source to be the remix signal and the mixed signal.

이하 상기의 목적을 구체적으로 실현할 수 있는 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 설명한다. It will be described with reference to the accompanying drawings a preferred embodiment of the present invention that can achieve the object of the following in detail.

본 발명은 믹스 신호를 소스(Source) 신호 단위로 처리할 수 있는 알고리즘을 제공한다. The present invention provides an algorithm that can handle a mixed signal to the source (Source) signal unit. 믹스 신호를 소스 신호 단위로 처리하는 경우, 매우 다양한 효과를 생성할 수 있다. When processing the mixed signal to the signal source unit, it is possible to generate a wide variety of effects. 예를 들면, 영화를 보면서 배우들 음성에 대한 볼륨은 일정하게 유지하면서, 배경음악의 볼륨만을 높이는 것이 가능하다. For example, while watching the movie volume for the voice actors is kept constant, it is possible to increase only the volume of the background music. 본 발명에서 소스 신호란 믹스 신호를 구성하는 하나 이상의 소스(source)(예를 들면, 피아노)를 포함한다. The present invention at least one source (source) constituting the source signal is the mixed signal in and a (e.g., piano). 소스 신호 단위의 처리란 믹스 신호를 처리함에 있어서, 상기 믹스 신호를 구성하는 특정한 소스 신호와 관련된 특성들(예를 들면, 로컬화(localization), 게인(gain))이 "개별적으로(individually)" 수정될 수 있다는 것을 의미한다. In processing the source signal unit is processing the mixed signal, the characteristics associated with a specific source signal configuring the downmix signal (e.g., a localized (localization), Gain (gain)) are "individually (individually)" means that can be modified. 상기 "개별적으로"란 특정한 오브젝트와 관련된 특성을 수정하는 것이 다른 소스 신호들의 특성에 영향을 미치지 않거나, 지각적으로 느끼기 어려운 작은 영향만을 미치는 것을 의미한다. The "separately" means to modify the properties associated with a particular object or affect the characteristics of the other source signals, this means that only a small effect on feel difficult perceptually.

상기 믹스 신호는 모노, 스테레오, 및 멀티채널 신호를 포함한다. The mix signal includes mono, stereo, and multi-channel signal. 설명의 편의상 이하에서 스테레오 신호를 예로 하여 기술할 것이나, 본 발명은 스테레오 신호에만 한정되지 않는다. Would be described by way of example in the stereo signal for convenience of the description below, the invention is not limited to stereo signals. 본 발명에서는 통상적인 믹스 신호의 포맷(예를 들면, PCM, MP3, MPEG-AAC)뿐만 아니라, 적은 양의 부가 정보(side information)가 전송된다. In the present invention (for example, PCM, MP3, MPEG-AAC) format of the conventional mixed signal as well, is transmitted has a low amount the additional information (side information) of. 상기 믹스 신호 및 부가 정보를 이용하여 리믹스 신호를 생성할 수 있다. Using the mix signal and the additional information may generate a remix signal.

도 1은 본 발명의 일 실시예에 따른 제1 리믹스 신호 인코더의 블록도이다. Figure 1 is a block diagram of a first remix signal encoder according to an embodiment of the present invention. 상기 제1 리믹스 신호 인코더는 부가정보생성부(103) 및 부가정보인코딩부(105)를 포함한다. And the first remix signal encoder comprises a side information generation unit 103 and the additional information encoding unit (105).

도 1을 참조하면, 부가정보생성부(103)는 통상적인 믹스 신호(101) 및 상기 믹스 신호를 구성하는 소스 신호(102)를 이용하여 부가 정보(104)를 생성한다. 1, the additional information generating section 103 generates the additional information (104) using a source signal (102) constituting the conventional mix signal 101 and the downmix signal. 상기 믹스 신호(101)는 모노(mono), 스테레오(stereo) 및 멀티채널 오디오 신호(multi-channel audio signal)가 될 수 있다. The mix signal 101 can be a mono (mono), stereo (stereo) and a multi-channel audio signals (multi-channel audio signal). 상기 소스 신호(102)는 상기 믹스 신호(101)를 구성하는 소스 신호들 중 일부 또는 전부가 될 수 있다. The signal source 102 may be a part or all of the source signal configuring the downmix signal (101). 상기 부가 정보(104)는 상기 믹스 신호를 소스 신호 단위로 처리하는데 이용되는 정보를 말한다. The side information 104 refers to information used to process the mix signal to the source signal unit. 상기 부가 정보(104)는 상기 믹스 신호를 리믹싱하기 위한 믹스 파라미터를 포함한다. The side information 104 includes a mix parameters for remixing the mix signal. 상기 믹스 파라터에는 인코더에서 소스 신호를 이용하여 생성된 인코더 믹스 파라미터(Encoder mix parameter)를 포함하며, 선택적으로 믹스 신호만을 이용하여 생성된 블라인드 믹스 파라미터(Blind mix parameter)를 포함할 수 있다. The mix is ​​p-emitter comprises an encoder mix parameters generated using a source signal in an encoder (Encoder mix parameter), may comprise the generated selectively only mix signal using a blind mix parameters (Blind mix parameter). 상기 믹스 파라미터의 예로는 각각의 소스 신호에 대한 게인 값 및 서브밴드 파위(subband power) 등이 될 수 있다. Examples of the mix parameter may be a gain value and pawi subband (subband power) for each source signal. 상기 부가 정보(104)에 대한 구체적인 정의 및 생성 방법은 도 2에서 기술된다. Specific definition and creation method for the sub-information 104 is described in Figure 2. 본 발명은 또한 믹스 신호를 구성하는 소스 신호(102)만을 이용하여 부가 정보(104)를 생성하는 것을 포함한다. The invention also includes the generation of side information 104 using only the source signal (102) that make up the mix. 부가정보인코딩부(105)는 생성된 부가 정보(104)를 인코딩하여 부호화된 부가 정보 신호(106)를 생성한다. Additional information encoding unit 105 generates the sub information signal 106. The encoded by encoding the generated sub information (104). 상기 믹스 신호(101) 및 상기 부가 정보 신호(106)는 디코딩 장치로 전송된다. The mix signal 101 and the additional information signal 106 is transmitted to the decoding apparatus.

도 2는 믹스 신호가 스테레오 신호인 경우, 도 1의 제1 리믹스 신호 인코딩 장치에 대한 상세 블록도이다. Figure 2 is when the downmix signal is a stereo signal, a detailed block diagram for a first remix signal encoding apparatus of Fig. 전술한 것처럼, 본 발명에서 사용되는 믹스 신호는 모노, 스테레오 및 멀티채널 오디오 신호가 될 수 있으나, 편의상 스테레오 신호(201)를 기준으로 설명한다. As described above, the mix signal to be used in the present invention, but can be a mono, stereo and multi-channel audio signals, will be described based on the convenience stereo signal 201. The

상기 스테레오 신호(stereo signal)(201) The stereo signal (stereo signal) (201)

Figure 112007046536094-pat00001
And
Figure 112007046536094-pat00002
는 상기 스테레오 신호를 구성하는 소스 신호들의 합으로 표현될 수 있다. It may be expressed as the sum of the source signals constituting the stereo signal. 여기서, n은 타임 인덱스를 의미한다. Here, n denotes a time index. 따라서, 상기 스테레오 신호(201)는 아래의 [수학식 1]과 같이 표현될 수 있다. Thus, the stereo signal 201 can be expressed as Equation 1 below.

Figure 112007046536094-pat00003

여기서, I는 스테레오 신호 내에 포함되는 소스 신호들의 개수이고, Here, I is the number of source signal included in the stereo signal,

Figure 112007046536094-pat00004
은 소스 신호들을 나타낸다. It represents the source signal.
Figure 112007046536094-pat00005
And
Figure 112007046536094-pat00006
는 각각의 소스 신호에 대한 진폭 패닝(amplitude panning) 및 게인(gain)을 결정하는 값이다. Is a value which determines the amplitude panning (amplitude panning) and Gain (gain) for each source signal. 모든 all
Figure 112007046536094-pat00007
들은 서로 독립적이다. They are independent of each other. 상기 remind
Figure 112007046536094-pat00008
는 모두 순수한 소스 신호이거나, 또는 순수한 소스 신호에 약간의 잔향(reverberation) 및 효과음 신호성분(sound effect signal components)을 포함할 수 있다. It may include all or a pure source signal, or some reverberation (reverberation) and effects signal components (sound effect signal components) in a pure source signal. 예를 들면, 특정한 잔향 신호성분은 2개의 소스 신호, 즉, 왼쪽 채널로 믹스된 신호와 오른쪽 채널로 믹스된 신호로 표현될 수 있다. For example, a particular reverberation signal component may be represented by the two source signals, that is, a signal with a signal mixed to the right channel to the left channel mix.

본 발명의 목적은 M개(0 <= M <= I)의 소스 신호들이 리믹스 되도록, 상기 소스 신호를 포함하는 스테레오 신호를 수정하는 것이다. An object of the present invention is such that they remix the source signals of the M (0 <= M <= I), to modify the stereo signal comprising the source signal. 상기 소스 신호들은 서로 다른 게인 팩터들을 가지면서 스테레오 신호로 리믹스될 수 있다. The source signals may be remixed into a stereo signal while having different gain factor. 리믹스 신호는 아래의 [수학식 2]와 같이 표현될 수 있다. Remix signal can be expressed by Equation 2 below.

Figure 112007046536094-pat00009

여기서, here,

Figure 112007046536094-pat00010
And
Figure 112007046536094-pat00011
는 리믹스되는 M개의 소스 신호들에 대한 새로운 게인 팩터들이다. Are the new gain factor for the M source signals to be remixed. 상기 remind
Figure 112007046536094-pat00012
And
Figure 112007046536094-pat00013
는 디코더 단에서 제공될 수 있다. It may be provided in the decoder. 이 경우에, 부가정보생성부(206)는 스테레오 신호(201) 및 M개의 소스 신호(202)를 이용하여 부가 정보(207)를 생성할 수 있다. In this case, the side information generation unit 206 can generate the side information 207 using a stereo signal 201 and the M source signals 202.

상술하였듯이, 본 발명의 목적은 통상적인 스테레오 신호와 약간의 부가 정보가 주어지는 경우에, 상기 스테레오 신호를 소스 신호 단위로 리믹스하는 것이다. As described above, an object of the invention to the case where the conventional stereo signal and a bit of the additional information given, remix the stereo signal as the source signal unit. 본 발명에서와 같이 매우 적은 양의 부가 정보를 이용하여 [수학식 1]로 표현 되는 믹스 신호로부터 [수학식 2]로 표현되는 리믹스 신호를 완벽하게 생성하는 것은 가능하지 않다. The fully create a remix signal represented by Equation (2) from using a very small amount of additional information of the mixed signal is represented by Equation 1 as in the present invention is not possible. 따라서, 본 발명은 각각의 소스 신호들 Accordingly, the invention of each of the source signals

Figure 112007046536094-pat00014
에 대한 접근 없이, [수학식 1]로 표현되는 통상적인 믹스 신호가 주어지는 경우에, [수학식 2]로 표현되는 리믹스 신호를 지각적으로 모방하는 것을 목적으로 한다. Without access to, and if the given conventional mixed signal is represented by Equation 1, for the purpose of imitating a remix signal represented by Equation (2) perceptually.

도 2를 참조하면, 제1 리믹스 신호 인코딩 장치에 통상적인 스테레오 신호(201) 및 상기 스테레오 신호(201)에 포함되는 M개의 소스 신호(202)가 입력된다. Referring to Figure 2, the first 1 M source signals 202 included in a typical stereo signal to remix signal encoding apparatus 201 and the stereo signal 201 is input. 상기 스테레오 신호(201)는 부가 정보와 동기화되기 위해 어느 정도 딜레이 되어, 출력 신호로서 직접 이용될 수 있다. The stereo signal 201 are somewhat delay to become synchronized with the additional information, it may be directly used as an output signal. 부가 정보를 생성하기 위해, 상기 스테레오 신호(201) 및 소스 신호들(202)은 필터뱅크(203)를 통하여 시간-주파수 도메인의 서브밴드별 신호(204 및 205)로 분해된다. To generate additional information, each of the stereo signal 201 and the signal source 202 is a time through a filter bank (203) is decomposed into signals of a frequency domain by sub-bands (204 and 205). 즉, 상기 스테레오 신호(201) 및 소스 신호는 시간-주파수 도메인에서 처리되는데, 상기 시간-주파수 도메인에 대해서는 도 3에서 후술한다. In other words, the stereo signals 201 and the source signal is a time-are processed in the frequency domain, the time-will be described later in FIG. 3 for the frequency domain. 상기 서브밴드별 신호(204)는 각 서브밴드의 중심 주파수에서 유사하게 프로세싱된다. The sub-band-specific signal 204 is processed similarly to the center frequency of each subband. 특정한 주파수에서 스테레오 신호(201)의 서브밴드 쌍(204)은 Subband pair 204 of the stereo signal 201 at a particular frequency,

Figure 112007046536094-pat00015
And
Figure 112007046536094-pat00016
로 표시된다. It is represented by. 여기서 k는 서브밴드 신호들의 시간 인덱스(time index)이다. Where k is a time index (time index) of the sub-band signal. 유사하게, M개의 소스 신호들(202)의 서브밴드 신호들(205)은 Similarly, the sub-band signals of the M source signals 202, 205
Figure 112007046536094-pat00017
, ,
Figure 112007046536094-pat00018
,..., ...,
Figure 112007046536094-pat00019
로 표시된다. It is represented by. 명료한 표현을 위해, 서브밴드(주파수) 인덱스를 사용하지 않았다. For a clear representation, not to use the sub-band (frequency) index.

상기 소스 신호들(202)의 서브밴드 신호들(205)이 주어지면, 부가정보생성 부(206)는 서브밴드별로 숏-타임 서브밴드 파워(short-time subband power), Given the sub-band signal (205) of said source signal (202), the additional information generating section 206 for each sub-band short-time subband power (short-time subband power),

Figure 112007046536094-pat00020
를 생성한다. The produce. 또한, 상기 부가정보생성부(206)는 스테레오 신호(201)의 서브밴드 쌍(204)을 이용하여, 서브밴드별로 게인 팩터 In addition, the additional information generation unit 206 by using the sub-band pair 204 of the stereo signal 201, the gain factor for each subband
Figure 112007046536094-pat00021
And
Figure 112007046536094-pat00022
를 생성한다. The produce. 상기 게인 팩터 The gain factor
Figure 112007046536094-pat00023
And
Figure 112007046536094-pat00024
는 외부에서 직접 주어질 수 있다. It can be brought directly from the outside. 상기 서브밴드별 숏-타임 서브밴드 파워 및 게인 팩터를 이용하여 서브밴드별 부가 정보(207)가 생성된다. The sub-band by a short-time subband power and the gain factor using the sub-band by sub information 207 is generated. 상기 부가정보생성부(206)는 상기 숏-타임 서브밴드 파워 및 게인 팩터들 이외에 상기 스테레오 신호에 관련된 다른 정보를 부가 정보(207)로 생성할 수 있다. The side information generation unit 206 is the short - can be generated as the additional information 207, the other information associated with the stereo signal in addition to the time subband power and the gain factor. 부가정보인코딩부(208)는 상기 서브밴드별 부가정보(207)를 이용하여 부호화된 부가 정보 신호(209)를 생성한다. The additional information encoding unit 208 generates a side information signal 209, the coding is performed using the additional information (207) by the sub-band.

많은 스테레오 신호(201)에 대하여, 게인 팩터 With respect to the number of a stereo signal 201, a gain factor

Figure 112007046536094-pat00025
And
Figure 112007046536094-pat00026
는 고정적이 될 것이다. This will be fixed. 만일 if
Figure 112007046536094-pat00027
And
Figure 112007046536094-pat00028
가 시간 k에 따라 가변적이라면, 상기 게인 팩터들은 시간의 함수로 생성될 것이다. If variable depending on the time k, the gain factor will be generated as a function of time. 상기 게인 팩터들은 직접 양자화 및 부호화되지 않고, 먼저 양자화 및 부호화에 더 적합한 다른 값들로 전환될 수 있다. The gain factor can not be directly quantized and coded and may be converted first into a more suitable other values ​​to the quantization and coding. 또한, Also,
Figure 112007046536094-pat00029
는 스테레오 신호(201)의 서브밴드 파워에 상대적인 값으로 정규화될 수 있다. It may be normalized to a value relative to the sub-band power of the stereo signal (201). 이것은 스테레오 신호를 효율적으로 부호화하기 위해 통상적인 인코딩 장치가 이용되는 경우에, 본 발명을 상대적으로 변화에 강하도록 만들어준다. This is the case where the conventional encoding apparatus used for efficiently encoding a stereo signal, making the steel to relatively change the invention. 예를 들면, For example,
Figure 112007046536094-pat00030
And
Figure 112007046536094-pat00031
는 아래의 [수학식 3]으로 표현되는 게인 및 데시벨(dB) 단위의 레벨차로 전환되어 전송될 수 있다. Is switched drive level of the gain, and decibel (dB) units represented by formula 3 below can be transmitted.

Figure 112007046536094-pat00032

또한, Also,

Figure 112007046536094-pat00033
는 부가 정보로서 직접 부호화되는 것이 아니라, 아래의 [수학식 4]로 표현되는 스테레오 신호에 상대적으로 정의된 값으로 변환되어 전송될 수 있다. It is converted to the not directly encoded as side information, the relative defined as a stereo signal represented by Equation 4 below, the value may be transmitted.

Figure 112007046536094-pat00034

숏-타임 서브밴드 파워를 생성하기 위해, 본 발명은 단일-폴 평균(single-pole averaging)을 사용한다. To produce a time subband power, the present invention provides a single-shot use Paul mean (single-pole averaging). 즉, In other words,

Figure 112007046536094-pat00035
는 아래의 [수학식 5]와 같이 계산될 수 있다. It may be computed as shown in Equation 5 below.

Figure 112007046536094-pat00036

여기서, α∈[0,1]는 아래의 [수학식 6]와 같이 지수적으로 감소하는 추정 윈도우(estimation window)의 시간-상수를 결정한다. Here, α∈ [0,1] is the time of the estimation window (estimation window) that decreases exponentially as shown in [Equation 6] under-determined constants.

Figure 112007046536094-pat00037

여기서, here,

Figure 112007046536094-pat00038
는 서브밴드 샘플링 주파수를 나타낸다. Represents the sub-band sampling frequency. 예를 들면, T=40 ms를 이용할 수 있다. For example, it is possible to use T = 40 ms. 이하에서, In the following,
Figure 112007046536094-pat00039
는 숏-타임 평균(short-time averaging)을 나타낸다. It is a short-time average represents the (short-time averaging). 만일 if
Figure 112007046536094-pat00040
And
Figure 112007046536094-pat00041
가 주어지지 않는다면, 상기 Is not provided, the
Figure 112007046536094-pat00042
And
Figure 112007046536094-pat00043
는 부가정보생성부(206)에서 생성될 필요가 있다. Has to be generated by the additional information generator 206. The
Figure 112007046536094-pat00044
이므로, Because of,
Figure 112007046536094-pat00045
는 아래의 [수학식 7]과 같이 계산된다. , It is calculated by [Equation 7] below.

Figure 112007046536094-pat00046

유사하게, Similarly,

Figure 112007046536094-pat00047
는 아래의 [수학식 8]과 같이 계산된다. , It is calculated by [Equation 8] below.

Figure 112007046536094-pat00048

도 3은 본 발명의 일 실시예에 따른 오디오 신호를 처리하기 위한 도메인을 도시한다. Figure 3 shows a domain for processing an audio signal according to one embodiment of the present invention. 전술한 것처럼, 오디오 신호 및 부가 정보는 도 3에 도시된 것과 같은 시간-주파수 도메인의 서브밴드별 신호로서 처리된다. As described above, the audio signal and the additional information are the time as shown in Figure 3 is processed as a signal per sub-band in the frequency domain. 상기 시간-주파수 도메인의 서브밴드별 신호는 지각적으로 유도된다. Wherein the time-sub-band-specific signals in the frequency domain is derived perceptually. 예를 들면, 약 20ms의 길이를 가지는 사인파 분석창 및 통합창(sine analysis and synthesis window)을 가지는 STFT(Short Time Fourier transform)를 이용하여 서브밴드별 신호를 생성할 수 있다. For example, it is possible using the STFT (Short Time Fourier transform) analysis window has a sine wave and the integration windows having a length of about 20ms (sine analysis and synthesis window) to generate sub-band-specific signals. 이때, STFT 계수들은 하나의 그룹이 ERB(equivalent rectangular bandwidth)의 약 2배가 되는 대역폭을 갖도록 그룹화될 수 있다. Here, STFT coefficients are a group to be grouped so as to have a bandwidth that is approximately twice the ERB (equivalent rectangular bandwidth).

도 4는 본 발명의 일 실시예에 따른 제2 리믹스 신호 인코딩 장치에 대한 블록도이다. Figure 4 is a block diagram of a second remix signal encoding apparatus according to an embodiment of the present invention. 상기 제2 리믹스 신호 인코딩 장치는 다운믹싱부(402), 부가정보생성부(403) 및 부가정보인코딩부(406)을 포함한다. The second remix signal encoding apparatus includes a downmixing unit 402, a side information generation unit 403 and the additional information encoding unit 406.

도 4를 참조하면, 다운믹싱부(402)는 복수의 소스 신호들(401)을 더하여 하나의 합 신호(sum signal)(404)을 생성한다. 4, the downmixing unit 402 generates a single sum signal (sum signal) (404) plus a plurality of the source signal 401. The 제2 리믹스 신호 인코딩 장치는 제1 리믹스 신호 인코딩 장치와는 달리, 스테레오 신호를 전송하는 대신에 상기 합 신호(404)를 전송한다. Second remix signal encoding device transmits a first remix unlike the signal encoding device, the sum signal (404) in place of transmitting a stereo signal. 부가정보생성부(403)는 상기 소스 신호들(401)을 이용하여 부가 정보(405)를 생성한다. Additional information generating section 403 generates the additional information (405) using said source signal (401). 상기 부가 정보(405)는 각 소스 신호에 대응하는 서브밴 드 파워 및 게인 팩터를 포함한다. And the additional information (405) comprises a sub-band power and the gain factor corresponding to each of the source signal. 또한, 상기 부가 정보(405)는 리믹스 렌더링부에서의 딜레이에 대응하는 파라미터를 포함할 수 있다. In addition, the additional information 405 may include a parameter corresponding to the delay in the remix rendering unit. 제1 리믹스 신호 인코딩 장치에서와 유사하게, 상기 부가 정보(405)는 양자화 및 부호화에 더 적합한 다른 값으로 변환되어 전송될 수 있다. Similarly as in the first remix signal encoding apparatus, the additional information 405 may be transmitted is converted to another more appropriate value in the quantization and coding. 부가정보인코딩부(406)는 생성된 부가 정보(405)를 이용하여 부호화된 부가 정보 신호(407)를 생성한다. The additional information encoding unit 406 generates an additional information signal 407. The encoded using the generated sub information 405. The 생성된 상기 합 신호(404) 및 부가 정보 신호(407)는 디코딩 장치로 전송된다. The resulting sum signal 404 and the additional information signal 407 is transmitted to the decoding apparatus. 본 발명은 또한 다운믹싱부(402)를 가지지 않는 인코딩 장치를 포함한다. The invention also includes the encoding device does not have a down-mixing unit 402. The 이 경우에, 소스 신호들(401)은 합 신호(404)로 변환되지 않고, 각 소스 신호들(401)이 직접 전송된다. In this case, the signal source 401 is not converted to a sum signal (404), each of the source signal 401 is directly sent.

도 5는 본 발명의 일 실시예에 따른 제1 리믹스 신호 디코딩 장치에 대한 블록도이다. Figure 5 is a block diagram for a first remix signal decoding apparatus according to an embodiment of the present invention. 상기 제1 리믹스 신호 디코딩 장치는 부가정보디코딩부(503) 및 리믹스 렌더링부(505)를 포함한다. And the first remix signal decoding apparatus includes the additional information decoding unit 503, and a remix rendering unit 505.

도 5를 참조하면, 믹스 신호(501) 및 부가 정보 신호(502)가 제1 리믹스 신호 디코딩 장치에 입력된다. 5, the mix signal 501 and the additional information signal 502 is input to the first remix signal decoding apparatus. 상기 믹스 신호(501)는 모노, 스테레오 또는 멀티채널 오디오 신호가 될 수 있다. The mix signal 501 can be a mono, stereo or multichannel audio signal. 부가정보디코딩부(503)는 부가 정보 신호(502)를 디코딩하여 부가 정보(504)를 생성한다. Additional information decoding unit 503 decodes the side information signal 502 and generates the additional information (504). 상기 부가 정보(504)는 전송된 오디오 신호(501)에 포함된 소스 신호들의 게인 팩터 및 서브밴드 파워 등을 포함한다. And the additional information (504) comprises a gain factor of a source signal included in the transmitted audio signal 501 and the sub-band power and the like. 리믹스 렌더링부(505)에는 사용자가 직접 제공하는 제어 정보를 이용하여 생성된 사용자 믹스 파라미터(user-mix parameter, 506)가 입력될 수 있다. Remix rendering unit 505 has a user to directly provide the control information the user mix parameters (user-mix parameter, 506) to be generated by using the input. 리믹스 렌더링부(505)는 믹스 신호(501), 전송된 부가 정보(504) 및 사용자 믹스 파라미터(506)를 이용하여 리믹스 신호(507)를 생성한다. Remix a rendering unit 505, using the downmix signal 501, the transmitted side information 504 and the user mix parameters 506 and generates a remix signal 507. 상기 리믹스 신호를 생성하는 방법에 관한 구체적인 설명은 도 6에서 후술한다. Specific instructions on how to generate the remix signal will be described later in FIG. 리믹스 신호(507)는 전송된 믹스 신호의 채널 수와 동일한 채널 수를 가지는 동채널 믹스 신호(Eq-channel mix signal)로 생성되거나, 또는 믹스 신호의 채널 수보다 많은 채널 수를 가지는 업채널 믹스 신호(Up-channel mix signal)로 생성될 수 있다. Remix signal 507 or generated by the same channel-mix signal (Eq-channel mix signal) having the same number of channels as the number of channels of the transmitted downmix signal, or the up-channel mix signal having a large number of channels than the number of channels of the downmix signal It may be generated by (Up-channel mix signal).

도 6은 스테레오 신호를 이용하는 경우, 도 5의 제1 리믹스 신호 디코딩 장치에 대한 상세도이다. Figure 6 is the case of using a stereo signal, a detailed view of a first remix signal decoding apparatus of Fig. 전술한 것처럼, 전송된 믹스 신호는 모노, 스테레오 및 멀티채널 오디오 신호가 될 수 있으나, 편의상 스테레오 신호(601)를 기준으로 설명한다. As described above, the transmitted downmix signal, but can be a mono, stereo and multi-channel audio signal, the stereo signal is written for the sake of convenience 601.

도 6을 참조하면, 스테레오 신호(601)는 필터뱅크(603)을 통하여 시간-주파수 도메인의 서브밴드별 신호(604)로 분해된다. It is decomposed into sub-bands by signal 604 in the frequency domain - 6, a stereo signal 601, a filter bank 603 through a time. 도 6에 도시된 것처럼, 특정한 주파수에서의 서브밴드별 신호(604)은 The like, a sub-band by the signal 604 in a certain frequency shown in FIG. 6

Figure 112007046536094-pat00049
And
Figure 112007046536094-pat00050
로 표현된다. It is represented by. 부가정보디코딩부(605)는 전송된 부가 정보 신호(602)를 복호화하여, 서브밴드별 부가 정보(606)를 생성한다. Additional information decoding unit 605 decodes the transmitted side information signal 602, and generates the additional information (606) each sub-band. 또한, 리믹스 렌더링부(607)에 사용자가 제공하는 제어 정보를 이용하여 생성된 사용자 믹스 파라미터(608)가 입력될 수 있으며, 상기 사용자 믹스 파라미터(608)는 서브밴드별로 제공될 수 있다. In addition, the user can mix parameters 608 generated by using the control information provided by the user to remix the rendering unit 607 can be entered, the user mix parameters 608 may be provided for each sub-band. 전술한 것처럼, 상기 부가 정보(606)는 리믹스 될 M개의 소스 신호에 대한 서브밴드별 게인 팩터( As described above, the sub-information 606 is the gain factor per sub-band for the M source signals to be remixed (
Figure 112007046536094-pat00051
And
Figure 112007046536094-pat00052
) 및 ) And
Figure 112007046536094-pat00053
로 표현되는 서브밴드 파워를 포함한다. And a subband power, represented by. 리믹스 렌더링부(607)는 서브밴드별로 생성된 스테레오 신호(604), 전송된 부가 정보(606) 및 사 용자 믹스 파라미터(608)를 이용하여, 서브밴드별 리믹스 신호(609), Remix rendering unit 607 is a stereo signal 604, to the sub-band signal by a remix 609 using the transmitted side information 606 and the user-mix parameters 608 generated for each subband,
Figure 112007046536094-pat00054
And
Figure 112007046536094-pat00055
를 생성한다. The produce. 상기 리믹스 신호(609)를 생성하는 방법은 아래에서 더욱 상세하게 기술된다. How to generate the remix signal 609 is described in more detail below. 상기 리믹스 신호(609)는 역필터뱅크(610)를 통해 시간 도메인(time domain)의 스테레오 신호(611), The remix signal 609 is a stereo signal 611 in the time domain (time domain) through an inverse filter bank 610,
Figure 112007046536094-pat00056
And
Figure 112007046536094-pat00057
로 변환된다. It is converted to.

리믹스 렌더링부(607)에서 생성된 리믹스 신호(609)를 생성하는 방법은 다음과 같다. Method for producing a remix signal 609 generated by the remix rendering unit 607 is as follows. 상기 [수학식 1] 및 [수학식 2]는 서브밴드별 신호(604 및 609)에 대해서도 유효하다. The Equation 1 and Equation 2 is valid for the sub-band-specific signals (604 and 609). 이 경우에, 소스 신호 In this case, the signal source

Figure 112007046536094-pat00058
는 서브밴드별 소스 신호 A source signal by subband
Figure 112007046536094-pat00059
로 교체된다. It is replaced by the. 즉, 서브밴드별 믹스 신호(604)는 아래의 [수학식 9]과 같이 표현될 수 있다. That is, the mixed signal 604 by the sub-band can be expressed as Equation 9 below.

Figure 112007046536094-pat00060

서브밴드별 리믹스 신호(609)는 아래의 [수학식 10]과 같이 표현될 수 있다. Per subband remix signal 609 may be expressed as [Equation 10] below.

Figure 112007046536094-pat00061

리믹스 신호(609)를 생성하기 위해, 최소자승추정법(least squares estimation)이 이용될 수 있다. To create a remix signal 609, a least squares estimation method (least squares estimation) may be used. 서브밴드별 믹스 신호(604), Mix signal 604 by the sub-band,

Figure 112007046536094-pat00062
And
Figure 112007046536094-pat00063
가 주어지면, 아래의 [수학식 11]와 같이 서로 다른 게인들을 가지는 서브밴드별 리믹스 신호(609)가 상기 서브밴드별 믹스 신호(604)의 선형 조합으로 추정될 수 있다. Is given, the equation 11] to each other subband specific remix signals 609 having different gains, such as the following can be estimated as a linear combination of the downmix signal 604 by the sub-band.

Figure 112007046536094-pat00064

여기서, here,

Figure 112007046536094-pat00065
, ,
Figure 112007046536094-pat00066
, ,
Figure 112007046536094-pat00067
And
Figure 112007046536094-pat00068
는 가중 팩터들(weighting factors)이다. It is a weighting factor (weighting factors). 이때, 생성되는 추정 에러(estimation error)는 아래의 [수학식 12]과 같이 정의될 수 있다. At this time, the generated estimated error (estimation error) which can be defined as Equation 12 below.

Figure 112007046536094-pat00069

상기 가중 팩터들, Said weight factor,

Figure 112007046536094-pat00070
, ,
Figure 112007046536094-pat00071
, ,
Figure 112007046536094-pat00072
And
Figure 112007046536094-pat00073
는 평균제곱오차(mean square error), Mean square error (mean square error) is,
Figure 112007046536094-pat00074
And
Figure 112007046536094-pat00075
가 최소가 되도록 서브밴드별로 생성될 수 있다. So that the minimum can be generated for each subband. 이때, 추정 에러, In this case, the estimation error,
Figure 112007046536094-pat00076
And
Figure 112007046536094-pat00077
end
Figure 112007046536094-pat00078
And
Figure 112007046536094-pat00079
에 직교(orthogonal)될 때, 상기 평균제곱오차가 최소가 된다는 것을 이용할 수 있다. When the perpendicular (orthogonal), may be used in that the mean square error that is minimized. 생성되는 Created
Figure 112007046536094-pat00080
And
Figure 112007046536094-pat00081
는 아래의 [수학식 13]과 같이 표현될 수 있다. It can be expressed by Equation 13 below.

Figure 112007046536094-pat00082

여기서, here,

Figure 112007046536094-pat00083
, ,
Figure 112007046536094-pat00084
And
Figure 112007046536094-pat00085
는 직접 생성될 수 있지만, But it can be manually created,
Figure 112007046536094-pat00086
And
Figure 112007046536094-pat00087
은 전송된 부가 정보(606)(예를 들면, Is, for the transmitted side information 606 (for example,
Figure 112007046536094-pat00088
, ,
Figure 112007046536094-pat00089
, ,
Figure 112007046536094-pat00090
) 및 사용자가 제공하는 제어 정보(608)(예를 들면, 게인 팩터 ) And control information 608 provided by the user (e.g., a gain factor
Figure 112007046536094-pat00091
And
Figure 112007046536094-pat00092
)를 이용하여, 아래의 [수학식 14]와 같이 생성될 수 있다. ), It may be generated as shown in formula (14) below using the.

Figure 112007046536094-pat00093

유사하게, Similarly,

Figure 112007046536094-pat00094
And
Figure 112007046536094-pat00095
가 아래의 [수학식 15]와 같이 생성될 수 있다. It may be generated as shown in [Equation 15] below.

Figure 112007046536094-pat00096

여기서, here,

Figure 112007046536094-pat00097
And
Figure 112007046536094-pat00098
는 아래의 [수학식 16]과 같이 표현될 수 있다. It may be expressed as [Equation 16] below.

Figure 112007046536094-pat00099

만일, 상기 믹스 신호(604)의 위상이 서로 동기되거나(coherent) 또는 거의 동기화된다면, 아래의 [수학식 17]와 같이 표현되는 값이 1에 근접하게 된다. If, if the phase of the mixed signal 604 or synchronization (coherent) or substantially in synchronization with each other, the value expressed by Equation 17 below is close to 1.

Figure 112007046536094-pat00100

이때, 상기 가중치들은 아래의 [수학식 18]과 같이 표현될 수 있다. In this case, the weights may be expressed as [Equation 18] below.

Figure 112007046536094-pat00101

이와 같이 생성된 서브밴드별 리믹스 신호(609)는 전술한 것처럼 역필터뱅크(610)를 통해 시간-도메인의 리믹스 신호(611)로 변환된다. Thus, by the generated sub-band signals remix 609 hours through the inverse filter bank 610 as described above are converted to remix signals 611 of the domain. 상기 리믹스 신호(611)는 사용자가 제공한 제어 정보를 이용하여 생성된 사용자 믹스 파라미터( The remix signal 611 is the user mix parameters generated by using the control information provided by the user (

Figure 112007046536094-pat00102
And
Figure 112007046536094-pat00103
)를 이용하여 각각의 소스 신호를 독립적으로 리믹스하여 생성된 리믹스 신호와 유사하게 들린다. ) To sounds similar to the remix signal generated by the remix each source signal independently by using the.

지금까지는 2채널 스테레오 신호의 리믹싱에 초점을 맞추었다. Until now it focused on re-mixed 2-channel stereo signal. 그러나, 전술한 것처럼 본 발명은 스테레오 신호에 제한되지 않고, 멀티채널 오디오 신호, 예를 들면 5.1채널 오디오 신호를 리믹싱하는 것까지 확대될 수 있다. However, the invention as described above may be expanded to not be limited to a stereo signal, mixes the multi-channel audio signal, for example, 5.1-channel audio signals Li. 당업자들은 본 명세서에서 기술된 스테레오 신호와 유사하게, 멀티채널 오디오 신호를 리믹싱할 수 있다. Those skilled in the art can be made similar to the stereo signal as described herein, mixing the multi-channel audio signals Li. 이 경우에, [수학식 11]는 아래의 [수학식 19]과 같이 쓰여질 수 있다. In this case, the equation 11 may be written as shown in Equation 19 below.

Figure 112007046536094-pat00104

선택적으로, 믹스 신호의 채널들 중 특정한 채널은 리믹스하지 않고 남겨두도록 할 수 있다. Alternatively, a particular channel of the channels of the downmix signal may be left without a remix. 예를 들면, 5.1 서라운드 채널에 대하여, 2개의 뒤쪽 채널은 수정하지 않고, 앞쪽 채널에만 리믹싱을 적용하도록 할 수 있다. For example, for 5.1 surround channels can be applied to the two rear channels without modification, remixing only the front channels. 이 경우에, 2 또는 3채널 리믹싱 알고리즘이 앞쪽 채널에 적용된다. In this case, a two or three-channel remixing algorithm is applied to the front channel.

도 7은 본 발명의 일 실시예에 따른 제2 리믹스 신호 디코딩 장치에 대한 블록도이다. 7 is a block diagram of a second remix signal decoding apparatus according to an embodiment of the present invention. 상기 제2 리믹스 신호 디코딩 장치는 부가정보디코딩부(703), 공간정보 통합부(705) 및 리믹스 렌더링부(707)를 포함한다. The second remix signal decoding apparatus includes the additional information decoding unit 703, a spatial information integration unit 705, and a remix rendering unit 707.

도 7을 참조하면, 소스 신호들의 합 신호(701) 및 부가 정보 신호(702)가 제2 리믹스 신호 디코딩 장치로 입력된다. 7, the sum signal 701 and the additional information signal (702) of the source signals are input to the second remix signal decoding apparatus. 부가정보디코딩부(703)는 부가 정보 신호(702)를 디코딩하여, 부가 정보(704)를 생성한다. In addition information decoding unit 703 decodes the side information signal 702, and generates the additional information (704). 상기 부가 정보(704)는 게인 팩터, 딜레이 상수 및 서브밴드 파워 등을 포함한다. And the additional information 704 including the gain factor, the delay constant and the sub-band power. 부가정보통합부(705)는 상기 부가 정보(704)를 이용하여, 상기 합 신호(701)를 복수의 소스 신호들(706)로 분리한다. The additional information integration unit 705, by using the additional information (704), and separating the sum signal 701 to a plurality of source signal 706. The 리믹스 렌더링부(707)는 상기 소스 신호들(706)을 이용하여 리믹스 신호(709)를 생성할 수 있다. Remix rendering unit 707 may generate a remix signal 709 by using said source signal (706). 이때, 상기 리믹스 렌더링부(707)는 부가 정보로 전송된 믹스 파라미터를 이용하여 리믹스 신호(709)를 생성할 수 있다. Here, the remix rendering unit 707 may generate a remix signal 709 using the mix parameters sent to the additional information. 또한, 상기 리믹스 렌더링부(707)는 선택적으로 사용자가 제공하는 제어 정보를 이용하여 생성된 사용자 믹스 파라미터(708)를 이용하여 리믹스 신호(709)를 생성할 수 있다. In addition, the remix rendering unit 707 may be used to selectively mix the user parameters 708 generated by using the control information provided by the user to create a remix signal 709.

도 8A는 통상적인 인코딩 장치 및 본 발명의 일 실시예에 따른 리믹스 신호 인코딩 장치의 결합을 나타내는 블록도이다. Figure 8A is a block diagram showing the combination of a remix signal encoding apparatus according to an embodiment of the conventional encoding apparatus and the present invention. 믹스 신호(801)는 통상적인 인코딩 장치(803)에 의해 부호화되어, 부호화된 믹스 신호(805)로 변환될 수 있다. Mix signal 801 is encoded by the conventional encoding device 803, it can be converted into an encoded downmix signal 805. 상기 믹스 신호(801)는 채널별 신호 또는 소스 신호가 될 수 있다. The mixed signal 801 may be a signal or a source signal for each channel. 상기 통상적인 인코딩 장치(803)는 AAC, MP3 인코더 등과 같은 종래의 인코딩 장치뿐만 아니라, 앞으로 개발될 인코딩 장치를 포함한다. As well as the conventional encoding device, such as the conventional encoding device 803 AAC, MP3 encoder, a coding apparatus to be developed in the future. 본 발명에 따른 리믹스 신호 인코딩 장치(804)는 상기 믹스 신호(801) 및 상기 믹스 신호에 포함되는 소스 신호(802)를 이용하여 부가 정보 신호(806)를 생성한다. Remix signal encoding apparatus 804 according to the present invention generates the additional information signal 806 using the signal source 802 included in the downmix signal 801 and the downmix signal. 다중화부(807)는 부호화된 믹스 신호(805) 및 부가 정보 신호(806)를 이용하여 비트스트림(808)을 생성한다. The multiplexing unit 807 generates a bit stream 808 using the encoded downmix signal 805 and the additional information signal 806. 전술한 것처럼, 상기 부 가 정보 신호(806)는 종래 장치들과 호환성을 가지도록, 종래 믹스 신호 포맷 내의 보조 데이터 영역에 삽입될 수 있다. As described above, the sub information signal 806 is to have the compatibility with the conventional apparatus, it can be inserted into the auxiliary data area in the conventional mix signal format.

도 8B는 통상적인 디코딩 장치 및 본 발명의 일 실시예에 따른 리믹스 신호 디코딩 장치의 결합에 대한 블록도이다. Figure 8B is a block diagram of a combination of a remix signal decoding apparatus according to an embodiment of the conventional decoding apparatus and the present invention. 역다중화부(810)는 전송된 비트스트림(809)으로부터 부호화된 믹스 신호(811) 및 부가 정보 신호(812)를 분리한다. Demultiplexer 810 separates the downmix signal 811 and the additional information signal (812) from encoding the transmitted bit stream (809). 그 다음에, 통상적인 디코딩 장치(813)는 상기 부호화된 믹스 신호(811)를 디코딩하여, 본 발명에 따른 리믹스 신호 디코딩 장치(815)에서 이용될 수 있는 믹스 신호(814)를 생성한다. Next, a conventional decoding device 813 decodes the downmix signal 811, the encoded, produces a mixed signal 814 that can be used in the remix signal decoding apparatus 815 according to the present invention. 상기 통상적인 디코딩 장치(813)는 AAC, MP3 디코더 등과 같은 종래의 인코딩 장치뿐만 아니라, 앞으로 개발될 인코딩 장치를 포함한다. As well as the conventional encoding device, such as the conventional decoding device 813 AAC, MP3 decoder, and includes an encoding apparatus to be developed in the future. 상기 믹스 신호(814)는 채널별 신호 또는 소스 신호가 될 수 있다. The mixed signal 814 may be a signal or a source signal for each channel. 본 발명에 따른 리믹스 신호 디코딩 장치(817)는 부가 정보 신호(812) 및 사용자 믹스 파라미터(817) 중 적어도 하나를 이용하여 상기 믹스 신호(814)를 리믹스 신호(816)로 변환할 수 있다. Remix signal decoding apparatus according to the present invention 817 may convert the mixed signal (814) using at least one of the additional information signal 812 and the user mix parameters 817 to remix signals 816.

도 9는 본 발명의 일 실시예에 따른 리믹스 신호 디코딩 장치에 상세 블록도이다. Figure 9 is a detailed block diagram to remix signal decoding apparatus according to an embodiment of the present invention. 도 9를 참조하면, 리믹스 신호 디코딩 장치는 믹스신호디코딩부(901), 파라미터생성부(902), 및 리믹스렌더링부(908)를 포함한다. Referring to Figure 9, the remix signal decoding apparatus includes a mixed signal decoding unit 901, a parameter generation unit 902, and a remix rendering unit 908. 선택적으로 이펙터(Effecter, 911)를 포함할 수 있다. It may optionally include an effector (Effecter, 911) by. 상기 파라미터생성부(902)는 블라인드믹스 파라미터생성부(903), 사용자믹스파라미터생성부(904), 및 리믹스파라미터생성부(905)를 포함할 수 있다. The parameter generating unit 902 may include a blind-mix parameter generating unit 903, a user-mix parameter generating unit 904, and a remix parameter generating unit 905. The 상기 리믹스파라미터생성부(905)는 이퀴믹스파라미터생성부(906)를 포함하며, 선택적으로 업믹스파라미터생성부(907)를 포함할 수 있다. The remix parameter generating unit 905 includes a Iquique mix parameter generating unit 906, may optionally include the up-mix parameter generating unit 907. 또한, 상기 리믹스렌더링부(908)는 이퀴믹스렌더링부(909)를 포함하며, 선택적으로 업믹스렌더링부(910)를 포함할 수 있다. In addition, it said remix rendering unit 908 includes a Iquique mix rendering unit 909, may optionally include up-mix rendering unit (910).

상기 믹스신호디코딩부(901)는 인코딩 단에서 전송된 부호화된 믹스 신호를 디코딩하여 믹스 신호를 생성한다. The mixed signal decoding unit 901 decodes the encoded downmix signal transferred from the encoding stage and generates a mixed signal. 상기 파라미터생성부(902)는 인코딩 단에서 전송된 부가 정보 및 사용자 제어정보(또는, 구성정보)를 수신한다. The parameter generating unit 902 receives the side information and user control information in the encoding stage (or configuration information). 상기 사용자 제어정보는 인코더 단에서 전송되지 않고, 디코더 단에서 생성될 수 있다. The user control information is not transmitted from the encoder, however, it may be generated in the decoder. 상기 사용자믹스파라미터생성부(904)는 사용자 제어정보를 이용하여 사용자 믹스 파라미터를 생성한다. Mix the user parameter generating unit 904 generates a user-mix parameters using the user control information. 인코더 단에서 전송된 부가 정보에는 인코더 믹스 파라믹터(Encoder Mix Parameter)가 포함될 수 있다. The additional information sent from the encoder stage may include an encoder para mikteo mix (Mix Parameter Encoder). 또한, 상기 블라인드믹스파라미터생성부(903)는 상기 믹스 신호를 이용하여 블라인드 믹스 파라미터(Blind-Mix Parameter)를 생성할 수 있다. Moreover, the blind-mix parameter generating unit 903 may generate a blind-mix parameter (Parameter Blind-Mix) using the mixed signal. 상기 인코더 믹스 파라미터와 상기 블라인드 믹스 파라미터는 택일적으로 리믹스파라미터생성부(905)로 입력된다. The encoder mix parameters and the blind mix parameters are input to the alternative remix parameter generating unit 905. The

상기 리믹스파라미터생성부(905)는 부가 정보 및 사용자 믹스 파라미터를 이용하여 리믹스 파라미터를 생성한다. The remix parameter generating unit 905 generates a remix parameter by using the additional information and the user-mix parameters. 상기 리믹스 파라미터는 리믹스 신호의 채널에 적용될 수 있도록 생성될 수 있다. The remix parameter can be generated to be applied to the remix signal channel. 리믹스파라미터생성부(905)에 포함되는 이퀴믹스파라미터생성부(906)는 믹스 신호의 채널 수와 동일한 채널 수를 가지는 리믹스 신호를 생성하는데 이용되는 리믹스 파라미터를 생성하고, 상기 리믹스파라미터생성부(905)에 포함될 수 있는 업믹스파라미터생성부(907)는 믹스 신호의 채널 수보다 더 많은 채널 수를 가지는 리믹스 신호를 생성하는데 이용되는 리믹스 파라미터를 생성한다. Generating Iquique mix parameters included in the remix parameter generating unit 905, unit 906 generates a remix parameter used to generate the remix signal having the same number of channels as the number of channels of the downmix signal, wherein the remix parameter generating unit (905 ) up-mix parameter generating section 907 that may be included in the to produce a remix parameters used to generate the signal having a remix can more channels than the number of channels of the downmix signal. 상기 리믹스 파라미터는 리믹스렌더링부(908)에 입력된다. The remix parameter is inputted to the remix rendering unit 908.

상기 리믹스렌더링부(908)에 포함되는 이퀴믹스렌더링부(909)는 상기 리믹스 파라미터 및 믹스 신호를 이용하여, 상기 믹스 신호의 채널 수와 동일한 채널 수를 가지는 이퀴채널 리믹스 신호(Eq-channel remix signal)를 생성한다. The remix rendering unit 908 Iquique mix rendering unit 909 is the remix parameter and using a mix signal, Iquique channel remixed with the same number of channels as the number of channels of the downmix signal signal (Eq-channel remix contained in the signal ) it generates. 상기 리믹스렌더링부(908)에 포함될 수 있는 업믹스렌더링부(910)는 상기 업믹스파라미터생성부(907)에서 생성된 리믹스 파라미터 및 믹스 신호를 이용하여, 상기 믹스 신호의 채널 수보다 더 많은 채널 수를 가지는 업채널 리믹스 신호(Up-channel remix signal)를 생성한다. The remix rendering unit upmix rendering unit 910 that may be included in the 908 by using the remix parameters and the downmix signal generated by the up-mix parameter generating unit 907, the more channels than the channel of the mixed signal having a number generates the up channel remix signal (up-channel remix signal). 상기 업믹스렌더링부(910)는 상기 이퀴채널렌더링부(909)에서 생성된 리믹스 신호를 이용하여 업채널 리믹스 신호를 생성할 수도 있다. The upmix rendering unit 910 may generate channel-up remix signal using a signal generated by the remix Iquique channel rendering unit (909).

따라서, 상기 디코딩 장치는 인코딩 단에서 전송한 믹스 신호를 그대로 출력하거나, 이퀴채널 리믹스 신호로 출력하거나, 또는 업채널 리믹스 신호로 출력할 수 있다. Thus, the decoding device outputs the mixed signal transmitted from the encoding stage as is, or output to a channel Iquique remix signal, or may output a channel up signal remix. 선택적으로 상기 리믹스 렌더링부는 이펙터(911)로부터 제공되는 정보를 이용하여, 상기 리믹스 신호에 다양한 효과를 줄 수 있다. Optionally, using the information provided by the effector 911, the remix rendering unit can give various effects to the remix signal.

도 10은 본 발명의 일실시예에 따른 인코딩 장치에 대한 블록도이다. Figure 10 is a block diagram of an encoding apparatus according to an embodiment of the present invention. 도 10을 참조하면, 상기 인코딩 장치는 부가정보처리부(1003)를 포함한다. Referring to Figure 10, the encoding apparatus includes the additional information processing unit 1003. 상기 인코딩 장치는 믹스 신호(1001)를 직접 디코딩 장치로 전송할 수도 있으나, 믹스 신호(1001)가 복수인 경우는 믹스 신호(1001)를 하나 또는 두 개의 다운믹스 신호로 다운믹싱하여 전송할 수도 있다. The encoding apparatus, if the downmix signal (1001), but also the transfer to the decoding device directly, mix signal 1001 may send multiple by downmixing the downmix signal (1001) with one or two down-mix signal. 도면에는 도시되지 않았으나, 믹스 신호의 전송 효율을 위해 믹스 신호(1001)는 부호화되어 전송될 수 있다. Although not shown in the figure, the mix signal 1001 for transmission efficiency of the mixed signal is encoded can be transmitted.

부가정보처리부(1003)는 믹스 신호(1001) 및 소스 신호(1002)를 이용하여 부가 정보를 생성한다. Additional information processing unit 1003 generates additional information by using a downmix signal 1001 and the source signal (1002). 소스 신호(1002)는 믹스 신호(1001)에 포함되어 있거나 또는 믹스 신호(1001)에 포함되어 있지 않은 별개의 소스 신호일 수 있다. Signal source 1002 may be an a separate source that is not included in the downmix signal is included in the 1001, or mixed signal 1001. 상기 부가 정보는 레벨 정보, 시간 지연 정보, 상호 상관 정보, 믹스 정보 등을 포함한다. The additional information includes level information, time lag information, the cross-correlation information, the mix information and the like.

여기서, 레벨 정보는 리믹스될 소스 신호의 레벨을 포함할 수 있고, 리믹스될 소스 신호들간의 상대적인 레벨이나, 또는 리믹스될 소스 신호와 믹스 신호간의 상대적인 레벨을 포함할 수 있다. Here, the level information may include the level of the source signal to be remixed, may comprise the relative levels of the relative level between the source signal to be remixed or, or be remixed source signal and the mixed signal. 또한, 믹스 신호의 레벨을 따로 부가 정보에 포함시킬 수 있다. In addition, the level of the mixed signal can be separately included in the additional information. 시간 지연 정보는 리믹스될 소스 신호들간의 시간 지연 정보, 또는 리믹스될 소스 신호와 믹스 신호간의 시간 지연 정보를 포함할 수 있다. Time delay information may include delay time information between the time delay information, or to be remixed source signal and the mixed signal between the source signal to be remixed. 상호 상관 정보는 리믹스될 소스 신호들간의 상호 상관 정보, 또는 리믹스될 소스 신호와 믹스 신호간의 상호 상관 정보, 믹스 신호들 간의 상호 상관 정보를 포함할 수 있다. The cross-correlation information may comprise a cross-correlation information between the cross-correlation information, downmix signal between the cross-correlation information, or the source signal and mixes the signal to be remixed among the source signal to be remixed. 믹스 정보는 특정 소스가 믹스 신호에 믹스되는 정도를 나타내는 정보로서, 예를 들면, 특정 소스가 오른쪽에 위치하는 효과가 나도록 믹스하고 싶은 경우, 왼쪽 채널보다 오른쪽 채널에 더 큰 크기로 포함되도록 믹스를 수행할 수 있다. Mix information is information indicating the degree of a particular source is to be mixed into the mixed signal, for example, when the effect of a particular source is positioned to the right like to nadorok mix, the mix so that it contains a larger size on the right channel than the left channel It can be carried out. 이와 같이 믹스 정보는 각 소스가 각 채널에 믹스되는 정도를 나타낼 수 있다. Thus the mix information may indicate the degree to which each source is mixed in each channel. 믹스 정보는 크기뿐만 아니라, 믹스에 관련된 시간 지연, 상관 관계 등의 정보를 포함하는 것이 가능하다. Mix information, it is possible to include information such as time delay, the correlation relating to the mix as well as the size.

디코딩 장치에서는 전송된 부가 정보와 믹스 신호를 이용하여 리믹스 신호를 생성한다. In the decoding device using the transmitted side information and the downmix signal to generate a remix signal. 이때, 사용자의 요구에 따라 특정 소스 신호를 더 크게 듣는다거나, 또는 더 작게 듣는 것이 가능하다. At this time, it is possible to listen to a specific source signal according to a user's request for a larger, or smaller hearing. 또한, 특정한 효과를 얻기 위해, 특정 소스 신호의 소리 위치를 변경하는 것이 가능하다. Further, in order to obtain particular effects, it is possible to change the position of a specific sound source signal. 이와 같은 처리는 부가 정보와 믹스 신호를 통해 원래의 소스 신호들을 생성한 후, 리믹스 하는 과정을 통해 구성될 수 있 다. Such a process is can be configured through a process that after creating the original source signals over the side information and the downmix signal, a remix. 또는, 원래의 소스 신호들을 생성하지 않고 부가 정보와, 사용자 제어 정보를 이용하여 믹스 신호에 변형을 가함으로써 리믹스 신호를 생성하는 것이 가능하다. Alternatively, it is possible to use the side information and user control information without generating the original source signal to generate a remix signal by applying a strain to the downmix signal.

부가정보처리부(1003)는 생성된 부가 정보를 변형할 수 있다. Additional information processing unit 1003 may modify the generated additional information. 즉, 부가정보처리부(1003)는 부가 정보를 정규화(normalization)하거나 또는 부가 정보 중 일부를 디폴트값으로 정함으로써 부가 정보량을 줄일 수 있다. That is, the additional information processing unit 1003 can reduce the additional amount of information by setting a part of the normalization (normalization), or the additional information the additional information to a default value. 부가정보처리부(1003)는 변형된 부가 정보를 인코딩하여 디코딩 장치로 전송한다. Additional information processing unit 1003 is configured to encode the modified side information is transmitted to a decoding apparatus.

도 11은 도 10의 인코딩 장치에 대한 상세 블록도이다. Figure 11 is a detailed block diagram of the encoding apparatus of Fig. 도 11을 참조하면, 상기 인코딩 장치는 필터뱅크(1103) 및 부가정보처리부(1003)를 포함한다. Referring to Figure 11, the encoding apparatus includes a filter bank 1103 and the additional information processing unit 1003. 부가정보처리부(1003)는 부가정보생성부(1106), 부가정보변형부(1108) 및 부가정보인코딩부(1110)를 포함한다. The additional information processing unit 1003 comprises a side information generation unit 1106, the additional information modification section 1108 and the additional information encoding unit 1110. 본 발명에서 믹스 신호는 모노, 스테레오 및 멀티채널 신호를 포함하며, 편의상 도 11에서는 믹스 신호(1101)를 기준으로 설명한다. Mix signal in the present invention include the mono, stereo and multi-channel signal will be described based on the mix signal 1101. For simplicity, FIG. 앞에서의 [수학식 1]과 같이, 믹스 신호(1101) As shown in Equation 1 of the above, the mix signal 1101

Figure 112007046536094-pat00105
And
Figure 112007046536094-pat00106
는 믹스 신호(1101)에 포함되는 소스 신호(1102)의 합으로 표현될 수 있다. It may be expressed as the sum of the source signals (1102) included in the downmix signal (1101).

Figure 112007046536094-pat00107

여기서, I는 믹스 신호 내에 포함되는 소스 신호들의 개수이고, Here, I is the number of source signal included in the mixed signal,

Figure 112007046536094-pat00108
은 소 스 신호들을 나타낸다. It represents the source signal.
Figure 112007046536094-pat00109
And
Figure 112007046536094-pat00110
는 각각의 소스 신호에 대한 진폭 패닝(amplitude panning) 및 게인(gain)을 결정하는 게인 팩터이다. It is a gain factor that determines the amplitude panning (amplitude panning) and Gain (gain) for each source signal. 소스 신호(1102)는 서로 다른 게인 팩터들을 가지면서 믹스 신호(1101)에 믹스된다. A source signal 1102 is different from each other while the other gain factor mix the downmix signal (1101). 필터뱅크(1103)는 믹스 신호(1101) 및 소스 신호(1102)를 시간-주파수 도메인의 서브밴드별 신호(1104 및 1105)로 분해한다. A filter bank 1103 a mix signal 1101 and signal source 1102, a time-signal decomposed into the frequency domain by sub-band (1104 and 1105). 부가정보생성부(1106)는 서브밴드별 믹스 신호(1104) 및 서브밴드별 소스 신호(1105)를 이용하여, 게인 팩터 Additional information generating section 1106 using a sub-band-specific mix signal 1104 and sub-band-specific signal source 1105, a gain factor
Figure 112007046536094-pat00111
, ,
Figure 112007046536094-pat00112
및 숏-타임 서브밴드 파워 And the short-time subband power
Figure 112007046536094-pat00113
(1107) 등과 같은 서브밴드별 부가 정보를 생성한다. 1107 generates a sub-band-specific additional information such as.

부가정보변형부(1108)는 상기 서브밴드별 부가 정보(1107)를 변형한다. The additional information modification section 1108 to modify the side information (1107) by the sub-band. 즉, 부가정보변형부(1108)는 서브밴드별 부가 정보(1107)를 새로운 게인 팩터 및 새로운 숏-타임 서브밴드 파워 등과 같은 새로운 부가 정보(1109)로 변형한다. That is, the additional information modification unit 1108 has the additional information 1107 per subband new gain factor, and a new short-transform to the new additional information 1109 such as the time subband power. 부가정보변형부(1108)는 새로운 부가 정보(1109)를 이용하여 표현되는 믹스 신호가 원래의 믹스 신호(1101)와 동일한 값을 갖도록 부가 정보를 변형한다. The additional information modification section 1108 to modify the additional information is a mix signal to be represented using the new additional information 1109, have the same value as the original mix signal 1101. 즉, 게인 팩터와 소스 신호의 곱으로 표현되는 믹스 신호(1101) That is, the mix is ​​represented by the product of the gain factor and the source signal signal 1101

Figure 112007046536094-pat00114
, ,
Figure 112007046536094-pat00115
를 값은 동일하나 새로운 게인 팩터와 새로운 소스 신 호를 이용하여 To the value of using the same as a new gain factor and the new signal source
Figure 112007046536094-pat00116
, ,
Figure 112007046536094-pat00117
와 같이 표현할 수 있다. And it can be expressed as.

이때, 새로운 게인 팩터 At this time, the new gain factor

Figure 112007046536094-pat00118
, ,
Figure 112007046536094-pat00119
중 하나를 디폴트값으로 설정하면, 인코딩 장치는 디폴트값으로 설정된 게인 팩터를 전송할 필요가 없게 된다. Setting either to a default value, the encoding device there is no need to transmit the gain factor is set to a default value. 인코딩 장치는 부가 정보를 양자화 및 부호화에 더 적합한 다른 값으로 전환할 수도 있다. Encoding apparatus may be switched to another more appropriate value in the quantization and coding the additional information. 부가정보인코딩부(1110)는 변형된 부가 정보(1109)를 인코딩하여 디코딩 장치로 전송하거나, 또는 변형된 부가 정보(1109)를 양자화 및 부호화에 적합한 값으로 전환한 후, 이를 인코딩하여 디코딩 장치로 전송한다. The additional information encoding unit 1110 to switch the encoding a modified side information (1109) transmitted to the decoding apparatus, or modified side information 1109 to a value appropriate for quantization and encoding then encodes them to a decoding device send.

도 12는 본 발명의 일실시예에 따른 인코딩 장치의 블록도이다. Figure 12 is a block diagram of an encoding apparatus according to an embodiment of the present invention. 도 12를 참조하면, 인코딩 장치는 다운믹싱부(1202) 및 부가정보처리부(1003)를 포함하고, 상기 부가정보처리부(1003)는 부가정보생성부(1203), 부가정보변형부(1204) 및 부가정보인코딩부(1205)를 포함한다. 12, the encoding apparatus includes a downmixing unit 1202 and the additional information processing unit including the 1003, and the additional information processing unit 1003 is an additional information generation unit 1203, the additional information modification unit 1204 and and a side information encoding unit 1205. the 도 11에 도시된 인코딩 장치와 도 12에 도시된 인코딩 장치의 차이점은 부가 정보를 생성하기 위해 이용되는 정보에 있다. The difference of the encoding apparatus shown in the encoding apparatus shown in FIG. 12 is shown in Figure 11 is the information used to generate the additional information. 도 11에 도시된 인코딩 장치는 소스 신호 및 믹스 신호를 이용하여 부가 정보를 생성하나, 도 12에 도시된 인코딩 장치는 소스 신호만을 이용하여 부가 정보를 생성한다. The encoding device is the encoding device shown in Figure 12 one generates additional information using the source signal and the mixed signal, shown in Figure 11 generates the additional information by using only the source signals.

상기 다운믹싱부(1202)는 소스 신호(1201)를 다운믹싱하여 디코딩 장치로 전 송한다. The downmixing unit 1202 and sent to the decoding device by mixing down the signal source (1201). 부가정보처리부(1003)는 부가 정보를 생성하고 이를 인코딩하여 디코딩 장치로 전송한다. Additional information processing unit 1003 generates additional information and encodes and transmits to a decoding apparatus. 상기 부가정보생성부(1203)는 소스 신호(1201) 전부 또는 일부를 이용하여 부가 정보를 생성할 수 있다. The additional information generator 1203 may generate side information using all or some of the source signal 1201. 상기 부가정보변형부(1204)는 부가정보생성부(1203)가 생성한 부가 정보를 전송 효율 등을 위해 새로운 부가 정보로 변형한다. It said additional information modification unit 1204 will be modified to the new additional information to the additional information such as the additional information generating unit to a transmission efficiency 1203 is generated. 부가정보변형부(1204)는 변형된 부가 정보를 양자화 및 인코딩 등을 위해 적합한 값으로 전환할 수 있다. The additional information modification unit 1204 may switch to a suitable value, for example, for quantization and encoding the modified side information. 상기 부가정보인코딩부(1205)는 변형된 부가 정보를 인코딩하여 디코딩 장치로 전송하거나, 또는 변형된 부가 정보를 양자화 등을 위해 전환한 후, 전환된 부가 정보를 인코딩하여 디코딩 장치로 전송한다. The side information encoding unit 1205 is a switch, for example, for quantization by the encoding a modified side information transmission, or modified with additional information decoding apparatus then encodes the converted additional information, and transmits it to the decoding apparatus.

도 13은 본 발명의 일실시예에 따른 부가정보처리부를 나타내는 블록도이다. 13 is a block diagram illustrating an additional information processing unit according to an embodiment of the present invention. 도 13을 참조하면, 부가정보처리부(1003)는 부가정보생성부(1301), 부가정보변형부(1302), 부가정보전환부(1303), 부가정보양자화부(1304) 및 부가정보인코딩부(1305)를 포함한다. Part Referring to Figure 13, the additional information processing unit 1003 is an additional information generation unit 1301, the additional information modification unit 1302, the additional information conversion unit 1303, the additional information quantization unit 1304 and the additional information encoding ( 1305) a. 부가정보처리부(1003)는 부가 정보를 생성하고, 이를 처리하여 디코딩 장치로 전송한다. Additional information processing unit 1003 generates additional information, processes it and transmits it to the decoding apparatus. 부가정보처리부(1003)에 포함되어 있는 부가정보생성부(1301)는 믹스 신호 및 소스 신호 중 적어도 하나를 이용하여 부가 정보를 생성한다. The additional information is included in the processing section 1003, the additional information generating section 1301 that generates the side information using at least one of the mix signal and the source signal. 상기 부가 정보는 게인 팩터 The additional information is the gain factor

Figure 112007046536094-pat00120
, ,
Figure 112007046536094-pat00121
및 숏-타임 서브밴드 파워 And the short-time subband power
Figure 112007046536094-pat00122
를 포함한다. It includes. 부가정보변형부(1302)는 부가 정보를 변형하여 새로운 게인 팩터 The additional information modification unit 1302 is a new gain factor by modifying the additional information
Figure 112007046536094-pat00123
, ,
Figure 112007046536094-pat00124
및 새로운 숏-타임 서브밴드 파워 And a new short-time subband power
Figure 112007046536094-pat00125
등과 같은 새로운 부가 정보를 생성한다. It generates new additional information such as.

부가정보변형부(1108)는 부가 정보를 변형한다. The additional information modification section 1108 to modify the side information. 상기 부가 정보에 포함되는 레벨 정보는 다음과 같이 변형될 수 있다. Level of information included in the additional information may be modified as follows. 각 소스 신호의 레벨을 전송하기 위해 To transfer the level of each source signal

Figure 112007046536094-pat00126
, 또는 , or
Figure 112007046536094-pat00127
을 전송한다. To be transmitted. 여기서, here,
Figure 112007046536094-pat00128
은 i번째 소스 신호를 의미한다. Refers to the i th source signal. 상기 소스 신호의 도메인은 시간 영역일 수 있고, 또는 서브밴드 도메인일 수 있다. Domain of the source signal may be may be in the time domain, or a subband domain. 이와 같은 경우, 상기 레벨 값의 변화가 커서 양자화하는데 어려움을 격을 수 있다. In this case, it is difficult to quantize the changes in the level value large to be the case. 이를 해결하기 위해, To solve this problem,
Figure 112007046536094-pat00129
와 같이 특정 소스 신호에 대한 상대적인 값을 전송하거나, 또는 Transmitting a relative value for a particular signal source, such as, or
Figure 112007046536094-pat00130
과 같이 믹스 신호의 레벨에 대한 상대적인 값을 전송할 수 있다. And it may transmit the relative value for the level of the mixed signal as shown. 여기서, here,
Figure 112007046536094-pat00131
은 믹스 신호를 의미한다. It refers to a mixed signal.

또한, 믹스 신호를 구성하는데 발생할 수 있는 신호들간의 간섭 현상의 영향을 상쇄하기 위해, 아래의 [수학식 20]과 같은 값을 전송할 수 있다. In addition, the, to transfer the same value as [Equation 20] below, in order to counteract the effects of interference between the signals that can occur in constructing a downmix signal.

Figure 112007046536094-pat00132

여기서, N은 믹스 신호를 구성하는 소스 신호의 개수이다. Here, N is the number of source signals constituting the mix signal. 만약 믹스 신호가 If the mix signal a

Figure 112007046536094-pat00133
의 단순 합이 아닌 소스마다 특정 가중치(예를 들면, 게인 팩터)를 부여하여 구성된다면, 상기 [수학식 20]의 분모를 구성하는 소스 신호 레벨 합에도 그 가 중치를 적용하여 구성할 수 있다. Each of the non-simple sum source specific weight, if configured by applying (e. G., Gain factor), and the even sum source signal levels that make up the denominator of equation 20] that can be configured to apply the weights.

예를 들면, 두 개의 게인 팩터 중 하나를 이용하여 두 개의 게인 팩터 각각을 정규화(normalization)하여 새로운 게인 팩터를 생성한다. For example, two normalized gain factor (normalization) of the two gain factors, each using one of create a new gain factor. 이때, 게인 팩터 중 하나는 특정한 상수값(즉, 1)으로 변형된다. At this time, one of the gain factor is modified in a certain constant value (i.e., 1). 또한, 부가정보변형부(1302)는 게인 팩터를 변형함과 동시에 소스 신호를 변형할 수 있다. In addition, the additional information modification unit 1302 is at the same time as modifying the gain factor to modify the source signal. 예컨대, 부가정보변형부(1108)는 게인 팩터 중 For example, the additional information modification unit 1108 of the gain factor

Figure 112007046536094-pat00134
를 이용하여 믹스 신호의 게인 팩터를 각각 정규화하여 Using by each of the gain normalization factor of the mixed signal
Figure 112007046536094-pat00135
The
Figure 112007046536094-pat00136
으로, to,
Figure 112007046536094-pat00137
The
Figure 112007046536094-pat00138
으로 변형하고, Deformed, and
Figure 112007046536094-pat00139
를 새로운 New
Figure 112007046536094-pat00140
로 변형하여 아래의 [수학식 21]과 같이 변형할 수 있다. The strain can be modified to as shown in [Equation 21] below.

Figure 112007046536094-pat00141

Figure 112007046536094-pat00142

상기 값은 원래의 믹스 신호와 동일한 값이다. The value is the same value as the original mix. 따라서 인코딩 장치는 게인 팩터 Therefore, the encoding apparatus is the gain factor

Figure 112007046536094-pat00143
, ,
Figure 112007046536094-pat00144
및 숏-타임 서브밴드 파워 And the short-time subband power
Figure 112007046536094-pat00145
등과 같은 부가 정보를 새로 운 게인 팩터 Additional information such as new gain factor
Figure 112007046536094-pat00146
, ,
Figure 112007046536094-pat00147
및 새로운 숏-타임 서브밴드 파워 And a new short-time subband power
Figure 112007046536094-pat00148
등과 같은 새로운 부가 정보로 변형해도 디코딩 장치가 리믹스 신호를 생성하는데 아무런 차이가 없다. It is modified to add new information, such as there is no difference in decoding device generates a remix signal. 새로운 게인 팩터 중, Of the new gain factor,
Figure 112007046536094-pat00149
는 디폴트값으로 설정되므로 인코딩 장치는 It is therefore set to a default value encoding unit
Figure 112007046536094-pat00150
를 별도로 전송할 필요가 없다. There is no need to transfer separately. 따라서 부가 정보량이 감소한다. Thus reducing the amount of information added.

부가정보전환부(1303)는 부가정보변형부(1302)가 변형한 부가 정보를 전송하기 편한 형태로 전환한다. Additional information switching section 1303 are switched to form easy to transmit the additional information by the additional information modification unit 1302 strain. 인코딩 장치는 부가 정보 Encoding apparatus side information

Figure 112007046536094-pat00151
, ,
Figure 112007046536094-pat00152
And
Figure 112007046536094-pat00153
를 그대로 인코딩하여 디코딩 장치로 전송할 수도 있으나, 양자화 및 인코딩에 더 적합한 값으로 전환하여 전송할 수도 있다. By the AS, but the encoding may be transmitted to a decoding apparatus, and may send a switch to a more appropriate value in the quantization and encoding. 부가정보전환부(1303)는 앞의 [수학식 3] 및 [수학식 4]를 이용하여 부가 정보 The additional information conversion unit 1303 is additional information, using the preceding equation 3] and [Equation 4]
Figure 112007046536094-pat00154
, ,
Figure 112007046536094-pat00155
, ,
Figure 112007046536094-pat00156
The
Figure 112007046536094-pat00157
, ,
Figure 112007046536094-pat00158
, ,
Figure 112007046536094-pat00159
로 전환할 수 있다. You can switch to.

이때, At this time,

Figure 112007046536094-pat00160
은 특정 상수값으로 디폴트 되어 있으므로 인코딩 장치는 It is because it is the default in a certain constant value, the encoding unit
Figure 112007046536094-pat00161
또는 or
Figure 112007046536094-pat00162
중 하나와 One of the
Figure 112007046536094-pat00163
만을 전송하면 된다. If only it is transmitted. 부가정보양자화부(1304)는 Additional information quantization unit 1304
Figure 112007046536094-pat00164
또는 or
Figure 112007046536094-pat00165
중 하나와 One of the
Figure 112007046536094-pat00166
를 양자화한다. A quantizes. 부가정보인코딩부(1305)는 양자화된 부가 정보를 인코딩하여 디코딩 장치로 전송한다. The additional information encoding unit 1305 encodes the quantized side information is transmitted to a decoding apparatus.

상기 부가 정보는 전술한 게인 팩터, 숏-타임 서브밴드 파워, 시간 지연 정보, 상호 상관 정보, 믹스 정보 외에도 다양한 정보를 포함할 수 있다. The additional information is the above-described gain factor, short-time subband power addition, time delay information, the cross-correlation information, the mix information can include a variety of information. 예를 들면, 부가 정보가 믹스 신호와 함께 생성되지 않은 경우, 타임 싱크 등의 불일치로 재생에 문제가 있을 수 있다. For example, the additional information may be a problem with the playback of a mismatch if it is not produced with a mix signal, such as time sync. 따라서, 상기 부가 정보에 타이밍 정보를 포함할 수 있다. Therefore, it is possible to include the timing information in the additional information. 또한, 상기 타이밍 정보는 믹스 신호에 포함되거나, 또는 부가 정보 및 믹스 신호에 모두 포함될 수 있다. In addition, the timing information may be included or included in all of the mix signal or the additional information, and mix. 따라서, 상기 타이밍 정보를 이용하여 부가 정보가 믹스 신호와 함께 재생될 때에 싱크 문제를 해결할 수 있다. Accordingly, the timing information using the additional information that may solve the synchronization problem when playing with the mix signal. 여기서 타이밍 정보는 실제 시간에 대한 정보일 수 있고, 상대적인 시간에 대한 정보일 수 있으며, 또는 믹스 신호의 특성에 따라 판단할 수 있는 정보를 포함한다. Here, the timing information includes information that can be determined according to the characteristics of information may be, or a mix signal for a relative time may be information about the actual time.

같은 소스를 가지고 믹스한 믹스 신호라 하여도, 믹스 방법이나 부호화 방법에 의해 신호 간에 차이가 발생할 수 있다 .예를 들면, CD에 수록된 음악과 MP3로 변환된 음악 간에는 타임 싱크 등에서 차이가 발생할 수 있다. Be referred to a mixed signal mixed with the same source, it is possible to cause the difference between the signals by the mix method and the encoding method, for example, a difference may occur between the converted music and MP3 music recorded on the CD, etc. time sync . 이러한 경우, MP3와 함께 다중화된 부가 정보는 CD에 이용될 경우 타임 싱크 등의 문제로 재생의 정확도에 영향을 줄 수 있다. In this case, the additional information multiplexed with MP3 may affect the accuracy of reproduction problems such as time sync when using the CD. 이러한 경우, 다중화된 신호와 부가 정보를 새로 이용할 신호와 비교하여, 부가 정보를 새로 이용할 신호에 맞도록 변형하는 것도 가능하다. In this case, compared to the use a new multiplexed signal and the additional information signal, it is also possible to modify to fit the new access signal to the additional information.

도 14는 본 발명의 일실시예에 따른 부가 정보를 새로 적용할 믹스 신호에 적합하도록 변환하는 트랜스코더이다. 14 is a transcoder that converts to suit the mix signal to a new application of the additional information according to an embodiment of the present invention. 도 14를 참조하면, 입력 1(1401)은 다중화된 신호이고, 입력 2(1402)는 부가 정보를 새로 적용할 믹스 신호이다. 14, the first input 1401 is multiplexed signal, second input 1402 is a mixed signal to a new application of the additional information. 경우에 따라서 입력 1(1401)은 믹스 신호와 부가 정보가 함께 입력될 수 있다. In some cases, input 1 1401 has the mix signal and additional information can be entered together. 트랜스코더(1403) 는 입력 1(1401)에 포함된 믹스 신호와 입력 2(1402)의 믹스 신호를 비교하여, 이를 토대로 부가 정보를 변환하는 역할을 수행한다. Transcoder 1403 may compare the mix signal of the mixed signal and a second input 1402 includes a first input 1401, it performs the role of converting the additional information based on this. 출력(1404)은 변환된 부가 정보가 될 수 있고, 또는 입력 2의 신호와 부가 정보가 다중화되어 출력되는 것이 가능하다. Output 1404 is the multiplexed signal and the side information can be converted additional information, or the type 2 can be outputted.

또한, 인코딩 장치에서 부가 정보를 생성할 때, 어플리케이션(application)에 따라 부가 정보의 양을 조절하는 것이 가능하다. In addition, when generating the additional information in the encoding apparatus, it is possible to control the amount of additional information, depending on the application (application). 예를 들어, 특정 오브젝트를 뮤팅하는 것이 가능한 어플리케이션이 특정 오브젝트를 패닝만 하는 어플리케이션보다 더 많은 정보가 필요하다. For example, it is possible that the application for muting the specific object you need more information than just panning the application-specific objects. 따라서, 부가 정보를 생성하는 인코딩 장치에서 음질을 보장할 수 있는 최대 제어에 대한 가이드 정보를 디코딩 장치에 제공할 수 있다. Therefore, it is possible to provide the guide information on the maximum control to ensure the quality in the encoding apparatus for generating a side information to the decoding device. 상기 가이드 정보는 모든 소스 신호에 동일하게 적용되거나, 또는 각 소스 신호마다 독립적으로 적용될 수 있다. The guide information may be common to all the source signal, or may be applied to each source signal independently.

또한, 상기 부가 정보에는 모노 또는 다채널의 특정 채널을 지칭하는 식별자를 포함할 수 있다. In addition, the additional information may include a mono or multi-identifiers to refer to a specific channel of the channel. 멀티 소스가 입력되어, 믹스 신호 및 부가 정보가 생성되는 경우를 가정하자. Let us assume a case where multi-source is input, the mix signal and the additional information is generated. 상기 멀티 소스는 소스에 따라 모노 일 수 있고, 2개의 채널을 갖는 스테레오일 수도 있고, 또는 2개 채널을 초과하는 멀티 채널일 수도 있다. The multi-source may also be a multi-channel according to the source may be a mono, stereo, and may be with two-channel, or more than two channels. 소스가 다채널을 갖는 경우, 각 채널을 독립된 소스로 가정하고 처리하는 것이 가능하다. If the source is the having a channel, it is possible to assume and process each channel as a separate source.

예를 들면, 스테레오 채널을 가지는 소스의 경우, K번째 입력 소스가 모노이고, K+1번째 입력 소스가 스테레오인 경우를 생각할 수 있다. For example, in the case of a source having a stereo channel, and the K-th input source is mono, it is conceivable to K + 1 second input when the source is a stereo. 이 경우에, K번째 입력 소스가 n번째 처리 소스라하면, K+1번째 입력 스테레오 소스의 첫 번째 채널은 n+1번째 처리 소스로, K+1번째 입력 스테레오 소스의 두 번째 채널은 n+2번째 처리 소스로 인식하여, 하나의 입력 소스를 채널별로 각각 하나의 처리 소스, 즉 두 개의 처리 소스로 인식하여 부호화하는 것이 가능하다. In this case, if the first input source K is soseura n-th process, K + 1 second channel of the first the first channel of input stereo source in the (n + 1) th process Source, K + 1-th input stereo material is n + 2 recognized by the second processing source, it is possible to code the respective one of the processing source to one input source for each channel, that is recognized by two-source process.

이러한 경우, 총 N개의 처리 소스가 존재하는 경우, 각 처리 소스의 타입을 비트열에 포함할 필요가 있다. In this case, it is necessary to include the case that N-number of processing source exists, the type of each of the processing source bit stream. 예를 들면, n번째 처리 소스는 모노 신호이며, n+1번째 처리 소스는 스테레오 소스의 첫 번째 채널, n+2번째 처리 소스는 n+1번째 처리 소스와 함께 구성되는 스테레오 소스의 두 번째 채널과 같은 정보를 전송할 필요가 있다. For example, n-th processing source is a mono signal, the (n + 1) th processing source is the second channel of the first channel, n + 2-th processing source of the stereo source, a stereo source is configured with the n + 1-th process Source it is necessary to transmit the information. 여기서, 스테레오 소스의 처리 소스가 항상 인접하여 전송되는 것을 가정하면, 처리 소스 타입은 모노, 첫 번째 채널, 두 번째 채널과 같이 3종류로 제한됨을 알 수 있다. Here, assume that the processing source of the stereo source is transmitted always contiguous, the process source type can be seen is limited to three kinds as mono-, first channel, second channel.

도 15는 본 발명의 일실시예에 따른 디코딩 장치의 블록도이다. Figure 15 is a block diagram of a decoding apparatus according to an embodiment of the present invention. 도 15를 참조하면, 상기 디코딩 장치는 역다중화부(1502), 믹스신호디코딩부(1505), 부가정보디코딩부(1504), 부가정보복원부(1505), 및 리믹스렌더링부(1506)를 포함한다. 15, the decoding apparatus includes a demultiplexing unit 1502, a downmix signal decoding unit 1505, the additional information decoding section 1504, additional information restoration unit 1505, and a remix rendering unit 1506 do.

다중화된 믹스 신호 및 제1 부가 정보(1501)가 역다중화부(1502)로 입력되면, 역다중화부(1502)는 부호화된 믹스 신호와 제1 부가 정보를 분리하여 부호화된 믹스 신호는 믹스신호디코딩부(1503)로, 부호화된 제1 부가 정보는 부가정보디코딩부(1504)로 전송한다. When the multiplexed-mix signal and the first sub information 1501 is input to the demultiplexing unit 1502, a demultiplexer 1502 is a separate coded mix signal and the first additional information coded mix signal is a mixed signal decoding in unit 1503, the encoded first additional information, and it transmits the additional information decoding section 1504. 상기 제1 부가 정보는 상기 믹스 신호를 리믹스하는데 이용되는 제2 부가 정보를 변형한 정보를 말한다. The first additional information refers to information about a variation of the second additional information to be used to remix the mix signal.

믹스신호디코딩부(1503)는 부호화된 믹스 신호를 복호화하여 믹스 신호를 생성하고, 부가정보디코딩부(1504)는 부호화된 제1 부가 정보를 복호화하여 제1 부가 정보를 생성한다. Mixed signal decoding unit 1503 generates the mixed signal by decoding the encoded downmix signal and side information decoding unit 1504 generates first additional information by decoding the encoded first additional information. 그 다음에, 부가정보복원부(1505)는 생성된 제1 부가 정보를 원래의 제2 부가 정보로 복원한다. Then, the side information and restoring section 1505 restores the generated first additional information to the original second additional information. 상기 부가정보복원부(1505)는 선택적으로 존재한다. The sub-information restoration unit 1505 is optionally present in an. 즉, 본 발명에 따른 디코딩 장치는 제1 부가 정보를 이용하여 리믹스 신호를 생성하도록 구성될 수 있고, 또한 제2 부가 정보를 이용하여 리믹스 신호를 생성하도록 구성될 수 있다. That is, the decoding apparatus according to the present invention may be configured to create a remix signal using the first additional information, and may be configured to create a remix signal using the second additional information. 상기 제1 부가 정보 또는 제2 부가 정보와 복호화된 믹스 신호는 리믹스렌더링부(1506)로 전송된다. The mixed signal decoding and the first additional information and second additional information is sent to the remix rendering unit 1506. 리믹스렌더링부(1506)는 제1 부가 정보 또는 제2 부가정보, 믹스 신호 및 사용자 믹스 파라미터를 이용하여 리믹스 신호(1507)를 생성할 수 있다. Remix rendering unit 1506 may generate a remix signal 1507 using the first additional information and second additional information, the mix signal and the user-mix parameters. 상기 사용자 믹스 파라미터는 사용자로부터 획득된 제어 정보를 이용하여 생성될 수 있다. The user mix parameters can be generated using the control information obtained from the user.

도 16은 본 발명의 일실시예에 따른 부가 정보 처리 방법을 나타낸 순서도이다. 16 is a flowchart illustrating an additional information processing method according to an embodiment of the present invention. 도 16을 참조하면, 부가정보생성부(1301)는 믹스 신호 또는 소스 신호를 이용하여 부가 정보를 생성한다(S1601). 16, the additional information generation unit 1301 generates the side information using the mix signal or source signals (S1601). 부가정보변형부(1302)는 생성된 부가 정보를 변형한다(S1602). Additional information modification unit 1302 transforms the generated additional information (S1602). 부가정보전환부(1303)는 변형된 부가 정보를 다른 형태로 전환한다(S1603). The additional information conversion unit 1303 converts the modified additional information in a different form (S1603). 부가정보양자화부(1304)는 전환된 부가 정보를 양자화한다(S1604). Additional information and quantization unit 1304 quantizes the converted additional information (S1604). 부가정보인코딩부(1305)는 양자화된 부가 정보를 인코딩하여 디코딩 장치로 전송한다(S1505). The additional information encoding unit 1305 and transmits the encoded quantized sub information to a decoding device (S1505).

예를 들면, 본 발명의 일실시예에 따른 부가 정보 변형 방법을 아래와 같다. For example, it is: an additional information modification method according to one embodiment of the present invention. 부가정보생성부(1301)는 믹스 신호 또는 소스 신호를 이용하여 부가 정보 The additional information generator 1301 is additional information, using the mix signal or source signals

Figure 112007046536094-pat00167
, ,
Figure 112007046536094-pat00168
, ,
Figure 112007046536094-pat00169
를 생성한다. The produce. 부가정보변형부(1302)는 생성된 부가 정보를 변형한 다. The additional information modification unit 1302 is a variation of the generated sub information. 즉, 부가정보변형부(1302)는 게인 팩터 중 하나의 값, 예컨대, That is, the additional information modification unit 1302 is a value of the gain factor, for example,
Figure 112007046536094-pat00170
를 이용하여 게인 팩터 각각을 정규화하여 By using the normalized gain factor, respectively
Figure 112007046536094-pat00171
, ,
Figure 112007046536094-pat00172
을 생성한다. The produce.

이때, 게인 팩터 At this time, the gain factor

Figure 112007046536094-pat00173
를 정규화하면 새로운 게인 팩터 When a qualified new gain factor
Figure 112007046536094-pat00174
은 1이 된다. It is 1. 부가정보변형부(1302)는 정규화에 사용된 게인 팩터를 이용하여 소스 신호 The additional information modification unit 1302 is a source signal using a gain factor used for normalizing
Figure 112007046536094-pat00175
The
Figure 112007046536094-pat00176
으로 변형하고, 변형된 소스 신호 Deformed, and the modified source signal
Figure 112007046536094-pat00177
를 이용하여 서브밴드별 파워 Using a sub-band-specific power
Figure 112007046536094-pat00178
The
Figure 112007046536094-pat00179
으로 변형한다. To be transformed. 변형된 부가 정보 The modified side information
Figure 112007046536094-pat00180
, ,
Figure 112007046536094-pat00181
는 양자화 및 인코딩하기에 더 적합한 형태인 It is a further form suitable for quantization and encoding
Figure 112007046536094-pat00182
또는 or
Figure 112007046536094-pat00183
, 그리고 , And
Figure 112007046536094-pat00184
로 전환된다. It is switched to. 이 때, 정규화에 의해 By this time, the normalization
Figure 112007046536094-pat00185
은 1이 되므로, 게인 팩터 중 1 of the gain factor, so the
Figure 112007046536094-pat00186
만 전환하면 된다. Only to be switched. 따라서, therefore,
Figure 112007046536094-pat00187
And
Figure 112007046536094-pat00188
중 하나만 이용된다. Only one is used. 전환된 부가 정보 The additional information conversion
Figure 112007046536094-pat00189
또는 or
Figure 112007046536094-pat00190
, 그리고 , And
Figure 112007046536094-pat00191
는 양자화되고 인코딩되어 디코딩 장치로 전송된다. It is quantized, encoded and transmitted to a decoding apparatus.

도 17은 본 발명의 일실시예에 따른 신호 처리 방법을 나타낸 순서도이다. 17 is a flowchart showing a signal processing method according to an embodiment of the present invention. 도 17을 참조하면, 디코딩 장치는 변형된 부가 정보를 수신한다(S1701). And Referring to Figure 17, the decoding apparatus receiving the modified side information (S1701). 변형된 부가 정보는 변형된 게인 팩터 및 변형된 서브밴드 파워를 포함한다. The modified side information includes a modified gain factor and a modified subband power. 전술한 바와 같 이, 변형된 게인 팩터 중 하나의 값은 특정 값으로 디폴트 되어 있으므로, 디코딩 장치는 변형된 부가 정보 중 디폴트 되지 않은 게인 팩터 및 서브밴드 파워만을 수신하면 된다. Are as stated above, the value of one of the modified gain factor, because it is the default to a particular value, the decoding apparatus is only when receiving the gain factor and the sub-band power that is not the default of the modified side information.

인코딩 장치가 부가 정보를 변형하면 그에 따라 소스 신호도 변형되므로 새로운 소스 신호가 생성되었다고 볼 수 있다. When the encoding device is deformed the additional information, so also the source signals modified accordingly can be seen that a new source signal generation. 따라서 인코딩 장치는 새로 생성된 소스 신호 및 새로 생성된 소스 신호에 대한 부가 정보를 전송하는 것이 된다. Therefore, the encoding apparatus is to transmit the additional information to the newly generated source signals, and generate a new signal source. 인코딩 장치가 부가 정보를 변형하는 경우 게인 팩터와 소스 신호가 모두 변형되므로, 게인 팩터와 소스 신호의 곱으로 구성되는 믹스 신호는 원 신호와 동일하다. Since the encoding device is the all modified gain factor and the source signal if the modified side information, the mix signal formed by the product of the gain factor and the source signal is equal to the original signal. 디코딩 장치는 변형된 부가 정보를 수신하여 이를 디코딩한다. The decoding apparatus decodes them to receive a modified side information. 그 다음에 변형된 부가 정보를 이용하여 원래의 부가 정보를 생성한다. Then, using the additional information to modification to produce the original additional information. 디코딩 장치에는 사용자가 제공하는 제어 정보가 입력될 수 있다. The decoding apparatus may be an input control information provided by the user.

그 다음에 변형된 부가 정보는 원래의 부가 정보로 복원된다(S1702). The additional information modification then is restored to the original additional information (S1702). 경우에 따라서는 원래의 부가 정보로 복원하지 않고, 변형된 부가 정보를 직접 이용할 수 있다. In some cases, without restoring the original additional information it can be used to direct the modified side information. 디코딩 장치는 믹스 신호, 제어 정보, 원래의 부가 정보를 이용하여 리믹스 신호를 생성할 수 있다(S1703). The decoding apparatus may generate a remix signal using the downmix signal, the control information, the original additional information (S1703). 또한, 본 발명에 따른 디코딩 장치는 원래의 부가 정보가 아닌, 변형된 부가 정보를 이용하여 리믹스 신호를 생성하는 것도 가능하다. Further, the decoding apparatus according to the present invention, not the original additional information by using the modified side information it is also possible to create a remix signal. 디코딩 장치가 생성하는 리믹스 신호는 인코딩 장치의 부가 정보 변형 여부와 무관하다. Remix signal decoding device is generated is independent of whether or not the additional information modification of the encoding device.

지금까지 본 발명에 대하여 몇몇 실시예들을 들어 구체적으로 설명하였으나, 상기 실시예들은 본 발명을 이해하기 위한 설명을 위해 제시된 것이며, 본 발명의 범위가 상기 실시예에 제한되는 것은 아니다. Although so far contain some of the embodiments with respect to the invention described in detail, the embodiments will presented for purposes of illustration for understanding the invention, but the scope of the present invention is not limited to the above embodiment. 당업자라면 본 발명의 기술적 사상의 범위를 벗어나지 않고도 다양한 변형이 가능함을 이해할 수 있을 것이며, 본 발명의 범위는 첨부된 특허청구범위에 의해서 해석되어야 할 것이다. Those skilled in the art will be appreciated that various modifications are possible without departing from the scope of the technical concept of the present invention, the scope of the invention should be construed by the appended claims.

본 발명에 의하면 변형된 부가 정보를 이용하여 믹스 신호를 소스 신호 별로 조절할 수 있는 신호 처리 방법 및 장치를 제공할 수 있다. According to the present invention may provide a signal processing method and apparatus capable of adjusting the mix signal using the modified side information by the source signal.

또한, 본 발명에 의하면 부가 정보를 변형하여 낮은 정보량으로 부가 정보를 생성하고 이를 전송함으로써, 데이터 전송량을 줄일 수 있는 효과가 있다. Also, by, according to the present invention generates additional information to the low amount of information by modifying the additional information and sends it, there is an effect of reducing the data traffic.

Claims (22)

  1. 하나 이상의 소스 신호를 포함하는 믹스 신호를 획득하는 단계; Obtaining a mixed signal comprising at least one source signal;
    제1 부가 정보를 획득하는 단계; The method comprising: obtaining a first additional information;
    믹스 파라미터를 획득하는 단계; Obtaining mix parameters; And
    상기 믹스 신호, 상기 제1 부가 정보, 및 상기 믹스 파라미터를 이용하여 리믹스 신호를 생성하는 단계를 포함하되, Comprising the step of generating a remix signal using the first additional information, and the mix parameters on the mix signal,
    상기 제1 부가 정보는 상기 소스 신호들 중 리믹스될 소스 신호와 상기 믹스 신호와의 관계를 나타내는 제2 부가 정보를 변형한 정보인 것을 특징으로 하는 신호 처리 방법. The first additional information is a signal processing method, characterized in that information about a variation of the second additional information which shows the relation between the source signal and the mixed signal to be remixed one of the source signals.
  2. 제1 항에 있어서, 상기 신호 처리 방법은 The method of claim 1, wherein the signal processing method
    상기 제1 부가 정보를 상기 제2 부가 정보로 복원하는 단계를 더 포함하고, Further comprising the step of reconstructing the first sub information as the second additional information,
    상기 리믹스 신호를 생성하는 단계는 상기 믹스 신호, 상기 제2 부가 정보, 및 상기 믹스 파라미터를 이용하여 이루어지는 것을 특징으로 하는 신호 처리 방법. Generating the remix signal is a signal processing method which comprises using the second additional information, and the mix parameters on the mix signal.
  3. 제 1 항 또는 제 2 항에 있어서, According to claim 1 or 2,
    상기 제1 부가 정보는 상기 소스 신호의 파워 정보, 및 상기 소스 신호와 상기 믹스 신호의 상관 관계 정보를 포함하고, The first additional information comprises a power information and a correlation information of the source signal and the mixed signal of the signal source,
    상기 상관 관계 정보는 상기 소스 신호가 상기 믹스 신호의 제1 채널에 포함된 정도를 나타내고, 상기 믹스 신호의 제2 채널에 포함된 정도는 디폴트로 결정되는 것을 특징으로 하는 신호 처리 방법. Wherein the correlation information is a signal processing method characterized in that indicates the degree included in the first channel of the said source signal, the mixed signal, level with the second channel of the mixed signal is determined by default.
  4. 제 1 항 또는 제 2 항에 있어서, According to claim 1 or 2,
    상기 제1 부가 정보는 제2 부가 정보에 비해 비트레이트(bitrate)가 작은 것을 특징으로 하는 신호 처리 방법. The first additional information signal processing method, characterized in that the bit rate (bitrate) smaller than the second additional information.
  5. 제 4 항에 있어서, 5. The method of claim 4,
    상기 제1 부가 정보는 상기 제2 부가 정보를 정규화하여 생성되는 것을 특징으로 하는 신호 처리 방법. The first additional information is a signal processing method, characterized in that is produced by normalizing the second additional information.
  6. 제 1 항에 있어서, According to claim 1,
    상기 제1 부가 정보 또는 상기 제2 부가 정보는 상기 리믹스될 소스 신호의 레벨, 상기 리믹스될 소스 신호들 간의 레벨, 또는 상기 리믹스될 소스 신호와 상기 믹스 신호간의 레벨을 나타내는 정보를 포함하는 것을 특징으로 하는 신호 처리 방법. The first additional information or the second additional information, characterized in that it includes information indicating the levels of the level, the level between the source signal is the remix, or the source signal and the mixed signal is the remix of the source signal is the remix signal processing method.
  7. 제 1 항에 있어서, According to claim 1,
    상기 제1 부가 정보 또는 상기 제2 부가 정보는 상기 리믹스될 소스 신호들 간의 시간 지연, 또는 상기 리믹스될 소스 신호와 상기 믹스 신호간의 시간 지연을 나타내는 정보를 포함하는 것을 특징으로 하는 신호 처리 방법. The first additional information or the second additional information signal processing method comprising the information indicating the delay time between the delay between the source signal to be remixed the time, or the source signal is the remix the mix signal.
  8. 제 1 항에 있어서, According to claim 1,
    상기 제1 부가 정보 또는 상기 제2 부가 정보는 상기 리믹스될 소스 신호들 간의 상호 상관, 또는 상기 리믹스될 소스 신호와 상기 믹스 신호간의 상호 상관을 나타내는 정보를 포함하는 것을 특징으로 하는 신호 처리 방법. The first additional information or the second additional information signal processing method comprising the information indicating the cross-correlation between the signal source is the remix, or the cross-correlation between the source signal and the mixed signal is the remix.
  9. 제 1 항에 있어서, According to claim 1,
    상기 제1 부가 정보 또는 상기 제2 부가 정보는 상기 리믹스될 소스 신호가 상기 믹스 신호에 믹스되는 정도를 나타내는 정보를 포함하는 것을 특징으로 하는 신호 처리 방법. The first additional information or the second additional information signal processing method characterized in that the source signal is the remix includes information indicating the degree to which the mix in the mix.
  10. 제 1 항에 있어서, According to claim 1,
    상기 제1 부가 정보 또는 제2 부가 정보는 상기 믹스 신호와 함께 상기 리믹스 신호를 생성할 때, 타임 싱크 문제를 해결하기 위한 타이밍 정보를 포함하는 것을 특징으로 하는 신호 처리 방법. The first additional information and second additional information signal processing method comprising: a time to generate the remix signal, the timing to correct the time sync issue information together with the mix signal.
  11. 제 1 항에 있어서, According to claim 1,
    상기 제1 부가 정보 또는 제2 부가 정보는 상기 리믹스될 소스 신호의 최대 제어값에 대한 가이드 정보를 포함하는 것을 특징으로 하는 신호 처리 방법. The first additional information and second additional information is a signal processing method comprising the guide information on the maximum control value of the source signal to be remixed.
  12. 제 11 항에 있어서, 12. The method of claim 11,
    상기 가이드 정보는 상기 리믹스될 소스 신호 전체에 동일하게 적용되거나, 또는 각 리믹스될 소스 신호마다 독립적으로 적용되는 것을 특징으로 하는 신호 처리 방법. The guide information is a signal processing method characterized in that the or each application of the same for the entire source signal is the remix, or a source signal to be independent of each remix.
  13. 제 1 항에 있어서, According to claim 1,
    상기 제1 부가 정보 또는 제2 부가 정보는 각 소스 신호가 포함되는 채널을 나타내는 채널 식별 정보를 포함하는 것을 특징으로 하는 신호 처리 방법. The first additional information and second additional information is a signal processing method comprising: a channel identification information indicating a channel is included for each source signal.
  14. 하나 이상의 소스 신호를 포함하는 믹스 신호를 획득하는 단계; Obtaining a mixed signal comprising at least one source signal;
    상기 소스 신호들 중 리믹스될 소스 신호를 획득하는 단계; Obtaining a source signal to be remixed of said source signal;
    상기 믹스 신호 및 상기 리믹스될 소스 신호를 이용하여 제1 부가 정보를 생성하는 단계; Generating a first additional information by using the downmix signal and the source signal to be remixed; And
    상기 제1 부가 정보를 제2 부가 정보로 변형하는 단계를 포함하되, Comprising the step of deforming the first additional information as the second additional information,
    상기 제1 부가 정보는 상기 리믹스될 소스 신호와 상기 믹스 신호와의 관계를 나타내는 정보인 것을 특징으로 하는 신호 처리 방법. The first additional information is a signal processing method characterized in that the information indicating the relation between the source signal and the mixed signal is the remix.
  15. 제 14 항에 있어서, 상기 신호 처리 방법은 15. The method of claim 14 wherein the signal processing method
    상기 제2 부가 정보를 양자화 및 부호화에 더 적합한 제3 부가 정보로 변환하는 단계를 더 포함하는 것을 특징으로 하는 신호 처리 방법. A signal processing method according to claim 1, further comprising the step of converting the second sub information into a more suitable third additional information to the quantization and coding.
  16. 제 14 항에 있어서, 상기 신호 처리 방법은 15. The method of claim 14 wherein the signal processing method
    상기 제3 부가 정보를 양자화 및 부호화하는 단계를 더 포함하는 것을 특징으로 하는 신호 처리 방법. A signal processing method according to claim 1, further comprising the step of quantizing and encoding the third additional information.
  17. 제 14 항에 있어서, 상기 변형 단계는 15. The method of claim 14 wherein the transformation steps are
    상기 제1 부가 정보를 정규화하는 상기 제2 부가 정보를 생성하는 단계를 포함하는 것을 특징으로 하는 신호 처리 방법. Signal processing method comprising the step of generating the second additional information to normalize the first additional information.
  18. 제1 믹스 신호 및 제1 부가 정보를 획득하는 단계; The method comprising: obtaining a first mixed signal and the first additional information;
    제2 믹스 신호를 획득하는 단계; The method comprising: obtaining a second mixed signal;
    상기 제1 믹스 신호와 상기 제2 믹스 신호를 비교한 결과를 이용하여 상기 제1 부가 정보를 제2 부가 정보로 변형하는 단계를 포함하되, But by using the first result of comparing the first mix signal and the second mixed signal includes the step of deforming the first additional information as the second additional information,
    상기 제1 부가 정보는 상기 제1 믹스 신호를 리믹스하기 위해 필요한 정보이고, 상기 제2 부가 정보는 상기 제2 믹스 신호를 리믹스하기 위해 필요한 정보인 것을 특징으로 하는 신호 처리 방법. The first additional information is information required to remix the first mix signal and the second additional information is a signal processing method characterized in that the information required to remix the second mixed signal.
  19. 제 18 항에 있어서, 상기 신호 처리 방법은 19. The method of claim 18, wherein the signal processing method
    상기 제2 부가 정보를 독립적으로 출력하거나, 또는 상기 제2 부가 정보와 상기 제2 믹스 신호를 다중화하여 출력하는 단계를 더 포함하는 것을 특징으로 하는 신호 처리 방법. The second additional information outputs independently, or the second additional information, and a signal processing method according to claim 1, further comprising the step of multiplexing and outputting a second mixed signal.
  20. 하나 이상의 소스 신호를 포함하는 믹스 신호를 획득하는 믹스신호디코딩부; Mixed signal decoding unit to obtain a mixed signal comprising at least one source signal;
    제1 부가 정보를 획득하는 부가정보디코딩부; The additional information decoding unit for acquiring first additional information; And
    상기 믹스 신호, 상기 제1 부가 정보, 및 믹스 파라미터를 이용하여 리믹스 신호를 생성하는 리믹스렌더링부를 포함하되, Comprising the mixed signal, the first additional information, and using a mix parameters remixed for generating a remix signal rendering unit,
    상기 제1 부가 정보는 상기 소스 신호들 중 리믹스될 소스 신호와 상기 믹스 신호와의 관계를 나타내는 제2 부가 정보를 변형한 정보이고, 상기 믹스 파라미터는 사용자로부터 획득된 제어 정보를 이용하여 생성되는 것을 특징으로 하는 신호 처리 장치. The first additional information is to be generated by using the control information obtained second and information modification the additional information, the mix parameters showing the relationship between the source signal to be remixed among the source signal and the mixed signal from the user, signal processing apparatus according to claim.
  21. 제 20 항에 있어서, 상기 신호 처리 장치는 21. The method of claim 20, wherein the signal processing unit
    상기 제1 부가 정보를 상기 제2 부가 정보로 복원하는 부가정보복원부를 더 포함하고, Wherein further comprising first additional information restored for restoring the additional information into the second parts of the additional information,
    상기 리믹스렌더링부는 상기 믹스 신호, 상기 제2 부가 정보, 및 상기 믹스 파라미터를 이용하여 상기 리믹스 신호를 생성하는 것을 특징으로 하는 신호 처리 장치. The remix rendering unit signal processing apparatus, characterized in that for generating the remix signal using the second additional information, and the mix parameters on the mix signal.
  22. 하나 이상의 소스 신호를 포함하는 믹스 신호 및 리믹스될 소스 신호를 이용하여 제1 부가 정보를 생성하는 부가정보생성부; Sub information generator for generating first additional information by using the downmix signal and the source signal to be remixed comprising at least one source signal;
    상기 제1 부가 정보를 제2 부가 정보로 변형하는 부가정보변형부; The additional information modification unit for modifying the first additional information as the second additional information; And
    상기 제2 부가 정보를 부호화하는 부가정보인코딩부를 포함하되, Comprising the additional information encoding unit for encoding the second sub information,
    상기 제1 부가 정보는 상기 리믹스될 소스 신호와 상기 믹스 신호와의 관계를 나타내는 정보인 것을 특징으로 하는 신호 처리 장치. The first additional information signal processing apparatus characterized in that the information indicating the relation between the source signal and the mixed signal is the remix.
KR20070063180A 2006-10-13 2007-06-26 Apparatus for processing a mix signal and method thereof KR100891665B1 (en)

Priority Applications (8)

Application Number Priority Date Filing Date Title
US82935006 true 2006-10-13 2006-10-13
US60/829,350 2006-10-13
US86590806 true 2006-11-15 2006-11-15
US60/865,908 2006-11-15
US86830406 true 2006-12-01 2006-12-01
US60/868,304 2006-12-01
US88971507 true 2007-02-13 2007-02-13
US60/889,715 2007-02-13

Publications (2)

Publication Number Publication Date
KR20080033839A true KR20080033839A (en) 2008-04-17
KR100891665B1 true KR100891665B1 (en) 2009-04-02

Family

ID=39573661

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20070063180A KR100891665B1 (en) 2006-10-13 2007-06-26 Apparatus for processing a mix signal and method thereof

Country Status (1)

Country Link
KR (1) KR100891665B1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006008683A1 (en) 2004-07-14 2006-01-26 Koninklijke Philips Electronics N.V. Method, device, encoder apparatus, decoder apparatus and audio system
EP1691348A1 (en) 2005-02-14 2006-08-16 Ecole Polytechnique Federale De Lausanne Parametric joint-coding of audio sources
US20070083365A1 (en) 2005-10-06 2007-04-12 Dts, Inc. Neural network classifier for separating audio sources from a monophonic audio signal

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006008683A1 (en) 2004-07-14 2006-01-26 Koninklijke Philips Electronics N.V. Method, device, encoder apparatus, decoder apparatus and audio system
EP1691348A1 (en) 2005-02-14 2006-08-16 Ecole Polytechnique Federale De Lausanne Parametric joint-coding of audio sources
US20070083365A1 (en) 2005-10-06 2007-04-12 Dts, Inc. Neural network classifier for separating audio sources from a monophonic audio signal

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Patrick De Smet et al., 'Subband based audio mixing for internet streaming applications', ICASSP 2001

Also Published As

Publication number Publication date Type
KR20080033839A (en) 2008-04-17 application

Similar Documents

Publication Publication Date Title
US7720230B2 (en) Individual channel shaping for BCC schemes and the like
US20060239473A1 (en) Envelope shaping of decorrelated signals
US7542896B2 (en) Audio coding/decoding with spatial parameters and non-uniform segmentation for transients
US20060004583A1 (en) Multi-channel synthesizer and method for generating a multi-channel output signal
US20110013790A1 (en) Apparatus and Method for Multi-Channel Parameter Transformation
Faller Coding of spatial audio compatible with different playback formats
US20070206690A1 (en) Device and method for generating a multi-channel signal or a parameter data set
US20070291951A1 (en) Parametric joint-coding of audio sources
US20070002971A1 (en) Apparatus and method for generating a level parameter and apparatus and method for generating a multi-channel representation
US7761304B2 (en) Synchronizing parametric coding of spatial audio with externally provided downmix
US20070081597A1 (en) Temporal and spatial shaping of multi-channel audio signals
US20110022402A1 (en) Enhanced coding and parameter representation of multichannel downmixed object coding
US20090225991A1 (en) Method and Apparatus for Decoding an Audio Signal
US7979282B2 (en) Methods and apparatuses for encoding and decoding object-based audio signals
US7756713B2 (en) Audio signal decoding device which decodes a downmix channel signal and audio signal encoding device which encodes audio channel signals together with spatial audio information
WO2006003813A1 (en) Audio encoding and decoding apparatus
WO2006072270A1 (en) Compact side information for parametric coding of spatial audio
WO2009049895A1 (en) Audio coding using downmix
US20100076772A1 (en) Methods and Apparatuses for Encoding and Decoding Object-Based Audio Signals
Faller Parametric joint-coding of audio sources
US20160198281A1 (en) Method and apparatus for processing audio signals
US7961890B2 (en) Multi-channel hierarchical audio coding with compact side information
WO2008084427A2 (en) Audio decoder
US20100198589A1 (en) Audio coding apparatus, audio decoding apparatus, audio coding and decoding apparatus, and teleconferencing system
US20090172060A1 (en) Filter adaptive frequency resolution

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130226

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140224

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150224

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20160224

Year of fee payment: 8

LAPS Lapse due to unpaid annual fee