JP4997781B2

JP4997781B2 - ミックスダウン方法およびミックスダウン装置

Info

Publication number: JP4997781B2
Application number: JP2006036443A
Authority: JP
Inventors: 斉石田
Original assignee: Oki Electric Industry Co Ltd
Current assignee: Oki Electric Industry Co Ltd
Priority date: 2006-02-14
Filing date: 2006-02-14
Publication date: 2012-08-08
Anticipated expiration: 2026-02-14
Also published as: JP2007221216A

Description

本発明は、ディジタルオーディオに用いるミックスダウンのための各チャンネルのゲインを動的に決定するミックスダウン方法およびミックスダウン装置に関する。

近年、ＡＶ(オーディオ・ビジュアル)分野の音響再生においては、従来のＬ／Ｒチャンネルのステレオ信号にセンタチャンネルやサラウンドチャンネルを加えたマルチチャンネル再生方式が実現されている。このマルチチャンネル再生方式において原音場を再生する場合、視聴者の後方または側方に少なくとも１つのスピーカを配置する必要があった。

しかしながら、マルチチャンネル再生方式の音響信号をＬ／Ｒチャンネルの２つのスピーカで再生したいという視聴者の要望に対応するために、マルチチャンネルで伝送された音響信号を２チャンネルに変換する必要が生じる。

そこで、マルチチャンネルの入力音源に対して、入力側のチャンネル数よりも少ないチャンネル数に音響信号を変換して出力するというミックスダウンが必要になる。

このミックスダウンの手法の一例として、特許文献１にマルチチャンネルステレオ用ダウンミキシング装置が報告されている。

この特許文献１によれば、ミックスダウンされるマルチチャンネルの音響信号が音楽であるか音声であるかを、入力されたＬ／Ｒｃｈ信号を加算してこの加算されたＬ／Ｒｃｈ信号に基づいて判別している。そして、その判別結果に基づいて、音量調整部のゲイン係数を変更することで、音楽再生の場合には臨場感を実現できる値に、また音声の場合には明瞭感が確保できる値にそれぞれ修正されており、２チャンネルのスピーカ再生においても、それぞれのプログラムソースに最適な音響再生を実現することが可能となるという利点を有している。
特開平６−１６５０７９号公報

このように、特許文献１によれば、入力されたＬ／Ｒｃｈ信号に基づいて音楽であるか音声であるかを判別して音量調整のためのゲイン係数を変更することで、音楽再生と音声再生とで適切な音場再生を実現している。

しかしながら、特許文献１にあっては、ミックスダウンのためのゲイン係数を予め２つ用意しておき、音楽再生の場合と音声再生の場合とで切り換えるようにしていたので、様々な音響信号に最適に適応できないといった問題があった。この結果、音場再生の切り替わり時期が明確になり過ぎチャンネル間での音量バランスが悪く違和感や疲労感の要因になっていた。

本発明は、上記に鑑みてなされたもので、その目的としては、音量バランスの良いミックスダウンを行うことができるミックスダウン方法およびミックスダウン装置を提供することにある。

請求項１記載の発明は、上記課題を解決するため、入力される複数の音響信号を混合してこの音響信号の数よりも少ない数の出力信号に変換するミックスダウン装置において、前記各音響信号のスケールファクタに基づいて、前記音響信号と前記出力信号の組み合わせごとに対応する動的ゲイン値を決定するゲイン決定手段と、前記音響信号とこの音響信号に対して決定された動的ゲイン値とを乗算した乗算結果を、対応する出力信号ごとにまとめて加算し、それぞれの加算結果に基づく信号を出力信号として出力するミックスダウン手段とを備えたことを特徴とする。

請求項３記載の発明は、上記課題を解決するため、入力される複数の音響信号を混合してこの音響信号の数よりも少ない数の出力信号に変換するミックスダウン方法において、前記各音響信号のスケールファクタに基づいて、前記音響信号と前記出力信号の組み合わせごとに対応する動的ゲイン値を決定するゲイン決定ステップと、前記音響信号とこの音響信号に対して決定された動的ゲイン値とを乗算し乗算結果を、対応する出力信号ごとにまとめて加算し、それぞれの加算結果に基づく信号を出力信号として出力するミックスダウンステップとを有することを特徴とする。

本発明のミックスダウン方法およびミックスダウン装置によれば、入力される音響信号のスケールファクタに基づいて動的ゲイン値を決定するので、音量バランスの良いミックスダウンを行うことができる。

以下、本発明の実施の形態について図面を参照して説明する。

（第１実施形態）
ＭＰＥＧ−２／４ＡＡＣは、ＭＰＥＧ−１オーディオとの互換性を排除することで、高音質・高圧縮率を達成したマルチチャンネル対応のオーディオ符号化方式である。入力のサンプリング周波数は8kHzから96kHzと、非常に広い範囲に対応している。また最大で、48チャンネルのオーディオ信号、15個のＬＦＥ（Low Frequency Enhancement）チャンネル、カップリングチャンネル、汎用データストリームを伝送できる。

音声復号装置は、音声符号化装置に対向するものであり、音声符号化装置から出力される符号化されたビットストリームｂｓや、例えばＤＶＤに記憶されているビットストリームｂｓや、インターネットを介して入力されるビットストリームｂｓを復号してオーディオ信号に再生するものである。

図１は、本発明に係る第１実施形態のミックスダウン装置に適応可能な音声復号装置について説明するための構成を示すブロック図である。図２は、ゲイン決定部１９、時間周波数逆変換部２１及びミックスダウン部２３の相互の接続関係を示す図である。なお、ここでいうミックスダウン装置とは、入力される複数の音響信号を混合してこの音響信号の数よりも少ない数の出力信号に変換する装置のことである。

音声復号装置１１は、シンタックス解読部１３、ハフマン符号デコーダ部１５、逆量子化部１７、ゲイン決定部１９、時間周波数逆変換部２１、ミックスダウン部２３から構成され、さらに、各部はＤＳＰ（Digital Signal Processor）やソフトウエア処理により構成されている。
シンタックス解読部１３は、入力された符号化データ列ｂｓ（ビットストリーム）から高能率符号化音響ストリームと帯域信号や正規化情報及び量子化精度情報などを規定の文法に従って分離する。

なお、帯域信号は、音声符号化装置において、元データを複数の周波数帯域に分割し、帯域ごとに人間の聴覚に応じた重みつけをした後に符号化されている。また、正規化情報は、後述する逆量子化処理において用いる係数位置を揃えるための情報である。量子化精度情報は、後述する逆量子化処理において用いる階層化されたDCT係数の量子化精度（レベル）の情報である。
ハフマン符号デコーダ部１５は、入力された高能率符号化音響ストリームｈを副情報で得られた符号化フォーマットに従ってハフマン復号し、量子化スペクトルｑ１〜ｑ６とスケールファクタを出力する。

逆量子化部１７は、復号された量子化スペクトルｑ１〜ｑ６、スケールファクタに基づいて、元の周波数信号ｆ１〜ｆ６を再生する。

なお、スケールファクタは量子化における量子化幅を示す。例えばＭＰＥＧ−２／４ＡＡＣでは、ある周波数信号ｆに対し、量子化スペクトルｑを、
q = INT((f^3/4) / 2^(sf/4) + 0.4054) （数１）
と計算し、この時の整数ｓｆをスケールファクタと呼ぶ。スケールファクタは連続した複数の周波数信号に対し共通的に用いられ、低域側から順にｓｆ１（１）、ｓｆ１（２）．．．ｓｆ１（Ｎ）と書き表すものとする。本実施形態においては、最も低域のスケールファクタｓｆｉ（１）を用いて説明する。

スケールファクタｓｆ１（１）〜ｓｆ６（１）は、チャンネル毎に独立した値を持つ。また、ビットレート一定の符号化の場合は一般的に、小さい音量に対してスケールファクタは小さな値を、大きな音量に対してスケールファクタは大きな値を示す。なお、例えばｓｆ１（１）は１チャンネル、ｓｆ６（１）は６チャンネルのスケールファクタを示す。ここで、チャンネルの番号は音像の位置を表しており、例えば１はセンタチャンネル、２は左前チャンネル、３は右前チャンネル、４は左後ろチャンネル、５は右後ろチャンネル、６は低音チャンネルである。

ゲイン決定部１９は、スケールファクタｓｆ１（１）〜ｓｆ６（１）に基づいて動的ゲインｇ１１〜ｇ６１，ｇ１２〜ｇ６２を決定する。

時間周波数逆変換部２１は、逆変形離散コサイン変換(ＩＭＤＣＴ)などの時間−周波数逆変換を行う。すなわち、各帯域の周波数信号ｆ１〜ｆ６を逆変換することによって帯域を合成し時系列の音響信号ｉ１〜ｉ６を得る。

ミックスダウン部２３は、音響信号ｉ１〜ｉ６と動的ゲインｇ１１〜ｇ６１，ｇ１２〜ｇ６２に基づいて出力信号ｏ１，ｏ２を算出する。

図３はゲイン決定部１９の構成を示す図である。図３において、ゲイン決定部１９は、重み付け器３１と正規化器３３，３５から構成されている。

ハフマン符号デコーダ部１５から出力されたスケールファクタｓｆ１（１）〜ｓｆ６（１）は、乗算器ＭＰ１１〜ＭＰ６１、乗算器ＭＰ１２〜ＭＰ６２にそれぞれ入力される。静的ゲインｓ１１〜ｓ６１，ｓ１２〜ｓ６２は、予めメモリに記憶され固定的に与えられており、乗算器ＭＰ１１〜ＭＰ６１，ＭＰ１２〜ＭＰ６２にそれぞれ入力される。乗算器ＭＰ１１〜ＭＰ６１，ＭＰ１２〜ＭＰ６２では、入力されるスケールファクタｓｆ１（１）〜ｓｆ６（１）と静的ゲインｓ１１〜ｓ６１，ｓ１２〜ｓ６２とをそれぞれ乗算して得られた乗算値ｇ’１１〜６１，ｇ’１２〜６２をそれぞれ正規化器３３，３５に出力する。

正規化器３３，３５は、乗算器ＭＰ１１〜ＭＰ６１，ＭＰ１２〜ＭＰ６２から出力された乗算値ｇ’１１〜６１，ｇ’１２〜６２を入力し、正規化して動的ゲインｇ１１〜６１，ｇ１２〜６２を算出し、ミックスダウン部２３に出力する。

図４はミックスダウン部２３の構成を示す図である。

ゲイン決定部１９から出力された動的ゲインｇ１１〜６１は、乗算器ＩＭＰ１１〜６１にそれぞれ入力され、かつこれらの乗算器に音響信号ｉ１〜ｉ６が入力されており、動的ゲインｇ１１〜６１と音響信号ｉ１〜ｉ６とが乗算されたそれぞれの乗算結果値が並列に加算器ＡＤＤ１１〜１５にそれぞれ入力され、直列接続された加算器ＡＤＤ１１〜１５が順次に加算し出力信号ｏ１を算出する。

同様に、ゲイン決定部１９から出力された動的ゲインｇ１２〜６２は、乗算器ＩＭＰ１２〜６２にそれぞれ入力され、かつこれらの乗算器に音響信号ｉ１〜ｉ６が入力されており、動的ゲインｇ１２〜６２と音響信号ｉ１〜ｉ６とが乗算されたそれぞれの乗算結果値が並列に加算器ＡＤＤ１２〜５２にそれぞれ入力され、直列接続された加算器ＡＤＤ１２〜５２が順次に加算し出力信号ｏ２を算出する。

次に、図１〜図５を参照して、第１実施形態の音声復号装置１１の動作について説明する。なお、図５は正規化器３３，３５の動作を説明するためのフローチャートである。

シンタックス解読部１３では、入力された符号化データ列ｂｓから高能率符号化音響ストリームｈと量子化精度情報及び正規化情報を規定の文法に従って分離する。

次いで、ハフマン符号デコーダ部１５では、シンタックス解読１３からの高能率符号化音響ストリームｈを副情報で得られた符号化フォーマットに従ってハフマン復号し、複数の量子化スペクトルｑ１〜ｑ６とこの量子化スペクトル毎の量子化幅を示すスケールファクタｓｆ１（１）〜ｓｆ６（１）を出力する。

次いで、逆量子化１７では、ハフマン符号デコーダ１５からの複数の量子化スペクトルｑ１〜ｑ６と複数のスケールファクタｓｆ１（１）〜ｓｆ６（１）に基づいて、帯域毎の元の周波数信号ｆ１〜ｆ６をそれぞれ再生する。

次いで、ゲイン決定部では、ハフマン符号デコーダ部１５からの複数のスケールファクタｓｆ１（１）〜ｓｆ６（１）に基づいて出力系統毎の複数の動的ゲイン値ｇ１１〜６１，ｇ１２〜６２を決定する。

ここで、ゲイン決定部１９では、図３に示すように、ハフマン符号デコーダ部１５からの複数のスケールファクタｓｆ１（１）〜ｓｆ６（１）に予め設定された複数の静的ゲイン値ｓ１１〜ｓ６１，ｓ１２〜ｓ６２を乗算器ＭＰ１１〜ＭＰ６１，ＭＰ１２〜ＭＰ６２でそれぞれ乗算してスケールファクタ毎に重み付けしたゲインを表す複数の乗算値ｇ’１１〜６１，ｇ’１２〜６２を出力する。

次いで、ゲイン決定部１９では、複数の乗算値ｇ’１１〜６１，ｇ’１２〜６２を正規化器３３、３５で正規化して出力系統毎の複数の動的ゲイン値ｇ１１〜６１，ｇ１２〜６２を算出する。

詳しくは図５に示すように、ステップＳ１０では、重み付け器３１は、最低域のスケールファクタｓｆ１（１）〜ｓｆ６（１）を用いて、静的ゲインｓ１１〜ｓ６１，ｓ１２〜ｓ６２にスケールファクタｓｆ１（１）〜ｓｆ６（１）乗算して重み付けする。ステップＳ１０に示す数２のように、静的ゲインｓijにｓｆi（１）を乗算することで重み付けされたゲインｇ'ijを記述することができる。

ここで、静的ゲインｓijの設定値の一例について説明する。なお、ｐ，ｑは個々のチャンネルの静的ゲインであり、o1，o2はそれぞれＬ／Ｒチャンネルのステレオの出力信号である。

p = (8 - 2 * sqrt(2)) / 14 = 0.3694 （数３）
q = (4 * sqrt(2) - 2) / 14 = 0.2612 （数４）
として、
o1 = p * i1 + p * i2 + q * i4 （数５）
o2 = p * i1 + p * i3 + q * i5 （数６）
となる。sqrt (ｘ) 関数は x の平方根のうち負でない方の値を意味している。
静的ゲインｓijを行列式で記述すると、

となる。

次いで、ステップＳ２０では、正規化器３３，３５は、重み付けされたゲインｇ'を正規化し、動的ゲインｇ１１〜６１，ｇ１２〜６２を求める。ステップＳ２０に示すように、まず、ゲインｇ'1j〜ｇ’6jの合計値から分母の値を求め、ゲインｇ’ijをこの合計値で除算することで、動的ゲインｇijを求めるので、正規化は出力のチャンネルｉ毎に行われることになる。この正規化に関する数式は数８に示すように記述することができる。なお、ステップＳ２０で求めた動的ゲインｇ11〜ｇ61の合計値は「１」になることは言うまでもない。

次いで、時間周波数逆変換部２１では、逆量子化部１７からの帯域毎の周波数信号ｆ１〜ｆ６を逆変換して帯域合成し元の時系列の複数の音響信号ｉ１〜ｉ６を求める。

次いで、この時間周波数逆変換部２１からの複数の音響信号ｉ１〜ｉ６とこのゲイン決定部１９からの出力系統毎の複数の動的ゲインｇ１１〜６１，ｇ１２〜６２に基づいて、出力系統毎の出力信号o1，o2を算出する。

ここで、ミックスダウン部２３では、時間周波数逆変換部２１からの複数の音響信号ｉ１〜ｉ６に正規化器３３からの１出力系統の複数の動的ゲインｇ１１〜６１をそれぞれ乗算器ＩＭＰ１１〜ＩＭＰ６１で乗算して重み付けし、乗算器ＩＭＰ１１〜ＩＭＰ６１からの複数の乗算値をＡＤＤ１１〜ＡＤＤ５１で加算して当該出力系統の出力信号o1を算出する。

同様に、時間周波数逆変換部２１からの複数の音響信号ｉ１〜ｉ６に正規化器３５からの１出力系統の複数の動的ゲインｇ１２〜６２をそれぞれ乗算器ＩＭＰ１２〜ＩＭＰ６２で乗算して重み付けし、乗算器ＩＭＰ１２〜ＩＭＰ６２からの複数の乗算値をＡＤＤ１２〜ＡＤＤ５２で加算して当該出力系統の出力信号o2を算出する。

この結果、ミックスダウン部２３は音響信号ｉ１〜ｉ６に動的ゲインｇ１１〜ｇ６２を乗算した後、この乗算結果を２系統にまとめて加算することで、Ｌ／Ｒチャンネルの出力信号ｏ１，ｏ２を得ることができ、入力される音響信号ｉ１〜ｉ６を線形結合することができる。

ここで、音響信号ｉ１〜ｉ６とゲインｇ１１〜ｇ６２から出力信号ｏ１，ｏ２を求める方法を行列式で表すと数式８のようになる。

本実施形態によれば、ミックスダウンを行うためのゲインをゲイン決定部において動的に決定しておくため、各チャンネル（１〜６）のスケールファクタがほぼ等しい場合には、動的ゲインは静的ゲインに収束する。一方、各チャンネルのスケールファクタに偏りがある場合には、音量の大きなチャンネルに大きなゲインが割当てられる。この結果として、音量バランスの良いミックスダウンを行うことができる。

また、動的ゲインを決定する過程では、ディジタルオーディオ信号の復号に用いたパラメータを流用するため、例えばＤＳＰでの処理負荷を極めて小さくすることができる。

（第２実施形態）
図６は、本発明に係る第２実施形態のミックスダウン装置に適応可能な音声復号装置について説明するための構成を示すブロック図である。図７は、ゲイン決定部１９、ミックスダウン部５３及び時間周波数逆変換部５５の相互の接続関係を示す図である。

音声復号装置５１は、シンタックス解読部１３、ハフマン符号デコーダ部１５、逆量子化部１７、ゲイン決定部１９、ミックスダウン部５３、時間周波数逆変換部５５から構成されている。なお、第２実施形態の音声復号装置５１において、第１実施形態の音声復号装置１１において用いられている構成要件と同様のブロックについては同一の符号を付加し、その説明を省略する。

第２の実施形態の音声復号装置５１の特徴は、ミックスダウン部５３と時間周波数逆変換部５５を有することにある。これは、時間周波数逆変換の処理は線形性を有するため、周波数信号をミックスダウンしてから逆変換を行っても、第１の実施の形態と同じ結果が得られるからである。

ミックスダウン部５３は、逆量子化部１７からの帯域毎の周波数信号ｆ１〜ｆ６とゲイン決定１９からの出力系統毎の複数の動的ゲインｇ１１〜ｇ６２に基づいて、出力系統毎の周波数信号Ｆ１，Ｆ２を算出する。

時間周波数逆変換部５５は、このミックスダウン部５３からの周波数信号Ｆ１，Ｆ２を逆変換して帯域合成し時系列の音響信号o1，o2を求める。

図８はミックスダウン部５３の構成を示す図である。

ミックスダウン部５３において、ゲイン決定部１９から出力された動的ゲインｇ１１〜６１は、乗算器ＩＭＰ１１〜６１にそれぞれ入力され、このそれぞれの乗算器に周波数信号ｆ１〜ｆ６が入力されており、動的ゲインｇ１１〜６１と周波数信号ｆ１〜ｆ６とが乗算器ＩＭＰ１１〜６１で乗算されそれぞれ重み付けされた乗算結果値が並列に加算器ＡＤＤ１１〜１５にそれぞれ入力され、直列接続された加算器ＡＤＤ１１〜５１が順次に加算し周波数信号Ｆ１を算出する。

同様に、ゲイン決定部１９から出力された動的ゲインｇ１２〜６２は、乗算器ＩＭＰ１２〜６２にそれぞれ入力され、このそれぞれの乗算器に周波数信号ｆ１〜ｆ６が入力されており、動的ゲインｇ１２〜６２と周波数信号ｆ１〜ｆ６と乗算器ＩＭＰ１２〜６２で乗算されそれぞれ重み付けされた乗算結果値が並列に加算器ＡＤＤ１２〜５２にそれぞれ入力され、直列接続された加算器ＡＤＤ１２〜５２が順次に加算し周波数信号Ｆ２を算出する。

次に、図６〜図８を参照して、第２実施形態の音声復号装置５１の動作について説明する。なお、シンタックス解読部１３、ハフマン符号デコーダ部１５、逆量子化１７、ゲイン決定部でのそれぞれの処理内容は第１実施形態の音声復号装置１１と同様であるので、その説明を省略する。

ミックスダウン部５３では、逆量子化部１７からの帯域毎の周波数信号ｆ１〜ｆ６とゲイン決定１９からの出力系統毎の複数の動的ゲインｇ１１〜ｇ６２に基づいて、出力系統毎の周波数信号Ｆ１，Ｆ２を算出する。

この結果、ミックスダウン部２３は周波数信号ｆ１〜ｆ６に動的ゲインｇ１１〜ｇ６２を乗算した後、この乗算結果を２系統にまとめて加算することで、Ｌ／Ｒチャンネルの周波数信号Ｆ１，Ｆ２を得ることができ、入力される周波数信号ｆ１〜ｆ６を線形結合することができる。

ここで、周波数信号ｆ１〜ｆ６とゲインｇ１１〜ｇ６２から周波数信号Ｆ１，Ｆ２を求める方法を行列式で表すと数式９のようになる。

また、動的ゲインを決定する過程では、ディジタルオーディオ信号の復号に用いたパラメータを流用するため、例えばＤＳＰ（Digital Signal Processor）での処理負荷を極めて小さくすることができる。

なお、本発明の実施形態においては、５．１ｃｈ信号をステレオ信号に変換した例を用いたが、複数のチャンネル数ｎ（ｎ≧２）に対してミックスダウンを行っても、同様に適用可能になる。また、本発明の実施形態では、動的ゲインを決定するのに最も低域のスケールファクタを用いたが、別の帯域のスケールファクタを用いても良く、また、複数のスケールファクタを用いても良い。

また、本実施形態においては、ＭＰＥＧ−２／４ＡＡＣに用いる音声復号装置に適応させてミックスダウン装置に関する説明をしたが、本発明のミックスダウン装置はこのようなＭＰＥＧ−２／４ＡＡＣに限定するものではなく、他のマルチチャンネル再生方式に対しても適応可能である。

本発明に係る第１実施形態のミックスダウン装置に適応可能な音声復号装置について説明するための構成を示すブロック図である。ゲイン決定部１９、時間周波数逆変換部２１及びミックスダウン部２３の相互の接続関係を示す図である。ゲイン決定部１９の構成を示す図である。ミックスダウン部２３の構成を示す図である。正規化器３３，３５の動作を説明するためのフローチャートである。本発明に係る第２実施形態のミックスダウン装置に適応可能な音声復号装置について説明するための構成を示すブロック図である。ゲイン決定部１９、ミックスダウン部５３及び時間周波数逆変換部５５の相互の接続関係を示す図である。ミックスダウン部５３の構成を示す図である。

符号の説明

１１，５１…音声復号装置、１３…シンタックス解読部、１５…ハフマン符号デコーダ部、１７…逆量子化部、１９…ゲイン決定部、２１…時間周波数逆変換部、２３…ミックスダウン部２３、３１…重み付け器、３３，３５…正規化器、ＩＭＰ１１〜６２…乗算器、ＡＤＤ１１〜ＡＤＤ５２…加算器、５３…ミックスダウン部、５５…時間周波数逆変換部

Claims

入力される複数の音響信号を混合してこの音響信号の数よりも少ない数の出力信号に変換するミックスダウン装置において、
前記各音響信号のスケールファクタに基づいて、前記音響信号と前記出力信号の組み合わせごとに対応する動的ゲイン値を決定するゲイン決定手段と、
前記音響信号とこの音響信号に対して決定された動的ゲイン値とを乗算した乗算結果を、対応する出力信号ごとにまとめて加算し、それぞれの加算結果に基づく信号を出力信号として出力するミックスダウン手段と
を備えたことを特徴とするミックスダウン装置。
前記ゲイン決定手段は、
前記スケールファクタ毎にそれぞれ対応する予め設定された静的ゲイン値を乗算して前記音響信号毎の乗算結果値を出力する重み付け手段と、
この重み付け手段からの複数の乗算結果値を正規化して音響信号毎に対応する動的ゲイン値を算出する正規化手段と
を備えたことを特徴とする請求項１記載のミックスダウン装置。
入力される複数の音響信号を混合してこの音響信号の数よりも少ない数の出力信号に変換するミックスダウン方法において、
前記各音響信号のスケールファクタに基づいて、前記音響信号と前記出力信号の組み合わせごとに対応する動的ゲイン値を決定するゲイン決定ステップと、
前記音響信号とこの音響信号に対して決定された動的ゲイン値とを乗算し乗算結果を、対応する出力信号ごとにまとめて加算し、それぞれの加算結果に基づく信号を出力信号として出力するミックスダウンステップと
を有することを特徴とするミックスダウン方法。