JP4187719B2 - マルチチャネル・ダウンミキシング装置 - Google Patents

マルチチャネル・ダウンミキシング装置 Download PDF

Info

Publication number
JP4187719B2
JP4187719B2 JP2004502485A JP2004502485A JP4187719B2 JP 4187719 B2 JP4187719 B2 JP 4187719B2 JP 2004502485 A JP2004502485 A JP 2004502485A JP 2004502485 A JP2004502485 A JP 2004502485A JP 4187719 B2 JP4187719 B2 JP 4187719B2
Authority
JP
Japan
Prior art keywords
channel
input
energy
output
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2004502485A
Other languages
English (en)
Other versions
JP2005523672A (ja
Inventor
デービッド， エイチ． グリーシンガー，
Original Assignee
ハーマン インターナショナル インダストリーズ インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ハーマン インターナショナル インダストリーズ インコーポレイテッド filed Critical ハーマン インターナショナル インダストリーズ インコーポレイテッド
Publication of JP2005523672A publication Critical patent/JP2005523672A/ja
Application granted granted Critical
Publication of JP4187719B2 publication Critical patent/JP4187719B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/02—Systems employing more than two channels, e.g. quadraphonic of the matrix type, i.e. in which input signals are combined algebraically, e.g. after having been phase shifted with respect to each other
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Algebra (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)
  • Amplifiers (AREA)

Description

発明者：
デビッドＨ．グリーシンガー（Ｄａｖｉｄ Ｈ．Ｇｒｉｅｓｉｎｇｅｒ）
発明の背景
１．技術分野
この出願は、２００２年５月３日に出願されたデビッドＨ．グリーシンガーによる“マルチチャネルから２チャネルへのミキシング装置及び方法”と題された米国仮出願第６０／３７７，６６１号、代理人ドケット番号１１３３６／１３７、に対する優先権を主張するものであり、この仮出願を参照により本書に取り入れる。
２．関連技術
本発明は、混合装置に関し、より具体的には、マルチチャネル信号の所期の方向及び信号エネルギーを維持しながら、複数のチャネルを含むマルチチャネル信号を混合して複数のチャネルを含む出力信号にすることのできるダウンミキサーに関する。
しばしば、オーディオ・レコーディング或いは映画のサウンドトラック（フィルム・ミックス）は、オーディオ・レコーディングがライブであるというより現実的な感覚を聴取者に与えるために３つ以上のオーディオチャネルで生成される。例えば、左前（ＬＦ）チャネル、右前（ＲＦ）チャネル及びセンター（Ｃ）チャネルを提供する３チャネル・レコーディングとしてフィルム・ミックスを生成することができる。その代わりに、ＬＦチャネル、ＲＦチャネル及びＣチャネルと共に後左（ＲＬ）チャネル及び後右（ＲＲ）チャネルを含む５チャネル・レコーディングとして、或いは或る環境ではこの５チャネル・レコーディングのチャネルと低周波数（ＬＦＥ）チャネルとを含む５．１チャネル・レコーディングとしてフィルム・ミックスを生成しても良い。
しかし、オーディオ・レコーディング又はフィルム・ミックスの聴取者は、オーディオ・レコーディング又はフィルム・ミックスが生成されたチャネルの数より少ないチャネルを支援するオーディオシステムを有する可能性がある。通常、これは、聴取者のオーディオシステムが２チャネル（即ち、ステレオ）再生だけを支援するときに、発生する。この場合、その様なレコーディングは、マルチチャネル信号を結合させ、或いはダウンミキシングして２チャネルにするコンバイナ（ダウンミキサー）を利用することによって２チャネル・レコーディングとして聴取者に提供される。ダウンミキシングは、例えば２チャネル・レコーディングが媒体（即ち、ＣＤ、ＤＶＤなど）で提供される符号器で行われて良い。ダウンミキシングは聴取者のオーディオシステムの復号器で行われても良く、その場合には復号器はマルチチャネル信号をダウンミキシングして２チャネル・ミックスにする。
マルチチャネル信号を２チャネルにダウンミキシングするとき、ダウンミキサーは通常は固定された混合係数を使用する。５チャネル・フィルム・レコーディングのために使われる一般的なダウンミキサーは、２つの後チャネルを、出力チャネルに対して逆位相に該２つの後チャネルを混合する前に、混合する。これにより、後チャネル中の信号を標準的フィルム復号器において後ろから再生させることができる。しかし、その音が左後ろからの音なのか、それとも右後ろからの音なのかということに関する情報は通常は失われる。
例えば５チャネル・ダウンミキシングのためのヨーロッパ規格を利用する古典音楽用の一般的ダウンミキサーは、位相を反転させずに２つの後チャネルを出力チャネルに直接混合する。このことは、後チャネルの左右方向性を保存できるが、信号が聴取者の背後から聞かれるように意図されていたという兆候を保存しない。その結果の混合は、ダウンミキシングされた信号を、２チャネル再生時にも標準的フィルム復号器を通して再生されるときにも、あたかも該信号が聴取者の前からのものであるかのように出現させる。
或るダウンミキサーは、例えば周辺入力信号が互いに反相関される場合に信号エネルギーを維持しようとする試みとして混合比を僅かに変動させることができる。しかし、例えば入力信号が複数の入力チャネル間でパンする場合などには、マルチチャネル信号の信号エネルギーと見かけ上の方向とは実質的には維持されない。
更に、標準的フィルム・ダウンミキサー及びヨーロッパ規格ダウンミキサーは、両方とも、後チャネルを出力チャネルに混合する前に後チャネルを３ｄＢ減衰させる。この減衰は、一方の後チャネルに加えられる音響効果の大きさを元の５チャネル混合より低くする可能性がある。この場合、後入力のエネルギーは出力チャネルにおいて維持されない。
上記の符号器／復号器に伴うもう一つの問題は、入力信号をダウンミキシングするときの音響事象（即ち、例えば楽器からの音や言葉の音節などの、はっきした始まりがあって、はっきりした終わりがあったり無かったりする音の短いバースト）の取り扱いにある。使用されるダウンミキシング・アルゴリズムは、特に反響があるときに、ダウンミキシングされた信号中の音響事象の強調を低下させる。上記のダウンミキサーは、音響事象を前チャネルにおいてダウンミキシングさせる。しかし、これらの音響事象は、前チャネルにダウンミキシングされると、聞こえにくくなったり或いは聞こえなくなることさえある。
更に、３つの前チャネルを２つの出力チャネルに混合するダウンミキサーには方向局所化の問題がある。即ち、左（又は右）前チャネルと中央チャネルとの中間から来るように知覚されるように３チャネル・レコーディングで混合された音響は、その３チャネル信号が２つのチャネルにダウンミキシングされて２つのスピーカーを通して再生されるときには異なる場所から来るものと知覚される。実際には、２チャネル・ダウンミキシングにおける音響イメージは、正確に中央と左との中間にあるのではなくて殆ど左スピーカー（又は右）にある。
従って、マルチチャネル・ミックスの所期の方向及び信号エネルギーを維持するダウンミキサーが必要である。更に、反響が存在するときに入力信号を適切に混合し、ダウンミキシング・プロセス中に入力信号中の音響事象を強調するダウンミキサーが必要である。
要約
複数の入力チャネルを有するマルチチャネル入力信号を、複数の出力チャネルを有する出力信号にダウンミキシングするために混合係数を生成するダウンミキサー・システムが提供される。入力信号のエネルギーと所期の方向とが出力信号において実質的に維持されるように、ダウンミキシングされた（出力）信号とダウンミキサーへの入力信号との間でのエネルギーの比較に応じて混合係数を作ることができる。入力信号の入力チャネルの数は、出力信号の出力チャネルの数より多くても等しくても良い。更に、或いはその代わりに、混合係数の生成は、例えば周辺入力チャネルで受信された入力信号の所期の方向を出力信号の少なくとも１つの出力チャネルにおいて維持することができる。この場合、その維持されている所期方向を、周辺チャネル情報を復号できるアップミキサーで利用して、周辺チャネル情報をアップミックスの周辺チャネルに置くことができる。
試験ダウンミキサー環境において混合係数を作ることができ、試験ダウンミキサーで受信された帯域幅限定された（即ち、フィルタリングされた）入力信号を用いて決定された入力及び出力信号エネルギーに応じて混合係数を作るために試験ダウンミキサー環境を利用することができる。そのとき、試験ダウンミキサーを用いて決定された混合係数を全帯域幅ダウンミキサーで利用することができる。
所定の混合係数値を検索することによって混合係数値を作ることができる。所定の混合係数値をダウンミキサーの記憶装置に例えば１次元又は２次元テーブルとしてテーブル・フォーマットで格納しておくことができる。それらのテーブルに入力エネルギーに対する出力エネルギーの比によってインデックスを付けることができる。入力信号をダウンミキシングしている間に実質的に同様の出力対入力比に遭遇したときには、入力信号をダウンミキシングするときに使用されるべき混合係数テーブルから１つ以上の混合係数を検索することが可能であろう。
複数の入力チャネルの入力エネルギーに応じて混合係数を作ることができる。入力チャネルのうちの少なくとも１つと入力チャネルのうちの別の少なくとも１つとのエネルギー比を決定することができ、この場合には混合係数生成はそのエネルギー比に応答する。混合係数生成は、１つ以上の混合係数値を増大させること、又は１つ以上の混合係数値を減少させることを含むことができる。更に、音響事象の始まりを検出することができ、その場合、混合係数生成は入力エネルギーと音響事象検出の始まりとに応答することができる。
以下の図面及び詳細な説明とを検討すれば、当業者にとっては、本発明の他のシステム、方法、特徴及び利点が明白であり、又は明白になるであろう。その様な付加的なシステム、方法、特徴及び利点がこの明細書に含まれ、本発明の範囲の中にあり、そして以下の請求項により保護されるべきことが意図されている。
好ましい実施態様の詳細な説明
複数の入力チャネルを有するマルチチャネル入力信号を複数の出力チャネルを有する出力信号にダウンミキシングするために混合係数を生成するダウンミキサー・システムが提供される。少なくとも複数の入力チャネルについて入力エネルギー・レベルを決定することができ、入力信号の信号エネルギーと所期の方向とが実質的に維持されるように入力エネルギー・レベル及び出力エネルギー・レベルの少なくとも一方の決定に応じて混合係数を生成することができる。出力チャネルのうちの少なくとも１つについて出力エネルギー・レベルを決定することができ、この場合、入力信号の信号エネルギーと所期の方向とが出力信号において維持されるように入力及び出力信号エネルギーに応じて混合係数を生成することができる。
出力信号の出力チャネルの数は、例えば３チャネル入力信号が２出力チャネル出力信号にダウンミキシングされるときなどには、入力信号の入力チャネルの数より少なくても良い。例えばダウンミキサーが周辺チャネル情報をダウンミキシングするために利用される場合、入力信号の入力チャネルの数は出力信号の出力チャネルの数に等しくても良い。
ダウンミキサーは、出力信号を聞く聴取者に、入力信号の見かけ上の方向及び相対的ラウドネスのほぼ正確な解釈を提供することができる。前チャネル及び周辺チャネル情報の両方を含む入力信号をダウンミキシングするときには、ダウンミキサーは、入力信号のエネルギーと所期の方向とを出力信号において維持するために前チャネル及び周辺チャネル情報を別々にダウンミキシングすることができる。ダウンミキシングされた周辺チャネル情報及びダウンミキシングされた前チャネル情報を結合させて（即ち、加え合わせて）入力信号の２チャネル・ミックスを作ることができる。
ダウンミキサーは、入力マルチチャネル信号を出力信号にダウンミキシングするとき、入力信号の前入力チャネルと周辺入力チャネルとのエネルギー比を変更することができる。このエネルギー比変更を利用して、マルチチャネル入力信号中に存在する反響のほぼ正確な解釈を出力信号に提供することができる。ダウンミキシングのためのエネルギー比変更を、混合係数調整を通して達成することができる。更に、音響事象（即ち、楽器からの音や言葉の音節（電話）など）などを強調するために混合係数を調整することができる。音響事象は、例えば左及び右の周辺チャネルなどの１つ以上の入力チャネルにおいて発生してダウンミキサーの出力信号に音響事象のほぼ正確な解釈を提供することができる。
３入力チャネルを有する入力信号と５．１入力チャネルを有する入力信号とを２出力チャネルを有する出力信号にダウンミキシングするダウンミキサーを以下で論じる。しかし、本書に記載されている教示内容を異なる数の入力チャネルを有する入力信号に適用することができ、それをダウンミキシングして３つ以上の出力チャネルを有する出力信号にすることができることは明らかであろう。
図１は、少なくとも３つの入力チャネルを含むマルチチャネル入力信号を入力チャネルの数より少ない数の出力チャネル（ここでは２つの出力チャネル）を含む出力信号にダウンミキシングすることのできるダウンミキシング装置の機能ブロック図である。図１に示されているように、ダウンミキサー１００は一般的に１０２で示されている全帯域幅ダウンミキサーを含んでおり、このダウンミキサーは、入力信号の信号エネルギーと所期の方向とが出力信号において実質的に維持されるように、生成された左及び右チャネル混合係数ｍｌ及びｍｒに応答してマルチチャネル入力信号を出力信号にダウンミキシングするためのものである。全帯域幅ダウンミキサー１０２は、例えば２０〜２０，０００周波数範囲などの広い周波数範囲にわたってダウンミキシングを行うことができる。他の周波数範囲も可能である。以下で記述するように、ダウンミキサー１００は更に試験ダウンミキサー１０４とコントローラ１０６とを含むことができ、この試験ダウンミキサー１０４とコントローラ１０６とを利用して試験混合係数値を作ることができ、これを用いて、入力信号の信号エネルギーと所期の方向とを出力信号において実質的に維持できるように全帯域幅ダウンミキサー１０２の左及び右混合係数ｍｌ及びｍｒを更新することができる。試験ダウンミキサーは、例えば７００〜４０００Ｈｚの周波数範囲などの限られた周波数範囲にわたって動作することができる。他の周波数範囲も可能である。試験ダウンミキサーの限られた動作周波数範囲は、聴取する人が特に敏感な周波数範囲を用いて全帯域幅ダウンミキサー１０２の混合係数を作ることを可能にするので、有利であろう。この様な混合係数生成方法は、聴取する人により知覚される入力信号の音の大きさを出力信号においてより正確に反映する混合係数生成を考慮することができる。
エネルギー及び所期の方向が試験混合係数を用いる試験ダウンミキサー１０４において実質的に維持されるので、試験混合係数値を全帯域幅ダウンミキサーで使用すれば全帯域幅ダウンミキサーにおける入力信号のエネルギー及び所期の方向を出力信号において実質的に維持することが可能となる。混合係数が試験ダウンミキサー１０４及びコントローラ１０６において生成されると、生成された値を利用して全帯域幅ダウンミキサー１０２の混合係数を更新することができる。
図１に示されているように、全帯域幅ダウンミキサー１０２は、ダウンミキシングされる３チャネル（例えば左入力チャネル（ＬＩ）、中央入力チャネル（ＣＩ）及び右入力チャネル（ＲＩ））を有する入力信号を２チャネル（例えば左出力（ＬＯ）チャネル及び右出力（ＲＯ）チャネル）を有する出力信号にダウンミキシングすることができる。
全帯域幅ダウンミキサー１０２は第１ミキサー１０８と第２ミキサー１１０とを含み、この第１及び第２のミキサーは、ＣＩチャネルをＬＩチャネル及びＲＩチャネルと混合するために、左チャネル混合係数ｍｌ及び右チャネル混合係数ｍｒを含む混合係数をそれぞれ指定する。ＣＩチャネルをＬＩチャネル及びＲＩチャネルと混合してＬ'チャネル及びＲ'チャネルをそれぞれ作ることができる。第１ミキサー１０８は、出力信号のＬＯチャネルを作るために、所望の移相をＬ'チャネルに与えるための第１移相器１１２と結合される。同様に、第２ミキサー１１０は、出力信号のＲＯチャネルを作るために、所望の移相をＲ'チャネルに加える第２移相器１１４と結合される。移相器１１２及び１１４は、Ｌ'及びＲ’のエネルギー及び振幅がどんな周波数でも影響を受けないように純粋な移相をＬ'及びＲ'チャネル情報に与えることができる。
試験ダウンミキサー１０４は、第１試験ミキサー１１６及び第２試験ミキサー１１８を含むことができる。第１試験ミキサー１１６は、限定帯域幅の（フィルタリングされた）ＬＩチャネル情報ＬＩＬｉｍ及びＣＩチャネル情報ＣＩＬｉｍの少なくとも一方を受信することができ、試験左チャネル混合係数ｍｌ'を用いてＬＩＬｉｍ及びＣＩＬｉｍチャネル情報を混合して限定帯域幅の試験ミキサー左出力チャネルＬＯＬｉｍを形成することができる。同様に、第２試験ミキサー１１８は、限定帯域幅のＲＩチャネル情報ＲＩＬｉｍ及びＣＩＬｉｍチャネル情報の少なくとも一方を受信することができ、試験右チャネル混合係数ｍｒ’を用いてＲＩＬｉｍ及びＣＩＬｉｍチャネル情報を混合して試験ミキサー１０４の限定帯域幅のＲＯ出力チャネルＲＯＬｉｍを形成することができる。
コントローラ１０６は、第１ミキサー１０８、第２ミキサー１１０、第１試験ミキサー１１６及び第２試験ミキサー１１８と結合されている。コントローラ１０６は、入力信号のＬＩ、ＣＩ及びＲＩチャネル情報のうちの１つ以上を受け取り、試験ダウンミキサー１０４で使用される例えばＬＩＬｉｍ、ＣＩＬｉｍ及びＲＩＬｉｍなどの限定帯域幅の（即ちフィルタリングされた）チャネル情報を決定することができる。コントローラ１０６は、更に、全帯域幅ダウンミキサー１０２からの出力チャネル情報ＬＯ及びＲＯ、及び／又は試験ミキサー１０４からの限定帯域幅の出力チャネル情報ＬＯＬｉｍ及びＲＯＬｉｍなどの出力チャネル情報を受け取ることができ、以下で記述するように試験ダウンミキサー１０４を用いて、例えば全帯域幅ダウンミキサー１０２の混合係数ｍｌ及びｍｒなどの１つ以上の混合係数の値を作ることができる。コントローラ１０６は、更に記憶装置１２０に結合されて良く、この記憶装置は、例えばダウンミキサーの動作中にワーキング・メモリー及び／又はプログラム・メモリーとしてコントローラ１０６により利用され得る１つ以上のメモリー装置を提供する。
図２は、マルチチャネル（即ち、＞２チャネル）入力信号（ここでは３チャネルを有する）を入力信号よりは少ないチャネル数（ここでは２チャネル）を有する出力信号にダウンミキシングするときのダウンミキサー１００の動作を示すフローチャートである。図２に示されているように、入力チャネル情報は全帯域幅ダウンミキサー１０２で例えばＬＩ、ＣＩ、及びＲＩチャネル情報として受信される２００。
コントローラ１０６は、後述するように例えば試験ダウンミキサー１０４を用いてＬＩ、ＣＩ及びＲＩチャネル情報を混合する第１ミキサー１０８及び第２ミキサー１１０により使用される混合係数ｍｌ及びｍｒの少なくとも一方を作ることができる２０２。全帯域幅ダウンミキサー１０２は、ＬＩ及びＣＩチャネルを第１ミキサー１０８で混合２０４してＬ'チャネルを
Ｌ’＝ＬＩ＋ｍｌ＊Ｃ （方程式１）
として形成することができる。
第１移相器１１２は所望の移相をＬ'チャネル情報に与えることができ２０６、その結果としてのチャネル情報は出力信号のＬＯチャネルとして提供される２１２。
同様に、第２ミキサー１１０はＲＩ及びＣＩチャネルを混合２０８してＲ'チャネルを
Ｒ’＝ＲＩ＋ｍｒ＊Ｃ （方程式２）
として形成することができる。
第２移相器１１４は、所望の移相をＲ'チャネル情報に与えることができ２１０、その結果としてのチャネル情報は出力信号のＲＯチャネルとして提供される２１２。
生成２０２は図２のフローチャート中の特定の場所で発生するものとして示されているけれども、混合係数の生成は全帯域幅ダウンミキサー１０２の動作中何時達成されても良く且つ／又は全帯域幅ダウンミキサー１０２の動作中複数の間隔を置いて達成されても良いことは明らかであろう。
混合係数ｍｌ及びｍｒは、全帯域幅ダウンミキサー102の動作中、同時に又は別々の時点で生成２０２されて良い。更に、或る状況では、全帯域幅ダウンミキサー１０２により利用される混合係数を１つだけ、ｍｌ又はｍｒ、生成することが望ましいであろう。更に、或いはその様にする代わりに、入力信号の混合中に例えば一定の時間間隔で(即ち、１．５ｍｓ又は１０ｍｓ毎に)定期的に、又は特定量の入力チャネル情報(即ち、６４サンプル又は６４０サンプルの入力チャネル情報)を処理した後に、生成２０２を達成することができる。一方又は両方の混合係数ｍｌ及びｍｒを生成すると、コントローラ１０６は、更新された混合係数の一方又は両方についての更新された値で第１及び／又は第２ミキサー１０８及び１１０を更新することができる。混合係数値のこの様な更新は入力信号を出力信号にダウンミキシングしている間、いつ行われても良い。
混合係数生成について図３のフローチャートと関連させて一般的に説明する。種々の条件について混合係数生成を説明するために、図３の文脈で図３〜８と、図１１〜１３のフローチャート及びグラフを論じる。
図３は、例えば左チャネル及び右チャネルの混合係数ｍｌ及びｍｒなどの混合係数の生成２０２を示すフローチャートである。混合係数生成は、例えば試験ミキサー１０４及びコントローラ１０６で行われても良い。図３に示されているように、例えば試験ダウンミキサー１０４を用いてコントローラ１０６によって入力チャネル・エネルギー及び出力チャネル・エネルギーの少なくとも一方を決定３００することができる。コントローラ１０６は、特に急速に変動する入力チャネル情報が存在するときに混合係数生成を例えば平滑化／安定化させるために１つ以上のフィードバック定数を決定３０２することができる。コントローラは、そのとき、チャネル・エネルギー及び／又はフィードバック定数に応じて試験混合係数ｍｌ'及びｍｒ’などの混合係数を生成３０４することができる。全帯域幅ダウンミキサー１０２の混合係数を試験混合係数の値で更新することができる。
後述するように、例えば７００〜４０００Ｈｚの周波数範囲内の可聴周波数を強調するようにＬＩ、ＣＩ及び／又はＲＩチャネル情報をフィルタリングすることによって、コントローラ１０６は通常は限定帯域幅入力信号情報を利用して混合係数値を生成する。フィルタリングは他の周波数範囲を強調しても良い。入力チャネルをフィルタリングすることによって、生成される混合係数が聴取する人により知覚される音の大きさをより正確に反映することを可能にすることができる。全帯域幅ダウンミキサー１０２は、通常は、例えば２０Ｈｚ〜２０ＫＨｚの広い周波数範囲にわたって入力信号をダウンミキシングすることのできる広帯域ダウンミキサーであるけれども、人の聴覚は例えば７００〜４０００Ｈｚ周波数範囲などの中間周波数のエネルギー内容に対して特に敏感であり、中間周波数範囲に応答して混合係数を決定することは、聴取する人が最も敏感な周波数で入力信号の大きさが維持されることを可能にするので、有利である。その代わりに、或いはそれに加えて、コントローラ１００は、全帯域幅入力チャネル情報(即ち、フィルタリングされていない入力チャネル情報)を用いて混合係数値を生成しても良い。
下で、種々の状況での１つ以上の混合係数の生成を論じる。例えば、図４〜６は、３チャネル入力信号を２チャネル出力信号にダウンミキシングするときに使用し得る混合係数を生成するために試験ダウンミキサー１０４を利用するコントローラ１０６の動作を示すフローチャートである。図７は、入力信号のエネルギー及び所期の方向が出力信号において実質的に維持されるように、特定の入力信号で図４〜６のフローチャートに従ってダウンミキサー１００により生成される混合係数を示すグラフである。図８は、入力信号のエネルギー及び所期の方向が出力信号において実質的に維持されるように、特定の入力信号について実験的に決定された理想的混合係数を示すグラフである。図７及び８のグラフを生成するときに使われる入力信号シナリオを、後述するように所定混合係数値を生成するときに利用することができる。他の入力信号シナリオを使っても良い。図１１〜１３は、５．１入力チャネルを２出力チャネルにダウンミキシングすることのできるダウンミキサーについての混合係数生成を示す。
図４〜６は、３チャネル入力信号を２チャネル出力信号にダウンミキシングするときに利用し得る図３の混合係数生成を示すフローチャートである。
図４は、入力及び出力チャネル・エネルギーの少なくとも一方を決定３００するときのコントローラ１０６及び試験ダウンミキサー１０４の動作を示すフローチャートである。図４に示されているように、ＬＩ、ＣＩ及びＲＩチャネル情報を含む入力チャネル情報はコントローラ１０６で受け取られる４００。受け取られる入力チャネル情報４００は、ＬＩ、ＣＩ及びＲＩチャネル情報の少なくとも１つを表わす入力信号として受け取られるオーディオ情報の１つ以上のディジタル信号サンプルを含むことができる。
入力チャネル情報は、コントローラ１０６によってフィルタリング４０２されて限定帯域幅入力チャネル情報ＬＩＬｉｍ、ＣＩＬｉｍ及びＲＩＬｉｍを形成することができる。例えば、入力チャネル情報は７００から４，０００Ｈｚまでの周波数範囲内の入力信号などの実質的可聴周波数を強調するようにフィルタリングされて良い。その後、限定帯域幅入力チャネル・エネルギーをコントローラ１０６によってＬＩ及びＲＩチャネルについてそれぞれ
ＥＬＩＬｉｍ＝ＬＩＬｉｍ ２＋ＣＩＬｉｍ ２ （方程式３）
ＥＲＩＬｉｍ＝ＲＩＬｉｍ ２＋ＣＩＬｉｍ ２ （方程式４）
として決定４０４することができる。
限定帯域幅ＬＯ及びＲＯチャネル情報ＬＯＬｉｍ及びＲＯＬｉｍを試験ダウンミキサー１０４において
ＬＯＬｉｍ＝ＬＩＬｉｍ＋ｍｌ’＊ＣＩＬｉｍ （方程式５）
ＲＯＬｉｍ＝ＲＩＬｉｍ＋ｍｒ’＊ＣＬＬｉｍ （方程式６）
として決定４０６することができる。
限定帯域幅出力チャネル・エネルギーをコントローラ１０６によってＬＯ及びＲＯチャネルについてそれぞれ
ＥＬＯＬｉｍ＝ＬＯＬｉｍ ２ （方程式７）
ＥＲＯＬｉｍ＝ＲＯＬｉｍ ２ （方程式８）
として決定４０８することができる。４０４及び４０８で決定された限定帯域幅入力及び出力チャネル・エネルギーは、通常は、コントローラ１０６で受け取られた入力チャネル情報の複数のサンプルにわたってコントローラ１０６により平均化される。この複数のサンプルは、受け取られた４００入力チャネル情報の例えば６４サンプルを含むことのできる第１期間を構成する。
限定帯域幅入力及び出力チャネル・エネルギーは、それぞれＥＬＩＳｕｍ、ＥＬＯＳｕｍ、ＥＲＩＳｕｍ、ＥＲＯＳｕｍチャネル・エネルギーとして平均化４１０され得るＬＩＬｉｍ、ＬＯＬｉｍ、ＲＩＬｉｍ及びＲＯＬｉｍチャネルについて総限定帯域幅エネルギーとして決定され、ここで
ＥＬＩＳｕｍ＝ＥＬＩＳｕｍ＋ＥＬＩＬｉｍ （方程式９）
ＥＲＩＳｕｍ＝ＥＲＩＳｕｍ＋ＥＲＩＬｉｍ （方程式１０）
ＥＬＯＳｕｍ＝ＥＬＯＳｕｍ＋ＥＬＯＬｉｍ （方程式１１）
ＥＲＯＳｕｍ＝ＥＲＯＳｕｍ＋ＥＲＯＬｉｍ （方程式１２）
である。
次に、平均化が完了したか否か判定４１２される。平均化が完了していないと判定４１２された場合には、フローは上で論じられた入力チャネル情報受け取り４００に戻る。しかし、第１期間が完了したと判定４１２された場合には、総限定帯域幅入力及び出力チャネル・エネルギーはそれぞれ総限定帯域幅左及び右チャネル入力及び出力エネルギーＥＩＮＬＬｉｍ、ＥＩＮＲＬｉｍ、ＥＯＵＴＬＬｉｍ及びＥＯＵＴＲＬｉｍとして決定４１４され、ここで
ＥＩＮＬＬｉｍ＝ＥＬＩＳｕｍ＋ＥＣＩＳｕｍ （方程式１３）
ＥＩＮＲＬｉｍ＝ＥＲＩＳｕｍ＋ＥＣＩＳｕｍ （方程式１４）
ＥＯＵＴＬＬｉｍ＝ＥＬＯＳｕｍ （方程式１５）
ＥＯＵＴＲＬｉｍ＝ＥＲＯＳｕｍ （方程式１６）
である。
入力及び出力チャネル・エネルギーの少なくとも一方が３００で決定されると、図５のフローチャートに従ってフィードバック定数を決定３０２することができる。
図５は、３チャネル入力信号を２つの出力チャネルにダウンミキシングする混合係数を生成するために少なくとも１つのフィードバック定数を決定するときのコントローラ１０６の動作を示すフローチャートである。５００で、総ＬＯチャネル・エネルギーＥＯＵＴＬＬｉｍが総限定帯域幅ＬＩチャネル・エネルギーＥＩＮＬＬｉｍより大きいか否か判定される。総限定帯域幅ＬＯエネルギーが総限定帯域幅ＬＩエネルギーより大きくはないと判定５００された場合には、左チャネル・フィードバック定数ｆｂｌをコントローラ１０６によって
ｆｂｌ＝０．９８＊ｆｂｌ （方程式１７）
として生成５０２することができる。左チャネル・フィードバック定数ｆｂｌを例えば値１に初期化することができる。他の、例えば０と１との間の値をフィードバック定数の初期値として利用しても良い。しかし、総限定帯域幅ＬＯチャネル・エネルギーが総限定帯域幅ＬＩチャネル・エネルギーより大きいと判定５００された場合には、左チャネル・フィードバック定数がコントローラ１０６によって
ｆｂｌ＝０．９８ｆｂｌ＋ｇｆｂ（（ＥＯＵＴＬＬｉｍ／ＥＩＮＬＬｉｍ）−１） （方程式１８）
として生成５０４され、ここでｇｆｂは値０．０４を持つことができる。例えばｇｆｂの値が大きいとフィードバック・ループが不安定となる可能性があり、ｇｆｂの値が小さいとフィードバック動作を実質的に減少させ或いはなくする可能性があるということなどを考慮してｇｆｂの値を実験的に選択することができる。
フィードバック定数を生成５０２し或いは生成５０４すると、総限定帯域幅ＲＯチャネル・エネルギーＥＯＵＴＲＬｉｍが総限定帯域幅ＲＩチャネル・エネルギーＥＩＮＲＬｉｍより大きいか否かが判定５０６される。総限定帯域幅ＲＯチャネル・エネルギーが総限定帯域幅ＲＩチャネル・エネルギーより大きくないと判定５０６された場合には、右チャネル・フィードバック定数ｆｂｒがコントローラ１０６によって
ｆｂｒ＝０．９８＊ｆｂｒ （方程式１９）
として生成５１０されて良い。ｆｂｒの値は最初は１としてセットされて良い。しかし、総限定帯域幅ＲＯチャネル・エネルギーが総限定帯域幅ＲＩチャネル・エネルギーより大きいと判定された場合には、右チャネル・フィードバック定数ｆｂｒはコントローラ１０６によって
ｆｂｒ＝０．９８ｆｂｒ＋ｇｆｂ（（ＥＯＵＴＲＬｉｍ／ＥＩＮＲＬｉｍ）−１） （方程式２０）
として生成５０８されて良い。
図示されてはいないけれども、フィードバック定数ｆｂｌ及びｆｂｒの一方又は両方を決定する前に、総限定帯域幅ＬＯチャネル・エネルギー、総限定帯域幅ＲＯチャネル・エネルギー、総限定帯域幅ＬＩエネルギー及び／又は総限定帯域幅ＲＩエネルギーをフィルタリング（例えばローパス・フィルタリング）できることは明らかであろう。このフィルタリングをコントローラ１０６において例えばローパス・フィルタリングとして達成することができる。このローパス・フィルタリングは、例えば、７０ｍｓの時定数を利用することができる。他の時定数を利用しても良い。更に、このフィルタリングの少なくとも一部はコントローラ１０６によって実行されなくても良く、ハードウェア装置として具体化された１つ以上のフィルターによってフィルタリングを達成しても良いことは明らかであろう。
図３に戻ると、フィードバック定数を決定３０２するとき、図６のフローチャートに関して記載されたように１つ以上の試験混合係数をコントローラ１０６によって生成３０４することができる。図６に示されているように、試験左チャネル混合係数ｍｌ'をコントローラ１０６によって
ｍｌ’＝０．７１＋ｆｂｌ＊ｌｆ＋ｆｂｒ＊ｒｆ （方程式２１）
として生成６００することができ、ここでｆｂｌ及びｆｂｒは図５に関して上で決定された値を有し、ｌｆは−１の値を有し、ｒｆは０．３の値を有する。ｌｆ及びｒｆの値を用いて試験混合係数ｍｌ'及びｍｒ'をそれぞれバイアスすることができる。３チャネル信号がダウンミキシングされて２チャネルを通して再生されるときには、例えば局所化（即ち、所期の方向）の微細なエラーを補償するためにｌｆ及びｒｆを用いて試験混合係数をバイアスすることができる。ｆｌ及びｒｆの他の値を利用しても良い。
試験左チャネル混合係数ｍｌ'の値を生成６００した後、試験混合係数ｍｌ'の値を０と１との間の値に限定することができる。例えば、ｍｌ'が０未満であると決定された場合には、ｍｌ'は値０にセットされ、ｍｌ’が１より大きいと決定された場合にはｍｌ'は値１にセットされる。
次に試験右チャネル混合係数ｍｒ'をコントローラ１０５によって
ｍｒ’＝．７１＋ｆｂｌ＊ｒｆ＋ｆｂｒ＊ｌｆ （方程式２２）
として生成６０４することができ、ここでｆｂｌ、ｆｂｒ、ｒｆ及びｌｆは、生成６００に関して上で論じられた値を有する。
試験混合係数ｍｒ’が生成された後、ｍｒ’の値を０と１との間の値に限定６０６することができる。例えば、試験混合係数ｍｒ’が０未満であると決定された場合、ｍｒ’を値０にセットすることができ、試験混合係数ｍｒ’が１より大きいと決定された場合にはｍｒ’を値１にセットすることができる。
試験ダウンミキサー１０４で受信された限定帯域幅入力信号のエネルギー及び所期の方向を試験ミキサーの出力信号において実質的に維持するために、例えばフィードバック定数ｆｂを用いて試験ミキサー・ダウンミキサー左及び右混合係数ｍｌ’及びｍｒ’が決定されている。エネルギー及び所期の方向が試験混合係数を用いる試験ダウンミキサー１０４で実質的に維持されるので、試験混合係数値は、もし全帯域幅ダウンミキサー１０２で使用されれば、全帯域幅ダウンミキサーにおける入力のエネルギー及び所期の方向が出力信号において実質的に維持されることを可能にする。試験混合係数値ｍｌ’及びｍｒ’を用いて、全帯域幅ダウンミキサー１０２で使用される混合係数値ｍｌ及びｍｒを更新６０８することができる。
更新６０８は、ｍｌの値をｍｌ’の値と取り替えることによって第１ミキサー１０２の左チャネル混合係数ｍｌを試験左チャネル混合係数ｍｌ’の値で更新するコントローラ１０６によって達成され得る。同様に、ｍｒの値をｍｒ’の値と取り替えることによって第２ミキサー１０４の右チャネル混合係数ｍｒを試験右チャネル混合係数ｍｒ’の値で更新するコントローラ１０６によって右チャネル混合係数ｍｒを更新することができる。
これに加えて、或いはその代わりに、混合係数が実際に信号を出力する全帯域幅ダウンミキサーで使用される前に混合係数を平滑化することによって左及び右チャネル混合係数をコントローラ１０６によって更新６０８することができる。この平滑化は、ｍｌ及びｍｒの新しい値の計算の間の時間に行われて良い。例えば、計算された値ｍｌ’に近づけるように全帯域幅ダウンミキサーにおけるｍｌの値を約０．５秒毎に変更（即ち、更新）することができる。この変更は、ｍｌ’の他の値が試験ダウンミキサー１０４で決定される前に全帯域幅ダウンミキサーにおいてｍｌがｍｌ’の値に到達するように、行われる。混合係数値ｍｒが試験混合係数値ｍｒ’で更新されることに関しても、同じであって良い。
この様に、左及び右チャネル混合係数ｍｌ及びｍｒを全帯域幅ダウンミキサー１０２のために生成３０４することができる。
図７は、ＣＩ及びＬＩチャネルに与えられた単一の入力信号について図４〜６のフローチャートに従ってダウンミキサー１００により生成され得る混合係数のグラフである。図７のグラフはＬＩ及びＣＩチャネルの間を滑らかにパンニングされた単一の信号により生成されており、この場合、入力信号の所期の方向は精密に分かっている。図８は、３チャネル信号がダウンミキシングされて２チャネルを通して再生されるときの局所化の微細なエラーを補償するために実験的に得られたパンニング角度の関数としての混合係数のグラフである。図８のグラフは計算された理想的な場合を示しており、この場合にはＬＩ及びＣＩチャネルの間を滑らかにパンニングされる単一の信号があり、入力信号の所期の方向は正確に分かっている。左チャネル混合係数ｍｌ値は図９及び１０において破線を用いて示されており、右チャネル混合係数ｍｒ値は図９及び１０において実線を用いて示されている。
例えばｍｌ及びｍｒなどの混合係数は、入力チャネル・エネルギーに応じて所定の値として生成２０２されて良く（図２）、リアルタイムで生成される必要はない。この様な方式は、試験ダウンミキサーからの周波数限定された入力及び出力エネルギーを１つ以上の１次元又は２次元の参照用テーブルへの入力として利用することができる。ダウンミキサーの動作についての先の説明から明らかであるように、混合係数は、入力エネルギーの出力エネルギーに対する比に依存して良い。試験ダウンミキサーにより決定された出力／入力エネルギー比が入力である参照用テーブルを用いてｍｌ及びｍｒなどの混合係数を直接導出することができる。
例えば混合係数ｍｌ及びｍｒなどの、この様な参照用テーブルに格納される所定混合係数を生成するために、コントローラ１０６と例えばダウンミキサー１０２又は試験ダウンミキサー１０４などのダウンミキサーとを利用することができ、この場合、特定の入力信号シナリオ（即ち、例えば図８のグラフを生成するために使用されたＣＩからＬＩへの滑らかなパンニングの特性を有する）についての入力信号をダウンミキサーにより処理して、出力エネルギーと、その入力信号シナリオに由来する入力エネルギーとの比を決定することができる。その後、入力信号の所期方向における信号エネルギーが出力（ダウンミキシングされた）信号において実質的に維持されるように前記の特定の入力信号シナリオで利用できる例えば混合係数ｍｌ及びｍｒなどの少なくとも１つの混合係数を決定するために該ダウンミキサー及びコントローラ１０６を利用することができる。例えば図４〜６に関して上で論じたように混合係数を生成することができる。
特定の入力信号シナリオについての出力及び入力エネルギーの比を表のフォーマットで記憶装置１２０に格納することができる。その様な表のフォーマットは、例えば、１つ以上の入力信号シナリオについて出力エネルギーの入力エネルギーに対する比によりインデックスが付けられた混合係数ｍｌ及びｍｒを含むことができる。例えば、特定の入力信号シナリオについてｍｌについての混合係数テーブルを設け、出力エネルギーの入力エネルギーに対する比によってインデックスを付けることができる。同様に、その特定の入力信号シナリオについてｍｒについての混合係数テーブルを設け、出力及び入力信号エネルギーの比によってインデックスを付けることができる。
動作時には、コントローラ１０６は、特定の入力信号シナリオを検出し、出力及び入力エネルギーの比を決定し、その比に基づいて、その入力信号シナリオについての信号をダウンミキシングするためにダウンミキサーにより使用されることになる例えば混合係数ｍｌ及びｍｒなどの少なくとも１つの混合係数について参照値を決定することができる。検索される混合係数は、入力信号の入力エネルギーと所期の方向とが出力信号において実質的に維持されることを可能にする。コントローラは、例えば図６の更新６０８に関して上で論じたのと同様の態様でダウンミキサーの混合係数値を検索された混合係数値で更新することができる。
この様に、所定の混合係数シナリオのライブラリーを決定して、例えば記憶装置１２０に格納することができる。このライブラリーは混合係数についての混合係数テーブルを含むことができ、その各混合係数テーブルは、出力エネルギーの入力エネルギーに対する比によってインデックスが付けられている１つ以上の混合係数を提供する。他の混合係数テーブル構成も可能である。混合係数ライブラリーは、特定の入力信号シナリオについての混合係数値を検索するコントローラによってアクセスされて良い。
所定混合係数生成は、図６〜８に関して上に記載されている混合係数生成と関連して利用され得る。例えば、コントローラは、混合係数ライブラリーがそれについての所定混合係数を含むような特定の入力信号シナリオについての必要条件を入力信号が満たすか否か確認しようと試みることができる。それについての混合係数が格納されている入力信号シナリオのうちの１つに入力信号が適合するとコントローラ１０６が判定した場合、コントローラは、上記のように混合係数ライブラリーから適切な混合係数を検索することによって混合係数を生成することができる。しかし、入力信号が格納されている入力信号シナリオについての基準を満たさないと判定した場合には、コントローラは、試験ミキサー１０４と関連して、ダウンミキサーのための混合係数を生成する。
これに加えて、或いはその代わりに、所定混合係数が役に立つ入力信号シナリオ（即ち、ダウンミキサーにおいて入力信号で繰り返し受信される入力信号シナリオ）についての特徴をコントローラが確認することを可能にする学習アルゴリズムをコントローラは使用することができる。その様な場合には、コントローラは、その特定の入力信号シナリオについての、記憶装置１２０に格納されている混合係数値を決定するために試験ダウンミキサーを使用することができる。その後に入力信号シナリオを認識するとき、コントローラ１０６は、そのシナリオについての混合係数を、混合係数テーブルから混合係数を検索することによって、生成することができる。
上記のように混合係数を検索することによって混合係数値を生成することにより、コントローラは、図４〜６に関して上で記述されたように混合係数を生成するために要するよりも少ないダウンミキサー資源要求量で入力信号エネルギー及び所期の方向が出力信号において維持されることを可能にする混合係数値を生成することができる。ダウンミキサー資源はダウンミキサーの他の動作で使用され得るように開放されて良い。
図９は、本発明によるダウンミキサー９００のブロック図である。ダウンミキサー９００は，３つ以上のチャネルを含むマルチチャネル入力信号を受け取って、そのマルチチャネル入力信号を、入力信号のチャネル数より少ない数のチャネルを含む出力信号にダウンミキシングすることができる。ダウンミキサー９００は、入力信号のエネルギーと所期の方向とが出力信号において実質的に維持されるように前チャネル左及び右混合係数ｍｌ及びｍｒ、並びに周辺チャネル混合係数ｍｉ及びｍｓのうちの少なくとも１つを利用して５．１チャネル入力信号を２チャネル出力信号にダウンミキシングするための全帯域幅ダウンミキサー９０１を含む。ダウンミキサー９００は、更に、前チャネル左及び右混合係数ｍｌ及びｍｒを生成するときにコントローラ９４０と関連して利用され得る試験ダウンミキサー１０４’を含む。混合係数ｍｌ及びｍｒが図１の試験ミキサー１０４及びコントローラ１０６により生成されるのと同様に前チャネル混合係数ｍｌ及びｍｒは生成され得るので、試験ミキサー１０４’の動作については詳しく論じない。ダウンミキサー９００は、入力信号の信号エネルギー及び所期の方向が全帯域幅ダウンミキサー９０１の出力信号において実質的に維持されるように例えば周辺混合係数ｍｉ及びｍｓなどの周辺混合係数のうちの１つ以上を生成するときにコントローラ９４０と共に利用され得る試験ダウンミキサー９５０を更に含む。
図９に示されているように、前左入力（ＬＩ）、前中央入力（ＣＩ）、前右入力（ＲＩ）、低周波数（ＬＦＥ）、左周辺入力（ＬＳＩ）及び右周辺入力（ＲＳＩ）チャネルがダウンミキサー９００で受信され得る。ダウンミキサー９００は、入力信号の５．１入力チャネルを、例えば２出力チャネル即ち左出力（ＬＯ）及び右出力（ＲＯ）チャネルを含む出力信号にダウンミキシングすることができる。
全帯域幅ダウンミキサー９０１は、ＬＩ、ＣＩ及びＬＦＥチャネルを混合するための第１ＬＩミキサー９０２と、入力信号のＲＩ、ＣＩ及びＬＦＥ入力チャネルを混合するための第１ＲＩミキサー９０４とを含むことができる。第１ＬＩミキサー９０２及び第１ＲＩミキサー９０４でＣＩチャネルを混合する前にＣＩ入力信号に前左及び右チャネル混合係数ｍｌ及びｍｒをそれぞれ掛けるために掛け算器９０６及び９０８を利用することができる。第２ＬＩミキサー９０１０は、周辺チャネルＬＳＩ及びＲＳＩの一方又は両方の成分をＬＩ’チャネル情報に加えることを可能にすることができ、ＬＯ’チャネル情報を形成するために所望の移相を達成するようにＬＩ移相器９１２を設けることができる。同様に、一方又は両方の周辺チャネルＬＳＩ及びＲＳＩの成分をＲＩ’チャネル情報に加えるために第２ＲＩミキサー９１４を設けることができ、ＲＯ’チャネル情報を形成するために所望の移相を達成するようにＲＩ移相器９１６を設けることができる。
ＲＳＩチャネルの成分をＬＳＩチャネルに加えるためにＬＳＩミキサー９１８を設けることができ、ＬＳＩ混合係数（例えば、ＬＯチャネルの虚数成分ＳＬＩ’に対応するｍｉ周辺混合係数など）を供給するために掛け算器９２２を設けることができる。ＬＳＯ’チャネル情報を形成するためにＬＳＩ’チャネル情報に所望の移相を与えるようにＬＳＩ移相器９２４を設けることができる。同様に、ＬＳＩチャネルの成分をＲＳＩチャネルに加えるためにＲＳＩミキサー９３０を設けることができ、掛け算器９３２はｍｉ周辺混合係数を供給することを可能にし、ＲＳＯ’チャネル情報を形成するようにＲＳＩ’チャネル情報に所望の移相を与えるためにＲＳＩ移相器９３４を利用することができる。
ｍｓ周辺混合係数を供給するために掛け算器９１９及び９２１を設けることができる。例えば、それぞれの前チャネル出力経路に（例えば、それぞれＬＩ’及びＬＯ’信号に）加えられるＬＳＩ及びＲＳＩチャネルの量を制御するためにｍｓ周辺混合係数を利用することができる。
ＬＳＯ’及びＬＯ’チャネル情報を混合して出力信号の出力チャネルＬＯを形成するためにＬＯミキサー９３６を設けることができる。同様に、ＲＯ’及びＲＳＯ’チャネル情報を混合して出力信号のＲＯ出力チャネルを形成するためにＲＯミキサー９３８を利用することができる。
試験ダウンミキサー９５０は第１試験加算器９５２及び第２試験加算器９５４を含むことができる。第１試験加算器９５２は、試験ミキサー９５０において試験周辺混合係数ｍｉ’及びｍｓ’を供給するために、第１試験ミキサー９５６及び第２試験ミキサー９５８と結合されている。同様に、第２試験加算器９５４は、試験ダウンミキサー９５０において試験周辺混合係数ｍｓ’及びｍｉ’をそれぞれ供給することのできる第３試験ミキサー９６０及び第４試験ミキサー９６２と更に結合されている。
コントローラ９４０は、試験ダウンミキサー１４０’及び９５０を利用して混合係数ｍｌ、ｍｒ、ｍｓ、及びｍｉのうちの１つ以上を生成し且つ／又は更新するために、例えばＬＳＩ、ＬＩ、ＣＩ、ＬＦＥ、ＲＩ及びＲＳＩ入力チャネルなどの入力チャネルのうちの１つ以上、並びに全帯域幅ダウンミキサー９０１の掛け算器９０６、９０８、９１９、９２１、９２２及び９３２のうちの１つ以上と結合されて良い。混乱を減少させるために、コントローラ９４０と掛け算器９０６、９０８、９１９、９２１、９２２及び９３２との結合は破線で示されている。
第１試験加算器９５２は、試験ダウンミキサー９５０において受信されて０．９１のファクターで減衰されたＬＳＩＬｉｍとして限定帯域幅（即ちフィルタリングされた）ＬＳＩチャネル情報を受け取ることができる。第１試験加算器９５２は、更に、反転されて相互相関ファクター−０．３８を乗じられたＲＳＬＬｉｍとしてＲＳＩ限定帯域幅チャネル情報を受け取り、これを減衰されたＬＳＩＬｉｍ信号と加え合わせることができる。その結果としての第１試験加算器９５２からのチャネル情報を、試験周辺混合係数ｍｉ’及びｍｓ’に従って第１及び第２の試験ミキサー９５６及び９５８において混合して試験ミキサー９５０出力チャネル情報ＬＳＯ−ＩｍＬｉｍ及びＬＳＯ−ＲｅＬｉｍをそれぞれ生成することができる。同様に、第２試験加算器９５４は、０．９１のファクターで減衰された反転されたＲＳＩＬｉｍチャネル情報を、相互相関ファクター−０．３８を乗じられたＬＳＩＬｉｍチャネル情報と加え合わせることができる。その結果としてのチャネル情報を、第３及び第４試験ミキサー９６０及び９６２において試験周辺混合係数ｍｓ’及びｍｉ’に従って混合して試験ミキサー９５０出力チャネル情報ＲＳＯ−ＲｅＬｉｍ及びＲＳＯ−ＩｍＬｉｍをそれぞれ生成することができる。
コントローラ９４０を、更に、試験ダウンミキサー１０４’、第１、第２、第３及び第４試験ミキサー９５６、９５８、９６０及び９６２と結合することができる。コントローラ９４０は、入力信号のＬＩ、ＣＩ、ＲＩ、ＬＦＥ、ＬＳＩ及びＲＳＩチャネル情報のうちの１つ以上を受け取ることができ、また、例えば試験ダウンミキサー９５０で使用されるＬＳＩＬｉｍ及びＲＳＩＬｉｍなどの限定帯域幅（即ちフィルタリングされた）チャネル情報を決定することができる。コントローラ９４０は、更に、例えば全帯域幅ダウンミキサー９０１からの出力チャネル情報ＬＯ及びＲＯ及び／又は試験ダウンミキサー９５０からの限定帯域幅出力チャネル情報ＬＳＯ−ＩＭＬｉｍ、ＬＳＯ−ＲＥＬｉｍ、ＲＳＩ−ＲＥＬｉｍ及びＲＳＩ−ＩＭＬｉｍチャネル情報などの出力チャネル情報を受け取ることができると共に、下で記載するように試験ダウンミキサー９５０を用いて例えば混合係数ｍｌ、ｍｒ、ｍｉ及びｍｓなどの１つ以上の混合係数を生成することができる。更に、コントローラ９４０をコントローラ９４０のためのワーキング・メモリー及びプログラム・メモリーを提供する記憶装置９４２と結合することができる。ダウンミキサー９００の動作を図１０のフローチャートを参照して論じる。
図１０は、図９のダウンミキサー９００の動作を示すフローチャートである。図１０に示されているように、例えば、入力信号のＬＳＩ、ＬＩ、ＣＩ、ＬＦＥ、ＲＩ及びＲＳＩチャネルのための情報を含む入力チャネル情報が受け取られる１０００。図１１〜１３及び１４〜１７を参照して後述するように入力チャネル情報のうちの少なくとも１つに応答して、コントローラ９４０及び試験ダウンミキサー９５０を用いて１つ以上の混合係数を作る１００２ことができる。図３及び図４〜６を参照して上で論じたように、ＬＩ、ＣＩ、ＬＦＥ及びＲＩチャネル情報を同様に混合１００４することができる。更に、ＬＦＥチャネルの情報を、第１ＬＩ及びＲＩミキサー９０２及び９０４でそれぞれ混合する前に、例えば２のファクターで、増幅することができる。更に、ＣＩチャネル情報が第１ＬＩ及びＲＩミキサー９０２及び９０４で混合される前に、掛け算器９０６及び９０８を用いてＣＩチャネル情報は例えば前左及び右チャネル混合係数ｍｌ及びｍｒなどの１つ以上の混合係数を供給することができる。第１ＬＩミキサー９０２はＬＩ’チャネル情報を作り、第１ＲＩミキサー９０４はＲＩ’チャネル情報を作る。例えば、図３〜１１に関して上で論じられたのと同様の態様で、混合係数ｍｌ及びｍｒを作る目的でＬＩ’及びＲＩ’チャネル情報を左及び右出力信号として利用することができる。
第２ＬＩミキサー９１０及び第２ＲＩミキサー９１４をそれぞれ用いてＬＳＩ及びＲＳＩチャネルの成分をＬＩ’及びＲＩ’チャネル情報に加える１００６ことができる。例えば、ＬＳＩチャネル情報を、第２ＬＩミキサー９１０でＬＩ’チャネル情報と混合する前に、掛け算器９１９で混合係数ｍｓと掛け合わせることができる。同様に、ＲＳＩチャネル情報を、第２ＲＩミキサー９１４でＲＩ’チャネル情報と混合する前に、掛け算器９１９で混合係数ｍｓと掛け合わせることができる。前チャネル情報についての所望の移相をＬＩ移相器９１２及びＲＩ移相器９１６によって提供１００８してＬＯ’及びＲＯ’チャネル情報をそれぞれ形成することができる。
混合１００４、加算１００６及び提供１００８と同時に、又はその後に、ＲＳＩ及びＬＳＩチャネルの成分を加え合わせる１０１０ことができる。例えば、ＲＳＩチャネルを、インバータ９２７で反転させ、掛け算器９２８で例えば−０．３８の相互相関ファクターを乗じ、ＬＳＩミキサー９１８でＬＳＩチャネル情報と混合することができる。ＬＳＩミキサー９１８での混合の前に、ＬＳＩチャネル情報を掛け算器９２９で例えば０．９１などのファクターで減衰させることができる。同様に、掛け算器９３１を用いてＬＳＩチャネル情報に例えば−０．３８の相互相関ファクターを乗じ、ＲＳＩミキサー９３０でＲＳＩ信号と混合してＬＳＩチャネルの成分をＲＳＩチャネルに加算することができる。ＲＳＩミキサーでの混合の前に、ＲＳＩチャネルを掛け算器９３３で例えば０．９１のファクターで減衰させることができる。
ＬＳＩミキサー９１８及びＲＳＩミキサー９３０からのチャネル情報に混合係数ｍｉを乗じる１０１２ことによってそれぞれの混合係数を供給してＬＳＩ’及びＲＳＩ’チャネル情報をそれぞれ形成することができる。
周辺チャネルについて任意の所望移相を提供１０１４することができる。例えば、ＬＳＩ移相器９２４でＬＳＩ’チャネル情報に移相を与えてＬＳＯ’チャネル情報を形成することができ、ここで位相はＬＩ移相器９１２により与えられる位相に対して９０度オフセットされる。同様に、ＲＳＩ’チャネル情報の位相をＲＳＩ移相器９３４で変化させてＲＳＯ’チャネル情報を形成することができ、ここで移相はＲＩ移相器９１６により使用されるそれに対して９０度オフセットされる。
その後、周辺チャネル情報と前チャネル情報とは混合１０１６される。例えば、ＬＯミキサー９３６でＬＳＯ’チャネル情報をＬＯ’チャネル情報と混合して出力信号のＬＯチャネルを形成することができ、ＬＯチャネルを提供１０１８することができる。同様に、ＲＳＯ’チャネル情報をＲＯミキサー９３８でＲＯ’チャネル情報と混合して出力信号のＲＯチャネルを形成することができ、ＬＯチャネルを提供１０１８することができる。
混合係数を作るステップは図１０のフローチャートの特定の場所に示されているけれども、例えばｍｌ、ｍｒ、ｍｉ、及びｍｓなどの１つ以上の混合係数をダウンミキサー９００の動作中の任意の時点でコントローラ９４０により作ることができることは明らかであろう。更に、全ての混合係数を必ずしも同時に作る必要はなく、ダウンミキサー９００の動作中のまちまちの時点で作ることができる。前左及び右チャネル混合係数ｍｌ及びｍｒは、図３及び図４〜６に関して上で論じたのと同様の態様でコントローラ９４０及び試験ダウンミキサー１０４’を用い作ることができるので、詳しくは論じない。更に、前チャネル混合係数ｍｌ及びｍｒについての混合係数生成は、周辺混合係数ｍｉ及びｍｓの混合係数生成とは別に達成できる。
例えば図３のフローチャート及び図１１〜１３及び１４〜１７のフローチャートに関して論じたように、コントローラ９４０により試験ミキサー９５０を用いて周辺混合係数ｍｉ及びｍｓの生成を生成することができる。図３に示されているように、入力及び出力チャネル・エネルギーの少なくとも一方を決定３００することができる。入力及び出力チャネル・エネルギーの少なくとも一方の決定３００を図１１のフローチャートに関して論じる。
図１１は、例えば試験周辺混合係数ｍｉ’及びｍｓ’などの少なくとも１つの試験周辺混合係数の生成に用いられる入力チャネル・エネルギーを決定するときのコントローラ９４０の動作を示すフローチャートである。図１１に示されているように、ＬＳＩ及びＲＳＩチャネルのための入力チャネル情報は、図４の受け取り４００に関して上で論じられたのと同様の態様で例えば入力信号の信号サンプルとしてコントローラ９４０で受け取られる１１００。
限定帯域幅入力チャネル情報ＬＳＩＬｉｍ及びＲＳＩＬｉｍチャネル情報を生成するために入力チャネル情報をコントローラ９４０によってフィルタリング１１０２することができる。図４のフィルタリング４０２に関して上で論じられたのと同様の態様で、例えば周波数及び７００〜４０００Ｈｚ周波数範囲を強調する有限インパルス応答フィルターを利用して入力チャネル情報をフィルタリング１１０２することができる。
限定帯域幅出力チャネル情報を試験ダウンミキサー９５０においてＬＳＯ実数及び虚数チャネル情報ＬＳＯ−ＲｅＬｉｍ及びＬＳＩ−ＩｍＬｉｍ並びにＲＳＯ実数及び虚数チャネル情報ＲＳＯ−ＲｅＬｉｍ及びＲＳＯ−ＩｍＬｉｍとして
ＬＳＯ−ＲｅＬｉｍ＝ｍｓ’＊ＬＳＩＬｉｍ （方程式２３）
ＬＳＯ−ＩｍＬｉｍ＝ｍｉ’＊（０．９１＊ＬＳＩＬｉｍ＋．３８＊ＲＳＩＬｉｍ）
（方程式２４）
ＲＳＯ−ＲｅＬｉｍ＝ｍｓ’＊ＲＳＩＬｉｍ （方程式２５）
ＲＳＯ−ＩｍＬｉｍ＝ｍｉ’＊（−．９１＊ＲＳＩＬｉｍ−．３８＊ＬＳＩＬｉｍ）
（方程式２６）
として決定１１０４することができ、ここでｍｓ’及びｍｉ’は０．７の値に初期化される。限定帯域幅入力チャネル・エネルギーをコントローラ９４０によりＬＳＩエネルギー及びＲＳＩエネルギーについてそれぞれＥＬＳＩＬｉｍ及びＥＲＳＩＬｉｍとして決定１１０６することができ、ここで
ＥＬＳＩＬｉｍ＝ＥＬＳＩ２ Ｌｉｍ （方程式２７）
ＥＲＳＩＬｉｍ＝ＥＲＳＩ２ Ｌｉｍ （方程式２８）
である。
コントローラ９４０によって、限定帯域幅出力チャネル・エネルギーをＬＳＯチャネル・エネルギーの実数及び虚数成分ＥＬＳＯ−ＲｅＬｉｍ及びＥＬＳＯ−ＩｍＬｉｍ、並びにＲＳＯチャネル・エネルギーの実数及び虚数ＥＲＳＯ−ＲｅＬｉｍ及びＥＲＳＯ−ＩｍＬｉｍとして決定１１０８することができ、ここで
ＥＬＳＯ−ＲｅＬｉｍ＝ＬＳＯ−Ｒｅ２ Ｌｉｍ （方程式２９）
ＥＬＳＯ−ＩｍＬｉｍ＝ＬＳＯ−Ｉｍ２ Ｌｉｍ （方程式３０）
ＥＲＳＯ−ＲｅＬｉｍ＝ＲＳＯ−Ｒｅ２ Ｌｉｍ （方程式３１）
ＥＲＳＯ−ＩｍＬｉｍ＝ＲＳＯ−Ｉｍ２ Ｌｉｍ （方程式３２）
である。
例えば平均化４１０に関して上で論じたのと同様の態様でコントローラ９４０によって限定帯域幅入力及び出力チャネル・エネルギーをＬＳＩ、ＲＳＩ、ＬＳＯ及びＲＳＯ平均エネルギーＥＬＳＩＳｕｍ、ＥＲＳＩＳｕｍ、ＥＬＳＯＳｕｍ、及びＥＲＳＯＳｕｍとして平均化１１１０することができ、ここで
ＥＬＳＩＳｕｍ＝ＥＬＳＩＳｕｍ＋ＥＬＳＩＬｉｍ （方程式３３）
ＥＲＳＩＳｕｍ＝ＥＲＳＩＳｕｍ＋ＥＲＳＩＬｉｍ （方程式３４）
ＥＬＳＯＳｕｍ＝ＥＬＳＯＳｕｍ＋ＥＬＳＯ−ＲｅＬＩｍ＋ＥＬＳＯ−ＩｍＬｉｍ
（方程式３５）
ＥＲＳＯＳｕｍ＝ＥＲＳＯＳｕｍ＋ＥＲＳＯ−ＲｅＬｉｍ＋ＥＲＳＯ−ＩｍＬｉｍ
（方程式３６）
である。
平均化が完了したか否か判定１１１２することができる。平均化が完了していなければ、フローは受け取り１１００に戻る。平均化が完了したと判定１１１２されたならば、コントローラによって総限定帯域幅入力及び出力チャネルをそれぞれＥＩｎＬｉｍ及びＥＯｕｔＬｉｍとして
ＥＩｎＬｉｍ＝ＥＬＳＩＳｕｍ＋ＥＲＳＩＳｕｍ （方程式３７）
ＥＯｕｔＬｉｍ＝ＥＬＳＯＳｕｍ＋ＥＲＳＯＳｕｍ （方程式３８）
として決定１１１４することができる。
図３に戻ると、入力及び出力チャネル・エネルギーの少なくとも一方を決定３００するとき、フィードバック定数を決定３０２することができる。フィードバック定数の決定３０２について図１２のフローチャートに関して論じる。
図１２は、例えば試験周辺チャネル混合係数ｍｉ’及びｍｓ’などの、試験ダウンミキサー９５０についての試験混合係数を決定するときに使用され得るフィードバック定数ｆｂｓｉを決定するときのコントローラ９４０の動作を示すフローチャートである。図１２に示されているように、例えば、１１１４で決定された限定帯域幅入力及び出力エネルギーをコントローラ９４０によってフィルタリング１２００してフィルタリング済み入力及び出力限定帯域幅エネルギーＳＩＮＬｉｍ及びＳＯＵＴＬｉｍを
ＳＩＮＬｉｍ＝．９８＊ＳＩＮＬｉｍ＋．０２＊ＥＩＮＬｉｍ （方程式３９）
ＳＯＵＴＬｉｍ＝．９８＊ＳＯＵＴＬｉｍ＋．０２＊ＥＯＵＴＬｉｍ
（方程式４０）
として形成することができる。このフィルタリングはローパス・フィルタリングであって良く、例えば７０ｍｓの時定数を有するフィルターを利用して達成されて良い。他の時定数を利用しても良い。
フィードバック定数ｆｂｓｉをコントローラ９４０によって
ｆｂｓｉ＝．９８＊ｆｂｓｉ＋ｇｆｂ＊（（ＳＯＵＴＬｉｍ／ＳＩＮＬｉｍ）−１）
（方程式４１）
として決定１２０２することができ、ここでｇｆｂは０．０４の値を有する。使用されることになるｇｆｂの値についての考慮事項は、図５に関して上で論じられた生成５０４に関して上で論じられたことと同様であって良い。フィードバック定数が決定３０２されると、図１３に関して記述するように、１つ以上の試験周辺混合係数をコントローラ９４０によって生成３０４することができる。
図１３は、例えば試験周辺チャネル混合係数ｍｉ’及びｍｓ’などの、ダウンミキサー９００のための試験周辺混合係数を生成するときのコントローラ９４０の動作を示すフローチャートである。図１３に示されているように、１２０２で決定されたフィードバック定数ｆｂｓｉの値がゼロより大きいか或いは等しいか判定１３００される。フィードバック定数がゼロより大きくもなくゼロに等しくもない場合には、試験周辺混合係数ｍｓ’の値はコントローラ９４０によって１３０２で
ｍｓ’＝０−ｆｂｓｉ （方程式４２）
の値にセットされ、試験混合係数ｍｉ’の値は１３０４で１の値にセットされる。しかし、フィードバック定数がゼロより大きいか或いはゼロに等しいと判定１３００された場合には、ｍｓ’の値は１３０６でゼロにセットされ、１３０８でｍｉ’の値が
ｍｉ’＝１−ｆｂｓｉ （方程式４３）
にセットされる。ｍｉ’がゼロより小さい場合には、ｍｉ’は１３１０でゼロの値にリセットされる。
試験混合係数ｍｉ’及びｍｓ’を生成した後、全帯域幅ダウンミキサー９０１により使用される周辺混合係数ｍｉ及びｍｓを更新するためにコントローラによって試験周辺混合係数ｍｉ’及びｍｓ’を利用することができる。更新１３１２は、例えば図６の更新６０８に関して上で記述されたのと同様の態様で達成されて良い。
例えばＬＳＩ又はＲＳＩチャネルが同じ信号によって一緒に駆動されるときには、周辺チャネルの一方又は両方を減衰させるために混合係数ｍｉをダウンミキサー９００で利用することができる。入力パワー及び出力パワーを実質的に均しく保つために周辺混合係数ｍｉを小フィードバックループによって調整することができる。９０度移相器９２４及び９３４をバイパスするために周辺混合係数ｍｓを利用することができ、その場合、ｍｓは、例えばＬＳＩ及びＲＳＩが位相を異にしている場合に前チャネルに加えられる交差混合された周辺信号の量を制御することができる。ｍｓが正の、ゼロでない値を有する場合、ダウンミキサー９００の９０度移相経路及び非９０度移相経路の両方において周辺入力チャネルのコヒーレント信号を供給することができる。
少なくとも或る状況においては、例えば図１３に関して決定された周辺混合係数ｍｉ及びｍｓなどの１つ以上の周辺混合係数に対して、これらがダウンミキサー９００により使用される前に又は使用中に、変更／調整を行うことが望ましいであろう。前チャネル混合係数ｍｌ及びｍｒの生成と同様に、周辺チャネル混合係数ｍｉ及びｍｓは通常は試験ダウンミキサー環境で生成される。混合係数ｍｉ及びｍｓの一方又は両方を生成するために試験ダウンミキサーを利用することにより、該係数が全周波数範囲ダウンミキサーで使用される前に該係数を更に変更／調整することができ、その場合、フィードバックを妨害しないようにｍｉ及びｍｓの値を試験ダウンミキサーにおいて維持することができる。
前チャネルと後チャネルとのエネルギー比を活発に変化させることによって、元の５チャネル・ダウンミックスに主観的により近い２チャネル・ダウンミックスを作るために、周辺混合係数ｍｉ及びｍｓの一方又は両方の値を調整することができる。この様な変更は、周辺チャネルに過大な反響がある場合に合うように調整できる。前チャネル及び周辺チャネルのエネルギーの比Ｆ／Ｓを利用して混合係数ｍｉ及びｍｓを調整することができる。この調整は、以下で論じられるように、Ｆ／Ｓ比が１より大きい場合に、ｍｉ及びｍｓの少なくとも一方又は両方を一定量（例えばＬＳＩ及び／又はＲＳＩチャネル情報の３ｄＢに相当する量）だけ減少させることを含んでいて良い。更に、或る状況では、入力チャネルのうちの１つ以上（例えば周辺チャネルＬＳＩ及びＲＳＩの一方又は両方）に存する可聴音響エレメント（即ち、反響でない音響情報）を能動的に探すことが望ましいであろう。可聴音響エレメントが存在するとき、混合係数ｍｉ及びｍｓに加えられる３ｄＢ減衰を取り除くことができる。
更に、例えば、ダウンミキサー９００で受信される前チャネルにおいて発生する同時信号と同じように強くはないかもしれない周辺チャネル信号を強調するなど、周辺混合係数ｍｉ及びｍｓを調整して種々の音響事象を強めることができる。音響事象は、例えば、叫びやドラム叩きなどの、初期エネルギー・スパイクを持っていて過渡方向に関する情報が保たれる（即ち物体によって妨げられない）音響などの指向性過渡現象であると考えて良い。２種類の音響事象は音節と衝撃音であろう。音節は音素と音とを含むことができる。音素は、人の話しの中の単音の特性を示すと共に人の話の中の音節を検出して局所化する上で特に有益であり得る過渡的音響である。音は、楽器により作られる個々の音である。音と音素とは共通の特徴を有するので、これらを一括して“音節”と称することができる。音節は一般に次の特徴を有する：おおよそ少なくとも５０ｍｓから約２００ｍｓに及ぶ、通常は１５０ｍｓ程度の有限の持続時間を有する；約３３ｍｓの立ち上がり時間を有する；一般に約０．２ｍｓから約０．５ｍｓに１回の頻度よりも頻繁には発生しない；少ない又は大きな音量（振幅）を持つことができる。対照的に、衝撃音は、ドラム叩き又は摩擦音（ｆｒｉｃｔｉｖｅｓ）や話の中の爆発的な音などの、持続時間が非常に短い過渡音であろう。衝撃音は一般に次の特性を有する：約５ｍｓから約５０ｍｓまでの短い持続時間、約１ｍｓから約１０ｍｓまでの立ち上がり時間、及び大きな音量。
例えば、代理人ドケット番号１１３３６／２０８として２００３年５月２日に出願され、共通譲渡され、参照により本書に取り入れられるデビッドＨ．グリーシンガーによる“音響事象検出”と題された米国特許出願第 号（まだ割り当てられていない）に記載されているように音響事象を検出することができる。例えば、入力チャネルのうちの１つにおける入力エネルギー・レベルの増加率を利用して音響事象の始まりを検出することができる。例えば、ＬＳＩ及びＲＳＩチャネルの一方又は両方における増加率を検出することができ、その場合、信号パワーが完全に維持される場合よりも音響事象を２チャネル混合において目立たせ得るように混合係数ｍｉ及び／又はｍｓの値を調整することができる。例えば、入力チャネルのうちの１つ以上において検出された反響を除去するために使用される３ｄＢ減衰を取り去ることができる。音響検出器をどの入力チャネルと関連させて利用しても良く、特定の入力チャネルにおける顕著な音響事象の存在を用いてそのチャネルのレベルの一時的ブーストをトリガーすることができる。そのブーストは、例えば混合係数ｍｉ及びｍｓなどの１つ以上の混合係数の値を高めることにより達成され得る。この様なブーストは例えば１００から３００ｍｓまで持続して良い。更に、結果として得られるダウンミックスにおける低レベル音響事象の可聴度を高めるために、ブーストは、例えば、対応するチャネル情報の１−３ｄＢに相当するブーストであって良い。
図１４〜１７は、周辺混合係数の調整を示すフローチャートである。
図１４は、例えば周辺混合係数ｍｉ及びｍｓなどの１つ以上の混合係数を調整するときのコントローラ９４０の動作を示すフローチャートである。図１４に示されているように、入力チャネル・エネルギーが決定１４００される。入力チャネル・エネルギーの決定１４００について図１５のフローチャートに関して後に論じる。入力チャネル・エネルギーが決定１４００されると、例えばｍｉ及びｍｓなどの１つ以上の混合係数を調整１４０２することができる。混合係数調整１４０２を図１６〜１７のフローチャートと関連して後に論じる。
図１５は、入力チャネル・エネルギーを決定１４００するときのコントローラ９４０の動作を示すフローチャートである。入力チャネル情報は、受信１５００され、入力信号のＬＩ、ＲＩ、ＣＩ、ＬＳＩ及びＲＳＩチャネルに関する情報を含むことができる。ＬＩ、ＣＩ及びＲＩチャネルについて前入力チャネル・エネルギーをＥＬＩ、ＥＣＩ及びＥＲＩとして決定１５０２することができ、ここで
ＥＬＩ＝ＬＩ２ （方程式４４）
ＥＣＩ＝ＣＩ２ （方程式４５）
ＥＲＩ＝ＲＩ２ （方程式４６）
である。
ＩＰチャネル情報は、図４の受け取り４００に関して前述したのと同様の態様で受け取られて１５００良い。総前入力チャネル・エネルギーをＥＦＩとして決定１５０４することができ、ここで
ＥＦＩ＝ＥＬＩ＋ＥＣＩ＋ＥＲＩ （方程式４７）
である。
ＬＳＩチャネル及びＲＳＩチャネルについて周辺入力チャネル・エネルギーをそれぞれＥＬＳＩ及びＥＲＳＩとして決定１５０６することができ、ここで
ＥＬＳＩ＝ＬＳＩ２ （方程式４８）
ＥＲＳＩ＝ＲＳＩ２ （方程式４９）
である。
総周辺入力チャネル・エネルギーＥＳＩを
ＥＳＩ＝ＥＬＳＩ＋ＥＲＳＩ （方程式５０）
として決定１５０８することができる。
前及び周辺入力チャネル・エネルギーをそれぞれＥＦＩＳｕｍ及びＥＳＩＳｕｍとして平均化１５１０することができ、ここで
ＥＦＩＳｕｍ＝０．９＊ＥＦＩＳｕｍ＋０．１＊ＥＦＩ （方程式５１）
ＥＳＩＳｕｍ＝０．９＊ＥＳＩＳｕｍ＋０．１＊ＥＳＩ （方程式５２）
である。
平均化１５１０は、例えば図４の平均化４１０に関して上で論じられたのと同様の態様で達成され得る。
平均化が完了したか否か判定１５１２することができる。平均化が完了していなければ、フローは入力チャネル情報受け取り１５００に戻って、上で論じられたように続行される。平均化が完了したと判定１５１２されたならば、前及び周辺入力チャネル平均値はＥＦＩＬｉｍ及びＥＳＩＬｉｍとしてフィルタリング１５１４され、ここで
ＥＦＩＬｉｍ＝０．９９＊ＥＦＩＬｉｍ＋０．０１＊（ＥＦＩＳｕｍ）
（方程式５３）
ＥＳＩＬｉｍ＝０．９７＊ＥＳＩＬｉｍ＋０．０３＊（ＥＳＩＳｕｍ）
（方程式５４）
である。
入力チャネル・エネルギーが決定１４００されると、図１６及び１７のフローチャートに関して上に記載されたように混合係数を調整１４０２することができる。
図１６は、例えば周辺混合係数ｍｉ及びｍｓなどの１つ以上の混合係数を調整１４０２するときのコントローラ９４０の動作を示すフローチャートである。図１６に示されているように、周辺エネルギー・ブースト・ファクターＳＢＦを
ＳＢＦ＝３＊ＥＳＩ−２＊ＥＳＩＬｉｍ （方程式５５）
として生成１６００することができる。
次に、平均周辺エネルギーＥＳＩＬｉｍが上昇しているか否か判定することができる。このことは、平均音響エネルギーが周辺エネルギー・ブースト・ファクターより少ないか否か判定１６０２することによって達成される。平均周辺エネルギーが周辺エネルギー・ブースト・ファクターより少ないと判定された場合には、第１時定数を用いて例えば
ＥＳＩＳｕｍ＝０．９９＊ＥＳＩＳｕｍ＋０．０１ＳＢＦ （方程式５６）
として平均周辺エネルギーを平均化１６０４することができる。第１時定数は、例えば、約１５０ｍｓであって良い。
しかし、平均周辺エネルギーがエネルギー・ブースト・ファクターより少なくはないと判定１６０２された場合には、平均周辺エネルギーは第２時定数を用いて
ＥＳＩＳｕｍ＝０．９９９＊ＥＳＩＳｕｍ＋０．００１ＳＢＦ （方程式５７）
として平均化１６０６されて良い。ここで、第２時定数は例えば約１．５秒であって良い。
平均周辺入力エネルギーは、周辺入力エネルギーの現在の値に応じて平均化されて良い。これは、例えば、ステップ１６０２，１６０４、及び１６０６によって達成されて良い。
前／後エネルギー比Ｆ／Ｓは、平均前チャネル及び平均周辺チャネル入力エネルギーのエネルギー比として
Ｆ／Ｓ＝（ＥＦＩＳｕｍ＋１）／（（１．２＊ＥＳＩＳｕｍ）＋１）
（方程式５８）
として決定１６０８されて良い。この前／後エネルギー比は、例えば１．２ｄＢの、周辺入力チャネルに対するバイアスであって良い。更に、前／後エネルギー比は０．１及び１０の範囲内に限定されて良い。例えば、前／後パワー比が１０より大きい場合、前／周辺エネルギー比は１０の値にセットされて良い。前／周辺エネルギー比が０．１より小さい場合、前／周辺エネルギー比は０．１の値にセットされて良い。
混合係数ｍｉ及びｍｓは、前／周辺エネルギー比に応じて決定されて良い。これは、前／周辺エネルギー比が４より大きいか否か判定１６１０することによって達成され得る。前／周辺エネルギー比が４より大きい場合、混合係数ｍｓ及びｍｉは１６１２及び１６１４で
ｍｓ＝０．７１＊ｍｓ （方程式５９）
ｍｉ＝０．７１ｍｉ （方程式６０）
にセットされて良い。
しかし、前／周辺エネルギー比が４より大きくはないと判定１６１０された場合、前／周辺エネルギー比が２以上であって且つ４以下であるか否か判定１６１６されて良い。前／周辺エネルギー比が２以上であって且つ４以下であれば、混合係数ｍｓ及びｍｉは１６１８及び１６２０でそれぞれ
ｍｓ＝０．８−０．０４５＊（Ｆ／Ｓ−２） （方程式６１）
ｍｉ＝０．８−０．０４５＊（Ｆ／Ｓ−２） （方程式６２）
としてセット１６１８及び１６２０されて良い。
しかし、前／周辺エネルギー比が２以上で且つ４以下ではないと判定１６１６されれば、混合係数ｍｓ及びｍｉは
ｍｓ＝１−０．２＊（Ｆ／Ｓ−１） （方程式６３）
ｍｉ＝１−０．２＊（Ｆ／Ｓ−１） （方程式６４）
としてセット１６２２及び１６２４されて良い。
更に、例えば周辺混合係数ｍｉ及びｍｓなどの混合係数の値は周辺チャネル入力レベルの増大に応じて周辺チャネル・レベル増大比Ｓ／Ｉとして調整されて良い。後周辺チャネル入力レベルに応じての混合係数ｍｉ及びｍｓに対する調整について、図１７のフローチャートに関して論じる。
図１７は、後周辺入力エネルギー・レベル比Ｓ／Ｉに応じて例えば周辺混合係数ｍｉ及びｍｓなどの１つ以上の混合係数を調整するときのコントローラ９４０の動作を示すフローチャートである。図１７に示されているように、後周辺入力エネルギー比Ｓ／Ｉが生成１７００され、ここで
Ｓ／Ｉ＝ＳＢＦ／ＥＳＩＬｉｍ （方程式６５）
であり、ここで周辺エネルギー・ブースト・ファクターは図１６に関して決定された通りであり、ＥＳＩＬｉｍは図１５に関して決定された通りである。次に、第２周辺ブースト・ファクター・インジケータＳＢＦ２が周辺入力エネルギー比より小さいか否かが判定１７０２される。第２ブースト・ファクターが該エネルギー比より小さい場合には、第２周辺ブースト・ファクターが
ＳＢＦ２＝０．８ＳＢＦ２＋０．２Ｓ／Ｉ （方程式６６）
としてセット１７０４される。
しかし、第２周辺ブースト・ファクターが周辺入力エネルギー比より小さくはない場合には、第２周辺ブースト・ファクター・インジケータは
ＳＢＦ２＝０．９７ＳＢＦ２＋０．０３Ｓ／Ｉ （方程式６７）
としてセット１７０６されて良く、ここで第２周辺ブースト・ファクター１７０４は約７ｍｓの時定数を表わし、１７０６における第２ブースト・ファクターは約７０ｍｓの時定数を表わす。
第２周辺ブースト・ファクター・インジケータはＦ／Ｓに応じてスケーリングされて良い。これは、Ｆ／Ｓが０．６より小さいか否か判定１７０８することにより、達成される。Ｆ／Ｓが０．６より小さい場合には、周辺ブースト・ファクター・インジケータＳＢＦは
ＳＢＦ２＝ＳＢＦ２＊（Ｓ／Ｉ＊１．８） （方程式６８）
としてスケーリングされて良い。しかし、Ｆ／Ｓが０．６より小さくないと判定１７０８された場合には、Ｆ／Ｓが１．８より大きいか否か判定１７１２することができる。Ｆ／Ｓが１．８より大きい場合には、第２周辺ブースト・ファクターを
ＳＢＦ２＝ＳＢＦ２／（Ｓ／Ｉ＊０．６） （方程式６９）
としてスケーリング１７１４することができる。
第２周辺ブースト・ファクターがスケーリング１７１０又は１７１４された場合、又はＦ／Ｓが１．８より大きくないと判定１７１２された場合には、Ｆ／Ｓが１．３より大きいか否か判定１７１６することができる。Ｆ／Ｓが１．３より大きいと判定１７１６された場合、第２周辺ブースト・ファクターを１．３にスケーリング１７１８することができる。第２周辺ブースト・ファクターがスケーリング１７１８された場合、又はＦ／Ｓが１．３より大きくないと判定された場合には、Ｆ／Ｓが１より大きいか否か判定１７２０することができる。
Ｆ／Ｓが１より大きいと判定１７２０された場合、第２周辺混合係数ｍｓ及びｍｉを
ｍｓ＝ｍｓ＊ＳＢＦ２ （方程式７０）
ｍｉ＝ｍｉ＊ＳＢＦ２ （方程式７１）
としてセット１７２２及び１７２４することができる。
周辺混合係数ｍｓ及びｍｉがセット１７２２及び１７２４された場合、或いはＦ／Ｓが１より大きくないと判定１７２０された場合には、フローは入力チャネル情報受け取り１１００に戻って図１１に関して論じられたように続くことができる。
混合係数に対する調整／変更は、入力信号のエネルギー及び所期の方向を出力信号において実質的に維持するためにダウンミキサーで利用され得る混合係数を生成した後に行われると記載されたけれども、図１４〜１６に関して論じられた混合係数調整を図４〜６及び／又は図１１〜１３に関して記載された混合係数生成から独立させても良いことは明らかであろう。更に、図１４〜１７と関連して行われる混合係数調整を、特定の間隔を置いて、例えば、ダウンミキサーで処理されるオーディオ信号情報の６４サンプル毎に、行うことができ、この場合、例えば、入力信号の総サンプリング速度は毎秒４４，１００サンプルである。混合係数を調整／変更するために他の特定の周期を利用しても良い。更に、ダウンミキサーは、毎秒４４，１００サンプル以外のサンプリング速度でオーディオ信号を処理できても良い。
ダウンミキサー１００及び９００は、３個の入力チャネル又は５．１個の入力チャネルをそれぞれ有する入力信号を２出力チャネルを有する出力信号にダウンミキシングするダウンミキサーとして記載されているけれども、上に記載されている教示を、任意の数の入力チャネルを有する入力信号を混合して入力チャネル数より少ない数の出力チャネルを有する出力信号にするためのダウンミキサーに適用し得ることは明らかであろう。マイクロプロセッサの内部メモリー及び／又は記憶装置１２０及び９４２にそれぞれ格納された適切なプログラムされたコードを実行する１つ以上のマイクロプロセッサでダウンミキサー１００及び９００を実現することができる。例えば、マイクロプロセッサは、該マイクロプロセッサがダウンミキサー１００及び９００に関して本書に記載された機能を提供できるようにするための処理能力及び他のハードウェア必要条件に適するように充分にプログラムされてその様な処理能力及び他のハードウェア必要条件を有することができる。更に、マイクロプロセッサは、本書に記載されたダウンミキシングを実行する任意のディジタル信号処理機能、フィルタリング機能或いはその他の機能を提供できて良い。
ダウンミキサー１００又は９００が動作している間、何時でも試験ミキサーを利用して混合係数値を生成することができる。コントローラは、例えば試験ミキサー１０４又は試験ミキサー９５０などの試験ミキサーを使用して、入力及び出力エネルギーを常時監視し、入力信号の信号エネルギーと所期の方向とを出力信号において実質的に維持し得るように適時に１つ以上の混合係数値を決定することができる。或いは、コントローラ１０６は、全帯域幅ダウンミキサーにおいて入力信号及び出力信号エネルギーを監視し、全帯域幅出力エネルギーが全帯域幅入力エネルギーに等しくないときに混合係数値を生成するために試験ダウンミキサーを発動することができる。
前チャネル及び周辺チャネル混合係数値は例えば試験ミキサー１０４及び予備試験ミキサー９５０などの試験ミキサーをそれぞれ用いて生成されると記載されたけれども、ダウンミキサーが入力信号を出力信号にダウンミキシングしている間に全帯域幅ダウンミキサーを用いて混合係数値を決定できることは明らかであろう。この場合には、試験ミキサーは不要であり、試験ミキサーを設けなくても良い。例えば、コントローラ１０６は、全帯域幅ダウンミキサーの全帯域幅入力の入力エネルギー及び全帯域幅出力信号を決定し、限定帯域幅エネルギーについて図４〜６及び１１〜１３と関連して前述されたのと同様の態様でこの全帯域幅エネルギーを利用して混合係数値を生成及び／又は更新することができる。更に、試験ダウンミキサー９５０はチャネルダウンミキサーへの５．１と共に利用されるものとして記載されているけれども、周辺チャネル・ダウンミキシング能力を有する任意のダウンミキサーにおいて利用され得る周辺混合係数値を生成するために試験ダウンミキサー９５０を利用し得ることは明らかであろう。
入力信号のエネルギーと所期の方向とが出力信号において実質的に維持されるように混合係数を生成することのできるダウンミキサーが設けられる。その様な混合係数生成は、例えば全帯域幅ダウンミキサーなどの非試験ダウンミキサーに対して混合係数の値を更新することのできる試験ダウンミキサーで達成され得る。聴取する人が知覚できる実質的に可聴の周波数を強調する混合係数値を生成できるように、試験ダウンミキサーは限定帯域幅入力チャネル情報に働きかけることができる。更に、ダウンミキサーは、複数の入力チャネルの或る組み合わせにおけるエネルギーの比（即ち、前チャネルエネルギーの後チャネルエネルギーに対する比、など）に応じて混合係数値を調整できて良い。例えば、入力信号をダウンミキシングしているとき、楽器からの音や話の音節などの音響事象の検出された始まりを強調するように混合係数を調整して良い。更に、或いは代わりに、出力信号における入力信号の反響のより正確な解釈を提供するために混合係数値を調整することができる。更に、ダウンミキサーは、ダウンミキシングされた信号が後に例えば復号器などでアップミキシングされるときに入力信号の所期の方向を維持できて良い。その復号器は、本書に記載された教示事項の少なくとも一部に従ってダウンミキシングされている周辺チャネル情報が周辺チャネル情報としてアップミキシングされ得る周辺チャネル情報であると判定できて良い。
ダウンミキサー１００及び９００は、通常は、本書に記載されている機能を実行するために１つ以上のマイクロプロセッサで実行されるプログラミングとして実現される。しかし、ハードウェア装置及び／又は本書記載の機能を実行するために１つ以上のマイクロプロセッサで実行されるプログラミングの任意の組み合わせを用いてダウンミキサーを実現できることは明らかであろう。
同様に、コントローラ１０６及び９４０は、特定の機能（例えば、フィルタリング、混合などの機能を提供し得るアプリケーション専用集積回路を含む）向けに設計されているハードウェア装置の任意の組み合わせから構成されて良い。コントローラ１０６及び９４０は、コントローラ１０６及び９４０に関して記載された機能を達成するためにプログラムされたコードを実行するマイクロプロセッサから構成されても良い。
記憶装置１２０及び記憶装置９４２は、固体媒体、磁気及び光学媒体を含むけれどもこれらに限定はされない１つ以上の固定式又は着脱可能の記憶装置から構成されて良い。固体媒体は、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭ、及び任意のタイプのＲＡＭなどの集積回路と、フラッシュ媒体カードなどの着脱可能な記憶装置と、これらの装置の任意の派生メモリー・システムを含んで良いが、これらに限定はされない。磁気媒体は、磁気テープと、フロッピー（登録商標）ディスク及びハードディスク・ドライブなどの磁気ディスクとを含んで良いけれども、これらに限定はされない。光学媒体は、コンパクトディスク及びディジタルビデオディスクなどの光学ディスクを含んで良いけれども、これらに限定はされない。一般に、記憶装置１２０及び９４２は、ワーキング・メモリー（ＲＡＭ）部分と、本書に記載された機能を実行するマイクロプロセッサのためのプログラムされたコードを格納するプログラム・メモリー部分とを含む。更に、記憶装置１２０及び９４２は、例えば上で記載された入力信号を出力信号にダウンミキシングするための混合係数テーブルを格納するための充分な記憶媒体を含んで良い。
ダウンミキサー１００及び９００、特にコントローラ１０６及び９４０は、入力及び出力信号エネルギーを例えば第１期間などの特定の期間にわたって平均化するものとして記載されたけれども、他の期間にわたって平均化を達成しても良いことは明らかであろう。更に、入力及び／又は出力信号エネルギーが平均化されない場合にも上記の利点のうちの少なくとも幾つかを達成し得ることは明らかであろう。
更に、１つ以上の混合係数が試験ミキサーで生成されると記載されたけれども、試験ミキサーを設けなくても良いことは明らかであり、その場合には全帯域幅ダウンミキサー１０２及び９０１の動作中、それぞれの全帯域幅ダウンミキサーが入力信号を出力信号にダウンミキシングしている間に混合係数を生成し且つ／又は調整し、上記利点のうちの少なくとも幾つかを達成することができる。
本発明の種々の実施態様が記載されたけれども、本発明の範囲内で他の多くの実施態様及び実施が可能であることは当業者にとっては明らかであろう。従って、本発明は、添付されている請求項及びそれらの同等物の観点から限定される以外は限定されない。
以下の図面及び記述を参照すれば本発明をより良く理解することができる。図中のコンポーネントは必ずしも一定の縮尺で描かれてはいなくて、本発明の原理を説明することに強調が置かれている。更に、図面では、図面全体にわたって同様の参照数字が相当する部分を示している。
図１は、３チャネル入力信号を２チャネル出力信号にダウンミキシングするためのダウンミキサー装置の機能ブロック図である。 図２は、図１のダウンミキサー装置の動作を示すフローチャートである。 図３は、図１のダウンミキサーと図９のダウンミキサーとの混合係数の生成を示すフローチャートである。 図４は、３チャネル入力信号を２チャネル出力信号にダウンミキシングするときに使用され得る図３のチャネル・エネルギー決定を示すフローチャートである。 図５は、３チャネル入力信号を２チャネル出力信号にダウンミキシングするときに使用され得る図３のフィードバック定数の決定を示すフローチャートである。 図６は、３チャネル入力信号を２チャネル出力信号にダウンミキシングするときに使用され得る図３のチャネル混合係数の生成を示すフローチャートである。 図７は、中心から左チャネルの方へパンされる単一の入力信号について図４〜６のフローチャートに従って生成される混合係数のグラフである。 図８は、３チャネル信号がダウンミキシングされて２チャネルを通して再生されるときの局所化の微細なエラーを補償するために実験的に導出される、パンニング角度の関数としての混合係数のグラフである。 図９は、５．１チャネル入力信号を２チャネル出力信号にダウンミキシングするためのダウンミキサー装置の機能ブロック図である。 図１０は、図９のダウンミキサー装置の動作を示すフローチャートである。 図１１は、図９のダウンミキサーについての図３の生成のためのＩ／Ｐ及びＯ／Ｐチャネル・エネルギーの決定を示すフローチャートである。 図１２は、図９のダウンミキサーについての図３の少なくとも１つのフィードバック定数の生成を示すフローチャートである。 図１３は、図９のダウンミキサーについての図３の１つ以上の混合係数の生成を示すフローチャートである。 図１４は、図９のダウンミキサーのために生成された混合係数の調整を示すフローチャートである。 図１５は、図１４のチャネル・エネルギー決定を示すフローチャートである。 図１６は、図１４の１つ以上の混合係数の調整を示すフローチャートである。 図１７は、図１４の１つ以上の混合係数の調整を示すフローチャートである。

Claims (25)

  1. 複数の入力チャネルを有するマルチチャネル入力信号を複数の出力チャネルを有する出力信号にダウンミキシングするための係数を確立する方法であって、該方法は、
    該入力信号の該複数の入力チャネルにおける入力エネルギーを決定することと、
    該出力信号の該複数の出力チャネルのうちの少なくとも１つに対する出力エネルギーを決定することと、
    該入力エネルギーと該出力エネルギーとに基づいて、第１の周波数帯域にわたって該複数の入力チャネルをミキシングするために用いられる第１の係数を決定することと、
    該第１の係数に基づいて、該第１の周波数帯域より広い第２の周波数帯域にわたって該複数の入力チャネルをミキシングするために用いられる第２の係数を決定することと
    を含む、方法。
  2. 前記入力エネルギーと前記出力エネルギーとに基づいて、フィードバック定数を決定することを更に含み、
    前記第２の係数を決定することは、該フィードバック定数と前記第１の係数とに基づいて、前記第２の係数を決定することを含む、請求項１に記載の方法。
  3. 前記入力エネルギーを決定することは、
    前記入力信号からの左チャネル入力情報および中央チャネル入力情報に基づいて、左チャネル入力エネルギーを決定することと、
    前記入力信号からの右チャネル入力情報および該中央チャネル入力情報に基づいて、右チャネル入力エネルギーを決定することと
    を含み、
    前記出力エネルギーを決定することは、
    前記出力信号からの左チャネル出力情報に基づいて、左チャネル出力エネルギーを決定することと、
    前記出力信号からの右チャネル出力情報に基づいて、右チャネル出力エネルギーを決定することと
    を含み、
    前記第１の係数を決定することは、左チャネル係数および右チャネル係数を決定することを含む、請求項１又は２に記載の方法。
  4. 前記入力エネルギーを決定することは、
    前記入力信号からの左サラウンド入力情報に基づいて、左サラウンド入力エネルギーを決定することと、
    前記入力信号からの右サラウンド入力情報に基づいて、右サラウンド入力エネルギーを決定することと
    を含み、
    前記出力エネルギーを決定することは、
    左サラウンド出力情報に基づいて、左サラウンド出力エネルギーを決定することと、
    右サラウンド出力情報に基づいて、右サラウンド出力エネルギーを決定することと
    を含み、
    前記第１の係数を決定することは、左サラウンド係数および右サラウンド係数を決定することを含む、請求項１又は２又は３に記載の方法。
  5. 前記入力エネルギーを決定する前に、選択されたオーディオ周波数を保つために該入力信号の帯域幅を制限することを更に含む、請求項１又は２又は３又は４に記載の方法。
  6. 前記選択されたオーディオ周波数は中間周波数である、請求項５に記載の方法。
  7. 前記マルチチャネル入力信号から得られた帯域幅が制限された入力信号をミキシングするために試験ダウンミキサーにおいて前記第１の係数を使用することを更に含む、請求項５又は６に記載の方法。
  8. 前記第２の係数を決定することは、左チャネル係数と右チャネル係数とを決定することを含む、請求項１に記載の方法。
  9. 前記第２の係数を決定することは、左チャネル係数と右チャネル係数とを決定することと、左サラウンド係数と右サラウンド係数とを決定することとを含む、請求項１に記載の方法。
  10. マルチチャネル入力信号を出力信号にダウンミキシングするための係数を確立するシステムであって、該システムは、
    第１の所定の周波数帯域にわたって該マルチチャネル入力信号の複数の入力チャネルをミキシングするために用いられる第１の係数と、該第１の所定の周波数帯域より広い第２の所定の周波数帯域にわたって該マルチチャネル入力信号の該複数の入力チャネルをミキシングするために用いられる第２の係数とを含むメモリーと、
    該第２の係数に基づいて、該入力信号を該出力信号にミキシングするミキサーと、
    該メモリーと該ミキサーとに結合されたコントローラと
    を含み、
    該コントローラは、
    該入力信号の該複数の入力チャネルにおける入力エネルギーを決定することと、
    該出力信号の少なくとも１つの出力チャネルに対する出力エネルギーを決定することと、
    該入力エネルギーおよび該出力エネルギーに基づいて、該第１の係数を決定することと、
    該第１の係数に基づいて、該第２の係数を決定することと
    を行うように動作可能である、システム。
  11. 前記入力信号は、左入力チャネルと中央入力チャネルと右入力チャネルとを含み、前記出力信号は、右試験出力チャネルと左試験出力チャネルとを含む、請求項１０に記載のシステム。
  12. 前記コントローラは、前記左入力チャネルと前記中央入力チャネルとに基づいて左チャネル入力エネルギーを決定し、かつ、前記右入力チャネルと前記中央入力チャネルとに基づいて右チャネル入力エネルギーを決定することによって、前記入力エネルギーを決定するように動作可能であり、
    前記コントローラは、前記左試験出力チャネルに基づいて左チャネル出力エネルギーを決定し、かつ、前記右試験出力チャネルに基づいて右チャネル出力エネルギーを決定することによって、前記出力エネルギーを決定するように動作可能であり、
    前記コントローラは、前記入力エネルギーと前記出力エネルギーとに基づいて左チャネル係数と右チャネル係数とを決定することによって、前記第２の係数を決定するように動作可能である、請求項１１に記載のシステム。
  13. 前記コントローラは、左サラウンド入力チャネルに基づいて左サラウンド入力エネルギーを決定し、かつ、右サラウンド入力チャネルに基づいて右サラウンド入力エネルギーを決定することによって、前記入力エネルギーを決定するように動作可能であり、
    前記コントローラは、左サラウンド試験出力チャネルに基づいて左サラウンド出力エネルギーを決定し、かつ、右サラウンド試験出力チャネルに基づいて右サラウンド出力エネルギーを決定することによって、前記出力エネルギーを決定するように動作可能であり、
    前記コントローラは、前記入力エネルギーと前記出力エネルギーとに基づいて左サラウンド係数と右サラウンド係数とを決定することによって、前記第２の係数を決定するように動作可能である、請求項１０又は１１又は１２に記載のシステム。
  14. 前記コントローラは、前記入力エネルギーを決定する前に、選択されたオーディオ周波数を保つために前記入力信号の帯域幅を制限するように動作可能である、請求項１０又は１１又は１２又は１３に記載のシステム。
  15. 前記選択されたオーディオ周波数は中間周波数である、請求項１４に記載のシステム。
  16. 前記コントローラは、前記左チャネル係数に基づいて第２の左チャネル係数を決定し、かつ、前記右チャネル係数に基づいて第２の右チャネル係数を決定することによって、前記第２の係数を決定するように動作可能である、請求項１２に記載のシステム。
  17. 前記コントローラは、前記左サラウンド係数に基づいて第２の左サラウンド係数を決定し、前記右サラウンド係数に基づいて第２の右サラウンド係数を決定するように更に動作可能である、請求項１６に記載のシステム。
  18. 第１の周波数帯域にわたって複数の入力チャネルを少なくとも１つの出力チャネルにミキシングするための係数を含む第１のダウンミキサーと、
    該第１のダウンミキサーに結合された試験ダウンミキサーと
    を含むダウンミキサーであって、
    該試験ダウンミキサーは、該第１のダウンミキサーにおける該係数を更新する該第１の周波数帯域よりも狭い第２の周波数帯域にわたって試験係数を決定するように動作可能である、ダウンミキサー。
  19. 前記複数の入力チャネルは、左チャネルと右チャネルと中央チャネルとを含む、請求項１８に記載のダウンミキサー。
  20. 前記複数の入力チャネルは、左サラウンドチャネルと右サラウンドチャネルとを含む、請求項１８に記載のダウンミキサー。
  21. 前記第１のダウンミキサーは、前記第１の周波数帯域にわたってマルチチャネル入力信号入力を含み、前記試験ダウンミキサーは、前記第２の周波数帯域にわたってマルチチャネル入力信号入力を含む、請求項１８に記載のダウンミキサー。
  22. 前記試験ダウンミキサーは、前記マルチチャネル入力信号入力に存在するマルチチャネル入力信号から中間オーディオ周波数を受け取る、請求項１８に記載のダウンミキサー。
  23. 前記係数は、入力エネルギーと出力エネルギーとに基づいて決定される、請求項１８に記載のダウンミキサー。
  24. 前記係数は、前記ダウンミキサーの動作中に更新される、請求項１８に記載のダウンミキサー。
  25. 前記係数は、左フィードバック・パラメータに従って更新される左係数と右フィードバック・パラメータに従って更新される右係数とを含む、請求項２４に記載のダウンミキサー。
JP2004502485A 2002-05-03 2003-05-02 マルチチャネル・ダウンミキシング装置 Expired - Lifetime JP4187719B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US37766102P 2002-05-03 2002-05-03
PCT/US2003/013693 WO2003094369A2 (en) 2002-05-03 2003-05-02 Multi-channel downmixing device

Publications (2)

Publication Number Publication Date
JP2005523672A JP2005523672A (ja) 2005-08-04
JP4187719B2 true JP4187719B2 (ja) 2008-11-26

Family

ID=29401545

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004502485A Expired - Lifetime JP4187719B2 (ja) 2002-05-03 2003-05-02 マルチチャネル・ダウンミキシング装置

Country Status (8)

Country Link
US (2) US7450727B2 (ja)
EP (2) EP1502361B1 (ja)
JP (1) JP4187719B2 (ja)
KR (1) KR100635022B1 (ja)
CN (1) CN1650528B (ja)
AU (1) AU2003264750A1 (ja)
CA (1) CA2473343C (ja)
WO (1) WO2003094369A2 (ja)

Families Citing this family (85)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7644282B2 (en) 1998-05-28 2010-01-05 Verance Corporation Pre-processed information embedding system
US6737957B1 (en) 2000-02-16 2004-05-18 Verance Corporation Remote control signaling using audio watermarks
US7454257B2 (en) * 2001-02-08 2008-11-18 Warner Music Group Apparatus and method for down converting multichannel programs to dual channel programs using a smart coefficient generator
US7644003B2 (en) 2001-05-04 2010-01-05 Agere Systems Inc. Cue-based audio coding/decoding
US7292901B2 (en) 2002-06-24 2007-11-06 Agere Systems Inc. Hybrid multi-channel/cue coding/decoding of audio signals
US7583805B2 (en) 2004-02-12 2009-09-01 Agere Systems Inc. Late reverberation-based synthesis of auditory scenes
US7039204B2 (en) * 2002-06-24 2006-05-02 Agere Systems Inc. Equalization for audio mixing
EP2442566A3 (en) 2002-10-15 2012-08-08 Verance Corporation Media Monitoring, Management and Information System
US20060239501A1 (en) 2005-04-26 2006-10-26 Verance Corporation Security enhancements of digital watermarks for multi-media content
US7369677B2 (en) * 2005-04-26 2008-05-06 Verance Corporation System reactions to the detection of embedded watermarks in a digital host content
US7394903B2 (en) * 2004-01-20 2008-07-01 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Apparatus and method for constructing a multi-channel output signal or for generating a downmix signal
ATE430360T1 (de) 2004-03-01 2009-05-15 Dolby Lab Licensing Corp Mehrkanalige audiodekodierung
US20090299756A1 (en) * 2004-03-01 2009-12-03 Dolby Laboratories Licensing Corporation Ratio of speech to non-speech audio such as for elderly or hearing-impaired listeners
US7639823B2 (en) * 2004-03-03 2009-12-29 Agere Systems Inc. Audio mixing using magnitude equalization
US7805313B2 (en) 2004-03-04 2010-09-28 Agere Systems Inc. Frequency-based coding of channels in parametric multi-channel coding systems
SE0400998D0 (sv) * 2004-04-16 2004-04-16 Cooding Technologies Sweden Ab Method for representing multi-channel audio signals
KR101205480B1 (ko) * 2004-07-14 2012-11-28 돌비 인터네셔널 에이비 오디오 채널 변환
CN1985544B (zh) * 2004-07-14 2010-10-13 皇家飞利浦电子股份有限公司 处理立体声下混合信号的方法、装置、编译码器和系统
US7508947B2 (en) * 2004-08-03 2009-03-24 Dolby Laboratories Licensing Corporation Method for combining audio signals using auditory scene analysis
US7283634B2 (en) 2004-08-31 2007-10-16 Dts, Inc. Method of mixing audio channels using correlated outputs
JP4892184B2 (ja) * 2004-10-14 2012-03-07 パナソニック株式会社 音響信号符号化装置及び音響信号復号装置
US8204261B2 (en) 2004-10-20 2012-06-19 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Diffuse sound shaping for BCC schemes and the like
US7720230B2 (en) 2004-10-20 2010-05-18 Agere Systems, Inc. Individual channel shaping for BCC schemes and the like
US20070297519A1 (en) * 2004-10-28 2007-12-27 Jeffrey Thompson Audio Spatial Environment Engine
JP2006179161A (ja) * 2004-11-26 2006-07-06 Matsushita Electric Ind Co Ltd ディスク再生方法、その制御プログラム、記録媒体、ディスク再生装置及び光ディスク用信号処理回路
US7787631B2 (en) * 2004-11-30 2010-08-31 Agere Systems Inc. Parametric coding of spatial audio with cues based on transmitted channels
US8340306B2 (en) 2004-11-30 2012-12-25 Agere Systems Llc Parametric coding of spatial audio with object-based side information
US7761304B2 (en) 2004-11-30 2010-07-20 Agere Systems Inc. Synchronizing parametric coding of spatial audio with externally provided downmix
KR100682904B1 (ko) 2004-12-01 2007-02-15 삼성전자주식회사 공간 정보를 이용한 다채널 오디오 신호 처리 장치 및 방법
US20090296943A1 (en) * 2004-12-14 2009-12-03 Bang & Olufsen A/S Reproduction of low frequency effects in sound reproduction systems
US7903824B2 (en) 2005-01-10 2011-03-08 Agere Systems Inc. Compact side information for parametric coding of spatial audio
EP1866912B1 (en) * 2005-03-30 2010-07-07 Koninklijke Philips Electronics N.V. Multi-channel audio coding
US8917874B2 (en) * 2005-05-26 2014-12-23 Lg Electronics Inc. Method and apparatus for decoding an audio signal
JP4988716B2 (ja) 2005-05-26 2012-08-01 エルジー エレクトロニクス インコーポレイティド オーディオ信号のデコーディング方法及び装置
US8020004B2 (en) 2005-07-01 2011-09-13 Verance Corporation Forensic marking using a common customization function
US8781967B2 (en) 2005-07-07 2014-07-15 Verance Corporation Watermarking in an encrypted domain
JP2007033507A (ja) * 2005-07-22 2007-02-08 Matsushita Electric Ind Co Ltd 音響再生装置
WO2007021097A1 (en) * 2005-08-12 2007-02-22 Samsung Electronics Co., Ltd. Method and apparatus to transmit and/or receive data via wireless network and wireless device
CN101253556B (zh) * 2005-09-02 2011-06-22 松下电器产业株式会社 能量整形装置以及能量整形方法
KR100739798B1 (ko) 2005-12-22 2007-07-13 삼성전자주식회사 청취 위치를 고려한 2채널 입체음향 재생 방법 및 장치
KR100677629B1 (ko) * 2006-01-10 2007-02-02 삼성전자주식회사 다채널 음향 신호에 대한 2채널 입체 음향 생성 방법 및장치
JP4806031B2 (ja) * 2006-01-19 2011-11-02 エルジー エレクトロニクス インコーポレイティド メディア信号の処理方法及び装置
KR100983286B1 (ko) * 2006-02-07 2010-09-24 엘지전자 주식회사 부호화/복호화 장치 및 방법
BRPI0707969B1 (pt) * 2006-02-21 2020-01-21 Koninklijke Philips Electonics N V codificador de áudio, decodificador de áudio, método de codificação de áudio, receptor para receber um sinal de áudio, transmissor, método para transmitir um fluxo de dados de saída de áudio, e produto de programa de computador
MX2008012251A (es) * 2006-09-29 2008-10-07 Lg Electronics Inc Metodos y aparatos para codificar y descodificar señales de audio basadas en objeto.
JP2008092072A (ja) * 2006-09-29 2008-04-17 Toshiba Corp 音声ミキシング処理装置及び音声ミキシング処理方法
EP2211565A1 (en) 2007-10-19 2010-07-28 Panasonic Corporation Audio mixing device
US8259938B2 (en) 2008-06-24 2012-09-04 Verance Corporation Efficient and secure forensic marking in compressed
US8332229B2 (en) * 2008-12-30 2012-12-11 Stmicroelectronics Asia Pacific Pte. Ltd. Low complexity MPEG encoding for surround sound recordings
US8774417B1 (en) 2009-10-05 2014-07-08 Xfrm Incorporated Surround audio compatibility assessment
TWI557723B (zh) 2010-02-18 2016-11-11 杜比實驗室特許公司 解碼方法及系統
WO2011133229A2 (en) * 2010-04-23 2011-10-27 Steam Tech, Llc Surface wiper system
US20120042193A1 (en) * 2010-08-13 2012-02-16 Apple Inc. Clock frequency selection scheme
US9607131B2 (en) 2010-09-16 2017-03-28 Verance Corporation Secure and efficient content screening in a networked environment
US20120095729A1 (en) * 2010-10-14 2012-04-19 Electronics And Telecommunications Research Institute Known information compression apparatus and method for separating sound source
US20120155650A1 (en) * 2010-12-15 2012-06-21 Harman International Industries, Incorporated Speaker array for virtual surround rendering
SG188007A1 (en) * 2011-08-29 2013-03-28 Creative Tech Ltd A system, sound processing apparatus and soundprocessing method for electronic games
US8533481B2 (en) 2011-11-03 2013-09-10 Verance Corporation Extraction of embedded watermarks from a host content based on extrapolation techniques
US8682026B2 (en) 2011-11-03 2014-03-25 Verance Corporation Efficient extraction of embedded watermarks in the presence of host content distortions
US8615104B2 (en) 2011-11-03 2013-12-24 Verance Corporation Watermark extraction based on tentative watermarks
US8923548B2 (en) 2011-11-03 2014-12-30 Verance Corporation Extraction of embedded watermarks from a host content using a plurality of tentative watermarks
US8745403B2 (en) 2011-11-23 2014-06-03 Verance Corporation Enhanced content management based on watermark extraction records
US9323902B2 (en) 2011-12-13 2016-04-26 Verance Corporation Conditional access using embedded watermarks
US9547753B2 (en) 2011-12-13 2017-01-17 Verance Corporation Coordinated watermarking
US9131313B1 (en) * 2012-02-07 2015-09-08 Star Co. System and method for audio reproduction
US9571606B2 (en) 2012-08-31 2017-02-14 Verance Corporation Social media viewing system
US8869222B2 (en) 2012-09-13 2014-10-21 Verance Corporation Second screen content
US8726304B2 (en) 2012-09-13 2014-05-13 Verance Corporation Time varying evaluation of multimedia content
US20140075469A1 (en) 2012-09-13 2014-03-13 Verance Corporation Content distribution including advertisements
US9363603B1 (en) 2013-02-26 2016-06-07 Xfrm Incorporated Surround audio dialog balance assessment
US9093064B2 (en) 2013-03-11 2015-07-28 The Nielsen Company (Us), Llc Down-mixing compensation for audio watermarking
US9262794B2 (en) 2013-03-14 2016-02-16 Verance Corporation Transactional video marking system
US8804971B1 (en) 2013-04-30 2014-08-12 Dolby International Ab Hybrid encoding of higher frequency and downmixed low frequency content of multichannel audio
US9251549B2 (en) 2013-07-23 2016-02-02 Verance Corporation Watermark extractor enhancements based on payload ranking
US9208334B2 (en) 2013-10-25 2015-12-08 Verance Corporation Content management using multiple abstraction layers
CN103654853B (zh) * 2013-11-19 2016-06-08 深圳先进技术研究院 基带波束合成超声成像方法及其系统
CN106170988A (zh) 2014-03-13 2016-11-30 凡瑞斯公司 使用嵌入式代码的交互式内容获取
CN106576211B (zh) * 2014-09-01 2019-02-15 索尼半导体解决方案公司 音频处理装置
US20160344902A1 (en) * 2015-05-20 2016-11-24 Gwangju Institute Of Science And Technology Streaming reproduction device, audio reproduction device, and audio reproduction method
EP3369257B1 (en) * 2015-10-27 2021-08-18 Ambidio, Inc. Apparatus and method for sound stage enhancement
TWI560656B (en) * 2015-12-07 2016-12-01 Ind Tech Res Inst Audio system, electronic device and method for exercise coaching
JP6540600B2 (ja) * 2016-05-25 2019-07-10 ヤマハ株式会社 効果音生成装置、効果音生成方法およびプログラム
DE102017106022A1 (de) 2017-03-21 2018-09-27 Ask Industries Gmbh Verfahren zur Ausgabe eines Audiosignals in einen Innenraum über eine einen linken und einen rechten Ausgabekanal umfassende Ausgabeeinrichtung
US11330370B2 (en) * 2018-02-15 2022-05-10 Dolby Laboratories Licensing Corporation Loudness control methods and devices
SG11202007629UA (en) 2018-07-02 2020-09-29 Dolby Laboratories Licensing Corp Methods and devices for encoding and/or decoding immersive audio signals

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4884972A (en) 1986-11-26 1989-12-05 Bright Star Technology, Inc. Speech synchronized animation
US4862502A (en) 1988-01-06 1989-08-29 Lexicon, Inc. Sound reproduction
US4884982A (en) * 1989-04-03 1989-12-05 Amp Incorporated Capacitive coupled connector
US5109419A (en) 1990-05-18 1992-04-28 Lexicon, Inc. Electroacoustic system
US5136650A (en) 1991-01-09 1992-08-04 Lexicon, Inc. Sound reproduction
US5594800A (en) 1991-02-15 1997-01-14 Trifield Productions Limited Sound reproduction system having a matrix converter
US5161197A (en) 1991-11-04 1992-11-03 Lexicon, Inc. Acoustic analysis
US5610986A (en) 1994-03-07 1997-03-11 Miles; Michael T. Linear-matrix audio-imaging system and image analyzer
JP2692040B2 (ja) 1995-08-29 1997-12-17 フオスター電機株式会社 小型電気音響変換器
US5867819A (en) 1995-09-29 1999-02-02 Nippon Steel Corporation Audio decoder
JP3761639B2 (ja) 1995-09-29 2006-03-29 ユナイテッド・モジュール・コーポレーション オーディオ復号装置
JP3158023B2 (ja) 1995-10-03 2001-04-23 フオスター電機株式会社 スピーカ用エッジの製造方法
IT1281924B1 (it) 1995-12-22 1998-03-03 Sipe Srl Metodo per la realizzazione e l'applicazione del bordo anulare di sospensione delle membrane degli altoparlanti
BR9700245A (pt) 1996-04-09 1998-10-27 Lg Electronics Inc Aparelho de exibição de vídeo
US5870480A (en) * 1996-07-19 1999-02-09 Lexicon Multichannel active matrix encoder and decoder with maximum lateral separation
US5796844A (en) 1996-07-19 1998-08-18 Lexicon Multichannel active matrix sound reproduction with maximum lateral separation
US6697491B1 (en) 1996-07-19 2004-02-24 Harman International Industries, Incorporated 5-2-5 matrix encoder and decoder system
FI105522B (fi) 1996-08-06 2000-08-31 Sample Rate Systems Oy Järjestely kotiteatteri- tai muussa äänentoistolaitteistossa
US6005948A (en) * 1997-03-21 1999-12-21 Sony Corporation Audio channel mixing
US5946352A (en) * 1997-05-02 1999-08-31 Texas Instruments Incorporated Method and apparatus for downmixing decoded data streams in the frequency domain prior to conversion to the time domain
US6140645A (en) * 1997-10-20 2000-10-31 Jeol Ltd. Transmission electron microscope having energy filter
US6683962B1 (en) 1997-12-23 2004-01-27 Harman International Industries, Incorporated Method and system for driving speakers with a 90 degree phase shift
US6141645A (en) 1998-05-29 2000-10-31 Acer Laboratories Inc. Method and device for down mixing compressed audio bit stream having multiple audio channels
JP2000308200A (ja) * 1999-04-20 2000-11-02 Nippon Columbia Co Ltd 音響信号処理回路及び増幅装置
US6349285B1 (en) 1999-06-28 2002-02-19 Cirrus Logic, Inc. Audio bass management methods and circuits and systems using the same

Also Published As

Publication number Publication date
JP2005523672A (ja) 2005-08-04
AU2003264750A1 (en) 2003-11-17
US20040032960A1 (en) 2004-02-19
EP1502361B1 (en) 2015-01-14
EP2879299A1 (en) 2015-06-03
EP2879299B1 (en) 2017-07-26
CN1650528A (zh) 2005-08-03
CN1650528B (zh) 2013-05-22
EP1502361A4 (en) 2011-03-16
CA2473343A1 (en) 2003-11-13
US7450727B2 (en) 2008-11-11
CA2473343C (en) 2012-03-27
KR20040111570A (ko) 2004-12-31
KR100635022B1 (ko) 2006-10-16
EP1502361A2 (en) 2005-02-02
US20090028360A1 (en) 2009-01-29
US8363855B2 (en) 2013-01-29
WO2003094369A2 (en) 2003-11-13
WO2003094369A3 (en) 2004-03-25

Similar Documents

Publication Publication Date Title
JP4187719B2 (ja) マルチチャネル・ダウンミキシング装置
JP5149968B2 (ja) スピーチ信号処理を含むマルチチャンネル信号を生成するための装置および方法
KR101161703B1 (ko) 청각 장면 분석을 사용한 오디오 신호의 결합
US8180062B2 (en) Spatial sound zooming
EP3402222B1 (en) Generating binaural audio in response to multi-channel audio using at least one feedback delay network
EP2614659B1 (en) Upmixing method and system for multichannel audio reproduction
US7970144B1 (en) Extracting and modifying a panned source for enhancement and upmix of audio signals
KR100994294B1 (ko) 2 개의 입력 채널을 이용하여 3 개의 출력 채널을 합성하는장치 및 방법
US9883311B2 (en) Rendering of audio objects using discontinuous rendering-matrix updates
EP3090573B1 (en) Generating binaural audio in response to multi-channel audio using at least one feedback delay network
US9913036B2 (en) Apparatus and method and computer program for generating a stereo output signal for providing additional output channels
US20060262936A1 (en) Virtual surround decoder apparatus
US6882733B2 (en) Surround headphone output signal generator
US20070140500A1 (en) Apparatus and method for synthesizing three output channels using two input channels

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080218

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080303

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080603

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080826

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080909

R150 Certificate of patent or registration of utility model

Ref document number: 4187719

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110919

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120919

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130919

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term