JP6007474B2 - 音声信号処理装置、音声信号処理方法、プログラムおよび記録媒体 - Google Patents

音声信号処理装置、音声信号処理方法、プログラムおよび記録媒体 Download PDF

Info

Publication number
JP6007474B2
JP6007474B2 JP2011223485A JP2011223485A JP6007474B2 JP 6007474 B2 JP6007474 B2 JP 6007474B2 JP 2011223485 A JP2011223485 A JP 2011223485A JP 2011223485 A JP2011223485 A JP 2011223485A JP 6007474 B2 JP6007474 B2 JP 6007474B2
Authority
JP
Japan
Prior art keywords
channel
audio signal
audio
signal
channels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011223485A
Other languages
English (en)
Other versions
JP2013085119A (ja
JP2013085119A5 (ja
Inventor
越 沖本
越 沖本
山田　裕司
裕司 山田
寿理 酒井
寿理 酒井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2011223485A priority Critical patent/JP6007474B2/ja
Priority to US13/591,814 priority patent/US9607622B2/en
Priority to CN201210375359.8A priority patent/CN103037300B/zh
Publication of JP2013085119A publication Critical patent/JP2013085119A/ja
Publication of JP2013085119A5 publication Critical patent/JP2013085119A5/ja
Application granted granted Critical
Publication of JP6007474B2 publication Critical patent/JP6007474B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H04S3/004—For headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/03—Aspects of down-mixing multi-channel audio to configurations with lower numbers of playback channels, e.g. 7.1 -> 5.1
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)

Description

本技術は、音声信号処理装置、音声信号処理方法、プログラムおよび記録媒体に関し、特に、２チャネルステレオ音声信号を再生するヘッドホン装置、スピーカ装置等に適用できる音声信号処理装置に関する。
オーディオ信号をスピーカに供給して再生した場合、その音像はリスナの前方に定位する。これに対して同じオーディオ信号をヘッドホン装置に供給して再生した場合、音像はリスナの頭内に定位し、これにより極めて不自然な音場を構成してしまう。このようなヘッドホン装置における音像定位の不自然さを改善するため、任意のスピーカ位置からリスナの両耳までのインパルス応答を測定あるいは計算しておき、デジタルフィルタ等を用いて当該インパルス応答をオーディオ信号に畳み込んで再生し、あたかも実際のスピーカから再生したような自然な音像の頭外定位を得られるようにしたヘッドホン装置が提案されている（例えば、特許文献１参照）。
ここで、ヘッドホン装置における音像定位のためのインパルス応答について説明する。図２８に示すように、定位させようとする音源ＳＰがリスナＭの正面に位置しているとする。この音源ＳＰから出力された音は伝達関数ＨＬおよびＨＲを有する経路を介してリスナＭの左耳および右耳に到達する。このような伝達関数ＨＬおよびＨＲを時間軸に変換したものが左チャンネルおよび右チャンネルのインパルス応答である。
特開２００６−１４２１８号公報
マルチチャネル再生では、圧縮音声ストリームのフォーマットに応じて、想定チャネル配置が異なる場合がある。例えば、７．１チャネルの音声信号に、通常の５．１チャネルの他に、フロント・ハイの左右の２チャネルの音声信号が含まれる場合もあれば、バック・サラウンドの左右の２チャネルの音声信号が含まれる場合もある。
本技術の目的は、音像定位処理を良好に行うこと、メモリ容量の削減を図ることにある。
本技術の概念は、
圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコード部と、 上記デコード部で得られた所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号を生成する信号処理部とを備え、
上記信号処理部は、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左チャネル音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右チャネル音声信号を生成し、
上記圧縮音声ストリームのフォーマット情報に基づいて、上記信号処理部の上記デジタルフィルタに上記インパルス応答に応じたフィルタ係数を設定する係数設定部をさらに備える
音声信号処理装置にある。
本技術において、デコード部により、圧縮音声ストリームがデコードされて所定数のチャネルの音声信号が得られる。例えば、２チャネルの音声信号、５.１チャネルの音声信号、７．１チャネルの音声信号などである。そして、信号処理部により、この所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号が生成される。
この場合、信号処理部では、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルにおけるこの畳み込み結果が加算されて左チャネル音声信号が生成される。同様に、信号処理部では、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルにおけるこの畳み込み結果が加算されて右チャネル音声信号が生成される。
係数設定部により、圧縮音声ストリームのフォーマット情報に基づいて、信号処理部のデジタルフィルタにインパルス応答に応じたフィルタ係数が設定される。例えば、デコードモード情報で示されるチャネルに対応したデジタルフィルタに、フォーマット情報で決まる想定チャネル配置に応じたフィルタ係数が設定される。
例えば、フォーマット情報が５．１チャネルの音声信号であることを示していれば、６チャネルの音声信号に対応したデジタルフィルタに、想定チャネル配置に応じたフィルタ係数が設定される。また、例えば、フォーマット情報が７．１チャネルの音声信号（フロント・ハイあるいはバック・サラウンドのチャネルの音声信号を含む）であることを示していれば、８チャネルの音声信号に対応したデジタルフィルタに、想定チャネル配置に応じたフィルタ係数が設定される。
このように本技術においては、圧縮音声ストリームのフォーマット情報に基づいて、信号処理部のデジタルフィルタにインパルス応答に応じたフィルタ係数が設定されるものである。そのため、圧縮音声ストリームのフォーマットが変更になった場合にあっても、所定数のチャネルの音声信号から各チャネルの音像定位が良好に行われる２チャネルステレオ音声信号を得ることが可能になる。
なお、本技術において、例えば、信号処理部は、複数のチャネルの音声信号の処理に兼用されるデジタルフィルタを含む、ようにされてもよい。例えば、兼用されるデジタルフィルタは、７．１チャネルの音声信号を構成するフロント・ハイの音声信号または７．１チャネルの音声信号を構成するバック・サラウンドの音声信号を処理する、ものとされる。このようにデジタルフィルタが兼用されることで、信号処理部の回路規模を低減できる。
また、本技術の他の概念は、
圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコード部と、
上記デコード部で得られた所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理部とを備え、
上記信号処理部は、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記信号処理部の少なくとも低域増強チャネルの音声信号を処理するデジタルフィルタをＩＩＲフィルタで構成する
音声信号処理装置にある。
本技術において、デコード部により、圧縮音声ストリームがデコードされて所定数のチャネルの音声信号が得られる。例えば、２チャネルの音声信号、５.１チャネルの音声信号、７．１チャネルの音声信号などである。そして、信号処理部により、この所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号が生成される。
この場合、信号処理部では、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルにおけるこの畳み込み結果が加算されて左音声信号が生成される。同様に、信号処理部では、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルにおけるこの畳み込み結果が加算されて右音声信号が生成される。
そして、信号処理部の少なくとも低域増強チャネルの音声信号（サブウーファー信号）を処理するデジタルフィルタは、ＩＩＲ（Infinite Impulse Response）フィルタで構成される。この場合、例えば、その他のチャネルの音声信号を処理するデジタルフィルタは、ＦＩＲ（Finite Impulse Response）フィルタで構成される。
このように本技術においては、信号処理部の少なくとも低域増強チャネルの音声信号（サブウーファー信号）を処理するデジタルフィルタは、ＩＩＲフィルタで構成されるものである。そのため、低音増強チャネルの音声信号の処理のためのメモリ、演算量の削減が可能となる。
また、本技術の他の概念は、
圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコード部と、
上記デコード部で得られた所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理部とを備え、
上記信号処理部は、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記信号処理部のフロント・ハイのチャネルの音声信号を処理するデジタルフィルタに設定されるフィルタ係数は、実音場データと無響室データとを組み合わせて得られたデータである
音声信号処理装置にある。
本技術において、デコード部により、圧縮音声ストリームがデコードされて所定数のチャネルの音声信号が得られる。例えば、２チャネルの音声信号、５.１チャネルの音声信号、７．１チャネルの音声信号などである。そして、信号処理部により、この所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号が生成される。
この場合、信号処理部では、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルにおけるこの畳み込み結果が加算されて左チャネル音声信号が生成される。同様に、信号処理部では、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルにおけるこの畳み込み結果が加算されて右チャネル音声信号が生成される。
ここで、信号処理部のフロント・ハイのチャネルの音声信号を処理するデジタルフィルタに設定されるフィルタ係数は、実音場データと無響室データとを組み合わせて得られたデータとされる。例えば、実音場データには、フロントチャネルのスピーカ特性とこのフロントチャネルの残響部分のデータが含まれる、ようにされる。
このように本技術においては、信号処理部のフロント・ハイのチャネルの音声信号を処理するデジタルフィルタに設定されるフィルタ係数は、実音場データと無響室データとを組み合わせて得られたデータとされるものである。そのため、例えば、実音場に通常の５．１チャネルの配置しかない場合であっても、７.１チャネルのフロント・ハイのフィルタ係数を容易に取得可能となる。
また、本技術の他の概念は、
圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコード部と、
上記デコード部で得られた所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号を生成する信号処理部とを備え、
上記信号処理部は、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左チャネル音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右チャネル音声信号を生成し、
上記信号処理部のデジタルフィルタは、上記音声信号に対して上記インパルス応答を周波数領域で畳み込み、
上記インパルス応答に対応したフィルタ係数として時系列係数データを保持する係数保持部と、
上記係数保持部に保持されている時系列係数データを読み出し、周波数領域データに変換して上記デジタルフィルタに設定する係数設定部とをさらに備える
音声信号処理装置にある。
本技術において、デコード部により、圧縮音声ストリームがデコードされて所定数のチャネルの音声信号が得られる。例えば、２チャネルの音声信号、５.１チャネルの音声信号、７．１チャネルの音声信号などである。そして、信号処理部により、この所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号が生成される。
この場合、信号処理部では、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルにおけるこの畳み込み結果が加算されて左チャネル音声信号が生成される。同様に、信号処理部では、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルにおけるこの畳み込み結果が加算されて右チャネル音声信号が生成される。
この場合、信号処理部のデジタルフィルタでは、音声信号に対してインパルス応答が周波数領域で畳み込まれる。係数保持部には、インパルス応答に対応したフィルタ係数として実時間係数データが保持される。そして、係数設定部により、係数保持部から実時間データが読み出され、周波数領域データに変換されて、デジタルフィルタに設定される。
このように本技術においては、インパルス応答に対応したフィルタ係数として時系列係数データが保持され、この時系列係数データが周波数領域データに変換されてデジタルフィルタに設定されるものである。そのため、フィルタ係数を保持するメモリの容量の削減が可能となる。
本技術によれば、音像定位処理を良好に行うことができ、メモリ容量の削減を図ることができる。
実施の形態としての音声信号処理装置の構成例を示すブロック図である。 音声信号処理装置を構成する信号処理部の構成例を示すブロック図である。 低域増強チャネル（ＬＦＥ）の音声信号Ｓ-LFEを処理するデジタルフィルタがＩＩＲフィルタで構成されることを説明するための図である。 低域増強チャネル（ＬＦＥ）の音声信号Ｓ-LFEを処理するデジタルフィルタがＦＩＲフィルタで構成可能であることを説明するための図である。 信号処理部における低域増強チャネル（ＬＦＥ）の音声信号に対する処理手順を概略的に示すフローチャートである。 ＦＩＲフィルタの構成例を示すブロック図である。 ＩＩＲフィルタの構成例を示すブロック図である。 係数保持部が保持する実時間係数データ（フィルタ係数）の一例を示す図である。 圧縮音声ストリームＡstのフォーマットが５．１チャネルである場合の、リスナＭと想定チャネル配置の関係の一例を示す図である。 圧縮音声ストリームＡstのフォーマットが７．１チャネルで、フロント・ハイチャネルの音声信号が存在する場合の、リスナＭと想定チャネル配置の関係の一例を示す図である。 圧縮音声ストリームＡstのフォーマットが７．１チャネルで、バック・サラウンドチャネルの音声信号が存在する場合の、リスナＭと想定チャネル配置の関係の一例を示す図である。 信号処理部の、フロント・ハイチャネル（ＨＬ，ＨＲ）あるいはバック・サラウンドチャネル（ＢＬ，ＢＲ）の音声信号を処理するＦＩＲフィルタに着目したブロック図である。 係数設定部における、フロント・ハイチャネルあるいはバック・サラウンドチャネルの音声信号を処理するＦＩＲフィルタへのフィルタ係数設定の処理手順の一例を示すフローチャートである。 係数設定部におけるフロント・ハイチャネル（ＨＬ，ＨＲ）あるいはバック・サラウンドチャネル（ＢＬ，ＢＲ）の音声信号を処理するＦＩＲフィルタに対するフィルタ係数設定の処理手順の一例を示すフローチャートである。 係数設定部の係数保持部にインパルス応答に対応したフィルタ係数として時系列係数データが保持されていることを示す図である。 係数保持部に周波数領域データを保持しておくことも可能であることを示す図である。 係数設定部におけるデジタルフィルタへのフィルタ係数設定の処理手順の一例を示すフローチャートである。 係数保持部が複数のチャネルで共有すべき時系列係数データを持つ一例を示す図である。 直接音部分のデータのみを周波数領域データに変換してデジタルフィルタに設定する際における係数設定部の処理手順の一例を示すフローチャートである。 実音場データの取得を説明するための図である。 実音場データを説明するための図である。 無響室データの取得を説明するための図である。 無響室データを説明するための図である。 時系列係数データが実音場データと無響室データとを組み合わせたものとなることを説明するための図である。 「直接音Ｌ」、「直接音Ｒ」、「Reverb Ｌ」、「Reverb Ｒ」、「伝達関数Ｌａ」、「伝達関数Ｒａ」および「スピーカ特性ＳＰｒ」に対応したインパルス応答の一例を示す図である。 実音場データと無響室データとを組み合わせた時系列係数データの変形例を示す図である。 音声信号処理装置における制御部の制御手順を概略的に示すフローチャートである。 ヘッドホン装置における音像定位を説明するための図である。
以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．第１の実施の形態
２．変形例
＜１．実施の形態＞
［音声信号処理装置の構成例］
図１は、実施の形態としての音声信号処理装置１００の構成例を示している。この音声信号処理装置１００は、制御部１０１と、入力端子１０２と、デコード部１０３と、係数設定部１０４と、信号処理部１０５と、出力端子１０６Ｌ，１０６Ｒを有している。
制御部１０１は、マイクロコンピュータを備え、音声信号処理装置１００の各部の動作を制御する。入力端子１０２は、圧縮音声ストリームＡstを入力するための端子である。デコード部１０３は、圧縮音声ストリームＡstをデコードして、所定数のチャネルの音声信号を得る。例えば、２チャネルの音声信号、５.１チャネルの音声信号、７．１チャネルの音声信号などである。
デコード部１０３は、図示のように、例えば、デコーダ１０３ａとポストデコーダ１０３ｂにより構成されている。デコーダ１０３ａは、圧縮音声ストリームＡstのデコード処理を行う。この場合、圧縮音声ストリームＡstのフォーマットに応じて、例えば、２チャネルの音声信号、あるいは５.１、または７．１チャネルの音声信号が得られる。
デコード部１０３のデコーダ１０３ａでは、圧縮音声ストリームＡstのフォーマットに応じたモードによりデコード処理が行われる。デコード部１０３は、このフォーマット情報（デコードモード情報）を、制御部１０１に送る。ポストデコーダ１０３ｂは、制御部１０１のフォーマット情報に基づいた制御により、デコーダ１０３ａから得られる音声信号を、例えば２チャネルから５．１、または７．１チャネルに、５．１チャネルから７．１チャネルに拡張する。
ここで、２チャネルの音声信号には、左フロントチャネル（ＦＬ）および右フロントチャネル（ＦＲ）の２チャネルの音声信号が含まれる。また、５.１チャネルの音声信号には、左フロントチャネル（ＦＬ）、右フロントチャネル（ＦＲ）、センタチャネル（Ｃ）、左リアチャネル（ＳＬ）、右リアチャネル（ＳＲ）および低域増強チャネル（ＬＦＥ）の６チャネルの音声信号が含まれる。
また、７.１チャネルの音声信号には、上述の５.１チャネルの音声信号と同様の６チャネルの音声信号の他に、２チャネルの音声信号が含まれる。この２チャネルの音声信号は、圧縮音声ストリームＡstのフォーマット、またはポストデコーダ１０３ｂの処理により、以下のような２チャネルの音声信号となる。例えば、５.１チャネルの音声信号と同様の６チャネルの音声信号の他に、左フロント・ハイチャネル（ＨＬ）および右フロント・ハイチャネル（ＨＲ）の２チャネルの音声信号が含まれる。また、例えば、５.１チャネルの音声信号と同様の６チャネルの音声信号の他に、左バック・サラウンドチャネル（ＢＬ）および右バック・サラウンド（ＢＲ）の２チャネルの音声信号が含まれる。
信号処理部１０５は、例えばＤＳＰ（Digital Signal Processor）で構成され、デコード部１０３で得られる所定数のチャネルの音声信号に基づいて、ヘッドホン装置２００に供給する左チャネル音声信号ＳＬおよび右チャネル音声信号ＳＲを生成する。デコード部１０３の出力側から信号処理部１０５の入力側には、上述した７．１チャネルの８チャネルの音声信号のそれぞれに対応した信号ラインが用意されている。
ここで、デコード部１０３から２チャネルあるいは６チャネルの音声信号が出力される場合には、それらのチャネルに対応した信号ラインのみが使用されて、デコード部１０３から信号処理部１０５に音声信号が送られる。
圧縮音声ストリームＡstのフォーマットが７．１チャネルであってデコード部１０３から８チャネルの音声信号が出力される場合には、全ての信号ラインが使用されて、デコード部１０３から信号処理部１０５に音声信号が送られる。この場合、左フロント・ハイチャネル（ＨＬ）および右フロント・ハイチャネル（ＨＲ）の２チャネルの音声信号と、左バック・サラウンドチャネル（ＢＬ）および右バック・サラウンドチャネル（ＢＲ）の２チャネルの音声信号は、同一の信号ラインにより送られる。
信号処理部１０５は、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルの畳み込み結果を加算して、左チャネル音声信号ＳＬを生成する。同様に、信号処理部１０５は、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルの畳み込み結果を加算して、右チャネル音声信号ＳＲを生成する。
図２は、信号処理部１０５の構成例を示している。ＦＩＲフィルタ５１-1L，５１-1Rは、左フロントチャネル（ＦＬ）の音声信号を処理するデジタルフィルタである。ＦＩＲフィルタ５１-1Lは、左フロントチャネル（ＦＬ）の音声信号に、このチャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答を畳み込む。ＦＩＲフィルタ５１-1Rは、左フロントチャネル（ＦＬ）の音声信号に、このチャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答を畳み込む。
また、ＦＩＲフィルタ５１-2L，５１-2Rは、右フロントチャネル（ＦＲ）の音声信号を処理するデジタルフィルタである。ＦＩＲフィルタ５１-2Lは、右フロントチャネル（ＦＲ）の音声信号に、このチャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答を畳み込む。ＦＩＲフィルタ５１-2Rは、右フロントチャネル（ＦＲ）の音声信号に、このチャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答を畳み込む。
また、ＦＩＲフィルタ５１-3L，５１-3Rは、センタチャネル（Ｃ）の音声信号を処理するデジタルフィルタである。ＦＩＲフィルタ５１-3Lは、センタチャネル（Ｃ）の音声信号に、このチャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答を畳み込む。ＦＩＲフィルタ５１-3Rは、センタチャネル（Ｃ）の音声信号に、このチャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答を畳み込む。
また、ＦＩＲフィルタ５１-4L，５１-4Rは、左リアチャネル（ＳＬ）の音声信号を処理するデジタルフィルタである。ＦＩＲフィルタ５１-4Lは、左リアチャネル（ＳＬ）の音声信号に、このチャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答を畳み込む。ＦＩＲフィルタ５１-4Rは、左リアチャネル（ＳＬ）の音声信号に、このチャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答を畳み込む。
また、ＦＩＲフィルタ５１-5L，５１-5Rは、右リアチャネル（ＳＲ）の音声信号を処理するデジタルフィルタである。ＦＩＲフィルタ５１-5Lは、右リアチャネル（ＳＲ）の音声信号に、このチャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答を畳み込む。ＦＩＲフィルタ５１-5Rは、右リアチャネル（ＳＲ）の音声信号に、このチャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答を畳み込む。
また、ＦＩＲフィルタ５１-6L，５１-6Rは、左フロント・ハイチャネル（ＨＬ）あるいは左バック・サラウンドチャネル（ＢＬ）の音声信号を処理するデジタルフィルタである。ＦＩＲフィルタ５１-6Lは、左フロント・ハイチャネル（ＨＬ）あるいは左バック・サラウンドチャネル（ＢＬ）の音声信号に、このチャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答を畳み込む。ＦＩＲフィルタ５１-6Rは、左フロント・ハイチャネル（ＨＬ）あるいは左バック・サラウンドチャネル（ＢＬ）の音声信号に、このチャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答を畳み込む。
また、ＦＩＲフィルタ５１-7L，５１-7Rは、右フロント・ハイチャネル（ＨＲ）あるいは右バック・サラウンドチャネル（ＢＲ）の音声信号を処理するデジタルフィルタである。ＦＩＲフィルタ５１-７Lは、右フロント・ハイチャネル（ＨＲ）あるいは右バック・サラウンドチャネル（ＢＲ）の音声信号に、このチャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答を畳み込む。ＦＩＲフィルタ５１-7Rは、右フロント・ハイチャネル（ＨＲ）あるいは右バック・サラウンドチャネル（ＢＲ）の音声信号に、このチャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答を畳み込む。
また、ＩＩＲフィルタ５１-8L，５１-8Rは、低域増強チャネル（ＬＦＥ）の音声信号（サブウーファー信号）を処理するデジタルフィルタである。ＩＩＲフィルタ５１-8Lは、低域増強チャネル（ＬＦＥ）の音声信号に、このチャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答を畳み込む。ＩＩＲフィルタ５１-8Rは、低域増強チャネル（ＬＦＥ）の音声信号に、このチャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答を畳み込む。
また、加算器５２Ｌは、ＦＩＲフィルタ５１-1L，５１-2L，５１-3L，５１-4L，５１-5L，５１-6L，５１-7Lの出力信号およびＩＩＲフィルタ５１-8Lの出力信号を加算して、左チャネル音声信号ＳＬを生成し、出力端子１０６Ｌに出力する。また、加算器５２Ｒは、ＦＩＲフィルタ５１-1R，５１-2R，５１-3R，５１-4R，５１-5R，５１-6R，５１-7Rの出力信号およびＩＩＲフィルタ５１-8Rの出力信号を加算して、右チャネル音声信号ＳＲを生成し、出力端子１０６Ｒに出力する。
図３に示すように、上述の信号処理部１０５においては、低域増強チャネル（ＬＦＥ）の音声信号Ｓ-LFEを処理するデジタルフィルタはＩＩＲフィルタ５１-8L，５１-8Rで構成され、その他のチャネルの音声信号ＳＡを処理するデジタルフィルタはＦＩＲフィルタ５１-L，５１-Rで構成されている。図４に示すように、低域増強チャネル（ＬＦＥ）の音声信号Ｓ-LFEを処理するデジタルフィルタもＦＩＲフィルタ５１-8L′，５１-8R′で構成することも考えられる
しかし、低域増強チャネル（ＬＦＥ）の音声信号Ｓ-LFEを処理するデジタルフィルタをＩＩＲフィルタ５１-8L′，５１-8R′で構成するのは、以下の理由からである。すなわち、低域増強チャネル（ＬＦＥ）の音声信号Ｓ-LFEは周波数が低く、ＦＩＲフィルタで処理を行うと、タップ長が長くなり、メモリ容量および演算量が大きくなるからである。ＩＩＲフィルタで実現することで、高精度に低域増強を行うことができ、メモリ、演算量削減が可能となる。
図５のフローチャートは、信号処理部１０５における低域増強チャネル（ＬＦＥ）の音声信号に対する処理手順を概略的に示している。まず、信号処理部１０５は、ステップＳＴ１において、低域増強チャネル（ＬＦＥ）の音声信号をデコード部１０３から取得する。そして、信号処理部１０５は、ステップＳＴ２において、低域増強チャネル（ＬＦＥ）の音声信号を、ＩＩＲフィルタ５１-8L，５１-8Rでインパルス応答の畳み込み処理を行う。そして、信号処理部１０５は、ステップＳＴ３において、ＩＩＲフィルタ５１-8L，５１-8Rで得られた畳み込み処理の結果を、他のチャネルの左右の畳み込み処理結果に混合（加算）する。
図６は、ＦＩＲフィルタの構成例を示している。入力端子１１１に得られる信号は、複数段連続して接続された遅延回路１１２ａ，１１２ｂ，‥‥１１２ｍ，１１２ｎの直列回路に供給される。また、入力端子１１１に得られる信号と、各遅延回路１１２ａ〜１１２ｎの出力信号とは、それぞれ別の係数乗算器１１３ａ，１１３ｂ，‥‥１１３ｎ，１１３ｏに供給され、それぞれ個別に設定された係数値が乗算される。そして、各乗算信号が加算器１１４ａ，１１４ｂ‥‥１１４ｍ，１１４ｎで順に加算され、全ての係数乗算信号の加算出力が出力端子１１５に導出される。
図７は、ＩＩＲフィルタの構成例を示している。入力端子８１に得られる入力信号は、係数乗算器８２ａを介して加算器８４に供給される。また、この入力信号は、遅延回路８３ａで遅延された後、係数乗算器８２ｂを介して加算器８４に供給される。また、この遅延回路８３ａの出力は遅延回路８３ｂで遅延された後、係数乗算器８２ｃを介して加算器８４に供給される。
また、加算器８４の加算出力は出力端子８７に供給される。また、この加算出力は遅延回路８５ａで遅延された後、係数乗算器８６ａを介して加算器８４に供給される。また、この遅延回路８５ａの出力は遅延回路８５ｂで遅延された後、係数乗算器８６ｂを介して加算器８４に供給される。そして、加算器８４では、供給される各信号が加算処理されて加算出力が得られる。
図１に戻って、係数設定部１０４は、制御部１０１の制御のもと、圧縮音声ストリームＡstのフォーマット情報、およびポストデコーダ１０３ｂのデコードモード情報に基づいて、上述の信号処理部１０５の各デジタルフィルタに、インパルス応答に応じたフィルタ係数を設定する。この場合、係数設定部１０４は、デコーダ部１０３のデコードモード情報で示されるチャネルに対応したデジタルフィルタに、このフォーマット情報で決まる想定チャネル位置に応じたフィルタ係数を設定する。
この係数設定部１０４は、係数保持部１０４ａと、ＦＦＴ部１０４ｂとを有している。係数保持部１０４ａは、インパルス応答に対応したフィルタ係数として、実時間係数データを保持する。ＦＦＴ部１０４ｂは、係数保持部１０４ａに保持されている実時間係数データを読み出し、周波数領域データに変換して、信号処理部１０５のデジタルフィルタに設定する。上述していないが、信号処理部１０５の各デジタルフィルタでは、インパルス応答の畳み込みが、周波数領域で行われる。
図８は、係数保持部１０４ａが保持する実時間係数データ（フィルタ係数）を示している。すなわち、係数データ５２-1L，５２-1Rは、それぞれ、信号処理部１０５のＦＩＲフィルタ５１-1L，５１-1Rに設定すべき係数データＦＬ-L，ＦＬ-Rを示している。なお、この係数データＦＬ-L，ＦＬ-Rには、入力端子１０２に入力される圧縮音声ストリームＡstの予想されるフォーマットのそれぞれに対応した係数データが含まれているものとする。詳細説明は省略するが、このことは、信号処理部１０５のその他のデジタルフィルタに設定すべき係数データに関しても同様である。
また、係数データ５２-2L，５２-2Rは、それぞれ、信号処理部１０５のＦＩＲフィルタ５１-2L，５１-2Rに設定すべき係数データＦＲ-L，ＦＲ-Rを示している。また、係数データ５２-3L，５２-3Rは、それぞれ、信号処理部１０５のＦＩＲフィルタ５１-3L，５１-3Rに設定すべき係数データＣ-L，Ｃ-Rを示している。また、係数データ５２-4L，５２-4Rは、それぞれ、信号処理部１０５のＦＩＲフィルタ５１-4L，５１-4Rに設定すべき係数データＳＬ-L，ＳＬ-Rを示している。
また、係数データ５２-5L，５２-5Rは、それぞれ、信号処理部１０５のＦＩＲフィルタ５１-5L，５１-5Rに設定すべき係数データＳＲ-L，ＳＲ-Rを示している。また、係数データ５２-6La，５２-6Raは、それぞれ、信号処理部１０５のＦＩＲフィルタ５１-6L，５１-6Rに設定すべき係数データＨＬ-L，ＨＬ-Rを示している。また、係数データ５２-７La，５２-7Raは、それぞれ、信号処理部１０５のＦＩＲフィルタ５１-7L，５１-7Rに設定すべき係数データＨＲ-L，ＨＲ-Rを示している。
また、係数データ５２-6Lb，５２-6Rbは、それぞれ、信号処理部１０５のＦＩＲフィルタ５１-6L，５１-6Rに設定すべき係数データＢＬ-L，ＢＬ-Rを示している。また、係数データ５２-７Lb，５２-7Rbは、それぞれ、信号処理部１０５のＦＩＲフィルタ５１-7L，５１-7Rに設定すべき係数データＢＲ-L，ＢＲ-Rを示している。さらに、係数データ５２-8L，５２-8Rは、それぞれ、信号処理部１０５のＩＩＲフィルタ５１-8L，５１-8Rに設定すべき係数データＬＦ-L，ＬＦ-Rを示している。
図９（ａ）は、デコーダ部１０３のデコードモードが５．１チャネルである場合の、リスナＭと想定チャネル配置の関係の一例を示している。この場合、信号処理部１０５の、フロントチャネル（ＦＬ，ＦＲ）、センタチャネル（Ｃ），リアチャネル（ＳＬ，ＳＲ）および低域増強チャネル（ＬＦＥ）に対応したデジタルフィルタに、想定チャネル配置に応じたフィルタ係数が設定される（図９（ｂ）参照）。
また、図１０（ａ）は、デコーダ部１０３のデコードモードが７．１チャネルで、フロント・ハイチャネルの音声信号が存在する場合の、リスナＭと想定チャネル配置の関係の一例を示している。この場合、信号処理部１０５の、フロントチャネル（ＦＬ，ＦＲ）、センタチャネル（Ｃ），リアチャネル（ＳＬ，ＳＲ）、フロント・ハイチャネル（ＨＬ，ＨＲ）および低域増強チャネル（ＬＦＥ）に対応したデジタルフィルタに、想定チャネル配置に応じたフィルタ係数が設定される（図１０（ｂ）参照）。
また、図１１（ａ）は、デコーダ部１０３のデコードモードが７．１チャネルで、バック・サラウンドチャネルの音声信号が存在する場合の、リスナＭと想定チャネル配置の関係の一例を示している。この場合、信号処理部１０５の、フロントチャネル（ＦＬ，ＦＲ）、センタチャネル（Ｃ），リアチャネル（ＳＬ，ＳＲ）、バック・サラウンドチャネル（ＢＬ，ＢＲ）および低域増強チャネル（ＬＦＥ）に対応したデジタルフィルタに、想定チャネル配置に応じたフィルタ係数が設定される（図１１（ｂ）参照）。
図１２は、信号処理部１０５の、フロント・ハイチャネル（ＨＬ，ＨＲ）あるいはバック・サラウンドチャネル（ＢＬ，ＢＲ）の音声信号を処理するＦＩＲフィルタ５１-6L，５１-6R，５１-7L，５１-7Rに着目したブロック図である。係数設定部１０４は、これらのＦＩＲフィルタに、デコーダ部１０３のデコードモードが７．１チャネルで、フロント・ハイチャネルの音声信号が存在する場合には、フロント・ハイチャネルに係るフィルタ係数を設定する。一方、係数設定部１０４は、これらのＦＩＲフィルタに、デコーダ部１０３のデコードモードが７．１チャネルで、バック・サラウンドチャネルの音声信号が存在する場合には、バック・サラウンドチャネルに係るフィルタ係数を設定する。
図１３のフローチャートは、係数設定部１０４における、フロント・ハイチャネルあるいはバック・サラウンドチャネルの音声信号を処理するＦＩＲフィルタへのフィルタ係数設定の処理手順の一例を示している。係数設定部１０４は、ステップＳＴ１１において、入力ソース（７．１チャネルのデコーダ部１０３出力）の切り替えがあると、ステップＳＴ１２の処理に移る。
このステップＳＴ１２において、係数設定部１０４は、バック・サラウンドチャネルの音声信号（音声データ）が存在するか否かを判断する。バック・サラウンドチャネルの音声信号が存在するとき、係数設定部１０４は、ステップＳＴ１３において、バック・サラウンドチャネルの係数セットを対応するデジタルフィルタ（ＦＩＲフィルタ）に設定する。その後、係数設定部１０４は、ステップＳＴ１４において、信号処理部（ＤＳＰ）１０５のミュートを解除する。
ステップＳＴ１２でバック・サラウンドチャネルの音声信号が存在しないとき、つまりフロント・ハイチャネルの音声信号が存在するとき、係数設定部１０４は、ステップＳＴ１５において、フロント・ハイチャネルの係数セットを対応するデジタルフィルタ（ＦＩＲフィルタ）に設定する。その後、係数設定部１０４は、ステップＳＴ１４において、信号処理部（ＤＳＰ）１０５のミュートを解除する。
図１４のフローチャートは、係数設定部１０４におけるフロント・ハイチャネル（ＨＬ，ＨＲ）あるいはバック・サラウンドチャネル（ＢＬ，ＢＲ）の音声信号を処理するＦＩＲフィルタ５１-6L，５１-6R，５１-7L，５１-7Rに対するフィルタ係数設定の処理手順の一例を示している。係数設定部１０４は、ステップＳＴ２１において、入力ソース（デコーダ部１０３出力）の切り替えがあると、ステップＳＴ２２の処理に移る。
このステップＳＴ２２において、係数設定部１０４は、フロント・ハイチャネル（ＨＬ，ＨＲ）あるいはバック・サラウンドチャネル（ＢＬ，ＢＲ）の音声信号を処理するＦＩＲフィルタへのフィルタ係数設定が必要か否かを判断する。デコーダ部１０３出力が７．１チャネルのフォーマットであって、必要と判断するとき、係数設定部１０４は、ステップＳＴ２３において、フロント・ハイチャネル（ＨＬ，ＨＲ）あるいはバック・サラウンドチャネル（ＢＬ，ＢＲ）を含む各チャネルを処理するデジタルフィルタにフィルタ係数を設定する。その後、係数設定部１０４は、ステップＳＴ２４において、信号処理部（ＤＳＰ）１０５のミュートを解除する。
ステップＳＴ２２で、デコーダ部１０３出力が５．１チャネルのフォーマットであって、必要と判断しないとき、係数設定部１０４は、ステップＳＴ２５において、フロント・ハイチャネル（ＨＬ，ＨＲ）あるいはバック・サラウンドチャネル（ＢＬ，ＢＲ）を除く通常の５．１チャネルの各チャネルを処理するデジタルフィルタにフィルタ係数を設定する。その後、係数設定部１０４は、ステップＳＴ２４において、信号処理部（ＤＳＰ）１０５のミュートを解除する。
図１５に示すように、上述の係数設定部１０４においては、係数保持部１０４ａにはインパルス応答に対応したフィルタ係数として時系列係数データが保持されている。そして、この実時間係数データが周波数領域データに変換されて、信号処理部１０５の各チャネルの音声信号を処理するデジタルフィルタ５１-L，５１-Rに設定される。図１６に示すように、係数保持部１０４ａに周波数領域データを保持しておき、係数設定部１０４が、この周波数領域データをそのまま、信号処理部１０５の各チャネルの音声信号を処理するデジタルフィルタ５１-L，５１-Rに設定することも考えられる。
しかし、係数保持部１０４ａにフィルタ係数を時系列係数データで保持し、この時系列係数データを周波数領域データに変換してデジタルフィルタ５１-L，５１-Rに設定する構成とするのは、以下の理由からである。すなわち、フィルタ係数を時系列係数データで保持することで、フィルタ係数を周波数領域データとして保持する場合に比べて、係数保持部１０４ａにおけるメモリ容量の削減が可能となるからである。
図１７のフローチャートは、係数設定部１０４におけるデジタルフィルタ５１-L，５１-Rへのフィルタ係数設定の処理手順の一例を示している。まず、係数設定部１０４は、ステップＳＴ３１において、係数保持部１０４ａから時系列データを取得する。そして、係数設定部１０４は、ステップＳＴ３２において、この時系列データをＦＦＴ部１０４ｂで周波数領域データに変換し、デジタルフィルタ５１-L，５１-Rに設定する。これにより、ステップＳＴ３３において、デジタルフィルタ５１-L，５１-Rでは、インパルス応答を周波数領域で畳み込むことが可能となる。
また、係数保持部１０４ａにフィルタ係数を時系列係数データで保持しておくことで、複数のチャネルにおいて時系列係数データの一部を共有することが可能となり、係数保持部１０４ａにおけるメモリ容量のさらなる削減が可能となる。図１８は、例えば、係数保持部１０４ａが、複数のチャネルで共有すべき時系列係数データを持つ一例を示している。
時系列係数データＡは、あるチャネル、例えばフロントチャネル（フロント・ローチャネル）の直接音部分のデータであり、時系列係数データＢは、他のチャネル、例えばフロント・ハイチャネルの直接音部分のデータである。また、時系列係数データＣは、これら２つのチャネルで共有すべき残響部分（間接音部分）のデータである。
係数設定部１０４は、あるチャネルのフィルタ係数をデジタルフィルタ５１-L，５１-Rに設定する際には、係数保持部１０４ａから時系列係数データＡおよび時系列データＣを取得し、ＦＦＴ部１０４ｂで周波数領域データに変換して、設定する。一方、係数設定部１０４は、デジタルフィルタ５１-L，５１-Rに設定する際には、係数保持部１０４ａから時系列係数データＢおよび時系列データＣを取得し、ＦＦＴ部１０４ｂで周波数領域データに変換して、設定する。
なお、上述では複数のチャネルで共有すべき時系列係数データを持つ例を説明したが、ある１つのチャネルにおいても、圧縮音声ストリームＡstの複数のフォーマットに対応して、直接音部分のデータは別々に保持するが、残響部分（間接音部分）のデータは共通データとすることも考えられる。この場合、圧縮音声ストリームＡstのフォーマットが変更になった際に、係数設定部１０４は、変更後の圧縮音声ストリームＡstのフォーマットに対応した直接音部分のデータのみを周波数領域データに変換してデジタルフィルタに設定することで対処できる。
図１９のフローチャートは、その際における係数設定部１０４の処理手順の一例を示している。係数設定部１０４は、ステップＳＴ４１において、制御部１０１からフィルタ係数の切換要求を受け取る。そして、係数設定部１０４は、ステップＳＴ４２において、変更要求に対応した時系列係数データのうち、先頭である直接音部分のデータのみを変更するため、そのデータのみを係数保持部１０４ａから取得する。
そして、係数設定部１０４は、ステップＳＴ４３において、この直接音部分のデータをＦＦＴ部１０４ｂで周波数領域データに変換し、デジタルフィルタ５１-L，５１-Rに設定する。これにより、ステップＳＴ４４において、デジタルフィルタ５１-L，５１-Rでは、変更後のインパルス応答を周波数領域で畳み込むことが可能となる。
ここで、フロント・ハイチャネルの時系列係数データの作成手法の一例を説明する。この手法では、フロントチャネル（フロント・ローチャネル）の実測データを利用するものである。まず、図２０に示すように、例えば、ある残響を有する視聴室において、フロントチャネル位置のスピーカＳＰからリスナＭの耳介の外耳道入口に設置したマイクロホンまでのインパルス応答を取得する。このインパルス応答は、初期データと後期データに分け、初期データは直接音係数データとなり、後期データは間接音係数データとなる。
この測定により、図２１（ａ）に示すように、フロントチャネル（フロント・ローチャネル）の音声信号Ｓ-FLを処理するためのデジタルフィルタ(ＦＩＲフィルタ)５１-LL，５１-LRに設定すべき、インパルス応答に対応した時系列係数データを得ることができる。図２１において、「直接音Ｌ」、「直接音Ｒ」は、直接音部分のデータを示し、「Reverb Ｌ」、「Reverb Ｒ」は残響部分（間接音部分）のデータを示している。ここで、「直接音Ｌ」、「直接音Ｒ」には、スピーカ特性ＳＰｒと、伝達関数Ｌｒ，Ｒｒが含まれるので、図２１（ａ）は、図２１（ｂ）に示すように書き換えることができる。
次に、図２２に示すように、残響を有しない無響室において、フロント・ハイチャネル位置のスピーカＳＰからリスナＭの耳介の外耳道入口に設置したマイクロホンまでのインパルス応答を取得する。このインパルス応答は直接音係数データとなる。この測定により、図２３（ａ）に示すように、フロント・ハイチャネルの音声信号Ｓ-FHを処理するためのデジタルフィルタ(ＦＩＲフィルタ)５１-HL，５１-HRに設定すべき、直接音係数データを得ることができる。
この直接音係数データは、スピーカ特性ＳＰａと、伝達関数Ｌａ，Ｒａからなっている。スピーカ特性ＳＰａは既知であることから、測定された直接音係数データから伝達関数Ｌａ，Ｒａを得ることができる。ここで、スピーカ特性ＳＰａを正規化すると、図２３（ｂ）に示すようになる。スピーカ特性ＳＰａは、スピーカＳＰの直前で測定することで得ることができる。
上述の実測データおよび無響室データとから、フロント・ハイチャネルの音声信号Ｓ-FHを処理するためのデジタルフィルタ(ＦＩＲフィルタ)５１-HL，５１-HRに設定すべき最終的な時系列係数データが生成される。このように、生成される時系列係数データは、実音場データと無響室データとを組み合わせたものとなる。
この場合、図２４に示すように、デジタルフィルタ５１-HLに設定すべき最終的な時系列係数データは、スピーカ特性ＳＰrと、伝達関数Ｌａと、残響部分（間接音部分）データ「Reverb Ｌ」を含むものとなる。この時系列係数データは、フロントチャネル（フロント・ローチャネル）の音声信号Ｓ-FLを処理するデジタルフィルタ５１-LLに設定すべき時系列係数データ（図２１（ｂ）参照）のうち、伝達関数Ｌｒを伝達関数Ｌａに置き換えることで得ることができる。
同様に、図２４に示すように、デジタルフィルタ５１-HRに設定すべき最終的な時系列係数データは、スピーカ特性ＳＰrと、伝達関数Ｒａと、残響部分（間接音部分）データ「Reverb Ｒ」を含むものとなる。この時系列係数データは、フロントチャネル（フロント・ローチャネル）の音声信号Ｓ-FRを処理するデジタルフィルタ５１-LRに設定すべき時系列係数データ（図２１（ｂ）参照）のうち、伝達関数Ｒｒを伝達関数Ｒａに置き換えることで得ることができる。
なお、図２５は、「直接音Ｌ」、「直接音Ｒ」、「Reverb Ｌ」、「Reverb Ｒ」、「伝達関数Ｌａ」、「伝達関数Ｒａ」および「スピーカ特性ＳＰｒ」に対応したインパルス応答の一例を示している。
上述したような手法でフロント・ハイチャネルの時系列係数データを作成することで、例えば、実音場に通常の５．１チャネルの配置しかない場合であっても、７.１チャネルのフロント・ハイのフィルタ係数（時系列係数データ）を容易に取得可能となる。この場合、再現したい音場の条件を維持し、左右のチャネルの関係は無響室の関係となる。そのため、音像定位に関してはピュアなものとなり、残響に関しては再現したい音場の残響を再現できるものとなる。
また、上述したような手法でフロント・ハイチャネルの時系列係数データを作成することで、デジタルフィルタ５１-HL，５１-HRに設定すべき時系列係数データのうちスピーカ特性ＳＰｒが共有されるので、左右チャネル間の音の相違を低減でき、音像定位の違和感をなくすことができる。なお、左右のチャネル間で残響部分（間接音部分）データを共有することも考えられ、その場合には、係数保持部１０４ａのメモリ容量の削減が可能になる。
なお、図２４に示すデジタルフィルタ５１-HL，５１-HRに設定すべき時系列係数データを変形して、図２６にすることも考えられる。この場合においても、左右チャネル間の伝達関数の相対的な関係は維持される。
図１に示す音声信号処理装置１００の動作を簡単に説明する。入力端子１０２に圧縮音声ストリームＡstが入力される。この圧縮音声ストリームＡstは、デコード部１０３に供給される。このデコード部１０３では、圧縮音声ストリームＡstのフォーマットに応じたモードによりデコード処理が行われる。この際、圧縮音声ストリームＡstのフォーマット情報（デコードモード情報）が、制御部１０１に送られる。
デコード部１０３で得られる所定数のチャネル（２チャネル、６チャネル、８チャネルなど）の音声信号は、それぞれ、専用の信号ラインにより、信号処理部１０５に供給される。ここで、信号処理部１０５の各デジタルフィルタには、制御部１０１の制御のもと、係数設定部１０４により、デコーダ部１０３のデコードモード情報に基づいて、想定チャネル配置に応じたフィルタ係数が設定される。つまり、デコードモード情報で示されるチャネルに対応したデジタルフィルタに、このデコードモード情報で決まる想定チャネル位置に応じたフィルタ係数が設定される。
信号処理部１０５では、デコード部１０３で得られる所定数のチャネルの音声信号に基づいて、ヘッドホン装置２００に供給する左チャネル音声信号ＳＬおよび右チャネル音声信号ＳＲが生成される。この場合、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルの畳み込み結果が加算されて、左チャネル音声信号ＳＬが生成される。同様に、所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答がデジタルフィルタにより畳み込まれ、各チャネルの畳み込み結果が加算されて、右チャネル音声信号ＳＲが生成される。
信号処理部１０５で生成された左チャネル音声信号ＳＬは、出力端子１０６Ｌに導出される。また、この信号処理部１０５で生成された右チャネル音声信号ＳＲは、出力端子１０６Ｒに導出される。これらの音声信号ＳＬ，ＳＲは、ヘッドホン装置２００に供給されて再生される。
図２７のフローチャートは、図１に示す音声信号処理装置１００における制御部１０１の制御手順を概略的に示している。制御部１０１は、ステップＳＴ５１において、圧縮音声ストリームＡstが入力されると、ステップＳＴ５２において、圧縮音声ストリームＡstのフォーマット情報およびデコーダ部１０３のデコードモード情報に基づいて、信号処理部１０５に設定すべきフィルタ係数を選択し、係数設定部１０４に設定させる。このステップＳＴ５２の後、制御部１０１は、ステップＳＴ５３において、制御のメインルーチンをスタートする。
上述したように、図１に示す音声信号処理装置１００においては、デコーダ部１０３のデコードモード情報に基づいて、信号処理部１０５の各デジタルフィルタに、想定チャネル配置に応じたフィルタ係数が設定される。そのため、圧縮音声ストリームＡstのフォーマットが変更になった場合にあっても、所定数のチャネルの音声信号から各チャネルの音像定位が良好に行われる２チャネルステレオ音声信号を得ることが可能になる。
また、図１に示す音声信号処理装置１００においては、信号処理部１０５の低域増強チャネル（ＬＦＥ）の音声信号（サブウーファー信号）を処理するデジタルフィルタは、ＩＩＲフィルタで構成される。そのため、低域増強チャネル（ＬＦＥ）の音声信号の処理のためのメモリ、演算量の削減が可能となる。
また、図１に示す音声信号処理装置１００においては、信号処理部１０５のフロント・ハイのチャネルの音声信号を処理するデジタルフィルタに設定されるフィルタ係数は、実音場データと無響室データとを組み合わせて得られたデータとされる。そのため、例えば、実音場に通常の５．１チャネルの配置しかない場合であっても、７.１チャネルのフロント・ハイのフィルタ係数を容易に取得可能となる。
また、図１に示す音声信号処理装置１００においては、係数設定部１０４の係数保持部１０４ａには、インパルス応答に対応したフィルタ係数として、時系列係数データが保持される。そして、係数設定時には、この時系列係数データがＦＦＴ部１０４ｂで周波数領域データに変換されてデジタルフィルタに設定される。そのため、フィルタ係数を保持する係数保持部１０４ａのメモリ容量の削減が可能となる。
本技術によれば、圧縮音声ストリームのフォーマットが変更になった場合にあっても、所定数のチャネルの音声信号から各チャネルの音像定位が良好に行われる２チャネルステレオ音声信号を得ることができる。また、本技術によれば、低音域専用チャネルの音声信号の処理のためのメモリ、演算量の削減を図ることができる。また、本技術によれば、例えば、実音場に通常の５．１チャネルの配置しかない場合であっても、７.１チャネルのフロント・ハイのフィルタ係数を容易に取得できる。本技術によれば、フィルタ係数を保持するメモリの容量の削減を図ることができる。
＜２．変形例＞
なお、上述実施の形態においては、マルチチャネル音声信号からヘッドホン装置を駆動するための２チャネルの音声信号を生成する例を示した。ヘッドホン装置ではなく、例えば、リスナの側に配置される２チャネルスピーカを駆動する２チャネルの音声信号を生成する場合にも、本技術を同様に適用できることは勿論である。
また、本技術は、以下のような構成を取ることもできる。
（１）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコード部と、
上記デコード部で得られた所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号を生成する信号処理部とを備え、
上記信号処理部は、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左チャネル音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右チャネル音声信号を生成し、
上記圧縮音声ストリームのフォーマット情報に基づいて、上記信号処理部の上記デジタルフィルタに上記インパルス応答に応じたフィルタ係数を設定する係数設定部をさらに備える
音声信号処理装置。
（２）上記係数設定部は、
上記デコードモード情報で示されるチャネルに対応したデジタルフィルタに、上記フォーマット情報で決まる想定チャネル配置に応じたフィルタ係数を設定する
前記（１）に記載の音声信号処理装置。
（３）上記信号処理部は、
複数のチャネルの音声信号の処理に兼用される上記デジタルフィルタを含む
前記（１）または（２）に記載の音声信号処理装置。
（４）上記兼用されるデジタルフィルタは、７．１チャネルの音声信号を構成するフロント・ハイの音声信号または７．１チャネルの音声信号を構成するバック・サラウンドの音声信号を処理する
前記（３）に記載の音声信号処理装置。
（５）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られる所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記圧縮音声ストリームのフォーマット情報に基づいて、上記デジタルフィルタに上記インパルス応答に応じたフィルタ係数を設定する係数設定ステップをさらに備える
音声信号処理方法。
（６）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られる所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記圧縮音声ストリームのフォーマット情報に基づいて、上記デジタルフィルタに上記インパルス応答に応じたフィルタ係数を設定する係数設定ステップをさらに備える
音声信号処理方法をコンピュータに実行させるためのプログラム。
（７）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られる所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記圧縮音声ストリームのフォーマット情報に基づいて、上記デジタルフィルタに上記インパルス応答に応じたフィルタ係数を設定する係数設定ステップをさらに備える
音声信号処理方法をコンピュータに実行させるためのプログラムを記録した記録媒体。
（８）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコード部と、
上記デコード部で得られた所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理部とを備え、
上記信号処理部は、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記信号処理部の少なくとも低域増強チャネルの音声信号を処理するデジタルフィルタをＩＩＲフィルタで構成する
音声信号処理装置。
（９）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られる所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
少なくとも低域増強チャネルの音声信号を上記デジタルフィルタとしてのＩＩＲフィルタで処理する
音声信号処理方法。
（１０）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られる所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
少なくとも低域増強チャネルの音声信号を上記デジタルフィルタとしてのＩＩＲフィルタで処理する
音声信号処理方法をコンピュータに実行させるためのプログラム。
（１１）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られる所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
少なくとも低域増強チャネルの音声信号を上記デジタルフィルタとしてのＩＩＲフィルタで処理する
音声信号処理方法をコンピュータに実行させるためのプログラムを記録した記録媒体。
（１２）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコード部と、
上記デコード部で得られた所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理部とを備え、
上記信号処理部は、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記信号処理部のフロント・ハイのチャネルの音声信号を処理するデジタルフィルタに設定されるフィルタ係数は、実音場データと無響室データとを組み合わせて得られたデータである
音声信号処理装置。
（１３）上記実音場データには、フロントチャネルのスピーカ特性と該フロントチャネルの残響部分のデータが含まれる
前記（１２）に記載の音声信号処理装置。
（１４）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られた所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップとを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記信号処理ステップでフロント・ハイのチャネルの音声信号を処理するデジタルフィルタに設定されるフィルタ係数は、実音場データと無響室データとを組み合わせて得られたデータである
音声信号処理方法。
（１５）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られた所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップとを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記信号処理ステップでフロント・ハイのチャネルの音声信号を処理するデジタルフィルタに設定されるフィルタ係数は、実音場データと無響室データとを組み合わせて得られたデータである
音声信号処理方法をコンピュータに実行させるためのプログラム。
（１６）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られた所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップとを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
上記信号処理ステップでフロント・ハイのチャネルの音声信号を処理するデジタルフィルタに設定されるフィルタ係数は、実音場データと無響室データとを組み合わせて得られたデータである
音声信号処理方法をコンピュータに実行させるためのプログラムを記録した記録媒体。
（１７）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコード部と、
上記デコード部で得られた所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号を生成する信号処理部とを備え、
上記信号処理部は、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左チャネル音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右チャネル音声信号を生成し、
上記信号処理部のデジタルフィルタは、上記音声信号に対して、上記インパルス応答を周波数領域で畳み込み、
上記インパルス応答に対応したフィルタ係数として時系列係数データを保持する係数保持部と、
上記係数保持部に保持されている時系列係数データを読み出し、周波数領域データに変換して上記デジタルフィルタに設定する係数設定部とをさらに備える
音声信号処理装置。
（１８）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られた所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号を生成する信号処理ステップとを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左チャネル音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右チャネル音声信号を生成し、
上記デジタルフィルタは、上記音声信号に対して、上記インパルス応答を周波数領域で畳み込み、
係数保持部に保持されている時系列係数データを読み出し、周波数領域データに変換して上記デジタルフィルタに設定する係数設定ステップをさらに備える
音声信号処理方法。
（１９）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られた所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号を生成する信号処理ステップとを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左チャネル音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右チャネル音声信号を生成し、
上記デジタルフィルタは、上記音声信号に対して、上記インパルス応答を周波数領域で畳み込み、
係数保持部に保持されている時系列係数データ実時間データを読み出し、周波数領域データに変換して上記デジタルフィルタに設定する係数設定ステップをさらに備える
音声信号処理方法をコンピュータに実行させるためのプログラム。
（２０）圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
上記デコードステップで得られた所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号を生成する信号処理ステップとを備え、
上記信号処理ステップでは、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左チャネル音声信号を生成し、
上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右チャネル音声信号を生成し、
上記デジタルフィルタは、上記音声信号に対して、上記インパルス応答を周波数領域で畳み込み、
係数保持部に保持されている時系列係数データ実時間データを読み出し、周波数領域データに変換して上記デジタルフィルタに設定する係数設定ステップをさらに備える
音声信号処理方法をコンピュータに実行させるためのプログラムを記録した記録媒体。
１００・・・音声信号処理装置
１０１・・・制御部
１０２・・・入力端子
１０３・・・デコード部
１０３ａ・・・デコーダ
１０３ｂ・・・ポストデコーダ
１０４・・・係数設定部
１０４ａ・・・係数保持部
１０４ｂ・・・ＦＦＴ部
１０５・・・信号処理部
１０６Ｌ，１０６Ｒ・・・出力端子

Claims (4)

  1. 圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコード部と、
    上記デコード部で得られた所定数のチャネルの音声信号に基づいて左チャネル音声信号および右チャネル音声信号の２チャネルの音声信号を生成する信号処理部とを備え、
    上記信号処理部は、
    上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左チャネル音声信号を生成し、
    上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右チャネル音声信号を生成し、
    上記圧縮音声ストリームのフォーマット情報に基づいて、上記信号処理部の上記デジタルフィルタに上記インパルス応答に応じたフィルタ係数を設定する係数設定部をさらに備え、
    上記信号処理部は、複数のチャネルの音声信号の処理に兼用される上記デジタルフィルタを含み、
    上記所定数のチャネルの音声信号は７．１チャネルの音声信号であり、上記兼用されるデジタルフィルタは、上記７．１チャネルの音声信号にフロント・ハイの音声信号が含まれるときは当該フロント・ハイの音声信号を処理し、上記７．１チャネルの音声信号にバック・サラウンドの音声信号が含まれるときは当該バック・サラウンドの音声信号を処理する
    音声信号処理装置。
  2. 圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
    上記デコードステップで得られる所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップを有し、
    上記信号処理ステップでは、
    上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
    上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
    上記圧縮音声ストリームのフォーマット情報に基づいて、上記デジタルフィルタに上記インパルス応答に応じたフィルタ係数を設定する係数設定ステップをさらに有し、
    上記所定数のチャネルの音声信号は７．１チャネルの音声信号であり、上記信号処理ステップでは、複数のチャネルの音声信号の処理に兼用される上記デジタルフィルタにより、上記７．１チャネルの音声信号にフロント・ハイの音声信号が含まれるときは当該フロント・ハイの音声信号を処理し、上記７．１チャネルの音声信号にバック・サラウンドの音声信号が含まれるときは当該バック・サラウンドの音声信号を処理する
    音声信号処理方法。
  3. 圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
    上記デコードステップで得られる所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップを有し、
    上記信号処理ステップでは、
    上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
    上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
    上記圧縮音声ストリームのフォーマット情報に基づいて、上記デジタルフィルタに上記インパルス応答に応じたフィルタ係数を設定する係数設定ステップをさらに有し、
    上記所定数のチャネルの音声信号は７．１チャネルの音声信号であり、上記信号処理ステップでは、複数のチャネルの音声信号の処理に兼用される上記デジタルフィルタにより、上記７．１チャネルの音声信号にフロント・ハイの音声信号が含まれるときは当該フロント・ハイの音声信号を処理し、上記７．１チャネルの音声信号にバック・サラウンドの音声信号が含まれるときは当該バック・サラウンドの音声信号を処理する
    音声信号処理方法をコンピュータに実行させるためのプログラム。
  4. 圧縮音声ストリームをデコードして所定数のチャネルの音声信号を得るデコードステップと、
    上記デコードステップで得られる所定数のチャネルの音声信号に基づいて左音声信号および右音声信号の２チャネルの音声信号を生成する信号処理ステップを有し、
    上記信号処理ステップでは、
    上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの左耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記左音声信号を生成し、
    上記所定数のチャネルの音声信号のそれぞれに対して各チャネルの音源位置からリスナの右耳までの経路に応じたインパルス応答をデジタルフィルタにより畳み込み、各チャネルにおける該畳み込み結果を加算して上記右音声信号を生成し、
    上記圧縮音声ストリームのフォーマット情報に基づいて、上記デジタルフィルタに上記インパルス応答に応じたフィルタ係数を設定する係数設定ステップをさらに有し、
    上記所定数のチャネルの音声信号は７．１チャネルの音声信号であり、上記信号処理ステップでは、複数のチャネルの音声信号の処理に兼用される上記デジタルフィルタにより、上記７．１チャネルの音声信号にフロント・ハイの音声信号が含まれるときは当該フロント・ハイの音声信号を処理し、上記７．１チャネルの音声信号にバック・サラウンドの音声信号が含まれるときは当該バック・サラウンドの音声信号を処理する
    音声信号処理方法をコンピュータに実行させるためのプログラムを記録した記録媒体。
JP2011223485A 2011-10-07 2011-10-07 音声信号処理装置、音声信号処理方法、プログラムおよび記録媒体 Expired - Fee Related JP6007474B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2011223485A JP6007474B2 (ja) 2011-10-07 2011-10-07 音声信号処理装置、音声信号処理方法、プログラムおよび記録媒体
US13/591,814 US9607622B2 (en) 2011-10-07 2012-08-22 Audio-signal processing device, audio-signal processing method, program, and recording medium
CN201210375359.8A CN103037300B (zh) 2011-10-07 2012-09-29 音频信号处理设备和音频信号处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011223485A JP6007474B2 (ja) 2011-10-07 2011-10-07 音声信号処理装置、音声信号処理方法、プログラムおよび記録媒体

Publications (3)

Publication Number Publication Date
JP2013085119A JP2013085119A (ja) 2013-05-09
JP2013085119A5 JP2013085119A5 (ja) 2014-11-06
JP6007474B2 true JP6007474B2 (ja) 2016-10-12

Family

ID=48023701

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011223485A Expired - Fee Related JP6007474B2 (ja) 2011-10-07 2011-10-07 音声信号処理装置、音声信号処理方法、プログラムおよび記録媒体

Country Status (3)

Country Link
US (1) US9607622B2 (ja)
JP (1) JP6007474B2 (ja)
CN (1) CN103037300B (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9280964B2 (en) * 2013-03-14 2016-03-08 Fishman Transducers, Inc. Device and method for processing signals associated with sound
EP2830326A1 (en) * 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio prcessor for object-dependent processing
JP6251809B2 (ja) * 2013-12-13 2017-12-20 アンビディオ，インコーポレイテッド サウンドステージ拡張用の装置及び方法
KR102356246B1 (ko) * 2014-01-16 2022-02-08 소니그룹주식회사 음성 처리 장치 및 방법, 그리고 프로그램
JP6351538B2 (ja) * 2014-05-01 2018-07-04 ジーエヌ ヒアリング エー／エスＧＮ Ｈｅａｒｉｎｇ Ａ／Ｓ ディジタル音響信号用の多帯域信号プロセッサ
CN104064191B (zh) * 2014-06-10 2017-12-15 北京音之邦文化科技有限公司 混音方法及装置
GB2544458B (en) * 2015-10-08 2019-10-02 Facebook Inc Binaural synthesis
US10880638B2 (en) * 2016-07-05 2020-12-29 Sony Corporation Sound field forming apparatus and method
US20180034757A1 (en) 2016-08-01 2018-02-01 Facebook, Inc. Systems and methods to manage media content items
JP6763721B2 (ja) * 2016-08-05 2020-09-30 大学共同利用機関法人情報・システム研究機構 音源分離装置
CN107039043B (zh) * 2017-06-08 2018-08-03 腾讯科技（深圳）有限公司 信号处理的方法及装置、多人会话的方法及系统
CN111193917B (zh) * 2018-12-29 2021-08-10 中科寒武纪科技股份有限公司 运算方法、装置及相关产品

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5404406A (en) * 1992-11-30 1995-04-04 Victor Company Of Japan, Ltd. Method for controlling localization of sound image
JP3840889B2 (ja) * 1999-09-29 2006-11-01 日本ビクター株式会社 信号処理装置、伝送方法
JP4240683B2 (ja) * 1999-09-29 2009-03-18 ソニー株式会社 オーディオ処理装置
JP2002191099A (ja) * 2000-09-26 2002-07-05 Matsushita Electric Ind Co Ltd 信号処理装置
JP2003230198A (ja) * 2002-02-01 2003-08-15 Matsushita Electric Ind Co Ltd 音像定位制御装置
JP2004215781A (ja) * 2003-01-10 2004-08-05 Victor Co Of Japan Ltd ゲーム機及びゲーム機用プログラム
WO2005036523A1 (en) * 2003-10-09 2005-04-21 Teac America, Inc. Method, apparatus, and system for synthesizing an audio performance using convolution at multiple sample rates
JP3985234B2 (ja) 2004-06-29 2007-10-03 ソニー株式会社 音像定位装置
GB2419265B (en) * 2004-10-18 2009-03-11 Wolfson Ltd Improved audio processing
JP2006222686A (ja) * 2005-02-09 2006-08-24 Fujitsu Ten Ltd オーディオ装置
DE102005010057A1 (de) * 2005-03-04 2006-09-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines codierten Stereo-Signals eines Audiostücks oder Audiodatenstroms
US8243969B2 (en) * 2005-09-13 2012-08-14 Koninklijke Philips Electronics N.V. Method of and device for generating and processing parameters representing HRTFs
KR100739798B1 (ko) * 2005-12-22 2007-07-13 삼성전자주식회사 청취 위치를 고려한 2채널 입체음향 재생 방법 및 장치
EP1984913A4 (en) * 2006-02-07 2011-01-12 Lg Electronics Inc DEVICE AND METHOD FOR CODING / DECODING A SIGNAL
WO2007106553A1 (en) * 2006-03-15 2007-09-20 Dolby Laboratories Licensing Corporation Binaural rendering using subband filters
JP5265517B2 (ja) * 2006-04-03 2013-08-14 ディーティーエス・エルエルシー オーディオ信号処理
EP2119306A4 (en) * 2007-03-01 2012-04-25 Jerry Mahabub SOUND SPECIALIZATION AND ENVIRONMENT SIMULATION
JP2008311718A (ja) * 2007-06-12 2008-12-25 Victor Co Of Japan Ltd 音像定位制御装置及び音像定位制御プログラム
JP5380945B2 (ja) * 2008-08-05 2014-01-08 ヤマハ株式会社 音響再生装置およびプログラム
CN102227769A (zh) * 2008-10-01 2011-10-26 Gvbb控股股份有限公司 解码装置、解码方法、编码装置、编码方法和编辑装置
JP5540581B2 (ja) * 2009-06-23 2014-07-02 ソニー株式会社 音声信号処理装置および音声信号処理方法
WO2012088336A2 (en) * 2010-12-22 2012-06-28 Genaudio, Inc. Audio spatialization and environment simulation

Also Published As

Publication number Publication date
CN103037300B (zh) 2016-10-05
JP2013085119A (ja) 2013-05-09
CN103037300A (zh) 2013-04-10
US20130089209A1 (en) 2013-04-11
US9607622B2 (en) 2017-03-28

Similar Documents

Publication Publication Date Title
JP6007474B2 (ja) 音声信号処理装置、音声信号処理方法、プログラムおよび記録媒体
KR100644617B1 (ko) 7.1 채널 오디오 재생 방법 및 장치
KR101562379B1 (ko) 공간 디코더 유닛 및 한 쌍의 바이노럴 출력 채널들을 생성하기 위한 방법
KR101567461B1 (ko) 다채널 사운드 신호 생성 장치
US8605909B2 (en) Method and device for efficient binaural sound spatialization in the transformed domain
CN101112120A (zh) 处理多声道音频输入信号以从其中产生至少两个声道输出信号的装置和方法、以及包括执行该方法的可执行代码的计算机可读介质
WO2006043413A1 (ja) 音声信号処理装置および音声信号処理方法
JP2007028624A (ja) ワイドモノサウンドの再生方法及びシステム
JP2005223713A (ja) 音響再生装置、音響再生方法
JP4297077B2 (ja) 仮想音像定位処理装置、仮想音像定位処理方法およびプログラム並びに音響信号再生方式
US8958585B2 (en) Sound image localization apparatus
JP4951985B2 (ja) 音声信号処理装置、音声信号処理システム、プログラム
JP3916087B2 (ja) 疑似ステレオ化装置
US8107632B2 (en) Digital signal processing apparatus, method thereof and headphone apparatus
JP2005223714A (ja) 音響収音装置、音響収音方法、記録媒体
KR100641454B1 (ko) 오디오 시스템의 크로스토크 제거 장치
JP4462350B2 (ja) 音声信号処理装置および音声信号処理方法
JP2007202020A (ja) 音声信号処理装置、音声信号処理方法、プログラム
JP7332745B2 (ja) 音声処理方法及び音声処理装置
KR20080097564A (ko) 2채널 음향신호의 스테레오 효과를 보강하기 위한 입체음향출력장치 및 방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140917

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140917

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150417

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150512

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150702

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160331

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160816

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160829

R151 Written notification of patent or utility model registration

Ref document number: 6007474

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees