JPWO2010140306A1 - 信号処理装置 - Google Patents

信号処理装置 Download PDF

Info

Publication number
JPWO2010140306A1
JPWO2010140306A1 JP2011518230A JP2011518230A JPWO2010140306A1 JP WO2010140306 A1 JPWO2010140306 A1 JP WO2010140306A1 JP 2011518230 A JP2011518230 A JP 2011518230A JP 2011518230 A JP2011518230 A JP 2011518230A JP WO2010140306 A1 JPWO2010140306 A1 JP WO2010140306A1
Authority
JP
Japan
Prior art keywords
signal
prediction
error
adder
gain
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011518230A
Other languages
English (en)
Other versions
JP5355690B2 (ja
Inventor
木村　勝
勝 木村
松岡　文啓
文啓 松岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2011518230A priority Critical patent/JP5355690B2/ja
Publication of JPWO2010140306A1 publication Critical patent/JPWO2010140306A1/ja
Application granted granted Critical
Publication of JP5355690B2 publication Critical patent/JP5355690B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/26—Pre-filtering or post-filtering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/12—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being prediction coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H04S1/007—Two-channel systems in which the audio signals are in digital form

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)

Abstract

予測誤差算出手段１３が右信号ｒ（ｎ）１０２に基づいて左信号ｌ（ｎ）１０１を予測した予測信号と左信号ｌ（ｎ）１０１との誤差信号１０３を算出し、ゲイン調整手段１７がゲイン調整して誤差信号１０７を出力し、第１の加算器１４が左信号ｌ（ｎ）１０１と誤差信号１０７とを加算して出力し、第２の加算器１５が右信号ｒ（ｎ）１０２と誤差信号１０７を逆相にして加算し出力する。

Description

本発明は、例えば、圧縮符号化されたオーディオ信号を復号化して再生する信号処理装置に関するものである。
通常、オーディオ信号を再生する際に、再生するオーディオ信号に空間的な情報が多く含まれるほど豊かな音場感や空気感が得られ、空間的な情報は左信号と右信号の差分（以下、左右差信号と称す）に現れる。
一方、近年では、オーディオＣＤに代わってＡＡＣ（Advanced Audio Codec）やＭＰ３（MPEG Audio Layer 3）などの圧縮符号化を行うことで、オーディオ信号を保存するための記憶装置の容量や送受信の通信量を節減する技術が普及している。
圧縮符号化されたオーディオ信号は、高域成分が欠落したり、左右差信号の中高域のスペクトルが部分的に欠落し、歯抜けのようになって特性が劣化している。特性が劣化したオーディオ信号を再生すると、高域成分の欠落により、こもり感が発生する傾向や、左右差信号の特性が劣化することにより、音場感・空気感が縮退する傾向がある。
そこで、圧縮符号化されたオーディオ信号の音質を改善する信号処理装置が開示されている（特許文献１を参照）。特許文献１によれば、入力したオーディオ信号のピーク値の高域成分及び低域成分を取り出して加算することで、信号圧縮符号化によって欠落した高域成分の回復を図ることができ、こもり感を緩和している。
特開２００８−１０２２０６号公報
しかしながら、上述した従来の信号処理装置では、例えば、オーディオ信号の欠落した高域成分を回復してこもり感を緩和することができるが、圧縮符号化前のオーディオ信号の左右差信号の特性を回復することができず、豊かな音場感や空気感を回復できないという課題がある。
この発明は、上述した課題を解決するためになされたもので、圧縮符号化前の信号の特性を回復する信号処理装置を提供することを目的とする。
この発明に係る信号処理装置は、第１及び第２の信号を入力し、第２の信号に基づいて予測した第１の信号の予測信号と第１の信号との誤差信号を算出する予測誤差算出手段と、第１の信号と誤差信号とを加算する第１の加算器と、第２の信号と誤差信号を逆相にして加算する第２の加算器とを備えたものである。
この発明によれば、予測誤差算出手段が第２の信号に基づいて予測した第１の信号の予測信号と第１の信号との誤差信号を算出し、第１の加算器が第１の信号と誤差信号とを加算し、第２の加算器が第２の信号と誤差信号を逆相にして加算するように構成したので、圧縮符号化前の信号の特性を回復させることができる。その結果、例えば、ステレオオーディオ信号の左右差信号の特性を回復し、豊かな音場感や空気感を回復することができる。
この発明の実施の形態１の信号処理装置の構成を示すブロック図である。 実施の形態１の予測誤差算出手段の構成を示すブロック図である。 実施の形態１の信号処理装置において、図３（ａ）は左信号周波数スペクトルと右信号の周波数スペクトルの相関が弱い場合の左右和信号と左右差信号の周波数スペクトルの位相関係を示した図であり、図３（ｂ）は左信号周波数スペクトルと右信号の周波数スペクトルの相関が強い場合の左右和信号と左右差信号の周波数スペクトルの位相関係を示した図である。 実施の形態１の信号処理装置において、圧縮符号化による左右差信号の劣化と信号処理装置による信号処理後の左右差信号の回復を示す図である。 この発明の実施の形態２の信号処理装置の構成を示すブロック図である。
以下、この発明の実施の形態を、図面を参照しながら詳細に説明する。なお、以下では、この発明の実施の形態に係る信号処理装置をオーディオ装置に適用し、相関関係のある第１及び第２の入力信号として、ステレオオーディオ信号の左信号及び右信号を処理するものとして説明する。
実施の形態１．
図１は、この発明の実施の形態１の信号処理装置１の構成を示すブロック図である。
図１に示すように、信号処理装置１は、デコーダ２と出力装置３の間に設けられ、デコーダ２から入力したステレオオーディオ信号としての左信号ｌ（ｎ）１０１（第１の信号）、右信号ｒ（ｎ）１０２（第２の信号）の差信号を信号処理し、改善した左信号ｌｏｕｔ（ｎ）１０９、右信号ｒｏｕｔ（ｎ）１１０を出力装置３へ出力する。
なお、デコーダ２は、圧縮符号化されたオーディオデータを復号化して、ステレオオーディオ信号として出力するものであり、出力装置３は、ステレオオーディオ信号を音声振動に変換して出力する、例えばスピーカである。
図１に示すように、信号処理装置１は、予測誤差算出手段１３、第１の加算器１４、第２の加算器１５、ゲイン調整手段１７から構成されており、後述する予測誤差算出手段１３がステレオオーディオ信号としての左信号ｌ（ｎ）１０１、右信号ｒ（ｎ）１０２に基づき、左右差信号を改善する改善差信号として誤差信号１０３を算出する。
ゲイン調整手段１７は、誤差信号１０３に対して、所定の値を乗算してゲインを調整し、ゲイン調整後の誤差信号１０７を改善差信号として出力する乗算器である。
また、第１の加算器１４は左信号ｌ（ｎ）１０１と誤差信号１０７を正相同士で加算して左信号ｌｏｕｔ（ｎ）１０９として出力し、第２の加算器１５は右信号ｒ（ｎ）１０２と誤差信号１０７を逆相にして加算し、右信号ｒｏｕｔ（ｎ）１１０として出力する。
次に、信号処理装置１の処理動作について説明する。
図１に示すように、信号処理装置１は、外部のデコーダ２からステレオオーディオ信号として左信号ｌ（ｎ）１０１及び右信号ｒ（ｎ）１０２を入力すると、入力した左信号ｌ（ｎ）１０１及び右信号ｒ（ｎ）１０２をそれぞれ分岐する。
信号処理装置１は、分岐した左信号ｌ（ｎ）１０１の一方の左信号ｌ（ｎ）１０１を予測誤差算出手段１３に入力させると共に、他方の左信号ｌ（ｎ）１０１を第１の加算器１４に入力させる。また、信号処理装置１は、分岐した右信号ｒ（ｎ）１０２の一方の右信号ｒ（ｎ）１０２を予測誤差算出手段１３に入力させると共に、他方の右信号ｒ（ｎ）１０２を第２の加算器１５に入力させる。
予測誤差算出手段１３は、入力した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に基づき、ステレオオーディオ信号の左右差信号を改善する改善差信号として誤差信号１０３を算出し、ゲイン調整手段１７へ出力する。予測誤差算出手段１３の詳細な処理動作については後述する。
ゲイン調整手段１７は、予測誤差算出手段１３から入力した誤差信号１０３に対し、予め設定された固定値、又は外部の図示しない操作部などから適宜設定可能な値を乗算してゲインを調整し、ゲイン調整後の誤差信号１０７を改善差信号として出力する。
ゲイン調整手段１７から出力された誤差信号１０７は分岐して、一方の誤差信号１０７が第１の加算器１４へ入力されると共に、他方の誤差信号１０７が第２の加算器１５へ入力される。
第１の加算器１４は、左信号ｌ（ｎ）１０１とゲイン調整手段１７からの誤差信号１０７とを正相同士で加算し、信号処理後の出力信号として左信号ｌｏｕｔ（ｎ）１０９を外部の出力装置３へ出力する。
また、第２の加算器１５は、ゲイン調整手段１７からの誤差信号１０７を逆相にし、正相の右信号ｒ（ｎ）１０２と逆相の誤差信号１０７とを加算し、信号処理後の出力信号として右信号ｒｏｕｔ（ｎ）１１０を外部の出力装置３へ出力する。言い換えると、第２の加算器１５は、右信号ｒ（ｎ）１０２から誤差信号１０７を減算して出力する。
即ち、第１の加算器１４及び第２の加算器１５は、分岐された誤差信号１０７をそれぞれ逆相の関係にして左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に加算する。
なお、実施の形態１の信号処理装置１は、誤差信号１０３に対し、ゲイン調整手段１７でゲイン調整を行う構成であるが、必要に応じてゲイン調整手段１７を設けない構成にしても良い。
次に、予測誤差算出手段１３の具体的な構成について説明する。
図２は、実施の形態１の予測誤差算出手段１３の構成を示すブロック図である。
図２に示すように、予測誤差算出手段１３は、予測手段２１と信号算出手段２２から構成され、入力した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に基づいて改善差信号としての誤差信号１０３を算出して出力する。
予測手段２１は、入力した右信号ｒ（ｎ）１０２と、過去に入力された右信号ｒ（ｎ−１）、ｒ（ｎ−２）、ｒ（ｎ−３）、・・・、ｒ（ｎ−Ｎ）と予測係数に基づいて左信号ｌ（ｎ）１０１を予測し、予測信号２０３として出力するものであり、例えば、既知のＡＲ（Auto-Regressive）予測技術を用いたＡＲ予測器である。なお、Ｎは予測次数である。
ここで、入力した右信号ｒ（ｎ）１０２を１サンプル分遅延させる図示せぬ遅延手段を設け、１サンプル遅延した右信号ｒ（ｎ−１）１０２と、過去に入力された右信号ｒ（ｎ−２）、ｒ（ｎ−３）、ｒ（ｎ−４）、・・・、ｒ（ｎ−１−Ｎ）と予測係数に基づいて左信号ｌ（ｎ）１０１を予測し、予測信号２０３として出力してもよい。
信号算出手段２２は、入力した予測信号２０３を逆相にすると共に、左信号ｌ（ｎ）１０１と逆相にした予測信号２０３を加算する加算器であり、予測誤差として誤差信号２０４を算出して出力する。
また、予測手段２１は、信号算出手段２２からの誤差信号２０４を入力し、誤差信号２０４に基づき、サンプル時間毎に既知の学習アルゴリズムを用いて予測係数の値を更新する。
次に、予測誤差算出手段１３の処理動作について説明する。
予測誤差算出手段１３は、ステレオオーディオ信号としての左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入力し、左信号ｌ（ｎ）１０１を信号算出手段２２へ入力し、右信号ｒ（ｎ）１０２を予測手段２１へ入力する。
予測手段２１は、右信号ｒ（ｎ）１０２を入力すると、右信号ｒ（ｎ）１０２と予測係数に基づいて左信号ｌ（ｎ）１０１をＡＲ予測し、予測信号２０３として信号算出手段２２へ出力する。
信号算出手段２２は、予測手段２１から入力した予測信号２０３を逆相にすると共に、逆相にした予測信号２０３と左信号ｌ（ｎ）１０１を加算し、予測信号２０３の予測誤差として誤差信号２０４を出力する。
予測誤差算出手段１３において、信号算出手段２２から出力された誤差信号２０４を分岐して、一方の誤差信号２０４を誤差信号１０３として出力すると共に、他方の誤差信号２０４を予測手段２１に返して入力する。
予測手段２１は、誤差信号２０４を入力すると、誤差信号２０４に基づき、例えば、最急降下法、学習同定法など、既知の学習アルゴリズムを用いて、予測係数の値を更新する。
なお、予測手段２１に右信号ｒ（ｎ）１０２が入力され、信号算出手段２２に左信号ｌ（ｎ）１０１が入力されているが、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入れ替えても良く、どちらか一方の信号に基づいて他方の信号を予測する構成であれば良い。
また、予測手段２１が予測係数をサンプル時間毎に逐次更新する構成について説明したが、これに限らず、ある時点で一括して予測係数を更新しても良いし、さらに、逐次更新を行わず、予め設計した固定の予測係数によって予測手段２１を用いる構成でも良い。
次に、実施の形態１の信号処理装置１による効果について説明する。
まず、ステレオオーディオ信号の左右差信号の特性について説明する。
図３は、周波数θにおける左信号と右信号のスペクトル強度が略等しい場合の左右和信号と左右差信号の周波数スペクトルの位相関係を示した図である。図３（ａ）が左信号周波数スペクトルと右信号の周波数スペクトルの相関が弱い場合であり、図３（ｂ）が左信号周波数スペクトルと右信号の周波数スペクトルの相関が強い場合である。
図３（ａ）及び図３（ｂ）に示すように、左信号と右信号のスペクトル強度が略等しい場合、左信号と右信号の周波数スペクトルの相関（位相差の大小）によらず、左右和信号の周波数スペクトルの位相と左右差信号の周波数スペクトルの位相が直交する。
ここで、左右和信号は左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の同相成分であることから、左右和信号は時間遅れを考慮しないとき（時間遅れゼロ）の左信号ｌ（ｎ）１０１と信号ｒ（ｎ）１０２の相関成分であり、左右和信号と直交する左右差信号は時間遅れを考慮しないとき（時間遅れゼロ）の左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の無相関成分となる。
一方、本実施の形態１では、予測手段２１としてＡＲ予測器を用いており、ＡＲ予測器においては、入力信号がＡＲモデルに従うことにより、Ｗｉｅｎｅｒ−Ｈｏｐｆ方程式を満たす最適な予測が可能である。最適に予測された予測信号と、この予測信号と目標信号との誤差信号が直交することは、「直交原理」として知られている。
また、調波構造のある定常信号はＡＲモデルで表現することができる。本実施の形態１においても、楽器音やボーカルなどのステレオオーディオ信号は、調波構造であり、短時間で観測すると定常信号と見なせるため、ステレオオーディオ信号をＡＲモデルと仮定することができる。
ここで、ＡＲ予測器（図２に示す予測手段２１）で予測した予測信号２０３は、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の共通な信号成分と見なせるので、時間遅れを考慮した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の相関成分である。一方、誤差信号２０４は、相関成分と直交することから、時間遅れを考慮した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の無相関成分である。即ち、本実施の形態１の予測誤差算出手段１３により、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を相関成分と無相関成分に分離することができる。
このように、誤差信号１０３は時間遅れを考慮した左右信号の無相関成分であり、左右差信号は時間遅れゼロの左右信号の無相関成分であるため、同様の性質を有している。したがって、実施の形態１の信号処理装置１は、誤差信号１０３を用いて、左右差信号の周波数スペクトルを回復することができる。
図４は、圧縮符号化による左右差信号の劣化と信号処理装置１による信号処理後の左右差信号の回復を示す図である。
図４に示すように、実線は圧縮符号化前の左右差信号及び信号処理後の左右差信号の周波数スペクトルであり、破線は圧縮符号化後の左右差信号の周波数スペクトルである。
図４の実線で示す圧縮符号化前の左右差信号は周波数スペクトルが連続的であるが、図４の破線で示す圧縮符号化後の左右差信号は部分的に周波数スペクトルが欠落し、歯抜けのようになって特性が劣化し、空間的な情報が減少して音場感や空気感が縮退する。
そこで、実施の形態１の信号処理装置１は、圧縮符号化で劣化した左右差信号の周波数スペクトルを、圧縮符号化前の左右差信号の周波数スペクトルに回復させることで、空間的な情報を回復させ、豊かな音場感や空気感が得ることができる。
以上のように、実施の形態１の信号処理装置１によれば、予測誤差算出手段１３は、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入力し、予測手段２１が入力した右信号ｒ（ｎ）１０２と予測係数に基づいて左信号ｌ（ｎ）１０１を予測して予測信号２０３を出力し、信号算出手段２２が逆相にした予測信号２０３と左信号ｌ（ｎ）１０１を加算して誤差信号２０４を出力し、第１の加算器１４及び第２の加算器１５は、誤差信号１０７をそれぞれ逆相の関係にして左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に加算するように構成したので、ステレオオーディオ信号の左右差信号を圧縮符号化前の周波数スペクトルに回復させることができるので、ステレオオーディオ信号を再生する際に豊かな音場感や空気感が得られるという効果がある。
また、実施の形態１の信号処理装置１によれば、予測手段２１としてＡＲ予測を行うＡＲ予測器を用いているので、精度の高い予測を行うことができるという効果が得られる。
また、実施の形態１の信号処理装置１によれば、予測手段２１としてのＡＲ予測器において、誤差信号２０４に基づいて予測係数の値を更新するように構成したので、より精度の高い予測を行うことができるという効果が得られる。
また、実施の形態１の信号処理装置１によれば、誤差信号１０３のゲインを調整して、調整後の誤差信号１０７を改善差信号として出力するゲイン調整手段１７を設けたので、ステレオオーディオ信号の音場感・空気感の改善度合いを調整することができる。
さらに、ゲイン調整手段１７の係数は、適宜設定可能な可変値にすることができるので、ステレオオーディオ信号の音場感・空気感の改善度合いをより細かく調整することができる。
なお、実施の形態１の信号処理装置１では、第１及び第２の入力信号として、例えばオーディオ装置におけるステレオオーディオ信号を処理する信号処理装置を説明したが、ステレオオーディオ信号に限らず、２つの入力信号間にある程度の相関関係がある信号を用いることができる。
実施の形態２．
実施の形態１では、予測誤差算出手段１３が、予測信号２０３と左信号ｌ（ｎ）１０１との誤差信号１０３を算出し、第１の加算器１４が左信号ｌ（ｎ）１０１と誤差信号１０３を加算し、第２の加算器１５が右信号ｒ（ｎ）１０２と誤差信号１０３を逆相にして加算する構成について説明したが、実施の形態２は、改善差信号をより細かく調整する構成について説明する。
図５は、この発明の実施の形態２の信号処理装置１の構成を示すブロック図である。なお、図５において、実施の形態１と同様の構成については同一の符号を付し、その詳細な説明は省略する。
図５に示すように、信号処理装置１は、予測誤差算出手段１３、第１の加算器５１、第２の加算器５２、第３の加算器５５、第４の加算器５７、第５の加算器５８、第１のゲイン調整手段５３、第２のゲイン調整手段５４から構成されており、予測誤差算出手段１３は、実施の形態１と同様に、ステレオオーディオ信号としての左信号ｌ（ｎ）１０１（第１の信号）、右信号ｒ（ｎ）１０２（第２の信号）に基づき、左右差信号を改善するための改善差信号として誤差信号１０３を算出する。
第１の加算器５１、第３の加算器５５、第４の加算器５７は入力した２つの信号を正相同士で加算し、第２の加算器５２、第５の加算器５８は入力した２つの信号のうち一方の信号を逆相にして加算する。
第１のゲイン調整手段５３と第２のゲイン調整手段５４は、入力した信号に対して、所定の値を乗算してゲインを調整した信号として出力する乗算器である。
次に、実施の形態２の信号処理装置１の処理動作について説明する。
図５に示すように、信号処理装置１は、外部のデコーダ２からステレオオーディオ信号として左信号ｌ（ｎ）１０１及び右信号ｒ（ｎ）１０２を入力すると、入力した左信号ｌ（ｎ）１０１及び右信号ｒ（ｎ）１０２をそれぞれ３つずつに分岐する。
信号処理装置１は、分岐した左信号ｌ（ｎ）１０１を予測誤差算出手段１３、第１の加算器５１及び第２の加算器５２に入力させる。また、信号処理装置１は、分岐した右信号ｒ（ｎ）１０２を予測誤差算出手段１３、第１の加算器５１及び第２の加算器５２に入力させる。
第１の加算器５１は、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入力して加算し、第１の加算信号５０１として第４の加算器５７及び第５の加算器５８へ出力する。
予測誤差算出手段１３は、実施の形態１と同様の処理動作で、入力した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に基づいて、左信号ｌ（ｎ）１０１を予測した予測信号と左信号ｌ（ｎ）１０１との誤差信号１０３を算出し、ステレオオーディオ信号の左右差信号を改善する改善差信号として誤差信号１０３を第１のゲイン調整手段５３へ出力する。
第１のゲイン調整手段５３は、入力した誤差信号１０３に対し、予め設定された固定値、又は外部の図示しない操作部などから適宜設定可能な値を乗算してゲインを調整し、ゲイン調整後の誤差信号５０３を第３の加算器５５へ出力する。
第２の加算器５２は、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入力すると、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を逆相の関係にして加算し、第２の加算信号５０２として第２のゲイン調整手段５４へ出力する。
第２のゲイン調整手段５４は、入力した第２の加算信号５０２に対し、予め設定された固定値、又は外部の図示しない操作部などから適宜設定可能な値を乗算してゲインを調整し、ゲイン調整後の第２の加算信号５０４を改善差信号として第３の加算器５５へ出力する。
第３の加算器５５は、第１のゲイン調整手段５３からの誤差信号５０３と第２のゲイン調整手段からの第２の加算信号５０４とを加算して、新たな改善差信号として第３の加算信号５０５を第４の加算器５７及び第５の加算器５８へ出力する。
第４の加算器５７は、第１の加算器５１から入力した第１の加算信号５０１と第３の加算器５５から入力した第３の加算信号５０５とを加算し、信号処理後の出力信号として左信号ｌｏｕｔ（ｎ）１０９を外部の出力装置３へ出力する。
第５の加算器５８は、第１の加算器５１から入力した第１の加算信号５０１と第３の加算器５５から入力した第３の加算信号５０５を逆相にして加算し、信号処理後の出力信号として右信号ｒｏｕｔ（ｎ）１１０を外部の出力装置３へ出力する。
なお、実施の形態２においても、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入れ替えても良く、どちらか一方の信号に基づいて他方の信号を予測する構成であれば良い。
以上のように、実施の形態２によれば、第１のゲイン調整手段５３が誤差信号１０３のゲインを調整して誤差信号５０３とし、第２のゲイン調整手段５４が第２の加算信号５０２のゲインを調整して第２の加算信号５０４とし、第３の加算器５５が誤差信号５０３と第２の加算信号５０４を加算し、第３の加算信号５０５とし、第４の加算器５７が第３の加算信号５０５と左信号ｌ（ｎ）１０１を加算し、第５の加算器５８が第３の加算信号５０５を逆相にして右信号ｒ（ｎ）１０２に加算するように構成したので、改善差信号をより細かく調整することができるという効果が得られる。
例えば、改善効果を強くするなら、第２のゲイン調整手段５４の係数を小さく、第１のゲイン調整手段５３の係数を大きくすればよい。また、改善効果を弱くするなら、第２のゲイン調整手段５４の係数を大きく、第１のゲイン調整手段５３の係数を小さくすればよい。また、第２のゲイン調整手段５４の係数と第１のゲイン調整手段５３の係数を同程度にしても良い。
また、左右差信号の強度が過剰に増加した場合、ステレオオーディオ信号の中央成分が希薄になり、心地よい音場感が得られなくなるが、実施の形態２によれば、上記いずれの場合も、左右差信号の強度の過剰な増加を抑えることができ、安定した音場感を得られるという効果がある。
なお、実施の形態１，２において、圧縮符号化されたステレオオーディオ信号を信号処理の対象としたが、これに限るものではなく、圧縮符号化されていないステレオオーディオ信号を用いてもよい。本実施の形態１，２の構成により、ステレオオーディオ信号の左右差信号の情報がさらに増加するため、より豊かな音場感、空気感が得られるという効果がある。
また、ステレオオーディオ信号に替えて、例えば、センサ信号を入力することにより、精度の高い測定結果を得ることができるという効果がある。
この発明に係る信号処理装置は、圧縮符号化前の信号の特性を回復させることができ、その結果、例えば、ステレオオーディオ信号の左右差信号の特性を回復し、豊かな音場感や空気感を回復することができるため、圧縮符号化されたオーディオ信号を復号化して再生する信号処理装置等に用いるのに適している。
本発明は、例えば、圧縮符号化されたオーディオ信号を復号化して再生する信号処理装置に関するものである。
通常、オーディオ信号を再生する際に、再生するオーディオ信号に空間的な情報が多く含まれるほど豊かな音場感や空気感が得られ、空間的な情報は左信号と右信号の差分（以下、左右差信号と称す）に現れる。
一方、近年では、オーディオＣＤに代わってＡＡＣ（Advanced Audio Codec）やＭＰ３（MPEG Audio Layer 3）などの圧縮符号化を行うことで、オーディオ信号を保存するための記憶装置の容量や送受信の通信量を節減する技術が普及している。
圧縮符号化されたオーディオ信号は、高域成分が欠落したり、左右差信号の中高域のスペクトルが部分的に欠落し、歯抜けのようになって特性が劣化している。特性が劣化したオーディオ信号を再生すると、高域成分の欠落により、こもり感が発生する傾向や、左右差信号の特性が劣化することにより、音場感・空気感が縮退する傾向がある。
そこで、圧縮符号化されたオーディオ信号の音質を改善する信号処理装置が開示されている（特許文献１を参照）。特許文献１によれば、入力したオーディオ信号のピーク値の高域成分及び低域成分を取り出して加算することで、信号圧縮符号化によって欠落した高域成分の回復を図ることができ、こもり感を緩和している。
特開２００８−１０２２０６号公報
しかしながら、上述した従来の信号処理装置では、例えば、オーディオ信号の欠落した高域成分を回復してこもり感を緩和することができるが、圧縮符号化前のオーディオ信号の左右差信号の特性を回復することができず、豊かな音場感や空気感を回復できないという課題がある。
この発明は、上述した課題を解決するためになされたもので、圧縮符号化前の信号の特性を回復する信号処理装置を提供することを目的とする。
この発明に係る信号処理装置は、第１及び第２の信号を入力し、第２の信号に基づいて予測した第１の信号の予測信号と第１の信号との誤差信号を算出する予測誤差算出手段と、第１の信号と誤差信号とを加算する第１の加算器と、第２の信号と誤差信号とを加算する第２の加算器とを備えたものである。
この発明によれば、予測誤差算出手段が第２の信号に基づいて予測した第１の信号の予測信号と第１の信号との誤差信号を算出し、第１の加算器が第１の信号と誤差信号とを加算し、第２の加算器が第２の信号と誤差信号とを加算するように構成したので、圧縮符号化前の信号の特性を回復させることができる。その結果、例えば、ステレオオーディオ信号の左右差信号の特性を回復し、豊かな音場感や空気感を回復することができる。
この発明の実施の形態１の信号処理装置の構成を示すブロック図である。 実施の形態１の予測誤差算出手段の構成を示すブロック図である。 実施の形態１の信号処理装置において、図３（ａ）は左信号周波数スペクトルと右信号の周波数スペクトルの相関が弱い場合の左右和信号と左右差信号の周波数スペクトルの位相関係を示した図であり、図３（ｂ）は左信号周波数スペクトルと右信号の周波数スペクトルの相関が強い場合の左右和信号と左右差信号の周波数スペクトルの位相関係を示した図である。 実施の形態１の信号処理装置において、圧縮符号化による左右差信号の劣化と信号処理装置による信号処理後の左右差信号の回復を示す図である。 この発明の実施の形態２の信号処理装置の構成を示すブロック図である。
以下、この発明の実施の形態を、図面を参照しながら詳細に説明する。なお、以下では、この発明の実施の形態に係る信号処理装置をオーディオ装置に適用し、相関関係のある第１及び第２の入力信号として、ステレオオーディオ信号の左信号及び右信号を処理するものとして説明する。
実施の形態１．
図１は、この発明の実施の形態１の信号処理装置１の構成を示すブロック図である。
図１に示すように、信号処理装置１は、デコーダ２と出力装置３の間に設けられ、デコーダ２から入力したステレオオーディオ信号としての左信号ｌ（ｎ）１０１（第１の信号）、右信号ｒ（ｎ）１０２（第２の信号）の差信号を信号処理し、改善した左信号ｌｏｕｔ（ｎ）１０９、右信号ｒｏｕｔ（ｎ）１１０を出力装置３へ出力する。
なお、デコーダ２は、圧縮符号化されたオーディオデータを復号化して、ステレオオーディオ信号として出力するものであり、出力装置３は、ステレオオーディオ信号を音声振動に変換して出力する、例えばスピーカである。
図１に示すように、信号処理装置１は、予測誤差算出手段１３、第１の加算器１４、第２の加算器１５、ゲイン調整手段１７から構成されており、後述する予測誤差算出手段１３がステレオオーディオ信号としての左信号ｌ（ｎ）１０１、右信号ｒ（ｎ）１０２に基づき、左右差信号を改善する改善差信号として誤差信号１０３を算出する。
ゲイン調整手段１７は、誤差信号１０３に対して、所定の値を乗算してゲインを調整し、ゲイン調整後の誤差信号１０７を改善差信号として出力する乗算器である。
また、第１の加算器１４は左信号ｌ（ｎ）１０１と誤差信号１０７を正相同士で加算して左信号ｌｏｕｔ（ｎ）１０９として出力し、第２の加算器１５は右信号ｒ（ｎ）１０２と誤差信号１０７を逆相にして加算し、右信号ｒｏｕｔ（ｎ）１１０として出力する。
次に、信号処理装置１の処理動作について説明する。
図１に示すように、信号処理装置１は、外部のデコーダ２からステレオオーディオ信号として左信号ｌ（ｎ）１０１及び右信号ｒ（ｎ）１０２を入力すると、入力した左信号ｌ（ｎ）１０１及び右信号ｒ（ｎ）１０２をそれぞれ分岐する。
信号処理装置１は、分岐した左信号ｌ（ｎ）１０１の一方の左信号ｌ（ｎ）１０１を予測誤差算出手段１３に入力させると共に、他方の左信号ｌ（ｎ）１０１を第１の加算器１４に入力させる。また、信号処理装置１は、分岐した右信号ｒ（ｎ）１０２の一方の右信号ｒ（ｎ）１０２を予測誤差算出手段１３に入力させると共に、他方の右信号ｒ（ｎ）１０２を第２の加算器１５に入力させる。
予測誤差算出手段１３は、入力した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に基づき、ステレオオーディオ信号の左右差信号を改善する改善差信号として誤差信号１０３を算出し、ゲイン調整手段１７へ出力する。予測誤差算出手段１３の詳細な処理動作については後述する。
ゲイン調整手段１７は、予測誤差算出手段１３から入力した誤差信号１０３に対し、予め設定された固定値、又は外部の図示しない操作部などから適宜設定可能な値を乗算してゲインを調整し、ゲイン調整後の誤差信号１０７を改善差信号として出力する。
ゲイン調整手段１７から出力された誤差信号１０７は分岐して、一方の誤差信号１０７が第１の加算器１４へ入力されると共に、他方の誤差信号１０７が第２の加算器１５へ入力される。
第１の加算器１４は、左信号ｌ（ｎ）１０１とゲイン調整手段１７からの誤差信号１０７とを正相同士で加算し、信号処理後の出力信号として左信号ｌｏｕｔ（ｎ）１０９を外部の出力装置３へ出力する。
また、第２の加算器１５は、ゲイン調整手段１７からの誤差信号１０７を逆相にし、正相の右信号ｒ（ｎ）１０２と逆相の誤差信号１０７とを加算し、信号処理後の出力信号として右信号ｒｏｕｔ（ｎ）１１０を外部の出力装置３へ出力する。言い換えると、第２の加算器１５は、右信号ｒ（ｎ）１０２から誤差信号１０７を減算して出力する。
即ち、第１の加算器１４及び第２の加算器１５は、分岐された誤差信号１０７をそれぞれ逆相の関係にして左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に加算する。
なお、実施の形態１の信号処理装置１は、誤差信号１０３に対し、ゲイン調整手段１７でゲイン調整を行う構成であるが、必要に応じてゲイン調整手段１７を設けない構成にしても良い。
次に、予測誤差算出手段１３の具体的な構成について説明する。
図２は、実施の形態１の予測誤差算出手段１３の構成を示すブロック図である。
図２に示すように、予測誤差算出手段１３は、予測手段２１と信号算出手段２２から構成され、入力した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に基づいて改善差信号としての誤差信号１０３を算出して出力する。
予測手段２１は、入力した右信号ｒ（ｎ）１０２と、過去に入力された右信号ｒ（ｎ−１）、ｒ（ｎ−２）、ｒ（ｎ−３）、・・・、ｒ（ｎ−Ｎ）と予測係数に基づいて左信号ｌ（ｎ）１０１を予測し、予測信号２０３として出力するものであり、例えば、既知のＡＲ（Auto-Regressive）予測技術を用いたＡＲ予測器である。なお、Ｎは予測次数である。
ここで、入力した右信号ｒ（ｎ）１０２を１サンプル分遅延させる図示せぬ遅延手段を設け、１サンプル遅延した右信号ｒ（ｎ−１）１０２と、過去に入力された右信号ｒ（ｎ−２）、ｒ（ｎ−３）、ｒ（ｎ−４）、・・・、ｒ（ｎ−１−Ｎ）と予測係数に基づいて左信号ｌ（ｎ）１０１を予測し、予測信号２０３として出力してもよい。
信号算出手段２２は、入力した予測信号２０３を逆相にすると共に、左信号ｌ（ｎ）１０１と逆相にした予測信号２０３を加算する加算器であり、予測誤差として誤差信号２０４を算出して出力する。
また、予測手段２１は、信号算出手段２２からの誤差信号２０４を入力し、誤差信号２０４に基づき、サンプル時間毎に既知の学習アルゴリズムを用いて予測係数の値を更新する。
次に、予測誤差算出手段１３の処理動作について説明する。
予測誤差算出手段１３は、ステレオオーディオ信号としての左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入力し、左信号ｌ（ｎ）１０１を信号算出手段２２へ入力し、右信号ｒ（ｎ）１０２を予測手段２１へ入力する。
予測手段２１は、右信号ｒ（ｎ）１０２を入力すると、右信号ｒ（ｎ）１０２と予測係数に基づいて左信号ｌ（ｎ）１０１をＡＲ予測し、予測信号２０３として信号算出手段２２へ出力する。
信号算出手段２２は、予測手段２１から入力した予測信号２０３を逆相にすると共に、逆相にした予測信号２０３と左信号ｌ（ｎ）１０１を加算し、予測信号２０３の予測誤差として誤差信号２０４を出力する。
予測誤差算出手段１３において、信号算出手段２２から出力された誤差信号２０４を分岐して、一方の誤差信号２０４を誤差信号１０３として出力すると共に、他方の誤差信号２０４を予測手段２１に返して入力する。
予測手段２１は、誤差信号２０４を入力すると、誤差信号２０４に基づき、例えば、最急降下法、学習同定法など、既知の学習アルゴリズムを用いて、予測係数の値を更新する。
なお、予測手段２１に右信号ｒ（ｎ）１０２が入力され、信号算出手段２２に左信号ｌ（ｎ）１０１が入力されているが、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入れ替えても良く、どちらか一方の信号に基づいて他方の信号を予測する構成であれば良い。
また、予測手段２１が予測係数をサンプル時間毎に逐次更新する構成について説明したが、これに限らず、ある時点で一括して予測係数を更新しても良いし、さらに、逐次更新を行わず、予め設計した固定の予測係数によって予測手段２１を用いる構成でも良い。
次に、実施の形態１の信号処理装置１による効果について説明する。
まず、ステレオオーディオ信号の左右差信号の特性について説明する。
図３は、周波数θにおける左信号と右信号のスペクトル強度が略等しい場合の左右和信号と左右差信号の周波数スペクトルの位相関係を示した図である。図３（ａ）が左信号周波数スペクトルと右信号の周波数スペクトルの相関が弱い場合であり、図３（ｂ）が左信号周波数スペクトルと右信号の周波数スペクトルの相関が強い場合である。
図３（ａ）及び図３（ｂ）に示すように、左信号と右信号のスペクトル強度が略等しい場合、左信号と右信号の周波数スペクトルの相関（位相差の大小）によらず、左右和信号の周波数スペクトルの位相と左右差信号の周波数スペクトルの位相が直交する。
ここで、左右和信号は左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の同相成分であることから、左右和信号は時間遅れを考慮しないとき（時間遅れゼロ）の左信号ｌ（ｎ）１０１と信号ｒ（ｎ）１０２の相関成分であり、左右和信号と直交する左右差信号は時間遅れを考慮しないとき（時間遅れゼロ）の左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の無相関成分となる。
一方、本実施の形態１では、予測手段２１としてＡＲ予測器を用いており、ＡＲ予測器においては、入力信号がＡＲモデルに従うことにより、Ｗｉｅｎｅｒ−Ｈｏｐｆ方程式を満たす最適な予測が可能である。最適に予測された予測信号と、この予測信号と目標信号との誤差信号が直交することは、「直交原理」として知られている。
また、調波構造のある定常信号はＡＲモデルで表現することができる。本実施の形態１においても、楽器音やボーカルなどのステレオオーディオ信号は、調波構造であり、短時間で観測すると定常信号と見なせるため、ステレオオーディオ信号をＡＲモデルと仮定することができる。
ここで、ＡＲ予測器（図２に示す予測手段２１）で予測した予測信号２０３は、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の共通な信号成分と見なせるので、時間遅れを考慮した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の相関成分である。一方、誤差信号２０４は、相関成分と直交することから、時間遅れを考慮した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２の無相関成分である。即ち、本実施の形態１の予測誤差算出手段１３により、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を相関成分と無相関成分に分離することができる。
このように、誤差信号１０３は時間遅れを考慮した左右信号の無相関成分であり、左右差信号は時間遅れゼロの左右信号の無相関成分であるため、同様の性質を有している。したがって、実施の形態１の信号処理装置１は、誤差信号１０３を用いて、左右差信号の周波数スペクトルを回復することができる。
図４は、圧縮符号化による左右差信号の劣化と信号処理装置１による信号処理後の左右差信号の回復を示す図である。
図４に示すように、実線は圧縮符号化前の左右差信号及び信号処理後の左右差信号の周波数スペクトルであり、破線は圧縮符号化後の左右差信号の周波数スペクトルである。
図４の実線で示す圧縮符号化前の左右差信号は周波数スペクトルが連続的であるが、図４の破線で示す圧縮符号化後の左右差信号は部分的に周波数スペクトルが欠落し、歯抜けのようになって特性が劣化し、空間的な情報が減少して音場感や空気感が縮退する。
そこで、実施の形態１の信号処理装置１は、圧縮符号化で劣化した左右差信号の周波数スペクトルを、圧縮符号化前の左右差信号の周波数スペクトルに回復させることで、空間的な情報を回復させ、豊かな音場感や空気感が得ることができる。
以上のように、実施の形態１の信号処理装置１によれば、予測誤差算出手段１３は、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入力し、予測手段２１が入力した右信号ｒ（ｎ）１０２と予測係数に基づいて左信号ｌ（ｎ）１０１を予測して予測信号２０３を出力し、信号算出手段２２が逆相にした予測信号２０３と左信号ｌ（ｎ）１０１を加算して誤差信号２０４を出力し、第１の加算器１４及び第２の加算器１５は、誤差信号１０７をそれぞれ逆相の関係にして左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に加算するように構成したので、ステレオオーディオ信号の左右差信号を圧縮符号化前の周波数スペクトルに回復させることができるので、ステレオオーディオ信号を再生する際に豊かな音場感や空気感が得られるという効果がある。
また、実施の形態１の信号処理装置１によれば、予測手段２１としてＡＲ予測を行うＡＲ予測器を用いているので、精度の高い予測を行うことができるという効果が得られる。
また、実施の形態１の信号処理装置１によれば、予測手段２１としてのＡＲ予測器において、誤差信号２０４に基づいて予測係数の値を更新するように構成したので、より精度の高い予測を行うことができるという効果が得られる。
また、実施の形態１の信号処理装置１によれば、誤差信号１０３のゲインを調整して、調整後の誤差信号１０７を改善差信号として出力するゲイン調整手段１７を設けたので、ステレオオーディオ信号の音場感・空気感の改善度合いを調整することができる。
さらに、ゲイン調整手段１７の係数は、適宜設定可能な可変値にすることができるので、ステレオオーディオ信号の音場感・空気感の改善度合いをより細かく調整することができる。
なお、実施の形態１の信号処理装置１では、第１及び第２の入力信号として、例えばオーディオ装置におけるステレオオーディオ信号を処理する信号処理装置を説明したが、ステレオオーディオ信号に限らず、２つの入力信号間にある程度の相関関係がある信号を用いることができる。
実施の形態２．
実施の形態１では、予測誤差算出手段１３が、予測信号２０３と左信号ｌ（ｎ）１０１との誤差信号１０３を算出し、第１の加算器１４が左信号ｌ（ｎ）１０１と誤差信号１０３を加算し、第２の加算器１５が右信号ｒ（ｎ）１０２と誤差信号１０３を逆相にして加算する構成について説明したが、実施の形態２は、改善差信号をより細かく調整する構成について説明する。
図５は、この発明の実施の形態２の信号処理装置１の構成を示すブロック図である。なお、図５において、実施の形態１と同様の構成については同一の符号を付し、その詳細な説明は省略する。
図５に示すように、信号処理装置１は、予測誤差算出手段１３、第１の加算器５１、第２の加算器５２、第３の加算器５５、第４の加算器５７、第５の加算器５８、第１のゲイン調整手段５３、第２のゲイン調整手段５４から構成されており、予測誤差算出手段１３は、実施の形態１と同様に、ステレオオーディオ信号としての左信号ｌ（ｎ）１０１（第１の信号）、右信号ｒ（ｎ）１０２（第２の信号）に基づき、左右差信号を改善するための改善差信号として誤差信号１０３を算出する。
第１の加算器５１、第３の加算器５５、第４の加算器５７は入力した２つの信号を正相同士で加算し、第２の加算器５２、第５の加算器５８は入力した２つの信号のうち一方の信号を逆相にして加算する。
第１のゲイン調整手段５３と第２のゲイン調整手段５４は、入力した信号に対して、所定の値を乗算してゲインを調整した信号として出力する乗算器である。
次に、実施の形態２の信号処理装置１の処理動作について説明する。
図５に示すように、信号処理装置１は、外部のデコーダ２からステレオオーディオ信号として左信号ｌ（ｎ）１０１及び右信号ｒ（ｎ）１０２を入力すると、入力した左信号ｌ（ｎ）１０１及び右信号ｒ（ｎ）１０２をそれぞれ３つずつに分岐する。
信号処理装置１は、分岐した左信号ｌ（ｎ）１０１を予測誤差算出手段１３、第１の加算器５１及び第２の加算器５２に入力させる。また、信号処理装置１は、分岐した右信号ｒ（ｎ）１０２を予測誤差算出手段１３、第１の加算器５１及び第２の加算器５２に入力させる。
第１の加算器５１は、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入力して加算し、第１の加算信号５０１として第４の加算器５７及び第５の加算器５８へ出力する。
予測誤差算出手段１３は、実施の形態１と同様の処理動作で、入力した左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２に基づいて、左信号ｌ（ｎ）１０１を予測した予測信号と左信号ｌ（ｎ）１０１との誤差信号１０３を算出し、ステレオオーディオ信号の左右差信号を改善する改善差信号として誤差信号１０３を第１のゲイン調整手段５３へ出力する。
第１のゲイン調整手段５３は、入力した誤差信号１０３に対し、予め設定された固定値、又は外部の図示しない操作部などから適宜設定可能な値を乗算してゲインを調整し、ゲイン調整後の誤差信号５０３を第３の加算器５５へ出力する。
第２の加算器５２は、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入力すると、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を逆相の関係にして加算し、第２の加算信号５０２として第２のゲイン調整手段５４へ出力する。
第２のゲイン調整手段５４は、入力した第２の加算信号５０２に対し、予め設定された固定値、又は外部の図示しない操作部などから適宜設定可能な値を乗算してゲインを調整し、ゲイン調整後の第２の加算信号５０４を改善差信号として第３の加算器５５へ出力する。
第３の加算器５５は、第１のゲイン調整手段５３からの誤差信号５０３と第２のゲイン調整手段からの第２の加算信号５０４とを加算して、新たな改善差信号として第３の加算信号５０５を第４の加算器５７及び第５の加算器５８へ出力する。
第４の加算器５７は、第１の加算器５１から入力した第１の加算信号５０１と第３の加算器５５から入力した第３の加算信号５０５とを加算し、信号処理後の出力信号として左信号ｌｏｕｔ（ｎ）１０９を外部の出力装置３へ出力する。
第５の加算器５８は、第１の加算器５１から入力した第１の加算信号５０１と第３の加算器５５から入力した第３の加算信号５０５を逆相にして加算し、信号処理後の出力信号として右信号ｒｏｕｔ（ｎ）１１０を外部の出力装置３へ出力する。
なお、実施の形態２においても、左信号ｌ（ｎ）１０１と右信号ｒ（ｎ）１０２を入れ替えても良く、どちらか一方の信号に基づいて他方の信号を予測する構成であれば良い。
以上のように、実施の形態２によれば、第１のゲイン調整手段５３が誤差信号１０３のゲインを調整して誤差信号５０３とし、第２のゲイン調整手段５４が第２の加算信号５０２のゲインを調整して第２の加算信号５０４とし、第３の加算器５５が誤差信号５０３と第２の加算信号５０４を加算し、第３の加算信号５０５とし、第４の加算器５７が第３の加算信号５０５と左信号ｌ（ｎ）１０１を加算し、第５の加算器５８が第３の加算信号５０５を逆相にして右信号ｒ（ｎ）１０２に加算するように構成したので、改善差信号をより細かく調整することができるという効果が得られる。
例えば、改善効果を強くするなら、第２のゲイン調整手段５４の係数を小さく、第１のゲイン調整手段５３の係数を大きくすればよい。また、改善効果を弱くするなら、第２のゲイン調整手段５４の係数を大きく、第１のゲイン調整手段５３の係数を小さくすればよい。また、第２のゲイン調整手段５４の係数と第１のゲイン調整手段５３の係数を同程度にしても良い。
また、左右差信号の強度が過剰に増加した場合、ステレオオーディオ信号の中央成分が希薄になり、心地よい音場感が得られなくなるが、実施の形態２によれば、上記いずれの場合も、左右差信号の強度の過剰な増加を抑えることができ、安定した音場感を得られるという効果がある。
なお、実施の形態１，２において、圧縮符号化されたステレオオーディオ信号を信号処理の対象としたが、これに限るものではなく、圧縮符号化されていないステレオオーディオ信号を用いてもよい。本実施の形態１，２の構成により、ステレオオーディオ信号の左右差信号の情報がさらに増加するため、より豊かな音場感、空気感が得られるという効果がある。
また、ステレオオーディオ信号に替えて、例えば、センサ信号を入力することにより、精度の高い測定結果を得ることができるという効果がある。

Claims (11)

  1. 第１及び第２の信号を入力し、上記第２の信号に基づいて予測した第１の信号の予測信号と上記第１の信号との誤差信号を算出する予測誤差算出手段と、
    上記第１の信号と上記誤差信号とを加算する第１の加算器と、
    上記第２の信号と上記誤差信号を逆相にして加算する第２の加算器とを備えた信号処理装置。
  2. 上記予測誤差算出手段からの誤差信号を入力し、上記誤差信号のゲインを調整するゲイン調整手段を備えたことを特徴とする請求項１記載の信号処理装置。
  3. 第１及び第２の信号を入力し、上記第２の信号に基づいて予測した第１の信号の予測信号と上記第１の信号との誤差信号を算出する予測誤差算出手段と、
    上記誤差信号のゲインを調整する第１のゲイン調整手段と、
    上記第１の信号と上記第２の信号を加算し、第１の加算信号として出力する第１の加算器と、
    上記第１の信号と上記第２の信号を逆相にして加算し、第２の加算信号として出力するする第２の加算器と、
    上記第２の加算信号のゲインを調整する第２のゲイン調整手段と、
    上記第１のゲイン調整手段からの誤差信号と上記第２のゲイン調整手段からの第２の加算信号とを加算して第３の加算信号として出力する第３の加算器と、
    上記第１の加算信号と上記第３の加算信号とを加算する第４の加算器と、
    上記第１の加算信号と上記第３の加算信号を逆相にして加算する第５の加算器とを備えた信号処理装置。
  4. 上記予測誤差算出手段は、上記第２の信号と予測係数に基づいて上記第１の信号を予測するＡＲ（Auto-Regressive）予測器を備えたことを特徴とする請求項１記載の信号処理装置。
  5. 上記予測誤差算出手段は、上記第２の信号と予測係数に基づいて上記第１の信号を予測するＡＲ（Auto-Regressive）予測器を備えたことを特徴とする請求項３記載の信号処理装置。
  6. 上記予測誤差算出手段は、上記誤差信号を上記ＡＲ予測器に入力し、上記ＡＲ予測器が上記誤差信号に基づいて上記予測係数の値を更新することを特徴とする請求項４記載の信号処理装置。
  7. 上記予測誤差算出手段は、上記誤差信号を上記ＡＲ予測器に入力し、上記ＡＲ予測器が上記誤差信号に基づいて上記予測係数の値を更新することを特徴とする請求項５記載の信号処理装置。
  8. 上記ゲイン調整手段は、適宜設定される値を乗算してゲインを調整することを特徴とする請求項２記載の信号処理装置。
  9. 上記ゲイン調整手段は、適宜設定される値を乗算してゲインを調整することを特徴とする請求項３記載の信号処理装置。
  10. 上記予測誤差算出手段は、上記第１及び第２の信号として、ステレオオーディオ信号の左信号及び右信号を入力することを特徴とする請求項１記載の信号処理装置。
  11. 上記予測誤差算出手段は、上記第１及び第２の信号として、ステレオオーディオ信号の左信号及び右信号を入力することを特徴とする請求項３記載の信号処理装置。
JP2011518230A 2009-06-01 2010-05-17 信号処理装置 Active JP5355690B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011518230A JP5355690B2 (ja) 2009-06-01 2010-05-17 信号処理装置

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2009132158 2009-06-01
JP2009132158 2009-06-01
PCT/JP2010/003310 WO2010140306A1 (ja) 2009-06-01 2010-05-17 信号処理装置
JP2011518230A JP5355690B2 (ja) 2009-06-01 2010-05-17 信号処理装置

Publications (2)

Publication Number Publication Date
JPWO2010140306A1 true JPWO2010140306A1 (ja) 2012-11-15
JP5355690B2 JP5355690B2 (ja) 2013-11-27

Family

ID=43297449

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011518230A Active JP5355690B2 (ja) 2009-06-01 2010-05-17 信号処理装置

Country Status (5)

Country Link
US (1) US8918325B2 (ja)
EP (1) EP2439964B1 (ja)
JP (1) JP5355690B2 (ja)
CN (1) CN102440008B (ja)
WO (1) WO2010140306A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016076200A1 (ja) * 2014-11-14 2016-05-19 シャープ株式会社 信号処理装置、信号処理方法およびコンピュータプログラム
JPWO2019155603A1 (ja) * 2018-02-09 2020-06-11 三菱電機株式会社 音響信号処理装置及び音響信号処理方法
GB201909715D0 (en) * 2019-07-05 2019-08-21 Nokia Technologies Oy Stereo audio
US20230254792A1 (en) * 2022-02-08 2023-08-10 Charter Communications Operating Drive Phase noise compensation in a wireless system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09153811A (ja) * 1995-11-30 1997-06-10 Hitachi Ltd 符号化復号方法、符号化復号装置およびそれを用いたテレビ会議装置
JPH113099A (ja) * 1997-04-16 1999-01-06 Mitsubishi Electric Corp 音声符号化復号化システム、音声符号化装置及び音声復号化装置
JP2007047813A (ja) * 2002-11-21 2007-02-22 Nippon Telegr & Teleph Corp <Ntt> ディジタル信号処理方法、そのプログラム、及びそのプログラムを格納した記録媒体
WO2007088853A1 (ja) * 2006-01-31 2007-08-09 Matsushita Electric Industrial Co., Ltd. 音声符号化装置、音声復号装置、音声符号化システム、音声符号化方法及び音声復号方法
JP2008033269A (ja) * 2006-06-26 2008-02-14 Sony Corp デジタル信号処理装置、デジタル信号処理方法およびデジタル信号の再生装置
JP2008175993A (ja) * 2007-01-17 2008-07-31 Nippon Telegr & Teleph Corp <Ntt> マルチチャネル信号符号化方法、それを使った符号化装置、その方法によるプログラムとその記録媒体

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA1085044A (en) * 1975-04-03 1980-09-02 Yukihiko Iijima Composite feedback predictive code communication system for a color tv signal including a carrier chrominance signal
US4308423A (en) 1980-03-12 1981-12-29 Cohen Joel M Stereo image separation and perimeter enhancement
DE4320990B4 (de) * 1993-06-05 2004-04-29 Robert Bosch Gmbh Verfahren zur Redundanzreduktion
KR100206333B1 (ko) * 1996-10-08 1999-07-01 윤종용 두개의 스피커를 이용한 멀티채널 오디오 재생장치및 방법
US6111958A (en) * 1997-03-21 2000-08-29 Euphonics, Incorporated Audio spatial enhancement apparatus and methods
US6463410B1 (en) * 1998-10-13 2002-10-08 Victor Company Of Japan, Ltd. Audio signal processing apparatus
US6810124B1 (en) * 1999-10-08 2004-10-26 The Boeing Company Adaptive resonance canceller apparatus
US6856790B1 (en) * 2000-03-27 2005-02-15 Marvell International Ltd. Receiver with dual D.C. noise cancellation circuits
EP1425562B1 (en) * 2001-08-17 2007-01-10 Broadcom Corporation Improved bit error concealment methods for speech coding
AU2003212592A1 (en) 2002-04-10 2003-10-20 Koninklijke Philips Electronics N.V. Coding of stereo signals
WO2004075469A2 (en) * 2003-02-19 2004-09-02 Dotcast Inc. Joint, adaptive control of equalization, synchronization, and gain in a digital communications receiver
US20040176056A1 (en) * 2003-03-07 2004-09-09 Shen Feng Single-tone detection and adaptive gain control for direct-conversion receivers
JP3718706B2 (ja) * 2003-10-28 2005-11-24 松下電器産業株式会社 デルタ・シグマ変調装置
US7272567B2 (en) * 2004-03-25 2007-09-18 Zoran Fejzo Scalable lossless audio codec and authoring tool
GB2419265B (en) * 2004-10-18 2009-03-11 Wolfson Ltd Improved audio processing
KR100612024B1 (ko) * 2004-11-24 2006-08-11 삼성전자주식회사 비대칭성을 이용하여 가상 입체 음향을 생성하는 장치 및그 방법과 이를 수행하기 위한 프로그램이 기록된 기록매체
EP1720249B1 (en) * 2005-05-04 2009-07-15 Harman Becker Automotive Systems GmbH Audio enhancement system and method
US7630779B2 (en) * 2005-06-01 2009-12-08 Analog Devices, Inc. Self compensating closed loop adaptive control system
US8032368B2 (en) * 2005-07-11 2011-10-04 Lg Electronics Inc. Apparatus and method of encoding and decoding audio signals using hierarchical block swithcing and linear prediction coding
KR100739762B1 (ko) 2005-09-26 2007-07-13 삼성전자주식회사 크로스토크 제거 장치 및 그를 적용한 입체 음향 생성 시스템
WO2007035072A1 (en) 2005-09-26 2007-03-29 Samsung Electronics Co., Ltd. Apparatus and method to cancel crosstalk and stereo sound generation system using the same
WO2007052612A1 (ja) * 2005-10-31 2007-05-10 Matsushita Electric Industrial Co., Ltd. ステレオ符号化装置およびステレオ信号予測方法
FI20051294A0 (fi) 2005-12-19 2005-12-19 Noveltech Solutions Oy Signaalinkäsittely
JP4972742B2 (ja) 2006-10-17 2012-07-11 国立大学法人九州工業大学 高域信号補間方法及び高域信号補間装置
US8064624B2 (en) * 2007-07-19 2011-11-22 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Method and apparatus for generating a stereo signal with enhanced perceptual quality
US8306243B2 (en) * 2007-08-13 2012-11-06 Mitsubishi Electric Corporation Audio device
CN101802907B (zh) * 2007-09-19 2013-11-13 爱立信电话股份有限公司 多信道音频的联合增强

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09153811A (ja) * 1995-11-30 1997-06-10 Hitachi Ltd 符号化復号方法、符号化復号装置およびそれを用いたテレビ会議装置
JPH113099A (ja) * 1997-04-16 1999-01-06 Mitsubishi Electric Corp 音声符号化復号化システム、音声符号化装置及び音声復号化装置
JP2007047813A (ja) * 2002-11-21 2007-02-22 Nippon Telegr & Teleph Corp <Ntt> ディジタル信号処理方法、そのプログラム、及びそのプログラムを格納した記録媒体
WO2007088853A1 (ja) * 2006-01-31 2007-08-09 Matsushita Electric Industrial Co., Ltd. 音声符号化装置、音声復号装置、音声符号化システム、音声符号化方法及び音声復号方法
JP2008033269A (ja) * 2006-06-26 2008-02-14 Sony Corp デジタル信号処理装置、デジタル信号処理方法およびデジタル信号の再生装置
JP2008175993A (ja) * 2007-01-17 2008-07-31 Nippon Telegr & Teleph Corp <Ntt> マルチチャネル信号符号化方法、それを使った符号化装置、その方法によるプログラムとその記録媒体

Also Published As

Publication number Publication date
US20120014485A1 (en) 2012-01-19
CN102440008B (zh) 2015-01-21
US8918325B2 (en) 2014-12-23
EP2439964B1 (en) 2014-06-04
CN102440008A (zh) 2012-05-02
JP5355690B2 (ja) 2013-11-27
EP2439964A4 (en) 2013-04-03
WO2010140306A1 (ja) 2010-12-09
EP2439964A1 (en) 2012-04-11

Similar Documents

Publication Publication Date Title
KR101747307B1 (ko) 멀티 채널 신호의 부호화/복호화 장치 및 방법
EP2693430B1 (en) Encoding apparatus and method, and program
US8831960B2 (en) Audio encoding device, audio encoding method, and computer-readable recording medium storing audio encoding computer program for encoding audio using a weighted residual signal
KR101277041B1 (ko) 멀티 채널 음향 신호 처리 장치 및 방법
RU2701075C1 (ru) Устройство обработки аудиосигнала, способ обработки аудиосигнала и программа обработки аудиосигнала
JPWO2006059567A1 (ja) ステレオ符号化装置、ステレオ復号装置、およびこれらの方法
US20120072207A1 (en) Down-mixing device, encoder, and method therefor
US20080255832A1 (en) Scalable Encoding Apparatus and Scalable Encoding Method
JP5355690B2 (ja) 信号処理装置
EP1818910A1 (en) Scalable encoding apparatus and scalable encoding method
US8644526B2 (en) Audio signal decoding device and balance adjustment method for audio signal decoding device
WO2009122757A1 (ja) ステレオ信号変換装置、ステレオ信号逆変換装置およびこれらの方法
JP2007187749A (ja) マルチチャンネル符号化における頭部伝達関数をサポートするための新装置
JP6718670B2 (ja) Ａｄｐｃｍコーデックでのパケット損失隠蔽方法及びｐｌｃ回路を備えるａｄｐｃｍ復号器
JP6352487B2 (ja) 音声信号処理方法及び音声信号処理装置
WO2021181472A1 (ja) 音信号符号化方法、音信号復号方法、音信号符号化装置、音信号復号装置、プログラム及び記録媒体
JP6133454B2 (ja) 音声信号処理方法及び音声信号処理装置
KR101567665B1 (ko) 퍼스널 오디오 스튜디오 시스템
Kimura et al. Improvements in stereophonic sound images of lossy compression audio
JP2018165824A (ja) 音声信号処理方法及び音声信号処理装置

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130730

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130827

R150 Certificate of patent or registration of utility model

Ref document number: 5355690

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250