JP2905191B1 - 信号処理装置、信号処理方法および信号処理プログラムを記録したコンピュータ読み取り可能な記録媒体 - Google Patents

Abstract

【要約】 【課題】 加工音声の音質を高品質に保ちつつ、マルチ
チャンネル音響信号の時間的圧縮・伸張を実現する。 【解決手段】 各チャンネル用の重み付け係数を用いて
得られた重み付き和信号の周期性などの特徴量を算出す
るとともに、この特徴量に基づき、ブロック単位の時間
幅を適応的に決定しながら、このブロック単位を使用し
て、同一のタイミングで、左信号、右信号を分割して、
左ブロック信号、右ブロック信号を生成し、さらに各チ
ャンネル間で時間的な同期をとりつつ、左ブロック信
号、右ブロック信号に対し、ブロック単位で、間引き処
理、繰り返し処理、あるいは複数の左ブロック信号、右
ブロック信号を用いて合成された新たなブロック信号を
置換、挿入する処理などを行って、各チャンネルの出力
信号を生成する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、入力信号を時間的
に圧縮・伸張する際に、加工音の音質を高品質に保ちつ
つ、かつマルチチャンネル音響再生に重要な水平面内の
音の方向定位の知覚に何ら悪影響を与えないようにする
信号処理装置、信号処理方法および信号処理プログラム
を記録したコンピュータ読み取り可能な記録媒体に関す
る。

【０００２】［発明の概要］本発明は、放送番組の受信
装置や録音再生装置において、音響信号が２チャンネル
ステレオやハイビジョン用３−１方式等に代表されるマ
ルチチャンネル方式であるとき、音響信号の時間長を保
持して音程を変えたり、音程を保持してテンポや話す速
さを変えるなどの目的で、入力信号を時間的に圧縮・伸
張する際に、加工音の音質を高品質に保ちつつ、かつマ
ルチチャンネル音響再生に重要な水面内の音の方向定位
の知覚に何ら悪影響を与えない信号処理装置および信号
処理方法を提供することを目的とするものであり、適当
な規則により決定される各チャンネル用の重みを用い
て、各チャンネル間の重み付和信号を算出し、この重み
付和信号の時間変化の周期性等の特徴量を抽出し、各チ
ャンネルの信号に対して同一のタイミングで、前記抽出
された周期性等の特徴量に基づいて、適応的に決定され
る時間幅を有するブロック単位に分割し、各チャンネル
で時間的に同期をとりつつ、各チャンネルの信号に対し
てブロック単位の信号を置換・挿入することにより、マ
ルチチャンネル音響信号の時間的な圧縮・伸張を実現す
るとともに、各チャンネルの信号間の時間的なズレを生
じさせないようにする。

【０００３】さらに、マルチチャンネル音響再生の水平
面内の音の方向定位を保持できるだけでなく、特徴抽出
を重み付和信号という一つの信号についてのみ行うた
め、各チャンネル独立にそれぞれの特徴量を抽出する場
合に比べ、演算量を低減して、装置全体のコストを低く
抑えながら、リアルタイムでの信号処理を可能にする。

【０００４】

【従来の技術】従来、音程や話す速さを変える場合、入
力信号を時間的に圧縮・伸張する際には、固定の時間間
隔で、かつ固定のフレーム幅を用いて、入力信号をブロ
ック単位に分割し、あるブロックを間引いたり、繰り返
したり、あるいは複数のブロックの信号を用いて合成さ
れた新たなブロック単位の信号を置換・挿入したりする
などの方法を用いる。この際、隣接するブロック間を連
続に接続するためには、クロスフェードなどの手法を用
いるのが一般的である。

【０００５】このような従来法においては、マルチチャ
ンネルの信号に対応するためにモノラル用の装置を複数
台用意し、これらの装置を並行に使用した場合にも、同
じ同期信号で全体の装置を制御するなどの手法により比
較的、簡便に各チャンネルの信号処理の時間的な同期を
取ることが可能である。したがって、各チャンネルの音
響信号の間で時間的なズレが生じることが無く、マルチ
チャンネル音響再生に重要な水平面内の音の方向定位を
保持することができる。

【０００６】

【発明が解決しようとする課題】ところが、固定の時間
間隔で、かつ固定のフレーム幅を用いて信号処理を行う
方法は、簡便である反面、加工音の音質がエコー感を伴
うことが多い。このため、音程や話す速さの変化量が大
きくなるほど、音質劣化が激しくなり、高品質に音程や
話す速さを変えることはできなかった。

【０００７】そこで、高品質に音程や話す速さを変える
方法として、入力信号から抽出された周期性などの特徴
量に基づいて決定される適応的な時間幅を有するブロッ
ク単位を決定し、このブロック単位を使用して、入力信
号を複数のブロックに分割し、あるブロックを間引いた
り、繰り返したり、あるいは複数のブロック信号を用い
て合成された新たなブロック単位の信号を置換・挿入し
たりすることにより、時間的な圧縮・伸張を実現する方
法（例えば特開平０７−２８１６９１号公報、特開平０
３−２５９２００号公報など）が提案されている。

【０００８】この種の方法によれば、殆どエコー感を生
じさせることなく、音程や話す速さを大幅に変化させる
ことが可能であるものの、この手法においてマルチチャ
ンネル信号に対応するために、モノラル用の装置を複数
台、並行に使用した場合、各チャンネル、各々の入力信
号から抽出された周期性等の特徴量が必ずしも一致せ
ず、各チャンネル毎の特徴量に基づいて決定されるブロ
ックの時間幅がチャンネル毎に別々となることから、ブ
ロック単位に行われる間引き・繰り返し・置換・挿入
も、各チャンネルで同じタイミングにすることが困難で
ある。

【０００９】この結果、各チャンネル信号間に時間的な
ズレを生じる。例えば、音声を対象とした場合、その周
期性は“３ｍｓ〜２０ｍｓ”程度の範囲で抽出される
が、２チャンネルステレオを例にとると、左右の信号間
で“１ｍｓ”の抽出結果の差があった場合、図９の
（Ａ）に示すように、３つ目のブロックおよび４つ目の
ブロックで、左右が“１ｍｓ”ずつ、異なった長さにな
ってしまう。

【００１０】この結果、図９の（Ｂ）に示すように、左
右共に３つ目のブロックおよび７つ目のブロックを繰り
返して、信号の伸張を行ったとき、３つの目のブロック
を繰り返したとき、繰り返し部分の後で、右信号が“１
ｍｓ”だけ進んでしまう。そして、“１．５ｋＨｚ”以
下の低い音については、左右の音のズレが“１ｍｓ”以
下といった僅かなズレであっても、これを実際に聞いた
とき、左右の音の方向定位が変化して、音が右に偏って
定位してしまうという問題があった。

【００１１】さらに、入力信号から周期性等の特徴量を
抽出するには、多くの演算を必要とし、モノラル用の装
置を複数台、並行に使用した場合、大幅なコスト増につ
ながることから、エコー感を伴わない高品質な時間的圧
縮・伸張方法を用いた、マルチチャンネル音響対応の音
程変換や話す速さの変換を行う信号処理装置は未だ実現
されていない。

【００１２】本発明は上記の事情に鑑み、請求項１、
５、９では、加工音声の音質を高品質に保ちつつ、マル
チチャンネル音響信号の時間的圧縮・伸張を実現すると
ともに、各チャンネル間の信号ズレを無くし、マルチチ
ャンネル音響信号を再生するとき、水平面内の音方向定
位を保持することができ、さらに各チャンネルの信号を
合成した１つの重み付け和信号に対し、特徴量抽出処理
を行うだけで、各チャンネルの信号を代表した特徴量を
求めることができ、これによって各チャンネルに対し、
個々に特徴量抽出処理を行う場合に比べて、演算時間、
回路規模を小さくして、リアルタイムでの信号処理を可
能にする信号処理装置、信号処理方法および信号処理プ
ログラムを記録したコンピュータ読み取り可能な記録媒
体を提供することを目的としている。

【００１３】また、請求項２、６、１０では、テレビ放
送受信時に得られる音声多重モード信号等の付加情報を
利用して、各チャンネルの信号を合成した１つの重み付
け和信号に対して特徴量抽出処理を行うだけで、各チャ
ンネルの信号を代表した特徴量を求め、これを使ってマ
ルチチャンネル音響信号をブロック単位に分割する際に
必要な最適なブロック長を決定することができ、これに
よって各チャンネルに対し、個々に特徴量抽出処理を行
う場合に比べて、演算時間、回路規模を小さくして、リ
アルタイムで、加工音声の音質を高品質に保ちつつ、マ
ルチチャンネル音響信号の時間的圧縮・伸張を実現し、
また各チャンネル間の信号ズレを無くし、マルチチャン
ネル音響信号を再生するとき、水平面内の音方向定位を
保持することができる信号処理が可能な信号処理装置、
信号処理方法および信号処理プログラムを記録したコン
ピュータ読み取り可能な記録媒体を提供することを目的
としている。

【００１４】また、請求項３、７、１１では、マルチチ
ャンネル音響信号のパワー値を利用して、音声多重モー
ド信号等の付加情報を不要にして、各チャンネルの信号
を合成した１つの重み付け和信号に対し、特徴量抽出処
理を行うだけで、各チャンネルの信号を代表した特徴量
を求め、これを使ってマルチチャンネル音響信号をブロ
ック単位に分割する際に必要な最適なブロック長を決定
することができ、これによって各チャンネルに対し、個
々に特徴量抽出処理を行う場合に比べて、演算時間、回
路規模を小さくして、リアルタイムで、加工音声の音質
を高品質に保ちつつ、マルチチャンネル音響信号の時間
的圧縮・伸張を実現し、また各チャンネル間の信号ズレ
を無くし、マルチチャンネル音響信号を再生するとき、
水平面内の音方向定位を保持することができる信号処理
が可能な信号処理装置、信号処理方法および信号処理プ
ログラムを記録したコンピュータ読み取り可能な記録媒
体を提供することを目的としている。

【００１５】また、請求項４、８、１２では、マルチチ
ャンネル音響信号の相関関係およびパワー値を利用し
て、音声多重モード等の付加情報を不要にして、各チャ
ンネルの信号を合成した１つの重み付け和信号に対し、
特徴量抽出処理を行うだけで、各チャンネルの信号を代
表した特徴量を求め、これを使ってマルチチャンネル音
響信号をブロック単位に分割する際に必要な最適なブロ
ック長を決定することができ、これによって各チャンネ
ルに対し、個々に特徴量抽出処理を行う場合に比べて、
演算時間、回路規模を小さくして、リアルタイムで、加
工音声の音質を高品質に保ちつつ、マルチチャンネル音
響信号の時間的圧縮・伸張を実現し、また各チャンネル
間の信号ズレを無くし、マルチチャンネル音響信号を再
生するとき、水平面内の音方向定位を保持することがで
きる信号処理が可能な信号処理装置、信号処理方法およ
び信号処理プログラムを記録したコンピュータ読み取り
可能な記録媒体を提供することを目的としている。

【００１６】

【課題を解決するための手段】上記の目的を達成するた
めに本発明は、請求項１では、マルチチャンネル音響信
号に対し、時間的な圧縮、伸張を行う信号処理装置にお
いて、前記マルチチャンネル音響信号を構成する各チャ
ンネル信号に対し、重み付けを行って加算し、被分析信
号を生成する被分析信号算出部と、この被分析信号算出
部から出力される被分析信号の特徴量に基づき、ブロッ
ク長を決定し、この決定内容に基づき、前記各チャンネ
ル信号を分割して各チャンネル毎のブロック信号を生成
する分析処理／ブロック分割部と、入力された圧縮・伸
張倍率に応じて、前記分析／ブロック分割部から出力さ
れる各チャンネル毎のブロック信号間の時間的な同期を
とりつつ、各ブロック信号に対してブロック単位で間引
き処理、繰り返し処理、あるいは複数のブロック信号を
用いて合成された新たなブロック信号の置換、挿入処理
を行う接続順序生成／信号接続部とを備えたことを特徴
としている。

【００１７】また、請求項２では、請求項１に記載の信
号処理装置において、前記被分析信号算出部は、入力さ
れた音声多重モード信号等の付加情報に応じて、各チャ
ンネル用重み付け係数を求め、各チャンネル毎の重み付
け係数を用いて、前記各チャンネル信号に重み付けを行
った後、重み付け処理済みの各チャンネル信号を加算し
て、前記被分析信号を生成することを特徴としている。

【００１８】また、請求項３では、請求項１に記載の信
号処理装置において、前記被分析信号算出部は、所定の
フレーム幅を用いて、前記各チャンネル信号のフレーム
パワーを求めた後、各フレームパワーの平均値に基づ
き、各チャンネル用重み付け係数を求め、各チャンネル
毎の重み付け係数を用いて、前記各チャンネル信号に重
み付けを行った後、重み付け処理済みの各チャンネル信
号を加算して、前記被分析信号を生成することを特徴と
している。

【００１９】また、請求項４では、請求項１に記載の信
号処理装置において、前記被分析信号算出部は、前記各
チャンネル信号の相関係数を求めるとともに、所定のフ
レーム幅を用いて、前記各チャンネル信号のフレームパ
ワーを求め、前記相関係数、前記各フレームパワーの平
均値に基づき、各チャンネル用重み付け係数を求め、各
チャンネル毎の重み付け係数を用いて、前記各チャンネ
ル信号に重み付けを行った後、重み付け処理済みの各チ
ャンネル信号を加算して、前記被分析信号を生成するこ
とを特徴としている。

【００２０】また、請求項５では、マルチチャンネル音
響信号に対し、時間的な圧縮、伸張を行う信号処理方法
において、前記マルチチャンネル音響信号を構成する各
チャンネル信号に対し、重み付けを行って加算し、被分
析信号を生成するとともに、この被分析信号の特徴量に
基づいて得られたブロック長を使用して、前記各チャン
ネル信号を分割し、各チャンネル毎のブロック信号を生
成した後、入力された圧縮・伸張倍率に応じて、前記各
チャンネル毎のブロック信号間の時間的な同期をとりつ
つ、各ブロック信号に対してブロック単位で間引き処
理、繰り返し処理、あるいは複数のブロック信号を用い
て合成された新たなブロック信号の置換、挿入処理を行
うことを特徴としている。

【００２１】また、請求項６では、請求項５に記載の信
号処理方法において、前記各チャンネル信号に対し、重
み付けを行って加算し、被分析信号を生成するとき、入
力された音声多重モード信号等の付加情報に応じて、各
チャンネル用重み付け係数を求め、各チャンネル毎の重
み付け係数を用いて、前記各チャンネル信号に重み付け
を行った後、重み付け処理済みの各チャンネル信号を加
算して、前記被分析信号を生成することを特徴としてい
る。

【００２２】また、請求項７では、請求項５に記載の信
号処理方法において、前記各チャンネル信号に対し、重
み付けを行って加算し、被分析信号を生成するとき、所
定のフレーム幅を用いて、前記各チャンネル信号のフレ
ームパワーを求めた後、各フレームパワーの平均値に基
づき、各チャンネル用重み付け係数を求め、各チャンネ
ル毎の重み付け係数を用いて、前記各チャンネル信号に
重み付けを行った後、重み付け処理済みの各チャンネル
信号を加算して、前記被分析信号を生成することを特徴
としている。

【００２３】また、請求項８では、請求項５に記載の信
号処理方法において、前記各チャンネル信号に対し、重
み付けを行って加算し、被分析信号を生成するとき、前
記各チャンネル信号の相関係数を求めるとともに、所定
のフレーム幅を用いて、前記各チャンネル信号のフレー
ムパワーを求め、前記相関係数、前記各フレームパワー
の平均値に基づき、各チャンネル用重み付け係数を求
め、各チャンネル毎の重み付け係数を用いて、前記各チ
ャンネル信号に重み付けを行った後、重み付け処理済み
の各チャンネル信号を加算して、前記被分析信号を生成
することを特徴としている。

【００２４】また、請求項９では、マルチチャンネル音
響信号に対し、時間的な圧縮、伸張を行う信号処理プロ
グラムを記録した記録媒体であって、前記マルチチャン
ネル音響信号を構成する各チャンネル信号に対し、重み
付けを行って加算し、被分析信号を生成する被分析信号
算出手段、この被分析信号算出手段から出力される被分
析信号の特徴量に基づき、ブロック長を決定し、この決
定内容に基づき、前記各チャンネル信号を分割して各チ
ャンネル毎のブロック信号を生成する分析処理／ブロッ
ク分割手段、入力された圧縮・伸張倍率に応じて、前記
分析／ブロック分割手段から出力される各チャンネル毎
のブロック信号間の時間的な同期をとりつつ、各ブロッ
ク信号に対してブロック単位で間引き処理、繰り返し処
理、あるいは複数のブロック信号を用いて合成された新
たなブロック信号の置換、挿入処理を行う接続順序生成
／信号接続手段をコンピュータに実現させるための信号
処理プログラムを記録したことを特徴としている。

【００２５】また、請求項１０では、請求項９に記載の
信号処理プログラムを記録したコンピュータ読み取り可
能な記録媒体において、前記被分析信号算出手段は、入
力された音声多重モード信号等の付加情報に応じて、各
チャンネル用重み付け係数を求め、各チャンネル毎の重
み付け係数を用いて、前記各チャンネル信号に重み付け
を行った後、重み付け処理済みの各チャンネル信号を加
算して、前記被分析信号を生成する機能をコンピュータ
に実現させることを特徴としている。

【００２６】また、請求項１１では、請求項９に記載の
信号処理プログラムを記録したコンピュータ読み取り可
能な記録媒体において、前記被分析信号算出手段は、所
定のフレーム幅を用いて、前記各チャンネル信号のフレ
ームパワーを求めた後、各フレームパワーの平均値に基
づき、各チャンネル用重み付け係数を求め、各チャンネ
ル毎の重み付け係数を用いて、前記各チャンネル信号に
重み付けを行った後、重み付け処理済みの各チャンネル
信号を加算して、前記被分析信号を生成する機能をコン
ピュータに実現させることを特徴としている。

【００２７】また、請求項１２では、請求項９に記載の
信号処理プログラムを記録したコンピュータ読み取り可
能な記録媒体において、前記被分析信号算出手段は、前
記各チャンネル信号の相関係数を求めるとともに、所定
のフレーム幅を用いて、前記各チャンネル信号のフレー
ムパワーを求め、前記相関係数、前記各フレームパワー
の平均値に基づき、各チャンネル用重み付け係数を求
め、各チャンネル毎の重み付け係数を用いて、前記各チ
ャンネル信号に重み付けを行った後、重み付け処理済み
の各チャンネル信号を加算して、前記被分析信号を生成
する機能をコンピュータに実現させることを特徴として
いる。

【００２８】上記の構成において、請求項１の信号処理
装置では、被分析信号算出部によって、前記マルチチャ
ンネル音響信号を構成する各チャンネル信号に対し、重
み付けを行って加算し、被分析信号を生成する。分析処
理／ブロック分割部によって、前記被分析信号算出部か
ら出力される被分析信号の特徴量に基づき、ブロック長
を決定し、この決定内容に基づき、前記各チャンネル信
号を分割して各チャンネル毎のブロック信号を生成する
とともに、接続順序生成／信号接続部によって、入力さ
れた圧縮・伸張倍率に応じて、前記分析／ブロック分割
部から出力される各チャンネル毎のブロック信号間の時
間的な同期をとりつつ、各ブロック信号に対してブロッ
ク単位で間引き処理、繰り返し処理、あるいは複数のブ
ロック信号を用いて合成された新たなブロック信号の置
換、挿入処理を行う。これにより、加工音声の音質を高
品質に保ちつつ、マルチチャンネル音響信号の時間的圧
縮・伸張を実現するとともに、各チャンネル間の信号ズ
レを無くし、マルチチャンネル音響信号を再生すると
き、水平面内の音方向定位を保持し、さらに各チャンネ
ルの信号を合成した１つの重み付け和信号に対し、特徴
量抽出処理を行うだけで、各チャンネルの信号を代表し
た特徴量を求め、これによって各チャンネルに対し、個
々に特徴量抽出処理を行う場合に比べて、演算時間、回
路規模を小さくして、リアルタイムでの信号処理を実現
する。

【００２９】また、請求項２の信号処理装置では、入力
された音声多重モード信号等の付加情報に応じて被分析
信号算出部において、各チャンネル用重み付け係数を求
め、各チャンネル毎の重み付け係数を用いて、前記各チ
ャンネル信号に重み付けを行った後、重み付け処理済み
の各チャンネル信号を加算して、前記被分析信号を生成
することにより、各チャンネルの信号を合成した１つの
重み付け和信号に対して特徴量抽出処理を行うだけで、
各チャンネルの信号を代表した特徴量を求め、これを使
ってマルチチャンネル音響信号をブロック単位に分割す
る際に必要な最適なブロック長を決定し、これによって
各チャンネルに対し、個々に特徴量抽出処理を行う場合
に比べて、演算時間、回路規模を小さくして、リアルタ
イムで、加工音声の音質を高品質に保ちつつ、マルチチ
ャンネル音響信号の時間的圧縮・伸張を実現し、また各
チャンネル間の信号ズレを無くし、マルチチャンネル音
響信号を再生するとき、水平面内の音方向定位を保持し
た信号処理を実現する。

【００３０】また、請求項３の信号処理装置では、被分
析信号算出部によって、所定のフレーム幅を用いて、前
記各チャンネル信号のフレームパワーを求めた後、各フ
レームパワーの平均値に基づき、各チャンネル用重み付
け係数を求め、各チャンネル毎の重み付け係数を用い
て、前記各チャンネル信号に重み付けを行った後、重み
付け処理済みの各チャンネル信号を加算して、前記被分
析信号を生成することにより、マルチチャンネル音響信
号のパワー値を利用して、音声多重モード信号等の付加
情報を不要にして、各チャンネルの信号を合成した１つ
の重み付け和信号に対し、特徴量抽出処理を行うだけ
で、各チャンネルの信号を代表した特徴量を求め、これ
を使ってマルチチャンネル音響信号をブロック単位に分
割する際に必要な最適なブロック長を決定し、これによ
って各チャンネルに対し、個々に特徴量抽出処理を行う
場合に比べて、演算時間、回路規模を小さくして、リア
ルタイムで、加工音声の音質を高品質に保ちつつ、マル
チチャンネル音響信号の時間的圧縮・伸張を実現し、ま
た各チャンネル間の信号ズレを無くし、マルチチャンネ
ル音響信号を再生するとき、水平面内の音方向定位を保
持した信号処理を実現する。

【００３１】また、請求項４の信号処理装置では、被分
析信号算出部によって、前記各チャンネル信号の相関係
数を求めるとともに、所定のフレーム幅を用いて、前記
各チャンネル信号のフレームパワーを求め、前記相関係
数、前記各フレームパワーの平均値に基づき、各チャン
ネル用重み付け係数を求め、各チャンネル毎の重み付け
係数を用いて、前記各チャンネル信号に重み付けを行っ
た後、重み付け処理済みの各チャンネル信号を加算し
て、前記被分析信号を生成することにより、マルチチャ
ンネル音響信号の相関関係およびパワー値を利用して、
音声多重モード信号等の付加情報を不要にして、各チャ
ンネルの信号を合成した１つの重み付け和信号に対し、
特徴量抽出処理を行うだけで、各チャンネルの信号の信
号を代表した特徴量を求め、これを使ってマルチチャン
ネル音響信号をブロック単位に分割する際に必要な最適
なブロック長を決定し、これによって各チャンネルに対
し、個々に特徴量抽出処理を行う場合に比べて、演算時
間、回路規模を小さくして、リアルタイムで、加工音声
の音質を高品質に保ちつつ、マルチチャンネル音響信号
の時間的圧縮・伸張を実現し、また各チャンネル間の信
号ズレを無くし、マルチチャンネル音響信号を再生する
とき、水平面内の音方向定位を保持した信号処理を実現
する。

【００３２】また、請求項５の信号処理方法では、マル
チチャンネル音響信号を構成する各チャンネル信号に対
し、重み付けを行って加算し、被分析信号を生成すると
ともに、この被分析信号の特徴量に基づいて得られたブ
ロック長を使用して、前記各チャンネル信号を分割し、
各チャンネル毎のブロック信号を生成した後、入力され
た圧縮・伸張倍率に応じて、前記各チャンネル毎のブロ
ック信号間の時間的な同期をとりつつ、各ブロック信号
に対してブロック単位で間引き処理、繰り返し処理、あ
るいは複数のブロック信号を用いて合成された新たなブ
ロック信号の置換、挿入処理を行うことにより、加工音
声の音質を高品質に保ちつつ、マルチチャンネル音響信
号の時間的圧縮・伸張を実現するとともに、各チャンネ
ル間の信号ズレを無くし、マルチチャンネル音響信号を
再生するとき、水平面内の音方向定位を保持し、さらに
各チャンネルの信号を合成した１つの重み付け和信号に
対し、特徴量抽出処理を行うだけで、各チャンネルの信
号を代表した特徴量を求め、これによって各チャンネル
に対し、個々に特徴量抽出処理を行う場合に比べて、演
算時間、回路規模を小さくして、リアルタイムでの信号
処理を実現する。

【００３３】また、請求項６の信号処理方法では、各チ
ャンネル信号に対し、重み付けを行って加算し、被分析
信号を生成するとき、入力された音声多重モード信号等
の付加情報に応じて、各チャンネル用重み付け係数を求
め、各チャンネル毎の重み付け係数を用いて、前記各チ
ャンネル信号に重み付けを行った後、重み付け処理済み
の各チャンネル信号を加算して、前記被分析信号を生成
することにより、各チャンネルの信号を合成した１つの
重み付け和信号に対して特徴量抽出処理を行うだけで、
各チャンネルの信号を代表した特徴量を求め、これを使
ってマルチチャンネル音響信号をブロック単位に分割す
る際に必要な最適なブロック長を決定し、これによって
各チャンネルに対し、個々に特徴量抽出処理を行う場合
に比べて、演算時間、回路規模を小さくして、リアルタ
イムで、加工音声の音質を高品質に保ちつつ、マルチチ
ャンネル音響信号の時間的圧縮・伸張を実現し、また各
チャンネル間の信号ズレを無くし、マルチチャンネル音
響信号を再生するとき、水平面内の音方向定位を保持し
た信号処理を実現する。

【００３４】また、請求項７の処理方法では、各チャン
ネル信号に対し、重み付けを行って加算し、被分析信号
を生成するとき、所定のフレーム幅を用いて、前記各チ
ャンネル信号のフレームパワーを求めた後、各フレーム
パワーの平均値に基づき、各チャンネル用重み付け係数
を求め、各チャンネル毎の重み付け係数を用いて、前記
各チャンネル信号に重み付けを行った後、重み付け処理
済みの各チャンネル信号を加算して、前記被分析信号を
生成することにより、マルチチャンネル音響信号のパワ
ー値を利用して、音声多重モード信号等の付加情報を不
要にして、各チャンネルの信号を合成した１つの重み付
け和信号に対し、特徴量抽出処理を行うだけで、各チャ
ンネルの信号を代表した特徴量を求め、これを使ってマ
ルチチャンネル音響信号をブロック単位に分割する際に
必要な最適なブロック長を決定し、これによって各チャ
ンネルに対し、個々に特徴量抽出処理を行う場合に比べ
て、演算時間、回路規模を小さくして、リアルタイム
で、加工音声の音質を高品質に保ちつつ、マルチチャン
ネル音響信号の時間的圧縮・伸張を実現し、また各チャ
ンネル間の信号ズレを無くし、マルチチャンネル音響信
号を再生するとき、水平面内の音方向定位を保持した信
号処理を実現する。

【００３５】また、請求項８の信号処理方法では、各チ
ャンネル信号に対し、重み付けを行って加算し、被分析
信号を生成するとき、前記各チャンネル信号の相関係数
を求めるとともに、所定のフレーム幅を用いて、前記各
チャンネル信号のフレームパワーを求め、前記相関係
数、前記各フレームパワーの平均値に基づき、各チャン
ネル用重み付け係数を求め、各チャンネル毎の重み付け
係数を用いて、前記各チャンネル信号に重み付けを行っ
た後、重み付け処理済みの各チャンネル信号を加算し
て、前記被分析信号を生成することにより、マルチチャ
ンネル音響信号の相関関係およびパワー値を利用して、
音声多重モード信号等の付加情報を不要にして、各チャ
ンネルの信号を合成した１つの重み付け和信号に対し、
特徴量抽出処理を行うだけで、各チャンネルの信号を代
表した特徴量を求め、これを使ってマルチチャンネル音
響信号をブロック単位に分割する際に必要な最適なブロ
ック長を決定し、これによって各チャンネルに対し、個
々に特徴量抽出処理を行う場合に比べて、演算時間、回
路規模を小さくして、リアルタイムで、加工音声の音質
を高品質に保ちつつ、マルチチャンネル音響信号の時間
的圧縮・伸張を実現し、また各チャンネル間の信号ズレ
を無くし、マルチチャンネル音響信号を再生するとき、
水平面内の音方向定位を保持した信号処理を実現する。

【００３６】また、請求項９〜１２に記載のように、前
記請求項１〜４に記載された信号処理装置の各機能は、
コンピュータ読み取り可能記録媒体に記録することによ
っても提供できる。

【００３７】

【発明の実施の形態】図１は本発明による信号処理装置
および信号処理方法の実施の形態である信号処理装置の
一例を示すブロック図である。なお、この信号処理装置
では、左信号を第１チャンネル、右信号を第２チャンネ
ルとし、さらに入力信号の音程を変えずに、時間長を圧
縮・伸張する場合、すなわち音楽のテンポや話す速さを
変える場合を例にして、以下の説明を行う。

【００３８】この図に示す信号処理装置１は、所定のサ
ンプリングレートで左入力信号、右入力信号を各々、Ａ
／Ｄ変換するＡ／Ｄ変換部２と、このＡ／Ｄ変換部２か
ら出力されるデジタル化された左信号、右信号に基づ
き、周期性などの特徴量を抽出するのに必要な重み付き
和信号を求め、この重み付き和信号に基づき、被分析信
号を生成する被分析信号算出部３と、この被分析信号算
出部３から出力される被分析信号が持つ、周期性などの
特徴量に基づき、分割情報を生成する分析処理部４と、
この分析処理部４から出力され分割情報に基づき、前記
Ａ／Ｄ変換部２から出力される左信号、右信号をブロッ
ク単位に分割して、左ブロック信号、右ブロック信号を
生成するブロック分割部５と、所望の圧縮・伸張倍率を
実現するために、左ブロック信号、右ブロック信号の接
続順序を生成する接続順序生成部６と、この接続順序生
成部６から出力される接続順序に基づき、ブロック分割
部５から出力される左ブロック信号、右ブロック信号を
順次、接続して左合成信号、右合成信号を生成する信号
接続部７と、この信号接続部７から出力される左合成信
号、右合成信号を所定のサンプリングレートでＤ／Ａ変
換して、アナログ化された左出力信号、右出力信号を生
成するＤ／Ａ変換部８とを備えている。

【００３９】そして、適切な規則によって決定される各
チャンネル用の重み付け係数を用いて、左右の重み付き
和信号（被分析信号）を算出し、この重み付き和信号の
時間変化の周期性などの特徴量を算出するとともに、こ
の特徴量に基づき、ブロック単位の時間幅を適応的に決
定しながら、このブロック単位に基づき、同一のタイミ
ングで、左信号、右信号を分割して、左ブロック信号、
右ブロック信号を生成する。この後、各チャンネル間で
時間的な同期をとりつつ、左ブロック信号、右ブロック
信号に対し、ブロック単位で、間引き処理、繰り返し処
理、あるいは複数の左ブロック信号、右ブロック信号を
用いて合成された新たなブロック信号を置換、挿入する
処理などを行って、加工音声の音質を高品質に保ちつ
つ、マルチチャンネル音響信号の時間的圧縮・伸張を実
現するとともに、左出力信号、右出力信号の時間的なズ
レを無くし、左右の音の方向定位を保持する。

【００４０】Ａ／Ｄ変換部２は、ＦＩＦＯメモリを有
し、所定のサンプリングレート（例えば、３２ｋＨｚ）
に基づき、同一の変換タイミングで、右入力信号、左入
力信号を各々、Ａ／Ｄ変換して、デジタル化された左信
号、右信号を生成し、これら左信号、右信号をＦＩＦＯ
メモリに記憶させるとともに、音声データの過不足が生
じないようなタイミングで、ＦＩＦＯメモリに記憶され
ている左信号、右信号を読み出し、被分析信号算出部３
と、ブロック分割部５とに供給する。

【００４１】分析信号算出部３は、図２に示すように、
入力された音声多重モード信号に応じた左信号用重み係
数“ａ₁”、右信号用重み係数“ａ₂”を生成する重み決
定部９と、この重み決定部９から出力される左信号用重
み係数“ａ₁”に基づき、入力された左信号“Ｓ₁”に重
み付けを行って重み付け済み左信号“ａ₁・Ｓ₁”を生成
する乗算器１０と、重み決定部９から出力される右信号
用重み係数“ａ₂”に基づき、入力された右信号“Ｓ₂”
に重み付けを行って重み付け済み右信号“ａ₂・Ｓ₂”を
生成する乗算器１１と、この乗算器１１から出力される
重み付け済み右信号“ａ₂・Ｓ₂”と乗算器１０から出力
される重み付け済み左信号“ａ₁・Ｓ₁”とを加算して重
み付け和信号“ａ₁・Ｓ₁＋ａ₂・Ｓ₂”を求め、これを被
分析信号として出力する加算器１２とを備えており、入
力された音声多重モード信号に応じた左信号用重み係数
“ａ₁”、右信号用重み係数“ａ₂”を生成し、この左信
号用重み係数“ａ₁”と、左信号“Ｓ₁”とを乗算して重
み付け済み左信号“ａ₁・Ｓ₁”を求めるとともに、右信
号用重み係数“ａ₂”と、右信号“Ｓ₂”とを乗算して、
重み付け済み右信号“ａ₂・Ｓ₂”を求めた後、これら重
み付け済み左信号“ａ₁・Ｓ₁”と、重み付け済み右信号
“ａ₂・Ｓ₂”とを加算して、重み付け和信号“ａ₁・Ｓ₁
＋ａ₂・Ｓ₂”を求め、これを被分析信号として、分析処
理部４に供給する。

【００４２】この場合、Ａ／Ｄ変換部２に入力される左
入力信号“Ｓ₁”、右入力信号“Ｓ₂”がテレビ音声であ
れば、音声多重モード信号がモノラルモードおよびステ
レオモードであるとき、左信号用重み係数“ａ₁”と、
右信号用重み係数“ａ₂”が共に“０．５”にされ、ま
た音声多重モード信号が２重音声モードであり、主音声
を聞くとき、左信号用重み係数“ａ₁”が“１．０”に
され、右信号用重み係数“ａ₂”が“０”にされ、また
副音声を聞くとき、左信号用重み係数“ａ₁”が“０”
にされ、右信号用重み係数“ａ₂”が“１．０”にされ
る。

【００４３】分析処理部４は、被分析信号算出部３から
出力される被分析信号の特徴を分析し、この被分析信号
で示される左チャンネルの音、左チャンネルの音が強い
周期性を持つ音、弱い周期性を持つ音、無音のいずれの
属性を持つかを判定し、この判定結果を基づいて、被分
析信号を分析し、ブロック分割部５のブロック分割処理
で必要なブロック長を決定する。なお、Ａ／Ｄ変換部２
に入力される左入力信号、右入力信号として、音声、音
楽、雑音など様々な音が想定されるが、一般に、音声、
音楽、雑音などを正確に自動判別することが難しいこと
から、ここでは、全ての音響に対して、上述したよう
に、３つの属性のいずれか１つに分類して、次に述べる
手順で、分析を行う。

【００４４】まず、“５ｍｓ”前後の間隔で、“２０ｍ
ｓ”前後の窓幅を使用して、被分析信号を切出し、これ
によって得られた区間単位の被分析信号を自乗して、自
乗和を算出し、被分析信号のパワー値を算出する。この
後、このパワー値が所定のしきい値“Ｐ_min”未満であ
るとき、この区間を無音区間と判定し、またパワー値が
しきい値“Ｐ_min”以上であるとき、ゼロ交差分析、自
己相関分析などの手法を併用して、被分析信号が強い周
期性を持つ区間、弱い周期性を持つ区間のいずれである
か判定する。

【００４５】そして、各区間の属性毎に所定の自己相関
分析を行って周期性を検出し、この検出結果に基づき、
左信号、右信号を分割するのに必要な各ブロックの時間
長（ブロック長）を決定する。

【００４６】この際、強い周期性を持つ区間について
は、基本周期を抽出し、各基本周期が各々のブロック長
となるように分割を行って、ブロック単位の繰り返しに
起因する音程の高さの変化を防止するとともに、長短が
異なる複数の窓幅の自己相関分析を行って、出来るだ
け、正確な基本周期を検出し、広い範囲の基本周期に対
応し得るようにし、また弱い周期性を持つ区間あるいは
無音区間については、便宜的に“１０ｍｓ”以内の周期
性を検出し、この検出結果に基づき、ブロック長を決定
し、このブロック長を分割情報として、ブロック分割部
５に供給する。

【００４７】ブロック分割部５は、分析処理部４で決定
されたブロック長（分割情報）に基づき、Ａ／Ｄ変換部
２から出力される左信号、右信号の分割点（時刻）が同
期するように、かつ同じタイミングとなるように、これ
ら左信号、右信号を各々、分割して、左ブロック信号、
右ブロック信号を生成し、これを信号接続部７に供給す
る。

【００４８】また、接続順序生成部６は、書き換え可能
なメモリに格納されている各属性毎の圧縮・伸張倍率を
所定の時間間隔（例えば、“１００ｍｓ”前後の間隔）
で読み出すとともに、この圧縮・伸張倍率と、信号接続
部７から出力される既接続情報とに基づき、各属性毎の
圧縮・伸張倍率を実現するのに必要な左ブロック信号、
右ブロック信号の接続順序を時々刻々、生成し、これを
信号接続部７に供給する。

【００４９】この場合、一般の音響信号では、周期性が
強い区間、周期性が弱い区間、無音区間の各属性が順
次、入れ替わって出現することから、書き換え可能なメ
モリに圧縮倍率が設定されている場合には、図３に示す
ように、信号接続部７において接続される左ブロック信
号、右ブロック信号の属性が入れ替わった時刻、または
信号接続部７において、同じ属性の左ブロック信号、右
ブロック信号が接続され続いている状態で、外部からの
操作により、これら左ブロック信号、右ブロック信号の
属性に対する圧縮・伸張倍率が変更され、この圧縮・伸
張倍率が書き換え可能なメモリから読み出された時刻が
ブロック接続処理の開始時刻“Ｔ₀”にされる。

【００５０】そして、開始時刻“Ｔ₀”を基準にして、
ブロック分割部５から出力される圧縮前における左ブロ
ック信号、右ブロック信号のブロック長の総和を
“Ｓ_i”、既に接続された左ブロック信号、右ブロック
信号のブロック長の総和を“Ｓ_o”とし、目的の圧縮・
伸張倍率を“ｒ”（但し、ｒ＜１．０）とし、さらにブ
ロック分割部５から次に出力される左ブロック信号、右
ブロック信号のブロック長を“Ｌ”とし、次式が成り立
つとき、ブロック分割部５から出力される次の左ブロッ
ク信号、右ブロック信号を間引いて、これら左ブロック
信号、右ブロック信号の接続を中止する。 Ｌ／２＞ｒ・Ｓ_i−Ｓ_o …（１）

【００５１】この場合、図３では、８つ目の左ブロック
信号、８つ目の右ブロック信号を接続しようとした時点
で、（１）式に示す条件が満たされることから、８つ目
の左ブロック信号、８つ目の右ブロック信号が間引かれ
る。なお、図３においては、４つ目の左ブロック信号、
４つ目の右ブロック信号が既に間引かれている。

【００５２】また、圧縮・伸張倍率“ｒ”が“０．５”
より小さい場合には、ブロック分割部５から出力される
左ブロック信号、右ブロック信号が２つ以上連続して、
間引かれることもある。

【００５３】また、書き換え可能なメモリに伸張倍率が
設定されている場合には、図４に示すように、信号接続
部７において接続される左ブロック信号、右ブロック信
号の属性が入れ替わった時刻、または信号接続部７にお
いて、同じ属性の左ブロック信号、右ブロック信号が接
続され続いている状態で、外部からの操作により、これ
ら左ブロック信号、右ブロック信号の属性に対する圧縮
・伸張倍率が変更され、この圧縮・伸張倍率が書き換え
可能なメモリから読み出された時刻がブロック接続処理
の開始時刻“Ｔ₀”にされる。

【００５４】そして、開始時刻“Ｔ₀”を基準にして、
ブロック分割部５から出力される伸張前における左ブロ
ック信号、右ブロック信号のブロック長の総和を
“Ｓ_i”、既に接続された左ブロック信号、右ブロック
信号のブロック長の総和を“Ｓ_o”とし、目的の圧縮・
伸張倍率を“ｒ”（但し、ｒ＞１．０）とし、さらにブ
ロック分割部５から次に出力される左ブロック信号、右
ブロック信号のブロック長を“Ｌ”とし、次式が成り立
つとき、ブロック分割部５から出力される次の左ブロッ
ク信号、右ブロック信号を繰り返して接続する。 Ｌ／２＜ｒ・Ｓ_i−Ｓ_o …（２）

【００５５】この場合、図４では、８つ目の左ブロック
信号、８つ目の右ブロック信号を接続しようとした時点
で、（２）式に示す条件が満たされることから、８つ目
の左ブロック信号、８つ目の右ブロック信号が繰り返
し、接続される。なお、図４においては、４つ目の左ブ
ロック信号、４つ目の右ブロック信号が既に一度、繰り
返されている。

【００５６】また、圧縮・伸張倍率“ｒ”が“２．０”
より大きい場合には、ブロック分割部５から出力される
左ブロック信号、右ブロック信号が２回以上、連続して
繰り返されることもある。

【００５７】また、信号接続部７は、ＦＩＦＯメモリを
有し、ブロック分割部５から出力される左ブロック信
号、右ブロック信号を取り込むとともに、接続順序生成
部６で決定された接続順序に基づき、左ブロック信号、
右ブロック信号を滑らかに接続するのに必要なクロスフ
ェード処理を行いながら、ＦＩＦＯメモリを使用して、
左ブロック信号、右ブロック信号を各々、接続し、左合
成信号、右合成信号を生成し、これを過不足無くＤ／Ａ
変換部８に供給する。

【００５８】この場合、接続順序生成部６で決定された
接続順序で圧縮処理が必要な場合には、クロスフェード
処理として、図５に示すように、間引き対象となってい
る左ブロック信号、右ブロック信号毎に、間引き対象と
なっているブロック信号の開始部分に“ｄｍｓ”（例え
ば、ｄｍｓ＝２ｍｓ）の幅を持つＡ窓（“１”から
“０”まで直線的に変化する窓）を適用するとともに、
このブロック信号の直後にあるブロック信号の開始部分
に“ｄｍｓ”の幅を持つＢ窓（“０”から“１”まで直
線的に変化する窓）を適用して、窓掛けを行った後、こ
の窓掛け処理で抽出された各ブロック信号を重複加算し
て、重複加算信号を生成した後、直前のブロック信号、
重複加算信号、直後にあるブロック信号の“ｄｍｓ”よ
り後の部分なる順序で各ブロック信号を連結する。ま
た、このような直線的に変化する窓以外の窓、例えば余
弦曲線を使用した窓を使用しても良い。

【００５９】また、接続順序生成部６で決定された接続
順序で伸張処理が必要な場合には、クロスフェード処理
として、図６に示すように、繰り返し対象となっている
左ブロック信号、右ブロック信号毎に、繰り返し対象と
なっているブロック信号の開始部分に“ｄｍｓ”（例え
ば、ｄｍｓ＝２ｍｓ）の幅を持つＡ窓（“０”から
“１”まで直線的に変化する窓）を適用するとともに、
このブロック信号の直後にあるブロック信号の開始部分
に“ｄｍｓ”の幅を持つＢ窓（“１”から“０”まで直
線的に変化する窓）を適用して、窓掛けを行った後、こ
の窓掛け処理で抽出された各ブロック信号を重複加算し
て、重複加算信号を生成した後、繰り返し対象となって
いるブロック信号、重複加算信号、繰り返し対象となっ
ているブロック信号の“ｄｍｓ”より後の部分、直後の
ブロック信号なる順序で各ブロック信号を連結する。ま
た、このような直線的に変化する窓以外の窓、例えば余
弦曲線を使用した窓を使用しても良い。

【００６０】また、Ｄ／Ａ変換部８は、ＦＩＦＯメモリ
を有し、所定のサンプリングレート（例えば、３２ｋＨ
ｚ）で、信号接続部７から出力される左合成信号、右合
成信号を受け取って、これらが途切れないように、ＦＩ
ＦＯメモリに格納しながら、このＦＩＦＯメモリに格納
されている左合成信号、右合成信号を各々、Ｄ／Ａ変換
して、アナログ化された左出力信号、右出力信号を生成
し、これらをスピーカなどの次段装置に供給する。

【００６１】このように、この実施の形態では、各チャ
ンネル用の重み付け係数を用いて、左右の重み付き和信
号（被分析信号）を算出し、この重み付き和信号の時間
変化の周期性などの特徴量を算出するとともに、この特
徴量に基づき、ブロック単位の時間幅を適応的に決定し
ながら、このブロック単位に基づき、同一のタイミング
で、左信号、右信号を分割して、左ブロック信号、右ブ
ロック信号にを生成し、さらに各チャンネル間で時間的
な同期をとりつつ、左ブロック信号、右ブロック信号に
対し、ブロック単位で、間引き処理、繰り返し処理、あ
るいは複数の左ブロック信号、右ブロック信号を用いて
合成された新たなブロック信号を置換、挿入する処理な
どを行って、各チャンネルの出力信号を生成するように
したので、加工音声の音質を高品質に保ちつつ、マルチ
チャンネル音響信号の時間的圧縮・伸張を実現すること
ができる。

【００６２】また、この実施の形態では、各チャンネル
用の重み付け係数を用いて、左チャンネル信号に重み付
けを行うとともに、右チャンネル信号に重み付けを行っ
た後、重み付け済みの左チャンネル信号、重み付け済み
の右チャンネル信号を加算して、重み付き和信号（被分
析信号）を求め、この重み付き和信号の特徴量に基づ
き、左チャンネル信号、右チャンネル信号に共通のブロ
ック長を決定し、この決定結果に基づき、左チャンネル
信号、右チャンネル信号の同期をとりつつ、これら左チ
ャンネル信号、右チャンネル信号の圧縮、伸張処理を行
っているので、各チャンネル信号間の信号ズレを無くし
て、マルチチャンネル音響再生時における水平面内の音
方向定位を保持することができるとともに、各チャンネ
ル信号を合成した１つの重み付け和信号に対し、特徴量
抽出処理を行うだけで、各チャンネルの信号を代表した
特徴量を求めることができ、これによって各チャンネル
信号に対し、個々に特徴量抽出処理を行う場合に比べ
て、演算時間、回路規模を小さくして、リアルタイムで
の信号処理を可能にすることができる。

【００６３】なお、上述した実施の形態では、分析信号
算出部３に、テレビ放送を受信する際に得られた音声多
重モード信号を入力させるように構成したが、分析信号
算出部３に入力させる信号は音声多重モード信号以外、
例えば手動入力により、この音声多重モード信号と同等
の付加情報であっても良い。

【００６４】また、上述した実施の形態では、被分析信
号算出部３として、図２に示す回路構成の被分析信号算
出部３を使用するようにしているが、このような回路構
成以外の被分析信号算出部３、例えば図７に示す回路構
成の被分析信号算出部３、あるいは図８に示す回路構成
の被分析信号算出部３を使用するようにしても良い。

【００６５】この場合、図７に示す被分析信号算出部３
は、所定の時間間隔、例えば“５ｍｓ”の間隔で、所定
のフレーム幅、例えば“２０ｍｓ”のフレーム幅で、入
力された左信号“Ｓ₁”を切り出して、自乗和値あるい
は自乗平均値“Ｓ² _AVE1”を算出した後、対数化してデ
ジベル形式のパワー値“Ｐ₁”を算出するフレームパワ
ー算出部１３と、このフレームパワー算出部１３から出
力されるパワー値“Ｐ₁”を取り込むとともに、過去１
秒間に渡り、これを平均化して平均値“Ｐ_m1”を求める
平均値算出部１４と、フレームパワー算出部１３と同期
して、所定の時間間隔、例えば“５ｍｓ”の間隔で、所
定のフレーム幅、例えば“２０ｍｓ”のフレーム幅で、
入力された右信号“Ｓ₂”を切り出して、自乗和値ある
いは自乗平均値“Ｓ² _AVE2”を算出した後、対数化して
デジベル形式のパワー値“Ｐ₂”を算出するフレームパ
ワー算出部１５と、このフレームパワー算出部１５から
出力されるパワー値“Ｐ₂”を取り込むとともに、過去
１秒間に渡り、これを平均化して平均値“Ｐ_m2”を求め
る平均値算出部１６とを備えている。

【００６６】さらに、この被分析信号算出部３は、平均
値算出部１６から出力される平均値“Ｐ_m2”と平均値算
出部１４から出力される平均値“Ｐ_m1”とに基づき、次
式に示す条件式を用いて、左信号用重み係数“ａ₁”、
右信号用重み係数“ａ₂”を生成する重み決定部１７
と、この重み決定部１７から出力される左信号用重み係
数“ａ₁”に基づき、入力された左信号“Ｓ₁”に重み付
けを行って重み付け済み左信号“ａ₁・Ｓ₁”を生成する
乗算器１８と、重み決定部１７から出力される右信号用
重み係数“ａ₂”に基づき、入力された右信号“Ｓ₂”に
重み付けを行って重み付け済み右信号“ａ₂・Ｓ₂”を生
成する乗算器１９と、この乗算器１９から出力される重
み付け済み右信号“ａ₂・Ｓ₂”と乗算器１８から出力さ
れる重み付け済み左信号“ａ₁・Ｓ₁”とを加算して、重
み付け和信号“ａ₁・Ｓ₁＋ａ₂・Ｓ₂”を求め、これを被
分析信号として出力する加算器２０とを備えている。

【数１】 Ｐ_m1−Ｐ_m2＞Ｐ_th ならば、ａ₁＝１．０、ａ₂＝０ …（３） Ｐ_m1−Ｐ_m2＜Ｐ_th ならば、ａ₁＝０ 、ａ₂＝１．０ …（４） ｜Ｐ_m1−Ｐ_m2｜≦Ｐ_thならば、ａ₁＝０．５、ａ₂＝０．５ …（５） 但し、Ｐ_th：３〜６ｄＢ程度に設定されるパワーしきい
値

【００６７】そして、入力された左信号“Ｓ₁”、右信
号“Ｓ₂”のパワー値“Ｐ₁”、“Ｐ₂”を求めるととも
に、これらの各パワー値“Ｐ₁”、“Ｐ₂”の平均値“Ｐ
_m1”、“Ｐ_m2”と、（３）式〜（５）式とに基づいて、
左信号用重み係数“ａ₁”、右信号用重み係数“ａ₂”を
生成し、さらにこの左信号用重み係数“ａ₁”と、左信
号“Ｓ₁”とを乗算して、重み付け済み左信号“ａ₁・Ｓ
₁”を求めるとともに、右信号用重み係数“ａ₂”と、右
信号“Ｓ₂”とを乗算して、重み付け済み右信号“ａ₂・
Ｓ₂”を求めた後、これら重み付け済み左信号“ａ₁・Ｓ
₁”と、重み付け済み右信号“ａ₂・Ｓ₂”とを加算し
て、重み付け和信号“ａ₁・Ｓ₁＋ａ₂・Ｓ₂”を求め、こ
れを被分析信号として、分析処理部４に供給する。

【００６８】このように、図７に示す被分析信号算出部
３では、左信号“Ｓ₁”、右信号“Ｓ₂”のパワー値“Ｐ
₁”、“Ｐ₂”に応じて、左信号用重み係数“ａ₁”、右
信号用重み係数“ａ₂”を生成するようにしているの
で、音声多重モード信号等の付加情報を使用することな
く、左信号“Ｓ₁”と、右信号“Ｓ₂”との関係に基づい
て、自動的に左信号用重み係数“ａ₁”、右信号用重み
係数“ａ₂”を決定することができる（請求項３、７の
内容）。

【００６９】また、この実施の形態では、（３）式〜
（５）式で示す条件式を使用して、各パワー値
“Ｐ₁”、“Ｐ₂”の平均値“Ｐ_m1”、“Ｐ_m2”から左信
号用重み係数“ａ₁”、右信号用重み係数“ａ₂”を生成
するようにしているが、次式を使用して、平均値
“Ｐ_m1”、“Ｐ_m2”から、左信号用重み係数“ａ₁”、
右信号用重み係数“ａ₂”を生成するようにしても良
い。 ａ₁＝Ｐ_m1／（Ｐ_m1＋Ｐ_m2） …（６） ａ₂＝Ｐ_m2／（Ｐ_m1＋Ｐ_m2） …（７）

【００７０】このようにしても、音声多重モード信号等
の付加情報を使用することなく、左信号“Ｓ₁”と、右
信号“Ｓ₂”との関係に基づいて、自動的に左信号用重
み係数“ａ₁”、右信号用重み係数“ａ₂”を決定するこ
とができる。

【００７１】また、図８に示す被分析信号算出部３は、
入力された左信号“Ｓ₁（ｋ）”、右信号“Ｓ₂（ｋ）”
を取り込んで、所定期間、例えば過去“５００ｍｓ”分
の左信号“Ｓ₁（ｋ）”、右信号“Ｓ₂（ｋ）”［但し、
ｋ＝１、２、…、Ｍ］に基づき、後述する最適相関係数
“Ｒ_N”と最適シフト量“Ｋ₁”、“Ｋ₂”とを求める相
関係数算出部２１と、所定の時間間隔、例えば“５ｍ
ｓ”の間隔で、所定のフレーム幅、例えば“２０ｍｓ”
のフレーム幅で、入力された左信号“Ｓ₁（ｋ）”を切
り出して、自乗和値あるいは自乗平均値“Ｓ² _AVE1”を
算出した後、対数化してデジベル形式のパワー値
“Ｐ₁”を算出するフレームパワー算出部２２と、この
フレームパワー算出部２２から出力されるパワー値“Ｐ
₁”を取り込むとともに、過去１秒間に渡り、これを平
均化して平均値“Ｐ_m1”を求める平均値算出部２３と、
フレームパワー算出部２２と同期して、所定の時間間
隔、例えば“５ｍｓ”の間隔で、所定のフレーム幅、例
えば“２０ｍｓ”のフレーム幅で、入力された右信号
“Ｓ₂（ｋ）”を切り出して、自乗和値あるいは自乗平
均値“Ｓ² _AVE2”を算出した後、対数化してデジベル形
式のパワー値“Ｐ₂”を算出するフレームパワー算出部
２４と、このフレームパワー算出部２４から出力される
パワー値“Ｐ₂”を取り込むとともに、過去１秒間に渡
り、これを平均化して平均値“Ｐ_m2”を求める平均値算
出部２５とを備えている。

【００７２】さらに、この被分析信号算出部３は、平均
値算出部２５から出力される平均値“Ｐ_m2”と平均値算
出部２３から出力される平均値“Ｐ_m1”と相関係数算出
部２１から出力される最適相関係数“Ｒ_N”、最適シフ
ト量“Ｋ₁”、“Ｋ₂”とに基づき、左信号用重み係数
“ａ₁”、右信号用重み係数“ａ₂”を生成する重み決定
部２６と、入力された左信号“Ｓ₁（ｋ）”を取り込む
とともに、重み決定部２６から出力される最適シフト量
“Ｋ₁”だけ、遅延させて出力する遅延器２７と、重み
決定部２６から出力される左信号用重み係数“ａ₁”に
基づき、遅延器２７から出力される左信号“Ｓ₁（ｋ−
Ｋ₁）”に重み付けを行って、重み付け済み左信号“ａ₁
・Ｓ₁（ｋ−Ｋ₁）”を生成する乗算器２８と、入力され
た右信号“Ｓ₂（ｋ）”を取り込むとともに、重み決定
部２６から出力される最適シフト量“Ｋ₂”だけ、遅延
させて出力する遅延器２９と、重み決定部２６から出力
される右信号用重み係数“ａ₂”に基づき、遅延器２９
から出力される右信号“Ｓ₂（ｋ−Ｋ₂）”に重み付けを
行って、重み付け済み右信号“ａ₂・Ｓ₂（ｋ−Ｋ₂）”
を生成する乗算器３０と、この乗算器３０から出力され
る重み付け済み右信号“ａ₂・Ｓ₂（ｋ−Ｋ₂）”と乗算
器２８から出力される重み付け済み左信号“ａ₁・Ｓ
₁（ｋ−Ｋ₁）”とを加算して重み付け和信号“ａ₁・Ｓ₁
（ｋ−Ｋ₁）＋ａ₂・Ｓ₂（ｋ−Ｋ₂）”を求め、これを被
分析信号として出力する加算器３１とを備えている。

【００７３】そして、入力された左信号“Ｓ
₁（ｋ）”、右信号“Ｓ₂（ｋ）”の相関関係を判定し
て、最適相関係数“Ｒ_N”、最適シフト量“Ｋ₁”、“Ｋ
₂”を求めるとともに、左信号“Ｓ₁（ｋ）”、右信号
“Ｓ₂（ｋ）”のパワー値“Ｐ₁”、“Ｐ₂”を求め、こ
れらの各パワー値“Ｐ₁”、“Ｐ₂”の平均値“Ｐ_m1”、
“Ｐ_m2”と、左信号用重み係数“ａ₁”、右信号用重み
係数“ａ₂”を生成し、この左信号用重み係数“ａ₁”
と、最適シフト量“Ｋ₁”で遅延された左信号“Ｓ₁（ｋ
−Ｋ₁）”とを乗算して、重み付け済み左信号“ａ₁・Ｓ
₁（ｋ−Ｋ₁）”を求めるとともに、右信号用重み係数
“ａ₂”と、最適シフト量“Ｋ₂”で遅延された右信号
“Ｓ₂（ｋ−Ｋ₂）”とを乗算して、重み付け済み右信号
“ａ₂・Ｓ₂（ｋ−Ｋ₂）”を求めた後、これら重み付け
済み左信号“ａ₁・Ｓ₁（ｋ−Ｋ₁）”と、重み付け済み
右信号“ａ₂・Ｓ₂（ｋ−Ｋ₂）”とを加算して、重み付
け和信号“ａ₁・Ｓ₁（ｋ−Ｋ₁）＋ａ₂・Ｓ₂（ｋ−
Ｋ₂）”を求め、これを被分析信号として、分析処理部
４に供給する。

【００７４】この場合、相関係数算出部２１では、入力
された左信号“Ｓ₁（ｋ）”、右信号“Ｓ₂（ｋ）”と、
下記に示す（８）式、（９）式とを使用して、平均値
“Ｓ_{A VE1}”、“Ｓ_AVE2”を求め、

【数２】

【００７５】これらの各平均値“Ｓ_AVE1”、“Ｓ_AVE2”
と、下記に示す（１０）式とを使用して、最適相関係数
“Ｒ_N”と、最適シフト量“Ｋ₁”、“Ｋ₂”とを求め、
これを重み決定部２６に供給する。

【数３】

【００７６】この際、処理対象となるチャンネルの数が
左信号“Ｓ₁（ｋ）”、右信号“Ｓ₂（ｋ）”などのよう
に２つであれば、左信号“Ｓ₁（ｋ）”に対する時間的
なシフト量“ｋ₁”を“０”に固定し、右信号“Ｓ
₂（ｋ）”に対する時間的なシフト量“ｋ₂”を、例えば
“−４〜０ｍｓ”に相当する値（例えば、サンプリング
レートが“３２ｋＨｚ”のとき、“−１２８≦ｋ₂≦
０”）の間で変化させて、（１０）式の計算を繰り返
し、相関係数“Ｒ”の最大値を検索する。そして、最大
値となる相関係数“Ｒ”を最適相関係数“Ｒ_N”とし、
この最適相関係数“Ｒ_N”が得られたときのシフト量
“ｋ₁”、“ｋ₂”を最適シフト量“Ｋ₁”、“Ｋ₂”とし
て、重み決定部２６に供給する。

【００７７】そして、この重み決定部２６によって、相
関係数算出部２１から出力される最適シフト量
“Ｋ₁”、“Ｋ₂”を取り込んで、最適シフト量“Ｋ₁”
を遅延器２７に供給するとともに、最適シフト量
“Ｋ₂”を遅延器２９に供給し、さらに下記に示す条件
式に基づき、左信号用重み係数“ａ₁”、右信号用重み
係数“ａ₂”を生成し、左信号用重み係数“ａ₁”を乗算
器２８に供給するとともに、右信号用重み係数“ａ₂”
を乗算器３０に供給する。

【数４】 Ｒ_N≧Ｒ_thが成り立つとき、 ａ₁＝０．５、ａ₂＝０．５ …（１１） Ｒ_N＜Ｒ_thが成り立つとき、 Ｐ_m1≧Ｐ_m2ならば、 ａ₁＝１．０、ａ₂＝０ …（１２） Ｐ_m1＜Ｐ_m2ならば、 ａ₁＝０ 、ａ₂＝１．０ …（１ ３） 但し、Ｒ_th：“０．５〜０．７”程度に設定される相関
係数の判定しきい値

【００７８】このように、この被分析信号算出部３で
は、左信号“Ｓ₁（ｋ）”、右信号“Ｓ₂（ｋ）”の最適
相関係数“Ｒ_N”を求め、この最適相関係数“Ｒ_N”と、
左信号“Ｓ₁（ｋ）”、右信号“Ｓ₂（ｋ）”のパワー値
“Ｐ₁”、“Ｐ₂”とに応じて、左信号用重み係数
“ａ₁”、右信号用重み係数“ａ₂”を生成するようにし
ているので、音声多重モード信号等の付加情報を使用す
ることなく、左信号“Ｓ₁（ｋ）”と、右信号“Ｓ
₂（ｋ）”との相関関係を加味した関係に基づいて、自
動的に左信号用重み係数“ａ₁”、右信号用重み係数
“ａ₂”を決定することができる（請求項４、８の内
容）。

【００７９】以上の実施の形態における各機能部分は、
これらをプログラム化して、ＣＤ−ＲＯＭなどの記録媒
体に書き込んでおき、このＣＤ−ＲＯＭからコンピュー
タにプログラムをロードすることによっても上述した実
施の形態と同様な機能を実現することができる。

【００８０】

【発明の効果】以上説明したように本発明によれば、請
求項１、５、９では、加工音声の音質を高品質に保ちつ
つ、マルチチャンネル音響信号の時間的圧縮・伸張を実
現するとともに、各チャンネル間の信号ズレを無くし、
マルチチャンネル音響信号を再生するとき、水平面内の
音方向定位を保持することができ、さらに各チャンネル
の信号を合成した１つの重み付け和信号に対し、特徴量
抽出処理を行うだけで、各チャンネルの信号を代表した
特徴量を求めることができ、これによって各チャンネル
に対し、個々に特徴量抽出処理を行う場合に比べて、演
算時間、回路規模を小さくして、リアルタイムでの信号
処理が可能となる。

【００８１】また、請求項２、６、１０では、テレビ放
送を受信する際に得られる音声多重モード信号等の付加
情報を利用して、各チャンネルの信号を合成した１つの
重み付け和信号に対して特徴量抽出処理を行うだけで、
各チャンネルの信号を代表した特徴量を求め、これを使
ってマルチチャンネル音響信号をブロック単位に分割す
る際に必要な最適なブロック長を決定することができ、
これによって各チャンネルに対し、個々に特徴量抽出処
理を行う場合に比べて、演算時間、回路規模を小さくし
て、リアルタイムで、加工音声の音質を高品質に保ちつ
つ、マルチチャンネル音響信号の時間的圧縮・伸張を実
現し、また各チャンネル間の信号ズレを無くし、マルチ
チャンネル音響信号を再生するとき、水平面内の音方向
定位を保持することができる。

【００８２】また、請求項３、７、１１では、マルチチ
ャンネル音響信号のパワー値を利用して、音声多重モー
ド等の付加情報を不要にして、各チャンネルの信号を合
成した１つの重み付け和信号に対し、特徴量抽出処理を
行うだけで、各チャンネルの信号を代表した特徴量を求
め、これを使ってマルチチャンネル音響信号をブロック
単位に分割する際に必要な最適なブロック長を決定する
ことができ、これによって各チャンネルに対し、個々に
特徴量抽出処理を行う場合に比べて、演算時間、回路規
模を小さくして、リアルタイムで、加工音声の音質を高
品質に保ちつつ、マルチチャンネル音響信号の時間的圧
縮・伸張を実現し、また各チャンネル間の信号ズレを無
くし、マルチチャンネル音響信号を再生するとき、水平
面内の音方向定位を保持することができる。

【００８３】また、請求項４、８、１２では、マルチチ
ャンネル音響信号の相関関係およびパワー値を利用し
て、音声多重モード等の付加情報を不要にして、各チャ
ンネルの信号を合成した１つの重み付け和信号に対し、
特徴量抽出処理を行うだけで、各チャンネルの信号を代
表した特徴量を求め、これを使ってマルチチャンネル音
響信号をブロック単位に分割する際に必要な最適なブロ
ック長を決定することができ、これによって各チャンネ
ルに対し、個々に特徴量抽出処理を行う場合に比べて、
演算時間、回路規模を小さくして、リアルタイムで、加
工音声の音質を高品質に保ちつつ、マルチチャンネル音
響信号の時間的圧縮・伸張を実現し、また各チャンネル
間の信号ズレを無くし、マルチチャンネル音響信号を再
生するとき、水平面内の音方向定位を保持することがで
きる。

【図面の簡単な説明】

【図１】本発明による信号処理装置および信号処理方法
の実施の形態である信号処理装置の一例を示すブロック
図である。

【図２】図１に示す被分析信号算出部の詳細な回路構成
例を示すブロック図である。

【図３】図１に示すブロック分割部、信号接続部の音声
圧縮動作例を示す模式図である。

【図４】図１に示すブロック分割部、信号接続部の音声
伸張動作例を示す模式図である。

【図５】図１に示す信号接続部の音声圧縮動作例を示す
模式図である。

【図６】図１に示す信号接続部の音声伸張動作例を示す
模式図である。

【図７】本発明による信号処理装置および信号処理方法
の一実施の形態のうち、請求項３、７に対応する信号処
理装置で使用される被分析信号算出部の詳細な回路構成
例を示すブロック図である。

【図８】本発明による信号処理装置および信号処理方法
の一実施の形態のうち、請求項４、８に対応する信号処
理装置で使用される被分析信号算出部の詳細な回路構成
例を示すブロック図である。

【図９】従来から知られている信号処理装置の音声圧縮
・伸張動作例を示す模式図である。

【符号の説明】

１：信号処理装置、２：Ａ／Ｄ変換部、３：被分析信号
算出部、４：分析処理部、５：ブロック分割部、６：接
続順序生成部、７：信号接続部、８：Ｄ／Ａ変換部、
９：重み決定部、１０：乗算器、１１：乗算器、１２：
加算器、１３：フレームパワー算出部、１４：平均値算
出部、１５：フレームパワー算出部、１６：平均値算出
部、１７：重み決定部、１８：乗算器、１９：乗算器、
２０：加算器、２１：相関係数算出部、２２：フレーム
パワー算出部、２３：平均値算出部、２４：フレームパ
ワー算出部、２５：平均値算出部、２６：重み決定部、
２７：遅延器、２８：乗算器、２９：遅延器、３０：乗
算器、３１：加算器。

Claims (12)

(57)【特許請求の範囲】
1. 【請求項１】 マルチチャンネル音響信号に対し、時間
   的な圧縮、伸張を行う信号処理装置において、 前記マルチチャンネル音響信号を構成する各チャンネル
   信号に対し、重み付けを行って加算し、被分析信号を生
   成する被分析信号算出部と、 この被分析信号算出部から出力される被分析信号の特徴
   量に基づき、ブロック長を決定し、この決定内容に基づ
   き、前記各チャンネル信号を分割して各チャンネル毎の
   ブロック信号を生成する分析処理／ブロック分割部と、 入力された圧縮・伸張倍率に応じて、前記分析／ブロッ
   ク分割部から出力される各チャンネル毎のブロック信号
   間の時間的な同期をとりつつ、各ブロック信号に対して
   ブロック単位で間引き処理、繰り返し処理、あるいは複
   数のブロック信号を用いて合成された新たなブロック信
   号の置換、挿入処理を行う接続順序生成／信号接続部
   と、 を備えたことを特徴とする信号処理装置。
2. 【請求項２】 請求項１に記載の信号処理装置におい
   て、 前記被分析信号算出部は、入力された音声多重モード信
   号等の付加情報に応じて、各チャンネル用重み付け係数
   を求め、各チャンネル毎の重み付け係数を用いて、前記
   各チャンネル信号に重み付けを行った後、重み付け処理
   済みの各チャンネル信号を加算して、前記被分析信号を
   生成する、 ことを特徴とする信号処理装置。
3. 【請求項３】 請求項１に記載の信号処理装置におい
   て、 前記被分析信号算出部は、所定のフレーム幅を用いて、
   前記各チャンネル信号のフレームパワーを求めた後、各
   フレームパワーの平均値に基づき、各チャンネル用重み
   付け係数を求め、各チャンネル毎の重み付け係数を用い
   て、前記各チャンネル信号に重み付けを行った後、重み
   付け処理済みの各チャンネル信号を加算して、前記被分
   析信号を生成する、 ことを特徴とする信号処理装置。
4. 【請求項４】 請求項１に記載の信号処理装置におい
   て、 前記被分析信号算出部は、前記各チャンネル信号の相関
   係数を求めるとともに、所定のフレーム幅を用いて、前
   記各チャンネル信号のフレームパワーを求め、前記相関
   係数、前記各フレームパワーの平均値に基づき、各チャ
   ンネル用重み付け係数を求め、各チャンネル毎の重み付
   け係数を用いて、前記各チャンネル信号に重み付けを行
   った後、重み付け処理済みの各チャンネル信号を加算し
   て、前記被分析信号を生成する、 ことを特徴とする信号処理装置。
5. 【請求項５】 マルチチャンネル音響信号に対し、時間
   的な圧縮、伸張を行う信号処理方法において、 前記マルチチャンネル音響信号を構成する各チャンネル
   信号に対し、重み付けを行って加算し、被分析信号を生
   成するとともに、 この被分析信号の特徴量に基づいて得られたブロック長
   を使用して、前記各チャンネル信号を分割し、各チャン
   ネル毎のブロック信号を生成した後、 入力された圧縮・伸張倍率に応じて、前記各チャンネル
   毎のブロック信号間の時間的な同期をとりつつ、各ブロ
   ック信号に対してブロック単位で間引き処理、繰り返し
   処理、あるいは複数のブロック信号を用いて合成された
   新たなブロック信号の置換、挿入処理を行う、 ことを特徴とする信号処理方法。
6. 【請求項６】 請求項５に記載の信号処理方法におい
   て、 前記各チャンネル信号に対し、重み付けを行って加算
   し、被分析信号を生成するとき、入力された音声多重モ
   ード信号等の付加情報に応じて、各チャンネル用重み付
   け係数を求め、各チャンネル毎の重み付け係数を用い
   て、前記各チャンネル信号に重み付けを行った後、重み
   付け処理済みの各チャンネル信号を加算して、前記被分
   析信号を生成する、 ことを特徴とする信号処理方法。
7. 【請求項７】 請求項５に記載の信号処理方法におい
   て、 前記各チャンネル信号に対し、重み付けを行って加算
   し、被分析信号を生成するとき、所定のフレーム幅を用
   いて、前記各チャンネル信号のフレームパワーを求めた
   後、各フレームパワーの平均値に基づき、各チャンネル
   用重み付け係数を求め、各チャンネル毎の重み付け係数
   を用いて、前記各チャンネル信号に重み付けを行った
   後、重み付け処理済みの各チャンネル信号を加算して、
   前記被分析信号を生成する、 ことを特徴とする信号処理方法。
8. 【請求項８】 請求項５に記載の信号処理方法におい
   て、 前記各チャンネル信号に対し、重み付けを行って加算
   し、被分析信号を生成するとき、前記各チャンネル信号
   の相関係数を求めるとともに、所定のフレーム幅を用い
   て、前記各チャンネル信号のフレームパワーを求め、前
   記相関係数、前記各フレームパワーの平均値に基づき、
   各チャンネル用重み付け係数を求め、各チャンネル毎の
   重み付け係数を用いて、前記各チャンネル信号に重み付
   けを行った後、重み付け処理済みの各チャンネル信号を
   加算して、前記被分析信号を生成する、 ことを特徴とする信号処理方法。
9. 【請求項９】 マルチチャンネル音響信号に対し、時間
   的な圧縮、伸張を行う信号処理プログラムを記録した記
   録媒体であって、 前記マルチチャンネル音響信号を構成する各チャンネル
   信号に対し、重み付けを行って加算し、被分析信号を生
   成する被分析信号算出手段、 この被分析信号算出手段から出力される被分析信号の特
   徴量に基づき、ブロック長を決定し、この決定内容に基
   づき、前記各チャンネル信号を分割して各チャンネル毎
   のブロック信号を生成する分析処理／ブロック分割手
   段、 入力された圧縮・伸張倍率に応じて、前記分析／ブロッ
   ク分割手段から出力される各チャンネル毎のブロック信
   号間の時間的な同期をとりつつ、各ブロック信号に対し
   てブロック単位で間引き処理、繰り返し処理、あるいは
   複数のブロック信号を用いて合成された新たなブロック
   信号の置換、挿入処理を行う接続順序生成／信号接続手
   段、 をコンピュータに実現させるための信号処理プログラム
   を記録したコンピュータ読み取り可能な記録媒体
10. 【請求項１０】 請求項９に記載の信号処理プログラム
    を記録したコンピュータ読み取り可能な記録媒体におい
    て、 前記被分析信号算出手段は、入力された音声多重モード
    信号等の付加情報に応じて、各チャンネル用重み付け係
    数を求め、各チャンネル毎の重み付け係数を用いて、前
    記各チャンネル信号に重み付けを行った後、重み付け処
    理済みの各チャンネル信号を加算して、前記被分析信号
    を生成する機能をコンピュータに実現させる、 ことを特徴とする信号処理プログラムを記録したコンピ
    ュータ読み取り可能な記録媒体。
11. 【請求項１１】 請求項９に記載の信号処理プログラム
    を記録したコンピュータ読み取り可能な記録媒体におい
    て、 前記被分析信号算出手段は、所定のフレーム幅を用い
    て、前記各チャンネル信号のフレームパワーを求めた
    後、各フレームパワーの平均値に基づき、各チャンネル
    用重み付け係数を求め、各チャンネル毎の重み付け係数
    を用いて、前記各チャンネル信号に重み付けを行った
    後、重み付け処理済みの各チャンネル信号を加算して、
    前記被分析信号を生成する機能をコンピュータに実現さ
    せる、 ことを特徴とする信号処理プログラムを記録したコンピ
    ュータ読み取り可能な記録媒体。
12. 【請求項１２】 請求項９に記載の信号処理プログラム
    を記録したコンピュータ読み取り可能な記録媒体におい
    て、 前記被分析信号算出手段は、前記各チャンネル信号の相
    関係数を求めるとともに、所定のフレーム幅を用いて、
    前記各チャンネル信号のフレームパワーを求め、前記相
    関係数、前記各フレームパワーの平均値に基づき、各チ
    ャンネル用重み付け係数を求め、各チャンネル毎の重み
    付け係数を用いて、前記各チャンネル信号に重み付けを
    行った後、重み付け処理済みの各チャンネル信号を加算
    して、前記被分析信号を生成する機能をコンピュータに
    実現させる、 ことを特徴とする信号処理プログラムを記録したコンピ
    ュータ読み取り可能な記録媒体。