JPH11168791A

JPH11168791A - 音声源を検出する装置及び方法

Info

Publication number: JPH11168791A
Application number: JP10249875A
Authority: JP
Inventors: Paeivi Valve; バルブパイビ; Juha Haekkinen; ハッキネンユハ
Original assignee: Nokia Mobile Phones Ltd
Current assignee: Nokia Oyj
Priority date: 1997-09-04
Filing date: 1998-09-03
Publication date: 1999-06-22
Anticipated expiration: 2018-09-03
Also published as: EP0901267A2; FI114422B; FI973596A0; EP0901267A3; US6707910B1; FI973596A; DE69840119D1; JP4624503B2; EP0901267B1

Abstract

(57)【要約】本発明の範囲は音声信号を受信するマイクロフォン手段
（２；２ａ，２ｂ，２Ｍ）と、受信した音声信号から音
声を検出するための検出手段とからなる音声源を検出す
る装置である。この装置は受信した信号の到達方向を判
定する手段（１５，１７）と、ある特定の源の音声の推
定された到達方向を記憶する手段（１７）と、前記受信
した信号の到達方向と前記推定された到達方向とを比較
する手段（１８）とを備えている。この装置は更に、前
記比較によって前記受信した信号の到達方向が前記推定
された到達方向とある許容差の範囲内で一致することが
判明した場合には、前記音声源が前記ある特定の源であ
ることを表示する手段（１８）とを備えている。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は音声信号を受信する
ためのマイクロフォン手段と、受信した音声信号内の音
声を検出する検出手段とを備えてなる音声源検出方法と
検出装置に関する。

【０００２】

【従来の技術】電話での会話はエコーによって妨害され
ることが多い。これは特に、以下の異なる４通りの、す
なわち、アイドル、近端（ｎｅａｒ−ｅｎｄ）通話、遠
端（ｆａｒ−ｅｎｄ）通話、およびダブルトーク（ｄｏ
ｕｂｌｅ−ｔａｌｋ）の通話状態を有する全二重電話の
場合である。エコーは通常は、通話が遠端から入り、受
信した遠端信号がスピーカで再生され、マイクロフォン
を介して遠端に戻される場合に発生する。エコー問題は
特に、スピーカが高音量の音声を周囲に対して再生し、
そのようにしてスピーカからの音声がマイクロフォンに
容易に戻されるようなハンドフリーの通話方法で発生す
る。

【０００３】エコーを除去するために適応化された信号
処理が採用される。ハンドフリーの移動電話の応用例で
は、公知のエコーキャンセラおよびエコー抑制器を使用
して、スピーカからマイクロフォンへの妨害が多い音響
フィードバック、すなわち音響エコーを有効に除去する
ことが可能である。エコーキャンセラは、出信号からの
エコー信号、すなわち受信側に遠端信号が存在する場合
に、通常は遠端から来た信号を抑制する適応ディジタル
・フィルタを利用して実施することができる。このよう
にして、遠端信号が遠端に戻ることを防止するための努
力がなされている。適応フィルタの各パラメータは通常
は、何らかの状況の条件をできる限り正確に考慮に入れ
るために、遠端通話が生じた時に常に更新される。エコ
ー抑制器については、送信される近端信号を減衰するた
めに使用される。

【０００４】近端通話と遠端通話が同時に生ずるような
状況はダブルトーク状況と呼ばれている。ダブルトーク
中、エコーキャンセラはエコー信号を有効に除去するこ
とができない。その理由は、エコー信号は送信される近
端信号内で加算され、その場合、エコーキャンセラは除
去されるべきエコー信号の正確なモデルを形成できない
からである。このような場合、エコーキャンセラの適応
フィルタはスピーカとマイクロフォンとの間の空間の音
響応答に適正に適応することができず、従って、近端通
話信号が存在する場合は、送信される信号から音響エコ
ーを除去することができない。そのため、エコーキャン
セラに対するダブルトークの妨害作用を除去するため
に、ダブルトーク検出器が使用されることが多い。通常
は、ダブルトーク状況は遠端通話と同時に近端通話が存
在しているか否かを検出することによって検知される。
ダブルトーク中、エコーキャンセラの適応フィルタの各
パラメータは更新されないが、適応フィルタの更新は近
端の人が通話している間は中断されなければならない。
エコー抑制器はまた、近端の人が通話している間に送信
される信号を不適切に（過度に）減衰しないように、近
端の通話者の通話活性に関する情報が必要である。

【０００５】ＧＭＳ移動電話で使用される割り込み可能
な送信にはエコーキャンセリングおよび抑制に加えて、
近端通話活性に関する情報が必要である。割り込み可能
な送信の概念とは、通話活動中だけに通話信号を送信す
ること、すなわち、近端の通話者が休止している間は、
電力を節減するために近端信号は送信されないというこ
とである。割り込み可能な送信に起因するバックグラウ
ンドノイズ・レベルが過度に変動することを避けるた
め、アイドル状態である種の快適なノイズを送信し、し
かも送信中に必要なビットを節減することが可能であ
る。そのために、ＧＳＭの割り込み可能な送信によって
送信される通話の音質を低下させないようにするため、
近端通話活性は正確、迅速かつ確実に検知されなければ
ならない。

【０００６】図１はエコーキャンセリングおよびダブル
トーク検出のための従来から公知の構成１を示してい
る。近端信号３はマイクロフォン２から届き、近端通話
活性検出器４，ＶＡＤ（音声活性検出器）を用いてそれ
が検出される。遠端信号５は入力接続部Ｉから届き（こ
れはハンドフリーの装置では入力コネクタ、定置電話の
場合はワイヤ・コネクタ、および移動電話の場合はアン
テナから電話の受信ブランチへの経路でよい）、遠端通
話活性検出器６，ＶＡＤ内で検出され、最後にスピーカ
７で再生される。近端信号３と遠端信号５は双方ともダ
ブルトークを検出するためのダブルトーク検出器８と、
エコー経路１３の音響応答に適応するための適応フィル
タ９とに送られる。ダブルトーク中にフィルタに適応し
ないため（パラメタが更新されないため）に、適応フィ
ルタ９は入力としてダブルトーク検出器８の出力をも受
ける。エコーキャンセリングを行うために、適応フィル
タによって形成されるモデル１０は加算／減算装置１１
で近端信号３から減算される。（ハンドフリーの装置で
は出力コネクタ、定置電話ではワイヤ・コネクタ、およ
び移動電話では送信ブランチからアンテナへの経路でよ
い）出力接続部Ｏには、エコーキャンセラ出力信号１２
が送られ、そこからエコー（のある部分）は既にキャン
セルされている。図１に示したエコーキャンセラを（例
えばハンドフリーのスピーカ呼出し用にスピーカとマイ
クロフォンとからなる）電話に統合してもよく、又は別
個のハンドフリー装置で実施することもできる。

【０００７】ダブルトークを検出するための方法は幾つ
か提案されている。しかし、それらの多くは極めて単純
であり、一部は信頼性に欠ける。ほとんどのダブルトー
ク検出器はスピーカ信号及び／又はマイクロフォン信号
及び／又はエコーキャンセラの後の信号相互間のパワー
比に基づいている。これらの検出器の利点は簡略さと迅
速さであり、それらの欠点は信頼性に欠けることであ
る。

【０００８】スピーカ信号及び／又はマイクロフォン信
号及び／又はエコーキャンセラの後の信号相互間を相関
させることに基づく検出器も公知である。これらの検出
器は、スピーカおよびマイクロフォン内の単なるエコー
信号（エコーキャンセラを経た後の信号）が強く相関さ
れるという構想に基づくものであるが、近端信号がマイ
クロフォン信号に加算されると相関関係は低減する。こ
れらの検出器の欠点は検出速度が遅いこと、近端信号と
遠端信号との（一部は正しくない）非相関関係が想定さ
れること、エコー経路に起因するスピーカ信号に変化の
影響があること、近端信号がない場合でも相関関係が低
下することである。

【０００９】また同じ信号の自動相関の比較に基づくダ
ブルトーク検出器も公知であり、この場合は検出器が近
端信号内の音声を認識し、ひいては近端信号の存在を検
出することができる。このような検出器の計算に要する
パワーは少ないが、検出器が相関に基づいているので上
記と同じ問題点が生ずる。

【００１０】ＫｕｏＳ．Ｍ., ＰａｎＺ．著の文献
「大規模ビデオ会議用の音響エコーを消去するマイクロ
フォン・システム」ＩＣＳＰＡＴ’９４会報、１９９４
年刊、７−１２ページでは、ノイズおよび音響エコーを
除去し、冒頭に述べた異なる通話状況を認識するための
反対方向に向けられた２個のマイクロフォンを使用して
いる。しかし、上記の方法は単にエコーキャンセラの出
力パワーによってのみ実施されるダブルトークの認識に
特別の改善をもたらすものではない。

【００１１】ＡｆｆｅｓＳ., ＧｒｅｎｉｅｒＹ．
著の文献「ダブルトーク状況のためのマイクロフォンの
音源サブスペース・トラッキングアレイ」，ＩＣＳＰＡ
Ｔ’９６会報，第２巻，１９９６年刊，９０９−９１２
ページでは、マイクロフォン・ベクトル構造のエコーお
よびバックグラウンドノイズキャンセラが提案されてい
る。提案されているエコーキャンセラは所望の方向から
到達する信号を保持しつつ、空間的に選択された方向か
ら到達する信号を濾波するものである。上記のエコーキ
ャンセラはダブルトーク状況の間も動作することができ
る。しかし、上記の文献は（マイクロフォン・ベクトル
とも呼ばれる）多重マイクロフォンによる解決方法を利
用した近端通話活性の検出も、ダブルトーク検出も提示
していない。

【００１２】

【発明が解決しようとする課題】ここに近端通話活性を
検出し、かつダブルトーク状況を認識するための方法と
装置の発明がなされた。

【００１３】

【課題を解決するための手段】本発明は近端通話信号が
到達する方向に基づいてその信号を検出する構想に基づ
いている。スピーカ信号が近端の通話者の通話信号の方
向とは明確に異なる方向から到達するハンドフリーの応
用例では、近端通話信号をその到達角度に基づいてスピ
ーカ信号と区別することができる。本発明では、異なる
方向及び／又は異なる地点からの音声をピックアップす
る幾つかのマイクロフォン（マイクロフォン・ベクト
ル）を利用して検出が行われる。

【００１４】マイクロフォン・ベクトルの出力は先ず帯
域フィルタにかけられて狭帯域信号にされ、濾波された
信号によって形成される信号マトリクス上で到達方向の
角度が推定される。この推定によって空間スペクトルが
復元され、そこからスペクトル内に生ずるピークに基づ
いて到達方向のトラッキングが行われる。近端通話信号
の到達方向とスピーカ信号の到達方向とは得られた（判
明した）到達方向に基づいて更新される。到達方向のこ
れらの推定値によって最終的なＶＡＤの決定がより容易
になる。到達方向推定装置が近端通話信号の推定到達方
向に充分に近い到達方向に充分に強いスペクトル・ピー
クを検出すると、近端通話者は通話しているものと見な
される。すなわち近端通話活性を検出することができ
る。

【００１５】ダブルトークの判定には、近端通話活性に
加えて、遠端通話活性に関する情報が必要である。この
情報は、例えばパワーレベルに基づく音声活性検出器の
ような公知の音声活性検出器を用いて検出することがで
きる。

【００１６】本発明による装置は、受信した信号の到達
方向を判定する手段と、ある特定の源の音声の推定され
た到達方向を記憶する手段と、前記受信した信号の到達
方向と前記推定された到達方向とを比較する手段と、前
記比較によって前記受信した信号の到達方向が前記推定
された到達方向とある許容差の範囲内で一致した場合に
は、前記音声が前記ある特定の源で発生されたことを表
示する手段とを備えてなることを特徴としている。

【００１７】

【発明の実施の形態】次に本発明を図面を参照して詳細
に説明する。

【００１８】図２は近端音声活性を検出し、かつダブル
トークを認識するための、本発明による検出器のブロッ
ク図を示している。本発明ではマイクロフォン２として
幾つかのマイクロフォン２ａ，２ｂ，．．．，２Ｍが使
用され、それらのマイクロフォンは好適にはいわゆるマ
イクロフォン・ベクトル２として接続されている。ベク
トルは少なくとも２個のマイクロフォンを有している
が、３個または４個またはそれ以上であることが好適で
ある。各マイクロフォンは単一の信号３ａ，３
ｂ，．．．，３Ｍを発生し、Ｍ個のマイクロフォン（Ｍ
は整数）が使用される場合、時間領域内で変化可能なＭ
個の信号が得られ、これらが時間領域内で変化可能なＭ
個の要素からなる１つの信号ベクトルを形成する。

【００１９】マイクロフォン・ベクトル２の出力３ａ，
３ｂ，．．．，３Ｍは先ず帯域フィルタ１４内で帯域濾
波されて狭帯域信号１９ａ，１９ｂ，．．．，１９Ｍに
される。超分解能のスペクトルの正確な推定方法は狭帯
域信号にのみ作用するので、方向角度の推定のために帯
域濾波が行われる。帯域濾波は例えば急速フーリエ変換
（ＦＦＴ）、ウインドゥイング及びインタリービングを
利用して実現することができる。帯域フィルタの周波数
範囲はマイクロフォン・ベクトル内の各マイクロフォン
間の距離に基づいて判定される。ナイキスト・サンプリ
ング理論に従って、空間サンプリング周波数は信号の空
間周波数の少なくとも２倍でなければならないので、帯
域フィルタ１４の帯域周波数（ポイント周波数）として
下記が得られる：ｆ＝Ｃ／２ｄ，但し、Ｃは空中での音
の速度（２０℃で３４３ｍ／ｓ）であり、ｄは各マイク
ロフォン間の距離である。

【００２０】濾波された信号１９ａ，１９ｂ，．．．，
１９Ｍによって形成される信号マトリクス上の方向角度
（すなわち到達方向）の推定は、例えばＭＵＳＩＣ（多
重信号分類（Multiple Signal Classification））のよ
うなある種の公知の推定方法を利用して推定装置１５で
行われる。

【００２１】この推定方法は空間スペクトルを復元し、
そこからスペクトル内に生ずるピークに基づいて信号の
到達方向が判定される。図３はそのようなマイクロフォ
ン・ベクトル信号の空間スペクトルの例を示している。
到達方向は例えばスペクトル曲線の微分係数を吟味する
ことによって図３に示したスペクトル図から判定するこ
とができる。微分係数のそのようなゼロ点は到達方向と
して復元される。ゼロ点では微分係数は正から負に変化
し、それは公知のように、曲線内の各ピーク位置を示
す。このように図３では、２つの信号がマイクロフォン
・ベクトルに到達する。すなわち１つは１０°の方向か
ら、またはもう１つは４０°の方向からの信号である。
更に、到達方向であると見なされるスペクトル・ピーク
がある特定の最小振幅（例えば５ｄＢ）を有することを
要求できる。図面では、スペクトルの有効範囲（カバレ
ージ）は９０°として示されている。実際には、±９０
°の範囲で検出することができる。微分係数の計算と、
振幅の最小条件が満たされているか否かのチェックは好
適には、ディジタル信号プロセッサを利用して（プログ
ラミングによって）実施されなければならない。推定装
置１５はその出力として信号の到達方向１６を付与（推
定）する。

【００２２】近端通話信号３とスピーカ信号５の推定到
達方向は得られた（判明した）到達方向に基づいてブロ
ック１７で更新される。可能性がある到達方向はスペク
トル・ピークから得られた到達方向を平均化することに
よって評価される。どの方向から信号が到達したのかが
ほぼ判明した場合は、その時点で空間スペクトルに生ず
るエラー・ピークの影響を最小限にすることができる。
エラー・ピークが推定到達方向で生じない限り、それが
注記されることはない。図４は車内での通常のハンドフ
リー装置のマイクロフォン２とスピーカ７の配置を示し
ており、スピーカは通常は０°±４０°の方向でむしろ
マイクロフォン・ベクトル２の直前にある。スピーカの
位置はマイクロフォン・ベクトルに対して大幅に変更し
てもよい。マイクロフォン・ベクトル２のマイクロフォ
ン２ａ，２ｂ，．．．，２Ｍは互いにある特定の方向に
ある特定の距離を隔てて配置される。距離と方向は以下
に説明する到達方向推定アルゴリズムによって判定され
なければならない。以下に、信号源位置、方向判定ブロ
ック１７で実行される遠端と近端の双方の到達方向の平
均化についてより詳細に説明する。

【００２３】遠端到達方向の推定はスペクトル推定装置
１５から得られる到達角度１６の平均化に基づいて行わ
れる。平均化は、遠端に通話がある場合にのみ行われ、
これはその出力が判定ブロック１７に送られる遠端ＶＡ
Ｄ６の出力を用いて判定される。平均化は好適には例え
ばＩＩＲ−濾波を用いて時間領域内で実行される。異な
る方向から到達する２つの信号源、すなわち近端信号３
と遠端信号５が存在するということが基本的に想定され
ている。更に、前記信号の到達方向は実行される観測の
頻度と比較して比較的ゆっくりと変化すると想定されて
いる。スペクトル推定装置１５がその出力として到達方
向ベクトルｄｏａ（度での）を発すると、遠端到達方向
ベクトルの推定値ｆｄｏａ（度での）は平均化によっ
て、各々の新たな方向推定値が最も近いｆｄｏａの成分
に影響を及ぼすように更新される。更新には、関連する
成分に近いほど検出された方向がｆｄｏａ成分を更新す
るように重み付けが行われる。スピーカ信号の方向及び
それによってスペクトル内に誘発される残響（ｒｅｖｅ
ｒｂｅｒａｔｉｏｎ）信号の方向は極めて僅かしか変化
せず、その場合、上記の重み付けによってスペクトル内
の偶発的な、エラー・ピークの影響が低減される。同時
に問題のｆｄｏａ成分が発生する確率、ｐｄｏａは、当
該の方向推定値に新たな値が近いければ近いほど更新さ
れる。加えて、当該のｆｄｏａ成分の強さ、ｐｏｗｄｏ
ａは、それに対応するスペクトル・ピークのパワーに基
づいて更新される。この場合、遠端到達方向推定ベクト
ルｆｄｏａは（Ｍ−１）個の信号の到達角度の方向を有
する。成分ｐｄｏａは、範囲〔０，１〕での対応する到
達方向の確率と、ｐｏｗｄｏａに対応する範囲〔０，
１〕での標準化された強度からなっている。

【００２４】ここで、遠端信号５の到達方向はそれに対
応する確率と強度が最高であり、一方、最後に判定され
た遠端信号到達方向に最も近い遠端到達方向ベクトル推
定値ｆｄｏａの成分であるものと想定することができ
る。推定は通話が遠端に存在する場合にのみ更新される
ので、近端信号３（この場合はダブルトーク）が時間の
５０％未満で発生するものと想定することができる。従
って基本的に想定されることは、ダブルトークが遠端通
話活性時間の半分未満で発生するということである。遠
端信号到達方向（スピーカの方向）は、到達方向に対応
するスペクトル・ピークのパワーに基づいて残響される
スピーカ信号の到達方向から分離されうる。マイクロフ
ォンに直接到達する信号によって通常は残響経路で減衰
される信号よりも強いピークが空間スペクトル内に生ず
る。

【００２５】以下は図７を参照した到達方向を推定する
アルゴリズムの説明である。段階１００では、以下を判
定することからなる初期化が行われる。ｆｄｏａ，ｐｄ
ｏａ及びｐｏｗｄｏａが（Ｍ−１）個の成分を含んでい
る。ｄｏａがＬ個の成分（１≦Ｌ≦Ｍ−１）を含んでい
る。ｆｄｏａ成分が異なる値を用いて初期化される。ｆｄｏａ（ｎ）＝−９０＋ｎ^*１８０／Ｍ；（１≦ｎ≦
Ｍ−１）

【００２６】段階１０１：検出された到達方向（ｄｏ
ａ）に対応して以下のように推定値（ｆｄｏａの各成
分）をトラッキングする。各推定値からの各到達方向の
距離を計算する。距離が最短の推定値ｄｏａ（ｉ）及び
それに対応する最も近い推定値ｆｄｏａ（ｎ）を選択す
る。

【００２７】段階１０２：到達方向ｄｏａ（ｉ）の推定
値にどれだけ近いかに応じて推定値ｆｄｏａ（ｎ）を更
新する。近ければ近いほど、検出された方向は推定値を
変更する。すなわち、ｆｄｏａ（ｎ）＝α₀ ^*ｆｄｏａ
（ｎ）＋（１−α₀) ^*ｄｏａ（ｉ），但しα₀は例え
ば距離の一次関数、または指数関数である（一次（線
形）の依存性については図５を参照）。更新係数α₀及
び距離ｄの上限と下限、α₀＿ｍａｘ，α ₀ ｍｉｎ及
びｄｍａｘ，ｄｍｉｎを調整することによって、更
新の迅速さだけではなく、どの距離に位置するピークが
推定値に影響を与えるかにも影響を及ぼすことができ
る。例えば、距離の最大値が４０°に保たれ（ｄｍｉ
ｎ＝０°，ｄｍａｘ＝４０°）、更新係数の最大値が
１に保たれている場合（α ₀ ｍｉｎ＝０．９９，α ₀
ｍａｘ＝１．０）、４０°以上遠いスペクトル・エラー
のピーク値は推定値を更新せず、ひいてはエラーを全く
誘発しない。このようにして、推定値に及ぼす上記の偽
信号の影響を除去することが可能である。

【００２８】段階１０３：再び到達方向が推定値にどの
程度近いかに応じて推定値の発生の確率、ｐｄｏａを高
める。以下では、距離の関数は一次関数であるものと想
定されている。例えば指数関数のようなその他の関数で
も可能である。ｐｄｏａ（ｎ）＝α₁ ^*ｐｄｏａ（ｎ）＋（１−α₁)
（１−ｄｉｓｔ／１８０）但し、α₁は例えば０．９であり、ｄｉｓｔは〔０，１
８０〕の範囲内での観測値と推定値との間の距離であ
る。

【００２９】段階１０４：以下のように検出されたスペ
クトル・ピークのパワーを用いて推定値のパワーｐｏｗ
ｄｏａをも更新する。ｐｏｗｄｏａ（ｎ）＝α₃ ^*ｐｏｗｄｏａ（ｎ）＋（１
−α₃) ^*Ｐｏｗ／Ｐｏｗｍａｘ但し、α₃は例えば０．９であり、Ｐｏｗはスペクトル
・ピークのパワーであり、Ｐｏｗｍａｘは最大のパワー
である。

【００３０】段階１０５では、その他の到達方向と推定
値を見出しうるか否かが判定され、イエスである場合は
残りの到達方向と推定値のペアについて段階１０１−１
０４を繰り返す。段階１０６：例えばｄｉｓｔ＝１８０及びＰｏｗ＝０に
設定することによって、到達方向が検出されなかった推
定値の発生頻度とパワーを低減する。

【００３１】その後、段階１０７で、例えば以下の式を
最大にすることによって、スピーカの方向に関して、そ
の方向が最大の発生確率とパワーを有し、かつスピーカ
の方向の最新の評定値に最も近い推定値の方向を選択す
る。ａ^*ｐｄｏａ（ｋ）＋ｂ^*ｐｏｗｄｏａ（ｋ）＋ｃ^*ｄｉｓｔａｎｃｅ（ｋ）；Ｋ＝１．．．Ｍ−１，（１）但し、ａ，ｂおよびｃは重み付け係数、例えば１／３で
あり、ｄｉｓｔａｎｃｅ（ｋ）は推定値ｆｄｏａ（ｋ）
とそれまで（以前に）評定されたスピーカの方向との間
の「度」で表した距離である。

【００３２】これまで遠端通話信号の到達方向の推定に
ついて説明してきた。以下に近端通話信号の到達方向の
推定について説明する。近端信号の到達方向の推定は上
記に説明した手順とアルゴリズムに従って行われ、従っ
て近端の到達方向の推定値ｎｄｏａは上記アルゴリズム
でｆｄｏａをｎｄｏａと置き換えることによって得られ
る。遠端通話活性検出器６が、遠端から到達する通話が
ないことを表示した場合に推定は行われる。推定装置１
５内でこのスペクトルを検出する場合、予期されるピー
ク（到達角度の方向）がないか、又は近端信号及び／又
は偽信号及び残響の方向に従って１から（Ｍ−１）個の
ピークがある。近端の通話者の方向として、前述のよう
に最も頻繁に反復され、かつ最も強力である空間スペク
トルによって示される方向が選択される。更に、近端の
通話者はマイクロフォン・ベクトルに対して約０°±３
０°の方向に座っているものと想定され、その場合、近
端の通話者の方向推定値の初期値を０°と設定でき、方
向の選択に際してはそれまでに（以前に）評定された方
向が強力に重み付けされることができる。

【００３３】これらの想定された到達方向値ｆｄｏａ，
ｎｄｏａは最終的な検出を行う検出ブロック１８に採り
入れられる。そのピークが近端通話信号の想定到達方向
に充分に近い到達方向での充分に強いスペクトル・ピー
クを到達方向推定装置１５が検出すると、近端の通話者
が通話していることが判明する。すなわち、近端通話活
性が検出される。この比較はブロック１５及び１７から
到達する信号に基づいて検出器１８で行われる。近端通
話活性の最終的な決定は、スペクトル・ピーク及び到達
方向の推定（平均化）を利用して行われる。いずれかの
スペクトル・ピークが遠端の推定値よりも近端の到達方
向の推定値（又はその残響の推定値）に近く、更に所定
のエラー許容差よりも近端推定値に近い場合は、近端に
通話が存在することが検出される。許容差の値は例えば
１０度である。

【００３４】ダブルトークの判定には、近端通話活性に
加えて、遠端通話活性に関する情報が必要である。この
情報は遠端通話活性検出器６からダブルトーク検出器１
８へと送られ、このようにしてこの検出器１８は、（前
述の）近端通話活性検出器が通話を検出し、かつ遠端通
話活性検出器６が同時に通話を検出すると、ダブルトー
ク状況を検出する。遠端信号に関する限り、通話活性の
検出にはどのＶＡＤアルゴリズムを用いてもよい。ダブ
ルトークの結果は、近端および遠端通話活性の値につい
ての簡単なＡＮＤ演算、すなわち、１（通話中）及び０
（非通話中）を用いて得られる。

【００３５】以下に、図２を参照して、過渡状態（遷
移）検出器ＴＤの機能を説明する。この検出器は本発明
による通話活性検出器／ダブルトーク検出器ではオプシ
ョンであり、従って図面では点線を用いて示してある。
到達方向の推定は狭帯域信号で行われるので、急激な近
端信号の変化（過渡状態）の検出は困難である。そのた
め、過渡状態の検出用に最適化された並列の検出器ＴＤ
を使用することが可能である。各々の過渡位置が検出さ
れた後、判定の正確さをチェックするために到達方向検
出器が使用される。本発明による検出器が例えば２０ｍ
ｓ未満の充分に急激な信号変化を検出するならば、過渡
状態検出器ＴＤを使用する必要はない。

【００３６】原則的に、過渡状態検出器として通常のＶ
ＡＤを使用することができる。しかし、多重マイクロフ
ォン構造によってある特定の到達方向角度を減衰させる
ことが可能であるので、推定されたスピーカ信号の方向
が減衰されるような態様で過渡状態検出器ＴＤを実現す
ることができる。この場合、検出された過渡状態が近端
信号に結びついている確率が高くなる。スピーカ方向で
の減衰は多くの異なる方法で実現できる。最も容易な方
法は２個の適応性マイクロフォン構造を使用することで
ある。原則的に、これらの２個のマイクロフォンとし
て、例えば互いに最も遠く離れたマイクロフォンのよう
な、マイクロフォン・ベクトル２のマイクロフォン２
ａ，２ｂ，．．．，２Ｍのうちの任意の２個を使用する
ことができる。減衰を実現するためには、２個のマイク
ロフォン信号があれば充分である。到達方向推定装置の
判定を利用して適応化が制御される場合（すなわち、遠
端信号だけがある場合だけ適応化が行われる）、所望の
方向での減衰が得られる。（例えば１ＫＨｚ−２ＫＨｚ
のような）ある特定の周波数範囲で検出が行われれば、
適応はより容易になる。過渡状態検出器内で、例えばＦ
ＦＴ又は帯域フィルタを使用して、マイクロフォンから
得られる信号に対して直接周波数分割を実施することが
できる。

【００３７】実際の過渡状態検出器ＴＤは瞬間ｎにおけ
る信号の瞬間パワーＰ（ｎ）をノイズ推定値Ｎ（ｎ）と
比較する。但し、Ｐ（ｎ）はマイクロフォン信号のパワ
ー（又はスピーカ信号の方向が減衰されたマイクロフォ
ン信号のパワー）であり、ノイズ推定値Ｎ（ｎ）はその
以前の値を用いて平均化され、通話が全くない場合には
システム全体の判定によって制御される、対応するパワ
ーである。通話がない瞬間に関する情報はブロック１８
から過渡状態検出器ＴＤへと取り出すことができる（点
線の矢印）。関連する値Ｐ（ｎ）及びＮ（ｎ）はマイク
ロフォンから到達する信号に基づいて過渡状態検出器を
用いて計算することができる。（信号出力値Ｐ（ｎ）と
Ｎ（ｎ）の計算方法は公知であり、例えばＩＩＲ（無限
インパルス応答）フィルタを用いて過渡状態検出器ＴＤ
内で実行できる。その差が充分に大きい場合は、過渡状
態が検出されたものと判定される。ノイズ推定値Ｎ
（ｎ）を更新するには反復的平均化、Ｎ（ｎ＋１）＝α
Ｎ（ｎ）＋（１−α）Ｐ（ｎ）が用いられる。但しαは
平均化を制御する時定数（一般的には約０．９）であ
る。

【００３８】過渡状態検出器は本発明による空間検出器
の機能を補足するものである。過渡状態検出器ＴＤで近
端の通話そのものを検出することも可能であるが、確実
な検出は到達方向推定装置１５による方向判定によって
得られる。単なるエコー源（近端信号ではない）での正
しくない過渡状態の検出は到達方向推定装置１５での方
向によって修正することができる。方向の減衰が充分に
有効に動作するならば、近端通話中にエコーによって誘
発される過渡状態に留意する必要はない。エコー中に開
始される近端通話は再び明確な過渡状態として検出する
ことができ、その結果を到達方向検出器を用いてチェッ
クすることができる。過渡状態検出器ＴＤの出力はブロ
ック１８に採り入れられる（点線）。

【００３９】近端通話活性とダブルトークはまた到達方
向推定装置１５の出力に基づいて統計的パターン認識ア
プローチによっても判定することができる。このアプロ
ーチによれば、到達方向（ＤＯＡ）角度推定に基づく通
話活性の検出は、統計的情報を利用して改良することが
できよう。ニューラル・ネットワークおよびヒドン・マ
ルコフ・モデル（ＨＭＭ）のようなパターン認識技術は
これまで多くの類似の課題に適用されて成果が上げられ
ている。パターン認識方法の強みはトレーニングが可能
なことである。充分な量のトレーニング・データが与え
られると、システムの各々の状態（近端通話、遠端通
話、ダブルトーク、無音）に対するモデルを推定するこ
とができる。次にこれらのモデルを利用して、システム
の状態を最適に検出することができる。検出プロセスは
モデリングの想定が適正である場合に限り最適であるこ
とは言うまでもない。

【００４０】以下に、ＨＭＭを多重マイクロフォン通話
活性の検出に利用する態様を概略的に説明する。システ
ムへの入力は依然として空間スペクトルから導出される
ので、信号（単数または複数）のＤＯＡ角度は依然とし
て本発明に基づく決定的な要因である。その上、上記に
説明した過渡状態検出部品（基準ＴＤ）をこれまでと同
様に利用することができる。

【００４１】ＨＭＭを利用したパターン認識の第１のス
テップはモデル・ネットワークを規定することである。
前述したように、全二重電話システムには４つの状態
（モデル）、すなわち近端通話、遠端通話、ダブルトー
ク、無音がある。各モデルは多重状態ＨＭＭでモデリン
グすることができるが、出発点としては単一状態のＨＭ
Ｍを使用できる。その他の改良の可能性としては、各状
態間での発振を防止するため、各状態上での最小限の強
制期間を使用することがある。

【００４２】理論上は、過渡状態は任意の２つのモデル
間に生じ得るが、実際には、無音とダブルトークモデル
との間、及び近端モデルと遠端モデルとの間の直接的な
過渡状態は無視することができるので、実際の過渡状態
は図８に示したとおりである。

【００４３】モデル構造が定義されると、どのような種
類の確率分布を用いるかを決定しなければならない。音
声認識の標準的なアプローチはガウス確率密度関数（ｐ
ｄｆ）によって各状態をモデリングすることであり、こ
れは本実施例においても好ましい出発点である。その代
わりに任意のｐｄｆを用いることもできよう。モデルｐ
ｄｆのトレーニングは図９に示すような（システムが所
定の瞬間にどの状態にあるかを知ることができる）ラベ
ルを付されたトレーニング・データから公算が最も高い
パラメータを推定することによって理想的に行われる。
代替方法としては、ある特定の基本モデルから出発し、
非監視トレーニング（ｕｎｓｕｐｅｒｖｉｓｅｄｔｒ
ａｉｎｉｎｇ）と呼ばれるオンラインにシステムを適応
させる方法がある。再び音声認識に言及すると、これに
適用できるオンライン通話者適応技術が幾つかある。要
約すると、現行のデータを用いて、最大の公算を生ずる
状態が最大の重み付けで適応される。適応データが多い
ほど、更新に際してより多くの重み付けが加えられる。
非監視トレーニングの明確な問題点は、分類ミスの場合
に正しくないモデルを適応する危険があることである。
初期パラメタを少数の監視トレーニング・サンプルで推
定することができれば、適応がより良好に行われる公算
が高くなる。更に、遠端チャネル（スピーカ）が残りの
チャネルから分離され、この情報を利用することができ
る。遠端活性がある場合は、遠端及びダブルトークモデ
ルだけを適応することができ、以下同様である。

【００４４】実際の検出（認識）は極めて簡単である。
公算が最も高いモデルを随時選択するだけである。勿
論、遠端通話活性のような追加情報を利用して、検出性
能を更に高めることができる。この代替アプローチの論
理的な改良方法は、幾つかの状態でＨＭＭを利用するこ
とである。例えば、各システム状態を表すＨＭＭは３つ
の状態からなっている。すなわち、モデルへの過渡状
態、モデルの静止部分を表す状態、及びモデルから外れ
る過渡状態である。また、ｐｄｆモデリングの精度を高
めるためにガウスｐｄｆｓを併用することもできよう。

【００４５】本発明による検出器を車内のハンドフリー
の用途に使用する場合、信号の最終の残響の方向を考慮
に入れるような方法で過渡状態検出器を変更することが
できる。そのような場合は、過渡状態の検出はスピーカ
の１つの推定到達方向ではなく、スピーカの幾つかの推
定到達方向を減衰させることによって改良することがで
きる。

【００４６】本発明による空間通話活性検出器の従来の
方法と比較した利点は、ダブルトーク状況と近端通話活
性の双方を認識することができること、その迅速さ及び
信頼性にある。通話信号の到達方向に基づく本発明の検
出器はその主要な特徴によって極めて信頼性が高い。各
通話信号のパワーレベル間の相違は結果に大きな影響を
及ぼさないが、検出器はスピーカ信号よりもパワーが大
幅に低い近端通話信号をも認識する。それに加えて、決
定の結果は適応性エコーキャンセラの動作のような、別
個の装置の動作による影響を受けない。ダブルトーク検
出器では、通話信号及び周囲のノイズレベルに応じたし
きい値レベルがしばしば存在し、そのしきい値レベルに
基づいてダブルトーク状況があるか否かが判定される。
この検出器のパラメータは主要部分では一定であり、従
って上記のような問題点は存在しない。オプションの過
渡状態検出器を使用することによって、認識の迅速さを
高めることができる。

【００４７】このハンドフリー設備ではいずれにせよ、
本発明による空間検出器に必要な、遠端通話活性の検出
及び周囲ノイズの推定のような多くの動作が実施され、
従って既に実施された計算動作を本発明による検出器で
利用することができる。

【００４８】本発明による検出器は、ハンドフリー設備
に、例えば移動電話の車内搭載キット又は自動車電話の
ハンドフリー設備に（例えばエコーキャンセラ及び伝送
論理の一部として）使用することができる。本発明はま
た、ハンドフリー設備が電話内に含まれている、いわゆ
るハンドフリー電話の応用例などで使用するにも適して
いる。

【００４９】図６は本発明による空間的近端通話／ダブ
ルトーク検出器８０が使用されている、本発明に基づく
移動局を一例として示している。マイクロフォン・ベク
トル２から出て送信されるべき通話信号はＡ／Ｄ変換器
２０でサンプリングされ、その後で（例えば音声の符号
化、チャネルの符号化、インタリービングのような）ベ
ース周波数信号の処理、無線周波数へのミキシングと変
調、及びブロックＴＸへの送信が行われる。ブロックＴ
Ｘから、信号はデュプレックスフィルタＤＰＬＸ及びア
ンテナＡＮＴを経て空中経路へと発信される。例えばエ
コーキャンセラを制御し、又は断続的な送信で送信ＴＸ
を制御するために検出器８０を利用することができる。
受信側では復調、インタリーブのキャンセル、チャネル
復号、及び音声復号のような受信機ブランチＲＸの通常
の動作が行われ、その後、検出器６で遠端通話活性が検
出され、信号はＤ／Ａ変換器２３でアナログ形式に変換
され、スピーカ７によって再生される。図６に記載のブ
ロック２，７，２０，２３及び８０を入力、出力及び制
御信号（３０，５０，近端ＶＡＤ，ＤＴ）用の移動局用
の接続を有するセパレート形のハンドフリー装置に設置
することによって、本発明をセパレート形のハンドフリ
ー装置で実施することが可能である。本発明は更に、会
議での発呼用に卓上での１個以上のマイクロフォンとス
ピーカとを備えた会議での発呼装置に、または例えば、
マンクロフォンとスピーカを例えばビデオ表示装置に内
蔵できる、インターネット回線網を介して発呼するため
のコンピュータと接続して使用することができる。この
ように、本発明はあらゆる種類のハンドフリー形式の装
置に適している。

【００５０】これまで実施例を用いて本発明の実現方法
と実施態様を説明してきた。本発明は上記に提示した実
施例の細部に限定されるものではなく、かつ本発明はそ
の特徴から逸脱することなく他の実施例でも実現できる
ことは当業者には自明であろう。開示した実施例は例示
的のものであり、限定的なものではないものと見なされ
るべきである。従って、本発明を実施し、利用する可能
性は特許請求の範囲の各請求項によってのみ限定される
ものである。従って、各請求項によって特定された本発
明の異なる実施例、及び同等の実施例は本発明の範囲に
含まれるものである。

【図面の簡単な説明】

【図１】従来から公知のエコーキャンセラのブロック図
である。

【図２】本発明による検出器のブロック図である。

【図３】マイクロフォン・ベクトル信号の空間スペクト
ル図である。

【図４】自動車内のマイクロフォンおよびスピーカの設
置図である。

【図５】距離の関数として到達方向を（度の単位で）推
定するために用いられる更新係数を示す図である。

【図６】本発明による移動局を示す図である。

【図７】到達方向の推定を流れ図の形式で示す図であ
る。

【図８】代替実施例における異なる状態間の遷移状態を
示す図である。

【図９】ラベル付けされたトレーニング・データを示す
図である。

【符号の説明】

２…マイクロフォン・ベクトル３…近端信号５…遠端信号６…遠端通話活性検出器７…スピーカ１４…帯域フィルタ１５…到達方向推定装置１７…到達方向判定ブロック１８…ダブルトーク検出器ＴＤ…過渡状態検出器

Claims

【特許請求の範囲】

【請求項１】音声信号を受信するマイクロフォン手段
（２；２ａ，２ｂ，２Ｍ）と、受信した音声信号から音
声を検出するための手段とからなる音声源を検出する装
置において、受信した信号の到達方向を判定する手段
（１５，１７）と、ある特定の音声の源の推定された到
達方向を記憶する手段（１７）と、前記受信した信号の
到達方向と前記推定された到達方向とを比較する手段
（１８）と、前記比較によって前記受信した信号の到達
方向が前記推定された到達方向とある許容差の範囲内で
一致することが判明した場合には、前記音声の源が前記
ある特定の源であることを表示する手段（１８）とを備
えてなることを特徴とする音声源を検出する装置。
【請求項２】前記マイクロフォン手段（２；２ａ，２
ｂ，２Ｍ）がＭ（個の）マイクロフォン（２ａ，２ｂ）
を備えてなり、ここでＭは整数であり、前記マイクロフ
ォンが出力としてＭ個のマイクロフォン信号を生成する
ように配置されるとともに、前記装置が前記マイクロフ
ォン信号に基づいて空間スペクトルを形成し、かつ前記
スペクトル内で生ずるピークに基づいて前記スペクトル
内での前記到達方向を判定するための手段（１５）を備
えてなることを特徴とする請求項１に記載の装置。
【請求項３】前記スペクトル曲線の微分係数を計算
し、かつ該微分係数が正から負に変化する微分係数のゼ
ロ点を復元することによって前記到達方向を判定する手
段（１５）を備えてなることを特徴とする請求項２に記
載の装置。
【請求項４】前記マイクロフォン手段（２；２ａ，２
ｂ，２Ｍ）に対するある方向で音声を再生するための音
声再生手段（７）を備えてなるとともに、ある源の推定
された到達方向を記憶する前記手段（１７）は、第１の
源が装置のユーザであり、第２の源が前記音声再生手段
（７）である場合に、少なくとも２つの異なる源からの
前記音声の推定された到達方向を記憶するように構成さ
れ、その場合、第１の推定された到達方向は第１の源か
らの音声の推定された到達方向であり、第２の推定され
た到達方向は第２の源からの音声の推定された到達方向
であり、かつ、音声源を検出する手段（１８）は、前記
比較の結果、前記受信した信号の到達方向が前記第２の
推定された到達方向よりも第１の推定された到達方向に
近いことが判明した場合には、前記装置のユーザが前記
音声源であることを表示するように構成されたことを特
徴とする請求項２に記載の装置。
【請求項５】音声源を検出する前記手段は、音声が前
記第１の源及び前記第２の源から同時に入るような状況
を表示するように構成されたことを特徴とする請求項４
に記載の装置。
【請求項６】双方向音声伝送のための手段を備えてな
り、その際に前記第１の源からの音声は伝送されるべき
近端通話であり、前記第２の源からの音声は音声再生手
段（７）を用いて再生されるように構成された受信され
た遠端通話であることを特徴とする請求項４又は５に記
載の装置。
【請求項７】音声信号が受信され、受信された音声信
号から音声が検出されるようにした音声源を検出する方
法において、受信した信号の到達方向が判定され、ある
特定の源からの音声の推定された到達方向が記憶され、
前記受信した信号の到達方向と前記推定された到達方向
とが比較され、前記比較の結果、前記受信した信号の到
達方向が前記推定された到達方向とある許容差の範囲内
で一致することが判明した場合には、前記音声源が前記
ある特定の源であるものと表示されることを特徴とする
音声源を検出する方法。
【請求項８】音声信号がＭ個のマイクロフォン（２
ａ，２ｂ）から受信され、ここでＭは整数であり、Ｍ個
のマイクロフォン信号が各マイクロフォンの出力として
供給され、前記マイクロフォン信号に基づいて到達方向
の空間スペクトルが生成され、かつ前記スペクトル内で
生ずるピークに基づいて前記スペクトルから前記到達方
向が判定されることを特徴とする請求項７に記載の方
法。
【請求項９】前記到達方向が前記スペクトル曲線の微
分係数を計算し、かつ該微分係数が正から負に変化する
微分係数のゼロ点を復元することによって判定されるこ
とを特徴とする請求項７に記載の方法。
【請求項１０】空間スペクトルの各ピークが前記源の
到達方向を記述するパラメータ（ｆｄｏａ）と、前記到
達方向が出現する確率を記述するパラメータ（ｐｄｏ
ａ）及びパラメータ（ｐｏｗｄｏａ）からなり、前記源
からの音声の強度と前記源の前記到達方向とが各パラメ
ータ（ｆｄｏａ，ｐｄｏａ，ｐｏｗｄｏａ）を個々に平
均化することによって判定されることを特徴とする請求
項８に記載の方法。