JP2021175176A - エコー遅延検出方法、装置、プログラム及び非一時的コンピュータ読み取り可能な記憶媒体 - Google Patents

Abstract

【課題】エコー遅延検出の演算量を大幅に低減することができ、エコーの長遅延検出の効率を効果的に向上させるエコー遅延検出方法、装置及び電子機器を提供する。【解決手段】エコー遅延検出方法において、第１電子機器がオーディオを再生し、且つ、カウンタがオンである場合、カウンタがオンになってから現在受信中の録音データブロックであるＮ番目（Ｎは１より大きい整数）の録音データブロックを取得し、Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとを整合し、Ｎ番目の録音データブロックがバッファ領域内の参照データブロックと整合する場合、録音データブロックとバッファ領域内の参照データブロックと整合しない場合にカウントするカウンタの第１カウント値を取得し、目標時間長と第１カウント値とに基づいてエコー遅延を決定する。。【選択図】図１

Description

本願は、コンピュータ技術分野のオーディオ処理技術に係り、特にエコー遅延検出方法、装置、プログラム及び非一時的コンピュータ読み取り可能な記憶媒体に係る。

遅延検出は、エコーを除去するために応用される。エコー除去アルゴリズムは、エコーを除去するためにエコーの遅延を知る必要がある。ここで、エコー除去アルゴリズムでは、通常、単に再生されたオーディオデータと録音データとの時間差を多数の演算によって算出し、算出された時間差をエコーの遅延として決定する。しかしながら、従来のエコー除去アルゴリズムは、エコーの遅延を算出するにあたり、演算リソースの消費が大きく、特に、スマートバックミラーの音楽やナビゲーション音声などのオーディオデータを車載機に伝送して出力する場合など、長時間の遅延の算出では、データ伝送に遅延の存在があるため、エコーの遅延が秒オーダーに達してしまう。

従来のエコー遅延の検出では、演算リソースの消費が大きいという問題があったことが分かる。

従来のエコー遅延の検出では演算リソースの消費が大きいという問題を解決するために、エコー遅延検出方法、装置及び電子機器を提供する。

第１態様として、カウンタが設けられた第１電子機器に応用されるエコー遅延の検出方法を提供し、前記第１電子機器がオーディオを再生し且つ前記カウンタがオンである場合、前記カウンタがオンになってから現在受信中の録音データブロックであるＮ番目（Ｎは１より大きい整数）の録音データブロックを取得することと、前記Ｎ番目の録音データブロックと、前記カウンタがオンになってから前記第１電子機器で再生されたオーディオデータブロックをバッファリングするためのバッファ領域内の、前記録音データブロックとは共に目標時間長のデータブロックである参照データブロックとを整合することと、前記Ｎ番目の録音データブロックが前記バッファ領域内の参照データブロックと整合する場合、前記録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合にカウントする前記カウンタの第１カウント値を取得することと、前記目標時間長と前記第１カウント値とに基づいて前記エコー遅延を決定することと、を含む。

第２態様として、カウンタが設けられた第１電子機器に応用されるエコー遅延の検出装置を更に提供し、前記第１電子機器がオーディオを再生し且つ前記カウンタがオンである場合、前記カウンタがオンになってから現在受信中の録音データブロックであるＮ番目（Ｎは１より大きい整数）の録音データブロックを取得する録音データブロック取得モジュールと、前記Ｎ番目の録音データブロックと、前記カウンタがオンになってから前記第１電子機器で再生されたオーディオデータブロックをバッファリングするためのバッファ領域内の、前記録音データブロックとは共に目標時間長のデータブロックである参照データブロックとを整合する整合モジュールと、前記Ｎ番目の録音データブロックが前記バッファ領域内の参照データブロックと整合する場合、前記録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合にカウントする前記カウンタの第１カウント値を取得する第１カウント値取得モジュールと、前記目標時間長と前記第１カウント値とに基づいて前記エコー遅延を決定するエコー遅延決定モジュールと、を備える。

第３態様として、少なくとも１つのプロセッサと、前記少なくとも１つのプロセッサと通信するように接続されたメモリとを備える電子機器を更に提供し、前記メモリには、前記少なくとも１つのプロセッサによって実行されるコマンドが格納され、前記コマンドが前記少なくとも１つのプロセッサによって実行されることによって、前記少なくとも１つのプロセッサは、上記第１態様に記載の方法を実行可能である。

第４態様として、上記第１態様に記載の方法をコンピュータに実行させるコンピュータコマンドが格納されている非一時的コンピュータ読み取り可能な記憶媒体を提供する。

本願において、前記第１電子機器がオーディオを再生し且つ前記カウンタがオンである場合、前記カウンタがオンになってから現在受信中の録音データブロックであるＮ番目（Ｎは１より大きい整数）の録音データブロックを取得し、前記Ｎ番目の録音データブロックと、前記カウンタがオンになってから前記第１電子機器で再生されたオーディオデータブロックをバッファリングするためのバッファ領域内の、前記録音データブロックとは共に目標時間長のデータブロックである参照データブロックとを整合し、前記Ｎ番目の録音データブロックが前記バッファ領域内の参照データブロックと整合する場合、前記録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合にカウントする前記カウンタの第１カウント値を取得し、前記目標時間長と前記第１カウント値とに基づいて前記エコー遅延を決定することによって、前記エコー遅延を決定する。このように、演算リソースの消費量を特に長遅延のエコー遅延検出において削減することができ、エコー遅延の検出効率を向上させることができる。

なお、本部分に記載の内容は、本開示の実施例のポイント又は重要な特徴を特定することを目的とせず、本開示の範囲を制限することも目的としない。本開示の他の特徴は、以下の明細書から容易に理解される。

図面は、本構成をよりよく理解するためのものであり、本願の限定にならない。

本願の実施例１の概略図である。 本願の実施例２の概略図である。 本願の実施例２の概略図である。 本願の実施例２の概略図である。 本願の実施例に係るエコー遅延の検出方法を実現するための電子機器のブロック図である。

以下、図面を参照して本願の例示的な実施例を説明し、理解することに寄与する本願の実施例の様々な詳細が含まれるが、それらは、単に例示的なものであると考えるべきである。よって、当業者にとって、ここに記載の実施例に対し、本開示の範囲や趣旨から逸脱することなく様々な変更や修正を行うことができることを認識すべきである。同様に、明確及び簡潔のために、以下の記載では、既知の機能や構造の記載を省略している。

図１は、本願の実施例による車両の制御方法を示す。この方法は、第１電子機器に応用可能である。図１に示すように、前記車両の制御方法は、以下のステップを含むことができる。

ステップ１０１において、前記第１電子機器がオーディオを再生し且つ前記カウンタがオンである場合、前記カウンタがオンになってから受信したＮ番目（Ｎは１より大きい整数）の録音データブロックを取得する。ここで、前記Ｎ番目の録音データブロックは、現在受信中の録音データブロックである。
ステップ１０２において、前記Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとを整合する。ここで、前記録音データブロックと前記参照データブロックは、共に目標時間長のデータブロックである。前記バッファ領域は、前記カウンタがオンになってから前記第１電子機器で再生されたオーディオデータブロックをバッファリングするためのものである。
ステップ１０３において、前記Ｎ番目の録音データブロックが前記バッファ領域内の参照データブロックと整合する場合、前記カウンタの第１カウント値を取得する。ここで、前記カウンタは、前記録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合にカウントする。
ステップ１０４において、前記目標時間長と前記第１カウント値とに基づいて前記エコー遅延を決定する。

ここで、第１電子機器は、現在受信中の録音データブロックとバッファ領域にバッファリングされているオーディオデータブロックとの整合結果に基づいてカウンタの第１カウント値を取得し、カウンタの第１カウント値とデータブロックの目標時間長とに基づいてエコー遅延を決定することができるので、録音データと再生されたオーディオデータとの時間差を算出してエコー遅延を決定する場合に比べて、演算リソースの消費量を特に長時間の遅延の検出において削減することができ、エコー遅延の検出効率を向上させることができる。

なお、第１電子機器は、オーディオ再生中に、カウンタがオンになってから、再生されたオーディオデータブロックを参照データブロックとしてバッファリングを開始し、現在受信中の録音データブロックを取得する。ここで、上記録音データブロック及び上記参照データブロックは、共に目標時間長のデータブロックであり、該目標時間長は、実際の状況に応じて設定された時間長であってもよい。例えば、上記目標時間長を８ｍｓと予め設定しておき、第１電子機器のサンプリングレートが１６ＫＨｚであれば、上記録音データブロック及び上記参照データブロック内のデータ量は、共に１２８サンプルである。

具体的には、上記第１電子機器が１２：００：０８に前記カウンタをオンにする例を挙げると、第１電子機器が受信した最初の録音データブロックは、１２：００：００から１２：００：０７まで録音された録音データを含み、２番目の録音データブロックは、１２：００：０８から１２：００：１５まで録音された録音データを含み、３番目の録音データブロックは、１２：００：１６から１２：００：２３まで録音された録音データを含み、……。バッファ領域にバッファリングされている最初の参照データブロックは、１２：００：００から１２：００：０７まで再生されるオーディオデータを含み、２番目の参照データブロックは、１２：００：０８から１２：００：１５まで再生されるオーディオデータを含み、３番目の参照データブロックは、１２：００：１６から１２：００：２３まで再生されるオーディオデータを含み、……。

前記カウンタがオンであることは、第１電子機器がオーディオを再生中に、ユーザの目標操作を受信した場合に、カウンタをオンすることであってもよく、又は、例えば、上述オーディオが再生される時間長が３０ｓなどの一定の時間長に達した場合などに、第１電子機器が自動的にカウンタをオンにするようにしてもよい。

一部の実施形態において、上記ステップ１０１の前に、再生されているオーディオデータブロックの有効が検出された場合、前記カウントをオンにすることを更に含むことによって、カウンタを便利且つタイムリーにオンにすることができる。

本実施形態において、上記第１電子機器は、再生されているオーディオデータブロックが有効か否かを検出し、具体的には、オーディオデータブロックに音声信号が存在するかを検出し、音声信号が存在すればオーディオデータブロックが有効であると決定し、逆の場合に無効とする。

また、上記カウンタがオンになった時、第１電子機器は、該有効なオーディオデータブロックを、バッファ領域内の最初の参照データブロックとして上記バッファ領域にバッファリングすることができる。

なお、第１電子機器は、現在再生中のオーディオデータブロックが無効であると検出すると、上記カウンタをオフにし、次に有効なオーディオデータブロックが検出された場合に上記カウンタを再起動する。また、第１電子機器は、カウンタがオフのとき、上記バッファ領域をクリアする。

本願において、上記第１電子機器がオーディオを再生することは、第１電子機器のオーディオプレーヤが再生して第１電子機器の音声出力装置（例えば、スピーカ等）が出力し、且つ上記録音データは、第１電子機器の録音装置（例えば、マイク等）が音声出力装置のオーディオの音声の出力と同時に録音したものである。

又は、一部の実施形態において、前記第１電子機器は、再生されたオーディオを、前記オーディオを出力するための第２電子機器に伝送し、前記Ｎ番目の録音データブロックは、前記第２電子機器が前記オーディオを出力している場合に録音された録音データブロックである。

ここで、上記第１電子機器が、再生されたオーディオを第２電子機器の音声出力装置に伝送して出力し、第２電子機器の音声出力装置から出力したオーディオの音声を第１電子機器の録音装置で同時に録音する場合、データ伝送に長い遅延が存在するため、同一時間のオーディオデータと録音データとに長いエコー遅延が存在することになる。このような場合、本願におけるエコー遅延の決定方法によれば、エコー遅延検出の演算量を大幅に低減することができ、エコーの長遅延検出の効率を効果的に向上させることができる。

例えば、上記第１電子機器が車両内のスマートバックミラーであり、且つ上記第２電子機器が車両の車載端末である場合、スマートバックミラーがナビゲーションを行う過程で、スマートバックミラーは、データ伝送プロトコル（例えば、Ｃａｒｌｉｆｅプロトコルなど）を介してナビゲーション音声（即ち、参照データブロックは、ナビゲーション音声のオーディオデータを含む）を車載端末に伝送し、車載端末の車内スピーカーから出力する。スマートバックミラーは、同時に走行監視を行い、そのマイクロフォンアレイを介して、車内スピーカーから出力されたナビゲーション音声（即ち、録音データブロックは、録音されたナビゲーション音声のオーディオデータを含む）を録音する。

又は、上記第１電子機器は、上記オーディオを再生して出力するものであり、上記録音データブロックは、第１電子機器が上記オーディオを出力する場合に第２電子機器が録音する録音データブロックであり、且つ第２電子機器は、録音データブロックを第１電子機器に伝送するものであってもよい。

なお、上記カウンタは、第１電子機器における仮想モジュール又は実体モジュールであってもよく、カウンタは、現在受信中の録音データブロックが、バッファ領域にバッファリングされた参照データブロックと整合しない場合にカウントし、即ちカウント値を１だけ増加させる。現在受信中の録音データブロックがバッファ領域にバッファリングされている参照データブロックとは整合する場合にはカウントしない。

上記ステップ１０１において、上記第１電子機器がオーディオを再生し且つ上記カウンタがオンになっている場合、第１電子機器は、現在受信中の録音データブロック、即ちＮ番目の録音データブロックを取得する。

本願において、第１電子機器の実際の動作中、第１電子機器が同時刻に再生するオーディオデータ及び録音された録音データは、通常、数十ミリ秒から数百ミリ秒などの遅延を有するため、カウンタをオンにしてから受信した最初の録音データブロックは、通常、バッファ領域内の参照データブロックと整合しない。即ち、最初の録音データブロックに対して、第１電子機器が上述したステップ２０１から２０４までの全処理を実行せず、２番目の録音データブロック以降の録音データブロックがバッファ領域内の参照データブロックと整合するようになる。従って、上記Ｎは、１より大きい整数である。

もちろん、カウンタの正常カウントを保証するために、上記第１電子機器は、上記最初の録音データブロックを受信した場合、最初の録音データブロックとバッファ領域にバッファリングされた参照データブロック（この場合、バッファ領域には最初の参照データのみがバッファリングされる）とを整合し、整合結果として、最初の録音データブロックとバッファ領域にバッファリングされた参照データブロックとが整合しない場合、カウンタのカウント値に１を加算する。即ち、第１電子機器が最初の録音データブロックを取得した場合、上記ステップ２０１から２０３までを実行する。

上記ステップ１０２において、第１電子機器は、現在受信中の録音データブロック、即ちＮ番目の録音データブロックを受信した場合、Ｎ番目の録音データブロックとバッファ領域にバッファリングされた参照データブロックとを整合する。

本願において、上記のＮ番目の録音データブロックとバッファ領域にバッファリングされた参照データブロックとを整合することは、所定の類似度計算方法により、Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとの類似度を算出し、バッファ領域にＮ番目の録音データブロックとの類似度が所定の閾値以上であるオーディオデータブロックが存在する場合、第１電子機器が、Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとは整合すると決定し、逆の存在しない場合、Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとは整合しないと決定する。

例えば、第１電子機器は、Ｎ番目の録音データブロックとバッファリングされた参照データブロックとの間で類似するサンプリング点の割合を上記類似度として計算し、上記所定の閾値が６０％である場合、Ｎ番目の録音データブロックとバッファ領域にバッファリングされたある参照データブロックとの類似度が６０％以上（例えば、類似度が７０％）であれば、Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとが整合すると決定し、Ｎ番目の録音データブロックとバッファ領域にバッファリングされたすべての参照データブロックとの類似度がいずれも６０％未満であれば、Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとが整合しないと決定する。

また、前記Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとを整合することは、Ｎ番目の録音データブロックとバッファ領域内の各々の参照データブロックとを整合することであってもよい。例えば、上記第１電子機器が１２：００：０８に上記カウンタをオンにしたことを例にすると、第１電子機器が３番目の録音データブロック（即ち、３番目の録音データブロックが１２：００：１６〜１２：００：２３に録音された録音データを含む）を受信した際に、バッファ領域に最初の参照データブロック、２番目の参照データブロック、３番目の参照データブロックがバッファリングされているため、第１電子機器が３番目の録音データブロックと、最初の参照データブロック、２番目の参照データブロック、３番目の参照データブロックとの類似度をそれぞれ算出し、３番目の録音データブロックとの類似度が上記所定の閾値以上である参照データブロックがバッファ領域に存在するか否かを決定する。

又は、一部の実施形態において、上記ステップ１０２は、前記Ｎ−１番目の録音データブロックが前記バッファ領域内の参照データブロックと整合しない場合、前記Ｎ番目の録音データブロックと前記バッファ領域内の最初の録音データブロックとを整合することを含む。

本実施形態において、録音データと再生されたオーディオデータには、数十ミリ秒から数百ミリ秒の遅延があるため、カウンタがオンになってからバッファリングされた最初の参照データブロックは、通常、最初の参照データブロックのオーディオデータの再生後に受信した録音データブロック（２番目以降の録音データブロック）と整合する。

従って、上記第１電子機器は、１つ前の録音データブロックとバッファ領域の参照データブロックとが整合しない場合、現在受信中の録音データブロックと最初の録音データブロックとを整合することで、整合の正確性を保証しつつ、演算量を効果的に低減してエコー遅延検出の処理効率を更に向上させることができる。

例えば、上記第１電子機器が１２：００：０８に上記カウンタをオンにする例を挙げれば、第１電子機器は、２番目の録音データブロックを受信し、最初の録音データブロックがバッファ領域内の最初の参照データブロックと整合しないのであれば、２番目の録音データブロックを最初の録音データブロックと整合し、３番目の録音データブロックを受信し、２番目の録音データブロックがバッファ領域内の最初の参照データブロック及び２番目の参照データブロックのいずれとも整合しないのであれば、３番目の録音データブロックを最初の録音データブロックと整合し、４番目の録音データブロックを受信し、３番目の録音データブロックがバッファ領域内の最初の参照データブロック、２番目の参照データブロック及び３番目の参照データブロックのいずれとも整合しないのであれば、４番目の録音データブロックを最初の録音データブロックと整合し、……。

なお、現在受信中の録音データブロックが最初の参照データブロックと整合する場合、次に受信する録音データブロックも最初の参照データブロックの後にバッファリングされた参照データブロックと整合する可能性がある。具体的には、上記ステップ１０２は、Ｎ−１番目の録音データブロックが、前記バッファ領域内のｋ（ｋは正の整数）番目の参照データブロックと整合する場合、前記Ｎ番目の録音データブロックを、前記バッファ領域内のｋ＋１番目の参照データブロックと整合することを更に含んでもよい。

また、上記Ｎ−１番目の録音データブロックと前記バッファ領域内の参照データブロックとが整合しないことは、Ｎ−１番目の録音データブロックが最初の参照データブロック又はｋ番目の参照データブロックと整合しないことである。

例えば、上記第１電子機器が１２：００：０８に上記カウンタをオンにすることを例にすると、第１電子機器は、３番目の録音データブロックを受信し、２番目の録音データブロックがバッファ領域内の最初の参照データブロックと整合すると、３番目の録音データブロックが２番目の録音データブロックと整合し、逆の場合に３番目の録音データブロックを最初の録音データブロックと整合し、４番目の録音データブロックを受信し、３番目の録音データブロックがバッファ領域内の２番目の参照データブロックと整合した場合、４番目の録音データブロックが３番目の録音データブロックと整合し、逆の場合に４番目の録音データブロックが最初の録音データブロックと整合し、……。

上記ステップ１０３において、第１電子機器は、前記Ｎ番目の録音データブロックが前記バッファ領域内の参照データブロックと整合すると決定した場合、前記カウンタの第１カウント値を取得する。

本願において、上記第１電子機器は、前記カウンタの第１カウント値を取得してもよく、現在受信中の録音データブロックがバッファ領域内の参照データブロックと整合すると決定し、カウンタの現在のカウント値を上記第１カウント値として決定し、且つ後続の録音データブロックの整合を停止するようにしてもよい。

又は、一部の実施例において、前記の前記カウンタの第１カウント値を取得することは、現在受信中の録音データブロックと前記バッファ領域内の参照データブロックとの整合が前記第１電子機器によって連続して決定された回数である目標整合回数を取得することと、前記目標整合回数が所定の条件を満たした場合、前記カウンタの第１カウント値を取得することとを含む。

ここで、第１電子機器は、現在受信中の録音データブロックとバッファ領域内の参照データブロックとが整合すると決定した場合に、上記目標整合回数を取得し、目標整合回数に基づいて第１カウント値を取得することによって、カウンタのカウント値を取得する条件がより厳しくなり、さらにエコー遅延検出の精度が向上する。

ここで、上記目標整合回数は、前記第１電子機器が、現在受信中の録音データブロックと前記バッファ領域内の参照データブロックとが整合したと連続して決定した回数である。例えば、上記第１電子機器が１２：００：０８に上記カウンタをオンにすることを例にすると、第１電子機器が２番目の録音データブロックと最初の参照データブロックとが整合していると決定した場合、第１電子機器は、３番目の録音データブロックを受信したのであれば、３番目の録音データブロックを２番目の参照データブロックと整合し、３番目の録音データブロックと２番目の参照データブロックとが整合していると決定したのであれば、上記目標整合回数が２回であり、更に、４番目の録音データブロックを受信したのであれば、４番目の録音データブロックを３番目の参照データブロックと整合し、４番目の録音データブロックと３番目の参照データブロックとが整合すると決定すると、上記目標整合回数が３回であり、……。

また、上記所定の条件は、実際の必要性に応じて予め設定された判定条件であってもよい。一部の実施形態において、前記目標整合回数が所定の条件を満たした場合、前記カウンタの第１カウント値を取得することは、前記目標整合回数が所定の回数以上である場合、前記カウンタの第１カウント値を取得することを含み、ここで、前記所定の回数は、１より大きい整数を取る。

ここで、第１電子機器は、目標整合回数が所定の回数以上であると決定し、即ち、現在受信中の録音データブロックが前記バッファ領域内の参照データブロックと整合した回数が所定の回数以上であると連続して決定した場合にのみ、上記カウンタのカウント値を取得し、エコー遅延検出の精度を高める。

例えば、上記所定の回数が３回である場合、第１電子機器は、４番目の録音データブロックと３番目の参照データブロックとが整合すると決定し、即ち目標整合回数が３回であれば、カウンタのカウント値を取得する。その際に、最初の録音データブロックのみがバッファ領域の参照データブロックと整合しないため、カウンタのカウント値が１である。

又は、別の一部の実施形態において、前記バッファ領域の最大蓄積量は、Ｍ個の参照データブロックであり、前記Ｍは、１より大きい整数である。前記目標整合回数が所定の条件を満たした場合、前記カウンタの第１カウント値を取得することは、前記目標整合回数が前記Ｍである場合、前記カウンタの第１カウント値を取得することを含む。

ここで、第１電子機器が、目標整合回数がバッファ領域の最大蓄積録音データブロック数である場合にのみカウンタのカウント値を取得するので、カウンタのカウント値を取得する条件がより厳しくなり、エコー遅延検出の精度が更に向上する。

例えば、上記バッファ領域の最大蓄積量が１６個の参照データブロックである場合、第１電子機器は、１６回連続して現在受信中の録音データブロックがバッファ領域にバッファリングされた参照データブロックと整合したと決定すると、カウンタのカウント値を取得する。

また、上記の１つのケースで、即ち、第１電子機器は、前記Ｎ−１番目の録音データブロックと前記バッファ領域内の参照データブロックとが整合しない場合、前記Ｎ番目の録音データブロックと前記バッファ領域内の最初の録音データブロックとを整合し、Ｎ−１番目の録音データブロックと前記バッファ領域内のｋ番目の参照データブロックとが整合する場合、前記Ｎ番目の録音データブロックと前記バッファ領域内のｋ＋１番目の参照データブロックとを整合し、バッファ領域にバッファリングされた参照データブロックの全てが録音データブロックと整合した場合にのみ、上記カウンタのカウント値を取得する。

例えば、上記バッファ領域には、最大１６個の参照データブロックをバッファリングすることができるとし、上記第１電子機器は、最初の３つの録音データブロックがバッファ領域にバッファリングされた参照データブロックと整合しないと決定し、即ちカウント値が３である場合、４番目の録音データブロックが最初の参照データブロックと整合し、５番目の録音データブロックが２番目の参照データブロックと整合し、……、ｉ（ｉは、２より大きくかつ１６未満の整数）＋３番目の録音データブロックがｉ番目の参照データブロックと整合し、……、及び１９番目の録音データブロックが１６番目の参照データブロックと整合すると決定した場合、カウンタのカウント値を取得する。即ち、カウント値が３である。

なお、上記バッファ領域の最大蓄積量がＭ個の参照データブロックである場合、カウンタがオンになったときからＭ個の参照データブロックをバッファ領域にバッファリングした後に、次に再生されるオーディオのデータブロックをバッファ領域にバッファリングしなくなり、且つ第１電子機器は、次に現在で録音データブロックを受信したとき、現在受信中の録音データブロックを上記Ｍ個の参照データブロックと整合する。

また、上記第１電子装置は、上記カウンタを再起動させてバッファ領域をクリアするように一定の所定の条件に基づいて制御する。具体的には、前記Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとを整合した後に、前記Ｎ番目の録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合、前記カウンタの第２カウント値を取得することと、前記第２カウント値と前記目標時間長に基づいて決定された遅延が所定の遅延閾値以上である場合、前記バッファ領域をクリアして前記カウンタをリセットすることを更に含む。

ここで、第１電子機器は、カウンタのカウント値に対応する遅延が所定の遅延閾値を超えた場合、前記バッファ領域をタイムリーにクリアして前記カウンタをリセットすることによって、上記カウンタの第１カウント値を取得する要求を長時間満たさない場合にエコー遅延検出フローを再スタートさせることを回避し、エコー遅延検出の効率を更に向上させることができる。

例えば、上記所定の遅延閾値を２ｓに設定すると、カウンタの現在のカウント値（即ち、第２カウント値）に対応する遅延が上記２ｓよりも大きい場合、第１電子機器は、バッファ領域をクリアし、カウンタをリセットする。

上記ステップ１０４において、第１電子機器は、上記第１カウント値を取得した後に、第１カウント値及び上記目標時間長に基づいてエコー遅延を決定する。

本願において、上記の第１カウント値と上記目標時間長とに基づいてエコー遅延を決定することは、第１カウント値と目標時間長との積を上記エコー遅延として決定する。例えば、上記目標遅延が８ｍｓであり、且つ第１カウント値が１０である場合、上記エコー遅延は、８０ｍｓとなる。

本願のエコー遅延の検出方法の理解を容易にするために、エコー遅延の検出方法の実際の応用におけるフローを説明する。具体的に、第１電子機器は、各データブロックの時間長（即ち、目標時間長）が８ｍｓであり、且つバッファ領域の最大蓄積量が１６個の参照データブロック（即ち、Ｍ＝１６）であると仮定して、最初の録音データブロックを受信した場合（この場合、バッファ領域に最初の参照データブロックをバッファリングする）、最初の録音データブロックとバッファリングされた最初の参照データブロックとを整合し、整合しなければ、カウンタに１を加算する。第１電子機器は、引き続き、現在受信中の２番目の録音データブロックと最初の参照データブロックとを整合し、整合しなければ、カウンタを再び１を加算する。第１電子機器は、引き続き、現在受信中の３番目の録音データブロックと最初の参照データブロックとを整合し、３番目の録音データブロックと最初の参照データブロックとが整合した場合、引き続き、現在受信中の４番目の録音データブロックと２番目の参照データブロックとを整合し、……、１８番目の録音データブロックと１６番目の参照データブロックとが整合するまで行われると、カウンタのカウント値を２（即ち、第１カウント値）として取得し、エコー遅延を１６ｍｓと決定する。ここで、上記３番目の録音データブロックから上記１８番目の参照データブロックまで、現在の対応する参照データブロックと整合しないことが生じた場合、例えば、４番目の録音データブロックが２番目の参照データブロックと整合するものの、５番目の録音データブロックが３番目の参照データブロックと整合せず、又は、現在受信中の録音データブロックが最初の参照データブロックを整合する場合に３番目の録音データブロックが最初の参照データブロックと整合しないなど不整合が生じると、第１電子機器は、次に受信する録音データブロックと最初の参照データブロックとを整合する。また、上記所定の遅延閾値が２ｍｓであれば、カウンタのカウント値が１６であり、即ち、カウンタのカウント値に対応する遅延が所定の遅延閾値より大きい場合、第１電子機器は、カウンタを再起動して上記バッファ領域をクリアする。

図２は、本願の実施例によるエコー遅延の検出装置を示し、カウンタが設けられた第１電子機器に応用される。図２に示すように、エコー遅延検出装置２００は、前記第１電子機器がオーディオを再生し且つ前記カウンタがオンである場合、前記カウンタがオンになって現在受信中の録音データブロックであるＮ番目（Ｎは１より大きい整数）の録音データブロックを取得する録音データブロック取得モジュール２０１と、前記Ｎ番目の録音データブロックと、前記カウンタがオンになってから前記第１電子機器で再生されたオーディオデータブロックをバッファリングするためのバッファ領域内の、前記録音データブロックとは共に目標時間長のデータブロックである参照データブロックとを整合する整合モジュール２０２と、前記Ｎ番目の録音データブロックが前記バッファ領域内の参照データブロックと整合する場合、前記録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合にカウントする前記カウンタの第１カウント値を取得する第１カウント値取得モジュール２０３と、前記目標時間長と前記第１カウント値とに基づいて前記エコー遅延を決定するエコー遅延決定モジュール２０４とを備える。

任意選択で、図３に示すように、前記第１カウント値取得モジュール２０３は、現在受信中の録音データブロックと前記バッファ領域内の参照データブロックとの整合が前記第１電子機器によって連続して決定された回数である目標整合回数を取得する整合回数取得ユニット２０３１と、前記目標整合回数が所定の条件を満たした場合、前記カウンタの第１カウント値を取得する第１カウント値取得ユニット２０３２とを備える。

任意選択で、前記第１カウント値取得ユニットは、具体的には、前記目標整合回数が、１より大きい整数を取る所定の回数以上である場合、前記カウンタの第１カウント値を取得する。

任意選択で、前記バッファ領域の最大蓄積量は、Ｍ（Ｍは１より大きい整数）個の参照データブロックであり、前記第１カウント値取得ユニットは、具体的には、前記目標整合回数が前記Ｍである場合、前記カウンタの第１カウント値を取得する。

任意選択で、前記整合モジュールは、具体的には、前記Ｎ−１番目の録音データブロックが前記バッファ領域内の参照データブロックと整合しない場合、前記Ｎ番目の録音データブロックと前記バッファ領域内の最初の録音データブロックとを整合する。

任意選択で、図４に示すように、前記装置２００は、前記Ｎ番目の録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合、前記カウンタの第２カウント値を取得する第２カウント値取得モジュール２０５と、前記第２カウント値と前記目標時間長に基づいて決定された遅延が所定の遅延閾値以上である場合、前記バッファ領域をクリアして前記カウンタをリセットするリセットモジュール２０６とを更に含む。

任意選択で、前記第１電子機器は、再生されたオーディオを、前記オーディオを出力するための第２電子機器に伝送し、前記Ｎ番目の録音データブロックは、前記第２電子機器が前記オーディオを出力している場合に録音された録音データブロックである。

なお、車両の制御装置４００は、本願の図１の方法実施例において電子機器によって実現される各プロセスを実現し、同じ効果を奏することができるため、重複を避けるために、ここでは繰り返さない。

本願の実施例によれば、本願は、電子機器及び読み取り可能な記憶媒体を更に提供する。

図５は、本願の実施例のエコー遅延の検出方法に係る電子機器のブロック図である。電子機器は、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、携帯情報端末（ＰＤＡ：Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、サーバ、ブレードサーバ、メインフレームコンピュータ、及び他の適切なコンピュータなどの様々な形態のデジタルコンピュータを表すことが意図される。電子機器はまた、パーソナルデジタルプロセシング、セルラー電話、スマートフォン、ウェアラブルデバイス、及び他の同様のコンピューティングデバイスなど、様々な形態のモバイルデバイスを表してもよい。本明細書に示される構成要素、それらの接続及び関係、並びにそれらの機能は、単なる例であり、本明細書に記載及び／又は特許請求される本願の実現を限定することを意図しない。

図５に示すように、該電子機器は、１又は複数のプロセッサ５０１、メモリ５０２、及び高速インターフェースと低速インターフェースを含む各構成要素を接続するためのインターフェースを備える。各構成要素は、異なるバスで相互に接続され、共通のマザーボード上に実装されてもよいし、必要に応じて他の形態で実装されてもよい。プロセッサは、インターフェースに結合されたディスプレイデバイスなどの外部入出力装置にＧＵＩのグラフィカル情報を表示するために、メモリ内又はメモリ上に記憶されたコマンドを含む、電子機器内で実行されるコマンドを処理する。他の実施形態では、複数のプロセッサ及び／又は複数のバスが、必要に応じて、複数のメモリ及び複数のメモリとともに使用される。また、複数の電子機器が接続され、各機器が必要な動作の一部を提供するようにしてもよい（例えば、サーバアレイ、ブレードサーバの集合、マルチプロセッサシステムなど）。図５では、１つのプロセッサ５０１を例に挙げている。

メモリ５０２は、本願において提供される非一時的コンピュータ読み取り可能な記憶媒体である。ここで、前記メモリは、少なくとも１つのプロセッサによって実行されるコマンドが格納されている。それによって、前記少なくとも１つのプロセッサは、本願において提供されるエコー遅延の検出方法を実行する。本願の非一時的コンピュータ読み取り可能な記憶媒体は、本願において提供されるエコー遅延の検出方法をコンピュータに実行させるためのコンピュータコマンドを記憶する。

非一時的コンピュータ読み取り可能な記憶媒体としてのメモリ５０２は、本願の実施例におけるエコー遅延の検出方法に対応するプログラムコマンド／モジュール（例えば、図２に示す録音データブロック取得モジュール２０１、整合モジュール２０２、第１カウント値取得モジュール２０３、エコー遅延決定モジュール２０４）などの非一時的なソフトウェアプログラム、非一時的なコンピュータ実行可能プログラム及びモジュールなどを記憶するために使用される。プロセッサ５０１は、メモリ５０２に格納された非一時的ソフトウェアプログラム、コマンド及びモジュールを実行することにより、サーバの各種機能アプリケーションやデータ処理を実行し、即ち、上記方法の実施例におけるエコー遅延の検出方法を実現する。

メモリ５０２は、オペレーティングシステム、少なくとも１つの機能に必要なアプリケーションを記憶することができるプログラム記憶領域と、エコー遅延の検出に係る電子機器の使用に応じて作成されたデータなどを記憶することができるデータ記憶領域とを含む。また、メモリ５０２は、高速ランダムアクセスメモリを備えてもよく、また、少なくとも１つの磁気ディスクメモリデバイス、フラッシュメモリデバイス、又は他の非一時的ソリッドステートメモリデバイスなどの非一時的メモリを備えてもよい。一部の実施形態では、メモリ５０２は、任意選択で、プロセッサ５０１から遠隔に配置されたメモリを備える。これらの遠隔メモリは、ネットワークを介してエコー遅延検出に係る電子装置に接続される。上記ネットワークの例としては、インターネット、イントラネット、ローカルエリアネットワーク、移動体通信ネットワーク、及びこれらの組み合わせが挙げられるが、これらに限定されない。

エコー遅延の検出方法に係る電子機器は、入力装置５０３と出力装置５０４とを更に備えてもよい。プロセッサ５０１、メモリ５０２、入力装置５０３及び出力装置５０４は、バス又は他の方式で接続され、図５では、バスを介して接続される例が示される。

タッチスクリーン、キーパッド、マウス、トラックパッド、タッチパッド、ポインティングスティック、１つ又は複数のマウスボタン、トラックボール、ジョイスティックなどの入力装置である入力装置５０３は、入力された数字又は文字情報を受信し、エコー遅延の検出に係る電子機器のユーザ設定及び機能制御に関するキー信号入力を生じる。出力装置５０４は、ディスプレイ装置、補助照明装置（例えば、ＬＥＤ）、及び触覚フィードバック装置（例えば、振動モータ）などを含む。該表示装置は、液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）ディスプレイ、及びプラズマディスプレイを含むが、これらに限定されない。一部の実施形態では、表示装置は、タッチスクリーンであってもよい。

本明細書に記載するシステム及び技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、特定用途向けＡＳＩＣ（特定用途向け集積回路）、コンピュータハードウェア、ファームウェア、ソフトウェア、及び／又はそれらの組み合わせにおいて実現される。これらの様々な実施形態は、記憶システム、少なくとも１つの入力装置、及び少なくとも１つの出力装置からデータ及びコマンドを受信し、該記憶システム、該少なくとも１つの入力装置、及び該少なくとも１つの出力装置にデータ及びコマンドを送信することができる専用又は汎用のプログラマブルプロセッサである少なくとも１つのプログラマブルプロセッサを含むプログラマブルシステム上で実行及び／又は解釈可能な１つ又は複数のコンピュータプログラムで実現することを含む。

これらのコンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、又はコードとも呼ばれる）は、プラグラマブルプロセッサの機械コマンドを含み、これらのコンピュータプログラムは、高レベルのプロセス及び／又はオブジェクト指向プログラミング言語、及び／又はアセンブリ／機械言語で実現される。本明細書で使用される場合、用語「機械読み取り可能な媒体」及び「コンピュータ読み取り可能な媒体」は、機械読み取り可能な信号として機械コマンドを受信する機械読み取り可能な媒体を含む、プラグラマブルプロセッサに機械コマンド及び／又はデータを提供するための任意のコンピュータプログラム製品、デバイス、及び／又は装置（例えば、磁気ディスク、光学ディスク、メモリ、プログラム可能論理デバイス（ＰＬＤ））を指す。用語「機械読み取り可能な信号」は、機械コマンド及び／又はデータをプログラマブルプロセッサに提供するために使用される任意の信号を指す。

ユーザとの対話を提供するために、本明細書に記載されたシステム及び技術は、ユーザに情報を表示するための表示装置（例えば、ＣＲＴ（陰極線管）又はＬＣＤ（液晶ディスプレイ）モニタ）と、ユーザがコンピュータに入力を提供することができるキーボード及びポインティングデバイス（例えば、マウス又はトラックボール）とを有するコンピュータ上で実施される。他の種類の装置を使用して、ユーザとの対話を提供してもよい。例えば、ユーザに提供されるフィードバックは、任意の形態の感覚フィードバック（例えば、視覚フィードバック、聴覚フィードバック、又は触覚フィードバック）であってもよい。ユーザからの入力は、音声入力、又は触覚入力を含む任意の形態で受信される。

本明細書に記載のシステム及び技術は、バックエンド構成要素を含むコンピューティングシステム（例えば、データサーバとして）、又はミドルウェア構成要素を含むコンピューティングシステム（例えば、アプリケーションサーバ）、又はフロントエンド構成要素を含むコンピューティングシステム（例えば、ユーザが本明細書に記載のシステム及び技術の実施形態とやり取りするグラフィカルユーザインターフェース又はウェブブラウザを有するユーザコンピュータ）、又はそのようなバックエンド構成要素、ミドルウェア構成要素、又はフロントエンド構成要素の任意の組み合わせを含むコンピューティングシステムにおいて実施される。システムの構成要素は、任意の形式又は媒体（例えば、通信ネットワーク）のデジタルデータ通信によって互いに接続される。通信ネットワークとしては、例えば、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、インターネットなどが挙げられる。

コンピュータシステムは、クライアント及びサーバを備える。クライアント及びサーバは、一般に、互いから離れており、通常、通信ネットワークを介して対話する。クライアントとサーバの関係は、それぞれのコンピュータ上で実行され、互いにクライアント−サーバ関係を有するコンピュータプログラムによって生成される。

本願において、前記第１電子機器がオーディオを再生し且つ前記カウンタがオンである場合、前記カウンタがオンになってから現在受信中の録音データブロックであるＮ番目（Ｎは１より大きい整数）の録音データブロックを取得し、前記Ｎ番目の録音データブロックと、前記カウンタがオンになってから前記第１電子機器で再生されたオーディオデータブロックをバッファリングするためのバッファ領域内の、前記録音データブロックとは同じく目標時間長のデータブロックである参照データブロックとを整合し、前記Ｎ番目の録音データブロックが前記バッファ領域内の参照データブロックと整合する場合、前記録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合にカウントする前記カウンタの第１カウント値を取得し、前記目標時間長と前記第１カウント値とに基づいて前記エコー遅延を決定することによって、前記エコー遅延を決定する。このように、演算リソースの消費量を特に長遅延のエコー遅延検出において削減することができ、エコー遅延の検出効率を向上させることができる。

上記に示された様々な形態のフローが、ステップの順序変更、追加、又は削除のために使用されることが理解されるべきである。例えば、本願に記載された各ステップは、並列に実行されても、順次的に実行されても、異なる順序で実行されてもよく、本願に開示された技術的解決手段の所望の結果を実現できる限り、本明細書ではこれについて限定しない。

上述した具体的な実施形態は、本願の保護範囲への制限にならない。当業者にとって、設計の要求や他の要素によって様々な修正、組み合わせ、サブ組み合わせ及び置換を行うことができることは、明らかである。本願の趣旨や原則内に為した修正、均等置換及び改良などは、すべて本願の保護範囲に含まれるべきである。

Claims (16)

1. カウンタが設けられた第１電子機器に応用されるエコー遅延検出方法であって、
   前記第１電子機器がオーディオを再生し且つ前記カウンタがオンである場合、前記カウンタがオンになって現在受信中の録音データブロックであるＮ番目（Ｎは１より大きい整数）の録音データブロックを取得することと、
   前記Ｎ番目の録音データブロックと、前記カウンタがオンになってから前記第１電子機器で再生されたオーディオデータブロックをバッファリングするためのバッファ領域内の、前記録音データブロックとは共に目標時間長のデータブロックである参照データブロックとを整合することと、
   前記Ｎ番目の録音データブロックが前記バッファ領域内の参照データブロックと整合する場合、前記録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合にカウントする前記カウンタの第１カウント値を取得することと、
   前記目標時間長と前記第１カウント値とに基づいてエコー遅延を決定することと、
   を含むエコー遅延検出方法。
2. 前記カウンタの第１カウント値を取得することが、
   現在受信中の録音データブロックと前記バッファ領域内の参照データブロックとの整合が前記第１電子機器によって連続して決定された回数である目標整合回数を取得することと、
   前記目標整合回数が所定の条件を満たした場合、前記カウンタの第１カウント値を取得することと、
   を含む請求項１に記載の方法。
3. 前記目標整合回数が所定の条件を満たした場合、前記カウンタの第１カウント値を取得することが、
   前記目標整合回数が、１より大きい整数を取る所定の回数以上である場合、前記カウンタの第１カウント値を取得することを含む請求項２に記載の方法。
4. 前記バッファ領域の最大蓄積量は、Ｍ（Ｍは１より大きい整数）個の参照データブロックであり、
   前記目標整合回数が所定の条件を満たした場合、前記カウンタの第１カウント値を取得することが、
   前記目標整合回数が前記Ｍである場合、前記カウンタの第１カウント値を取得することを含む請求項２に記載の方法。
5. 前記Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとを整合することが、
   Ｎ−１番目の録音データブロックが前記バッファ領域内の参照データブロックと整合しない場合、前記Ｎ番目の録音データブロックと前記バッファ領域内の最初の録音データブロックとを整合することを含む請求項１に記載の方法。
6. 前記Ｎ番目の録音データブロックとバッファ領域内の参照データブロックとを整合した後に、
   前記Ｎ番目の録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合、前記カウンタの第２カウント値を取得することと、
   前記第２カウント値と前記目標時間長に基づいて決定された遅延が所定の遅延閾値以上である場合、前記バッファ領域をクリアして前記カウンタをリセットすることと、
   を含む請求項１に記載の方法。
7. 前記第１電子機器が、再生されたオーディオを、前記オーディオを出力するための第２電子機器に伝送し、
   前記Ｎ番目の録音データブロックは、前記第２電子機器が前記オーディオを出力している場合に録音された録音データブロックである請求項１に記載の方法。
8. カウンタが設けられた第１電子機器に応用されるエコー遅延検出装置であって、
   前記第１電子機器がオーディオを再生し且つ前記カウンタがオンである場合、前記カウンタがオンになって現在受信中の録音データブロックであるＮ番目（Ｎは１より大きい整数）の録音データブロックを取得する録音データブロック取得モジュールと、
   前記Ｎ番目の録音データブロックと、前記カウンタがオンになってから前記第１電子機器で再生されたオーディオデータブロックをバッファリングするためのバッファ領域内の、前記録音データブロックとは共に目標時間長のデータブロックである参照データブロックとを整合する整合モジュールと、
   前記Ｎ番目の録音データブロックが前記バッファ領域内の参照データブロックと整合する場合、前記録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合にカウントする前記カウンタの第１カウント値を取得する第１カウント値取得モジュールと、
   前記目標時間長と前記第１カウント値とに基づいてエコー遅延を決定するエコー遅延決定モジュールと、
   を備えるエコー遅延検出装置。
9. 前記第１カウント値取得モジュールが、
   現在受信中の録音データブロックと前記バッファ領域内の参照データブロックとの整合が前記第１電子機器によって連続して決定された回数である目標整合回数を取得する整合回数取得ユニットと、
   前記目標整合回数が所定の条件を満たした場合、前記カウンタの第１カウント値を取得する第１カウント値取得ユニットと、
   を含む請求項８に記載の装置。
10. 前記第１カウント値取得ユニットが、前記目標整合回数が１より大きい整数を取る所定の回数以上である場合、前記カウンタの第１カウント値を取得する請求項９に記載の装置。
11. 前記バッファ領域の最大蓄積量は、Ｍ（Ｍは１より大きい整数）個の参照データブロックであり、
    前記第１カウント値取得ユニットが、前記目標整合回数が前記Ｍである場合、前記カウンタの第１カウント値を取得する請求項９に記載の装置。
12. 前記整合モジュールが、
    前記Ｎ−１番目の録音データブロックが前記バッファ領域内の参照データブロックと整合しない場合、前記Ｎ番目の録音データブロックと前記バッファ領域内の最初の録音データブロックとを整合する請求項８に記載の装置。
13. 前記Ｎ番目の録音データブロックと前記バッファ領域内の参照データブロックと整合しない場合、前記カウンタの第２カウント値を取得する第２カウント値取得モジュールと、
    前記第２カウント値と前記目標時間長に基づいて決定された遅延が所定の遅延閾値以上である場合、前記バッファ領域をクリアして前記カウンタをリセットするリセットモジュールと、
    を備える請求項８に記載の装置。
14. 前記第１電子機器が、再生されたオーディオを、前記オーディオを出力するための第２電子機器に伝送し、
    前記Ｎ番目の録音データブロックは、前記第２電子機器が前記オーディオを出力している場合に録音された録音データブロックである請求項８に記載の装置。
15. 請求項１から７のいずれか一項に記載の方法をコンピュータに実行させるエコー遅延検出プログラム。
16. コンピュータコマンドが格納されている非一時的コンピュータ読み取り可能な記憶媒体であって、
    前記コンピュータコマンドが、請求項１から７のいずれか一項に記載の方法をコンピュータに実行させる記憶媒体。

Images