JP5712350B2 - 拡声通話装置 - Google Patents

拡声通話装置 Download PDF

Info

Publication number
JP5712350B2
JP5712350B2 JP2009260173A JP2009260173A JP5712350B2 JP 5712350 B2 JP5712350 B2 JP 5712350B2 JP 2009260173 A JP2009260173 A JP 2009260173A JP 2009260173 A JP2009260173 A JP 2009260173A JP 5712350 B2 JP5712350 B2 JP 5712350B2
Authority
JP
Japan
Prior art keywords
echo
signal
loss
attenuation
double talk
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009260173A
Other languages
English (en)
Other versions
JP2010273316A (ja
Inventor
恵一 ▲吉▼田
恵一 ▲吉▼田
福島 実
実 福島
古屋 智英
智英 古屋
岡田 幸夫
幸夫 岡田
哲平 鷲
哲平 鷲
谷川 嘉浩
嘉浩 谷川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2009260173A priority Critical patent/JP5712350B2/ja
Priority to PCT/IB2010/000876 priority patent/WO2010122398A1/en
Priority to CN201080017260.XA priority patent/CN102405634B/zh
Priority to TW99112310A priority patent/TWI399968B/zh
Publication of JP2010273316A publication Critical patent/JP2010273316A/ja
Application granted granted Critical
Publication of JP5712350B2 publication Critical patent/JP5712350B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Circuit For Audible Band Transducer (AREA)
  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
  • Telephone Function (AREA)

Description

本発明は、住宅や事務所等で用いられる拡声通話装置に関するものである。
従来より、通話時にハンドセットを持つ必要がなく、通話端末から離れた通話者に対して相手側の通話端末から伝送されてくる音声信号をスピーカによって拡声出力し、かつ、上記通話者の発する音声をマイクロホンにより集音して相手側通話端末へ伝送することで拡声通話(ハンズフリー通話)を実現する拡声通話装置が提供されている。このような拡声通話装置では、マイクロホンとスピーカの音響結合により形成される音響帰還経路によって不快なエコー(音響エコー)が聞こえてしまう場合があり、あるいは、上記帰還経路などにより任意の周波数成分における一巡利得が1倍を超えるような閉ループが通話系に形成されると当該周波数にてハウリングが生じてしまう場合があるので、上述のような不快なエコー及びハウリングの発生を防止するためにエコーキャンセラ並びに音声スイッチを備えている。
音声スイッチは、通話状態(送話状態、受話状態)を常時推定し、推定結果に基づき適切な配分で送話側及び受話側の信号経路に対して損失を挿入するものである。また、エコーキャンセラは、帰還経路のインパルス応答を適応的に同定して帰還経路への入力信号から帰還経路の擬似エコー成分を推定する適応フィルタと、適応フィルタで推定された擬似エコー成分を帰還経路からの出力信号より減算する減算器とで構成されるものである。ここで、エコーキャンセラの適応フィルタが帰還経路のインパルス応答を同定するのに通常数秒の学習時間を要するため、通話開始直後からの数秒間にはエコーキャンセラによるエコーの抑圧効果が十分に期待できず、通話系に閉ループが形成された状態にあり、不快なエコーやハウリングが生じる虞がある。
そこで本出願人は、通話開始直後における不快なエコーやハウリングの抑制を可能とした拡声通話装置を既に提案している(特許文献1参照)。
この従来例では、通話開始直後のエコーキャンセラが収束していない状態においては、音声スイッチが信号経路に挿入する損失の総量(総損失量)を十分に大きい初期値に固定する固定モードで動作することで不快なエコーやハウリングを抑制し、エコーキャンセラが十分に収束した状態においては、音声スイッチが総損失量を随時更新する更新モードで動作することで双方向(全二重)の同時通話を実現している。
特開2002−359580号公報
ところで、拡声通話装置同士の通信がIP通信等のデジタル通信の場合、パケット処理やジッタ防止のための通信バッファ処理に起因して音声データ伝送に遅延時間が発生することがある。一般に拡声通話装置間の音声データ伝送が遅延してしまう場合、伝送遅延時間が大きくなるにつれて通話時の話者のエコー許容限界値が劣化し、少ない量のエコーでも不快なエコーと感じてしまうことがわかっている。
固定モードの初期値を従来のアナログ通信の場合よりも大きく設定すれば、この不快なエコーを防ぐことは可能である。しかしながら、エコー許容限界値の劣化が数十デシベルに及ぶ場合もあり、この場合は更新モードで動作してもエコーキャンセラの抑圧量が不足して双方向(全二重)通話が実現できずに片方向(半二重)通話になってしまう。その結果、周囲騒音のレベルが高い場合に音声スイッチが送話側もしくは受話側に倒れ続けてしまい、相手側からの音声が通じないという片倒れ現象が発生するという問題があった。
本発明は上記事情に鑑みて為されたものであり、その目的は、相手側の通話装置との間で伝送する音声に伝送遅延が生じる場合でも双方向(全二重)の同時通話が実現できる拡声通話装置を提供することにある。
請求項1の発明は、上記目的を達成するために、マイクロホン及びスピーカと、相手側の通話端末から送られてくる受話信号をスピーカに伝送する受話側信号経路並びにマイクロホンで集音された送話信号を伝送して相手側の通話端末へ送る送話側信号経路に損失を挿入することで通話状態を受話及び送話に切り換える音声スイッチと、マイクロホンとスピーカの音響結合によって生じる音響エコーを抑制するエコーキャンセラと、ダブルトークを検出するダブルトーク検出手段とを備え、音声スイッチは、送話側の信号経路に損失を挿入する送話側損失挿入手段と、受話側の信号経路に損失を挿入する受話側損失挿入手段と、送話側及び受話側の損失挿入手段から挿入する損失量を制御する挿入損失量制御手段とを具備し、挿入損失量制御手段は、受話側損失挿入手段の出力点から音響エコー経路を介して送話側損失挿入手段の入力点へ帰還する経路の音響帰還利得を推定し、音響帰還利得の推定値に基づいて閉ループに挿入すべき損失量の総和を算出する総損失量算出部と、送話信号及び受話信号を監視して通話状態を推定し、この推定結果と総損失量算出部の算出値に応じて送話側損失挿入手段及び受話側損失挿入手段の各挿入損失量の配分を決定する挿入損失量分配処理部とからなり、総損失量算出部は、各帰還利得の推定値に基づいて閉ループに挿入すべき損失量の総和を算出して適応更新する更新モード、並びに総損失量を所定の初期値に固定する固定モードの2つの動作モードを有し、相手側通話端末との通話開始からエコーキャンセラが充分に収束するまでの期間には固定モードで動作するとともに、エコーキャンセラが充分収束した後の期間には更新モードで動作してなる拡声通話装置において、音声スイッチ又はダブルトーク検出手段と連動して送話側信号経路に所定の減衰量を挿入して残留エコーを減衰するエコーサプレッサを備え、エコーサプレッサは、挿入損失量分配処理部が受話状態と推定している場合においては前記所定の減衰量を送話側信号経路に挿入し、挿入損失量分配処理部が受話状態と推定していない場合においては送話側信号経路に減衰量を挿入しないことを特徴とする。
請求項1の発明によれば、相手側の通話装置との間で伝送する音声に伝送遅延が生じる場合においても、当該伝送遅延に起因して送話側信号経路に発生する残留エコーをエコーサプレッサによって減衰させることができ、その結果、双方向(全二重)の同時通話が実現できる。また、近端側話者が発した音声が誤って減衰されてしまうことによる音声の抑揚を生じさせることなく、通話時の不快なエコーのみを減衰させることが可能であり、その結果、快適な通話環境を提供することができる。
請求項の発明は、請求項の発明において、エコーサプレッサは、ダブルトーク検出手段がダブルトークを検出している場合は送話側信号経路に減衰量を挿入せず、ダブルトーク検出手段がダブルトークを検出しておらず且つ挿入損失量分配処理部が受話状態と推定している場合にのみ、送話側信号経路に前記所定の減衰量を挿入することを特徴とする。
請求項の発明によれば、請求項の発明の作用に加えて、近端側話者が発した音声が誤って減衰されてしまうことによる音声の抑揚を生じさせることなく、通話時の不快なエコーのみを減衰させることが可能であり、その結果、快適な通話環境を提供することができる。また、エコーサプレッサが誤って減衰量を挿入せずに不快な残留エコーを発生させてしまうことがなく、精度よく通話時の不快なエコーのみを減衰させることが可能となる。
請求項の発明は、請求項の発明において、エコーサプレッサは、相手側通話端末との通話開始からエコーキャンセラが充分に収束するまでの期間においては、挿入損失量分配処理部が受話状態と推定している場合にのみ、送話側信号経路に前記所定の減衰量を挿入することを特徴とする。
請求項の発明によれば、エコーキャンセラが十分に収束するまでの期間にはダブルトーク検出手段がダブルトークを検出できないため、当該期間においては挿入損失量分配処理部が受話状態と推定していれば、エコーサプレッサがダブルトーク検出手段の検出結果を無視して送話側信号経路に前記所定の減衰量を挿入するので、通話開始からエコーキャンセラが十分に収束するまでの期間においても不快な残留エコーを減衰させることができる。
請求項の発明は、請求項2又は3の発明において、エコーサプレッサは、送話側信号経路に前記所定の減衰量を挿入しているときに挿入損失量分配処理部が受話状態と推定しなくなった場合又はダブルトーク検出手段がダブルトークを検出した場合、送話側信号経路への前記所定の減衰量の挿入を瞬時に停止することを特徴とする。
請求項の発明によれば、エコーサプレッサによって送話信号が誤って減衰されることによる音声の抑揚が防止できる。
請求項の発明は、請求項1〜の何れか1項の発明において、エコーキャンセラは、エコー経路の特性を適応的に同定する適応フィルタと、近端側の信号から適応フィルタの出力を減算する減算器と、ダブルトークを検出する前記ダブルトーク検出手段とを有し、ダブルトーク検出手段によりダブルトークが検出されているときには適応フィルタの係数を更新しないことを特徴とする。
請求項の発明によれば、エコーキャンセラが有するダブルトーク検出手段を利用することで構成の簡略化並びにコストダウンが図れる。
請求項の発明は、請求項1〜の何れか1項の発明において、送話側信号経路において、エコーキャンセラ、音声スイッチ、エコーサプレッサの順序で各々の処理が実行されることを特徴とする。
請求項の発明によれば、送話側信号経路においてエコーサプレッサが音声スイッチの前段に有る場合と比較して、エコーサプレッサが誤って送話信号を減衰させてしまったときでも音声スイッチにおいて音声が抑揚してしまうことがなく、その結果、快適な通話環境を提供することができる。
請求項の発明は、請求項1〜の何れか1項の発明において、エコーサプレッサは、前記総損失量算出部が推定する音響帰還利得に応じて前記減衰量を調整することを特徴とする。
請求項の発明によれば、近端側話者が発した音声がエコーサプレッサによって誤って減衰された場合においても音声の抑揚を最小限に抑えることができる。
請求項の発明は、請求項1〜の何れか1項の発明において、エコーサプレッサは、受話信号の信号レベル平均値に応じて減衰量を調整することを特徴とする。
請求項の発明によれば、近端側話者が発した音声がエコーサプレッサによって誤って減衰された場合においても音声の抑揚を最小限に抑えることができる。
請求項の発明は、請求項の発明において、エコーサプレッサは、受話信号の信号レベルが所定のしきい値未満であるときは送話側信号経路に挿入する減衰量を所定の標準値とし、前記信号レベルがしきい値以上であるときは前記標準値よりも大きい上限値から当該標準値までの範囲内で減衰量を調整することを特徴とする。
請求項の発明によれば、請求項の発明と同様の作用を奏する。
請求項10の発明は、請求項の発明において、エコーキャンセラは、受話信号の信号レベル平均値を演算する信号レベル平均値演算部と、当該信号レベル平均値を用いてエコー経路の特性を適応的に同定する適応フィルタと、近端側の信号から適応フィルタの出力を減算する減算器とを有し、エコーサプレッサは、信号レベル平均値演算部で演算される信号レベル平均値を利用して減衰量を調整することを特徴とする。
請求項10の発明によれば、エコーキャンセラが有する信号レベル平均値演算部を利用することで構成の簡略化並びにコストダウンが図れる。
本発明によれば、相手側の通話装置との間で伝送する音声に伝送遅延が生じる場合でも双方向(全二重)の同時通話が実現できる。
本発明の実施形態1を示すブロック図である。 同上における音声スイッチの動作を説明するためのフローチャートである。 同上におけるエコーサプレッサの動作を説明するためのフローチャートである。 本発明の実施形態2を示すブロック図である。 同上におけるエコーサプレッサの動作を説明するためのフローチャートである。 本発明の実施形態3を示すブロック図である。 同上におけるエコーサプレッサの動作を説明するためのフローチャートである。 同上におけるエコーサプレッサの動作を説明するためのフローチャートである。 本発明の実施形態4を示すブロック図である。 同上におけるエコーサプレッサの動作を説明するためのフローチャートである。
以下、図面を参照して本発明の実施形態を詳細に説明する。
(実施形態1)
本実施形態の拡声通話装置は、図1に示すようにマイクロホン1及びスピーカ2と、相手側の通話端末から送られてくる受話信号をスピーカ2に伝送する受話側信号経路(図1における下側の信号経路)並びにマイクロホン1で集音された送話信号を伝送して相手側の通話端末へ送る送話側信号経路(図1における上側の信号経路)に損失を挿入することで通話状態を受話及び送話に切り換える音声スイッチ10と、マイクロホン1とスピーカ2の音響結合によって生じる音響エコーを抑制するエコーキャンセラ20と、マイクロホン1の出力信号(送話信号)を増幅するマイクロホンアンプG1と、スピーカ2の入力信号(受話信号)を増幅するスピーカアンプG2と、送話側信号経路におけるエコーキャンセラ20と音声スイッチ10との間に挿入された送話音量調整用増幅器G3と、送話側信号経路に所定の減衰量を挿入して残留エコーを減衰するエコーサプレッサ30とを備えている。
エコーキャンセラ20は適応フィルタ21と減算器22からなる従来周知の構成を有し、スピーカ2−マイクロホン1間の音響結合により形成される帰還経路(音響エコー経路)Hacのインパルス応答を適応フィルタ21により適応的に同定し、参照信号(スピーカアンプG2への入力信号)から推定したエコー成分(音響エコー)を減算器22によりマイクロホンアンプG1の出力信号から減算することで音響エコーを抑制するものである。
音声スイッチ10は、送話側信号経路に損失を挿入する送話側減衰器11と、受話側信号経路に損失を挿入する受話側減衰器12と、送話側及び受話側の各減衰器11,12から挿入する損失量を制御する挿入損失量制御部13とを具備する。挿入損失量制御部13は、受話側減衰器12の出力点Routから音響エコー経路Hacを介して送話側減衰器11の入力点Tinへ帰還する経路(以下、「音響帰還経路」という)の音響帰還利得αを推定し、音響帰還利得αの推定値α’に基づいて閉ループに挿入すべき損失量の総和(送話側減衰器11の挿入損失量と受話側減衰器12の挿入損失量の和)を算出する総損失量算出部14と、送話信号及び受話信号を監視して通話状態を推定し、この推定結果と総損失量算出部14の算出値に応じて送話側減衰器11及び受話側減衰器12の各挿入損失量の配分を決定する挿入損失量分配処理部15とからなる。なお、エコーキャンセラ20並びに音声スイッチ10は、DSP(Digital Signal Processor)のハードウェアをエコーキャンセラ用並びに音声スイッチ用のソフトウェア(プログラム)で制御することによって実現されている。従って、以下の説明における音声スイッチ10並びにエコーキャンセラ20の入出力信号(送話信号並びに受話信号)は、図示しないA/D変換器によって所定のサンプリング周期でサンプリングされ且つ量子化されている。
総損失量算出部14では、整流平滑器や低域通過フィルタ等を用いて送話側減衰器11の入力信号の短時間における時間平均パワーを推定し、同じく整流平滑器や低域通過フィルタ等を用いて受話側減衰器12の出力信号の短時間における時間平均パワーを推定し、音響帰還経路Hacにて想定される最大遅延時間において受話側減衰器12の出力信号の時間平均パワーの推定値を求め、この推定値で送話側減衰器11の入力信号の時間平均パワーの推定値を除算した値を音響帰還利得αの推定値α’とする。そして、総損失量算出部14は音響帰還利得αの推定値α’から所望の利得余裕MGを得るために必要な総損失量Ltを算出し、その値Ltを挿入損失量分配処理部15に出力する。
挿入損失量分配処理部15では、送話側減衰器11の入出力信号及び受話側減衰器12の入出力信号を監視し、これら信号のパワーレベルの大小関係並びに音声信号の有無などの情報から通話状態(受話状態、送話状態等)を判定するとともに、判定された通話状態に応じた割合で総損失量Ltを送話側減衰器11と受話側減衰器12に分配するように各減衰器11、12の挿入損失量を調整する。
ところで本実施形態における総損失量算出部14は、上述のように音響帰還利得αの推定値α’に基づいて閉ループに挿入すべき損失量の総和を算出して適応更新する更新モード、並びに総損失量を所定の初期値に固定する固定モードの2つの動作モードを有し、相手側の通話端末との通話開始からエコーキャンセラ20が充分に収束するまでの期間には固定モードで動作するとともにエコーキャンセラ20が充分に収束した後の期間には更新モードで動作する。すなわち、総損失量算出部14では音響帰還利得αの推定値α’が通話開始から所定時間(数百ミリ秒)以上継続して所定の閾値ε(例えば、通話開始時における推定値α’に対して10dB〜15dB小さい値)を下回った時点でエコーキャンセラ20が充分に収束したものとみなし、上記時点以前には総損失量を初期値に固定する固定モードで動作し、上記時点以降には推定値α’に基づいて総損失量を適応更新する更新モードに動作モードを切り換える。なお、固定モードにおける総損失量の初期値は更新モードにおいて随時更新される総損失量よりも充分に大きな値に設定される。
而して、通話開始直後のエコーキャンセラ20が充分に収束していない状態においては、固定モードで動作する総損失量算出部14によって充分に大きな値に設定される初期値の総損失量が閉ループに挿入されるため、不快なエコー(音響エコー)やハウリングの発生を抑制して安定した半二重通話を実現することができる。また、通話開始から時間が経過してエコーキャンセラ20が充分に収束した状態においては、総損失量算出部14の動作モードが固定モードから更新モードに切り換わって閉ループに挿入する総損失量が初期値よりも充分に低い値に減少するため、双方向の同時通話が実現できるものである。
ここで、更新モードにおける総損失量算出部14の具体的な動作を図2のフローチャートを参照して説明する。
総損失量算出部14は、固定モードから更新モードに移行した時点(t=t1)から所定のサンプリング周期で音響帰還利得αの推定処理を実行してその推定値α’(n)を算出し(ステップ1)、この推定値α’(n)と利得余裕MGとから、閉ループの利得余裕をMG[dB]に保つために必要とされる総損失量所望値L(n)を下式により算出する(ステップ2)。
Lr(n)=20log | α’(n)|+MG[dB]
なお、α’(n),Lr(n)はそれぞれ更新モード移行時点からn回目のサンプリングによって算出された音響帰還利得αの推定値α’並びに総損失量所望値を示す。さらに、総損失量算出部14は上式から算出したn回目の総損失量所望値Lr(n)と、前回(n−1回目)の総損失量Lt(n−1)、すなわち前回の処理で決定されて実際に挿入された総損失量に対して今回算出した総損失量所望値Lr(n)が大きい場合、前回の総損失量Lt(n−1)に微少な増加量Δi[dB]を加算した値を今回の総損失量Lt(n)=Lt(n−1)+Δiとし(ステップ3、ステップ4)、前回の総損失量Lt(n−1)に対して今回算出した総損失量所望値Lr(n)が小さい場合、前回の総損失量Lt(n−1)から微少な減少量Δd[dB]を減算した値を今回の総損失量Lt(n)=Lt(n−1)−Δdとする(ステップ5、ステップ6)。
このように総損失量算出部14による総損失量の増減をΔiまたはΔdの微少な値に抑えることにより、相手側の通話端末との通話開始直後のようにエコーキャンセラ20が収束に向かって活発に係数(フィルタ係数)を更新しているために音響帰還利得αの変化が激しい状態においても、聴感上の違和感をなくすことができる。
ここで、従来技術で説明したように拡声通話装置同士の通信がIP通信等のデジタル通信の場合、パケット処理やジッタ防止のための通信バッファ処理に起因して音声データ伝送に遅延時間が発生することがある。一般に拡声通話装置間の音声データ伝送が遅延してしまう場合、伝送遅延時間が大きくなるにつれて通話時の話者のエコー許容限界値が劣化し、少ない量のエコーでも不快なエコーと感じてしまうことがわかっている。そして、固定モードの初期値を従来のアナログ通信の場合よりも大きく設定すれば、この不快なエコーを防ぐことは可能である。しかしながら、エコー許容限界値の劣化が数十デシベルに及ぶ場合もあり、この場合は更新モードで動作してもエコーキャンセラの抑圧量が不足して双方向(全二重)通話が実現できずに片方向(半二重)通話になってしまう。その結果、周囲騒音のレベルが高い場合に音声スイッチ10が送話側もしくは受話側に倒れ続けてしまい、相手側からの音声が通じないという片倒れ現象が発生するという問題があった。
そこで本実施形態においては、送話側信号経路のエコーキャンセラ20及び音声スイッチ10の後段に、残留エコー(エコーキャンセラ20で抑圧できなかった音響エコー。以下同じ。)を減衰させるエコーサプレッサ30を追加している。エコーサプレッサ30は残留エコーを効果的に減衰する一方で、送出すべき音声信号(送話信号)は減衰させない必要がある。
本実施形態におけるエコーサプレッサ30は音声スイッチ10と連動して送話側信号経路へ減衰量を挿入しており、具体的には、図3のフローチャートに示すように動作する。すなわち、エコーサプレッサ30は音声スイッチ10の状態(挿入損失量分配処理部15による通話状態<受話状態又は送話状態>の推定結果)を常に監視し(ステップ1)、音声スイッチ10が受話状態である場合は送話側信号経路に送出すべき音声信号は無いとみなし、入力信号に所定の減衰係数を掛ける(乗算する)ことで入力信号を減衰させて出力する(ステップ2)。一方、音声スイッチ10が受話状態でない場合、エコーサプレッサ30は消去すべき残留エコーが無いかまたは送出すべき音声信号(送話信号)があると判断し、入力信号に減衰係数を掛けないことで入力信号を減衰せずにそのままのレベルで出力する(ステップ3)。
而して本実施形態によれば、相手側の通話装置との間で伝送する音声に伝送遅延が生じる場合においても、当該伝送遅延に起因して送話側信号経路に発生する残留エコーをエコーサプレッサ30によって減衰させることができ、その結果、双方向(全二重)の同時通話が実現できる。ここで、音声スイッチ10が受話状態でない場合、例えば、送話状態である場合にエコーサプレッサ30が送話側信号経路に減衰量を挿入してしまうと、近端側話者(本実施形態の拡声通話装置で通話する話者)の発した音声が誤って減衰されてしまうことにより、相手側の通話端末から聞こえる近端側話者の音声が大きくなったり、小さくなったりする音声の抑揚が生じてしまう虞がある。しかしながら本実施形態では、音声スイッチ10が受話状態であるときにエコーサプレッサ30が送話側信号経路に減衰量を挿入し、音声スイッチ10が受話状態でないときにはエコーサプレッサ30が送話側信号経路に減衰量を挿入しないので、上述のような音声の抑揚を生じさせることなく、通話時の不快なエコー(残留エコー)のみを減衰させることが可能である。
尚、送話側信号経路においてエコーサプレッサ30が音声スイッチ10の前段に有る場合、エコーサプレッサ30が誤って送話信号を減衰させてしまったときに音声スイッチ10において音声が抑揚してしまう虞があるが、本実施形態では、送話側信号経路において、エコーキャンセラ20、音声スイッチ10、エコーサプレッサ30の順序で各々の処理が実行されるので、エコーサプレッサ30が誤って送話信号を減衰させてしまったときでも音声スイッチ10において音声が抑揚してしまうことがなく、その結果、快適な通話環境を提供することができる。
ところで、本出願人は送話側信号経路における音声スイッチの後段に損失を挿入するアッテネータを設けた拡声通話装置を既に提案している(特開2003−324371号公報参照)。しかしながら、この従来装置におけるアッテネータは送話信号の瞬時パワー推定値が所定時間以上継続してしきい値以下となった時にのみ、送話側信号経路に所定量の損失を挿入するものであるため、前記しきい値以上の大音量のエコーがあるとアッテネータから損失が挿入されずに不快なエコーが聞こえてしまう場合や、近端側話者が発する音声がしきい値以下であるときに当該音声信号に誤って損失を挿入して減衰させてしまうという場合があった。これに対して本発明の拡声通話装置では、上述のように音声スイッチ10と連動してエコーサプレッサ30が減衰量を挿入しているため、上述ような不具合が生じないものである。
(実施形態2)
本実施形態のブロック図を図4に示す。但し、本実施形態の拡声通話装置は、エコーサプレッサ30がエコーキャンセラ20と連動して送話側信号経路に減衰量を挿入する点に特徴があり、それ以外の基本構成は実施形態1と共通である。故に、実施形態1と共通の構成要素には同一の符号を付して説明を省略する。
本実施形態におけるエコーキャンセラ20は、適応フィルタ21及び減算器22に加えてダブルトーク検出処理部23を備えている。ダブルトーク検出処理部23は、適応フィルタ21の収束を劣化させるレベルの信号がマイクロホンアンプG1の出力信号に含まれているか否かにより、近端側話者と遠端側話者(相手側の通話端末で通話する話者)がほぼ同時に話す状態、すなわちダブルトークを検出するものである。適応フィルタ21では、ダブルトーク検出処理部23によりダブルトークが検出された場合、フィルタ係数の発散を防止するためにフィルタ係数を更新せずにそれ以前の値に固定する。
次に、図5のフローチャートを参照して本実施形態におけるエコーサプレッサ30の動作を説明する。エコーサプレッサ30はエコーキャンセラ20のダブルトーク検出処理部23の状態を常に監視し(ステップ1)、ダブルトーク検出処理部23が非ダブルトーク状態と判定している場合は、消去すべき残留エコーが有るかまたは送話側信号経路に送出すべき音声信号は無いと判定し、入力信号に所定の減衰係数を掛けることで入力信号を減衰させて出力する(ステップ2)。ダブルトーク検出処理部23がダブルトーク状態と判定している場合、エコーサプレッサ30は送出すべき音声信号があると判断し、入力信号に減衰係数を掛けないことで入力信号を減衰せずにそのままのレベルで出力する(ステップ3)。
而して本実施形態によれば、実施形態1と同様に相手側の通話装置との間で伝送する音声に伝送遅延が生じる場合においても、当該伝送遅延に起因して送話側信号経路に発生する残留エコーをエコーサプレッサ30によって減衰させることができ、その結果、双方向(全二重)の同時通話が実現できる。また、本実施形態におけるエコーサプレッサ30はダブルトーク検出処理部23がダブルトークを検出している場合は送話側信号経路に減衰量を挿入せず、ダブルトーク検出処理部23がダブルトークを検出していない場合に送話側信号経路に減衰量を挿入するので、近端側話者が発した音声が誤って減衰されてしまうことによる音声の抑揚を生じさせることなく、通話時の不快なエコーのみを減衰させることが可能であり、その結果、快適な通話環境を提供することができる。また、本実施形態ではエコーキャンセラ20が有するダブルトーク検出手段(ダブルトーク検出処理部23)を利用しているので、別途ダブルトーク検出手段を設ける場合と比較して、構成の簡略化(DSPで実行するプログラム量の削減やDSPの低スペック化あるいはプログラムを記憶するためのROMの容量削減)並びにコストダウンが図れるという利点がある。
(実施形態3)
本実施形態のブロック図を図6に示す。但し、本実施形態の拡声通話装置は、エコーサプレッサ30が音声スイッチ10並びにエコーキャンセラ20の双方と連動して送話側信号経路に減衰量を挿入する点に特徴があり、それ以外の基本構成は実施形態1及び2と共通である。故に、実施形態1及び2と共通の構成要素には同一の符号を付して説明を省略する。
図7のフローチャートを参照して本実施形態におけるエコーサプレッサ30の動作を説明する。エコーサプレッサ30は、音声スイッチ10の状態を常に監視し(ステップ1)、音声スイッチ10が受話状態であれば、エコーキャンセラ20のダブルトーク検出処理部23がダブルトークを検出しているか否かを判断し(ステップ2)、ダブルトーク検出処理部23がダブルトークを検出していなければ、消去すべき残留エコーが有るかまたは送話側信号経路に送出すべき音声信号は無いと判定し、入力信号に所定の減衰係数を掛けることで入力信号を減衰させて出力する(ステップ3)。一方、音声スイッチ10が受話状態でない場合、若しくは音声スイッチ10が受話状態であってもダブルトーク検出処理部23がダブルトークを検出している場合、エコーサプレッサ30は残留エコーがないかまたは送出すべき音声信号があると判断し、入力信号に減衰係数を掛けないことで入力信号を減衰せずにそのままのレベルで出力する(ステップ4)。
而して本実施形態によれば、近端側話者が発した音声が誤って減衰されてしまうことによる音声の抑揚を生じさせることなく、また、エコーサプレッサ30が誤って減衰量を挿入せずに不快な残留エコーを発生させてしまうことがなく、通話時の不快なエコーのみを減衰させることが可能であり、その結果、快適な通話環境を提供することができる。
ここで、総損失量算出部14が推定する音響帰還利得αの推定値α’に応じて、エコーサプレッサ30が送話側信号経路に挿入する減衰量を調整するようにしても構わない。以下、エコーサプレッサ30が送話側信号経路に挿入する減衰量を調整する場合の動作について、図8のフローチャートを参照して説明する。
エコーサプレッサ30は、音声スイッチ10の状態を常に監視し(ステップ1)、音声スイッチ10が受話状態であれば、エコーキャンセラ20のダブルトーク検出処理部23がダブルトークを検出しているか否かを判断し(ステップ2)、音声スイッチ10が受話状態でない場合、若しくは音声スイッチ10が受話状態であってもダブルトーク検出処理部23がダブルトークを検出している場合、残留エコーがないかまたは送出すべき音声信号があると判断して入力信号を減衰せずにそのままのレベルで出力する(ステップ7)。
一方、音声スイッチ10が受話状態であり且つダブルトーク検出処理部23がダブルトークを検出していない場合、エコーサプレッサ30は入力信号に掛ける(乗算する)減衰係数を標準値SUP_MINに設定する(ステップ3)。また、音声スイッチ10の総損失量算出部14が推定した音響帰還利得αの推定値α’及び総損失量Lt(n)の和が所定のしきい値TH以上の場合(ステップ4)、エコーサプレッサ30は減衰係数を標準値SUP_MINよりも大きい上限値SUP_MAXに設定する(ステップ5)。さらに、音声スイッチ10の総損失量算出部14が推定した音響帰還利得αの推定値α’及び総損失量Lt(n)の和がしきい値TH未満の場合(ステップ4)、エコーサプレッサ30は減衰係数を標準値SUP_MINのままとする。最後に、エコーサプレッサ30は設定した減衰係数(標準値SUP_MIN又は上限値SUP_MAX)を入力信号に掛けることで入力信号を減衰させて出力する(ステップ6)。
このようにすれば、近端側話者が発した音声がエコーサプレッサ30によって誤って減衰された場合においても音声の抑揚を最小限に抑えることができる。
ところで、高いレベルの周囲騒音が定常的に存在する場合、通話開始直後においてはエコーキャンセラ20の適応フィルタ21におけるフィルタ係数の更新が相当な時間に亘って停止して十分に収束せず、そのためにダブルトーク検出処理部23がダブルトークを正しく検出することができない。したがって、上述のように音声スイッチ10が受話状態であり且つダブルトーク検出処理部23がダブルトークを検出していないという条件が満たされず、通話開始直後にエコーサプレッサ30が入力信号を減衰せずにそのままのレベルで出力してしまうために不快な残留エコーを発生させてしまう虞がある。
そこで、相手側通話端末との通話開始からエコーキャンセラ20が充分に収束するまでの期間においては、挿入損失量分配処理部15が受話状態と推定している場合にのみ、エコーサプレッサ30が送話側信号経路に所定の減衰量を挿入すれば、通話開始からエコーキャンセラ20が十分に収束するまでの期間においても不快な残留エコーを減衰させて快適な拡声通話環境が提供できる。
また、通話開始直後のように総損失量算出部14が固定モードで動作しているときに近端側及び遠端側から同時に異なる音声が入力されると、音声スイッチ10が受話状態と送話状態に交互に切り換わることにより、エコーサプレッサ30が誤動作して送話信号の信号レベルが大きく変動する、つまり、送話音声が抑揚してしまう虞がある。
そこで、送話側信号経路に所定の減衰量を挿入しているときに挿入損失量分配処理部15が受話状態と推定しなくなった場合又はダブルトーク検出処理部23がダブルトークを検出した場合、エコーサプレッサ30が送話側信号経路への所定の減衰量の挿入を瞬時に停止すれば、送話信号が誤って減衰されることによる音声の抑揚が防止できて快適な拡声通話環境ができる。
(実施形態4)
本実施形態のブロック図を図9に示す。但し、本実施形態の拡声通話装置は、エコーサプレッサ30が受話信号の信号レベル平均値を利用して減衰量を調整する点に特徴があり、それ以外の基本構成は実施形態3と共通である。故に、実施形態3と共通の構成要素には同一の符号を付して説明を省略する。
ここで、適応フィルタ21は音響エコー経路Hacのインパルス応答を適応的に同定し、遠端側の入力信号(スピーカアンプG2へ入力する受話信号)y(n)からエコー成分(音響エコー)g(n)を推定しているのであるが、このエコー成分g(n)を推定するために、次式によってフィルタ係数hp(n)を再帰的に更新している。但し、添え字のpはタップ番号、nはサンプル時間、Kはステップゲイン、F(n)は係数更新関数である。
p(n+1)=hp(n)+K・F(Ey(n))
また、Ey(n)は入力信号(受話信号)y(n)の信号レベル平均値であって、適応フィルタ21が具備する信号レベル平均値演算部24において、次式によって求められる。但し、SPANは入力信号y(n)の絶対値abs[y(n)]を加算する周期である。
そして、エコー成分(の推定値)g(n)は次式によって求められる。
そして、本実施形態におけるエコーサプレッサ30は、エコーキャンセラ20の適応フィルタ21が具備している信号レベル平均値演算部24から受話信号の信号レベル平均値Ey(n)を取得している。
次に、図10のフローチャートを参照してエコーサプレッサ30の動作を詳細に説明する。
エコーサプレッサ30は、音声スイッチ10の状態を常に監視し(ステップ1)、音声スイッチ10が受話状態であれば、エコーキャンセラ20のダブルトーク検出処理部23がダブルトークを検出しているか否かを判断し(ステップ2)、音声スイッチ10が受話状態でない場合、若しくは音声スイッチ10が受話状態であってもダブルトーク検出処理部23がダブルトークを検出している場合、残留エコーがないかまたは送出すべき音声信号があると判断して入力信号を減衰せずにそのままのレベルで出力する(ステップ8)。
一方、音声スイッチ10が受話状態であり且つダブルトーク検出処理部23がダブルトークを検出していない場合、エコーサプレッサ30が入力信号に掛ける減衰係数は、信号レベル平均値算出処理部24の算出値RS_AVE(n)(=Ey(n))に依存しており、所定の閾値THに対して、RS_AVE(n)>THならば、
減衰係数=SUP_MAX×RS_AVE(n)/RS_AVEmax・・・(1)
とし、RS_AVE(n)≦THならば、
減衰係数=SUP_MAX×RS_AVE(n)/RS_AVEmax〜SUP_MIN・・・(2)
という判定条件により決定される。なお、SUP_MAX、SUP_MINはそれぞれ大声相当(例えば、音圧○○dB以上)及び標準音量(例えば、音圧○○〜○○dB)相当の信号レベルを抑圧するために必要な減衰係数であり、RS_AVEmaxは大声相当の信号レベル平均値RS_AVE(n)である。上記(2)の判定条件については、サンプリング周期毎に(2)の判定条件を満たし続ける限りは、所定の遷移係数を乗ずることにより、減衰係数はSUP_MAX×RS_AVE(n)/RS_AVEmax→SUP_MINと徐々に小さくなるように変化し、SUP_MINが減衰係数の下限値として設定される。
具体的には、まずエコーサプレッサ30は減衰係数としてSUP_MINが設定されているかどうかを判定する(ステップ3)。もし減衰係数としてSUP_MINが設定されていなければ、エコーサプレッサ30は減衰係数に遷移係数を乗じて新たな減衰係数を設定し(ステップ4)、すでにSUP_MINが設定されていれば、これは下限値であるので減衰係数としてSUP_MINを用いる。次に、信号レベル平均値RS_AVE(n)が上記(1)の条件を満たす場合(ステップ5)、エコーサプレッサ30は減衰係数としてSUP_MAX×RS_AVE(n)/RS_AVEmaxを設定し(ステップ6)、上記(1)の条件を満たさない場合は減衰係数を変更せず、以前のステップで設定したものを用いる。最後に、エコーサプレッサ30は設定した減衰係数を入力信号に掛けることで入力信号を減衰させて出力する(ステップ7)。
而して本実施形態によれば、近端側話者が発した音声がエコーサプレッサ30によって誤って減衰された場合においても音声の抑揚を最小限に抑えることができる。しかも、本実施形態では信号レベル平均値RS_AVE(n)を演算するに当たって、エコーキャンセラ20が有する信号レベル平均値演算部24を利用しているので、別途信号レベル平均値演算出手段を設ける場合と比較して、構成の簡略化(DSPで実行するプログラム量の削減やDSPの低スペック化あるいはプログラムを記憶するためのROMの容量削減)並びにコストダウンが図れるという利点がある。
1 マイクロホン
2 スピーカ
10 音声スイッチ
11 送信側減衰器
12 受信側減衰器
13 挿入損失量制御部
14 総損失量算出部
15 挿入損失量分配処理部
20 エコーキャンセラ
21 適応フィルタ
22 減算器
30 エコーサプレッサ

Claims (10)

  1. マイクロホン及びスピーカと、相手側の通話端末から送られてくる受話信号をスピーカに伝送する受話側信号経路並びにマイクロホンで集音された送話信号を伝送して相手側の通話端末へ送る送話側信号経路に損失を挿入することで通話状態を受話及び送話に切り換える音声スイッチと、マイクロホンとスピーカの音響結合によって生じる音響エコーを抑制するエコーキャンセラと、ダブルトークを検出するダブルトーク検出手段とを備え、
    音声スイッチは、送話側の信号経路に損失を挿入する送話側損失挿入手段と、受話側の信号経路に損失を挿入する受話側損失挿入手段と、送話側及び受話側の損失挿入手段から挿入する損失量を制御する挿入損失量制御手段とを具備し、
    挿入損失量制御手段は、受話側損失挿入手段の出力点から音響エコー経路を介して送話側損失挿入手段の入力点へ帰還する経路の音響帰還利得を推定し、音響帰還利得の推定値に基づいて閉ループに挿入すべき損失量の総和を算出する総損失量算出部と、送話信号及び受話信号を監視して通話状態を推定し、この推定結果と総損失量算出部の算出値に応じて送話側損失挿入手段及び受話側損失挿入手段の各挿入損失量の配分を決定する挿入損失量分配処理部とからなり、
    総損失量算出部は、各帰還利得の推定値に基づいて閉ループに挿入すべき損失量の総和を算出して適応更新する更新モード、並びに総損失量を所定の初期値に固定する固定モードの2つの動作モードを有し、相手側通話端末との通話開始からエコーキャンセラが充分に収束するまでの期間には固定モードで動作するとともに、エコーキャンセラが充分収束した後の期間には更新モードで動作してなる拡声通話装置において、
    音声スイッチ又はダブルトーク検出手段と連動して送話側信号経路に所定の減衰量を挿入して残留エコーを減衰するエコーサプレッサを備え
    エコーサプレッサは、挿入損失量分配処理部が受話状態と推定している場合においては前記所定の減衰量を送話側信号経路に挿入し、挿入損失量分配処理部が受話状態と推定していない場合においては送話側信号経路に減衰量を挿入しないことを特徴とする拡声通話装置。
  2. エコーサプレッサは、ダブルトーク検出手段がダブルトークを検出している場合は送話側信号経路に減衰量を挿入せず、ダブルトーク検出手段がダブルトークを検出しておらず且つ挿入損失量分配処理部が受話状態と推定している場合にのみ、送話側信号経路に前記所定の減衰量を挿入することを特徴とする請求項1記載の拡声通話装置。
  3. エコーサプレッサは、相手側通話端末との通話開始からエコーキャンセラが充分に収束するまでの期間においては、挿入損失量分配処理部が受話状態と推定している場合にのみ、送話側信号経路に前記所定の減衰量を挿入することを特徴とする請求項記載の拡声通話装置。
  4. エコーサプレッサは、送話側信号経路に前記所定の減衰量を挿入しているときに挿入損失量分配処理部が受話状態と推定しなくなった場合又はダブルトーク検出手段がダブルトークを検出した場合、送話側信号経路への前記所定の減衰量の挿入を瞬時に停止することを特徴とする請求項2又は3記載の拡声通話装置。
  5. エコーサキャンセラは、エコー経路の特性を適応的に同定する適応フィルタと、近端側の信号から適応フィルタの出力を減算する減算器と、ダブルトークを検出する前記ダブルトーク検出手段とを有し、ダブルトーク検出手段によりダブルトークが検出されているときには適応フィルタの係数を更新しないことを特徴とする請求項1〜4の何れか1項に記載の拡声通話装置。
  6. 送話側信号経路において、エコーキャンセラ、音声スイッチ、エコーサプレッサの順序で各々の処理が実行されることを特徴とする請求項〜5の何れか1項に記載の拡声通話装置。
  7. エコーサプレッサは、前記総損失量算出部が推定する音響帰還利得に応じて前記減衰量を調整することを特徴とする請求項1〜の何れか1項に記載の拡声通話装置。
  8. エコーサプレッサは、受話信号の信号レベル平均値に応じて減衰量を調整することを特徴とする請求項1〜の何れか1項に記載の拡声通話装置。
  9. エコーサプレッサは、受話信号の信号レベルが所定のしきい値未満であるときは送話側信号経路に挿入する減衰量を所定の標準値とし、前記信号レベルがしきい値以上であるときは前記標準値よりも大きい上限値から当該標準値までの範囲内で減衰量を調整することを特徴とする請求項記載の拡声通話装置。
  10. エコーキャンセラは、受話信号の信号レベル平均値を演算する信号レベル平均値演算部と、当該信号レベル平均値を用いてエコー経路の特性を適応的に同定する適応フィルタと、近端側の信号から適応フィルタの出力を減算する減算器とを有し、エコーサプレッサは、信号レベル平均値演算部で演算される信号レベル平均値を利用して減衰量を調整することを特徴とする請求項記載の拡声通話装置
JP2009260173A 2009-04-21 2009-11-13 拡声通話装置 Active JP5712350B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2009260173A JP5712350B2 (ja) 2009-04-21 2009-11-13 拡声通話装置
PCT/IB2010/000876 WO2010122398A1 (en) 2009-04-21 2010-04-20 Speakerphone apparatus
CN201080017260.XA CN102405634B (zh) 2009-04-21 2010-04-20 扬声电话装置
TW99112310A TWI399968B (zh) 2009-04-21 2010-04-20 揚聲電話裝置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009103245 2009-04-21
JP2009103245 2009-04-21
JP2009260173A JP5712350B2 (ja) 2009-04-21 2009-11-13 拡声通話装置

Publications (2)

Publication Number Publication Date
JP2010273316A JP2010273316A (ja) 2010-12-02
JP5712350B2 true JP5712350B2 (ja) 2015-05-07

Family

ID=43420942

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009260173A Active JP5712350B2 (ja) 2009-04-21 2009-11-13 拡声通話装置

Country Status (1)

Country Link
JP (1) JP5712350B2 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5432741B2 (ja) * 2010-01-21 2014-03-05 パナソニック株式会社 拡声通話装置
JP5212460B2 (ja) * 2010-12-28 2013-06-19 株式会社Jvcケンウッド オーディオ信号処理装置およびオーディオ信号処理方法
JP6945158B2 (ja) * 2017-06-16 2021-10-06 パナソニックIpマネジメント株式会社 通話装置、プログラム及び通話システム
JP7334308B1 (ja) 2022-06-16 2023-08-28 八重洲無線株式会社 複信方式の無線通信におけるハウリングキャンセル方式及び無線通信機

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3268572B2 (ja) * 1994-02-10 2002-03-25 日本電信電話株式会社 反響消去装置及び方法
JPH07297901A (ja) * 1994-04-25 1995-11-10 Toshiba Corp 無線電話装置
JPH10229354A (ja) * 1997-02-14 1998-08-25 Fujitsu Ltd エコー制御装置
JP2000224081A (ja) * 1999-02-04 2000-08-11 Nec Corp エコーキャンセラ装置
JP4075835B2 (ja) * 2004-03-30 2008-04-16 松下電工株式会社 拡声通話装置
JP4579301B2 (ja) * 2006-01-17 2010-11-10 三菱電機株式会社 エコー消去装置

Also Published As

Publication number Publication date
JP2010273316A (ja) 2010-12-02

Similar Documents

Publication Publication Date Title
CN105577961B (zh) 增益控制器的自动调谐
JP4257113B2 (ja) 音響エコーの相殺および抑制を実行する利得制御方法
US8229147B2 (en) Hearing assistance devices with echo cancellation
EP1424846A2 (en) Acoustic echo canceller
JP5086769B2 (ja) 拡声通話装置
EP1446894A1 (en) Echo canceller ensuring further reduction in residual echo
JP4069595B2 (ja) 拡声通話装置
JP3979169B2 (ja) エコーキャンセラ
TWI399968B (zh) 揚聲電話裝置
JP5712350B2 (ja) 拡声通話装置
JP5963077B2 (ja) 通話装置
JP5509387B2 (ja) エコーキャンセラ
JP5297396B2 (ja) 拡声通話装置
JP3268572B2 (ja) 反響消去装置及び方法
JP3941581B2 (ja) 拡声通話装置
JP4900185B2 (ja) 拡声通話装置
JP5432741B2 (ja) 拡声通話装置
JP4380688B2 (ja) 通話装置
JP4003739B2 (ja) 拡声通話機
JP4900184B2 (ja) 拡声通話装置
JP3941580B2 (ja) 拡声通話装置
JP2007124162A (ja) 拡声通話装置
JP2000270089A (ja) 拡声通話装置
JPH11284550A (ja) 音声入出力装置
WO2010122398A1 (en) Speakerphone apparatus

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20120118

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120910

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131024

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131126

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140415

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20141007

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141209

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150107

R151 Written notification of patent or utility model registration

Ref document number: 5712350

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151