JP2004120717A - Voice input system and communication system - Google Patents

Voice input system and communication system Download PDF

Info

Publication number
JP2004120717A
JP2004120717A JP2002313459A JP2002313459A JP2004120717A JP 2004120717 A JP2004120717 A JP 2004120717A JP 2002313459 A JP2002313459 A JP 2002313459A JP 2002313459 A JP2002313459 A JP 2002313459A JP 2004120717 A JP2004120717 A JP 2004120717A
Authority
JP
Japan
Prior art keywords
microphone
input
audio signal
sound
echo
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002313459A
Other languages
Japanese (ja)
Other versions
JP4138449B2 (en
Inventor
Masanobu Otomo
大友 正信
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Marantz Japan Inc
Original Assignee
Marantz Japan Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Marantz Japan Inc filed Critical Marantz Japan Inc
Priority to JP2002313459A priority Critical patent/JP4138449B2/en
Priority to US10/660,322 priority patent/US20040059571A1/en
Priority to EP03020892A priority patent/EP1404147A3/en
Publication of JP2004120717A publication Critical patent/JP2004120717A/en
Application granted granted Critical
Publication of JP4138449B2 publication Critical patent/JP4138449B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a voice input system and a communication system capable of assuring clear voice input, even in a noisy surrounding. <P>SOLUTION: The voice input system comprises an echo canceller section 120 for subtracting a pseudo-echo signal generated by an adaptive filter 121, based on a voice signal input to a first input terminal, from a transmission voice signal input to a second input terminal, thereby removing echo components in the transmission voice signal; a main microphone 151 for receiving sounds mainly from an target sound source; a reference microphone 152, positioned at a predetermined distance to the main microphone 151 for mainly receiving sounds other than those from the target sound source; and an voice delay section 180 for giving predetermined delays to the transmission voice signal from the main microphone 151. The delay time in the voice delay section 180 is set to be within the delay time of the echo components which are removed by the echo canceller section 120. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は音声入力システム及び通信システムに関し、特に、通信装置を使用する周囲に騒音が存在する環境下であっても明瞭な音声入力の確保に適した音声入力システム及び通信システムに関する。
【0002】
【従来の技術】
通信システムに用いられる音声入力システムとして、通信装置を使用する周囲に騒音が存在する環境下であつても明瞭な音声入力を行うためにノイズキャンセラと呼ばれる技術が存在している。
このノイズキャンセラの技術としては、以下の▲1▼、▲2▼及び▲3▼が広く知られている。
▲1▼第一及び第二のマイクロホンを離隔配置し、第二のマイクロホン出力の遅延信号と第一のマイクロホンの出力との差分を第一の加算手段で形成し、第二のマイクロホン出力と第一のマイクロホン出力の遅延信号との差分を第二の加算手段で形成する。この両者の差分をとることにより、騒音成分をキャンセルすることが、以下の特許文献1に記載されている。
【0003】
▲2▼第一のマイクロホンからの入力信号に含まれる音声信号と騒音信号とのレベル差から、前記入力信号から騒音成分を除去した音声信号を生成することが、以下の特許文献2に記載されている。
【0004】
▲3▼第一のマイクロホンより音声信号を入力し、第二のマイクロホンより騒音・音声信号を入力し、第二のマイクロホンからの入力信号中に含まれる騒音の伝達関数を推定し擬似騒音成分を生成し、第一のマイクロホンからの入力信号から差し引くことにより騒音成分を除去した音声信号を生成することが、以下の特許文献2に記載されている。
【特許文献1】
特開平11−18186号公報
【特許文献2】
特開平9−36763号公報
【0005】
【発明が解決しようとする課題】
以上の▲1▼〜▲3▼のノイズキャンセラの技術には、それぞれ以下の(ア)、(イ)及び(ウ)に述べるような不具合が存在している。
(ア)上記▲1▼の技術では、騒音が四方のある特定方向から発せられ、かつ別のある特定方向からは目的音のみが発せられる環境下においては、目的音が良好なS/Nをもって取得できることになる。
しかしながら、その騒音がある特定の方向と違った角度から発せられた騒音だったり、障害物に反響しある特定の方向と違った角度で入ってしまった騒音だったり、或いは、目的音と同一方向の背景での騒音だったりした場合には、それらの騒音をキャンセルできなくなってしまうという問題がある。
【0006】
(イ)上記▲2▼の技術では、収音された音声信号と騒音信号にかなりのレベル差がある場合には、騒音成分を除去することができる。
しかしながら、音声信号と騒音信号にレベル差が殆どない場合や、騒音信号のほうが大きい場合、騒音成分を除去できないという問題が発生する。
【0007】
(ウ)上記▲3▼の技術では、第二のマイクロホンより収音した信号に含まれる騒音の伝達関数より推定した擬似騒音成分が、第一のマイクロホンより収音した騒音成分と一致した場合はキャンセルすることができる。
しかしながら、騒音の音質や音量が突然に変化してしまう場合などにおいては、推定した擬似騒音成分と第一のマイクロホンより収音した騒音成分が不一致となり、擬似騒音成分を除去した後の音声信号が異なる騒音を含む不自然な音になってしまうという新たな問題が発生する。
【0008】
本発明は上述した問題点に鑑みてなされたものであって、目的音源と騒音源との発生方向に拘わらず、又、目的音と騒音とのレベル差に拘わらず、更には、音量や音質が突発的に変化する騒音であっても、これらの騒音を良好に除去し、周囲に騒音が存在する環境下であっても明瞭な音声入力の確保に適した音声入力システム及び通信システムを実現することを目的とする。
【0009】
【課題を解決するための手段】
そこで、本件出願の発明者は、前記課題を解決するために鋭意検討を重ねた結果、既知のノイズキャンセラに関するシステムを用いるのではなく、エコーキャンセラを本来の用途とは異なるノイズキャンセラとして動作させることにより前記課題を解決できることを新たに見いだした。
加えて、エコーキャンセラをノイズキャンセラとして動作させるに際しての周辺回路構成をも併せて検討した結果、本発明に到達した。
【0010】
すなわち、上記の課題を解決する手段としての本願発明は、以下に述べる構成のものである。
(1)請求項1に記載の発明は、第1入力端子に入力された音声信号に基づいて適応フィルタが発生した疑似エコー信号を第2入力端子に入力された送信用音声信号から減算することにより、送信用音声信号に混入されているエコー成分を除去するエコーキャンセラ部と、目的音源からの音を中心に収音を行う主マイクロフォンと、前記主マイクロフォンと所定の間隔をおいて配置され目的音源以外からの音を中心に収音を行う参照マイクロフォンと、前記主マイクロフォンからの送信用音声信号に所定の遅延を与える音声遅延部と、を備え、前記参照マイクロフォンからの音声信号を前記エコーキャンセラ部の第1入力端子に入力し、前記音声遅延部で遅延を与えられた前記主マイクロフォンからの送信用音声信号を前記エコーキャンセラ部の第2入力端子に入力し、前記エコーキャンセラ部が除去するエコー成分の遅延時間の範囲内に、前記音声遅延部での遅延時間を合わせる、ことを特徴とする音声入力システムである。
【0011】
斯かる構成の発明では、主マイクロフォンによって目的音源からの音を中心に収音を行い、参照マイクロフォンによって主に目的音源以外からの音の収音を行い、参照マイクロフォンからの音声信号をエコーキャンセラ部の第1入力端子に入力し、音声遅延部で遅延を与えられた主マイクロフォンからの送信用音声信号を前記エコーキャンセラ部の第2入力端子に入力し、エコーキャンセラ部が除去するエコー成分の遅延時間の範囲内に、前記音声遅延部での遅延時間を合わせることで、第1入力端子に入力された音声信号に基づいて適応フィルタが発生した疑似エコー信号を第2入力端子に入力された送信用音声信号から減算することにより、送信用音声信号に混入されている目的音源以外からの音(騒音)をエコー成分と同様に扱って除去することができる。
【0012】
この結果、目的音源と騒音源との発生方向に拘わらず、又、目的音騒音とのレベル差に拘わらず、更には、音量や音質が突発的に変化する騒音であっても、これらの騒音を良好に除去し、周囲に騒音が存在する環境下であっても明瞭な音声入力の確保が可能になる。
【0013】
(2)請求項2に記載の発明は、第1入力端子に入力された音声信号に基づいて適応フィルタが発生した疑似エコー信号を第2入力端子に入力された送信用音声信号から減算することにより、送信用音声信号に混入されているエコー成分を除去するエコーキャンセラ部と、目的音源からの音を中心に収音を行う主マイクロフォンと、前記主マイクロフォンと所定の間隔をおいて配置され目的音源以外からの音を中心に収音を行う参照マイクロフォンと、前記主マイクロフォンからの送信用音声信号に所定の遅延を与える音声遅延部と、外部システムからの受信信号を受けると共に前記エコーキャンセラ部により処理された送信用音声信号を外部システムに送るインタフェースと、前記インタフェースを介して得られた受信信号を音声として出力するスピーカとを備え、前記参照マイクロフォンからの音声信号を前記エコーキャンセラ部の第1入力端子に入力し、前記音声遅延部で遅延を与えられた前記主マイクロフォンからの送信用音声信号を前記エコーキャンセラ部の第2入力端子に入力し、前記エコーキャンセラ部が除去するエコー成分の遅延時間の範囲内に、前記音声遅延部での遅延時間を合わせる、ことを特徴とする音声入力システムである。
【0014】
斯かる構成の発明では、主マイクロフォンで目的音源からの音を中心に収音を行い、参照マイクロフォンで目的音源以外からの音を中心に収音を行い、参照マイクロフォンからの音声信号をエコーキャンセラ部の第1入力端子に入力し、音声遅延部で遅延を与えられた主マイクロフォンからの送信用音声信号を前記エコーキャンセラ部の第2入力端子に入力し、エコーキャンセラ部が除去するエコー成分の遅延時間の範囲内に、前記音声遅延部での遅延時間を合わせることで、第1入力端子に入力された音声信号に基づいて適応フィルタが発生した疑似エコー信号を第2入力端子に入力された送信用音声信号から減算することにより、送信用音声信号に混入されている目的音源以外からの音(騒音)やスピーカからの音(ハウリング音)をエコー成分と同様に扱って除去することができる。
【0015】
この結果、目的音源と騒音源との発生方向に拘わらず、又、目的音騒音とのレベル差に拘わらず、更には、音量や音質が突発的に変化する騒音であっても、これらの騒音を良好に除去し、周囲の騒音やスピーカからの音が存在する環境下であっても明瞭な音声入力の確保が可能になる。
【0016】
(3)請求項3に記載の発明は、前記主マイクロフォンと前記参照マイクロフォンとはそれぞれ遮蔽部材により所望の収音を行うように構成された、ことを特徴とする請求項1若しくは請求項2のいずれかに記載の音声入力システムである。
【0017】
斯かる構成の発明では、上記(1)又は(2)の音声入力システムにおいて、主マイクロフォンは遮蔽部材により目的音源からの音を中心に収音を行い、参照マイクロフォンは遮蔽部材により主に目的音源以外からの音の収音を行うように構成されている。
【0018】
この結果、上記(1)又は(2)において、目的音源と騒音源との発生方向に拘わらず、又、目的音騒音とのレベル差に拘わらず、更には、音量や音質が突発的に変化する騒音であっても、これらの騒音を良好に除去し、周囲の騒音やスピーカからの音が存在する環境下であっても明瞭な音声入力の確保が可能になる。
【0019】
(4)請求項4に記載の発明は、前記主マイクロフォンと前記参照マイクロフォンとはそれぞれ指向性により所望の収音を行うように構成された、ことを特徴とする請求項1若しくは請求項2のいずれかに記載の音声入力システムである。
【0020】
斯かる構成の発明では、上記(1)又は(2)の音声入力システムにおいて、主マイクロフォンは指向性により目的音源からの音を中心に収音を行い、参照マイクロフォンは指向性により目的音源以外からの音を主に収音を行うように構成されている。
【0021】
この結果、上記(1)又は(2)において、目的音源と騒音源との発生方向に拘わらず、又、目的音騒音とのレベル差に拘わらず、更には、音量や音質が突発的に変化する騒音であっても、これらの騒音を良好に除去し、周囲の騒音やスピーカからの音が存在する環境下であっても明瞭な音声入力の確保が可能になる。
【0022】
(5)請求項5に記載の発明は、前記主マイクロフォンと前記参照マイクロフォンとはそれぞれ遮蔽部材の具備、更には指向性との組み合わせにより所望の収音を行うように構成された、ことを特徴とする請求項1若しくは請求項2のいずれかに記載の音声入力システムである。
【0023】
斯かる構成の発明では、上記(1)又は(2)の音声入力システムにおいて、主マイクロフォンは遮蔽部材と指向性との組み合わせにより目的音源からの音を中心に収音を行い、参照マイクロフォンは遮蔽部材と指向性との組み合わせにより目的音源以外からの音を主に収音を行うように構成されている。
【0024】
この結果、上記(1)又は(2)において、目的音源と騒音源との発生方向に拘わらず、又、目的音騒音とのレベル差に拘わらず、更には、音量や音質が突発的に変化する騒音であっても、これらの騒音を良好に除去し、周囲の騒音やスピーカからの音が存在する環境下であっても明瞭な音声入力の確保が可能になる。
【0025】
(6)請求項6に記載の発明は、有線若しくは無線により通信を行う通信システムであって、通信を行う少なくとも一方の側の音声入力に請求項1乃至請求項5のいずれかの音声入力システムを用いたことを特徴とする通信システムである。
【0026】
斯かる構成の発明では、有線若しくは無線により通信を行う通信システムに対して、通信を行う少なくとも一方の側の音声入力に(1)〜(5)のいずれかの音声入力システムを用いるように構成されている。
【0027】
この結果、有線若しくは無線により通信を行う通信システムにおいて、目的音源と騒音源との発生方向に拘わらず、又、目的音騒音とのレベル差に拘わらず、更には、音量や音質が突発的に変化する騒音であっても、これらの騒音を良好に除去し、周囲の騒音やスピーカからの音が存在する環境下であっても明瞭な音声入力の確保が可能になる。
【0028】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態例の音声入力システムと通信システムとを詳細に説明する。
尚、以下の実施の形態例では、無線通信を用いた通信システムを具体例にして説明を行う。
【0029】
図1は、本発明の第1の実施の形態例の電気的構成を示すブロック図である。又、図2は、本発明の第1の実施の形態例の音声入力システムの主要構成部分であるエコーキャンセラ部の本来の使用方法を示すブロック図である。
【0030】
まず、図2に基づいて、エコーキャンセラを本来の用途として用いたシステムを説明する。
10は電話インタフェースであり、有線方式の電話回線あるいは無線電話回線などが回線側(図中の右側)に接続されており、他方にはエコーキャンセラ部を介してマイクロフォンとスピーカとが接続される。
【0031】
20は、送信用音声信号に混入されているエコー成分を除去するエコーキャンセラ部である。
エコーキャンセラ部20は、第1入力端子(受信入力端子)20aに入力された音声信号に基づいて適応フィルタ21が発生した疑似エコー信号を第2入力端子(送信入力端子)20bに入力された送信用音声信号から減算器22で減算することにより、マイクロフォンからの送信用音声信号に混入されているエコー成分を除去する。
【0032】
30は受信用音声信号を増幅するオーディオアンプであり、40はオーディオアンプ30で増幅された音声信号を電気/音響変換して音声として出力するスピーカであり、50は目的音源からの音(送話者による送信用音声)を音響/電気変換するために設けられたマイクロフォンである。
尚、マイクロフォン50は目的音源からの音だけではなく、各種反射経路を介したスピーカ40からの受信用音声についても音響/電気変換を行っている。
【0033】
斯かる構成において、回線側からの受信用音声はエコーキャンセラ部20を通過し、オーディオアンプ30で増幅された後、スピーカ40で電気/音響変換されて音声(受信用音声)として出力されている。
尚、スピーカ40とマイク50がある程度近接の状態に位置している場合では、マイク50はスピーカ40からの音声(騒音)を拾うことになる。
【0034】
又、マイクロフォン50は目的音源からの音(送信用音声)と共にスピーカ40から出力された受信用音声を音響/電気変換して送信用音声信号を生成している。
この送信用音声信号は、エコーキャンセラ部20の減算部22で、受信用音声信号から生成された疑似エコー信号が除去されることで、エコー成分が除去された状態の信号になる。
そうして、エコー成分が除去された状態の送信用音声信号は電話インタフェース10を介して回線側に送出される。
【0035】
以上のエコーキャンセラ部20は、あくまでもスピーカ40から出力された受信用音声が反射経路を経由してマイクロフォン50に混入してエコー成分を生成している場合に、そのエコー成分を除去する目的で使用されている。
このため、エコーキャンセラ部20では、スピーカ40からマイクロフォン50に回り込むエコー成分の遅延時間を考慮し、その遅延時間内に適応フィルタ21において疑似エコー信号を生成し得るように構成されている。
【0036】
以下に、図1を参照して本実施の形態例の音声入力システム及び通信システムについて説明する。
101は全体を制御する制御部であって、後述する音声遅延部の遅延時間を設定し、又、後述するエコーキャンセラ部に対しては各種レベルの制御及びタイミング制御等を行い、更に、無線インタフェース対しては各種レベルの制御及びアラーム音等の出力制御などを行う。
【0037】
110は、制御部101によって制御される無線インタフェースである。
無線インタフェース110は、無線機が図中の右側(回線側)に接続されており、他方にはエコーキャンセラ部を介してマイクロフォンとオーディオアンプを介してスピーカとが接続される。
又、無線インタフェース110は、送信信号及び受信信号の周波数特性の補正も行う。
【0038】
120は送信用音声信号に混入されているエコー成分を除去するエコーキャンセラ部であり、図2に示したエコーキャンセラ部20と同等な回路構成である。このエコーキャンセラ部120では、第1入力端子120aに入力された音声信号に基づいて適応フィルタ121が発生した疑似エコー信号を第2入力端子120bに入力された送信用音声信号から減算器122で減算することにより、マイクロフォンからの送信用音声信号に混入されているエコー成分を除去する。
【0039】
尚、このエコーキャンセラ部120としては、市販のエコーキャンセラLSIを使用することが可能であるが、通常の使用方法(接続方法)とは異なり、後述する参照マイクロフォンからの音声信号が第1入力端子120aに印加されている。
【0040】
130は無線インタフェース110を介して無線機から得た受信用音声を増幅するオーディオアンプであり、140はオーディオアンプ130で増幅された音声信号を電気/音響変換して音声として出力するスピーカである。
【0041】
151は、目的音源からの音(送話者による送信用音声)S(1)を中心に音響/電気変換するために設けられた主マイクロフォンである。
この主マイクロフォン151は、指向性あるいは遮蔽部材161のいずれか若しくは両方の組み合わせによって、目的音源を中心とした収音を行うように構成されている。
【0042】
尚、マイクロフォン151は目的音源からの音S(1)だけではなく、周囲の騒音N(1)〜N(n)や各種反射経路を介したスピーカ140からの受信用音声をも含めた状態で音響/電気変換している。
【0043】
152は、参照マイクロフォンである。
参照マイクロフォン152は、主マイクロフォン151と所定の間隔をおいて配置されていて、目的音源以外からの音(主に、周囲の騒音N(1)〜N(n))を中心にして目的音源からの音S(1)をなるべく除外した状態で収音を行う。
この参照マイクロフォン152は、指向性あるいは遮蔽部材162のいずれか若しくは両方の組み合わせによって、周囲の騒音を中心とした収音を行うように構成されている。
【0044】
171は主マイクロフォン151からの送信用音声信号を所定レベルまで増幅するマイクアンプであり、172は参照マイクロフォン152からの音声信号を所定レベルまで増幅するマイクアンプである。
尚、マイクアンプ172で増幅された参照マイクロフォン152からの音声信号が、エコーキャンセラ部120の第1入力端子120aに入力される。
【0045】
180は主マイクロフォン151からの送信用音声信号に所定の遅延を与える音声遅延部であり、この音声遅延部180で遅延を与えられた主マイクロフォン151からの送信用音声信号がエコーキャンセラ部120の第2入力端子120bに入力される。
【0046】
尚、以上の構成において、制御部101は、エコーキャンセラ部120が除去することが可能なエコー成分の遅延時間の範囲内に、音声遅延部180での遅延時間が合う(含まれる)ように制御を行う。
【0047】
200は通信システムの一方を構成する通信装置である無線機で、ここでは、本実施の形態例の音声入力システムが無線インタフェース110を介して接続されている。 又、300は通信システムの他方を構成する無線機であり、本実施の形態例の音声入力システムは接続されておらず、ヘッドセット310を介して通話者が無線で通話を行う。
【0048】
ここで、本実施の形態例の音声入力システム及び通信システムとして、ファーストフード店のドライブスルーでの注文受け付け用に構成されたものを具体例として説明する。
【0049】
以上の構成において、主マイクロフォン151では、主にドライブスルーに来た客の肉声(目的音源からの音S(1);以下、「目的音」と言う)を収音するように設置しておく。
又、参照マイクロフォン152では、ドライブスルーに来た客の自動車のエンジン音(N(1))やラジエターの冷却ファンの音(N(2))、又は、路上を通行しているその他の自動車の走行音等(N(n))…などの周囲の騒音を収音するように設置しておく。
【0050】
このような音声入力システム及び通信システムを備えたドライブスルーにおいて、ドライブスルーに来た客は車から降りることなく注文する際に、主マイクロフォン151の前に運転者が車を近接状態に寄せる、いわゆる幅寄せして車を停車することが望ましい。
【0051】
しかしながら、全ての客が主マイクロフォン151に車を幅寄せして停車するとは限らない。このため、車の運転席に居る客と主マイクロフォン151の間に1m程度或いはそれ以上の間隔が空いてしまう場合が生じる。
【0052】
斯かる場合においては、主マイクロフォン151は、目的音だけではなく、ドライブスルーに来た客の自動車のエンジン音(N(1))やラジエターの冷却ファンの音(N(2))、更には、路上を通行しているその他の自動車の走行音等(N(n))などの各種の周囲の騒音も収音してしまうことになる。
【0053】
そのため、遮蔽部材161は、主マイクロフォン151に各種騒音が入り込みにくくするように設置しておくことが望ましい。
ここで、遮蔽部材161は形状として具体的に板状のものが挙げられるが、遮音効果を考慮して例えば筒状のものなど使用状況に合わせて適宜選択するのが望ましい。
【0054】
他方、遮蔽部材162は、参照マイクロフォン152にドライブスルーに来た客の肉声である(S(1))が入り込まないように、参照マイクロフォン152のそばで、参照マイクロフォン152と客の口元を結ぶ線に直交し、客の肉声(S(1))のみを遮蔽するように設置しておくことが望ましい。
又、遮蔽部材162は、遮蔽部材161と同様に、形状として具体的に板状のものや筒状のものが挙げられるが、遮音効果を考慮して使用状況に合わせて適宜選択するのが望ましい。
【0055】
又、参照マイクロフォン152及び主マイクロフォン151の間隔は最長でも1.5mに設置することが望ましい。
このことより、主マイクロフォン151に先に騒音が到着し参照マイクロフォン152に同じ騒音が到達するまでの最大の騒音の到達時間差は、音速を340m/秒とした場合に、1.5/340≒0.0044秒=4.4ミリ秒、となる。
【0056】
この実施の形態例のために本件発明者が実験に使用したエコーキャンセラ部120のためのエコーキャンセラICは、エコーをキャンセルするための許容時間として1ミリ秒〜59ミリ秒という範囲になっていた。
【0057】
従って、使用するエコーキャンセラICで騒音をキャンセルするためには、4.4+1=5.4ミリ秒以上となり、5.4ミリ秒〜59ミリ秒の範囲において、主マイクロフォン151で収音した目的音+騒音の信号を遅延させる必要が生じる。
【0058】
そこで、音声遅延部180は、低雑音、低歪率の音声再生特性を持ち、5.4ミリ秒以上の音声遅延時間が設定できるものを用いる必要がある。
尚、本実施の形態例のための実験では、制御部101からの制御によって、音声遅延部180での音声遅延時間を20ミリ秒に設定し実験した。
【0059】
つまり、音声遅延部180としては、収音した信号をある設定時間のみ遅延させるだけで、信号の内容には極力変化を与えないデジタル音声ディレイICが好ましい。
【0060】
尚、エコーキャンセラ部120の第1入力端子120aには、本来の用途において携帯電話等の受信信号が入力されるが、本実施の形態例では、参照マイクロフォン152で収音した(N(1))〜(N(n))の周囲の騒音の信号を入力したため、参照マイクロフォン152で収音した周囲の騒音が携帯電話の受信信号の場合と同様に処理される。
【0061】
エコーキャンセラ部120の第2入力端子120bには、主マイクロフォン151で収音したドライブスルーに来た客の肉声(S(1))と(N(1))〜(N(n))の騒音が、音声遅延部180で課せられた遅延時間だけ遅れた音声信号(S(1))’及び(N(1))’〜(N(n))’として入力される。
【0062】
エコーキャンセラ部120では、第1入力端子120aに入力された音声信号((N(1))〜(N(n))の周囲の騒音)をA/Dコンバータ(図示せず)により参照用ディジタル音声信号に変換したうえで、適応フィルタ121にて情報の保持及び更新を行っている。
【0063】
又、第2入力端子120bに入力された送信用音声信号((S(1))’及び(N(1))’〜(N(n))’)もA/Dコンバータ(図示せず)により送信用ディジタル音声信号に変換される。
そうして、この送信用ディジタル音声信号と前もって保持した参照用ディジタル音声信号を比較し同様の情報が混入していた場合、エコーと判断し減算器122を用い、保持された参照用ディジタル音声信号にレベル補正を加え、送信用ディジタル音声信号からキャンセルする。
その後、送信用ディジタル音声信号は、D/Aコンバータ(図示せず)によってアナログ信号に戻される。
【0064】
これらの一連の動作によって、主マイクロフォン151で収音され遅延された目的音(S(1))’及び(N(1))’〜(N(n))’は、エコーキャンセラ部120の送信出力端子から出力される際には聴覚上目的音(S(1))’のみと言ってよいほどにノイズキャンセルが行われ、結果的に、(N(1))’〜(N(n))’の周囲の騒音がキャンセルされた信号が得られることになる。
【0065】
この目的音(S(1))’信号は、無線インタフェース110に入力され、必要に応じて周波数特性を補正されたり無線機200の送信入力レベルに調整された後、無線機200に送られる。
ここで、目的音(S(1))’信号は無線機200で送信電波に変調として加えられ、無線機300に対して送信される。
【0066】
この送信電波を無線機300が受信し音声信号に復調し、ヘッドセット310のヘッドホン部より音声として出力される。
このヘッドセット310は、ドライブスルーを備えた店の店員が身に付けて客の注文を聞くためのものであるが、周囲の騒音(N(1))〜(N(n))はキャンセルされており、客の声(目的音)のみを聞くことになって注文等のやり取りを簡便で間違いなく行うことになり、業務効率がアップする。
【0067】
店員の会話はヘッドセット310のマイクロホン部により収音され、無線機300に送られる。店員は静かな店の中でヘッドセット310を用い会話することに加え、ヘッドセット310のマイクロホンが口元にある。
従って、その会話音声には全くと言ってよいほどに騒音が混じらない明瞭な音声となる。
【0068】
そうして、店員の会話音声は無線機300で、送信電波に変調として加えられ送信される。この送信電波は、無線機200によって受信され音声信号に復調され、無線インタフェース110に送られる。
【0069】
該音声信号は、無線インタフェース110で、周波数特性を補正したりレベル調整され、オーディオアンプ130に送られる。
そうして、オーディオアンプ130では入力された音声信号を、予め設定された利得で増幅しスピーカ140に出力される。
ここで、スピーカ140は店員の会話音声を適当な音量で再生するので、客は店員の明瞭な会話音声を聞くことができる。
【0070】
又、スピーカ140からの出力音は、参照マイクロフォン152及び主マイクロフォン151でも収音されることになるが、周囲の騒音((N(1))〜(N(n))の場合と同様にキャンセルされてしまい、エコーやハウリングになることはない。
更に、この場合、スピーカ140から出力する音声信号は、エコーキャンセラ部120の内部を通過しておらず、この点が従来のエコーキャンセラ部の典型的で本来の使用方法とは異なっている新規な点である。
【0071】
尚、以上の動作をするにあたって、制御部101は、音声遅延部180の遅延時間を設定し、又、エコーキャンセラ部120に対して必要に応じ各種レベルの制御及びタイミング制御等を行っている。
又、制御部101は、無線インタフェース110に対して各種レベルの制御及びアラーム音等の出力制御、各種センサー情報の処理等を行っている。
【0072】
尚、図示されていないが、音声遅延部180の入力側にA−D変換器が設けられ、音声遅延部180の出力側にD−A変換器が設けられる。
そうして、図示されていないが、エコーキャンセラ部120の第2入力端子120bにA−D変換器が設けられ、出力側にD−A変換器が設けられる。
そこで、エコーキャンセラー部120と音声遅延部180とを一体に構成することで、中間のD−A変換器とA−D変換器とを削除することが可能となり、コストメリットが生じることになる。
【0073】
又、本実施の形態例の音声入力システム及び通信システムの用途として、ドライブスルーシステムにとどまらず、他に、クレーンの操縦者とクレーンのワイヤーがけ作業員との無線連絡、ジェット旅客機の地上移動時に旅客機コックピット内のパイロットと旅客機をトラクターで移動する作業員との無線連絡など、騒音のある作業環境の下で無線連絡を行う場合等に利用可能である。
【0074】
これらの場合には、ヘッドセットにおける通常のマイク部分に主マイクロフォンを設け、それ以外のいずれかの位置(ヘッドバンド部分など)に参照マイクロフォンを配置すればよい。
又、電話端末、テレビ会議装置、自動車ナビゲーション装置などの音声入力装置に使用することも可能である。
【0075】
以上のように、本実施の形態例では、従来とは異なる新たな騒音解決手法として、エコーキャンセラを本来とは異なる手法で採用することによって、目的音源と騒音源との発生方向に拘わらず、騒音を良好に除去し、周囲に騒音が存在する環境下であっても明瞭な音声入力の確保が行える。
【0076】
又、目的音と騒音とのレベル差に拘わらず、騒音を良好に除去し、周囲に騒音が存在する環境下であっても明瞭な音声入力の確保が行える。
更に、音量や音質が突発的に変化する騒音であっても、騒音を良好に除去し、周囲に騒音が存在する環境下であっても明瞭な音声入力の確保が行える。
【0077】
【実施例】
上記で説明の音声入力システムについて、エコーキャンセラ部120として、携帯電話用に開発された沖電気株式会社のLSI「MSM7731−02」を用い、このLSIの本来の接続方法とは異なるように上述した実施の形態例の接続によって回路を構成した。
又、音声遅延部180にデジタル音声ディレイICを用い且つ音声遅延時間を20ミリ秒に設定して、実験を行った。
【0078】
ここで、騒音として、人の声の周波数帯域とほぼ同じ程度の周波数帯域で発生する、ディーゼル自動車のエンジン音を用いて実験を行った。
その結果は、ノイズキャンセル後の音声には自動車のエンジン音を聞き取ることができない程に軽減されており、客側の肉声だけが店員側のヘッドセットより明瞭に聞こえた。
【0079】
従って、客側からの音声が明瞭であって認識できるほどには騒音が含まれておらず、離れた騒音のある場所にいる客の注文内容を聞き逃したり聞き間違いをすることがなくなり、よって、客を不愉快な気分にさせることなく、スピーディで回転効率のよいドライブスルーシステムが提供できることになる。
【0080】
他方、従来の知られているノイズキャンセルにつて、同様の実験を行った。結果は、客側からの音声にディーゼル自動車のエンジン音が聞き取れ認識できる程度に含まれ残っており、客側からの肉声は聞き取りにくいことが確認された。
つまり、本願発明と従来技術には、多大で明確な差異が認められた。
【0081】
尚、主マイクロフォン151と遮蔽部材161との組み合わせ及び参照マイクロフォン152と遮蔽部材162との組み合わせに加えて、例えば主マイクロフォン151は高感度のものを参照マイクロフォン152は通常感度のものをそれぞれ選択するといったように、主マイクロフォン151の感度と参照マイクロフォン152の感度をそれぞれ適宜異なる組み合わせにすることによって、騒音に対してより一層明瞭な音声入力を得ることが可能になる。
【0082】
つまり、例えば、使用環境において目的音源からの音S(1)のレベルと目的音源以外からの音(騒音)が同レベルで存在する場合であって、且つ、エコーキャンセラ部120は第一入力端子120aに入力された信号レベルにおいてある特定のレベルを超えた信号に対してのみエコーキャンセルを行う特性を有し、更に、このエコーキャンセラ部120は入力レベルに応じて異なるがエコーキャンセラによりエコーを約20デシベルだけ減衰させることが可能であって、ある特定のレベルを目的音源からの音S(1)のレベルより15デシベルだけ低いレベルに設定した場合について述べる。
【0083】
ここで、目的音源からの音S(1)をできるだけキャンセルされないようにするには、参照マイクロフォン152で収音する目的音源からの音S(1)のレベルを、主マイクロフォン151で収音する目的音源からの音S(1)のレベルより15デシベルだけ低いレベルにすることで、エコーキャンセラ部120でキャンセルされなくなることになる。
【0084】
本発明の実効性を求めるためにより具体的な形態の実施を行ったが、目的音源からの音S(1)をできるだけキャンセルされないように、遮蔽部材162により目的音源からの音S(1)を参照マイクロフォン152で収音しないようにしているが、参照マイクロフォン152でも目的音源以外からの音(騒音)を収音しなければならず、参照マイクロフォン152と目的音源が離れていても、参照マイクロフォン152側の遮蔽部材162だけで目的音源からの音S(1)を減衰させるには限度があった。
【0085】
そこで、参照マイクロフォン152側の遮蔽部材162で減衰される目的音源からの音S(1)のレベルが10デシベル程度しかなかった場合について、解決を試みた。
つまり、参照マイクロフォン152側の遮蔽部材162で減衰される目的音源からの音S(1)のレベルが10デシベル程度しかなかった場合、5デシベルだけ減衰量がたりないことになる。
【0086】
ここで、参照マイクロフォン152は通常の収音感度のマイクロフォンを使用し、且つ、主マイクロフォン151は参照マイクロフォン152の収音感度より6デシベルだけ高感度のマイクロフォンを使用してみた。
果たして、理論上、参照マイクロフォン152で収音する目的音源からの音S(1)のレベルは、主マイクロフォン151で収音する目的音源からの音S(1)のレベルより10+6=16デシベル低くすることが可能となる。
他方、レベルメータを用いた実測値も同様な結果を得ることができ、聞き取り感も良好であった。
【0087】
また、このことにより、主マイクロフォン151が収音する目的音源以外からの音のレベルも6デシベルだけ上がってしまうが、今回使用するエコーキャンセラICのキャンセル能力は、20デシベル程度あるので20−6=14デシベルの目的音源以外からの音をキャンセルすることが可能になる。
つまり、目的音源からの音S(1)のレベルと目的音源以外からの音(騒音)が同レベルで存在する環境においても、無線インターフェース110の送信入力に入力される信号は、目的音源からの音S(1)のレベルはそのままで、目的音源以外からの音(騒音)のみ14デシベル減衰されているので、ほぼ目的音源からの音S(1)のみとなる。
【0088】
上述したように、主マイクロフォン151の感度レベルとマイクロフォン152の感度レベルとの差が、主マイクロフォン151が騒音に対してより一層明瞭な音声入力を得ることに寄与することが判った。
【0089】
【発明の効果】
以上、実施の形態例により詳細に説明したように、本発明によれば、目的音源と騒音源との発生方向に拘わらず、又、目的音騒音とのレベル差に拘わらず、更には、音量や音質が突発的に変化する騒音であっても、これらの騒音を良好に除去し、周囲に騒音が存在する環境下であっても明瞭な音声入力の確保に適した音声入力システム及び通信システムを実現できる。
【図面の簡単な説明】
【図1】本発明の実施の形態例の音声入力システムの電気的な構成を示す機能ブロック図である。
【図2】本発明の実施の形態例の音声入力システムの主要部の構成を示す構成説明図である。
【符号の説明】
101: 制御部
110: 無線インタフェース
120: エコーキャンセラ部
130: オーディオアンプ
140: スピーカ
151: 主マイクロフォン
152: 参照マイクロフォン
161,162: 遮蔽部材
171,172: マイクアンプ
180: 音声遅延部
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a voice input system and a communication system, and more particularly to a voice input system and a communication system suitable for securing a clear voice input even in an environment where there is noise around the communication device.
[0002]
[Prior art]
2. Description of the Related Art As a voice input system used in a communication system, there is a technique called a noise canceller for performing clear voice input even in an environment where noise is present around a communication device.
The following techniques (1), (2) and (3) are widely known as techniques of this noise canceller.
(1) The first and second microphones are spaced apart from each other, and the difference between the delay signal of the output of the second microphone and the output of the first microphone is formed by first adding means. The difference between the one microphone output and the delay signal is formed by the second adding means. Patent Document 1 below describes that a noise component is canceled by calculating a difference between the two.
[0003]
(2) The generation of an audio signal from which a noise component has been removed from the input signal from the level difference between the audio signal and the noise signal included in the input signal from the first microphone is described in Patent Document 2 below. ing.
[0004]
(3) An audio signal is input from the first microphone, a noise / audio signal is input from the second microphone, a transfer function of noise included in the input signal from the second microphone is estimated, and a pseudo noise component is calculated. The generation of an audio signal from which a noise component has been removed by subtraction from an input signal from a first microphone is described in Patent Document 2 below.
[Patent Document 1]
JP-A-11-18186
[Patent Document 2]
JP-A-9-36663
[0005]
[Problems to be solved by the invention]
The above-mentioned noise canceling techniques (1) to (3) have the following problems (a), (a) and (c), respectively.
(A) According to the above technique (1), in an environment where noise is emitted from one specific direction on all four sides and only the target sound is emitted from another specific direction, the target sound has good S / N. You can get it.
However, the noise is emitted from an angle different from a specific direction, the noise is reflected from an obstacle and enters at an angle different from the specific direction, or is the same direction as the target sound. If the noise is caused by the background, there is a problem that the noise cannot be canceled.
[0006]
(A) According to the technique (2), when there is a considerable level difference between the collected voice signal and the noise signal, the noise component can be removed.
However, when there is almost no level difference between the audio signal and the noise signal, or when the noise signal is larger, a problem occurs that the noise component cannot be removed.
[0007]
(C) In the above technique (3), if the pseudo noise component estimated from the transfer function of the noise included in the signal collected from the second microphone matches the noise component collected from the first microphone, Can be canceled.
However, when the sound quality or volume of the noise suddenly changes, the estimated pseudo noise component does not match the noise component collected from the first microphone, and the audio signal after removing the pseudo noise component is There is a new problem that the sound becomes unnatural including different noises.
[0008]
The present invention has been made in view of the above-described problems, and regardless of the direction in which a target sound source and a noise source are generated, and irrespective of the level difference between the target sound and the noise, the sound volume and the sound quality are further improved. Even if the noise suddenly changes, it can remove these noises satisfactorily and realize a voice input system and communication system suitable for securing clear voice input even in an environment where there is noise around. The purpose is to do.
[0009]
[Means for Solving the Problems]
Therefore, the inventor of the present application has conducted intensive studies in order to solve the above-mentioned problems, and as a result, instead of using a system related to a known noise canceller, the echo canceller is operated as a noise canceller different from its intended use, so that We have found that we can solve the problem.
In addition, the present inventors have also studied the peripheral circuit configuration when operating the echo canceller as a noise canceller, and as a result, have reached the present invention.
[0010]
That is, the present invention as means for solving the above-mentioned problems has the following configuration.
(1) According to the first aspect of the present invention, a pseudo echo signal generated by an adaptive filter based on an audio signal input to a first input terminal is subtracted from a transmission audio signal input to a second input terminal. Thus, an echo canceller unit that removes an echo component mixed in the transmission audio signal, a main microphone that collects sound from a target sound source, and a target microphone that is arranged at a predetermined distance from the main microphone. A reference microphone for collecting sound mainly from a sound source other than a sound source; and a sound delay unit for giving a predetermined delay to a transmission sound signal from the main microphone, wherein the echo signal is transmitted from the reference microphone to the echo canceller. A first input terminal of the main unit, and a transmission audio signal from the main microphone delayed by the audio delay unit; Input to the second input terminal of the range of the delay time of the echo component the echo canceller unit is removed, adjust the delay time in the sound delay unit, a voice input system, characterized in that.
[0011]
In the invention having such a configuration, the main microphone collects sound mainly from a target sound source, the reference microphone collects sound mainly from a source other than the target sound source, and converts an audio signal from the reference microphone into an echo canceller unit. And a transmission audio signal from the main microphone delayed by the audio delay unit is input to a second input terminal of the echo canceller unit, and a delay of an echo component to be removed by the echo canceller unit. By adjusting the delay time in the audio delay unit within the time range, the pseudo echo signal generated by the adaptive filter based on the audio signal input to the first input terminal is transmitted to the second input terminal. By subtracting from the trusted audio signal, sound (noise) from other than the target sound source mixed in the transmission audio signal is treated and removed in the same manner as the echo component. It can be.
[0012]
As a result, regardless of the direction in which the target sound source and the noise source are generated, and regardless of the level difference between the target sound noise and the noise, even if the volume or the sound quality suddenly changes, these noises , And clear voice input can be ensured even in an environment where noise is present in the surroundings.
[0013]
(2) According to a second aspect of the present invention, a pseudo echo signal generated by an adaptive filter is subtracted from a transmission audio signal input to a second input terminal based on an audio signal input to a first input terminal. Thus, an echo canceller unit that removes an echo component mixed in the transmission audio signal, a main microphone that collects sound from a target sound source, and a target microphone that is arranged at a predetermined distance from the main microphone. A reference microphone that collects sound mainly from a sound source other than a sound source, an audio delay unit that applies a predetermined delay to an audio signal for transmission from the main microphone, and a reception signal from an external system, and the echo canceller unit. An interface for transmitting the processed transmission audio signal to an external system; and a reception signal obtained via the interface as audio. And an audio signal from the reference microphone is input to a first input terminal of the echo canceller unit, and a transmission audio signal from the main microphone delayed by the audio delay unit is transmitted to the echo canceller. A delay time in the voice delay unit that is input to a second input terminal of the unit and is within a range of a delay time of an echo component to be removed by the echo canceller unit.
[0014]
In the invention having such a configuration, the main microphone collects sound mainly from sound from the target sound source, the reference microphone collects sound mainly from sound other than the target sound source, and converts an audio signal from the reference microphone into an echo canceller unit. And a transmission audio signal from the main microphone delayed by the audio delay unit is input to a second input terminal of the echo canceller unit, and a delay of an echo component to be removed by the echo canceller unit. By adjusting the delay time in the audio delay unit within the time range, the pseudo echo signal generated by the adaptive filter based on the audio signal input to the first input terminal is transmitted to the second input terminal. By subtracting from the trust audio signal, the sound (noise) from other than the target sound source and the sound from the speaker (howling sound) mixed in the transmission audio signal are reduced. It can be removed handled similarly to the over component.
[0015]
As a result, regardless of the direction in which the target sound source and the noise source are generated, and regardless of the level difference between the target sound noise and the noise, even if the volume or the sound quality suddenly changes, these noises , And a clear voice input can be ensured even in an environment where there is ambient noise or sound from a speaker.
[0016]
(3) The invention according to claim 3, wherein the main microphone and the reference microphone are each configured to perform desired sound collection by a shielding member. An audio input system according to any one of the above.
[0017]
In the invention having such a configuration, in the audio input system according to the above (1) or (2), the main microphone collects sound mainly from the target sound source by the shielding member, and the reference microphone mainly forms the target sound source by the shielding member. It is configured to collect sound from other sources.
[0018]
As a result, in the above (1) or (2), regardless of the direction in which the target sound source and the noise source are generated, and regardless of the level difference between the target sound and noise, the volume and sound quality change suddenly. Noise, the noise can be removed satisfactorily, and a clear voice input can be ensured even in an environment where there is ambient noise or sound from a speaker.
[0019]
(4) The invention according to claim 4 is characterized in that the main microphone and the reference microphone are each configured to perform desired sound collection by directivity. An audio input system according to any one of the above.
[0020]
In the invention having such a configuration, in the voice input system according to the above (1) or (2), the main microphone picks up sound mainly from a target sound source by directivity, and the reference microphone picks up sounds other than the target sound source by directivity. The sound is mainly collected.
[0021]
As a result, in the above (1) or (2), regardless of the direction in which the target sound source and the noise source are generated, and regardless of the level difference between the target sound and noise, the volume and sound quality change suddenly. Noise, the noise can be removed satisfactorily, and a clear voice input can be ensured even in an environment where there is ambient noise or sound from a speaker.
[0022]
(5) The invention described in claim 5 is characterized in that the main microphone and the reference microphone are each provided with a shielding member, and furthermore, are configured to perform desired sound collection in combination with directivity. The voice input system according to any one of claims 1 and 2.
[0023]
According to the invention having such a configuration, in the voice input system according to the above (1) or (2), the main microphone collects sound mainly from a target sound source by a combination of a shielding member and directivity, and the reference microphone shields the sound. The combination of the member and the directivity is configured to mainly collect sound from a sound source other than the target sound source.
[0024]
As a result, in the above (1) or (2), regardless of the direction in which the target sound source and the noise source are generated, and regardless of the level difference between the target sound and noise, the volume and sound quality change suddenly. Noise, the noise can be removed satisfactorily, and a clear voice input can be ensured even in an environment where there is ambient noise or sound from a speaker.
[0025]
(6) The invention according to claim 6 is a communication system for performing wired or wireless communication, wherein the voice input of at least one side of the communication is performed by the voice input system according to any one of claims 1 to 5. A communication system characterized by using:
[0026]
In the invention having such a configuration, a configuration is employed in which a voice input system of any of (1) to (5) is used for voice input of at least one side of communication with respect to a communication system that performs wired or wireless communication. Have been.
[0027]
As a result, in a communication system that performs wired or wireless communication, regardless of the direction in which the target sound source and the noise source are generated, and regardless of the level difference between the target sound and noise, the volume and sound quality are suddenly reduced. Even for changing noise, these noises can be satisfactorily removed, and a clear voice input can be ensured even in an environment where there is ambient noise or sound from a speaker.
[0028]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, a voice input system and a communication system according to an embodiment of the present invention will be described in detail with reference to the drawings.
In the following embodiments, a communication system using wireless communication will be described as a specific example.
[0029]
FIG. 1 is a block diagram showing an electrical configuration of the first embodiment of the present invention. FIG. 2 is a block diagram showing an original method of using an echo canceller unit, which is a main component of the voice input system according to the first embodiment of the present invention.
[0030]
First, a system using an echo canceller as an original application will be described with reference to FIG.
Reference numeral 10 denotes a telephone interface, and a wired telephone line or a wireless telephone line is connected to the line side (right side in the figure), and the other end is connected to a microphone and a speaker via an echo canceller unit.
[0031]
Reference numeral 20 denotes an echo canceller unit that removes an echo component mixed in the transmission audio signal.
The echo canceller unit 20 transmits the pseudo echo signal generated by the adaptive filter 21 based on the audio signal input to the first input terminal (reception input terminal) 20a to the transmission signal input to the second input terminal (transmission input terminal) 20b. The subtracter 22 subtracts from the trusted audio signal, thereby removing the echo component mixed in the transmission audio signal from the microphone.
[0032]
Numeral 30 denotes an audio amplifier for amplifying the audio signal for reception, numeral 40 a speaker for converting the audio signal amplified by the audio amplifier 30 into an electric / acoustic signal and outputting it as a sound, and numeral 50 a sound from a target sound source (transmitting sound). This is a microphone provided for converting sound for transmission by a user into sound / electricity.
Note that the microphone 50 performs sound / electric conversion not only on the sound from the target sound source but also on the reception sound from the speaker 40 via various reflection paths.
[0033]
In such a configuration, the receiving sound from the line side passes through the echo canceller unit 20, is amplified by the audio amplifier 30, is then subjected to electric / acoustic conversion by the speaker 40, and is output as sound (receiving sound). .
When the speaker 40 and the microphone 50 are located in a certain proximity, the microphone 50 picks up sound (noise) from the speaker 40.
[0034]
Further, the microphone 50 generates sound for transmission by performing sound / electric conversion of the sound for reception output from the speaker 40 together with the sound (transmission sound) from the target sound source.
The transmission audio signal is a signal in which the echo component has been removed by removing the pseudo echo signal generated from the reception audio signal by the subtraction unit 22 of the echo canceller unit 20.
Then, the transmission audio signal from which the echo component has been removed is transmitted to the line side via the telephone interface 10.
[0035]
The above-described echo canceller unit 20 is used only for the purpose of removing the echo component when the receiving voice output from the speaker 40 is mixed into the microphone 50 via the reflection path to generate the echo component. Have been.
For this reason, the echo canceller unit 20 is configured so that the adaptive filter 21 can generate a pseudo echo signal within the delay time in consideration of the delay time of the echo component that goes from the speaker 40 to the microphone 50.
[0036]
Hereinafter, a voice input system and a communication system according to the present embodiment will be described with reference to FIG.
Reference numeral 101 denotes a control unit for controlling the whole, which sets a delay time of an audio delay unit described later, performs various levels of control and timing control for an echo canceller unit described later, and further controls a wireless interface. On the other hand, various levels of control and output control of alarm sound and the like are performed.
[0037]
110 is a wireless interface controlled by the control unit 101.
The wireless interface 110 has a wireless device connected to the right side (line side) in the figure, and the other end connected to a microphone via an echo canceller unit and a speaker via an audio amplifier.
The wireless interface 110 also corrects the frequency characteristics of the transmission signal and the reception signal.
[0038]
Reference numeral 120 denotes an echo canceller that removes an echo component mixed in the transmission audio signal, and has a circuit configuration equivalent to that of the echo canceler 20 shown in FIG. In the echo canceller section 120, a subtractor 122 subtracts the pseudo echo signal generated by the adaptive filter 121 from the transmission audio signal input to the second input terminal 120b based on the audio signal input to the first input terminal 120a. As a result, the echo component mixed in the audio signal for transmission from the microphone is removed.
[0039]
Note that a commercially available echo canceler LSI can be used as the echo canceller unit 120. However, unlike a normal use method (connection method), an audio signal from a reference microphone described later is supplied to the first input terminal. 120a.
[0040]
Reference numeral 130 denotes an audio amplifier that amplifies a reception sound obtained from the wireless device via the wireless interface 110, and reference numeral 140 denotes a speaker that performs electrical / acoustic conversion of the audio signal amplified by the audio amplifier 130 and outputs the converted audio signal.
[0041]
Reference numeral 151 denotes a main microphone provided for performing sound / electric conversion mainly on a sound from a target sound source (transmission sound by a transmitter) S (1).
The main microphone 151 is configured to collect sound mainly at a target sound source by using one or both of the directivity and the shielding member 161.
[0042]
Note that the microphone 151 includes not only the sound S (1) from the target sound source but also the surrounding noises N (1) to N (n) and the sound to be received from the speaker 140 via various reflection paths. Sound / electric conversion.
[0043]
152 is a reference microphone.
The reference microphone 152 is disposed at a predetermined interval from the main microphone 151, and is arranged so that sound from other than the target sound source (mainly, ambient noises N (1) to N (n)) is centered from the target sound source. The sound collection is performed in a state where the sound S (1) is excluded as much as possible.
The reference microphone 152 is configured to collect sound with a focus on ambient noise by using one or a combination of the directivity and the shielding member 162.
[0044]
Reference numeral 171 denotes a microphone amplifier that amplifies the transmission audio signal from the main microphone 151 to a predetermined level, and 172 denotes a microphone amplifier that amplifies the audio signal from the reference microphone 152 to a predetermined level.
Note that the audio signal from the reference microphone 152 amplified by the microphone amplifier 172 is input to the first input terminal 120a of the echo canceller unit 120.
[0045]
Reference numeral 180 denotes an audio delay unit for giving a predetermined delay to the transmission audio signal from the main microphone 151, and the transmission audio signal from the main microphone 151 delayed by the audio delay unit 180 is output to the echo canceller unit 120. It is input to the two input terminals 120b.
[0046]
In the above configuration, the control unit 101 controls the delay time of the audio delay unit 180 so as to match (include) the delay time of the echo component that can be removed by the echo canceller unit 120. I do.
[0047]
A wireless device 200 is a communication device that constitutes one of the communication systems. Here, the voice input system according to the present embodiment is connected via a wireless interface 110. Reference numeral 300 denotes a wireless device that constitutes the other side of the communication system. The voice input system according to the present embodiment is not connected, and a caller wirelessly communicates via the headset 310.
[0048]
Here, as a specific example, a speech input system and a communication system according to the present embodiment that are configured to accept an order through drive-through of a fast food restaurant will be described.
[0049]
In the above configuration, the main microphone 151 is installed so as to pick up the real voice of the customer who mainly comes through the drive-through (sound S (1) from the target sound source; hereinafter, referred to as “target sound”). .
In addition, the reference microphone 152 outputs the sound of the engine (N (1)) of the customer's vehicle coming to the drive-through, the sound of the cooling fan of the radiator (N (2)), or the sound of another vehicle traveling on the road. It is installed so as to collect ambient noise such as running noise (N (n)).
[0050]
In a drive-through provided with such a voice input system and a communication system, when a customer who comes to the drive-through places an order without getting out of the car, a driver brings the car close to the main microphone 151 in a so-called so-called manner. It is desirable to stop the car by closing the side.
[0051]
However, not all customers approach the main microphone 151 and stop. For this reason, there is a case where an interval of about 1 m or more is left between the customer in the driver's seat of the car and the main microphone 151.
[0052]
In such a case, the main microphone 151 not only outputs the target sound, but also the engine sound (N (1)) of the customer's automobile that came to drive through, the sound of the radiator cooling fan (N (2)), and furthermore, In addition, various ambient noises such as the running noise (N (n)) of other vehicles traveling on the road are also collected.
[0053]
Therefore, it is desirable to install the shielding member 161 so that various noises do not easily enter the main microphone 151.
Here, as the shape of the shielding member 161, a plate-shaped member is specifically mentioned, but it is preferable to appropriately select a shielding member 161 in consideration of the sound insulation effect, for example, a cylindrical member according to the use situation.
[0054]
On the other hand, the shielding member 162 is a line connecting the reference microphone 152 and the customer's mouth near the reference microphone 152 so that the actual voice (S (1)) of the customer who has come into the drive-through does not enter the reference microphone 152. It is desirable to install in such a manner as to intersect only with the real voice of the customer (S (1)).
As the shielding member 162, similarly to the shielding member 161, a specific shape such as a plate shape or a cylindrical shape may be mentioned, but it is desirable to appropriately select the shape in accordance with the use situation in consideration of the sound insulation effect. .
[0055]
Further, it is desirable that the distance between the reference microphone 152 and the main microphone 151 is 1.5 m at the longest.
From this, the maximum noise arrival time difference from when the noise first arrives at the main microphone 151 to when the same noise arrives at the reference microphone 152 is 1.5 / 340 ≒ 0 when the sound speed is 340 m / sec. .0044 seconds = 4.4 milliseconds.
[0056]
The echo canceller IC for the echo canceller unit 120 used in the experiment by the present inventor for this embodiment has a permissible time for canceling the echo in the range of 1 ms to 59 ms. .
[0057]
Therefore, in order to cancel the noise with the used echo canceller IC, 4.4 + 1 = 5.4 ms or more, and the target sound collected by the main microphone 151 in the range of 5.4 ms to 59 ms. + It is necessary to delay the noise signal.
[0058]
Therefore, it is necessary to use an audio delay unit 180 having an audio reproduction characteristic of low noise and low distortion rate and capable of setting an audio delay time of 5.4 ms or more.
In the experiment for the present embodiment, the experiment was performed by setting the audio delay time in the audio delay unit 180 to 20 milliseconds under the control of the control unit 101.
[0059]
That is, as the audio delay unit 180, a digital audio delay IC that delays the collected signal only for a certain set time and does not change the content of the signal as much as possible is preferable.
[0060]
Note that a reception signal of a mobile phone or the like is input to the first input terminal 120a of the echo canceller unit 120 in its intended use, but in the present embodiment, the sound is collected by the reference microphone 152 (N (1)). ) To (N (n)), the surrounding noise picked up by the reference microphone 152 is processed in the same manner as in the case of the received signal of the mobile phone.
[0061]
The second input terminal 120b of the echo canceller unit 120 has the real voice (S (1)) and the noise of (N (1)) to (N (n)) of the customer coming to the drive-through collected by the main microphone 151. Are input as audio signals (S (1)) ′ and (N (1)) ′ to (N (n)) ′ delayed by the delay time imposed by the audio delay unit 180.
[0062]
In the echo canceller unit 120, an audio signal (noise around (N (1)) to (N (n)) input to the first input terminal 120a is converted into a reference digital signal by an A / D converter (not shown). After conversion into an audio signal, the adaptive filter 121 retains and updates information.
[0063]
The transmission audio signals ((S (1)) 'and (N (1))' to (N (n)) 'input to the second input terminal 120b are also A / D converters (not shown). Is converted into a digital audio signal for transmission.
Then, the digital audio signal for transmission is compared with the digital audio signal for reference held in advance, and when similar information is mixed, it is determined that an echo is present, and the subtraction unit 122 is used to determine whether the echo signal has been received. , And cancels the digital audio signal for transmission.
Thereafter, the transmission digital audio signal is converted back to an analog signal by a D / A converter (not shown).
[0064]
By these series of operations, the target sounds (S (1)) ′ and (N (1)) ′ to (N (n)) ′ collected and delayed by the main microphone 151 are transmitted by the echo canceller unit 120. When output from the output terminal, noise cancellation is performed to the extent that only the target sound (S (1)) 'can be heard, and as a result, (N (1))' to (N (n)) ) 'Will be obtained.
[0065]
The target sound (S (1)) ′ signal is input to the wireless interface 110, and after being corrected for frequency characteristics or adjusted to the transmission input level of the wireless device 200 as necessary, is sent to the wireless device 200.
Here, the target sound (S (1)) ′ signal is added as a modulation to a transmission radio wave by the wireless device 200 and transmitted to the wireless device 300.
[0066]
This transmission radio wave is received by the wireless device 300, demodulated into an audio signal, and output as audio from the headphone section of the headset 310.
The headset 310 is worn by a store clerk equipped with a drive-through to listen to customer orders, but ambient noises (N (1)) to (N (n)) are canceled. As a result, only the voice of the customer (the target sound) is heard, and the exchange of the order and the like is performed simply and without fail, thereby increasing the work efficiency.
[0067]
The salesperson's conversation is picked up by the microphone section of the headset 310 and sent to the wireless device 300. The clerk uses the headset 310 to talk in a quiet store, and the microphone of the headset 310 is at his mouth.
Therefore, the conversation voice is a clear voice that is almost completely free of noise.
[0068]
Then, the conversation voice of the clerk is added as a modulation to the transmission radio wave by the wireless device 300 and transmitted. This transmission radio wave is received by the wireless device 200, demodulated into an audio signal, and sent to the wireless interface 110.
[0069]
The audio signal has its frequency characteristics corrected and its level adjusted by the wireless interface 110, and is sent to the audio amplifier 130.
Then, the audio signal is amplified by the audio amplifier 130 with a preset gain and output to the speaker 140.
Here, since the speaker 140 reproduces the voice of the clerk at an appropriate volume, the customer can hear the clear voice of the clerk.
[0070]
The output sound from the speaker 140 is also collected by the reference microphone 152 and the main microphone 151, but is canceled in the same manner as in the case of surrounding noise ((N (1)) to (N (n)). It will not be echoed or howling.
Further, in this case, the audio signal output from the speaker 140 does not pass through the inside of the echo canceller unit 120, which is different from the typical and original usage of the conventional echo canceller unit. Is a point.
[0071]
In performing the above operations, the control unit 101 sets the delay time of the audio delay unit 180, and performs various levels of control and timing control on the echo canceller unit 120 as necessary.
Further, the control unit 101 controls the wireless interface 110 at various levels, controls output of an alarm sound and the like, processes various sensor information, and the like.
[0072]
Although not shown, an A / D converter is provided on the input side of the audio delay unit 180, and a D / A converter is provided on the output side of the audio delay unit 180.
Then, although not shown, an AD converter is provided at the second input terminal 120b of the echo canceller unit 120, and a DA converter is provided at the output side.
Therefore, by integrally configuring the echo canceller unit 120 and the audio delay unit 180, it is possible to eliminate the intermediate DA converter and AD converter, and a cost merit is obtained.
[0073]
Further, as an application of the voice input system and the communication system of the present embodiment, in addition to the drive-through system, in addition to wireless communication between a crane operator and a crane wire-laying worker, when a jet airliner moves on the ground It can be used for wireless communication under a noisy work environment, such as wireless communication between a pilot in a passenger aircraft cockpit and a worker moving a passenger aircraft with a tractor.
[0074]
In these cases, the main microphone may be provided in a normal microphone portion of the headset, and the reference microphone may be provided in any other position (such as a headband portion).
Further, it can be used for a voice input device such as a telephone terminal, a video conference device, and a car navigation device.
[0075]
As described above, in the present embodiment, as a new noise solving method different from the conventional one, by adopting the echo canceller by a method different from the original, regardless of the generation direction of the target sound source and the noise source, Noise can be removed satisfactorily, and clear voice input can be ensured even in an environment where noise is present in the surroundings.
[0076]
Further, regardless of the level difference between the target sound and the noise, the noise can be satisfactorily removed, and a clear voice input can be ensured even in an environment where noise is present in the surroundings.
Furthermore, even if the sound volume or sound quality changes suddenly, the noise can be satisfactorily removed, and a clear voice input can be ensured even in an environment where there is noise around.
[0077]
【Example】
For the voice input system described above, an LSI “MSM7731-02” manufactured by Oki Electric Co., Ltd. developed for mobile phones was used as the echo canceller unit 120, and the above was described so as to differ from the original connection method of this LSI. A circuit was configured by the connection of the embodiment.
Further, an experiment was performed using a digital audio delay IC for the audio delay unit 180 and setting the audio delay time to 20 milliseconds.
[0078]
Here, an experiment was performed using the engine sound of a diesel vehicle generated in a frequency band substantially equal to the frequency band of a human voice as noise.
As a result, the sound after the noise cancellation was so reduced that the engine sound of the car could not be heard, and only the voice of the customer was heard more clearly than the headset of the clerk.
[0079]
Therefore, the voice from the customer side is clear and does not contain noise enough to be recognized, so that the order contents of the customer who is in a place with a remote noise are not overlooked or mistakenly heard. Thus, it is possible to provide a drive-through system that is speedy and has high rotational efficiency without causing the customer to feel unpleasant.
[0080]
On the other hand, a similar experiment was performed for a conventionally known noise cancellation. As a result, it was confirmed that the sound from the customer side contained the engine sound of the diesel car so that it could be heard and recognized, and it was confirmed that the real voice from the customer side was difficult to hear.
That is, a great and clear difference was recognized between the present invention and the conventional art.
[0081]
In addition to the combination of the main microphone 151 and the shielding member 161 and the combination of the reference microphone 152 and the shielding member 162, for example, the main microphone 151 selects a high-sensitivity microphone and the reference microphone 152 selects a normal-sensitivity microphone. As described above, by setting the sensitivity of the main microphone 151 and the sensitivity of the reference microphone 152 to be appropriately different from each other, it becomes possible to obtain a more clear voice input for noise.
[0082]
That is, for example, in a use environment, the level of the sound S (1) from the target sound source and the sound (noise) from other sources than the target sound source exist at the same level, and the echo canceller unit 120 is connected to the first input terminal. The echo canceller unit 120 has a characteristic of performing echo cancellation only for a signal exceeding a certain level in the signal level input to the input unit 120a. A case will be described in which the signal can be attenuated by 20 dB and a specific level is set to a level lower by 15 dB than the level of the sound S (1) from the target sound source.
[0083]
Here, in order to prevent the sound S (1) from the target sound source from being canceled as much as possible, the level of the sound S (1) from the target sound source collected by the reference microphone 152 is determined by the main microphone 151. By setting the level to be lower than the level of the sound S (1) from the sound source by 15 dB, the echo canceller unit 120 will not cancel the sound.
[0084]
Although a more specific embodiment has been implemented to determine the effectiveness of the present invention, the sound S (1) from the target sound source is shielded by the shielding member 162 so that the sound S (1) from the target sound source is canceled as much as possible. Although the reference microphone 152 does not collect sound, the reference microphone 152 must also collect sound (noise) from a source other than the target sound source. Even if the reference microphone 152 is separated from the target sound source, the reference microphone 152 does not. There is a limit to attenuating the sound S (1) from the target sound source with only the side shield member 162.
[0085]
Therefore, an attempt was made to solve a case where the level of the sound S (1) from the target sound source attenuated by the shielding member 162 on the reference microphone 152 side was only about 10 dB.
That is, when the level of the sound S (1) from the target sound source attenuated by the shielding member 162 on the reference microphone 152 side is only about 10 dB, the attenuation amount is reduced by 5 dB.
[0086]
Here, the reference microphone 152 uses a microphone having normal sound pickup sensitivity, and the main microphone 151 uses a microphone that is 6 dB higher than the sound pickup sensitivity of the reference microphone 152.
In theory, the level of the sound S (1) from the target sound source collected by the reference microphone 152 is set to be 10 + 6 = 16 dB lower than the level of the sound S (1) from the target sound source collected by the main microphone 151. It becomes possible.
On the other hand, a measured value using a level meter was able to obtain similar results, and the sense of hearing was good.
[0087]
This also raises the level of sound from the source other than the target sound source picked up by the main microphone 151 by 6 dB. However, the cancellation capability of the echo canceller IC used this time is about 20 dB, so that 20-6 = It is possible to cancel sounds from sources other than the target sound source of 14 dB.
That is, even in an environment where the level of the sound S (1) from the target sound source and the sound (noise) from other sources than the target sound source exist at the same level, the signal input to the transmission input of the wireless interface 110 does not Since only the sound (noise) from other than the target sound source is attenuated by 14 dB while keeping the level of the sound S (1), almost only the sound S (1) from the target sound source is obtained.
[0088]
As described above, it has been found that the difference between the sensitivity level of the main microphone 151 and the sensitivity level of the microphone 152 contributes to the main microphone 151 obtaining a clearer voice input for noise.
[0089]
【The invention's effect】
As described above in detail according to the embodiment, according to the present invention, regardless of the generation direction between the target sound source and the noise source, and regardless of the level difference between the target sound noise, Input system and communication system suitable for elimination of noise even when the noise or sound quality suddenly changes, and for ensuring clear voice input even in an environment where noise is present in the surroundings Can be realized.
[Brief description of the drawings]
FIG. 1 is a functional block diagram illustrating an electrical configuration of a voice input system according to an embodiment of the present invention.
FIG. 2 is a configuration explanatory diagram showing a configuration of a main part of the voice input system according to the embodiment of the present invention;
[Explanation of symbols]
101: control unit
110: Wireless interface
120: Echo canceller section
130: Audio Amplifier
140: Speaker
151: Primary microphone
152: Reference microphone
161, 162: shielding member
171,172: Microphone amplifier
180: audio delay unit

Claims (6)

第1入力端子に入力された音声信号に基づいて適応フィルタが発生した疑似エコー信号を第2入力端子に入力された送信用音声信号から減算することにより、送信用音声信号に混入されているエコー成分を除去するエコーキャンセラ部と、
目的音源からの音を中心に収音を行う主マイクロフォンと、
前記主マイクロフォンと所定の間隔をおいて配置され目的音源以外からの音を中心に収音を行う参照マイクロフォンと、
前記主マイクロフォンからの送信用音声信号に所定の遅延を与える音声遅延部と、を備え、
前記参照マイクロフォンからの音声信号を前記エコーキャンセラ部の第1入力端子に入力し、前記音声遅延部で遅延を与えられた前記主マイクロフォンからの送信用音声信号を前記エコーキャンセラ部の第2入力端子に入力し、前記エコーキャンセラ部が除去するエコー成分の遅延時間の範囲内に、前記音声遅延部での遅延時間を合わせる、
ことを特徴とする音声入力システム。
By subtracting the pseudo echo signal generated by the adaptive filter based on the audio signal input to the first input terminal from the audio signal for transmission input to the second input terminal, the echo mixed in the audio signal for transmission An echo canceller section for removing components,
A main microphone that picks up sound from the target sound source,
A reference microphone that is arranged at a predetermined interval from the main microphone and collects sound mainly from sounds other than the target sound source;
An audio delay unit that applies a predetermined delay to the audio signal for transmission from the main microphone,
An audio signal from the reference microphone is input to a first input terminal of the echo canceller unit, and a transmission audio signal from the main microphone delayed by the audio delay unit is input to a second input terminal of the echo canceller unit. The delay time in the audio delay unit is adjusted within the range of the delay time of the echo component to be removed by the echo canceller unit.
A voice input system characterized by the following.
第1入力端子に入力された音声信号に基づいて適応フィルタが発生した疑似エコー信号を第2入力端子に入力された送信用音声信号から減算することにより、送信用音声信号に混入されているエコー成分を除去するエコーキャンセラ部と、
目的音源からの音を中心に収音を行う主マイクロフォンと、
前記主マイクロフォンと所定の間隔をおいて配置され目的音源以外からの音を中心に収音を行う参照マイクロフォンと、
前記主マイクロフォンからの送信用音声信号に所定の遅延を与える音声遅延部と、
外部システムからの受信信号を受けると共に前記エコーキャンセラ部により処理された送信用音声信号を外部システムに送るインタフェースと、
前記インタフェースを介して得られた受信信号を音声として出力するスピーカとを備え、
前記参照マイクロフォンからの音声信号を前記エコーキャンセラ部の第1入力端子に入力し、前記音声遅延部で遅延を与えられた前記主マイクロフォンからの送信用音声信号を前記エコーキャンセラ部の第2入力端子に入力し、前記エコーキャンセラ部が除去するエコー成分の遅延時間の範囲内に、前記音声遅延部での遅延時間を合わせる、
ことを特徴とする音声入力システム。
By subtracting the pseudo echo signal generated by the adaptive filter based on the audio signal input to the first input terminal from the audio signal for transmission input to the second input terminal, the echo mixed in the audio signal for transmission An echo canceller section for removing components,
A main microphone that picks up sound from the target sound source,
A reference microphone that is arranged at a predetermined interval from the main microphone and collects sound mainly from sounds other than the target sound source;
An audio delay unit that applies a predetermined delay to the transmission audio signal from the main microphone;
An interface for receiving a reception signal from an external system and transmitting a transmission audio signal processed by the echo canceller unit to the external system,
And a speaker that outputs a received signal obtained through the interface as audio.
An audio signal from the reference microphone is input to a first input terminal of the echo canceller unit, and a transmission audio signal from the main microphone delayed by the audio delay unit is input to a second input terminal of the echo canceller unit. The delay time in the audio delay unit is adjusted within the range of the delay time of the echo component to be removed by the echo canceller unit.
A voice input system characterized by the following.
前記主マイクロフォンと前記参照マイクロフォンとはそれぞれ遮蔽部材により所望の収音を行うように構成された、
ことを特徴とする請求項1若しくは請求項2のいずれかに記載の音声入力システム。
The main microphone and the reference microphone are each configured to perform desired sound collection by a shielding member,
The voice input system according to claim 1, wherein:
前記主マイクロフォンと前記参照マイクロフォンとはそれぞれ指向性により所望の収音を行うように構成された、
ことを特徴とする請求項1若しくは請求項2のいずれかに記載の音声入力システム。
The main microphone and the reference microphone are each configured to perform desired sound collection by directivity,
The voice input system according to claim 1, wherein:
前記主マイクロフォンと前記参照マイクロフォンとはそれぞれ遮蔽部材及び指向性の組み合わせにより所望の収音を行うように構成された、ことを特徴とする請求項1若しくは請求項2のいずれかに記載の音声入力システム。The voice input device according to claim 1, wherein the main microphone and the reference microphone are configured to perform desired sound collection by a combination of a shielding member and a directivity, respectively. system. 有線若しくは無線により通信を行う通信システムであって、通信を行う少なくとも一方の側の音声入力に請求項1乃至請求項5のいずれかの音声入力システムを用いたことを特徴とする通信システム。A communication system for performing wired or wireless communication, wherein the voice input system according to any one of claims 1 to 5 is used for voice input on at least one side of communication.
JP2002313459A 2002-09-24 2002-09-24 Voice input system and communication system Expired - Fee Related JP4138449B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2002313459A JP4138449B2 (en) 2002-09-24 2002-09-24 Voice input system and communication system
US10/660,322 US20040059571A1 (en) 2002-09-24 2003-09-10 System for inputting speech, radio receiver and communication system
EP03020892A EP1404147A3 (en) 2002-09-24 2003-09-15 System for inputting speech, radio receiver and communication system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002313459A JP4138449B2 (en) 2002-09-24 2002-09-24 Voice input system and communication system

Publications (2)

Publication Number Publication Date
JP2004120717A true JP2004120717A (en) 2004-04-15
JP4138449B2 JP4138449B2 (en) 2008-08-27

Family

ID=32289527

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002313459A Expired - Fee Related JP4138449B2 (en) 2002-09-24 2002-09-24 Voice input system and communication system

Country Status (1)

Country Link
JP (1) JP4138449B2 (en)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006025256A1 (en) * 2004-09-01 2006-03-09 School Juridical Person Of Fukuoka Kogyo Daigaku Oscillation/echo preventing circuit and microphone/speaker
JP2006090871A (en) * 2004-09-24 2006-04-06 Sharp Corp Substrate crack inspection method and substrate crack inspection device
JP2008020897A (en) * 2006-07-11 2008-01-31 Harman Becker Automotive Systems Gmbh Method for compensating audio signal components in vehicle communication system, and system therefor
WO2010001508A1 (en) * 2008-07-02 2010-01-07 パナソニック株式会社 Audio signal processor
US8150086B2 (en) 2008-05-27 2012-04-03 Funai Electric Advanced Applied Technology Research Institute Inc. Voice sound input apparatus and voice sound conference system
US8280092B2 (en) 2008-05-27 2012-10-02 Funai Electric Advanced Applied Technology Research Institute Inc. Voice sound input apparatus
JP2013532308A (en) * 2010-06-01 2013-08-15 クゥアルコム・インコーポレイテッド System, method, device, apparatus and computer program product for audio equalization
JP2014518053A (en) * 2011-05-26 2014-07-24 マイティワークス カンパニー リミテッド Signal separation system using directional microphone array and method for providing the same
WO2014125860A1 (en) * 2013-02-12 2014-08-21 日本電気株式会社 Speech processing device, speech processing method, speech processing program, attachment method for speech processing device, ceiling member, and vehicle
US9070374B2 (en) 2012-02-20 2015-06-30 JVC Kenwood Corporation Communication apparatus and condition notification method for notifying a used condition of communication apparatus by using a light-emitting device attached to communication apparatus
US9202456B2 (en) 2009-04-23 2015-12-01 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for automatic control of active noise cancellation
KR101592422B1 (en) 2014-09-17 2016-02-05 해보라 주식회사 Earset and control method for the same

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8254560B2 (en) 2004-09-01 2012-08-28 School Juridical Person Of Fukuoka Kogyo Daigaku Oscillation-echo preventing circuit and microphone/speaker unit
WO2006025256A1 (en) * 2004-09-01 2006-03-09 School Juridical Person Of Fukuoka Kogyo Daigaku Oscillation/echo preventing circuit and microphone/speaker
KR101119787B1 (en) 2004-09-01 2012-03-23 스쿨 쥬리디컬 펄슨 오브 후꾸오까 쿄교 다이가꾸 Oscillation/echo preventing circuit and microphone/speaker
JP2006090871A (en) * 2004-09-24 2006-04-06 Sharp Corp Substrate crack inspection method and substrate crack inspection device
JP2008020897A (en) * 2006-07-11 2008-01-31 Harman Becker Automotive Systems Gmbh Method for compensating audio signal components in vehicle communication system, and system therefor
US8280092B2 (en) 2008-05-27 2012-10-02 Funai Electric Advanced Applied Technology Research Institute Inc. Voice sound input apparatus
US8150086B2 (en) 2008-05-27 2012-04-03 Funai Electric Advanced Applied Technology Research Institute Inc. Voice sound input apparatus and voice sound conference system
JP2010016564A (en) * 2008-07-02 2010-01-21 Panasonic Corp Speech signal processor
WO2010001508A1 (en) * 2008-07-02 2010-01-07 パナソニック株式会社 Audio signal processor
US9202456B2 (en) 2009-04-23 2015-12-01 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for automatic control of active noise cancellation
JP2013532308A (en) * 2010-06-01 2013-08-15 クゥアルコム・インコーポレイテッド System, method, device, apparatus and computer program product for audio equalization
US9053697B2 (en) 2010-06-01 2015-06-09 Qualcomm Incorporated Systems, methods, devices, apparatus, and computer program products for audio equalization
JP2014518053A (en) * 2011-05-26 2014-07-24 マイティワークス カンパニー リミテッド Signal separation system using directional microphone array and method for providing the same
US9070374B2 (en) 2012-02-20 2015-06-30 JVC Kenwood Corporation Communication apparatus and condition notification method for notifying a used condition of communication apparatus by using a light-emitting device attached to communication apparatus
WO2014125860A1 (en) * 2013-02-12 2014-08-21 日本電気株式会社 Speech processing device, speech processing method, speech processing program, attachment method for speech processing device, ceiling member, and vehicle
US9847091B2 (en) 2013-02-12 2017-12-19 Nec Corporation Speech processing apparatus, speech processing method, speech processing program, method of attaching speech processing apparatus, ceiling member, and vehicle
KR101592422B1 (en) 2014-09-17 2016-02-05 해보라 주식회사 Earset and control method for the same

Also Published As

Publication number Publication date
JP4138449B2 (en) 2008-08-27

Similar Documents

Publication Publication Date Title
EP2211564B1 (en) Passenger compartment communication system
EP3312839B1 (en) Device for assisting two-way conversation and method for assisting two-way conversation
JP6066335B2 (en) Silencer
US8306234B2 (en) System for improving communication in a room
Dahl et al. Acoustic noise and echo cancelling with microphone array
JP4697553B2 (en) Sound playback device with hands-free call function
US20040059571A1 (en) System for inputting speech, radio receiver and communication system
US20100041443A1 (en) Handsfree call apparatus, acoustic reproducing apparatus with handsfree call function, and handsfree call method
JP2016126335A (en) Sound zone facility having sound suppression for every zone
JP5593852B2 (en) Audio signal processing apparatus and audio signal processing method
CN104980846A (en) ANC active noise control audio headset with reduction of electrical hiss
JPH0936784A (en) Noise control transmitter-receiver
JP2008244852A (en) Sound reproduction device and sound reproduction method
JPH08503832A (en) Mobile wireless device with hands-free communication device
JP4138449B2 (en) Voice input system and communication system
JP7312180B2 (en) In-vehicle acoustic noise cancellation system for far-end telecommunications
CN113129929A (en) Voice avoidance with spatial speech separation for vehicle audio systems
JPH09331377A (en) Noise cancellation circuit
JP2007060229A (en) In-vehicle hands-free telephone conversation device
JP2005247181A (en) Vehicle-mounted handsfree system
JPH1141342A (en) Automobile telephone system
JP3207666B2 (en) In-car audio equipment
JP2001005463A (en) Acoustic system
JP5383008B2 (en) Speech intelligibility improvement system and speech intelligibility improvement method
JP3244062B2 (en) In-vehicle hands-free telephone device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040730

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20050512

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080310

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080415

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080603

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080605

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4138449

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110613

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110613

Year of fee payment: 3

S343 Written request for registration of root pledge or change of root pledge

Free format text: JAPANESE INTERMEDIATE CODE: R316354

SZ02 Written request for trust registration

Free format text: JAPANESE INTERMEDIATE CODE: R316Z02

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110613

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

S343 Written request for registration of root pledge or change of root pledge

Free format text: JAPANESE INTERMEDIATE CODE: R316350

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110613

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110613

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110613

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110613

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110613

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110613

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120613

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120613

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130613

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130613

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130613

Year of fee payment: 5

S843 Written request for trust registration of cancellation of root pledge

Free format text: JAPANESE INTERMEDIATE CODE: R314361

SZ03 Written request for cancellation of trust registration

Free format text: JAPANESE INTERMEDIATE CODE: R316Z03

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S303 Written request for registration of pledge or change of pledge

Free format text: JAPANESE INTERMEDIATE CODE: R316303

S303 Written request for registration of pledge or change of pledge

Free format text: JAPANESE INTERMEDIATE CODE: R316303

S303 Written request for registration of pledge or change of pledge

Free format text: JAPANESE INTERMEDIATE CODE: R316303

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S321 Written request for registration of change in pledge agreement

Free format text: JAPANESE INTERMEDIATE CODE: R316321

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S303 Written request for registration of pledge or change of pledge

Free format text: JAPANESE INTERMEDIATE CODE: R316304

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R316531

S803 Written request for registration of cancellation of provisional registration

Free format text: JAPANESE INTERMEDIATE CODE: R316803

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S803 Written request for registration of cancellation of provisional registration

Free format text: JAPANESE INTERMEDIATE CODE: R316803

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S803 Written request for registration of cancellation of provisional registration

Free format text: JAPANESE INTERMEDIATE CODE: R316803

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees