JP4792156B2 - マイクロホンアレイを有するボイス制御システム - Google Patents
マイクロホンアレイを有するボイス制御システム Download PDFInfo
- Publication number
- JP4792156B2 JP4792156B2 JP2000277687A JP2000277687A JP4792156B2 JP 4792156 B2 JP4792156 B2 JP 4792156B2 JP 2000277687 A JP2000277687 A JP 2000277687A JP 2000277687 A JP2000277687 A JP 2000277687A JP 4792156 B2 JP4792156 B2 JP 4792156B2
- Authority
- JP
- Japan
- Prior art keywords
- microphones
- microphone
- electronic device
- processing unit
- consumer electronic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 230000002457 bidirectional effect Effects 0.000 claims description 2
- 230000001934 delay Effects 0.000 claims description 2
- 230000005236 sound signal Effects 0.000 description 7
- 101100514845 Arabidopsis thaliana MTV1 gene Proteins 0.000 description 2
- 101100023518 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) DAL7 gene Proteins 0.000 description 2
- 101150032602 mls-1 gene Proteins 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02166—Microphone arrays; Beamforming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
- H04R2201/40—Details of arrangements for obtaining desired directional characteristic by combining a number of identical transducers covered by H04R1/40 but not provided for in any of its subgroups
- H04R2201/401—2D or 3D arrays of transducers
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Acoustics & Sound (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Otolaryngology (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Circuit For Audible Band Transducer (AREA)
- Selective Calling Equipment (AREA)
Description
【発明の属する技術分野】
本発明は、マイクロホンアレイを有し、特に消費者電子機器に属する機器を制御するために使用されうるボイス制御システムに関する。
【0002】
【従来の技術】
ボイス制御システムは、多くの技術分野において使用される。この場合、話された単語は、通常は1つ以上のマイクロホンによってまずサウンド信号として検出され、次に音声認識システムに供給される。この場合、音声認識は通常は音響モデル及び音声モデルに基づく。音響モデルは多数の音声パターンを利用し、話された単語に音響的に最もよく一致する単語を示すために数学アルゴリズムが使用される。音声モデルは或る単語が通常使用される文脈及び頻度を確かめるために多数の文書サンプルを用いる解析に基づく。かかる音声認識システムは、個々の単語だけでなく、高い認識率で流暢に話された文章も認識することを可能とする。しかしながら、無視できないほどの背景雑音が存在する場合、認識率は大きく低減する。
【0003】
かかる音響的な妨害の影響に対する強さは様々な方法で高められうる。従って、コンピュータ用のディクテーションシステムでは、ヘッドセット枠体に設けられたマイクロホンは、話者の口のすぐ前方に固定されている。これらのシステムでは、非常に一定の信号、そして或る状況ではかなりの認識率は、口のすぐ近傍でしか達成できない。同様に、遠隔制御装置に一体化されたマイクロホンに向かって操作命令を話すことによってテレビジョン受像機を制御することが知られている。しかしながら、この場合も、遠隔制御装置は使用者の口のすぐ前方に保持されねばならない。
【0004】
【発明が解決しようとする課題】
本発明は、比較的遠い距離からのボイス入力の場合でも十分な妨害に対する安全性を可能とするボイス制御システムを提供することを目的とする。
【0005】
【課題を解決するための手段】
上記目的は請求項1に記載のシステムによって達成される。比較的遠くからのボイス制御を可能とするため、ボイス信号は妨害的な背景信号から分離されねばならない。これは、2つ以上のマイクロホンを含むマイクロホンアレイを用いて空間に分離することによって行われうる。この場合、マイクロホンアレイの個々のマイクロホンが可能な限り大きな距離に亘って空間的に分散されることが有利である。しかしながら、個々の消費者電子機器では、個々のマイクロホンの間の距離は機器の寸法により制限され、例えばテレビジョン受像機の場合は1メートル以下に制限される。
【0006】
原理的に、本発明によるボイス制御システムは、ボイス命令を電気信号へ変換する複数のマイクロホンと、上記電気信号を操作命令へ変換する中央音声認識ユニットとを有し、上記マイクロホンは、上記マイクロホンによって発生される信号が上記中央音声認識ユニットへ伝送されうるよう相互に接続された異なった機器間で分散される。
【0007】
この場合、機器は、特に有利にはIEEE1394バスである双方向網を介して接続されることが有利である。
【0008】
システムは、1つ以上のマイクロホンが消費者再生電子機器、特にテレビジョン受像機に一体化され、1つ以上の更なるマイクロホンが外部スピーカに一体化される場合に特に有利である。
【0009】
【発明の実施の形態】
以下、本発明を添付の図面を参照して説明する。
【0010】
図1は、本発明によるシステムを概略的に示す図である。2つの外部スピーカLS1,LS2がテレビジョン受像機TVに接続される。テレビジョン受像機の内部スピーカ(図示せず)は、外部スピーカと共に、マルチチャネルオーディオ信号のサラウンドサウンド再生、例えばMPEG2又はAC3標準に準拠する対応するディジタルオーディオ信号の再生を可能とする。本例では、外部スピーカはFireWireとも称されるIEEE1394バスを介してテレビジョン受像機に接続されているが、適当なサラウンドサウンド受信器に接続されてもよい。IEEE1394バスを使用することは、異なる機器間で高速データ伝送及び通信を可能とするため有利である。更に、能動スピーカの場合、このバスを介して同時に電力が供給されうる。
【0011】
ボイス信号の検出のため、マイクロホンアレイが設けられる。マイクロホンアレイはテレビジョン受像機に一体化された2つのマイクロホンMTV1及びMTV2を含み、マイクロホンMLS1及びMLS2はスピーカ筐体に一体化される。これらのマイクロホンは、検出されたサウンド信号を電気信号へ変換し、この電気信号は増幅器によって増幅され、AD変換器によってディジタル信号へ変換し、信号処理ユニットへ供給される。本例では、外部スピーカからの信号は同様にIEEE1394バスを介してテレビジョン受像機の中の信号処理ユニットへ供給される。上記信号処理ユニットは、検出されたサウンド信号の異なったスケーリング又は処理によって、ユーザの夫々の位置を考慮に入れる。更に、マイクロホン信号は、スピーカによって出力されるサウンド信号に関して補正されうる。このようにして処理される信号は次に、電気信号を単語へ変換する音声認識ユニットへ供給される。最後に、これらの単語に対応する命令がシステムを制御するためのシステムマネージャへ供給される。
【0012】
信号処理ユニットによる検出されたサウンド信号のスケーリング又は処理は、マイクロホンの空間的な配置がわかっていることを必要とする。これは、テレビジョン筐体に一体化されたマイクロホンの場合は製造者によって既知である。これに対して、スピーカ内に配置されたマイクロホンの場合、テレビジョン受像機に対する位置が決められねばならない。これは、対応する画面メニューを介して決められる値の測定及び入力によってなされる。しかしながら、測定及び構成動作は、試験信号トーンがスピーカによって再生され、マイクロホンによって検出され、マイクロホンの位置が様々な伝搬遅延から決定されることによっても行われうる。
【0013】
テレビジョン受像機に一体化された2つのマイクロホンは有利に夫々の機器の筐体の左側及び右側に収容されうる。しかしながら、マイクロホンの数及び更なるマイクロホンの数は2つに限られるものではない。マイクロホンが一体化される多数の組み合わせが考えられる。このようにマイクロホンは、テレビジョンではなく、又は、テレビジョンに加えて、ビデオレコーダ、DVDプレーヤ、又は遠隔制御器に一体化されうる。また、マイクロホンを異なった部屋に配置された機器に内蔵することも可能である。
【0014】
更に、機器の接続はバスシステムに限られるものではない。従って、例えば、図1の実施例のスピーカが無線信号によって駆動されることも考えられる。しかしながら、この場合、個々のスピーカは無線受信器のほかに無線送信器も有さねばならない。
【0015】
本発明は、例えば、テレビジョン受像機、ビデオレコーダ、DVDプレーヤ、衛星受信器、テレビジョン/ビデオの組合せ、オーディオ装置、又はパーソナルコンピュータ又は家庭用機器の同様の完全なオーディオシステムといった消費者電子機器に属する広範な機器のボイス作動遠隔制御のために使用されうる。
【図面の簡単な説明】
【図1】本発明によるマイクロホンアレイを用いたボイス制御のための配置を示す図である。
【符号の説明】
MLS1、MLS2 マイクロホン
LS1、LS2 外部スピーカ
TV テレビジョン受像機
MTV1、MTV2 マイクロホン
Claims (5)
- 1つ以上の外部機器を有する消費者電子機器のための、マイクロホンアレイを用いたボイス制御システムであって、
検出した信号を電気信号に変換する複数のマイクロホンであって、1つ以上のマイクロホンが前記外部機器と一体化された複数のマイクロホンと、
前記複数のマイクロホンに接続された中央信号処理ユニットであって、前記信号処理ユニットは前記複数のマイクロホンから受信した前記電気信号を前記消費者電子機器に対するそれぞれのマイクロホンの位置に応じてスケーリングまたは処理し、前記それぞれのマイクロホンの位置は前記消費者電子機器のスピーカにより再生されたテスト信号の伝搬遅延の相違により得られ、前記スケーリングまたは処理は異なる伝搬遅延を合わせる遅延を含む、中央信号処理ユニットと、
前記信号処理ユニットからの前記電気信号を前記消費者電子機器の操作コマンドに変換する中央音声認識ユニットと
を有するシステム。 - 前記外部機器は双方向ネットワークを介して前記消費者電子機器と接続される、請求項1記載のシステム。
- 前記双方向ネットワークはIEEE1394バスに基づくことを特徴とする、請求項2記載のシステム。
- 1つ以上のマイクロホンが追加的に消費者電子機器に一体化される、請求項1または2記載のシステム。
- 前記消費者電子機器はテレビジョンセットであり、前記外部機器は外部スピーカである、請求項1または2記載のシステム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE19943875A DE19943875A1 (de) | 1999-09-14 | 1999-09-14 | System zur Sprachsteuerung mit einem Mikrofonarray |
| DE19943875.7 | 1999-09-14 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2001117587A JP2001117587A (ja) | 2001-04-27 |
| JP2001117587A5 JP2001117587A5 (ja) | 2007-11-01 |
| JP4792156B2 true JP4792156B2 (ja) | 2011-10-12 |
Family
ID=7921899
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000277687A Expired - Lifetime JP4792156B2 (ja) | 1999-09-14 | 2000-09-13 | マイクロホンアレイを有するボイス制御システム |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US6868045B1 (ja) |
| EP (1) | EP1085782A3 (ja) |
| JP (1) | JP4792156B2 (ja) |
| CN (1) | CN1162837C (ja) |
| DE (1) | DE19943875A1 (ja) |
Families Citing this family (141)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8645137B2 (en) | 2000-03-16 | 2014-02-04 | Apple Inc. | Fast, language-independent method for user authentication by voice |
| DE10120513C1 (de) | 2001-04-26 | 2003-01-09 | Siemens Ag | Verfahren zur Bestimmung einer Folge von Lautbausteinen zum Synthetisieren eines Sprachsignals einer tonalen Sprache |
| US7349849B2 (en) * | 2001-08-08 | 2008-03-25 | Apple, Inc. | Spacing for microphone elements |
| DE10208468A1 (de) * | 2002-02-27 | 2003-09-04 | Bsh Bosch Siemens Hausgeraete | Elektrisches Gerät, insbesondere Dunstabzugshaube |
| DE10208466A1 (de) * | 2002-02-27 | 2004-01-29 | BSH Bosch und Siemens Hausgeräte GmbH | Elektrisches Haushaltsgerät |
| JP4837917B2 (ja) * | 2002-10-23 | 2011-12-14 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 音声に基づく装置制御 |
| KR100959983B1 (ko) * | 2005-08-11 | 2010-05-27 | 아사히 가세이 가부시키가이샤 | 음원 분리 장치, 음성 인식 장치, 휴대 전화기, 음원 분리방법, 및, 프로그램 |
| WO2007019992A1 (en) * | 2005-08-16 | 2007-02-22 | Vega Grieshaber Kg | Automation network field device using ultrasound communication link |
| US8677377B2 (en) | 2005-09-08 | 2014-03-18 | Apple Inc. | Method and apparatus for building an intelligent automated assistant |
| JP4965847B2 (ja) | 2005-10-27 | 2012-07-04 | ヤマハ株式会社 | 音声信号送受信装置 |
| EP1949750A1 (en) | 2005-11-02 | 2008-07-30 | Yamaha Corporation | Voice signal transmitting/receiving apparatus |
| JP5028786B2 (ja) * | 2005-11-02 | 2012-09-19 | ヤマハ株式会社 | 収音装置 |
| US8068619B2 (en) * | 2006-05-09 | 2011-11-29 | Fortemedia, Inc. | Method and apparatus for noise suppression in a small array microphone system |
| US9318108B2 (en) | 2010-01-18 | 2016-04-19 | Apple Inc. | Intelligent automated assistant |
| US8977255B2 (en) | 2007-04-03 | 2015-03-10 | Apple Inc. | Method and system for operating a multi-function portable electronic device using voice-activation |
| US9330720B2 (en) | 2008-01-03 | 2016-05-03 | Apple Inc. | Methods and apparatus for altering audio output signals |
| US8144896B2 (en) * | 2008-02-22 | 2012-03-27 | Microsoft Corporation | Speech separation with microphone arrays |
| US8996376B2 (en) | 2008-04-05 | 2015-03-31 | Apple Inc. | Intelligent text-to-speech conversion |
| US10496753B2 (en) | 2010-01-18 | 2019-12-03 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
| US20100030549A1 (en) | 2008-07-31 | 2010-02-04 | Lee Michael M | Mobile device having human language translation capability with positional feedback |
| EP2670165B1 (en) | 2008-08-29 | 2016-10-05 | Biamp Systems Corporation | A microphone array system and method for sound acquistion |
| US9959870B2 (en) | 2008-12-11 | 2018-05-01 | Apple Inc. | Speech recognition involving a mobile device |
| US10241752B2 (en) | 2011-09-30 | 2019-03-26 | Apple Inc. | Interface for a virtual digital assistant |
| US10241644B2 (en) | 2011-06-03 | 2019-03-26 | Apple Inc. | Actionable reminder entries |
| US9858925B2 (en) | 2009-06-05 | 2018-01-02 | Apple Inc. | Using context information to facilitate processing of commands in a virtual assistant |
| US10706373B2 (en) | 2011-06-03 | 2020-07-07 | Apple Inc. | Performing actions associated with task items that represent tasks to perform |
| US9431006B2 (en) | 2009-07-02 | 2016-08-30 | Apple Inc. | Methods and apparatuses for automatic speech recognition |
| EP2502090A4 (en) * | 2009-11-19 | 2013-07-03 | Adamson Systems Engineering Inc | Method and system for determining the relative position of multiple speakers in a room |
| US10276170B2 (en) | 2010-01-18 | 2019-04-30 | Apple Inc. | Intelligent automated assistant |
| US10705794B2 (en) | 2010-01-18 | 2020-07-07 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
| US10679605B2 (en) | 2010-01-18 | 2020-06-09 | Apple Inc. | Hands-free list-reading by intelligent automated assistant |
| US10553209B2 (en) | 2010-01-18 | 2020-02-04 | Apple Inc. | Systems and methods for hands-free notification summaries |
| US8977584B2 (en) | 2010-01-25 | 2015-03-10 | Newvaluexchange Global Ai Llp | Apparatuses, methods and systems for a digital conversation management platform |
| US8682667B2 (en) | 2010-02-25 | 2014-03-25 | Apple Inc. | User profiling for selecting user specific voice input processing information |
| CN101894553A (zh) * | 2010-07-23 | 2010-11-24 | 四川长虹电器股份有限公司 | 电视机语音控制的实现方法 |
| US10762293B2 (en) | 2010-12-22 | 2020-09-01 | Apple Inc. | Using parts-of-speech tagging and named entity recognition for spelling correction |
| US9262612B2 (en) | 2011-03-21 | 2016-02-16 | Apple Inc. | Device access using voice authentication |
| US10057736B2 (en) | 2011-06-03 | 2018-08-21 | Apple Inc. | Active transport based notifications |
| US8994660B2 (en) | 2011-08-29 | 2015-03-31 | Apple Inc. | Text correction processing |
| US10134385B2 (en) | 2012-03-02 | 2018-11-20 | Apple Inc. | Systems and methods for name pronunciation |
| US9483461B2 (en) | 2012-03-06 | 2016-11-01 | Apple Inc. | Handling speech synthesis of content for multiple languages |
| EP2660813B1 (en) * | 2012-04-30 | 2014-12-17 | BlackBerry Limited | Dual microphone voice authentication for mobile device |
| US9280610B2 (en) | 2012-05-14 | 2016-03-08 | Apple Inc. | Crowd sourcing information to fulfill user requests |
| US9721563B2 (en) | 2012-06-08 | 2017-08-01 | Apple Inc. | Name recognition system |
| US9495129B2 (en) | 2012-06-29 | 2016-11-15 | Apple Inc. | Device, method, and user interface for voice-activated navigation and browsing of a document |
| US9576574B2 (en) | 2012-09-10 | 2017-02-21 | Apple Inc. | Context-sensitive handling of interruptions by intelligent digital assistant |
| US9547647B2 (en) | 2012-09-19 | 2017-01-17 | Apple Inc. | Voice-based media searching |
| EP4138075B1 (en) | 2013-02-07 | 2025-06-11 | Apple Inc. | Voice trigger for a digital assistant |
| US10049685B2 (en) | 2013-03-12 | 2018-08-14 | Aaware, Inc. | Integrated sensor-array processor |
| US10204638B2 (en) | 2013-03-12 | 2019-02-12 | Aaware, Inc. | Integrated sensor-array processor |
| WO2014165032A1 (en) | 2013-03-12 | 2014-10-09 | Aawtend, Inc. | Integrated sensor-array processor |
| US9368114B2 (en) | 2013-03-14 | 2016-06-14 | Apple Inc. | Context-sensitive handling of interruptions |
| US9922642B2 (en) | 2013-03-15 | 2018-03-20 | Apple Inc. | Training an at least partial voice command system |
| WO2014144579A1 (en) | 2013-03-15 | 2014-09-18 | Apple Inc. | System and method for updating an adaptive speech recognition model |
| JP6114915B2 (ja) * | 2013-03-25 | 2017-04-19 | パナソニックIpマネジメント株式会社 | 音声入力選択装置及び音声入力選択方法 |
| US9582608B2 (en) | 2013-06-07 | 2017-02-28 | Apple Inc. | Unified ranking with entropy-weighted information for phrase-based semantic auto-completion |
| WO2014197334A2 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for user-specified pronunciation of words for speech synthesis and recognition |
| WO2014197336A1 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for detecting errors in interactions with a voice-based digital assistant |
| WO2014197335A1 (en) | 2013-06-08 | 2014-12-11 | Apple Inc. | Interpreting and acting upon commands that involve sharing information with remote devices |
| KR101959188B1 (ko) | 2013-06-09 | 2019-07-02 | 애플 인크. | 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스 |
| US10176167B2 (en) | 2013-06-09 | 2019-01-08 | Apple Inc. | System and method for inferring user intent from speech inputs |
| JP2016521948A (ja) | 2013-06-13 | 2016-07-25 | アップル インコーポレイテッド | 音声コマンドによって開始される緊急電話のためのシステム及び方法 |
| WO2015020942A1 (en) | 2013-08-06 | 2015-02-12 | Apple Inc. | Auto-activating smart responses based on activities from remote devices |
| US9620105B2 (en) | 2014-05-15 | 2017-04-11 | Apple Inc. | Analyzing audio input for efficient speech and music recognition |
| US10592095B2 (en) | 2014-05-23 | 2020-03-17 | Apple Inc. | Instantaneous speaking of content on touch devices |
| US9502031B2 (en) | 2014-05-27 | 2016-11-22 | Apple Inc. | Method for supporting dynamic grammars in WFST-based ASR |
| US9430463B2 (en) | 2014-05-30 | 2016-08-30 | Apple Inc. | Exemplar-based natural language processing |
| WO2015184186A1 (en) | 2014-05-30 | 2015-12-03 | Apple Inc. | Multi-command single utterance input method |
| US9760559B2 (en) | 2014-05-30 | 2017-09-12 | Apple Inc. | Predictive text input |
| US9715875B2 (en) | 2014-05-30 | 2017-07-25 | Apple Inc. | Reducing the need for manual start/end-pointing and trigger phrases |
| US10170123B2 (en) | 2014-05-30 | 2019-01-01 | Apple Inc. | Intelligent assistant for home automation |
| US9785630B2 (en) | 2014-05-30 | 2017-10-10 | Apple Inc. | Text prediction using combined word N-gram and unigram language models |
| US10078631B2 (en) | 2014-05-30 | 2018-09-18 | Apple Inc. | Entropy-guided text prediction using combined word and character n-gram language models |
| US9734193B2 (en) | 2014-05-30 | 2017-08-15 | Apple Inc. | Determining domain salience ranking from ambiguous words in natural speech |
| US9633004B2 (en) | 2014-05-30 | 2017-04-25 | Apple Inc. | Better resolution when referencing to concepts |
| US9842101B2 (en) | 2014-05-30 | 2017-12-12 | Apple Inc. | Predictive conversion of language input |
| US10289433B2 (en) | 2014-05-30 | 2019-05-14 | Apple Inc. | Domain specific language for encoding assistant dialog |
| US10659851B2 (en) | 2014-06-30 | 2020-05-19 | Apple Inc. | Real-time digital assistant knowledge updates |
| US9338493B2 (en) | 2014-06-30 | 2016-05-10 | Apple Inc. | Intelligent automated assistant for TV user interactions |
| US10446141B2 (en) | 2014-08-28 | 2019-10-15 | Apple Inc. | Automatic speech recognition based on user feedback |
| US9818400B2 (en) | 2014-09-11 | 2017-11-14 | Apple Inc. | Method and apparatus for discovering trending terms in speech requests |
| US10789041B2 (en) | 2014-09-12 | 2020-09-29 | Apple Inc. | Dynamic thresholds for always listening speech trigger |
| US10127911B2 (en) | 2014-09-30 | 2018-11-13 | Apple Inc. | Speaker identification and unsupervised speaker adaptation techniques |
| US9668121B2 (en) | 2014-09-30 | 2017-05-30 | Apple Inc. | Social reminders |
| US9886432B2 (en) | 2014-09-30 | 2018-02-06 | Apple Inc. | Parsimonious handling of word inflection via categorical stem + suffix N-gram language models |
| US9646609B2 (en) | 2014-09-30 | 2017-05-09 | Apple Inc. | Caching apparatus for serving phonetic pronunciations |
| US10074360B2 (en) | 2014-09-30 | 2018-09-11 | Apple Inc. | Providing an indication of the suitability of speech recognition |
| US9699550B2 (en) * | 2014-11-12 | 2017-07-04 | Qualcomm Incorporated | Reduced microphone power-up latency |
| US10552013B2 (en) | 2014-12-02 | 2020-02-04 | Apple Inc. | Data detection |
| US9711141B2 (en) | 2014-12-09 | 2017-07-18 | Apple Inc. | Disambiguating heteronyms in speech synthesis |
| US9865280B2 (en) | 2015-03-06 | 2018-01-09 | Apple Inc. | Structured dictation using intelligent automated assistants |
| US9721566B2 (en) | 2015-03-08 | 2017-08-01 | Apple Inc. | Competing devices responding to voice triggers |
| US10567477B2 (en) | 2015-03-08 | 2020-02-18 | Apple Inc. | Virtual assistant continuity |
| US9886953B2 (en) | 2015-03-08 | 2018-02-06 | Apple Inc. | Virtual assistant activation |
| US9899019B2 (en) | 2015-03-18 | 2018-02-20 | Apple Inc. | Systems and methods for structured stem and suffix language models |
| US9842105B2 (en) | 2015-04-16 | 2017-12-12 | Apple Inc. | Parsimonious continuous-space phrase representations for natural language processing |
| US10083688B2 (en) | 2015-05-27 | 2018-09-25 | Apple Inc. | Device voice control for selecting a displayed affordance |
| US10127220B2 (en) | 2015-06-04 | 2018-11-13 | Apple Inc. | Language identification from short strings |
| US10101822B2 (en) | 2015-06-05 | 2018-10-16 | Apple Inc. | Language input correction |
| US9578173B2 (en) | 2015-06-05 | 2017-02-21 | Apple Inc. | Virtual assistant aided communication with 3rd party service in a communication session |
| US10186254B2 (en) | 2015-06-07 | 2019-01-22 | Apple Inc. | Context-based endpoint detection |
| US11025565B2 (en) | 2015-06-07 | 2021-06-01 | Apple Inc. | Personalized prediction of responses for instant messaging |
| US10255907B2 (en) | 2015-06-07 | 2019-04-09 | Apple Inc. | Automatic accent detection using acoustic models |
| US10747498B2 (en) | 2015-09-08 | 2020-08-18 | Apple Inc. | Zero latency digital assistant |
| US10671428B2 (en) | 2015-09-08 | 2020-06-02 | Apple Inc. | Distributed personal assistant |
| US9697820B2 (en) | 2015-09-24 | 2017-07-04 | Apple Inc. | Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks |
| US11010550B2 (en) | 2015-09-29 | 2021-05-18 | Apple Inc. | Unified language modeling framework for word prediction, auto-completion and auto-correction |
| US10366158B2 (en) | 2015-09-29 | 2019-07-30 | Apple Inc. | Efficient word encoding for recurrent neural network language models |
| US11587559B2 (en) | 2015-09-30 | 2023-02-21 | Apple Inc. | Intelligent device identification |
| US10691473B2 (en) | 2015-11-06 | 2020-06-23 | Apple Inc. | Intelligent automated assistant in a messaging environment |
| US10049668B2 (en) | 2015-12-02 | 2018-08-14 | Apple Inc. | Applying neural network language models to weighted finite state transducers for automatic speech recognition |
| US10223066B2 (en) | 2015-12-23 | 2019-03-05 | Apple Inc. | Proactive assistance based on dialog communication between devices |
| US10446143B2 (en) | 2016-03-14 | 2019-10-15 | Apple Inc. | Identification of voice inputs providing credentials |
| US9934775B2 (en) | 2016-05-26 | 2018-04-03 | Apple Inc. | Unit-selection text-to-speech synthesis based on predicted concatenation parameters |
| US9972304B2 (en) | 2016-06-03 | 2018-05-15 | Apple Inc. | Privacy preserving distributed evaluation framework for embedded personalized systems |
| US10249300B2 (en) | 2016-06-06 | 2019-04-02 | Apple Inc. | Intelligent list reading |
| US10049663B2 (en) | 2016-06-08 | 2018-08-14 | Apple, Inc. | Intelligent automated assistant for media exploration |
| DK179588B1 (en) | 2016-06-09 | 2019-02-22 | Apple Inc. | INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT |
| US10586535B2 (en) | 2016-06-10 | 2020-03-10 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
| US10192552B2 (en) | 2016-06-10 | 2019-01-29 | Apple Inc. | Digital assistant providing whispered speech |
| US10509862B2 (en) | 2016-06-10 | 2019-12-17 | Apple Inc. | Dynamic phrase expansion of language input |
| US10067938B2 (en) | 2016-06-10 | 2018-09-04 | Apple Inc. | Multilingual word prediction |
| US10490187B2 (en) | 2016-06-10 | 2019-11-26 | Apple Inc. | Digital assistant providing automated status report |
| DK179343B1 (en) | 2016-06-11 | 2018-05-14 | Apple Inc | Intelligent task discovery |
| DK179049B1 (en) | 2016-06-11 | 2017-09-18 | Apple Inc | Data driven natural language event detection and classification |
| DK201670540A1 (en) | 2016-06-11 | 2018-01-08 | Apple Inc | Application integration with a digital assistant |
| DK179415B1 (en) | 2016-06-11 | 2018-06-14 | Apple Inc | Intelligent device arbitration and control |
| KR102471499B1 (ko) | 2016-07-05 | 2022-11-28 | 삼성전자주식회사 | 영상처리장치, 영상처리장치의 구동방법 및 컴퓨터 판독가능 기록매체 |
| US10043516B2 (en) | 2016-09-23 | 2018-08-07 | Apple Inc. | Intelligent automated assistant |
| US10593346B2 (en) | 2016-12-22 | 2020-03-17 | Apple Inc. | Rank-reduced token representation for automatic speech recognition |
| CN106878869B (zh) * | 2017-03-30 | 2020-07-24 | 联想(北京)有限公司 | 麦克风阵列及其使用方法 |
| DK201770439A1 (en) | 2017-05-11 | 2018-12-13 | Apple Inc. | Offline personal assistant |
| DK179496B1 (en) | 2017-05-12 | 2019-01-15 | Apple Inc. | USER-SPECIFIC Acoustic Models |
| DK179745B1 (en) | 2017-05-12 | 2019-05-01 | Apple Inc. | SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT |
| DK201770432A1 (en) | 2017-05-15 | 2018-12-21 | Apple Inc. | Hierarchical belief states for digital assistants |
| DK201770431A1 (en) | 2017-05-15 | 2018-12-20 | Apple Inc. | Optimizing dialogue policy decisions for digital assistants using implicit feedback |
| DK179560B1 (en) | 2017-05-16 | 2019-02-18 | Apple Inc. | FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES |
| CN109935237A (zh) * | 2017-12-19 | 2019-06-25 | 展讯通信(上海)有限公司 | 多移动终端的mic阵列自校准方法、装置及服务器 |
| CN108737927B (zh) * | 2018-05-31 | 2020-04-17 | 北京百度网讯科技有限公司 | 确定麦克风阵列的位置的方法、装置、设备和介质 |
| US11170798B2 (en) * | 2018-12-12 | 2021-11-09 | Bby Solutions, Inc. | Remote audio pickup and noise cancellation system and method |
| KR102215543B1 (ko) * | 2019-02-26 | 2021-02-15 | 주식회사 큐버 | Uhd 방송을 위한 어레이 스피커와 어레이 마이크 기반의 ai 음성비서 장치 |
Family Cites Families (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| FI58023C (fi) * | 1978-07-03 | 1980-11-10 | Erkki Juhani Yloenen | Foerfarande vid anvaendning av mikrofoner foer att pao skyttens order utloesa lerduveslungan och anordning foer genomfoerande av foerfarandet |
| US4311874A (en) | 1979-12-17 | 1982-01-19 | Bell Telephone Laboratories, Incorporated | Teleconference microphone arrays |
| US4357488A (en) * | 1980-01-04 | 1982-11-02 | California R & D Center | Voice discriminating system |
| DE3742929C1 (de) * | 1987-12-18 | 1988-09-29 | Daimler Benz Ag | Verfahren zur Verbesserung der Zuverlaessigkeit von Sprachsteuerungen von Funktionselementen und Vorrichtung zu dessen Durchfuehrung |
| JPH0272398A (ja) * | 1988-09-07 | 1990-03-12 | Hitachi Ltd | 音声信号用前処理装置 |
| US5086385A (en) * | 1989-01-31 | 1992-02-04 | Custom Command Systems | Expandable home automation system |
| JP2687712B2 (ja) * | 1990-07-26 | 1997-12-08 | 三菱電機株式会社 | 一体型ビデオカメラ |
| JP2830421B2 (ja) * | 1990-08-14 | 1998-12-02 | ソニー株式会社 | ワイヤレス受信機 |
| JPH0756596B2 (ja) * | 1990-09-11 | 1995-06-14 | 富士通テン株式会社 | 音声認識装置 |
| JPH04318798A (ja) * | 1991-04-18 | 1992-11-10 | Matsushita Electric Ind Co Ltd | マイクロホン装置 |
| US5255326A (en) * | 1992-05-18 | 1993-10-19 | Alden Stevenson | Interactive audio control system |
| US5963872A (en) * | 1993-03-04 | 1999-10-05 | Telefonaktiebolaget Lm Ericsson (Publ) | Electronic equipment audio system |
| FR2744630B1 (fr) * | 1996-02-09 | 1998-05-15 | Ecole Superieure Atlantique D | Fauteuil roulant motorise a dispositif de commande vocale supervise par un dispositif de securite, et procede de commande et securisation du deplacement d'un tel fauteuil |
| US6188985B1 (en) * | 1997-01-06 | 2001-02-13 | Texas Instruments Incorporated | Wireless voice-activated device for control of a processor-based host system |
| DE19712632A1 (de) * | 1997-03-26 | 1998-10-01 | Thomson Brandt Gmbh | Verfahren und Vorrichtung zur Sprachfernsteuerung von Geräten |
| DE59807151D1 (de) * | 1997-05-22 | 2003-03-20 | Inventio Ag | Eingabegerät und Verfahren zur akustischen Befehlseingabe für eine Aufzugsanlage |
| JP3541339B2 (ja) | 1997-06-26 | 2004-07-07 | 富士通株式会社 | マイクロホンアレイ装置 |
| DE19741596A1 (de) * | 1997-09-20 | 1999-03-25 | Bosch Gmbh Robert | Verfahren zur Optimierung des Empfangs akustischer Signale und elektrisches Gerät |
| DE69712485T2 (de) * | 1997-10-23 | 2002-12-12 | Sony International (Europe) Gmbh | Sprachschnittstelle für ein Hausnetzwerk |
| US6349352B1 (en) * | 1998-01-06 | 2002-02-19 | Sony Corporation Of Japan | Home audio/video network with both generic and parameterized device control |
| DE19812697A1 (de) * | 1998-03-23 | 1999-09-30 | Volkswagen Ag | Verfahren und Einrichtung zum Betrieb einer Mikrofonanordnung, insbesondere in einem Kraftfahrzeug |
| DE19827134A1 (de) * | 1998-05-06 | 1999-11-11 | Volkswagen Ag | Verfahren und Einrichtung zum Betrieb von sprachunterstützten Systemen in Kraftfahrzeugen |
-
1999
- 1999-09-14 DE DE19943875A patent/DE19943875A1/de not_active Withdrawn
-
2000
- 2000-08-18 CN CNB001234986A patent/CN1162837C/zh not_active Expired - Lifetime
- 2000-09-02 EP EP00119085A patent/EP1085782A3/en not_active Ceased
- 2000-09-12 US US09/660,381 patent/US6868045B1/en not_active Expired - Lifetime
- 2000-09-13 JP JP2000277687A patent/JP4792156B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2001117587A (ja) | 2001-04-27 |
| CN1288222A (zh) | 2001-03-21 |
| DE19943875A1 (de) | 2001-03-15 |
| EP1085782A2 (en) | 2001-03-21 |
| US6868045B1 (en) | 2005-03-15 |
| CN1162837C (zh) | 2004-08-18 |
| EP1085782A3 (en) | 2001-08-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4792156B2 (ja) | マイクロホンアレイを有するボイス制御システム | |
| JPH10282993A (ja) | 機器の音声作動式遠隔制御システム | |
| US9595252B2 (en) | Noise reduction audio reproducing device and noise reduction audio reproducing method | |
| CN101681617B (zh) | 具有环境降噪的通信装置 | |
| JP4897169B2 (ja) | 音声認識装置及び消費者電子システム | |
| JP2010164970A (ja) | オーディオシステム及びその出力制御方法 | |
| CN101277331A (zh) | 声音再现设备和声音再现方法 | |
| CN102104815A (zh) | 自动调音耳机及耳机调音方法 | |
| US20150365061A1 (en) | System and method for modifying an audio signal | |
| US20140294193A1 (en) | Transducer apparatus with in-ear microphone | |
| EP3827597B1 (en) | Bluetooth speaker configured to produce sound as well as simultaneously act as both sink and source | |
| US20120197635A1 (en) | Method for generating an audio signal | |
| WO2020017518A1 (ja) | 音声信号処理装置 | |
| US20120057714A1 (en) | Automatic Tunable Earphone And Method For Tuning The Same | |
| JP6936860B2 (ja) | 音声信号処理装置 | |
| JPH07212890A (ja) | 車室内音場自動補正システム | |
| US20060111154A1 (en) | Apparatus and method for a full-duplex speakerphone using a digital automobile radio and a cellular phone | |
| JP2009283997A (ja) | 音声出力装置、プログラム、および記録媒体 | |
| KR20020028918A (ko) | 오디오 시스템 | |
| KR20050083324A (ko) | 노이즈 감쇄가 가능한 헤드폰 | |
| US20100303252A1 (en) | Data relay apparatus, acoustic reproduction system and control method of the same | |
| CN222967061U (zh) | 一种音频系统及音频设备 | |
| KR100923872B1 (ko) | 홈시어터 시스템의 오디오 신호 출력장치 및 이를 이용한신호 출력방법 | |
| TWI736122B (zh) | 用於聲學回聲消除的時間延遲校準方法及電視裝置 | |
| KR100923573B1 (ko) | 이어 마이크 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070912 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070912 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100330 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100630 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110215 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110712 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110725 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140729 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4792156 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
| R370 | Written measure of declining of transfer procedure |
Free format text: JAPANESE INTERMEDIATE CODE: R370 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| S631 | Written request for registration of reclamation of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313631 |
|
| S633 | Written request for registration of reclamation of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313633 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |