JP2015201739A - 複数機器の音声操作システム、音声操作方法及び、プログラム - Google Patents

複数機器の音声操作システム、音声操作方法及び、プログラム Download PDF

Info

Publication number
JP2015201739A
JP2015201739A JP2014079100A JP2014079100A JP2015201739A JP 2015201739 A JP2015201739 A JP 2015201739A JP 2014079100 A JP2014079100 A JP 2014079100A JP 2014079100 A JP2014079100 A JP 2014079100A JP 2015201739 A JP2015201739 A JP 2015201739A
Authority
JP
Japan
Prior art keywords
voice
information
target
name
remote controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014079100A
Other languages
English (en)
Other versions
JP6282516B2 (ja
Inventor
良宏 小島
Yoshihiro Kojima
良宏 小島
池田　洋一
Yoichi Ikeda
洋一 池田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=52997191&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2015201739(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Priority to JP2014079100A priority Critical patent/JP6282516B2/ja
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Priority to US14/667,661 priority patent/US9431017B2/en
Priority to EP15160749.6A priority patent/EP2930715B1/en
Priority to EP18163376.9A priority patent/EP3361477A1/en
Publication of JP2015201739A publication Critical patent/JP2015201739A/ja
Priority to US15/217,116 priority patent/US9747903B2/en
Priority to US15/656,426 priority patent/US10102861B2/en
Publication of JP6282516B2 publication Critical patent/JP6282516B2/ja
Application granted granted Critical
Priority to US16/132,871 priority patent/US10515641B2/en
Priority to US16/707,799 priority patent/US20200111498A1/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • G10L17/22—Interactive procedures; Man-machine interfaces
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/72—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for transmitting results of analysis
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Selective Calling Equipment (AREA)
  • Air Conditioning Control Device (AREA)
  • Details Of Television Systems (AREA)

Abstract

【課題】ユーザが音声操作を頻繁に行う特定の機器に、その機器名を省略しても音声操作が可能な複数機器の音声操作システムを提供する。
【解決手段】 操作対象の複数機器と、前記複数機器の中の一つの機器に対応付けられたリモコンと、前記複数機器を音声操作する統合制御機器を備え、前記リモコンは、ユーザの音声を入力する収音部と、ユーザのリモコン操作情報を生成する操作情報生成部を備え、前記統合制御機器は、前記音声から機器名と操作名を認識結果として出力する音声認識部と、前記機器名と前記リモコン操作情報に基づいて、操作対象機器を特定する機器特定部と、前記操作名から前記特定された機器に対する操作内容を特定する操作特定部を備え、前記機器特定部は、前記認識結果において、前記機器名が抽出されなかった場合、前記リモコン操作情報を用いて操作対象機器を特定する。
【選択図】図１

Description

本開示は、音声認識を用いて、複数の電子機器を遠隔操作するためのシステム及び方法に関する。
近年、音声認識技術の発達によって音声認識精度が大きく向上している。これに伴い、各種の機器を音声によって操作する機器管理システムが検討されている。これによって、煩わしいボタン操作をすることなく、ユーザが各種の機器に所望の操作内容を発話することで、各種の機器が制御可能になることが期待されている。
特許文献１および特許文献２は、ユーザが音声コマンドを発話することにより、複数の機器を統合制御するシステムを開示している。
特開平１１−８５１９１号公報 特開２００３−１５３３５５号公報
しかし、現時点においても上記システムは未だ検討段階であり、実用化には更なる改善が必要とされている。
本願の、限定的ではない例示的なある実施形態は、実用化に耐え得る、ユーザが使いやすい機器制御技術を提供する。
上記課題を解決するための、本開示による一実施形態に係る機器管理システムにおける機器制御方法は、同一宅内に配置された複数の対象機器に接続され、前記複数の対象機器を管理する機器管理システムにおける機器制御方法であって、ネットワークを介して、前記複数の対象機器の中の特定対象機器と対応付けられた音声入力装置から、前記複数の対象機器の中の一以上の対象機器に対する操作指示を表す第１音声情報を含む指示情報を受信し、前記受信した指示情報に含まれる前記第１音声情報から前記操作指示を認識し、前記指示情報に前記複数の対象機器の中のいずれかの対象機器を表す第２音声情報が含まれるか否かを判断し、前記指示情報に前記第２音声情報が含まれない場合は、前記音声入力装置に対応する前記特定対象機器に、前記ネットワークを介して、前記認識された操作内容を実行させる制御コマンドを送信し、また、前記指示情報に前記第２音声情報が含まれる場合は、前記第２音声情報が表す対象機器に、前記ネットワークを介して、前記制御コマンドを送信する。
上述の一般的かつ特定の態様は、システム、方法およびコンピュータプログラムを用いて実装され、またはシステム、方法およびコンピュータプログラムの組み合わせを用いて実現され得る。
上記態様により、さらなる改善を実現できた。
例示的な実施の形態１に係る複数機器の音声操作システムのブロック図である。 例示的な実施の形態１に係る宅内機器操作コマンドデータベースに記憶されている情報の一例を示す図である。 例示的な実施の形態１に係るリモコンの動作を説明するフローチャートである。 例示的な実施の形態１に係る統合制御機器の動作を説明するフローチャートである。 例示的な機器名称管理テーブルを示す図である。 例示的なリモコン対応機器管理テーブルを示す図である。 例示的な実施の形態２に係る複数機器の音声操作システムのブロック図である。 例示的な実施の形態２に係る統合制御機器の動作を説明するフローチャートである。 例示的な実施の形態３に係る複数機器の音声操作システムのブロック図である。 例示的な実施の形態３に係るリモコンの動作を説明するフローチャートである。
（本発明に至った経緯）
従来の電子機器では、各機器専用のリモコンが用意されていることが多く、通常、ユーザは、これらの専用リモコンを用いて対応する電子機器を遠隔操作していた。しかし、近年の電子機器の高機能化に伴って、リモコンのボタン数が急激に増加し、ユーザが目的の操作を簡単に行うことができないという問題が生じていた。そこで、最近では、リモコンのボタン数を削減しつつ、リモコンの利便性を向上させるために、音声認識機能を備えたリモコン及び電子機器がいろいろ提案されている。
一方、無線ＬＡＮやエコネット等のホームネットワークの進展に伴って、最近では、テレビ等のＡＶ機器やパソコン等の情報機器はもちろんのこと、エアコンや冷蔵庫等の白物家電もホームネットワークに常時接続されるようになってきた。そして、これらのホームネットワークを介して、家庭内にある全ての電子機器を統合制御するシステムが多数提案されている。更に、このような統合制御システムの利便性を向上させるために、音声認識機能を利用した統合制御システムが提案されており、宅内にある様々な電子機器が音声で操作できるようになっている。
例えば、特許文献１や特許文献２では、ユーザが音声コマンドを発話することにより、複数の機器を統合制御するシステムが開示されている。具体的には、ユーザは、操作対象の機器名（例えば、「テレビ」「エアコン」等）と、各機器に対する操作の内容を示す操作名（例えば、「音量を上げて」「冷房」等）を連続的に発話することで、操作対象の機器を音声操作することができる。
特許文献１のように、音声によって複数の機器を統合操作する従来のシステムにおいては、ユーザは、操作対象の機器を特定するために、通常、操作対象の機器名（例えば、「テレビ」や「エアコン」等）を含んだ音声コマンド、例えば、「テレビ、音量を上げて」「エアコン、暖房をつけて」等、を発話する必要がある。
よって、ホームネットワーク上にある複数機器の中で、ユーザが音声操作を行う機器がほぼ一つに決まっている場合でも、ユーザは常にその機器名を含んだ音声コマンドを発話する必要があり、操作が煩わしいという課題がある。
また、音声認識機能を備えた単一の電子機器を既に利用していたユーザが、複数の電子機器を操作するために、ホームネットワークを用いた統合制御システムを導入した場合、ユーザは、ホームネットワーク上の全ての機器を音声で操作することができるようになる一方で、既存の音声認識機能を備えた電子機器を音声操作する時には、常に、その機器名を含んだ音声コマンドを発話する必要があった。
例えば、既存の音声認識機能を備えたＴＶを保有していたユーザは、ＴＶを単体で利用していた時は、「４チャンネル」、「音量を上げて」等の操作名を発話するだけでＴＶを操作できていたが、統合制御システムを導入した後は、「テレビ、４チャンネル」、「テレビ、音量を上げて」と、常に機器名を示す「テレビ」という言葉を発話する必要がある。
よって、統合制御システム導入直後において、ユーザが既存の音声認識機能を備えた電子機器を音声操作する際には、機器名をつけることを忘れて発話する等、ユーザが誤った発話をする可能性が非常に高くなる。よって、ユーザが機器名を含んだ音声コマンドを発話することに慣れるまで、既存の音声認識機能を備えた電子機器には、機器単体で音声操作を行っていたときに比べ、誤操作が頻繁に発生し、操作の煩わしさを感じさせてしまうという課題がある。特に、既存の音声認識機能を備えた電子機器が、ユーザが音声操作を頻繁に行う電子機器である場合には、操作性が著しく低下する可能性があり、ユーザがスムーズに統合制御システムに移行できないという問題が生じる。
そこで、本発明では、複数の電子機器を音声操作することが可能で、かつ、ユーザが音声操作を頻繁に行う特定の機器には、その機器名を省略しても音声操作が可能な操作性に優れた複数機器の音声操作システムを提供することを目的とする。
そこで、本願発明者らは、音声入力を用いた機器管理システムの機能向上のため、以下の改善策を検討した。
同一宅内に配置された複数の対象機器に接続され、前記複数の対象機器を管理する機器管理システムにおける機器制御方法であって、ネットワークを介して、前記複数の対象機器の中の特定対象機器と対応付けられた音声入力装置から、前記複数の対象機器の中の一以上の対象機器に対する操作指示を表す第１音声情報を含む指示情報を受信し、前記受信した指示情報に含まれる前記第１音声情報から前記操作指示を認識し、前記指示情報に前記複数の対象機器の中のいずれかの対象機器を表す第２音声情報が含まれるか否かを判断し、前記指示情報に前記第２音声情報が含まれない場合は、前記音声入力装置に対応する前記特定対象機器に、前記ネットワークを介して、前記認識された操作内容を実行させる制御コマンドを送信し、また、前記指示情報に前記第２音声情報が含まれる場合は、前記第２音声情報が表す対象機器に、前記ネットワークを介して、前記制御コマンドを送信する。
上記態様によると、音声入力装置から受信した指示情報に複数の対象機器の中のいずれかの対象機器を表す第２音声情報が含まれない場合は、前記音声入力装置に対応する前記特定対象機器に、前記認識された操作内容を実行させる制御コマンドを送信し、また、前記指示情報に前記第２音声情報が含まれる場合は、前記第２音声情報が表す対象機器に、前記制御コマンドを送信する。
これにより、例えば、ホームネットワーク上にある複数の対象機器に、音声入力装置を用いた音声操作が行えるとともに、複数の対象機器の中で、一つの音声入力装置に対応付けられた特定の対象機器に関しては、例えば、機器名の発話を省略した音声操作が可能となる。
従って、例えば、他の対象機器と比較して特定の対象機器の音声操作の使用頻度が高い場合、もしくは、ほぼ一つに決まっている場合には、その特定の機器に、その機器名などを発話する必要がなくなるので、ユーザの煩雑さを軽減できるとともに、特定の対象機器への迅速な操作指示が可能となる。更に、例えば、既存の音声入力装置による音声認識機器を利用していたユーザが、ホームネットワークを用いた統合制御システムを導入した場合でも、ユーザは、既存の音声認識機器に関しては、対象機器に対応づけられた音声入力装置を用いて操作すれば、機器名などを省略した音声コマンドを受け付けてくれるので、システム導入前と同一の操作が行うことが可能となり、誤操作を減らすことが可能となる。
上記態様において、例えば、前記指示情報は、前記音声入力装置を識別する識別情報を含み、前記識別情報と前記特定対象機器の機器ＩＤとを対応づけた第１データベースを参照して、前記特定対象機器を特定し、前記特定機器に前記制御コマンドを送信するとしてもよい。
上記態様において、例えば、前記複数の対象機器の各々に対応する機器ＩＤと前記第２音声情報とを対応づけた第２データベースを参照して、前記第２音声情報が表す対象機器を特定し、前記特定した対象機器に前記制御コマンドを送信するとしてもよい。
上記態様において、例えば、前記音声入力装置は、物理ボタンまたはタッチパネルを備え、前記物理ボタンまたは前記タッチパネルを用いて入力される前記一の対象機器への操作指示を、無線通信を用いて送信するとしてもよい。
また、他の態様において、同一宅内に配置された複数の対象機器に接続され、前記複数の対象機器を管理する機器管理システムにおける機器制御方法であって、前記複数の対象機器の中の特定対象機器に対応付けられたリモートコントローラをユーザが使用している場合、ネットワークを介して、前記リモートコントローラから当該リモートコントローラを識別するリモコン識別情報を受信し、前記ネットワークを介して、前記機器管理システムに接続された音声入力装置から、前記複数の対象機器の中の一以上の対象機器に対する操作指示を表す第１音声情報を含む指示情報を受信し、前記受信した指示情報に含まれる前記第１音声情報から前記操作指示を認識し、前記指示情報に前記複数の対象機器の中のいずれかの対象機器を表す第２音声情報が含まれるか否かを判断し、前記指示情報に前記第２音声情報が含まれない場合は、前記受信したリモコン識別情報に基づいて、前記リモートコントローラに対応する前記特定対象機器を特定し、前記特定対象機器に、前記ネットワークを介して、前記認識された操作内容を実行させる制御コマンドを送信し、また、前記指示情報に前記第２音声情報が含まれる場合は、前記第２音声情報が表す対象機器に、前記ネットワークを介して、前記制御コマンドを送信する。
上記態様によると、音声入力装置から受信した指示情報に複数の対象機器の中のいずれかの対象機器を表す第２音声情報が含まれない場合は、受信したリモコン識別情報に基づいて、リモートコントローラに対応する特定対象機器を特定し、前記特定対象機器に、前記認識された操作内容を実行させる制御コマンドを送信し、また、前記指示情報に前記第２音声情報が含まれる場合は、前記第２音声情報が表す対象機器に、前記制御コマンドを送信する。
これによって、例えば、ユーザの入力音声から機器名が抽出されなかった場合、リモートコントローラから出力されたリモコン操作情報を用いて、ユーザが操作対象としている機器を特定することができる。更に、本構成では、ユーザの音声を入力する音声入力装置とリモートコントローラが別構成であり、リモートコントローラに対するユーザの動作に基づいて、リモコン操作情報が生成される。従って、ユーザがリモートコントローラを意識して操作しなくても、例えばリモートコントローラを持っているだけで、ユーザが操作対象としている機器を特定することができ、さらに、ユーザの煩雑さを軽減することが可能となる。
また、例えば、ホームネットワーク上にある複数の対象機器に、音声入力装置を用いた音声操作を行えるとともに、複数の対象機器の中で、一つのリモートコントローラに対応付けられた特定対象機器に関しては、例えば、機器名の発話を省略した音声操作が可能となる。
上記他の態様において、例えば、前記リモコン識別情報と前記特定対象機器の機器ＩＤとを対応づけた第１データベースを参照して、前記特定対象機器を特定し、前記特定機器に前記制御コマンドを送信するとしてもよい。
上記他の態様において、例えば、前記複数の対象機器の各々に対応する機器ＩＤと前記第２音声情報とを対応づけた第２データベースを参照して、前記第２音声情報が表す対象機器を特定し、前記特定した対象機器に前記制御コマンドを送信するとしてもよい。
また、他の態様において、同一宅内に配置された複数の対象機器に接続され、前記複数の対象機器を管理する機器管理システムであって、前記機器管理システムを管理する管理装置は、ネットワークを介して、前記複数の対象機器の中の特定対象機器と対応付けられた音声入力装置から、前記複数の対象機器の中の一以上の対象機器に対する操作指示を表す第１音声情報を含む指示情報を受信し、前記受信した指示情報に含まれる前記第１音声情報から前記操作指示を認識し、前記指示情報に前記複数の対象機器の中のいずれかの対象機器を表す第２音声情報が含まれるか否かを判断し、前記指示情報に前記第２音声情報が含まれない場合は、前記音声入力装置に対応する前記特定対象機器に、前記ネットワークを介して、前記認識された操作内容を実行させる制御コマンドを送信し、また、前記指示情報に前記第２音声情報が含まれる場合は、前記第２音声情報が表す対象機器に、前記ネットワークを介して、前記制御コマンドを送信し、前記音声入力装置は、前記複数の対象機器の中の一以上の対象機器に対する操作指示を表す第１音声情報を含む指示情報を送信する。
なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なＣＤ−ＲＯＭなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。
以下、添付の図面を参照しながら、本発明の例示的な実施の形態を説明する。
なお、以下で説明する実施の形態は、いずれも包括的または具体的な例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本開示を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素に関しては、任意の構成要素として説明される。
以下では、複数の対象機器に接続され、当該複数の対象機器を管理する機器管理システムの例として、同一宅内に配置された複数の機器を、音声を利用して操作する音声操作システムを説明する。
（実施の形態１）
図１は、本実施の形態に係る複数機器の音声操作システム１のブロック構成を示す。
図１に示すように、複数機器の音声操作システム１は、操作対象の機器１０、機器１１、機器１２、リモコン２、機器１０〜１２の動作を制御する統合制御機器３を含む。なお、ここでは音声操作システム１に含まれる操作対象の機器を３つとして説明するが、音声操作システム１に含まれる操作対象の機器の数は、これより少なくてもよいし、多くてもよい。ここで、リモコン２は、機器１０に対応付けられたリモコンとする。一般的には、機器１０単体を購入したときに付属している機器１０専用のリモコンであり、リモコン２には、機器１０に対応付けられていることを示す識別情報が割り当てられているものとする。
リモコン２は、図１に示すように、収音部２０、操作検出部２１、操作情報生成部２２、および送信部２３を含む。リモコン２の上面には、機器１０の各機能を実行するための複数の操作ボタンが配置されている。例えば、機器１０がテレビの場合には、リモコン２には、操作ボタンとして、音量制御ボタン、チャンネル選局ボタン、メニューボタンなどが配置されている。ここで、これらのボタンは、物理ボタンとしてリモコン２に配置されていても良いし、タッチパネルとして実装されていても良い。
また、リモコン２の上面には、通常の操作ボタン以外に、ユーザの音声を入力するために、マイクである収音部２０と、ユーザの音声入力開始を収音部２０に通知するための音声入力開始ボタン（図１には図示せず）が配置されている。
操作検出部２１は、リモコン２の各操作ボタンに対するユーザの操作を検出し、各操作ボタンに対応する信号を出力する。例えば、ユーザによる音声入力開始ボタンの押下操作が検出された場合には、音声入力開始信号を出力する。操作情報生成部２２は、リモコン２の識別情報と操作検出部２１から受信した信号に基づいて、リモコン操作情報を生成する。送信部２３は、収音部２０から得られた音声及び、操作情報生成部２２から得られるリモコン操作情報を、赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）及び無線ＬＡＮ等の通信方式により、機器１０〜１２や統合制御機器３に送信する。このとき、統合制御機器に送信される音声は、収音部２０から得られた音声データをそのまま送信しても良いし、得られた音声データから特徴量を抽出して、抽出した特徴量を送信するとしても良い。
統合制御機器３は、受信部３０、音声認識部３１、操作情報解析部３２、宅内機器操作コマンドデータベース（以下、宅内機器操作コマンドＤＢと呼ぶ）３３、機器特定部３４、操作特定部３５、制御情報生成部３６、送信部３７、記憶部３８を含む。
受信部３０は、リモコン２から送信された音声データおよびリモコン操作情報を受信する。このとき、音声データがユーザによる機器操作を意図するものである場合は、音声データおよびリモコン操作情報は、指示情報として受信される。音声認識部３１は、受信部３０から得られた音声データに基づいて、音声データが示す内容を認識する。音声データが示す内容が、例えば、いずれかの機器に対する操作指示を含む場合、機器を特定する情報（機器名）や操作指示の内容を特定する情報（操作名）を認識結果として出力する。操作情報解析部３２は、受信部３０から得られたリモコン操作情報からリモコン２の識別情報を抽出する。
宅内機器操作コマンドＤＢ３３には、ホームネットワークに接続された機器毎に、機器名、操作名、操作名に対応する操作内容、及び操作内容に対応する制御情報等が記憶されている。
図２は、機器１０をテレビ、機器１１をビデオ、機器１２をエアコンとしたときの宅内機器操作コマンドＤＢ３３に記憶されている情報の一例を示す。図２に示すように、機器名は、ユーザが操作対象の機器を指定する言葉である。図２では、「テレビ」、「ビデオ」、「エアコン」となる。また、操作名は、ユーザが機器に操作を指示する言葉であり、機器がテレビの場合には、操作名は、「音量を上げて」「２チャンネルに変えて」等になる。また、操作内容は、操作名に対応して機器が実際に行う操作の内容である。例えば、テレビの場合、「音量を上げて」という操作名には「テレビの音量を３レベル上げる」という操作内容が対応付けられている。なお、各操作内容に対応する操作名は複数登録されていてもよい。例えば、図２では、「テレビの音量を３レベル上げる」という操作内容には、「音量を上げて」「音量アップ」という２つの言葉が登録されている。また、制御情報は、操作対象の機器に操作内容を実行させるためのネットワークコマンドであり、ホームネットワークを介して、操作対象の機器に送信される。例えば、図２の例では、テレビに「テレビの音量を３レベル上げる」という操作内容を実行させる場合、テレビに、（Ｖｏｌｕｍｅ，＋３）というネットワークコマンドが送信される。
機器特定部３４は、宅内機器操作コマンドＤＢ３３に記憶されている機器名、音声認識部３１から得られた機器名、及び操作情報解析部３２から得られたリモコン２の識別情報を用いて、ユーザの操作対象機器を特定する。
操作特定部３５は、機器特定部３４により特定された機器名と音声認識部３１から得られた操作名に基づいて、宅内機器操作コマンドＤＢ３３に記憶されている各機器の操作名を検索し、操作対象機器に対する操作内容を特定する。
制御情報生成部３６は、機器特定部３４で特定された機器名と操作特定部３５で特定された操作内容に基づいて、宅内機器操作コマンドＤＢ３３に記憶されている各機器の制御情報を検索し、ホームネットワークを介して、操作対象機器を遠隔制御するための制御情報を求める。
送信部３７は、ホームネットワークを介して、機器特定部３４によって特定された機器に、制御情報生成部３６で求めた制御情報を送信する。
機器１０、機器１１、機器１２は、ホームネットワーク上に接続された操作対象の機器である。
機器１０〜機器１２は、それぞれ、通信部１０１と制御部１０２とを含む。通信部１０１は、ホームネットワークを介して、統合制御機器３から制御信号を受信する。また、赤外線通信などの無線通信を介して、リモコン２から制御情報を受信することも可能である。
制御部１０２は、各機器１０〜１２において、通信部１０１で受信した制御情報に基づいて、対応する操作を実行する。
以下、本実施の形態において、以上のように構成された複数機器の音声操作システム１に関し、ユーザが機器１０〜１２を音声操作するときの動作を説明する。
本実施の形態において、ユーザが機器１０〜１２を音声操作する場合には、まず、ユーザは、リモコン２を持って、リモコン２上の音声入力開始ボタンを押した後、リモコン２上のマイクに向かって、音声コマンドを発話する。例えば、機器１０をテレビ、機器１１をビデオ、機器１２をエアコンとした場合には、テレビの音量を操作したい時には、「テレビ、音量をあげて」と、エアコンの温度を下げたい時には、「エアコン、温度を下げて」等を発話する。
図３は、リモコン２にユーザが音声入力したときの、リモコン２の処理の手順を示す。以下、図３を用いて、リモコン２の動作を説明する。
ユーザによって、リモコン２上の音声入力開始ボタンが押されると、操作検出部２１が、音声入力開始ボタンの押下操作を検出し、音声入力開始信号を収音部２０と操作情報生成部２２に出力する（Ｓ１０１）。収音部２０は、操作検出部２１から音声入力開始信号を受信すると、ユーザが発話した音声の入力を開始する（Ｓ１０２）。また、操作情報生成部２２は、操作検出部２１から音声入力開始信号を受信すると、音声入力開始情報とリモコン２を示す識別情報とを合わせた情報をリモコン操作情報として生成する（Ｓ１０３）。送信部２３は、収音部２０から得られた音声及び、操作情報生成部２２から得られるリモコン操作情報を統合制御機器３や機器１０〜１２に送信する（Ｓ１０４）。収音部２０は、ユーザからの音声入力が続いているかどうかを常にチェックし（Ｓ１０５）、ユーザからの音声入力が終了したと判断した場合には、音声入力を停止するとともに、送信部２３への音声出力を停止する（Ｓ１０６）。なお、音声入力終了の判定は、例えば、入力された音声のレベルが一定値以下になった場合に、ユーザの音声入力が終了したと判定する方法等で行う。また、収音部２０が音声入力を停止した後、ユーザが、再度、音声入力を行いたい場合には、ユーザが再度音声入力開始ボタンを押下すればよい。リモコン２では、音声入力開始が再度押下されると、Ｓ１からの処理が再度実行され、再び、ユーザの音声が入力され、送信部２３からリモコン操作情報とともに送信される。
以上が、リモコン２に向かって、ユーザが音声コマンドを入力したときのリモコン２の動作である。
図４は、統合制御機器３の処理の手順を示す。以下、図４を用いて、統合制御機器３の動作を説明する。
まず、受信部３０が、リモコン２の送信部２３から送信された音声とリモコン操作情報を受信する（Ｓ２０１）。
次に、操作情報解析部３２は、受信部３０で受信したリモコン操作情報からリモコン２の識別情報を抽出する（Ｓ２０２）。
また、音声認識部３１は、受信部３０で受信した音声を認識し、認識結果として機器名、または、操作名を求める（Ｓ２０３）。例えば、ユーザが、音声コマンドとして、「エアコン、冷房をつけて」を発話した場合、音声認識部３１は、正確に認識できた場合には、認識結果として、機器名「エアコン」、操作名「冷房をつけて」を出力する。また、ユーザが機器名を省略して、「音量を上げて」を発話した場合には、認識結果として、機器名なし、操作名「音量を上げて」が出力される。
なお、音声認識部３１において、音声を認識する方法は、従来のＤＰマッチング法、ＨＭＭ（隠れマルコフモデル）法、Ｎ−Ｇｒａｍ法等が用いられる。音声認識を行うための認識辞書は記憶部３８に記憶されている。認識辞書には、機器１０〜１２の操作内容毎に、音声コマンド「（機器名）（操作名）」及び「（操作名）」を認識するための情報が含まれている。例えば、機器１０をテレビとした場合には、２チャンネルを選局するという操作内容に対応して、「テレビ、２チャンネルに変えて」及び、「２チャンネルに変えて」等の音声コマンドを認識するための情報が認識辞書に記憶されている。なお、認識辞書には、ホームネットワークに現在接続されている機器１０〜１２の操作だけに関するものではなく、一般的な家電機器を音声操作するための情報が記憶されていてもよい。
機器特定部３４は、宅内機器操作コマンドＤＢ３３に記憶されている機器名を参照し、まず、音声認識部３１から出力された認識結果の中に、機器名が含まれているかどうかを確認する（Ｓ２０４）。認識結果の中に、宅内機器操作コマンドＤＢ３３に記憶されている機器名が含まれている場合（Ｓ２０４でＹの場合）には、その機器名を有する機器を、ユーザが操作対象としている機器と特定する（Ｓ２０５）。このとき、例えば、図５Ａに示すような機器名称管理テーブルを用いて、ユーザが操作対象としている機器を特定する。機器名称管理テーブルでは、機器名と対応機器の識別子とを対応付けて管理している。音声認識部３１において認識された音声において、機器名称管理テーブルに機器名として登録されている単語が含まれている場合は、その単語に対応する機器を特定する。テレビ、エアコンなど、一般的な機器の名称を機器名として管理していてもよいし、例えば、識別子「テレビ００１」のテレビに「マイケル」という名称を付し、識別子「エアコン００１」のエアコンに「キャシー」という名称を付すなど、機器にユーザが任意の名称を付して管理できる構成としてもよい。また、対応機器毎に複数の機器名を付与していてもよい。
逆に、認識結果の中に、機器名が含まれていない場合（Ｓ２０４でＮの場合）には、処理（Ｓ２０２）で抽出されたリモコン２の識別情報に基づいて、その識別情報に対応する機器１０を、ユーザが操作対象としている機器と特定する（Ｓ２０６）。このとき、例えば、図５Ｂに示すようなリモコン対応機器管理テーブルを用いて、ユーザが操作対象としている機器を特定する。リモコン対応機器管理テーブルでは、リモコン２と対応付けられている機器の識別子を管理している。本開示の一態様に係る音声操作システム１は、複数のリモコン２を含む構成であってもよく、図５Ｂに示すように機器毎に対応するリモコン２が存在するとしてもよい。なお、図５Ａおよび図５Ｂの機器名称管理テーブルおよびリモコン対応機器管理テーブルは、統合制御機器３において、記憶部３８に格納されているとしてもよい。
以下、具体的な例を用いて、機器特定部３４の動作を説明する。例えば、機器１０をテレビとし、宅内機器操作コマンドＤＢ３３を図２で示したものとする。ここで、宅内機器操作コマンドＤＢ３３は、各機器名に対応する機器の識別子を管理していてもよい。ユーザがテレビ専用の、音声入力のためのリモコン２に、「テレビ、２チャンネルに変えて」を発話した場合には、音声認識の結果として、機器名「テレビ」が得られる（Ｓ２０３）。次に、認識された機器名「テレビ」が、宅内機器操作コマンドＤＢ３３に含まれているかどうかを確認する（Ｓ２０４）。認識された機器名「テレビ」は、図２に示す宅内機器操作コマンドＤＢ３３に記憶されている機器名に含まれているので、この場合、ユーザが操作対象としている機器は、テレビであると特定する（Ｓ２０５）。ここで、例えば、図５Ａのような機器名と機器の識別子とを対応付けた機器名称管理テーブルを参照して、音声認識の結果として得られた機器名が示す機器を特定するとしてもよい。
同様に、ユーザが「２チャンネルに変えて」と、機器名を省略して発話した場合には、音声認識の結果としては、機器名なしが得られる（Ｓ２０３）。認識結果の中に機器名が含まれていないので（Ｓ２０４）、次に、リモコン２の識別情報に対応する機器を求める。リモコン２の識別情報に対応する機器はテレビであるので、この場合も、ユーザが操作対象としている機器は、テレビであると特定する（Ｓ２０６）。ここで、例えば、図５Ｂに示すようなリモコン２の識別情報と機器の識別子とを対応付けたリモコン対応機器管理テーブルを参照して、リモコン２の識別情報に対応する機器がテレビであることを特定する。
操作特定部３５は、音声認識部３１の認識処理（Ｓ２０３）で得られた操作名の妥当性を確認し（Ｓ２０７）、妥当であると判定した場合は、その操作名に対応する操作内容を、ユーザが操作対象の機器に対する目的の操作と特定する（Ｓ２０８）。
操作特定部３５の処理は、以下の手順で行う。
まず、処理（Ｓ２０５）または処理（Ｓ２０６）によって特定された機器名を用いて、宅内機器操作コマンドＤＢ３３を検索し、特定された機器に対応する操作名を全て読み出す。次に、音声認識部３１の認識処理（Ｓ２０３）で得られた操作名が、宅内機器操作コマンドＤＢ３３から読み出した操作名のいずれかと一致するかどうかを確認し、一致した場合には、操作名が妥当であると判定する（Ｓ２０７）。操作名が妥当であると判定された場合（Ｓ２０７でＹの場合）には、宅内機器操作コマンドＤＢ３３からその操作名に対応する操作内容を読み出し、その操作内容をユーザが操作対象の機器に対する目的の操作と特定する（Ｓ２０８）。
逆に、一致しない場合には、特定された機器の中に対応する操作が存在しないので、認識結果から得られた操作名は妥当ではないと判定し（Ｓ２０７でＮの処理）、ユーザが発話した音声コマンドに対する一連の処理を終了する。
例えば、機器１０をテレビとし、宅内機器操作コマンドＤＢ３３を図２で示したものとした時、ユーザが「テレビ、２チャンネルに変えて」と発話したなら、認識結果として、操作名は「２チャンネルに変えて」が得られる（Ｓ２０３）。次に、宅内機器操作コマンドＤＢ３３を用いて、既に特定された機器「テレビ」に、「２チャンネルに変えて」という操作名が登録されているかどうかを確認する（Ｓ２０７）。認識された操作名「２チャンネルに変えて」は、図２に示す宅内機器操作コマンドＤＢ３３に記憶されている操作名に含まれているので、この場合、ユーザの目的の操作内容は、「２チャンネルを選局」と特定する（Ｓ２０８）。
制御情報生成部３６は、処理（Ｓ２０５）または処理（Ｓ２０６）で特定された機器と、処理（Ｓ２０８）で特定された操作内容に基づいて、宅内機器操作コマンドＤＢ３３に記憶されている各機器の制御情報を検索し、操作対象機器を遠隔制御するための制御情報を求める（Ｓ２０９）。
例えば、機器１０をテレビとし、宅内機器操作コマンドＤＢ３３を図２で示したものとした場合、ユーザの音声コマンド「テレビ、２チャンネルに変えて」が正しく認識されて、機器を「テレビ」、操作内容を「２チャンネルを選局」と特定されたなら、宅内機器操作コマンドＤＢ３３に基づいて、制御情報は、（Ｃｈａｎｎｅｌ、２）が求められる。
送信部３７は、ホームネットワークを介して、処理（Ｓ２０５）または処理（Ｓ２０６）で特定された機器に、処理（Ｓ２０９）で求めた制御情報を送信する（Ｓ２１０）。
以上が、リモコン２から送信された音声とリモコン送信情報が入力されたときの統合制御機器３の動作である。
最後に、機器１０〜１２の動作を説明する。なお、機器１０〜１２は、それぞれ同様の動作をするので、以下、機器１０を例にとって説明する。
機器１０では、まず、通信部１０１が、ホームネットワークを介して、リモコン２や統合制御機器３から制御情報を受信する。そして、制御部１０２が受信した制御情報に基づいて、対応する操作を実行する。
例えば、機器１０をテレビとした場合、ユーザがリモコン２に、音声コマンド「テレビ、２チャンネルに変えて」を発話したときには、統合制御機器３からの制御情報（Ｃｈａｎｎｅｌ、２）を通信部１０１が受信する。そして、受信した制御情報に基づいて、制御部１０２がテレビのチャンネルを２チャンネルに変更する。
以上説明したように、本発明の例示的な実施の形態に係る複数機器の音声操作システム１は、機器特定部３４が、ユーザが発話した音声コマンドの認識結果から機器名を特定できなかった場合には、リモコン２から出力されたリモコン操作情報の中のリモコン識別情報を抽出し、リモコン識別情報に対応づけられている機器１０を、ユーザが操作対象としている機器であると特定する。これにより、ホームネットワーク上にある複数の機器１０〜１２に、リモコン２を用いた音声操作が行えるとともに、複数の機器のうち、リモコン２に対応付けられた特定の機器１０に関しては、機器名を省略した音声操作が可能となる。
例えば、機器１０をテレビ、機器１１をビデオ、機器１２をエアコンとし、リモコン２は、テレビの対応付けられた専用の音声入力リモコンだとする。ユーザが、リモコン２を用いて、ビデオやエアコンを音声操作する場合には、「ビデオ、録画」「エアコン、冷房をつけて」等、機器名をつけた音声コマンドを発話する必要があるが、テレビには、「音量を上げて」等、テレビと言う機器名を発しなくても操作が可能となる。なお、本実施の形態では、「テレビ、音量を上げて」のように、機器名をつけた音声コマンドでもテレビの音声操作は可能である。
よって、例えば、ビデオやエアコンと比較してテレビの音声操作の使用頻度が高い場合、もしくは、音声操作はテレビしか行わない場合には、特定の機器であるテレビには、その機器名を発話する必要がなくなるので、ユーザの煩雑さを軽減できるとともに、テレビに対する迅速な操作指示が可能となる。すなわち、複数の機器に対する音声操作が可能であることに加えて、複数の機器の中の特定の機器に、機器名を指定する発話を省略した迅速な操作指示が可能となる。
また、例えば、既存の音声入力リモコンによる音声認識テレビを利用していたユーザが、ホームネットワークを介して、ビデオやエアコン等を統合制御可能なシステムを導入した場合でも、ユーザは、テレビ専用の音声入力リモコンを用いて既存の音声認識テレビを操作すれば、テレビは、機器名を省略した音声コマンドを受け付けてくれる。よって、テレビには、システム導入前と同一の操作を行うことが可能であり、機器名をつけずに発話する等の誤操作を減らすことが可能となる。つまり、ユーザは、新しく音声操作可能になったエアコンやビデオ等のテレビ以外の他の機器に対してのみ、機器名をつけた音声コマンドを発話すればよいということを覚えればよいので、統合制御システムの音声操作を簡単に学習することが可能である。
（実施の形態２）
本実施の形態では、上記実施の形態１に係る複数機器の音声操作システム１の変形例を説明する。
図６は、本実施の形態にかかる複数機器の音声操作システム１１１のブロック構成を示す。
本実施形態の音声操作システム１１１は、第１の実施形態の音声操作システム１と、ほぼ同様の構成である。両者の相違点は、第１の実施形態の音声操作システム１の統合制御機器３に、さらに機器操作履歴記憶部３９が設けられている点である。このため、第２の実施形態の音声操作システム１１１では、第１の実施形態の音声操作システム１と共通する構成には第１の実施形態と同様の符号を付している。
以下では、第１の実施形態と異なる構成を主として説明して、第１の実施形態と共通する構成に関しては説明を省略する。
第１の実施形態の統合制御装置に新たに追加された機器操作履歴記憶部３９は、機器特定部３４で特定された操作対象の機器名を記憶する。
また、機器特定部３４は、宅内機器操作コマンドＤＢ３３に記憶されている機器名、音声認識部３１から得られた機器名、操作情報解析部３２から得られたリモコン２の識別情報及び、機器操作履歴記憶部３８に記憶されている機器名を用いて、ユーザの操作対象機器を特定する。操作特定部３５は、機器特定部３４により特定された機器名と音声認識部３１から得られた操作名に基づいて、宅内機器操作コマンドＤＢ３３に記憶されている各機器の操作名を検索し、操作対象機器に対する操作内容を特定する。そして、操作内容が特定された場合には、機器名を機器操作履歴記憶部３９に記憶する。
以下、第２の実施形態において、以上のように構成された複数機器の音声操作システム１１１に関し、ユーザが機器１０〜１２を音声操作するときの動作を説明する。なお、以下では、第１の実施形態との相違点を主に説明し、重複する説明は省略する。具体的には、リモコン２の動作は、第１の実施形態のフローチャート（図３）におけるＳ１０１〜Ｓ１０６までの処理と同一の処理であるので、ここでは説明を省略する。また、機器１０〜１２の動作も第１の実施形態と同一の処理であるので、説明を省略する。
図７は、本実施の形態による統合制御機器３の処理の手順を示す。以下、図７を用いて、統合制御機器３の動作を説明する。なお、第２の実施の形態において、受信部３０、音声認識部３１、操作情報解析部３２、操作特定部３５、制御情報生成部３６、送信部３７の動作は、第１の実施形態と同一である。よって、図７において、冒頭の処理は、第１の実施形態のフローチャート（図４）のＳ２０１からＳ２０３までの処理と同一の処理であるので、上記処理の説明は省略する。また、Ｓ３１２、Ｓ３１３の処理は、第１の実施形態のフローチャート（図４）のＳ２０９、Ｓ２１０の処理と同一の処理であるので、上記処理に関しても説明を省略する。ここでは、第１の実施形態と異なる動作を行う機器特定部３４、操作特定部３５の処理Ｓ４〜Ｓ１１に関し、詳しく説明する。
機器特定部３４は、宅内機器操作コマンドＤＢ３３に記憶されている機器名を参照し、音声認識部３１から出力された認識結果の中に機器名が含まれているかどうかを確認する（Ｓ３０４）。認識結果の中に、宅内機器操作コマンドＤＢ３３に記憶されている機器名が含まれている場合（Ｓ３０４でＹの場合）には、その機器名を有する機器を、ユーザが操作対象としている機器と特定する（Ｓ３０５）。ここで、図５Ａに示すような機器名称管理テーブルを参照して、音声認識部３１における認識結果が示す機器名から機器を特定してもよい。
一方、認識結果の中に、機器名が含まれていない場合（Ｓ３０４でＮの場合）には、次に、機器操作履歴記憶部３９に機器名が既に記憶されているかどうかを確認する（Ｓ３０６）。機器操作履歴記憶部３９に機器名が既に記憶されている場合（Ｓ３０６でＹの場合）には、機器操作履歴記憶部３９に記憶されている機器名を有する機器を、ユーザが操作対象としている機器と特定する（Ｓ３０７）。逆に、機器操作履歴記憶部３９に機器名が記憶されていない場合（Ｓ３０６でＮの場合）には、処理（図４のＳ２０２）で抽出されたリモコン２の識別情報に基づいて、その識別情報に対応する機器１０を、ユーザが操作対象としている機器と特定する（Ｓ３０８）。
操作特定部３５は、音声認識部３１の認識処理（図４のＳ２０３）で得られた操作名の妥当性を確認し（Ｓ３０７）、妥当であると判定した場合は、その操作名に対応する操作内容を、ユーザが操作対象の機器に対する目的の操作と特定する（Ｓ３０８）。
操作特定部３５の処理は、以下の手順で行う。
まず、処理（Ｓ３０５）、処理（Ｓ３０７）、処理（Ｓ３０８）のいずれかによって特定された機器名を用いて、宅内機器操作コマンドＤＢ３３を検索し、特定された機器に対応する操作名を全て読み出す。ここで、処理（Ｓ３０８）は、図４のＳ２０６と同様の処理である。次に、音声認識部３１の認識処理（図４のＳ２０３）で得られた操作名が、宅内機器操作コマンドＤＢ３３から読み出した操作名のいずれかと一致するかどうかを確認し、一致した場合には、操作名が妥当であると判定する（Ｓ３０９）。操作名が妥当であると判定された場合（Ｓ３０９でＹの場合）には、宅内機器操作コマンドＤＢ３３からその操作名に対応する操作内容を読み出し、その操作内容をユーザが操作対象の機器に対する目的の操作と特定する（Ｓ３１０）。その後、処理（Ｓ３０５）、処理（Ｓ３０７）、処理（Ｓ３０８）のいずれかで特定された機器名を機器操作履歴記憶部３９に記憶する（Ｓ３１１）。
逆に、一致しない場合には、特定された機器の中に対応する操作が存在しないので、認識結果から得られた操作名は妥当ではないと判定し（Ｓ３０９でＮの処理）、ユーザが発話した音声コマンドに対する一連の処理を終了する。
以下、具体的な例を用いて、機器特定部３４、操作特定部３５の動作を説明する。例えば、機器１０をテレビ、機器１１をビデオとし、宅内機器操作コマンドＤＢ３３を図２で示したものとする。
ユーザがテレビ専用の音声入力リモコン２に「ビデオ、２チャンネルに変えて」と発話した場合には、音声認識の結果として、機器名「ビデオ」、操作名「２チャンネルに変えて」が得られる（図４のＳ２０３）。機器特定部３４では、認識結果の中に機器名が含まれているので、次に、認識された機器名「ビデオ」が、宅内機器操作コマンドＤＢ３３に含まれているかどうかを確認する（Ｓ３０４）。認識された機器名「ビデオ」は、図２に示す宅内機器操作コマンドＤＢ３３に記憶されている機器名に含まれているので、この場合、ユーザが操作対象としている機器は、ビデオであると特定する（Ｓ３０５）。
次に、操作特定部３５では、宅内機器操作コマンドＤＢ３３を用いて、既に特定された機器「ビデオ」に「２チャンネルに変えて」という操作名が登録されているかどうかを確認する（Ｓ９）。認識された操作名「２チャンネルに変えて」は、図２に示す宅内機器操作コマンドＤＢ３３に記憶されている操作名に含まれているので、この場合、ユーザの目的の操作内容は、「２チャンネルを選局」と特定する（Ｓ３１０）。そして、処理（Ｓ３０５）で特定した機器名「ビデオ」を機器操作履歴記憶部３９に記憶する。
その後、制御情報生成部３６、送信部３７及び、機器１１は第１の実施形態と同一の動作を行い、その結果、機器１１であるビデオのチャンネルは、２チャンネルに変更される。
次に、続けて、ユーザが、リモコン２に「録画」を発話した場合の動作を説明する。このとき、音声認識の結果として、機器名なし、操作名「録画」が得られる（図４のＳ２０３）。認識結果の中に機器名が含まれていないので（Ｓ３０４）、機器特定部３４は、機器操作履歴記憶部３９に機器名が記憶されているかどうかを確認する（Ｓ３０６）。一つ前のユーザの音声コマンドの発話の際に、機器操作履歴記憶部３９には、機器名として「ビデオ」が記憶されているので（Ｓ３０６でＹの処理）、この場合、ユーザが操作対象としている機器がビデオであると特定する（Ｓ３０７）。
そして、操作特定部３５では、宅内機器操作コマンドＤＢ３３を用いて、既に特定された機器「ビデオ」に「録画」という操作名が登録されているかどうかを確認する（Ｓ３０９）。認識された操作名「録画」は、図２に示す宅内機器操作コマンドＤＢ３３に記憶されている操作名に含まれているので、この場合、ユーザの目的の操作内容は、「録画」と特定する（Ｓ３１０）。そして、処理（Ｓ３０５）で特定した機器名「ビデオ」を機器操作履歴記憶部３９に記憶する。
その後、制御情報生成部３６、送信部３７及び、機器１１は第１の実施形態と同一の動作を行い、その結果、機器１１であるビデオにおいて、現在放送中の２チャンネルの番組の録画が開始される。
以上説明したように、本発明の例示的な第２の実施の形態に係る複数機器の音声操作システム１１１は、機器操作履歴記憶部３９が、ユーザが発話した音声コマンドから、機器特定部３４及び操作特定部３５によって特定された機器名が記憶されており、もし、機器特定部３４が、ユーザが発話した音声コマンドの認識結果から機器名を特定できなかった場合には、機器操作履歴記憶部３９に記憶されている機器名に対応する機器を、ユーザが操作対象としている機器であると特定する。但し、機器操作履歴記憶部３９に機器名が記憶されていない場合は、第１の実施形態と同様に、リモコン２から出力されたリモコン操作情報の中のリモコン識別情報を抽出し、リモコン識別情報に対応づけられている機器１０を、ユーザが操作対象としている機器であると特定する。
これにより、本発明の例示的な第２の実施形態では、第１の実施形態と同様に、ホームネットワーク上にある複数の機器１０〜１２に、リモコン２を用いた音声操作が行えるとともに、複数の機器のうち、リモコン２に対応付けられた特定の機器１０に関しては、機器名を省略した音声操作が可能である。更に、リモコン２に対応付けられた特定の機器１０以外の機器１１や機器１２に関しても、一度、機器名をつけた音声コマンドを発話すれば、同一の機器を続けて音声操作する場合には、機器名を省略した音声操作が可能となる。すなわち、複数の機器に対する音声操作が可能であることに加えて、複数の機器の中の特定の機器に、機器名を指定する発話を省略した迅速な操作指示が可能となる。
例えば、機器１０をテレビ、機器１１をビデオ、機器１２をエアコンとし、リモコン２は、テレビの対応付けられた専用の音声入力リモコンだとする。第１の実施の形態では、ユーザが、リモコン２を用いて、ビデオを音声操作する場合には、「ビデオ、２チャンネルに変えて」、「ビデオ、録画」等、機器名をつけて常に音声コマンドを発話する必要があるが、本実施の形態では、「ビデオ、２チャンネルに変えて」といえば、機器名であるビデオが機器操作履歴記憶部３９に記憶されるので、続けて同一の機器を操作する場合には、機器名を省略した音声コマンド「録画」だけで、操作が可能となる。
よって、リモコン２に対応付けられた特定の機器以外でも、同一の機器を続けて音声操作する場合には、その機器名を発話する必要がなくなるので、ユーザの煩雑さをさらに軽減することができ、各機器に対する迅速な操作指示が可能となる。
なお、第２の実施の形態に係る機器操作履歴記憶部３９に記憶された機器名は、機器名が記憶された後、一定時間更新されることがなかったら、消去するようにしてもよい。また、受信部３０に音声が一定時間入力されることがなかったら、消去するようにしてもよい。
（実施の形態３）
本実施の形態では、上記実施の形態１に係る複数機器の音声操作システム１の変形例を説明する。
図８は、本実施の形態にかかる、複数機器の音声操作システム１１２のブロック構成を示す。
図８に示すように、本実施形態の音声操作システム１１２は、操作対象の機器１０、機器１１、及び機器１２と、リモコン２と、機器１０〜１２を音声操作する統合制御機器３及び、音声入力機器４を含む。なお、本実施形態における機器１０〜１２、統合制御機器３は、第１の実施形態の音声操作システム１に関連して説明した構成とほぼ同一である。相違点は、リモコン２の構成及び、新たに音声入力機器４が設けられている点である。このため、第３の実施形態の音声操作システム１１２では、第１の実施形態の音声操作システム１と共通する構成には第１の実施形態と同様の符号を付している。
以下では、主として第１の実施形態と異なる構成であるリモコン２、音声入力機器４を説明し、第１の実施形態と共通する構成の説明は省略する。
リモコン２は、第１の実施形態と同様に、機器１０に対応付けられたリモコンとする。一般的には、機器１０単体を購入したときに付属している機器１０専用のリモコンであり、リモコン２には、機器１０に対応付けられていることを示す識別情報が割り当てられているものとする。
リモコン２は、図８に示すように、操作検出部２１、操作情報生成部２２、送信部２３、動作検出部２４から構成される。リモコン２の上面には、第１の実施形態と同様に、機器１０の各機能を実行するための複数の操作ボタンが配置されている。但し、本実施例では、第１の実施形態と異なり、ユーザの音声を入力する収音部２０及び音声入力開始ボタンは配置されない。
操作検出部２１は、リモコン２の各操作ボタンに対するユーザの操作を検出し、各操作ボタンに対応する信号を出力する。
動作検出部２４は、ユーザのリモコンに対する動作を検出し、検出した動作に対応する信号を出力する。ここで、検出する動作は、ユーザがリモコンを使用している動作であり、具体的には、ユーザがリモコンを把持している、または、動かしている動作である。これらの動作を検出するため、リモコン２は、例えば、筐体外面にタッチセンサが貼り付けられていたり、筐体内部に加速度センサやジャイロセンサ等のモーションセンサが内蔵されていたりする。そして、これらのセンサからの信号を認識することによって、ユーザがリモコンを使用している動作の検出を行う。
操作情報生成部２２は、リモコン２の識別情報と、操作検出部２１及び動作検出部２４から受信した信号に基づいて、リモコン操作情報を生成する。送信部２３は、操作情報生成部２２から得られるリモコン操作情報を、赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）及び無線ＬＡＮ等の通信方式により、機器１０〜１２や統合制御機器３に送信する。
音声入力機器４は、収音部４１と送信部４２から構成される。収音部４１が、ユーザの音声を入力し、送信部４２が、有線ＬＡＮやＢｌｕｅｔｏｏｔｈ（登録商標）及び無線ＬＡＮ等の通信方式により、収音部４１で入力した音声を統合制御機器３に送信する。なお、音声入力機器４は、収音部４１がユーザの音声を入力できる範囲であれば、宅内のどこにでも設置できる。例えば、機器１０を音声操作する場合には、機器１０が設置されている部屋の天井や照明、または、機器１０の上部に設置してもよい。
以下、第３の実施形態において、以上のように構成された複数機器の音声操作システム１１２に関し、ユーザが機器１０〜１２を音声操作するときの動作を説明する。なお、以下では、第１の実施形態との相違点を主に説明し、重複する説明は省略する。具体的には、統合制御機器３の動作は、第１の実施形態のフローチャート（図４）におけるＳ２０１〜Ｓ２１０までの処理と同一の処理であるので、ここでは説明を省略する。また、機器１０〜１２の動作も第１の実施形態と同一の処理であるので、説明を省略する。
図９は、本実施の形態におけるリモコン２の処理の手順を示す。以下、図９を用いて、リモコン２の動作を説明する。
例えば、ユーザがリモコン２を把持したり、動かしたりした場合、動作検出部２４が、リモコン２に対するユーザのこれらの動作を検出し、動作検出信号を操作情報生成部２２に出力する（Ｓ４０１）。操作情報生成部２２は、動作検出部２４から動作検出信号を受信すると、操作検出部２１から得られた信号に基づく操作情報とリモコン２を示す識別情報を合わせた情報をリモコン操作情報として生成する（Ｓ４０２）。送信部２３は、操作情報生成部２２から得られたリモコン操作情報を統合制御機器３や機器１０〜１２に送信する（Ｓ４０３）。動作検出部２４は、ユーザのリモコン２に対する動作が続いているかどうかを常にチェックし（Ｓ４０４）、ユーザのリモコンに対する動作が停止したと判断した場合には、動作検出信号の出力を停止する。同時に、送信部２３は、リモコン操作情報の送信を停止する（Ｓ４０５）。なお、ユーザのリモコン２に対する動作停止の判定は、例えば、リモコン２に備えられた把持センサやモーションセンサの出力レベルが一定値以下になった状態が一定時時間継続した場合に、ユーザのリモコン２に対する動作が停止したと判定すればよい。
次に、音声入力機器４の動作を説明する。音声入力機器４では、収音部４１が、ユーザが発話した常に音声を入力し、送信部４２が、収音した音声を統合制御機器３に送信する。
以上説明したように、本発明の例示的な実施の形態に係る複数機器の音声操作システムでは、第１の実施形態同様に、機器特定部３４が、ユーザが発話した音声コマンドの認識結果から機器名を特定できなかった場合には、リモコン２から出力されたリモコン操作情報の中のリモコン識別情報を抽出し、リモコン識別情報に対応づけられている機器１０を、ユーザが操作対象としている機器であると特定する。但し、第１の実施形態と異なり、音声を入力する収音部４１とリモコン２が分離しているため、操作対象の機器がリモコン２に対応付けられた機器１０であることを特定するために必要なリモコン２の識別情報は、動作検出部２４が、リモコン２に対するユーザの動作を検知することによって出力されるようになっている。
これにより、本発明の例示的な第３の実施形態では、第１の実施形態と同様に、ホームネットワーク上にある複数の機器１０〜１２に、リモコン２とは違う場所に配置された音声入力機器４を用いた音声操作が行えるとともに、複数の機器のうち、リモコン２に対応付けられた特定の機器１０に関しては、リモコン２をユーザが把持すれば、機器名を省略した音声操作が可能である。
よって、第１の実施例と同様に、複数機器の中で特定の機器の使用頻度が高い場合、もしくは、音声操作を特定の機器しか行わない場合には、その機器名を発話する必要がなくなるので、ユーザの煩雑さを軽減できるとともに、特定の機器に対する迅速な操作指示が可能となる。
なお、第３の実施の形態において、統合制御機器３は、第１の実施の形態の統合制御機器を用いて説明したが、第２の実施の形態、つまり、機器操作履歴記憶部３９を備えた統合制御機器を用いてもよい。
また、第３の実施の形態において、リモコン２は、リモコン２の上面に配置された操作ボタンを検出する操作検出部２１を備えた構成としているが、なくてもよい。この場合、リモコン２は、従来の一般的なリモコンとは異なり、ユーザがリモコン２を握ったり、動かしたりした動作を、動作検出部２４が検知したときに、その情報をリモコン操作情報として機器１０〜１２や統合制御機器３に送信するようになる。
なお、上記各実施の形態において、リモコン２に対応付けられた機器１０と統合制御機器３は、別々の機器として構成されているが、統合制御機器３が、機器１０の構成要素である制御部１０２を含む構成にしてもよい。この場合、統合制御機器３において、制御部１０２は、制御情報生成部３６から出力された制御情報に基づいて、対応する操作を実行することになる。具体的に説明すると、上記第１の実施の形態の説明において、機器１０をテレビ、機器１１をビデオ、機器１２をエアコンとした例を示したが、統合制御機器３自体がテレビ、ビデオ、または、エアコンの機能をもっていてもよいということである。
また、上記各実施の形態において、リモコン２は、機器１０に対応付けられたリモコンと設定したが、ホームネットワークと統合制御機器３に接続された機器であれば、どの機器に対応付けられていてもよい。
また、上記各実施の形態において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、ＣＰＵまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。
さらに、上記の各装置を構成する構成要素の一部又は全部は、１個のシステムＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ：大規模集積回路）から構成されているとしてもよい。システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ、及びＲＡＭなどを含んで構成されるコンピュータシステムである。ＲＡＭには、コンピュータプログラムが記憶されている。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、システムＬＳＩは、その機能を達成する。
さらにまた、上記の各装置を構成する構成要素の一部又は全部は、各装置に脱着可能なＩＣカード又は単体のモジュールから構成されているとしてもよい。ＩＣカード又はモジュールは、マイクロプロセッサ、ＲＯＭ、及びＲＡＭなどから構成されるコンピュータシステムである。ＩＣカード又はモジュールは、上記の超多機能ＬＳＩを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、ＩＣカード又はモジュールは、その機能を達成する。このＩＣカード又はこのモジュールは、耐タンパ性を有するとしてもよい。
また、本発明の例示的な態様として、上記に示す方法が挙げられる。また、本発明の他の態様として、これらの方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、上記コンピュータプログラムからなるデジタル信号であるとしてもよい。
さらに、本発明のさらに他の例示的な態様は、上記コンピュータプログラム又は上記デジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＢＤ（Ｂｌｕ−ｒａｙ Ｄｉｓｃ（登録商標））、ＵＳＢメモリ、ＳＤカードなどのメモリカード、又は半導体メモリなどに記録したものも含む。また、本発明の例示的な態様は、これらの記録媒体に記録されている上記デジタル信号であるとしてもよい。
また、本発明の例示的な態様は、上記コンピュータプログラム又は上記デジタル信号を、電気通信回線、無線或いは有線通信回線、インターネットを代表とするネットワーク、又はデータ放送等を経由して伝送するものも含む。
また、本発明の例示的な態様は、マイクロプロセッサとメモリとを備えたコンピュータシステムであって、上記メモリは、上記コンピュータプログラムを記憶しており、上記マイクロプロセッサが上記コンピュータプログラムに従って動作するようなコンピュータシステムを含む。
また、本発明の例示的な態様は、上記プログラム或いは上記デジタル信号を上記記録媒体に記録して移送することにより、又は、上記プログラム或いは上記デジタル信号を、上記ネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより上記装置が実現される場合も含む。
また、上記で用いた数字は、全て本開示を具体的に説明するために例示するものであり、本開示は例示された数字に制限されない。
また、ブロック図における機能ブロックの分割は一例であり、複数の機能ブロックを一つの機能ブロックとして実現したり、一つの機能ブロックを複数に分割したり、一部の機能を他の機能ブロックに移してもよい。また、類似する機能を有する複数の機能ブロックの機能を単一のハードウェア又はソフトウェアが並列又は時分割に処理してもよい。
また、上記コンテンツ管理方法に含まれる複数のステップが実行される順序は、本開示を具体的に説明するために例示するためのものであり、上記以外の順序であってもよい。また、上記ステップの一部が、他のステップと同時（並列）に実行されてもよい。
以上、一つまたは複数の態様に係るコンテンツの管理装置の実施の形態を説明したが、本発明は、これらの実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、一つまたは複数の態様の範囲内に含まれてもよい。
本開示は、同一宅内に配置された複数の対象機器に接続され、前記複数の対象機器を管理する機器管理システムにおける機器制御方法に有用である。
１、１１１、１１２ 音声操作システム
２ リモコン
３ 統合制御機器
４ 音声入力機器
１０、１１、１２ 機器
２０ 収音部
２１ 操作検出部
２２ 操作情報生成部
２３ 送信部
３０ 受信部
３１ 音声認識部
３２ 操作情報解析部
３３ 宅内機器コマンドデータベース（ＤＢ）
３４ 機器特定部
３５ 操作特定部
３６ 制御情報生成部
３７ 送信部
３８ 記憶部
３９ 機器操作履歴記憶部
４１ 収音部
４２ 送信部
１０１ 通信部
１０２ 制御部

Claims (9)

  1. 同一宅内に配置された複数の対象機器に接続され、前記複数の対象機器を管理する機器管理システムにおける機器制御方法であって、
    ネットワークを介して、前記複数の対象機器の中の特定対象機器と対応付けられた音声入力装置から、前記複数の対象機器の中の一以上の対象機器に対する操作指示を表す第１音声情報を含む指示情報を受信し、
    前記受信した指示情報に含まれる前記第１音声情報から前記操作指示を認識し、前記指示情報に前記複数の対象機器の中のいずれかの対象機器を表す第２音声情報が含まれるか否かを判断し、
    前記指示情報に前記第２音声情報が含まれない場合は、前記音声入力装置に対応する前記特定対象機器に、前記ネットワークを介して、前記認識された操作内容を実行させる制御コマンドを送信し、また、前記指示情報に前記第２音声情報が含まれる場合は、前記第２音声情報が表す対象機器に、前記ネットワークを介して、前記制御コマンドを送信する、
    機器制御方法。
  2. 前記指示情報は、前記音声入力装置を識別する識別情報を含み、
    前記識別情報と前記特定対象機器の機器ＩＤとを対応づけた第１データベースを参照して、前記特定対象機器を特定し、
    前記特定機器に前記制御コマンドを送信する、
    請求項１に記載の機器制御方法。
  3. 前記複数の対象機器の各々に対応する機器ＩＤと前記第２音声情報とを対応づけた第２データベースを参照して、前記第２音声情報が表す対象機器を特定し、
    前記特定した対象機器に前記制御コマンドを送信する、
    請求項１から請求項２のいずれか一に記載の機器制御方法。
  4. 前記音声入力装置は、物理ボタンまたはタッチパネルを備え、
    前記物理ボタンまたは前記タッチパネルを用いて入力される前記一の対象機器への操作指示を、無線通信を用いて送信する、
    請求項１に記載の音声機器操作方法。
  5. 同一宅内に配置された複数の対象機器に接続され、前記複数の対象機器を管理する機器管理システムにおける機器制御方法であって、
    前記複数の対象機器の中の特定対象機器に対応付けられたリモートコントローラをユーザが使用している場合、ネットワークを介して、前記リモートコントローラから当該リモートコントローラを識別するリモコン識別情報を受信し、
    前記ネットワークを介して、前記機器管理システムに接続された音声入力装置から、前記複数の対象機器の中の一以上の対象機器に対する操作指示を表す第１音声情報を含む指示情報を受信し、
    前記受信した指示情報に含まれる前記第１音声情報から前記操作指示を認識し、前記指示情報に前記複数の対象機器の中のいずれかの対象機器を表す第２音声情報が含まれるか否かを判断し、
    前記指示情報に前記第２音声情報が含まれない場合は、前記受信したリモコン識別情報に基づいて、前記リモートコントローラに対応する前記特定対象機器を特定し、前記特定対象機器に、前記ネットワークを介して、前記認識された操作内容を実行させる制御コマンドを送信し、また、前記指示情報に前記第２音声情報が含まれる場合は、前記第２音声情報が表す対象機器に、前記ネットワークを介して、前記制御コマンドを送信する、
    機器制御方法。
  6. 前記リモコン識別情報と前記特定対象機器の機器ＩＤとを対応づけた第１データベースを参照して、前記特定対象機器を特定し、
    前記特定機器に前記制御コマンドを送信する、
    請求項５に記載の機器制御方法。
  7. 前記複数の対象機器の各々に対応する機器ＩＤと前記第２音声情報とを対応づけた第２データベースを参照して、前記第２音声情報が表す対象機器を特定し、
    前記特定した対象機器に前記制御コマンドを送信する、
    請求項５から請求項６のいずれか一に記載の機器制御方法。
  8. 同一宅内に配置された複数の対象機器に接続され、前記複数の対象機器を管理する機器管理システムであって、
    前記機器管理システムを管理する管理装置は、
    ネットワークを介して、前記複数の対象機器の中の特定対象機器と対応付けられた音声入力装置から、前記複数の対象機器の中の一以上の対象機器に対する操作指示を表す第１音声情報を含む指示情報を受信し、
    前記受信した指示情報に含まれる前記第１音声情報から前記操作指示を認識し、前記指示情報に前記複数の対象機器の中のいずれかの対象機器を表す第２音声情報が含まれるか否かを判断し、
    前記指示情報に前記第２音声情報が含まれない場合は、前記音声入力装置に対応する前記特定対象機器に、前記ネットワークを介して、前記認識された操作内容を実行させる制御コマンドを送信し、また、前記指示情報に前記第２音声情報が含まれる場合は、前記第２音声情報が表す対象機器に、前記ネットワークを介して、前記制御コマンドを送信し、
    前記音声入力装置は、
    前記複数の対象機器の中の一以上の対象機器に対する操作指示を表す第１音声情報を含む指示情報を送信する、
    機器管理システム。
  9. 請求項８に記載の機器管理システムに接続される音声入力装置。
JP2014079100A 2014-04-08 2014-04-08 複数機器の音声操作システム、音声操作方法及び、プログラム Expired - Fee Related JP6282516B2 (ja)

Priority Applications (8)

Application Number Priority Date Filing Date Title
JP2014079100A JP6282516B2 (ja) 2014-04-08 2014-04-08 複数機器の音声操作システム、音声操作方法及び、プログラム
US14/667,661 US9431017B2 (en) 2014-04-08 2015-03-24 Device control method, device management system, and voice input apparatus
EP15160749.6A EP2930715B1 (en) 2014-04-08 2015-03-25 Device control method and device management system
EP18163376.9A EP3361477A1 (en) 2014-04-08 2015-03-25 Device control method and device management system
US15/217,116 US9747903B2 (en) 2014-04-08 2016-07-22 Device control method, device management system, and voice input apparatus
US15/656,426 US10102861B2 (en) 2014-04-08 2017-07-21 Device control method, device management system, and voice input apparatus
US16/132,871 US10515641B2 (en) 2014-04-08 2018-09-17 Device control method, device management system, and voice input apparatus
US16/707,799 US20200111498A1 (en) 2014-04-08 2019-12-09 Device control method, device management system, and voice input apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014079100A JP6282516B2 (ja) 2014-04-08 2014-04-08 複数機器の音声操作システム、音声操作方法及び、プログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2018009622A Division JP6435068B2 (ja) 2018-01-24 2018-01-24 複数機器の機器管理システム、機器制御方法及び、プログラム

Publications (2)

Publication Number Publication Date
JP2015201739A true JP2015201739A (ja) 2015-11-12
JP6282516B2 JP6282516B2 (ja) 2018-02-21

Family

ID=52997191

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014079100A Expired - Fee Related JP6282516B2 (ja) 2014-04-08 2014-04-08 複数機器の音声操作システム、音声操作方法及び、プログラム

Country Status (3)

Country Link
US (5) US9431017B2 (ja)
EP (2) EP3361477A1 (ja)
JP (1) JP6282516B2 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018158894A1 (ja) * 2017-03-01 2018-09-07 三菱電機株式会社 空調制御装置、空調制御方法及びプログラム
WO2019013309A1 (ja) * 2017-07-14 2019-01-17 ダイキン工業株式会社 操作システム、情報処理装置、制御システム、及び赤外線出力装置
WO2019187581A1 (ja) * 2018-03-28 2019-10-03 ソニー株式会社 情報処理装置、情報処理システム、情報処理方法及び情報処理プログラム
JP2020500330A (ja) * 2016-11-03 2020-01-09 グーグル エルエルシー 音声インタフェース装置におけるフォーカスセッション
JP2020527734A (ja) * 2017-07-10 2020-09-10 サムスン エレクトロニクス カンパニー リミテッド 遠隔制御装置及び遠隔制御装置のユーザ音声受信方法
JP2020528610A (ja) * 2017-07-25 2020-09-24 トップ システム カンパニー リミテッドTop System Co., Ltd. Ｔｖ画面位置調節機の音声認識型遠隔制御装置
JPWO2020195389A1 (ja) * 2019-03-26 2020-10-01
US11373648B2 (en) 2018-09-25 2022-06-28 Fujifilm Business Innovation Corp. Control device, control system, and non-transitory computer readable medium

Families Citing this family (152)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
JP2013169122A (ja) 2012-02-17 2013-08-29 Panasonic Corp 非接触充電モジュール及びそれを備えた携帯端末
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
EP2954514B1 (en) 2013-02-07 2021-03-31 Apple Inc. Voice trigger for a digital assistant
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
DE112014002747T5 (de) 2013-06-09 2016-03-03 Apple Inc. Vorrichtung, Verfahren und grafische Benutzerschnittstelle zum Ermöglichen einer Konversationspersistenz über zwei oder mehr Instanzen eines digitalen Assistenten
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
JP6282516B2 (ja) * 2014-04-08 2018-02-21 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 複数機器の音声操作システム、音声操作方法及び、プログラム
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
AU2015266863B2 (en) 2014-05-30 2018-03-15 Apple Inc. Multi-command single utterance input method
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
JP6501217B2 (ja) * 2015-02-16 2019-04-17 アルパイン株式会社 情報端末システム
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10379808B1 (en) * 2015-09-29 2019-08-13 Amazon Technologies, Inc. Audio associating of computing devices
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
JP2017146437A (ja) * 2016-02-17 2017-08-24 本田技研工業株式会社 音声入力処理装置
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) * 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
KR20180085931A (ko) 2017-01-20 2018-07-30 삼성전자주식회사 음성 입력 처리 방법 및 이를 지원하는 전자 장치
CN106847281A (zh) * 2017-02-26 2017-06-13 上海新柏石智能科技股份有限公司 基于语音模糊识别技术的智能家居语音控制系统及方法
US10013979B1 (en) * 2017-04-17 2018-07-03 Essential Products, Inc. Expanding a set of commands to control devices in an environment
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
DK179549B1 (en) * 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10573171B2 (en) 2017-05-23 2020-02-25 Lenovo (Singapore) Pte. Ltd. Method of associating user input with a device
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
JP2019052797A (ja) * 2017-09-15 2019-04-04 シャープ株式会社 ネットワークシステム、情報処理方法、およびサーバ
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
CN108105944A (zh) * 2017-12-21 2018-06-01 佛山市中格威电子有限公司 一种用于空调器控制及具有语音反馈的语音交互系统
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
JP6928842B2 (ja) * 2018-02-14 2021-09-01 パナソニックＩｐマネジメント株式会社 制御情報取得システム、及び、制御情報取得方法
DE102018103548A1 (de) * 2018-02-16 2019-08-22 Technisat Digital Gmbh Vorrichtung zum Fernbedienen sowie zweckgleiches Verfahren
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
TWI672690B (zh) * 2018-03-21 2019-09-21 塞席爾商元鼎音訊股份有限公司 人工智慧語音互動之方法、電腦程式產品及其近端電子裝置
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10607610B2 (en) 2018-05-29 2020-03-31 Nortek Security & Control Llc Audio firewall
US10540974B2 (en) * 2018-05-30 2020-01-21 Intel Corporation Detection and disposition of commands methods and apparatuses
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11076039B2 (en) 2018-06-03 2021-07-27 Apple Inc. Accelerated task performance
CN109028478A (zh) * 2018-07-03 2018-12-18 朱超 空调遥控器及空调控制系统
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
CN109360559A (zh) * 2018-10-23 2019-02-19 三星电子（中国）研发中心 多智能设备同时存在时处理语音指令的方法和系统
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
CN109814457A (zh) * 2019-02-12 2019-05-28 珠海荣邦电子科技有限公司 电器设备的控制方法、装置、存储介质和处理器
CN109584535A (zh) * 2019-02-12 2019-04-05 珠海荣邦电子科技有限公司 红外遥控设备与装置
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
KR20200127823A (ko) * 2019-05-02 2020-11-11 삼성전자주식회사 허브 디바이스, 허브 디바이스 및 복수의 디바이스를 포함하는 멀티 디바이스 시스템 및 그 동작 방법
WO2020222539A1 (en) 2019-05-02 2020-11-05 Samsung Electronics Co., Ltd. Hub device, multi-device system including the hub device and plurality of devices, and method of operating the same
US20200349940A1 (en) * 2019-05-02 2020-11-05 Samsung Electronics Co., Ltd. Server for determining target device based on speech input of user and controlling target device, and operation method of the server
KR102309540B1 (ko) * 2019-05-02 2021-10-07 삼성전자주식회사 사용자의 입력 입력에 기초하여 타겟 디바이스를 결정하고, 타겟 디바이스를 제어하는 서버 및 그 동작 방법
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
CN110415696A (zh) * 2019-07-26 2019-11-05 广东美的制冷设备有限公司 语音控制方法、电器控制装置、电器及电器控制系统
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
WO2021112639A1 (en) * 2019-12-05 2021-06-10 Samsung Electronics Co., Ltd. Electronic device performing operation based on user speech in multi device environment and operating method thereof
KR102365753B1 (ko) * 2019-12-09 2022-02-22 리모트솔루션 주식회사 클라우드 서버를 활용한 음성인식 rcu 설정 시스템 및 그 방법
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
CN112188252A (zh) * 2020-09-24 2021-01-05 深圳创维－Rgb电子有限公司 基于电视提醒的老人陪护方法、装置及可读存储介质
CN113436631B (zh) * 2021-05-20 2023-01-13 青岛海尔空调器有限总公司 语音信息处理方法、系统及用于语音信息处理的装置
KR20230023456A (ko) * 2021-08-10 2023-02-17 삼성전자주식회사 전자 장치 및 그 제어 방법

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001197379A (ja) * 2000-01-05 2001-07-19 Matsushita Electric Ind Co Ltd 機器設定装置、機器設定システムおよび機器設定処理プログラムを記録した記録媒体
JP2002351493A (ja) * 2001-05-25 2002-12-06 Mitsubishi Electric Corp 音声認識制御装置、及び車載用情報処理装置
JP2004088484A (ja) * 2002-08-27 2004-03-18 Yamaha Corp 家電機器制御装置、通信装置、プログラムおよび記録媒体
US7139716B1 (en) * 2002-08-09 2006-11-21 Neil Gaziz Electronic automation system
JP2007184746A (ja) * 2006-01-06 2007-07-19 Sony Corp リモコン・システム、リモコン制御対象機器、並びにコンピュータ・システム
JP2007243602A (ja) * 2006-03-08 2007-09-20 Bandai Co Ltd 電子装置の制御装置および制御方法
WO2008130095A1 (en) * 2007-04-20 2008-10-30 Seoby Electronics Co., Ltd. Home network system and control method thereof
JP2010213154A (ja) * 2009-03-12 2010-09-24 Nippon Telegr & Teleph Corp <Ntt> 機器操作システムおよび方法
US8340975B1 (en) * 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
US20130183944A1 (en) * 2012-01-12 2013-07-18 Sensory, Incorporated Information Access and Device Control Using Mobile Phones and Audio in the Home Environment

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3355293B2 (ja) 1997-09-12 2002-12-09 ミサワホーム株式会社 音声認識遠隔操作装置
JP2003153355A (ja) 2001-11-13 2003-05-23 Matsushita Electric Ind Co Ltd 音声認識遠隔制御装置
JP2005303936A (ja) 2004-04-15 2005-10-27 Sanyo Electric Co Ltd 遠隔制御方法およびシステム
JP4260788B2 (ja) * 2005-10-20 2009-04-30 本田技研工業株式会社 音声認識機器制御装置
JP2007121576A (ja) 2005-10-26 2007-05-17 Matsushita Electric Works Ltd 音声操作装置
US10145579B2 (en) * 2013-05-01 2018-12-04 Honeywell International Inc. Devices and methods for interacting with a control system that is connected to a network
US9316400B2 (en) * 2013-09-03 2016-04-19 Panasonic Intellctual Property Corporation of America Appliance control method, speech-based appliance control system, and cooking appliance
EP3261087A1 (en) * 2013-09-03 2017-12-27 Panasonic Intellectual Property Corporation of America Voice interaction control method
JP6282516B2 (ja) * 2014-04-08 2018-02-21 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 複数機器の音声操作システム、音声操作方法及び、プログラム

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001197379A (ja) * 2000-01-05 2001-07-19 Matsushita Electric Ind Co Ltd 機器設定装置、機器設定システムおよび機器設定処理プログラムを記録した記録媒体
JP2002351493A (ja) * 2001-05-25 2002-12-06 Mitsubishi Electric Corp 音声認識制御装置、及び車載用情報処理装置
US7139716B1 (en) * 2002-08-09 2006-11-21 Neil Gaziz Electronic automation system
JP2004088484A (ja) * 2002-08-27 2004-03-18 Yamaha Corp 家電機器制御装置、通信装置、プログラムおよび記録媒体
JP2007184746A (ja) * 2006-01-06 2007-07-19 Sony Corp リモコン・システム、リモコン制御対象機器、並びにコンピュータ・システム
JP2007243602A (ja) * 2006-03-08 2007-09-20 Bandai Co Ltd 電子装置の制御装置および制御方法
WO2008130095A1 (en) * 2007-04-20 2008-10-30 Seoby Electronics Co., Ltd. Home network system and control method thereof
JP2010213154A (ja) * 2009-03-12 2010-09-24 Nippon Telegr & Teleph Corp <Ntt> 機器操作システムおよび方法
US8340975B1 (en) * 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
US20130183944A1 (en) * 2012-01-12 2013-07-18 Sensory, Incorporated Information Access and Device Control Using Mobile Phones and Audio in the Home Environment

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7130637B2 (ja) 2016-11-03 2022-09-05 グーグル エルエルシー 音声インタフェース装置におけるフォーカスセッション
US11527246B2 (en) 2016-11-03 2022-12-13 Google Llc Focus session at a voice interface device
JP2020500330A (ja) * 2016-11-03 2020-01-09 グーグル エルエルシー 音声インタフェース装置におけるフォーカスセッション
WO2018158894A1 (ja) * 2017-03-01 2018-09-07 三菱電機株式会社 空調制御装置、空調制御方法及びプログラム
JP7187468B2 (ja) 2017-07-10 2022-12-12 サムスン エレクトロニクス カンパニー リミテッド 遠隔制御装置及び遠隔制御装置のユーザ音声受信方法
JP2020527734A (ja) * 2017-07-10 2020-09-10 サムスン エレクトロニクス カンパニー リミテッド 遠隔制御装置及び遠隔制御装置のユーザ音声受信方法
US11449307B2 (en) 2017-07-10 2022-09-20 Samsung Electronics Co., Ltd. Remote controller for controlling an external device using voice recognition and method thereof
JPWO2019013309A1 (ja) * 2017-07-14 2020-07-27 ダイキン工業株式会社 操作システム、情報処理装置、制御システム、及び赤外線出力装置
JP7029078B2 (ja) 2017-07-14 2022-03-03 ダイキン工業株式会社 操作システム、情報処理装置、制御システム、及び赤外線出力装置
WO2019013309A1 (ja) * 2017-07-14 2019-01-17 ダイキン工業株式会社 操作システム、情報処理装置、制御システム、及び赤外線出力装置
JP2020528610A (ja) * 2017-07-25 2020-09-24 トップ システム カンパニー リミテッドTop System Co., Ltd. Ｔｖ画面位置調節機の音声認識型遠隔制御装置
JPWO2019187581A1 (ja) * 2018-03-28 2021-04-08 ソニー株式会社 情報処理装置、情報処理システム、情報処理方法及び情報処理プログラム
WO2019187581A1 (ja) * 2018-03-28 2019-10-03 ソニー株式会社 情報処理装置、情報処理システム、情報処理方法及び情報処理プログラム
US11558482B2 (en) 2018-03-28 2023-01-17 Sony Corporation Information processing apparatus, information processing system, and information processing method
JP7279706B2 (ja) 2018-03-28 2023-05-23 ソニーグループ株式会社 情報処理装置、情報処理システム、情報処理方法及び情報処理プログラム
US11949753B2 (en) 2018-03-28 2024-04-02 Sony Group Corporation Information processing apparatus, information processing system, and information processing method
US11373648B2 (en) 2018-09-25 2022-06-28 Fujifilm Business Innovation Corp. Control device, control system, and non-transitory computer readable medium
JPWO2020195389A1 (ja) * 2019-03-26 2020-10-01
JP7452528B2 (ja) 2019-03-26 2024-03-19 ソニーグループ株式会社 情報処理装置及び情報処理方法

Also Published As

Publication number Publication date
US9747903B2 (en) 2017-08-29
EP2930715A1 (en) 2015-10-14
US20150287411A1 (en) 2015-10-08
EP2930715B1 (en) 2018-06-20
US9431017B2 (en) 2016-08-30
US20190019518A1 (en) 2019-01-17
US20200111498A1 (en) 2020-04-09
US10102861B2 (en) 2018-10-16
US20160329054A1 (en) 2016-11-10
JP6282516B2 (ja) 2018-02-21
EP3361477A1 (en) 2018-08-15
US20170323646A1 (en) 2017-11-09
US10515641B2 (en) 2019-12-24

Similar Documents

Publication Publication Date Title
JP6282516B2 (ja) 複数機器の音声操作システム、音声操作方法及び、プログラム
JP6435068B2 (ja) 複数機器の機器管理システム、機器制御方法及び、プログラム
JP6567737B2 (ja) 音声対話制御方法
US9721572B2 (en) Device control method and electric device
JP6440513B2 (ja) 音声認識機能を用いた情報提供方法および機器の制御方法
JP6053097B2 (ja) 機器操作システム、機器操作装置、サーバ、機器操作方法およびプログラム
US7272455B2 (en) Remote controlling device, program and system with control command changing function
EP3588966A2 (en) Display apparatus and method of controlling a display apparatus in a voice recognition system
JP3838029B2 (ja) 音声認識を用いた機器制御方法および音声認識を用いた機器制御システム
JP2006227634A (ja) 音声認識を用いた機器制御方法および音声認識を用いた機器制御システムならびに音声認識を用いた機器制御プログラムを記録した記録媒体
JP2016014967A (ja) 情報管理方法
JP2019028388A (ja) 家電装置システム
US9640067B1 (en) Determining commands on a media device interface
EP4184309A1 (en) Display device
JP2019056913A (ja) 音声認識機能を用いた情報提供方法および機器の制御方法
JP2007228520A (ja) リモートコントロール装置及びプログラム
JP7322824B2 (ja) 情報処理装置、情報処理方法、および制御システム
JP7433841B2 (ja) 機器操作システム、機器操作方法、情報処理装置及びコンピュータプログラム
JP2010072704A (ja) インターフェース装置および入力方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161027

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171226

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180124

R150 Certificate of patent or registration of utility model

Ref document number: 6282516

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees