JP2019101730A - 機器制御システム、機器制御方法、及びプログラム - Google Patents

機器制御システム、機器制御方法、及びプログラム Download PDF

Info

Publication number
JP2019101730A
JP2019101730A JP2017231631A JP2017231631A JP2019101730A JP 2019101730 A JP2019101730 A JP 2019101730A JP 2017231631 A JP2017231631 A JP 2017231631A JP 2017231631 A JP2017231631 A JP 2017231631A JP 2019101730 A JP2019101730 A JP 2019101730A
Authority
JP
Japan
Prior art keywords
phrase
user
unit
command
registration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017231631A
Other languages
English (en)
Other versions
JP6962158B2 (ja
Inventor
須山　明彦
Akihiko Suyama
明彦 須山
和也 虫壁
Kazuya Mushikabe
和也 虫壁
啓介 塚田
Keisuke Tsukada
啓介 塚田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Priority to JP2017231631A priority Critical patent/JP6962158B2/ja
Priority to EP18884611.7A priority patent/EP3719630A4/en
Priority to CN201880077883.2A priority patent/CN111433736B/zh
Priority to PCT/JP2018/042864 priority patent/WO2019107224A1/ja
Publication of JP2019101730A publication Critical patent/JP2019101730A/ja
Priority to US16/888,279 priority patent/US11574631B2/en
Application granted granted Critical
Publication of JP6962158B2 publication Critical patent/JP6962158B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/183—Speech classification or search using natural language modelling using context dependencies, e.g. language models
    • G10L15/19—Grammatical context, e.g. disambiguation of the recognition hypotheses based on word sequence rules
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/20—Binding and programming of remote control devices
    • G08C2201/21—Programming remote control devices via third means
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G08C2201/31—Voice input
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
    • G10L2015/228—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Selective Calling Equipment (AREA)
  • Telephonic Communication Services (AREA)

Abstract

【課題】ユーザが音声入力において受付可能なフレーズを容易に得ることが可能な技術を提供する。【解決手段】ユーザ端末６０のフレーズ生成部６３０は、サンプルフレーズが必要とするコマンドを実行可能な機器２０を選択し、選択された機器２０の名称を取得する。次に、フレーズ生成部６３０は、利用登録されたフレーズの種類を示す情報が、第１の種類のフレーズを受付可能な状態を示すかを判定する。第１の種類のフレーズを受付可能な状態を示す場合には、フレーズ生成部６３０は第１のテンプレートの文言のうち機器名の箇所を選択された機器の名称で置き換えることにより、サンプルフレーズを生成する。そして、フレーズ出力部６４０は、生成されたサンプルフレーズがユーザ端末６０の画面に表示されるように、サンプルフレーズのデータを出力する。【選択図】図３

Description

本発明は機器制御システム、機器制御方法、及びプログラムに関する。
近年は、例えばスマートフォンやスマートスピーカなど、音声認識を用いた音声入力により物理的な操作をしなくても手軽に操作できる機器が増加している。
音声入力においては、指示として何らかのフレーズを入力することになる。ここで入力されるフレーズの文は本来的に自由度が高いため、ユーザは、音声入力としてどんなフレーズが受け付けられるかわからない。そこで、受け付け可能なフレーズを説明するマニュアルを整備する方法が考えられるが、定型フレーズしか案内することができない、そのため、全ユーザに共通するフレーズを案内することはできても、ユーザにより変化するフレーズを案内できないという問題があった。
本発明は上記課題を鑑みてなされたものであって、その目的は、ユーザが音声入力において受付可能なフレーズを容易かつ確実に得ることが可能な技術を提供することにある。
上記課題を解決するために、本発明に係る機器制御システムは、デバイスに関するユーザ設定を取得する設定取得手段と、前記取得された前記ユーザ設定に基づいて、前記デバイスを制御可能なフレーズを生成するフレーズ生成手段と、前記生成されたフレーズを表示させるデータを出力する表示データ出力手段と、を含む。
また、本発明に係る機器制御方法は、デバイスに関するユーザ設定を取得するステップと、前記取得された前記ユーザ設定に基づいて、前記デバイスを制御可能なフレーズを生成するステップと、前記生成されたフレーズを表示させるデータを出力するステップと、を含む。
また、本発明に係るプログラムは、デバイスに関するユーザ設定を取得する設定取得手段、前記取得された前記ユーザ設定に基づいて、前記デバイスを制御可能なフレーズを生成するフレーズ生成手段、および、前記生成されたフレーズを表示させるデータを出力する表示データ出力手段、としてコンピュータを機能させる。
本発明によれば、ユーザが音声入力において受付可能なフレーズを容易に得ることが可能になる。
本発明の実施形態にかかる機器制御システムの構成を示す図である。 機器テーブルの一例を示す図である。 音声認識装置、コマンドデータ送信装置、機器２０およびユーザ端末により実現される機能を示すブロック図である。 メッセージの一例を示す図である。 音声入力の利用登録の処理の一例を示すフロー図である。 音声入力利用テーブルの一例を示す図である。 機器登録の処理を説明するシーケンス図である。 機器登録におけるユーザ端末の処理の例を示すフロー図である。 機器登録における機器の処理の例を示すフロー図である。 機器登録におけるコマンド送信サーバの処理の例を示すフロー図である。 サンプルフレーズのテンプレートの一例を示す図である。 フレーズ生成部およびフレーズ出力部の処理の例を示すフロー図である。 表示されるサンプルフレーズの一例を示す図である。 表示されるサンプルフレーズの他の一例を示す図である。 動作指示受付部、メッセージ生成部、メッセージ送信部、メッセージ受信部、コマンド実行部の処理の一例を示すフロー図である。
以下、本発明の実施形態の例を図面に基づいて説明する。
［１．システム構成］図１は、本発明の実施形態に係る機器制御システムの構成を示す。図１に示すように、機器制御システム１は、第１機器２０−１、第２機器２０−２、第３機器２０−３、音声入力装置３０、音声認識装置４０、及びコマンド処理システム５０を含む。以下では、第１機器２０−１、第２機器２０−２、および第３機器２０−３を総称して「機器２０」と記載する場合がある。
機器２０及び音声入力装置３０はローカルエリアに設置され、ＬＡＮ２に接続される。ＬＡＮ２は有線ＬＡＮであってもよいし、無線ＬＡＮであってもよい。ＬＡＮ２はルータ４を介してインターネット６に接続される。音声認識装置４０及びコマンド処理システム５０はローカルエリア外に設置される。すなわち、機器２０及び音声入力装置３０から見て、音声認識装置４０及びコマンド処理システム５０はインターネット６側に設置される。なお、「ローカルエリア」とは、ＬＡＮ２を介した通信が可能な限られた範囲のエリアである。
機器２０は機器制御システム１による制御の対象となる機器である。図１では、３台の機器２０が示されているが、４台以上の機器２０が含まれていてもよいし、２台以下の機器２０のみが含まれていてもよい。
例えば、機器２０はオーディオ機器又はオーディオビジュアル機器である。具体的には、機器２０は、ＡＶレシーバ、ＡＶアンプ、スピーカ、光ディスク再生機器（ブルーレイディスク（登録商標）プレーヤ又はＤＶＤ（登録商標）プレーヤ等）、又はテレビジョン受像機である。また例えば、機器２０は楽器（電子楽器又は電気楽器等）であってもよい。なお、機器２０はこれら以外の機器であってもよい。
以下では、第１機器２０−１がＡＶレシーバであり、第２機器２０−２がテレビジョン受像機であり、第３機器２０−３がブルーレイディスクプレーヤである例を想定する。第２機器２０−２はＨＤＭＩ（High-Definition Multimedia Interface：登録商標）ケーブルを介して第１機器２０−１の第１のＨＤＭＩ端子（ＨＤＭＩ１）に接続され、第３機器２０−３はＨＤＭＩケーブルを介して第１機器２０−１の第２のＨＤＭＩ端子（ＨＤＭＩ２）に接続されている。また、プライベートＩＰアドレス「１９２．１６８．０．２」、「１９２．１６８．０．３」、「１９２．１６８．０．４」がそれぞれ第１機器２０−１、第２機器２０−２、第３機器２０−３に対して設定されている。
図１に示すように、第１機器２０−１は制御部２１、記憶部２２、及び通信部２３を含む。制御部２１は少なくとも一つのマイクロプロセッサ（ＣＰＵ）を含み、記憶部２２に記憶されたプログラムに従って処理を実行する。記憶部２２は、主記憶部（例えばＲＡＭ）及び補助記憶部（例えば、不揮発性の半導体メモリ、またはハードディスクドライブ）を含む。記憶部２２はプログラムやデータを記憶するためのものである。通信部２３は他の装置との間でデータを送受信するためのものである。図１では省略されているが、第２機器２０−２、および第３機器２０−３も制御部２１、記憶部２２、及び通信部２３を含む。
なお、機器２０は、情報記憶媒体（例えば光ディスク又はメモリカード等）に記憶されたプログラムやデータを読み取るための構成（例えば光ディスクドライブ又はメモリーカードスロット等）を備えてもよい。そして、プログラムが情報記憶媒体を介して機器２０に供給されてもよい。プログラムはインターネット６を介して機器２０に供給されてもよい。
音声入力装置３０はマイクロフォンを含み、音声入力を受け付ける。本実施形態では、ユーザが機器２０への動作指示を音声入力するために音声入力装置３０が使用される。例えば、Ｘ社が提供するコマンド処理システム５０を介して、居間に設置された機器２０をスタンバイ状態から起動させたい場合、ユーザは「ＡＡＡ ａｓｋ ＭＣ ｔｏ ｔｕｒｎ ｏｎ ｔｈｅ Ｌｉｖｉｎｇ Ｒｏｏｍ」等を音声入力装置３０に入力する。ここで、「ＡＡＡ」は音声入力装置３０に対する音声入力を開始させるための言葉（Ｗａｋｅ ｗｏｒｄ）であって、例えば音声入力装置３０の名称であり、「ＭＣ」は、コマンド処理システム５０の名称である。
音声入力装置３０に入力された音声（フレーズ）を示す音声データはユーザＩＤとともにインターネット６を介して音声認識装置４０に送信される。音声認識装置４０は例えばサーバコンピュータによって実現される。音声認識装置４０はいわゆるクラウドコンピューティングにより、複数のサーバによって実現されてもよい。音声認識装置４０は音声認識処理を実行することによって、音声データを、プログラム（コマンド処理システム５０）によって理解しやすい形式のデータに変換する。例えば、音声認識装置４０は、フレーズの音声データから、そのユーザの指示の種類と指示の対象とを示す文字列を含む所定形式の動作指示を生成する。そして、動作指示はユーザＩＤとともにコマンド処理システム５０に送信される。なお、ユーザＩＤは、音声データがコマンド処理システム５０に送信されるまでの間に、いずれかのインターネット側の装置（処理）によって付与されてもよい。
ここで、音声認識装置４０は、ユーザから送信される音声の内容、例えばフレーズ中の特定の単語群に応じて、そのフレーズの内容を処理できるコマンド処理システム５０に対して動作指示を送信することができる。ユーザは、利用したいコマンド処理システム５０を事前に音声認識装置４０に登録する。音声認識装置４０はユーザから入力されたフレーズ中の言葉に基づいて、登録されたコマンド処理システム５０のうちいずれかを選択し、選択されたコマンド処理システム５０へ動作指示を送信する。また、音声認識装置４０は、特定の機器２０に対して複数の種類のフレーズを受け付け、種類に応じたコマンドデータ送信装置１０を介して機器２０を制御してもよい。例えば、フレーズの種類により、フレーズにおける指示の文言のフォーマットが異なっている。
例えば、フレーズの第１の種類では、名称が「Ｌｉｖｉｎｇ Ｒｏｏｍ」である機器２０を起動させるフレーズは、「ＡＡＡ ａｓｋ ＭＣ ｔｏ ｔｕｒｎ ｏｎ ｔｈｅ Ｌｉｖｉｎｇ Ｒｏｏｍ」であり、フレーズの第２の種類では、その機器２０を起動させる、第２の種類では、その機器２０を起動させるフレーズは、「ＡＡＡ ｔｕｒｎ ｏｎ ｔｈｅ Ｌｉｖｉｎｇ Ｒｏｏｍ」である。第１の種類では、フレーズはコマンド処理システム５０を識別する名称である「ＭＣ」を含むが、第２の種類では、フレーズがその名称を含まない。音声認識装置４０が第１の種類のフレーズを受け付けて動作指示を送信するか、第２の種類のフレーズを受け付けて動作指示を送信するかについては、ユーザにより設定される。この設定の詳細については後述する。音声認識装置４０が第１の種類のフレーズを受け付けた際に送信先となるコマンド処理システム５０が、第２の種類のものと異なっていてもよい。
ユーザ端末６０は、ユーザによるタッチ操作などの物理的操作を受け付け、機器２０を制御する。また、ユーザ端末６０は、ユーザの操作に基づいてコマンド処理システム５０や音声認識装置４０の設定を行う。ユーザ端末６０は例えばスマートフォンやパーソナルコンピュータである。ユーザ端末６０は制御部６１、記憶部６２、及び通信部６３を含む。制御部６１、記憶部６２、記憶部２２は制御部２１、記憶部２２、及び通信部２３と同様である。
図１に示すように、コマンド処理システム５０は、コマンドデータ送信装置１０、データベース５２、及びＭＱＴＴ（Message Queueing Telemetry Transport）サーバ５３を含む。
データベース５２は各種データを記憶する。例えば、データベース５２は各ユーザの所有している機器２０の情報を記憶する。図２はデータベース５２に記憶される機器テーブルの一例を示す。機器テーブルＴ１はユーザごとに（ユーザＩＤと関連付けて）記憶される。なお、コマンド処理システム５０（データベース５２）、ユーザ端末６０および機器２０で使用されるユーザＩＤは、音声入力装置３０及び音声認識装置４０で使用されるユーザＩＤと異なっていてもよいし、同じであってもよい。これらのユーザＩＤが異なる場合には、それらのユーザＩＤを変換するための対応関係データがコマンド処理システム５０または音声認識装置４０に記憶されている。
図２に示すように、機器テーブルＴ１は「ＩＤ」、「名称」、「機器ＩＤ」、「ＩＰアドレス」、「コマンド種類」、「端子」、「接続先」、「受信可否」、「受付可能コマンド」フィールドを含む。
「ＩＤ」フィールドは、ユーザの所有している各機器２０を一意に識別する情報を示す。図２では、第１機器２０−１が機器ＩＤ「１」に相当し、第２機器２０−２が機器ＩＤ「２」に相当する。
「名称」フィールドは機器２０の名称を示す。この名称はユーザが動作指示の対象の機器２０を指定するために使用される。名称としては、ユーザによって設定された任意の名称が使用されてよいし、例えば機器２０の製造元等によって設定された初期名称が使用され、ユーザにより修正が可能になっていてもよい。
「機器ＩＤ」フィールドは、これのみで機器２０を一意に特定する機器ＩＤである。機器ＩＤは、機器２０のＭＡＣアドレスであってもよいし、ＭＡＣアドレスに基づいて生成されたＩＤであってもよい。「ＩＰアドレス」フィールドは、機器２０が備えている有線又は無線ネットワークインタフェースカードに対して設定されたＩＰアドレスを示す。「コマンド種類」フィールドは、機器２０で使用されているコマンドの種類（体系）を示す。「端子」フィールドは、機器２０が備えている入力端子のリストを示す。「接続先」フィールドは、機器２０が他の機器２０の入力端子に接続されて、機器２０から出力される音声が他の機器２０に入力される場合に、機器２０が接続された他の機器２０の入力端子を示す。
「受信可否」フィールドは、インターネット６を介してコマンドを含むメッセージを受信可能であるか否かを示す。メッセージについては後述する。例えば、「０」又は「１」が「受信可否」フィールドに登録される。「０」は、インターネット６を介してメッセージを受信できないことを示し、「１」は、インターネット６を介してメッセージを受信できることを示す。
「受付可能コマンド」フィールドは、機器２０が受付可能なコマンドのリストを示す。「受付可能コマンド」フィールドのリスト中に「Ｐｏｗｅｒ」が設定されていれば、その機器は外部からのコマンドによりスタンバイ状態から起動することが可能であることを示し、設定されていなければスタンバイ状態から起動することができないことを示す。また、「受付可能コマンド」フィールドのリスト中に「Ｖｏｌｕｍｅ」が設定されていれば、その機器は外部からのコマンドにより音量を制御することが可能であることを示し、設定されていなければ音量を制御することができないことを示す。
機器テーブルＴ１のデータは各ユーザによって登録される。ユーザはユーザ端末６０からコマンドデータ送信装置１０にアクセスすることによって、自らの所有する機器２０の情報を機器テーブルＴ１に登録できる。登録の詳細については後述する。
なお、データベース５２には機器テーブルＴ１以外のデータも記憶される。例えば、データベース５２にはユーザと、機器２０のためにそのユーザが入力可能なフレーズの種類を示すデータとが関連付けて記憶されている。他にも、動作指示とコマンドとの対応関係を示すデータ（言い換えれば、動作指示をコマンドに変換するためのデータ）がデータベース５２に記憶されてもよい。
コマンドデータ送信装置１０は例えばサーバコンピュータによって実現される。図１に示すように、コマンドデータ送信装置１０は制御部１１、記憶部１２、及び通信部１３を含む。制御部１１、記憶部１２、及び通信部１３は制御部２１、記憶部２２、及び通信部２３と同様である。なお、コマンドデータ送信装置１０は、情報記憶媒体（例えば光ディスク又はメモリカード等）に記憶されたプログラムやデータを読み取るための構成要素（例えば光ディスクドライブ又はメモリーカードスロット等）を備えてもよい。そして、プログラムが情報記憶媒体を介してコマンドデータ送信装置１０に供給されてもよい。プログラムはインターネット６を介してコマンドデータ送信装置１０に供給されてもよい。
コマンドデータ送信装置１０はデータベース５２にアクセス可能である。コマンドデータ送信装置１０とデータベース５２とは一つのサーバコンピュータによって実現されてもよいし、別のサーバコンピュータによって実現されてもよい。
コマンドデータ送信装置１０は、音声認識装置４０から送信される、機器２０に対する動作指示を受け付け、当該動作指示に基づいてコマンドを含むメッセージを生成し、当該メッセージを当該機器２０へ向けて送信する。より具体的には、メッセージはＭＱＴＴサーバ５３を介して機器２０へ向けて送信される。ＭＱＴＴサーバ５３は、ＭＱＴＴプロトコルを使用してデータを送受信するためのものである。コマンドデータ送信装置１０とＭＱＴＴサーバ５３とは一つのサーバコンピュータによって実現されてもよいし、別のサーバコンピュータによって実現されてもよい。
［２．機能ブロック］図３は、コマンドデータ送信装置１０、機器２０およびユーザ端末６０により実現される機能を示すブロック図である。
図３に示すように、コマンドデータ送信装置１０は動作指示受付部１１０、メッセージ生成部１２０、メッセージ送信部１３０、機器情報取得部１４０、音声利用登録部１５０、機器登録部１６０、及び登録結果送信部１７０を含む。動作指示受付部１１０、メッセージ生成部１２０、メッセージ送信部１３０、機器情報取得部１４０、音声利用登録部１５０、機器登録部１６０、及び登録結果送信部１７０は、制御部１１が記憶部１２に格納された各機能のプログラムを実行することによって実現される。
また図３に示すように、機器２０はメッセージ受信部２１０、コマンド実行部２２０、機器情報送信部２３０および設定部２６０を含む。メッセージ受信部２１０、コマンド実行部２２０、機器情報送信部２３０および設定部２６０は制御部２１が記憶部２２に格納された各機能のプログラムを実行することによって実現される。
また図３に示すように、ユーザ端末６０は登録制御部６１０、設定取得部６２０、フレーズ生成部６３０、フレーズ出力部６４０を含む。登録制御部６１０、設定取得部６２０、フレーズ生成部６３０、フレーズ出力部６４０は制御部６１が記憶部６２に格納された各機能のプログラムを実行することによって実現される。
［２−１］まず、動作指示受付部１１０、メッセージ生成部１２０、メッセージ送信部１３０、メッセージ受信部２１０、及びコマンド実行部２２０について説明する。
動作指示受付部１１０は、機器２０に対する動作指示を受け付ける。例えば、動作指示受付部１１０は、音声認識装置４０によってテキストデータ等のプログラムにとって理解可能な形式のデータに変換された動作指示を音声認識装置４０から受信する。
メッセージ生成部１２０は、動作指示受付部１１０が機器２０に対する動作指示を受信した場合に、動作指示にかかるユーザを特定するユーザＩＤと、コマンドとを含むメッセージを生成する。コマンドは、動作指示に応じた動作を行わせるためのテキスト等のデータである。
図４はメッセージＤ１の一例を示す図である。図４に示されるメッセージＤ１は、第１機器２０−１をスタンバイ状態から起動する旨の動作指示が受け付けられた場合に生成されるメッセージの一例である。
メッセージＤ１は項目「ｕｉｄ」，「ｔｙｐｅ」，「ｉｄ」，「ｃｏｍｍａｎｄ」を含む。項目「ｕｉｄ」は動作指示をしたユーザのユーザＩＤを示す。図４に示す例では、ユーザＩＤ「Ｕ１」が項目「ｕｉｄ」に設定されている。項目「ｔｙｐｅ」はデータの種別を示す。図５に示す例では「ｃｍｄ」が項目「ｔｙｐｅ」に設定されている。これはメッセージ中にコマンドが含まれることを示している。項目「ｉｄ」はメッセージを一意に識別する識別情報を示す。項目「ｃｏｍｍａｎｄ」に設定されるデータはコマンドの内容を示す。項目「ｃｏｍｍａｎｄ」は項目「ｉｐ」，「ｐａｔｈ」，「ｍｅｔｈｏｄ」を含む。項目「ｉｐ」はコマンドの宛先を示す。図４の例では第１機器２０−１のＩＰアドレスが項目「ｉｐ」に設定されている。項目「ｐａｔｈ」はコマンド本体に相当する。項目「ｍｅｔｈｏｄ」は、使用されるＨＴＴＰプロトコルのメソッドを示す。
メッセージ送信部１３０は、メッセージ生成部１２０によって生成されたメッセージを機器２０へ向けて送信する。なお、メッセージ送信部１３０は、動作指示の対象となる機器２０がインターネット６経由でメッセージを受信できない場合（受信可否フラグに「０」が設定されている場合）には、他の機器２０へメッセージを送信し、その他の機器２０に対象の機器２０へメッセージの内容を転送させてもよい。
メッセージはＭＱＴＴプロトコルを使用して機器２０へ送信される。言い換えると、メッセージ送信部１３０はＭＱＴＴサーバ５３を介してメッセージを機器２０へ送信する。ＭＱＴＴサーバ５３には、複数のトピックが存在している。トピックのそれぞれの識別情報は、機器２０の機器ＩＤに基づいて設定されている。コマンドデータ送信装置１０から機器２０へ送信する際には、コマンドデータ送信装置１０は機器ＩＤに応じた識別情報を有する要求側のトピックへメッセージをパブリッシュし、機器２０はその識別情報を有する要求側のトピックにパブリッシュされたメッセージを取得する。なお、ＭＱＴＴプロトコルと異なるプロトコルでコマンド処理システム５０と機器２０との間の通信が行われてもよい。
メッセージ受信部２１０はメッセージをインターネット６を介して受信する。コマンド実行部２２０は、メッセージに含まれるコマンドに基づいて、コマンドを実行する。コマンド実行部２２０は、メッセージに含まれるコマンドを直接解釈して機器２０を直接制御してもよい。またコマンド実行部２２０は、ローカルエリアにあるユーザ端末６０等から、ＬＡＮ２を介して受信されるコマンドを実行する内部実行部と、受信されたメッセージに含まれるコマンドを変換し、その内部実行部へ変換されたコマンドを内部的に送信する変換部とを有していてもよい。例えば、機器２０はＨＴＴＰデーモンを起動させ、内部実行部は、変換部からＨＴＴＰプロトコルを介してコマンドを受け付けてよい。
［２−２］次に、登録制御部６１０、設定取得部６２０、フレーズ生成部６３０、フレーズ出力部６４０、音声利用登録部１５０、機器登録部１６０、登録結果送信部１７０、設定部２６０の概要について説明する。
登録制御部６１０は、ユーザについて、第１の種類および第２の種類のうち少なくとも一方のフレーズを音声認識装置４０が受け付け、コマンド処理システム５０へ動作指示を送信することを可能にする。より具体的には、登録制御部６１０は音声認識装置４０およびコマンド処理システム５０に、このユーザについて利用登録の処理を実行させる。また、登録制御部６１０は、ユーザの操作に基づいて、コマンド処理システム５０に音声入力による指示の対象となる機器２０を登録する。
設定取得部６２０は、ローカルエリアに接続される機器２０を検出し、検出された機器２０から機器２０の音声入力における機器２０の名称を含む機器情報を取得する。また、設定取得部６２０は、登録制御部６１０またはコマンド処理システム５０から、音声認識装置４０が受付可能なフレーズの種類を示す情報を取得する。機器情報やフレーズの種類を示す情報をまとめて、以下ではユーザ設定と記載する。音声入力における機器２０の名称や、利用可能なフレーズの種類は、ユーザにより設定可能な項目であるからである。なお、登録制御部６１０は、設定取得部６２０により複数の機器２０が検出された場合、例えば検出された機器２０のうちユーザが指定する１または複数の機器２０を音声入力による指示の対象となる機器２０として登録する。
音声利用登録部１５０は、ユーザ端末６０の登録制御部６１０から、ユーザが音声入力によるコマンド処理システム５０の利用を登録する要求（利用登録要求）を受信し、コマンドデータ送信装置１０と音声認識装置４０とが連携してそのユーザによる音声入力を可能にするための処理を実行する。
機器登録部１６０は、ユーザ端末６０の登録制御部６１０から、音声入力による指示の対象となる機器２０を登録する要求（機器登録要求）を受信し、その機器２０を音声入力の対象として登録する。登録結果送信部１７０は、機器２０の登録の結果（機器登録結果）と、サンプルフレーズのテンプレートとを送信する。
設定部２６０は、ユーザ端末６０の登録制御部６１０から、ユーザＩＤ登録指示を受信し、そのユーザＩＤ登録指示に含まれるユーザＩＤを不揮発性メモリに書き込む。また設定部２６０は、ユーザ端末６０の登録制御部６１０から、接続開始指示を受信し、コマンド処理システム５０に含まれるＭＱＴＴサーバ５３と接続させ、コマンド処理システム５０からの受信を可能にする。
フレーズ生成部６３０は、設定取得部６２０により取得されるユーザ設定に基づいて、機器２０を制御可能なフレーズを生成する。フレーズ出力部６４０は、生成されたフレーズを表示させるデータを出力する。フレーズ出力部６４０がそのデータを出力することにより、ユーザ端末６０の表示画面など、ユーザが視認可能なデバイスに、生成されたフレーズが表示される。
［２−３］次に、機器情報取得部１４０及び機器情報送信部２３０について説明する。
機器情報取得部１４０は機器２０の機器情報を取得する。機器情報取得部１４０は、機器２０に対して当該機器２０の機器情報を機器情報取得部１４０へ向けて送信させるためのコマンドと、ユーザＩＤとを含むメッセージ（以下では「機器情報要求」と記載する）を生成し、当該メッセージをインターネット６を介して機器２０へ送信する。より具体的には、機器情報取得部１４０は機器情報要求をＭＱＴＴサーバ５３を介して機器２０へ送信する。なお、機器情報要求の生成及び送信もメッセージ生成部１２０及びメッセージ送信部１３０により実行されてもよい。
機器情報送信部２３０は、機器情報要求が受信されると、機器２０の機器情報をインターネット６を介してコマンドデータ送信装置１０に返信する。機器情報は、例えば、機器２０の機種情報、ユーザが機器２０を特定する名称、機器ＩＤ、ＩＰアドレスを含む。また、機器情報は、機器２０の現在の状態を示す現在情報を含んでもよい。なお、機器情報送信部２３０は機器情報をＭＱＴＴサーバ５３を介してコマンドデータ送信装置へ送信する。機器情報取得部１４０は機器情報を受信する。そして、機器情報取得部１４０は、受信した機器情報のうち必要な項目を抽出し、それらの項目を機器テーブルＴ１に登録する。
［３．処理］機器制御システム１で実行される処理について説明する。
［３−１］はじめに、音声入力の利用登録の処理について説明する。音声入力の利用登録の処理は、音声認識装置４０がユーザについて１または複数の種類のフレーズを受け付けて動作指示を送信することを可能にする処理と、コマンド処理システム５０がその動作指示を受け付けることを可能にする情報を登録する処理とを含む。ユーザが音声入力によるコマンド処理システム５０の利用をする前にこの処理が行われる必要がある。
以下では、第１の種類のフレーズについて利用登録の処理を行う例について説明する。なお、第２の種類のフレーズについても以下と同様の処理で登録されてよい。図５は、音声入力の利用登録の処理の一例を示すフロー図である。以下に記載される、音声利用登録部１５０が行う処理は、制御部１１がその機能のプログラムを実行することにより実行される。登録制御部６１０が行う処理は、制御部６１がその機能のプログラムを実行することにより実行される。
はじめに、ユーザ端末６０の登録制御部６１０はユーザにより利用登録の処理の開始が指示された場合に、コマンド処理システム５０へ利用登録要求を送信する（ステップＳ１１１）。またコマンドデータ送信装置１０の音声利用登録部１５０は、通信部１３を介して利用登録要求を受信する（ステップＳ１２１）。利用登録要求は、ユーザにより直接的または間接的に指定される、音声入力を受け付ける音声認識装置４０と動作指示を処理するコマンド処理システム５０とを示す情報を含む。また、登録制御部６１０はユーザの認証情報を送信し（ステップＳ１１２）、音声利用登録部１５０は通信部１３を介してユーザの認証情報を受信する（ステップＳ１２２）。ユーザ端末６０から送信される認証情報は、例えばユーザＩＤおよびパスワードであってよい。また、コマンド処理システム５０とは別の認証サーバが存在する場合には、登録制御部６１０が認証サーバに対してユーザにより入力されたユーザの識別情報とパスワードを入力することにより認証サーバから取得したアクセス許可情報（トークンの一種）を、登録制御部６１０が認証情報として送信してもよい。この場合、登録制御部６１０はアクセス許可情報を用いて認証サーバからユーザＩＤを取得してよい。なお、ここで入力されるユーザＩＤと、コマンド処理システム５０と機器２０とで利用されるユーザＩＤとが異なっていてもよい。例えば、音声利用登録部１５０は、認証情報に含まれるユーザＩＤのハッシュ値を後続の処理で利用するユーザＩＤとして生成してもよい。
認証情報が取得されると、音声利用登録部１５０は、ユーザからの第１の種類のフレーズによる音声入力を、音声認識装置４０が受け付ける設定と、音声認識装置が第１の種類のフレーズについて動作指示をコマンド処理システム５０へ送信する設定をする（ステップＳ１２３）。
そして、音声利用登録部１５０は、音声入力の利用登録状況をデータベースに格納する（ステップＳ１２４）。図６は、音声入力利用テーブルの一例を示す図である。音声入力利用テーブルは、「ユーザＩＤ」、「第１種類登録」、「第２種類登録」フィールドを含む。「ユーザＩＤ」は、テーブルのレコードを一意に識別するキーとなる。「第１種類登録」は、「ユーザＩＤ」フィールドのユーザについて、第１の種類のフレーズを受け付けるための利用登録の処理がされていることを示す。「第２種類登録」は、「ユーザＩＤ」フィールドのユーザについて、第２の種類のフレーズを受け付けるための利用登録の処理がされていることを示す。
音声入力の利用登録状況がデータベースに格納されると、音声利用登録部１５０は、音声入力の利用登録が成功したか否かを示す応答を送信し（ステップＳ１２５）、登録制御部６１０は利用登録応答を受信する（ステップＳ１１３）。
［３−２］次に、ユーザの操作に基づいて、コマンド処理システム５０に音声入力による指示の対象となる機器２０を登録する処理（登録処理）について説明する。図７は、機器登録の処理を説明するシーケンス図である。図８は、機器登録におけるユーザ端末６０の処理の例を示すフロー図である。図９は、機器登録における機器２０の処理の例を示すフロー図である。図１０は、機器登録におけるコマンドデータ送信装置１０の処理の例を示すフロー図である。
機器登録部１６０、登録結果送信部１７０および機器情報取得部１４０が行う処理は、制御部１１がその機能のプログラムを実行することにより行われる。登録制御部６１０、設定取得部６２０、フレーズ生成部６３０およびフレーズ出力部６４０が行う処理は、制御部６１がその機能のプログラムを実行することにより行われる。機器情報送信部２３０、設定部２６０が行う処理は、制御部２１がその機能のプログラムを実行することにより行われる。
以下では、ユーザ端末６０、コマンドデータ送信装置１０、機器２０が実行する登録処理を、図７のシーケンス図に従った順序で説明する。
はじめに、ユーザ端末６０の登録制御部６１０は、ユーザから機器登録開始の指示を取得した場合に、通信部６３を介して、コマンド処理システム５０へ利用登録確認要求を送信する（ステップＳ２１１）。利用登録確認要求は、より具体的には、音声認識装置４０が、１または複数の種類のフレーズについて利用登録がされているか否かを問い合わせる情報である。次に、コマンドデータ送信装置１０の機器登録部１６０は、利用登録確認要求を受信し、音声認識の利用登録の状況を示す利用登録確認応答を送信する（ステップＳ２５１）。より具体的には、機器登録部１６０は機器登録開始の指示をしたユーザについて音声入力利用テーブルに格納されたレコードを取得し、第１種類登録および第２種類登録のフィールドの値に基づいて、利用登録されたフレーズの種類を示す情報を応答する。なお、利用登録確認応答に、操作をしているユーザのユーザＩＤを示す情報が含まれてもよい。ユーザ端末６０の登録制御部６１０は、利用登録確認応答を受信し、利用登録されたフレーズの種類を示す情報などを記憶部１２に格納する（ステップＳ２１２）。なお、ユーザについて、機器２０を操作するためのどの種類のフレーズについても利用登録がされていない場合には、利用登録確認応答としてエラーメッセージが送信され、登録制御部６１０はユーザに利用登録を行わせるための画面を出力する。
設定取得部６２０は、利用登録確認応答を受信すると、ローカルエリア（ＬＡＮ２）に接続された１または複数の機器２０を検出し、検出された１または複数の機器２０へ機器情報要求を送信する（ステップＳ２１３）。機器２０の機器情報送信部２３０は、機器情報要求を受信し、ユーザ端末６０へ向けて機器情報を送信する（ステップＳ２２１）。機器情報は、ユーザにより設定された機器の名称および機器ＩＤを含む。ユーザ端末６０の設定取得部６２０は、送信された機器情報を受信する（ステップＳ２１４）。
機器情報を受信すると、登録制御部６１０は検索された機器２０に、ユーザＩＤ登録指示を送信する（ステップＳ２１５）。機器２０の設定部２６０は、ユーザＩＤ登録指示を受信する（ステップＳ２２２）。ユーザＩＤ登録指示は、機器２０に登録すべきユーザＩＤの情報を含む。また、ユーザＩＤ登録指示が受信されると、設定部２６０は、不揮発性メモリにユーザＩＤを書き込む（ステップＳ２２３）。
ユーザＩＤが書き込まれると、ユーザ端末６０の登録制御部６１０は、検索された機器に、ＭＱＴＴサーバへの接続開始指示を送信する（ステップＳ２１６）。機器２０の設定部２６０は、ＭＱＴＴサーバ５３への接続開始指示を受信する（ステップＳ２２４）。そして、設定部２６０は、ＭＱＴＴサーバ５３へ接続し（ステップＳ２２５）、ＭＱＴＴサーバ５３から動作指示を受信できる状態にする。
機器２０がＭＱＴＴサーバ５３へ接続すると、ユーザ端末６０の登録制御部６１０は、コマンド処理システム５０（コマンドデータ送信装置１０）へ、機器登録要求を送信する（ステップＳ２１７）。機器登録要求は、ユーザＩＤと、登録する機器２０の機器ＩＤとを含む。コマンドデータ送信装置１０は、ユーザ端末６０から機器登録要求を受信する（ステップＳ２５２）。なお、機器登録要求に、ユーザＩＤの代わりに認証サーバへのアクセス許可情報を含んでもよい。この場合は、コマンドデータ送信装置１０はアクセス許可情報を用いて認証サーバからユーザＩＤまたはユーザＩＤの元となる情報を取得してもよい。
そして、機器登録部１６０は、機器登録要求に含まれる機器ＩＤを有する機器２０に向けて、機器情報要求を送信する（ステップＳ２５３）。機器情報送信部２３０は、コマンド処理システム５０（ＭＱＴＴサーバ５３）から機器情報要求を受信し、コマンド処理システム５０へ機器情報を送信する（ステップＳ２２６）。機器登録部１６０は、機器情報を受信する（ステップＳ２５４）。機器情報は、コマンドの体系を示す情報、有する入力端子の情報、入力端子に接続される他の機器２０の情報、インターネット６を介してメッセージを受信できるか否かを示す情報、機器２０が受付可能なコマンドのリストを含む。機器登録部１６０は、受信した機器情報のうち少なくとも一部（機器ＩＤを含む）をユーザＩＤと関連付けてデータベースの機器テーブルＴ１に格納する（ステップＳ２５５）。なお、機器登録部１６０は、機器情報に含まれる情報を取捨選択、および整形して機器テーブルＴ１に格納してもよい。
機器登録部１６０がステップＳ２５５までの処理を完了すると、登録結果送信部１７０は、音声入力の利用登録状況、言い換えると、音声認識装置４０がユーザについて受け付けることのできるフレーズの種類に基づいて、サンプルフレーズのテンプレートを選択する（ステップＳ２５６）。また機器登録部１６０はユーザ端末６０へ、機器の登録ができたか否かを示す機器登録結果と、選択されたサンプルフレーズのテンプレートとを送信する（ステップＳ２５７）。
図１１は、サンプルフレーズのテンプレートの一例を示す図である。サンプルフレーズは、ユーザが音声入力することにより機器２０を制御可能なフレーズである。図１１は、第１の種類および第２の種類のフレーズについて利用登録がされている場合の例を示している。第１のテンプレートＴＰ１は第１の種類のフレーズのサンプルのテンプレートを含み、第２のテンプレートＴＰ２は、第２の種類のフレーズのサンプルのテンプレートを含む。サンプルの文面は、「ｓｅｎｔｅｎｃｅ」の項目に設定された文字列である。機器の名称はユーザが設定することが可能であり事前に準備することができないため、仮の文字列「％ｓ」がサンプルの文面に埋め込まれている。「ｆｅａｔｕｒｅ」の項目に設定された文字列は、操作対象となる機器２０が備える必要のあるコマンドを示している。
フレーズ生成部６３０はコマンド処理システム５０（コマンドデータ送信装置１０）から、機器登録要求に対する処理の結果と、サンプルフレーズのテンプレートを受信する（ステップＳ２１８）。フレーズ生成部６３０は受信されたテンプレートと、ユーザ設定である利用登録の状況および機器の名称に基づいて、サンプルフレーズを生成し、フレーズ出力部６４０は生成されたサンプルフレーズを出力する（ステップＳ２１９）。
以下では、フレーズ生成部６３０およびフレーズ出力部６４０の処理についてさらに詳細に説明する。図１２は、フレーズ生成部６３０およびフレーズ出力部６４０の処理の例を示すフロー図である。
はじめに、フレーズ生成部６３０は、サンプルフレーズが必要とするコマンドを実行可能な機器２０を選択し、選択された機器２０の名称を取得する（ステップＳ３１１）。フレーズ生成部６３０は、例えば、テンプレートの「ｆｅａｔｕｒｅ」の項目に設定されたコマンドを収集し、また、機器テーブルＴ１に格納されたあるユーザに関するレコードのうち、受付可能コマンドのフィールドに収集されたすべてのコマンドが存在するレコードを選択し、そのレコードに含まれる機器の名称を取得する。
次に、フレーズ生成部６３０は、ユーザ設定（利用登録されたフレーズの種類を示す情報および機器の名称）に応じた処理を行う。より具体的には以下の処理を行う。まずフレーズ生成部６３０は、利用登録されたフレーズの種類を示す情報が、第１の種類のフレーズを受付可能な状態を示すかを判定する（ステップＳ３１２）。第１の種類のフレーズを受付可能な状態を示す場合には（ステップＳ３１２のＹ）、フレーズ生成部６３０は第１のテンプレートＴＰ１の文言のうち機器名の箇所を選択された機器の名称で置き換えることにより、サンプルフレーズを生成する（ステップＳ３１３）。そして、フレーズ出力部６４０は、生成されたサンプルフレーズがユーザ端末６０の画面に表示されるように、サンプルフレーズのデータを出力する（ステップＳ３１４）。ここで、利用登録されたフレーズの種類を示す情報が、第１の種類のフレーズを受付可能な状態を示さない場合には（ステップＳ３１２のＮ）、ステップＳ３１３およびＳ３１４の処理はスキップされる。
図１３は、表示されるサンプルフレーズの一例を示す図である。図１３の例は、第１の種類のフレーズが受付可能に設定されている場合に、第１のテンプレートＴＰ１に基づいて表示される画面の一例である。名称「Ｌｉｖｉｎｇ ｒｏｏｍ」の機器２０は、ボリューム操作のコマンドを処理可能であるため、サンプルフレーズとして出力されている。
次にフレーズ生成部６３０は、利用登録されたフレーズの種類を示す情報が、第２の種類のフレーズを受付可能な状態を示すかを判定する（ステップＳ３１５）。第１の種類のフレーズを受付可能な状態を示す場合には（ステップＳ３１５のＹ）、フレーズ生成部６３０は第２のテンプレートＴＰ２の文言のうち機器名の箇所を選択された機器の名称で置き換えることにより、サンプルフレーズを生成する（ステップＳ３１６）。そして、フレーズ出力部６４０は、生成されたサンプルフレーズがユーザ端末６０の画面に表示されるように、サンプルフレーズのデータを出力する（ステップＳ３１７）。ここで、利用登録されたフレーズの種類を示す情報が、第１の種類のフレーズを受付可能な状態を示さない場合には（ステップＳ３１５のＮ）、ステップＳ３１６およびＳ３１７の処理はスキップされる。
図１４は、表示されるサンプルフレーズの他の一例を示す図である。図１４の例は、第２の種類のフレーズが受付可能に設定されている場合に、第２のテンプレートＴＰ２に基づいて表示される画面の一例である。
このように、コマンドの入力例として示されるサンプルフレーズを動的に制御することで、ユーザが音声入力において受付可能なサンプルフレーズを容易かつ確実に得ることができる。また、サンプルフレーズの生成にユーザ設定も用いることで、ユーザに応じて受け付けられるフレーズが変化する場合であっても、サンプルフレーズの文面を読み替える必要がなくなり、ユーザが、受け付けられる正しいサンプルフレーズを容易に認識することができる。
［３−３］以下では、動作指示をコマンド処理システム５０が受け付け、機器２０を制御する処理について説明する。図１５は、動作指示受付部１１０、メッセージ生成部１２０、メッセージ送信部１３０、メッセージ受信部２１０、コマンド実行部２２０の処理の一例を示すフロー図である。以下に記載される、動作指示受付部１１０、メッセージ生成部１２０、メッセージ送信部１３０が行う処理は、制御部１１がその機能のプログラムを実行することにより実行される。メッセージ受信部２１０、コマンド実行部２２０が行う処理は、制御部２１がその機能のプログラムを実行することにより実行される。
はじめに、動作指示受付部１１０は、音声認識装置４０から動作指示を取得する（ステップＳ５１１）。そして、メッセージ生成部１２０は、取得した動作指示に基づいて、動作指示の対象となるユーザのユーザＩＤを取得し、動作指示に含まれる機器の名称と機器テーブルＴ１に基づいて、ユーザＩＤと関連付けられた機器ＩＤであって、かつ動作指示の対象となる機器２０の機器ＩＤを取得する（ステップＳ５１２）。そして、メッセージ生成部１２０は、動作指示に対応するコマンドと、取得されたユーザＩＤとを含むメッセージを生成し（ステップＳ５１３）、メッセージ送信部１３０は動作指示の対象となる機器２０へ生成されたメッセージを送信する（ステップＳ５１４）。
動作指示の対象となる機器２０のメッセージ受信部２１０は、メッセージを受信する（ステップＳ５２１）。次に、メッセージ受信部２１０は、メッセージに含まれるユーザＩＤと、機器２０の不揮発性メモリに書き込まれたユーザＩＤとを比較する（ステップＳ５２２）。これらのユーザＩＤが同じ場合には（ステップＳ５２２のＹ）、コマンド実行部２２０はメッセージに含まれるコマンドを実行する（ステップＳ５２３）。一方、これらのユーザＩＤが異なる場合には（ステップＳ５２２のＮ）、そのメッセージは破棄され、メッセージ中のコマンドは実行されない。
上述のように、メッセージ受信部２１０はユーザＩＤの比較結果に応じてコマンドを実行するか否かを制御する。これにより、機器２０の予期せぬ動作を防止することができる。特に、機器２０が譲渡された一方、コマンド処理システム５０側で機器登録が解除されていない場合には、譲渡したユーザが誤って機器２０に対するコマンドを音声入力した場合に、従来は機器２０がそのコマンドにより誤動作してしまう恐れがあった。一方、本実施形態では、譲渡されたユーザが機器登録を行っていれば、譲渡したユーザがどんなコマンドを入力しても、機器２０側でそのコマンドを含むメッセージを破棄するので、予期せぬ動作をする可能性を抑えることができる。
［付記］以上に説明した実施形態についての記載から把握されるように、本明細書では以下に記載の発明を含む多様な技術的思想が開示されている。
本発明にかかる機器制御システムは、デバイスに関するユーザ設定を取得する設定取得手段と、前記取得された前記ユーザ設定に基づいて、前記デバイスを制御可能なフレーズを生成するフレーズ生成手段と、前記生成されたフレーズを表示させるデータを出力する表示データ出力手段と、を含む。
本発明にかかる機器制御方法は、デバイスに関するユーザ設定を取得するステップと、前記取得された前記ユーザ設定に基づいて、前記デバイスを制御可能なフレーズを生成するステップと、前記生成されたフレーズを表示させるデータを出力するステップと、を含む。
本発明にかかるプログラムは、デバイスに関するユーザ設定を取得する設定取得手段、前記取得された前記ユーザ設定に基づいて、前記デバイスを制御可能なフレーズを生成するフレーズ生成手段、および、前記生成されたフレーズを表示させるデータを出力する表示データ出力手段、としてコンピュータを機能させる。
上記発明の一形態では、前記設定取得手段は、音声入力において前記デバイスを特定する名称を取得し、前記フレーズ生成手段は、前記取得された名称に基づいて、前記デバイスを制御可能なフレーズを生成してもよい。
上記発明の一形態では、前記設定取得手段は、音声入力において複数のデバイスのそれぞれが実行できるコマンドを取得し、前記フレーズ生成手段は、前記複数のデバイスのそれぞれが実行できるコマンドに基づいて、前記複数のデバイスの名称のうちいずれかを含むフレームを生成してもよい。
上記発明の一形態では、前記設定取得手段は、ユーザの指示音声を認識する認識部が前記デバイスに対する指示として受付可能なフレーズの種類を示す情報を取得し、前記フレーズ生成手段は、前記フレーズ生成手段は、前記取得された情報に基づいて、前記デバイスを制御可能なフレーズを生成してもよい。
上記発明の一形態では、前記認識部は、当該認識部により生成された動作指示を取得し前記デバイスを制御するシステムを識別する識別名称を含む第１の種類のフレーズと、前記識別名称を含まない第２の種類のフレーズとのいずれかを受付可能となるようユーザにより設定され、前記フレーズ生成手段は、第１の種別および第２の種別のフレーズのそれぞれが受付可能か否かに基づいて、前記デバイスを制御可能なフレーズを生成してもよい。
１ 機器制御システム、２ ＬＡＮ、４ ルータ、６ インターネット、１０ コマンドデータ送信装置、１１，２１，６１ 制御部、１２，２２，６２ 記憶部、１３，２３，６３ 通信部、２０−１ 第１機器、２０−２ 第２機器、２０−３ 第３機器、３０ 音声入力装置、４０ 音声認識装置、５０ コマンド処理システム、５２ データベース、５３ ＭＱＴＴサーバ、６０ ユーザ端末、１１０ 動作指示受付部、１２０ メッセージ生成部、１３０ メッセージ送信部、１４０ 機器情報取得部、１５０ 音声利用登録部、１６０ 機器登録部、１７０ 登録結果送信部、２１０ メッセージ受信部、２２０ コマンド実行部、２３０ 機器情報送信部、２６０ 設定部、６１０ 登録制御部、６２０ 設定取得部、６３０ フレーズ生成部、６４０ フレーズ出力部、Ｄ１ メッセージ、Ｔ１ 機器テーブル、ＴＰ１ 第１のテンプレート、ＴＰ２ 第２のテンプレート。

Claims (7)

  1. デバイスに関するユーザ設定を取得する設定取得手段と、
    前記取得された前記ユーザ設定に基づいて、前記デバイスを制御可能なフレーズを生成するフレーズ生成手段と、
    前記生成されたフレーズを表示させるデータを出力する表示データ出力手段と、
    を含む機器制御システム。
  2. 請求項１に記載の機器制御システムにおいて、
    前記設定取得手段は、音声入力において前記デバイスを特定する名称を取得し、
    前記フレーズ生成手段は、前記取得された名称に基づいて、前記デバイスを制御可能なフレーズを生成する、
    機器制御システム。
  3. 請求項２に記載の機器制御システムにおいて、
    前記設定取得手段は、音声入力において複数のデバイスのそれぞれが実行できるコマンドを取得し、
    前記フレーズ生成手段は、前記複数のデバイスのそれぞれが実行できるコマンドに基づいて、前記複数のデバイスの名称のうちいずれかを含むフレームを生成する、
    機器制御システム。
  4. 請求項１に記載の機器制御システムにおいて、
    前記設定取得手段は、ユーザの指示音声を認識する認識部が前記デバイスに対する指示として受付可能なフレーズの種類を示す情報を取得し、
    前記フレーズ生成手段は、前記フレーズ生成手段は、前記取得された情報に基づいて、前記デバイスを制御可能なフレーズを生成する、
    機器制御システム。
  5. 請求項４に記載の機器制御システムにおいて、
    前記認識部は、当該認識部により生成された動作指示を取得し前記デバイスを制御するシステムを識別する識別名称を含む第１の種類のフレーズと、前記識別名称を含まない第２の種類のフレーズとのいずれかを受付可能となるようユーザにより設定され、
    前記フレーズ生成手段は、第１の種別および第２の種別のフレーズのそれぞれが受付可能か否かに基づいて、前記デバイスを制御可能なフレーズを生成する、
    機器制御システム。
  6. デバイスに関するユーザ設定を取得するステップと、
    前記取得された前記ユーザ設定に基づいて、前記デバイスを制御可能なフレーズを生成するステップと、
    前記生成されたフレーズを表示させるデータを出力するステップと、
    を含む機器制御方法。
  7. デバイスに関するユーザ設定を取得する設定取得手段、
    前記取得された前記ユーザ設定に基づいて、前記デバイスを制御可能なフレーズを生成するフレーズ生成手段、および、
    前記生成されたフレーズを表示させるデータを出力する表示データ出力手段、
    としてコンピュータを機能させるためのプログラム。
JP2017231631A 2017-12-01 2017-12-01 機器制御システム、機器制御方法、及びプログラム Active JP6962158B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2017231631A JP6962158B2 (ja) 2017-12-01 2017-12-01 機器制御システム、機器制御方法、及びプログラム
EP18884611.7A EP3719630A4 (en) 2017-12-01 2018-11-20 DEVICE CONTROL SYSTEM, DEVICE CONTROL PROCEDURE AND PROGRAM
CN201880077883.2A CN111433736B (zh) 2017-12-01 2018-11-20 机器控制系统以及机器控制方法
PCT/JP2018/042864 WO2019107224A1 (ja) 2017-12-01 2018-11-20 機器制御システム、機器制御方法、及びプログラム
US16/888,279 US11574631B2 (en) 2017-12-01 2020-05-29 Device control system, device control method, and terminal device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017231631A JP6962158B2 (ja) 2017-12-01 2017-12-01 機器制御システム、機器制御方法、及びプログラム

Publications (2)

Publication Number Publication Date
JP2019101730A true JP2019101730A (ja) 2019-06-24
JP6962158B2 JP6962158B2 (ja) 2021-11-05

Family

ID=66665578

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017231631A Active JP6962158B2 (ja) 2017-12-01 2017-12-01 機器制御システム、機器制御方法、及びプログラム

Country Status (5)

Country Link
US (1) US11574631B2 (ja)
EP (1) EP3719630A4 (ja)
JP (1) JP6962158B2 (ja)
CN (1) CN111433736B (ja)
WO (1) WO2019107224A1 (ja)

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
KR20240132105A (ko) 2013-02-07 2024-09-02 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
KR101772152B1 (ko) 2013-06-09 2017-08-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK201770411A1 (en) 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1138995A (ja) * 1997-07-16 1999-02-12 Denso Corp 音声認識装置及びナビゲーションシステム
JP2001042895A (ja) * 1999-05-21 2001-02-16 Inf Storage Devices Inc 音声制御デバイスを識別する方法および装置
JP2002259114A (ja) * 2001-03-05 2002-09-13 Nec Corp 音声認識コンピュータシステム
JP2004507936A (ja) * 2000-08-21 2004-03-11 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ ダウンロード可能な音声命令の集合による音声制御型遠隔制御装置

Family Cites Families (102)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5903871A (en) 1996-04-22 1999-05-11 Olympus Optical Co., Ltd. Voice recording and/or reproducing apparatus
JPH09288500A (ja) 1996-04-22 1997-11-04 Olympus Optical Co Ltd 音声記録再生装置
JP2001128262A (ja) 1999-10-28 2001-05-11 Yokogawa Electric Corp リモートコントロールシステム
JP2002202826A (ja) 2000-12-28 2002-07-19 Canon Inc 情報処理システムと該情報処理システムにおける課金方法、及びネットワークデバイス、情報処理装置、並びに記憶媒体
EP1322111B1 (en) * 2001-12-18 2007-10-10 Matsushita Electric Industrial Co., Ltd. Television apparatus having speech recognition function
JP2004015627A (ja) 2002-06-10 2004-01-15 Sharp Corp Ａｖ機器の遠隔制御システム
EP1383349A3 (en) 2002-07-16 2004-04-07 Matsushita Electric Industrial Co., Ltd. Method and device for managing user settings of a network terminal
US7234115B1 (en) 2002-09-26 2007-06-19 Home Director, Inc. Home entertainment system and method
US20040088535A1 (en) * 2002-10-31 2004-05-06 International Business Machines Corporation Method, apparatus and computer program product for selecting computer system settings for various operating circumstances
KR100606760B1 (ko) 2003-07-07 2006-07-31 엘지전자 주식회사 사용자 예약에 따른 홈 네트워크 시스템 및 그 제어방법
JP3885792B2 (ja) 2003-09-29 2007-02-28 日本電気株式会社 ネットワークシステム，ｗｏｌ装置，ネットワークｔｖチューナ，及び情報装置起動方法
DE10360655A1 (de) * 2003-12-23 2005-07-21 Daimlerchrysler Ag Bediensystem für ein Fahrzeug
US8473844B2 (en) * 2004-03-26 2013-06-25 Harman International Industries, Incorporated Audio related system link management
CA2566900C (en) 2004-05-21 2014-07-29 Cablesedge Software Inc. Remote access system and method and intelligent agent therefor
US7385960B2 (en) 2005-02-28 2008-06-10 Microsoft Corporation Measurement based mechanism to enable two wireless devices to directly communicate with each other to support traffic prioritization
US8135395B2 (en) 2005-03-18 2012-03-13 Qualcomm Incorporated Methods and apparatus for monitoring configurable performance levels in a wireless device
US20070091168A1 (en) 2005-10-25 2007-04-26 Hyun Lee Method to support simultaneous wireless connection of multiple media components
US8079074B2 (en) 2007-04-17 2011-12-13 Microsoft Corporation Dynamic security shielding through a network resource
ATE456490T1 (de) * 2007-10-01 2010-02-15 Harman Becker Automotive Sys Sprachgesteuerte einstellung von fahrzeugteilen
KR101424718B1 (ko) 2007-10-17 2014-08-04 삼성전자 주식회사 원격 접속 환경에서 접속 가능한 홈 네트워크 정보를제공하는 장치 및 그 방법
JP5161599B2 (ja) 2008-01-31 2013-03-13 シャープ株式会社 電子機器、遠隔制御システム、信号処理方法、制御プログラムおよび記録媒体
US8099289B2 (en) * 2008-02-13 2012-01-17 Sensory, Inc. Voice interface and search for electronic devices including bluetooth headsets and remote systems
JP2010130223A (ja) * 2008-11-26 2010-06-10 Fujitsu Ten Ltd 音声操作システムおよび音声操作方法
KR20120032644A (ko) 2010-09-29 2012-04-06 주식회사 팬택 이동 단말기 및 이동 단말기를 이용한 제어 방법
US8595319B2 (en) 2010-10-13 2013-11-26 Verizon Patent And Licensing Inc. Home network video peer-to-peer for mobile devices
JP2012165918A (ja) 2011-02-15 2012-09-06 Fujifilm Corp 放射線画像撮影装置、及び通信モード設定装置
US8854418B2 (en) 2011-05-23 2014-10-07 Broadcom Corporation Integrated media gateway processing and control to reduce latency for 2-way video conference applications
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US9201859B2 (en) * 2011-12-15 2015-12-01 Microsoft Technology Licensing, Llc Suggesting intent frame(s) for user request(s)
US10156455B2 (en) 2012-06-05 2018-12-18 Apple Inc. Context-aware voice guidance
US8520807B1 (en) 2012-08-10 2013-08-27 Google Inc. Phonetically unique communication identifiers
JP6126610B2 (ja) * 2012-09-28 2017-05-10 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 情報通知方法、情報通知システム及びサーバ装置
US20140149118A1 (en) * 2012-11-28 2014-05-29 Lg Electronics Inc. Apparatus and method for driving electric device using speech recognition
WO2014103099A1 (ja) * 2012-12-28 2014-07-03 パナソニック株式会社 音声認識付き機器及び音声認識方法
JP6029985B2 (ja) * 2013-01-11 2016-11-24 クラリオン株式会社 情報処理装置、操作システム、および、情報処理装置の操作方法
US9220012B1 (en) 2013-01-15 2015-12-22 Marvell International Ltd. Systems and methods for provisioning devices
US9330169B2 (en) * 2013-03-15 2016-05-03 Bose Corporation Audio systems and related devices and methods
KR20140121179A (ko) 2013-04-05 2014-10-15 한국전자통신연구원 홈 네트워크 상호 연동 서비스 제공 방법
WO2014171144A1 (ja) * 2013-04-19 2014-10-23 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 家電機器の制御方法、家電機器制御システム、及びゲートウェイ
US9384751B2 (en) 2013-05-06 2016-07-05 Honeywell International Inc. User authentication of voice controlled devices
US9472205B2 (en) 2013-05-06 2016-10-18 Honeywell International Inc. Device voice recognition systems and methods
JP6223713B2 (ja) 2013-05-27 2017-11-01 株式会社東芝 電子機器、方法及びプログラム
KR101380608B1 (ko) 2013-07-26 2014-04-10 (주) 코콤 스마트기기 기반 가정 주변기기 제어시스템 및 그 제어방법
CN105659179B (zh) * 2013-08-21 2018-07-17 霍尼韦尔国际公司 用于与hvac控制器相交互的设备和方法
JP6213181B2 (ja) 2013-11-20 2017-10-18 ヤマハ株式会社 同期再生システム及び同期再生方法
JP6054283B2 (ja) * 2013-11-27 2016-12-27 シャープ株式会社 音声認識端末、サーバ、サーバの制御方法、音声認識システム、音声認識端末の制御プログラム、サーバの制御プログラムおよび音声認識端末の制御方法
JP2015106358A (ja) 2013-12-02 2015-06-08 日立アプライアンス株式会社 リモートアクセスシステムおよび宅内機器制御装置
US9348559B2 (en) 2013-12-23 2016-05-24 International Business Machines Corporation Interconnecting portal components with dialog state transitions
KR102210433B1 (ko) * 2014-01-21 2021-02-01 삼성전자주식회사 전자 장치 및 이의 음성 인식 방법
US9544310B2 (en) 2014-01-27 2017-01-10 Microsoft Technology Licensing, Llc Discovering and disambiguating identity providers
US9489171B2 (en) * 2014-03-04 2016-11-08 Microsoft Technology Licensing, Llc Voice-command suggestions based on user identity
JP6256116B2 (ja) 2014-03-10 2018-01-10 富士通株式会社 通信端末、セキュアログイン方法、及びプログラム
US9860076B2 (en) * 2014-05-07 2018-01-02 Vivint, Inc. Home automation via voice control
CN110797019B (zh) 2014-05-30 2023-08-29 苹果公司 多命令单一话语输入方法
KR102261552B1 (ko) 2014-06-30 2021-06-07 삼성전자주식회사 음성 명령어 제공 방법 및 이를 지원하는 전자 장치
JP5871088B1 (ja) * 2014-07-29 2016-03-01 ヤマハ株式会社 端末装置、情報提供システム、情報提供方法およびプログラム
CN105490890A (zh) 2014-09-16 2016-04-13 中兴通讯股份有限公司 智能家庭终端及其控制方法
US9094363B1 (en) 2014-11-17 2015-07-28 Microsoft Technology Licensing, Llc Relevant communication mode selection
US9812126B2 (en) * 2014-11-28 2017-11-07 Microsoft Technology Licensing, Llc Device arbitration for listening devices
JP6348831B2 (ja) * 2014-12-12 2018-06-27 クラリオン株式会社 音声入力補助装置、音声入力補助システムおよび音声入力方法
US9701135B2 (en) 2015-01-30 2017-07-11 S-Printing Solution Co., Ltd. Image forming apparatus, recording medium, terminal, server, note printing method, and storage medium
EP3067884B1 (en) 2015-03-13 2019-05-08 Samsung Electronics Co., Ltd. Speech recognition system and speech recognition method thereof
WO2016157658A1 (ja) 2015-03-31 2016-10-06 ソニー株式会社 情報処理装置、制御方法、およびプログラム
CN106252749B (zh) 2015-06-04 2020-12-29 松下知识产权经营株式会社 蓄电池包的控制方法以及蓄电池包
KR101572111B1 (ko) 2015-07-01 2015-11-27 주식회사 이노스코리아 랜덤하면서 유일한 코드를 생성하는 전자 장치 및 방법
JP6461738B2 (ja) 2015-07-24 2019-01-30 シャープ株式会社 連携システムおよび機器制御サーバ
US10018977B2 (en) 2015-10-05 2018-07-10 Savant Systems, Llc History-based key phrase suggestions for voice control of a home automation system
US10999345B2 (en) 2015-10-19 2021-05-04 At&T Intellectual Property I, L.P. Real-time video delivery for connected home applications
CN105242556A (zh) 2015-10-28 2016-01-13 小米科技有限责任公司 智能设备的语音控制方法、装置、控制设备及智能设备
EP3378004A1 (en) 2015-11-17 2018-09-26 Idee Limited Security systems and methods for continuous authorized access to restricted access locations
DE112015007147T5 (de) 2015-11-25 2018-08-09 Mitsubishi Electric Corporation Sprachdialogvorrichtung und Sprachdialogverfahren
US10038941B2 (en) 2015-12-07 2018-07-31 Caavo Inc Network-based control of a media device
US9912977B2 (en) 2016-02-04 2018-03-06 The Directv Group, Inc. Method and system for controlling a user receiving device using voice commands
JP6610356B2 (ja) 2016-03-14 2019-11-27 コニカミノルタ株式会社 ジョブ実行システム、ジョブ実行方法、画像処理装置及びジョブ実行プログラム
US10021731B2 (en) 2016-03-24 2018-07-10 Panasonic Intellectual Property Management Co., Ltd. Home interior monitoring system and communication control method
US20170331807A1 (en) 2016-05-13 2017-11-16 Soundhound, Inc. Hands-free user authentication
US10204215B2 (en) 2016-05-24 2019-02-12 Mastercard International Incorporated System and method for processing a transaction with secured authentication
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10044869B2 (en) 2016-06-29 2018-08-07 Paypal, Inc. Voice-controlled audio communication system
WO2018013964A1 (en) 2016-07-15 2018-01-18 Rain Bird Corporation Wireless remote irrigation control
CN107734213A (zh) 2016-08-11 2018-02-23 漳州立达信光电子科技有限公司 智能家用电子装置与系统
US10026403B2 (en) 2016-08-12 2018-07-17 Paypal, Inc. Location based voice association system
US9892732B1 (en) 2016-08-12 2018-02-13 Paypal, Inc. Location based voice recognition system
CN106218557B (zh) * 2016-08-31 2020-01-07 北京兴科迪科技有限公司 一种带语音识别控制的车载麦克风
KR102481881B1 (ko) 2016-09-07 2022-12-27 삼성전자주식회사 외부 디바이스를 제어하는 서버 및 그 방법
US10157613B2 (en) 2016-11-17 2018-12-18 BrainofT Inc. Controlling connected devices using a relationship graph
WO2018100743A1 (ja) 2016-12-02 2018-06-07 ヤマハ株式会社 制御装置および機器制御システム
US20180170242A1 (en) * 2016-12-19 2018-06-21 Pilot, Inc. Bluetooth-enabled vehicle lighting control hub
US20180174581A1 (en) * 2016-12-19 2018-06-21 Pilot, Inc. Voice-activated vehicle lighting control hub
JP6725008B2 (ja) 2016-12-29 2020-07-15 ヤマハ株式会社 コマンドデータ送信装置、ローカルエリア装置、機器制御システム、コマンドデータ送信装置の制御方法、ローカルエリア装置の制御方法、機器制御方法、及びプログラム
US10679608B2 (en) 2016-12-30 2020-06-09 Google Llc Conversation-aware proactive notifications for a voice interface device
CN108322365A (zh) 2017-01-14 2018-07-24 富士康(昆山)电脑接插件有限公司 语音控制系统
JP6522679B2 (ja) * 2017-03-13 2019-05-29 シャープ株式会社 発話制御装置、方法、発話システム、及びプログラム
US10887125B2 (en) 2017-09-15 2021-01-05 Kohler Co. Bathroom speaker
KR102417524B1 (ko) 2017-10-13 2022-07-07 현대자동차주식회사 음성 인식 기반의 자동차 제어 방법
US10574451B2 (en) 2017-10-19 2020-02-25 Bank Of America Corporation Method and apparatus for perfect forward secrecy using deterministic hierarchy
JP7192208B2 (ja) 2017-12-01 2022-12-20 ヤマハ株式会社 機器制御システム、デバイス、プログラム、及び機器制御方法
JP7067082B2 (ja) 2018-01-24 2022-05-16 ヤマハ株式会社 機器制御システム、機器制御方法、及びプログラム
US11276396B2 (en) 2018-05-01 2022-03-15 Dell Products, L.P. Handling responses from voice services
US10803864B2 (en) 2018-05-07 2020-10-13 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US11308947B2 (en) 2018-05-07 2022-04-19 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US11119725B2 (en) 2018-09-27 2021-09-14 Abl Ip Holding Llc Customizable embedded vocal command sets for a lighting and/or other environmental controller

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1138995A (ja) * 1997-07-16 1999-02-12 Denso Corp 音声認識装置及びナビゲーションシステム
JP2001042895A (ja) * 1999-05-21 2001-02-16 Inf Storage Devices Inc 音声制御デバイスを識別する方法および装置
JP2004507936A (ja) * 2000-08-21 2004-03-11 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ ダウンロード可能な音声命令の集合による音声制御型遠隔制御装置
JP2002259114A (ja) * 2001-03-05 2002-09-13 Nec Corp 音声認識コンピュータシステム

Also Published As

Publication number Publication date
CN111433736A (zh) 2020-07-17
EP3719630A4 (en) 2021-08-25
US11574631B2 (en) 2023-02-07
CN111433736B (zh) 2024-05-07
US20200294494A1 (en) 2020-09-17
WO2019107224A1 (ja) 2019-06-06
EP3719630A1 (en) 2020-10-07
JP6962158B2 (ja) 2021-11-05

Similar Documents

Publication Publication Date Title
WO2019107224A1 (ja) 機器制御システム、機器制御方法、及びプログラム
US10498695B2 (en) Command data transmission device, local area device, apparatus control system, method for controlling command data transmission device, method for controlling local area device, apparatus control method, and program
CN102325323B (zh) 用于无线网络注册的可听认证
EP3389230A2 (en) System for providing dialog content
US8954641B2 (en) Method and apparatus for establishing communication
US10938595B2 (en) Device control system, device control method, and non-transitory computer readable storage medium
WO2020078300A1 (zh) 一种终端投屏的控制方法和终端
JP2014071457A (ja) 電子装置、サーバー及びその制御方法
EP3561643A1 (en) Method and terminal for implementing voice control
WO2015165257A1 (zh) 语音识别方法、装置、系统及计算机存储介质
JP6254209B2 (ja) 音声を利用できるテルネットインターフェイス
JP5370432B2 (ja) 管理装置、カラオケシステム及び管理方法
JP7192208B2 (ja) 機器制御システム、デバイス、プログラム、及び機器制御方法
WO2017208518A1 (ja) 情報処理装置
EP2157761A2 (en) Information processing apparatus, information processing method and information processing system for the cooperative operation of several appliances interconnected via a home network
US20240020369A1 (en) Speech control system and method, apparatus, device, medium, and program product
CN111539217B (zh) 一种用于自然语言内容标题消歧的方法、设备和系统
JP6715307B2 (ja) 設備の発見方法、装置、設備及びプログラム
TW202232915A (zh) 終端裝置、機器管理伺服器、資訊處理系統、資訊處理方法以及資訊處理程式
JP2016177840A (ja) サウンドを利用したソーシャルネットワークサービス提供装置及びその方法
WO2019239738A1 (ja) 情報処理装置、情報処理方法
KR101835091B1 (ko) 언어 학습을 위한 채팅 방법 및 채팅 시스템
JP2022061119A (ja) ネットワークシステム、情報処理方法、サーバ、および電気機器
WO2020133563A1 (zh) 寻找遥控设备的方法、智能终端、服务器及遥控设备
JP2023179884A (ja) ネットワークシステム、情報処理方法、およびサーバ

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201023

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210706

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210818

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210914

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210927

R151 Written notification of patent or utility model registration

Ref document number: 6962158

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151