JP2009110300A - 情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびプログラム - Google Patents

情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびプログラム Download PDF

Info

Publication number
JP2009110300A
JP2009110300A JP2007282325A JP2007282325A JP2009110300A JP 2009110300 A JP2009110300 A JP 2009110300A JP 2007282325 A JP2007282325 A JP 2007282325A JP 2007282325 A JP2007282325 A JP 2007282325A JP 2009110300 A JP2009110300 A JP 2009110300A
Authority
JP
Japan
Prior art keywords
home appliance
information home
information
service
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2007282325A
Other languages
English (en)
Inventor
Takaaki Moriya
高明 森谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2007282325A priority Critical patent/JP2009110300A/ja
Publication of JP2009110300A publication Critical patent/JP2009110300A/ja
Pending legal-status Critical Current

Links

Images

Abstract

【課題】メーカごとに情報家電機器の制御設定を行なうことなく、かつ簡単に制御設定を行うことができる、情報家電ネットワーク制御装置を提供する。
【解決手段】ネットワークサービスプラットフォーム（情報家電ネットワーク制御装置）１では、情報家電機器３５の制御内容を予め汎用的な内容に分類しておき（例えば、電源オン、オフなど）、メーカ毎に異なる機器の制御命令群をサービスコンポーネントとし情報家電制御サービスコンポーネントデータベース１３に登録しておく。そして、ユーザの音声指示を音声・テキスト相互変換装置３によりテキストデータに変換し、このテキストデータを基に、サービス合成部５によりサービスシナリオを作成し、このサービスシナリオに含まれるサービスコンポーネント従い、サービスコンポーネントデータベース１３から取得した制御命令を情報家電機器３５に送信する。
【選択図】図１

Description

本発明は、電話による音声或いは情報端末により、情報家電機器の制御設定が記述されたサービスシナリオを実行し、サービスシナリオで情報家電機器を制御設定することを可能にする、情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびコンピュータプログラムに関する。
従来は、ユーザが携帯電話或いはＰＤＡなど移動情報端末或いは情報端末で、情報家電機器の制御設定を指示することで、メーカ側の情報家電機器制御サーバに接続し、該（メーカ）情報家電機器制御サーバが、情報家電機器の動作状態を制御設定する制御コマンドなどパラメータを管理しており、ホームネットワーク内のホームゲートウェイと連携し、ユーザが要求した情報家電機器の制御設定を遠隔操作で行われている状況であった。
しかし、従来の方法では、情報家電機器製造者毎に情報家電機器の制御コマンド命令パラメータや動作状態パラメータなどを管理する（メーカ）情報家電機器制御サーバを有する必要があった。
また、管理している複数の情報家電機器に対し、新規サービス機能などが追加されるたびに、情報家電機器の制御コマンド命令のプログラムや操作機能を作り替える必要があり、そのプログラムなど作成する手間や時間がかかるなどの問題があった。
また、携帯電話や情報端末など情報システム技術に関する操作に疎いお年よりなどのユーザは、ユーザ端末のブラウザ機能から操作をすることは難易度が高くて難しい状況であった。
なお、本発明に関連する従来技術として、「情報家電製品に対するサービス制御及び機器制御方法または装置」がある（例えば、特許文献１を参照）。この特許文献１の従来技術では、移動情報端末或いは情報端末から情報家電機器制御のサービス要求をサービス制御サーバに送信し、サービス制御サーバが情報家電機器の制御設定し、ホームサーバ経由して情報家電機器を制御している。また、従来技術の「情報家電設定方法及び情報家電設定プログラム」がある（例えば、特許文献２を参照）。この特許文献２の従来技術は、情報家電制御装置から情報家電に設定情報を記憶させ、情報家電と情報家電制御装置において設定情報を共有する情報家電設定方法を提供することを目的としている。しかしながら、これらの従来技術は、上述した問題点を解決しようとするものではない。
特開２００７−４５７９号公報 特開２００６−３１８３７６号公報
従来は、ユーザが携帯電話など移動通信端末或いは情報端末から情報家電機器制御設定を指示することで、メーカ側の情報家電機器制御サーバが情報家電機器を管理している情報家電機器制御命令パラメータなどで、ホームゲートウェイと連携し、情報家電機器の制御設定を実施する方法であった。
このため、従来のメーカごとに複雑な情報家電機器制御設定を行なうことなく、簡単な操作で情報家電機器の制御設定をする方法が提供されることが望まれていた。また、ユーザの誰もが、簡単に携帯電話や固定電話などから音声でサービスを利用し、情報家電機器を制御設定することが望まれていた。また、同種類の情報家電機器において、情報家電機器製造者（メーカ）ごとに情報家電機器制御命令が異なる場合であっても、また、情報家電機器を他社製に買い控えても、サービスシナリオを変更する必要がないことが望まれていた。
さらに、ユーザ端末に対して、理解しやすい情報家電機器制御設定するサービスコンポーネントを提供することで、様々な情報家電機器設定をすることが容易にできることが望まれていた。
本発明は上記課題を解決するためになされたものであり、本発明の目的は、メーカごとに情報家電機器の制御設定を行なうことなく、かつ簡単に情報家電機器の制御設定を行うことができ、また、情報家電機器の現在の設定状態に応じてサービスシナリオを変更または新たに構成することができ、さらに、情報家電機器制御設定するための理解しやすいサービスシナリオをユーザ端末に提供をすることができる、情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびコンピュータプログラを提供することにある。
本発明は上記課題を解決するためになされたものであり、本発明の情報家電ネットワーク制御装置は、ネットワークを介してユーザ端末と通信接続されると共に、前記ユーザの家庭内の情報家電機器を前記ネットワークを介して制御する情報家電ネットワーク制御装置であって、情報家電機器の制御内容を予め汎用的な内容に分類し、メーカごとに異なる機器の制御命令群をこの分類に従いサービスコンポーネントとして登録する情報家電制御サービスコンポーネントデータベースと、前記ユーザ端末から、ユーザのＩＤと、前記ユーザが保有している情報家電機器の種類と、前記情報家電機器のアドレスである情報家電機器アドレスとを受信するプレゼンス情報取得部と、前記プレゼンス情報取得部により受信したユーザのＩＤと、前記情報家電機器の種類と、前記情報家電機器アドレスとを登録する情報家電サービス機器登録データベースと、前記ユーザ端末から送信される情報家電機器の制御内容を音声情報により受信し、前記音声情報をテキストデータに変換する音声・テキスト相互変換部と、前記音声・テキスト相互変換部により変換されたテキストデータを基に、前記情報家電制御サービスコンポーネントデータベースを参照し、前記サービスコンポーネントを組み合わせたサービスシナリオを構成するサービス合成部と、前記サービスシナリオに含まれるサービスコンポーネントを基に、前記情報家電制御サービスコンポーネントデータベースから制御命令を取得して前記情報家電機器に送信する情報家電サービス制御部と、を備えることを特徴とする。
また、本発明の情報家電ネットワーク制御装置は、前記情報家電機器から現在の制御設定の情報を受信すると共に、前記現在の制御設定の情報を前記情報家電サービス機器登録データベースに登録する、ことを特徴とする。
また、本発明の情報家電ネットワーク制御装置は、前記サービスコンポーネントデータベースに登録されたサービスコンポーネントに含まれる命令に必要なパラメータを組み合わせ、新たなサービスコンポーネントを編集すると共に、前記新たに編集したサービスコンポーネントを前記情報家電制御サービスコンポーネントデータベースに登録するサービスコンポーネント編集機能部、を備えることを特徴とする。
また、本発明の情報家電ネットワーク制御装置は、前記サービスシナリオを実行する際に、制御を指示された情報家電機器の現在の制御設定の情報を前記情報家電サービス機器登録データベースから読み出し、その結果に応じて前記サービスコンポーネントを変更する、ことを特徴とする。
また、本発明の情報家電ネットワーク制御装置は、前記ユーザ端末は、前記情報家電機器の制御内容を音声情報により前記情報家電ネットワーク制御装置に送信すると共に、前記情報家電ネットワーク制御装置から、前記制御内容に応じたサービスシナリオを受信すると共に、該サービスシナリオを画面上に表示し、前記画面上に表示されたサービスシナリオを選択または編集して前記情報家電ネットワーク制御装置に送信する、ことを特徴とする。
また、本発明の情報家電ネットワーク制御装置は、前記ユーザ端末は、情報家電機器の制御内容を音声情報かテキストデータのいずれかにより、前記情報家電ネットワーク制御装置に送信する、ことを特徴とする。
また、本発明の情報家電ネットワーク制御装置は、前記情報家電ネットワーク制御装置は、ネットワークを介してメーカ側の情報家電機器制御サーバと通信接続されており、前記情報家電ネットワーク制御装置は、前記メーカ側の情報家電機器制御サーバに、ユーザＩＤと情報家電機器アドレスと制御する情報家電機器の制御命令とを送信し、前記メーカ側の情報家電機器制御サーバは、前記情報家電ネットワーク制御装置から受信した制御命令と情報家電機器アドレスとを基に、ユーザの家庭内の情報家電機器を制御する、ことを特徴とする。
また、本発明の情報家電ネットワーク制御システムは、ユーザ端末と、メーカ側の情報家電サービス制御サーバと、ユーザの家庭内の情報家電機器と、前記ユーザ端末、メーカ側の情報家電サービス制御サーバ、およびユーザの家庭内の情報家電機器にネットワークを介して通信接続されると共に、前記ユーザの家庭内の情報家電機器を前記ネットワークを介して制御する情報家電ネットワーク制御装置とで構成される情報家電ネットワーク制御システムであって、前記情報家電ネットワーク制御装置は、情報家電機器の制御内容を予め汎用的な内容に分類し、メーカごとに異なる機器の制御命令群をこの分類に従いサービスコンポーネントとして登録する情報家電制御サービスコンポーネントデータベースと、前記ユーザのＩＤと、前記情報家電機器の種類と、前記情報家電機器のアドレスである情報家電機器アドレスと、前記情報家電機器の現在の設定状態とを登録する情報家電サービス機器登録データベースと、前記ユーザ端末から送信される情報家電機器の制御内容を音声情報により受信し、前記音声情報をテキストデータに変換する音声・テキスト相互変換部と、前記音声・テキスト相互変換部により変換されたテキストデータを基に、前記情報家電制御サービスコンポーネントデータベースを参照し、前記サービスコンポーネントを組み合わせたサービスシナリオを構成するサービス合成部と、前記サービスシナリオに含まれるサービスコンポーネントを基に、前記情報家電制御サービスコンポーネントデータベースから制御命令を取得して、ユーザＩＤと情報家電機器アドレスと制御命令とを、前記メーカ側の情報家電機器制御サーバに送信する情報家電サービス制御部と、を備え、前記ユーザ端末は、ユーザＩＤと、情報家電機器種別と、情報家電機器アドレスとを前記情報家電ネットワーク制御装置に送信する機能と、前記情報家電ネットワーク制御装置に対して情報家電機器の制御設定を音声、またはテキストデータで送信する機能と、を備え、前記メーカ側の情報家電機器制御サーバは、前記情報家電ネットワーク制御装置からユーザＩＤと情報家電機器アドレスと制御する情報家電機器の制御命令とを受信し、受信した制御命令を当該情報家電機器に送信する機能、を備え、前記情報家電機器は、前記メーカ側の情報家電機器制御サーバから制御命令を受信して制御設定を完了し、更新された設定状態を前記情報家電ネットワーク制御装置に送信する機能、を備えることを特徴とする。
また、本発明の情報家電ネットワーク制御方法は、ネットワークを介してユーザ端末と通信接続されると共に、前記ユーザの家庭内の情報家電機器を前記ネットワークを介して制御する情報家電ネットワーク制御装置における情報家電ネットワーク制御方法であって、情報家電機器の制御内容を予め汎用的な内容に分類し、メーカごとに異なる機器の制御命令群をこの分類に従いサービスコンポーネントとして情報家電制御サービスコンポーネントデータベースに登録する手順と、前記ユーザ端末から、ユーザのＩＤと、前記ユーザが保有している情報家電機器の種類と、前記情報家電機器のアドレスである情報家電機器アドレスとを受信する手順と、前記受信したユーザのＩＤと、前記情報家電機器の種類と、前記情報家電機器アドレスとを情報家電サービス機器登録データベースに登録する手順と、前記ユーザ端末から送信される情報家電機器の制御内容を音声情報により受信し、前記音声情報をテキストデータに変換する音声・テキスト相互変換手順と、前記音声・テキスト相互変換手順により変換されたテキストデータを基に、前記情報家電制御サービスコンポーネントデータベースを参照し、前記サービスコンポーネントを組み合わせたサービスシナリオを構成するサービス合成手順と、前記サービスシナリオに含まれるサービスコンポーネントを基に、前記情報家電制御サービスコンポーネントデータベースから制御命令を取得して前記情報家電機器に送信する手順と、を有することを特徴とする。
また、本発明のコンピュータプログラムは、ネットワークを介してユーザ端末と通信接続されると共に、前記ユーザの家庭内の情報家電機器を前記ネットワークを介して制御する情報家電ネットワーク制御装置内のコンピュータに、情報家電機器の制御内容を予め汎用的な内容に分類し、メーカごとに異なる機器の制御命令群をこの分類に従いサービスコンポーネントとして情報家電制御サービスコンポーネントデータベースに登録する手順と、前記ユーザ端末から、ユーザのＩＤと、前記ユーザが保有している情報家電機器の種類と、前記情報家電機器のアドレスである情報家電機器アドレスとを受信する手順と、前記受信したユーザのＩＤと、前記情報家電機器の種類と、前記情報家電機器アドレスとを情報家電サービス機器登録データベースに登録する手順と、前記ユーザ端末から送信される情報家電機器の制御内容を音声情報により受信し、前記音声情報をテキストデータに変換する音声・テキスト相互変換手順と、前記音声・テキスト相互変換手順により変換されたテキストデータを基に、前記情報家電制御サービスコンポーネントデータベースを参照し、前記サービスコンポーネントを組み合わせたサービスシナリオを構成するサービス合成手順と、前記サービスシナリオに含まれるサービスコンポーネントを基に、前記情報家電制御サービスコンポーネントデータベースから制御命令を取得して前記情報家電機器に送信する手順と、を実行させるためのプログラムである。
本発明の情報家電ネットワーク制御装置においては、情報家電機器の制御内容を予め汎用的な内容に分類しておき（例えば、電源オン、オフなど）、メーカ毎に異なる機器の制御命令群をサービスコンポーネントとして情報家電制御サービスコンポーネントデータベースに登録しておく。そして、ユーザの音声指示をテキストデータに変換し、このテキストデータを基にしてサービスシナリオを作成し、このサービスシナリオに含まれるサービスコンポーネントを基に、情報家電制御サービスコンポーネントデータベースから制御命令を取得して情報家電機器に送信するようにしたので、これにより、ユーザは、従来のメーカ毎に実施する複雑な情報家電機器制御設定に依存しなくても、簡単な操作で指示した情報家電機器の制御設定をすることができる。また、ユーザは、携帯電話など移動情報端末から、音声で情報家電機器の動作状態を制御設定する指示ができる。このため、移動情報端末でむずかしい操作することができないお年寄りなどを含め、誰もが、簡単に携帯電話や固定電話などから音声で本サービスを利用し、情報家電機器を制御設定することができる。さらに、同種類の情報家電機器であっても、情報家電機器製造者（メーカ）ごとに情報家電機器制御命令が異なる場合であっても、情報家電機器を他社製に買い控えても、サービスシナリオに記述されているサービスコンポーネントに関する情報が不変のため、サービスシナリオを変更する必要がない。
また、本発明の情報家電ネットワーク制御装置においては、情報家電機器の現在の設定状態の情報を、情報家電サービス機器登録データベースに登録するようにしたので、これにより、現在の情報家電機器の設定状態に応じて、サービスシナリオを構成（作成）することができる。
また、本発明の情報家電ネットワーク制御装置においては、サービスコンポーネントにある命令に必要なパラメータ（例えば、クーラーの設定温度、録画開始時刻など）を組み合わせ、新たなサービスコンポーネントを編集するようにしたので、これにより、新たなサービスコンポーネントを構成することができる。このため、情報家電機器の新たな制御設定を簡単に行うサービス提供することが可能となり、利便性のある新しいサービスを迅速に提供することができる。
また、本発明の情報家電ネットワーク制御装置においては、情報家電機器の現在の設定状態を前記情報家電サービス機器登録データベースから読み出し、その結果に応じてサービスコンポーネントを変更するようにしたので、これにより、情報家電機器の現在の設定状態に応じてサービスコンポーネントを動的に変更することができる。
また、本発明の情報家電ネットワーク制御装置においては、ユーザ端末の画面上にサービスシナリオを表示し、ユーザが画面上でサービスシナリオを選択または編集できるようにしたので、これにより、ユーザ端末に対して、理解しやすいサービスシナリオを提供することができ、ユーザは情報家電機器の制御設定を容易に行えるようになる。
また、本発明の情報家電ネットワーク制御装置においては、ユーザは、情報家電機器の制御設定の指示情報を、音声かテキストデータのいずれかにより、情報家電ネットワーク制御装置に送信するようにしたので、これにより、ユーザは携帯電話等を使用した音声指示により情報家電機器の制御設定を行うことができると共に、ＰＣやＰＤＡなどの情報端末からテキストデータにより情報家電機器の制御設定を行うことができる。
また、本発明の情報家電ネットワーク制御装置においては、メーカ側の情報家電機器制御サーバを利用して、ユーザの家庭内の情報家電機器の制御設定を行うようにしたので、これにより、メーカ側の情報家電機器制御サーバを活用してユーザの家庭内の情報家電機器の制御設定を行うことができる。このため、情報家電ネットワーク制御装置における負荷を軽減することができる。
また、本発明の情報家電ネットワーク制御システムにおいては、情報家電機器の制御内容を予め汎用的な内容に分類しておき（例えば、電源オン、オフなど）、メーカ毎に異なる機器の制御命令群をサービスコンポーネントとして情報家電制御サービスコンポーネントデータベースに登録しておく。そして、ユーザの音声指示をテキストデータに変換し、このテキストデータを基にしてサービスシナリオを作成し、このサービスシナリオに含まれるサービスコンポーネントを基に、情報家電制御サービスコンポーネントデータベースから制御命令を取得してメーカ側の情報家電機器制御サーバに送信し、このメーカ側の情報家電機器制御サーバから情報家電機器に制御命令を送信するようにしたので、これにより、ユーザは、従来のメーカ毎に実施する複雑な情報家電機器制御設定に依存しなくても、簡単な操作で指示した情報家電機器の制御設定をすることができる。また、ユーザは、携帯電話など移動情報端末から、音声で情報家電機器の動作状態を制御設定する指示ができる。このため、移動情報端末でむずかしい操作することができないお年寄りなどを含め、誰もが、簡単に携帯電話や固定電話などから音声で本サービスを利用し、情報家電機器を制御設定することができる。さらに、同種類の情報家電機器であっても、情報家電機器製造者（メーカ）ごとに情報家電機器制御命令が異なる場合であっても、情報家電機器を他社製に買い控えても、サービスシナリオに記述されているサービスコンポーネントに関する情報が不変のため、サービスシナリオを変更する必要がない。
以下、本発明の実施の形態を添付図面を参照して説明する。
［情報家電ネットワーク制御システムの構成と動作の説明］
図１は、本発明の実施の形態に係わる情報家電ネットワーク制御システムの構成を示す図である。図１において、ユーザ端末３１は、通信ネットワーク２３、或いは情報ネットワーク２１、或いは移動通信ネットワーク２５を介し、ネットワークサービスプラットフォーム（情報家電ネットワーク制御装置）１に接続する。そして、ユーザ端末３１は、ネットワークサービスプラットフォーム１内の（情報家電サービス制御装置）１０と連携し、情報家電機器３５を制御設定するように構成されている。
このように本発明の情報家電ネットワーク制御システムは、通信ネットワーク２３と、情報ネットワーク２１と、移動通信ネットワーク２５とを介して接続する、携帯電話３２或いは固定電話３３或いは情報端末３４などのユーザ端末３１を有している。また、情報家電機器３５とネットワークサービスプラットフォーム１とを有している。
ネットワークサービスプラットフォーム（情報家電ネットワーク制御装置）１は、ネットワーク接続制御機能を有する通信ネットワーク制御サーバ装置２と、音声をテキストデータに変換し、或いはテキストデータを音声に変換する機能の音声・テキスト相互変換装置３とを有している。
また、携帯電話３２或いは固定電話３３など電話番号ＩＤ、或いは情報端末３４のＩＰアドレスＩＤのプレゼンス情報を取得し通知するプレゼンスサーバ４を有している。また、サービスシナリオを実行するサービス合成部５と、サービスシナリオが保存されているサービスシナリオデータベース６と、「地図表示」など通常のサービス情報（コンポーネント）が複数保存されたサービス情報データベース７とを有している。
情報家電サービス制御装置１１は、情報家電サービス制御サーバ１２と、情報家電サービス機器登録データベース１４と、情報家電制御サービスコンポーネントデータベース１３と、サービスコンポーネント編集機能部１５とを有している。また、情報家電サービス制御装置１１は、通信ネットワーク２３と情報ネットワーク２１と移動通信ネットワーク２５とに接続されるように構成されている。
なお、前述の情報家電ネットワーク制御装置はネットワークサービスプラットフォーム１が相当し、前述のユーザ家庭内の情報家電機器は情報家電機器３５が相当し、前述のネットワークは移動通信ネットワーク２５と通信ネットワーク２３と情報ネットワーク２１とが相当する。また、前述の情報家電制御サービスコンポーネントデータベースは情報家電制御サービスコンポーネントデータベース１３が相当し、前述のプレゼンス情報取得部はプレゼンスサーバ４が相当する。また、情報家電サービス機器登録データベースは情報家電サービス機器登録データベース１４が相当し、音声・テキスト相互変換部は音声・テキスト相互変換装置３が相当する。また、前述のサービス合成部はサービス合成部５が相当し、前述の情報家電サービス制御部は情報家電サービス制御サーバ１２等が相当する。また、前述のサービスコンポーネント編集機能部はサービスコンポーネント編集機能部１５が相当し、ユーザ端末はユーザ端末３１が相当し、メーカ側の情報家電機器制御サーバは情報家電機器制御サーバ２２が相当する。
次に、本システムにおける情報家電機器３５を制御設定する機能と動作について説明する。
ユーザは本サービスを利用するときに、ユーザ端末３１から、ユーザＩＤと、制御設定する情報家電機器３５と、メーカ側の情報家電機器制御サーバ２２から取得した情報家電機器のアドレスである情報家電機器アドレスと、現在の情報家電機器３５の動作状態（設定状態）とを情報家電サービス機器登録データベース１４に登録する。
また、情報家電サービス機器登録データベース１４は、ユーザの情報家電機器情報の登録完了を情報家電サービス制御サーバ１２に通知する。
情報家電サービス制御サーバ１２は、メーカ側の情報家電機器制御サーバ２２に対し、情報家電機器制御コマンド命令の名称と情報家電機器アドレスと制御する動作パラメータなどの情報家電機器制御命令の提供を要求する。
メーカ側の情報家電機器制御サーバ２２は、情報家電サービス制御サーバ１２からの要求に対応する情報家電機器３５の情報家電機器制御命令を検索し、情報家電サービス制御サーバ１２に送信する。
また、情報家電サービス制御サーバ１２は、情報家電制御サービスコンポーネントデータベース１３とサービスコンポーネント編集機能部１５に情報家電機器制御命令を送信する。
サービスコンポーネント編集機能部１５は、情報家電機器製造者（メーカ）ごとに異なる情報家電機器３５の情報家電機器制御命令に特有なパラメータを検索して、情報家電制御サービスコンポーネントデータベース１３に送信する。
情報家電制御サービスコンポーネントデータベース１３は、情報家電機器制御命令と、サービスコンポーネントとを保存する。このサービスコンポーネントは、情報家電機器製造者（メーカ）の情報家電機器制御命令を基にした制御命令群であり、予め登録しておく。
ユーザが本サービスの情報家電機器制御設定を利用するときは、携帯電話３２或いは固定電話３３の電話番号ＩＤ、或いは情報端末３４のＩＰアドレスＩＤなどのユーザ端末３１のＩＤ情報をプレゼンスサーバ４に通知する。プレゼンスサーバ４は、ユーザの電話ＩＤ或いは情報端末ＩＤの情報から位置情報を把握し、通知する機能を有している。
ユーザは、情報家電サービス機器登録データベース１４に登録しているエアコン或いはテレビなどの情報家電機器３５の制御設定を行う場合に、携帯電話３２或いは固定電話３３などの通信端末に音声で「エアコン電源をＯＮする」、「テレビ電源をＯＮする」などと入力する。携帯電話３２或いは固定電話３３は、入力された音声をネットワークサービスプラットフォーム１に向けて発呼する。この発呼の場合に、携帯電話３２或いは固定電話３３など通信端末は、移動通信ネットワーク２５或いは通信ネットワーク２３のＳＩＰサーバ２４、２６を経由し、通信ネットワーク制御サーバ装置２に接続される。
通信ネットワーク制御サーバ装置２は、携帯電話３２或いは固定電話３３などのユーザ端末から発呼された音声を音声・テキスト相互変換装置３に伝送する。音声・テキスト相互変換装置３は、「エアコン電源をＯＮする」、「テレビ電源をＯＮする」など情報家電制御の音声をテキストデータに変換し、通信ネットワーク制御サーバ装置２に送信する。
通信ネットワーク制御サーバ装置２は、変換された情報家電制御のテキストデータをサービス合成部５に送信する。
サービス合成部５は、プレゼンスサーバ４からユーザ端末ＩＤの位置情報を確認し、サービスシナリオデータベース６から情報家電系の「エアコン電源をＯＮする」→「テレビ電源をＯＮする」など情報家電機器３５を制御するサービスシナリオを取得し、サービスシナリオの実行を開始する。
サービスシナリオの中に詳細な情報家電機器制御設定する、例えば「エアコンの温度を２４℃に設定」など記述されたサービスコンポーネントがある場合は、情報家電サービス制御サーバ１２に接続する。
情報家電サービス制御サーバ１２は、ユーザＩＤと、情報家電機器３５を制御設定する情報家電機器名と、制御する情報家電機器制御コマンドと、例えば、「エアコン電源をＯＮして温度を２４℃に設定」など作成された情報家電機器指示制御サービスコンポーネントを情報家電制御サービスコンポーネントデータベース１３から取得する。
例えば、ユーザ端末３１が指示した情報家電機器制御するサービスコンポーネントが情報家電制御サービスコンポーネントデータベース１３に無い場合は、サービス合成部５は、新たなサービスコンポーネントを構成するように情報家電機器制御サーバ１２に指示する。
この場合、サービス合成部５は、ユーザ端末３１に情報家電制御設定する動作状態内容を要求し、ユーザ端末３１が情報家電制御設定する指示情報を発呼する。そして、サービス合成部５は、音声・テキスト相互変換装置３によりテキストデータに変換された情報家電制御サービスコンポーネントを受信し、情報家電サービス制御サーバ１２に接続する。
情報家電サービス制御サーバ１２は、メーカ側の情報家電機器制御サーバ２２の複数の情報家電機器制御命令の中から検索して、サービスコンポーネント編集機能部１５に送信する。
そして、サービスコンポーネント編集機能部１５は、ユーザが指示するサービスコンポーネントを作成し、情報家電制御サービスコンポーネントデータベース１３に登録することで、ユーザ端末３１が指示した新たなサービスコンポーネントを構成することができる。
情報家電サービス制御サーバ１２は、情報家電サービス機器登録データベース１４からユーザＩＤに関連付けされている情報家電機器名と、メーカ側の情報家電機器制御サーバ２２が管理する情報家電機器アドレスとを取得し、情報家電機器アドレスと情報家電機器３５を制御設定する情報家電制御コマンドとを、ＳＯＡＰ（Simple Object Access Protocol）通信の標準プロトコルでメーカ側の情報家電機器制御サーバ２２に送信する。
情報家電サービス制御サーバ１２と、メーカ側の情報家電機器制御サーバ２２とホームゲートウェイ３６と、情報家電機器３５との間では、ファイアウォール機能と情報家電機器認証と暗号通信機能などセキュリティ機能が対策されている。
メーカ側の情報家電機器制御サーバ２２は、ユーザＩＤと情報家電機器アドレスと制御する情報家電機器制御コマンドとを受信し、メーカ側の情報家電機器制御サーバ２２が管理する情報家電機器アドレスのホームネットワーク３７内のホームゲートウェイ３６にＴＣＰ／ＩＰ通信を用いた機器固有プロトコルで送信する。
ホームゲートウェイ３６の機能は、外部との接続機能と、ホームネットワーク３７の機器ＩＰアドレスや複数の機器の検索機能などの管理機能と、ユーザ宅の情報家電機器間で互いにサービスを利用するための共通機能とを有している。
ホームネットワーク３７の情報家電機器３５は、例えば、ＡＶ機器などはＩＥＥＥ１３９４規格に準じ接続し、エアコンなど白物家電機器の相互接続は、ＥＣＨＯＮＥＴ規格に準じた制御方式で情報のやり取りを管理している。
ホームゲートウェイ３６は、例えば、「エアコン電源をＯＮして温度を２４℃に設定」などサービスコンポーネントの情報家電機器制御コマンドを情報家電機器３５の情報家電機器アドレスに送信する。
ホームネットワーク３７内の情報家電機器３５は、例えば、ＵＰｎＰ（Universal Plug and Play）或いはＤＬＮＡ（Digital Living Network Alliance）など機器制御プロトコルを実装している。
情報家電機器３５は、制御動作状態を制御設定する情報家電機器制御コマンドを受信し、情報家電機器３５内の制御設定機能が実行し、情報家電機器３５の制御設定を実行することができる。
情報家電機器３５は、情報家電機器制御設定が完了後、情報家電サービス制御サーバ１２を経由し、情報家電サービス機器登録データベース１４に更新後の設定値の状態を登録する。情報家電サービス制御サーバ１２は、ユーザ端末３１に情報家電機器３５の制御設定が完了したことを音声・テキスト相互変換装置３を経由し音声で完了通知する。
このように、ユーザ端末３１はネットワークサービスプラットフォーム（情報家電機器）１と連携することで、サービスコンポーネントが組み合わされたサービスシナリオを利用し、音声で情報家電機器３５を遠隔操作で制御設定することができる。
なお、上述した例では、ユーザの家庭内の情報家電機器３５の制御設定を、メーカ側の情報家電機器制御サーバ２２を通して行う例について説明したが、ネットワークサービスプラットフォーム１側から情報家電機器３５を直接に制御することもできる。
次に、図５と図６のシーケンス図を参照して、携帯電話３２或いは固定電話３３などユーザ端末３１から、音声でエアコンなど情報家電機器３５を遠隔操作で制御設定する動作を説明する。
ユーザ端末３１は、ユーザＩＤと、情報家電機器のエアコンと、エアコンの情報家電機器アドレスと、を情報家電サービス機器登録データベース１４に登録しておく（ステップＳ１）。
情報家電サービス機器登録データベース１４は、情報家電サービス制御サーバ１２に登録通知する（ステップＳ２）。情報家電サービス制御サーバ１２は、メーカ側の情報家電機器制御サーバ２２が保存しているエアコンの制御命令の提供をメーカ側の情報家電機器制御サーバ２２に依頼する（ステップＳ３）。
メーカ側の情報家電機器制御サーバ２２は、情報家電サービス制御サーバ１２にエアコンの情報家電機器制御命令を提供する（ステップＳ４）。情報家電サービス制御サーバ１２は、受信した制御命令を情報家電制御サービスコンポーネントデータベース１３とサービスコンポーネント編集機能部１５に送信する（ステップＳ５、Ｓ６）。
サービスコンポーネント編集機能部１５は、情報家電機器製造者（メーカ）ごとに異なる情報家電機器３５の情報家電機器制御命令に特有なパラメータを検索して（ステップＳ７）、情報家電制御サービスコンポーネントデータベース１３に送信する（ステップＳ８）。例えば、エアコンの情報家電機器制御命令を組み合わせして編集し、ユーザ端末３１から指示された、「エアコン電源をＯＮして温度を２４℃に設定」などサービスコンポーネントを作成し、情報家電制御サービスコンポーネントデータベース１３に送信し保存する。
ユーザは、ユーザ端末３１のプレゼンス情報をプレゼンスサーバ４に通知する（ステップＳ９）。ユーザは、ユーザ端末３１に、例えば「エアコン電源をＯＮする」、「エアコンの温度を２４℃に設定」などと音声で入力し、ユーザ端末３１は、入力された音声をネットワークサービスプラットフォーム１に向けて発呼する。この発呼により送信された音声は、ＳＩＰサーバ２４，２６と通信ネットワーク制御サーバ装置２とを経由して音声・テキスト相互変換装置３に伝送される（ステップＳ１０、Ｓ１１、Ｓ１２）。
音声・テキスト相互変換装置３は、ユーザ端末３１から受信した音声をテキストデータに変換し、通信ネットワーク制御サーバ装置２に送信する（ステップＳ１３、Ｓ１４）。
通信ネットワーク制御サーバ装置２は、テキストデータをサービス合成部５に送信し（ステップＳ１５）、サービス合成部５は、プレゼンスサーバ４からユーザ端末３１の位置情報を要求し取得する（ステップＳ１６、Ｓ１７）。
サービス合成部５は、サービスシナリオ実行開始し、「エアコン電源をＯＮする」など記述されたサービスシナリオをサービスシナリオデータベース６から検索する（ステップＳ１８、Ｓ１９、Ｓ２０）。取得したシナリオサービスの中に情報家電系の例えば「エアコンの温度を２４℃に設定」など記述されたサービスコンポーネントがある場合は、情報家電サービス制御サーバ１２に接続する（ステップＳ２１）。
続いて、図６を参照して、サービス合成部５は、情報家電サービス制御サーバ１２に接続する（ステップＳ２２）。
情報家電サービス制御サーバ１２は、エアコンなど情報家電機器名と「エアコンの温度を２４℃に設定する」など情報家電機器制御指示サービスコンポーネントと、power Aircon（ON）and temperature（24℃）など情報家電機器制御コマンドを情報家電制御サービスコンポーネントデータベース１３から検索して取得する（ステップＳ２３、Ｓ２４）。
かつ、ユーザＩＤとユーザＩＤに関連付けしている情報家電機器名と、情報家電機器アドレスと、現在の機器設定状態と、を情報家電サービス機器登録データベース１４から検索し（ステップＳ２５）、ユーザＩＤと情報家電機器アドレスと現在の機器設定状態とを取得する（ステップＳ２６）。
情報家電サービス制御サーバ１２は、ユーザＩＤと、エアコンなど情報家電機器名と、情報家電機器制御コマンドと、情報家電サービス制御サーバ１２が管理する情報家電機器アドレスとをメーカ側の情報家電機器制御サーバ２２にＳＯＡＰ通信で送信する（ステップＳ２７）。
メーカ側の情報家電機器制御サーバ２２は、エアコンなど情報家電機器３５の情報家電機器アドレスを確認し、エアコンを制御する情報家電機器制御コマンドと情報家電機器アドレスとをホームゲートウェイ３６に送信する（ステップＳ２８）。
ホームゲートウェイ３６は、制御するエアコンのpower Aircon（ON）and temperature（24℃）などの情報家電機器制御コマンドをエアコンのアドレスに送信する（ステップＳ２９）。
エアコンなど情報家電機器３５は、制御する情報家電機器制御コマンドを受信し、エアコンの内部の制御機能が実行し、ユーザ端末３１が指定した「エアコンの温度を２４℃に設定する」の制御設定を完了する（ステップＳ３０）。
エアコンなど情報家電機器３５は、制御設定が完了したことを、ホームゲートウェイ３６とメーカ側の情報家電機器制御サーバ２２とを経由し（ステップＳ３１、Ｓ３２）、情報家電サービス制御サーバ１２に通知する（ステップＳ３３）。
情報家電サービス制御サーバ１２は、エアコン制御設定を更新した現在の設定状態を情報家電サービス機器登録データベース１４に登録して完了する（ステップＳ３４、Ｓ３５）、。そして、情報家電サービス制御サーバ１２は、サービス合成部５を経由し、音声・テキスト相互変換装置３にエアコンの更新設定完了を通知する（ステップＳ３６、Ｓ３７）。また、音声・テキスト相互変換装置３は、エアコン更新設定完了のテキストデータを音声に変換し（ステップＳ３８）、ユーザ端末３１に通知する（ステップＳ３９）。ユーザはユーザ端末３１で、音声で指示した「エアコンの温度を２４℃に設定する」の制御設定が完了したことを音声で確認することができる。
［ネットワークサービスプラットフォームの構成の説明］
図２は、ネットワークサービスプラットフォーム１の装置構成を示す図であり、図２を参照して、各装置の機能について説明する。なお、ネットワークサービスプラットフォーム１は、本発明の情報家電ネットワーク制御装置に相当する。
通信ネットワーク制御サーバ装置２は、ネットワークと接続制御する機能を有する。音声・テキスト相互変換装置３は、通信ネットワーク制御サーバ装置２から伝送された音声を音響分析して音響特徴を算出し、複数の言語モデルと日本語音響モデルと認識エンジンとを有する音声認識機能を有する。そして、音声・テキスト相互変換装置３は、音響特性が入力音声の音響特性に最も近い言葉を生成し、生成した音声をテキストデータに変換する機能を有し、また、その逆の動作でテキストデータを音声に変換すると機能を有している。
プレゼンスサーバ４は、携帯電話３２或いは固定電話３３の電話番号などのＩＤと、或いはパソコンなど情報端末ＩＤのＩＰアドレスとなど、ユーザ端末３１の位置情報を把握するプレゼンス情報を取得し通知する機能を有している。
サービス合成部５は、サービスシナリオを検索しサービス連携を実行する機能を有している。例えば、サービスシナリオデータベース６から「エアコンの電源をＯＮする」→「テレビの電源をＯＮする」→「地図表示」→「携帯電話」などのサービスシナリオを取得する。また、サービス合成部５は、サービスシナリオの中に情報家電系のサービスコンポーネントがある場合は、情報家電サービス制御サーバ１２に接続する機能を有している。
サービスシナリオデータベース６は、完成されたサービスシナリオが複数保存されている機能であり、サービス情報データベース７は、「地図表示」など通常のサービスコンポーネントが複数保存されている機能である。
また、情報家電サービス制御装置１１は、情報家電サービス制御サーバ１２と、情報家電サービス機器登録データベース１４と、サービスコンポーネント編集機能部１５、と情報家電制御サービスコンポーネントデータベース１３とを有している。
以下、情報家電サービス制御装置１１内の各装置の機能について説明する。
情報家電サービス制御サーバ１２は、ユーザ端末３１が「エアコンの電源をＯＮして温度を２４℃に設定する」という情報家電機器制御設定する指示を受信する機能を有する。また、情報家電サービス制御サーバ１２は、指示対象となるエアコンなど情報家電機器名と、制御する情報家電機器制御コマンドと、「エアコンの電源をＯＮして温度を２４℃に設定する」など情報家電機器制御指示サービスコンポーネントを、情報家電制御サービスコンポーネントデータベース１３から検索し取得する機能を有する。
また、情報家電サービス機器登録データベース１４からユーザＩＤと、情報家電機器名と、メーカ側の情報家電機器制御サーバ２２が管理している情報家電機器アドレスと、情報家電機器３５の現在の設定状態とを取得する機能とを有している。また、メーカ側の情報家電機器制御サーバ２２が提供する情報家電機器制御命令を取得してサービスコンポーネント編集機能部１５に送信する機能を有している。
サービスコンポーネント編集機能部１５の機能は、メーカ側の情報家電機器制御サーバ２２が管理している複数の情報家電制御コマンド、制御動作設定パラメータなど情報家電機器制御命令を参照し、情報家電機器制御命令を一つ以上組み合わせし、新たなサービスコンポーネントを構成する。例えば、「エアコンの電源をＯＮして温度を２４℃に設定する」などわかりやすい一つのサービスコンポーネントを構成する。
メーカ側の情報家電機器制御サーバ２２が管理している情報家電機器制御命令には、controlAirconなど情報家電機器制御コマンド命令の名称と、controlAirconの情報家電機器アドレスのパラメータと、controlAirconなど電源ＯＮ／ＯＦＦのパラメータと、温度設定など詳細動作設定パラメータが複数管理されている。
図２の情報家電制御サービスコンポーネントデータベース１３のデータの例に示すように、例えば、エアコンの電源を操作する情報家電機器制御コマンドpower Aircon（ON）と、エアコンの温度を操作する情報家電機器制御コマンドtemperature（24℃）とを組み合わせし、power Aircon（ON）and temperature（24℃）の情報家電機器制御コマンドを構成することができる。
構成するサービスコンポーネントは、「エアコン電源をＯＮする」のサービスコンポーネントと「エアコンの温度を２４℃に設定」とのサービスコンポーネントを組み合わせして編集される。例えば、「エアコンの電源をＯＮして温度を２４℃に設定する」という記述されたサービスコンポーネントとして、新たに一つのサービスコンポーネントを構成することができる。
このように、メーカ側の情報家電機器制御サーバ２２が提供する各々の個別の情報家電機器３５の詳細な情報家電機器制御コマンドの代わりに、ユーザが理解しやすいサービスコンポーネントとして情報家電制御する指令を提供することができる。作成されたサービスコンポーネントは、情報家電制御サービスコンポーネントデータベース１３に送信し保存する。
［情報家電サービス機器登録データベースの説明］
図３は、複数のユーザが本サービスを利用するとき、ユーザの家庭内の情報家電機器の情報を登録するデータベースを示す図である。
情報家電サービス機器登録データベース１４は、ユーザの名前など認証する複数のユーザＩＤと、エアコン、テレビ、ＨＤＤレコーダなど情報家電機器名と、メーカ側の情報家電機器制御サーバ２２が管理をしている情報家電機器３５の情報家電機器アドレスと、エアコンなど情報家電機器３５が登録されている現在の制御設定状態とを保存している。情報家電機器３５の制御設定が完了したときは、現在の機器状態の項目が、現在の更新された制御設定状態で登録される。
なお、情報家電制御サービスコンポーネントデータベース１３は、図２の下側のテーブルに示すように、制御設定動作を指示するサーゼスコンポーネントと、情報家電機器３５の機器名と、情報家電機器制御コマンドとが保存されている。また、情報家電機器製造者が提供する情報家電機器制御命令の名称と、その命令に必要な情報家電機器アドレスや制御する動作などパラメータが保存されている。
メーカ側の情報家電機器制御サーバ２２が提供する、例えば、power Aircon（OFF）など情報家電機器制御コマンドと、サービス合成部５が処理するサービスシナリオに記述される「エアコンの電源をＯＮする」などサービスコンポーネントとが対応付けされて保存されている。また、サービスコンポーネント編集機能部１５が、情報家電機器制御命令を参照して組み合わせ、一つに作成した「エアコンの電源をＯＮして温度を２４℃に設定する」など記述されているサービスコンポーネントを保存している。
［サービスシナリオの例の説明］
図４は、情報家電機器３５を制御する動作状態が記述されているサービスシナリオを示す図である。
図４（Ａ）に示すサービスシナリオＡは、例えば、ユーザがユーザ端末３１に、「エアコンの電源をＯＮし」、その後「テレビ電源をＯＮし」、その後「携帯電話３２に制御設定完了を通知する」と入力し、ユーザ端末３１から発呼したときの例である。あるいは、情報端末３４でサービスシナリオＡを要求した場合の例である。
この場合に、サービス合成部５が、サービスシナリオデータベース６から指示されたサービスシナリオＡを検索し、情報家電機器制御設定する動作が記述されているサービスシナリオを読み込む。例えば、「エアコンの電源をＯＮする」→「テレビの電源をＯＮする」→ユーザ宅付近の「地図表示」→「携帯電話」に情報家電機器３５の制御設定完了を通知する例のサービスシナリオを読み込む。
また、図４（Ｂ）に示すサービスシナリオＢは、図４（Ａ）に示したサービスシナリオＡの中に、新たに情報家電機器３５の制御設定が記述されたサービスコンポーネントを複数追加した例である。
例えば、「テレビの電源をＯＮする」と記述されているサービスコンポーネントの後に、「テレビの電源をＯＦＦする」と記述されたサービスコンポーネントを容易に追加することができる。また、他に制御設定したいサービスコンポーネントを取得して追加し制御ができるサービスシナリオを構成することができる。
図４（Ｃ）に示すサービスシナリオＣは、図４（Ｂ）に示すサービスシナリオＢのサービスシナリオ中に、情報家電機器３５を制御する動作設定に、更に詳細な制御設定するサービスコンポーネントを加えることで、サービスコンポーネントを動的に変えることができるサービスシナリオの例である。
この場合、サービスコンポーネント編集機能部１５は、情報家電機器３５の制御設定する詳細な情報家電制御設定が記述されたサービスコンポーネントを組み合わせて、サービスシナリを構成する。例えば、情報家電機器制御命令から作成する「エアコンの運転モード」や「温度設定」、或いは「テレビのチャンネル設定」などのサービスコンポーネントを組み合わせて、情報家電機器３５を制御設定するサービスシナリオＣを構成することができる。
また、情報家電サービス機器登録データベース１４に登録されている、例えば「エアコン電源ＯＮ」など現在の情報家電機器３５の制御設定状態に応じて、「温度を２４℃に設定」し「風量を弱に設定」して「１時間後に電源ＯＦＦする」など、情報家電機器制御が記述されているサービスコンポーネントを動的に自由に変えることもできる。
［ユーザ端末からサービスシナリオを使用して制御設定する動作の説明］
次に、本システムを利用し、ユーザの情報端末３４からサービスシナリオを使用して、情報家電機器３５を制御設定する動作について説明する。
ユーザは、情報端末３４のＩＤをプレゼンスサーバ４に通知し、エアコンやテレビなど情報家電機器３５を制御するサービスシナリオを要求する。この場合、情報端末３４は、情報ネットワーク２１を介し、通信ネットワーク制御サーバ装置２を経由してサービス合成部５に接続する。
サービス合成部５は、プレゼンスサーバ４から情報端末３４の位置情報を把握し、サービスシナリオのサービス実行を開始し、サービスシナリオデータベース６からエアコンなど情報家電機器３５を制御する記述されたサービスシナリオを検索して取得し、情報端末３４に送信する。
ユーザは、情報端末３４の画面上に表示された「エアコンの電源をＯＮする」など記述されたサービスシナリオに対し、画面上に「エアコンの電源をＯＮして温度を２４℃に設定する」など情報家電機器制御設定する記述を記載し、サービス合成部５に送信する。サービス合成部５は、情報家電サービス制御サーバ１２と接続する。
情報家電サービス制御サーバ１２は、ユーザＩＤと、エアコンなど情報家電機器３５の機種名と、power Aircon（ON）and temperature（24℃）など情報家電機器制御コマンドと、「エアコンの電源をＯＮして温度を２４℃に設定する」など情報家電機器指示制御サービスコンポーネントと、を情報家電制御サービスコンポーネントデータベース１３から取得する。
これ以降の動作は、図６に示す音声による情報家電機器３５の制御設定シーケンスにおけるステップＳ２５〜Ｓ３７と同様な動作が実施されるので、その説明は省略する。
図６に示すステップＳ３７以降は、情報家電サービス制御サーバ１２は、サービス合成部５に対し情報家電機器制御の更新設定完了を通知し、サービス合成部５は、要求のエアコンなど情報家電機器３５の制御完了したことを、情報ネットワーク２１を介して情報端末３４に通知する。
ユーザは、情報端末３４の画面上で指示したエアコンの制御設定が完了したこと確認する。このように、ユーザは、携帯電話３２、或いはポータブル情報端末やＰＤＡなど情報端末３４から遠隔操作により情報家電機器３５の制御設定を行うことができる。
以上説明したように、ユーザは、本発明の情報家電機器制御設定するシステムを利用することで、従来のメーカ毎に実施する複雑な情報家電機器制御設定に依存しなくても、簡単な操作で指示した情報家電機器の制御設定をすることができる。
また、ユーザは、携帯電話など移動情報端末から、音声で情報家電機器の動作状態を制御設定する指示ができるため、移動情報端末でむずかしい操作することができないお年寄りなどを含め、誰もが、簡単に携帯電話や固定電話などから音声で本サービスを利用し、情報家電機器を制御設定することができる。
ユーザ端末は、本発明の情報家電機器制御装置と連携することで、情報家電機器制御記述のサービスシナリオに対し、情報家電機器制御が記述されているサービスコンポーネントを追加することができる。このため、簡単に新しい情報家電機器制御設定するサービス提供することが可能であり、便利な利用性のある新しいサービスを迅速に提供することができる。また、ユーザが利用する増加に伴い、情報家電機器制御設定サービスの市場拡大を図ることができる。
また、同種類の情報家電機器であっても、情報家電機器製造者ごとに情報家電機器制御コマンド命令が異なる場合であっても、サービスシナリオに記述されているサービスコンポーネントに関する情報が不変のため、情報家電機器を他社製に買い控えても、サービスシナリオを変更する必要がない。
また、ユーザ端末に対して、理解しやすい情報家電機器制御設定するサービスコンポーネントの提供をすることがで、ユーザは、様々な情報家電機器設定をすることが容易にできる。
また、通信サービス事業者は、ネットワークと多様な情報家電機器とが相互に接続された本サービスをユーザに提供することで、情報家電機器制御サービスの利用拡大に伴い、収益向上を図ることができる。
以上、本発明の実施の形態について説明したが、図１に示すネットワークサービスプラットフォーム（情報家電ネットワーク制御装置）１内の各処理部（または装置）は専用のハードウェアにより実現されるものであってもよく、また、ネットワークサービスプラットフォーム１内の各処理部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによりその機能を実現させるものであってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、ネットワークサービスプラットフォーム１には、周辺機器として入力装置、表示装置等（いずれも表示せず）が接続されているものとする。ここで、入力装置としては、キーボード、マウス等の入力デバイスのことをいう。表示装置とは、ＣＲＴ（Cathode Ray Tube）や液晶表示装置等のことをいう。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
以上、本発明の実施の形態について説明したが、本発明の情報家電ネットワーク制御装置、および情報家電ネットワーク制御システムは、上述の図示例にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
本発明においては、ネットワークを介し、誰でもがユーザ端末から音声或いはテキストデータで、要求する情報家電機器の制御設定を容易に遠隔操作で実施することができることで、多様な情報家電機器の動作状態の設定が容易にできる。このため、ユビキタスサービスを提供でき、ユビキタスサービスの普及に貢献できる。
本発明の実施の形態に係わる情報家電ネットワーク制御システムの構成を示す図である。 ネットワークサービスプラットフォームの構成を説明するための図である。 情報家電サービス機器登録データベースの例を示す図である。 情報家電機器を制御設定する動作状態が記述されたサービスシナリオの例を示す図である。 音声による情報家電機器の制御設定をするシーケンス（前半）を示す図である。 音声による情報家電機器の制御設定をするシーケンス（後半）を示す図である。
符号の説明
１・・・ネットワークサービスプラットフォーム、２・・・通信ネットワーク制御サーバ装置、３・・・音声・テキスト相互変換装置、４・・・プレゼンスサーバ、５・・・サービス合成部、６・・・サービスシナリオデータベース、７・・・サービス情報データベース、１１・・・情報家電サービス制御装置、１２・・・情報家電サービス制御サーバ、１３・・・情報家電制御サービスコンポーネントデータベース、１４・・・情報家電サービス機器登録データベース、１５・・・サービスコンポーネント編集機能部、２１・・・情報ネットワーク、２２・・・情報家電機器制御サーバ、２３・・・通信ネットワーク、２４、２６・・・ＳＩＰサーバ、２５・・・移動通信ネットワーク、３１・・・ユーザ端末、３２・・・携帯電話、３３・・・固定電話、３４・・・情報端末、３５・・・情報家電機器、３６・・・ホームゲートウェイ

Claims (10)

  1. ネットワークを介してユーザ端末と通信接続されると共に、前記ユーザの家庭内の情報家電機器を前記ネットワークを介して制御する情報家電ネットワーク制御装置であって、
    情報家電機器の制御内容を予め汎用的な内容に分類し、メーカごとに異なる機器の制御命令群をこの分類に従いサービスコンポーネントとして登録する情報家電制御サービスコンポーネントデータベースと、
    前記ユーザ端末から、ユーザのＩＤと、前記ユーザが保有している情報家電機器の種類と、前記情報家電機器のアドレスである情報家電機器アドレスとを受信するプレゼンス情報取得部と、
    前記プレゼンス情報取得部により受信したユーザのＩＤと、前記情報家電機器の種類と、前記情報家電機器アドレスとを登録する情報家電サービス機器登録データベースと、
    前記ユーザ端末から送信される情報家電機器の制御内容を音声情報により受信し、前記音声情報をテキストデータに変換する音声・テキスト相互変換部と、
    前記音声・テキスト相互変換部により変換されたテキストデータを基に、前記情報家電制御サービスコンポーネントデータベースを参照し、前記サービスコンポーネントを組み合わせたサービスシナリオを構成するサービス合成部と、
    前記サービスシナリオに含まれるサービスコンポーネントを基に、前記情報家電制御サービスコンポーネントデータベースから制御命令を取得して前記情報家電機器に送信する情報家電サービス制御部と、
    を備えることを特徴とする情報家電ネットワーク制御装置。
  2. 前記情報家電機器から現在の制御設定の情報を受信すると共に、前記現在の制御設定の情報を前記情報家電サービス機器登録データベースに登録する、
    ことを特徴とする請求項１に記載の情報家電ネットワーク制御装置。
  3. 前記サービスコンポーネントデータベースに登録されたサービスコンポーネントに含まれる命令に必要なパラメータを組み合わせ、新たなサービスコンポーネントを編集すると共に、前記新たに編集したサービスコンポーネントを前記情報家電制御サービスコンポーネントデータベースに登録するサービスコンポーネント編集機能部、
    を備えることを特徴とする請求項１または請求項２に記載の情報家電ネットワーク制御装置。
  4. 前記サービスシナリオを実行する際に、制御を指示された情報家電機器の現在の制御設定の情報を前記情報家電サービス機器登録データベースから読み出し、その結果に応じて前記サービスコンポーネントを変更する、
    ことを特徴とする請求項１から請求項３のいずれかに記載の情報家電ネットワーク制御装置。
  5. 前記ユーザ端末は、前記情報家電機器の制御内容を音声情報により前記情報家電ネットワーク制御装置に送信すると共に、
    前記情報家電ネットワーク制御装置から、前記制御内容に応じたサービスシナリオを受信すると共に、該サービスシナリオを画面上に表示し、
    前記画面上に表示されたサービスシナリオを選択または編集して前記情報家電ネットワーク制御装置に送信する、
    ことを特徴とする請求項１から請求項４のいずれかに記載の情報家電ネットワーク制御装置。
  6. 前記ユーザ端末は、情報家電機器の制御内容を音声情報かテキストデータのいずれかにより、前記情報家電ネットワーク制御装置に送信する、
    ことを特徴とする請求項１から請求項５のいずれかに記載の情報家電ネットワーク制御装置。
  7. 前記情報家電ネットワーク制御装置は、ネットワークを介してメーカ側の情報家電機器制御サーバと通信接続されており、
    前記情報家電ネットワーク制御装置は、
    前記メーカ側の情報家電機器制御サーバに、ユーザＩＤと情報家電機器アドレスと制御する情報家電機器の制御命令とを送信し、
    前記メーカ側の情報家電機器制御サーバは、前記情報家電ネットワーク制御装置から受信した制御命令と情報家電機器アドレスとを基に、ユーザの家庭内の情報家電機器を制御する、
    ことを特徴とする請求項１から請求項６のいずれかに記載の情報家電ネットワーク制御装置。
  8. ユーザ端末と、メーカ側の情報家電サービス制御サーバと、ユーザの家庭内の情報家電機器と、前記ユーザ端末、メーカ側の情報家電サービス制御サーバ、およびユーザの家庭内の情報家電機器にネットワークを介して通信接続されると共に、前記ユーザの家庭内の情報家電機器を前記ネットワークを介して制御する情報家電ネットワーク制御装置とで構成される情報家電ネットワーク制御システムであって、
    前記情報家電ネットワーク制御装置は、
    情報家電機器の制御内容を予め汎用的な内容に分類し、メーカごとに異なる機器の制御命令群をこの分類に従いサービスコンポーネントとして登録する情報家電制御サービスコンポーネントデータベースと、
    前記ユーザのＩＤと、前記情報家電機器の種類と、前記情報家電機器のアドレスである情報家電機器アドレスと、前記情報家電機器の現在の設定状態とを登録する情報家電サービス機器登録データベースと、
    前記ユーザ端末から送信される情報家電機器の制御内容を音声情報により受信し、前記音声情報をテキストデータに変換する音声・テキスト相互変換部と、
    前記音声・テキスト相互変換部により変換されたテキストデータを基に、前記情報家電制御サービスコンポーネントデータベースを参照し、前記サービスコンポーネントを組み合わせたサービスシナリオを構成するサービス合成部と、
    前記サービスシナリオに含まれるサービスコンポーネントを基に、前記情報家電制御サービスコンポーネントデータベースから制御命令を取得して、ユーザＩＤと情報家電機器アドレスと制御命令とを、前記メーカ側の情報家電機器制御サーバに送信する情報家電サービス制御部と、
    を備え、
    前記ユーザ端末は、ユーザＩＤと、情報家電機器種別と、情報家電機器アドレスとを前記情報家電ネットワーク制御装置に送信する機能と、
    前記情報家電ネットワーク制御装置に対して情報家電機器の制御設定を音声、またはテキストデータで送信する機能と、
    を備え、
    前記メーカ側の情報家電機器制御サーバは、
    前記情報家電ネットワーク制御装置からユーザＩＤと情報家電機器アドレスと制御する情報家電機器の制御命令とを受信し、受信した制御命令を当該情報家電機器に送信する機能、
    を備え、
    前記情報家電機器は、
    前記メーカ側の情報家電機器制御サーバから制御命令を受信して制御設定を完了し、更新された設定状態を前記情報家電ネットワーク制御装置に送信する機能、
    を備えることを特徴とする情報家電ネットワーク制御システム。
  9. ネットワークを介してユーザ端末と通信接続されると共に、前記ユーザの家庭内の情報家電機器を前記ネットワークを介して制御する情報家電ネットワーク制御装置における情報家電ネットワーク制御方法であって、
    情報家電機器の制御内容を予め汎用的な内容に分類し、メーカごとに異なる機器の制御命令群をこの分類に従いサービスコンポーネントとして情報家電制御サービスコンポーネントデータベースに登録する手順と、
    前記ユーザ端末から、ユーザのＩＤと、前記ユーザが保有している情報家電機器の種類と、前記情報家電機器のアドレスである情報家電機器アドレスとを受信する手順と、
    前記受信したユーザのＩＤと、前記情報家電機器の種類と、前記情報家電機器アドレスとを情報家電サービス機器登録データベースに登録する手順と、
    前記ユーザ端末から送信される情報家電機器の制御内容を音声情報により受信し、前記音声情報をテキストデータに変換する音声・テキスト相互変換手順と、
    前記音声・テキスト相互変換手順により変換されたテキストデータを基に、前記情報家電制御サービスコンポーネントデータベースを参照し、前記サービスコンポーネントを組み合わせたサービスシナリオを構成するサービス合成手順と、
    前記サービスシナリオに含まれるサービスコンポーネントを基に、前記情報家電制御サービスコンポーネントデータベースから制御命令を取得して前記情報家電機器に送信する手順と、
    を有することを特徴とする情報家電ネットワーク制御方法。
  10. ネットワークを介してユーザ端末と通信接続されると共に、前記ユーザの家庭内の情報家電機器を前記ネットワークを介して制御する情報家電ネットワーク制御装置内のコンピュータに、
    情報家電機器の制御内容を予め汎用的な内容に分類し、メーカごとに異なる機器の制御命令群をこの分類に従いサービスコンポーネントとして情報家電制御サービスコンポーネントデータベースに登録する手順と、
    前記ユーザ端末から、ユーザのＩＤと、前記ユーザが保有している情報家電機器の種類と、前記情報家電機器のアドレスである情報家電機器アドレスとを受信する手順と、
    前記受信したユーザのＩＤと、前記情報家電機器の種類と、前記情報家電機器アドレスとを情報家電サービス機器登録データベースに登録する手順と、
    前記ユーザ端末から送信される情報家電機器の制御内容を音声情報により受信し、前記音声情報をテキストデータに変換する音声・テキスト相互変換手順と、
    前記音声・テキスト相互変換手順により変換されたテキストデータを基に、前記情報家電制御サービスコンポーネントデータベースを参照し、前記サービスコンポーネントを組み合わせたサービスシナリオを構成するサービス合成手順と、
    前記サービスシナリオに含まれるサービスコンポーネントを基に、前記情報家電制御サービスコンポーネントデータベースから制御命令を取得して前記情報家電機器に送信する手順と、
    を実行させるためのプログラム。
JP2007282325A 2007-10-30 2007-10-30 情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびプログラム Pending JP2009110300A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007282325A JP2009110300A (ja) 2007-10-30 2007-10-30 情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007282325A JP2009110300A (ja) 2007-10-30 2007-10-30 情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびプログラム

Publications (1)

Publication Number Publication Date
JP2009110300A true JP2009110300A (ja) 2009-05-21

Family

ID=40778726

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007282325A Pending JP2009110300A (ja) 2007-10-30 2007-10-30 情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびプログラム

Country Status (1)

Country Link
JP (1) JP2009110300A (ja)

Cited By (99)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012248112A (ja) * 2011-05-30 2012-12-13 Fuji Xerox Co Ltd 通信方法、蓄積装置及び通信システム
JP2013073458A (ja) * 2011-09-28 2013-04-22 Toshiba Corp プログラム生成装置
WO2014069145A1 (ja) * 2012-10-31 2014-05-08 株式会社Ｆｕｔｕｒｅ Ｔｅｃｈ Ｌａｂ 情報システム、サーバ装置、端末装置、および情報処理方法
JP2014123290A (ja) * 2012-12-21 2014-07-03 Azbil Corp 施設管理システム、携帯端末、施設管理装置および施設管理方法
JP2016131409A (ja) * 2009-06-02 2016-07-21 オラクル・インターナショナル・コーポレイション 電話通信アプリケーションサービス
JPWO2014054220A1 (ja) * 2012-10-02 2016-08-25 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 通信方法、通信装置、機器制御方法、及び、機器制御装置
CN106814716A (zh) * 2017-01-03 2017-06-09 芜湖美智空调设备有限公司 一种家电间联动的预约方法及系统
JP2017523492A (ja) * 2014-05-30 2017-08-17 アップル インコーポレイテッド ホームオートメーションのためのインテリジェントアシスタント
CN107426064A (zh) * 2017-03-08 2017-12-01 芜湖美智空调设备有限公司 物联网控制情景的配置方法及装置
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10354652B2 (en) 2015-12-02 2019-07-16 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10381016B2 (en) 2008-01-03 2019-08-13 Apple Inc. Methods and apparatus for altering audio output signals
US10390213B2 (en) 2014-09-30 2019-08-20 Apple Inc. Social reminders
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10403283B1 (en) 2018-06-01 2019-09-03 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10417344B2 (en) 2014-05-30 2019-09-17 Apple Inc. Exemplar-based natural language processing
US10417405B2 (en) 2011-03-21 2019-09-17 Apple Inc. Device access using voice authentication
US10431204B2 (en) 2014-09-11 2019-10-01 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10438595B2 (en) 2014-09-30 2019-10-08 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10453443B2 (en) 2014-09-30 2019-10-22 Apple Inc. Providing an indication of the suitability of speech recognition
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US10497365B2 (en) 2014-05-30 2019-12-03 Apple Inc. Multi-command single utterance input method
US10529332B2 (en) 2015-03-08 2020-01-07 Apple Inc. Virtual assistant activation
US10553215B2 (en) 2016-09-23 2020-02-04 Apple Inc. Intelligent automated assistant
US10580409B2 (en) 2016-06-11 2020-03-03 Apple Inc. Application integration with a digital assistant
JP2020036382A (ja) * 2013-10-17 2020-03-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 通信装置及び通信装置の制御方法
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
JP2020511804A (ja) * 2017-06-30 2020-04-16 バイドゥ オンライン ネットワーク テクノロジー （ベイジン） カンパニー リミテッド 音声サービスを提供するための方法、装置およびサーバ
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10643611B2 (en) 2008-10-02 2020-05-05 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10657961B2 (en) 2013-06-08 2020-05-19 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10657966B2 (en) 2014-05-30 2020-05-19 Apple Inc. Better resolution when referencing to concepts
US10681212B2 (en) 2015-06-05 2020-06-09 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10684703B2 (en) 2018-06-01 2020-06-16 Apple Inc. Attention aware virtual assistant dismissal
US10692504B2 (en) 2010-02-25 2020-06-23 Apple Inc. User profiling for voice input processing
US10714117B2 (en) 2013-02-07 2020-07-14 Apple Inc. Voice trigger for a digital assistant
US10720046B2 (en) 2012-09-10 2020-07-21 Samsung Electronics Co., Ltd. System and method of controlling external apparatus connected with device
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733993B2 (en) 2016-06-10 2020-08-04 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10741185B2 (en) 2010-01-18 2020-08-11 Apple Inc. Intelligent automated assistant
US10741181B2 (en) 2017-05-09 2020-08-11 Apple Inc. User interface for correcting recognition errors
US10748546B2 (en) 2017-05-16 2020-08-18 Apple Inc. Digital assistant services based on device capabilities
US10769385B2 (en) 2013-06-09 2020-09-08 Apple Inc. System and method for inferring user intent from speech inputs
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
KR20200124298A (ko) * 2018-03-08 2020-11-02 구글 엘엘씨 원격으로 생성된 자동화된 어시스턴트 콘텐츠를 렌더링할 때 클라이언트 디바이스 지연 완화
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
WO2020246594A1 (ja) 2019-06-07 2020-12-10 ダイキン工業株式会社 機器制御システム、機器の制御方法
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10930282B2 (en) 2015-03-08 2021-02-23 Apple Inc. Competing devices responding to voice triggers
US10942702B2 (en) 2016-06-11 2021-03-09 Apple Inc. Intelligent device arbitration and control
US10942703B2 (en) 2015-12-23 2021-03-09 Apple Inc. Proactive assistance based on dialog communication between devices
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10991462B2 (en) 2012-09-10 2021-04-27 Samsung Electronics Co., Ltd. System and method of controlling external apparatus connected with device
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11010127B2 (en) 2015-06-29 2021-05-18 Apple Inc. Virtual assistant for media playback
US11023513B2 (en) 2007-12-20 2021-06-01 Apple Inc. Method and apparatus for searching using an active ontology
US11048473B2 (en) 2013-06-09 2021-06-29 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US11069336B2 (en) 2012-03-02 2021-07-20 Apple Inc. Systems and methods for name pronunciation
US11069347B2 (en) 2016-06-08 2021-07-20 Apple Inc. Intelligent automated assistant for media exploration
US11127397B2 (en) 2015-05-27 2021-09-21 Apple Inc. Device voice control
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11217251B2 (en) 2019-05-06 2022-01-04 Apple Inc. Spoken notifications
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US11231904B2 (en) 2015-03-06 2022-01-25 Apple Inc. Reducing response latency of intelligent automated assistants
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11269678B2 (en) 2012-05-15 2022-03-08 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11314370B2 (en) 2013-12-06 2022-04-26 Apple Inc. Method for extracting salient dialog usage from live data
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11350253B2 (en) 2011-06-03 2022-05-31 Apple Inc. Active transport based notifications
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11468282B2 (en) 2015-05-15 2022-10-11 Apple Inc. Virtual assistant in a communication session
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11495218B2 (en) 2018-06-01 2022-11-08 Apple Inc. Virtual assistant operation in multi-device environments
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11656884B2 (en) 2017-01-09 2023-05-23 Apple Inc. Application integration with a digital assistant
US11810578B2 (en) 2020-05-11 2023-11-07 Apple Inc. Device arbitration for digital assistant-based intercom systems
US11928604B2 (en) 2005-09-08 2024-03-12 Apple Inc. Method and apparatus for building an intelligent automated assistant

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005086473A (ja) * 2003-09-09 2005-03-31 Sanyo Electric Co Ltd コントローラ、プログラムおよび記憶媒体
JP2006196956A (ja) * 2005-01-11 2006-07-27 Matsushita Electric Ind Co Ltd 端末装置
JP2007004579A (ja) * 2005-06-24 2007-01-11 Nippon Telegr & Teleph Corp <Ntt> 情報家電製品に対するサービス制御及び機器制御方法または装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005086473A (ja) * 2003-09-09 2005-03-31 Sanyo Electric Co Ltd コントローラ、プログラムおよび記憶媒体
JP2006196956A (ja) * 2005-01-11 2006-07-27 Matsushita Electric Ind Co Ltd 端末装置
JP2007004579A (ja) * 2005-06-24 2007-01-11 Nippon Telegr & Teleph Corp <Ntt> 情報家電製品に対するサービス制御及び機器制御方法または装置

Cited By (127)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11928604B2 (en) 2005-09-08 2024-03-12 Apple Inc. Method and apparatus for building an intelligent automated assistant
US11023513B2 (en) 2007-12-20 2021-06-01 Apple Inc. Method and apparatus for searching using an active ontology
US10381016B2 (en) 2008-01-03 2019-08-13 Apple Inc. Methods and apparatus for altering audio output signals
US11348582B2 (en) 2008-10-02 2022-05-31 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10643611B2 (en) 2008-10-02 2020-05-05 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
JP2016131409A (ja) * 2009-06-02 2016-07-21 オラクル・インターナショナル・コーポレイション 電話通信アプリケーションサービス
US10741185B2 (en) 2010-01-18 2020-08-11 Apple Inc. Intelligent automated assistant
US10692504B2 (en) 2010-02-25 2020-06-23 Apple Inc. User profiling for voice input processing
US10417405B2 (en) 2011-03-21 2019-09-17 Apple Inc. Device access using voice authentication
JP2012248112A (ja) * 2011-05-30 2012-12-13 Fuji Xerox Co Ltd 通信方法、蓄積装置及び通信システム
US11350253B2 (en) 2011-06-03 2022-05-31 Apple Inc. Active transport based notifications
JP2013073458A (ja) * 2011-09-28 2013-04-22 Toshiba Corp プログラム生成装置
US9274754B2 (en) 2011-09-28 2016-03-01 Kabushiki Kaisha Toshiba Program generating apparatus, program generation method and computer readable medium
US11069336B2 (en) 2012-03-02 2021-07-20 Apple Inc. Systems and methods for name pronunciation
US11269678B2 (en) 2012-05-15 2022-03-08 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US10720046B2 (en) 2012-09-10 2020-07-21 Samsung Electronics Co., Ltd. System and method of controlling external apparatus connected with device
US10991462B2 (en) 2012-09-10 2021-04-27 Samsung Electronics Co., Ltd. System and method of controlling external apparatus connected with device
US10847024B2 (en) 2012-09-10 2020-11-24 Samsung Electronics Co., Ltd. System and method of controlling external apparatus connected with device
US11651676B2 (en) 2012-09-10 2023-05-16 Samsung Electronics Co., Ltd. System and method of controlling external apparatus connected with device
JPWO2014054220A1 (ja) * 2012-10-02 2016-08-25 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 通信方法、通信装置、機器制御方法、及び、機器制御装置
US10063626B2 (en) 2012-10-31 2018-08-28 Future Tech Leb Co., Ltd. Information system, server apparatus, terminal apparatus, and information processing method
WO2014069145A1 (ja) * 2012-10-31 2014-05-08 株式会社Ｆｕｔｕｒｅ Ｔｅｃｈ Ｌａｂ 情報システム、サーバ装置、端末装置、および情報処理方法
JP2014123290A (ja) * 2012-12-21 2014-07-03 Azbil Corp 施設管理システム、携帯端末、施設管理装置および施設管理方法
US10714117B2 (en) 2013-02-07 2020-07-14 Apple Inc. Voice trigger for a digital assistant
US10978090B2 (en) 2013-02-07 2021-04-13 Apple Inc. Voice trigger for a digital assistant
US10657961B2 (en) 2013-06-08 2020-05-19 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10769385B2 (en) 2013-06-09 2020-09-08 Apple Inc. System and method for inferring user intent from speech inputs
US11048473B2 (en) 2013-06-09 2021-06-29 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
JP2020036382A (ja) * 2013-10-17 2020-03-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 通信装置及び通信装置の制御方法
US11314370B2 (en) 2013-12-06 2022-04-26 Apple Inc. Method for extracting salient dialog usage from live data
US11257504B2 (en) 2014-05-30 2022-02-22 Apple Inc. Intelligent assistant for home automation
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10497365B2 (en) 2014-05-30 2019-12-03 Apple Inc. Multi-command single utterance input method
US10878809B2 (en) 2014-05-30 2020-12-29 Apple Inc. Multi-command single utterance input method
US11699448B2 (en) 2014-05-30 2023-07-11 Apple Inc. Intelligent assistant for home automation
JP2019083047A (ja) * 2014-05-30 2019-05-30 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． ホームオートメーションのためのインテリジェントアシスタント
US10417344B2 (en) 2014-05-30 2019-09-17 Apple Inc. Exemplar-based natural language processing
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
JP2017523492A (ja) * 2014-05-30 2017-08-17 アップル インコーポレイテッド ホームオートメーションのためのインテリジェントアシスタント
US10657966B2 (en) 2014-05-30 2020-05-19 Apple Inc. Better resolution when referencing to concepts
US10714095B2 (en) 2014-05-30 2020-07-14 Apple Inc. Intelligent assistant for home automation
US10699717B2 (en) 2014-05-30 2020-06-30 Apple Inc. Intelligent assistant for home automation
US10431204B2 (en) 2014-09-11 2019-10-01 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10390213B2 (en) 2014-09-30 2019-08-20 Apple Inc. Social reminders
US10438595B2 (en) 2014-09-30 2019-10-08 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10453443B2 (en) 2014-09-30 2019-10-22 Apple Inc. Providing an indication of the suitability of speech recognition
US11231904B2 (en) 2015-03-06 2022-01-25 Apple Inc. Reducing response latency of intelligent automated assistants
US10529332B2 (en) 2015-03-08 2020-01-07 Apple Inc. Virtual assistant activation
US11087759B2 (en) 2015-03-08 2021-08-10 Apple Inc. Virtual assistant activation
US10930282B2 (en) 2015-03-08 2021-02-23 Apple Inc. Competing devices responding to voice triggers
US11468282B2 (en) 2015-05-15 2022-10-11 Apple Inc. Virtual assistant in a communication session
US11127397B2 (en) 2015-05-27 2021-09-21 Apple Inc. Device voice control
US10681212B2 (en) 2015-06-05 2020-06-09 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11010127B2 (en) 2015-06-29 2021-05-18 Apple Inc. Virtual assistant for media playback
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10354652B2 (en) 2015-12-02 2019-07-16 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10942703B2 (en) 2015-12-23 2021-03-09 Apple Inc. Proactive assistance based on dialog communication between devices
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US11069347B2 (en) 2016-06-08 2021-07-20 Apple Inc. Intelligent automated assistant for media exploration
US10733993B2 (en) 2016-06-10 2020-08-04 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10942702B2 (en) 2016-06-11 2021-03-09 Apple Inc. Intelligent device arbitration and control
US10580409B2 (en) 2016-06-11 2020-03-03 Apple Inc. Application integration with a digital assistant
US11152002B2 (en) 2016-06-11 2021-10-19 Apple Inc. Application integration with a digital assistant
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10553215B2 (en) 2016-09-23 2020-02-04 Apple Inc. Intelligent automated assistant
CN106814716A (zh) * 2017-01-03 2017-06-09 芜湖美智空调设备有限公司 一种家电间联动的预约方法及系统
US11656884B2 (en) 2017-01-09 2023-05-23 Apple Inc. Application integration with a digital assistant
CN107426064A (zh) * 2017-03-08 2017-12-01 芜湖美智空调设备有限公司 物联网控制情景的配置方法及装置
US10741181B2 (en) 2017-05-09 2020-08-11 Apple Inc. User interface for correcting recognition errors
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10847142B2 (en) 2017-05-11 2020-11-24 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US10748546B2 (en) 2017-05-16 2020-08-18 Apple Inc. Digital assistant services based on device capabilities
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10909171B2 (en) 2017-05-16 2021-02-02 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
JP2020511804A (ja) * 2017-06-30 2020-04-16 バイドゥ オンライン ネットワーク テクノロジー （ベイジン） カンパニー リミテッド 音声サービスを提供するための方法、装置およびサーバ
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
KR20200124298A (ko) * 2018-03-08 2020-11-02 구글 엘엘씨 원격으로 생성된 자동화된 어시스턴트 콘텐츠를 렌더링할 때 클라이언트 디바이스 지연 완화
JP2021515341A (ja) * 2018-03-08 2021-06-17 グーグル エルエルシーＧｏｏｇｌｅ ＬＬＣ リモートに生成された自動化アシスタントコンテンツのレンダリングにおけるクライアントデバイスレイテンシの軽減
JP7170739B2 (ja) 2018-03-08 2022-11-14 グーグル エルエルシー リモートに生成された自動化アシスタントコンテンツのレンダリングにおけるクライアントデバイスレイテンシの軽減
KR102446961B1 (ko) 2018-03-08 2022-09-23 구글 엘엘씨 원격으로 생성된 자동화된 어시스턴트 콘텐츠를 렌더링할 때 클라이언트 디바이스 지연 완화
US11869502B2 (en) 2018-03-08 2024-01-09 Google Llc Mitigation of client device latency in rendering of remotely generated automated assistant content
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US11495218B2 (en) 2018-06-01 2022-11-08 Apple Inc. Virtual assistant operation in multi-device environments
US10720160B2 (en) 2018-06-01 2020-07-21 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10684703B2 (en) 2018-06-01 2020-06-16 Apple Inc. Attention aware virtual assistant dismissal
US11009970B2 (en) 2018-06-01 2021-05-18 Apple Inc. Attention aware virtual assistant dismissal
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10403283B1 (en) 2018-06-01 2019-09-03 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US10984798B2 (en) 2018-06-01 2021-04-20 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10944859B2 (en) 2018-06-03 2021-03-09 Apple Inc. Accelerated task performance
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11217251B2 (en) 2019-05-06 2022-01-04 Apple Inc. Spoken notifications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11237797B2 (en) 2019-05-31 2022-02-01 Apple Inc. User activity shortcut suggestions
US11360739B2 (en) 2019-05-31 2022-06-14 Apple Inc. User activity shortcut suggestions
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
JP7448830B2 (ja) 2019-06-07 2024-03-13 ダイキン工業株式会社 機器制御システム、機器の制御方法
WO2020246594A1 (ja) 2019-06-07 2020-12-10 ダイキン工業株式会社 機器制御システム、機器の制御方法
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11810578B2 (en) 2020-05-11 2023-11-07 Apple Inc. Device arbitration for digital assistant-based intercom systems

Similar Documents

Publication Publication Date Title
JP2009110300A (ja) 情報家電ネットワーク制御装置、情報家電ネットワーク制御システム、情報家電ネットワーク制御方法、およびプログラム
JP4640900B2 (ja) 情報中継装置、情報提示装置、情報提示装置の連携システム、情報中継装置の制御方法、情報提示装置の制御方法、情報提示プログラムならびにそれを記録したコンピュータ読み取り可能な記録媒体
JP2009075735A (ja) ゲートウェイ装置およびその情報制御方法
EP4033773A1 (en) Connection method for multimedia playing device, multimedia playing device and control terminal
JP2006134315A (ja) ＵＰｎＰネットワーク上で特定機器を識別する方法、識別された特定機器を通じてコンテンツを再生する方法、及び装置
JP6448901B2 (ja) トポロジーに基づいた周辺機器制御システム及び方法
JP2008035108A (ja) ホームネットワークサーバおよびホームネットワークの制御方法
US10149057B2 (en) Audio device, control terminal, method for audio device, and method for control terminal
JP2005004916A (ja) ホームネットワーク管理装置
CN102291614A (zh) 用数字电视接收终端播放多媒体文件的方法、终端及系统
JP2000067488A (ja) 通信装置および方法、並びに提供媒体
US20050132055A1 (en) System and method to control appliances using adaptive interfaces
JP2004328374A (ja) 電子機器、サーバ装置、ネットワークシステムおよびネットワークシステムの制御方法
CN112153123A (zh) 控制物联网系统中的物联网装置的方法、装置及系统
JP4612296B2 (ja) 状態情報提供装置及び方法、そのためのコンピュータプログラム、当該プログラムを記録した記録媒体、並びに当該プログラムによりプログラムされたコンピュータ
WO2010098096A1 (ja) 携帯端末装置、コンテンツ再生装置、ブックマーク管理サーバ、ブックマーク管理システム、ブックマーク管理方法、コンテンツ再生方法、ブックマーク管理サーバの制御方法、制御プログラムおよび記録媒体
JP2013051519A (ja) 情報処理装置、情報処理方法、プログラム及び情報処理システム
JP2008040915A (ja) 遠隔操作システム、通信端末、サーバ装置、およびコンピュータプログラム
JP2007172289A (ja) ネットワーク機器管理装置、ネットワーク管理システム及びネットワーク機器管理方法
KR20070063164A (ko) 홈 네트워크 시스템에서의 콘텐츠 공유 장치
WO2015182183A1 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
JP5640919B2 (ja) サーバ装置、対応付け方法、及び携帯機器用プログラム
JP2020067824A (ja) ネットワークシステムおよび電気機器
JP4481971B2 (ja) 通信装置、通信方法および通信プログラム
JP5268004B2 (ja) ホームネットワークにおける操作制御システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100127

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110915

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110927

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20120207