JP2006092549A - 家電製品上の作業を編成する方法及びシステム - Google Patents

Abstract

【課題】 作業編成システムで、複数の電子装置のうち、何れか一つまたは複数で行われるユーザー作業の表示方法を提供する。
【解決手段】 装置が行える機能を説明する機能説明書を備える電子装置。機能説明書は、一つまたはそれ以上の装置から獲得され、特定作業に要求される装置の機能を説明する作業説明書が獲得され、得られた装置機能説明書及び作業説明書に基づいて作業提案が生成される。各作業提案は、ユーザー作業を、得られた装置説明書及び作業説明書のうち、何れか一つまたはそれ以上の抽象化として表現する。作業提案は、ディスプレイ上に表示され、ユーザーをしてそれから選択せしめるが、ユーザーが選択した作業提案は、装置機能説明書に説明された装置機能を使用する作業説明書に基づいて、装置のうち、何れか一つまたはそれ以上に対する編成（自動化）により行われる。
【選択図】 図１Ａ

Description

本発明は、装置のユーザー制御のためのユーザーインタフェースの提供に係り、特に、一群の家電（コンシューマエレクトロニクス：ＣＥ）装置に対するユーザー作業の提示及び表示に関する。

ＴＶ、ＶＣＲ、ＤＶＤプレーヤー、ＣＤプレーヤーのような家電装置のユーザー制御のための通常的なユーザーインタフェースは、ユーザー作業を装置に表示しない。その代わりに、ユーザーに一連の装置の機能を提示し、ユーザーが作業を行うために、それらの装置機能の組合わせを選択する。例えば、ビデオテープを見るためには、ユーザーが入力（テープ）を選択し、テープを巻き戻し、ＶＣＲのプレイボタンを押さえなければならない。その結果として、ユーザーは、単に“ビデオテープを見たい”と明示して、このような作動を自動化することはできない。したがって、ユーザーは、所望の作業を直接表現できずに、必ず装置を直接制御して、所望の機能（例えば、入力選択、テープ巻き戻し、ＶＣＲの再生ボタンを押さえること）を行わねばならない。

これは、伝統的なソフトウェアアーキテクチャと類似しているが、このようなソフトウェアアーキテクチャでは、応用プログラムの概念に作業がマッピングされる。例えば、ユーザーが手紙を書きたいのであれば、ユーザーは、適切な機能を有するワードプロセッサプログラムを行わねばならない。ところが、このような過程では、ユーザーに公知の機能を公知の名称にマッピングしていない。

これと異なる方式としては、ユーザーにメニュー形式で複数のオプションを提示する方法がある。多くのシステムでは、公知の作業をメニューオプション上に提示して選択するようにしている（例えば、“文書のスペルチェック検査”または“ＶＣＲ上の即時録画”などがそれである）。しかし、このようなシステムでも、ユーザーに装置の機能のみを提供する。

他の方式としては、ユーザーが作業をグラフィックで表現するように許容することである。例えば、所望の作業を行うための一連の装置を、線を利用して連結させることである。このような方式の問題点は、装置の使用による複雑さをユーザーに隠していないということである。すなわち、このような方式では、ユーザーにグラフィックで機能を提示し、これをユーザーが選択するようにして、ユーザーが作業を行うのに必要な連結を特定するように要求する。

本発明が達成しようとする技術的課題は、作業が、その作業を行う一連の機能の動作を自動化するシステムに表現されうるように、ユーザーが、機能の集合よりは作業を表現できるように許容する方法及び装置を提供するところにある。

本発明が達成しようとする他の技術的課題は、ユーザーが、使用可能な装置の機能により行われうる作業を表現できるように、作業を一般的な方式で表現するように許容する装置及び方法を提供するところにある。

本発明が達成しようとするさらに他の技術的課題は、家電製品のような電子装置上での作業の編成を許容する装置及び方法を提供するところにある。

前記技術的課題を達成するための作業編成システムで、複数の電子装置のうち、何れか一つまたはそれ以上の装置により行われるユーザー作業の作業編成方法は、（ａ）それぞれの装置が行える機能を説明する装置機能説明書を獲得するステップと、（ｂ）特定の作業が要求する装置機能を説明する作業説明書を獲得するステップと、（ｃ）前記獲得された作業説明書及び装置機能説明書に基づいて、ユーザー作業を、前記獲得された装置機能説明書及び作業説明書のうち、何れか一つまたはそれ以上の抽象化として表す作業提案を生成するステップと、（ｄ）前記作業提案をディスプレイ上に表示して、ユーザーをして一つまたはそれ以上の装置で行われる作業提案を選択せしめるステップと、（ｅ）前記作業説明書及び装置機能説明書を使用して、装置により行われうる作業と、選択された作業提案を行える装置との組合わせを推論するステップとを含むことが好ましい。

前記技術的課題を達成するための相互連結された装置のネットワークに対する作業編成システムは、装置が行える機能を説明する装置機能説明書を獲得し、特定の作業が要求する装置機能を説明する作業説明書を獲得し、前記獲得された作業説明書及び装置機能説明書に基づいて、ユーザー作業を、前記獲得された装置機能説明書及び作業説明書のうち、何れか一つまたはそれ以上の抽象化として表す作業提案を生成する作業駆動型の制御器と、前記作業提案をディスプレイ上に表示し、ユーザーをして、選択された作業提案が表すユーザー作業が、一つまたはそれ以上の装置で行われるように作業提案を選択せしめるユーザーインタフェース装置と、を備え、前記制御器は、前記作業説明書及び装置機能説明書を使用して、装置により行われうる作業と、選択されたユーザー作業提案を行える装置との組合わせを推論することが好ましい。

一実施形態において、本発明は、ネットワーク上の複数の電子装置のうち、何れか一つまたはそれ以上で行われるユーザー作業を表現する方法を具現する作業編成システムを提供する。それぞれの装置は、その装置が行える機能を説明する機能説明書を含む。機能説明書は、一つまたはそれ以上の装置から獲得される。さらに、ユーザー作業と、そのような作業を行うために必要な機能とを説明する作業説明書が獲得される。次いで、このように得られた機能説明書及び作業説明書を使用して、ユーザーに対する作業提案が生成される。各作業提案は、ユーザー作業を疑似文章で抽象的に表現し、作業説明書から獲得され、得られた装置説明書のうち、何れか一つまたはそれ以上を使用できる。作業提案は、ディスプレイ上に表示されて、ユーザーがそれから選択できるようにする。このように、ユーザーが選択した作業提案により要請された作業は、一つまたはそれ以上の装置で行われる。このようにして、作業提案は、装置の機能をシステムのユーザーから隠す。

一実施形態において、作業提案は、タイプを有する一連の用語から構成された疑似言語構造を使用して表現され、ユーザー作業を、作業説明書及び装置機能説明書の抽象化として叙述する。ユーザーインタフェース装置が、ユーザーが選択する作業提案を表示するのに使用されるが、このような作業提案は、作業編成（自動化）モジュールの制御下にある、一つまたはそれ以上の装置により作業を行うように選択される。

作業提案から選択するに当って、ユーザーは、疑似文章要素／用語を選択するように許容されるが、ユーザーが選択した作業提案は、システムの作業編成モジュールの制御下にある装置により行われうる。作業編成モジュールは、システムの論理的モジュールになりうる。

一実施形態において、それ自体として、作業編成モジュールは、作業駆動型の制御器を備えるが、作業駆動型の制御器は、一つまたはそれ以上の装置から装置機能説明書を獲得し、特定の作業により要求される装置の機能を説明する作業説明書を獲得し、得られた作業説明書及び装置説明書から作業提案を生成し、作業提案が選択されれば、得られた装置機能説明書に説明された機能を使用する作業説明書に基づいて、選択された作業提案を行う。

本発明に係る家電製品上の作業を編成する方法及びシステムによれば、ユーザーが、機能の集合よりは作業を表現できるように許容することにより、作業が、その作業を行う一連の機能の動作を自動化するシステムに表現され、作業を一般的な方式で表現するように許容することにより、ユーザーが、使用可能な装置の機能により行われうる作業を表現でき、ユーザーに装置の機能を提示するものではなく、作業についての説明及び装置についての説明を作業提案の中に入れて、このような作業提案をユーザーに提示することにより、ユーザーが装置の機能について複雑な選択をする必要がなく、所望の作業を直接選択できる。

このような本発明の特徴、態様、及び長所は、以下の説明及び添付された特許請求の範囲及び添付された図面を参照すれば理解できる。

一実施形態において、本発明は、装置がネットワークにより相互連結された一般家庭での家電装置のような多様な装置の集合上で行われるユーザー作業を編成するシステムを提供する。ユーザー作業の編成とは、作業を行うために使用される装置を選択する過程を自動化することを意味する。一例において、これは、装置機能説明書及び作業説明書を獲得し、獲得された装置機能説明書及び作業説明書に基づいて作業提案を生成し、作業提案に順位を付けて、ユーザーがその作業提案の中で選択するように許容し、選択／要求された作業提案を行う装置を編成（自動化）することを含む。例えば、言及したように、作業提案は、互いに修飾する一連の要素／用語からなる疑似文章で記述されうる。

本発明は、ユーザー作業を、疑似文章を使用しつつも、人間が読み取れる増加的で、かつ弾力的な方式で表現することを許容する。それ自体として本発明は、説明書が装置の動作にどのようにマッピングされるかを定義せずに、その代わりに、作業動作をどのようにユーザーにより解釈される方式で表現するかについて集中する。疑似文章が内在された装置から離れた抽象階層を提供する。作業は、疑似文章を使用して、手で書いた落書を認識した記号が、実際のローマ字に近くなることと概して類似した方式で説明される（例えば、自然語と完全な筆記体の認識に比較されるユーザー作業の落書）。一具現例において、これは、簡単なプログラムが複雑な自然語の処理を経ずにも、ユーザー作業を決定できるように許容する。

作業編成は、装置に対するハイレベル、作業中心、遠距離制御として動作し、ユーザーをして選択及び設定を最小化せしめる。それ自体として、多様な技術の組合わせが、ユーザー作業の編成の自動化に適した編成システムを提供するところに使用される。

図１Ａ及び図１Ｂに示す構造の例を参照するに、本発明に係る作業編成システム１０は、ユーザー作業が、ユーザーからの最小限の入力により編成装置の動作の集合に自動化されるように許容する。一つのバージョンにおいては、作業編成システム１０は、三種類の論理装置から構成される。第一に、ユーザーインタフェースを示す装置を備えるクライアント装置２０であり、第二に、他の装置を制御する装置を備える制御器装置３０であり、第三に、制御器により制御される装置を備える制御される装置４０である。

それぞれの論理的装置は、本発明に係る作業編成を可能にする特定の機能を有する。具体的には、制御される装置４０は、セマンティックマークアップ言語のような言語を使用して、それらの機能についての強化された説明書を含む（これは、それらのインタフェースを説明するものではなく、その代わりに、それらの機能について抽象的に記述する）。また、装置の機能についての説明書に付加して、装置は、一つまたはそれ以上のユーザー作業の説明書を含み得る。作業説明書は、それらの機能を使用する作業のみを列挙するか、それらの機能及び他の装置の潜在的な機能を使用する作業を列挙するか、または、他の装置のための作業を列挙できる。

制御器装置３０は、作業編成（タスクオーケストレーション：ＴＯ）モジュール５０を含み、装置が、ユーザーが選択した作業提案（すなわち、作業要求）を行うように編成する機能を含む。制御接近ソフトウェアに付加して、制御器３０は、作業編成モジュール５０内に推論システム（例えば、専門家システム、規則システム等）を含むが、これは、作業要求を行うのに必要な一連の動作及び装置を推論できる。制御器３０は、作業及び装置機能説明書を獲得し、その情報を使用して（１）現在の装置、それらの機能及び説明された作業が与えられた状態で、何なる作業がシステムで有効なのか、及び（２）要求された作業を満たすために、何なる装置の組合わせらが使用されうるかを推論する。

クライアント装置２０は、作業提案をユーザーに要求及び表示できる機能を含む。それ自体として、作業をユーザーに表示するために、制御器３０の作業編成モジュール５０と連結されるユーザーインタフェースを含む。このような連結は、ユーザーインタフェース（例えば、ＧＵＩ（グラフィカルユーザインタフェース））が現在装置４０、作業及び機能が与えられた状態で可能な作業提案のみを表示させうる。さらに、作業提案の一部が形成された場合（すなわち、作業要求の一部が特定された場合）、ユーザーインタフェースは、制御器３０を使用して適用可能なユーザーオプションを縮小させうる。このような機能を使用して、クライアント装置２０は、利用可能な作業及びオプションを、疑似文章を使用して提示できる。作業提案は、ユーザーにより選択され、選択された作業提案を実行せよという要求は、選択／要求された作業を行うために、制御器３０により処理される。これにより、制御器３０は、簡潔化された方式で何なるユーザー作業が期待されるかを決定し、これを作業説明書と一致させて、結局、作業を完成するために、装置選択及び設定に一致させる。何なる部屋でビデオを再生するかのようなユーザーの選好度は、修飾語としての作業提案の疑似文章の一部として（例えば、疑似文章である‘寝室で’ビデオを再生せよ、または‘ヘッドホンを使用して’ビデオを再生せよ）特定される。作業提案を選択するためのこのような検索空間の部分（すなわち、疑似文章の利用可能な部分）は、以下で作業及び装置説明書を分離した家電を記述することにより更に説明される。

図２は、本発明に係る作業編成システム１０の機能構造の一例を示す図である。本発明による作業編成システム１０は、ユーザーインタフェース（ＧＵＩ）モジュール６０及び制御器３０を含み、制御器３０は、内在するクライアント装置４０の上位階層として作業編成モジュール５０を含む。制御器３０とクライアント装置４０との間のミドルウェア階層／モジュール７０は、装置を制御させる中間階層の機能（例えば、装置を制御するためのＡＰＩ等）を提供する。ミドルウェアモジュール７０の動作についての説明は、本発明の範囲を逸脱するものであるため、ここではその詳細な説明を省略する。

ユーザーインタフェース６０により、作業編成モジュール５０は、一群の家電装置４０により行われうる作業提案を提示及び表示する。それ自体として、作業編成モジュール５０は、そのような作業提案がどのように装置４０にマッピングされるかを隠し、ユーザーには作業提案のみを表示する。作業を増加的、かつ弾力的であり、また人間が読み取れる方式により作業提案として記述する方式が提供される。このような方法は、作業説明書９５がどのように装置４０の動作にマッピングされるかについて焦点を合せずに、その代わりに、作業動作をユーザーにより解釈されうる方式で表現することに焦点を合せる（例えば、作業提案に疑似文章の用語を使用する）。

以下、図３を参照するに、一例において、作業提案は、疑似文章を表す簡略化された言語構造２００により記述されうる。以下、説明の便宜のために、例示された構造は、互いに修飾する用語の集合から構成されており、この例では、動作を定義する‘動詞’の標準化された集合が、階層的な言語ツリー２００のルートとして使用される。例えば、“再生”、“表示”、“見る”、“調整”、“遣り水”などが‘動詞’の集合をなし、各‘動詞’の後には“写真”、“芝生”、“映画”のような‘主題語’が出てくる。‘主題語’は、‘動詞’により定義された動作の範囲を縮小させることにより‘動詞’を修飾する。

‘主題語’の後には、特定の動作の範囲を更に縮小させるインスタンスのような‘修飾語’の組合わせが出てくる。例えば、“再生”“映画”“マトリックス”は、特定のインスタンスとして“マトリックス”が付加された場合である。“洞窟で”または“午後８時に”のような他の‘修飾語’が作業を制御するために特定されうる。それだけでなく、他の修飾語が、映画“マトリックス”が保存されている媒体を特定できる。注意することは、この構造は、作業を特定し、装置の動作を特定するものではないということである。ボリュームやチャンネルを変更するような装置の動作は、ここでは作業として取り扱われずに、その代わりに、そのようなものは、存在する作業での動作となる（例えば、“ＴＶ”“見る”の途中にボリュームを変更）。このような構造２００での単語の組合わせは、特定の文脈（例えば、家庭で）について決まった用語の集合によるものではなく、装置４０に位置する作業の標準化された説明書により満たされる。このような装置は、現在、システム上で連結され、接近可能な装置に基づいて各レベルについての用語の集合及び可能な修飾語を生成するために検索される。このような接近方式は、ユーザー作業の特定を更に簡単化させうるが、これは、サイズは大きいながら特別な関係のない単語ベースは、正しい疑似文章を決定し難くするためである。

以下、図４に示す例示ダイヤグラムを参照するに、装置４０は、各レベル（すなわち、疑似文章での位置）での用語の集合、及び作業説明書９５のようなホームネットワーク８５で、現在、連結されたり接近可能な装置に基づいて可能な修飾語のために検索される。このような方式により、作業提案を特定することが簡単になるが、これは、そのようにしないと、関係がないが、サイズの大きい単語ベースが正しい疑似文章を決定し難くするためである。

本発明に係るこのような実施形態に対する改善は、他の用語または修飾語の現在選択に基づいて可能な用語または修飾語の集合のみを決定することである。例えば、もし、“再生”または“ＣＤプレーヤーで”が選択されれば、たとえ“再生”“ビデオ”の可能な作業であるとしても、ビデオは、ＣＤプレーヤーで再生できないため、システムで装置作業説明書に不適合になる。その代りに、もし、それのみが存在する装置４０に基づいて可能なオプションである場合、単に“音楽”のみがユーザーに提示される。

本発明に係るこのような実施形態に対する他の改善方法は、作業が部分的のみに特定されるように許容することである（例えば“再生”“音楽”“歌のタイトル”）。もし、複数の作業が一致すれば、ユーザーに対するオプションを決定することにより、作業がインスタンス化される。これは、ランダムな選択により、過去の要求に基づいた学習により、または、更に複雑な接近方法によって行われうる。このようにすることにより、少数のオプションが存在するか、または作業編成モジュール５０がこれまでのユーザー入力に基づいて、ユーザーに対する適した選択を決定できると分かる時、ユーザーが意思決定及びユーザーインタフェースオプションを減らし得るように許容する。また、作業編成モジュール５０は、使用可能な装置及び資源に基づいてそれらを決定できるため、可能なオプションを満たしうる。例えば、もし、たった一つの音楽装置（ＣＤプレーヤー）のみが存在すれば、部屋に対する修飾語及び装置に対する選択は、内在する機械自動化の部分での実行中には除去される。

したがって、本発明は、ユーザーをして、装置動作ではなく、作業を特定せしめ、応用プログラムまたは装置をして、それらが行う機能を特定させ、ユーザーインタフェースをして、存在するあらゆる作業ではなく、表現／実行可能な作業のみを検索させ、ユーザーが作業を速く表現できる標準化された語彙を提供し、簡潔なプログラムが複雑な自然語の処理を経ずにも、ユーザー作業を決定できるようにする。

言及したように、他の一態様において、本発明は、分離された作業説明書及び装置機能説明書を使用して家電装置を記述する方法を提供する。それ自体として、装置の相互作用は、装置機能説明書と抽象的な装置の相互作用とを使用して表現される。このような方法により、装置説明書（すなわち、装置機能）とユーザー作業（すなわち、装置使用）とが、豊かな説明書の集合に論理的に分離される。このような説明書を使用して、家電製品（家庭で使用される製品のような）の集合、及びそれらが相互作用する可能な方法の集合を記述することが可能となる。作業説明書及び装置説明書の複雑度に基づいて、複雑な順次、かつ併行的であり、共同作用できる相互作用が、家電装置がユーザー作業を行える機能を編成するために表現されうる。これにより、ブラックボックスとして作用する制御器プログラムよりは、弾力的な方式の説明書により説明される装置の相互動作、ユーザーが感じる家電装置の使用に対する構造に更に一致する装置の相互動作、相互作用を一つの装置のみに集中させない（すなわち、装置を作業に直接的にマッピングさせない）作業説明書、及び相互作用可能な説明書と説明書との交換を可能にする作業提案としてのユーザー作業の説明書を提供する。

図５を参照するに、一例において、家電製品４０の説明書３００は、ユーザー作業を表す作業説明書３１０と、装置の機能を表す装置説明書３２０という二つの論理的な説明書として提供される。このような説明書３１０、３２０は、作業提案が、制御器３０がホームネットワーク８５で、何なる装置４０が作業説明書３１０に基づいて作業提案を行うように使用可能なのかを理解できるように許容する方式により関連している。このようなタイプの説明書３１０は、多くの用途を有しているが、主に、作業がホームネットワーク８５の装置４０から分離されるように許容する。そして、作業が公知の現存する装置に対してあらかじめ決まり、あらかじめ定義された順序で、作業をプログラム的に行うブラックボックス制御器スタイルの応用プログラムから分離されるように許容する。

図５に示すように、作業説明書３１０は、（１）作業外部説明書３３０、（２）作業性質３４０、（３）作業機能３５０、そして（４）作業動作３６０の四つの部分を含む。作業外部説明書３３０は、疑似文章のアウトラインを提供する（注意することは、この例で図２の作業説明書９５と図５の作業説明書３３０とは同じであるという点である）。作業性質３４０は、作業に関する有用な情報を表現する（例えば、それは、ＤＶＤの再生時は、任意に照明を暗くしたり、特定ユーザーに対して、このような作業を使用できるように許容できる）。作業機能３５０は、作業が、その目標の達成に必要な機能を表現する。このような機能は、装置説明書３２０に使用された用語を共有して記述され、装置４０の機能を抽象的に記述する。例えば、ＤＶＤプレーヤーは、“ＡＶソース”と表現されうる。このような機能は、機能の階層構造として記述される。さらに、ＤＶＤプレーヤーが多機能動作の形態を有せば、ＡＶソースとして記述されうる。または、単にＤＶＤプレーヤーを記述する“ＡＶソース”のサブクラスである“ＤＶＤＡＶソース”と表現されうる。最後に、作業動作３６０は、配列された機能を行う装置の順序及び組合わせを記述する。

さらに、装置説明書３２０は、作業説明書と類似した構造を有し、機能説明書を共有する。装置説明書３２０は、機能３５０ａを含むことができ、ここで作業説明書３１０上の作業機能３５０は、装置説明書３２０上の機能３５０ａに対応する。機能３５０ａは、機能説明書３７０、装置基礎知識３８０及び装置属性（例えば、スクリーンサイズ、特徴など）を含み得る。機能説明書３７０は、装置４０の機能に対するアウトラインを提供する。例えば、ＣＤプレーヤーは、オーディオシンクであり、それに対し、超越コード（トランスコード）は、ＭＰＥＧオーディオシンク及びＭＰＥＧオーディオソースとしての機能を有しうる。装置基礎知識３８０は、機能説明書３８０に基づいて装置４０を制御する方法を説明する。例えば、ボリュームレベルを変更するか、または装置の連結を設定する動作のために呼び出されるＵＲＬ（ユニフォームリソースロケータ）を含み得る。択一的に、それは、装置を制御するために必要なＵＰＮＰ（ユニバーサルプラグアンドプレイ）の相互作用を表現することにより、ＵＰＮＰ装置を制御するための基礎知識を有しうる。当業者ならば認識できるように、また、他の装置制御プロトコルが活用されうる。

実行時に、作業説明書３１０及び装置説明書３２０は、作業編成モジュール５０により読み取り及び分析されて、作業機能３５０に一致する装置４０の集合が存在しているかを決定する。もし、存在すれば、作業編成モジュール５０は、その作業に一致する装置機能３５０をその作業に対する候補装置として定める。作業編成モジュール５０は、その次の使用可能な装置４０を反復的に検索して、作業機能３５０を成就できる装置４０の組合わせを決定する。このような検索で一致する作業／装置の組合わせの複数の集合が答として与えられ、ＧＵＩ ６０上に出力ソリューション７５としてユーザーに提示される。ユーザーは、自身が好む疑似文章を選択するが、これは、作業／装置の組合わせにマッピングされ、作業を成就するために、装置説明書３２０上の装置基礎知識３８０を使用する装置動作を順に要求する作業動作を使用することにより作業をインスタンス化する。

装置説明書３２０が、単に論理的のみに説明書３００上の作業説明書３１０と分離されているため、装置４０が、大きな作業に参加すると共に、作業説明としてその機能を記述することに何らの制限がなく、説明書は、物理的に結合され得る。大体の具現は、セマンティックウェブ技術を使用して装置説明書３２０及び作業説明書３１０を作成し、共有セマンティックオントロジー（言語）は、そのセマンティックが、機械が読み取れる形態にあらゆる装置及び作業の様相を豊かに記述できるように許容することである。以上の説明は、家電の側面で記述されたが、当業者ならば、本発明が、モバイル装置、デスクトップコンピュティング、企業コンピュティングなどの他の応用分野で使用されうることが認識できるであろう。

それ自体として、モジュール５０は、作業説明書と装置説明書とを結合して、装置が特定作業に使用されうるかを決定する。ユーザー作業を行うために、モジュール５０は、作業と装置説明書との結合上の情報を獲得して、装置の基礎知識を決定するが、ここで作業説明書は、モジュール５０が装置動作の編成に使用する動作スクリプトの順列を含む。さらに、モジュール５０は、複数の装置説明書からの基礎知識情報を作業説明書スクリプトと結合して、ユーザー作業のための装置を制御するための特定のスクリプトを生成する。装置基礎知識情報は、装置説明書からの機能に基づいて特定される。さらに、装置基礎知識情報は、装置の制御を決定するための相互作用及びパラメータ設定を特定する。装置基礎知識は、使用される動作及びパラメータを記述するＵＲＩ（ユニフォームリソースアイデンティファイヤ）の形態で特定されうる。さらに、装置基礎知識情報は、要求される機能を成就するために結合される複数の基礎知識情報セクションを含み得る。また、装置説明書は、制御器または装置ソフトウェアにより使用される他のプロトコルをマッピングする複数の基礎知識情報セクションを含み得る。

これからは、本発明の一実施形態によって、前記方法を使用して内在する装置４０の機能及び知能を強化する作業編成システム１０の具現例を説明する。図２に示すように、作業編成システム１０は、ユーザーが作業提案をシステム１０に要求する技術と、作業提案を解釈して処理する技術とを具現する。この実施形態で、意味的に豊かなマークアップ言語上の個体（例えば、装置）に対する発展中のオントロジーを含み、幾つかのセマンティックウェブ基盤のツール及び技術が、効率的なシステムを作るために適用される。オントロジーは、家電装置４０及びユーザー作業要求９５を表示するために構造化され、以下で更に詳細に説明される。

作業編成モジュール５０は、ユーザーに作業提案を提供し、ユーザーから、ユーザーが選択した作業提案の実行を編成せよという要求を受け入れる。作業編成モジュール５０は、ユーザーインタフェース（図２の６０）と結合して、最上位階層として推論エンジン（図１Ｂの６５）を使用して、選択された作業提案９５をパージングすることによりこれを処理し、選択された作業提案を行える適切な装置４０を発見し、この情報を行うための下方の階層（例えば、モジュール７０）に伝達する。一例において、推論エンジン６５と共に適したマークアップ言語が、その言語により表現された内容の推論に使用されるが、これにより各個体は、互いに通信及び理解する。一つのバージョンにおいて、セマンティック技術が、装置機能及び装置機能中心の結合を促進するための作業を記述するのに使用される。

例えば、ホームネットワーク４０上では、次のような装置４０のタイプが使用される。

ＴＶ−オーディオ／ビデオの表示
ＤＶＤ−オーディオ／ビデオの再生、写真の表示
ＰＣ−オーディオ／ビデオの表示、写真の表示、ゲームのプレイ、ＡＶソース
レシーバー−ソースをシンクに連結、オーディオのプレイ、ラジオのプレイ
冷蔵庫−ウェブサーフィン、オーディオ／ビデオのプレイ、制御
電灯−制御
電話機−オーディオのプレイ、ユーザーの呼び出し、ユーザーのデータベース
ＰＶＲ−オーディオ／ビデオの録音、中止、再生、写真の保存、写真の表示
カメラ−オーディオ／ビデオの録音、オーディオ／プレイの再生、オーディオ／ビデオのストリーミングの表示など
このようなホームネットワーク８５上で可能な作業の例としては、次のようなものを含む。

“遣り水”“庭園”
“再生”“映画”“マトリックス”“サラウンドサウンドで”
“表示”“写真”“ブラジル”
“同期化”“ＭＰ３プレーヤー”
“暗くする”“電灯”
“再生”“私の音楽”“居間”
前記のような例（シナリオ）は、例えば、作業提案を表現するための疑似文章言語を使用するが、それに対し、例えば、装置及び機能を説明するためにセマンティック言語が使用されてもよく、知識について推論し、作業要求を行うために推論エンジンが使用されてもよい。一例において、オントロジー／規則を表現するために選択された言語は、一致のセマンティックレベル、高度の弾力性及び表現力、タイプ及び抱き込み関係に対する支援、データタイプに対する支援及び制限の表現などを提供する。知識ベース１０５が、作業編成モジュール（図２の５０）に含まれる。

他の例において、セマンティックウェブ技術が、作業編成モジュール５０で活用されうる。セマンティックウェブは、情報の意味がよく定義されるように、現在のウェブを拡張させたものであり、コンピュータと人間とを更によく協力させる。セマンティックウェブのためにデザインされたマークアップ言語は、多様な個体間の共通的な理解を提供する。セマンティックウェブ技術の例としては、ＤＡＭＬ（ＤＡＲＰＡエージェントマークアップランゲージ）＋ＯＩＬ（オントロジーインフェレンスレーヤ）、ＤＡＭＬ−Ｓ、ＯＷＬ（オントロジーウェブランゲージ）などが含まれるが、これらは、セマンティックウェブのために開発された。作業編成モジュール５０の一例において、装置及び作業オントロジー１１０は、ＤＡＭＬ＋ＯＩＬを使用して構造化され、知識ベース１０５に積載される。装置４０の多様な属性及び機能が識別され、また、それらの属性の関係を捕捉したオントロジーが構造化される。さらに、ＤＡＭＬ＋ＯＩＬでの装置インスタンス１１５が、オントロジーに基づいて構造化されるが、ここで、インスタンスは、本質的にそのインタフェース及び機能の観点から見た装置の意味的な説明である。図１Ｂの作業編成の流れで図示するように、ユーザーが選択した作業提案は、要求されたところにより一つまたはそれ以上の作業に分けられ、使用可能な装置により行われうる作業の機能にマッピングされる。このマッピングは、オントロジー上に表現された情報を推論し、装置／ユーザーの状態／選好度に対して付加的な規則を適用することにより可能となる。

以下、図２及び図４の例を参照するに、作業編成モジュール５０は、必要な時にいつでも装置説明書を獲得できるように、装置編成モジュール５０にインタフェースを提供するモジュールと相互作用する制御器３０内に存在する。一実施形態で、存在する装置により提供されるＤＡＭＬ＋ＯＩＬ作業インスタンス１２０は、知識ベース１０５に表明され、ジェス法則及び／またはＤＡＭＬ＋ＯＩＬとして書かれた、あらかじめ定義されたユーザー選好度１３０が、また知識ベース１０５に積載される。さらに、要求された作業に対する装置選好度、及び作業に必要な機能に対する属性選好度が統合される。あらゆる可能な‘動詞’（例えば、“再生”）及び‘主題語’（例えば、“映画”）が、知識ベース１０５から検索されてＧＵＩ ６０上に表示される。

それ自体として、ユーザー作業要求は、ＧＵＩ ６０によりフィールド（例えば、図２の１３５）の集合として獲得され、作業編成モジュール５０の知識ベース１０５の入力として提供される。一例において、ユーザーから獲得された入力は、あらゆる選択フィールドを含む。他の例において、ユーザーから獲得された入力は、（ａ）必須フィールド：動詞、主題語及び内容、場所、端末装置、及び（ｂ）選択フィールド：属性（例えば、サラウンドサウンド、ワイドスクリーン等）を含む。

この例において、ユーザーが‘動詞’及び‘主題語’を選択した後、作業編成モジュール５０は、モジュール７０内のプロトコルスタックと通信して、‘主題語’の脈絡で関連した可能なあらゆる内容を獲得する。

ユーザーが選択した完全な作業提案を獲得すれば、作業編成モジュール５０は、作業提案及び対応する作業説明書９５をパージングし、要求に対するソリューションをサービスできる装置４０のあらゆる可能な組合わせを計算する。次いで、作業編成モジュール５０は、選好度を適用し、ソリューションに順位を付けた後、ＧＵＩ ６０にユーザーのための出力７５を表示するために伝送する。

言及したように、作業編成モジュール５０は、ＧＵＩ ６０によりユーザーと相互作用し、推論エンジン（図１Ｂの６５）と相互作用し、規則エンジン（図２の１３０）と相互作用する。作業編成モジュール５０は、その他にもオントロジーを事実の形態で保存し、そのデータに規則１３０を適用する知識ベース１０５を含む。

以下、図６を参照して、動作シナリオの一例を説明する。

１．ステップ４００で、初期化中に、装置及び作業オントロジー１１０が知識ベース１０５に表明されるが、ここでオントロジーの内容は、（‘性質値’‘サブクラス’‘人間’‘個人’）のフォーマットを有する事実に変換される。

２．ステップ４０５で、装置及び作業のインスタンス１１５、１２０が、また知識ベース１０５に表明される。この例では、オントロジー１１０がＴＶ、ＣＤプレーヤー、ＤＶＤプレーヤー、ＩＰＡＱ、スピーカー、トランスコーダなどのＡＶ（Ａｕｄｉｏ−Ｖｉｄｅｏ）装置に対して具現される。

３．ステップ４１０で、オントロジー１１０及びインスタンス１１５、１２０が積載された後、‘動詞’、‘動詞’と関連した‘主題語’及び装置４０により支援される‘作業’が、知識ベース１０５内の事実から抽出される。

４．ステップ４１５で、類似した方式で、前記で識別された作業を行うのに必要な‘機能’が、また知識ベース１０５内の事実から抽出されて、容易な検索のために新たな事実として保存される。

５．ステップ４２０で、ＧＵＩ ６０を使用して、ユーザーが、例えば、‘動詞’、その‘動詞’の脈絡と関連した‘主題語’及び関連内容（選択された主題語が属するカテゴリ）などを選択することにより作業提案９５を特定／選択する。ユーザーは、また、好む位置及び／または要求／選択された作業提案が行われる端末装置４０を特定できる。

６．ステップ４２５で、作業を行うために要求される装置の機能が識別される（好ましくは、このような情報は、あらかじめ計算されて容易に検出されうる事実として保存されて、このステップで所要される時間が長くてはならない）。

７．ステップ４３０で、作業編成モジュール５０は、必要な機能を有する装置４０をソリューションとして識別する。もし、作業が多様な機能を要求すれば、作業編成モジュール５０は、集合的にその作業を実行／サービスできる装置４０の集合を識別する。

８．ステップ４３５で、ユーザーが選択した作業提案を行える装置４０の集合を識別した後、ユーザー選好度１３０がソリューションの集合に適用され、順位が付けられる。

９．ステップ４４０で、ユーザーに、ソリューションの集合が出力７５として、それらの順位の増加順に表示される。ホームネットワークに対する順位の例としては、プラズマＴＶ、ＰＣ、スピーカー及びＩＰＡＱを備える家庭での居間である。ユーザーは、映画を再生する時、装置のスクリーンサイズを４０インチ以上にするか、オーディオを再生する時、ＩＰＡＱよりはスピーカーを好むという選好度を設定する。“映画マトリックスを居間で再生せよ”のような作業要求に対して、作業編成モジュール５０は、要求／選択された作業提案を行える次の装置の組合わせ（ソリューション）を識別する：ＰＣとスピーカー、ＰＣとＩＰＡＱ、そして、プラズマＴＶ。ソリューションは、前記のようなユーザー選好度によって順位が付けられ、（１）プラズマＴＶ、（２）ＰＣとスピーカー、（３）ＰＣとＩＰＡＱのようにユーザーに表示される。

ユーザーは、ソリューションのうちの最も好む装置４０の組合わせを選択し、作業動作を使用して作業をインスタンス化するが、作業動作は、作業を成就するために、装置説明書（図５の３２０）上の装置基礎知識３８０を使用する装置動作を順に要求する。言及したように、ユーザーが、要求された作業を行うために装置４０の集合を選択すれば、作業編成モジュール５０は、作業に要求される装置に適したインタフェースを呼び出す。

以下、図７のフローチャート上の各ステップを参照して、ユーザーインタフェースモジュール６０の実施形態での動作の例を説明する。ユーザーは、以下で説明するような四つのステップを経て、ＧＵＩモジュールを使用して作業要求を増加的に作成できる。

１．ステップ５００で、ＧＵＩ ６０上に有効な‘動詞’が表示される。ユーザーは、リストで‘動詞’を選択し、‘次へ’をクリックして、次のステップ（すなわち、ステップ５０５）に進みうる。‘次へ’をクリックする前には、ユーザーは、選択した‘動詞’をいつでも変更できる。

２．ステップ５０５で、選択された‘動詞’と関連したあらゆる‘主題語’のリストが、ＧＵＩ ６０上に表示される。ユーザーは、リストで‘主題語’を選択し、‘次へ’をクリックして、次のステップ（すなわち、ステップ５１０）に進みうる。‘次へ’をクリックする前には、ユーザーは、選択された‘主題語’をいつでも変更できる。また、ユーザーは、‘戻る’または‘始めに戻る’をクリックして、以前のステップ（すなわち、ステップ５００）に戻って、選択された‘動詞’を変更できる。

３．ステップ５１０で、選択された‘主題語’に関連したあらゆる‘内容’のリストが表示される。ユーザーは、リスト上で‘内容’を選択し、‘次へ’をクリックして、次のステップ（すなわち、ステップ５１５）に進み得る。‘次へ’をクリックする前に、ユーザーは、選択された‘内容’をいつでも変更できる。また、ユーザーは‘戻る’をクリックして、以前のステップ（すなわち、ステップ５０５）に戻って、選択された‘主題語’を変更するか、または‘始めに戻る’をクリックして、ステップ５００に戻って、選択された‘動詞’を変更できる。前記の過程のうち、あるステップで、またはステップ５１０の末端で、ユーザーは、作業実行の所望の位置を設定及び／または、全体作業または作業の一部を行う端末装置を設定できる。

４．ステップ５１５で、作業編成モジュール５０は、選択された‘動詞’、‘主題語’、‘内容’、ユーザー選好度（場所、ＧＵＩにより設定された最終端末、及び事実と規則とに特定された他の選好度など）、及び知識ベース１０５上に有している存在する装置及び作業に対する事実について内部的に推論する。推論後に、作業編成モジュール５０は、要請された作業を行える装置のあらゆる可能な組合わせ（すなわち、ソリューション）を決定する。得られたソリューションの集合は、作業編成モジュール５０の内部で順位が付けられ、ＧＵＩ ６０によりユーザーに表示される（例えば、順位の増加順に）。次いで、ステップ５１５での処理の例を説明する。作業編成モジュール５０は、作業及び装置説明書を読み取り、知識ベース１０５に、これらの情報を事実として保存する。推論エンジン６５は、作業及び装置説明書を解釈し、作業及び装置説明書に直接的に特定されてはいないが、クラスや特性の形態、または、それらの関係として特定されている新たな情報を導出する。作業編成モジュール５０は、その情報を加工及び操作する。

一例において、作業編成モジュール５０に関連した基本ステップは、以下のものを含む。

１．作業及び装置説明書を読み取る
２．作業及び装置説明書にセマンティックを適用する
３．パーザを使用して、知識ベース１０５に積載された作業及び装置説明書を変換する
４．前記で説明されたように、他の規則や質疑語を適用する
言及したように、オントロジー１１０は、作業、装置及びユーザー選好度を記述するためのメカニズムとして構造化される。一般的に、オントロジーとは、概念化の特定である。これは、概念の叙述（定型的なプログラムの特定）であり、個体（例えば、装置、ユーザー等）または個体の集合に対して存在しうる関係である。この例では、装置及び作業が、それらの基本属性／性質及び／または提供または要求される機能に基づいて記述される。説明書は、マークアップ言語を使用して符号化されるが、このような説明書に基づいて、ユーザーの作業要求が理解、処理、サービスされる。

さらに、‘機能＋内容タイプ’属性が、オントロジー１１０に含まれうる。オントロジー１１０の具現例において、装置４０が提供するそれぞれの機能に対し、何なる種類のデータが入力として許容されるか、何なるソースで装置４０が入力を受け入れるか、そして、何なる種類のデータが（存在する場合）出力として生成されるかが特定される。これは、非常に一般的であり、内容のタイプを特定していない要求に対する答として十分である。しかし、もし作業編成モジュール５０が、装置に対する内容タイプ基盤の索引を提供しようとすれば、内容タイプ（例えば、ｍｐ３ｒｅｎｄｅｒ）を、分離された属性ではないものとして含む機能を表現する方法が要求される。これは、‘機能＋内容タイプ’属性がオントロジー１１０に含まれることにより成就されうる。

また、ユーザー選好度１３０を表現するオントロジーが活用されうる。具現例で選好度１３０は、装置インスタンス１１５及び作業インスタンス１２０が特定されたものと類似した方式でマークアップ言語で表現されうる。このような説明書を、標準化された／一般的なフォーマットで作成し、選好度の集合の他の属性間の関係を更に良好に表現するために、ユーザー選好度のインスタンスが構造化されうることに基づいて、オントロジーが活用されうる。

また、選好度を理解するためのメカニズムも具現されうる。例として、作業編成モジュール５０は、“映画を再生する時には、スクリーンのサイズが更に大きな装置を選択せよ”のような選好度を理解できる。好ましくは、作業編成モジュール５０は、“プラズマＴＶが他種のＴＶより常に良く、スクリーンのサイズも最も大きい”ということが理解できる。また、さらに一般的なオントロジーが含まれうるが、これは、あらゆる種類の装置に適用され、さらには、具現当時には知られていない装置に対しても適用されうる。

以上の例は、家電及びホームネットワークに関連して説明されたが、当業者ならば、本発明がモバイル個人装置、デスクトップ作業、複雑な企業システムなどに適用されうることが理解できるであろう。さらに、本説明では、作業編成システムの実施形態が家電に関連して説明されたが、当業者は、本発明が、個体の知られた集合が作業と相互作用し、それらの個体にユーザー編成のための簡単な方法が必要な他の応用分野（例えば、多様な動作や組立ロボットの設定を特定するための生産ライン）でも有用であるということを認識できるであろう。さらに、論理的に装置と分離されているため、それらが実際の装置と物理的に結合され得ない理由が全くない。また、実施形態として一つの制御器／編成モジュールのみが説明されたが、装置の集合が制御動作や装置の編成を決定するのに影響を及ぼす。

本発明は、特定の最良のバージョンについて非常に詳細に説明された。しかし、他のバージョンも可能である。したがって、特許請求の思想や範囲が、これに含まれた最適のバージョンについての説明の範囲に制限されてはならない。

本発明は、電子装置の制御のためのユーザー作業に関連した技術分野に好適に適用され得る。

本発明に係る作業編成システムの一実施形態の構造の例を示すブロック図である。 図１Ａのシステムによる作業編成プロセスの例を示すフローチャートである。 本発明に係る作業編成モジュールを含む作業編成システムの他の一実施形態の構造の例を示すブロック図である。 図２のシステムでの疑似言語を使用した作業提案の例を示す図である。 図２のシステムでの作業提案を生成するために、装置から装置機能説明書を獲得することを示す図である。 本発明に係る作業説明書と装置説明書とを論理的に分離する例を示す図である。 作業提案を生成及び表示するステップの例を示すフローチャートである。 作業提案を表示してユーザーに選択させ、図２のシステムでの作業編成モジュールにより行うステップの例を示すフローチャートである。

符号の説明

１０ 作業編成システム
２０ クライアント装置
３０ 制御器装置
４０ 制御される装置
５０ 作業編成モジュール
５５ 装置制御モジュール

Claims (45)

1. （ａ）それぞれの装置が行える機能を説明する装置機能説明書を獲得するステップと、
   （ｂ）特定の作業が要求する装置機能を説明する作業説明書を獲得するステップと、
   （ｃ）前記獲得された作業説明書及び装置機能説明書に基づいて、ユーザー作業を、前記獲得された装置機能説明書及び作業説明書のうち、何れか一つまたはそれ以上の抽象化として表す作業提案を生成するステップと、
   （ｄ）前記作業提案をディスプレイ上に表示して、ユーザーをして一つまたはそれ以上の装置で行われる作業提案を選択せしめるステップと、
   （ｅ）前記作業説明書及び装置機能説明書を使用して、装置により行われうる作業と、選択された作業提案を行える装置との組合わせを推論するステップと、を含むことを特徴とする作業編成システムで複数の電子装置のうち、何れか一つまたはそれ以上の装置により行われるユーザー作業の作業編成方法。
2. 前記（ｅ）ステップは、
   前記作業説明書及び装置機能説明書に基づいて、装置により行われうる作業と、選択された作業提案を行える装置との組合わせを推論するために、推論エンジンを活用するステップを含むことを特徴とする請求項１に記載のユーザー作業の作業編成方法。
3. 前記（ｅ）ステップは、
   装置機能説明書を装置オントロジーとして構造化するステップと、
   作業説明書を作業オントロジーとして構造化するステップと、
   前記装置オントロジー及び作業オントロジーを使用して、ユーザーが選択した作業提案を、使用可能な装置により行われうる作業にマッピングさせるステップと、を含むことを特徴とする請求項１に記載のユーザー作業の作業編成方法。
4. 前記（ｅ）ステップは、
   装置機能説明書を装置オントロジーとして構造化するステップと、
   作業説明書を作業オントロジーとして構造化するステップと、
   前記装置オントロジーに基づいて、装置インスタンスを構造化するステップと、
   前記作業オントロジーに基づいて、作業インスタンスを構造化するステップと、
   前記装置及び作業オントロジーとインスタンスとを使用して、ユーザーが選択した作業提案を、使用可能な装置により行われうる作業にマッピングさせるステップとを含むことを特徴とする請求項１に記載のユーザー作業の作業編成方法。
5. 選択されたユーザー作業提案を行う装置の組合わせを制御するステップを更に含むことを特徴とする請求項１に記載のユーザー作業の作業編成方法。
6. 前記作業提案は、ユーザー作業を、前記獲得された装置機能説明書及び作業説明書の抽象化として説明する用語の集合から構成された言語構造を使用して表すことを特徴とする請求項１に記載のユーザー作業の作業編成方法。
7. 前記言語構造は、自然語に近く一致する形態として表すことを特徴とする請求項６に記載のユーザー作業の作業編成方法。
8. 前記用語は、作業提案の範囲を縮小させることを特徴とする請求項７に記載のユーザー作業の作業編成方法。
9. 前記作業提案を表示するステップは、
   装置により行われうる作業提案を表示するステップを更に含むことを特徴とする請求項７に記載のユーザー作業の作業編成方法。
10. 前記作業提案を表示するステップは、
    作業提案を表す前記用語を表示するステップと、
    ユーザーが作業提案を選択する時、ユーザーが選択した作業提案が使用可能な装置により行われうるように、ユーザーが用語を選択するように許容するステップとを含むことを特徴とする請求項７に記載のユーザー作業の作業編成方法。
11. 前記言語構造で、一つまたはそれ以上の用語が互いに修飾することを特徴とする請求項６に記載のユーザー作業の作業編成方法。
12. 修飾する用語は、他の用語の範囲を縮小させることを特徴とする請求項１１に記載のユーザー作業の作業編成方法。
13. 前記用語は、‘主題語’が‘動詞’を修飾する‘動詞’及び‘主題語’を含むことを特徴とする請求項１１に記載のユーザー作業の作業編成方法。
14. 前記‘動詞’は、ユーザー作業の動作を定義することを特徴とする請求項１３に記載のユーザー作業の作業編成方法。
15. 前記用語は、‘主題語’が‘動詞’を修飾し、‘修飾語’が‘主題語’を修飾する‘動詞’、‘主題語’及び‘修飾語’を含むことを特徴とする請求項１１に記載のユーザー作業の作業編成方法。
16. 装置が行える機能を説明する装置機能説明書を獲得し、特定の作業が要求する装置機能を説明する作業説明書を獲得し、前記獲得された作業説明書及び装置機能説明書に基づいて、ユーザー作業を、前記獲得された装置機能説明書及び作業説明書のうち、何れか一つまたはそれ以上の抽象化として表す作業提案を生成する作業駆動型の制御器と、
    前記作業提案をディスプレイ上に表示し、ユーザーをして、選択された作業提案が表すユーザー作業が、一つまたはそれ以上の装置で行われるように作業提案を選択せしめるユーザーインタフェース装置と、を備え、
    前記制御器は、前記作業説明書及び装置機能説明書を使用して、装置により行われうる作業と、選択されたユーザー作業提案を行える装置との組合わせを推論することを特徴とする相互連結された装置のネットワークに対する作業編成システム。
17. 前記制御器は、
    作業説明書及び装置機能説明書に基づいて、装置により行われうる作業と、選択されたユーザー作業提案を行える装置との組合わせを推論する推論エンジンを備えることを特徴とする請求項１６に記載の作業編成システム。
18. 前記制御器は、
    前記装置機能説明書を装置オントロジーとして構造化し、前記作業説明書を作業オントロジーとして構造化し、前記装置及び作業オントロジーを使用して、ユーザーが選択した作業提案を、使用可能な装置により行われうる作業にマッピングすることを特徴とする請求項１６に記載の作業編成システム。
19. 前記制御器は、
    前記装置機能説明書を装置オントロジーとして構造化し、前記作業説明書を作業オントロジーとして構造化し、前記装置オントロジーに基づいて装置インスタンスを構造化し、前記作業オントロジーに基づいて作業インスタンスを構造化し、前記装置及び作業オントロジーとインスタンスとを使用して、ユーザーが選択した作業提案を、使用可能な装置により行われうる作業にマッピングすることを特徴とする請求項１６に記載の作業編成システム。
20. 前記制御器は、
    選択されたユーザー作業提案を行う装置の組合わせを制御することを特徴とする請求項１６に記載の作業編成システム。
21. 前記ユーザーインタフェース装置は、
    前記制御器と連結して、使用可能な装置、作業及び装置機能が与えられた場合に可能な作業提案を表示することを特徴とする請求項１６に記載の作業編成システム。
22. 前記ユーザーインタフェース装置は、
    前記制御器と連結して、装置説明書に基づいて使用可能な作業提案及びオプションを表示することを特徴とする請求項１６に記載の作業編成システム。
23. 各作業説明書は、制御器が所望のユーザー作業を決定し、ユーザー作業説明書を、そのユーザー作業を行うための装置に対応させるために、装置が作業を制御器に表現するオントロジー言語で表現されることを特徴とする請求項１６に記載の作業編成システム。
24. 前記制御器は、前記作業を行うために、ユーザーインタフェース装置からユーザー選好度を獲得することを特徴とする請求項２３に記載の作業編成システム。
25. 前記制御器は、
    作業編成モジュールと、
    知識ベースと、を含み、
    前記装置機能説明書は、装置オントロジーとして構造化されて前記知識ベースに保存され、前記作業説明書は、作業オントロジーとして構造化されて前記知識ベースに保存され、前記作業編成モジュールは、前記選択された作業提案を、装置により行われうる作業にマッピングするために、知識ベースに保存された装置及び作業オントロジーを使用することを特徴とする請求項１６に記載の作業編成システム。
26. 前記制御器は、
    ユーザー作業を、装置機能の抽象化として記述する用語の言語構造を使用して作業提案を表すことにより、作業提案を生成することを特徴とする請求項１６に記載の作業編成システム。
27. 前記言語構造では、一つまたはそれ以上の用語が互いに修飾することを特徴とする請求項１６に記載の作業編成システム。
28. 修飾する用語は、他の用語の範囲を縮小させることを特徴とする請求項２７に記載の作業編成システム。
29. 前記ユーザーインタフェース装置は、
    前記作業提案を表す用語を表示し、ユーザーが作業提案を選択するに当って、ユーザーが選択した作業提案が、使用可能な装置により行われうるように、他の用語を修飾する用語を選択することを許容することを特徴とする請求項２８に記載の作業編成システム。
30. 前記作業提案は、ユーザーから装置の機能を隠すことを特徴とする請求項１６に記載の作業編成システム。
31. 前記装置は、家電製品を含むことを特徴とする請求項１６に記載の作業編成システム。
32. 装置機能説明書は、装置機能の説明及び装置の基礎知識を含むことを特徴とする請求項１６に記載の作業編成システム。
33. 前記装置機能の説明は、装置の機能についての概要を表すことを特徴とする請求項３２に記載の作業編成システム。
34. 前記装置の基礎知識は、前記装置機能の説明に基づいた装置の制御を記述することを特徴とする請求項３２に記載の作業編成システム。
35. 作業説明書は、相互作用する説明書と、説明書の相互交換を提供するセマンティックオントロジーとを含むことを特徴とする請求項３２に記載の作業編成システム。
36. 前記制御器は、
    装置の機能を、ユーザー作業を行うように編成するために、順次かつ併行的であり、共同作用できる装置の相互作用を活用することを特徴とする請求項３２に記載の作業編成システム。
37. 前記制御器は、
    作業説明書と装置説明書とを結合して、装置が特定作業のために使用されうるか否かを決定することを特徴とする請求項３２に記載の作業編成システム。
38. 前記制御器は、
    ユーザー作業を行うために、作業説明書と装置説明書との結合上の情報を獲得して、装置についての基礎知識を決定することを特徴とする請求項３２に記載の作業編成システム。
39. 作業説明書は、制御器が装置の動作を編成するために使用する動作スクリプトの列を含むことを特徴とする請求項３２に記載の作業編成システム。
40. 前記制御器は、複数の装置説明書からの基礎知識情報を作業説明書スクリプトと結合して、ユーザー作業のための装置を制御する特定のスクリプトを生成することを特徴とする請求項３９に記載の作業編成システム。
41. 装置基礎知識情報は、装置説明書からの機能に基づいて特定されることを特徴とする請求項３９に記載の作業編成システム。
42. 装置基礎知識情報は、装置の制御を決定するための相互作用とパラメータ設定とを特定することを特徴とする請求項３９に記載の作業編成システム。
43. 前記装置基礎知識は、使用するための作動及びパラメータを記述するために、ＵＲＩの形態で特定されることを特徴とする請求項４２に記載の作業編成システム。
44. 前記装置基礎知識情報は、結合されて要求される機能を行う複数の基礎知識情報セクションを含むことを特徴とする請求項４３に記載の作業編成システム。
45. 前記装置説明書は、制御または装置ソフトウェアにより使用される相異なるプロトコルにマッピングする複数の基礎知識情報セクションを含むことを特徴とする請求項３９に記載の作業編成システム。

Images