JP5205965B2 - コンピュータシステム、サーバー処理装置、端末装置及び方法 - Google Patents
コンピュータシステム、サーバー処理装置、端末装置及び方法 Download PDFInfo
- Publication number
- JP5205965B2 JP5205965B2 JP2007510963A JP2007510963A JP5205965B2 JP 5205965 B2 JP5205965 B2 JP 5205965B2 JP 2007510963 A JP2007510963 A JP 2007510963A JP 2007510963 A JP2007510963 A JP 2007510963A JP 5205965 B2 JP5205965 B2 JP 5205965B2
- Authority
- JP
- Japan
- Prior art keywords
- service
- services
- task
- user
- computer system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/465—Distributed object oriented systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
- G06F9/38—Concurrent instruction execution, e.g. pipeline, look ahead
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/46—Indexing scheme relating to G06F9/46
- G06F2209/462—Lookup
Description
例えば、オペレーティングシステムの一例として、ユーザが音楽CDをCDトレイに挿入すると、その時点からユーザが実行可能なタスクをユーザに示唆するウインドウがポップアップされる。これらの典型的な選択肢のリストは:
オーディオCDを再生すること
CDから音楽をコピーすること
ファイルを見るためにフォルダを開くこと
何の動作(アクション)も行わないこと
を含んでもよい。
スライドショーとして見る(表す)
オンライン印刷を要求する
画像を印刷する
画像を背景に設定する
画像をCDにコピーする。
(その人に)メールを送る
(その人と共に)ミーティングを計画する
(その人の)連絡先を開く
(その人に関する)連絡先を生成する。
機能はアプリケーションの中に設計される;アプリケーションのプログラマはシステムの応答を(固定的に)プログラムする。その結果、これはフレキシブルでスケーラブルな手法ではない。なぜなら可能性の広がりが設計時に決められているからである。
(1)図1に示されるように、機能に関するコンピュータシステムソース110に対するタスクインターフェースを用意する。タスクインターフェース130は、(1)タスクコンピューティングクライアント(TCC)119を有するプレゼンテーションプロセシングレイヤ104、(2)ミドルウエアサーバープロセシングレイヤ108(プレゼンテーションレイヤ104でのTCC119がタスクコンピューティング環境(TCE)ウェブサービスAPI106(例えば、STEER-WSAPI120及びPIPE-WSAPI122)のようなリモートプロシジャコールメカニズムAPI106とインターフェースをとる)に論理的にセグメント化されたタスクコンピューティングシステム(TCS)118を有する。API106は、プレゼンテーションプロセシングレイヤ104によりインターフェースされるミドルウエアサーバープロセシングレイヤ108を明らかにする。タスクインターフェース130も、サービス機能115を意味論的に記述するセマンティックサービス記述(SSD)116を有する。SSD116はTCC119を介してプレゼンテーションレイヤ104で示されるミドルウエアプロセシングレイヤ109によって発見され、サービス機能115は、例えば実行されるタスク126の一部として、用意された制御コマンドに従って、例えば、TCC119を介してプレゼンテーションレイヤ104で及び実行されるサービス機能115のSSD116に基づいて、ミドルウエアプロセシングレイヤ108により実行される。
セマンティックタスク実行エディタウェブサービス(STEER−WSTCCC)119aのような様々なウェブサービスタスクコンピューティングクライアント(WSTCC)119aの例が詳細に説明され、それはSTEER-WSAPI120に基づき、意味論的に記述されたサービス116を発見し及び実行可能なタスクに構成するソフトウエアである。WSTCS118のプレゼンテーションレイヤ104コンポーネント108のようなSTEER-WSTCC119aは、様々なコンピュータで実現されるユーザインターフェースを用意する。関連する米国特許出願番号第10/733,328号及び11/115,403号は、STEER-WS拡張(XT)TCC119a-1に関連するコンピュータ表示グラフィカルユーザインターフェース、移動電話のような無線装置で実施されるコンピュータ表示グラフィカルユーザインターフェースを説明しており、それらは移動電話STEER-WSTCC119a-2、STEER-WS空間情報システム(SIS)TCC119a-3、音声STEER-WSTCC119a-4及びタスクレット-WSTCC119a-5と呼ばれる。本発明の一実施例によるタスクレットWSTCC119a-5が以下に説明される。
図1Bは本発明の一実施例による、プレゼンテーションレイヤでのSTEER-WS-XTTCC119a-1によるコンピュータで実現されるタスクインターフェースとしてコンピュータに表示されたグラフィカルユーザインターフェース画像である。図1Bでは、コンピュータ表示グラフィカルユーザインターフェースウインドウ142は、発見されたサービス112ウインドウ(又は、発見プレーン)であり、そのウインドウは発見されたサービス112のアイコンツリー構造に従って表示される。ここで説明される実施形態によれば、サービス112は、(限定ではないが)、愛称(フレンドリネーム)、サービスタイプ、アルファベット順等のようなオントロジ及び/又は他の特性に基づく何らかのタイプのサービスカテゴリ階層に従って、発見サービスウインドウ内で組織される。コンピュータ表示グラフィカルユーザインターフェースウインドウ144はタスクウインドウ144(又はタスク126構造プレーン)であり、多数の入力/出力に関するサービス112の非線形サービス構造を収容するよう意図されたサービスグラフである。図1Bでは、タスクウインドウ144は、非限定的に、5つのサービス112を含むタスク126を表示する。特に、タスク126は「マイコンタクト112からホームアドレス122及びビジネスアドレス122へのルート112をマイプロジェクタ112で表示する」である。
(1)サービス112として全ての機能114,115の一様な抽象化。ここで説明されるように、タスクコンピューティング100では、ミドルウエアサーバープロセシングレイヤ108は意味論的に記述されたサービス112として全てのリソースを抽象化するよう機能する。意味論的に記述されたサービスは、(限定ではないが)WSDL(ウェブサービス記述言語)、UPnP(ユニバーサルプラグアンドプレイ)、CORBA、RMI、RPC、DCE、DCOMサービス機能115のようなリモートプロシジャコールを介して利用可能なサービス機能115であり、サービスを記述するための言語(例えば、OWL−S)におけるセマンティック記述(ファイル)116が指定される。そのようなセマンティック記述116を指定すると、指定されたオントロジはそのサービス116,115(112)が動作する領域について具体化される。オントロジに関し、ソフトウエアツールが、オントロジを作成するために、及び可能性のある存在する又は利用可能なオントロジが利用可能なときはいつでも使用可能である。OWL−Sサービス記述116は、サービス機能115の機能特性を表現し、その機能は例えば入力及び出力をセマンティックオブジェクトとして、及びオーナー、創作者、ロケーション等とサービス112に関して意味付ける。その記述は、実際のWSDL及び/又はUPnPサービスが適切に実行可能になるようにする基礎情報を含む。これらの記述を用意する際に、セマンタイザツール(限定ではないが、ここで説明及び/又は言及されたリアルワールドオブジェクトセマンタイザ119b-4、データベースセマンタイザ119b-5、インターナルサービスインスタンスクリエータ等)は、オントロジオブジェクトをWSDLパラメータにマッピングし、何らかの必要な基礎情報(基礎情報(グラウンディング)はXSLTスクリプトを介して表現される)を作成するのに使用される。ウェブサービスインターフェース106はミドルウエアサーバープロセシングレイヤ108用に用意され、それに基づいてプレゼンテーションクライアントプロセシングレイヤ104での直感的なタスク126ユーザインターフェースが用意される。
図2は本発明の一実施例によるSTEER-WSAPI120の定義リスト例を示す。図1A及び1Bでは、STEER-WSTCC119aはWSTCC119であり、サービス112を発見し、選別し、構成し、実行し、タスク126としてサービス112を保存するのに便利なユーザインターフェースをもたらす。STEER-WSAPI120は、TCE-WSAPI106であり、独立モジュールからタスクコンピューティング機能を抽出し、例えばSTEER-WSTCC119aのような何らかのWSTCC199によりアクセス可能な標準的なウェブサービスインターフェースとしてそれらを明確にする。
ここで説明される実施形態によれば、ウェブサービスインターフェース106のサポートとともに、タスクコンピューティングミドルウエアサーバープロセシングレイヤ108aは、ウェブサービスを介して他のタスクコンピューティングミドルウエアサーバープロセシングレイヤ108nにアクセスすることで、環境間での発見及び実行手段に関する「スフェアオブマネジメント(sphere of management)」−領域管理−の新たな概念を導入できる。クロス環境発見及び実行に関する一群のTCE-WSAPI106は、例えばSTEER-WSAPI120及びPIPE-WSAPI122の部分集合であり、「スフェアオブマネジメント(SoM)-WSAPI」123と言及される。従ってSoM-WSAPI123はリモートサービス112を管理(提供)するのに使用される。「クロス環境(cross environment)」はここでは一般にコンピュータシステムネットワーク属性を考慮に入れることに関連し、異なる又は他のネットワーク環境(例えば、プライベートネットワーク、仮想的プライベートネトワーク、サブネット、イントラネット等)として複数のサブネットワーク110a-nが既存の技術に基づいて互いに通信を行い、各コンピュータネットワーク環境は機能110のソース又はコンピュータネトワークサービス(即ち、機能ソース実現レイヤ114及びサービスレイヤ112)を有し、それらはタスクコンピューティング環境100の一部として発見可能且つ実行可能である。
executeService
filterServiceByProperties
findAllService
getServiceDescription
queryByRDQL。
1.その実行が完了しているならば、(DONE)−完了−メッセージが返される。そしてSTEERクライアント3は、リファレンスidを用意することで出力を検索するために、他のウェブサービスインスタンス120を利用することができる。
1.名称(選択的)
2.ターゲットPIPE-WSAPI122のURL
3.プロキシURL(ウェブサービスコール及びUIコントロールに使用)(選択的)
4.ウェブサービスコールでオブジェクトを利用するためのオプション
ホワイトホール119b-1GUI設定パラメータ:
1.GUIオプション表示
2.GUIの色
3.GUIのアイコン画像
4.グループ化された又は独立のGUI。
STEER-WSAPI120及びPIPE-WSAPI122の実行は、WSTCC119に対して多種多様なタスクコンピューティング100ユーザインターフェース104を提供可能にする。なぜなら、WSTCC199のプレゼンテーションプロセシングレイヤ104は、タスクコンピューティングミドルウエアサーバープロセシングレイヤ108のモジュールの実行から解放可能だからである。WSTCC119の一例のユーザインターフェース104が、(1)無線装置ユーザインターフェース、(2)ロケーション(位置)認識アイコン(例えば、バルーン)コンピュータディスプレイスクリーングラフィカルユーザインターフェース、(3)音声コマンドユーザインターフェース、(4)マルチ入力/出力のユーザインターフェース及び(5)タスクレットWSTCC199a-5に関して説明される。タスクコンピューティング100システム環境は上述のユーザインターフェース104の如何なる組み合わせを用意してもよい。
図8は本発明の一実施例によるサービス112を管理するための移動電話ディスプレイ画面ユーザインターフェースを示す図である。より具体的には図8はサービス112の発見、構成、実行、保存、生成及び他のサービス112管理関連動作のようなタスクコンピューティングの中核的機能を管理するための移動電話ディスプレイスクリーンユーザインタフェース画像を示す。上述したように、ここでは「サービス」は利用可能なコンピュータシステム(ネットワーク化された、ネットワーク化されていない、又は双方を含むシステム)のサービス又は機能110のソースに関連する(即ち、「サービス」112はここではコンピュータ装置、コンピュータアプリケーション/ソフトウエア、電子サービス及びコンピュータで(マシンで又は双方で)読み取り可能な内容の領域の中での機能の演算の具体化に関連する。)。移動電話のユーザナビゲーションユーザインターフェースは、既知の入力装置/デバイス(例えば、音声コマンド/制御用のマイクロフォン、キーボード/キーパッド、ポインティングデバイス(例えば、マウス、ポインタ、スタイラス)、タッチスクリーン等)及び出力装置/デバイス(例えば、コンピュータディスプレイスクリーン、スピーカ、プリンタ等)に従ってよい。
図9は本発明の一実施例による、コンピュータディスプレイスクリーンロケーション認識バルーングラフィカルユーザインターフェースの画面を示す。特に、図9はSTEER-WS-SISTCC119a-3と呼ばれるSTEER-WSTCC119aのGUI例である。コンピュータ表示のグラフィカルユーザインターフェースにおけるSTEER-WS-SISTCC119a-3は、(限定ではないが)ユーザが在圏する周囲領域のような或る領域の空間的画像を表示し、表示されたユーザ領域の画像は、そのユーザ領域内で発見されるサービス112の選択可能なグラフィカルディスプレイ表現と重ねられる。
1.同じコンピュータディスプレイスクリーンの視覚的要素(即ち、アイコン)により、同じタイプの視覚的要素であるが異なるスタイル(色、サイズ、フォント等)で、又は(場合によっては)各サービス112について異なる視覚的要素で、サービス112は表示される。図9では異なるサイズ及び色の「バルーン」に関連する視覚的要素が使用されている。
図10は本発明の一実施例による、タスクコンピューティング音声認識の状態遷移図である。スピーチ(話)はパーバシブコンピューティング環境では非常に重要なユーザインターフェースになり、キーボードやキーパッドのような既存の入力手段が利用できない又は便利でないような大きさの制限されたユーザクライアント装置の場合に、及び/又は車両の運転中のようにユーザが視覚的な注意を向ける余裕が無い場合に特に重要になる。ここで説明される実施形態によれば、VoiceSTEER-WSTCC119a-4が作成され、WSタスクコンピューティングクライアント(WSTCC)119では、タスクコンピューティング100と共に機能するように、指示を与えるのに音声が使用され、例えばタスク126としてサービス112の構成を直接的に実行する。タスクコンピューティング100では、サービス112構成は、自然言語に従ってサービス112の名称を定義することでセンテンス構造と匹敵するように設計され、その構成はスピーチ認識システムで処理可能な自然言語センテンスを作成し;即ち、サービス112の構成は図10に示されるようにスピーチ認識ステートグラマーダイアグラム(grammar diagram)にマッピング可能である。
1.サービス名112
2.VoiceSTEER-WSTCC119a-4に対するタスクコンピューティングコマンド(例えば、“サービスを示す(show services)”又は“タスクコンピューティングを去る(leave Task Computing)”)
3.クライアントオペレーションコマンド(例えば、“上に移動(Move up)”、“XXXをクリック(Click XXX)”(XXXはボタン名))
4.ウェブページコマンド(例えば、ウェブページで第4の制御を行うための“Click4”)
5.文字及び桁(例えば、入力情報として使用する“a”又は“9”)。
Computer, View on Projector (the) Web Page of (the) Manager of (the) Task Computing Project。
Computer, View on Projector (the) Weather Info of My Contact。
Do you want to (1) “View on Projector Weather Info of Business Address of My Contact” or (2) “View on Projector Weather Info of Home Address of My Contact ?”。
“Fax”サービス112がファクシミリ番号及びファイルを入力として取得するように、あるサービスは複数の入力を有する。本発明の一形態によれば、STEER-WSTCC119は再帰的な方法でタスク126の実行中にユーザからの入力もれを確認する。例えば、タスクコンピューティングのコンピュータ及びユーザ間で以下の対話がなされてもよい。
VoiceSTEER-WSTCC119a-4コンピュータを制御し、実行前に及び/又は実行中に、更に多くの入力をユーザに催促する。これは、複雑なサービス112構成ダイアグラムを空間的にユーザインタラクションにマッピングするように考えることもでき、そのインタラクションはユーザ及びコンピュータ間の一時的な区間である。
タスクレットWSTCC199a-5は非常に処理負担の軽いタスクコンピューティングクライアント(TCC)119であり、サービスのOWL-Sファイル又はサービス構成(タスク126)を実行する。特にコマンドラインを含むOWL-Sファイルを実行するタスクレットTCCの作成法に関し、好ましい手法は、実行されるOWL-Sファイルをダブルクリックし(又は他の何らかの適切なOS操作を行うことで)タスクレットTCCを起動することである。タスクレットTCCがOWL-Sファイルを読み込む場合に、STEER-WSAPI120を用いることでサービス又はサービス構成を実行する。タスクレットTCCは自身のウインドウ内でサービス機能115の制御UIを示してもよい。特に図2を参照すると、タスクレットTCC119a-5はOWL-S記述を実行するための“executeOWLS”API120を呼び出す。
(1)緩和されたサービスタイプ入力、(2)サービス112のロケーション、(3)マルチ言語サービス112及び(4)サービス112管理機能のような有利な特徴が、様々なサービス112をサポートするセマンティックサービス記述116で以下のようにもたらされる。
あるサービス112は、僅かな部分(サブセット)を除いて広範囲にわたる入力を受け入れる。例えば、サービス“プロジェクタでの表示(View on Projector)”112は、オーディオファイル及びビデオファイルを除くファイルを機能属性として受け入れ、オーディオファイル及びビデオファイルはファイルのサブセットをなす。“View on Projector”の入力が(ファイル−オーディオファイル−ビデオファイル)のように表現される場合、別の新たな問題に遭遇する。即ち、“マイファイル(My File)”のような別のサービス112がファイルを出力として生成する場合、推論エンジンは、構成され得る2つのサービス112が存在することが分からない。
1.Tiが緩和タイプTのサブセットである場合
2.TiとパラメータタイプTpとの交わりがヌル(null)である場合。
セマンティックサービス記述116にロケーション情報を含めることは別の新たな特徴である。ロケーション情報は、2D−、3D−ユークリッド座標系又は他の如何なる座標系の座標、座標系についてのリファレンス、及び/又は場所についてのテキスト記述で構成可能である。場所に関連する“View on Projector”のセマンティックサービス記述例116の一部は次のとおりである:
ここで説明されるタスクコンピューティング100の例は、如何なる通信言語をもサポートし、言語によらないタスクコンピューティング100をもたらす。通信言語は限定ではないが英語、中国語(簡体)、中国語(繁体)、ギリシア語、ヒンズー語、日本語、韓国語、スペイン語及びトルコ語等で話される言語である。言語によらない手順は2つの動作を含む:1.サービス112の名称/記述のようなサービス112(115,116(プロファイル及び2.ユーザインターフェース。
サービス管理機能(SMF)はサービス112のメタサービス(meta-service)として表示可能である。SMFはサービス112に起因して存在するが、逆は成立しない。サービス112がなくなれば、サービス112のSMFもなくなるべきである。SMF各々はOWL-Sで書かれた自身の記述を有する。従ってSFMをサービス112にリンクするために、サービスのSSD116はSMF記述を含んでもよいし、或いはSFM記述へのリンクを含んでもよい。後者の場合、SFM記述はどこにあってもよい。同様に、SFMの実現手段はどこにでも展開可能であり、サービス自体と同じ装置にあることは必須でない。
1.処分(Destroy)、起動されるとそのサービスが破壊される。
1.Destroy Tablet-PC.ppt
2.Handled Object of View on Projector
3.View Locally Control UI of Play(Audio)
4.Is Alive Bank?
5.Location of Play(Audio)
以下のようにユーザは他のサービス112と共にSMFの結果を構成することができる。
2.“View Locally” “Control UI of View on Projector”
3.“View on Kiosk” “L-Note of Location of Play(Audio)”。
図13は本発明の一実施例によるサービス112アクセス制御のフローチャートである。パーバシブコンピューティング環境では、全てのユーザに対しては解放されていない又は開かれるべきでない何らかのサービス112が存在する。サービス112に関するそのような種類のアクセス制御手段を利用することが重要である。ここで説明される本発明の一形態によれば、(1)共有ポリシ及びデリゲーション、及び(2)SSD116を介するタスクコンピューティングクライアントによるサービス認証を含む、サービス112のアクセス制御が説明される。
主にサービスに関する上記の説明は、クライアント(おそらくは、認証を行う認証当局により発行されたディジタル署名を介して認証される)、そのポリシ及びオントロジにより用意されたファクトを介してクライアント119のアクセス権を決定する。
サービスがクライアントを認証することを望む場合が全てではない。しばしばクライアントはサービスを認証すること又はそのクライアントがサービスを実行する権利を有するか否かを事前に確認することを希望する。事前に確認可能ならば、サービスがアクセス可能でないこと又はそのユーザからアクセス可能でないサービスを隠すよう決定することをクライアントはユーザに予告する。
前もってユーザはタスクコンピューティングクライアントを用いる前にソフトウエアをインストールしなければならない。それは時間がかかり、タスクコンピューティングを採用するユーザの障害となることが間々ある。その問題の解決法は持ち運び可能な又は取り外し可能な媒体又は装置(例えば、CDや、UBSフラッシュメモリ)を用意することであり、如何なるインストレーションもなしにユーザがタスクコンピューティングを用いてスタートできるように、タスクコンピューティングクライアント119だけでなく、ジャバランタイムなどのような実行環境をも含むものである。
図15は本発明の一実施例によるリアルワールドオブジェクトセマンタイザクライアント119b-3のアーキテクチャを示す機能ブロック図である。リアルワールドオブジェクトセマンタイザクライアント119b-3は書籍のような現実世界の対象物から意味論的オブジェクトを用意する。それは1以上の現実世界の対象物から1以上の意味論的オブジェクトを、1以上の現実世界のオブジェクトから多くの意味論的オブジェクトを生成してよい。ホワイトホール119b-1及びPIPE-WSAPI122に関して説明されたように、意味論的オブジェクトが生成/作成されると、管理ツール124に対するPIPE-WSAPI122は生成された意味論的オブジェクトに対してSSD116を生成するよう使用可能であり、その意味論的オブジェクトを、発見及び構成するサービス112にすることを許可する。リアルワールドオブジェクトセマンタイザに使用する可能性のある技術は、(限定ではないが)パーバシブ及び/又はアクティブ無線周波数識別(RFID)タグ、バーコード、QRコード<http://www.qrcode.com>、日本で多く使用されている2次元コード、限定された用語及び文法と共に又はそれらによらない音声認識、視覚的な及び/又はジェスチャーによる認識、又はそれらの如何なる組み合わせを含んでよい。
認識エンジン1502はタグ、コード、音声、映像、ジェスチャー等を認識する。認識プロセスはアクティブ(即ち、常にオンであり且つ自身の所有するオブジェクトを認識している)でもよいし、パッシブ(ユーザ又はプログラムからのトリガを受ける)でもよい。タグ及びコードに関しては、適切なリーダが認識エンジン1502として使用され;音声/表示/ジェスチャーに関しては、対応するマルチメディア入力の認識エンジン1502が使用される。ある認識エンジンは通常は誤りがちである。しかしながら、特定用途向けにデータパターンについて何からの制約を与えることで、認識率を向上させてもよい。例えば、音声認識の場合に、使用される文法及び用語を制限してもよい。認識率が低かった場合に、認識エンジンによる付加的な確認プロセスを用いることで、システムの全体的な認識率を改善することを支援してもよい。例えばユーザは音声認識ベースのリアルワールドオブジェクトセマンタイザクライアント119b-3に以下のタスク126を命令してもよい。
(ユーザ)コンピュータ、タイトルが“INTRODUCING MICROSOFT.NET THIRD EDITION”の書籍を私に用意して下さい。
(ユーザ)そうです。
認識エンジン1502からわたされた情報により、セマンタイザプロセス1504は先ず対応するオブジェクトに関する情報を見つけようとする。例えば、RFIDの場合、そのRFIDタグと同行するオブジェクトに関するローカルな又はリモートのデータベース1508と相談してもよい。次に、セマンタイザプロセス1504はセマンティックオブジェクトを生成する。例えば、認識エンジン1502から取得したISBN番号に基づいてローカルな又はリモートのデータベース1508と相談することで、“書籍(book)”のセマンティックオブジェクトが生成される。図15では破線枠は「パッシブな」(受動的な)モードの場合であることを示し、現実世界のオブジェクトの認識はユーザによるトリガを受ける。或いは、認識エンジン1502及びセマンタイザプロセス1504は、物理的な対象物のセマンティックオブジェクトを得るために、外部モジュール1510用のAPIを介して外部モジュール510により呼び出されてもよい。
公表部はそれらのセマンティックオブジェクトを、サービスを提供するセマンティックオブジェクトとして用意する。単独のセマンティックオブジェクトがセマンタイザにより用意される場合には、サービスを提供するシングルセマンティックオブジェクトを公表する。また、複数のオブジェクトが与えられている場合にはサービスを提供する複数のセマンティックオブジェクトを公表する。また、場合によっては、1つのサービスは、ユーザに1以上のセマンティックオブジェクトをユーザインターフェースにより複数のオブジェクトの中から選択させる。また、それらの方法が組み合わせられてもよい。公表手段に関し、PIPEWSAPI122が使用されてもよい。
多くのフォーマットされたデータは今日リレーショナルデータベースに格納される。データベースセマンタイザは、RDFで又はより具体的にはOWLで、そのデータベースからのデータをセマンティックオブジェクトとして利用可能にする。より具体的にはデータベースセマンタイザ119b-4は半構造(semi-structured)テキストデータを処理する。典型的には、本発明によれば、データベースセマンタイザは2つの主要モジュールより成り、1つ目はデータベースの手法及びオントロジ間のマッピング(対応関係)を作成するユーザインターフェースであり、2つ目は上記のマッピングに基づいてデータベースからセマンティックオブジェクトを提供するセマンティックサービスプロセスである。
ディレクトリ公表サービスと同様に、メディア公表サービスはユーザがファイル(オーディオ、ビデオ又はイメージ)を装置から選択し、対応するセマンティックインスタンスを取得することを可能にする。しかしながらサービスがどのように開始されるかについての手法は異なる。ユーザが装置(例えば、メモリ装置、ディジタルカメラ、CD-ROM、DVD-ROM又は外部ハードドライブ)にプラグインすると、プログラムが開始され、その装置にファイル(オーディオファイル、ビデオファイル又はイメージファイル等)が有るか否かを確認する。もしも有れば、ダイアログボックスが現れてユーザがそれらを公表することを希望するか否かを尋ねる。公表するようにユーザが決定すると、新たなサービスが生成される。
図16Aは本発明の一実施例によるオブジェクト及びサービスの意味論的処理、サービス処理及び公表に関する手順を示す。図16Aではホワイトホール119b-1はPIPE-WSAPI122(管理ツール124)を利用し、サービスの動的な生成(サービス公表)及びそれらの普及(共有)をサポートする。このツールはオブジェクト及びサービスを意味論的に処理し、サービス処理し及び(情報を)公表するために使用される。ホワイトホールクライアント119b-1はオペレーティングシステム又はアプリケーションオブジェクト(例えば、OSによるファイル、PIMアプリケーションのコンタクト等)、OWLフォーマット(又はOWLファイルへのURL)のセマンティックオブジェクト、及びOWL-Sフォーマット(又はOWL-SファイルへのURL)のセマンティックサービス記述に関する便利なドラッグアンドドロップインターフェースを有する。
1.探索範囲の切替:ユーザは、例えばサービスを一時的に「保持(hold)」するために(エンプティ−empty−探索範囲)、PIPE-WSAPI122を介して公表したサービス用の探索範囲を切り替えることができる。
新規サービス112が設計及び実行され、そのサービスは(1)セマンティックインスタンスシリアライズサービス、(2)情報提供サービス、(3)センササービス(限定ではないが、時間、関連する天候、温度及び/又は検知可能な如何なるもの等)、(4)スナップショットサービス、(5)OWLフォーマッターサービス及び(6)テキストフォーマッターサービスを含む。
このカテゴリのサービスは如何なるタイプのセマンティックインスタンスをも消費し、それらを順に並べ、その情報をユーザに伝える。一例は、「テルミー(Tell Me)」である。これはセマンティックインスタンスを取り出し、それを人が理解できる文字列に並べ、それを読み出す。「Tell Me」サービスの詳細は後述される。
「企業1、都市名」の「アドレス」は、「1000例示的アベニュー、都市名、州、郵便番号、国名」になる(“Company-1,City Name”の“Address”は、“1000Example Avenue, City Name, State, Zip Code Number, Country Name”になる。)。
「アドレス」、「企業1、都市名」は「1000例示的アベニュー」を「ストリートアドレス」として、「都市名」を「都市」として、「州名」を「州」として、「郵便番号」を「ジップコード」として、及び「国名」を「国」として有する。(“Address”,“Company-1,City Name”は、“1000Example Avenue”を“Street Address”として、“City Name”を“City”として、“State Name”を“State”として、“Zip Code Number”を“Zip Code”として、“Country Name”を“Country”として有する。)。
コンピュータ、“温度”を“私に教えてください”?(Computer,“Tell Me”(the)“Temperature”?)
コンピュータ、“温度”は何度ですか?(Computer,“What is”(the)“Temperature”?)
サービスは他の名称を有することもでき、特定の種類のオブジェクトを受け入れ、そのサービスがタスクコンピューティングクライアントの自動変換サービス挿入手段と組み合わせ可能であるように形成されてもよい。例えば“Where is”を、“Location”オブジェクトを受け入れる別名の“Tell Me”サービスとする。“Commander Data”というサービス(サービスのロケーションを含むコマンダーデータの“Contact”情報を与えるサービス)と、“Location of”というサービス(“Contact”から“Location”を抽出するサービス)があるとする。この場合、VoiceSTEERに対して次のように言うことができる。
そして、“Location of”サービスは自動的に挿入され、“Commander Data”、“Location of”、“Where is”というサービス構成が実行され、コマンダーデータのロケーションが読み出される。また、次のように言うこともできる。
(Computer,“Tell Me”(The)“Location of”“Commander Data”?)
コンピュータ、“コマンダーデータ”“のロケーション”“はどこですか”?
(Computer,“What is”(The)“Location of”“Commander Data”?)
サービスが特定の種類のオブジェクトを受け入れるにすることで、サービスがセマンティックサービスのサービス管理機能と共に合成可能であるようにすることもできる。例えば、“Where is”が“Tell Me”サービスであるとする。“View on Projector”サービスはSSD中のロケーション情報を提供するものとする。この場合、VoiceSTEERに対して次のように尋ねることができる。
(Computer,“Where is”“View on Projector”?)
そして、“Location of”サービス管理機能(サービス管理機能の詳細は以下で更に詳細に説明される。)は“Where is”及び“View on Projector”の間に自動的に追加される。
(Computer,“Tell Me”(The)“Location of”“View on Projector”?)
コンピュータ、“プロジェクタに表示”“のロケーション”“はどこですか”?
(Computer,“What is”(The)“Location of”“View on Projector”?)
“Tell Me”サービスが最も有用なVoiceSTEERの利用状況で説明されるとしても、それは如何なるタスクコンピューティングクライアントと共に使用可能である。
情報提供サービスは入力を一切とらず、一旦起動されると、セマンティックインスタンスを出力として生成する。情報提供サービス及びインスタンス提供サービスの間の相違は、情報提供サービスで生成されるインスタンスは刻々と時間毎に異なるが、インスタンス提供サービスにより生成されるものは常に同じであることである。情報提供サービスのいくつかの具体例は、温度サービス、時間及びデータサービス等である。
スナップショットサービスは、起動後に、ディジタルカメラ、ディジタルビデオカメラ、スキャナ等のような画像処理装置から静止画を捕捉し、“画像”セマンティックオブジェクトを返す。
OWLフォーマッターサービスはその入力としてセマンティックオブジェクトを受け入れ、それらを人が理解可能な形式にフォーマットし、それを出力として返す。現在の技法における1つの例では、それらのオブジェクトの記述に使用されるオントロジを用いてHTMLのテーブルフォーマット中のセマンティックオブジェクトをフォーマットし、HTML自身を又はそれらに対するURLを返す。
テキストフォーマッターサービスは入力としてセマンティックオブジェクトを受け入れ、それらを所定のテキストフォーマットの1つに変換し、テキストファイルとして保存し、それに何らかのファイル等を付ける。例えば、テキストフォーマッターサービスは“Book”セマンティックオブジェクトを受け入れ、それをBibTeXフォーマットに変換し、それをユーザ自身のBibTeXファイルに付けることができる。或いは、“プロテイン(Protein)”のような生体情報オブジェクトは、他のテキストフォーマッターサービスによるブラストアプリケーションにより使用されるフォーマットにも変換可能である。
図17は本発明の一実施例によるインターナル(内部)サービスと共にSTEER-TCC-119のコンピュータディスプレイスクリーングラフィカルユーザインターフェースの画像を示す。インターナルサービスは、タスクコンピューティングクライアント119(STEER TCC、ホワイトホール、サービスマネジャ等)と共に緊密に結束されたサービスである。サービスは特殊な方法でTCC119内で処理されるので、インターナルサービスは、たとえそれらが何らかの特定の発見手段によって発見されなかったとしても、クライアントのGUIのどこにでも登場できるように形成可能である。
図17には、「インスタンスクリエータ」1602の選択可能な図形表示が示されている。インスタンス作成サービスは、オントロジに基づいて如何なるセマンティックタイプについてでも対話インターフェースを生成し、ユーザがそのタイプのセマンティックインスタンスをそのインターフェースにより作成可能にするサービスである。これは、ユーザが入力と共にサービスを検査することを希望するが、そのタイプの入力を提供するサービスを一切有しない場合に特に有利である。インスタンス作成サービスは、入力をとるどのサービスの前にも置くことができる。インスタンス作成サービスの出力タイプは、以後のサービスの入力タイプと同じである。
コピーサービスは実行シーケンス中の2つのサービス間に置かれる。実行フローのその時点で、出力に対する入力を複製し、それ以外に何もしない。それは主に、複数のサービスに複製された構成に対するいくつかの入力と共に、その構成を保存するのに使用される。コピーがなければ、保存された構成は厳密に同じであるべき複数の入力を必要とする。コピーがあれば、保存された構成は唯1つの入力だけしか有しなくてよい。保存された構成内では、インスタンスコピーは第1サービスとして入力を受け入れ、以後その入力は構成の中で複数のサービスに複製される。コピーの入力及び出力のタイプは以前のサービスの出力タイプと同じである。
インターセプタサービスは実行シーケンスの2つのサービス間に置かれる。それが挿入されると、実行フロー中のその地点で止まり、分析し、以前のサービスの出力を表示する。ユーザは継続する前にその値を検討し及び更新する機会を得る。ユーザがその結果に不満足であれば、ユーザは実行を止めることを選択するかもしれない。一方、中間的な結果がファイルに保存可能であり、或いはセマンティックインスタンスとして公表可能である。インターセプタサービスは如何なる2つのさーびす間にも配置可能である。インターセプタの入力及び出力のタイプは以前のサービスの出力タイプと同じである。
図17には、「インスタンスセーバー」1604の選択可能な図形表示が示されている。インスタンスセービングインターナルサービス1604は如何なるセマンティックインスタンスでも分析及び保存する。或るシナリオでは、あるサービスで生成された出力はその環境内で他のどのサービスによっても使用不可能である。インスタンス保存サービスがなければ、その結果は失われるであろう。それがあれば、それを使用するサービスが利用可能な別の環境の中でそれを使用する又は将来的な利用に備えて、結果を格納する追加的な選択肢をユーザは有する。インスタンス保存サービスは出力を生成する如何なるサービスの後にも設けることができる。インスタンス保存サービスの入力タイプは以前のサービスの出力タイプと同じである。
プロパティチューザーは出力の一部を抽出し、次のサービスに送るサービスである。これは、他のサービスで生成された出力の一部にしかサービスが挿入されていない場合に、特に有利である。例えば、“My Contact”サービスはユーザが自身のアウトルック(Outlook)からコンタクト項目をユーザが選択し、“Contact”インスタンスを生成することを可能にする。“Map of”サービスは“アドレス(Address)”インスタンスを受け入れ、そのアドレスのマップを表示する。これら2つのサービスは多義にリンク不可能である。なぜなら、“Contact”及び“Address”の間にスーパーサブクラス関係は一切無いからである。しかしながら、“Contact”インスタンスは、“Address”タイプを有する“hasBusinessAddress”と呼ばれるプロパティを有することに留意を要する。プロパティチューザサービスは、ユーザがこのタイプの可能な構成を発見することを支援するために使用される。
なお、一部の実施形態を整理すると以下の通りである。
(付記1) 複数のコンピュータシステム機能ソースをコンピュータシステムにおけるサービスとして意味論的に記述するステップと、
複数のプログラム可能なコンピュータシステム実行段にコンピュータシステムをセグメント化するステップと、
を有する方法であって、前記コンピュータシステム実行段は、
プレゼンテーションクライアントプロセシングレイヤと、
リモートプロシジャコールアプリケーションプログラミングインターフェース(API)と、
ミドルウエアサーバープロセシングレイヤであって、前記プレゼンテーションレイヤは、コンピュータシステムでのサービスとして意味論的に記述されたコンピュータシステム機能ソースに対して、プレゼンテーションレイヤでコンピュータ実行タスクインターフェースをリアルタイムで動的に生成するために、リモートプロシジャコールAPIを介してインターフェースをとるところのミドルウエアサーバープロセシングレイヤと、
意味論的に記述されたコンピュータシステム機能ソースを、前記ミドルウエアプロセシングレイヤがインターフェースをとるコンピュータシステムでのサービスとして提供するサービスレイヤ及び機能ソース実現レイヤと、
を有し、当該方法は、コンピュータシステムの1以上のサービスに対する前記プレゼンテーションレイヤで生成されたタスクインターフェースに従って、1以上のサービスを有する実行可能なタスクをリアルタイムで動的に構成するステップを有する
ことを特徴とする方法。
(付記2) 前記サービスレイヤは、コンピュータシステムのサービスとして、機能ソース実現レイヤのサービス機能を関連して意味論的に記述するセマンティックサービス記述及び機能ソース実現レイヤからのサービス機能を有する
ことを特徴とする付記1記載の方法。
(付記3) 前記リモートプロシジャコールAPIは、ウェブサービスに従う
ことを特徴とする付記1記載の方法。
(付記4) 前記コンピュータシステムが、ネットワーク通信における複数のコンピュータシステムを有し、
前記リモートプロシジャコールAPIが、ウェブサービスに従い、該ウェブサービスはリモートウェブサービスAPIを有し、当該方法は、
第2コンピュータシステム内のネットワークを介して第1コンピュータシステムのリモートウェブサービスAPIを第1コンピュータシステムにより登録するステップと、
前記第2コンピュータシステム内で前記第2コンピュータシステムによりサービスを発見するステップと、
前記第2コンピュータシステムにより、登録されたリモートウェブサービスAPIを介して、前記第2コンピュータシステム内で発見されたサービスを第1コンピュータシステムに通知する
ことを特徴とする付記1記載の方法。
(付記5) 登録されたリモートウェブサービスAPIでフィルタを指定することにより、第2コンピュータシステム内でのサービスの発見を選別するステップ
を更に有することを特徴とする付記4記載の方法。
(付記6) 前記フィルタはリソース記述フレームワークデータクエリ言語(RDQL)によるクエリである
ことを特徴とする付記5記載の方法。
(付記7) 前記コンピュータ機能ソースの意味論的記述における自然言語に従ってサービス名を定めるステップを更に有し、自然言語センテンスに従って1以上のサービスを含む実行可能なタスクの構成をサポートする
ことを特徴とする付記1記載の方法。
(付記8) あるオントロジに従って、前記コンピュータ機能ソースの意味論的記述の機能属性をサービスとして規定するステップを当該方法が更に有し、
前記実行可能なタスクは、各サービスの機能属性による両立可能な1以上のサービスである
ことを特徴とする付記1記載の方法。
(付記9) 前記ミドルウエアサーバープロセシングレイヤが、サービス構成ユニット、サービス実行ユニット、サービス管理ユニット又はそれらの組み合わせのプログラムされたユニットを有し、リモートプロシジャコールAPIを介してアクセス可能であり、プレゼンテーションレイヤにおけるコンピュータ事項タスクインターフェースのリアルタイムの動的な生成を支援する
ことを特徴とする付記1記載の方法。
(付記10) 前記コンピュータシステムがネットワーク通信における複数のコンピュータシステムを有し、当該方法は、
第1コンピュータシステムにおける前記ミドルウエアサーバープロセシングレイヤの第1プログラムユニットを、リモートミドルウエアサービスプロセシングレイヤとしてインストールするステップと、
第1コンピュータシステムにて第1プログラムユニットの第1リモートプロシジャコールAPIを公表するステップと、
第2コンピュータシステムの第2プログラムユニットにより、公表された第1リモートプロシジャコールAPIを介して、第1コンピュータシステムの第1プログラムユニットを起動し、前記第1コンピュータシステムのサービスを管理するステップと、
を更に有することを特徴とする付記9記載の方法。
(付記11) 前記第1コンピュータシステムで前記サービスを管理するステップが、前記サービスの前記コンピュータシステム機能ソースの意味論的記述を介して前記第1コンピュータシステムのサービスに関して発見、実行、操作又はそれらの組み合わせを行うことを含む
ことを特徴とする付記10記載の方法。
(付記12) 第1コンピュータシステムの第1プログラムユニットを起動し、前記第1コンピュータシステムのサービスを管理するステップが、
ファイルシステム、マルチキャスト、コミュニティディレクトリ、オープンセマンティックサービスディレクトリ又はそれらの組み合わせの内の1以上の発見手段により、サービスに関するコンピュータシステム機能ソースの意味論的記述を介してサービスは発見するステップを有する
ことを特徴とする付記10記載の方法。
(付記13) 第1コンピュータシステムの第1プログラムユニットを起動し、前記第1コンピュータシステムのサービスを管理するステップが、
エンプティ、プライベート、サブネットによるグループ、関心のあるグループ又はそれらの組み合わせの中で、サービスに関するコンピュータシステム機能ソースの意味論的記述における探索範囲を設定するステップと、
サービスに関するコンピュータシステム機能ソースの意味論的記述における設定された探索範囲に従って、サービスに関するコンピュータシステム機能ソースの意味論的記述を介してサービスを発見するステップと、
を有することを特徴とする付記10記載の方法。
(付記14) 前記コンピュータシステム機能ソースが、ウェブオントロジ言語(OWL)ベースのウェブサービスオントロジ(OWL-S)言語に従って意味論的に記述される
ことを特徴とする付記1記載の方法。
(付記15) コンピュータシステム機能ソースの意味論的記述が、喋った言語によるコンピュータユーザインターフェースを制御する会話言語属性を有する
ことを特徴とする付記1記載の方法。
(付記16) 前記コンピュータユーザインターフェースはコンピュータに表示されるグラフィカルユーザインターフェースであり、前記会話言語属性は話される言語に従ってサービス記述及びサービス名の記述の表示を制御する
ことを特徴とする付記15記載の方法。
(付記17) 前記コンピュータシステム機能ソースの意味論的記述は、緩和されたデータタイプの入力、サービスとしてのコンピュータシステム機能ソースのロケーション、管理機能又はそれらの組み合わせの記述を含む
ことを特徴とする付記1記載の方法。
(付記18) コンピュータシステムにおけるサービスとしてのコンピュータシステム機能ソースの意味論的記述が、サービスに関する入力データの2以上のタイプを識別し、第1入力データタイプは入力データのドメインそのものを識別し、第2入力データタイプは第1入力データタイプのドメインより大規模なドメインの緩和された入力データタイプを識別する
ことを特徴とする付記1記載の方法。
(付記19) サービスとしてのコンピュータシステム機能ソースの意味論的記述が、サービスに関する管理機能の記述、該サービスについての管理機能に関する記述へのリンク、又は双方を含む
ことを特徴とする付記1記載の方法。
(付記20) 前記管理機能が、サービスを除去すること、サービスの処理済みセマンティックオブジェクトを返すこと、サービスに関するユーザインターフェースを与えること、サービスのステータス情報、サービスのロケーション、又はそれらの組み合わせの内の1以上のサービスプロセスを含む
ことを特徴とする付記19記載の方法。
(付記21) 意味論的に記述されたコンピュータシステム機能ソースに対するコンピュータ実現インターフェースが、コンピュータに表示されたグラフィカルユーザインターフェース、音声コマンドユーザインターフェース、無線装置ユーザインターフェース又はそれらの組み合わせである
ことを特徴とする付記1記載の方法。
(付記22) 意味論的に記述されたコンピュータシステム機能ソースに対するコンピュータ実現インターフェースが音声コマンドユーザインターフェースであり、当該方法が更に、
コンピュータ機能ソースの意味論的記述における自然言語でサービス名を規定するステップと、
規定された自然言語サービス名でスピーチ認識状態グラマーダイアグラムを生成するステップと、
スピーチ認識装置により、会話の自然言語センテンスを、規定された1以上の話されたサービス名を有するタスクの構成要素として認識するステップと、
話された認識されサービス名と一連のサービスとを前記スピーチ認識状態グラマーダイアグラムに従って照合するステップと、
合致したサービスを実行することで、前記タスクを実行するステップと、
を有することを特徴とする付記1記載の方法。
(付記23) コンピュータに表示されるグラフィカルユーザインターフェースが、サービスを空間的に提示する
ことを特徴とする付記22記載の方法。
(付記24) サービスの空間的な提示が、
エリアマップを表示すること、及び
前記エリアマップ上で発見されたサービスを空間的に表示すること
を含むことを特徴とする付記23記載の方法。
(付記25) 複数のコンピュータシステム機能ソースをサービスとして意味論的に記述するステップが、
あるオントロジを用いて、コンピュータシステム機能ソースの機能属性を記述するステップと、
自然言語センテンスの要素としてサービスに名前を割り当て、自然言語センテンスとしての自然言語要素の構成に対するサービス構成のマッピングをサポートするステップと、
を有し、コンピュータで実行されるタスクインターフェースの生成が、
利用可能なサービスを発見するステップと、
オントロジを用いてコンピュータシステム機能ソースの機能属性の記述に基づいてサービスの機能属性に従ってコンパチブルなサービスを識別し、自然言語センテンスに従って自然言語サービス名に基づいて複数のコンパチブルなサービスの実行可能なタスクをユーザが構築することを支援するステップと、
を有することを特徴とする付記1記載の方法。
(付記26) 前記コンピュータで実現されるタスクインターフェースがコンピュータで表示されるスクリーングラフィカルユーザインターフェースであり、該グラフィカルユーザインターフェースは、
ツリー構造に従って発見されたサービスの選択可能な図形表示を第1グラフィカルユーザインターフェースウインドウで表示すること、
あるプロセスに従ってリアルタイムに動的にタスクに構成された1以上のサービスをサポートする第2グラフィカルユーザインターフェースを提示すること、及び
タスクを実行するためにタスク実行に関する選択可能な図形表示を表示すること
を行い、前記の提示は、
前記第1ウインドウで発見されたサービスをユーザにより選択すること、
発見され選択されサービスに関連して他のコンパチブルなサービスの選択可能な図形表示を自動的に表示すること、
コンパチブルなサービスをユーザにより選択すること、及び
発見されたサービスのユーザによる選択及びタスクとしてのコンパチブルなサービスに従って指示されたサービスグラフを第2グラフィカルユーザインターフェースでリアルタイムで動的に表示すること
を含むことを特徴とする付記25記載の方法。
(付記27) 表示され発見されたサービスが、発見されたサービスの機能属性に従って第1グラフィカルユーザインターフェースウインドウで組織される
ことを特徴とする付記26記載の方法。
(付記28) あるサービスへのアクセスが、クライアント、サービスプライベートポリシ、共有ポリシ、オントロジ又はそれらの組み合わせにより用意される事項のサービスアクセス制御要素に従って制御される
ことを特徴とする付記1記載の方法。
(付記29) 前記プレゼンテーションクライアントプロセシングレイヤが、インスタンスクリエータ、インスタンスコピー、インスタンスインターセプタ、インスタンスタンスセーバー、プロパティチューザー又はそれらの組み合わせによるインターナルサービスを提供する
ことを特徴とする付記1記載の方法。
(付記30) セマンティックインスタンスシリアル化サービス、情報提供サービス、センササービス、スナップショットサービス、ウェブオントロジ言語(OWL)フォーマッターサービス及びテキストフォーマッターサービスを意味論的に記述された複数のコンピュータシステム機能ソースとして提供するステップ
を更に有することを特徴とする付記1記載の方法。
(付記31) セマンティックインスタンスシリアル化サービスが、セマンティックインスタンスの如何なるタイプをも使用し、セマンティックインスタンスを或る情報に並べ、該情報をユーザに与える
ことを特徴とする付記30記載の方法。
(付記32) 前記情報提供サービスが、コンピュータシステム機能ソースからセマンティックオブジェクトを出力し、コンピュータシステム機能ソースが情報提供機能ソースである
ことを特徴とする付記30記載の方法。
(付記33) 前記情報提供機能ソースが、時間、日付、関連する天候、道路交通量又はそれらの組み合わせを示す
ことを特徴とする付記32記載の方法。
(付記34) 前記スナップショットサービスが、
画像処理装置から静止画を捕捉し、
前記静止画に関するセマンティックオブジェクトを出力する
ことを特徴とする付記30記載の方法。
(付記35) 前記OWLフォーマッターサービスが、
セマンティックオブジェクトを入力として受け入れ、
前記セマンティックオブジェクトを人の理解可能な形式にフォーマット変換し、
変換されたセマンティックオブジェクトを出力する
ことを特徴とする付記30記載の方法。
(付記36) テキストフォーマッターサービスが、
セマンティックオブジェクトを受け入れ、
前記セマンティックオブジェクトを所定のテキストフォーマットの1つにフォーマット変換し、
フォーマットされたセマンティックオブジェクトを出力する
ことを特徴とする付記30記載の方法。
(付記37) 前記コンピュータシステムが、ネットワーク通信における複数のコンピュータシステムを含み、
前記サービスとしてのコンピュータシステム機能ソースが、デバイス、アプリケーション、電子サービス、コンテンツ又はそれらの組み合わせによる、複数のコンピュータシステムの何れかにおける機能ソースより成る
ことを特徴とする付記1記載の方法。
(付記38) 前記サービスとしてのコンピュータシステム機能ソースが、WSDL(ウェブサービス記述言語)、UPnP(ユニバーサルプラグアンドプレイ)、CORBA、RMI、RPC、DCE、DCOM又はそれらの組み合わせのリモートプロシジャコールを介して利用可能である
ことを特徴とする付記37又は25に記載の方法。
(付記39) 前記コンピュータシステムがネットワーク通信における複数のコンピュータシステムを含み、
前記リモートプロシジャコールAPIがウェブサービスに従い、該ウェブサービスはリモートウェブサービスAPIを含み、当該方法は、
第1コンピュータシステムのリモートウェブサービスAPIを公表し、
公表されたリモートウェブサービスAPIを介して第1コンピュータシステムのサービスを第2コンピュータシステムにより管理する
ことを特徴とする付記1記載の方法。
(付記40) 第2コンピュータシステムでのサービスの管理が、第2コンピュータシステムでサービスを作成すること、公表すること、発見すること、実行すること又はそれらの組み合わせを行うことを含む
ことを特徴とする付記39記載の方法。
(付記41) 前記ミドルウエアサービスプロセシングレイヤがサービス管理プロセスより成り、前記プレゼンテーションクライアントプロセシングレイヤが、セマンティックオブジェクトを作成、公表及び/又は操作する1以上の意味論的に記述されたサービス制御手段クライアント、及び/又はサービスとしてのコンピュータシステム機能ソース用のセマンティックサービス記述を有する
ことを特徴とする付記1記載の方法。
(付記42) 意味論的に記述されたサービス制御手段クライアントが、意味論的に処理し、セマンティックサービス記述を生成し、セマンティックサービス記述をサービスとして、リアルワールドオブジェクトセマンタイザクライアントとして、データベース意味論的処理クライアントとして及びメディア公表部として公表するクライアントプロセスを有する
ことを特徴とする付記1記載の方法。
(付記43) 前記メディア公表部が、
選択されたデータオブジェクトを受信し、
選択されたデータオブジェクトについて対応するセマンティックインスタンスを生成し、
サービスを提供するために生成されたセマンティックインスタンスについてセマンティックサービス記述を作成及び公表する
ことを特徴とする付記1記載の方法。
(付記44) コンピュータシステム機能ソースを意味論的に記述されたサービスとして抽象化するサーバー処理システムと、
コンピュータシステム機能ソースの意味論的に記述されたサービスに基づいて、コンピュータ実現タスクインターフェースを介して、コンピュータシステムにおける1以上のサービスより成る実行可能なタスクのリアルタイムの動的な構築をサポートするために、リモートプロシジャコールを介してサーバーシステムとインターフェースをとるクライアント処理システムと、
を有することを特徴とするコンピュータシステム。
(付記45) あるプロセスに従って制御される装置であって、
当該装置を制御するようプログラムされたプロセッサを有し、当該プロセッサは、
オブジェクトを認識し、
認識したオブジェクトに基づいてセマンティックインスタンスを生成し、
前記セマンティックインスタンスを公表する
ことを特徴とする装置。
(付記46) 前記オブジェクトが物理的オブジェクト、音声、ビデオ又はそれらの組み合わせである
ことを特徴とする付記45記載の装置。
(付記47) 前記オブジェクトの認識が、コンピュータ読み取り可能なコードを読み取ること、無線周波数識別(RFID)タグを検出すること、マルチメディア認識処理エンジンによりオブジェクト情報を検出することに従って行われる
ことを特徴とする付記45記載の装置。
(付記48) コンピュータで実行される方法であって、
データベーススキームをオントロジにマッピングするステップと、
該マッピングに基づいてデータベース内でデータのセマンティックオブジェクトを生成するステップと、
を有することを特徴とする方法。
(付記49) セマンティックオブジェクトの生成を制御し、データベース中のデータの全部又は一部からセマンティックオブジェクトを生成し、1以上のセマンティックオブジェクト1つまたは複数のファイルで出力するステップ
を更に有することを特徴とする付記48記載の方法。
(付記50) 前記マッピングが、
グ前記データベーススキームの選択可能な図形表示を表示する第1ウインドウと、オントロジの選択可能な図形表示を表示する第2ウインドウとを有するグラフィカルユーザインターフェースを表示するステップと、
表示されたグラフィカルユーザインターフェースに基づいて前記データベーススキームをオントロジにユーザによりマッピングするステップと、
を有することを特徴とする付記48記載の方法。
(付記51) 前記マッピングに関し、
前記データベーススキーマ及び前記オントロジにおける構文的な糸口に従って、プログラムされたプロセッサにより可能なマッピングを示唆する
ことを特徴とする付記50記載の方法。
(付記52) セマンティックオブジェクトの選択可能な図形表示を有するグラフィカルユーザインターフェースを表示するステップと、
選択されたセマンティックオブジェクトの値を返すステップと、
を更に有することを特徴とする付記48記載の方法。
(付記53) コンピュータシステム機能ソースを複数のサービスとして抽象化するサーバー処理手段と、
2以上のサービスを含むタスクのリアルタイムの動的な構築のためのユーザタスクインターフェースを、リモートプロシジャコール手段を介して用意するクライアント処理手段と、
を有することを特徴とするコンピュータシステム。
(付記54) 携帯可能なコンピュータ読み取り可能な記憶媒体であって、
複数のコンピュータシステム機能をースをサービスとして意味論的に記述すること、
複数の意味論的に記述されたコンピュータシステム機能ソースを発見し、第1グラフィカルユーザインターフェースにサービスを提示すること、
あるプロセスに従って1以上のサービスをタスクにリアルタイムで動的に構成することをサポートする第2グラフィカルユーザインターフェースを提示すること、及び
タスクを実行するためのタスク実行に関する選択可能な図形表示を表示すること、
を含むプロセスに従ってコンピュータシステムを制御する少なくとも1つのプログラムを格納し、前記第2グラフィカルユーザインターフェースを提示することは、
発見されたサービスをユーザにより第1ウインドウで選択すること、
発見され選択されたサービスに関する他の有効なサービスの選択可能な図形表示を自動的に表示すること、
有効なサービスをユーザにより選択すること、発見されたサービス及び有効なサービスのタスクとしてのユーザの選択に従って、指示されたサービスグラフを第2グラフィカルユーザインターフェースでリアルタイムで動的に表示すること、
を含むコンピュータ読み取り可能な記憶媒体。
(付記55) 端末装置であって、
あるプロセスに従って当該端末装置を制御するようプログラムされたクライアントプロセッサを有し、該クライアントプロセッサは、
サーバープロセスに対するリモートプロシジャコール手段を介して、複数の意味論的に記述されたコンピュータシステム機能ソースをサービスとして発見し、
あるプロセスに従って1以上のサービスをタスクにリアルタイムで動的に構築することを支援するコンピュータで実行されるユーザインターフェースを生成し、該ユーザインターフェースは、
ユーザによるタスクのコマンドを受信し、
サーバープロセスを介して1以上のサービスを含むタスクの処理を制御する
ことを特徴とする端末装置。
(付記56) 前記コンピュータで実行されるユーザインターフェースが、コンピュータに表示されるグラフィカルユーザインターフェース、音声コマンドユーザインターフェース、無線装置ユーザインターフェース又はそれらの組み合わせである
ことを特徴とする付記55記載の端末装置。
(付記57) 前記クライアントプロセスのプロセスが、
発見されたサービスを第1グラフィカルユーザインターフェースで提示すること、
あるプロセスに従ってリアルタイムに動的にタスクに構成された1以上のサービスをサポートする第2グラフィカルユーザインターフェースを提示すること、及び
サーバープロセスを介してタスクを実行するためにタスク実行に関する選択可能な図形表示を表示すること
を含み、前記第2グラフィカルユーザインターフェースの提示は、
前記第1ウインドウで発見されたサービスをユーザにより選択すること、
発見され選択されサービスに関連して他の有効なサービスの選択可能な図形表示を自動的に表示すること、
有効なサービスをユーザにより選択すること、及び
発見されたサービスのユーザによる選択及びタスクとしての有効なサービスに従って指示されたサービスグラフを第2グラフィカルユーザインターフェースでリアルタイムで動的に表示すること
を含むことを特徴とする付記55記載の端末装置。
(付記58) 端末装置であって、
あるプロセスに従って当該端末装置を制御するようにプログラムされたクライアントプロセッサを有し、該プロセッサは、
コンピュータシステム機能ソースをサービスとして意味論的に記述するウェブオントロジ言語(OWL-S)ファイルを読み取り、
OWL-Sファイルの読み取り内容に従って前記サービスを実行する
ことを特徴とする端末装置。
(付記59) 複数のクライアント処理装置と通信するサーバー処理装置であって、
リモートプロシジャコール手段に応答して、あるプロセスに従って当該サーバー処理装置を制御するようプログラムされたサーバープロセッサを有し、該プロセッサは、
複数の意味論的に記述されたコンピュータシステム機能ソースをサービスとして発見し、
1以上のサービスをタスクにリアルタイムで動的に構築することをサポートするクライアントコンピュータ実行ユーザインターフェースの生成を、リモートプロシジャコール手段を介して制御する
ことを特徴とするサーバー処理装置。
(付記60) クライアントコンピュータ実行ユーザインターフェースの制御が或るプロセスに従って実行され、該プロセスは、
コンピュータシステム機能ソースの意味論的記述に記載されたサービスの機能属性に従って、発見された複数のサービスの中からコンパチブルなサービスを見分け、
1以上の選択されたコンパチブルなサービスによりタスクを構築し、
タスク実行コマンドを受け取り、
前記タスク実行コマンドに応じてタスクを実行するために前記クライアントで1以上のサービスを事項する
ことを特徴とする付記59記載のサーバー処理装置。
Claims (3)
- コンピュータシステムによって実行される方法であって、
前記コンピュータシステムは、複数のプログラム可能なコンピュータシステム実装階層にセグメント化されており、前記コンピュータシステム実装階層は、
プレゼンテーションクライアントプロセシングレイヤと、
リモートプロシジャコールアプリケーションプログラミングインターフェース(API)と、
前記プレゼンテーションクライアントプロセシングレイヤが前記リモートプロシジャコールAPIを介してインターフェースをとるミドルウエアサーバープロセシングレイヤと、
前記ミドルウエアサーバープロセシングレイヤがインターフェースをとるサービスレイヤ及び機能ソース実現レイヤと
を有し、
当該方法は、
前記ミドルウエアサーバープロセシングレイヤが、セマンティックサービス記述を自動生成するよう、複数のコンピュータシステム機能ソースをコンピュータシステムにおけるサービスとして意味論的に記述するステップと、
前記ミドルウエアサーバープロセシングレイヤが、前記プレゼンテーションクライアントプロセシングレイヤでの提示のために、前記セマンティックサービス記述に対する、コンピュータで実現されるタスクインターフェースをリアルタイムで動的に生成するステップと、
前記サービスレイヤ及び機能ソース実現レイヤが、前記コンピュータシステムにおけるサービスとして前記セマンティックサービス記述を提供するステップと、
前記プレゼンテーションクライアントプロセシングレイヤにて提示された前記タスクインターフェースに従って、1以上のサービスを有する実行可能なタスクをリアルタイムで動的に構成するステップと、
を有し、
前記リモートプロシジャコールAPIはウェブサービスに従い、該ウェブサービスはリモートウェブサービスAPIを有し、
当該方法は更に、
前記コンピュータシステムにより、ネットワークを介して、前記コンピュータシステムのリモートウェブサービスAPIを他のコンピュータシステム内に登録するステップと、
前記他のコンピュータシステムにより、前記他のコンピュータシステムにおけるサービスを発見するステップと、
登録されたリモートウェブサービスAPI内のフィルタを指定することにより、前記他のコンピュータシステムにおいて発見されるサービスを選別するステップと、
前記他のコンピュータシステムにより、前記登録されたリモートウェブサービスAPIを介して前記コンピュータシステムに、前記他のコンピュータシステム内で発見されたサービスを通知するステップと
を有する、
ことを特徴とする方法。 - 複数のコンピュータシステム機能ソースをサービスとして意味論的に記述するステップが、
あるオントロジを用いて、コンピュータシステム機能ソースの機能属性を記述するステップと、
自然言語センテンスの要素としてサービスに名前を割り当て、自然言語センテンスとしての自然言語要素の構成に対するサービス構成のマッピングをサポートするステップと、
を有し、
前記タスクインターフェースの生成が、
利用可能なサービスを発見するステップと、
オントロジを用いてコンピュータシステム機能ソースの機能属性の記述に基づいてサービスの機能属性に従ってコンパチブルなサービスを識別し、自然言語センテンスに従って自然言語サービス名に基づいて複数のコンパチブルなサービスの実行可能なタスクをユーザが構築することを支援するステップと、
を有する、
ことを特徴とする請求項1記載の方法。 - 前記タスクインターフェースが、コンピュータで表示されるスクリーングラフィカルユーザインターフェースであり、該グラフィカルユーザインターフェースは、
発見されたサービスの選択可能な図形表示をツリー構造に従って第1グラフィカルユーザインターフェースウインドウで表示すること、
前記1以上のサービスを実行可能なタスクにリアルタイムで動的に構成するステップを支援する第2グラフィカルユーザインターフェースを、
前記第1グラフィカルユーザインターフェースウインドウで発見されたサービスをユーザ選択可能にすることと、
発見され選択されたサービスに関連して他のコンパチブルなサービスの選択可能な図形表示を自動的に表示することと、
コンパチブルなサービスをユーザ選択可能にすることと、
発見されたサービス及びコンパチブルなサービスのユーザ選択に従ったサービスグラフを、前記タスクとして、該第2グラフィカルユーザインターフェース内でリアルタイムで動的に表示することと、
を有するプロセスに従って提示すること、及び
前記タスクを実行するためにタスク実行に関する選択可能な図形表示を表示すること
を行う、
ことを特徴とする請求項2記載の方法。
Applications Claiming Priority (11)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US56585104P | 2004-04-28 | 2004-04-28 | |
US60/565,851 | 2004-04-28 | ||
US60325104P | 2004-08-23 | 2004-08-23 | |
US60/603,251 | 2004-08-23 | ||
US62855704P | 2004-11-18 | 2004-11-18 | |
US60/628,557 | 2004-11-18 | ||
US63980504P | 2004-12-29 | 2004-12-29 | |
US60/639,805 | 2004-12-29 | ||
US11/115,403 | 2005-04-27 | ||
US11/115,403 US7761885B2 (en) | 2004-04-28 | 2005-04-27 | Task computing |
PCT/US2005/014557 WO2005104772A2 (en) | 2004-04-28 | 2005-04-27 | Semantic task computing |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2007535767A JP2007535767A (ja) | 2007-12-06 |
JP2007535767A5 JP2007535767A5 (ja) | 2008-05-15 |
JP5205965B2 true JP5205965B2 (ja) | 2013-06-05 |
Family
ID=35188554
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007510963A Expired - Fee Related JP5205965B2 (ja) | 2004-04-28 | 2005-04-27 | コンピュータシステム、サーバー処理装置、端末装置及び方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US7761885B2 (ja) |
EP (1) | EP1759289A4 (ja) |
JP (1) | JP5205965B2 (ja) |
KR (1) | KR100896245B1 (ja) |
WO (1) | WO2005104772A2 (ja) |
Families Citing this family (206)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8645137B2 (en) | 2000-03-16 | 2014-02-04 | Apple Inc. | Fast, language-independent method for user authentication by voice |
JP4759269B2 (ja) * | 2003-05-16 | 2011-08-31 | 株式会社エヌ・ティ・ティ・ドコモ | 個別サービス選択 |
GB2415325A (en) * | 2004-06-15 | 2005-12-21 | Mitel Networks Corp | Spontaneous discovery of remote service profiles |
US8099313B2 (en) * | 2004-09-22 | 2012-01-17 | Samsung Electronics Co., Ltd. | Method and system for the orchestration of tasks on consumer electronics |
US8185427B2 (en) * | 2004-09-22 | 2012-05-22 | Samsung Electronics Co., Ltd. | Method and system for presenting user tasks for the control of electronic devices |
US8412554B2 (en) * | 2004-09-24 | 2013-04-02 | Samsung Electronics Co., Ltd. | Method and system for describing consumer electronics using separate task and device descriptions |
US8510737B2 (en) * | 2005-01-07 | 2013-08-13 | Samsung Electronics Co., Ltd. | Method and system for prioritizing tasks made available by devices in a network |
US8069422B2 (en) * | 2005-01-10 | 2011-11-29 | Samsung Electronics, Co., Ltd. | Contextual task recommendation system and method for determining user's context and suggesting tasks |
US8205013B2 (en) * | 2005-05-02 | 2012-06-19 | Samsung Electronics Co., Ltd. | Method and system for aggregating the control of middleware control points |
US7596754B2 (en) * | 2005-07-28 | 2009-09-29 | Microsoft Corporation | Application assistance |
US20070043803A1 (en) * | 2005-07-29 | 2007-02-22 | Microsoft Corporation | Automatic specification of semantic services in response to declarative queries of sensor networks |
JP4756947B2 (ja) * | 2005-08-05 | 2011-08-24 | キヤノン株式会社 | 情報処理装置及び方法 |
US20070050185A1 (en) * | 2005-08-24 | 2007-03-01 | Keith Manson | Methods and apparatus for constructing graphs, semitic object networks, process models, and managing their synchronized representations |
US8677377B2 (en) | 2005-09-08 | 2014-03-18 | Apple Inc. | Method and apparatus for building an intelligent automated assistant |
US20070106797A1 (en) * | 2005-09-29 | 2007-05-10 | Nortel Networks Limited | Mission goal statement to policy statement translation |
US7882209B1 (en) * | 2005-09-30 | 2011-02-01 | At&T Intellectual Property Ii, L.P. | Tiered and modular approach to operational support systems |
US7697827B2 (en) | 2005-10-17 | 2010-04-13 | Konicek Jeffrey C | User-friendlier interfaces for a camera |
US7822699B2 (en) * | 2005-11-30 | 2010-10-26 | Microsoft Corporation | Adaptive semantic reasoning engine |
US20070106496A1 (en) * | 2005-11-09 | 2007-05-10 | Microsoft Corporation | Adaptive task framework |
US7933914B2 (en) * | 2005-12-05 | 2011-04-26 | Microsoft Corporation | Automatic task creation and execution using browser helper objects |
US20070130134A1 (en) * | 2005-12-05 | 2007-06-07 | Microsoft Corporation | Natural-language enabling arbitrary web forms |
US7831585B2 (en) * | 2005-12-05 | 2010-11-09 | Microsoft Corporation | Employment of task framework for advertising |
US7660558B2 (en) * | 2005-12-31 | 2010-02-09 | Adobe Systems Incorporated | Interrupting and resuming a media player |
US7603113B2 (en) | 2005-12-31 | 2009-10-13 | Adobe Systems Incorporated | Using local codecs |
US20070174697A1 (en) * | 2006-01-19 | 2007-07-26 | Nokia Corporation | Generic, WSRF-compliant checkpointing for WS-Resources |
KR100750160B1 (ko) * | 2006-01-25 | 2007-08-17 | 삼성전자주식회사 | UPnP 상에서 디바이스의 기능을 예약하는 방법 및 장치 |
US7996783B2 (en) | 2006-03-02 | 2011-08-09 | Microsoft Corporation | Widget searching utilizing task framework |
US8115869B2 (en) | 2007-02-28 | 2012-02-14 | Samsung Electronics Co., Ltd. | Method and system for extracting relevant information from content metadata |
US8209724B2 (en) | 2007-04-25 | 2012-06-26 | Samsung Electronics Co., Ltd. | Method and system for providing access to information of potential interest to a user |
US8200688B2 (en) | 2006-03-07 | 2012-06-12 | Samsung Electronics Co., Ltd. | Method and system for facilitating information searching on electronic devices |
US20080235209A1 (en) * | 2007-03-20 | 2008-09-25 | Samsung Electronics Co., Ltd. | Method and apparatus for search result snippet analysis for query expansion and result filtering |
US8732154B2 (en) * | 2007-02-28 | 2014-05-20 | Samsung Electronics Co., Ltd. | Method and system for providing sponsored information on electronic devices |
US8843467B2 (en) | 2007-05-15 | 2014-09-23 | Samsung Electronics Co., Ltd. | Method and system for providing relevant information to a user of a device in a local network |
US8863221B2 (en) | 2006-03-07 | 2014-10-14 | Samsung Electronics Co., Ltd. | Method and system for integrating content and services among multiple networks |
US20070214123A1 (en) * | 2006-03-07 | 2007-09-13 | Samsung Electronics Co., Ltd. | Method and system for providing a user interface application and presenting information thereon |
US8510453B2 (en) | 2007-03-21 | 2013-08-13 | Samsung Electronics Co., Ltd. | Framework for correlating content on a local network with information on an external network |
US20080221989A1 (en) * | 2007-03-09 | 2008-09-11 | Samsung Electronics Co., Ltd. | Method and system for providing sponsored content on an electronic device |
US8028283B2 (en) * | 2006-03-20 | 2011-09-27 | Samsung Electronics Co., Ltd. | Method and system for automated invocation of device functionalities in a network |
US8549492B2 (en) * | 2006-04-21 | 2013-10-01 | Microsoft Corporation | Machine declarative language for formatted data processing |
US20070294085A1 (en) * | 2006-05-01 | 2007-12-20 | Maria Gaos | System and method operative to interact with a secure, self-contained network |
PL1865687T3 (pl) * | 2006-06-06 | 2011-11-30 | Koninklijke Kpn Nv | Most pośredniczący do łączenia różnych typów urządzeń |
US9318108B2 (en) | 2010-01-18 | 2016-04-19 | Apple Inc. | Intelligent automated assistant |
US8935269B2 (en) | 2006-12-04 | 2015-01-13 | Samsung Electronics Co., Ltd. | Method and apparatus for contextual search and query refinement on consumer electronics devices |
US20130167024A1 (en) | 2006-12-05 | 2013-06-27 | Adobe Systems Incorporated | Embedded document within an application |
US8055586B1 (en) | 2006-12-29 | 2011-11-08 | Amazon Technologies, Inc. | Providing configurable use by applications of sequences of invocable services |
US7743339B1 (en) | 2007-02-01 | 2010-06-22 | Adobe Systems Incorporated | Rendering text in a brew device |
US8589779B2 (en) * | 2007-03-08 | 2013-11-19 | Adobe Systems Incorporated | Event-sensitive content for mobile devices |
US8977255B2 (en) | 2007-04-03 | 2015-03-10 | Apple Inc. | Method and system for operating a multi-function portable electronic device using voice-activation |
US9286385B2 (en) | 2007-04-25 | 2016-03-15 | Samsung Electronics Co., Ltd. | Method and system for providing access to information of potential interest to a user |
US9329874B2 (en) * | 2007-06-22 | 2016-05-03 | Microsoft Technology Licensing, Llc | String customization |
US8880740B2 (en) * | 2007-10-24 | 2014-11-04 | International Business Machines Corporation | Computing device location |
US8176068B2 (en) | 2007-10-31 | 2012-05-08 | Samsung Electronics Co., Ltd. | Method and system for suggesting search queries on electronic devices |
US8065152B2 (en) | 2007-11-08 | 2011-11-22 | Demand Media, Inc. | Platform for enabling voice commands to resolve phoneme based domain name registrations |
US8789108B2 (en) * | 2007-11-20 | 2014-07-22 | Samsung Electronics Co., Ltd. | Personalized video system |
US8250521B2 (en) * | 2007-12-14 | 2012-08-21 | International Business Machines Corporation | Method and apparatus for the design and development of service-oriented architecture (SOA) solutions |
US8195803B2 (en) * | 2007-12-14 | 2012-06-05 | International Business Machines Corporation | Method and apparatus for modeling and managing quality of service (QoS) in a service-oriented architecture (SOA) environment |
US9330720B2 (en) | 2008-01-03 | 2016-05-03 | Apple Inc. | Methods and apparatus for altering audio output signals |
US20090177634A1 (en) * | 2008-01-09 | 2009-07-09 | International Business Machine Corporation | Method and System for an Application Domain |
US8996376B2 (en) | 2008-04-05 | 2015-03-31 | Apple Inc. | Intelligent text-to-speech conversion |
US10496753B2 (en) | 2010-01-18 | 2019-12-03 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
US8694355B2 (en) * | 2008-05-30 | 2014-04-08 | Sri International | Method and apparatus for automated assistance with task management |
US20100030549A1 (en) | 2008-07-31 | 2010-02-04 | Lee Michael M | Mobile device having human language translation capability with positional feedback |
US20100064033A1 (en) * | 2008-09-08 | 2010-03-11 | Franco Travostino | Integration of an internal cloud infrastructure with existing enterprise services and systems |
US8938465B2 (en) | 2008-09-10 | 2015-01-20 | Samsung Electronics Co., Ltd. | Method and system for utilizing packaged content sources to identify and provide information based on contextual information |
US20100083150A1 (en) * | 2008-09-30 | 2010-04-01 | Nokia Corporation | User interface, device and method for providing a use case based interface |
US8103962B2 (en) * | 2008-11-04 | 2012-01-24 | Brigham Young University | Form-based ontology creation and information harvesting |
US8195692B2 (en) * | 2008-12-11 | 2012-06-05 | International Business Machines Corporation | System and method for managing semantic and syntactic metadata |
WO2010101515A1 (en) * | 2009-03-03 | 2010-09-10 | Telefonaktiebolaget Lm Ericsson (Publ) | Media transfer to a renderer in a local network from a server in a second local network |
US10241752B2 (en) | 2011-09-30 | 2019-03-26 | Apple Inc. | Interface for a virtual digital assistant |
US20120309363A1 (en) | 2011-06-03 | 2012-12-06 | Apple Inc. | Triggering notifications associated with tasks items that represent tasks to perform |
US10241644B2 (en) | 2011-06-03 | 2019-03-26 | Apple Inc. | Actionable reminder entries |
US9858925B2 (en) | 2009-06-05 | 2018-01-02 | Apple Inc. | Using context information to facilitate processing of commands in a virtual assistant |
US8145758B2 (en) * | 2009-06-15 | 2012-03-27 | Microsoft Corporation | Concurrent processing with untrusted beings |
US8856333B2 (en) * | 2009-06-16 | 2014-10-07 | Microsoft Corporation | Datacenter execution templates |
US9431006B2 (en) | 2009-07-02 | 2016-08-30 | Apple Inc. | Methods and apparatuses for automatic speech recognition |
US10679605B2 (en) | 2010-01-18 | 2020-06-09 | Apple Inc. | Hands-free list-reading by intelligent automated assistant |
US10276170B2 (en) | 2010-01-18 | 2019-04-30 | Apple Inc. | Intelligent automated assistant |
US10705794B2 (en) | 2010-01-18 | 2020-07-07 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
US10553209B2 (en) | 2010-01-18 | 2020-02-04 | Apple Inc. | Systems and methods for hands-free notification summaries |
US8682667B2 (en) | 2010-02-25 | 2014-03-25 | Apple Inc. | User profiling for selecting user specific voice input processing information |
US8239618B2 (en) * | 2010-05-27 | 2012-08-07 | Dell Products L.P. | System and method for emulating preconditioning of solid-state device |
US8266551B2 (en) * | 2010-06-10 | 2012-09-11 | Nokia Corporation | Method and apparatus for binding user interface elements and granular reflective processing |
US8510564B2 (en) * | 2010-08-06 | 2013-08-13 | Microsoft Corporation | Automatic configuration and continuation of federation relationships |
US8615772B2 (en) * | 2010-09-28 | 2013-12-24 | Qualcomm Incorporated | Apparatus and methods of extending application services |
KR101189433B1 (ko) | 2010-11-04 | 2012-10-11 | 중앙대학교 산학협력단 | 홈 네트워크 시스템을 위한 객체 기반 미들웨어 시스템 |
US20120124126A1 (en) * | 2010-11-17 | 2012-05-17 | Microsoft Corporation | Contextual and task focused computing |
KR20120066147A (ko) * | 2010-12-14 | 2012-06-22 | 삼성전자주식회사 | Dlna 기기 표시 방법 및 장치 |
US20120159341A1 (en) | 2010-12-21 | 2012-06-21 | Microsoft Corporation | Interactions with contextual and task-based computing environments |
US8671416B2 (en) * | 2011-01-14 | 2014-03-11 | Apple Inc. | Dynamic service discovery |
US8874640B2 (en) * | 2011-03-01 | 2014-10-28 | Infosys Limited | Method and system for reducing service overhead in service oriented architectures |
US9262057B2 (en) * | 2011-03-11 | 2016-02-16 | Microsoft Techology Licensing, Llc | Providing item specific functionality via service-assisted applications |
US9262612B2 (en) | 2011-03-21 | 2016-02-16 | Apple Inc. | Device access using voice authentication |
US9405896B2 (en) * | 2011-04-12 | 2016-08-02 | Salesforce.Com, Inc. | Inter-application management of user credential data |
US20120311614A1 (en) * | 2011-06-02 | 2012-12-06 | Recursion Software, Inc. | Architecture for pervasive software platform-based distributed knowledge network (dkn) and intelligent sensor network (isn) |
US10057736B2 (en) | 2011-06-03 | 2018-08-21 | Apple Inc. | Active transport based notifications |
US8994660B2 (en) | 2011-08-29 | 2015-03-31 | Apple Inc. | Text correction processing |
WO2013072925A2 (en) * | 2011-09-19 | 2013-05-23 | Tata Consultancy Services Limited | A computing platform for development and deployment of sensor data based applications and services |
CN102436350B (zh) * | 2011-12-06 | 2014-11-12 | 北京航空航天大学 | 远程应用窗口显示方法、服务器及用户终端 |
US8996729B2 (en) | 2012-04-12 | 2015-03-31 | Nokia Corporation | Method and apparatus for synchronizing tasks performed by multiple devices |
RU2600106C2 (ru) | 2011-12-28 | 2016-10-20 | Нокиа Текнолоджиз Ой | Переключатель приложений |
US9483461B2 (en) | 2012-03-06 | 2016-11-01 | Apple Inc. | Handling speech synthesis of content for multiple languages |
US9262183B2 (en) | 2012-04-23 | 2016-02-16 | Microsoft Technology Licensing, Llc | Self-service composed web APIs |
CN102761597B (zh) * | 2012-04-30 | 2015-06-17 | 黄林果 | 一种提供基于业务感知的信息栅格系统架构的方法 |
US9280610B2 (en) | 2012-05-14 | 2016-03-08 | Apple Inc. | Crowd sourcing information to fulfill user requests |
US10417037B2 (en) | 2012-05-15 | 2019-09-17 | Apple Inc. | Systems and methods for integrating third party services with a digital assistant |
US9015034B2 (en) * | 2012-05-15 | 2015-04-21 | Blackberry Limited | Methods and devices for generating an action item summary |
JP5398919B1 (ja) * | 2012-06-07 | 2014-01-29 | 株式会社東芝 | セキュリティアダプタプログラム及び装置 |
US9721563B2 (en) | 2012-06-08 | 2017-08-01 | Apple Inc. | Name recognition system |
US9495129B2 (en) | 2012-06-29 | 2016-11-15 | Apple Inc. | Device, method, and user interface for voice-activated navigation and browsing of a document |
US9547647B2 (en) | 2012-09-19 | 2017-01-17 | Apple Inc. | Voice-based media searching |
TWI555390B (zh) * | 2013-02-20 | 2016-10-21 | 仁寶電腦工業股份有限公司 | 控制電子設備的方法與電子裝置 |
US9215075B1 (en) | 2013-03-15 | 2015-12-15 | Poltorak Technologies Llc | System and method for secure relayed communications from an implantable medical device |
US9715282B2 (en) | 2013-03-29 | 2017-07-25 | Microsoft Technology Licensing, Llc | Closing, starting, and restarting applications |
US9582608B2 (en) | 2013-06-07 | 2017-02-28 | Apple Inc. | Unified ranking with entropy-weighted information for phrase-based semantic auto-completion |
WO2014197334A2 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for user-specified pronunciation of words for speech synthesis and recognition |
WO2014197336A1 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for detecting errors in interactions with a voice-based digital assistant |
WO2014197335A1 (en) | 2013-06-08 | 2014-12-11 | Apple Inc. | Interpreting and acting upon commands that involve sharing information with remote devices |
CN110442699A (zh) | 2013-06-09 | 2019-11-12 | 苹果公司 | 操作数字助理的方法、计算机可读介质、电子设备和系统 |
US10176167B2 (en) | 2013-06-09 | 2019-01-08 | Apple Inc. | System and method for inferring user intent from speech inputs |
US9497151B2 (en) * | 2013-10-31 | 2016-11-15 | Oracle International Corporation | Optimization framework for in-memory storage of policy session data |
US9785630B2 (en) | 2014-05-30 | 2017-10-10 | Apple Inc. | Text prediction using combined word N-gram and unigram language models |
US10078631B2 (en) | 2014-05-30 | 2018-09-18 | Apple Inc. | Entropy-guided text prediction using combined word and character n-gram language models |
US9760559B2 (en) | 2014-05-30 | 2017-09-12 | Apple Inc. | Predictive text input |
US9842101B2 (en) | 2014-05-30 | 2017-12-12 | Apple Inc. | Predictive conversion of language input |
US9430463B2 (en) | 2014-05-30 | 2016-08-30 | Apple Inc. | Exemplar-based natural language processing |
US9715875B2 (en) | 2014-05-30 | 2017-07-25 | Apple Inc. | Reducing the need for manual start/end-pointing and trigger phrases |
TWI566107B (zh) | 2014-05-30 | 2017-01-11 | 蘋果公司 | 用於處理多部分語音命令之方法、非暫時性電腦可讀儲存媒體及電子裝置 |
US9338493B2 (en) | 2014-06-30 | 2016-05-10 | Apple Inc. | Intelligent automated assistant for TV user interactions |
US10659851B2 (en) | 2014-06-30 | 2020-05-19 | Apple Inc. | Real-time digital assistant knowledge updates |
US10446141B2 (en) | 2014-08-28 | 2019-10-15 | Apple Inc. | Automatic speech recognition based on user feedback |
US9818400B2 (en) | 2014-09-11 | 2017-11-14 | Apple Inc. | Method and apparatus for discovering trending terms in speech requests |
US10789041B2 (en) | 2014-09-12 | 2020-09-29 | Apple Inc. | Dynamic thresholds for always listening speech trigger |
US10074360B2 (en) | 2014-09-30 | 2018-09-11 | Apple Inc. | Providing an indication of the suitability of speech recognition |
US10127911B2 (en) | 2014-09-30 | 2018-11-13 | Apple Inc. | Speaker identification and unsupervised speaker adaptation techniques |
US9668121B2 (en) | 2014-09-30 | 2017-05-30 | Apple Inc. | Social reminders |
US9886432B2 (en) | 2014-09-30 | 2018-02-06 | Apple Inc. | Parsimonious handling of word inflection via categorical stem + suffix N-gram language models |
US9646609B2 (en) | 2014-09-30 | 2017-05-09 | Apple Inc. | Caching apparatus for serving phonetic pronunciations |
US10552013B2 (en) | 2014-12-02 | 2020-02-04 | Apple Inc. | Data detection |
CN111414222A (zh) * | 2014-12-11 | 2020-07-14 | 微软技术许可有限责任公司 | 能够实现可动作的消息传送的虚拟助理系统 |
KR101639911B1 (ko) * | 2014-12-23 | 2016-07-15 | 주식회사 포스코 | 철강 공정 미들웨어의 시간주기 기반 프레임워크 시스템 |
US9865280B2 (en) | 2015-03-06 | 2018-01-09 | Apple Inc. | Structured dictation using intelligent automated assistants |
US10567477B2 (en) | 2015-03-08 | 2020-02-18 | Apple Inc. | Virtual assistant continuity |
US9721566B2 (en) | 2015-03-08 | 2017-08-01 | Apple Inc. | Competing devices responding to voice triggers |
US9886953B2 (en) | 2015-03-08 | 2018-02-06 | Apple Inc. | Virtual assistant activation |
US9899019B2 (en) | 2015-03-18 | 2018-02-20 | Apple Inc. | Systems and methods for structured stem and suffix language models |
US9842105B2 (en) | 2015-04-16 | 2017-12-12 | Apple Inc. | Parsimonious continuous-space phrase representations for natural language processing |
US10891573B2 (en) * | 2015-04-19 | 2021-01-12 | Schlumberger Technology Corporation | Wellsite report system |
US10083688B2 (en) | 2015-05-27 | 2018-09-25 | Apple Inc. | Device voice control for selecting a displayed affordance |
US10127220B2 (en) | 2015-06-04 | 2018-11-13 | Apple Inc. | Language identification from short strings |
US10101822B2 (en) | 2015-06-05 | 2018-10-16 | Apple Inc. | Language input correction |
US9578173B2 (en) | 2015-06-05 | 2017-02-21 | Apple Inc. | Virtual assistant aided communication with 3rd party service in a communication session |
US10255907B2 (en) | 2015-06-07 | 2019-04-09 | Apple Inc. | Automatic accent detection using acoustic models |
US11025565B2 (en) | 2015-06-07 | 2021-06-01 | Apple Inc. | Personalized prediction of responses for instant messaging |
US10186254B2 (en) | 2015-06-07 | 2019-01-22 | Apple Inc. | Context-based endpoint detection |
CN104980525B (zh) * | 2015-07-10 | 2018-09-14 | 华南理工大学 | 一种基于状态中间件的普适性移动计算系统 |
US10270753B2 (en) | 2015-08-14 | 2019-04-23 | Salesforce.Com, Inc. | Background authentication refresh |
CN105205231B (zh) * | 2015-09-06 | 2018-11-09 | 中国电力科学研究院 | 一种基于dcom的配电网数字仿真系统 |
US10671428B2 (en) | 2015-09-08 | 2020-06-02 | Apple Inc. | Distributed personal assistant |
US10747498B2 (en) | 2015-09-08 | 2020-08-18 | Apple Inc. | Zero latency digital assistant |
US9697820B2 (en) | 2015-09-24 | 2017-07-04 | Apple Inc. | Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks |
US10366158B2 (en) | 2015-09-29 | 2019-07-30 | Apple Inc. | Efficient word encoding for recurrent neural network language models |
US11010550B2 (en) | 2015-09-29 | 2021-05-18 | Apple Inc. | Unified language modeling framework for word prediction, auto-completion and auto-correction |
US11587559B2 (en) | 2015-09-30 | 2023-02-21 | Apple Inc. | Intelligent device identification |
US10691473B2 (en) | 2015-11-06 | 2020-06-23 | Apple Inc. | Intelligent automated assistant in a messaging environment |
CN105469128A (zh) * | 2015-11-27 | 2016-04-06 | 西京学院 | 一种体育器材管理系统 |
US10049668B2 (en) | 2015-12-02 | 2018-08-14 | Apple Inc. | Applying neural network language models to weighted finite state transducers for automatic speech recognition |
US10223066B2 (en) | 2015-12-23 | 2019-03-05 | Apple Inc. | Proactive assistance based on dialog communication between devices |
US10446143B2 (en) | 2016-03-14 | 2019-10-15 | Apple Inc. | Identification of voice inputs providing credentials |
US10389705B2 (en) * | 2016-03-30 | 2019-08-20 | Airwatch Llc | Associating user accounts with enterprise workspaces |
CN106059789A (zh) * | 2016-05-11 | 2016-10-26 | 北京系统工程研究所 | 一种基于clm矩阵的服务按需动态组合方法 |
US10116497B2 (en) | 2016-05-20 | 2018-10-30 | Moneygram International, Inc. | Systems and methods for providing split control of multiple execution environments |
US9934775B2 (en) | 2016-05-26 | 2018-04-03 | Apple Inc. | Unit-selection text-to-speech synthesis based on predicted concatenation parameters |
US9972304B2 (en) | 2016-06-03 | 2018-05-15 | Apple Inc. | Privacy preserving distributed evaluation framework for embedded personalized systems |
US10249300B2 (en) | 2016-06-06 | 2019-04-02 | Apple Inc. | Intelligent list reading |
US10049663B2 (en) | 2016-06-08 | 2018-08-14 | Apple, Inc. | Intelligent automated assistant for media exploration |
DK179309B1 (en) | 2016-06-09 | 2018-04-23 | Apple Inc | Intelligent automated assistant in a home environment |
US10067938B2 (en) | 2016-06-10 | 2018-09-04 | Apple Inc. | Multilingual word prediction |
US10490187B2 (en) | 2016-06-10 | 2019-11-26 | Apple Inc. | Digital assistant providing automated status report |
US10586535B2 (en) | 2016-06-10 | 2020-03-10 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
US10509862B2 (en) | 2016-06-10 | 2019-12-17 | Apple Inc. | Dynamic phrase expansion of language input |
US10192552B2 (en) | 2016-06-10 | 2019-01-29 | Apple Inc. | Digital assistant providing whispered speech |
DK179415B1 (en) | 2016-06-11 | 2018-06-14 | Apple Inc | Intelligent device arbitration and control |
DK179049B1 (en) | 2016-06-11 | 2017-09-18 | Apple Inc | Data driven natural language event detection and classification |
DK179343B1 (en) | 2016-06-11 | 2018-05-14 | Apple Inc | Intelligent task discovery |
DK201670540A1 (en) | 2016-06-11 | 2018-01-08 | Apple Inc | Application integration with a digital assistant |
US10043516B2 (en) | 2016-09-23 | 2018-08-07 | Apple Inc. | Intelligent automated assistant |
US11107021B2 (en) | 2016-11-06 | 2021-08-31 | Microsoft Technology Licensing, Llc | Presenting and manipulating task items |
US10593346B2 (en) | 2016-12-22 | 2020-03-17 | Apple Inc. | Rank-reduced token representation for automatic speech recognition |
US10558467B2 (en) * | 2017-03-30 | 2020-02-11 | International Business Machines Corporation | Dynamically generating a service pipeline comprising filtered application programming interfaces |
DK201770439A1 (en) | 2017-05-11 | 2018-12-13 | Apple Inc. | Offline personal assistant |
DK179745B1 (en) | 2017-05-12 | 2019-05-01 | Apple Inc. | SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT |
DK179496B1 (en) | 2017-05-12 | 2019-01-15 | Apple Inc. | USER-SPECIFIC Acoustic Models |
DK201770432A1 (en) | 2017-05-15 | 2018-12-21 | Apple Inc. | Hierarchical belief states for digital assistants |
DK201770431A1 (en) | 2017-05-15 | 2018-12-20 | Apple Inc. | Optimizing dialogue policy decisions for digital assistants using implicit feedback |
DK179560B1 (en) | 2017-05-16 | 2019-02-18 | Apple Inc. | FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES |
US11314214B2 (en) | 2017-09-15 | 2022-04-26 | Kohler Co. | Geographic analysis of water conditions |
US11099540B2 (en) | 2017-09-15 | 2021-08-24 | Kohler Co. | User identity in household appliances |
US10887125B2 (en) | 2017-09-15 | 2021-01-05 | Kohler Co. | Bathroom speaker |
US10448762B2 (en) | 2017-09-15 | 2019-10-22 | Kohler Co. | Mirror |
US11093554B2 (en) | 2017-09-15 | 2021-08-17 | Kohler Co. | Feedback for water consuming appliance |
CN108037999A (zh) * | 2017-12-06 | 2018-05-15 | 广东欧珀移动通信有限公司 | 资源配置方法及相关产品 |
CN110012048B (zh) | 2018-11-22 | 2021-11-12 | 创新先进技术有限公司 | 信息识别码生成方法、装置、电子设备及计算机存储介质 |
US10952022B2 (en) * | 2019-05-17 | 2021-03-16 | Citrix Systems, Inc. | Systems and methods for identifying a context of an endpoint accessing a plurality of microservices |
WO2021066818A1 (en) * | 2019-10-01 | 2021-04-08 | Google Llc | Providing assistive user interfaces using execution blocks |
US11775586B2 (en) * | 2020-03-04 | 2023-10-03 | Jpmorgan Chase Bank, N.A. | System and method for implementing cloud operation with no prior knowledge of services |
FR3128840A1 (fr) * | 2021-11-04 | 2023-05-05 | Orange | Supervision du fonctionnement d’un service de transmission de données mis en œuvre selon au moins deux technologies différentes |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05197573A (ja) | 1991-08-26 | 1993-08-06 | Hewlett Packard Co <Hp> | タスク指向パラダイムによるタスク管理システム |
US6983227B1 (en) * | 1995-01-17 | 2006-01-03 | Intertech Ventures, Ltd. | Virtual models of complex systems |
US6324567B2 (en) * | 1997-06-11 | 2001-11-27 | Oracle Corporation | Method and apparatus for providing multiple commands to a server |
US6901596B1 (en) * | 1998-05-07 | 2005-05-31 | Hewlett-Packard Development Company, L.P. | Method of communicating asynchronous events to remote procedure call clients |
US6556875B1 (en) | 1998-06-30 | 2003-04-29 | Seiko Epson Corporation | Device control system |
EP1069500A1 (en) | 1999-07-12 | 2001-01-17 | International Business Machines Corporation | Downloadable user-interface |
US20020078255A1 (en) | 2000-10-17 | 2002-06-20 | Shankar Narayan | Pluggable instantiable distributed objects |
US20020107939A1 (en) | 2001-02-07 | 2002-08-08 | Ford Daniel E. | System and method for accessing software components in a distributed network environment |
US20020116225A1 (en) * | 2001-02-15 | 2002-08-22 | Margaret Morse | Tracking and reporting client outcome |
ATE396570T1 (de) | 2001-04-12 | 2008-06-15 | Research In Motion Ltd | System und verfahren zum dynamischen schieben von informationen in drahtlose datenkommunikationsgeräte |
US7170857B2 (en) | 2001-08-10 | 2007-01-30 | Strix Systems, Inc. | Virtual linking using a wireless device |
US6859803B2 (en) | 2001-11-13 | 2005-02-22 | Koninklijke Philips Electronics N.V. | Apparatus and method for program selection utilizing exclusive and inclusive metadata searches |
US7424701B2 (en) * | 2002-02-12 | 2008-09-09 | Sandpiper Software, Inc. | Method and apparatus for frame-based knowledge representation in the unified modeling language (UML) |
US7127261B2 (en) * | 2002-02-22 | 2006-10-24 | Julian Van Erlach | Enhanced telecommunication services |
US6910037B2 (en) | 2002-03-07 | 2005-06-21 | Koninklijke Philips Electronics N.V. | Method and apparatus for providing search results in response to an information search request |
US20040054690A1 (en) | 2002-03-08 | 2004-03-18 | Hillerbrand Eric T. | Modeling and using computer resources over a heterogeneous distributed network using semantic ontologies |
US7159224B2 (en) * | 2002-04-09 | 2007-01-02 | Sun Microsystems, Inc. | Method, system, and articles of manufacture for providing a servlet container based web service endpoint |
KR20040001185A (ko) * | 2002-06-27 | 2004-01-07 | 삼성전자주식회사 | 부분 상세 지도를 제공하는 지도 표시 장치 및 그 방법 |
US20040083205A1 (en) | 2002-10-29 | 2004-04-29 | Steve Yeager | Continuous knowledgebase access improvement systems and methods |
US8561069B2 (en) * | 2002-12-19 | 2013-10-15 | Fujitsu Limited | Task computing |
US20040207659A1 (en) | 2003-04-02 | 2004-10-21 | International Business Machines Corporation | Program creation by combining web services using graphic user interface controls |
US20050060372A1 (en) | 2003-08-27 | 2005-03-17 | Debettencourt Jason | Techniques for filtering data from a data stream of a web services application |
US20050080768A1 (en) | 2003-10-10 | 2005-04-14 | International Business Machines Corporation | Methods and apparatus for dynamic service discovery from Web services representation chain |
US8117280B2 (en) * | 2003-12-12 | 2012-02-14 | Fujitsu Limited | Task computing |
US7596754B2 (en) | 2005-07-28 | 2009-09-29 | Microsoft Corporation | Application assistance |
US8140987B2 (en) | 2005-12-29 | 2012-03-20 | Sap Ag | GUI modeling of web services |
US8972872B2 (en) * | 2006-03-27 | 2015-03-03 | Fujitsu Limited | Building computing applications based upon metadata |
-
2005
- 2005-04-27 KR KR1020067017143A patent/KR100896245B1/ko not_active IP Right Cessation
- 2005-04-27 US US11/115,403 patent/US7761885B2/en not_active Expired - Fee Related
- 2005-04-27 WO PCT/US2005/014557 patent/WO2005104772A2/en active Application Filing
- 2005-04-27 EP EP05739051A patent/EP1759289A4/en not_active Withdrawn
- 2005-04-27 JP JP2007510963A patent/JP5205965B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
WO2005104772A2 (en) | 2005-11-10 |
WO2005104772A8 (en) | 2006-03-02 |
KR20070009568A (ko) | 2007-01-18 |
WO2005104772A3 (en) | 2006-09-14 |
US7761885B2 (en) | 2010-07-20 |
US20050246726A1 (en) | 2005-11-03 |
KR100896245B1 (ko) | 2009-05-08 |
JP2007535767A (ja) | 2007-12-06 |
EP1759289A4 (en) | 2008-08-20 |
EP1759289A2 (en) | 2007-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5205965B2 (ja) | コンピュータシステム、サーバー処理装置、端末装置及び方法 | |
CN100461109C (zh) | 语义任务计算 | |
US8117280B2 (en) | Task computing | |
US8561069B2 (en) | Task computing | |
RU2417408C2 (ru) | Динамический опыт пользователя посредством семантически богатых объектов | |
CN105830150A (zh) | 基于意图的用户体验 | |
KR20010085878A (ko) | 대화형 가상 기계를 통한 대화형 컴퓨터 | |
JP2005259131A (ja) | ワイヤレス・アプリケーションのスクリーン・エレメント又はデータ・オブジェトを生成する方法及びシステム | |
CN114064024A (zh) | 微应用的开发方法、装置、设备、存储介质及程序产品 | |
Sateli et al. | Smarter mobile apps through integrated natural language processing services | |
Desruelle et al. | Accessible user interface support for multi-device ubiquitous applications: architectural modifiability considerations | |
Cardoso et al. | PuReWidgets: a programming toolkit for interactive public display applications | |
Sarhan et al. | Web applications and web services: A comparative study | |
US11449186B2 (en) | System and method for optimized generation of a single page application for multi-page applications | |
Soylu et al. | Mashups and widget orchestration | |
KR20180060360A (ko) | 클라우드 컴퓨팅 환경에서 제공되는 총무 관리 프로그램에서 사용자 정의에 따른 사용자 인터페이스 제공 방법 및 장치 | |
Neßelrath et al. | Rapid development of multimodal dialogue applications with semantic models | |
JP5650877B2 (ja) | 複数のコンピューティング機能ソースを用意するための装置及び方法 | |
Ruokonen et al. | Describing mobile devices as RESTful services for the end-users | |
Baron | Development of Internet Communicator | |
Bamfo | An implementation of a web platform to support free recycling in Ghana | |
Satav | News on world map | |
Guo | Exploring New World with Network Technologies | |
Kostaras et al. | Learning the Extras of the Platform | |
Holstein et al. | Towards an architecture for an ui-compositor for multi-os environments |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080324 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080324 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110823 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111024 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120612 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120813 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130122 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130204 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160301 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |