JP2016521878A - デバイス間にわたるタスクの継続 - Google Patents

デバイス間にわたるタスクの継続 Download PDF

Info

Publication number
JP2016521878A
JP2016521878A JP2016518350A JP2016518350A JP2016521878A JP 2016521878 A JP2016521878 A JP 2016521878A JP 2016518350 A JP2016518350 A JP 2016518350A JP 2016518350 A JP2016518350 A JP 2016518350A JP 2016521878 A JP2016521878 A JP 2016521878A
Authority
JP
Japan
Prior art keywords
task
state
devices
component
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016518350A
Other languages
English (en)
Other versions
JP2016521878A5 (ja
Inventor
ヤン,アン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2016521878A publication Critical patent/JP2016521878A/ja
Publication of JP2016521878A5 publication Critical patent/JP2016521878A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • G06F9/4843Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/485Task life-cycle, e.g. stopping, restarting, resuming execution
    • G06F9/4856Task life-cycle, e.g. stopping, restarting, resuming execution resumption being on a different machine, e.g. task migration, virtual machine migration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/48Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806Task transfer initiation or dispatching
    • G06F9/4843Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues

Abstract

複数のユーザデバイスにわたってコンピュータ及び/又はアプリケーションタスクを継続するためのユーザ体験を容易にするアーキテクチャ。タスクステータスが、クラウドサービスを介して又は短距離無線ピアツーピア(P2P)を介して複数デバイス間にわたって同期され得る。例えば検索に適用されるとき、ユーザ体験は、ユーザが、同じ検索セッションを、複数デバイスにわたって幾つかの方法で再開することを可能にする。開示されるアーキテクチャは、ウェブブラウジングやオンラインミーティング、オフィスアプリケーションセッション等といった、他のタスクに拡張可能である。各デバイスのクライアントアプリケーションは、各アプリケーションの状態(例えばドキュメントリンク、ウェブサイト、オンラインミーティング情報等)を同期化の一部として収集し、その状態を使用して、異なるデバイス上で同じアプリケーションを再開する(例えば同じワードプロセッシングドキュメントを開くこと、同じウェブサイトへのブラウザ、オンライミーティングの再参加等)。

Description

ユーザにとって、一日を通してデバイス(例えばデスクトップ、ラップトップ、モバイルフォン)を複数回切り替えることは一般的ではあるが、同じタスクを継続することが望まれる。例えばユーザは、家を出る前にデスクトップコンピューティングシステムでレストランを検索し、レストランに向かう間にモバイルフォンで行き方/地図の検索を継続することがある。そのようなタスクを、あるデバイスから別のデバイスへ継続させることは、第1のデバイスに最初に入力したものと同じクエリを新たなデバイスに入力することのように、手動での対話を必要とする。
検索に加えて、ユーザが別のデバイス上で継続したいと思う可能性がある他のタスクも存在する。例えばユーザは、オンライン電話中に場所(及び、したがってデバイス)を変える必要があるが、同じ会話に別のデバイス(例えば電話)で再び参加したいことがある。別の例では、ユーザは、電話検索アプリケーション上で映画を見つけ、デスクトップコンピュータに切り替えて、その映画を観たいと思うことがある。しかしながら、これらのシナリオにおいて、デバイス間にわたってそのようなタスクを継続することは、ファイルをコピーすることや、ファイルを開いて同じページにブラウズすること、ウェブサイトを再びタイプすること、オンラインミーティングを見つけて再び参加すること等といった、追加の作業を必要とする。
下記では、本明細書で説明される幾つかの新規な実施形態の基本的な理解を提供するために、簡単な要約を提示する。この発明の概要における記載は広範な概要ではなく、主要な/本質的な要素を特定するようには意図されておらず、またその範囲を画定するようにも意図されていない。その唯一の目的は、後に提示されるより詳細な説明に対する前置きとして、幾つかの概念を簡単な形で提示することである。
開示されるアーキテクチャは、複数のユーザデバイスにわたってコンピュータ及び/又はアプリケーションのタスクを継続するユーザ体験を容易にすることである。タスクは、例えば検索、ブラウジング又は他のオフィスアプリケーションのアクティビティであり得る。タスクステータスは、クラウドサービスを介して、あるいはBluetooth(登録商標)のような短距離無線ピアツーピア(P2P)接続を介して、複数デバイスにわたって同期され得る。
例えば検索に適用されるとき、ユーザ体験は、ユーザが、同じ検索セッションを、複数デバイスにわたって幾つかの方法で再開することを可能にする。検索セッション及び他のセッションタイプのタスク継続を達成する1つめの方法は、検索履歴を同期するためにクラウドサービス(例えばオンラインデータストレージ、オンラインデータシェアリング、検索エンジンのような他のサービス)を使用することである。
タスク継続を達成する2つめの方法は、P2P接続(例えば短距離の無線又は有線)によるものである。検索の例を続けると、検索履歴をBluetooth接続によりP2Pにコピーすることができる。
開示されるアーキテクチャは、ウェブブラウジングやオンラインミーティング、オフィスアプリケーションセッション等といった、他のタスクに拡張可能である。各デバイスのクライアントアプリケーションは、各アプリケーションの状態(例えばドキュメントリンク、ウェブサイト、オンラインミーティング情報等)を同期化の一部として収集し、その状態を使用して、異なるデバイス上で同じアプリケーションを再開する(例えば同じワードプロセッシングドキュメントを開くこと、同じウェブサイトへのブラウザ、オンラインミーティングの再参加等)。
前述及び関連する目的を達成するために、本明細書では特定の具体的な態様が、以下の説明及び添付の図面と関連して説明される。これらの態様は、本明細書で開示される原理を実践することができる様々な方法を示し、その全ての態様及び均等物は、特許請求に係る主題の範囲内にあるように意図される。他の利点及び新規な特徴は、図面とともに検討されるときに、以下の詳細な説明から明らかになるであろう。
開示されるアーキテクチャに係るタスク再開システムを示す図である。
開示されるアーキテクチャに係るより詳細なタスク再開システムを示す図である。
あるデバイス上での1つ以上のタスクの選択と、別のデバイス上でのこれらのタスクの継続のための例示のユーザインタフェースを示す図である。
複数デバイスにおけるタスク継続のためのクラウドサービスを示す図である。
開示されるアーキテクチャに係る方法を示す図である。
開示されるアーキテクチャに係る代替的な方法を示す図である。
開示されるアーキテクチャに係るタスク継続を実行するコンピューティングシステムのブロック図である。
開示されるアーキテクチャは、複数のユーザデバイスにわたってコンピュータ及び/又はアプリケーションのタスクを継続するユーザ体験(例えば「タスクのタップ及び継続」)を容易にすることである。タスクは、例えば検索、ブラウジング又は他のオフィスアプリケーションのアクティビティであり得る。タスクステータスは、クラウドサービスを介して、あるいはBluetooth(登録商標)のような短距離無線ピアツーピア(P2P)接続を介して、複数デバイスにわたって同期され得る。
より具体的には、検索に適用されるとき、ユーザ体験は、ユーザが、同じ検索セッションを、例えば複数デバイスにわたって幾つかの方法で再開することを可能にする。検索セッション及び他のセッションタイプのタスク継続を達成する1つめの方法は、検索履歴を同期するためにクラウドサービス(例えばオンラインデータストレージ、オンラインデータシェアリング、検索エンジンのような他のサービス)を使用することである。各ユーザデバイスは、クライアントアプリケーションをインストールする(あるいは、既存のアプリケーションに対するアドオンコンポーネントである)。
全てのクライアントは、同じユーザID(例えばWindows Live(登録商標)の識別子(ID)、ソーシャルネットワークのID等)によりクラウドサービスにログインする。ユーザがデバイスを離れているとき、ユーザは、インストールされたクライアントアプリケーションと対話して、複数デバイスにわたって継続する1つ以上のタスク(例えば検索履歴、ブラウズセッション等)を選択する。この選択をオンデマンドで行うことができ、かつ/又は自動になるように予め構成することができる。他のユーザデバイスは、通知を受け取り、その1つ以上のタスクの再開を選択する(例えば「タップ及び継続」)ようユーザに促す。ユーザが別のデバイス上で応答すると、クライアントアプリケーションは必要なアプリケーション(例えばブラウザ及びアドオンプログラム等)を開いて(起動し)、関連する各アプリケーションの同じ状態を再開する(例えば同じクエリを発行して、同じウェブサイトを開く等)。
タスク継続を達成する2つめの方法は、P2P接続(例えば短距離の無線又は有線)によるものでる。検索の例を続けると、検索履歴をBluetooth接続によりP2Pにコピーすることができる。クラウドベースの解決策と比較すると、P2Pの解決策は実装がより容易であるが、無線接続では、タスクコンテキストの転送中に2つのデバイスがごく接近した状態のままであることを要する。
開示されるアーキテクチャは、ブラウザ拡張ツールバー、検索「チャーム(charm)」(Windows8(登録商標)のオペレーティングシステムの機能)、ブラウザ(例えばInternet Explorer(登録商標))又は他のクライアントアプリケーションへの適用も見つける。開示されるアーキテクチャは、ウェブブラジング、オンラインミーティング、オフィスアプリケーションセッション等といった他のタスクにも拡張可能である。クライアントアプリケーション(例えばクライアント108)は、各アプリケーションの状態(例えばドキュメントリンク、ウェブサイト、オンラインミーティング情報等)を同期化の一部として収集し、その状態を使用して、異なるデバイス上で同じアプリケーションを再開する(例えば同じワードプロセッシングドキュメントを開くこと、同じウェブサイトへのブラウザ、オンライミーティングの再参加等)
次に図面への参照を行うが、図面において、同様の参照番号は全体を通して同様の要素を示すのに使用される。以下の説明では、説明の目的上、その全体的な理解を提供するために様々な具体的な詳細が説明される。しかしながら、これらの具体的な詳細を用いずに新規な実施形態を実施することができることも明らかであろう。他の例では、その説明を容易にするために、周知の構造及びデバイスがブロック図の形式で示される。特許請求に係る主題の精神及び範囲内にある全ての変更形態、均等物及び代替形態を網羅することが意図される。
図1は、開示されるアーキテクチャに係るタスク再開システム100を図示している。システム100は、第2のデバイス、例えば第2のデバイス(D2)106における、第1のデバイス、例えば第1のデバイス(D1)104のタスク(又は複数のタスク)の再開を容易にする。そのサポートにおいて、システム100は、相互接続機構102(例えば無線の短距離技術(例えばBluetooth)、クラウドサービス等)と、タスクの再開のために、デバイス(及びクライアント)間のデータ及び信号の通信を可能にするデバイスクライアント(例えば第1のデバイス104の第1のデバイスクライアント(C1)108、第2のデバイス106の第2のデバイスクライアント(C2)110等)を備える。
クライアント(例えばクライアントC1、C2、C3等)は、デバイスソフトウェア(例えばオペレーティングシステム、他のアプリケーション等)と協働して動作し、タスク選択及び続いてその選択肢の通信を可能にし、1つ以上の他のデバイス上でのタスク処理を再開する。クライアントは、該クライアントがインストールされる特定のデバイスにおいて、より具体的には、単一のユーザに共通する複数デバイスにおいてのみ、互換性があるように動作するよう設計され得る。例えばあるクライアントは、携帯電話(例えば第1のデバイス104)上で互換性があるよう動作し、別のクライアントは、コンピュータ(例えばデスクトップデバイスD3、ラップトップコンピューティングデバイスD2及びD5、そしてタブレットコンピュータD4)上で動作するように設計され、更に別のクライアントは他の適切なデバイス112上で動作するように設計される。
動作において、第1のデバイス104で1つ以上のタスク(例えばウェブ検索)を実行するユーザは、開示されるアーキテクチャにより、その1つ以上のタスクを、第2のデバイス106上での再開のために選択することが可能になる。第1のクライアント108は、デバイスソフトウェアとともに動作して、タスクの選択/転送及び再開のためにユーザインタフェース(UI)114を提示する。
第1のデバイス104、第1のクライアント108及びUI114とのユーザ対話は、ジェスチャ対応型とすることができ、これによりユーザは、対話のために1つ以上のジェスチャを用いる。例えばジェスチャは、ナチュラルユーザインタフェース(NUI)ジェスチャとすることができる。NUIは、マウスやキーボード、リモートコントロール等といった入力デバイスによって課される人工的な制約から解放される「自然な」方法で、ユーザがデバイスと対話することを可能にする任意のインタフェース技術として定義され得る。NUI方法の例には、ジェスチャを用いるこれらの方法が含まれ、これらには限定されないが、例えば音声認識、タッチ認識、顔認識、スタイラス認識、エア認識(例えば手のポーズと動き及び他の身体/付随機関の動き/ポーズ)、頭及び目の追跡、声及び音声の発話、少なくとも視覚、音声、声、ポーズ及びタッチデータに関連する機械学習を含むように広く定義される。
NUI技術は、これらに限られないが、タッチ感知ディスプレイ、声及び音声認識、意図及び目的の理解、深度カメラ(例えば立体カメラシステム、赤外線カメラシステム、色カメラシステム及びこれらの組合せ)を使用する動きジェスチャ検出、加速度計/ジャイロスコープを使用する動きジェスチャ検出、顔認識、3Dディスプレイ、頭、目及び視線追跡、没入型拡張現実及び仮想現実システムを含み、その全てが、より自然なユーザインタフェース、並びに電場感知電極を使用する脳活性を感知するための技術(例えば脳波(EEG))及び他の神経バイオフィードバック方法を提供する。
UI114内に「タスクを選択して送信」機能を提示されると、ユーザは、第1のデバイス104のUI114によって容易にされるように、(部分的に完了したか、あるいは第2のタスクが前のタスクの完了後にのみ開始される場合は相互に関連する)1つ以上のタスクを選択することができ、次いでプロセッサに(例えば送信ボタンを押すこと)実行させることができ、この場合、全ての他のユーザデバイス(D2、D3、D4、D5及びクライアントC2、C3、C4、C5)が、対応するUI114内で通知(例えば「タスクを再開?」)を受け取る。ユーザは、次いで、他のユーザデバイスのいずれか(例えば第2のユーザデバイス106)のところへ行き、UI114の通知(例えば「タスクを再開?」)と対話して、第2のデバイス106上で1つ以上のタスクを再開させることができる。第2のデバイス106は、1つ以上のタスクを再開する必要がある、全てのアプリケーションを起動することになる。
第2のデバイス106のユーザが、その後、第3のデバイス116上におけるタスクの再開のために、第3のデバイス116を選んで再び移動する場合もあり得る。これを行う理由は、第2のデバイス106を使用する際の時間制約(例えば予期しない中断の前に15分しか使用する時間がなかった)、第2のデバイス106のリソースの制約(第3のデバイス116が、第2のデバイス106より多くのハードウェアリソースを有している)、第2のデバイス106のソフトウェア性能の限界(第3のデバイス116は、第2のデバイス106よりも強力なソフトウェアを有している)等に起因する。言い変えると、第1のデバイス104上でタスクを実行しているアプリケーションは、第2のデバイス106上でタスクを再開するアプリケーションと同じでなくともよい。
システム100が、タスクを再開するために、第2のデバイス106において利用可能な1つ又は複数のアプリケーションに対する第1のデバイス104内で使用される1つ又は複数のアプリケーションの互換性チェックを実行する場合があり得る。互換性チェックの結果は、バックグラウンドオペレーションとして選択プロセス中に提供することができるので、ユーザは、どのデバイスがタスクを再開するためにより適切であるか、あるいはより望ましいかを前もって知ることができる。
以前に示したように、相互接続機構102は、ネットワーククラウドサービス、ピアツーピア(P2P)接続又はその双方によるものとすることができる。クラウドサービスとして、クラウド内に格納され、かつネットワークサービスによりアクセス可能なデバイスデータに対して互換性チェックが行われるように、デバイスのハードウェア/ソフトウェア機能を「クラウド内で(in the cloud)」知り、格納することができる。P2P接続では、実装が望まれる場合、クライアントが互換性チェック機能を含むことができる。
図2は、開示されるアーキテクチャに係るより詳細なタスク再開システム200を図示している。図2のこの一対一の図では、各デバイスが、開示されるアーキテクチャを可能にするクライアントを伴う2つのデバイス、すなわち、第1のデバイス104及び関連する第1のクライアント108と、第2のデバイス106及び関連する第2のクライアント110とが図示されている。
第1のクライアント108は、第2のデバイス106上で継続する第1のデバイス104のタスク204の選択を可能にする、選択コンポーネント202を含むことができる。状態コンポーネント206は、自動的に行われるか、(ユーザにより)手動で行われる選択に基づいて、タスク204に関連付けられる第1のデバイス104のコンテキスト状態208をキャプチャする。コンテキスト状態208は、部分的に完了したタスク204の終了時間又はその時間近くに利用され、かつ第1のデバイス104におけるタスクの完了を容易にするよう動作している、1つ以上のアプリケーション、チェックポイント状態及び任意の他のデータ、設定、信号、プロセス等を備える。
通知コンポーネント210は、第2のデバイス106上でタスク204を継続するよう、(図2では、notifと省略されている)通知212又は他の信号を第2のデバイス106に送信する。通知212は、タスク再開を受け入れるか、タスク再開を拒否するよう、(例えばジェスチャによる)対話型の選択肢(option)を含むか、これを更に生成することができる。通知コンポーネント210は、他のデバイスから通知(信号)を受け取って処理し、ローカルデバイスにおける通知の表示を容易にすることもできる。同期コンポーネント214は、他のデバイス上で以前に実行されているタスクを再開するため、別の適切なデバイスから受け取ったコンテキスト状態(例えば第1のデバイス104のコンテキスト状態208)をローカル状態に対して同期する。
同様に、第2のデバイス106の第2のクライアント110は、第1のデバイス104上で継続する第2のデバイス106のタスク222の選択を可能にする、選択コンポーネント220を含むことができる。状態コンポーネント224は、選択に基づいて、タスク222に関連付けられる第2のデバイス106のコンテキスト状態226をキャプチャする。コンテキスト状態226は、部分的に完了したタスク222の終了時間又はその時間近くに利用され、かつ第1のデバイス104におけるタスク222の完了を容易にするよう動作している、1つ以上のアプリケーション、チェックポイント状態及び任意の他のデータ、設定、信号、プロセス等を備える。
通知コンポーネント228は、第1のデバイス104上でタスク222を継続するよう、通知(又は信号)(図示せず)を第1のデバイス104に送信する。通知は、タスク再開を受け入れるか、タスク再開を拒否するよう、(例えばジェスチャによる)対話型の選択肢を含むか、これを更に生成することができる。通知コンポーネント228は、他のデバイスから通知(信号)を受け取って処理し、ローカルデバイスにおける通知の表示を容易にすることもできる。同期コンポーネント230は、第2のデバイス106上でタスク204を再開するため、第1のデバイス104のコンテキスト状態208をローカル状態に対して同期する。
開示されるアーキテクチャに従って動作する全てのユーザデバイスは、(状態コンポーネント206による)状態キャプチャ、(選択コンポーネント202を使用する)選択、(通知コンポーネント210を使用する)通知及び(同期コンポーネント214を使用する)状態の同期、そして場合によっては(例えばジェスチャコンポーネント216を使用する)ジェスチャ認識といった本明細書で説明される機能を可能にする、クライアント(例えばクライアント108)を含むことが理解されよう。ジェスチャコンポーネント232は、受け取ったジェスチャを解釈して、第2のデバイス106上でタスク204を再開する。
一方向のオペレーションにおいて、ユーザは、第1のデバイス104の部分的に完了したタスク204を選択して第2のデバイス106上で再開(継続)することを選ぶ。したがって、第1のクライアント108は、通知及びコンテキスト状態208のキャプチャを容易にし、P2P接続による直接的又はクラウドサービスを通した間接的な第2のデバイス106の第2のクライアント110へのその伝送を容易にする。通知212が第2のデバイス106において受け取られると、第2のデバイス106のUIは、通知又は適切な実装命令をユーザに対して表示することができ、ユーザは、タスク204の継続を受け入れることを(デバイスディスプレイ上の「タップ」のようなジェスチャにより)選択することができる。
選択されると、同期コンポーネント230は、コンテキスト状態208を受け取って処理し、第2のデバイス106の現在の状態を、第1のデバイス104のコンテキスト状態208に対して同期(変更)する。したがって、図示されていないが、第2のデバイス106の状態は、コンテキスト状態208に到達するのに必要な全てのアプリケーションを開始することを含め、第1のデバイス104のコンテキスト状態208に対して構成される。コンテキスト状態が達成された旨の別の通知がユーザに提示される場合もあり、この場合、ユーザは、タスク204のその時点で再び開始することができる。
言い換えると、コンテキスト状態は、第1のデバイス内でローカルにキャプチャされて、ネットワークべースのサービスを介して第2のデバイスに通信される。コンテキスト状態は、第1のデバイス内でローカルにキャプチャされて、ピアツーピア接続を介して第2のデバイスに通信される。コンテキスト状態は、複数のアプリケーションに関連付けられ、複数のアプリケーションは、タスクを再開するよう第2のデバイス上で起動される。選択コンポーネントは、第2のデバイス上で再開すべき第1のデバイス上のタスクを自動的に選択する。ジェスチャコンポーネントは、ジェスチャをナチュラルユーザインタフェースジェスチャとして認識して、第2のデバイスにおけるタスクの再開を受け入れる。第1のデバイス及び第2のデバイスは、ログイン認証によって一般的に識別される。
図3は、あるデバイスにおける1つ以上のタスクの選択と、別のデバイスにおけるこれらのタスクの継続のための例示のユーザインタフェース300を図示している。第1のデバイス104上の第1のUI302(UI114と同様)は、ユーザに、現在処理中の、又は最近処理されていた1つ以上のタスクを選択する能力を提供する。選択されると、その1つ以上のタスクに関連付けられる1つ以上のアプリケーション、並びに第2のデバイス上でタスク状態を再生成するのに必要なアプリケーションデータ、チェックポイントデータ及び任意の他のデータ/情報を定義する、コンテキスト状態がキャプチャされる。
ここで、ユーザは、タッチスクリーンディスプレイと対話して、第2のデバイスにおける継続のために第1のタスク(Task-1)及び第3のタスク(Task-3)を選択する。したがって、選択コンポーネント202は、(例えばデバイスオペレーティングシステム及びアプリケーションログからの)現在のタスクの取得を可能にし、タスク情報の提示、選択及び送信を容易にして、通知を生成するだけでなく、タスクを継続する対象の宛先デバイス(例えば第2のデバイス106)を示す。
送信されると、宛先デバイス(例えば第2のデバイス106)は、第2のデバイス106のUI304内に示されるように、通知を受け取る。このUI304は単に、送信側デバイス(第1のデバイス104)で最初に選択されたタスクを表示し、ユーザに承諾(Accept)の能力を提供して、タッチのような別の解釈可能なジェスチャ又は認識されるジェスチャを使用して、第2のデバイス106上のタスク再開処理を開始することができる。第2のデバイス106の状態が第1のデバイス104のコンテキスト状態に達すると、第2のデバイス106上で再開が始まり得ることをユーザに知らせる、別の通知を提示することができる。理解されるように、NUI技術によると、ユーザ及びUIは、UIと対話してタスク選択及び再開の開始を招く技術のうちの任意の1つ又は組合せを用いることができる。
図4は、デバイスにおけるタスク継続のためのクラウドサービス400を図示している。サービス400は、例えばユーザデバイス情報402を知り、デバイスステータス404を介してどのユーザデバイスが現在オンラインで利用可能であるか又は何らかの他の通信手段によってアクセス可能であるかを知り、コンテキスト状態406を格納し、デバイス通知408を提供する能力を提供することができる。
ユーザが、第2のデバイス106上で処理しているタスクを再開するよう望み、最終的には選択するであろうという推論に基づいて、コンテキスト状態を、第1のデバイス104からクラウドサービス400にアップロードすることができる。例えば日時又は第1のデバイスからの出発点(departure)(例えば地理的な経緯度座標のような地理位置情報を使用して識別可能な情報として)に基づいて、第1のデバイス104は、コンテキスト状態を自動的にキャプチャし、ユーザによる可能性のある使用のために、コンテキスト状態をクラウドサービス400にアップロードするように構成され得る。ユーザが第2のデバイス106にアクセスすると、例えばユーザには、その時間にそのデバイスでタスク継続を再開する選択肢が提供されることになる。拒否した場合、コンテキスト状態は、クラウドサービス400からすぐに削除されるか、後日の再作成のために所定の期間の間保持され得る。したがって、履歴レコードをユーザアクティビティについて保持することができる。
ユーザデバイス情報402は、ハードウェア/ソフトウェアの能力、ログイン情報、ユーザアイデンティティ(所有権)情報等のような最小限のデバイス情報を記録することができる。ユーザデバイスステータス404は、いずれかの時点でユーザデバイスの利用可能性を追跡し、利用可能なユーザデバイスにのみ通知を送信するか、あるいはユーザデバイスがアクセス可能になるときにのみ送信する。
サービス400は、全ての利用可能なユーザデバイスに限らず、指定のユーザデバイスに通知を送信することも容易にする場合もあり得る。この決定は、例えば宛先デバイスの能力に基づくものとすることができる。このモデルを使用するとき、ユーザインタフェースは、ユーザがその上でタスクを継続すべき提案デバイスのセットのみを提示するか、あるいは全ての利用可能なデバイスを提示するが、どのデバイスがタスクの継続に使用するよう望まれるかを自動的に示すこともできる。
更に別の実装では、継続すべきタスクに基づいて、サービス400は、指定のタスクを処理する指定のデバイスを提案する。例えばタスクが重いモデリングアルゴリズムを伴う場合、デスクトップデバイスの公知の性能から、スマートフォンではなくデスクトップ上でタスク再開が望まれることがある。
ユーザインタフェースが、サービス400において、望まれるように任意のデバイスからアクセス可能であり再開され得る格納済みコンテキスト状態のリストも提供する場合があり得る。例えば第1のデバイス104がタスク継続の意図を他のデバイスにプッシュするプッシュモデルではなく、ユーザがサービス400内に格納された任意の数のコンテキスト状態アイテムから選択して、ユーザデバイス上で再開させることができる、プルモデルを用いることができる。
更に別の実装では、コンテキスト状態は、第1のデバイス104における指定のアプリケーションの状態をキャプチャして、第2のデバイス106において同じアプリケーションのコンテキスト状態を継続する。
本明細書には、開示されるアーキテクチャの新規の態様を実行するための例示の方法を表すフローチャートのセットが含まれる。説明の簡潔性の目的で、ここで示される1つ以上の方法は、例えばフローチャート又はフロー図の形式で図示され、一連の動作として説明されるが、これらに係る一部の動作は、異なる順序で及び/又は本明細書に図示及び説明されるものとは別の動作と同時に起こってもよいので、これらの方法は、動作の順序によって限定されないことが理解され、認識されよう。例えば当業者には、方法を、代替的に状態図のような一連の相関状態又はイベントとして示すことも可能であることが理解され、認識されよう。さらに、方法で説明される動作の必ずしも全てが新規な実装に必要とされないこともある。
図5は、開示されるアーキテクチャに係る方法を図示する。500において、第1のデバイスのタスクが、第2のデバイス上での継続のために選択される。502において、タスクに関連する第1のデバイスのコンテキスト状態がキャプチャされる。504において、第2のデバイスにおけるタスクの継続を可能にする通知が、第2のデバイスに送信される。506において、第2のデバイスにおけるタスクの継続を受け入れるよう通知と対話するジェスチャが、第2のデバイスで受け取られる。ジェスチャは、第1のデバイスにおいてタスク継続プロセスを開始するためにも用いることができる。508において、第1のデバイスのコンテキスト状態が第2のデバイスに送信される。510において、第2のデバイスの状態が第1のデバイスのコンテキスト状態と同期される。512において、コンテキスト状態に従って第2のデバイス上でタスクが再開される。
方法は、第1のデバイスのコンテキスト状態として又はコンテキスト状態の一部として、チェックポイントコンテキストをキャプチャするステップを更に備えることができる。方法は、短距離無線通信接続(例えばBluetooth)を介してコンテキスト状態を第1のデバイスから第2のデバイスへ送信するステップを更に備えることができる。方法は、ネットワークサービス(例えばクラウドサービス)を介してコンテキスト状態及び通知を第2のデバイスへ送信するステップを更に備えることができる。方法は、第2のデバイスのタッチディスプレイとの触覚的接触としてジェスチャを認識するステップを更に備えることができる。方法は、第1のデバイスにおけるタスクの自動及び/又は手動の選択を可能にするステップを更に備えることができる。
方法は、通知を第2のデバイス及びユーザの他のデバイスへ送信するステップを更に備えることができ、第2のデバイス及び他のデバイスは、ユーザのログイン識別子によって第1のデバイスに関連付けられる。方法は、通知及びコンテキスト状態を送信するためのネットワークサービスへ、第1のデバイス、第2のデバイス及び他のデバイスの各々のクライアントアプリケーションに自動的にログインするステップを更に備えることができる。方法は、第2のデバイスにおいて、第1のデバイスのコンテキスト状態を定義してタスクを再開する1つ以上のアプリケーションを起動するステップを更に備えることができる。
図6は、開示されるアーキテクチャに係る代替的な方法を図示している。600において、第1のデバイスの部分的に完了したタスクが、複数の他のデバイスのうちの1つでの再開のために選択される。602において、タスクに関連する第1のデバイスのアプリケーション状態がキャプチャされる。604において、通知が複数のデバイスに送信される。606において、複数のデバイスのうちの1つにおいて、第2のデバイス上でタスクの再開を開始するよう通知と対話するジェスチャが受け取られる。608において、第1のデバイスのアプリケーション状態が、複数の他のデバイスのうちの上記1つに送信される。610において、複数の他のデバイスのうちの上記1つのデバイスのアプリケーション状態が、第1のデバイスのアプリケーション状態と同期される。612において、部分的に完了したタスクが、第1のデバイスから受け取ったアプリケーション状態に基づいて、複数の他のデバイスのうちの上記1つにおいて再開される。
方法は、ネットワークサービスを介して、第1のデバイスの1つ以上のアプリケーションのアプリケーション状態を複数のデバイスのうちの上記1つへ送信するステップを更に備えることができる。方法は、短距離無線通信接続又はクラウドサービスを介して、通知及びアプリケーション状態を第1のデバイスから複数のデバイスのうちの上記1つへ送信するステップを更に備えることができる。方法は、複数のデバイスのうちの1つの互換性のあるアプリケーションを自動的に起動し、このアプリケーションを使用して、部分的に完了したタスクを再開するステップを更に備えることができる。
本明細書で使用されるとき、「コンポーネント」及び「システム」という用語は、ハードウェア、ソフトウェアと有形のハードウェアの組合せ、ソフトウェア又は実行中のソフトウェアのいずれかの、コンピュータ関連のエンティティを指すように意図される。例えばコンポーネントは、これらに限られないが、プロセッサ、チップメモリ、大容量記憶デバイス(例えば光ドライブ、半導体ドライブ及び/又は磁気記憶媒体ドライブ)及びコンピュータといった有形のコンポーネント、プロセッサ上で実行するプロセス、オブジェクト、実行可能ファイル、(揮発性又は不揮発性記憶媒体に記憶される)データ構造、モジュール、実行スレッド及び/又はプログラムといったソフトウェアコンポーネントとすることができる。
例として、サーバ上で実行するアプリケーションとサーバの双方をコンポーネントとすることができる。1つ以上のコンポーネントがプロセス及び/又は実行スレッド内に存在することができ、コンポーネントを、1つのコンピュータ上に局所化し、かつ/又は2つ以上のコンピュータ間に分散させることができる。「例示」という用語は、本明細書で使用されるとき、例、例示又は例証として機能することを意味する。「例」として本明細書で説明される任意の態様又は設計は、必ずしも他の態様又は設計に対して好ましい又は有利なものとして解釈されるべきではない。
次に、図7を参照すると、開示されるアーキテクチャに係るタスク継続を実行するコンピューティングシステム700のブロック図が図示されている。しかしながら、認識されるように、開示される方法及び/又はシステムの一部又は全ての態様は、アナログ信号、デジタル信号、混合信号及び他の機能が単一のチップ基板上に組み立てられるシステムオンチップとして実装されることが可能である。
その様々な態様についての追加のコンテキストを提供するために、図7及び下記の説明は、様々な態様を実装することができる適切なコンピューティングシステム700の簡単な一般的説明を提供するように意図される。上記の説明は、1つ以上のコンピュータにおいて実行することができるコンピュータ実行可能命令の一般的なコンテキストでの説明であるが、新規な実施形態を他のプログラムモジュールと組み合わせて実装することもでき、かつ/又はハードウェアとソフトウェアの組合せとして実装することもできることが当業者には認識されよう。
様々な態様を実装するためのコンピューティングシステム700は、処理ユニット704(マイクロプロセッサ及びプロセッサとも呼ばれる)を有するコンピュータ702と、システムメモリ706のようなコンピュータ読取可能記憶媒体(コンピュータ読取可能記憶媒体は、磁気ディスク、光ディスク、半導体ドライブ、外部メモリシステム、フラッシュメモリデバイスも含む)と、システムバス708を含む。処理ユニット704は、シングルプロセッサ、マルチプロセッサ、シングルコアユニット、マルチコアユニットといった様々な市販のプロセッサのうちのいずれかとすることができる。さらに、当業者に認識されるように、ミニコンピュータ、メインフレームコンピュータ、並びにパーソナルコンピュータ(例えばデスクトップ、ラップトップ、タブレットPC等)、ハンドヘルドコンピューティングデバイス、マイクロプロセッサベース又はプログラム可能な家庭用電化製品等を含め、各々1つ以上の関連するデバイスに動作可能に結合され得る他のコンピュータシステム構成で、新規な方法を実施することができる。
コンピュータ702は、携帯電話や他の携帯可能なデバイスのようなポータブル及び/又はモバイルコンピューティングのためのクラウドコンピューティングサービスをサポートする、データセンタ及び/又は計算リソース(ハードウェア及び/又はソフトウェア)において用いられる、幾つかのコンピュータのうちの1つとすることができる。クラウドコンピューティングサービスは、これらに限られないが、例えばインフラストラクチャ・アズ・ア・サービス、プラットフォーム・アズ・ア・サービス、ソフトウェア・アズ・ア・サービス、ストレージ・アズ・ア・サービス、デスクトップ・アズ・ア・サービス、データ・アズ・ア・サービス、セキュリティ・アズ・ア・サービス、API(アプリケーションプログラムインタフェース)・アズ・ア・サービスを含む。
システムメモリ706は、揮発性(VOL)メモリ710(例えばランダムアクセスメモリ(RAM))、不揮発性(NON-VOL)メモリ712(例えばROM、EPROM、EEPROM等)のようなコンピュータ読取可能記憶(物理的記憶)媒体を含むことができる。基本入力/出力システム(BIOS)は、不揮発性メモリ712内に格納されることが可能であり、起動中等にコンピュータ702内のコンポーネント間のデータ及び信号の通信を容易にする基本ルーチンを含む。揮発性メモリ710は、データをキャッシュするために静的RAMのような高速RAMも含むことができる。
システムバス708は、これらに限られないが、処理ユニット704に対するシステムメモリ706を含め、システムコンポーネントのためのインタフェースを提供する。システムバス708は、(メモリコントローラを有していても有していなくても)メモリバス及び周辺バス(例えばPCI、PCIe、AGP、LPC等)に更に相互接続することができる、様々な市販のバスアーキテクチャのいずれかを使用する幾つかのタイプのバス構造のうちのいずれかとすることができる。
コンピュータ702は、マシン読取可能ストレージサブシステム714と、ストレージサブシステム714をシステムバス708及び他の所望のコンピュータコンポーネントとインタフェースするためのストレージインタフェース716とを更に含む。ストレージサブシステム714(物理的記憶媒体)は、例えばフロッピー(登録商標)ディスクドライブ(HDD)、磁気フロッピー(登録商標)ディスクドライブ(FDD)、半導体ドライブ(SSD)及び/又は光ディスクストレージドライブ(例えばCD-ROMドライブ、DVDドライブ)のうちの1つ以上を含むことができる。ストレージインタフェース716は、例えばEIDE、ATA、SATA、IEEE1394といったインタフェース技術を含むことができる。
1つ以上のプログラム及びデータを、メモリサブシステム706、マシン読取可能及び取外し可能メモリサブシステム718(例えばフラッシュドライブのフォームファクタ技術)及び/又はストレージサブシステム714(例えば光、磁気、半導体)内に格納することができ、ストレージサブシステム714は、オペレーティングシステム720と、1つ以上のアプリケーションプログラム722と、他のプログラムモジュール724と、プログラムデータ726とを含む。
オペレーティングシステム720、1つ以上のアプリケーションプログラム722、他のプログラムモジュール724及び/又はプログラムデータ726は、例えば図1のシステム100のエンティティ及びコンポーネント、図2のシステム200のエンティティ及びコンポーネント、図3の例示のユーザインタフェース300のエンティティ及びフロー、図4のクラウドサービス400のエンティティ及びコンポーネント、そして図5及び図6のフローチャートで示される方法を含むことができる。
一般に、プログラムは、特定のタスクを実行するか特定の抽象データタイプを実装するルーチン、メソッド、データ構造、他のソフトウェアコンポーネント等を含む。オペレーティングシステム720、アプリケーション722、モジュール724及び/又はデータ726の全て又は一部を、例えば揮発性メモリ710のようなメモリ内にキャッシュすることもできる。認識されるように、開示されるアーキテクチャを様々な市販のオペレーティングシステム又はオペレーティングシステムの組合せで(例えば仮想マシンとして)実装することができる。
ストレージサブシステム714及びメモリサブシステム(706及び718)は、データ、データ構造、コンピュータ実行可能命令等の揮発性及び不揮発性のストレージのためのコンピュータ読取可能媒体として機能する。そのような命令は、コンピュータ又は他のマシンによって実行されると、そのコンピュータ又は他のマシンに方法の1つ以上の動作を実行させることができる。動作を実行する命令を1つの媒体上に格納することができ、あるいは命令が全て同じ媒体上にあるかどうかに関わらず、1つ以上のコンピュータ読取可能記憶媒体上でまとめて見えるように、命令を複数の媒体にわたって格納することも可能である。
コンピュータ読取可能記憶媒体は、伝播される信号自体を除き、コンピュータ702によってアクセス可能であり、取外し可能及び/又は取外し不可能な揮発性及び不揮発性の内部及び/又は外部媒体を含む。コンピュータ702では、様々なタイプの記憶媒体が、任意の適切なデジタルフォーマットでのデータの格納に適合する。ジップドライブ、半導体ドライブ、磁気テープ、フラッシュメモリカード、フラッシュドライブ、カートリッジ等のように、開示されるアーキテクチャの新規な方法(動作)を実行するためにコンピュータ実行可能命令を格納する、他のタイプの読取可能媒体を用いることもできることを当業者は認識されたい。
ユーザは、キーボードやマウスといった外部ユーザ入力デバイス728を使用して、並びに音声認識によって容易にされる音声コマンドによって、コンピュータ702、プログラム及びデータと対話することができる。他の外部ユーザ入力デバイス728は、マイクロフォン、IR(赤外線)リモートコントロール、ジョイスティック、ゲームパッド、カメラ認識システム、スタイラスペン、タッチスクリーン、ジェスチャシステム(例えば目の動き、頭の動き等)及び/又は同様のものを含むことができる。ユーザは、コンピュータ702が例えばポータブルコンピュータの場合、タッチパッド、マイクロフォン、キーボード等といったオンボードユーザ入力デバイス730を使用して、コンピュータ702、プログラム及びデータと対話することができる。
これら及び他の入力デバイスを、入力/出力(I/O)デバイスインタフェース732を通してシステムバス708を介して処理ユニット704に接続することができるが、パラレルポート、IEEE1394シリアルポート、ゲームポート、USBポート、IRインタフェース、短距離無線(例えばBluetooth)及び他のパーソナルエリアネットワーク(PAN)技術等といった他のインタフェースによって接続することもできる。I/Oデバイスインタフェース732は、プリンタ、オーディオデバイス、カメラデバイス等の出力周辺機器734、サウンドカード及び/又はオンボードオーディオ処理機能等の使用を容易にすることができる。
1つ以上のグラフィックインタフェース736(一般にグラフィクス処理ユニット(GPU)とも呼ばれる)は、コンピュータ702と外部ディスプレイ738(例えばLCD、プラズマ)及び/又は(例えばポータブルコンピュータ用の)オンボードディスプレイ740との間でグラフィック及びビデオ信号を提供する。グラフィックインタフェース736は、コンピュータシステムボードの一部として製造される可能性もある。
コンピュータ702は、論理接続を用いて、1つ以上のネットワーク及び/又は他のコンピュータへの有線/無線通信サブシステム742を介して、(例えばIPベースの)ネットワーク化された環境で動作することができる。他のコンピュータは、ワークステーション、サーバ、ルータ、パーソナルコンピュータ、マイクロプロセッサベースのエンターテイメント機器、ピアデバイス又は他の一般的なネットワークノードを含むことができ、典型的には、コンピュータ702に関連して説明される要素の多く又は全てを含むことができる。論理接続は、ローカルエリアネットワーク(LAN)、ワイドエリアネットワーク(WAN)、ホットスポット等への有線/無線の接続性を含むことができる。LAN及びWANネットワーキング環境は、オフィスや企業内では一般的であり、イントラネットのような企業規模のコンピュータネットワークを容易にし、これらは全て、インターネットのようなグローバル通信ネットワークへ接続してもよい。
ネットワーキング環境で使用されるとき、コンピュータ702は、有線/無線の通信サブシステム742(例えばネットワークインタフェースアダプタ、オンボードトランシーバサブシステム等)を介してネットワークに接続し、有線/無線ネットワーク、有線/無線プリンタ、有線/無線入力デバイス744等と通信する。コンピュータ702は、ネットワーク上で通信を確立するためのモデム又は他の手段を含むことができる。ネットワーク化された環境において、コンピュータ702に関連するプログラム及びデータを、分散システムに関連付けられるように、リモートのメモリ/ストレージデバイス内に格納することができる。認識されるように、示されるネットワーク接続は例示であり、コンピュータ間の通信リンクを確立する他の手段を使用することができる。
コンピュータ702は、IEEE802.xxファミリー規格のような無線技術を使用して、有線/無線デバイス又はエンティティと通信するよう動作可能であり、そのようなデバイス又はエンティティは、例えばプリンタ、スキャナ、デスクトップ及び/又はポータブルコンピュータ、パーソナルデジタルアシスタント(PDA)、通信サテライト、無線検出可能タグに関連付けられる機器又は位置(例えばキオスク、ニューススタンド、レストルーム)の任意の部分及び電話との無線通信(例えば無線変調技術によるIEEE802.11)内に動作可能に配置される無線デバイス等である。これは、少なくとも(無線コンピュータネットワーキングデバイスの相互運用性を保証するために使用される)ホットスポット用のWi−Fi(登録商標)、WiMax及びBluetooth無線技術を含む。したがって、通信は、従来的なネットワークと同様に予め定義された構造とすることができ、あるいは少なくとも2つのデバイス間のアドホック通信を簡単にすることができる。Wi-Fiネットワークは、IEEE802.11x(a、b、g等)と呼ばれる無線技術を使用して、セキュアで信頼性のある高速の無線接続を提供する。Wi-Fiネットワークを使用して、コンピュータを相互に、インターネットに、そして(IEEE802.3関連の技術及び機能を使用する)有線ネットワークに接続することができる。
上記で説明したものは、開示されるアーキテクチャの例を含む。当然、コンポーネント及び/方法の考えられる組合せを全て説明することは可能ではないが、当業者には、多くの更なる組合せ及び置換が可能であることが認識されよう。したがって、新規なアーキテクチャは、添付の特許請求の範囲の精神及び範囲内にあるそのような変更、修正及び変形を全て包含するように意図される。さらに、「含む(include)」という用語が詳細な説明又は請求項で使用される限りにおいて、そのような用語は、「備える(comprising)」という用語が請求項における暫定的な言葉として使用されるときに解釈されるよう、「備える(comprising)」という用語と同様に包含的であるように意図される。

Claims (10)

  1. システムであって、
    第2のデバイス上で継続するよう第1のデバイスのタスクの選択を可能にする、選択コンポーネントと、
    前記選択に基づいて、前記タスクに関連付けられる前記第1のデバイス上のコンテキスト状態をキャプチャする、状態コンポーネントと、
    前記タスクを継続するよう、前記第2のデバイスに通知を送信する、通知コンポーネントと、
    前記第2のデバイス上で前記タスクを再開するよう、受け取ったジェスチャを解釈する、ジェスチャコンポーネントと、
    前記第2のデバイス上で前記タスクを再開するよう、前記第2のデバイスの状態を前記コンテキスト状態と同期する、同期コンポーネントと、
    前記選択コンポーネント、前記通知コンポーネント、前記ジェスチャコンポーネント、前記状態コンポーネント及び前記同期コンポーネントの各々に関連付けられるコンピュータ実行可能命令を実行する、少なくとも1つのマイクロプロセッサと、
    を備える、システム。
  2. 前記コンテキスト状態は、前記第1のデバイスでローカルにキャプチャされて、ネットワークベースのサービスを介して前記第2のデバイスに通信されるか、ピアツーピア接続を介して前記第2のデバイスに通信される、
    請求項1に記載のシステム。
  3. 前記コンテキスト状態は、複数のアプリケーションに関連付けられ、該複数のアプリケーションは、前記タスクを再開するよう前記第2のデバイス上で起動される、
    請求項1に記載のシステム。
  4. 前記選択コンポーネントは、前記第2のデバイス上で再開すべき前記タスクを自動的に選択する、
    請求項1に記載のシステム。
  5. 前記ジェスチャコンポーネントは、前記第2のデバイス上の前記タスクの再開を受け入れるためのナチュラルユーザインタフェースジェスチャとして前記ジェスチャを認識する、
    請求項1に記載のシステム。
  6. 第2のデバイス上での継続のために第1のデバイスのタスクを選択する動作と、
    前記タスクに関連する、前記第1のデバイスのコンテキスト状態をキャプチャする動作と、
    前記第2のデバイス上での前記タスクの継続を可能にする通知を前記第2のデバイスに送信する動作と、
    前記第2のデバイス上での前記タスクの継続を受け入れるよう前記通知と対話するジェスチャを、前記第2のデバイスにおいて受け取る動作と、
    前記第1のデバイスのコンテキスト状態を前記第2のデバイスに送信する動作と、
    前記第2のデバイスの状態を、前記第1のデバイスの前記コンテキスト状態と同期する動作と、
    前記コンテキスト状態に従って前記第2のデバイス上で前記タスクを再開する動作と、
    を備える、方法。
  7. 前記第1のデバイスの前記コンテキスト状態としてチェックポイントコンテキストをキャプチャする動作
    を更に備える、請求項6に記載の方法。
  8. 前記通知を前記第2のデバイス及びユーザの他のデバイスへ送信する動作
    を更に備え、前記第2のデバイス及び前記他のデバイスは、ユーザログイン識別子によって前記第1のデバイスに関連付けられる、
    請求項6に記載の方法。
  9. 前記第1のデバイスの前記コンテキスト状態を定義して前記タスクを再開する1つ以上のアプリケーションを、前記第2のデバイス上で起動する動作
    を更に備える、請求項6に記載の方法。
  10. プロセッサによって実行されると、該プロセッサに、
    複数の他のデバイスのうちの1つにおける再開のために、第1のデバイスの部分的に完了したタスクを選択する動作と、
    前記タスクに関連する、前記第1のデバイスのアプリケーション状態をキャプチャする動作と、
    前記複数の他のデバイスに通知を送信する動作と、
    第2のデバイス上で前記タスクの再開を開始するよう前記通知と対話するジェスチャを、前記複数の他のデバイスのうちの前記1つにおいて受け取る動作と、
    前記第1のデバイスの前記アプリケーション状態を前記複数の他のデバイスのうちの前記1つに送信する動作と、
    前記複数の他のデバイスのうちの前記1つのアプリケーション状態を、前記第1のデバイスの前記アプリケーション状態と同期する動作と、
    前記第1のデバイスから受け取った前記アプリケーション状態に基づいて、前記部分的に完了したタスクを前記複数の他のデバイスのうちの前記1つにおいて再開する動作と、
    を含む動作を実行させるコンピュータ実行可能命令を備える、コンピュータ読取可能媒体。
JP2016518350A 2013-06-03 2014-05-30 デバイス間にわたるタスクの継続 Pending JP2016521878A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/908,468 US20140359637A1 (en) 2013-06-03 2013-06-03 Task continuance across devices
US13/908,468 2013-06-03
PCT/US2014/040102 WO2014197279A1 (en) 2013-06-03 2014-05-30 Task continuance across devices

Publications (2)

Publication Number Publication Date
JP2016521878A true JP2016521878A (ja) 2016-07-25
JP2016521878A5 JP2016521878A5 (ja) 2017-06-22

Family

ID=51059609

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016518350A Pending JP2016521878A (ja) 2013-06-03 2014-05-30 デバイス間にわたるタスクの継続

Country Status (11)

Country Link
US (1) US20140359637A1 (ja)
EP (1) EP3005112A1 (ja)
JP (1) JP2016521878A (ja)
KR (1) KR20160014639A (ja)
CN (1) CN105324754A (ja)
AU (1) AU2014275251A1 (ja)
BR (1) BR112015030262A2 (ja)
CA (1) CA2913917A1 (ja)
RU (1) RU2679242C2 (ja)
TW (1) TWI641955B (ja)
WO (1) WO2014197279A1 (ja)

Families Citing this family (113)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
EP2712441B1 (en) 2011-06-05 2020-09-23 Apple Inc. Systems and methods for displaying notifications received from multiple applications
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
US8769624B2 (en) 2011-09-29 2014-07-01 Apple Inc. Access control utilizing indirect authentication
US9804759B2 (en) 2012-05-09 2017-10-31 Apple Inc. Context-specific user interfaces
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US20150040008A1 (en) * 2013-08-02 2015-02-05 Gamer Parents Inc. Interactive overlay for video applications
BR112015018905B1 (pt) 2013-02-07 2022-02-22 Apple Inc Método de operação de recurso de ativação por voz, mídia de armazenamento legível por computador e dispositivo eletrônico
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
WO2015103085A1 (en) * 2014-01-03 2015-07-09 Mcafee, Inc. Social drive for sharing data
US10104155B2 (en) * 2014-03-14 2018-10-16 The University Of Tokyo Document providing system, providing-side apparatus, and display-side apparatus
US11343335B2 (en) 2014-05-29 2022-05-24 Apple Inc. Message processing by subscriber app prior to message forwarding
US11256294B2 (en) 2014-05-30 2022-02-22 Apple Inc. Continuity of applications across devices
AU2015100490C4 (en) * 2014-05-30 2017-04-13 Apple Inc. Continuity
US9967401B2 (en) 2014-05-30 2018-05-08 Apple Inc. User interface for phone call routing among devices
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
CN106471570B (zh) 2014-05-30 2019-10-01 苹果公司 多命令单一话语输入方法
CN116301544A (zh) 2014-06-27 2023-06-23 苹果公司 尺寸减小的用户界面
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
EP3195098A2 (en) 2014-07-21 2017-07-26 Apple Inc. Remote user interface
CN104123191A (zh) * 2014-07-31 2014-10-29 北京智谷睿拓技术服务有限公司 任务迁移控制方法、装置和系统
US10243891B2 (en) * 2014-08-14 2019-03-26 Oath Inc. Cross-device integration system and method
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
WO2016036541A2 (en) 2014-09-02 2016-03-10 Apple Inc. Phone user interface
US9621650B2 (en) * 2014-09-30 2017-04-11 Google Inc Mobile application state identifier framework
US11531672B1 (en) * 2015-02-05 2022-12-20 Bat City Labs, LLC Computerized system and method for electronically synchronizing work station sessions over a network
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US9591685B2 (en) * 2015-07-21 2017-03-07 Qualcomm Incorporated Efficient application synchronization using out-of-band device-to-device communication
US20170054767A1 (en) * 2015-08-17 2017-02-23 Google Inc. Transferring application state between devices
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10430040B2 (en) * 2016-01-18 2019-10-01 Microsoft Technology Licensing, Llc Method and an apparatus for providing a multitasking view
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
US10637986B2 (en) 2016-06-10 2020-04-28 Apple Inc. Displaying and updating a set of application views
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
US10261830B2 (en) * 2016-06-14 2019-04-16 Microsoft Technology Licensing, Llc Cross-device task execution
US10466891B2 (en) * 2016-09-12 2019-11-05 Apple Inc. Special lock mode user interface
US11204787B2 (en) * 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10754685B2 (en) 2017-03-03 2020-08-25 Microsoft Technology Licensing Llc Cross-device task registration and resumption
US11070647B1 (en) * 2017-03-14 2021-07-20 Parallels International Gmbh Seamless cross-platform synchronization of user activities and application data between mobile and desktop devices
US10693748B2 (en) * 2017-04-12 2020-06-23 Microsoft Technology Licensing, Llc Activity feed service
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
CN107273427B (zh) * 2017-05-18 2020-09-01 武汉大学 基于数据融合的跨设备网络信息搜索方法及系统
US11385930B2 (en) * 2017-06-21 2022-07-12 Citrix Systems, Inc. Automatic workflow-based device switching
US11580088B2 (en) 2017-08-11 2023-02-14 Microsoft Technology Licensing, Llc Creation, management, and transfer of interaction representation sets
US11531940B2 (en) 2017-09-27 2022-12-20 Microsoft Technology Licensing, Llc Implicit status tracking of tasks and management of task reminders based on device signals
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10637942B1 (en) * 2018-12-05 2020-04-28 Citrix Systems, Inc. Providing most recent application views from user devices
US11438435B2 (en) * 2019-03-01 2022-09-06 Microsoft Technology Licensing, Llc User interaction and task management using multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK201970511A1 (en) 2019-05-31 2021-02-15 Apple Inc Voice identification in digital assistant systems
EP4231124A1 (en) 2019-05-31 2023-08-23 Apple Inc. User interfaces for audio media control
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US10996917B2 (en) 2019-05-31 2021-05-04 Apple Inc. User interfaces for audio media control
US11481094B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for location-related communications
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
CN112312367A (zh) 2019-08-01 2021-02-02 联发科技(新加坡)私人有限公司 蓝牙通信方法及通信设备
WO2021068115A1 (en) 2019-10-08 2021-04-15 Citrix Systems, Inc. Application and device recommendation engine
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
JP2022041339A (ja) * 2020-09-01 2022-03-11 富士通株式会社 選択プログラム、情報処理装置および制御方法
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
CN112307405B (zh) * 2020-11-16 2024-03-22 Oppo广东移动通信有限公司 跨设备的应用接力方法、装置、设备、系统及存储介质
US11360634B1 (en) 2021-05-15 2022-06-14 Apple Inc. Shared-content session user interfaces
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
US11799971B2 (en) * 2022-02-17 2023-10-24 Bank Of America Corporation Systems and methods for session migration between devices
WO2023239708A1 (en) * 2022-06-07 2023-12-14 Canon U.S.A., Inc. System and method for authenticating presence in a room
CN116700914A (zh) * 2022-11-22 2023-09-05 荣耀终端有限公司 任务流转方法及电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002236592A (ja) * 2000-12-15 2002-08-23 Docomo Communications Laboratories Usa Inc 異種デバイス間におけるアプリケーションのマイグレーション方法およびシステム
JP2003242106A (ja) * 2002-02-14 2003-08-29 Sony Communication Network Corp 情報同期方法とこの方法を利用可能な情報同期装置および情報端末
JP2011076251A (ja) * 2009-09-29 2011-04-14 Nec Personal Products Co Ltd リモート操作システム、クライアント装置、サーバ、通信方法、プログラム及び記録媒体
JP2011187058A (ja) * 2010-03-04 2011-09-22 Panasonic Corp アプリケーションのセッション継続性に対応するシステム及び方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8713418B2 (en) * 2004-04-12 2014-04-29 Google Inc. Adding value to a rendered document
WO2005109829A1 (en) * 2004-05-06 2005-11-17 Koninklijke Philips Electronics N.V. Method device and program for seamlessly transferring the execution of a software application from a first to a second device
US20070021216A1 (en) * 2005-07-19 2007-01-25 Sony Ericsson Mobile Communications Ab Seamless gaming method and apparatus
US8583090B2 (en) * 2006-12-29 2013-11-12 Nokia Corporation Transferring task completion to another device
KR101405945B1 (ko) * 2007-10-15 2014-06-12 엘지전자 주식회사 통신 기기 및 통신 기기의 이동 히스토리 생성 방법
AU2008317006A1 (en) * 2007-10-21 2009-04-30 Citrix Systems, Inc. Systems and methods to adaptively load balance user sessions to reduce energy consumption
TW200933370A (en) * 2008-01-25 2009-08-01 Inventec Corp Interactive data synchronizing device, system and method therein with cross-platform feature
US8060582B2 (en) * 2008-10-22 2011-11-15 Google Inc. Geocoding personal information
WO2010105245A2 (en) * 2009-03-12 2010-09-16 Exbiblio B.V. Automatically providing content associated with captured information, such as information captured in real-time
US8437779B2 (en) * 2009-10-19 2013-05-07 Google Inc. Modification of dynamic contact lists
US8881055B1 (en) * 2010-05-18 2014-11-04 Google Inc. HTML pop-up control
US8473949B2 (en) * 2010-07-08 2013-06-25 Microsoft Corporation Methods for supporting users with task continuity and completion across devices and time
KR101855454B1 (ko) * 2010-09-17 2018-06-14 구글 엘엘씨 컴퓨팅 디바이스들 사이에서 정보를 이동시키기 위한 방법들 및 시스템들
US8713098B1 (en) * 2010-10-01 2014-04-29 Google Inc. Method and system for migrating object update messages through synchronous data propagation
US8473577B2 (en) * 2010-10-13 2013-06-25 Google Inc. Continuous application execution between multiple devices
KR101780021B1 (ko) * 2010-10-18 2017-10-11 삼성전자주식회사 네트워크 인터페이스의 자동 설정에 기초해 인터넷 연결을 공유하는 방법 및 장치
GB201021875D0 (en) * 2010-12-23 2011-02-02 Antix Labs Ltd Methods of distributing software
US20120209413A1 (en) * 2011-02-14 2012-08-16 Microsoft Corporation Background Audio on Mobile Devices
US8996729B2 (en) * 2012-04-12 2015-03-31 Nokia Corporation Method and apparatus for synchronizing tasks performed by multiple devices

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002236592A (ja) * 2000-12-15 2002-08-23 Docomo Communications Laboratories Usa Inc 異種デバイス間におけるアプリケーションのマイグレーション方法およびシステム
JP2003242106A (ja) * 2002-02-14 2003-08-29 Sony Communication Network Corp 情報同期方法とこの方法を利用可能な情報同期装置および情報端末
JP2011076251A (ja) * 2009-09-29 2011-04-14 Nec Personal Products Co Ltd リモート操作システム、クライアント装置、サーバ、通信方法、プログラム及び記録媒体
JP2011187058A (ja) * 2010-03-04 2011-09-22 Panasonic Corp アプリケーションのセッション継続性に対応するシステム及び方法

Also Published As

Publication number Publication date
BR112015030262A2 (pt) 2017-07-25
KR20160014639A (ko) 2016-02-11
CA2913917A1 (en) 2014-12-11
CN105324754A (zh) 2016-02-10
WO2014197279A1 (en) 2014-12-11
AU2014275251A1 (en) 2015-12-17
WO2014197279A9 (en) 2015-02-26
TW201508492A (zh) 2015-03-01
RU2679242C2 (ru) 2019-02-06
RU2015151572A (ru) 2017-06-06
TWI641955B (zh) 2018-11-21
EP3005112A1 (en) 2016-04-13
US20140359637A1 (en) 2014-12-04

Similar Documents

Publication Publication Date Title
JP2016521878A (ja) デバイス間にわたるタスクの継続
CN110651241B (zh) 将多个移动设备连接到智能家庭助理账户
US10484347B2 (en) Method and apparatus for supporting secure chat
EP3127008B1 (en) Infrastructure for synchronization of mobile device with mobile cloud service
US9294572B2 (en) Session transfer and suspension in a remote access application framework
RU2700188C2 (ru) Представление вычислительной среды на множественных устройствах
TWI612781B (zh) 會議呼叫代管技術
US20120096368A1 (en) Cloud-based virtual clipboard
WO2015031546A1 (en) Gesture-based content sharing between devices
CN112789598A (zh) 提供镜像saas应用程序会话的计算机系统
CN104854574B (zh) 在实时通信和共享体验会话期间更新服务
JP2014519627A (ja) 疎結合コンポーネントを使用した音声認識
US11647086B2 (en) System and method for maintaining user session continuity across multiple devices and/or multiple platforms
US20160261693A1 (en) Cloud-based data backup and operation method and system
JP2017511557A (ja) 機械可読コードを使用したデバイスの認証およびペアリング
JP2013025815A (ja) メモデータの同期化のためのメモ同期化システム、モバイルシステム及びメモ同期化方法
KR20150135439A (ko) 온라인 공유를 위한 클라우드 서비스들의 통합
US10754678B2 (en) Collaborative hosted virtual systems and methods
CN114630079A (zh) 视频通信数据的动态显示
JP2016503527A (ja) 位置に基づくソーシャルネットワーキングシステムおよび方法
US9813506B2 (en) Distributed self-served application remoting
US11455088B2 (en) Contextual notes for online meetings
EP3756103A1 (en) File and data migration to storage system
US20120311459A1 (en) Facilitated content item transfer

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170508

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170508

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180329

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180403

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180626

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20181204