JP6258475B2 - クライアントデバイスにメディアアセットを提供するための方法 - Google Patents

Description

本発明は、メディアアセットの提供、およびクライアントデバイスでのそのようなメディアアセットのプレイアウトの分野に関する。

よく知られているマルチメディア環境は、受信されたメディアを、セットトップボックスまたは他の顧客宅内機器を介してプレイアウトするためのメディアプレイヤを含む。このようなメディアプレイヤには、例えば、セットトップボックスを介してインターネットに接続されたテレビ、パーソナルコンピュータを含むインターネット接続されたコンピュータ、携帯デバイスなどがある。このようなマルチメディア環境は、通常、メディアサーバも含み、このようなメディアサーバは、オンデマンドで映像を提供することができるエンタープライズクラスの機械から、より広範には、様々なデジタルメディア（デジタル映像／映画、音声／音楽、および画像ファイルを意味する）の格納専用の小型パーソナルコンピュータまたは家庭用ネットワークアタッチストレージＮＡＳ（Ｎｅｔｗｏｒｋ Ａｔｔａｃｈｅｄ Ｓｔｏｒａｇｅ）にわたる、専用コンピュータアプライアンスまたは特定用途向けソフトウェアを指す。

このようなメディア環境では、在宅ユーザは、宅内でローカルに、またはこのユーザのクライアントデバイスで選択された映画のプレイアウト用のグローバルビデオオンデマンドプロバイダによって維持されるデバイスを用いて、メディアサーバによって維持される映画レンタルカタログから、映画を選ぶことができる。

選ばれてプレイアウトされたメディアを観るこのようなユーザのマルチメディア体験は、現在再生されている映画の音声や映像に限定され、マルチメディア体験の向上を何ら促進しない。

本発明の目的は、知られているマルチメディア環境の上記の欠点を克服する、上記の知られているタイプの関連システムおよび関連デバイスと、方法を提供することである。

本発明の一実施形態によれば、この目的は、クライアントデバイスでマルチメディアアセットをプレイアウトするために、前記クライアントデバイスに前記メディアアセットを提供するための方法、関連システム、および関連デバイスによって実現され、前記メディアアセットの部分がメタデータに関係し、方法は：
− メディアサーバが、前記メディアアセットの部分を、前記クライアントデバイスへ転送するステップと、
− 前記メディアサーバが、統合サーバに、前記クライアントデバイスでプレイアウトするために、前記クライアントデバイスに提供される前記メディアアセットの前記部分を通知するステップと、
− 前記統合サーバが、提供された前記メディアアセットの前記部分に関係するメタデータを取得するステップと、
− 前記統合サーバが、取得された前記メタデータに応じて、少なくとも１つのサービス記述を取得するステップであって、前記少なくとも１つのサービス記述の各サービス記述が、複数のモノのインターネットデバイスのそれぞれのモノのインターネット対応デバイスによって提供されるサービスを規定し、各モノのインターネット対応デバイスが、前記クライアントデバイスのユーザに関係する、取得するステップと、
− 前記統合サーバが、前記クライアントデバイスに提供されるメディアアセットの前記部分、提供された前記メディアアセットの前記部分に関係する前記メタデータ、および前記少なくとも１つのサービス記述に応じて、メディア体験強化動作を決定するステップと、を含む。このように、最初にメディアサーバによって、前記メディアアセットの部分を、前記クライアントデバイスへ転送し、次に、メディアサーバが、統合サーバに、前記クライアントデバイスでプレイアウトするために、前記クライアントデバイスに提供される前記メディアアセットの前記部分、またはそれの識別情報（例えば、その部分を識別する番号）を通知し、前記統合サーバが、クライアントデバイスに提供された前記メディアアセットの部分に関係するメタデータを取得し、また追加的に、前記統合サーバが、取得された前記メタデータに応じて、少なくとも１つのサービス記述を取得し、そこでは、少なくとも１つのサービス記述の各サービス記述が、複数のモノのインターネットデバイスのそれぞれのモノのインターネット対応デバイスによって提供されるサービスを規定し、各モノのインターネット対応デバイスが、前記クライアントデバイスのユーザに関係し、次に前記統合サーバが：
− 前記クライアントデバイスに提供されるメディアアセットの前記部分、
− 提供された前記メディアアセットの前記部分に関係する前記メタデータ、
および、
−前記少なくとも１つのサービス記述に応じて、メディア体験強化動作を決定できる。このようなメディア体験強化動作は、前記クライアントデバイスのユーザに関係するモノのインターネット対応デバイスのサービスの呼び出しを含んでもよく、また、追加的にまたは代替方法として、例えば、プレイアウトの停止、プレイアウトの一時停止、プレイアウトの再開、早送り、知識向上メディアアセットを飛ばす命令の場合のセクションのスキップ、間違った解答の場合のセクションの巻き戻しなどのメディアアセット管理動作を含んでもよい。

このように、プレイアウトされたメディアアセットの音声および／または映像によって形成されるメディア体験は、所定の付加的メディア体験強化動作が、１つまたは複数の付加的環境効果を、例えば、ユーザの宅内にもたらすので、強化されることができる。このような付加的環境効果は、ドアベルまたはドアホンを鳴らすこと、部屋の照明を暗くすること、部屋の温度の上げ下げまたは冷温風を流すこと、湿度の上げ下げ、床を弱くまたは激しく振動させること、血圧、体重、血糖、コレステロールのような測定を行うことを要求すること、オーブンの温度の上げ下げ、などを含んでもよい。このように、メディア体験は、向上したユーザ体験へと導く付加的感覚によって、豊かにされる。

代替方法としてまたは追加的に、メディア体験は、例えば、プレイアウトを先に進める前に質問に答える選択権をユーザに与えるｅ−ラーニングモジュールなどのラーニングメディアアセットの場合に、停止された／一時停止されたメディアアセットのプレイアウトを先に進める前に行う、ある動作を要求することによって、高められてもよい。

このようなメディア体験強化動作は、前記クライアントデバイスのユーザに関係するモノのインターネット対応デバイスのサービスの呼び出しを含んでもよく、また、追加的または代替方法として、例えば、プレイアウトの停止、プレイアウトの一時停止、プレイアウトの再開、早送り、（知識向上、例えばラーニング）メディアアセットを飛ばす命令の場合のセクションのスキップ、間違った解答の場合のセクションの巻き戻しなどの、メディアアセット管理動作を含んでもよい。

このようなメディアアセットは、映像／映画、音声／音楽、および画像、またはそれらの組合せなどの、任意の音声および／または映像アセットであってよい。

メディアサーバによって転送されるメディアアセットは、映像の場合のフレームなどの部分に分割されてもよく、そこでは、各フレームが例えば番号で識別される。このような部分は代替的には、映像ストリームでのラベルによって識別されてもよい。メディアアセットでの部分の開始位置は、その固有で一意のフレーム番号によって識別されるか、または前記開始位置を指し、またそれに関係付けられるメタデータ識別子によって間接的に識別されてもよい。この明示的な識別子は、シーケンス番号または英数字列、例えばＡＳＣＩＩもしくはＵＴＦ−８形式のテキストラベルによって表されてもよい。

メタデータ識別子は、既定の開始位置のマルチメディアのバイトストリームに明示的に埋め込まれてもよい。代替的には、同じマルチメディアストリームに属するメタデータ識別子と、それらの関連開始位置との全てのペアが、共にグループ化され、特別なメタデータセクションに格納されてもよい。この特別なメタデータセクションは、外部ファイルに格納され得るか、またはそのターンにメディアストリームヘッダに埋め込まれ得る。前者の場合、外部メタデータファイルのＵＲＬは、このＵＲＬが外部から提供されることか、このＵＲＬがメディアファイルに埋め込まれることか、または、既定の規約（例えば、映像ファイル名はａｖａｔａｒ．ｍｐ４で、対応するメタデータファイル名はａｖａｔａｒ．ｍｍｅ）によって、解決される必要がある。

クライアントデバイスのユーザに関係するモノのインターネット対応デバイスは、クライアントデバイスのユーザとモノのインターネット対応デバイスとの間にリンクがあることを意味し、そこでは、そのデバイスがユーザによって所有されるか、またはこのユーザにサービスを提供するのに少なくとも使用できる。この関係は、モノのインターネット対応デバイスの、意図されたユーザに対する可用性を示す。

さらに、例えばフレームとしてのこのようなメディアの各部分は、メタデータに関係してもよく、この場合メタデータは、メディアアセットのこのような部分の内容についての情報（会話を文字化したもの、およびその場面のテキスト記述など）を含む。

またさらに、「モノのインターネットＩｏＴ（Ｉｎｔｅｒｎｅｔ ｏｆ Ｔｈｉｎｇｓ）」は、日常の物体がインターネットに接続され得、他のデバイスに対してそれら自体を識別できることを表すコンピューティング概念である。インターネットに接続されるこのような物体は、モノのインターネット対応デバイスと呼ばれる。このようなモノのインターネット対応デバイスは、センサ技術、無線技術、ＱＲコード（登録商標）、ＲＦＩＤタグのうちの１つまたは複数を含み、また「ＺｉｇＢｅｅ」（ｈｔｔｐ：／／ｗｗｗ．ｚｉｇｂｅｅ．ｏｒｇ／）、「Ｚｗａｖｅ」、「Ｃｏａｐ」、「ＫＮＸ」、「Ｐｒｏｐｒｉｅｔｙ ｐｒｏｔｏｃｏｌｓ（プロプライエタリなプロトコル）」の規格のうちの１つまたは複数に従って動作してもよい。

モノのインターネットは、インターネット式構造における一意に識別可能な物体およびそれらの仮想表現を指す。識別子を有する物体は、コンピュータによって管理およびインベントリされ得る。モノのタグ付けは、近距離無線通信、バーコード、ＱＲコード、および電子透かしのような技術を通して実現されてもよい。このようなモノのインターネット対応デバイスを管理し、それと通信することは、既存のエンドユーザ契約に従ってもよい。

このようなモノのインターネット対応デバイスのそれぞれは、サービスを提供するように構成される。

このようなサービスは、モノのインターネットデバイス上で作動してよいリソースによって提供される情報が取得され得る、または起動タスクが実行され得る、というような機能性へのアクセスを提供する。このようなデバイスを見つけて、サービスと相互作用するための基礎として、サービスは、サービス記述形式で適切に説明される必要がある。サービス記述は、構文レベルと意味レベルの両方で、サービスのインタフェースについての情報、例えば、必要な入力、提供された出力、または必要な事前条件および事後条件を含む。

さらに、サービス記述は、リソースの機能性、例えばリソースのタイプ、処理方法、もしくはアルゴリズムなどに関する情報、またはリソースが作動している、例えば、そのハードウェアもしくはその地理的位置の、デバイスに関する情報を含んでもよい。

このようなサービスの例には、ドアベルまたはドアホンを鳴らすこと、部屋の照明を暗くすること、部屋の温度の上げ下げまたは冷温風を流すこと、湿度の上げ下げ、床を弱くまたは激しく振動させること（映画館で）、血圧、体重、血糖、コレステロールのような測定を行うことを要求すること、オーブンの温度の上げ下げ（例えば、料理教室または家庭での料理教育の場合）があり、そこでは、ドアベル、照明システム、暖房システム、オーブン、測定用デバイスなどは、インターネット／イントラネットに接続されたデバイスである。

モノのインターネット（ＩｏＴ）の更なる定義は、ｈｔｔｐ：／／ｅｎ．ｗｉｋｉｐｅｄｉａ．ｏｒｇ／ｗｉｋｉ／Ｉｎｔｅｒｎｅｔ＿ｏｆ＿Ｔｈｉｎｇｓ＃ｃｉｔｅ＿ｎｏｔｅ−１９で確認することができる。

モノのインターネット（ＩｏＴ）は、フューチャーインターネットに組み込まれたもので、標準の相互運用可能な通信プロトコルに基づく、自己構成能力を有するダイナミックグローバルネットワークインフラストラクチャとして定義されてよく、そこでは、物理的および仮想の「モノ」が識別情報、物理的属性、および仮想人格を有し、インテリジェントインタフェースを使用し、また情報ネットワークにシームレスに組み込まれる。ＩｏＴでは、「モノ」が、業務、情報、および社会的なプロセスにおいて能動的な参加者になるよう期待され、そこでは、モノが、その環境について「感知された」データおよび情報を交換することによって、それらの間で、また環境と相互作用し、通信し合うことが可能とされるとともに、「現実／物質世界」の出来事に自律的に反応し、人間の直接的な介入によって、またはそれなしで、動作をトリガし、サービスを生成するプロセスを作動することによって、その出来事に影響を及ぼす。サービス形式でのインタフェースは、インターネット上でのこれらの「スマートなモノ」との相互作用を容易にし、それらの状態や、それらに関係する任意の情報を、セキュリティやプライバシーの問題を考慮しながら、クエリし、変更する。

更なる実施形態では、前記メディア体験強化動作は、前記クライアントデバイスのユーザに関係するそれぞれのモノのインターネット対応デバイスのサービスの呼び出しを含む。このようなサービスは、例えば、インターネット／イントラネット接続のドアベルを鳴らすこと、または温度、湿度、クライアントデバイスのＧＰＳ位置のような情報を要求することであってもよく、この場合のＧＰＳ位置は、例えばマルチメディア旅行ガイドでのユーザの位置確認に適用されてもよく、そこでは、例えばその位置に依存して、新しいストリームが、近くのアトラクションへの人の関心において開始される。

別の実施形態では、前記メディア体験強化動作は、例えば、プレイアウトの停止、プレイアウトの一時停止、プレイアウトの再開、早送り、セクションのスキップ、セクションの巻き戻しなどのメディアアセット管理動作を含んでもよい。

本発明はまた、クライアントデバイスでマルチメディアアセットをプレイアウトするために、前記クライアントデバイスに前記メディアアセットを提供するためのシステムの実施形態に関し、前記メディアアセットの部分はメタデータに関係し、前記システムは：
− 前記メディアアセットの部分を、前記クライアントデバイスへ転送するように構成された手段と、
− 統合サーバに、前記クライアントデバイスでプレイアウトするために、前記クライアントデバイスに提供される前記メディアアセットの前記部分の識別情報を通知するように構成された手段と、
− 提供された前記メディアアセットの前記部分に関係するメタデータを取得する、前記統合サーバにおける手段と、
− 提供された前記メディアアセットの前記部分に関係するメタデータを取得するように構成された、前記統合サーバにおける手段と、
− 取得された前記メタデータに応じて、少なくとも１つのサービス記述を取得するように構成された、前記統合サーバにおける手段であって、前記少なくとも１つのサービス記述の各サービス記述が、複数のモノのインターネット対応デバイスのそれぞれのモノのインターネット対応デバイスによって提供されるサービスを規定し、モノのインターネット対応デバイスのそれぞれが、前記クライアントデバイスのユーザに関係する、手段と、
− 前記クライアントデバイスに提供されるメディアアセットの前記部分、提供された前記メディアアセットの前記部分に関係する前記メタデータ、および前記少なくとも１つのサービス記述に応じて、メディア体験強化動作を決定するように構成された、前記統合サーバにおける手段と
を備える。

本発明はまた、請求項７に記載の統合サーバ、請求項１０に記載のモノのインターネット対応サーバ、請求項１１に記載のメディアサーバ、および請求項１２に記載のモノのインターネット対応デバイスの実施形態に関する。

特許請求の範囲で使用される「備える」の用語は、その後に列挙される手段に限定されると解釈されるべきでないことに留意されたい。従って、「デバイスは手段ＡおよびＢを備える」の表現の範囲は、構成要素ＡおよびＢのみで構成されるデバイスに限定されるべきではない。これは、本発明に関しては、デバイスの関係構成要素がＡおよびＢのみであることを意味する。

同様に、特許請求の範囲で使用される「接続された」の用語も、直接の接続のみに限定されると解釈されるべきではないことに留意されたい。従って、「デバイスＢに接続されたデバイスＡ」の表現の範囲は、デバイスＡの出力がデバイスＢの入力に直接接続されるデバイスまたはシステムに限定されるべきではない。それは、他のデバイスまたは手段を含むパスであってもよい、Ａの出力とＢの入力との間のパスが存在することを意味する。

本発明の上記および他の目的および特徴は、以下の発明を実施するための形態を添付図面と併せて参照することによって、より明らかになり、また本発明そのものが最もよく理解されよう。

プレイアウトするために、クライアントデバイスにメディアアセットを提供するためのシステムの一実施形態の機能的表現を示す図である。 本発明による、統合サーバの一実施形態の機能的表現を示す図である。

説明および図面は、本発明の原理を単に例示するものである。従って、当業者であれば、本明細書に明示的に記載または示されてはいないが、本発明の原理を具体化し、また本発明の趣旨および範囲に含まれる様々なアレンジメントを考案できることが理解されよう。また、本明細書に列挙される全ての例は、主に、本発明の原理、および当技術分野の推進に向けて発明者が寄与した概念の理解において、読者を手助けする教育的目的のみのものであることが明らかに意図され、このような具体的に列挙された例および条件に制限されないものと解釈されるべきである。さらに、本発明の原理、態様、および実施形態、ならびにそれらの特定の例を列挙する本明細書の全ての記述は、それらの均等物を含むことが意図される。

本明細書のいずれのブロック図も、本発明の原理を具体化する例示的回路の概念図を表すことが、当業者には理解されよう。同様に、いずれのフローチャート、フロー図、状態遷移図、擬似コードなども、実質的にコンピュータ可読媒体において表され、コンピュータまたはプロセッサによって、そのようなコンピュータまたはプロセッサが明示的に示されるか否かに関わらず、実行されてもよい様々なプロセスを表すことが理解されよう。

図１の図面に関する以下の段落では、システムの実装が説明される。２番目の段落では、記載の要素間の全ての接続が規定される。

次に、図２で提示される記載のシステムの全ての関連機能手段が説明され、その後、全ての相互接続が説明される。続く段落では、システムの実際の実行が説明される。

システムの第１の基本要素は、画面上に受信されたメディアアセットを、および組み込み式または接続式スピーカを介して関連音声を再生するための、セットトップボックスを介してインターネットに接続されたテレビであるメディアプレイヤ、画面上に受信されたメディアを、および組み込み式または接続式スピーカを介して関連音声を再生するための、インターネットに接続されたパーソナルコンピュータなどのインターネット接続されたコンピュータ、または画面およびそのスピーカ上にメディアアセットを再生するように構成された携帯デバイスなどの、クライアントデバイスＣＤ（Ｃｌｉｅｎｔ Ｄｅｖｉｃｅ）である。

このようなシステムは、メディアサーバＭＳ（Ｍｅｄｉａ Ｓｅｒｖｅｒ）をさらに備え、このようなメディアサーバは、専用コンピュータアプライアンスか、または特定用途向けソフトウェアを指し、オンデマンドで映像を提供することができるエンタープライズクラスの機械から、より広範には、様々なデジタルメディア（デジタル映像／映画、音声／音楽、および画像ファイルを意味する）の格納専用の家庭用ネットワークアタッチストレージＮＡＳまたは小型パーソナルコンピュータにわたる。

本発明の実施形態の更なる基本要素は、使用可能なメタデータ、様々な使用可能なモノのインターネット対応デバイスのサービス記述に基づき、適切なメディア体験強化動作を決定するように構成される統合サーバＩＳ（Ｉｎｔｅｇｒａｔｉｏｎ Ｓｅｒｖｅｒ）である。

統合サーバＩＳは、前記クライアントデバイスに提供されるメディアアセットの前記部分、提供された前記メディアアセットの前記部分に関係するメタデータ、および前記少なくとも１つのサービス記述に応じて、メディア体験強化動作を決定し、次に、それぞれのデバイスに、プレイアウトされるメディアアセットを拡張するやり方で、決定されたメディア体験強化動作を実行するよう命令するように構成される。

統合サーバＩＳは、宅内デバイスや、また例えばメディアサーバのビデオオンデマンドプロバイダの構内に配置される外部デバイスであってもよく、また代替的にはインターネットクラウド内の専用サーバ上に位置してもよい。

本発明の実施形態の別の基本要素は、クライアントデバイスのユーザ、例えば、その家の住人に関係するモノのインターネット対応デバイスを管理または制御するように構成されたモノのインターネットサーバＩＴＳ（Ｉｎｔｅｒｎｅｔ ｏｆ Ｔｈｉｎｇｓ Ｓｅｒｖｅｒ）であり、この家では、いずれかのメディアアセットを再生するためのクライアントデバイスＣＤは、いくつかのモノのインターネット対応デバイスＤ１、Ｄ２、Ｄ３にインストールされるか、またはそれらを追加的に含む。これらのモノのインターネット対応デバイスＤ１、Ｄ２、Ｄ３は、モノのインターネットサーバＩＴＳに接続されたドアベル、中央制御式冷暖房システム、明暗調節可能な照明システム、警報システム、ＧＰＳデバイス、または温度、湿度、クライアントデバイスのＧＰＳ位置のような情報を要求するデバイスなどの他の任意の制御システムであってもよく、この場合のＧＰＳ位置は、例えば、マルチメディア旅行ガイドにおけるユーザの位置確認に適用されてもよい。追加的にまたは代替方法として、このようなモノのインターネット対応デバイスは、湿度の上げ下げ、床を弱くまたは激しく振動させること（映画館で）、血圧、体重、血糖、コレステロールのような測定を行うことを要求すること、オーブンの温度の上げ下げ（例えば、料理教室または家庭での料理教育の場合）のためのデバイスであってもよく、この場合、照明システム、暖房システム、オーブン、測定用デバイスなどのデバイスのそれぞれは、インターネットおよび／またはイントラネットを介して、モノのインターネットサーバＩＴＳに接続される、インターネット／イントラネット接続式デバイスである。

Ｄ１がインターネット接続されたドアベル、Ｄ２が建物内の明暗調節可能な照明システム、またＤ３が中央制御式冷暖房システムと仮定する。

追加的には、本発明のこの実施形態は、プレイアウトされるメタデータアセットに関係する全てのメタデータを格納するためのメタデータリポジトリＭＤＲ（ＭｅｔａＤａｔａ Ｒｅｐｏｓｉｔｏｒｙ）を備える。このようなメタデータリポジトリＭＤＲは、プレイアウト用の複数のメディアアセットのメタデータを含んでよい。

このメタデータは、メディアアセットのこのような部分の内容についての情報（会話を文字化したもの、およびその場面のテキスト記述など）を含んでもよい。

最後に、本発明のこの実施形態は、少なくとも１つのサービス記述を格納するように構成されたサービス記述リポジトリＳＤＲ（Ｓｅｒｖｉｃｅ Ｄｅｓｃｒｉｐｔｉｏｎ Ｒｅｐｏｓｉｔｏｒｙ）を備え、このようなサービス記述のそれぞれは、複数のモノのインターネット対応デバイスＤ１、Ｄ２、Ｄ３のそれぞれのモノのインターネット対応デバイスによって提供されるそれぞれのサービスを規定し、各モノのインターネットデバイスは、前記クライアントデバイスのユーザに関係する。この関係は、モノのインターネット対応デバイスの、意図されたユーザに対する可用性を示す。

ユーザ環境には、アクチュエータおよび／またはセンサなどのいくつかのモノのインターネットデバイスがある。このようなアクチュエータおよび／またはセンサは、任意選択で、クライアントデバイスＣＤ、またはこのようなクライアントデバイスのユーザに関係する別のデバイスに組み込まれてもよい。このような別のデバイスの一例は、第２のスクリーンデバイス、スマートホン、またはタブレットＰＣであってもよい。

アクチュエータおよび／またはセンサは、よく知られているサーバであるサービス記述リポジトリＳＤＲに、それらの能力を、サービス記述形式でアップロードする。よく知られているサーバＳＤＲでは、ユーザと、ユーザ環境のアクチュエータおよび／またはセンサとの間に関係が築かれる（マルチメディア体験の向上用のセンサ／アクチュエータの可用性を含意する）。

クライアントデバイスＣＤは、通信ネットワークＣＮ（Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｎｅｔｗｏｒｋ）上でメディアサーバＭＳに接続されてもよい。通信ネットワークＣＮは、メディアサーバが宅内に位置する場合、無線または有線ネットワークを含んでよい。通信ネットワークＣＮは、宅内無線または有線ネットワーク、および接続されたＤＳＬモデムを備えたデジタル加入者線アクセスネットワークを含んでもよく、または、メディアサーバがビデオオンデマンドプロバイダなどの外部パーティによって維持される外部デバイスである場合は、ケーブルネットワーク、およびクライアントデバイスＣＤをメディアサーバにインターネットを介して接続する移動体通信アクセスネットワークを含んでもよい。

宅内システムの場合、統合サーバＩＳは、無線または有線接続によってメディアサーバＭＳに接続されてもよい。

さらに、モノのインターネット対応デバイスＤ１、Ｄ２、Ｄ３は、両方のデバイスが宅内デバイスである場合、無線または有線ネットワークを含む通信ネットワークＣＮによって、モノのインターネットサーバＩＴＳに接続され、次に無線または有線接続によって、統合サーバに接続されてもよい。

代替的には、統合サーバＩＳが外部デバイスである場合、これらのデバイスは、固定ネットワークまたは固定もしくは移動体ネットワークの任意の組合せを含むインターネットネットワークおよびアクセスネットワークによって接続されてもよい。

サービス記述リポジトリＳＤＲおよびメタデータリポジトリＭＤＲは、有線または無線接続の任意の組合せによって、統合サーバＩＳに接続されてもよい。

次に、図２で提示される前記システムの全ての関連機能手段が説明され、その後全ての相互接続が説明される。続く段落では、システムの実際の実行が説明される。

統合サーバＩＳは、前記クライアントデバイスＣＤでプレイアウトするために、前記クライアントデバイスＣＤに提供される前記メディアアセットの部分のメディアサーバＭＳからの通知を受信するように構成される通信モジュールＣＭ（Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｍｏｄｕｌｅ）、およびメタデータリポジトリＭＤＲから提供された前記メディアアセットの前記部分に関係するメタデータを取得するように構成されるメタデータ取得モジュールＭＲＭ（Ｍｅｔａｄａｔａ Ｒｅｔｒｉｅｖａｌ Ｍｏｄｕｌｅ）と、取得された前記メタデータに応じて、前記クライアントデバイスＣＤのユーザに関係する複数のモノのインターネットデバイスＤ１、Ｄ２、Ｄ３のそれぞれのモノのインターネット対応デバイスによって提供されるサービスを規定する少なくとも１つのサービス記述を取得するように構成されるサービス記述管理モジュールＳＤＭＭ（Ｓｅｒｖｉｃｅ Ｄｅｓｃｒｉｐｔｉｏｎ Ｍａｎａｇｅｍｅｎｔ Ｍｏｄｕｌｅ）と、を備える。

統合サーバＩＳは、前記クライアントデバイスＣＤのユーザに関係するモノのインターネット対応デバイスＤ１、Ｄ２、Ｄ３のサービスの呼び出しを管理するように構成されるモノのインターネットサーバ管理モジュールＩＴＳＭＭ（Ｉｎｔｅｒｎｅｔ ｏｆ Ｔｈｉｎｇｓ Ｓｅｒｖｅｒ Ｍａｎａｇｅｍｅｎｔ Ｍｏｄｕｌｅ）をさらに備える。追加的には、統合サーバＩＳは、前記クライアントデバイスＣＤに提供される前記メディアアセットの前記部分、提供された前記メディアアセットの前記部分に関係する前記メタデータ、および前記少なくとも１つのサービス記述に応じて、メディア体験強化動作を決定するように構成される統合サーバロジックモジュールＩＳＬＭ（Ｉｎｔｅｇｒａｔｉｏｎ Ｓｅｒｖｅｒ Ｌｏｇｉｃ Ｍｏｄｕｌｅ）を備え、前記少なくとも１つのサービス記述の各サービス記述は、それぞれのモノのインターネット対応デバイスに関係する。

また、統合サーバＩＳの通信モジュールＣＭは、前記メディアサーバＭＳに、メディアアセットの停止や再開、プレイアウト、早送り、セクションのスキップ、セクションの巻き戻しなどのメディアアセット管理動作を実行するよう命令するように、さらに構成される。

モノのインターネット対応デバイスＤ１、Ｄ２、Ｄ３のいずれかによって提供されるサービスに対して追加的にまたは代替方法として、メディア体験は、例えば、プレイアウトを先に進める前に質問に答える機会をユーザに与えるｅ−ラーニングモジュールなどのラーニングメディアアセットの場合に、停止された／一時停止されたメディアアセットのプレイアウトを先に進める前に行う、ある動作を要求することによって、高められてもよい。

本発明の実行を説明するために、クライアントデバイスＣＤのユーザが、ローカル宅内メディアサーバ、または代替方法として、レンタルストアなどの外部メディアサーバであるメディアサーバＭＳにおいて、映画、例えば「郵便配達は２度ベルを鳴らさない」を観ることを選ぶと仮定する。メディアサーバＭＳは、この要求を受け取ると、次の部分、すなわちメディアアセットに対応するフレーム、すなわち映画を、クライアントデバイスＣＤへ転送することを開始する。映画のフレームをクライアントデバイスＣＤへ、メディアサーバＭＳによって転送する前、それと同時に、またはその直後に、メディアサーバＭＳは、通知を、統合サーバＩＳの通信モジュールＣＭに送信し、この場合、通知は、前記クライアントデバイスＣＤでプレイアウトするために、前記クライアントデバイスＣＤに提供される前記メディアアセットの部分に対する参照記号を含む。通知は、転送された部分、すなわちフレームの識別子を備えてもよく、この場合、識別子がフレーム番号であってもよい。フレームの識別情報は、クライアントデバイスＣＤに提供された前記メディアアセットの前記部分に関係するメタデータを、部分、すなわちフレーム識別情報に基づいて、取得するよう命令される統合サーバロジックモジュールＩＳＬＭに渡される。メタデータ取得モジュールＭＲＭは、転送された部分に関係するメタデータを取得する旨の命令を受信し、次に、メタデータリポジトリＭＤＲに、メディアアセットの意図された部分に関係するメタデータを提供するよう要求する。次に、メタデータリポジトリＭＤＲは、メタデータ取得モジュールＭＲＭを介して、統合サーバロジックモジュールＩＳＬＭに、関係するメタデータを提供する。

メディアアセットの転送された部分に関係する取得されたメタデータに基づき、統合サーバロジックモジュールＩＳＬＭは、取得されたメタデータに合致するモノのインターネット対応デバイスＤ１、Ｄ２、Ｄ３のそれぞれの１つまたは複数のサービス記述を取得し、この場合、この取得は、前記クライアントデバイスのユーザに関係するモノのインターネット対応デバイスＤ１、Ｄ２、Ｄ３のそれぞれに対応する合致したサービス記述を取り出すサービス記述管理モジュールＳＤＭＭによって実行される。

次に、統合サーバＩＳの統合サーバロジックモジュールＩＳＬＭは、前記クライアントデバイスＣＤに提供されるメディアアセットの部分、提供された前記メディアアセットの前記部分に関係するメタデータ、およびモノのインターネットデバイスに関係する少なくとも１つのサービス記述に応じて、メディア体験強化動作を決定する。統合サーバロジックモジュールＩＳＬＭは、次に、決定されたメディア体験強化動作に基づいて、モノのインターネットサーバＩＴＳに向けられる命令、および／またはメディアサーバＭＳに向けられる命令を生成する。メディア体験強化動作は、モノのインターネットデバイスのそれぞれによって行われる動作を規定する。命令は、それぞれのデバイスの動作を規定し、追加的にまたは代替方法として、メディアサーバＭＳによって行われるメディア管理動作（例えば、早送り、再生の停止など）を規定する。

この生成されたメディア体験強化命令は、対応するモノのインターネットサーバＩＴＳに、対応するサービスを実行するよう命令するモノのインターネットサーバ管理モジュールＩＴＳＭＭに転送される。代替方法としてまたは追加的に、決定されたメディア体験強化命令は、メディアサーバＭＳに決定された管理動作を実行するよう命令する、通信モジュールＣＭに転送される。

このように、統合サーバＩＳは、クライアントデバイスＣＤに送信されたフレームを追跡する。各フレームに対して、メタデータがメタデータリポジトリで使用可能か否かがチェックされる。メタデータが使用できる場合、追加として、使用可能な、すなわちユーザに関係する、対応するサービス記述を有するモノのインターネットデバイスのリストが取得される。

使用可能なメタデータ、対応するデバイスの使用可能と考えられるサービス記述に基づいて、統合サーバロジックモジュールＩＳＬＭは、どのサービス記述がメタデータに適合するかを決定し、次にメタデータに最も適するサービス記述を選択する。例えば、フレーム番号２５４がヒットした場合、ドアベルを鳴らすことに関係するメタデータ項目が取得され、ドアベルのサービス記述が選択され、次に統合サーバロジックモジュールＩＳＬＭは、モノのインターネットサーバ管理モジュールＩＴＳＭＭによって、モノのインターネットサーバＩＴＳに、映画のフレーム２５４の再生で、家のドアベルを鳴らすことによって、ユーザの宅内環境を作動させるよう命令する。

例えばフレーム番号４５６８７では、映画の非常に暗い場面に関係するメタデータが取得され、調光器のサービス記述が見つかり、それによって統合サーバロジックモジュールＩＳＬＭは、モノのインターネットサーバ管理モジュールＩＴＳＭＭによって、モノのインターネットサーバＩＴＳに、ユーザの宅内環境、すなわち、調光器を作動し、番号４５６８７のフレームの再生において、ユーザの居間の照明を１０％暗くするよう命令する。

別の実施形態では、ユーザは、インタラクティブ映画、例えば、小さな子ども向け映画である「ドーラ」を選び、そこでは、その映画を観ている子どものある反応または動作が、統合サーバＩＳによって要求される。

クライアントデバイスＣＤ、メディアサーバＭＳ、統合サーバＩＳ、メタデータリポジトリＭＤＲ、サービス記述リポジトリＳＤＲ、およびモノのインターネットサーバＩＴＳ間のシグナリングは、第１の実施形態と同様に行われる。

統合サーバＩＳは、メタデータをメタデータリポジトリＭＤＲから取得し、ユーザに関係するそれぞれのデバイスのサービスを取得することによって、ユーザの環境をチェックする。

ユーザの宅内環境には、いくつかのアクチュエータおよび／またはセンサがある。アクチュエータおよび／またはセンサは、それらの能力を、サービス記述形式で、よく知られているサーバＳＤＲにアップロードする。センサは、インタラクティブ映画でもたらされる相互作用の要求への応答用に適用されてもよい。例えば、子どもと相互作用するＫｉｎｅｃｔ（キネクト）ジェスチャセンサ、またはタブレットＰＣのタッチセンサなどのクライアントデバイスＣＤに組み込まれたセンサがある。子どもは、例えば、Ｋｉｎｅｃｔジェスチャセンサの場合、ビデオを再び開始する前に、１回または複数回、手を振って合図しなければならない。別の可能性では、クライアントデバイスＣＤに組み込まれたタッチセンサの場合、相互作用がタブレットから要求され、そこでは、子どもは何か特定のものを描かなければならず、例えば、子どもは画面上の好みのものを選ぶために、絵を描かなければならない。

統合サーバＩＳは、メディアサーバＭＳに、ユーザへの映像のストリーミングを開始するよう、また上記例のフレーム２５４において映画を停止するよう、命令する。次に、ユーザからの入力または動作が要求される。ユーザが動作を実行した場合、映画は、フレーム８０００１において継続する。

ここで、タブレット上の描画アプリケーションとの相互作用が期待される。子どもが花を描く、ということが期待される。花が描かれた場合、映像が再開される。

統合サーバＩＳ、メディアサーバＭＳのそれぞれが、クライアントデバイスのユーザの宅内にローカルに、または家の外の、ビデオオンデマンドプロバイダの構内などのサードパーティ構内に配置されてもよいことに留意されたい。

ＩＴＳが、クライアントデバイスのユーザの宅内にローカルに、または家の外の、クラウドベースサーバなどのサードパーティ構内に配置されてもよいことにさらに留意されたい。

最後の留意点として、本発明の実施形態は、機能ブロックによって上記に説明される。上記のこれらのブロックの機能記述から、これらのブロックの実施形態が、よく知られている電子部品でどのように製造され得るか、電子デバイスを設計する当業者には明白であろう。従って、機能ブロックの内容の詳細なアーキテクチャは提示されない。

本発明の原理は、特定の装置に関連して上に説明されたが、その説明は、単に例示としてなされたものであり、添付の特許請求の範囲により規定される本発明の範囲を限定するものではないことを明確に理解されたい。

本発明の更なる代替実施形態は、旅行者アプリケーション、教育アプリケーション、エンタテインメントアプリケーション、ゲームアプリケーション、またはそれらの組合せであってもよい。

旅行者アプリケーションの場合、マルチメディアアセット（音声のみ、または音声付き映画であってもよい）は、旅行者に市内を案内するのに使用される。使用されるＩｏＴセンサデバイスには、例えばＧＰＳおよびＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ：近距離無線通信）／ＲＦＩＤがあり、またスマートホンの振動がある。

旅行者が旅行を開始する場合、旅行者メディアアセットは、その都市の情報といっしょにＣＤデバイスにストリームされる。ＧＰＳ情報は、ストリームで異なる場面を開始するのに使用される。旅行者は、大聖堂に案内され、大聖堂に到着するとユーザの入力が期待され、例えば、大聖堂の特別な情報を得るために、ＮＦＣまたはＲＦＩＤで旅行者ボードに触れる。旅行者は、関心のある大聖堂の情報項目のみ選択してよいので、その個人的に関心のある所に案内され、定型ツアーには案内されない。旅行者はさらに、大聖堂を含む観光名所リストから選択をしてもよい。

本発明の別の実施形態は、教育、例えば、料理プログラムであってもよい。エンドユーザは、あるレシピに関する料理教室マルチメディアアセットを選択し、マルチメディアストリームが、全ての必要な材料を挙げながら開始され、マルチメディアストリームは、全ての物品がＱＲコードリーダでスキャンされるまで中断される（料理マルチメディアストリームが先に進む前に）。ＱＲリーダは、全てのＱＲコードを、モノのインターネット対応サーバＩＴＳを介して、統合サーバＩＳに送信する。全ての材料が揃っている場合、すなわち、必要な材料に対応する関連ＱＲコードを全て受け取った場合、マルチメディアストリームのストリーミングは、物品の重さを量る次の場面で継続される。この場合、この段階では、統合サーバＩＳは、各生産物の重さの計量の入力を待っている。全ての重さが正しいことを示す計量の正しい入力を全て受け取ると、統合サーバは、料理指導の次のパートを含むマルチメディアアセットの次のパートのストリーミングに進むよう命令する。このように、ユーザは、美味しい料理を作るために必要な全ての段階を通して案内／教育される。

Claims (13)

1. クライアントデバイス（ＣＤ）でメディアアセットをプレイアウトするために、前記クライアントデバイス（ＣＤ）に前記メディアアセットを提供するためのシステムであって、前記メディアアセットの部分がメタデータに関係し、前記システムが、
   − 前記メディアアセットの部分を、前記クライアントデバイス（ＣＤ）へ転送するように構成された手段と、
   − 統合サーバ（ＩＳ）に、前記クライアントデバイス（ＣＤ）でプレイアウトするために、前記クライアントデバイス（ＣＤ）に提供される前記メディアアセットの前記部分の識別情報を、通知するように構成された手段と、
   − 提供された前記メディアアセットの前記部分に関係するメタデータを取得するように構成された、前記統合サーバ（ＩＳ）における手段と、
   − 取得された前記メタデータに応じて、少なくとも１つのサービス記述を取得するように構成された、前記統合サーバ（ＩＳ）における手段であって、前記少なくとも１つのサービス記述の各サービス記述が、複数のモノのインターネットデバイス（Ｄ１、Ｄ２、Ｄ３）のそれぞれのモノのインターネット対応デバイスによって提供されるサービスを規定し、各モノのインターネット対応デバイスが、前記クライアントデバイス（ＣＤ）のユーザに関係する、取得するように構成された手段と、
   − 前記クライアントデバイスに提供されるメディアアセットの前記部分、提供された前記メディアアセットの前記部分に関係する前記メタデータ、および前記少なくとも１つのサービス記述に応じて、メディア体験強化動作を決定するように構成された、前記統合サーバ（ＩＳ）における手段と
   を備える、システム。
2. 前記メディア体験強化動作が、前記クライアントデバイスの前記ユーザに関係するそれぞれのモノのインターネット対応デバイス（Ｄ１、Ｄ２、Ｄ３）のサービスの呼び出しを含む、請求項１に記載のシステム。
3. 前記メディア体験強化動作が、メディアアセット管理動作を含む、請求項１または２に記載のシステム。
4. クライアントデバイス（ＣＤ）でメディアアセットをプレイアウトするために、前記クライアントデバイス（ＣＤ）に前記メディアアセットを提供するための方法であって、前記メディアアセットの部分がメタデータに関係し、前記方法が、
   − メディアサーバ（ＭＳ）が、前記メディアアセットの部分を、前記クライアントデバイス（ＣＤ）へ転送するステップと、
   − 前記メディアサーバ（ＭＳ）が、統合サーバ（ＩＳ）に、前記クライアントデバイス（ＣＤ）でプレイアウトするために、前記クライアントデバイス（ＣＤ）に提供される前記メディアアセットの前記部分を、通知するステップと、
   − 前記統合サーバ（ＩＳ）が、提供された前記メディアアセットの前記部分に関係するメタデータを取得するステップと、
   − 前記統合サーバ（ＩＳ）が、取得された前記メタデータに応じて、少なくとも１つのサービス記述を取得するステップであって、前記少なくとも１つのサービス記述の各サービス記述が、複数のモノのインターネットデバイス（Ｄ１、Ｄ２、Ｄ３）のそれぞれのモノのインターネット対応デバイスによって提供されるサービスを規定し、各モノのインターネット対応デバイスが、前記クライアントデバイス（ＣＤ）のユーザに関係する、取得するステップと、
   − 前記統合サーバ（ＩＳ）が、前記クライアントデバイスに提供されるメディアアセットの前記部分、提供された前記メディアアセットの前記部分に関係する前記メタデータ、および前記少なくとも１つのサービス記述に応じて、メディア体験強化動作を決定するステップと
   を含む、方法。
5. 前記メディア体験強化動作が、前記クライアントデバイスの前記ユーザに関係するそれぞれのモノのインターネット対応デバイス（Ｄ１、Ｄ２、Ｄ３）のサービスの呼び出しを含む、請求項４に記載のクライアントデバイス（ＣＤ）にメディアアセットを提供するための方法。
6. 前記メディア体験強化動作が、メディアアセット管理動作を含む、請求項４または５に記載のクライアントデバイス（ＣＤ）にメディアアセットを提供するための方法。
7. クライアントデバイス（ＣＤ）でメディアアセットをプレイアウトするために、前記クライアントデバイス（ＣＤ）に前記メディアアセットを提供するための、請求項１に記載のシステムで使用するための統合サーバ（ＩＳ）であって、前記メディアアセットの部分がメタデータに関係し、前記統合サーバ（ＩＳ）が、
   − 前記クライアントデバイス（ＣＤ）でプレイアウトするために、前記クライアントデバイスに提供される前記メディアアセットの部分のメディアサーバ（ＭＳ）からの通知を受信し、
   − 提供された前記メディアアセットの前記部分に関係するメタデータを取得し、
   − 取得された前記メタデータに応じて、少なくとも１つのサービス記述を取得することであって、前記少なくとも１つのサービス記述の各サービス記述が、前記クライアントデバイスのユーザに関係する複数のモノのインターネット対応デバイス（Ｄ１、Ｄ２、Ｄ３）のそれぞれのモノのインターネット対応デバイスによって提供されるサービスを規定する、少なくとも１つのサービス記述を取得することを行い、
   − 前記クライアントデバイス（ＣＤ）に提供される前記メディアアセットの前記部分、提供された前記メディアアセットの前記部分に関係する前記メタデータ、および前記少なくとも１つのサービス記述に応じて、メディア体験強化動作を決定する
   ように構成される、統合サーバ（ＩＳ）。
8. 前記クライアントデバイスの前記ユーザに関係するそれぞれのモノのインターネット対応デバイス（Ｄ１、Ｄ２、Ｄ３）のサービスを呼び出すようにさらに構成される、請求項７に記載の統合サーバ（ＩＳ）。
9. 前記メディアサーバ（ＭＳ）に、メディアアセット管理動作を実行するよう命令するようにさらに構成される、請求項７または８に記載の統合サーバ（ＩＳ）。
10. − 少なくとも１つのサービス記述を保持することであって、前記少なくとも１つのサービス記述の各サービス記述が、複数のモノのインターネット対応デバイス（Ｄ１、Ｄ２、Ｄ３）のそれぞれのモノのインターネット対応デバイスによって提供されるサービスを規定し、各モノのインターネット対応デバイスが、前記クライアントデバイスのユーザに関係する、少なくとも１つのサービス記述を保持することを行い、
    − 前記少なくとも１つのサービス記述を、請求項１に記載のシステムの、少なくとも１つのサービス記述を取得するように構成された、前記統合サーバ（ＩＳ）における前記手段へ転送するように
    構成される、請求項１に記載のシステムで使用する、サービス記述リポジトリ（ＳＤＲ）。
11. − 前記メディアアセットの部分を、請求項１に記載のシステムの前記クライアントデバイス（ＣＤ）へ転送し、
    − 請求項１に記載のシステムの前記統合サーバ（ＩＳ）に、前記クライアントデバイス（ＣＤ）でプレイアウトするために、前記クライアントデバイスに提供される前記メディアアセットの前記部分を通知する
    ように構成される、請求項１に記載のシステムで使用するメディアサーバ（ＭＳ）。
12. 前記統合サーバ（ＩＳ）から、メディアアセット管理動作を実行するよう命令されるようにさらに構成される、請求項１１に記載のメディアサーバ（ＭＳ）。
13. 前記メディア体験強化動作を実行する、請求項１に記載のシステムで使用するモノのインターネット対応デバイス（Ｄ１、Ｄ２、Ｄ３）。

Images