JP7063941B2 - ビデオストリームエンリッチメントのためのクラウドベースの画像レンダリング - Google Patents

Description

例えば、スマートフォンおよびタブレットコンピュータ等のほとんどのパーソナルコミュニケーションデバイス上のモバイルストリーミングアプリケーションは、一般に、ビデオゲームエンジンによって可能となる高度なグラフィカルインタラクティビティに最適化されておらず、ビデオストリーミングをサポートするように設計されたネイティブソフトウェアスタックに依存している。結果的に、ゲームエンジン用に構築されたインタラクティブエクスペリエンスをモバイルデバイスで実行されるストリーミングアプリケーションに後に組み込むことは、困難である場合が多い。

ゲームエンジン用に構築されたインタラクティブエクスペリエンスをストリーミングアプリケーションに組み込むための従来の手法の１つに、ゲームエンジンベースのアプリケーションを、特定のプラットフォーム用に構築されたネイティブビデオストリーミングアプリケーション内に配置可能とするコンテナソリューションを開発する手法が挙げられる。しかしながら、コンテナは、一般に、比較的高い初期構築コスト、コンテナに含まれる各機能またはエクスペリエンスに継続的に必要となるコスト、および各エクスペリエンスの実行に必要な追加の処理オーバーヘッドに起因して、実装コストが高い。

別の従来のソリューションとして、インタラクティブエクスペリエンスのための完全に別個のアプリケーションを作成する手法が挙げられる。しかしながら、この潜在的なソリューションは、ユーザに製品およびブランドの混乱を招く恐れがあり、またマーケティングおよび顧客獲得、並びにアプリケーションサポートおよびメンテナンスに関連するコストの増加にも繋がる。更に、モバイルインタラクティビティは、モバイルデバイス自体の処理能力によって制限される場合があり、これは、ゲーム機またはゲーム用に構成されたパーソナルコンピュータの処理能力よりも大幅に低くなる傾向がある。この処理制約により、モバイルデバイスで使用するために別個のインタラクティブアプリケーションを作成するための個別のマネービルおよびレンダリングパイプラインが必要となる場合があり、これは不所望にもかなりの追加コストが発生する結果となり得る。

実質的に図面のうちの少なくとも１つに示され、および／またはそれらに関連して説明され、かつ特許請求の範囲に更に完全に記載されている、ビデオストリームエンリッチメントのためのクラウドベースの画像レンダリングを実行するためのシステムおよび方法が提供される。

一実装形態による、ビデオストリームエンリッチメントのためのクラウドベースの画像レンダリングを実行するための例示的なシステムの図である。 一実装形態による、カスタマイズ可能なビデオセグメントを含む例示的なビデオストリームの図である。 一実装形態による、レンダリングされたビデオエンハンスメントが挿入されたカスタマイズ可能なビデオセグメントを含む例示的なエンリッチされたビデオストリームの図である。 一実装形態による、ビデオストリームエンリッチメントのためにクラウドベースの画像レンダリングを実行するための例示的な方法を示すフローチャートである。

以下の説明は、本開示における実装に関連する特定の情報を含む。当業者は、本開示が、本明細書で具体的に記載されているのとは異なる方法で実装され得ることを認識するであろう。本出願の図面およびそれらに付随する詳細な説明は、単に例示的な実装に向けられている。特に明記しない限り、図中の同様のまたは対応する要素は、同様のまたは対応する参照符号によって示される。更に、本出願の図面および描写は、一般に縮尺通りではなく、実際の相対的な寸法に対応することを意図していない。

本出願は、従来技術における欠点に対処し克服するビデオストリームエンリッチメントのためにクラウドベースの画像レンダリングを実行するためのシステムおよび方法を開示する。更に、本ビデオストリームエンリッチメントソリューションは、自動化プロセスとして実装されてもよい。本出願で使用される場合、「自動化」という用語は、人間の介入を必要としないシステムおよびプロセスを指すことに留意されたい。いくつかの実装形態では、人間のシステムアドミニストレータが、システムによって、および本明細書に記載の方法に従って行われたコンテンツエンリッチメントの決定を確認または変更することさえあり得るが、この人間の関与は任意である。従って、本出願に記載のクラウドベースのビデオストリームエンリッチメントソリューションは、開示されたシステムのハードウェア処理コンポーネントの制御下で実行され得る。

図１は、一実装形態による、ビデオストリームエンリッチメントのためのクラウドベースの画像レンダリングを実行するための例示的なシステム１００の図を示す。図１に示されるように、システム１００は、ビデオ転送ユニット１０１と、ビデオエンリッチメントユニット１０２と、例えばビデオレンダリングサーバー等の１つ以上のビデオレンダリングエンジン１０８とを含む。図１に更に示されるように、システム１００のビデオエンリッチメントユニット１０２は、ソフトウェアコード１１０を格納する非一時的記憶装置として実装されるハードウェアプロセッサ１０４およびメモリ１０６を含み得る。更に、いくつかの実装形態では、図１に示すように、ビデオエンリッチメントユニット１０２のメモリ１０６は、ユーザプロファイル１２４ａ、１２４ｂ、および１２４ｃ（以下、「ユーザプロファイル１２４ａ～１２４ｃ」）を含むユーザプロファイルデータベース１１２を格納することができる。

システム１００は、コンテンツプロバイダ１１４と、１つ以上の非インタラクティブビデオプレーヤー１２０（以下、「非インタラクティブビデオプレーヤー１２０」）と、１つ以上のインタラクティブビデオプレーヤー１２２ａ、１２２ｂ、および１２２ｃ（以下、「インタラクティブビデオプレーヤー１２２ａ～１２２ｃ」）と、システム１００の要素を互いに、並びにコンテンツプロバイダ１１４、非インタラクティブビデオプレーヤー１２０、およびインタラクティブビデオプレーヤー１２２ａ～１２２ｃにリンクする通信リンク１１８を有する通信ネットワーク１１６と、を含むビデオ配信環境にて実装される。更に、図１は、コンテンツプロバイダ１１４によってシステム１００に提供され、かつ非インタラクティブビデオプレーヤー１２０およびビデオエンリッチメントユニット１０２に転送されるビデオストリーム１３０と、ビデオレンダリングエンジン１０８からビデオエンリッチメントユニット１０２によって取得される１つ以上のレンダリングされたビデオエンハンスメント１３８（以下、「レンダリングされたビデオエンハンスメント１３８」）と、ビデオエンリッチメントユニット１０２によって配信されたレンダリングされたビデオエンハンスメント１３８を含むエンリッチされたビデオストリーム１４０ａおよび１４０ｂと、を示す。図１には、それぞれのインタラクティブビデオプレーヤー１２２ａ～１２２ｃからビデオエンリッチメントユニット１０２によって受信されるユーザインプットデータ１２６ａ、１２６ｂ、および１２６ｃと、任意に１つ以上の非インタラクティブビデオプレーヤー１２０に配信される僅かにエンハンスされたビデオストリーム１４２とも示されている。

図１に示されるシステム１００に関して、ソフトウェアコード１１０およびユーザプロファイルデータベース１１２は、概念を明確にするためにメモリ１０６に格納されているように示されているが、より一般的には、メモリ１０６は任意のコンピュータ読み取り可能な非一時的記憶媒体の形態を取り得ることに留意されたい。本出願で使用される「コンピュータ読み取り可能な非一時的記憶媒体」という表現は、ビデオエンリッチメントユニット１０２のハードウェアプロセッサ１０４等のコンピューティングプラットフォームのハードウェアプロセッサに命令を供給する搬送波または他の一時的信号を除いた、任意の媒体を指す。従って、コンピュータ読み取り可能な非一時的媒体は、例えば、揮発性媒体および不揮発性媒体等の様々なタイプの媒体に対応し得る。揮発性媒体は、ダイナミックランダムアクセスメモリ（ダイナミックＲＡＭ）等のダイナミックメモリを含むことができる一方、不揮発性メモリは、光、磁気、または静電記憶装置を含むことができる。コンピュータ読み取り可能な非一時的媒体の一般的な形態には、例えば、光ディスク、ＲＡＭ、プログラマブル読み取り専用メモリ（ＰＲＯＭ）、消去可能なＰＲＯＭ（ＥＰＲＯＭ）、およびフラッシュメモリが含まれる。

更に、図１には、ソフトウェアコード１１０およびユーザプロファイルデータベース１１２をメモリ１０６に相互に配置されているものとして示しているが、その表現も、概念を明確にするための補助として単に提供されていることに留意されたい。より一般的には、システム１００は、共同設置され得る、またはインタラクティブにリンクされた配信システムの一部であり得る、例えばコンピュータサーバ等の１つ以上のコンピューティングプラットフォームを含み得る。例えば、一実装形態では、ビデオ転送ユニット１０１、ビデオエンリッチメントユニット１０２、およびビデオレンダリングエンジン１０８は、通信ネットワーク１１６およびネットワーク通信リンク１１８によってインタラクティブにリンクされたクラウドベースの配信システム１００の一部であり得る。従って、ビデオ転送ユニット１０１、ビデオエンリッチメントユニット１０２、ビデオレンダリングエンジン１０８、およびユーザプロファイルデータベース１１２はそれぞれ、クラウドベースシステム１００の配信リソース内にて互いに離間していてもよいことが理解されよう。

また、図１には、インタラクティブビデオプレーヤー１２２ａ～１２２ｃがそれぞれ、スマートフォン１２２ａ、ラップトップコンピュータ１２２ｂ、およびタブレットコンピュータ１２２ｃとして示されているが、これらの表現は、単なる例示として提供されていることにも留意されたい。より一般的には、インタラクティブビデオプレーヤー１２２ａ～１２２ｃは、通信ネットワーク１１６への接続をサポートするのに十分なデータ処理能力を実装し、本明細書のインタラクティブビデオプレーヤー１２２ａ～１２２ｃに起因する機能を実装する任意の適切なモバイルまたは固定デバイスまたはシステムであり得る。例えば、他の実装形態では、インタラクティブビデオプレーヤー１２２ａ～１２２ｃは、デスクトップコンピュータ、スマートテレビ（スマートＴＶ）、またはゲーム機の形態を取り得る。

本出願にて定義されるように、「インタラクティブビデオプレーヤー」という機能は、例えば、インタラクティブビデオプレーヤーのユーザが、インタラクティブビデオプレーヤーによるビデオストリームの再生によって描写されたアクションにアクティブに参加することを可能にするユーザフィードバックをサポートする、ウェブブラウザ等のユーザインタフェースを含むビデオプレーヤーを指す。例えば、インタラクティブビデオプレーヤーは、スポーツイベントを視聴しているユーザが、アクションの視点を変えるインプットを提供し、ユーザが選択した視点からの競技場およびアスリートの３次元（３Ｄ）レンダリングを表示することを可能にする。更に、そのような実装形態において、インタラクティブビデオプレーヤーは、ユーザが、ユーザのファンタジースポーツチームにおける１人以上のアスリートの統計を示す３Ｄオーバーレイ等の個人的な好みに適合する特別な画像を要求することを可能にする。

別の例として、ユーザに映画を表示するインタラクティブビデオプレーヤーは、ユーザが、映画の特定のセグメントに出現するオブジェクトまたはキャラクターを制御することを可能にし得る。例えば、自動車レースを示す映画のカスタマイズ可能なビデオセグメントにおいては、映画を再生するインタラクティブビデオプレーヤーのユーザが、レース車両のうちの１台を制御して、自動車レースの仮想参加者になることができる。

対照的に、本出願で定義されるように、非インタラクティブビデオプレーヤー１２０は、「再生」、「一時停止」、「停止」、「巻き戻し」、および「早送り」等の基本的なユーザコントロール並びに音量制御のみを提供することによって、コンテンツプロバイダ１１４によるビデオストリーム１３０に含まれるコンテンツ、または僅かにエンハンスされたビデオストリーム１４２のパッシブな消費のみを可能にする。即ち、非インタラクティブビデオプレーヤー１２０は、コンテンツプロバイダ１１４によって選択され、かつシステム１００のビデオ転送ユニット１０１によって非インタラクティブビデオプレーヤー１２０に転送されるビデオストリーム１３０に含まれるベースコンテンツおよびグラフィカルオーバーレイを単に表示するように構成されてもよい。

一実装形態では、コンテンツプロバイダ１１４は、ＴＶコンテンツをビデオストリーム１３０として提供するメディアエンティティであり得る。ビデオストリーム１３０は、例えば、オーディオ、キャプション、タイムコード、並びに評価および／または保護者向けガイドライン等のその他の補助メタデータが埋め込まれた超高精細度（超ＨＤ）、高精細度（ＨＤ）、または標準解像度（ＳＤ）のベースバンドビデオ信号を含むリニアＴＶ番組ストリームとすることができる。いくつかの実装形態では、ビデオストリーム１３０は、複数のオーディオトラックを含み得、例えば、セカンダリオーディオプログラミング（ＳＡＰ）および／またはディスクリプティブビデオサービス（ＤＶＳ）を利用し得る。

ビデオストリーム１３０は、例えば、従来のケーブルおよび／または衛星ネットワークを含み得る、ＴＶ放送プラットフォーム（図１に図示せず）を使用して伝統的なＴＶ視聴者に向け放送するのと同じソースビデオコンテンツを含むことができる。更に、図１に示すように、コンテンツプロバイダ１１４は、ビデオストリーム１３０に含まれるコンテンツを、例えば、インターネット等のパケット交換ネットワークを含み得る、通信ネットワーク１１６等の代替的な配信チャネルを介して利用可能とすることが有利または望ましい。

図１の実装形態によれば、ビデオ転送ユニット１０１は、通信ネットワーク１１６を介してビデオ転送ユニット１０１にリンクされた非インタラクティブビデオプレーヤー１２０を検出し、ビデオストリーム１３０を非インタラクティブビデオプレーヤー１２０に転送し、同じビデオストリーム１３０を、通信ネットワーク１１６を介してビデオエンリッチメントユニット１０２に転送する。ビデオエンリッチメントユニット１０２は、ビデオ転送ユニット１０１からビデオストリーム１３０を受信し、通信ネットワーク１１６を介してビデオエンリッチメントユニット１０２にリンクされたインタラクティブビデオプレーヤー１２２ａ～１２２ｃを検出し、ビデオストリーム１３０における１つ以上のカスタマイズ可能なビデオセグメントに対応するビデオエンハンスメントを識別する。更に、ビデオエンリッチメントユニット１０２は、ビデオエンハンスメントをレンダリングエンジン１０８から取得されたレンダリングされたビデオエンハンスメント１３８として、１つ以上のカスタマイズ可能なビデオセグメントに挿入することで、エンリッチされたビデオストリーム１４０ａおよび／または１４０ｂを生成し、エンリッチされたビデオストリーム（単数または複数）を１つ以上のインタラクティブビデオプレーヤー１２２ａ～１２２ｃに配信する。換言すると、ビデオエンハンスメント１３８は、インタラクティブビデオプレーヤー１２２ａ～１２２ｃではレンダリングされない。その代わりに、ビデオエンハンスメントは、クラウドベースの配信システム１００内のリモートレンダリングエンジン１０８によってレンダリングされる。

システム１００のビデオエンリッチメントユニット１０２は、ビデオ転送ユニット１０１からのビデオストリーム１３０の受信に関して、実質的にリアルタイムでエンリッチされたビデオストリーム１４０ａおよび／または１４０ｂを配信するように構成されている。更に、いくつかの実装形態では、システム１００は、ビデオストリーム１３０または僅かにエンハンスされたビデオストリーム１４２を非インタラクティブビデオプレーヤー１２０に配信し、エンリッチされたビデオストリーム１４０ａおよび／または１４０ｂをインタラクティブビデオプレーヤー１２２ａ～１２２ｃに実質的に同時に配信するように構成されている。

前述の結果として、同じベースビデオストリーム１３０を有利に使用して、エンリッチされたビデオコンテンツをインタラクティブなユーザフィードバックを可能にするインタラクティブビデオプレーヤー１２２ａ～１２２ｃに配信し、エンリッチされていないビデオコンテンツをその機能性を欠く非インタラクティブビデオプレーヤー１２０に配信することができる。非インタラクティブビデオプレーヤー１２０に配信されるエンリッチされていないビデオストリームは、エンハンスメントまたはカスタマイズなしに、コンテンツプロバイダ１１４によってビデオストリーム１３０に含まれるコンテンツを提供することができる。換言すると、非インタラクティブビデオプレーヤー１２０に提供されるビデオストリーム１３０に含まれるカスタマイズ可能なビデオセグメントは、コンテンツプロバイダ１１４によってビデオストリーム１３０に挿入される一般的かつ所定のコンテンツのみを含み得る。

しかしながら、いくつかの実装形態では、ビデオストリーム１３０はいくつかの基本的なエンハンスメントを含み、ビデオエンリッチメントユニット１０２によって僅かにエンハンスされたビデオストリーム１４２として１つ以上の非インタラクティブビデオプレーヤー１２０に配信され得ることに留意されたい。例えば、ビデオストリーム１３０がスポーツイベントの放送であり、非インタラクティブビデオプレーヤー１２０のうちの１つのユーザに対応するユーザプロファイル１２４ａ～１２４ｃのうちの１つが、そのユーザの好きなチームを識別するデータを含む場合、チームカラーおよび／またはチームロゴが、基本的なグラフィカルオーバーレイとして、僅かにエンハンスされたビデオストリーム１４２に含まれ得る。

図２Ａは、一実装形態による、カスタマイズ可能なビデオセグメントを含む例示的なビデオストリームのより詳細な図を示す。図２Ａに示すように、ビデオストリーム２３０は、１つ以上の所定のビデオセグメント２３２ａ、２３２ｂ、および２３２ｃ（以下、「所定のビデオセグメント２３２ａ～２３２ｃ」）と、１つ以上のカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂとを含む。ビデオストリーム２３０は、３つの所定のビデオセグメント２３２ａ～２３２ｃと、２つのカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂとを含むように示されているが、その表現は、明瞭化および説明の節約のために提供されていることに留意されたい。より一般的には、ビデオストリーム２３０は、３つより多く、または極めて多くの所定のビデオセグメント２３２ａ～２３２ｃを含み得る。更に、ビデオストリーム２３０は、カスタマイズ可能なビデオセグメント２３４ａまたは２３４ｂのうちの少なくとも１つを含むが、２つより多くまたは極めて多くのカスタマイズ可能なビデオセグメントを含み得る。

所定のビデオセグメント２３２ａ～２３２ｃは、コンテンツプロバイダ１１４によってビデオストリーム２３０に含まれるコンテンツを含み、変更の対象ではない。対照的に、カスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂは、例えば、図１のレンダリングされたビデオエンハンスメント１３８によってエンハンスまたは置換されることにより、エンリッチされたビデオストリーム２３０におけるデフォルトコンテンツを含む。図２Ａのビデオストリーム２３０は、図１のビデオストリーム１３０に一般に対応している。即ち、ビデオストリーム１３０は、本開示によって対応するビデオストリーム２３０に起因する任意の特性を共有することができ、逆もまた同様である。結果的に、図１には示されていないが、ビデオストリーム１３０は、所定のビデオセグメント２３２ａ～２３２ｃ並びにカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂにそれぞれ対応する特性を含み得る。

図２Ｂは、一実装態様による、それぞれのレンダリングされたビデオエンハンスメント２３８ａおよび２３８ｂが挿入されたカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂを含む、例示的なエンリッチされたビデオストリーム２４０のより詳細な図を示す。図２Ａに現れるのと同一の参照符号によって識別される図２Ｂの任意の特徴は、それぞれその特徴に対応しており、上記の特徴に起因する特性のいずれかを共有し得ることに留意されたい。

図２Ｂのエンリッチされたビデオストリーム２４０は、概して、図１のエンリッチされたビデオストリーム１４０ａおよび１４０ｂのいずれかまたは両方に対応する。即ち、エンリッチされたビデオストリーム１４０ａおよび１４０ｂは、本開示による対応するエンリッチされたビデオストリーム２４０に起因する特性のいずれかを共有することができ、その逆も同様である。結果的に、図１には示されていないが、エンリッチされたビデオストリーム１４０ａおよび１４０ｂは、所定のビデオセグメント２３２ａ～２３２ｃと、それぞれのレンダリングされたビデオエンハンスメント２３８ａおよび２３８ｂが挿入されたカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂとにそれぞれ対応する特性を含み得る。

更に、レンダリングされたビデオエンハンスメント２３８ａおよび２３８ｂは、概して、図１のレンダリングされたビデオエンハンスメント１３８に対応する。従って、レンダリングされたビデオエンハンスメント２３８ａおよび２３８ｂは、本開示によるレンダリングされたビデオエンハンスメント１３８に起因する任意の特性を共有することができ、その逆も同様である。

システム１００の機能は、図１、図２Ａ、および図２Ｂと組み合わせて図３を参照することにより更に説明される。図３は、一実装形態による、ビデオストリームエンリッチメントのためのクラウドベースの画像レンダリングを実行するための例示的な方法を提示するフローチャート３５０を示す。図３に概説された方法に関して、本出願における発明の特徴の議論を不明瞭にしないために、特定の詳細および特徴はフローチャート３５０から省略されていることに留意されたい。

図１および図２Ａと組み合わせて図３を参照すると、フローチャート３５０は、システム１００のビデオ転送ユニット１０１によって、通信ネットワーク１１６を介してビデオ転送ユニット１０１にリンクされた非インタラクティブビデオプレーヤー１２０を検出することから始まる（アクション３５１）。非インタラクティブビデオプレーヤー１２０は、ユーザがビデオストリームの再生によって示されるアクションにアクティブに参加することを可能にするユーザインプットを受信または送信するように構成されていないビデオプレーヤーである。上述したように、非インタラクティブビデオプレーヤー１２０は、「再生」、「一時停止」、「停止」、「巻き戻し」、および「早送り」等の基本的なユーザコントロール、並びに音量制御のみを提供することによって、ビデオストリーム１３０／２３０または僅かにエンハンスされたビデオストリーム１４２に含まれるコンテンツのパッシブ消費のみを可能にする。

フローチャート３５０は、ビデオ転送ユニット１０１によって、ビデオストリーム１３０／２３０を非インタラクティブビデオプレーヤー１２０に転送し続ける（アクション３５２）。いくつかの実装形態では、ビデオストリーム１３０／２３０は、エンハンスされていないビデオストリームとして非インタラクティブビデオプレーヤー１２０に転送される。即ち、これらの実装形態では、ビデオストリーム１３０／２３０は、非インタラクティブビデオプレーヤー１２０に転送されたときに、コンテンツプロバイダ１１４からビデオ転送ユニット１０１によって受信されたコンテンツのみを含む。

しかしながら、上述したように、いくつかの実装形態では、ビデオストリーム１３０／２３０はいくつかの基本的なエンハンスメントを含み、ビデオエンリッチメントユニット１０２によって僅かにエンハンスされたビデオストリーム１４２として１つ以上の非インタラクティブビデオプレーヤー１２０に配信され得る。例えば、ビデオストリーム１３０／２３０がスポーツイベントの放送であり、非インタラクティブビデオプレーヤー１２０のうちの１つのユーザに対応するユーザプロファイル１２４ａ～１２４ｃのうちの１つが、そのユーザの好きなチームを識別するデータを含む場合、チームカラーおよび／またはチームのロゴが、基本的なグラフィカルオーバーレイとして僅かにエンハンスされたビデオストリーム１４２に含まれ得る。あるいは、非インタラクティブビデオプレーヤー１２０は、それらの地理的位置に基づいて基本的なエンハンスメントを受信することができる。例えば、テキサス州に位置し、かつプロフットボールゲームの僅かにエンハンスされたビデオストリーム１４２を受信する非インタラクティブビデオプレーヤー１２０は、グラフィカルオーバーレイとして、僅かにエンハンスされたビデオストリーム１４２にテキサスベースのプロフットボールフランチャイズのチームカラーおよび／またはチームロゴを有することができる。

ビデオエンリッチメントユニット１０２によって僅かにエンハンスされたビデオストリーム１４２に含まれる「僅かなエンハンスメント」は、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂとは対照的に、僅かにエンハンスされたビデオストリーム１４２に含まれる僅かなエンハンスメントが、ユーザフィードバックを必要とせず、招待もしないという点で、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂとしてレンダリングされたビデオエンハンスメントと区別され得る。対照的に、僅かにエンハンスされたビデオストリーム１４２に含まれる僅かなビデオエンハンスメントは、一般に、チームカラーおよび／またはロゴの２次元（２Ｄ）または３Ｄのグラフィカルオーバーレイ、および／または、ビデオストリーム１３０に含まれるコンテンツに付随するものとして、非インタラクティブビデオプレーヤー１２０のユーザによる受動的な消費のために提供されるプレーヤーの統計に制限される。

フローチャート３５０は、ビデオ転送ユニット１０１によって、ビデオストリーム１３０／２３０をビデオエンリッチメントユニット１０２に転送し（アクション３５３）、ビデオエンリッチメントユニット１０２によって、ビデオ転送ユニット１０１からビデオストリーム１３０／２３０を受信し続ける（アクション３５４）。いくつかの実装形態では、ビデオストリーム１３０／２３０は、エンハンスされていないビデオストリームとしてビデオエンハンスメントユニット１０２に転送され、受信される。即ち、これらの実装形態では、ビデオストリーム１３０／２３０は、ビデオエンハンスメントユニット１０２に転送されるときに、コンテンツプロバイダ１１４からビデオ転送ユニット１０１によって受信されたコンテンツのみを含む。ビデオストリーム１３０／２３０は、ハードウェアプロセッサ１０４によって実行されるソフトウェアコード１１０を使用して、ビデオエンハンスメントユニット１０２によって受信することができる。

フローチャート３５０は、ビデオエンリッチメントユニット１０２によって、通信ネットワーク１１６を介してビデオエンリッチメントユニット１０２にリンクされたインタラクティブビデオプレーヤー１２２ａ～１２２ｃを検出し続ける（アクション３５５）。上述したように、インタラクティブビデオプレーヤー１２２ａ～１２２ｃは、例えばウェブブラウザ等のユーザインタフェースを含むビデオプレーヤーであり、インタラクティブビデオプレーヤーのユーザが、インタラクティブビデオプレーヤーによるビデオストリームの再生によって示されるアクションに積極的に参加することを可能にするユーザフィードバックをサポートする。従って、インタラクティブビデオプレーヤー１２２ａ～１２２ｃは、例えば、スマートフォン、デスクトップまたはラップトップコンピュータ、タブレットコンピュータ、スマートＴＶ、またはゲーム機の形態を取り得る。インタラクティブビデオプレーヤー１２２ａ～１２２ｃの検出は、ハードウェアプロセッサ１０４によって実行される、ビデオエンリッチメントユニット１０２のソフトウェアコード１１０によって実行され得る。

フローチャート３５０は、ビデオエンリッチメントユニット１０２によって、ビデオストリーム１３０／２３０内のカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上に対応するビデオエンハンスメントを識別し続ける（アクション３５６）。カスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上に対応するビデオエンハンスメントの識別は、ハードウェアプロセッサ１０４によって実行される、ビデオエンリッチメントユニット１０２のソフトウェアコード１１０によって実施され、任意のいくつかの異なる基準に基づき得る。概念を明確にするために、フローチャート３５０のアクション３５６および後続のアクションは、インタラクティブビデオプレーヤー１２２ａを参照して説明される。しかしながら、本方法は、任意のインタラクティブビデオプレーヤー１２２ａ～１２２ｃに同等に適用可能であることに留意されたい。

例えば、ユーザプロファイル１２４ａ等のユーザプロファイル１２４ａ～１２４ｃのうちの１つがインタラクティブビデオプレーヤー１２２ａのユーザに対応する場合、ユーザプロファイル１２４ａに格納された情報を使用して、ビデオストリーム１３０／２３０の１つ以上のカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂに対応するビデオエンハンスメントを識別することができる。例えば、ユーザの視聴履歴、ユーザプロファイル１２４ａに格納されたユーザの好み、またはユーザの年齢、性別、または居住地を使用して、ビデオストリーム１３０／２３０内のカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上に対応する所望のビデオエンハンスメントを識別することができる。代替的または付加的に、インタラクティブビデオプレーヤー１２２ａのインタラクティブな特徴および機能を説明するユーザプロファイル１２４ａに格納された情報を使用して、カスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上に対応する所望のビデオエンハンスメントを識別することができる。従って、いくつかの実装形態では、アクション３５６におけるビデオエンハンスメントの識別は、ユーザフィードバックなしで自動的に実行され得る。

しかしながら、他の実装形態では、インタラクティブビデオプレーヤー１２２ａのユーザは、ビデオストリーム１３０／２３０におけるカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上に対応する所望のビデオエンハンスメントの選択または識別を可能にするユーザインプットデータ１２６ａを肯定的に提供し得る。例えば、いくつかの実装形態では、特に、ユーザプロファイル１２４ａに格納された情報がまばらである使用事例では、ユーザインプットデータ１２６ａは、インタラクティブビデオプレーヤー１２２ａのユーザから要請され得る。ユーザインプットデータ１２６ａは、いくつか例を挙げると、インタラクティブビデオプレーヤー１２２ａのユーザのお気に入りのスポーツチーム、アスリート、映画、テレビ番組、演劇のキャラクター、または俳優を識別してもよい。

図２Ｂを更に参照してフローチャート３５０を参照すると、フローチャート３５０は、ビデオエンリッチユニット１０２によって、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂをカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上に挿入して、エンリッチされたビデオストリーム１４０／２４０を生成し続ける（アクション３５７）。レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂの、カスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上への挿入は、ハードウェアプロセッサ１０４によって実行される、ビデオエンリッチメントユニット１０２のソフトウェアコード１１０によって実施される。

いくつかの実装形態では、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂは、３Ｄ画像としてレンダリングされたユーザインタラクティブオブジェクトの形態を取ることができる。例えば、スポーツイベントを見ているインタラクティブビデオプレーヤー１２２ａのユーザからのユーザインプットデータ１２６ａは、ビデオエンリッチメントユニット１０２に、ユーザが選択した視点からの競技場およびアスリートの３Ｄレンダリングの形態でレンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂを挿入させることができる。付加的または代替的に、そのような実装形態では、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂは、チーム統計または１人以上の個々のアスリートの統計を示す３Ｄオーバーレイの形態を取り得る。更に、いくつかの実装形態では、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂは、複数のユーザが、レンダリングおよびカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上への挿入のために、共同でフィードバックを提供すること、および／または追加のビデオエンハンスメントを選択することを可能にする、インタラクティブなクイズ、ゲーム、または投票の形態を取り得る。

図１に示すように、いくつかの実装形態では、ビデオエンリッチメントユニット１０２は、ビデオエンリッチメントユニット１０２に通信可能に結合されたビデオレンダリングエンジン１０８のうちの１つから、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂを取得し得る。更に図１に示すように、これらの実装形態の一部では、ビデオエンリッチメントユニット１０２は、通信ネットワーク１１６を介してビデオレンダリングエンジン１０８に通信可能に結合され得る。上述したように、いくつかの使用例では、通信ネットワーク１１６は、インターネット等のパケット交換網であり得る。しかしながら、他の実装形態では、通信ネットワーク１１６は、第４世代セルラーネットワーク（４Ｇネットワーク）等のブロードバンドセルラーネットワーク、または例えば国際電気通信連合（ＩＴＵ）によって確立されたＩＭＴ－２０２０要件を満たす５Ｇネットワークを含み得る。

従って、いくつかの実装形態では、ビデオエンリッチメントユニット１０２は、アクション３５６において、カスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上に対応するビデオエンハンスメントを識別し得るが、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂを生成するためのそのビデオエンハンスメントのレンダリングは、ビデオレンダリングエンジン１０８のうちの１つによって実行され得る。これらの実装形態の一部では、ビデオレンダリングエンジン１０８は、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂを、例えば、ハイパーテキストトランスファープロトコル（ＨＴＴＰ）ライブストリーム（ＨＬＳ）ビデオ、低遅延ＨＬＳ（ＬＨＬＳ）ビデオ、またはＨＴＴＰ上のダイナミックアダプティブストリーミング（ＤＡＳＨ）ビデオのうちの１つとしてエンコードするように構成されてもよい。

更に、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂのレンダリングがビデオレンダリングエンジン１０８のうちの１つによって実行されるいくつかの実装形態では、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂは、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂの再生中に、インタラクティブビデオプレーヤー１２２ａのユーザによるインタラクティブなフィードバックを可能にするように、インタラクティブビデオプレーヤー１２２ａに命令するビデオレンダリングエンジン１０８によって適用されるメタデータタグを含むことができる。例えば、そのようなメタデータタグは、ビデオレンダリングエンジン１０８によってレンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂに格納されるＩＤ３タグの形態を取り得る。レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂは、クラウドベースシステム１００の分散メモリリソースによって格納され、レンダリングエンジン１０８によってアクセス可能なビデオエンハンスメントテンプレートから生成してもよい。

いくつかの実装形態では、フローチャート３５０は、ビデオエンリッチメントユニット１０２によって、エンリッチされたビデオストリーム１４０ａ／２４０を１つ以上のインタラクティブビデオプレーヤー１２２ａ～１２２ｃに配信することで終結することができる（アクション３５８）。アクション３５８におけるエンリッチされたビデオストリーム１４０ａ／２４０の配信は、ハードウェアプロセッサ１０４によって実行され、かつ通信ネットワーク１１６を介して、ビデオエンリッチメントユニット１０２のソフトウェアコード１１０によって実施され得る。上述したように、いくつかの実装形態では、エンリッチされたビデオストリーム１４０ａ／２４０の、１つ以上のインタラクティブビデオプレーヤー１２２ａ～１２２ｃへの配信は、ビデオ転送ユニット１０１からビデオストリーム１３０／２３０を受信するビデオエンリッチメントユニット１０２に関して、リアルタイムで発生し得る。

いくつかの使用事例では、エンリッチされたビデオストリーム１４０ａ／２４０を生成し、インタラクティブビデオプレーヤー１２２ａ等の単一のインタラクティブビデオプレーヤーに配信してもよい。しかしながら、別の実装形態では、複数のインタラクティブビデオプレーヤーが、ビデオコンテンツを一緒に見ている経験を共有しているユーザのグループによって使用されてもよい。これらの実装形態では、図１に示すように、エンリッチされたビデオストリーム１４０ａがインタラクティブビデオプレーヤー１２２ａおよび１２２ｂの両方に配信されることにより、複数のインタラクティブビデオプレーヤーに同じエンリッチされたビデオストリームを配信することができる。即ち、いくつかの実装形態では、エンリッチされたビデオストリーム１４０ａは、１つより多いが全てではない、ビデオエンリッチメントユニット１０２にリンクされたインタラクティブビデオプレーヤー１２２ａ～１２２ｃに配信され得る。

フローチャート３５０に記載のアクション３５１～３５８の順番は、単なる例示であることに留意されたい。即ち、他の実装形態では、アクション３５１～３５８の順序を再配置することができ、および／またはアクション３５１～３５８の一部は実質的に並行して実行することができる。例えば、一実装形態では、アクション３５１および３５５は並行して実行され得るが、別の実装形態では、アクション３５５は、アクション３５１～３５４の前に実行され得る。あるいは、いくつかの実装形態では、アクション３５２および３５３は並行して実行され得る。更に別の例として、いくつかの実装形態では、アクション３５１および３５２は、アクション３５８の後に実行され得る。

また、アクション３５６、３５７、および３５８は、複数の異なるインタラクティブビデオプレーヤー１２２ａ～１２２ｃに対して同時に順次実行されてもよいことにも留意されたい。即ち、上述したインタラクティブビデオプレーヤー１２２ｂおよび／または１２２ａに対するフローチャート３５０のアクション３５６、３５７、および３５８の実行と同時に、それらと同じアクションを、１つ以上の別のインタラクティブビデオプレーヤー１２２ａ～１２２ｃに対して、ビデオエンリッチユニット１０２によって実行することができる。例えば、インタラクティブビデオプレーヤー１２２ｃの場合、ビデオエンリッチメントユニット１０２は、インタラクティブビデオプレーヤー１２２ｃのためのカスタマイズ可能なビデオセグメント２３４ａおよび２３４ｂのうちの１つ以上に対応する異なるビデオエンハンスメントを識別し、その異なるビデオエンハンスメントを別のレンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂとして、カスタマイズ可能なビデオセグメント２３４ａおよび／または２３４ｂに挿入して、異なるエンリッチされたビデオストリーム１４０ｂ／２４０を生成する。次に、ビデオエンリッチメントユニット１０２は、エンリッチされたビデオストリーム１４０ａ／２４０をインタラクティブビデオプレーヤー１２２ｂおよび／または１２２ａに配信すると同時に、異なるエンリッチされたビデオストリーム１４０ｂ／２４０をインタラクティブビデオプレーヤー１２２ｃに配信することができる。

従って、本出願は、ビデオストリームエンリッチメントのためにクラウドベースの画像レンダリングを実行するためのシステムおよび方法を開示する。上述したように、本明細書に開示されるシステムおよび方法は、デバイス上で実行されるカスタマイズされたアプリケーションを使用することをユーザに要求することなく、ビデオストリーム１３０／２３０にチューニングするときに、インタラクティブビデオプレーヤー１２２ａ～１２２ｃのユーザが視聴可能なものを増加させる。そのようなインタラクティブエクスペリエンスに必要なグラフィックスレンダリングを提供可能なユーザのインタラクティブビデオプレーヤーで実行されるカスタムアプリケーションを作成する代わりに、本発明の原理によれば、グラフィカルビデオエンハンスメントは、ユーザインプットデータ１２６ａ、１２６ｂ、または１２６ｃ等のユーザインプットデータによって駆動されるリモートビデオレンダリングエンジン１０８のうちの１つにおけるインタラクティブビデオプレーヤーのためにレンダリングされてもよい。

本出願で開示されるクラウドベースのビデオエンリッチメントソリューションは、いくつかの利点を提供する。第１に、本ソリューションは、ユーザのビデオストリームとのインタラクションエクスペリエンスを、パフォーマンスの制限により通常はビデオプレーヤーでレンダリングできなかったコンテンツによって増強またはエンリッチすることができる。即ち、本発明の原理によれば、３Ｄグラフィックス等のビデオエンハンスメントは遠隔的にレンダリングされ、エンリッチされたビデオストリーム１４０ａ／１４０ｂ／２４０の一部として配信される故に、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂの品質に対する唯一の制約は、クラウドベースのビデオレンダリングエンジン１０８の処理能力である。従って、本発明の原理によれば、フローチャート３５０のアクション３５６で識別された１つ以上のビデオエンハンスメントのレンダリングは、そのビデオエンハンスメントを受信するインタラクティブビデオプレーヤーによってレンダリングされないことを強調したい。

第２に、本ソリューションは、新規かつこれまで利用不能だったインタラクティブエクスペリエンスをユーザに提供しつつ、既存のビデオストリーミングアプリケーションと既存のＷｅｂブラウザーベースのビデオプレーヤーとの継続的な使用をサポートする。同じビデオストリームが、例えばコンテンツプロバイダ１１４からビデオ転送ユニット１０１および非インタラクティブビデオプレーヤー１２０に転送される。更に、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂが、ＨＬＳ、ＬＨＬＳ、またはＤＡＳＨ等の確立された規格に準拠するようにエンコードされる使用事例において、エンリッチされたビデオストリーム１４０ａ／１４０ｂ／２４０または僅かにエンハンスされたビデオストリーム１４２を視聴するのに追加のソフトウェアは必要ない。

第３に、インタラクティブビデオプレーヤーのユーザのためのインタラクティブビューは、２Ｄオーバーレイだけに限定されず、ユーザのビデオプレーヤー（例えば、インタラクティブビデオプレーヤー１２２ａ～１２２ｃ）のグラフィックス処理能力に制約されない品質レベルでレンダリングされた、オブジェクトの詳細な３Ｄレンダリングを含むこともできる。例えば、天気予報のビデオストリームは、地形の３Ｄレンダリングおよび天気の視覚効果によりエンリッチすることができる。

第４に、インタラクティブ機能を備えたインタラクティブビデオプレーヤー１２２ａ～１２２ｃは、レンダリングされたビデオエンハンスメント１３８／２３８ａ／２３８ｂを備えたエンリッチされたビデオストリーム１４０ａ／１４０ｂ／２４０を有利に受信する一方、非インタラクティブビデオプレーヤー１２０は、ビデオ転送ユニット１０１によって転送された標準的な静的ビデオストリーム１３０／２３０を受信するか、または、有利には、ビデオエンリッチメントユニット１０２から僅かにエンハンスされたビデオストリーム１４２を受信するかのいずれかである。

上記の説明から、本出願に記載の概念を実施するために、それらの概念の範囲から逸脱することなく、様々な技法が使用可能であることが明らかである。更に、特定の実施形態を具体的に参照して概念を説明してきたが、当業者は、それらの概念の範囲から逸脱することなく、形態および詳細に変更を加えることができることを認識するであろう。それ故、説明されている実装形態は、あらゆる点で例示的であり、限定的ではないと見なされる。また、本出願は、本明細書に記載の特定の実装形態に限定されず、本開示の範囲から逸脱することなく、多くの再構成、修正、および置換が可能であることも理解されたい。

Claims (20)

1. 少なくとも１つのインタラクティブビデオプレーヤーおよび少なくとも１つの非インタラクティブビデオプレーヤーと通信するためのクラウドベースシステムであって、前記少なくとも１つのインタラクティブビデオプレーヤーは、前記インタラクティブビデオプレーヤーによって再生されたビデオストリームに描写されたアクションにおける第１のユーザによるアクティブな参加を可能にし、前記少なくとも１つの非インタラクティブビデオプレーヤーは、前記非インタラクティブビデオプレーヤーによって再生された前記ビデオストリームの第２のユーザによるパッシブな消費を可能にし、前記クラウドベースシステムは、
   ビデオ転送コンピュータにリンクされた前記少なくとも１つの非インタラクティブビデオプレーヤーを通信ネットワークを介して検出し、
   ビデオストリームを前記少なくとも１つの非インタラクティブビデオプレーヤーに前記通信ネットワークを介して転送し、前記ビデオストリームは、少なくとも１つの所定のビデオセグメントと、少なくとも１つのカスタマイズ可能なビデオセグメントとを含み、
   前記ビデオストリームを前記少なくとも１つの非インタラクティブビデオプレーヤーに転送すると同時に、前記ビデオストリームをビデオエンリッチメントコンピュータに前記通信ネットワークを介して転送する
   ように構成されたビデオ転送コンピュータと、
   前記ビデオ転送コンピュータから前記ビデオストリームを前記通信ネットワークを介して受信し、
   前記ビデオエンリッチメントコンピュータにリンクされた前記少なくとも１つのインタラクティブビデオプレーヤーを前記通信ネットワークを介して検出し、
   前記ビデオ転送コンピュータから受信した前記ビデオストリームの前記少なくとも１つの所定のビデオセグメントを前記少なくとも１つのインタラクティブビデオプレーヤーに前記通信ネットワークを介してストリームすることを開始し、
   前記ビデオ転送コンピュータから受信した前記ビデオストリームの前記少なくとも１つの所定のビデオセグメントを前記少なくとも１つのインタラクティブビデオプレーヤーにストリームしている間、
   前記ビデオ転送コンピュータから受信した前記ビデオストリーム内の前記少なくとも１つのカスタマイズ可能なビデオセグメントに対応するビデオエンハンスメントを識別し、
   レンダリングされたビデオエンハンスメントを前記ビデオ転送コンピュータから受信した前記ビデオストリームの前記少なくとも１つのカスタマイズ可能なビデオセグメントに挿入して、カスタマイズされたビデオセグメントを生成し、
   前記カスタマイズされたビデオセグメントを含む前記ビデオストリームを前記少なくとも１つのインタラクティブビデオプレーヤーに前記通信ネットワークを介してストリームし続ける
   ように構成された前記ビデオエンリッチメントコンピュータと、
   を含む、クラウドベースシステム。
2. 前記ビデオストリームのカスタマイズされたビデオセグメントは、前記ビデオ転送コンピュータからの前記ビデオストリームの受信に関して、リアルタイムで前記少なくとも１つのインタラクティブビデオプレーヤーにストリームされる、請求項１に記載のクラウドベースシステム。
3. 前記レンダリングされたビデオエンハンスメントは、３次元（３Ｄ）画像としてレンダリングされたユーザインタラクティブオブジェクトを含む、請求項１に記載のクラウドベースシステム。
4. 前記ビデオエンリッチメントコンピュータは、更に、前記ビデオエンリッチメントコンピュータに通信可能に結合されたビデオレンダリングエンジンから前記レンダリングされたビデオエンハンスメントを取得するように構成されている、請求項１に記載のクラウドベースシステム。
5. 前記ビデオエンリッチメントコンピュータは、前記通信ネットワークを介して前記ビデオレンダリングエンジンに通信可能に結合されている、請求項４に記載のクラウドベースシステム。
6. 前記ビデオレンダリングエンジンは、前記レンダリングされたビデオエンハンスメントをハイパーテキストトランスファープロトコル（ＨＴＴＰ）ライブストリーム（ＨＬＳ）ビデオ、低遅延ＨＬＳ（ＬＨＬＳ）ビデオ、およびＨＴＴＰ上のダイナミックアダプティブストリーミング（ＤＡＳＨ）ビデオのうちの１つとしてエンコードするように構成されている、請求項４に記載のクラウドベースシステム。
7. 前記レンダリングされたビデオエンハンスメントは、前記ビデオレンダリングエンジンによって適用されたメタデータタグを含み、前記メタデータタグにより、前記レンダリングされたビデオエンハンスメントの再生中に、前記第１のユーザによるインタラクティブフィードバックを可能とするよう、前記少なくとも１つのインタラクティブビデオプレーヤーに命令する、請求項４に記載のクラウドベースシステム。
8. 前記メタデータタグは、前記少なくとも１つのビデオレンダリングエンジンによって、前記レンダリングされたビデオエンハンスメントに格納されたＩＤ３タグである、請求項７に記載のクラウドベースシステム。
9. 前記少なくとも１つのインタラクティブビデオプレーヤーは、少なくとも第１のインタラクティブビデオプレーヤー、第２のインタラクティブビデオプレーヤー、および第３のインタラクティブビデオプレーヤーを含み、前記ビデオエンリッチメントコンピュータは、更に、前記カスタマイズされたビデオセグメントを前記第１のインタラクティブビデオプレーヤーおよび前記第２のインタラクティブビデオプレーヤーのそれぞれにストリームするが、前記第３のインタラクティブビデオプレーヤーにはストリームしないように構成されている、請求項１に記載のクラウドベースシステム。
10. 前記少なくとも１つのインタラクティブビデオプレーヤーは、複数のインタラクティブビデオプレーヤーを含み、前記ビデオエンリッチメントコンピュータは、更に、
    前記複数のインタラクティブビデオプレーヤーのうちの別のインタラクティブビデオプレーヤーのための前記少なくとも１つのカスタマイズ可能なビデオセグメントに対応する異なるビデオエンハンスメントを識別し、
    前記異なるビデオエンハンスメントを異なるレンダリングされたビデオエンハンスメントとして、前記少なくとも１つのカスタマイズ可能なビデオセグメントに挿入して、異なるカスタマイズされたビデオセグメントを生成し、
    前記カスタマイズされたビデオセグメントを前記少なくとも１つのインタラクティブビデオプレーヤーにストリームすると同時に、前記異なるカスタマイズされたビデオセグメントを前記複数のインタラクティブビデオプレーヤーのうちの別のインタラクティブビデオプレーヤーにストリームする
    ように構成されている、請求項１に記載のクラウドベースシステム。
11. 少なくとも１つのインタラクティブビデオプレーヤーおよび少なくとも１つの非インタラクティブビデオプレーヤーと通信するためのクラウドベースシステムによって使用するための方法であって、前記少なくとも１つのインタラクティブビデオプレーヤーは、前記インタラクティブビデオプレーヤーによって再生されたビデオストリームに描写されたアクションにおける第１のユーザによるアクティブな参加を可能にし、前記少なくとも１つの非インタラクティブビデオプレーヤーは、前記非インタラクティブビデオプレーヤーによって再生された前記ビデオストリームの第２のユーザによるパッシブな消費を可能にし、前記クラウドベースシステムは、ビデオ転送コンピュータおよびビデオエンリッチメントコンピュータを含み、前記方法は、
    前記ビデオ転送コンピュータによって、前記ビデオ転送コンピュータにリンクされた前記少なくとも１つの非インタラクティブビデオプレーヤーを通信ネットワークを介して検出することと、
    前記ビデオ転送コンピュータによって、ビデオストリームを前記少なくとも１つの非インタラクティブビデオプレーヤーに前記通信ネットワークを介して転送することであって、前記ビデオストリームは、少なくとも１つの所定のビデオセグメントと、少なくとも１つのカスタマイズ可能なビデオセグメントとを含む、転送することと、
    前記ビデオストリームを前記少なくとも１つの非インタラクティブビデオプレーヤーに転送すると同時に、前記ビデオ転送コンピュータによって、前記ビデオストリームをビデオエンリッチメントコンピュータに前記通信ネットワークを介して転送することと、
    前記ビデオエンリッチメントコンピュータによって、前記ビデオ転送コンピュータからビデオストリームを前記通信ネットワークを介して受信することと、
    前記ビデオエンリッチメントコンピュータによって、前記ビデオエンリッチメントコンピュータにリンクされた前記少なくとも１つのインタラクティブビデオプレーヤーを前記通信ネットワークを介して検出することと、
    前記ビデオエンリッチメントコンピュータによって、前記ビデオ転送コンピュータから受信した前記ビデオストリームの前記少なくとも１つの所定のビデオセグメントを前記少なくとも１つのインタラクティブビデオプレーヤーに前記通信ネットワークを介してストリームすることを開始することと、
    前記ビデオエンリッチメントコンピュータによって前記ビデオ転送コンピュータから受信した前記ビデオストリームの前記少なくとも１つの所定のビデオセグメントを前記少なくとも１つのインタラクティブビデオプレーヤーにストリームしている間、
    前記ビデオエンリッチメントコンピュータによって、前記ビデオ転送コンピュータから受信した前記ビデオストリーム内の前記少なくとも１つのカスタマイズ可能なビデオセグメントに対応するビデオエンハンスメントを識別することと、
    前記ビデオエンリッチメントコンピュータによって、レンダリングされたビデオエンハンスメントを前記ビデオ転送コンピュータから受信した前記ビデオストリームの前記少なくとも１つのカスタマイズ可能なビデオセグメントに挿入して、カスタマイズされたビデオセグメントを生成することと、
    前記ビデオエンリッチメントコンピュータによって、前記カスタマイズされたビデオセグメントを含む前記ビデオストリームを前記少なくとも１つのインタラクティブビデオプレーヤーに前記通信ネットワークを介してストリームし続けることと、を含む、方法。
12. 前記ビデオストリームの前記カスタマイズされたビデオセグメントは、前記ビデオ転送コンピュータからの前記ビデオストリームの受信に関して、リアルタイムで前記少なくとも１つのインタラクティブビデオプレーヤーにストリームされる、請求項１１に記載の方法。
13. 前記レンダリングされたビデオエンハンスメントは、３次元（３Ｄ）画像としてレンダリングされたユーザインタラクティブオブジェクトを含む、請求項１１に記載の方法。
14. 前記ビデオエンリッチメントコンピュータは、前記ビデオエンリッチメントコンピュータに通信可能に結合されたビデオレンダリングエンジンから前記レンダリングされたビデオエンハンスメントを取得する、請求項１１に記載の方法。
15. 前記ビデオエンリッチメントコンピュータは、前記通信ネットワークを介して前記ビデオレンダリングエンジンに通信可能に結合されている、請求項１４に記載の方法。
16. 前記ビデオレンダリングエンジンは、前記レンダリングされたビデオエンハンスメントをハイパーテキストトランスファープロトコル（ＨＴＴＰ）ライブストリーム（ＨＬＳ）ビデオ、低遅延ＨＬＳ（ＬＨＬＳ）ビデオ、およびＨＴＴＰ上のダイナミックアダプティブストリーミング（ＤＡＳＨ）ビデオのうちの１つとしてエンコードするように構成されている、請求項１４に記載の方法。
17. 前記レンダリングされたビデオエンハンスメントは、前記ビデオレンダリングエンジンによって適用されたメタデータタグを含み、前記メタデータタグにより、前記レンダリングされたビデオエンハンスメントの再生中に、前記第１のユーザによるインタラクティブフィードバックを可能とするよう、前記少なくとも１つのインタラクティブビデオプレーヤーに命令する、請求項１４に記載の方法。
18. 前記メタデータタグは、前記少なくとも１つのビデオレンダリングエンジンによって、前記レンダリングされたビデオエンハンスメントに格納されたＩＤ３タグである、請求項１７に記載の方法。
19. 前記少なくとも１つのインタラクティブビデオプレーヤーは、少なくとも第１のインタラクティブビデオプレーヤー、第２のインタラクティブビデオプレーヤー、および第３のインタラクティブビデオプレーヤーを含み、前記ビデオエンリッチメントコンピュータは、更に、前記カスタマイズされたビデオセグメントを前記第１のインタラクティブビデオプレーヤーおよび前記第２のインタラクティブビデオプレーヤーのそれぞれにストリームするが、前記第３のインタラクティブビデオプレーヤーにはストリームしないように構成されている、請求項１１に記載の方法。
20. 前記少なくとも１つのインタラクティブビデオプレーヤーは、複数のインタラクティブビデオプレーヤーを含み、前記方法は、更に、
    前記ビデオエンリッチメントコンピュータによって、前記複数のインタラクティブビデオプレーヤーのうちの別のインタラクティブビデオプレーヤーのための前記少なくとも１つのカスタマイズ可能なビデオセグメントに対応する異なるビデオエンハンスメントを識別することと、
    前記ビデオエンリッチメントコンピュータによって、前記異なるビデオエンハンスメントを異なるレンダリングされたビデオエンハンスメントとして、前記少なくとも１つのカスタマイズ可能なビデオセグメントに挿入して、異なるカスタマイズされたビデオセグメントを生成することと、
    前記カスタマイズされたビデオセグメントを前記少なくとも１つのインタラクティブビデオプレーヤーにストリームすると同時に、前記ビデオエンリッチメントコンピュータによって、前記異なるカスタマイズされたビデオセグメントを前記複数のインタラクティブビデオプレーヤーのうちの別のインタラクティブビデオプレーヤーにストリームすることと、
    を含む、請求項１１に記載の方法。

Images