JP6622308B2 - インタラクティブ双眼鏡ビデオ表示 - Google Patents

Description

本明細書に説明される実施形態は、概してビデオコンテンツの捕捉及び表示に関し、詳細にはモバイルデバイスを介したビデオコンテンツのインタラクティブ表示に関する。

光学双眼鏡及び単眼鏡は、大勢の観衆の中の見学人によって、及び、見学人がパフォーマンスから大きく離れて位置する他のシナリオにおいて、広く使用されている。例えば、オペラ又は演劇の観覧者は、双眼鏡又は他の光学望遠鏡を使用して、見学されるパフォーマンスのステージ上の特別な表現又は詳細についてのより近いビューを得ることがある。同様に、スポーツイベント観覧者は、光学双眼鏡を使用して、スポーツプレーヤ又はゲームプレーについてのより近いビューを得ることがある。光学双眼鏡の別の使用法は、戸外のビューポイントにおいてであり、例えば、訪問者が景観の詳細を見るために、コインにより作動する、三脚に取り付けられた双眼鏡を使用する場所などである。しかしながら、上記及び他の光学双眼鏡の使用において、観覧者は、双眼鏡をとおして自身の視界の焦点を合わせるよう、ゆえに、双眼鏡レンズをとおして見る間はより幅広い光景を遮断するよう強制される。

結果として、代替の表示を提供し、観覧者の視点を強化するために、限られたメカニズムが開発されている。例えば、スポーツアリーナにおいて、及び大きい音楽又はダンスショーにおいて、ステージ又はプレーフィールドはしばしば、パフォーマーのズームインビデオを表示する１つ以上のビデオ画面により拡張される。しかしながら、観覧者はビデオシーンの制御を有さず、所望の人又はオブジェクトを見ることがしばしばできず、なぜならば、表示されるビデオはディレクター又はビデオプロデューサーの選択に依存するからである。

優先権の主張
本特許出願は、2014年12月23日に申請された米国特許出願第14/581,548号に対する優先の利益を主張し、上記出願はその全体を参照援用される。

図面は、必ずしも縮尺どおりに描かれておらず、図面において、同様の番号は異なる図において同様のコンポーネントを表し得る。異なる文字サフィックスを有する同様の番号は、同様のコンポーネントの異なるインスタンスを表し得る。いくつかの実施形態が、限定でなく例として下記添付図面の図に例示される。
一例に従う、モバイルデバイスを用いて表示されるインタラクティブ仮想双眼鏡ビデオ出力の使用事例を示す。 一例に従う、インタラクティブ仮想双眼鏡ビデオ出力のためのビデオ捕捉、処理、送信、及び出力デバイスの概観を示す。 一例に従う、パフォーマンスエリア内に提供される、インタラクティブ仮想双眼鏡ビデオ出力のためのビデオ捕捉及びネットワーク送信ロケーションの図を示す。 一例に従う、インタラクティブ仮想双眼鏡ビデオ出力のためのビデオ及び情報データのデータ送信図を示す。 一例に従う、モバイルデバイスにおける仮想双眼鏡ビデオ出力の再生のための方法のフローチャートを示す。 一例に従う、ビデオ処理サーバにおいて仮想双眼鏡ビデオ出力をストリーミングする方法のフローチャートを示す。 一例に従う、インタラクティブ仮想双眼鏡ビデオ出力のためのシステムのコンポーネントのブロック図を示す。 一例に従う、本明細書に論じられる手法（例えば、動作、処理、方法、及び方法論）のうち任意の１つ以上を実行できる一例示的なマシンのブロック図を示す。

下記の説明において、「仮想双眼鏡」ビデオの再生及び制御の機能性を提供するシステム、方法、及び命令を含むマシン読取可能媒体が開示され、これらは、イベントの観覧者（spectators）が人間により感知可能なイベント、景観、又は他のシーンのうち特定の強化された（enhanced）（例えば、ズームインされ及びパンされた）部分を選択し及び見ることを可能にする。この仮想双眼鏡の視点（perspective）は、スマートフォン又はタブレットなどのモバイルデバイスを使用して提供され、上記モバイルデバイスは、所望のシーンの詳細な（例えば、高品質、高精細）ビデオフィード（video feed）を受信し及び処理するよう構成される。本明細書に説明されるように、ユーザは、自身のモバイルデバイスを使用して、ビデオ再生制御を介して所望のシーンの詳細な、強化されたビデオ視点を出力することができ、ユーザは、捕捉されたビデオ表示を選択し、所望のシーンの特定パートへ向ける（例えば、パンする、ズームする、又は別の強化を適用する）ことができる。

下記の手法は、仮想双眼鏡ビデオ表示に関連してビデオ出力を捕捉し、処理し、ストリーミングし、及び表示するメカニズムを説明する。下記でさらに説明される、一例示的な構成において、見られることになるエリアの後部に位置決めされた（positioned）（例えば、コンサートホールの後ろに、スポーツフィールドの側部に、見物エリア（viewing area）の最前面（foreground）に又は最前面の近くに位置決めされた）ある数の高精細カメラが、所望のシーンのための高解像度ビデオを捕捉し、ストリーミングするように構成される。上記高精細カメラは、（静的な又は再位置決め可能なロケーションを含め）１つ又は複数の角度から位置決めされることができる。それから、高精細カメラは、それぞれのビデオストリームを中央サーバに提供し、中央サーバはビデオを受信し、ビデオを処理して仮想双眼鏡観覧者のための異なるストリームにする。それから、ロケーション識別手法が使用されて、特定のビデオストリームを特定のモバイルデバイスに相関させる（correlate）ことができる。上記ビデオストリームは、それから、モバイルデバイスに対する出力のためにさらに処理され、強化され（パンされ、切り取られ、ズームインされ）、精緻化されてもよい。

仮想双眼鏡ビデオ表示を提供し及び制御するための、本明細書に説明される手法は、さらなる処理及び表示手法の使用で強化することができる。例えば、拡張現実コンテンツが、モバイルデバイスにより表示される仮想双眼鏡ビデオのレイヤとして追加されてもよい。様々なロケーション及び活動検出メカニズムを使用して、有用なオーバーレイ、広告コマーシャル、及び同様の情報を仮想双眼鏡ビデオ表示に関連して提供することができる。別の例として、ユーザフィードバック及びデータが、ビデオストリームフィードの使用から収集され、ビデオフィード又はビデオ動作の向上のために管理者により監視されてもよい。さらに、使用法情報がアーティスト又はショーオペレータに送られて、根底のパフォーマンスに対する変更を結果としてもたらす可能性がある。

観覧者からのズームインされ焦点合わせされた表示を提供する既存の手法は、光学的及び電子的ズーミングメカニズムの使用に一般に限定される。例えば、いくつかの既存のスマートフォン及びタブレットモバイルデバイスは、ズームするための限られた光学レンズと、モバイルデバイスにおける直接のデジタルズーミング強化とを提供する。しかしながら、こうしたデバイスの光学ズーム能力は、典型的にかなり限定され（例えば、５ｘ未満）、モバイルデバイスから捕捉されたビデオ又はピクチャの品質は、特に低光量設定において、大きく損なわれることがある。光学望遠鏡（例えば、双眼望遠鏡又は単眼望遠鏡など）の使用は、前に論じられたとおり、所望のシーンの一部分についてのズームインされ及び詳細化された視点をユーザに提供することができる。しかしながら、こうした双眼鏡又は単眼鏡は、ユーザにより別個に運ばれなければならず、ユーザの目の近くに置かれなければならない。ゆえに、光学デバイスの個人使用は、ズームアウトされた視点でシーン全体を把握するか、又はもっぱらズームインされた視点でシーンの部分を把握するかをユーザが選ぶことを必要とする。

本明細書に説明されるデジタルビデオ処理、送信、及び表示手法は、関連ビデオソースの選択及び出力に関連付けられた上記及び他の技術的問題を克服する。さらに、本明細書に説明される仮想双眼鏡ビデオ表示手法の使用は、ユーザの視点から可能でない追加の視点及びビューを提供することができる。例えば、シーンの一部が、ユーザの前に位置する観覧者又は妨害物により隠される場合、再位置決めされた（repositioned）カメラから取得される視点が、上記シーンのための妨げられていない視点及びビデオ出力を可能にすることができる。本願に説明される仮想双眼鏡ビデオ表示をとおして提供されるビデオ出力は、こうした強化された又は妨げられていないビューを提供すると同時に、より現実的な及び正確な出力のためにロケーションベースの情報の恩恵を利用することができる。

図１は、本明細書に説明される例示的手法に従い提供される、インタラクティブ仮想双眼鏡ビデオ出力の使用事例の例示１００を提供する。図１におけるビデオ出力は、景観の一部分（例示されるとおり、ゴールデンゲートブリッジの一部分）のクローズアップ視点を有する表示を提供する。この例において、ビデオ出力は、景観を見渡せるビューポイントにおいて取られたビデオ捕捉を用いて調整される。

図示されるとおり、ユーザ１１０は、モバイルデバイス１２０（例えば、スマートフォン）をユーザの視野内で、例えばユーザ１１０の前に（ユーザ１１０と関心のあるエリアとの間に）デバイスを保持することにより、操作する。例えば、ユーザが、あるシーンにおけるビデオ撮影された（videoed）オブジェクト１４０の一部分、ここでは橋の一部分を見たいと仮定する。ビデオ表示１３０は、ビデオ撮影されたオブジェクト１４０（橋）の一部分の強化されたズームインされた視点を、モバイルデバイス１２０上で出力されるライブの（live）ビデオ表示内における関心のあるエリア（関心エリア）の拡大された部分の出力をとおして提供する。

図１に表される仮想双眼鏡ビデオ表示の使用事例は、１つ又は複数のカメラを伴うことがあり、上記カメラは、モバイルデバイス１２０から離れるビューの方向（direction of view）において、あるシーン内の関心エリアを向いて該シーンを捕捉する。例えば、１つのカメラが、複数の観覧者に対するビューポイントにおいて中央のロケーションに位置決めされることができ、このビューポイントからのビデオは、デジタルビデオコンテンツの１つ以上のストリームをそれぞれのモバイルデバイスに提供するように構成されることができる。別の例において、複数のカメラが、ビューポイントにおいて、複数の観覧者に対して異なるロケーションに位置決めされてもよい。（例えば、複数のカメラがビューポイントにおいて種々の位置のあらゆるロケーションに位置して、ビデオ撮影されるオブジェクト１４０に対する見る人の角度に依存して、又は見る人が面しているより正確な方向に依存して、異なるカメラビュー及び視点を可能にすることができる。）複数のカメラの展開について、本明細書にさらに論じられるロケーション決定手法を使用して、いずれのカメラビュー（及び、いずれのカメラ視点）を仮想双眼鏡ビデオ表示における使用のために選択し及び送信すべきかを決定することができる。本明細書にさらに論じられるロケーション決定及びイメージ認識手法をさらに使用して、ビデオ撮影されるオブジェクト１４０に対するモバイルデバイス１２０の位置及び向き（orientation）のインタラクティブな制御及びマッチングを提供することができ、このことは、異なるカメラビューの選択；カメラビューから捕捉されたビデオ出力の切り取り、スケーリング、ズーミング、回転、パンニング、又はその他の強化（又は変更）；又は、ユーザ１１０のモバイルデバイス１２０とのインタラクションから双眼鏡の使用を模倣する他の手法を伴うことがある。

図２は、一例に従う、インタラクティブ仮想双眼鏡ビデオ出力のビデオ捕捉、処理、送信、及び出力で使用される様々な電子デバイスを表すシステム図２００を例示する。図示されるとおり、人間のユーザそれぞれにより操作される複数のデジタルモバイルデバイス２１０Ａ、２１０Ｂ、２１０Ｃ（例えば、スマートフォン）が電子接続を確立して、ストリーミングサーバ２３０から提供されるビデオを受信する。例示されるとおり、上記電子接続は、Ｗｉ−Ｆｉ（登録商標）ブロードキャスティングアクセスポイント２４０Ａ、２４０Ｂ、２４０Ｃを介して（例えば、ＩＥＥＥ８０２．１１ａ／ｂ／ｇ／ｎ／ａｃ／ａｄ／ａｆ、又はＩＥＥＥ８０２．１１標準に対する後続の改正などのＩＥＥＥ８０２．１１標準に準拠した無線ローカルエリアネットワークを動作させるＷｉ−Ｆｉアクセスポイントについて）無線ネットワーク接続を用いて提供される。

ストリーミングサーバ２３０は、それぞれの超高精細（ultra high definition）（ＵＨＤ）カメラ２２０Ａ、２２０Ｂ、２２０Ｃから取得されるそれぞれのビデオストリームを提供するように動作し、上記ＵＨＤカメラは、例えば、４Ｋ ＵＨＤ（例えば、４０９６画素×２１６０ライン）又は８Ｋ ＵＨＤ（例えば、７６８０画素×４３２０ライン）フォーマットにおいてビデオを捕捉するように構成されたカメラなどである。いくつかの例において、ストリーミングサーバ２３０は、アクセスポイント２４０Ａ、２４０Ｂ、２４０Ｃを介して各Ｗｉ−Ｆｉネットワークにおいて共通のビデオストリームを提供し、特定のカメラからのそれぞれのビデオストリームを複数の接続されたデバイスに、それぞれのＷｉ−Ｆｉアクセスポイント上で（又は、複数のＷｉ−Ｆｉアクセスポイントについて）マルチキャストするように動作する。他の例において、ストリーミングサーバ２３０は、個々のビデオストリームを、個々のビデオストリーム内のコンテンツが個々の接続されたデバイスに対してカスタマイズされた状態で提供するように動作する。ストリーミングサーバ２３０は、モバイルデバイス２１０Ａ、２１０Ｂ、２１０Ｃに対するビデオストリームの無線送信に関連してストリーミング、キャスティング（casting）、及びビデオ供給手法の任意の組み合わせを利用できることが理解されるであろう。

図２にさらに示されるとおり、ストリーミングサーバ２３０は、監視及び拡張現実ステーション２５０として識別される管理ステーションにさらに接続される。例えば、監視及び拡張現実ステーション２５０は、ＵＨＤカメラ２２０Ａ、２２０Ｂ、２２０Ｃから取得されるビデオストリーム及びビデオコンテンツの、人間により支援され又は自動化された監視及び制御に使用することができ、上記監視及び制御には、カメラからのビデオフィードの切り換え、強化、及び終了又は再開が含まれる。監視及び拡張現実ステーション２５０はさらに、人間により支援され又は自動化された、ビデオストリームへの拡張現実コンテンツの生成及びオーバーレイに関連して使用することができる。

さらなる例において、監視及び拡張現実ステーション２５０に関連して供給される拡張現実コンテンツは、さらなるコンテンツ、情報、又はメタデータを含むことができる。例えば、こうしたコンテンツには、ビデオ出力上の字幕としてオーバーレイされたパフォーマー又はオブジェクトの識別（例えば、ミュージシャン又はアスリートの名前など）を含んでもよい。人、オブジェクト、マーカなどの識別に基づいてコンテンツの追加及び提示を可能にする任意数の拡張現実手法が、モバイルデバイス２１０Ａ、２１０Ｂ、２１０Ｃ上の仮想双眼鏡ビデオ表示内に自動的に適用されてよい（あるいは、管理者又はエンドユーザの、人間の制御を用いて適用されてもよい）。

例えば、拡張現実コンテンツは、ユーザにより適用される特定ズームレベルに従ってカスタマイズされ、仮想双眼鏡ビデオ表示の中に表示されることができる。こうした例において、特定の特徴にズームインするとき（又は、特定の特徴がモバイルデバイス画面内でかなり目に見えるとき）のみ、ある拡張現実コンテンツが追加され、表示されて、特定の特徴がビデオ表示の中でより目立つようになるときに該特徴に対するさらなる情報を提供してもよい。同様に、ビデオストリームの中でズームアウトし又は複数オブジェクトにパンするとき、拡張現実コンテンツは除去され、あるいは切り替えられてもよい。

さらなる例において、それぞれのデバイス２１０Ａ、２１０Ｂ、２１０Ｃにおける仮想双眼鏡ビデオ出力は、観覧者のロケーションと観覧者のモバイルデバイス２１０Ａ、２１０Ｂ、２１０Ｃのロケーション及び向きとに従ってカスタマイズされることができる。観覧者のモバイルデバイス２１０Ａ、２１０Ｂ、２１０Ｃの近似ロケーションは、例えば、アクセスポイントの既知のレイアウト内の特定のＷｉ−Ｆｉアクセスポイント２４０Ａ、２４０Ｂ、２４０Ｃに対する接続によって導出することができる。他の例において、観覧者のモバイルデバイス２１０Ａ、２１０Ｂ、２１０Ｃの近似ロケーションは、１つ以上のアクセスポイントに対する信号強度、又は、複数のＷｉ−Ｆｉアクセスポイント２４０Ａ、２４０Ｂ、２４０Ｃから受信される信号若しくは情報の比較と共に適用される三角測量若しくは三辺測量によって導出されてもよい。他の例において、観覧者の近似ロケーションは、Ｂｌｕｅｔｏｏｔｈ（登録商標）低エネルギービーコン、ＲＦＩＤタグ、又は他の一時的若しくは永続的ロケーションマーカに関連して決定することができる。

さらなる例において、捕捉されるシーンに対する観覧者のロケーションは、ロケーション決定の組み合わせに関連して（例えば、Ｗｉ−Ｆｉアクセスポイント２４０Ａ、２４０Ｂ、２４０Ｃから）、及び、観覧者のロケーションにおいてモバイルデバイスにより直接捕捉されるビデオ又は静止画内に観察されるロケーションマーカの検出から、決定することができる。例えば、観覧者に対して遠位に位置決めされたモバイルデバイス２１０Ａ、２１０Ｂ、２１０Ｃのカメラ（例えば、モバイルデバイス２１０Ａ、２１０Ｂ、２１０Ｃは観覧者と見学されるオブジェクトとの間に位置する）は、その視野のイメージを捕捉することができる。このイメージは、いくつかのロケーションマーカを捕捉することができ、該ロケーションマーカは、例えば、ステージに、特定のパフォーマーの近くに、スポーツアリーナの定義されたエリアに、などに置かれたマーカなどである。それから、マーカは検出され、観覧者の特定の視点を視野内の（及び、観覧者のための定義された見学エリア内の）関心エリアに相関させることに使用することができる。可視のマーカのデジタルイメージが、ある時間間隔で、デバイスのあらゆる動きの後（又は、一連の動きの後）に、などで連続的に捕捉され、処理されてもよい。マーカデジタルイメージの処理及びロケーション調整は、モバイルデバイス２１０Ａ、２１０Ｂ、２１０Ｃにおいて、又はサーバのロケーション処理コンポーネントにおいて実行することができる。

図３は、一例に従う、パフォーマンスエリアのビデオのために提供されるインタラクティブ仮想双眼鏡ビデオ出力のためのビデオ捕捉及びネットワーク送信ロケーションのシステム図３００の例示を提供する。システム図３００において、パフォーマンスエリア３１０（例えば、音楽、演劇、又は他のパフォーマンスのためのステージ）は、例えば、ステージの角部に位置決めされた複数のステージマーカ３１１、３１２、３１３、３１２を用いて識別される。

パフォーマンスエリア３１０の前に、３つの座席セクション３５０、３６０、３７０が観覧者の観衆について定義される。これら３つの座席セクション３５０、３６０、３７０は、座席セクション内に又は座席セクションに近接して（例えば、後ろに、前に）位置する３つのＵＨＤビデオカメラ３２０Ａ、３２０Ｂ、３２０Ｃにそれぞれ対応する。ＵＨＤビデオカメラ３２０Ａ、３２０Ｂ、３２０Ｃは、例えば、３つの座席セクション３５０、３６０、３７０内の観覧者の観衆による妨害を経験することなく、パフォーマンスエリア３１０に対する視線（line of sight）内に位置決めされることができる。

３つの座席セクション３５０、３６０、３７０の各々には、複数のＷｉ−Ｆｉアクセスポイントがさらに位置する。例えば、座席セクション３５０はＷｉ−Ｆｉアクセスポイント３５１、３５２、３５３を含み、座席セクション３６０はＷｉ−Ｆｉアクセスポイント３６１、３６２、３６３を含み、座席セクション３７０はＷｉ−Ｆｉアクセスポイント３７１、３７２、３７３を含む。それぞれのＷｉ−Ｆｉアクセスポイントは、重なったカバレッジ範囲を有することがあり、しかし一般に、ＵＨＤビデオカメラに関連付けられた特定の座席セクション内のユーザに対して最も強い信号（及び、最も可能性のあるカバレッジ及びネットワーク接続）を提供するように位置する。そのようなものとして、特定モバイルデバイスのロケーションは、既知の座席セクション内に位置する既知のＷｉ−Ｆｉアクセスポイントに対するモバイルデバイスの接続に基づいて決定することができる。

ストリーミングサーバ３３０は、座席セクション３５０、３６０、又は３７０内の観覧者のモバイルデバイスのロケーションと、それぞれのＷｉ−Ｆｉアクセスポイントに対する観覧者のモバイルデバイスの接続とに基づいて、様々なＷｉ−Ｆｉアクセスポイントに接続された観覧者に対してそれぞれのビデオカメラからのビデオを提供するように構成される。例えば、モバイルデバイスのロケーションに対するＷｉ−Ｆｉアクセスポイント名又はサービスセット識別子（ＳＳＩＤ）の相関を使用して、Ｗｉ−Ｆｉアクセスポイントのカバレッジエリア内に又は該カバレッジエリアに隣接して位置決めされた関連カメラ（例えば、座席又は見物エリアに対応するカメラなど）を選択することができる。したがって、モバイルデバイスがアクセスする特定のＷｉ−Ｆｉアクセスポイントは、観覧者のロケーションの大まかな近似を提供することができ、ゆえに、上記特定のＷｉ−Ｆｉアクセスポイントを使用して、ＵＨＤビデオカメラからの適切なビデオフィードを選択してモバイルデバイスにストリーミングすることができる。いくつかの例において、特定のＵＨＤビデオカメラ及び高精細ビデオストリームが、それぞれのＷｉ−Ｆｉアクセスポイントの接続に従って自動的に決定され、開始されることができる。

図示されるとおり、パフォーマンスエリア３１０は、ステージの外周に位置する一連の赤外線（ＩＲ）マーカ３１１、３１２、３１３、３１４（例えば、赤外光）を含む。これらマーカ３１１、３１２、３１３、３１４は、仮想双眼鏡ビデオ表示のさらなるロケーション及び再位置決めに関連して使用されて、モバイルデバイスの位置及び３次元の向きに対して観覧者の所望のビデオパンニング及びズームレベルをマッチさせることができる。例えば、マーカがモバイルデバイスにより検出されて、観覧者に対する視野と、モバイルデバイスの（例えば、空中における、観覧者の前に保持されている）特定の向き（例えば、姿勢）とに基づいて、高精細ビデオストリームを自動的にパンし、あるいはズームすることができる。したがって、高精細ビデオストリームの自動的なパン及びズームを使用して、観覧者の視野及び人間に把握される環境にマッチし又はかなり似ている「双眼鏡」効果を効果的にエミュレートすることができる。

さらなる例において、マーカ３１１、３１２、３１３、３１４は、ＩＲを利用する必要はなく、他の色付けされたマーカ、バーコード若しくはＱＲコード（登録商標）、又はモバイルデバイスにより認識可能である他の人間若しくはマシン検出可能マーカ若しくはオブジェクトを含んでもよい。したがって、様々な再位置決め、ズーム、パンニング、及びビデオ強化又は修正手法が、ビデオストリームに対して自動的に（又は、手動制御を支援するように）発生してもよい。他の例において、他のマシンツーマシン通信及びオブジェクト検出手法（顔の検出を含む）を使用して、所望のビデオ出力に対するモバイルデバイスの向きと、ビデオストリームに対しての対応するズーミング、パンニング、及び他の修正とを調整することができる。例えば、モバイルデバイスが、人間輪郭描画又は顔検出手法を利用して、人間の人（例えば、特定のミュージシャン）があるシーン内に位置することを識別することができ、付随する高精細ビデオストリームは、上記特定の人に対してズームされ、中心合わせされる（centered）ことができる。

いくつかの例において、ＵＨＤビデオカメラ３２０Ａ、３２０Ｂ、３２０Ｃは、一時的又は永続的に固定された位置に位置して、複数のユーザが共通に置かれたビデオフィードにアクセスすることを可能にする。他の例において、ＵＨＤビデオカメラ３２０Ａ、３２０Ｂ、３２０Ｃのうち１つ以上が、管理者のコマンドの結果として、又は観覧者のフィードバック又は制御に関連して、再位置決めされてもよい。例えば、ＵＨＤビデオカメラ３２０Ａ、３２０Ｂ、３２０Ｃの位置決めは、パフォーマンスエリア３１０に対するモバイルデバイスの相対的ロケーション、観衆見物エリアの区別可能エリア内に位置する観覧者の数、ビデオストリームの部分を見る又は選択することを伴うユーザ活動などに基づいて変更することができる。ＵＨＤビデオカメラ３２０Ａ、３２０Ｂ、３２０Ｃの再位置決めのイベント内で、ビデオストリーム及びモバイルデバイス上のビデオの表示を修正するように、適応的な処理が発生してもよい。

さらなる例において、仮想双眼鏡ビデオ出力は、観覧者の活動と観覧者のモバイルデバイスとのインタラクションとに基づいてさらにカスタマイズ可能である。例えば、仮想双眼鏡ビデオ出力は、ズームする観覧者により要求されたズーミング倍数に対してカスタマイズされることができる。したがって、観覧者は、モバイルデバイスを用いて仮想ズーミング体験を得ることができると同時に、リアルタイムのイベントを同時に把握することができる。他の例において、ユーザは、関心エリアの視点を他のロケーションから切り換えて、例えば、別の観覧者の角度又は座席エリアの側部から関心エリアを見たいことがある。様々なユーザインターフェースコマンドが観覧者に提示されて、異なるＵＨＤビデオカメラ及び視点におけるフィード間での切り換えを可能にすることができる。いくつかの例において、ビデオのズーミング、パンニング、切り取り、又は他の表示修正がモバイルデバイス上で実行されて、複数のユーザに対するビデオストリームブロードキャストに対して表示修正を行うことができる。他の例において、ビデオのズーミング、パンニング、切り取り、又は他の表示修正がサーバ側で実行されて、１又は限られた数のユーザに対してカスタマイズされた、ビデオストリームに対する表示修正を行うことができる。

図４は、一例に従う、インタラクティブ仮想双眼鏡ビデオ出力のためのビデオ及び情報データのデータ送信図４００を例示する。図示されるとおり、モバイルデバイス４１０は、Ｗｉ−Ｆｉアクセスポイント４３０に接続してオーディオ／ビデオデータストリーム４３２を（例えば、上記で図３を参照して説明されたＷｉ−Ｆｉビデオストリーミング手法を用いて）受信することができる。いくつかの例において、オーディオ／ビデオデータストリーム４３２は、オーディオコンテンツなしのビデオ又はイメージベースコンテンツをもっぱら提供する。

それぞれのモバイルデバイスに対するオーディオ／ビデオデータストリーム４３２の送信は、個々のデータ接続、ユーザのグループに対するデータ接続、ビデオデータストリームのマルチキャスト及びブロードキャストなどに関連して発生し得る。オーディオ／ビデオデータストリーム４３２には、コンテンツ情報データ４２４の受信が付随することがあり、コンテンツ情報データ４２４は、例えば、拡張現実情報コンテンツ、促進及び広告情報、又は内部サーバから若しくはインターネットベースのソースから取得される同様の情報などである。モバイルデバイス４１０は、それから、オーディオ／ビデオデータストリーム４３２及びコンテンツ情報データ４２４（拡張現実視点におけるコンテンツ情報データ４２４のオーバーレイを含む）を出力することができる。

オーディオ／ビデオデータストリーム４３２には、ロケーションデータ４２２の受信がさらに付随することがある。ロケーションデータ４２２は、モバイルデバイス４１０上で出力されるビデオコンテンツの視点を変更するように選択肢を提供するためのデータの使用を含め、オーディオ／ビデオデータストリーム４３２の出力を表示すること又は制御することに使用される固有情報を提供することができる。さらに、ロケーションデータ４４２は、Ｂｌｕｅｔｏｏｔｈ低エネルギー（ＢＬＥ）ビーコン４４０又は同様の近距離通信（ＮＦＣ）デバイスに関連して提供されてもよい。例えば、上記ビーコン／ＮＦＣデバイスからの情報が、特定のロケーションでの識別子を調整する（ローカルに又はリモートで動作する）ロケーションサービスと共に使用され、上記識別子が、モバイルデバイス４１０上で表示されるビデオストリームを制御すること又は該ビデオストリームに影響を与えることに使用されることができる。例えば、ビーコン４４０上の情報が使用されて、特定のモバイルデバイスのための固有のビデオフィード又はビデオ視点を識別することができる。

図４に表される例において、オーディオ／ビデオコンテンツのストリームはさらに、マルチキャストオーディオ／ビデオデータストリーム４２６に関連して受信されることができる。例えば、マルチキャストオーディオ／ビデオデータストリーム４２６は、複数のモバイルデバイスユーザに対してブロードキャストされる、無線ワイドエリアネットワーク４２０を介したコンテンツのマルチユーザブロードキャスト手法から提供されてもよく、無線ワイドエリアネットワーク４２０は、例えば、ロングタームエボリューション（ＬＴＥ）又は別の３Ｇ／４Ｇセルラーデータネットワークなどである。図４にさらに示されるとおり、モバイルデバイス４１０は、無線ワイドエリアネットワーク４２０に関連してコンテンツ情報データ４２４及びロケーションデータ４２２をさらに受信することができる。例えば、無線ワイドエリアネットワーク４２０を通じてインターネット接続を介してモバイルデバイス４１０により取得される情報が使用されて、Ｗｉ−Ｆｉアクセスポイント４３０からのビデオストリームの表示及び再生を補足してもよい。

ビデオストリームの表示に関連して使用されるデータ処理は、クライアント側処理及びサーバ側処理の多くの可能性を含み得る。例えば、数千人のユーザが仮想双眼鏡ビデオ表示を利用しようと試みることがある大規模環境において、これらユーザの各々が処理のためにサーバにデータ（例えば、ロケーション識別子、又は、マーカを含むカメラからの静止画）を通信して返すことは実現可能でない可能性がある。こうした環境において、各個々のデバイスが、ユーザのロケーションを決定し、それからモバイルデバイスのロケーションと高精細ビデオストリームに適用すべき適切なズーム、パンニング、及び視点強化との間の調整を実行するように構成されてもよい。

さらなる例として、サーバにアップロードされるデータの量を低減するために、高品質の、高解像度のビデオストリームが、１回にユーザの大きいグループ（又は、さらにはすべてのユーザ）にブロードキャストされ、マルチキャストされることができる。ビデオ表示パラメータに対するロケーション情報の調整がクライアント側で発生し、個々のデバイスが特定の視点を決定して仮想双眼鏡ビデオ表示にレンダリングすることができる。例えば、イメージ捕捉及び認識（ロケーションマーカ、特定オブジェクト、又は人についての認識を含む）が使用されて、大きいビデオストリームの表示をビデオストリームの選択強化された部分（例えば、パンされ、ズームインされている）のみに再方向付けし（reorient）てもよい。

仮想双眼鏡ビデオ表示の使用は、特別目的ソフトウェア、ハードウェア、及び周辺装置に関連して提供されることができる。例えば、仮想双眼鏡ビデオ表示に関連付けられた機能性は、対象パフォーマンスの前又は間にモバイルデバイス上にインストール可能な専用ソフトウェアアプリケーション（例えば、モバイルアプリ）に関連して提供されてもよい。上記ソフトウェアアプリケーションは、ビデオストリームを調整し、視点情報のためにカメラにアクセスするのに使用することができる。仮想双眼鏡ビデオ表示に関連付けられた機能性はさらに、通信プログラムの一部として組み込まれてもよく、上記通信プログラムは、例えば、インスタントメッセージ、チャット、又はビデオ会議開催プログラムなどである。他の例において、仮想双眼鏡ビデオ表示に関連付けられた機能性は、モバイルデバイスのオペレーティングシステム機能性に組み込まれてもよい。

図５は、一例に従う、モバイルデバイスにおける仮想双眼鏡ビデオ出力のための再生の方法のフローチャート５００を例示する。上記方法動作は、ロケーションベースの動作を含んで、モバイルデバイスのロケーションを決定し（動作５１０）、モバイルデバイスのロケーションを特定のビデオストリームに相関させる（動作５２０）ことができる。例えば、ロケーションベースの動作は、特定のＷｉ−Ｆｉアクセスポイントの識別、又は、リモートサーバへのビーコン又はＲＦＩＤタグ識別子の提供に関連して実行されてもよい。ロケーション情報は、関心のあるロケーション又はエリアからの視点に相関した特定のビデオストリームを要求するのに使用することができる。上記要求に応答して、特定のビデオストリームが無線でモバイルデバイスに対して送信される（及び、該モバイルデバイスにおいて受信される）ことができる（動作５３０）。

モバイルデバイスからの視点にマッチさせるための、ビデオストリームからのビデオ出力の位置決め並びにパンニング、ズーミング、及び再方向付けは、ロケーション識別、イメージマッチング、又はモバイルデバイスのロケーション（及び、ユーザ視点）をビデオストリームの部分に相関させるための他の手法に関連して発生し得る。例えば、モバイルデバイスは動作を実行して、関心のあるオブジェクト又はエリアの近くの可視である特定のマーカを識別し（動作５４０）、検出された関心のあるオブジェクト又はエリアをビデオストリームの選択部分に相関させる（動作５５０）ことができる。検出された関心のあるオブジェクト又はエリアが使用されて、ビデオストリームの表示出力を中心合わせし、パンし、ズームし、あるいはその他の方法で修正することができ、例えば、モバイルデバイス上にビデオストリームの選択部分のみ表示することなどができる（動作５６０）。

フローチャート５００にさらに例示されるとおり、（例えば、拡張現実コンテンツの）情報オーバーレイなどのさらなる情報がモバイルデバイスに提供され、表示されることができる（動作５７０）。例えば、情報オーバーレイは、特定の人、オブジェクト、又はシーン内でズームされる及び特定の人、オブジェクト、又はシーンに対してパンされるビデオ表示の選択部分の上に置かれてもよい。

図６は、仮想双眼鏡ビデオ出力に関連してビデオをストリーミングする方法のフローチャート６００を例示し、上記方法は、ビデオ処理サーバにおいて実行される動作を用いて行われる。フローチャート６００の動作は、単一のサーバにおいて、クラウドベース若しくは分散型のサーバにおいて、又はビデオ処理機能性のための複数のコンピューティングデバイス若しくはプラットフォームの調整をとおして発生し得ることが理解されるであろう。

例示されるとおり、上記方法動作は、特定のビデオストリームの選択のためのロケーションベースの動作を含む。上記選択は、ビデオストリームの要求の受信（動作６１０）とモバイルデバイスのロケーション情報の受信（動作６２０）とで取得されるデータから実行されることができる。ロケーション情報に基づいて、モバイルデバイスのロケーションが決定され、選択ビデオストリームに相関させられる（動作６３０）ことができ、この選択ビデオストリームは、モバイルデバイスのロケーションにおけるユーザの視野内に位置する。選択ビデオストリームは、それから、出力のためにモバイルデバイスに送信されることができる（動作６４０）。

さらに、情報オーバーレイが、ビデオストリームに関連して生成され、作り出されることができる。例えば、サーバが、ビデオストリームの選択部分に関するさらなるロケーション又は視覚情報（例えば、ロケーションマーカからの識別子）を受信することができ（動作６５０）、上記選択部分は、例えば、選択ビデオストリームの強化されたズームインされた、パンされた部分などである。上記ロケーション情報から、拡張現実ラベル及び識別情報などの情報オーバーレイが、表示されるビデオストリームの選択部分について生成されることができる（動作６６０）。この情報オーバーレイは、モバイルデバイスに送信されて（動作６７０）、例えば、表示されるビデオストリームの上のレイヤとしてモバイルデバイス上で出力されることができる。

図７は、一例に従う、インタラクティブ仮想双眼鏡ビデオ出力のための電子システムのコンポーネントのブロック図を例示する。図示されるとおり、電子システムは、一組の無線アクセスポイント及びネットワーキングデバイス７４０をとおしてビデオストリーミングサーバ７３０に電子的に接続されたモバイルコンピューティングデバイス７１０を含むものとして例示される。ビデオストリーミングサーバ７３０は、カメラ制御サーバ７５０、管理デバイス７６０、及びカメラビデオソース７７０と電子通信することができる。電子システムはさらに、ロケーションマーカ７８０を含み、あるいはロケーションマーカ７８０に関連して動作することができる。電子システムの動作は、さらなるコンピューティングデバイス、サーバ、及びネットワーキング設備と、電子システム内で動作するコンポーネント間の代替的なネットワーキング接続とを含んでもよいことが理解されるであろう。

図示されるとおり、モバイルコンピューティングデバイス７１０（例えば、スマートフォン又はタブレット）には、無線アクセスポイント及びネットワーキングデバイス７４０のうち１つ以上を介してビデオストリーミングサーバ７３０から受信されるビデオストリームの処理を実行するのに使用される一連のモジュール（例えば、ソフトウェア、ハードウェア、又はソフトウェアにより構成されるハードウェア）が含まれる。モバイルコンピューティングデバイスのモジュールには、ユーザインタラクションモジュール７１２、ビデオ処理モジュール７１６、モーション処理モジュール７１８、表示モジュール７２０、及び無線ネットワーキングモジュール７２２が含まれる。モバイルコンピューティングデバイス７１０は、カメラ７１４及び関連付けられたカメライメージ捕捉モジュールと、ジェスチャを受け取るように構成されたタッチディスプレイスクリーンなどの表示画面とをさらに含むことができる。

ユーザインタラクションモジュール７１２は、ユーザコマンドを受信して、モバイルコンピューティングデバイス７１０上のビデオ表示出力内に提供されるインタラクティブビデオフィードを選択し、開始し、又は停止するように構成されることができる。ユーザインタラクションモジュール７１２は、表示モジュール７２０におけるビデオ表示出力を制御するためのインタラクション及びコマンドを受信する機能を含むことができ、上記インタラクション及びコマンドには、ビデオをパンすること及びズームすること（タッチスクリーンジェスチャの使用をとおしてを含む）、分割画面ビューを提供すること、及び特定の人又はオブジェクトに対してビデオ表示をロックし又はフリーズすることなどのためのインタラクション及びコマンドを含むことができる。

表示モジュール７２０は、モバイルコンピューティングデバイスが向けられ又は面している視野内の特定部分のためのビデオを表示するように構成されることができる。例えば、視野内の特定部分は、モバイルコンピューティングデバイス７１０の視点からローカルカメライメージを捕捉するのに使用されるカメラ７１４の使用に関連して、及び、ローカルカメライメージのビデオストリームとの相関に関連して、決定されることができる。

ビデオ処理モジュール７１６は、ビデオストリームを受信し、ローカルカメライメージとの相関を決定し、ビデオのためのズーミング、パンニング、及び他の強化効果を実施し、表示モジュール７２０に出力を提供するように構成されることができる。モーション処理モジュール７１８は、ズームされた／パンされたビデオの表示を適応させるように構成されることができ、このことには、観察されたロケーションマーカに対するモバイルコンピューティングデバイスの動き及びモーション入力を処理することと、加速度計及びジャイロスコープ並びに他のメカニズムにより検出されるようなモバイルコンピューティングデバイスの動きを処理することとが含まれる。モーション処理モジュール７１８は、ビデオ処理モジュール７１６及び表示モジュール７２０に関連して動作して、モバイルコンピューティングデバイスがユーザにより移動され及び再位置決めされるときにビデオ表示に対するインタラクティブな変更を可能にすることができる。

モバイルコンピューティングデバイス７１０の無線ネットワーキングモジュール７２２は、無線ネットワークを介したビデオストリームの受信について、無線ネットワークとの接続を確立し及び管理する機能性を含むことができる。無線ネットワーキングモジュール７２２はさらに、例えば、受信される（１つ以上の）Ｗｉ−Ｆｉ信号のセット及び品質を報告することをとおして、又は、モバイルコンピューティングデバイスの近似ロケーションを計算するサーバに生データ（又は、カメライメージ）を提供することにより、見物又は座席エリア内のモバイルコンピューティングデバイス７１０の近似ロケーションを示す機能性を提供することができる。

図示されるとおり、ビデオストリーミングサーバ７３０は、それぞれのモバイルコンピューティングデバイスに対するビデオストリームの処理及び提供を実行するのに使用される一連のモジュール（例えば、ソフトウェア、ハードウェア、又はソフトウェアにより構成されるハードウェア）を含む。ビデオストリーミングサーバ７３０のモジュールには、ビデオ処理モジュール７３２、ロケーション処理モジュール７３４、ビデオコンテンツモジュール７３６、及びビデオストリーム送信モジュール７３８を含むことができる。ビデオストリーミングサーバ７３０は、ビデオソース７７０から種々のビデオストリームを受信し、（モバイルコンピューティングデバイスのロケーションとモバイルコンピューティングデバイスの観ている角度とに基づいて）モバイルコンピューティングデバイスの各々に対して最も適切なストリームを割り振る。

ビデオ処理モジュール７３２は、複数のビデオストリームを受信し及び処理し、モバイルコンピューティングデバイス７１０のロケーション、デバイス特性、又はインタラクションに従って最も適切なビデオストリームを割り振るのに使用されることができる。ビデオ処理モジュール７３２は、ロケーション処理モジュール７３４に関連して動作することができる。ロケーション処理モジュール７３４は、マッピングされた又は既知の環境内の特定の（１つ又は複数の）モバイルコンピューティングデバイスのロケーションを取得し、特定のビデオフィードに対して相関させるのに使用されることができる。ロケーション処理モジュール７３４はさらに、一般ロケーション情報、又は特定のビデオフィードのためのロケーション依存表示設定をモバイルコンピューティングデバイス７１０に提供するのに使用されることができる。

ビデオコンテンツモジュール７３６は、拡張現実又は他のコンテンツオーバーレイ手法に関連してさらなるコンテンツを提供することができる。例えば、ビデオコンテンツモジュール７３６は、ビデオフィード内に表されるオブジェクト及び人のさらなるメタデータレイヤを提供するのに使用されることができる。上記メタデータレイヤには、字幕、歌詞、及びパフォーマー又はアスリート情報などの情報を含むことができる。

ビデオストリーム送信モジュール７３８は、それぞれのビデオストリーム（及び、ビデオのための付随するブロードキャスト手法）と付随する拡張されたビデオ情報とを、１つ以上のストリーミングフォーマット及びコーデックにおいて提供するように適合されることができる。ビデオストリーミング送信モジュール７３８はさらに、ビデオフィードの使用情報を収集することができ、上記使用情報は、アーティスト及びショーオペレータなどにより処理され、利用される。

さらなる例において、ビデオストリーミングサーバ７３０は、特定のデバイス又はユーザのための支払いされ又は制御されたアクセスコンテンツを提供するのに使用されることができる。ビデオストリーミングサーバ７３０はさらに、仮想双眼鏡ビデオ出力のサービスベースのオファーのための加入機能及び請求書送付に統合されてもよい。さらに、ビデオストリーミングサーバ７３０は、暗号化されたビデオフィードを提供することができ、これにおいて加入ユーザは、復号鍵を用いてブロードキャストビデオストリームにアクセスする。

無線アクセスポイント及びネットワーキングデバイス７４０には、それぞれのモバイルコンピューティングデバイスとの無線ネットワーキング接続を確立するように構成された様々なＷｉ−Ｆｉ送信設備及びデバイスを含むことができる。いくつかの例において、無線アクセスポイントは、すべての観覧者デバイスが少なくとも１つのアクセスポイントの範囲内であるように、及び、約２０Ｍｂｐｓのダウンロードストリーミングのための信号の品質を可能にするように、ロケーション内に配置されることができる。

システムの他のコンポーネントは、ビデオストリーミングサーバ７３０により送信されるビデオ出力のさらなる制御及びカスタマイズを可能にする。例えば、カメラ制御サーバ７５０は、管理者、パフォーマー、又はビデオソース７７０の外部制御（outside control）（再位置決めを含む）のためのさらなる機能性を含むことができる。管理デバイス７６０は、システム使用及び動作についての管理者監視及び制御のための機能性を含むことができる。さらなる例において、ビデオストリームのための、固有制御によりオーバーレイされたコンテンツが、管理デバイス７６０の使用をとおして含まれ、修正されてもよい。

ビデオソース７７０には、１つ又は複数のビデオカメラ、例えばＵＨＤビデオカメラなどを含むことができる。ビデオソースは、ショー又はパフォーマンス空間のかなり後ろからビデオを捕捉し、ビデオストリームをビデオストリーミングサーバ７３０に送信するように配置されることができる。ビデオソースの数は、劇場のサイズに依存してもよく、カメラの数とカメラ視点とを増加させることは、観覧者体験をより現実的にする可能性がある。しかしながら、いくつかの設定、例えば戸外のビューポイントなどにおいて、ビデオストリームを生成するのに１つのカメラが使用されてもよい。いくつかの例において、例えば、より低い解像度、帯域幅、又は処理能力を有する表示デバイスにビデオを提供するとき、標準定義（standard definition）又はサブＨＤビデオカメラが使用されてもよい。

ロケーションマーカ７８０は、赤外線マーカ、電子ビーコン、人間若しくはマシンにより読取可能な識別子、又は他タイプの検出可能オブジェクトとして実施されることができる。例えば、一組の赤外線マーカがステージ又はパフォーマンスエリアのまわりに位置決めされて、人間の目に不可視であるがすべてのスマートフォンカメラに可視である光を作り出してもよい。また、上記で論じられたとおり、ロケーションマーカ７８０の使用がモバイルコンピューティングデバイス７１０の動作により置換され又は補足されて、内蔵カメラのイメージとブロードキャストされたビデオとの間で相関させ、示されるイメージを整合させることができる。

本明細書に説明される例の多くは、コンサート、スポーツイベント、及び同様のパフォーマンスなどにおけるモバイルデバイス、カメラ、及びビデオストリーミングの使用を参照するが、これらビデオ手法の適用性は、長距離のオブジェクトについてのカメラ視点が人間のユーザに対して伝達され得る任意数の設定に適用されてよいことが理解されるであろう。例の多くは、本明細書においてスマートフォンなどのモバイルデバイスを参照して提供されたが、仮想双眼鏡手法は、他タイプのコンピュータ、タブレット、ウェアラブルデバイス（例えば、スマートグラス）、及び表示機能性を有するデバイスで使用されてもよいことが理解されるであろう。さらに、本明細書に説明されるロケーション及び無線ネットワーク送信手法は、ＩＥＥＥ８０２．１１ネットワークなどの無線ローカルエリアネットワークの使用に限定されず、任意数のショートエリア、ローカルエリア、及びワイドエリア無線通信テクノロジーを使用して適用されてよい。

本明細書に説明される手法を容易にし及び実行するのに使用される実施形態は、ハードウェア、ファームウェア、及びソフトウェアのうち１つ又は組み合わせにおいて実装することができる。実施形態はさらに、少なくとも１つのマシン読取可能記憶デバイス上に記憶された命令として実装されてもよく、上記命令は、少なくとも１つのプロセッサにより読み出され、実行されて、本明細書に説明される動作を実行することができる。マシン読取可能記憶デバイスには、マシン（例えば、コンピュータ）により読取可能な形式で情報を記憶する任意の非一時的メカニズムを含むことができる。例えば、マシン読取可能記憶デバイスには、読取専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、磁気ディスク記憶媒体、光学記憶媒体、フラッシュメモリデバイス、並びに他の記憶デバイス及び媒体を含むことができる。

本明細書に説明される例は、ロジック、又はある数のコンポーネント、モジュール、若しくはメカニズムを含むことができ、あるいはこれらにおいて動作することができる。モジュールは、１つ以上のプロセッサに通信可能に結合されて本明細書に説明される動作を実行するハードウェア、ソフトウェア、又はファームウェアであり得る。モジュールはハードウェアモジュールであってもよく、そのようなものとしてモジュールは、指定された動作を実行することができる有形エンティティと考えられることができ、特定の仕方で構成され又は配置されることができる。一例において、回路が、モジュールとして、指定された仕方で（例えば、内部的に、又は他の回路などの外部エンティティと関連して）配置されることができる。一例において、１つ以上のコンピュータシステム（例えば、スタンドアロンの、クライアントの、又はサーバのコンピュータシステム）又は１つ以上のハードウェアプロセッサの全体又は一部が、指定された動作を実行するように動作するモジュールとして、ファームウェア又はソフトウェア（例えば、命令、アプリケーションの部分、又はアプリケーション）により構成されることができる。一例において、ソフトウェアは、マシン読取可能媒体上に存在することができる。一例において、ソフトウェアは、モジュールの下層のハードウェアにより実行されると、指定された動作をハードウェアに実行させる。したがって、用語のハードウェアモジュールは、指定された仕方で動作し又は本明細書に説明されるいかなる動作の一部又はすべてを実行するように、物理的に構築され、具体的に構成され（例えば、配線され）、又は一時的に（例えば、暫時的に）構成された（例えば、プログラムされた）エンティティである、有形エンティティを包含するように理解される。モジュールが一時的に構成される例を考えると、モジュールの各々は、時間における任意のある瞬間にインスタンス化される必要はない。例えば、モジュールが、ソフトウェアを使用して構成される汎用目的ハードウェアプロセッサを含む場合、この汎用目的ハードウェアプロセッサは、異なる時間にそれぞれの異なるモジュールとして構成されることができる。したがって、ソフトウェアは、例えば、ある時間インスタンスにおいて特定のモジュールの構成要素となり、異なる時間インスタンスにおいて異なるモジュールの構成要素となるように、ハードウェアプロセッサを構成することができる。モジュールはさらに、本明細書に説明される方法論を実行するように動作するソフトウェア又はファームウェアモジュールであってもよい。

図８は、一例示的実施形態に従う、マシンをコンピュータシステム８００の例示的形式で示すブロック図であり、コンピュータシステム８００において命令セット又は命令シーケンスが実行されて、本明細書に論じられる方法論のうち任意の１つをマシンに実行させることができる。コンピュータシステムマシン８００は、モバイルデバイス１２０、２１０、４１０、７１０、ストリーミングサーバ２３０、３３０、監視及び拡張現実ステーション２５０、ビデオカメラのコンポーネント、無線ネットワークアクセスポイント、ビーコン及びロケーションデバイス、並びに無線ブロードキャスティングハードウェア、又は本明細書において説明され又は参照される任意の他の電子処理若しくはコンピューティングプラットフォームにより具現化され得る。さらに、本明細書に説明される自動車に含まれる高度ドライバ支援システムサブシステムは、下記に説明されるコンピュータシステムと実質的に同様に機能する処理システムを含むことができる。

代替的な実施形態において、マシンはスタンドアロンデバイスとして動作し、あるいは他のマシンに接続され（例えば、ネットワーク化され）てもよい。ネットワーク化された展開において、マシンは、サーバクライアントネットワーク環境におけるサーバ又はクライアントマシンの能力において動作することができ、あるいは、マシンは、ピアツーピア（又は分散型）ネットワーク環境におけるピアマシンとしての役割を果たすことができる。マシンは、車載システム、ウェアラブルデバイス、パーソナルコンピュータ（ＰＣ）、タブレットＰＣ、ハイブリッドタブレット、パーソナルデジタルアシスタント（ＰＤＡ）、モバイル電話、又はマシンによりとられるべき動作を指定する命令（順次的な又はその他の）を実行することができる任意のマシンであり得る。さらに、単一のマシンのみが例示されているが、用語「マシン」は、本明細書に論じられる方法論のうち任意の１つ以上を実行する一の命令セット（又は、複数の命令セット）を個々に又は共同で実行するマシンの任意の集合をさらに含むように解されるべきである。同様に、用語「プロセッサベースのシステム」は、本明細書に論じられる方法論のうち任意の１つ以上を実行する命令を個々に又は共同で実行するプロセッサ（例えば、コンピュータ）により制御され又は操作される１つ以上のマシンの任意のセットを含むように解されるべきである。

例示的なコンピュータシステム８００は、少なくとも１つのプロセッサ８０２（例えば、中央処理ユニット（ＣＰＵ）、グラフィックス処理ユニット（ＧＰＵ）、又は双方、プロセッサコア、計算ノード等）、メインメモリ８０４、及びスタティックメモリ８０６を含み、これらは、インターコネクト８０８（例えば、リンク、バス等）を介して互いに通信する。コンピュータシステム８００は、ビデオ表示ユニット８１０、英数字入力デバイス８１２（例えば、キーボード）、及びユーザインターフェース（ＵＩ）ナビゲーションデバイス８１４（例えば、マウス）をさらに含むことができる。一実施形態において、ビデオ表示ユニット８１０、入力デバイス８１２、及びユーザインターフェース（ＵＩ）ナビゲーションデバイス８１４は、タッチスクリーンディスプレイに組み込まれる。コンピュータシステム８００は、記憶デバイス８１６（例えば、ドライブユニット）、信号生成デバイス８１８（例えば、スピーカー）、出力コントローラ８３２、電力管理コントローラ８３４、ネットワークインターフェースデバイス８２０（該デバイス８２０は、１つ以上のアンテナ８３０、送受信機、又は他の無線通信ハードウェアを含み、あるいはこれらと動作的に通信することができる）、及び１つ以上のセンサ８２６、例えば、グローバルポジショニングシステム（ＧＰＳ）センサ、コンパス、加速度計、ロケーションセンサ、又は他のセンサなどをさらに含むことができる。

記憶デバイス８１６はマシン読取可能媒体８２２を含み、マシン読取可能媒体８２２上に、本明細書に説明される方法論又は機能のうち任意の１つ以上を具現化し又は該任意の１つ以上により利用されるデータ構造及び命令８２４（例えば、ソフトウェア）の１つ以上のセットが記憶される。命令８２４はさらに、コンピュータシステム８００による該命令の実行の間、メインメモリ８０４、スタティックメモリ８０６内、及び／又はプロセッサ８０２内に、完全に又は少なくとも部分的に存在することがあり、メインメモリ８０４、スタティックメモリ８０６、及びプロセッサ８０２もまたマシン読取可能媒体の構成要素となる。

マシン読取可能媒体８２２は、一例示的実施形態において単一の媒体であるように示されているが、用語「マシン読取可能媒体」は、１つ以上の命令８２４を記憶する単一の媒体又は複数の媒体（例えば、集中型又は分散型データベース、及び／又は関連付けられたキャッシュ及びサーバ）を含み得る。用語「マシン読取可能媒体」は、マシンによる実行のための、及び本開示の方法論のうち任意の１つ以上をマシンに実行させる命令を、記憶し、エンコードし、又は運ぶことができ、あるいは上記命令により利用され又は上記命令に関連付けられたデータ構造を記憶し、エンコードし、又は運ぶことができる任意の有形媒体を含むようにさらに解されるべきである。用語「マシン読取可能媒体」は、したがって、これらに限られないが、ソリッドステートメモリ、並びに光学及び磁気媒体を含むように解されるべきである。マシン読取可能媒体の具体例には不揮発メモリが含まれ、不揮発メモリには、これらに限られないが例として、半導体メモリデバイス（例えば、電気的プログラマブル読取専用メモリ（ＥＰＲＯＭ）、電気的消去可能プログラマブル読取専用メモリ（ＥＥＰＲＯＭ）、及びフラッシュメモリデバイス、磁気ディスク、例えば、内蔵ハードディスク及びリムーバブルディスク、磁気光ディスク、並びにＣＤ−ＲＯＭ及びＤＶＤ−ＲＯＭディスクが含まれる。

命令８２４はさらに、複数の良く知られるトランスファープロトコルのうち任意のもの（例えば、ＨＴＴＰ）を利用してネットワークインターフェースデバイス８２０を介して送信媒体を用いて通信ネットワーク８２８を通じて送信され、あるいは受信されることができる。通信ネットワークの例には、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）、インターネット、モバイル電話ネットワーク、基本旧来電話（plain old telephone）（ＰＯＴＳ）ネットワーク、無線データネットワーク（例えば、Ｗｉ−Ｆｉ、２Ｇ／３Ｇ、及び４Ｇ ＬＴＥ／ＬＴＥ−Ａ、又はＷｉＭＡＸ（登録商標）ネットワーク）が含まれる。用語「送信媒体」は、マシンによる実行のための命令を記憶し、エンコードし、又は運ぶことができる任意の無形媒体を含むように解されるべきであり、上記ソフトウェアの通信を容易にするデジタル若しくはアナログ通信信号又は他の無形媒体を含む。

本願に説明される方法、システム、及びデバイス実施形態についてのさらなる例には、下記の非限定的構成が含まれる。下記の非限定的例の各々はそれ独自で自立することがあり、あるいは、下記に提供される又は本開示の全体をとおしての他の例のうち任意の１つ以上との任意の入れ替え又は組み合わせにおいて組み合わせられてもよい。

例１は、仮想双眼鏡ビデオ表示を提供するモバイルコンピューティングデバイスのための構成要件（例えば、デバイス、装置、マシン、又はマシン読取可能媒体により具現化される）を含み、プロセッサと、上記プロセッサで動作し、無線ネットワークを介してビデオストリーミングサーバからビデオデータの選択されたストリームを受信する無線ネットワーキングモジュールと、上記プロセッサで動作し、上記ビデオデータの上記ストリームからのビデオコンテンツを処理するビデオ処理モジュールであって、ビデオデータの上記選択されたストリームは、上記ビデオデータ内に捕捉されたシーンに近接して位置する見物エリア内の当該モバイルコンピューティングデバイスのロケーションに基づいて選択される、ビデオ処理モジュールと、上記プロセッサで動作し、当該モバイルコンピューティングデバイスの表示画面に上記ビデオコンテンツの選択強化された部分を出力する表示モジュールであって、上記選択強化された部分は、上記ビデオデータ内に捕捉された上記シーンに対する当該モバイルコンピューティングデバイスの向きに基づいて決定される、表示モジュールと、を備える。

例２において、例１に記載の構成要件は、上記プロセッサにより実施され、上記表示画面への上記ビデオコンテンツの上記選択強化された部分の上記出力の制御をもたらすユーザコマンドを受信するユーザインタラクションモジュール、を含むことができ、上記ビデオコンテンツの上記選択強化された部分は、上記ビデオデータの上記ストリームから上記ビデオコンテンツのズームされ及びパンされた部分を提供する。

例３において、例１乃至２のうちいずれか１つに記載の構成要件は、上記プロセッサにより実施され、当該モバイルコンピューティングデバイスにより検出される少なくとも１つのモーション入力に基づいて上記表示画面上の上記ビデオコンテンツの上記選択強化された部分を変更するモーション処理モジュール、を含むことができる。

例４において、例１乃至３のうちいずれか１つに記載の構成要件は、上記無線ネットワーキングモジュールは、ＩＥＥＥ８０２．１１無線ネットワークプロトコルに従う上記無線ネットワークの動作を介して上記ビデオデータの上記ストリームを受信し、上記ビデオデータの上記選択されたストリームは、上記見物エリア内に位置する上記無線ネットワークの少なくとも１つのアクセスポイントに対する当該モバイルコンピューティングデバイスのロケーションに基づいて選択され、上記無線ネットワークのアクセスポイントに対する当該モバイルコンピューティングデバイスのロケーションの識別が、上記ビデオストリーミングサーバに通信されて当該モバイルコンピューティングデバイスのロケーションを示す、ことを含むことができる。

例５において、例１乃至４のうちいずれか１つに記載の構成要件は、上記ビデオ処理モジュールは、上記ビデオコンテンツ内に検出された少なくとも１つのインジケータを、上記ビデオデータ内に捕捉された上記シーンに対する当該モバイルコンピューティングデバイスの向きに相関させる、ことを含むことができる。

例６において、例１乃至５のうちいずれか１つに記載の構成要件は、上記少なくとも１つのインジケータを含む上記シーンの少なくとも部分のイメージを捕捉するカメラ、を含むことができ、上記ビデオ処理モジュールは、上記少なくとも１つのインジケータを含む上記シーンの少なくとも上記部分の上記イメージを、上記ビデオコンテンツの上記選択強化された部分に相関させる。

例７において、例１乃至６のうちいずれか１つに記載の構成要件は、上記ビデオ処理モジュールはさらに、上記カメラにより捕捉された上記シーンの少なくとも上記部分の上記イメージを、上記ビデオデータ内に捕捉された上記シーンのイメージと比較し、マッチさせて、上記シーンに対する当該モバイルコンピューティングデバイスの向きを決定する、ことを含むことができる。

例８は、モバイルデバイスにおいてストリーミングビデオを表示するための構成要件（例えば、方法、動作を実行する手段、マシンにより実行されると該マシンに動作を実行させる命令を含むマシン読取可能媒体、又は実行するための装置など）を含み、上記モバイルデバイスにおけるハードウェアコンポーネントで実行される動作により実施され、上記動作は、上記モバイルデバイスで、選択された高精細ビデオストリームにアクセスすることであって、上記高精細ビデオストリームは、上記モバイルデバイスから離れるビューの方向において及びシーンの関心エリアを向いて捕捉された上記シーンの高精細ビデオを提供する、ことと、上記関心エリアに対する上記モバイルデバイスの向きを、上記シーンの上記高精細ビデオの特定のズームされた部分に相関させることと、上記モバイルデバイスに上記シーンの上記高精細ビデオの上記特定のズームされた部分を表示することと、を含む。

例９において、例８に記載の構成要件は、上記シーンの上記高精細ビデオを、上記高精細ビデオの上記特定のズームされた部分に対してパンすることであって、該パンすることは、上記関心エリアに対する上記モバイルデバイスの向きを用いて実行される、ことと、上記シーンの上記高精細ビデオを、上記高精細ビデオの上記特定のズームされた部分に対してズームすることであって、該ズームすることは、上記関心エリアに対する上記モバイルデバイスの向きを用いて実行される、ことと、を含むことができる。

例１０において、例８乃至９のうちいずれか１つに記載の構成要件は、上記モバイルデバイスのロケーション情報をリモートサーバに提供することであって、上記ロケーション情報は、上記シーンに隣接した見学エリア内における上記モバイルデバイスのロケーションを示す、ことと、複数の高精細ビデオストリームのうち１つから上記高精細ビデオストリームを受信することであって、上記高精細ビデオストリームは、上記モバイルデバイスのロケーション情報に基づいて上記リモートサーバにより選択される、ことと、を含むことができる。

例１１において、例８乃至１０のうちいずれか１つに記載の構成要件は、上記モバイルデバイスで、上記シーンのデジタルイメージを捕捉することと、上記モバイルデバイスで、上記シーンの上記デジタルイメージ内のマーカを検出することと、上記シーンの上記高精細ビデオ内で上記モバイルデバイスにより検出された上記マーカの位置に基づいて、上記高精細ビデオの上記特定のズームされた部分を選択することであって、上記高精細ビデオの上記特定のズームされた部分は、より大きい高精細ビデオのサブセットを提供する、ことと、を含むことができる。

例１２において、例８乃至１１のうちいずれか１つに記載の構成要件は、上記モバイルデバイスの向きを上記高精細ビデオの上記特定のズームされた部分に相関させることは、上記シーンの上記デジタルイメージ内の上記マーカを上記シーンの上記高精細ビデオのイメージ内のマーカにマッチさせて、上記高精細ビデオの上記特定のズームされた部分の上記選択において上記モバイルデバイスからの上記シーンの視点をシミュレートすることを含む、ことを含むことができる。

例１３において、例８乃至１２のうちいずれか１つに記載の構成要件は、上記マーカは、上記シーン内に位置決めされた少なくとも１つの赤外光により提供される、ことを含むことができる。

例１４において、例８乃至１３のうちいずれか１つに記載の構成要件は、上記マーカは、上記シーン内に位置決めされたマシン読取可能オブジェクトであり、上記マシン読取可能オブジェクトは、上記シーンに対するロケーションに関連付けられた識別子を提供する、ことを含むことができる。

例１５において、例８乃至１４のうちいずれか１つに記載の構成要件は、上記モバイルデバイスで、上記シーンのデジタルイメージを捕捉することと、上記シーンの上記デジタルイメージ内の少なくとも１つのオブジェクトのイメージ認識を実行することと、上記高精細ビデオの上記特定のズームされた部分に対する上記モバイルデバイスの向きの相関に基づいて、上記高精細ビデオの上記特定のズームされた部分を選択することであって、上記高精細ビデオの上記特定のズームされた部分は、より大きい高精細ビデオのサブセットを提供する、ことと、をさらに含むことができる。

例１６において、例８乃至１５のうちいずれか１つに記載の構成要件は、上記高精細ビデオの上記特定のズームされた部分に情報オーバーレイを表示することであって、上記情報オーバーレイは、上記高精細ビデオの上記特定のズームされた部分内に描写される少なくとも１つの実世界アイテムに関する情報を提供する、こと、をさらに含むことができる。

例１７において、例８乃至１６のうちいずれか１つに記載の構成要件は、上記モバイルデバイスでのグラフィカルユーザインターフェース出力に関連して受信される少なくとも１つのユーザ入力を処理することであって、上記少なくとも１つのユーザ入力は、複数の高精細ビデオストリームの中から上記高精細ビデオストリームを選択し、上記シーンの上記高精細ビデオの、上記シーンの別の関心エリアに対するパンニングを実行し、又は、上記シーンの上記関心エリアの別の部分のズームされた表示を生成するように上記シーンの上記高精細ビデオのズーミングを実行するように用いられる、こと、をさらに含むことができる。

例１８は、モバイルコンピューティングデバイスにビデオ表示を出力するための構成要件（例えば、デバイス、装置、マシン、又はマシン読取可能媒体により具現化される）を含み、命令を用いて実施され、上記命令は実行されると上記モバイルコンピューティングデバイスに、無線ネットワークとの接続を確立することと、上記モバイルコンピューティングデバイスの第１の側面の視点から、上記モバイルコンピューティングデバイスの上記第１の側面に位置するカメラを用いてデジタルイメージを捕捉することと、関心エリアの高精細ビデオストリームを処理することであって、上記高精細ビデオストリームは、上記無線ネットワークとの上記接続を介して受信される、ことと、上記高精細ビデオストリーム内に提供されるビデオシーンの向きに対する上記モバイルコンピューティングデバイスの視点を決定することと、上記モバイルコンピューティングデバイスの第２の側面に位置する表示画面にデジタルビデオを出力することと、を行わせ、上記第２の側面は上記第１の側面の対向であり、上記デジタルビデオの出力は、上記モバイルコンピューティングデバイスの視点に似るようにズームされ及びパンされた上記高精細ビデオストリームの上記ビデオシーンの部分を含む。

例１９において、例１８に記載の構成要件は、上記モバイルコンピューティングデバイスに、上記カメラで捕捉された上記関心エリアのイメージを処理することと、上記関心エリアの上記イメージ内のマーカを検出することと、上記関心エリア内の上記マーカを上記ビデオシーンの上記部分の向きに相関させることと、をさらに行わせることを含むことができる。

例２０において、例１８乃至１９のうちいずれか１つに記載の構成要件は、上記マーカはマシン検出可能マーカであり、上記マシン検出可能マーカは赤外光又はマシン検出可能オブジェクトを含む、ことを含むことができる。

例２１において、例１８乃至２０のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスに、上記モバイルコンピューティングデバイスのロケーション情報をリモートビデオサーバに送信することと、上記ロケーション情報に応答して上記リモートビデオサーバから上記高精細ビデオストリームを受信することであって、上記高精細ビデオストリームは複数の高精細ビデオストリームから選択される、ことと、をさらに行わせることを含むことができる。

例２２において、例１８乃至２１のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスの上記ロケーション情報は無線ネットワーク情報を含み、上記無線ネットワーク情報は上記無線ネットワークのための無線アクセスポイントのＳＳＩＤを含む、ことを含むことができる。

例２３において、例１８乃至２２のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスの上記ロケーション情報は、ＱＲコード、ＲＦＩＤタグ、又はＢｌｕｅｔｏｏｔｈ低エネルギー（Low Energy）ビーコンから上記モバイルコンピューティングデバイスにより読み出された識別子を含む、ことを含むことができる。

例２４において、例１８乃至２３のうちいずれか１つに記載の構成要件は、上記命令は実行されると、上記モバイルコンピューティングデバイスに、上記モバイルコンピューティングデバイスに対するユーザジェスチャ入力を検出し、処理することと、上記ユーザジェスチャ入力に基づいて上記高精細ビデオストリームの上記ビデオシーンの表示された部分を変更することと、をさらに行わせる、ことを含むことができる。

例２５は、モバイルコンピューティングデバイスのプロセッサ及びメモリの動作で実行される仮想双眼鏡ビデオ表示の出力のための構成要件（例えば、方法、動作を実行する手段、マシンにより実行されると該マシンに動作を実行させる命令を含むマシン読取可能媒体、又は実行するための装置など）を含み、無線ネットワークを介してビデオストリーミングサーバからビデオデータの選択されたストリームを受信することと、上記ビデオデータの上記ストリームからのビデオコンテンツを処理することであって、ビデオデータの上記選択されたストリームは、上記ビデオデータ内に捕捉されたシーンに近接して位置する見物エリア内の上記モバイルコンピューティングデバイスのロケーションに基づいて選択される、ことと、上記ビデオコンテンツの選択強化された部分を出力することであって、上記選択強化された部分は、上記ビデオデータ内に捕捉された上記シーンに対する上記モバイルコンピューティングデバイスの向きに基づいて決定される、ことと、を含む。

例２６において、例２５に記載の構成要件は、上記ビデオコンテンツの上記選択強化された部分の上記出力の制御をもたらすユーザコマンドを受信すること、を含むことができる。

例２７において、例２５乃至２６のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスにより検出される少なくとも１つのモーション入力に基づいて、表示される上記ビデオコンテンツの上記選択された部分を変更すること、を含むことができる。

例２８において、例２５乃至２７のうちいずれか１つに記載の構成要件は、ＩＥＥＥ８０２．１１無線ネットワークプロトコルに従う上記無線ネットワークの動作を介して上記ビデオデータの上記ストリームを受信すること、を含むことができ、上記ビデオデータの上記ストリームは、上記シーンに対する上記モバイルコンピューティングデバイスのロケーションに基づいて選択され、上記無線ネットワークのアクセスポイントに対する上記モバイルコンピューティングデバイスのロケーションの識別が、上記ビデオストリーミングサーバに通信されて上記モバイルコンピューティングデバイスのロケーションを示す。

例２９において、例２５乃至２８のうちいずれか１つに記載の構成要件は、上記ビデオコンテンツ内に検出された少なくとも１つのインジケータを、上記ビデオデータ内に捕捉された上記シーンに対する上記モバイルコンピューティングデバイスの向きに相関させること、を含むことができる。

例３０において、例２５乃至２９のうちいずれか１つに記載の構成要件は、上記少なくとも１つのインジケータを含む上記シーンの少なくとも部分のイメージを捕捉することと、上記少なくとも１つのインジケータを含む上記シーンの少なくとも上記部分の上記イメージを、上記ビデオコンテンツの上記選択部分に対して処理することと、カメラにより捕捉された上記シーンの少なくとも上記部分の上記イメージを、上記ビデオデータ内に捕捉された上記シーンのイメージとマッチさせて、上記シーンに対する上記モバイルコンピューティングデバイスの向きを決定する、ことと、を含むことができる。

例３１は、モバイルコンピューティングデバイスにおいてビデオをストリーミングする命令を含む少なくとも１つのマシン読取可能記憶媒体を含み、上記命令はマシンにより実行されると、例２５乃至３０のうちいずれか１つを上記マシンに実行させる。

例３２は、例２５乃至３０のうちいずれか１つを実行する手段を備えた装置を含む。

例３３は、構成要件（例えば、デバイス、装置、又はマシンなど）を含み、無線ネットワークを介してビデオストリーミングサーバからビデオデータのストリームを受信する手段と、上記ビデオデータの上記ストリームからのビデオコンテンツを処理する手段であって、ビデオデータの上記選択されたストリームは、上記ビデオデータ内に捕捉されたシーンに近接して位置する見物エリア内のモバイルコンピューティングデバイスのロケーションに基づいて選択される、手段と、上記ビデオコンテンツの選択強化された部分を出力する手段であって、上記選択強化された部分は、上記ビデオデータ内に捕捉された上記シーンに対する上記モバイルコンピューティングデバイスの向きに基づいて決定される、手段と、を備える。

例３４において、例３３に記載の構成要件は、上記表示画面への上記ビデオコンテンツの上記選択強化された部分の上記出力の制御をもたらすユーザコマンドを受信する手段、を含むことができ、上記ビデオコンテンツの上記選択強化された部分は、上記ビデオデータの上記ストリームから上記ビデオコンテンツのズームされ及びパンされた部分を提供する。

例３５において、例３３乃至３４のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスにより検出される少なくとも１つのモーション入力に基づいて上記表示画面上の上記ビデオコンテンツの上記選択強化された部分を変更する手段、を含むことができる。

例３６において、例３３乃至３５のうちいずれか１つに記載の構成要件は、ＩＥＥＥ８０２．１１無線ネットワークプロトコルに従う上記無線ネットワークの動作を介して上記ビデオデータの上記ストリームを受信すること、を含むことができ、上記ビデオデータの上記選択されたストリームは、上記見物エリア内に位置する上記無線ネットワークの少なくとも１つのアクセスポイントに対する上記モバイルコンピューティングデバイスのロケーションに基づいて選択され、上記無線ネットワークのアクセスポイントに対する上記モバイルコンピューティングデバイスのロケーションの識別が、上記ビデオストリーミングサーバに通信されて上記モバイルコンピューティングデバイスのロケーションを示す。

例３７において、例３３乃至３６のうちいずれか１つに記載の構成要件は、上記ビデオコンテンツ内に検出された少なくとも１つのインジケータを、上記ビデオデータ内に捕捉された上記シーンに対する上記モバイルコンピューティングデバイスの向きに相関させる手段と、上記少なくとも１つのインジケータを含む上記シーンの少なくとも部分のイメージを捕捉する手段と、上記少なくとも１つのインジケータを含む上記シーンの少なくとも上記部分の上記イメージを、上記ビデオコンテンツの上記選択部分に対して処理する手段と、カメラにより捕捉された上記シーンの少なくとも上記部分の上記イメージを、上記ビデオデータ内に捕捉された上記シーンのイメージとマッチさせて、上記シーンに対する上記モバイルコンピューティングデバイスの向きを決定する手段と、を含むことができる。

例３８は、動作を実行する少なくとも１つのプロセッサを備えたモバイルデバイスのための構成要件（例えば、デバイス、装置、又はマシンなど）を含み、上記動作は、選択された高精細ビデオストリームにアクセスすることであって、上記高精細ビデオストリームは、上記モバイルデバイスから離れるビューの方向において及びシーンの関心エリアを向いて捕捉された上記シーンの高精細ビデオを提供し、上記関心エリアに対する上記モバイルデバイスの向きを、上記シーンの上記高精細ビデオの特定のズームされた部分に相関させ、上記モバイルデバイスに上記シーンの上記高精細ビデオの上記特定のズームされた部分を表示する。

例３９において、例３８に記載の構成要件は、動作をさらに実行する上記少なくとも１つのプロセッサを含むことができ、上記動作は、上記シーンの上記高精細ビデオを、上記高精細ビデオの上記特定のズームされた部分に対してパンすることであって、該パンすることは、上記関心エリアに対する上記モバイルデバイスの向きを用いて実行され、上記シーンの上記高精細ビデオを、上記高精細ビデオの上記特定のズームされた部分に対してズームすることであって、該ズームすることは、上記関心エリアに対する上記モバイルデバイスの向きを用いて実行される。

例４０において、例３８乃至３９のうちいずれか１つに記載の構成要件は、動作をさらに実行する上記少なくとも１つのプロセッサを含むことができ、上記動作は、上記モバイルデバイスのロケーション情報をリモートサーバに提供することであって、上記ロケーション情報は、上記シーンに隣接した見学エリア内における上記モバイルデバイスのロケーションを示し、複数の高精細ビデオストリームのうち１つから上記高精細ビデオストリームを受信することであって、上記高精細ビデオストリームは、上記モバイルデバイスのロケーション情報に基づいて上記リモートサーバにより選択される。

例４１において、例３８乃至４０のうちいずれか１つに記載の構成要件は、動作をさらに実行する上記少なくとも１つのプロセッサを含むことができ、上記動作は、上記モバイルデバイスで、上記シーンのデジタルイメージを捕捉し、上記モバイルデバイスで、上記シーンの上記デジタルイメージ内のマーカを検出し、上記シーンの上記高精細ビデオ内で上記モバイルデバイスにより検出された上記マーカの位置に基づいて、上記高精細ビデオの上記特定のズームされた部分を選択することであって、上記高精細ビデオの上記特定のズームされた部分は、より大きい高精細ビデオのサブセットを提供する。

例４２において、例３８乃至４１のうちいずれか１つに記載の構成要件は、動作をさらに実行する上記少なくとも１つのプロセッサを含むことができ、上記動作は、上記モバイルデバイスの向きを上記高精細ビデオの上記特定のズームされた部分に相関させることは、上記シーンの上記デジタルイメージ内の上記マーカを上記シーンの上記高精細ビデオのイメージ内のマーカにマッチさせて、上記高精細ビデオの上記特定のズームされた部分の上記選択において上記モバイルデバイスからの上記シーンの視点をシミュレートすることを含む。

例４３において、例３８乃至４２のうちいずれか１つに記載の構成要件は、上記マーカは、上記シーン内に位置決めされた少なくとも１つの赤外光により提供される、ことを含むことができる。

例４４において、例３８乃至４３のうちいずれか１つに記載の構成要件は、上記マーカは、上記シーン内に位置決めされたマシン読取可能オブジェクトであり、上記マシン読取可能オブジェクトは、上記シーンに対するロケーションに関連付けられた識別子を提供する、ことを含むことができる。

例４５において、例３８乃至４４のうちいずれか１つに記載の構成要件は、動作をさらに実行する上記少なくとも１つのプロセッサを含むことができ、上記動作は、上記モバイルデバイスで、上記シーンのデジタルイメージを捕捉し、上記シーンの上記デジタルイメージ内の少なくとも１つのオブジェクトのイメージ認識を実行し、上記高精細ビデオの上記特定のズームされた部分に対する上記モバイルデバイスの向きの相関に基づいて、上記高精細ビデオの上記特定のズームされた部分を選択することであって、上記高精細ビデオの上記特定のズームされた部分は、より大きい高精細ビデオのサブセットを提供する。

例４６において、例３８乃至４５のうちいずれか１つに記載の構成要件は、動作をさらに実行する上記少なくとも１つのプロセッサを含むことができ、上記動作は、上記高精細ビデオの上記特定のズームされた部分に情報オーバーレイを表示することであって、上記情報オーバーレイは、上記高精細ビデオの上記特定のズームされた部分内に描写される少なくとも１つの実世界アイテムに関する情報を提供する。

例４７において、例３８乃至４６のうちいずれか１つに記載の構成要件は、動作をさらに実行する上記少なくとも１つのプロセッサを含むことができ、上記動作は、上記モバイルデバイスでのグラフィカルユーザインターフェース出力に関連して受信される少なくとも１つのユーザ入力を処理することであって、上記少なくとも１つのユーザ入力は、複数の高精細ビデオストリームの中から上記高精細ビデオストリームを選択し、上記シーンの上記高精細ビデオの、上記シーンの別の関心エリアに対するパンニングを実行し、又は、上記シーンの上記関心エリアの別の部分のズームされた表示を生成するように上記シーンの上記高精細ビデオのズーミングを実行するように用いられる。

例４８は、モバイルデバイスにおいてビデオをストリーミングする命令を含む少なくとも１つのマシン読取可能記憶媒体を含み、上記命令はマシンにより実行されると、例８乃至１７のうちいずれか１つを上記マシンに実行させる。

例４９は、例８乃至１７のうちいずれか１つを実行する手段を備えた装置を含む。

例５０は、構成要件（例えば、デバイス、装置、又はマシンなど）を含み、モバイルデバイスで、選択された高精細ビデオストリームにアクセスする手段であって、上記高精細ビデオストリームは、上記モバイルデバイスから離れるビューの方向において及びシーンの関心エリアを向いて捕捉された上記シーンの高精細ビデオを提供する、手段と、上記関心エリアに対する上記モバイルデバイスの向きを、上記シーンの上記高精細ビデオの特定のズームされた部分に相関させる手段と、上記モバイルデバイスに上記シーンの上記高精細ビデオの上記特定のズームされた部分を表示する手段と、を備える。

例５１において、例５０に記載の構成要件は、上記シーンの上記高精細ビデオを、上記高精細ビデオの上記特定のズームされた部分に対してパンする手段であって、該パンすることは、上記関心エリアに対する上記モバイルデバイスの向きを用いて実行される、手段と、上記シーンの上記高精細ビデオを、上記高精細ビデオの上記特定のズームされた部分に対してズームする手段であって、該ズームすることは、上記関心エリアに対する上記モバイルデバイスの向きを用いて実行される、手段と、をさらに備える、ことを含むことができる。

例５２において、例５０乃至５１のうちいずれか１つに記載の構成要件は、上記モバイルデバイスのロケーション情報をリモートサーバに提供する手段であって、上記ロケーション情報は、上記シーンに隣接した見学エリア内における上記モバイルデバイスのロケーションを示す、手段と、複数の高精細ビデオストリームのうち１つから上記高精細ビデオストリームを受信する手段であって、上記高精細ビデオストリームは、上記モバイルデバイスのロケーション情報に基づいて上記リモートサーバにより選択される、手段と、をさらに備える、ことを含むことができる。

例５３において、例５０乃至５２のうちいずれか１つに記載の構成要件は、上記シーンのデジタルイメージを捕捉する手段と、上記シーンの上記デジタルイメージ内のマーカを検出する手段と、上記シーンの上記高精細ビデオ内で上記モバイルデバイスにより検出された上記マーカの位置に基づいて、上記高精細ビデオの上記特定のズームされた部分を選択する手段であって、上記高精細ビデオの上記特定のズームされた部分は、より大きい高精細ビデオのサブセットを提供する、手段と、をさらに備える、ことを含むことができる。

例５４において、例５０乃至５３のうちいずれか１つに記載の構成要件は、上記モバイルデバイスの向きを上記高精細ビデオの上記特定のズームされた部分に相関させる手段は、上記シーンの上記デジタルイメージ内の上記マーカを上記シーンの上記高精細ビデオのイメージ内のマーカにマッチさせて、上記高精細ビデオの上記特定のズームされた部分の上記選択において上記モバイルデバイスからの上記シーンの視点をシミュレートすることを含む、ことを含むことができる。

例５５において、例５０乃至５４のうちいずれか１つに記載の構成要件は、上記シーン内に位置決めされた少なくとも１つの赤外光により提供されるマーカを検出する手段、をさらに備える、ことを含むことができる。

例５６において、例５０乃至５５のうちいずれか１つに記載の構成要件は、上記シーン内に位置決めされたマシン読取可能オブジェクトであるマーカを検出する手段、をさらに備え、上記マシン読取可能オブジェクトは、上記シーンに対するロケーションに関連付けられた識別子を提供する、ことを含むことができる。

例５７において、例５０乃至５６のうちいずれか１つに記載の構成要件は、上記シーンのデジタルイメージを捕捉する手段と、上記シーンの上記デジタルイメージ内の少なくとも１つのオブジェクトのイメージ認識を実行する手段と、上記高精細ビデオの上記特定のズームされた部分に対する上記モバイルデバイスの向きの相関に基づいて、上記高精細ビデオの上記特定のズームされた部分を選択する手段であって、上記高精細ビデオの上記特定のズームされた部分は、より大きい高精細ビデオのサブセットを提供する、手段と、さらに備える、ことを含むことができる。

例５８は、モバイルコンピューティングデバイスの少なくとも１つのプロセッサにより実行される構成要件（例えば、方法、動作を実行する手段、マシンにより実行されると該マシンに動作を実行させる命令を含むマシン読取可能媒体、又は実行するための装置など）を含み、上記構成要件は、無線ネットワークとの接続を確立することと、上記モバイルコンピューティングデバイスの上記第１の側面に位置するカメラを用いてデジタルイメージを捕捉することであって、上記デジタルイメージは上記第１の側面の視点から捕捉される、ことと、関心エリアの高精細ビデオストリームを処理することであって、上記高精細ビデオストリームは、上記無線ネットワークとの上記接続を介して受信される、ことと、上記高精細ビデオストリーム内に提供されるビデオシーンの向きに対する上記モバイルコンピューティングデバイスの視点を決定することと、上記モバイルコンピューティングデバイスの第２の側面に位置する表示画面にデジタルビデオを出力することと、を含み、上記第２の側面は上記第１の側面の対向であり、上記出力することは、上記表示画面に上記高精細ビデオストリームのより低い解像度部分を出力することを含み、上記高精細ビデオストリームの上記ビデオシーンは、上記モバイルコンピューティングデバイスの視点に似るように上記より低い解像度部分に対してズームされ、パンされる。

例５９において、例５８に記載の構成要件は、上記カメラで捕捉された上記関心エリアのイメージを処理することと、上記関心エリアの上記イメージ内のマーカを検出することと、上記関心エリア内の上記マーカを上記ビデオシーンの上記部分の向きに相関させることと、をさらに含む、ことを含むことができる。

例６０において、例５８乃至５９のうちいずれか１つに記載の構成要件は、上記マーカはマシン検出可能マーカであり、上記マシン検出可能マーカは赤外光又はマシン検出可能オブジェクトを含む、ことを含むことができる。

例６１において、例５８乃至６０のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスのロケーション情報をリモートビデオサーバに送信することと、上記ロケーション情報に応答して上記リモートビデオサーバから上記高精細ビデオストリームを受信することであって、上記高精細ビデオストリームは複数の高精細ビデオストリームから選択される、ことと、をさらに含む、ことを含むことができる。

例６２において、例５８乃至６１のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスの上記ロケーション情報は無線ネットワーク情報を含み、上記無線ネットワーク情報は上記無線ネットワークのための無線アクセスポイントのＳＳＩＤを含む、ことを含むことができる。

例６３において、例５８乃至６２のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスの上記ロケーション情報は、ＱＲコード、ＲＦＩＤタグ、又はＢｌｕｅｔｏｏｔｈ低エネルギービーコンから上記モバイルコンピューティングデバイスにより読み出された識別子を含む、ことを含むことができる。

例６４において、例５８乃至６３のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスに対するユーザジェスチャ入力を検出し、処理することと、上記ユーザジェスチャ入力に基づいて上記高精細ビデオストリームの上記ビデオシーンの表示された部分を変更することと、をさらに含む、ことを含むことができる。

例６５は、例５８乃至６４のうちいずれかを実行する手段を備えた装置を含む。

例６６は、モバイルコンピューティングデバイスのための構成要件（例えば、デバイス、装置、又はマシンなど）を含み、少なくとも１つのプロセッサと、少なくとも１つの無線ネットワークとの接続を確立する無線送受信機と、上記モバイルコンピューティングデバイスの第１の側面に位置し、上記第１の側面の視点からデジタルイメージを捕捉するカメラと、上記モバイルコンピューティングデバイスの第２の側面に位置し、デジタルビデオを出力する表示画面であって、上記第２の側面は上記第１の側面の対向である、表示画面と、を命令を含む少なくとも１つのメモリと、を備え、上記命令は実行されると上記モバイルコンピューティングデバイスに、関心エリアの高精細ビデオストリームを処理することであって、上記高精細ビデオストリームは、上記無線送受信機を介して受信される、ことと、上記高精細ビデオストリーム内に提供されるビデオシーンの向きに対する上記モバイルコンピューティングデバイスの視点を決定することと、上記表示画面に上記高精細ビデオストリームのより低い解像度部分を出力することであって、上記高精細ビデオストリームの上記ビデオシーンは、上記モバイルコンピューティングデバイスの視点に似るように上記より低い解像度部分に対してズームされ、パンされる、ことと、を行わせる。

例６７において、例６６に記載の構成要件は、上記メモリが命令を更に含み、該命令は実行されると上記モバイルコンピューティングデバイスに、上記カメラで捕捉された上記関心エリアのイメージを処理することと、上記関心エリアの上記イメージ内のマーカを検出することと、上記関心エリア内の上記マーカを上記ビデオシーンの上記部分の向きに相関させることと、を行わせる、ことを含むことができる。

例６８において、例６６乃至６７のうちいずれか１つに記載の構成要件は、上記マーカはマシン検出可能マーカであり、上記マシン検出可能マーカは赤外光又はマシン検出可能オブジェクトを含む、ことを含むことができる。

例６９において、例６６乃至６８のうちいずれか１つに記載の構成要件は、上記メモリが命令を更に含み、該命令は実行されると上記モバイルコンピューティングデバイスに、上記モバイルコンピューティングデバイスのロケーション情報をリモートビデオサーバに送信することと、上記ロケーション情報に応答して上記リモートビデオサーバから上記高精細ビデオストリームを受信することであって、上記高精細ビデオストリームは複数の高精細ビデオストリームから選択される、ことと、を行わせる、ことを含むことができる。

例７０において、例６６乃至６９のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスの上記ロケーション情報は上記無線送受信機からの無線ネットワーク情報を含み、上記無線ネットワーク情報は無線アクセスポイントのＳＳＩＤを含む、ことを含むことができる。

例７１において、例６６乃至７０のうちいずれか１つに記載の構成要件は、上記モバイルコンピューティングデバイスの上記ロケーション情報は、ＱＲコード、ＲＦＩＤタグ、又はＢｌｕｅｔｏｏｔｈ低エネルギービーコンから上記モバイルコンピューティングデバイスにより読み出された識別子を含む、ことを含むことができる。

例７２において、例６６乃至７１のうちいずれか１つに記載の構成要件は、上記メモリが命令を更に含み、該命令は実行されると上記モバイルコンピューティングデバイスに、上記モバイルコンピューティングデバイスに対するユーザジェスチャ入力を検出し、処理することと、上記ユーザジェスチャ入力に基づいて上記高精細ビデオストリームの上記ビデオシーンの表示された部分を変更することと、を行わせる、ことを含むことができる。

例７３は、モバイルコンピューティングデバイスにビデオコンテンツを供給するビデオストリーミングサーバのための構成要件（例えば、デバイス、装置、又はマシンなど）を含み、複数の高精細ビデオカメラからビデオを取得するビデオ処理モジュールと、上記複数の高精細ビデオカメラに対する上記モバイルコンピューティングデバイスのロケーションを取得するロケーション処理モジュールと、上記複数の高精細ビデオカメラからのビデオコンテンツを処理するビデオコンテンツモジュールと、複数のビデオストリームをそれぞれのモバイルコンピューティングデバイスに提供するビデオストリーム送信モジュールであって、上記複数のビデオストリームは、上記モバイルコンピューティングデバイスに提供される高精細ビデオストリームを含む、ビデオストリーム送信モジュールと、を備える。

例７４において、例７３に記載の構成要件は、上記ビデオストリーミングサーバが無線アクセスポイントを介して上記複数のビデオストリームを通信し、上記無線アクセスポイントはＩＥＥＥ８０２．１１標準プロトコルに従い通信する、ことを含むことができる。

例７５において、例７３乃至７４のうちいずれか１つに記載の構成要件は、上記ビデオストリーミングサーバがカメラ制御サーバとの間で通信し、上記カメラ制御サーバは、上記複数の高精細ビデオカメラのそれぞれのカメラの再位置決め及び制御を提供する、ことを含むことができる。

例７６において、例７３乃至７５のうちいずれか１つに記載の構成要件は、上記ビデオストリーミングサーバが管理デバイスと通信し、上記管理デバイスはビデオストリーミング使用及びビデオストリーミングサーバ動作の監視及び制御を提供する、ことを含むことができる。

例７７は、ストリーミングサーバからモバイルコンピューティングデバイスにビデオをストリーミングする方法のための構成要件（例えば、方法、動作を実行する手段、マシンにより実行されると該マシンに動作を実行させる命令を含むマシン読取可能媒体、又は実行するための装置など）を含み、関心エリアの複数の高精細ビデオカメラから取得されるビデオコンテンツを処理することと、上記複数の高精細ビデオカメラと上記関心エリアとのうち少なくとも１つに対する上記モバイルコンピューティングデバイスのロケーションを取得することと、上記ビデオコンテンツの高精細ビデオストリームを無線ネットワークを介して上記モバイルコンピューティングデバイスに送信することと、を含み、上記ビデオコンテンツの表示は、上記カメラに近接した及び上記関心エリアに近接した定義された見学エリア内における上記モバイルコンピューティングデバイスのロケーションに基づいて、上記モバイルコンピューティングデバイスにおいてカスタマイズされる。

例７８において、例７７に記載の構成要件は、上記複数の高精細ビデオカメラのそれぞれのカメラを再位置決めすること及び制御することを、をさらに含む、ことを含むことができる。

例７９において、例７７乃至７８のうちいずれか１つに記載の構成要件は、上記ビデオコンテンツの上記高精細ビデオストリームは、複数のモバイルコンピューティングデバイスに対する高精細ビデオコンテンツのマルチキャストの一部として上記モバイルコンピューティングデバイスに送信され、上記複数のモバイルコンピューティングデバイスの各々は、上記関心エリアに対するそれぞれのモバイルコンピューティングデバイスのロケーションに基づいて上記高精細ビデオストリームの表示のカスタム視点を提供する、ことを含むことができる。

例８０において、例７７乃至７９のうちいずれか１つに記載の構成要件は、上記高精細ビデオストリームについてのビデオストリーミング使用及びビデオストリーミングサーバ動作を監視すること、をさらに含む、ことを含むことができる。

例８１は、モバイルビデオコンテンツをモバイルコンピューティングデバイスに供給する命令を含む少なくとも１つのマシン読取可能記憶媒体を含み、上記命令はマシンにより実行されると上記マシンに、例７７乃至８０のうちいずれかを実行させる。

例８２は、例７７乃至８０のうちいずれかを実行する手段を備えた装置を含む。

例８３は、構成要件（例えば、デバイス、装置、又はマシンなど）を含み、関心エリアの複数の高精細ビデオカメラから取得されるビデオコンテンツを処理する手段と、上記複数の高精細ビデオカメラと上記関心エリアとのうち少なくとも１つに対する上記モバイルコンピューティングデバイスのロケーションを取得する手段と、上記ビデオコンテンツの高精細ビデオストリームを無線ネットワークを介して上記モバイルコンピューティングデバイスに送信する手段と、を備え、上記ビデオコンテンツの表示は、上記カメラに近接した及び上記関心エリアに近接した定義された見学エリア内における上記モバイルコンピューティングデバイスのロケーションに基づいて、上記モバイルコンピューティングデバイスにおいてカスタマイズされる。

例８４において、例８３に記載の構成要件は、上記複数の高精細ビデオカメラのそれぞれのカメラを再位置決めし及び制御する手段、を含むことができる。

例８５において、例８３乃至８４のうちいずれか１つに記載の構成要件は、複数のモバイルコンピューティングデバイスに対する高精細ビデオコンテンツのマルチキャストの一部として上記モバイルコンピューティングデバイスに上記ビデオコンテンツの上記高精細ビデオストリームを送信する手段、をさらに備え、上記複数のモバイルコンピューティングデバイスの各々は、上記関心エリアに対するそれぞれのモバイルコンピューティングデバイスのロケーションに基づいて上記高精細ビデオストリームの表示のカスタム視点を提供する、ことを含むことができる。

例８６において、例８３乃至８５のうちいずれか１つに記載の構成要件は、ビデオストリーミング使用及びビデオストリーミングサーバ動作を監視する手段、をさらに備える、ことを含むことができる。

例８７は、構成要件（例えば、デバイス、装置、又はマシンなど）を含み、複数の高精細ビデオカメラと、上記複数の高精細ビデオカメラからの高精細ビデオのそれぞれのストリームを提供するビデオストリーミングサーバと、無線ネットワークのカバレッジエリアを確立し、上記無線ネットワークの上記カバレッジエリア内におけるそれぞれのモバイルデバイスのロケーションに対する上記複数の高精細ビデオカメラの上記ストリームのデータを無線送信する複数のアクセスポイントと、を備える。

例８８において、例８７に記載の構成要件は、複数のマーカ、をさらに備え、上記複数のマーカは、上記複数の高精細ビデオカメラにより捕捉された関心エリアに対する上記モバイルデバイスのロケーションを決定するために上記それぞれのモバイルデバイスにより検出可能である、ことを含むことができる。

例８９において、例８７乃至８８のうちいずれか１つに記載の構成要件は、上記複数のマーカが赤外線マーカであり、上記赤外線マーカは上記それぞれのモバイルデバイスのための標示を提供して、上記モバイルデバイスに対する上記赤外線マーカの可視性に基づいて上記複数の高精細ビデオカメラのうち特定のストリームの選択を可能にする、ことを含むことができる。

例９０において、例８７乃至８９のうちいずれか１つに記載の構成要件は、上記それぞれのモバイルデバイス、をさらに備え、上記モバイルデバイスは、上記モバイルデバイスのロケーションと上記赤外線マーカとに対する上記複数の高精細ビデオカメラのそれぞれのストリームの選択された部分を出力する、ことを含むことができる。

例９１において、例８７乃至９０のうちいずれか１つに記載の構成要件は、上記複数のアクセスポイントがＩＥＥＥ８０２．１１無線ネットワーク標準で動作する、ことを含むことができる。

例９２において、例８に記載の構成要件は、上記シーンの上記高精細ビデオの向きに対する上記モバイルデバイスの視点を決定することと、上記モバイルデバイスの表示画面のためのデジタルビデオ出力を生成することであって、上記デジタルビデオの出力は、上記モバイルデバイスの視点に似るようにズームされ及びパンされた上記シーンの上記高精細ビデオの特定の部分を含む、ことと、を含むことができる。

例９３において、例８又は９２のうちいずれか１つに記載の構成要件は、上記モバイルデバイスの第１の側面の視点から、上記モバイルデバイスの上記第１の側面に位置するカメラを用いて、デジタルイメージを捕捉することであって、上記モバイルデバイスの上記第１の側面は、上記モバイルデバイスの第２の側面の対向であり、上記表示画面は、上記モバイルデバイスの上記第２の側面に位置する、ことと、上記カメラで捕捉された上記関心エリアのイメージを処理することと、上記関心エリアの上記イメージ内のマーカを検出することと、上記関心エリア内の上記マーカを上記ビデオシーンの上記部分の向きに相関させることと、を含むことができる。

例９４において、例８又は９２乃至９３のうちいずれか１つに記載の構成要件は、上記マーカはマシン検出可能マーカであり、上記マシン検出可能マーカは赤外光又はマシン検出可能オブジェクトを含む、ことを含むことができる。

例９５において、例８又は９２乃至９４のうちいずれか１つに記載の構成要件は、無線ネットワークとの接続を確立することと、上記モバイルデバイスのロケーション情報を上記無線ネットワークとの上記接続を介してリモートビデオサーバに送信することと、上記ロケーション情報に応答して上記無線ネットワークとの上記接続を介して上記リモートビデオサーバから上記高精細ビデオストリームを受信することであって、上記高精細ビデオストリームは複数の高精細ビデオストリームから選択される、ことと、を含むことができる。

例９６において、例８又は９２乃至９５のうちいずれか１つに記載の構成要件は、上記記モバイルコンピューティングデバイスの上記ロケーション情報は無線ネットワーク情報を含み、上記無線ネットワーク情報は上記無線ネットワークのための無線アクセスポイントのＳＳＩＤを含む、ことを含むことができる。

例９７において、例８又は９２乃至９６のうちいずれか１つに記載の構成要件は、上記モバイルデバイスの上記ロケーション情報は、ＱＲコード、ＲＦＩＤタグ、又はＢｌｕｅｔｏｏｔｈ低エネルギービーコンから上記モバイルデバイスにより読み出された識別子を含む、ことを含むことができる。

例９８において、上記構成要件は、命令を含む少なくとも１つのマシン読取可能記憶媒体を含むことができ、上記命令は実行されると上記マシンに、例９２乃至９７のうちいずれかを実行させる。

例９９において、上記構成要件は、例９２乃至９７のうちいずれかを実行するぢゅさんを備えた装置、をさらに含むことができる。

上記詳細説明は添付図面に対する参照を含み、添付図面は詳細説明の一部を形成する。図面は、例示として、実践され得る具体的実施形態を示す。これら実施形態は、本明細書において「例」とも呼ばれる。こうした例は、図示され又は説明された要素に追加で、要素を含んでもよい。しかしながら、図示され又は説明された要素を含む例もまた企図される。さらに、特定の例（又は、その１つ以上の態様）に関連して、又は本明細書に図示され又は説明された他の例（又は、その１つ以上の態様）に関連して、図示され又は説明された上記要素（又は、その１つ以上の態様）の任意の組み合わせ又は入れ替えを用いた例もまた企図される。

本文献において、用語「一の（a、an）」は、特許文献において一般的であるように、「少なくとも１つ」又は「１つ以上」の任意の他のインスタンス又は使用から独立して、１つ又は１つより多くを含むように用いられる。本文献において、用語「又は（or）」は、非排他的な又は（or）を参照するように用いられ、そのため、「Ａ又はＢ」には、別段示されない限り、「ＢでなくＡ」、「ＡでなくＢ」、及び「Ａ及びＢ」が含まれる。別記の請求項において、用語「含む（including）」及び「それにおいて（in which）」は、用語「含む（comprising）」及び「それにおいて（wherein）」それぞれの、平易な英語の均等物として用いられる。さらに、下記の請求項において、用語「含む（including）」及び「含む（comprising）」は開放型であり、すなわち、請求項内で上記用語の後に列挙された要素に追加で要素を含むシステム、デバイス、製品、又は処理が、依然としてその請求項の範囲内に入るとみなされる。さらに、下記の請求項において、用語「第１の」、「第２の」、及び「第３の」等は単にラベルとして用いられ、そうしたオブジェクトのための数的順序を示唆することは意図されない。

上記説明は、制限的でなく例示的であることが意図される。例えば、上述された例（又は、その１つ以上の態様）は、他との組み合わせで用いられてもよい。上記説明を精査した当業者によってなどで、他の実施形態が用いられてもよい。要約書は、読み手が本技術開示の性質を迅速に確かめることを可能にするものであり、請求項の範囲又は意味を解釈し又は限定するのに用いられることはないという理解で提出される。また、上記詳細な説明において、様々な特徴が、本開示を能率化するように一緒にグループ化されることがある。しかしながら、請求項は、本明細書に開示されるあらゆる特徴を明記してはいないことがあり、なぜならば、実施形態は、上記特徴のサブセットを特色にすることがあるからである。さらに、実施形態は、特定の例内に開示される特徴よりもより少ない特徴を含むことがある。ゆえに、下記の請求項は詳細な説明に組み込まれ、請求項はそれ独自で別個の実施形態として自立する。本明細書に開示される実施形態の範囲は、別記の請求項を、該請求項が権利を与えられる均等物の全範囲と共に参照して、決定されるべきである。

Claims (24)

1. 仮想双眼鏡表示を提供するモバイルコンピューティングデバイスであって、
   プロセッサと、
   前記プロセッサで動作し、無線ネットワークを介してビデオストリーミングサーバからビデオデータの選択されたストリームを受信する無線ネットワーキングモジュールと、
   前記プロセッサで動作し、前記ビデオデータの前記ストリームからのビデオコンテンツを処理するビデオ処理モジュールであって、ビデオデータの前記選択されたストリームは、前記ビデオデータ内に捕捉されたシーンに近接して位置する見物エリア内の当該モバイルコンピューティングデバイスのロケーションに基づいて選択される、ビデオ処理モジュールと、
   前記プロセッサで動作し、当該モバイルコンピューティングデバイスの表示画面に前記ビデオコンテンツの選択強化された部分を出力する表示モジュールであって、前記選択強化された部分は、前記ビデオデータ内に捕捉された前記シーンに対する当該モバイルコンピューティングデバイスの向きに基づいて決定される、表示モジュールと、
   前記シーンのデジタルイメージを捕捉するカメラと、
   を備え、
   前記ビデオデータの前記ストリームからの前記ビデオコンテンツを処理することは、
   前記シーンの前記デジタルイメージ内の少なくとも１つのオブジェクトのイメージ認識を実行することと、
   前記ビデオコンテンツの前記選択強化された部分の中の前記少なくとも１つのオブジェクトのロケーションに基づいて、前記ビデオコンテンツの前記選択強化された部分を識別することと、
   を含み、
   前記プロセッサにより実施され、当該モバイルコンピューティングデバイスにより検出される少なくとも１つのモーション入力に基づいて前記表示画面上の前記ビデオコンテンツの前記選択強化された部分を変更するモーション処理モジュール
   をさらに備え、
   前記少なくとも１つのモーション入力は、前記少なくとも１つのオブジェクトに対する当該モバイルコンピューティングデバイスの動きを含む、モバイルコンピューティングデバイス。
2. 前記プロセッサにより実施され、前記表示画面への前記ビデオコンテンツの前記選択強化された部分の前記出力の制御をもたらすユーザコマンドを受信するユーザインタラクションモジュール、をさらに備え、前記ビデオコンテンツの前記選択強化された部分は、前記ビデオデータの前記ストリームから前記ビデオコンテンツのズームされ及びパンされた部分を提供する、請求項１に記載のモバイルコンピューティングデバイス。
3. 前記無線ネットワーキングモジュールは、ＩＥＥＥ８０２．１１無線ネットワークプロトコルに従う前記無線ネットワークの動作を介して前記ビデオデータの前記ストリームを受信し、前記ビデオデータの前記選択されたストリームは、前記見物エリア内に位置する前記無線ネットワークの少なくとも１つのアクセスポイントに対する当該モバイルコンピューティングデバイスのロケーションに基づいて選択され、前記無線ネットワークのアクセスポイントに対する当該モバイルコンピューティングデバイスのロケーションの識別が、前記ビデオストリーミングサーバに通信されて当該モバイルコンピューティングデバイスのロケーションを示す、請求項１に記載のモバイルコンピューティングデバイス。
4. 前記少なくとも１つのオブジェクトは少なくとも１つのインジケータを含み、前記ビデオ処理モジュールは、前記ビデオコンテンツの前記選択強化された部分の中の前記少なくとも１つのオブジェクトのロケーションに基づいて、前記シーンの前記デジタルイメージ内に検出された前記少なくとも１つのインジケータを、前記ビデオデータ内に捕捉された前記シーンに対する当該モバイルコンピューティングデバイスの向きに相関させる、請求項１に記載のモバイルコンピューティングデバイス。
5. 前記ビデオ処理モジュールは、前記少なくとも１つのインジケータを含む前記シーンの少なくとも部分の前記デジタルイメージを、前記ビデオコンテンツの前記選択強化された部分に相関させる、請求項４に記載のモバイルコンピューティングデバイス。
6. 前記ビデオ処理モジュールはさらに、前記カメラにより捕捉された前記シーンの少なくとも前記部分の前記デジタルイメージを、前記ビデオデータ内に捕捉された前記シーンのイメージと比較し、マッチさせて、前記シーンに対する当該モバイルコンピューティングデバイスの向きを決定する、請求項５に記載のモバイルコンピューティングデバイス。
7. モバイルデバイスにストリーミングビデオを表示する方法であって、当該方法は、前記モバイルデバイスにおけるハードウェアコンポーネントで実行される動作を含み、前記動作は、
   前記モバイルデバイスで、シーンのデジタルイメージを捕捉することと、
   前記シーンの前記デジタルイメージ内の少なくとも１つのオブジェクトのイメージ認識を実行することと、
   前記モバイルデバイスで、選択された高精細ビデオストリームにアクセスすることであって、前記高精細ビデオストリームは、前記モバイルデバイスから離れるビューの方向において及び前記シーンの関心エリアを向いて捕捉された前記シーンの高精細ビデオを提供する、ことと、
   前記少なくとも１つのオブジェクトに基づいて前記関心エリアに対する前記モバイルデバイスの向きを決定することと、
   前記関心エリアに対する前記モバイルデバイスの向きの決定に基づいて前記高精細ビデオの特定のズームされた部分を選択することと、
   前記モバイルデバイスに前記シーンの前記高精細ビデオの前記特定のズームされた部分を表示することと、
   前記モバイルデバイスにより検出される少なくとも１つのモーション入力に基づいて前記高精細ビデオの前記特定のズームされた部分を変更することであって、前記少なくとも１つのモーション入力は、前記少なくとも１つのオブジェクトに対する前記モバイルデバイスの動きを含む、ことと、
   を含む、方法。
8. 前記シーンの前記高精細ビデオを、前記高精細ビデオの前記特定のズームされた部分に対してパンすることであって、該パンすることは、前記関心エリアに対する前記モバイルデバイスの向きを用いて実行される、ことと、
   前記シーンの前記高精細ビデオを、前記高精細ビデオの前記特定のズームされた部分に対してズームすることであって、該ズームすることは、前記関心エリアに対する前記モバイルデバイスの向きを用いて実行される、ことと、
   をさらに含む請求項７に記載の方法。
9. 前記モバイルデバイスのロケーション情報をリモートサーバに提供することであって、前記ロケーション情報は、前記シーンに隣接した見学エリア内における前記モバイルデバイスのロケーションを示す、ことと、
   複数の高精細ビデオストリームのうち１つから前記高精細ビデオストリームを受信することであって、前記高精細ビデオストリームは、前記モバイルデバイスのロケーション情報に基づいて前記リモートサーバにより選択される、ことと、
   をさらに含む請求項７に記載の方法。
10. 前記少なくとも１つのオブジェクトはマーカであり、当該方法は、
    前記モバイルデバイスで、前記シーンの前記デジタルイメージ内の前記マーカを検出すること、をさらに含み、
    前記シーンの前記高精細ビデオ内で前記モバイルデバイスにより検出された前記マーカの位置に基づいて、前記高精細ビデオの前記特定のズームされた部分がさらに選択される、
    請求項７に記載の方法。
11. 前記モバイルデバイスの向きを前記高精細ビデオの前記特定のズームされた部分に相関させることは、前記シーンの前記デジタルイメージ内の前記マーカを前記シーンの前記高精細ビデオのイメージ内のマーカにマッチさせて、前記高精細ビデオの前記特定のズームされた部分の前記選択において前記モバイルデバイスからの前記シーンの視点をシミュレートすることを含む、請求項１０に記載の方法。
12. 前記マーカは、前記シーン内に位置決めされた少なくとも１つの赤外光により提供される、請求項１１に記載の方法。
13. 前記マーカは、前記シーン内に位置決めされたマシン読取可能オブジェクトであり、前記マシン読取可能オブジェクトは、前記シーンに対するロケーションに関連付けられた識別子を提供する、請求項１１に記載の方法。
14. 前記高精細ビデオの前記特定のズームされた部分に情報オーバーレイを表示することであって、前記情報オーバーレイは、前記高精細ビデオの前記特定のズームされた部分内に描写される少なくとも１つの実世界アイテムに関する情報を提供する、こと
    をさらに含む請求項７に記載の方法。
15. 前記モバイルデバイスでのグラフィカルユーザインターフェース出力に関連して受信される少なくとも１つのユーザ入力を処理することであって、前記少なくとも１つのユーザ入力は、
    複数の高精細ビデオストリームの中から前記高精細ビデオストリームを選択し、
    前記シーンの前記高精細ビデオの、前記シーンの別の関心エリアに対するパンニングを実行し、又は、
    前記シーンの前記関心エリアの別の部分のズームされた表示を生成するように前記シーンの前記高精細ビデオのズーミングを実行する
    ように用いられる、こと
    をさらに含む請求項７に記載の方法。
16. 前記シーンの前記高精細ビデオの向きに対する前記モバイルデバイスの視点を決定することと、
    前記モバイルデバイスの表示画面のためのデジタルビデオ出力を生成することであって、前記デジタルビデオ出力は、前記モバイルデバイスの視点にマッチするようにズームされ及びパンされた前記シーンの前記高精細ビデオの特定の部分を含む、ことと、
    をさらに含む請求項７に記載の方法。
17. 前記少なくとも１つのオブジェクトはマーカであり、当該方法は、
    カメラで捕捉された前記関心エリアの前記デジタルイメージを処理することと、
    前記関心エリアの前記デジタルイメージ内の前記マーカを検出することと、
    前記関心エリア内の前記マーカを前記シーンの前記特定の部分の向きに相関させることと、
    をさらに含む請求項１６に記載の方法。
18. 前記マーカはマシン検出可能マーカであり、前記マシン検出可能マーカは赤外光又はマシン検出可能オブジェクトを含む、請求項１７に記載の方法。
19. 無線ネットワークとの接続を確立することと、
    前記無線ネットワークとの前記接続を介して前記モバイルデバイスのロケーション情報をリモートビデオサーバに送信することと、
    前記ロケーション情報に応答して前記無線ネットワークとの前記接続を介して前記リモートビデオサーバから前記高精細ビデオストリームを受信することであって、前記高精細ビデオストリームは複数の高精細ビデオストリームから選択される、ことと、
    をさらに含む請求項１６に記載の方法。
20. 前記モバイルデバイスの前記ロケーション情報は無線ネットワーク情報を含み、前記無線ネットワーク情報は前記無線ネットワークのための無線アクセスポイントのＳＳＩＤを含む、請求項１９に記載の方法。
21. 前記モバイルデバイスの前記ロケーション情報は、ＱＲコード、ＲＦＩＤタグ、又はＢｌｕｅｔｏｏｔｈ低エネルギービーコンから前記モバイルデバイスにより読み出された識別子を含む、請求項１９に記載の方法。
22. マシンに請求項７乃至２１のうちいずれか１項に記載の方法を実行させるコンピュータプログラム。
23. 請求項７乃至２１のうちいずれか１項に記載の方法を実行する手段を備えた装置。
24. 請求項２２に記載のコンピュータプログラムを記憶したマシン読取可能記憶媒体。

Images