JP2016532386A - ビデオを表示する方法及びビデオを表示する装置 - Google Patents

Abstract

テレビジョン放送標準規格は絶え間なく改善され、新しい標準規格は、しばしば解像度の増大を伴って、導入される。多くのユーザは、改善を生かすことができない自身のテレビ受信機を持ち続ける。しかし、より高い解像度のビデオ信号が利用可能である場合に、付加的なサービスが、標準解像度のテレビ受信機のユーザに適用されることがあり得る。ビデオを表示する方法は、ユーザが第１ビュー設定を定義することを可能にするステップ（７１）と、第１ビュー設定を第１ビデオシーンの第１ビューに適用するステップ（７２）と、第１ビューに対応する第１カメラを決定するステップ（７３）と、第１ビュー設定を記憶するステップ（７４）と、新しいシーンへのシーン変更の後、新しいシーンが第１ビューに対応すると検出するステップ（７６）と、新しいシーンを表示するために第１ビュー設定を自動的に適用するステップ（７８）とを有する。

Description

本発明は、ビデオを表示する、又は表示されるビデオを変更若しくは準備する方法と、ビデオを表示する、又は表示されるビデオを変更若しくは準備する装置とに関する。

数年の規則的なインターバルで、テレビ放送標準規格は改善され、新しい標準規格は公に導入される。しばしば、新しい標準規格は、空間及び／又は時間分解能の増大をもたらす。しかし、多くのユーザは、広く使用されているテレビ放送フォーマットに適している自身のテレビ受信機を持ち続け、必要に応じて新しいセットトップボックス（ＳＴＢ）のみを購入する。よって、そのようなユーザは、自身のテレビ受信機の所与の解像度に起因して、その旧来の標準的な解像度でのみテレビを見続けることになり得る。よって、彼らは、改善された技術の如何なる特典も生かすことができない。通常、フル画像はダウンスケーリングされる。広く使用されているテレビ放送フォーマットは、家にテレビ受信機を所有している典型的な顧客／視聴者のためのものである。より高い解像度は、生成（及び送信）が、顧客の機器が示すことができるよりも多くの詳細を提供することが可能であることを意味する。例えば、現在、広く使用されているテレビ放送フォーマットはＨＤ（１９２０×１０８０ピクセル）であるが、進歩した、より高い解像度のフォーマットは４Ｋ（３８４０×２１６０ピクセル）である。従って、現在、４Ｋストリームが標準的なＨＤスクリーンで示され得るようにそれを処理する必要がある。しかし、同じ状況は、新たにフォーマットが導入されるたびに再び現れる。

本発明によって解決されるべき問題は、より高い解像度のビデオ信号が利用可能である場合に、従来の標準的な解像度を持ったテレビ受信機のユーザに付加的なサービスを提供することである。本構成は、少なくともこの問題のための解決法を提供する。更には、本発明は、個々の双方向性、特に、個人のインタラクティブなビュー選択、の結果起こり得る問題を解決することができる、カメラ又はシーンカットが起こり、放送ビューが変化するたびに、現在使用されている個別的なビューは通常維持され、従って、不適切である。

ディスプレイのためにビデオを変更する方法の第１実施形態は、請求項１において開示される。第３実施形態に従ってビデオの表示を準備又は変更する装置は、請求項１０において開示される。更なる実施形態は、従属請求項において開示される。

一態様において、本発明は、請求項１乃至９のうちいずれか一項に記載の方法をコンピュータに実行させる実行可能命令を有するコンピュータ可読媒体に関する。

第１実施形態に従って、ビデオを表示する、又は表示されるビデオを変更若しくは準備する方法は、ユーザが第１ビュー設定を定義することを可能にするステップと、前記第１ビュー設定を第１ビデオシーンの第１ビューに適用するステップと、前記第１ビューに対応する第１カメラを決定するステップと、前記第１ビュー設定を記憶するステップと、新しいシーンへのシーン変更の後、前記新しいシーンが前記第１ビューに対応するかどうかを検出するステップと、前記新しいシーンが前記第１ビューに対応すると検出すると、前記新しいシーンを表示するよう前記第１ビュー設定を適用するステップとを有する。さもなければ、前記新しいシーンが前記第１ビューに対応しない場合は、前記第１ビュー設定は、前記新しいシーンを表示するために適用されない。

第２実施形態に従って、ビデオを表示する、又は表示されるビデオを変更若しくは準備する方法は、ユーザが第１ビュー設定を定義することを可能にするステップと、前記第１ビュー設定を第１ビデオシーンの第１ビューに適用するステップと、前記第１ビューに対応する第１カメラを決定するステップと、前記第１ビュー設定を記憶するステップと、第１シーン変更を検出するステップと、前記第１シーン変更の後のシーンが前記第１ビューとは異なる第２ビューに対応すると検出するステップと、ユーザが第２ビュー設定を定義することを可能にするステップと、前記第２ビュー設定を第２ビデオシーンの前記第２ビューに適用するステップと、前記第２ビュー設定を記憶するステップと、前記第２ビューに対応する第２カメラを決定するステップとを有する。

第２実施形態に従う方法は、第２シーン変更を検出するステップと、前記第２シーン変更の後のシーンが第１ビューに対応すると検出するステップと、前記記憶された第１ビュー設定を読み出すステップと、前記第２シーン変更の後の前記シーンを表示するために前記第１ビュー設定を自動的に適用するステップとを更に有してよい。

方法及び装置は、予め生成されたメタデータによってもサポートされてよい。異なった表示デバイスタイプのための個別的ないくつかの異なった提案されているビューについてのメタデータは、ビデオデータストリームとともに、又は外部ソースから（例えば、インターネットを介して）提供されてよい。メタデータは、更には、シーン変更を示し、及び／又は異なったカメラ若しくはビューを識別してよい。メタデータの使用は、個々に依然としてビューを変更し得る視聴者にオプションとして提供されてよい。

本構成の利点は、双方向性が、特に、インタラクティブなビュー選択に関して、より容易に且つユーザにとってより簡便に作られることである。ユーザは、夫々の検出されたカメラビューについて個別的に好きなパーソナルビューを定義することができる。

本発明の有利な実施形態は、従属請求項、以下の記載、及び図において開示される。

本発明の例となる実施形態は、添付の図面を参照して記載される。
典型的なＡＶ生成及び送信システムの概要である。 ユーザにより定義されたビュー生成の原理である。 種々の可能なユーザビューを例示する。 種々の可能なユーザビューを例示する他の組である。 生成されたビデオシーケンスからの画像である。 本発明の実施形態に従うデバイスを例示する。 本発明の実施形態に従う方法のフローチャートである。

図１は、典型的なオーディオ・ビジュアル（ＡＶ）生成及び送信システムの概要を示す。生成サイト１１では、１つの標準的なプログラムビューが高解像度、例えば、４Ｋで生成され、何らかの種類の伝送ネットワーク１２を介してエンドユーザへ送信される。それらのユーザの全ては、同じ種類のセットトップボックス１３〜１５（すなわち、より一般的には、受信機）を有するがディスプレイ１６〜１８が異なり得る。ユーザＡは、適合するディスプレイ１６を有し、それにより、ユーザＡは、フル解像度（例えば、４Ｋ）において原コンテンツを見ることができる。より低い解像度のディスプレイ１７及び１８を有する他のユーザＢ及びＣについては、本発明に従って動作する各自のセットトップボックス１４及び１５（又は受信機）は、信号を変更することができる。結果として、より低い解像度のディスプレイ１７及び１８は、個々に選択されたビューに従って、しかし、各自の解像度（例えば、ＨＤ）において、コンテンツを表示する。

図２において、ユーザのセットトップボックス１４は、標準ビデオストリームを受信し、ユーザビュー生成ユニット２４は、ユーザインターフェイスを通じてユーザから受信された制御情報に従って、接続されているディスプレイ１７のためのユーザビューを生成する。このように、ユーザは、ユーザビュー生成プロセスを制御することができる。

図３は、種々の可能なユーザビューを示す。図３ａ）は、より高い解像度によるデフォルトのビューを示し、フルサイズのビデオが示されている。例えば、４Ｋの画像が４Ｋディスプレイで示されている。図３ｂ）〜ｅ）は、ユーザにより定義されたビューがより低い解像度でどのように見えうるのかを示す。

図３ｂ）におけるビデオは、単にダウンサンプリングされている。すなわち、フルビデオが、例えば、ハイディフィニション（ＨＤ）又はスタンダードディフィニション（ＳＤ）のような、より低い空間分解能で示されている。図３ｃ）におけるビデオは、“センターズーム”、すなわち、ディスプレイの中心に向かってズームされている。空間分解能は、入力されたビデオの空間分解能と同様であるか又はそれと等しいが、ビデオのエッジ（上、下、左及び右エッジ）は、切り取られて表示されない。“センターズーム”モードにおいて、画像の中心は保たれ、両側及び上下の夫々で実質的に同量のエッジが切り取られる（一定アスペクト比と仮定）。

図３ｄ）におけるビデオは、ほんの少しズームされるとともに、ビデオの当初の中心の外に中心を合わせるようパンされている。パンは、関心のあるいずれかの領域、例えば、人又は重要な対象物の上にビューを動かしてよい。パンは、両側（及び／又は上下の夫々）で異なった量のエッジが切り取られ、それにより画像の中心がシフトされることを意味する。図３ｅ）におけるビューは、空間分解能が（例えば、空間的補間によって得られるように）入力されたビデオにおけるよりも高くなり得るように、大いにズームされており、且つ、人の上（又は重要な対象物の上）にパンされている。パンは、インタラクティブに、又は予め生成された提案されているビュー設定についてのメタデータを使用することによって、行わされてよい。提案されているビュー設定は、スタジオにおいて生成され、例えば、現在使用されているフォーマットによって提供されるよりも低い特定の所与の解像度を持ったＳＤディスプレイのために、適用可能であってよい。

ユーザにより定義されたビューの他の例は、図４において示される。図４ａ）は、入力されたビデオを示し、これは、ユーザＡのための高解像度でのデフォルトのビューである。図４ｂ）〜ｄ）は、ユーザにより定義されたビューがより低い解像度でどのように見えうるのかを示す。図４ｂ）におけるビデオは、単にダウンサンプリングされており、それにより、フルビデオが見られる。図４ｃ）におけるビデオは、センターズームされている。図４ｄ）におけるビデオは、重要な対象物４１の上にビューを動かすために、ズーム及びパンされている。よって、他の対象物４２は可視領域４０の外側となり、切り取りによりもはや表示されない。ズーム及びパンされたビューは、可視領域の外側のビデオの切り取られた部分が関心のある如何なる対象物も示さない場合に、特に有用である。

図５は、生成されたビデオシーケンスからのいくつかの画像ｆ１〜ｆ６を時間順に示す。このシーケンスは、本発明に従うセットトップボックスへ入力される。シーケンスは、第１カメラＣＡＭ＃１により撮影された第１ビューｆ１及びｆ２から始まる。ある時点ｔ１で、ビューは、第１カメラＣＡＭ＃１から、別の第２カメラＣＡＭ＃２による第２ビューへ変わり、第２ビューの画像ｆ３〜ｆ５が表示される。いくらか後に、時点ｔ２で、ビューは、第１カメラＣＡＭ＃１に復帰し、第１ビューの更なるピクチャｆ６が表示される。

（手動又は自動の）シーン変更検出のプロセスにおいて、シーン変更検出処理ブロック５１は、シーン変更を検出するよう現在の画像を受ける。カメラ認識モジュール５２は、カメラを（再）識別するよう構成される。既に知られている（例えば、前に識別された）カメラは、内部のリスト５３において管理されている。

本発明の一態様に従って、ユーザは、ビューの少なくともいくつか又は夫々について異なったユーザビュー設定を定義してよい。例えば、ユーザは、例えば、３０％だけセンターズームされたビューにおいて表示されるよう、フレームｆ１及びｆ２における第１ビューを定義する。第１カメラＣＡＭ＃１に対応する第１ビューについてのユーザにより定義された設定は、例えば、検出されたカメラのリストとともに又は別個にメモリにおいて記憶される。カメラＣＡＭ＃１は、暗黙のうちに推測されてよく、あるいは、カメラの識別子が、ビデオストリームのメタデータとして送受信されてよい。画像解析に従う又はメタデータ識別子に従うカメラ認識は、カメラ認識モジュール５２において行われてよい。図５に示されているフレームは、必ずしも単一ビデオフレームを表しておらず、ショット又はシーンとして理解されてもよい点に留意されたい。

時点ｔ１で、入力されたビデオは、フレームｆ３〜ｆ５において第２ビューへ切り替わる。シーン変更は、シーン変更検出モジュール５１によって検出される。第２ビューは第２カメラＣＡＭ＃２に対応する。第２カメラＣＡＭ＃２は、暗黙的に推測されてよく、あるいは、カメラの識別子が、上述されたように、メタデータとして送受信されてよい。ユーザは、例えば、５０％だけズームされ且つ２０％だけパンされたビューにおいて表示されるよう、第２ビューを定義する。第２カメラに対応する第２ビューについてのユーザにより定義された設定も、第１ビューについてのユーザ設定と同じように、メモリにおいて記憶される。時点ｔ２で、入力されたビデオは、フレームｆ６（及び以降のフレーム（図示せず。））において第１ビューに復帰する。シーン変更は、シーン変更検出モジュール５１によって検出される。カメラ認識モジュール５２は、ビューが第１カメラＣＡＭ＃１に対応すると検出する。その検出は、例えば、フレームｆ１及びｆ２とｆ６との間で強い類似性を認識する画像解析によって、又は、メタデータとして送受信され得るカメラの識別子を用いることによって、行われてよい。例えば、輪郭、色、動き、顔（顔認識による。）、などのような様々な画像特徴が、類似性を検出するために解析されてよい。

フレームｆ６のビューが第１ビューに対応するとの検出の後、第１のビューについてのユーザにより定義された設定は、記憶部から読み出され、ディスプレイに適用される。このように、フレームｆ１及びｆ２について定義されたユーザ設定は、フレームｆ６についても自動的に使用される。ユーザは、更には、ダウンサンプリングされたフルビューを使用し、ユーザにより定義された設定をいつでも変更してよい。

一実施形態において、いずれかの特定のユーザに関するユーザにより定義された設定は、単一の現在のディスプレイにのみ有効である。入力されたビデオが同時に２つ以上のディスプレイで表示される場合に、別々のユーザにより定義された設定は、ディスプレイの夫々について適用され得る。例えば、受信されたビデオがＳＴＢからユーザの高解像度大画面ディスプレイへ、同時に、ユーザの携帯機器ディスプレイへ送信される場合に、第１の組のユーザにより定義された設定は携帯機器に適用され、別の第２の組のユーザにより定義された設定は大画面に適用される。どちらの設定も、ＳＴＢにおいて、定義、記憶、及び変更され得る。利点は、携帯機器へ送信されたストリームは、原画像の一部分のみが表示される場合に、データレートが低減され得ることである。

図６は、ビデオを表示する装置の構造を示す。装置は、ユーザが第１ビュー設定を定義することを可能にするよう構成されるユーザインターフェイスモジュール（ＵＩ）６６（例えば、キーボード、ＧＵＩ、リモートコントロール、など）と、第１ビュー設定を記憶するよう構成される第１メモリ６３と、第１ビュー設定を第１ビデオシーンの第１ビューの画像に適用するよう構成されるビデオ画像プロセッサ６５と、第１ビューに対応する第１カメラを検出するよう構成されるカメラ認識モジュール６２（例えば、カメラ認識モジュール５２、適切なソフトウェアによって適応されたプロセッサ、又はメタデータ抽出及び解釈ユニット）と、シーン変更を検出し、シーン変更の後のシーンが第１ビューに対応するかどうかを検出するよう構成されるシーン変更検出モジュール６１（例えば、シーン変更検出モジュール５１、適切なソフトウェアによって適応されたプロセッサ、又はメタデータ抽出及び解釈ユニット）と、新しいシーンが第１ビューに対応する場合に新しいシーンを表示するために、第１メモリから第１ビュー設定を読み出し、第１ビュー設定を適用するようにビデオ画像プロセッサを制御するよう構成されるコントローラ６４とを有する。

ビデオストリームＶｉｎが装置に入るとき、カメラ認識モジュール６２は、第１カメラに対応する第１ビューを決定し、（最初に）ビデオ画像プロセッサ６５は、ディスプレイ又は何らかのその後の処理（図示せず。）へＶｏｕｔでフルビュービデオを提供する。ユーザがユーザインターフェイスモジュール６６を通じて第１ビュー設定を選択するとき、コントローラ６４は第１ビュー設定を解釈し、第１ビュー設定に従うビューを生成するようビデオ画像プロセッサ６５を制御する。更に、コントローラ６４は、第１ビュー設定を、カメラ認識モジュール６２によって決定された第１ビューと関連付け、ビュー設定及び第１ビューとのその関係を第１メモリ６３において記憶する。新しいシーンが始まることをシーン変更検出モジュール６１（カメラ認識モジュール６２の一体化された部分であってもよい。）が検出するとき、カメラ認識モジュール６２は、一実施形態において、新しいシーンのビューを前のビュー（その特性パラメータは第１メモリ６３又は別のメモリ６７において記憶されていてよい。）と比較する。他の実施形態では、カメラ認識モジュール６２は、新しいシーンのビュー又はカメラを識別するメタデータを受信する。新しいシーンが、以前に定義、記憶されたビュー設定についてのビューを使用する場合は、ビュー設定はメモリ６３から読み出され、新しいシーンを然るべく処理するためにビデオ画像プロセッサ６５へ供給される。新しいシーンが、未だ定義、記憶されていないビュー設定についてのビューを使用する場合は、ユーザは、新しい設定を入力してよく、あるいは、ビデオ画像プロセッサ６５は、ビデオを処理することをスキップし、Ｖｏｕｔでフルビュービデオを出力してよい。ユーザは、ユーザインターフェイスモジュール６６を通じていつでも、少なくとも現在表示されているビューについて、ビュー設定を選択又は変更してよい。一実施形態において、ユーザは、例えば、ＧＵＩを通じて、現在表示されているビュー以外の他のビューについてのビュー設定も選択又は変更してよい。

ビューを比較及び認識するのに適した特性パラメータは、輪郭、色、動き、顔（顔認識による。）、などであってよい。輪郭についての例は、水平線、サッカー競技場の形状、例えば家などの対象物の形状、又は如何なる背景オブジェクトでもある。

ビデオを表示する装置は、第１実施形態に従う方法及び上記の他の実施形態に従う方法を実行するのに適していることが知られる。

提案されるビュー設定は、特定のディスプレイタイプのためにスタジオで予め生成されることも可能である。従って、ビュー設定は、複数の視聴者に適用されてよい。そのような提案されるビュー設定は、ビデオストリーム内の又はビデオストリームに添付されたメタデータとして分配され得る。提案されるビュー設定は、例えばインターネットのような他のチャネルを通じても分配され得る。ユーザデバイスは、自身が必要である、すなわち、そのディスプレイの機能に適合する、メタデータを抽出する。シーン変更を示すメタデータも、ビデオストリーム内の又はビデオストリームに添付されたメタデータとして分配され得る。一実施形態において、視聴者のサイトでの（例えば、ＳＴＢ内の）メタデータ抽出モジュールは、ビデオストリーム内にあるか又はビデオストリームに添付されているメタデータを抽出する。

図７ａ）は、ビデオを表示するための、又は表示されるようビデオを準備するための方法のフローチャートを示す。方法は、ユーザが第１ビュー設定を定義することを可能にするステップ７１と、第１ビュー設定を第１ビデオシーンの第１ビューに適用するステップ７２と、第１ビューに対応する第１カメラを決定するステップ７３と、第１ビュー設定を記憶するステップ７４と、新しいシーンへのシーン変更の後、新しいシーンが第１ビューに対応すると検出するステップ７６と、新しいシーンを表示するために第１ビュー設定を自動的に適用するステップ７８とを有する。更なるステップ７７は、第１ビュー設定が記憶されている記憶部において第１ビュー設定を検索し、それらを読み出すことであってよい。

一実施形態において、方法は、ビデオ内で又は別なふうに（例えば、別のチャネルを通じて）ビデオに関連付けられて受信されたメタデータを用いてシーン変更を検出するステップ７５を更に有する。方法がシーン変更を検出するステップ７５を更に有する一実施形態において、シーン変更は、画像解析を用いて検出される。

図７ｂ）は、ビデオを表示するための、又は表示されるようビデオを準備するための方法のフローチャートを示す。方法は、ユーザが第１ビュー設定を定義することを可能にするステップ７１と、第１ビュー設定を第１ビデオシーンの第１ビューに適用するステップ７２と、第１ビューに対応する第１カメラを決定するステップ７３と、第１ビュー設定を記憶するステップ７４とを有する。一実施形態において、更なるステップは、第１シーン変更を検出するステップ７５と、第１シーン変更の後のシーンが第１ビューとは異なる第２ビューに対応すると検出するステップ７８１と、ユーザが第２ビュー設定を定義することを可能にするステップ７８２と、第２ビュー設定を第２ビデオシーンの第２ビューに適用するステップ７８３と、第２ビュー設定を記憶するステップ７８４と、第２ビューに対応する第２カメラを決定するステップ７８５とである。

一実施形態において、方法は、第２シーン変更を検出するステップ７８６と、第２シーン変更の後のシーンが第１ビューに対応すると検出するステップ７６と、記憶されている第１ビュー設定を見つけて読み出すステップ７７と、第２シーン変更の後のシーンを表示するために第１ビュー設定を自動的に適用するステップ７８とを更に有する。

本発明の一特徴は、ユーザが、何らかの特定の（ユーザ自身の）表示デバイス又は複数の表示デバイスで示されるべき高度な（例えば、より高い解像度の）コンテンツの個々の部分を選択することができることである。上記におけるビュー選択は、パラメータに基づき、切り取られ且つズームされる個別的な空間部分を定義する機能としてパン、チルト及びズームを主として使用する。なお、ハイダイナミックレンジ、３Ｄ、カラーガモットのような、「より高い解像度」として原理上は見なされ得る他の特徴も、このアプローチから恩恵を受けることができ、よって、使用されてよい。例えば、ユーザは、他のカメラビューとは異なる特定のカメラビューのために３Ｄ表示パラメータを設定してよい。

上記のメタデータは、例えば、画像の未使用部分におけるビデオテキストのように、ビデオと同じストリーム内で、又は符号化されたデジタルストリームにおいて、あるいは、例えばハイブリッドアプローチ（ブロードキャスト及びＩＰのような他の伝送チャネルを介して余分のストリームとしてメタデータを販売する。）では、余分のストリームとして、あるいは、他のチャネルを通じて、受信されてよい。メタデータが符号化されたデジタルストリームにおいて受信される場合に、それは、情報を持ったフレームを識別するよう特別の検出パターンを用いて、例えば、特別のピクセルパターン（例えば、白黒のＱＲコード（登録商標））として、夫々の変更後に第１フレームの可視的なコンテンツにおいて埋め込まれてよい。少量の情報しか必要とされない。例えば、１６台のカメラについて４ビット（すなわち、４つの白黒ピクセル）があれば十分である。これは、ピクセルがほんの１／２５秒しか示さず、すなわち、如何なる画像補正によっても除去されるので、可視的でない。メタデータは、ビデオウォーターマークとして、又はオーディオビデオストリームではオーディオウォーターマークとして、埋め込まれてもよい。

上記のシーン検出は、現在のカメラの識別子を提供する送信されたメタデータを抽出することによって、行われ得る。送信されたメタデータが利用可能でない場合は、現在のカメラの識別子は、視聴者のデバイス（例えば、ＳＴＢ）において推定されるべきである。顧客デバイスは、検出されたカメラのリストを作成する。カメラリストは、保持され、例えば、チューナー、デコーダ、リモートコントロール受信機又はＥＰＧから検出されるプログラム変更の後に、リセットされる。一実施形態において、特別の“デフォルト／他”のカメラは、識別され得ない全てのビューをまとめるために使用される。シーンカット検出は、変更点を識別しようと試み、シーン解析は、複数台のカメラを区別するのに必要である。一実施形態において、シーン解析は、ビューシング角度又は他の可視情報を使用する。一実施形態において、シーン解析は、例えば、シーン変更を示すために及び／又は異なるカメラ若しくはビューを識別するために、メタデータを使用する。

上述されたように、本発明は、カメラ変更の後に新しい個別ビューとして何を使用すべきかという問題に対する解決法を提供する。一実施形態において、半自動的なビュー選択が使用される。他の実施形態では、カメラごとの個別ビューがインタラクティブに定義される。

半自動的なビュー選択アプローチでは、定義されたビュー（仮想ユーザビュー）は、夫々のシーンカットでリセットされる。ブロードキャストストリームに由来するシーン／カメラ変更の発生時に、仮想ユーザビューは、デフォルトの位置に動かされる。可能なデフォルトの位置がいくつか存在する。例えば：
全ての利用可能データを示すフルビューにリセットする、又は
境界を切り取るが、より高い可能な解像度を示しながら、デフォルトズーム１ｘで中心にリセットする、又は
例えば、何らかのプロファイルを介して、２つの異なるものの間の可変な点の選択をユーザに定義させる（ユーザにより定義された標準ズーム）。

変更を識別するために送信されるメタデータとともに、適切な開始位置に関する更に詳細な情報を提供することも可能である。従って、デフォルトのビュー記述は、メタデータとともに送信される。メタデータは、パン／チルト／ズーム又は切り取り／ズームの仮想カメラ記述、画像の重要な矩形／多角形／自由造形を記述する関心のある領域、などを記述することができる。複数の領域が可能であり、ユーザプロファイル又はメニューによって選択可能である。最終的に、これは、完全なガイド付きのビューイングリコメンデーションをもたらすことができ、デフォルトのビューが全ての画像について送信される。複数のデフォルトのビューさえ、視聴者による選択のために提供され得る。

カメラごとの個別ビューのアプローチでは、個別的なユーザビューは、カメラの識別子が利用可能である場合には、夫々のカメラについて記憶される。ユーザは、現在のカメラについてユーザ自身の個別的なビューを設定し始める。カメラが変わると、ユーザは、新しいビューを同じく個々に変更してよい。ブロードキャストストリームが以前に使用されたカメラに復帰する場合は、最後に設定されたユーザ値が使用される。複数台のカメラが設定される（が、ただ１つのみが現在のところ可視的である）場合に、ユーザは、ピクチャ・イン・ピクチャモードを用いて、他の設定されたカメラの最後の画像（及び／又はだ代表画像）を示すモードを選択することができる。そのビューにおいて、現在のところ可視的でないものでさえ全てのカメラを設定することが可能である。

一実施形態において、本発明に従う方法は、ＳＴＢではなく表示デバイス内で実行される。

本発明の原理は、例えば、いずれかの広く使用されている（標準的な）テレビ放送フォーマットから、高度なより高い解像度フォーマット（高度な時間分解能を含む。）への移行フェーズの間に、使用され得る。概して、本発明の原理は、受信されたビデオストリームのフォーマット又は解像度が、表示デバイスの機能を越えるフォーマット又は解像度情報を提供する場合に、特に有利である。なお、本発明の原理は、受信されたビデオストリームのフォーマット又は解像度が表示デバイスのフォーマット又は解像度と一致する場合にも使用され得る。この場合に、シーン変更を過ぎても作用する少なくとも個別的なビュー選択が視聴者に提供される。

本発明の基本となる新規の特徴は、その好適な実施形態に適用されるものとして図示、記載、及び指摘されてきたが、記載されている装置及び方法において、開示されている装置の形態及び詳細において並びにそれらの動作において、様々な削除及び置換及び変更が当業者によって本発明の主旨から逸脱することなしになされてよいことが理解されるであろう。本発明はビデオに関して開示されてきたが、ここで記載される方法及び装置は、如何なる静止画表示にも適用されてよいことが当業者に認識されるであろう。同じ結果を達成するよう実質的に同じようにして実質的に同じ機能を実行する要素の全ての組み合わせは、本発明の適用範囲内にあることが明示的に意図される。１つの記載されている実施形態から他への要素の置換も、十分に意図及び企図される。本発明は、単に一例として記載されており、詳細の変更は、本発明の適用範囲から逸脱することなしになされ得ることが理解されるであろう。本明細書並びに（必要に応じて）特許請求の範囲及び図面において開示されている夫々の特徴は、独立して、又は如何なる適切な組み合わせにおいても、提供されてよい。特徴は、必要に応じて、ハードウェア、ソフトウェア、又はそれらの組み合わせにおいて実施されてよい。接続は、必要に応じて、無線接続又は有線（必ずしも直接又は専用でない）接続として実施されてよい。

特許請求の範囲において現れる参照符号は、単に例示として用いてられ、特許請求の範囲の適用範囲に対して如何なる限定効果も持つべきでない。

特許請求の範囲において現れる参照符号は、単に例示として用いてられ、特許請求の範囲の適用範囲に対して如何なる限定効果も持つべきでない。
上記の実施形態に加えて、以下の付記を開示する。
（付記１）
ディスプレイのためにビデオを変更する方法であって、
ユーザが第１ビュー設定を定義することを可能にするステップと、
前記第１ビュー設定を第１ビデオシーンの第１ビューに適用するステップと、
前記第１ビューに対応する第１カメラを決定するステップと、
前記第１ビュー設定を記憶するステップと、
新しいシーンへのシーン変更の後、前記新しいシーンが前記第１ビューに対応するかどうかを検出するステップと、
前記新しいシーンが前記第１ビューに対応すると検出すると、前記新しいシーンを表示するよう前記第１ビュー設定を適用するステップと
を有する方法。
（付記２）
前記新しいシーンが前記第１ビューに対応すると検出することは、メタデータを使用し、該メタデータは、前記ビデオとともに受信されるか、又は前記ビデオに関連付けられている、
付記１に記載の方法。
（付記３）
シーン変更を検出するステップを更に有し、該シーン変更は、メタデータを使用することによって検出され、該メタデータは、シーン変更を示し、前記ビデオとともに受信されるか、又は前記ビデオに関連付けられている、
付記１又は２に記載の方法。
（付記４）
シーン変更を検出するステップを更に有し、該シーン変更は、画像解析により検出される、
付記１又は２に記載の方法。
（付記５）
前記第１ビュー設定は、ズーム、チルト及びパンのうちの少なくとも１つを有する、
付記１乃至４のうちいずれか一つに記載の方法。
（付記６）
前記第１ビュー設定は、ハイダイナミックレンジ、３Ｄ、及びカラーガモットのうちの少なくとも１つを有する、
付記１乃至５のうちいずれか一つに記載の方法。
（付記７）
前記シーン変更は、第１シーン変更であり、当該方法は、
前記新しいシーンが前記第１ビューとは異なる第２ビューに対応すると検出するステップと、
ユーザが第２ビュー設定を定義することを可能にするステップと、
前記第２ビュー設定を第２ビデオシーンの前記第２ビューに適用するステップと、
前記第２ビュー設定を記憶するステップと、
前記第２ビューに対応する第２カメラを決定するステップと
を更に有する、付記１乃至６のうちいずれか一つに記載の方法。
（付記８）
第２シーン変更を検出するステップと、
前記第２シーン変更の後のシーンが前記第１ビューに対応すると検出するステップと、
前記記憶された第１ビュー設定を読み出すステップと、
前記第２シーン変更の後の前記シーンを表示するために前記第１ビュー設定を自動的に適用するステップと
を更に有する、付記７に記載の方法。
（付記９）
前記第１シーン変更の後の前記新しいシーンが前記第１ビューとは異なる第２ビューに対応すると検出すること、及び第２シーン変更の後の前記シーンが前記第１ビューに対応すると検出することのうちの少なくとも１つは、メタデータを使用し、該メタデータは、前記ビデオとともに受信されるか、又は前記ビデオに関連付けられている、
付記７又は８に記載の方法。
（付記１０）
ビデオの表示を変更する装置であって、
ユーザが第１ビュー設定を定義することを可能にするよう構成されるユーザインターフェイスモジュールと、
前記第１ビュー設定を記憶するよう構成される第１メモリと、
前記第１ビュー設定を第１ビデオシーンの第１ビューの画像に適用するよう構成されるビデオ画像プロセッサと、
前記第１ビューに対応する第１カメラを検出するよう構成されるカメラ認識モジュールと、
シーン変更を検出するよう構成され、且つ、シーン変更の後の新しいシーンが前記第１ビューに対応するか否かを検出するよう構成され、且つ、前記シーン変更の後の前記新しいシーンが前記第１ビューに対応するか否かの前記検出された情報を提供するシーン変更検出モジュールと、
前記シーン変更検出モジュールから前記検出された情報を受け、前記新しいシーンが前記第１ビューに対応する場合に前記新しいシーンを表示するために、前記第１メモリから前記第１ビュー設定を読み出し、該第１ビュー設定を適用するように前記ビデオ画像プロセッサを制御するよう構成されるコントローラと
を有する装置。
（付記１１）
メタデータ抽出モジュールを更に有し、
前記シーン変更検出モジュールにおいて前記シーン変更を検出すること、前記新しいシーンが前記新しいビューに対応すると検出すること、及び前記新しいシーンが前記第１ビューに対応しないと該新しいシーンについて決定することのうちの少なくとも１つは、メタデータを用いることに基づく、
付記１０に記載の装置。
（付記１２）
前記メタデータは、前記ビデオとともに受信されるか、又は前記ビデオに関連付けられており、前記メタデータ抽出モジュールによって抽出される、
付記１１に記載の装置。
（付記１３）
前記メタデータは、前記ビデオとは別であるチャネルを通じて受信され、前記メタデータは、前記メタデータ抽出モジュールによって抽出される、
付記１１に記載の装置。
（付記１４）
前記メタデータは、前記ビデオのストリームとは別のストリームを通じて受信される、
付記１３に記載の装置。
（付記１５）
前記シーン変更検出モジュールは、画像解析ユニットにおける画像解析を使用する、
付記１１に記載の装置。

Claims (15)

1. ディスプレイのためにビデオを変更する方法であって、
   ユーザが第１ビュー設定を定義することを可能にするステップと、
   前記第１ビュー設定を第１ビデオシーンの第１ビューに適用するステップと、
   前記第１ビューに対応する第１カメラを決定するステップと、
   前記第１ビュー設定を記憶するステップと、
   新しいシーンへのシーン変更の後、前記新しいシーンが前記第１ビューに対応するかどうかを検出するステップと、
   前記新しいシーンが前記第１ビューに対応すると検出すると、前記新しいシーンを表示するよう前記第１ビュー設定を適用するステップと
   を有する方法。
2. 前記新しいシーンが前記第１ビューに対応すると検出することは、メタデータを使用し、該メタデータは、前記ビデオとともに受信されるか、又は前記ビデオに関連付けられている、
   請求項１に記載の方法。
3. シーン変更を検出するステップを更に有し、該シーン変更は、メタデータを使用することによって検出され、該メタデータは、シーン変更を示し、前記ビデオとともに受信されるか、又は前記ビデオに関連付けられている、
   請求項１又は２に記載の方法。
4. シーン変更を検出するステップを更に有し、該シーン変更は、画像解析により検出される、
   請求項１又は２に記載の方法。
5. 前記第１ビュー設定は、ズーム、チルト及びパンのうちの少なくとも１つを有する、
   請求項１乃至４のうちいずれか一項に記載の方法。
6. 前記第１ビュー設定は、ハイダイナミックレンジ、３Ｄ、及びカラーガモットのうちの少なくとも１つを有する、
   請求項１乃至５のうちいずれか一項に記載の方法。
7. 前記シーン変更は、第１シーン変更であり、当該方法は、
   前記新しいシーンが前記第１ビューとは異なる第２ビューに対応すると検出するステップと、
   ユーザが第２ビュー設定を定義することを可能にするステップと、
   前記第２ビュー設定を第２ビデオシーンの前記第２ビューに適用するステップと、
   前記第２ビュー設定を記憶するステップと、
   前記第２ビューに対応する第２カメラを決定するステップと
   を更に有する、請求項１乃至６のうちいずれか一項に記載の方法。
8. 第２シーン変更を検出するステップと、
   前記第２シーン変更の後のシーンが前記第１ビューに対応すると検出するステップと、
   前記記憶された第１ビュー設定を読み出すステップと、
   前記第２シーン変更の後の前記シーンを表示するために前記第１ビュー設定を自動的に適用するステップと
   を更に有する、請求項７に記載の方法。
9. 前記第１シーン変更の後の前記新しいシーンが前記第１ビューとは異なる第２ビューに対応すると検出すること、及び第２シーン変更の後の前記シーンが前記第１ビューに対応すると検出することのうちの少なくとも１つは、メタデータを使用し、該メタデータは、前記ビデオとともに受信されるか、又は前記ビデオに関連付けられている、
   請求項７又は８に記載の方法。
10. ビデオの表示を変更する装置であって、
    ユーザが第１ビュー設定を定義することを可能にするよう構成されるユーザインターフェイスモジュールと、
    前記第１ビュー設定を記憶するよう構成される第１メモリと、
    前記第１ビュー設定を第１ビデオシーンの第１ビューの画像に適用するよう構成されるビデオ画像プロセッサと、
    前記第１ビューに対応する第１カメラを検出するよう構成されるカメラ認識モジュールと、
    シーン変更を検出するよう構成され、且つ、シーン変更の後の新しいシーンが前記第１ビューに対応するか否かを検出するよう構成され、且つ、前記シーン変更の後の前記新しいシーンが前記第１ビューに対応するか否かの前記検出された情報を提供するシーン変更検出モジュールと、
    前記シーン変更検出モジュールから前記検出された情報を受け、前記新しいシーンが前記第１ビューに対応する場合に前記新しいシーンを表示するために、前記第１メモリから前記第１ビュー設定を読み出し、該第１ビュー設定を適用するように前記ビデオ画像プロセッサを制御するよう構成されるコントローラと
    を有する装置。
11. メタデータ抽出モジュールを更に有し、
    前記シーン変更検出モジュールにおいて前記シーン変更を検出すること、前記新しいシーンが前記第１ビューに対応すると検出すること、及び前記新しいシーンが前記第１ビューに対応しないと該新しいシーンについて決定することのうちの少なくとも１つは、メタデータを用いることに基づく、
    請求項１０に記載の装置。
12. 前記メタデータは、前記ビデオとともに受信されるか、又は前記ビデオに関連付けられており、前記メタデータ抽出モジュールによって抽出される、
    請求項１１に記載の装置。
13. 前記メタデータは、前記ビデオとは別であるチャネルを通じて受信され、前記メタデータは、前記メタデータ抽出モジュールによって抽出される、
    請求項１１に記載の装置。
14. 前記メタデータは、前記ビデオのストリームとは別のストリームを通じて受信される、
    請求項１３に記載の装置。
15. 前記シーン変更検出モジュールは、画像解析ユニットにおける画像解析を使用する、
    請求項１１に記載の装置。

Images