JP6159329B2 - マルチメディアコンテンツのシームレスな解像度切替のための解像度の選択 - Google Patents

Description

（発明の分野）
本発明は、マルチメディアコンテンツの配信に関し、より具体的には、種々のスケーリングされたディスプレイ解像度に最適化された複数の解像度でエンコードされたビデオコンテンツのストリーミングに関する。

（背景）
メディアのストリーミングという用語は、再生デバイス上のメディアの再生を説明するものであり、メディアは、サーバ上に記憶され、再生の間、ネットワークを経由して、再生デバイスに継続的に送信される。典型的には、メディアの次の部分の受信の前に、再生デバイスが全てのバッファされたメディアの再生を完了することによる再生の中断を防止するために、再生デバイスは、再生の間、任意の所与の時間において、十分な量のメディアをバッファ内に記憶する。適応ビットレートストリーミングまたは適応ストリーミングは、現在のストリーミング状態（例えば、ユーザのネットワーク帯域幅およびＣＰＵ容量）をリアルタイムで検出し、適宜、ストリーミングされるメディアの質を調節することを伴う。

適応ストリーミングシステムでは、ソースメディアは、典型的には、実際のビデオおよびオーディオデータを含むいくつかの代替ストリームを指し示すトップレベルインデックスファイルとして、メディアサーバ上に記憶される。各ストリームは、典型的には、１つ以上のコンテナファイル内に記憶される。異なる適応ストリーミングソリューションは、典型的には、異なるインデックスおよびメディアコンテナを利用する。Ｍａｔｒｏｓｋａコンテナは、Ｍａｔｒｏｓｋａ非営利団体（Ａｕｓｓｏｎｎｅ， Ｆｒａｎｃｅ）によって、オープンスタンダードプロジェクトとして開発されたメディアコンテナである。Ｍａｔｒｏｓｋａコンテナは、Ｅｘｔｅｎｓｉｂｌｅ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ（ＸＭＬ）のバイナリ派生物であるＥｘｔｅｎｓｉｂｌｅ Ｂｉｎａｒｙ Ｍｅｔａ Ｌａｎｇｕａｇｅ（ＥＢＭＬ）に基づく。Ｍａｔｒｏｓｋａコンテナのデコーディングは、多くの消費者電子機器（ＣＥ）デバイスによってサポートされている。ＤｉｖＸ，ＬＬＣ（ＳａｎＤｉｅｇｏ， Ｃａｌｉｆｏｒｎｉａ）によって開発されたＤｉｖＸ Ｐｌｕｓファイル形式は、Ｍａｔｒｏｓｋａコンテナ形式の拡張子を利用し、Ｍａｔｒｏｓｋａ形式内に規定されない要素を含む。

本発明の実施形態による、マルチメディアコンテンツのシームレスな解像度切替のための解像度の選択のシステムおよび方法が、開示される。本発明の一実施形態では、ソースエンコーダは、プロセッサを含み、プロセッサは、ソースエンコーダアプリケーションによって、マルチメディアコンテンツを受信することであって、マルチメディアコンテンツは、主要解像度および主要サンプルアスペクト比を有するビデオデータを備える、ことと、ビデオデータを代替ストリームの組としてエンコードすることとを行うように構成され、代替ストリームの組内の複数のストリームは、異なる最大ビットレートおよび解像度を有し、複数のストリームのそれぞれの解像度は、両方が整数の画素である幅および高さを備え、複数のストリームのそれぞれの幅および高さは両方とも、対応する主要解像度の幅および高さの常分数である。

本発明の付加的実施形態では、代替ストリームの組内の複数のストリームは、同一のアスペクト比と、異なる最大ビットレートおよび解像度とを有する。

本発明のなおも別の実施形態では、代替ストリームの組内の複数のストリームは、同一のアスペクト比と、異なる最大ビットレート、サンプルアスペクト比、および解像度とを有する。

本発明のなおも別の実施形態では、主要解像度は、１９２０×１０８０であり、主要アスペクト比は、１６：９であり、代替ストリームの組内の複数のストリームは、以下の解像度およびサンプルアスペクト比：
解像度＝１５３６×８６４；サンプルアスペクト比＝１：１
解像度＝１１５２×６４８；サンプルアスペクト比＝１：１
解像度＝９６０×５４４；サンプルアスペクト比＝１：１
解像度＝７６８×４３２；サンプルアスペクト比＝１：１
でエンコードされる。

本発明のなおも別の実施形態では、主要解像度は、１９２０×１０４０であり、主要アスペクト比は、１．８５：１であり、代替ストリームの組内の複数のストリームは、以下の解像度およびサンプルアスペクト比：
解像度＝１５３６×８３２；サンプルアスペクト比＝１：１
解像度＝１１５２×６２４；サンプルアスペクト比＝１：１
解像度＝９６０×５２０；サンプルアスペクト比＝１：１
解像度＝７６８×４１６；サンプルアスペクト比＝１：１
でエンコードされる。

本発明のさらに別の付加的実施形態では、主要解像度は、１９２０×８１６であり、主要アスペクト比は、２．３５：１であり、代替ストリームの組内の複数のストリームは、以下の解像度およびサンプルアスペクト比：
解像度＝１５３６×６５６；サンプルアスペクト比＝１：１
解像度＝１１５２×４８８；サンプルアスペクト比＝１：１
解像度＝９６０×４０８；サンプルアスペクト比＝１：１
解像度＝７６８×３２８；サンプルアスペクト比＝１：１
でエンコードされる。

本発明のなおも別の付加的実施形態では、主要解像度は、１９２０×８００であり、主要アスペクト比は、２．４０：１であり、代替ストリームの組内の複数のストリームは、以下の解像度およびサンプルアスペクト比：
解像度＝１５３６×６４０；サンプルアスペクト比＝１：１
解像度＝１１５２×４８０；サンプルアスペクト比＝１：１
解像度＝９６０×４００；サンプルアスペクト比＝１：１
解像度＝７６８×３２０；サンプルアスペクト比＝１：１
でエンコードされる。

本発明のなおも別の実施形態は、主要解像度および主要サンプルアスペクト比を有するビデオデータを備えるマルチメディアコンテンツを、複数の代替ストリームとしてエンコードすることを含み、それは、ソースエンコーダを使用して、主要解像度および主要サンプルアスペクト比を有するビデオデータを備えるマルチメディアコンテンツを受信することと、ソースエンコーダを使用して、ビデオデータを代替ストリームの組としてエンコードすることとを含み、代替ストリームの組内の複数のストリームは、異なる最大ビットレートおよび解像度を有し、複数のストリームのそれぞれの解像度は、両方が整数の画素である幅および高さを備え、複数のストリームのそれぞれの幅および高さは両方とも、対応する主要解像度の幅および高さの常分数である。

本発明のさらに別の実施形態では、分数の分子および分母はそれぞれ、１００未満である。

本発明のなおも別の実施形態は、メモリと通信するように構成されたプロセッサを含む再生デバイスを含み、メモリは、クライアントアプリケーションを含み、クライアントアプリケーションは、インデックスファイルを取得することであって、インデックスファイルは、同一のアスペクト比と、異なるビットレート、解像度とを有する複数の代替ビデオストリームを記述し、複数の代替ビデオストリームのうちの少なくとも２つは、異なるサンプルアスペクト比を有する、ことと、複数の代替ビデオストリームのうちの第１のストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように、ビデオデコーダを構成することであって、ビデオをデコードすることは、デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを含む、ことと、第１のストリームの一部を要求することとを行うようにプロセッサを構成する。

本発明のなおも別の実施形態は、コンテンツを再生することを含み、それは、再生デバイスを使用して、インデックスファイルを取得することであって、インデックスファイルは、同一のアスペクト比と、異なるビットレート、解像度とを有する複数の代替ビデオストリームを記述し、複数の代替ビデオストリームのうちの少なくとも２つは、異なるサンプルアスペクト比を有する、ことと、複数の代替ビデオストリームのうちの第１のストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように、再生デバイス上のビデオデコーダを構成することであって、ビデオをデコードすることは、デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを含む、ことと、再生デバイスを使用して、第１のストリームの一部を要求することとを含む。

本発明のなおも別の実施形態は、主要解像度および主要アスペクト比を有する主要ビデオストリームをより低い解像度のストリームの組としてエンコードするために、副解像度の組を決定すること含み、それは、副解像度の組を選択することであって、副解像度の組の各副解像度の高さおよび幅は、整数の画素であり、主要解像度の対応する幅および高さ未満である、ことと、副解像度の組から副解像度を選択することであって、選択された副解像度の幅および高さは、主要アスペクト比と同一のアスペクト比を有する、こととを含む。

本発明のさらに別の付加的実施形態では、副解像度の組内の各副解像度に対する幅および高さは、８の倍数である。

本発明のなおも別の付加的実施形態では、副解像度の組は、正方形のサンプルアスペクト比を有する副解像度を備える。

本発明のさらになおも別の付加的実施形態では、副解像度の組は、主要解像度の幅から列幅を反復的に減算し、結果として生じる幅に主要アスペクト比を乗算することにより、対応する高さを決定し、幅および対応する高さが整数の画素である副解像度を選択することによって選択される。

本発明のさらに別の実施形態では、副解像度の組を選択することは、主要解像度の高さから行高さを反復的に減算し、結果として生じる高さに主要アスペクト比を乗算することにより、対応する幅を決定することと、高さおよび対応する幅が整数の画素である副解像度を選択することとをさらに含む。

本発明のなおも別の実施形態では、副解像度の組内の各副解像度に対する幅および高さは、８の倍数である。

本発明のさらになおも別の実施形態では、副解像度の組は、正方形のサンプルアスペクト比を有する副解像度を備える。

本発明のさらに別の付加的実施形態では、副解像度の組は、正方形のサンプルアスペクト比を有する副解像度を備え、各副解像度に対する幅および高さは、８の倍数である。

本発明のなおも別の付加的実施形態では、１９２０×１０８０、１９２０×１０４０、１９２０×８１６、および１９２０×８００の主要解像度に対する副解像度が、計算される。

本発明のさらになおも別の付加的実施形態では、副解像度の組は、主要解像度の大部分に対して繰り返される共通幅を有する副解像度を備え、副解像度は、共通幅値を共有しない任意の主要解像度に対して選択される。

本発明のさらに別の実施形態では、共通幅値を有していない主要解像度に対して選択される副解像度は、幅値を使用して、主要解像度のアスペクト比と同じアスペクト比を有する高さ値を選択することによって生成される。

本発明のなおも別の実施形態では、選択された高さ値は、直近の８画素の倍数に丸められる。

本発明のさらになおも別の実施形態では、選択された高さ値は、直近の８の倍数に切り下げられる。

本発明のさらに別の付加的実施形態では、副解像度の組は、主要解像度の高さから行高さを反復的に減算し、結果として生じる高さに主要アスペクト比を乗算することにより、対応する幅を決定し、高さおよび対応する幅が整数の画素である副解像度を選択することによって選択される。

本発明のなおも別の実施形態は、プロセッサ命令を含む機械読み取り可能なメディアを含み、プロセッサによる命令の実行は、プロセッサに、主要解像度および主要サンプルアスペクト比を有するビデオデータを備えるマルチメディアコンテンツを受信することと、ビデオデータを代替ストリームの組としてエンコードすることであって、代替ストリームの組内の複数のストリームは、異なる最大ビットレートおよび解像度を有する、こととを含む工程を行なわせ、複数のストリームのそれぞれの解像度は、両方が整数の画素である幅および高さを備え、複数のストリームのそれぞれの幅および高さは両方とも、対応する主要解像度の幅および高さの常分数である。

本発明のさらに別の付加的実施形態では、分数の分子および分母はそれぞれ、１００未満である。

本発明のなおも別の実施形態は、プロセッサ命令を含む機械読み取り可能なメディアを含み、プロセッサによる命令の実行は、プロセッサに、インデックスファイルを取得することであって、インデックスファイルは、同一のアスペクト比と、異なるビットレート、解像度とを有する複数の代替ビデオストリームを記述し、複数の代替ビデオストリームのうちの少なくとも２つは、異なるサンプルアスペクト比を有する、ことと、複数の代替ビデオストリームのうちの第１のストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように、ビデオデコーダを構成することであって、ビデオをデコードすることは、デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを含む、ことと、第１のストリームの一部を要求することとを含む工程を行なわせる。
本願明細書は、例えば、以下の項目も提供する。
（項目１）
プロセッサを備えるソースエンコーダであって、
前記プロセッサは、ソースエンコーダアプリケーションによって、
マルチメディアコンテンツを受信することであって、前記マルチメディアコンテンツは、主要解像度および主要サンプルアスペクト比を有するビデオデータを備える、ことと、
前記ビデオデータを代替ストリームの組としてエンコードすることと
を行うように構成され、
前記代替ストリームの組内の複数のストリームは、異なる最大ビットレートおよび解像度を有し、
前記複数のストリームのそれぞれの解像度は、幅および高さを備え、前記幅および高さは両方とも、整数の画素であり、
前記複数のストリームのそれぞれの前記幅および高さは両方とも、対応する前記主要解像度の幅および高さの常分数である、
ソースエンコーダ。
（項目２）
前記代替ストリームの組内の複数のストリームは、同一のアスペクト比と、異なる最大ビットレートおよび解像度とを有する、項目１に記載のソースエンコーダ。
（項目３）
前記代替ストリームの組内の複数のストリームは、同一のアスペクト比と、異なる最大ビットレート、サンプルアスペクト比、および解像度とを有する、項目１に記載のソースエンコーダ。
（項目４）
前記主要解像度は、１９２０×１０８０であり、前記主要アスペクト比は、１６：９であり、前記代替ストリームの組内の複数のストリームは、以下の解像度およびサンプルアスペクト比：
解像度＝１５３６×８６４；サンプルアスペクト比＝１：１
解像度＝１１５２×６４８；サンプルアスペクト比＝１：１
解像度＝９６０×５４４；サンプルアスペクト比＝１：１
解像度＝７６８×４３２；サンプルアスペクト比＝１：１
でエンコードされる、項目３に記載のソースエンコーダ。
（項目５）
前記主要解像度は、１９２０×１０４０であり、前記主要アスペクト比は、１．８５：１であり、前記代替ストリームの組内の複数のストリームは、以下の解像度およびサンプルアスペクト比：
解像度＝１５３６×８３２；サンプルアスペクト比＝１：１
解像度＝１１５２×６２４；サンプルアスペクト比＝１：１
解像度＝９６０×５２０；サンプルアスペクト比＝１：１
解像度＝７６８×４１６；サンプルアスペクト比＝１：１
でエンコードされる、項目３に記載のソースエンコーダ。
（項目６）
前記主要解像度は、１９２０×８１６であり、前記主要アスペクト比は、２．３５：１であり、前記代替ストリームの組内の複数のストリームは、以下の解像度およびサンプルアスペクト比：
解像度＝１５３６×６５６；サンプルアスペクト比＝１：１
解像度＝１１５２×４８８；サンプルアスペクト比＝１：１
解像度＝９６０×４０８；サンプルアスペクト比＝１：１
解像度＝７６８×３２８；サンプルアスペクト比＝１：１
でエンコードされる、項目３に記載のソースエンコーダ。
（項目７）
前記主要解像度は、１９２０×８００であり、前記主要アスペクト比は、２．４０：１であり、前記代替ストリームの組内の複数のストリームは、以下の解像度およびサンプルアスペクト比：
解像度＝１５３６×６４０；サンプルアスペクト比＝１：１
解像度＝１１５２×４８０；サンプルアスペクト比＝１：１
解像度＝９６０×４００；サンプルアスペクト比＝１：１
解像度＝７６８×３２０；サンプルアスペクト比＝１：１
でエンコードされる、項目３に記載のソースエンコーダ。
（項目８）
主要解像度および主要サンプルアスペクト比を有するビデオデータを備えるマルチメディアコンテンツを、複数の代替ストリームとしてエンコードする方法であって、前記方法は、
ソースエンコーダを使用して、主要解像度および主要サンプルアスペクト比を有するビデオデータを備えるマルチメディアコンテンツを受信することと、
ソースエンコーダを使用して、前記ビデオデータを代替ストリームの組としてエンコードすることであって、前記代替ストリームの組内の複数のストリームは、異なる最大ビットレートおよび解像度を有する、ことと
を含み、
前記複数のストリームのそれぞれの解像度は、幅および高さを備え、前記幅および高さは両方とも、整数の画素であり、前記複数のストリームのそれぞれの前記幅および高さは両方とも、対応する前記主要解像度の幅および高さの常分数である、方法。
（項目９）
前記分数の分子および分母はそれぞれ、１００未満である、項目８に記載の方法。
（項目１０）
メモリと通信するように構成されたプロセッサを備える再生デバイスであって、
前記メモリは、クライアントアプリケーションを含み、
前記クライアントアプリケーションは、
インデックスファイルを取得することであって、前記インデックスファイルは、同一のアスペクト比と、異なるビットレート、解像度とを有する複数の代替ビデオストリームを記述し、前記複数の代替ビデオストリームのうちの少なくとも２つは、異なるサンプルアスペクト比を有する、ことと、
前記複数の代替ビデオストリームのうちの第１のストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように、ビデオデコーダを構成することであって、前記ビデオをデコードすることは、前記デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを含む、ことと、
前記第１のストリームの一部を要求することと
を行うように前記プロセッサを構成する、再生デバイス。
（項目１１）
コンテンツを再生する方法であって、前記方法は、
再生デバイスを使用して、インデックスファイルを取得することであって、前記インデックスファイルは、同一のアスペクト比と、異なるビットレート、解像度とを有する複数の代替ビデオストリームを記述し、前記複数の代替ビデオストリームのうちの少なくとも２つは、異なるサンプルアスペクト比を有する、ことと、
前記複数の代替ビデオストリームのうちの第１のストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように、前記再生デバイス上のビデオデコーダを構成することであって、前記ビデオをデコードすることは、前記デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを含む、ことと、
前記再生デバイスを使用して、前記第１のストリームの一部を要求することと
を含む、方法。
（項目１２）
主要解像度および主要アスペクト比を有する主要ビデオストリームをより低い解像度のストリームの組としてエンコードするために、副解像度の組を決定する方法であって、前記方法は、
副解像度の組を選択することであって、前記副解像度の組内の各副解像度の高さおよび幅は、整数の画素であり、前記主要解像度の対応する幅および高さ未満である、ことと、
前記副解像度の組から副解像度を選択することであって、前記選択された副解像度の幅および高さは、前記主要アスペクト比と同一のアスペクト比を有する、ことと
を含む、方法。
（項目１３）
前記副解像度の組内の各副解像度に対する幅および高さは、８の倍数である、項目１２に記載の方法。
（項目１４）
前記副解像度の組は、正方形のサンプルアスペクト比を有する副解像度を備える、項目１２に記載の方法。
（項目１５）
前記副解像度の組は、
前記主要解像度の幅から列幅を反復的に減算し、結果として生じる幅に前記主要アスペクト比を乗算することにより、対応する高さを決定することと、
前記幅および対応する高さが整数の画素である副解像度を選択することと
によって選択される、項目１２に記載の方法。
（項目１６）
前記副解像度の組を選択することは、
前記主要解像度の高さから行高さを反復的に減算し、結果として生じる高さに前記主要アスペクト比を乗算することにより、対応する幅を決定することと、
前記高さおよび対応する幅が整数の画素である副解像度を選択することと
をさらに含む、項目１５に記載の方法。
（項目１７）
前記副解像度の組内の各副解像度に対する幅および高さは、８の倍数である、項目１６に記載の方法。
（項目１８）
前記副解像度の組は、正方形のサンプルアスペクト比を有する副解像度を備える、項目１６に記載の方法。
（項目１９）
前記副解像度の組は、正方形のサンプルアスペクト比を有する副解像度を備え、各副解像度に対する幅および高さは、８の倍数である、項目１６に記載の方法。
（項目２０）
１９２０×１０８０、１９２０×１０４０、１９２０×８１６、および１９２０×８００の前記主要解像度に対する副解像度が、計算される、項目１６に記載の方法。
（項目２１）
前記副解像度の組は、前記主要解像度の大部分に対して繰り返される共通幅を有する副解像度を備え、副解像度は、前記共通幅値を共有しない任意の主要解像度に対して選択される、項目２０に記載の方法。
（項目２２）
前記共通幅値を有していない前記主要解像度に対して選択される副解像度は、前記幅値を使用して、前記主要解像度のアスペクト比と同じアスペクト比を有する高さ値を選択することによって生成される、項目２１に記載の方法。
（項目２３）
前記選択された高さ値は、直近の８画素の倍数に丸められる、項目２２に記載の方法。
（項目２４）
前記選択された高さ値は、直近の８の倍数に切り下げられる、項目２２に記載の方法。
（項目２５）
前記副解像度の組は、
前記主要解像度の高さから行高さを反復的に減算し、結果として生じる高さに前記主要アスペクト比を乗算することにより、対応する幅を決定することと、
前記高さおよび対応する幅が整数の画素である副解像度を選択することと
によって選択される、項目１２に記載の方法。
（項目２６）
プロセッサ命令を含む機械読み取り可能なメディアであって、
プロセッサによる前記命令の実行は、前記プロセッサに、
主要解像度および主要サンプルアスペクト比を有するビデオデータを備えるマルチメディアコンテンツを受信することと、
前記ビデオデータを代替ストリームの組としてエンコードすることであって、前記代替ストリームの組内の複数のストリームは、異なる最大ビットレートおよび解像度を有する、ことと
を含む工程を行なわせ、前記複数のストリームのそれぞれの解像度は、幅および高さを備え、前記幅および高さは両方とも、整数の画素であり、前記複数のストリームのそれぞれの前記幅および高さは両方とも、対応する前記主要解像度の幅および高さの常分数である、プロセッサ命令を含む機械読み取り可能なメディア。
（項目２７）
前記分数の分子および分母はそれぞれ、１００未満である、項目２６に記載のプロセッサ命令を含む機械読み取り可能なメディア。
（項目２８）
プロセッサ命令を含む機械読み取り可能なメディアであって、
プロセッサによる前記命令の実行は、前記プロセッサに、
インデックスファイルを取得することであって、前記インデックスファイルは、同一のアスペクト比と、異なるビットレート、解像度とを有する複数の代替ビデオストリームを記述し、前記複数の代替ビデオストリームのうちの少なくとも２つは、異なるサンプルアスペクト比を有する、ことと、
前記複数の代替ビデオストリームのうちの第１のストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように、ビデオデコーダを構成することであって、前記ビデオをデコードすることは、前記デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを含む、ことと、
前記第１のストリームの一部を要求することと
を含む工程を行なわせる、プロセッサ命令を含む機械読み取り可能なメディア。

図１は、本発明のある実施形態による、適応ビットレートストリーミングシステムのネットワーク略図である。 図２は、本発明のある実施形態による、主要解像度を前提として解像度を選択するための工程を例証するフローチャートである。 図３は、本発明のある実施形態による、主要解像度の組み合わせを前提として解像度を選択するための工程を例証するフローチャートである。 図４は、本発明のある実施形態による、異なるビデオ解像度を利用してエンコードされたビデオデータを配信するように構成された再生デバイスを概念的に図示する。 図５は、本発明のある実施形態による工程を利用して計算された主要解像度の常分数である解像度の組を例証する表である。 図６は、本発明のある実施形態による工程を利用して、主要解像度の組み合わせに対して計算された解像度の組を例証する、表である。 図７は、本発明のある実施形態による工程を利用して、主要解像度の組み合わせに対して決定された解像度の最終の組を例証する表である。

次に、図面を参照すると、本発明の実施形態による、異なる解像度でエンコードされたストリームの適応ビットレートストリーミングのためのシステムおよび方法が、図示される。本発明の実施形態による適応ビットレートストリーミングシステムは、インターネット等のネットワークを経由して、異なる最大ビットレートおよび解像度でエンコードされたマルチメディアコンテンツをストリーミングするように構成される。マルチメディアコンテンツは、典型的には、ビデオおよびオーディオデータ、字幕、および他の関連メタデータを含む。ビデオデータは、特定の解像度で作成されて、標的最大ビットレートを達成するようにエンコードされる。特定の解像度におけるビデオデータは、複数のビットレートでエンコードされることができる。しかしながら、特定のビットレートにおけるビデオデータの主観的品質は、ビデオデータの解像度に部分的に依存する。例えば、高解像度ビデオ内に記憶された情報がエンコーディングの際に喪失されるため、高解像度におけるビデオデータは、低ビットレートでエンコードされるとき、主観的に不十分な品質を有し得る。同様に、より低い解像度におけるビデオデータは、徐々により高いビットレートでエンコードされるとき、いかなる改良された主観的品質も示さないこともある。しかしながら、より低い解像度ビデオの主観的品質は、より高い解像度のエンコーディングと比較して、より低いビットレートにおいて容認可能であり得る。本発明の実施形態による適応ビットレートストリーミングシステムは、変動するビデオ解像度および最大ビットレートのビデオデータを含むマルチメディアソースを含む。ネットワークデータレートから独立して、最高品質のビデオ経験を提供するために、適応ビットレートストリーミングシステムは、種々の要因（例えば、利用可能なネットワークデータレート、およびビデオデコーダ性能を含むが、これらに限定されない）に従って、ビデオデータの配信全体を通して利用可能なビデオデータのソース間を切り替えるように構成される。再生の間にビデオストリーム間を切り替えるためのシステムおよび方法は、２０１１年８月３０日出願のＢｒａｎｅｓｓらの米国特許出願第１３／２２１，６８２号「Ｓｙｓｔｅｍｓ ａｎｄ Ｍｅｔｈｏｄｓ ｆｏｒ Ａｄａｐｔｉｖｅ Ｂｉｔｒａｔｅ Ｓｔｒｅａｍｉｎｇ ｏｆ Ｍｅｄｉａ Ｓｔｏｒｅｄ ｉｎ Ｍａｔｒｏｓｋａ Ｃｏｎｔａｉｎｅｒ Ｆｉｌｅｓ Ｕｓｉｎｇ Ｈｙｐｅｒｔｅｘｔ Ｔｒａｎｓｆｅｒ Ｐｒｏｔｏｃｏｌ」に開示されており、その開示は、参照することによって、全体として本明細書に組み込まれる。

ストリーミングされるマルチメディアコンテンツは、いくつかの異なる解像度のいずれかでエンコードされ得るが、ディスプレイ用のビデオをデコードする工程は、典型的には、デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを伴う。解像度がディスプレイデバイスのものと異なる場合、デコードされたビデオの各画素は、ディスプレイの１つ以上の画素に対応するようにスケーリングされる。ある場合には、ストリーミングされるマルチメディアコンテンツとディスプレイ解像度との間のスケーリング比が、１：２、２：３、３：４、７：８等の整数の比であることが好ましくあり得る。適応ビットレートストリーミングシステムは、ストリーミング状態の変化に応答して、ストリーム間を遷移するように設計される。ディスプレイのための異なる比によってスケーリングされる解像度でエンコードされたストリーム間の遷移は、多くの場合、視覚的に分裂的である。いくつかの実施形態では、適応ビットレートストリーミングシステムは、ビデオの各ストリームがソースビデオのアスペクト比と同一である同じアスペクト比でエンコードされるような方法において、コンテンツがエンコードされるように構成される。このように、エンコードされたビデオの各画素は、デコードされて、ビデオを受信するディスプレイデバイス上に表示されるとき、一定の方式でスケーリングされる。本発明の実施形態に従って、ソースビデオと同一のアスペクト比を有する複数の解像度でエンコードされたビデオをストリーミングするように構成された適応ビットレートストリーミングシステムが、以下にさらに論じられる。

システム概要
本発明のある実施形態による適応ビットレートストリーミングシステムが、図１に図示される。適応ビットレートストリーミングシステム１００は、ソースエンコーダ１０６を含み、ソースエンコーダ１０６は、それぞれが同一のアスペクト比を有するいくつかの代替ストリームとして、ソースメディアをエンコードするように構成される。図示される実施形態では、ソースエンコーダは、サーバである。他の実施形態では、ソースエンコーダは、プロセッサと、ソースメディア（ビデオ、オーディオ、および／または字幕を含むが、それらに限定されない）のトランスコーディングを行なうための十分なリソースとを含む任意の処理デバイスであることができる。ソースエンコーディングサーバ１０６は、典型的には、ストリームを含む複数のコンテナファイルに対するトップレベルインデックスを生成し、少なくとも、そのうちの複数のものが、代替ストリームである。代替ストリームは、同一のメディアコンテンツを異なる方法でエンコードするストリームである。多くの事例では、代替ストリームは、メディアコンテンツ（限定されないが、ビデオ等）を異なる最大ビットレートでエンコードする。いくつかの実施形態では、代替ストリームは、異なる解像度および／または異なるフレームレートでエンコードされる。しかしながら、代替ビデオストリームは、ソースビデオのアスペクト比に対応する同一のアスペクト比でエンコードされる。トップレベルインデックスファイルおよびコンテナファイルは、ＨＴＴＰサーバ１０４にアップロードされる。ソースエンコーディングサーバ１０６が、トップレベルインデックスファイルを生成するように前述されるが、多くの実施形態では、トップレベルインデックスファイルは、再生デバイスによる特定のコンテンツに対する要求に応答して、動的に生成される。

図示される実施形態では、再生デバイスは、パーソナルコンピュータ１１０、ＣＥプレーヤ１０８、および携帯電話１１２を含む。他の実施形態では、再生デバイスは、ＤＶＤプレーヤ、Ｂｌｕ−ｒａｙ（登録商標）プレーヤ、テレビ、セットトップボックス、ビデオゲームコンソール、タブレット、およびＨＴＴＰを介してサーバに接続し、エンコードされたメディアを再生することが可能な他のデバイス等の消費者電子機器デバイスを含むことができる。図示される実施形態では、種々の再生デバイスは、ＨＴＴＰまたは別の適切なステートレスプロトコルを使用して、インターネット等のネットワーク１０２を介して、トップレベルインデックスファイルおよびコンテナファイルの一部を要求する。再生デバイスが、コンテナファイル内に含まれた代替ストリームからのメディアの一部を使用して、適応ビットレートストリーミングを行なう前に、帯域幅探査が、再生デバイスによって行なわれ、利用可能な帯域幅を決定することができる。帯域幅探査が完了すると、再生デバイスは、利用可能なストリームのそれぞれの最大ビットレートを含む（限定されないが）トップレベルインデックス内のデータを利用して、適応ストリーミング工程の一部として、エンコードされたメディアの一部を要求することを開始すべき初期ストリームを決定することができる。

ストリームの初期組からのコンテンツの再生が開始すると、再生デバイスは、ストリーミング状態の変化に応答して、コンテンツの適応ビットレートストリーミングを行なうために、トップレベルインデックスを利用する。異なる解像度でエンコードされたストリームを利用する適応ビットレートストリーミングシステムでは、再生デバイスは、一連の動作段階を通して進行し得、一連の動作段階において、再生デバイスは、各段階において、ストリーミング状態の変化に対して異なるように応答する。いくつかの実施形態では、ストリーミング状態の安定またはストリーミング状態の改善は、再生デバイスが安定動作状態をとり、より多くのコンテンツをバッファし、ストリーミング状態における変動にあまり応答しない、段階への遷移をもたらすことができる。多くの実施形態では、ストリーミング状態の悪化は、より低い解像度におけるストリームの組へのストリーム切替をもたらし、そのストリームの組は、より小さな帯域幅を利用し、再生デバイスが不安定動作状態をとり、より少ないコンテンツをバッファし、ストリーミング状態の変動に迅速に応答する、段階への再生デバイスの遷移をもたらす。

図示される実施形態では、適応ビットレートストリーミングシステムは、種々のビデオ解像度を利用して、可変データレートでマルチメディアコンテンツを配信することが可能なコンピュータシステムを含む。多くの実施形態では、適応ビットレートストリーミングシステムは、マルチメディアのエンコードされたストリームを配信することが可能な任意のデバイスを使用して実装されることができ、ストリームは、異なる最大ビットレートおよび解像度でエンコードされる。本発明のある実施形態による適応ストリーミングシステムソースエンコーダの基本アーキテクチャが、図４に図示される。適応ビットレートストリーミングシステム４００は、不揮発性メモリ４３０および揮発性メモリ４２０と通信しているプロセッサ４１０を含む。図示される実施形態では、揮発性メモリは、ソースエンコーダ４２２と、異なる解像度でエンコードされているビデオデータ４２４の代替ストリームとを含む。特定のアーキテクチャが、図４に図示されるが、アプリケーションがディスクまたはいくつかの他の記憶形態上に位置し、ランタイム時に揮発性メモリ内にロードされるアーキテクチャを含む種々のアーキテクチャのうちのいずれかが、本発明の実施形態による、異なるビデオ解像度を利用して可変データレートでマルチメディア配信アプリケーションを可能にする適応ビットレートストリーミングシステムを実装するために利用され得る。さらに、図１に図示されたシステムアーキテクチャを含む（限定されないが）種々のシステムアーキテクチャのうちのいずれかが、本発明の実施形態に従って、ビデオ配信を行なうために利用され得る。本発明の実施形態による、異なる解像度でビデオデータのストリームをエンコードし、適応ストリーミングを利用して、エンコードされたビデオデータを配信するためのシステムおよび方法が、以下にさらに論じられる。

主要解像度のための解像度の選択
前述のように、適応ビットレートストリーミングシステムは、ストリーミング状態に応じて、異なるビットレートでエンコードされた異なるビデオストリーム間の切替を伴う。異なる解像度でエンコードされた代替ビデオストリームを利用する適応ストリーミングシステムでは、各ストリームの解像度は、所与のビットレートでエンコードされたビデオの再生品質に基づいて、選択されることができる。本発明の実施形態による、ビデオストリームのための解像度を選択するための一般化された工程が、図２に図示される。工程２００は、所与のアスペクト比に基づいて、主要解像度を選択する（２１０）ことによって開始する。例えば、１６：９のアスペクト比に対して、本発明の多くの実施形態では、主要解像度は、１９２０×１０８０画素である。全ての高さおよび幅の組み合わせを幅によって決定する２１２ために、主要解像度の幅が１度に１列ずつ、減少され、対応する高さが、アスペクト比を新しい幅に適用することによって計算され得る。いくつかの実施形態では、画像の幅は、８画素の倍数でなければならない。いくつかの実施形態では、計算された高さは、直近の整数値に丸められてもよい。多くの実施形態では、高さおよび幅の組み合わせの決定（２１２）は、幅が、の所定の最小幅（例えば、３２０画素）に到達するまで繰り返される。主要解像度の幅および高さの組み合わせを決定する（２１４）ために、同じ工程が、高さに関して前述のように利用され得る。前述のように、いくつかの実施形態では、高さは、８画素の高さの倍数である。但し、他の実施形態では、最終画像幅および高さは、ある数の画素の任意の倍数（例えば、２または４画素の倍数）として定義され得る。

解像度の組が、幅および高さの両方を使用して決定されると、リストが、組み合わせられ（２１６）、いかなる重複した幅および高さも、除去される。重複した解像度が除去されると、計算された幅および高さは、主要幅および高さと比較され、どの解像度が選択されるかを決定する（２１８）。本発明の多くの実施形態では、それらの計算された解像度（高さおよび幅の両方が主要解像度の高さおよび幅の整数の分数として表され得る）が、選択され（２１８）、分子または分母は、１００等の所定の数未満である。前述の工程を利用して、本発明の実施形態に従って、計算された解像度および比の組５００の一実施例が、図５に示される。例えば、１つの幅および高さの組み合わせは、１２８０×７２０であり、主要解像度１９２０×１０８０に対して、幅比２／３および高さ比２／３を有する。多くの実施形態では、１２８０×７２０が、主要解像度１９２０×１０８０に対する副解像度として選択される（２１８）。しかしながら、１８８８×１０６２等の解像度は、１９２０で除算された１８８８も、１０８０で除算された１０６２も、分子および分母の両方がそれぞれ１００未満である整数の分数を使用して表すことができないので、選択されない。他の実施形態では、整数の分数は両方とも、１０または１０００未満であり得るか、または、分子が１０未満であり、分母が１０００未満であり得、その逆でもあり得る。

複数の解像度適応ストリーミングシステムにおいて使用するための解像度を選択するための特定の工程が、前述されているが、主要解像度に基づいて解像度を計算することを伴う種々の工程（主要解像度より高い解像度が計算されるものを含む）のうちのいずれかが、本発明の実施形態に従って利用され得る。主要解像度の組み合わせを前提として、解像度を選択するためのシステムおよび方法が、以下にさらに論じられる。

主要解像度の組み合わせのための解像度の選択
マルチメディアコンテンツ内に含まれるビデオデータは、多くの場合、特定の解像度およびアスペクト比で作成される。しかしながら、マルチメディアコンテンツを種々のディスプレイデバイス上で表示することが望ましいが、これらのディスプレイデバイスは、ビデオデータと同一の解像度でもアスペクト比でもない場合がある。適応ストリーミングシステムでは、ビデオデータは、ソースマルチメディアコンテンツの表示において、一貫性レベルを維持するために、異なるアスペクト比を有する種々の主要解像度でエンコードされ得る。本発明の実施形態による、複数のアスペクト比を有するビデオストリームのための解像度を選択するための一般化された工程が、図３に図示される。工程３００は、種々のアスペクト比に対する主要解像度の組を決定する（３１０）ことによって開始する。例えば、多くの実施形態では、主要解像度（付随のアスペクト比を有する）は、１９２０×１０８０（１６：９）、１９２０×１０４０（１．８５：１）、１９２０×８１６（２．３５：１）、および１９２０×８００（２．４：１）であり得る。各主要解像度に対して、解像度が、計算され（３１２）、主要解像度に対する計算された解像度の比が、決定される（３１４）。本発明の多くの実施形態では、前述の工程は、各主要解像度に対して計算された解像度および比を決定するために利用されてもよい。いくつかの実施形態では、比の決定（３１４）は、主要解像度と比較して、計算された解像度が含む割合面積を表す割合に、比を変換することを伴い、割合面積は、所定の数の有効桁（例えば、１有効桁）に丸められる。主要解像度の計算された解像度間の共通の比が、次いで、選択される（３１６）。多くの実施形態では、選択された共通の比（３１６）は、全主要解像度に共通である。いくつかの実施形態では、選択された共通の比（３１６）は、４つの主要解像度中３つ、５つの主要解像度中３つ、または３つの主要解像度中２つ等、主要解像度の大部分に共通である。共通の比が選択されると、対応する幅が、決定される（３１８）。一致する比を有していない主要解像度に対しては、直近の幅が、選択され得る。いくつかの実施形態では、直近の幅は、４の倍数であるはずである。多くの実施形態では、直近の幅は、８の倍数であるはずである。幅に基づいて、対応する高さが、アスペクト比を利用して決定される（３２０）。

本発明のある実施形態によって計算された解像度の例示的な組６００が、図６に示される。図６に示されるような主要解像度およびアスペクト比を前提として、決定（３１４）された１つの共通の比は、６４％であり、４つの主要解像度中３つにおいて出現する。主要解像度に基づいて計算された解像度（アスペクト比を有する）は、１５３６×８６４（１６：９）、１５３６×８３２（１．８５：１）、および１５３６×６４０（２．４：１）である。２．３５：１のアスペクト比は、１５３６画素幅である計算された解像度を有さず、主要解像度と同一の幅と高さの比に対応する直近の高さは、６５２．８である。いくつかの実施形態では、本解像度は、８の倍数である直近の値、すなわち、６５６に丸められてもよい。いくつかの他の実施形態は、計算された高さ値より小さい直近の８の倍数、すなわち、６４８を使用してもよい。故に、計算された高さは、６５６であり、解像度１５３６×６５６が、計算された解像度として利用されてもよい。アスペクト比１６：９、１．８５：１、２．３５：１、および２．４：１における解像度標的を有する主要解像度１９２０×１０８０、１９２０×１０４０、１９２０×８１６、および１９２０×８００を前提として、丸め方法を使用して計算された解像度の実施例が、図７に図示される。表７００は、共通の幅比×高さ比、各幅比×高さ比の出現数、対応する幅、および８の倍数である、各アスペクト比に対して計算された高さを示し、計算された高さは、下線を使用して示される。本発明のいくつかの実施形態では、ソースエンコーダは、解像度１９２０×１０８０を有するビデオデータを受信し、複数のストリーム内のビデオデータを図７に示される解像度でエンコードする。

本発明は、ある特定の側面において説明されたが、多くの付加的修正および変形例が、当業者に明白である。したがって、本発明は、本発明の範囲および精神から逸脱することなく、再生デバイスによって利用されるストリーミングの組の切替状態が継続的に変化する再生デバイスを含め、具体的に説明されるものと別様に実施され得ることを理解されたい。したがって、本発明の実施形態は、あらゆる観点において、制限ではなく、例証として見なされるべきである。故に、本発明の範囲は、図示される実施形態によってではなく、添付の請求項およびその均等物によって決定されるべきである。

Claims (24)

1. メモリと通信するように構成されたプロセッサを備える再生デバイスであって、
   前記メモリは、クライアントアプリケーションを含み、
   前記クライアントアプリケーションは、
   インデックスファイルを取得することであって、前記インデックスファイルは、複数の代替ビデオストリームを記述し、前記複数の代替ビデオストリームは、前記複数の代替ビデオストリームのうちの少なくとも２つを含む第１の組のストリームを含み、前記複数の代替ビデオストリームのうちの前記少なくとも２つは、同一のアスペクト比を有し、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他の代替ビデオストリームと異なるビットレートを有し、かつ、前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他の代替ビデオストリームと異なる解像度を有し、各異なる解像度は、高さおよび幅を有し、前記高さおよび前記幅のそれぞれは、整数個の画素である、ことと、
   前記インデックスファイルにおける前記複数の代替ビデオストリームの記述に基づいて、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのうちの第１の代替ビデオストリームを選択することと、
   前記第１の代替ビデオストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように、ビデオデコーダを構成することであって、前記ビデオをデコードすることは、前記デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを含む、ことと、
   コンテンツプロバイダシステムから、前記第１の代替ビデオストリームの一部を要求することと、
   前記第１の代替ビデオストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように構成された前記ビデオデコーダを用いて、前記第１の代替ビデオストリームからのビデオの一部をデコードすることと、
   前記第１の代替ビデオストリームに含まれるビデオのストリーミング状態を監視することと、
   前記ストリーミング状態の変化と、前記第１の代替ビデオストリームのアスペクト比と、前記インデックスファイルにおける前記複数の代替ビデオストリームの記述とに基づいて、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのうちの第２の代替ビデオストリームを選択することであって、前記第２の代替ビデオストリームは、前記第１の代替ビデオストリームと異なるビットレートを有し、かつ、前記第１の代替ビデオストリームと同一のアスペクト比を有する、ことと、
   前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのうちの前記第２の代替ビデオストリームに含まれるビデオの一部を取得することを要求することと、
   前記ビデオデコーダを用いて、前記第２の代替ビデオストリームからのビデオの一部をデコードすることと
   を行うように前記プロセッサを構成し、
   前記第１の代替ビデオストリームおよび前記第２の代替ビデオストリームからのビデオは、一定の方式で前記ディスプレイデバイスの解像度にスケーリングする、再生デバイス。
2. コンテンツを再生する方法であって、前記方法は、プロセッサを備える再生デバイスにおいて実行され、前記方法は、
   前記プロセッサが、インデックスファイルを取得することであって、前記インデックスファイルは、複数の代替ビデオストリームを記述し、前記複数の代替ビデオストリームは、前記複数の代替ビデオストリームのうちの少なくとも２つを含む第１の組のストリームを含み、前記複数の代替ビデオストリームのうちの前記少なくとも２つは、同一のアスペクト比を有し、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他の代替ビデオストリームと異なるビットレートを有し、かつ、前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他の代替ビデオストリームと異なる解像度を有し、各異なる解像度は、高さおよび幅を有し、前記高さおよび前記幅のそれぞれは、整数個の画素である、ことと、
   前記プロセッサが、前記インデックスファイルにおける前記複数の代替ビデオストリームの記述に基づいて、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのうちの第１の代替ビデオストリームを選択することと、
   前記プロセッサが、前記第１の代替ビデオストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように、前記再生デバイス上のビデオデコーダを構成することであって、前記ビデオをデコードすることは、前記デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを含む、ことと、
   前記プロセッサが、前記第１の代替ビデオストリームに含まれるビデオの一部を取得することを要求することと、
   前記第１の代替ビデオストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように構成された前記ビデオデコーダを用いて、前記第１の代替ビデオストリームからのビデオの一部をデコードすることと、
   前記プロセッサが、前記第１の代替ビデオストリームに含まれるビデオに対するストリーミング状態を監視することと、
   前記プロセッサが、前記ストリーミング状態の変化と、前記第１の代替ビデオストリームのアスペクト比と、前記インデックスファイルにおける前記複数の代替ビデオストリームの記述とに基づいて、前記第１の組ストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのうちの第２の代替ビデオストリームを選択することであって、前記第２の代替ビデオストリームは、前記第１の代替ビデオストリームと異なるビットレートを有し、かつ、前記第１の代替ビデオストリームと同一のアスペクト比を有する、ことと、
   前記プロセッサが、前記第２の代替ビデオストリームに含まれるビデオの一部を取得することを要求することと、
   前記ビデオデコーダを用いて、前記第２の代替ビデオストリームからのビデオの一部をデコードすることと
   を含み、
   前記第１の代替ビデオストリームおよび前記第２の代替ビデオストリームからのビデオは、一定の方式で前記ディスプレイデバイスの解像度にスケーリングする、方法。
3. プロセッサ命令を含む非一時的機械読み取り可能なメディアであって、
   プロセッサによる前記命令は、
   コンテンツプロバイダシステムからインデックスファイルを取得することであって、前記インデックスファイルは、複数の代替ビデオストリームを記述し、前記複数の代替ビデオストリームは、前記複数の代替ビデオストリームのうちの少なくとも２つを含む第１の組のストリームを含み、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つは、同一のアスペクト比を有し、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他のものと異なるビットレートを有し、かつ、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他のものと異なる解像度を有し、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれの異なる解像度は、高さおよび幅を有し、前記高さおよび前記幅のそれぞれは、整数個の画素である、ことと、
   前記インデックスファイルにおける前記複数の代替ビデオストリームの記述に基づいて、前記第１の組ストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのうちの第１の代替ビデオストリームを選択することと、
   前記第１の代替ビデオストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように、ビデオデコーダを構成することであって、前記ビデオをデコードすることは、前記デコードされたビデオをディスプレイデバイスの解像度にスケーリングすることを含む、ことと、
   前記コンテンツプロバイダシステムから、前記第１のビデオストリームのビデオの一部を要求することと、
   前記第１の代替ビデオストリームの解像度およびサンプルアスペクト比を有するビデオをデコードするように構成された前記ビデオデコーダを用いて、前記第１の代替ビデオストリームからのビデオの一部をデコードすることと、
   前記第１の代替ビデオストリームに含まれるビデオに対するストリーミング状態を監視することと、
   前記ストリーミング状態の変化と、前記第１の代替ビデオストリームのアスペクト比と、前記インデックスファイルにおける前記複数の代替ビデオストリームの記述とに基づいて、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのうちの第２の代替ビデオストリームを選択することであって、前記第２の代替ビデオストリームは、前記第１の代替ビデオストリームと異なるビットレートを有し、かつ、前記第１の代替ビデオストリームと同一のアスペクト比を有する、ことと、
   前記ストリーミング状態の変化に応答して、前記第２の代替ビデオストリームに含まれるビデオの一部を要求することであって、前記第２の代替ビデオストリームは、前記第１の代替ビデオストリームと異なるビットレートを有し、前記第２の代替ビデオストリームは、前記第１の代替ビデオストリームと同一のアスペクト比を有する、ことと、
   前記ビデオデコーダを用いて、前記第２の代替ビデオストリームからのビデオの一部をデコードすることと
   を含むプロセスを実行することを前記プロセッサに行なわせ、
   前記第１の代替ビデオストリームおよび前記第２の代替ビデオストリームからのビデオは、一定の方式で前記ディスプレイデバイスの解像度にスケーリングする、非一時的機械読み取り可能なメディア。
4. 前記第１の組のストリームにおけるストリームのアスペクト比は、１６：９である、請求項３に記載の非一時的機械読み取り可能なメディア。
5. 前記第１の組のストリームにおけるストリームのアスペクト比は、１．８５：１である、請求項３に記載の非一時的機械読み取り可能なメディア。
6. 前記第１の組のストリームにおけるストリームのアスペクト比は、２．３５：１である、請求項３に記載の非一時的機械読み取り可能なメディア。
7. 前記第１の組のストリームにおけるストリームのアスペクト比は、２．４０：１である、請求項３に記載の非一時的機械読み取り可能なメディア。
8. 前記複数の代替ビデオストリームは、前記複数の代替ビデオストリームのうちの少なくとも２つを含む第２の組のストリームを含み、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つは、同一のアスペクト比を有し、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他のものと異なるビットレートを有し、かつ、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他のものと異なる解像度を有し、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれの異なる解像度は、高さおよび幅を有し、前記高さおよび前記幅のそれぞれは、整数個の画素であり、さらに、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのアスペクト比は、前記第１の組ストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのアスペクト比と異なる、請求項３に記載の非一時的機械読み取り可能なメディア。
9. 前記第１の組のストリームにおける各ストリームは、第１のサンプルアスペクト比を有し、前記第２の組のストリームにおける各ストリームは、第２のサンプルアスペクト比を有し、前記第１のサンプルアスペクト比と前記第２のサンプルアスペクト比とは、異なる、請求項８に記載の非一時的機械読み取り可能なメディア。
10. 前記第１の組のストリームにおける各ストリームは、同一のサンプルアスペクト比を有する、請求項３に記載の非一時的機械読み取り可能なメディア。
11. 前記第１の組のストリームにおけるストリームのアスペクト比は、１６：９である、請求項１に記載の再生デバイス。
12. 前記第１の組のストリームにおけるストリームのアスペクト比は、１．８５：１である、請求項１に記載の再生デバイス。
13. 前記第１の組のストリームにおけるストリームのアスペクト比は、２．３５：１である、請求項１に記載の再生デバイス。
14. 前記第１の組のストリームにおけるストリームのアスペクト比は、２．４０：１である、請求項１に記載の再生デバイス。
15. 前記複数の代替ビデオストリームは、前記複数の代替ビデオストリームのうちの少なくとも２つを含む第２の組のストリームを含み、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つは、同一のアスペクト比を有し、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他のものと異なるビットレートを有し、かつ、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他のものと異なる解像度を有し、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれの異なる解像度は、高さおよび幅を有し、前記高さおよび前記幅のそれぞれは、整数個の画素であり、さらに、前記第２の組のストリームの前記複数の代替ビデオストリームのうちの前記少なくとも２つのアスペクト比は、前記第１の組のストリームの前記複数の代替ビデオストリームのうちの前記少なくとも２つのアスペクト比と異なる、請求項１に記載の再生デバイス。
16. 前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、第１のサンプルアスペクト比を有し、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、第２のサンプルアスペクト比を有し、前記第１のサンプルアスペクト比と前記第２のサンプルアスペクト比とは、異なる、請求項１５に記載の再生デバイス。
17. 前記第１の組のストリームにおける各ストリームは、同一のサンプルアスペクト比を有する、請求項１に記載の再生デバイス。
18. 前記第１の組のストリームにおけるストリームのアスペクト比は、１６：９である、請求項２に記載の方法。
19. 前記第１の組のストリームにおけるストリームのアスペクト比は、１．８５：１である、請求項２に記載の方法。
20. 前記第１の組のストリームにおけるストリームのアスペクト比は、２．３５：１である、請求項２に記載の方法。
21. 前記第１の組のストリームにおけるストリームのアスペクト比は、２．４０：１である、請求項２に記載の方法。
22. 前記複数の代替ビデオストリームは、前記複数の代替ビデオストリームのうちの少なくとも２つを含む第２の組のストリームを含み、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つは、同一のアスペクト比を有し、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他のものと異なるビットレートを有し、かつ、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つにおける他のものと異なる解像度を有し、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの少なくとも前記２つのそれぞれの異なる解像度は、高さおよび幅を有し、前記高さおよび前記幅のそれぞれは、整数個の画素であり、さらに、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのアスペクト比は、前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのアスペクト比と異なる、請求項２に記載の方法。
23. 前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、第１のサンプルアスペクト比を有し、前記第２の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれは、第２のサンプルアスペクト比を有し、前記第１のサンプルアスペクト比と前記第２のサンプルアスペクト比とは、異なる、請求項２２に記載の方法。
24. 前記第１の組のストリームにおける前記複数の代替ビデオストリームのうちの前記少なくとも２つのそれぞれのストリームは、同一のサンプルアスペクト比を有する、請求項２に記載の方法。