JP2008533885A - 画像データストリームを生成するための装置および方法ならびに画像データストリームを処理するための装置および方法 - Google Patents

Abstract

仮想サイズ情報は、たとえば、トランスコーダによって符合化された画像データを生成する場合に、符合化された画像データにアタッチされる。仮想サイズ情報（１５）は、表示された情報の主観的品質を向上する画像シーケンスを有する画像またはビデオをサイズ変更する（１６）ために使用される。仮想サイズ情報は、エンコーダ側において生成された後、デコーダ側に送信され、さらに、送信された情報を、補間アーチファクトおよび画像サイズ間のトレードオフによって決定される最適な主観的品質をもたらす程度に、サイズ変更するためにリサイザ（１６）によって用いられる。
【選択図】図１

Description

本発明は、ビデオ符号化／復号化の分野、特に、スケーラブルビデオ符号化方式に適する。

いくつかの続くフレームまたは「単一の画像」からなるビデオシーケンス、あるいは、１以上の静止画像を、所望の解像度および精度で得ることができる。一般に、画像を得るための解像度および精度は、たとえば、仮想シーンを生成するためのデジタルカメラ、ビデオカメラまたはコンピュータ機器などによって決定される。

このような状況では、解像度は、画像のピクセル数によって決められる。画像が多くのピクセルを有すれば、高解像度となり、したがって、ディスプレイスクリーンにおいて１ピクセルで占められる面積が一定の数値に設定されている場合、大きなサイズになる。画像の精度、または、特にピクセルの精度は、このピクセルを符合化するために必要とされるビット数によって決められる。通常、１ピクセルあたりのビット数が多ければ、そのピクセルの精度が高くなるか、または、ピクセルで表される数値が大きくなる。

簡単な例として、１ピクセルあたりに１ビットとは、圧縮アルゴリズムが用いられない場合、ピクセルは白または黒のみになりえることを意味する。たとえば、１ピクセルあたりに３ビットであれば、ピクセルが８つの異なる濃淡値または色値の１つを有することができるため、ピクセルの精度が高く、したがって、画質も良くなることは明らかである。通常、ピクセル精度または１ピクセル値あたりの総ビット数は、画像エンコーダにおいて量子化器によって決定される。

画像またはビデオの符合化／復号化方式は、ＭＰＥＧ４またはＨ．２６４／ＡＶＣに基づくことができる点にここで注意されたい。当然、いくつかの画像符合化／復号化方式は、ＪＰＥＧとの関連でも知られている。これら全てのエンコーダには、画像または画像シーケンスが画像ファイルの冗長を低減するために圧縮されるという共通点がある。これを行うための良い方法は、従来技術において知られている動き補償予測の適用である。また、大部分の符合化方式も不可逆圧縮方式に依存しており、一般に、これは、ＭＰＥＧ−４の状況下では、ブロックベースのＤＣＴ係数の量子化である。当然、量子化ステップサイズが大きければ、量子化値が小さくなり、小さい量子化ステップサイズで得られる量子化値と比較してより少ないビット数で表される。このような小さい量子化ステップサイズは、量子化値が高範囲であるため、それらを表わすためには多くのビット数が必要とされる。特に、量子化値の後続エントロピー符合化が使用される場合、一般に、小さい数値は、大きい数値と比較して、結果的に高い符合化利得をもたらすとされている。

上述のように、所望の解像度（サイズ）や精度（ピクセルあたりのビット数）の画像を得ることができる。エンコーダ圧縮利得には大きな進歩が見られるが、当然、大きく非常に正確な画像を符合化することは不可能であり、同時に低帯域の伝送路にとって十分に小さい非常に低いビットレートを得ることもできない。

この場合、一般に１画像あたりのビット数を減らすための可能性は２通りあり、有限帯域幅を有する伝送路を介して画像を送信することができる。この目的のために、図３を参照されたい。非常に正確な大きい画像３０が示されている。最も進歩した画像の符合化アルゴリズムの代わりに、画像３０の出力ビットレートは高すぎるので、特定の有限帯域伝送路での画像３０の伝送は不可能であるとされている。画像３０を符合化するために必要なビット数を減らす最初の可能性は、図３の左側に画像３１で示されている。画像３１は、画像３０に対して低い解像度を有する点において異なる。すなわち、ビット数が少なければ、図３に示されるように小さいサイズの画像となる。それにもかかわらず、図３の例では、画像３１の１ピクセルあたりのビット数は、画像３０に対して変化が見られない。

別の可能性が図３の右側に画像３２で示されている。画像３２は、画像３０とピクセル数が同じであるので、画像３２と画像３０とのサイズが等しくなる。画像を表わすために必要なビット数を減らすために、画像３２では、精度、すなわち１ピクセルあたりのビット数が減らされている。

画像３１を得るために解像度を下げるには、横にまたは縦に隣接する２つのピクセルを結合するフィルタなどの高性能なデシメーションフィルタを多かれ少なかれ用いれば、結果として生じる画像３１は、もとの画像３０より小さくなる。

ピクセルの精度を下げるためには、画像エンコーダにおいて量子化ステップサイズを大きくするか、または、特定のビットレートに達するまで１ピクセルあたりに特定数の下位有効ビットを単に削除する。

画像３１および３２は、双方とも特定の主観的品質を有する。画像３１を見れば、ピクセルの精度が非常に高いことがわかるだろう。しかしながら、主観的印象は、画像３１のサイズが小さいことに影響される。しかし、画像３２を見る人は、画像の大きさに満足するだろう。それにもかかわらず、ビットの精度が低いとなれば、十分に満足できる主観的印象を妨げてしまうだろう。

当然、図３に示されている２つの一般的な可能性の組み合わせは可能である。解像度を下げることが可能で、精度、すなわち、対象ビットレートを得る１ピクセルあたりのビット数を減らすことも可能である。

ビデオシーケンスが、たとえば、その入力が高帯域伝送路に接続され、さらに、その出力が低帯域伝送路に接続されているトランスコーダによって処理される場合、図３に示されるように決定する必要がある。この状況では、トランスコーダは、低帯域伝送路の低帯域要件を満たすために、画像または画像シーケンスを処理する必要がある。

最も簡単な方法は、もとの解像度と等しい対象解像度を選択することである。この場合、ビットレートのみを決定する必要がある。この手順は、画像３２で示される図３の右側の方法に相当する。

しかしながら、対象のビットレート、すなわち、低帯域伝送路または低帯域再生装置のビットレートが低すぎる場合、精度にかなりの影響を及ぼすので、デシメーションによって解像度を変更すること、すなわち、図３の最初の方法を使用することも１つの選択である。これは、再生表示がもとの画面３０のサイズより小さい場合、特に事実である。

しかしながら、多くの場合、再生表示は、画像３０のサイズから画像３１のサイズへのデシメーションが１画像あたりのビット数を必須の少ない数にするには、十分に小さくならない。この場合、ピクセル精度が低くなりすぎないように、解像度は対象解像度まで下げられることが必要であり、通常、対象とする再生装置のサイズより小さくなる。

この手順は、当然、画像が時々小さくなりすぎるという不利な点があり、非常に小さい画像が主観的な画質を支配して破壊することがあり、その印象は精度の高いピクセルでも補うことはできない。

本発明の目的は、有限帯域幅を有する伝送路で送信される符合化されたデータストリームのために十分に低いビットレートを保ちながら、結果的により優れた主観的品質をもたらす、符合化／復号化概念を提供することである。

この目的は、請求項１に記載のデータストリームを生成するための装置、請求項８に記載のデータストリームを処理するための装置、請求項１２に記載のデータストリームを生成する方法、請求項１３に記載のデータストリームを処理する方法、請求項１４に記載のコンピュータプログラム、請求項１５に記載のデータストリーム、または、請求項１７に記載の記憶装置によって達成される。

本発明は、符合化／復号化方式のデコーダ／ディスプレイ側において画像をある程度でサイズ変更することによって、表示された画像の主観的品質を向上できるという知見に基づく。これに関連して、サイズ変更は、単なるズーム操作を意味するものではなく、ズーム操作は画像の解像度ではなく面積に影響を及ぼし、一定のピクセルがディスプレイスクリーンを占めることになる。その代わり、サイズ変更操作は、表示された画像または表示された画像シーケンスの高い解像度をもたらす。送信された画像には含まれず表示された画像に含まれるピクセルは、画像を表示する前にエンコーダからデコーダに送信された情報を用いて算出され、具体的には、たとえば補間によって、送信されたピクセルから導出される。しかしながら、補間によるサイズ変更は、無制限に実施できない。画像の主観的品質は、特定のサイズ変更の範囲内で、サイズ変更を加えていない画像の主観的品質よりもよいとされる。そのサイズ変更の範囲、または、言い換えれば、最適な主観的品質を提供するサイズ変更量は、多数の異なるファクタによる。これらのファクタは、画像自体、低解像度画像のピクセル精度、低解像度画像を符合化するために用いられる符号化アルゴリズムおよびサイズ変更された画像を表示することを目的とするディスプレイ装置の特性などがある。この点を考慮すると、上述の例のファクタ間での複雑な相互依存は、画像データの解像度／精度および伝送／表示設定の全ての組み合わせに有効な特定のサイズ変更量を規定しまたはあらかじめ定義することを不可能にしている。

本発明によれば、サイズ変更情報は供給され、好ましくはデータストリームを生成するユーザによって生成される。下げられた画像解像度を有するデータストリームのユーザまたはジェネレータは、たとえば、何らかの経験的テストを実行することによって、最適なサイズ変更情報を容易に決定することができる。それが一見しただけでは重い負担として見えるとしても、最適なサイズ変更パラメータの決定は、類似の画像マテリアルおよび類似のエンコーダ／デコーダ／ディスプレイ設定のために１度だけ実行されなければならない。

最適なサイズ変更情報をエンコーダ側に供給すること、およびこのサイズ変更情報を好ましくは符合化された画像データとともにデコーダに送信することは、結果的にデコーダ／ディスプレイ側において最適な達成可能な主観的品質をもたらす。したがって、符合化された画像データに加えてサイズ変更情報の本発明の供給は、解像度を上げすぎるサイズ変更操作によって起こる予期せぬ主観的品質の劣化を、回避するために役立つ。このような状況は、フルサイズのビデオ再生が得られるように、ディスプレイ装置が、各受信画像を受信画像の解像度に関係なくディスプレイ装置の解像度に補間するように設定される場合に起こる。このような状況はとりわけ不利であり、その理由は、視聴者が、そのサイズの大きさこそ認識しないが、多すぎる補間アーチファクトを示すかなりぼんやりとした画像に不快感を覚える。

それに対して、本発明のサイズ変更情報の画像データ適応信号伝達は、デコーダが保守的に作動しすぎる場合に起こる状況を減らす。簡単な手順は、サイズ変更を全く行わない。しかしながら、主観的品質が向上する可能性を完全に失ってしまうことは明らかである。この状況は、たとえば５％のサイズ変更度がディフォルトとしてディスプレイ装置に設定された場合にも起こる。この場合、ユーザは少し改善されたことがわかるが、十分な品質から得るものはないだろう。これについては、実現でき、本発明に基づいて信号が送信される。

ビデオ符号化の分野では、デジタル伝送路の必要性が極端に高まってきているため、非常に競争的な市場であることに加えて、利用可能な伝送帯域幅リソースがますます減少するという制限がある。これを考慮して、最終的な目標は、減少する伝送リソースに関して、できる限り帯域幅を低減することである。しかしながら、一方では、製品は、他社の製品と比較して品質が改善されていれば、市場で生存できる。もちろん、他社の製品に勝る利点は、他社の製品と同じ帯域幅のニーズを有するが、他社の製品の品質を上回るといえる場合に、実現することができる。

本発明によって得られる最適な主観的品質のために支払われるべきプライスは、エンコーダ側においてサイズ変更情報の供給、およびデコーダ側においてサイズ変更情報で制御可能な補間器である。加えて、サイズ変更情報は送信される必要がある。この情報は、たとえば、０％から１００％の増加間で８つのパーセント比率の信号を送信するために３ビット必要であるように、非常に少ないビット数で送信することができることから、伝送路容量を追加する必要がなくなる。加えて、競争率の高い市場では伝達効率および主観的な表示品質が重要な問題となっているので、エンコーダに関する労力は、問題にはならない。ディスプレイ装置において追加の補間器については、そのような補間器を有しないディスプレイ装置またはデコーダ装置は、簡単にアップグレードできることに留意されたい。他のディスプレイ装置／デコーダに関しては、所定の非適応またはユーザ起動型の設定のもとで作動するそのような装置を既に含んでいるため、そのような追加の補間器で余計な労力が増えることはない。

本発明の好適な実施の形態が添付図面に関して後に説明され、これらの図面としては：
図１は、エンコーダ側においてデータストリームを生成するための装置およびデコーダ側においてデータストリームを処理するための装置を含むデータ処理方式の概要を示し、
図２ａは、エンコーダ側において生成するための装置の好適な実施の形態で、
図２ｂは、デコーダ側において処理するための装置の好適な実施の形態で、
図３は、有限帯域幅を有する伝送路で１以上の画像を送信するためのビットレートを下げるための概略図で、
図４は、サイズ変更度に対する主観的品質の概略図である。

図１のシステムは、エンコーダ側において、符合化された画像データを提供するためのプロバイダ１０を含む。符合化された画像データによって表される画像は、画像に含まれる多数のピクセルによって決められる画像解像度を有する。画像プロバイダ１０によって生成される画像解像度の画像は、たとえば、図３の画像３１になりえる。本発明に基づいて、単一の画像または複数の画像を表している符号化された画像データを有するデータストリームを生成するための装置は、サイズ変更情報サプライヤ１１を含む。このサイズ変更情報サプライヤ１１は、サイズ変更情報を供給するように作動する。サイズ変更情報は、画像を再生する場合、画像のサイズ変更解像度を決め、そのサイズ変更解像度は画像解像度よりも高い。

好ましくは、サイズ変更情報および符合化された画像データは、データストリームフォーマッタ１２に入力される。装置１２は、データストリームを形成し、さらにそのデータストリームを伝送路１３を介してデータストリームパーサ１４に送信する。データストリームパーサ１４は、データストリームおよびサイズ変更情報を受信するためのレシーバとして働く。

破線１５によって示されるように、サイズ変更情報は、必ずしも単一のデータストリームの範囲内で符合化された画像データとともに送信される必要はない。その代わりに、結果として生じる情報は、別の伝送路を介して送信することができる。このような実施の形態は、データストリームの伝送フォーマットを変更できない場合に好ましい。その場合、結果として生じる情報は、たとえば、同じ伝送路での追加のデータパケットを介してまたは全く別の伝送路を介して送信することができる。この場合、結果として生じる情報は、好ましくは、符合化された画像データのＩＤを含むため、デコーダ側の装置は、正しいサイズ変更情報を、符合化された画像データを有する特定のデータストリームに割り当てることができる。

デコーダ側においてデータストリームを処理するための装置は、レシーバ１４によって供給されるサイズ変更情報に応じて画像をサイズ変更するためのリサイザ１６をさらに含む。リサイザ１６は、画像解像度を有する画像に基づいてサイズ変更された画像を出力する。データストリームに含まれる画像解像度を有する画像とは対照的に、サイズ変更された画像は、伝送路１３を介して送信されたデータストリームにおいて対応する画像のピクセル数より多いピクセル数を有する。リサイザによって生成された画像データは、ディスプレイのユーザに最大の主観的品質ビデオを提供するために、ディスプレイ装置１７に入力される。エレメント１４および１６を含む処理するための装置は、モニタやテレビのようなディスプレイ１７に必ずしも含められるとは限らないことは明らかである。リサイザは、汎用プロセッサのためのソフトウェアプラグイン、または、たとえば、ディスプレイドライブ装置のグラフィックボードに設置されているアプリケーション特有のプロセッサのためのアプリケーションプログラムでも代用できる。

図２ａは、図１のエンコーダ側において生成するための装置の好適な実施の形態を示す。図２ａの装置は、第１の解像度を有する符合化された画像データを受信しているトランスコーダとして働くように作動する。第１の解像度を有するこれらの符合化された画像データは、（パーシャル）デコーダ１８ａ、デシメータ１８ｂおよび（パーシャル）エンコーダ１８ｃを有するトランスコーダに入力される。トランスコーダは、デシメータ１８ｂへの入力として提供される対象解像度と類似している第２の解像度である符合化された画像データを出力する。サイズ変更情報サプライヤ１１は、サイズ変更情報を受信するユーザ入力を有する入力装置として図２ａの実施の形態において実施される。

あるいは、または、加えて、入力装置１１は、補助入力を含む。この入力は、第２の解像度または第１の解像度において符合化された画像データから特定の決定規則によって最適に導出される推定されたサイズ変更情報を受信するように機能する。上述のように、最適な解像度に到達するために複数のファクタ間でかなり複雑な相互依存が起きる。それにもかかわらず、メインファクタは、対象解像度、または、好ましくは、対象解像度（第２の解像度）、もとの解像度（第１の解像度）およびピクセル精度であることが分かっている。このように、サイズ変更操作にとってかなり適切な推定値が、自動的に生成され、さらに、補助入力を介してサイズ変更情報サプライヤ１１に入力される。サイズ変更情報は、リサイザ１６（図１）を制御する場合、結果的にサイズ変更された画像のより高い解像度をもたらす。好ましくは、サイズ変更情報は、最大のサイズ変更度が１００％で、好ましくは７５％である。大半の場合、７５％を超える画像のサイズ変更は、許容範囲にならず主観的品質が劣化することが分かっている。

データストリームフォーマッタ１２は、ストリーミングモードが設定される場合に、トランスミッタとして実施される。好ましくは、サイズ変更情報は、符合化された画像データより前に送信される。ファイル記憶モードの場合、データストリームフォーマッタ１２は、ビデオファイルを記憶装置に書き込むように作動する。この場合、サイズ変更情報を符合化されたビデオデータとともに単一のファイルに書き込むことが好ましい。

上述のように、図２ａは、符合化された画像データを、第１の解像度から第１の解像度よりも低い第２の解像度に変換するためのトランスコーダ装置を表している。選択された符号化アルゴリズムに応じて、符号化された画像データは、デシメータによるデシメーションを実行するために完全に復号化される必要はない。代わりに、デシメーションは、変換ベースのビデオ符合化アルゴリズムのＤＣＴドメインで実行できる。パーシャルデコーダ１８ａは、ＤＣＴドメインに到達するために必要な全ての復号化ステップを実行するが、最後の変換を実行しない。同様に、パーシャルエンコーダ１８ｃも、最初の変換を実行する必要がないが、（デシメーションされた）ＤＣＴ係数に基づいて、その符号化操作を始めることができる。

図２ｂは、符合化されたデータおよびサイズ変更情報を有するデータストリームを処理するための本発明の装置の好適な実施の形態を示す。符合化されたデータは、デコーダ１９に入力される。復号化された画像データは、画像解像度において、好ましくは補間器を含むリサイザ１６に入力される。補間器は、さらなる入力として、補間器制御を実行するためのサイズ変更情報を受信する。この実施の形態では、サイズ変更情報は、補間器に入力される画像の画像解像度に関して絶対的にまたは相対的に補間器１６の出力での解像度を決める。その後、補間器の出力は、ディスプレイ装置１８に表示される。

図２ｂは、補間前の完全な復号化操作の状況を示しているが、特定の符号化アルゴリズムに応じて、補間が最終的なピクセルデータ以外の他のデータにおいて実行できることは明らかである。このような「他のデータ」は、たとえば、デコーダで他の中間値のＤＣＴ係数になりえる。

続いて、主観的品質とサイズ変更度、好ましくは図２ｂの補間器１６の補間度とを相互に関連づける概略図を示している図４を参照されたい。本発明の状況では、主観的な画質は、表示解像度、すなわち、表示された画像のサイズにより、さらに、導入された補間ひずみによる。従来技術において知られているように、補間器は、特定の補間規則に基づいて２つの実際に与えられた数値間で数値を算出する。スプライン補間または予測として知られる単側補間を実行するか、あるいは、両側補間も実行することができ、そこにおいて、補間されるべきピクセル値の左および右のピクセルがこの数値を算出するために用いられる。補間値と最初は高い解像度のもとのピクセルであったピクセル値との差は、補間ひずみとして決められる。

当然、画像に含まれる補間ひずみは、補間度が高まるにつれて増加する。この補間ひずみの増加は、主観的品質の劣化をもたらす。

一方、補間は結果的に大きなサイズの画像をもたらし、主観的品質の向上につながる。双方の相反する影響が一緒に加われば、図４の曲線のような曲線を得ることになる。この曲線は、最適な品質ポイントで終了する増加ブランチを有する。この最適な品質ポイントは、関連したサイズ変更値を有し、それは好ましいサイズ変更値である。

サイズ変更度がサイズ変更値を超えて増加する場合、最適な品質は、減少し、最大のサイズ変更値であるべきサイズ変更値に一致する特定の数値でもとの主観的品質に到達する。サイズ変更度が最大のサイズ変更値を超えて増加した場合、追加的な処理が実施されなければ、もとの（小さい）画像より劣化するので、全体の補間はする価値がなかった。これを考慮すると、サイズ変更値を最大のサイズ変更値より小さい数値として選択することが好ましい。

好ましくは、最大の主観的品質をもたらす好ましいサイズ変更値は、追加的情報として決定され、さらに、符合化されたデータを有するデータストリームに入力される。好ましくは、サイズ変更情報が、符合化された画像データから別に送信されない場合、各標準伝送フォーマットで提供される予備フィールドは、「今後のアプリケーション」として保存され、ユーザによって意図されるサイズ変更度を示すサイズ変更情報を入力するために用いられえる。

発明的に、サイズ変更情報または「仮想サイズ」情報は、プレーヤがストリーミングサーバから発生するファイルまたはストリームのための好ましい再生解像度サイズとしてそのような仮想サイズを用いるように、ビデオ情報に追加される。たとえば、図４の図解に基づいて、最も良い仮想サイズを決めるのは、ストリーム／ファイルのクリエータの選択になる。

本発明は、特にフルスクリーンで再生しないことに適している。本発明の装置は、表示された画像を、もとの小さなまたは「切手サイズ」のイメージに代わり、所定の高い解像度に拡大・縮小することが可能になる。所定の仮想サイズは、より良い品質のビデオの印象を与える。したがって、本発明の仮想サイズの伝送は、プレーヤが伝送されたサイズ変更情報によって自動的に調整されるため、プレーヤ自体から再生されるサイズに調整する必要がなくなる。

本発明の好ましいアプリケーションは、ｈｔｔｐ：／／ｔｒａｉｌｅｒｓ．ｄｉｖｘ．ｃｏｍ／ｐｌｕｇｉｎ／ｉｎｄｅｘ．ｈｔｍｌ．のようなブラウザのプラグインにある。ストリーミング目的などで、オーサは所望の仮想サイズにビデオを符合化することが可能になり、プレーヤプラグインは、ストリームのオーサが意図する解像度まで自動的に拡大・縮小できることになる。

本発明の方法の特定の実現要求によっては、本発明の方法は、ハードウェアまたはソフトウェアで実施することができる。この実施は、本発明の方法が実行されるように、プログラム可能なコンピュータシステムと協働する、それに格納された電子的に読み取り可能な制御信号を有する、デジタル記憶媒体、特に、ディスク、ＤＶＤまたはＣＤを用いて実行することができる。そのため、本発明は、一般に、コンピュータプログラム製品がコンピュータ上で実行されるときに、機械で読み取り可能なキャリアに格納された本発明の方法を実行するためのプログラムコードを有するコンピュータプログラム製品である。言い換えると、本発明は、コンピュータプログラムがコンピュータ上で実行されるときに、少なくとも１つの本発明の方法を実行するためのプログラムコードを有するコンピュータプログラムである。

図１は、エンコーダ側においてデータストリームを生成するための装置およびデコーダ側においてデータストリームを処理するための装置を含むデータ処理方式の概要を示す。 図２ａは、エンコーダ側において生成するための装置の好適な実施の形態である。 図２ｂは、デコーダ側において処理するための装置の好適な実施の形態である。 図３は、有限帯域幅を有する伝送路で１以上の画像を送信するためのビットレートを下げるための概略図である。 図４は、サイズ変更度に対する主観的品質の概略図である。

Claims (17)

1. 単一の画像または複数の画像を表す符号化された画像データを有するデータストリームを生成するための装置であって、
   前記符合化された画像データを提供するためのプロバイダ（１０）であって、前記符合化された画像データによって表される画像は前記画像に含まれるピクセル数によって決められる画像解像度を有する、プロバイダ、および
   サイズ変更情報を供給するためのサイズ変更情報サプライヤ（１１）であって、前記サイズ変更情報は前記画像を再生する場合に前記画像のサイズ変更解像度を決め、前記サイズ変更解像度は前記画像解像度より高い、サイズ変更情報サプライヤを含む、装置。
2. 前記プロバイダ（１０）は、第１の解像度における画像を有する入力データストリームを前記画像解像度としての第２の解像度を有する前記符号化された画像データに変換するためのトランスコーダであり、前記第２の解像度は前記第１の解像度より低く、さらに
   前記サイズ変更情報サプライヤ（１１）は、前記サイズ変更解像度が、前記第２の解像度より高く、さらに、前記第１の解像度より低いかそれに等しくなるように、前記サイズ変更情報を供給する、請求項１に記載の装置。
3. 前記サイズ変更情報サプライヤ（１１）は、ユーザ入力を受信し、さらに前記サイズ変更情報を生成する、請求項１または請求項２に記載の装置。
4. 前記サイズ変更情報サプライヤは、画像解像度、ピクセル精度、前記符合化された画像データにおける情報コンテンツ、および／または、前記サイズ変更された画像を再生するためのディスプレイ装置の特性に基づいて、前記サイズ変更情報を決定する、先行する請求項のいずれかに記載の装置。
5. 前記サイズ変更情報サプライヤは、前記サイズ変更解像度が２倍の画像解像度より低くなるように、前記サイズ変更情報を供給する、先行する請求項のいずれかに記載の装置。
6. 出力データストリームを得るために前記サイズ変更情報を前記符号化された画像データにアタッチするためのデータストリームフォーマッタ（１２）をさらに含む、先行する請求項のいずれかに記載の装置。
7. 前記第２の解像度における画像のピクセル値あたりのビット数は、前記第１の解像度における画像のピクセル値あたりのビット数に等しい、請求項２に記載の装置。
8. 単一の画像または複数の画像を表す符号化された画像データを有するデータストリームを処理するための装置であって、
   前記データストリームおよびサイズ変更情報を受信するためのレシーバ（１４）であって、前記サイズ変更情報は前記画像を再生する場合に前記画像のサイズ変更解像度を決め、前記サイズ変更解像度は前記符号化された画像データにおける画像の画像解像度より高い、レシーバ、および
   画像解像度を有する画像に基づいてサイズ変更された画像を得るために前記サイズ変更情報に応じて画像をサイズ変更するためのリサイザ（１６）を含み、
   前記サイズ変更された画像のピクセル数は前記画像解像度における対応する画像のピクセル数より多い、装置。
9. 前記リサイザ（１６）は補間器を含み、前記補間器は制御可能な補間比率を有し、
   前記サイズ変更情報は補間器制御情報を含み、さらに
   前記レシーバは、前記補間比率を前記補間器制御情報によって決定される数値に設定するために、前記サイズ変更情報を前記補間器に入力する、請求項８に記載の装置。
10. 前記リサイザ（１６）は、前記符合化された画像データを復号化するためのデコーダから、前記画像解像度を決める復号化されたピクセル数を有する単一の復号化された画像または複数の復号化された画像を受信し、さらに
    前記リサイザ（１６）は、さらに必要であれば、単一のサイズ変更された画像または複数のサイズ変更された画像を得るために、前記復号化されたピクセルを用いて前記単一の復号化された画像または前記複数の復号化された画像を補間する、請求項８または請求項９に記載の装置。
11. 前記符号化されたデータストリームをインターネットを介して受信する場合に、前記処理装置を制御するためのアクティブＸコントローラをさらに含む、請求項１０に記載の装置。
12. 単一の画像または複数の画像を表す符合化された画像データを有するデータストリームを生成する方法であって、
    前記符合化された画像データを提供する工程（１０）であって、前記符合化された画像データによって表される画像は前記画像に含まれるピクセル数によって決められる画像解像度を有する、提供する工程、および
    サイズ変更情報を供給する工程（１１）であって、前記サイズ変更情報は前記画像を再生する場合に前記画像のサイズ変更解像度を決め、前記サイズ変更解像度は前記画像解像度より高い、供給する工程を含む、方法。
13. 単一の画像または複数の画像を表す符合化された画像データを有するデータストリームを処理する方法であって、
    前記データストリームおよびサイズ変更情報を受信する工程（１４）であって、前記サイズ変更情報は前記画像を再生する場合に前記画像のサイズ変更解像度を決め、前記サイズ変更解像度は前記符合化された画像データにおける画像の画像解像度よりも高い、受信する工程、および
    画像解像度を有する画像に基づいてサイズ変更された画像を得るために前記サイズ変更情報に応じて画像をサイズ変更する工程（１６）を含み、
    前記サイズ変更された画像のピクセル数は前記画像解像度における対応する画像のピクセル数より多い、方法。
14. コンピュータ上で実行されるときに、請求項１２または請求項１３に記載の方法を実行するためのプログラムコードを有するコンピュータプログラム。
15. 単一の画像または複数の画像を表す符合化された画像データを有するデータファイルまたはストリームであって、前記符合化された画像データによって表される画像は前記画像に含まれるピクセル数によって決められる画像解像度を有し、さらに、サイズ変更情報を有し、前記サイズ変更情報は前記画像を再生する場合に画像のサイズ変更解像度を決め、前記サイズ変更解像度は前記画像解像度より高い、データファイルまたはストリーム。
16. 請求項８に記載の処理するための装置を制御するためのデータファイルまたはストリームであって、前記データファイルまたはストリームは処理するための前記装置に入力される、請求項１５に記載のデータファイルまたはストリーム。
17. 請求項１５に記載のデータファイルまたはストリームが格納された記憶装置。

Images