WO2007148619A1

WO2007148619A1 - 動画像復号装置、復号画像記録装置、それらの方法及びプログラム

Info

Publication number: WO2007148619A1
Application number: PCT/JP2007/062086
Authority: WO
Inventors: Junji Tajime
Original assignee: Nec Corporation
Priority date: 2006-06-21
Filing date: 2007-06-15
Publication date: 2007-12-27
Also published as: JP4973886B2; JPWO2007148619A1

Abstract

動画像復号装置は、復号装置が対象とする圧縮符号化方式の参照する画素位置からフレーム内のある画素位置の参照されやすさが設定された参照度重み付け縮小部１０２および参照度重み付け圧縮部１０６を、実装している。参照度重み付け縮小部１０２では、参照されやすい画素に対しては、拡大後の画像特性が縮小前の画像特性を保持するようにＬＰＦの係数を定め、間引きの対象画素としないような制御をかけ縮小し、参照度重み付け圧縮部１０６は、参照されやすい画素に対しては量子化代表値の割り当てビット数(量子化代表値数)を多くするような制御をかけ、圧縮する。

Description

明細書

動画像復号装置、復号画像記録装置、それらの方法及びプログラム技術分野

[0001] 本発明は、圧縮符号化された動画像ビットストリームを入力とする動画像復号装置に関し、特に、復号に必要となるメモリ容量及びメモリ帯域を削減するために復号画像を縮小、あるいは縮小および圧縮する手段を備えた動画像復号装置、復号画像記録装置、それらの方法及びプログラムに関する。

背景技術

[0002] 近年のデジタル技術の急速な進歩に伴い、 MPEG-2 VIDEO (ISO 13818-2/ITU- TH.262), MPEG- 4 Visual (ISO 14496-2)、 H.264(ITU-T H.264/ISO 14496- 10)などに代表されるデジタル動画像圧縮符号化方式が広く利用されるようになった。

[0003] しかし、圧縮符号化された動画像ビットストリームを入力とする動画像復号装置は、圧縮符号化方式の複雑化、復号対象画像の高解像度化により、多大なメモリ容量及びメモリ帯域を必要とし、実装する上で問題となっている。

[0004] この問題を解決する一つの方法として、復号画像を縮小、ある、は縮小および圧縮する手段を備えた動画像復号装置が開示されている。このような、復号画像を縮小、あるいは縮小および圧縮する手段を備えた動画像復号装置の代表的な技術として、例えば、特許文献 1に記載されている従来の動画像復号装置を図 2に示す。

[0005] この動画像復号装置は、復号部 201(バッファ 2011、 VLD2012,逆量子化 2013 、逆 DCT2014、カロ算 2015、動き補償 2016)と、水平ローパスフィルタ（LPF)およびデシメーシヨン 202と、ブロックコンプレッサ 203と、水平アップサンプル 204と、ブロックデコンブレッサ 205、 209と、内部メモリ'バス 206と、 MUXZDEMUX (多重化/ 分配） 207と、ビデオ'フレームメモリ 208と、ディスプレイプロセッサ 210と、ディスプレイデバイス 211とから構成される。尚、以下の説明において、特許文献 1に記載されている表示機能 (ブロックデコンブレッサ 209、ディスプレイプロセッサ 210、ディスプレイデバイス 211)に関しては、復号時の水平アップサンプル 204およびブロックデコンプレッサ 205と同様の動作となるので説明を省略する。 [0006] 復号部 201は、入力された圧縮動画像ビットストリームと、ブロックデコンブレッサ 20 5で伸長、水平アップサンプル 204で拡大された参照画像を用いて画像を復号する。復号部 201で復号された復号画像は、水平 LPFおよびデシメーシヨン 202で縮小され、ブロックコンプレッサ 203で、画素ごとあるいは圧縮処理単位ごとに圧縮され、情報量が削減される。

[0007] 水平 LPFおよびデシメーシヨン 202で縮小、ブロックコンプレッサ 203で圧縮された圧縮データは、後に復号する画像の参照画像として用いられるためにビデオ'フレームメモリ 208へ書き込まれる。

[0008] 書き込まれた圧縮データは、復号のためにブロックデコンブレッサ 205で伸長、水平アップサンプル 204で拡大される。

[0009] 尚、説明では復号画像を縮小および圧縮する場合につ!ヽて述べたが、水平 LPF およびデシメーシヨン 202による縮小のみ、ブロックコンプレッサ 203による圧縮のみでも情報量の削減は可能である。

[0010] また、同様の発明が、特許文献 2にも開示されている。

[0011] 次に具体例を用いて特許文献 1に開示された動画像復号装置の効果を示す。尚、以下の説明にお、て、特許文献 1に開示された動画像復号装置の復号部 201として H.264を考える。

[0012] 図 3に H.264復号装置における復号部 31のブロック図を示す。

[0013] H.264は、 MPEG-2 VIDEOや MPEG-4 Visualと同様に、動き補償と周波数変換を組み合わせたハイブリッド符号ィ匕をベースにしており、さらに新しい技術であるイントラ（空間、フレーム内)予測、デブロックフィルタが用いられている。

[0014] 図 4に示す水平 LPFおよびデシメーシヨン 202として、水平 1/2縮小 (3タップの LPF および偶数画素位置をダウンサンプル）、ブロックコンプレッサ 203の圧縮符号ィ匕方式として、 1次元の差分 PCM(1-D DPCM)を考える。図 4より輝度信号の圧縮処理単位は H.264の圧縮符号化処理単位の一つであるマクロブロック (MB: Macroblock)幅を水平 1/2縮小した 8画素とし、左画素を参照画素とし、予測誤差値は 5ビット固定の量子化代表値を持つ非線形量子化を行う。

[0015] 図 5に、ある映像シーケンスにおける通常の (縮小および圧縮する手段を持たない） H.264復号装置の復号画像を基準とした、縮小および圧縮する手段を備えた H.264 復号装置の復号画像のフレーム平均輝度信号 PSNR(Peak SignaFto-Noise Ratio)を示す。

[0016] ここで、 H.264の符号化条件は、イントラ予測フレーム間隔 Nを 15フレーム、参照フレーム間隔 Mを 3フレームとしている。

[0017] 縮小および圧縮する手段を備えた動画像復号装置では復号画像を縮小しな!ヽ、かつ圧縮する圧縮符号ィヒ方式に非可逆変換方式を利用しない限り、参照画像には縮小および圧縮による歪みが含まれる。

[0018] この歪みはイントラ予測フレームが復号されるまで蓄積することになる。

[0019] このことは図 5において、 PSNRの劣化周期が Nフレームであることからも確認できる

[0020] ただし、画質劣化は生じるものの、表示する画像サイズが小さい場合などの簡易的な復号の用途では、劣化を許容できる場合もあり、縮小および圧縮する手段を備えた動画像復号装置は効果がある。

特許文献 1 :特開平 10-66081号公報 (第 9-11頁、図 1)

特許文献 2：特開平 11-298892号公報 (図 1)

発明の開示

発明が解決しょうとする課題

[0021] しカゝしながら、これらの特許文献 1〜2に開示された縮小および圧縮する手段を備えた動画像復号装置は、著ヽ画質劣化が生じる場合がある。

[0022] 具体例を用いて画質劣化の原因を説明する。

[0023] 先に述べた映像シーケンスと異なる映像シーケンスを用いた場合のフレーム平均輝度信号 PSNRを図 6に示す。

[0024] 図 6ではフレーム数が、 60〜120フレーム及び 270〜300フレーム付近のイントラ予測フレームの PSNRとイントラ予測フレーム直前の PSNRとの差は 10dB以上にもなる

[0025] PSNRが低下する原因は縮小および圧縮の処理が関係している。例えば、図 7に示す画像が図 8に示す符号ィ匕モードで圧縮符号化された H.264ビットストリームを考える [0026] 図 7に示した画像は、画像端から 15画素連続して黒い画素があり、 16画素目から本来の画像が始まる。また、この H.264ビットストリームにおけるインター (フレーム間）予測フレームは画像左端の MBが静止画のインター予測 MBとして、右隣の MBがイントラ予測 MBかつ予測モードは図 9に示す水平方向予測として符号化されている。

[0027] ここで、 H.264ではイントラ予測モード、イントラ予測対象のブロックサイズは複数存在するが、説明を簡単にするため、ブロックサイズが 16 X 16の水平方向予測としている。この H.264ビットストリームの輝度信号を縮小および圧縮し、伸長および拡大した時の動作を図 10に示す。

[0028] イントラ予測フレームでは通常の復号画素に対して水平 1/2縮小および 1-D DPCM 圧縮を行う。この例の場合、 15画素目から 16画素目にかけ画素値の変化が大きい。そして、 LPFや、偶数画素位置のダウンサンプルによる間引きを考慮すると、 13画素目から 15画素目にかけ画素値の変化が大きくなる。通常、非線形の量子化は予測誤差値が大き、場合に歪みを許容するように設計するので、縮小および圧縮による大きな歪みが混入した 15画素目に加え、それを利用し補間される 16画素目にも歪みが混入する。

[0029] インター予測フレームの画像左端の MBは多くの画素が黒い画素であるので静止画として符号化される。その結果、イントラ予測フレームにおける同位置の MBが参照画素となる。右隣の MBはイントラ予測 MBかつ水平方向予測なので画像左端 MBの 16 画素目の一列が参照画素となる。ここで、この MBの参照画素はイントラ予測フレームの縮小および圧縮で生じた歪みを含んでいる。その結果、図 9に示した水平方向予測で予測画像を作成すると縮小および圧縮による歪みは MB全体に伝播する。

[0030] このように、イントラ予測では参照画素として周辺画素を利用するので、縮小および圧縮による歪みは MBだけでなぐイントラ予測 MBが連続する場合、歪みは空間的にも伝播する。

[0031] さらに、このインター予測フレームが参照フレームとして利用される場合、歪みは時間的にも伝搬する。その結果、著しい画質劣化が生じる。

[0032] 従って、従来の縮小、あるいは縮小および圧縮する手段を備えた動画像復号装置の問題点は、時間的、空間的な歪みの伝搬を考慮せずに、各処理単位の歪みが最小となるように縮小および圧縮していることである。

[0033] そこで、本発明は上記課題に鑑みて発明されたものであって、その目的は、時間的、空間的な圧縮による歪みの伝搬、すなわち画質劣化を抑制できる縮小手段、あるいは縮小および圧縮手段を備えた動画像復号装置、復号画像記録装置、それらの方法及びプログラムを提供することにある。

課題を解決するための手段

[0034] 上記課題を解決する本発明は、予測処理を利用して圧縮符号化された動画像ビットストリームを画像信号へ復号する復号手段と、前記復号手段により得られた復号画像信号を縮小し、縮小画像を得る縮小手段と、前記縮小手段により得られた縮小画像を保持する予測フレームメモリ手段と、前記予測フレームメモリ手段に保持された縮小画像を読み出し、これを拡大した後に前記復号手段の予測処理で利用するデータとして供給する拡大手段と、前記予測フレームメモリ手段に対する縮小画像の書き込み、又は、読み出しを制御するアドレス制御手段とを有する動画像復号装置において、前記縮小手段は、圧縮符号化方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近、値をとるように制御を行うように構成されて、ることを特徴とする。

[0035] 上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像の記録方法であって、復号画像を縮小して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高ヽ復号画像の領域を、参照頻度の低、復号画像の領域よりも拡大後の画素値が縮小前の画素値に近、値をとるようにすることを特徴とする。

[0036] 上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像の記録方法であって、復号画像を縮小および圧縮して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも、拡大後の画素値が縮小前の画素値に近い値をとるようし、かつ、高い精度で圧縮することを特徴とする。 [0037] 上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像を記録するプログラムであって、復号画像を縮小して記録する時に、前記復号画像の領域が予測で参照される頻度を推定する処理と、参照頻度の高ヽ復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近、値をとるようにする処理とを情報処理装置に実行させることを特徴とする。

[0038] 上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像を記録するプログラムであって、復号画像を縮小および圧縮して記録する時に、前記復号画像の領域が予測で参照される頻度を推定する処理と、参照頻度の高!、復号画像の領域を、参照頻度の低!、復号画像の領域よりも拡大後の画素値が縮小前の画素値に近、値をとるようにする処理と、高!、精度で圧縮する処理と、を情報処理装置に実行させることを特徴とする。

[0039] 上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像の記録装置であって、復号画像を縮小して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高ヽ復号画像の領域を、参照頻度の低、復号画像の領域よりも拡大後の画素値が縮小前の画素値に近、値をとるようにする縮小手段を有することを特徴とする。

[0040] 上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像の記録装置であって、復号画像を縮小および圧縮して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近、値をとるようにする縮小手段および高、精度で圧縮する圧縮手段を有することを特徴とする。

[0041] 上記課題を解決する本発明は、復号画像信号を縮小し、縮小画像を得る動画像復号方法において、圧縮符号ィ匕方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近、値をとるように制御することを特徴とする。

[0042] 上記課題を解決する本発明は、復号画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを得る動画像復号方法において、圧縮符号化方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近い値をとるように制御し、かつ、量子化代表値を表す割当ビット数を多くするように圧縮データ量を制御することを特徴とする。

[0043] 上記課題を解決する本発明は、復号画像信号を縮小し、縮小画像を得る動画像復号方法におけるプログラムであって、前記プログラムは、圧縮符号化方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近い値をとるように制御する処理を情報処理装置に実行させることを特徴とする。

[0044] 上記課題を解決する本発明は、復号画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを得る動画像復号方法において、圧縮符号化方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近い値をとるように制御し、かつ、量子化代表値を表す割当ビット数を多くするように圧縮データ量を制御することを特徴とする。

[0045] 上記課題を解決する本発明は、復号画像信号を縮小し、縮小画像を得る動画像復号方法におけるプログラムであって、前記プログラムは、圧縮符号化方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近い値をとるように制御する処理を情報処理装置に実行させることを特徴とする。

[0046] 上記課題を解決する本発明は、復号画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを得る動画像復号方法におけるプログラムであって、前記プログラムは、圧縮符号化方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近い値をとるように制御し、かつ、量子化代表値を表す割当ビット数を多くするように圧縮データ量を制御する処理を情報処理装置に実行させることを特徴とする。発明の効果

[0047] 本発明の効果は、縮小または圧縮による歪み、すなわち画質劣化を抑制できる縮小手段、あるいは縮小および圧縮手段を備えた動画像復号装置及びその技術を提供することができる。

[0048] その理由は、復号装置が対象とする圧縮符号化方式の参照する画素位置からフレーム内のある画素位置の参照されやすさを予め設定して、参照度重み付け縮小部 1 02あるいは参照度重み付け圧縮部 106を実装するので、参照度重み付け縮小部 1 02では、参照されやすい画素に対しては、拡大後の画像特性が縮小前の画像特性を保持するように LPFの係数を定め、間引きの対象画素としな!/、ような制御をかけ、縮小し、参照度重み付け圧縮部 106では、参照されやすい画素に対しては、量子化代表値の割り当てビット数 (量子化代表値数)を多くするような制御をかけ、圧縮する。その結果、参照されやすい画素の歪みを軽減し、時間的、空間的な歪みの伝搬を抑制することが可能となるからである。

[0049] ここで、参照されやすさは、圧縮符号化方式の参照する画素位置に加え、復号装置が対象とする圧縮符号化方式の圧縮符号化処理単位、参照度重み付け縮小部が対象とする縮小率、画素の間引き位置、参照度重み付け圧縮部が対象とする圧縮符号化方式の参照する画素位置、圧縮処理単位、圧縮率のいずれか一つ以上を用いて設定してもよい。

[0050] 本発明の実際の効果として、図 6の結果に実施例 2の結果をカ卩えたフレーム平均輝度信号 PSNRを、図 22に示す。図 22中、 Embodiment2が実施例 2を示している。図より本発明では PSNRの劣化が抑制できていることが分かる。

図面の簡単な説明

[0051] [図 1]本発明の実施形態の構成を示すブロック図である。

[図 2]特許文献 1に開示された動画像復号装置の構成を示すブロック図である。

[図 3]特許文献 1に開示された動画像復号装置にお!ヽて H.264を用いた構成例を示すブロック図である。

[図 4]復号画像の縮小および圧縮に利用する圧縮符号ィ匕方式の一例を示す図である。 [図 5]従来の動画像復号装置の効果を示すグラフである。

圆 6]従来の動画像復号装置の問題点を示すグラフである。

圆 7]従来の動画像復号装置の問題点を説明するための具体例である。

圆 8]従来の動画像復号装置の問題点を説明するための具体例である。

圆 9]H.264イントラ予測モードを説明する図である。

圆 10]縮小および圧縮による歪み発生原因を説明する図である。

圆 11]本発明の第 2の実施形態の構成を示すブロック図である。

[図 12]実施例 1における各画素位置の参照度を示す図である。

[図 13]実施例 1における各画素位置の別の参照度を示す図である。

[図 14]実施例 1における各画素位置の別の参照度を示す図である。

圆 15]実施例 2における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。

[図 16]実施例 2における各画素位置の縮小時の参照度、量子化代表値の割り当てビット数および参照関係を示す図である。

圆 17]実施例 2における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。

圆 18]実施例 2における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。

圆 19]実施例 2における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。

圆 20]実施例 2における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。

圆 21]実施例 3における本発明による動画像復号装置をインプリメントした情報処理システムの一般的ブロック構成図である。

[図 22]図 6の結果に実施例 2の結果をカ卩えたフレーム平均輝度信号 PSNRを示した図である。

符号の説明

101、 201、 31 復号部 102 参照度重み付け縮小部

103 予測フレームメモリ部

104 拡大部

105 アドレス制御部

106 参照度重み付け圧縮部

107 伸長部

202 水平ローパスフィルタおよびデシメーシヨン

203 ブロックコンプレッサ

204 水平アップサンプル

205、 209 ブロックデコンブレッサ

206 内部メモリ'バス

207 多重化 Z分配

208 ビデオ.フレームメモリ

210 ディスプレイプロセッサ

211 ディスプレイデバイス

2011、 301 ノッファ

2012 可変長復号

2013、 303 逆量子化

2014 逆離散コサイン変換

2015、 305 加算

2016、 306 動き補償

302 可変長復号

304 逆整数変換

307 イントラ予測

308 デブロックフィノレタ

発明を実施するための最良の形態

[0053] 次に、本発明の実施の形態について図面を参照して詳細に説明する。

[0054] 図 1は、本発明の実施形態による動画像復号装置の全体構成を示すブロック図である。

本実施の形態の動画像復号装置は、復号部 101と、参照度重み付け縮小部 102と、予測フレームメモリ部 103と、拡大部 104と、アドレス制御部 105とから構成される。

[0055] 次に、本実施の形態の動画像復号装置の動作を説明する。

[0056] 復号部 101は、入力された圧縮動画像ビットストリームと、拡大部 104で拡大された参照画像を用いて画像を復号する。復号部 101で復号された復号画像は、参照度重み付け縮小部 102で、縮小され、情報量が削減される。

[0057] 参照度重み付け縮小部 102で縮小された画像は、後に復号する画像の参照画像として用いられるために予測フレームメモリ部 103へ書き込まれる。書き込みにおいては、アドレス制御部 105は、縮小画像を書き込むフレームメモリのアドレスを作成し、アドレス線を介して、予測フレームメモリ部 103に供給する。

[0058] 書き込まれた縮小画像は、復号のために拡大部 104で拡大される。

[0059] ここで参照度とは、フレーム内のある画素位置の参照されやすさ (予測に利用される頻度)を表し、正確な参照度は圧縮動画像ビットストリームを解析することで求めることもできる。しかし、本実施の形態では、復号装置が対象とする圧縮符号化方式の参照する画素位置力予め参照度を推定し定める。

[0060] 参照度重み付け縮小部 102は、復号画像を縮小するという点では水平 LPFおよびデシメーシヨン 202と同様の動作をする。しかし、参照度重み付け縮小部 102の縮小方式は推定された参照度を考慮して設計され、実装されているので、参照度が大き V、画素値に対しては拡大後の画像特性が縮小前の画像特性を保持するよう〖こ LPF の係数を定め、間引きの対象画素としないような制御をかけ、縮小する。ここで、参照度は圧縮符号化方式の参照する画素位置に加え、復号装置が対象とする圧縮符号化方式の圧縮符号化処理単位、参照度重み付け縮小部 102の縮小率、画素の間引き位置の、ずれか一つ以上を用いて設定してもよ!/、。

[0061] 次に、本発明の第 2の発明を実施するための最良の形態について図面を参照して詳細に説明する図 11は、本発明の第 2の実施形態による動画像復号装置の全体構成を示すブロック図である。

[0062] 第 2の実施形態の動画像復号装置は、第 1の実施形態の動画像復号装置に参照度重み付け圧縮部 106、伸長部 107を追加した構成となる。

[0063] 復号部 101は、入力された圧縮動画像ビットストリームと、伸長部 107で伸長、拡大部 104で拡大された参照画像を用いて画像を復号する。復号部 101で復号された復号画像は、参照度重み付け縮小部 102で縮小され、参照度重み付け圧縮部 106で画素ごとあるいは圧縮処理単位ごとに、圧縮され、情報量が削減される。

[0064] 参照度重み付け縮小部 102で縮小、参照度重み付け圧縮部 106で圧縮された圧縮データは、後に復号する画像の参照画像として用いられるために予測フレームメモリ部 103へ書き込まれる。書き込みにおいては、アドレス制御部 105は、圧縮データを書き込むフレームメモリのアドレスを作成し、アドレス線を介して、予測フレームメモリ部 103に供給する。

[0065] 書き込まれた圧縮データは、復のために伸長部 107で伸長、拡大部 104で拡大される。

[0066] 参照度重み付け圧縮部 106は、復号画像を圧縮するという点ではブロックコンプレッサ 203と同様の動作をする。しかし、参照度重み付け圧縮部 106が対象とする圧縮符号ィ匕方式は推定された参照度を考慮して設計され、実装されている。ここで、参照度は圧縮符号化方式の参照する画素位置に加え、復号装置が対象とする圧縮符号化方式の圧縮符号化処理単位、参照度重み付け縮小部 102の縮小率、画素の間引き位置、参照度重み付け圧縮部 106が対象とする圧縮符号ィ匕方式の参照する画素位置、圧縮処理単位、圧縮率のいずれか一つ以上を用いて設定してもよい。

実施例 1

[0067] 次に、具体的な実施例を用いて本発明を実施するための最良の形態の構成および動作を説明する。

[0068] 本実施例では、復号部 101として H.264を用い、参照度重み付け縮小部 102では水平 1/2の縮小を行う。

[0069] ここで、参照度重み付け縮小部 102における参照度は、 H.264のイントラ予測の参照画素位置および圧縮符号化処理単位、縮小率、画素の間引き位置から決定する。例えば H.264の圧縮符号ィ匕処理単位としては 2、 4、 8、 16が考えられる。また、本実施例の場合、縮小率は 1/2となる。 [0070] 参照度は式 1 (数 1)で定める。

[0071] [数 1]

イントラ予測対象画素

かつ水平画素位置が偶数

イントラ予測非対象画素

かつ水平画素位置が偶数

上記以外

この参照度は H.264のイントラ予測の参照画素位置および縮小率、ダウンサンプルにおける画素の間弓 Iき位置を考慮しており、 R0〉R1〉R2を満たして!/、る。

[0072] 参照度重み付け縮小部 102で用いる LPFは、参照度に応じてフィルタの強度を変更する。

[0073] 具体的には参照度が大きいものほど、拡大後の画像特性が縮小前の画像特性を保持するようにする。参照度 R1に対して (4, 8, 4)/16のような 3タップのフィルタ処理を行う場合、 Rはり参照度の大きい R0に対しては拡大後の画像特性が縮小前の画像特性を保持するように (3, 10, 3)/16や (0, 16, 0)/16のフィルタ処理を行う。また、最も参照度の小さい R2はダウンサンプルの間引き対象画素とする。

[0074] 本実施例における参照度を図 12に示す。

[0075] 本実施例では、イントラ予測の参照画素位置および縮小率力参照度 R0, Rl, R2 を設定し、参照度の大きい画素に対しては拡大後の画像特性が縮小前の画像特性を保持するように LPFの係数を定め、間引きの対象画素としな!/、ような制御をかけ縮小する。

[0076] その結果、図 7、 8、 10のような例では縮小による歪みを抑制できる。

[0077] また、本実施例では参照度を定めるためにイントラ予測の参照画素位置、縮小率、画素の間弓 Iき位置を考慮したが、縮小画像のエイリアシングを減らすには参照度 R0 となる画素は減らした方がょ、。

[0078] 例えば、図 13に示すように MB境界のイントラ参照画素位置のみを R0と定めることで

、 R0となる画素を減らせる。

また、 R0となる画素をさらに減らすため、もしくは実装を容易にするため図 14に示すように縦方向 MB境界のイントラ参照画素位置のみを R0を定めることも可能である。

[0079] また、本実施例では 3種類の参照度を定めたが、 3種類よりも多くの参照度を定めることも可能である。

[0080] また、本実施例では 3タップフィルタを用いた力参照度に応じて任意のタップ数のフィルタを定めることも可能である。

[0081] また、本実施例では水平方向の縮小を用いた力垂直方向の縮小および水平、垂直方向の縮小も同様に参照度を定めることが可能である。

実施例 2

[0082] 次に、具体的な実施例を用いて本発明を実施するため第 2の実施の形態の構成および動作を説明する。

[0083] 本実施例では、復号部 101、参照度重み付け縮小部 102は実施例 1と同様であるので説明を省略し、動作の異なる参照度重み付け圧縮部の動作を説明する。

[0084] 参照度重み付け圧縮部 106の圧縮符号化方式として 1-D DPCMを用いる。

[0085] ここで、 1-D DPCMでは X画素を圧縮処理単位とする。 Xの値は、 H.264の圧縮符号化処理単位、実装の容易さから決定する。

[0086] 実施例 1における参照度も考慮し、参照度重み付け圧縮部で用いる参照度を式 2 ( 数 2)で定める。

[0087] [数 2] 水平画素位置

が Xn+(X - 1 ) 上記以外 R1 nは 0以上の整数この参照度は H.264の「イントラ予測符号ィ匕対象ブロックの左ブロックを参照画素として利用する」という参照される画素位置を考慮しており、 R0〉R1を満たしている。参照度重み付け圧縮部 106に用いる 1-D DPCMでは、参照度をそのまま量子化代表値の割り当てビット数として用いる。この場合、参照度重み付け圧縮部の圧縮率は R0、 R1で決まる。

[0088] 本実施例における量子化代表値の割り当てビット数および参照関係を図 15に示す

[0089] 本実施例では、圧縮処理単位の右端画素を予測画素の起点とし、右画素を予測画素とする。

[0090] 図 12に示した縮小部で利用する参照度に対して、本実施例で Xの値を 8として用いた場合、図 16に示すように各 MBの参照画素となる周辺画素に対して量子化代表値の割り当てビット数を R0にすることになる。

[0091] その結果、図 7、 8、 10のような例では縮小および圧縮による歪みを抑制できる。

[0092] また、本実施例では図 12に示した縮小部で利用する参照度の例を示したが、これに限らず、図 13、 14など様々な縮小方式の組み合わせに適応できる。

[0093] また、本実施例では圧縮処理単位内で 2つの参照度を定めたが、各画素毎に参照度を定めることも可能である。

[0094] この時、参照度の設定の際に 1-D DPCMの「右画素を予測画素とする」という予測画素位置を考慮すると、左端画素に近いほど歪みの伝搬は小さくなるので、圧縮処理単位内の右画素ほど参照度を大きくするように定めることも可能である。

[0095] また、本実施例では右画素、図 4では左画素を予測画素として、たが、上画素もしくは下画素を予測画素とすることも可能である。ただし、 H.264の「イントラ予測符号ィ匕対象ブロックの上ブロックを参照画素として利用する」という参照画素位置を考慮すれば、垂直画素位置に対しても式 2 (数 2)と同様の参照度を定め、下画素を予測画素にすべきである。

[0096] 図 16の実施例では右画素を予測画素としていた。図 16の実施例の圧縮符号化方式を用いてラスタスキャン表示をする場合、表示順に並び替えるために復号画像を一時的に保持しておく必要があり、実用上望ましくない場合がある。そこで、本実施例 3では参照度を式 3 (数 3)で定める。

[0097] [数 3]

nは 0以上の整数

式 3 (数 3)で定めた参照度を利用すると、参照度 R0となる画素の水平位置をずらすことが可能になり、左画素を予測画素としながらも実施例 2と同様の効果を得ることができる。

本実施例にぉ、て、 Xを 8とした場合の量子化代表値の割り当てビット数および参照関係を図 17に示す。

[0098] 各 MBの参照画素となる周辺画素の割り当てビット数は図 16と同じになる。

[0099] 上述した図 16、 17の実施例は、図 7、 8、 10で示したように参照画素を含むブロックが静止画として符号化されていれば有効である。しかし、一般的には全てのブロックが静止画として符号化されることはなぐ従来の圧縮する手段を備えた動画像復号装置と同様の問題が生じる可能性がある。そこで、本実施例ではインター予測で参照されるブロック内に、割り当てビット数が R0となる参照画素が含まれる確率が高くなるように参照度を定める。

具体的には、縦または横に隣接する画素と参照度が等しくならないように定める。一例として式 4 (数 4)で参照度を定める。

[0100] [数 4] 水平画素位置 RG

が Xn+(X-1)

偶数ライン

上記以外

式 4 水平画素位置

が Xn ^^U

奇数ライン

上記以外

nは 0以上の整数本実施例における量子化代表値の割り当てビット数および参照関係を図 18に示す

[0101] X= 2、 4、 8として本実施例を用いた場合、図 15に示すように各 MBの参照画素となる周辺画素に対して R0(〉R1)ビットを割り当てることになる。

[0102] インター予測で静止画ブロックが参照された場合は、図 12等に比べ割り当てビット数が R0となる参照画素は減るが、一般的なインター予測を考えた場合、参照ブロック内に割り当てビット数が R0となる参照画素が含まれる確率は高くなる。

[0103] この例では 1ラインごとに参照度、参照関係を設定したが、例えば、式 5 (数 5)および図 19に示すように X種類のものを設定することも可能である。

[0104] [数 5]

水平画素位置 _Dn

が Χη ^Κϋ

0ライン

上記以外

水平画素位置

が Χη+1

式 5 1ライン

上記以外

水平画素位置

が Χη+(Χ— 1)

X - 1ライン

上記以外

ηは 0以上の整数ここで、本実施例ではイントラ予測だけでなぐインター予測の参照画素に対しても同様の効果が得られる。そこで、復号部 101として Η.264以外のインター予測を用いた圧縮符号化方式を利用することができる。

[0105] 上述した図 16〜19の実施例では参照度重み付け圧縮部 106の圧縮符号化方式として 1-D DPCMを用いていた。

[0106] 本発明は圧縮符号ィ匕方式としては任意の方式を用いることができる。そこで本実施例では圧縮符号ィ匕方式として 2次元 DPCM (2-D DPCM)を用いる。

[0107] 2-D DPCMは、横 X画素 X縦 Y画素のブロックを圧縮処理単位とする。 X、 Yの値は

H.264の圧縮符号化処理単位、圧縮率、実装の容易さ等から決定するもので、 2、 4、

8、 16が考えられる。参照度は式 6 (数 6)で定める。

[0108] [数 6] Γ 水平画素位置

が Χη+(Χ-1 )かつ

^ 垂直画素位置 R0

が Υη+(Υ - 1) 上記以外 R1 nは 0以上の整数この参照度は H.264の「符号ィ匕対象ブロックの左ブロックを参照画素として利用する」、「イントラ予測符号ィ匕対象ブロックの上ブロックを参照画素として利用する」という参照される画素位置を考慮して、る。

[0109] 参照度重み付け圧縮部 106に用いる 2-D DPCMでは 1-D DPCM同様、参照度をそのまま量子化代表値の割り当てビット数として用いる。

[0110] 本実施例における量子化代表値の割り当てビット数および参照関係を図 20に示す

[0111] 本実施例では圧縮処理単位の右下端画素を予測画素の起点とし、 1-D DPCMを用いる画素は右または下画素を予測画素とし、 2-D DPCMを用いる画素は右、下、右下の 3画素を予測画素とする。

実施例 3

[0112] 本発明による動画像復号装置は、以上の説明からも明らかなように、ハードウアで構成することも可能である力コンピュータプログラムにより実現することも可能である。

[0113] 図 21は、本発明による動画像復号装置をインプリメントした情報処理システムの一般的ブロック構成図である。

[0114] 図 21に示す情報処理システムは、プロセッサ 400、プログラムメモリ 401,記憶媒体 402からなる。記憶媒体 402は、別個の記憶媒体であってもよいし、同一の記憶媒体力もなる記憶領域であってもよい。記憶媒体としては、 RAMや、ハードディスク等の磁気記憶媒体を用いることができ、上述した予測フレームメモリ部 103の役割を果たす。

[0115] プログラムメモリ 401には、上述した復号部 101と、参照度重み付け縮小部 102と、拡大部 104と、アドレス制御部 105と、参照度重み付け圧縮部 106と、伸長部 107との各部の処理を、プロセッサ 400に行わせるプログラムが格納されており、このプログラムによってプロセッサ 400は動作する。

[0116] このように、コンピュータプログラムにより実現することも可能である。

[0117] 尚、復号部 101、参照度重み付け縮小部 102、拡大部 104、アドレス制御部 105、参照度重み付け圧縮部 106および伸長部 107の全てをプログラムで動作させる必要はなく、一部をノヽードウエアで構成しても力まわなヽ。

[0118] 本発明の活用例として、デジタル放送チューナ、 HDDレコーダ、 DVDプレーヤのようなデジタル動画像復号装置が挙げられる。

[0119] 本出願は、 2006年 6月 21日に出願された日本出願特願 2006— 171218号を基礎とする優先権を主張し、その開示の全てをここに取り込む。

Claims

請求の範囲

[1] 予測処理を利用して圧縮符号化された動画像ビットストリームを画像信号へ復号する復号手段と、前記復号手段により得られた復号画像信号を縮小し、縮小画像を得る縮小手段と、前記縮小手段により得られた縮小画像を保持する予測フレームメモリ手段と、前記予測フレームメモリ手段に保持された縮小画像を読み出し、これを拡大した後に前記復号手段の予測処理で利用するデータとして供給する拡大手段と、前記予測フレームメモリ手段に対する縮小画像の書き込み、又は、読み出しを制御するアドレス制御手段とを有する動画像復号装置において、

前記縮小手段は、圧縮符号化方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近、値をとるように制御を行うように構成されて、ることを特徴とする動画像復号装置。

[2] 前記縮小手段により得られた縮小画像を画素ごとに異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを得る圧縮手段と、前記圧縮手段により得られた圧縮データを保持する前記予測フレームメモリ手段と、前記予測フレームメモリ手段に保持された圧縮データを読み出し、圧縮データを伸張した後に前記拡大手段へ供給する伸張手段と、前記予測フレームメモリ手段に対する圧縮データの書き込み、又は、読み出しを制御する前記アドレス制御手段とを有する動画像復号装 ¾【こ; i l /、て、

前記参照度の大きい画素に対しては、量子化代表値を表す割当ビット数を多くするように圧縮データ量制御を行うように構成されてヽることを特徴とする請求項 1に記載の動画像復号装置。

[3] 前記圧縮符号化方式はフレーム内予測を用いた圧縮符号化方式であり、前記圧縮符号ィ匕方式において予測画像作成の際に参照される画素位置は、フレーム内予測画像作成の際に参照される画素位置であることを特徴とする請求項 1又は請求項 2に記載の動画像復号装置。

[4] 前記参照度は、前記圧縮符号化方式における圧縮符号化処理単位、前記縮小手段における縮小率、又は、前記縮小手段における画素の間引き位置のいずれか一つ以上を用いて定めることを特徴とする請求項 1から請求項 3のいずれかに記載の動画像復号装置。

[5] 前記参照度は、前記圧縮符号化方式における圧縮符号化処理単位、前記縮小手段における縮小率、前記縮小手段における画素の間引き位置、前記圧縮手段において予測画像作成の際に参照される画素位置、前記圧縮手段における圧縮処理単位、又は、前記圧縮手段における圧縮率のいずれか一つ以上を用いて定めることを特徴とする請求項 2又は請求項 3に記載の動画像復号装置。

[6] 前記圧縮手段は、圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行い、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うように構成されて、ることを特徴とする請求項 3から請求項 5の、ずれかに記載の動画像復号装置。

[7] 前記圧縮手段における圧縮処理単位内で最大の参照度は、縦または横に隣接する画素と参照度が等しくならないように定めることを特徴とする請求項 6に記載の動画像復号装置。

[8] 予測画像符号化復号方法の予測画像を作成するための復号画像の記録方法であつて、

復号画像を縮小して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近、値をとるようにすることを特徴とする復号画像記録方法。

[9] 予測画像符号化復号方法の予測画像を作成するための復号画像の記録方法であつて、

復号画像を縮小および圧縮して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも、拡大後の画素値が縮小前の画素値に近い値をとるようし、かつ、高ヽ精度で圧縮することを特徴とする復号画像記録方法。

[10] 前記復号画像の領域が予測で参照される頻度の推定は、復号画像の領域内の予測で参照される画素位置の数で推定することを特徴とする請求項 8又は請求項 9に記載の復号画像記録方法。

[11] 前記予測画像符号ィ匕復号方法は、フレーム内予測を用いた予測画像符号ィ匕復号方法であり、前記予測で参照される画素位置は、フレーム内予測画像を作成する際に参照される画素位置であることを特徴とする請求項 10に記載の復号画像記録方法。

[12] 前記画復号像の領域が予測で参照される頻度の推定は、前記予測画像符号化復号方法における予測画像符号ィヒ処理単位、復号画像の縮小方法における縮小率、又は、復号画像の縮小方法における画素の間引き位置のいずれか一つ以上を用いて推定することを特徴とする請求項 10又は請求項 11に記載の復号画像記録方法。

[13] 前記画復号像の領域が予測で参照される頻度の推定は、前記予測画像符号化復号方法における予測画像符号ィヒ処理単位、復号画像の縮小方法における縮小率、復号画像の縮小方法における画素の間引き位置、復号画像の圧縮方法における予測画像作成の際に参照される画素位置、復号画像の圧縮方法における圧縮処理単位、又は、復号画像の圧縮方法における圧縮率のいずれか一つ以上を用いて推定することを特徴とする請求項 10又は請求項 11に記載の復号画像記録方法。

[14] 前記復号画像の圧縮方法は、圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行い、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うことを特徴とする請求項 13に記載の復号画像記録方法。

[15] 予測画像符号化復号方法の予測画像を作成するための復号画像を記録するプログラムであって、

復号画像を縮小して記録する時に、前記復号画像の領域が予測で参照される頻度を推定する処理と、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近、値をとるようにする処理とを情報処理装置に実行させることを特徴とするプログラム。

[16] 予測画像符号化復号方法の予測画像を作成するための復号画像を記録するプログラムであって、

復号画像を縮小および圧縮して記録する時に、前記復号画像の領域が予測で参照される頻度を推定する処理と、参照頻度の高い復号画像の領域を、参照頻度の低 V、復号画像の領域よりも拡大後の画素値が縮小前の画素値に近!、値をとるようにする処理と、高い精度で圧縮する処理と、を情報処理装置に実行させることを特徴とするプログラム。

[17] 前記復号画像の領域が予測で参照される頻度を推定する処理は、復号画像の領域内の予測で参照される画素位置の数で推定することを特徴とする請求項 15又は請求項 16に記載のプログラム。

[18] 前記予測画像符号ィ匕復号方法は、フレーム内予測を用いた予測画像符号ィ匕復号方法であり、前記予測で参照される画素位置は、フレーム内予測画像を作成する際に参照される画素位置であることを特徴とする請求項 17に記載のプログラム。

[19] 前記画復号像の領域が予測で参照される頻度を推定する処理は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の縮小方法における縮小率、又は、復号画像の縮小方法における画素の間引き位置のいずれか一つ以上を用いて推定することを特徴とする請求項 17又は請求項 18に記載のプログラム。

[20] 前記画復号像の領域が予測で参照される頻度を推定する処理は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の縮小方法における縮小率、復号画像の縮小方法における画素の間引き位置、復号画像の圧縮方法における予測画像作成の際に参照される画素位置、復号画像の圧縮方法における圧縮処理単位、又は、復号画像の圧縮方法における圧縮率のいずれか一つ以上を用いて推定することを特徴とする請求項 17又は請求項 18に記載のプログラム。

[21] 前記復号画像の圧縮方法は、圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行い、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うことを特徴とする請求項 20に記載のプログラム。

[22] 予測画像符号化復号方法の予測画像を作成するための復号画像の記録装置であつて、

復号画像を縮小して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近、値をとるようにする縮小手段を有することを特徴とする復号画像記録装置。

[23] 予測画像符号化復号方法の予測画像を作成するための復号画像の記録装置であつて、

復号画像を縮小および圧縮して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近、値をとるようにする縮小手段および高い精度で圧縮する圧縮手段を有することを特徴とする復号画像記録装置。

[24] 前記縮小手段あるいは前記圧縮手段は、復号画像の領域内の予測で参照される画素位置の数に基づ!/、て、前記復号画像の領域が予測で参照される頻度を推定することを特徴とする請求項 22又は請求項 23に記載の復号画像記録装置。

[25] 前記予測画像符号化復号方法は、フレーム内予測を用いた予測画像符号化復号方法であり、前記予測で参照される画素位置は、フレーム内予測画像を作成する際に参照される画素位置であることを特徴とする請求項 24に記載の復号画像記録装置。

[26] 前記縮小手段は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の縮小方法における縮小率、又は、復号画像の縮小方法における画素の間引き位置のいずれか一つ以上を用いて、前記画復号像の領域が予測で参照される頻度を推定することを特徴とする請求項 24又は請求項 25に記載の復号画像記録装置。

[27] 前記縮小手段および前記圧縮手段は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の圧縮方法における予測画像作成の際に参照される画素位置、復号画像の縮小方法における縮小率、復号画像の縮小方法における画素の間引き位置、復号画像の圧縮方法における圧縮処理単位、又は、復号画像の圧縮方法における圧縮率のいずれか一つ以上を用いて、前記画復号像の領域が予測で参照される頻度を推定することを特徴とする請求項 24又は請求項 25に記載の復号画像記録装置。

[28] 前記復号画像の圧縮方法は、圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行い、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うことを特徴とする請求項 27に記載の復号画像記録装置。

[29] 復号画像信号を縮小し、縮小画像を得る動画像復号方法にぉヽて、

圧縮符号ィ匕方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近ヽ値をとるように制御することを特徴とする動画像復号方法。

[30] 復号画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行！ヽ、圧縮データを得る動画像復号方法にぉヽて、

圧縮符号ィ匕方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近い値をとるように制御し、かつ、量子化代表値を表す割当ビット数を多くするように圧縮データ量を制御することを特徴とする動画像復号方法。

[31] 前記圧縮符号ィヒ方式はフレーム内予測を用いた圧縮符号ィヒ方式であり、前記圧縮符号ィ匕方式において予測画像作成の際に参照される画素位置は、フレーム内予測画像作成の際に参照される画素位置であることを特徴とする請求項 29又は請求項 30に記載の動画像復号方法。

[32] 前記参照度は、前記圧縮符号化方式における圧縮符号化処理単位、復号画像の縮小処理における縮小率、又は、復号画像の縮小処理における画素の間引き位置の!、ずれか一つ以上を用いて定めることを特徴とする請求項 29又は請求項 31に記載の動画像復号方法。

[33] 前記参照度は、前記圧縮符号化方式における圧縮符号化処理単位、復号画像の縮小処理における縮小率、復号画像の縮小処理における画素の間引き位置、復号画像の圧縮処理にお!ヽて予測画像作成の際に参照される画素位置、復号画像の圧縮処理における圧縮処理単位、又は、復号画像の圧縮処理における圧縮率のいずれか一つ以上を用いて定めることを特徴とする請求項 30又は請求項 31に記載の動画像復号方法。

[34] 圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行!、、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うことを特徴とする請求項 33に記載の動画像復号方法。

[35] 復号画像信号を縮小し、縮小画像を得る動画像復号方法におけるプログラムであつて、

前記プログラムは、圧縮符号ィ匕方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近、値をとるように制御する処理を情報処理装置に実行させることを特徴とするプログラム。

[36] 復号画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行！ヽ、圧縮データを得る動画像復号方法にぉヽて、

[37] 復号画像信号を縮小し、縮小画像を得る動画像復号方法におけるプログラムであつて、

[38] 復号画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行、、圧縮データを得る動画像復号方法におけるプログラムであって、前記プログラムは、圧縮符号ィ匕方式における予測処理で参照される画素位置に従い、画素ごとの参照度を定め、参照度の大きい画素に対しては、拡大後の画素値が縮小前の画素値に近い値をとるように制御し、かつ、量子化代表値を表す割当ビット数を多くするように圧縮データ量を制御する処理を情報処理装置に実行させることを特徴とするプログラム。