JP4973886B2 - Moving picture decoding apparatus, decoded picture recording apparatus, method and program thereof - Google Patents

Moving picture decoding apparatus, decoded picture recording apparatus, method and program thereof Download PDF

Info

Publication number
JP4973886B2
JP4973886B2 JP2008522422A JP2008522422A JP4973886B2 JP 4973886 B2 JP4973886 B2 JP 4973886B2 JP 2008522422 A JP2008522422 A JP 2008522422A JP 2008522422 A JP2008522422 A JP 2008522422A JP 4973886 B2 JP4973886 B2 JP 4973886B2
Authority
JP
Japan
Prior art keywords
pixel
image
compression
prediction
reduction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008522422A
Other languages
Japanese (ja)
Other versions
JPWO2007148619A1 (en
Inventor
純二 田治米
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2008522422A priority Critical patent/JP4973886B2/en
Publication of JPWO2007148619A1 publication Critical patent/JPWO2007148619A1/en
Application granted granted Critical
Publication of JP4973886B2 publication Critical patent/JP4973886B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Description

本発明は、圧縮符号化された動画像ビットストリームを入力とする動画像復号装置に関し、特に、復号に必要となるメモリ容量及びメモリ帯域を削減するために復号画像を縮小、あるいは縮小および圧縮する手段を備えた動画像復号装置、復号画像記録装置、それらの方法及びプログラムに関する。   The present invention relates to a moving picture decoding apparatus that receives a compressed and encoded moving picture bit stream, and particularly reduces or reduces and compresses a decoded picture in order to reduce memory capacity and memory bandwidth required for decoding. The present invention relates to a moving image decoding apparatus, a decoded image recording apparatus, and a method and a program thereof.

近年のデジタル技術の急速な進歩に伴い、MPEG-2 VIDEO (ISO 13818-2/ITU-TH.262)、MPEG-4 Visual (ISO 14496-2)、H.264(ITU-T H.264/ISO 14496-10)などに代表されるデジタル動画像圧縮符号化方式が広く利用されるようになった。   With the rapid progress of digital technology in recent years, MPEG-2 VIDEO (ISO 13818-2 / ITU-TH.262), MPEG-4 Visual (ISO 14496-2), H.264 (ITU-T H.264 / Digital video compression encoding methods represented by ISO 14496-10) have been widely used.

しかし、圧縮符号化された動画像ビットストリームを入力とする動画像復号装置は、圧縮符号化方式の複雑化、復号対象画像の高解像度化により、多大なメモリ容量及びメモリ帯域を必要とし、実装する上で問題となっている。   However, a moving image decoding apparatus that receives a compressed and encoded moving image bit stream requires a large amount of memory capacity and memory bandwidth due to the complexity of the compression encoding method and the higher resolution of the decoding target image. It has become a problem in doing.

この問題を解決する一つの方法として、復号画像を縮小、あるいは縮小および圧縮する手段を備えた動画像復号装置が開示されている。このような、復号画像を縮小、あるいは縮小および圧縮する手段を備えた動画像復号装置の代表的な技術として、例えば、特許文献１に記載されている従来の動画像復号装置を図２に示す。   As one method for solving this problem, a moving picture decoding apparatus having means for reducing or reducing and compressing a decoded picture is disclosed. As a typical technique of such a moving picture decoding apparatus provided with means for reducing or reducing and compressing a decoded picture, for example, a conventional moving picture decoding apparatus described in Patent Document 1 is shown in FIG. .

この動画像復号装置は、復号部２０１(バッファ２０１１、ＶＬＤ２０１２、逆量子化２０１３、逆ＤＣＴ２０１４、加算２０１５、動き補償２０１６)と、水平ローパスフィルタ（ＬＰＦ）およびデシメーション２０２と、ブロックコンプレッサ２０３と、水平アップサンプル２０４と、ブロックデコンプレッサ２０５、２０９と、内部メモリ・バス２０６と、ＭＵＸ／ＤＥＭＵＸ（多重化／分配）２０７と、ビデオ・フレームメモリ２０８と、ディスプレイプロセッサ２１０と、ディスプレイデバイス２１１とから構成される。尚、以下の説明において、特許文献１に記載されている表示機能(ブロックデコンプレッサ２０９、ディスプレイプロセッサ２１０、ディスプレイデバイス２１１)に関しては、復号時の水平アップサンプル２０４およびブロックデコンプレッサ２０５と同様の動作となるので説明を省略する。   This moving image decoding apparatus includes a decoding unit 201 (buffer 2011, VLD 2012, inverse quantization 2013, inverse DCT 2014, addition 2015, motion compensation 2016), a horizontal low-pass filter (LPF) and decimation 202, a block compressor 203, Consists of upsample 204, block decompressors 205 and 209, internal memory bus 206, MUX / DEMUX (multiplexing / distribution) 207, video frame memory 208, display processor 210, and display device 211 Is done. In the following description, with respect to the display functions (block decompressor 209, display processor 210, display device 211) described in Patent Document 1, the same operations as the horizontal upsample 204 and block decompressor 205 at the time of decoding are performed. Therefore, the description is omitted.

復号部２０１は、入力された圧縮動画像ビットストリームと、ブロックデコンプレッサ２０５で伸長、水平アップサンプル２０４で拡大された参照画像を用いて画像を復号する。復号部２０１で復号された復号画像は、水平ＬＰＦおよびデシメーション２０２で縮小され、ブロックコンプレッサ２０３で、画素ごとあるいは圧縮処理単位ごとに圧縮され、情報量が削減される。   The decoding unit 201 decodes an image using the input compressed video bit stream and the reference image expanded by the block decompressor 205 and expanded by the horizontal upsample 204. The decoded image decoded by the decoding unit 201 is reduced by the horizontal LPF and decimation 202 and compressed by the block compressor 203 for each pixel or for each compression processing unit, thereby reducing the amount of information.

水平ＬＰＦおよびデシメーション２０２で縮小、ブロックコンプレッサ２０３で圧縮された圧縮データは、後に復号する画像の参照画像として用いられるためにビデオ・フレームメモリ２０８へ書き込まれる。   The compressed data compressed by the horizontal LPF and decimation 202 and compressed by the block compressor 203 is written to the video frame memory 208 to be used as a reference image of an image to be decoded later.

書き込まれた圧縮データは、復号のためにブロックデコンプレッサ２０５で伸長、水平アップサンプル２０４で拡大される。   The written compressed data is expanded by the block decompressor 205 and expanded by the horizontal upsample 204 for decoding.

尚、説明では復号画像を縮小および圧縮する場合について述べたが、水平ＬＰＦおよびデシメーション２０２による縮小のみ、ブロックコンプレッサ２０３による圧縮のみでも情報量の削減は可能である。   In the above description, the case where the decoded image is reduced and compressed has been described. However, the amount of information can be reduced only by the reduction by the horizontal LPF and the decimation 202 and the compression by the block compressor 203 alone.

また、同様の発明が、特許文献２にも開示されている。   A similar invention is also disclosed in Patent Document 2.

次に具体例を用いて特許文献１に開示された動画像復号装置の効果を示す。尚、以下の説明において、特許文献１に開示された動画像復号装置の復号部２０１としてH.264を考える。   Next, the effect of the moving picture decoding apparatus disclosed in Patent Document 1 will be described using a specific example. In the following description, H.264 is considered as the decoding unit 201 of the video decoding device disclosed in Patent Document 1.

図３にH.264復号装置における復号部３１のブロック図を示す。   FIG. 3 shows a block diagram of the decoding unit 31 in the H.264 decoding apparatus.

H.264は、MPEG-2 VIDEOやMPEG-4 Visualと同様に、動き補償と周波数変換を組み合わせたハイブリッド符号化をベースにしており、さらに新しい技術であるイントラ（空間、フレーム内)予測、デブロックフィルタが用いられている。   Similar to MPEG-2 VIDEO and MPEG-4 Visual, H.264 is based on hybrid coding that combines motion compensation and frequency conversion. Furthermore, new technologies such as intra (spatial and intraframe) prediction and decoding are used. A block filter is used.

図４に示す水平ＬＰＦおよびデシメーション２０２として、水平1/2縮小(３タップのＬＰＦおよび偶数画素位置をダウンサンプル）、ブロックコンプレッサ２０３の圧縮符号化方式として、１次元の差分PCM(1-D DPCM)を考える。図４より輝度信号の圧縮処理単位はH.264の圧縮符号化処理単位の一つであるマクロブロック(MB: Macroblock)幅を水平1/2縮小した８画素とし、左画素を参照画素とし、予測誤差値は５ビット固定の量子化代表値を持つ非線形量子化を行う。   As the horizontal LPF and decimation 202 shown in FIG. 4, horizontal 1/2 reduction (3-tap LPF and even pixel positions are down-sampled), and as a compression encoding method of the block compressor 203, a one-dimensional differential PCM (1-D DPCM )think of. As shown in FIG. 4, the compression processing unit of the luminance signal is 8 pixels obtained by reducing the macroblock (MB) width, which is one of the compression coding processing units of H.264, horizontally by 1/2, and the left pixel is a reference pixel. The prediction error value is nonlinearly quantized with a quantization representative value fixed to 5 bits.

図５に、ある映像シーケンスにおける通常の(縮小および圧縮する手段を持たない)H.264復号装置の復号画像を基準とした、縮小および圧縮する手段を備えたH.264復号装置の復号画像のフレーム平均輝度信号PSNR(Peak Signal-to-Noise Ratio)を示す。   FIG. 5 shows an example of a decoded image of an H.264 decoding apparatus having a means for reducing and compressing with reference to a decoded image of an ordinary H.264 decoding apparatus (without means for reducing and compressing) in a video sequence. A frame average luminance signal PSNR (Peak Signal-to-Noise Ratio) is shown.

ここで、H.264の符号化条件は、イントラ予測フレーム間隔Ｎを１５フレーム、参照フレーム間隔Ｍを３フレームとしている。   Here, the H.264 encoding condition is that the intra prediction frame interval N is 15 frames, and the reference frame interval M is 3 frames.

縮小および圧縮する手段を備えた動画像復号装置では復号画像を縮小しない、かつ圧縮する圧縮符号化方式に非可逆変換方式を利用しない限り、参照画像には縮小および圧縮による歪みが含まれる。   In a moving image decoding apparatus provided with means for reducing and compressing, a reference image includes distortion due to reduction and compression unless the decoded image is reduced and an irreversible conversion method is not used as a compression encoding method for compression.

この歪みはイントラ予測フレームが復号されるまで蓄積することになる。   This distortion is accumulated until the intra prediction frame is decoded.

このことは図５において、PSNRの劣化周期がＮフレームであることからも確認できる。   This can also be confirmed from the fact that the degradation period of PSNR is N frames in FIG.

ただし、画質劣化は生じるものの、表示する画像サイズが小さい場合などの簡易的な復号の用途では、劣化を許容できる場合もあり、縮小および圧縮する手段を備えた動画像復号装置は効果がある。
特開平10-66081号公報（第9-11頁、図１） 特開平11-298892号公報(図１） However, although the image quality is deteriorated, the use of simple decoding such as when the image size to be displayed is small may allow the deterioration, and the moving picture decoding apparatus having means for reducing and compressing is effective.
Japanese Patent Laid-Open No. 10-66081 (page 9-11, FIG. 1) Japanese Patent Laid-Open No. 11-298892 (FIG. 1)

しかしながら、これらの特許文献１〜２に開示された縮小および圧縮する手段を備えた動画像復号装置は、著しい画質劣化が生じる場合がある。   However, the moving picture decoding apparatus provided with the means for reducing and compressing disclosed in these Patent Documents 1 and 2 may cause significant image quality degradation.

具体例を用いて画質劣化の原因を説明する。   The cause of image quality degradation will be described using a specific example.

先に述べた映像シーケンスと異なる映像シーケンスを用いた場合のフレーム平均輝度信号PSNRを図６に示す。   FIG. 6 shows the frame average luminance signal PSNR when a video sequence different from the video sequence described above is used.

図６ではフレーム数が、６０〜１２０フレーム及び２７０〜３００フレーム付近のイントラ予測フレームのPSNRとイントラ予測フレーム直前のPSNRとの差は10dB以上にもなる。   In FIG. 6, the difference between the PSNRs of intra-prediction frames near 60 to 120 frames and 270 to 300 frames and the PSNR immediately before the intra-prediction frame is 10 dB or more.

PSNRが低下する原因は縮小および圧縮の処理が関係している。例えば、図７に示す画像が図８に示す符号化モードで圧縮符号化されたH.264ビットストリームを考える。   The cause of the decrease in PSNR is related to reduction and compression processing. For example, consider an H.264 bit stream in which the image shown in FIG. 7 is compression-encoded in the encoding mode shown in FIG.

図７に示した画像は、画像端から１５画素連続して黒い画素があり、１６画素目から本来の画像が始まる。また、このH.264ビットストリームにおけるインター(フレーム間)予測フレームは画像左端のMBが静止画のインター予測MBとして、右隣のMBがイントラ予測MBかつ予測モードは図９に示す水平方向予測として符号化されている。   The image shown in FIG. 7 has 15 consecutive black pixels from the edge of the image, and the original image starts from the 16th pixel. In the inter (interframe) prediction frame in this H.264 bit stream, the leftmost MB is the inter prediction MB of the still image, the right adjacent MB is the intra prediction MB, and the prediction mode is the horizontal prediction shown in FIG. It is encoded.

ここで、H.264ではイントラ予測モード、イントラ予測対象のブロックサイズは複数存在するが、説明を簡単にするため、ブロックサイズが１６×１６の水平方向予測としている。このH.264ビットストリームの輝度信号を縮小および圧縮し、伸長および拡大した時の動作を図１０に示す。   Here, in H.264, there are a plurality of intra prediction modes and intra prediction target block sizes, but in order to simplify the explanation, the block size is 16 × 16 horizontal prediction. FIG. 10 shows an operation when the luminance signal of the H.264 bit stream is reduced and compressed, and expanded and enlarged.

イントラ予測フレームでは通常の復号画素に対して水平1/2縮小および1-D DPCM圧縮を行う。この例の場合、１５画素目から１６画素目にかけ画素値の変化が大きい。そして、ＬＰＦや、偶数画素位置のダウンサンプルによる間引きを考慮すると、１３画素目から１５画素目にかけ画素値の変化が大きくなる。通常、非線形の量子化は予測誤差値が大きい場合に歪みを許容するように設計するので、縮小および圧縮による大きな歪みが混入した１５画素目に加え、それを利用し補間される１６画素目にも歪みが混入する。   In the intra prediction frame, horizontal decoding and 1-D DPCM compression are performed on normal decoded pixels. In this example, the change in pixel value is large from the 15th pixel to the 16th pixel. In consideration of LPF and thinning by down-sampling of even pixel positions, the pixel value changes greatly from the 13th pixel to the 15th pixel. Normally, non-linear quantization is designed to allow distortion when the prediction error value is large. Therefore, in addition to the 15th pixel mixed with large distortion due to reduction and compression, the 16th pixel interpolated using that is used. Also distortion is mixed.

インター予測フレームの画像左端のMBは多くの画素が黒い画素であるので静止画として符号化される。その結果、イントラ予測フレームにおける同位置のMBが参照画素となる。右隣のMBはイントラ予測MBかつ水平方向予測なので画像左端MBの１６画素目の一列が参照画素となる。ここで、このMBの参照画素はイントラ予測フレームの縮小および圧縮で生じた歪みを含んでいる。その結果、図９に示した水平方向予測で予測画像を作成すると縮小および圧縮による歪みはMB全体に伝播する。   The MB at the left end of the inter prediction frame image is encoded as a still image because many pixels are black pixels. As a result, the MB at the same position in the intra prediction frame becomes the reference pixel. Since the MB on the right is the intra prediction MB and the horizontal prediction, the 16th pixel column of the left end MB of the image is the reference pixel. Here, the MB reference pixel includes distortion caused by reduction and compression of the intra prediction frame. As a result, when a predicted image is created by the horizontal prediction shown in FIG. 9, distortion due to reduction and compression propagates to the entire MB.

このように、イントラ予測では参照画素として周辺画素を利用するので、縮小および圧縮による歪みはMBだけでなく、イントラ予測MBが連続する場合、歪みは空間的にも伝播する。   As described above, since the peripheral pixels are used as reference pixels in the intra prediction, distortion caused by reduction and compression is not limited to MB, and when intra prediction MBs continue, the distortion propagates spatially.

さらに、このインター予測フレームが参照フレームとして利用される場合、歪みは時間的にも伝搬する。その結果、著しい画質劣化が生じる。   Furthermore, when this inter prediction frame is used as a reference frame, distortion also propagates in time. As a result, significant image quality degradation occurs.

従って、従来の縮小、あるいは縮小および圧縮する手段を備えた動画像復号装置の問題点は、時間的、空間的な歪みの伝搬を考慮せずに、各処理単位の歪みが最小となるように縮小および圧縮していることである。   Therefore, the problem of the conventional video decoding apparatus provided with reduction or reduction and compression means is that distortion in each processing unit is minimized without considering temporal and spatial distortion propagation. It is shrinking and compressing.

そこで、本発明は上記課題に鑑みて発明されたものであって、その目的は、時間的、空間的な圧縮による歪みの伝搬、すなわち画質劣化を抑制できる縮小手段、あるいは縮小および圧縮手段を備えた動画像復号装置、復号画像記録装置、それらの方法及びプログラムを提供することにある。   Therefore, the present invention has been invented in view of the above problems, and its object is to provide a reduction means or a reduction and compression means that can suppress distortion propagation due to temporal and spatial compression, that is, image quality deterioration. Another object of the present invention is to provide a moving image decoding apparatus, a decoded image recording apparatus, a method and a program thereof.

上記課題を解決する本発明は、予測処理を利用して圧縮符号化された動画像ビットストリームを画像信号へ復号する復号手段と、前記復号手段により得られた復号画像信号を縮小し、縮小画像を得る縮小手段と、前記縮小手段により得られた縮小画像を保持する予測フレームメモリ手段と、前記予測フレームメモリ手段に保持された縮小画像を読み出し、これを拡大した後に前記復号手段の予測処理で利用するデータとして供給する拡大手段と、前記予測フレームメモリ手段に対する縮小画像の書き込み、又は、読み出しを制御するアドレス制御手段とを有する動画像復号装置において、前記縮小手段は、圧縮符号化方式における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御を行うように構成されていることを特徴とする。 The present invention for solving the above-mentioned problems is a decoding means for decoding a moving image bit stream that has been compression-encoded using prediction processing into an image signal, and a reduced image obtained by reducing the decoded image signal obtained by the decoding means. A predictive frame memory means for holding a reduced image obtained by the reduction means, a reduced image held in the predictive frame memory means, and after expanding this, the prediction means of the decoding means In the moving picture decoding apparatus having an enlargement unit that supplies data to be used, and an address control unit that controls writing or reading of the reduced image to or from the prediction frame memory unit, the reduction unit uses the prediction in the compression encoding method. based on the reference degree for each pixel indicating how often referred to in the process, the reference degree for larger pixel predetermined value, expansion Wherein the pixel value after is configured to perform control so as to hold the pixel value before reduction.

上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像の記録方法であって、復号画像を縮小して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近い値をとるようにすることを特徴とする。   The present invention for solving the above-described problems is a decoded image recording method for creating a predicted image of a predictive image encoding / decoding method, wherein when the decoded image is reduced and recorded, the region of the decoded image is predicted. The frequency of reference is estimated, and a decoded image region having a high reference frequency is set such that a pixel value after enlargement is closer to a pixel value before reduction than a region of a decoded image having a low reference frequency. And

上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像の記録方法であって、復号画像を縮小および圧縮して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも、拡大後の画素値が縮小前の画素値に近い値をとるようし、かつ、高い精度で圧縮することを特徴とする。   The present invention for solving the above problems is a decoded image recording method for creating a predicted image of a predicted image encoding / decoding method, and when the decoded image is reduced and compressed and recorded, the area of the decoded image is Estimating the frequency referred to in the prediction, so that the decoded image region having a high reference frequency takes a value closer to the pixel value before the reduced pixel value than the decoded image region having a low reference frequency, And it is characterized by compressing with high precision.

上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像を記録するプログラムであって、復号画像を縮小して記録する時に、前記復号画像の領域が予測で参照される頻度を推定する処理と、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近い値をとるようにする処理とを情報処理装置に実行させることを特徴とする。   The present invention for solving the above-described problems is a program for recording a decoded image for creating a predicted image of a predictive image encoding / decoding method, and when the decoded image is reduced and recorded, the region of the decoded image is predicted. In the process of estimating the frequency referred to in (1) and the decoded image area having a high reference frequency, the pixel value after enlargement is closer to the pixel value before the reduction than the decoded image area having a low reference frequency. The processing is executed by an information processing apparatus.

上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像を記録するプログラムであって、復号画像を縮小および圧縮して記録する時に、前記復号画像の領域が予測で参照される頻度を推定する処理と、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近い値をとるようにする処理と、高い精度で圧縮する処理と、を情報処理装置に実行させることを特徴とする。   The present invention for solving the above-described problems is a program for recording a decoded image for creating a predicted image of a predicted image encoding / decoding method, and when the decoded image is reduced and compressed and recorded, Is a process for estimating the frequency of reference in the prediction, and the decoded image region having a high reference frequency is set so that the pixel value after enlargement is closer to the pixel value before the reduction than the region of the decoded image having a low reference frequency. The information processing apparatus is caused to execute the processing to make and the processing to compress with high accuracy.

上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像の記録装置であって、復号画像を縮小して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近い値をとるようにする縮小手段を有することを特徴とする。   The present invention for solving the above-described problems is a decoded image recording apparatus for creating a predicted image of a predictive image encoding / decoding method, wherein when the decoded image is reduced and recorded, the region of the decoded image is predicted. Reduction means for estimating the frequency of reference, and causing a decoded image area having a high reference frequency to have a pixel value after enlargement that is closer to a pixel value before reduction than a decoded image area having a low reference frequency It is characterized by having.

上記課題を解決する本発明は、予測画像符号化復号方法の予測画像を作成するための復号画像の記録装置であって、復号画像を縮小および圧縮して記録する時に、前記復号画像の領域が予測で参照される頻度を推定し、参照頻度の高い復号画像の領域を、参照頻度の低い復号画像の領域よりも拡大後の画素値が縮小前の画素値に近い値をとるようにする縮小手段および高い精度で圧縮する圧縮手段を有することを特徴とする。   The present invention for solving the above problems is a decoded image recording apparatus for creating a predicted image of a predictive image encoding / decoding method, wherein when the decoded image is reduced and compressed and recorded, the area of the decoded image is Reduce the estimated reference frequency in the decoded image area so that the pixel value after enlargement is closer to the pixel value before reduction than the decoded image area with the lower reference frequency And compression means for compressing with high accuracy.

上記課題を解決する本発明は、予測処理を利用する画像符号復号化方式により復号された復号画像信号を縮小し、縮小画像を予測フレームメモリに保持し、前記予測フレームメモリに保持された縮小画像を読み出し、これを拡大した後に前記予測処理で利用する動画像復号方法において、動画像復号装置が、前記画像符号復号化方式における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御することを特徴とする。 The present invention that solves the above problem reduces a decoded image signal decoded by an image encoding / decoding method using prediction processing , holds the reduced image in a prediction frame memory, and reduces the reduced image held in the prediction frame memory In the moving picture decoding method that is used in the prediction process after being read out and enlarged , the moving picture decoding apparatus is based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the picture code decoding method . For a pixel having a reference degree larger than a predetermined value , control is performed such that the pixel value after enlargement retains the pixel value before reduction.

上記課題を解決する本発明は、予測処理を利用する画像符号復号化方式により復号された画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを予測フレームメモリに保持し、前記予測フレームメモリに保持された圧縮画像を読み出し、これを伸張・拡大した後に前記予測処理で利用する動画像復号方法において、動画像復号装置が、前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御し、かつ、前記参照度の大きさに応じた量子化代表値を表す割当ビット数を用いて圧縮データ量を制御することを特徴とする。 The present invention that solves the above problem reduces the image signal decoded by the image coding / decoding method using the prediction process , performs the quantization process by assigning a different number of bits to each pixel, and performs the compression process. In a moving picture decoding method for storing data in a prediction frame memory, reading out a compressed image held in the prediction frame memory, expanding and expanding the compressed image, and using the same in the prediction process , the moving picture decoding apparatus includes: Based on the reference degree for each pixel indicating the frequency referred to in the prediction process in decoding, the pixel value after enlargement retains the pixel value before reduction for pixels with a reference degree greater than a predetermined value. And controlling the amount of compressed data by using the number of allocated bits that represents a quantized representative value corresponding to the magnitude of the reference degree .

上記課題を解決する本発明は、予測処理を利用する画像符号復号化により復号された画像信号を縮小し、縮小画像を予測フレームメモリに保持し、前記予測フレームメモリに保持された縮小画像を読み出し、これを拡大した後に前記予測処理で利用するコンピュータに、前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御する処理を情報処理装置に実行させることを特徴とする。 The present invention that solves the above problem reduces an image signal decoded by image code decoding using prediction processing , holds the reduced image in a prediction frame memory, and reads out the reduced image held in the prediction frame memory Then, after enlarging this, the computer used in the prediction process, based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the image code decoding, for pixels whose reference degree is larger than a predetermined value Is characterized by causing the information processing apparatus to execute processing for controlling the pixel value after enlargement to retain the pixel value before reduction.

上記課題を解決する本発明は、予測処理を利用する画像符号復号化により復号された画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを予測フレームメモリに保持し、前記予測フレームメモリに保持された圧縮画像を読み出し、これを伸張・拡大した後に前記予測処理で利用する動画像復号方法において、動画像復号装置が、前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御し、かつ、前記参照度の大きさに応じた量子化代表値を表す割当ビット数を用いて圧縮データ量を制御することを特徴とする。 The present invention that solves the above problem reduces the image signal decoded by image code decoding using prediction processing , performs quantization processing by assigning different numbers of bits to each pixel, and performs compression processing. Is stored in the prediction frame memory, the compressed image stored in the prediction frame memory is read out, and after the expansion / expansion of the compressed image , the video decoding device uses the image code decoding Based on the reference degree of each pixel indicating the frequency referred to in the prediction process in the conversion , the pixel value after enlargement is controlled so that the pixel value after enlargement retains the pixel value before reduction for a pixel with a reference degree greater than a predetermined value. In addition, the compressed data amount is controlled by using the number of assigned bits representing the quantized representative value corresponding to the magnitude of the reference degree .

上記課題を解決する本発明は、予測処理を利用する画像符号復号化により復号された画像信号を縮小し、縮小画像を予測フレームメモリに保持し、前記予測フレームメモリに保持された縮小画像を読み出し、これを拡大した後に前記予測処理で利用するコンピュータに、前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値拡を保持するように制御する処理を情報処理装置に実行させることを特徴とする。 The present invention that solves the above problem reduces an image signal decoded by image code decoding using prediction processing , holds the reduced image in a prediction frame memory, and reads out the reduced image held in the prediction frame memory Then, after enlarging this, the computer used in the prediction process, based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the image code decoding, for pixels whose reference degree is larger than a predetermined value Is characterized by causing the information processing apparatus to execute processing for controlling the pixel value after enlargement to retain the pixel value extension before reduction.

上記課題を解決する本発明は、予測処理を利用する画像符号復号化により復号された画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを予測フレームメモリに保持し、前記予測フレームメモリに保持された圧縮画像を読み出し、これを伸張・拡大した後に前記予測処理で利用するコンピュータに、前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御し、かつ、前記参照度の大きさに応じた量子化代表値を表す割当ビット数を用いて圧縮データ量を制御する処理を情報処理装置に実行させることを特徴とする。 The present invention that solves the above problem reduces the image signal decoded by image code decoding using prediction processing , performs quantization processing by assigning different numbers of bits to each pixel, and performs compression processing. Is read in the prediction frame memory, the compressed image held in the prediction frame memory is read out, and after being expanded / expanded, the computer used in the prediction process is referred to in the prediction process in the image code decoding the on the basis of the reference degree for each pixel indicating for reference of a predetermined value larger than the pixel, it is controlled so that the pixel value after expansion to hold the pixel value before reduction, and the magnitude of the reference level The information processing apparatus is caused to execute processing for controlling the amount of compressed data by using the number of assigned bits representing a quantized representative value corresponding to the value.

本発明の効果は、縮小または圧縮による歪み、すなわち画質劣化を抑制できる縮小手段、あるいは縮小および圧縮手段を備えた動画像復号装置及びその技術を提供することができる。   The effects of the present invention can provide a reduction means that can suppress distortion due to reduction or compression, that is, a reduction in image quality, or a moving picture decoding apparatus including a reduction and compression means, and a technique thereof.

その理由は、復号装置が対象とする圧縮符号化方式の参照する画素位置からフレーム内のある画素位置の参照されやすさを予め設定して、参照度重み付け縮小部１０２あるいは参照度重み付け圧縮部１０６を実装するので、参照度重み付け縮小部１０２では、参照されやすい画素に対しては、拡大後の画像特性が縮小前の画像特性を保持するようにＬＰＦの係数を定め、間引きの対象画素としないような制御をかけ、縮小し、参照度重み付け圧縮部１０６では、参照されやすい画素に対しては、量子化代表値の割り当てビット数(量子化代表値数)を多くするような制御をかけ、圧縮する。その結果、参照されやすい画素の歪みを軽減し、時間的、空間的な歪みの伝搬を抑制することが可能となるからである。   The reason is that the reference degree weighting reduction unit 102 or the reference degree weighting compression unit 106 is set in advance by setting the ease of referring to a certain pixel position in the frame from the pixel position referred to by the compression encoding method targeted by the decoding apparatus. Therefore, the reference weighting reduction unit 102 determines the LPF coefficient so that the image characteristic after enlargement retains the image characteristic before reduction for pixels that are easily referred to, and does not set the pixel to be thinned out. Applying such control, the reference degree weighting compression unit 106 applies control to increase the number of bits assigned to the quantized representative value (number of quantized representative values) for pixels that are easily referred to, Compress. As a result, it is possible to reduce distortion of a pixel that is easily referred to and suppress propagation of temporal and spatial distortion.

ここで、参照されやすさは、圧縮符号化方式の参照する画素位置に加え、復号装置が対象とする圧縮符号化方式の圧縮符号化処理単位、参照度重み付け縮小部が対象とする縮小率、画素の間引き位置、参照度重み付け圧縮部が対象とする圧縮符号化方式の参照する画素位置、圧縮処理単位、圧縮率のいずれか一つ以上を用いて設定してもよい。   Here, the ease of reference is not only the pixel position referred to by the compression coding method, but also the compression coding processing unit of the compression coding method targeted by the decoding device, the reduction rate targeted by the reference degree weighting reduction unit, The pixel thinning position, the pixel position referred to by the compression coding method targeted by the reference degree weighting compression unit, the compression processing unit, or the compression rate may be used.

本発明の実際の効果として、図６の結果に実施例２の結果を加えたフレーム平均輝度信号PSNRを、図２２に示す。図２２中、Embodiment2が実施例２を示している。
図より本発明ではPSNRの劣化が抑制できていることが分かる。As an actual effect of the present invention, a frame average luminance signal PSNR obtained by adding the result of Example 2 to the result of FIG. 6 is shown in FIG. In FIG. 22, Embodiment 2 indicates the second embodiment.
From the figure, it can be seen that PSNR degradation can be suppressed in the present invention.

本発明の実施形態の構成を示すブロック図である。It is a block diagram which shows the structure of embodiment of this invention. 特許文献1に開示された動画像復号装置の構成を示すブロック図である。11 is a block diagram showing a configuration of a moving picture decoding device disclosed in Patent Document 1. FIG. 特許文献1に開示された動画像復号装置においてH.264を用いた構成例を示すブロック図である。FIG. 2 is a block diagram illustrating a configuration example using H.264 in the video decoding device disclosed in Patent Document 1. 復号画像の縮小および圧縮に利用する圧縮符号化方式の一例を示す図である。It is a figure which shows an example of the compression encoding system utilized for reduction and compression of a decoded image. 従来の動画像復号装置の効果を示すグラフである。It is a graph which shows the effect of the conventional moving image decoding apparatus. 従来の動画像復号装置の問題点を示すグラフである。It is a graph which shows the problem of the conventional moving image decoding apparatus. 従来の動画像復号装置の問題点を説明するための具体例である。It is a specific example for demonstrating the problem of the conventional moving image decoding apparatus. 従来の動画像復号装置の問題点を説明するための具体例である。It is a specific example for demonstrating the problem of the conventional moving image decoding apparatus. H.264イントラ予測モードを説明する図である。It is a figure explaining H.264 intra prediction mode. 縮小および圧縮による歪み発生原因を説明する図である。It is a figure explaining the cause of distortion generation by reduction and compression. 本発明の第２の実施形態の構成を示すブロック図である。It is a block diagram which shows the structure of the 2nd Embodiment of this invention. 実施例１における各画素位置の参照度を示す図である。6 is a diagram illustrating a reference degree of each pixel position in Embodiment 1. FIG. 実施例１における各画素位置の別の参照度を示す図である。6 is a diagram illustrating another reference degree of each pixel position in Embodiment 1. FIG. 実施例１における各画素位置の別の参照度を示す図である。6 is a diagram illustrating another reference degree of each pixel position in Embodiment 1. FIG. 実施例２における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。It is a figure which shows the number of bits and reference relationship of the quantization representative value of each pixel position in Example 2. 実施例２における各画素位置の縮小時の参照度、量子化代表値の割り当てビット数および参照関係を示す図である。It is a figure which shows the reference degree at the time of the reduction | decrease of each pixel position in Example 2, the number of allocation bits of a quantization representative value, and a reference relationship. 実施例２における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。It is a figure which shows the number of bits and reference relationship of the quantization representative value of each pixel position in Example 2. 実施例２における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。It is a figure which shows the number of bits and reference relationship of the quantization representative value of each pixel position in Example 2. 実施例２における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。It is a figure which shows the number of bits and reference relationship of the quantization representative value of each pixel position in Example 2. 実施例２における各画素位置の量子化代表値の割り当てビット数および参照関係を示す図である。It is a figure which shows the number of bits and reference relationship of the quantization representative value of each pixel position in Example 2. 実施例３における本発明による動画像復号装置をインプリメントした情報処理システムの一般的ブロック構成図である。It is a general block block diagram of the information processing system which implemented the moving image decoder by this invention in Example 3. FIG. 図６の結果に実施例２の結果を加えたフレーム平均輝度信号PSNRを示した図である。It is the figure which showed the frame average luminance signal PSNR which added the result of Example 2 to the result of FIG.

符号の説明Explanation of symbols

１０１、２０１、３１ 復号部
１０２ 参照度重み付け縮小部
１０３ 予測フレームメモリ部
１０４ 拡大部
１０５ アドレス制御部
１０６ 参照度重み付け圧縮部
１０７ 伸長部
２０２ 水平ローパスフィルタおよびデシメーション
２０３ ブロックコンプレッサ
２０４ 水平アップサンプル
２０５、２０９ ブロックデコンプレッサ
２０６ 内部メモリ・バス
２０７ 多重化／分配
２０８ ビデオ・フレームメモリ
２１０ ディスプレイプロセッサ
２１１ ディスプレイデバイス
２０１１、３０１ バッファ
２０１２ 可変長復号
２０１３、３０３ 逆量子化
２０１４ 逆離散コサイン変換
２０１５、３０５ 加算
２０１６、３０６ 動き補償
３０２ 可変長復号
３０４ 逆整数変換
３０７ イントラ予測
３０８ デブロックフィルタ101, 201, 31 Decoding unit 102 Reference degree weighting reduction unit 103 Predictive frame memory unit 104 Expansion unit 105 Address control unit 106 Reference degree weighting compression unit 107 Decompression unit 202 Horizontal low-pass filter and decimation 203 Block compressor 204 Horizontal upsamples 205, 209 Block decompressor 206 Internal memory bus 207 Multiplexing / distribution 208 Video frame memory 210 Display processor 211 Display device 2011, 301 Buffer 2012 Variable length decoding 2013, 303 Inverse quantization 2014 Inverse discrete cosine transform 2015, 305 Addition 2016, 306 Motion compensation 302 variable length decoding 304 inverse integer transformation 307 intra prediction 308 deblocking filter

次に、本発明の実施の形態について図面を参照して詳細に説明する。   Next, embodiments of the present invention will be described in detail with reference to the drawings.

図１は、本発明の実施形態による動画像復号装置の全体構成を示すブロック図である。
本実施の形態の動画像復号装置は、復号部１０１と、参照度重み付け縮小部１０２と、予測フレームメモリ部１０３と、拡大部１０４と、アドレス制御部１０５とから構成される。FIG. 1 is a block diagram showing an overall configuration of a moving picture decoding apparatus according to an embodiment of the present invention.
The moving picture decoding apparatus according to the present embodiment includes a decoding unit 101, a reference degree weighting reduction unit 102, a prediction frame memory unit 103, an expansion unit 104, and an address control unit 105.

次に、本実施の形態の動画像復号装置の動作を説明する。   Next, the operation of the moving picture decoding apparatus according to the present embodiment will be described.

復号部１０１は、入力された圧縮動画像ビットストリームと、拡大部１０４で拡大された参照画像を用いて画像を復号する。復号部１０１で復号された復号画像は、参照度重み付け縮小部１０２で、縮小され、情報量が削減される。   The decoding unit 101 decodes an image using the input compressed video bit stream and the reference image enlarged by the enlargement unit 104. The decoded image decoded by the decoding unit 101 is reduced by the reference degree weighting reduction unit 102 to reduce the amount of information.

参照度重み付け縮小部１０２で縮小された画像は、後に復号する画像の参照画像として用いられるために予測フレームメモリ部１０３へ書き込まれる。書き込みにおいては、アドレス制御部１０５は、縮小画像を書き込むフレームメモリのアドレスを作成し、アドレス線を介して、予測フレームメモリ部１０３に供給する。   The image reduced by the reference degree weighting reduction unit 102 is written in the prediction frame memory unit 103 to be used as a reference image for an image to be decoded later. In writing, the address control unit 105 creates an address of a frame memory to which a reduced image is written, and supplies the frame memory address to the prediction frame memory unit 103 via an address line.

書き込まれた縮小画像は、復号のために拡大部１０４で拡大される。   The written reduced image is enlarged by the enlargement unit 104 for decoding.

ここで参照度とは、フレーム内のある画素位置の参照されやすさ(予測に利用される頻度)を表し、正確な参照度は圧縮動画像ビットストリームを解析することで求めることもできる。しかし、本実施の形態では、復号装置が対象とする圧縮符号化方式の参照する画素位置から予め参照度を推定し定める。   Here, the reference level represents the ease with which a certain pixel position in the frame is referred to (frequency used for prediction), and the accurate reference level can also be obtained by analyzing the compressed video bitstream. However, in the present embodiment, the reference degree is estimated and determined in advance from the pixel position referred to by the compression coding method targeted by the decoding apparatus.

参照度重み付け縮小部１０２は、復号画像を縮小するという点では水平ＬＰＦおよびデシメーション２０２と同様の動作をする。しかし、参照度重み付け縮小部１０２の縮小方式は推定された参照度を考慮して設計され、実装されているので、参照度が大きい画素値に対しては拡大後の画像特性が縮小前の画像特性を保持するようにＬＰＦの係数を定め、間引きの対象画素としないような制御をかけ、縮小する。ここで、参照度は圧縮符号化方式の参照する画素位置に加え、復号装置が対象とする圧縮符号化方式の圧縮符号化処理単位、参照度重み付け縮小部１０２の縮小率、画素の間引き位置のいずれか一つ以上を用いて設定してもよい。   The reference degree weighting reduction unit 102 operates in the same manner as the horizontal LPF and decimation 202 in that the decoded image is reduced. However, since the reduction method of the reference degree weighting reduction unit 102 is designed and implemented in consideration of the estimated reference degree, the image characteristic after enlargement is the image before reduction for a pixel value with a high reference degree. The LPF coefficient is determined so as to maintain the characteristics, and the control is performed so as not to set the pixel to be thinned out, thereby reducing the size. Here, in addition to the pixel position referred to by the compression coding method, the reference degree is the compression coding processing unit of the compression coding method targeted by the decoding apparatus, the reduction rate of the reference degree weighting reduction unit 102, and the pixel decimation position. You may set using any one or more.

次に、本発明の第２の発明を実施するための最良の形態について図面を参照して詳細に説明する図１１は、本発明の第２の実施形態による動画像復号装置の全体構成を示すブロック図である。   Next, the best mode for carrying out the second invention of the present invention will be described in detail with reference to the drawings. FIG. 11 shows the overall configuration of a moving picture decoding apparatus according to the second embodiment of the present invention. It is a block diagram.

第２の実施形態の動画像復号装置は、第１の実施形態の動画像復号装置に参照度重み付け圧縮部１０６、伸長部１０７を追加した構成となる。   The video decoding device according to the second embodiment has a configuration in which a reference degree weighting compression unit 106 and an expansion unit 107 are added to the video decoding device according to the first embodiment.

復号部１０１は、入力された圧縮動画像ビットストリームと、伸長部１０７で伸長、拡大部１０４で拡大された参照画像を用いて画像を復号する。復号部１０１で復号された復号画像は、参照度重み付け縮小部１０２で縮小され、参照度重み付け圧縮部１０６で画素ごとあるいは圧縮処理単位ごとに、圧縮され、情報量が削減される。   The decoding unit 101 decodes an image using the input compressed video bit stream and the reference image expanded by the expansion unit 107 and expanded by the expansion unit 104. The decoded image decoded by the decoding unit 101 is reduced by the reference degree weighting reduction unit 102 and compressed by the reference degree weighting compression unit 106 for each pixel or for each compression processing unit, thereby reducing the amount of information.

参照度重み付け縮小部１０２で縮小、参照度重み付け圧縮部１０６で圧縮された圧縮データは、後に復号する画像の参照画像として用いられるために予測フレームメモリ部１０３へ書き込まれる。書き込みにおいては、アドレス制御部１０５は、圧縮データを書き込むフレームメモリのアドレスを作成し、アドレス線を介して、予測フレームメモリ部１０３に供給する。   The compressed data reduced by the reference degree weighting reduction unit 102 and compressed by the reference degree weighting compression unit 106 is written to the prediction frame memory unit 103 to be used as a reference image of an image to be decoded later. In writing, the address control unit 105 creates an address of the frame memory to which the compressed data is written, and supplies the frame memory address to the prediction frame memory unit 103 via the address line.

書き込まれた圧縮データは、復のために伸長部１０７で伸長、拡大部１０４で拡大される。   The written compressed data is expanded by the expansion unit 107 and expanded by the expansion unit 104 for recovery.

参照度重み付け圧縮部１０６は、復号画像を圧縮するという点ではブロックコンプレッサ２０３と同様の動作をする。しかし、参照度重み付け圧縮部１０６が対象とする圧縮符号化方式は推定された参照度を考慮して設計され、実装されている。ここで、参照度は圧縮符号化方式の参照する画素位置に加え、復号装置が対象とする圧縮符号化方式の圧縮符号化処理単位、参照度重み付け縮小部１０２の縮小率、画素の間引き位置、参照度重み付け圧縮部１０６が対象とする圧縮符号化方式の参照する画素位置、圧縮処理単位、圧縮率のいずれか一つ以上を用いて設定してもよい。   The reference degree weighting compression unit 106 operates in the same manner as the block compressor 203 in that the decoded image is compressed. However, the compression coding method targeted by the reference degree weighting compression unit 106 is designed and implemented in consideration of the estimated reference degree. Here, in addition to the pixel position referred to by the compression coding method, the reference degree is a compression coding processing unit of the compression coding method targeted by the decoding device, a reduction rate of the reference weight weighting reduction unit 102, a pixel thinning position, It may be set using any one or more of a pixel position, a compression processing unit, and a compression rate to be referred to by the compression coding method targeted by the reference degree weighting compression unit 106.

次に、具体的な実施例を用いて本発明を実施するための最良の形態の構成および動作を説明する。   Next, the configuration and operation of the best mode for carrying out the present invention will be described using specific examples.

本実施例では、復号部１０１としてH.264を用い、参照度重み付け縮小部１０２では水平1/2の縮小を行う。   In this embodiment, H.264 is used as the decoding unit 101, and the reference weighting reduction unit 102 performs horizontal ½ reduction.

ここで、参照度重み付け縮小部１０２における参照度は、H.264のイントラ予測の参照画素位置および圧縮符号化処理単位、縮小率、画素の間引き位置から決定する。例えばH.264の圧縮符号化処理単位としては2、4、8、16が考えられる。また、本実施例の場合、縮小率は1/2となる。   Here, the reference degree in the reference degree weighting reduction unit 102 is determined from the reference pixel position of H.264 intra prediction, the compression encoding processing unit, the reduction rate, and the pixel thinning position. For example, 2, 4, 8, and 16 are conceivable as H.264 compression encoding processing units. In the case of this embodiment, the reduction ratio is 1/2.

参照度は式１（数１）で定める。   The reference degree is determined by Equation 1 (Equation 1).

Figure 0004973886

この参照度はH.264のイントラ予測の参照画素位置および縮小率、ダウンサンプルにおける画素の間引き位置を考慮しており、R0>R1>R2を満たしている。
Figure 0004973886
This reference degree considers the reference pixel position and reduction ratio of H.264 intra prediction, and the thinned-out position of pixels in downsampling, and satisfies R0>R1> R2.

参照度重み付け縮小部１０２で用いるＬＰＦは、参照度に応じてフィルタの強度を変更する。   The LPF used in the reference degree weighting reduction unit 102 changes the strength of the filter according to the reference degree.

具体的には参照度が大きいものほど、拡大後の画像特性が縮小前の画像特性を保持するようにする。参照度R1に対して(4, 8, 4)/16のような３タップのフィルタ処理を行う場合、R1より参照度の大きいR0に対しては拡大後の画像特性が縮小前の画像特性を保持するように(3, 10, 3)/16や(0, 16, 0)/16のフィルタ処理を行う。また、最も参照度の小さいR2はダウンサンプルの間引き対象画素とする。   Specifically, the larger the reference degree, the more the image characteristic after enlargement holds the image characteristic before reduction. When 3-tap filter processing such as (4, 8, 4) / 16 is performed on the reference level R1, the image characteristic after enlargement is the image characteristic before reduction for R0 with a higher reference degree than R1. Filter processing of (3, 10, 3) / 16 or (0, 16, 0) / 16 is performed so as to hold. Further, R2 having the smallest reference degree is set as a pixel to be thinned out for down-sampling.

本実施例における参照度を図１２に示す。   FIG. 12 shows the reference degree in this embodiment.

本実施例では、イントラ予測の参照画素位置および縮小率から参照度R0, R1, R2を設定し、参照度の大きい画素に対しては拡大後の画像特性が縮小前の画像特性を保持するようにＬＰＦの係数を定め、間引きの対象画素としないような制御をかけ縮小する。   In this embodiment, the reference degrees R0, R1, and R2 are set from the reference pixel position and the reduction rate of intra prediction, and the image characteristics after enlargement retain the image characteristics before reduction for pixels with a large reference degree. The coefficient of LPF is determined in (1), and the control is performed so as not to be the pixel to be thinned out.

その結果、図７、８、１０のような例では縮小による歪みを抑制できる。   As a result, in the examples as shown in FIGS.

また、本実施例では参照度を定めるためにイントラ予測の参照画素位置、縮小率、画素の間引き位置を考慮したが、縮小画像のエイリアシングを減らすには参照度R0となる画素は減らした方がよい。   In this embodiment, the intra prediction reference pixel position, the reduction rate, and the pixel thinning position are considered in order to determine the reference degree. However, in order to reduce aliasing of the reduced image, it is better to reduce the pixel having the reference degree R0. Good.

例えば、図１３に示すようにMB境界のイントラ参照画素位置のみをR0と定めることで、R0となる画素を減らせる。
また、R0となる画素をさらに減らすため、もしくは実装を容易にするため図１４に示すように縦方向MB境界のイントラ参照画素位置のみをR0を定めることも可能である。For example, as shown in FIG. 13, by defining only the intra-reference pixel position at the MB boundary as R0, the pixel that becomes R0 can be reduced.
Further, in order to further reduce the number of pixels to be R0 or to facilitate mounting, it is possible to determine R0 only for the intra reference pixel position on the vertical MB boundary as shown in FIG.

また、本実施例では３種類の参照度を定めたが、３種類よりも多くの参照度を定めることも可能である。   Further, in this embodiment, three types of reference degrees are determined, but it is possible to determine more than three types of reference degrees.

また、本実施例では３タップフィルタを用いたが、参照度に応じて任意のタップ数のフィルタを定めることも可能である。   In this embodiment, a 3-tap filter is used, but a filter with an arbitrary number of taps can be determined according to the reference degree.

また、本実施例では水平方向の縮小を用いたが、垂直方向の縮小および水平、垂直方向の縮小も同様に参照度を定めることが可能である。   In this embodiment, horizontal reduction is used. However, it is possible to determine the reference degree in the same way for vertical reduction and horizontal and vertical reduction.

次に、具体的な実施例を用いて本発明を実施するため第２の実施の形態の構成および動作を説明する。   Next, the configuration and operation of the second embodiment will be described in order to implement the present invention using specific examples.

本実施例では、復号部１０１、参照度重み付け縮小部１０２は実施例１と同様であるので説明を省略し、動作の異なる参照度重み付け圧縮部の動作を説明する。   In the present embodiment, since the decoding unit 101 and the reference degree weighting reduction unit 102 are the same as those in the first embodiment, the description thereof will be omitted, and the operation of the reference degree weighting compression unit having a different operation will be described.

参照度重み付け圧縮部１０６の圧縮符号化方式として1-D DPCMを用いる。   1-D DPCM is used as the compression encoding method of the reference degree weighting compression unit 106.

ここで、1-D DPCMではX画素を圧縮処理単位とする。Xの値は、H.264の圧縮符号化処理単位、実装の容易さから決定する。   Here, in 1-D DPCM, the X pixel is used as a compression processing unit. The value of X is determined from the H.264 compression encoding processing unit and ease of implementation.

実施例１における参照度も考慮し、参照度重み付け圧縮部で用いる参照度を式２（数２）で定める。   Considering the reference degree in the first embodiment, the reference degree used in the reference degree weighting compression unit is determined by Expression 2 (Equation 2).

Figure 0004973886
この参照度はH.264の「イントラ予測符号化対象ブロックの左ブロックを参照画素として利用する」という参照される画素位置を考慮しており、R0>R1を満たしている。
参照度重み付け圧縮部１０６に用いる1-D DPCMでは、参照度をそのまま量子化代表値の割り当てビット数として用いる。この場合、参照度重み付け圧縮部の圧縮率はR0、R1で決まる。
Figure 0004973886
 This reference degree considers the pixel position referred to in H.264 “use the left block of the intra prediction encoding target block as a reference pixel”, and satisfies R0> R1.
In the 1-D DPCM used for the reference degree weighting compression unit 106, the reference degree is used as it is as the number of bits assigned to the quantized representative value. In this case, the compression rate of the reference degree weighting compression unit is determined by R0 and R1.

本実施例における量子化代表値の割り当てビット数および参照関係を図１５に示す。   FIG. 15 shows the number of bits assigned to quantized representative values and the reference relationship in this embodiment.

本実施例では、圧縮処理単位の右端画素を予測画素の起点とし、右画素を予測画素とする。   In the present embodiment, the right end pixel of the compression processing unit is the starting point of the prediction pixel, and the right pixel is the prediction pixel.

図１２に示した縮小部で利用する参照度に対して、本実施例でXの値を８として用いた場合、図１６に示すように各MBの参照画素となる周辺画素に対して量子化代表値の割り当てビット数をR0にすることになる。   When the value of X is used as 8 in this embodiment with respect to the reference degree used in the reduction unit shown in FIG. 12, the quantization is performed on the peripheral pixels serving as the reference pixels of each MB as shown in FIG. The assigned number of representative values is set to R0.

その結果、図７、８、１０のような例では縮小および圧縮による歪みを抑制できる。   As a result, in the examples shown in FIGS. 7, 8, and 10, distortion due to reduction and compression can be suppressed.

また、本実施例では図１２に示した縮小部で利用する参照度の例を示したが、これに限らず、図１３、１４など様々な縮小方式の組み合わせに適応できる。   In the present embodiment, an example of the reference degree used in the reduction unit shown in FIG. 12 is shown, but the present invention is not limited to this, and can be applied to combinations of various reduction methods such as FIGS.

また、本実施例では圧縮処理単位内で２つの参照度を定めたが、各画素毎に参照度を定めることも可能である。   In the present embodiment, two reference degrees are defined within the compression processing unit, but it is also possible to define a reference degree for each pixel.

この時、参照度の設定の際に1-D DPCMの「右画素を予測画素とする」という予測画素位置を考慮すると、左端画素に近いほど歪みの伝搬は小さくなるので、圧縮処理単位内の右画素ほど参照度を大きくするように定めることも可能である。   At this time, considering the predicted pixel position of “the right pixel is the predicted pixel” in the 1-D DPCM when setting the reference degree, the closer the leftmost pixel is, the smaller the propagation of distortion becomes. It is also possible to determine so that the degree of reference increases as the right pixel is reached.

また、本実施例では右画素、図４では左画素を予測画素としていたが、上画素もしくは下画素を予測画素とすることも可能である。ただし、H.264の「イントラ予測符号化対象ブロックの上ブロックを参照画素として利用する」という参照画素位置を考慮すれば、垂直画素位置に対しても式２（数２）と同様の参照度を定め、下画素を予測画素にすべきである。   In the present embodiment, the right pixel and the left pixel in FIG. 4 are the predicted pixels, but the upper pixel or the lower pixel may be the predicted pixel. However, in consideration of the reference pixel position of “use the upper block of the intra prediction encoding target block as a reference pixel” of H.264, the reference degree similar to Expression 2 (Equation 2) is also applied to the vertical pixel position. And the lower pixel should be the predicted pixel.

図１６の実施例では右画素を予測画素としていた。図１６の実施例の圧縮符号化方式を用いてラスタスキャン表示をする場合、表示順に並び替えるために復号画像を一時的に保持しておく必要があり、実用上望ましくない場合がある。そこで、本実施例３では参照度を式３（数３）で定める。   In the embodiment of FIG. 16, the right pixel is the predicted pixel. When raster scan display is performed using the compression encoding method of the embodiment of FIG. 16, it is necessary to temporarily hold the decoded images in order to rearrange them in the display order, which may not be practically desirable. Therefore, in the third embodiment, the reference degree is determined by Expression 3 (Equation 3).

Figure 0004973886
式３（数３）で定めた参照度を利用すると、参照度R0となる画素の水平位置をずらすことが可能になり、左画素を予測画素としながらも実施例２と同様の効果を得ることができる。
本実施例において、Xを８とした場合の量子化代表値の割り当てビット数および参照関係を図１７に示す。
Figure 0004973886
 If the reference degree defined by Equation 3 (Equation 3) is used, the horizontal position of the pixel having the reference degree R0 can be shifted, and the same effect as in the second embodiment can be obtained while the left pixel is a predicted pixel. Can do.
FIG. 17 shows the number of bits assigned to the quantized representative value and the reference relationship when X is 8 in this embodiment.

各MBの参照画素となる周辺画素の割り当てビット数は図１６と同じになる。   The number of bits assigned to peripheral pixels serving as reference pixels for each MB is the same as in FIG.

上述した図１６、１７の実施例は、図７、８、１０で示したように参照画素を含むブロックが静止画として符号化されていれば有効である。しかし、一般的には全てのブロックが静止画として符号化されることはなく、従来の圧縮する手段を備えた動画像復号装置と同様の問題が生じる可能性がある。そこで、本実施例ではインター予測で参照されるブロック内に、割り当てビット数がR0となる参照画素が含まれる確率が高くなるように参照度を定める。
具体的には、縦または横に隣接する画素と参照度が等しくならないように定める。一例として式４（数４）で参照度を定める。The embodiments of FIGS. 16 and 17 described above are effective if the block including the reference pixel is encoded as a still image as shown in FIGS. However, in general, not all blocks are encoded as a still image, and there is a possibility that the same problem as that of a moving image decoding apparatus having a conventional means for compressing may occur. Therefore, in the present embodiment, the reference degree is determined so that the probability that a block referred to in inter prediction includes a reference pixel having an assigned bit number R0 is high.
Specifically, it is determined so that the reference degree is not equal to pixels adjacent vertically or horizontally. As an example, the reference degree is determined by Expression 4 (Equation 4).

Figure 0004973886
本実施例における量子化代表値の割り当てビット数および参照関係を図１８に示す。
Figure 0004973886
 FIG. 18 shows the number of bits assigned to quantized representative values and the reference relationship in this embodiment.

Ｘ＝２、４、８として本実施例を用いた場合、図１５に示すように各MBの参照画素となる周辺画素に対してR0(>R1)ビットを割り当てることになる。   When this embodiment is used with X = 2, 4, and 8, as shown in FIG. 15, R0 (> R1) bits are assigned to peripheral pixels that are reference pixels of each MB.

インター予測で静止画ブロックが参照された場合は、図１２等に比べ割り当てビット数がR0となる参照画素は減るが、一般的なインター予測を考えた場合、参照ブロック内に割り当てビット数がR0となる参照画素が含まれる確率は高くなる。   When a still image block is referred to in inter prediction, the number of reference pixels in which the number of assigned bits is R0 is reduced compared to FIG. 12 and the like. However, when general inter prediction is considered, the number of assigned bits in the reference block is R0. The probability that the reference pixel becomes is high.

この例では1ラインごとに参照度、参照関係を設定したが、例えば、式５（数５）および図１９に示すようにX種類のものを設定することも可能である。   In this example, the reference degree and the reference relationship are set for each line. However, for example, X types can be set as shown in Equation 5 (Equation 5) and FIG.

Figure 0004973886
ここで、本実施例ではイントラ予測だけでなく、インター予測の参照画素に対しても同様の効果が得られる。そこで、復号部１０１としてH.264以外のインター予測を用いた圧縮符号化方式を利用することができる。
Figure 0004973886
 In this embodiment, the same effect can be obtained not only for intra prediction but also for inter prediction reference pixels. Therefore, a compression encoding method using inter prediction other than H.264 can be used as the decoding unit 101.

上述した図１６〜１９の実施例では参照度重み付け圧縮部１０６の圧縮符号化方式として1-D DPCMを用いていた。   16 to 19 described above, 1-D DPCM is used as the compression coding method of the reference degree weighting compression unit 106.

本発明は圧縮符号化方式としては任意の方式を用いることができる。そこで本実施例では圧縮符号化方式として２次元DPCM (2-D DPCM)を用いる。   In the present invention, any method can be used as the compression encoding method. Therefore, in this embodiment, two-dimensional DPCM (2-D DPCM) is used as the compression encoding method.

2-D DPCMは、横X画素×縦Y画素のブロックを圧縮処理単位とする。X、Yの値はH.264の圧縮符号化処理単位、圧縮率、実装の容易さ等から決定するもので、２、４、８、１６が考えられる。参照度は式６（数６）で定める。   2-D DPCM uses a block of horizontal X pixels × vertical Y pixels as a compression processing unit. The values of X and Y are determined based on the H.264 compression coding processing unit, compression rate, ease of implementation, and the like, and can be 2, 4, 8, and 16. The reference degree is determined by Equation 6 (Equation 6).

Figure 0004973886
この参照度はH.264の「符号化対象ブロックの左ブロックを参照画素として利用する」、「イントラ予測符号化対象ブロックの上ブロックを参照画素として利用する」という参照される画素位置を考慮している。
Figure 0004973886
 This reference degree takes into account the referenced pixel positions of “use the left block of the encoding target block as a reference pixel” and “use the upper block of the intra prediction encoding target block as a reference pixel” in H.264. ing.

参照度重み付け圧縮部１０６に用いる2-D DPCMでは1-D DPCM同様、参照度をそのまま量子化代表値の割り当てビット数として用いる。   In the 2-D DPCM used for the reference degree weighting compression unit 106, the reference degree is used as it is as the number of bits assigned to the quantized representative value as in the 1-D DPCM.

本実施例における量子化代表値の割り当てビット数および参照関係を図２０に示す。   FIG. 20 shows the number of bits assigned to quantized representative values and the reference relationship in this embodiment.

本実施例では圧縮処理単位の右下端画素を予測画素の起点とし、1-D DPCMを用いる画素は右または下画素を予測画素とし、2-D DPCMを用いる画素は右、下、右下の3画素を予測画素とする。   In this embodiment, the lower right pixel of the compression processing unit is the starting point of the prediction pixel, the pixel using 1-D DPCM is the right or lower pixel, and the pixel using 2-D DPCM is the right, lower, lower right Three pixels are assumed to be prediction pixels.

本発明による動画像復号装置は、以上の説明からも明らかなように、ハードウェアで構成することも可能であるが、コンピュータプログラムにより実現することも可能である。   As is apparent from the above description, the moving image decoding apparatus according to the present invention can be configured by hardware, but can also be realized by a computer program.

図２１は、本発明による動画像復号装置をインプリメントした情報処理システムの一般的ブロック構成図である。   FIG. 21 is a general block diagram of an information processing system that implements the moving picture decoding apparatus according to the present invention.

図２１に示す情報処理システムは、プロセッサ４００、プログラムメモリ４０１，記憶媒体４０２からなる。記憶媒体４０２は、別個の記憶媒体であってもよいし、同一の記憶媒体からなる記憶領域であってもよい。記憶媒体としては、ＲＡＭや、ハードディスク等の磁気記憶媒体を用いることができ、上述した予測フレームメモリ部１０３の役割を果たす。   The information processing system shown in FIG. 21 includes a processor 400, a program memory 401, and a storage medium 402. The storage medium 402 may be a separate storage medium or a storage area composed of the same storage medium. As a storage medium, a magnetic storage medium such as a RAM or a hard disk can be used, and plays the role of the prediction frame memory unit 103 described above.

プログラムメモリ４０１には、上述した復号部１０１と、参照度重み付け縮小部１０２と、拡大部１０４と、アドレス制御部１０５と、参照度重み付け圧縮部１０６と、伸長部１０７との各部の処理を、プロセッサ４００に行わせるプログラムが格納されており、このプログラムによってプロセッサ４００は動作する。   In the program memory 401, the processes of the decoding unit 101, the reference degree weighting reduction unit 102, the enlargement unit 104, the address control unit 105, the reference degree weighting compression unit 106, and the decompression unit 107 described above are performed. A program to be executed by the processor 400 is stored, and the processor 400 operates by this program.

このように、コンピュータプログラムにより実現することも可能である。   In this way, it can also be realized by a computer program.

尚、復号部１０１、参照度重み付け縮小部１０２、拡大部１０４、アドレス制御部１０５、参照度重み付け圧縮部１０６および伸長部１０７の全てをプログラムで動作させる必要はなく、一部をハードウェアで構成してもかまわない。   Note that it is not necessary to operate all of the decoding unit 101, the reference degree weighting reduction unit 102, the enlargement unit 104, the address control unit 105, the reference degree weighting compression unit 106, and the decompression unit 107, and a part is configured by hardware. It doesn't matter.

本発明の活用例として、デジタル放送チューナ、ＨＤＤレコーダ、ＤＶＤプレーヤのようなデジタル動画像復号装置が挙げられる。   Examples of utilization of the present invention include digital video decoding devices such as digital broadcast tuners, HDD recorders, and DVD players.

本出願は、２００６年６月２１日に出願された日本出願特願２００６−１７１２１８号を基礎とする優先権を主張し、その開示の全てをここに取り込む。
This application claims the priority on the basis of Japanese application Japanese Patent Application No. 2006-171218 for which it applied on June 21, 2006, and takes in those the indications of all here.

Claims (38)

予測処理を利用する圧縮符号化方式により圧縮符号化された動画像ビットストリームを画像信号へ復号する復号手段と、前記復号手段により得られた復号画像信号を縮小し、縮小画像を得る縮小手段と、前記縮小手段により得られた縮小画像を保持する予測フレームメモリ手段と、前記予測フレームメモリ手段に保持された縮小画像を読み出し、これを拡大した後に前記復号手段の予測処理で利用するデータとして供給する拡大手段と、前記予測フレームメモリ手段に対する縮小画像の書き込み、又は、読み出しを制御するアドレス制御手段とを有する動画像復号装置において、
前記縮小手段は、前記圧縮符号化方式における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御を行うように構成されていることを特徴とする動画像復号装置。Decoding means for decoding a moving picture bitstream compression-encoded by a compression encoding method using prediction processing into an image signal; and reduction means for reducing a decoded image signal obtained by the decoding means to obtain a reduced image; A prediction frame memory means for holding a reduced image obtained by the reduction means, and a reduced image held in the prediction frame memory means is read out, and after being enlarged, supplied as data used in a prediction process of the decoding means A moving picture decoding apparatus comprising: an enlarging means that controls the writing of the reduced image with respect to the prediction frame memory means, or an address control means for controlling the reading.
The reduction means , based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the compression encoding method, for the pixel having a reference degree greater than a predetermined value , A moving picture decoding apparatus configured to perform control so as to hold the pixel value of the video. 前記縮小手段により得られた縮小画像を画素ごとに異なるビット数を割り当てた量子化を行って再圧縮処理を行い、再圧縮データを得る再圧縮手段と、前記再圧縮手段により得られた再圧縮データを保持する前記予測フレームメモリ手段と、前記予測フレームメモリ手段に保持された再圧縮データを読み出し、再圧縮データを伸張した後に前記拡大手段へ供給する伸張手段と、前記予測フレームメモリ手段に対する再圧縮データの書き込み、又は、読み出しを制御する前記アドレス制御手段とを有する動画像復号装置において、
前記再圧縮手段は、前記参照度の大きさに応じた量子化代表値を表す割当ビット数を用いて再圧縮データ量制御を行うように構成されていることを特徴とする請求項１に記載の動画像復号装置。The reduced image obtained by the reduction means is quantized by assigning a different number of bits for each pixel and recompressed to obtain recompressed data, and the recompression obtained by the recompression means The prediction frame memory means for holding data; the decompression means for reading the recompressed data held in the prediction frame memory means; decompressing the recompressed data; In the moving picture decoding apparatus having the address control means for controlling the writing or reading of the compressed data,
The re-compression unit is configured to perform re-compression data amount control using an allocated bit number representing a quantized representative value corresponding to the magnitude of the reference degree. Video decoding device. 前記圧縮符号化方式はフレーム内予測を用いた圧縮符号化方式であり、前記圧縮符号化方式において予測画像作成の際に参照される画素位置は、フレーム内予測画像作成の際に参照される画素位置であることを特徴とする請求項１又は請求項２に記載の動画像復号装置。  The compression coding method is a compression coding method using intra-frame prediction, and the pixel position referred to when creating a predicted image in the compression coding method is a pixel referenced when creating an intra-frame predicted image. The moving picture decoding apparatus according to claim 1, wherein the moving picture decoding apparatus is a position. 前記参照度は、前記圧縮符号化方式における圧縮符号化処理単位、前記縮小手段における縮小率、又は、前記縮小手段における画素の間引き位置のいずれか一つ以上に基づいて定められたものであることを特徴とする請求項１から請求項３のいずれかに記載の動画像復号装置。The reference degree is determined based on any one or more of a compression encoding processing unit in the compression encoding method, a reduction rate in the reduction means, or a pixel thinning position in the reduction means. The moving picture decoding apparatus according to claim 1, wherein: 前記参照度は、前記圧縮符号化方式における圧縮符号化処理単位、前記縮小手段における縮小率、前記縮小手段における画素の間引き位置、前記再圧縮手段において予測画像作成の際に参照される画素位置、前記再圧縮手段における再圧縮処理単位、又は、前記再圧縮手段における圧縮率のいずれか一つ以上に基づいて定められたものであることを特徴とする請求項２又は請求項３に記載の動画像復号装置。The reference degree is a compression coding processing unit in the compression coding method, a reduction rate in the reduction means, a pixel thinning position in the reduction means, a pixel position referred to when creating a predicted image in the recompression means, The moving image according to claim 2 or 3, wherein the moving image is determined based on at least one of a recompression processing unit in the recompression unit and a compression rate in the recompression unit. Image decoding device. 前記再圧縮手段は、再圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行い、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うように構成されていることを特徴とする請求項２に記載の動画像復号装置。The recompression unit uses one of the pixels of the recompression processing unit as a reference pixel, performs quantization of the reference pixel, and for pixels other than the reference pixel, performs quantization on a difference from an adjacent pixel. The moving picture decoding apparatus according to claim 2 , wherein the moving picture decoding apparatus is configured to perform the moving picture decoding apparatus. 前記再圧縮手段における再圧縮処理単位内で最大の参照度は、縦または横に隣接する画素と参照度が等しくならないように定めることを特徴とする請求項６に記載の動画像復号装置。  7. The moving picture decoding apparatus according to claim 6, wherein the maximum reference degree within the recompression processing unit in the recompressing means is determined so that the reference degree is not equal to a vertically or horizontally adjacent pixel. 予測画像符号化復号方法における予測画像を作成するための復号画像の縮小記録方法であって、  A method for reducing and recording a decoded image for creating a predicted image in the predicted image coding and decoding method,
縮小記録装置が、前記復号画像の縮小記録の際に、予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御を行うことを特徴とする復号画像縮小記録方法。  Based on the reference degree of each pixel indicating the frequency referred to in the prediction process when the reduced recording apparatus performs the reduced recording of the decoded image, the pixel after the enlargement is applied to a pixel having a reference degree larger than a predetermined value. A method for reducing and recording a decoded image, wherein the control is performed so that the pixel value before the reduction is held. 予測画像符号化復号方法の予測画像を作成するための復号画像の縮小および圧縮記録方法であって、  A method for reducing and compressing a decoded image for creating a predicted image of the predictive image encoding and decoding method,
縮小記録装置が、前記復号画像の縮小および圧縮記録の際に、予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御を行い、かつ、前記参照度の大きさに応じた精度で圧縮することを特徴とする復号画像の縮小および圧縮記録方法。  Based on the reference degree for each pixel indicating the frequency referred to in the prediction process when the reduced recording apparatus performs reduction and compression recording of the decoded image, a pixel whose reference degree is larger than a predetermined value is A method for reducing and compressing a decoded image, wherein the pixel value is controlled so as to hold the pixel value before reduction, and is compressed with an accuracy corresponding to the reference degree. 前記参照度は、復号画像の領域内の予測で参照される画素位置の数から定められたものであることを特徴とする請求項８又は請求項９に記載の復号画像の縮小および圧縮記録方法。  10. The method for reducing and compressing a decoded image according to claim 8 or 9, wherein the reference degree is determined from the number of pixel positions referred to in prediction within a region of the decoded image. . 前記予測画像符号化復号方法は、フレーム内予測を用いた予測画像符号化復号方法であり、前記予測で参照される画素位置は、フレーム内予測画像を作成する際に参照される画素位置であることを特徴とする請求項１０に記載の復号画像の縮小および圧縮記録方法。  The predictive image encoding / decoding method is a predictive image encoding / decoding method using intra-frame prediction, and a pixel position referred to in the prediction is a pixel position referred to when generating an intra-frame predictive image. The method for reducing and compressing a decoded image according to claim 10. 前記参照度は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の縮小方法における縮小率、又は、復号画像の縮小方法における画素の間引き位置のいずれか一つ以上を用いて定められることを特徴とする請求項１０又は請求項１１に記載の復号画像の縮小および圧縮記録方法。  The reference degree uses at least one of a predicted image encoding processing unit in the predicted image encoding / decoding method, a reduction rate in the decoded image reduction method, or a pixel thinning position in the decoded image reduction method. 12. The method for reducing and compressing a decoded image according to claim 10 or 11, wherein the method is defined. 前記参照度は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の縮小方法における縮小率、復号画像の縮小方法における画素の間引き位置、復号画像の圧縮方法における予測画像作成の際に参照される画素位置、復号画像の圧縮方法における圧縮処理単位、又は、復号画像の圧縮方法における圧縮率のいずれか一つ以上を用いて定められることを特徴とする請求項１０又は請求項１１に記載の復号画像の縮小および圧縮記録方法。  The reference degree includes a predicted image encoding processing unit in the predicted image encoding / decoding method, a reduction rate in the decoded image reduction method, a pixel thinning position in the decoded image reduction method, and a predicted image creation in the decoded image compression method. 11. The pixel position that is referred to at the time, the compression processing unit in the compressed method of the decoded image, or the compression rate in the compressed method of the decoded image is used. 11. A method for reducing and compressing a decoded image according to item 11. 前記復号画像の圧縮方法は、圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行い、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うことを特徴とする請求項１３に記載の復号画像の縮小および圧縮記録方法。  In the compression method of the decoded image, one of the pixels of the compression processing unit is used as a reference pixel, the reference pixel is quantized, and a pixel other than the reference pixel is quantized with respect to a difference from an adjacent pixel. 14. The method for reducing and compressing and decoding a decoded image according to claim 13, wherein: 予測画像符号化復号方法における予測画像を作成するための復号画像を縮小記録するコンピュータに、  In a computer that records a reduced image for producing a predicted image in the predicted image encoding / decoding method,
前記縮小記録の際に、予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御を行う処理を実行させることを特徴とするプログラム。  Based on the reference degree for each pixel indicating the frequency referred to in the prediction process at the time of the reduced recording, the pixel value after enlargement is set to the pixel value before reduction for a pixel having a reference degree larger than a predetermined value. A program characterized by causing a process to perform control to be held. 予測画像符号化復号方法における予測画像を作成するための復号画像を縮小および圧縮記録するコンピュータに、  In a computer that reduces and compresses and records a decoded image for creating a predicted image in the predictive image encoding / decoding method,
前記縮小および圧縮記録の際に、予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御を行う処理と、前記参照度の大きさに応じた精度で圧縮する処理と、を実行させることを特徴とするプログラム。  Based on the reference degree for each pixel indicating the frequency referred to in the prediction process during the reduction and compression recording, the pixel value after enlargement is the pixel before reduction for a pixel with a reference degree larger than a predetermined value. A program for executing a process of performing control so as to hold a value and a process of compressing with accuracy according to the magnitude of the reference degree. 前記参照度は、復号画像の領域内の予測で参照される画素位置の数から定められたものであることを特徴とする請求項１５又は請求項１６に記載のプログラム。  The program according to claim 15 or 16, wherein the reference degree is determined from the number of pixel positions referred to in prediction within a region of a decoded image. 前記予測画像符号化復号方法は、フレーム内予測を用いた予測画像符号化復号方法であり、前記予測で参照される画素位置は、フレーム内予測画像を作成する際に参照される画素位置であることを特徴とする請求項１７に記載のプログラム。  The predictive image encoding / decoding method is a predictive image encoding / decoding method using intra-frame prediction, and a pixel position referred to in the prediction is a pixel position referred to when generating an intra-frame predictive image. The program according to claim 17. 前記参照度は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の縮小方法における縮小率、又は、復号画像の縮小方法における画素の間引き位置のいずれか一つ以上を用いて定められたものであることを特徴とする請求項１７又は請求項１８に記載のプログラム。  The reference degree uses at least one of a predicted image encoding processing unit in the predicted image encoding / decoding method, a reduction rate in the decoded image reduction method, or a pixel thinning position in the decoded image reduction method. The program according to claim 17 or 18, wherein the program is defined. 前記参照度は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の縮小方法における縮小率、復号画像の縮小方法における画素の間引き位置、復号画像の圧縮方法における予測画像作成の際に参照される画素位置、復号画像の圧縮方法における圧縮処理単位、又は、復号画像の圧縮方法における圧縮率のいずれか一つ以上を用いて定められることを特徴とする請求項１７又は請求項１８に記載のプログラム。  The reference degree includes a predicted image encoding processing unit in the predicted image encoding / decoding method, a reduction rate in the decoded image reduction method, a pixel thinning position in the decoded image reduction method, and a predicted image creation in the decoded image compression method. 18. The pixel position to be referred to at the time, the compression processing unit in the decoded image compression method, or the compression ratio in the decoded image compression method is used. 18. The program according to 18. 前記復号画像の圧縮方法は、圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行い、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うことを特徴とする請求項２０に記載のプログラム。  In the compression method of the decoded image, one of the pixels of the compression processing unit is used as a reference pixel, the reference pixel is quantized, and a pixel other than the reference pixel is quantized with respect to a difference from an adjacent pixel. 21. The program according to claim 20, wherein: 予測画像符号化復号方法における予測画像を作成するための復号画像の縮小記録装置であって、  A reduced image recording apparatus for creating a predicted image in a predicted image encoding / decoding method,
前記縮小記録の際に、予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御を行う縮小手段を有することを特徴とする復号画像縮小記録装置。  Based on the reference degree for each pixel indicating the frequency referred to in the prediction process at the time of the reduced recording, the pixel value after enlargement is set to the pixel value before reduction for a pixel having a reference degree larger than a predetermined value. A decoded image reduction recording apparatus comprising reduction means for performing control so as to hold the decoded image. 予測画像符号化復号方法における予測画像を作成するための復号画像の縮小および圧縮記録装置であって、  A decoded image reduction and compression recording apparatus for creating a prediction image in a prediction image encoding / decoding method,
前記縮小および圧縮記録の際に、予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御を行う縮小手段および前記参照度の大きさに応じた精度で圧縮する圧縮手段を有することを特徴とする復号画像の縮小および圧縮記録装置。  Based on the reference degree for each pixel indicating the frequency referred to in the prediction process during the reduction and compression recording, the pixel value after enlargement is the pixel before reduction for a pixel with a reference degree larger than a predetermined value. An apparatus for reducing and compressing a decoded image, comprising: a reduction unit that performs control so as to hold a value; and a compression unit that compresses the image with accuracy according to the magnitude of the reference degree. 前記参照度は、復号画像の領域内の予測で参照される画素位置の数から定められたものであることを特徴とする請求項２２又は請求項２３に記載の復号画像の縮小および圧縮記録装置。  24. The apparatus for reducing and compressing a decoded image according to claim 22 or 23, wherein the reference degree is determined from the number of pixel positions referred to in prediction within a region of the decoded image. . 前記予測画像符号化復号方法は、フレーム内予測を用いた予測画像符号化復号方法であり、前記予測で参照される画素位置は、フレーム内予測画像を作成する際に参照される画素位置であることを特徴とする請求項２４に記載の復号画像の縮小および圧縮記録装置。  The predictive image encoding / decoding method is a predictive image encoding / decoding method using intra-frame prediction, and a pixel position referred to in the prediction is a pixel position referred to when generating an intra-frame predictive image. The apparatus for reducing and compressing a decoded image according to claim 24. 前記参照度は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の縮小方法における縮小率、又は、復号画像の縮小方法における画素の間引き位置のいずれか一つ以上を用いて定められたものであることを特徴とする請求項２４又は請求項２５に記載の復号画像の縮小および圧縮記録装置。  The reference degree uses at least one of a predicted image encoding processing unit in the predicted image encoding / decoding method, a reduction rate in the decoded image reduction method, or a pixel thinning position in the decoded image reduction method. The apparatus for reducing and compressing a decoded image according to claim 24 or 25, wherein the apparatus is defined. 前記参照度は、前記予測画像符号化復号方法における予測画像符号化処理単位、復号画像の圧縮方法における予測画像作成の際に参照される画素位置、復号画像の縮小方法における縮小率、復号画像の縮小方法における画素の間引き位置、復号画像の圧縮方法における圧縮処理単位、又は、復号画像の圧縮方法における圧縮率のいずれか一つ以上を用いて定められることを特徴とする請求項２４又は請求項２５に記載の復号画像の縮小および圧縮記録装置。  The reference level includes a predicted image encoding processing unit in the predicted image encoding / decoding method, a pixel position referred to when a predicted image is generated in a decoded image compression method, a reduction rate in a decoded image reduction method, a decoded image 25. The method according to claim 24, wherein the position is determined by using at least one of a pixel thinning position in the reduction method, a compression processing unit in the decoded image compression method, and a compression rate in the decoded image compression method. 26. A device for reducing and compressing a decoded image according to 25. 前記復号画像の圧縮方法は、圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行い、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うことを特徴とする請求項２７に記載の復号画像の縮小および圧縮記録装置。  In the compression method of the decoded image, one of the pixels of the compression processing unit is used as a reference pixel, the reference pixel is quantized, and a pixel other than the reference pixel is quantized with respect to a difference from an adjacent pixel. 28. The apparatus for reducing and compressing a decoded image according to claim 27, wherein: 予測処理を利用する画像符号復号化方式により復号された画像信号を縮小し、縮小画像を予測フレームメモリに保持し、前記予測フレームメモリに保持された縮小画像を読み出し、これを拡大した後に前記予測処理で利用する動画像復号方法において、
動画像復号装置が、前記画像符号復号化方式における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御することを特徴とする動画像復号方法。The image signal decoded by the image coding / decoding method using the prediction process is reduced, the reduced image is held in the prediction frame memory, the reduced image held in the prediction frame memory is read, and the prediction image is enlarged and then the prediction In the video decoding method used in the processing ,
Based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the image encoding / decoding method , the moving picture decoding apparatus has an enlarged pixel value for a pixel having a reference degree larger than a predetermined value. A moving picture decoding method, wherein control is performed so as to hold a pixel value before reduction. 予測処理を利用する画像符号復号化方式により復号された画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを予測フレームメモリに保持し、前記予測フレームメモリに保持された圧縮画像を読み出し、これを伸張・拡大した後に前記予測処理で利用する動画像復号方法において、
動画像復号装置が、前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御し、かつ、前記参照度の大きさに応じた量子化代表値を表す割当ビット数を用いて圧縮データ量を制御することを特徴とする動画像復号方法。The image signal decoded by the image coding / decoding method using the prediction process is reduced, the quantization process is performed by assigning a different number of bits to each pixel, the compression process is performed, and the compressed data is held in the prediction frame memory, In the moving picture decoding method for reading the compressed image held in the prediction frame memory and expanding / expanding the compressed image and using it in the prediction process ,
Based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the image decoding, the moving picture decoding apparatus reduces the pixel value after enlargement for a pixel having a reference degree larger than a predetermined value. A moving picture decoding method, characterized in that the compressed data amount is controlled by using an allocated bit number representing a quantized representative value corresponding to the magnitude of the reference degree , and controlling so as to hold a previous pixel value . 前記画像符号復号化方式において予測画像作成の際に参照される画素位置は、フレーム内予測画像作成の際に参照される画素位置であることを特徴とする請求項２９又は３０に記載の動画像復号方法。31. The moving image according to claim 29 or 30, wherein a pixel position referred to when a predicted image is created in the image coding / decoding method is a pixel position referred to when an intra-frame predicted image is created. Decryption method. 前記参照度は、前記画像符号復号化方式における圧縮符号化処理単位、復号画像の縮小処理における縮小率、又は、復号画像の縮小処理における画素の間引き位置のいずれか一つ以上に基づいて定められたものであることを特徴とする請求項２９又は請求項３１に記載の動画像復号方法。The reference degree is determined based on any one or more of a compression encoding processing unit in the image encoding / decoding method , a reduction ratio in the reduction processing of the decoded image, or a pixel thinning position in the reduction processing of the decoded image. moving image decoding method according to claim 29 or claim 31, characterized in that the. 前記参照度は、前記画像符号復号化方式における圧縮符号化処理単位、復号画像の縮小処理における縮小率、復号画像の縮小処理における画素の間引き位置、復号画像の圧縮処理において予測画像作成の際に参照される画素位置、復号画像の圧縮処理における圧縮処理単位、又は、復号画像の圧縮処理における圧縮率のいずれか一つ以上に基づいて定められたものであることを特徴とする請求項３０又は請求項３１に記載の動画像復号方法。The reference level includes the compression encoding processing unit in the image encoding / decoding method , the reduction rate in the decoding process of the decoded image, the pixel thinning position in the decoding process of the decoded image, and the prediction image creation in the compression process of the decoded image 30. The method according to claim 30, wherein the pixel position is determined based on any one or more of a pixel position to be referred to, a compression processing unit in the decoding process of the decoded image, and a compression rate in the compression process of the decoded image. 32. The moving picture decoding method according to claim 31. 圧縮処理単位の画素の一つを基準画素とし、前記基準画素の量子化を行い、前記基準画素以外の画素に関しては、隣接する画素との差分に対して量子化を行うことを特徴とする
請求項３３に記載の動画像復号方法。One of the pixels of the compression processing unit is set as a reference pixel, the reference pixel is quantized, and a pixel other than the reference pixel is quantized with respect to a difference from an adjacent pixel. Item 34. The moving image decoding method according to Item 33. 予測処理を利用する画像符号復号化により復号された画像信号を縮小し、縮小画像を予測フレームメモリに保持し、前記予測フレームメモリに保持された縮小画像を読み出し、これを拡大した後に前記予測処理で利用するコンピュータに、
前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御する処理を実行させることを特徴とするプログラム。The image signal decoded by image coding / decoding using a prediction process is reduced, the reduced image is held in a prediction frame memory, the reduced image held in the prediction frame memory is read, and the prediction image is enlarged and then the prediction process In the computer used in
Based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the image coding / decoding, the pixel value after enlargement retains the pixel value before reduction for pixels with a reference degree greater than a predetermined value. A program characterized by causing a process to be controlled to execute. 予測処理を利用する画像符号復号化により復号された画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを予測フレームメモリに保持し、前記予測フレームメモリに保持された圧縮画像を読み出し、これを伸張・拡大した後に前記予測処理で利用する動画像復号方法において、
動画像復号装置が、前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御し、かつ、前記参照度の大きさに応じた量子化代表値を表す割当ビット数を用いて圧縮データ量を制御することを特徴とする動画像復号方法。The image signal decoded by the image code decoding using the prediction process is reduced, the quantization process is performed by assigning a different number of bits to each pixel, the compression process is performed, and the compressed data is held in the prediction frame memory, In the moving picture decoding method used for the prediction process after reading the compressed image held in the prediction frame memory and expanding / enlarging the compressed image ,
Based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the image decoding, the moving picture decoding apparatus reduces the pixel value after enlargement for a pixel having a reference degree larger than a predetermined value. A moving picture decoding method, characterized in that the compressed data amount is controlled by using an allocated bit number representing a quantized representative value corresponding to the magnitude of the reference degree , and controlling so as to hold a previous pixel value . 予測処理を利用する画像符号復号化により復号された画像信号を縮小し、縮小画像を予測フレームメモリに保持し、前記予測フレームメモリに保持された縮小画像を読み出し、これを拡大した後に前記予測処理で利用するコンピュータに、
前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御する処理を実行させることを特徴とするプログラム。The image signal decoded by image coding / decoding using a prediction process is reduced, the reduced image is held in a prediction frame memory, the reduced image held in the prediction frame memory is read, and the prediction image is enlarged and then the prediction process In the computer used in
Based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the image coding / decoding, the pixel value after enlargement retains the pixel value before reduction for pixels with a reference degree greater than a predetermined value. A program characterized by causing a process to be controlled to execute. 予測処理を利用する画像符号復号化により復号された画像信号を縮小し、画素ごとに、異なるビット数を割り当てた量子化を行って圧縮処理を行い、圧縮データを予測フレームメモリに保持し、前記予測フレームメモリに保持された圧縮画像を読み出し、これを伸張・拡大した後に前記予測処理で利用するコンピュータに、
前記画像符号復号化における予測処理で参照される頻度を示す画素ごとの参照度に基づいて、参照度が所定値より大きい画素に対しては、拡大後の画素値が縮小前の画素値を保持するように制御し、かつ、前記参照度の大きさに応じた量子化代表値を表す割当ビット数を用いて圧縮データ量を制御する処理を実行させることを特徴とするプログラム。The image signal decoded by the image code decoding using the prediction process is reduced, the quantization process is performed by assigning a different number of bits to each pixel, the compression process is performed, and the compressed data is held in the prediction frame memory, Read the compressed image held in the prediction frame memory, expand and expand it, and then use it in the computer for the prediction process,
Based on the reference degree for each pixel indicating the frequency referred to in the prediction process in the image coding / decoding, the pixel value after enlargement retains the pixel value before reduction for pixels with a reference degree greater than a predetermined value. controlled to be, and a program for causing to execute a process for controlling the amount of compressed data using the allocated number of bits representing the quantized representative value according to the magnitude of the reference level.
JP2008522422A 2006-06-21 2007-06-15 Moving picture decoding apparatus, decoded picture recording apparatus, method and program thereof Active JP4973886B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008522422A JP4973886B2 (en) 2006-06-21 2007-06-15 Moving picture decoding apparatus, decoded picture recording apparatus, method and program thereof

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2006171218 2006-06-21
JP2006171218 2006-06-21
JP2008522422A JP4973886B2 (en) 2006-06-21 2007-06-15 Moving picture decoding apparatus, decoded picture recording apparatus, method and program thereof
PCT/JP2007/062086 WO2007148619A1 (en) 2006-06-21 2007-06-15 Dynamic image decoding device, decoded image recording device, and their method and program

Publications (2)

Publication Number Publication Date
JPWO2007148619A1 JPWO2007148619A1 (en) 2009-11-19
JP4973886B2 true JP4973886B2 (en) 2012-07-11

Family

ID=38833361

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008522422A Active JP4973886B2 (en) 2006-06-21 2007-06-15 Moving picture decoding apparatus, decoded picture recording apparatus, method and program thereof

Country Status (2)

Country Link
JP (1) JP4973886B2 (en)
WO (1) WO2007148619A1 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8542730B2 (en) * 2008-02-22 2013-09-24 Qualcomm, Incorporated Fast macroblock delta QP decision
WO2011138912A1 (en) * 2010-05-06 2011-11-10 日本電気株式会社 Image encoding apparatus, image decoding apparatus, image encoding method, image decoding method and program
WO2012014472A1 (en) * 2010-07-29 2012-02-02 パナソニック株式会社 Moving image coding method, moving image coding device, moving image decoding method, and moving image decoding device
WO2012095487A1 (en) * 2011-01-12 2012-07-19 Siemens Aktiengesellschaft Compression and decompression of reference images in a video coding device
JP5651628B2 (en) 2012-03-22 2015-01-14 株式会社東芝 Method for manufacturing magnetic recording medium
JPWO2014050676A1 (en) * 2012-09-28 2016-08-22 ソニー株式会社 Image processing apparatus and method
JP5845202B2 (en) 2013-03-22 2016-01-20 株式会社東芝 Image compression apparatus and image processing system
JP6005572B2 (en) * 2013-03-28 2016-10-12 Kddi株式会社 Moving picture encoding apparatus, moving picture decoding apparatus, moving picture encoding method, moving picture decoding method, and program

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01251974A (en) * 1988-03-31 1989-10-06 Hitachi Ltd Coding device and decoding device
JPH08116539A (en) * 1994-10-17 1996-05-07 Hitachi Ltd Dynamic image coder and dynamic image coding method
JPH0998429A (en) * 1995-09-29 1997-04-08 Mitsubishi Electric Corp Digital video signal encoding device and decoding device therefor
JPH09247673A (en) * 1996-03-04 1997-09-19 Kokusai Denshin Denwa Co Ltd <Kdd> Coded dynamic image reproducing device
JPH1066081A (en) * 1996-06-19 1998-03-06 Thomson Consumer Electron Inc Multimode data reducing system for mpeg decoder
JPH11146399A (en) * 1997-11-05 1999-05-28 Sanyo Electric Co Ltd Image decoder
JPH11298892A (en) * 1998-04-13 1999-10-29 Hitachi Ltd Decoding device of encoded image and image display device
JP2001320712A (en) * 2000-05-12 2001-11-16 Nippon Telegr & Teleph Corp <Ntt> Repeat video signal encoding method and recording medium with recorded program of the method
JP2002016913A (en) * 2000-06-28 2002-01-18 Yamaha Corp Method and device for tarns-coding
JP2002514867A (en) * 1998-05-07 2002-05-21 サーノフ コーポレイション Method and apparatus for increasing utilization of memory resources in information stream decoder
WO2005062625A1 (en) * 2003-12-22 2005-07-07 Nec Corporation Method and device for encoding moving picture
WO2007091588A1 (en) * 2006-02-09 2007-08-16 Nec Corporation Dynamic image decoding device, decoded image recording device, their method, and program

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01251974A (en) * 1988-03-31 1989-10-06 Hitachi Ltd Coding device and decoding device
JPH08116539A (en) * 1994-10-17 1996-05-07 Hitachi Ltd Dynamic image coder and dynamic image coding method
JPH0998429A (en) * 1995-09-29 1997-04-08 Mitsubishi Electric Corp Digital video signal encoding device and decoding device therefor
JPH09247673A (en) * 1996-03-04 1997-09-19 Kokusai Denshin Denwa Co Ltd <Kdd> Coded dynamic image reproducing device
JPH1066081A (en) * 1996-06-19 1998-03-06 Thomson Consumer Electron Inc Multimode data reducing system for mpeg decoder
JPH11146399A (en) * 1997-11-05 1999-05-28 Sanyo Electric Co Ltd Image decoder
JPH11298892A (en) * 1998-04-13 1999-10-29 Hitachi Ltd Decoding device of encoded image and image display device
JP2002514867A (en) * 1998-05-07 2002-05-21 サーノフ コーポレイション Method and apparatus for increasing utilization of memory resources in information stream decoder
JP2001320712A (en) * 2000-05-12 2001-11-16 Nippon Telegr & Teleph Corp <Ntt> Repeat video signal encoding method and recording medium with recorded program of the method
JP2002016913A (en) * 2000-06-28 2002-01-18 Yamaha Corp Method and device for tarns-coding
WO2005062625A1 (en) * 2003-12-22 2005-07-07 Nec Corporation Method and device for encoding moving picture
WO2007091588A1 (en) * 2006-02-09 2007-08-16 Nec Corporation Dynamic image decoding device, decoded image recording device, their method, and program

Also Published As

Publication number Publication date
JPWO2007148619A1 (en) 2009-11-19
WO2007148619A1 (en) 2007-12-27

Similar Documents

Publication Publication Date Title
JP4973886B2 (en) Moving picture decoding apparatus, decoded picture recording apparatus, method and program thereof
US6704358B1 (en) Method and apparatus for resizing image information
US6571017B1 (en) Method and apparatus for digital image coding and decoding, and data recording media
WO2010092740A1 (en) Image processing apparatus, image processing method, program and integrated circuit
US8400460B2 (en) Image data processing method, program for image data processing method, recording medium with recorded program for image data processing method and image date processing device
JPH09247673A (en) Coded dynamic image reproducing device
JP2006157481A (en) Image coding apparatus and method thereof
JP5396711B2 (en) Moving picture decoding apparatus, moving picture decoding method, and program
JP2010098352A (en) Image information encoder
JP2010226672A (en) Image dividing device, divided image encoder and program
KR20080067922A (en) Method and apparatus for decoding video with image scale-down function
JP4776505B2 (en) Image encoding device, image decoding device, and image processing program
JP2010098633A (en) Prediction coding apparatus, and prediction coding method
JP4559811B2 (en) Information processing apparatus and information processing method
JP2016158282A (en) Moving image prediction decoding method and moving image prediction decoding apparatus
JP5972687B2 (en) Moving picture predictive coding apparatus, moving picture predictive coding method, moving picture predictive coding program, moving picture predictive decoding apparatus, moving picture predictive decoding method, and moving picture predictive decoding program
EP0955609B1 (en) Decoding compressed image information
JP6875566B2 (en) Moving image prediction coding device, moving image prediction decoding device, moving image prediction coding method, moving image prediction decoding method and moving image prediction decoding program
JP7359653B2 (en) Video encoding device
WO2010021153A1 (en) Motion detection device
JP2011114369A (en) Image encoding and decoding apparatus
JP4411131B2 (en) Encoded video playback device
JP4526314B2 (en) Video playback device
JP2009278473A (en) Image processing device, imaging apparatus mounting the same, and image reproducing device
JP2006166285A (en) Video playback apparatus

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110330

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110527

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120314

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120327

R150 Certificate of patent or registration of utility model

Ref document number: 4973886

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150420

Year of fee payment: 3