JP2006042371A - Image recording and reproducing apparatus and image reproducing apparatus - Google Patents

Image recording and reproducing apparatus and image reproducing apparatus Download PDF

Info

Publication number
JP2006042371A
JP2006042371A JP2005223262A JP2005223262A JP2006042371A JP 2006042371 A JP2006042371 A JP 2006042371A JP 2005223262 A JP2005223262 A JP 2005223262A JP 2005223262 A JP2005223262 A JP 2005223262A JP 2006042371 A JP2006042371 A JP 2006042371A
Authority
JP
Japan
Prior art keywords
image
transform
decoding
block
wavelet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005223262A
Other languages
Japanese (ja)
Inventor
Takahiro Fukuhara
隆浩 福原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2005223262A priority Critical patent/JP2006042371A/en
Publication of JP2006042371A publication Critical patent/JP2006042371A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To improve coding efficiency while suppressing entire throughput in moving image coding and to realize appropriate image reproduction corresponding to a search speed when searching for an image. <P>SOLUTION: There are included: a block dividing unit 1 for dividing an input image 100 into a plurality of blocks; an error detecting unit 12 for detecting an error between a block image at the same position of a preceding frame stored/held in a frame memory 14 and a current coding target block; a coding mode control unit 2 for selectively controlling whether or not the coding target block is to be coded, in accordance with the detected error; and a circuit unit for wavelet transform coding for performing wavelet transform coding for each block image, the circuit unit for wavelet transform coding being comprised of a wavelet transform unit 4, a scanning unit 5, a quantization unit 6 and entropy coding unit 13. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、画像の効率的伝送もしくは蓄積を行うシステムに供することのできる動画像符号化装置及び方法、復号装置及び方法、並びに画像記録再生装置に関するものであり、特に、圧縮・伸長の部分にブロックベース型のウェーブレット変換を用いる動画像符号化装置及び方法、復号装置及び方法、並びに画像記録再生装置に関する。   The present invention relates to a moving image encoding apparatus and method, a decoding apparatus and method, and an image recording / reproducing apparatus that can be used in a system for efficiently transmitting or storing images. The present invention relates to a moving image encoding apparatus and method, a decoding apparatus and method, and an image recording / reproducing apparatus that use block-based wavelet transform.

従来の代表的な画像圧縮方式としては、ISO(国際標準化機構:International Organization for Standardization)によって標準化されたJPEG(Joint Photographic Coding Experts Group) 方式がある。このJPEG方式とは、DCT(離散コサイン変換:Discrete Cosine Transform) を用いて主に静止画を圧縮符号化する方式であり、比較的高いビットが割り当てられる場合には、良好な符号化・復号画像を供することが知られている。ただしこの方式においては、ある程度符号化ビット数を少なくすると、DCT特有のブロック歪みが顕著になり、主観的に劣化が目立つようになる。   As a conventional typical image compression method, there is a JPEG (Joint Photographic Coding Experts Group) method standardized by ISO (International Organization for Standardization). This JPEG system is a system that mainly compresses and encodes still images using DCT (Discrete Cosine Transform). When relatively high bits are assigned, a good encoded / decoded image is obtained. It is known to provide However, in this method, when the number of encoded bits is reduced to some extent, block distortion peculiar to DCT becomes remarkable, and deterioration becomes conspicuous subjectively.

これとは別に、最近においては、画像をフィルタバンクと呼ばれるハイパス・フィルタとローパス・フィルタを組み合わせたフィルタによって複数の帯域に分割し、それらの帯域毎に符号化を行う方式の研究が盛んになっている。その中でも、ウェーブレット符号化は、DCTで問題とされた高圧縮でブロック歪みが顕著になる、という欠点が無いことから、DCTに代わる新たな技術として有力視されている。   Apart from this, recently, research on a method of dividing an image into a plurality of bands by a filter that combines a high-pass filter and a low-pass filter called a filter bank, and performing coding for each band has become active. ing. Among them, wavelet coding is regarded as a promising new technology to replace DCT because there is no defect that block distortion becomes remarkable due to high compression, which is a problem in DCT.

現在、電子スチルカメラやビデオムービ等の製品では、圧縮符号化にJPEG方式やMPEG(Moving Picture image coding Exparts Group) 方式、あるいはいわゆるDV(Digital Video) 方式を採用するものが多く、これらの圧縮符号化方式はいずれも変換方式にDCTを用いている。今後ウェーブレット変換をベースにした上記製品が市場に出現するものと推測されるが、符号化方式の効率向上のための検討は、各研究機関で盛んに行われている。また、MPEGでは、符号化対象となるマクロブロックと呼ばれるブロック単位に、前フレームとの間で動き補償予測を行うことで、符号化効率を向上させている。   Currently, many products such as electronic still cameras and video movies adopt the JPEG method, MPEG (Moving Picture image coding Exparts Group) method, or the so-called DV (Digital Video) method for compression coding. All the conversion methods use DCT as the conversion method. In the future, it is speculated that the products based on the wavelet transform will appear on the market, but studies for improving the efficiency of the coding method are being actively conducted by each research institution. In MPEG, encoding efficiency is improved by performing motion compensation prediction with a previous frame in block units called macroblocks to be encoded.

従来技術として、特許文献1が知られている。   Patent document 1 is known as a prior art.

特開平5−284368号公報Japanese Patent Laid-Open No. 5-284368

ところで、電子スチルカメラやビデオムービ等で必要になる画像圧縮・伸長の技術として、DCTに比べて圧縮効率が高いとされるウェーブレット変換を用い、MPEGで処理の大部分を占める動き補償予測の処理を省きながら、良好な画像を得ることが望まれている。   By the way, as a technique for image compression / decompression required for electronic still cameras, video movies, etc., wavelet transform, which has higher compression efficiency than DCT, is used, and motion compensation prediction processing that occupies most of the processing in MPEG It is desired to obtain a good image while omitting.

本発明は、このような実情を鑑み、特に動画像の圧縮・伸長において、フレームメモリ手段を備えたことで、全体の処理量を抑えながら符号化効率の向上を実現でき、また、ウェーブレット変換の優れた特徴の1つである多重解像度に対応可能な点に着眼し、本発明の画像圧縮・伸長装置を搭載した動画像圧縮記録・伸長装置で、画像のサーチを行う際、サーチ速度に合わせて、所定の帯域成分を選択的に復号することで、従来のビデオレコーダ等では実現し得なかったサーチを行うことができるような動画像符号化装置及び方法、復号装置及び方法、並びに画像記録再生装置を提供することを目的とする。   In view of such a situation, the present invention is provided with a frame memory means especially in the compression / decompression of moving images, so that the encoding efficiency can be improved while suppressing the entire processing amount. Focusing on the fact that one of the excellent features that can support multi-resolution, the video compression recording / decompression device equipped with the image compression / decompression device of the present invention matches the search speed when searching for images. Thus, by selectively decoding a predetermined band component, a moving picture coding apparatus and method, decoding apparatus and method, and image recording capable of performing a search that could not be realized by a conventional video recorder or the like An object is to provide a playback device.

上述の課題を解決するために、本発明に係る動画像符号化装置及び方法は、入力画像を複数個のブロックに分割し、画像メモリに記憶・保持された前フレームの同位置にあるブロック画像と、現在の符号化対象ブロックとの誤差を検出し、検出された誤差に応じて符号化対象ブロックの符号化を行うか行わないかを選択し、各ブロック画像毎にウェーブレット変換符号化を施すことを特徴としている。   In order to solve the above-described problems, a moving image encoding apparatus and method according to the present invention divides an input image into a plurality of blocks, and block images at the same position of the previous frame stored and held in the image memory. And an error with the current encoding target block, select whether to encode the encoding target block according to the detected error, and perform wavelet transform encoding for each block image It is characterized by that.

ここで、上記画像メモリには、上記ウェーブレット変換符号化により得られた符号化出力に対してウェーブレット逆変換復号を施して得られる画像を記憶・保持することが挙げられる。   Here, the image memory includes storing and holding an image obtained by performing wavelet inverse transform decoding on the encoded output obtained by the wavelet transform encoding.

また、本発明に係る動画像復号装置及び方法は、符号化ビットストリームを入力または読み出してウェーブレット逆変換復号し復号画像を出力し、得られた復号画像から対象領域を抽出し、得られた復号画像を画像メモリに記憶・保持し、供給された符号化制御信号に従って、上記画像メモリに予め記憶された前フレームの復号画像を送出するか、または上記ウェーブレット逆変換復号手段によって復号された画像を送出するかを選択することを特徴としている。   Further, the moving picture decoding apparatus and method according to the present invention inputs or reads an encoded bitstream, performs inverse wavelet transform decoding, outputs a decoded image, extracts a target area from the obtained decoded image, and obtains the obtained decoding The image is stored and held in the image memory, and the decoded image of the previous frame stored in advance in the image memory is transmitted according to the supplied encoding control signal, or the image decoded by the wavelet inverse transform decoding means is transmitted. It is characterized by selecting whether to send.

ここで、上記ウェーブレット逆変換復号を施す際には、上記量子化された変換係数を逆量子化して変換係数に戻し、変換係数を逆走査(逆スキャニング)し、得られた変換係数から復号対象となる変換係数を抽出し、得られた復号対象係数を逆ウェーブレット変換することが挙げられる。   Here, when performing the wavelet inverse transform decoding, the quantized transform coefficient is inversely quantized and returned to the transform coefficient, the transform coefficient is reverse-scanned (reverse scanning), and the object to be decoded is obtained from the obtained transform coefficient. Extraction of the transform coefficient to be obtained, and inverse wavelet transform of the obtained decoding target coefficient.

さらに、本発明に係る画像記録再生装置は、複数個の低域通過フィルタと高域通過フィルタから構成されるフィルタバンク手段によって、入力画像を複数個の帯域に変換する手段と、同該各帯域毎に変換係数を走査、量子化、エントロピー符号化する手段により符号化ビットストリームを記録媒体に記録する手段とを備えた画像圧縮装置と、上記記録媒体から符号化ビットストリームを読み出して、エントロピー復号化、逆量子化、逆走査、更に同該フィルタバンク手段によって逆変換を行い、復号画像を出力する手段を備えた画像伸長装置とを有し、サーチ速度に合わせて、上記記録媒体に記録された符号化ビットストリームから、該当する帯域成分を読み出すサーチ手段を有することを特徴としている。   Furthermore, the image recording / reproducing apparatus according to the present invention comprises means for converting an input image into a plurality of bands by means of filter bank means comprising a plurality of low-pass filters and high-pass filters, An image compression apparatus having means for recording an encoded bit stream on a recording medium by means for scanning, quantizing, and entropy encoding the transform coefficient every time, and reading the encoded bit stream from the recording medium and entropy decoding , Inverse quantization, inverse scanning, and inverse transform by the filter bank means, and an image decompression device having means for outputting a decoded image, and recorded on the recording medium in accordance with the search speed. And a search means for reading out the corresponding band component from the encoded bit stream.

本発明によれば、入力画像を複数個のブロックに分割し、画像メモリに記憶・保持された前フレームの同位置にあるブロック画像と、現在の符号化対象ブロックとの誤差を検出し、検出された誤差に応じて符号化対象ブロックの符号化を行うか行わないかを選択し、各ブロック画像毎にウェーブレット変換符号化を施すことにより、従来の非常に処理の重い動き補償予測手段を用いず、ブロック単位の簡易な予測手段を用いているので、非常に処理量が少なくて済む。ここで、通常の動画像では背景部分はほとんど動かないので、このような部分では本発明が有効に働き、圧縮効率が高まるという効果がある。   According to the present invention, an input image is divided into a plurality of blocks, and an error between the block image at the same position of the previous frame stored and held in the image memory and the current encoding target block is detected and detected. By selecting whether to encode the target block according to the error, and performing wavelet transform coding for each block image, the conventional motion-compensated prediction means with very heavy processing is used. However, since a simple prediction means in units of blocks is used, the processing amount can be very small. Here, since the background portion hardly moves in a normal moving image, the present invention works effectively in such a portion, and there is an effect that the compression efficiency is increased.

また、動き補償手段が大幅に簡略化できるので、従来は動き補償手段を専用のハードウェア(LSI)で実現していたのに対して、本発明ではソフトウェアで実現可能である。   In addition, since the motion compensation means can be greatly simplified, the motion compensation means is conventionally realized by dedicated hardware (LSI), but can be realized by software in the present invention.

また、ブロック単位の符号化手段を用い、ウェーブレット変換符号化の際のフィルタがブロックをはみ出る部分の画素については、ブロック境界の歪みが目立たない手段を用いているので、常に滑らかな接続面の復号画像が得られるという効果もある。   Also, using block-based coding means, and for the pixels where the filter protrudes from the block when wavelet transform coding is used, the block boundary distortion is not noticeable, so smooth connection surface decoding is always performed. There is also an effect that an image can be obtained.

また、本発明の画像記録再生装置によれば、複数個の低域通過フィルタと高域通過フィルタから構成されるフィルタバンク手段によって、入力画像を複数個の帯域に変換する手段と、同該各帯域毎に変換係数を走査、量子化、エントロピー符号化する手段により符号化ビットストリームを記録媒体に記録する手段とを備えた画像圧縮装置と、上記記録媒体から符号化ビットストリームを読み出して、エントロピー復号化、逆量子化、逆走査、更に同該フィルタバンク手段によって逆変換を行い、復号画像を出力する手段を備えた画像伸長装置とを有し、サーチ速度に合わせて、上記記録媒体に記録された符号化ビットストリームから、該当する帯域成分を読み出すサーチ手段を有しているため、記録媒体に記録された符号化ビットストリームを読み出して、復号画像のサーチを行う際には、サーチ速度に合わせた最適な帯域成分だけを読み出して復号することができ、コマ落ちの無い常に高品質な復号画像を得ることができる。   According to the image recording / reproducing apparatus of the present invention, the filter bank means comprising a plurality of low-pass filters and high-pass filters converts the input image into a plurality of bands. An image compression apparatus comprising: means for scanning, quantizing, and entropy encoding the transform coefficient for each band; and recording the encoded bitstream on the recording medium; and reading the encoded bitstream from the recording medium and entropy An image decompression device having means for decoding, inverse quantization, inverse scanning, and inverse transformation by the filter bank means, and outputting a decoded image, and recording it on the recording medium in accordance with the search speed The encoded bit stream recorded on the recording medium has search means for reading out the corresponding band component from the encoded bit stream. Read out, when performing a search of the decoded image can be read only optimum band components tailored to search speed can be decoded to obtain a consistently high-quality decoded image without frame dropping.

また、復号画像も原画像のサイズにすることの他、帯域成分の持つ解像度にすることも出来るので、復号画像のバリエーションが増えるので、用途に合わせて使い分けることができる。   In addition to the size of the original image as well as the resolution of the band component, the decoded image can also have the resolution of the band component, so that the variation of the decoded image increases, so that it can be used properly according to the application.

従って、本発明によれば、高圧縮下での高画質と部分ブロック復号の実現の両方を兼ね備えており、さらに、ウェーブレット変換手段とウェーブレット逆変換手段との整合が取れるので、高能率な符号化、及び高画質な復号が可能になる。   Therefore, according to the present invention, both high image quality under high compression and partial block decoding are realized, and further, the wavelet transform unit and the wavelet inverse transform unit can be matched, so that highly efficient coding can be achieved. And high-quality decoding.

さらに、インターレース画像の場合には、奇数フィールド画像と偶数フィールド画像とに分離して、別個に符号化することで、画像の中に動きの大きい被写体が存在する場合でも、常に高い符号化効率を維持できる。   Furthermore, in the case of an interlaced image, it is separated into an odd-numbered field image and an even-numbered field image and encoded separately, so that even when a subject with large motion exists in the image, a high coding efficiency is always obtained. Can be maintained.

以下、本発明に係る画像の動画像符号化装置及び方法並びに復号装置及び方法の実施の形態について、図面を参照しながら説明する。   DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiments of an image moving image encoding apparatus and method and a decoding apparatus and method according to the present invention will be described below with reference to the drawings.

本発明の第1の実施の形態となる画像の動画像符号化装置の構成例を図1に示す。
この図1に示する画像の動画像符号化装置は、入力画像100を複数個のブロックに分割するブロック分割部1と、画像メモリであるフレームメモリ14に記憶・保持された前フレームの同位置にあるブロック画像と現在の符号化対象ブロックとの誤差を検出する誤差検出部12と、この検出された誤差に応じて現在の符号化対象ブロックを符号化せずに出力するかウェーブレット変換符号化を施すかの符号化モードを選択制御する符号化モード制御部2と、この符号化モードの制御信号に応じて符号化対象領域を抽出する符号化対象領域抽出部3と、各ブロック画像毎にウェーブレット変換を施すウェーブレット変換部4と、ウェーブレット変換係数をスキャニングする変換係数スキャニング部5と、スキャニング後の係数を量子化する量子化部6と、量子化係数をエントロピー符号化して符号化ビットストリームを出力するエントロピー符号化部13とを有して構成されている。ウェーブレット変換部4は、後述するように、ブロック外部でフィルタリングの及ぶ範囲内ではブロック内部の画素を対称拡張して畳み込み演算する手段を有している。
FIG. 1 shows a configuration example of an image moving image coding apparatus according to the first embodiment of the present invention.
The moving image coding apparatus for an image shown in FIG. 1 has the same position of a block dividing unit 1 that divides an input image 100 into a plurality of blocks and a previous frame stored and held in a frame memory 14 that is an image memory. An error detection unit 12 for detecting an error between the block image in FIG. 5 and the current encoding target block, and outputting the current encoding target block without encoding according to the detected error or wavelet transform encoding A coding mode control unit 2 that selectively controls the coding mode to be applied, a coding target region extraction unit 3 that extracts a coding target region according to a control signal of the coding mode, and a block image A wavelet transform unit 4 for performing wavelet transform, a transform coefficient scanning unit 5 for scanning wavelet transform coefficients, and an amount for quantizing the coefficients after scanning The unit 6 is configured by including an entropy coding unit 13 for outputting an encoded bit stream by entropy coding the quantized coefficients. As will be described later, the wavelet transform unit 4 includes means for performing a convolution operation by symmetrically expanding pixels inside a block within a range covered by filtering outside the block.

この図1に示す動画像符号化装置において、入力画像100は、まずブロック分割部1に入力され、このブロック分割部1で複数個のブロック画像101に分割され、誤差検出部12に送られる。誤差検出部12では、フレームメモリ14に記憶・保持されていた前フレームの復号画像から読み出された、ブロック画像101と同位置にあるブロック画像115と、ブロック分割部1からのブロック画像101との間で、誤差102を検出し、検出された誤差102を符号化モード制御部2に送る。符号化モード制御部2では、誤差102の大小によって符号化モードを2通りの中からどちらかに決定する。   In the moving picture coding apparatus shown in FIG. 1, an input image 100 is first input to the block division unit 1, divided into a plurality of block images 101 by the block division unit 1, and sent to the error detection unit 12. In the error detection unit 12, the block image 115 at the same position as the block image 101 read from the decoded image of the previous frame stored and held in the frame memory 14, and the block image 101 from the block division unit 1 , The error 102 is detected, and the detected error 102 is sent to the encoding mode control unit 2. The encoding mode control unit 2 determines one of two encoding modes depending on the magnitude of the error 102.

すなわち、誤差102が所定の閾値よりも大きい(誤差102>閾値)場合には、ブロック画像の中身が大きく変化していると判断されることから、後述するウェーブレット変換符号化を行って符号化ビットストリームを出力する。他方、誤差102が所定の閾値以下(誤差102≦閾値)の場合には、ブロック画像は殆ど変化していないことから、上記ウェーブレット変換符号化をスキップして、フレームメモリ14のブロック画像115を復号画像としてそのまま保持すればよい。従って、以下前者の場合について動作を詳しく述べる。なお、上記閾値は、符号化手段の前に予め決めておけばよい。また符号化モード制御部からは、符号化識別情報114が送出される。   That is, when the error 102 is larger than the predetermined threshold (error 102> threshold), it is determined that the content of the block image has changed greatly. Output a stream. On the other hand, when the error 102 is equal to or less than a predetermined threshold (error 102 ≦ threshold), the block image has hardly changed, so that the wavelet transform coding is skipped and the block image 115 in the frame memory 14 is decoded. What is necessary is just to hold | maintain as an image as it is. Therefore, the operation will be described in detail below for the former case. The threshold value may be determined in advance before the encoding means. Also, the encoding identification information 114 is sent from the encoding mode control unit.

符号化対象領域抽出部3には、ブロック分割部からのロック画像101と、符号化モード制御部2からの制御情報103が送られる。この符号化対象領域抽出部3では、後段のウェーブレット変換の対象となるブロック画像101を抽出する。この時のブロック画像101の抽出される領域は、後段の実施形態で述べるウェーブレット変換のフィルタリング(畳み込み演算)の手法によって変わる。このウェーブレット変換のフィルタリング法の情報とは、符号化モード制御部2からの上記制御情報103のことである。   The encoding target area extraction unit 3 receives the lock image 101 from the block division unit and the control information 103 from the encoding mode control unit 2. The encoding target area extraction unit 3 extracts a block image 101 that is a target of the wavelet transform in the subsequent stage. The region from which the block image 101 is extracted at this time varies depending on the wavelet transform filtering (convolution operation) method described in the following embodiment. The information on the filtering method of the wavelet transform is the control information 103 from the encoding mode control unit 2.

符号化対象領域抽出部3により抽出された符号化対象となるブロック画像104がウェーブレット変換部4に送られ、このウェーブレット変換部4でウェーブレット変換のフィルタリング(畳み込み演算)が施される。その結果得られた変換係数105は、スキャニング部5に入力され、このスキャニング部5では、ウェーブレット変換係数の走査(スキャニング)が行われる。例えば、ここでは左から右(水平方向)、上から下(垂直方向)にウェーブレット変換係数をスキャニングするものとする。   The block image 104 to be encoded extracted by the encoding target region extracting unit 3 is sent to the wavelet transform unit 4, and wavelet transform filtering (convolution operation) is performed by the wavelet transform unit 4. The transform coefficient 105 obtained as a result is input to the scanning unit 5, where the wavelet transform coefficient is scanned (scanning). For example, here, it is assumed that wavelet transform coefficients are scanned from left to right (horizontal direction) and from top to bottom (vertical direction).

スキャニング後の変換係数106は、量子化部6において量子化されて量子化係数107が出力される。ここで量子化手段としては、例えば下記の式1に示すように、通常用いるスカラ量子化を用いればよい。   The scanned transform coefficient 106 is quantized by the quantizing unit 6 and a quantized coefficient 107 is output. Here, as the quantization means, for example, normally used scalar quantization may be used as shown in Equation 1 below.

Q = x/Δ ・・・(式1)
この式1において、xはウェーブレット変換係数値、Δは量子化インデックス値である。
Q = x / Δ (Formula 1)
In Equation 1, x is a wavelet transform coefficient value, and Δ is a quantization index value.

上記スカラ量子化等によって得られた量子化部6からの量子化係数107は、エントロピー符号化部13において、エントロピー符号化されて、符号化ビットストリーム116が出力される。なお、エントロピー符号化部13で用いられる手段としては、可変長符号化手段の他、算術符号化手段があるが、これらのエントロピー符号化手段については、各研究機関より研究成果が報告されており、それらを用いればよい。   The quantized coefficient 107 from the quantization unit 6 obtained by the scalar quantization or the like is entropy-coded in the entropy coding unit 13 and an encoded bit stream 116 is output. In addition, as means used in the entropy coding unit 13, there are arithmetic coding means in addition to variable length coding means, and research results of these entropy coding means have been reported by each research institution. They can be used.

また、もう一方の経路である局部復号(ローカルデコード)ループでは、量子化係数107を再度逆量子化して、変換係数108を出力する。更に逆スキャニング部8を経て、元の2次元配列の変換係数109を得る。次に、同変換係数109の中から復号対象となる係数を抽出して、抽出された変換係数110は、逆ウェーブレット変換されて復号画像111が出力される。なお、上記の復号対象係数抽出部9の具体的な動作については、後述の実施の形態で説明する。最後に、復号画像111の中から抽出された領域画像112が、フレームメモリ14に書き込まれる。   In the local decoding (local decoding) loop which is the other path, the quantized coefficient 107 is dequantized again and the transform coefficient 108 is output. Further, through the inverse scanning unit 8, the original two-dimensional array conversion coefficient 109 is obtained. Next, a coefficient to be decoded is extracted from the same transform coefficient 109, and the extracted transform coefficient 110 is subjected to inverse wavelet transform to output a decoded image 111. The specific operation of the decoding target coefficient extraction unit 9 will be described in an embodiment described later. Finally, the region image 112 extracted from the decoded image 111 is written into the frame memory 14.

以上が、この第1の実施の形態の動画像符号化装置の基本構成及び動作である。   The above is the basic configuration and operation of the moving picture coding apparatus according to the first embodiment.

ここで、一般的なウェーブレット変換符号化手段は、図1のウェーブレット変換部4と、スキャニング部5と、量子化部6と、エントロピー符号化部13とを有して構成され、また、一般的なウェーブレット逆変換復号手段は、図1の逆量子化部7と、逆スキャニング部8と、ウェーブレット逆変換部10とを有して構成される。   Here, the general wavelet transform coding means is configured to include the wavelet transform unit 4, the scanning unit 5, the quantization unit 6, and the entropy coding unit 13 of FIG. The wavelet inverse transform decoding means includes the inverse quantization unit 7, the inverse scanning unit 8, and the wavelet inverse transform unit 10 shown in FIG.

次に、本発明の上記第1の実施の形態におけるウェーブレット変換部2、及びウェーブレット逆変換部10の具体的な構成の例について、図面を参照しながら説明する。   Next, examples of specific configurations of the wavelet transform unit 2 and the wavelet inverse transform unit 10 in the first embodiment of the present invention will be described with reference to the drawings.

まず通常のウェーブレット変換部の構成として、図2が挙げられる。これは、幾つかある手法の中で最も一般的なウェーブレット変換であるオクターブ分割を複数レベルに亘って行う構成例を示している。なお、この図2の場合は、レベル数が3(レベル1〜レベル3)であり、画像信号を低域と高域に分割し、且つ低域成分のみを階層的に分割する構成を取っている。また図2では、便宜上1次元の信号(例えば画像の水平成分)についてのウェーブレット変換を例示しているが、これを2次元に拡張することで2次元画像信号に対応することができる。   First, FIG. 2 is given as a configuration of a normal wavelet transform unit. This shows a configuration example in which octave division, which is the most general wavelet transform among several methods, is performed over a plurality of levels. In the case of FIG. 2, the number of levels is 3 (level 1 to level 3), the image signal is divided into low and high frequencies, and only the low frequency components are divided hierarchically. Yes. In FIG. 2, wavelet transform for a one-dimensional signal (for example, a horizontal component of an image) is illustrated for convenience, but it can be dealt with a two-dimensional image signal by extending this to two dimensions.

次に動作について説明する。
図2に示すウェーブレット変換部への入力画像信号120は、まずローパスフィルタ21(伝達関数H(z))とハイパスフィルタ22(伝達関数H(z))とによって帯域分割され、得られた低域成分と高域成分は、それぞれ対応するダウンサンプラ23a、23bによって、解像度がそれぞれ2分の1倍に間引かれる(レベル1)。この時の出力がL成分121とH成分126の2つである。ここで、上記LはLow で低域、HはHighで高域を示す。この図2のローパスフィルタ21、ハイパスフィルタ22、及び2個のダウンサンプラ23a、23bによってレベル1の回路部201が構成されている。
Next, the operation will be described.
The input image signal 120 to the wavelet transform unit shown in FIG. 2 is obtained by first performing band division by the low-pass filter 21 (transfer function H 0 (z)) and the high-pass filter 22 (transfer function H 1 (z)). The low-frequency component and the high-frequency component are each thinned out by a half (level 1) by the corresponding down-samplers 23a and 23b. At this time, there are two outputs, an L component 121 and an H component 126. Here, L is Low and indicates a low frequency, and H is High and indicates a high frequency. The low-pass filter 21, the high-pass filter 22, and the two down samplers 23a and 23b shown in FIG.

上記ダウンサンプラ23a、23bによりそれぞれ間引かれた信号の内の低域成分、すなわちダウンサンプラ23aからの信号のみが、さらに、レベル2の回路部202のローパスフィルタ及びハイパスフィルタによって帯域分割され、それぞれ対応するダウンサンプラによって、解像度をそれぞれ2分の1倍に間引かれる(レベル2)。これらのレベル2のローパスフィルタ、ハイパスフィルタ及びダウンサンプラから成る回路部202としては、上記レベル1のローパスフィルタ21、ハイパスフィルタ22及びダウンサンプラ23a、23bから成る回路部201と同様な構成が用いられる。   Of the signals thinned out by the down-samplers 23a and 23b, only the low-frequency component, that is, the signal from the down-sampler 23a, is further band-divided by the low-pass filter and high-pass filter of the level 2 circuit unit 202, The corresponding downsampler reduces the resolution by half each (level 2). As the circuit unit 202 including the level 2 low-pass filter, high-pass filter, and down-sampler, the same configuration as the circuit unit 201 including the level 1 low-pass filter 21, high-pass filter 22, and down-samplers 23a and 23b is used. .

このような処理を所定のレベルまで行うことで、低域成分を階層的に帯域分割した帯域成分が順次生成されていくことになる。レベル2で生成された帯域成分は、LL成分122とLH成分125である。図2はレベル3まで帯域分割する例が示されており、レベル2の回路部202のローパスフィルタ側のダウンサンプラからの出力が、上記回路部201と同様な構成のレベル3の回路部203に供給されている。このようにレベル3まで帯域分割した結果、LLL成分123、LLH成分124、LH成分125、H成分126が生成されている。   By performing such processing to a predetermined level, band components obtained by hierarchically dividing the low frequency component into bands are sequentially generated. The band components generated at level 2 are the LL component 122 and the LH component 125. FIG. 2 shows an example in which the band is divided up to level 3, and the output from the downsampler on the low pass filter side of the circuit unit 202 of level 2 is sent to the circuit unit 203 of level 3 having the same configuration as the circuit unit 201 described above. Have been supplied. As a result of the band division to level 3, the LLL component 123, the LLH component 124, the LH component 125, and the H component 126 are generated.

次に、この図2に示すウェーブレット変換部に対して逆の動作を行うウェーブレット逆変換部の具体的な構成例について、図3を用いて説明する。この図3のウェーブレット逆変換部は、図1のウェーブレット逆変換部部10として用いることができる。   Next, a specific configuration example of the wavelet inverse transform unit that performs the reverse operation to the wavelet transform unit shown in FIG. 2 will be described with reference to FIG. The wavelet inverse transform unit in FIG. 3 can be used as the wavelet inverse transform unit 10 in FIG.

上記図2で説明したウェーブレット変換部2の出力である各帯域成分123、124、125、126は、図3のウェーブレット逆変換部に入力されると、まず上記LLL成分123及びLLH成分124が、それぞれアップサンプラ24a、24bによって2倍の解像度にアップサンプルされる。引き続いて低域成分はローパスフィルタ25、高域成分はハイパスフィルタ26によってフィルタリングされて、加算器27において、両者の帯域成分は合成される。ここまでの回路部206により、上記図2のレベル3の回路部203での変換の逆の処理としての逆変換が完了して、レベル2の低域側の帯域成分であるLL成分127が得られる。この処理を以後レベル1まで繰り返すことで、最終的な逆変換後の復号画像129が出力されることになる。すなわち、レベル2の回路部207及びレベル1の回路部208は、上記レベル3の回路部206と同様な構成を有し、レベル3の回路部206の出力がレベル2の回路部207の低域側の入力として、また、レベル2の回路部207の出力がレベル1の回路部208の低域側の入力として、それぞれ送られる。以上が、通常のウェーブレット逆変換部の基本構成である。   When the band components 123, 124, 125, and 126 that are the outputs of the wavelet transform unit 2 described in FIG. 2 are input to the wavelet inverse transform unit in FIG. 3, first, the LLL component 123 and the LLH component 124 are Each of the upsamplers 24a and 24b is upsampled to double the resolution. Subsequently, the low-frequency component is filtered by the low-pass filter 25 and the high-frequency component is filtered by the high-pass filter 26, and the adder 27 combines both band components. By the circuit unit 206 so far, the inverse conversion as the inverse process of the conversion in the level 3 circuit unit 203 of FIG. 2 is completed, and the LL component 127 which is the band component on the low frequency side of the level 2 is obtained. It is done. By repeating this process to level 1 thereafter, the final decoded image 129 after inverse transformation is output. That is, the level 2 circuit unit 207 and the level 1 circuit unit 208 have the same configuration as the level 3 circuit unit 206, and the output of the level 3 circuit unit 206 is lower than that of the level 2 circuit unit 207. And the output of the level 2 circuit unit 207 is sent as the low frequency side input of the level 1 circuit unit 208, respectively. The above is the basic configuration of a normal wavelet inverse transform unit.

ここで図4は、レベル2まで2次元画像を帯域分割した結果得られる帯域成分を図示したものである。この図4でのL及びHの表記法は、1次元信号を扱った図2、図3でのL及びHの表記法とは異なる。すなわち図4では、先ずレベル1の帯域分割(水平・垂直方向)により4つの成分LL、LH、HL、HHに分かれる。ここでLLは水平・垂直成分が共にLであること。LHは水平成分がHで垂直成分がLであることを意味している。次に、LL成分は再度帯域分割されて、さらにLLLL、LLHL、LLLH、LLHHが生成される。なお、このように、低域成分を階層的に分割する以外に、全帯域を均等に分割することも行われる。   Here, FIG. 4 illustrates band components obtained as a result of band-dividing the two-dimensional image up to level 2. FIG. The notation of L and H in FIG. 4 is different from the notation of L and H in FIGS. 2 and 3 that deal with one-dimensional signals. That is, in FIG. 4, first, the four components LL, LH, HL, and HH are divided by level 1 band division (horizontal and vertical directions). Here, LL means that both horizontal and vertical components are L. LH means that the horizontal component is H and the vertical component is L. Next, the LL component is band-divided again to generate LLLL, LLHL, LLLH, and LLHH. In this way, in addition to dividing the low-frequency component hierarchically, the entire band is also divided equally.

次に、本発明の第2の実施の形態となる動画像符号化装置について説明する。この第2の実施の形態の全体構成は、上記図1に示す動画像符号化装置と同様であるが、図1の符号化対象領域抽出部3をより具体化したものである。この符号化対象領域抽出部及びそれに関連したウェーブレット変換動作の説明に先立って、ブロック毎にウェーブレット変換を行う場合に、フィルタのタップ長分だけブロックの周囲画素にもフィルタリングが及ぶことについて、図5を用いて説明する。即ち隣接ブロックとの間でオーバーラップさせながら、フィルタリングを行うことになる。   Next, a moving picture coding apparatus according to the second embodiment of the present invention will be described. The overall configuration of the second embodiment is the same as that of the moving picture encoding apparatus shown in FIG. 1, but is more specific to the encoding target area extracting unit 3 shown in FIG. Prior to the description of the encoding target region extraction unit and the wavelet transform operation related thereto, when performing wavelet transform for each block, filtering is performed on the surrounding pixels of the block by the tap length of the filter. Will be described. That is, filtering is performed while overlapping with adjacent blocks.

図5は、オーバーラップ型のブロックベース・ウェーブレット変換を行う際の、符号化対象のブロックR とフィルタリングの及ぶ範囲R とを示している。この図5中の a,b,c,d,e,f、h,i,j,k,l,m はすべて画素を表す。例えば画素cを水平方向にフィルタリングする時に、d,e,f の3画素を右隣りのブロック画像から読み出して、これらに所定のフィルタ係数を畳み込み演算を施す。同様に例えば、画素jを垂直方向にフィルタリングする時に、k,l,m の3画素を下のブロック画像から読み出して、これらに所定のフィルタ係数を畳み込み演算を施す。 FIG. 5 shows a block RT to be encoded and a range R F covered by filtering when performing an overlap type block-based wavelet transform. In FIG. 5, a, b, c, d, e, f, h, i, j, k, l, and m all represent pixels. For example, when the pixel c is filtered in the horizontal direction, three pixels d, e, and f are read out from the block image on the right side, and a predetermined filter coefficient is convolved with these. Similarly, for example, when the pixel j is filtered in the vertical direction, three pixels k, l, and m are read out from the lower block image, and a predetermined filter coefficient is convolved with them.

従って、この第2の実施の形態における符号化対象領域抽出部では、ブロックの周囲に、ウェーブレット変換手段によるフィルタリングの影響が及ぶ範囲まで、隣接ブロックの画素を読み出すことで、符号化対象領域を拡大する。以上が、本第2の実施の形態の、符号化対象領域抽出部3とウェーブレット変換部4でのウェーブレット変換の動作説明である。   Therefore, in the encoding target area extraction unit in the second embodiment, the encoding target area is expanded by reading out pixels of adjacent blocks to the extent that the influence of the filtering by the wavelet transform unit extends around the block. To do. The above is the description of the operation of the wavelet transform in the encoding target region extracting unit 3 and the wavelet transform unit 4 according to the second embodiment.

次に、本発明の第3の実施の形態について説明する。
この第3の実施の形態の全体構成は、上記図1に示す動画像符号化装置と同様であるが、図1の符号化対象領域抽出部3をより具体化したものである。この第3の実施の形態においては、上記第2の実施の形態で既に説明した通り、ブロックの周囲にウェーブレット変換手段によるフィルタリングの影響が及ぶ範囲まで符号化対象画素を用意しておく必要がある。上記第2の実施の形態では、隣接ブロックの画素を直接読み出す手段を用いたが、本第3の実施の形態では、ブロック内部の画素値をブロック境界で鏡像関係になるように対称拡張して、フィルタリングを行う。すなわち、この第3の実施の形態では、隣接するブロックの画像間にオーバーラップする領域を設けず、ブロック外部でフィルタリングの及ぶ範囲内ではブロック内部のウェーブレット変換係数を対称拡張して畳み込み演算するようにしている。これを示したものが図6及び図7であり、図6は原画像が対称拡張の畳み込み演算を施しながらウェーブレット分割を行っていく過程を、図7はブロック周辺の具体例を、それぞれ示している。
Next, a third embodiment of the present invention will be described.
The overall configuration of the third embodiment is the same as that of the moving picture encoding apparatus shown in FIG. 1, but the encoding target area extracting unit 3 of FIG. 1 is more specific. In the third embodiment, as already described in the second embodiment, it is necessary to prepare pixels to be encoded around the block to the extent that the influence of filtering by the wavelet transform unit is affected. . In the second embodiment, the means for directly reading out the pixels of the adjacent block is used. However, in the third embodiment, the pixel values in the block are symmetrically extended so as to have a mirror image relationship at the block boundary. , Filtering. That is, in the third embodiment, no overlapping region is provided between images of adjacent blocks, and convolution is performed by extending the wavelet transform coefficient inside the block symmetrically within the range covered by filtering outside the block. I have to. This is shown in FIGS. 6 and 7, where FIG. 6 shows the process of performing wavelet division while subjecting the original image to symmetrical extension convolution, and FIG. 7 shows a specific example around the block. Yes.

先ず図6は、対称畳み込みによるウェーブレット符号化の概念を説明するための図である。この図6の(A)に示す原画像は、(B)に示すようにブロック画像に分割された後、各ブロック画像毎に(C)の破線に示すフィルタ処理が及ぶ範囲まで、ブロック外の領域に画素の対称拡張を行う。   First, FIG. 6 is a diagram for explaining the concept of wavelet coding by symmetric convolution. The original image shown in (A) of FIG. 6 is divided into block images as shown in (B), and then, outside the block, until the filter processing indicated by the broken line (C) reaches each block image. Perform symmetric expansion of pixels in the region.

図7は、この対象拡張を具体的に図示したものであり、符号化又は復号対象のブロックの領域R 内の水平方向のc, b, a の画素列が、ブロック境界を境にして、対称的にa, b, c の並び順に、フィルタリングの及ぶ範囲R まで拡張されていることがわかる。同様に、垂直方向では、ブロック領域R 内のf, e, d の画素列が、ブロック境界を境にして、対称的にd, e, f の並びにフィルタリングの及ぶ範囲R まで拡張される。このような鏡像関係の対称拡張を行えば、ブロック画像内部の画素数と同数だけしかウェーブレット変換係数が生成されないことが知られている。すなわち、冗長度が無い利点がある。 FIG. 7 specifically illustrates this target extension. The horizontal c, b, a pixel columns in the region RT of the block to be encoded or decoded are separated from each other by the block boundary. It can be seen that, in a symmetrical order of a, b, c, the filtering range is extended to R F. Similarly, in the vertical direction, the pixel columns of f, e, and d in the block region RT are symmetrically extended to the range R F in which d, e, and f are filtered, with respect to the block boundary. . It is known that wavelet transform coefficients are generated only by the same number as the number of pixels in the block image if such mirror image relational expansion is performed. That is, there is an advantage that there is no redundancy.

続いて、図6の(C)の対称拡張された各ブロックに対して、WT(ウェーブレット変換)を掛ける。その結果、既に図4で説明したように、例えば4つの帯域成分に分割される(図6の(D)参照)。図6の(D)中の斜線部は、上述した低域のLL成分である。さらに、この斜線部の低域成分(LL)のブロックは、図6の(E)に示すように、同様に対称拡張を行い、ウェーブレット変換(WT)が施される。以後同様の操作が、所定のウェーブレット分割数まで繰り返される。以上が、この第3の実施の形態の符号化対象領域抽出部及びウェーブレット変換部での、ブロック毎の対称拡張を伴うウェーブレット変換の動作説明である。   Subsequently, each symmetrically expanded block in FIG. 6C is subjected to WT (wavelet transform). As a result, as already described in FIG. 4, for example, it is divided into four band components (see FIG. 6D). The hatched portion in FIG. 6D is the above-described low-frequency LL component. Further, the block of the low-frequency component (LL) in the hatched portion is similarly subjected to symmetrical expansion and subjected to wavelet transform (WT) as shown in FIG. Thereafter, the same operation is repeated up to a predetermined number of wavelet divisions. The above is the description of the operation of the wavelet transform with symmetric expansion for each block in the encoding target region extracting unit and the wavelet transform unit of the third embodiment.

次に、本発明の第4の実施の形態について説明する。
この第4の実施の形態は、上述した図1の基本構成の動画像符号化装置における符号化対象領域の抽出手段と、それに連動したウェーブレット変換手段の具体例を示すものである。本第4の実施の形態では、ウェーブレット変換手段として、ブロックの外側でフィルタリングが及ぶ範囲内の画素をすべて0として、畳み込み演算する手法を用いる。この場合も、原画面における隣接ブロックの画素を用いる必要がない。次に動作について説明する。
Next, a fourth embodiment of the present invention will be described.
This fourth embodiment shows a specific example of the encoding target area extracting means and the wavelet transform means linked thereto in the moving picture encoding apparatus having the basic configuration shown in FIG. 1 described above. In the fourth embodiment, as the wavelet transform unit, a method of performing a convolution operation with all pixels within the range covered by filtering outside the block as 0 is used. In this case as well, it is not necessary to use pixels of adjacent blocks on the original screen. Next, the operation will be described.

図8は、ブロック外部のフィルタリングが及ぶ範囲を示す図である。この図8中で、符号化あるいは復号対象ブロックR の外部については、水平方向のフィルタリングの及ぶ範囲R をすべて0と置くことで、c,b,a,0,0,0 となり、同様に垂直方向のフィルタリングの及ぶ範囲R をすべて0と置くことで、f,e,d,0,0,0 となる。これにウェーブレットフィルタの係数の畳み込み演算を行う。 FIG. 8 is a diagram illustrating a range covered by filtering outside the block. In FIG. 8, the outside of the block to be encoded or decoded RT is c, b, a, 0, 0, 0 by setting all the ranges R F covered by horizontal filtering to 0. By setting all the ranges R F covered by vertical filtering to 0, f, e, d, 0, 0, 0 are obtained. A convolution operation is performed on the coefficients of the wavelet filter.

次に、本発明の第5の実施の形態について説明する。
この第5の実施の形態では、ウェーブレット変換手段として、ブロックの外側でフィルタリングが及ぶ範囲内の画素を、ブロック境界上の画素値と点対称の関係になるように対称拡張することで、ブロック外部の符号化対象画素を拡張している。図9はこれを図示したものであり、図9中の(a)と(b)との2つの例を示している。図中、X[0],X[1],X[2],X[3],X[4],X[5],X[6],X[7] の8個のサンプル点はブロック内の画素(1次元方向のみ)を示している。
Next, a fifth embodiment of the present invention will be described.
In this fifth embodiment, as a wavelet transform means, the pixels within the range covered by filtering outside the block are symmetrically expanded so as to have a point-symmetric relationship with the pixel values on the block boundary. The encoding target pixel is expanded. FIG. 9 illustrates this, and shows two examples (a) and (b) in FIG. In the figure, eight sample points X [0], X [1], X [2], X [3], X [4], X [5], X [6], X [7] are blocks The inner pixels (one-dimensional direction only) are shown.

一方、点線で示したサンプル点の画素は、X[0] 又はX[7] の画素値を点対称の基準値として算出される。図9の(a)の場合では、ブロック境界のサンプル点X[0] のサンプル位置での画素値を示す点Pa を点対称の基準点としており、例えば、ブロック外部のサンプル点x[1] は、ブロック内で点対称の位置関係のサンプル点X[1] から基準点Pa を通るように伸ばした延長線上の等距離の点を算出することで得られる。すなわち、基準点Pa を中心として、サンプル点x[1] はサンプル点X[1] の点対称の位置にある。同様に、基準点Pa を中心として、サンプル点x[2] はサンプル点X[2] の点対称の位置にあり、サンプル点x[3] はサンプル点X[3] の点対称の位置にある。ブロックの他方の境界でのX[7] のサンプル点での画素値を点対称の基準点とする場合も同様である。   On the other hand, the pixel at the sample point indicated by the dotted line is calculated using the pixel value X [0] or X [7] as a point-symmetric reference value. In the case of FIG. 9A, the point Pa indicating the pixel value at the sample position of the sample point X [0] on the block boundary is set as a point symmetrical reference point. For example, the sample point x [1] outside the block is used. Is obtained by calculating equidistant points on an extension line extending from the sample point X [1] having a point-symmetric positional relationship within the block so as to pass through the reference point Pa. That is, with the reference point Pa as the center, the sample point x [1] is located symmetrically with respect to the sample point X [1]. Similarly, with the reference point Pa as the center, the sample point x [2] is in a point-symmetrical position with respect to the sample point X [2], and the sample point x [3] is in a point-symmetrical position with respect to the sample point X [3]. is there. The same applies when the pixel value at the sample point of X [7] at the other boundary of the block is used as a point symmetry point.

次に、図9の(b)の場合について説明する。図9の(a)の場合との相違点は、点対称の中心となる基準点Pb を、サンプル位置に対して半サンプル分の距離だけずらしていることである。すなわち、ブロック境界のサンプル点X[0] のサンプル位置をブロック外部に半サンプル分の距離だけずらした位置における、サンプル点X[0] に等しい画素値を示す点Pb を、点対称の基準点としている。従って、サンプル点X[0] からブロック外部に1サンプル分だけ離れた位置のサンプル点x[0] は、基準点Pb を中心としてサンプル点X[0] の点対称の位置にあることから、サンプル点X[0] と同じ値となる。これにより、ブロック境界の内部の点(例えばX[0])と外部の点(例えばx[0])の各値が同一となり、ブロック境界での接続を滑らかにすることが出来る。   Next, the case of FIG. 9B will be described. The difference from FIG. 9A is that the reference point Pb, which is the center of point symmetry, is shifted from the sample position by a distance corresponding to a half sample. That is, a point Pb indicating a pixel value equal to the sample point X [0] at a position obtained by shifting the sample position of the sample point X [0] on the block boundary by a half sample distance outside the block It is said. Accordingly, the sample point x [0] at a position one sample away from the sample point X [0] outside the block is located symmetrically with respect to the sample point X [0] around the reference point Pb. It is the same value as the sample point X [0]. As a result, the values inside the block boundary (for example, X [0]) and the external point (for example, x [0]) are the same, and the connection at the block boundary can be made smooth.

以上、図9の(a)または(b)に示すいずれかの手法によって、点対称関係を用いて画素拡張を行うことにより、隣接ブロックの画素値を用いずに、ブロック内部の画素値をブロック外部でウェーブレット変換によるフィルタリングが行われる範囲まで拡大して、畳み込み演算を行うことができる。   As described above, by performing pixel expansion using the point symmetry relationship by any one of the methods shown in FIGS. 9A and 9B, the pixel values in the block can be blocked without using the pixel values of the adjacent blocks. It is possible to perform a convolution operation by expanding to a range where filtering by wavelet transform is performed externally.

次に、本発明の第6の実施の形態について説明する。
この第6の実施の形態では、上述した図1に示す動画像符号化装置の基本構成の、特に復号対象の換係数抽出部9と、それに連動したウェーブレット逆変換部10、及び復号画像領域抽出部11を具体化したものである。図1で、量子化係数107が逆量子化部7で逆量子化されて変換係数108が得られる。変換係数108を逆スキャニングして、再度2次元画像配列の形に並び換えられた変換係数109の中から、復号対象係数抽出部9により復号対象となるものだけを抽出する。
Next, a sixth embodiment of the present invention will be described.
In the sixth embodiment, in particular, the conversion coefficient extraction unit 9 to be decoded, the wavelet inverse conversion unit 10 linked thereto, and the decoded image region extraction of the basic configuration of the moving image encoding apparatus shown in FIG. 1 described above. Part 11 is embodied. In FIG. 1, the quantization coefficient 107 is inversely quantized by the inverse quantization unit 7 to obtain a transform coefficient 108. The transform coefficient 108 is reverse-scanned, and from the transform coefficients 109 rearranged again in the form of the two-dimensional image array, the decoding target coefficient extraction unit 9 extracts only those to be decoded.

抽出された係数110は、次にウェーブレット逆変換されて復号画像111が、ウェーブレット逆変換部10より出力される。また復号画像111の中から復号対象となる領域画像を抽出して、これを112としてフレームメモリ14に書き込む。以上が、この第6の実施の形態における符号化装置内部の局部復号手段の動作説明である。   The extracted coefficient 110 is then subjected to inverse wavelet transform, and the decoded image 111 is output from the inverse wavelet transform unit 10. In addition, a region image to be decoded is extracted from the decoded image 111 and written as 112 in the frame memory 14. The above is the description of the operation of the local decoding means inside the encoding apparatus according to the sixth embodiment.

次に、本発明の第7の実施の形態について説明する。
この第7の実施の形態は、上記第6の実施の形態の変形例に相当し、この第7の実施の形態では、上記復号対象係数抽出部として、ブロック外部でウェーブレット逆変換のフィルタリングを行う際、フィルタが及ぶ範囲まで隣接ブロックの変換係数を読み出すものである。すなわち、図5でa,b,c,d,e,f を変換係数とみなした場合に相当する。そして読み出されたブロック外部の変換係数と、当該ブロックの持つ変換係数とを畳み込み演算することで、ウェーブレット逆変換を行う。そして、ウェーブレット逆変換によって復元された復号画像から、後段の復号画像領域抽出部で、復号対象となる領域のみ抽出すれば良い。
Next, a seventh embodiment of the present invention will be described.
The seventh embodiment corresponds to a modification of the sixth embodiment. In the seventh embodiment, wavelet inverse transform filtering is performed outside the block as the decoding target coefficient extraction unit. At this time, the conversion coefficient of the adjacent block is read out to the range covered by the filter. That is, this corresponds to the case where a, b, c, d, e, and f are regarded as conversion coefficients in FIG. Then, the wavelet inverse transform is performed by performing a convolution operation on the read conversion coefficient outside the block and the conversion coefficient of the block. Then, only a region to be decoded may be extracted from the decoded image restored by the inverse wavelet transform in the subsequent decoded image region extraction unit.

次に、本発明の第8の実施の形態について説明する。
この第8の実施の形態は、上記第6の実施の形態の変形例に相当し、この第8の実施の形態では、上記復号対象係数抽出部として、ブロック外部でウェーブレット逆変換のフィルタリングを行う際、フィルタが及ぶ範囲まで、ブロック境界で鏡像関係になるように係数が対称拡張される。復号対象係数抽出部で、上記拡張された変換係数も含めて、ウェーブレット逆変換部でウェーブレット逆変換の畳み込み演算が行われる。
Next, an eighth embodiment of the present invention will be described.
The eighth embodiment corresponds to a modification of the sixth embodiment. In the eighth embodiment, wavelet inverse transform filtering is performed outside the block as the decoding target coefficient extraction unit. In this case, the coefficients are symmetrically extended so as to have a mirror image relation at the block boundary up to the range covered by the filter. In the decoding target coefficient extraction unit, the wavelet inverse transformation unit performs a convolution operation of wavelet inverse transformation including the expanded transformation coefficient.

図10はこの一連の動作を図示したものであり、低域と高域の変換係数成分をそれぞれ鏡像関係になるように、対称拡張して、ウェーブレット逆変換を行う処理が示されている。   FIG. 10 illustrates this series of operations, and shows a process of performing wavelet inverse transform by symmetrically expanding low-frequency and high-frequency transform coefficient components so as to have mirror image relationships.

この図10の(A)において、4つの帯域成分LL,LH,HL,HH のウェーブレット変換係数を図10の(B)に示すように対称拡張して、それぞれをウェーブレット逆変換(IWT)する。これによって、図10の(C)に示すように、各ブロック画像が復号出力されることになる。なお、対称拡張については、既に図7で述べた第3の実施の形態の手法を用いれば良い。ただし、上記第3の実施の形態で述べたウェーブレット変換の説明では、図7のa,b,c,・・・は画素を示していたが、今回のウェーブレット逆変換では、これらはウェーブレット変換係数を意味していることに注意しなければならない。   In FIG. 10A, the wavelet transform coefficients of the four band components LL, LH, HL, and HH are symmetrically expanded as shown in FIG. 10B, and each is subjected to wavelet inverse transform (IWT). As a result, each block image is decoded and output as shown in FIG. For the symmetric extension, the method of the third embodiment already described in FIG. 7 may be used. However, in the description of the wavelet transform described in the third embodiment, a, b, c,... In FIG. 7 indicate pixels. However, in the current wavelet inverse transform, these are wavelet transform coefficients. Note that it means.

この対称拡張のウェーブレット逆変換を用いる利点としては、隣接する周囲のブロックとは全く独立して、逆変換そして復号が行えることが挙げられる。また比較的高ビットレート(低圧縮率)の場合には、ブロック間の境界部分の劣化が殆ど検知できない。   An advantage of using this symmetrically extended wavelet inverse transform is that it can perform the inverse transform and decoding completely independently of the neighboring surrounding blocks. In the case of a relatively high bit rate (low compression rate), almost no deterioration of the boundary portion between blocks can be detected.

次に、本発明の第9の実施の形態について説明する。
この第9の実施の形態では、上記復号対象係数抽出部として、ブロック外部でウェーブレット逆変換のフィルタリングを行う際、該ブロックの外側でフィルタリングが及ぶ範囲内のウェーブレット変換係数をすべて0として、畳み込み演算する。次に動作について説明する。
Next, a ninth embodiment of the present invention will be described.
In the ninth embodiment, when the wavelet transform filtering is performed outside the block as the decoding target coefficient extraction unit, all the wavelet transform coefficients within the range covered by the filtering outside the block are set to 0, and the convolution operation is performed. To do. Next, the operation will be described.

図11はこれを具体的に説明するための図である。例えば、図11の(A)に示す4つの帯域成分LL,LH,HL,HH のウェーブレット変換係数はそのままにして、図11の(B)に示すように、該ブロックの外側でフィルタリングが及ぶ範囲(点線領域)内のウェーブレット変換係数をすべて0とし、それぞれのブロックをウェーブレット逆変換(IWT)する。これで各ブロック画像が復号出力されることになる。この時のウェーブレット逆変換の畳み込み演算を直線畳み込みと呼ぶとする。   FIG. 11 is a diagram for specifically explaining this. For example, while the wavelet transform coefficients of the four band components LL, LH, HL, and HH shown in FIG. 11A are left as they are, the range in which filtering is performed outside the block as shown in FIG. All wavelet transform coefficients in the (dotted line region) are set to 0, and each block is subjected to inverse wavelet transform (IWT). Thus, each block image is decoded and output. The convolution operation of the wavelet inverse transformation at this time is called a linear convolution.

この直線畳み込み手段については、上記図8と共に説明した通りであるので、説明を省略する。この直線畳み込みの利点としては、低ビットレート(高圧縮)下でもブロック境界部が検知されないという優れた特徴がある。これは、隣接するブロックとの境界部の係数を0として均一にすることで境界部に、ウェーブレット・フィルタリングによる直線補間の効果が出て、滑らかに接続されることに起因する。   The linear convolution means is the same as that described with reference to FIG. As an advantage of this linear convolution, there is an excellent feature that a block boundary portion is not detected even under a low bit rate (high compression). This is due to the fact that by making the coefficient of the boundary between adjacent blocks uniform with zero, the effect of linear interpolation by wavelet filtering is produced at the boundary and smooth connection is established.

また、このウェーブレット逆変換手段でも、隣接するブロックのウェーブレット変換係数までオーバーラップして読み出す必要がないので、隣接する周囲のブロックとは全く独立して、逆変換そして復号が行えることが挙げられる。   Further, even with this wavelet inverse transform means, it is not necessary to read the overlapped wavelet transform coefficients of adjacent blocks, so that it is possible to perform inverse transform and decoding completely independently of adjacent neighboring blocks.

従って、ウェーブレット逆変換手段として、上記ブロックの外側でフィルタリングが及ぶ範囲内のウェーブレット変換係数をすべて0として、畳み込み演算するようにすることは、高圧縮下での高画質と部分ブロック復号の実現の両方を兼ね備えた優れたものである。   Therefore, as the wavelet inverse transform means, the wavelet transform coefficients within the range covered by the filtering outside the block are all set to 0 so that the convolution operation is performed, which realizes high image quality and partial block decoding under high compression. It is an excellent combination of both.

次に、本発明の第10の実施の形態について説明する。
この第10の実施の形態は、上記第6の実施の形態の変形例に相当し、この第10の実施の形態では、上記復号対象係数抽出部として、ブロック外部でウェーブレット逆変換のフィルタリングを行う際、フィルタが及ぶ範囲まで、ブロック境界を挟んで点対称になるように、ブロック外部の変換係数を拡張し、得られた変換係数とブロック内部の変換係数を含めて、ウェーブレット逆変換を行うものである。具体的な拡張手法は、上記図9に示した通りであるが、図9では画素値を拡張したのに対して、本実施の形態では変換係数値を拡張する点が異なる。なお、その後の動作は上記第8の実施の形態と同様である。
Next, a tenth embodiment of the present invention will be described.
The tenth embodiment corresponds to a modification of the sixth embodiment, and in the tenth embodiment, the wavelet inverse transform is filtered outside the block as the decoding target coefficient extraction unit. In this case, the transform coefficient outside the block is expanded so that it is point-symmetric across the block boundary up to the range covered by the filter, and the wavelet inverse transform is performed including the obtained transform coefficient and the transform coefficient inside the block. It is. The specific expansion method is as shown in FIG. 9, but the pixel value is expanded in FIG. 9, but the conversion coefficient value is expanded in the present embodiment. The subsequent operation is the same as that in the eighth embodiment.

次に、本発明の第11の実施の形態について説明する。
本実施の形態は、上述したような画像のウェーブレット符号化が施されて得られた符号化ビットストリームが供給される画像のウェーブレット復号装置及び方法の一実施形態である。
Next, an eleventh embodiment of the present invention will be described.
This embodiment is an embodiment of an image wavelet decoding apparatus and method to which an encoded bitstream obtained by performing wavelet encoding of an image as described above is supplied.

図12は、この第11の実施の形態となる動画像復号装置の概略構成を示すブロック図であり、上記図1に示した動画像符号化装置に対応したものである。   FIG. 12 is a block diagram showing a schematic configuration of the moving picture decoding apparatus according to the eleventh embodiment, corresponding to the moving picture encoding apparatus shown in FIG.

この図11において、画像のウェーブレット復号装置は、符号化ビットストリームを入力または読み出してエントロピー復号するエントロピー復号部16と、得られた量子化係数を逆量子化する逆量子化部7と、得られた変換係数を逆スキャニングして元の係数の順番に戻す変換係数逆スキャニング部8と、逆スキャニング後の係数の復号対象係数を抽出する復号対象係数抽出部9と、得られた復号対象係数をウェーブレット逆変換してブロック画像を生成するウェーブレット逆変換部10と、復号画像領域を抽出する復号画像領域抽出部11とを有し、さらに、復号モード制御部15及びフレームメモリ14を有して構成される。次に動作について説明する。   In FIG. 11, an image wavelet decoding apparatus is obtained by an entropy decoding unit 16 that inputs or reads an encoded bitstream and entropy decodes, and an inverse quantization unit 7 that inversely quantizes the obtained quantization coefficient. The transform coefficient inverse scanning unit 8 that reverse-scans the transformed coefficients and returns them to the order of the original coefficients, the decoding target coefficient extraction unit 9 that extracts the decoding target coefficients of the coefficients after the inverse scanning, and the obtained decoding target coefficients A wavelet inverse transform unit 10 that generates a block image by inverse wavelet transform, a decoded image region extraction unit 11 that extracts a decoded image region, and further includes a decoding mode control unit 15 and a frame memory 14. Is done. Next, the operation will be described.

図11において、符号化モード情報104を受信した復号モード制御部15では、復号をスキップしてフレームメモリ14に記憶・保持されたブロック画像を、そのまま出力119として出力するか、もしくは復号を行うかを選択する。上記復号をスキップする場合には、復号モード制御部15よりフレームメモリ14に対し、記憶・保持されたブロック画像をそのまま出力させるための制御信号118が発信される。後者の復号を行う場合には、復号モード制御部15よりエントロピー復号部16に対し、制御信号が発せられ、以後の動作が行われる。   In FIG. 11, the decoding mode control unit 15 that has received the encoding mode information 104 skips decoding and outputs the block image stored and held in the frame memory 14 as the output 119 as it is, or performs decoding. Select. When the decoding is skipped, the decoding mode control unit 15 transmits a control signal 118 for outputting the block image stored and held as it is to the frame memory 14. When performing the latter decoding, a control signal is issued from the decoding mode control unit 15 to the entropy decoding unit 16, and the subsequent operations are performed.

すなわち、上記復号を行う場合に、まずエントロピー復号部16では、符号化ビットストリーム116をエントロピー復号して、量子化係数113が再生される。この量子化係数113は、逆量子化部7に送られて逆量子化され、変換係数108となる。変換係数108は、逆スキャニング部8に送られて逆方向のスキャニングが施され、元の2次元配列のウェーブレット変換係数109となる。この変換係数109の中から復号対象係数抽出部9により復号対象となる係数を抽出し、抽出された変換係数110は、ウェーブレット逆変換部10に送られて、逆ウェーブレット変換され、復号画像111が得られる。この復号画像111の中から、復号画像領域抽出部11により抽出された領域画像112が、フレームメモリ14に書き込まれる。なお、上記エントロピー復号手段としては、前記符号化装置内のエントロピー符号化手段で用いられた手段と表裏一体でなければならないことは言うまでもない。   That is, when performing the above decoding, first, the entropy decoding unit 16 entropy decodes the encoded bit stream 116 to reproduce the quantization coefficient 113. The quantization coefficient 113 is sent to the inverse quantization unit 7 and inversely quantized to become a transform coefficient 108. The transform coefficient 108 is sent to the inverse scanning unit 8 and subjected to scanning in the reverse direction to become the original two-dimensional array wavelet transform coefficient 109. A coefficient to be decoded is extracted from the transform coefficient 109 by the decoding target coefficient extraction unit 9, and the extracted conversion coefficient 110 is sent to the wavelet inverse transform unit 10, subjected to inverse wavelet transform, and a decoded image 111 is obtained. can get. An area image 112 extracted by the decoded image area extraction unit 11 from the decoded image 111 is written into the frame memory 14. Needless to say, the entropy decoding means must be integrated with the means used in the entropy encoding means in the encoding apparatus.

次に、本発明の第12の実施の形態について説明する。
この第12の実施の形態は、上記第11の実施の形態における復号対象係数抽出部9を具体化したものであり、ウェーブレット逆変換の際にブロック外部のフィルタリングの影響が及ぶ範囲までの変換係数を、上述した第2〜第5の実施の形態のいずれかの手法を、画素の代わりに変換係数に適用して、求めるものである。すなわち、ブロック外部の変換係数について、隣接ブロックから読み出したり、ブロック境界を境にして対称的に拡張したり、0と置いたり、ブロック境界を中心として点対称に拡張したりして求め、ウェーブレット逆変換を施すものである。これは、上記図1の動画像符号化装置の符号化画像領域抽出部3での動作に連動したものである必要がある。また、動画像復号装置の構成要素である復号画像領域抽出部11は、ウェーブレット逆変換手段によって復元された復号画像から、対象ブロック領域を抽出する手段を有している必要がある。
Next, a twelfth embodiment of the present invention will be described.
The twelfth embodiment embodies the decoding target coefficient extraction unit 9 in the eleventh embodiment, and transform coefficients up to a range affected by filtering outside the block at the time of wavelet inverse transform. Is obtained by applying the method of any of the second to fifth embodiments described above to the conversion coefficient instead of the pixel. That is, transform coefficients outside the block are obtained by reading from adjacent blocks, expanding symmetrically with respect to the block boundary, setting it as 0, or expanding symmetrically with respect to the block boundary as the center, and wavelet inverse Conversion is performed. This needs to be linked to the operation of the encoded image area extracting unit 3 of the moving image encoding apparatus of FIG. Further, the decoded image area extraction unit 11 which is a component of the moving picture decoding apparatus needs to have means for extracting the target block area from the decoded image restored by the wavelet inverse transformation means.

次に、本発明の第13の実施の形態について説明する。
この第13の実施の形態は、上記図1の動画像符号化装置において、複数フレームに1度は全ての符号化対象ブロックをウェーブレット変換符号化により符号化するようにしたものである。すなわち、既に述べたように、図1の動画像符号化装置では、画像をブロック単位に符号化して、被写体の動き等、ブロック内の画素の変化が少ない場合には、フレームメモリに記憶・保持された前符号化フレームの同位置にあるブロック画像をそのまま復号画像とし、他方、変化が大きい場合には後段のウェーブレット変換符号化手段を行っている。
Next, a thirteenth embodiment of the present invention will be described.
In the thirteenth embodiment, all the encoding target blocks are encoded by wavelet transform encoding once in a plurality of frames in the moving picture encoding apparatus of FIG. That is, as described above, the moving image encoding apparatus in FIG. 1 encodes an image in units of blocks, and stores and holds it in the frame memory when there are few changes in the pixels in the block, such as movement of the subject. The block image located at the same position in the previous encoded frame is used as a decoded image as it is, and on the other hand, when the change is large, the subsequent wavelet transform encoding means is performed.

しかし、ある所定のフレーム数毎に、全ブロックを対象に前記ウェーブレット変換符号化手段を行えば、誤差の蓄積が無くなり、常に高画質な復号画像を供することが可能になる。従って、本第13の実施の形態では、予め定められた手段で、あるいは外部入力の形で、所定のフレーム数毎に、すべての符号化対象のブロックを、ウェーブレット変換符号化するものである。   However, if the wavelet transform coding means is applied to all blocks for every predetermined number of frames, error accumulation is eliminated and a high-quality decoded image can always be provided. Therefore, in the thirteenth embodiment, all the encoding target blocks are subjected to wavelet transform coding for each predetermined number of frames by a predetermined means or in the form of external input.

次に、本発明の第14の実施の形態について説明する。
この第14の実施の形態は、複数個の低域通過フィルタと高域通過フィルタから構成されるフィルタバンク手段によって、入力画像を複数個の帯域に変換する手段と、同該各帯域毎に変換係数を走査、量子化、エントロピー符号化する手段により符号化ビットストリームを記録媒体に記録する手段とを備えた画像圧縮装置と、同該記録媒体から符号化ビットストリームを読み出して、エントロピー復号、逆量子化、逆走査、更に同該フィルタバンク手段によって逆変換を行い、復号画像を出力する手段を備えた画像伸長装置とから構成される画像圧縮伸長装置であって、サーチ速度に合わせて、同該記録媒体に記録された符号化ビットストリームから、該当する帯域成分を読み出すサーチ手段を有するものである。
Next, a fourteenth embodiment of the present invention will be described.
The fourteenth embodiment includes means for converting an input image into a plurality of bands by means of filter bank means comprising a plurality of low-pass filters and high-pass filters, and conversion for each of the bands. An image compression apparatus having means for recording a coded bitstream on a recording medium by means for scanning, quantizing, and entropy coding coefficients, and reading the coded bitstream from the recording medium for entropy decoding, An image compression / decompression apparatus comprising quantization, reverse scanning, and an image decompression apparatus having means for outputting a decoded image by performing inverse transformation by the filter bank means, in accordance with the search speed. Search means for reading out the corresponding band component from the encoded bit stream recorded on the recording medium is provided.

図13は、この第14の実施の形態としての画像記録再生装置を示すブロック図であり、この図13に示す装置は、外部入力制御部38、CCD部39、AD変換部30、符号化部31、復号部37、記録媒体制御部34、書き込み部32、読み出し部33、記録媒体40、及び表示部35を有して構成されている。次に動作について述べる。   FIG. 13 is a block diagram showing an image recording / reproducing apparatus as the fourteenth embodiment. The apparatus shown in FIG. 13 includes an external input control unit 38, a CCD unit 39, an AD conversion unit 30, and an encoding unit. 31, a decoding unit 37, a recording medium control unit 34, a writing unit 32, a reading unit 33, a recording medium 40, and a display unit 35. Next, the operation will be described.

符号化部31は、既に実施形態で述べたウェーブレット変換符号化手段を行う部位であり、画像のウェーブレット帯域分割手段、変換係数のスキャニング手段、量子化手段、そしてエントロピー符号化手段を有している。他方、復号部27は、エントロピー復号手段、逆量子化手段、逆スキャニング手段、そしてウェーブレット帯域合成手段とを備えている。   The encoding unit 31 is a part that performs the wavelet transform encoding unit already described in the embodiment, and includes an image wavelet band dividing unit, a transform coefficient scanning unit, a quantization unit, and an entropy encoding unit. . On the other hand, the decoding unit 27 includes entropy decoding means, inverse quantization means, inverse scanning means, and wavelet band synthesis means.

上記符号化部31、復号部37に対して、図13の通り、画像入力各部と記録媒体への記録各部が接続されている。通常、画像は光信号131として、カメラ等のCCD部39に入力され、CCD信号132はAD変換部30でAD変換され、デジタル画像信号133に変換される。このデジタル画像信号133は、CCDの特性に合わせて、例えばR,G,B別々の信号で出力される場合の他、1つの信号になる場合もある。   As shown in FIG. 13, the image input units and the recording units on the recording medium are connected to the encoding unit 31 and the decoding unit 37. Normally, the image is input as an optical signal 131 to a CCD unit 39 such as a camera, and the CCD signal 132 is AD converted by the AD conversion unit 30 and converted into a digital image signal 133. The digital image signal 133 may be a single signal in addition to the case where it is output as separate signals of R, G, B, for example, in accordance with the characteristics of the CCD.

デジタル画像信号133は、上記符号化部31でウェーブレット変換符号化の処理が行われ、符号化ビットストリーム134が生成される。符号化ビットストリーム134は、復号部37に送られて、同部37で直ちに復号後、復号画像135が表示部35を経由して、表示画像136が出力される。他方、符号化ビットストリーム134は、書き込み部32に送られ、書き込み制御信号と共に、記録用符号化ビットストリーム141として、記録媒体制御部34に送られ、制御情報と多重化されて記録信号となり、記録媒体40に書き込まれる。記録媒体40と記録媒体制御部34との間では、記録媒体40の記録フォーマットに従った信号139の記録再生が行われる。ここで記録媒体40としては、磁気テープの他、CD-ROM、CD-R、DVD-ROM 等の光ディスク等を用いることができる。   The digital image signal 133 is subjected to wavelet transform encoding processing by the encoding unit 31 to generate an encoded bit stream 134. The encoded bit stream 134 is sent to the decoding unit 37, and immediately after being decoded by the same unit 37, the decoded image 135 is output via the display unit 35 and the display image 136 is output. On the other hand, the encoded bit stream 134 is sent to the writing unit 32, is sent to the recording medium control unit 34 as a recording encoded bit stream 141 together with the write control signal, and is multiplexed with the control information to become a recording signal. It is written on the recording medium 40. Between the recording medium 40 and the recording medium control unit 34, recording and reproduction of the signal 139 according to the recording format of the recording medium 40 is performed. Here, as the recording medium 40, an optical disk such as a CD-ROM, CD-R, DVD-ROM, etc. can be used in addition to a magnetic tape.

一方、この装置で、例えば記録媒体40に記録された画像の符号化ビットストリームを読み出して、高速サーチを行う場合について以下述べる。外部信号137は例えばサーチ速度の情報を保持しており、この情報は外部入力制御部38で解読され、記録媒体制御部34に制御信号138が伝達される。記録媒体40から記録媒体制御部34へは、前記サーチ速度に合わせて記録媒体40の駆動系が作動し、記録媒体40の記録フォーマットに従った符号化ビットストリームの信号139が読み出され、記録媒体制御部34を介して符号化ビットストリーム140(付加情報やヘッダ情報を含む)が読み出し部33に送られる。読み出し部33から出力された、純粋な符号化ビットストリーム142(付加情報やヘッダ情報がないもの)は、復号部37で復号されて、前述の通り復号画像135が同部より送出される。以上がサーチ時の動作である。   On the other hand, a case where a high-speed search is performed by reading out an encoded bit stream of an image recorded on the recording medium 40, for example, will be described below. The external signal 137 holds, for example, search speed information. This information is decoded by the external input control unit 38 and the control signal 138 is transmitted to the recording medium control unit 34. From the recording medium 40 to the recording medium control unit 34, the drive system of the recording medium 40 operates in accordance with the search speed, and an encoded bit stream signal 139 according to the recording format of the recording medium 40 is read and recorded. An encoded bit stream 140 (including additional information and header information) is sent to the reading unit 33 via the medium control unit 34. The pure encoded bit stream 142 (without additional information or header information) output from the reading unit 33 is decoded by the decoding unit 37, and the decoded image 135 is transmitted from the same unit as described above. The above is the operation at the time of search.

次に、サーチ時の符号化ビットストリームの読み出しについて述べる。本実施の形態では、前記符号化部での符号化手段として、画像の帯域分割を階層的に行うウェーブレット符号化手段を用いている利点を生かすべく、記録媒体40に記録された符号化ビットストリームから、サーチ速度に合わせて、所定の帯域成分に相当するものを選択し読み出す手段を用いる。すなわち、サーチ速度に合わせて、記録媒体40に記録された符号化ビットストリームから、該当する帯域成分を読み出すものであり、具体的には、例えば、サーチ速度が高速な場合には、低域成分の帯域に相当する符号化ビットストリームだけを読み出して、低域成分の帯域画像を復号し、逆にサーチ速度が低速な場合には、低域と高域成分の帯域に相当する符号化ビットストリームを読み出して帯域画像を復号するものである。より詳細な構成及び動作については、以下の実施の形態で述べる。   Next, reading of an encoded bit stream at the time of search will be described. In the present embodiment, the coded bit stream recorded on the recording medium 40 is used in order to take advantage of the wavelet coding means that hierarchically divides the image band as the coding means in the coding section. Therefore, a means for selecting and reading out the one corresponding to the predetermined band component in accordance with the search speed is used. That is, the corresponding band component is read from the encoded bit stream recorded on the recording medium 40 in accordance with the search speed. Specifically, for example, when the search speed is high, the low band component Only the encoded bit stream corresponding to the band of the low frequency component is read and the band image of the low frequency component is decoded. Conversely, when the search speed is low, the encoded bit stream corresponding to the band of the low frequency band and the high frequency component is decoded. And the band image is decoded. More detailed configurations and operations will be described in the following embodiments.

次に、本発明の第15の実施の形態について説明する。
この第15の実施の形態の装置は、上述したサーチ速度が高速な場合に低域成分の帯域画像を復号し、サーチ速度が低速な場合には、低域と高域成分の帯域画像を復号するものであり、全体構成としては上記図13のものを用いることができる。
Next, a fifteenth embodiment of the present invention is described.
The apparatus of the fifteenth embodiment decodes a low-frequency component band image when the above-described search speed is high, and decodes a low-frequency and high-frequency component band image when the search speed is low. The overall configuration shown in FIG. 13 can be used.

通常、サーチ時には所定時間に多くの画像フレームを再生する必要があることから、符号化ビットストリームをすべて読み出して復号することは、ハードウェア的に困難である。従って通常はフレームをある間隔で読み飛ばしたり、画像の一部しか復号しない等の工夫がされる。   Usually, since it is necessary to reproduce many image frames in a predetermined time at the time of search, it is difficult in terms of hardware to read and decode all the encoded bit streams. Therefore, ingenuity is usually taken such as skipping frames at certain intervals or decoding only a part of the image.

しかし、本第15の実施の形態では、全フレームを復号し、且つ全体の画像の印象が損なわれることの無いサーチの手段を実現する。すなわち、上記図4と共に既に説明したように、ウェーブレット符号化手段を用いれば、低域成分(例えば上記LLLL成分)だけから、復号画像を得ることが容易にできる点を利用し、例えば高速サーチの場合や符号化ビットストリームの読み出し速度が十分に確保出来ない場合には、低域成分の帯域に相当する符号化ビットストリームだけを読み出して、図13の復号部37で復号画像を生成することが出来る。   However, the fifteenth embodiment implements a search means that decodes all frames and does not impair the overall image impression. That is, as already described with reference to FIG. 4, using wavelet encoding means, it is possible to easily obtain a decoded image from only a low frequency component (for example, the LLLL component). In this case or when the reading speed of the encoded bit stream cannot be sufficiently secured, only the encoded bit stream corresponding to the low-frequency component band is read and the decoded image can be generated by the decoding unit 37 in FIG. I can do it.

他方、低速サーチの場合や符号化ビットストリームの読み出し速度が十分に確保出来る場合には、低域成分に加えて中・高域成分の帯域に相当する符号化ビットストリームを読み出して、復号部37で復号画像を生成することが出来る。以上の手段によって、サーチ速度に応じて、または符号化ビットストリームの読み出し速度に合わせて、1つ又は複数の最適な帯域を用いた復号が実現できる。   On the other hand, in the case of low-speed search or when the reading speed of the encoded bit stream can be sufficiently secured, the encoded bit stream corresponding to the band of the middle / high frequency component is read in addition to the low frequency component, and the decoding unit 37 A decoded image can be generated. By the above means, decoding using one or a plurality of optimum bands can be realized according to the search speed or according to the read speed of the encoded bit stream.

この場合、復号画像を、上述したウェーブレット変換における所定の帯域成分のサイズで復号するようにしてもよい。これは、例えば、上記の様に、LLLL成分に相当する符号化ビットストリームだけを読み出して復号する場合、LLLLの帯域成分が持つ画像のサイズは、図4からも明らかな様に、原画像の水平・垂直共に4分の1である。従って、表示画像136には元の1/4(長さの比で1/4,面積比では1/16)の復号画像が表示されることになる。   In this case, the decoded image may be decoded with the size of the predetermined band component in the wavelet transform described above. For example, as described above, when only the encoded bit stream corresponding to the LLLL component is read and decoded, the size of the image included in the band component of the LLLL is, as is apparent from FIG. The horizontal and vertical are 1/4. Therefore, the display image 136 displays the original 1/4 decoded image (1/4 in length ratio and 1/16 in area ratio).

他方、別の方法として、復号画像を、サイズは原画像と同一で、所定の帯域成分を用いた復号画像で生成するようにしてもよい。この場合、LLLL成分だけを用いた復号画像は、高域成分が存在しないので、解像度の低下したややボケた画質になる。しかし、画像のエネルギーの多くは低域成分に集中しているので、画像のおおまかな特徴は十分把握出来ることになる。   On the other hand, as another method, the decoded image may be generated as a decoded image having the same size as the original image and using a predetermined band component. In this case, since the decoded image using only the LLLL component does not have a high frequency component, it has a slightly blurred image quality with reduced resolution. However, since most of the energy of the image is concentrated in the low-frequency component, the rough features of the image can be sufficiently grasped.

次に、本発明の第16の実施の形態について説明する。
上記第14,第15の実施の形態は、画像入力部、表示部も含めた符号化・復号装置であるのに対して、本第16の実施の形態は、図14に示すように、記録媒体40を読み出し、復号する部分のみを備えた装置の構成である。つまりエンコーダが存在しない、受像器やポータブルプレイヤーに適した装置である。次に構成と動作について説明する。
Next, a sixteenth embodiment of the present invention will be described.
The fourteenth and fifteenth embodiments are encoding / decoding devices including an image input unit and a display unit, whereas the sixteenth embodiment is a recording / recording unit as shown in FIG. This is a configuration of an apparatus including only a part for reading and decoding the medium 40. In other words, it is a device suitable for a receiver or a portable player without an encoder. Next, the configuration and operation will be described.

図14に示す装置は、記録媒体40、制御部45、符号化ビットストリーム読み出し部46、復号部37とを有して構成されている。外部入力情報137に従い、制御部45からの制御情報145及び147によって、符号化ビットストリーム読み出し部46では、記録媒体40から付加情報やヘッダ情報等を含む符号化ビットストリーム148を読み出し、付加情報やヘッダ情報等を含まない純粋な符号化ビットストリーム149を出力する。この純粋な符号化ビットストリーム149は、復号部37で復号されて、復号画像130が生成・出力される。この復号部37での動作は、上記第14,第15の実施の形態15で述べたものと同様であるため、説明を省略する。   The apparatus shown in FIG. 14 includes a recording medium 40, a control unit 45, an encoded bitstream reading unit 46, and a decoding unit 37. In accordance with the external input information 137, the encoded bitstream reading unit 46 reads the encoded bitstream 148 including additional information and header information from the recording medium 40 according to the control information 145 and 147 from the control unit 45, and A pure encoded bit stream 149 that does not include header information or the like is output. The pure encoded bit stream 149 is decoded by the decoding unit 37, and a decoded image 130 is generated and output. Since the operation of the decoding unit 37 is the same as that described in the fourteenth and fifteenth embodiments, description thereof is omitted.

次に、本発明の第17の実施の形態について説明する。
この第17の実施の形態は、入力画像がインターレース画像である場合の動画像符号化装置である。
Next, a seventeenth embodiment of the present invention will be described.
The seventeenth embodiment is a moving image encoding apparatus when an input image is an interlaced image.

現在我々が親しんでいるテレビ放送は、飛び越し走査を用いたインターレース画像であり、奇数フィールドと偶数フィールドから構成されている。図15はこれを図示したものあり、図中のラインLa,La,・・・が奇数フィールド、斜線で示すラインLb,Lb,・・・が偶数フィールドを意味している。 The TV broadcast that we are currently familiar with is an interlaced image using interlaced scanning, which consists of odd and even fields. FIG. 15 illustrates this. In the figure, lines La 1 , La 2 ,... Represent odd fields, and hatched lines Lb 1 , Lb 2 ,.

インターレース画像は、図15の左のフレーム(Frame) 構造のように、奇数フィールドと偶数フィールドとが1ライン毎に交互に並べられており、これをフレーム画像のまま符号化すると効率が落ちる場合がある。それを示したのが図16である。この図16で示すように、インターレース画像のフレーム(Frame) 画像の場合に、被写体の動きが大きいと、奇数フィールドと偶数フィールドとの時間差があるために、図16の左のフレーム(Frame) 構造のように奇数フィールドと偶数フィールドとの画像の間に、ずれが生じて見える。これが後段の符号化を行う際の効率の低下に繋がる。一方、図16の右のフィールド(Field) 構造に分けることにより、ライン毎のずれは無くなり効率の低下は防げる。   In an interlaced image, odd fields and even fields are alternately arranged for each line, as in the left frame structure of FIG. 15, and the efficiency may be reduced if these are encoded as frame images. is there. This is shown in FIG. As shown in FIG. 16, in the case of a frame image of an interlaced image, if the movement of the subject is large, there is a time difference between the odd field and the even field, so the left frame structure in FIG. In this way, there appears to be a shift between the odd field and even field images. This leads to a reduction in efficiency when performing subsequent encoding. On the other hand, by dividing the structure into the field structure on the right side in FIG.

次に実際の動作について、図17を用いて説明する。入力画像のインターレース画像100はまず、フィールド分割部56で奇数フィールド画像155と、偶数フィールド画像156とに分割される。これらの奇数フィールド画像155及び偶数フィールド画像156は、符号化部57において符号化されて、符号化ビットストリーム157と符号化モード情報158とが送出される。   Next, the actual operation will be described with reference to FIG. The interlaced image 100 of the input image is first divided into an odd field image 155 and an even field image 156 by the field dividing unit 56. The odd field image 155 and the even field image 156 are encoded by the encoding unit 57, and an encoded bit stream 157 and encoding mode information 158 are transmitted.

ここで、符号化部57での具体的な動作については、上記第1の実施の形態で説明した符号化構成手段をそのまま用いれば良い。すなわち、図1と共に説明したように、ブロック分割部1からエントロピー符号化部13に至るまでの各部を備えていればよい。以上の構成により、インターレース画像でも効率を落とすことなく、符号化効率の高い動画像符号化手段を実現することが出来る。   Here, for the specific operation in the encoding unit 57, the encoding configuration means described in the first embodiment may be used as it is. That is, as described with reference to FIG. 1, it is only necessary to include each part from the block dividing unit 1 to the entropy encoding unit 13. With the above configuration, it is possible to realize a moving image encoding means with high encoding efficiency without reducing the efficiency even with interlaced images.

次に、本発明の第17の実施の形態について説明する。
この第17の実施の形態は、上記第17の実施の形態の符号化装置に対応した復号装置に相当する。次に図18を用いて動作を説明する。符号化ビットストリーム157と符号化モード情報158とを入力した復号部58では復号手段を用いて、奇数フィールドの復号画像151と、偶数フィールドの復号画像152とを出力する。そして、フィールド合成部59にて、これらの奇数フィールドの復号画像151と偶数フィールドの復号画像152とを合成して、両フィールドの合成画像153、すなわち図15または図16で示したフレーム(Frame) 構造の画像に戻す。
Next, a seventeenth embodiment of the present invention will be described.
The seventeenth embodiment corresponds to a decoding device corresponding to the encoding device of the seventeenth embodiment. Next, the operation will be described with reference to FIG. The decoding unit 58 that has received the encoded bitstream 157 and the encoding mode information 158 outputs a decoded image 151 of an odd field and a decoded image 152 of an even field using decoding means. Then, the field synthesis unit 59 synthesizes the decoded image 151 of the odd field and the decoded image 152 of the even field to synthesize the composite image 153 of both fields, that is, the frame shown in FIG. 15 or FIG. Return to the structure image.

なお、上記復号部58の具体的な構成としては、上記第11の実施の形態で述べた復号回路構成をそのまま使えば良い。すなわち、図12のエントロピー復号部16からフレームメモリ14に至る各構成部を、復号手段として用いる。   As a specific configuration of the decoding unit 58, the decoding circuit configuration described in the eleventh embodiment may be used as it is. That is, each component from the entropy decoding unit 16 to the frame memory 14 in FIG. 12 is used as decoding means.

以上の構成により、インターレース画像の符号化ビットストリームを各フィールド毎に復号して、フィールド別に復号画像を生成し、フィールド画像をフレーム画像に合成して生成することが出来る。   With the above configuration, the encoded bit stream of the interlaced image can be decoded for each field, a decoded image can be generated for each field, and the field image can be combined with the frame image for generation.

本発明の実施の形態の具体的な応用例としては、電子カメラ、携帯・移動体画像送受信端末(PDA)、プリンタ、衛星画像、医用用画像等の圧縮・伸張器またはそのソフトウェアモジュール、ゲーム、3次元CGで用いるテキスチャの圧縮・伸長装置またはそのソフトウェアモジュール等が挙げられる。   Specific application examples of the embodiment of the present invention include an electronic camera, a portable / mobile image transmission / reception terminal (PDA), a printer, a satellite image, a compression / decompression unit for medical images, or a software module thereof, a game, Examples include a texture compression / decompression apparatus used in three-dimensional CG or a software module thereof.

本発明の実施の形態によれば、入力画像を複数個のブロックに分割し、画像メモリに記憶・保持された前フレームの同位置にあるブロック画像と、現在の符号化対象ブロックとの誤差を検出し、検出された誤差に応じて符号化対象ブロックの符号化を行うか行わないかを選択し、各ブロック画像毎にウェーブレット変換符号化を施すことにより、従来の非常に処理の重い動き補償予測手段を用いず、ブロック単位の簡易な予測手段を用いているので、非常に処理量が少なくて済む。ここで、通常の動画像では背景部分はほとんど動かないので、このような部分では本発明が有効に働き、圧縮効率が高まるという効果がある。   According to the embodiment of the present invention, an input image is divided into a plurality of blocks, and an error between the block image at the same position of the previous frame stored and held in the image memory and the current encoding target block is calculated. Detects and selects whether or not to encode the block to be encoded according to the detected error, and performs wavelet transform coding for each block image. Since simple prediction means in units of blocks is used without using the prediction means, the amount of processing is very small. Here, since the background portion hardly moves in a normal moving image, the present invention works effectively in such a portion, and there is an effect that the compression efficiency is increased.

また、動き補償手段が大幅に簡略化できるので、従来は動き補償手段を専用のハードウェア(LSI)で実現していたのに対して、本発明ではソフトウェアで実現可能である。   In addition, since the motion compensation means can be greatly simplified, the motion compensation means is conventionally realized by dedicated hardware (LSI), but can be realized by software in the present invention.

また、ブロック単位の符号化手段を用い、ウェーブレット変換符号化の際のフィルタがブロックをはみ出る部分の画素については、ブロック境界の歪みが目立たない手段を用いているので、常に滑らかな接続面の復号画像が得られるという効果もある。   Also, using block-based coding means, and for the pixels where the filter protrudes from the block when wavelet transform coding is used, the block boundary distortion is not noticeable, so smooth connection surface decoding is always performed. There is also an effect that an image can be obtained.

また、本発明の実施の形態の画像記録再生装置によれば、複数個の低域通過フィルタと高域通過フィルタから構成されるフィルタバンク手段によって、入力画像を複数個の帯域に変換する手段と、同該各帯域毎に変換係数を走査、量子化、エントロピー符号化する手段により符号化ビットストリームを記録媒体に記録する手段とを備えた画像圧縮装置と、上記記録媒体から符号化ビットストリームを読み出して、エントロピー復号化、逆量子化、逆走査、更に同該フィルタバンク手段によって逆変換を行い、復号画像を出力する手段を備えた画像伸長装置とを有し、サーチ速度に合わせて、上記記録媒体に記録された符号化ビットストリームから、該当する帯域成分を読み出すサーチ手段を有しているため、記録媒体に記録された符号化ビットストリームを読み出して、復号画像のサーチを行う際には、サーチ速度に合わせた最適な帯域成分だけを読み出して復号することができ、コマ落ちの無い常に高品質な復号画像を得ることができる。   Further, according to the image recording / reproducing apparatus of the embodiment of the present invention, means for converting an input image into a plurality of bands by a filter bank unit comprising a plurality of low-pass filters and a high-pass filter; An image compression apparatus comprising: means for scanning, quantizing, and entropy-encoding the transform coefficient for each band; and means for recording the encoded bitstream on the recording medium; and the encoded bitstream from the recording medium. Read out, entropy decoding, inverse quantization, inverse scanning, further performing inverse transformation by the filter bank means, and an image decompression device provided with means for outputting a decoded image, and according to the search speed, Since there is a search means for reading out the corresponding band component from the encoded bit stream recorded on the recording medium, the encoded bit recorded on the recording medium is provided. It reads the stream, when performing a search of the decoded image can be read only optimum band components tailored to search speed can be decoded to obtain a consistently high-quality decoded image without frame dropping.

また、復号画像も原画像のサイズにすることの他、帯域成分の持つ解像度にすることも出来るので、復号画像のバリエーションが増えるので、用途に合わせて使い分けることができる。   In addition to the size of the original image as well as the resolution of the band component, the decoded image can also have the resolution of the band component, so that the variation of the decoded image increases, so that it can be used properly according to the application.

従って、本発明の実施の形態によれば、高圧縮下での高画質と部分ブロック復号の実現の両方を兼ね備えており、さらに、ウェーブレット変換手段とウェーブレット逆変換手段との整合が取れるので、高能率な符号化、及び高画質な復号が可能になる。   Therefore, according to the embodiment of the present invention, both high image quality under high compression and partial block decoding are achieved, and the wavelet transform unit and the wavelet inverse transform unit can be matched. Efficient encoding and high-quality decoding are possible.

さらに、インターレース画像の場合には、奇数フィールド画像と偶数フィールド画像とに分離して、別個に符号化することで、画像の中に動きの大きい被写体が存在する場合でも、常に高い符号化効率を維持できる。   Furthermore, in the case of an interlaced image, it is separated into an odd-numbered field image and an even-numbered field image and encoded separately, so that even when a subject with large motion exists in the image, a high coding efficiency is always obtained. Can be maintained.

なお、本発明は上述した実施の形態のみに限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能であることは勿論である。   It should be noted that the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the scope of the present invention.

本発明の説明に供する動画像符号化装置の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the moving image encoder used for description of this invention. 通常のウェーブレット変換部の概略構成(レベル3まで)を示すブロック図である。It is a block diagram which shows schematic structure (until level 3) of a normal wavelet transformation part. 通常のウェーブレット逆変換部の概略構成(レベル3まで)を示すブロック図である。It is a block diagram which shows schematic structure (until level 3) of a normal wavelet inverse transformation part. 2次元画像の帯域分割(分割レベル=2)を説明するための図である。It is a figure for demonstrating the zone division (division level = 2) of a two-dimensional image. オーバーラップ型ウェーブレット符号化の際の畳み込み演算を説明するための図である。It is a figure for demonstrating the convolution calculation in the case of overlap type wavelet encoding. 画素の対称畳み込み演算を施すウェーブレット符号化の概念を説明するための図である。It is a figure for demonstrating the concept of the wavelet encoding which performs the symmetrical convolution operation of a pixel. 対称畳み込み演算の概念を説明するための図である。It is a figure for demonstrating the concept of a symmetrical convolution operation. 直線畳み込み演算の概念を説明するための図である。It is a figure for demonstrating the concept of a linear convolution calculation. 点対称畳み込み演算の概念を説明するための図である。It is a figure for demonstrating the concept of a point symmetrical convolution operation. ウェーブレット変換係数の対称畳み込み演算を施すウェーブレット復号の概念を説明するための図である。It is a figure for demonstrating the concept of the wavelet decoding which performs the symmetrical convolution operation of a wavelet transform coefficient. ウェーブレット変換係数の直線畳み込み演算を施すウェーブレット復号の概念を説明するための図である。It is a figure for demonstrating the concept of the wavelet decoding which performs the linear convolution operation of a wavelet transform coefficient. 本発明の説明に供する動画像復号装置の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the moving image decoding apparatus with which it uses for description of this invention. 本発明の説明に供する画像記録再生装置の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the image recording / reproducing apparatus with which it uses for description of this invention. 本発明の説明に供する画像復号装置の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the image decoding apparatus with which it uses for description of this invention. インターレース画像の場合のフレーム画像及びフィールド画像を説明するための図である。It is a figure for demonstrating the frame image and field image in the case of an interlaced image. インターレース画像の場合のフレーム画像及びフィールド画像を説明するための図である。It is a figure for demonstrating the frame image and field image in the case of an interlaced image. インターレース画像を符号化するための画像符号化装置の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the image coding apparatus for coding an interlaced image. インターレース画像を復号するための画像復号装置の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the image decoding apparatus for decoding an interlaced image.

符号の説明Explanation of symbols

1 ブロック分割部、 2 符号化モード制御部、 4 ウェーブレット変換部、 5 スキャニング部、 46量子化部、 7 逆量子化部、 8 逆スキャニング部、 9 復号対象係数抽出部、 10 ウェーブレット逆変換部、 11 復号画像領域抽出部、 12 誤差検出部、 13 エントロピー符号化部、 14 フレームメモリ、 15, 復号モード制御部、 16 エントロピー復号部、 21 分析用ローパスフィルタ、 22 分析用ハイパスフィルタ、 23a,23b 2分の1倍のダウンサンプラ、 24a,24b 2倍のアップサンプラ、 25 合成用ローパスフィルタ、 26 合成用ハイパスフィルタ、 31,57 符号化部、 32 書き込み部、 33 読み出し部、 34 記録媒体制御部、 35 表示部、 37,57 復号部、 38 外部入力・制御部、 39 CCD部、 40 記録媒体、 45 制御部、 46 符号化ビットストリーム読み出し部、 56 フィールド分割部、 59 フィールド合成部   1 block division unit, 2 encoding mode control unit, 4 wavelet transform unit, 5 scanning unit, 46 quantization unit, 7 inverse quantization unit, 8 inverse scanning unit, 9 decoding target coefficient extraction unit, 10 wavelet inverse transform unit, DESCRIPTION OF SYMBOLS 11 Decoding image area extraction part, 12 Error detection part, 13 Entropy encoding part, 14 Frame memory, 15, Decoding mode control part, 16 Entropy decoding part, 21 Low pass filter for analysis, 22 High pass filter for analysis, 23a, 23b 2 1 / down sampler, 24a, 24b 2x upsampler, 25 synthesis low-pass filter, 26 synthesis high-pass filter, 31, 57 encoding unit, 32 writing unit, 33 reading unit, 34 recording medium control unit, 35 display unit, 37, 57 Decoding unit, 38 external input / control unit, 39 CCD unit, 40 recording medium, 45 control unit, 46 encoded bitstream reading unit, 56 field division unit, 59 field synthesis unit

Claims (34)

入力画像を複数個のブロックに分割するブロック分割手段と、
画像メモリに記憶・保持された前フレームの同位置にあるブロック画像と、現在の符号化対象ブロックとの誤差を検出する誤差検出手段と、
検出された誤差に応じて符号化対象ブロックの符号化を行うか行わないかを選択制御する符号化モード制御手段と、
各ブロック画像毎にウェーブレット変換符号化を施すウェーブレット変換符号化手段と
を有することを特徴とする動画像符号化装置。
Block dividing means for dividing the input image into a plurality of blocks;
Error detection means for detecting an error between the block image at the same position of the previous frame stored and held in the image memory and the current encoding target block;
Encoding mode control means for selectively controlling whether or not to perform encoding of the encoding target block according to the detected error;
And a wavelet transform coding means for performing wavelet transform coding for each block image.
上記ウェーブレット変換符号化手段により得られた符号化出力に対してウェーブレット逆変換復号を施すウェーブレット逆変換復号手段を有し、上記画像メモリには、上記ウェーブレット逆変換復号手段からの画像を記憶・保持することを特徴とする請求項1記載の動画像符号化装置。   Wavelet inverse transform decoding means for performing wavelet inverse transform decoding on the encoded output obtained by the wavelet transform coding means, and storing and holding the image from the wavelet inverse transform decoding means in the image memory The moving picture coding apparatus according to claim 1, wherein: 上記ウェーブレット変換符号化手段は、上記各ブロック画像毎にウェーブレット変換を施すウェーブレット変換手段と、ウェーブレット変換係数をスキャニングするスキャニング手段と、スキャニング後の係数を量子化する量子化手段と、量子化係数をエントロピー符号化して符号化ビットストリームを出力するエントロピー符号化手段とを有して構成されることを特徴とする請求項1記載の動画像符号化装置。   The wavelet transform coding means includes a wavelet transform means for performing wavelet transform for each block image, a scanning means for scanning wavelet transform coefficients, a quantizing means for quantizing the coefficients after scanning, and a quantized coefficient. The moving picture coding apparatus according to claim 1, further comprising entropy coding means for entropy coding and outputting a coded bit stream. 上記ウェーブレット変換手段の前段に、上記符号化モード制御手段からの情報に応じて現在の符号化対象ブロックの領域を決定して、符号化対象領域の画素を抽出する符号化対象領域抽出手段を設けることを特徴とする請求項3記載の動画像符号化装置。   An encoding target region extraction unit is provided in front of the wavelet transform unit, which determines a current encoding target block region in accordance with information from the encoding mode control unit and extracts pixels of the encoding target region. The moving picture coding apparatus according to claim 3. 上記符号化対象領域抽出手段は、当該ブロックの周囲に、上記ウェーブレット変換手段によるフィルタリングの影響が及ぶ範囲まで、隣接ブロックの画素を読み出すことで、符号化対象領域を拡大することを特徴とする請求項4記載の動画像符号化装置。   The encoding target area extracting unit expands the encoding target area by reading out pixels of an adjacent block to the extent that the influence of filtering by the wavelet transform unit is around the block. Item 5. The moving image encoding device according to Item 4. 上記符号化対象領域抽出手段は、当該ブロックの周囲に、上記ウェーブレット変換手段によるフィルタリングの影響が及ぶ範囲まで、当該ブロック内部の画素値を、ブロック境界で鏡像関係になるように対称拡張することで、符号化対象領域を拡大することを特徴とする請求項4記載の動画像符号化装置。   The encoding target area extracting unit symmetrically expands the pixel values inside the block around the block so that the influence of filtering by the wavelet transform unit is affected by the block boundary. 5. The moving picture encoding apparatus according to claim 4, wherein the encoding target area is enlarged. 上記符号化対象領域抽出手段は、当該ブロックの周囲に、上記ウェーブレット変換手段によるフィルタリングの影響が及ぶ範囲まで、0値を挿入することで、符号化対象領域を拡大することを特徴とする請求項4記載の動画像符号化装置。   The encoding target region extracting unit expands the encoding target region by inserting a zero value around the block up to a range affected by filtering by the wavelet transform unit. 4. The moving image encoding apparatus according to 4. 上記符号化対象領域抽出手段は、当該ブロックの周囲に、上記ウェーブレット変換手段によるフィルタリングの影響が及ぶ範囲まで、当該ブロック内部の画素値を、ブロック境界で点対称関係になるように対称拡張することで、符号化対象領域を拡大することを特徴とする請求項4記載の動画像符号化装置。   The encoding target area extracting unit symmetrically expands the pixel values in the block around the block so as to have a point-symmetrical relationship at the block boundary to the extent that the filtering by the wavelet transform unit is affected. 5. The moving picture encoding apparatus according to claim 4, wherein the encoding target area is enlarged. 上記ウェーブレット変換符号化手段からの量子化されたウェーブレット変換係数に対してウェーブレット逆変換復号を施すウェーブレット逆変換復号手段を有し、このウェーブレット逆変換復号手段からの画像を上記画像メモリに記憶・保持すると共に、上記ウェーブレット逆変換復号手段は、上記量子化された変換係数を逆量子化して変換係数に戻す逆量子化手段と、変換係数を逆走査する逆スキャニング手段と、得られた変換係数を逆ウェーブレット変換するウェーブレット逆変換手段とを有して構成されることを特徴とする請求項1記載の動画像符号化装置。   Wavelet inverse transform decoding means for performing wavelet inverse transform decoding on the quantized wavelet transform coefficients from the wavelet transform coding means, and storing and holding the image from the wavelet inverse transform decoding means in the image memory In addition, the wavelet inverse transform decoding means includes an inverse quantization means for inversely quantizing the quantized transform coefficient to return it to a transform coefficient, an inverse scanning means for inversely scanning the transform coefficient, and an obtained transform coefficient. 2. The moving picture coding apparatus according to claim 1, further comprising wavelet inverse transform means for performing inverse wavelet transform. 上記ウェーブレット逆変換手段の前段に、復号対象となる変換係数を抽出する復号対象係数抽出手段を設け、上記逆ウェーブレット逆変換手段の後段に、復号画像領域抽出手段を設けることを特徴とする請求項9記載の動画像符号化装置。   The decoding object area extracting means for extracting a conversion coefficient to be decoded is provided in the preceding stage of the wavelet inverse transforming means, and the decoded image area extracting means is provided in the subsequent stage of the inverse wavelet inverse transforming means. 9. The moving image encoding device according to 9. 上記復号対象係数抽出手段は、当該ブロックの周囲に、上記ウェーブレット逆変換手段によるフィルタリングの影響が及ぶ範囲まで、隣接ブロックの変換係数を読み出すことで、復号対象の係数領域を拡大することを特徴とする請求項10記載の動画像符号化装置。   The decoding target coefficient extraction unit expands the coefficient region of the decoding target by reading out the transform coefficient of the adjacent block to the extent that the influence of the filtering by the wavelet inverse transformation unit extends around the block. The moving image encoding apparatus according to claim 10. 上記復号対象係数抽出手段は、当該ブロックの周囲に、上記ウェーブレット逆変換手段によるフィルタリングの影響が及ぶ範囲まで、当該ブロック内部の変換係数を、ブロック境界で鏡像関係になるように対称拡張することで、復号対象の係数領域を拡大することを特徴とする請求項10記載の動画像符号化装置。   The decoding target coefficient extraction unit symmetrically expands the transform coefficient inside the block around the block so that the influence of the filtering by the wavelet inverse transform unit is affected so as to have a mirror image relation at the block boundary. The moving picture encoding apparatus according to claim 10, wherein the coefficient area to be decoded is expanded. 上記復号対象係数抽出手段は、当該ブロックの周囲に、上記ウェーブレット逆変換手段によるフィルタリングの影響が及ぶ範囲まで、0値を挿入することで、復号対象の係数領域を拡大することを特徴とする請求項10記載の動画像符号化装置。   The decoding target coefficient extraction unit expands the coefficient region to be decoded by inserting a zero value around the block up to a range affected by the filtering by the wavelet inverse transformation unit. Item 11. The moving image encoding device according to Item 10. 上記復号対象係数抽出手段は、当該ブロックの周囲に、上記ウェーブレット逆変換手段によるフィルタリングの影響が及ぶ範囲まで、当該ブロック内部の変換係数を、ブロック境界で点対称関係になるように対称拡張することで、復号対象の係数領域を拡大することを特徴とする請求項10記載の動画像符号化装置。   The decoding target coefficient extraction means symmetrically expands the transform coefficients inside the block around the block so as to have a point-symmetrical relationship at the block boundary to the extent that the filtering by the wavelet inverse transform means is affected. 11. The moving picture encoding apparatus according to claim 10, wherein the coefficient area to be decoded is expanded. 上記復号画像領域抽出手段は、上記ウェーブレット逆変換手段によって復元された復号画像から、対象ブロック領域を抽出することを特徴とする請求項10記載の動画像符号化装置。   11. The moving picture coding apparatus according to claim 10, wherein the decoded image area extracting unit extracts a target block area from the decoded image restored by the wavelet inverse transformation unit. 上記入力画像を複数個のブロックに分割する手段の前段に、上記入力画像としてのインターレース画像を奇数フィールドと偶数フィールドに分割する手段を設けることを特徴とする請求項1記載の動画像符号化装置。   2. A moving picture encoding apparatus according to claim 1, wherein means for dividing the interlaced image as the input image into an odd field and an even field is provided before the means for dividing the input image into a plurality of blocks. . 入力画像を複数個のブロックに分割する工程と、
画像メモリに記憶・保持された前フレームの同位置にあるブロック画像と、現在の符号化対象ブロックとの誤差を検出する工程と、
検出された誤差に応じて符号化対象ブロックの符号化を行うか行わないかを選択する工程と、
各ブロック画像毎にウェーブレット変換符号化を施す工程と
を有することを特徴とする動画像符号化方法。
Dividing the input image into a plurality of blocks;
Detecting an error between the block image at the same position of the previous frame stored and held in the image memory and the current encoding target block;
Selecting whether or not to perform encoding of the encoding target block according to the detected error; and
And a step of performing wavelet transform coding for each block image.
上記ウェーブレット変換符号化を施す工程により得られた符号化出力に対してウェーブレット逆変換復号を施す工程を有し、上記画像メモリには、上記ウェーブレット逆変換復号を施す工程により得られた画像を記憶・保持することを特徴とする請求項17記載の動画像符号化方法。   A step of performing wavelet inverse transform decoding on the encoded output obtained by the step of performing wavelet transform coding, and the image memory stores the image obtained by the step of performing wavelet inverse transform decoding The video encoding method according to claim 17, wherein the video encoding method is held. 符号化ビットストリームを入力または読み出してウェーブレット逆変換復号し復号画像を出力するウェーブレット逆変換復号手段と、
上記ウェーブレット逆変換復号手段により得られた復号画像から対象領域を抽出する復号画像領域抽出手段と、
得られた復号画像を記憶・保持する画像メモリと、
供給された符号化制御信号に従って、上記画像メモリに予め記憶された前フレームの復号画像を送出するか、または上記ウェーブレット逆変換復号手段によって復号された画像を送出するかを選択する復号モード制御手段と
を有することを特徴とする動画像復号装置。
Wavelet inverse transform decoding means for inputting or reading an encoded bitstream, inverse wavelet transform decoding and outputting a decoded image;
A decoded image region extracting unit that extracts a target region from the decoded image obtained by the wavelet inverse transform decoding unit;
An image memory for storing and holding the obtained decoded image;
Decoding mode control means for selecting whether to send the decoded image of the previous frame stored in advance in the image memory or to send the image decoded by the wavelet inverse transform decoding means in accordance with the supplied encoding control signal A moving picture decoding apparatus comprising:
上記ウェーブレット逆変換復号手段は、上記量子化された変換係数を逆量子化して変換係数に戻す逆量子化手段と、変換係数を逆走査する逆スキャニング手段と、得られた変換係数から復号対象となる変換係数を抽出する復号対象係数抽出手段と、得られた復号対象係数を逆ウェーブレット変換するウェーブレット逆変換手段とを有して構成されることを特徴とする請求項19記載の動画像復号装置。   The wavelet inverse transform decoding means includes: an inverse quantization means for inversely quantizing the quantized transform coefficient to return it to a transform coefficient; an inverse scanning means for inversely scanning the transform coefficient; and an object to be decoded from the obtained transform coefficient. 20. The moving picture decoding apparatus according to claim 19, further comprising: a decoding target coefficient extracting unit that extracts a transform coefficient, and a wavelet inverse converting unit that performs inverse wavelet transform on the obtained decoding target coefficient. . 上記復号対象係数抽出手段は、当該ブロックの周囲に、上記ウェーブレット逆変換手段によるフィルタリングの影響が及ぶ範囲まで、隣接ブロックの変換係数を読み出すことで、復号対象の係数領域を拡大することを特徴とする請求項20記載の動画像復号装置。   The decoding target coefficient extraction unit expands the coefficient region of the decoding target by reading out the transform coefficient of the adjacent block to the extent that the influence of the filtering by the wavelet inverse transformation unit extends around the block. The moving picture decoding apparatus according to claim 20. 上記復号対象係数抽出手段は、当該ブロックの周囲に、上記ウェーブレット逆変換手段によるフィルタリングの影響が及ぶ範囲まで、当該ブロック内部の変換係数を、ブロック境界で鏡像関係になるように対称拡張することで、復号対象の係数領域を拡大することを特徴とする請求項20記載の動画像復号装置。   The decoding target coefficient extraction unit symmetrically expands the transform coefficient inside the block around the block so that the influence of the filtering by the wavelet inverse transform unit is affected so as to have a mirror image relation at the block boundary. 21. The moving picture decoding apparatus according to claim 20, wherein a coefficient area to be decoded is enlarged. 上記復号対象係数抽出手段は、当該ブロックの周囲に、上記ウェーブレット逆変換手段によるフィルタリングの影響が及ぶ範囲まで、0値を挿入することで、復号対象の係数領域を拡大することを特徴とする請求項20記載の動画像復号装置。   The decoding target coefficient extraction unit expands the coefficient region to be decoded by inserting a zero value around the block up to a range affected by the filtering by the wavelet inverse transformation unit. Item 20. The video decoding device according to Item 20. 上記復号対象係数抽出手段は、当該ブロックの周囲に、上記ウェーブレット逆変換手段によるフィルタリングの影響が及ぶ範囲まで、当該ブロック内部の変換係数を、ブロック境界で点対称関係になるように対称拡張することで、復号対象の係数領域を拡大することを特徴とする請求項20記載の動画像復号装置。   The decoding target coefficient extraction means symmetrically expands the transform coefficients inside the block around the block so as to have a point-symmetrical relationship at the block boundary to the extent that the filtering by the wavelet inverse transform means is affected. 21. The moving picture decoding apparatus according to claim 20, wherein the coefficient area to be decoded is enlarged. 上記復号画像領域抽出手段は、上記ウェーブレット逆変換手段によって復元された復号画像から、対象ブロック領域を抽出することを特徴とする請求項20記載の動画像復号装置。   21. The moving picture decoding apparatus according to claim 20, wherein the decoded image area extracting unit extracts a target block area from the decoded image restored by the wavelet inverse transformation unit. 上記符号化ビットストリームは、奇数フィールド画像の符号化ビットストリームと偶数フィールド画像の符号化ビットストリームとを有し、これらの奇数フィールド画像の符号化ビットストリームと、偶数フィールド画像の符号化ビットストリームとを上記ウェーブレット逆変換復号手段によりそれぞれ復号して、奇数フィールド復号画像と偶数フィールド復号画像とを合成することを特徴とする請求項19記載の動画像復号装置。   The coded bitstream includes an odd field image coded bitstream and an even field image coded bitstream, and these odd field image coded bitstream, even field image coded bitstream, and 20. The moving picture decoding apparatus according to claim 19, wherein the wavelet inverse transform decoding means respectively decodes and synthesizes an odd field decoded image and an even field decoded image. 符号化ビットストリームを入力または読み出してウェーブレット逆変換復号し復号画像を出力する工程と、
上記ウェーブレット逆変換復号により得られた復号画像から対象領域を抽出する工程と、
得られた復号画像を画像メモリに記憶・保持する工程と、
供給された符号化制御信号に従って、上記画像メモリに予め記憶された前フレームの復号画像を送出するか、または上記ウェーブレット逆変換復号手段によって復号された画像を送出するかを選択する工程と
を有することを特徴とする動画像復号方法。
Inputting or reading an encoded bitstream, inverse wavelet transform decoding and outputting a decoded image;
Extracting a target area from the decoded image obtained by the inverse wavelet transform decoding;
Storing and holding the obtained decoded image in an image memory;
Selecting whether to send the decoded image of the previous frame stored in advance in the image memory or the image decoded by the wavelet inverse transform decoding means in accordance with the supplied encoding control signal. A moving picture decoding method characterized by the above.
上記ウェーブレット逆変換復号を施す工程は、上記量子化された変換係数を逆量子化して変換係数に戻す逆量子化工程と、変換係数を逆走査する逆スキャニング工程と、得られた変換係数から復号対象となる変換係数を抽出する復号対象係数抽出工程と、得られた復号対象係数を逆ウェーブレット変換するウェーブレット逆変換工程とを有することを特徴とする請求項27記載の動画像復号方法。   The wavelet inverse transform decoding is performed by dequantizing the quantized transform coefficient to return it to the transform coefficient, an inverse scanning process for scanning the transform coefficient in reverse, and decoding from the obtained transform coefficient. 28. The moving picture decoding method according to claim 27, further comprising: a decoding target coefficient extracting step for extracting a target transform coefficient, and a wavelet inverse transform step for performing inverse wavelet transform on the obtained decoding target coefficient. 複数個の低域通過フィルタと高域通過フィルタから構成されるフィルタバンク手段によって、入力画像を複数個の帯域に変換する手段と、上記各帯域毎に変換係数を走査、量子化、エントロピー符号化する手段により符号化ビットストリームを記録媒体に記録する手段とを備えた画像圧縮装置と、
上記記録媒体から符号化ビットストリームを読み出して、エントロピー復号化、逆量子化、逆走査、更に同該フィルタバンク手段によって逆変換を行い、復号画像を出力する手段を備えた画像伸長装置と
を有し、
サーチ速度に合わせて、上記記録媒体に記録された符号化ビットストリームから、該当する帯域成分を読み出すサーチ手段
を有することを特徴とする画像記録再生装置。
Means for transforming an input image into a plurality of bands by means of a filter bank composed of a plurality of low-pass filters and high-pass filters, and scanning, quantization, and entropy coding of transform coefficients for each of the bands Means for recording an encoded bitstream on a recording medium by means for
An image decompression device comprising means for reading an encoded bit stream from the recording medium, performing entropy decoding, inverse quantization, inverse scanning, and performing inverse transformation by the filter bank means, and outputting a decoded image. And
An image recording / reproducing apparatus comprising: search means for reading out a corresponding band component from an encoded bit stream recorded on the recording medium in accordance with a search speed.
上記サーチ手段によるサーチ速度が高速な場合には、低域成分の帯域に相当する符号化ビットストリームだけを読み出して、上記画像伸長装置により低域成分の帯域画像を復号し、サーチ速度が低速な場合には、低域と高域成分の帯域に相当する符号化ビットストリームを読み出して帯域画像を復号することを特徴とする請求項29記載の画像記録再生装置。   When the search speed by the search means is high, only the encoded bit stream corresponding to the low-frequency component band is read, and the low-frequency component band image is decoded by the image decompression device, and the search speed is low. 30. The image recording / reproducing apparatus according to claim 29, wherein the image recording / reproducing apparatus decodes the band image by reading out the encoded bit stream corresponding to the band of the low frequency band and the high frequency band. 上記復号された帯域画像は、所定の帯域成分の解像度で復号されたものであることを特徴とする請求項30記載の画像記録再生装置。   31. The image recording / reproducing apparatus according to claim 30, wherein the decoded band image is decoded with a resolution of a predetermined band component. 上記復号された帯域画像は、原画像の解像度で、画質が所定の帯域成分を用いて復号されたものであることを特徴とする請求項30記載の画像記録再生装置。   31. The image recording / reproducing apparatus according to claim 30, wherein the decoded band image has been decoded using a predetermined band component at a resolution of the original image. 上記サーチ手段は、符号化ビットストリームが記録された記録媒体から、制御手段からのサーチ速度または外部入力からの制御によって、所定の符号語を読み出して、復号画像を出力することを特徴とする請求項29記載の画像記録再生装置。   The search means reads out a predetermined code word from a recording medium on which an encoded bit stream is recorded, by a search speed from a control means or control from an external input, and outputs a decoded image. Item 29. The image recording / reproducing apparatus according to Item 29. 複数個の各帯域毎に変換係数を走査、量子化、エントロピー符号化されて得られた符号化ビットストリームが記録された記録媒体から符号化ビットストリームを読み出して、エントロピー復号化、逆量子化、逆走査、更に同該フィルタバンク手段によって逆変換を行い、復号画像を出力する手段と、
サーチ速度に合わせて、上記記録媒体に記録された符号化ビットストリームから、該当する帯域成分を読み出すサーチ手段と
を有することを特徴とする画像再生装置。
The encoded bit stream is read from the recording medium on which the encoded bit stream obtained by scanning, quantizing, and entropy encoding the transform coefficient for each of a plurality of bands is read, entropy decoding, dequantization, Means for performing reverse scanning, further performing reverse transformation by the filter bank means, and outputting a decoded image;
An image reproducing apparatus comprising: search means for reading out a corresponding band component from an encoded bit stream recorded on the recording medium in accordance with a search speed.
JP2005223262A 2005-08-01 2005-08-01 Image recording and reproducing apparatus and image reproducing apparatus Pending JP2006042371A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005223262A JP2006042371A (en) 2005-08-01 2005-08-01 Image recording and reproducing apparatus and image reproducing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005223262A JP2006042371A (en) 2005-08-01 2005-08-01 Image recording and reproducing apparatus and image reproducing apparatus

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP21799999A Division JP2001045485A (en) 1999-07-30 1999-07-30 Device and method for encoding moving image, decoding device and method, and image recording and reproducing device

Publications (1)

Publication Number Publication Date
JP2006042371A true JP2006042371A (en) 2006-02-09

Family

ID=35906758

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005223262A Pending JP2006042371A (en) 2005-08-01 2005-08-01 Image recording and reproducing apparatus and image reproducing apparatus

Country Status (1)

Country Link
JP (1) JP2006042371A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008017209A1 (en) * 2006-08-04 2008-02-14 Thomson Licensing Methods for encoding a sequence of pictures and device implementing said method
JP2009200545A (en) * 2008-02-19 2009-09-03 Kyocera Mita Corp Image encoding device and image decoding device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008017209A1 (en) * 2006-08-04 2008-02-14 Thomson Licensing Methods for encoding a sequence of pictures and device implementing said method
JP2009200545A (en) * 2008-02-19 2009-09-03 Kyocera Mita Corp Image encoding device and image decoding device

Similar Documents

Publication Publication Date Title
JP4254017B2 (en) Image coding apparatus and method
JP3464767B2 (en) Wavelet decoding apparatus and method
JP4900720B2 (en) Encoding apparatus and method, and decoding apparatus and method
CN101516031B (en) Image processing apparatus, image processing method
US7529417B2 (en) Apparatus, method and storage medium for image encoding/decoding using shape-based coefficient interpolation
WO1998021896A1 (en) Digital image coding method and digital image coder, and digital image decoding method and digital image decoder, and data storage medium
JPH04177992A (en) Picture coder having hierarchical structure
WO1998058497A1 (en) Image processing device and method, and transmission medium, transmission method and image format
JP2004242271A (en) Moving picture encoding method, moving picture decoding method, moving picture encoder, and moving picture decoder
CN104641649A (en) Image processing device and method
JP2011130273A (en) Image processing apparatus, image processing method, and imaging apparatus
JP2002247580A (en) Image processing method, and image encoding device and image decoding device capable of using the method
JPH09182085A (en) Image encoding device, image decoding device, image encoding method, image decoding method, image transmitting method and recording medium
JP3613983B2 (en) Image generating apparatus and method, and electronic still camera
US20030099293A1 (en) Image reproducing method, and image processing method, and image reproducing device, image processing device, and television receiver capable of using the methods
US20130077886A1 (en) Image decoding apparatus, image coding apparatus, image decoding method, image coding method, and program
JP2000341689A (en) Wavelet inverse converting device and its method and wavelet decoding device and its method
JP6484097B2 (en) Video encoding apparatus, video decoding apparatus, video encoding method, video decoding method, video encoding program, and video decoding program
JPH0937243A (en) Moving image coder and decoder
JP2001045485A (en) Device and method for encoding moving image, decoding device and method, and image recording and reproducing device
EP1259073A1 (en) Image reproducing method and image processing method, and image reproducing device, image processing device, and television receiver capable of using the methods
JP2006042371A (en) Image recording and reproducing apparatus and image reproducing apparatus
JP2006340300A (en) Signal processing method, signal processing apparatus, signal processing program and information recording medium
JP3403169B2 (en) Image reproducing method, image reproducing apparatus and television receiver that can use this method
JP2008124969A (en) Lossless image coding method and lossless image coding apparatus

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070828

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071225