KR20000022218A - 화상 부호화 장치 및 화상 복호화 장치 - Google Patents
화상 부호화 장치 및 화상 복호화 장치 Download PDFInfo
- Publication number
- KR20000022218A KR20000022218A KR1019980710638A KR19980710638A KR20000022218A KR 20000022218 A KR20000022218 A KR 20000022218A KR 1019980710638 A KR1019980710638 A KR 1019980710638A KR 19980710638 A KR19980710638 A KR 19980710638A KR 20000022218 A KR20000022218 A KR 20000022218A
- Authority
- KR
- South Korea
- Prior art keywords
- shape data
- decoding
- image
- high resolution
- data
- Prior art date
Links
- 238000000034 method Methods 0.000 claims abstract description 30
- 241001270131 Agaricus moelleri Species 0.000 claims 2
- 238000005070 sampling Methods 0.000 abstract description 11
- 238000010586 diagram Methods 0.000 description 16
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000010561 standard procedure Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 241000251468 Actinopterygii Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000002427 irreversible effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 238000011425 standardization method Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
화상 부호화 장치는 고해상도의 부품 화상의 화소 데이타를 입력한다. 상위 계층 부호화부(101), 제2 형상 데이타 생성부(102) 및 제2 형상 데이타 부호화부(103)는 상위 계층의 화소 데이타 및 형상 데이타의 부호화를 행한다. 다운 샘플링부(104)는 저해상도의 화소 데이타를 생성한다. 하위 계층 부호화부(105), 제1 형상 데이타 생성부(106) 및 제1 형상 데이타 부호화부(107)는 하위 계층의 화소 데이타 및 형상 데이타를 부호화한다.
Description
화상 부호화에서, 상이한 동화상 시퀀스를 중첩시키는 방식이 검토되어 있다. 문헌「계층 표현과 다중 템플릿(templates)을 이용한 화상 부호화」(신학 기보 IE94-159, pp. 99 ∼ 106 (1995))에서는, 배경이 되는 동화상 시퀀스와 전경(前景)이 되는 부품 동화상의 동화상 시퀀스(예를 들면 크로마키 기술에 의해 컷아웃된 인물 화상이나 물고기의 영상등)을 중첩하여 새로운 시퀀스를 작성하는 수법이 기술되어 있다.
도 12는 종래의 수법에 의한 부호화 장치 및 복호화 장치의 블럭도이다. 도 12의 화소 데이타 부호화부(1201)는 휘도나 색차를 나타내는 화소 데이타를 부호화하는 부분이고, 형상 데이타 부호화부(1202)는 부품 화상의 형상을 나타내는 형상 데이타를 부호화하는 부분이다. 이들이 부품 화상의 부호화 장치를 구성한다.
화소 데이타의 부호화에는 형상 데이타가 이용된다. 또한, 도 12의 화소 데이타 복호부(1203)는 화소 데이타를 복호하는 부분이고, 형상 데이타 복호부(1204)는 형상 데이타를 복호하는 부분이다. 이들이 부품 화상의 복호화 장치를 구성한다. 화소 데이타의 복호에는 복호된 형상 데이타가 이용된다.
형상 데이타 부호화부(1202)에서는 예를 들면 형상의 윤곽을 8방향의 체인 부호로 표현한 후, 이들 체인 부호를 허프만 부호(Huffman Coding)를 이용하여 부호화한다. 화소 데이타 부호화부(1201)에서는 예를 들면 MPEG나 H.261등의 동화상 부호화의 국제 표준 방식등으로 화소 데이타가 부호화된다. 단, 화소 데이타를 블럭으로 분할했을 때, 부품 화상의 경계를 포함하는 블럭에 대해서는 임의 형상 DCT 등의 수법을 이용할 수 있다.
각 부품 화상은 복호화 장치에서 복호된 후, 도시하지 않은 중첩부에서 형상 데이타를 이용하여 중첩시키고, 디스플레이 등의 표시 장치에 표시된다. 예를 들면, 직사각형의 배경 화상 b(i, j)에 임의 형상의 부품 화상 p(i, j)를 중첩할 때는, 형상 데이타 s(i, j)를 이용하여 수학식 (1)과 같이 표시 화상 f(i, j)가 작성된다.
단, (i, j)는 화소의 좌표를 나타내고, f(i, j) 등은 화소치를 나타낸다. s(i, j)는 부품 화상 내에서 "1"이고, 부품 화상 밖에서 "0"으로 한다.
그러나, 종래의 기술에서는, 부품 화상에 공간 계층성을 갖게 하는 기술에 대해 기재되어지지 않다. 국제 표준 규격 MPEG2 방식에서는, 전체 화상의 공간 해상도가 낮은 하위 계층와, 이 해상도를 향상시키는기 위한 상위 계층의 데이타를 설치하여 하위 계층과 상위 계층을 함께 복호했을 때, 높은 공간 해상도를 얻을 수 있는 계층성(즉 공간 계층성)이 실현되고 있다.
그래서, 본 발명은 부품 화상에서도 공간 계층성을 실현할 수 있는 화상 부호화 장치 및 화상 복호화 장치를 제공하는 것을 목적으로 하고 있다.
또한, 종래 기술로 얻을 수 있는 고해상도의 형상 데이타를 단순히 씬-아웃(tinned-out)함에 따라 저해상도의 형상 데이타를 얻고자 할 때, 그 저해상도의 화상을 저해상도의 대화면 모니터에 표시하면 부품의 윤곽이 계단형이 되고, 주관적인 화질이 열화한다고 하는 문제가 있다. 또한, 저해상도의 화상을 확대하여 고해상도의 대화면 모니터에 표시하는 경우에도 동일한 문제가 발생한다.
그래서, 본 발명은 이러한 문제를 해결할 수 있는 화상 부호화 장치 및 화상 복호화 장치를 제공하는 것도 목적으로 하고 있다.
〈발명의 개시〉
본 발명에서는 상기된 과제를 해결하기 위해 아래의 (1) 내지 (10)에 나타낸 바와 같이 화상 부호화 장치와 화상 복호화 장치가 제공된다.
(1) 임의 형상의 부품 화상을 저해상도로 부호화하는 하위 계층 부호화와 부품 화상을 고해상도로 부호화하는 상위 계층 부호화를 행하는 화상 부호화 장치로서, 임의 형상을 나타내는 저해상도의 형상 데이타를 생성하는 제1 형상 데이타 생성부와 생성된 저해상도의 형상 데이타를 부호화하는 제1 형상 데이타 부호화부와, 임의 형상을 나타내는 고해상도의 형상 데이타를 생성하는 제2 형상 데이타 생성부와 생성된 고해상도의 형상 데이타를 부호화하는 제2 형상 데이타 부호화부를 구비하고, 하위 계층의 부품 화상의 부호화에서는 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 부호화에서는 고해상도의 형상 데이타와 복호된 하위 계층의 부품 화상 데이타를 이용하는 화상 부호화 장치.
(2) 제2 형상 데이타 부호화부는 고해상도의 형상 데이타와 저해상도의 형상 데이타와의 차의 정보를 부호화하는 상기 (1)에 기재된 화상 부호화 장치.
(3) 임의 형상의 부품 화상을 저해상도로 부호화하는 하위 계층 부호화와 부품 화상을 고해상도로 부호화하는 상위 계층 부호화를 행하는 화상 부호화 장치로서, 부품 화상의 고해상도의 형상 데이타는 상위 계층과 하위 계층에서 공용되고, 부품 화상의 고해상도의 형상 데이타를 생성하는 고해상도 형상 데이타 생성부와 생성된 고해상도의 형상 데이타를 부호화하는 형상 데이타 부호화부를 구비하고, 고해상도의 형상 데이타가 N 계조(N은 2이상)의 계조를 갖는 경우 이것을 저해상도이고 또한 M 계조(M>N)의 형상 데이타로 변환하고, 저해상도의 형상 데이타를 이용하여 하위 계층의 부품 화상의 부호화를 행하고, 상위 계층의 부품 화상의 부호화에서는 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하는 것을 특징으로 하는 화상 부호화 장치.
(4) 상기 (1)에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치로서, 임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고 저해상도의 형상 데이타를 복호하는 제1 형상 데이타 복호부와 고해상도의 형상 데이타를 복호하는 제2 형상 데이타 복호부를 구비하고, 하위 계층의 부품 화상의 복호에서는 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 복호에서는 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하는 것을 특징으로 하는 화상 복호화 장치.
(5) 상기 (2)에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치로서, 임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고 저해상도의 형상 데이타를 복호하는 제1 형상 데이타 복호부와 고해상도의 형상 데이타를 복호하는 제2 형상 데이타 복호부를 구비하고, 하위 계층의 부품 화상의 복호에서는 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 복호에서는 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하고, 제2 형상 데이타 복호부는 고해상도의 형상 데이타와 저해상도의 형상 데이타와의 차의 정보를 이용함으로써 고해상도의 형상 데이타를 얻는 것을 특징으로 하는 화상 복호화 장치.
(6) 상기 (3)에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치로서, 임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고 부품 화상의 형상 데이타는 고해상도의 것을 하위 계층과 상위 계층에서 공용하고 고해상도의 형상 데이타를 복호하는 형상 데이타 복호부를 구비하고, 고해상도의 형상 데이타가 N 계조(N은 2이상)의 계조를 구비한 경우 이것을 저해상도 또는 M 계조(M>N)의 형상 데이타로 변환시키고 변환된 형상 데이타를 이용하여 하위 계층의 부품 화상의 복호를 행하고 상위 계층의 부품 화상의 복호에서는 고해상도의 형상 데이타와 복호된 하위 계층의 부품 화상을 이용하는 화상 복호화 장치.
(7) 제2 형상 데이타 생성부는 하위 계층에서 부호화된 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 생성하는 모드를 구비하는 상기 (1)에 기재된 화상 부호화 장치.
(8) 제2 형상 데이타 생성부는 하위 계층에서 부호화된 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 생성하는 모드를 구비하고, 상기 모드가 선택됐을 때에는, 제2 형상 데이타 부호화부는 고해상도의 형상 데이타를 저해상도의 형상 데이타와는 독립적으로 부호화하는 것을 특징으로 하는 상기 (2)에 기재된 화상 부호화 장치.
(9) 상기 (7)에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치로서, 임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고 저해상도의 형상 데이타를 복호하는 제1 형상 데이타 복호부와 고해상도의 형상 데이타를 복호하는 제2 형상 데이타 복호부를 구비하고, 하위 계층의 부품 화상의 복호에서는 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 복호에서는 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하고, 제2 형상 데이타 복호부는 하위 계층에서 부호화된 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 복호하는 모드를 구비한 것을 특징으로 한 화상 복호화 장치.
(10) 상기 (8)에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치로서, 임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고 저해상도의 형상 데이타를 복호하는 제1 형상 데이타 복호부와 고해상도의 형상 데이타를 복호하는 제2 형상 데이타 복호부를 구비하고, 하위 계층의 부품 화상의 복호에서는 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 복호에서는 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하고, 제2 형상 데이타 복호부는 고해상도의 형상 데이타와 저해상도의 형상 데이타의 차 정보를 이용함으로써 고해상도의 형상 데이타를 취득하고, 제2 형상 데이타 복호부는 하위 계층에서 부호화된 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 복호하는 모드를 구비하고, 상기 모드가 선택됐을 때에는 고해상도의 형상 데이타를 저해상도의 형상 데이타와는 독립적으로 복호하는 것을 특징으로 한 화상 복호화 장치.
본 발명은 화상 부호화 장치 및 화상 복호화 장치에 관한 것으로, 특히 디지탈 화상 처리의 분야에서 이용되고, 화상 데이타를 고 능률적으로 부호화하는 동화상 부호화 장치 및 동화상 부호화 장치로 작성된 부호화 데이타를 복호하는 동화상 복호화 장치에 관한 것이다.
도 1은 본 발명의 제1 실시예의 부호화 장치를 도시하는 블럭도.
도 2는 본 발명의 제1 실시예의 복호화 장치를 도시하는 블럭도.
도 3은 본 발명의 제2 실시예의 부호화 장치를 도시하는 블럭도.
도 4는 본 발명의 제2 실시예의 복호화 장치를 도시하는 블럭도.
도 5는 본 발명의 제3 실시예의 부호화 장치를 도시하는 블럭도.
도 6은 본 발명의 제3 실시예의 하위 계층의 복호화 장치를 도시하는 블럭도.
도 7은 본 발명에서 상위 계층 형상 데이타와 하위 계층 형상 데이타와의 차의 정보를 설명하기 위한 도면.
도 8A 내지 도 8D는 본 발명에서 고해상도의 형상 데이타로부터 저해상도의 형상 데이타를 구하는 수법을 설명하기 위한 도면.
도 9는 본 발명의 그 밖의 실시예의 부호화 장치를 도시하는 블럭도.
도 10은 본 발명에 따른 부품 화상의 계층적 부호화를 행하는 장치의 일례를 나타내는 블럭도.
도 11은 본 발명에 따른 하위 계층 복호화 장치의 블럭도,
도 12는 종래 기술에서의 부호화 장치 및 복호화 장치의 블럭도.
〈발명을 실시하기 위한 최량의 형태〉
이하, 본 발명의 실시예를 설명하지만 본 발명은 이들 실시예에 의해서만 제한되는 것은 아니다.
부품 화상에 공간 계조성을 갖게 하는 수법으로서, 도 10에 도시된 바와 같은 장치를 생각할 수 있다. 도 10의 제1 다운 샘플링부(1001)는 화소를 씬-아웃으로써, 입력된 화소 데이타의 공간 해상도를 낮춘다. 제2 다운 샘플링부(1002)는 형상 데이타의 화소를 씬-아웃함으로써 입력된 형상 데이타의 공간 해상도를 낮춘다. 형상 데이타는 부품 화상의 형상을 나타내고, 예를 들면 부품 내부에서 화소치 "1"을 취하고, 외부에서 화소치 "( )"를 취하는 2치 화상으로 나타내어진다.
하위 계층 부호화부(1004)는 저해상도의 화소 데이타를 부호화한다. 부호화 방식으로는, 예를 들면 MPEG나 H. 261등의 동화상 부호화의 국제 표준 방식이 이용된다. 단, 화상을 블럭으로 분할했을 때 부품 화상의 경계를 포함하는 블럭에 대해서는 임의 형상 DCT 등의 수법이 이용된다. 이 경우, 부품 화상의 경계의 정보로서는 제2 다운 샘플링부(1002)로부터 출력되는 저해상도의 형상 데이타를 이용하게 된다.
상위 계층 부호화부(1003)는 고해상도의 화소 데이타를 부호화한다. 여기서도 MPEG나 H. 261등의 동화상 부호화의 국제 표준 방식이 이용된다. 여기서는 상위 계층의 복호 화상으로부터의 예측 이외에, 하위 계층의 복호 화상으로부터의 예측도 이용된다. 이 때, 부품 화상의 경계로서는 다운 샘플링되지 않는 고해상도의 형상 데이타가 이용된다.
형상 데이타 부호화부(1005)에서는, 상위 계층의 해상도에 대응하는 고해상도의 형상 데이타가 부호화된다. 예를 들면 형상의 윤곽을 8방향의 체인 부호로 표현하고, 이들 체인 부호를 허프만 부호를 이용하여 부호화한다.
부호화된 데이타는 도시하지 않은 통합부에 의해 통합되고, 전송 또는 축적된다. 도 11에 도시된 바와 같은, 하위 계층만을 복호하는 복호화 장치에서는 상위 계층과 하위 계층이 통합된 부호화 데이타 중, 하위 계층의 복호에 필요한 데이타만을 추출하여 복호 처리를 행한다. 즉 도시하지 않은 선택부에서, 「하위 계층 화소 데이타의 부호화 데이타」 및 「형상 데이타의 부호화 데이타」를 선택하여 복호한다.
이 때, 도 11의 형상 데이타 복호부(1103)에 의해, 고해상도의 형상 데이타가 복호되고, 다운 샘플링부(1102)에서, 도 10의 제2 다운 샘플링부(1002)와 동일한 수법에 따라 저해상도의 형상 데이타가 구해질 수 있다. 이 데이타가 하위 계층 복호부(1101)에서의 화소 데이타의 복호에 이용된다. 한편, 상위 계층까지 복호하는 복호화 장치에서는, 모든 부호화 데이타를 이용하여 상위 계층까지의 복호를 행한다.
그러나, 상술된 장치에는 이하와 같은 문제가 있다. 즉, 원래 하위 계층의 복호에는 저해상도의 형상 데이타밖에 필요없지만, 상술된 장치에서는 하위 계층의 부호화 데이타에도 고해상도의 형상 데이타를 이용할 필요가 있어 데이타가 중복된다. 즉, 부호량이 적은 하위 계층의 형상 데이타가 아니라 부호량이 많은 상위 계층의 형상 데이타를 이용할 필요가 있다. 이 때문에, 한정된 전송 용량 또는 축적 용량에 대해, 하위 계층을 양호한 화질로 부호화하는 것이 어렵다.
제1 및 제2 실시예에서는 이러한 문제를 해결하는 것을 목적으로 하고 있다.
도 1 및 도 2는 본 발명의 제1 실시예에서의 부호화 장치 및 복호화 장치를 각각 나타내는 블럭도이다.
도 1를 참조하여, 다운 샘플링부(104)는, 입력된 화소 데이타를 씬-아웃함으로써 하위 계층용의 저해상도의 화소 데이타를 작성한다. 씬-아웃할 때는 에일리어싱(aliasing)을 방지하기 위해 저역 통과 필터가 이용된다. 하위 계층 부호화부(105)는, 저해상도의 화소 데이타를 부호화한다.
부호화에는 예를 들면 MPEG나 H. 261등의 동화상 부호화의 국제 표준화 방식이 이용된다. 화상을 블럭으로 분할했을 때, 부품 화상의 경계를 포함하는 블럭에 대해서는 임의 형상 DCT 등의 수법이 이용된다. 부품 화상의 경계로는 제1 형상 데이타 생성부(106)로부터 출력되는 저해상도의 형상 데이타가 이용된다.
제1 형상 데이타 생성부(106)에서는, 하위 계층용의 저해상도의 형상 데이타가 생성된다. 형상 데이타는 예를 들면, 화소 데이타를 영역 분할함에 따라 추출된다. 영역 분할의 수법으로서는, 미분 연산을 이용한 엣지 검출 수법이나 모폴로직컬 세그멘테이션(morphological segmentation) 등이 이용된다.
정지된 배경에 대한 동물체의 형상을 컷아웃될 때는, 프레임 간의 차분을 이용한 동영역 검출을 이용해도 좋다. 또는, 크로마키 수법에 의해 형상 데이타를 생성해도 좋다. 도 1에서는, 저해상도의 형상 데이타를 얻을 때에, 대상이 되는 화소 데이타를 다운 샘플링부(104)에서 씬-아웃하여 저해상도로 한 후에 형상 데이타를 구하고 있지만, 다른 방법으로서 고해상도의 화소 데이타에 대해 형상 데이타를 구한 후에, 형상 데이타를 씬-아웃함에 따라 저해상도의 형상 데이타를 구해도 좋다.
여기서 작성된 형상 데이타는, 2치 화상 또는 2치 이상의 다계조 화상이다. 형상 데이타가 후자인 경우, 상기 수학식 (1)을 이용한 부품 화상과 배경 화상과의 중첩은 형상 데이타를 웨이트(weight)로 한 부품 화상과 배경 화상의 웨이티드 평균이라고 간주할 수 있다. 단, 수학식 (1)의 형상 데이타 s(i, j)는, 대상이 되는 부품 화상 내에서 "1", 부품 화상 밖에서 "0", 부품 화상의 경계부에서 "1"에서 "0" 사이의 값을 취한다.
제1 형상 데이타 부호화부(107)에서는, 하위 계층용의 저해상도의 형상 데이타가 부호화된다. 형상 데이타가 2치 데이타라면, 런렝스(run length) 부호화, MMR 부호화 또는 체인 부호화 등을 이용하여 부호화가 행해진다. 형상 데이타가 2치이상의 다계조로 나타내어질 때는 MPEG와 마찬가지로 DCT를 이용한 부호화 수법이나, 4분 트리(quarternary tree)과 벡터 양자화를 이용한 부호화 수법("MPEG-4 Video Verification Model Version. 2.0" (ISO/IECTC1/SC29/WG11 N1260))등을 이용할 수 있다.
제2 형상 데이타 생성부(102)에서는 고해상도의 화소 데이타로부터 상위 계층용의 고해상도의 형상 데이타가 생성된다. 형상 데이타의 생성 수법은 제1 형상 데이타 생성부(106)와 동일하므로, 설명을 반복하지 않는다. 제2 형상 데이타 부호화부(103)에서는 제2 형상 데이타 생성부(102)에서 생성된 고해상도의 형상 데이타가 부호화된다. 형상 데이타의 부호화 수법은 제1 형상 데이타 부호화부(107)와 동일하므로 설명을 반복하지 않는다. 단, 2개의 형상 데이타 부호화부(103, 107)에서 동일한 부호화 방식을 이용할 필요는 없고, 다른 수법으로 부호화하는 것도 가능하다.
상위 계층 부호화부(101)는 고해상도의 화소 데이타를 부호화한다. 여기서는 배경 기술에서 기술된 수법과 마찬가지로 MPEG나 H. 261등의 동화상 부호화의 국제 표준 방식이 이용된다. 단 여기서는, 상위 계층의 시간적으로 앞뒤에 있는 복호 화상으로부터의 예측 이외에 하위 계층 부호화부(105)에 있는 국부 복호 화상으로부터의 예측도 이용하여 부호화가 이루어진다. 부품 화상의 경계에서는, 제2 형상 데이타 생성부(102)로부터 출력되는 고해상도의 형상 데이타가 이용된다.
이어서, 도 2를 참조하여, 제1 실시예에서의 복호화 장치에 대해 설명한다.
하위 계층 복호화 장치(205)는 도 2의 파선으로 나타낸 부분으로 이루어진다. 제1 형상 데이타 복호부(204)는 하위 계층 형상 데이타의 부호화 데이타를 복호하고, 저해상도의 형상 데이타를 얻는다. 복호된 형상 데이타는 하위 계층 복호부(203)에 입력됨과 함께 하위 계층 화상의 표시에 이용된다. 하위 계층 복호부(203)는 하위 계층 화소 데이타의 부호화 데이타를 복호하고, 저해상도의 화소 데이타를 도시하지 않는 하위 계층 표시부로 공급한다.
이어서, 도 2에서의 상위 계층의 복호에 대해 설명한다. 제2 형상 데이타 복호부(202)는 상위 계층 형상 데이타의 부호화 데이타를 복호하고, 고해상도의 형상 데이타를 얻는다. 복호된 형상 데이타는 상위 계층 복호부(201)에 입력됨과 함께 상위 계층 화상의 표시에 이용된다.
상위 계층 복호부(201)는 상위 계층 화소 데이타의 부호화 데이타를 복호하여, 고해상도의 화소 데이타를 도시하지 않은 상위 계층 표시부로 공급한다. 상위 계층 복호부(201)에서는, 도 1의 상위 계층 부호화부(101)와 동일하게 상위 계층의 시간적으로 앞뒤에 있는 복호 화상으로부터의 예측 이외에 하위 계층 복호부(203)의 복호 화상으로부터의 예측도 이용된다.
이어서, 본 발명의 제2 실시예에 대해 설명하기로 한다.
상술한 제1 실시예에서는 상위 계층에서 이용하는 고해상도의 형상 데이타를 하위 계층에서 이용되는 저해상도의 형상 데이타와는 독립적으로 부호화하기 때문에, 상위 계층의 형상 데이타의 부호화에 하위 계층의 형상 데이타의 정보가 반영되지 않아 상위 계층의 형상 데이타의 부호량이 많아진다. 이 때문에, 상위 계층에서의 전부호량은 도 10 및 도 11에 도시된 방식보다도 증가해 버린다고 하는 문제가 있다. 그래서 본 실시예에서는 저해상도의 형상 데이타와 고해상도의 형상 데이타와의 차의 정보만을 부호화함으로써, 상술된 문제점의 해결을 꾀하고 있다.
도 3 및 도 4는 제2 실시예에서의 부호화 장치 및 복호화 장치를 각각 도시하는 블럭도이다.
도 3의 부호화 장치가 도 1의 부호화 장치와 다른 점은 제1 형상 데이타 부호화부(307)에서의 저해상도의 형상 데이타를 제2 형상 데이타 부호화부(303)에 입력하고, 제2 형상 데이타 부호화부(303)에서 저해상도의 형상 데이타와 고해상도의 형상 데이타와의 차의 정보만을 부호화하는 점이다.
그 밖의, 상위 계층 부호화부(101)와, 제2 형상 데이타 생성부(102)와, 다운 샘플링부(104)와, 하위 계층 부호화부(105)와, 제1 형상 데이타 생성부(106)는 도 1과 동일하므로 설명을 반복하지 않는다.
또한, 도 4의 복호화 장치와 도 2의 복호화 장치와의 차이는 제1 형상 데이타 복호부(404)에서 복호된 저해상도의 형상 데이타를 제2 형상 데이타 복호부(402)에 입력하고, 제2 형상 데이타 복호부(402)에서 복호된 차의 정보와 함께 고해상도의 형상 데이타를 복호하는 점이다.
그 밖의, 상위 계층 복호부(201)와, 하위 계층 복호부(203)는 도 2와 동일하므로 설명을 반복하지 않는다. 또한, 하위 계층 복호화 장치(405)는 도 2의 하위 계층 복호화 장치(205)에 상당하는 것이다.
상술된 차 정보로서는, 예를 들면 2치의 형상 데이타를 4분 트리로 표현했을 때 하위 계층의 데이타를 이용할 수 있다. 도 7에 2치의 형상 데이타와 그 4분 트리 표현의 예를 나타낸다. 4분 트리의 최상위의 값은 4화소×4화소의 블럭 내에 화소치 "1"이 적어도 하나 존재하는 경우에 "1"이 되고, 그렇지 않은 경우에 "0"이 된다. 제2 계층은 2화소×2화소, 제3 계층은 1화소×1화소의 블럭에 대해 동일하게 하여 값을 구하고 있다.
각 계층에서의 블럭은, 좌측상으로부터 우측하로 라스터 스캔순으로 주사된다. 도 7의 예에서는, 상위 계층의 형상 데이타는 3계층으로 표현되고, 하위 계층의 형상 데이타는 2계층으로 표현된다. 3계층째의 데이타는 상위 계층과 하위 계층 차의 정보로서 표현된다. 이들 4분 트리로 표현된 데이타는 예를 들면 산술 부호화에 의해 부호화된다.
형상 데이타가 2치 이상의 다계조로 나타내어지는 경우, 저해상도의 형상 데이타를 상위 계층의 해상도까지 업 샘플한 후, 고해상도의 형상 데이타와의 차분을 취하고, 이 차분 데이타를 변환 부호화에 의해 부호화하는 방식을 이용해도 된다.
이어서, 본 발명의 제3 실시예에 대해 설명하기로 한다.
도 10 및 도 11을 이용하여 설명한 수법에서는 형상 데이타를 씬-어웃함으로써 저해상도의 형상 데이타를 얻고 있지만, 이 경우 하위 계층의 부품 화상의 윤곽이 계단형이 되어 화질이 열화하는 문제가 있다.
제3 실시예에서는, 형상 데이타의 씬-아웃과 함께 원래의 형상 데이타보다 많은 계조를 갖게 함에 따라 상기 문제점을 해결하고 있다.
도 8A는 2치의 형상 데이타의 일부를 나타내고, 도 8B는 해상도가 종횡 절반으로, 화소의 크기가 종횡 2배의 저해상도 모니터용으로 변환한 형상 데이타의 예를 나타내고 있다. 이 예에서는, 2×2의 필터인,
0.25 0.25
0.25 0.25
를 도 8A의 굵은선으로 둘러싸인 블럭에 곱해 0, 0.25, 0.75, 1의 4계조를 갖는 저해상도의 형상 데이타를 얻고 있다. 상기 2×2의 필터 요소를 f(i, j)로 하고, 도 8A의 하나의 블럭 내의 요소를 d(i, j)로 할 때, 필터 조작은,
Σf(i, j) d(i, j)
로 나타내어진다. 단, 상기 Σ은 i=1, 2 및 j=1, 2에 대한 합을 나타내는 것으로 한다. 원래의 형상 데이타가 N 계조이면, 필터에 의해 M 계조(M>N)의 형상 데이타가 얻어진다.
도 8C는 도 8A와 동일한 해상도를 표시할 수 있는 모니터에 저해상도의 부품 화상을 확대하여 표시할 때에 이용되는 형상 데이타의 예를 나타내고 있다. 이 데이타는 도 8B의 데이타를 단순히 종횡 2배로 확대함으로써 얻어진다. 이와 같이 저해상도에서 형상 데이타의 계조수를 증가시킴으로써, 경계 부분이 계단형으로 보이는 것을 방지할 수 있다.
예를 들면 도 8C와 같이 생성된 형상 데이타를 이용하여, 배경 기술의 란에 기재된 수학식 (1)에 나타내는 화상의 중첩을 행하면, 부품 화상의 윤곽 부분은 배경과 전경(前景)이 혼합되게 되어 경계의 계단형의 왜곡이 눈에 띠기 어렵게 된다.
또, 상기된 예에서는 2×2의 필터를 이용하여 설명했지만, 다른 필터를 이용해도 좋다. 예를 들면, 아래와 같은 3×3의 필터를 이용하여 형상 데이타를 종횡 절반으로 변환해도 좋다.
0 1/6 0
1/6 2/6 1/6
0 1/6 0
이 때, 서브샘플링의 대상이 되는 화소는, 예를 들면 도 8D의 ●로 나타어지는 화소이다.
도 5 및 도 6은 제3 실시예에서의 부호화 장치 및 하위 계층의 복호화 장치를 각각 나타내는 블럭도이다. 이것은, 도 10 및 도 11에서, 형상 데이타를 다운 샘플링하는 부분을 변환부(504)와 변환부(602)에서 각각 치환시킨 것이다.
그 밖의 제1 다운 샘플링부(1001)와, 상위 계층 부호화부(1003)와, 하위 계층 부호화부(1004)와, 형상 데이타 부호화부(1005)와, 하위 계층 복호부(1101)와, 형상 데이타 복호부(1103)는 도 10 및 도 11과 동일한 것이기 때문에, 여기서의 설명을 반복하지 않는다.
변환부(504)와 변환부(602)는 동일한 기능을 한다. 이들 변환부는 도 8에 도시된 바와 같이 형상 데이타를 저해상도 또는 고계조의 형상 데이타로 변환시킨다.
또, 도 8A 내지 도 8C에서는 2×2의 필터를 이용했지만, 변환 필터로서는 3×3, 2×5등 여러가지의 것을 사용할 수 있다.
또, 이상의 실시예에 따른 부호화 장치의 설명에서, 형상 데이타 부호화부에 입력되는 형상 데이타를 대응하는 화소 데이타의 부호화부에도 입력하고 있지만, 형상 데이타 부호화부가 비가역 부호화를 행하는 경우에는, 화소 데이타의 부호화부에서 이용되는 형상 데이타와 복호화 장치의 화소 데이타 복호부에서 이용되는 형상 데이타가 다른 것으로 되어 문제가 생긴다.
이러한 경우에는, 형상 데이타 복호부를 부호화 장치에 설치하고, 부호화된 형상 데이타를 형상 데이타 복호부에서 복호한 후, 대응하는 화소 데이타의 부호화부에도 입력하도록 하면 된다. 도 3의 부호화 장치를 그와 같이 하여 변형시킨 것을 도 9에 도시한다.
도 9에서는, 제1 형상 데이타 복호부(909)에서 복호된 하위 계층의 형상 데이타의 복호 데이타는 하위 계층 부호화부(905)에 입력됨과 함께 제2 형상 데이타 부호화부(903) 및 제2 형상 데이타 복호부(908)에도 입력되고 있다. 또한, 도 9의 부호화 장치에 대응하는 복호화 장치에서도, 하위 계층의 형상 데이타의 복호 데이타를 상위 계층의 형상 데이타 복호부, 즉 도 9 중의 제2 형상 데이타 복호부(908)와 동일한 부분에 이용한다.
마지막으로, 본 발명의 제4 실시예에 대해 설명하기로 한다.
제1 및 제2 실시예에서, 하위 계층에서 부호화된 부품 화상의 일부분만의 공간 해상도를 향상시키도록 상위 계층을 구성하는 것이 본 실시예이다. 이와 같이 하면, 예를 들면 하위 계층에서 인간의 얼굴 영역을 부품 화상으로서 부호화하고, 상위 계층에서는 입 부분만을 고해상도로 부호화할 수 있다.
제4 실시예를 제1 실시예에 적용하는 경우, 도 1에 도시된 부호화 장치의 제2 형상 데이타 생성부(102)에서 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 생성함으로써 본 발명을 실현할 수 있다.
이에 대응하는 복호화 장치로는, 도 2에 도시된 것을 그대로 사용할 수 있다. 제2 실시예에 적용하는 경우도 마찬가지로, 도 3에 도시된 부호화 장치의 제2 형상 데이타 생성부(102)에서 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 생성함으로써 본 발명을 실현할 수 있다.
단, 제1 형상 데이타 부호화부(307)로부터 제2 형상 데이타 부호화부(303)로의 신호선은 사용하지 않는다. 따라서, 제4 실시예와 제2 실시예에서 상술된 수법을 스위치에 의해 전환할 필요가 있다. 이 스위치는 제1 형상 데이타 부호화부(307)와 제2 형상 데이타 부호화부(303) 사이에 설치된다. 제4 실시예의 수법을 사용하는 경우에는 스위치를 오프로 하여 상위 계층의 형상 데이타(제2 형상 데이타)를 독립적으로 부호화한다. 제2 실시예에서 상술된 수법을 사용하는 경우에는, 스위치를 온으로 하여 상위 계층의 형상 데이타(제2 형상 데이타)와 하위 계층의 형상 데이타(제1 형상 데이타)와의 차의 정보를 부호화하도록 한다.
복호화 장치에서는, 도 4의 장치에 동일한 스위치를 설치한다. 이 스위치는 도 4의 제1 형상 데이타 복호부(404)와 제2 형상 데이타 복호부(402)를 연결하는 신호선 상에 설치된다. 부호화 장치에서의 스위치와 마찬가지로, 상위 계층의 형상 데이타(제2 형상 데이타)를 독립적으로 복호하는 경우와, 상위 계층의 형상 데이타(제2 형상 데이타)와 하위 계층의 형상 데이타(제1 형상 데이타) 차의 데이타를 복호한 후, 차의 데이타를 하위 계층의 형상 데이타(제1 형상 데이타)에 부가에 따라 상위 계층의 형상 데이타(제2 형상 데이타)를 복호하는 경우를 전환하는 제어가 행해진다.
본 실시예에서의 동화상 부호화 장치 및 동화상 복호화 장치에 따르면, 아래의 유리한 효과를 발휘할 수 있다.
(1) 공간 계층성을 갖는 부품 화상의 부호화 및 복호를 실현할 수 있다.
(2) 제1 실시예에서는 하위 계층의 형상 데이타로서, 저해상도의 것을 부호화한다. 따라서, 하위 계층에서 고해상도의 형상 데이타를 부호화한다고 하는 중복성이 없다. 따라서, 전송 용량 또는 축적 용량이 한정되어도, 하위 계층의 화상을 양호한 화질로 부호화 및 복호할 수 있다.
(3) 제2 실시예에서는 하위 계층의 형상 데이타의 정보를 상위 계층의 형상 데이타의 부호화에 이용하고, 저해상도의 형상 데이타와 고해상도의 형상 데이타와의 차의 정보를 부호화한다. 이에 따라, 상위 계층의 형상 데이타의 부호화에 필요한 데이타량을 삭감할 수 있다. 따라서 상위 계층에서 효율 좋은 부호화를 행할 수 있다.
(4) 제3 실시예에 따르면, 상위 계층의 형상 데이타로부터 하위 계층의 형상 데이타를 생성하는 경우에, 보다 계조수를 많게 하도록 변환한다. 이에 따라하위 계층의 형상 데이타의 윤곽 부분에 존재하는 계단형의 경계를 흐리게 할 수 있다. 이에 따라 표시할 때의 부품 화상의 윤곽이 원활해지고, 시각적으로 양호한 화상을 얻는 것이 가능해진다.
(5) 본 발명의 그 밖의 실시예에서는, 상위 계층 형상 데이타가 하위 계층보다도 작은 경우를 상정하고, 하위 계층의 일부분의 공간 해상도를 상위 계층의 데이타에 의해 향상시키도록 계층 부호화를 행할 수 있다. 이에 따라, 하위 계층의 일부만의 상세한 화상 내용을 보고싶다고 하는 요구가 있는 경우나, 하위 계층의 일부분만이 복잡한 텍스쳐를 갖고 있어, 그 부분을 고해상도로 표시할 필요가 있는 경우 등에도 적합한 계층 부호화를 행할 수 있다.
이상과 같이, 본 발명에 따르면 효율적으로 공간 계층성을 구비한 부품 화상의 부호화 및 복호를 행할 수 있으므로, 본 발명은 화상 부호화 장치 및 화상 복호화 장치의 분야에서 유리하게 적용할 수 있다.
Claims (10)
- 임의 형상의 부품 화상(part image)을 저해상도로 부호화하는 하위 계층(lower hierarchical) 부호화와, 상기 부품 화상을 고해상도로 부호화하는 상위 계층 부호화를 행하는 화상 부호화 장치에 있어서,상기 임의 형상을 나타내는 저해상도의 형상 데이타를 생성하는 제1 형상 데이타 생성부(106),상기 생성된 저해상도의 형상 데이타를 부호화하는 제1 형상 데이타 부호화부(107),상기 임의 형상을 나타내는 고해상도의 형상 데이타를 생성하는 제2 형상 데이타 생성부(102),상기 생성된 고해상도의 형상 데이타를 부호화하는 제2 형상 데이타 부호화부(103)를 구비하고,하위 계층의 부품 화상의 부호화에 있어서는, 상기 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 부호화에 있어서는 상기 고해상도의 형상 데이타와 복호된 하위 계층의 부품 화상 데이타를 이용하는것을 특징으로 하는 화상 부호화 장치.
- 제1항에 있어서, 상기 제2 형상 데이타 부호화부는 상기 고해상도의 형상 데이타와 상기 저해상도의 형상 데이타의 차 정보를 부호화하는것을 특징으로 하는 화상 부호화 장치.
- 임의 형상의 부품 화상을 저해상도로 부호화하는 하위 계층 부호화와, 상기 부품 화상을 고해상도로 부호화하는 상위 계층 부호화를 행하는 화상 부호화 장치에 있어서,상기 부품 화상의 고해상도의 형상 데이타는 상위 계층과 하위 계층에서 공용되고,상기 부품 화상의 고해상도의 형상 데이타를 생성하는 고해상도 형상 데이타 생성부와,상기 생성된 고해상도의 형상 데이타를 부호화하는 형상 데이타 부호화부(1005)를 구비하고,상기 고해상도의 형상 데이타가 N 계조(N은 2이상)의 계조를 구비하는 경우, 이것을 저해상도이고 또한 M 계조(M>N)의 형상 데이타로 변환시키고,상기 저해상도의 형상 데이타를 이용하여 하위 계층의 부품 화상의 부호화를 행하고,상위 계층의 부품 화상의 부호화에서는, 상기 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하는것을 특징으로 하는 화상 부호화 장치.
- 제1항에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치에 있어서,임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와, 상기 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고,저해상도의 형상 데이타를 복호하는 제1 형상 데이타 복호부(204)와,고해상도의 형상 데이타를 복호하는 제2 형상 데이타 복호부(202)를 구비하고,하위 계층의 부품 화상의 복호에 있어서는 상기 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 복호에서는 상기 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하는것을 특징으로 하는 화상 복호화 장치.
- 제2항에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치에 있어서,임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와 상기 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고,저해상도의 형상 데이타를 복호하는 제1 형상 데이타 복호부(404),고해상도의 형상 데이타를 복호하는 제2 형상 데이타 복호부(402)를 구비하고,하위 계층의 부품 화상의 복호에 있어서는 상기 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 복호에 있어서는 상기 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하고,상기 제2 형상 데이타 복호부(402)는 상기 고해상도의 형상 데이타와 상기 저해상도의 형상 데이타의 차 정보를 이용함으로써 고해상도의 형상 데이타를 얻는것을 특징으로 하는 화상 복호화 장치.
- 제3항에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치에 있어서,임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와 상기 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고,상기 부품 화상의 형상 데이타는 고해상도의 것을 하위 계층과 상위 계층에서 공용하고,고해상도의 형상 데이타를 복호하는 형상 데이타 복호부(1103)를 구비하고,상기 고해상도의 형상 데이타가 N 계조(N은 2이상)의 계조를 구비한 경우, 이것을 저해상도 또는 M 계조(M>N)의 형상 데이타로 변환시키고,상기 변환된 형상 데이타를 이용하여 하위 계층의 부품 화상의 복호를 행하고,상위 계층의 부품 화상의 복호에 있어서는 상기 고해상도의 형상 데이타와 상기 복호된 하위 계층의 부품 화상을 이용하는것을 특징으로 하는 화상 복호화 장치.
- 제1항에 있어서, 상기 제2 형상 데이타 생성부(102)는 하위 계층에서 부호화된 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 생성하는 모드를 구비하는것을 특징으로 하는 화상 부호화 장치.
- 제2항에 있어서, 상기 제2 형상 데이타 생성부(102)는 하위 계층에서 부호화된 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 생성하는 모드를 구비하고,상기 모드가 선택됐을 때에는, 상기 제2 형상 데이타 부호화부는 상기 고해상도의 형상 데이타를 상기 저해상도의 형상 데이타와는 독립적으로 부호화하는것을 특징으로 하는 화상 부호화 장치.
- 제7항에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치에 있어서,임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와 상기 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고,저해상도의 형상 데이타를 복호하는 제1 형상 데이타 복호부와,고해상도의 형상 데이타를 복호하는 제2 형상 데이타 복호부를 구비하고,하위 계층의 부품 화상의 복호에 있어서는 상기 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 복호에 있어서는 상기 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하고,상기 제2 형상 데이타 복호부는 하위 계층에서 부호화된 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 복호하는 모드를 구비하는것을 특징으로 하는 화상 복호화 장치.
- 제8항에 기재된 화상 부호화 장치에서 부호화된 데이타를 복호하는 화상 복호화 장치에 있어서,임의 형상의 부품 화상을 저해상도로 복호하는 하위 계층 복호와 상기 부품 화상을 고해상도로 복호하는 상위 계층 복호를 행하고,저해상도의 형상 데이타를 복호하는 제1 형상 데이타 복호부와,고해상도의 형상 데이타를 복호하는 제2 형상 데이타 복호부를 구비하고,하위 계층의 부품 화상의 복호에 있어서는 저해상도의 형상 데이타를 이용하고, 상위 계층의 부품 화상의 복호에 있어서는 상기 고해상도의 형상 데이타와 하위 계층의 복호된 부품 화상 데이타를 이용하고,상기 제2 형상 데이타 복호부는 상기 고해상도의 형상 데이타와 상기 저해상도의 형상 데이타의 차 정보를 이용함으로써 고해상도의 형상 데이타를 취득하고,상기 제2 형상 데이타 복호부는 하위 계층에서 부호화된 부품 화상의 일부분에 대응하는 고해상도의 형상 데이타를 복호하는 모드를 구비하고, 상기 모드가 선택됐을 때에는 상기 고해상도의 형상 데이타를 상기 저해상도의 형상 데이타와는 독립적으로 복호하는것을 특징으로 한 화상 복호화 장치.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP16697896A JP3210862B2 (ja) | 1996-06-27 | 1996-06-27 | 画像符号化装置及び画像復号装置 |
JP96-166978 | 1996-06-27 | ||
PCT/JP1997/001540 WO1997050253A1 (en) | 1996-06-27 | 1997-05-07 | Picture encoder and picture decoder |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20000022218A true KR20000022218A (ko) | 2000-04-25 |
KR100296716B1 KR100296716B1 (ko) | 2001-08-07 |
Family
ID=15841142
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1019980710638A KR100296716B1 (ko) | 1996-06-27 | 1997-05-07 | 화상 부호화 장치 및 화상 복호화 장치 |
Country Status (9)
Country | Link |
---|---|
US (3) | US6295381B1 (ko) |
EP (2) | EP1289303B1 (ko) |
JP (1) | JP3210862B2 (ko) |
KR (1) | KR100296716B1 (ko) |
CN (2) | CN1148969C (ko) |
DE (2) | DE69739846D1 (ko) |
ES (2) | ES2344593T3 (ko) |
HK (1) | HK1050979A1 (ko) |
WO (1) | WO1997050253A1 (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20020014770A (ko) * | 2000-08-18 | 2002-02-25 | 가부시키가이샤 미디어 글루 | 코드화된 신호를 분리 및 합병하는 방법과 그 장치 및컴퓨터 프로그램 제품 |
KR100763205B1 (ko) * | 2006-01-12 | 2007-10-04 | 삼성전자주식회사 | 모션 역변환을 사용하여 모션 예측을 수행하는 방법 및장치 |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3210862B2 (ja) | 1996-06-27 | 2001-09-25 | シャープ株式会社 | 画像符号化装置及び画像復号装置 |
JP4034380B2 (ja) * | 1996-10-31 | 2008-01-16 | 株式会社東芝 | 画像符号化/復号化方法及び装置 |
US6259738B1 (en) | 1996-10-31 | 2001-07-10 | Kabushiki Kaisha Toshiba | Video encoding apparatus and video decoding apparatus |
CN1243635A (zh) * | 1997-01-10 | 2000-02-02 | 松下电器产业株式会社 | 图像处理方法、图像处理装置及数据记录媒体 |
US6741748B1 (en) * | 1997-06-19 | 2004-05-25 | Samsung Electronics Co. | Scan interleaving method based on context values of neighboring pixels, improved encoding/decoding method of binary shape data and encoding/decoding apparatus suitable for the same |
JP2000013790A (ja) | 1998-06-19 | 2000-01-14 | Sony Corp | 画像符号化装置および画像符号化方法、画像復号装置および画像復号方法、並びに提供媒体 |
US8050329B2 (en) * | 1998-06-26 | 2011-11-01 | Mediatek Inc. | Method and apparatus for generic scalable shape coding |
US6459814B1 (en) | 1998-09-08 | 2002-10-01 | Sarnoff Corporation | Method and apparatus for generic scalable shape coding by deriving shape information for chrominance components from luminance component |
EP1079625A3 (en) * | 1999-06-15 | 2003-03-12 | Canon Research Centre France S.A. | Digital signal coding, decoding and transmission, with decomposition into frequency sub-bands and segmentation |
FR2806570B1 (fr) | 2000-03-15 | 2002-05-17 | Thomson Multimedia Sa | Procede et dispositif de codage d'images video |
US6909745B1 (en) | 2001-06-05 | 2005-06-21 | At&T Corp. | Content adaptive video encoder |
US6810086B1 (en) | 2001-06-05 | 2004-10-26 | At&T Corp. | System and method of filtering noise |
US6970513B1 (en) * | 2001-06-05 | 2005-11-29 | At&T Corp. | System for content adaptive video decoding |
US6968006B1 (en) | 2001-06-05 | 2005-11-22 | At&T Corp. | Method of content adaptive video decoding |
US7773670B1 (en) | 2001-06-05 | 2010-08-10 | At+T Intellectual Property Ii, L.P. | Method of content adaptive video encoding |
US7003155B2 (en) * | 2001-09-27 | 2006-02-21 | The John Hopkins University | System and method for creating unclassified line drawings from classified NTM images |
JP2003224846A (ja) * | 2002-01-29 | 2003-08-08 | Matsushita Electric Ind Co Ltd | 画像処理装置、復号化装置、符号化装置、画像処理システム、画像処理方法、及び、符号化方法 |
WO2003079692A1 (en) * | 2002-03-19 | 2003-09-25 | Fujitsu Limited | Hierarchical encoder and decoder |
CA2518034C (en) * | 2003-03-03 | 2014-09-23 | Nokia Corporation | Method, system and network entity for indicating hierarchical mode for transport streams carried in broadband transmission |
EP1730695A2 (en) * | 2004-03-09 | 2006-12-13 | Thomson Research Funding Corporation | Reduced resolution update mode for advanced video coding |
DE102004038110B3 (de) * | 2004-08-05 | 2005-12-29 | Siemens Ag | Verfahren zum Codieren und Decodieren, sowie Codier- und Decodiervorrichtung zur Videocodierung |
JP4371982B2 (ja) * | 2004-11-08 | 2009-11-25 | キヤノン株式会社 | 画像処理装置及びその制御方法、並びに、コンピュータプログラム及びコンピュータ可読記憶媒体 |
CN100403803C (zh) * | 2005-01-19 | 2008-07-16 | 威盛电子股份有限公司 | 具有快取的阶层式搜寻方法与系统 |
EP2048887A1 (en) * | 2007-10-12 | 2009-04-15 | Thomson Licensing | Encoding method and device for cartoonizing natural video, corresponding video signal comprising cartoonized natural video and decoding method and device therefore |
KR100997082B1 (ko) | 2009-05-21 | 2010-11-29 | (주)테슬라시스템 | 다해상도 동영상 코덱 방법 및 장치 |
CN102714726B (zh) | 2010-01-15 | 2015-03-25 | 杜比实验室特许公司 | 使用元数据的用于时间缩放的边缘增强 |
FR2981781A1 (fr) * | 2011-10-19 | 2013-04-26 | France Telecom | Codage hierarchique perfectionne |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01141479A (ja) * | 1987-11-28 | 1989-06-02 | A T R Tsushin Syst Kenkyusho:Kk | 視線検出を利用した画像通信装置 |
JP2584840B2 (ja) * | 1988-08-30 | 1997-02-26 | キヤノン株式会社 | 画像の階層的符号化装置 |
JP2502176B2 (ja) * | 1990-09-10 | 1996-05-29 | 三菱電機株式会社 | 画像信号の符号化器及びその復号化器 |
JP3609097B2 (ja) * | 1992-01-17 | 2005-01-12 | 株式会社リコー | 画像暗号化再生装置 |
NL9201594A (nl) * | 1992-09-14 | 1994-04-05 | Nederland Ptt | Systeem omvattende ten minste één encoder voor het coderen van een digitaal signaal en ten minste één decoder voor het decoderen van een gecodeerd digitaal signaal, en encoder en decoder voor toepassing in het systeem. |
NL9201640A (nl) * | 1992-09-22 | 1994-04-18 | Nederland Ptt | Systeem omvattende ten minste één encoder voor het coderen van een digitaal signaal en ten minste één decoder voor het decoderen van een digitaal signaal, en encoder en decoder voor toepassing in het systeem volgens de uitvinding. |
US6009200A (en) * | 1992-12-17 | 1999-12-28 | Sony Corporation | Dynamic image processing apparatus and method |
JP3189258B2 (ja) | 1993-01-11 | 2001-07-16 | ソニー株式会社 | 画像信号符号化方法および画像信号符号化装置、並びに画像信号復号化方法および画像信号復号化装置 |
KR100276427B1 (ko) * | 1993-01-30 | 2000-12-15 | 윤종용 | 화상데이타의 압축 및 복원장치 |
CA2115976C (en) * | 1993-02-23 | 2002-08-06 | Saiprasad V. Naimpally | Digital high definition television video recorder with trick-play features |
US5430486A (en) * | 1993-08-17 | 1995-07-04 | Rgb Technology | High resolution video image transmission and storage |
JPH07107488A (ja) * | 1993-09-30 | 1995-04-21 | Toshiba Corp | 動画像符号化装置 |
JPH07262384A (ja) | 1994-03-23 | 1995-10-13 | Nippon Telegr & Teleph Corp <Ntt> | 画像領域分割方法及び装置 |
JPH07288789A (ja) * | 1994-04-15 | 1995-10-31 | Hitachi Ltd | 知的符号化装置及び画像通信装置 |
JPH07288806A (ja) * | 1994-04-20 | 1995-10-31 | Hitachi Ltd | 動画像通信システム |
US5640468A (en) * | 1994-04-28 | 1997-06-17 | Hsu; Shin-Yi | Method for identifying objects and features in an image |
JP3758211B2 (ja) | 1994-07-19 | 2006-03-22 | ソニー株式会社 | ディジタル画像信号の階層符号化装置および方法、並びに復号装置および方法 |
US6005679A (en) * | 1994-08-22 | 1999-12-21 | Fuji Photo Film Co., Ltd. | Image data filing system for quickly retrieving an area of interest of an image from a reduced amount of image data |
US5828788A (en) * | 1995-06-29 | 1998-10-27 | Thomson Multimedia, S.A. | System for processing data in variable segments and with variable data resolution |
JP3210862B2 (ja) | 1996-06-27 | 2001-09-25 | シャープ株式会社 | 画像符号化装置及び画像復号装置 |
-
1996
- 1996-06-27 JP JP16697896A patent/JP3210862B2/ja not_active Expired - Fee Related
-
1997
- 1997-05-07 CN CNB971958351A patent/CN1148969C/zh not_active Expired - Fee Related
- 1997-05-07 ES ES02024381T patent/ES2344593T3/es not_active Expired - Lifetime
- 1997-05-07 ES ES97918380T patent/ES2227686T3/es not_active Expired - Lifetime
- 1997-05-07 DE DE69739846T patent/DE69739846D1/de not_active Expired - Lifetime
- 1997-05-07 EP EP20020024381 patent/EP1289303B1/en not_active Expired - Lifetime
- 1997-05-07 WO PCT/JP1997/001540 patent/WO1997050253A1/ja active IP Right Grant
- 1997-05-07 DE DE1997630713 patent/DE69730713T2/de not_active Expired - Lifetime
- 1997-05-07 CN CNB031458637A patent/CN1251508C/zh not_active Expired - Fee Related
- 1997-05-07 US US09/202,678 patent/US6295381B1/en not_active Expired - Fee Related
- 1997-05-07 KR KR1019980710638A patent/KR100296716B1/ko not_active IP Right Cessation
- 1997-05-07 EP EP19970918380 patent/EP0909096B1/en not_active Expired - Lifetime
-
2001
- 2001-07-31 US US09/917,955 patent/US6546142B2/en not_active Expired - Lifetime
-
2003
- 2003-01-28 US US10/352,025 patent/US6671412B2/en not_active Expired - Fee Related
- 2003-05-03 HK HK03103168A patent/HK1050979A1/xx not_active IP Right Cessation
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20020014770A (ko) * | 2000-08-18 | 2002-02-25 | 가부시키가이샤 미디어 글루 | 코드화된 신호를 분리 및 합병하는 방법과 그 장치 및컴퓨터 프로그램 제품 |
KR100763205B1 (ko) * | 2006-01-12 | 2007-10-04 | 삼성전자주식회사 | 모션 역변환을 사용하여 모션 예측을 수행하는 방법 및장치 |
Also Published As
Publication number | Publication date |
---|---|
DE69730713T2 (de) | 2005-09-22 |
JP3210862B2 (ja) | 2001-09-25 |
CN1223771A (zh) | 1999-07-21 |
EP1289303A2 (en) | 2003-03-05 |
EP0909096A4 (en) | 2000-12-13 |
EP0909096A1 (en) | 1999-04-14 |
DE69730713D1 (de) | 2004-10-21 |
CN1501715A (zh) | 2004-06-02 |
ES2227686T3 (es) | 2005-04-01 |
CN1148969C (zh) | 2004-05-05 |
US6295381B1 (en) | 2001-09-25 |
CN1251508C (zh) | 2006-04-12 |
HK1050979A1 (en) | 2003-07-11 |
EP0909096B1 (en) | 2004-09-15 |
EP1289303A3 (en) | 2003-03-26 |
US6671412B2 (en) | 2003-12-30 |
KR100296716B1 (ko) | 2001-08-07 |
US6546142B2 (en) | 2003-04-08 |
JPH1013829A (ja) | 1998-01-16 |
US20030113028A1 (en) | 2003-06-19 |
DE69739846D1 (de) | 2010-05-27 |
WO1997050253A1 (en) | 1997-12-31 |
US20020009234A1 (en) | 2002-01-24 |
EP1289303B1 (en) | 2010-04-14 |
ES2344593T3 (es) | 2010-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100296716B1 (ko) | 화상 부호화 장치 및 화상 복호화 장치 | |
Shi et al. | Image and video compression for multimedia engineering: Fundamentals, algorithms, and standards | |
Wallace | The JPEG still picture compression standard | |
US6343156B1 (en) | Video coding and video decoding apparatus | |
US7167521B2 (en) | Video encoding apparatus and video decoding apparatus | |
RU2273112C2 (ru) | Сжатие изображения с использованием дискретного косинусного преобразования адаптивно определенного размера блока на основании дисперсии | |
JP2003533101A (ja) | 予測符号化オブジェクトベース画像信号を予測符号化ブロックベース画像信号にトランスコーディングするトランスコーディング方法およびトランスコーダ | |
US6307967B1 (en) | Video coding and video decoding apparatus | |
KR20000077135A (ko) | 고선명으로 코드화된 비디오 신호로부터 상승 디코드된감소된 해상도의 비디오 신호를 유도하기 위한 장치 및 방법 | |
US6754268B1 (en) | Video coding and video decoding apparatus | |
Yokoyama et al. | Very low bit-rate video coding with object-based motion compensation and orthogonal transform | |
KR20020055864A (ko) | 칼라 정지영상의 부호화 및 복호화 방법 | |
ALGAZI et al. | Perceptually transparent coding of still images | |
JPH0937240A (ja) | 動画像符号化装置及び動画像復号装置 | |
JP4123587B2 (ja) | 画像情報処理装置および方法 | |
JPH04135384A (ja) | 画面合成装置 | |
JP2002320229A (ja) | 動画符号通信画質評価方法及び評価システム | |
JPH07303256A (ja) | 動画像ディジタル圧縮伝送方式 | |
Hasegawa et al. | Image data compression with nonuniform block segmentation and luminance approximation using bilinear curved surface patches | |
Garnham | Motion compensated video coding | |
JPH05328143A (ja) | カラー画像符号化装置 | |
Fu et al. | Image compression technique | |
JPH02230882A (ja) | ブロツク符号化装置 | |
JPH0495472A (ja) | 画像データ処理方式 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20120423 Year of fee payment: 12 |
|
LAPS | Lapse due to unpaid annual fee |