KR100964401B1

KR100964401B1 - 칼라 영상을 위한 인트라 부호화/복호화 방법 및 장치

Info

Publication number: KR100964401B1
Application number: KR1020030074418A
Authority: KR
Inventors: 조대성; 김현문; 김우식
Original assignee: 삼성전자주식회사
Priority date: 2003-10-23
Filing date: 2003-10-23
Publication date: 2010-06-17
Also published as: KR20050039057A

Abstract

본 발명은 칼라 영상을 위한 인트라 부호화/복호화 방법 및 장치에 관한 것으로서, 4:4:4 영상 형식의 Intra 부호화 방법은 비디오 부호화기 (encoder)에 있어서 (1) Chroma 성분의 블록 단위 Intra prediction을 부가 정보 없이 같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정, (2) 원 영상 블록과 Intra 예측 블록과의 차를 일정 블록 단위로 나누어 정수변환 하는 과정, 상기 (1)의 과정의 일정 조건에 따라 상기 (2)의 결과 중에 DC 만을 따로 모아 정수 변환 하는 과정을 포함하는 것을 특징으로 한다. 4:4:4 영상 형식의 Intra 복호화 방법은 비디오 복호화기 (decoder)에 있어서, (1) Chroma 성분의 블럭 단위 Intra prediction을 부가 정보 없이같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정; (2) 상기 (1)의 과정의 일정 조건에 따라 예측오차의 DC 성분만을 DC 성분의 변환 계수를 역 정수 변환하여 얻는 과정; (3) 상기 (2)의 복원된 DC계수와 나머지 계수를 이용하여 일정 블록 단위의 역 정수 변환하여 최종 예측오차를 얻는 과정을 포함하는 것을 특징으로 한다.

본 발명에 의하면, Chroma 성분에 대한 Intra prediction 정보를 Luma 성분에서 얻어 부가정보가 필요없으며, Intra 예측 성능이 향상 될 수 있다. R-G-B의 경우 성분간에 존재하는 상관도를 부호화에 이용할 수 있어 부호화 효율 개선이 기대된다.

Description

칼라 영상을 위한 인트라 부호화/복호화 방법 및 장치 {Intra coding/decoding method and apparatus for color image}

도 1은 비디오 부호화 방법을 나타낸 블록도이다.

도 2는 비디오 복호화 방법을 나타낸 블록도이다.

도 3은 4:2:0 영상 형식의 프로그래시브 (Progressive) 영상의 Luma 및 Chroma 샘플 위치를 도시한 것이다.

도 4는 4:4:4 영상 형식의 프로그래시브 (Progressive) 영상의 Luma 및 Chroma 샘플 위치를 도시한 것이다.

도 5는 H.264/AVC 부호화기 Intra 부호화 방법 (4:2:0 영상형식)을 흐름도로 도시한 것이다.

도 6은 H.264/AVC 복호화기 Intra 복호화 방법 (4:2:0 영상형식)을 흐름도로 도시한 것이다.

도 7은 본 발명에 의한 인트라 부호화 방법 (4:4:4 영상형식)을 흐름도로 도시한 것이다.

도 8은 본 발명에 의한 인트라 복호화 방법 (4:4:4 영상형식)을 흐름도로 도시한 것이다.

도 9는 16x16 블록내 4x4 블록 분할 방법을 도시한 것이다.

도 10은 4x4 인트라 prediction을 도시한 것이다.

도 11은 Chroma 8x8 인트라 모드의 DC prediction을 도시한 것이다.

도 12는 H.264/AVC 부호화기 4:2:0 정수 변환 (Integer transform) 구조를 도시한 것이다.

도 13은 본 발명에 의한 4:4:4 정수 변환 (Integer transform) 구조를 도시한 것이다.

도 14는 RGB 부호화를 위한 Inter-plane prediction을 블록도로 도시한 것이다.

도 15는 기존의 방식으로 부호화할 경우 R-G-B 성분간의 상관도를 도시한 것이다.

도 16은 본 발명에 의한 방식으로 부호화할 경우 R-G-B 성분간의 상관도이다.

도 17은 본 발명에 의한 인트라 부호화 방식을 이용한 R-G-B 부호화 결과(IPP 이용)를 도시한 것이다.

본 발명은 칼라 영상 부호화에 관한 것으로서, 특히 칼라영상을 위한 인트라 부호화/복호화 방법 및 장치에 관한 것이다.

4:2:0 영상 형식을 위한 H.264/AVC 부호화기를 4:4:4 영상 형식에 대응하기 위해 크로마(chroma) 성분에 대한 8x8 블럭 단위의 처리를 그대로 16x16 블럭 단위로 확장할 수 있다. 본 발명에서는 이 방식을 제안한 방식과 비교할 종래 기술로 선정하고 비교하였다. 종래 기술의 문제점을 다음과 같이 정리 할 수 있다. 1) Chroma 성분에 대한 Intra prediction 방향에 대한 정보를 Luma성분과 독립적으로 부호화 하므로 부가정보가 필요하다. 2) 반드시 16x16 단위로 예측해야 하므로 Intra 예측 성능이 저하된다. 3) 2)의 이유로 예측 오차를 부호화할 때 반드시 2단계 정수 변환이 필요하다. 4) Luma 성분과 Chrom 성분 사이의 intra 예측방식이 다르기 때문에 R-G-B의 경우 성분간에 존재하는 상관도를 부호화에 이용할 수 없다. 상기의 문제점은 chroma 성분을 luma 성분과 독립적으로 다루기 때문에 발생하는 문제이다.

본 발명이 이루고자 하는 기술적 과제는 칼라 영상을 위한 인트라 부호화/복호화 방법 및 장치를 제공하는 것이다.

상술한 기술적 과제를 달성하기 위한 본 발명에 의한, 4:4:4 영상 형식의 Intra 부호화 방법은 비디오 부호화기 (encoder)에 있어서, (1) Chroma 성분의 블록 단위 Intra prediction을 부가 정보 없이 같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정; (2) 원 영상 블록과 Intra 예측 블록과의 차를 일정 블록 단위로 나누어 정수변환 하는 과정; (3) 상기 (1)의 과정의 일정 조건에 따라 상기 (2)의 결과 중에 DC 만을 따로 모아 정수 변환 하는 과정을 포함하는 것을 특징으로 한다.

상기 (1) 과정에서 Intra prediction은 4x4 단위의 prediction 혹은 16x16 단위 prediction을 포함하는 것을 특징으로 한다. 상기 (1) 과정에서 chroma 신호 성분에 4x4 intra prediction와 16x16 intra prediction중에서 하나를 적용하고 예측 방향을 적용하기 위한 정보는 부가정보 없이 Luma 신호 성분의 예측 방법을 사용하는 것을 포함하는 것을 특징으로 한다. 상기 (2) 과정에서 정수 변환은 4x4 크기의 DCT를 정수로 간략화한 정수 변환 방법을 사용하는 것을 포함하는 것을 특징으로 한다. 상기 (2) 과정에서 정수 변환은 4x4 크기의 Hadarmard 변환 방법을 사용하는 것을 포함하는 것을 특징으로 한다. 상기 (3) 과정에서 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 Hadarmard 변환을 사용하여 구하는 것을 특징으로 한다. 상기 (3) 과정에서 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 DCT를 정수로 간략화한 정수 변환을 사용하여 구하는 것을 특징으로 한다.

상기 기술적 과제를 해결하기 위한 본 발명에 의한, 4:4:4 영상 형식의 Intra 복호화 방법은 비디오 복호화기 (decoder)에 있어서, (1) Chroma 성분의 블럭 단위 Intra prediction을 부가 정보 없이같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정; (2) 상기 (1)의 과정의 일정 조건에 따라 예측오차의 DC 성분만을 DC 성분의 변환 계수를 역 정수 변환하여 얻는 과정; (3) 상기 (2)의 복원된 DC계수와 나머지 계수를 이용하여 일정 블록 단위의 역 정수 변환하여 최종 예측오차 를 얻는 과정을 포함하는 것을 특징으로 한다. 상기 (1) 과정에서 Intra prediction은 4x4 단위의 prediction 혹은 16x16 단위 prediction을 포함하는 것을 특징으로 한다. 상기 (1) 과정에서 chroma 신호 성분에 4x4 intra prediction와 16x16 intra prediction중에서 하나를 적용하고 예측 방향을 적용하기 위한 정보는 부가정보 없이 Luma 신호 성분의 예측 방법을 사용하는 것을 포함하는 것을 특징으로 한다. 상기 (2) 과정에서 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 Hadarmard 변환을 사용하여 구하는 것을 특징으로 한다. 상기 (2) 과정에서 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 DCT를 정수로 간략화한 정수 변환을 사용하여 구하는 것을 특징으로 한다. 상기 (3) 과정에서 정수 변환은 4x4 크기의 DCT를 정수로 간략화한 정수 변환 방법을 사용하는 것을 포함하는 것을 특징으로 한다. 상기 (3) 과정에서 정수 변환은 4x4 크기의 Hadarmard 변환 방법을 사용하는 것을 포함하는 것을 특징으로 한다.

상술한 기술적 과제를 해결하기 위한 본 발명에 의한, 4:4:4 영상 형식의 Intra 부호화 장치는 비디오 부호화기 (encoder)에 있어서, (1) Chroma 성분의 블록 단위 Intra prediction을 부가 정보 없이 같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정; (2) 원 영상 블록과 Intra 예측 블록과의 차를 일정 블록 단위로 나누어 정수변환 하는 과정; (3) 상기 (1)의 과정의 일정 조건에 따라 상기 (2)의 결과 중에 DC 만을 따로 모아 정수 변환 하는 과정을 포함하는 것을 특징으로 한다. 상기 (1) 과정에서 Intra prediction은 4x4 단위의 prediction 혹은 16x16 단위 prediction을 포함하는 것을 특징으로 한다. 상기 (1) 과정에서 chroma 신호 성분에 4x4 intra prediction와 16x16 intra prediction중에서 하나를 적용하고 예측 방향을 적용하기 위한 정보는 부가정보 없이 Luma 신호 성분의 예측 방법을 사용하는 것을 포함하는 것을 특징으로 한다. 상기 (2) 과정에서 정수 변환은 4x4 크기의 DCT를 정수로 간략화한 정수 변환 방법을 사용하는 것을 포함하는 것을 특징으로 한다. 상기 (2) 과정에서 정수 변환은 4x4 크기의 Hadarmard 변환 방법을 사용하는 것을 포함하는 것을 특징으로 한다. 상기 (3) 과정에서 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 Hadarmard 변환을 사용하여 구하는 것을 특징으로 한다. 상기 (3) 과정에서 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 DCT를 정수로 간략화한 정수 변환을 사용하여 구하는 것을 특징으로 한다.

상술한 기술적 과제를 해결하기 위한 본 발명에 의한 4:4:4 영상 형식의 Intra 복호화 장치는 비디오 복호화기 (decoder)에 있어서, (1) Chroma 성분의 블럭 단위 Intra prediction을 부가 정보 없이같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정; (2) 상기 (1)의 과정의 일정 조건에 따라 예측오차의 DC 성분만을 DC 성분의 변환 계수를 역 정수 변환하여 얻는 과정; (3) 상기 (2)의 복원된 DC계수와 나머지 계수를 이용하여 일정 블록 단위의 역 정수 변환하여 최종 예측오차를 얻는 과정을 포함하는 것을 특징으로 한다. 상기 (1) 과정에서 Intra prediction은 4x4 단위의 prediction 혹은 16x16 단위 prediction을 포함하는 것을 특징으로 한다. 상기 (1) 과정에서 chroma 신호 성분에 4x4 intra prediction와 16x16 intra prediction중에서 하나를 적용하고 예측 방향을 적용하기 위한 정보는 부가정보 없이 Luma 신호 성분의 예측 방법를 사용하는 것을 포함하는 것을 특징으로 한다. (2) 과정에서 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 Hadarmard 변환을 사용하여 구하는 것을 특징으로 한다. 상기 (2) 과정에서 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 DCT를 정수로 간략화한 정수 변환을 사용하여 구하는 것을 특징으로 한다. 상기 (3) 과정에서 정수 변환은 4x4 크기의 DCT를 정수로 간략화한 정수 변환 방법을 사용하는 것을 포함하는 것을 특징으로 한다. 상기 (3) 과정에서 정수 변환은 4x4 크기의 Hadarmard 변환 방법을 사용하는 것을 포함하는 것을 특징으로 한다.

이하, 본 발명을 상세히 설명하기로 한다. 본 발명은 고품질 영상 재생을 위해, Y-Cb-Cr 영상의 Chroma 성분인 Cb 및 Cr 성분을 각각 luma 성분에 비해 1/4크기로 줄인 4:2:0 영상 형식 대신에 chroma 성분을 luma 성분과 동일한 해상도로 하는 4:4:4 영상 형식에서 효율적인 압축이 가능하도록 하기 위한 것이다. 본 발명에서 기존의 4:2:0 영상 형식 부호화기로 H.264/AVC 부호화기를 고려하였다. H.264/AVC 부호화기는 국제 표준화 기구인 ISO/IEC MPEG 및 ITU-T VCEG의 협력 프로젝트인 JVT (Joint Video Team)의 표준화 기술이다 ("Text of ISO/IEC FDIS 14496-10: Information Technology - Coding of audio-visual objects - Part 10: Advanced Video Coding", ISO/IEC JTC 1/SC 29/WG 11, N5555, March, 2003). 이 부호화기를 4:4:4 영상 형식에 효율적으로 적용하기 위하여 기존의 Intra 예측 방식 및 정수 변환 (integer transform) 방식을 효율적으로 개선하였다. 먼저, chroma 성분에 대한 독립 예측을 없애 방향 정보에 대한 오버헤드를 줄이고 대신 luma방식과 같은 방식의 예측을 수행하여 다양한 방향의 예측 및 예측 성능의 향상이 가능하게 하였다. 또한 개선된 예측 방식에 의해 기존의 4:2:0 방식에서 반드시 수행해야 했던 chroma 성분의 2 단계 정수 변환 (inter transform)도 예측 모드에 따라 Luma 영상에서 처럼 적응적으로 적용 여부를 결정하였다.

본 발명은 또한 고 품질 영상 재생을 위해, 일반적으로 많이 사용하는 Y-Cb-Cr 영상과 더불어 R-G-B 영상도 효율적인 부호화가 가능하게 한다. 일반적으로 R-G-B 성분 사이의 상관도는 Y-Cb-Cr 성분 사이의 상관도가 보다 훨씬 커서 부호화 효율이 떨어 진다. 따라서 부호화 과정에서 R-G-B 성분 사이의 예측을 통해 상관도를 줄이는 방식으로 부호화 효율 저하를 극복해야 한다. H.264/AVC 부호화기에서는 R-G-B 성분의 Intra 예측 오차 성분 사이의 예측을 이용할 수 있다. 이러한 R-G-B 성분의 Intra 예측오차 성분 사이의 예측을 통해 부호화 효율을 개선하기위해서 부호화 과정 중에 Intra 예측오차 성분이 기본적인 R-G-B 성분사이에 존재하는 상관도를 저하시키면 안된다. 이를 위해 본 발명에서는 Intra 예측할 때에 Luma 성분과 Chroma성분의 Intra 부호화 방식을 기존의 서로 독립적인 방식이 아닌 서로 같은 방식으로 부호화하는 방법을 제안한다.

도 1은 본 발명의 Intra 부호화 방식을 적용하기 위한 비디오 부호화 방법을 나타낸 블럭도이다. 부호화기의 입력 영상 F(n) (101)은 Y-Cb-Cr 혹은 R-G-B 영상이 될 수 있다. 영상은 부호화기에서 블럭 단위로 처리가 된다. 부호화기는 부호화 효율을 높이기 위해 이전 복원 영상 Fr(n-1) (112)에서 움직임을 추정하여 예측하기 위한 ME (motion estimation) (104) 및 MC (motion compensation) (105)를 사용하는 인터 (inter) 방법과 공간적으로 인접해 있는 블록에서 예측하는 인트라 예측 (Intra Prediction) (106)을 사용하는 인트라 (intra) 방법을 사용하여 예측한다 (Fp(n)). 입력 영상 (F(n))과 상기의 방법으로 예측된 영상 (Fp(n))사이의 예측 오차 (residue) 값을 얻는다(△F(n)). 이 예측 오차는 정수변환 및 양자화 (107)을 거쳐 엔트로피 부호화 (108) 된다. (107)에서 정수 변환되어 양자화된 값은 역 양자화 및 역 정수 변환 (109)을 하여 예측오차 (△F(n))를 복원한 값 (△Fr(n))을 얻는다. 이 값은 (104) 와 (105) 혹은 (106)에서 사용된 인트라 혹은 인터 예측 방식에 의해 예측된 값 (Fp(n))에 더해져서 복호화된 영상 (Fd(n))을 얻는다. 이 영상은 (106)에서 다음 블럭의 Intra 예측에 사용된다. 복호화된 영상의 블럭효과를 줄여 주기 위해 디블록킹 필터 (Deblocking filter) (113)를 거쳐 복호화기에서 최종 복원할 수 있는 영상 Fr(n) (111)을 얻는다. 이 영상이 최종적을 디스플레이 될 영상이다. 이 영상이 시간이 지나면 (104) 및 (105)에 사용될 예측 영상 (112)으로 사용된다. 본 발명에서는 Intra 부호화에 필요한 (106)(107) 및 (109) 단계에서 Chroma 성분의 Intra 부호화 방식을 Luma 성분의 Intra 부호화 방식과 같은 방식으로 적용하여 부호화 효율을 향상 시킨다. 자세한 방법은 도 7에서 설명한다.

도 2는 본 발명에서의 Intra 복호화 방식을 적용하기 위한 비디오 복호화 방법을 나타낸 블럭도이다. 이 방법은 상기의 도 1의 부호화 과정과 반대의 과정을 거쳐 압축된 비트스트림 (Bitstream)으로부터 영상을 복원하는 역할을 한다. 압축된 데이터는 엔트로피 복호화 (204), 역 양자화 및 역 정수 변환을 (205) 거쳐, 복원된 예측 오차 값 (△Fr(n))을 얻고 이 값이 인터 복원(202) 혹은 인트라 복원 (203)에 의해 얻은 Intra 예측 값 (Fp(n))에 더해져서 복호화된 영상 (Fd(n))을 얻는다. 이 영상은 (203)에서 다음 블럭의 Intra 예측에 사용된다. 복호화된 영상의 블럭효과를 줄여 주기 위해 디블록킹 필터 (Deblocking filter) (206)를 거쳐 복호화기에서 최종 복원할 수 있는 영상 Fr(n) (207)을 얻는다. 이 영상이 최종적을 디스플레이 될 영상이다. 이 영상이 시간이 지나면 (202)에 사용될 예측 영상 (201)로 사용된다. 본 발명에서는 Intra 부호화에 필요한 (203) 및 (205) 단계에서 Chroma 성분의 Intra 부호화 방식을 Luma 성분의 Intra 부호화 방식과 같은 방식으로 적용하여 부호화 효율을 향상 시킨다. 자세한 방법은 도 8에서 설명한다.

본 발명의 동작원리를 설명한다. 먼저 입력 영상 형식을 설명기로 한다. 본 발명은 4:2:0 영상 형식 대신 4:4:4 영상 형식으로 부호화 할 경우 보다 효율적을 부호화하기 위한 Intra 예측 및 정수 변환 방법에 관한 것이다. 도 3 및 도 4에 4:2:0 및 4:4:4 영상 형식을 나타내었다.

도 3는 4:2:0 영상 형식을 나타낸 그림이다. Y-Cb-Cr 영상의 Chroma 성분인 Cb 및 Cr 성분을 각각 luma 성분에 비해 1/4크기로 줄인 것이다. 이 형식의 장점은 일반적으로 비디오 정보 부호화시 상대적으로 시각에 둔감한 chroma 성분을 1/4씩 줄여서 압축률을 향상 시킬 수 있다는 것이다. 반면에 chroma 성분의 손실로 고품질의 응용에 한계가 있다.

도 4는 4:4:4 영상 형식을 나타낸 것이다. luma성분 Y와 chroma 성분 Cb, Cr이 동일한 해상도를 갖는다. 이 형식의 장점은 chroma 성분의 손실이 없으므로 상대적으로 고품질의 응용에 적합하다는 것이다. 반면에 부호화해야할 chroma 성분의 양이 크므로 4:2:0 보다 정보의 양이 많다.

다음으로 4:2:0 형식의 Intra 부호화 방법을 설명한다. H.264/AVC 부호화/복호화기에서의 Intra 부호화/복호화 방법은 도 5 및 도 6에 나타내었다. 도 5는 H.264/AVC 부호화기에서 4:2:0 형식의 영상을 위한 Intra 부호화 방식을 나타낸 순서도이다. 먼저 매크로 블록의 부호화 방법를 결정하고 (501) 이것이 Intra_16x16 방법인지를 결정한다 (502). 만약 Intra_16x16 방법이면 다시 입력 신호가 Luma 신호 인지를 결정한다 (503). Luma 신호이면 16x16 블럭단위로 Intra prediction을 한다 (504). 원 영상과 Intra prediction 값과의 차를 4x4 단위로 정수변환 (integer transform) (505)하고 다시 DC 값만을 모아 4x4 단위로 Hadamard 변환을 한다 (506). 이 변환계수를 양자화하여 (507) 엔트로피 부호화 한다 (516). (503)에서 Chroma 신호의 경우에 Cb, Cr에 대해 8x8 크기 블록 단위로 Intra prediction을 한다 (508). 원 영상과 Intra prediction 값과의 차를 4x4 단위로 정수변환 (integer transform) (509)하고 다시 DC 값만을 모아 2x2 단위로 Hadamard 변환을 한다 (510). 이 변환계수를 양자화하여 (511) 엔트로피 부호화 한다 (512). (502)에서 Intra_4x4 방법으로 결정되면 Luma 신호 인지를 결정한다 (512). 만약 Luma 신호이면 Y에 대해 4x4 블럭 크기로 Intra prediction을 한다 (513). 4x4 크기로 원 영상과 Intra prediction 값과의 차를 4x4 단위로 정수변환 (integer transform) (514)하고 변환계수를 양자화하여 (515) 엔트로피 부호화 한다 (512). 만약 Chroma 신호이면 (503)에서 Chroma신호로 결정된 것같이 (508), (509), (510), (511), 및 (516)를 사용하여 부호화 한다.

도 6은 H.264/AVC 부호화기에서 4:2:0 형식의 영상을 위한 Intra 복호화 방식을 나타낸 순서도이다. 먼저 엔트로피 복호화를 통해 매크로 블록의 부호화 방법를 결정하고 (601) 이것이 Intra_16x16 방법인지를 결정한다 (602). 만약 Intra_16x16 방법이면 다시 입력 신호가 Luma 신호 인지를 결정한다 (603). Luma 신호이면 16x16 블럭단위로 Intra prediction을 한다 (604). DC 값의 변환계수에 대해 4x4 단위로 Hadamard 변환을 하여 DC 값 계수를 구한다 (605). 이 DC계수를 포함한 변환계수를 역 양자화하고 (606) 4x4 단위로 역 정수 변환을 한다 (607). 이 값과 (604)의 결과를 이용하여 복원된 매크로 블록을 얻는다 (616). (603)에서 Chroma 신호의 경우에 Cb, Cr에 대해 8x8 크기 블록 단위로 Intra prediction을 한다 (608). DC 값의 변환계수에 대해 2x2 단위로 Hadamard 변환을 하여 DC 값 계수를 구한다 (609). 이 DC계수를 포함한 변환계수를 역 양자화하고 (610) 4x4 단위로 역 정수 변환을 한다 (611). 이 값과 (608)의 결과를 이용하여 복원된 매크로 블록을 얻는다 (616). (602)에서 Intra_4x4 방법으로 결정되면 Luma 신호 인지를 결정한다 (612). 만약 Luma 신호이면 Y에 대해 4x4 블럭 크기로 Intra prediction을 한다 (613). 변환계수를 역 양자화하고 (614) 4x4 단위로 역 정수 변환을 한다 (615). 이 값과 (613)의 결과를 이용하여 복원된 매크로 블록을 얻는다 (616). 만약 Chroma 신호이면 (603)에서 Chroma신호로 결정된 것같이 (608), (609), (610), (611), 및 (616)를 사용하여 복호화 한다.

(504) 및 (604)의 Luma 성분의 16x16 블록 단위 Intra prediction은 인접 블럭으로부터 다음의 4가지 방법 중에서 하나의 방법으로 현재 블럭의 예측을 수행한다. 1) Intra_16x16_Vertical 2) Intra_16x16_Horizontal 3) Intra_16x16_DC 4) Intra_16x16_Plane

공간상 인접한 블럭 샘플 p[x,y] (x=-1,y=-1...15 혹은 x=0...15, y=-1)을 이용하여 예측블럭 pred[x,y] (x=0...15, y=0...15)는 다음과 같이 구할 수 있다. 여기서 x 및 y는 16x16 블럭의 좌/상 (left/top)위치로 부터의 상대적인 수평 및 수직 위치를 나타낸다.

Intra_16x16_Vertical 인 경우, 만약 수직으로 이웃한 블럭 (upper block)이 존재하여 예측할 샘플 (p[x,-1], x=0...15)이 존재하면,

pred[x,y] = p[x,-1] (x=0...15, y=0...15)

Intra_16x16_Horizontal 인 경우, 만약 수평으로 이웃한 블럭 (left block)이 존재하여 예측할 샘플 (p[-1,y], y=0...15)이 존재하면,

pred[x,y] = p[-1.y] (x=0...15, y=0...15)

Intra_16x16_DC 인 경우, 만약 수식 (3)의 이웃한 블럭의 샘플 p[x',-1] 및 p[-1,y']이 존재하면,

만약 수식 (4)의 이웃한 블럭의 샘플 p[-1,y']이 존재하면,

만약 수식 (5)의 이웃한 블럭의 샘플 p[x',-1]이 존재하면,

만약 이웃한 블록의 샘플이 존재하지 않으면,

pred[x,y] = 128, (x,y=0...15)

Intra_16x16_Plane 인 경우,

만약 이웃한 블럭의 샘플 p[x,-1] (x=-1...15) 및 p[-1,y] (y=0...15) 이 존재하면,

pred[x,y] = Clip1 ((a + b*(x-7) + c*(y-7) + 16) >> 5), (x,y=0...15) )

여기서, Clip1 (x) = x<0 ? 0 : (x > 255 ? 255 : x),

a = 16*(p[-1,15]+p[15,-1]),

b = (5*H + 32)>>6,

c = (5*V + 32)>>6

그리고,

(513) 및 (613)의 Luma 성분의 4x4 블록 단위 Intra prediction을 수행하기 위해, 제 9도와 같이 16x16 블록을 4x4 블록으로 나눈다. 4x4 블럭은 1번부터 16번까지의 순서로 부호화되거나 복호화 된다. 4x4 블록 단위 Intra prediction은 인접 블럭에서 제 9도에서와 같이 9가지 방법 중에서 하나의 방법으로 현재 4x4 블럭의 예측을 수행한다. 그림에서 Mode 2의 경우 이웃에 존재하는 샘플들의 평균값으로 현재의 4x4 블록 값을 예측한다.

(508) 및 (608)의 Chroma 성분의 8x8 블록 단위 Intra prediction을 수행하기 위해, 다음의 4가지 방법 중에서 하나의 방법으로 현재 블럭의 예측을 수행한다. 1) Intra_Chroma_DC 2) Intra_Chroma_Horizontal 3) Intra_Chroma_Vertical 4) Intra_Chroma_Plane

Intra_Chroma_DC의 경우, 제 11도와 같이 8x8 블록을 4x4 블록으로 나누고 각각의 인접하는 샘플들의 평균값 S0, S1, S2, 및 S3를 구한다. 제 11도의 표에서 처럼, S0, S1, S2, 및 S3까지 값의 존재 유무에 따라 4x4 블록 A,B,C, 및 D의 값을 평균 혹은 128로 예측한다.

Intra_Chroma_Horizontal 인 경우,

만약 수평으로 이웃한 블럭 (left block)이 존재하여 예측할 샘플 (p[-1,y], y=0...7)이 존재하면,

pred[x,y] = p[-1.y] (x=0...7, y=0...7)

Intra_Chroma_Vertical 인 경우,

만약 수직으로 이웃한 블럭 (upper block)이 존재하여 예측할 샘플 (p[x,-1], x=0...7)이 존재하면,

pred[x,y] = p[x,-1] (x=0...7, y=0...7)

Intra_Chroma_Plane 인 경우,

만약 이웃한 블럭의 샘플 p[x,-1] (x=-1...7) 및 p[-1,y] (y=0...7) 이 존재하면,

pred[x,y] = Clip1 ((a + b*(x-3) + c*(y-3) + 16) >> 5), (x,y=0...7)

여기서, Clip1 (x) = x<0 ? 0 : (x > 255 ? 255 : x),

a = 16*(p[-1,7]+p[7,-1]),

b = (17*H + 16)>>5,

c = (17*V + 16)>>5

그리고,

도 5의 (505), (509) 및 (514)에서의 4x4 단위의 정수 변환은 다음 수식의 (C_fXC^T _f) 같이 나타낼 수 있다.

여기서, (C_fXC^T _f)는 정수변환 부분이고 E_f는 스케일링 값을 는 벡터의 각 요소간의 곱셈을 의미한다. 그리고, a, b, 및 c는 다음과 같다.

수식 (11)에 의한 변환계수 블록 Y는 제 5도에서 Intra_4x4 모드의 Luma신호인 경우 (515)에서 수식 (11)의 E_f값의 스케일링과 더불어 선형 양자화 (uniform quantization)에 의해 양자화되어 엔트로피 부호화 된다. 만약 Intra_16x16 모드의 Luma 신호인 경우 (506)에서 수식 (11)에서 W=(C_fXC^T _f)의 결과 중에 DC 값 만을 모아 4x4 블럭으로 구성하고 (W_DC) 다음과 같이 4x4 단위의 Hadarmard 변환을 수행한다.

수식 (12)에 의한 4x4 변환계수 블럭 계수 Y_DC는 수식 (11)에서 W=(C_fXC^T _f)에서 DC 이외의 계수와 함께 (507)에서 수식 (11)의 E_f값의 스케일링과 더불어 선형 양자화 (uniform quantization)에 의해 양자화되어 엔트로피 부호화 된다. 만약 제 5도에서 chroma 신호의 경우 (510)에서 수식 (11)에서 W=(C_fXC^T _f)의 결과 중에 DC 값만을 모아 2x2 블럭으로 구성하고 (W_DC) 다음과 같이 2x2 단위의 Hadarmard 변환을 수행한다.

수식 (13)에 의한 2x2 변환계수 블럭 계수 Y_DC는 수식 (11)에서 W=(C_fXC^T _f)에 서 DC 이외의 계수와 함께 (511)에서 수식 (11)의 스케일링 값 E_f와 더불어 선형 양자화 (uniform quantization)에 의해 양자화되어 엔트로피 부호화 된다.

도 6의 (607), (611) 및 (615)에서의 4x4 단위의 역 정수 변환은 다음 수식에서 스케일링 벡터 E_i를 제외하고 나타낼 수 있다.

수식 (14)에서 변환 계수 Y가 스케일링 벡터 E_i에 의해 제 6도의 (606),(610), 및 (614)와 같이 정수 변환 전에 미리 스케일링 되는 것을 알 수 있다. 만약 제 6도에서 Intra_16x16 모드이고 Luma 신호이면, (605)에서 다음과 같이 DC의 변환 계수 Z_DC를 4x4 단위의 Hadarmard 변환을 수행하여 DC 값 만으로 구성된 4x4 블럭 (W_QDC)을 얻는다.

이 값은 도 6의 (606)에서 수식 (14)의 스케일링 값 E_i와 더불어 선형 역 양자화 (uniform inverse quantization)에 의해 역 양자화된다. 이 값이 수식 (14)의 C_i 변환 벡터를 통해 역 정수 변환을 하여 (604)의 값과 더불어 복원된 블록 값을 얻을 수 있다. 만약 제 6도에서 chroma 신호의 경우 (609)에서 다음과 같이 DC의 변환 계수 Z_DC를 2x2 단위의 Hadarmard 변환을 수행하여 DC 값 만으로 구성된 2x2 블럭 (W_QDC)을 얻는다.

이 값은 도 6의 (610)에서 수식 (14)의 스케일링 값 E_i와 더불어 선형 역 양자화 (uniform inverse quantization)에 의해 역 양자화된다. 이 값이 수식 (14)의 C_i 변환 벡터를 통해 역 정수 변환을 하여 (608)의 값과 더불어 복원된 블록 값을 얻을 수 있다.

제 12도는 상기의 H.264/AVC 복호화기에서 4:2:0영상 형식의 정수 변환 구조를 나타낸다. Intra_16x16 인 경우 먼저 Luma 성분의 4x4 DC 성분에 대해 수식 (12)혹은 (15)의 Hadarmard 변환을 적용하여 구한다. Luma 성분의 모든 계수에 대해 (11)혹은 (14)에서와 같이 4x4 정수 변환을 0번부터 15번까지 순서대로 적용하여 16x16 크기의 Luma 성분을 구한다. 그리고 chroma 성분의 2x2 DC 성분에 대해 그림의 16과 17에서와 같이 (13)혹은 (16)의 2x2의 Hadarmard 변환을 적용하여 구한다. 그리고 나서 다시 chroma 성분의 모든 계수에 대해 18번 블럭에서 25번 블럭 까지 (11) 혹은 (14)에서와 같은 4x4 정수 변환을 통해 8x8 크기의 Cb, Cr 성분을 구한다.

본 발명에 의한 4:4:4 형식의 Intra 부호화 방법을 설명하기로 한다.

4:4:4 영상 형식을 위한 제안한 Intra 부호화/복호화 방법은 제 7도 및 제 8도에 나타내었다.

도 7은 4:4:4 형식의 영상을 위한 제안한 Intra 부호화 방식을 나타낸 순서도이다. 먼저 매크로 블록의 부호화 방법를 결정하고 (701) 이것이 Intra_16x16 방법인지를 결정한다 (702). 만약 Intra_16x16 방법이면 Luma 신호 Y 및 Chroma 신호 Cb, Cr에 대해 16x16 블럭단위로 Intra prediction을 한다 (703). 16x16 블록 Intra prediction은 상기 수식 (1)에서 (7)을 이용한 4가지 방법을 이용하여 수행한다. 원 영상과 Intra prediction 값과의 차를 4x4 단위로 정수변환 (integer transform) (704)하고 다시 DC 값만을 모아 4x4 단위로 Hadamard 변환을 한다 (705). 이 변환계수를 양자화하여 (706) 엔트로피 부호화 한다 (710). (702)에서 Intra_4x4 방법으로 결정되면 Luma 신호 Y 및 Chroma 신호 Cb, Cr에 대해 4x4 블럭 크기로 Intra prediction을 한다 (707). 4x4 블록 단위 Intra prediction을 수행하기 위해, 제 9도와 같이 16x16 블록을 4x4 블록으로 나눈다. 4x4 블럭은 1번부터 16번까지의 순서로 부호화되거나 복호화 된다. 4x4 블록 단위 Intra prediction은 인접 블럭에서 제 9도에서와 같이 9가지 방법 중에서 하나의 방법으로 현재 4x4 블럭의 예측을 수행한다. 그림에서 Mode 2의 경우 이웃에 존재하는 샘플들의 평균값으로 현재의 4x4 블록 값을 예측한다. 4x4 크기로 원 영상과 Intra prediction 값과의 차를 4x4 단위로 정수변환 (integer transform) (708)하고 변환계수를 양자화하여 (709) 엔트로피 부호화 한다 (710). (704) 및 (708) 단계의 4x4 단위 정수 변환은 상기 수식 (11)을 이용한다. 그리고 (705) 단계의 4x4 단위 Hadarmard 변환은 수식 (12)을 이용한다.

도 8은 4:4:4 형식의 영상을 위한 제안한 Intra 복호화 방식을 나타낸 순서도이다. 먼저 엔트로피 복호화를 통해 매크로 블록의 부호화 방법를 결정하고 (801) 이것이 Intra_16x16 방법인지를 결정한다 (802). 만약 Intra_16x16 방법이면 Luma 신호 Y 및 Chroma 신호 Cb, Cr에 대해 16x16 블럭단위로 Intra prediction을 한다 (803). 16x16 블록 Intra prediction은 상기 수식 (1)에서 (7)을 이용한 4가지 방법을 이용하여 수행한다. DC 값의 변환계수에 대해 4x4 단위로 Hadamard 변환을 하여 DC 값 계수를 구한다 (804). 이 DC계수를 포함한 변환계수를 역 양자화하고 (805) 4x4 단위로 역 정수 변환을 한다 (806). 이 값과 (803)의 결과를 이용하여 복원된 매크로 블록을 얻는다 (810). (802)에서 Intra_4x4 방법으로 결정되면 Luma 신호 Y 및 Chroma 신호 Cb, Cr에 대해 4x4 블럭 크기로 Intra prediction을 한다 (807). x4 블록 단위 Intra prediction을 수행하기 위해, 도 9와 같이 16x16 블록을 4x4 블록으로 나눈다. 4x4 블럭은 1번부터 16번까지의 순서로 부호화되거나 복호화 된다. 4x4 블록 단위 Intra prediction은 인접 블럭에서 도 9에서와 같이 9가지 방법 중에서 하나의 방법으로 현재 4x4 블럭의 예측을 수행한다. 그림에서 Mode 2의 경우 이웃에 존재하는 샘플들의 평균값으로 현재의 4x4 블록 값을 예측한다. 변환계수를 역 양자화하고 (808) 4x4 단위로 역 정수 변환을 한다 (809). 이 값과 (807)의 결과를 이용하여 복원된 매크로 블록을 얻는다 (810). (806) 및 (809) 단계의 4x4 단위 정수 변환은 상기 수식 (11)을 이용한다. 그리고 (804) 단계의 4x4 단위 Hadarmard 변환은 수식 (12)을 이용한다.

도 13은 제안한 4:4:4 영상 형식의 정수 변환 구조를 나타낸다. Intra_16x16 인 경우 Luma 성분 Y 성분 및 Chroma 성분 Cb, Cr 성분에 대해 각각 4x4크기의 DC 성분을 수식 (12)혹은 (15)의 Hadarmard 변환을 -3, -2, -1 블럭의 순서로 적용하여 구한다. 여상의 Y, Cb, Cr 성분 순서로 영상 성분의 모든 계수에 대해 (11)혹은 (14)에서와 같이 4x4 정수 변환을 0번부터 47번까지 순서대로 적용하여 16x16 크기의 Luma 성분 Y성분 및 Chroma 성분 Cb, Cr 값을 차례대로 구한다.

Inter-plane prediction 방법을 설명하기로 한다. 도 14는 R-G-B 영상을 부호화 하는데 있어, 본 발명의 Intra 부호화 장점을 이용한 예를 보여 준다. 본 발명을 통해 기본적으로 존재하는 R-G-B 성분사이의 상관도가 유지 되므로 R-G-B 성분간의 예측을 통해 부호화 효율을 개선할 수있다. 그림은 R-G-B 칼라 영상의 Inter-plane prediction 방법의 개념도를 나타낸다. 먼저 G 성분은 (1301) 기존의 부호화기와 마찬가지로 공간적으로 인접한 영상 혹은 시간적으로 인접한 영상 값 (1307)을 이용하여 예측한 값을 빼서 G값의 예측 오차 (residue) (1310)을 얻는다. 이 예측 오차 (residue) 값은

과 같이 나타낼 수 있다. 여기서 Gp는 그림에서 (1307)에 해당한다. 이 예측 오차 (residue) 값이 실제 엔트로피 부호화 된다.

Y-Cr-Cb 성분과 달리 G 및 R, B 성분 사이에는 여전히 상관도 (correlation)가 크다. 이 성분간의 유사성을 이용하기 위해 R 및 G 성분은 먼저 G 성분과 마찬가지로 시/공간상 예측 (1305) (1306)을 한다. 여기서 나온 예측 오차 (residue) 값은 다음과 같다.

여기서 Rp 및 Bp는 R 및 B성분을 공간적으로 인접한 영상 혹은 시간적으로 인접한 영상 값으로 예측한 것이다 (1308)(1309). 여기서 나온 예측 오차 (residue) 값을 G 성분의 예측 오차 (residue)가 복원된 값 (1311)(1314)을 선형 변환한 값 (1312)(1315)을 이용하여 다시 한번 예측한 예측 오차 (predicted residue) 값 (1313) (1316)을 다음 수식 (20) 및 (21)과 같이 얻는다.

이 값은 R과 B 성분의 시/공간상 예측 오차에 비해 부호화할 데이터의 양이 줄어들어 부호화 효율이 개선된다. 이것은 △G, △R, △B 사이에 상관도가 크므로 △G와 △R 및 △G와 △B의 관계를 선형의 함수로 표현하여 △R과 △B를 △G의 함수로 근사화 할 수 있기 때문이다. 여기서 a 및 b는 R성분의 예측 오차 (residue)를 G성분의 예측오차로 예측할 때 근사화한 선형 함수의 기울기와 편차가 되고 c와 d는 B성분의 예측 오차 (residue)를 G성분의 예측오차로 예측할 때 근사화한 선형 함수의 기울기와 편차가 된다.

여기서, 이 값은 △G과 △R,△B의 값을 이용하여 다음과 같이 구할 수 있다. cov(ㆍ)는 covariance를 나타내고 E(ㆍ)는 값의 평균 그리고 σ²는 분산 (variance)을 나타낸다.

도 15는 기존의 방식으로 부호화할 경우 R-G-B영상의 G-R 및 G-B 성분간의 상관도를 나타낸 것이다. Luma 성분과 Chroma 성분 간의 다른 Intra 예측 방식과 다른 예측 방향이 결과적으로 R-G-B 성분 사이에 기본적으로 존재하는 상관도를 없애 성분간 예측에 의한 부호화 효율 향상을 기대할 수 없다.

도 16은 제안한 방식으로 부호화할 경우 R-G-B영상의 G-R 및 G-B 성분간의 상관도를 나타낸 것이다. 이 경우 Luma 성분과 Chroma 성분의 Intra 예측 방식이 같으므로 기본적으로 R-G-B 성분 사이에 존재하는 상관도를 이용하여 성분간 예측 성능 향상을 통해 부호화 효율의 향상을 기대할 수 있다.

도 17은 본 발명에서 사용한 칼라성분의 시/공간상 예측에 의한 RGB 칼라 성분의 Residue간의 예측에 의한 방식 (proposed)과 기존의 방식 (conventional)을 비교한 결과를 나타낸다. 그림은 HD (High Definition)영상인 Crew(1280x720, 60hz)영상에 대한 결과를 4가지 비트율(bitrate)에서 PSNR로 표시하였다. 그림에서 보듯이 같은 비트율에서 3~4dB이상의 이득이 발생함을 알 수 있다.

본 발명에 의해 다음의 효과를 기대할 수 있다. 1) Chroma 성분에 대한 Intra prediction 정보를 Luma 성분에서 얻어 부가정보가 필요없다. 2) 4x4 단위의 예측이 가능하여 Intra 예측 성능이 향상 될 수 있다. 3) 2)의 이유로 예측 오차를 부호화할 때 반드시 2단계 정수 변환이 필요하지 않다. 4) Luma 성분과 Chrom 성분 사이의 intra 예측방식이 같으므로 R-G-B의 경우 성분간에 존재하는 상관도를 부호화에 이용할 수 있어 부호화 효율 개선이 기대된다.

Claims

비디오 부호화기 (encoder)에 있어서, (1) Chroma 성분의 블록 단위 Intra prediction을 부가 정보 없이 같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정; (2) 원 영상 블록과 Intra 예측 블록과의 차를 일정 블록 단위로 나누어 정수변환 하는 과정; (3) 상기 (1)의 과정의 일정 조건에 따라 상기 (2)의 결과 중에 DC 만을 따로 모아 정수 변환 하는 과정을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 방법
제 1항에 있어서,

상기 (1) 과정에서 Intra prediction은 4x4 단위의 prediction 혹은 16x16 단위 prediction을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 방법
제1항에 있어서,

상기 (1) 과정에서 chroma 신호 성분에 4x4 intra prediction와 16x16 intra prediction중에서 하나를 적용하고 예측 방향을 적용하기 위한 정보는 부가정보 없이 Luma 신호 성분의 예측 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 방법
제1항에 있어서

상기 (2) 과정에서 정수 변환은 4x4 크기의 DCT를 정수로 간략화한 정수 변환 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 방법
제1항에 있어서

상기 (2) 과정에서 정수 변환은 4x4 크기의 Hadarmard 변환 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 방법
제1항에 있어서

상기 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면, 상기 (3)의 과정에서 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 Hadarmard 변환을 사용하여 구하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 방법
제1항에 있어서

상기 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면, 상기 (3)의 과정에서 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 DCT를 정수로 간략화한 정수 변환을 사용하여 구하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 방법
비디오 복호화기 (decoder)에 있어서, (1) Chroma 성분의 블럭 단위 Intra prediction을 부가 정보 없이같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정; (2) 상기 (1)의 과정의 일정 조건에 따라 예측오차의 DC 성분만을 DC 성분의 변환 계수를 역 정수 변환하여 얻는 과정; (3) 상기 (2)의 복원된 DC계수와 나머지 계수를 이용하여 일정 블록 단위의 역 정수 변환하여 최종 예측오차를 얻는 과정을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 방법
제8항에 있어서

상기 (1) 과정에서 Intra prediction은 4x4 단위의 prediction 혹은 16x16 단위 prediction을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 방법
제8항에 있어서

상기 (1) 과정에서 chroma 신호 성분에 4x4 intra prediction와 16x16 intra prediction중에서 하나를 적용하고 예측 방향을 적용하기 위한 정보는 부가정보 없이 Luma 신호 성분의 예측 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 방법
제8항에 있어서

상기 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면, 상기 (2)의 과정에서 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 Hadarmard 변환을 사용하여 구하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 방법
제8항에 있어서

상기 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면, 상기 (2)의 과정에서 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 DCT를 정수로 간략화한 정수 변환을 사용하여 구하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 방법
제8항에 있어서

상기 (3) 과정에서 정수 변환은 4x4 크기의 DCT를 정수로 간략화한 정수 변환 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 방법
제8항에 있어서

상기 (3) 과정에서 정수 변환은 4x4 크기의 Hadarmard 변환 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 방법
비디오 부호화기 (encoder)에 있어서, (1) Chroma 성분의 블록 단위 Intra prediction을 부가 정보 없이 같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정; (2) 원 영상 블록과 Intra 예측 블록과의 차를 일정 블록 단위로 나누어 정수변환 하는 과정; (3) 상기 (1)의 과정의 일정 조건에 따라 상기 (2)의 결과 중에 DC 만을 따로 모아 정수 변환 하는 과정을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 장치
제15항에 있어서

상기 (1) 과정에서 Intra prediction은 4x4 단위의 prediction 혹은 16x16 단위 prediction을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 장치
제15항에 있어서

상기 (1) 과정에서 chroma 신호 성분에 4x4 intra prediction와 16x16 intra prediction중에서 하나를 적용하고 예측 방향을 적용하기 위한 정보는 부가정보 없이 Luma 신호 성분의 예측 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 장치
제15항에 있어서

상기 (2) 과정에서 정수 변환은 4x4 크기의 DCT를 정수로 간략화한 정수 변환 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 장치
제15항에 있어서

상기 (2) 과정에서 정수 변환은 4x4 크기의 Hadarmard 변환 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 장치
제15항에 있어서

상기 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면, 상기 (3)의 과정에서 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 Hadarmard 변환을 사용하여 구하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 장치
제15항에 있어서

상기 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면, 상기 (3)의 과정에서 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 DCT를 정수로 간략화한 정수 변환을 사용하여 구하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 부호화 장치
비디오 복호화기 (decoder)에 있어서, (1) Chroma 성분의 블럭 단위 Intra prediction을 부가 정보 없이같은 위치의 Luma 블럭과 같은 방식으로 수행하는 과정; (2) 상기 (1)의 과정의 일정 조건에 따라 예측오차의 DC 성분만을 DC 성분의 변환 계수를 역 정수 변환하여 얻는 과정; (3) 상기 (2)의 복원된 DC계수와 나머지 계수를 이용하여 일정 블록 단위의 역 정수 변환하여 최종 예측오차를 얻는 과정을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 장치
제22항에 있어서

상기 (1) 과정에서 Intra prediction은 4x4 단위의 prediction 혹은 16x16 단위 prediction을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 장치
제22항에 있어서

상기 (1) 과정에서 chroma 신호 성분에 4x4 intra prediction와 16x16 intra prediction중에서 하나를 적용하고 예측 방향을 적용하기 위한 정보는 부가정보 없이 Luma 신호 성분의 예측 방법를 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 장치
제22항에 있어서

상기 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면, 상기 (2)의 과정에서 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 Hadarmard 변환을 사용하여 구하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 장치
제22항에 있어서

상기 (1)의 과정에서 16x16 단위 Intra prediction을 사용한다고 결정되면, 상기 (2)의 과정에서 Luma 및 Chroma 신호에 대해 4x4 단위의 DC 성분을 DCT를 정수로 간략화한 정수 변환을 사용하여 구하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 장치
제22항에 있어서

상기 (3) 과정에서 정수 변환은 4x4 크기의 DCT를 정수로 간략화한 정수 변환 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 장치
제22항에 있어서

상기 (3) 과정에서 정수 변환은 4x4 크기의 Hadarmard 변환 방법을 사용하는 것을 포함하는 것을 특징으로 하는 4:4:4 영상 형식의 Intra 복호화 장치