KR101524465B1 - 색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치 - Google Patents

색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치 Download PDF

Info

Publication number
KR101524465B1
KR101524465B1 KR1020080087437A KR20080087437A KR101524465B1 KR 101524465 B1 KR101524465 B1 KR 101524465B1 KR 1020080087437 A KR1020080087437 A KR 1020080087437A KR 20080087437 A KR20080087437 A KR 20080087437A KR 101524465 B1 KR101524465 B1 KR 101524465B1
Authority
KR
South Korea
Prior art keywords
block
chrominance compensation
picture
value
current
Prior art date
Application number
KR1020080087437A
Other languages
English (en)
Other versions
KR20090077654A (ko
Inventor
박광훈
김규헌
박민우
박종태
서덕영
Original Assignee
삼성전자주식회사
경희대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사, 경희대학교 산학협력단 filed Critical 삼성전자주식회사
Priority to KR1020080087437A priority Critical patent/KR101524465B1/ko
Priority to US12/812,566 priority patent/US8948264B2/en
Priority to PCT/KR2009/000035 priority patent/WO2009088195A2/ko
Publication of KR20090077654A publication Critical patent/KR20090077654A/ko
Application granted granted Critical
Publication of KR101524465B1 publication Critical patent/KR101524465B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits

Abstract

본 발명은 다시점 비디오의 부호화 및 복호화에 관한 것이다.
본 발명의 일 실시예는 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 결정하고, 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 결정하여, 블록 타입 및 제 1 픽처 타입 중 적어도 하나에 기초하여, 현재 블록에 대한 색차 보상값을 결정하고, 색차 보상값을 이용하여 현재 블록에 대한 색차 보상을 수행함으로써, 연관성 있는 색차 정보에 의해 보다 정확한 다시점 비디오의 부복호화가 가능하다.
다시점 비디오, 앵커 픽처, 색차 보상, 비디오 코딩

Description

색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치{Method and apparatus for multi-view video encoding using chrominance compensation, and method and apparatus for multi-view video decoding using chrominance compensation}
본 발명은 다시점 비디오의 부호화 및 복호화에 관한 것이다.
종래 다시점 비디오 코딩에서는 기존의 동영상 국제 표준인 MPEG-4 part 10 Advanced Video Coding(AVC; H.264)를 기반으로 코딩 성능을 향상시키고자 하는 시도가 있다. 시간 방향으로는 JSVC (Joint Scalable Video Coding)에서 시간적 스케일러빌러티(temporal scalability)를 지원하기 위해 수행되는 기법인 계층적인 B-픽처(hierarchical B-pictures) 코딩이 이용되고 있으며, 시점간(inter-view) 예측이 수행되어 코딩 향상을 꾀하고 있다.
본 발명은, 다시점 비디오를 효율적으로 부호화하거나 복호화하고자 한다.
본 발명의 일 실시예에 따른 다시점 비디오 부호화 방법은, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 결정하는 단계; 상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 결정하는 단계; 상기 블록 타입 및 상기 제 1 픽처 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 결정하는 단계; 및 상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함한다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 다시점 비디오 부호화 방법은, 상기 색차 보상값을 부호화하는 단계를 더 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 결정 단계는, 상기 제 1 픽처 타입에 기초하여 상기 색차 보상 수행 여부를 결정하는 단계를 포함하고, 상기 제 1 픽처 타입은, 상기 현재 픽처가 동일 시점 상의 다른 픽처의 인터 예측을 위한 기준 픽처이고, 다른 시점 상의 다른 픽처의 뷰간 예측을 위한 픽처인지 여부를 나타낼 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 결정 단계는, 상기 제 1 픽처 타입 및 상기 블록 타입에 기초하여 상기 색차 보상 수행 여부를 결정하는 단계를 더 포함하고, 상기 블록 타입은, 상기 현재 블록이 스킵 모드 블록 타입인지 여부를 나타낼 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 결정 단계는, 상기 현재 픽처의 제 2 픽처 타입을 결정하는 단계; 및 상기 제 1 픽처 타입, 상기 블록 타입 및 상기 제 2 픽처 타입에 기초하여 상기 색차 보상 수행 여부를 결정하는 단계를 더 포함하고, 상기 제 2 픽처 타입은 I 픽처 타입, P 픽처 타입 및 B 픽처 타입 중 적어도 하나를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 결정 단계는, 상기 색차 보상 수행 여부에 따라 상기 현재 블록에 대한 색차 보상 수행 여부를 나타내는 플래그를 설정하는 단계를 더 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 플래그 설정 단계는, 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관계에 있는 참조 픽처의 픽셀값의 평균 간의 차의 절대값을 Y, U, V 성분별로 결정하는 단계; 및 상기 절대값들을 조합한 값에 기초하여 상기 플래그를 설정하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 조합 값에 기초한 플래그 설정 단계는, 상기 Y, U, V 성분별 평균의 차의 절대값의 합에 기초하여 상기 플래그를 설정하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 조합 값에 기초한 플래그 설정 단계는, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값을 합하고, 그 합의 제곱근에 기초하여 상기 플래그를 설정하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 조합 값에 기초한 플래그 설정 단계는, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값의 평균에 기초 하여 상기 플래그를 설정하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 플래그 설정 단계는, 상기 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관계에 있는 참조 픽처의 픽셀값의 평균 간의 차의 절대값을 U, V 성분별로 결정하는 단계; U, V 성분별로 소정 임계값을 결정하는 단계; 및 U, V 성분별 평균의 차의 절대값 및 각각의 성분별 소정 임계값의 비교 결과에 기초하여 상기 플래그를 설정하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 플래그 설정 단계는, 상기 현재 픽처의 양자화 파라미터에 기초하여 상기 플래그를 설정할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 플래그 설정 단계는, 사용자 입력에 기초하여 상기 플래그를 설정할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 결정 단계는, 상기 현재 블록의 블록 타입이 스킵 블록 타입이라면, 상기 현재 블록의 주변 블록의 색차 보상값을 이용하여 상기 현재 블록의 색차 보상값을 유도하는 단계; 및 상기 현재 블록의 블록 타입이 다른 참조 픽처를 이용하여 예측을 수행하는 블록 타입이라면, 상기 현재 블록에 대한 색차 보상을 수행하여 색차 보상값을 계산하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 결정 단계는, 상기 현재 블록 및 상기 현재 블록과 참조 관계에 있는 참조 블록의 모든 픽셀 값의 차이의 평균을 색상 성분 별로 계산하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 결정 단계는, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 각각의 참조 블록 별로, 상기 현재 블록 및 상기 각각의 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 계산하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 결정 단계는, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 참조 블록들을 이용하여 대표 참조 블록을 생성하는 단계; 및 상기 현재 블록 및 상기 대표 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 계산하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 대표 참조 블록 생성 단계는, 상기 참조 블록들의 인터폴레이션을 수행하여 상기 대표 참조 블록을 생성하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상 수행 단계는, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 현재 블록과 참조 관계에 있는 참조 블록의 픽셀값에 합하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상 수행 단계는, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 각각의 참조 블록의 픽셀값에 합하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상 수행 단계는, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 대표 참조 블록의 픽셀값에 합하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 부호화 단계는, 상기 현재 블록과 참조 관계에 있는 참조 블록의 색차 보상값을 이용하여 결정된 색차 보상 예측값 및 상기 현재 블록에 대한 색차 보상값의 차이값인 색차 보상 차분값을 색상 성분 별로 부호화하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 부호화 단계는, 각각의 색차 보상 차분값에 대하여 색차 보상값의 사용 여부를 나타내는 플래그를 설정하는 단계; 및 상기 각각의 색차 보상 차분값마다 상기 플래그를 부호화하는 단계를 더 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 유도 단계는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 3 블록에 있어서, 상기 제 1 블록 및 상기 제 3 블록의 픽셀값의 차의 절대값 및 상기 제 2 블록 및 상기 제 3 블록의 픽셀값의 차의 절대값을 비교하는 단계; 및 상기 비교 결과에 기초하여 상기 제 1 블록 및 상기 제 2 블록 중 하나의 색차 보상값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 유도 단계는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록에 있어서, 상기 제 1 블록, 상기 제 2 블록 및 상기 제 3 블록의 색차 보상값의 중앙값(median)을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 유도 단계는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록에 있어서, 상기 제 1 블록 및 상기 제 2 블록의 색차 보상값의 평균값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계를 더 포함할 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법에서, 상기 색차 보상값이 '0' 이라면 상기 색차 보상 수행 여부를 나타내는 플래그를 '0'으로 설정될 수 있다.
일 실시예의 상기 다시점 비디오 부호화 방법의 상기 색차 보상값 유도 단계는, 제 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 4 블록의 순서로, 상기 현재 블록의 주변 블록 중 우선 순위를 결정하는 단계; 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일하고 색차 보상값이 존재하는 블록의 색차 보상값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계; 및 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일한 블록이 없다면, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값의 중앙값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계; 및 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값이 없다면, 상기 현재 블록의 색차 보상 예측값을 '0'으로 결정하는 단계를 포함할 수 있다.
본 발명의 일 실시예에 따른 다시점 비디오 복호화 방법은, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 판독하는 단계; 상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 판독하는 단계; 상기 제 1 픽처 타입 및 상기 블록 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 판독하는 단계; 및 상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법은, 상기 색차 보상이 수행된 현재 블록을 복원하고 상기 현재 픽처를 복원하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 제 1 픽처 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 여부를 판단하는 단계를 포함하고, 상기 제 1 픽처 타입 정보는, 상기 현재 픽처가, 동일 시점 상의 다른 픽처의 인터 예측을 위한 기준 픽처이고, 다른 시점 상의 다른 픽처의 뷰간 예측을 위한 픽처인지 여부를 나타낼 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 제 1 픽처 타입 및 상기 블록 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 여부를 판단하는 단계를 더 포함하고, 상기 블록 타입은, 상기 현재 블록이 스킵 모드 블록 타입인지 여부를 나타낼 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 현재 픽처의 제 2 픽처 타입을 판독하는 단계; 및 상기 제 1 픽처 타입, 상기 블록 타입 및 상기 제 2 픽처 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 수행 여부를 판단하는 단계를 더 포함하고, 상기 제 2 픽처 타입은 I 픽처 타입, P 픽처 타입 및 B 픽처 타입 중 적어도 하나를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 현재 픽처의 색차 보상 수행 여부를 나타내는 플래그를 판독하는 단계; 및 상기 제 1 픽처 타입, 상기 플래그 및 상기 블록 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 수행 여부를 판단하는 단계를 더 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 현재 블록의 블록 타입이 스킵 블록 타입이라면, 상기 현재 블록의 주변 블록의 색차 보상값을 이용하여 상기 현재 블록의 색차 보상값을 유도하는 단계; 및 상기 현재 블록의 블록 타입이 스킵 블록 타입이 아니라면, 상기 현재 블록에 대한 색차 보상을 수행하여 상기 현재 블록의 색차 보상값을 결정하는 단계를 더 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 현재 블록에 대한 색차 보상 차분값을 판독하는 단계; 상기 현재 블록의 주변 블록들의 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상 예측값을 계산하는 단계; 및 상기 색차 보상 예측값 및 상기 색차 보상 차분값을 더하여, 상기 현재 블록의 색차 보상값을 결정하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 색차 보상 차분값에 대하여 색차 보상값 사용 여부를 나타내는 플래그를 판독하는 단계를 더 포함하고, 상기 색차 보상 수행 단계는, 상기 색차 보상값 사용 여부를 나타내는 플래그에 기초하여, 상기 현재 블록에 대한 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 더 포함할 수 있다.
일 실시예의 다시점 비디오 복호화 방법의 상기 색차 보상값 유도 단계는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 3 블록에 있어서, 상기 제 1 블록 및 상기 제 3 블록의 픽셀값의 차의 절대값 및 상기 제 2 블록 및 상기 제 3 블록의 픽셀값의 차의 절대값을 비교하는 단계; 및 상기 비교 결과에 기초하여 상기 제 1 블록 및 상기 제 2 블록 중 하나의 색차 보상값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계를 더 포함할 수 있다.
일 실시예의 다시점 비디오 복호화 방법의 상기 색차 보상값 유도 단계는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록에 있어서, 상기 제 1 블록, 상기 제 2 블록 및 상기 제 3 블록의 색차 보상값의 중앙값(median)을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계를 더 포함할 수 있다.
일 실시예의 다시점 비디오 복호화 방법의 상기 색차 보상값 유도 단계는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록에 있어서, 상기 제 1 블록 및 상기 제 2 블록의 색차 보상값의 평균값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계를 더 포함할 수 있다.
일 실시예의 다시점 비디오 복호화 방법의 상기 색차 보상값 유도 단계는, 제 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 4 블록의 순서로, 상기 현재 블록의 주변 블록 중 우선 순위를 결정하는 단계; 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일하고 색차 보상값이 존재하는 블록의 색차 보상값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계; 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일한 블록이 없다면, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값의 중앙값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계; 및 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값이 없다면, 상기 현재 블록의 색차 보상 예측값을 '0'으로 결정하는 단계를 더 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법은, 상기 색차 보상 수행 여부를 나타내는 플래그가 '0' 이라면 상기 색차 보상값을 '0'으로 결정할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상 수행 여부를 나타내는 플래그는, 상기 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관 계에 있는 참조 픽처의 U, V 성분별 픽셀값의 평균 간의 차의 절대값이 조합된 값에 기초하여 설정될 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 절대값들이 조합된 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 합을 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 절대값들이 조합된 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값을 합하고, 그 합의 제곱근을 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 절대값들이 조합된 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값의 평균을 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상 수행 여부를 나타내는 플래그는, 상기 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관계에 있는 참조 픽처의 U, V 성분별 픽셀값의 평균 간의 차의 절대값을, 각각의 색상 성분 별 소정 임계값과 비교한 결과에 기초하여 설정될 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상 수행 여부를 나타내는 플래그는, 상기 현재 픽처의 양자화 파라미터에 기초하여 설정될 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상 수행 여부를 나타내는 플래그는, 사용자 입력에 기초하여 설정될 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 색차 보상값은, 상기 현재 블록 및 상기 현재 블록과 참조 관계에 있는 참조 블록의 모든 픽셀 값의 차이의 평균을 색상 성분 별로 결정한 값들을 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 색차 보상값은, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 각각의 참조 블록 별로, 상기 현재 블록 및 상기 각각의 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 결정할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상값 판독 단계는, 상기 색차 보상값은, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 참조 블록들을 이용하여 생성된 대표 참조 블록에 기초하여, 상기 현재 블록 및 상기 대표 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 결정한 값들을 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 대표 참조 블록은, 상기 참조 블록들의 인터폴레이션을 수행하여 생성될 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상 수행 단계는, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 현재 블록과 참조 관계에 있는 참조 블록의 픽셀값에 합하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상 수행 단계는, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 각각의 참조 블록의 픽셀값에 합하는 단계를 포함할 수 있다.
일 실시예의 상기 다시점 비디오 복호화 방법의 상기 색차 보상 수행 단계는, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 참조 블록들을 이용하여 생성된 대표 참조 블록의 픽셀값에 합하는 단계를 포함할 수 있다.
본 발명의 일 실시예에 따른 다시점 비디오 부호화 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체에 있어서, 상기 다시점 비디오 부호화 방법은, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 결정하는 단계; 상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 결정하는 단계; 상기 블록 타입 및 상기 제 1 픽처 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 결정하는 단계; 및 상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함한다.
본 발명의 일 실시예에 따른 다시점 비디오 복호화 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체에 있어서, 상기 다시점 비디오 복호화 방법은, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 판독하는 단계; 상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 판독하는 단계; 상기 제 1 픽처 타입 및 상기 블록 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 판독하는 단계; 및 상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함한다.
본 발명의 일 실시예에 따른 다시점 비디오 부호화 장치는, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 결정하는 제 1 픽처 타입 결정부; 상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 결정하는 블록 타입 결정부; 상기 블록 타입 및 상기 제 1 픽처 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 결정하는 색차 보상값 결정부; 및 상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 색차 보상 수행부를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 다시점 비디오 부호화 장치는, 상기 색차 보상값을 부호화하는 색차 보상값 부호화부를 더 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 결정부는,
상기 제 1 픽처 타입에 기초하여 상기 색차 보상 수행 여부를 결정하는 색차 보상 수행 여부 결정부를 포함하고, 상기 제 1 픽처 타입은, 상기 현재 픽처가 동일 시점 상의 다른 픽처의 인터 예측을 위한 기준 픽처이고, 다른 시점 상의 다른 픽처의 뷰간 예측을 위한 픽처인지 여부를 나타낼 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행 여부 결정부는, 상기 제 1 픽처 타입 및 상기 블록 타입에 기초하여 색차 보상 수행 여부를 결정하고, 상기 블록 타입은 스킵 모드 블록 타입인지 여부를 나타낼 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 결정부는, 상기 현재 픽처의 제 2 픽처 타입을 결정하는 제 2 픽처 타입 결정부를 더 포함하고, 상기 색차 보상 수행 여부 결정부는, 상기 제 1 픽처 타입, 상기 블록 타입 및 상기 제 2 픽처 타입에 기초하여 상기 색차 보상 수행 여부를 결정하고, 상기 제 2 픽처 타입은 I 픽처 타입, P 픽처 타입 및 B 픽처 타입 중 적어도 하나를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 결정부는, 상기 색차 보상 수행 여부에 따라 상기 현재 블록에 대한 색차 보상 수행 여부를 나타내는 플래그를 설정하는 색차 보상 수행 여부 플래그 설정부를 더 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행 여부 플래그 설정부는, 상기 색차 보상 수행 여부 플래그는, 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관계에 있는 참조 픽처의 픽셀값의 평균 간의 차의 절대값을 Y, U, V 성분별로 결정하고, 상기 절대값들을 조합한 값에 기초하여 설정되는 플래그를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행 여부 플래그 설정부는, 상기 절대값들의 조합 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 합을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행 여부 플래그 설정부는, 상기 절대값들의 조합 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값을 합하고, 그 합의 제곱근을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행 여부 플래그 설정부는, 상기 절대값들의 조합 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값의 평균을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행 여부 플래그 설정부는, 상기 색차 보상 수행 여부 플래그는, 상기 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관계에 있는 참조 픽처의 픽셀값의 평균 간의 차의 절대값을 U, V 성분별로 결정하고, U, V 성분별로 소정 임계값을 결정하고, U, V 성분별 평균의 차의 절대값 및 각각의 성분별 소정 임계값의 비교 결과에 기초하여 설정되는 플래그를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행 여부 플래그 설정부는, 상기 색차 보상 수행 여부 플래그는, 상기 현재 픽처의 양자화 파라미터에 기초하여 설정되는 플래그를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행 여부 플래그 설정부는, 상기 색차 보상 수행 여부 플래그는, 사용자 입력에 기초하여 설정되는 플래그를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 결정부는, 상기 현재 블록의 블록 타입이 스킵 블록 타입이라면, 상기 현재 블록의 주변 블록의 색차 보상값을 이용하여 상기 현재 블록의 색차 보상값을 유도하는 색차 보상값 유도부; 및 상기 현재 블록의 블록 타입이 다른 참조 픽처를 이용하여 예측을 수행하는 블록 타입이라면, 상기 현재 블록에 대한 색차 보상을 수행하여 색차 보상값 을 계산하는 색차 보상값 계산부를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 결정부는, 상기 색차 보상값은, 상기 현재 블록 및 상기 현재 블록과 참조 관계에 있는 참조 블록의 모든 픽셀 값의 차이의 평균을 색상 성분 별로 계산되는 값을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 결정부는, 상기 색차 보상값은, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 각각의 참조 블록 별로, 상기 현재 블록 및 상기 각각의 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 계산되는 값을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 결정부는, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 참조 블록들을 이용하여 대표 참조 블록을 생성하는 대표 참조 블록 생성부를 더 포함하고, 상기 색차 보상값은, 상기 현재 블록 및 상기 대표 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 계산되는 값을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 대표 참조 블록 생성부는, 상기 참조 블록들의 인터폴레이션을 수행하여 상기 대표 참조 블록을 생성할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행부는, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 현재 블록과 참조 관계에 있는 참조 블록의 픽셀값에 합할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행부는, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 각각의 참조 블록의 픽셀값에 합할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상 수행부는, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 대표 참조 블록의 픽셀값에 합할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 부호화부는, 상기 현재 블록과 참조 관계에 있는 참조 블록의 색차 보상값을 이용하여 결정된 색차 보상 예측값 및 상기 현재 블록에 대한 색차 보상값의 차이값인 색차 보상 차분값을 색상 성분 별로 부호화하는 색차 보상 차분값 부호화부를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 부호화부는, 각각의 색차 보상 차분값에 대하여 색차 보상값의 사용 여부를 나타내는 플래그를 설정하고, 상기 각각의 색차 보상 차분값마다 상기 플래그를 부호화하는 플래그 부호화부를 더 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 유도부는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 3 블록에 있어서, 상기 제 1 블록 및 상기 제 3 블록의 픽셀값의 차의 절대값 및 상기 제 2 블록 및 상기 제 3 블록의 픽셀값의 차의 절대값을 비교하고, 상기 비교 결과에 기초 하여 상기 제 1 블록 및 상기 제 2 블록 중 하나의 색차 보상값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 방향성 유도부를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 유도부는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록에 있어\서, 상기 제 1 블록, 상기 제 2 블록 및 상기 제 3 블록의 색차 보상값의 중앙값(median)을 상기 현재 블록의 색차 보상 예측값으로 결정하는 중앙값 유도부를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 유도 단계는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록에 있어서, 상기 제 1 블록 및 상기 제 2 블록의 색차 보상값의 평균값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 평균값 유도부를 더 포함할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 다지섬 비디오 부호화 장치는, 상기 색차 보상값이 '0' 이라면 상기 색차 보상 수행 여부를 나타내는 플래그를 '0'으로 설정할 수 있다.
일 실시예에 따른 다시점 비디오 부호화 장치의 상기 색차 보상값 유도부는,
제 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 4 블록의 순서로, 상기 현 재 블록의 주변 블록 중 우선 순위를 결정하고, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일하고 색차 보상값이 존재하는 블록의 색차 보상값을 상기 현재 블록의 색차 보상 예측값으로 결정하고, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일한 블록이 없다면, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값의 중앙값을 상기 현재 블록의 색차 보상 예측값으로 결정하고, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값이 없다면, 상기 현재 블록의 색차 보상 예측값을 '0'으로 결정하는 우선순위 유도부를 포함할 수 있다.
본 발명의 일 실시예에 따른 다시점 비디오 복호화 장치는, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 판독하는 제 1 픽처 타입 판독부; 상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 판독하는 블록 타입 판독부; 상기 제 1 픽처 타입 및 상기 블록 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 판독하는 색차 보상값 판독부; 및 상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 색차 보상 수행부를 포함한다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 다시점 비디오 복호화 장치는, 상기 색차 보상이 수행된 현재 블록을 복원하고 상기 현재 픽처를 복원하는 복원부를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 판독부는, 상기 제 1 픽처 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 여부를 판단하는 색차 보상 여부 판단부를 포함하고, 상기 제 1 픽처 타입 정보는, 상기 현재 픽처가, 동일 시점 상의 다른 픽처의 인터 예측을 위한 기준 픽처이고, 다른 시점 상의 다른 픽처의 뷰간 예측을 위한 픽처인지 여부를 나타낼 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상 여부 판단부는, 상기 제 1 픽처 타입 및 상기 블록 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 여부를 판단하고, 상기 블록 타입은, 상기 현재 블록이 스킵 모드 블록 타입인지 여부를 나타낼 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 판독부는, 상기 현재 픽처의 제 2 픽처 타입을 판독하는 제 2 픽처 타입 판독부를 더 포함하고, 상기 색차 보상 여부 판단부는, 상기 제 1 픽처 타입, 상기 블록 타입 및 상기 제 2 픽처 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 수행 여부를 판단하고, 상기 제 2 픽처 타입은 I 픽처 타입, P 픽처 타입 및 B 픽처 타입 중 적어도 하나를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 판독부는, 상기 현재 픽처의 색차 보상 수행 여부를 나타내는 플래그를 판독하는 색차 보상 수행 여부 플래그 판독부를 더 포함하고, 상기 색차 보상 여부 판단부는, 상기 제 1 픽처 타입, 상기 플래그 및 상기 블록 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 수행 여부를 판단할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 판독부는, 상기 현재 블록의 블록 타입이 스킵 블록 타입이라면, 상기 현재 블록의 주변 블록의 색차 보상값을 이용하여 상기 현재 블록의 색차 보상값을 유도하는 색차 보상값 유도부; 및 상기 현재 블록의 블록 타입이 스킵 블록 타입이 아니라면, 상기 현재 블록에 대한 색차 보상을 수행하여 상기 현재 블록의 색차 보상값을 결정하는 색차 보상값 결정부를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 판독부는, 상기 현재 블록에 대한 색차 보상 차분값을 판독하는 색차 보상 차분값 판독부; 상기 현재 블록의 주변 블록들의 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상 예측값을 계산하는 색차 보상 예측값 계산부; 및 상기 색차 보상 예측값 및 상기 색차 보상 차분값을 더하여, 상기 현재 블록의 색차 보상값을 결정하는 색차 보상값 결정부를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 판독부는, 상기 색차 보상 차분값에 대하여 색차 보상값 사용 여부를 나타내는 플래그를 판독하는 색차 보상값 사용 여부 플래그 판독부를 더 포함하고, 상기 색차 보상 수행부는, 상기 색차 보상값 사용 여부를 나타내는 플래그에 기초하여, 상기 현재 블록에 대한 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 유도부는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 3 블록에 있어서, 상기 제 1 블록 및 상기 제 3 블록의 픽셀값의 차의 절대값 및 상기 제 2 블 록 및 상기 제 3 블록의 픽셀값의 차의 절대값을 비교하고, 상기 비교 결과에 기초하여 상기 제 1 블록 및 상기 제 2 블록 중 하나의 색차 보상값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 방향성 유도부를 더 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 유도부는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록에 있어서, 상기 제 1 블록, 상기 제 2 블록 및 상기 제 3 블록의 색차 보상값의 중앙값(median)을 상기 현재 블록의 색차 보상 예측값으로 결정하는 중앙값 유도부를 더 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 유도부는, 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록에 있어서, 상기 제 1 블록 및 상기 제 2 블록의 색차 보상값의 평균값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 평균값 유도부를 더 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 유도부는, 제 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 4 블록의 순서로, 상기 현재 블록의 주변 블록 중 우선 순위를 결정하고, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일하고 색차 보상값이 존재하는 블록의 색차 보상값을 상기 현재 블록의 색차 보상 예측값으로 결정하고, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일한 블록이 없다면, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값의 중앙값을 상기 현재 블록의 색차 보상 예측값으로 결정하고, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값이 없다면, 상기 현재 블록의 색차 보상 예측값을 '0'으로 결정하는 우선순위 유도부를 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 다시점 비디오 복호화 장치는, 상기 색차 보상 수행 여부를 나타내는 플래그가 '0' 이라면 상기 색차 보상값을 '0'으로 결정할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상 수행 여부를 나타내는 플래그는, 상기 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관계에 있는 참조 픽처의 U, V 성분별 픽셀값의 평균 간의 차의 절대값이 조합된 값에 기초하여 설정될 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 절대값들이 조합된 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 합을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 절대값들이 조합된 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값을 합하고, 그 합의 제곱근을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 절대값들이 조합된 값 은, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값의 평균을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상 수행 여부를 나타내는 플래그는, 상기 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관계에 있는 참조 픽처의 U, V 성분별 픽셀값의 평균 간의 차의 절대값을, 각각의 색상 성분 별 소정 임계값과 비교한 결과에 기초하여 설정될 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상 수행 여부를 나타내는 플래그는, 상기 현재 픽처의 양자화 파라미터에 기초하여 설정될 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상 수행 여부를 나타내는 플래그는, 사용자 입력에 기초하여 설정될 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 판독부는, 상기 색차 보상값은, 상기 현재 블록 및 상기 현재 블록과 참조 관계에 있는 참조 블록의 모든 픽셀 값의 차이의 평균을 색상 성분 별로 결정한 값들을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 판독부는, 상기 색차 보상값은, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 각각의 참조 블록 별로, 상기 현재 블록 및 상기 각각의 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 결정한 값들을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상값 판독부는, 상기 색차 보상값은, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이 라면, 상기 참조 블록들을 이용하여 생성된 대표 참조 블록에 기초하여, 상기 현재 블록 및 상기 대표 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 결정한 값들을 포함할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 대표 참조 블록은, 상기 참조 블록들의 인터폴레이션을 수행하여 생성될 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상 수행부는, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 현재 블록과 참조 관계에 있는 참조 블록의 픽셀값에 합할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상 수행 단계는, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 각각의 참조 블록의 픽셀값에 합할 수 있다.
일 실시예에 따른 다시점 비디오 복호화 장치의 상기 색차 보상 수행 단계는, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 참조 블록들을 이용하여 생성된 대표 참조 블록의 픽셀값에 합할 수 있다.
본 발명은, 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체를 포함하고, 상기 프로그램은 본 발명의 일 실시예에 따른 다시점 비디오 부호화 방법을 구현하기 위한 프로그램이고, 상기 다시점 비디오 부호화 방법은, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 결정하는 단계; 상 기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 결정하는 단계; 상기 블록 타입 및 상기 제 1 픽처 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 결정하는 단계; 및 상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함한다.
본 발명은, 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체를 포함하고, 상기 프로그램은 본 발명의 일 실시예에 따른 다시점 비디오 복호화 방법을 구현하기 위한 프로그램이고, 상기 다시점 비디오 복호화 방법은, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 판독하는 단계; 상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 판독하는 단계; 상기 제 1 픽처 타입 및 상기 블록 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 판독하는 단계; 및 상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함한다.
도 1 은 본 발명의 일 실시예에 따른 다시점 비디오 부호화 장치의 블록도를 도시한다.
본 발명의 일 실시예에 따른 다시점 비디오 부호화 장치(100)는 제 1 픽처 타입 결정부(110), 블록 타입 결정부(120), 색차 보상값 결정부(130) 및 색차 보상 수행부(140)를 포함한다.
제 1 픽처 타입 결정부(110)는 부호화하고자 하는 다시점 비디오의 픽처 중, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타 입을 결정하고, 결정된 제 1 픽처 타입 정보를 색차 보상값 결정부(130)로 출력한다. 일 실시예에서 추가 정보를 결정하기 위해 제 1 픽처 타입 뿐만 아니라 블록 타입 정보도 고려된다면, 제 1 픽처 타입 결정부(110)의 출력이 블록 타입 결정부(120)에 입력될 수 있다.
예를 들어, 본 발명의 일 실시예가 종래 MVC에 적용된다면, 제 1 픽처 타입은 앵커 픽처 타입과 넌-앵커 픽처 타입을 포함할 수 있다. 앵커 픽처 타입은 뷰간 예측(Inter-View Prediction)이 수행되는 픽처로써 다른 시점 상의 다른 픽처의 뷰간 예측을 위한 픽처이면서, 동일 시점 상의 다른 픽처의 인터 예측을 위한 기준이 되는 픽처이다. 본 발명의 일 실시예는, 현재 픽처가 앵커 픽처인지 여부에 따라 현재 블록에 대해 색차 보상값을 계산할 수 있다.
블록 타입 결정부(120)는, 현재 블록이 스킵 모드 블록 타입인지 여부를 결정하고, 현재 블록에 대한 블록 타입 정보를 설정할 수 있다. 일 실시예가 색차 보상 수행 여부를 결정하기 위해 블록 타입 정보뿐만 아니라 제 1 픽처 타입 정보도 고려한다면, 제 1 픽처 타입 결정부(110)의 결과에 따라 블록 타입 결정부(120)의 동작 여부가 결정될 수 있다.
예를 들어, 본 발명의 일 실시예가 종래 다시점 비디오 코딩 기법인 MVC(Multi-view Video Coding)에 적용된다면, 블록 타입은 스킵 모드 블록, 다이렉트 모드 블록, 인터 모드 블록 중 적어도 하나를 포함할 수 있다. 스킵 모드 블록은 현재 블록의 고유 움직임 벡터가 없으며, 스킵 모드 블록의 움직임 벡터가 0이거나, 상기 현재 블록의 주변 블록의 움직임 벡터로부터 결정된다. 스킵 모드 블록 은 잔여(residual) 영상을 포함하여 블록의 데이터가 코딩되지 않는다.
본 발명의 일 실시예는, 현재 블록이 소정 블록 모드인 경우 색차 보상을 수행하도록 할 수 있는데, 소정 블록 모드의 일례는, 스킵 모드 블록, 16x16 인터 블록 모드 중 하나가 될 수 있다. 소정 블록 모드의 다른 예는, 스킵 모드 블록, 16x16 인터 블록 모드, 다이렉트 블록 모드 중 하나가 될 수 있다. 또 다른 예로 다른 참조 픽처로부터 예측을 수행하는 블록 모드(즉, 스킵 모드와 다이렉트 모드를 포함한 모드 인터 블록)가 될 수 있다. 또한, 소정 블록 모드는, 다시점 비디오 코딩 기술 분야에 사용될 수 있는 모든 다른 참조 프레임으로부터 예측을 수행하는 블록 모드(즉, 스킵 모드와 다이렉트 모드를 포함한 모든 인터 블록)의 모든 부분 집합이 될 수 있다.
색차 보상값 결정부(130)는 제 1 픽처 타입 결정부(110)로부터 결정된 현재 픽처의 제 1 픽처 타입 및 블록 타입 결정부(120)로부터 결정된 현재 블록의 블록 타입 중 적어도 하나에 기초하여, 현재 블록에 대한 색차 보상값을 결정하고, 색차 보상값을 색차 보상 수행부(140)로 출력한다.
도 1 에 도시되지 않았지만, 색차 보상값 결정부(130)는 제 1 픽처 타입 및 블록 타입 중 적어도 하나에 기초하여 색차 보상 수행 여부를 결정하는 색차 보상 수행 여부 결정부를 포함할 수 있다. 일 실시예의 색차 보상 수행 여부 결정부(미도시)는 제 1 픽처 타입이 앵커 픽처라면, 해당 블록에 대한 색차 보상을 수행하는 것으로 결정할 수 있다. 다른 실시예의 색차 보상 수행 여부 결정부(미도시)는 현재 픽처의 제 1 픽처 타입이 앵커 픽처이고, 현재 블록의 스킵 모드 등 소정 블록 모드인 경우 현재 블록에 대한 색차 보상을 수행하도록 결정할 수 있다.
다시점 비디오 부호화 장치(100)의 일 실시예는, 현재 픽처의 제 2 픽처 타입을 결정하는 제 2 픽처 타입 결정부를 포함할 수 있다. 제 2 픽처 타입의 일례는 I 픽처 타입, P 픽처 타입, B 픽처 타입 중 적어도 하나를 포함할 수 있다. 색차 보상값 결정부(130)는 현재 픽처가 앵커 픽처이고, 현재 블록이 소정 블록 모드이며, 현재 픽처의 제 2 픽처 타입이 P 픽처 타입인 경우 현재 블록에 대해 색차 보상을 수행하도록 결정할 수 있다.
다시점 비디오 부호화 장치(100)의 일 실시예는, 색차 보상 여부에 따라 현재 블록에 대한 색차 보상 수행 여부를 나타내는 정보를 설정하는 색차 보상 수행 여부 플래그 설정부(미도시)를 포함할 수 있다.
현재 픽처의 픽셀값의 평균 및 현재 픽처와참조 관계에 있는 참조 픽처의 픽셀값의 평균 간의 차이의 절대값이 색상 성분 별로 결정된 경우, 색차 보상 수행 여부 플래그는 각각의 색상 성분 별 절대값을 조합한 값에 기초하여 설정될 수 있다. 색상 성분의 일 예로, Y, U, V 성분가 이용될 수 있으나, 본 발명의 일 실시예에 대한 색상 성분은 Y, U, V 성분의 컬러 포맷에만 국한되는 것은 아니다. 각각의 색상 성분 별 절대값의 조합 방식에 대해서는 이하 도 10a 내지 13b 를 참고하여 상술된다.
다른 예로, 색상 보상 수행 여부 플래그는 현재 픽처의 양자화 파라미터 QP(Quantizaiton Parameter)에 기초하여 설정될 수 있다. 또한, 색상 보상 수행 여부 플래그는 사용자 입력에 기초하여 설정될 수도 있다.
도 1 에 도시되지 않았지만, 색차 보상값 결정부(130)의 일 실시예는 색차 보상값 유도부 및 색차 보상값 계산부를 구비할 수 있다. 색차 보상값 결정부(130)는 현재 블록의 블록 타입에 기초하여, 색차 보상값 유도부(미도시) 또는 색차 보상값 계산부(미도시)를 통해 색차 보상값을 결정한다.
예를 들어, 현재 블록이 스킵 모드 블록이라면, 색차 보상값 결정부(130)의 색차 보상값 유도부(미도시)는 현재 블록의 주변 블록의 색차 보상값을 이용하여 현재 블록의 색차 보상값을 유도함으로써 결정할 수 있다. 현재 블록이 스킵 모드 블록이 아니라면, 색차 보상값 결정부(130)의 색차 보상값 계산부(미도시)는 색차 보상을 통해 색차 보상값을 직접 계산함으로써 결정할 수 있다. 색차 보상값을 유도하는 방식은 이하 도 21 및 22 를 참고하여 상술되며, 색차 보상을 통하여 색차 보상값을 계산하는 방식은 이하 도 17을 참고하여 상술된다.
색차 보상 수행부(140)는 색차 보상값 결정부(130)로부터 결정된 색차 보상값을 이용하여 현재 블록에 대한 색차 보상을 수행한다. 색차 보상은 현재 블록에 대한 색차 보상값을 참조 블록의 픽셀값에 합함으로써 수행될 수 있다. 구체적인 색차 보상 방식은 이하 도 18을 참고하여 상술된다.
도 1 에 미도시되었지만, 일 실시예의 다시점 비디오 부호화 장치(100)는 색차 보상 수행부(140)로부터 입력된 색차 보상값을 부호화하여 비트스트림에 삽입시키는 색차 보상값 부호화부를 더 포함할 수 있다. 색차 보상값 부호화부(미도시)의 부호화 방식은 이하 도 19 및 20 을 참고하여 상술된다.
도 2 은 본 발명의 일 실시예에 따른 다시점 비디오 복호화 장치의 블록도를 도시한다.
본 발명의 일 실시예에 따른 다시점 비디오 복호화 장치(200)는 제 1 픽처 타입 판독부(210), 블록 타입 판독부(220), 색차 보상값 판독부(230) 및 색차 보상 수행부(240)를 포함한다. 다시점 비디오 복호화 장치(200)의 일 실시예는 수신된 비트스트림을 파싱하여 픽처 영상 데이터, 픽처 정보, 블록 정보, 추가 정보, 기타 코딩 관련 정보 등 영상 복원에 필요한 정보들을 추출하여 제 1 픽처 타입 판독부(210), 블록 타입 판독부(220), 색차 보상값 판독부(230) 및 색차 보상 수행부(240)로 전송할 수 있다. 이하, 제 1, 2 픽처 타입, 블록 타입 등의 개념은 다시점 비디오 부호화 장치(200)의 설명부분에서 전술된 내용과 동일하다.
제 1 픽처 타입 판독부(210)는, 복호화하고자 하는 다시점 비디오의 픽처 중, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 판독하고, 판독된 제 1 픽처 타입 정보를 색차 보상값 판독부(230)로 출력한다.
다시점 비디오 복호화 장치(200)에서 색차 보상값을 판독하기 위해 블록 타입도 고려된다면, 제 1 픽처 타입 판독부(210)의 출력은 블록 타입 판독부(220)에 입력될 수 있다. 예를 들어, 본 발명의 일 실시예가 종래 MVC에 적용된다면, 제 1 픽처 타입은 앵커 픽처 타입과 넌-앵커 픽처 타입을 포함할 수 있으며, 제 1 픽처 타입 판독부(210)는 현재 픽처가 앵커 픽처인지 여부를 판독할 수 있다.
블록 타입 판독부(220)는 수신된 비트스트림으로부터 복호화하고자 하는 다시점 비디오의 픽처 중, 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 판독하고, 판독된 블록 타입의 정보는 색차 보상값 판독부(230)로 출력된다. 추가 정보를 판독하기 위해 제 1 픽처 타입 뿐만 아니라 블록 타입 정보도 고려된다면, 제 1 픽처 판독부(210)의 결과에 따라 블록 타입 판독부(220)의 동작 여부가 결정될 수 있다.
예를 들어, 본 발명의 일 실시예가 MVC(Multi-view Video Coding)에 적용된다면, 블록 타입은 스킵 모드 블록, 다이렉트 모드 블록, 인터 모드 블록 중 적어도 하나를 포함할 수 있다. 이 경우 블록 타입 판독부(220)는, 현재 블록이 스킵 모드 블록인지 여부를 결정할 수 있다.
색차 보상값 판독부(230)는 제 1 픽처 타입 판독부(210)로부터의 제 1 픽처 타입 정보 및 블록 타입 판독부(220)로부터의 블록 타입 정보 중 적어도 하나에 기초하여, 비트스트림으로부터 현재 블록에 대한 색차 보상값을 판독하고, 색차 보상 수행부(240)로 출력한다.
색차 보상값 판독부(230)의 일 실시예는, 제 1 픽처 타입에 기초하여 현재 블록에 대한 색차 보상 여부를 판단하는 색차 보상 여부 판단부를 포함한다. 색차 보상 여부 판단부의 일 실시예는, 현재 픽처가 앵커 픽처인 경우 현재 블록에 대해 색차 보상을 수행하는 것으로 판단한다.
다른 예로, 색차 보상 여부 판단부는 현재 픽처의 제 1 픽처 타입 및 현재 블록의 블록 타입에 기초하여, 현재 블록에 대한 색차 보상 여부를 판단할 수 있다. 예를 들어, 색차 보상 여부 판단부는 현재 픽처가 앵커 픽처이고, 현재 블록이 스킵 모드를 포함하는 소정 블록 모드인 경우 현재 블록에 대해 색차 보상을 수 행할 것으로 판단할 수 있다.
도 2 에 도시되지는 않았지만, 다시점 비디오 복호화 장치(200)는 현재 픽처의 제 2 픽처 타입을 판독하는 제 2 픽처 타입 판독부(미도시)를 더 포함할 수 있다. 이 경우, 색차 보상값 판독부(230)의 색차 보상 여부 판단부(미도시)는 제 1 픽처 타입, 블록 타입 및 제 2 픽처 타입에 기초하여 현재 블록에 대한 색차 보상 수행 여부를 판단 할 수 있다. 예를 들어, 색차 보상 여부 판단부(미도시)는, 현재 픽처가 앵커 픽처이고, P 픽처이며, 현재 블록이 스킵 모드를 포함하는 소정 블록 타입이라면 색차 보상을 수행하는 것으로 판단할 수 있다.
도 2 에 도시되지는 않았지만, 다시점 비디오 복호화 장치(200)는 현재 픽처의 색차 보상 수행 여부를 나타내는 플래그를 판독하는 색차 보상 수행 여부 플래그 판독부(미도시)를 더 포함할 수 있다. 색차 보상값 판독부(230)의 색차 보상 수행 여부 판단부(미도시)는 제 1 픽처 타입, 색차 보상 수행 여부 플래그 및 블록 타입에 기초하여 현재 블록에 대한 색차 보상 수행 여부를 판단할 수 있다. 색차 보상 수행 여부 플래그의 특성은 다시점 비디오 부호화 장치(100)에서 전술된 바와 동일하다.
색차 보상값 판독부(230)의 일 실시예에서, 블록 타입에 기초하여 색차 보상값 결정 방식이 구분된다. 일례로 색차 보상값 판독부(230)의 일 실시예는, 색차 보상값 유도부(미도시) 및 색차 보상값 계산부(미도시)를 더 구비할 수 있다. 색차 보상값 판독부(230)의 색차 보상값 유도부(미도시)는, 현재 블록이 스킵 모드 블록이라면, 현재 블록의 주변 블록의 색차 보상값을 이용하여 현재 블록의 색차 보상 값을 유도함으로써 결정할 수 있다. 색차 보상값 판독부(230)의 색차 보상값 계산부(미도시)는, 현재 블록의 블록 타입이 스킵 블록 타입이 아니라면, 현재 블록에 대한 색차 보상을 수행하여 현재 블록의 색차 보상값을 직접 결정할 수 있다.
주변 블록을 이용하여 색차 보상값을 유도하는 방식은 이하 도 21 및 22 를 참고하여 상술되며, 색차 보상값을 직접 결정하는 방식은 이하 도 17 을 참고로 상술된다.
색차 보상값 판독부(230)의 일 실시예는, 현재 블록에 대한 색차 보상값 그 자체를 판독할 수도 있지만, 주변 블록을 이용한 색차 보상 예측값에 대한 색차 보상 차분값을 판독할 수 있다. 색차 보상 차분값을 이용한 색차 보상값 결정 방식은 이하 도 19 를 참고로 상술된다.
색차 보상값 판독부(230)의 일 실시예는, 색차 보상 차분값에 대하여 색차 보상값 사용 여부를 나타내는 플래그를 판독하는 색차 보상값 사용 여부 플래그 판독부(미도시)를 더 포함할 수 있다. 색차 보상값 사용 여부 플래그를 이용한 색차 보상값 결정 방식은 이하 도 20 을 참고로 상술된다.
색차 보상 수행부(240)는, 색차 보상값 판독부(230)로부터의 색차 보상값을 이용하여 현재 블록에 대한 색차 보상을 수행한다. 색차 보상 수행부(240)는 참조 블록의 픽셀값에 현재 블록의 색차 보상값을 합한 값을 현재 블록의 픽셀값으로 결정함으로써 색차 보상을 수행한다. 구체적인 색차 보상 방식은 이하 도 18 를 참고하여 상술된다.
색차 보상값 판독부(230)의 색차 보상값 사용 여부 플래그 판독부(미도시)에 서 색차 보상값 사용 여부 플래그를 판독하였다면, 색차 보상 수행부(240)는 색차 보상값 사용 여부 플래그에 따라 사용되도록 허용된 색차 보상값을 사용하여 색차 보상을 수행할 수 있다.
색차 보상 수행부(240)가 색차 보상값을 사용할 수 없는 경우 주변 블록을 이용하여 유도된 색차 보상값을 이용할 수 있다. 색차 보상값 유도 방식은 이하 도 21 및 22 를 이용하여 상술된다.
도 2 에 도시되지는 않았지만, 일 실시예에 따른 다시점 비디오 복호화 장치(200)는 색차 보상 수행부(240)로부터 입력된 색차 보상된 현재 블록을 이용하여 현재 픽처를 복원하는 복원부(미도시)를 포함할 수 있다. 이로써 다시점 비디오 복호화 장치(200)는 수신된 비트스트림을 이용하여 다시점 비디오를 복원할 수 있다.
본 발명의 일 실시예에 의한 다시점 비디오 부호화 장치(100) 및 다시점 비디오 복호화 장치(200)에서 현재 픽처가 소정 시점의 앵커 픽처라면, 현재 픽처의 예측을 위한 참조 픽처 역시 다른 시점의 앵처 픽처일 수 있다.
도 3 은 다시점 비디오 부복호화 기법에서 앵커 픽처 및 다른 픽더들의 예측 방식을 도시한다.
다시점 비디오 부복호화는 픽처 간의 예측을 이용한다. 다시점 비디오를 구성하는 일부 픽처 집합(300)은, 다시점 비디오 부복호화에서 8개의 시점(view)이 존재할 경우의 예로써, 시간 방향의 GOP(Group of Pictures)의 크기가 8 일 경우의 예측 구조를 도시한다. S0, S1, ... , S7 는 각각의 시점(view)을 나타내고, T0, T1, ... , T8 는 시간 방향 상의 각각의 시간을 나타낸다.
각각의 시점의 시간 방향의 부복호화에서는 계층적인 B-픽처 구조를 사용하여 예측을 수행하고 있고, 각각의 시점의 첫번째 시간(T0)의 영상들과 그 이후로 시간 방향으로 8 프레임씩 앞선 시간에 위치해 있는 프레임들(즉, 시간 방향의 GOP 만큼 앞선 시간에 위치해 있는 프레임들, 즉 T8, T16, T24 등)을 앵커 픽처라고 할 수 있다.
앵커 픽처는 시점 방향의 예측만이 수행된다. 앵커 픽처의 예측의 일례에 따르면, S2 시점은 동일한 시간대의 S0 시점을, S1 시점은 동일한 시간대의 S0 시점과 S2 시점을, S4 뷰는 동일한 시간대의 S2 시점을, S3 시점은 동일한 시간대의 S2 시점과 S4 시점을, S6 시점은 동일한 시간대의 S4 시점을, S5 시점은 동일한 시간대의 S4 시점과 S6 시점을, S7 시점은 동일한 시간대의 S6 시점을 이용하여 예측이 수행된다.
앵커 픽처가 아닌 넌-앵커 픽처(Non-anchor Picture)에서는 기본적으로 시간 방향의 예측이 수행된다. 따라서, 넌-앵커 픽처는 동일한 시점의 GOP 상의 앵커 픽처를 직간접적으로 참조하게 된다. 이에 따라 앵커 픽처의 화질은 넌-앵커 픽처의 화질에 영향을 미치므로, 앵커 픽처의 화질은 동일 GOP 상의 모든 픽처의 화질에 영향을 미치게 되므로, 정확하고 효율적인 예측에 있어서 앵커 픽처의 화질이 특히 중요하다.
이하 도 3 을 참조한 기술에 있어서, 각각의 픽처에 대한 표기 Tn/Sm/Xk 은 해당 픽처가 n번째 시간 Tn, m번째 시점 Sm, 참조 순서상 k번째의 X 타입의 픽처임을 나타낸다. X 타입은 I 타입, B 타입, P 타입을 포함한다.
예를 들어, 앵커 픽처 T0/S2/P0(310)와 T8/S2/P0(350)의 화질이 저하된다면, 앵커 픽처 T0/S2/P0(310)와 T8/S2/P0(350)를 직접적으로 참조하는 앵커 픽처 T0/S1/B1(340), T0/S3/B1(345), T0/S4/P0(330), T8/S1/B1(380), T8/S3/B1(385), T8/S4/P0(370)의 예측 효율이 떨어져 화질 저하가 발생할 수 있다.
연속적으로, 화질 저하된 앵커 픽처 T0/S4/P0(330), T8/S4/P0(370)를 참조하는 앵커 픽처 T0/S5/B1, T0/S6/P0, T8/S5/B1, T8/S6/P0 의 예측 효율이 떨어져 화질이 더욱 저하될 수 있다.
또한, 화질이 저하된 T0/S6/P0, T8/S6/P0 를 참조하는 앵커 픽처 T0/S7/P0, T8/S7/P0 의 예측 효율이 떨어져 화질이 지속적으로 저하될 수 있다.
이런 식으로 앵커 픽처의 화질이 저하된다면, 각각의 앵커 픽처를 참조하여 예측이 수행되는 넌-앵커 픽처들에 대해서도 화질 저하가 전파된다.
S2 시점 상의 시간 예측을 예로 들면, T0/S2/P0(310)와 T8/S2/P0(350)를 직접적으로 참조하는 넌-앵커 픽처 T4/S2/B1(390)에 화질 저하가 전파되고, T4/S2/B1(390)를 참조하는 T2/S2/B2(392), T6/S2/B2(396)에 화질 저하가 전파되며, 나머지 S2 시점 상의 B3 픽처들(T1/S2/B3(394), T7/S2/B3(398) 등)에 화질 저하가 전파될 수 있다.
따라서, 앵커 픽처 T0/S2/P0(310)와 T8/S2/P0(350)는 S0 시점(앵처 픽처 T0/S2 (P0)와 T8/S2 (P0)가 참조하는 시점, T0/S0/I0(320), T8/S0/I0(360) 등)을 제외하고, GOP 안의 모든 픽처에 영향을 미치게 된다. 따라서, GOP의 정확한 부복호화를 위해서 앵커 픽처의 화질이 중요하다.
또한, 다시점 비디오의 부복호화에서는 다수의 카메라들에 의해 각 시점(view)의 영상 시퀀스들이 획득된다. 카메라에서 입력되는 영상은 같은 종류의 카메라로 동일한 오브젝트를 촬영하더라도, 오브젝트와 각각의 카메라와의 거리 차이 및 소정 오브젝트와 각각의 카메라 사이의 방향(각도) 차이가 존재할 수 있다. 이러한 차이에 의해 오브젝트 표면의 빛의 반사도가 달라지므로 앵커 픽처와 같이 시점 간의 예측을 수행하는 픽처에서는 휘도 신호 레벨의 차이 및 색차 신호의 레벨의 차이가 발생할 수 있다.
앵커 픽처의 시점 간 휘도 신호 레벨이 보상되더라도 색차 신호 레벨이 보상되지 않는다면, 픽처간 예측으로 인해 색차 신호 레벨 차로 인한 화질 열화가 다른 앵커 픽처나 앵커 픽처가 아닌 픽처에 전파될 수 있다.
또한, 스킵 모드 블록은 잔여 영상(residual image)을 전혀 코딩하지 않고 참조 프레임 상에 있는 대응 블록을 그대로 차용하기 때문에 색차 신호 레벨의 차이에 크게 영향을 받을 수 있다.
도 4a 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입 및 블록 타입을 고려한 색차 보상값 부호화 방법의 흐름도를 도시한다.
도 4a 를 참고하여, 일 실시예에 따른 다시점 비디오 부호화 장치(100)의 제 1 픽처 타입 결정부(110), 블록 타입 결정부(120), 색차 보상값 결정부(130), 색차 보상 수행부(140) 및 색차 보상값 부호화부의 동작이 상술된다. 일 실시예에 따른 다시점 비디오 부호화 장치(100)는 앵커 픽처인 현재 픽처의 소정 블록 타입인 현재 블록에 대해 색차 보상을 수행하고 부호화하고자 한다(400).
제 1 픽처 타입 결정부(110)에서 현재 픽처가 앵커 픽처인지 여부가 결정되고, 블록 타입 결정부(120)에서 현재 블록이 소정 블록 타입인지 여부가 결정된다(단계 410). 소정 블록 타입은 전술한 바와 같이 스킵 모드 블록, 인터 블록 모드 블록, 다이렉트 모드 블록 중 적어도 하나의 블록 타입을 포함할 수 있다. 현재 픽처가 앵커 픽처가 아니거나, 현재 블록이 소정 블록 타입이 아니라면, 다시점 비디오 부호화 장치(100)는 현재 블록에 대한 프로세스를 종료한다.
현재 블록이 앵커 픽처의 소정 블록 타입이라면, 색차 보상값 결정부(130)에 의해 색차 보상값이 결정된다(단계 420). 색차 보상값을 결정하는 방식은 도 17, 21 및 22 를 참고하여 후술된다. 색차 보상 수행부(140)는 색차 보상값을 이용하여 색차 보상을 수행한다(단계 430). 색차 보상은 현재 블록에 대한 움직임 보상 단계와 별개로 수행될 수 있으며, 동시에 수행될 수도 있다. 색차 보상 방식은 이하 도 18 을 참고하여 후술된다.
색차 보상값 부호화부에 의해 색차 보상값이 부호화되어 비트스트림에 삽입 된다(단계 440). 색차 보상값 부호화 방식은 이하 도 19 및 20 을 참고하여 후술된다. 일 실시예의 다시점 비디오 부호화 장치(100)는 색차 보상 수행부(140)의 프로세스(단계 430)와 색차 보상값 부호화부의 프로세스(단계 440)의 순서를 바꿀 수 있으며, 동시에 수행할 수도 있다.
도 4b 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입 및 블록 타입을 고려한 색차 보상값 복호화 방법의 흐름도를 도시한다.
도 4b 를 참고하여, 일 실시예에 따른 다시점 비디오 복호화 장치(200)의 제 1 픽처 타입 판독부(210), 블록 타입 판독부(220), 색차 보상값 판독부(230) 및 색차 보상 수행부(240)의 동작이 상술된다. 일 실시예에 따른 다시점 비디오 복호화 장치(200)는 앵커 픽처인 현재 픽처의 소정 블록 타입인 현재 블록에 대해 색차 보상을 수행하고 복원하고자 한다(450). 다시점 비디오 복호화 장치(200)는 비트스트림을 수신하여 영상 데이터와 영상에 관련된 정보를 각각 파싱한다. 다시점 비디오 복호화 장치(200)는 수신된 비트스트림으로부터 현재 픽처의 제 1 픽처 타입을 나타내는 정보 또는 현재 블록의 블록 타입을 나타내는 정보 등을 추출하고 판독할 수 있다.
제 1 픽처 타입 판독부(210)에서 현재 픽처가 앵커 픽처인지 여부가 판독되고, 블록 타입 결정부(220)에서 현재 블록이 소정 블록 타입인지 여부가 판독된다(단계 460). 소정 블록 타입은 전술한 바와 같이 스킵 모드 블록, 인터 블록 모드 블록, 다이렉트 모드 블록 중 적어도 하나의 블록 타입을 포함할 수 있다. 현재 픽처가 앵커 픽처가 아니거나, 현재 블록이 소정 블록 타입이 아니라면, 다시점 비디 오 복호화 장치(200)는 현재 블록에 대한 프로세스를 종료한다.
현재 블록이 앵커 픽처의 소정 블록 타입이라면, 색차 보상값 판독부(230)에 의해 색차 보상값이 복호화되어 판독된다(단계 470). 색차 보상값을 판독하여 결정하는 방식은 도 17, 21 및 22 를 참고하여 후술된다. 색차 보상 수행부(240)는 색차 보상값을 이용하여 색차 보상을 수행한다(단계 480). 색차 보상은 현재 블록에 대한 움직임 보상 단계와 별개로 수행될 수 있으며, 동시에 수행될 수도 있다. 색차 보상 방식은 이하 도 18 을 참고하여 후술된다.
스킵 모드라 하더라도 동일 시점 상의 GOP 상에서 시간 방향의 인터 예측에 의해 다른 블록의 정보가 현재 블록에 적용된다. 다시점 비디오는 시간 방향의 다른 영상 뿐만 아니라 다른 시점의 영상들의 정보를 고려하여 예측할 필요가 있다. 따라서 스킵 모드의 블록이 앵커 픽처의 블록일 때, 다른 시점의 동일한 시간대의 픽처의 정보를 참조하여 예측된다면, 앵커 픽처의 정보가 해당 다시점 비디오 상의 모든 픽처들에 연쇄적으로 전달되므로, 해당 다시점 비디오에 대해 시간 방향의 정보 및 시점 방향의 정보를 모두 고려한 정확한 예측이 가능해진다.
도 5a 및 5b 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
slice_data 신택스(500 및 550)는 다시점 비디오 부복호화 방법을 구현하기 위한 일 실시예로써, 소정 블록 타입이 16x16 인터 블록 모드, 스킵 블록 모드 및 다이렉트 블록 모드를 포함하는 집합인 경우, 슬라이스에 대한 각종 데이터가 기록 되어 있다. slice_data 신택스(500 및 550)는 지면의 제약 상 도 5a(전단부) 및 5b(후단부) 로 나뉘어 수록되어 있다.
slice_data 신택스(500)의 11번째 줄의 'mb_skip_run'(510)은 다시점 비디오 부복호화에서 CAVLC(Context-based Adaptive VLC) 방법을 사용하여 엔트로피 코딩이 수행될 때 스킵 블록을 표현하는 신택스로, 연속적으로 몇 개의 매크로 블록이 스킵되었는지를 나타내는 정보이다. 13번째 줄에서 스킵된 매크로블록 개수만큼 루프문이 수행된다.
slice_data 신택스(500)의 14번째 줄 이하의 if 조건문 부분은 해당 픽처가 앵커 픽처라면 색차 정보 'anchor_enhancement_information()'(520) 신택스가 추가되어 색차 보상값 등의 색차 정보가 부복호화됨을 나타낸다.
slice_data 신택스(500)의 21번째 줄의 'mb_skip_flag'(530)는 다시점 비디오 부복호화에서 CABAC(Context-based Adaptive Binary Arithmetic Coding) 방법을 이용하여 엔트로피 코딩이 수행될 때 스킵 블록을 표현하는 신택스이다. 즉, 'mb_skip_flag'(530)는 현재 블록이 스킵이 되었는지를 나타내는 정보로써, 'mb_skip_flag'(530)가 1일 때 현재 블록이 스킵되었음을 나타낸다.
slice_data 신택스(500)의 22번째 줄 이하의 if 조건문은 현재 블록이 스킵되었고 현재 픽처가 앵커 픽처라면 'anchor_enhancement_information()'(540) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다. slice_data 신택스(500)의 14번째 줄 이하의 if 조건문 및 22번째 줄 이하의 if 조건문이 '참'값을 만족하여 색차 보상이 수행될 수 있도록 하는 신택스 'anchor_enhancement_information()'(520, 540)의 다양한 실시예는, 이후 도 19 및 20 를 참고하여 상술된다.
도 6a 및 6b 는 본 발명의 다른 실시예에 의해, 제 1 픽처 타입 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
mb_pred 신택스(600 및 620)는 다시점 비디오 부복호화 방법을 구현하기 위한 일 실시예로써, 소정 블록 타입이 16x16 인터 블록 모드, 스킵 블록 모드 및 다이렉트 블록 모드를 포함하는 집합인 경우, 매크로블록의 예측과 관련된 각종 데이터가 기록되어 있다. mb_pred 신택스(600 및 620)는 지면의 제약상 도 6a(전단부) 및 6b(후단부)로 나뉘어 수록되어 있다.
mb_pred 신택스(600)의 12번째 줄 이하의 if 조건문은 현재 픽처가 앵커 픽처이고 현재 블록이 16x16 인터 블록 모드라면 'anchor_enhancement_information()'(610) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다.
mb_pred 신택스(620)의 7번째 줄 이하의 if 조건문은 현재 픽처가 앵커 픽처이고 현재 블록이 다이렉트 블록 모드라면 'anchor_enhancement_information()'(630) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다.
mb_pred 신택스(600)의 12번째 줄 이하의 if 조건문 및 mb_pred 신택스(620)의 7번째 줄 이하의 if 조건문 각각이 '참'값을 만족하여 색차 보상이 수행될 수 있도록 하는 신택스 'anchor_enhancement_information()'(610, 630)의 다양한 실시예는, 이후 도 19 및 20 를 참고하여 상술된다.
기존 다시점 비디오 부복호화 방식의 스킵 모드 신택스를 그대로 사용하면서 앵커 픽처의 화질을 향상시키는 부복호화 방법의 일례로써, 현재 디코딩하려는 M x N 블록이 어떤 블록 타입인지 여부를 나타내는 정보, 현재 픽처가 앵커 픽처인지 여부를 나타내는 정보에 따라 색차 정보가 기존 스킵 모드 신택스에 삽입된다. M x N 는 16 x 16, 8 x 8 이 될 수 있으며, 임의의 다양한 조합일 수 있다. 기존 다시점 비디오 부복호화 방식의 스킵 모드 신택스가 그대로 사용될 수 있으므로, 기존 다시점 비디오 부호화 시스템 또는 복호화 시스템의 구조를 크게 변경하지 않고, 신택스에서 필요한 정보만 변경함으로써 본 발명의 일 실시예가 구현될 수 있다.
도 7a 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입,제 2 픽처 타입 및 블록 타입을 고려한 색차 보상값 부호화 방법의 흐름도를 도시한다.
도 7a 를 참고하여, 일 실시예에 따른 다시점 비디오 부호화 장치(100)의 제 1 픽처 타입 결정부(110), 블록 타입 결정부(120), 제 2 픽처 타입 결정부(미도시), 색차 보상값 결정부(130), 색차 보상 수행부(140) 및 색차 보상값 부호화부(미도시)의 동작이 상술된다. 일 실시예에 따른 다시점 비디오 부호화 장치(100)는 앵커 픽처이고 소정 제 2 픽처 타입인 현재 픽처의 소정 블록 타입인 현재 블록에 대해 색차 보상을 수행하고 부호화하고자 한다(700). 일 실시예는 제 2 픽처 타입으로써 P 픽처 타입을 채택한다.
제 1 픽처 타입 결정부(110)에서 현재 픽처가 앵커 픽처인지 여부가 결정되 고, 블록 타입 결정부(120)에서 현재 블록이 소정 블록 타입인지 여부가 결정된다. 또한 제 2 픽처 타입 결정부에서 현재 픽처가 P 픽처인지 여부가 결정된다.(단계 710). 소정 블록 타입은 전술한 바와 같이 스킵 모드 블록, 인터 블록 모드 블록, 다이렉트 모드 블록 중 적어도 하나의 블록 타입을 포함할 수 있다. 현재 픽처가 앵커 픽처가 아니거나 P 픽처가 아니거나 현재 블록이 소정 블록 타입이 아니라면, 다시점 비디오 부호화 장치(100)는 현재 블록에 대한 프로세스를 종료한다.
현재 블록이 앵커 픽처인 P 픽처의 소정 블록 타입이라면, 색차 보상값 결정부(130)에 의해 색차 보상값이 결정된다(단계 720). 색차 보상값을 결정하는 방식은 도 17, 21 및 22 를 참고하여 후술된다. 색차 보상 수행부(140)는 색차 보상값을 이용하여 색차 보상을 수행한다(단계 730). 색차 보상은 현재 블록에 대한 움직임 보상 단계와 별개로 수행될 수 있으며, 동시에 수행될 수도 있다. 색차 보상 방식은 이하 도 18 을 참고하여 후술된다.
도 7b 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입, 제 2 픽처 타입 및 블록 타입을 고려한 색차 보상값 복호화 방법의 흐름도를 도시한다.
도 7b 를 참고하여, 일 실시예에 따른 다시점 비디오 복호화 장치(200)의 제 1 픽처 타입 판독부(210), 제 2 픽처 타입 판독부(미도시), 블록 타입 판독부(220), 색차 보상값 판독부(230) 및 색차 보상 수행부(240)의 동작이 상술된다. 일 실시예에 따른 다시점 비디오 복호화 장치(200)는 앵커 픽처이고 소정 제 2 픽처 타입인 현재 픽처의 소정 블록 타입인 현재 블록에 대해 색차 보상을 수행하고 복호화하고자 한다(750). 일 실시예는 제 2 픽처 타입으로써 P 픽처 타입을 채 택한다.
다시점 비디오 복호화 장치(200)는 비트스트림을 수신하여 영상 데이터와 영상에 관련된 정보를 각각 파싱한다. 다시점 비디오 복호화 장치(200)는 헤더 정보 등으로부터 현재 픽처의 제 1 픽처 타입을 나타내는 정보 또는 현재 블록의 블록 타입을 나타내는 정보 등을 추출하고 판독할 수 있다.
제 1 픽처 타입 판독부(210)에서 현재 픽처가 앵커 픽처인지 여부가 판독되고, 제 2 픽처 타입 판독부(미도시)에서 현재 픽처가 P 픽처인지 여부가 판독되며, 블록 타입 결정부(220)에서 현재 블록이 소정 블록 타입인지 여부가 판독된다(단계 760). 소정 블록 타입은 전술한 바와 같이 스킵 모드 블록, 인터 블록 모드 블록, 다이렉트 모드 블록 중 적어도 하나의 블록 타입을 포함할 수 있다. 현재 픽처가 앵커 픽처가 아니거나, P 픽처가 아니거나, 현재 블록이 소정 블록 타입이 아니라면, 다시점 비디오 복호화 장치(200)는 현재 블록에 대한 프로세스를 종료한다.
현재 블록이 앵커 픽처인 P 픽처의 소정 블록 타입이라면, 색차 보상값 판독부(230)에 의해 색차 보상값이 복호화되어 판독된다(단계 770). 색차 보상값을 판독하여 결정하는 방식은 도 17, 21 및 22 를 참고하여 후술된다. 색차 보상 수행부(240)는 색차 보상값을 이용하여 색차 보상을 수행한다(단계 780). 색차 보상은 현재 블록에 대한 움직임 보상 단계와 별개로 수행될 수 있으며, 동시에 수행될 수도 있다. 색차 보상 방식은 이하 도 18 을 참고하여 후술된다.
도 8 은 본 발명의 일 실시예에 의해, 제 1 픽처 타입, 제 2 픽처 타입 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하 기 위한 신택스를 도시한다.
slice_data 신택스(800)는 도 5a 및 도 5b의 slice_data 신택스(500, 550)의 다른 실시예로써, 후술되는 부분을 제외하고는 동일한 내용의 신택스이다.
slice_data 신택스(800)의 14번째 줄 이하의 if 조건문 부분은 해당 픽처가 앵커 픽처이고 P 픽처라면 색차 정보 'anchor_enhancement_information()'(810) 신택스가 추가되어 색차 보상값 등의 색차 정보가 부복호화됨을 나타낸다.
slice_data 신택스(800)의 22번째 줄 이하의 if 조건문은 현재 블록이 스킵되었고 현재 픽처가 앵커 픽처이고 P 픽처라면 'anchor_enhancement_information()'(820) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다. slice_data 신택스(800)의 14번째 줄 이하의 if 조건문 및 22번째 줄 이하의 if 조건문이 각각 '참'값을 만족하여 색차 보상이 수행될 수 있도록 하는 신택스 'anchor_enhancement_information()'(810, 820)의 다양한 실시예는, 이후 도 19 및 20 를 참고하여 상술된다.
도 9a 및 9b 은 본 발명의 일 실시예에 의해, 제 1 픽처 타입, 제 2 픽처 타입 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
mb_pred 신택스(900 및 920)는 도 6a 및 6b 의 mb_pred 신택스(600 및 620)의 다른 실시예로써, 후술되는 부분을 제외하면 동일한 내용의 신택스이다. mb_pred 신택스(900 및 920)는 지면의 제약상 도 9a(전단부) 및 9b(후단부)로 나뉘어 수록되어 있다.
mb_pred 신택스(900)의 12번째 줄 이하의 if 조건문은 현재 픽처가 앵커 픽처이고 P 픽처이면서 현재 블록이 16x16 인터 블록 모드라면 'anchor_enhancement_information()'(910) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다.
mb_pred 신택스(920)의 7번째 줄 이하의 if 조건문은 현재 픽처가 앵커 픽처이고 현재 블록이 다이렉트 블록 모드라면 'anchor_enhancement_information()'(930) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다.
mb_pred 신택스(900)의 12번째 줄 이하의 if 조건문 및 mb_pred 신택스(920)의 7번째 줄 이하의 if 조건문 각각이 '참'값을 만족하여 색차 보상이 수행될 수 있도록 하는 신택스 'anchor_enhancement_information()'(910, 930)의 다양한 실시예는, 이후 도 19 및 20 를 참고하여 상술된다.
도 10a 는 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상값 부호화 방법의 흐름도를 도시한다.
도 10a 를 참고하여, 일 실시예에 따른 다시점 비디오 부호화 장치(100)의 제 1 픽처 타입 결정부(110), 색차 보상 수행 여부 플래그 결정부(미도시), 블록 타입 결정부(120), 색차 보상값 결정부(130), 색차 보상 수행부(140) 및 색차 보상값 부호화부(미도시)의 동작이 상술된다. 일 실시예에 따른 다시점 비디오 부호화 장치(100)는 앵커 픽처인 현재 픽처의 소정 블록 타입인 현재 블록에 대해 색차 보상 수행 여부를 허락하는 플래그가 설정된 경우 색차 보상을 수행하고 부호화하고 자 한다(1000).
제 1 픽처 타입 결정부(110)에서 현재 픽처가 앵커 픽처인지 여부가 결정되고, 블록 타입 결정부(120)에서 현재 블록이 소정 블록 타입인지 여부가 결정된다. 또한 색차 보상 수행 여부 결정부(미도시)에서 현재 블록에 대해 색차 보상을 수행할지 여부가 결정된다(단계 1010). 소정 블록 타입은 전술한 바와 같이 스킵 모드 블록, 인터 블록 모드 블록, 다이렉트 모드 블록 중 적어도 하나의 블록 타입을 포함할 수 있다. 현재 픽처가 앵커 픽처가 아니거나 현재 블록이 소정 블록 타입이 아니거나 현재 블록에 대해 색차 보상 수행 여부 플래그를 '1'로 설정하지 않다면, 다시점 비디오 부호화 장치(100)는 현재 블록에 대한 프로세스를 종료한다.
현재 블록이 앵커 픽처의 소정 블록 타입이고 색차 보상 수행 여부 플래그가 '1'이라면, 색차 보상값 결정부(130)에 의해 색차 보상값이 결정된다(단계 1020). 색차 보상값을 결정하는 방식은 도 17, 21 및 22 를 참고하여 후술된다. 색차 보상 수행부(140)는 색차 보상값을 이용하여 색차 보상을 수행한다(단계 1030). 색차 보상은 현재 블록에 대한 움직임 보상 단계와 별개로 수행될 수 있으며, 동시에 수행될 수도 있다. 색차 보상 방식은 이하 도 18 을 참고하여 후술된다.
도 10b 는 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상값 복호화 방법의 흐름도를 도시한다.
도 10b 를 참고하여, 일 실시예에 따른 다시점 비디오 복호화 장치(200)의 제 1 픽처 타입 판독부(210), 색차 보상 수행 여부 플래그 판독부(미도시), 블록 타입 판독부(220), 색차 보상값 판독부(230) 및 색차 보상 수행부(240)의 동작이 상술된다. 일 실시예에 따른 다시점 비디오 복호화 장치(200)는 앵커 픽처인 현재 픽처의 소정 블록 타입인 현재 블록에 대해 색차 보상 수행 여부 플래그가 '1'로 설정되어 있다면, 색차 보상을 수행하고 복호화하고자 한다(1050).
다시점 비디오 복호화 장치(200)는 비트스트림을 수신하여 영상 데이터와 영상에 관련된 정보를 각각 파싱한다. 다시점 비디오 복호화 장치(200)는 헤더 정보 등으로부터 현재 픽처의 제 1 픽처 타입을 나타내는 정보 또는 현재 블록의 블록 타입을 나타내는 정보 등을 추출할 수 있다.
제 1 픽처 타입 판독부(210)에서 현재 픽처가 앵커 픽처인지 여부가 판독되고, 블록 타입 결정부(220)에서 현재 블록이 소정 블록 타입인지 여부가 판독되고, 색차 보상 수행 여부 플래그 판독부에서 색차 보상 수행 여부 플래그가 '색차 보상을 수행'하도록 설정되어 있는지 판독한다(단계 1060). 소정 블록 타입은 전술한 바와 같이 스킵 모드 블록, 인터 블록 모드 블록, 다이렉트 모드 블록 중 적어도 하나의 블록 타입을 포함할 수 있다. 현재 픽처가 앵커 픽처가 아니거나 현재 블록이 소정 블록 타입이 아니거나 색차 보상 수행 여부 플래그가 '0'으로 설정되어 있다면, 다시점 비디오 복호화 장치(200)는 현재 블록에 대한 프로세스를 종료한다.
현재 블록이 앵커 픽처의 소정 블록 타입이며 상기 플래그에 의해 색차 보상 수행 여부가 허락된다면, 색차 보상값 판독부(230)에 의해 색차 보상값이 복호화되어 판독된다(단계 1070). 색차 보상값을 판독하여 결정하는 방식은 도 17, 21 및 22 를 참고하여 후술된다. 색차 보상 수행부(240)는 색차 보상값을 이용하여 색차 보상을 수행한다(단계 1080). 색차 보상은 현재 블록에 대한 움직임 보상 단계와 별개로 수행될 수 있으며, 동시에 수행될 수도 있다. 색차 보상 방식은 이하 도 18 을 참고하여 후술된다.
도 11 은 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보를 나타내는 신택스를 도시한다.
slice_header 신택스(1100)는 다시점 비디오 부복호화 방법을 구현하기 위한 일 실시예로써, 슬라이스에 대한 각종 헤더 데이터가 기록되어 있다.
slice_header 신택스(1100)의 5번째 줄 이하의 if 조건문은 현재 픽처가 앵커 픽처라면 색차 보상 수행 여부 플래그를 나타내는 'use_chroma_offset_flag'(1110) 신택스가 추가될 수 있음을 나타낸다. 색차 보상 을 수행하는 경우 'use_chroma_offset_flag'(1110)는 '1'로 설정되고, 색차 보상을 수행하지 않는 경우 'use_chroma_offset_flag'(1110)는 '0'으로 설정된다. 또한, 현재 픽처가 앵커 픽처가 아닌 경우 'use_chroma_offset_flag'(1110)를 '0'으로 가정할 수 있다.
'use_chroma_offset_flag'(1110), 즉 색차 보상 수행 여부 플래그가 설정되는 다양한 방식에 대해 후술한다.
현재 픽처의 픽셀값의 평균 및 현재 픽처와 참조 관계에 있는 참조 픽처의 픽셀값의 평균 간의 차의 절대값이 Y, U, V 성분별로 결정되면, 색차 보상 수행 여부 플래그(미도시)는 각각의 성분별 절대값을 다양하게 조합한 값에 기초하여 설정될 수 있다.
첫 번째 방식에 의하면, Y, U, V 성분별로 현재 픽처의 픽셀값의 평균과 참 조 픽처의 픽셀값의 평균의 차의 절대값의 합이 소정 임계치 T 이상인 경우 색차 보상 수행 여부 플래그는 '1'로 설정될 수 있다. 임계치를 결정하는 방법의 일례로 T 에 대한 임계값은 1로 적용될 수 있다.(즉, T >= 1)
두 번째 방식에 의하면, U, V 성분별로 현재 픽처의 픽셀값의 평균과 참조 픽처의 픽셀값의 평균의 차의 절대값이, 각각 성분에 대한 임계치 TU, TV 이상인 경우 색차 보상 수행 여부 플래그는 '1'로 설정될 수 있다. 임계치를 결정하는 방법의 일례로 TU, TV 에 대한 임계값은 1로 적용될 수 있다.(즉, TU >= 1, TV >= 1)
세 번째 방식에 의하면, Y, U, V 성분별로 현재 픽처의 픽셀값의 평균과 참조 픽처의 픽셀값의 평균의 차의 절대값의 제곱값이 다양하게 조합된 값에 기초하여 색차 보상 수행 여부 플래그가 설정될 수 있다.
예를 들어, Y, U, V 성분별로 픽셀값의 평균의 차의 절대값의 제곱값의 제곱근(즉, K = SQRT(KY 2 + KU 2 + KV 2))이 소정 임계치 T 이상인 경우, 색차 보상 수행 여부 플래그는 '1'로 설정될 수 있다. 또 다른 예로, Y, U, V 성분별로 픽셀값의 평균의 차의 절대값의 제곱값의 평균(즉, K = average(KY 2 + KU 2 + KV 2))이 소정 임계치 T 이상인 경우, 색차 보상 수행 여부 플래그는 '1'로 설정될 수 있다. 이외에도 다양한 조합이 있을 수 있다.
네 번째 방식에 의하면, 현재 블록의 양자화 파라미터에 기초하여 색차 보상 수행 여부 플래그가 설정될 수 있다. 현재 양자화 파라미터(Quantization Parameter;QP)가 임계 양자화 파라미터(QPT)보다 작거나 같다면, 색차 보상 수행 여부 플래그는 '1'로 설정되고, 반대의 경우 '0'으로 설정될 수 있다.
다섯 번째 방식에 의하면, 색차 보상 수행 여부 플래그는 사용자 입력에 기초하여 설정될 수도 있다.
여섯 번째 방식에 의하면, 전술된 다섯 가지 방식을 다양하게 조합함으로써 색차 보상 수행 여부 플래그가 사용될 수 있다.
도 12 는 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
slice_data 신택스(1200)는 도 5a 및 도 5b의 slice_data 신택스(500, 550)의 다른 실시예로써, 후술되는 부분을 제외하고는 동일한 내용의 신택스이다.
slice_data 신택스(1200)의 14번째 줄 이하의 if 조건문 부분은 해당 블록이 스킵 모드 블럭이면서 'use_chroma_offset_flag', 즉 색차 보상 수행 여부 플래그가 '1' 인 경우 색차 정보 'anchor_enhancement_information()'(1210) 신택스가 추가되어 색차 보상값 등의 색차 정보가 부복호화됨을 나타낸다.
slice_data 신택스(1200)의 22번째 줄 이하의 if 조건문은 현재 블록이 스킵되었고 'use_chroma_offset_flag'가 '1' 인 경우 'anchor_enhancement_information()'(1220) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다. slice_data 신택스(1200)의 14번째 줄 이하의 if 조건문 및 22번째 줄 이하의 if 조건문이 각각 '참'값을 만족하여 색차 보상이 수행될 수 있도록 하는 신택스 'anchor_enhancement_information()'(1210, 1220)의 다양한 실시예는, 이후 도 19 및 20 를 참고하여 상술된다.
도 13a 및 13b 은 본 발명의 다른 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
mb_pred 신택스(1300 및 1320)는 도 6a 및 6b 의 mb_pred 신택스(600 및 620)의 다른 실시예이다. mb_pred 신택스(1300 및 1320)는 지면의 제약상 도 13a(전단부) 및 13b(후단부)로 나뉘어 수록되어 있다.
mb_pred 신택스(1300)의 10번째 줄 이하의 if 조건문은 현재 블록이 16x16 인터 블록 모드이고 색차 보상 수행 여부 플래그가 '1'이라면 'anchor_enhancement_information()'(1310) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다.
mb_pred 신택스(1320)의 7번째 줄 이하의 if 조건문은 현재 블록이 다이렉트 블록 모드이고 색차 보상 수행 여부 플래그가 '1'이라면 'anchor_enhancement_information()'(1330) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다.
mb_pred 신택스(1300)의 10번째 줄 이하의 if 조건문 및 mb_pred 신택스(1320)의 7번째 줄 이하의 if 조건문 각각이 '참'값을 만족하여 색차 보상이 수행될 수 있도록 하는 신택스 'anchor_enhancement_information()'(1310, 1330)의 다양한 실시예는, 이후 도 19 및 20 를 참고하여 상술된다.
도 14 는 본 발명의 일 실시예에 의해, 블록 타입에 기초하여 색차 보상값 결정 방식이 구분되는 다시점 비디오 부호화 방법의 흐름도를 도시한다.
도 14 를 참고하여, 일 실시예에 따른 다시점 비디오 부호화 장치(100)의 제 1 픽처 타입 결정부(110), 블록 타입 결정부(120), 색차 보상값 결정부(130), 색차 보상 수행부(140) 및 색차 보상값 부호화부(미도시)의 동작이 상술된다. 일 실시예에 따른 다시점 비디오 부호화 장치(100)는 앵커 픽처인 현재 픽처의 현재 블록에 대해, 블록 타입에 따라 색차 보상값을 다른 방식으로 결정하여 색차 보상을 수행하고 부호화하고자 한다(1400).
제 1 픽처 타입 결정부(110)에서 현재 픽처가 앵커 픽처인지 여부가 결정된다(단계 1410). 현재 픽처가 앵커 픽처가 아니라면 프로세스는 종료된다. 현재 픽처가 앵커 픽처라면, 블록 타입 결정부(120)에서 현재 블록이 스킵 모드 블록인지 여부가 결정된다(단계 1420). 현재 블록이 스킵 모드 블록이 아니라면, 소정 블록 타입인지 여부가 결정된다(단계 1430). 소정 블록 타입은 스킵 모드 블록을 제외한 인터 블록 모드 블록, 다이렉트 모드 블록 중 적어도 하나의 블록 타입을 포함할 수 있다. 현재 블록이 소정 블록 타입도 아니라면 다시점 비디오 부호화 장치(100)는 현재 블록에 대한 프로세스를 종료한다.
현재 블록이 앵커 픽처의 스킵 모드 블록이라면, 색차 보상값 결정부(130)는 주변 블록의 색차 보상값을 이용하여 색차 보상값의 예측값을 유도함으로써 현재 블록의 색차 보상값을 결정한다(단계 1440). 색차 보상값이 유도되는 방식은 이하 도 21 및 22 를 참고하여 상술된다. 색차 보상 수행부(140)는 유도된 색차 보상값을 이용하여 색차 보상을 수행한다(단계 1460). 색차 보상은 현재 블록에 대한 움직임 보상 단계와 별개로 수행될 수 있으며, 동시에 수행될 수도 있다.
현재 블록이 앵커 픽처의 소정 블록 타입이라면, 색차 보상값 결정부(130)에 의해 색차 보상에 의해 색차 보상값이 결정된다(단계 1450). 색차 보상에 의해 색차 보상값이 직접 결정되는 방식은 도 17, 21 및 22 를 참고하여 후술된다. 색차 보상 수행부(140)는 색차 보상에 의해 결정된 색차 보상값을 이용하여 색차 보상을 수행한다(단계 1470). 색차 보상은 현재 블록에 대한 움직임 보상 단계와 별개로 수행될 수 있으며, 동시에 수행될 수도 있다. 색차 보상 방식은 이하 도 18 을 참고하여 후술된다.
색차 보상에 의해 결정된 색차 보상값은, 색차 보상값 부호화부(미도시)에 의해 부호화되어 비트스트림에 삽입된다(단계 1480). 색차 보상값 부호화 방식은 이하 도 19 및 20 을 참고하여 후술된다. 일 실시예의 다시점 비디오 부호화 장치(100)는 색차 보상 수행부(140)의 프로세스(단계 1470)와 색차 보상값 부호화부의 프로세스(단계 1480)의 순서를 바꿀 수 있으며, 동시에 수행할 수도 있다.
도 15 는 본 발명의 일 실시예에 의해, 블록 타입에 기초하여 색차 보상값 결정 방식이 구분되는 다시점 비디오 복호화 방법의 흐름도를 도시한다.
도 15 를 참고하여, 일 실시예에 따른 다시점 비디오 복호화 장치(200)의 제 1 픽처 타입 판독부(210), 블록 타입 판독부(220), 색차 보상값 판독부(230) 및 색차 보상 수행부(240)의 동작이 상술된다. 일 실시예에 따른 다시점 비디오 복호화 장치(200)는 앵커 픽처인 현재 픽처의 현재 블록에 대해, 블록 타입에 따라 색차 보상값을 다른 방식으로 결정하여 색차 보상을 수행하고 복호화하고자 한다(1500).
다시점 비디오 복호화 장치(200)는 비트스트림을 수신하여 영상 데이터와 영상에 관련된 정보를 각각 파싱한다. 다시점 비디오 복호화 장치(200)는 헤더 정보 등으로부터 현재 픽처의 제 1 픽처 타입을 나타내는 정보 또는 현재 블록의 블록 타입을 나타내는 정보 등을 추출할 수 있다.
제 1 픽처 타입 판독부(210)에서 현재 픽처가 앵커 픽처인지 여부가 판독된다(단계 1510). 현재 픽처가 앵커 픽처가 아니라면 프로세스는 종료된다. 현재 픽처가 앵커 픽처라면, 블록 타입 판독부(220)에서 현재 블록이 스킵 모드 블록인지 여부가 판독된다(단계 1520). 현재 블록이 스킵 모드 블록이 아니라면, 소정 블록 타입인지 여부가 판독된다(단계 1530). 소정 블록 타입은 스킵 모드 블록을 제외한 인터 블록 모드 블록, 다이렉트 모드 블록 중 적어도 하나의 블록 타입을 포함할 수 있다. 현재 블록이 소정 블록 타입도 아니라면 다시점 비디오 복호화 장치(200)는 현재 블록에 대한 프로세스를 종료한다.
현재 블록이 앵커 픽처의 스킵 모드 블록이라면, 색차 보상값 판독부(230)는 주변 블록의 색차 보상값을 이용하여 색차 보상값의 예측값을 유도함으로써 현재 블록의 색차 보상값을 결정한다(단계 1540). 색차 보상값이 유도되는 방식은 이하 도 21 및 22 를 참고하여 상술된다. 색차 보상 수행부(240)는 유도된 색차 보상값을 이용하여 색차 보상을 수행한다(단계 1560).
현재 블록이 앵커 픽처의 소정 블록 타입이라면, 색차 보상값 판독부(230)에 의해 색차 보상에 의해 색차 보상값이 결정된다(단계 1550). 색차 보상에 의해 색차 보상값이 직접 결정되는 방식은 도 17, 21 및 22 를 참고하여 후술된다. 색차 보상 수행부(240)는 색차 보상에 의해 결정된 색차 보상값을 이용하여 색차 보상을 수행한다(단계 1560).
색차 보상은 현재 블록에 대한 움직임 보상 단계와 별개로 수행될 수 있으며, 동시에 수행될 수도 있다. 색차 보상 방식은 이하 도 18 을 참고하여 후술된다.
도 16a 및 16b 은 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
mb_pred 신택스(1600 및 1620)는 도 6a 및 6b 의 mb_pred 신택스(600 및 620)의 또 다른 실시예이다. mb_pred 신택스(1600 및 1620)는 지면의 제약상 도 16a(전단부) 및 16b(후단부)로 나뉘어 수록되어 있다.
mb_pred 신택스(1600)의 10번째 줄 이하의 if 조건문은 현재 블록이 16x16 인터 블록 모드이고 현재 픽처가 앵커 픽처일 때, 'anchor_enhancement_information()'(1610) 신택스가 추가되어 색차 정보가 부복호화될 수 있음을 나타낸다.
mb_pred 신택스(1620)의 7번째 줄 이하의 if 조건문은 현재 블록이 다이렉트 블록 모드이고 현재 픽처가 앵커 픽처일 때, 'anchor_enhancement_information()'(1630) 신택스가 추가되어 색차 정보가 부복호 화될 수 있음을 나타낸다.
mb_pred 신택스(1600)의 10번째 줄 이하의 if 조건문 및 mb_pred 신택스(1620)의 7번째 줄 이하의 if 조건문 각각이 '참'값을 만족하여 색차 보상이 수행될 수 있도록 하는 신택스 'anchor_enhancement_information()'(1610, 1630)의 다양한 실시예는, 이후 도 19 및 20 를 참고하여 상술된다.
전술된 mb_pred 신택스(1600)와는 달리 현재 블록이 스킵 모드 블록인 경우의 신택스는 따로 존재하지 않는다. 현재 블록이 스킵 모드 블록인 경우, 주변 블록을 이용하여 색차 보상값의 예측값을 현재 블록의 색차 보상값으로 유도함으로써 색차 보상값을 결정한다. 또한 이런 식으로 유도된 색차 보상값을 이용하여 색차 보상이 수행된다.
도 17 은 본 발명의 일 실시예에 의해, 색차 보상값 결정을 위한 수학식을 도시한다.
일 실시예에 따른 다시점 비디오 부호화 장치(100)의 색차 보상값 결정부(130) 및 일 실시예에 따른 다시점 비디오 복호화 장치(200)의 색차 보상값 판독부(230)는 후술되는 다양한 방식을 이용하여 색차 보상값을 결정할 수 있다.
U 성분의 색차 보상값 수학식(1700) 및 V 성분의 색차 보상값 수학식(1710)에서, offset cb 와 offset cr 은 각각 U 성분, V 성분의 색차 보상값을 나타낸다. M, N 은 각각 블록의 가로 크기, 세로 크기를 나타내며, f cb (i, j) 및 f cr (i, j)은 각각 부호화하려는 원본 블록의 픽셀의 U 성분 값, V 성분 값을 나타낸다. r cb (i, j)와 r cr (i, j) 는 각각 현재 블록에서 추정한 움직임 벡터에 대응되는 참조 블록의 픽셀의 U 성분 값, V 성분을 나타내며, i, j 는 각각의 블록의 가로 세로 픽셀 좌표를 나타낸다. 즉, 색차 정보의 색차 보상값을 계산하는 방법의 일례로, 블록 안의 모든 색차 픽셀값들의 차이의 평균이, 색상 성분 별 색차 보상값(offset cb 와 offset cr )으로 사용될 수 있다.
다른 실시예에서, 현재 블록에 대응되는 참조 블록이 2 개 이상인 경우 또는 움직임 벡터가 2 개 이상인 경우, 현재 블록의 색차 픽셀값과 각각의 참조 블록 안의 모든 색차 픽셀값 사이의 차이의 평균이, 각각의 참조 블록에 대항하는 색차 보상값으로 결정될 수 있다. 참조 블록 별 색차 보상값은 별도로 부호화되어 비트스트림 상에 삽입되어 전송될 수 있다.
또 다른 실시예에서, 현재 블록에 대응되는 참조 블록이 2 개 이상인 경우 또는 움직임 벡터가 2 개 이상인 경우, 현재 블록에 대응하는 대표 참조 블록을 생성하여, 대표 참조 블록의 색차 픽셀과 현재 블록의 색차 픽셀의 차이의 평균이 현재 블록의 색차 보상값으로 결정될 수 있다. 대표 참조 블록은 각각의 참조 블록의 픽셀의 조합에 의해 생성될 수 있다. 예를 들어, 전-방향 참조 블록과 후-방향 참조 블록의 인터폴레이션에 에 의해 생성될 수 있다.
도 18 은 본 발명의 일 실시예에 의해, 색차 보상 수행을 위한 수학식을 도시한다.
일 실시예에 따른 다시점 비디오 부호화 장치(100)의 색차 보상 수행부(140) 및 일 실시예에 따른 다시점 비디오 복호화 장치(200)의 색차 보상 수행부(240)는 후술되는 다양한 방식을 이용하여 현재 블록에 대한 색차 보상을 수행할 수 있다.
U 성분의 색차 보상 수학식(1810) 및 V 성분의 색차 보상 수학식(1820)에서, offset cb 와 offset cr 은 각각 U 성분, V 성분의 색차 보상값을 나타내고, r cb (i, j)와 r cr (i, j) 는 각각 현재 블록에서 추정한 움직임 벡터에 대응되는 참조 블록의 픽셀의 U 성분 값, V 성분을 나타낸다.
r' cb (i, j)와 r' cr (i, j) 는 움직임 벡터를 통해 대응되는 참조 블록(또는 2개 이상의 움직임 벡터로부터 생성된 대표 참조 블록)의 픽셀의 U 성분 값 및 V 성분 값에 각각 색차 보상을 수행한 블록을 나타낸다. i, j 는 각각의 블록의 가로 세로 픽셀 좌표를 나타낸다.
즉, 색차 보상값을 이용한 색차 보상 방법의 일례로, 색차 보상값을 움직임 벡터를 통해 대응되는 참조 블록(또는 2개 이상의 움직임 벡터로부터 생성된 대표 참조 블록)의 모든 색차 픽셀들에 색차 성분 별로 색차 보상 값을 합함으로써 색차 보상이 수행될 수 있다.
다른 실시예에서, 현재 블록에 대응되는 참조 블록이 2 개 이상인 경우 또는 움직임 벡터가 2 개 이상인 경우, 각각의 참조 블록에 색차 성분 별로 색차 보상 값을 합함으로써 색차 보상이 수행될 수 있다.
또 다른 실시예에서, 현재 블록에 대응되는 참조 블록이 2 개 이상인 경우 또는 움직임 벡터가 2 개 이상인 경우, 현재 블록에 대응하는 대표 참조 블록을 생 성하여, 대표 참조 블록의 색차 픽셀에 색차 성분 별로 색차 보상값을 합함으로써 색차 보상이 수행될 수 있다. 대표 참조 블록은 각각의 참조 블록의 픽셀의 조합에 의해 생성될 수 있다. 예를 들어, 전-방향 참조 블록과 후-방향 참조 블록의 인터폴레이션에 에 의해 생성될 수 있다.
도 19 는 본 발명의 일 실시예에 의해, 색상 성분 별로 색차 보상값을 결정하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
일 실시예의 다시점 비디오 부호화 장치(100)의 색차 보상값 부호화부 및 일 실시예의 다시점 비디오 복호화 장치(200)는 후술되는 신택스 및 부복호화 방식에 의해 색차 보상값을 이용할 수 있다.
색차 보상값을 부호화하는 방식의 일 실시예는, 아래 수학식 1 에 따라, 주변 블록들로부터 색차 보상값의 예측값을 유도하여, 색차 보상 예측값과 현재 블록의 색차 보상값의 차이인 색차 보상 차분값을 부호화하여 전송할 수 있다.
색차 보상값 차분값 = 색차 보상값 - 색차 보상값의 예측값
'anchor_chroma_information()'(1900) 신택스는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스로써, 앵커 픽처에서 색차 신호를 보상하기 위한 신택스의 일례이다. 'cb_offset'(1910) 및 'cr_offset'(1920)는 각각 U 성분, V성분의 색차 보상 차분값을 나타낸다. 색차 보상값의 일례는 UVLC(Universal VLC) 또는 CABAC를 사용하여 부복호화될 수 있다.
색차 보상 차분값을 색차 정보로써 전송받은 다시점 비디오 복호화 장치(200)는 아래 수학시 2 에 따라, 전송받은 색차 보상 차분값과, 주변 블록들로부터 유도한 색차 보상값의 예측값을 합함으로써 색차 보상값을 계산할 수 있다.
색차 보상값 = 색차 보상값의 예측값 + 색차 보상값 차분값
색차 보상값의 예측값을 유도하는 방식은 이하 도 21 및 22 를 참고하여 상술된다.
도 20 는 본 발명의 다른 실시예에 의해, 색상 성분 별로 색차 보상값을 결정하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
다른 실시예의 다시점 비디오 부호화 장치(100)의 색차 보상값 부호화부(미도시) 및 다른 실시예의 다시점 비디오 복호화 장치(200)는 후술되는 신택스 및 부복호화 방식에 의해 색차 보상값을 이용할 수 있다.
색차 정보로써 색상 보상값 차분값이 부복호화되어 전송되는 경우, 각각의 색차 보상값 차분값마다 색상 보상값 사용 여부를 나타내는 플래그가 함께 전송될 수 있다. 예를 들어, 색상 보상값 사용 여부를 나타내는 플래그가 '1'이라면 해당 색차 보상값 차분값은 전송되고, 색상 보상값 사용 여부를 나타내는 플래그가 '0'이라면 해당 색차 보상값 차분값은 전송되지 않는다.
'anchor_chroma_information()'(2000) 신택스는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스로써, 앵커 픽처에서 색차 신호를 보상하기 위한 신택스의 다른 실시예이다.
'cb_offset_flag'(2010) 및 'cr_offset_flag'(2020)는 각각 U 성분, V성분의 색차 보상값 차분값을 부복호화할지 여부에 대한 플래그이다.
if 조건문에 의해 'cb_offset_flag'(2010)가 참의 조건이 만족될 때, 즉 U 성분의 색차 보상값 차분값을 사용하는 것으로 설정된 경우, 'cb_offset'(2030)가 설정된다. 마찬가지로, if 조건문에 의해 'cr_offset_flag'(2020)가 참의 조건이 만족될 때, 즉 V 성분의 색차 보상값 차분값을 사용하는 것으로 설정된 경우, 'cr_offset'(2040)가 설정된다.
따라서, 'cb_offset_flag'(2010)( 또는 'cr_offset_flag'(2020))가 '1'로 설정된 경우, 일 실시예의 다시점 비디오 부호화 장치(100)는 'cb_offset'(2030)( 또는 'cr_offset'(2040))를 부호화하여 전송하고, 일 실시예의 다시점 비디오 복호화 장치(200)는 복호화하여 색차 보상값 차분값을 색차 보상에 이용할 수 있다.
색차 보상값의 일례는 UVLC(Universal VLC) 또는 CABAC를 사용하여 부복호화될 수 있다.
색차 보상값을 결정하는 방식의 하나로, 현재 블록의 주변 블록을 이용하여 현재 블록의 색차 보상 예측값을 유도하여, 유도된 색차 보상 예측값을 현재 블록의 색차 보상값으로 사용하는 방식이 있다. 이하, 도 21 및 22를 참고하여 주변 블록들로부터 현재 블록의 색차 보상 예측값을 유도하는 방식이 상술된다.
도 21 는 본 발명의 일 실시예에 의해, 색차 보상값을 유도하기 위한 주변 블록을 도시한다.
현재 블록(X 블록)(2100)를 둘러싸고 있는 주변 블록들 중, 영상 처리 순서상 선순위에 있어 색차 보상이 완료된 A 블록(2110), B 블록(2120), C 블록(2130) 및 D 블록(2140)을 이용하여, 현재 블록의 색차 보상 예측값이 결정될 수 있다. 현재 블록을 기준으로 A 블록(2110)은 좌측 블록, B 블록(2120)은 상단 블록, C 블록(2130)은 우측 상단 블록, D 블록(2140)은 좌측 상단 블록을 나타낸다.
도 22 는 본 발명의 일 실시예에 의해, 주변 블록을 이용하여 색차 보상값을 유도하는 방법의 흐름도를 도시한다.
색차 보상값 결정부(미도시)의 색차 보상값 유도부(미도시)는, 도 21 에 도시된 주변 블록 A 블록(2110), B 블록(2120), D 블록(2140)을 이용하여 현재 블록 X 블록(2100)의 색차 보상값을 결정하는 방향성 유도 방식을 이용한다. 즉, A 블록(2110), B 블록(2120), D 블록(2140)의 방향성을 이용하여 X 블록(2100)의 색차 보상 예측값이 결정된다.
단계 2210에서, A 블록(2110), B 블록(2120), D 블록(2140)이 모두 사용 가능한 블록이지 여부가 판단된다. 만약 모두 사용 가능하다면 단계 2220로 분기한다. 모든 블록이 사용 가능한 것은 아니라면, 단계 2260으로 분기하여 X 블록(2100)의 색차 보상 예측값은 '0'으로 설정된다. 예를 들어, 주변 블록이 픽처나 슬라이스의 경계 밖인 경우, 그 주변 블록은 사용 가능하지 않은 블록이다.
단계 2220 에서, A 블록(2110), B 블록(2120), D 블록(2140)의 색차 보상값이 모두 '0' 이 아닌 경우 단계 2230 으로 분기한다. A 블록(2110), B 블록(2120), D 블록(2140) 중 색차 보상값이 '0'인 주변 블록이 있다면, 단계 2260 으로 분기하여 X 블록(2100)의 색차 보상 예측값은 '0'으로 설정된다.
예를 들어, 주변 블록이 인트라 블록일 경우 색차 보상값이 '0'으로 설정된 다. 또 다른 예로, 색차 보상을 수행하지 않는 블록도 색차 보상값이 '0'으로 설정된다.
단계 2230 에서, D 블록(2140)과 A 블록(2110) 사이의 차이의 절대값과, D 블록(2140)과 B 블록(2120) 사이의 차이의 절대값이 비교된다. 비교 결과 D 블록(2140)과 A 블록(2110) 사이의 차이의 절대값이 D 블록(2140)과 B 블록(2120) 사이의 차이의 절대값보다 작다면 (즉, |D-A| < |D-B| 라면,) 단계 2240으로 분기한다. 그렇지 않다면 단계 2250으로 분기한다.
단계 2240 에서, X 블록(2100)의 색차 보상 예측값은 B 블록(2120)의 색차 보상값으로 결정된다. 즉, D 블록(2140)과 A 블록(2110) 사이의 차이의 절대값이 더 작으므로, D 블록(2140)과 A 블록(2110)이 동일 선상에 위치해 있고, D 블록(2140)과 A 블록(2110)의 선과 평행한 방향으로 B 블록(2120)과 X 블록(2100)이 동일 선상에 위치해 있다고 유추될 수 있다.
단계 2250 에서, X 블록(2100)의 색차 보상 예측값은 A 블록(2110)의 색차 보상값으로 결정된다. 즉, D 블록(2140)과 B 블록(2120) 사이의 차이의 절대값이 더 작으므로, D 블록(2140)과 B 블록(2120)이 동일 선상에 위치해 있고, D 블록(2140)과 B 블록(2120)의 선과 평행한 방향으로 A 블록(2110)과 X 블록(2100)이 동일 선상에 위치해 있다고 유추될 수 있다.(이상, 방향성 유도 방식)
주변 블록을 이용한 색차 보상 예측값 유도 방식의 다른 예(중앙값 유도 방식)는, 주변 블록으로 A 블록(2110), B 블록(2120), C 블록(2130) 및 D 블록(2140)을 기본적으로 모두 이용하고, C 블록(2130)이 사용 가능하지 않다면 D 블록(2140) 을 대신 사용할 수 있다.
A 블록(2110), B 블록(2120), C 블록(2130) 중 오직 하나의 블록만이 X 블록(2100)와 참조 인덱스가 동일하다면, 동일한 참조 인덱스를 가진 주변 블록의 색차 보상값이 X 블록(2100)의 색차 보상 예측값으로 설정된다. X 블록(2100)과 참조 인덱스가 동일한 주변 블록이 둘 이상이라면, A 블록(2110), B 블록(2120), C 블록(2130)의 색차 보상값들의 중앙값(median)이 X 블록(2100)의 색차 보상 예측값으로 설정된다.
주변 블록이 인트라 블록인 경우 색차 보상값이 '0'으로 설정될 수 있다. 또한 색차 보상이 수행되지 않는 블록에 대한 색차 보상값은 '0'으로 설정될 수 있다.(이상, 중앙값 유도 방식)
주변 블록을 이용한 색차 보상 예측값 유도 방식의 또 다른 예(평균값 유도 방식)는, A 블록(2110), B 블록(2120)을 주변 블록으로 이용한다. A 블록(2110), B 블록(2120)의 색차 보상값이 모두 존재한다면( 즉 색차 보상값이 '0'이 아니라면,) 두 블록의 색차 보상값의 평균이 X 블록(2100)의 색차 보상 예측값으로 결정될 수 있다.
만약 A 블록(2110) 및 B 블록(2120) 중 하나만이 그 색차 보상값이 존재한다면, 존재하는 색차 보상값이 X 블록(2100)의 색차 보상 예측값으로 결정될 수 있다.
만약, A 블록(2110) 및 B 블록(2120) 모두 색차 보상값이 존재하지 않는다면, 색차 보상 예측값은 '0'으로 설정된다.(이상, 평균값 유도 방식)
주변 블록을 이용한 색차 보상 예측값 유도 방식의 또 다른 예는, A 블록(2110), B 블록(2120)을 주변 블록으로 이용하며, 색차 보상값의 유무를 나타내는 플래그가 존재한다. 만약 A 블록(2110), B 블록(2120)이 모두 색차 보상값이 존재한다면 두 색차 보상값의 평균값이 X 블록(2100)의 색차 보상 예측값으로 결정되는데, 평균값이 '0'이라면 색차 보상값의 유무를 나타내는 플래그가 '0'으로 설정된다.(이상, 플래그가 설정된 평균값 유도 방식)
주변 블록을 이용한 색차 보상 예측값 유도 방식의 또 다른 예(우선순위 유도 방식)는, A 블록(2110), B 블록(2120), C 블록(2130), D 블록(2140)을 주변 블록으로 이용한다. A 블록(2110), B 블록(2120), C 블록(2130), D 블록(2140)의 순서로 주변 블록의 우선 순위가 설정된다. 우선 순위에 따라 소정 주변 블록의 색차 보상값이 존재하고, X 블록(2100)과 참조 인덱스가 동일하다면 해당 주변 블록의 색차 보상값이 X 블록(2100)의 색차 보상 예측값으로 결정된다.
만약 그렇지 않고, A 블록(2110), B 블록(2120), C 블록(2130)의 색차 보상값이 존재한다면, A 블록(2110), B 블록(2120), C 블록(2130)의 색차 보상값의 중앙값이 X 블록(2100)의 색차 보상 예측값으로 결정된다.
만약 그렇지 않다면 색차 보상 예측값은 '0'으로 결정된다.(이하, 우선순위 유도 방식)
마지막으로, 주변 블록을 이용한 색차 보상 예측값 유도 방식의 또 다른 예는 전술된 유도 방식들 이외에도, A 블록(2110), B 블록(2120), C 블록(2130), D 블록(2140)을 다양하게 조합하여 X 블록(2100)d의 색차 보상 예측값을 유도해낼 수 있다.
도 23 는 본 발명의 다른 실시예에 따른 다시점 비디오 부호화 장치의 블록도를 도시한다.
다른 실시예에 의한 다시점 비디오 부호화 장치(2300)는 색차 보상 수행 여부 판단부(2310), 색차 보상값 유도부(2320), 색차 보상값 계산부(2330), 움직임 보상 및/또는 색차 보상부(2340) 및 색차 보상값 부호화부(2350)를 포함한다.
색차 보상 수행 여부 판단부(2310)는, 현재 픽처가 앵커 픽처인지 여부를 나타내는 앵커 픽처 플래그, 현재 부호화하려는 블록의 블록 모드 정보, 현재 픽처의 제 2 픽처 타입 정보 및 기타 사용자 정보 등을 입력받아, 입력 정보 등에 기초하여 색차 보상을 수행할지 여부를 판단한다.
도 4a 내지 6b 를 참고하여 전술된 일 실시예에 따르는 색차 보상 수행 여부 판단부(2310)는, 현재 픽처가 앵커 픽처이고, 현재 블록 타입이 소정 블록 타입이라면 색차 보상값 계산부(2330)으로 분기하고, 그렇지 않다면 움직임 보상 및/또는 색차 보상부(2340)로 분기한다.
도 7a 내지 9b 를 참고하여 전술된 일 실시예에 따르는 색차 보상 수행 여부 판단부(2310)는, 현재 픽처가 앵커 픽처이고, 소정 픽처 타입(P 픽처 타입)의 소정 블록 타입이라면 색차 보상값 계산부(2330)으로 분기하고, 그렇지 않다면 움직임 보상 및/또는 색차 보상부(2340)로 분기한다.
도 10a 내지 13b 를 참고하여 전술된 일 실시예에 따르는 색차 보상 수행 여부 판단부(2310)는, 현재 픽처가 앵커 픽처이고 색차 보상 수행 여부 플래그가 '1' 로 설정되어 있고, 현재 블록 타입이 소정 블록 타입이라면 색차 보상값 계산부(2330)으로 분기하고, 그렇지 않다면 움직임 보상 및/또는 색차 보상부(2340)로 분기한다.
도 14 내지 16b 를 참고하여 전술된 일 실시예에 따르는 색차 보상 수행 여부 판단부(2310)는, 현재 픽처가 앵커 픽처이고 현재 블록 타입이 스킵 모드 블록이라면 색차 보상값 유도부(2320)로 분기하고, 현재 블록 타입이 스킵 모드 블록이 아닌 소정 블록 타입이라면 색차 보상값 계산부(2330)로 분기한다. 그렇지 않다면 움직임 보상 및/또는 색차 보상부(2340)로 분기한다.
색차 보상값 유도부(2320)는, 현재 블록의 주변 블록들의 정보를 입력받아, 도 21 및 22를 참고하여 전술된 색차 보상값 유도 방식을 이용하여 현재 블록의 색차 보상값을 결정하고 움직임 보상 및/또는 색차 보상부(2340)로 출력한다.
색차 보상값 계산부(2330)는, 현재 원본 블록 및 참조 블록을 입력 받아 현재 블록의 색차 보상값을 결정하여 움직임 보상 및/또는 색차 보상부(2340)로 출력한다. 여기서 도 17 을 참고하여 전술된 색차 보상값 결정 방식을 이용하여 색차 보상값이 결정된다.
움직임 보상 및/또는 색차 보상부(2340)는, 색차 보상값 유도부(2320) 또는 색차 보상값 계산부(2330)로부터 입력된 색차 보상값 및 참조 영상, 움직임 벡터를 입력 받아, 색차 보상 및 움직임 보상을 수행한다. 색차 보상 및 움직임 보상은 동시에 수행될 수도 있으며 별개로 수행될 수도 있다. 움직임 보상 및/또는 색차 보상부(2340)는 도 18 을 참고하여 전술된 색차 보상 방식을 이용할 수 있다.
색차 보상값 부호화부(2350)는 움직임 보상 및/또는 색차 보상부(2340)로부터 입력된 색차 보상값 또는 주변 블록의 색차 정보를 부호화하여 비트스트림에 삽입할 수 있다. 색차 보상값을 포함한 색차 정보는 도 19 및 20을 참고하여 전술된 부호화 방식을 이용하여 부호화될 수 있다.
도 24 는 본 발명의 다른 실시예에 따른 다시점 비디오 복호화 장치의 블록도를 도시한다.
다른 실시예에 의한 다시점 비디오 복호화 장치(2400)는 색차 보상값 복호화 여부 판단부(2410), 색차 보상값 복호화부(2420), 색차 보상값 유도부(2430) 및 움직임 보상 및/또는 색차 보상부(2440)를 포함한다.
색차 보상값 복호화 여부 판단부(2410)는, 복호화하려는 현재 픽처의 앵커 픽처 플래그, 현재 복호화하려는 블록의 블록 모드 정보, 현재 픽처의 제 2 픽처 타입 정보 및 색차 보상 및 복호화 허용 플래그 등을 입력받아, 입력 정보 등에 기초하여 색차 보상을 수행할지 여부를 판단한다.
도 4a 내지 6b 를 참고하여 전술된 일 실시예에 따르는 색차 보상값 복호화 여부 판단부(2410)는, 현재 픽처가 앵커 픽처이고, 현재 블록 타입이 소정 블록 타입이라면 색차 보상값 복호화부(2420)로 분기하고, 그렇지 않다면 움직임 보상 및/또는 색차 보상부(2440)로 분기한다.
도 7a 내지 9b 를 참고하여 전술된 일 실시예에 따르는 색차 보상값 복호화 여부 판단부(2410)는, 현재 픽처가 앵커 픽처이고, 소정 픽처 타입(P 픽처 타입)의 소정 블록 타입이라면 색차 보상값 복호화부(2420)로 분기하고, 그렇지 않다면 움 직임 보상 및/또는 색차 보상부(2440)로 분기한다.
도 10a 내지 13b 를 참고하여 전술된 일 실시예에 따르는 색차 보상값 복호화 여부 판단부(2410)는, 현재 픽처가 앵커 픽처이고 색차 보상 수행 여부 플래그가 '1'로 설정되어 있고, 현재 블록 타입이 소정 블록 타입이라면 색차 보상값 복호화부(2420)로 분기하고, 그렇지 않다면 움직임 보상 및/또는 색차 보상부(2440)로 분기한다.
도 14 내지 16b 를 참고하여 전술된 일 실시예에 따르는 색차 보상값 복호화 여부 판단부(2410)는, 현재 픽처가 앵커 픽처이고 현재 블록 타입이 스킵 모드 블록이라면 색차 보상값 복호화부(2420)로 분기하고, 현재 블록 타입이 스킵 모드 블록이 아닌 소정 블록 타입이라면 색차 보상값 유도부(2430)로 분기한다. 그렇지 않다면 움직임 보상 및/또는 색차 보상부(2440)로 분기한다.
색차 보상값 복호화부(2420)는, 색차 보상 정보 비트스트림을 입력 받아 색차 보상값의 복호화를 수행한다. 여기서 도 19 및 20 의 색차 정보 부복호화 방식이 이용될 수 있다. 색차 보상값 복호화부(2420)는, 현재 블록의 색차 보상값을 결정하여 움직임 보상 및/또는 색차 보상부(2440)로 출력한다.
색차 보상값 유도부(2430)는, 현재 블록의 주변 블록들의 정보를 입력받아, 도 21 및 22를 참고하여 전술된 색차 보상값 유도 방식을 이용하여 현재 블록의 색차 보상값을 결정하고 움직임 보상 및/또는 색차 보상부(2440)로 출력한다.
움직임 보상 및/또는 색차 보상부(2440)는, 색차 보상값 복호화부(2320) 또는 색차 보상값 유도부(2430)로부터 입력된 색차 보상값 및 참조 영상, 움직임 벡 터를 입력 받아, 색차 보상 및 움직임 보상을 수행한다. 색차 보상 및 움직임 보상은 동시에 수행될 수도 있으며 별개로 수행될 수도 있다. 움직임 보상 및/또는 색차 보상부(2440)는 도 18 을 참고하여 전술된 색차 보상 방식을 이용할 수 있으며, 움직임 보상 및/또는 색차 보상된 영상을 출력한다.
도 25 는 본 발명의 일 실시예에 따른 다시점 비디오 부호화 방법의 흐름도를 도시한다.
단계 2510 에서, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입이 결정된다.예를 들어, 제 1 픽처 타입에 의해, 해당 픽처는, 동일 시간대의 다른 시점의 픽처만 참조하고 동일 시점 상의 다른 픽처들의 참조 대상이 되는 픽처인 앵커 픽처 타입과 넌-앵커 픽처 타입으로 분류될 수 있다.
단계 2520 에서, 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입이 결정된다. 블록 타입은 움직임 벡터의 결정 방식에 따라 분류되는 블록 타입으로써, 예를 들어, 스킵 모드 블록, 인터 모드 블록, 다이렉트 모드 블록 등 중 적어도 하나를 포함하는 집합을 소정 블록 타입이라 하고, 현재 블록이 소정 블록 타입인지 여부가 결정된다.
단계 2530 에서, 블록 타입 및 제 1 픽처 타입 중 적어도 하나에 기초하여, 현재 블록에 대한 색차 보상값이 결정된다. 소정 블록 타입, 앵커 픽처, P 픽처, 색차 보상 수행 여부 플래그가 설정되는지 여부에 따라 색차 보상값이 결정될 수 있다. 색차 보상값은 현재 블록에 대한 색차 보상을 수행함으로써 직접 획득될 수 있지만, 주변 블록의 색차 보상값으로부터 유도될 수도 있다.
단계 2540 에서, 색차 보상값을 이용하여 현재 블록에 대한 색차 보상이 수행된다. 색차 보상은 참조 블록의 색차 픽셀에 색차 보상값이 합해진 값이 현재 블록의 색차 픽셀값으로 대체됨으로써 수행될 수 있다.
단계 2550 에서, 색차 보상값이 부호화되어 비트스트림 상에 삽입되어 전송된다. 색차 보상값은 그 자체로도 부호화될 수 있으며, 현재 블록의 색차 보상값과 주변 블록으로부터의 색차 보상 예측값과의 차분값이 부호화되어 부호화 효율을 기할 수 있다. 또한, 색차 보상과 관려하여 설정된 플래그들이 동일 비트스트림에 삽입될 수도 있다. 또는 플래그들은 별도의 비트스트림에 삽입될 수도 있다.
도 26 는 본 발명의 일 실시예에 따른 다시점 비디오 복호화 방법의 흐름도를 도시한다.
단계 2610 에서, 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입이 판독된다. 일례로, 비트스트림 상의 현재 픽처의 제 1 픽처 타입을 나타내는 신택스를 판독하여 현재 픽처가 앵커 픽처인지 여부를 판단할 수 있다.
단계 2620 에서, 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입이 판독된다. 일례로, 비트스트림 상의 현재 블록의 블록 타입을 나타내는 신택스를 판독하여 현재 블록이 스킵 모드, 인터 모드, 다이렉트 모드 등인지 여부를 판단할 수 있다.
단계 2630 에서, 제 1 픽처 타입 및 블록 타입 중 적어도 하나에 기초하여, 현재 블록에 대한 색차 보상값이 판독된다. 소정 블록 타입, 앵커 픽처, P 픽처, 색차 보상 수행 여부 플래그가 설정되어 있는지 여부에 따라 색차 보상값이 결정될 수 있다. 색차 보상값은 현재 블록에 대한 색차 보상을 수행함으로써 직접 획득될 수 있지만, 주변 블록의 색차 보상값으로부터 유도될 수도 있다.
단계 2640 에서, 색차 보상값을 이용하여 현재 블록에 대한 색차 보상이 수행된다. 색차 보상은 참조 블록의 색차 픽셀에 색차 보상값이 합해진 값이 현재 블록의 색차 픽셀값으로 대체됨으로써 수행될 수 있다.
단계 2650 에서, 색차 보상이 수행된 현재 블록이 복원되고 현재 픽처가 복원된다.
한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등) 및 캐리어 웨이브(예를 들면, 인터넷을 통한 전송)와 같은 저장매체를 포함한다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
도 1 은 본 발명의 일 실시예에 따른 다시점 비디오 부호화 장치의 블록도를 도시한다.
도 2 은 본 발명의 일 실시예에 따른 다시점 비디오 복호화 장치의 블록도를 도시한다.
도 3 은 다시점 비디오 부복호화 기법에서 앵커 픽처 및 다른 픽더들의 예측 방식을 도시한다.
도 4a 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입 및 블록 타입을 고려한 색차 보상값 부호화 방법의 흐름도를 도시한다.
도 4b 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입 및 블록 타입을 고려한 색차 보상값 복호화 방법의 흐름도를 도시한다.
도 5a 및 5b 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
도 6a 및 6b 는 본 발명의 다른 실시예에 의해, 제 1 픽처 타입 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
도 7a 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입,제 2 픽처 타입 및 블록 타입을 고려한 색차 보상값 부호화 방법의 흐름도를 도시한다.
도 7b 는 본 발명의 일 실시예에 의해, 제 1 픽처 타입, 제 2 픽처 타입 및 블록 타입을 고려한 색차 보상값 복호화 방법의 흐름도를 도시한다.
도 8 은 본 발명의 일 실시예에 의해, 제 1 픽처 타입, 제 2 픽처 타입 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
도 9a 및 9b 은 본 발명의 일 실시예에 의해, 제 1 픽처 타입, 제 2 픽처 타입 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
도 10a 는 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상값 부호화 방법의 흐름도를 도시한다.
도 10b 는 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상값 복호화 방법의 흐름도를 도시한다.
도 11 은 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보를 나타내는 신택스를 도시한다.
도 12 는 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
도 13a 및 13b 은 본 발명의 다른 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
도 14 는 본 발명의 일 실시예에 의해, 블록 타입에 기초하여 색차 보상값 결정 방식이 구분되는 다시점 비디오 부호화 방법의 흐름도를 도시한다.
도 15 는 본 발명의 일 실시예에 의해, 블록 타입에 기초하여 색차 보상값 결정 방식이 구분되는 다시점 비디오 복호화 방법의 흐름도를 도시한다.
도 16a 및 16b 은 본 발명의 일 실시예에 의해, 색차 보상 수행 여부 정보 및 블록 타입을 고려한 색차 보상을 구현하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
도 17 은 본 발명의 일 실시예에 의해, 색차 보상값 결정을 위한 수학식을 도시한다.
도 18 은 본 발명의 일 실시예에 의해, 색차 보상 수행을 위한 수학식을 도시한다.
도 19 는 본 발명의 일 실시예에 의해, 색상 성분 별로 색차 보상값을 결정하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
도 20 는 본 발명의 다른 실시예에 의해, 색상 성분 별로 색차 보상값을 결정하는 다시점 비디오 부복호화 방법을 구현하기 위한 신택스를 도시한다.
도 21 는 본 발명의 일 실시예에 의해, 색차 보상값을 유도하기 위한 주변 블록을 도시한다.
도 22 는 본 발명의 일 실시예에 의해, 주변 블록을 이용하여 색차 보상값을 유도하는 방법의 흐름도를 도시한다.
도 23 는 본 발명의 다른 실시예에 따른 다시점 비디오 부호화 장치의 블록도를 도시한다.
도 24 는 본 발명의 다른 실시예에 따른 다시점 비디오 복호화 장치의 블록도를 도시한다.
도 25 는 본 발명의 일 실시예에 따른 다시점 비디오 부호화 방법의 흐름도를 도시한다.
도 26 는 본 발명의 일 실시예에 따른 다시점 비디오 복호화 방법의 흐름도를 도시한다.

Claims (33)

  1. 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 판독하는 단계;
    상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 판독하는 단계;
    상기 제 1 픽처 타입 및 상기 블록 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 판독하는 단계; 및
    상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  2. 제 1항에 있어서, 상기 다시점 비디오 복호화 방법은,
    상기 색차 보상이 수행된 현재 블록을 복원하고 상기 현재 픽처를 복원하는 단계를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  3. 제 1 항에 있어서, 상기 색차 보상값 판독 단계는,
    상기 제 1 픽처 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 여부를 판단하는 단계를 포함하고
    상기 제 1 픽처 타입 정보는, 상기 현재 픽처가, 동일 시점 상의 다른 픽처의 인터 예측을 위한 기준 픽처이고, 다른 시점 상의 다른 픽처의 뷰간 예측을 위한 기준 픽처인지 여부를 나타내는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  4. 제 3 항에 있어서, 상기 색차 보상값 판독 단계는,
    상기 제 1 픽처 타입 및 상기 블록 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 여부를 판단하는 단계를 더 포함하고,
    상기 블록 타입은, 상기 현재 블록이 스킵 모드 블록 타입인지 여부를 나타내는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  5. 제 2 항에 있어서,
    상기 다시점 비디오 복호화 방법은, 상기 현재 픽처의 제 2 픽처 타입을 판독하는 단계를 더 포함하고,
    상기 색차 보상값 판독 단계는, 상기 제 1 픽처 타입, 상기 블록 타입 및 상기 제 2 픽처 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 수행 여부를 판단하는 단계를 더 포함하고,
    상기 제 2 픽처 타입은 I 픽처 타입, P 픽처 타입 및 B 픽처 타입 중 적어도 하나를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  6. 제 4 항에 있어서,
    상기 다시점 비디오 복호화 방법은, 상기 현재 픽처의 색차 보상 수행 여부를 나타내는 플래그를 판독하는 단계를 더 포함하고,
    상기 색차 보상값 판독 단계는, 상기 제 1 픽처 타입, 상기 플래그 및 상기 블록 타입에 기초하여, 상기 현재 블록에 대한 색차 보상 수행 여부를 판단하는 단계를 더 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  7. 제 4 항에 있어서, 상기 색차 보상값 판독 단계는,
    상기 현재 블록의 블록 타입이 스킵 블록 타입이라면, 상기 현재 블록의 주변 블록의 색차 보상값을 이용하여 상기 현재 블록의 색차 보상값을 유도하는 단계; 및
    상기 현재 블록의 블록 타입이 스킵 블록 타입이 아니라면, 상기 현재 블록에 대한 색차 보상을 수행하여 상기 현재 블록의 색차 보상값을 결정하는 단계를 더 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  8. 제 1 항에 있어서, 상기 색차 보상값 판독 단계는,
    상기 현재 블록에 대한 색차 보상 차분값을 판독하는 단계;
    상기 현재 블록의 주변 블록들의 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상 예측값을 계산하는 단계; 및
    상기 색차 보상 예측값 및 상기 색차 보상 차분값을 더하여, 상기 현재 블록의 색차 보상값을 결정하는 단계를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  9. 제 8 항에 있어서,
    상기 색차 보상값 판독 단계는, 상기 색차 보상 차분값에 대하여 색차 보상값 사용 여부를 나타내는 플래그를 판독하는 단계를 더 포함하고,
    상기 색차 보상 수행 단계는, 상기 색차 보상값 사용 여부를 나타내는 플래그에 기초하여, 상기 현재 블록에 대한 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 더 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  10. 제 7 항에 있어서, 상기 색차 보상값 유도 단계는,
    상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 3 블록에 있어서,
    상기 제 1 블록 및 상기 제 3 블록의 픽셀값의 차의 절대값 및 상기 제 2 블록 및 상기 제 3 블록의 픽셀값의 차의 절대값을 비교하는 단계; 및
    상기 비교 결과에 기초하여 상기 제 1 블록 및 상기 제 2 블록 중 하나의 색차 보상값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계를 더 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  11. 제 7 항에 있어서, 상기 색차 보상값 유도 단계는,
    상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록에 있어서,
    상기 제 1 블록, 상기 제 2 블록 및 상기 제 3 블록의 색차 보상값의 중앙값(median)을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계를 더 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  12. 제 7 항에 있어서, 상기 색차 보상값 유도 단계는,
    상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록에 있어서,
    상기 제 1 블록 및 상기 제 2 블록의 색차 보상값의 평균값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계를 더 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  13. 제 7 항에 있어서, 상기 색차 보상값 유도 단계는,
    제 상기 현재 블록의 좌측 블록을 나타내는 제 1 블록, 상기 현재 블록의 상단 블록을 나타내는 제 2 블록, 상기 현재 블록의 우측 상단 블록을 나타내는 제 3 블록, 상기 현재 블록의 좌측 상단 블록을 나타내는 제 4 블록의 순서로, 상기 현재 블록의 주변 블록 중 우선 순위를 결정하는 단계;
    상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일하고 색차 보상값이 존재하는 블록의 색차 보 상값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계;
    상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록, 상기 제 4 블록 중에서, 상기 현재 블록과 참조 인덱스가 동일한 블록이 없다면, 상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값의 중앙값을 상기 현재 블록의 색차 보상 예측값으로 결정하는 단계; 및
    상기 제 1 블록, 상기 제 2 블록, 상기 제 3 블록의 색차 보상값이 없다면, 상기 현재 블록의 색차 보상 예측값을 '0'으로 결정하는 단계를 더 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  14. 제 6 항에 있어서,
    상기 색차 보상 수행 여부를 나타내는 플래그가 '0' 이라면 상기 색차 보상값을 '0'으로 결정하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  15. 제 6 항에 있어서,
    상기 색차 보상 수행 여부를 나타내는 플래그는, 상기 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관계에 있는 참조 픽처의 Y, U, V 성분별 픽셀값의 평균 간의 차의 절대값이 조합된 값에 기초하여 설정된 것을 특징으로 하는 다시점 비디오 복호화 방법.
  16. 제 15 항에 있어서,
    상기 절대값이 조합된 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 합을 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  17. 제 15 항에 있어서,
    상기 절대값이 조합된 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값을 합하고, 그 합의 제곱근을 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  18. 제 15 항에 있어서,
    상기 절대값이 조합된 값은, 상기 Y, U, V 성분별 평균의 차의 절대값의 제곱값의 평균을 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  19. 제 6 항에 있어서,
    상기 색차 보상 수행 여부를 나타내는 플래그는, 상기 현재 픽처의 픽셀값의 평균 및 상기 현재 픽처와 참조 관계에 있는 참조 픽처의 U, V 성분별 픽셀값의 평균 간의 차의 절대값을, 각각의 색상 성분 별 소정 임계값과 비교한 결과에 기초하여 설정된 것을 특징으로 하는 다시점 비디오 복호화 방법.
  20. 제 6 항에 있어서,
    상기 색차 보상 수행 여부를 나타내는 플래그는, 상기 현재 픽처의 양자화 파라미터에 기초하여 설정된 것을 특징으로 하는 다시점 비디오 복호화 방법.
  21. 제 6 항에 있어서,
    상기 색차 보상 수행 여부를 나타내는 플래그는, 사용자 입력에 기초하여 설정된 것을 특징으로 하는 다시점 비디오 복호화 방법.
  22. 제 1 항에 있어서, 상기 색차 보상값 판독 단계는,
    상기 색차 보상값은, 상기 현재 블록 및 상기 현재 블록과 참조 관계에 있는 참조 블록의 모든 픽셀 값의 차이의 평균을 색상 성분 별로 결정한 값들을 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  23. 제 1 항에 있어서, 상기 색차 보상값 판독 단계는,
    상기 색차 보상값은, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 각각의 참조 블록 별로, 상기 현재 블록 및 상기 각각의 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 결정한 값들을 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  24. 제 1 항에 있어서, 상기 색차 보상값 판독 단계는,
    상기 색차 보상값은, 상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 참조 블록들을 이용하여 생성된 대표 참조 블록에 기초하여, 상 기 현재 블록 및 상기 대표 참조 블록의 픽셀값들의 차이의 평균을 색상 성분 별로 결정한 값들을 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  25. 제 24 항에 있어서,
    상기 대표 참조 블록은, 상기 참조 블록들의 인터폴레이션을 수행하여 생성된 것을 특징으로 하는 다시점 비디오 복호화 방법.
  26. 제 1 항에 있어서, 상기 색차 보상 수행 단계는,
    상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 현재 블록과 참조 관계에 있는 참조 블록의 픽셀값에 합하는 단계를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  27. 제 1 항에 있어서, 상기 색차 보상 수행 단계는,
    상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 각각의 참조 블록의 픽셀값에 합하는 단계를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  28. 제 1 항에 있어서, 상기 색차 보상 수행 단계는,
    상기 현재 블록과 참조 관계에 있는 참조 블록이 2개 이상이라면, 상기 현재 블록에 대한 색차 보상값을 색상 성분별로, 상기 참조 블록들을 이용하여 생성된 대표 참조 블록의 픽셀값에 합하는 단계를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 방법.
  29. 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 결정하는 단계;
    상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 결정하는 단계;
    상기 블록 타입 및 상기 제 1 픽처 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 결정하는 단계; 및
    상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 방법.
  30. 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 판독하는 제 1 픽처 타입 판독부;
    상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 판독하는 블록 타입 판독부;
    상기 제 1 픽처 타입 및 상기 블록 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 판독하는 색차 보상값 판독부; 및
    상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 색차 보상 수행부를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 장치.
  31. 현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 결정하는 제 1 픽처 타입 결정부;
    상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 결정하는 블록 타입 결정부;
    상기 블록 타입 및 상기 제 1 픽처 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 결정하는 색차 보상값 결정부; 및
    상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 색차 보상 수행부를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 장치.
  32. 다시점 비디오 부호화 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체에 있어서,
    상기 다시점 비디오 부호화 방법은,
    현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 결정하는 단계;
    상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 결정하는 단계;
    상기 블록 타입 및 상기 제 1 픽처 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 결정하는 단계; 및
    상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함하는 것을 특징으로 하는 기록 매체.
  33. 다시점 비디오 복호화 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체에 있어서,
    상기 다시점 비디오 복호화 방법은,
    현재 픽처가 인터 예측을 위한 기준 픽처 타입인지 여부를 나타내는 제 1 픽처 타입을 판독하는 단계;
    상기 현재 픽처 내의 현재 블록의 움직임 벡터의 결정 방식을 나타내는 블록 타입을 판독하는 단계;
    상기 제 1 픽처 타입 및 상기 블록 타입 중 적어도 하나에 기초하여, 상기 현재 블록에 대한 색차 보상값을 판독하는 단계; 및
    상기 색차 보상값을 이용하여 상기 현재 블록에 대한 색차 보상을 수행하는 단계를 포함하는 것을 특징으로 하는 기록 매체.
KR1020080087437A 2008-01-10 2008-09-04 색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치 KR101524465B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020080087437A KR101524465B1 (ko) 2008-01-10 2008-09-04 색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치
US12/812,566 US8948264B2 (en) 2008-01-10 2009-01-06 Method and apparatus for multi-view video encoding using chrominance compensation and method and apparatus for multi-view video decoding using chrominance compensation
PCT/KR2009/000035 WO2009088195A2 (ko) 2008-01-10 2009-01-06 색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR20080002915 2008-01-10
KR1020080002915 2008-01-10
US4608008P 2008-04-18 2008-04-18
US61/046,080 2008-04-18
KR1020080087437A KR101524465B1 (ko) 2008-01-10 2008-09-04 색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치

Publications (2)

Publication Number Publication Date
KR20090077654A KR20090077654A (ko) 2009-07-15
KR101524465B1 true KR101524465B1 (ko) 2015-06-02

Family

ID=45466977

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080087437A KR101524465B1 (ko) 2008-01-10 2008-09-04 색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치

Country Status (3)

Country Link
US (1) US8948264B2 (ko)
KR (1) KR101524465B1 (ko)
WO (1) WO2009088195A2 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8917775B2 (en) * 2007-05-02 2014-12-23 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding multi-view video data
KR101893559B1 (ko) 2010-12-14 2018-08-31 삼성전자주식회사 다시점 비디오 부호화/복호화 장치 및 방법
US9536162B2 (en) * 2011-01-17 2017-01-03 Republic of Korea (National Forensic Service Director Ministry of Public Administration and Security) Method for detecting an invisible mark on a card
US9781442B2 (en) 2012-09-17 2017-10-03 Lg Electronics Inc. Method and apparatus for processing video signal
KR102264679B1 (ko) 2013-10-14 2021-06-14 삼성전자주식회사 휘도 보상 여부에 따른 뷰 합성 예측 적용 방법 및 장치
KR101761523B1 (ko) * 2013-10-17 2017-07-25 미디어텍 인크. 멀티뷰 및 3차원 비디오 코딩시의 모션 정보 예측 및 상속 방법
US11973983B2 (en) * 2019-10-11 2024-04-30 Qualcomm Incorporated Signaling coding scheme for residual values in transform skip for video coding

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060232666A1 (en) * 2003-08-05 2006-10-19 Koninklijke Philips Electronics N.V. Multi-view image generation
US20070064799A1 (en) * 2005-09-21 2007-03-22 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding multi-view video
US20100266042A1 (en) * 2007-03-02 2010-10-21 Han Suh Koo Method and an apparatus for decoding/encoding a video signal

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100397511B1 (ko) 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
JP4114859B2 (ja) 2002-01-09 2008-07-09 松下電器産業株式会社 動きベクトル符号化方法および動きベクトル復号化方法
US7489342B2 (en) * 2004-12-17 2009-02-10 Mitsubishi Electric Research Laboratories, Inc. Method and system for managing reference pictures in multiview videos
US7671894B2 (en) 2004-12-17 2010-03-02 Mitsubishi Electric Research Laboratories, Inc. Method and system for processing multiview videos for view synthesis using skip and direct modes
KR100959536B1 (ko) * 2006-03-30 2010-05-27 엘지전자 주식회사 비디오 신호를 디코딩/인코딩하기 위한 방법 및 장치
US7772533B2 (en) * 2006-09-25 2010-08-10 Symbol Technologies, Inc. Multi-sensor image capture device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060232666A1 (en) * 2003-08-05 2006-10-19 Koninklijke Philips Electronics N.V. Multi-view image generation
US20070064799A1 (en) * 2005-09-21 2007-03-22 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding multi-view video
US20100266042A1 (en) * 2007-03-02 2010-10-21 Han Suh Koo Method and an apparatus for decoding/encoding a video signal

Also Published As

Publication number Publication date
US20120014449A1 (en) 2012-01-19
KR20090077654A (ko) 2009-07-15
US8948264B2 (en) 2015-02-03
WO2009088195A3 (ko) 2009-09-03
WO2009088195A2 (ko) 2009-07-16

Similar Documents

Publication Publication Date Title
KR101560182B1 (ko) 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치
KR101920353B1 (ko) 영상 정보 부호화 방법 및 복호화 방법과 이를 이용한 장치
US9066104B2 (en) Spatial block merge mode
US8737480B2 (en) Joint spatial and temporal block merge mode for HEVC
CN106791834B (zh) 对图像进行解码的方法和设备
KR101947142B1 (ko) 스킵 모드를 이용한 영상 복호화 방법 및 이러한 방법을 사용하는 장치
JP4999864B2 (ja) 映像符号化方法及び復号方法、それらの装置、それらのプログラム並びにプログラムを記録した記憶媒体
KR102019640B1 (ko) 오류 내성을 향상시킨 비디오 인코딩 및 디코딩
JP5061179B2 (ja) 照明変化補償動き予測符号化および復号化方法とその装置
KR20230042673A (ko) 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
US20140002594A1 (en) Hybrid skip mode for depth map coding and decoding
KR101524465B1 (ko) 색차 보상을 이용한 다시점 비디오 부호화 방법과 그 장치 및 다시점 비디오 복호화 방법과 그 장치
KR20130016172A (ko) 인터 예측 부호화된 동영상 복호화 방법
WO2008136607A1 (en) Method and apparatus for encoding and decoding multi-view video data
CN111543055A (zh) 视频编码设备、视频解码设备、视频编码方法、视频解码方法、程序和视频系统
CN110868589A (zh) 帧间预测方法、装置及其应用的编/解方法及装置
CN112889290A (zh) 编码器、解码器和使用ibc合并列表的对应方法
JP2018107580A (ja) 動画像符号化装置、動画像符号化方法、動画像符号化用コンピュータプログラム、動画像復号装置及び動画像復号方法ならびに動画像復号用コンピュータプログラム
JP6825506B2 (ja) 動画像符号化装置、動画像符号化方法、動画像符号化用コンピュータプログラム、動画像復号装置及び動画像復号方法ならびに動画像復号用コンピュータプログラム
CN111010565A (zh) 帧间预测方法、装置及其应用的编/解方法及装置
Ryu et al. Analysis of motion vector predictor in multiview video coding system
KR20080097914A (ko) 다시점 동영상의 부호화 및 복호화 방법과 그 장치
KR101261577B1 (ko) 다시점 동영상을 부호화 및 복호화하는 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180406

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190402

Year of fee payment: 5