WO2015142057A1 - 다시점 비디오 신호 처리 방법 및 장치 - Google Patents

다시점 비디오 신호 처리 방법 및 장치 Download PDF

Info

Publication number
WO2015142057A1
WO2015142057A1 PCT/KR2015/002632 KR2015002632W WO2015142057A1 WO 2015142057 A1 WO2015142057 A1 WO 2015142057A1 KR 2015002632 W KR2015002632 W KR 2015002632W WO 2015142057 A1 WO2015142057 A1 WO 2015142057A1
Authority
WO
WIPO (PCT)
Prior art keywords
current block
block
merge
flag
value
Prior art date
Application number
PCT/KR2015/002632
Other languages
English (en)
French (fr)
Inventor
이배근
김주영
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Publication of WO2015142057A1 publication Critical patent/WO2015142057A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명에 따른 다시점 비디오 신호 처리 방법은 현재 블록에 관한 머지 후보 리스트를 생성하고, 비트스트림으로부터 획득된 현재 블록에 대한 머지 인덱스에 기반하여 현재 블록의 모션 벡터를 유도하며, 모션 벡터를 이용하여 현재 블록의 예측값을 획득하고, 예측값과 현재 블록에 관한 잔차값을 더하여 현재 블록을 복원하는 것을 특징으로 한다.

Description

다시점 비디오 신호 처리 방법 및 장치
본 발명은 비디오 신호의 코딩 방법 및 장치에 관한 것이다.
최근 HD(High Definition) 영상 및 UHD(Ultra High Definition) 영상과 같은 고해상도, 고품질의 영상에 대한 수요가 다양한 응용 분야에서 증가하고 있다. 영상 데이터가 고해상도, 고품질이 될수록 기존의 영상 데이터에 비해 상대적으로 데이터량이 증가하기 때문에 기존의 유무선 광대역 회선과 같은 매체를 이용하여 영상 데이터를 전송하거나 기존의 저장 매체를 이용해 저장하는 경우, 전송 비용과 저장 비용이 증가하게 된다. 영상 데이터가 고해상도, 고품질화 됨에 따라 발생하는 이러한 문제들을 해결하기 위해서는 고효율의 영상 압축 기술들이 활용될 수 있다.
영상 압축 기술로 현재 픽쳐의 이전 또는 이후 픽쳐로부터 현재 픽쳐에 포함된 화소값을 예측하는 화면 간 예측 기술, 현재 픽쳐 내의 화소 정보를 이용하여 현재 픽쳐에 포함된 화소값을 예측하는 화면 내 예측 기술, 출현 빈도가 높은 값에 짧은 부호를 할당하고 출현 빈도가 낮은 값에 긴 부호를 할당하는 엔트로피 부호화 기술 등 다양한 기술이 존재하고 이러한 영상 압축 기술을 이용해 영상 데이터를 효과적으로 압축하여 전송 또는 저장할 수 있다.
한편, 고해상도 영상에 대한 수요가 증가함과 함께, 새로운 영상 서비스로서 입체 영상 컨텐츠에 대한 수요도 함께 증가하고 있다. 고해상도 및 초고해상도의 입체 영상 콘텐츠를 효과적으로 제공하기 위한 비디오 압축 기술에 대하여 논의가 진행되고 있다.
본 발명은 다시점 비디오 신호를 인코딩/디코딩함에 있어서, 변이 벡터를 이용하여 시점 간 예측을 수행하는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명은 다시점 비디오 신호를 인코딩/디코딩함에 있어서, 뎁스 블록의 뎁스 데이터를 이용하여 텍스쳐 블록의 변이 벡터를 유도하는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명은 다시점 비디오 신호를 인코딩/디코딩함에 있어서, 현재 블록의 이웃 블록으로부터 변이 벡터를 유도하는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명은 다시점 비디오 신호를 인코딩/디코딩함에 있어서, 변이 벡터를 이용하여 인터뷰 머지 후보자를 유도하는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명은 다시점 비디오 신호를 인코딩/디코딩함에 있어서, 머지 모드를 위한 머지 후보 리스트를 구성하는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명은 다시점 비디오 신호를 인코딩/디코딩함에 있어서, 조명 보상 플래그를 효율적으로 부호화하는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명은 다시점 비디오 신호를 인코딩/디코딩함에 있어서, 조명 보상을 고려하여 인터뷰 모션 후보자를 선택적으로 이용하는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명은 다시점 비디오 신호를 인코딩/디코딩함에 있어서, 조명 보상을 고려하여 머지 후보 리스트 내 머지 후보자들의 배열 순서를 결정하는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치는, 현재 블록에 관한 머지 후보 리스트를 생성하고, 비트스트림으로부터 획득된 상기 현재 블록에 대한 머지 인덱스에 기반하여 상기 현재 블록의 모션 벡터를 유도하며, 상기 유도된 모션 벡터를 이용하여 상기 현재 블록의 예측값을 획득하고, 상기 획득된 예측값과 상기 현재 블록에 관한 잔차값을 더하여 상기 현재 블록을 복원하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 머지 후보 리스트는 적어도 하나의 머지 후보자로 구성되고, 상기 머지 후보자는 공간적 이웃 블록, 시간적 이웃 블록 또는 인터뷰 모션 후보자(IvMC) 중 적어도 하나를 포함하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록에 대해 조명 보상이 수행되는지 여부를 나타내는 조명 보상 플래그(ic_flag)에 기초하여 상기 머지 후보 리스트에 제한적으로 포함되는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 머지 인덱스는 상기 현재 블록을 머지 모드로 복호화하기 위해 이용되는 머지 후보자를 특정하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록의 변이 벡터에 의해 특정되는 참조 블록의 시간적 모션 벡터를 가지고, 상기 참조 블록은 상기 현재 블록의 참조 시점(reference view)에 속하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치는, 비트스트림으로부터 조명 보상 비가용 플래그를 획득하고, 상기 조명 보상 비가용 플래그와 현재 블록에 관한 머지 인덱스에 기초하여 상기 조명 보상 플래그의 값을 획득하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 상기 조명 보상 비가용 플래그는 상기 머지 인덱스의 값이 0인 상기 현재 블록에 대해서 조명 보상 플래그가 부호화되는지 여부를 특정하는 것을 특징으로 한다
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 상기 조명 보상 플래그의 값에 따라 상기 현재 블록에 대해 조명 보상이 수행되지 아니하는 경우, 상기 인터뷰 모션 후보자(IvMC)는 상기 머지 후보 리스트에 포함되고, 상기 인터뷰 모션 후보자(IvMC), 상기 공간적 이웃 블록, 상기 시간적 이웃 블록의 우선 순위로 상기 머지 후보 리스트에 배열되는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치는, 현재 블록에 관한 머지 후보 리스트를 생성하고, 상기 현재 블록에 대한 머지 인덱스에 기반하여 상기 현재 블록의 모션 벡터를 유도하며, 상기 유도된 모션 벡터를 이용하여 상기 현재 블록의 예측값을 획득하고, 상기 획득된 예측값과 상기 현재 블록에 관한 잔차값을 더하여 상기 현재 블록을 복원하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 머지 후보 리스트는 적어도 하나의 머지 후보자로 구성되고, 상기 머지 후보자는 공간적 이웃 블록, 시간적 이웃 블록 또는 인터뷰 모션 후보자(IvMC) 중 적어도 하나를 포함하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록에 대해 조명 보상이 수행되는지 여부를 나타내는 조명 보상 플래그(ic_flag)에 기초하여 상기 머지 후보 리스트에 제한적으로 포함되는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 머지 인덱스는 상기 현재 블록을 머지 모드로 부호화하기 위해 이용되는 머지 후보자를 특정하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록의 변이 벡터에 의해 특정되는 참조 블록의 시간적 모션 벡터를 가지고, 상기 참조 블록은 상기 현재 블록의 참조 시점(reference view)에 속하는 것을 특징으로 하는 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치는, 상기 머지 인덱스의 값이 0인 상기 현재 블록에 관한 조명 보상 플래그가 부호화되는지 여부를 특정하는 조명 보상 비가용 플래그의 값을 결정하고, 상기 조명 보상 비가용 플래그의 값과 상기 머지 인덱스의 값에 기초하여 상기 조명 보상 플래그의 값을 결정하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 상기 조명 보상 플래그의 값에 따라 상기 현재 블록에 대해 조명 보상이 수행되지 아니하는 경우에 상기 인터뷰 모션 후보자(IvMC)는 상기 머지 후보 리스트에 포함되고, 상기 인터뷰 모션 후보자(IvMC), 상기 공간적 이웃 블록, 상기 시간적 이웃 블록의 우선 순위로 상기 머지 후보 리스트에 배열되는 것을 특징으로 한다.
본 발명에 의하면, 변이 벡터를 이용하여 시점 간 예측을 효율적으로 수행할 수 있다.
본 발명에 의하면, 현재 뎁스 블록의 뎁스 데이터 또는 이웃 텍스쳐 블록의 변이 벡터로부터 현재 블록의 변이 벡터를 효과적으로 유도할 수 있다.
본 발명에 의하면, 머지 후보 리스트의 머지 후보자를 효율적으로 구성할 수 있다.
본 발명에 의하면, 현재 블록에 관한 조명 보상 플래그의 값을 효과적으로 시그날링할 수 있다.
본 발명에 의하면, 조명 보상을 고려하여 인터뷰 모션 후보자를 선택적으로 이용함으로써, 부호화/복호화 성능을 향상시킬 수 있다.
본 발명에 의하면, 머지 후보 리스트를 구성하는 복수 개의 머지 후보자들의 우선 순위를 설정함으로써, 부호화/복호화 성능을 향상시킬 수 있다.
도 1은 본 발명이 적용되는 일실시예로서, 비디오 디코더의 개략적인 블록도를 도시한 것이다.
도 2는 본 발명이 적용되는 일실시예로서, 머지 모드(merge mode)로 현재 블록을 디코딩하는 방법을 도시한 것이다.
도 3은 본 발명이 적용되는 일실시예로서, 시점 간 모션 예측 기법에 기반하여 인터뷰 모션 후보자의 모션 벡터를 유도하는 방법을 도시한 것이다.
도 4는 본 발명이 적용되는 일실시예로서, 현재 블록의 변이 벡터에 기반하여 뷰 합성 예측 후보자(VSP 후보자)의 모션 벡터를 유도하는 방법을 도시한 것이다.
도 5는 본 발명이 적용되는 일실시예로서, 뎁스 영상의 뎁스 데이터를 이용하여 현재 블록의 변이 벡터를 유도하는 방법을 도시한 것이다.
도 6은 본 발명이 적용되는 일실시예로서, 현재 블록의 공간적/시간적 이웃 블록의 후보를 도시한 것이다.
도 7은 본 발명이 적용되는 일실시예로서, 조명 보상 플래그(ic_flag)에 기반하여 인터뷰 모션 후보자(IvMC)를 적응적으로 이용하는 방법을 도시한 것이다.
도 8은 본 발명이 적용되는 일실시예로서, 조명 보상 플래그(ic_flag)에 기반한 머지 후보자들의 우선 순위를 도시한 것이다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치는, 현재 블록에 관한 머지 후보 리스트를 생성하고, 비트스트림으로부터 획득된 상기 현재 블록에 대한 머지 인덱스에 기반하여 상기 현재 블록의 모션 벡터를 유도하며, 상기 유도된 모션 벡터를 이용하여 상기 현재 블록의 예측값을 획득하고, 상기 획득된 예측값과 상기 현재 블록에 관한 잔차값을 더하여 상기 현재 블록을 복원하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 머지 후보 리스트는 적어도 하나의 머지 후보자로 구성되고, 상기 머지 후보자는 공간적 이웃 블록, 시간적 이웃 블록 또는 인터뷰 모션 후보자(IvMC) 중 적어도 하나를 포함하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록에 대해 조명 보상이 수행되는지 여부를 나타내는 조명 보상 플래그(ic_flag)에 기초하여 상기 머지 후보 리스트에 제한적으로 포함되는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 머지 인덱스는 상기 현재 블록을 머지 모드로 복호화하기 위해 이용되는 머지 후보자를 특정하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록의 변이 벡터에 의해 특정되는 참조 블록의 시간적 모션 벡터를 가지고, 상기 참조 블록은 상기 현재 블록의 참조 시점(reference view)에 속하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치는, 비트스트림으로부터 조명 보상 비가용 플래그를 획득하고, 상기 조명 보상 비가용 플래그와 현재 블록에 관한 머지 인덱스에 기초하여 상기 조명 보상 플래그의 값을 획득하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 상기 조명 보상 비가용 플래그는 상기 머지 인덱스의 값이 0인 상기 현재 블록에 대해서 조명 보상 플래그가 부호화되는지 여부를 특정하는 것을 특징으로 한다
본 발명에 따른 다시점 비디오 신호 디코딩 방법 및 장치에 있어서, 상기 조명 보상 플래그의 값에 따라 상기 현재 블록에 대해 조명 보상이 수행되지 아니하는 경우, 상기 인터뷰 모션 후보자(IvMC)는 상기 머지 후보 리스트에 포함되고, 상기 인터뷰 모션 후보자(IvMC), 상기 공간적 이웃 블록, 상기 시간적 이웃 블록의 우선 순위로 상기 머지 후보 리스트에 배열되는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치는, 현재 블록에 관한 머지 후보 리스트를 생성하고, 상기 현재 블록에 대한 머지 인덱스에 기반하여 상기 현재 블록의 모션 벡터를 유도하며, 상기 유도된 모션 벡터를 이용하여 상기 현재 블록의 예측값을 획득하고, 상기 획득된 예측값과 상기 현재 블록에 관한 잔차값을 더하여 상기 현재 블록을 복원하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 머지 후보 리스트는 적어도 하나의 머지 후보자로 구성되고, 상기 머지 후보자는 공간적 이웃 블록, 시간적 이웃 블록 또는 인터뷰 모션 후보자(IvMC) 중 적어도 하나를 포함하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록에 대해 조명 보상이 수행되는지 여부를 나타내는 조명 보상 플래그(ic_flag)에 기초하여 상기 머지 후보 리스트에 제한적으로 포함되는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 머지 인덱스는 상기 현재 블록을 머지 모드로 부호화하기 위해 이용되는 머지 후보자를 특정하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록의 변이 벡터에 의해 특정되는 참조 블록의 시간적 모션 벡터를 가지고, 상기 참조 블록은 상기 현재 블록의 참조 시점(reference view)에 속하는 것을 특징으로 하는 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치는, 상기 머지 인덱스의 값이 0인 상기 현재 블록에 관한 조명 보상 플래그가 부호화되는지 여부를 특정하는 조명 보상 비가용 플래그의 값을 결정하고, 상기 조명 보상 비가용 플래그의 값과 상기 머지 인덱스의 값에 기초하여 상기 조명 보상 플래그의 값을 결정하는 것을 특징으로 한다.
본 발명에 따른 다시점 비디오 신호 인코딩 방법 및 장치에 있어서, 상기 조명 보상 플래그의 값에 따라 상기 현재 블록에 대해 조명 보상이 수행되지 아니하는 경우에 상기 인터뷰 모션 후보자(IvMC)는 상기 머지 후보 리스트에 포함되고, 상기 인터뷰 모션 후보자(IvMC), 상기 공간적 이웃 블록, 상기 시간적 이웃 블록의 우선 순위로 상기 머지 후보 리스트에 배열되는 것을 특징으로 한다.
다시점 비디오 신호 데이터를 압축 부호화 또는 복호화하는 기술은 공간적 중복성, 시간적 중복성 및 시점간 존재하는 중복성을 고려하고 있다. 또한, 다시점 영상의 경우, 3차원 영상을 구현하기 위해 2개 이상의 시점에서 촬영된 다시점 텍스쳐 영상을 코딩할 수 있다. 또한, 필요에 따라 다시점 텍스쳐 영상에 대응하는 뎁스 데이터를 더 코딩할 수도 있다. 뎁스 데이터를 코딩함에 있어서, 공간적 중복성, 시간적 중복성 또는 시점간 중복성을 고려하여 압축 코딩할 수 있음은 물론이다. 뎁스 데이터는 카메라와 해당 화소 간의 거리 정보를 표현한 것이며, 본 명세서 내에서 뎁스 데이터는 뎁스 값, 뎁스 정보, 뎁스 영상, 뎁스 픽쳐, 뎁스 시퀀스, 뎁스 비트스트림 등과 같이 뎁스에 관련된 정보로 유연하게 해석될 수 있다. 또한, 본 명세서에서 코딩이라 함은 인코딩과 디코딩의 개념을 모두 포함할 수 있고, 본 발명의 기술적 사상 및 기술적 범위에 따라 유연하게 해석할 수 있을 것이다.
도 1은 본 발명이 적용되는 일실시예로서, 비디오 디코더의 개략적인 블록도를 도시한 것이다.
도 1을 참조하면, 비디오 디코더는 NAL 파싱부(100), 엔트로피 디코딩부(200), 역양자화/역변환부(300), 인트라 예측부(400), 인-루프 필터부(500), 복호 픽쳐 버퍼부(600), 인터 예측부(700)를 포함할 수 있다.
NAL 파싱부 (100)는 다시점 텍스쳐 데이터를 포함한 비트스트림을 수신할 수 있다. 또한, 뎁스 데이터가 텍스쳐 데이터의 코딩에 필요한 경우, 인코딩된 뎁스 데이터를 포함한 비트스트림을 더 수신할 수도 있다. 이 때 입력되는 텍스쳐 데이터와 뎁스 데이터는 하나의 비트스트림으로 전송될 수 있고, 또는 별개의 비트스트림으로 전송될 수도 있다. NAL 파싱부(100)는 입력된 비트스트림을 복호화하기 위해 NAL 단위로 파싱을 수행할 수 있다. 입력된 비트스트림이 다시점 관련 데이터(예를 들어, 3-Dimensional Video)인 경우, 입력된 비트스트림은 카메라 파라미터를 더 포함할 수 있다. 카메라 파라미터에는 고유의 카메라 파라미터 (intrinsic camera parameter) 및 비고유의 카메라 파라미터 (extrinsic camera parameter)가 있을 수 있고, 고유의 카메라 파라미터는 초점 거리(focal length), 가로세로비(aspect ratio), 주점(principal point) 등을 포함할 수 있고, 비고유의 카메라 파라미터는 세계 좌표계에서의 카메라의 위치정보 등을 포함할 수 있다.
엔트로피 디코딩부(200)는 엔트로피 디코딩을 통하여 양자화된 변환 계수, 텍스쳐 픽쳐의 예측을 위한 코딩 정보 등을 추출할 수 있다.
역양자화/역변환부(300)에서는 양자화된 변환 계수에 양자화 파라미터를 적용하여 변환 계수를 획득하고, 변환 계수를 역변환하여 텍스쳐 데이터 또는 뎁스 데이터를 복호화할 수 있다. 여기서, 복호화된 텍스쳐 데이터 또는 뎁스 데이터는 예측 처리에 따른 레지듀얼 데이터를 의미할 수 있다. 또한, 뎁스 블록에 대한 양자화 파라미터는 텍스쳐 데이터의 복잡도를 고려하여 설정될 수 있다. 예를 들어, 뎁스 블록에 대응하는 텍스쳐 블록이 복잡도가 높은 영역인 경우에는 낮은 양자화 파라미터를 설정하고, 복잡도가 낮은 영역인 경우에는 높은 양자화 파라미터를 설정할 수 있다. 텍스쳐 블록의 복잡도는 수학식 1과 같이 복원된 텍스쳐 픽쳐 내에서 서로 인접한 픽셀들 간의 차분값에 기초하여 결정될 수 있다.
수학식 1
Figure PCTKR2015002632-appb-M000001
수학식 1에서 E는 텍스쳐 데이터의 복잡도를 나타내고, C는 복원된 텍스쳐 데이터를 의미하며, N은 복잡도를 산출하고자 하는 텍스쳐 데이터 영역 내의 픽셀 개수를 의미할 수 있다. 수학식 1을 참조하면, 텍스쳐 데이터의 복잡도는 (x,y) 위치에 대응하는 텍스쳐 데이터와 (x-1,y) 위치에 대응하는 텍스쳐 데이터 간의 차분값 및 (x,y) 위치에 대응하는 텍스쳐 데이터와 (x+1,y) 위치에 대응하는 텍스쳐 데이터 간의 차분값을 이용하여 산출될 수 있다. 또한, 복잡도는 텍스쳐 픽쳐와 텍스쳐 블록에 대해서 각각 산출될 수 있고, 이를 이용하여 아래 수학식 2와 같이 양자화 파라미터를 유도할 수 있다.
수학식 2
Figure PCTKR2015002632-appb-M000002
수학식 2를 참조하면, 뎁스 블록에 대한 양자화 파라미터는 텍스쳐 픽쳐의 복잡도와 텍스쳐 블록의 복잡도의 비율에 기초하여 결정될 수 있다. α 및 β는 디코더에서 유도되는 가변적인 정수일 수 있고, 또는 디코더 내에서 기 결정된 정수일 수 있다.
인트라 예측부(400)는 현재 텍스쳐 픽쳐 내의 복원된 텍스쳐 데이터를 이용하여 화면 내 예측을 수행할 수 있다. 뎁스 픽쳐에 대해서도 텍스쳐 픽쳐와 동일한 방식으로 화면 내 예측이 수행될 수 있다. 예를 들어, 텍스쳐 픽쳐의 화면 내 예측을 위해 이용되는 코딩 정보를 텝스 픽쳐에서도 동일하게 이용할 수 있다. 여기서, 화면 내 예측을 위해 이용되는 코딩 정보는 인트라 예측 모드, 인트라 예측의 파티션 정보를 포함할 수 있다.
인-루프 필터부(500)는 블록 왜곡 현상을 감소시키기 위해 각각의 코딩된 블록에 인-루프 필터를 적용할 수 있다. 필터는 블록의 가장자리를 부드럽게 하여 디코딩된 픽쳐의 화질을 향상시킬 수 있다. 필터링을 거친 텍스쳐 픽쳐 또는 뎁스 픽쳐들은 출력되거나 참조 픽쳐로 이용하기 위해 복호 픽쳐 버퍼부(600)에 저장될 수 있다. 한편, 텍스쳐 데이터의 특성과 뎁스 데이터의 특성이 서로 상이하기 때문에 동일한 인-루프 필터를 사용하여 텍스쳐 데이터와 뎁스 데이터의 코딩을 수행할 경우, 코딩 효율이 떨어질 수 있다. 따라서, 뎁스 데이터를 위한 별도의 인-루프 필터를 정의할 수도 있다. 이하, 뎁스 데이터를 효율적으로 코딩할 수 있는 인-루프 필터링 방법으로서, 영역 기반의 적응적 루프 필터 (region-based adaptive loop filter)와 트라일래터럴 루프 필터 (trilateral loop filter)를 살펴 보기로 한다.
영역 기반의 적응적 루프 필터의 경우, 뎁스 블록의 변화량 (variance)에 기초하여 영역 기반의 적응적 루프 필터를 적용할 지 여부를 결정할 수 있다. 여기서, 뎁스 블록의 변화량은 뎁스 블록 내에서 최대 픽셀값과 최소 픽셀값 간의 차분으로 정의될 수 있다. 뎁스 블록의 변화량과 기결정된 문턱값 간의 비교를 통해서 필터 적용 여부를 결정할 수 있다. 예를 들어, 뎁스 블록의 변화량이 기결정된 문턱값보다 크거나 같은 경우, 뎁스 블록 내의 최대 픽셀값과 최소 픽셀값 간의 차이가 큰 것을 의미하므로 영역 기반의 적응적 루프 필터를 적용하는 것으로 결정할 수 있다. 반대로, 뎁스 변화량이 기결정된 문턱값보다 작은 경우에는 영역 기반의 적응적 루프 필터를 적용하지 아니하는 것으로 결정할 수 있다. 상기 비교 결과에 따라 필터를 적용하는 경우, 필터링된 뎁스 블록의 픽셀값은 소정의 가중치를 이웃 픽셀값에 적용하여 유도될 수 있다. 여기서, 소정의 가중치는 현재 필터링되는 픽셀과 이웃 픽셀 간의 위치 차이 및/또는 현재 필터링되는 픽셀값과 이웃 픽셀값 간의 차분값에 기초하여 결정될 수 있다. 또한, 이웃 픽셀값은 뎁스 블록 내에 포함된 픽셀값 중에서 현재 필터링되는 픽셀값을 제외한 어느 하나를 의미할 수 있다.
본 발명에 따른 트라일래터럴 루프 필터는 영역 기반의 적응적 루프 필터와 유사하나, 텍스쳐 데이터를 추가적으로 고려한다는 점에서 차이가 있다. 구체적으로, 트라일래터럴 루프 필터는 다음의 세가지 조건을 비교하여, 이를 만족하는 이웃 픽셀의 뎁스 데이터를 추출할 수 있다.
Figure PCTKR2015002632-appb-I000001
조건 1은 뎁스 블록 내의 현재 픽셀(p)와 이웃 픽셀(q) 간의 위치 차이를 기결정된 매개변수 σ1과 비교하는 것이고, 조건 2는 현재 픽셀(p)의 뎁스 데이터와 이웃 픽셀(q)의 뎁스 데이터 간의 차분을 기결정된 매개변수 σ2와 비교하는 것이며, 조건 3은 현재 픽셀(p)의 텍스쳐 데이터와 이웃 픽셀(q)의 텍스쳐 데이터 간의 차분을 기결정된 매개변수 σ3과 비교하는 것이다.
상기 세가지 조건을 만족하는 이웃 픽셀들을 추출하고, 이들 뎁스 데이터의 중간값 또는 평균값으로 현재 픽셀(p)을 필터링할 수 있다.
복호 픽쳐 버퍼부(Decoded Picture Buffer unit)(600)에서는 화면 간 예측을 수행하기 위해서 이전에 코딩된 텍스쳐 픽쳐 또는 뎁스 픽쳐를 저장하거나 개방하는 역할 등을 수행한다. 이 때 복호 픽쳐 버퍼부(600)에 저장하거나 개방하기 위해서 각 픽쳐의 frame_num 과 POC(Picture Order Count)를 이용할 수 있다. 나아가, 뎁스 코딩에 있어서 상기 이전에 코딩된 픽쳐들 중에는 현재 뎁스 픽쳐와 다른 시점에 있는 뎁스 픽쳐들도 있으므로, 이러한 픽쳐들을 참조 픽쳐로서 활용하기 위해서는 뎁스 픽쳐의 시점을 식별하는 시점 식별 정보를 이용할 수도 있다. 복호 픽쳐 버퍼부(600)는 보다 유연하게 화면 간 예측을 실현하기 위하여 적응 메모리 관리 방법(Memory Management Control Operation Method)과 이동 윈도우 방법(Sliding Window Method) 등을 이용하여 참조 픽쳐를 관리할 수 있다. 이는 참조 픽쳐와 비참조 픽쳐의 메모리를 하나의 메모리로 통일하여 관리하고 적은 메모리로 효율적으로 관리하기 위함이다. 뎁스 코딩에 있어서, 뎁스 픽쳐들은 복호 픽쳐 버퍼부 내에서 텍스쳐 픽쳐들과 구별하기 위하여 별도의 표시로 마킹될 수 있고, 상기 마킹 과정에서 각 뎁스 픽쳐를 식별해주기 위한 정보가 이용될 수 있다.
인터 예측부(700)는 복호 픽쳐 버퍼부(600)에 저장된 참조 픽쳐와 모션 정보를 이용하여 현재 블록의 모션 보상을 수행할 수 있다. 본 명세서에서 모션 정보라 함은 모션 벡터, 레퍼런스 인덱스 정보를 포함하는 광의의 개념으로 이해될 수 있다. 또한, 인터 예측부(700)는 모션 보상을 수행하기 위해 시간적 인터 예측을 수행할 수 있다. 시간적 인터 예측이라 함은 현재 블록과 동일 시점 및 다른 시간대에 위치한 참조 픽쳐 및 현재 블록의 모션 정보를 이용한 인터 예측을 의미할 수 있다. 또한, 복수 개의 카메라에 의해 촬영된 다시점 영상의 경우, 시간적 인터 예측뿐만 아니라 시점 간 예측을 수행할 수도 있다. 상기 시점 간 예측에 이용되는 모션 정보는 변이 벡터(disparity vector) 또는 인터뷰 모션 벡터(inter-view motion vector)를 포함할 수 있다.
도 2는 본 발명이 적용되는 일실시예로서, 머지 모드(merge mode)로 현재 블록을 디코딩하는 방법을 도시한 것이다.
도 2를 참조하면, 현재 블록에 관한 머지 후보 리스트를 생성할 수 있다(S200).
본 발명의 머지 후보 리스트는 현재 블록을 머지 모드로 디코딩하기 위해 이용 가능한 적어도 하나의 머지 후보자(merge candidate)를 포함할 수 있다. 여기서, 머지 후보자의 예로 현재 블록의 공간적/시간적 이웃 블록이 이용될 수 있다. 공간적 이웃 블록은 현재 블록의 좌측 이웃 블록, 상단 이웃 블록, 상단우측 이웃 블록, 좌측하단 이웃 블록, 상단좌측 이웃 블록 중 적어도 하나를 포함할 수 있다. 시간적 이웃 블록은 현재 블록과 다른 시간적 순서를 가지는 콜 픽쳐에 포함된 블록으로서, 현재 블록과 동일 위치의 블록으로 정의될 수 있다.
또한, 시점 간 상관 관계 또는 텍스쳐와 뎁스 간의 상관 관계에 기반한 머지 후보자(이하, 인터뷰 머지 후보자라 함)가 머지 후보 리스트에 포함될 수 있다. 상기 인터뷰 머지 후보자에는 텍스쳐 머지 후보자(texture merge candidate), 인터뷰 모션 후보자(inter-view motion candidate), 인터뷰 변이 후보자(inter-view disparity candidate), 뷰 합성 예측 후보자(view synthesis prediction candidate, 이하 VSP 후보자라 함) 등이 있으며, 각 인터뷰 머지 후보자의 모션 벡터를 유도하는 방법 및 머지 후보 리스트 내에 머지 후보자를 구성하는 방법에 대해서는 도 3 내지 도 6을 참조하여 후술하도록 한다.
도 2를 참조하면, S200 단계에서 생성된 머지 후보 리스트와 머지 인덱스(merge_idx)에 기반하여 현재 블록의 모션 벡터를 유도할 수 있다(S210).
구체적으로, 머지 후보 리스트로부터 현재 블록에 관한 머지 인덱스에 대응하는 머지 후보자를 선택할 수 있다. 여기서, 머지 인덱스는 머지 후보 리스트에 포함된 복수 개의 머지 후보자들 중 어느 하나를 특정하는 신택스로서, 비트스트림으로부터 추출될 수 있다. 즉, 상기 머지 인덱스는 현재 블록의 모션 벡터를 유도하기 위해 이용되는 머지 후보자를 특정하는 정보이다.
선택된 머지 후보자에 할당된 모션 벡터를 상기 현재 블록의 모션 벡터로 설정할 수 있다.
S210 단계에서 유도된 모션 벡터를 이용하여 현재 블록의 예측값을 획득할 수 있다(S200).
구체적으로, 현재 블록의 참조 픽쳐가 현재 블록과 동일 시점에 속하는 경우, 현재 블록은 상기 모션 벡터를 이용하여 시간적 인터 예측을 수행할 수 있다. 반면, 현재 블록의 참조 픽쳐가 현재 블록과 다른 시점에 속하는 경우, 상기 현재 블록은 상기 모션 벡터를 이용하여 시점 간 인터 예측을 수행할 수 있다.
현재 블록의 참조 픽쳐가 현재 블록과 동일 시점에 속하는지 여부는, 현재 블록의 참조 인덱스(reference index)를 이용하여 참조 픽쳐 리스트 내의 참조 픽쳐를 특정하고, 특정된 참조 픽쳐의 시점(view index)이 현재 블록의 시점 (view index)과 동일한지 여부에 기초하여 결정될 수 있다.
도 2를 참조하면, S220 단계에서 획득된 현재 블록의 예측값과 현재 블록에 관한 잔차값을 더하여 현재 블록을 복원할 수 있다(S230).
여기서, 잔차값이라 함은 현재 블록의 복원값과 예측값 간의 차분을 의미하는 것으로, 비트스트림으로부터 추출된 변환 계수(transform coefficient)에 대해 역양자화 및/또는 역변환을 수행하여 획득될 수 있다.
이하, 도 2에서 언급한 인터뷰 머지 후보자의 모션 벡터를 유도하는 방법 및 머지 후보 리스트에 머지 후보자를 구성하는 방법에 대해서 살펴 보기로 한다.
Ⅰ. 인터뷰 머지 후보자의 모션 벡터 유도 방법
1. 텍스쳐 머지 후보자(T)
비디오 영상의 텍스쳐 데이터와 뎁스 데이터는 동일 시점 및 동일 시간의 영상을 표현한 것으로 상호 상관 관계가 높다. 따라서, 텍스쳐 데이터를 부호화/복호화할 때 사용된 모션 벡터를 동일하게 이용하여 뎁스 데이터를 부호화/복호화하는 경우, 비디오 영상의 부호화/복호화 성능을 향상시킬 수 있다.
구체적으로, 현재 블록이 뎁스 블록인 경우(DepthFlag=1), 해당 뎁스 블록에 대응하는 텍스쳐 블록의 모션 벡터를 텍스쳐 머지 후보자에 할당할 수 있다. 여기서, 텍스쳐 블록은 상기 뎁스 블록과 동일 위치의 블록으로 결정될 수 있다.
2. 인터뷰 모션 후보자(IvMC)
인터뷰 모션 후보자의 모션 벡터는 시점 간 모션 예측 기법에 기반하여 유도될 수 있으며, 이는 도 3을 참조하여 살펴 보기로 한다.
도 3을 참조하면, 현재 시점(view 0)에 속한 현재 블록은 변이 벡터를 이용하여 참조 시점(view 1)에 속한 참조 블록을 특정할 수 있다. 예를 들어, 상기 참조 블록은 현재 블록의 위치에 대응하는 참조 시점의 블록 위치에서 상기 변이 벡터만큼 시프트(shift) 된 위치의 블록으로 특정될 수 있다. 상기 참조 블록이 시간적 모션 벡터를 가지는 경우(즉, 시간적 인터 예측으로 부호화된 경우), 상기 참조 블록의 시간적 모션 벡터를 인터뷰 모션 후보자에 할당할 수 있다.
또한, 현재 블록은 서브 블록 단위로 시점 간 모션 예측을 수행할 수 있다. 이 경우 현재 블록을 서브 블록 단위(예를 들어, 8x8)로 분할하고, 서브 블록 단위로 참조 블록의 시간적 모션 벡터를 획득하여 이를 인터뷰 모션 후보자에 할당할 수도 있다.
한편, 현재 블록의 변이 벡터는 현재 블록에 대응하는 뎁스 영상으로부터 유도될 수 있으며, 이는 도 5를 참조하여 자세히 살펴 보도록 한다. 또한, 상기 변이 벡터는 현재 블록에 공간적으로 인접한 이웃 블록으로부터 유도될 수도 있고, 현재 블록과 다른 시간대에 위치한 시간적 이웃 블록으로부터 유도될 수도 있다. 현재 블록의 공간적/시간적 이웃 블록으로부터 변이 벡터를 유도하는 방법에 대해서는 도 6을 참조하여 살펴 보도록 한다.
3. 인터뷰 모션 시프트 후보자(IvMCShift)
상술한 인터뷰 모션 후보자(IvMC)의 변이 벡터를 특정 값만큼 시프트하고, 시프트된 변이 벡터를 이용하여 참조 시점(view 0)에 속한 참조 블록을 특정할 수 있다. 구체적으로, 상기 시프트된 변이 벡터는 현재 블록의 너비(nPbW)/높이(nPbH)를 고려하여 인터뷰 모션 후보자(IvMC)의 변이 벡터를 시프트하여 유도될 수 있다. 예를 들어, 시프트된 변이 벡터는 인터뷰 모션 후보자(IvMC)의 변이 벡터를 (nPbW*2, nPbH*2)만큼 시프트하여 유도될 수 있다.
상기 참조 블록이 시간적 모션 벡터를 가지는 경우, 상기 참조 블록의 시간적 모션 벡터를 인터뷰 모션 시프트 후보자에 할당할 수 있다.
4. 인터뷰 변이 후보자(IvDC)
상술한 바와 같이, 현재 블록에 대응하는 뎁스 영상 또는 공간적/시간적 이웃 블록으로부터 변이 벡터를 유도할 수 있다. 유도된 변이 벡터에서 수직 성분(y 성분)이 0인 벡터를 인터뷰 변이 후보자에 할당할 수 있다. 예를 들어, 현재 블록의 유도된 변이 벡터가 (mvDisp[0], mvDisp[1])인 경우, 벡터 (mvDisp[0], 0)를 인터뷰 변이 후보자에 할당할 수 있다.
5. 인터뷰 변이 시프트 후보자(IvDCShift)
마찬가지로, 현재 블록에 대응하는 뎁스 영상 또는 공간적/시간적 이웃 블록으로부터 변이 벡터를 유도할 수 있다. 유도된 변이 벡터에서 수평 성분(x 성분)을 기-결정된 값만큼 이동시킨 벡터를 인터뷰 변이 시프트 후보자에 할당할 수 있다. 예를 들어, 인터뷰 변이 후보자의 모션 벡터가 (mvDisp[0], mvDisp[1])인 경우, 수평 성분인 mvDisp[0]을 4만큼 이동시킨 벡터 즉, (mvDisp[0]+4, mvDisp[1])를 인터뷰 변이 시프트 후보자에 할당할 수 있다.
또는, 상기 유도된 변이 벡터에서 수평 성분(x 성분)을 기-결정된 값만큼 이동시키고, 수직 성분(y 성분)을 0으로 설정한 벡터를 인터뷰 변이 시프트 후보자에 할당할 수도 있다. 예를 들어, 인터뷰 변이 후보자의 모션 벡터가 (mvDisp[0], mvDisp[1])인 경우, 수평 성분인 mvDisp[0]을 4만큼 이동시키고 수직 성분인 mvDisp[1]을 0으로 설정한 벡터 즉, (mvDisp[0]+4, 0)를 인터뷰 변이 시프트 후보자에 할당할 수도 있다.
6. VSP 후보자
VSP 후보자의 모션 벡터도 상술한 현재 블록의 변이 벡터에 기반하여 유도될 수 있으며, 이는 도 4를 참조하여 살펴 보기로 한다.
도 4를 참조하면, 현재 블록의 뎁스 영상 또는 공간적/시간적 이웃 블록으로부터 변이 벡터(제1 변이 벡터)를 유도할 수 있고(S400), 변이 벡터를 유도하는 방법은 도 5 내지 도 6을 참조하여 후술하기로 한다.
S400 단계에서 유도된 변이 벡터를 이용하여 참조 시점의 뎁스 블록을 특정할 수 있다(S410). 여기서, 뎁스 블록은 참조 뎁스 픽쳐에 포함될 수 있다. 참조 뎁스 픽쳐와 참조 텍스쳐 픽쳐는 동일 액세스 유닛에 속하고, 상기 참조 텍스쳐 픽쳐는 현재 블록의 시점 간 참조 픽쳐에 해당할 수 있다.
S410 단계의 뎁스 블록에서 기-정의된 위치의 적어도 하나의 뎁스 샘플을 이용하여 수정된 변이 벡터(제2 변이 벡터)를 유도할 수 있다(S420). 예를 들어, 뎁스 블록에 속한 4개의 코너에 위치한 뎁스 샘플들이 이용될 수 있다. 상기 제2 변이 벡터는 4개의 코너에 위치한 뎁스 샘플들 중 최대값으로부터 유도될 수도 있고, 4개의 코너에 위치한 뎁스 샘플들의 평균값으로부터 유도될 수도 있으며, 4개의 코너 중 어느 하나의 뎁스 샘플로부터 유도될 수도 있다.
도 5는 본 발명이 적용되는 일실시예로서, 뎁스 영상의 뎁스 데이터를 이용하여 현재 블록의 변이 벡터를 유도하는 방법을 도시한 것이다.
도 5를 참조하면, 현재 블록의 위치 정보에 기초하여 현재 블록에 대응하는 뎁스 픽쳐 내의 뎁스 블록의 위치 정보를 획득할 수 있다(S500).
상기 뎁스 블록의 위치는 뎁스 픽쳐와 현재 픽쳐 간의 공간 해상도를 고려하여 결정될 수 있다.
예를 들어, 뎁스 픽쳐와 현재 픽쳐가 동일한 공간 해상도로 코딩된 경우, 뎁스 블록의 위치는 현재 픽쳐의 현재 블록과 동일 위치의 블록으로 결정될 수 있다. 한편, 현재 픽쳐와 뎁스 픽쳐가 상이한 공간 해상도로 코딩될 수도 있다. 카메라와 객체 간의 거리 정보를 나타내는 뎁스 정보의 특성상, 공간 해상도를 낮춰서 코딩하더라도 코딩 효율이 크게 떨어지지 아니할 수 있기 때문이다. 따라서, 뎁스 픽쳐의 공간 해상도가 현재 픽쳐보다 낮게 코딩된 경우, 디코더는 뎁스 블록의 위치 정보를 획득하기 전에 뎁스 픽쳐에 대한 업샘플링 과정을 수반할 수 있다. 또한, 업샘플링된 뎁스 픽쳐와 현재 픽쳐 간의 화면비율 (aspect ratio)이 정확히 일치하지 아니하는 경우, 업샘플링된 뎁스 픽쳐 내에서 현재 뎁스 블록의 위치 정보를 획득함에 있어서 오프셋 정보를 추가적으로 고려할 수 있다. 여기서, 오프셋 정보는 상단 오프셋 정보, 좌측 오프셋 정보, 우측 오프셋 정보, 하단 오프셋 정보 중 적어도 하나를 포함할 수 있다. 상단 오프셋 정보는 업샘플링된 뎁스 픽쳐의 상단에 위치한 적어도 하나의 픽셀과 현재 픽쳐의 상단에 위치한 적어도 하나의 픽셀 간의 위치 차이를 나타낼 수 있다. 좌측, 우측, 하단 오프셋 정보 역시 동일한 방식으로 각각 정의될 수 있다.
도 5를 참조하면, 뎁스 블록의 위치 정보에 해당하는 뎁스 데이터를 획득할 수 있다(S510).
뎁스 블록 내에 복수 개의 픽셀이 존재하는 경우, 뎁스 블록의 코너 픽셀(corner pixel)에 대응하는 뎁스 데이터가 이용될 수 있다. 또는, 뎁스 블록의 중앙 픽셀(center pixel)에 대응하는 뎁스 데이터가 이용될 수도 있다. 또는, 복수 개의 픽셀에 대응하는 복수 개의 뎁스 데이터 중에서 최대값, 최소값, 최빈값 중 어느 하나가 선택적으로 이용될 수도 있고, 복수 개의 뎁스 데이터의 평균값이 이용될 수도 있다.
도 5를 참조하면, S510 단계에서 획득된 뎁스 데이터를 이용하여 현재 블록의 변이 벡터를 유도할 수 있다(S520).
예를 들어, 현재 블록의 변이 벡터는 다음 수학식 3과 같이 유도될 수 있다.
수학식 3
Figure PCTKR2015002632-appb-M000003
수학식 3을 참조하면, v는 뎁스 데이터를, a는 스케일링 팩터를, f는 변이 벡터를 유도하기 위해 이용되는 오프셋을 나타낸다. 상기 스케일링 팩터 a와 오프셋 f는 비디오 파라미터 세트 또는 슬라이스 헤더에서 시그날링될 수도 있고, 디코더에 기-설정된 값일 수도 있다. n은 비트 쉬프트의 값을 나타내는 변수이며, 이는 변이 벡터의 정확도에 따라 가변적으로 결정될 수 있다.
도 6은 본 발명이 적용되는 일실시예로서, 현재 블록의 공간적/시간적 이웃 블록의 후보를 도시한 것이다.
도 6(a)를 참조하면, 공간적 이웃 블록은 현재 블록의 좌측 이웃 블록(A1), 상단 이웃 블록(B1), 좌측하단 이웃 블록(A0), 상단우측 이웃 블록(B0) 또는 상단좌측 이웃 블록(B2) 중 적어도 하나를 포함할 수 있다.
도 6(b)를 참조하면, 시간적 이웃 블록은 현재 블록과 동일 위치의 블록을 의미할 수 있다. 구체적으로, 시간적 이웃 블록은 현재 블록과 다른 시간대에 위치한 픽쳐에 속하는 블록으로서, 현재 블록의 하단우측 픽셀에 대응하는 블록(BR), 현재 블록의 중앙 픽셀에 대응하는 블록(CT) 또는 현재 블록의 상단좌측 픽셀에 대응하는 블록(TL) 중 적어도 하나를 포함할 수 있다.
현재 블록의 변이 벡터는 상기 공간적/시간적 이웃 블록 중 변이 보상된 예측 블록(disparity-compensated prediction block, 이하 DCP 블록이라 함)으로부터 유도될 수 있다. 여기서, DCP 블록은 변이 벡터를 이용한 시점 간 텍스쳐 예측(inter-view texture prediction)을 통해 부호화된 블록을 의미할 수 있다. 다시 말해, DCP 블록은 변이 벡터에 의해 특정된 참조 블록의 텍스쳐 데이터를 이용하여 시점 간 예측을 수행할 수 있다. 이 경우, 현재 블록의 변이 벡터는 DCP 블록이 시점 간 텍스쳐 예측을 위해 이용한 변이 벡터를 이용하여 예측되거나 복원될 수 있다.
또는, 현재 블록의 변이 벡터는 상기 공간적 이웃 블록 중 변이 벡터 기반의 모션 보상된 예측 블록(disparity vector based-motion compensation prediction block, 이하 DV-MCP 블록이라 함)으로부터 유도될 수도 있다. 여기서, DV-MCP 블록은 변이 벡터를 이용한 시점 간 모션 예측(inter-view motion prediction)을 통해 부호화된 블록을 의미할 수 있다. 다시 말해, DV-MCP 블록은 변이 벡터에 의해 특정된 참조 블록의 시간적 모션 벡터를 이용하여 시간적 인터 예측을 수행할 수 있다. 이 경우, 현재 블록의 변이 벡터는 DV-MCP 블록이 참조 블록의 시간적 모션 벡터를 획득하기 위해 이용한 변이 벡터를 이용하여 예측되거나 복원될 수도 있다.
상기 현재 블록은 기-정의된 우선 순위에 따라 공간적/시간적 이웃 블록이 DCP 블록에 해당하는지를 탐색하고, 최초로 탐색된 DCP 블록으로부터 변이 벡터를 유도할 수 있다. 기-정의된 우선 순위의 예로, 공간적 이웃 블록->시간적 이웃 블록의 우선 순위로 탐색을 수행할 수 있고, 공간적 이웃 블록 중에서는 A1->B1->B0->A0->B2의 우선 순위로 DCP 블록에 해당하는지를 탐색할 수 있다. 다만, 이는 우선 순위의 일실시예에 불과하며, 당업자에게 자명한 범위 내에서 상이하게 결정될 수 있음은 물론이다.
만일 공간적/시간적 이웃 블록 중 어느 하나도 DCP 블록에 해당하지 아니하는 경우, 해당 공간적 이웃 블록이 DV-MCP 블록에 해당하는지를 추가적으로 탐색하고, 마찬가지로 최초로 탐색된 DV-MCP 블록으로부터 변이 벡터를 유도할 수 있다.
Ⅱ. 머지 후보 리스트 구성 방법
머지 후보 리스트를 구성하는 머지 후보자의 최대 개수(MaxNumMergeCand)는 가변적으로 결정될 수 있다. 다만, 머지 후보자의 최대 개수(MaxNumMergeCand)는 기-설정된 범위 내에서(예를 들어, 1 내지 6) 제한적으로 결정될 수도 있다. 각 슬라이스 별로 머지 후보자의 최대 개수(MaxNumMergeCand)를 적응적으로 조절하여 부호화 성능을 향상시킬 수도 있다.
예를 들어, 머지 후보자의 최대 개수(MaxNumMergeCand)는 다음 수학식 4와 같이 유도될 수 있다.
MaxNumMergeCand = 5 - five_minus_max_num_merge_cand + NumExtraMergeCand (수학식 4)
수학식 4에서 five_minus_max_num_merge_cand는 슬라이스 세그먼트 레벨의 신택스로서, 인터뷰 머지 후보자의 개수를 제외한 머지 후보자의 최대 개수(예를 들어, 5)와 인터뷰 머지 후보자의 개수를 제외한 슬라이스 별 머지 후보자의 최대 개수의 차이를 의미할 수 있다. 상기 변수 NumExtraMergeCand는 다음 수학식 5와 같이 유도될 수 있다.
NumExtraMergeCand = iv_mv_pred_flag[nuh_layer_id] || mpi_flag[nuh_layer_id] || ViewSynthesisPredFlag (수학식 5)
상기 수학식 5에서 변수 NumExtraMergeCand는 iv_mv_pred_flag[nuh_layer_id], mpi_flag[nuh_layer_id] 또는 ViewSynthesisPredFlag에 기초하여 유도될 수 있다.
여기서, iv_mv_pred_flag는 현재 시점에서 시점 간 모션 예측이 수행되는지 여부를 나타내는 신택스이다. 예를 들어, iv_mv_pred_flag=1인 경우에는 시점 간 모션 예측이 수행되고, 그렇지 아니한 경우에는 시점 간 모션 예측이 수행되지 아니한다. 따라서, iv_mv_pred_flag=1인 경우에는 시점 간 모션 예측에 기반한 인터뷰 모션 후보자(IvMC)가 이용될 수 있고, 변수 NumExtraMergeCand는 1로 설정될 수 있다.
상기 mpi_flag는 모션 파라미터 상속이 수행되는지 여부를 나타내는 신택스이다. 예를 들어, 뎁스 블록을 복호화하는 과정에서 해당 뎁스 블록에 대응하는 텍스쳐 블록의 모션 벡터를 이용하거나, 또는 텍스쳐 블록의 모션 벡터를 이웃 시점의 참조 블록으로부터 유도하는 방법을 모션 파라미터 상속(motion parameter inheritance)이라 한다. 따라서, mpi_flag에 따라 모션 파라미터 상속이 수행되는 경우, 상술한 텍스쳐 머지 후보자 또는 인터뷰 모션 후보자(IvMC)가 현재 블록의 머지 후보자로 이용될 수 있고, 변수 NumExtraMergeCand는 1로 설정될 수 있다.
ViewSynthesisPredFlag는 VSP 후보자가 이용되는지 여부를 나타내는 플래그이다. 따라서, ViewSynthesisPredFlag의 값이 1인 경우, 현재 블록은 VSP 후보자를 머지 후보 리스트에 추가할 수 있고, 변수 NumExtraMergeCand는 1로 설정될 수 있다.
상술한 머지 후보자들 즉, 현재 블록의 공간적/시간적 이웃 블록 및 인터뷰 머지 후보자는 현재 블록에 관한 머지 후보 리스트에 포함되며, 다만 상기 유도된 머지 후보자의 최대 개수(MaxNumMergeCand)만큼 포함될 수 있다.
이를 위해 머지 후보 리스트에 추가되는 머지 후보자들 간에 우선 순위(또는, 배열 순서)가 정의될 필요가 있다.
예를 들어, 머지 후보자들은 인터뷰 모션 후보자(IvMC), 좌측 이웃 블록(A1), 상단 이웃 블록(B1), 상단우측 이웃 블록(B0), 인터뷰 변이 후보자(IvDC), VSP 후보자, 좌측하단 이웃 블록(A0), 상단좌측 이웃 블록(B2), 인터뷰 모션 시프트 후보자(IvMCShift), 인터뷰 변이 시프트 후보자(IvDCShift)의 순서로 우선 순위를 가질 수 있다.
또는, 머지 후보자들은 인터뷰 모션 후보자(IvMC), 좌측 이웃 블록(A1), 상단 이웃 블록(B1), VSP 후보자, 상단우측 이웃 블록(B0), 인터뷰 변이 후보자(IvDC), 좌측하단 이웃 블록(A0), 상단좌측 이웃 블록(B2), 인터뷰 모션 시프트 후보자(IvMCShift), 인터뷰 변이 시프트 후보자(IvDCShift)의 순서로 우선 순위를 가질 수도 있으며, 상술한 우선 순위는 당업자에게 자명한 범위 내에서 변경 가능함은 물론이다.
도 7은 본 발명이 적용되는 일실시예로서, 조명 보상 플래그(ic_flag)에 기반하여 인터뷰 모션 후보자(IvMC)를 적응적으로 이용하는 방법을 도시한 것이다.
도 6에서 살펴본 바와 같이, 인터뷰 모션 후보자(IvMC)가 머지 후보 리스트에 포함되는 경우, 상기 인터뷰 모션 후보자(IvMC)는 머지 후보자들 중에서 최우선 순위를 가지고 머지 후보 리스트에 배열될 수 있다. 예를 들어, 머지 후보 리스트를 구성하는 머지 후보자 각각에 0보다 크거나 같은 정수 범위 내에서 인덱스가 할당되는 경우, 상기 인터뷰 모션 후보자(IvMC)는 머지 후보 리스트 내에서 0값의 인덱스를 가진 머지 후보자로 표현될 수 있다.
만일, 현재 블록에 관한 머지 인덱스(merge_idx)의 값이 0인 경우, 현재 블록은 인터뷰 모션 후보자(IvMC)를 이용하여 머지 모드로 복호화될 가능성이 크다고 볼 수 있다. 또한, 현재 블록이 인터뷰 모션 후보자(IvMC)를 이용한다는 것은 현재 블록이 포함된 현재 시점과 참조 시점 간의 조명 차이가 크지 않을 가능성이 크다. 따라서, 현재 블록에 관한 머지 인덱스(merge_idx)의 값을 고려하여 조명 보상 플래그(ic_flag)를 부호화하는 것이 효율적일 수 있다.
구체적으로, 도 7을 참조하면, 비트스트림으로부터 조명 보상 비가용 플래그(slice_ic_diable_merge_zero_idx_flag) 및 머지 인덱스(merge_idx)를 획득할 수 있다(S700).
상기 조명 보상 비가용 플래그(slice_ic_diable_merge_zero_idx_flag)는 머지 인덱스(merge_idx)의 값이 0인 현재 블록에 대해서 조명 보상 플래그(ic_flag)가 존재하는지 또는 부호화되는지 여부를 특정할 수 있다. 여기서, 현재 블록은 머지 모드로 부호화된 블록(merge_flag=1)으로서, 2Nx2N의 파티션 모드를 가진 코딩 블록(즉, 2Nx2N의 예측 블록)일 수 있다.
구체적으로, 조명 보상 비가용 플래그(slice_ic_diable_merge_zero_idx_flag)의 값이 1인 경우, 머지 인덱스(merge_idx)의 값이 0인 현재 블록에 대해서 조명 보상 플래그(ic_flag)가 존재하지 않으며, 이 경우 조명 보상 플래그(ic_flag)의 값은 0으로 설정될 수 있다.
반면, 조명 보상 비가용 플래그(slice_ic_diable_merge_zero_idx_flag)의 값이 0인 경우, 머지 인덱스(merge_idx)의 값이 0인 현재 블록에 대해서 조명 보상 플래그(ic_flag)가 부호화될 수 있음을 부호화될 수 있다.
상기 머지 인덱스(merge_idx)는 현재 블록의 모션 벡터를 유도하기 위해 이용되는 머지 후보자를 특정하는 정보로서, 이는 도 2에서 살펴본 바와 같다.
도 7을 참조하면, S700 단계에서 획득된 조명 보상 비가용 플래그(slice_ic_diable_merge_zero_idx_flag)의 값이 1인지와 머지 인덱스(merge_idx)의 값이 0인지를 확인할 수 있다(S710).
만일, 조명 보상 비가용 플래그(slice_ic_diable_merge_zero_idx_flag)의 값이 1이고 머지 인덱스(merge_idx)의 값이 0인 경우, 현재 블록에 관한 조명 보상 플래그(ic_flag)의 값은 0으로 설정될 수 있다(S720).
반면, 조명 보상 비가용 플래그(slice_ic_diable_merge_zero_idx_flag)의 값이 0이거나 머지 인덱스(merge_idx)의 값이 1인 경우, 비트스트림으로부터 현재 블록에 관한 조명 보상 플래그(ic_flag)를 획득할 수 있다(S730).
여기서, 조명 보상 플래그라 함은 현재 블록(예를 들어, 코딩 유닛 또는 예측 유닛)에 조명 보상이 수행되는지 여부를 나타내는 정보를 의미할 수 있다. 본 발명의 조명 보상이라 함은 시점 간의 조명 차이를 보상하는 것을 의미한다. 시점 간 조명 차이가 발생하는 경우, 이웃 시점의 시간적 모션 벡터를 사용하는 인터뷰 모션 후보자(IvMC)를 이용하는 것보다는 인터뷰 변이 후보자(IvDC)를 이용하는 것이 효율적일 수 있다. 따라서, 조명 보상 플래그에 기반하여 인터뷰 모션 후보자(IvMC)를 선택적으로 이용하도록 제한할 수 있다.
도 7을 참조하면, 현재 블록에 관한 조명 보상 플래그의 값이 1인지 확인할 수 있다(S740).
만일, 조명 보상 플래그의 값이 1이 아닌 경우(즉, ic_flag=0), 인터뷰 모션 후보자(IvMC)를 유도할 수 있다(S750). 상기 인터뷰 모션 후보자(IvMC)의 의미 및 모션 벡터를 유도하는 방법에 대해서는 도 3을 참조하여 자세히 살펴본 바와 같다.S750 단계에서 유도된 인터뷰 모션 후보자(IvMC)를 포함한 머지 후보 리스트를 생성할 수 있다(S770). 즉, 상술한 우선 순위에 따라 인터뷰 모션 후보자(IvMC)를 머지 후보 리스트에 추가할 수 있다.
반면, 조명 보상 플래그의 값이 1인 경우, 인터뷰 모션 후보자(IvMC)를 유도하는 과정을 스킵할 수 있다(S760).
이 경우, 인터뷰 모션 후보자(IvMC)가 현재 블록에 관한 머지 후보자로서 가용한지 여부를 나타내는 플래그(availableFlagIvMC)의 값을 0으로 설정함으로써 상기 인터뷰 모션 후보자(IvMC)가 머지 후보 리스트에 추가되지 않도록 제한할 수도 있다. 또한, 인터뷰 모션 후보자(IvMC)와 관련된 인터뷰 모션 시프트 후보자(IvMCShift) 역시 머지 후보자 리스트에서 제외될 수 있다.
상술한 우선 순위에 따라 인터뷰 모션 후보자(IvMC) 및/또는 인터뷰 모션 시프트 후보자(IvMCShift)를 제외한 머지 후보자들을 이용하여 머지 후보 리스트를 생성할 수 있다(S770).
예를 들어, 머지 후보자의 최대 개수(MaxNumMergeCand) 범위 내에서 좌측 이웃 블록(A1), 상단 이웃 블록(B1), 인터뷰 변이 후보자(IvDC), 상단우측 이웃 블록(B0), VSP 후보자, 좌측하단 이웃 블록(A0), 상단좌측 이웃 블록(B2), 인터뷰 변이 시프트 후보자(IvDCShift)의 우선 순위로 머지 후보 리스트에 추가될 수 있다.
또는, 좌측 이웃 블록(A1), 상단 이웃 블록(B1), 인터뷰 변이 후보자(IvDC), 상단우측 이웃 블록(B0), VSP 후보자, 인터뷰 변이 시프트 후보자(IvDCShift), 좌측하단 이웃 블록(A0), 상단좌측 이웃 블록(B2)의 우선 순위로 머지 후보 리스트에 추가될 수 있다.
또는, 좌측 이웃 블록(A1), 상단 이웃 블록(B1), 상단우측 이웃 블록(B0), 인터뷰 변이 후보자(IvDC), VSP 후보자, 좌측하단 이웃 블록(A0), 상단좌측 이웃 블록(B2), 인터뷰 변이 시프트 후보자(IvDCShift)의 우선 순위로 머지 후보 리스트에 추가될 수 있다.
도 8은 본 발명이 적용되는 일실시예로서, 조명 보상 플래그(ic_flag)에 기반한 머지 후보자들의 우선 순위를 도시한 것이다.
도 7에서 상술한 바와 같이, 시점 간 조명 차이가 발생하는 경우에는 인터뷰 모션 후보자(IvMC)를 이용하는 것보다는 인터뷰 변이 후보자(IvDC)를 이용하는 것이 효율적일 수 있다. 따라서, 인터뷰 변이 후보자(IvDC)가 인터뷰 모션 후보자(IvMC)보다 선순위를 갖도록 우선 순위를 변경하여 부호화 성능을 향상시킬 수도 있다. 또한, 인터뷰 변이 시프트 후보자(IvDCShift)가 인터뷰 모션 시프트 후보자(IvMCShift)보다 선순위를 갖도록 우선 순위를 변경할 수도 있다.
도 8을 참조하면, 조명 보상 플래그의 값이 1인 경우, 인터뷰 변이 후보자(IvDC), 좌측 이웃 블록(A1), 상단 이웃 블록(B1), 인터뷰 모션 후보자(IvMC), 상단우측 이웃 블록(B0), VSP 후보자, 인터뷰 변이 시프트 후보자(IvDCShift), 인터뷰 모션 시프트 후보자(IvMCShift), 좌측하단 이웃 블록(A0), 상단좌측 이웃 블록(B2)의 우선 순위로 머지 후보 리스트에 추가될 수 있다. 도 8에 도시된 머지 후보자의 우선 순위는 작은 값을 가질수록 높은 우선 순위를 가지고, 큰 값을 가질수록 낮은 우선 순위를 가지는 것을 의미한다.
한편, 조명 보상 플래그의 값이 0인 경우, 인터뷰 모션 후보자(IvMC), 좌측 이웃 블록(A1), 상단 이웃 블록(B1), 인터뷰 변이 후보자(IvDC), 상단우측 이웃 블록(B0), VSP 후보자, 인터뷰 모션 시프트 후보자(IvMCShift), 인터뷰 변이 시프트 후보자(IvDCShift), 좌측하단 이웃 블록(A0), 상단좌측 이웃 블록(B2)의 우선 순위로 머지 후보 리스트에 추가될 수 있다.
본 발명은 다시점 비디오 신호를 코딩하는데 이용될 수 있다.

Claims (15)

  1. 현재 블록에 관한 머지 후보 리스트를 생성하는 단계; 여기서, 상기 머지 후보 리스트는 적어도 하나의 머지 후보자로 구성되고, 상기 머지 후보자는 공간적 이웃 블록, 시간적 이웃 블록 또는 인터뷰 모션 후보자(IvMC) 중 적어도 하나를 포함함,
    비트스트림으로부터 획득된 상기 현재 블록에 대한 머지 인덱스에 기반하여 상기 현재 블록의 모션 벡터를 유도하는 단계; 여기서, 상기 머지 인덱스는 상기 현재 블록을 머지 모드로 복호화하기 위해 이용되는 머지 후보자를 특정함,
    상기 유도된 모션 벡터를 이용하여 상기 현재 블록의 예측값을 획득하는 단계; 및
    상기 획득된 예측값과 상기 현재 블록에 관한 잔차값을 더하여 상기 현재 블록을 복원하는 단계를 포함하되,
    상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록에 대해 조명 보상이 수행되는지 여부를 나타내는 조명 보상 플래그(ic_flag)에 기초하여 상기 머지 후보 리스트에 제한적으로 포함되는 것을 특징으로 하는 다시점 비디오 신호 디코딩 방법.
  2. 제1항에 있어서,
    상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록의 변이 벡터에 의해 특정되는 참조 블록의 시간적 모션 벡터를 가지되,
    상기 참조 블록은 상기 현재 블록의 참조 시점(reference view)에 속하는 것을 특징으로 하는 다시점 비디오 신호 디코딩 방법.
  3. 제2항에 있어서,
    비트스트림으로부터 조명 보상 비가용 플래그를 획득하는 단계; 여기서, 상기 조명 보상 비가용 플래그는 상기 머지 인덱스의 값이 0인 상기 현재 블록에 대해서 조명 보상 플래그가 부호화되는지 여부를 특정함, 및
    상기 조명 보상 비가용 플래그와 상기 머지 인덱스에 기초하여 상기 조명 보상 플래그의 값을 획득하는 단계를 포함하는 것을 특징으로 하는 다시점 비디오 신호 디코딩 방법.
  4. 제3항에 있어서,
    상기 조명 보상 플래그의 값에 따라 상기 현재 블록에 대해 조명 보상이 수행되지 아니하는 경우, 상기 인터뷰 모션 후보자(IvMC)는 상기 머지 후보 리스트에 포함되되,
    상기 인터뷰 모션 후보자(IvMC), 상기 공간적 이웃 블록, 상기 시간적 이웃 블록의 우선 순위로 상기 머지 후보 리스트에 배열되는 것을 특징으로 하는 다시점 비디오 신호 디코딩 방법.
  5. 현재 블록에 관한 머지 후보 리스트를 생성하고, 비트스트림으로부터 획득된 상기 현재 블록에 대한 머지 인덱스에 기반하여 상기 현재 블록의 모션 벡터를 유도하며, 상기 유도된 모션 벡터를 이용하여 상기 현재 블록의 예측값을 획득하는 인터 예측부; 및
    상기 획득된 예측값과 상기 현재 블록에 관한 잔차값을 더하여 상기 현재 블록을 복원하는 복원부를 포함하되,
    상기 머지 후보 리스트는 적어도 하나의 머지 후보자로 구성되고, 상기 머지 후보자는 공간적 이웃 블록, 시간적 이웃 블록 또는 인터뷰 모션 후보자(IvMC) 중 적어도 하나를 포함하며, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록에 대해 조명 보상이 수행되는지 여부를 나타내는 조명 보상 플래그(ic_flag)에 기초하여 상기 머지 후보 리스트에 제한적으로 포함되고, 상기 머지 인덱스는 상기 현재 블록을 머지 모드로 복호화하기 위해 이용되는 머지 후보자를 특정하는 것을 특징으로 하는 다시점 비디오 신호 디코딩 장치.
  6. 제5항에 있어서,
    상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록의 변이 벡터에 의해 특정되는 참조 블록의 시간적 모션 벡터를 가지되,
    상기 참조 블록은 상기 현재 블록의 참조 시점(reference view)에 속하는 것을 특징으로 하는 다시점 비디오 신호 디코딩 장치.
  7. 제6항에 있어서,
    비트스트림으로부터 조명 보상 비가용 플래그를 획득하는 인트로피 디코딩부; 여기서, 상기 조명 보상 비가용 플래그는 상기 머지 인덱스의 값이 0인 상기 현재 블록에 대해서 조명 보상 플래그가 부호화되는지 여부를 특정함, 및
    상기 조명 보상 비가용 플래그와 상기 머지 인덱스에 기초하여 상기 조명 보상 플래그의 값을 획득하는 상기 인터 예측부를 포함하는 것을 특징으로 하는 다시점 비디오 신호 디코딩 장치.
  8. 제7항에 있어서, 상기 인터 예측부는,
    상기 조명 보상 플래그의 값에 따라 상기 현재 블록에 대해 조명 보상이 수행되지 아니하는 경우에 상기 인터뷰 모션 후보자(IvMC)를 상기 머지 후보 리스트에 포함하되,
    상기 인터뷰 모션 후보자(IvMC), 상기 공간적 이웃 블록, 상기 시간적 이웃 블록의 우선 순위로 상기 머지 후보 리스트에 배열하는 것을 특징으로 하는 다시점 비디오 신호 디코딩 장치.
  9. 현재 블록에 관한 머지 후보 리스트를 생성하는 단계; 여기서, 상기 머지 후보 리스트는 적어도 하나의 머지 후보자로 구성되고, 상기 머지 후보자는 공간적 이웃 블록, 시간적 이웃 블록 또는 인터뷰 모션 후보자(IvMC) 중 적어도 하나를 포함함,
    상기 현재 블록에 대한 머지 인덱스에 기반하여 상기 현재 블록의 모션 벡터를 유도하는 단계; 여기서, 상기 머지 인덱스는 상기 현재 블록을 머지 모드로 부호화하기 위해 이용되는 머지 후보자를 특정함,
    상기 유도된 모션 벡터를 이용하여 상기 현재 블록의 예측값을 획득하는 단계; 및
    상기 획득된 예측값과 상기 현재 블록에 관한 잔차값을 더하여 상기 현재 블록을 복원하는 단계를 포함하되,
    상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록에 대해 조명 보상이 수행되는지 여부를 나타내는 조명 보상 플래그(ic_flag)에 기초하여 상기 머지 후보 리스트에 제한적으로 포함되는 것을 특징으로 하는 다시점 비디오 신호 인코딩 방법.
  10. 제9항에 있어서,
    상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록의 변이 벡터에 의해 특정되는 참조 블록의 시간적 모션 벡터를 가지되,
    상기 참조 블록은 상기 현재 블록의 참조 시점(reference view)에 속하는 것을 특징으로 하는 다시점 비디오 신호 인코딩 방법.
  11. 제10항에 있어서,
    상기 머지 인덱스의 값이 0인 상기 현재 블록에 관한 조명 보상 플래그가 부호화되는지 여부를 특정하는 조명 보상 비가용 플래그의 값을 결정하는 단계;
    상기 조명 보상 비가용 플래그의 값과 상기 머지 인덱스의 값에 기초하여 상기 조명 보상 플래그의 값을 결정하는 단계를 포함하는 것을 특징으로 하는 다시점 비디오 신호 인코딩 방법.
  12. 제11항에 있어서,
    상기 조명 보상 플래그의 값에 따라 상기 현재 블록에 대해 조명 보상이 수행되지 아니하는 경우, 상기 인터뷰 모션 후보자(IvMC)는 상기 머지 후보 리스트에 포함되되,
    상기 인터뷰 모션 후보자(IvMC), 상기 공간적 이웃 블록, 상기 시간적 이웃 블록의 우선 순위로 상기 머지 후보 리스트에 배열되는 것을 특징으로 하는 다시점 비디오 신호 인코딩 방법.
  13. 현재 블록에 관한 머지 후보 리스트를 생성하고, 상기 현재 블록에 대한 머지 인덱스에 기반하여 상기 현재 블록의 모션 벡터를 유도하며, 상기 유도된 모션 벡터를 이용하여 상기 현재 블록의 예측값을 획득하는 인터 예측부; 및
    상기 획득된 예측값과 상기 현재 블록에 관한 잔차값을 더하여 상기 현재 블록을 복원하는 복원부를 포함하되,
    상기 머지 후보 리스트는 적어도 하나의 머지 후보자로 구성되고, 상기 머지 후보자는 공간적 이웃 블록, 시간적 이웃 블록 또는 인터뷰 모션 후보자(IvMC) 중 적어도 하나를 포함하며, 상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록에 대해 조명 보상이 수행되는지 여부를 나타내는 조명 보상 플래그(ic_flag)에 기초하여 상기 머지 후보 리스트에 제한적으로 포함되고,
    상기 머지 인덱스는 상기 현재 블록을 머지 모드로 부호화하기 위해 이용되는 머지 후보자를 특정하는 것을 특징으로 하는 다시점 비디오 신호 인코딩 장치.
  14. 제13항에 있어서,
    상기 인터뷰 모션 후보자(IvMC)는 상기 현재 블록의 변이 벡터에 의해 특정되는 참조 블록의 시간적 모션 벡터를 가지되,
    상기 참조 블록은 상기 현재 블록의 참조 시점(reference view)에 속하는 것을 특징으로 하는 다시점 비디오 신호 인코딩 장치.
  15. 제14항에 있어서, 상기 인터 예측부는,
    상기 머지 인덱스의 값이 0인 상기 현재 블록에 관한 조명 보상 플래그가 부호화되는지 여부를 특정하는 조명 보상 비가용 플래그의 값을 결정하고, 상기 조명 보상 비가용 플래그의 값과 상기 머지 인덱스의 값에 기초하여 상기 조명 보상 플래그의 값을 결정하는 것을 특징으로 하는 다시점 비디오 신호 인코딩 장치.
PCT/KR2015/002632 2014-03-21 2015-03-18 다시점 비디오 신호 처리 방법 및 장치 WO2015142057A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2014-0033102 2014-03-21
KR20140033102 2014-03-21

Publications (1)

Publication Number Publication Date
WO2015142057A1 true WO2015142057A1 (ko) 2015-09-24

Family

ID=54144946

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/002632 WO2015142057A1 (ko) 2014-03-21 2015-03-18 다시점 비디오 신호 처리 방법 및 장치

Country Status (2)

Country Link
KR (1) KR20150110357A (ko)
WO (1) WO2015142057A1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020139040A1 (ko) * 2018-12-27 2020-07-02 인텔렉추얼디스커버리 주식회사 영상 부/복호화 방법 및 장치
CN112166610A (zh) * 2018-06-08 2021-01-01 株式会社Kt 用于处理视频信号的方法和设备
CN113170188A (zh) * 2018-12-21 2021-07-23 夏普株式会社 在视频编码中用于执行帧间预测的系统和方法
CN113507603A (zh) * 2018-11-08 2021-10-15 Oppo广东移动通信有限公司 图像信号编码/解码方法及其设备
RU2793902C1 (ru) * 2019-06-19 2023-04-07 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ декодирования изображений для выполнения взаимного прогнозирования, когда режим прогнозирования для текущего блока в конечном счете не может выбираться, и устройство для этого
US11632568B2 (en) 2019-06-19 2023-04-18 Lg Electronics Inc. Image decoding method for performing inter-prediction when prediction mode for current block ultimately cannot be selected, and device for same

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117156155A (zh) * 2018-03-14 2023-12-01 Lx 半导体科技有限公司 图像编码/解码方法、存储介质和发送方法
US11632546B2 (en) 2018-07-18 2023-04-18 Electronics And Telecommunications Research Institute Method and device for effective video encoding/decoding via local lighting compensation
CN114270835A (zh) * 2019-06-19 2022-04-01 Lg电子株式会社 基于默认合并模式推导预测样本的图像解码方法及其装置
MX2021016161A (es) 2019-06-19 2022-03-11 Lg Electronics Inc Metodo de decodificacion de imagen que comprende generar muestras de prediccion aplicando modo de prediccion determinada, y dispositivo para el mismo.
KR20230040296A (ko) * 2021-09-15 2023-03-22 주식회사 케이티 비디오 신호 부호화/복호화 방법, 그리고 비트스트림을 저장한 기록 매체

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009530960A (ja) * 2006-03-22 2009-08-27 韓國電子通信研究院 照明変化補償動き予測符号化および復号化方法とその装置
JP2011509639A (ja) * 2008-01-10 2011-03-24 トムソン ライセンシング イントラ予測されたビデオの照明補償の方法及び装置
KR20120034042A (ko) * 2010-09-30 2012-04-09 한국전자통신연구원 오차 보상을 이용한 영상 부호화/복호화 방법 및 장치
KR20130028633A (ko) * 2011-09-09 2013-03-19 주식회사 케이티 화면 간 예측 수행시 후보 블록 결정 방법 및 이러한 방법을 사용하는 장치
WO2013069933A1 (ko) * 2011-11-07 2013-05-16 엘지전자 주식회사 영상 부호화/복호화 방법 및 그 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009530960A (ja) * 2006-03-22 2009-08-27 韓國電子通信研究院 照明変化補償動き予測符号化および復号化方法とその装置
JP2011509639A (ja) * 2008-01-10 2011-03-24 トムソン ライセンシング イントラ予測されたビデオの照明補償の方法及び装置
KR20120034042A (ko) * 2010-09-30 2012-04-09 한국전자통신연구원 오차 보상을 이용한 영상 부호화/복호화 방법 및 장치
KR20130028633A (ko) * 2011-09-09 2013-03-19 주식회사 케이티 화면 간 예측 수행시 후보 블록 결정 방법 및 이러한 방법을 사용하는 장치
WO2013069933A1 (ko) * 2011-11-07 2013-05-16 엘지전자 주식회사 영상 부호화/복호화 방법 및 그 장치

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112166610A (zh) * 2018-06-08 2021-01-01 株式会社Kt 用于处理视频信号的方法和设备
CN113507603A (zh) * 2018-11-08 2021-10-15 Oppo广东移动通信有限公司 图像信号编码/解码方法及其设备
US11695952B2 (en) 2018-11-08 2023-07-04 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image signal encoding/decoding method, and apparatus therefor
CN113170188A (zh) * 2018-12-21 2021-07-23 夏普株式会社 在视频编码中用于执行帧间预测的系统和方法
WO2020139040A1 (ko) * 2018-12-27 2020-07-02 인텔렉추얼디스커버리 주식회사 영상 부/복호화 방법 및 장치
CN113228642A (zh) * 2018-12-27 2021-08-06 英迪股份有限公司 图像编码/解码方法和装置
US11812031B2 (en) 2018-12-27 2023-11-07 Intellectual Discovery Co., Ltd. Image encoding/decoding method and device
RU2793902C1 (ru) * 2019-06-19 2023-04-07 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ декодирования изображений для выполнения взаимного прогнозирования, когда режим прогнозирования для текущего блока в конечном счете не может выбираться, и устройство для этого
US11632568B2 (en) 2019-06-19 2023-04-18 Lg Electronics Inc. Image decoding method for performing inter-prediction when prediction mode for current block ultimately cannot be selected, and device for same

Also Published As

Publication number Publication date
KR20150110357A (ko) 2015-10-02

Similar Documents

Publication Publication Date Title
WO2015142054A1 (ko) 다시점 비디오 신호 처리 방법 및 장치
WO2015142057A1 (ko) 다시점 비디오 신호 처리 방법 및 장치
WO2020036417A1 (ko) 히스토리 기반 움직임 벡터에 기반한 인터 예측 방법 및 그 장치
WO2018062921A1 (ko) 영상 코딩 시스템에서 블록 분할 및 인트라 예측 방법 및 장치
WO2018056603A1 (ko) 영상 코딩 시스템에서 조도 보상 기반 인터 예측 방법 및 장치
WO2013169031A1 (ko) 비디오 신호 처리 방법 및 장치
WO2012081879A1 (ko) 인터 예측 부호화된 동영상 복호화 방법
WO2012023763A2 (ko) 인터 예측 부호화 방법
WO2013069975A1 (ko) 예측 단위의 파티션 모드에 기초한 계수 스캔 방법 및 장치
WO2013165143A1 (ko) 멀티뷰 영상의 부호화 방법, 부호화 장치, 복호화 방법, 복호화 장치
WO2016200043A1 (ko) 비디오 코딩 시스템에서 가상 참조 픽처 기반 인터 예측 방법 및 장치
WO2013162273A1 (ko) 비디오 신호 처리 방법 및 장치
WO2016056821A1 (ko) 3d 비디오 코딩을 위한 움직임 정보 압축 방법 및 장치
WO2018056709A1 (ko) 영상 코딩 시스템에서 인터 예측 방법 및 장치
WO2012044124A2 (ko) 영상 부호화 방법과 복호화 방법 및 이를 이용한 영상 부호화 장치와 복호화 장치
WO2018056602A1 (ko) 영상 코딩 시스템에서 인터 예측 방법 및 장치
WO2015057033A1 (ko) 3d 비디오 부호화/복호화 방법 및 장치
WO2019198997A1 (ko) 인트라 예측에 기반한 영상 코딩 방법 및 그 장치
WO2019112071A1 (ko) 영상 코딩 시스템에서 크로마 성분의 효율적 변환에 기반한 영상 디코딩 방법 및 장치
WO2016056822A1 (ko) 3d 비디오 코딩 방법 및 장치
WO2019194507A1 (ko) 어파인 움직임 예측에 기반한 영상 코딩 방법 및 그 장치
WO2019194500A1 (ko) 인트라 예측에 기반한 영상 코딩 방법 및 그 장치
WO2016056754A1 (ko) 3d 비디오 부호화/복호화 방법 및 장치
WO2016056782A1 (ko) 비디오 코딩에서 뎁스 픽처 코딩 방법 및 장치
WO2016003210A1 (ko) 다시점 비디오 신호 처리 방법 및 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15765267

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205 DATED 13/01/2017)

122 Ep: pct application non-entry in european phase

Ref document number: 15765267

Country of ref document: EP

Kind code of ref document: A1