KR101750316B1 - 비디오 신호 처리 방법 및 장치 - Google Patents

비디오 신호 처리 방법 및 장치 Download PDF

Info

Publication number
KR101750316B1
KR101750316B1 KR1020167000321A KR20167000321A KR101750316B1 KR 101750316 B1 KR101750316 B1 KR 101750316B1 KR 1020167000321 A KR1020167000321 A KR 1020167000321A KR 20167000321 A KR20167000321 A KR 20167000321A KR 101750316 B1 KR101750316 B1 KR 101750316B1
Authority
KR
South Korea
Prior art keywords
motion vector
block
inter
current block
corresponding block
Prior art date
Application number
KR1020167000321A
Other languages
English (en)
Other versions
KR20160024908A (ko
Inventor
김태섭
유선미
예세훈
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of KR20160024908A publication Critical patent/KR20160024908A/ko
Application granted granted Critical
Publication of KR101750316B1 publication Critical patent/KR101750316B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 비디오 신호 처리 방법 및 장치에 관한 것으로, 현재 블록의 시점 간 모션 벡터를 획득하고, 상기 시점 간 모션 벡터를 이용하여 제 1 대응 블록을 획득하고, 상기 제 1 대응 블록의 예측 방법을 식별하고, 상기 제 1 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 제 2 대응 블록을 획득하고, 상기 제 2 대응 블록의 시간 모션 벡터를 획득하고, 상기 제 2 대응 블록의 시간 모션 벡터를 이용하여 상기 현재 블록의 시간 모션 벡터를 획득하고, 상기 현재 블록의 시간 모션 벡터를 이용하여 현재 블록을 디코딩할 수 있다.

Description

비디오 신호 처리 방법 및 장치{METHOD AND APPARATUS FOR PROCESSING VIDEO SIGNAL}
본 발명은 비디오 신호의 코딩 방법 및 장치에 관한 것이다.
압축 부호화란 디지털화한 정보를 통신 회선을 통해 전송하거나, 저장 매체에 적합한 형태로 저장하는 일련의 신호 처리 기술을 의미한다. 압축 부호화의 대상에는 음성, 영상, 문자 등의 대상이 존재하며, 특히 영상을 대상으로 압축 부호화를 수행하는 기술을 비디오 영상 압축이라고 일컫는다. 다시점 비디오 영상의 일반적인 특징은 공간적 중복성, 시간적 중복성 및 시점 간 중복성을 지니고 있는 점에 특징이 있다.
본 발명의 목적은 비디오 신호의 코딩 효율을 높이고자 함에 있다.
본 발명은 대응 블록의 예측 방법을 통해 대응 블록이 시간 인터 예측으로 코딩되었는지 여부를 식별하고, 대응 블록이 시간 인터 예측으로 코딩된 경우 대응 블록의 시간 모션 벡터를 이용하여 현재 블록의 시간 모션 벡터를 획득하는 것을 특징으로 한다.
또한, 본 발명은 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 현재 블록의 시점 간 모션 벡터를 수정하여 식별된 대응 블록과는 다른 대응 블록을 획득하는 것을 특징으로 한다.
본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명은 최초 대응 블록에 대응되는 시간 모션 벡터가 없는 경우에도 시간 모션 벡터가 있는 대응 블록을 획득함에 따라 현재 블록의 시간 모션 벡터가 획득되지 않는 경우가 발생하지 않도록 할 수 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명이 적용되는 실시예로서, 뎁스 코딩이 적용되는 방송 수신기의 내부 블록도를 나타낸다.
도 2는 본 발명이 적용되는 일 실시예로서, 비디오 디코더의 개략적인 블록도를 도시한 것이다.
도 3은 본 발명이 적용되는 일 실시예로서, 현재 블록의 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 실시예의 흐름도를 도시한 것이다.
도 4는 본 발명이 적용되는 일 실시예로서, 현재 블록의 시간 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 일 실시예를 도시한 것이다.
도 5는 본 발명이 적용되는 일 실시예로서, 현재 블록의 시간 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 일 실시예의 흐름도를 도시한 것이다.
도 6은 본 발명이 적용되는 일 실시예로서, 현재 블록의 시간 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 일 실시예의 흐름도를 도시한 것이다.
발명의 실시를 위한 최선의 형태
본 발명은 현재 블록의 시점 간 모션 벡터를 획득하고, 상기 시점 간 모션 벡터를 이용하여 제 1 대응 블록을 획득하고, 상기 제 1 대응 블록의 예측 방법을 식별하고, 상기 제 1 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 제 2 대응 블록을 획득하고, 상기 제 2 대응 블록의 시간 모션 벡터를 획득하고, 상기 제 2 대응 블록의 시간 모션 벡터를 이용하여 상기 현재 블록의 시간 모션 벡터를 획득하고, 상기 현재 블록의 시간 모션 벡터를 이용하여 현재 블록을 디코딩하는 비디오 신호 처리 방법 및 장치다.
또한, 본 발명은 상기 제 2 대응 블록을 획득하기 위해 상기 시점 간 모션 벡터를 수정하고, 상기 수정된 시점 간 모션 벡터를 이용하여 상기 제 2 대응 블록을 획득하는 비디오 신호 처리 방법 및 장치다.
또한, 본 발명은 상기 제 1 대응 블록이 시간 인터 예측으로 코딩된 경우, 상기 제 1 대응 블록의 시간 모션 벡터를 획득하고, 상기 제 1 대응 블록의 시간 모션 벡터를 이용하여 상기 현재 블록의 시간 모션 벡터를 획득하는 비디오 신호 처리 방법 및 장치다.
또한, 본 발명은 상기 현재 블록의 시점 간 모션 벡터는 상기 현재 블록의 이웃 블록으로부터 획득되는 것을 특징으로 하는 비디오 신호 처리 방법 및 장치다.
또한, 본 발명은 상기 현재 블록의 시점 간 모션 벡터는 상기 현재 블록에 대응되는 뎁스 블록의 뎁스 값을 이용하여 획득되는 것을 특징으로 하는 비디오 신호 처리 방법 및 장치다.
발명의 실시를 위한 형태
다시점 비디오 신호 데이터를 압축 부호화 또는 복호화하는 기술은 공간적 중복성, 시간적 중복성 및 시점 간 존재하는 중복성을 고려하고 있다. 또한, 다시점 영상의 경우, 3차원 영상을 구현하기 위해 2개 이상의 시점에서 촬영된 다시점 텍스쳐 영상을 코딩할 수 있다. 또한, 필요에 따라 다시점 텍스쳐 영상에 대응하는 뎁스 데이터를 더 코딩할 수도 있다. 뎁스 데이터를 코딩함에 있어서, 공간적 중복성, 시간적 중복성 또는 시점 간 중복성을 고려하여 압축 코딩할 수 있음은 물론이다. 뎁스 데이터는 카메라와 해당 화소 간의 거리 정보를 표현한 것이며, 본 명세서 내에서 뎁스 데이터는 뎁스 정보, 뎁스 영상, 뎁스 픽쳐, 뎁스 시퀀스, 뎁스 비트스트림 등과 같이 뎁스에 관련된 정보로 유연하게 해석될 수 있다. 또한, 본 명세서에서 코딩이라 함은 인코딩과 디코딩의 개념을 모두 포함할 수 있고, 본 발명의 기술적 사상 및 기술적 범위에 따라 유연하게 해석할 수 있을 것이다.
도 1은 본 발명이 적용되는 실시예로서, 뎁스 코딩이 적용되는 방송 수신기의 내부 블록도를 나타낸다.
본 실시예에 따른 방송 수신기는 공중파 방송신호를 수신하여 영상을 재생하기 위한 것이다. 상기 방송 수신기는 수신된 뎁스 관련 정보들을 이용하여 3차원 콘텐츠를 생성할 수 있다. 상기 방송 수신기는 튜너(100), 복조/채널 디코더(102), 트랜스포트 역다중화부(104), 패킷 해제부(106), 오디오 디코더(108), 비디오 디코더(110), PSI/PSIP 처리부(114), 3D 렌더링부(116), 포맷터(120) 및 디스플레이부(122)를 포함한다.
튜너(100)는 안테나(미도시)를 통해 입력되는 다수의 방송 신호들 중에서 사용자가 선국한 어느 한 채널의 방송 신호를 선택하여 출력한다. 복조/채널 디코더(102)는 튜너(100)로부터의 방송 신호를 복조하고 복조된 신호에 대하여 에러 정정 디코딩을 수행하여 트랜스포트 스트림(TS)을 출력한다. 트랜스포트 역다중화부(104)는 트랜스포트 스트림을 역다중화하여, 비디오 PES와 오디오 PES를 분리하고, PSI/PSIP 정보를 추출해낸다. 패킷 해제부(106)는 비디오 PES와 오디오 PES에 대하여 패킷을 해제하여 비디오 ES와 오디오 ES를 복원한다. 오디오 디코더(108)는 오디오 ES를 디코딩하여 오디오 비트스트림을 출력한다. 오디오 비트스트림은 디지털-아날로그 변환기(미도시)에 의해 아날로그 음성신호로 변환되고, 증폭기(미도시됨)에 의해 증폭된 후, 스피커(미도시됨)를 통해 출력된다. 비디오 디코더(110)는 비디오 ES를 디코딩하여 원래의 영상을 복원한다. 상기 오디오 디코더(108) 및 상기 비디오 디코더(110)의 디코딩 과정은 PSI/PSIP 처리부(114)에 의해 확인되는 패킷 ID(PID)를 토대로 진행될 수 있다. 디코딩 과정에서, 상기 비디오 디코더(110)는 뎁스 정보를 추출할 수 있다. 또한, 가상 카메라 시점의 영상을 생성하는데 필요한 부가 정보, 예를 들어, 카메라 정보, 또는 상대적으로 앞에 있는 객체에 의해 가려지는 영역(Occlusion)을 추정하기 위한 정보(예컨대, 객체 윤곽선 등 기하학적 정보, 객체 투명도 정보 및 컬러 정보) 등을 추출하여 3D 렌더링부(116)에 제공할 수 있다. 그러나, 본 발명의 다른 실시예에 있어서는, 상기 뎁스 정보 및/또는 부가 정보가 트랜스포트 역다중화부(104)에 의해 분리될 수도 있다.
PSI/PSIP 처리부(114)는 트랜스포트 역다중화부(104)로부터의 PSI/PSIP 정보를 받아들이고, 이를 파싱하여 메모리(미도시) 또는 레지스터에 저장함으로써, 저장된 정보를 토대로 방송이 재생되도록 한다. 3D 렌더링부(116)는 복원된 영상, 뎁스 정보, 부가 정보 및 카메라 파라미터를 이용하여, 가상 카메라 위치에서의 컬러 정보, 뎁스 정보 등을 생성할 수 있다.
또한, 3D 렌더링부(116)는 복원된 영상과, 상기 복원된 영상에 대한 뎁스 정보를 이용하여 3D 와핑(Warping)을 수행함으로써, 가상 카메라 위치에서의 가상 영상을 생성한다. 본 실시예에서는 상기 3D 렌더링부(116)가 상기 비디오 디코더(110)와 별개의 블록으로 구성되어 설명되고 있지만, 이는 일실시예에 불과하며, 상기 3D 렌더링부(116)는 상기 비디오 디코더(110)에 포함되어 수행될 수도 있다.
포맷터(120)는 디코딩 과정에서 복원한 영상 즉, 실제 카메라에 의하여 촬영된 영상과, 3D 렌더링부(116)에 의하여 생성된 가상 영상을 해당 수신기에서의 디스플레이 방식에 맞게 포맷팅하여, 디스플레이부(122)를 통해 3D 영상이 표시되도록 하게 된다. 여기서, 상기 3D 렌더링부(116)에 의한 가상 카메라 위치에서의 뎁스 정보 및 가상 영상의 합성, 그리고 포맷터(120)에 의한 영상 포맷팅이 사용자의 명령에 응답하여 선택적으로 수행될 수도 있다. 즉, 시청자는 리모콘(미도시)을 조작하여 합성 영상이 표시되지 않도록 할 수도 있고, 영상 합성이 이루어질 시점을 지정할 수도 있다.
상기에서 살펴본 바와 같이, 3D 영상을 생성하기 위해 뎁스 정보는 3D 렌더링부(116)에서 이용되고 있지만, 다른 실시예로서 상기 비디오 디코더(110)에서 이용될 수도 있다. 이하에서는 상기 비디오 디코더(110)에서 뎁스 정보를 이용하는 다양한 실시예들을 살펴보도록 한다.
도 2는 본 발명이 적용되는 실시예로서, 비디오 디코더의 개략적인 블록도를 나타낸다.
도 2를 참조하면, 상기 비디오 디코더(110)는 크게 엔트로피 디코딩부(210), 역양자화부(220), 역변환부(230), 디블로킹 필터부(240), 복호 픽쳐 버퍼부(250), 인터 예측부(260) 및 인트라 예측부(270)를 포함할 수 있다. 여기서, 실선은 컬러 픽쳐 데이터의 흐름을 의미하며, 점선은 뎁스 픽쳐 데이터의 흐름을 의미한다. 이와 같이, 상기 도 2에서는 컬러 픽쳐 데이터와 뎁스 픽쳐 데이터를 구분하여 표시하였지만, 이는 별개의 비트스트림을 의미할 수 있고, 또는 하나의 비트스트림 내에서 데이터의 흐름만을 구분한 것으로 볼 수도 있다. 즉, 상기 컬러 픽쳐 데이터와 상기 뎁스 픽쳐 데이터는 하나의 비트스트림, 또는 별개의 비트스트림으로 전송될 수 있고, 도 2에서는 데이터의 흐름을 나타낼 뿐 하나의 디코더 내에서 모두 수행되는 것으로 한정되지 않는다.
먼저, 수신된 뎁스 비트스트림(200)을 복호하기 위하여 NAL 단위로 파싱을 수행한다. 이 때 NAL 헤더 영역, NAL 헤더의 확장 영역, 시퀀스 헤더 영역(예를 들어, 시퀀스 파라미터 세트), 시퀀스 헤더의 확장 영역, 픽쳐 헤더 영역(예를 들어, 픽쳐 파라미터 세트), 픽쳐 헤더의 확장 영역, 슬라이스 헤더 영역, 슬라이스 헤더의 확장 영역, 슬라이스 데이터 영역, 또는 매크로 블록 영역에는 뎁스에 관련된 여러 가지 속성 정보가 포함될 수 있다. 뎁스 코딩은 별개의 코덱으로 이용될 수 있지만, 기존 코덱과의 호환을 이루는 경우라면 뎁스 비트스트림인 경우에 한해 뎁스에 관련된 여러 가지 속성 정보들을 추가하는 것이 더 효율적일 수 있다. 예를 들어, 상기 시퀀스 헤더 영역(예를 들어, 시퀀스 파라미터 세트) 또는 시퀀스 헤더의 확장 영역에서 뎁스 비트스트림인지 여부를 식별할 수 있는 뎁스 식별 정보를 추가할 수 있다. 상기 뎁스 식별 정보에 따라, 입력된 비트스트림이 뎁스 코딩된 비트스트림일 경우에 한해 뎁스 시퀀스에 대한 속성 정보들을 추가할 수 있다.
파싱된 뎁스 비트스트림(200)은 엔트로피 디코딩부(210)를 통하여 엔트로피 디코딩되고, 각 매크로블록의 계수, 움직임 벡터 등이 추출된다. 역양자화부(220)에서는 수신된 양자화된 값에 일정한 상수를 곱하여 변환된 계수값을 획득하고, 역변환부(230)에서는 상기 계수값을 역변환하여 뎁스 픽쳐의 뎁스 정보를 복원하게 된다. 인트라 예측부(270)에서는 현재 뎁스 픽쳐의 복원된 뎁스 정보를 이용하여 화면내 예측을 수행하게 된다. 한편, 디블로킹 필터부(240)에서는 블록 왜곡 현상을 감소시키기 위해 각각의 코딩된 매크로블록에 디블로킹 필터링을 적용한다. 필터는 블록의 가장자리를 부드럽게 하여 디코딩된 프레임의 화질을 향상시킨다. 필터링 과정의 선택은 경계 세기(boundary strenth)와 경계 주위의 이미지 샘플의 변화(gradient)에 의해 좌우된다. 필터링을 거친 뎁스 픽쳐들은 출력되거나 참조 픽쳐로 이용하기 위해 복호 픽쳐 버퍼부(250)에 저장된다.
복호 픽쳐 버퍼부(Decoded Picture Buffer unit)(250)에서는 화면간 예측을 수행하기 위해서 이전에 코딩된 뎁스 픽쳐들을 저장하거나 개방하는 역할 등을 수행한다. 이 때 복호 픽쳐 버퍼부(250)에 저장하거나 개방하기 위해서 각 픽쳐의 frame_num 과 POC(Picture Order Count)를 이용하게 된다. 따라서, 뎁스 코딩에 있어서 상기 이전에 코딩된 픽쳐들 중에는 현재 뎁스 픽쳐와 다른 시점에 있는 뎁스 픽쳐들도 있으므로, 이러한 픽쳐들을 참조 픽쳐로서 활용하기 위해서는 상기 frame_num 과 POC 뿐만 아니라 뎁스 픽쳐의 시점을 식별하는 뎁스 시점 정보도 함께 이용할 수 있다.
또한, 상기 복호 픽쳐 버퍼부(250)는 뎁스 픽쳐의 시점간 예측을 위한 참조 픽쳐 리스트를 생성하기 위하여 뎁스 시점에 대한 정보를 이용할 수 있다. 예를 들어, 뎁스-뷰 참조 정보(depth-view reference information)를 이용할 수 있다. 뎁스-뷰 참조 정보란, 뎁스 픽쳐들의 시점간 의존 관계를 나타내기 위해 이용되는 정보들을 말한다. 예를 들어, 전체 뎁스 시점의 개수, 뎁스 시점 식별 번호, 뎁스-뷰 참조 픽쳐의 개수, 뎁스-뷰 참조 픽쳐의 뎁스 시점 식별 번호 등이 있을 수 있다.
상기 복호 픽쳐 버퍼부(250)는 보다 유연하게 화면간 예측을 실현하기 위하여 참조 픽쳐를 관리한다. 예를 들어, 적응 메모리 관리 방법(Memory Management Control Operation Method)과 이동 윈도우 방법(Sliding Window Method)이 이용될 수 있다. 이는 참조 픽쳐와 비참조 픽쳐의 메모리를 하나의 메모리로 통일하여 관리하고 적은 메모리로 효율적으로 관리하기 위함이다. 뎁스 코딩에 있어서, 뎁스 픽쳐들은 복호 픽쳐 버퍼부 내에서 컬러 픽쳐들과 구별하기 위하여 별도의 표시로 마킹될 수 있고, 상기 마킹 과정에서 각 뎁스 픽쳐를 식별해주기 위한 정보가 이용될 수 있다. 이러한 과정을 통해 관리되는 참조 픽쳐들은 인터 예측부(260)에서 뎁스 코딩을 위해 이용될 수 있다.
도 2를 참조하면, 인터 예측부(260)는 움직임 보상부(261), 가상시점 합성부(262) 및 뎁스 픽쳐 예측부(263)를 포함할 수 있다.
움직임 보상부(261)에서는 엔트로피 디코딩부(210)로부터 전송된 정보들을 이용하여 현재 블록의 움직임을 보상한다. 비디오 신호로부터 현재 블록에 이웃하는 블록들의 움직임 벡터를 추출하고, 상기 현재 블록의 움직임 벡터 예측값을 획득한다. 상기 움직임 벡터 예측값과 상기 비디오 신호로부터 추출되는 차분 벡터를 이용하여 현재 블록의 움직임을 보상한다. 또한, 이러한 움직임 보상은 하나의 참조 픽쳐를 이용하여 수행될 수도 있고, 복수의 픽쳐를 이용하여 수행될 수도 있다. 뎁스 코딩에 있어서, 현재 뎁스 픽쳐가 다른 시점에 있는 뎁스 픽쳐를 참조하게 되는 경우, 상기 복호 픽쳐 버퍼부(250)에 저장되어 있는 뎁스 픽쳐의 시점간 예측을 위한 참조 픽쳐 리스트에 대한 정보를 이용하여 움직임 보상을 수행할 수 있다. 또한, 그 뎁스 픽쳐의 시점을 식별하는 뎁스 시점 정보를 이용하여 움직임 보상을 수행할 수도 있다.
또한, 가상 시점 합성부(Virtual View Synthesizing Unit)(262)는 현재 컬러 픽쳐의 시점에 이웃하는 시점의 컬러 픽쳐를 이용하여 가상 시점의 컬러 픽쳐를 합성한다. 서로 이웃하는 시점의 컬러 픽쳐들을 이용하기 위해 또는 원하는 특정 시점의 컬러 픽쳐들을 이용하기 위해, 상기 컬러 픽쳐의 시점을 나타내는 시점 식별 정보가 이용될 수 있다. 상기 가상 시점의 컬러 픽쳐를 생성할 경우, 상기 가상 시점의 컬러 픽쳐를 생성할지 여부를 지시하는 플래그 정보를 정의할 수 있다. 상기 플래그 정보가 상기 가상 시점의 컬러 픽쳐를 생성할 것을 지시하는 경우, 상기 시점 식별 정보를 이용하여 가상 시점의 컬러 픽쳐를 생성할 수 있다. 상기 가상 시점 합성부(262)를 통해 획득된 가상 시점의 컬러 픽쳐는 레퍼런스 픽쳐로 사용될 수도 있으며, 이 경우 상기 가상 시점의 컬러 픽쳐에도 상기 시점 식별 정보를 할당할 수 있음은 물론이다.
다른 실시예로, 상기 가상 시점 합성부(262)는 현재 뎁스 픽쳐의 시점에 이웃하는 시점에 있는 뎁스 픽쳐를 이용하여 가상 시점의 뎁스 픽쳐를 합성할 수 있다. 마찬가지로, 뎁스 픽쳐의 시점을 나타내기 위해 뎁스 시점 식별 정보가 이용될 수 있다. 여기서, 상기 뎁스 시점 식별 정보는 대응되는 컬러 픽쳐의 시점 식별 정보로부터 유도될 수 있다. 예를 들어, 상기 대응되는 컬러 픽쳐는 현재 뎁스 픽쳐와 동일한 픽쳐 출력 순서 정보 및 동일한 시점 식별 정보를 가질 수 있다.
뎁스 픽쳐 생성부(263)는 뎁스 코딩 정보를 이용하여 현재 뎁스 픽쳐를 생성할 수 있다. 여기서, 상기 뎁스 코딩 정보는 카메라와 객체간의 거리를 나타내는 거리 변수(예를 들어, 카메라 좌표계상의 Z좌표값 등), 뎁스 코딩을 위한 매크로블록 타입 정보, 뎁스 픽쳐 내의 경계선 식별 정보, RBSP내의 데이터가 뎁스 코딩된 데이터를 포함하고 있는지 여부를 나타내는 정보, 또는 데이터 타입이 뎁스 픽쳐 데이터인지 컬러 픽쳐 데이터인지 또는 패러렉스 데이터인지 여부를 나타내는 정보 등을 포함할 수 있다. 또한, 상기 뎁스 코딩 정보를 이용하여 현재 뎁스 픽쳐를 예측할 수도 있다. 즉, 현재 뎁스 픽쳐에 이웃하는 뎁스 픽쳐를 이용한 인터 예측이 가능하며, 현재 뎁스 픽쳐내 디코딩된 뎁스 정보를 이용한 인트라 예측이 가능할 것이다.
상술한 움직임 보상부(261)는 현재 블록의 이웃 시점에 위치한 대응 블록으로부터 움직임 벡터 예측 값을 획득할 수도 있다. 여기서, 대응 블록은 현재 블록이 위치한 현재 시점과는 다른 시점에 위치한 블록으로 정의될 수 있다. 대응 블록은 현재 블록에 대응되는 시점 간 움직임 벡터를 이용하여 획득되거나 위치를 특정할 수 있다. 본 발명에서 대응 블록은 제1 대응 블록 내지 제6 대응 블록을 포함할 수 있다. 움직임 보상부(261)는 대응 블록이 시간 인터 예측으로 코딩된 경우 대응 블록의 움직임 벡터를 예측 값으로 획득할 수 있다. 그러나, 대응 블록이 인트라 예측으로 코딩된 경우 대응 블록의 움직임 벡터를 이용할 수 없다.
이에 따라, 본 발명에서는 대응 블록이 움직임 벡터를 가지고 있지 않은 경우, 현재 블록의 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 방법 및 이 방법을 이용하는 장치에 대해 제안한다.
도 3은 본 발명이 적용되는 일 실시예로서, 현재 블록의 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 실시예의 흐름도를 도시한 것이다.
현재 블록에 대응되는 제1 시점 간 움직임 벡터를 획득할 수 있다(S310). 여기서, 제1 시점 간 움직임 벡터는 현재 블록으로부터 참조 시점의 참조 픽쳐 내 대응 블록을 가리키는 움직임 벡터로 정의될 수 있다. 제1 시점 간 움직임 벡터는 현재 블록에 이웃한 이웃 블록의 시점 간 움직임 벡터를 이용하여 획득될 수 있다. 또는, 제1 시점 간 움직임 벡터는 현재 블록에 대응되는 뎁스 블록의 뎁스 값을 이용하여 획득될 수도 있다.
시점 간 모션 벡터를 이용하여 대응 블록을 획득할 수 있다(S320). 여기서, 대응 블록은 현재 시점에 이웃한 참조 시점의 참조 픽쳐 내 블록으로, 시점 간 모션 벡터에 대응되는 블록을 나타낼 수 있다. 본 발명에서 시점 간 움직임 벡터는 S310 단계에서 획득된 시점 간 움직임 벡터뿐만 아니라 추후 설명하는 S340 단계에서 수정된 시점 간 움직임 벡터를 포함한다. 또한, 본 발명에서 대응 블록은 S310 단계에서 획득된 제1 시점 간 움직임 벡터에 대응되는 제1 대응 블록 및 S340 단계에서 수정된 시점 간 움직임 벡터에 대응되는 제2 대응 블록을 포함할 수 있다. 움직임 보상부(261)는 시점 간 움직임 벡터를 현재 블록에 대응하여 대응 블록의 위치를 특정하여 획득할 수 있다.
대응 블록의 예측 방법을 식별할 수 있다(S330). 대응 블록의 예측 방법은 인트라 예측, 인터 예측으로 구분될 수 있다. 상세하게, 대응 블록의 예측 방법은 인트라 예측, 시점 간 인터 예측 또는 시간 인터 예측 등으로 구분될 수 있다. 대응 블록의 예측 방법은 예측 유형 정보, 대응 블록에 대응되는 움직임 벡터 정보 또는 참조 픽쳐 정보 등을 이용하여 식별될 수 있다.
예측 유형 정보는 어떤 예측 방법에 의해 대응 블록이 코딩될지를 나타내는 정보로 정의될 수 있다. 따라서, 예측 유형 정보가 가리키는 예측 방법에 따라 대응 블록의 예측 방법을 식별할 수 있다. 예를 들어, 예측 유형 정보가 시간 인터 예측을 가리키는 경우 대응 블록이 시간 인터 예측으로 코딩되었음을 식별할 수 있다.
움직임 벡터 정보는 대응 블록의 움직임 벡터 유무, 시점 간 움직임 벡터인지 여부 및 시간 움직임 벡터인지 여부 등의 정보를 적어도 하나 포함하는 것으로 정의될 수 있다. 예를 들어, 움직임 벡터 정보가 대응 블록의 움직임 벡터가 있고, 움직임 벡터가 시간 움직임 벡터임을 나타내는 경우 대응 블록이 시간 인터 예측으로 코딩되었음을 식별할 수 있다.
참조 픽쳐 정보는 대응 블록의 참조 픽쳐 유무, 참조 픽쳐가 대응 블록과 동일 시점에 있는지 여부 등의 정보를 적어도 하나 포함하는 것으로 정의될 수 있다. 예를 들어, 참조 픽쳐 정보가 대응 블록의 참조 픽쳐가 있고, 참조 픽쳐가 대응 블록과 동일 시점에 있음을 나타내는 경우 대응 블록이 시간 인터 예측으로 코딩되었음을 식별할 수 있다.
대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 현재 블록의 시점 간 움직임 벡터를 수정할 수 있다(S340). 대응 블록이 시간 인터 예측으로 코딩되지 않고 인트라 예측 또는 시점 간 인터 예측으로 코딩된 경우, 현재 블록의 시간 움직임 벡터를 획득하기 위한 시간 움직임 벡터가 존재하지 않을 수 있다. 따라서, 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 다른 대응 블록을 획득하기 위해 현재 블록의 시점 간 움직임 벡터를 수정할 수 있다. 수정된 시점 간 움직임 벡터를 제2 시점 간 모션 벡터로 정의할 수 있다. 아래에서는 현재 블록의 시점 간 움직임 벡터를 수정하는 일례에 대해서 설명하도록 한다.
현재 블록의 시점 간 움직임 벡터는 기결정된 시점 간 움직임 벡터 수정 정보를 이용하여 수정될 수 있다. 기결정된 시점 간 움직임 벡터 수정 정보는 현재 시점의 시점 간 움직임 벡터에 적용되어 수정된 시점 간 움직임 벡터를 생성하기 위해 이용되는 것으로서, 수정된 시점 간 움직임 벡터와 최초 획득된 현재 시점의 시점 간 움직임 벡터의 차로 정의될 수 있다.
따라서, 시점 간 움직임 벡터 수정 정보를 획득하고, 시점 간 움직임 벡터 수정 정보를 최초 획득된 현재 블록의 시점 간 움직임 벡터에 적용하여 수정된 시점 간 움직임 벡터를 획득할 수 있다. 예를 들어, 수정된 시점 간 움직임 벡터는 최초 획득된 현재 블록의 시점 간 움직임 벡터의 좌측 또는 우측을 가리킬 수 있다.
수정된 시점 간 움직임 벡터를 이용하여 최초 획득된 대응 블록과 다른 위치의 대응 블록(이하, 제2 대응 블록이라 한다.)을 획득할 수 있다. 그리고, 제2 대응 블록의 예측 방법을 식별하여(S330 단계와 동일한 방법으로 대응 블록의 예측 방법을 식별할 수 있다.) 제2 대응 블록이 시간 인터 예측으로 코딩된 경우, S350 단계를 수행하여 대응 블록의 시간 움직임 벡터를 획득할 수 있다. 만일, 제2 대응 블록이 시간 인터 예측으로 코딩된 경우, 또 다른 대응 블록(제N 대응 블록)을 획득하기 위해 현재 블록의 시점 간 움직임 벡터를 다시 수정할 수 있다.
S340 단계는 시간 인터 예측으로 코딩된 대응 블록이 식별될 때까지 수행될 수 있다. 또 다른 실시예로, S340 단계는 기결정된 횟수만큼 시간 인터 예측으로 코딩된 대응 블록을 식별하고, 기결정된 횟수에 시간 인터 예측으로 코딩된 대응 블록을 식별하지 못한 경우 수정을 중단할 수도 있다.
대응 블록이 시간 인터 예측으로 코딩된 경우, 대응 블록의 시간 움직임 벡터를 획득할 수 있다(S350). 대응 블록이 시간 인터 예측으로 코딩된 경우, 대응 블록은 시간 움직임 벡터를 포함하는 움직임 정보를 포함할 수 있다. 여기서, 시간 움직임 벡터는 대응 블록과 동일 시점, 다른 시간의 참조 픽쳐 내 참조 블록을 가리키는 움직임 벡터로 정의될 수 있다.
대응 블록의 시간 움직임 벡터를 이용하여 현재 블록의 시간 움직임 벡터를 획득할 수 있다(S360). 현재 블록의 시간 움직임 벡터는 대응 블록의 시간 움직임 벡터를 예측 값으로 이용하고, 움직임 벡터 레지듀얼을 이용하여 획득될 수 있다. 또는, 현재 블록의 시간 움직임 벡터는 대응 블록의 시간 움직임 벡터를 그대로 이용하여 획득될 수도 있다. 여기서, 움직임 벡터 레지듀얼은 원 움직임 벡터와 움직임 벡터 예측 값의 차이 값으로 정의될 수 있다. 움직임 벡터 레지듀얼은 비트스트림으로부터 획득될 수 있다.
현재 블록의 시간 움직임 벡터를 이용하여 현재 블록을 디코딩할 수 있다(S370). 예를 들어, 시간 움직임 벡터가 가리키는 참조 블록의 픽셀 값을 예측 값으로 획득하고, 예측 값을 이용하여 현재 블록의 픽셀 값을 획득할 수 있다.
도 4는 본 발명이 적용되는 일 실시예로서, 현재 블록의 시간 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 일 실시예를 도시한 것이다.
현재 블록(410)은 현재 시점(V1)의 현재 픽쳐(420)에 포함되어 있다. 그리고, 현재 블록의 시점 간 모션 벡터(430)가 획득되면, 시점 간 모션 벡터(430)가 가리키는 제1 대응 블록(440)을 획득할 수 있다. 만일, 제1 대응 블록(440)이 시간 움직임 벡터를 이용하여 코딩된 블록이 아닌 경우, 현재 블록의 시점 간 모션 벡터(430)을 수정하여 수정된 시점 간 모션 벡터(450)을 획득할 수 있다. 그리고, 수정된 시점 간 모션 벡터(450)가 가리키는 제2 대응 블록(460)을 획득할 수 있다. 제2 대응 블록(460)의 시간 인터 예측에 이용되는 시간 움직임 벡터(470)을 획득할 수 있다. 획득된 제2 대응 블록의 시간 움직임 벡터(470)을 이용하여 현재 블록의 시간 움직임 벡터(480)을 획득할 수 있다. 시간 움직임 벡터(480)을 이용한 시간 인터 예측을 통해 현재 블록을 디코딩할 수 있다.
이하에서는 현재 블록의 시간 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 또 다른 실시예에 대해 도 5 및 도 6을 이용하여 설명하도록 한다. 도 5 및 도 6의 실시예에서는 현재 블록에 대응되는 시점 간 모션 벡터가 적어도 2개 이상 존재함을 가정한다.
도 5는 본 발명이 적용되는 일 실시예로서, 현재 블록의 시간 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 일 실시예의 흐름도를 도시한 것이다.
현재 블록에 대응되는 복수의 시점 간 모션 벡터를 획득할 수 있다(S510). 현재 블록에 대응되는 복수의 시점 간 모션 벡터는 현재 블록에 대응되는 각각 다른 시점 간 모션 벡터를 나타낼 수 있다. 예를 들어, 현재 블록에 대응되는 복수의 시점 간 모션 벡터는 제3 시점 간 모션 벡터 및 제4 시점 간 모션 벡터를 포함할 수 있다. 일례로, 제3 시점 간 움직임 벡터가 현재 블록에 이웃한 이웃 블록의 시점 간 움직임 벡터를 이용하여 획득되는 경우, 제4 시점 간 움직임 벡터는 현재 블록에 대응되는 뎁스 블록의 뎁스 값을 이용하여 획득될 수 있다. 다른 일례로, 제3 시점 간 움직임 벡터가 현재 블록에 대응되는 뎁스 블록의 뎁스 값을 이용하여 획득되는 경우, 제4 시점 간 움직임 벡터는 현재 블록에 이웃한 이웃 블록의 시점 간 움직임 벡터를 이용하여 획득될 수 있다. 다른 일례로, 제4 시점 간 모션 벡터는 제3 시점 간 모션 벡터를 수정하여 획득될 수도 있다.
제3 시점 간 모션 벡터를 이용하여 제3 대응 블록을 획득할 수 있다(S520). 제3 대응 블록은 현재 블록에 제3 시점 간 모션 벡터가 대응되어 가리키는 현재 시점에 이웃한 참조 시점의 참조 픽쳐 내 블록을 나타낼 수 있다.
제3 대응 블록의 예측 방법을 식별할 수 있다(S530). 제3 대응 블록의 예측 방법은 인트라 예측, 인터 예측으로 구분될 수 있다. 상세하게, 대응 블록의 예측 방법은 인트라 예측, 시점 간 인터 예측 또는 시간 인터 예측 등으로 구분될 수 있다. 대응 블록의 예측 방법은 예측 유형 정보, 대응 블록에 대응되는 움직임 벡터 정보 또는 참조 픽쳐 정보 등을 이용하여 식별될 수 있다. 예측 방법을 식별하는 방법은 도 3의 S340에서 설명한 방법과 동일하다.
제3 대응 블록이 시간 인터 예측으로 코딩된 경우, 제3 대응 블록의 시간 모션 벡터를 획득하고(S540), 제3 대응 블록의 시간 모션 벡터를 이용하여 현재 블록의 시간 움직임 벡터를 획득할 수 있다(S550). 현재 블록의 시간 움직임 벡터는 제3 대응 블록의 시간 움직임 벡터를 예측 값으로 이용하고, 움직임 벡터 레지듀얼을 이용하여 획득될 수 있다. 또는, 현재 블록의 시간 움직임 벡터는 제3 대응 블록의 시간 움직임 벡터를 그대로 이용하여 획득될 수도 있다.
제3 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 제4 대응 블록의 시간 모션 벡터를 획득할 수 있다(S560). 제4 대응 블록은 현재 블록에 제4 시점 간 모션 벡터가 대응되어 가리키는 현재 시점에 이웃한 참조 시점의 참조 픽쳐 내 블록을 나타낼 수 있다.
제4 대응 블록의 시간 움직임 벡터를 이용하여 현재 블록의 시간 움직임 벡터를 획득할 수 있다(S570). 현재 블록의 시간 움직임 벡터는 제4 대응 블록의 시간 움직임 벡터를 예측 값으로 이용하고, 움직임 벡터 레지듀얼을 이용하여 획득될 수 있다. 또는, 현재 블록의 시간 움직임 벡터는 제4 대응 블록의 시간 움직임 벡터를 그대로 이용하여 획득될 수도 있다.
현재 블록의 시간 움직임 벡터를 이용하여 현재 블록을 디코딩할 수 있다(S580). 예를 들어, 시간 움직임 벡터가 가리키는 참조 블록의 픽셀 값을 예측 값으로 획득하고, 예측 값을 이용하여 현재 블록의 픽셀 값을 획득할 수 있다.
도 6은 본 발명이 적용되는 일 실시예로서, 현재 블록의 시간 움직임 벡터를 획득하여 현재 블록을 디코딩하기 위한 일 실시예의 흐름도를 도시한 것이다.
현재 블록의 제5 시점 간 모션 벡터를 획득할 수 있다(S610). 제5 시점 간 모션 벡터는 현재 블록에 대응되는 시점 간 모션 벡터로서, 현재 블록으로부터 참조 시점의 참조 픽쳐 내 대응 블록을 가리키는 움직임 벡터로 정의될 수 있다. 제5 시점 간 움직임 벡터는 현재 블록에 이웃한 이웃 블록의 시점 간 움직임 벡터를 이용하여 획득될 수 있다. 또는, 제5 시점 간 움직임 벡터는 현재 블록에 대응되는 뎁스 블록의 뎁스 값을 이용하여 획득될 수도 있다.
제5 시점 간 모션 벡터를 이용하여 제5 대응 블록을 획득할 수 있다(S620). 제5 대응 블록은 현재 블록에 제5 시점 간 모션 벡터가 대응되어 가리키는 현재 시점에 이웃한 참조 시점의 참조 픽쳐 내 블록을 나타낼 수 있다.
제5 대응 블록의 예측 방법을 식별할 수 있다(S630). 제5 대응 블록의 예측 방법은 인트라 예측, 인터 예측으로 구분될 수 있다. 상세하게, 대응 블록의 예측 방법은 인트라 예측, 시점 간 인터 예측 또는 시간 인터 예측 등으로 구분될 수 있다. 대응 블록의 예측 방법은 예측 유형 정보, 대응 블록에 대응되는 움직임 벡터 정보 또는 참조 픽쳐 정보 등을 이용하여 식별될 수 있다. 예측 방법을 식별하는 방법은 도 3의 S340에서 설명한 방법과 동일하다.
제5 대응 블록이 시간 인터 예측으로 코딩된 경우, 제5 대응 블록의 시간 모션 벡터를 획득하고(S640), 제5 대응 블록의 시간 모션 벡터를 이용하여 현재 블록의 시간 움직임 벡터를 획득할 수 있다(S650). 현재 블록의 시간 움직임 벡터는 제5 대응 블록의 시간 움직임 벡터를 예측 값으로 이용하고, 움직임 벡터 레지듀얼을 이용하여 획득될 수 있다. 또는, 현재 블록의 시간 움직임 벡터는 제5 대응 블록의 시간 움직임 벡터를 그대로 이용하여 획득될 수도 있다.
제5 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 현재 블록의 제6 시점 간 모션 벡터를 획득할 수 있다(S660). 제6 시점 간 모션 벡터는 현재 블록에 대응되는 시점 간 모션 벡터로서, 현재 블록으로부터 참조 시점의 참조 픽쳐 내 대응 블록을 가리키는 움직임 벡터로 정의될 수 있다. 제6 시점 간 움직임 벡터는 현재 블록에 이웃한 이웃 블록의 시점 간 움직임 벡터를 이용하여 획득될 수 있다. 또는, 제6 시점 간 움직임 벡터는 현재 블록에 대응되는 뎁스 블록의 뎁스 값을 이용하여 획득될 수도 있다. 또는, 제6 시점 간 모션 벡터는 제5 시점 간 모션 벡터를 수정하여 획득될 수도 있다.
제6 대응 블록의 시간 모션 벡터를 획득할 수 있다(S670). 제6 대응 블록은 현재 블록에 제6 시점 간 모션 벡터가 대응되어 가리키는 현재 시점에 이웃한 참조 시점의 참조 픽쳐 내 블록을 나타낼 수 있다.
제6 대응 블록의 시간 움직임 벡터를 이용하여 현재 블록의 시간 움직임 벡터를 획득할 수 있다(S680). 현재 블록의 시간 움직임 벡터는 제6 대응 블록의 시간 움직임 벡터를 예측 값으로 이용하고, 움직임 벡터 레지듀얼을 이용하여 획득될 수 있다. 또는, 현재 블록의 시간 움직임 벡터는 제6 대응 블록의 시간 움직임 벡터를 그대로 이용하여 획득될 수도 있다.
현재 블록의 시간 움직임 벡터를 이용하여 현재 블록을 디코딩할 수 있다(S690). 예를 들어, 시간 움직임 벡터가 가리키는 참조 블록의 픽셀 값을 예측 값으로 획득하고, 예측 값을 이용하여 현재 블록의 픽셀 값을 획득할 수 있다.
이상에서 설명한 바와 같이, 본 발명이 적용되는 디코딩/인코딩 장치는 DMB(Digital Multimedia Broadcasting)과 같은 멀티미디어 방송 송/수신 장치에 구비되어, 비디오 신호 및 데이터 신호 등을 디코딩하는데 사용될 수 있다. 또한 상기 멀티미디어 방송 송/수신 장치는 이동통신 단말기를 포함할 수 있다.
또한, 본 발명이 적용되는 디코딩/인코딩 방법은 컴퓨터에서 실행되기 위한 프로그램으로 제작되어 컴퓨터가 읽을 수 있는 기록 매체에 저장될 수 있으며, 본 발명에 따른 데이터 구조를 가지는 멀티미디어 데이터도 컴퓨터가 읽을 수 있는 기록 매체에 저장될 수 있다. 상기 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 저장 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 인코딩 방법에 의해 생성된 비트스트림은 컴퓨터가 읽을 수 있는 기록 매체에 저장되거나, 유/무선 통신망을 이용해 전송될 수 있다.
본 발명은 비디오 신호를 코딩하는데 이용될 수 있다.

Claims (10)

  1. 현재 블록의 시점 간 모션 벡터를 획득하는 단계;
    상기 현재 블록의 상기 시점 간 모션 벡터를 이용하여 제 1 대응 블록을 획득하는 단계;
    상기 제 1 대응 블록의 예측 방법을 식별하는 단계;
    상기 제 1 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 시점 간 움직임 벡터 수정 정보를 획득하는 단계;
    상기 시점 간 움직임 벡터 수정 정보를 이용하여 상기 현재 블록의 상기 시점 간 모션 벡터를 수정하는 단계;
    상기 수정된 시점 간 모션 벡터를 이용하여 제 2 대응 블록을 획득하는 단계;
    상기 수정된 대응 블록의 예측 방법을 식별하는 단계;
    상기 수정된 대응 블록이 시간 인터 예측으로 코딩된 경우, 상기 제 2 대응 블록의 시간 모션 벡터를 획득하는 단계;
    상기 제 2 대응 블록의 시간 모션 벡터를 이용하여 상기 현재 블록의 시간 모션 벡터를 획득하는 단계;
    상기 현재 블록의 시간 모션 벡터를 이용하여 현재 블록을 디코딩하는 단계를 포함하되,
    상기 제 2 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 상기 수정된 시점 간 모션 벡터는 상기 시점 간 움직임 벡터 수정 정보를 이용하여 다시 수정되는 것을 특징으로 하는 비디오 신호 처리 방법.
  2. 삭제
  3. 제 1 항에 있어서,
    상기 제 1 대응 블록이 시간 인터 예측으로 코딩된 경우, 상기 제 1 대응 블록의 시간 모션 벡터를 획득하는 단계; 및
    상기 제 1 대응 블록의 시간 모션 벡터를 이용하여 상기 현재 블록의 시간 모션 벡터를 획득하는 단계를 더 포함하는 것을 특징으로 하는 비디오 신호 처리 방법.
  4. 제 1 항에 있어서,
    상기 현재 블록의 시점 간 모션 벡터는 상기 현재 블록의 이웃 블록으로부터 획득되는 것을 특징으로 하는 비디오 신호 처리 방법.
  5. 제 1 항에 있어서,
    상기 현재 블록의 시점 간 모션 벡터는 상기 현재 블록에 대응되는 뎁스 블록의 뎁스 값을 이용하여 획득되는 것을 특징으로 하는 비디오 신호 처리 방법.
  6. 현재 블록의 시점 간 모션 벡터를 획득하고, 상기 시점 간 모션 벡터를 이용하여 제 1 대응 블록을 획득하고, 상기 제 1 대응 블록의 예측 방법을 식별하고, 상기 제 1 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 시점 간 움직임 벡터 수정 정보를 획득하고, 상기 시점 간 움직임 벡터 수정 정보를 이용하여 상기 현재 블록의 상기 시점 간 모션 벡터를 수정하고, 상기 수정된 시점 간 모션 벡터를 이용하여 제 2 대응 블록을 획득하고, 상기 제 2 대응 블록의 시간 모션 벡터를 획득하고, 상기 수정된 대응 블록의 예측 방법을 식별하고, 상기 수정된 대응 블록이 시간 인터 예측으로 코딩된 경우, 상기 제 2 대응 블록의 시간 모션 벡터를 이용하여 상기 현재 블록의 시간 모션 벡터를 획득하고, 상기 현재 블록의 시간 모션 벡터를 이용하여 현재 블록을 디코딩하는 인터 예측부를 포함하되,
    상기 제 2 대응 블록이 시간 인터 예측으로 코딩되지 않은 경우, 상기 수정된 시점 간 모션 벡터는 상기 시점 간 움직임 벡터 수정 정보를 이용하여 다시 수정되는 것을 특징으로 하는 비디오 신호 처리 장치.
  7. 삭제
  8. 제 6항에 있어서,
    상기 인터 예측부는, 상기 제 1 대응 블록이 시간 인터 예측으로 코딩된 경우, 상기 제 1 대응 블록의 시간 모션 벡터를 획득하고, 상기 제 1 대응 블록의 시간 모션 벡터를 이용하여 상기 현재 블록의 시간 모션 벡터를 획득하는 것을 특징으로 하는 비디오 신호 처리 장치.
  9. 제 6 항에 있어서,
    상기 현재 블록의 시점 간 모션 벡터는 상기 현재 블록의 이웃 블록으로부터 획득되는 것을 특징으로 하는 비디오 신호 처리 장치.
  10. 제 6 항에 있어서,
    상기 현재 블록의 시점 간 모션 벡터는 상기 현재 블록에 대응되는 뎁스 블록의 뎁스 값을 이용하여 획득되는 것을 특징으로 하는 비디오 신호 처리 장치.
KR1020167000321A 2013-07-18 2014-07-18 비디오 신호 처리 방법 및 장치 KR101750316B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361856012P 2013-07-18 2013-07-18
US61/856,012 2013-07-18
PCT/KR2014/006524 WO2015009092A1 (ko) 2013-07-18 2014-07-18 비디오 신호 처리 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20160024908A KR20160024908A (ko) 2016-03-07
KR101750316B1 true KR101750316B1 (ko) 2017-06-23

Family

ID=52346463

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167000321A KR101750316B1 (ko) 2013-07-18 2014-07-18 비디오 신호 처리 방법 및 장치

Country Status (6)

Country Link
US (1) US10129560B2 (ko)
EP (1) EP3024242A4 (ko)
JP (1) JP2016528808A (ko)
KR (1) KR101750316B1 (ko)
CN (1) CN105432086B (ko)
WO (1) WO2015009092A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10986367B2 (en) 2016-11-04 2021-04-20 Lg Electronics Inc. Inter prediction mode-based image processing method and apparatus therefor

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ZA200805337B (en) * 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
US20100266042A1 (en) 2007-03-02 2010-10-21 Han Suh Koo Method and an apparatus for decoding/encoding a video signal
US8160149B2 (en) * 2007-04-03 2012-04-17 Gary Demos Flowfield motion compensation for video compression
CN101374235B (zh) * 2007-08-24 2012-05-02 大唐移动通信设备有限公司 视频编码中的快速块运动估计方法和装置
JP2012151576A (ja) * 2011-01-18 2012-08-09 Hitachi Ltd 画像符号化方法、画像符号化装置、画像復号方法及び画像復号装置
KR101747434B1 (ko) * 2011-01-20 2017-06-16 연세대학교 산학협력단 움직임 정보 및 변이 정보를 부호화／복호화하는 영상 처리 장치 및 방법
JP5747559B2 (ja) * 2011-03-01 2015-07-15 富士通株式会社 動画像復号方法、動画像符号化方法、動画像復号装置、及び動画像復号プログラム
KR20120118780A (ko) 2011-04-19 2012-10-29 삼성전자주식회사 다시점 비디오의 움직임 벡터 부호화 방법 및 장치, 그 복호화 방법 및 장치
US9485517B2 (en) 2011-04-20 2016-11-01 Qualcomm Incorporated Motion vector prediction with motion vectors from multiple views in multi-view video coding
PT2704435T (pt) * 2011-04-25 2019-04-24 Lg Electronics Inc Processo de intra-predição, e codificador e descodificador utilizando o mesmo
JP6039178B2 (ja) * 2011-09-15 2016-12-07 シャープ株式会社 画像符号化装置、画像復号装置、並びにそれらの方法及びプログラム
CN103907346B (zh) * 2011-10-11 2017-05-24 联发科技股份有限公司 运动矢量预测子及视差矢量导出方法及其装置
KR20130044189A (ko) * 2011-10-21 2013-05-02 광운대학교 산학협력단 다시점 비디오 부호화/복호화 방법 및 그 장치
EP2777273B1 (en) * 2011-11-11 2019-09-04 GE Video Compression, LLC Efficient multi-view coding using depth-map estimate for a dependent view
US9525861B2 (en) * 2012-03-14 2016-12-20 Qualcomm Incorporated Disparity vector prediction in video coding
US9503720B2 (en) * 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
WO2013165143A1 (ko) * 2012-04-30 2013-11-07 (주)휴맥스 멀티뷰 영상의 부호화 방법, 부호화 장치, 복호화 방법, 복호화 장치
US20150181232A1 (en) * 2012-07-18 2015-06-25 Sony Corporation Image processing device and method
US9538180B2 (en) * 2012-12-17 2017-01-03 Qualcomm Incorporated Motion vector prediction in video coding

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Joint Collaborative Team on 3D Video Coding Extension Development of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11, 1st Meeting: Stockholm, SE, 16-20 July 2012*

Also Published As

Publication number Publication date
CN105432086B (zh) 2019-04-12
WO2015009092A1 (ko) 2015-01-22
EP3024242A1 (en) 2016-05-25
US10129560B2 (en) 2018-11-13
KR20160024908A (ko) 2016-03-07
EP3024242A4 (en) 2017-01-11
US20160173903A1 (en) 2016-06-16
JP2016528808A (ja) 2016-09-15
CN105432086A (zh) 2016-03-23

Similar Documents

Publication Publication Date Title
KR101619450B1 (ko) 뎁스 정보를 이용한 비디오 신호 처리 방법 및 장치
KR20160034259A (ko) 비디오 신호 처리 방법 및 장치
KR101770211B1 (ko) 비디오 신호 처리 방법 및 장치
JP6114404B2 (ja) ビデオ信号処理方法及び装置
CA2887120C (en) Method and device for processing video signal
US9955166B2 (en) Method and device for processing video signal
KR101750316B1 (ko) 비디오 신호 처리 방법 및 장치
KR101753592B1 (ko) 비디오 신호 처리 방법 및 장치
KR20150095679A (ko) 비디오 신호 처리 방법 및 장치
KR101783617B1 (ko) 비디오 신호 처리 방법 및 장치
KR20150079606A (ko) 비디오 신호 처리 방법 및 장치
KR20160002712A (ko) 비디오 신호 처리 방법 및 장치
KR102300036B1 (ko) 비디오 신호 처리 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant