KR20120080122A - 경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법 - Google Patents

경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법 Download PDF

Info

Publication number
KR20120080122A
KR20120080122A KR1020110126950A KR20110126950A KR20120080122A KR 20120080122 A KR20120080122 A KR 20120080122A KR 1020110126950 A KR1020110126950 A KR 1020110126950A KR 20110126950 A KR20110126950 A KR 20110126950A KR 20120080122 A KR20120080122 A KR 20120080122A
Authority
KR
South Korea
Prior art keywords
vector
prediction vector
current block
index
block
Prior art date
Application number
KR1020110126950A
Other languages
English (en)
Inventor
이진영
김동현
류승철
서정동
손광훈
위호천
Original Assignee
삼성전자주식회사
연세대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사, 연세대학교 산학협력단 filed Critical 삼성전자주식회사
Priority to PCT/KR2012/000136 priority Critical patent/WO2012093879A2/ko
Priority to US13/978,609 priority patent/US20140002599A1/en
Publication of KR20120080122A publication Critical patent/KR20120080122A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding

Abstract

경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법이 개시된다. 경쟁 기반의 다시점 비디오 부호화/복호화 장치는 현재 블록에 대응하는 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터를 추출하여 부호화 성능이 가장 좋은 예측 벡터를 결정함으로써 부호화 효율을 향상시킬 수 있다.

Description

경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법{APPARATUS AND METHOD FOR ENCODING AND DECODING MULTI-VIEW VIDEO BASED COMPETITION}
본 발명의 일실시예들은 다시점 비디오 부호화/복호화 장치 및 방법에 관한 것으로, 공간적 예측 벡터, 시간축 예측 벡터 또는 시점축 예측 벡터를 이용하여 현재 블록을 부호화/복호화하는 장치 및 방법에 관한 것이다.
입체 영상이란 깊이 및 공간에 대한 형상 정보를 동시에 제공하는 3차원 영상을 의미한다. 스테레오 영상의 경우, 좌우 눈에 각각 다른 시점의 영상을 제공하는 반면에, 입체 영상은 관찰자가 보는 시점을 달리할 때마다 다른 방향에서 본 것과 같은 영상을 제공한다. 따라서, 입체 영상을 생성하기 위해서는 여러 시점에서 촬영한 영상들이 필요하다.
입체 영상을 생성하기 위해 여러 시점에서 찍은 영상들은 데이터량이 방대하다. 따라서, 입체 영상을 위해 네트워크 인프라, 지상파 대역폭 등을 고려하면 MPEG-2와 H.264/AVC, HEVC와 같은 단일시점 비디오 압축(Single-View Video Coding)에 최적화된 부호화 장치를 사용하여 압축더라도 실현이 거의 불가능하다.
다만, 관찰자가 보는 시점마다 찍은 영상들은 서로 관련성이 있기 때문에 중복되는 정보가 많다. 따라서, 시점간 중복성을 제거할 수 있는 다시점 영상에 최적화된 부호화 장치를 이용하면 보다 적은 양의 데이터를 전송할 수 있다.
따라서, 입체 영상을 생성하기 위해 최적화된 다시점 영상 부호화 장치가 요구된다. 특히, 시간 및 시점 간의 중복성을 효율적으로 감소시키기 위한 기술 개발이 필요하다.
본 발명의 제1 실시예에 따른 다시점 비디오 부호화 장치는 부호화하고자 하는 현재 블록의 공간상 예측 벡터를 추출하는 예측 벡터 추출부; 및 상기 현재 블록의 공간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 인덱스 전송부를 포함할 수 있다.
본 발명의 제2 실시예에 따른 다시점 비디오 부호화 장치는 부호화하고자 하는 현재 블록의 시간상 예측 벡터를 추출하는 예측 벡터 추출부; 및 상기 현재 블록의 시간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 인덱스 전송부를 포함할 수 있다.
본 발명의 제3 실시예에 따른 다시점 비디오 부호화 장치는 부호화하고자 하는 현재 블록의 시점상 예측 벡터를 추출하는 예측 벡터 추출부; 및 상기 현재 블록의 시점상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 인덱스 전송부를 포함할 수 있다.
본 발명의 제4 실시예에 따른 다시점 비디오 부호화 장치는 부호화하고자 하는 현재 블록의 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터를 추출하는 예측 벡터 추출부; 및 상기 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터 중 현재 블록을 부호화할 때 사용한 예측 벡터를 식별하는 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 인덱스 전송부를 포함할 수 있다.
본 발명의 제1 실시예에 따른 다시점 비디오 복호화 장치는 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 인덱스 추출부; 및 상기 인덱스에 기초하여 공간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 예측 벡터 결정부를 포함할 수 있다.
본 발명의 제2 실시예에 따른 다시점 비디오 복호화 장치는 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 인덱스 추출부; 및 상기 인덱스에 기초하여 시간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 예측 벡터 결정부를 포함할 수 있다.
본 발명의 제3 실시예에 따른 다시점 비디오 복호화 장치는 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 인덱스 추출부; 및 상기 인덱스에 기초하여 시점상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 예측 벡터 결정부를 포함할 수 있다.
본 발명의 제4 실시예에 따른 다시점 비디오 복호화 장치는 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 인덱스 추출부; 및 상기 인덱스에 기초하여 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터 중 현재 블록을 복원하기 위한 최종 예측 벡터를 결정하는 예측 벡터 결정부를 포함할 수 있다.
본 발명의 제1 실시예에 따른 다시점 비디오 부호화 방법은 부호화하고자 하는 현재 블록의 공간상 예측 벡터를 추출하는 단계; 및 상기 현재 블록의 시간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 단계를 포함할 수 있다.
본 발명의 제2 실시예에 따른 다시점 비디오 부호화 방법은 부호화하고자 하는 현재 블록의 시간상 예측 벡터를 추출하는 단계; 및 상기 현재 블록의 시간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 단계를 포함할 수 있다.
본 발명의 제3 실시예에 따른 다시점 비디오 부호화 방법은 부호화하고자 하는 현재 블록의 시점상 예측 벡터를 추출하는 단계; 및 상기 현재 블록의 시점상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 단계를 포함할 수 있다.
본 발명의 제4 실시예에 따른 다시점 비디오 부호화 방법은 부호화하고자 하는 현재 블록의 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터를 추출하는 단계; 및 상기 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터 중 현재 블록을 부호화할 때 사용한 예측 벡터를 식별하는 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 단계를 포함할 수 있다.
본 발명의 제1 실시예에 따른 다시점 비디오 복호화 방법은 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 단계; 및 상기 인덱스에 기초하여 공간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 단계를 포함할 수 있다.
본 발명의 제2 실시예에 따른 다시점 비디오 복호화 방법은 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 단계; 및 상기 인덱스에 기초하여 시간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 단계를 포함할 수 있다.
본 발명의 제3 실시예에 따른 다시점 비디오 복호화 방법은 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 단계; 및 상기 인덱스에 기초하여 시점상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 단계를 포함할 수 있다.
본 발명의 제4 실시예에 따른 다시점 비디오 복호화 방법은 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 단계; 및 상기 인덱스에 기초하여 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터 중 현재 블록을 복원하기 위한 최종 예측 벡터를 결정하는 단계를 포함할 수 있다.
본 발명의 일실시예에 따르면, 부호화하고자 하는 현재 블록에 대해 공간상, 시간상 및 시점상 예측 벡터의 후보를 선택하여 압축 성능이 가장 좋은 예측 벡터를 결정한 후, 결정된 예측 벡터를 이용하여 현재 블록을 부호화함으로써 부호화 효율을 향상시킬 수 있다.
도 1은 본 발명의 일실시예에 따른 다시점 비디오 부호화 장치와 다시점 비디오 부호화 장치의 동작을 설명하기 위한 도면이다.
도 2는 본 발명의 일실시예에 따른 다시점 비디오 부호화 장치의 세부 구성을 도시한 블록 다이어그램이다.
도 3은 본 발명의 일실시예에 따른 다시점 비디오 복호화 장치의 세부 구성을 도시한 블록 다이어그램이다.
도 4는 본 발명의 일실시예에 따른 다시점 비디오의 구조를 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 현재 블록을 부호화하기 위해 사용되는 참조 영상의 예시를 도시한 도면이다.
도 6은 본 발명의 일실시예에 따라 현재 블록에 대응하는 예측 벡터의 종류를 도시한 도면이다.
도 7은 본 발명의 일실시예에 따라 인터 모드/인트라 모드로 동작하는 다시점 비디오 부호화 장치를 도시한 도면이다.
도 8은 본 발명의 일실시예에 따라 스킵 모드로 동작하는 다시점 비디오 부호화 장치를 도시한 도면이다.
도 9는 본 발명의 일실시예에 따라 인터 모드/인트라 모드로 동작하는 다시점 비디오 복호화 장치를 도시한 도면이다.
도 10은 본 발명의 일실시예에 따라 스킵 모드로 동작하는 다시점 비디오 복호화 장치를 도시한 도면이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명의 일실시예에 따른 다시점 비디오 부호화 장치와 다시점 비디오 부호화 장치의 동작을 설명하기 위한 도면이다.
본 발명의 일실시예에 따른 다시점 비디오 부호화 장치(101)는 새로운 움직임/변이 벡터 들을 정의하여 다시점 비디오를 부호화함으로써 보다 효율적으로 시간간 중복성 및 시점간 중복성을 제거할 수 있다.
다시점 비디오 부호화 장치(101)는 다양한 부호화 모드에 따라 입력 비디오를 부호화할 수 있다. 여기서, 다시점 비디오 부호화 장치(101)는 부호화하고자 하는 현재 블록이 포함된 프레임과 시점이 다른 프레임 또는 시간이 다른 프레임에서 현재 블록과 가장 유사한 예측 블록을 가리키는 예측 벡터를 이용하여 입력 비디오를 부호화할 수 있다. 따라서, 다시점 비디오 부호화 장치(101)는 현재 블록과 예측 블록이 비슷할수록 높은 부호화 성능을 실현할 수 있다. 입력 비디오를 부호화한 결과에 따라 도출된 결과는 비트스트림을 통해 다시점 비디오 복호화 장치(102)에 전송된다.
본 발명의 일실시예에 따른 다시점 비디오 부호화 장치(101)는 입력 비디오를 부호화할 때 사용할 공간상 예측 벡터, 시간상 예측 벡터, 및 시점상 예측 벡터를 정의함으로써 현재 블록의 부호화 성능을 향상시킬 수 있다.
이하에서, 공간상 예측 벡터, 시간상 예측 벡터 또는 시점상 예측 벡터와 관련된 움직임 벡터(Motion Vector: MV) 또는 변이 벡터(Disparity Vector: DV)는 다음과 같이 정의된다. 특정 블록의 움직임 벡터는 특정 블록이 포함된 프레임과 시간이 다른 프레임에서 특정 블록이 가리키는 예측 블록에 기초하여 결정된다. 또한, 특정 블록의 변이 벡터는 특정 블록이 포함된 프레임과 시점이 다른 프레임에서 특정 블록이 가리키는 예측 블록에 기초하여 결정된다.
도 2는 본 발명의 일실시예에 따른 다시점 비디오 부호화 장치의 세부 구성을 도시한 블록 다이어그램이다.
도 2를 참고하면, 다시점 비디오 부호화 장치(101)는 예측 벡터 추출부(201), 및 인덱스 전송부(202)를 포함할 수 있다.
이하에서는, 4가지의 실시예에 따라 동작하는 다시점 비디오 부호화 장치(101)에 대해서 설명하도록 하겠다.
<실시예 1>
예측 벡터 추출부(201)는 부호화하고자 하는 현재 블록의 공간상 예측 벡터를 추출할 수 있다. 여기서, 현재 블록의 공간상 예측 벡터는 현재 블록이 포함된 프레임을 이용하여 추출될 수 있다.
일례로, 공간상 예측 벡터는 현재 블록의 좌측 블록에 대응하는 제1 움직임 벡터, 현재 블록의 상단 블록에 대응하는 제2 움직임 벡터, 현재 블록의 좌측 상단 블록에 대응하는 제3 움직임 벡터 또는 현재 블록의 우측 상단 블록에 대응하는 제4 움직임 벡터 및 상기 제1 움직임 벡터, 제2 움직임 벡터, 제3 움직임 벡터 및 제4 움직임 벡터에 미디언 필터가 적용된 제5 움직임 벡터 중 적어도 하나를 포함할 수 있다.
다른 일례로, 공간상 예측 벡터는 현재 블록의 좌측 블록에 대응하는 제1 변이 벡터, 현재 블록의 상단 블록에 대응하는 제2 변이 벡터, 현재 블록의 좌측 상단 블록에 대응하는 제3 변이 벡터 또는 현재 블록의 우측 상단 블록에 대응하는 제4 변이 벡터 및 상기 제1 변이 벡터, 제2 변이 벡터, 제3 변이 벡터 및 제4 변이 벡터에 미디언 필터가 적용된 제5 변이 벡터 중 적어도 하나를 포함할 수 있다.
공간상 예측 벡터가 추출되면, 인덱스 전송부(202)는 현재 블록의 공간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치(102)에 전송할 수 있다.
<실시예 2>
예측 벡터 추출부(201)는 부호화하고자 하는 현재 블록의 시간상 예측 벡터를 추출할 수 있다. 여기서, 현재 블록의 시간상 예측 벡터는 현재 블록이 포함된 프레임과 시간상으로 다른 위치에 있는 프레임을 이용하여 추출될 수 있다.
일례로, 시간상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 예를 들어, 현재 블록이 프레임 1의 (x,y) 위치에 존재하는 경우, 현재 블록의 시간상 예측 벡터는 프레임 1과 시간이 다른 프레임 2의 (x,y)위치에 존재하는 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다.
다른 일례로, 시간상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 예를 들어, 현재 블록이 프레임 1의 (x,y) 위치에 존재하는 경우, 현재 블록의 시간상 예측 벡터는 프레임 1과 시간이 다른 프레임 2의 (x,y)위치에 존재하는 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 여기서, 주변 블록들은 타겟 블록의 상단 블록, 타겟 블록의 좌측 블록, 타겟 블록의 우측 상단 블록 또는 타겟 블록의 좌측 상단 블록을 포함할 수 있다.
또 다른 일례로, 시간상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 가장 유사한 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 여기서, 현재 블록과 가장 유사한 타겟 블록은 현재 블록의 픽셀 속성, 위치와 연관성이 높은 블록을 의미한다.
시간상 예측 벡터가 추출되면, 인덱스 전송부(202)는 현재 블록의 시간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치(102)에 전송할 수 있다.
<실시예 3>
예측 벡터 결정부(201)는 부호화하고자 하는 현재 블록의 시점상 예측 벡터를 추출할 수 있다. 여기서, 현재 블록의 시점상 예측 벡터는 현재 블록이 포함된 프레임과 시점상으로 다른 위치에 있는 프레임을 이용하여 추출될 수 있다.
일례로, 시점상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 예를 들어, 현재 블록이 프레임 1의 (x,y) 위치에 존재하는 경우, 현재 블록의 시점상 예측 벡터는 프레임 1과 시점이 다른 프레임 2의 (x,y)위치에 존재하는 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다.
다른 일례로, 시점상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 예를 들어, 현재 블록이 프레임 1의 (x,y) 위치에 존재하는 경우, 현재 블록의 시점상 예측 벡터는 프레임 1과 시간이 다른 프레임 2의 (x,y)위치에 존재하는 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 여기서, 주변 블록들은 타겟 블록의 상단 블록, 타겟 블록의 좌측 블록, 타겟 블록의 우측 상단 블록, 또는 타겟 블록의 좌측 상단 블록을 포함할 수 있다.
또 다른 일례로, 시점상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 가장 유사한 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 여기서, 현재 블록과 가장 유사한 타겟 블록은 현재 블록의 픽셀 속성, 위치와 연관성이 높은 블록을 의미한다.
시점상 예측 벡터가 추출되면, 인덱스 전송부(202)는 현재 블록의 시점상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치(102)에 전송할 수 있다.
<실시예 4>
예측 벡터 결정부(201)는 부호화하고자 하는 부호화하고자 하는 현재 블록의 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터를 추출할 수 있다.
그러면, 인덱스 전송부(202)는 현재 블록의 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터 중 현재 블록을 부호화하기 위해 결정된 최종 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치(102)에 전송한다. 일례로, 인덱스 전송부(202)는 임계값, 예측 벡터의 거리, 예측 벡터로 압축했을 때 필요한 비트량 및 화질 열화 정도 또는 예측 벡터로 압축했을 때 비용 함수 중 적어도 하나를 고려하여 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터 중 부호화 성능이 가장 좋은 예측 벡터를 식별하는 인덱스를 전송할 수 있다.
이상에서 언급한 실시예에 따르는 경우, 현재 블록의 부호화 모드에 따라 비트스트림에 포함되는 정보는 달라질 수 있다.
만약, 현재 블록이 스킵 모드에 따라 부호화되는 경우, 공간상 예측 벡터, 시간상 예측 벡터 또는 시점상 예측 벡터를 식별하기 위한 인덱스가 비트스트림을 통해 전송된다. 이 때, 현재 블록이 P-프레임에 포함되는 경우, 인덱스는 현재 블록과 관련된 스킵 모드(SKIP Mode)를 나타낸다. 그리고, 현재 블록이 B-프레임에 포함되는 경우, 인덱스는 현재 블록과 관련된 다이렉트 모드에 포함된 다이렉트 스킵 모드(Direct SKIP Mode)를 나타낸다.
그리고, 현재 블록이 스킵 모드가 아닌 부호화 모드(인터 모드)로 부호화되는 경우, 공간상 예측 벡터, 시간상 예측 벡터 또는 시점상 예측 벡터를 식별하기 위한 인덱스 뿐만 아니라, 현재 블록을 부호화하기 위해 결정된 예측 벡터가 가리키는 예측 블록과 현재 블록 간의 차이인 잔차 신호가 비트스트림에 포함될 수 있다. 이 때, 예측 블록과 현재 블록이 유사할수록, 부호화할 잔차 신호로 인해 필요한 비트수가 감소하기 때문에, 현재 블록에 대한 부호화 성능이 향상될 수 있다.
도 3은 본 발명의 일실시예에 따른 다시점 비디오 복호화 장치의 세부 구성을 도시한 블록 다이어그램이다.
도 3을 참고하면, 다시점 비디오 복호화 장치(102)는 인덱스 추출부(301) 및 예측 벡터 결정부(302)를 포함할 수 있다.
이하에서는, 4가지의 실시예에 따라 동작하는 다시점 비디오 복호화 장치(102)에 대해서 설명하도록 하겠다.
<실시예 1>
인덱스 추출부(301)는 다시점 비디오 부호화 장치(101)에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출할 수 있다. 그러면, 예측 벡터 결정부(302)는 인덱스에 기초하여 공간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정할 수 있다.
일례로, 공간상 예측 벡터는 현재 블록의 좌측 블록에 대응하는 제1 움직임 벡터, 현재 블록의 상단 블록에 대응하는 제2 움직임 벡터, 현재 블록의 좌측 상단 블록에 대응하는 제3 움직임 벡터 또는 현재 블록의 우측 상단 블록에 대응하는 제4 움직임 벡터 및 상기 제1 움직임 벡터, 제2 움직임 벡터, 제3 움직임 벡터 및 제4 움직임 벡터에 미디언 필터가 적용된 제5 움직임 벡터 중 적어도 하나를 포함할 수 있다.
다른 일례로, 공간상 예측 벡터는 현재 블록의 좌측 블록에 대응하는 제1 변이 벡터, 현재 블록의 상단 블록에 대응하는 제2 변이 벡터, 현재 블록의 좌측 상단 블록에 대응하는 제3 변이 벡터 또는 현재 블록의 우측 상단 블록에 대응하는 제4 변이 벡터 및 상기 제1 변이 벡터, 제2 변이 벡터, 제3 변이 벡터 및 제4 변이 벡터에 미디언 필터가 적용된 제5 변이 벡터 중 적어도 하나를 포함할 수 있다.
<실시예 2>
인덱스 추출부(301)는 다시점 비디오 부호화 장치(101)에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출할 수 있다. 그러면, 예측 벡터 결정부(302)는 인덱스에 기초하여 시간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정할 수 있다.
일례로, 시간상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 예를 들어, 현재 블록이 프레임 1의 (x,y) 위치에 존재하는 경우, 현재 블록의 시간상 예측 벡터는 프레임 1과 시간이 다른 프레임 2의 (x,y)위치에 존재하는 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다.
다른 일례로, 시간상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 예를 들어, 현재 블록이 프레임 1의 (x,y) 위치에 존재하는 경우, 현재 블록의 시간상 예측 벡터는 프레임 1과 시간이 다른 프레임 2의 (x,y)위치에 존재하는 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 여기서, 주변 블록들은 타겟 블록의 상단 블록, 타겟 블록의 좌측 블록, 타겟 블록의 우측 상단 블록 또는 타겟 블록의 좌측 상단 블록을 포함할 수 있다.
또 다른 일례로, 시간상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 가장 유사한 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 여기서, 현재 블록과 가장 유사한 타겟 블록은 현재 블록의 픽셀 속성, 위치와 연관성이 높은 블록을 의미한다.
<실시예 3>
인덱스 추출부(301)는 다시점 비디오 부호화 장치(101)에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출할 수 있다. 그러면, 예측 벡터 결정부(302)는 인덱스에 기초하여 시점상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정할 수 있다.
일례로, 시점상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 예를 들어, 현재 블록이 프레임 1의 (x,y) 위치에 존재하는 경우, 현재 블록의 시점상 예측 벡터는 프레임 1과 시점이 다른 프레임 2의 (x,y)위치에 존재하는 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다.
다른 일례로, 시점상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 예를 들어, 현재 블록이 프레임 1의 (x,y) 위치에 존재하는 경우, 현재 블록의 시점상 예측 벡터는 프레임 1과 시간이 다른 프레임 2의 (x,y)위치에 존재하는 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 여기서, 주변 블록들은 타겟 블록의 상단 블록, 타겟 블록의 좌측 블록, 타겟 블록의 우측 상단 블록, 또는 타겟 블록의 좌측 상단 블록을 포함할 수 있다.
또 다른 일례로, 시점상 예측 벡터는 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 가장 유사한 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함할 수 있다. 여기서, 현재 블록과 가장 유사한 타겟 블록은 현재 블록의 픽셀 속성, 위치와 연관성이 높은 블록을 의미한다.
<실시예 4>
인덱스 추출부(301)는 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출할 수 있다. 그러면, 예측 벡터 결정부(302)는 인덱스에 기초하여 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터 중 현재 블록을 복원하기 위한 최종 예측 벡터를 결정할 수 있다.
일례로, 인덱스 전송부(202)는 임계값, 예측 벡터의 거리, 예측 벡터로 압축했을 때 필요한 비트량 및 화질 열화 정도 또는 예측 벡터로 압축했을 때 비용 함수 중 적어도 하나를 고려하여 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터 중 부호화 성능이 가장 좋은 예측 벡터를 식별하는 인덱스를 전송할 수 있다.
공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터에 대해서는 도 6에서 구체적으로 설명하기로 한다.
도 4는 본 발명의 일실시예에 따른 다시점 비디오의 구조를 도시한 도면이다.
도 4를 참고하면, 3개 시점(Left, Center, Right)의 픽처를 입력받았을 때, GOP(Group of Picture) '8'로 부호화하는 다시점 비디오 부호화 방식(Multiview Video Coding)을 나타낸다. 다시점(Multi-view) 픽처를 부호화기 위해서는 기본적으로 시간(Temporal)축과 시점(View)축으로 계층적 B 픽처(Hierarchical B Picture)을 적용하기 때문에 픽처 간의 중복성(Redundancy)을 줄일 수 있다.
도 4에 도시된 다시점 비디오의 구조에 따라 다시점 비디오 부호화 장치(101)는 좌측 픽처(Left Picture: I-view)을 먼저 부호화하고 우측 픽처(Right Picture: P-view)과 중앙 픽처(Center Picture: B-view)를 차례대로 부호화함으로써 3개 시점에 대응하는 픽처를 부호화할 수 있다. 본 발명에서, 프레임과 픽처는 동일한 개념으로 사용될 수 있다.
이 때, 좌측 픽처는 움직임 추정(Motion Estimation)을 통해 이전 픽처들로부터 비슷한 영역을 검색함으로써 시간적 중복성(Temporal Redundancy)이 제거되는 방식으로 부호화될 수 있다. 그리고, 우측 픽처는 이미 부호화된 좌측 픽처를 참조 픽처로 사용하여 부호화되기 때문에, 움직임 추정에 기초한 시간적 중복성과 변이 추정(Disparity Estimation)에 기초한 시점 간 중복성(View Redundancy)이 제거되는 방식으로 부호화될 수 있다. 또한, 중앙 픽처는 이미 부호화된 좌측 픽처와 우측 픽처를 모두 참조 픽처로 이용하여 부호화되기 때문에, 양방향으로의 변이 추정에 따라 시점 간 중복성이 제거될 수 있다.
도 4를 참고하면, 다시점 비디오 부호화 방식에서, 좌측 픽처와 같이 다른 시점의 참조 픽처를 이용하지 않고 부호화되는 픽처는 I-View, 우측 픽처와 같이 다른 시점의 참조 픽처를 단방향으로 예측하여 부호화하는 픽처는 P-View, 중앙 픽처와 같이 좌우 시점의 참조 픽처를 양방향으로 예측하여 부호화하는 픽처는 B-View이라고 정의된다.
MVC의 프레임은 예측 구조에 따라 크게 6가지 그룹으로 분류된다. 구체적으로, 6가지 그룹은 인트라 부호화를 위한 I-시점 Anchor 프레임, 시간축간 인터 부호화를 위한 I-시점 Non-anchor 프레임, 시점간 단방향 인터 부호화를 위한 P-시점 Anchor 프레임, 시점간 단방향 인터 부호화와 시간축간 양방향 인터 부호화를 위한 P-시점 Non-anchor 프레임, 시점간 양방향 인터 부호화를 위한 B-시점 Anchor 프레임 및 시점간 양방향 인터 부호화와 시간축간 양방향 인터 부호화를 위한 B-시점 Non-anchor 프레임으로 분류될 수 있다.
도 5는 본 발명의 일실시예에 따른 현재 블록을 부호화하기 위해 사용되는 참조 픽처의 예시를 도시한 도면이다.
다시점 비디오 부호화 장치(101)는 현재 픽처(501)인 현재 프레임에 위치한 현재 블록을 부호화할 때 현재 프레임에 대해 시간상 주변에 위치한 참조 픽처(502, 503)와 시점상 주변에 위치한 참조 픽처(504, 505)를 이용할 수 있다. 구체적으로, 다시점 비디오 부호화 장치(101)는 참조 픽처(502~505)에서 현재 블록과 가장 유사한 예측 블록을 탐색하여 현재 블록과 예측 블록 간의 잔차 신호(residue)를 부호화할 수 있다. 다시점 비디오 부호화 장치(101)는 움직임 벡터에 기초하여 예측 블록을 탐색하기 위해 현재 블록이 포함된 현재 프레임과 시간이 다른 Ref1 픽처(502)와 Ref2 픽처(503)를 이용할 수 있다. 그리고, 변이 벡터에 기초하여 예측 블록을 탐색하기 위해 현재 블록이 포함된 현재 프레임과 시점이 다른 Ref3 픽처(504)와 Ref4 픽처(505)를 이용할 수 있다.
도 6은 본 발명의 일실시예에 따라 현재 블록에 대응하는 예측 벡터의 종류를 도시한 도면이다.
본 발명의 일실시예에 따르면, 다시점 비디오 부호화 장치(101)는 다음과 같은 과정을 통해 다시점 비디오를 부호화할 수 있다. 다만, 아래의 과정은 도 2 및 도 3의 실시예 4에 적용될 수 있으며, 실시예 1 내지 3의 경우, 경쟁에 사용할 움직임 벡터 또는 변이 벡터 중 어느 하나를 선택하기 위해 부호화 성능을 계산하는 과정은 생략할 수 있다.
(1) 참조 픽처를 선택함
(2) 예측 벡터들 추출하여 결정함 (예측 구조 기반)
(3) 움직임 벡터 또는 변이 벡터를 예측함
(4) 움직임 벡터 또는 변이 벡터를 추정함
(5) 잔차 신호(Residual)를 이용하여 부호화 및 움직임/변이 정보 엔트로피 부호화함 (다만, 부호화 모드가 SKIP(DIRECT)모드의 경우 이 단계는 생략)
(6) 부호화 성능(ex. RD cost)을 계산함
본 발명의 일실시예에 따르면, 다시점 비디오 부호화 장치(101)는 현재 블록에 대응하는 예측 벡터, 즉 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터 중 부호화 성능이 가장 좋은 예측 벡터를 선택하여 현재 블록을 부호화할 수 있다. 즉, 다시점 비디오 부호화 장치(101)는 예측 벡터들 간의 경쟁에 기초하여 부호화 성능이 가장 좋은 예측 벡터를 선택할 수 있다.
예측 벡터들은 특성에 따라 공간상 예측 벡터, 시간상 예측 벡터, 시점상 예측 벡터의 3가지 그룹으로 분류될 수 있다. 도 6에 도시된 예측 벡터는 아래 표 1과 같이 3가지 그룹으로 분류될 수 있다.
Figure pat00001
공간상 벡터는 부호화하고자 하는 현재 블록에 인접한 적어도 하나의 주변 블록에 대응하는 움직임 벡터 또는 변이 벡터를 의미한다.
일례로, 공간상 예측 벡터는 현재 블록의 좌측 블록에 대응하는 제1 움직임 벡터(mva), 현재 블록의 상단 블록에 대응하는 제2 움직임 벡터(mvb), 현재 블록의 좌측 상단 블록에 대응하는 제3 움직임 벡터(mvd) 또는 현재 블록의 우측 상단 블록에 대응하는 제4 움직임 벡터(mvc) 및 제1 움직임 벡터, 제2 움직임 벡터, 제3 움직임 벡터 및 제4 움직임 벡터에 미디언 필터가 적용된 제5 움직임 벡터(mvmed) 중 적어도 하나를 포함할 수 있다.
또한, 공간상 예측 벡터는 현재 블록의 좌측 블록에 대응하는 제1 변이 벡터(dva), 현재 블록의 상단 블록에 대응하는 제2 변이 벡터(dvb), 현재 블록의 좌측 상단 블록에 대응하는 제3 변이 벡터(dvd) 또는 현재 블록의 우측 상단 블록에 대응하는 제4 변이 벡터(dvc) 및 제1 변이 벡터, 제2 변이 벡터, 제3 변이 벡터 및 제4 변이 벡터에 미디언 필터가 적용된 제5 변이 벡터(dvmed) 중 적어도 하나를 포함할 수 있다.
시간상 예측 벡터는 부호화하고자 하는 현재 블록이 포함된 현재 프레임(Frame N)보다 이전 시간에 위치한 이전 프레임(Frame N-1)에 기초하여 결정될 수 있다.
일례로, 시간상 예측 벡터는 부호화하고자 하는 현재 블록이 포함된 현재 프레임(Frame N)보다 이전 시간에 위치한 이전 프레임(Frame N-1)에서 현재 블록과 동일한 위치(x,y)에 있는 타겟 블록의 움직임 벡터(mvcol1) 또는 변이 벡터(dvcol1)를 포함한다.
다른 일례로, 시간상 예측 벡터는 이전 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록에 인접하는 적어도 하나의 주변 블록들의 움직임 벡터(mvcol2) 또는 변이 벡터(dvcol2)를 포함한다. 여기서, 주변 블록들은 타겟 블록의 좌측 블록, 좌측 상단 블록, 상단 블록, 우측 상단 블록을 포함할 수 있다.
또 다른 일례로, 시간상 예측 벡터는 이전 프레임에서 현재 블록과 가장 유사한 타겟 블록의 움직임 벡터(mvtcor) 또는 변이 벡터(dvtcor)를 포함할 수 있다.
시점상 예측 벡터는 호화하고자 하는 현재 블록이 포함된 현재 프레임(Frame N)과 다른 시점을 나타내는 이웃 프레임(Inter-view Frame)에 기초하여 결정될 수 있다.
일례로, 시점상 예측 벡터는 부호화하고자 하는 현재 블록이 포함된 현재 프레임과 다른 시점에 대응하는 이웃 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록의 움직임 벡터(mvgdv1) 또는 변이 벡터(dvgdv1)를 포함할 수 있다.
다른 일례로, 시점상 예측 벡터는 부호화하고자 하는 현재 블록이 포함된 현재 프레임과 다른 시점에 대응하는 이웃 프레임에서 현재 블록과 동일한 위치에 있는 타겟 블록에 인접하는 주변 블록들의 움직임 벡터(mvgdv2) 또는 변이 벡터(dvgdv2)를 포함할 수 있다.
또 다른 일례로, 시점상 예측 벡터는 부호화하고자 하는 현재 블록이 포함된 현재 프레임과 다른 시점에 대응하는 이웃 프레임에서 현재 블록과 가장 유사한 타겟 블록의 움직임 벡터(mvvcor) 또는 변이 벡터(dvvcor)를 포함할 수 있다.
본 발명의 일실시예에 있어, 움직임 벡터는 현재 블록이 포함된 현재 프레임과 동일한 시점이나 다른 시간을 나타내는 이전 프레임에 포함된 특정 블록(타겟 블록 또는 타겟 블록에 인접하는 주변 블록들)을 가리키는 벡터를 의미한다. 여기서, 이전 프레임은 현재 블록의 참조 영상을 의미한다.
그리고, 변이 벡터는 현재 블록이 포함된 현재 프레임과 다른 시점이나 동일한 시간을 나타내는 이웃 프레임에 포함된 특정 블록(타겟 블록 또는 타겟 블록에 인접하는 주변 블록들)을 가리키는 벡터를 의미한다. 여기서, 이웃 프레임은 현재 블록의 참조 영상을 의미한다.
본 발명의 일실시예에 따르면, 다시점 비디오 부호화 장치는 부호화하고자 하는 현재 블록에 대해 공간상 예측 벡터, 시간상 예측 벡터 또는 시점상 예측 벡터 중 적어도 하나를 추출할 수 있다.
이 때, 부호화하고자 하는 현재 블록에 대해 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터이 추출된 경우, 다시점 비디오 부호화 장치는 예측 벡터들 간 경쟁 과정을 통해 최종적으로 부호화할 때 사용할 예측 벡터를 선택할 수 있다. 본 발명의 일실시예에 따르면, 다시점 비디오 부호화 장치(101)는 추출된 예측 벡터들을 대상으로 부호화 성능이 가장 좋은 예측 벡터를 추출할 수 있다.
일례로, 예측 벡터 결정부(202)는 (1)임계값, (2) 최종 결정된 움직임/변이 벡터와 예측 벡터의 거리, (3) 예측 벡터로 부호화했을 때 필요한 비트량 및 화질 열화 정도 또는 (4) 예측 벡터로 부호화했을 때 비용 함수 중 적어도 하나를 고려하여 부호화 성능이 가장 좋은 예측 벡터를 결정할 수 있다.
여기서, 비용 함수는 하기 수학식 1에 따라 결정될 수 있다.
Figure pat00002
여기서, SSD(Sum of Square Difference)는 현재 블록(s)과 예측 벡터에 기초한 예측 블록(r)의 차분 값들을 제곱한 값이고, λ은 라그랑지안 계수이다. R은 부호화 모드(mode)로 부호화하고자 하는 현재 프레임과 움직임 예측 또는 변이 예측을 통해 도출된 참조 프레임의 차분으로 얻어진 신호를 부호화 했을 때 필요한 비트수이다. 그리고 R은 예측 벡터의 종류를 나타내는 인덱스 비트도 포함한다.
경쟁 기반의 움직임 정보 또는 변이 정보를 부호화하기 위해 예측 벡터의 인덱스를 이진화하여 인덱스 비트를 생성하는 것이 중요하다. 인덱스 비트는 아래 표 2와 같이 정의될 수 있다. 공간상, 시간상 및 시점상 예측 벡터의 후보들이 모두 동일하다면, 다시점 비디오 부호화 장치(101)는 인덱스 비트를 다시점 비디오 복호화 장치(102)에 전송하지 않을 수 있다.
Figure pat00003
도 7은 본 발명의 일실시예에 따라 인터 모드/인트라 모드로 동작하는 다시점 비디오 부호화 장치를 도시한 도면이다.
도 7에서, 인터 모드/인트라 모드는 부호화하고자 하는 현재 블록과 움직임 예측을 통해 추출된 움직임 벡터가 가리키는 예측 블록 간의 차이인 잔차 신호를 부호화하는 것을 의미한다. 인터 모드는 예측 블록이 현재 블록과 다른 프레임에 위치하는 것을 의미하고, 인트라 모드는 현재 블록과 예측 블록이 동일한 프레임에 위치하는 것을 의미한다. 이 때, 공간상 예측 벡터는 인트라 모드로 부호화할 때 사용되고, 시간상 예측 벡터와 시점상 예측 벡터는 인터 모드로 부호화할 때 사용될 수 있다.
본 발명의 일실시예에 따른 다시점 비디오 부호화 장치(101)는 부호화하고자 하는 현재 블록에 대응하는 예측 벡터를 추출할 수 있다. 이 때, 예측 벡터는 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터 중 적어도 하나를 포함할 수 있다.
만약, 예측 벡터가 2개이상 추출되는 경우, 다시점 비디오 부호화 장치(101)는 예측 벡터들 간의 경쟁에 기초하여 추출된 최종적인 예측 벡터를 이용하여 입력 영상을 부호화할 수 있다. 구체적으로, 다시점 비디오 부호화 장치(101)는 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터 중 부호화 성능이 가장 좋은 예측 벡터를 선택하여 부호화하고자 하는 현재 프레임을 부호화하기 위한 최종적인 예측 벡터를 결정할 수 있다. 그러면, 다시점 비디오 부호화 장치(101)는 예측 벡터가 가리키는 참조 프레임에 기초하여 현재 블록을 부호화한다.
다시점 비디오 부호화 장치(101)는 부호화를 진행한 결과 다시점 비디오의 비트스트림을 다시점 비디오 복호화 장치(102)에 전송한다. 그리고, 다시점 비디오 부호화 장치(101)는 다시점 비디오를 부호화할 때 사용한 예측 벡터의 종류를 알려주는 인덱스 비트도 비트스트림을 통해 다시점 비디오 복호화 장치(102)에 전송할 수 있다.
도 8은 본 발명의 일실시예에 따라 스킵 모드로 동작하는 다시점 비디오 부호화 장치를 도시한 도면이다.
도 8의 다시점 비디오 부호화 장치(101)는 도 7의 다시점 비디오 부호화 장치와 비교했을 때 잔차 신호를 부호화하지 않는다. 즉, 도 8의 다시점 비디오 부호화 장치(101)는 현재 블록에 대한 움직임 예측 또는 변이 예측을 통해 도출된 예측 블록과 현재 블록 간의 차이인 잔차 신호를 부호화하지 않는다. 대신, 다시점 비디오 부호화 장치(101)는 현재 블록이 스킵 모드에 따라 부호화되었다는 정보(인덱스 비트)만 비트스트림에 포함시켜 다시점 비디오 복호화 장치(102)에 전송할 수 있다.
도 9는 본 발명의 일실시예에 따라 인터 모드/인트라 모드로 동작하는 다시점 비디오 복호화 장치를 도시한 도면이다.
도 9를 참고하면, 다시점 비디오 부호화 장치(101)를 통해 전송된 비트스트림에는 복원하고자 하는 블록에 대한 부호화 정보, 블록에 대한 잔차 신호가 포함될 수 있다.
예를 들어, 복원하고자 하는 현재 블록이 인터 모드/인트라 모드로 부호화된 경우, 다시점 비디오 복호화 장치(102)는 현재 블록과 관련된 예측 벡터를 추출할 수 있다. 이 때, 현재 블록과 관련된 예측 벡터은 비트스트림에 포함된 인덱스 비트로 결정될 수 있다. 그러면, 다시점 비디오 복호화 장치(102)는 예측 벡터에 기초하여 현재 블록을 움직임 보상 또는 변이 보상함으로써 예측 비디오를 생성할 수 있고, 비트스트림에 포함된 잔차 신호와 결합하여 최종적인 출력 비디오를 생성할 수 있다. 이 때, 예측 벡터는 공간상 예측 벡터, 시간상 예측 벡터 또는 시점상 예측 벡터 중 어느 하나일 수 있다.
도 10은 본 발명의 일실시예에 따라 스킵 모드로 동작하는 다시점 비디오 복호화 장치를 도시한 도면이다.
다시점 비디오 복호화 장치(102)는 복원하고자 하는 현재 블록와 관련한 예측 벡터에 기초하여 움직임 보상 또는 변이 보상을 수행함으로써 예측 비디오를 생성할 수 있다. 이 때, 예측 벡터는 비트스트림에 포함된 현재 블록의 인덱스 비트에 따라 결정될 수 있다.
스킵 모드로 부호화된 현재 블록은 잔차 신호가 전송되지 않고 부호화되었기 때문에, 다시점 비디오 복호화 장치(102)에서 생성된 예측 비디오는 그대로 출력 비디오가 될 수 있다.
본 발명의 실시 예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
101: 다시점 비디오 부호화 장치
102: 다시점 비디오 복호화 장치

Claims (35)

  1. 부호화하고자 하는 현재 블록의 공간상 예측 벡터를 추출하는 예측 벡터 추출부; 및
    상기 현재 블록의 공간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 인덱스 전송부
    를 포함하는 다시점 비디오 부호화 장치.
  2. 제1항에 있어서,
    상기 공간상 예측 벡터는,
    상기 현재 블록의 좌측 블록에 대응하는 제1 움직임 벡터, 현재 블록의 상단 블록에 대응하는 제2 움직임 벡터, 현재 블록의 좌측 상단 블록에 대응하는 제3 움직임 벡터 또는 현재 블록의 우측 상단 블록에 대응하는 제4 움직임 벡터 및 상기 제1 움직임 벡터, 제2 움직임 벡터, 제3 움직임 벡터 및 제4 움직임 벡터에 미디언 필터가 적용된 제5 움직임 벡터 중 적어도 하나를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 장치.
  3. 제1항에 있어서,
    상기 공간상 예측 벡터는,
    상기 현재 블록의 좌측 블록에 대응하는 제1 변이 벡터, 현재 블록의 상단 블록에 대응하는 제2 변이 벡터, 현재 블록의 좌측 상단 블록에 대응하는 제3 변이 벡터 또는 현재 블록의 우측 상단 블록에 대응하는 제4 변이 벡터 및 상기 제1 변이 벡터, 제2 변이 벡터, 제3 변이 벡터 및 제4 변이 벡터에 미디언 필터가 적용된 제5 변이 벡터 중 적어도 하나를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 장치.
  4. 부호화하고자 하는 현재 블록의 시간상 예측 벡터를 추출하는 예측 벡터 추출부; 및
    상기 현재 블록의 시간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 인덱스 전송부
    를 포함하는 다시점 비디오 부호화 장치.
  5. 제4항에 있어서,
    상기 시간상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 제1 타겟 블록의 움직임 벡터(Motion Vector: MV) 또는 변이 벡터(Disparity Vector: DV)를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 장치.
  6. 제4항에 있어서,
    상기 시간상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 제1 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 장치.
  7. 제4항에 있어서,
    상기 시간상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 가장 유사한 제2 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 장치.
  8. 부호화하고자 하는 현재 블록의 시점상 예측 벡터를 추출하는 예측 벡터 추출부; 및
    상기 현재 블록의 시점상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 인덱스 전송부
    를 포함하는 다시점 비디오 부호화 장치.
  9. 제8항에 있어서,
    상기 시점상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 제1 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 장치.
  10. 제8항에 있어서,
    상기 시점상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 제1 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 장치.
  11. 제8항에 있어서,
    상기 시점상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 가장 유사한 제2 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 부호화 장치.
  12. 부호화하고자 하는 현재 블록의 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터를 추출하는 예측 벡터 추출부; 및
    상기 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터 중 현재 블록을 부호화할 때 사용한 예측 벡터를 식별하는 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 인덱스 전송부
    를 포함하는 다시점 비디오 부호화 장치.
  13. 제12항에 있어서,
    상기 인덱스 전송부는,
    임계값, 예측 벡터의 거리, 예측 벡터로 압축했을 때 필요한 비트량 및 화질 열화 정도 또는 예측 벡터로 압축했을 때 비용 함수 중 적어도 하나를 고려하여 상기 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터 중 부호화 성능이 가장 좋은 예측 벡터를 식별하는 인덱스를 전송하는 다시점 비디오 부호화 장치.
  14. 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 인덱스 추출부; 및
    상기 인덱스에 기초하여 공간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 예측 벡터 결정부
    를 포함하는 다시점 비디오 복호화 장치.
  15. 제14항에 있어서,
    상기 공간상 예측 벡터는,
    상기 현재 블록의 좌측 블록에 대응하는 제1 움직임 벡터, 현재 블록의 상단 블록에 대응하는 제2 움직임 벡터, 현재 블록의 좌측 상단 블록에 대응하는 제3 움직임 벡터 또는 현재 블록의 우측 상단 블록에 대응하는 제4 움직임 벡터 및 상기 제1 움직임 벡터, 제2 움직임 벡터, 제3 움직임 벡터 및 제4 움직임 벡터에 미디언 필터가 적용된 제5 움직임 벡터 중 적어도 하나를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 장치.
  16. 제14항에 있어서,
    상기 공간상 예측 벡터는,
    상기 현재 블록의 좌측 블록에 대응하는 제1 변이 벡터, 현재 블록의 상단 블록에 대응하는 제2 변이 벡터, 현재 블록의 좌측 상단 블록에 대응하는 제3 변이 벡터 또는 현재 블록의 우측 상단 블록에 대응하는 제4 변이 벡터 및 상기 제1 변이 벡터, 제2 변이 벡터, 제3 변이 벡터 및 제4 변이 벡터에 미디언 필터가 적용된 제5 변이 벡터 중 적어도 하나를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 장치.
  17. 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 인덱스 추출부; 및
    상기 인덱스에 기초하여 시간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 예측 벡터 결정부
    를 포함하는 다시점 비디오 복호화 장치.
  18. 제17항에 있어서,
    상기 시간상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 제1 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 장치.
  19. 제17항에 있어서,
    상기 시간상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 제1 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 장치.
  20. 제17항에 있어서,
    상기 시간상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시간에 대응하는 프레임에서 현재 블록과 가장 유사한 제2 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 장치.
  21. 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 인덱스 추출부; 및
    상기 인덱스에 기초하여 시점상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 예측 벡터 결정부
    를 포함하는 다시점 비디오 복호화 장치.
  22. 제21항에 있어서,
    상기 시점상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 제1 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 장치.
  23. 제21항에 있어서,
    상기 시점상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 동일한 위치에 있는 제1 타겟 블록에 인접하는 주변 블록들의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 장치.
  24. 제21항에 있어서,
    상기 시점상 예측 벡터는,
    상기 현재 블록이 포함된 프레임과 다른 시점에 대응하는 프레임에서 현재 블록과 가장 유사한 제2 타겟 블록의 움직임 벡터 또는 변이 벡터를 포함하는 것을 특징으로 하는 다시점 비디오 복호화 장치.
  25. 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 인덱스 추출부; 및
    상기 인덱스에 기초하여 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터 중 현재 블록을 복원하기 위한 최종 예측 벡터를 결정하는 예측 벡터 결정부
    를 포함하는 다시점 비디오 복호화 장치.
  26. 제25항에 있어서,
    상기 인덱스 전송부는,
    임계값, 예측 벡터의 거리, 예측 벡터로 압축했을 때 필요한 비트량 및 화질 열화 정도 또는 예측 벡터로 압축했을 때 비용 함수 중 적어도 하나를 고려하여 상기 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터 중 부호화 성능이 가장 좋은 예측 벡터를 식별하는 인덱스를 전송하는 다시점 비디오 복호화 장치.
  27. 부호화하고자 하는 현재 블록의 공간상 예측 벡터를 추출하는 단계; 및
    상기 현재 블록의 시간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 단계
    를 포함하는 다시점 비디오 부호화 방법.
  28. 부호화하고자 하는 현재 블록의 시간상 예측 벡터를 추출하는 단계; 및
    상기 현재 블록의 시간상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 단계
    를 포함하는 다시점 비디오 부호화 방법.
  29. 부호화하고자 하는 현재 블록의 시점상 예측 벡터를 추출하는 단계; 및
    상기 현재 블록의 시점상 예측 벡터를 식별하기 위한 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 단계
    를 포함하는 다시점 비디오 부호화 방법.
  30. 부호화하고자 하는 현재 블록의 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터를 추출하는 단계; 및
    상기 공간상 예측 벡터, 시간상 예측 벡터 및 공간상 예측 벡터 중 현재 블록을 부호화할 때 사용한 예측 벡터를 식별하는 인덱스를 비트스트림을 통해 다시점 비디오 복호화 장치에 전송하는 단계
    를 포함하는 다시점 비디오 부호화 방법.
  31. 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 단계; 및
    상기 인덱스에 기초하여 공간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 단계
    를 포함하는 다시점 비디오 복호화 방법.
  32. 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 단계; 및
    상기 인덱스에 기초하여 시간상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 단계
    를 포함하는 다시점 비디오 복호화 방법.
  33. 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 단계; 및
    상기 인덱스에 기초하여 시점상 예측 벡터를 현재 블록을 복원하기 위한 최종 예측 벡터로 결정하는 단계
    를 포함하는 다시점 비디오 복호화 방법.
  34. 다시점 비디오 부호화 장치에서 수신한 비트스트림으로부터 예측 벡터의 인덱스를 추출하는 단계; 및
    상기 인덱스에 기초하여 공간상 예측 벡터, 시간상 예측 벡터 및 시점상 예측 벡터 중 현재 블록을 복원하기 위한 최종 예측 벡터를 결정하는 단계
    를 포함하는 다시점 비디오 복호화 방법.
  35. 제27항 내지 제34항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록된 컴퓨터에서 판독 가능한 기록 매체.
KR1020110126950A 2011-01-06 2011-11-30 경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법 KR20120080122A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2012/000136 WO2012093879A2 (ko) 2011-01-06 2012-01-06 경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법
US13/978,609 US20140002599A1 (en) 2011-01-06 2012-01-06 Competition-based multiview video encoding/decoding device and method thereof

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20110001341 2011-01-06
KR1020110001341 2011-01-06

Publications (1)

Publication Number Publication Date
KR20120080122A true KR20120080122A (ko) 2012-07-16

Family

ID=46712873

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110126950A KR20120080122A (ko) 2011-01-06 2011-11-30 경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법

Country Status (2)

Country Link
US (1) US20140002599A1 (ko)
KR (1) KR20120080122A (ko)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014051320A1 (ko) * 2012-09-28 2014-04-03 삼성전자주식회사 움직임 벡터와 변이 벡터를 예측하는 영상 처리 방법 및 장치
WO2014051321A1 (ko) * 2012-09-28 2014-04-03 삼성전자주식회사 다시점 영상 부호화/복호화 장치 및 방법
KR20140043030A (ko) * 2012-09-28 2014-04-08 삼성전자주식회사 다시점 영상 부호화/복호화 장치 및 방법
WO2014077573A2 (ko) * 2012-11-13 2014-05-22 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
WO2014171769A1 (ko) * 2013-04-17 2014-10-23 삼성전자 주식회사 시점 합성 예측을 이용한 다시점 비디오 부호화 방법 및 그 장치, 다시점 비디오 복호화 방법 및 그 장치
WO2014175647A1 (ko) * 2013-04-23 2014-10-30 삼성전자 주식회사 시점 합성 예측을 이용한 다시점 비디오 부호화 방법 및 그 장치, 다시점 비디오 복호화 방법 및 그 장치
WO2015005749A1 (ko) * 2013-07-12 2015-01-15 삼성전자 주식회사 인터 레이어 비디오 복호화 및 부호화 장치 및 방법을 위한 블록 기반 디스패리티 벡터 예측 방법
KR20150012223A (ko) * 2013-07-24 2015-02-03 삼성전자주식회사 움직임 벡터 결정 방법 및 그 장치
WO2015060508A1 (ko) * 2013-10-24 2015-04-30 한국전자통신연구원 비디오 부호화/복호화 방법 및 장치
WO2016056821A1 (ko) * 2014-10-08 2016-04-14 엘지전자 주식회사 3d 비디오 코딩을 위한 움직임 정보 압축 방법 및 장치
KR20160105510A (ko) * 2014-01-03 2016-09-06 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 비디오 및 이미지 코딩/디코딩에서의 블록 벡터 예측
US10080029B2 (en) 2013-10-24 2018-09-18 Electronics And Telecommunications Research Institute Video encoding/decoding method and apparatus
US11109036B2 (en) 2013-10-14 2021-08-31 Microsoft Technology Licensing, Llc Encoder-side options for intra block copy prediction mode for video and image coding
US11172207B2 (en) 2014-06-19 2021-11-09 Microsoft Technology Licensing, Llc Unified intra block copy and inter prediction modes
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
US11317113B2 (en) 2013-10-14 2022-04-26 Microsoft Technology Licensing, Llc Features of intra block copy prediction mode for video and image coding and decoding
US11363283B2 (en) 2014-09-30 2022-06-14 Microsoft Technology Licensing, Llc Rules for intra-picture prediction modes when wavefront parallel processing is enabled

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5489675B2 (ja) * 2009-11-27 2014-05-14 三菱電機株式会社 映像情報再生方法及びシステム、並びに映像情報コンテンツ
KR102318785B1 (ko) 2013-10-14 2021-10-27 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 비디오 및 영상 코딩 및 디코딩에 대한 기본 색상 인덱스 맵 모드의 특징
US10390034B2 (en) 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
US10542274B2 (en) 2014-02-21 2020-01-21 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
JP2017512026A (ja) 2014-03-04 2017-04-27 マイクロソフト テクノロジー ライセンシング，エルエルシー イントラブロックコピー予測におけるブロック反転及びスキップモード
HUE043182T2 (hu) * 2014-03-13 2019-08-28 Qualcomm Inc Egyszerûsített fejlett maradékpredikció 3d-hevc-hez
US9591325B2 (en) 2015-01-27 2017-03-07 Microsoft Technology Licensing, Llc Special case handling for merged chroma blocks in intra block copy prediction mode
EP3308540B1 (en) 2015-06-09 2020-04-15 Microsoft Technology Licensing, LLC Robust encoding/decoding of escape-coded pixels in palette mode
US10986349B2 (en) 2017-12-29 2021-04-20 Microsoft Technology Licensing, Llc Constraints on locations of reference blocks for intra block copy prediction

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101631247B (zh) * 2002-04-18 2011-07-27 株式会社东芝 运动图像编码/解码方法和装置
ZA200805337B (en) * 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
KR100959536B1 (ko) * 2006-03-30 2010-05-27 엘지전자 주식회사 비디오 신호를 디코딩/인코딩하기 위한 방법 및 장치
WO2010041856A2 (en) * 2008-10-06 2010-04-15 Lg Electronics Inc. A method and an apparatus for processing a video signal
CN103081470B (zh) * 2010-09-02 2016-08-03 Lg电子株式会社 编码和解码视频的方法和使用该方法的装置

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014051320A1 (ko) * 2012-09-28 2014-04-03 삼성전자주식회사 움직임 벡터와 변이 벡터를 예측하는 영상 처리 방법 및 장치
WO2014051321A1 (ko) * 2012-09-28 2014-04-03 삼성전자주식회사 다시점 영상 부호화/복호화 장치 및 방법
KR20140043030A (ko) * 2012-09-28 2014-04-08 삼성전자주식회사 다시점 영상 부호화/복호화 장치 및 방법
US9900620B2 (en) 2012-09-28 2018-02-20 Samsung Electronics Co., Ltd. Apparatus and method for coding/decoding multi-view image
WO2014077573A3 (ko) * 2012-11-13 2014-11-06 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
US9936219B2 (en) 2012-11-13 2018-04-03 Lg Electronics Inc. Method and apparatus for processing video signals
WO2014077573A2 (ko) * 2012-11-13 2014-05-22 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
WO2014171769A1 (ko) * 2013-04-17 2014-10-23 삼성전자 주식회사 시점 합성 예측을 이용한 다시점 비디오 부호화 방법 및 그 장치, 다시점 비디오 복호화 방법 및 그 장치
WO2014175647A1 (ko) * 2013-04-23 2014-10-30 삼성전자 주식회사 시점 합성 예측을 이용한 다시점 비디오 부호화 방법 및 그 장치, 다시점 비디오 복호화 방법 및 그 장치
WO2015005749A1 (ko) * 2013-07-12 2015-01-15 삼성전자 주식회사 인터 레이어 비디오 복호화 및 부호화 장치 및 방법을 위한 블록 기반 디스패리티 벡터 예측 방법
US9924182B2 (en) 2013-07-12 2018-03-20 Samsung Electronics Co., Ltd. Method for predicting disparity vector based on blocks for apparatus and method for inter-layer encoding and decoding video
KR20150012223A (ko) * 2013-07-24 2015-02-03 삼성전자주식회사 움직임 벡터 결정 방법 및 그 장치
US11317113B2 (en) 2013-10-14 2022-04-26 Microsoft Technology Licensing, Llc Features of intra block copy prediction mode for video and image coding and decoding
US11109036B2 (en) 2013-10-14 2021-08-31 Microsoft Technology Licensing, Llc Encoder-side options for intra block copy prediction mode for video and image coding
US10080029B2 (en) 2013-10-24 2018-09-18 Electronics And Telecommunications Research Institute Video encoding/decoding method and apparatus
US10412403B2 (en) 2013-10-24 2019-09-10 Electronics And Telecommunications Research Institute Video encoding/decoding method and apparatus
WO2015060508A1 (ko) * 2013-10-24 2015-04-30 한국전자통신연구원 비디오 부호화/복호화 방법 및 장치
KR20160105510A (ko) * 2014-01-03 2016-09-06 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 비디오 및 이미지 코딩/디코딩에서의 블록 벡터 예측
US11388433B2 (en) 2014-01-03 2022-07-12 Microsoft Technology Licensing, Llc Block vector prediction in video and image coding/decoding
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
US11172207B2 (en) 2014-06-19 2021-11-09 Microsoft Technology Licensing, Llc Unified intra block copy and inter prediction modes
US11363283B2 (en) 2014-09-30 2022-06-14 Microsoft Technology Licensing, Llc Rules for intra-picture prediction modes when wavefront parallel processing is enabled
WO2016056821A1 (ko) * 2014-10-08 2016-04-14 엘지전자 주식회사 3d 비디오 코딩을 위한 움직임 정보 압축 방법 및 장치

Also Published As

Publication number Publication date
US20140002599A1 (en) 2014-01-02

Similar Documents

Publication Publication Date Title
KR20120080122A (ko) 경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법
JP6768503B2 (ja) ３ｄビデオコーディングにおける視差ベクトル導出および動きベクトル予測の簡略化
JP5021739B2 (ja) 信号処理方法及び装置
KR101158491B1 (ko) 다시점 영상 부호화, 복호화 방법 및 그 장치.
TWI543591B (zh) 寫碼視訊資料之方法、用於寫碼視訊資料之裝置及電腦可讀儲存媒體
KR101893559B1 (ko) 다시점 비디오 부호화/복호화 장치 및 방법
TWI539791B (zh) 三維視頻寫碼中導出之視差向量
KR101753171B1 (ko) 3ｄ 비디오 코딩에서의 간략화된 뷰 합성 예측 방법
KR101747434B1 (ko) 움직임 정보 및 변이 정보를 부호화／복호화하는 영상 처리 장치 및 방법
US20120189060A1 (en) Apparatus and method for encoding and decoding motion information and disparity information
KR20150132505A (ko) 스킵 및 직접 모드들에 대한 3ｄ 비디오 코딩에서의 디스패리티 벡터 유도
KR20070036611A (ko) 카메라 파라미터를 이용하여 시차 벡터를 예측하는 방법,그 방법을 이용하여 다시점 영상을 부호화 및 복호화하는장치 및 이를 수행하기 위한 프로그램이 기록된 기록 매체
CN104429074A (zh) 3d视频编码中视差矢量导出的方法和装置
KR20140043032A (ko) 움직임 벡터와 변이 벡터를 예측하는 영상 처리 방법 및 장치
JP6571646B2 (ja) マルチビュービデオのデコード方法及び装置
US8948264B2 (en) Method and apparatus for multi-view video encoding using chrominance compensation and method and apparatus for multi-view video decoding using chrominance compensation
KR101680674B1 (ko) 다시점 비디오 신호의 처리 방법 및 이에 대한 장치
KR20120083209A (ko) 깊이 영상 부호화/복호화 장치 및 방법
US9900620B2 (en) Apparatus and method for coding/decoding multi-view image
KR102133936B1 (ko) ３ｄ 비디오 부호화／복호화 장치 및 부호화／복호화 방법
KR20120084628A (ko) 다시점 영상 부호화／복호화 장치 및 방법
US20140301455A1 (en) Encoding/decoding device and method using virtual view synthesis and prediction
KR102020024B1 (ko) 가상 시점 합성 예측을 이용한 부호화/복호화 장치 및 부호화/복호화 방법
KR20130116777A (ko) 움직임 벡터와 변이 벡터를 예측하는 영상 처리 방법 및 장치
RU2784475C1 (ru) Способ декодирования изображения, способ кодирования изображения и машиночитаемый носитель информации

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application