KR20110124447A - 입체영상 부호화 장치 및 방법 - Google Patents
입체영상 부호화 장치 및 방법 Download PDFInfo
- Publication number
- KR20110124447A KR20110124447A KR1020100043812A KR20100043812A KR20110124447A KR 20110124447 A KR20110124447 A KR 20110124447A KR 1020100043812 A KR1020100043812 A KR 1020100043812A KR 20100043812 A KR20100043812 A KR 20100043812A KR 20110124447 A KR20110124447 A KR 20110124447A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- motion vector
- intra prediction
- macro block
- prediction mode
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
입체영상 부호화 장치가 제공된다. 입체영상 부호화 장치는 입체영상을 구성하는 2 종류의 영상 중에서 한 종류 영상을 부호화 할 때 필요한 제1 압축정보를 생성하는 제1 압축정보 생성부와 제1 압축정보를 이용해서 다른 종류의 영상을 부호화할 때 필요한 제2 압축정보를 생성하는 제2 압축정보 생성부를 포함한다.
Description
기술분야는 입체영상을 부호화하는 장치에 관한 것으로, 입체영상을 구성하는 2개의 영상 중에서 한 영상의 압축정보를 다른 영상을 부호화할 때 이용하는 기술에 관련된 것이다.
입체 영상이란 깊이 및 공간에 대한 형상 정보를 동시에 제공하는 3차원 영상을 말한다. 이때, 단순히 좌우 눈에 각각 다른 시점의 영상을 제공하는 스테레오와는 달리 관찰자가 보는 시점을 달리할 때마다 다른 방향에서 본 것과 같은 영상을 제공하기 위해서는, 여러 시점에서 촬영한 영상이 필요하다. 여러 시점에서 촬영한 영상을 이용한 응용분야는 자유시점 TV, 3차원 TV 등이 존재한다. 자유시점 TV는 동일 장면에 대해 다시점 영상을 획득 후 분석하여 사물을 바라보는 시점을 자유롭게 변경할 수 있으며, 3차원 TV의 경우 사람의 양쪽 눈에 비치는 영상을 달리함으로써 사실적인 3차원 깊이를 인지할 수 있도록 한다. 그러나 여러 시점에서 찍은 영상은 데이터량이 방대하기 때문에 압축하여 전송하려면 네트워크 인프라, 지상파 대역폭 등의 확보에 많은 어려움이 따른다.
여러 시점의 비디오를 모두 압축 전송하는 대신 깊이 영상을 만들어, 여러 시점의 영상 중에서 일부 시점의 영상과 함께 압축 전송하면 압축시 발생하는 데이터량을 줄일 수 있다. 깊이 영상은 칼라 영상에서 물체가 시청자와 떨어져 있는 거리를 0~255의 값으로 나타낸 영상이기 때문에, 그 특징이 칼라 영상과 비슷하다.
일 측면에 있어서, 입체영상을 구성하는 영상 중 하나인 제1영상 매크로 블록에서 제1 압축정보를 생성하고, 상기 제1 압축정보를 이용해서 상기 제1영상 매크로 블록을 부호화 하는 제1 부호기 및 상기 제1 압축정보를 이용해서 제2 압축정보를 생성하고, 상기 제2 압축정보를 이용해서 상기 입체 영상을 구성하는 영상 중 다른 하나인 제2영상 매크로 블록을 부호화 하는 제2 부호기를 포함하는, 입체영상 부호화 장치가 제공된다.
이때, 상기 제1영상 매크로 블록은 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에 하나이고, 상기 제2영상 매크로 블록은 상기 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에서 상기 제1영상 매크로 블록과 다른 하나이다.
이때, 상기 제1 압축정보는 상기 제1영상 매크로 블록의 인트라 예측모드를 나타내는 제1영상 인트라 예측모드고, 상기 제2 압축정보는 상기 제2영상 매크로 블록의 인트라 예측모드를 나타내는 제2영상 인트라 예측모드일 수 있다.
이때, 상기 제1 부호기는, 인트라 예측모드들 각각에 따라 예측블록들을 생성하는 제1 영상 인트라 예측부 및 상기 예측블록들 별로 상기 제1 영상 매크로 블록을 차분하고 율-왜곡 최적화해서 압축효율을 검사하고, 상기 인트라 예측모드들 중에서 압축효율이 가장 좋은 인트라 예측모드를 상기 제1영상 인트라 예측모드로 결정하는 제1영상 인트라 예측모드 결정부를 포함할 수 있다.
이때, 상기 제2 부호기는, 상기 제1영상 인트라 예측모드를 상기 제2영상 매크로 블록의 인트라 예측모드인 상기 제2영상 인트라 예측모드로 결정하는 제2영상 인트라 예측모드 결정부를 포함할 수 있다.
이때, 상기 제2 부호기는, 상기 제1영상 인트라 예측모드를 이용해서 후보 인트라 예측모드들을 생성하는 후보 인트라 예측모드 생성부와, 상기 후보 인트라 예측모드들 각각에 따라 후보 예측블록들을 생성하는 제2 영상 인트라 예측부 및 상기 후보 예측블록들 별로 상기 제2 영상 매크로 블록을 차분하고 율-왜곡 최적화해서 압축효율을 검사하고, 상기 후보 인트라 예측모드들 중에서 압축효율이 가장 좋은 후보 인트라 예측모드를 상기 제2영상 인트라 예측모드로 결정하는 제2영상 인트라 예측모드 결정부를 포함할 수 있다.
이때, 상기 제1 압축정보는 상기 제1영상 매크로 블록의 움직임 벡터를 나타내는 제1영상 움직임 벡터이고, 상기 제2 압축정보는 상기 제2영상 매크로 블록의 움직임 벡터를 나타내는 제2영상 움직임 벡터일 수 있다.
이때, 상기 제1 부호기는, 상기 제1영상 매크로 블록과 주변블록들을 이용해서 상기 제1영상 매크로 블록의 예측 움직임 벡터를 나타내는 제1영상 예측 움직임 벡터를 계산하는 제1영상 예측 움직임 벡터 계산부 및 상기 제1영상 예측 움직임 벡터를 기반으로 제1영상에서 움직임 탐색을 하여 상기 제1영상 매크로 블록의 최종 움직임 벡터인 상기 제1영상 움직임 벡터를 생성하는 제1영상 움직임 탐색부를 포함할 수 있다.
이때, 상기 제2 부호기는, 상기 제1영상 움직임 벡터를 상기 제2영상 매크로 블록의 최종 움직임 벡터인 상기 제2영상 움직임 벡터로 결정하는 제2영상 움직임 벡터 결정부를 포함할 수 있다.
이때, 상기 제2 부호기는, 상기 제1영상 움직임 벡터를 기반으로 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 최종 움직임 벡터인 상기 제2영상 움직임 벡터를 생성하는 제2영상 움직임 탐색부를 포함할 수 있다.
이때, 상기 제2 부호기는, 상기 제1영상 움직임 벡터를 기반으로 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 후보 움직임 벡터 중 하나인 제2영상 제1 움직임 벡터를 생성하는 제2영상 제1 움직임 탐색부와, 상기 제2영상 매크로 블록과 주변블록들을 이용해서 상기 제2영상 매크로 블록의 예측 움직임 벡터를 나타내는 제2영상 예측 움직임 벡터를 계산하는 제2영상 예측 움직임 벡터 계산부와, 상기 제2영상 예측 움직임 벡터를 기반으로 상기 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 후보 움직임 벡터 중 하나인 제2영상 제2 움직임 벡터를 생성하는 움직임 탐색부 및 상기 제2영상 제1 움직임 벡터와 상기 제2영상 제2 움직임 벡터를 비교해서 최소의 움직임 비용 함수를 가지는 움직임 벡터를 상기 제2영상 움직임 벡터로 선택하는 제2 영상 움직임 벡터 선택부를 포함할 수 있다.
일 측면에 있어서, 입체영상을 구성하는 영상 중 하나인 부호화된 제1영상 매크로 블록과 제1 압축정보를 수신하면, 상기 제1 압축정보를 이용해서 상기 부호화된 제1영상 매크로 블록을 복호화 하는 제1 부호기 및 상기 입체 영상을 구성하는 영상 중 다른 하나인 부호화된 제2영상 매크로 블록을 수신하면, 상기 제1 압축정보를 이용해서 제2 압축정보를 생성하고, 상기 제2 압축정보를 이용해서 상기 부호화된 제2영상 매크로 블록을 복호하는 제2 복호기를 포함하는 입체영상 복호화 장치가 제공된다.
이때, 상기 제1영상 매크로 블록은 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에 하나이고, 상기 제2영상 매크로 블록은 상기 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에서 상기 제1영상 매크로 블록과 다른 하나이다.
이때, 상기 제1 압축정보는 제1영상 매크로 블록의 인트라 예측모드를 나타내는 제1영상 인트라 예측모드고, 상기 제2 압축정보는 제2영상 매크로 블록의 인트라 예측모드를 나타내는 제2영상 인트라 예측모드일 수 있다.
이때, 상기 제1 복호기는, 상기 부호화된 제1영상 매크로 블록과 함께 상기 제1영상 인트라 예측모드를 수신하고, 상기 제1영상 인트라 예측모드를 이용해서 상기 부호화된 제1영상 매크로 블록을 복호할 수 있다.
이때, 상기 제2 복호기는, 상기 부호화된 제2영상 매크로 블록을 수신하고, 상기 제1영상 인트라 예측모드를 이용해서 상기 부호화된 제2영상 매크로 블록을 복호할 수 있다.
이때, 상기 제2 복호기는, 상기 부호화된 제2영상 매크로 블록과 함께 인덱스 비트를 수신하고, 상기 제1영상 인트라 예측모드를 이용해서 상기 후보 인트라 예측모드들을 생성하고, 상기 후보 인트라 예측모드들을 중에서 상기 인덱스 비트에 대응되는 후보 인트라 예측모드를 상기 제2영상 인트라 예측모드로 하여 상기 부호화된 제2영상 매크로 블록을 복호할 수 있다.
이때, 상기 제1 압축정보는 상기 제1영상 매크로 블록의 움직임 벡터를 나타내는 제1영상 움직임 벡터이고, 상기 제2 압축정보는 상기 제2영상 매크로 블록의 움직임 벡터를 나타내는 제2영상 움직임 벡터일 수 있다.
이때, 상기 제1 복호기는, 상기 부호화된 제1영상 매크로 블록과 함께 상기 제1영상 움직임 벡터를 수신하고, 상기 제1영상 움직임 벡터를 이용해서 상기 부호화된 제1영상 매크로 블록을 복호할 수 있다.
이때, 상기 제2 복호기는, 상기 부호화된 제2영상 매크로 블록을 수신하고, 상기 제1영상 움직임 벡터를 이용해서 상기 부호화된 제2영상 매크로 블록을 복호할 수 있다.
이때, 상기 제2 복호기는, 상기 부호화된 제2영상 매크로 블록을 수신하고, 상기 제1영상 움직임 벡터를 제2영상의 예측 움직임 벡터로 해서 상기 제2영상 움직임 벡터를 복원하고, 상기 제2영상 움직임 벡터를 상기 부호화된 제2영상 매크로 블록을 복호할 수 있다.
이때, 상기 제2 복호기는, 상기 부호화된 제2영상 매크로 블록과 인덱스 비트를 수신하고, 상기 인덱스 비트가 상기 제1영상 움직임 벡터를 제2영상의 예측 움직임 벡터로 함을 나타내면, 상기 제1영상 움직임 벡터를 제2영상의 예측 움직임 벡터로 해서 상기 제2영상 움직임 벡터를 복원하고, 상기 제2영상 움직임 벡터를 상기 부호화된 제2영상 매크로 블록을 복호하고, 상기 인덱스 비트가 상기 제2영상 매크로 블록을 통해 제2영상의 예측 움직임 벡터를 계산함을 나타내면, 상기 부호화된 제2영상 매크로 블록과 함께 수신되는 상기 제2영상 MV를 이용해서 상기 부호화된 제2영상 MB을 복호할 수 있다.
일 측면에 있어서, 입체영상을 구성하는 영상 중 하나인 제1영상 매크로 블록에서 제1 압축정보를 생성하고, 상기 제1 압축정보를 이용해서 상기 제1영상 매크로 블록을 부호화 하는 단계 및 상기 제1 압축정보를 이용해서 제2 압축정보를 생성하고, 상기 제2 압축정보를 이용해서 상기 입체 영상을 구성하는 영상 중 다른 하나인 제2영상 매크로 블록을 부호화 하는 단계를 포함하는, 입체영상 부호화 방법이 제공된다.
이때, 상기 제1영상 매크로 블록은 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에 하나이고, 상기 제2영상 매크로 블록은 상기 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에서 상기 제1영상 매크로 블록과 다른 하나이다.
이때, 상기 제1 압축정보는 상기 제1영상 매크로 블록의 인트라 예측모드를 나타내는 제1영상 인트라 예측모드고, 상기 제2 압축정보는 상기 제2영상 매크로 블록의 인트라 예측모드를 나타내는 제2영상 인트라 예측모드일 수 있다.
이때, 상기 제1 압축정보인 상기 제1영상 인트라 예측모드의 생성은, 인트라 예측모드들 각각에 따라 예측블록들을 생성하는 단계와, 상기 예측블록들 별로 상기 제1 영상 매크로 블록을 차분하고 율-왜곡 최적화해서 압축효율을 검사하는 단계 및 상기 인트라 예측모드들 중에서 압축효율이 가장 좋은 인트라 예측모드를 상기 제1영상 인트라 예측모드로 결정하는 단계를 포함할 수 있다.
이때, 상기 제2 압축정보인 상기 제2영상 인트라 예측모드의 생성은, 상기 제1영상 인트라 예측모드를 상기 제2영상 매크로 블록의 인트라 예측모드인 상기 제2영상 인트라 예측모드로 결정하는 단계를 포함할 수 있다.
이때, 상기 제2 압축정보인 상기 제2영상 인트라 예측모드의 생성은, 상기 제1영상 인트라 예측모드를 이용해서 후보 인트라 예측모드들을 생성하는 단계와, 상기 후보 인트라 예측모드들 각각에 따라 후보 예측블록들을 생성하는 단계와, 상기 후보 예측블록들 별로 상기 제2 영상 매크로 블록을 차분하고 율-왜곡 최적화해서 압축효율을 검사하는 단계 및 상기 후보 인트라 예측모드들 중에서 압축효율이 가장 좋은 후보 인트라 예측모드를 상기 제2영상 인트라 예측모드로 결정하는 단계를 포함할 수 있다.
이때, 상기 제1 압축정보는 상기 제1영상 매크로 블록의 움직임 벡터를 나타내는 제1영상 움직임 벡터이고, 상기 제2 압축정보는 상기 제2영상 매크로 블록의 움직임 벡터를 나타내는 제2영상 움직임 벡터일 수 있다.
이때, 상기 제1 압축정보인 상기 제1영상 예측 움직임 벡터의 생성은, 상기 제1영상 매크로 블록과 주변블록들을 이용해서 상기 제1영상 매크로 블록의 예측 움직임 벡터를 나타내는 상기 제1영상 예측 움직임 벡터를 계산하는 단계 및 상기 제1영상 예측 움직임 벡터를 기반으로 제1영상에서 움직임 탐색을 하여 상기 제1영상 매크로 블록의 최종 움직임 벡터인 상기 제1영상 움직임 벡터를 생성하는 단계를 포함할 수 있다.
이때, 상기 제2 압축정보인 상기 제2영상 예측 움직임 벡터의 생성은, 상기 제1영상 움직임 벡터를 상기 제2영상 매크로 블록의 최종 움직임 벡터인 상기 제2영상 움직임 벡터로 결정하는 단계를 포함할 수 있다.
이때, 상기 제2 압축정보인 상기 제2영상 예측 움직임 벡터의 생성은, 상기 제1영상 움직임 벡터를 기반으로 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 최종 움직임 벡터인 상기 제2영상 움직임 벡터를 생성하는 단계를 포함할 수 있다.
이때, 상기 제2 압축정보인 상기 제2영상 예측 움직임 벡터의 생성은, 상기 제1영상 움직임 벡터를 기반으로 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 후보 움직임 벡터 중 하나인 제2영상 제1 움직임 벡터를 생성하는 단계와, 상기 제2영상 매크로 블록과 주변블록들을 이용해서 상기 제2영상 매크로 블록의 예측 움직임 벡터를 나타내는 제2영상 예측 움직임 벡터를 계산하는 단계와, 상기 제2영상 예측 움직임 벡터를 기반으로 상기 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 후보 움직임 벡터 중 하나인 제2영상 제2 움직임 벡터를 생성하는 단계 및 상기 제2영상 제1 움직임 벡터와 상기 제2영상 제2 움직임 벡터를 비교해서 최소의 움직임 비용 함수를 가지는 움직임 벡터를 상기 제2영상 움직임 벡터로 선택하는 단계를 포함할 수 있다.
일 측면에 있어서, 입체영상을 구성하는 영상 중 하나인 부호화된 제1영상 매크로 블록과 제1 압축정보를 수신하는 단계와, 상기 제1 압축정보를 이용해서 상기 부호화된 제1영상 매크로 블록을 복호화 하는 단계와, 상기 입체 영상을 구성하는 영상 중 다른 하나인 부호화된 제2영상 매크로 블록을 수신하는 단계와, 상기 제1 압축정보를 이용해서 제2 압축정보를 생성하는 단계 및 상기 제2 압축정보를 이용해서 상기 부호화된 제2영상 매크로 블록을 복호하는 단계를 포함하는, 입체영상 복호화 방법이 제공된다.
입체영상을 구성하는 2 종류의 영상 중에서 한 종류 영상을 부호화 할 때 필요한 제1 압축정보를 생성하고, 제1 압축정보를 이용해서 다른 종류의 영상을 부호화할 때 필요한 제2 압축정보를 생성하는 입체영상 부호화 장치 및 방법에 관한 것으로, 두 영상이 많은 상관관계를 가지고 있기 때문에 다른 영상의 압축정보를 참조함으로써 보다 높은 압축 효율을 가질 수 있다.
도 1은 입체영상을 부호화하고 복호화하는 시스템의 개략적인 구성을 도시한 도면,
도 2는 컬러 영상과 깊이 영상의 인트라 예측모드를 생성하는 장치의 일 예를 도시한 도면,
도 3은 컬러 영상과 깊이 영상의 인트라 예측모드를 생성하는 장치의 다른 예를 도시한 도면,
도 4는 인트라 16×16 모드에 있어서, 4개의 모드를 도시한 도면,
도 5는 인트라 4×4모드에 있어서, 9개의 모드를 도시한 도면,
도 6은 컬러 영상과 깊이 영상의 움직임 벡터를 생성하는 장치의 일 예를 도시한 도면,
도 7은 컬러 영상과 깊이 영상의 움직임 벡터를 생성하는 장치의 다른 예를 도시한 도면,
도 8은 컬러 영상과 깊이 영상의 움직임 벡터를 생성하는 장치의 또 다른 예를 도시한 도면,
도 9는 입체영상을 부호화하는 과정을 도시한 흐름도,
도 10은 컬러 영상 혹은 깊이 영상의 인트라 예측모드를 생성하는 과정을 도시한 흐름도,
도 11은 다른 영상의 인트라 예측모드를 이용해서 해당 영상의 인트라 예측모드를 생성하는 일 예를 도시한 흐름도,
도 12은 다른 영상의 인트라 예측모드를 이용해서 해당 영상의 인트라 예측모드를 생성하는 다른 예를 도시한 흐름도,
도 13은 컬러 영상 혹은 깊이 영상의 움직임 벡터를 생성하는 과정을 도시한 흐름도,
도 14는 다른 영상의 움직임 벡터를 이용해서 해당 영상의 움직임 벡터를 생성하는 일 예를 도시한 흐름도,
도 15는 다른 영상의 움직임 벡터를 이용해서 해당 영상의 움직임 벡터를 생성하는 다른 예를 도시한 흐름도 및,
도 16은 다른 영상의 움직임 벡터를 이용해서 해당 영상의 움직임 벡터를 생성하는 또 다른 예를 도시한 흐름도이다.
도 2는 컬러 영상과 깊이 영상의 인트라 예측모드를 생성하는 장치의 일 예를 도시한 도면,
도 3은 컬러 영상과 깊이 영상의 인트라 예측모드를 생성하는 장치의 다른 예를 도시한 도면,
도 4는 인트라 16×16 모드에 있어서, 4개의 모드를 도시한 도면,
도 5는 인트라 4×4모드에 있어서, 9개의 모드를 도시한 도면,
도 6은 컬러 영상과 깊이 영상의 움직임 벡터를 생성하는 장치의 일 예를 도시한 도면,
도 7은 컬러 영상과 깊이 영상의 움직임 벡터를 생성하는 장치의 다른 예를 도시한 도면,
도 8은 컬러 영상과 깊이 영상의 움직임 벡터를 생성하는 장치의 또 다른 예를 도시한 도면,
도 9는 입체영상을 부호화하는 과정을 도시한 흐름도,
도 10은 컬러 영상 혹은 깊이 영상의 인트라 예측모드를 생성하는 과정을 도시한 흐름도,
도 11은 다른 영상의 인트라 예측모드를 이용해서 해당 영상의 인트라 예측모드를 생성하는 일 예를 도시한 흐름도,
도 12은 다른 영상의 인트라 예측모드를 이용해서 해당 영상의 인트라 예측모드를 생성하는 다른 예를 도시한 흐름도,
도 13은 컬러 영상 혹은 깊이 영상의 움직임 벡터를 생성하는 과정을 도시한 흐름도,
도 14는 다른 영상의 움직임 벡터를 이용해서 해당 영상의 움직임 벡터를 생성하는 일 예를 도시한 흐름도,
도 15는 다른 영상의 움직임 벡터를 이용해서 해당 영상의 움직임 벡터를 생성하는 다른 예를 도시한 흐름도 및,
도 16은 다른 영상의 움직임 벡터를 이용해서 해당 영상의 움직임 벡터를 생성하는 또 다른 예를 도시한 흐름도이다.
이하, 본 발명의 실시 예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 입체영상을 부호화하고 복호화하는 입체영상 시스템의 개략적인 구성을 도시한 도면이다.
도 1을 참조하면 입체영상 시스템은 칼라 영상과 깊이 영상으로 구성되는 입체영상을 부호화 하는 입체영상 부호화 장치(100)와, 부호화된 입체영상을 복호화 하는 입체영상 복호화 장치(150)를 포함한다.
입체영상 부호화 장치(100)는 제1 부호기(110)와 제2 부호기(120)를 포함한다.
제1 부호기(110)는 입체영상을 구성하는 영상 중 하나인 제1영상 매크로 블록(MB; MacroBlock)에서 제1 압축정보를 생성하는 제1 압축정보 생성부(112)를 포함하고 제1 압축정보를 이용해서 제1영상 MB을 부호화한다. 여기서, 제1영상 MB은 칼라 영상의 MB 또는 깊이 영상의 MB 중에 하나가 될 수 있다. 그리고, 제1 압축정보는 제1영상 MB의 인트라 예측 모드(IPM; Intra Prediction Mode)를 나타내는 제1영상 IPM 또는 제1영상 MB의 움직임 벡터를 나타내는 제1영상 움직임 벡터(MV; Motion Vector)일 수 있다.
제2 부호기(120)는 제1 압축정보를 이용해서 제2 압축정보를 생성하는 제2 압축정보 생성부(122)을 포함하고 제2 압축정보를 이용해서 입체 영상을 구성하는 영상 중 다른 하나인 제2영상 MB을 부호화한다. 여기서, 제2영상 MB은 칼라 영상의 MB 또는 깊이 영상의 MB 중 하나로서 제1영상 MB과 다른 하나 영상의 MB이다. 그리고, 제2 압축정보는 제2영상 MB의 인트라 예측모드를 나타내는 제2영상 IPM 또는 제2영상 MB의 움직임 벡터를 나타내는 제2영상 MV일 수 있다.
입체영상 복호화 장치(150)는 제1 복호기(160)와 제2 복호기(170)를 포함한다.
제1 복호기(160)는 부호화된 제1영상 MB을 수신하고, 부호화된 제1영상 MB에서 제1 압축정보를 확인하고, 제1 압축정보를 이용해서 부호화된 제1영상 MB을 복호화 한다.
제2 복호기(170)는 부호화된 제2영상 MB을 수신하고, 제 1복호기(160)로부터 수신하는 제1 압축정보를 이용해서 제2 압축정보를 생성하고 제2 압축정보를 이용해서 부호화된 제2영상 MB을 복호화 한다.
압축정보가 인트라 예측모드인 경우 인트라 예측모드를 생성하는 제1 압축정보 생성부(112)와 제2 압축정보 생성부(122)의 구성을 아래에서 도 2와 도 3을 통해 설명하고자 한다.
도 2는 컬러 영상과 깊이 영상의 인트라 예측모드를 생성하는 장치의 일 예를 도시한 도면이다.
도 2를 참조하면 제1 압축정보 생성부(112)는 제1영상 인트라 예측부(210)와 제1영상 IPM 결정부(220)를 포함하고, 제2 압축정보 생성부(122)는 제2영상 IPM 결정부(230)를 포함한다.
제1영상 인트라 예측부(210)는 제1영상 MB의 경계화소들로부터 인트라 예측모드들 각각에 따라 예측블록들을 생성한다. 이때, 제1영상 MB의 크기가 16×16인 경우 도 4와 같이 4개의 인트라 예측모드들로 구성되고, 4×4인 경우 도 5와 같이 9개의 인트라 예측모드들로 구성된다.
도 4는 인트라 16×16 모드에 있어서, 4개의 모드를 도시한 도면이다.
도 4를 참조하면, 인트라 16×16 모드에 있어서, 4개의 모드는 모드 0 내지 모드 3으로 구성될 수 있다.
모드 0(Vertical 모드)(400)은 위쪽 경계화소로부터 수직으로 확장해서 예측블록을 생성한다. 또한, 모드 1(Horizontal 모드)(410)은 왼쪽 경계화소로부터 수평으로 확장해서 예측블록을 생성한다. 또한, 모드 2(DC 모드)(420)는 위쪽 경계화소와 왼쪽 경계화소의 평균으로 예측블록을 생성한다. 또한, 모드 6(Plane 모드)(430)는 위쪽 경계화소와 왼쪽 경계화소들을 함께 고려해서 예측블록을 생성한다.
도 5는 인트라 4×4모드에 있어서, 9개의 모드를 도시한 도면이다.
도 5를 참조하면, 인트라 4×4모드에 있어서, 9개의 모드는 모드 0 내지 모드 8으로 구성될 수 있다. 도 4에 도시된 봐와 같이, 모드 0(500)은 위쪽 경계화소 A, B, C, D로부터 수직으로 확장해서 예측블록을 생성한다. 또한, 모드 1(510)은 왼쪽 경계화소 I, J, K, L로부터 수평으로 확장해서 예측블록을 생성한다. 또한, 모드 2(520)는 A, B, C, D와 I, J, K, L의 평균으로 예측블록을 생성한다. 또한, 모드 3(530)은 좌측 하단과 우측 상단 사이의 45 각도로 보간해서 예측블록을 생성한다. 또한, 모드 4(540)는 우측 하단으로 45 각도로 확장해서 예측블록을 생성한다. 또한, 모드 5(550)는 수직의 오른쪽 약 26.6 각도로 확장해서 예측블록을 생성한다. 또한, 모드 6(560)은 수평의 아래 약 26.6 각도로 확장해서 예측블록을 생성한다. 또한, 모드 7(570)은 수직의 왼쪽 약 26.6 각도로 확장해서 예측블록을 생성한다. 또한, 모드 8(580)은 수평의 위쪽 약 26.6 각도로 보간해서 블록을 생성한다.
제1영상 IPM 결정부(220)는 예측블록들 별로 제1영상 MB을 차분하고 율-왜곡 최적화해서 압축효율을 검사하고, 인트라 예측모드들 중에서 압축효율이 가장 좋은 인트라 예측모드를 제1영상 IPM로 결정한다.
제2영상 IPM 결정부(230)는 1영상 IPM를 제2영상 IPM로 결정한다.
도 2와 같이 제2 압축정보 생성부(122)에서 제1영상 IPM를 제2영상 IPM로 결정하는 경우, 제1 부호기(110)는 부호화된 제1영상 MB을 송신할 때 제1영상 IPM를 함께 송신한다.
수신장치(150)의 제1 복호기(160)는 제1영상 IPM를 이용해서 부호화된 제1영상 MB 복호화하고, 제2 복호기(170)로 제1영상 IPM를 제공한다. 제2 복호기(170)는 제2 부호기(120)로부터 부호화된 제2영상 MB을 수신하고 제1 복호기(160)로부터 제공받은 제1영상 IPM를 이용해서 부호화된 제2영상 MB를 복호한다.
따라서, 제2 부호기(120)는 부호화된 제2영상 MB을 송신할 때 제2영상 IPM를 송신하지 않아도 된다.
도 3은 컬러 영상과 깊이 영상의 인트라 예측모드를 생성하는 장치의 다른 예를 도시한 도면이다.
도 3을 참조하면 제1 압축정보 생성부(112)는 제1영상 인트라 예측부(210)와 제1영상 IPM 결정부(220)를 포함한다. 그리고, 제2 압축정보 생성부(122)는 후보 IPM 생성부(310), 제2영상 인트라 예측부(320) 및 제2영상 IPM 결정부(330)를 포함한다.
후보 IPM 생성부(310)는 제1영상 IPM를 이용해서 후보 인트라 예측모드들을 생성한다. 후보 인트라 예측모드는 제1영상 IPM를 왼쪽 또는 오른쪽으로 기설정된 각도만큼 기울여 생성된다. 이때 기울이는 기설정된 각도에 따라 주변불록들의 경계화소의 가중치가 달라질 수 있다.
제2영상 인트라 예측부(320)는 후보 인트라 예측모드들 각각에 따라 후보 예측블록들을 생성한다.
제2영상 IPM 결정부(330)는 후보 예측블록들 별로 제2영상 MB을 차분하고 율-왜곡 최적화해서 압축효율을 검사하고, 후보 인트라 예측모드들 중에서 압축효율이 가장 좋은 후보 인트라 예측모드를 제2영상 IPM로 결정한다.
압축정보가 움직임 벡터인 경우 움직임 벡터를 생성하는 제1 압축정보 생성부(112)와 제2 압축정보 생성부(122)의 구성을 아래에서 도 6에서 도 8을 통해 설명하고자 한다.
도 3와 같이 제2 압축정보 생성부(122)에서 제1영상 IPM를 이용해서 후보 인트라 예측모드를 생성하고 후보 인트라 예측모드 중에서 제2영상 IPM를 결정하는 경우, 제1 부호기(110)는 부호화된 제1영상 MB을 송신할 때 제1영상 IPM를 함께 송신한다. 그리고, 제2 부호기(120)는 부호화된 제1영상 MB을 송신할 때, 제2영상 IPM를 나타내는 인덱스 비트를 함께 전송한다.
수신장치(150)의 제1 복호기(160)는 제1영상 IPM를 이용해서 부호화된 제1영상 MB 복호화하고, 제2 복호기(170)로 제1영상 IPM를 제공한다. 제2 복호기(170)는 제2 부호기(120)로부터 부호화된 제2영상 MB와 인덱스 비트를 수신한다. 그리고, 제2 복호기(170)는 제1 복호기(160)로부터 제공받은 제1영상 IPM를 이용해서 후보 인트라 예측모드들을 생성하고, 후보 인트라 예측모드들 중에서 인덱스 비트에 대응하는 후보 인트라 예측모드를 제2영상 IPM으로 확인한다. 그리고, 제2 복호기(170)는 부호화된 제2영상 MB을 확인한 제2영상 IPM을 이용해서 복호한다.
도 6은 컬러 영상과 깊이 영상의 움직임 벡터를 생성하는 장치의 일 예를 도시한 도면이다.
도 6을 참조하면 제1 압축정보 생성부(112)는 제1영상 예측 움직임 벡터(PMV; Predictive Motion Vector) 계산부(610)와 제1영상 움직임 탐색부(620)를 포함하고, 제2 압축정보 생성부(122)는 제2영상 MV 결정부(630)를 포함한다.
제1영상 PMV 계산부(610)는 제1영상 MB과 주변블록들을 이용해서 제1영상 MB의 예측 움직임 벡터를 나타내는 제1영상 PMV를 계산한다. 예를 들어, 제1영상 PMV 계산부(610)는 제1영상 MB과 주변블록들인 왼쪽, 위쪽, 오른쪽-위쪽에 있는 블록들의 움직임 벡터들에 수평/수직 방향으로 각각의 중간값(Median-Filter)을 취해 얻은 벡터를 제1영상 PMV로 계산할 수 있다.
제1영상 움직임 탐색부(620)는 제1영상 PMV를 기반으로 제1영상에서 움직임 탐색을 하여 제1영상 MB의 최종 움직임 벡터인 제1영상 MV를 생성한다.
제2영상 MV 결정부(630)는 제1영상 MV를 제2영상 MV로 결정한다.
도 6과 같이 제2 압축정보 생성부(122)에서 제1영상 MV를 제2영상 MV로 결정하는 경우, 제1 부호기(110)는 부호화된 제1영상 MB을 송신할 때 제1영상 MV를 함께 송신한다.
수신장치(150)의 제1 복호기(160)는 제1영상 MV를 이용해서 부호화된 제1영상 MB 복호화하고, 제2 복호기(170)로 제1영상 MV를 제공한다. 제2 복호기(170)는 제2 부호기(120)로부터 부호화된 제2영상 MB을 수신하고 제1 복호기(160)로부터 제공받은 제1영상 MV를 이용해서 부호화된 제2영상 MB를 복호한다.
따라서, 제2 부호기(120)는 부호화된 제2영상 MB을 송신할 때 제2영상 MV를 송신하지 않아도 된다.
도 7은 컬러 영상과 깊이 영상의 움직임 벡터를 생성하는 장치의 다른 예를 도시한 도면이다.
도 7을 참조하면 제1 압축정보 생성부(112)는 제1영상 PMV 계산부(610)와 제1영상 움직임 탐색부(620)를 포함하고, 제2 압축정보 생성부(122)는 제2영상 PMV 결정부(710)와 제2영상 움직임 탐색부(720)를 포함한다.
제2영상 PMV 결정부(710)는 제1영상 MV를 제2영상 MB의 예측 움직임 벡터를 나타내는 제2영상 PMV로 결정한다.
제2영상 움직임 탐색부(720)는 제2영상 PMV 결정부(710)에서 결정한 제2영상 PMV를 기반으로 제2영상에서 움직임 탐색을 하여 제2영상 MB의 최종 움직임 벡터인 제2영상 MV를 생성한다.
도 7과 같이 제2 압축정보 생성부(122)에서 제1영상 MV를 제2영상 PMV로 결정하고, 제2영상에서 움직임 탐색해서 이용해서 제2영상 MV를 결정하는 경우, 제1 부호기(110)는 부호화된 제1영상 MB을 송신할 때 제1영상 MV를 함께 송신한다.
수신장치(150)의 제1 복호기(160)는 제1영상 MV를 이용해서 부호화된 제1영상 MB 복호화하고, 제2 복호기(170)로 제1영상 MV를 제공한다. 제2 복호기(170)는 제2 부호기(120)로부터 부호화된 제2영상 MB를 수신한다. 그리고, 제2 복호기(170)는 제1 복호기(160)로부터 제공받은 제1영상 MV를 이용해서 제2영상 PMV를 생성하고, 제2영상 PMV를 이용해서 제2영상 MV를 복원한다. 그리고, 제2 복호기(170)는 부호화된 제2영상 MB을 제2영상 MV를 이용해서 복호한다.
도 8은 컬러 영상과 깊이 영상의 움직임 벡터를 생성하는 장치의 또 다른 예를 도시한 도면이다.
도 8을 참조하면 제1 압축정보 생성부(112)는 제1영상 PMV 계산부(610)와 제1영상 움직임 탐색부(620)를 포함한다. 그리고, 제2 압축정보 생성부(122)는 제2영상 PMV 결정부(710), 제2영상 제1 움직임 탐색부(720), 제2영상 PMV 계산부(810), 제2영상 제2 움직임 탐색부(820) 및 제2영상 MV 선택부(830)를 포함한다.
제2영상 PMV 결정부(710)는 제1영상 MV를 제2영상 MB의 예측 움직임 벡터를 나타내는 제2영상 MV로 결정한다.
제2영상 제1 움직임 탐색부(720)는 제2영상 PMV 결정부(710)에서 결정한 제2영상 PMV를 기반으로 제2영상에서 움직임 탐색을 하여 제2영상 MB의 후보 움직임 벡터인 제2영상 제1 움직임 벡터를 생성한다.
제2영상 PMV 계산부(810)는 제2영상 MB과 주변블록들을 이용해서 제2영상 MB의 예측 움직임 벡터를 나타내는 제2영상 PMV를 계산한다. 예를 들어, 제2영상 PMV 계산부(810)는 제2영상 MB과 주변블록들인 왼쪽, 위쪽, 오른쪽-위쪽에 있는 블록들의 움직임 벡터들에 수평/수직 방향으로 각각의 중간값(Median-Filter)을 취해 얻은 벡터를 제2영상 PMV로 계산할 수 있다.
제2영상 제2 움직임 탐색부(820)는 제2영상 PMV 계산부(810)에서 계산한 제2영상 PMV를 기반으로 제2영상에서 움직임 탐색을 하여 제2영상 MB의 후보 움직임 벡터인 제2영상 제2 움직임 벡터를 생성한다.
제2영상 MV 선택부(830)는 제2영상 제1 움직임 벡터와 제2영상 제2 움직임 벡터를 비교해서 최소의 움직임 비용 함수를 가지는 움직임 벡터를 제2영상 MV로 선택한다.
도 8과 같이 제2 압축정보 생성부(122)에서 제2영상 MV를 생성할 때, 일반적인 방법 혹은 도 7의 방법을 사용하는 경우, 제1 부호기(110)는 부호화된 제1영상 MB을 송신할 때 제1영상 MV를 함께 송신한다.
그리고, 제2 부호기(120)는 부호화된 제2영상 MB을 송신할 때 인덱스 비트를 함께 송신한다. 이때, 인덱스 비트는 일반적인 방법과 도 7의 방법 중 어느 방법으로 제2영상 MV가 생성되었는지를 나타내는 정보이다.
인덱스 비트가 제2영상 MB을 통해 제2영상 PMV을 계산함을 나타내는 경우, 즉, 제2영상 MV가 일발적인 방법에 의해 생성된 경우, 제2 복호기(170)는 부호화된 제2영상 MB을 송신할 때 인덱스 비트와 제2영상 MV를 송신한다.
수신장치(150)의 제1 복호기(160)는 제1영상 MV를 이용해서 부호화된 제1영상 MB 복호화하고, 제2 복호기(170)로 제1영상 MV를 제공한다.
그리고, 제2 복호기(170)는 제2 부호기(120)로부터 부호화된 제2영상 MB과 인덱스 비트를 수신하고, 추가로 제2영상 MV를 수신할 수도 있다.
인덱스 비트의 내용이 제1영상 MV를 제2영상 PMV로 함을 나타내면, 제2 복호기(170)는 제1 복호기(160)로부터 제공받은 제1영상 MV를 이용해서 제2영상 PMV를 생성하고, 제2영상 PMV를 이용해서 제2영상 MV를 복원한다. 그리고, 제2 복호기(170)는 부호화된 제2영상 MB을 제2영상 MV를 이용해서 복호한다.
하지만, 인덱스 비트의 내용이 제2영상 MB을 통해 제2영상 PMV을 계산함을 나타내면, 제2 복호기(170)는 제2 부호기(120)로부터 부호화된 제2영상 MB과 함께 수신하는 제2영상 MV를 이용해서 부호화된 제2영상 MB을 복호한다.
이하, 상기와 같이 구성된 본 발명에 따른 입체영상을 부호화하는 방법을 아래에서 도면을 참조하여 설명한다.
도 9는 입체영상을 부호화하는 과정을 도시한 흐름도이다.
도 9를 참조하면 입체영상 부호화 장치(100)는 910단계에서 입체영상을 구성하는 제1영상 MB과 제2영상 MB을 수신하면, 그리고, 입체영상 부호화 장치는 912단계에서 제1영상 MB에서 제1 압축정보를 생성한다. 여기서, 제1영상 MB은 칼라 영상의 MB 또는 깊이 영상의 MB 중에 하나가 될 수 있다. 그리고, 제1 압축정보는 제1영상 MB의 인트라 예측 모드를 나타내는 제1영상 IPM 또는 제1영상 MB의 움직임 벡터를 나타내는 제1영상 MV일 수 있다.
그리고, 입체영상 부호화 장치(100)는 914단계에서 제1 압축정보를 이용해서 제2 압축정보 생성한다. 여기서, 제2영상 MB은 칼라 영상의 MB 또는 깊이 영상의 MB 중 하나로서 제1영상 MB과 다른 하나 영상의 MB이다. 그리고, 제2 압축정보는 제2영상 MB의 인트라 예측모드를 나타내는 제2영상 IPM 또는 제2영상 MB의 움직임 벡터를 나타내는 제2영상 MV일 수 있다.
그리고, 입체영상 부호화 장치(100)는 916단계에서 제1 압축정보를 이용해서 제1영상 MB을 부호화한다. 그리고, 입체영상 부호화 장치(100)는 918단계에서 제2 압축정보를 이용해서 제2영상 MB을 부호화한다. 그리고, 입체영상 부호화 장치(100)는 920단계에서 부호화된 제1영상 MB와 부호화된 제2영상 MB를 입체영상 복호화 장치로 송신한다.
압축정보가 인트라 예측모드인 경우 제1영상 IPM과 제2영상 IPM을 생성하는 과정을 아래에서 도 10에서 도 12을 통해 설명하고자 한다.
도 10은 컬러 영상 혹은 깊이 영상의 인트라 예측모드를 생성하는 과정을 도시한 흐름도이다.
도 10을 참조하면, 제1 압축정보 생성부(112)는 1010단계에서 제1영상 MB의 주변블록과의 경계화소들로부터 인트라 예측모드에 따라 예측블록들을 생성한다.
그리고, 제1 압축정보 생성부(112)는 1020단계에서 예측블록들 별로 제1영상 MB을 차분하고 율-왜곡 최적화해서 압축효율을 검사한다.
그리고, 제1 압축정보 생성부(112)는 1030단계에서 인트라 예측모드들 중에서 압축효율이 가장 좋은 인트라 예측모드를 제1영상 IPM로 결정한다.
도 11은 다른 영상의 인트라 예측모드를 이용해서 해당 영상의 인트라 예측모드를 생성하는 일 예를 도시한 흐름도이다.
도 11을 참조하면, 제2 압축정보 생성부(122)는 1110단계에서 제1영상 IPM를 수신한다. 그리고, 제2 압축정보 생성부(122)는 1120단계에서 제1영상 IPM를 제2영상 MB의 인트라 예측모드인 제2영상 IPM로 결정한다.
도 12은 다른 영상의 인트라 예측모드를 이용해서 해당 영상의 인트라 예측모드를 생성하는 다른 예를 도시한 흐름도이다.
도 12를 참조하면, 제2 압축정보 생성부(122)는 1210단계에서 제1영상 IPM를 수신한다. 그리고, 제2 압축정보 생성부(122)는 1220단계에서 제1영상 IPM를 이용해서 후보 IPM들을 생성한다. 이때, 후보 인트라 예측모드는 제1영상 IPM를 왼쪽 또는 오른쪽으로 기설정된 각도만큼 기울여 생성된다. 이때 기울이는 기설정된 각도에 따라 주변불록들의 경계화소의 가중치가 달라질 수 있다.
그리고, 제2 압축정보 생성부(122)는 1230단계에서 제2영상 MB의 주변블록과의 경계화소들로부터 후보 IPM에 따라 후보 예측블록들을 생성한다.
그리고, 제2 압축정보 생성부(122)는 1240단계에서 후보 예측블록들 별로 제2영상 MB을 차분하고 율-왜곡 최적화해서 압축효율을 검사한다.
그리고, 제2 압축정보 생성부(122)는 1250단계에서 압축효율이 가장 좋은 예측블록에 대응하는 후보 IPM를 제2영상 IPM로 결정한다.
압축정보가 움직임 벡터인 경우 제1영상 MV과 제2영상 MV을 생성하는 과정을 아래에서 도 13에서 도 16을 통해 설명하고자 한다.
도 13은 컬러 영상 혹은 깊이 영상의 움직임 벡터를 생성하는 과정을 도시한 흐름도이다.
도 13을 참조하면, 제1 압축정보 생성부(112)는 1310단계에서 제1영상 MB와 주변블록들을 이용해서 제1영상 PMV를 계산한다. 이때, 제1영상 PMV의 계산은 제1영상 MB과 주변블록들인 왼쪽, 위쪽, 오른쪽-위쪽에 있는 블록들의 움직임 벡터들에 수평/수직 방향으로 각각의 중간값(Median-Filter)을 취해 계산되는 벡터이다.
그리고, 제1 압축정보 생성부(112)는 1320단계에서 제1영상 PMV를 기반으로 제1영상에서 움직임 탐색을 하여 제1영상 MB의 최종 움직임 벡터인 제1영상 MV를 탐색한다.
도 14는 다른 영상의 움직임 벡터를 이용해서 해당 영상의 움직임 벡터를 생성하는 일 예를 도시한 흐름도이다.
도 14를 참조하면, 제2 압축정보 생성부(122)는 1410단계에서 제1영상 MV를 수신한다. 그리고, 제2 압축정보 생성부(122)는 1420단계에서 제1영상 MV를 제2영상 MB의 움직임 벡터를 나타내는 제2영상 MV로 결정한다.
도 15는 다른 영상의 움직임 벡터를 이용해서 해당 영상의 움직임 벡터를 생성하는 다른 예를 도시한 흐름도이다.
도 15를 참조하면, 제2 압축정보 생성부(122)는 1510단계에서 제1영상 MV를 수신한다. 그리고, 제2 압축정보 생성부(122)는 1520단계에서 제1영상 MV를 제2영상 PMV로 결정한다. 그리고, 제2 압축정보 생성부(122)는 1530단계에서 제2영상 PMV를 기반으로 제2영상에서 움직임 탐색을 하여 제2영상 MB의 최종 움직임 벡터인 제2영상 MV를 생성한다.
도 16은 다른 영상의 움직임 벡터를 이용해서 해당 영상의 움직임 벡터를 생성하는 또 다른 예를 도시한 흐름도이다.
도 16을 참조하면, 제2 압축정보 생성부(122)는 1610단계에서 제1영상 MV를 수신한다. 그리고, 제2 압축정보 생성부(122)는 1620단계에서 제1영상 MV를 제2영상 제1 PMV로 결정한다.
그리고, 제2 압축정보 생성부(122)는 1630단계에서 결정한 2영상 제1 PMV 를 기반으로 제2영상에서 움직임 탐색을 하여 제2영상 MB의 후보 움직임 벡터인 제2영상 제1 MV를 생성한다.
그리고, 제2 압축정보 생성부(122)는 1640단계에서 제2영상 MB와 주변블록들을 이용해서 제2영상 제2 PMV를 계산한다.
그리고, 제2 압축정보 생성부(122)는 1650단계에서 제2영상 PMV를 기반으로 제2영상에서 움직임 탐색을 하여 제2영상 MB의 움직임 벡터인 제2영상 제2 MV를 생성한다.
그리고, 제2 압축정보 생성부(122)는 1670단계에서 제2영상 제1 MV와, 제2영상 제2 MV를 비교해서 최소의 움직임 비용 함수를 가지는 움직임 벡터를 제2영상 MV로 선택한다.
이상과 같이 본 발명은 비록 한정된 실시 예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시 예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
100; 입체영상 부호화 장치
110; 제1 부호기
112; 제1 압축정보 생성부
120; 제2 부호기
122; 제2 압축정보 생성부
150; 입체영상 복호화 장치
160; 제1 복호기
170; 제2 복호기
110; 제1 부호기
112; 제1 압축정보 생성부
120; 제2 부호기
122; 제2 압축정보 생성부
150; 입체영상 복호화 장치
160; 제1 복호기
170; 제2 복호기
Claims (34)
- 입체영상을 구성하는 영상 중 하나인 제1영상 매크로 블록에서 제1 압축정보를 생성하고, 상기 제1 압축정보를 이용해서 상기 제1영상 매크로 블록을 부호화 하는 제1 부호기; 및
상기 제1 압축정보를 이용해서 제2 압축정보를 생성하고, 상기 제2 압축정보를 이용해서 상기 입체 영상을 구성하는 영상 중 다른 하나인 제2영상 매크로 블록을 부호화 하는 제2 부호기를 포함하는,
입체영상 부호화 장치.
- 제1항에 있어서,
상기 제1영상 매크로 블록은 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에 하나이고,
상기 제2영상 매크로 블록은 상기 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에서 상기 제1영상 매크로 블록과 다른 하나인,
입체영상 부호화 장치.
- 제1항에 있어서,
상기 제1 압축정보는 상기 제1영상 매크로 블록의 인트라 예측모드를 나타내는 제1영상 인트라 예측모드고,
상기 제2 압축정보는 상기 제2영상 매크로 블록의 인트라 예측모드를 나타내는 제2영상 인트라 예측모드인,
입체영상 부호화 장치.
- 제3항에 있어서,
상기 제1 부호기는,
인트라 예측모드들 각각에 따라 예측블록들을 생성하는 제1 영상 인트라 예측부; 및
상기 예측블록들 별로 상기 제1 영상 매크로 블록을 차분하고 율-왜곡 최적화해서 압축효율을 검사하고, 상기 인트라 예측모드들 중에서 압축효율이 가장 좋은 인트라 예측모드를 상기 제1영상 인트라 예측모드로 결정하는 제1영상 인트라 예측모드 결정부를 포함하는,
입체영상 부호화 장치.
- 제3항에 있어서,
상기 제2 부호기는,
상기 제1영상 인트라 예측모드를 상기 제2영상 매크로 블록의 인트라 예측모드인 상기 제2영상 인트라 예측모드로 결정하는 제2영상 인트라 예측모드 결정부를 포함하는,
입체영상 부호화 장치.
- 제3항에 있어서,
상기 제2 부호기는,
상기 제1영상 인트라 예측모드를 이용해서 후보 인트라 예측모드들을 생성하는 후보 인트라 예측모드 생성부;
상기 후보 인트라 예측모드들 각각에 따라 후보 예측블록들을 생성하는 제2 영상 인트라 예측부; 및
상기 후보 예측블록들 별로 상기 제2 영상 매크로 블록을 차분하고 율-왜곡 최적화해서 압축효율을 검사하고, 상기 후보 인트라 예측모드들 중에서 압축효율이 가장 좋은 후보 인트라 예측모드를 상기 제2영상 인트라 예측모드로 결정하는 제2영상 인트라 예측모드 결정부를 포함하는,
입체영상 부호화 장치.
- 제1항에 있어서,
상기 제1 압축정보는 상기 제1영상 매크로 블록의 움직임 벡터를 나타내는 제1영상 움직임 벡터이고,
상기 제2 압축정보는 상기 제2영상 매크로 블록의 움직임 벡터를 나타내는 제2영상 움직임 벡터인,
입체영상 부호화 장치.
- 제7항에 있어서,
상기 제1 부호기는,
상기 제1영상 매크로 블록과 주변블록들을 이용해서 상기 제1영상 매크로 블록의 예측 움직임 벡터를 나타내는 제1영상 예측 움직임 벡터를 계산하는 제1영상 예측 움직임 벡터 계산부; 및
상기 제1영상 예측 움직임 벡터를 기반으로 제1영상에서 움직임 탐색을 하여 상기 제1영상 매크로 블록의 최종 움직임 벡터인 상기 제1영상 움직임 벡터를 생성하는 제1영상 움직임 탐색부를 포함하는,
입체영상 부호화 장치.
- 제7항에 있어서,
상기 제2 부호기는,
상기 제1영상 움직임 벡터를 상기 제2영상 매크로 블록의 최종 움직임 벡터인 상기 제2영상 움직임 벡터로 결정하는 제2영상 움직임 벡터 결정부를 포함하는,
입체영상 부호화 장치.
- 제7항에 있어서,
상기 제2 부호기는,
상기 제1영상 움직임 벡터를 기반으로 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 최종 움직임 벡터인 상기 제2영상 움직임 벡터를 생성하는 제2영상 움직임 탐색부를 포함하는,
입체영상 부호화 장치.
- 제7항에 있어서,
상기 제2 부호기는,
상기 제1영상 움직임 벡터를 기반으로 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 후보 움직임 벡터 중 하나인 제2영상 제1 움직임 벡터를 생성하는 제2영상 제1 움직임 탐색부;
상기 제2영상 매크로 블록과 주변블록들을 이용해서 상기 제2영상 매크로 블록의 예측 움직임 벡터를 나타내는 제2영상 예측 움직임 벡터를 계산하는 제2영상 예측 움직임 벡터 계산부;
상기 제2영상 예측 움직임 벡터를 기반으로 상기 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 후보 움직임 벡터 중 하나인 제2영상 제2 움직임 벡터를 생성하는 움직임 탐색부; 및
상기 제2영상 제1 움직임 벡터와 상기 제2영상 제2 움직임 벡터를 비교해서 최소의 움직임 비용 함수를 가지는 움직임 벡터를 상기 제2영상 움직임 벡터로 선택하는 제2 영상 움직임 벡터 선택부를 포함하는,
입체영상 부호화 장치.
- 입체영상을 구성하는 영상 중 하나인 부호화된 제1영상 매크로 블록과 제1 압축정보를 수신하면, 상기 제1 압축정보를 이용해서 상기 부호화된 제1영상 매크로 블록을 복호화 하는 제1 부호기; 및
상기 입체 영상을 구성하는 영상 중 다른 하나인 부호화된 제2영상 매크로 블록을 수신하면, 상기 제1 압축정보를 이용해서 제2 압축정보를 생성하고, 상기 제2 압축정보를 이용해서 상기 부호화된 제2영상 매크로 블록을 복호하는 제2 복호기를 포함하는,
입체영상 복호화 장치.
- 제12항에 있어서,
상기 제1영상 매크로 블록은 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에 하나이고,
상기 제2영상 매크로 블록은 상기 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에서 상기 제1영상 매크로 블록과 다른 하나인,
입체영상 복호화 장치.
- 제12항에 있어서,
상기 제1 압축정보는 제1영상 매크로 블록의 인트라 예측모드를 나타내는 제1영상 인트라 예측모드고,
상기 제2 압축정보는 제2영상 매크로 블록의 인트라 예측모드를 나타내는 제2영상 인트라 예측모드인,
입체영상 복호화 장치.
- 제14항에 있어서,
상기 제1 복호기는,
상기 부호화된 제1영상 매크로 블록과 함께 상기 제1영상 인트라 예측모드를 수신하고, 상기 제1영상 인트라 예측모드를 이용해서 상기 부호화된 제1영상 매크로 블록을 복호하는
입체영상 복호화 장치.
- 제14항에 있어서,
상기 제2 복호기는,
상기 부호화된 제2영상 매크로 블록을 수신하고, 상기 제1영상 인트라 예측모드를 이용해서 상기 부호화된 제2영상 매크로 블록을 복호하는
입체영상 복호화 장치.
- 제14항에 있어서,
상기 제2 복호기는,
상기 부호화된 제2영상 매크로 블록과 함께 인덱스 비트를 수신하고, 상기 제1영상 인트라 예측모드를 이용해서 상기 후보 인트라 예측모드들을 생성하고, 상기 후보 인트라 예측모드들을 중에서 상기 인덱스 비트에 대응되는 후보 인트라 예측모드를 상기 제2영상 인트라 예측모드로 하여 상기 부호화된 제2영상 매크로 블록을 복호하는
입체영상 복호화 장치.
- 제12항에 있어서,
상기 제1 압축정보는 상기 제1영상 매크로 블록의 움직임 벡터를 나타내는 제1영상 움직임 벡터이고,
상기 제2 압축정보는 상기 제2영상 매크로 블록의 움직임 벡터를 나타내는 제2영상 움직임 벡터인,
입체영상 복호화 장치.
- 제18항에 있어서,
상기 제1 복호기는,
상기 부호화된 제1영상 매크로 블록과 함께 상기 제1영상 움직임 벡터를 수신하고, 상기 제1영상 움직임 벡터를 이용해서 상기 부호화된 제1영상 매크로 블록을 복호하는
입체영상 복호화 장치.
- 제18항에 있어서,
상기 제2 복호기는,
상기 부호화된 제2영상 매크로 블록을 수신하고, 상기 제1영상 움직임 벡터를 이용해서 상기 부호화된 제2영상 매크로 블록을 복호하는
입체영상 복호화 장치.
- 제18항에 있어서,
상기 제2 복호기는,
상기 부호화된 제2영상 매크로 블록을 수신하고, 상기 제1영상 움직임 벡터를 제2영상의 예측 움직임 벡터로 해서 상기 제2영상 움직임 벡터를 복원하고, 상기 제2영상 움직임 벡터를 상기 부호화된 제2영상 매크로 블록을 복호하는
입체영상 복호화 장치.
- 제18항에 있어서,
상기 제2 복호기는,
상기 부호화된 제2영상 매크로 블록과 인덱스 비트를 수신하고,
상기 인덱스 비트가 상기 제1영상 움직임 벡터를 제2영상의 예측 움직임 벡터로 함을 나타내면, 상기 제1영상 움직임 벡터를 제2영상의 예측 움직임 벡터로 해서 상기 제2영상 움직임 벡터를 복원하고, 상기 제2영상 움직임 벡터를 상기 부호화된 제2영상 매크로 블록을 복호하고,
상기 인덱스 비트가 상기 제2영상 매크로 블록을 통해 제2영상의 예측 움직임 벡터를 계산함을 나타내면, 상기 부호화된 제2영상 매크로 블록과 함께 수신되는 상기 제2영상 MV를 이용해서 상기 부호화된 제2영상 MB을 복호하는.
입체영상 복호화 장치.
- 입체영상을 구성하는 영상 중 하나인 제1영상 매크로 블록에서 제1 압축정보를 생성하고, 상기 제1 압축정보를 이용해서 상기 제1영상 매크로 블록을 부호화 하는 단계: 및
상기 제1 압축정보를 이용해서 제2 압축정보를 생성하고, 상기 제2 압축정보를 이용해서 상기 입체 영상을 구성하는 영상 중 다른 하나인 제2영상 매크로 블록을 부호화 하는 단계를 포함하는,
입체영상 부호화 방법.
- 제23항에 있어서,
상기 제1영상 매크로 블록은 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에 하나이고,
상기 제2영상 매크로 블록은 상기 칼라 영상의 매크로 블록 또는 깊이 영상의 매크로 블록 중에서 상기 제1영상 매크로 블록과 다른 하나인,
입체영상 부호화 방법.
- 제23항에 있어서,
상기 제1 압축정보는 상기 제1영상 매크로 블록의 인트라 예측모드를 나타내는 제1영상 인트라 예측모드고,
상기 제2 압축정보는 상기 제2영상 매크로 블록의 인트라 예측모드를 나타내는 제2영상 인트라 예측모드인,
입체영상 부호화 방법.
- 제25항에 있어서,
상기 제1 압축정보인 상기 제1영상 인트라 예측모드의 생성은,
인트라 예측모드들 각각에 따라 예측블록들을 생성하는 단계;
상기 예측블록들 별로 상기 제1 영상 매크로 블록을 차분하고 율-왜곡 최적화해서 압축효율을 검사하는 단계; 및
상기 인트라 예측모드들 중에서 압축효율이 가장 좋은 인트라 예측모드를 상기 제1영상 인트라 예측모드로 결정하는 단계를 포함하는,
입체영상 부호화 방법.
- 제25항에 있어서,
상기 제2 압축정보인 상기 제2영상 인트라 예측모드의 생성은,
상기 제1영상 인트라 예측모드를 상기 제2영상 매크로 블록의 인트라 예측모드인 상기 제2영상 인트라 예측모드로 결정하는 단계를 포함하는,
입체영상 부호화 방법.
- 제25항에 있어서,
상기 제2 압축정보인 상기 제2영상 인트라 예측모드의 생성은,
상기 제1영상 인트라 예측모드를 이용해서 후보 인트라 예측모드들을 생성하는 단계;
상기 후보 인트라 예측모드들 각각에 따라 후보 예측블록들을 생성하는 단계;
상기 후보 예측블록들 별로 상기 제2 영상 매크로 블록을 차분하고 율-왜곡 최적화해서 압축효율을 검사하는 단계; 및
상기 후보 인트라 예측모드들 중에서 압축효율이 가장 좋은 후보 인트라 예측모드를 상기 제2영상 인트라 예측모드로 결정하는 단계를 포함하는,
입체영상 부호화 방법.
- 제23항에 있어서,
상기 제1 압축정보는 상기 제1영상 매크로 블록의 움직임 벡터를 나타내는 제1영상 움직임 벡터이고,
상기 제2 압축정보는 상기 제2영상 매크로 블록의 움직임 벡터를 나타내는 제2영상 움직임 벡터인,
입체영상 부호화 방법.
- 제29항에 있어서,
상기 제1 압축정보인 상기 제1영상 예측 움직임 벡터의 생성은,
상기 제1영상 매크로 블록과 주변블록들을 이용해서 상기 제1영상 매크로 블록의 예측 움직임 벡터를 나타내는 상기 제1영상 예측 움직임 벡터를 계산하는 단계: 및
상기 제1영상 예측 움직임 벡터를 기반으로 제1영상에서 움직임 탐색을 하여 상기 제1영상 매크로 블록의 최종 움직임 벡터인 상기 제1영상 움직임 벡터를 생성하는 단계를 포함하는,
입체영상 부호화 방법.
- 제29항에 있어서,
상기 제2 압축정보인 상기 제2영상 예측 움직임 벡터의 생성은,
상기 제1영상 움직임 벡터를 상기 제2영상 매크로 블록의 최종 움직임 벡터인 상기 제2영상 움직임 벡터로 결정하는 단계를 포함하는,
입체영상 부호화 방법.
- 제29항에 있어서,
상기 제2 압축정보인 상기 제2영상 예측 움직임 벡터의 생성은,
상기 제1영상 움직임 벡터를 기반으로 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 최종 움직임 벡터인 상기 제2영상 움직임 벡터를 생성하는 단계를 포함하는,
입체영상 부호화 방법.
- 제29항에 있어서,
상기 제2 압축정보인 상기 제2영상 예측 움직임 벡터의 생성은,
상기 제1영상 움직임 벡터를 기반으로 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 후보 움직임 벡터 중 하나인 제2영상 제1 움직임 벡터를 생성하는 단계;
상기 제2영상 매크로 블록과 주변블록들을 이용해서 상기 제2영상 매크로 블록의 예측 움직임 벡터를 나타내는 제2영상 예측 움직임 벡터를 계산하는 단계;
상기 제2영상 예측 움직임 벡터를 기반으로 상기 제2영상에서 움직임 탐색을 하여 상기 제2영상 매크로 블록의 후보 움직임 벡터 중 하나인 제2영상 제2 움직임 벡터를 생성하는 단계; 및
상기 제2영상 제1 움직임 벡터와 상기 제2영상 제2 움직임 벡터를 비교해서 최소의 움직임 비용 함수를 가지는 움직임 벡터를 상기 제2영상 움직임 벡터로 선택하는 단계를 포함하는,
입체영상 부호화 방법.
- 입체영상을 구성하는 영상 중 하나인 부호화된 제1영상 매크로 블록과 제1 압축정보를 수신하는 단계;
상기 제1 압축정보를 이용해서 상기 부호화된 제1영상 매크로 블록을 복호화 하는 단계;
상기 입체 영상을 구성하는 영상 중 다른 하나인 부호화된 제2영상 매크로 블록을 수신하는 단계;
상기 제1 압축정보를 이용해서 제2 압축정보를 생성하는 단계; 및
상기 제2 압축정보를 이용해서 상기 부호화된 제2영상 매크로 블록을 복호하는 단계를 포함하는,
입체영상 복호화 방법.
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020100043812A KR101598855B1 (ko) | 2010-05-11 | 2010-05-11 | 입체영상 부호화 장치 및 방법 |
| EP11155544.7A EP2387244A3 (en) | 2010-05-11 | 2011-02-23 | Apparatus and method of encoding 3D image |
| US13/096,356 US8861874B2 (en) | 2010-05-11 | 2011-04-28 | Apparatus and method of encoding 3D image |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020100043812A KR101598855B1 (ko) | 2010-05-11 | 2010-05-11 | 입체영상 부호화 장치 및 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20110124447A true KR20110124447A (ko) | 2011-11-17 |
| KR101598855B1 KR101598855B1 (ko) | 2016-03-14 |
Family
ID=44358698
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020100043812A KR101598855B1 (ko) | 2010-05-11 | 2010-05-11 | 입체영상 부호화 장치 및 방법 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US8861874B2 (ko) |
| EP (1) | EP2387244A3 (ko) |
| KR (1) | KR101598855B1 (ko) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013100635A1 (ko) * | 2011-12-30 | 2013-07-04 | (주)휴맥스 | 3차원 영상 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
| WO2013101095A1 (en) * | 2011-12-29 | 2013-07-04 | Intel Corporation | Variable depth compression |
| KR101452625B1 (ko) * | 2013-04-01 | 2014-10-24 | 한양대학교 산학협력단 | 3차원 영상의 인트라 예측 방법 및 장치 |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120294366A1 (en) * | 2011-05-17 | 2012-11-22 | Avi Eliyahu | Video pre-encoding analyzing method for multiple bit rate encoding system |
| JP6046246B2 (ja) * | 2012-07-02 | 2016-12-14 | クゥアルコム・インコーポレイテッドＱｕａｌｃｏｍｍ Ｉｎｃｏｒｐｏｒａｔｅｄ | ３ｄビデオコーディングのための深度マップのイントラコーディング |
| CN104704819B (zh) * | 2012-10-03 | 2016-12-21 | 联发科技股份有限公司 | 3d视频编码的视差矢量推导和视图间运动矢量预测的方法及装置 |
| KR20150010230A (ko) * | 2013-07-18 | 2015-01-28 | 삼성전자주식회사 | 단일 필터를 이용하여 대상체의 컬러 영상 및 깊이 영상을 생성하는 방법 및 장치. |
| KR20210133395A (ko) * | 2020-04-29 | 2021-11-08 | 삼성전자주식회사 | 이미지 부호화 장치, 이미지 센싱 장치 및 이미지 부호화 장치의 동작 방법 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20050062835A (ko) * | 2003-12-18 | 2005-06-28 | 학교법인 대양학원 | 움직임 벡터 추정방법 및 부호화 모드 결정방법 |
| KR20090040028A (ko) * | 2007-10-19 | 2009-04-23 | 광주과학기술원 | 비디오 영상의 부호화 모드 결정 방법 및 장치, 이를이용한 비디오 영상의 부호화/복호화 장치 및 방법 그리고상기 방법을 수행하는 프로그램이 기록된 기록 매체 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5767898A (en) * | 1994-06-23 | 1998-06-16 | Sanyo Electric Co., Ltd. | Three-dimensional image coding by merger of left and right images |
| US6055330A (en) | 1996-10-09 | 2000-04-25 | The Trustees Of Columbia University In The City Of New York | Methods and apparatus for performing digital image and video segmentation and compression using 3-D depth information |
| JP3519594B2 (ja) * | 1998-03-03 | 2004-04-19 | Ｋｄｄｉ株式会社 | ステレオ動画像用符号化装置 |
| KR20050061762A (ko) | 2003-12-18 | 2005-06-23 | 학교법인 대양학원 | 부호화 모드 결정방법, 움직임 추정방법 및 부호화 장치 |
| KR100544677B1 (ko) | 2003-12-26 | 2006-01-23 | 한국전자통신연구원 | 다시점 영상 및 깊이 정보를 이용한 3차원 객체 추적 장치및 그 방법 |
| KR100776649B1 (ko) | 2004-12-06 | 2007-11-19 | 한국전자통신연구원 | 깊이 정보 기반 스테레오/다시점 영상 정합 장치 및 방법 |
| KR100918862B1 (ko) | 2007-10-19 | 2009-09-28 | 광주과학기술원 | 참조영상을 이용한 깊이영상 생성방법 및 그 장치, 생성된깊이영상을 부호화/복호화하는 방법 및 이를 위한인코더/디코더, 그리고 상기 방법에 따라 생성되는 영상을기록하는 기록매체 |
| JP2009135686A (ja) * | 2007-11-29 | 2009-06-18 | Mitsubishi Electric Corp | 立体映像記録方法、立体映像記録媒体、立体映像再生方法、立体映像記録装置、立体映像再生装置 |
| KR20100008649A (ko) | 2008-07-16 | 2010-01-26 | 광주과학기술원 | 참조영상을 이용한 깊이영상 생성방법 및 그 장치, 생성된깊이영상을 부호화/복호화하는 방법 및 이를 위한인코더/디코더, 그리고 상기 방법에 따라 생성되는 영상을기록하는 기록매체 |
| EP2348733A4 (en) * | 2008-10-27 | 2012-09-12 | Lg Electronics Inc | METHOD AND APPARATUS FOR THE SYNTHESIS OF VIRTUAL VISUALIZATION IMAGES |
| JP5505154B2 (ja) * | 2010-07-16 | 2014-05-28 | ソニー株式会社 | 画像処理装置と画像処理方法 |
-
2010
- 2010-05-11 KR KR1020100043812A patent/KR101598855B1/ko not_active IP Right Cessation
-
2011
- 2011-02-23 EP EP11155544.7A patent/EP2387244A3/en not_active Withdrawn
- 2011-04-28 US US13/096,356 patent/US8861874B2/en not_active Expired - Fee Related
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20050062835A (ko) * | 2003-12-18 | 2005-06-28 | 학교법인 대양학원 | 움직임 벡터 추정방법 및 부호화 모드 결정방법 |
| KR20090040028A (ko) * | 2007-10-19 | 2009-04-23 | 광주과학기술원 | 비디오 영상의 부호화 모드 결정 방법 및 장치, 이를이용한 비디오 영상의 부호화/복호화 장치 및 방법 그리고상기 방법을 수행하는 프로그램이 기록된 기록 매체 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2013101095A1 (en) * | 2011-12-29 | 2013-07-04 | Intel Corporation | Variable depth compression |
| US9626793B2 (en) | 2011-12-29 | 2017-04-18 | Intel Corporation | Variable depth compression |
| WO2013100635A1 (ko) * | 2011-12-30 | 2013-07-04 | (주)휴맥스 | 3차원 영상 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
| KR101452625B1 (ko) * | 2013-04-01 | 2014-10-24 | 한양대학교 산학협력단 | 3차원 영상의 인트라 예측 방법 및 장치 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP2387244A3 (en) | 2014-05-14 |
| US8861874B2 (en) | 2014-10-14 |
| EP2387244A2 (en) | 2011-11-16 |
| US20110280491A1 (en) | 2011-11-17 |
| KR101598855B1 (ko) | 2016-03-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101158491B1 (ko) | 다시점 영상 부호화, 복호화 방법 및 그 장치. | |
| US9918068B2 (en) | Method and apparatus of texture image compress in 3D video coding | |
| KR101598855B1 (ko) | 입체영상 부호화 장치 및 방법 | |
| US20150172714A1 (en) | METHOD AND APPARATUS of INTER-VIEW SUB-PARTITION PREDICTION in 3D VIDEO CODING | |
| KR101737595B1 (ko) | 화상 부호화 방법, 화상 복호 방법, 화상 부호화 장치, 화상 복호 장치, 화상 부호화 프로그램 및 화상 복호 프로그램 | |
| KR20120009648A (ko) | 깊이영상 부호화를 위한 율-왜곡 최적화 장치 및 방법 | |
| JP5281632B2 (ja) | 多視点画像符号化方法，多視点画像復号方法，多視点画像符号化装置，多視点画像復号装置およびそれらのプログラム | |
| US9031338B2 (en) | Image encoding method and apparatus, image decoding method and apparatus, and programs therefor | |
| WO2012043541A1 (ja) | 予測ベクトル生成方法、画像符号化方法、画像復号方法、予測ベクトル生成装置、画像符号化装置、画像復号装置、予測ベクトル生成プログラム、画像符号化プログラムおよび画像復号プログラム | |
| KR20150047414A (ko) | 비디오 부호화/복호화 방법 및 장치 | |
| US20140348242A1 (en) | Image coding apparatus, image decoding apparatus, and method and program therefor | |
| KR20150034205A (ko) | 화상 부호화 방법, 화상 복호 방법, 화상 부호화 장치, 화상 복호 장치, 화상 부호화 프로그램, 화상 복호 프로그램 및 기록매체 | |
| Conti et al. | Light-field video coding using geometry-based disparity compensation | |
| JP6571646B2 (ja) | マルチビュービデオのデコード方法及び装置 | |
| KR20130044189A (ko) | 다시점 비디오 부호화/복호화 방법 및 그 장치 | |
| Mallik et al. | HEVC based multi-view video codec using frame interleaving technique | |
| CN105122808B (zh) | 三维或多视图视频编码或解码的方法及装置 | |
| KR20110136014A (ko) | 다시점 깊이영상을 부호화/복호화 하는 장치 및 방법 | |
| JP2015128252A (ja) | 予測画像生成方法、予測画像生成装置、予測画像生成プログラム及び記録媒体 | |
| Domański et al. | New coding technology for 3D video with depth maps as proposed for standardization within MPEG | |
| Belbel et al. | Improved inter-view correlations for low complexity MV-HEVC | |
| KR20120084628A (ko) | 다시점 영상 부호화／복호화 장치 및 방법 | |
| KR102020024B1 (ko) | 가상 시점 합성 예측을 이용한 부호화/복호화 장치 및 부호화/복호화 방법 | |
| KR20150010249A (ko) | 제한적인 움직임 정보 유도를 통한 메모리 효율성을 향상시키는 방법 및 장치 | |
| KR20150043164A (ko) | 2d 비디오 기반 3d 비디오 코딩을 위한 병합 움직임 후보 리스트를 구성하는 방법 및 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| LAPS | Lapse due to unpaid annual fee |