KR101452625B1 - 3차원 영상의 인트라 예측 방법 및 장치 - Google Patents

3차원 영상의 인트라 예측 방법 및 장치 Download PDF

Info

Publication number
KR101452625B1
KR101452625B1 KR1020130034969A KR20130034969A KR101452625B1 KR 101452625 B1 KR101452625 B1 KR 101452625B1 KR 1020130034969 A KR1020130034969 A KR 1020130034969A KR 20130034969 A KR20130034969 A KR 20130034969A KR 101452625 B1 KR101452625 B1 KR 101452625B1
Authority
KR
South Korea
Prior art keywords
current block
mode
color image
intra prediction
intra
Prior art date
Application number
KR1020130034969A
Other languages
English (en)
Other versions
KR20140120398A (ko
Inventor
정제창
김기백
정동진
이원진
Original Assignee
한양대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 산학협력단 filed Critical 한양대학교 산학협력단
Priority to KR1020130034969A priority Critical patent/KR101452625B1/ko
Publication of KR20140120398A publication Critical patent/KR20140120398A/ko
Application granted granted Critical
Publication of KR101452625B1 publication Critical patent/KR101452625B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/122Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/15Processing image signals for colour aspects of image signals

Abstract

3차원 영상에 대한 인트라 예측 방법 및 장치가 개시된다. 3차원 영상에 대한 인트라 예측 방법은 제 1 인트라 예측 모드에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계와, 제 2 인트라 예측 모드에 따라 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계를 포함하되, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드는 상호 간의 참조를 통하여 결정된다. 따라서, 컬러 영상 및 깊이 영상의 인트라 예측 모드에 대한 정보를 상호 참조함으로써 기존의 인트라 예측 방법보다 데이터를 줄임과 동시에 화질을 개선할 수 있다.

Description

3차원 영상의 인트라 예측 방법 및 장치{METHOD AND APPARATUS FOR INTRA PREDICTION OF 3D VIDEO}
본 발명은 비디오 부호화 및 복호화에 관한 것으로, 더욱 상세하게는 3차원 영상에 대한 인트라 예측 방법 및 장치에 관한 것이다.
최근 소비자들의 입체 영상 시청에 대한 수요가 점점 늘어나면서 다양한 입체 영상 콘텐츠가 출시되고 있으며, 디스플레이 시장에서도 3차원 디스플레이 장치의 판매량이 증가하고 있다.
이에 맞추어, ITU-T의 VCEG(Video Coding Expert Group) 과 ISO/IEC의 MPEG(Moving Picture Expert Group)이 JVT(Joint Video Team)를 결성하여 H.264/AVC 표준화를 진행하였고, 이후 다시점 영상을 위한 확장 표준인 MVC(Multi-view Video Coding) 표준화를 진행하였다.
한편, 시장에서 요구하는 디스플레이 화면의 해상도가 점점 커지고 있는 상황에서, Full HD 이상의 영상을 부호화하는 방법에 있어 현재 사용되고 있는 부호화 표준보다 더욱 효율적인 부호화 기술이 필요하게 되었다. 이에 따라, ITU-T의 VCEG과 ISO/IEC의 MPEG은 JCT-VC(Joint Collaborative Team on Video Coding)를 결성하여 UHD(Ultra High Definition)와 같은 초고해상도 영상을 효율적으로 부호화하는 새로운 비디오 부호화 표준인 HEVC(High Efficiency Video Coding)의 표준화를 진행하여 완료 단계에 있다.
또한, 입체 영상에 대해서도 고화질 영상에 대한 수요가 증가하고 있기 때문에, H.264/AVC 또는 HEVC에 기반한 새로운 다시점 비디오 부호화 기술이 필요하게 되었다.
그러나, 종래의 다시점 비디오 부호화 기술에 따른 인트라 예측 기법은 현재 부호화하고 있는 텍스쳐 정보와 다른 시점에서의 텍스쳐 정보를 이용하여 인트라 예측을 수행하거나, 현재 부호화하고 있는 깊이 정보와 다른 시점에서의 깊이 정보를 이용하여 인트라 예측을 수행하고 있으나, 복잡도의 증가 및 부호화 효율 저하와 같은 한계가 있는 실정이다.
상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 컬러 영상과 깊이 영상에 대한 인트라 예측 모드를 적응적으로 결정하여 적용하는 3차원 영상에 대한 인트라 예측 방법을 제공하는데 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 다른 목적은, 컬러 영상과 깊이 영상에 대한 인트라 예측 모드를 적응적으로 결정하여 적용하는 3차원 영상에 대한 인트라 예측 장치를 제공하는데 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 또 다른 목적은, 컬러 영상과 깊이 영상에 대한 인트라 예측 모드를 적응적으로 결정하여 3차원 영상을 복호화하는 방법을 제공하는데 있다.
상기 목적을 달성하기 위한 본 발명의 일 측면에 따른 3차원 영상에 대한 인트라 예측 방법은, 제 1 인트라 예측 모드에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계와, 제 2 인트라 예측 모드에 따라 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계를 포함하되, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드는 상호 간의 참조를 통하여 결정된다.
여기에서, 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계는, 컬러 영상의 현재 블록에 상응하여 위치하는 깊이 영상의 현재 블록이 에지를 포함하는 경우, 제 2 인트라 예측 모드에 따라 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행할 수 있다.
여기에서, 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계는, 제 2 인트라 예측 모드를 컬러 영상의 현재 블록에 대한 인트라 예측을 위한 최고 확률 모드(Most Probable Mode)에 추가하여 컬러 영상의 현재 블록에 대한 인트라 예측을 수행할 수 있다.
여기에서, 상기 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계는, 깊이 영상의 현재 블록에 상응하여 위치하는 컬러 영상의 현재 블록에 대한 인트라 예측 모드가 DC 모드 또는 Planar 모드인 경우, 깊이 영상의 현재 블록에 대해 DC 모드 또는 Planar 모드로 인트라 예측을 수행할 수 있다.
여기에서, 상기 3차원 영상에 대한 인트라 예측 방법은, 컬러 영상의 블록에 포함된 에지와 깊이 영상의 블록에 포함된 에지를 비교하여 컬러 영상의 블록에 포함된 에지와 깊이 영상의 블록에 포함된 에지 간의 유사도가 미리 설정된 기준을 만족하는 경우, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드를 동일하게 설정할 수 있다.
여기에서, 상기 3차원 영상에 대한 인트라 예측 방법은, 컬러 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드와 컬러 영상의 현재 블록에 상응하여 위치하는 깊이 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드를 비교하여, 컬러 영상의 현재 블록에 대한 인트라 예측 모드와 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 결정할 수 있다.
여기에서, 상기 3차원 영상에 대한 인트라 예측 방법은, 컬러 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드와 깊이 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드 간의 일치 비율을 산출하고, 일치 비율에 따른 확률에 기반하여 컬러 영상의 현재 블록에 대한 인트라 예측 모드와 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 결정할 수 있다.
상기 목적을 달성하기 위한 본 발명의 다른 측면에 따른 3차원 영상에 대한 인트라 예측 장치는, 제 1 인트라 예측 모드에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 제 1 인트라 예측부와, 제 2 인트라 예측 모드에 따라 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 제 2 인트라 예측부를 포함하되, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드는 상호 간의 참조를 통하여 결정된다.
상기 목적을 달성하기 위한 본 발명의 또 다른 측면에 따른 3차원 영상에 대한 복호화 방법은, 컬러 영상과 깊이 영상을 포함하여 부호화된 비트스트림을 복호화함으로써 컬러 영상의 현재 블록에 대한 제 1 인트라 예측 모드와 깊이 영상의 현재 블록에 대한 제 2 인트라 예측 모드에 대한 정보를 추출하는 단계와, 제 1 인트라 예측 모드에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계와, 제 2 인트라 예측 모드에 따라 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계를 포함하되, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드는 상호 간의 참조를 통하여 결정된다.
여기에서, 상기 컬러 영상의 현재 블록에 대한 제 1 인트라 예측 모드와 상기 깊이 영상의 현재 블록에 대한 제 2 인트라 예측 모드에 대한 정보를 추출하는 단계는, 컬러 영상의 현재 블록에 대한 제 1 인트라 예측 모드와 깊이 영상의 현재 블록에 대한 제 2 인트라 예측 모드 간의 참조 여부를 플래그(flag)에 기반하여 확인할 수 있다.
상기와 같은 본 발명에 따른 3차원 영상의 인트라 예측 방법 및 장치는 컬러 영상 및 깊이 영상으로 구성되는 3차원 영상에 대한 인트라 예측에 있어서, 컬러 영상 및 깊이 영상의 인트라 예측 모드에 대한 정보를 상호 참조함으로써 기존의 인트라 예측 방법보다 데이터를 줄일 수 있다.
또한, 컬러 영상 및 깊이 영상의 인트라 예측 모드에 대한 정보를 상호 참조함으로써 정확한 인트라 예측을 수행하여 화질을 개선할 수 있다.
도 1은 HEVC 표준에 따른 인트라 예측 모드를 설명하는 개념도이다.
도 2는 컬러 영상과 깊이 영상의 영상 특성을 설명하기 위한 예시도이다.
도 3은 본 발명의 일 실시예에 따른 3차원 영상의 인트라 예측 방법을 설명하기 위한 흐름도이다.
도 4는 본 발명의 실시예에 따라 최고 확률 모드를 결정하는 방법을 설명하기 위한 예시도이다.
도 5는 본 발명의 다른 실시예에 따른 3차원 영상의 인트라 예측 방법을 설명하기 위한 흐름도이다.
도 6은 본 발명의 실시예에 따른 컬러 영상과 깊이 영상의 에지를 비교 설명하기 위한 예시도이다.
도 7은 본 발명의 실시예에 따른 컬러 영상의 블록과 깊이 영상의 블록의 인트라 예측 모드를 비교 설명하기 위한 예시도이다.
도 8은 본 발명의 실시예에 따른 3차원 영상의 인트라 예측 장치의 구성을 나타내는 블록도이다.
도 9는 본 발명의 실시예에 따른 3차원 영상에 대한 복호화 방법을 설명하기 위한 흐름도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하에서 후술할 영상 부호화 장치(Video Encoding Apparatus), 영상 복호화 장치(Video Decoding Apparatus)는 개인용 컴퓨터(PC: Personal Computer), 노트북 컴퓨터, 개인 휴대 단말기(PDA: Personal Digital Assistant), 휴대형 멀티미디어 플레이어(PMP: Portable Multimedia Player), 플레이스테이션 포터블(PSP: PlayStation Portable), 무선 통신 단말기(Wireless Communication Terminal), 스마트폰(Smart Phone), TV 응용 서버와 서비스 서버 등 서버 단말기일 수 있으며, 각종 기기 또 등과 같은 사용자 단말기이거나 유무선 통신망과 통신을 수행하기 위한 통신 모뎀 등의 통신 장치, 영상을 부호화하거나 복호화하거나 부호화 또는 복호화를 위해 화면 간 또는 인트라 예측하기 위한 각종 프로그램과 데이터를 저장하기 위한 메모리, 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하는 다양한 장치를 의미할 수 있다.
또한, 영상 부호화 장치에 의해 비트스트림으로 부호화된 영상은 실시간 또는 비실시간으로 인터넷, 근거리 무선 통신망, 무선랜망, 와이브로망, 이동통신망 등의 유무선 통신망 등을 통하거나 케이블, 범용 직렬 버스(USB: Universal Serial Bus) 등과 같은 다양한 통신 인터페이스를 통해 영상 복호화 장치로 전송되어 영상 복호화 장치에서 복호화되어 영상으로 복원되고 재생될 수 있다.
통상적으로 동영상은 일련의 픽처(Picture)로 구성될 수 있으며, 각 픽처들은 블록(Block)과 같은 소정의 영역으로 분할될 수 있다. 영상의 영역이 블록으로 분할되는 경우에는 분할된 블록은 부호화 방법에 따라 크게 인트라 블록(Intra Block), 인터 블록(Inter Block)으로 분류될 수 있다. 인트라 블록은 화면내 예측 부호화(Intra Prediction Coding) 방식을 사용하여 부호화되는 블록을 뜻하는데, 화면내 예측 부호화란 현재 부호화를 수행하는 현재 픽처 내에서 이전에 부호화되고 복호화되어 복원된 블록들의 화소를 이용하여 현재 블록의 화소를 예측함으로써 예측 블록을 생성하고 현재 블록의 화소와의 차분값을 부호화하는 방식이다. 인터 블록은 인터 예측 부호화(Inter Prediction Coding)를 사용하여 부호화되는 블록을 뜻하는데, 인터 예측 부호화란 하나 이상의 과거 픽처 또는 미래 픽처를 참조하여 현재 픽처 내의 현재 블록을 예측함으로써 예측 블록을 생성하고 현재 블록과의 차분값을 부호화하는 방식이다. 여기서, 현재 픽처를 부호화하거나 복호화하는데 참조되는 프레임을 참조 프레임(Reference Frame)이라고 한다. 또한, 이하에 기재된 "픽처(picture)"이라는 용어는 영상(image), 프레임(frame) 등과 같은 동등한 의미를 갖는 다른 용어로 대치되어 사용될 수 있음을 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 이해할 수 있다.
한편, HEVC는 쿼드트리(quadtree) 구조를 가진 코딩 유닛(CU: Coding Unit), 예측 유닛(PU: Prediction Unit), 변환 유닛(TU: Transform Unit)을 정의하고 있으며, 샘플 적응적 오프셋(SAO: Sample Adaptive Offset), 디블록킹 필터(Deblocking filter)와 같은 추가적인 인루프 필터를 적용하고 있다. 또한, 기존의 인트라 예측(intra prediction) 및 인터 예측(inter prediction)을 개선하여 압축 부호화 효율을 향상시키고 있다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 HEVC 표준에 따른 인트라 예측 모드를 설명하는 개념도이다.
도 1을 참조하면, HEVC 표준은 35개의 인트라 예측 모드를 제공한다. 예측 모드의 개수가 증가함에 따라 모드 정보를 전송하기 위한 오버헤드 비트가 늘어나지만, 다양한 예측 모드를 사용함으로써 더욱 정확한 예측을 수행하여 예측 오류를 줄일 수 있다.
0번 모드는 Planar 모드, 1번 모드는 DC 모드, 2번 내지 34번 모드는 방향성 모드(angular mode)를 나타낸다. 각각의 인트라 예측 모드를 간략히 설명하면 다음과 같다.
Planar 모드는 시각적으로 부드러운 영상을 효율적으로 부호화하도록 설계된 방법으로, 화소값이 점진적으로 변화하는 영역을 예측하는데 효율적이고, DC 모드는 현재 예측 블록의 주변 화소들의 평균값을 예측값으로 사용한다.
또한, Angular mode는 수직, 수평 방향을 포함해 총 33개의 방향성에 기반하여 예측을 수행한다. 수직 모드(Vertical mode) 또는 수평 모드(Horizontal mode)는 수직 또는 수평 방향으로 주변 화소값을 복사하여 예측값으로 사용한다. 한편, 수직 및 수평 모드 이외의 방향성 예측 모드는 45도를 32개로 구획한 방향으로 인트라 예측을 수행하며, 원심(10)을 기준으로 동일한 각도로 나뉘기 때문에 각 예측 방향에 따른 화소는 등간격이 아니므로 선형 보간을 통하여 예측값을 생성한다.
도 2는 컬러 영상과 깊이 영상의 영상 특성을 설명하기 위한 예시도이다.
도 2을 참조하면, 좌측 영상은 컬러 영상을 나타내고, 우측 영상은 깊이 영상을 나타낸다.
일반적으로 스테레오 영상이나 다시점 영상에서는 영상 간의 중복성을 이용한 부호화 방법이 널리 알려져 있다.
깊이 영상은 컬러 영상과 달리 텍스쳐 정보가 아닌 객체의 깊이 정보와 윤곽선 정보를 가지고 있다. 그러나, 컬러 영상과 깊이 영상은 나타내는 정보의 본질을 달리하지만 동일한 시간에 동일한 장면을 촬영한 것이기 때문에 이들 영상 간에는 유사성이 존재한다.
도 2를 보면, 컬러 영상에 있는 사람의 영상이 깊이 영상에서 그레이 레벨로 표현되고 있다. 또한, 컬러 영상에 있는 사람의 윤곽이 깊이 영상에서 에지 정보로 표현되고 있다.
따라서, 컬러 영상과 깊이 영상 간의 유사성에 기반하여 3차원 영상에 대한 인트라 예측을 수행할 수 있으며, 이를 통하여 예측의 정확도를 높이고 복잡도를 감소시킬 수 있다.
도 3은 본 발명의 일 실시예에 따른 3차원 영상의 인트라 예측 방법을 설명하기 위한 흐름도이다.
도 3을 참조하면, 컬러 영상의 현재 블록에 상응하는 깊이 영상의 현재 블록을 탐색하고(S310), 탐색된 깊이 영상의 현재 블록이 에지를 포함하는지 확인할 수 있다(S320).
여기서, 컬러 영상의 현재 블록은 컬러 영상에 있어서 현재 부호화 또는 복호화의 대상이 되는 블록을 의미하고, 깊이 영상의 현재 블록은 깊이 영상에 있어서 현재 부호화 또는 복호화의 대상이 되는 블록을 의미할 수 있다. 또한, 컬러 영상의 현재 블록과 깊이 영상의 현재 블록은 동일한 시간에 동일한 시점(view point)에서 획득된 영상에 있어서, 동일한 위치에 존재하는 블록을 의미할 수 있다.
따라서, 컬러 영상의 현재 블록은 깊이 영상의 현재 블록에 상응하여 위치하거나, 깊이 영상의 현재 블록은 컬러 영상의 현재 블록에 상응하여 위치할 수 있다.
탐색된 깊이 영상의 현재 블록이 에지를 포함하는 경우에는 깊이 영상의 현재 블록의 인트라 예측 모드에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행할 수 있다(S330). 한편, 탐색된 깊이 영상의 현재 블록이 에지를 포함하지 않는 경우에는 기존의 방식에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행할 수 있다(S340).
예를 들어, 본 발명의 실시예에 따르면 먼저 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 결정하고, 컬러 영상의 현재 블록에 대한 인트라 예측 모드를 결정할 수 있다.
즉, 컬러 영상의 현재 블록에 대한 인트라 예측 모드를 결정하는데 있어서, 컬러 영상의 현재 블록에 상응하여 위치한 깊이 영상의 현재 블록의 인트라 예측 모드를 참조할 수 있다.
먼저, 컬러 영상의 현재 블록에 상응하여 위치하는 깊이 영상의 현재 블록을 탐색할 수 있다(S310). 컬러 영상과 깊이 영상은 동일한 시간에 동일한 시점(view point)에서 획득된 영상이므로, 컬러 영상과 깊이 영상의 각각을 구획한 블록 단위 들 간에 매칭(matching) 관계가 성립될 수 있다.
다음으로, 탐색된 깊이 영상의 현재 블록이 에지를 포함하는지 확인할 수 있다(S320). 예를 들어, sobel, canny detection 등을 이용하여 깊이 영상의 현재 블록에서 에지를 검출할 수 있다.
따라서, 컬러 영상의 현재 블록에 상응하여 위치하는 깊이 영상의 현재 블록이 에지를 포함하고 있는지 여부에 따라 깊이 영상의 현재 블록의 인트라 예측 모드를 참조할지 결정할 수 있다.
탐색된 깊이 영상의 현재 블록이 에지를 포함하는 경우에는 깊이 영상의 현재 블록의 인트라 예측 모드에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행할 수 있다(S330). 즉, 컬러 영상의 현재 블록에 상응하여 위치하는 깊이 영상의 현재 블록이 에지를 포함하고 있는 경우, 컬러 영상의 현재 블록의 인트라 예측 모드를 깊이 영상의 현재 블록과 동일하게 설정할 수 있다.
또한, 탐색된 깊이 영상의 현재 블록이 에지를 포함하지 않는 경우에는 기존의 방식에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행할 수 있다(S340). 다시 말해, 탐색된 깊이 영상의 현재 블록이 에지를 포함하지 않는 경우에는, 컬러 영상의 현재 블록에 대한 인트라 예측에 있어, 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 참조하지 않을 수 있다.
도 4는 본 발명의 실시예에 따라 최고 확률 모드를 결정하는 방법을 설명하기 위한 예시도이다.
도 4를 참조하면, 현재 부호화 대상 블록의 인트라 예측에 있어서, 현재 부호화 대상 블록에 대한 주변 블록들의 인트라 예측 모드를 이용할 수 있는데, 이렇게 예측한 인트라 예측 모드에 대한 정보를 최고 확률 모드(Most Probable Mode: MPM)라고 한다.
H.264/AVC에서는 한 개의 MPM을 예측하여 인트라 예측을 수행하였으나, HEVC에서는 총 세 개의 MPM을 예측하여 인트라 예측을 수행할 수 있다.
도 4는 HEVC에 기반하여 MPM을 결정하는 본 발명의 실시예를 나타낸다. 도 4에 따르면, 현재 부호화 대상 블록의 좌측 블록과 우측 블록을 주변 블록으로 하여 MPM을 결정할 수 있다.
특히, 본 발명의 실시예에 따르면, 컬러 영상에 대한 인트라 예측에 있어서, 깊이 영상에 대한 인트라 예측 모드를 컬러 영상에 대한 인트라 예측을 위한 MPM에 추가할 수 있다.
예를 들어, 컬러 영상에 대한 인트라 예측에 있어서, 도 4의 맨 아래의 세 개의 블록에서 두 번째 블록(42)과 세 번째 블록(43)에 깊이 영상에 대한 인트라 예측 모드가 추가된 것을 알 수 있다.
즉, 본 발명의 실시예에 따르면, 깊이 영상에 대한 인트라 예측 모드를 컬러 영상에 대한 인트라 예측을 위한 MPM에 추가하여 컬러 영상에 대한 인트라 예측을 수행할 수 있다.
도 4에서는 깊이 영상에 대한 인트라 예측 모드를 두 번째 블록(42)과 세 번째 블록(43)에 추가한 것을 나타내었으나, 깊이 영상에 대한 인트라 예측 모드를 첫 번째 블록(41)에만 추가할 수도 있다. 또한, 깊이 영상에 대한 인트라 예측 모드를 첫 번째 블록(41), 두 번째 블록(42) 및 세 번째 블록(43) 모두에 추가할 수도 있다.
따라서, 본 발명의 실시예는 깊이 영상에 대한 인트라 예측 모드를 두 번째 블록(42)과 세 번째 블록(43)에 추가한 것에 한정되지 않는다.
또한, 깊이 영상에 대한 인트라 예측에 있어서, 컬러 영상에 대한 인트라 예측 모드를 깊이 영상에 대한 인트라 예측을 위한 MPM에 적응적으로 추가할 수 있음은 물론이다.
도 5는 본 발명의 다른 실시예에 따른 3차원 영상의 인트라 예측 방법을 설명하기 위한 흐름도이다.
도 5를 참조하면, 본 발명의 실시예에 따르면, 깊이 영상의 현재 블록에 상응하는 컬러 영상의 현재 블록을 탐색하고(S510), 탐색된 컬러 영상의 현재 블록의 인트라 예측 모드가 DC 모드 또는 Planar 모드(non angular mode)인가를 확인할 수 있다(S520).
탐색된 컬러 영상의 현재 블록의 인트라 예측 모드가 DC 모드 또는 Planar 모드인 경우에는 깊이 영상의 현재 블록에 대해 DC 모드 또는 Planar 모드로 인트라 예측을 수행할 수 있다(S530).
한편, 탐색된 컬러 영상의 현재 블록의 인트라 예측 모드가 DC 모드 또는 Planar 모드가 아닌 경우에는 기존의 방식에 따라 깊이 영상의 현재 블록에 대한 인트라 예측을 수행할 수 있다(S540).
예를 들어, 본 발명의 실시예에 따르면 먼저 컬러 영상의 현재 블록에 대한 인트라 예측 모드를 결정하고, 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 결정할 수 있다.
즉, 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 결정하는데 있어서, 깊이 영상의 현재 블록에 상응하여 위치하는 컬러 영상의 현재 블록의 인트라 예측 모드를 참조할 수 있다.
먼저, 깊이 영상의 현재 블록에 상응하여 위치하는 컬러 영상의 현재 블록을 탐색할 수 있다(S510). 컬러 영상과 깊이 영상은 동일한 시간에 동일한 시점(view point)에서 획득된 영상이므로, 컬러 영상과 깊이 영상의 각각을 구획한 블록 단위 들 간에 매칭(matching) 관계가 설정될 수 있다.
다음으로, 탐색된 컬러 영상의 현재 블록의 인트라 예측 모드가 DC 모드 또는 Planar 모드 인가를 확인할 수 있다(S520). 일반적으로, 컬러 영상에서 배경은 보통 평탄한 영역이나 복잡한 영역으로 표현되고, 이러한 평탄한 영역 또는 복잡한 영역은 DC 모드 또는 Planar 모드로 인트라 예측이 수행될 수 있다.
따라서, 깊이 영상의 현재 블록에 상응하여 위치하는 컬러 영상의 현재 블록이 평탄한 영역 또는 복잡한 영역인지에 따라 컬러 영상의 현재 블록의 인트라 예측 모드를 참조할지 결정할 수 있다.
깊이 영상의 현재 블록에 상응하여 위치하는 컬러 영상의 현재 블록의 인트라 예측 모드가 DC 모드 또는 Planar 모드인 경우, 깊이 영상의 현재 블록의 인트라 예측 모드를 컬러 영상의 현재 블록과 동일하게 설정할 수 있다.
또한, 탐색된 컬러 영상의 현재 블록의 인트라 예측 모드가 DC 모드 또는 Planar 모드가 아닌 경우에는, 깊이 영상의 현재 블록에 대한 인트라 예측에 있어, 컬러 영상의 현재 블록에 대한 인트라 예측 모드를 참조하지 않을 수 있다.
도 6은 본 발명의 실시예에 따른 컬러 영상과 깊이 영상의 에지를 비교 설명하기 위한 예시도이다.
도 2 및 도 6을 참조하면, 컬러 영상과 깊이 영상의 사람의 윤곽선을 살펴보면, 외형부분은 거의 비슷한 선으로 그려지는 것을 알 수가 있다.
이와 같이 객체와 배경에 의해서 생기는 에지나 객체와 객체에 의해서 생기는 에지 부분은 컬러 영상과 깊이 영상에서 거의 같은 인트라 예측 모드로 예측할 수 있다.
도 6은 도 2의 사람의 윤곽선에서 손을 내밀고 있는 부분을 확대한 것이다. 도 6을 참조하면, 왼쪽의 컬러 영상의 블록(60)과 오른쪽의 깊이 영상의 블록(65)에 나타난 에지의 외곽선이 같은 형태를 이루는 것을 알 수 있다.
즉, 왼쪽의 컬러 영상의 블록(60)과 오른쪽의 깊이 영상의 블록(65)에서 에지는 불연속으로 끊어져 있는 것이 아니라, 연속적으로 여러 블록에서 걸쳐서 나타날 수 있다.
따라서, 본 발명의 실시예에 따르면, 컬러 영상의 블록(60)에 포함된 에지와 깊이 영상의 블록(65)에 포함된 에지를 비교하여 컬러 영상의 블록(60)에 포함된 에지와 깊이 영상의 블록(65)에 포함된 에지 간의 유사도가 미리 설정된 기준을 만족하는 경우, 컬러 영상의 현재 블록에 대한 인트라 예측 모드와 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 동일하게 설정할 수 있다.
여기서, 컬러 영상의 블록(60)은 컬러 영상의 현재 블록을 포함할 수 있고, 깊이 영상의 블록(65)은 깊이 영상의 현재 블록을 포함할 수 있으며, 그 크기에 있어서는 특별히 한정하지 않는다.
도 7은 본 발명의 실시예에 따른 컬러 영상의 블록과 깊이 영상의 블록의 인트라 예측 모드를 비교 설명하기 위한 예시도이다.
도 7을 참조하면, 컬러 영상의 현재 블록(70)에 이웃한 블록들의 인트라 예측 모드와 컬러 영상의 현재 블록(70)에 상응하여 위치하는 깊이 영상의 현재 블록(75)에 이웃한 블록들의 인트라 예측 모드를 비교하여, 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 대한 인트라 예측 모드를 결정할 수 있다.
상세하게는, 컬러 영상의 현재 블록(70)에 이웃한 블록들의 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 이웃한 블록들의 인트라 예측 모드 간의 일치 비율을 산출하고, 일치 비율에 따른 확률에 기반하여 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 대한 인트라 예측 모드를 결정할 수 있다.
예를 들어, 도 7은 컬러 영상의 현재 블록(70)과 컬러 영상의 현재 블록(70)에 상응하여 위치하는 깊이 영상의 현재 블록(75)을 나타내고, 컬러 영상의 현재 블록(70)의 주변 블록들과 깊이 영상의 현재 블록(75)의 주변 블록들을 나타낸다.
컬러 영상의 현재 블록(70)의 주변 블록들은 3번 모드, DC 모드, 5번 모드, 2번 모드와 같은 인트라 예측 모드를 갖고, 깊이 영상의 현재 블록(75)의 주변 블록들은 3번 모드, DC 모드, 5번 모드, 4번 모드와 같은 인트라 예측 모드를 가질 수 있다.
컬러 영상의 현재 블록(70)의 우측 상단에 있는 주변 블록의 인트라 예측 모드는 깊이 영상의 현재 블록(75)의 우측 상단에 있는 주변 블록의 인트라 예측 모드와 다르며, 나머지 주변 블록들은 인트라 예측 모드가 동일하다. 즉, 컬러 영상의 현재 블록(70)의 주변 블록들의 인트라 예측 모드와 깊이 영상의 현재 블록(75)의 주변 블록들의 인트라 예측 모드의 일치 비율이 75%이며, 이러한 일치 비율에 기반하여 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 대한 인트라 예측 모드를 결정할 수 있다.
결론적으로, 본 발명의 실시예에 따른 3차원 영상에 대한 인트라 예측 방법은, 제 1 인트라 예측 모드에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계와, 제 2 인트라 예측 모드에 따라 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계를 포함하되, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드는 상호 간의 참조를 통하여 결정될 수 있다.
본 발명의 실시예에 따르면, 제 1 인트라 예측 모드를 먼저 결정한 후에 제 1 인트라 예측 모드를 참조하여 제 2 인트라 예측 모드를 결정할 수 있다. 또한, 제 2 인트라 예측 모드를 먼저 결정한 후에 제 2 인트라 예측 모드를 참조하여 제 1 인트라 예측 모드를 결정할 수 있다. 더 나아가, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드에 대한 정보를 상호 교환하여 제 1 인트라 예측 모드와 제 2 인트라 예측 모드를 동시에 결정하는 것도 가능하다.
도 8은 본 발명의 실시예에 따른 3차원 영상의 인트라 예측 장치의 구성을 나타내는 블록도이다.
도 8를 참조하면, 본 발명의 실시예에 따른 3차원 영상의 인트라 예측 장치(800)는 제 1 인트라 예측부(810)와 제 2 인트라 예측부(820)를 포함한다.
제 1 인트라 예측부(810)는 컬러 영상을 수신하여 인트라 예측을 수행하고, 제 2 인트라 예측부(820)는 깊이 영상을 수신하여 인트라 예측을 수행할 수 있다.
특히, 본 발명의 실시예에 따르면, 제 1 인트라 예측부(810)는 컬러 영상의 인트라 예측 모드에 대한 정보를 제 2 인트라 예측부(820)와 공유할 수 있으며, 제 2 인트라 예측부(810)는 깊이 영상의 인트라 예측 모드에 대한 정보를 제 1 인트라 예측부(820)와 공유할 수 있다.
제 1 인트라 예측부(810)는 제 1 인트라 예측 모드에 따라 컬러 영상의 현재 블록(70)에 대한 인트라 예측을 수행할 수 있다.
제 1 인트라 예측부(810)는 컬러 영상의 현재 블록(70)에 상응하여 위치하는 깊이 영상의 현재 블록(75)이 에지를 포함하는 경우, 제 2 인트라 예측 모드에 따라 컬러 영상의 현재 블록(70)에 대한 인트라 예측을 수행할 수 있다.
또한, 제 1 인트라 예측부(810)는 제 2 인트라 예측 모드를 컬러 영상의 현재 블록(70)에 대한 인트라 예측을 위한 최고 확률 모드(Most Probable Mode)에 추가하여 컬러 영상의 현재 블록(70)에 대한 인트라 예측을 수행할 수 있다.
제 2 인트라 예측부(820)는 제 2 인트라 예측 모드에 따라 깊이 영상의 현재 블록(75)에 대한 인트라 예측을 수행할 수 있다.
또한, 제 2 인트라 예측부(820)는 깊이 영상의 현재 블록(75)에 상응하여 위치하는 컬러 영상의 현재 블록(70)의 인트라 예측 모드가 DC 모드 또는 Planar 모드인 경우, 깊이 영상의 현재 블록(75)에 대해 DC 모드 또는 Planar 모드로 인트라 예측을 수행할 수 있다.
더 나아가, 제 1 인트라 예측부(810)와 제 2 인트라 예측부(820)는 컬러 영상의 블록(60)에 포함된 에지와 깊이 영상의 블록(65)에 포함된 에지를 비교하여 컬러 영상의 블록(60)에 포함된 에지와 깊이 영상의 블록(65)에 포함된 에지 간의 유사도가 미리 설정된 기준을 만족하는 경우, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드를 동일하게 설정할 수 있다.
또한, 제 1 인트라 예측부(810)와 제 2 인트라 예측부(820)는 컬러 영상의 현재 블록(70)에 이웃한 블록들의 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 이웃한 블록들의 인트라 예측 모드를 비교하여, 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 대한 인트라 예측 모드를 결정할 수 있다.
예를 들어, 컬러 영상의 현재 블록(70)에 이웃한 블록들의 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 이웃한 블록들의 인트라 예측 모드 간의 일치 비율을 산출하고, 일치 비율에 따른 확률에 기반하여 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 대한 인트라 예측 모드를 결정할 수 있다.
제 1 인트라 예측부(810)와 제 2 인트라 예측부(820)를 포함하여 구성된 3차원 영상의 인트라 예측 장치(800)는, 상술한 3차원 영상의 인트라 예측 방법에 대한 도 1 내지 도 7의 설명을 참조하여 더욱 명확히 이해될 수 있다.
또한, 3차원 영상의 인트라 예측 장치(800)는 3차원 영상에 대한 부호화 및 복호화 장치에 포함되어 컬러 영상 및 깊이 영상에 대한 인트라 예측을 수행할 수 있다.
도 9는 본 발명의 실시예에 따른 3차원 영상에 대한 복호화 방법을 설명하기 위한 흐름도이다.
도 9를 참조하면, 3차원 영상에 대한 복호화 방법은, 비트스트림을 복호화하여 인트라 예측 모드에 대한 정보를 추출하는 단계(S910)와, 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계(S920)와, 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계(S930)를 포함한다.
특히, 본 발명의 실시예에 따르면, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드는 상호 간의 참조를 통하여 결정될 수 있다.
컬러 영상과 깊이 영상을 포함하여 부호화된 비트스트림을 복호화함으로써, 컬러 영상의 현재 블록(70)에 대한 제 1 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 대한 제 2 인트라 예측 모드에 대한 정보를 추출할 수 있다(S910).
컬러 영상의 현재 블록(70)에 대한 제 1 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 대한 제 2 인트라 예측 모드 간의 참조 여부를 플래그(flag)에 기반하여 확인할 수 있다.
예를 들어, 플래그가 1인 경우 제 1 인트라 예측 모드와 제 2 인트라 예측 모드가 상호 간의 참조를 통하여 결정된 것을 의미할 수 있고, 플래그가 0인 경우 제 1 인트라 예측 모드와 제 2 인트라 예측 모드 각각이 독립적으로 결정되는 것을 의미할 수 있다.
제 1 인트라 예측 모드에 따라 컬러 영상의 현재 블록(70)에 대한 인트라 예측을 수행할 수 있다(S910).
먼저, 깊이 영상의 현재 블록(75)에 대한 인트라 예측 모드를 결정하고 난 후에, 컬러 영상의 현재 블록(70)의 인트라 예측 모드를 결정한 경우를 설명하면 다음과 같다.
컬러 영상의 현재 블록(70)에 상응하여 위치하는 깊이 영상의 현재 블록(75)이 에지를 포함하는 경우, 제 2 인트라 예측 모드에 따라 컬러 영상의 현재 블록(70)에 대한 인트라 예측을 수행할 수 있다.
또한, 제 2 인트라 예측 모드를 컬러 영상의 현재 블록(70)에 대한 인트라 예측을 위한 최고 확률 모드(Most Probable Mode)에 추가하여 컬러 영상의 현재 블록(70)에 대한 인트라 예측을 수행할 수 있다.
다음으로, 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드를 결정하고 난 후에, 깊이 영상의 현재 블록(75)의 인트라 예측 모드를 결정한 경우를 설명하면 다음과 같다.
깊이 영상의 현재 블록(75)에 상응하여 위치하는 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드가 DC 모드 또는 Planar 모드인 경우, 깊이 영상의 현재 블록(75)에 대해 DC 모드 또는 Planar 모드로 인트라 예측을 수행할 수 있다.
마지막으로, 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드와 깊이 영상의 현재 블록(75)의 인트라 예측 모드 간에 상호 참조를 통하여 인트라 예측 모드를 결정하는 경우를 설명하면 다음과 같다.
컬러 영상의 블록에 포함된 에지와 깊이 영상의 블록에 포함된 에지를 비교하여 컬러 영상의 블록에 포함된 에지와 깊이 영상의 블록에 포함된 에지 간의 유사도가 미리 설정된 기준을 만족하는 경우, 제 1 인트라 예측 모드와 제 2 인트라 예측 모드를 동일하게 설정할 수 있다.
또한, 컬러 영상의 현재 블록(70)에 이웃한 블록들의 인트라 예측 모드와 컬러 영상의 현재 블록(70)에 상응하여 위치하는 깊이 영상의 현재 블록(75)에 이웃한 블록들의 인트라 예측 모드를 비교하여, 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 대한 인트라 예측 모드를 결정할 수 있다.
예를 들어, 컬러 영상의 현재 블록(70)에 이웃한 블록들의 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 이웃한 블록들의 인트라 예측 모드 간의 일치 비율을 산출하고, 일치 비율에 따른 확률에 기반하여 컬러 영상의 현재 블록(70)에 대한 인트라 예측 모드와 깊이 영상의 현재 블록(75)에 대한 인트라 예측 모드를 결정할 수 있다.
상술한 본 발명의 실시예에 따른 3차원 영상의 인트라 예측 방법 및 장치는 컬러 영상 및 깊이 영상으로 구성되는 3차원 영상에 대한 인트라 예측에 있어서, 컬러 영상 및 깊이 영상의 인트라 예측 모드에 대한 정보를 상호 참조함으로써 기존의 인트라 예측 방법보다 데이터를 줄임과 동시에 화질을 개선할 수 있다.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
800: 인트라 예측 장치 810: 제 1 인트라 예측부
820: 제 2 인트라 예측부

Claims (15)

  1. 제 1 인트라 예측 모드에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계; 및
    제 2 인트라 예측 모드에 따라 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계를 포함하되,
    상기 제 1 인트라 예측 모드와 상기 제 2 인트라 예측 모드는 상호 간의 참조를 통하여 결정되고,
    상기 제 2 인트라 예측 모드를 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 위한 최고 확률 모드(Most Probable Mode)에 추가하여 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 3차원 영상에 대한 인트라 예측 방법.
  2. 청구항 1에 있어서,
    상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계는,
    상기 컬러 영상의 현재 블록에 상응하여 위치하는 상기 깊이 영상의 현재 블록이 에지를 포함하는 경우,
    상기 제 2 인트라 예측 모드에 따라 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 방법.
  3. 삭제
  4. 청구항 1에 있어서,
    상기 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계는,
    상기 깊이 영상의 현재 블록에 상응하여 위치하는 상기 컬러 영상의 현재 블록에 대한 인트라 예측 모드가 DC 모드 또는 Planar 모드인 경우,
    상기 깊이 영상의 현재 블록에 대해 DC 모드 또는 Planar 모드로 인트라 예측을 수행하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 방법.
  5. 청구항 1에 있어서,
    컬러 영상의 블록에 포함된 에지와 깊이 영상의 블록에 포함된 에지를 비교하여 상기 컬러 영상의 블록에 포함된 에지와 상기 깊이 영상의 블록에 포함된 에지 간의 유사도가 미리 설정된 기준을 만족하는 경우,
    상기 제 1 인트라 예측 모드와 상기 제 2 인트라 예측 모드를 동일하게 설정하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 방법.
  6. 청구항 1에 있어서,
    상기 컬러 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드와 상기 컬러 영상의 현재 블록에 상응하여 위치하는 상기 깊이 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드를 비교하여,
    상기 컬러 영상의 현재 블록에 대한 인트라 예측 모드와 상기 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 결정하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 방법.
  7. 청구항 6에 있어서,
    상기 컬러 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드와 상기 깊이 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드 간의 일치 비율을 산출하고,
    상기 일치 비율에 따른 확률에 기반하여 상기 컬러 영상의 현재 블록에 대한 인트라 예측 모드와 상기 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 결정하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 방법.
  8. 제 1 인트라 예측 모드에 따라 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 제 1 인트라 예측부; 및
    제 2 인트라 예측 모드에 따라 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 제 2 인트라 예측부를 포함하되,
    상기 제 1 인트라 예측 모드와 상기 제 2 인트라 예측 모드는 상호 간의 참조를 통하여 결정되고,
    상기 제 1 인트라 예측부는,
    상기 제 2 인트라 예측 모드를 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 위한 최고 확률 모드(Most Probable Mode)에 추가하여 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 3차원 영상에 대한 인트라 예측 장치.
  9. 청구항 8에 있어서,
    상기 제 1 인트라 예측부는,
    상기 컬러 영상의 현재 블록에 상응하여 위치하는 상기 깊이 영상의 현재 블록이 에지를 포함하는 경우,
    상기 제 2 인트라 예측 모드에 따라 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 장치.
  10. 삭제
  11. 청구항 8에 있어서,
    상기 제 2 인트라 예측부는,
    상기 깊이 영상의 현재 블록에 상응하여 위치하는 상기 컬러 영상의 현재 블록의 인트라 예측 모드가 DC 모드 또는 Planar 모드인 경우,
    상기 깊이 영상의 현재 블록에 대해 DC 모드 또는 Planar 모드로 인트라 예측을 수행하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 장치.
  12. 청구항 8에 있어서,
    컬러 영상의 블록에 포함된 에지와 깊이 영상의 블록에 포함된 에지를 비교하여 상기 컬러 영상의 블록에 포함된 에지와 상기 깊이 영상의 블록에 포함된 에지 간의 유사도가 미리 설정된 기준을 만족하는 경우,
    상기 제 1 인트라 예측 모드와 상기 제 2 인트라 예측 모드를 동일하게 설정하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 장치.
  13. 청구항 8에 있어서,
    상기 컬러 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드와 상기 깊이 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드를 비교하여,
    상기 컬러 영상의 현재 블록에 대한 인트라 예측 모드와 상기 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 결정하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 장치.
  14. 청구항 13에 있어서,
    상기 컬러 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드와 상기 깊이 영상의 현재 블록에 이웃한 블록들의 인트라 예측 모드 간의 일치 비율을 산출하고,
    상기 일치 비율에 따른 확률에 기반하여 상기 컬러 영상의 현재 블록에 대한 인트라 예측 모드와 상기 깊이 영상의 현재 블록에 대한 인트라 예측 모드를 결정하는 것을 특징으로 하는 3차원 영상에 대한 인트라 예측 장치.
  15. 3차원 영상의 복호화에 있어서,
    컬러 영상과 깊이 영상을 포함하여 부호화된 비트스트림을 복호화함으로써, 상기 컬러 영상의 현재 블록에 대한 제 1 인트라 예측 모드와 상기 깊이 영상의 현재 블록에 대한 제 2 인트라 예측 모드에 대한 정보를 추출하는 단계;
    상기 제 1 인트라 예측 모드에 따라 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계; 및
    상기 제 2 인트라 예측 모드에 따라 상기 깊이 영상의 현재 블록에 대한 인트라 예측을 수행하는 단계를 포함하되,
    상기 제 1 인트라 예측 모드와 상기 제 2 인트라 예측 모드는 상호 간의 참조를 통하여 결정되고,
    상기 제 2 인트라 예측 모드를 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 위한 최고 확률 모드(Most Probable Mode)에 추가하여 상기 컬러 영상의 현재 블록에 대한 인트라 예측을 수행하는 3차원 영상에 대한 복호화 방법.
KR1020130034969A 2013-04-01 2013-04-01 3차원 영상의 인트라 예측 방법 및 장치 KR101452625B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130034969A KR101452625B1 (ko) 2013-04-01 2013-04-01 3차원 영상의 인트라 예측 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130034969A KR101452625B1 (ko) 2013-04-01 2013-04-01 3차원 영상의 인트라 예측 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20140120398A KR20140120398A (ko) 2014-10-14
KR101452625B1 true KR101452625B1 (ko) 2014-10-24

Family

ID=51992270

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130034969A KR101452625B1 (ko) 2013-04-01 2013-04-01 3차원 영상의 인트라 예측 방법 및 장치

Country Status (1)

Country Link
KR (1) KR101452625B1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100066304A (ko) * 2008-12-08 2010-06-17 한국전자통신연구원 다시점 영상 부호화, 복호화 방법 및 그 장치.
KR20110032485A (ko) * 2009-09-23 2011-03-30 삼성전자주식회사 기하학 기반의 블록 분할 인트라 예측을 이용한 깊이영상 부호화 방법 및 장치
KR20110124447A (ko) * 2010-05-11 2011-11-17 삼성전자주식회사 입체영상 부호화 장치 및 방법
KR20130018627A (ko) * 2011-08-09 2013-02-25 삼성전자주식회사 다시점 비디오 데이터의 부호화 방법 및 장치, 복호화 방법 및 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100066304A (ko) * 2008-12-08 2010-06-17 한국전자통신연구원 다시점 영상 부호화, 복호화 방법 및 그 장치.
KR20110032485A (ko) * 2009-09-23 2011-03-30 삼성전자주식회사 기하학 기반의 블록 분할 인트라 예측을 이용한 깊이영상 부호화 방법 및 장치
KR20110124447A (ko) * 2010-05-11 2011-11-17 삼성전자주식회사 입체영상 부호화 장치 및 방법
KR20130018627A (ko) * 2011-08-09 2013-02-25 삼성전자주식회사 다시점 비디오 데이터의 부호화 방법 및 장치, 복호화 방법 및 장치

Also Published As

Publication number Publication date
KR20140120398A (ko) 2014-10-14

Similar Documents

Publication Publication Date Title
US11032555B2 (en) Effective prediction using partition coding
US20230088154A1 (en) Effective wedgelet partition coding using spatial prediction
US10567776B2 (en) Adaptive partition coding
US11831870B2 (en) Method, device, and recording medium storing bit stream, for encoding/decoding image
US20190098295A1 (en) Effective wedgelet partition coding
KR101587927B1 (ko) 인트라 예측을 이용한 비디오 부호화/복호화 방법 및 장치
KR101452625B1 (ko) 3차원 영상의 인트라 예측 방법 및 장치
CN111434116B (zh) 在图像编码系统中使用构造的仿射mvp候选基于仿射运动预测的图像解码方法和装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee