KR20140043029A - 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치 - Google Patents

깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치 Download PDF

Info

Publication number
KR20140043029A
KR20140043029A KR1020130112577A KR20130112577A KR20140043029A KR 20140043029 A KR20140043029 A KR 20140043029A KR 1020130112577 A KR1020130112577 A KR 1020130112577A KR 20130112577 A KR20130112577 A KR 20130112577A KR 20140043029 A KR20140043029 A KR 20140043029A
Authority
KR
South Korea
Prior art keywords
depth image
representation
nonlinear
pixel value
depth
Prior art date
Application number
KR1020130112577A
Other languages
English (en)
Inventor
임일순
이재준
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to PCT/KR2013/008562 priority Critical patent/WO2014051319A1/ko
Publication of KR20140043029A publication Critical patent/KR20140043029A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

깊이 영상을 효과적으로 부호화할 수 있는 깊이 영상 부호화 방법 및 부호화된 깊이 영상을 복호화할 수 있는 깊이 영상 복호화 방법이 개시된다. 일실시예에 따른 깊이 영상 부호화 방법은, 깊이 영상에 비선형 표현을 선택적으로 적용하여, 깊이 영상의 부호화 효율을 향상시킬 수 있다.

Description

깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치{METHOD AND APPARATUS FOR ENCODING DEPTH IMAGE, METHOD AND APPARATUS FOR DECODING DEPTH IMAGE}
아래의 설명은 깊이 영상을 부호화하는 깊이 영상 부호화 방법 및 부호화된 깊이 영상을 복호화하는 깊이 영상 복호화 방법에 관한 것이다.
깊이 영상은 관찰자와 물체 간의 거리를 나타내는 영상으로, 8비트일 경우, 0에서 255 사이의 픽셀값으로 표현한 데이터이다. 실제 관찰자와 물체 간의 거리는 초점 거리, 베이스라인 거리(baseline spacing), 픽셀의 변이값(pixel's disparity) 등에 기초하여 픽셀값으로 표현될 수 있다.
영상 압축을 위한 압축(부호화) 표준은 H.261, H.263, MPEG-1, MPEG-2, MPEG-4, H.264 및 HEVC(High Efficiency Video Coding) 등이 있다. 위 압축 표준들은 서로 간에 조금씩 차이점이 존재하나, 일반적으로 움직임 추정과 보상, 부호화, 그리고 엔트로피 인코딩(entropy encoding) 단계를 포함하는 유사한 구조를 가지고 있다. 일반적으로, 균일한 주파수 대역의 깊이 영상보다는 저주파 대역에 집중된 깊이 영상이 더 효과적으로 부호화된다. 따라서, 깊이 영상의 주파수 특성에 따라 깊이 영상의 부호화 효율이 다를 수 있다.
일실시예에 따른 깊이 영상 부호화 방법은, 깊이 영상에 비선형 표현을 적용할지 여부를 슬라이스 단위로 결정하는 단계; 상기 적용 여부에 따라 상기 깊이 영상에 비선형 표현을 적용하는 단계; 및 상기 깊이 영상을 부호화하는 단계를 포함할 수 있다.
다른 실시예에 따른 깊이 영상 부호화 방법은, 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰지 여부를 슬라이스 단위로 판단하는 단계; 상기 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰 경우, 상기 깊이 영상의 픽셀값 분포 특성에 기초하여 상기 깊이 영상을 저주파수 대역의 깊이 영상으로 선택적으로 변환하는 단계; 및 상기 저주파수 대역의 깊이 영상을 부호화하여 비트스트림을 생성하는 단계를 포함할 수 있다.
일실시예에 따른 깊이 영상 복호화 방법은, 부호화된 깊이 영상을 복호화하는 단계; 상기 깊이 영상에 비선형 표현이 적용되었는지 여부를 슬라이스 단위로 판단하는 단계; 및 상기 깊이 영상에 비선형 표현이 적용된 경우, 상기 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 변환하는 단계를 포함할 수 있다.
일실시예에 따른 깊이 영상 부호화 장치는, 깊이 영상에 비선형 표현을 적용할지 여부를 슬라이스 단위로 결정하는 제어부; 상기 적용 여부에 따라 상기 깊이 영상에 비선형 표현을 적용하는 깊이 영상 변환부; 및 상기 깊이 영상을 부호화하는 깊이 영상 부호화부를 포함할 수 있다.
일실시예에 따른 깊이 영상 복호화 장치는, 부호화된 깊이 영상을 복호화하는 깊이 영상 복호화부; 상기 깊이 영상에 비선형 표현이 적용되었는지 여부를 슬라이스 단위로 판단하는 제어부; 및 상기 깊이 영상에 비선형 표현이 적용된 경우, 상기 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 변환하는 깊이 영상 복원부를 포함할 수 있다.
도 1은 일실시예에 따른 깊이 영상 부호화/복호화 시스템의 전체적인 구성을 도시한 도면이다.
도 2는 일실시예에 따른 깊이 영상 부호화 장치의 세부 구성을 도시한 도면이다.
도 3은 일실시예에 따른 깊이 영상 복호화 장치의 세부 구성을 도시한 도면이다.
도 4는 일실시예에 따른 비선형 표현을 도시한 도면이다.
도 5는 일실시예에 따른 비선형 표현이 적용된 깊이 영상을 도시한 도면이다.
도 6은 일실시예에 따른 비선형 표현이 적용된 깊이 영상의 히스토그램을 도시한 도면이다.
도 7 및 도 8은 일실시예에 따른 비선형 표현의 적용 여부를 결정하는 동작을 설명하기 위한 도면이다.
도 9는 일실시예에 따른 깊이 영상 부호화 방법의 동작을 도시한 흐름도이다.
도 10은 다른 실시예에 따른 깊이 영상 부호화 방법의 동작을 도시한 흐름도이다.
도 11은 일실시예에 따른 깊이 영상 복호화 방법의 동작을 도시한 흐름도이다.
이하, 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 아래의 특정한 구조적 내지 기능적 설명들은 단지 발명의 실시예들을 설명하기 위한 목적으로 예시된 것으로, 발명의 범위가 본문에 설명된 실시예들에 한정되는 것으로 해석되어서는 안된다. 일실시예에 따른 깊이 영상 부호화 방법은 깊이 영상 부호화 장치에 의해 수행될 수 있으며, 깊이 영상 복호화 방법은 깊이 영상 복호화 장치에 의해 수행될 수 있다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.
도 1은 일실시예에 따른 깊이 영상 부호화/복호화 시스템의 전체적인 구성을 도시한 도면이다.
깊이 영상 부호화/복호화 시스템은 깊이 영상 부호화 장치(110) 및 깊이 영상 복호화 장치(120)를 포함할 수 있다.
깊이 영상 부호화 장치(110)는 입력된 깊이 영상(130)을 부호화(150)하여 비트스트림(bitstream)으로 생성할 수 있다. 깊이 영상 부호화 장치(110)는 부호화 성능을 개선시키기 위해 입력된 깊이 영상(130)에 비선형 표현을 선택적으로 적용(140)할 수 있다. 깊이 영상 부호화 장치(110)는 모든 깊이 영상에 비선형 표현을 적용하는 것이 아니라, 깊이 영상(130)의 주파수 특성 또는 픽셀값 분포 특성을 고려하여 비선형 표현의 적용 여부를 결정할 수 있다. 예를 들어, 깊이 영상 부호화 장치(110)는 입력된 깊이 영상(130)의 픽셀값 분포 특성에 따라 비선형 표현을 적용(140)하여 부호화(150)할 수도 있고, 비선형 표현을 적용하지 않고 부호화할 수도 있다.
또한, 깊이 영상 부호화 장치(110)는 깊이 영상(130)의 슬라이스(slice) 단위(또는, 영상 프레임 단위)로 비선형 표현의 적용 여부를 결정할 수 있다. 깊이 영상 부호화 장치(110)는 깊이 영상(130)에 포함된 각각의 슬라이스에 대해 비선형 표현을 적용하는 것이 더 효율적인지 판단하여, 슬라이스 단위로 깊이 영상에 비선형 표현을 적용(140)할 수 있다.
일반적으로, 저주파수 대역에 픽셀값이 집중된 저주파수 대역의 깊이 영상이 고주파수 대역에 픽셀값이 집중된 고주파수 대역의 깊이 영상보다 부호화 효율이 더 높음이 알려져 있다. 깊이 영상에 비선형 표현을 적용하여 저주파수 대역의 깊이 영상으로 변환할 수 있으나, 특정 조건에서는 비선형 표현을 적용한 경우가 오히려 부호화 효율이 더 낮을 수 있다. 깊이 영상 부호화 장치(110)는 입력된 깊이 영상(130)의 주파수 특성 또는 픽셀값 분포 특성에 따라 비선형 표현의 적용 여부를 결정함으로써, 깊이 영상을 보다 효과적으로 부호화할 수 있다. 깊이 영상 부호화 장치(110)는 입력된 깊이 영상(130)이 특정 조건에 해당되는지 여부를 판단하여 비선형 표현의 적용 여부를 결정할 수 있다. 깊이 영상 부호화 장치(110)는 깊이 영상의 특성에 기초하여 비선형 표현의 적용 여부를 결정함으로써 부호화 효율을 개선시킬 수 있다.
깊이 영상 복호화 장치(120)는 부호화되어 전송된 깊이 영상을 복호화(160)할 수 있다. 깊이 영상 복호화 장치(120)는 복호화된 깊이 영상을 분석하여 부호화 과정에서 비선형 표현이 적용되었는지 여부를 판단할 수 있다. 예를 들어, 깊이 영상 복호화 장치(120)는 비트스트림에 포함된 플래그 데이터 또는 헤더 정보 등에 기초하여 깊이 영상에 포함된 각각의 슬라이스에 비선형 표현이 적용되었는지 여부를 판단할 수 있다.
깊이 영상에 비선형 표현이 적용되었다고 판단한 경우, 깊이 영상 복호화 장치(120)는 비선형 표현이 적용된 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 역변환할 수 있다. 예를 들어, 깊이 영상 복호화 장치(120)는 비선형 표현의 깊이 영상을 역변환하기 위해, 부호화 과정에서 적용된 비선형 표현에 대응되는 비선형 표현을 비선형 표현의 깊이 영상에 적용할 수 있다. 깊이 영상 복호화 장치(120)는 비선형 표현의 깊이 영상을 역변환함으로써, 비선형 표현이 적용된 깊이 영상을 비선형 표현이 적용되기 전의 깊이 영상으로 복원(180)할 수 있다.
깊이 영상 복호화 장치(120)는 깊이 영상에 비선형 표현이 적용되지 않은 경우 또는 깊이 영상이 선형으로 표현되어 있는 경우에는, 깊이 영상을 선형 표현의 깊이 영상으로 변환하지 않고, 그대로 출력할 수 있다.
도 2는 일실시예에 따른 깊이 영상 부호화 장치의 세부 구성을 도시한 도면이다.
도 2를 참조하면, 깊이 영상 부호화 장치(210)는 제어부(220), 깊이 영상 변환부(230) 및 깊이 영상 부호화부(240)를 포함할 수 있다.
제어부(220)는 깊이 영상에 비선형 표현을 적용할지 여부를 슬라이스 단위로 결정할 수 있다. 제어부(220)는 깊이 영상을 구성하는 픽셀들의 픽셀값 분포 특성에 기초하여 깊이 영상에 비선형 표현을 적용할지 여부를 결정할 수 있다.
예를 들어, 제어부(220)는 깊이 영상의 전체 픽셀들이 가지는 픽셀값을 평균하여 깊이 영상의 평균 픽셀값을 계산할 수 있다. 제어부(220)는 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰지 여부를 슬라이스 단위로 판단할 수 있다. 이는 다음의 수학식 1과 같이 나타낼 수 있다.
Figure pat00001
위 식에서, Tavg는 깊이 영상의 평균 픽셀값이고, Thavg는 미리 설정된 임계값을 나타낸다. Tavg는 평균 연산자를 통해 계산될 수 있다. 제어부(220)는 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰 경우(동일한 경우도 포함)에, 깊이 영상에 비선형 표현을 적용할 수 있다.
제어부(220)는 비선형 표현의 적용 여부를 더욱 구체적으로 판단하기 위해, 비선형 표현을 적용하기 위한 조건을 더 추가할 수 있다. 구체적으로, 제어부(220)는 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰 경우에도, 깊이 영상의 픽셀값 분포 특성에 기초하여 깊이 영상에 비선형 표현을 적용할지 여부를 한번 더 결정할 수 있다. 예를 들어, 제어부(220)는 깊이 영상의 히스토그램(histogram)과 같은 픽셀값 분포 특성에 기초하여 비선형 표현의 적용 여부를 결정할 수 있다. 이는 다음의 수학식 2와 같이 나타낼 수 있다.
Figure pat00002
제어부(220)는 깊이 영상의 히스토그램에서 이산적인 분포를 갖는 픽셀값의 유효 범위 및 유효 픽셀값을 결정하고, 픽셀값의 유효 범위에 포함된 전체 픽셀값의 개수와 유효 범위에 포함된 유효 픽셀값의 개수 간의 비율에 기초하여 비선형 표현의 적용 여부를 결정할 수 있다. 수학식 2에서, Thistogram은 유효 범위에 포함된 전체 픽셀값의 개수와 유효 범위에 포함된 유효 픽셀값의 개수 간의 비율로서, 깊이 영상의 밀도를 나타내고, Thhistogram은 히스토그램 분석과 관련하여 미리 설정된 임계값을 나타낸다. 제어부(220)는 Thistogram이 Thhistogram 보다 작은 경우(동일한 경우도 포함)에 깊이 영상에 비선형 표현을 적용하도록 제어할 수 있다. 이와 관련된 자세한 설명은 도 7 및 도 8에서 후술하도록 한다.
제어부(220)는 비선형 표현의 적용 여부를 깊이 영상의 픽셀값 분포 특성에 기초하여 결정함으로써, 깊이 영상을 저주파수 대역의 깊이 영상으로 선택적으로 변환할 수 있다. 제어부(220)는 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 작은 경우 또는 유효 픽셀값을 가지는 픽셀의 개수와 깊이 영상의 전체 픽셀 개수 간의 비율이 미리 설정된 임계값보다 큰 경우에는, 깊이 영상에 비선형 표현을 적용하지 않도록 제어할 수 있다.
깊이 영상 변환부(230)는 비선형 표현의 적용 여부에 따라 깊이 영상에 비선형 표현을 적용할 수 있다. 깊이 영상 변환부(230)는 제어부(220)가 비선형 표현을 적용하기로 결정한 경우에, 깊이 영상에 비선형 표현을 적용할 수 있다. 깊이 영상 변환부(230)는 깊이 영상에 비선형 표현을 적용함으로써, 깊이 영상을 저주파수 대역의 깊이 영상으로 변환할 수 있다.
깊이 영상 부호화부(240)는 깊이 영상을 부호화할 수 있다. 깊이 영상 부호화부(240)는 저주파수 대역의 깊이 영상을 부호화하여 비트스트림을 생성할 수 있다. 생성된 비트스트림은 깊이 영상이 저주파수 대역의 깊이 영상으로 변환되었는지 여부를 나타내는 정보를 슬라이스 단위로 저장할 수 있다.
깊이 영상 부호화부(240)는 깊이 영상에 비선형 표현이 적용되었는지 여부를 나타내는 플래그 데이터(flag data)를 깊이 영상과 함께 부호화할 수 있다. 플래그 데이터는 깊이 영상에 포함된 현재 슬라이스가 선형 형태로 표현되었는지 또는 비선형 형태로 표현되었는지를 나타낼 수 있다. 예를 들어, 깊이 영상 부호화부(240)는 플래그 데이터를 슬라이스 헤더(slice header), 깊이 파라미터 세트(depth parameter set), 픽쳐 파라미터 세트(picture parameter set) 및 부가 향상 정보(supplemental enhancement information, SEI) 중 적어도 하나에 저장하여 부호화할 수 있다.
다음의 표 1은 슬라이스 헤더에 비선형 표현의 적용 여부를 나타내는 플래그 데이터(nonlinear_depth_representation_enable_flag, 줄여서 간단히 ndr_enable_flag)가 추가된 구문(syntax)의 일례를 나타낸다.
slice_header( ) {

ndr_enable_flag
…
}
다음의 표 2는 깊이 파라미터 세트에 비선형 표현의 적용 여부를 나타내는 플래그 데이터(ndr_enable_flag )가 추가된 구문의 일례를 나타낸다.
depth_parameter_set( ) {

ndr_enable_flag
…
}
다음의 표 3은 부가 향상 정보(SEI)에 비선형 표현의 적용 여부를 나타내는 플래그 데이터(ndr_enable_flag )가 추가된 구문의 일례를 나타낸다.
supplementary_enhancement_information( ) {

ndr_enable_flag
…
}
다음의 표 4는 픽쳐 파라미터 세트에 비선형 표현의 적용 여부를 나타내는 플래그 데이터(ndr_enable_flag )가 추가된 구문의 일례를 나타낸다.
picture_parameter_set( ) {

ndr_enable_flag
…
}
위 구문들에서, "ndr_enable_flag"는 깊이 영상의 부호화 과정에서 비선형 표현이 적용되었는지 여부를 나타낼 수 있다. 예를 들어, "ndr_enable_flag"의 비트값이 1 을 나타내는 경우, 깊이 영상의 현재 슬라이스가 비선형 형식(nonlinear form)으로 표현되었다는 것을 나타낼 수 있다. 또한, "ndr_enable_flag"의 비트값이 0 을 나타내는 경우에는, 깊이 영상의 현재 슬라이스가 선형 형식(linear form)으로 표현되었다는 것을 나타낼 수 있다.
도 3은 일실시예에 따른 깊이 영상 복호화 장치의 세부 구성을 도시한 도면이다.
도 3을 참조하면, 깊이 영상 복호화 장치(310)는 깊이 영상 복호화부(320), 제어부(330) 및 깊이 영상 복원부(340)를 포함할 수 있다.
깊이 영상 복호화부(320)는 부호화된 깊이 영상을 수신하여 복호화할 수 있다. 깊이 영상 복호화부(320)는 깊이 영상의 부호화 방식을 판단하여, 해당 부호화 방식에 대응하는 복호화 방식으로 부호화된 깊이 영상을 복호화할 수 있다.
제어부(330)는 깊이 영상에 비선형 표현이 적용되었는지 여부를 슬라이스 단위로 판단할 수 있다. 제어부(330)는 깊이 영상의 슬라이스 단위로 깊이 영상에 비선형 표현이 적용되었는지를 판단하고, 깊이 영상에 비선형 표현이 적용된 경우, 깊이 영상 복원부(340)가 비선형 표현이 적용된 깊이 영상을 원래의 깊이 영상으로 복원하도록 제어할 수 있다.
제어부(330)는 깊이 영상에 포함된 현재 슬라이스가 선형 형태로 표현되었는지 또는 비선형 형태로 표현되었는지를 나타내는 플래그 데이터에 기초하여 깊이 영상에 비선형 표현이 적용되었는지 여부를 판단할 수 있다. 예를 들어, 제어부(330)는 플래그 데이터가 0의 비트값을 가지면, 깊이 영상의 현재 슬라이스가 선형 형태로 표현되었다는 것을 식별하고, 플래그 데이터가 1의 비트값을 가지면, 깊이 영상의 현재 슬라이스가 비선형 형태로 표현되었다는 것을 식별할 수 있다. 플래그 데이터는 슬라이스 헤더, 깊이 파라미터 세트, 픽쳐 파라미터 세트 및 부가 향상 정보 중 적어도 하나에 저장될 수 있다. 제어부(330)는 슬라이스 헤더, 깊이 파라미터 세트, 픽쳐 파라미터 세트 및 부가 향상 정보 중 적어도 어느 하나에 저장된 플래그 데이터를 판독하여, 깊이 영상에 비선형 표현이 적용되었는지 여부를 판단할 수 있다.
깊이 영상 복원부(340)는 깊이 영상에 비선형 표현이 적용된 경우, 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 변환할 수 있다. 예를 들어, 깊이 영상 복원부(340)는 깊이 영상이 비선형 형태로 표현되었는지 여부를 나타내는 플래그 데이터가 1의 비트값을 가지는 경우, 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 변환할 수 있다. 깊이 영상 복원부(340)는 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 변환하기 위해, 깊이 영상의 부호화 과정에서 적용된 비선형 표현에 대응되는 비선형 표현을 비선형 표현의 깊이 영상에 적용할 수 있다. 예를 들어, 서로 대응되는 비선형 표현들은 역의 관계를 가지는 함수들일 수 있다. 깊이 영상에 적용된 비선형 표현 관련 정보는 부호화된 깊이 영상을 포함하는 비트스트림에 저장될 수 있고, 깊이 영상 복원부(340)는 비트스트림에 저장되어 있는 비선형 표현 관련 정보로부터, 깊이 영상에 적용된 비선형 표현에 반대되는 비선형 표현을 도출할 수 있다.
깊이 영상 복호화 장치(310)는 슬라이스 단위로 깊이 영상에 비선형 표현이 적용되었는지를 판단하여, 비선형 표현이 적용된 깊이 영상을 원래의 깊이 영상으로 복원하여 출력할 수 있다. 예를 들어, 깊이 영상 복호화 장치(310)는 비선형 표현의 깊이 영상을 비선형 표현이 적용되기 전의 깊이 영상으로 역변환하여 비선형 표현이 적용되기 전의 깊이 영상을 출력할 수 있다.
깊이 영상 복호화 장치(310)는 깊이 영상에 비선형 표현이 적용되지 않은 경우 또는 깊이 영상이 선형으로 표현되어 있는 경우에는, 깊이 영상을 선형 표현의 깊이 영상으로 변환하지 않고, 그대로 출력할 수 있다. 예를 들어, 깊이 영상 복호화 장치(310)는 깊이 영상이 비선형 형태로 표현되었는지 여부를 나타내는 플래그 데이터가 0의 비트값을 가지는 경우, 깊이 영상을 선형 표현의 깊이 영상으로 변환하지 않고, 그대로 출력할 수 있다.
도 4는 일실시예에 따른 비선형 표현을 도시한 도면이다.
비선형 표현은 비선형 함수를 포함할 수 있으며, 깊이 영상의 주파수 대역과 같은 주파수 특성을 변화시키거나 픽셀값 분포를 변화시키기 위해 이용될 수 있다.
예를 들어, 깊이 영상 부호화 장치가 깊이 영상의 부호화 과정에서 깊이 영상에 적용하는 비선형 표현은 아래 수학식 3과 같이 나타낼 수 있으며, 이는 도 4의 그래프(410)에 대응된다.
Figure pat00003
깊이 영상 부호화 장치는 수학식 3과 같은 비선형 표현을 깊이 영상에 적용하여 입력 x 보다 낮은 출력 f(x) 를 얻을 수 있다. 이를 통해, 깊이 영상 부호화 장치는 저주파수 대역의 깊이 영상을 생성할 수 있다. 깊이 영상 부호화 장치는 수학식 3의 2차 함수뿐만 아니라, 3차 함수, 4차 함수 등과 같은 다른 비선형 함수를 이용하여 깊이 영상을 저주파수 대역의 깊이 영상으로 생성할 수 있다.
또한, 깊이 영상의 복호화 과정에서 이용되는 비선형 표현의 일례를 아래 수학식 4와 같이 나타낼 수 있으며, 이는 도 4의 그래프(420)에 대응된다.
Figure pat00004
깊이 영상의 복호화 과정에서, 깊이 영상 복호화 장치는 깊이 영상의 부호화 과정에서 적용된 비선형 표현에 대응되는 비선형 표현을 깊이 영상에 적용하여 깊이 영상을 복원할 수 있다. 예를 들어, 깊이 영상 복호화 장치는 그래프(410)의 비선형 표현에 역의 관계에 있는 그래프(420)의 비선형 표현을 이용하여 비선형 표현이 적용된 깊이 영상을 원래의 깊이 영상으로 복원할 수 있다. 깊이 영상 복호화 장치는 수학식 4와 같은 비선형 표현을 깊이 영상에 적용하여 입력 x 보다 높은 출력 h(x) 을 얻을 수 있다. 이를 통해, 저주파수 대역의 깊이 영상으로 변환되었던 깊이 영상은 원래의 깊이 영상으로 복원될 수 있다.
비선형 표현을 구현하는 일례는 아래 표 5의 구문과 같이 나타낼 수 있다.
Sequence_Parameter_Set ( ) {

if( DepthFlag ) {
nonlinear_depth_representation_num
for( i = 1; i <= nonlinear_depth_representation_num; i++ )
nonlinear_depth_representation_model[ i ]
}
…
}
위 구문에서, "nonlinear_depth_representation_num" 은 깊이 영상의 픽셀 값을 균등한 차이를 갖는 스케일(scale) 단위로 맵핑(mapping)시키기 위한 구간적 선형 세그먼트들(piecewise linear segments)의 개수를 나타낸다.
그리고, "nonlinear_depth_representation_model[ i ]" 는 깊이 영상의 픽셀 값을 균등한 차이를 갖는 스케일 단위로 맵핑시키기 위한 구간적 선형 세그먼트들을 나타낸다.
도 5는 일실시예에 따른 비선형 표현이 적용된 깊이 영상을 도시한 도면이다.
깊이 영상(510)은 비선형 표현이 적용되기 전의 깊이 영상을 나타내고, 깊이 영상(520)는 비선형 표현이 적용된 깊이 영상을 나타낸다. 비선형 표현이 적용된 깊이 영상(520)이 비선형 표현이 적용되기 전의 깊이 영상(510)보다 전체적으로 밝기가 어두운 것을 확인할 수 있다.
도 6은 일실시예에 따른 비선형 표현이 적용된 깊이 영상의 히스토그램을 도시한 도면이다.
히스토그램(610)은 비선형 표현이 적용되지 않은 깊이 영상의 픽셀값 분포를 나타내는 히스토그램이다. 그리고, 히스토그램(620)은 비선형 표현이 적용된 깊이 영상의 픽셀값 분포를 나타내는 히스토그램이다.
히스토그램(610)과 히스토그램(620)을 비교해 볼 때, 균일하게 분포한 깊이 영상의 픽셀값은 비선형 표현이 적용된 이후에 저주파 대역으로 집중됨을 확인할 수 있다. 또한, 깊이 영상에 비선형 표현이 적용되면, 낮은 픽셀값을 가지는 픽셀들이 증가하여 깊이 영상의 밝기가 어두워짐을 알 수 있다.
도 7 및 도 8은 일실시예에 따른 비선형 표현의 적용 여부를 결정하는 동작을 설명하기 위한 도면이다.
도 7을 참조하면, 깊이 영상의 히스토그램의 일례가 도시되어 있다. 히스토그램에서 x 축은 픽셀값(또는, 빈(bin))을 나타내며, y축은 해당 픽셀값에 대응하는 픽셀의 개수를 나타낸다.
깊이 영상 부호화 장치는 히스토그램과 같은 깊이 영상의 픽셀값 분포 특성에 기초하여 깊이 영상에 비선형 표현을 적용할지 여부를 결정할 수 있다. 예를 들어, 깊이 영상 부호화 장치는 깊이 영상의 히스토그램에서 이산적인 분포를 갖는 픽셀값의 유효 범위 및 유효 픽셀값을 결정하고, 유효 범위에 포함된 전체 픽셀값의 개수와 유효 범위에 포함된 유효 픽셀값의 개수 간의 비율에 기초하여 비선형 표현의 적용 여부를 결정할 수 있다. 히스토그램에서 픽셀값은 빈(bin)에 대응할 수 있다.
도 7의 히스토그램이 나타내는 깊이 영상의 픽셀값 분포에서, 깊이 영상 부호화 장치는 미리 설정된 임계값(710)을 기준으로 히스토그램의 전체 픽셀값에서 특정 영역의 픽셀값을 제외할 수 있다. 미리 설정된 임계값(710) 이상의 픽셀 수를 가지는 픽셀값을 유효 픽셀값이라고 정의한다. 유효 픽셀값들 중에서 픽셀값이 최소인 유효 픽셀값과 픽셀값이 최대인 유효 픽셀값 사이의 범위를 유효 범위라고 정의한다.
예를 들어, 깊이 영상 부호화 장치는 미리 설정된 임계값(710) 이상의 픽셀 수를 가지는 최소값의 픽셀값과 0을 나타내는 픽셀값 사이 영역(720), 미리 설정된 임계값(710) 이상의 픽셀 수를 가지는 최대값의 픽셀값과 255(8비트로 표현될 때 픽셀값의 최대값)의 픽셀값 사이 영역(730)에 포함되는 픽셀값을 전체 픽셀값에서 제외하여 픽셀값의 유효 범위(740)을 결정할 수 있다.
깊이 영상 부호화 장치는 픽셀값의 유효 범위(740)에서 미리 설정된 임계값(710) 이상의 픽셀 수를 가지는 픽셀값을 유효 범위에 포함된 유효 픽셀값으로 결정할 수 있다. 깊이 영상의 히스토그램에서, 유효 픽셀값은 일정 부분의 상위 빈(bin)(예를 들어, 영역(730))과 일정 부분의 하위 빈(예를 들어, 영역(720))을 제거하였을 때 미리 설정된 임계값(710) 이상의 픽셀 수를 가지는 픽셀값을 나타낸다.
도 2의 수학식 2에서, 픽셀값의 유효 범위에 포함된 전체 픽셀값의 개수와 유효 범위에 포함된 유효 픽셀값의 개수 간의 비율인 Thistogram은 다음의 수학식 5와 같이 구체화하여 나타낼 수 있다.
Figure pat00005
깊이 영상 부호화 장치는 Thistogram이 히스토그램 분석과 관련하여 미리 설정된 임계값 Thhistogram 보다 작은 경우에 깊이 영상에 비선형 표현을 적용하도록 결정할 수 있다.
도 8에 나타난 히스토그램은 도 7에 나타난 히스토그램보다 픽셀값에 대응하는 픽셀들이 밀집(dense)하여 분포하고 있다. 깊이 영상 부호화 장치는 미리 설정된 임계값(810) 이상의 픽셀 수를 가지는 최소값의 픽셀값과 0을 나타내는 픽셀값 사이 영역(820), 미리 설정된 임계값(810) 이상의 픽셀 수를 가지는 최대값의 픽셀값과 255(8비트로 표현될 때 픽셀값의 최대값)의 픽셀값 사이 영역(830)에 포함되는 픽셀값을 전체 픽셀값에서 제외하여 픽셀값의 유효 범위(840)을 결정할 수 있다.
도 7에서와 마찬가지로, 깊이 영상 부호화 장치는 픽셀값의 유효 범위(840)에서 미리 설정된 임계값(810) 이상의 픽셀 수를 가지는 픽셀값을 유효 픽셀값으로 결정하고, 픽셀값의 유효 범위(840)에 포함된 전체 픽셀값의 개수와 유효 범위(840)에 포함된 유효 픽셀값의 개수 간의 비율을 계산할 수 있다. 깊이 영상 부호화 장치는 픽셀값의 유효 범위(840)에 포함된 전체 픽셀값의 개수와 유효 범위(840)에 포함된 유효 픽셀값의 개수 간의 비율과 히스토그램 분석과 관련된 미리 설정된 임계값을 비교하여 비선형 표현의 적용 여부를 결정할 수 있다.
도 9는 일실시예에 따른 깊이 영상 부호화 방법의 동작을 도시한 흐름도이다.
단계(910)에서 깊이 영상 부호화 장치는 깊이 영상에 비선형 표현을 적용할지 여부를 슬라이스 단위로 결정할 수 있다. 깊이 영상 부호화 장치는 깊이 영상의 전체 픽셀들이 가지는 픽셀값을 평균하여 깊이 영상의 평균 픽셀값을 계산할 수 있다. 깊이 영상 부호화 장치는 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰지 여부를 슬라이스 단위로 판단할 수 있다. 깊이 영상 부호화 장치는 깊이 영상의 평균 픽셀값에 기초하여 깊이 영상에 비선형 표현을 적용할지 여부를 결정할 수 있다.
깊이 영상 부호화 장치는 히스토그램과 같은 깊이 영상을 구성하는 픽셀들의 픽셀값 분포 특성에 기초하여 깊이 영상에 비선형 표현을 적용할지 여부를 결정할 수 있다. 깊이 영상 부호화 장치는 깊이 영상의 히스토그램에서 이산적인 분포를 갖는 픽셀값의 유효 범위 및 유효 픽셀값을 결정하고, 픽셀값의 유효 범위에 포함된 전체 픽셀값의 개수와 유효 범위에 포함된 유효 픽셀값의 개수 간의 비율에 기초하여 비선형 표현의 적용 여부를 결정할 수 있다.
단계(920)에서 깊이 영상 부호화 장치는 깊이 영상에 비선형 표현을 적용하기로 결정한 경우, 깊이 영상에 비선형 표현을 적용할 수 있다. 깊이 영상 부호화 장치는 깊이 영상에 비선형 표현을 적용하여 깊이 영상을 저주파수 대역의 깊이 영상으로 변환할 수 있다.
단계(930)에서 깊이 영상 부호화 장치는 깊이 영상을 부호화할 수 있다. 깊이 영상 부호화 장치는 비선형 표현이 적용된 깊이 영상 또는 비선형 표현이 적용되지 않은 깊이 영상을 부호화할 수 있다. 깊이 영상 부호화 장치는 깊이 영상에 포함된 현재 슬라이스가 선형 형태로 표현되었는지 또는 비선형 형태로 표현되었는지를 나타내는 플래그 데이터를 깊이 영상과 함께 부호화할 수 있다. 예를 들어, 깊이 영상 부호화 장치는 플래그 데이터를 슬라이스 헤더, 깊이 파라미터 세트, 픽쳐 파라미터 세트 및 부가 향상 정보 중 적어도 하나에 저장하여 부호화할 수 있다.
도 10은 다른 실시예에 따른 깊이 영상 부호화 방법의 동작을 도시한 흐름도이다.
단계(1010)에서 깊이 영상 부호화 장치는 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰지 여부를 슬라이스 단위로 판단할 수 있다. 깊이 영상 부호화 장치는 깊이 영상의 픽셀들이 가지는 픽셀값을 평균하여 평균 픽셀값을 계산할 수 있다.
단계(1020)에서 깊이 영상 부호화 장치는 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰 경우, 깊이 영상의 픽셀값 분포 특성에 기초하여 깊이 영상을 저주파수 대역의 깊이 영상으로 선택적으로 변환할 수 있다. 예를 들어, 깊이 영상 부호화 장치는 깊이 영상의 히스토그램과 같은 픽셀값 분포 특성에 기초하여 비선형 표현의 적용 여부를 선택적으로 결정할 수 있다.
깊이 영상 부호화 장치는 깊이 영상의 히스토그램에서, 이산적인 분포를 갖는 픽셀값의 유효 범위 및 유효 픽셀값을 결정하고, 픽셀값의 유효 범위에 포함된 전체 픽셀값의 개수와 유효 범위에 포함된 유효 픽셀값의 개수 간의 비율에 기초하여 비선형 표현의 적용 여부를 결정할 수 있다. 깊이 영상 부호화 장치는 깊이 영상에 비선형 표현을 적용함으로써, 깊이 영상을 저주파수 대역의 깊이 영상으로 변환할 수 있다.
단계(1030)에서 깊이 영상 부호화 장치는 저주파수 대역의 깊이 영상을 부호화하여 비트스트림을 생성할 수 있다. 생성된 비트스트림은 깊이 영상이 저주파수 대역의 깊이 영상으로 변환되었는지 여부를 나타내는 정보를 슬라이스 단위로 저장할 수 있다. 예를 들어, 깊이 영상 부호화 장치는 깊이 영상에 비선형 표현이 적용되었는지 여부를 나타내는 플래그 데이터를 비트스트림에 저장할 수 있다.
도 11은 일실시예에 따른 깊이 영상 복호화 방법의 동작을 도시한 흐름도이다.
단계(1110)에서 깊이 영상 복호화 장치는 부호화된 깊이 영상을 복호화할 수 있다. 깊이 영상 복호화 장치는 깊이 영상의 부호화 방식을 판단하여, 해당 부호화 방식에 대응하는 복호화 방식으로 부호화된 깊이 영상을 복호화할 수 있다.
단계(1120)에서 깊이 영상 복호화 장치는 깊이 영상에 비선형 표현이 적용되었는지 여부를 슬라이스 단위로 판단할 수 있다. 깊이 영상 복호화 장치는 깊이 영상에 비선형 표현이 적용되었는지 여부를 나타내는 플래그 데이터에 기초하여 깊이 영상에 비선형 표현이 적용되었는지 여부를 판단할 수 있다. 플래그 데이터는 깊이 영상에 포함된 현재 슬라이스가 선형 형태로 표현되었는지 또는 비선형 형태로 표현되었는지를 나타낼 수 있다.
플래그 데이터는 슬라이스 헤더, 깊이 파라미터 세트, 픽쳐 파라미터 세트 및 부가 향상 정보 중 적어도 하나에 저장될 수 있다. 깊이 영상 복호화 장치는 슬라이스 헤더, 깊이 파라미터 세트, 픽쳐 파라미터 세트 및 부가 향상 정보 중 적어도 어느 하나에 저장된 플래그 데이터를 판독하여, 깊이 영상에 비선형 표현이 적용되었는지 여부를 판단할 수 있다.
단계(1130)에서 깊이 영상 복호화 장치는 깊이 영상에 비선형 표현이 적용된 경우, 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 변환할 수 있다. 깊이 영상 복호화 장치는 깊이 영상의 부호화 과정에서 적용된 비선형 표현에 대응되는 비선형 표현을 이용하여 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 역변환할 수 있다. 깊이 영상에 적용된 비선형 표현 관련 정보는 부호화된 깊이 영상을 포함하는 비트스트림에 저장될 수 있고, 깊이 영상 복호화 장치는 비트스트림에 저장되어 있는 비선형 표현 관련 정보로부터, 깊이 영상에 적용된 비선형 표현에 반대되는 비선형 표현을 도출할 수 있다.
깊이 영상 복호화 장치는 슬라이스 단위로 깊이 영상에 비선형 표현이 적용되었는지를 판단하여, 비선형 표현이 적용된 깊이 영상을 원래의 깊이 영상으로 복원하여 출력할 수 있다. 깊이 영상 복호화 장치는 깊이 영상에 비선형 표현이 적용되지 않은 경우 또는 깊이 영상이 선형으로 표현되어 있는 경우에는, 깊이 영상을 선형 표현의 깊이 영상으로 변환하지 않고, 그대로 출력할 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (17)

  1. 깊이 영상에 비선형 표현을 적용할지 여부를 슬라이스 단위로 결정하는 단계;
    상기 적용 여부에 따라 상기 깊이 영상에 비선형 표현을 적용하는 단계; 및
    상기 깊이 영상을 부호화하는 단계
    를 포함하는 깊이 영상 부호화 방법.
  2. 제1항에 있어서,
    상기 결정하는 단계는,
    상기 깊이 영상의 평균 픽셀값에 기초하여 상기 깊이 영상에 비선형 표현을 적용할지 여부를 결정하는 깊이 영상 부호화 방법.
  3. 제1항에 있어서,
    상기 결정하는 단계는,
    상기 깊이 영상을 구성하는 픽셀들의 픽셀값 분포 특성에 기초하여 상기 깊이 영상에 비선형 표현을 적용할지 여부를 결정하는 깊이 영상 부호화 방법.
  4. 제1항에 있어서,
    상기 결정하는 단계는,
    상기 깊이 영상의 픽셀값 분포에서, 미리 설정된 임계값에 기초하여 이산적인 분포를 갖는 픽셀값의 유효 범위 및 유효 픽셀값을 결정하는 단계; 및
    상기 유효 범위에 포함된 전체 픽셀값의 개수와 상기 유효 범위에 포함된 유효 픽셀값의 개수 간의 비율에 기초하여 상기 깊이 영상에 비선형 표현을 적용할지 여부를 결정하는 단계
    를 포함하는 깊이 영상 부호화 방법.
  5. 제1항에 있어서,
    상기 적용하는 단계는,
    상기 깊이 영상을 저주파수 대역의 깊이 영상으로 변환하는 깊이 영상 부호화 방법.
  6. 제1항에 있어서,
    상기 부호화하는 단계는,
    상기 깊이 영상에 포함된 현재 슬라이스가 선형 형태로 표현되었는지 또는 비선형 형태로 표현되었는지를 나타내는 플래그 데이터를 상기 깊이 영상과 함께 부호화하는 깊이 영상 부호화 방법.
  7. 제6항에 있어서,
    상기 부호화하는 단계는,
    상기 플래그 데이터를 슬라이스 헤더(slice header), 깊이 파라미터 세트(depth parameter set), 픽쳐 파라미터 세트(picture parameter set) 및 부가 향상 정보(supplemental enhancement information) 중 적어도 하나에 저장하여 부호화하는 깊이 영상 부호화 방법.
  8. 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰지 여부를 슬라이스 단위로 판단하는 단계;
    상기 깊이 영상의 평균 픽셀값이 미리 설정된 임계값보다 큰 경우, 상기 깊이 영상의 픽셀값 분포 특성에 기초하여 상기 깊이 영상을 저주파수 대역의 깊이 영상으로 선택적으로 변환하는 단계; 및
    상기 저주파수 대역의 깊이 영상을 부호화하여 비트스트림을 생성하는 단계
    를 포함하는 깊이 영상 부호화 방법.
  9. 제8항에 있어서,
    상기 변환하는 단계는,
    상기 깊이 영상의 픽셀값 분포에서, 미리 설정된 임계값에 기초하여 이산적인 분포를 갖는 픽셀값의 유효 범위 및 유효 픽셀값을 결정하는 단계; 및
    상기 유효 범위에 포함된 전체 픽셀값의 개수와 상기 유효 범위에 포함된 유효 픽셀값의 개수 간의 비율에 기초하여 상기 깊이 영상을 저주파수 대역의 깊이 영상으로 변환할지 여부를 결정하는 단계
    를 포함하는 깊이 영상 부호화 방법.
  10. 제8항에 있어서,
    상기 비트스트림은,
    상기 깊이 영상이 저주파수 대역의 깊이 영상으로 변환되었는지 여부를 나타내는 정보를 슬라이스 단위로 저장하는 깊이 영상 부호화 방법.
  11. 부호화된 깊이 영상을 복호화하는 단계;
    상기 깊이 영상에 비선형 표현이 적용되었는지 여부를 슬라이스 단위로 판단하는 단계; 및
    상기 깊이 영상에 비선형 표현이 적용된 경우, 상기 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 변환하는 단계
    를 포함하는 깊이 영상 복호화 방법.
  12. 제11항에 있어서,
    상기 판단하는 단계는,
    상기 깊이 영상에 포함된 현재 슬라이스가 선형 형태로 표현되었는지 또는 비선형 형태로 표현되었는지를 나타내는 플래그 데이터에 기초하여 상기 깊이 영상에 비선형 표현이 적용되었는지 여부를 판단하는 깊이 영상 복호화 방법.
  13. 제12항에 있어서,
    상기 플래그 데이터는,
    현재 슬라이스가 선형 형태로 표현된 경우에는 0의 비트값을 가지고, 현재 슬라이스가 비선형 형태로 표현된 경우에는 1의 비트값을 가지는 깊이 영상 복호화 방법.
  14. 제12항에 있어서,
    상기 플래그 데이터는,
    슬라이스 헤더, 깊이 파라미터 세트, 픽쳐 파라미터 세트 및 부가 향상 정보 중 적어도 하나에 저장되는 깊이 영상 복호화 방법.
  15. 제1항 내지 제14항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록된 컴퓨터에서 판독 가능한 기록 매체.
  16. 깊이 영상에 비선형 표현을 적용할지 여부를 슬라이스 단위로 결정하는 제어부;
    상기 적용 여부에 따라 상기 깊이 영상에 비선형 표현을 적용하는 깊이 영상 변환부; 및
    상기 깊이 영상을 부호화하는 깊이 영상 부호화부
    를 포함하는 깊이 영상 부호화 장치.
  17. 부호화된 깊이 영상을 복호화하는 깊이 영상 복호화부;
    상기 깊이 영상에 비선형 표현이 적용되었는지 여부를 슬라이스 단위로 판단하는 제어부; 및
    상기 깊이 영상에 비선형 표현이 적용된 경우, 상기 비선형 표현의 깊이 영상을 선형 표현의 깊이 영상으로 변환하는 깊이 영상 복원부
    를 포함하는 깊이 영상 복호화 장치.
KR1020130112577A 2012-09-28 2013-09-23 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치 KR20140043029A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/KR2013/008562 WO2014051319A1 (ko) 2012-09-28 2013-09-25 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201261707556P 2012-09-28 2012-09-28
US61/707,556 2012-09-28
US201361749520P 2013-01-07 2013-01-07
US61/749,520 2013-01-07

Publications (1)

Publication Number Publication Date
KR20140043029A true KR20140043029A (ko) 2014-04-08

Family

ID=50651864

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130112577A KR20140043029A (ko) 2012-09-28 2013-09-23 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치

Country Status (1)

Country Link
KR (1) KR20140043029A (ko)

Similar Documents

Publication Publication Date Title
JP6691253B2 (ja) 高忠実度コーダにおいて低忠実度コーディングをエミュレートする方法およびデバイス
JP6342549B2 (ja) ビデオ復号化方法とその装置
EP3389276B1 (en) Hash-based encoder decisions for video coding
JP2020039167A (ja) 計算装置及び方法
JP5654597B2 (ja) ビデオ符号化方法及び装置、ビデオ復号化方法及び装置
KR20130004180A (ko) 고정소수점 변환을 위한 비트뎁스 조절을 수반하는 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
CN108353194B (zh) 编码和解码视频信号的方法和装置
KR101912769B1 (ko) 그래프 템플릿으로부터 유도된 변환을 이용하여 비디오 신호를 디코딩/인코딩하는 방법 및 장치
US8582898B2 (en) Method and apparatus for encoding and decoding image based on code table selection adapted to residual value distribution
KR20180028468A (ko) 싱글톤 계수 업데이트를 이용하여 변환을 수행하는 방법 및 장치
US20190191185A1 (en) Method and apparatus for processing video signal using coefficient-induced reconstruction
KR20220024966A (ko) 변환 스킵된 블록의 코딩 시그널링
US20180278943A1 (en) Method and apparatus for processing video signals using coefficient induced prediction
JP2020526145A (ja) 境界の強制的な区分けの改善
CN108353180B (zh) 具有延迟重构的视频编码
JP2015027022A (ja) 動画像符号化装置、動画像符号化方法、およびプログラム
US9008448B2 (en) Method and apparatus for successively encoding/decoding image
EP3190793A1 (en) Method for re-encoding image and apparatus therefor
KR20140043029A (ko) 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치
JP2022092009A (ja) 映像符号化又は映像復号装置、映像符号化又は映像復号方法、プログラム、及び記録媒体
JP6887296B2 (ja) 符号化装置、復号装置及びプログラム
TW201531093A (zh) 動態影像預測解碼方法、動態影像預測解碼裝置、動態影像預測解碼程式、動態影像預測編碼方法、動態影像預測編碼裝置及動態影像預測編碼程式
KR20200004348A (ko) 타겟 영역 수정을 통해 비디오 신호를 처리하는 방법 및 장치
US20210289230A1 (en) Method and apparatus for encoding and decoding video signal using transform domain prediction for prediction unit partition
KR20180054693A (ko) 비디오 신호의 인코딩, 디코딩 방법 및 그 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application