KR102161017B1 - 화상 처리 장치 및 적어도 하나의 컴퓨터 판독가능한 기억 매체 - Google Patents

Abstract

본 발명은, 화상의 다이나믹 레인지를 정확하게 재현할 수 있도록 하는 화상 처리 장치 및 방법에 관한 것이다. 최대 화이트 레벨에 대응하는 종축의 값은, 현상 화상에 대하여 최대 화이트 레벨(백색 800％)이 할당되는 디지털값이며, 다이나믹 레인지의 특성 정보의 하나인 max_white_level_code_value로서 설정되어 전송된다. 화이트 레벨에 대한 종축의 값은, 현상 화상에 대하여 화이트 레벨(백색 100％)이 할당되는 디지털값이며, 다이나믹 레인지의 특성 정보의 하나인 white_level_code_value로서 설정되어 전송된다. 본 발명은, 예를 들어 화상 처리 장치에 적용할 수 있다.

Description

화상 처리 장치 및 적어도 하나의 컴퓨터 판독가능한 기억 매체{IMAGE PROCESSING DEVICE AND AT LEAST ONE COMPUTER READABLE STORAGE MEDIUM}

본 발명은, 화상 처리 장치 및 방법에 관한 것으로, 특히, 화상의 다이나믹 레인지를 정확하게 재현할 수 있도록 한 화상 처리 장치 및 방법에 관한 것이다.

최근 들어, 화상 정보를 디지털로서 취급하고, 그 때, 효율이 높은 정보의 전송, 축적을 목적으로, 화상 정보 특유의 용장성을 이용하여 이산 코사인 변환 등의 직교 변환과 움직임 보상에 의해 압축하는 부호화 방식을 채용하여 화상을 압축 부호화하는 장치가 보급되고 있다. 이 부호화 방식에는, 예를 들어 MPEG(Moving Picture Experts Group)나 H.264 및 MPEG-4 Part10(Advanced Video Coding, 이하 AVC라고 기재함) 등이 있다.

그리고, 현재, H.264/AVC보다 더 나은 부호화 효율의 향상을 목적으로, ITU-T와 ISO/IEC의 공동의 표준화 단체인 JCTVC(Joint Collaboration Team-Video Coding)에 의해, HEVC(High Efficiency Video Coding)라고 불리는 부호화 방식의 표준화가 진행되고 있다(비특허문헌 1 참조).

현시점에서의 HEVC의 드래프트에서는, 도 1에 도시된 SEI(Supplemental Enhancement Information)에 있어서, 톤 맵핑 인포메이션이 전송되고 있다.

그 톤 맵핑 인포메이션의 내용은, 도 2에 도시된 바와 같이, AVC에서 규격되어 있는 것과 동일하다(비특허문헌 2 참조).

Benjamin Bross, Woo-Jin Han, Jens-Rainer Ohm, Gary J. Sullivan, Thomas Wiegand, "High efficiency video coding(HEVC) text specification draft 7", JCTVC-I1003 ver5, 2012.6.12 D.1.24 of Rec. ITU-T H.264| ISO/IEC 14496-10

요즘, 카메라나 디스플레이에 있어서는, 높은 다이나믹 레인지의 화상을 촬영하거나, 표시하거나 할 수 있게 되고 있다.

이러한 상황에 있어서, 다양한 다이나믹 레인지의 화상 표시에 대응하기 위해서, 디코딩한 화상의 다이나믹 레인지를 확장할 것이 요구되고 있지만, 비특허문헌 1에 있어서는, 디코딩한 화상에 대한 다이나믹 레인지에 대하여 정의되어 있지 않았다.

본 발명은, 이러한 상황을 감안하여 이루어진 것이며, 화상의 다이나믹 레인지를 정확하게 재현할 수 있도록 하는 것이다.

본 발명의 제1 측면의 화상 처리 장치는, 화상을 부호화 처리하여 비트 스트림을 생성하는 부호화부와, Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보를 설정하는 설정부와, 상기 부호화부에 의해 생성된 비트 스트림과 상기 설정부에 의해 설정된 다이나믹 레인지 특성 정보를 전송하는 전송부를 구비한다.

상기 설정부는, Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 코드를 나타내는 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정할 수 있다.

상기 설정부는, Captured 화상의 화이트 레벨에 대하여 Developed 화상에 할당되는 코드를 나타내는 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정할 수 있다.

상기 설정부는, Captured 화상의 화이트 레벨에 대하여 Developed 화상에 할당되는 코드를 나타내는 화이트 레벨 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정할 수 있다.

상기 설정부는, Developed 화상의 화이트 레벨에 할당되는 코드의 최대값을 나타내는 최대 화이트 레벨 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정할 수 있다.

상기 설정부는, Developed 화상의 블랙 레벨의 코드를 나타내는 블랙 레벨 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정할 수 있다.

상기 설정부는, Developed 화상의 그레이 레벨의 코드를 나타내는 그레이 레벨 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정할 수 있다.

상기 설정부는, Captured 화상의 화이트 레벨의 최대값을 나타내는 최대 화이트 레벨 정보를, 상기 다이나믹 레인지 특성 정보로서 설정할 수 있다.

상기 설정부는, 상기 비트 스트림을 복호 처리한 화상의 주목 영역의 휘도 레인지를 나타내는 정보를, 상기 다이나믹 레인지 특성 정보로서 설정할 수 있다.

상기 설정부는, 상기 비트 스트림을 복호 처리한 화상의 주목 영역의 위치 및 오프셋을 나타내는 정보를, 상기 다이나믹 레인지 특성 정보로서 설정할 수 있다.

상기 전송부는, 상기 다이나믹 레인지 특성 정보를, 상기 비트 스트림을 복호 처리한 화상을 표시할 때에 사용하는 보조 정보로서 전송할 수 있다.

상기 전송부는, 상기 다이나믹 레인지 특성 정보를, 기존의 보조 정보를 확장한 확장 보조 정보로서 전송할 수 있다.

상기 전송부는, 상기 다이나믹 레인지 특성 정보를, tone_mapping_information SEI(Supplemental enhancement information)로서 전송할 수 있다.

상기 전송부는, tone_mapping_information SEI를 대상으로, 상기 다이나믹 레인지 특성 정보를 전송할 때에 사용하는 model_id를 확장하여, 상기 다이나믹 레인지 특성 정보를 SEI로서 전송할 수 있다.

상기 전송부는, 상기 다이나믹 레인지 특성 정보를, 상기 화상의 유용성을 시퀀스 단위로 나타내는 VUI(Video Usability Information)로서 전송할 수 있다.

상기 부호화부는, AVC/H.264 규격에 준한 부호화 방식에 따라, 상기 화상을 부호화 처리할 수 있다.

본 발명의 제1 측면의 화상 처리 방법은, 화상을 부호화 처리하여 비트 스트림을 생성하고, Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보를 설정하고, 생성된 비트 스트림과 설정된 다이나믹 레인지 특성 정보를 전송한다.

본 발명의 제2 측면의 화상 처리 장치는, 비트 스트림을 복호 처리하여 화상을 생성하는 복호부와, Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보를 사용하여, 상기 복호부에 의해 생성된 화상에 대한 다이나믹 레인지를 조정하는 화상 조정부를 구비한다.

상기 비트 스트림과, 상기 특성 정보를 수취하는 수취부를 더 구비하고, 상기 복호부는, 상기 수취부에 의해 수취된 비트 스트림을 복호 처리하고, 상기 화상 조정부는, 상기 수취부에 의해 수취된 다이나믹 레인지 특성 정보를 사용하여, 상기 복호부에 의해 생성된 화상에 대한 다이나믹 레인지를 조정할 수 있다.

본 발명의 제2 측면의 화상 처리 방법은, 비트 스트림을 복호 처리하여 화상을 생성하고, Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보를 사용하여, 생성된 화상에 대한 다이나믹 레인지를 조정한다.

본 발명의 제1 측면에 있어서는, 화상을 부호화 처리하여 비트 스트림이 생성되고, Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보가 설정된다. 그리고, 생성된 비트 스트림과 설정된 다이나믹 레인지 특성 정보가 전송된다.

본 발명의 제2 측면에 있어서는, 비트 스트림을 복호 처리하여 화상이 생성된다. 그리고, Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보를 사용하여, 생성된 화상에 대한 다이나믹 레인지가 조정된다.

또한, 상술한 화상 처리 장치는, 독립한 장치이어도 되고, 1개의 화상 부호화 장치 또는 화상 복호 장치를 구성하고 있는 내부 블록이어도 된다.

본 발명의 제1 측면에 의하면, 화상을 부호화할 수 있다. 특히, 화상의 다이나믹 레인지를 정확하게 재현할 수 있다.

본 발명의 제2 측면에 의하면, 화상을 복호할 수 있다. 특히, 화상의 다이나믹 레인지를 정확하게 재현할 수 있다.

도 1은, SEI의 신택스의 예를 나타내는 도면이다.
도 2는, 톤 맵핑 SEI의 신택스의 예를 나타내는 도면이다.
도 3은, 본 기술을 적용한 부호화 장치의 제1 실시 형태의 구성예를 도시하는 블록도이다.
도 4는, 도 1의 부호화부의 구성예를 도시하는 블록도이다.
도 5는, 다이나믹 레인지의 특성 정보를 설명하는 도면이다.
도 6은, 다이나믹 레인지의 특성 정보를 설명하는 도면이다.
도 7은, 다이나믹 레인지의 특성 정보의 예를 나타내는 도면이다.
도 8은, 톤 맵핑 SEI의 신택스의 예를 나타내는 도면이다.
도 9는, 톤 맵핑 SEI의 신택스의 다른 예를 나타내는 도면이다.
도 10은, 카메라의 감도와 노출 인덱스가 지시하는 값의 의미의 테이블을 나타내는 도면이다.
도 11은, 루미넌스 다이나믹 레인지 SEI의 신택스의 예를 나타내는 도면이다.
도 12는, VUI의 신택스의 예를 나타내는 도면이다.
도 13은, VUI의 신택스의 다른 예를 나타내는 도면이다.
도 14는, VUI의 신택스의 또 다른 예를 나타내는 도면이다.
도 15는, 다이나믹 레인지의 특성 정보의 신택스의 예를 나타내는 도면이다.
도 16은, 도 3의 부호화 장치의 생성 처리를 설명하는 흐름도이다.
도 17은, 도 16의 부호화 처리의 상세를 설명하는 흐름도이다.
도 18은, 도 16의 부호화 처리의 상세를 설명하는 흐름도이다.
도 19는, 본 기술을 적용한 복호 장치의 제1 실시 형태의 구성예를 도시하는 블록도이다.
도 20은, 도 19의 복호부의 구성예를 도시하는 블록도이다.
도 21은, 도 19의 복호 장치에 의한 표시 처리를 설명하는 흐름도이다.
도 22는, 도 21의 복호 처리의 상세를 설명하는 흐름도이다.
도 23은, 본 기술을 적용한 부호화 장치의 제2 실시 형태의 구성예를 도시하는 블록도이다.
도 24는, 도 23의 부호화부의 구성예를 도시하는 블록도이다.
도 25는, 본 기술을 적용한 복호 장치의 제2 실시 형태의 구성예를 도시하는 블록도이다.
도 26은, 도 25의 복호부의 구성예를 도시하는 블록도이다.
도 27은, 다시점 화상 부호화 방식의 예를 도시하는 도면이다.
도 28은, 본 발명을 적용한 다시점 화상 부호화 장치의 주된 구성예를 도시하는 도면이다.
도 29는, 본 발명을 적용한 다시점 화상 복호 장치의 주된 구성예를 도시하는 도면이다.
도 30은, 계층 화상 부호화 방식의 예를 도시하는 도면이다.
도 31은, 본 발명을 적용한 계층 화상 부호화 장치의 주된 구성예를 도시하는 도면이다.
도 32는, 본 발명을 적용한 계층 화상 복호 장치의 주된 구성예를 도시하는 도면이다.
도 33은, 컴퓨터의 주된 구성예를 도시하는 블록도이다.
도 34는, 텔레비전 장치의 개략적인 구성의 일례를 도시하는 블록도이다.
도 35는, 휴대 전화기의 개략적인 구성의 일례를 도시하는 블록도이다.
도 36은, 기록 재생 장치의 개략적인 구성의 일례를 도시하는 블록도이다.
도 37은, 촬상 장치의 개략적인 구성의 일례를 도시하는 블록도이다.

이하, 본 발명을 실시하기 위한 형태(이하, 실시 형태라고 함)에 대하여 설명한다. 또한, 설명은 이하의 순서로 행한다.

1. 제1 실시 형태(HEVC 방식의 부호화·복호 장치)

2. 제2 실시 형태(AVC 방식의 부호화·복호 장치)

3. 제3 실시 형태(다시점 화상 부호화·다시점 화상 복호 장치)

4. 제4 실시 형태(계층 화상 부호화·계층 화상 복호 장치)

5. 제5 실시 형태(컴퓨터)

6. 응용예

<제1 실시 형태>

[부호화 장치의 제1 실시 형태의 구성예]

도 3은, 본 기술을 적용한 화상 처리 장치로서의 부호화 장치의 제1 실시 형태의 구성예를 도시하는 블록도이다.

도 3의 부호화 장치(1)는, 부호화부(2), 설정부(3) 및 전송부(4)에 의해 구성되고, 촬영(Captured) 화상 등의 화상을 HEVC 방식으로 부호화한다.

구체적으로는, 부호화 장치(1)의 부호화부(2)에는, 프레임 단위의 촬영 화상 등의 화상이 입력 신호로서 입력된다. 부호화부(2)는, 입력 신호를 HEVC 방식으로 부호화하고, 그 결과 얻어지는 부호화 데이터를 설정부(3)에 공급한다.

설정부(3)는, SPS(Sequence Parameter Set), PPS(Picture Parameter Set), 부호화 데이터에 대응하는 화상의 특성(유용성)을 시퀀스마다 나타내는 VUI(Video Usability Information), SEI(Supplemental Enhancement Information) 등을 설정한다. 설정부(3)는, 설정된 SPS, PPS, VUI 및 SEI와, 부호화부(2)로부터 공급되는 부호화 데이터로부터, 부호화 스트림을 생성한다. 설정부(3)는, 부호화 스트림을 전송부(4)에 공급한다.

전송부(4)는, 설정부(3)로부터 공급되는 부호화 스트림을, 후술하는 복호 장치에 전송한다.

[부호화부의 구성예]

도 4는, 도 3의 부호화부(2)의 구성예를 도시하는 블록도이다.

도 4의 부호화부(2)는 A/D 변환부(11), 화면 재배열 버퍼(12), 연산부(13), 직교 변환부(14), 양자화부(15), 가역 부호화부(16), 축적 버퍼(17), 역양자화부(18), 역직교 변환부(19), 가산부(20), 디블록 필터(21), 프레임 메모리(22), 스위치(23), 인트라 예측부(24), 움직임 예측·보상부(25), 예측 화상 선택부(26) 및 레이트 제어부(27)를 포함하도록 구성된다.

또한, 디블록 필터(21) 및 프레임 메모리(22)의 사이에는, 적응 오프셋 필터(41)와 적응 루프 필터(42)가 구비되어 있다.

구체적으로는, 부호화부(2)의 A/D 변환부(11)는, 입력 신호로서 입력된 프레임 단위의 화상을 A/D 변환하고, 화면 재배열 버퍼(12)에 출력하여 기억시킨다. 화면 재배열 버퍼(12)는, 기억한 표시의 순서의 프레임 단위의 화상을, GOP(Group of Picture) 구조에 따라, 부호화를 위한 순서대로 재배열, 연산부(13), 인트라 예측부(24) 및 움직임 예측·보상부(25)에 출력한다.

연산부(13)는, 예측 화상 선택부(26)로부터 공급되는 예측 화상과, 화면 재배열 버퍼(12)로부터 출력된 부호화 대상의 화상 차분을 연산함으로써 부호화를 행한다. 구체적으로는, 연산부(13)는, 화면 재배열 버퍼(12)로부터 출력된 부호화 대상의 화상으로부터, 예측 화상 선택부(26)로부터 공급되는 예측 화상을 감산함으로써 부호화를 행한다. 연산부(13)는, 그 결과 얻어지는 화상을, 잔차 정보로서 직교 변환부(14)에 출력한다. 또한, 예측 화상 선택부(26)로부터 예측 화상이 공급되지 않은 경우, 연산부(13)는, 화면 재배열 버퍼(12)로부터 판독된 화상을 그대로 잔차 정보로서 직교 변환부(14)에 출력한다.

직교 변환부(14)는, 연산부(13)로부터의 잔차 정보에 대하여 직교 변환을 실시하고, 직교 변환의 결과 얻어지는 계수를 양자화부(15)에 공급한다.

양자화부(15)는, 직교 변환부(14)로부터 공급되는 계수를 양자화한다. 양자화된 계수는, 가역 부호화부(16)에 입력된다.

가역 부호화부(16)는, 최적 인트라 예측 모드를 나타내는 정보(이하, 인트라 예측 모드 정보라고 함)를 인트라 예측부(24)로부터 취득한다. 또한, 최적 인터 예측 모드를 나타내는 정보(이하, 인터 예측 모드 정보라고 함), 움직임 벡터, 참조 화상을 특정하기 위한 정보 등을 움직임 예측·보상부(25)로부터 취득한다. 또한, 가역 부호화부(16)는, 적응 오프셋 필터(41)로부터 저장 플래그, 인덱스 또는 오프셋 및 종류 정보를 오프셋 필터 정보로서 취득하고, 적응 루프 필터(42)로부터 필터 계수를 취득한다.

가역 부호화부(16)는, 양자화부(15)로부터 공급되는 양자화된 계수에 대하여, 가변장 부호화(예를 들어, CAVLC(Context-Adaptive Variable Length Coding) 등), 산술 부호화(예를 들어, CABAC(Context-Adaptive Binary Arithmetic Coding) 등) 등의 가역 부호화를 행한다.

또한, 가역 부호화부(16)는, 인트라 예측 모드 정보 또는 인터 예측 모드 정보, 움직임 벡터, 참조 화상을 특정하는 정보, 오프셋 필터 정보 및 필터 계수 등을, 부호화에 관한 부호화 정보로서 가역 부호화한다. 가역 부호화부(16)는, 가역 부호화된 부호화 정보와 계수를, 부호화 데이터로서 축적 버퍼(17)에 공급하고, 축적시킨다. 또한, 가역 부호화된 부호화 정보는, 가역 부호화된 계수의 헤더 정보로 되어도 된다.

축적 버퍼(17)는, 가역 부호화부(16)로부터 공급되는 부호화 데이터를 일시적으로 기억한다. 또한, 축적 버퍼(17)는, 기억하고 있는 부호화 데이터를, 도 3의 설정부(3)에 공급한다.

또한, 양자화부(15)로부터 출력된 양자화된 계수는, 역양자화부(18)에도 입력되고, 역양자화된 후, 역직교 변환부(19)에 공급된다.

역직교 변환부(19)는, 역양자화부(18)로부터 공급되는 계수에 대하여 역직교 변환을 실시하고, 그 결과 얻어지는 잔차 정보를 가산부(20)에 공급한다.

가산부(20)는, 역직교 변환부(19)로부터 공급되는 복호 대상의 화상으로서의 잔차 정보와, 예측 화상 선택부(26)로부터 공급되는 예측 화상을 가산하여, 국부적으로 복호된 화상을 얻는다. 또한, 예측 화상 선택부(26)로부터 예측 화상이 공급되지 않은 경우, 가산부(20)는, 역직교 변환부(19)로부터 공급되는 잔차 정보를 국부적으로 복호된 화상으로 한다. 가산부(20)는, 국부적으로 복호된 화상을 디블록 필터(21)에 공급함과 함께, 프레임 메모리(22)에 공급하여 축적시킨다.

디블록 필터(21)는, 가산부(20)로부터 공급되는 국부적으로 복호된 화상을 필터링함으로써, 블럭 노이즈를 제거한다. 디블록 필터(21)는, 그 결과 얻어지는 화상을 적응 오프셋 필터(41)에 공급한다.

적응 오프셋 필터(41)는, 디블록 필터(21)에 의한 적응 디블록 필터 처리 후의 화상에 대하여, 주로 링잉을 제거하는 적응 오프셋 필터(SAO: Sample adaptive offset) 처리를 행한다.

보다 상세하게는, 적응 오프셋 필터(41)는, 최대의 부호화 단위인 LCU(Largest Coding Unit)마다 적응 오프셋 필터 처리의 종류를 결정하고, 그 적응 오프셋 필터 처리에서 사용되는 오프셋을 구한다. 적응 오프셋 필터(41)는, 구해진 오프셋을 사용하여, 적응 디블록 필터 처리 후의 화상에 대하여, 결정된 종류의 적응 오프셋 필터 처리를 행한다. 그리고, 적응 오프셋 필터(41)는, 적응 오프셋 필터 처리 후의 화상을 적응 루프 필터(42)에 공급한다.

또한, 적응 오프셋 필터(41)는, 오프셋을 저장하는 버퍼를 갖고 있다. 적응 오프셋 필터(41)는, LCU마다, 적응 디블록 필터 처리에 사용된 오프셋이 이미 버퍼에 저장되어 있는지 여부를 판정한다.

적응 오프셋 필터(41)는, 적응 디블록 필터 처리에 사용된 오프셋이 이미 버퍼에 저장되어 있다고 판정한 경우, 오프셋이 버퍼에 저장되어 있는지를 나타내는 저장 플래그를, 오프셋이 버퍼에 저장되어 있는 것을 나타내는 값(여기서는 1)으로 설정한다.

그리고, 적응 오프셋 필터(41)는, LCU마다, 1로 설정된 저장 플래그, 버퍼에서의 오프셋의 저장 위치를 나타내는 인덱스 및 행하여진 적응 오프셋 필터 처리의 종류를 나타내는 종류 정보를 가역 부호화부(16)에 공급한다.

한편, 적응 오프셋 필터(41)는, 적응 디블록 필터 처리에 사용된 오프셋이 아직 버퍼에 저장되어 있지 않은 경우, 그 오프셋을 순서대로 버퍼에 저장한다. 또한, 적응 오프셋 필터(41)는, 저장 플래그를, 오프셋이 버퍼에 저장되어 있지 않은 것을 나타내는 값(여기서는 0)으로 설정한다. 그리고, 적응 오프셋 필터(41)는, LCU마다, 0으로 설정된 저장 플래그, 오프셋 및 종류 정보를 가역 부호화부(16)에 공급한다.

적응 루프 필터(42)는, 적응 오프셋 필터(41)로부터 공급되는 적응 오프셋 필터 처리 후의 화상에 대하여, 예를 들어 LCU마다 적응 루프 필터(ALF: Adaptive Loop Filter) 처리를 행한다. 적응 루프 필터 처리로서는, 예를 들어 2차원의 위너 필터(Wiener Filter)에 의한 처리가 이용된다. 물론, 위너 필터 이외의 필터가 사용되어도 된다.

구체적으로는, 적응 루프 필터(42)는, LCU마다, 화면 재배열 버퍼(12)로부터 출력되는 화상인 원 화상과 적응 루프 필터 처리 후의 화상 잔차가 최소가 되도록, 적응 루프 필터 처리에서 사용되는 필터 계수를 산출한다. 그리고, 적응 루프 필터(42)는, 적응 오프셋 필터 처리 후의 화상에 대하여, 산출된 필터 계수를 사용하여, LCU마다 적응 루프 필터 처리를 행한다.

적응 루프 필터(42)는, 적응 루프 필터 처리 후의 화상을 프레임 메모리(22)에 공급한다. 또한, 적응 루프 필터(42)는, 필터 계수를 가역 부호화부(16)에 공급한다.

또한, 여기에서는, 적응 루프 필터 처리는, LCU마다 행하여지는 것으로 하지만, 적응 루프 필터 처리의 처리 단위는 LCU에 한정되지 않는다. 단, 적응 오프셋 필터(41)와 적응 루프 필터(42)의 처리 단위를 맞춤으로써, 처리를 효율적으로 행할 수 있다.

프레임 메모리(22)에 축적된 화상은, 참조 화상으로서 스위치(23)를 통하여 인트라 예측부(24) 또는 움직임 예측·보상부(25)에 출력된다.

인트라 예측부(24)는, 프레임 메모리(22)로부터 스위치(23)를 통하여 판독된 디블록 필터(21)로 필터링되어 있지 않은 참조 화상을 사용하여, 타일 및 슬라이스 단위로, 후보가 되는 모든 인트라 예측 모드의 인트라 예측 처리를 행한다.

또한, 인트라 예측부(24)는, 화면 재배열 버퍼(12)로부터 판독된 화상과, 인트라 예측 처리의 결과 생성되는 예측 화상에 기초하여, 후보가 되는 모든 인트라 예측 모드에 대하여 비용 함수값(상세는 후술함)을 산출한다. 그리고, 인트라 예측부(24)는, 비용 함수값이 최소가 되는 인트라 예측 모드를, 최적 인트라 예측 모드로 결정한다.

인트라 예측부(24)는, 최적 인트라 예측 모드에서 생성된 예측 화상 및 대응하는 비용 함수값을, 예측 화상 선택부(26)에 공급한다. 인트라 예측부(24)는, 예측 화상 선택부(26)로부터 최적 인트라 예측 모드에서 생성된 예측 화상의 선택이 통지된 경우, 인트라 예측 모드 정보를 가역 부호화부(16)에 공급한다.

또한, 비용 함수값은, RD(Rate Distortion) 비용이라고도 하며, 예를 들어 H.264/AVC 방식에서의 참조 소프트웨어인 JM(Joint Model)에서 정해져 있는 바와 같은 High Complexity 모드이거나, Low Complexity 모드 중 어느 한쪽의 방법에 기초하여 산출된다.

구체적으로는, 비용 함수값의 산출 방법으로서 High Complexity 모드가 채용될 경우, 후보가 되는 모든 예측 모드에 대하여, 임시로 가역 부호화까지가 행하여지고, 다음의 식(1)로 표현되는 비용 함수값이 각 예측 모드에 대하여 산출된다.

Cost(Mode)=D+λ·R ···(1)

D는 원 화상과 복호 화상의 차분(왜곡), R은 직교 변환의 계수까지 포함한 발생 부호량, λ은 양자화 파라미터 QP의 함수로서 부여되는 라그랑지 승수이다.

한편, 비용 함수값의 산출 방법으로서 Low Complexity 모드가 채용될 경우, 후보가 되는 모든 예측 모드에 대하여, 복호 화상의 생성 및 예측 모드를 나타내는 정보 등의 헤더 비트의 산출이 행하여지고, 다음의 식(2)로 표현되는 비용 함수값이 각 예측 모드에 대하여 산출된다.

Cost(Mode)=D+QPtoQuant(QP)·Header_Bit ···(2)

D는 원 화상과 복호 화상의 차분(왜곡), Header_Bit는 예측 모드에 대한 헤더 비트, QPtoQuant는 양자화 파라미터 QP의 함수로서 부여되는 함수이다.

Low Complexity 모드에서는, 모든 예측 모드에 대하여, 복호 화상을 생성하기만 하면 되고, 가역 부호화를 행할 필요가 없으므로, 연산량이 적어도 충분하다.

움직임 예측·보상부(25)는, 타일 및 슬라이스 단위로, 후보가 되는 모든 인터 예측 모드의 움직임 예측·보상 처리를 행한다. 구체적으로는, 움직임 예측·보상부(25)는, 타일 및 슬라이스 단위로, 화면 재배열 버퍼(12)로부터 공급되는 화상과, 프레임 메모리(22)로부터 스위치(23)를 통하여 판독되는 필터링된 참조 화상에 기초하여, 후보가 되는 모든 인터 예측 모드의 움직임 벡터를 검출한다. 그리고, 움직임 예측·보상부(25)는, 타일 및 슬라이스 단위로, 그 움직임 벡터에 기초하여 참조 화상에 보상 처리를 실시하고, 예측 화상을 생성한다.

이 때, 움직임 예측·보상부(25)는, 화면 재배열 버퍼(12)로부터 공급되는 화상과 예측 화상에 기초하여, 후보가 되는 모든 인터 예측 모드에 대하여 비용 함수값을 산출하고, 비용 함수값이 최소가 되는 인터 예측 모드를 최적 인터 예측 모드로 결정한다. 그리고, 움직임 예측·보상부(25)는, 최적 인터 예측 모드의 비용 함수값과, 대응하는 예측 화상을 예측 화상 선택부(26)에 공급한다. 또한, 움직임 예측·보상부(25)는, 예측 화상 선택부(26)로부터 최적 인터 예측 모드에서 생성된 예측 화상의 선택이 통지된 경우, 인터 예측 모드 정보, 대응하는 움직임 벡터, 참조 화상을 특정하는 정보 등을 가역 부호화부(16)에 출력한다.

예측 화상 선택부(26)는, 인트라 예측부(24) 및 움직임 예측·보상부(25)로부터 공급되는 비용 함수값에 기초하여, 최적 인트라 예측 모드와 최적 인터 예측 모드 중, 대응하는 비용 함수값이 작은 쪽을, 최적 예측 모드로 결정한다. 그리고, 예측 화상 선택부(26)는, 최적 예측 모드의 예측 화상을, 연산부(13) 및 가산부(20)에 공급한다. 또한, 예측 화상 선택부(26)는, 최적 예측 모드의 예측 화상의 선택을 인트라 예측부(24) 또는 움직임 예측·보상부(25)에 통지한다.

레이트 제어부(27)는, 축적 버퍼(17)에 축적된 부호화 데이터에 기초하여, 오버플로우 또는 언더플로우가 발생하지 않도록 양자화부(15)의 양자화 동작의 레이트를 제어한다.

[다이나믹 레인지의 특성 정보의 예]

이어서, 도 5를 참조하여, 도 3의 설정부(3)에 의해 설정되는 다이나믹 레인지의 특성 정보에 대하여 설명한다. 또한, 도 5에서의 종축이나 횡축의 값은 일례이며, 그들의 값에 한정되지 않는다.

도 5의 예에 있어서, 횡축은, 촬상(captured) 화상의 화이트 레벨을 나타내고 있다. 종축은, 현상(developed) 화상에 할당하는 디지털 코드를 나타내고 있다. 현상 화상이란, 즉, 비트 계조 등을 한 화상이다.

횡축에서의 800％는, 카메라의 감도 및 최적 노출(촬영 시 및 현상 시)의 값이며, 또한, 촬영 시의 최대 휘도이다. 이 값은, 다이나믹 레인지의 특성 정보의 하나인 camera_iso_sensitivity 및 max_image_white_level로서 각각 설정되어 전송된다.

또한, 이 예에서는, 카메라의 감도 및 최적 노출값과 촬영 시의 최대 휘도가 동일한 값으로 되어 있지만, 상이한 경우도 있다.

이 최대 화이트 레벨에 대응하는 종축의 값(940)은, 현상 화상에 대하여 최대 화이트 레벨이 할당되는 디지털값이며, 이 값이, 다이나믹 레인지의 특성 정보의 하나인 max_white_level_code_value로서 설정되어 디코드측에 전송된다.

횡축에서의 100％는, 디스플레이에서의 기준의 값(화이트 레벨)이다. 이 화이트 레벨에 대한 종축의 값은, 현상 화상에 대하여 화이트 레벨(백색 100％)이 할당되는 디지털값이며, 이 값이, 다이나믹 레인지의 특성 정보의 하나인 white_level_code_value로서 설정되어 디코드측에 전송된다.

횡축에서의 20％는, Gray를 나타내는 표준 노출로서 범용적으로 사용되는 레벨(그레이 레벨)이며, 카메라측에서 설정되는 경우가 많다. 이 그레이 레벨에 대한 종축의 값은, 현상 화상에 대하여 그레이 레벨(백색 20％)이 할당되는 디지털값이며, 이 값이, 다이나믹 레인지의 특성 정보의 하나인 gray_level_code_value로서 설정되어 디코드측에 전송된다.

횡축에서의 0％는 블랙 레벨이다. 이 블랙 레벨에 대한 종축의 값(64)은, 현상 화상에 대하여 블랙 레벨(백색 0％)이 할당되는 디지털값이며, 이 값이, 다이나믹 레인지의 특성 정보의 하나인 black_level_code_value로서 설정되어 디코드측에 전송된다.

이상과 같이, 촬영(Captured) 화상에 대하여, 현상(Developed) 화상에 할당되는 다이나믹 레인지의 코드를 나타내는 코드 정보가, 다이나믹 레인지의 특성 정보로서 설정되어 디코드측에 전송된다. 즉, 촬영(Captured) 화상에 대하여, 현상(Developed) 화상에 할당되는 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보가 설정되어 디코드측에 전송된다.

이러한 다이나믹 레인지의 특성 정보를, 콘텐츠의 질을 나타내는 정보(다이나믹 레인지가 기존의 콘텐츠에 비해 넓은 것 등, 화이트 레벨에 관한 화상의 정보 품질이 높은 것을 나타내는 정보, 콘텐츠가 갖고 있는 포텐셜이 높은 것을 나타내는 정보)로서, 콘텐츠 제작측으로부터 명시하여 표시측(디코드측)에 전송한다.

콘텐츠 제작측은, 작성자가 의도한 화상(의 상태)으로 제공하고 싶은 모티베이션이 있다. 표시측에서는, 이 정보를 기준으로 하여 다이나믹 레인지를 확장하는(올리는), 또는 좁게 하는(내리는) 처리를 행한다. 또한, 이 정보를 참조함으로써, 표시측에서 이하의 처리를 적확하게 행할 수 있다.

예를 들어, 자신의 표시 능력보다 다이나믹 레인지가 높은 화상이 입력된 경우, 자신의 표시 능력에 맞추어, 톤 맵핑 등을 사용하여 레인지를 낮추는 처리를 행할 수 있다.

또한, 반대로, 자신의 표시 능력보다 다이나믹 레인지가 낮은 화상이 입력된 경우, 자신의 표시 능력에 맞추어, 톤 맵핑 등을 사용하여 레인지를 올리는 처리를 행할 수 있다.

이 정보가 없는 경우, 디코드 화상을 표시측에서 해석한 뒤에 톤 맵핑을 행할 필요가 있지만, 다이나믹 레인지의 특성 정보를 보냄으로써, 디코드 화상의 해석이 필요없게 되고, 또한, 다이나믹 레인지의 조정을 적확하게 행할 수 있다.

또한, 도 6에 도시된 바와 같이, black_level_code_value와, max_white_level_code_value의 사이에 있어서, white_level_code_value 이외에도 복수의 white_level_code_value를 설정하여 전송하도록 할 수도 있다.

예를 들어, 도 6의 예에 있어서는, 촬영 화상의 화이트 레벨이 0％ 내지 800％인 사이에 있어서, white_level_code_value_0 내지 white_level_code_value_4가 설정되어 전송되는 예가 나타나 있다.

또한, 상기 설명에 있어서는, max_white_level_code_value, white_level_code_value 및 black_level_code_value를, value(값)로서 설정하는 예를 설명했지만, Range(범위)로서 설정하여 전송하도록 해도 된다.

도 7은 다이나믹 레인지의 특성 정보의 예를 나타내는 도면이다.

다이나믹 레인지의 특성 정보는, camera_iso_sensitivity, output_exposure_index, screen_lw, black_level_code_value, gray_level_code_value, white_level_code_value 및 max_white_level_code_value를 포함하도록 구성되어 있다.

camera_iso_sensitivity는, 도 5를 참조하여 상술한 바와 같이, 화상을 촬영했을 때의 카메라의 감도를 명시하고 있다. output_exposure_index는, 화상의 현상 공정에서 사용하도록 설정되어 있는 노출 인덱스(즉, 현상 시의 노출 인덱스)를 명시하고 있다. ref_screen_lw는, 화상의 현상 공정에서 사용하도록 설정되어 있는 화이트 레벨의 참조 표시 휘도를 명시하고 있다.

black_level_code_value, gray_level_code_value, white_level_code_value 및 max_white_level_code_value는, 도 5를 참조하여 상술한 바와 같이, 블랙 레벨, 화이트 레벨, 그레이 레벨 및 최대 화이트 레벨이 할당되는 휘도의 코드 데이터를 각각 명시하고 있다.

즉, 다이나믹 레인지의 특성 정보로서는, 촬영 시(captured image)의 최대 휘도, 촬영 시의 최적 노출값, 현상 시(developed image)의 최적 노출값, 현상 후의 최대 화이트 레벨이 할당되어 있는 디지털값, 현상 후의 화이트 레벨(백색 100％)이 할당되어 있는 디지털값, 현상 후의 그레이 레벨이 할당되어 있는 디지털값, 현상 후의 블랙 레벨이 할당되어 있는 디지털값 및 현상 후의 백색 100％부터 최대 백색 0％까지의 사이의 디지털값이 포함되어 있는 것이 바람직하다.

상술한 이들 다이나믹 레인지의 특성 정보는, 이하에 설명하는 전송 방법 1 내지 4의 어느 한 방법으로 디코드측에 전송된다.

먼저, 도 8을 참조하여, 전송 방법(1)으로서, 다이나믹 레인지의 특성 정보를 기존의 SEI(Supplemental enhancement information)를 확장하여 전송하는 예에 대하여 설명한다. 도 8은 톤 맵핑 SEI(tone_mapping_information SEI)의 예를 나타내는 도면이다. SEI는, 부호화 스트림을 복호 처리한 화상을 표시할 때에 사용하는 보조 정보이다.

상술한 다이나믹 레인지의 특성 정보는, 도 8의 테두리 안에 나타낸 바와 같이, 톤 맵핑 SEI에서의 모델 ID(model_id)=4를 확장함으로써, 톤 맵핑 SEI로 설정되어 전송된다.

또한, 테두리 안 중, 해칭되어 있지 않은 camera_iso_sensitivity 및 output_exposure_index는, 카메라의 설정 파라미터로서는 기존의 정보(종래 기술)이다. 단, 그들 정보를 부호화 비트 스트림에 넣어서 전송한다는 점, 또는, 그들 정보를 사용하여 다이나믹 레인지를 조정한다는 점에서는, 종래 기술과 상이하다.

한편, 테두리 안 중, 해칭되어 있는 ref_screen_lw, max_image_white_level, black_level_code_value, white_level_code_value, max_white_level_code_value는, 파라미터 자체가 새롭게 설정한 것이며, 종래 기술과 상이하다.

여기서, 종래의 톤 맵핑 SEI에 있어서는, RGB마다 별도의 성분이 사용되고 있었지만, 다이나믹 레인지의 특성 정보는, 디코딩한 화상의 휘도 성분을 적용 대상으로 한다.

또한, TBD는 To BE Determined Value이며, 미리 설정된 값 또는, 콘텐츠를 제작했을 때에 설정된 파라미터인 것을 나타내고 있다.

도 9는, 톤 맵핑 SEI의 다른 예를 나타내는 도면이다.

도 9의 예에 있어서도, 상술한 다이나믹 레인지의 특성 정보는, 테두리 안에 나타낸 바와 같이, 톤 맵핑 SEI에서의 모델 ID(model_id)=4를 확장함으로써, 톤 맵핑 SEI로 설정되어 전송된다.

camera_iso_sensitivity_idc는, 카메라를 취득할 수 있는 감도를 나타내는 코드를 명시하고 있다. 이 코드의 의미는, 후술하는 도 10의 테이블에 나타나 있다. camera_iso_sensitivity_idc가 Extended_ISO를 지시할 경우, 다음 행의 camera_iso_sensitivity에 의해 ISO_number가 표현된다. 즉, camera_iso_sensitivity_idc를 Extended_ISO로 함으로써, camera_iso_sensitivity_idc를 좋아하는 값으로 설정할 수 있다.

exposure_index_idc는, 촬영 시의 노출 인덱스를 나타내는 코드를 명시하고 있다. 이 코드의 의미는, 후술하는 도 10의 테이블에 나타나 있다. exposure_index _idc가 Extended_ISO를 지시할 경우, 다음 행의 exposure_index_rating에 의해 ISO_number가 표현된다. 즉, exposure_index_idc를 Extended_ISO로 함으로써, exposure_index_idc를 좋아하는 값으로 설정할 수 있다.

sign_image_exposure_value는, 촬영 시의 노출값에 대한 현상 시의 노출의 상대적인 부호를 명시하고 있다. image_expoure_value0은, 촬영 시의 노출값에 대한 현상 시의 노출의 상대적인 값 중 분자의 값을 명시하고 있다. image_expoure_value1은, 촬영 시의 노출값에 대한 현상 시의 노출의 상대적인 값 중 분모의 값을 명시하고 있다.

즉, 촬영 시에 대하여 현상 시는, sign_image_exposure_value, image_expoure_value0 및 image_expoure_value1을 사용하여, 어느 정도 노출값을 내렸는가라는 상대적인 값을 나타냄으로써, 현상 시의 노출값(도 8의 output_exposure_index)을 유도할 수 있다. 이에 의해, 현상 시의 노출값을 소수로 나타내는 것이 가능해진다.

ref_screen_lw는, 몇cd/m²(칸델라)의 백색으로 표시하는 것을 상정하여 만들어진 콘텐츠이며, 그 백색으로 표시하는 것이 좋은 것을 명시하고 있다.

max_image_white_level은, 기준의 화이트 레벨을 참조하여 정수의 퍼센트로서 표현된 화상의 휘도의 다이나믹 레인지를 명시하고 있다.

black_level_code_value, white_level_code_value 및 max_white_level_code_value는, 도 8의 예의 경우와 마찬가지로, 블랙 레벨, 화이트 레벨 및 최대 화이트 레벨이 할당되는 휘도의 코드 데이터를 각각 명시하고 있다.

또한, 도 9의 예에 있어서도, 도 8의 예의 경우와 마찬가지로, 테두리 안 중, 해칭되어 있지 않은 camera_iso_sensitivity, exposure_index_idc, sign_image_exposure, image_expoure_value0 및 image_expoure_value1은, 카메라의 설정 파라미터로서는 기존의 정보(종래 기술)이다. 이에 대해, 그 정보를 부호화 비트 스트림에 넣어서 전송한다는 점, 또는, 그들 정보를 사용하여 다이나믹 레인지를 조정한다는 점에서는 종래 기술과 상이하다.

이에 비해, 테두리 안 중, 해칭되어 있는 ref_screen_lw, max_image_white_level, black_level_code_value, white_level_code_value, max_white_level_code_value는, 파라미터 자체가 새롭게 설정한 것이며, 종래 기술과는 상이하다.

도 10은, 카메라의 감도가 지시하는 값과 노출 인덱스가 지시하는 값의 의미의 테이블을 나타내는 도면이다.

예를 들어, 지시하는 값(Indicator)이 0인 경우, ISO number는 특별히 명시되어 있지 않다. 지시하는 값이 1인 경우, ISO number가 10인 것이 명시되어 있다. 지시하는 값이 2 내지 30인 경우, 그 도시는 생략되어 있지만, ISO number가 각각 명시되어 있다.

지시하는 값이 31 내지 254인 경우, ISO number는 Reserved로 되어 있다. 지시하는 값이 255인 경우, ISO number는 Extended_ISO인 것이 명시되어 있다. ISO number는, Extended_ISO인 경우, 도 9를 참조하여 상술한 바와 같이, camera_iso_sensitivity_idc도, exposure_index_idc도, 좋아하는 값을 지시할 수 있다.

이어서, 도 11을 참조하여, 전송 방법2로서, 다이나믹 레인지의 특성 정보를 새로운(전용의) SEI를 설정하여 전송하는 방법에 대하여 설명한다. 도 11은, 루미넌스 다이나믹 레인지 SEI(luminance_dynamic_range_information SEI)의 예를 나타내는 도면이다.

즉, 도 11에 나타낸 바와 같은 루미넌스 다이나믹 레인지 SEI(luminance_dynamic_range_info)를 새롭게 설정한다. 그리고, 상술한 다이나믹 레인지의 특성 정보는, 도 11의 테두리 안에 나타낸 바와 같이, 그 루미넌스 다이나믹 레인지 SEI로 설정되어 전송된다. 또한, 도 11의 테두리 안의 다이나믹 레인지 특성 정보는, 도 8을 참조하여 상술한 다이나믹 레인지 특성 정보와 기본적으로 동일하며, 그 설명은 반복되므로 생략된다.

또한, 전송 방법3으로서는, 상술한 전송 방법 1 및 2와, VUI(Video Usability Information) 파라미터를 제휴시켜서 다이나믹 레인지 특성 정보를 전송하는 방법을 들 수 있다. VUI는, 화상의 유용성을 시퀀스 단위로 나타내는 정보이다.

도 12는, 전송 방법1과 제휴한 경우의 VUI의 신택스의 예를 나타내는 도면이다. 도 12의 예에 있어서, tone_mapping_flag(톤 맵핑 플래그)는 톤 맵핑 SEI의 유무를 나타내는 유무 정보를 나타내는 플래그이다. 톤 맵핑 플래그는, 톤 맵핑 SEI가 있는 것을 나타내는 경우 1이 되고, 톤 맵핑 SEI가 없는 것을 나타내는 경우 0이 된다.

도 13은, 전송 방법2와 제휴한 경우의 VUI의 신택스의 예를 나타내는 도면이다. 도 13의 예에 있어서, luminance_dynamic_range_flag(루미넌스 다이나믹 레인지 플래그)는, 루미넌스 다이나믹 레인지 SEI의 유무를 나타내는 유무 정보를 나타내는 플래그이다. 루미넌스 다이나믹 레인지 플래그는, 루미넌스 다이나믹 레인지 SEI가 있는 것을 나타내는 경우 1이 되고, 루미넌스 다이나믹 레인지 SEI가 없는 것을 나타내는 경우 0이 된다.

마지막으로, 전송 방법4로서, 다이나믹 레인지 특성 정보는, 상술한 VUI의 파라미터로서 전송하도록 해도 된다. 즉, 이 경우, 도 12 또는 도 13에 나타내는 플래그 대신에(또는, 플래그에 추가하여), 다이나믹 레인지 특성 정보 자체가 VUI의 파라미터로서 전송된다.

여기서, 다이나믹 레인지 특성 정보를 SEI에 넣을 경우, HEVC 방식뿐만 아니라, AVC 방식에도 적용할 수 있다. 한편, VUI에는, 디스플레이측에서 사용하는 값이 많이 들어 있으므로, 다이나믹 레인지 특성 정보를 VUI에 넣을 경우, 정보를 통합하여 둘 수 있다.

도 14는, 전송 방법4의 경우의 VUI의 신택스의 예를 나타내는 도면이다.

도 14의 VUI의 신택스에 있어서는, 테두리 상에 나타낸 바와 같이, 도 12의tone_mapping_flag(톤 맵핑 플래그)가 기술되어 있고, 톤 맵핑 플래그는, 직후(VUI 내라면 직후가 아니어도 됨)에, 다이나믹 레인지 특성 정보가 기술되어 있는 경우 1이 되고, 다이나믹 레인지 특성 정보가 기술되어 있지 않은 경우 0이 된다.

따라서, 복호측에 있어서는, 톤 맵핑 플래그가 1인 경우, 도 14의 테두리 안에 나타내는 다이나믹 레인지 특성 정보가 참조된다.

또한, 도 14에 나타낸 다이나믹 레인지 특성 정보는, 도 9를 참조하여 상술한 다이나믹 레인지 특성 정보와 동일하며, 반복하게 되므로 그 설명은 생략된다.

도 15는, 다이나믹 레인지 특성 정보의 예를 나타내는 도면이다. 또한, 다이나믹 레인지 특성 정보는, 상술한 바와 같이, 톤 맵핑 SEI, 루미넌스 다이나믹 레인지 SEI 또는, VUI 등에 기술되는 정보이며, 도 15의 예에 있어서는, 기술 위치를 특정하지 않기 위해서, 신택스의 선두에 「xxxxx()」가 기술되어 있다.

도 15의 다이나믹 레인지 특성 정보는, max_white_level_code_value 밑에, 주목 영역의 휘도 레인지, 또한/또는, 주목 영역의 위치와 오프셋을 나타내는 정보가 추가된 점이, 도 9의 다이나믹 레인지 특성 정보와 상이하다.

즉, roi_luminance_range_flag는, 주목 영역(region of interest: 흥미 영역)의 휘도 레인지, 또한/또는, 주목 영역의 위치와 오프셋을 나타내는 정보가 기술 되어 있는지 여부를 나타내는 플래그이다.

roi_luminance_range_flag의 값이 1인 경우, 솔리드 흑색 부분에 나타낸 바와 같이, min_roi_luminance_range, max_roi_luminance_range, roi_region_x, roi_region_y, roi_region_x_offset 및 roi_region_y_offset이 기술된다.

min_roi_luminance_range는, 주목 영역의 휘도 레인지의 최소값을 명시하고 있다. max_roi_luminance_range는, 주목 영역의 휘도 레인지의 최대값을 명시하고 있다. roi_region_x 및 roi_region_y는, 주목 영역의 좌측 상단 x좌표 및 y좌표를 각각 명시하고 있다.

roi_region_x offset 및 roi_region_y offset은, 좌측 상단의 roi_region_x 및 roi_region_y로부터의 오프셋의 값을 각각 나타내고 있다. 이에 의해, roi_region_x 및 roi_region_y로부터의 주목 영역을 지시할 수 있다.

이상과 같이, 주목 영역의 휘도 레인지 및(또는) 주목 영역의 위치나 그 오프셋을, 다이나믹 레인지 특성 정보에 포함하도록 했으므로, 주목 영역에 맞춘 톤 맵핑을 하고 싶다는 의도를 복호측에 전할 수 있다.

또한, 주목 영역의 휘도 레인지 대신에, 예를 들어 영화 콘텐츠와 같이, 휘도가 낮은 레인지를 보다 중시하는 흑색 중시 플래그나, 텔레비전 콘텐츠와 같이, 휘도가 높은 레인지를 보다 중시하는 백색 중시 플래그를 추가하도록 해도 된다.

종래, 디스플레이를 표현할 수 있는 해상도가 낮았으므로, 콘텐츠 제작자는, 100％ 이상의 백색을 넣어 둘 필요가 없었지만, 요즘, 높은 해상도까지 표현할 수 있는 디스플레이가 나오고 있다.

따라서, 상술한 바와 같이, 지금까지 100％ 백색밖에 갖고 있지 않았던 영상에 대하여, 그 이상의 백색을 가지게 하고, 또한, 디스플레이 능력은 다양하므로, 자기 자신에게 적합한 영상으로 하여 출력할 수 있는 정보를 갖게 하였다.

이에 의해, 디스플레이측에 있어서, 다이나믹 레인지를 정확하게 재현할 수 있다.

[부호화 장치의 처리 설명]

도 16은, 도 3의 부호화 장치(1)의 생성 처리를 설명하는 흐름도이다. 또한, 도 16의 예에 있어서는, 상술한 전송 방법3의 예에 대하여 설명한다.

도 16의 스텝 S1에 있어서, 부호화 장치(1)의 부호화부(2)는, 외부로부터 입력 신호로서 입력되는 프레임 단위의 촬영 화상 등의 화상을 HEVC 방식으로 부호화하는 부호화 처리를 행한다. 이 부호화 처리의 상세는, 후술하는 도 17 및 도 18을 참조하여 설명한다.

스텝 S2에 있어서, 설정부(3)는 SPS를 설정한다. 스텝 S3에 있어서, 설정부(3)는 PPS를 설정한다. 스텝 S4에 있어서, 설정부(3)는, 유저에 의한 도시하지 않은 입력부의 조작 등에 기초하여, 부호화 대상의 화상이 HDR(High Dynamic Range) 화상인지 여부를 판정한다. 또한, 상술한 다이나믹 레인지의 특성 정보를 갖는 화상을, 이하, HDR 화상이라고 하여 설명한다.

스텝 S4에서 부호화 대상의 화상이 HDR 화상이라고 판정된 경우, 스텝 S5에 있어서, 설정부(3)는 HDR 화상 플래그로서 1을 포함하는 VUI를 설정한다. 스텝 S6에 있어서, 설정부(3)는 HDR 화상 SEI 등의 SEI를 설정하고, 처리를 스텝 S8로 진행시킨다.

여기서, HDR 화상 플래그는, 도 12를 참조하여 상술한 tone_mapping_flag 또는 도 13을 참조하여 상술한 luminance_dynamic_range_flag이다. 또한, HDR 화상 SEI는, 도 8을 참조하여 상술한 톤 맵핑 SEI 또는 도 11을 참조하여 상술한 루미넌스 다이나믹 레인지 SEI이다.

한편, 스텝 S4에서 부호화 대상의 화상이 HDR 화상이 아니라고 판정된 경우, 스텝 S7에 있어서, 설정부(3)는 HDR 화상 플래그로서 0을 포함하는 VUI를 설정한다. 또한, 설정부(3)는, 필요에 따라, HDR 화상 SEI 이외의 SEI를 설정하고, 처리를 스텝 S8로 진행시킨다.

스텝 S8에 있어서, 설정부(3)는, 설정된 SPS, PPS, VUI 및 SEI와, 부호화부(2)로부터 공급되는 부호화 데이터로부터, 부호화 스트림을 생성한다. 설정부(3)는 부호화 스트림을 전송부(4)에 공급한다.

스텝 S9에 있어서, 전송부(4)는, 설정부(3)로부터 공급되는 부호화 스트림을, 후술하는 복호 장치에 전송하고, 처리를 종료한다.

도 17 및 도 18은, 도 16의 스텝 S1의 부호화 처리의 상세를 설명하는 흐름도이다.

도 17의 스텝 S11에 있어서, 부호화부(2)의 A/D 변환부(11)는, 입력 신호로서 입력된 프레임 단위의 화상을 A/D 변환하고, 화면 재배열 버퍼(12)에 출력하여 기억시킨다.

스텝 S12에 있어서, 화면 재배열 버퍼(12)는, 기억한 표시의 순서의 프레임 화상을, GOP 구조에 따라, 부호화를 위한 순서대로 재배열한다. 화면 재배열 버퍼(12)는, 재배열 후의 프레임 단위의 화상을, 연산부(13), 인트라 예측부(24) 및 움직임 예측·보상부(25)에 공급한다. 또한, 이하의 스텝 S13 내지 S31의 처리는, 예를 들어 CU(Coding Unit) 단위로 행하여진다.

스텝 S13에 있어서, 인트라 예측부(24)는, 후보가 되는 모든 인트라 예측 모드의 인트라 예측 처리를 행한다. 또한, 인트라 예측부(24)는, 화면 재배열 버퍼(12)로부터 판독된 화상과, 인트라 예측 처리의 결과 생성되는 예측 화상에 기초하여, 후보가 되는 모든 인트라 예측 모드에 대하여 비용 함수값을 산출한다. 그리고, 인트라 예측부(24)는, 비용 함수값이 최소가 되는 인트라 예측 모드를, 최적 인트라 예측 모드로 결정한다. 인트라 예측부(24)는, 최적 인트라 예측 모드에서 생성된 예측 화상 및 대응하는 비용 함수값을, 예측 화상 선택부(26)에 공급한다.

또한, 움직임 예측·보상부(25)는, 후보가 되는 모든 인터 예측 모드의 움직임 예측·보상 처리를 행한다. 또한, 움직임 예측·보상부(25)는, 화면 재배열 버퍼(12)로부터 공급되는 화상과 예측 화상에 기초하여, 후보가 되는 모든 인터 예측 모드에 대하여 비용 함수값을 산출하고, 비용 함수값이 최소가 되는 인터 예측 모드를 최적 인터 예측 모드로 결정한다. 그리고, 움직임 예측·보상부(25)는, 최적 인터 예측 모드의 비용 함수값과, 대응하는 예측 화상을 예측 화상 선택부(26)에 공급한다.

스텝 S14에 있어서, 예측 화상 선택부(26)는, 스텝 S13의 처리에 의해 인트라 예측부(24) 및 움직임 예측·보상부(25)로부터 공급되는 비용 함수값에 기초하여, 최적 인트라 예측 모드와 최적 인터 예측 모드 중 비용 함수값이 최소가 되는 쪽을, 최적 예측 모드로 결정한다. 그리고, 예측 화상 선택부(26)는, 최적 예측 모드의 예측 화상을, 연산부(13) 및 가산부(20)에 공급한다.

스텝 S15에 있어서, 예측 화상 선택부(26)는, 최적 예측 모드가 최적 인터 예측 모드인지 여부를 판정한다. 스텝 S15에서 최적 예측 모드가 최적 인터 예측 모드라고 판정된 경우, 예측 화상 선택부(26)는, 최적 인터 예측 모드에서 생성된 예측 화상의 선택을 움직임 예측·보상부(25)에 통지한다.

그리고, 스텝 S16에 있어서, 움직임 예측·보상부(25)는, 인터 예측 모드 정보, 대응하는 움직임 벡터 및 참조 화상을 특정하기 위한 정보를 가역 부호화부(16)에 공급한다. 그리고, 처리는 스텝 S18로 진행한다.

한편, 스텝 S15에서 최적 예측 모드가 최적 인터 예측 모드가 아니라고 판정된 경우, 즉 최적 예측 모드가 최적 인트라 예측 모드인 경우, 예측 화상 선택부(26)는, 최적 인트라 예측 모드에서 생성된 예측 화상의 선택을 인트라 예측부(24)에 통지한다.

그리고, 스텝 S17에 있어서, 인트라 예측부(24)는, 인트라 예측 모드 정보를 가역 부호화부(16)에 공급한다. 그리고, 처리는 스텝 S18로 진행한다.

스텝 S18에 있어서, 연산부(13)는, 화면 재배열 버퍼(12)로부터 공급되는 화상으로부터, 예측 화상 선택부(26)로부터 공급되는 예측 화상을 감산함으로써 부호화를 행한다. 연산부(13)는, 그 결과 얻어지는 화상을, 잔차 정보로서 직교 변환부(14)에 출력한다.

스텝 S19에 있어서, 직교 변환부(14)는, 연산부(13)로부터의 잔차 정보에 대하여, 직교 변환을 실시하고, 그 결과 얻어지는 계수를 양자화부(15)에 공급한다.

스텝 S20에 있어서, 양자화부(15)는, 직교 변환부(14)로부터 공급되는 계수를 양자화한다. 양자화된 계수는, 가역 부호화부(16)와 역양자화부(18)에 입력된다.

스텝 S21에 있어서, 역양자화부(18)는, 양자화부(15)로부터 공급되는 양자화된 계수를 역양자화한다.

스텝 S22에 있어서, 역직교 변환부(19)는, 역양자화부(18)로부터 공급되는 계수에 대하여 역직교 변환을 실시하고, 그 결과 얻어지는 잔차 정보를 가산부(20)에 공급한다.

스텝 S23에 있어서, 가산부(20)는, 역직교 변환부(19)로부터 공급되는 잔차 정보와, 예측 화상 선택부(26)로부터 공급되는 예측 화상을 가산하고, 국부적으로 복호된 화상을 얻는다. 가산부(20)는, 얻어진 화상을 디블록 필터(21)에 공급함과 함께, 프레임 메모리(22)에 공급한다.

스텝 S24에 있어서, 디블록 필터(21)는, 가산부(20)로부터 공급되는 국부적으로 복호된 화상에 대하여 디블로킹 필터 처리를 행한다. 디블록 필터(21)는, 그 결과 얻어지는 화상을 적응 오프셋 필터(41)에 공급한다.

스텝 S25에 있어서, 적응 오프셋 필터(41)는, 디블록 필터(21)로부터 공급되는 화상에 대하여, LCU마다 적응 오프셋 필터 처리를 행한다. 적응 오프셋 필터(41)는, 그 결과 얻어지는 화상을 적응 루프 필터(42)에 공급한다. 또한, 적응 오프셋 필터(41)는, LCU마다, 저장 플래그, 인덱스 또는 오프셋 및 종류 정보를, 오프셋 필터 정보로서 가역 부호화부(16)에 공급한다.

스텝 S26에 있어서, 적응 루프 필터(42)는, 적응 오프셋 필터(41)로부터 공급되는 화상에 대하여, LCU마다 적응 루프 필터 처리를 행한다. 적응 루프 필터(42)는, 그 결과 얻어지는 화상을 프레임 메모리(22)에 공급한다. 또한, 적응 루프 필터(42)는, 적응 루프 필터 처리에서 사용된 필터 계수를 가역 부호화부(16)에 공급한다.

스텝 S27에 있어서, 프레임 메모리(22)는 필터링 전후의 화상을 축적한다. 구체적으로는, 프레임 메모리(22)는, 가산부(20)로부터 공급되는 화상과 적응 루프 필터(42)로부터 공급되는 화상을 축적한다. 프레임 메모리(22)에 축적된 화상은, 참조 화상으로서 스위치(23)을 통하여 인트라 예측부(24) 또는 움직임 예측·보상부(25)에 출력된다.

스텝 S28에 있어서, 가역 부호화부(16)는, 인트라 예측 모드 정보 또는 인터 예측 모드 정보, 움직임 벡터, 참조 화상을 특정하는 정보 등, 오프셋 필터 정보 및 필터 계수를, 부호화 정보로서 가역 부호화한다.

스텝 S29에 있어서, 가역 부호화부(16)는, 양자화부(15)로부터 공급되는 양자화된 계수를 가역 부호화한다. 그리고, 가역 부호화부(16)는, 스텝 S28의 처리에서 가역 부호화된 부호화 정보와 가역 부호화된 계수로부터, 부호화 데이터를 생성한다.

스텝 S30에 있어서, 가역 부호화부(16)는, 부호화 데이터를 축적 버퍼(17)에 공급하고, 축적시킨다.

스텝 S31에 있어서, 축적 버퍼(17)는, 축적되어 있는 부호화 데이터를, 도 3의 설정부(3)에 출력한다. 그리고, 처리는, 도 16의 스텝 S1에 복귀하고, 스텝 S2로 진행한다.

또한, 도 17 및 도 18의 부호화 처리에서는, 설명을 간단화하기 위해서, 항상, 인트라 예측 처리와 움직임 예측·보상 처리가 행하여지도록 했지만, 실제로는 픽처 타입 등에 의해 어느 한쪽만이 행하여지는 경우도 있다.

이상과 같이, 부호화 장치(1)는, HDR 화상 SEI(톤 맵핑 SEI 또는 루미넌스 다이나믹 레인지 SEI)와 HDR 화상 플래그(tone_mapping_flag 또는 luminance_dynamic_range_flag)를 설정하고, HDR 화상을 부호화한 부호화 데이터와 함께 전송한다.

따라서, HDR 화상의 부호화 스트림을 복호하여 표시시키는 복호 장치는, HDR 화상 플래그가 1인 경우, HDR 화상 SEI를 우선적으로 사용하여, HDR 화상의 다이나믹 레인지를 확실하게 재현하여 표시시킬 수 있다. 따라서, 부호화 장치(1)는, HDR 화상의 부호화 스트림을 복호하여 표시시킬 경우, HDR 화상의 다이나믹 레인지를 확실하게 재현하여 표시시킬 수 있도록, HDR 화상의 부호화 스트림을 생성할 수 있다고 할 수 있다.

[복호 장치의 제1 실시 형태의 구성예]

도 19는, 도 3의 부호화 장치(1)로부터 전송되는 부호화 스트림을 복호하는, 본 기술을 적용한 화상 처리 장치로서의 복호 장치의 제1 실시 형태의 구성예를 도시하는 블록도이다.

도 19의 복호 장치(50)는 수취부(51), 추출부(52), 복호부(53), 화상 조정부(54), 표시 제어부(55) 및 표시부(56)에 의해 구성된다.

복호 장치(50)의 수취부(51)는, 도 3의 부호화 장치(1)로부터 전송되어 오는 부호화 스트림을 수취하고, 추출부(52)에 공급한다. 추출부(52)는, 수취부(51)로부터 공급되는 부호화 스트림으로부터, SPS, PPS, VUI, SEI, 부호화 데이터 등을 추출한다. 추출부(52)는 부호화 데이터를 복호부(53)에 공급한다. 또한, 추출부(52)는, SPS, PPS, VUI, SEI 등도, 필요에 따라 복호부(53)와 화상 조정부(54)에 공급한다.

복호부(53)는, 필요에 따라 추출부(52)로부터 공급되는 SPS, PPS, VUI, SEI 등을 참조하고, 추출부(52)로부터 공급되는 부호화 데이터를 HEVC 방식으로 복호한다. 복호부(53)는, 복호의 결과 얻어지는 HDR 화상 등의 화상을, 출력 신호로서 화상 조정부(54)에 공급한다.

화상 조정부(54)는, 필요에 따라 추출부(52)로부터 공급되는 SPS, PPS, VUI, SEI 등에 기초하여, 복호부(53)로부터 출력 신호로서 공급되는 HDR 화상의 다이나믹 레인지를 조정한다. 예를 들어, 화상 조정부(54)는, 표시 다이나믹 레인지에 맞추어 화상의 다이나믹 레인지를 조정한다. 그리고, 화상 조정부(54)는, 출력 신호로서의 HDR 화상을 표시 제어부(55)에 공급한다.

표시 제어부(55)는, 화상 조정부(54)로부터 공급되는 HDR 화상(필요에 따라, 표시부(56)로부터 통지되는 표시 방법)에 기초하여 표시 화상을 생성한다. 표시 제어부(55)는, 생성된 표시 화상을 표시부(56)에 공급함으로써 표시시킨다.

표시부(56)는, 표시 제어부(55)로부터 공급되는 표시 화상을 표시한다. 또한, 표시부(56)는, 미리 설정된 표시 방법 또는 미리 설정된 표시 방법 중 유저에 의해 지정된 표시 방법을 표시 제어부(55)에 통지한다.

[복호부의 구성예]

도 20은, 도 19의 복호부(53)의 구성예를 도시하는 블록도이다.

도 20의 복호부(53)는 축적 버퍼(101), 가역 복호부(102), 역양자화부(103), 역직교 변환부(104), 가산부(105), 디블록 필터(106), 화면 재배열 버퍼(107), D/A 변환부(108), 프레임 메모리(109), 스위치(110), 인트라 예측부(111), 움직임 보상부(112) 및 스위치(113)에 의해 구성된다.

또한, 디블록 필터(106)와, 화면 재배열 버퍼(107) 및 프레임 메모리(109)의 사이에는, 적응 오프셋 필터(141)와 적응 루프 필터(142)가 구비되어 있다.

복호부(53)의 축적 버퍼(101)는, 도 19의 추출부(52)로부터 부호화 데이터를 수취하고, 축적한다. 축적 버퍼(101)는, 축적되어 있는 부호화 데이터를 가역 복호부(102)에 공급한다.

가역 복호부(102)는, 축적 버퍼(101)로부터의 부호화 데이터에 대하여, 가변장 복호나, 산술 복호 등의 가역 복호를 실시함으로써, 양자화된 계수와 부호화 정보를 얻는다. 가역 복호부(102)는, 양자화된 계수를 역양자화부(103)에 공급한다. 또한, 가역 복호부(102)는, 부호화 정보로서의 인트라 예측 모드 정보 등을 인트라 예측부(111)에 공급하고, 움직임 벡터, 참조 화상을 특정하기 위한 정보, 인터 예측 모드 정보 등을 움직임 보상부(112)에 공급한다. 또한, 가역 복호부(102)는, 부호화 정보로서의 인트라 예측 모드 정보 또는 인터 예측 모드 정보를 스위치(113)에 공급한다.

가역 복호부(102)는, 부호화 정보로서의 오프셋 필터 정보를 적응 오프셋 필터(141)에 공급하고, 필터 계수를 적응 루프 필터(142)에 공급한다.

역양자화부(103), 역직교 변환부(104), 가산부(105), 디블록 필터(106), 프레임 메모리(109), 스위치(110), 인트라 예측부(111) 및 움직임 보상부(112)는, 도 4의 역양자화부(18), 역직교 변환부(19), 가산부(20), 디블록 필터(21), 프레임 메모리(22), 스위치(23), 인트라 예측부(24) 및 움직임 예측·보상부(25)와 각각 동일한 처리를 행하고, 이에 의해 화상이 복호된다.

구체적으로는, 역양자화부(103)는, 가역 복호부(102)로부터의 양자화된 계수를 역양자화하고, 그 결과 얻어지는 계수를 역직교 변환부(104)에 공급한다.

역직교 변환부(104)는, 역양자화부(103)로부터의 계수에 대하여 역직교 변환을 실시하고, 그 결과 얻어지는 잔차 정보를 가산부(105)에 공급한다.

가산부(105)는, 역직교 변환부(104)로부터 공급되는 복호 대상의 화상으로서의 잔차 정보와, 스위치(113)로부터 공급되는 예측 화상을 가산함으로써, 복호를 행한다. 가산부(105)는, 복호의 결과 얻어지는 화상을 디블록 필터(106)에 공급함과 함께, 프레임 메모리(109)에 공급한다. 또한, 스위치(113)로부터 예측 화상이 공급되지 않은 경우, 가산부(105)는, 역직교 변환부(104)로부터 공급되는 잔차 정보인 화상을 복호의 결과 얻어지는 화상으로서, 디블록 필터(106)에 공급함과 함께, 프레임 메모리(109)에 공급하여 축적시킨다.

디블록 필터(106)는, 가산부(105)로부터 공급되는 화상을 필터링함으로써, 블럭 노이즈를 제거한다. 디블록 필터(106)는, 그 결과 얻어지는 화상을 적응 오프셋 필터(141)에 공급한다.

적응 오프셋 필터(141)는, 가역 복호부(102)로부터 공급되는 오프셋을 순서대로 저장하는 버퍼를 갖는다. 또한, 적응 오프셋 필터(141)는, LCU마다, 가역 복호부(102)로부터 공급되는 오프셋 필터 정보에 기초하여, 디블록 필터(106)에 의한 적응 디블록 필터 처리 후의 화상에 대하여 적응 오프셋 필터 처리를 행한다.

구체적으로는, 오프셋 필터 정보에 포함되는 저장 플래그가 0인 경우, 적응 오프셋 필터(141)는, LCU 단위의 디블록 필터 처리 후의 화상에 대하여, 그 오프셋 필터 정보에 포함되는 오프셋을 사용하여, 종류 정보가 나타내는 종류의 적응 오프셋 필터 처리를 행한다.

한편, 오프셋 필터 정보에 포함되는 저장 플래그가 1인 경우, 적응 오프셋 필터(141)는, LCU 단위의 디블록 필터 처리 후의 화상에 대하여, 그 오프셋 필터 정보에 포함되는 인덱스가 나타내는 위치에 저장되는 오프셋을 판독한다. 그리고, 적응 오프셋 필터(141)는, 판독된 오프셋을 사용하여, 종류 정보가 나타내는 종류의 적응 오프셋 필터 처리를 행한다. 적응 오프셋 필터(141)는, 적응 오프셋 필터 처리 후의 화상을 적응 루프 필터(142)에 공급한다.

적응 루프 필터(142)는, 적응 오프셋 필터(141)로부터 공급되는 화상에 대하여, 가역 복호부(102)로부터 공급되는 필터 계수를 사용하여, LCU마다 적응 루프 필터 처리를 행한다. 적응 루프 필터(142)는, 그 결과 얻어지는 화상을 프레임 메모리(109) 및 화면 재배열 버퍼(107)에 공급한다.

프레임 메모리(109)에 축적된 화상은, 참조 화상으로서 스위치(110)를 통하여 판독되고, 움직임 보상부(112) 또는 인트라 예측부(111)에 공급된다.

화면 재배열 버퍼(107)는, 디블록 필터(106)로부터 공급되는 화상을 프레임 단위로 기억한다. 화면 재배열 버퍼(107)는, 기억한 부호화를 위한 순서의 프레임 단위의 화상을, 원래의 표시의 순서대로 재배열, D/A 변환부(108)에 공급한다.

D/A 변환부(108)는, 화면 재배열 버퍼(107)로부터 공급되는 프레임 단위의 화상을 D/A 변환하고, 출력 신호로서 도 19의 화상 조정부(54)에 출력한다.

인트라 예측부(111)는, 타일 및 슬라이스 단위로, 프레임 메모리(109)로부터 스위치(110)를 통하여 판독된 디블록 필터(106)로 필터링되어 있지 않은 참조 화상을 사용하여, 가역 복호부(102)로부터 공급되는 인트라 예측 모드 정보가 나타내는 인트라 예측 모드의 인트라 예측 처리를 행한다. 인트라 예측부(111)는, 그 결과 생성되는 예측 화상을 스위치(113)에 공급한다.

움직임 보상부(112)는, 타일 및 슬라이스 단위로, 가역 복호부(102)로부터 공급되는 참조 화상을 특정하기 위한 정보에 기초하여, 프레임 메모리(109)로부터 스위치(110)를 통하여, 디블록 필터(106)로 필터링된 참조 화상을 판독한다. 움직임 보상부(112)는, 움직임 벡터와 참조 화상을 사용하여, 인터 예측 모드 정보가 나타내는 최적 인터 예측 모드의 움직임 보상 처리를 행한다. 움직임 보상부(112)는, 그 결과 생성되는 예측 화상을 스위치(113)에 공급한다.

스위치(113)는, 가역 복호부(102)로부터 인트라 예측 모드 정보가 공급된 경우, 인트라 예측부(111)로부터 공급되는 예측 화상을 가산부(105)에 공급한다. 한편, 가역 복호부(102)로부터 인터 예측 모드 정보가 공급된 경우, 스위치(113)는, 움직임 보상부(112)로부터 공급되는 예측 화상을 가산부(105)에 공급한다.

[복호 장치의 처리 설명]

도 21은, 도 19의 복호 장치(50)에 의한 표시 처리를 설명하는 흐름도이다.

도 21의 스텝 S50에 있어서, 복호 장치(50)의 수취부(51)는, 도 3의 부호화 장치(1)로부터 전송되어 오는 부호화 스트림을 수취하고, 추출부(52)에 공급한다.

스텝 S51에 있어서, 추출부(52)는, 수취부(51)로부터 공급되는 부호화 스트림으로부터 SPS, PPS, VUI, SEI, 부호화 데이터 등을 추출한다. 추출부(52)는 부호화 데이터를 복호부(53)에 공급한다. 또한, 추출부(52)는, SPS, PPS, VUI, SEI 등도, 필요에 따라 복호부(53)와 화상 조정부(54)에 공급한다.

스텝 S52에 있어서, 복호부(53)는, 필요에 따라 추출부(52)로부터 공급되는 SPS, PPS, VUI, SEI 등을 참조하고, 추출부(52)로부터 공급되는 부호화 데이터를 HEVC 방식으로 복호하는 복호 처리를 행한다. 이 복호 처리의 상세는, 후술하는 도 22를 참조하여 설명한다.

스텝 S53에 있어서, 화상 조정부(54)는, 추출부(52)로부터 공급되는 VUI에 포함되는 HDR 화상 플래그가 1인지 여부를 판정한다. 도 16을 참조하여 상술한 바와 같이, HDR 화상 플래그는, 도 12에 나타낸 tone_mapping_flag 또는 도 13에 나타낸 luminance_dynamic_range_flag이다. 스텝 S53에서 HDR 화상 플래그가 1이라고 판정된 경우, 화상 조정부(54)는, 복호부(53)로부터 공급되는 출력 신호가 HDR 화상이라고 판정한다.

그리고, 스텝 S54에 있어서, 화상 조정부(54)는, 추출부(52)로부터 공급되는 HDR 화상 SEI에 포함되는 다이나믹 레인지 특성 정보를 취득한다. 상세하게는, 도 16을 참조하여 상술한 바와 같이, 도 8에 나타낸 톤 맵핑 SEI 또는 도 11에 나타낸 루미넌스 다이나믹 레인지 SEI로부터 다이나믹 레인지 특성 정보가 취득된다.

스텝 S55에 있어서, 화상 조정부(54)는, 스텝 S54에서 취득된 다이나믹 레인지 특성 정보에 기초하여, 표시 다이나믹 레인지에 맞추어 화상의 다이나믹 레인지를 조정한다. 이 다이나믹 레인지의 조정 처리에는, 예를 들어 톤 맵핑 처리 등이 포함된다. 화상 조정부(54)는, 조정한 화상을 표시 제어부(55)에 공급한다.

또한, 스텝 S55에서의 화상의 조정에는, 크게 나누어 2가지의 방법이 있지만, 어느 쪽의 처리도, 자신의 표시 능력에 맞추는 처리이다.

첫번째로서는, 자신의 표시 능력보다도 다이나믹 레인지가 높은 화상이 입력된 경우, 자신의 표시 능력에 맞추어서 화상의 다이나믹 레인지를 낮추는 처리가 행하여진다.

두번째로서는, 자신의 표시 능력보다도 다이나믹 레인지가 낮은 화상이 입력된 경우, 자신의 표시 능력에 맞추어서 화상의 다이나믹 레인지를 올리는 처리가 행하여진다.

한편, 스텝 S53에서 HDR 화상 플래그가 1이 아니라고 판정된 경우, 스텝 S54 및 S55는 스킵되고, 처리는 스텝 S56으로 진행한다. 즉, 이 경우, 화상 조정부(54)는, 복호부(53)로부터의 화상을 그대로 표시 제어부(55)에 공급한다.

스텝 S56에 있어서, 표시 제어부(55)는, 화상 조정부(54)로부터 공급되는 HDR 화상에 기초하여 표시 화상을 생성하고, 생성한 표시 화상을 표시부(56)에 공급함으로써, 표시부(56)에 표시 화상을 표시시키고, 처리를 종료한다.

도 22는, 도 21의 스텝 S52의 복호 처리의 상세를 설명하는 흐름도이다.

도 22의 스텝 S111에 있어서, 복호부(53)의 축적 버퍼(101)는, 도 19의 추출부(52)로부터 프레임 단위의 부호화 데이터를 수취하고, 축적한다. 축적 버퍼(101)는, 축적되어 있는 부호화 데이터를 가역 복호부(102)에 공급한다. 또한, 이하의 스텝 S112 내지 S124의 처리는, 예를 들어 CU 단위로 행하여진다.

스텝 S112에 있어서, 가역 복호부(102)는, 축적 버퍼(101)로부터의 부호화 데이터를 가역 복호하고, 양자화된 계수와 부호화 정보를 얻는다. 가역 복호부(102)는, 양자화된 계수를 역양자화부(103)에 공급한다. 또한, 가역 복호부(102)는, 부호화 정보로서의 인트라 예측 모드 정보 등을 인트라 예측부(111)에 공급하고, 움직임 벡터, 인터 예측 모드 정보, 참조 화상을 특정하기 위한 정보 등을 움직임 보상부(112)에 공급한다. 또한, 가역 복호부(102)는, 부호화 정보로서의 인트라 예측 모드 정보 또는 인터 예측 모드 정보를 스위치(113)에 공급한다.

또한, 가역 복호부(102)는, 부호화 정보로서의 오프셋 필터 정보를 적응 오프셋 필터(141)에 공급하고, 필터 계수를 적응 루프 필터(142)에 공급한다.

스텝 S113에 있어서, 역양자화부(103)는, 가역 복호부(102)로부터의 양자화된 계수를 역양자화하고, 그 결과 얻어지는 계수를 역직교 변환부(104)에 공급한다.

스텝 S114에 있어서, 움직임 보상부(112)는, 가역 복호부(102)로부터 인터 예측 모드 정보가 공급되었는지 여부를 판정한다. 스텝 S114에서 인터 예측 모드 정보가 공급되었다고 판정된 경우, 처리는 스텝 S115로 진행한다.

스텝 S115에 있어서, 움직임 보상부(112)는, 가역 복호부(102)로부터 공급되는 움직임 벡터, 인터 예측 모드 정보 및 참조 화상을 특정하기 위한 정보에 기초하여, 디블록 필터(106)로 필터링된 참조 화상을 판독하고, 움직임 보상 처리를 행한다. 움직임 보상부(112)는, 그 결과 생성되는 예측 화상을, 스위치(113)를 통하여 가산부(105)에 공급하고, 처리를 스텝 S117로 진행시킨다.

한편, 스텝 S114에서 인터 예측 모드 정보가 공급되어 있지 않다고 판정된 경우, 즉 인트라 예측 모드 정보가 인트라 예측부(111)에 공급된 경우, 처리는 스텝 S116으로 진행한다.

스텝 S116에 있어서, 인트라 예측부(111)는, 프레임 메모리(109)로부터 스위치(110)를 통하여 판독된, 디블록 필터(106)로 필터링되어 있지 않은 참조 화상을 사용하여, 인트라 예측 모드 정보가 나타내는 인트라 예측 모드의 인트라 예측 처리를 행한다. 인트라 예측부(111)는, 인트라 예측 처리의 결과 생성되는 예측 화상을, 스위치(113)를 통하여 가산부(105)에 공급하고, 처리를 스텝 S117로 진행시킨다.

스텝 S117에 있어서, 역직교 변환부(104)는, 역양자화부(103)로부터의 계수에 대하여 역직교 변환을 실시하고, 그 결과 얻어지는 잔차 정보를 가산부(105)에 공급한다.

스텝 S118에 있어서, 가산부(105)는, 역직교 변환부(104)로부터 공급되는 잔차 정보와, 스위치(113)로부터 공급되는 예측 화상을 가산한다. 가산부(105)는, 그 결과 얻어지는 화상을 디블록 필터(106)에 공급함과 함께, 프레임 메모리(109)에 공급한다.

스텝 S119에 있어서, 디블록 필터(106)는, 가산부(105)로부터 공급되는 화상에 대하여 필터링을 행하고, 블럭 노이즈를 제거한다. 디블록 필터(106)는, 그 결과 얻어지는 화상을 적응 오프셋 필터(141)에 공급한다.

스텝 S120에 있어서, 적응 오프셋 필터(141)는, 가역 복호부(102)로부터 공급되는 오프셋 필터 정보에 기초하여, 디블록 필터(106)에 의한 디블록 필터 처리 후의 화상에 대하여, LCU마다 적응 오프셋 필터 처리를 행한다. 적응 오프셋 필터(141)는, 적응 오프셋 필터 처리 후의 화상을 적응 루프 필터(142)에 공급한다.

스텝 S121에 있어서, 적응 루프 필터(142)는, 적응 오프셋 필터(141)로부터 공급되는 화상에 대하여, 가역 복호부(102)로부터 공급되는 필터 계수를 사용하여, LCU마다 적응 루프 필터 처리를 행한다. 적응 루프 필터(142)는, 그 결과 얻어지는 화상을 프레임 메모리(109) 및 화면 재배열 버퍼(107)에 공급한다.

스텝 S122에 있어서, 프레임 메모리(109)는, 가산부(105)로부터 공급되는 필터링 전의 화상과, 디블록 필터(106)로부터 공급되는 필터링 후의 화상을 축적한다. 프레임 메모리(109)에 축적된 화상은, 참조 화상으로서 스위치(110)를 통하여 움직임 보상부(112) 또는 인트라 예측부(111)에 공급된다.

스텝 S123에 있어서, 화면 재배열 버퍼(107)는, 디블록 필터(106)로부터 공급되는 화상을 프레임 단위로 기억하고, 기억한 부호화를 위한 순서의 프레임 단위의 화상을, 원래의 표시의 순서대로 재배열, D/A 변환부(108)에 공급한다.

스텝 S124에 있어서, D/A 변환부(108)는, 화면 재배열 버퍼(107)로부터 공급되는 프레임 단위의 화상을 D/A 변환하고, 출력 신호로서 도 19의 화상 조정부(54)에 공급한다. 그리고, 처리는, 도 21의 스텝 S52에 복귀하고, 스텝 S53으로 진행한다.

이상과 같이, 복호 장치(50)는, 부호화 데이터를 복호하여 화상을 생성하고, HDR 화상 플래그가 1인 경우, HDR 화상 SEI를 우선적으로 사용하여 HDR 화상의 다이나믹 레인지를 확실하게 재현하여 표시시킬 수 있다.

또한, HDR 화상 플래그는, VUI가 아니고, SPS 등의 다른 NAL 유닛에 포함되도록 해도 된다.

이상에 있어서는, 부호화 방식으로서 HEVC 방식을 기초로 사용하도록 했지만, 본 기술은 표시를 행할 때의 기술이며, 부호화 방식에 구애되지 않는다. 따라서, 본 기술은, HEVC 방식에 한하지 않고, 그 밖의 부호화 방식/복호 방식을 적용할 수 있다. 예를 들어, 다음에 설명하는 AVC 방식을 기초로 부호화/복호 처리를 행하는 장치에도 적용할 수 있다.

<제2 실시 형태>

[부호화 장치의 제2 실시 형태의 구성예]

도 23은, 본 기술을 적용한 화상 처리 장치로서의 부호화 장치의 제2 실시 형태의 구성예를 도시하는 블록도이다.

도 23에 도시한 구성 중, 도 3의 구성과 동일한 구성에는 동일한 부호를 부여하고 있다. 중복되는 설명에 대해서는 적절히 생략한다.

도 23의 부호화 장치(201)의 구성은, 부호화부(2) 대신에 부호화부(211)가 설치되는 점이 도 3의 구성과 상이하다. 부호화 장치(201)의 구성은, 설정부(3) 및 전송부(4)가 설치되어 있는 점이 도 3의 구성과 공통되어 있다.

부호화 장치(201)의 부호화부(211)에는, 프레임 단위의 촬영 화상 등의 화상이 입력 신호로서 입력된다. 부호화부(211)는, 입력 신호를 AVC 방식으로 부호화하고, 그 결과 얻어지는 부호화 데이터를 설정부(3)에 공급한다.

설정부(3)는, AVC 방식의 규격에 따른 형식으로, 화상의 다이나믹 레인지의 특성 정보를 설정한다. 설정부(3)는, 설정된 특성 정보와, 부호화부(211)로부터 공급되는 부호화 데이터로부터, 부호화 스트림을 생성한다. 설정부(3)는 부호화 스트림을 전송부(4)에 공급한다.

즉, 부호화 장치(201)에 있어서는, AVC 방식에 의한 부호화 처리가 행하여지는 점만이, 도 3의 부호화 장치(1)와 상이하다.

[부호화부의 구성예]

도 24는, 도 23의 부호화부(211)의 구성예를 도시하는 블록도이다.

도 24에 도시한 구성 중, 도 4의 구성과 동일한 구성에는 동일한 부호를 부여하고 있다. 중복되는 설명에 대해서는 적절히 생략한다.

도 24의 부호화부(211)는 A/D 변환부(11), 화면 재배열 버퍼(12), 연산부(13), 직교 변환부(14), 양자화부(15), 가역 부호화부(16), 축적 버퍼(17), 역양자화부(18), 역직교 변환부(19), 가산부(20), 디블록 필터(21), 프레임 메모리(22), 스위치(23), 인트라 예측부(24), 움직임 예측·보상부(25), 예측 화상 선택부(26) 및 레이트 제어부(27)를 포함하도록 구성된다.

즉, 도 24의 부호화부(211)의 구성은, 적응 오프셋 필터(41)와 적응 루프 필터(42)가 제외되어 있는 점 및 가역 부호화부(16)가 HEVC 방식이 아니고, AVC 방식에 의해 부호화를 행하는 점만이 도 4의 구성과 상이하다. 따라서, 부호화부(211)에 있어서는, CU 단위가 아니라, 블록 단위로 부호화 처리가 행하여진다.

가역 부호화부(16)의 부호화 처리의 대상은, 적응 오프셋 필터 및 적응 루프 필터의 파라미터를 제외하고, 도 4의 가역 부호화부(16)의 경우와 기본적으로 동일하다. 즉, 가역 부호화부(16)는, 도 4의 가역 부호화부(16)와 마찬가지로, 인트라 예측 모드 정보를 인트라 예측부(24)로부터 취득한다. 또한, 인터 예측 모드 정보, 움직임 벡터, 참조 화상을 특정하기 위한 정보 등을 움직임 예측·보상부(25)로부터 취득한다.

가역 부호화부(16)는, 도 4의 가역 부호화부(16)와 마찬가지로, 양자화부(15)로부터 공급되는 양자화된 계수에 대하여, 가변장 부호화(예를 들어, CAVLC(Context-Adaptive Variable Length Coding) 등), 산술 부호화(예를 들어, CABAC(Context-Adaptive Binary Arithmetic Coding) 등) 등의 가역 부호화를 행한다.

또한, 가역 부호화부(16)는, 도 4의 가역 부호화부(16)와 마찬가지로, 인트라 예측 모드 정보 또는, 인터 예측 모드 정보, 움직임 벡터, 참조 화상을 특정하는 정보, 오프셋 필터 정보 및 필터 계수 등을, 부호화에 관한 부호화 정보로서 가역 부호화한다. 가역 부호화부(16)는, 가역 부호화된 부호화 정보와 계수를, 부호화 데이터로서 축적 버퍼(17)에 공급하고, 축적시킨다. 또한, 가역 부호화된 부호화 정보는, 가역 부호화된 계수의 헤더 정보가 되어도 된다.

디블록 필터(21)는, 가산부(20)로부터 공급되는 국부적으로 복호된 화상을 필터링함으로써, 블럭 노이즈를 제거한다. 디블록 필터(21)는, 그 결과 얻어지는 화상을 프레임 메모리(22)에 공급하고, 축적시킨다.

프레임 메모리(22)에 축적된 화상은, 참조 화상으로서 스위치(23)를 통하여 인트라 예측부(24) 또는 움직임 예측·보상부(25)에 출력된다.

본 기술은, 이러한 AVC 방식의 부호화 장치(201)에도 적용할 수 있다.

[복호 장치의 제2 실시 형태의 구성예]

도 25는, 도 23의 부호화 장치(201)로부터 전송되는 부호화 스트림을 복호하는, 본 기술을 적용한 화상 처리 장치로서의 복호 장치의 제2 실시 형태의 구성예를 도시하는 블록도이다.

도 25에 도시한 구성 중, 도 19의 구성과 동일한 구성에는 동일한 부호를 부여하고 있다. 중복되는 설명에 대해서는 적절히 생략한다.

도 25의 복호 장치(251)의 구성은, 복호부(53) 대신에 복호부(261)가 설치되는 점이 도 19의 구성과 상이하다. 복호 장치(251)의 구성은, 수취부(51), 추출부(52), 화상 조정부(54), 표시 제어부(55), 표시부(56)가 설치되어 있는 점이 도 19의 구성과 공통되어 있다.

수취부(51)는, 도 23의 부호화 장치(201)로부터 전송되어 오는 AVC 방식으로 부호화된 부호화 스트림을 수취하고, 추출부(52)에 공급한다. 추출부(52)는, 수취부(51)로부터 공급되는 부호화 스트림으로부터, AVC 방식의 규격에 따라서 설정된 다이나믹 레인지의 특성 정보, 부호화 데이터 등을 추출한다. 추출부(52)는 부호화 데이터를 복호부(261)에 공급한다. 또한, 추출부(52)는, 다이나믹 레인지의 특성 정보도, 필요에 따라 복호부(261)와 화상 조정부(54)에 공급한다.

복호부(261)는, 필요에 따라 추출부(52)로부터 공급되는 SPS, PPS, VUI, SEI 등을 참조하여, 추출부(52)로부터 공급되는 부호화 데이터를 AVC 방식으로 복호한다. 복호부(261)는, 복호의 결과 얻어지는 HDR 화상 등의 화상을, 출력 신호로서 화상 조정부(54)에 공급한다.

화상 조정부(54)는, 필요에 따라 추출부(52)로부터 공급되는 다이나믹 레인지의 특성 정보에 기초하여, 복호부(261)로부터 출력 신호로서 공급되는 HDR 화상의 다이나믹 레인지를 조정한다. 그리고, 화상 조정부(54)는 출력 신호로서의 HDR 화상을 표시 제어부(55)에 공급한다.

즉, 복호 장치(251)에 있어서는, AVC 방식에 의한 복호 처리가 행하여지는 점만이, 도 19의 복호 장치(50)와 상이하다.

[복호부의 구성예]

도 26은, 도 25의 복호부(261)의 구성예를 도시하는 블록도이다.

도 26에 도시한 구성 중, 도 20의 구성과 동일한 구성에는 동일한 부호를 부여하고 있다. 중복되는 설명에 대해서는 적절히 생략한다.

도 26의 복호부(261)는, 축적 버퍼(101), 가역 복호부(102), 역양자화부(103), 역직교 변환부(104), 가산부(105), 디블록 필터(106), 화면 재배열 버퍼(107), D/A 변환부(108), 프레임 메모리(109), 스위치(110), 인트라 예측부(111), 움직임 보상부(112) 및 스위치(113)에 의해 구성된다.

도 26의 복호부(261)의 구성은, 적응 오프셋 필터(141)와 적응 루프 필터(142)가 제외되어 있는 점 및 가역 복호부(102)가 HEVC 방식이 아니고, AVC 방식에 의해 복호를 행하는 점만이 도 20의 구성과 상이하다. 따라서, 복호부(261)에 있어서는, CU 단위가 아니고, 블록 단위로 복호 처리가 행하여진다.

가역 복호부(102)의 복호 처리의 대상은, 적응 오프셋 필터 및 적응 루프 필터의 파라미터를 제외하고, 도 20의 가역 복호부(102)의 경우와 기본적으로 동일하다. 즉, 가역 복호부(102)는, 도 20의 가역 복호부(102)와 마찬가지로, 축적 버퍼(101)로부터의 부호화 데이터에 대하여, 가변장 복호나, 산술 복호 등의 가역 복호를 실시함으로써, 양자화된 계수와 부호화 정보를 얻는다. 가역 복호부(102)는 양자화된 계수를 역양자화부(103)에 공급한다.

또한, 가역 복호부(102)는, 도 20의 가역 복호부(102)와 마찬가지로, 부호화 정보로서의 인트라 예측 모드 정보 등을 인트라 예측부(111)에 공급하고, 움직임 벡터, 참조 화상을 특정하기 위한 정보, 인터 예측 모드 정보 등을 움직임 보상부(112)에 공급한다. 또한, 가역 복호부(102)는, 부호화 정보로서의 인트라 예측 모드 정보 또는 인터 예측 모드 정보를 스위치(113)에 공급한다.

디블록 필터(106)는, 가산부(105)로부터 공급되는 화상을 필터링함으로써, 블럭 노이즈를 제거한다. 디블록 필터(106)는, 그 결과 얻어지는 화상을 프레임 메모리(109) 및 화면 재배열 버퍼(107)에 공급한다.

본 기술은, 이러한 AVC 방식의 복호 장치(251)에도 적용할 수 있다.

또한, 본 발명은, 예를 들어 HEVC 방식 등과 같이, 이산 코사인 변환 등의 직교 변환과 움직임 보상에 의해 압축된 화상 정보(비트 스트림)를 위성 방송, 케이블 텔레비전, 인터넷 또는 휴대 전화기 등의 네트워크 미디어를 통하여 수신할 때에 사용되는 화상 부호화 장치 및 화상 복호 장치에 적용할 수 있다. 또한, 본 발명은, 광, 자기 디스크 및 플래시 메모리와 같은 기억 미디어 상에서 처리할 때에 사용되는 화상 부호화 장치 및 화상 복호 장치에 적용할 수 있다.

<제3 실시 형태>

[다시점 화상 부호화·다시점 화상 복호에의 적용]

상술한 일련의 처리는, 다시점 화상 부호화·다시점 화상 복호에 적용할 수 있다. 도 27은, 다시점 화상 부호화 방식의 일례를 도시한다.

도 27에 도시된 바와 같이, 다시점 화상은, 복수의 시점의 화상을 포함하고, 그 복수의 시점 중 소정의 1개의 시점의 화상이 베이스 뷰의 화상으로 지정되어 있다. 베이스 뷰의 화상 이외의 각 시점의 화상은, 논베이스 뷰의 화상으로서 취급된다.

도 27과 같은 다시점 화상 부호화를 행할 경우, 각 뷰(동일한 뷰)에 있어서, 다이나믹 레인지의 특성 정보를 설정할 수 있다. 또한, 각 뷰(상이한 뷰)에 있어서, 다른 뷰에서 설정된 다이나믹 레인지의 특성 정보를 공유할 수도 있다.

이 경우, 베이스 뷰에서 설정된 다이나믹 레인지의 특성 정보가, 적어도 1개의 논베이스 뷰에서 사용된다. 또는 , 예를 들어 논베이스 뷰(view_id=i)에서 설정된 다이나믹 레인지의 특성 정보가, 베이스 뷰 및 논베이스 뷰(view_id=j)의 적어도 어느 한쪽에서 사용된다.

이에 의해, 화상의 다이나믹 레인지를 정확하게 재현할 수 있다.

[다시점 화상 부호화 장치]

도 28은, 상술한 다시점 화상 부호화를 행하는 다시점 화상 부호화 장치를 도시하는 도면이다. 도 28에 도시된 바와 같이, 다시점 화상 부호화 장치(600)는 부호화부(601), 부호화부(602) 및 다중화부(603)를 갖는다.

부호화부(601)는, 베이스 뷰 화상을 부호화하고, 베이스 뷰 화상 부호화 스트림을 생성한다. 부호화부(602)는, 논베이스 뷰 화상을 부호화하고, 논베이스 뷰 화상 부호화 스트림을 생성한다. 다중화부(603)는, 부호화부(601)에서 생성된 베이스 뷰 화상 부호화 스트림과, 부호화부(602)에서 생성된 논베이스 뷰 화상 부호화 스트림을 다중화하고, 다시점 화상 부호화 스트림을 생성한다.

이 다시점 화상 부호화 장치(600)의 부호화부(601) 및 부호화부(602)에 대하여, 부호화 장치(1)(도 3)나 부호화 장치(201)(도 23)를 적용할 수 있다. 이 경우, 다시점 화상 부호화 장치(600)는, 부호화부(601)가 설정한 다이나믹 레인지의 특성 정보와, 부호화부(602)가 설정한 다이나믹 레인지의 특성 정보를 설정하여 전송시킨다.

또한, 상술한 바와 같이 부호화부(601)가 설정한 다이나믹 레인지의 특성 정보를, 부호화부(601) 및 부호화부(602)에서 공유하여 사용하도록 설정하여 전송시키도록 해도 된다. 반대로, 부호화부(602)가 통합하여 설정한 다이나믹 레인지의 특성 정보를, 부호화부(601) 및 부호화부(602)에서 공유하여 사용하도록 설정하여 전송시키도록 해도 된다.

[다시점 화상 복호 장치]

도 29는, 상술한 다시점 화상 복호를 행하는 다시점 화상 복호 장치를 도시하는 도면이다. 도 29에 도시된 바와 같이, 다시점 화상 복호 장치(610)는 역다중화부(611), 복호부(612) 및 복호부(613)를 갖는다.

역다중화부(611)는, 베이스 뷰 화상 부호화 스트림과 논베이스 뷰 화상 부호화 스트림이 다중화된 다시점 화상 부호화 스트림을 역다중화하고, 베이스 뷰 화상 부호화 스트림과, 논베이스 뷰 화상 부호화 스트림을 추출한다. 복호부(612)는, 역다중화부(611)에 의해 추출된 베이스 뷰 화상 부호화 스트림을 복호하고, 베이스 뷰 화상을 얻는다. 복호부(613)는, 역다중화부(611)에 의해 추출된 논베이스 뷰 화상 부호화 스트림을 복호하고, 논베이스 뷰 화상을 얻는다.

이 다시점 화상 복호 장치(610)의 복호부(612) 및 복호부(613)에 대하여, 복호 장치(50)(도 19)나 복호 장치(251)(도 25)를 적용할 수 있다. 이 경우, 다시점 화상 복호 장치(610)는, 부호화부(601)가 설정하고, 복호부(612)가 복호한 다이나믹 레인지의 특성 정보와, 부호화부(602)가 설정하고, 복호부(613)가 복호한 다이나믹 레인지의 특성 정보를 사용하여 처리를 행한다.

또한, 상술한 바와 같이 부호화부(601)(또는, 부호화부(602))가 설정한 다이나믹 레인지의 특성 정보를, 부호화부(601) 및 부호화부(602)에서 공유하여 사용하도록 설정하여 전송되어 있는 경우가 있다. 이 경우, 다시점 화상 복호 장치(610)에 있어서는, 부호화부(601)(또는, 부호화부(602))가 설정하고, 복호부(612)(또는 복호부(613))가 복호한 다이나믹 레인지의 특성 정보를 사용하여 처리가 행하여진다.

<6. 제4 실시 형태>

[계층 화상 부호화·계층 화상 복호에의 적용]

상술한 일련의 처리는, 계층 화상 부호화·계층 화상 복호에 적용할 수 있다. 도 30은, 다시점 화상 부호화 방식의 일례를 도시한다.

도 30에 도시된 바와 같이, 계층 화상은, 복수의 계층(해상도)의 화상을 포함하고, 그 복수의 해상도 중 소정의 1개의 계층의 화상이 베이스 레이어의 화상으로 지정되어 있다. 베이스 레이어의 화상 이외의 각 계층의 화상은, 논베이스 레이어의 화상으로서 취급된다.

도 30과 같은 계층 화상 부호화(공간 스케일러빌리티)를 행할 경우, 각 레이어(동일 레이어)에 있어서, 다이나믹 레인지의 특성 정보를 설정할 수 있다. 또한, 각 레이어(상이한 레이어)에 있어서, 다른 레이어에서 설정된 다이나믹 레인지의 특성 정보를 공유할 수 있다.

이 경우, 베이스 레이어에서 설정된 다이나믹 레인지의 특성 정보가, 적어도 1개의 논베이스 레이어에서 사용된다. 또는 , 예를 들어 논베이스 레이어(layer _id=i)에서 설정된 다이나믹 레인지의 특성 정보가, 베이스 레이어 및 논베이스 레이어(layer_id=j)의 적어도 어느 한쪽에서 사용된다.

이에 의해, 화상의 다이나믹 레인지를 정확하게 재현할 수 있다.

[계층 화상 부호화 장치]

도 31은, 상술한 계층 화상 부호화를 행하는 계층 화상 부호화 장치를 도시하는 도면이다. 도 31에 도시된 바와 같이, 계층 화상 부호화 장치(620)는 부호화부(621), 부호화부(622) 및 다중화부(623)를 갖는다.

부호화부(621)는, 베이스 레이어 화상을 부호화하고, 베이스 레이어 화상 부호화 스트림을 생성한다. 부호화부(622)는, 논베이스 레이어 화상을 부호화하고, 논베이스 레이어 화상 부호화 스트림을 생성한다. 다중화부(623)는, 부호화부(621)에서 생성된 베이스 레이어 화상 부호화 스트림과, 부호화부(622)에서 생성된 논베이스 레이어 화상 부호화 스트림을 다중화하고, 계층 화상 부호화 스트림을 생성한다.

이 계층 화상 부호화 장치(620)의 부호화부(621) 및 부호화부(622)에 대하여, 부호화 장치(1)(도 3)나 부호화 장치(201)(도 23)를 적용할 수 있다. 이 경우, 계층 화상 부호화 장치(620)는, 부호화부(621)가 설정한 다이나믹 레인지의 특성 정보와, 부호화부(602)가 설정한 다이나믹 레인지의 특성 정보를 설정하여 전송시킨다.

또한, 상술한 바와 같이 부호화부(621)가 설정한 다이나믹 레인지의 특성 정보를, 부호화부(621) 및 부호화부(622)에서 공유하여 사용하도록 설정하여 전송시키도록 해도 된다. 반대로, 부호화부(622)가 설정한 다이나믹 레인지의 특성 정보를, 부호화부(621) 및 부호화부(622)에서 공유하여 사용하도록 설정하여 전송시키도록 해도 된다.

[계층 화상 복호 장치]

도 32는, 상술한 계층 화상 복호를 행하는 계층 화상 복호 장치를 도시하는 도면이다. 도 32에 도시된 바와 같이, 계층 화상 복호 장치(630)는 역다중화부(631), 복호부(632) 및 복호부(633)를 갖는다.

역다중화부(631)는, 베이스 레이어 화상 부호화 스트림과 논베이스 레이어 화상 부호화 스트림이 다중화된 계층 화상 부호화 스트림을 역다중화하고, 베이스 레이어 화상 부호화 스트림과, 논베이스 레이어 화상 부호화 스트림을 추출한다. 복호부(632)는, 역다중화부(631)에 의해 추출된 베이스 레이어 화상 부호화 스트림을 복호하고, 베이스 레이어 화상을 얻는다. 복호부(633)는, 역다중화부(631)에 의해 추출된 논베이스 레이어 화상 부호화 스트림을 복호하고, 논베이스 레이어 화상을 얻는다.

이 계층 화상 복호 장치(630)의 복호부(632) 및 복호부(633)에 대하여, 복호 장치(50)(도 19)나 복호 장치(251)(도 25)를 적용할 수 있다. 이 경우, 계층 화상 복호 장치(630)는, 부호화부(621)가 설정하고, 복호부(632)가 복호한 다이나믹 레인지의 특성 정보와, 부호화부(622)가 설정하고, 복호부(633)가 복호한 다이나믹 레인지의 특성 정보를 사용하여 처리를 행한다.

또한, 상술한 바와 같이 부호화부(621)(또는, 부호화부(622))가 설정한 다이나믹 레인지의 특성 정보를, 부호화부(621) 및 부호화부(622)에서 공유하여 사용하도록 설정하여 전송되고 있는 경우가 있다. 이 경우, 계층 화상 복호 장치(630)에 있어서는, 부호화부(621)(또는, 부호화부(622))가 설정하고, 복호부(632)(또는, 복호부(633))가 복호한 다이나믹 레인지의 특성 정보를 사용하여 처리가 행하여진다.

<제5 실시 형태>

[컴퓨터의 구성예]

상술한 일련의 처리는, 하드웨어에 의해 실행할 수도 있고, 소프트웨어에 의해 실행할 수도 있다. 일련의 처리를 소프트웨어에 의해 실행할 경우에는, 그 소프트웨어를 구성하는 프로그램이 컴퓨터에 인스톨된다. 여기서, 컴퓨터에는, 전용의 하드웨어에 내장되어 있는 컴퓨터나, 각종 프로그램을 인스톨함으로써, 각종 기능을 실행하는 것이 가능한, 예를 들어 범용의 퍼스널 컴퓨터 등이 포함된다.

도 33은, 상술한 일련의 처리를 프로그램에 의해 실행하는 컴퓨터의 하드웨어의 구성예를 도시하는 블록도이다.

컴퓨터(800)에 있어서, CPU(Central Processing Unit)(801), ROM(Read Only Memory)(802), RAM(Random Access Memory)(803)은, 버스(804)에 의해 서로 접속되어 있다.

버스(804)에는, 또한, 입출력 인터페이스(805)가 접속되어 있다. 입출력 인터페이스(805)에는 입력부(806), 출력부(807), 기억부(808), 통신부(809) 및 드라이브(810)가 접속되어 있다.

입력부(806)는 키보드, 마우스, 마이크로폰 등으로 이루어진다. 출력부(807)는 디스플레이, 스피커 등으로 이루어진다. 기억부(808)는 하드 디스크나 불휘발성의 메모리 등으로 이루어진다. 통신부(809)는 네트워크 인터페이스 등으로 이루어진다. 드라이브(810)는 자기 디스크, 광 디스크, 광자기 디스크, 또는 반도체 메모리 등의 리무버블 미디어(811)를 구동한다.

이상과 같이 구성되는 컴퓨터에서는, CPU(801)가, 예를 들어 기억부(808)에 기억되어 있는 프로그램을, 입출력 인터페이스(805) 및 버스(804)를 통하여 RAM(803)에 로드하여 실행함으로써, 상술한 일련의 처리가 행하여진다.

컴퓨터(800)(CPU(801))가 실행하는 프로그램은, 예를 들어 패키지 미디어 등으로서의 리무버블 미디어(811)에 기록하여 제공할 수 있다. 또한, 프로그램은, 로컬 에리어 네트워크, 인터넷, 디지털 위성 방송과 같은 유선 또는 무선의 전송 매체를 통하여 제공할 수 있다.

컴퓨터에서는, 프로그램은, 리무버블 미디어(811)를 드라이브(810)에 장착함으로써, 입출력 인터페이스(805)를 통하여 기억부(808)에 인스톨할 수 있다. 또한, 프로그램은, 유선 또는 무선의 전송 매체를 통하여, 통신부(809)에서 수신하고, 기억부(808)에 인스톨할 수 있다. 그 밖에, 프로그램은 ROM(802)이나 기억부(808)에 미리 인스톨해 둘 수 있다.

또한, 컴퓨터가 실행하는 프로그램은, 본 명세서에서 설명하는 순서에 따라 시계열로 처리가 행하여지는 프로그램이어도 되고, 병렬로, 또는 호출이 행하여졌을 때 등의 필요한 타이밍에 처리가 행하여지는 프로그램이어도 된다.

또한, 본 명세서에 있어서, 기록 매체에 기록되는 프로그램을 기술하는 스텝은, 기재된 순서에 따라 시계열적으로 행하여지는 처리는 물론, 반드시 시계열적으로 처리되지 않아도, 병렬적 또는 개별로 실행되는 처리도 포함하는 것이다.

또한, 본 명세서에 있어서, 시스템이란, 복수의 디바이스(장치)로 구성되는 장치 전체를 나타내는 것이다.

또한, 이상에 있어서, 1개의 장치(또는 처리부)로서 설명한 구성을 분할하여, 복수의 장치(또는 처리부)로서 구성하도록 해도 된다. 반대로, 이상에서 복수의 장치(또는 처리부)로서 설명한 구성을 통합해서 1개의 장치(또는 처리부)로서 구성되도록 해도 된다. 또한, 각 장치(또는 각 처리부)의 구성에 상술한 이외의 구성을 부가하도록 해도 물론 좋다. 또한, 시스템 전체로서의 구성이나 동작이 실질적으로 동일하면, 한 장치(또는 처리부)의 구성의 일부를 다른 장치(또는 다른 처리부)의 구성에 포함시키도록 해도 된다. 즉, 본 기술은, 상술한 실시 형태에 한정되지 않으며, 본 기술의 요지를 일탈하지 않는 범위에서 다양한 변경이 가능하다.

상술한 실시 형태에 따른 화상 부호화 장치 및 화상 복호 장치는, 위성 방송, 케이블 TV 등의 유선 방송, 인터넷 상에서의 배신 및 셀룰러 통신에 의한 단말기에의 배신 등에서의 송신기 또는 수신기, 광 디스크, 자기 디스크 및 플래시 메모리 등의 매체에 화상을 기록하는 기록 장치, 또는, 이들 기억 매체로부터 화상을 재생하는 재생 장치 등의 다양한 전자 기기에 응용될 수 있다. 이하, 4개의 응용예에 대하여 설명한다.

<응용예>

[제1 응용예: 텔레비전 수상기]

도 34는, 상술한 실시 형태를 적용한 텔레비전 장치의 개략적인 구성의 일례를 도시하고 있다. 텔레비전 장치(900)는 안테나(901), 튜너(902), 디멀티플렉서(903), 디코더(904), 영상 신호 처리부(905), 표시부(906), 음성 신호 처리부(907), 스피커(908), 외부 인터페이스(909), 제어부(910), 유저 인터페이스(911) 및 버스(912)를 구비한다.

튜너(902)는, 안테나(901)를 통하여 수신되는 방송 신호로부터 원하는 채널의 신호를 추출하고, 추출한 신호를 복조한다. 그리고, 튜너(902)는, 복조에 의해 얻어진 부호화 비트 스트림을 디멀티플렉서(903)에 출력한다. 즉, 튜너(902)는, 화상이 부호화되어 있는 부호화 스트림을 수신하는 텔레비전 장치(900)에서의 전송 수단으로서의 역할을 갖는다.

디멀티플렉서(903)는, 부호화 비트 스트림으로부터 시청 대상의 프로그램 영상 스트림 및 음성 스트림을 분리하고, 분리한 각 스트림을 디코더(904)에 출력한다. 또한, 디멀티플렉서(903)는, 부호화 비트 스트림으로부터 EPG(Electronic Program Guide) 등의 보조적인 데이터를 추출하고, 추출한 데이터를 제어부(910)에 공급한다. 또한, 디멀티플렉서(903)는, 부호화 비트 스트림이 스크램블 되어 있는 경우에는 디스크램블을 행해도 된다.

디코더(904)는, 디멀티플렉서(903)로부터 입력되는 영상 스트림 및 음성 스트림을 복호한다. 그리고, 디코더(904)는, 복호 처리에 의해 생성되는 영상 데이터를 영상 신호 처리부(905)에 출력한다. 또한, 디코더(904)는, 복호 처리에 의해 생성되는 음성 데이터를 음성 신호 처리부(907)에 출력한다.

영상 신호 처리부(905)는, 디코더(904)로부터 입력되는 영상 데이터를 재생하고, 표시부(906)에 영상을 표시시킨다. 또한, 영상 신호 처리부(905)는, 네트워크를 통하여 공급되는 애플리케이션 화면을 표시부(906)에 표시시켜도 된다. 또한, 영상 신호 처리부(905)는, 영상 데이터에 대해서, 설정에 따라, 예를 들어 노이즈 제거 등의 추가적인 처리를 행해도 된다. 또한, 영상 신호 처리부(905)는, 예를 들어 메뉴, 버튼 또는 커서 등의 GUI(Graphical User Interface)의 화상을 생성하고, 생성한 화상을 출력 화상에 중첩시켜도 된다.

표시부(906)는, 영상 신호 처리부(905)로부터 공급되는 구동 신호에 의해 구동되고, 표시 디바이스(예를 들어, 액정 디스플레이, 플라즈마 디스플레이 또는 OELD(Organic ElectroLuminescence Display)(유기EL 디스플레이) 등)의 영상면 상에 영상 또는 화상을 표시한다.

음성 신호 처리부(907)는, 디코더(904)로부터 입력되는 음성 데이터에 대하여 D/A 변환 및 증폭 등의 재생 처리를 행하고, 스피커(908)로부터 음성을 출력시킨다. 또한, 음성 신호 처리부(907)는, 음성 데이터에 대하여 노이즈 제거 등의 추가적인 처리를 행해도 된다.

외부 인터페이스(909)는, 텔레비전 장치(900)와 외부 기기 또는 네트워크를 접속하기 위한 인터페이스이다. 예를 들어, 외부 인터페이스(909)를 통하여 수신되는 영상 스트림 또는 음성 스트림이, 디코더(904)에 의해 복호되어도 된다. 즉, 외부 인터페이스(909)도 또한, 화상이 부호화되어 있는 부호화 스트림을 수신하는 텔레비전 장치(900)에서의 전송 수단으로서의 역할을 갖는다.

제어부(910)는, CPU 등의 프로세서 및 RAM 및 ROM 등의 메모리를 갖는다. 메모리는, CPU에 의해 실행되는 프로그램, 프로그램 데이터, EPG 데이터 및 네트워크를 통하여 취득되는 데이터 등을 기억한다. 메모리에 의해 기억되는 프로그램은, 예를 들어 텔레비전 장치(900)의 기동 시에 CPU에 의해 읽어들여지고, 실행된다. CPU는, 프로그램을 실행함으로써, 예를 들어 유저 인터페이스(911)로부터 입력되는 조작 신호에 따라 텔레비전 장치(900)의 동작을 제어한다.

유저 인터페이스(911)는 제어부(910)와 접속된다. 유저 인터페이스(911)는, 예를 들어 유저가 텔레비전 장치(900)를 조작하기 위한 버튼 및 스위치 및 원격 제어 신호의 수신부 등을 갖는다. 유저 인터페이스(911)는, 이들 구성 요소를 통하여 유저에 의한 조작을 검출하여 조작 신호를 생성하고, 생성한 조작 신호를 제어부(910)에 출력한다.

버스(912)는 튜너(902), 디멀티플렉서(903), 디코더(904), 영상 신호 처리부(905), 음성 신호 처리부(907), 외부 인터페이스(909) 및 제어부(910)를 서로 접속한다.

이와 같이 구성된 텔레비전 장치(900)에 있어서, 디코더(904)는, 상술한 실시 형태에 따른 화상 복호 장치의 기능을 갖는다. 그에 의해, 텔레비전 장치(900)에서의 화상의 복호 시에 화상의 다이나믹 레인지를 정확하게 재현할 수 있다.

[제2 응용예: 휴대 전화기]

도 35는, 상술한 실시 형태를 적용한 휴대 전화기의 개략적인 구성의 일례를 도시하고 있다. 휴대 전화기(920)는 안테나(921), 통신부(922), 음성 코덱(923), 스피커(924), 마이크로폰(925), 카메라부(926), 화상 처리부(927), 다중 분리부(928), 기록 재생부(929), 표시부(930), 제어부(931), 조작부(932) 및 버스(933)를 구비한다.

안테나(921)는 통신부(922)에 접속된다. 스피커(924) 및 마이크로폰(925)은 음성 코덱(923)에 접속된다. 조작부(932)는 제어부(931)에 접속된다. 버스(933)는 통신부(922), 음성 코덱(923), 카메라부(926), 화상 처리부(927), 다중 분리부(928), 기록 재생부(929), 표시부(930) 및 제어부(931)를 서로 접속한다.

휴대 전화기(920)는 음성 통화 모드, 데이터 통신 모드, 촬영 모드 및 텔레비전 전화 모드를 포함하는 여러가지 동작 모드에서, 음성 신호의 송수신, 전자 메일 또는 화상 데이터의 송수신, 화상의 촬상 및 데이터의 기록 등의 동작을 행한다.

음성 통화 모드에서, 마이크로폰(925)에 의해 생성되는 아날로그 음성 신호는 음성 코덱(923)에 공급된다. 음성 코덱(923)은, 아날로그 음성 신호를 음성 데이터로 변환하고, 변환된 음성 데이터를 A/D 변환하여 압축한다. 그리고, 음성 코덱(923)은, 압축 후의 음성 데이터를 통신부(922)에 출력한다. 통신부(922)는, 음성 데이터를 부호화 및 변조하여 송신 신호를 생성한다. 그리고, 통신부(922)는, 생성한 송신 신호를, 안테나(921)를 통하여 기지국(도시하지 않음)에 송신한다. 또한, 통신부(922)는, 안테나(921)를 통하여 수신되는 무선 신호를 증폭 및 주파수 변환하여 수신 신호를 취득한다. 그리고, 통신부(922)는, 수신 신호를 복조 및 복호하여 음성 데이터를 생성하고, 생성한 음성 데이터를 음성 코덱(923)에 출력한다. 음성 코덱(923)은, 음성 데이터를 신장 및 D/A 변환하여 아날로그 음성 신호를 생성한다. 그리고, 음성 코덱(923)은, 생성한 음성 신호를 스피커(924)에 공급하여 음성을 출력시킨다.

또한, 데이터 통신 모드에서, 예를 들어 제어부(931)는, 조작부(932)를 통하는 유저에 의한 조작에 따라, 전자 메일을 구성하는 문자 데이터를 생성한다. 또한, 제어부(931)는 문자를 표시부(930)에 표시시킨다. 또한, 제어부(931)는, 조작부(932)를 통한 유저로부터의 송신 지시에 따라서 전자 메일 데이터를 생성하고, 생성한 전자 메일 데이터를 통신부(922)에 출력한다. 통신부(922)는, 전자 메일 데이터를 부호화 및 변조하여 송신 신호를 생성한다. 그리고, 통신부(922)는, 생성한 송신 신호를, 안테나(921)를 통하여 기지국(도시하지 않음)에 송신한다. 또한, 통신부(922)는, 안테나(921)를 통하여 수신되는 무선 신호를 증폭 및 주파수 변환하여 수신 신호를 취득한다. 그리고, 통신부(922)는, 수신 신호를 복조 및 복호하여 전자 메일 데이터를 복원하고, 복원한 전자 메일 데이터를 제어부(931)에 출력한다. 제어부(931)는, 표시부(930)에 전자 메일의 내용을 표시시킴과 함께, 전자 메일 데이터를 기록 재생부(929)의 기억 매체에 기억시킨다.

기록 재생부(929)는 판독 기입 가능한 임의의 기억 매체를 갖는다. 예를 들어, 기억 매체는, RAM 또는 플래시 메모리 등의 내장형의 기억 매체이어도 되고, 하드 디스크, 자기 디스크, 광자기 디스크, 광 디스크, USB(Universal Serial Bus) 메모리, 또는 메모리 카드 등의 외부 장착형의 기억 매체이어도 된다.

또한, 촬영 모드에서, 예를 들어 카메라부(926)는, 피사체를 촬상하여 화상 데이터를 생성하고, 생성한 화상 데이터를 화상 처리부(927)에 출력한다. 화상 처리부(927)는, 카메라부(926)로부터 입력되는 화상 데이터를 부호화하고, 부호화 스트림을 기억 재생부(929)의 기억 매체에 기억시킨다.

또한, 텔레비전 전화 모드에서, 예를 들어 다중 분리부(928)는, 화상 처리부(927)에 의해 부호화된 영상 스트림과, 음성 코덱(923)으로부터 입력되는 음성 스트림을 다중화하고, 다중화한 스트림을 통신부(922)에 출력한다. 통신부(922)는, 스트림을 부호화 및 변조하여 송신 신호를 생성한다. 그리고, 통신부(922)는, 생성한 송신 신호를, 안테나(921)를 통하여 기지국(도시하지 않음)에 송신한다. 또한, 통신부(922)는, 안테나(921)를 통하여 수신되는 무선 신호를 증폭 및 주파수 변환하여 수신 신호를 취득한다. 이들 송신 신호 및 수신 신호에는 부호화 비트 스트림이 포함될 수 있다. 그리고, 통신부(922)는, 수신 신호를 복조 및 복호하여 스트림을 복원하고, 복원한 스트림을 다중 분리부(928)에 출력한다. 다중 분리부(928)는, 입력되는 스트림으로부터 영상 스트림 및 음성 스트림을 분리하고, 영상 스트림을 화상 처리부(927), 음성 스트림을 음성 코덱(923)에 출력한다. 화상 처리부(927)는, 영상 스트림을 복호하여 영상 데이터를 생성한다. 영상 데이터는, 표시부(930)에 공급되고, 표시부(930)에 의해 일련의 화상이 표시된다. 음성 코덱(923)은, 음성 스트림을 신장 및 D/A 변환하여 아날로그 음성 신호를 생성한다. 그리고, 음성 코덱(923)은, 생성한 음성 신호를 스피커(924)에 공급하여 음성을 출력시킨다.

이와 같이 구성된 휴대 전화기(920)에 있어서, 화상 처리부(927)는, 상술한 실시 형태에 따른 화상 부호화 장치 및 화상 복호 장치의 기능을 갖는다. 그에 의해, 휴대 전화기(920)에서의 화상의 부호화 및 복호 시에 화상의 다이나믹 레인지를 정확하게 재현할 수 있다.

[제3 응용예: 기록 재생 장치]

도 36은, 상술한 실시 형태를 적용한 기록 재생 장치의 개략적인 구성의 일례를 도시하고 있다. 기록 재생 장치(940)는, 예를 들어 수신한 방송 프로그램의 음성 데이터 및 영상 데이터를 부호화하여 기록 매체에 기록한다. 또한, 기록 재생 장치(940)는, 예를 들어 다른 장치로부터 취득되는 음성 데이터 및 영상 데이터를 부호화하여 기록 매체에 기록해도 된다. 또한, 기록 재생 장치(940)는, 예를 들어 유저의 지시에 따라, 기록 매체에 기록되어 있는 데이터를 모니터 및 스피커 상에서 재생한다. 이 때, 기록 재생 장치(940)는 음성 데이터 및 영상 데이터를 복호한다.

기록 재생 장치(940)는 튜너(941), 외부 인터페이스(942), 인코더(943), HDD(Hard Disk Drive)(944), 디스크 드라이브(945), 셀렉터(946), 디코더(947), OSD(On-Screen Display)(948), 제어부(949) 및 유저 인터페이스(950)를 구비한다.

튜너(941)는, 안테나(도시하지 않음)를 통하여 수신되는 방송 신호로부터 원하는 채널의 신호를 추출하고, 추출한 신호를 복조한다. 그리고, 튜너(941)는, 복조에 의해 얻어진 부호화 비트 스트림을 셀렉터(946)에 출력한다. 즉, 튜너(941)는 기록 재생 장치(940)에서의 전송 수단으로서의 역할을 갖는다.

외부 인터페이스(942)는, 기록 재생 장치(940)와 외부 기기 또는 네트워크를 접속하기 위한 인터페이스이다. 외부 인터페이스(942)는, 예를 들어 IEEE1394 인터페이스, 네트워크 인터페이스, USB 인터페이스, 또는 플래시 메모리 인터페이스 등이어도 된다. 예를 들어, 외부 인터페이스(942)를 통하여 수신되는 영상 데이터 및 음성 데이터는 인코더(943)에 입력된다. 즉, 외부 인터페이스(942)는 기록 재생 장치(940)에서의 전송 수단으로서의 역할을 갖는다.

인코더(943)는, 외부 인터페이스(942)로부터 입력되는 영상 데이터 및 음성 데이터가 부호화되어 있지 않은 경우, 영상 데이터 및 음성 데이터를 부호화한다. 그리고, 인코더(943)는 부호화 비트 스트림을 셀렉터(946)에 출력한다.

HDD(944)는, 영상 및 음성 등의 콘텐츠 데이터가 압축된 부호화 비트 스트림, 각종 프로그램 및 그 밖의 데이터를 내부의 하드 디스크에 기록한다. 또한, HDD(944)는, 영상 및 음성의 재생 시에 이들 데이터를 하드 디스크로부터 판독한다.

디스크 드라이브(945)는, 장착되어 있는 기록 매체에의 데이터의 기록 및 판독을 행한다. 디스크 드라이브(945)에 장착되는 기록 매체는, 예를 들어 DVD 디스크(DVD-Video, DVD-RAM, DVD-R, DVD-RW, DVD+R, DVD+RW 등) 또는 Blu-ray(등록 상표) 디스크 등이어도 된다.

셀렉터(946)는, 영상 및 음성의 기록 시에는, 튜너(941) 또는 인코더(943)로부터 입력되는 부호화 비트 스트림을 선택하고, 선택한 부호화 비트 스트림을 HDD(944) 또는 디스크 드라이브(945)에 출력한다. 또한, 셀렉터(946)는, 영상 및 음성의 재생 시에는, HDD(944) 또는 디스크 드라이브(945)로부터 입력되는 부호화 비트 스트림을 디코더(947)에 출력한다.

디코더(947)는, 부호화 비트 스트림을 복호하여 영상 데이터 및 음성 데이터를 생성한다. 그리고, 디코더(947)는, 생성한 영상 데이터를 OSD(948)에 출력한다. 또한, 디코더(904)는, 생성한 음성 데이터를 외부의 스피커에 출력한다.

OSD(948)는, 디코더(947)로부터 입력되는 영상 데이터를 재생하고, 영상을 표시한다. 또한, OSD(948)는, 표시하는 영상에, 예를 들어 메뉴, 버튼 또는 커서 등의 GUI의 화상을 중첩시켜도 된다.

제어부(949)는 CPU 등의 프로세서, 및 RAM 및 ROM 등의 메모리를 갖는다. 메모리는, CPU에 의해 실행되는 프로그램 및 프로그램 데이터 등을 기억한다. 메모리에 의해 기억되는 프로그램은, 예를 들어 기록 재생 장치(940)의 기동 시에 CPU에 의해 읽어들여지고, 실행된다. CPU는, 프로그램을 실행함으로써, 예를 들어 유저 인터페이스(950)로부터 입력되는 조작 신호에 따라 기록 재생 장치(940)의 동작을 제어한다.

유저 인터페이스(950)는 제어부(949)와 접속된다. 유저 인터페이스(950)는, 예를 들어 유저가 기록 재생 장치(940)를 조작하기 위한 버튼 및 스위치, 및 원격제어 신호의 수신부 등을 갖는다. 유저 인터페이스(950)는, 이들 구성 요소를 통하여 유저에 의한 조작을 검출하여 조작 신호를 생성하고, 생성한 조작 신호를 제어부(949)에 출력한다.

이와 같이 구성된 기록 재생 장치(940)에 있어서, 인코더(943)는, 상술한 실시 형태에 따른 화상 부호화 장치의 기능을 갖는다. 또한, 디코더(947)는, 상술한 실시 형태에 따른 화상 복호 장치의 기능을 갖는다. 그에 의해, 기록 재생 장치(940)에서의 화상의 부호화 및 복호 시에 화상의 다이나믹 레인지를 정확하게 재현할 수 있다.

[제4 응용예: 촬상 장치]

도 37은, 상술한 실시 형태를 적용한 촬상 장치의 개략적인 구성의 일례를 도시하고 있다. 촬상 장치(960)는, 피사체를 촬상하여 화상을 생성하고, 화상 데이터를 부호화하여 기록 매체에 기록한다.

촬상 장치(960)는 광학 블록(961), 촬상부(962), 신호 처리부(963), 화상 처리부(964), 표시부(965), 외부 인터페이스(966), 메모리(967), 미디어 드라이브(968), OSD(969), 제어부(970), 유저 인터페이스(971) 및 버스(972)를 구비한다.

광학 블록(961)은 촬상부(962)에 접속된다. 촬상부(962)는 신호 처리부(963)에 접속된다. 표시부(965)는 화상 처리부(964)에 접속된다. 유저 인터페이스(971)는 제어부(970)에 접속된다. 버스(972)는 화상 처리부(964), 외부 인터페이스(966), 메모리(967), 미디어 드라이브(968), OSD(969) 및 제어부(970)를 서로 접속한다.

광학 블록(961)은 포커스 렌즈 및 교축 기구 등을 갖는다. 광학 블록(961)은 피사체의 광학상을 촬상부(962)의 촬상면에 결상시킨다. 촬상부(962)는 CCD(Charge Coupled Device) 또는 CMOS(Complementary Metal Oxide Semiconductor) 등의 이미지 센서를 갖고, 촬상면에 결상한 광학상을 광전 변환에 의해 전기 신호로서의 화상 신호로 변환한다. 그리고, 촬상부(962)는 화상 신호를 신호 처리부(963)에 출력한다.

신호 처리부(963)는, 촬상부(962)로부터 입력되는 화상 신호에 대하여 니 보정, 감마 보정, 색 보정 등의 다양한 카메라 신호 처리를 행한다. 신호 처리부(963)는 카메라 신호 처리 후의 화상 데이터를 화상 처리부(964)에 출력한다.

화상 처리부(964)는, 신호 처리부(963)로부터 입력되는 화상 데이터를 부호화하여 부호화 데이터를 생성한다. 그리고, 화상 처리부(964)는, 생성한 부호화 데이터를 외부 인터페이스(966) 또는 미디어 드라이브(968)에 출력한다. 또한, 화상 처리부(964)는, 외부 인터페이스(966) 또는 미디어 드라이브(968)로부터 입력되는 부호화 데이터를 복호하여 화상 데이터를 생성한다. 그리고, 화상 처리부(964)는, 생성한 화상 데이터를 표시부(965)에 출력한다. 또한, 화상 처리부(964)는, 신호 처리부(963)로부터 입력되는 화상 데이터를 표시부(965)에 출력하여 화상을 표시시켜도 된다. 또한, 화상 처리부(964)는, OSD(969)로부터 취득되는 표시용 데이터를, 표시부(965)에 출력하는 화상에 중첩시켜도 된다.

OSD(969)는, 예를 들어 메뉴, 버튼 또는 커서 등의 GUI의 화상을 생성하고, 생성한 화상을 화상 처리부(964)에 출력한다.

외부 인터페이스(966)는, 예를 들어 USB 입출력 단자로서 구성된다. 외부 인터페이스(966)는, 예를 들어 화상의 인쇄 시에 촬상 장치(960)와 프린터를 접속한다. 또한, 외부 인터페이스(966)에는, 필요에 따라 드라이브가 접속된다. 드라이브에는, 예를 들어 자기 디스크 또는 광 디스크 등의 리무버블 미디어가 장착되고, 리무버블 미디어로부터 판독되는 프로그램이 촬상 장치(960)에 인스톨될 수 있다. 또한, 외부 인터페이스(966)는, LAN 또는 인터넷 등의 네트워크에 접속되는 네트워크 인터페이스로서 구성되어도 된다. 즉, 외부 인터페이스(966)는, 촬상 장치(960)에서의 전송 수단으로서의 역할을 갖는다.

미디어 드라이브(968)에 장착되는 기록 매체는, 예를 들어 자기 디스크, 광자기 디스크, 광 디스크, 또는 반도체 메모리 등의 판독 기입 가능한 임의의 리무버블 미디어이면 좋다. 또한, 미디어 드라이브(968)에 기록 매체가 고정적으로 장착되고, 예를 들어 내장형 하드디스크 드라이브 또는 SSD(Solid State Drive)와 같은 비가반성의 기억부가 구성되어도 된다.

제어부(970)는 CPU 등의 프로세서, 및 RAM 및 ROM 등의 메모리를 갖는다. 메모리는, CPU에 의해 실행되는 프로그램 및 프로그램 데이터 등을 기억한다. 메모리에 의해 기억되는 프로그램은, 예를 들어 촬상 장치(960)의 기동 시에 CPU에 의해 읽어들여지고, 실행된다. CPU는, 프로그램을 실행함으로써, 예를 들어 유저 인터페이스(971)로부터 입력되는 조작 신호에 따라 촬상 장치(960)의 동작을 제어한다.

유저 인터페이스(971)는 제어부(970)와 접속된다. 유저 인터페이스(971)는, 예를 들어 유저가 촬상 장치(960)를 조작하기 위한 버튼 및 스위치 등을 갖는다. 유저 인터페이스(971)는, 이들 구성 요소를 통하여 유저에 의한 조작을 검출하여 조작 신호를 생성하고, 생성한 조작 신호를 제어부(970)에 출력한다.

이와 같이 구성된 촬상 장치(960)에 있어서, 화상 처리부(964)는, 상술한 실시 형태에 따른 화상 부호화 장치 및 화상 복호 장치의 기능을 갖는다. 그에 의해, 촬상 장치(960)에서의 화상의 부호화 및 복호 시에 화상의 다이나믹 레인지를 정확하게 재현할 수 있다.

또한, 본 기술의 실시 형태는, 상술한 실시 형태에 한정되지 않고, 본 기술의 요지를 일탈하지 않는 범위에서 다양한 변경이 가능하다.

예를 들어, 도 19의 표시 제어부(55)와 표시부(56)는, 복호 장치(50)의 외부에 설치되도록 해도 된다.

또한, 예를 들어 본 기술은, 1개의 기능을 네트워크를 통하여 복수의 장치로 분담, 공동하여 처리하는 클라우드 컴퓨팅의 구성을 취할 수 있다.

또한, 상술한 흐름도에서 설명한 각 스텝은, 1개의 장치로 실행하는 것 외에, 복수의 장치로 분담하여 실행할 수 있다.

또한, 1개의 스텝에 복수의 처리가 포함되는 경우에는, 그 1개의 스텝에 포함되는 복수의 처리는, 1개의 장치로 실행하는 것 외에, 복수의 장치로 분담하여 실행할 수 있다.

또한, 본 명세서에서는, 다이나믹 레인지의 특성 정보 등의 각종 정보가 부호화 스트림에 다중화되어 부호화측으로부터 복호측에 전송되는 예에 대하여 설명하였다. 그러나, 이들 정보를 전송하는 방법은 이러한 예에 한정되지 않는다. 예를 들어, 이들 정보는, 부호화 비트 스트림에 다중화되지 않고, 부호화 비트 스트림과 관련지어진 별개의 데이터로서 전송되고 또는 기록되어도 된다. 여기서, 「관련짓는다」라는 용어는, 비트 스트림에 포함되는 화상(슬라이스 또는 블록 등, 화상의 일부이어도 됨)과 당해 화상에 대응하는 정보를 복호 시에 링크시킬 수 있도록 하는 것을 의미한다. 즉, 정보는, 화상(또는 비트 스트림)과는 다른 전송로 상에서 전송되어도 된다. 또한, 정보는, 화상(또는 비트 스트림)과는 다른 기록 매체(또는 동일한 기록 매체의 다른 기록 에리어)에 기록되어도 된다. 또한, 정보와 화상(또는 비트 스트림)은, 예를 들어 복수 프레임, 1프레임, 또는 프레임 내의 일부분 등이 임의의 단위로 서로 관련지어져도 된다.

또한, 본 실시예에서는, 플래그는, 유무(0 or 1) 등의 양자 택일에는 한정되지 않고, 복수의 선택지 안에서 특정한 항목을 식별할 수 있는 정보를 포함한다.

이상, 첨부 도면을 참조하면서 본 발명이 적합한 실시 형태에 대하여 상세하게 설명했지만, 본 발명은 이러한 예에 한정되지 않는다. 본 발명이 속하는 기술의 분야에서의 통상의 지식을 갖는 사람이라면, 청구범위에 기재된 기술적 사상의 범주 내에서 각종 변경예 또는 수정예에 상도할 수 있는 것은 명확하며, 이들에 대해서도 당연히 본 발명의 기술적 범위에 속하는 것으로 이해된다.

또한, 본 기술은 이하와 같은 구성도 취할 수 있다.

(1)화상을 부호화 처리하여 비트 스트림을 생성하는 부호화부와,

Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보를 설정하는 설정부와,

상기 부호화부에 의해 생성된 비트 스트림과 상기 설정부에 의해 설정된 다이나믹 레인지 특성 정보를 전송하는 전송부를 구비하는 화상 처리 장치.

(2)상기 설정부는, Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 코드를 나타내는 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정하는 상기 (1)에 기재된 화상 처리 장치.

(3)상기 설정부는, Captured 화상의 화이트 레벨에 대하여 Developed 화상에 할당되는 코드를 나타내는 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정하는 상기 (1) 또는 (2)에 기재된 화상 처리 장치.

(4)상기 설정부는, Captured 화상의 화이트 레벨에 대하여 Developed 화상에 할당되는 코드를 나타내는 화이트 레벨 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정하는 상기 (1) 내지 (3) 중 어느 하나에 기재된 화상 처리 장치.

(5)상기 설정부는, Developed 화상의 화이트 레벨에 할당되는 코드의 최대값을 나타내는 최대 화이트 레벨 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정하는 상기 (1) 내지 (4) 중 어느 하나에 기재된 화상 처리 장치.

(6)상기 설정부는, Developed 화상의 블랙 레벨의 코드를 나타내는 블랙 레벨 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정하는 상기 (1) 내지 (5) 중 어느 하나에 기재된 화상 처리 장치.

(7)상기 설정부는, Developed 화상의 그레이 레벨의 코드를 나타내는 그레이 레벨 코드 정보를, 상기 다이나믹 레인지 특성 정보로서 설정하는 상기 (1) 내지 (6) 중 어느 하나에 기재된 화상 처리 장치.

(8)상기 설정부는, Captured 화상의 화이트 레벨의 최대값을 나타내는 최대 화이트 레벨 정보를, 상기 다이나믹 레인지 특성 정보로서 설정하는 상기 (1) 내지 (7) 중 어느 하나에 기재된 화상 처리 장치.

(9)상기 설정부는, 상기 비트 스트림을 복호 처리한 화상의 주목 영역의 휘도 레인지를 나타내는 정보를, 상기 다이나믹 레인지 특성 정보로서 설정하는 상기 (1) 내지 (8) 중 어느 하나에 기재된 화상 처리 장치.

(10)상기 설정부는, 상기 비트 스트림을 복호 처리한 화상의 주목 영역의 위치 및 오프셋을 나타내는 정보를, 상기 다이나믹 레인지 특성 정보로서 설정하는 상기 (1) 내지 (9) 중 어느 하나에 기재된 화상 처리 장치.

(11)상기 전송부는, 상기 다이나믹 레인지 특성 정보를, 상기 비트 스트림을 복호 처리한 화상을 표시할 때에 사용하는 보조 정보로서 전송하는 상기 (1) 내지 (10) 중 어느 하나에 기재된 화상 처리 장치.

(12)상기 전송부는, 상기 다이나믹 레인지 특성 정보를, 기존의 보조 정보를 확장한 확장 보조 정보로서 전송하는 상기 (1) 내지 (10) 중 어느 하나에 기재된 화상 처리 장치.

(13)상기 전송부는, 상기 다이나믹 레인지 특성 정보를, tone_mapping_information SEI(Supplemental enhancement information)로서 전송하는 상기 (1) 내지 (10) 중 어느 하나에 기재된 화상 처리 장치.

(14)상기 전송부는, tone_mapping_information SEI 대상으로, 상기 다이나믹 레인지 특성 정보를 전송할 때에 사용하는 model_id를 확장하여 상기 다이나믹 레인지 특성 정보를 SEI로서 전송하는 상기 (1) 내지 (10) 중 어느 하나에 기재된 화상 처리 장치.

(15)상기 전송부는, 상기 다이나믹 레인지 특성 정보를, 상기 화상의 유용성을 시퀀스 단위로 나타내는 VUI(Video Usability Information)로서 전송하는 상기 (1) 내지 (10) 중 어느 하나에 기재된 화상 처리 장치.

(16)상기 부호화부는, AVC/H.264 규격에 준한 부호화 방식에 따라 상기 화상을 부호화 처리하는 상기 (1) 내지 (15) 중 어느 하나에 기재된 화상 처리 장치.

(17)화상을 부호화 처리하여 비트 스트림을 생성하고,

Captured 화상에 대하여 Developed 화상에 할당되는 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보를 설정하고,

생성된 비트 스트림과 설정된 다이나믹 레인지 특성 정보를 전송하는 화상 처리 방법.

(18)비트 스트림과, 상기 비트 스트림을 복호 처리한 화상에 대한 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보를 수취하는 수취부와,

상기 수취부에 의해 수취된 비트 스트림을 복호 처리하여 화상을 생성하는 복호부와,

상기 수취부에 의해 수취된 다이나믹 레인지 특성 정보를 사용하여, 상기 복호부에 의해 생성된 화상에 대한 다이나믹 레인지를 조정하는 화상 조정부를 구비하는 화상 처리 장치.

(19)상기 비트 스트림과, 상기 다이나믹 레인지 특성 정보를 수취하는 수취부를 더 구비하고,

상기 복호부는, 상기 수취부에 의해 수취된 비트 스트림을 복호 처리하고,

상기 화상 조정부는, 상기 수취부에 의해 수취된 다이나믹 레인지 특성 정보를 사용하여, 상기 복호부에 의해 생성된 화상에 대한 다이나믹 레인지를 조정하는 상기 (18)에 기재된 화상 처리 장치.

(20)비트 스트림과, 상기 비트 스트림을 복호 처리한 화상에 대한 다이나믹 레인지의 특성을 나타내는 다이나믹 레인지 특성 정보를 수취하고,

수취된 비트 스트림을 복호 처리하여 화상을 생성하고,

수취된 다이나믹 레인지 특성 정보를 사용하여, 생성된 화상에 대한 다이나믹 레인지를 조정하는 화상 처리 방법.

1 : 부호화 장치
2 : 부호화부
3 : 설정부
4 : 전송부
50 : 복호 장치
51 : 수취부
52 : 추출부
53 : 복호부
54 : 화상 조정부
55 : 표시 제어부
56 : 표시부
201 : 부호화 장치
211 : 부호화부
251 : 복호 장치
261 : 복호부

Claims (80)

1. 화상 처리 장치로서,
   화상 데이터를 복호(decode)하여 복호된 화상 데이터를 생성하고,
   상기 화상 데이터의 휘도의 다이나믹 레인지를 참조 화이트 레벨에 대한 퍼센트로서 나타낸 최대 화상 화이트 레벨 정보, 및 화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보를 포함하는 다이나믹 레인지 특성 정보로서, 상기 화상 데이터와 관련지어진 다이나믹 레인지 특성 정보를 수신하고,
   상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 조정하도록 구성된 적어도 하나의 프로세서
   를 포함하는, 화상 처리 장치.
2. 제1항에 있어서,
   상기 적어도 하나의 프로세서는, 또한 상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 상기 화상 데이터의 다이나믹 레인지로 증가시키도록 구성된, 화상 처리 장치.
3. 제1항에 있어서,
   상기 다이나믹 레인지 특성 정보는, 최대 화이트 레벨의 휘도 코드값을 식별하는 최대 화상 화이트 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
4. 제1항에 있어서,
   상기 다이나믹 레인지 특성 정보는, 화이트 레벨의 휘도 코드값을 식별하는 화이트 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
5. 제4항에 있어서,
   상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 화상 처리 장치.
6. 제1항에 있어서,
   상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
7. 제1항에 있어서,
   상기 다이나믹 레인지 특성 정보는, 0과 1024 사이의 범위 내에 있는 휘도 코드값으로서, 상기 화상 데이터의 휘도와 관련지어진 휘도 코드값을 식별하는, 화상 처리 장치.
8. 화상 처리 장치로서,
   화상 데이터를 부호화(encode)하여 부호화된 화상 데이터를 생성하고,
   상기 화상 데이터의 휘도의 다이나믹 레인지를 참조 화이트 레벨에 대한 퍼센트로서 나타낸 최대 화상 화이트 레벨 정보, 및 화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보를 포함하는 다이나믹 레인지 특성 정보로서, 상기 화상 데이터와 관련지어진 다이나믹 레인지 특성 정보를 제공하도록 구성된 적어도 하나의 프로세서
   를 포함하는, 화상 처리 장치.
9. 제8항에 있어서,
   상기 다이나믹 레인지 특성 정보는, 최대 화이트 레벨의 휘도 코드값을 식별하는 최대 화상 화이트 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
10. 제8항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 화이트 레벨의 휘도 코드값을 식별하는 화이트 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
11. 제10항에 있어서,
    상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 화상 처리 장치.
12. 제8항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
13. 제8항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 0과 1024 사이의 범위 내에 있는 휘도 코드값으로서, 상기 화상 데이터의 휘도와 관련지어진 휘도 코드값을 식별하는, 화상 처리 장치.
14. 적어도 하나의 프로세서에 의해 실행될 때, 화상 처리 방법을 수행하게 하는 명령어를 기록한 적어도 하나의 컴퓨터 판독가능한 기억 매체로서,
    상기 방법은,
    화상 데이터를 복호하여 복호된 화상 데이터를 생성하는 단계와,
    상기 화상 데이터의 휘도의 다이나믹 레인지를 참조 화이트 레벨에 대한 퍼센트로서 나타낸 최대 화상 화이트 레벨 정보, 및 화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보를 포함하는 다이나믹 레인지 특성 정보로서, 상기 화상 데이터와 관련지어진 다이나믹 레인지 특성 정보를 수신하는 단계와,
    상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 조정하는 단계
    를 포함하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
15. 제14항에 있어서,
    상기 방법은, 상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 상기 화상 데이터의 다이나믹 레인지로 증가시키는 단계를 더 포함하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
16. 제14항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 최대 화이트 레벨의 휘도 코드값을 식별하는 최대 화상 화이트 레벨 코드값 정보를 더 포함하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
17. 제14항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 화이트 레벨의 휘도 코드값을 식별하는 화이트 레벨 코드값 정보를 더 포함하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
18. 제17항에 있어서,
    상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
19. 제14항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
20. 제14항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 0과 1024 사이의 범위 내에 있는 휘도 코드값으로서, 상기 화상 데이터의 휘도와 관련지어진 휘도 코드값을 식별하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
21. 화상 데이터와, 상기 화상 데이터가 적어도 하나의 프로세서에 의해 복호될 때, 상기 적어도 하나의 프로세서에 의해 처리되어 상기 화상 데이터의 다이나믹 레인지를 조정하는, 상기 화상 데이터와 관련지어진 다이나믹 레인지 특성 정보를 기록한 적어도 하나의 컴퓨터 판독가능한 기억 매체로서,
    상기 다이나믹 레인지 특성 정보는,
    상기 화상 데이터의 휘도의 다이나믹 레인지를 참조 화이트 레벨에 대한 퍼센트로서 나타낸 최대 화상 화이트 레벨 정보, 및 화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보
    를 포함하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
22. 제21항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 최대 화이트 레벨의 휘도 코드값을 식별하는 최대 화상 화이트 레벨 코드값 정보를 더 포함하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
23. 제21항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 화이트 레벨의 휘도 코드값을 식별하는 화이트 레벨 코드값 정보를 더 포함하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
24. 제23항에 있어서,
    상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
25. 제21항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
26. 제21항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 0과 1024 사이의 범위 내에 있는 휘도 코드값으로서, 상기 화상 데이터의 휘도와 관련지어진 휘도 코드값을 식별하는, 적어도 하나의 컴퓨터 판독가능한 기억 매체.
27. 화상 처리 장치로서,
    HEVC(High Efficiency Video Coding)에 따라 부호화된 화상 데이터를 복호(decode)하여 복호된 화상 데이터를 생성하고;
    상기 부호화된 화상 데이터의 휘도의 다이나믹 레인지를 참조 화이트 레벨에 대한 퍼센트로서 나타낸 카메라 ISO 감도 정보, 및 화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보를 포함하는 다이나믹 레인지 특성 정보로서, 상기 부호화된 화상 데이터와 관련지어진 상기 다이나믹 레인지 특성 정보를 수신하고 - 상기 퍼센트는 100%보다 크고, 상기 카메라 ISO 감도 정보는 화상의 캡처 시의 카메라 감도를 나타내고, 상기 다이나믹 레인지 특성 정보는 또한 상기 부호화된 화상 데이터의 참조 화면 화이트 레벨 설정을 나타내는 참조 화면 휘도 정보를 포함하고, 상기 참조 화면 화이트 레벨 설정은 화상 생성 프로세스에 사용되고 평방 미터당 칸델라 단위들을 가짐 -; 그리고
    상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 조정하도록 구성된 적어도 하나의 프로세서를 포함하고,
    상기 다이나믹 레인지 특성 정보는 HEVC에 정의된 톤 맵핑 인포메이션인, 화상 처리 장치.
28. 제27항에 있어서,
    상기 적어도 하나의 프로세서는, 또한 상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 상기 부호화된 화상 데이터의 다이나믹 레인지로 증가시키도록 구성된, 화상 처리 장치.
29. 제27항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 최대 화이트 레벨의 휘도 코드값을 식별하는 최대 화상 화이트 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
30. 제27항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 화이트 레벨의 휘도 코드값을 식별하는 화이트 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
31. 제30항에 있어서,
    상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 화상 처리 장치.
32. 제27항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
33. 제27항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 0과 1024 사이의 범위 내에 있는 휘도 코드값으로서, 상기 부호화된 화상 데이터의 휘도와 관련지어진 휘도 코드값을 식별하는, 화상 처리 장치.
34. 적어도 하나의 프로세서에 의해 실행될 때, 화상 처리 방법을 수행하게 하는 컴퓨터 실행가능 명령어를 기록한 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체로서,
    상기 방법은:
    HEVC(High Efficiency Video Coding)에 따라 부호화된 화상 데이터를 복호(decode)하여 복호된 화상 데이터를 생성하는 단계;
    상기 부호화된 화상 데이터의 휘도의 다이나믹 레인지를 참조 화이트 레벨에 대한 퍼센트로서 나타낸 카메라 ISO 감도 정보, 및 화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보를 포함하는 다이나믹 레인지 특성 정보로서, 상기 부호화된 화상 데이터와 관련지어진 상기 다이나믹 레인지 특성 정보를 수신하는 단계 - 상기 퍼센트는 100%보다 크고, 상기 다이나믹 레인지 특성 정보는 화상의 캡처 시의 카메라 감도를 나타내고, 최대 화상 화이트 레벨 정보는 또한 상기 부호화된 화상 데이터의 참조 화면 화이트 레벨 설정을 나타내는 참조 화면 휘도 정보를 포함하고, 상기 참조 화면 화이트 레벨 설정은 화상 생성 프로세스에 사용되고 평방 미터당 칸델라 단위들을 가짐 -; 및
    상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 조정하는 단계
    를 포함하고, 상기 다이나믹 레인지 특성 정보는 HEVC에 정의된 톤 맵핑 인포메이션인, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
35. 제34항에 있어서,
    상기 방법은 상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 상기 부호화된 화상 데이터의 다이나믹 레인지로 증가시키는 단계를 더 포함하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
36. 제34항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 최대 화이트 레벨의 휘도 코드값을 식별하는 최대 화상 화이트 레벨 코드값 정보를 더 포함하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
37. 제34항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 화이트 레벨의 휘도 코드값을 식별하는 화이트 레벨 코드값 정보를 더 포함하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
38. 제37항에 있어서,
    상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
39. 제34항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
40. 제34항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 0과 1024 사이의 범위 내에 있는 휘도 코드값으로서, 상기 부호화된 화상 데이터의 휘도와 관련지어진 휘도 코드값을 식별하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
41. 부호화된 화상 데이터가 적어도 하나의 프로세서에 의해 복호될 때, 상기 적어도 하나의 프로세서에 의해 처리되어 상기 부호화된 화상 데이터의 다이나믹 레인지를 조정하는, 상기 부호화된 화상 데이터와 관련지어진 다이나믹 레인지 특성 정보 및 HEVC에 따라 부호화된 화상 데이터를 기록한 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체로서,
    상기 다이나믹 레인지 특성 정보는:
    상기 부호화된 화상 데이터의 휘도의 다이나믹 레인지를 참조 화이트 레벨에 대한 퍼센트로서 나타낸 카메라 ISO 감도 정보 - 상기 카메라 ISO 감도 정보는 화상의 캡쳐 시의 카메라 감도를 나타냄 -;
    화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보; 및
    상기 부호화된 화상 데이터의 참조 화면 휘도 정보 - 상기 참조 화면 화이트 레벨 설정은 화상 생성 프로세스에 사용되고 평방 미터당 칸델라 단위들을 가짐 -
    을 포함하고,
    상기 다이나믹 레인지 특성 정보는 HEVC에 정의된 톤 맵핑 인포메이션인, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
42. 제41항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 최대 화이트 레벨의 휘도 코드값을 식별하는 최대 화상 화이트 레벨 코드값 정보를 더 포함하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
43. 제41항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 화이트 레벨의 휘도 코드값을 식별하는 화이트 레벨 코드값 정보를 더 포함하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
44. 제43항에 있어서,
    상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
45. 제41항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
46. 제41항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 0과 1024 사이의 범위 내에 있는 휘도 코드값으로서, 상기 부호화된 화상 데이터의 휘도와 관련지어진 휘도 코드값을 식별하는, 적어도 하나의 비-일시적 컴퓨터 판독가능한 기억 매체.
47. 화상 처리 장치로서,
    HEVC(High Efficiency Video Coding)에 따라 화상 데이터를 부호화하여 부호화된 화상 데이터를 생성하고; 그리고
    상기 화상 데이터와 관련된 다이나믹 레인지 특성 정보를 제공하도록 구성된 적어도 하나의 프로세서를 포함하고,
    상기 다이나믹 레인지 특성 정보는:
    상기 부호화된 화상 데이터의 휘도의 다이나믹 레인지를 참조 화이트 레벨에 대한 퍼센트로서 나타낸 카메라 ISO 감도 정보, 및 화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보를 포함하고, 상기 퍼센트는 100%보다 크고, 상기 카메라 ISO 감도 정보는 화상의 캡처 시의 카메라 감도를 나타내고,
    상기 다이나믹 레인지 특성 정보는 HEVC에 정의된 톤 맵핑 인포메이션인, 화상 처리 장치.
48. 제47항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 최대 화이트 레벨의 휘도 코드값을 식별하는 최대 화상 화이트 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
49. 제47항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 화이트 레벨의 휘도 코드값을 식별하는 화이트 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
50. 제49항에 있어서,
    상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 화상 처리 장치.
51. 제47항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
52. 제47항에 있어서,
    상기 다이나믹 레인지 특성 정보는 상기 화상 데이터의 휘도와 관련된 휘도 코드 값을 식별하고, 상기 휘도 코드 값은 0과 1024 사이의 범위 내에 있는 화상 처리 장치.
53. 화상 처리 장치로서,
    화상 데이터를 부호화하여 부호화된 화상 데이터를 생성하고; 그리고
    상기 화상 데이터와 관련된 다이나믹 레인지 특성 정보를 제공하도록 구성된 적어도 하나의 프로세서를 포함하고,
    상기 다이나믹 레인지 특성 정보는:
    상기 부호화된 화상 데이터의 휘도의 다이나믹 레인지를 참조 화이트 레벨에 대한 퍼센트로서 나타낸 최대 화상 화이트 레벨 정보, 및 화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보 - 상기 퍼센트는 100%보다 크거나 같음 -,
    상기 부호화된 화상 데이터의 화이트 레벨의 휘도 코드값을 식별하는 화이트 레벨 코드값 정보, 및
    상기 부호화된 화상 데이터의 최대 화이트 레벨 코드값 정보
    를 포함하고,
    상기 최대 화이트 레벨 코드값 정보는 상기 화이트 레벨 코드값 정보보다 크거나 같고, 그리고
    상기 다이나믹 레인지 특성 정보는 톤 맵핑 인포메이션인, 화상 처리 장치.
54. 제53항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 최대 화이트 레벨의 휘도 코드값을 식별하는 최대 화상 화이트 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
55. 제53항에 있어서,
    상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 화상 처리 장치.
56. 제53항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
57. 제53항에 있어서,
    상기 다이나믹 레인지 특성 정보는 상기 화상 데이터의 휘도와 관련된 휘도 코드 값을 식별하고, 상기 휘도 코드 값은 0과 1024 사이의 범위 내에 있는 화상 처리 장치.
58. 제53항에 있어서, 상기 다이나믹 레인지 특성 정보는 톤 맵핑 인포케이션 SEI(Supplemental enhancement information)인, 화상 처리 장치.
59. 제53항에 있어서, 상기 화상 데이터는 AVC(Advanced Video Coding)에 따라 부호화되는, 화상 처리 장치.
60. 화상 처리 장치로서,
    화상 데이터를 부호화하여 부호화된 화상 데이터를 생성하고; 그리고
    상기 화상 데이터와 관련된 다이나믹 레인지 특성 정보의 유/무를 나타내는 플래그가 상기 다이나믹 레인지 특성 정보의 유(presence)를 표시하는 경우, cd/m² 단위의 화이트 콘텐츠를 상정하여 생성된 화이트 레벨에 대하여, 상기 화상 데이터의 휘도의 다이나믹 레인지를 표시하는 최대 화상 화이트 레벨 정보와, 화이트 레벨의 참조 표시 휘도를 표시하는 참조 표시 정보를 포함하는 상기 다이나믹 레인지 특성 정보를 제공하도록 구성된 적어도 하나의 프로세서
    를 포함하는 화상 처리 장치.
61. 제60항에 있어서,
    상기 화이트 레벨 코드값 정보는, 복수의 화이트 레벨의 복수의 휘도 코드값을 식별하는, 화상 처리 장치.
62. 제60항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 블랙 레벨의 휘도 코드값을 식별하는 블랙 레벨 코드값 정보를 더 포함하는, 화상 처리 장치.
63. 제60항에 있어서,
    상기 다이나믹 레인지 특성 정보는, 0과 1024 사이의 범위 내에 있는 휘도 코드값으로서, 상기 부호화된 화상 데이터의 휘도와 관련지어진 휘도 코드값을 식별하는, 화상 처리 장치.
64. 제60항에 있어서,
    상기 다이나믹 레인지 특성 정보는 톤_맵핑_인포케이션 SEI(Supplemental enhancement information)인, 화상 처리 장치.
65. 제60항에 있어서,
    상기 다이나믹 레인지 특성 정보는 다이나믹 레인지의 대안적인 특성 정보인, 화상 처리 장치.
66. 화상 처리 장치로서,
    화상 데이터를 복호하여 복호된 화상 데이터를 생성하고;
    상기 화상 데이터와 관련된 다이나믹 레인지 특성 정보의 유/무를 나타내는 플래그가 유(presence)를 표시하는 경우, cd/m² 단위의 화이트 콘텐츠를 상정하여 생성된 화이트 레벨에 대하여, 상기 화상 데이터의 휘도의 다이나믹 레인지를 표시하는 최대 화상 화이트 레벨 정보와, 화이트 레벨의 참조 표시 휘도를 표시하는 참조 표시 정보를 포함하는 상기 다이나믹 레인지 특성 정보를 획득하고; 그리고
    상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 조정하도록 구성된 적어도 하나의 프로세서
    를 포함하는 화상 처리 장치.
67. 제66항에 있어서,
    상기 화이트 레벨 코드 값 정보는 복수의 화이트 레벨의 복수의 휘도 코드 값을 식별하는 화상 처리 장치.
68. 제66항에 있어서,
    상기 다이나믹 레인지 특성 정보는 블랙 레벨의 휘도 코드 값을 식별하는 블랙 레벨 코드 값 정보를 더 포함하는 화상 처리 장치.
69. 제66항에 있어서,
    상기 다이나믹 레인지 특성 정보는 상기 복호된 화상 데이터의 휘도와 관련된 휘도 코드 값을 식별하고, 상기 휘도 코드 값은 0과 1024 사이의 범위 내에 있는 화상 처리 장치.
70. 제66항에 있어서, 상기 다이나믹 레인지 특성 정보는 톤_맵핑_정보 SEI(Supplement enhancement information)인 화상 처리 장치.
71. 제66항에 있어서, 상기 다이나믹 레인지 특성 정보는 다이나믹 레인지의 대안적인 특성 정보인 화상 처리 장치.
72. 제66항에 있어서, 상기 다이나믹 레인지 특성 정보는 최대 화이트 레벨의 휘도 코드 값을 식별하는 최대 화상 화이트 레벨 코드 값 정보를 더 포함하는 화상 처리 장치.
73. 화상 처리 장치로서,
    화상 데이터를 부호화하여 부호화된 화상 데이터를 생성하고; 그리고
    상기 화상 데이터와 관련된 다이나믹 레인지 특성 정보의 유/무를 나타내는 플래그가 유(presence)를 표시하는 경우, cd/m² 단위의 화이트 콘텐츠를 상정하여 생성된 화이트 레벨에 대하여, 상기 화상 데이터의 휘도의 다이나믹 레인지를 표시하는 최대 화상 화이트 레벨 정보와, 화이트 레벨의 참조 표시 휘도를 표시하는 참조 표시 정보를 포함하는 상기 다이나믹 레인지 특성 정보를 제공하도록 구성된 적어도 하나의 프로세서
    를 포함하는 화상 처리 장치.
74. 제73항에 있어서, 상기 화이트 레벨 코드 값 정보는 복수의 화이트 레벨의 복수의 휘도 코드 값을 식별하는 화상 처리 장치.
75. 제73항에 있어서,
    상기 다이나믹 레인지 특성 정보는 블렉 레벨의 휘도 코드 값을 식별하는 블렉 레벨 코드 값 정보를 더 포함하는 화상 처리 장치.
76. 제73항에 있어서,
    상기 다이나믹 레인지 특성 정보는 상기 부호화된 화상 데이터의 휘도와 관련된 휘도 코드 값을 식별하고, 상기 휘도 코드 값은 0과 1024 사이의 범위 내에 있는 화상 처리 장치.
77. 제73항에 있어서, 상기 다이나믹 레인지 특성 정보는 톤_맵핑_정보 SEI(Supplement enhancement information)인 화상 처리 장치.
78. 제73항에 있어서, 상기 다이나믹 레인지 특성 정보는 다이나믹 레인지의 대안적인 특성 정보인 화상 처리 장치.
79. 제73항에 있어서,
    상기 다이나믹 레인지 특성 정보는 최대 화이트 레벨의 휘도 코드 값을 식별하는 최대 화상 화이트 레벨 코드 값 정보를 더 포함하는 화상 처리 장치.
80. 화상 처리 장치로서,
    화상 데이터를 복호하여 복호된 화상 데이터를 생성하고;
    상기 화상 데이터와 관련된 다이나믹 레인지 특성 정보의 유/무를 나타내는 플래그가 유(presence)를 표시하는 경우, cd/m2 단위의 콘텐츠를 나타내는 최대 화상 화이트 레벨 정보, 및 화이트 레벨의 참조 표시 휘도를 나타낸 참조 표시 정보를 포함하는 상기 다이나믹 레인지 특성 정보를 수신하고; 그리고
    상기 다이나믹 레인지 특성 정보에 기초하여 상기 복호된 화상 데이터의 다이나믹 레인지를 조정하도록 구성된 적어도 하나의 프로세서
    를 포함하는 화상 처리 장치.

Images