KR101785671B1 - 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치 - Google Patents

디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치 Download PDF

Info

Publication number
KR101785671B1
KR101785671B1 KR1020167006602A KR20167006602A KR101785671B1 KR 101785671 B1 KR101785671 B1 KR 101785671B1 KR 1020167006602 A KR1020167006602 A KR 1020167006602A KR 20167006602 A KR20167006602 A KR 20167006602A KR 101785671 B1 KR101785671 B1 KR 101785671B1
Authority
KR
South Korea
Prior art keywords
information
display
mastering
brightness
video data
Prior art date
Application number
KR1020167006602A
Other languages
English (en)
Other versions
KR20160052570A (ko
Inventor
오현묵
서종열
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of KR20160052570A publication Critical patent/KR20160052570A/ko
Application granted granted Critical
Publication of KR101785671B1 publication Critical patent/KR101785671B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4856—End-user interface for client configuration for language selection, e.g. for the menu or subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals
    • H04N9/8722—Regeneration of a colour reference signal, e.g. the colour synchronisaton burst signal, the chrominance signal carrier
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/04—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed using circuits for interfacing with colour displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43632—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3182—Colour adjustment, e.g. white balance, shading or gamut
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/066—Adjustment of display parameters for control of contrast
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/06—Colour space transformation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller

Abstract

본 발명은 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및/또는 장치의 제공에 관한 것이다. 본 발명의 일 실시예에 따른 비디오 데이터 처리 방법은 인터페이스를 통해 소스 디바이스로부터 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 정보를 수신하는 단계, 여기서, 상기 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함하고 및 상기 수신한 비디오 데이터를 재생하는 단계를 포함한다.

Description

디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치{METHOD AND APPARATUS FOR PROCESSING VIDEO DATA FOR DISPLAY ADAPTIVE IMAGE REPRODUCTION}
본 발명은 비디오 데이터의 처리에 관한 것이다. 보다 상세하게는, 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치에 관한 것이다.
비디오 신호 처리 속도가 빨라지면서 초고해상도 (ultra high definition; UHD) 비디오를 인코딩/디코딩하는 방안이 연구되고 있다.
UHD 컨텐츠는 기존의 컨텐츠 대비 다양한 측면에서 향상된 화질을 제공하는 것을 목표로 한다. 이를 위해 방송 분야뿐 아니라 다양한 분야에서 UHD 비디오 요소에 대한 연구 및 개발이 진행되고 있다. 그 중 기존 컨텐츠에서 제공하지 못하였던 색감 및 밝기 측면에서 향상된 시청자 경험을 제공에 대한 요구가 높아지고 있다.
이에 따라 UHD 비디오를 구성하는 다양한 요소 중 색상 및 밝기 표현 범위를 확대하여 고품질 영상을 제공하려는 노력이 계속되고 있다.
UHD 디스플레이 기기는 색상 및 밝기 측면의 표현력에서 기존 디스플레이 기기와의 차별성을 갖는다.
그러나, 다양한 디스플레이 기기 환경 하에서 UHD 컨텐츠를 최적의 환경에서 시청하기 위한 기술에 대한 개발되지 않는 문제점이 있다.
예를 들어 같은 차세대 디스플레이 기기 보급이 진행되는 상황에서 UHD 컨텐츠가 공급되는 경우 디스플레이 기기의 물리적 특성에 따라 색감 혹은 밝기 제한이 생겨 컨텐츠 감상이 제대로 이뤄지지 않는 문제점이 있다.
디스플레이 기기에 적응적으로 컨텐츠의 색감 및 밝기를 조정하기 위해서는 디스플레이의 기기 특성에 대한 정확한 분석을 바탕으로 컨텐츠 변환이 이뤄져야 한다. 그러나, 만약 디스플레이 외부 기기를 통해 UHD 컨텐츠가 공급되는 경우, 디스플레이의 기기 특성을 제한적으로 전달하는 문제점이 있었다.
본 발명의 목적은, 다양한 디스플레이 기기 환경 하에서 UHD 컨텐츠를 포함한 컨텐츠를 최적의 환경에서 시청할 수 있는 비디오 처리 방법 및 비디오 처리 장치를 제공하는 것이다.
본 발명의 다른 목적은, UHD 컨텐츠를 포함한 UHD 컨텐츠를 다양한 디스플레이 기기에서 표출할 경우, 그 디스플레이 기기들의 물리적 특성에 따라 색감 혹은 밝기 표현 제한이 적도록 하는 비디오 처리 방법 및 비디오 처리 장치를 제공하는 것이다.
본 발명의 다른 목적은, 디스플레이 외부 기기를 통해 UHD 컨텐츠를 포함한 컨텐츠가 공급되는 경우라도 디스플레이의 기기 특성을 전달하여 UHD 컨텐츠를 포함한 컨텐츠를 최적의 환경에서 시청할 수 있는 비디오 처리 방법 및 비디오 처리 장치를 제공하는 것이다.
본 발명의 일 실시예에 따른 비디오 데이터 처리 방법은 인터페이스를 통해 소스 디바이스로부터 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 정보를 수신하는 단계, 여기서, 상기 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함하고, 상기 수신한 비디오 데이터를 재생하는 단계를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 최대 밝기를 나타내는 정보 및 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 상기 EOTF 타입 정보에 따른 EOTF에 대한 부가 정보를 포함할 수 있다.
본 발명의 다른 일 실시예에 따른 비디오 데이터 처리 장치는 인터페이스를 통해 소스 디바이스로부터 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 정보를 수신하는 수신부, 여기서, 상기 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함하고, 상기 수신한 비디오 데이터를 재생하는 재생부를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 최대 밝기를 나타내는 정보 및 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 상기 EOTF 타입 정보에 따른 EOTF에 대한 부가 정보를 포함할 수 있다.
본 발명의 또 다른 일 실시예에 따른 비디오 데이터 처리 방법은 비디오 데이터를 디코딩하는 단계, 인터페이스를 통해 상기 디코딩된 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 정보를 싱크 디바이스로 전송하는 단계, 여기서, 상기 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 최대 밝기를 나타내는 정보 및 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 상기 EOTF 타입 정보에 따른 EOTF에 대한 부가 정보를 포함할 수 있다.
본 발명의 또 다른 일 실시예에 따른 비디오 데이터 처리 장치는 비디오 데이터를 디코딩하는 디코더, 인터페이스를 통해 상기 디코딩된 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 정보를 싱크 디바이스로 전송하는 전송부, 여기서, 상기 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 최대 밝기를 나타내는 정보 및 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함할 수 있다.
바람직하게는, 상기 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함할 수 있다.
본 발명의 실시예에 따르면, 다양한 디스플레이 기기 환경 하에서 UHD 컨텐츠를 포함한 컨텐츠를 최적의 환경에서 시청할 수 있다.
본 발명의 실시예에 따르면, UHD 컨텐츠를 포함한 UHD 컨텐츠를 다양한 디스플레이 기기에서 표출할 경우, 그 디스플레이 기기들의 물리적 특성에 따라 색감 혹은 밝기 표현 제한이 적도록 할 수 있다.
본 발명의 실시예에 따르면 디스플레이 외부 기기를 통해 UHD 컨텐츠가 공급되는 경우라도 디스플레이의 기기 특성을 전달하여 UHD 컨텐츠를 포함한 UHD 컨텐츠를 최적의 환경에서 시청할 수 있다.
도 1은 본 발명의 일 실시예에 따른 비디오 데이터 처리 방법을 나타낸 도면이다.
도 2는 비디오 영상을 송수신하기 위해 소스 디바이스와 싱크 디바이스가 연결된 예를 나타낸 도면이다.
도 3은 본 발명에 실시예에 따라 소스 디바이스가 싱크 디바이스와 연결된 경우 정보를 송수신하는 실시예를 나타낸 도면이다.
도 4는 본 발명의 실시예에 따라 싱크 디바이스가 소스 디바이스로 전달하는 정보의 일 예를 나타낸 도면이다.
도 5는 본 발명의 실시예에 따라 싱크 디바이스가 소스 디바이스로 전달하는 정보의 일 예로서 위에서 개시한 실시예의 구체적인 필드 값을 예시한 도면이다.
도 6은 개시한 본 발명의 실시예에 따른 control option flag의 상세한 예를 예시한 도면이다.
도 7은 기술한 본 발명의 실시예에 따른 Sink Device Dynamic Range 정보의 상세한 예를 예시한 도면이다.
도 8은 본 발명의 실시예에 따라 싱크 디바이스에서 소스 디바이스로 전달하는 디스플레이 관련 정보로서, DisplayID의 Display Parameters Data Block을 예시한 도면이다.
도 9는 본 발명의 실시예에서 기술하는 디스플레이 관련 정보로서, Display Device Data Block을 예시한 도면이다.
도 10은 본 발명의 일 실시예에 따라 싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 또 다른 예를 예시한 도면이다.
도 11은 본 발명에 실시예에 따라 소스 디바이스에서 싱크 디바이스로 전달할 정보를 예시한 도면이다.
도 12는 본 발명의 실시예에 따라 개시한 포스트 프로세싱 타입 정보의 상세한 예를 개시한 도면이다.
도 13은 본 발명의 실시예에 따라 개시한 오리지널 컬러 개멋 정보(Orig_color_gamut)의 상세한 예를 개시한 도면이다.
도 14는 본 발명의 실시예에 따라 소스 디바이스가 싱크 디바이스로 전달하는 영상의 컬러 정보를 전달하는 다른 예를 개시한다.
도 15는 본 발명의 일 실시예에 따른 신호 처리 장치의 실시예들 및 그 동작을 예시한 도면이다.
도 16은 본 발명의 일 실시예에 따른 EOTF type의 구성을 나타낸 도면이다.
도 17은 본 발명의 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
도 18은 본 발명의 다른 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
도 19는 본 발명의 또 다른 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
도 20은 본 발명의 일 실시예에 따라 싱크 디바이스가 처리 가능한 Transfer Function에 대한 정보를 전달하기 위한 방법을 나타낸 도면이다.
도 21은 본 발명의 일 실시예에 따라 싱크 디바이스가 처리 가능한 Transfer Function에 대한 정보를 전달하기 위한 방법에 사용되는 구체적인 필드값을 나타낸 도면이다.
도 22은 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치의 동작 흐름을 나타낸 도면이다.
도 23은 본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경을 구분하는 판단 기준을 나타낸 도면이다.
도 24는 본 발명의 일 실시예에 따른 초고화질 방송 컨텐츠의 영상 처리 과정을 나타낸 도면이다.
도 25는 본 발명의 일 실시예에 따른 클리핑 (clipping) 옵션과 선형 밝기 범위 변환 (linear dynamic range transformation) 방법을 나타낸 도면이다.
도 26는 본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터를 통해 전송되는 변환 곡선 (transformation curve)의 종류를 나타낸 도면이다.
도 27은 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치 디스플레이의 구분에 따른 적응성 밝기 범위 변환 (adaptive dynamic range transformation) 방법을 나타낸 도면이다.
도 28는 본 발명의 일 실시예에 따른 SEI 메세지 (Supplemental Enhancement Information message)의 구조를 나타낸 도면이다.
도 29는 본 발명의 일 실시예에 따른 SEI 메시지 (Supplemental Enhancement Information message)에 포함되어 전송되는 광역 밝기 범위 메타데이터 (Dynamic range transformation info(payloadSize))를 나타낸 도면이다.
도 30은 본 발명의 일 실시예에 따른 핵심 영역 변환 곡선 타입 정보 (mid_DR_transformation_curve_type)를 나타낸 도면이다.
도 31은 본 발명의 일 실시예에 따른 변환 곡선 세부 정보 (DR_transformation_curve)를 나타낸 도면이다.
도 32는 본 발명의 일 실시예에 따른 EIT (Event Information Table)를 나타낸 도면이다.
도 33은 본 발명의 일 실시예에 따른 밝기 범위 변환 정보 디스크립터 (dynamic_range_transformation_info_descriptor)를 나타낸 도면이다.
도 34는 본 발명의 일 실시예에 따른 밝기 범위 변환 정보 디스크립터 (dynamic_range_transformation_info_descriptor())에 포함된 광역 밝기 범위 메타데이터 (dynamic_range_transformation_metadata())를 나타낸 도면이다.
도 35는 본 발명의 일 실시예에 따른 초고화질 프로그램 정보 디스크립터 (UHD_program_info_descriptor())를 나타낸 도면이다.
도 36은 본 발명의 일 실시예에 따른 초고화질 프로그램 정보 디스크립터 (UHD_program_info_descriptor())에 포함된 UHD_service_type 필드를 나타낸 도면이다.
도 37은 본 발명의 일 실시예에 따른 TVCT (Terrestrial Virtual Channel Table)을 나타낸 도면이다.
도 38은 본 발명의 일 실시예에 따른 초고화질 방송 서비스임을 식별할 수 있는 디스크립터를 나타낸 도면이다.
도 39는 본 발명의 다른 일 실시예에 따른 비디오 데이터 처리 방법을 나타낸 도면이다.
도 40은 본 발명의 일 실시예에 따른 비디오 데이터 처리 장치의 구성을 나타낸 도면이다.
도 41은 본 발명의 다른 일 실시예에 따른 비디오 데이터 처리 장치의 구성을 나타낸 도면이다.
발명의 실시를 위한 최선의 형태
이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시예를 상세하게 설명하지만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다.
본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.
도 1은 본 발명의 일 실시예에 따른 비디오 데이터 처리 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따른 비디오 데이터 처리 방법은 인터페이스를 통해 소스 디바이스로부터 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 정보를 수신하는 단계 (S1010) 및/또는 상기 수신한 비디오 데이터를 재생하는 단계 (S1020)를 포함할 수 있다. 여기서, 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함할 수 있다. 다이나믹 레인지 마스터링 정보에 대한 상세한 설명은 도 11, 12, 14에서 후술한다.
본 발명의 다른 일 실시예에 따르면, 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 최대 밝기를 나타내는 정보 및/또는 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함할 수 있다. 여기서, 마스터링 디스플레이의 최대 밝기를 나타내는 정보는 Orig_white_luminance_level 정보를 나타낼 수 있고, 마스터링 디스플레이의 최소 밝기를 나타내는 정보는 Orig_black_luminance_level 정보를 나타낼 수 있다. 이에 대한 상세한 설명은 도 11, 12, 14에서 후술한다.
본 발명의 다른 일 실시예에 따르면, 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함할 수 있다. 여기서, 마스터링 디스플레이의 삼원색의 색도 좌표 정보 및/또는 마스터링 디스플레이의 화이트 색상의 색도 좌표 정보는 Orig_color_gamut, Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x 및/또는 White-y 필드를 이용하여 시그널링할 수 있다. 이에 대한 상세한 설명은 도 11, 12, 14에서 후술한다.
본 발명의 다른 일 실시예에 따르면, 다이나믹 레인지 마스터링 정보는 EOTF 타입 정보에 따른 EOTF에 대한 부가 정보를 포함할 수 있다. 여기서, EOTF에 대한 부가 정보는 EOTF_additional_info 및/또는 EOTF_Coefficient를 포함할 수 있다. 이에 대한 상세한 설명은 도 11, 14에서 후술한다.
도 2는 비디오 영상을 송수신하기 위해 소스 디바이스와 싱크 디바이스가 연결된 예를 나타낸 도면이다. 이 도면에서 영상의 디코딩과 화질 처리가 가능한 소스 디바이스와 영상의 출력이 가능한 싱크 디바이스의 정보 교환은 다음과 같다.
소스 디바이스(100)는 방송, 블루레이(Blu-ray), UV(Ultra Violet), SCSA(Secure Content Storage Association) 등의 저장매체, IP (internet protocol) 스트리밍 등 다양한 경로로 들어오는 영상에 대해 복호화(decoding)하는 기기 또는 화질처리를 위한 비디오 프로세싱이 가능한 기기를 총칭한다. 예를 들면 셋탑박스, 블루레이 디스크(BD) 플레이어와 같은 저장매체의 플레이어, 컴퓨터 등이 이에 해당한다.
소스 디바이스(100)의 비디오 프로세싱은 WCG(Wide color gamut) 또는 HDR(high dynamic range) 또는 기타 포스트 프로세싱(post processing) 등의 화질을 변화시키는 방식이 포함될 수 있다. 이 경우 영상에 대해 일괄적으로 비디오 프로세싱을 하는 것이 아니라 싱크 디바이스가 제공하는 디스플레이 정보, 예를 들면 컬러 개멋(color gamut) 정보 또는 다이나믹 레인지(dynamic range) 정보 등에 기초하여 해당 비디오 소스가 디스플레이 기기에서 재생가능한지 판단하고 필요한 경우 재생에 재생하기 적합한 화질로 변환하여 제공한다.
또한 소스 디바이스(100)의 영상처리 과정을 싱크 디바이스(200)에서 컨트롤 할 필요가 있는 경우 이에 대한 정보를 제공하여 소스 디바이스(100)에서 어떤 영상 처리 과정이 사용되었는지에 대한 정보를 제공 받을 수 있다.
소스 디바이스(100)는 싱크 디바이스(200)로부터 디스플레이 관련 메타 정보 또는 디스플레이 옵션 정보를 수신할 수 있다. 그리고, 수신된 정보를 기반으로 소스 디바이스(100)는 싱크 디바이스(200)에 UHD 비디오 메타데이터와 프로세싱된 비디오의 프로세싱 옵션정보를 제공할 수 있다. 싱크 디바이스(200)는 이를 소스 디바이스(100)가 제공한 데이터나 정보를 기초로 소스 디바이스(100)가 프로세싱한 비디오를 표출할 수 있다. 싱크 디바이스(200)는 해당 디스플레이에 맞는 컬러 개멋 정보나 다이나믹 레인지 범위 내에서 소스 디바이스(100)가 프로세싱한 비디오를 표출할 수 있다.
도 3은 본 발명에 실시예에 따라 소스 디바이스가 싱크 디바이스와 연결된 경우 정보를 송수신하는 실시예를 나타낸 도면이다.
이 예는 소스 디바이스가 싱크 디바이스와 HDMI 또는 Display Port와 같은 유선 인터페이스와 연결될 경우를 나타낸다. 이 예는, Source Device와 Sink Device가 유선 인터페이스로 연결되어 있을 시, EDID (Extended Display Identification Data)의 HDR(High Dynamic Range)의 데이터 블록을 통해 Sink Device(200)에서 Source Device(100)의 HDR 및 WCG 기능을 제어(Activation or Deactivation)하고, 이를 이용해 Source Device가 Sink Device의 변경된 EDID를 읽어오는 실시예를 예시한다.
Source Device가 Sink Device에 유선 인터페이스로 연결되면 Source Device는 해당 유선 인터페이스의 +5V power line에 high level 전압을 인가하고 Sink Device는 이를 통해 Source Device가 연결됨을 확인한다 (S1).
Sink Device는 low level 전압으로 유지되고 있는 Hot Plug Detect line에 high level 전압을 인가함으로써 Source Device에 Sink Device와 연결 완료 및 EDID와 같은 디스플레이 관련 정보(이하 디스플레이 관련 정보)를 읽을 준비가 되었음을 소스 디바이스에 알려준다(S2).
Source Device는, Hot Plug Detect line이 high level로 천이됨을 확인하고 Display Data Channel을 통해 디스플레이 관련 정보에 대한 읽기 요청을 Sink Device에게 하고 (S3), Sink Device는 디스플레이 관련 정보를 Display Data Channel을 통해 Source Device에 전송한다(S4).
Sink Device에서 사용자의 요청에 의해 Signaling 되거나 혹은 Sink Device의 기능적 판단에 의해 디스플레이 관련 정보의 HDR Data Block 의 Control option flag에 해당 field가 변경되면(S5), Sink Device는 Source Device에 디스플레이 관련 정보의 update된 정보를 알려주기 위해 Hot Plug Detect line에 low level 전압을 인가하고 이 전압을 일정시간, 예를 들면 최소 100ms 동안 유지한다(S6).
소스 디바이스에서 디스플레이 관련 정보 읽기가 가능해지면 Sink Device는 Hot Plug line에 high level 전압을 인가하고(S7) Source Device는 이를 감지하고 Display Data Channel을 통해 디스플레이 관련 정보 읽기 요청을 한다(S8). 그리고 Sink Device는 Display Data Channel을 통해 변경된 디스플레이 관련 정보를 송신한다(S9).
이러한 동작을 기초로 본 발명의 실시예에 대한 소스 디바이스와 싱크 디바이스 간의 정보 교환의 예를 설명하면 다음과 같다.
본 발명의 실시예에 따르면 위에서 설명한 S3 또는 S8의 요청에 대한 응답으로, 싱크 디바이스는 컬러 개멋(color gamut) 정보 및 밝기(brightness) 정보를 소스 디바이스에 전달할 수 있다 (S4 또는 S9에 포함).
Color gamut 정보는 RGBW에 해당하는 색 공간인 CIE xy diagram 상의 color primary 좌표 혹은 BT. 709 또는 BT. 2020 등의 컬러 개멋(color gamut) 정보를 포함할 수 있다. 이 정보는 인터페이스에서 정의되어 있는 DisplayID의 color characteristics data block 등을 통해 전달될 수 있다. 밝기(brightness) 관련 정보는 최대 밝기 또는 최소 밝기 값을 포함할 수 있고, 실시예에서 개시하는 예에 따르면 인터페이스의 DisplayID, EDID, 또는 EDID extension 정보 등에 정의된 datablock을 이용하여 전달될 수 있다.
그러면, 소스 디바이스는 전달된 디스플레이 관련 정보를 바탕으로 비디오의 색상 또는 밝기 정보를 조정할 필요가 있는지 판단한다. 만약 소스 디바이스가 색상 또는 밝기 조정이 필요하다고 판단되는 경우 비디오에서 제공하는 컬러 매핑(color mapping) 혹은 다이나믹 레인지 매핑(dynamic range mapping) 정보를 기반으로 변환하거나, 소스 디바이스 자체적으로 비디오의 색상 또는 밝기 정보를 제공하는 방법을 사용할 수도 있다.
소스 디바이스는 이렇게 조정된 최종 영상을 싱크 디바이스에 전달한다. 이 때, 최종 비디오에 대한 컬러 개멋(color gamut) 또는 다이나믹 레인지(dynamic range) 관련 metadata를 인터페이스의 InfoFrame을 통해 전달할 수 있다. 컬러 개멋(Color gamut) 정보의 경우 인터페이스의 AVI infoFrame 에서 기존에 정의하고 있는 color gamut 정보(예를 들면 BT. 709, BT. 2020 등) 를 이용하여 전달할 수 있다. 다이나믹 레인지(dynamic range) 관련 정보는 최대 또는 최소 밝기 정보를 전달할 수 있으며, 실시예들에서 기술하는 방법을 통해 새로운 InfoFrame을 정의하거나 AVI InfoFrame을 확장하는 방법을 통해 전달할 수 있다.
소스 디바이스가 최종 영상을 전달할 때 소스 디바이스에서 처리된 video processing에 대한 정보를 제공할 필요가 있는 경우, 실시예들에서 기술하는 방법을 통해 InfoFrame 내 post_processing_type를 이용하여 HDR 정보 또는 WCG 정보와 같은 video processing unit의 처리 정보를 전달할 수 있다. 또한, 최종 영상에 대해 HDR 정보와 관련하여 새로운 EOTF(electro-optical transfer function)와 같은 색 변환 함수 정보가 정의되어 사용되었거나, 사용될 필요가 있는 경우 새로운 색 변환 함수 정보에 대한 정보를 인터페이스 정보의 flag 등을 이용하여 전달할 수 있다.
최종 처리된 영상에 대해 싱크 디바이스는 소스 디바이스의 처리가 적절한지 판단하고, 이에 대한 feedback을 통해 소스 디바이스의 제어가 필요한지 판단할 수 있다. 이 경우 실시예들에서 기술하는 DisplayID, EDID, EDID extension 정보 등에 정의된 데이터블록(datablock)내의 Control Option Flag를 통해 이를 제어할 수 있다. 만약 WCG 정보 또는 HDR 정보 등 소스 디바이스의 비디오 프로세싱(video processing)에서 처리된 결과가 적절한 경우 싱크 디바이스는 WCG 정보 또는 HDR 정보와 관련된 비트를 활성화(on) 시켜 동일한 처리가 계속되도록 제어할 수 있다.
처리가 부적절한 경우 싱크 디바이스는 WCG 정보 또는 HDR 정보와 관련 비트를 비활성화(off) 시킴으로써 소스 디바이스에서 현재 수행중인 video processing을 사용하지 않도록 제어할 수 있다.
싱크 디바이스는, Control Option Flag 를 통해 전달된 정보가 현재 소스 디바이스에서 처리 중인 video processing과 다른 경우 Control Option Flag 에 있는 정보를 기준으로 video processing을 변경한다. 변경된 비디오 처리와 관련하여 UHD video metadata가 변경되는 경우 InfoFrame 내 컬러 특성(color characteristics) 정보 및 밝기(brightness) 정보를 변경하며, 포스트 프로세싱 타입(post_processing_type)을 변경한 video processing 과정에 맞게 업데이트할 수 있다. 그리고 S5의 과정이 수행된다.
이하에서는 싱크 디바이스가 소스 디바이스에 전달되는 정보를 예시한다.
본 발명의 실시예에 따르면 소스 디바이스가 HDR 관련 정보를 처리하는 경우, 싱크 디바이스가 재생 가능한 정보를 기반으로 소스 디바이스는 싱크 디바이스에 적합한 영상 처리를 수행할 수 있다. 이 경우 싱크 디바이스는 display 밝기 범위에 대한 적절한 정보, 예를 들면 Sink Black Luminance Level, Sink White Luminance Level, 및 소스 디바이스의 post processing을 control 할 수 있는 flag 등을 소스 디바이스에 전달할 수 있다. 이 경우 DisplayID, EDID, 혹은 EDID extension 의 data block을 이용할 수 있는데, 이에 대해 상세한 예를 개시하면 다음과 같다.
도 4는 본 발명의 실시예에 따라 싱크 디바이스가 소스 디바이스로 전달하는 정보의 일 예를 나타낸 도면이다.
이 도면은 DisplayID의 Data Block을 이용하여 소스 디바이스가 싱크 디바이스로 전달하는 정보의 예를 나타낸다.
이 도면은, DisplayID의 Data Block의 offset 필드, value 필드, 및 그에 대한 description과 포맷을 예시한다. 예를 들면 DisplayID의 Data Block의 offset필드가 0x00, value필드가 0x14인 경우, HDR 데이터 블록을 나타낼 수 있다.
이 도면에서 예시한 바와 같이 offset 필드가 0x03인 경우 소스 디바이스의 post processing을 control 할 수 있는 flag (control option flag)를 나타낼 수 있다. 이에 대한 상세한 value의 예는 후술한다.
그리고, offset 필드가 0x04 또는 0x05인 경우 싱크 디바이스 자체의 표현 가능한 밝기 값 (Sink Black Luminance Level, Sink White Luminance Level 등)에 대한 정보를 전달할 수 있다.
DisplayID의 Data Block은 추후 offset 필드값에 따라 비디오 처리에 필요한 정보들을 더 포함할 수 있다. 예를 들어 offset 필드가 0x03인 경우 현재의 reserved 필드 등을 이용하여 HDR 관련 post processing 관련 정보들을 전달할 수 있다.
여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하고, control option flag의 상세한 예와 싱크 디바이스의 디스플레이 정보에 대한 예는 이하에서 개시한다.
도 5는 본 발명의 실시예에 따라 싱크 디바이스가 소스 디바이스로 전달하는 정보의 일 예로서 위에서 개시한 실시예의 구체적인 필드 값을 예시한 도면이다.
싱크 디바이스가 소스 디바이스로 전달하는 정보로서 DisplayID의 Data Block의 Control option flag는 소스 디바이스가 수행하는 post processing 과정을 control (on/off) 하는 필드이다. 본 발명의 실시예에 따르면 이를 이용하여 소스/싱크 디바이스의 인터페이스 상에서 향후 제공될 다양한 옵션을 나타낼 수 있는데 여기서는 HDR, WCG 관련 옵션들을 개시하였다.
위에서 DisplayID의 Data Block의 offset 필드가 0x03인 경우 소스 디바이스를 제어할 수 있는 control option flag 정보임을 나타낼 수 있음을 개시하였다. Value 필드의 비트 위치에 따라 소스 디바이스의 HDR 프로세싱을 활성화시키거나, 소스 디바이스의 WCG 프로세싱을 활성화시킬 수 있다. 이 예에서는 하위 2개 비트로 이에 대한 정보를 각각 표현하였다.
본 실시예에서 개시된 필드는 사용자의 요청에 의해 시그널링되거나 혹은 싱크 디바이스의 기능적 판단에 의해 (싱크 디바이스의 처리 능력이 상위에 있는 경우 등) 제어될 수 있다. 본 발명의 실시예는 Reserved bit를 이용하여 FRC(Frame Rate Control)와, multi-layer video enhancement의 기능에 대해 싱크-소스 디바이스간 정보 교환을 수행할 수도 있다. 여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하다
도 6은 개시한 본 발명의 실시예에 따른 control option flag의 상세한 예를 예시한 도면이다.
control option flag를 나타내는 offset 필드의 value 필드의 하위 2개의 bit에 각각 소스 디바이스에서 이뤄지는 HDR, WCG 처리에 대한 control을 하도록 하는 정보를 설정할 수 있다. 두 개의 flag에 대한 조합에 의해 아래의 예시와 같이 사용할 수 있다.
이 예에서, value 필드가 00000000인 경우, Source device에서 아무런 처리를 하지 않음을 나타낸다. 예를 들어 value 필드가 10000000 인 경우, Source device의 HDR 처리에 대한 정보를 나타내는데, Source device에서 HDR 만을 처리하는 option을 나타낼 수 있다. 다른 예로서, value 필드가 01000000 인 경우, Source device의 WCG 처리에 대한 정보를 나타내고 Source device에서 WCG 만을 처리하는 option을 나타낼 수 있다.
다른 예로서, value 필드가 11000000 인 경우, Sink device에서 전달한 정보를 바탕으로 source device가 HDR 및 WCG에 대해 모두 처리하도록 하는 컨트롤 옵션 정보를 나타내고, 이 값이 초기 값으로 사용될 수 있다.
도 7은 기술한 본 발명의 실시예에 따른 Sink Device Dynamic Range 정보의 상세한 예를 예시한 도면이다.
개시한 것처럼 싱크 디바이스는 DisplayID의 Data Block를 이용하여 싱크 디바이스의 dynamic range 정보를 소스 디바이스에 전달하여 싱크 디바이스가 표현할 수 있는 밝기 정보 등을 소스 디바이스에 알려줄 수 있다.
싱크 디바이스의 dynamic range에 대한 정보는 sink device의 display에서 표현할 수 있는 dynamic range를 표현하기 위한 최대 및 최소 물리적 밝기 값 (nit 혹은 cd/m2 단위)를 지칭한다.
예를 들어 DisplayID의 Data Block의 offset 필드가 0x04 또는 0x05인 경우 이용하여 싱크 디바이스의 dynamic range 정보를 나타낸다.
이 예에서 DisplayID의 Data Block의 offset 필드가 0x04인 경우 하위 8비트보다 높은 8개비트를 이용해 싱크 디바이스의 가장 낮은 레벨의 밝기정보를 나타낼 수 있다.
DisplayID의 Data Block의 offset 필드가 0x05인 경우, value 필드의 최하위 1비트는 싱크 디바이스의 가장 낮은 레벨의 밝기정보를 나타내고, value 필드의 나머지 비트로 싱크 디바이스의 가장 높은 레벨의 밝기정보를 나타낼 수 있다.
여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하다
이 정보를 이용해 나타낼 수 있는 싱크 디바이스의 최소 밝기 정보(sink_black_luminance_level 로 표기), 및 최대 밝기 정보 (sink_white_luminance_level)는 아래와 같이 나타낼 수 있다.
예를 들어 싱크 디바이스의 최소 밝기 정보(sink_black_luminance_level)는 display에서 표현할 수 있는 최소 밝기를 나타내기 위한 값으로써, 일반적인 최저 밝기를 고려하여 0~0.05 범위에 대해 0.0001 단위로 값을 표현할 수 있다. 즉, display의 물리적 밝기를 Brightness_black (cd/m2 단위)라고 할 때, 실제 최소 밝기는 이 최소 밝기 정보(sink_black_luminance_level)로부터 아래와 같이 산출될 수 있다.
Brightness_black = sink_black_luminance_level x 10000
(0<= sink_black_luminance_level <= 500 < 29)
예를 들어 reference monitor의 경우 0.05 cd/m2 를 최소 기준 밝기로 삼으며, 10000(10진수)을 곱한 값인 500을 전송할 수 있다.
싱크 디바이스의 최대 밝기 정보(sink_white_luminance_level)는 display에서 표현할 수 있는 최대 밝기를 나타내기 위한 값으로써, 일반적인 최대 밝기를 고려하여 100~10000 범위에 대해 100 단위로 값을 표현할 수 있다. 즉, display의 물리적 밝기를 Brightness_white (cd/m2단위)라고 할 때 , 실제 최대 밝기는 이 최대 밝기 정보(sink_white_luminance_level)로부터 아래와 같이 산출될 수 있다.
Brightness_white = sink_white_luminance_level x 100
(1<= sink_white_luminance_level <= 100 < 27)
예를 들어 reference monitor의 경우 100 cd/m2 를 최대 기준 밝기로 삼으며, 100(10진수)으로 나눈 값의 몫인 1 값을 전송할 수 있다.
본 발명의 일 실시예에 따르면, 싱크 디바이스의 최대 밝기 정보 및/또는 싱크 디바이스의 최소 밝기 정보는 디스플레이의 밝기 범위에 대한 성능을 나타낼 수 있다. 즉, 본 발명의 일 실시예에 따른 싱크 디바이스의 최대 밝기 정보 및/또는 싱크 디바이스의 최소 밝기 정보는 디스플레이의 성능을 고려하여, 컨텐츠를 최적의 환경에서 렌더링하기 위해 요구되는 컨텐츠의 최대 밝기 정보 (Desired content Max Luminance data) 및/또는 최소 밝기 정보 (Desired content Min Luminance data)를 나타낼 수 있다.
싱크 디바이스에서 소스 디바이스로 디스플레이 관련 정보를 전달하는 다른 실시예를 개시한다.
도 8은 본 발명의 실시예에 따라 싱크 디바이스에서 소스 디바이스로 전달하는 디스플레이 관련 정보로서, DisplayID의 Display Parameters Data Block을 예시한 도면이다.
디스플레이 관련 정보로서 DisplayID의 Display Parameters Data Block은 모니터의 전체적인 파라미터를 포함할 수 있다. 이 도면에서 예시한 바와 같이 예를 들면, Display Parameters Data Block은 영상의 수평 또는 수직 size (offset 필드가 0x03 또는 0x04), 수평 또는 수직 pixel 개수(offset 필드가 0x05 또는 0x06), monitor에서 지원 가능한 기능에 대한 flag (offset 필드가 0x0B), transfer function에서 사용되는 gamma(offset 필드가 0x0C), display aspect ratio(offset 필드가 0x0D), pixel bit depth (offset 필드가 0x0E)등의 정보가 포함된다.
본 발명의 실시예에 따르면 Display Parameters Data Block은 위에서 기술한 Control option flag정보와 sink device dynamic range 정보를 포함할 수 있다. 즉, 본 발명의 실시예에 따르면 싱크 디바이스는 위에서 개시한 Control option flag와 sink device dynamic range 정보를 포함한 Display Parameters Data Block 정보를 source device에 전달할 수 있다.
이 실시예에서 Display Parameters Data Block의 offset 필드가 0x0F인 경우 control option flag를 나타낼 수 있고, offset 필드가 0x10 또는 0x11인 경우 싱크 디바이스 자체의 표현 가능한 밝기 값 (Sink Black Luminance Level, Sink White Luminance Level 등)에 대한 정보를 포함할 수 있다.
offset 필드가 0x0F인 경우 control option flag에 대한 value 필드와, offset 필드가 0x10 또는 0x11인 경우 Sink Device Dynamic Range 정보에 대한 value 필드 및 각 value 필드에 대한 설명은 도 5 내지 도 7 에서 예시한 바와 같다. 여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하다
본 발명의 실시예는, Transfer Characteristic Gamma 를 통해 HDR에 적합한 transfer curve 정보를 전달할 수 있다.
싱크 디바이스에서 소스 디바이스로 디스플레이 관련 정보를 전달하는 다른 실시예를 개시한다.
도 9는 본 발명의 실시예에서 기술하는 디스플레이 관련 정보로서, Display Device Data Block을 예시한 도면이다. 본 발명의 실시예는 Display Device Data Block을 이용하여 소스 디바이스가 싱크 디바이스로 전달하는 정보의 예를 나타낸다.
Display Device Data Block은 디스플레이 패널(panel) 자체의 특성을 나타낼 수 있는 정보를 포함한다. Display Device Data Block 은 display device의 종류(offset 필드가 0x03), display device 의 operating mode(offset 필드가 0x04), pixel 수로 나타낼 수 있는 영상 크기(offset 필드가 0x05 내지 0x08), display aspect ratio(offset 필드가 0x09 내지 0x0A), bit depth (offset 필드가 0x0E), 응답 속도 (offset 필드가 0x0F)등을 나타낸다. 본 발명의 실시예는 이 도면에서 예시한 바와 같이 Display Device Data Block과 함께 디스플레이 패널의 개시한 Control option flag정보와 sink device dynamic range 정보를 source device에 전달할 수 있다.
본 발명의 실시예에 따르면 Display Device Data Block의 offset 필드가 0x0F 인 경우 control option flag 를 나타낼 수 있고, Display Device Data Block의 offset 필드가 0x10 또는 0x11 인 경우 sink device dynamic range 정보를 나타낼 수 있다.
Display Device Data Block의 offset 필드가 0x0F 인 경우 value 필드의 예와, Display Device Data Block의 offset 필드가 0x10 또는 0x11 인 경우 value 필드의 예는 도 5 내지 도 7 또는 도 8에서 예시한 바에 따를 수 있다. 여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하다.
싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 다른 예로서, 싱크 디바이스는 DisplayID의 Vendor-Specific Data Block을 이용하여 Control option flag와 sink device dynamic range 정보를 전달할 수 있다. Vendor-Specific Data Block 은 싱크 디바이스가 Data Block 에 정의되지 않은 정보를 전달할 경우 사용하는 데이터로서, 이 데이터 블록에 위에서 개시한 Control option flag와 sink device dynamic range 정보를 포함하여 전달할 수 있다.
싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 또 다른 예로서, 싱크 디바이스는 DisplayID의 Product Identification Data Block을 이용할 수 있다.
DisplayID의 Product Identification Data Block은 display device의 제조업체에 대한 정보, display device의 serial number, Product ID 등을 포함할 수 있다. 이 때 싱크 디바이스가 display device의 제조업체, 제조 연월, Product ID 등을 통해 각 제품의 정보를 확인할 수 있는 경우, 이 정보를 이용하여 각 제품에 대응되는 dynamic range 정보를 소스 디바이스에 전달할 수 있다. 본 발명에 따르면 DisplayID의 Product Identification Data Block이 제품의 식별정보로 dynamic range 정보를 전달하는 경우, Control option flag는 위에서 개시한 실시예들 중 어느 하나의 예를 통해 전달한다.
싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 또 다른 예로서, 싱크 디바이스가 Transfer Characteristics Data Block 을 이용하여 디스플레이 관련 정보를 소스 디바이스에 전달할 수 있다. Transfer characteristics data block은 디스플레이의 transfer curve 관련 정보를 전달하는 data block 이다. Transfer characteristics data block 디스플레이 시에 임의의 gamma function을 사용하거나, piecewise linear curve를 지원하는 경우 이를 표시하기 위한 Data block이다. 디스플레이 패널의 peak luminance 및 최하위 luminance를 정의한 부분은 없기 때문에 싱크 디바이스는 Transfer characteristics data block 에 앞에 개시한 Control option flag와 sink device dynamic range 정보를 포함한 dynamic range 정보를 source device에 전달할 수 있다.
도 10은 본 발명의 일 실시예에 따라 싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 또 다른 예를 예시한 도면이다. 본 발명의 실시예에 따르면 싱크 디바이스는 CEA(Consumer Electronics Association) EDID extension 정보를 이용하여 디스플레이 관련 정보를 소스 디바이스에 전달할 수 있다.
싱크 디바이스는 CEA-861 의 VESA에서 정의한 EDID외에 CE Sink device에서 지원 가능한 device 속성 정보를 포함한 CEA EDID extension 정보를 소스 디바이스에 전달할 수 있다. 이 경우 싱크 디바이스는 이 도면에서 예시한 dynamic range 정보를 소스 디바이스에 전달할 수 잇다.
CEA EDID extension 정보의 extension data block은 Video, Audio, Speaker Allocation, Vendor-Specific, 및 Video Capability data block을 포함할 수 있다. extension data block은 이 data block을 각각 식별하기 위해 미리 정의된 Tag Code를 각 data block의 첫 번째 byte의 bits 5 7에 포함한다.
발명의 실시예에 따르면 CEA EDID extension data block의 첫 번째 byte의 bits 5 7는 dynamic range 정보를 표시하는 tag code를 포함할 수 있다.
그리고, 이 도면에서 예시한 바와 같이 CEA EDID extension data block내에 dynamic range 정보를 위에서 예시한 바와 같이 싱크 디바이스의 최소 밝기 정보(Lowest Brightness level of Sink device 중 하위 8비트보다 높은 8비트 (higher 8 bits) 정보, 싱크 디바이스의 최소 밝기의 LSB 정보(Lowest Brightness level of Sink device (LSB)) 및 싱크 디바이스의 최대 밝기 정보(Highest Brightness level of Sink device (total 7 bits))로 표현할 수 있다. 비트 할당은 임의적인 것으로 변경이 가능하다. 따라서, 본 발명의 실시예에 따르면, 싱크 디바이스가 CEA의 EDID extension 정보를 이용하여 소스 디바이스로 디스플레이 관련 정보 중 싱크 디바이스의 최대/최소 밝기 정보를 전달할 수 있다.
본 발명의 일 실시예에 따른 싱크 디바이스의 최대 밝기 정보는 싱크 디바이스에서 처리할 수 있는 최대 밝기 정보를 나타낼 수 있고, 싱크 디바이스의 최소 밝기 정보는 싱크 디바이스에서 처리할 수 있는 최소 밝기 정보를 나타낼 수 있다.
다음으로 본 발명의 실시예에 따라 소스 디바이스에서 싱크 디바이스로 전달할 정보를 개시하면 다음과 같다.
소스 디바이스는, 싱크 디바이스의 디스플레이 관련 정보 및 color gamut 관련 정보를 기반으로 컨텐츠의 밝기 및 컬러 gamut 등이 sink device에 적합한지 판단하고, 필요한 경우 소스 디바이스는 컨텐츠의 밝기 및 컬러 gamut 등을 변환할 수 있다. 이 경우 초고화질 영상을 처리할 경우 source device는 어떠한 처리가 이뤄졌는지에 대한 정보 및 영상 처리 이후의 밝기 및 color gamut에 대한 정보를 싱크 디바이스에 전달해야 한다. 이는 싱크 디바이스의 포스트 프로세싱을 제어하기 위한 것인데 이에 대한 실시예를 상세히 개시하면 다음과 같다.
본 발명에 실시예에 따라 소스 디바이스는 CEA 861에 정의 된 InfoFrame을 통해 싱크 디바이스로 초고화질 영상 처리 관련 정보를 전달할 수 있다.
도 11은 본 발명에 실시예에 따라 소스 디바이스에서 싱크 디바이스로 전달할 정보를 예시한 도면이다.
CEA 861에서 소스/싱크 디바이스의 인터페이스 정보로서 정의된 InfoFrame 중 color gamut 정보는 AVI InfoFrame을 통해 전달될 수 있다. 본 발명의 실시예는 소스 디바이스가 초고화질 영상 처리에 대한 정보를 InfoFrame을 통해 싱크 디바이스로 전달한다. 이를 이용해 초고화질 영상의 brightness 정보, 임의의 color gamut 정보 및 HDR 정보 또는 WCG 정보 등의 영상 처리 정보를 싱크 디바이스로 전달하도록 할 수 있다. 본 실시예에 따르면 소스 디바이스는 수행한 post processing에 대한 정보와 post processing 이후의 컨텐츠의 밝기 정보, post processing 이전의 컨텐츠 밝기 정보 및 컬러 표현 범위 정보를 싱크 디바이스로 전달할 수 있다.
post processing에 대한 정보는 컨텐츠의 상태에 대한 정보를 포함하고, 싱크 디바이스의 요청에 대한 응답으로 사용될 수 있다. post processing 이후의 컨텐츠의 밝기 정보는 컨텐츠의 최소 밝기 정보(black_luminance_level) 와 컨텐츠의 최대 밝기 정보(white_luminance_level)를 포함할 수 있다. post processing 이전의 컨텐츠 최소 밝기 정보(orig_black_luminance_level)와 최대 밝기 정보(orig_white_luminance_level)를 포함할 수도 있다. 컨텐츠의 컬러 표현 범위 정보는 Orig_color_gamut 정보로 나타내었는데 이에 대해서는 상세히 설명한다.
InfoFrame Type Code는 이 InfoFrame의 Type을 나타내는데, 예를 들어 이 값이 0x07인 경우 UHD 영상처리에 대한 정보를 포함하는 프레임을 나타낼 수 있다. 여기서, UHD 영상처리에 대한 정보는 다이나믹 레인지 마스터링 정보 (Dynamic Range and Mastering information)으로 명명될 수 있다. 본 발명의 일 실시예에 따른 다이나믹 레인지 마스터링 정보는 컨텐츠의 다이나믹 레인지 관련 정보를 포함할 수 있다.
InfoFrame Version Number는 이 프레임의 버전 정보를 나타내고, Length of HDR InfoFrame는 HDR InfoFrame의 길이 정보를 나타낸다.
Data Byte 1의 P3 내지 P0 필드는, post_processing_type_flag 로 source device가 수행하는 post processing 과정을 control (on/off) 하기 위한 필드이다. 여기서는 이 필드를 이용해 HDR 정보 또는 WCG 정보 관련 option 정보를 개시하고, 이에 대한 상세한 예는 이하에서 후술한다. 본 발명의 일 실시예는, BT. 709로 제작된 컨텐츠를 BT. 2020으로 인코딩하여 전송하는 경우, 이 필드 및/또는 후술할 오리지널 컬러 개멋 정보 (Orig_color_gamut)를 이용하여 contents color gamut 및/또는 container color gamut을 구분하여 각각을 시그널링할 수 있다. 이에 대한 상세한 설명은 후술한다.
그리고, Data Byte 1의 R2~R0 필드는 reserved bits를 나타내고, E0 필드는 new_EOTF_flag를 통해 새로운 색 변환 함수(EOTF 등)를 사용할지 여부를 나타낸다. reserved bits는 추후 HDR 정보에 적합한 새로운 EOTF 가 정의되면 사용할 수 있는 flag 이다.
Data Byte 2는 컨텐츠에서 표현하는 최소 밝기 정보를 포함할 수 있는데 여기서는 black_luminance_level로 표현하였다. 이 실시예에서는 최소 밝기 정보의 최고 8비트를 Data Byte 2 필드에 표현하도록 하였다.
컨텐츠의 최소 밝기 정보는 일반적인 최저 밝기를 고려하여 0~0.05 범위에 대해 0.0001 단위로 값을 표현할 수 있다. 즉, display의 물리적 밝기를 Brightness_black (cd/m2 단위)라고 할 때 다음과 같은 관계를 갖는다.
Brightness_black = black_luminance_level x 10000
(0<= black_luminance_level <= 500 < 29)
예를 들어 reference monitor의 경우 0.05 cd/m2 를 최소 기준 밝기로 삼으며, 10000(10진수)을 곱한 값인 500을 밝기 정보로 표현할 수 있다.
Data Byte 3은, 이 도면에서 예시한 바와 같이 컨텐츠 최소 밝기 정보(black_luminance_level)의 최하위 1비트와 컨텐츠 최대 밝기 정보 (white_luminance_level) 7비트를 포함할 수 있다.
최대 밝기 정보 (white_luminance_level) 는 컨텐츠에서 표현하는 최대 밝기를 나타내기 위한 정보로써, 일반적인 최대 밝기를 고려하여 100~10000 범위에 대해 100 단위로 값을 표현할 수 있다. 즉, display의 물리적 밝기를 Brightness_white (cd/m2단위)라고 할 때 다음과 같은 관계를 갖는다.
Brightness_white = white_luminance_level x 100
(1<= white_luminance_level <= 100 < 27)
예를 들어 reference monitor의 경우 100 cd/m2 를 최대 기준 밝기로 삼으며, 100(10진수)으로 나눈 값의 몫인 1 값을 밝기 정보로 표현할 수 있다.
Data Byte 4는 컨텐츠의 오리지널 최소 밝기 정보 (Orig_black_luminance_level)의 최상위 8비트를 표현할 수 있고, Data Byte 5는 컨텐츠의 오리지널 최소 밝기 정보 (Orig_black_luminance_level)의 최하위 1비트와 컨텐츠의 오리지널 최대 밝기 정보(Orig_white_luminance_level)) 7비트를 표현할 수 있다.
컨텐츠의 오리지널 최소 밝기 정보 (Orig_black_luminance_level)는 source device에서 HDR 처리 이전 컨텐츠의 최소 밝기를 나타낸다. 표현 방법 및 범위는 black_luminance_level와 동일하고 본 실시예에서 필드의 구현은 post_processing_type에서 HDR 정보가 on 된 것으로 표시되는 경우에만 전송하도록 옵션을 줄 수도 있다.
유사하게 컨텐츠의 오리지널 최소 밝기 정보 (Orig_white_luminance_level)는 source device에서 HDR 처리 이전 컨텐츠의 최대 밝기를 나타낸다. 표현 방법 및 범위는 white_luminance_level와 동일하고 마찬가지로 본 실시예에서 필드 구현은 post_processing_type에서 HDR정보가 on 된 것으로 표시되는 경우에만 전송하도록 옵션을 줄 수도 있다.
본 발명의 일 실시예에 따르면, 컨텐츠의 밝기 범위 (contents dynamic range)와 구분되는 밝기 범위 (dynamic range)에 대한 시그널링이 필요한 경우, 상술한 오리지널 최소 밝기 정보 (Orig_black_luminance_level) 및/또는 오리지널 최소 밝기 정보 (Orig_white_luminance_level)가 사용될 수 있다. 이 때, 상술한 컨텐츠의 밝기 범위와 구분되는 밝기 범위는 image processing 전후의 밝기 범위, 인코딩 시 사용된 밝기 범위, mastering display의 밝기 범위, target display의 밝기 범위, container의 밝기 범위 등을 포함할 수 있다. 여기서, container의 밝기 범위는 원본 컨텐츠의 밝기 범위 (Dynamic range)와 컨테이너 (container)의 밝기 범위가 다른 경우의 container의 최대/최소 밝기 범위를 나타낼 수 있다. 예를 들어, 예를 들어, 원본 컨텐츠의 밝기 범위 (Dynamic range)와 컨테이너 (container)의 밝기 범위가 다른 경우란 LDR (Low Dynamic Range)로 제작된 컨텐츠를 HDR (High Dynamic Range)로 인코딩하여 전송하는 경우, HDR로 제작된 컨텐츠를 LDR로 인코딩하여 전송하는 경우, 좁은 밝기 범위를 갖는 컨텐츠를 넓은 밝기 범위를 갖는 container로 전송하는 경우, 넓은 밝기 밤위를 갖는 컨텐츠를 좁은 밝기 범위를 갖는 container로 전송하는 경우 등을 포함할 수 있다. 여기서, container의 밝기 범위는 content의 밝기 범위와 구분되는 의미로서 display의 밝기 범위를 나타낼 수 있다. 또한, 상술한 마스터링 디스플레이 (mastering display)는 컨텐츠 및/또는 디스플레이의 밝기 및/또는 컬러 정보에 따라 마스터링 과정이 이루어지는 디스플레이를 나타낼 수 있다. 따라서, mastering display의 밝기 범위는 display에서 지원 가능한 밝기 범위를 나타낼 수 있다.
Data Byte 6은 오리지널 컬러 개멋 정보(Orig_color_gamut) 및 S3 ~ S0이 reserved bits를 포함할 수 있다. 오리지널 컬러 개멋 정보(Orig_color_gamut)는 source device에서 WCG 처리 이전 컨텐츠의 색 표현 범위를 나타낸다. 표준 색 표현 범위에 대한 상세한 예는 후술한다. 본 실시예에서 필드 구현은 post_processing_type에서 WCG가 on 된 것으로 표시되는 경우에만 전송하도록 옵션을 줄 수도 있다.
본 발명의 일 실시예는, 소스 디바이스에서 별도의 color gamut mapping 처리를 하지 않는 경우 중, 원본 컨텐츠의 color gamut과 컨테이너 (container)의 color gamut이 다른 경우, post_processing_type의 값을 0000 (아무 처리도 하지 않음) 또는 1111 (Different color gamut)로 시그널링함으로써 오리지널 컬러 개멋 정보 (Orig_color_gamut)를 사용하여 contents color gamut 및 container color gamut을 구분하여 각 컬러 개멋에 대한 정보를 디스플레이 장치에 전달할 수 있다. 여기서, 상술한 원본 컨텐츠의 color gamut과 컨테이너 (container)의 color gamut이 다른 경우는 BT. 709로 제작된 컨텐츠를 BT. 2020으로 인코딩하여 전송하는 경우를 포함할 수 있다. 본 발명의 다른 일 실시예는, CEA 861-F의 AVI Info Frame 내 Data Byte 2, 3의 colorimetry 정의 (C1, C0)와 extended colorimetry (EC2, EC1, EC0)을 이용하여 container color gamut을 표현하고, Orig_color_gamut을 이용하여 contents color gamut을 표현할 수 있다. 이와 반대로, 본 발명의 또 다른 일 실시예는, CEA 861-F의 AVI Info Frame 내 Data Byte 2, 3의 colorimetry 정의 (C1, C0)와 extended colorimetry (EC2, EC1, EC0)을 이용하여 contents color gamut을 표현하고, Orig_color_gamut을 이용하여 container color gamut을 표현할 수 있다. 또한, 본 발명의 또 다른 일 실시예는, Orig_color_gamut를 이용하여 contents color gamut을 표현하고, Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x 및/또는 White-y를 이용하여 container color gamut을 표현할 수 있다. 이와 반대로, 본 발명의 또 다른 일 실시예는, Orig_color_gamut를 이용하여 container color gamut을 표현하고, Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x 및/또는 White-y를 이용하여 contents color gamut을 표현할 수 있다. 여기서, container color gamut은 content color gamut과 구분되는 의미로서 display의 컬러 개멋 (display color gamut)을 나타낼 수 있다. 나아가, 본 발명의 일 실시예에 따른 Orig_color_gamut, Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x 및/또는 White-y은 container 및/또는 display의 color primaries (예를 들어, 삼원색) 및/또는 화이트 색상의 색도 좌표를 포함할 수 있다.
본 발명의 일 실시예에 따르면, 컨텐츠의 컬러 개멋 (contents color gamut)과 구분되는 컬러 개멋 (color gamut)에 대한 시그널링이 필요한 경우, 상술한 오리지널 컬러 개멋 정보 (Orig_color_gamut)가 사용될 수 있다. 이 때, 상술한 컨텐츠의 컬러 개멋 (contents color gamut)과 구분되는 컬러 개멋 (color gamut)은 image processing 전후의 컬러 개멋, container의 컬러 개멋, 인코딩 시 사용된 컬러 개멋, mastering display의 컬러 개멋, target display의 컬러 개멋 등을 포함할 수 있다. 여기서, 마스터링 디스플레이 (mastering display)는 컨텐츠 및/또는 디스플레이의 밝기 및/또는 컬러 정보에 따라 마스터링 과정이 이루어지는 디스플레이를 나타낼 수 있다. 즉, mastering display의 컬러 개멋은 display에서 지원 가능한 color gamut을 나타낼 수 있다.
Data Byte 7부터 Data Byte 16은 임의의 컬러 개멋 정보를 나타낼 수 있는 필드이다. 이 도면에서 임의의 컬러 개멋 정보는 Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x, White-y로 예시하였다.
여기서 Red-x는 색공간 (예를 들어 CIE 1931)의 R 색상의 x 좌표를 0~1 사이의 값을 2진법으로 나타낸 것인데, 본 실시 예는 전체 10 bit를 사용하며, Data Byte 9의 상위 8 bit와 Data Byte 6의 상위 2bit 을 사용할 수 있다.
유사하게 Red-y는 색공간 (예를 들어 CIE 1931)의 R 색상의 y 좌표를 0~1 사이의 값에 대해 2진법으로 나타낸 것이다. 본 실시 예는 전체 10 bit를 사용하여 이 색 정보를 나타내며, Data Byte 10의 상위 8 bit와 Data Byte 6의 하위 2bit 을 사용할 수 있다.
소스 디바이스는 위에서 개시한 컨텐츠의 오리지널 컬러 개멋 정보(Orig_color_gamut)에서 적절한 정보를 표현하지 못하는 경우, Data Byte 7부터 Data Byte 16를 사용하여 컬러 개멋 정보를 전달할 수 있다.
본 발명의 다른 실시예로서 도 11에서 개시한 혹은 오리지널 컬러 개멋 정보(Orig_color_gamut)는 사용하지 않고 Data Byte 7부터 Data Byte 16에 해당하는 정보만을 사용하여 오리지널 컬러 개멋 정보를 전송할 수도 있다. 또는 오리지널 컬러 개멋 정보(Orig_color_gamut)가 특정한 값을 나타내는 경우에만 Data Byte 7부터 Data Byte 16에 해당하는 정보를 추가로 활용하도록 이용할 수도 있다.
Data Byte 17은 E3 필드, E2 필드, E1 필드, E0 필드 및/또는 Number of Coefficients 필드를 포함할 수 있다.
E3 내지 E1 필드는 EOTF_type으로서 HDR 컨텐츠의 최적 화질을 위해 컨텐츠 제작자가 사용한 EOTF의 종류를 나타낼 수 있다. 본 발명의 일 실시예에 따르면, 복수의 EOTF 표준이 제정될 수 있고 컨텐츠 제작자가 임의로 EOTF를 정의하여 사용할 수 있다. EOTF_type 값이 나타내는 내용에 대한 상세한 설명은 후술한다.
E0 필드는 private_EOTF_coeff_flag를 나타낼 수 있다. 이 필드 값이 1인 경우, 이 필드는 EOTF_type에 따른 별도의 coefficient가 사용되었음을 나타낼 수 있다. 예를 들어, 서로 다른 최대 밝기에 따라 적합한 EOTF coefficient가 다른 경우와 같이, 동일 함수에 대하여 서로 다른 계수가 사용되는 경우, 본 발명의 일 실시예는 이 필드를 이용하여 이에 대한 적절한 coefficient를 전송할 수 있다. 또한, 본 발명의 다른 일 실시예에 따르면, 별도의 파라미터가 세팅되고 EOTF_type을 통하여 시그널링될 수 있다. 이 필드 값이 0인 경우, 이 필드는 범용적으로 사용되는 default 파라미터가 사용됨을 나타낼 수 있다. 여기서, 파라미터와 coefficient는 동일한 의미로 사용될 수 있다. 본 발명의 일 실시예에 따르면, E0 필드가 1인 경우, Data Byte 18 내지 18+N이 추가적으로 사용될 수 있고, 0인 경우, Data Byte 18 내지 18+N은 사용되지 않을 수 있다.
Number of Coefficients 필드는 상술한 E0 필드가 1을 나타내는 경우에 사용되는 coefficient의 개수를 나타낼 수 있다.
Data Byte 18은 EOTF_additional_info 필드를 포함할 수 있다. EOTF_additional_info 필드는 EOTF_type에 따라 추가적인 정보가 전달될 필요가 있는 경우, EOTF_type에 따른 추가적인 정보를 나타낼 수 있다. 예를 들어, 서로 다른 최대 밝기에 따라 적합한 EOTF coefficient가 다른 경우, 이 필드는 목표로 하는 최대 밝기 (target max brightness)에 대한 정보를 포함할 수 있다. 본 발명의 일 실시예에 따르면, 주어진 EOTF_type에 대하여 다양한 조건에 따른 복수의 EOTF 함수의 계수를 전달할 필요가 있는 경우, 예를 들면, 최대 밝기에 따라 계수가 달라지고 다양한 최대 밝기에 따른 계수들을 모두 전달해야 하는 경우, 이 필드는 각 계수들에 대한 정보를 제공하기 위해 사용될 수 있다. 이 경우, 조건들의 개수를 나타내는 필드를 별도로 지정하고 각 조건에 대하여 EOTF_target_max_brightness, EOTF_Coefficient 1 내지 N을 지정하는 방법이 사용될 수 있다.
Data Byte 18+1 내지 18+N은 각각 EOTF_Coefficient 1 내지 N 필드를 포함할 수 있다. EOTF_Coefficient 1 내지 N 필드는 E0 필드가 1인 경우 사용되는 파라미터 값을 나타낼 수 있다. 또한 이 필드는 임의의 EOTF 함수를 전송하는데 사용될 수 있다.
상술한 정보들은 인터페이스 (interface) 상에서 소스에서 싱크로 전송되는 것을 전제로 할 수 있다. 하지만, 이 정보들은 비디오 내부 (예를 들면, SEI message) 및/또는 스토리지 (storage)의 별도의 메타데이터 전달 방법을 통하여 전송될 수 있다. 따라서, 동일한 정보가 비디오 소스에도 정의되어 있을 수 있으며, 그렇지 않은 경우 소스 디바이스에서 해당 컨텐츠에 대한 추가 메타데이터를 external server 등을 통하여 별도로 공급받을 수 있다.
본 발명의 일 실시예에 따르면, 이 도면에서 나타낸 InfoFrame은 Dynamic Range and Mastering InfoFrame으로 명명될 수 있다.
도 12는 본 발명의 실시예에 따라 개시한 포스트 프로세싱 타입 정보의 상세한 예를 개시한 도면이다. 개시한 것처럼 소스 디바이스가 UHD 영상을 싱크 디바이스에 맞게 포스트 프로세싱한 경우 디스플레이 관련 정보 및 컬러 개멋 정보를 InfoFrame를 통해 싱크 디바이스로 전달할 수 있다.
InfoFrameData Byte 1의 P3 내지 P0 필드는, post_processing_type을 나타내고 HDR 정보 또는 WCG 정보 관련 option을 나타내는데 포스트 프로세싱 타입은 이 도면에서 예시한 바와 같다.
예를 들어 post_processing_type이 0000인 경우, Source device에서 아무런 처리를 하지 않음을 나타내고, 0001인 경우, Source device가dynamic range mapping을 수행했음을 나타낸다.
예를 들어 post_processing_type이 0010인 경우, Source device가 color gamut mapping을 수행했음을 나타내고, post_processing_type이 0011인 경우, Sink device가 전달한 정보를 바탕으로 이에 맞게 source device가 처리했음을 나타낸다. 이 값은 초기 값(initial value)으로 사용될 수 있다.
post_processing_type이 0110~1000은 추후에 multi-layer video enhancement 의 기능에 대해 sink-source간 정보 교환을 위해 사용될 수 있고, 1001-1110 은 User private를 위해 사용될 수 있다.
예를 들어, post_processing_type이 1111인 경우, 오리지널 컬러 개멋 정보 (Orig_color_gamut)가 contents color gamut 및 container color gamut을 구분하여 시그널링하는 데 사용됨을 나타낼 수 있다. 즉, 본 발명의 일 실시예는, contents color gamut과 구분되는 의미의 color gamut에 대한 시그널링이 필요한 경우, post_processing_type 필드를 이용할 수 있다. 이와 동일한 방법으로, 본 발명의 다른 일 실시예는, 컨텐츠의 밝기 범위 (contents dynamic range)와 구분되는 의미의 밝기 범위 (dynamic range)에 대한 시그널링이 필요한 경우, post_processing_type 필드를 이용할 수 있다. 이 경우, 예를 들어, post_processing_type으로 1110이 할당될 수 있다.
도 13은 본 발명의 실시예에 따라 개시한 오리지널 컬러 개멋 정보(Orig_color_gamut)의 상세한 예를 개시한 도면이다.
기술한 바와 같이 소스 디바이스가 UHD 영상을 싱크 디바이스에 맞게 프로세싱한 경우 컨텐츠의 오리지널 컬러 개멋 정보(Orig_color_gamut)를 싱크 디바이스에 전송할 수 있다.
이 예에서 오리지널 컨텐츠의 컬러 개멋 정보(Orig_color_gamut)의 필드가 0000인 경우 오리지널 컨텐츠의 컬러는 REC. 709을 따른 것을 나타내고, 0001인 경우 오리지널 컨텐츠의 컬러는 BT. 2020 NCL을 따른 것을 나타낸다. 유사하게 이 필드가 0010, 0011, 0100, 0101인 경우 각각 오리지널 컨텐츠의 컬러는 xvYCC, DCI-P3, Adobe RGB 및 BT. 2020 CL에 따라 정의되었음을 나타낸다.
도 14는 본 발명의 실시예에 따라 소스 디바이스가 싱크 디바이스로 전달하는 영상의 컬러 정보를 전달하는 다른 예를 개시한다.
본 발명의 실시예는, AVI InfoFrame version 3의 형식을 확장하여 소스 디바이스가 처리한 영상의 포스트 프로세싱 타입 정보(post_processing_type_flag), 색 변환함수 정보(new_EOTF_flag) 및 영상의 밝기 정보(black_luminance_level 또는 white_luminance_level)를 싱크 디바이스에 전달할 수 있다. 또는 본 발명의 실시예는 소스/싱크 디바이스의 인터페이스 상에서 정의된 새로운 AVI InfoFrame를 이용하여 소스 디바이스가 처리한 영상의 포스트 프로세싱 타입 정보(post_processing_type_flag), 색 변환함수 정보(new_EOTF_flag) 및 영상의 밝기 정보(black_luminance_level 또는 white_luminance_level)를 싱크 디바이스에 전달할 수 있다.
개시한 AVI InfoFrame은 Data byte에 따라 소스 디바이스가 싱크 디바이스에 처리된 영상의 정보를 전달할 수 있다. 이 예에서 Data byte14 내지 Data byte29는 도 11 내지 도 13에서 예시한 Data byte 1 내지 Data byte 16정보를 각각 포함할 수 있다.
따라서, 본 실시예에 따르면 소스 디바이스는 수행한 post processing에 대한 정보를 제공하는 정보와 post processing 이후의 컨텐츠의 밝기 정보, post processing 이전의 컨텐츠 밝기 정보 및 컬러 표현 범위 정보를 싱크 디바이스로 전달할 수 있다.
본 발명의 실시예는, AVI InfoFrame version 3의 형식을 확장하여 Orig_color_gamut, RGBW index, EOTF_type, private_EOTF_coeff_flag, Number of Coefficients, EOTF_additional_info 및/또는 EOTF_Coefficient를 싱크 디바이스에 전달할 수 있고, 소스/싱크 디바이스의 인터페이스 상에서 정의된 새로운 AVI InfoFrame를 이용하여 상술한 정보를 전달할 수 있다.
이 도면에서 Data Byte 30 내지 Data Byte 31+N은 도 11 내지 도 13에서 예시한 Data Byte 17 내지 Data Byte 18+N 정보를 각각 포함할 수 있다.
도 15는 본 발명의 일 실시예에 따른 신호 처리 장치의 실시예들 및 그 동작을 예시한 도면이다.
먼저 본 발명의 일 실시예에 따른 신호 처리 장치의 실시예는 소스 디바이스(100)와 싱크 디바이스(200)를 포함한다.
소스 디바이스(100)는, 디코더(110), 컬러 개멋 매핑부(120), 다이나믹 레인지 매핑부(130), 포스트 프로세싱부(140), 메타데이터 프로세서(150) 및 옵션 컨트롤러(160)를 포함한다.
소스 디바이스(100)의 컬러 개멋 매핑부(120), 다이나믹 레인지 매핑부(130) 및 포스트 프로세싱부(140)는 비디오 처리부로 호칭할 수 있고, 비디오 처리부의 컬러 개멋 매핑부(120), 다이나믹 레인지 매핑부(130) 및 포스트 프로세싱부(140)는 비디오 처리 시에 앞의 블록과 상관없이 각각 개별적으로 필요한 경우 동작할 수 있다.
싱크 디바이스(200)는 소스 디바이스 컨트롤러(210), 메타데이터 프로세서(220) 및 패널 컨트롤러(230)를 포함한다. 소스 디바이스가(100)가 싱크 디바이스(200)와 인터페이스로 연결된 경우, 도 3에서 예시한 바와 같은 프로토콜에 따라 정보를 송수신할 수 있다. 이하에서 기술하는 디바이스 간의 정보의 전송과 수신은 인터페이스를 통해 전송 및 수신된다.
소스 디바이스(100)는 인코딩된 UHD 비디오 스트림을 복호하고, 필요에 따라 복호된 UHD 비디오를 후처리하거나 싱크 디바이스(200)의 표출 능력에 맞게 UHD 비디오를 처리하고 처리된 UHD 비디오를 싱크 디바이스에 제공할 수 있다.
싱크 디바이스(200)는 소스 디바이스(100)가 디코딩한 UHD 비디오를 수신하여 표출할 수 있는데, 소스 디바이스(100)에게 싱크 디바이스(200)의 표출 능력에 대한 정보를 제공하여 소스 디바이스(100)로부터 싱크 디바이스(200)가 표출 가능한 UHD 비디오를 수신하여 표출할 수 있다.
소스 디바이스(100)의 옵션 컨트롤러(160)는 싱크 디바이스(200)와의 인터페이스를 통해 비디오 옵션 신호를 전송하여 디스플레이 관련 정보를 요청할 수 있다. 디스플레이 관련 정보는 디스플레이 컬러 개멋 정보와 디스플레이 밝기 관련 정보를 포함할 수 있다. 소스 디바이스(100)에서 싱크 디바이스(200)로 전송하는 비디오 옵션 정보는 도 11 내지 도 14의 예에 따를 수 있다.
소스 디바이스(100)의 메타데이터 프로세서(150)는 UHD 비디오에 대한 메타 데이터를 싱크 디바이스(100)로 전송할 수 있고, 싱크 디바이스(220)는 디스플레이에 관련된 메타 데이터를 소스 디바이스(100)로 전송할 수 있다.
소스 디바이스(100)의 디코더는 인코딩된 UHD 비디오 스트림을 수신하여 복호할 수 있다.
컬러 개멋 매핑부(120) 디코딩된 UHD 비디오의 컬러 개멋 정보를 매핑하는데, 이 경우 싱크 디바이스(200)의 디스플레이 관련 정보를 이용하거나 UHD 비디오 내 메타데이터에 기반하여 UHD 비디오의 컬러 개멋 정보를 매핑하고 변경할 수 있다.
또는 다이나믹 레인지 매핑부(130)는 디코딩된 UHD 비디오에 대한 다이나믹 레인지를 매핑할 수 있는데, 기술한 바와 같이 싱크 디바이스(200)의 디스플레이 관련 정보를 이용하거나 UHD 비디오 내 메타데이터에 기반하여 UHD 비디오의 다이나믹 레인지를 매핑하고 변경할 수 있다.
포스트 프로세싱부(140)는 디코딩된 UHD 비디오에 대해 비디오 포스트 프로세싱을 수행할 수 있으며, 마찬가지로 디스플레이 관련 정보에 기반하여 비디오 포스트 프로세싱을 수행할 수 있다.
메타데이터 프로세서(150)는 UHD 비디오의 메타데이터를 싱크 디바이스(200)로 전송하고, 싱크 디바이스로부터 디스플레이 관련된 메타데이터를 수신할 수 있다
옵션 컨트롤러(160)는 싱크 디바이스(200)에 비디오 옵션 정보를 전송하고, 싱크 디바이스(200)로부터 디스플레이 옵션 정보를 수신할 수 있다. 싱크 디바이스(100)에서 소스 디바이스(200)로 전송하는 디스플레이 옵션 정보의 예는 도 4 내지 도 10에 예시한 바와 같다. 한편, 소스 디바이스(100)에서 싱크 디바이스(200)로 전송하는 비디오 옵션 정보는 도 11 내지 도 14의 예에 따를 수 있다.
싱크 디바이스(200)의 소스 디바이스 컨트롤러(210)는 소스 디바이스(100)를 컨트롤할 수 있는 컨트롤 신호를 전송할 수 있고, 사용자로부터 사용자 컨트롤 신호를 수신할 수도 있다.
싱크 디바이스(200)의 메타데이터 컨트롤러(220)는 소스 디바이스(100)로부터 UHD 비디오의 메타데이터를 수신할 수 있고, 디스플레이 기기와 관련된 메타데이터를 소스 디바이스(100)로 전송할 수 있다. 메타데이터 프로세서(220)는 소스 디바이스 컨트롤러(210)로 비디오 프로세싱 컨트롤 신호를 전송하여 소스 디바이스 컨트롤러(210)가 컨트롤 신호를 전송하도록 할 수 있다.
패널 컨트롤러(230)는 메타데이터 프로세서(220)의 디스플레이 컨트롤 신호에 따라 디스플레이 패널을 제어할 수 있다.
본 발명의 실시예는 디스플레이에 적응적인 비디오 처리가 가능하도록 할 수 있다. 즉, 본 발명의 실시예들은 싱크 디바이스(200)의 성능에 따라 각각 소스-싱크 디바이스들 간의 정보교환, 비디오 프로세싱, 및 디스플레이되는 방식이 각각 달라질 수 있다. 이하에서는 싱크 디바이스(200)의 메타 데이터 정보를 소스 디바이스(100)로 전송하고, 소스 디바이스에서 디스플레이 관련 정보를 기반으로 영상처리를 한 후 싱크 디바이스(200)를 이를 수신하여 비디오를 출력하는 예에 대해 상세히 기술한다.
먼저, 싱크 디바이스(200)가 하이엔드 UHD 싱크 디바이스인 경우에 대한 제 1 실시예를 개시한다.
싱크 디바이스(200)가 하이엔드 UHD 싱크 디바이스인 경우, 싱크 디바이스(200)는 디스플레이 관련 메타데이터를 소스 디바이스(100)로 전송할 수 있다. 디스플레이 관련 정보는 디스플레이의 컬러 개멋 정보 (또는 RGBW에 해당하는 color primary정보)와 디스플레이 밝기 범위 관련 정보 (예를 들면 peak luminance 정보, black luminance 정보)를 포함할 수 있다. 싱크 디바이스(200)의 메타데이터 프로세서(220)는 디스플레이 관련 정보를 처리할 수 있다. 예를 들어 싱크 디바이스(200)의 메타데이터 프로세서(220)는 디스플레이 관련 정보를 저장하여 컨텐츠 처리 및 디스플레이 시에 참조할 수 있고, 필요에 따라 소스 디바이스(100)에 이 정보를 다시 요청할 수도 있다.
소스 디바이스(100)는 디스플레이 관련 정보를 싱크 디바이스(200)에 전달할 때 디스플레이의 색상 및 밝기 관련한 metadata 뿐만 아니라 소스 디바이스(100)의 control signal도 전달할 수 있다.
소스 디바이스(100)의 control signal는 소스 디바이스(100)가 어떠한 종류의 video processing이 가능한지에 대한 정보를 포함할 수 있다. 소스 디바이스(100)의 control signal는 싱크 디바이스(200)의 소스 디바이스 컨트롤러(210)가 전달하는 디스플레이할 수 있는 색 범위를 기초로 생성될 수도 있고, 싱크 디바이스(200)로부터 전달받은 정보 없이 디폴트 처리 요청에 따라 생성될 수도 있다.
소스-싱크 디바이스 간의 정보 교환 과정은 두 디바이스가 연결된 시점에서 동작하지만, 소스-싱크 디바이스가 연결된 상태에서 방송 또는 스트리밍 컨텐츠가 입력되는 경우, 또는 컨텐츠가 변경되는 경우, 또는 특정 scene이 변경되는 시점 등에서 두 디바이스의 정보 교환이 다시 수행될 수 있다.
싱크 디바이스(200)가 하이엔드 UHD 싱크 디바이스인 경우 비디오 프로세싱은 다음과 같이 처리될 수 있다.
소스 디바이스(100)의 포스트 프로세싱부(140)는 메타데이터 프로세서(150)로부터 싱크 디바이스(200)의 디스플레이 관련 정보에 기초하여 디코딩된 UHD 비디오에 후처리를 수행해야 하는지 판단하고, 이에 대한 컨트롤 신호를 출력할 수 있다. 만약 소스 디바이스(100)는 UHD 비디오의 WCG 정보 또는 HDR 정보와 관련된 영상 처리, 예를 들면 컬러 개멋 매핑 또는 다이나믹 레인지 매핑을 수행할 수 있다. 싱크 디바이스(200)의 디스플레이 성능이 비디오의 후처리 후 UHD 비디오를 재생하는데 충분한 경우, 소스 디바이스(100)의 옵션 컨트롤러(160)는 포스트 프로세싱부(140)에 그에 대한 정보를 전달할 수 있다. 싱크 디바이스(200)의 디스플레이 컬러 개멋 정보 또는 밝기 정보가 비디오의 WCG 정보 또는 HDR 정보를 변경하는데 기초가 될 수 있는 경우 메타데이터 프로세서(150)는 컬러 개멋 매핑부(120) 또는 다이나믹 레인지 매핑부(130)에 디스플레이 관련 메타데이터를 전송할 수 있다.
소스 디바이스(100)의 포스트 프로세싱부(140)는 비디오와 함께 전송되는 메타데이터, 예를 들면 WCG SEI message 또는 HDR SEI message를 이용하여 포스트 프로세싱이 수행될 수도 있다. 비디오디코더(110) 또는 포스트 프로세싱부(140)는 scalable coding에 따라 enhancement layer 데이터가 전송된 경우라면 enhancement layer 데이터를 디코딩하여 출력되는 비디오의 화질을 높일 수 있다.
출력 비디오의 화질이 디스플레이 화질에 맞게 추가 향상이 가능하지만 싱크 디바이스(200) 로부터 비디오 처리를 위한 추가 정보가 없는 경우 소스 디바이스(100)는 자체적으로 화질 향상 기능을 수행할 수 있다.
메타데이터 프로세서(150)는 디코딩되거나 후처리된 비디오의 WCG 정보 또는 HDR 정보를 포함한 UHD video metadata를 싱크 디바이스(200)로 전달한다. 또한, 옵션 컨트롤러(160)는 처리된 비디오 프로세싱 정보를 비디오 옵션 정보(video option signal)에 담아 소스 디바이스 컨트롤러(210)로 전송할 수 있다. 비디오 옵션 정보는 도 11 내지 도 14의 예에 따를 수 있다.
만약 디코더(110)가 복호화한 영상 자체가 디스플레이에 적합한 비디오인 경우 비디오의 WCG 정보 또는 HDR 정보에 대해 별도의 처리 없이 재생을 위해 싱크 디바이스(200)로 전달할 수도 있다. 이 경우 옵션 컨트롤러(160)는 비디오에 대해 별도의 처리가 없었음을 시그널링할 수 있다.
싱크 디바이스(200)는 UHD 비디오를 디스플레이 기기를 통해 표출하도록 할 수 있다. 이 경우 싱크 디바이스(200)는 소스 디바이스(100)를 통해 처리된 영상을 그대로 재생할 수 있지만, 소스 디바이스(100)가 전달하는 영상이 실제로 디스플레이에 적합하게 처리되었는지 여부를 판단할 수 있다. 그리고, 싱크 디바이스(200)의 소스 디바이스 컨트롤러(210)는 소스 디바이스(100)에 컨트롤 신호를 출력할 수 있다. 싱크 디바이스(200)의 소스 디바이스 컨트롤러(210)는 영상이 적합하게 처리되지 않는 경우 control signal을 소스 디바이스(100)의 video processing 중 문제가 되는 부분을 판단하여 해당 비디오 프로세싱이 오프되도록 알릴 수 있다. 이런 컨트롤 기능은 사용자의 요청에 의해 온/오프(on/off)될 수 있다. 싱크 디바이스(200)는 소스 디바이스(100)가 처리 가능한 혹은 처리하고 있는 video processing option을 사용자에게 출력하고, 이를 컨트롤 할 수 있는 메뉴 또는 인터페이스(UI)를 사용자에게 제공할 수 있다.
싱크 디바이스(200)는 디스플레이 기기의 밝기 및 색상을 조정할 수 있는 기능이 있는 경우, 싱크 디바이스(200)의 메타데이터 프로세서(220)의 정보를 분석한 후 패널 컨트롤러(230)를 통해 디스플레이 기기를 조정하여 컨텐츠에 적합한 재생 환경을 제공할 수 있다.
다음으로, 싱크 디바이스(200)가 기존의 UHD 싱크 디바이스인 경우에 대한 제 2 실시예를 개시한다. 제 1실시예와 동일한 부분에 대한 예는 제 1 실시예에 따른다.
싱크 디바이스(200)는 기존의 UHD 싱크 디바이스에 대한 메타데이터를 소스 디바이스(100)로 전송한다. 기존의 UHD 싱크 디바이스에 대한 메타데이터는 디스플레이 컬러 개멋 정보(혹은 RGBW에 해당하는 color primary정보)와 디스플레이 밝기 관련 정보(예를 들면 peak luminance 정보, black luminance 정보)를 포함할 수 있다. 소스 디바이스(100)의 메타데이터 프로세서(150)는 기존의 UHD 싱크 디바이스에 대한 메타데이터를 수신하여 처리할 수 있다.
소스 디바이스(100)의 옵션 컨트롤러(160)는 메타데이터 프로세서(150)에서 획득한 디스플레이 관련 정보를 바탕으로 디코딩된 UHD video에 대해 후처리 과정을 거칠지 여부에 대해 판단하여 컨트롤 신호를 출력한다.
만약 디스플레이의 성능이 비디오에서 표현하고자 하는 화질 (색상 및 밝기)에 못 미치는 경우 비디오에 적절한 처리를 거쳐 디스플레이에서 표현 가능한 색상 및 밝기로 변화시킬 수 있다. 예를 들어 소스 디바이스(100)의 컬러 개멋 매핑부(120) 또는 다이나믹 레인지 매핑부(130)는 UHD 비디오의 컬러 개멋 정보나 다이나믹 레인지 정보를 디스플레이 기기에 맞는 정보로 매핑할 수 있다.
소스 디바이스(100)는 비디오 데이터내의 메타 데이터, 예를 들면 WCG SEI message, HDR SEI message 등을 기반으로 이를 변환시킬 수도 있고, 소스 디바이스(100)의 자체적 기능에 따라 이를 수행할 수도 있다. 만약 비디오 데이터의 WCG 정보 또는 HDR 정보가 변경된 경우 옵션 컨트롤러(160)는 이를 비디오 옵션 정보 (video option signal)에 담아 싱크 디바이스(200)로 전송할 수 있다 비디오 옵션 정보는 도 11 내지 도 14의 예에 따를 수 있다.
싱크 디바이스(200)의 디스플레이의 색상 및 밝기 표현 범위가 비디오의 색상 및 밝기 범위를 지원할 수 있는 경우 소스 디바이스(100)는 추가적인 비디오 프로세싱없이 비디오를 싱크 디바이스(200)에 전송할 수 있다. 그리고, 소스 디바이스(100)의 옵션 컨트롤러(160)는 UHD video 의 metadata 또는 WCG 정보 또는 HDR 정보가 처리되지 않았음을 video option signal을 통해 싱크 디바이스(200)에 전달할 수 있다.
싱크 디바이스(200)의 디스플레이 기기는 UHD video를 재생할 수 있다. 싱크 디바이스(200)가 수신한 UHD video의 WCG 정보 또는 HDR 정보가 싱크 디바이스(200)의 디스플레이 기기에 적절하지 않다고 판단되는 경우, 소스 디바이스 컨트롤러(210)는 이에 대한 컨트롤 신호를 소스 디바이스(100)로 전달할 수 있다. 사용자는 사용자 메뉴 또는 인터페이스(UI)를 디스플레이 기기에 관련 기능을 조절할 수도 있다.
도 16은 본 발명의 일 실시예에 따른 EOTF type의 구성을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, EOTF type이 000이면 이는 reserved 비트임을 나타낼 수 있고, 001이면 이는 EOTF_type1의 변환 곡선이 사용됨을 나타낼 수 있고, 010이면 이는 EOTF_type2의 변환 곡선이 사용됨을 나타낼 수 있고, 011-111이면 이는 user private임을 나타낼 수 있다.
도 17은 본 발명의 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
본 발명은 DCI-P3와 같이 새로운 color gamut을 정의하기 위하여 다음과 같은 실시예를 제공할 수 있다.
본 발명의 일 실시예는 기존의 AVI InfoFrame (17010) 내의 Data Byte 2에 포함된 C1 및 C0 필드를 이용하여, 컬러 개멋의 확장을 위해 Data Byte 3에 포함된 EC2 내지 EC0 필드가 사용됨을 시그널링할 수 있다. (17020) 그리고, EC2 내지 EC0 필드의 reserved bit를 이용하여 DCI-P3를 시그널링할 수 있다. 즉, EC2 내지 EC0가 111이면 DCI-P3가 사용됨을 나타낼 수 있다. (17030, 17040)
본 발명의 다른 일 실시예는 기존의 AVI InfoFrame (17010) 내의 Data Byte 3에 포함된 EC2 내지 EC0 필드의 reserved bit를 이용하여 colorimetry extension이 있음을 시그널링할 수 있다. 즉, EC2 내지 EC0가 111이면 colorimetry extension이 있음을 나타낼 수 있다. (17030, 17050) 그리고, 전술한 AVI InfoFrame 내의 Data Byte 19 또는 전술한 Dynamic Range and Mastering InfoFrame 내의 Data Byte 6에 포함된 reserved bit인 S3 내지 S0 필드를 이용하여 DCI-P3가 사용됨을 시그널링할 수 있다. (17060, 17070) 이 때, 필요에 따라 3 비트 이하 또는 초과되는 비트가 사용될 수 있다. 나아가, 상술한 reserved bit인 S3 내지 S0 필드를 이용하여 임의의 color gamut이 사용됨을 시그널링할 수 있다. (17070)
도 18은 본 발명의 다른 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
본 발명의 일 실시예는 기존의 AVI InfoFrame (18010) 내의 Data Byte 2에 포함된 C1 및 C0 필드를 이용하여, 컬러 개멋의 확장을 위해 Data Byte 3에 포함된 EC2 내지 EC0 필드가 사용됨을 시그널링할 수 있다. (18020) 그리고, 기존의 AVI InfoFrame (18010) 내의 Data Byte 3에 포함된 EC2 내지 EC0 필드의 reserved bit를 이용하여 colorimetry extension이 있음을 시그널링할 수 있다. 즉, EC2 내지 EC0가 111이면 colorimetry extension이 있음을 나타낼 수 있다. (18030, 18040) 그리고, 본 발명의 일 실시예에 따른 Dynamic Range and Mastering InfoFrame 내의 reserved bit를 이용하여 DCI-P3가 사용됨을 시그널링할 수 있다. 예를 들면, 이 도면에 도시된 바와 같이, Data Byte 1에 포함된 reserved bit가 사용될 수 있다. (18060) 나아가, 상술한 reserved bit를 이용하여 임의의 color gamut이 사용됨을 시그널링할 수 있다. (18050)
도 19는 본 발명의 또 다른 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
본 발명의 일 실시예는 DCI-P3와 같은 새로운 컬러 개멋을 시그널링하기 위하여 새로운 InfoFrame을 정의할 수 있다. 예를 들어, InfoFrame Type이 0x08인 InfoFrame을 새로 정의하고 새로운 컬러 개멋을 위한 비트를 할당하여 새로운 컬러 개멋이 사용됨을 시그널링할 수 있다.
본 발명의 다른 일 실시예는 기존의 AVI InfoFrame 포맷을 확장하는 방법으로서 이 도면에 도시된 바와 같이, Data Byte 14를 새로 정의할 수 있다. 이 때, 기존의 AVI InfoFrame 내의 Data Byte 2에 포함된 C1 및 C0 필드를 이용하여, 컬러 개멋의 확장을 위해 Data Byte 3에 포함된 EC2 내지 EC0 필드가 사용됨을 시그널링할 수 있다. 그리고, 기존의 AVI InfoFrame 내의 Data Byte 3에 포함된 EC2 내지 EC0 필드의 reserved bit를 이용하여 colorimetry extension이 있음을 시그널링할 수 있다. 즉, EC2 내지 EC0가 111이면 colorimetry extension이 있음을 나타낼 수 있다. 여기서, 본 발명의 일 실시예는 하위 호환성을 고려하는 경우, 기존의 AVI InfoFrame과 동일한 version number를 사용하면서 Data Byte 3의 EC2 내지 EC0 필드가 111이면 colorimetry extension이 있음을 인식하고 Data Byte 14를 읽어올 수 있다. 반면, 하위 호환성을 고려하지 않아도 되는 경우, 이 도면에 도시된 바와 같이, 본 발명의 다른 일 실시예는 AVI InfoFrame에 새로운 version number를 부여하고 Length of AVI InfoFrame을 14로 설정하여 해당 InfoFrame이 Data Byte 14까지 정의되어 있음을 시그널링하고, Data Byte 3의 EC2 내지 EC0 필드가 111이면 colorimetry extension이 있음을 인식하고 해당 colorimetry를 시그널링할 수 있다.
도 20은 본 발명의 일 실시예에 따라 싱크 디바이스가 처리 가능한 Transfer Function에 대한 정보를 전달하기 위한 방법을 나타낸 도면이다.
이 도면은 DisplayID의 Data Block을 이용하여 소스 디바이스가 싱크 디바이스로 전달하는 정보의 예를 나타낼 수 있고, 이 도면에서 도시된 offset 필드가 0x00 내지 0x05인 경우에 대한 상세한 설명은 전술하였다.
본 발명의 일 실시예는 이 도면에 도시된 바와 같이, offset 필드를 할당하여 싱크 디바이스의 Transfer Function 관련 정보를 추가적으로 전달할 수 있다. 이 때, 본 발명의 일 실시예는 미리 지정되어 있는 Transfer Function (BT. 1886, SMPTE ST 2084 등)을 시그널링할 수 있고, 임의의 Transfer Function에 대한 상세 정보를 시그널링할 수 있다.
이 도면에 도시된 바와 같이, offset 필드가 0x06이면 이 필드는 Transfer Function Type flag를 나타낼 수 있다. Transfer Function Type flag는 Transfer Function Type을 시그널링할 수 있다. 본 발명의 일 실시예는 각각의 Transfer Function을 flag로 지정함으로써 복수의 Transfer Function을 지원하는 경우에도 지원하는 모든 Transfer Function을 동시에 시그널링할 수 있다. 여기서, Transfer Function은 BT. 1886, SMPTE ST 2084, Traditional gamma - SDR Luminance Range, Traditional gamma - HDR Luminance Range 등을 포함할 수 있다. 여기서, Transfer Function은 EOTF (Electro Optical Transfer Function)를 포함할 수 있다.
offset 필드가 0x07 내지 0x0A이면 이 필드는 Unspecified TF details를 나타낼 수 있다. 본 발명의 일 실시예는 임의의 Transfer Function을 지원하는 경우 별도의 시그널링을 통하여 이를 표현할 수 있다. 예를 들어, 임의의 Transfer Function을 지원하는 경우, Transfer Function Type flag = 0x80 (16진수) 또는 10000000 (2진수) 으로 나타낼 수 있다. 본 발명의 일 실시예는 임의의 Transfer Function도 그 종류가 다양한 경우를 고려하여 각 Transfer Function의 타입을 시그널링하고, 각 타입에 따라 필요한 계수의 개수, bitdepth, 각 타입에 따른 최대/최소 밝기 정보 등의 보가 정보를 전달할 수 있다. 이 때, Transfer Function type은 여러 종류의 Transfer Function 중 하나를 지칭할 수 있고 복수개의 Transfer Function을 전달하는 경우, 복수개의 Transfer Function이 사용됨을 나타내는 비트 (예를 들어, Number of types 필드)를 따로 할당한 뒤, 이 필드를 이용하여 복수개의 Transfer Function의 순서를 나타낼 수 있다. Unspecified TF details가 포함하는 정보에 대한 상세한 설명은 후술한다.
offset 필드가 0x0B 또는 그 이상이면, 이 필드는 Unspecified TF coefficients를 나타낼 수 있다. 본 발명의 일 실시예는 이 필드를 이용하여 임의의 Transfer Function에 대한 계수 정보를 전달할 수 있다. 상술한 계수 정보는 Transfer Function의 변곡점, 구간, 사용되는 함수에 대한 정보 등을 포함할 수 있다.
본 발명의 일 실시예에 따르면, 싱크 디바이스가 소스 디바이스로 전달하는 정보는 EDID (Extended Display Identification Data) 정보로 명명될 수 있다. 여기서, EDID 정보는 싱크 디바이스의 성능을 나타낼 수 있다. 나아가, EDID 정보는 싱크 디바이스의 HDR 관한 성능을 나타내는 HDR 스테틱 메타데이터 (HDR Static Metadata Data Block)를 포함하고, 상기 HDR 스테틱 메타데이터는 전술한 Transfer Function Type에 대한 정보를 포함할 수 있다.
본 발명의 일 실시예에 따른 EDID 정보는 하나 이상의 데이터 블록을 포함할 수 있다.
본 발명의 일 실시예에 따른 HDR 스테틱 메타데이터는 데이터 블록에 포함되어 전송될 수 있다. 나아가, HDR 스테틱 메타데이터는 해당 데이터 블록이 HDR 스테틱 메타데이터를 포함하는 데이터 블록임을 식별하는 정보 및/또는 해당 데이터 블록의 길이를 나타내는 정보를 포함할 수 있다.
도 21은 본 발명의 일 실시예에 따라 싱크 디바이스가 처리 가능한 Transfer Function에 대한 정보를 전달하기 위한 방법에 사용되는 구체적인 필드값을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, offset이 0x06인 필드는 Transfer Function Type을 나타내기 위해 사용되고, 0x07 내지 0x0A 필드는 Unspecified TF Details를 나타내기 위해 사용되고, 0x0B 내지 그 이상의 필드는 Unspecified TF coefficients를 나타내기 위해 사용될 수 있다. 여기서, Unspecified TF Details는 임의의 Transfer Function을 싱크 디바이스가 지원하는 경우, 임의의 Transfer Function에 대한 부가 정보를 나타내고, 임의의 Transfer Function의 종료 (Type of Unspecified Transfer Function), 임의의 Transfer Function에 사용된 계수의 개수 (Number of coefficients in Unspecified Transfer Function), 임의의 Transfer Function을 복수의 Transfer Function이 구성하는 경우 각 Transfer Function의 타입 개수 (Number of types), bitdepth, 싱크 디바이스의 최소 밝기 정보 (Lowest Brightness level of Sink device) 및/또는 싱크 디바이스의 최대 밝기 정보 (Highest Brightness level of Sink device)를 포함할 수 있다.
offset 필드가 0x06인 경우, value 값의 상위 1비트는 싱크 디바이스가 Unspecified Transfer Function을 처리 가능함을 나타낼 수 있고, 그 다음 1 비트는 BT. 1886에 따른 EOTF를 처리 가능함을 나타낼 수 있고, 그 다음 1 비트는 SMPTE ST 2084에 따른 EOTF를 처리 가능함을 나타낼 수 있다.
offset 필드가 0x07인 경우, value 값의 상위 4 비트는 Type of Unspecified Transfer Function을 나타내기 위하여 사용될 수 있고, 하위 4 비트는 Number of coefficients in Unspecified Transfer Function을 나타내기 위하여 사용될 수 있다.
offset 필드가 0x08인 경우, value 값의 상위 2 비트는 Number of types를 나타내기 위하여 사용될 수 있고, 그 다음 2 비트는 bitdepth를 나타내기 위하여 사용될 수 있다.
offset 필드가 0x09인 경우, value 값은 싱크 디바이스의 최소 밝기 정보 (Lowest Brightness level of Sink device)를 나타낼 수 있다.
offset 필드가 0x0A인 경우, value 값의 상위 1 비트는 싱크 디바이스의 최소 밝기 정보 (Lowest Brightness level of Sink device)를 LSB로 나타낼 수 있고, 나머지 7 비트는 싱크 디바이스의 최대 밝기 정보 (Highest Brightness level of Sink device)를 나타낼 수 있다.
offset 필드가 0x0B 내지 그 이상인 경우, value 값은 임의의 Transfer Function에 사용되는 계수 정보를 나타낼 수 있다.
도 22은 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치의 동작 흐름을 나타낸 도면이다.
본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치는 역다중화부 (Demultiplexer; 1010), 디코더 (Decoder; 1020), EOTF 수행부 (Electro-Optical Transfer Function; 1030), 구분부 (1040) 및/또는 제어부 (Controller; 1050)를 포함할 수 있다.
역다중화부 (Demultiplexer; 1010)는 수신부 (Receiver; 미도시)를 포함할 수 있다. 수신부는 초고화질 방송 컨텐츠를 수신할 수 있고, 광역 밝기 범위 메타데이터 (High Dynamic Range metarada; HDR metadata)를 수신할 수 있다. 광역 밝기 범위 메타데이터는 초고화질 방송 컨텐츠에서 표현된 밝기 정보 및 수신 장치의 디스플레이 환경에 적합하도록 초고화질 방송 컨텐츠를 변환하는 방법에 대한 정보를 나타낼 수 있다. 역다중화부는 다중화되어 수신된 초고화질 방송 스트림 (UHD stream)을 각각의 단위 스트림 (Elementary Stream)으로 역다중화 시킬 수 있다. 예를 들어, 단위 스트림은 비디오 데이터를 전송하는 비디오 단위 스트림, 오디오 데이터를 전송하는 오디오 단위 스트림 등을 포함할 수 있다. 광역 밝기 범위 메타데이터도 초고화질 미디어데이터와 함께 다중화되어 하나의 초고화질 방송 스트림으로 수신될 수 있으며, 이 경우 역다중화부는 다중화되어 수신된 초고화질 방송 스트림을 각각의 단위 스트림 및/또는 디스플레이 정보 메타데이터로 역다중화 시킬 수 있다.
디코더 (Decoder; 1020)는 역다중화된 단위 스트림이 전송하는 미디어데이터 및/또는 디스플레이 정보 메타데이터를 디코딩 할 수 있다. 단위 스트림이 전송하는 미디어데이터는 초고화질 비디오데이터를 포함할 수 있다.
EOTF 수행부 (Electro-Optical Transfer Function; 1030)는 디코딩된 초고화질 비디오데이터를 대상으로 인코딩 (encoding) 과정에서 사용되었던 전송 곡선 (transfer curve)에 따라 적절한 연산을 수행할 수 있다. 이 때, 기존의 EOTF 이외에도 HDR에 적합한 EOTF가 사용될 수 있으며 임의의 EOTF가 새로 정의되어 사용될 수 있다. 기존의 EOTF의 일 예로 ITU-R BT.1886에 기재되어 있는 gamma 변환이 이에 해당될 수 있다. HDR에 적합한 EOTF의 일 예로 Perceptual Quantization 등이 이에 해당될 수 있다. 임의의 EOTF로는 new-EOTF가 사용될 수 있다. EOTF 수행부에서 사용되는 EOTF에 대한 정보는 VUI message (Voice User Interface message) 또는 metadata를 통하여 전송될 수 있다. 상술한 EOTF에 대한 정보는 본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터에 포함되어 전송될 수 있으며 이에 관한 상세한 설명은 후술한다. EOTF 수행부에 의한 EOTF 수행은 수신 장치의 동작 흐름에 따라 제어부의 처리 과정 이후에 수행될 수 있으며, 제어부의 처리 과정 중에 수행될 수 있다. 당해 도면에 도시된 바와 같이 본 발명의 일 실시예에 따른 수신 장치의 동작에서는 선형 밝기 그라데이션 (linear luminance gradation)에서의 변환을 가정하고 있다. 따라서 본 발명의 일 실시예에 따른 수신 장치는 디코딩 직후에 EOTF를 수행한다. 여기서, EOTF (Electro-Optical Transfer Function; EOTF)란 디스플레이의 디지털 입력 값과 출력 밝기 값의 관계를 나타내거나 디스플레이의 입력 밝기 값과 출력 디지털 값의 관계를 나타내는 변환 함수이다.
구분부 (1040)는 본 발명의 일 실시예에 따른 수신 장치의 디스플레이에서 표현 가능한 밝기 범위 (Dynamic Range; DR) 정보와 광역 밝기 범위 메타데이터를 통해 수신된 초고화질 방송 컨텐츠의 밝기 범위 정보를 비교하여 컨텐츠 변환 여부를 판단할 수 있다. 여기서, 수신 장치의 디스플레이에서 표현 가능한 밝기 범위 정보는 수신 장치에서 표현 가능한 밝기 범위의 최대값, 최소값 및 비트 심도 (bit depth)를 포함할 수 있다. 여기서, 초고화질 방송 컨텐츠의 밝기 범위 정보는 초고화질 방송 컨텐츠에서 표현된 최대 기준 밝기를 나타내는 최대 기준 밝기 정보, 초고화질 방송 컨텐츠에서 표현된 최소 기준 밝기를 나타내는 최소 기준 밝기 정보 및 비트 심도 (bit depth)를 포함할 수 있다. 구분부는 기 설정된 판단 기준에 따라 수신 장치의 디스플레이 환경을 구분할 수 있다. 본 발명의 일 실시예에 따르면 수신 장치의 디스플레이 환경은 기존 밝기 범위를 갖는 디스플레이 (경우 1), 기존 밝기 범위보다 넓은 밝기 범위를 갖지만 초고화질 방송 컨텐츠에서 표현된 밝기 범위를 모두 수용하지 못하는 디스플레이 (경우 2) 및 초고화질 방송 컨텐츠에서 표현된 밝기 범위보다 넓은 범위를 표현할 수 있는 디스플레이 (경우 3) 중 어느 하나로 구분될 수 있다. 여기서, 수신 장치의 디스플레이 환경의 구분을 위한 기 설정된 판단 기준과 기존 밝기 범위에 대한 상세한 설명은 후술한다.
제어부 (Controller; 1050)는 본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경에 적합하도록 초고화질 방송 컨텐츠를 변환할 수 있다. 또한, 구분부에서 구분된 본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경에 적합하도록 초고화질 방송 컨텐츠를 변환할 수 있다. 제어부는 초고화질 방송 컨텐츠에서 표현된 밝기 범위를 기 설정된 판단 기준에 따라 구분할 수 있고 구분된 각 구간별로 다른 종류의 변환 방법을 이용하여 초고화질 방송 컨텐츠를 변환할 수 있다. 여기서, 컨텐츠에서 표현된 밝기 범위를 구분하는 판단 기준에 대한 설명은 후술한다. 제어부는 본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경이 제 1 경우 또는 제 2 경우일 때에는 수신한 광역 밝기 범위 메타데이터를 이용하여 초고화질 방송 컨텐츠를 변환할 수 있고, 제 3 경우일 때에는 초고화질 방송 컨텐츠를 변환하지 않을 수 있다.
본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치는 초고화질 방송 컨텐츠를 재생하는 재생부를 포함할 수 있다. 재생부는 후술할 클리핑 옵션이 사용되는 경우 초고화질 방송 컨텐츠에서 표현된 전체 밝기 범위 중 후술할 클리핑 밝기 범위 정보가 나타내는 특정 범위의 밝기에 대해서만 재생할 수 있다.
본 발명의 일 실시예에 따른 초고화질 방송 컨텐츠를 변환하는 과정은 시청자에 의해 TV의 preset으로 미리 지정될 수 있고, 이 경우 별도의 선택 단계 없이 자동으로 초고화질 방송 컨텐츠가 변환될 수 있다. TV의 preset으로 컨텐츠의 변환 여부를 미리 지정한 경우에는 채널 전환 시에도 이러한 설정은 동일하게 유지될 수 있다. 컨텐츠 변환 여부는 초고화질 방송 컨텐츠 공급 단계에서 지정될 수 있으며, 이 경우 수신 장치에서 컨텐츠의 변환을 지원하는 경우 별도의 선택 단계 없이 자동으로 컨텐츠가 변환될 수 있다.
본 발명의 일 실시예에 따르면 초고화질 방송 컨텐츠에서 표현된 밝기 정보 등을 포함한 광역 밝기 범위 메타데이터는 scene by scene으로 수신될 수 있다.
본 발명의 일 실시예에 따르면 예약 시청 환경에서도 EPG (Electronic Program Guide) 등을 통해 광역 밝기 범위 메타데이터를 기반으로 하는 광역 밝기 범위를 갖는 초고화질 방송 컨텐츠에 대해 미리 공지될 수 있다. 이 경우 시청자는 EPG 상의 특정 컨텐츠의 변환을 예약할 수 있다. 이 때, 수신 장치는 이를 기억하였다가 당해 컨텐츠가 선택되었을 때 자동으로 초고화질 방송 컨텐츠를 수신 장치의 디스플레이 환경에 적합하게 변환시킬 수 있다.
본 발명의 일 실시예에 따른 수신 장치는 채널 전환 시 현재 채널에서 방영되는 수신 장치의 디스플레이 환경에 맞게 변환된 컨텐츠의 변환 관련 정보를 기억할 수 있고, 이 후 현재 채널로 다시 돌아오고 해당 컨텐츠가 계속 방영중일 때 이전에 기억된 변환 관련 정보를 다시 사용하여 재생할 수 있다.
본 발명의 일 실시예에 따른 수신 장치는 수신되는 초고화질 방송 컨텐츠에 적합한 디스플레이 환경으로 수신 장치의 디스플레이 환경을 조정하는데 필요한 디스플레이 정보 메타데이터를 수신할 수 있다. 이 경우 본 발명의 일 실시예에 따른 수신 장치는 수신한 디스플레이 정보 메타데이터를 이용하여 초고화질 방송 컨텐츠에 적합하도록 수신 장치의 디스플레이 환경을 조정할 수 있다.
도 23은 본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경을 구분하는 판단 기준을 나타낸 도면이다.
본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치의 디스플레이 환경은 기존 밝기 범위를 갖는 디스플레이 (경우 1), 기존 밝기 범위보다 넓은 밝기 범위를 갖지만 초고화질 방송 컨텐츠에서 표현된 밝기 범위를 모두 수용하지 못하는 디스플레이 (경우 2) 및 초고화질 방송 컨텐츠에서 표현된 밝기 범위보다 넓은 범위를 표현할 수 있는 디스플레이 (경우 3) 중 어느 하나로 구분될 수 있다.
본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경을 구분하는 판단 기준은 초고화질 방송 컨텐츠에서 표현된 최대 기준 밝기를 나타내는 최대 기준 밝기 정보 (luminance_max), 초고화질 방송 컨텐츠에서 표현된 밝기 범위 중 필수적으로 표현되어야 하는 밝기 범위의 최대값을 나타내는 필수 최대 밝기 정보 (luminance_upper_bound) 및 초고화질 방송 신호 수신 장치의 디스플레이에서 표현 가능한 밝기 범위의 최대값 (max_display_brightness)이 해당될 수 있다.
당해 도면을 살펴보면, 수신 장치의 디스플레이에서 표현 가능한 밝기 범위의 최대값 (max_display_brightness)이 컨텐츠에서 표현된 최대 기준 밝기 (luminance_max)에 기 설정된 값 (alpha)을 더한 값보다 크거나 같으면 본 발명의 일 실시예에 따른 수신 장치의 디스플레이는 경우 3으로 구분될 수 있다. 그리고, 경우 3에 해당하지 않으면서 수신 장치의 디스플레이에서 표현 가능한 밝기 범위의 최대값 (max_display_brightness)이 컨텐츠에서 필수적으로 표현되어야 하는 밝기 범위의 최대값인 필수 최대 밝기 (luminance_upper_bound)에 기 설정된 값 (beta)을 더한 값보다 작거나 같으면 본 발명의 일 실시예에 따른 수신 장치의 디스플레이는 경우 1으로 구분될 수 있다. 그리고, 경우 3 및 경우 1의 조건을 만족하지 않으면 본 발명의 일 실시예에 따른 수신 장치의 디스플레이는 경우 2로 구분될 수 있다. 여기서, 기존 밝기 범위를 갖는 디스플레이 (경우 1)에서 기존 밝기 범위는 컨텐츠에서 필수적으로 표현되어야 하는 밝기 범위의 최대값인 필수 최대 밝기 (luminance_upper_bound)에 기 설정된 값 (beta)을 더한 값보다 작은 범위를 의미할 수 있다. 당해 도면에서 alpha 및 beta 값은 본 발명의 일 실시예에 따른 수신 장치의 디스플레이 및 초고화질 방송 컨텐츠의 특성을 참조하여 미리 설정될 수 있으며, 추가적으로 전송될 수 있다.
본 발명의 일 실시예에 따르면 당해 도면에서 기 설정된 값인 alpha 및 beta는 0으로 설정될 수 있다. 이 경우, 본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경은 수신 장치의 디스플레이에서 표현 가능한 밝기 범위의 최대값이 필수 최대 밝기 정보가 나타내는 값보다 작거나 같은 제 1 경우 (경우 1), 수신 장치의 디스플레이에서 표현 가능한 밝기 범위의 최대값이 필수 최대 밝기 정보가 나타내는 값보다 크고 최대 기준 밝기 정보가 나타내는 값보다 작은 제 2 경우 (경우 2), 수신 장치의 디스플레이에서 표현 가능한 밝기 범위의 최대값이 최대 기준 밝기 정보가 나타내는 값보다 크거나 같은 제 3 경우 (경우 3)로 구분될 수 있다.
본 발명의 일 실시예에 따르면 초고화질 방송 신호 수신 장치의 디스플레이 환경을 구분하기 위한 판단 기준으로 최대 기준 밝기 정보, 필수 최대 밝기 정보 및 수신 장치의 디스플레이에서 표현 가능한 밝기 범위의 최대값을 이용할 수 있다. 여기서, 밝기 범위의 최대값을 판단 기준으로 이용하는 이유는 LDR (Low dynamic Range)영상 대비 HDR 영상에서 고휘도 성분 (밝은 부분)의 비중이 상대적으로 높기 때문이다. 하지만, 필요에 따라 저휘도 성분 (어두운 부분)을 판단 기준으로 하여 초고화질 방송 신호 수신 장치의 디스플레이 환경을 구분할 수 있다. 이 경우 초고화질 방송 컨텐츠에서 표현된 최소 기준 밝기를 나타내는 최소 기준 밝기 정보 (luminance_min), 초고화질 방송 컨텐츠에서 표현된 밝기 범위 중 필수적으로 표현되어야 하는 밝기 범위의 최소값을 나타내는 필수 최소 밝기 정보 (luminance_lower_bound)및 초고화질 방송 신호 수신 장치의 디스플레이에서 표현 가능한 밝기 범위의 최소값 (min_display_brightness)이 본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경을 구분하는 판단 기준이 될 수 있다.
본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경을 구분하기 위해 이용되는 판단 기준은 후술할 광역 밝기 범위 메타데이터에 포함되어 전송될 수 있다.
도 24는 본 발명의 일 실시예에 따른 초고화질 방송 컨텐츠의 영상 처리 과정을 나타낸 도면이다.
본 발명의 일 실시예에 따른 초고화질 방송 컨텐츠의 영상 처리 과정은 EOTF 수행 단계 (Electro-Optical Transfer Function; S3010), 디스플레이 밝기 범위 구분 단계 (Display Dynamic Range Categorization; S3020), 컨텐츠 변환 단계 (Display Adaptive Dynamic Range transformation; S3030) 및/또는 양자화 단계 (Quantization; S3040)를 포함할 수 있다.
EOTF 수행 단계 (Electro-Optical Transfer Function; S3010)에서 디코딩된 초고화질 비디오데이터는 EOTF 함수를 이용하여 변환될 수 있다. EOTF 수행에 관한 상세한 설명은 전술한 본 발명의 일 실시예에 따른 수신 장치의 EOTF 수행부 (1030)에 대한 설명으로 대체한다.
디스플레이 환경 구분 단계 (Display Dynamic Range Categorization; S3020)에서 본 발명의 일 실시예에 따른 수신 장치의 디스플레이 환경은 기 설정된 판단 기준에 따라 기존 밝기 범위를 갖는 디스플레이 (경우 1), 기존 밝기 범위보다 넓은 밝기 범위를 갖지만 초고화질 방송 컨텐츠에서 표현된 밝기 범위를 모두 수용하지 못하는 디스플레이 (경우 2) 및 초고화질 방송 컨텐츠에서 표현된 밝기 범위보다 넓은 범위를 표현할 수 있는 디스플레이 (경우 3) 중 어느 하나로 구분될 수 있다. 이에 관한 상세한 설명은 전술한 본 발명의 일 실시예에 따른 수신 장치의 구분부 (1040)에 대한 설명으로 대체한다. 이하 본 명세서에서는 구분된 수신 장치의 디스플레이 환경 (경우 1, 경우 2, 경우 3)각각에 대하여 본 발명의 일 실시예에 따른 수신 장치의 동작을 구분하여 설명한다.
컨텐츠 변환 단계 (Display Adaptive Dynamic Range transformation; S3030)에서 본 발명의 일 실시예에 따른 수신 장치의 제어부는 수신 장치의 디스플레이 환경을 고려하여 수신된 초고화질 방송 컨텐츠의 밝기 범위 (Dynamic Range; DR)를 변환시킬 수 있다. 이하 디스플레이 환경 구분 단계 (S3020)에서 구분된 수신 장치의 디스플레이 환경의 각 경우에 대해서 구분하여 설명한다.
본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치가 기존 밝기 범위를 갖는 디스플레이를 가진 경우 (경우 1), 디스플레이의 밝기 범위 (DR)가 컨텐츠의 밝기 범위 (DR)를 충분히 수용하지 못하는 경우에 해당할 수 있다. 이 경우 이하 변환 방법들을 통해 수신 장치의 특성을 고려하여 제작자의 의도에 따라 컨텐츠를 변환할 수 있다.
본 발명의 일 실시예에 따르면 초고화질 방송 컨텐츠의 변환을 위해 클리핑 (clipping) 옵션을 사용할 수 있다. 클리핑이란 일정 성분 이상 또는 이하의 밝기 성분에 대해 디스플레이 하지 않도록 설정하는 옵션이다. 밝기 범위 (DR) 상에서 컨텐츠의 밝기 성분이 일정 구간 안에 집중되어 있다고 판단되고 별도의 변환을 하지 않는 것이 수신 장치의 디스플레이에서 해당 컨텐츠를 재생하는데 최적의 상황이라고 판단되는 경우 클리핑 방법을 사용할 수 있다. 후술할 광역 밝기 범위 메타데이터 (HDR metadata)에 포함된 클리핑 플래그 정보 (clipping_flag)를 1로 지정함으로써 클리핑 옵션이 사용 가능함을 나타낼 수 있다. 클리핑 플래그 정보 (clipping_flag)가 1을 나타내는 경우 수신 장치의 디스플레이에서 별도의 변환 없이 재생되기 원하는 영역의 밝기에 대한 디지털 값인 클리핑 밝기 범위 정보 (luma_cliping_upper_bound, luma_clipping_lower_bound)을 시그널링 할 수 있다. 클리핑 밝기 범위 정보는 후술할 광역 밝기 범위 메타데이터에 포함되어 전송될 수 있다. 클리핑 옵션은 클리핑 옵션의 사용 이후에도 컨텐츠 자체의 포화 결함 (saturation artifact)에 따른 문제가 적게 발생하는 효과가 있다. 또한, 초고화질 방송 컨텐츠에서 표현하고자 하는 밝기 범위 (DR)영역 즉, 수신 장치의 디스플레이에서 별도의 변환 없이 재생되기 원하는 밝기 범위 영역 (luma_cliping_upper_bound, luma_clipping_lower_bound) 및 비트 심도 (bit depth)가 현재 수신 장치의 디스플레이에서 밝기 범위 (DR) 및 비트 심도 (bit depth)와 일치하는 경우 컨텐츠의 핵심 밝기 영역의 정보를 현재 수신 장치의 디스플레이에서 최대한으로 표현할 수 있다.
본 발명의 일 실시예에 따르면 초고화질 방송 컨텐츠의 변환을 위해 선형 밝기 범위 변환 (linear dynamic range transformation) 방법을 사용할 수 있다. 선형 밝기 범위 변환이란 초고화질 방송 컨텐츠 제작자에 의해 미리 정해진 변환식을 사용하는 방법 중의 하나로써 컨텐츠의 전체 밝기 범위 (DR)에 대해 선형 매핑 (linear mapping)을 하는 방법이다. 후술할 광역 밝기 범위 메타데이터 (HDR metadata)에 포함된 선형 매핑 플래그 정보 (linear_mapping_flag)를 1로 지정함으로써 선형 밝기 범위 변환 방법이 사용됨을 나타낼 수 있다. 또한, 후술할 광역 밝기 범위 메타데이터 (HDR metadata)에 포함된 필수 최대 밝기 정보와 최대 기준 밝기 정보를 동일한 값으로 설정하고, 필수 최소 밝기 정보와 최소 기준 밝기 정보를 동일한 값으로 설정한 후 핵심 밝기 영역에 사용되는 변환 곡선의 종류를 식별하는 변환 곡선 타입 정보를 0x00으로 설정함으로써 선형 밝기 범위 변환 방법이 사용됨을 나타낼 수 있다. 여기서, 필수 최대 밝기 정보, 최대 기준 밝기 정보, 필수 최소 밝기 정보, 최소 기준 밝기 정보, 핵심 밝기 영역 및 변환 곡선 타입 정보에 대한 상세한 설명은 후술한다.
본 발명의 일 실시예에 따르면 초고화질 방송 컨텐츠의 변환을 위해 적응성 밝기 범위 변환 (adaptive dynamic range transformation) 방법을 사용할 수 있다. 적응성 밝기 범위 변환이란 초고화질 방송 컨텐츠 제작자에 의해 미리 정해진 변환식을 구간에 따라 다르게 적용하는 방법이다. 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치의 디스플레이에서 표현되는 다양한 밝기 범위를 지원하기 위해 초고화질 방송 컨텐츠의 밝기 범위 (DR)는 세개의 구간으로 구분될 수 있다. 초고화질 방송 컨텐츠의 밝기 범위 (DR)는 필수 최소 밝기 정보 (luminance_lower_bound)와 필수 최대 밝기 정보 (luminance_upper_bound)의 사이 영역을 나타내는 핵심 밝기 범위 영역, 필수 최대 밝기 정보 (luminance_upper_bound)와 최대 기준 밝기 정보 (luminance_max)의 사이 영역을 나타내는 상위 밝기 범위 영역 및 최소 기준 밝기 정보 (luminance_min)와 필수 최소 밝기 정보 (luminance_lower_bound)의 사이 영역을 나타내는 하위 밝기 범위 영역으로 구분될 수 있다. 여기서, 핵심 밝기 범위 영역은 핵심 영역으로, 상위 밝기 범위 영역은 상위 영역으로 하위 밝기 범위 영역은 하위 영역으로 약칭될 수 있다. 구분된 각 구간이 수신 장치 디스플레이의 밝기 범위 (DR)에서 차지하는 비율이 전송될 수 있다. 핵심 밝기 범위 영역 비율 (mid_DR_percentage) 및 상위 밝기 범위 영역 비율 (upper_DR_percentage)이 전송됨으로써 계산을 통해 각각의 디스플레이에 맞는 구간 별 밝기를 설정할 수 있다. 여기서, 하위 밝기 영역 비율은 100에서 핵심 밝기 범위 영역 비율 및 상위 밝기 범위 영역 비율을 차감함으로써 계산될 수 있다. 본 발명의 일 실시예에 따른 적응성 밝기 범위 변환 방법의 변환 과정에 제작자의 의도를 반영하기 위해 후술할 광역 밝기 범위 메타데이터를 통해 컨텐츠의 밝기 범위의 구분을 위한 정보 (luminance_upper_bound, luminance_lower_bound), 구분된 각 구간에 대한 정보 (luma_upper_value, luma_lower_value) 및 구분된 각 구간에 대한 변환식에 대한 정보 (mid_DR_transformation_curve_type, upper_DR_transformation_curve_type, lower_DR_transformation_curve_type)가 전송될 수 있다. 여기서, 필수 최소 밝기 정보 (luminance_lower_bound), 필수 최대 밝기 정보 (luminance_upper_bound), 최대 기준 밝기 정보 (luminance_max), 최소 밝기 정보 (luminance_lower_bound) 및 핵심 밝기 범위 영역 비율 (mid_DR_percentage), 상위 밝기 범위 영역 비율 (upper_DR_percentage)에 대한 상세한 설명은 후술한다.
본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치가 기존에 비해 넓은 밝기 범위 (DR)를 갖지만 초고화질 방송 컨텐츠의 밝기 범위 (DR)를 모두 수용하지 못하는 경우 (경우 2) 이하 변환 방법들을 통해 수신 장치의 특성 및 제작자의 의도를 고려하여 컨텐츠를 변환할 수 있다.
본 발명의 일 실시예에 따르면 초고화질 방송 신호 수신 장치가 기존 밝기 범위를 갖는 디스플레이를 가진 경우 (경우 1)와 마찬가지로 초고화질 방송 컨텐츠의 변환을 위해 클리핑 (clipping) 옵션을 사용할 수 있다. 이에 대한 설명은 전술한 경우 1에서 클리핑에 대한 설명으로 대체한다.
본 발명의 일 실시예에 따르면 초고화질 방송 신호 수신 장치가 기존 밝기 범위를 갖는 디스플레이를 가진 경우 (경우 1)와 마찬가지로 초고화질 방송 컨텐츠의 변환을 위해 선형 밝기 범위 변환 (linear dynamic range transformation) 방법을 사용할 수 있다. 이에 대한 설명은 전술한 경우 1에서 선형 밝기 범위 변환 방법에 대한 설명으로 대체한다. 추가적으로 초고화질 방송 신호 수신 장치가 기존에 비해 넓은 밝기 범위 (DR)를 갖지만 초고화질 방송 컨텐츠의 밝기 범위 (DR)를 모두 수용하지 못하는 경우 (경우 2)에는 수신 장치의 디스플레이에서 표현 가능한 추가 밝기 범위 (DR) 고려를 위한 밝기 범위의 차이값 (luminance_upper_bound_diff[i])을 전송함으로써 선형 밝기 범위 변환 구간을 정할 수 있다. 여기서, 추가 밝기 범위 (DR) 고려를 위한 밝기 범위의 차이값 (luminance_upper_bound_diff[i])는 후술할 광역 밝기 범위 메타데이터에 포함되어 전송될 수 있다.
본 발명의 일 실시예에 따르면 초고화질 방송 신호 수신 장치가 기존 밝기 범위를 갖는 디스플레이를 가진 경우 (경우 1)와 마찬가지로 초고화질 방송 컨텐츠의 변환을 위해 적응성 밝기 범위 변환 (adaptive dynamic range transformation) 방법을 사용할 수 있다. 이에 대한 설명은 전술한 경우 1에서 적응성 밝기 범위 변환 방법에 대한 설명으로 대체한다. 추가적으로 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치가 기존에 비해 넓은 밝기 범위 (DR)를 갖지만 초고화질 방송 컨텐츠의 밝기 범위 (DR)를 모두 수용하지 못하는 경우 (경우 2)에서 적응성 밝기 범위 변환 방법은 기존 밝기 범위를 갖는 경우 1에 비해 추가된 밝기 범위 (DR)를 잘 활용할 수 있는 방법이다. 추가 영역 차이 정보 (luminance_upper_bound_diff[i]), 변경 핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage[i]) 및 변경 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage[i])를 사용하여 컨텐츠에서 표현된 밝기 범위의 각 구간 별 밝기 범위 (DR)의 변환 정도를 조절할 수 있다.
max_display_brightness < luminance_upper_bound + luminance_upper_bound_diff[0] + … + luminance_upper_bound_diff[i]
를 만족하는 경우 즉, 초고화질 방송 신호 수신 장치의 디스플레이에서 표현 가능한 밝기 범위의 최대값 (max_display_brightness)이 필수 최대 밝기 정보 (luminance_upper_bound)에 추가 영역 차이 정보 (luminance_upper_bound_diff[i])들을 더한 값보다 작은 경우에는 핵심 밝기 범위 영역 및/또는 상위 밝기 범위 영역이 변경될 수 있고, 이에 따라 변경된 영역에 적용되는 변환 곡선도 변경되므로 후술할 변경 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type[i]), 변경 상위 영역 변환 곡선 세부 정보 (upper_DR_transformation_curve()), 변경 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage[i]) 및/또는 변경 핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage[i])가 새롭게 적용될 수 있다. 상술한 추가 영역 차이 정보, 변경 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type[i]), 변경 상위 영역 변환 곡선 세부 정보 (upper_DR_transformation_curve()), 변경 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage[i]) 및/또는 변경 핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage[i])에 대한 상세한 설명은 후술한다.
본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치가 기존에 비해 넓은 밝기 범위 (DR)를 갖지만 초고화질 방송 컨텐츠의 밝기 범위 (DR)를 모두 수용하지 못하는 경우 (경우 2) 일반 디스플레이의 기존 밝기 범위와 비교해 보면 추가된 밝기 범위 (DR)로 인하여 전체 출력 밝기 범위 (output dynamic range)가 증가하게 되는데 이 때, 변경 핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage[i])의 비율이 변경 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage[i])에 비해 차지하는 비중이 기존과 유사한 경우에는 중간 밝기 영역 정보를 자세히 나타내겠다는 것을 의미할 수 있고, 변경 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage[i])의 비중이 증가하는 경우에는 고휘도 성분에 대한 밝기 정보를 보다 자세히 나타내겠다는 것을 의미할 수 있다.
본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치 디스플레이의 밝기 범위 (DR)가 초고화질 방송 컨텐츠의 밝기 범위 (DR)를 충분히 수용하는 경우 (경우 3)에는 초고화질 방송 컨텐츠를 별도의 변환 과정 없이 그대로 재생시킬 수 있다.
양자화 단계 (Quantization; S3040)에서는 본 발명의 일 실시예에 따른 수신 장치의 디스플레이에 적합한 밝기 범위를 갖도록 변환된 초고화질 방송 컨텐츠를 디스플레이의 비트 심도 (bit depth)에 맞도록 양자화 (quantization)할 수 있다.
본 발명의 일 실시예에 따른 초고화질 방송 컨텐츠의 영상 처리 과정은 디스플레이 환경 조정 단계 (Display characteristics adjustment) 및/또는 재생 단계 (Display)를 더 포함할 수 있다. 디스플레이 환경 조정 단계 (Display characteristics adjustment)에서는 초고화질 방송 컨텐츠 제작자가 의도한 디스플레이 환경에 적합하도록 수신 장치의 디스플레이 환경이 조정될 수 있다. 메타데이터를 통하여 컨텐츠 제작자가 의도한 디스플레이 환경에 대한 정보가 제공될 수 있고 이를 이용하여 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치는 디스플레이 환경을 조정할 수 있다. 재생 단계 (Display)에서는 초고화질 방송 컨텐츠의 제작자의 의도 및 수신 장치의 디스플레이 특성에 맞게 밝기 범위 (DR)가 변환된 컨텐츠를 시청자에세 제공할 수 있다. 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치 디스플레이의 밝기 범위 (DR)가 초고화질 방송 컨텐츠의 밝기 범위 (DR)를 충분히 수용하는 경우 (경우 3)에는 별도의 변환 없이 원본 그대로의 컨텐츠를 시청자에게 제공할 수 있다.
도 25는 본 발명의 일 실시예에 따른 클리핑 (clipping) 옵션과 선형 밝기 범위 변환 (linear dynamic range transformation) 방법을 나타낸 도면이다.
당해 도면에서, x축은 본 발명의 일 실시예에 따른 초고화질 방송 컨텐츠의 밝기 범위를 나타낼 수 있고 y축은 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치의 디스플레이에서 표현 가능한 밝기 범위 (DR)를 나타낼 수 있다. Input dynamic range는 밝기 범위의 변환 전 컨텐츠의 밝기 범위가 될 수 있고 Output dynamic range는 수신 장치의 디스플레이에서 표현 가능한 밝기 범위에 맞춰 변환된 컨텐츠의 밝기 범위가 될 수 있다.
당해 도면에서 나타난 두개의 변환 곡선 중 기울기가 더 큰 곡선은 클리핑 옵션이 사용된 상황을 나타낼 수 있고 기울기가 더 작은 곡선은 선형 밝기 범위 변환 (linear dynamic range transformation) 방법이 사용된 상황을 나타낼 수 있다.
도 26는 본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터를 통해 전송되는 변환 곡선 (transformation curve)의 종류를 나타낸 도면이다.
본 발명의 일 실시예에 따르면 초고화질 방송 신호 수신 장치의 디스플레이 환경에 적합하도록 초고화질 방송 컨텐츠를 변환하는 과정에서 제작자에 의해 미리 선택된 특정 변환식을 사용할 수 있다. 컨텐츠의 변환에 사용되는 변환식에는 당해 도면에서 도시된 바와 같이, 선형 곡선 (linear curve), 지수 곡선 (exponential curve), S곡선 (s curve), 로그 곡선 (logarithmic curve), 여러 곡선이 조합된 곡선 (combination curve) 및 LUT (Look Up Table)가 사용될 수 있으며, 제작자에 의해 선택된 최적의 변환 곡선은 후술할 광역 밝기 범위 메타데이터에 포함된 핵심 영역 변환 곡선 세부 정보 (mid_DR_transformation_curve()), 상위 영역 변환 곡선 세부 정보 (upper_DR_transformation_curve()), 하위 영역 변환 곡선 세부 정보 (lower_DR_transformation_curve())를 통하여 전송될 수 있다.
도 27은 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치 디스플레이의 구분에 따른 적응성 밝기 범위 변환 (adaptive dynamic range transformation) 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치의 디스플레이 환경은 기 설정된 판단 기준에 의해 구분될 수 있다. 초고화질 방송 신호 수신 장치의 디스플레이 환경은 기존 밝기 범위를 갖는 디스플레이 (경우 1), 기존 밝기 범위보다 넓은 밝기 범위를 갖지만 초고화질 방송 컨텐츠에서 표현된 밝기 범위를 모두 수용하지 못하는 디스플레이 (경우 2) 및 초고화질 방송 컨텐츠에서 표현된 밝기 범위보다 넓은 범위를 표현할 수 있는 디스플레이 (경우 3) 중 어느 하나로 구분될 수 있다. 디스플레이 환경의 구분에 대한 상세한 설명은 전술한 초고화질 방송 신호 수신 장치의 구분부에 대한 설명으로 대체한다.
당해 도면에서 x축은 입력 밝기 범위 (Input dynamic range)를 나타내고 y축은 출력 밝기 범위 (Output dynamic range)를 나타낼 수 있다. 입력 밝기 범위 (Input dynamic range)로 초고화질 방송 컨텐츠의 밝기 범위 (DR)가 입력되면 변환 과정을 거쳐 출력 밝기 범위 (Output dynamic range)로서 초고화질 방송 신호 수신 장치 디스플레이의 밝기 범위 (DR)가 출력될 수 있다.
당해 도면에 도시된, 필수 최소 밝기 정보 (luminance_lower_bound)는 초고화질 방송 컨텐츠에서 표현된 밝기 범위 중 필수적으로 표현되어야 하는 밝기 범위의 최소값을 나타낼 수 있다. 필수 최대 밝기 정보 (luminance_upper_bound)는 초고화질 방송 컨텐츠에서 표현된 밝기 범위 중 필수적으로 표현되어야 하는 밝기 범위의 최대값을 나타낼 수 있다. 필수 최대 밝기 정보 (luminance_upper_bound)가 나타내는 값으로부터 추가된 값을 나타내는 필수 최대 밝기 차이 정보 (luminance_upper_bound_diff)는 기존 밝기 범위보다 넓은 밝기 범위를 갖지만 초고화질 방송 컨텐츠에서 표현된 밝기 범위를 모두 수용하지 못하는 디스플레이 (경우 2)에 적합하도록 초고화질 방송 컨텐츠를 변환하는 경우에 컨텐츠의 핵심 밝기 범위 영역을 확장하기 위해 이용될 수 있다. 즉, 경우 2에서 초고화질 방송 컨텐츠의 핵심 밝기 범위 영역은 필수 최대 밝기 차이 정보 (luminance_upper_bound_diff)가 나타내는 값만큼 확장될 수 있다. 결과적으로 경우 2에서 핵심 밝기 범위 영역은 필수 최소 밝기 정보 (luminance_lower_bound)가 나타내는 값과 필수 최대 밝기 정보 (luminance_upper_bound)가 나타내는 값에 필수 최대 밝기 차이 정보 (luminance_upper_bound_diff)가 나타내는 값을 더한 값과의 사이 영역을 나타낼 수 있다. 최대 기준 밝기 정보 (luminance_max)는 초고화질 방송 컨텐츠에서 표현된 최대 기준 밝기를 나타낼 수 있고, 최소 기준 밝기 정보 (luminance_min)는 초고화질 방송 컨텐츠에서 표현된 최소 기준 밝기를 나타낼 수 있고, 최소 기준 밝기 정보는 당해 도면에 도시되어 있지 않지만 그래프에서 원점 위치의 값을 나타낼 수 있다.
당해 도면을 살펴보면, 본 발명의 일 실시예에 따른 경우 3의 디스플레이에서는 초고화질 방송 컨텐츠에서 표현된 밝기 범위보다 넓은 범위를 표현할 수 있으므로 입력 밝기 범위의 전구간에 대해 기울기가 1인 선형 변환 곡선이 이용될 수 있다. 본 발명의 일 실시예에 따른 경우 2의 디스플레이의 경우 확장된 핵심 밝기 범위 영역에서는 선형 변환 곡선이 사용되었지만 하위 밝기 범위 영역 및 필수 최대 밝기 차이 정보 (luminance_upper_bound_diff)에 의해 변경된 상위 밝기 범위 영역에서는 각각 지수 곡선, 로그 곡선이 사용될 수 있다. 본 발명의 일 실시예에 따른 경우 1의 디스플레이의 경우 핵심 밝기 범위 영역에서는 선형 곡선이 사용될 수 있고, 하위 밝기 범위 영역 및 상위 밝기 범위 영역에서는 각각 지수 곡선, 로그 곡선이 사용될 수 있다. 당해 도면에서 입력 밝기 범위의 각 영역에서 사용되는 변환 곡선은 선형 곡선 (linear curve), 지수 곡선 (exponential curve), S곡선 (s curve), 로그 곡선 (logarithmic curve), 여러 곡선이 조합된 곡선 (combination curve) 및 LUT (Look Up Table) 중 어느 하나가 사용될 수 있다. 여기서, 핵심 밝기 범위 영역, 하위 밝기 범위 영역 및 상위 밝기 범위 영역에 대한 상세한 설명은 전술한 초고화질 방송 컨텐츠의 영상 처리 과정을 나타낸 도면에 대한 설명으로 대체한다.
도 28는 본 발명의 일 실시예에 따른 SEI 메세지 (Supplemental Enhancement Information message)의 구조를 나타낸 도면이다.
본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터 (Dynamic range transformation info(payloadSize))는 SEI 메시지를 전송하는 패킷의 페이로드에 포함되어 전송될 수 있다.
도 29는 본 발명의 일 실시예에 따른 SEI 메시지 (Supplemental Enhancement Information message)에 포함되어 전송되는 광역 밝기 범위 메타데이터 (Dynamic range transformation info(payloadSize))를 나타낸 도면이다.
본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터 (High Dynamic Range metadata; HDR metadata)는 초고화질 방송 컨텐츠에서 표현된 밝기 정보와 초고화질 방송 신호 수신 장치의 디스플레이 환경에 적합하도록 초고화질 방송 컨텐츠를 변환하는 방법에 대한 정보를 나타내는 메타데이터를 나타낸다. 상술한 광역 밝기 범위 메타데이터는 Dynamic range transformation information, Dynamic range transformation info(payloadSize) 또는 dynamic_range_transformation_metadata()으로 명명 및 표기될 수 있다.
본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터는 최대 기준 밝기 정보 (luminance_max), 최소 기준 밝기 정보 (luminance_min), 임의 EOTF 정보 (private_EOTF), EOTF 계수 개수 정보 (number_of_coeff), EOTF 계수 정보 (transfer_curve_coeff[i]), 클리핑 플래그 정보 (clipping_flag), 선형 매핑 플래그 정보 (linear_mapping_flag), 클리핑 최대 밝기 범위 정보 (luma_clipping_upper_bound), 클리핑 최소 밝기 범위 정보 (luma_clipping_lower_bound), 필수 최대 밝기 정보 (luminance_upper_bound), 필수 최소 밝기 정보 (luminance_lower_bound), 필수 최대 밝기 디지털 값 (luma_upper_value), 필수 최소 밝기 디지털 값 (luma_lower_value), 핵심 영역 변환 곡선 타입 정보 (mid_DR_transformation_curve_type), 핵심 영역 변환 곡선 세부 정보 (mid_DR_transformation_curve()), 핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage), 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type), 상위 영역 변환 곡선 세부 정보 (upper_DR_transformation_curve()), 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage), 하위 영역 변환 곡선 타입 정보 (lower_DR_transformation_curve_type), 하위 영역 변환 곡선 세부 정보 (lower_DR_transformation_curve()), 추가 영역 개수 정보 (number_luminance_upper_bound_diff), 추가 영역 차이 정보 (luminance_upper_bound_diff[i]), 추가 영역 차이 디지털 값 (luma_upper_value_diff[i]), 변경 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type[i]), 변경 상위 영역 변환 곡선 세부 정보 (upper_DR_transformation_curve()), 변경 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage[i]) 및/또는 변경 핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage[i])를 포함할 수 있다.
최대 기준 밝기 정보 (luminance_max)는 초고화질 방송 컨텐츠에서 표현된 최대 기준 밝기를 나타낸다. 즉, 밝기 범위 (DR)의 최대값을 나타낸다. 예를 들어, 참조 모니터 (reference monitor)의 경우 100cd/m^2를 최대 기준 밝기로 정하고 있고 이 경우 일반적인 범위를 고려하여 상기 값을 100 (10진수)으로 나눈 값의 몫인 1이 전송될 수 있다.
최소 기준 밝기 정보 (luminance_min)는 초고화질 방송 컨텐츠에서 표현된 최소 기준 밝기를 나타낸다. 즉, 밝기 범위 (DR)의 최소값을 나타낸다. 예를 들어, 참조 모니터 (reference monitor)의 경우 0.05cd/m^2를 최소 기준 밝기로 정하고 있고 이 경우 일반적인 범위를 고려하여 상기 값에 100 (10진수)을 곱한 값인 5가 전송될 수 있다.
임의 EOTF 정보 (private_EOTF)는 임의의 EOTF 함수가 사용되는지 여부를 나타낸다. 일반적으로 ITU-R BT.1886, REC.709, BT.2020 등과 같이 널리 사용되는 EOTF가 사용되는 경우에는 VUI 정보에 의해 전달될 수 있다. 하지만, 아직 표준으로 정해지지 않은 EOTF가 사용되는 경우 당해 필드 값을 1로 설정하여 나타낼 수 있다. 예를 들어, 표준으로 정해 지지 않은 EOTF 즉, 임의의 EOTF로서 perceptual quantization이 사용될 수 있다.
EOTF 계수 개수 정보 (number_of_coeff)는 임의의 EOTF에 사용된 계수의 개수를 나타낸다.
EOTF 계수 정보 (transfer_curve_coeff[i])는 임의의 EOTF에 사용된 계수를 나타낸다.
클리핑 플래그 정보 (clipping_flag)는 클리핑 옵션이 사용되는지 여부를 나타내는 정보로서 클리핑 옵션의 사용이 허용되는 경우 1값을 가질 수 있다.
선형 매핑 플래그 정보 (linear_mapping_flag)는 선형 밝기 범위 변환 (linear dynamic range transformation) 방법의 사용 여부를 나타낸다. 선형 밝기 범위 변환 (linear dynamic range transformation) 방법이 사용되는 경우 1값을 가진다.
클리핑 최대 밝기 범위 정보 (luma_clipping_upper_bound)는 클리핑 옵션이 사용되는 경우에 디스플레이 되는 밝기 범위 (DR)에서 상위 임계점에 대한 디지털 값 (digtal value)을 나타낸다.
클리핑 최소 밝기 범위 정보 (luma_clipping_lower_bound)는 클리핑 옵션이 사용되는 경우에 디스플레이 되는 밝기 범위 (DR)에서 하위 임계점에 대한 디지털 값 (digtal value)을 나타낸다.
필수 최대 밝기 정보 (luminance_upper_bound)는 초고화질 방송 컨텐츠에서 표현된 밝기 범위 중 필수적으로 표현되어야 하는 밝기 범위의 최대값 (nit 단위)을 나타낸다. 필수 최대 밝기 정보는 수신 장치의 디스플레이 종류를 판단하는 기준이 될 수 있다. 또한, 수신 장치의 디스플레이 종류를 판단하는 별도의 기준을 시그널링 할 수 있다.
필수 최소 밝기 정보 (luminance_lower_bound)는 초고화질 방송 컨텐츠에서 표현된 밝기 범위 중 필수적으로 표현되어야 하는 밝기 범위의 최소값 (nit 단위)을 나타낸다. 필수 최소 밝기 정보는 수신 장치의 디스플레이 종류를 판단하는 기준이 될 수 있다. 또한, 수신 장치의 디스플레이 종류를 판단하는 별도의 기준을 시그널링 할 수 있다.
필수 최대 밝기 디지털 값 (luma_upper_value)은 필수 최대 밝기 정보 (luminance_upper_bound)에 해당하는 디지털 값 (digital value)을 나타낸다.
필수 최소 밝기 디지털 값 (luma_lower_value)은 필수 최소 밝기 정보 (luminance_lower_bound)에 해당하는 디지털 값 (digital value)을 나타낸다.
핵심 영역 변환 곡선 타입 정보 (mid_DR_transformation_curve_type)는 핵심 밝기 범위 영역에서 사용되는 밝기 범위 변환 곡선을 식별한다. 변환 곡선은 선형 곡선 (linear curve), 지수 곡선 (exponential curve), S곡선 (s curve), 로그 곡선 (logarithmic curve), 여러 곡선이 조합된 곡선 (combination curve) 및 LUT (Look Up Table) 중 어느 하나가 사용될 수 있다.
핵심 영역 변환 곡선 세부 정보 (mid_DR_transformation_curve())는 핵심 영역 변환 곡선 타입 정보 (mid_DR_transformation_curve_type)에 의해 식별된 변환 곡선에 따른 추가 정보를 나타낸다. 예를 들어, 선형 곡선 (linear curve)이 사용되는 경우 기울기 정보가 전송될 수 있고, 지수 곡선 (exponential curve)이나 로그 곡선 (logarithmic curve)이 사용되는 경우 밑에 대한 정보가 전송될 수 있고, S곡선 (s curve)이 사용되는 경우 변곡점의 좌표 및 각 구간에 대한 밑과 y절편에 대한 정보가 전송될 수 있고, 여러 곡선이 조합된 곡선 (combination curve)이 사용되는 경우 각 구간의 x좌표, 각 구간의 곡선 종류 및 당해 그래프에 대한 정보가 전송될 수 있다.
핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage)는 초고화질 방송 컨텐츠의 밝기 범위 중 핵심 밝기 범위 영역이 수신 장치 디스플레이의 전체 밝기 범위 (DR)에서 차지하는 비율을 나타낸다.
상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type)는 상위 밝기 범위 영역에서 사용되는 밝기 범위 변환 곡선을 식별한다. 변환 곡선은 선형 곡선 (linear curve), 지수 곡선 (exponential curve), S곡선 (s curve), 로그 곡선 (logarithmic curve), 여러 곡선이 조합된 곡선 (combination curve) 및 LUT (Look Up Table) 중 어느 하나가 사용될 수 있다.
상위 영역 변환 곡선 세부 정보 (upper_DR_transformation_curve())는 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type)에 의해 식별된 변환 곡선에 따른 추가 정보를 나타낸다. 예를 들어, 선형 곡선 (linear curve)이 사용되는 경우 기울기 정보가 전송될 수 있고, 지수 곡선 (exponential curve)이나 로그 곡선 (logarithmic curve)이 사용되는 경우 밑에 대한 정보가 전송될 수 있고, S곡선 (s curve)이 사용되는 경우 변곡점의 좌표 및 각 구간에 대한 밑과 y절편에 대한 정보가 전송될 수 있고, 여러 곡선이 조합된 곡선 (combination curve)이 사용되는 경우 각 구간의 x좌표, 각 구간의 곡선 종류 및 당해 그래프에 대한 정보가 전송될 수 있다.
상위 밝기 범위 영역 비율 정보 (upper_DR_percentage)는 초고화질 방송 컨텐츠의 밝기 범위 중 상위 밝기 범위 영역이 수신 장치 디스플레이의 전체 밝기 범위 (DR)에서 차지하는 비율을 나타낸다.
하위 영역 변환 곡선 타입 정보 (lower_DR_transformation_curve_type)는 하위 밝기 범위 영역에서 사용되는 밝기 범위 변환 곡선을 식별한다. 변환 곡선은 선형 곡선 (linear curve), 지수 곡선 (exponential curve), S곡선 (s curve), 로그 곡선 (logarithmic curve), 여러 곡선이 조합된 곡선 (combination curve) 및 LUT (Look Up Table) 중 어느 하나가 사용될 수 있다.
하위 영역 변환 곡선 세부 정보 (lower_DR_transformation_curve())는 하위 영역 변환 곡선 타입 정보 (lower_DR_transformation_curve_type)에 의해 식별된 변환 곡선에 따른 추가 정보를 나타낸다. 예를 들어, 선형 곡선 (linear curve)이 사용되는 경우 기울기 정보가 전송될 수 있고, 지수 곡선 (exponential curve)이나 로그 곡선 (logarithmic curve)이 사용되는 경우 밑에 대한 정보가 전송될 수 있고, S곡선 (s curve)이 사용되는 경우 변곡점의 좌표 및 각 구간에 대한 밑과 y절편에 대한 정보가 전송될 수 있고, 여러 곡선이 조합된 곡선 (combination curve)이 사용되는 경우 각 구간의 x좌표, 각 구간의 곡선 종류 및 당해 그래프에 대한 정보가 전송될 수 있다.
추가 영역 개수 정보 (number_luminance_upper_bound_diff)는 핵심 밝기 범위 영역을 확장하기 위해 사용되는 변수의 개수를 나타낸다.
추가 영역 차이 정보 (luminance_upper_bound_diff[i])는 초고화질 방송 컨텐츠에서 i+1 번째 밝기 값을 구성하기 위한 차이 값을 나타낸다. 기존 밝기 범위보다 넓은 밝기 범위를 갖지만 초고화질 방송 컨텐츠에서 표현된 밝기 범위를 모두 수용하지 못하는 디스플레이 (경우 2)에서 핵심 밝기 범위 영역을 확장하는 경우 필수 최대 밝기 정보 (luminance_upper_bound)는 luminance_upper_bound + luminance_upper_bound_diff[0] + … + luminance_upper_bound_diff[i]가 나타내는 값으로 변경될 수 있다.
추가 영역 차이 디지털 값 (luma_upper_value_diff[i])은 초고화질 방송 컨텐츠에서 i+1 번째 밝기 값에 대한 디지털 값 (digital value)을 나타낸다. 기존 밝기 범위보다 넓은 밝기 범위를 갖지만 초고화질 방송 컨텐츠에서 표현된 밝기 범위를 모두 수용하지 못하는 디스플레이 (경우 2)에서 핵심 밝기 범위 영역을 확장하는 경우 필수 최대 밝기 디지털 값 (luma_upper_value)은 luma_upper_value + luma_upper_value_diff[0] + … + luma_upper_value_diff[i]가 나타내는 값으로 변경될 수 있다.
변경 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type[i])는 i+1 번째 밝기 범위를 지원하는 경우 변경된 상위 밝기 범위 영역에서 사용되는 변환 곡선을 식별할 수 있다. 즉, 변경 상위 영역 변환 곡선 타입 정보는 핵심 밝기 범위 영역이 확장되는 경우 이에 따라 변경된 상위 밝기 범위 영역에서 사용되는 변환 곡선을 식별할 수 있다.
변경 상위 영역 변환 곡선 세부 정보 (upper_DR_transformation_curve())는 변경 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type[i])에 의해 식별된 변환 곡선에 따른 추가 정보를 나타낸다. 즉, i+1 번째 밝기 범위를 지원하는 경우 변경된 상위 밝기 범위 영역에서 사용되는 변환 곡선에 대한 세부 사항을 나타낸다.
변경 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage[i])는 초고화질 방송 컨텐츠의 핵심 밝기 범위 영역이 변경되는 경우 이에 따라 변경된 상위 밝기 범위 영역이 수신 장치 디스플레이의 전체 밝기 범위 (DR)에서 차지하는 비율을 나타낸다.
변경 핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage[i])는 초고화질 방송 컨텐츠의 핵심 밝기 범위 영역이 변경되는 경우 변경된 핵심 밝기 범위 영역이 수신 장치 디스플레이의 전체 밝기 범위 (DR)에서 차지하는 비율을 나타낸다.
본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터는 EOTF 타입 정보 (EOTF_type) 및/또는 EOTF 부가 정보 (EOTF_additional_info)를 더 포함할 수 있다. EOTF 타입 정보 (EOTF_type)는 HDR 컨텐츠의 최적 화질을 위해 컨텐츠 제작자가 사용한 EOTF의 종류를 나타낼 수 있다. 복수의 EOTF 관련 표준이 제정되거나 컨텐츠 제작자가 임의의 EOTF를 정의하여 사용하는 경우에도 수신측은 EOTF 타입 정보를 이용하여 사용된 EOTF의 종류를 식별할 수 있다. EOTF 부가 정보 (EOTF_additional_info)는 상술한 EOTF 타입 정보에 따라 추가적인 정보가 전달될 필요가 있는 경우 사용된 EOTF에 대한 추가적인 정보를 전달하기 위해 사용된다. 주어진 EOTF 타입 정보에 대하여, 다양한 조건에서 복수의 EOTF 함수의 계수를 전달할 필요가 있는 경우 송신측은 EOTF 부가 정보 (EOTF_additional_info)를 이용하여 각 계수들에 대한 정보를 제공할 수 있다. 예를 들어, 컨텐츠의 다양한 최대 밝기 조건에 따라 적합한 EOTF 함수의 계수가 달라지는 경우에 각 최대 밝기 조건에 따른 계수가 모두 전달되어야 한다. 이 경우 상술한 EOTF 부가 정보 내에 컨텐츠의 최대 밝기 조건의 개수를 지정하는 필드를 별도로 정의하고 각 최대 밝기 조건에 대해 목표 최대 밝기 정보 (EOTF_target_max_brightness) 및 EOTF 함수의 계수들에 대한 정보 (EOTF_coefficient[i])를 나타내는 방법으로 상술한 EOTF 부가 정보를 이용할 수 있다.
도 30은 본 발명의 일 실시예에 따른 핵심 영역 변환 곡선 타입 정보 (mid_DR_transformation_curve_type)를 나타낸 도면이다.
핵심 영역 변환 곡선 타입 정보 (mid_DR_transformation_curve_type)의 값이 0x00인 경우 변환 곡선으로 선형 곡선 (linear curve)이 사용됨을 나타내고, 0x01인 경우 변환 곡선으로 로그 곡선 (logarithmic curve)이 사용됨을 나타내고, 0x02인 경우 변환 곡선으로 지수 곡선 (exponential curve)이 사용됨을 나타내고, 0x03인 경우 변환 곡선으로 S곡선 (s curve)이 사용됨을 나타내고, 0x04인 경우 변환 곡선으로 여러 곡선이 조합된 곡선 (combination curve)이 사용됨을 나타내고, 0x05인 LUT (Look Up Table)이 사용됨을 나타낼 수 있다.
당해 도면에서는 핵심 영역 변환 곡선 타입 정보에 대해 설명하고 있지만, 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type) 및 하위 영역 변환 곡선 타입 정보 (lower_DR_transformation_curve_type)에도 당해 도면의 내용이 동일하게 적용될 수 있다.
도 31은 본 발명의 일 실시예에 따른 변환 곡선 세부 정보 (DR_transformation_curve)를 나타낸 도면이다.
본 발명의 일 실시예에 따른 변환 곡선 세부 정보 (DR_transformation_curve)는 기울기 정보 (gradient), 밑 정보 (coeff_a, coeff_a1), 변곡점 좌표 정보(intersection_x), y 절편 정보 (coeff_a2), 조합된 곡선의 개수 정보 (num_section), 변환 곡선 타입 정보 (DR_transformation_curve_type[i]), 엔트리 길이 정보 (entry_length), 엔트리 입력 정보 (in_value) 및/또는 엔트리 출력 정보 (out_value)를 포함할 수 있다.
기울기 정보 (gradient)는 변환 곡선으로 선형 곡선 (linear curve)이 사용되는 경우 선형 곡선의 기울기를 나타낸다.
밑 정보 (coeff_a, coeff_a1)는 변환 곡선으로 지수 곡선 (exponential curve), S곡선 (s curve) 및/또는 로그 곡선 (logarithmic curve)이 사용되는 경우 지수 함수 또는 로그 함수의 밑을 나타낸다.
변곡점 좌표 정보(intersection_x)는 변환 곡선으로 S곡선 (s curve)이 사용되는 경우 변곡점의 좌표를 나타낸다.
y 절편 정보 (coeff_a2)는 변환 곡선으로 S곡선 (s curve)이 사용되는 경우 변곡점을 기준으로 양쪽의 곡선 각각에 대한 y절편 값을 나타낸다.
조합된 곡선의 개수 정보 (num_section)는 변환 곡선으로 여러 곡선이 조합된 곡선 (combination curve)이 사용되는 경우 조합된 곡선의 개수를 나타낸다.
변환 곡선 타입 정보 (DR_transformation_curve_type[i])는 변환 곡선으로 여러 곡선이 조합된 곡선 (combination curve)이 사용되는 경우 조합된 각 곡선의 종류를 식별한다.
엔트리 길이 정보 (entry_length)는 초고화질 방송 컨텐츠의 변환을 위해 LUT (Look-Up Table)이 사용되는 경우 LUT에 포함되는 엔트리의 길이를 나타낸다.
엔트리 입력 정보 (in_value)는 초고화질 방송 컨텐츠의 변환을 위해 LUT (Look-Up Table)이 사용되는 경우 LUT에 입력되는 값을 나타낸다.
엔트리 출력 정보 (out_value) 는 초고화질 방송 컨텐츠의 변환을 위해 LUT (Look-Up Table)이 사용되는 경우 LUT에 의해 출력되는 값을 나타낸다.
도 32는 본 발명의 일 실시예에 따른 EIT (Event Information Table)를 나타낸 도면이다.
본 발명의 일 실시예에 따른 EIT (Event Information Table)는 table_id 필드, section_syntax_indicator 필드, private_indicator 필드, section_length 필드, source_id 필드, version_number 필드, current_next_indicator 필드, section_number 필드, last_section_number 필드, protocol_version 필드, num_events_in_section 필드, event_id 필드, start_time 필드, ETM_location 필드, length_in_seconds 필드, title_length 필드, title_text() 필드, descriptors_length 필드, descriptor() 필드 및/또는 CRC_32 필드를 포함할 수 있다.
table_id 필드는 당해 테이블이 EIT (Event Information Table)임을 식별한다.
section_syntax_indicator 필드는 MPEG-2 private_section table의 long 형태를 나타내기 위해 1로 세팅되는 1비트 필드이다.
private_indicator 필드는 1로 세팅되는 1비트 필드이다.
section_length 필드는 이 필드 뒤에 있는 테이블 섹션의 길이를 바이트 수로 나타낸다.
source_id 필드는 해당 섹션에서 기술되는 이벤트를 전송하는 가상 채널의 소스 아이디 (source id)를 나타낸다.
version_number 필드는 테이블의 버전 번호를 나타내는 5비트 필드이다.
current_next_indicator 필드는 1비트 필드로서, 이 테이블이 현재 적용 가능한지 또는 다음에 적용 가능한지를 나타낸다.
section_number 필드는 섹션의 번호를 나타낸다.
last_section_number 필드는 마지막 섹션의 번호를 식별한다.
protocop_version 필드는 현재 프로토콜에서 정의된 파라미터와 다른 파라미터를 전송하는 현재 테이블 타입을 추후에 허용하기 위한 기능을 가지는 필드이다.
num_events_in_section 필드는 해당 테이블 섹션에 포함된 이벤트의 개수를 나타낸다.
event_id 필드는 기술된 이벤트를 가리키는 특정 숫자를 식별한다. 여기서, 특정 숫자는 이벤트 ETM_id의 일부분으로서 역할을 수행할 수 있다.
start_time 필드는 해당 이벤트의 시작시간을 GPS 세컨드를 기준으로 나타낸다. 가상 채널에서 이벤트의 시작 시간을 나타내는 값은 방영 중인 이벤트의 종료 시간을 나타내는 값보다 클 수 있다. 이벤트의 종료 시간은 이벤트의 시작 시간과 이벤트의 길이를 시간으로 나타낸 값의 합으로 정의될 수 있다.
ETM_location 필드는 채널, 이벤트 또는 데이터 이벤트를 위한 확장된 텍스트 메시지의 존재 여부를 나타낸다.
length_in_seconds 필드는 이벤트의 지속 시간을 초단위로 나타낸다.
title_length 필드는 타이틀 텍스트 (title_text)의 길이를 나타낸다. 해당 필드의 값이 0이면 해당 이벤트에 타이틀이 없음을 나타낸다.
title_text() 필드는 이벤트의 제목 (title)을 multiple string structure 형식으로 나타낸다.
descriptors_length 필드는 뒤에 이어서 기술되는 이벤트 디스크립터 (descriptor())의 전체 길이를 나타낸다.
descriptor() 는 테이블 내에 위치하는 descriptor loop이다. descriptor loop는 추가적인 descriptor를 포함할 수 있다. EIT 안에는 0개 이상의 디스크립터가 포함될 수 있으며, 당해 디스크립터는 각 이벤트마다 적용되는 정보를 기술하는 이벤트 레벨 디스크립터 (event level descriptor)에 해당할 수 있다. 본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터는 이벤트 레벨 디스크립터에 포함되어 전송될 수 있다. 본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터가 EIT의 이벤트 레벨 디스크립터에 포함되어 전송되는 경우 수신 장치는 이벤트 레벨 (event level)에서 컨텐츠의 밝기 범위 변환을 위한 메타데이터가 포함되어 있는지 여부를 확인할 수 있고, 수신 장치에서 해당 컨텐츠를 수용할 수 있는지 여부를 판단할 수 있다. 광역 밝기 범위 메타데이터를 포함하는 디스크립터를 밝기 범위 변환 정보 디스크립터라고 명명할 수 있으며 이에 대한 상세한 설명은 후술한다. 초고화질 서비스의 종류를 식별하는 정보를 포함하는 초고화질 프로그램 정보 디스크립터가 EIT에 포함되어 전송될 수 있다. 이에 대한 설명은 후술한다.
CRC_32 필드는 데이터의 무결성을 체크할 수 있는 CRC 값을 포함한다. CRC 값은 전체 EIT 섹션이 처리된 이후에 Annex A of ISO-13818-1 "MPEG-2 Systems" [13]에 정의되어 있는 디코더 안의 레지스터로부터 0값이 출력되는 것을 보증할 수 있다.
도 33은 본 발명의 일 실시예에 따른 밝기 범위 변환 정보 디스크립터 (dynamic_range_transformation_info_descriptor)를 나타낸 도면이다.
본 발명의 일 실시예에 따른 밝기 범위 변환 정보 디스크립터 (dynamic_range_transformation_info_descriptor)는 descriptor_tag 필드, descriptor_length 필드, number_of_HDR_info 필드 및/또는 dynamic_range_transformation_metadata() 필드를 포함할 수 있다.
descriptor_tag 필드는 당해 디스크립터가 밝기 범위 변환 정보 디스크립터임을 식별한다.
descriptor_length 필드는 당해 디스크립터의 길이를 나타낸다.
number_of_HDR_info 필드는 당해 디스크립터에 포함된 광역 밝기 범위 메타데이터의 개수를 나타낸다. scene by scene으로 장면마다 컨텐츠의 변환 방법 등이 달라지는 경우 제작자가 의도하는 광역 밝기 범위 모드 (mode)의 개수를 나타낼 수 있다.
dynamic_range_transformation_metadata() 필드는 초고화질 방송 컨텐츠에서 표현된 밝기 정보와 초고화질 방송 신호 수신 장치의 디스플레이 환경에 적합하도록 초고화질 방송 컨텐츠를 변환하는 방법에 대한 정보를 나타낸다. 당해 필드는 광역 밝기 범위 메타데이터라고 명명될 수 있으며, 이에 대한 상세한 설명은 후술한다.
도 34는 본 발명의 일 실시예에 따른 밝기 범위 변환 정보 디스크립터 (dynamic_range_transformation_info_descriptor())에 포함된 광역 밝기 범위 메타데이터 (dynamic_range_transformation_metadata())를 나타낸 도면이다.
본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터 (dynamic_range_transformation_metadata())는 최대 기준 밝기 정보 (luminance_max), 최소 기준 밝기 정보 (luminance_min), 필수 최대 밝기 정보 (luminance_upper_bound), 필수 최소 밝기 정보 (luminance_lower_bound), 추가 영역 개수 정보 (number_luminance_upper_bound_diff) 및/또는 추가 영역 차이 정보 (luminance_upper_bound_diff[i])를 포함할 수 있다.
본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터 (dynamic_range_transformation_metadata())는 임의 EOTF 정보 (private_EOTF), EOTF 계수 개수 정보 (number_of_coeff), EOTF 계수 정보 (transfer_curve_coeff[i]), 클리핑 플래그 정보 (clipping_flag), 선형 매핑 플래그 정보 (linear_mapping_flag), 클리핑 최대 밝기 범위 정보 (luma_clipping_upper_bound), 클리핑 최소 밝기 범위 정보 (luma_clipping_lower_bound), 필수 최대 밝기 디지털 값 (luma_upper_value), 필수 최소 밝기 디지털 값 (luma_lower_value), 핵심 영역 변환 곡선 타입 정보 (mid_DR_transformation_curve_type), 핵심 영역 변환 곡선 세부 정보 (mid_DR_transformation_curve()), 핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage), 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type), 상위 영역 변환 곡선 세부 정보 (upper_DR_transformation_curve()), 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage), 하위 영역 변환 곡선 타입 정보 (lower_DR_transformation_curve_type), 하위 영역 변환 곡선 세부 정보 (lower_DR_transformation_curve()), 추가 영역 차이 디지털 값 (luma_upper_value_diff[i]), 변경 상위 영역 변환 곡선 타입 정보 (upper_DR_transformation_curve_type[i]), 변경 상위 영역 변환 곡선 세부 정보 (upper_DR_transformation_curve()), 변경 상위 밝기 범위 영역 비율 정보 (upper_DR_percentage[i]) 및/또는 변경 핵심 밝기 범위 영역 비율 정보 (mid_DR_percentage[i])를 더 포함할 수 있다.
본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터 (dynamic_range_transformation_metadata())에 포함된 정보들에 대한 상세한 설명은 전술한 SEI 메시지 (Supplemental Enhancement Information message)에 포함되어 전송되는 광역 밝기 범위 메타데이터 (Dynamic range transformation info(payloadSize)) 부분에 대한 설명으로 대체한다.
본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터 (dynamic_range_transformation_metadata())는 EOTF 타입 정보 (EOTF_type) 및/또는 EOTF 부가 정보 (EOTF_additional_info)를 더 포함할 수 있다. EOTF 타입 정보 (EOTF_type)는 HDR 컨텐츠의 최적 화질을 위해 컨텐츠 제작자가 사용한 EOTF의 종류를 나타낼 수 있다. 복수의 EOTF 관련 표준이 제정되거나 컨텐츠 제작자가 임의의 EOTF를 정의하여 사용하는 경우에도 수신측은 EOTF 타입 정보를 이용하여 사용된 EOTF의 종류를 식별할 수 있다. EOTF 부가 정보 (EOTF_additional_info)는 상술한 EOTF 타입 정보에 따라 추가적인 정보가 전달될 필요가 있는 경우 사용된 EOTF에 대한 추가적인 정보를 전달하기 위해 사용된다. 주어진 EOTF 타입 정보에 대하여, 다양한 조건에서 복수의 EOTF 함수의 계수를 전달할 필요가 있는 경우 송신측은 EOTF 부가 정보 (EOTF_additional_info)를 이용하여 각 계수들에 대한 정보를 제공할 수 있다. 예를 들어, 컨텐츠의 다양한 최대 밝기 조건에 따라 적합한 EOTF 함수의 계수가 달라지는 경우에 각 최대 밝기 조건에 따른 계수가 모두 전달되어야 한다. 이 경우 상술한 EOTF 부가 정보 내에 컨텐츠의 최대 밝기 조건의 개수를 지정하는 필드를 별도로 정의하고 각 최대 밝기 조건에 대해 목표 최대 밝기 정보 (EOTF_target_max_brightness) 및 EOTF 함수의 계수들에 대한 정보 (EOTF_coefficient[i])를 나타내는 방법으로 상술한 EOTF 부가 정보를 이용할 수 있다.
본 발명의 일 실시예에 따르면 하나의 이벤트에 대해 복수의 광역 밝기 범위 메타데이터가 존재할 수 있다. 즉, 초고화질 방송 컨텐츠 하나에 일관되게 광역 밝기 범위 메타데이터가 적용되는 것이 아니라 각 장면에 따라 다른 메타데이터가 적용되고 다른 방법에 의해 변환될 수 있다. 이 경우, 본 발명의 일 실시예에 따른 초고화질 방송 신호 수신 장치의 디스플레이에서 초고화질 방송 컨텐츠가 수용 가능한지를 판단할 필요가 있다. 이를 위해, 초고화질 방송 컨텐츠의 밝기 범위 정보 및 수신장치의 디스플레이를 구분하는데 필요한 기준 정보를 본 발명의 일 실시예에 따른 광역 밝기 범위 메타데이터를 이용하여 전송할 수 있다.
도 35는 본 발명의 일 실시예에 따른 초고화질 프로그램 정보 디스크립터 (UHD_program_info_descriptor())를 나타낸 도면이다.
본 발명의 일 실시예에 따른 초고화질 프로그램 정보 디스크립터 (UHD_program_info_descriptor())는 descriptor_tag 필드, descriptor_length 필드 및/또는 UHD_service_type 필드를 포함할 수 있다.
descriptor_tag 필드는 당해 디스크립터가 밝기 범위 변환 정보 디스크립터임을 식별한다.
descriptor_length 필드는 당해 디스크립터의 길이를 나타낸다.
UHD_service_type 필드는 초고화질 서비스 (UHD service)의 종류에 대한 정보를 제공함으로써 다양한 초고화질 서비스를 제공할 수 있다. 예를 들어, 초고화질 서비스의 종류에는 UHD1 (4K) 및 UHD2 (8K)가 있을 수 있다. 또한 초고화질 서비스의 종류는 화질 (quaility)에 따라 구분될 수 있고, 사용자에 의해 임의로 지정될 수 있다.
도 36은 본 발명의 일 실시예에 따른 초고화질 프로그램 정보 디스크립터 (UHD_program_info_descriptor())에 포함된 UHD_service_type 필드를 나타낸 도면이다.
본 발명의 일 실시예에 따른 UHD_service_type의 필드 값이 0000이면 UHD1 서비스임을 나타내고, 0001이면 UHD2 서비스임을 나타내고, 1000-1111이면 사용자에 의해 지정된 특정 서비스임을 나타낼 수 있다. 예를 들어, 사용자는 UHD_service_type을 1001 (color enhanced UHD1 (4K) service)로 지정하여 색감 향상 (color enhancement)이 사용됨을 나타낼 수 있다.
본 발명의 일 실시예에 따르면 UHD_service_type을 1001 (clor enhanced UHD1 (4K) service)로 지정하여 메타데이터를 이용하여 디스플레이 환경의 조정이 가능함을 나타낼 수 있다. UHD_service_type이 0000 (UHD1 service)인 경우 EIT 내에 밝기 범위 변환 정보 디스크립터 (dynamic_range_transformation_info_descriptor())의 존재 여부를 확인함으로써 메타데이터를 이용하여 수신 장치의 디스플레이에 적합하도록 초고화질 방송 컨텐츠를 변환하는 것이 가능한지 여부가 판단될 수 있다.
본 발명의 일 실시예에 따르면 밝기 범위 변환 정보 디스크립터 (dynamic_range_transformation_info_descriptor())를 이용하여 컨텐츠 공급자가 재생되기 원하는 컨텐츠의 밝기 범위가 시청자의 디스플레이에서 표현 가능한지가 판단될 수 있다. 이를 이용하여, 현재 또는 미래 시점에 재생되는 컨텐츠에 대해서도 광역 밝기 범위 메타데이터의 사용 여부가 미리 판단될 수 있으며, 예약 녹화 등의 상황을 위해 수신기가 미리 세팅될 수 있다.
도 37은 본 발명의 일 실시예에 따른 TVCT (Terrestrial Virtual Channel Table)을 나타낸 도면이다.
본 발명의 일 실시예에 따른 TVCT (Terrestrial Virtual Channel Table)는 table_id 필드, section_syntax_indicator 필드, private_indicator 필드, section_length 필드, transport_stream_id 필드, version_number 필드, current_next_indicator 필드, section_number 필드, last_section_number 필드, protocop_version 필드, num_channels_in_section 필드, short_name 필드, major_channel_number 필드, minor_channel_number 필드, modulation mode 필드, carrier_frequency 필드, channel_TSID 필드, program_number 필드, ETM_location 필드, access_controlled 필드, hidden 필드, hide_guide 필드, service_type 필드, source_id 필드, descriptors_length 필드 및/또는 descriptor() 를 포함할 수 있다.
table_id 필드는 테이블을 식별한다. 도 30에 도시된 테이블은 TVCT이므로 table_id의 값은 0x08이다.
section_syntax_indicator 필드는 MPEG-2 private_section table의 long 형태를 나타내기 위해 1로 세팅되는 1비트 필드이다. (This 1-bit field shall be set to '1' to always indicate the "long" form of the MPEG-2 private_section table.)
private_indicator 필드는 1로 세팅되는 1비트 필드이다. (This 1-bit field shall be set to '1'.)
section_length 필드는 이 필드 뒤에 있는 테이블 섹션의 길이를 바이트 수로 나타낸다. (This is a 12-bit field, the first two bits of which shall be "00". It specifies the number of bytes of the section, starting immediately following the section_length field and including the CRC. The section_length shall not exceed 1 021 so that the entire section has a maximum length of 1 024 bytes.)
transport_stream_id 필드는 테이블 내에 있는 MPEG-2 전송 스트림(Transport Strema: TS)의 식별자를 나타낸다. (To distinguish each transport stream within a single network (terrestrial, cable or satellite) from another, MPEG-2 established the use of a 16-bit (ranging from 0 to 65535) transport_stream_identifier, which is also called a TSID.)
version_number 필드는 테이블의 버전 번호를 나타내는 5비트 필드이다. (This 5-bit field is the version number of the PSIP_section. The version_number shall be incremented by 1 modulo 32 when a change in the information carried within the PSIP_section occurs. When the current_next_indicator is set to '0', then the version_number shall be that of the next applicable PSIP_section with the same table_id, table_id_extension, and section_number.)
current_next_indicator 필드는 1비트 필드로서, 이 테이블이 현재 적용 가능한지 또는 다음에 적용 가능한지를 나타낸다. (A 1-bit field, which when set to '1' indicates that the PSIP_section sent is currently applicable. When the current_next_indicator is set to '1', then the version_number shall be that of the currently applicable PSIP_section. When the bit is set to '0', it indicates that the PSIP_section sent is not yet applicable and shall be the next PSIP_section with the same section_number, table_id_extension, and table_id to become valid.)
section_number 필드는 섹션의 번호를 나타낸다. (This 8-bit field gives the number of the PSIP_section. The section_number of the first section in a PSIP table shall be 0x00. The section_number shall be incremented by 1 with each additional section in PSIP table. The scope of the section_number shall be defined by the table_id and table_id_extension. That is, for each PSIP table and value of the table_id_extension field, there is the potential for the full range of section_number values.)
last_section_number 필드는 마지막 섹션의 번호를 식별한다. (This 8-bit field specifies the number of the last section (that is, the section with the highest section_number) of the PSIP table of which this section is a part. Its scope is the same as for the section_number field.)
protocop_version 필드는 현재 프로토콜에서 정의된 파라미터와 다른 파라미터를 전송하는 현재 테이블 타입을 추후에 허용하기 위한 기능을 가지는 필드이다. (An 8-bit unsigned integer field whose function is to allow, in the future, this table type to carry parameters that may be structured differently than those defined in the current protocol. At present, the only valid value for protocol_version is zero. Non-zero values of protocol_version may be used by a future version of this standard to indicate structurally different tables.)
num_channels_in_section 필드는 가상 채널 해상도의 개수를 나타낸다. (The num_channels_in_section field in ATSC Cable Virtual Channel table CVCT table sections is an eight-bit field that indicates the number of virtual channel definitions to follow in the table section.)
short_name 필드는 가상 채널을 위한 short name을 나타내는 112비트 필드이다. (The short_name field is a 112-bit field in ATSC CVCT table sections that gives the short_name for the virtual channel. Each letter of the short_name is formatted as a 16-bit Unicode character, with the high order byte transmitted first. So, short_name for TVCT and CVCT entries is seven Unicode characters, which short_name for SVCT entries is eight Unicode characters. If the display name is less than the number of permitted characters, 0/0x00 is appended to the end until the alloted number of bits has been reached.)
major_channel_number 필드는 가상채널과 관련된 메이저 채널의 수를 나타낸다. (A 10-bit number that represents the "major" channel number associated with the virtual channel being defined in this iteration of the "for" loop. Each virtual channel shall be associated with a major and a minor channel number. The major channel number, along with the minor channel number, act as the user's reference number for the virtual channel. The major_channel_number shall be between 1 and 99. The value of major_channel_number shall be set such that in no case is a major_channel_number/ minor_channel_number pair duplicated within the TVCT.)
minor_channel_number 필드는 가상채널과 관련된 마이너 채널의 수를 나타낸다. (A 10-bit number in the range 0 to 999 that represents the "minor" or "sub"- channel number. This field, together with major_channel_number, performs as a two-part channel number, where minor_channel_number represents the second or right-hand part of the number. When the service_type is analog television, minor_channel_number shall be set to 0.)
modulation mode 필드는 가상 채널의 전송 캐리어에 대한 변조 방식을 나타낸다. (The modulation_mode is an eight-bit field in a virtual channel entry tells receivers the modulation used to transmit individual channels.)
carrier_frequency 필드는 전송 가상 채널에 의해 사용되는 캐리어 주파수 정보를 전송한다. (The carrier frequency is a 32-bit field that transmits the carrier frequency used by the transport carrying the virtual channel.)
channel_TSID 필드는 가상 채널과 관련된 MPEG-2 프로그램을 전송하는 전송 스트림(Transport Stream: TS)에 대한 MPEG-2 Transport Stream ID를 나타낸다. (The channel_TSID is a 16-bit unsigned integer field that gives the transport_stream_id of the channel that carries (or for inactive channels, will carry) the virtual channel.)
program_number 필드는 TS 내의 각 프로그램 서비스 또는 가상 채널을 식별한다. (The program_number is a 16-bit unsigned integer that uniquely identifies each program service (or virtual channel) present in a transport stream.)
ETM_location 필드는 채널, 이벤트 또는 데이터 이벤트를 위한 확장된 텍스트 메시지의 존재 여부를 나타낸다. (The ETM_location field denotes whether there is an extended text message for the channel (Channel Extended Text table or CETT), event (Event Extended Text table) or data event (Data Extended Text table).)
access_controlled 필드는 해당 가상 채널과 연관된 이벤트가 제어될 수 있는지 여부를 나타낸다. (When access_controlled is set to '1', means that events associated with this virtual channel may be access controlled. When set to '0', access to event is not controlled.)
hidden 필드는 해당 채널이 가상 채널 숫자의 direct entry(또는 필드, 속성, 개체)에 의해 접근될 수 있는지 여부를 의미한다. (When hidden is set to '1', means the channel cannot be accessed by direct entry of the virtual channel number. When set to '0', virtual can be accessed by direct entry.)
hide_guide 필드는 해당 채널이 가상 채널 숫자의 direct entry(또는 필드, 속성, 개체)에 의해 접근될 수 있는지 여부를 의미한다. (When hide_guide is set to '1', means the channel cannot be accessed by direct entry of the virtual channel number. When set to '0', virtual can be accessed by direct entry.)
service_type 필드는 가상 채널에서 세팅된 서비스 타입을 식별한다. (The service_type is a 6-bit enumerated field that identifies the type of service set in the virtual channel.) UHD 서비스를 위한 일 실시 예로서, service type은 parameterized service(0x07), extended parameterized service(0x09) 또는 new DTV service(0x10)로 지정될 수 있다. 상술한 서비스 명칭 및 값(value)는 일 실시 예이며 다른 명칭 또는 값으로 설정될 수도 있다.
source_id 필드는 16비트의 부호가 정해지지 않은 정수로서, 가상 채널과 연관된 프로그래밍 소스를 나타낸다. (A 16-bit unsigned integer number that identifies the programming source associated with the virtual channel. In this context, a source is one specific source of video, text, data, or audio programming. Source ID value zero is reserved. Source ID values in the range 0x0001 to 0x0FFF shall be unique within the Transport Stream that carries the VCT, while values 0x1000 to 0xFFFF shall be unique at the regional level. Values for source_ids 0x1000 and above shall be issued and administered by a Registration Authority designated by the ATSC.)
descriptors_length 필드는 다음의 디스크립터 필드의 바이트의 길이를 전송한다. (The descriptors_length is a 10-bit unsigned integer field that signals the length in bytes of the descriptor field to follow. If there are no descriptors present, zero would be appropriate.)
descriptor() 필드는 테이블 내에 위치하는 descriptor loop이다. descriptor loop는 추가적인 descriptor를 포함할 수 있다.
도 38은 본 발명의 일 실시예에 따른 초고화질 방송 서비스임을 식별할 수 있는 디스크립터를 나타낸 도면이다.
본 발명의 일 실시예에 따른 TVCT에서 초고화질급 (UHD급)비디오가 서비스되는지 여부는 후술할 방법에 의해 시그널링 될 수 있다.
service_type이 0x07인 경우, 비디오 서비스가 기술될 수 있으며 component list descriptor를 통해 전송되는 stream_info_details()에 포함된 정보를 통해 해당 스트림이 수신 장치에서 디코딩 및 재생이 가능한지 여부가 판단될 수 있다. 또한, UHD descriptor 및/또는 service location descriptor를 통해 초고화질 서비스에 대한 정보가 제공될 수 있다.
service_type이 0x09인 경우, parameterized service descriptor가 추가적으로 이용될 수 있고, 이를 이용하여 초고화질 서비스에 대한 구체적인 정보가 제공될 수 있다. 또한, component list descriptor 및/또는 service location descriptor를 통해 초고화질 서비스에 대한 정보가 제공될 수 있다.
service_type이 0x10인 경우, UHD descriptor 및/또는 service location descriptor를 통해 초고화질 서비스에 대한 정보가 제공될 수 있다.
도 39는 본 발명의 다른 일 실시예에 따른 비디오 데이터 처리 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따른 비디오 데이터 처리 방법은 비디오 데이터를 디코딩하는 단계 (S39010) 및/또는 인터페이스를 통해 상기 디코딩된 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 정보를 싱크 디바이스로 전송하는 단계 (S39020)를 포함할 수 있다. 여기서, 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함할 수 있다. 여기서, 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함할 수 있다. 다이나믹 레인지 마스터링 정보에 대한 상세한 설명은 도 11, 12, 14에서 전술하였다.
본 발명의 다른 일 실시예에 따르면, 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 최대 밝기를 나타내는 정보 및/또는 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함할 수 있다. 여기서, 마스터링 디스플레이의 최대 밝기를 나타내는 정보는 Orig_white_luminance_level 정보를 나타낼 수 있고, 마스터링 디스플레이의 최소 밝기를 나타내는 정보는 Orig_black_luminance_level 정보를 나타낼 수 있다. 이에 대한 상세한 설명은 도 11, 12, 14에서 전술하였다.
본 발명의 다른 일 실시예에 따르면, 다이나믹 레인지 마스터링 정보는 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함할 수 있다. 여기서, 마스터링 디스플레이의 삼원색의 색도 좌표 정보 및/또는 마스터링 디스플레이의 화이트 색상의 색도 좌표 정보는 Orig_color_gamut, Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x 및/또는 White-y 필드를 이용하여 시그널링할 수 있다. 이에 대한 상세한 설명은 도 11, 12, 14에서 전술하였다.
본 발명의 다른 일 실시예에 따르면, 다이나믹 레인지 마스터링 정보는 EOTF 타입 정보에 따른 EOTF에 대한 부가 정보를 포함할 수 있다. 여기서, EOTF에 대한 부가 정보는 EOTF_additional_info 및/또는 EOTF_Coefficient를 포함할 수 있다. 이에 대한 상세한 설명은 도 11, 14에서 전술하였다.
도 40은 본 발명의 일 실시예에 따른 비디오 데이터 처리 장치의 구성을 나타낸 도면이다.
본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (40030)는 수신부 (40010) 및/또는 재생부 (40020)를 포함할 수 있다.
수신부는 인터페이스를 통해 소스 디바이스로부터 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 정보를 수신할 수 있다. 여기서, 상기 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함할 수 있다.
재생부는 상기 수신한 비디오 데이터를 재생할 수 있다.
본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (40030)의 구성은 전술한 비디오 데이터 처리 방법 (도 1)의 대응되는 각 단계를 수행할 수 있다. 또한, 각 구성은 하드웨어에 해당하거나 하드웨어에 결합되어 처리될 수 있다.
도 41은 본 발명의 다른 일 실시예에 따른 비디오 데이터 처리 장치의 구성을 나타낸 도면이다.
본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (41030)는 디보더 (41010) 및/또는 전송부 (41020)를 포함할 수 있다.
디코더는 비디오 데이터를 디코딩할 수 있다.
전송부는 인터페이스를 통해 상기 디코딩된 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 정보를 싱크 디바이스로 전송할 수 있다. 여기서, 상기 다이나믹 레인지 마스터링 정보는 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함할 수 있다.
본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (41030)의 구성은 전술한 비디오 데이터 처리 방법 (도 39)의 대응되는 각 단계를 수행할 수 있다. 또한, 각 구성은 하드웨어에 해당하거나 하드웨어에 결합되어 처리될 수 있다.
본 발명의 실시예들에 따른 모듈, 유닛 또는 블락은 메모리(또는 저장 유닛)에 저장된 연속된 수행과정들을 실행하는 프로세서/하드웨어일 수 있다. 전술한 실시예에 기술된 각 단계 또는 방법들은 하드웨어/프로세서들에 의해 수행될 수 있다. 또한, 본 발명이 제시하는 방법들은 코드로서 실행될 수 있다. 이 코드는 프로세서가 읽을 수 있는 저장매체에 쓰여질 수 있고, 따라서 본 발명의 실시예들에 따른 장치(apparatus)가 제공하는 프로세서에 의해 읽혀질 수 있다.
설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시 예들을 병합하여 새로운 실시 예를 구현하도록 설계하는 것도 가능하다. 그리고, 당업자의 필요에 따라, 이전에 설명된 실시 예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.
본 발명에 따른 장치 및 방법은 상술한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상술한 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
한편, 본 발명의 영상 처리 방법은 네트워크 디바이스에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.
그리고, 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양 발명의 설명은 보충적으로 적용될 수가 있다.
발명의 실시를 위한 형태
발명의 실시를 위한 형태는 전술한 바와 같이, 발명의 실시를 위한 최선의 형태로 상술되었다.
본 발명은 방송 산업 전반에서 이용 가능하다.

Claims (15)

  1. 인터페이스를 통해 소스 디바이스로부터 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 인포프레임 (InfoFrame)을 수신하는 단계로서,
    상기 소스 디바이스는 비디오 스트림을 디코딩하여 비디오 데이터를 생성하는 디바이스를 나타내고, 싱크 디바이스는 디코딩된 상기 비디오 데이터를 수신하는 디바이스를 나타내고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 다이나믹 레인지 마스터링 인포프레임이 어떤 종류의 인포프레임인지를 식별하는 인포프레임 타입 코드를 포함하고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함하고,
    상기 다이나믹 레인지 마스터링 인포프레임은 마스터링 디스플레이 (mastering display)의 최대 밝기를 나타내는 정보 및 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함하고, 상기 마스터링 디스플레이는 상기 비디오 데이터를 마스터링할 때 사용되는 디스플레이를 나타내고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 비디오 데이터의 최대 밝기를 나타내는 정보를 포함하고;
    상기 수신한 비디오 데이터를 재생하는 단계;
    를 포함하는 비디오 데이터 처리 방법.
  2. 제 1 항에 있어서, 상기 비디오 데이터 처리 방법은
    상기 인터페이스를 통해 상기 싱크 디바이스의 성능을 나타내는 EDID (extended display identification data)를 상기 소스 디바이스로 전송하는 단계를 더 포함하고,
    상기 EDID는 상기 싱크 디바이스가 지원하는 EOTF를 식별하는 EOTF 정보를 포함하는 비디오 데이터 처리 방법.
  3. 제 1 항에 있어서,
    상기 다이나믹 레인지 마스터링 인포프레임은 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함하는 비디오 데이터 처리 방법.
  4. 제 1 항에 있어서,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 EOTF 타입 정보에 따른 EOTF에 대한 부가 정보를 포함하는 비디오 데이터 처리 방법.
  5. 인터페이스를 통해 소스 디바이스로부터 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 인포프레임 (InfoFrame)을 수신하는 수신부로서,
    상기 소스 디바이스는 비디오 스트림을 디코딩하여 비디오 데이터를 생성하는 디바이스를 나타내고, 싱크 디바이스는 디코딩된 상기 비디오 데이터를 수신하는 디바이스를 나타내고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 다이나믹 레인지 마스터링 인포프레임이 어떤 종류의 인포프레임인지를 식별하는 인포프레임 타입 코드를 포함하고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함하고,
    상기 다이나믹 레인지 마스터링 인포프레임은 마스터링 디스플레이 (mastering display)의 최대 밝기를 나타내는 정보 및 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함하고, 상기 마스터링 디스플레이는 상기 비디오 데이터를 마스터링할 때 사용되는 디스플레이를 나타내고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 비디오 데이터의 최대 밝기를 나타내는 정보를 포함하고;
    상기 수신한 비디오 데이터를 재생하는 재생부;
    를 포함하는 비디오 데이터 처리 장치.
  6. 제 5 항에 있어서, 상기 비디오 데이터 처리 장치는
    상기 인터페이스를 통해 상기 싱크 디바이스의 성능을 나타내는 EDID (extended display identification data)를 상기 소스 디바이스로 전송하는 전송부를 더 포함하고,
    상기 EDID는 상기 싱크 디바이스가 지원하는 EOTF를 식별하는 EOTF 정보를 포함하는 비디오 데이터 처리 장치.
  7. 제 5 항에 있어서,
    상기 다이나믹 레인지 마스터링 인포프레임은 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함하는 비디오 데이터 처리 장치.
  8. 제 5 항에 있어서,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 EOTF 타입 정보에 따른 EOTF에 대한 부가 정보를 포함하는 비디오 데이터 처리 장치.
  9. 비디오 데이터를 디코딩하는 단계; 및
    인터페이스를 통해 상기 디코딩된 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 인포프레임 (InfoFrame)을 싱크 디바이스로 전송하는 단계로서,
    소스 디바이스는 비디오 스트림을 디코딩하여 비디오 데이터를 생성하는 디바이스를 나타내고, 상기 싱크 디바이스는 디코딩된 상기 비디오 데이터를 수신하는 디바이스를 나타내고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 다이나믹 레인지 마스터링 인포프레임이 어떤 종류의 인포프레임인지를 식별하는 인포프레임 타입 코드를 포함하고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함하고,
    상기 다이나믹 레인지 마스터링 인포프레임은 마스터링 디스플레이 (mastering display)의 최대 밝기를 나타내는 정보 및 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함하고, 상기 마스터링 디스플레이는 상기 비디오 데이터를 마스터링할 때 사용되는 디스플레이를 나타내고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 비디오 데이터의 최대 밝기를 나타내는 정보를 포함하고;
    를 포함하는 비디오 데이터 처리 방법.
  10. 제 9 항에 있어서, 상기 비디오 데이터 처리 방법은
    상기 인터페이스를 통해 상기 싱크 디바이스의 성능을 나타내는 EDID (extended display identification data)를 상기 싱크 디바이스로부터 수신하는 단계를 더 포함하고,
    상기 EDID는 상기 싱크 디바이스가 지원하는 EOTF를 식별하는 EOTF 정보를 포함하는 비디오 데이터 처리 방법.
  11. 제 9 항에 있어서,
    상기 다이나믹 레인지 마스터링 인포프레임은 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함하는 비디오 데이터 처리 방법.
  12. 제 9 항에 있어서,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 EOTF 타입 정보에 따른 EOTF에 대한 부가 정보를 포함하는 비디오 데이터 처리 방법.
  13. 비디오 데이터를 디코딩하는 디코더; 및
    인터페이스를 통해 상기 디코딩된 비디오 데이터 및 상기 비디오 데이터의 다이나믹 레인지 관련 정보를 포함하는 다이나믹 레인지 마스터링 인포프레임 (InfoFrame)을 싱크 디바이스로 전송하는 전송부로서,
    소스 디바이스는 비디오 스트림을 디코딩하여 비디오 데이터를 생성하는 디바이스를 나타내고, 상기 싱크 디바이스는 디코딩된 상기 비디오 데이터를 수신하는 디바이스를 나타내고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 다이나믹 레인지 마스터링 인포프레임이 어떤 종류의 인포프레임인지를 식별하는 인포프레임 타입 코드를 포함하고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 비디오 데이터에 사용된 EOTF (Electro Optical Transfer Function)를 식별하는 EOTF 타입 정보를 포함하고,
    상기 다이나믹 레인지 마스터링 인포프레임은 마스터링 디스플레이 (mastering display)의 최대 밝기를 나타내는 정보 및 마스터링 디스플레이의 최소 밝기를 나타내는 정보를 포함하고, 상기 마스터링 디스플레이는 상기 비디오 데이터를 마스터링할 때 사용되는 디스플레이를 나타내고,
    상기 다이나믹 레인지 마스터링 인포프레임은 상기 비디오 데이터의 최대 밝기를 나타내는 정보를 포함하고;
    를 포함하는 비디오 데이터 처리 장치.
  14. 제 13 항에 있어서, 상기 비디오 데이터 처리 장치는
    상기 인터페이스를 통해 상기 싱크 디바이스의 성능을 나타내는 EDID (extended display identification data)를 상기 싱크 디바이스로부터 수신하는 수신부를 더 포함하고,
    상기 EDID는 상기 싱크 디바이스가 지원하는 EOTF를 식별하는 EOTF 정보를 포함하는 비디오 데이터 처리 장치.
  15. 제 13 항에 있어서,
    상기 다이나믹 레인지 마스터링 인포프레임은 마스터링 디스플레이의 삼원색 및 화이트 색상의 색도 좌표 정보를 포함하는 비디오 데이터 처리 장치.
KR1020167006602A 2014-05-20 2015-04-30 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치 KR101785671B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201462000539P 2014-05-20 2014-05-20
US62/000,539 2014-05-20
PCT/KR2015/004401 WO2015178598A1 (ko) 2014-05-20 2015-04-30 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20160052570A KR20160052570A (ko) 2016-05-12
KR101785671B1 true KR101785671B1 (ko) 2017-11-06

Family

ID=53268578

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167006602A KR101785671B1 (ko) 2014-05-20 2015-04-30 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치

Country Status (6)

Country Link
US (2) US9661294B2 (ko)
EP (1) EP2947560B1 (ko)
JP (1) JP6571073B2 (ko)
KR (1) KR101785671B1 (ko)
TW (1) TWI577176B (ko)
WO (1) WO2015178598A1 (ko)

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106464967B (zh) 2014-05-15 2019-11-22 索尼公司 通信装置、通信方法和计算机可读存储介质
KR101785671B1 (ko) * 2014-05-20 2017-11-06 엘지전자 주식회사 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치
CN111901599A (zh) * 2014-06-27 2020-11-06 松下知识产权经营株式会社 再现装置
WO2016039169A1 (ja) * 2014-09-12 2016-03-17 ソニー株式会社 再生装置、再生方法、情報処理装置、情報処理方法、プログラム、および記録媒体
WO2016092759A1 (ja) 2014-12-09 2016-06-16 パナソニックＩｐマネジメント株式会社 送信方法、受信方法、送信装置および受信装置
JP6741975B2 (ja) * 2014-12-09 2020-08-19 パナソニックＩｐマネジメント株式会社 送信方法および送信装置
US10735755B2 (en) * 2015-04-21 2020-08-04 Arris Enterprises Llc Adaptive perceptual mapping and signaling for video coding
WO2016182307A1 (ko) * 2015-05-11 2016-11-17 삼성전자 주식회사 메타데이터에 기초한 영상 처리 장치 및 영상 처리 방법
JP6820507B2 (ja) * 2015-09-14 2021-01-27 パナソニックＩｐマネジメント株式会社 映像受信方法、映像送信方法、映像受信装置及び映像送信装置
US11336928B1 (en) * 2015-09-24 2022-05-17 Amazon Technologies, Inc. Predictive caching of identical starting sequences in content
JP6645869B2 (ja) * 2015-09-29 2020-02-14 マクセル株式会社 放送システム
JP6441247B2 (ja) * 2015-10-01 2018-12-19 マクセル株式会社 表示制御方法
JP6616212B2 (ja) * 2015-09-28 2019-12-04 マクセル株式会社 表示制御方法
JP6645871B2 (ja) * 2015-09-30 2020-02-14 マクセル株式会社 放送システム
WO2017051808A1 (ja) * 2015-09-25 2017-03-30 日立マクセル株式会社 放送受信装置
CN113660520A (zh) 2015-09-25 2021-11-16 麦克赛尔株式会社 显示装置和显示控制方法
US10587852B2 (en) * 2015-10-06 2020-03-10 Lg Electronics Inc. Broadcast signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method
WO2017080927A1 (en) * 2015-11-09 2017-05-18 Thomson Licensing Method and device for adapting the video content decoded from elementary streams to the characteristics of a display
JP6710970B2 (ja) 2015-12-28 2020-06-17 ソニー株式会社 送信装置および送信方法
WO2017135673A1 (ko) * 2016-02-01 2017-08-10 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
CA3009777C (en) 2016-02-09 2024-04-16 Sony Corporation Transmission device, transmission method, reception device and reception method
CN108701471A (zh) * 2016-02-26 2018-10-23 索尼公司 信息处理装置、显示装置、信息记录介质、信息处理方法、以及程序
JP6824055B2 (ja) * 2016-03-02 2021-02-03 シャープ株式会社 受信装置および放送システム
WO2017150095A1 (ja) * 2016-03-02 2017-09-08 シャープ株式会社 受信装置および放送システム
JP6161222B1 (ja) * 2016-03-17 2017-07-12 シャープ株式会社 受信装置および放送システム
JP6253036B2 (ja) * 2016-03-31 2017-12-27 シャープ株式会社 コンテンツ処理装置、テレビジョン受信装置、コンテンツ処理装置における情報処理方法、プログラム
PL3745390T3 (pl) 2016-05-27 2024-03-04 Dolby Laboratories Licensing Corporation Przechodzenie pomiędzy priorytetem wideo a priorytetem grafiki
JP2018006877A (ja) * 2016-06-28 2018-01-11 シャープ株式会社 映像伝送装置、表示装置、映像表示システム、映像配信装置、映像配信システム、映像送受信システム、プログラム、記録媒体、および映像伝送方法
TWI658657B (zh) * 2016-07-22 2019-05-01 宏正自動科技股份有限公司 快速安裝視訊牆之視訊轉接頭及其方法
GB2554990B (en) * 2016-08-30 2019-09-18 Canon Kk Image processing apparatus
US10341732B2 (en) 2016-09-16 2019-07-02 Centurylink Intellectual Property Llc Video quality optimization based on display capabilities
EP3522527B1 (en) * 2016-09-29 2023-09-06 Panasonic Intellectual Property Management Co., Ltd. Reproduction method, creation method, reproduction device, and creation device
US10382735B2 (en) * 2016-10-04 2019-08-13 Dolby Laboratories Licensing Corporation Targeted display color volume specification via color remapping information (CRI) messaging
US10218952B2 (en) 2016-11-28 2019-02-26 Microsoft Technology Licensing, Llc Architecture for rendering high dynamic range video on enhanced dynamic range display devices
US10104334B2 (en) 2017-01-27 2018-10-16 Microsoft Technology Licensing, Llc Content-adaptive adjustment of display device brightness levels when rendering high dynamic range content
US10176561B2 (en) 2017-01-27 2019-01-08 Microsoft Technology Licensing, Llc Content-adaptive adjustments to tone mapping operations for high dynamic range content
JP2017143546A (ja) * 2017-03-21 2017-08-17 ソニー株式会社 再生装置、記録媒体、表示装置、および情報処理方法
US11023417B2 (en) 2017-05-30 2021-06-01 Home Box Office, Inc. Video content graph including enhanced metadata
US10212456B2 (en) * 2017-06-02 2019-02-19 Apple Inc. Deblocking filter for high dynamic range (HDR) video
KR102553764B1 (ko) * 2017-07-13 2023-07-10 삼성전자주식회사 전자 장치, 디스플레이 장치 및 그 제어 방법
JP2019047223A (ja) * 2017-08-30 2019-03-22 シャープ株式会社 変換装置、変換方法、表示装置、プログラム、および記録媒体
US11284134B2 (en) 2018-08-08 2022-03-22 Comcast Cable Communications, Llc Media content enhancement based on content importance
US10957024B2 (en) 2018-10-30 2021-03-23 Microsoft Technology Licensing, Llc Real time tone mapping of high dynamic range image data at time of playback on a lower dynamic range display
US11404025B2 (en) 2019-04-10 2022-08-02 Mediatek Inc. Video processing system for performing artificial intelligence assisted picture quality enhancement and associated video processing method
KR20210001762A (ko) * 2019-06-28 2021-01-06 삼성전자주식회사 영상을 처리하는 전자 장치 및 그 영상 처리 방법
US11533460B2 (en) * 2019-09-11 2022-12-20 Nbc Universal Media, Llc High dynamic range and wide colour gamut comfort measurement and feedback
CN113259613B (zh) * 2020-02-07 2022-12-06 广东博华超高清创新中心有限公司 一种改进hdmi显示数据流压缩互通互联的方法
JP2021153236A (ja) * 2020-03-24 2021-09-30 キヤノン株式会社 表示装置および表示方法
CN112911086B (zh) * 2021-01-29 2023-10-10 卡莱特云科技股份有限公司 一种批量视频处理设备的分类控制方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007139534A1 (en) 2006-05-25 2007-12-06 Thomson Licensing Method and system for weighted encoding
US20110157245A1 (en) * 2005-11-08 2011-06-30 Young Garrett J Apparatus, methods, and systems for multi-primary display or projection
WO2013046096A1 (en) * 2011-09-27 2013-04-04 Koninklijke Philips Electronics N.V. Apparatus and method for dynamic range transforming of images

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2103317A1 (de) 2008-03-20 2009-09-23 Bayer MaterialScience AG Medizinische Geräte mit hydrophilen Beschichtungen
US8275232B2 (en) * 2008-06-23 2012-09-25 Mediatek Inc. Apparatus and method of transmitting / receiving multimedia playback enhancement information, VBI data, or auxiliary data through digital transmission means specified for multimedia data transmission
TW201021018A (en) * 2008-11-21 2010-06-01 Chunghwa Picture Tubes Ltd Color correction method and related device for liquid crystal display
CN102422258A (zh) * 2009-05-06 2012-04-18 汤姆森许可贸易公司 用于传送根据显示设备能力而优化的多媒体内容的方法和系统
JP5833233B2 (ja) * 2011-05-27 2015-12-16 ドルビー ラボラトリーズ ライセンシング コーポレイション 様々なレベルのメタデータを含む色管理を制御するスケーラブルシステム
KR101869370B1 (ko) * 2012-01-02 2018-07-20 한국전자통신연구원 디지털 방송 시스템에서 초고화질 방송 송수신 방법 및 장치
US9842385B2 (en) * 2012-09-12 2017-12-12 Dolby Laboratories Licensing Corporation Display management for images with enhanced dynamic range
RU2667153C2 (ru) * 2014-02-07 2018-09-17 Сони Корпорейшн Устройство передачи, способ передачи, устройство приема, способ приема, устройство отображения и способ отображения
KR101785671B1 (ko) * 2014-05-20 2017-11-06 엘지전자 주식회사 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110157245A1 (en) * 2005-11-08 2011-06-30 Young Garrett J Apparatus, methods, and systems for multi-primary display or projection
WO2007139534A1 (en) 2006-05-25 2007-12-06 Thomson Licensing Method and system for weighted encoding
WO2013046096A1 (en) * 2011-09-27 2013-04-04 Koninklijke Philips Electronics N.V. Apparatus and method for dynamic range transforming of images

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Indication of SMPTE 2084 and 2085 and carriage of 2086 metadata in HEVC. ISO/IEC JTC 1/SC 29/WG 11 JCTVC-P0084r1. 2014.01.17.
Tone Mapping SEI Message. Joint Video Team (JVT) of ISO/IEC MPEG & ITU-T VCEG. JVT-S087. 2006.04.10.

Also Published As

Publication number Publication date
JP6571073B2 (ja) 2019-09-04
KR20160052570A (ko) 2016-05-12
EP2947560B1 (en) 2019-07-10
US9866812B2 (en) 2018-01-09
US20170223330A1 (en) 2017-08-03
JP2016540404A (ja) 2016-12-22
WO2015178598A1 (ko) 2015-11-26
TW201607295A (zh) 2016-02-16
US9661294B2 (en) 2017-05-23
US20150341611A1 (en) 2015-11-26
TWI577176B (zh) 2017-04-01
EP2947560A1 (en) 2015-11-25

Similar Documents

Publication Publication Date Title
KR101785671B1 (ko) 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치
US11856200B2 (en) Data output apparatus, data output method, and data generation method
KR101759954B1 (ko) 디지털 방송 시스템에서 광역 밝기 표현을 위한 초고화질 방송 신호 송수신 방법 및 장치
KR101809967B1 (ko) 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치
JP6566271B2 (ja) 伝送方法及び再生装置
US20170251161A1 (en) Method for generating control information based on characteristic data included in metadata
JP2016530780A (ja) デジタル放送システムにおける高品質の色感表現のための超高画質放送信号送受信方法及び装置
US10516915B2 (en) Apparatus and method of processing metadata for indicating a change in HDR information
US20170374313A1 (en) Method and device for transmitting and receiving broadcast signal
US20120069894A1 (en) Method Of Transmitting Video Data
US11202050B2 (en) Data processing method and device for adaptive image playing
US10616617B2 (en) Method and apparatus for transmitting or receiving broadcast signal
JP6751893B2 (ja) 再生方法、再生装置、表示方法及び表示装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right