WO2017061796A1 - 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법 - Google Patents

방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법 Download PDF

Info

Publication number
WO2017061796A1
WO2017061796A1 PCT/KR2016/011202 KR2016011202W WO2017061796A1 WO 2017061796 A1 WO2017061796 A1 WO 2017061796A1 KR 2016011202 W KR2016011202 W KR 2016011202W WO 2017061796 A1 WO2017061796 A1 WO 2017061796A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
color
content
field
color gamut
Prior art date
Application number
PCT/KR2016/011202
Other languages
English (en)
French (fr)
Inventor
오현묵
서종열
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US15/759,798 priority Critical patent/US10587852B2/en
Publication of WO2017061796A1 publication Critical patent/WO2017061796A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43632—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635—HDMI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4516—Management of client data or end-user data involving client characteristics, e.g. Set-Top-Box type, software version or amount of memory available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/641—Multi-purpose receivers, e.g. for auxiliary information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image

Definitions

  • the present invention relates to a broadcast signal transmission apparatus, a broadcast signal reception apparatus, and a broadcast signal transmission and reception method.
  • UHD content aims to provide improved image quality in various aspects compared to existing content.
  • research and development of UHD video elements are being conducted not only in the broadcasting field but also in various fields.
  • the demand for providing an improved viewer experience in terms of color and brightness that has not been provided by existing contents is increasing.
  • UHD display devices differ from conventional display devices in terms of expressive power in terms of color and brightness.
  • color or brightness may be limited depending on the physical characteristics of the display device, thereby preventing content viewing.
  • An object of the present invention is to provide a video processing method and a video processing apparatus capable of viewing content including UHD content in an optimal environment under various display device environments.
  • Another object of the present invention is to provide a video processing method and a video processing apparatus for reducing color or brightness expression restrictions according to physical characteristics of display apparatuses when UHD contents including UHD contents are displayed on various display apparatuses. .
  • Another object of the present invention is to provide a video processing method and a video processing apparatus that can deliver the device characteristics of the display to view the content including the UHD content in an optimal environment even when the content including the UHD content is supplied through the external device. To provide.
  • the present invention provides a system and an associated signaling scheme that can effectively support next-generation broadcast services in an environment that supports next-generation hybrid broadcasting using terrestrial broadcasting networks and Internet networks. Suggest.
  • contents including UHD contents can be viewed in an optimal environment under various display device environments.
  • the device characteristics of the display may be transmitted to view UHD content including UHD content in an optimal environment.
  • FIG. 1 is a diagram illustrating a protocol stack according to an embodiment of the present invention.
  • FIG. 2 is a diagram illustrating a service discovery process according to an embodiment of the present invention.
  • LLS low level signaling
  • SLT service list table
  • FIG. 4 illustrates a USBD and an S-TSID delivered to ROUTE according to an embodiment of the present invention.
  • FIG. 5 is a diagram illustrating a USBD delivered to MMT according to an embodiment of the present invention.
  • FIG. 6 illustrates a link layer operation according to an embodiment of the present invention.
  • FIG. 7 illustrates a link mapping table (LMT) according to an embodiment of the present invention.
  • FIG. 8 is a diagram illustrating an example in which a source device and a sink device are connected to transmit and receive a video image.
  • FIG. 9 is a diagram illustrating an embodiment of transmitting and receiving information when a source device is connected to a sink device according to an embodiment of the present invention.
  • FIG. 10 is a diagram illustrating an example of information delivered to a source device by a sink device according to an embodiment of the present invention.
  • FIG. 11 is a diagram illustrating specific field values of the above-described embodiment as an example of information delivered by a sink device to a source device according to an embodiment of the present invention.
  • FIG. 12 is a diagram illustrating a detailed example of a control option flag according to an embodiment of the present invention disclosed.
  • FIG. 13 is a diagram illustrating a detailed example of the Sink Device Dynamic Range information according to the embodiment of the present invention described.
  • FIG. 14 is a diagram illustrating Display Parameters Data Block of DisplayID as display related information delivered from a sink device to a source device according to an embodiment of the present invention.
  • FIG. 15 illustrates Display Device Data Block as display related information described in the embodiment of the present invention.
  • FIG. 16 illustrates another example in which a sink device delivers display related information to a source device according to an embodiment of the present invention.
  • 17 is a diagram illustrating information to be delivered from the source device to the sink device according to an embodiment of the present invention.
  • FIG. 19 is a view showing a detailed example of the original color gamut information (Orig_color_gamut) disclosed in accordance with an embodiment of the present invention.
  • FIG. 20 illustrates another example of transmitting color information of an image transmitted from a source device to a sink device according to an embodiment of the present invention.
  • 21 is a diagram illustrating embodiments of a signal processing device and its operation according to an embodiment of the present invention.
  • FIG. 22 is a diagram illustrating a configuration of an EOTF type according to an embodiment of the present invention.
  • FIG. 23 illustrates a method for signaling a DCI-P3 color gamut according to an embodiment of the present invention.
  • 24 is a diagram illustrating a method for signaling a DCI-P3 color gamut according to another embodiment of the present invention.
  • 25 is a diagram illustrating a method for signaling a DCI-P3 color gamut according to another embodiment of the present invention.
  • FIG. 26 is a diagram illustrating a method for delivering information on a transfer function that can be processed by a sink device according to one embodiment of the present invention.
  • FIG. 27 is a view showing specific field values used in a method for transferring information on a transfer function that can be processed by a sink device according to an embodiment of the present invention.
  • FIG. 28 illustrates a method for signaling container color gamut from a source device to a sink device according to an embodiment of the present invention.
  • 29 is a diagram illustrating a method for signaling a display color gamut of a sink device from a sink device to a source device according to an embodiment of the present invention.
  • FIG. 30 is a diagram illustrating a method for signaling content color gamut from a source device to a sink device according to an embodiment of the present invention.
  • FIG. 31 is a diagram illustrating a method for signaling information about content color gamut from a sink device to a source device according to an embodiment of the present invention.
  • 32 is a diagram illustrating a method for signaling content color gamut from a source device to a sink device according to another embodiment of the present invention.
  • FIG 33 illustrates a method of signaling content color gamut from a source device to a sink device according to another embodiment of the present invention.
  • 34 is a diagram illustrating a method for signaling information about content color gamut from a source device to a sink device according to an embodiment of the present invention.
  • 35 is a view illustrating a video data processing method of a source device according to an embodiment of the present invention.
  • 36 is a diagram illustrating a video data processing method of a sink device according to an embodiment of the present invention.
  • FIG. 37 is a diagram showing the configuration of a video data processing apparatus (source device) according to an embodiment of the present invention.
  • FIG. 38 is a diagram showing the configuration of a video data processing apparatus (sink device) according to an embodiment of the present invention.
  • the present invention provides an apparatus and method for transmitting and receiving broadcast signals for next generation broadcast services.
  • the next generation broadcast service includes a terrestrial broadcast service, a mobile broadcast service, a UHDTV service, and the like.
  • a broadcast signal for a next generation broadcast service may be processed through a non-multiple input multiple output (MIMO) or MIMO scheme.
  • the non-MIMO scheme according to an embodiment of the present invention may include a multiple input single output (MISO) scheme, a single input single output (SISO) scheme, and the like.
  • MISO multiple input single output
  • SISO single input single output
  • the present invention proposes a physical profile (or system) that is optimized to minimize receiver complexity while achieving the performance required for a particular application.
  • FIG. 1 is a diagram illustrating a protocol stack according to an embodiment of the present invention.
  • the service may be delivered to the receiver through a plurality of layers.
  • the transmitting side can generate service data.
  • the delivery layer on the transmitting side performs processing for transmission to the service data, and the physical layer encodes it as a broadcast signal and transmits it through a broadcasting network or broadband.
  • the service data may be generated in a format according to ISO BMFF (base media file format).
  • the ISO BMFF media file may be used in broadcast network / broadband delivery, media encapsulation and / or synchronization format.
  • the service data is all data related to the service, and may include a concept including service components constituting the linear service, signaling information thereof, non real time (NRT) data, and other files.
  • the delivery layer will be described.
  • the delivery layer may provide a transmission function for service data.
  • the service data may be delivered through a broadcast network and / or broadband.
  • the first method may be to process service data into Media Processing Units (MPUs) based on MPEG Media Transport (MMT) and transmit the data using MMM protocol (MMTP).
  • MPUs Media Processing Units
  • MMT MPEG Media Transport
  • MMTP MMM protocol
  • the service data delivered through the MMTP may include service components for linear service and / or service signaling information thereof.
  • the second method may be to process service data into DASH segments based on MPEG DASH and transmit it using Real Time Object Delivery over Unidirectional Transport (ROUTE).
  • the service data delivered through the ROUTE protocol may include service components for the linear service, service signaling information and / or NRT data thereof. That is, non-timed data such as NRT data and files may be delivered through ROUTE.
  • Data processed according to the MMTP or ROUTE protocol may be processed into IP packets via the UDP / IP layer.
  • a service list table (SLT) may also be transmitted through a broadcasting network through a UDP / IP layer.
  • the SLT may be included in the LLS (Low Level Signaling) table and transmitted. The SLT and the LLS table will be described later.
  • IP packets may be treated as link layer packets at the link layer.
  • the link layer may encapsulate data of various formats delivered from an upper layer into a link layer packet and then deliver the data to the physical layer. The link layer will be described later.
  • At least one or more service elements may be delivered via a broadband path.
  • the data transmitted through the broadband may include service components in a DASH format, service signaling information and / or NRT data thereof. This data can be processed via HTTP / TCP / IP, passed through the link layer for broadband transmission, and delivered to the physical layer for broadband transmission.
  • the physical layer may process data received from a delivery layer (upper layer and / or link layer) and transmit the data through a broadcast network or a broadband. Details of the physical layer will be described later.
  • the service may be a collection of service components that are shown to the user as a whole, the components may be of different media types, the service may be continuous or intermittent, the service may be real time or non-real time, and the real time service may be a sequence of TV programs. It can be configured as.
  • the service may be a linear audio / video or audio only service that may have app-based enhancements.
  • the service may be an app-based service whose reproduction / configuration is controlled by the downloaded application.
  • the service may be an ESG service that provides an electronic service guide (ESG).
  • ESG electronic service guide
  • EA Emergency Alert
  • the service component may be delivered by (1) one or more ROUTE sessions or (2) one or more MMTP sessions.
  • the service component When a linear service with app-based enhancement is delivered through a broadcast network, the service component may be delivered by (1) one or more ROUTE sessions and (2) zero or more MMTP sessions.
  • data used for app-based enhancement may be delivered through a ROUTE session in the form of NRT data or other files.
  • linear service components (streaming media components) of one service may not be allowed to be delivered using both protocols simultaneously.
  • the service component may be delivered by one or more ROUTE sessions.
  • the service data used for the app-based service may be delivered through a ROUTE session in the form of NRT data or other files.
  • some service components or some NRT data, files, etc. of these services may be delivered via broadband (hybrid service delivery).
  • the linear service components of one service may be delivered through the MMT protocol.
  • the linear service components of one service may be delivered via a ROUTE protocol.
  • the linear service component and NRT data (NRT service component) of one service may be delivered through the ROUTE protocol.
  • linear service components of one service may be delivered through the MMT protocol, and NRT data (NRT service components) may be delivered through the ROUTE protocol.
  • some service component or some NRT data of a service may be delivered over broadband.
  • the data related to the app-based service or the app-based enhancement may be transmitted through a broadcast network according to ROUTE or through broadband in the form of NRT data.
  • NRT data may also be referred to as locally cashed data.
  • Each ROUTE session includes one or more LCT sessions that deliver, in whole or in part, the content components that make up the service.
  • an LCT session may deliver an individual component of a user service, such as an audio, video, or closed caption stream.
  • Streaming media is formatted into a DASH segment.
  • Each MMTP session includes one or more MMTP packet flows carrying an MMT signaling message or all or some content components.
  • the MMTP packet flow may carry a component formatted with an MMT signaling message or an MPU.
  • an LCT session For delivery of NRT user service or system metadata, an LCT session carries a file based content item.
  • These content files may consist of continuous (timed) or discrete (non-timed) media components of an NRT service, or metadata such as service signaling or ESG fragments.
  • Delivery of system metadata, such as service signaling or ESG fragments, can also be accomplished through the signaling message mode of the MMTP.
  • the tuner can scan frequencies and detect broadcast signals at specific frequencies.
  • the receiver can extract the SLT and send it to the module that processes it.
  • the SLT parser can parse the SLT, obtain data, and store it in the channel map.
  • the receiver may acquire bootstrap information of the SLT and deliver it to the ROUTE or MMT client. This allows the receiver to obtain and store the SLS. USBD or the like can be obtained, which can be parsed by the signaling parser.
  • FIG. 2 is a diagram illustrating a service discovery process according to an embodiment of the present invention.
  • the broadcast stream delivered by the broadcast signal frame of the physical layer may carry LLS (Low Level Signaling).
  • LLS data may be carried through the payload of an IP packet delivered to a well known IP address / port. This LLS may contain an SLT depending on its type.
  • LLS data may be formatted in the form of an LLS table. The first byte of every UDP / IP packet carrying LLS data may be the beginning of the LLS table. Unlike the illustrated embodiment, the IP stream carrying LLS data may be delivered to the same PLP along with other service data.
  • the SLT enables the receiver to generate a service list through a fast channel scan and provides access information for locating the SLS.
  • the SLT includes bootstrap information, which enables the receiver to obtain Service Layer Signaling (SLS) for each service.
  • SLS Service Layer Signaling
  • the bootstrap information may include destination IP address and destination port information of the ROUTE session including the LCT channel carrying the SLS and the LCT channel.
  • the bootstrap information may include a destination IP address and destination port information of the MMTP session carrying the SLS.
  • the SLS of service # 1 described by the SLT is delivered via ROUTE, and the SLT includes bootstrap information (sIP1, dIP1, dPort1) for the ROUTE session including the LCT channel to which the SLS is delivered. can do.
  • SLS of service # 2 described by the SLT is delivered through MMT, and the SLT may include bootstrap information (sIP2, dIP2, and dPort2) for an MMTP session including an MMTP packet flow through which the SLS is delivered.
  • the SLS is signaling information describing characteristics of a corresponding service and may include information for acquiring a corresponding service and a service component of the corresponding service, or may include receiver capability information for reproducing the corresponding service significantly. Having separate service signaling for each service allows the receiver to obtain the appropriate SLS for the desired service without having to parse the entire SLS delivered in the broadcast stream.
  • the SLS When the SLS is delivered through the ROUTE protocol, the SLS may be delivered through a dedicated LCT channel of a ROUTE session indicated by the SLT.
  • the SLS may include a user service bundle description (USBD / USD), a service-based transport session instance description (S-TSID), and / or a media presentation description (MPD).
  • USBD / USD user service bundle description
  • S-TSID service-based transport session instance description
  • MPD media presentation description
  • USBD to USD is one of the SLS fragments and may serve as a signaling hub for describing specific technical information of a service.
  • the USBD may include service identification information, device capability information, and the like.
  • the USBD may include reference information (URI reference) to other SLS fragments (S-TSID, MPD, etc.). That is, USBD / USD can refer to S-TSID and MPD respectively.
  • the USBD may further include metadata information that enables the receiver to determine the transmission mode (broadcast network / broadband). Details of the USBD / USD will be described later.
  • the S-TSID is one of the SLS fragments, and may provide overall session description information for a transport session carrying a service component of a corresponding service.
  • the S-TSID may provide transport session description information for the ROUTE session to which the service component of the corresponding service is delivered and / or the LCT channel of the ROUTE sessions.
  • the S-TSID may provide component acquisition information of service components related to one service.
  • the S-TSID may provide a mapping between the DASH Representation of the MPD and the tsi of the corresponding service component.
  • the component acquisition information of the S-TSID may be provided in the form of tsi, an identifier of an associated DASH representation, and may or may not include a PLP ID according to an embodiment.
  • the component acquisition information enables the receiver to collect audio / video components of a service and to buffer, decode, and the like of DASH media segments.
  • the S-TSID may be referenced by the USBD as described above. Details of the S-TSID will be described later.
  • the MPD is one of the SLS fragments and may provide a description of the DASH media presentation of the service.
  • the MPD may provide a resource identifier for the media segments and may provide contextual information within the media presentation for the identified resources.
  • the MPD may describe the DASH representation (service component) delivered through the broadcast network, and may also describe additional DASH representations delivered through the broadband (hybrid delivery).
  • the MPD may be referenced by the USBD as described above.
  • the SLS When the SLS is delivered through the MMT protocol, the SLS may be delivered through a dedicated MMTP packet flow of an MMTP session indicated by the SLT.
  • packet_id of MMTP packets carrying SLS may have a value of 00.
  • the SLS may include a USBD / USD and / or MMT Package (MP) table.
  • USBD is one of the SLS fragments, and may describe specific technical information of a service like that in ROUTE.
  • the USBD here may also include reference information (URI reference) to other SLS fragments.
  • the USBD of the MMT may refer to the MP table of the MMT signaling.
  • the USBD of the MMT may also include reference information on the S-TSID and / or the MPD.
  • the S-TSID may be for NRT data transmitted through the ROUTE protocol. This is because NRT data can be delivered through the ROUTE protocol even when the linear service component is delivered through the MMT protocol.
  • MPD may be for a service component delivered over broadband in hybrid service delivery. Details of the USBD of the MMT will be described later.
  • the MP table is a signaling message of the MMT for MPU components and may provide overall session description information for an MMTP session carrying a service component of a corresponding service.
  • the MP table may also contain descriptions for assets delivered via this MMTP session.
  • the MP table is streaming signaling information for MPU components, and may provide a list of assets corresponding to one service and location information (component acquisition information) of these components. Specific contents of the MP table may be in a form defined in MMT or a form in which modifications are made.
  • Asset is a multimedia data entity, which may mean a data entity associated with one unique ID and used to generate one multimedia presentation. Asset may correspond to a service component constituting a service.
  • the MP table may be used to access a streaming service component (MPU) corresponding to a desired service.
  • the MP table may be referenced by the USBD as described above.
  • MMT signaling messages may be defined. Such MMT signaling messages may describe additional information related to the MMTP session or service.
  • ROUTE sessions are identified by source IP address, destination IP address, and destination port number.
  • the LCT session is identified by a transport session identifier (TSI) that is unique within the scope of the parent ROUTE session.
  • MMTP sessions are identified by destination IP address and destination port number.
  • the MMTP packet flow is identified by a unique packet_id within the scope of the parent MMTP session.
  • the S-TSID, the USBD / USD, the MPD, or the LCT session carrying them may be called a service signaling channel.
  • the S-TSID, the USBD / USD, the MPD, or the LCT session carrying them may be called a service signaling channel.
  • the S-TSID, the USBD / USD, the MPD, or the LCT session carrying them may be called a service signaling channel.
  • the MMT signaling messages or packet flow carrying them may be called a service signaling channel.
  • one ROUTE or MMTP session may be delivered through a plurality of PLPs. That is, one service may be delivered through one or more PLPs. Unlike shown, components constituting one service may be delivered through different ROUTE sessions. In addition, according to an embodiment, components constituting one service may be delivered through different MMTP sessions. According to an embodiment, components constituting one service may be delivered divided into a ROUTE session and an MMTP session. Although not shown, a component constituting one service may be delivered through a broadband (hybrid delivery).
  • LLS low level signaling
  • SLT service list table
  • An embodiment t3010 of the illustrated LLS table may include information according to an LLS_table_id field, a provider_id field, an LLS_table_version field, and / or an LLS_table_id field.
  • the LLS_table_id field may identify a type of the corresponding LLS table, and the provider_id field may identify service providers related to services signaled by the corresponding LLS table.
  • the service provider is a broadcaster using all or part of the broadcast stream, and the provider_id field may identify one of a plurality of broadcasters using the broadcast stream.
  • the LLS_table_version field may provide version information of a corresponding LLS table.
  • the corresponding LLS table includes the above-described SLT, a rating region table (RRT) including information related to a content advisory rating, a SystemTime information providing information related to system time, and an emergency alert. It may include one of the CAP (Common Alert Protocol) message that provides information related to. According to an embodiment, other information other than these may be included in the LLS table.
  • RRT rating region table
  • CAP Common Alert Protocol
  • One embodiment t3020 of the illustrated SLT may include an @bsid attribute, an @sltCapabilities attribute, a sltInetUrl element, and / or a Service element.
  • Each field may be omitted or may exist in plurality, depending on the value of the illustrated Use column.
  • the @bsid attribute may be an identifier of a broadcast stream.
  • the @sltCapabilities attribute can provide the capability information required to decode and significantly reproduce all services described by the SLT.
  • the sltInetUrl element may provide base URL information used to obtain ESG or service signaling information for services of the corresponding SLT through broadband.
  • the sltInetUrl element may further include an @urlType attribute, which may indicate the type of data that can be obtained through the URL.
  • the service element may be an element including information on services described by the corresponding SLT, and a service element may exist for each service.
  • the Service element contains the @serviceId property, the @sltSvcSeqNum property, the @protected property, the @majorChannelNo property, the @minorChannelNo property, the @serviceCategory property, the @shortServiceName property, the @hidden property, the @broadbandAccessRequired property, the @svcCapabilities property, the BroadcastSvcSignaling element, and / or the svcInetUrl element. It may include.
  • the @serviceId attribute may be an identifier of a corresponding service, and the @sltSvcSeqNum attribute may indicate a sequence number of SLT information for the corresponding service.
  • the @protected attribute may indicate whether at least one service component necessary for meaningful playback of the corresponding service is protected.
  • the @majorChannelNo and @minorChannelNo attributes may indicate the major channel number and the minor channel number of the corresponding service, respectively.
  • the @serviceCategory attribute can indicate the category of the corresponding service.
  • the service category may include a linear A / V service, a linear audio service, an app-based service, an ESG service, and an EAS service.
  • the @shortServiceName attribute may provide a short name of the corresponding service.
  • the @hidden attribute can indicate whether the service is for testing or proprietary use.
  • the @broadbandAccessRequired attribute may indicate whether broadband access is required for meaningful playback of the corresponding service.
  • the @svcCapabilities attribute can provide the capability information necessary for decoding and meaningful reproduction of the corresponding service.
  • the BroadcastSvcSignaling element may provide information related to broadcast signaling of a corresponding service. This element may provide information such as a location, a protocol, and an address with respect to signaling through a broadcasting network of a corresponding service. Details will be described later.
  • the svcInetUrl element may provide URL information for accessing signaling information for a corresponding service through broadband.
  • the sltInetUrl element may further include an @urlType attribute, which may indicate the type of data that can be obtained through the URL.
  • the aforementioned BroadcastSvcSignaling element may include an @slsProtocol attribute, an @slsMajorProtocolVersion attribute, an @slsMinorProtocolVersion attribute, an @slsPlpId attribute, an @slsDestinationIpAddress attribute, an @slsDestinationUdpPort attribute, and / or an @slsSourceIpAddress attribute.
  • the @slsProtocol attribute can indicate the protocol used to deliver the SLS of the service (ROUTE, MMT, etc.).
  • the @slsMajorProtocolVersion attribute and @slsMinorProtocolVersion attribute may indicate the major version number and the minor version number of the protocol used to deliver the SLS of the corresponding service, respectively.
  • the @slsPlpId attribute may provide a PLP identifier for identifying a PLP that delivers the SLS of the corresponding service.
  • this field may be omitted, and the PLP information to which the SLS is delivered may be identified by combining information in the LMT to be described later and bootstrap information of the SLT.
  • the @slsDestinationIpAddress attribute, @slsDestinationUdpPort attribute, and @slsSourceIpAddress attribute may indicate the destination IP address, the destination UDP port, and the source IP address of the transport packet carrying the SLS of the corresponding service, respectively. They can identify the transport session (ROUTE session or MMTP session) to which the SLS is delivered. These may be included in the bootstrap information.
  • FIG. 4 illustrates a USBD and an S-TSID delivered to ROUTE according to an embodiment of the present invention.
  • One embodiment t4010 of the illustrated USBD may have a bundleDescription root element.
  • the bundleDescription root element may have a userServiceDescription element.
  • the userServiceDescription element may be an instance of one service.
  • the userServiceDescription element may include an @globalServiceID attribute, an @serviceId attribute, an @serviceStatus attribute, an @fullMPDUri attribute, an @sTSIDUri attribute, a name element, a serviceLanguage element, a capabilityCode element, and / or a deliveryMethod element.
  • Each field may be omitted or may exist in plurality, depending on the value of the illustrated Use column.
  • the @globalServiceID attribute is a globally unique identifier of the service and can be used to link with ESG data (Service @ globalServiceID).
  • the @serviceId attribute is a reference corresponding to the corresponding service entry of the SLT and may be the same as service ID information of the SLT.
  • the @serviceStatus attribute may indicate the status of the corresponding service. This field may indicate whether the corresponding service is active or inactive.
  • the @fullMPDUri attribute can refer to the MPD fragment of the service. As described above, the MPD may provide a reproduction description for a service component delivered through a broadcast network or a broadband.
  • the @sTSIDUri attribute may refer to the S-TSID fragment of the service.
  • the S-TSID may provide parameters related to access to the transport session carrying the service as described above.
  • the name element may provide the name of the service.
  • This element may further include an @lang attribute, which may indicate the language of the name provided by the name element.
  • the serviceLanguage element may indicate the available languages of the service. That is, this element may list the languages in which the service can be provided.
  • the capabilityCode element may indicate capability or capability group information of the receiver side necessary for significantly playing a corresponding service. This information may be compatible with the capability information format provided by the service announcement.
  • the deliveryMethod element may provide delivery related information with respect to contents accessed through a broadcasting network or a broadband of a corresponding service.
  • the deliveryMethod element may include a broadcastAppService element and / or a unicastAppService element. Each of these elements may have a basePattern element as its child element.
  • the broadcastAppService element may include transmission related information on the DASH presentation delivered through the broadcast network.
  • These DASH representations may include media components across all periods of the service media presentation.
  • the basePattern element of this element may represent a character pattern used by the receiver to match the segment URL. This can be used by the DASH client to request segments of the representation. Matching may imply that the media segment is delivered over the broadcast network.
  • the unicastAppService element may include transmission related information on the DASH representation delivered through broadband. These DASH representations may include media components across all periods of the service media presentation.
  • the basePattern element of this element may represent a character pattern used by the receiver to match the segment URL. This can be used by the DASH client to request segments of the representation. Matching may imply that the media segment is delivered over broadband.
  • An embodiment t4020 of the illustrated S-TSID may have an S-TSID root element.
  • the S-TSID root element may include an @serviceId attribute and / or an RS element.
  • Each field may be omitted or may exist in plurality, depending on the value of the illustrated Use column.
  • the @serviceId attribute is an identifier of a corresponding service and may refer to a corresponding service of USBD / USD.
  • the RS element may describe information on ROUTE sessions through which service components of a corresponding service are delivered. Depending on the number of such ROUTE sessions, there may be a plurality of these elements.
  • the RS element may further include an @bsid attribute, an @sIpAddr attribute, an @dIpAddr attribute, an @dport attribute, an @PLPID attribute, and / or an LS element.
  • the @bsid attribute may be an identifier of a broadcast stream through which service components of a corresponding service are delivered. If this field is omitted, the default broadcast stream may be a broadcast stream that includes a PLP that carries the SLS of the service. The value of this field may be the same value as the @bsid attribute of SLT.
  • the @sIpAddr attribute, the @dIpAddr attribute, and the @dport attribute may indicate a source IP address, a destination IP address, and a destination UDP port of the corresponding ROUTE session, respectively. If these fields are omitted, the default values may be the source IP address, destination IP address, and destination UDP port values of the current, ROUTE session carrying that SLS, that is, carrying that S-TSID. For other ROUTE sessions that carry service components of the service but not the current ROUTE session, these fields may not be omitted.
  • the @PLPID attribute may indicate PLP ID information of a corresponding ROUTE session. If this field is omitted, the default value may be the PLP ID value of the current PLP to which the corresponding S-TSID is being delivered. According to an embodiment, this field is omitted, and the PLP ID information of the corresponding ROUTE session may be confirmed by combining information in the LMT to be described later and IP address / UDP port information of the RS element.
  • the LS element may describe information on LCT channels through which service components of a corresponding service are delivered. Depending on the number of such LCT channels, there may be a plurality of these elements.
  • the LS element may include an @tsi attribute, an @PLPID attribute, an @bw attribute, an @startTime attribute, an @endTime attribute, an SrcFlow element, and / or a RepairFlow element.
  • the @tsi attribute may represent tsi information of a corresponding LCT channel. Through this, LCT channels through which a service component of a corresponding service is delivered may be identified.
  • the @PLPID attribute may represent PLP ID information of a corresponding LCT channel. In some embodiments, this field may be omitted.
  • the @bw attribute may indicate the maximum bandwidth of the corresponding LCT channel.
  • the @startTime attribute may indicate the start time of the LCT session, and the @endTime attribute may indicate the end time of the LCT channel.
  • the SrcFlow element may describe the source flow of ROUTE.
  • the source protocol of ROUTE is used to transmit the delivery object, and can establish at least one source flow in one ROUTE session. These source flows can deliver related objects as an object flow.
  • the RepairFlow element may describe the repair flow of ROUTE. Delivery objects delivered according to the source protocol may be protected according to Forward Error Correction (FEC).
  • FEC Forward Error Correction
  • the repair protocol may define a FEC framework that enables such FEC protection.
  • FIG. 5 is a diagram illustrating a USBD delivered to MMT according to an embodiment of the present invention.
  • One embodiment of the illustrated USBD may have a bundleDescription root element.
  • the bundleDescription root element may have a userServiceDescription element.
  • the userServiceDescription element may be an instance of one service.
  • the userServiceDescription element may include an @globalServiceID attribute, an @serviceId attribute, a Name element, a serviceLanguage element, a content advisoryRating element, a Channel element, an mpuComponent element, a routeComponent element, a broadbandComponent element, and / or a ComponentInfo element.
  • Each field may be omitted or may exist in plurality, depending on the value of the illustrated Use column.
  • the @globalServiceID attribute, the @serviceId attribute, the Name element and / or the serviceLanguage element may be the same as the corresponding fields of the USBD delivered to the above-described ROUTE.
  • the contentAdvisoryRating element may indicate the content advisory rating of the corresponding service. This information may be compatible with the content advisory rating information format provided by the service announcement.
  • the channel element may include information related to the corresponding service. The detail of this element is mentioned later.
  • the mpuComponent element may provide a description for service components delivered as an MPU of a corresponding service.
  • This element may further include an @mmtPackageId attribute and / or an @nextMmtPackageId attribute.
  • the @mmtPackageId attribute may refer to an MMT package of service components delivered as an MPU of a corresponding service.
  • the @nextMmtPackageId attribute may refer to an MMT package to be used next to the MMT package referenced by the @mmtPackageId attribute in time.
  • the MP table can be referenced through the information of this element.
  • the routeComponent element may include a description of service components of the corresponding service delivered to ROUTE. Even if the linear service components are delivered in the MMT protocol, the NRT data may be delivered according to the ROUTE protocol as described above. This element may describe information about such NRT data. The detail of this element is mentioned later.
  • the broadbandComponent element may include a description of service components of the corresponding service delivered over broadband.
  • some service components or other files of a service may be delivered over broadband. This element may describe information about these data.
  • This element may further include the @fullMPDUri attribute. This attribute may refer to an MPD that describes service components delivered over broadband.
  • the element when the broadcast signal is weakened due to driving in a tunnel or the like, the element may be needed to support handoff between the broadcast network and the broadband band. When the broadcast signal is weakened, while acquiring the service component through broadband, and when the broadcast signal is stronger, the service continuity may be guaranteed by acquiring the service component through the broadcast network.
  • the ComponentInfo element may include information on service components of a corresponding service. Depending on the number of service components of the service, there may be a plurality of these elements. This element may describe information such as the type, role, name, identifier, and protection of each service component. Detailed information on this element will be described later.
  • the aforementioned channel element may further include an @serviceGenre attribute, an @serviceIcon attribute, and / or a ServiceDescription element.
  • the @serviceGenre attribute may indicate the genre of the corresponding service
  • the @serviceIcon attribute may include URL information of an icon representing the corresponding service.
  • the ServiceDescription element provides a service description of the service, which may further include an @serviceDescrText attribute and / or an @serviceDescrLang attribute. Each of these attributes may indicate the text of the service description and the language used for that text.
  • the aforementioned routeComponent element may further include an @sTSIDUri attribute, an @sTSIDDestinationIpAddress attribute, an @sTSIDDestinationUdpPort attribute, an @sTSIDSourceIpAddress attribute, an @sTSIDMajorProtocolVersion attribute, and / or an @sTSIDMinorProtocolVersion attribute.
  • the @sTSIDUri attribute may refer to an S-TSID fragment. This field may be the same as the corresponding field of USBD delivered to ROUTE described above. This S-TSID may provide access related information for service components delivered in ROUTE. This S-TSID may exist for NRT data delivered according to the ROUTE protocol in the situation where linear service components are delivered according to the MMT protocol.
  • the @sTSIDDestinationIpAddress attribute, the @sTSIDDestinationUdpPort attribute, and the @sTSIDSourceIpAddress attribute may indicate a destination IP address, a destination UDP port, and a source IP address of a transport packet carrying the aforementioned S-TSID, respectively. That is, these fields may identify a transport session (MMTP session or ROUTE session) carrying the aforementioned S-TSID.
  • the @sTSIDMajorProtocolVersion attribute and the @sTSIDMinorProtocolVersion attribute may indicate a major version number and a minor version number of the transport protocol used to deliver the aforementioned S-TSID.
  • ComponentInfo element may further include an @componentType attribute, an @componentRole attribute, an @componentProtectedFlag attribute, an @componentId attribute, and / or an @componentName attribute.
  • the @componentType attribute may indicate the type of the corresponding component. For example, this property may indicate whether the corresponding component is an audio, video, or closed caption component.
  • the @componentRole attribute can indicate the role (role) of the corresponding component. For example, this property can indicate whether the main audio, music, commentary, etc., if the corresponding component is an audio component. If the corresponding component is a video component, it may indicate whether it is primary video. If the corresponding component is a closed caption component, it may indicate whether it is a normal caption or an easy reader type.
  • the @componentProtectedFlag attribute may indicate whether a corresponding service component is protected, for example, encrypted.
  • the @componentId attribute may represent an identifier of a corresponding service component.
  • the value of this attribute may be a value such as asset_id (asset ID) of the MP table corresponding to this service component.
  • the @componentName attribute may represent the name of the corresponding service component.
  • FIG. 6 illustrates a link layer operation according to an embodiment of the present invention.
  • the link layer may be a layer between the physical layer and the network layer.
  • the transmitter may transmit data from the network layer to the physical layer
  • the receiver may transmit data from the physical layer to the network layer (t6010).
  • the purpose of the link layer may be to compress all input packet types into one format for processing by the physical layer, to ensure flexibility and future scalability for input packet types not yet defined. have.
  • the link layer may provide an option of compressing unnecessary information in the header of the input packet, so that the input data may be efficiently transmitted. Operations such as overhead reduction and encapsulation of the link layer may be referred to as a link layer protocol, and a packet generated using the corresponding protocol may be referred to as a link layer packet.
  • the link layer may perform functions such as packet encapsulation, overhead reduction, and / or signaling transmission.
  • the link layer ALP may perform an overhead reduction process on input packets and then encapsulate them into link layer packets.
  • the link layer may encapsulate the link layer packet without performing an overhead reduction process.
  • the use of the link layer protocol can greatly reduce the overhead for data transmission on the physical layer, and the link layer protocol according to the present invention can provide IP overhead reduction and / or MPEG-2 TS overhead reduction. have.
  • the link layer may sequentially perform IP header compression, adaptation, and / or encapsulation. In some embodiments, some processes may be omitted.
  • the RoHC module performs IP packet header compression to reduce unnecessary overhead, and context information may be extracted and transmitted out of band through an adaptation process.
  • the IP header compression and adaptation process may be collectively called IP header compression.
  • IP packets may be encapsulated into link layer packets through an encapsulation process.
  • the link layer may sequentially perform an overhead reduction and / or encapsulation process for the TS packet. In some embodiments, some processes may be omitted.
  • the link layer may provide sync byte removal, null packet deletion and / or common header removal (compression).
  • Sync byte elimination can provide overhead reduction of 1 byte per TS packet. Null packet deletion can be performed in a manner that can be reinserted at the receiving end. In addition, common information between successive headers can be deleted (compressed) in a manner that can be recovered at the receiving side. Some of each overhead reduction process may be omitted. Thereafter, TS packets may be encapsulated into link layer packets through an encapsulation process.
  • the link layer packet structure for encapsulation of TS packets may be different from other types of packets.
  • IP header compression will be described.
  • the IP packet has a fixed header format, but some information required in a communication environment may be unnecessary in a broadcast environment.
  • the link layer protocol may provide a mechanism to reduce broadcast overhead by compressing the header of the IP packet.
  • IP header compression may include a header compressor / decompressor and / or adaptation module.
  • the IP header compressor (RoHC compressor) may reduce the size of each IP packet header based on the RoHC scheme.
  • the adaptation module may then extract the context information and generate signaling information from each packet stream.
  • the receiver may parse signaling information related to the packet stream and attach context information to the packet stream.
  • the RoHC decompressor can reconstruct the original IP packet by recovering the packet header.
  • IP header compression may mean only IP header compression by a header compressor, or may mean a concept in which the IP header compression and the adaptation process by the adaptation module are combined. The same is true for decompressing.
  • the adaptation function may generate link layer signaling using context information and / or configuration parameters.
  • the adaptation function may periodically send link layer signaling over each physical frame using previous configuration parameters and / or context information.
  • the context information is extracted from the compressed IP packets, and various methods may be used according to the adaptation mode.
  • Mode # 1 is a mode in which no operation is performed on the compressed packet stream, and may be a mode in which the adaptation module operates as a buffer.
  • Mode # 2 may be a mode for extracting context information (static chain) by detecting IR packets in the compressed packet stream. After extraction, the IR packet is converted into an IR-DYN packet, and the IR-DYN packet can be transmitted in the same order in the packet stream by replacing the original IR packet.
  • context information static chain
  • Mode # 3 t6020 may be a mode for detecting IR and IR-DYN packets and extracting context information from the compressed packet stream.
  • Static chains and dynamic chains can be extracted from IR packets and dynamic chains can be extracted from IR-DYN packets.
  • the IR and IR-DYN packets can be converted into regular compressed packets.
  • the switched packets can be sent in the same order within the packet stream, replacing the original IR and IR-DYN packets.
  • the remaining packets after the context information is extracted may be encapsulated and transmitted according to the link layer packet structure for the compressed IP packet.
  • the context information may be transmitted by being encapsulated according to a link layer packet structure for signaling information as link layer signaling.
  • the extracted context information may be included in the RoHC-U Description Table (RTT) and transmitted separately from the RoHC packet flow.
  • the context information may be transmitted through a specific physical data path along with other signaling information.
  • a specific physical data path may mean one of general PLPs, a PLP to which LLS (Low Level Signaling) is delivered, a dedicated PLP, or an L1 signaling path. path).
  • the RDT may be signaling information including context information (static chain and / or dynamic chain) and / or information related to header compression.
  • the RDT may be transmitted whenever the context information changes.
  • the RDT may be transmitted in every physical frame. In order to transmit the RDT in every physical frame, a previous RDT may be re-use.
  • the receiver may first select PLP to acquire signaling information such as SLT, RDT, LMT, and the like. When the signaling information is obtained, the receiver may combine these to obtain a mapping between the service-IP information-context information-PLP. That is, the receiver can know which service is transmitted to which IP streams, which IP streams are delivered to which PLP, and can also obtain corresponding context information of the PLPs. The receiver can select and decode a PLP carrying a particular packet stream. The adaptation module can parse the context information and merge it with the compressed packets. This allows the packet stream to be recovered, which can be delivered to the RoHC decompressor. Decompression can then begin.
  • signaling information such as SLT, RDT, LMT, and the like.
  • the receiver may combine these to obtain a mapping between the service-IP information-context information-PLP. That is, the receiver can know which service is transmitted to which IP streams, which IP streams are delivered to which PLP, and can also obtain corresponding context information of the PLPs.
  • the receiver detects the IR packet and starts decompression from the first received IR packet according to the adaptation mode (mode 1), or detects the IR-DYN packet to perform decompression from the first received IR-DYN packet.
  • the link layer protocol may encapsulate all types of input packets, such as IP packets and TS packets, into link layer packets. This allows the physical layer to process only one packet format independently of the protocol type of the network layer (here, consider MPEG-2 TS packet as a kind of network layer packet). Each network layer packet or input packet is transformed into a payload of a generic link layer packet.
  • Segmentation may be utilized in the packet encapsulation process. If the network layer packet is too large to be processed by the physical layer, the network layer packet may be divided into two or more segments.
  • the link layer packet header may include fields for performing division at the transmitting side and recombination at the receiving side. Each segment may be encapsulated into a link layer packet in the same order as the original position.
  • Concatenation may also be utilized in the packet encapsulation process. If the network layer packet is small enough that the payload of the link layer packet includes several network layer packets, concatenation may be performed.
  • the link layer packet header may include fields for executing concatenation. In the case of concatenation, each input packet may be encapsulated into the payload of the link layer packet in the same order as the original input order.
  • the link layer packet may include a header and a payload, and the header may include a base header, an additional header, and / or an optional header.
  • the additional header may be added depending on the chaining or splitting, and the additional header may include necessary fields according to the situation.
  • an optional header may be further added to transmit additional information.
  • Each header structure may be predefined. As described above, when the input packet is a TS packet, a link layer header structure different from other packets may be used.
  • Link layer signaling may operate at a lower level than the IP layer.
  • the receiving side can acquire the link layer signaling faster than the IP level signaling such as LLS, SLT, SLS, and the like. Therefore, link layer signaling may be obtained before session establishment.
  • Link layer signaling may include internal link layer signaling and external link layer signaling.
  • Internal link layer signaling may be signaling information generated in the link layer.
  • the above-described RDT or LMT to be described later may correspond to this.
  • the external link layer signaling may be signaling information received from an external module, an external protocol, or an upper layer.
  • the link layer may encapsulate link layer signaling into a link layer packet and deliver it.
  • a link layer packet structure (header structure) for link layer signaling may be defined, and link layer signaling information may be encapsulated according to this structure.
  • FIG. 7 illustrates a link mapping table (LMT) according to an embodiment of the present invention.
  • the LMT may provide a list of higher layer sessions carried by the PLP.
  • the LMT may also provide additional information for processing link layer packets carrying higher layer sessions.
  • the higher layer session may be called multicast.
  • Information on which IP streams and which transport sessions are being transmitted through a specific PLP may be obtained through the LMT. Conversely, information on which PLP a specific transport session is delivered to may be obtained.
  • the LMT may be delivered to any PLP identified as carrying an LLS.
  • the PLP through which the LLS is delivered may be identified by the LLS flag of the L1 detail signaling information of the physical layer.
  • the LLS flag may be a flag field indicating whether LLS is delivered to the corresponding PLP for each PLP.
  • the L1 detail signaling information may correspond to PLS2 data to be described later.
  • the LMT may be delivered to the same PLP together with the LLS.
  • Each LMT may describe the mapping between PLPs and IP address / port as described above.
  • the LLS may include an SLT, where these IP addresses / ports described by the LMT are all IP addresses associated with any service described by the SLT forwarded to the same PLP as that LMT. It can be / ports.
  • the PLP identifier information in the above-described SLT, SLS, etc. may be utilized, so that information on which PLP the specific transmission session indicated by the SLT, SLS is transmitted may be confirmed.
  • the PLP identifier information in the above-described SLT, SLS, etc. may be omitted, and the PLP information for the specific transport session indicated by the SLT, SLS may be confirmed by referring to the information in the LMT.
  • the receiver may identify the PLP to know by combining LMT and other IP level signaling information.
  • PLP information in SLT, SLS, and the like is not omitted, and may remain in the SLT, SLS, and the like.
  • the LMT according to the illustrated embodiment may include a signaling_type field, a PLP_ID field, a num_session field, and / or information about respective sessions.
  • a PLP loop may be added to the LMT according to an embodiment, so that information on a plurality of PLPs may be described.
  • the LMT may describe PLPs for all IP addresses / ports related to all services described by the SLTs delivered together, in a PLP loop.
  • the signaling_type field may indicate the type of signaling information carried by the corresponding table.
  • the value of the signaling_type field for the LMT may be set to 0x01.
  • the signaling_type field may be omitted.
  • the PLP_ID field may identify a target PLP to be described. When a PLP loop is used, each PLP_ID field may identify each target PLP. From the PLP_ID field may be included in the PLP loop.
  • the PLP_ID field mentioned below is an identifier for one PLP in a PLP loop, and the fields described below may be fields for the corresponding PLP.
  • the num_session field may indicate the number of upper layer sessions delivered to the PLP identified by the corresponding PLP_ID field. According to the number indicated by the num_session field, information about each session may be included. This information may include an src_IP_add field, a dst_IP_add field, a src_UDP_port field, a dst_UDP_port field, a SID_flag field, a compressed_flag field, a SID field, and / or a context_id field.
  • the src_IP_add field, dst_IP_add field, src_UDP_port field, and dst_UDP_port field are the source IP address, destination IP address, source UDP port, destination UDP port for the transport session among the upper layer sessions forwarded to the PLP identified by the corresponding PLP_ID field. It can indicate a port.
  • the SID_flag field may indicate whether a link layer packet carrying a corresponding transport session has an SID field in its optional header.
  • a link layer packet carrying an upper layer session may have an SID field in its optional header, and the SID field value may be the same as an SID field in an LMT to be described later.
  • the compressed_flag field may indicate whether header compression has been applied to data of a link layer packet carrying a corresponding transport session.
  • the existence of the context_id field to be described later may be determined according to the value of this field.
  • the SID field may indicate a sub stream ID (SID) for link layer packets carrying a corresponding transport session.
  • SID sub stream ID
  • These link layer packets may include an SID having the same value as this SID field in the optional header.
  • the context_id field may provide a reference to a context id (CID) in the RDT.
  • the CID information of the RDT may indicate the context ID for the corresponding compressed IP packet stream.
  • the RDT may provide context information for the compressed IP packet stream. RDT and LMT may be associated with this field.
  • each field, element, or attribute may be omitted or replaced by another field, and additional fields, elements, or attributes may be added according to an embodiment. .
  • service components of one service may be delivered through a plurality of ROUTE sessions.
  • the SLS may be obtained through the bootstrap information of the SLT.
  • the SLS's USBD allows the S-TSID and MPD to be referenced.
  • the S-TSID may describe transport session description information for other ROUTE sessions to which service components are delivered, as well as a ROUTE session to which an SLS is being delivered.
  • all service components delivered through a plurality of ROUTE sessions may be collected. This may be similarly applied when service components of a service are delivered through a plurality of MMTP sessions.
  • one service component may be used simultaneously by a plurality of services.
  • bootstrapping for ESG services may be performed by a broadcast network or broadband.
  • URL information of the SLT may be utilized. ESG information and the like can be requested to this URL.
  • one service component of one service may be delivered to the broadcasting network and one to the broadband (hybrid).
  • the S-TSID may describe components delivered to a broadcasting network, so that a ROUTE client may acquire desired service components.
  • USBD also has base pattern information, which allows you to describe which segments (which components) are to be routed to which path. Therefore, the receiver can use this to know what segment to request to the broadband server and what segment to find in the broadcast stream.
  • scalable coding for a service may be performed.
  • the USBD may have all the capability information needed to render the service. For example, when a service is provided in HD or UHD, the capability information of the USBD may have a value of “HD or UHD”.
  • the receiver may know which component should be played in order to render the UHD or HD service using the MPD.
  • app components to be used for app-based enhancement / app-based service may be delivered through a broadcast network or through broadband as an NRT component.
  • app signaling for app-based enhancement may be performed by an application signaling table (AST) delivered with SLS.
  • an event which is a signaling of an operation to be performed by the app, may be delivered in the form of an event message table (EMT) with SLS, signaled in an MPD, or in-band signaled in a box in a DASH representation. . AST, EMT, etc. may be delivered via broadband.
  • App-based enhancement may be provided using the collected app components and such signaling information.
  • a CAP message may be included in the aforementioned LLS table for emergency alerting. Rich media content for emergency alerts may also be provided. Rich media may be signaled by the CAP message, and if rich media is present it may be provided as an EAS service signaled by the SLT.
  • the linear service components may be delivered through a broadcasting network according to the MMT protocol.
  • NRT data for example, an app component
  • data on the service may be delivered through a broadcasting network according to the ROUTE protocol.
  • data on the service may be delivered through broadband.
  • the receiver can access the MMTP session carrying the SLS using the bootstrap information of the SLT.
  • the USBD of the SLS according to the MMT may refer to the MP table so that the receiver may acquire linear service components formatted with the MPU delivered according to the MMT protocol.
  • the USBD may further refer to the S-TSID to allow the receiver to obtain NRT data delivered according to the ROUTE protocol.
  • the USBD may further reference the MPD to provide a playback description for the data delivered over the broadband.
  • the receiver may transmit location URL information for obtaining a streaming component and / or a file content item (such as a file) to the companion device through a method such as a web socket.
  • An application of a companion device may request the component, data, and the like by requesting the URL through an HTTP GET.
  • the receiver may transmit information such as system time information and emergency alert information to the companion device.
  • FIG. 8 is a diagram illustrating an example in which a source device and a sink device are connected to transmit and receive a video image.
  • information exchange between a source device capable of decoding an image and processing an image and a sink device capable of outputting an image is as follows.
  • the source device 100 decodes an image received through various paths such as broadcast, Blu-ray, Ultra Violet (UV), Secure Content Storage Association (SCSA), and internet protocol (IP) streaming.
  • a device for decoding or a device capable of video processing for image quality processing is generically referred to.
  • a set-top box a player of a storage medium such as a Blu-ray Disc (BD) player, a computer, and the like.
  • BD Blu-ray Disc
  • Video processing of the source device 100 may include a method of changing image quality such as wide color gamut (WCG) or high dynamic range (HDR) or other post processing.
  • WCG wide color gamut
  • HDR high dynamic range
  • the corresponding video source is not displayed on the display device based on display information provided by the sink device, for example, color gamut information or dynamic range information. It determines whether it can be played and, if necessary, converts it to a picture quality suitable for playback.
  • information about the image processing process may be provided so that information on which image processing process is used in the source device 100 may be provided.
  • the source device 100 may receive display related meta information or display option information from the sink device 200.
  • the source device 100 may provide the sink device 200 with UHD video metadata and processing option information of the processed video based on the received information.
  • the sink device 200 may express the video processed by the source device 100 based on data or information provided by the source device 100.
  • the sink device 200 may express video processed by the source device 100 within the color gamut information or dynamic range range suitable for the corresponding display.
  • FIG. 9 is a diagram illustrating an embodiment of transmitting and receiving information when a source device is connected to a sink device according to an embodiment of the present invention.
  • This example illustrates a case where a source device is connected to a sink device and a wired interface such as an HDMI or a display port.
  • a source device is connected to a sink device and a wired interface such as an HDMI or a display port.
  • the HDR of the source device 100 in the sink device 200 through the high dynamic range (HDR) data block of the EDID (Extended Display Identification Data)
  • the WCG function is controlled (Activation or Deactivation)
  • the source device reads the changed EDID of the Sink device using the same.
  • the source device When the source device is connected to the sink device via the wired interface, the source device applies a high level voltage to the + 5V power line of the wired interface and the sink device confirms that the source device is connected (S1).
  • the Sink Device applies the high level voltage to the Hot Plug Detect line, which is maintained at a low level voltage, and the source device is ready to connect to the Sink Device and read the display related information such as EDID. (S2).
  • the source device confirms that the Hot Plug Detect line transitions to a high level, requests the Sink device to read display related information through the Display Data Channel (S3), and the Sink Device sends the display related information through the Display Data Channel. Transfer to the device (S4).
  • the sink device updates the display-related information in the source device.
  • a low level voltage is applied to the Hot Plug Detect line and the voltage is maintained for a predetermined time, for example, at least 100 ms (S6).
  • the Sink device applies a high level voltage to the hot plug line (S7), and the source device detects the request and reads display related information through the Display Data Channel (S8). The sink device transmits the changed display related information through the display data channel (S9).
  • the sink device in response to the request of S3 or S8 described above, may transmit color gamut information and brightness information to the source device (included in S4 or S9).
  • the color gamut information is the color primary coordinate or BT.
  • Color gamut information such as 2020 may be included.
  • This information may be delivered through the color characteristics data block of DisplayID defined in the interface.
  • Brightness-related information may include a maximum brightness or a minimum brightness value, and according to the example disclosed in the embodiment, it may be delivered using a datablock defined in DisplayID, EDID, or EDID extension information of an interface.
  • the source device determines whether it is necessary to adjust the color or brightness information of the video based on the transmitted display related information. If it is determined that the source device needs to adjust the color or brightness, the video is converted based on the color mapping or dynamic range mapping information provided by the video, or the color or brightness information of the video by the source device itself. You can also use the method to provide.
  • the source device delivers the adjusted final image to the sink device.
  • color gamut or dynamic range related metadata of the final video may be transmitted through the InfoFrame of the interface.
  • Color gamut information can be transmitted using color gamut information (for example, BT. 709, BT. 2020, etc.) previously defined in the AVI infoFrame of the interface.
  • the dynamic range related information may convey maximum or minimum brightness information, and may be delivered through a method of defining a new InfoFrame or extending an AVI InfoFrame through the method described in the embodiments.
  • the source device needs to provide information about video processing processed in the source device when delivering the final image, video processing such as HDR information or WCG information using post_processing_type in InfoFrame through the method described in the embodiments. You can pass the processing information of the unit.
  • a color conversion function information such as a new electro-optical transfer function (EOTF) is defined and used or needs to be used for the final image, information about the new color conversion function information is flagged in the interface information. Or the like.
  • EOTF electro-optical transfer function
  • the sink device may determine whether the processing of the source device is appropriate, and determine whether the control of the source device is necessary through feedback. In this case, this may be controlled through a Control Option Flag in a datablock defined in DisplayID, EDID, EDID extension information, and the like described in the embodiments. If a result processed by the video processing of the source device such as WCG information or HDR information is appropriate, the sink device may control the same processing to continue by turning on a bit related to the WCG information or HDR information.
  • the sink device may control not to use the video processing currently performed in the source device by turning off WCG information or HDR information and related bits.
  • the sink device changes the video processing based on the information in the Control Option Flag.
  • UHD video metadata is changed in relation to the changed video processing
  • the color characteristics information and brightness information in the InfoFrame are changed, and post processing type (post_processing_type) can be updated according to the changed video processing process. .
  • post_processing_type post_processing_type
  • the sink device exemplifies information transmitted to the source device.
  • the source device when the source device processes the HDR related information, the source device may perform image processing suitable for the sink device based on the information that the sink device can reproduce.
  • the sink device may transmit appropriate information on the display brightness range, for example, a Sink Black Luminance Level, a Sink White Luminance Level, and a flag to control post processing of the source device to the source device.
  • a data block of DisplayID, EDID, or EDID extension may be used. A detailed example thereof is as follows.
  • FIG. 10 is a diagram illustrating an example of information delivered to a source device by a sink device according to an embodiment of the present invention.
  • This figure shows an example of information transmitted from the source device to the sink device using the Data Block of DisplayID.
  • This figure illustrates the offset field, value field, and description and format of the Data Block of DisplayID.
  • the offset field of the Data Block of the DisplayID is 0x00 and the value field is 0x14
  • the HDR data block may be represented.
  • the offset field when the offset field is 0x03, it may represent a flag (control option flag) for controlling post processing of the source device.
  • a flag control option flag
  • An example of a detailed value thereof will be described later.
  • the offset field is 0x04 or 0x05
  • information about the expressible brightness value (Sink Black Luminance Level, Sink White Luminance Level, etc.) of the sink device itself may be transmitted.
  • the Data Block of DisplayID may further include information necessary for video processing according to an offset field value.
  • an offset field value For example, when the offset field is 0x03, HDR related post processing related information may be delivered using a current reserved field.
  • the offset field or the value field may be changed to any value, and a detailed example of the control option flag and an example of display information of the sink device will be described below.
  • FIG. 11 is a diagram illustrating specific field values of the above-described embodiment as an example of information delivered by a sink device to a source device according to an embodiment of the present invention.
  • the control option flag of the data block of the DisplayID is a field for controlling (on / off) post processing performed by the source device. According to an embodiment of the present invention, it can be used to represent various options to be provided in the future on the interface of the source / sink device. Here, the options related to HDR and WCG are disclosed.
  • the offset field of the Data Block of the DisplayID is 0x03
  • the HDR processing of the source device may be activated or the WCG processing of the source device may be activated.
  • the lower two bits each represent information.
  • the field disclosed in this embodiment may be signaled by a user's request or controlled by a functional determination of the sink device (when the processing capability of the sink device is higher).
  • information exchange between sink-source devices may be performed for a function of frame rate control (FRC) and multi-layer video enhancement using reserved bits.
  • FRC frame rate control
  • the offset field or the value field can be changed as an arbitrary value.
  • FIG. 12 is a diagram illustrating a detailed example of a control option flag according to an embodiment of the present invention disclosed.
  • Information for controlling the HDR and WCG processing performed at the source device may be set in the lower two bits of the value field of the offset field indicating the control option flag. Combination of two flags can be used as in the example below.
  • the value field when the value field is 00000000, it indicates that no processing is performed on the source device. For example, when the value field is 10000000, this indicates information on HDR processing of the source device, and may indicate an option of processing only HDR in the source device. As another example, when the value field is 01000000, this may indicate information on WCG processing of the source device and indicate an option of processing only WCG in the source device.
  • the value field when the value field is 11000000, it indicates control option information for the source device to process both HDR and WCG based on the information transmitted from the sink device, and this value may be used as an initial value.
  • FIG. 13 is a diagram illustrating a detailed example of the Sink Device Dynamic Range information according to the embodiment of the present invention described.
  • the sink device may inform the source device of brightness information that can be expressed by the sink device by transmitting the dynamic range information of the sink device to the source device using a data block of DisplayID.
  • the information on the dynamic range of the sink device refers to the maximum and minimum physical brightness values (nit or cd / m2 units) for representing the dynamic range that can be expressed in the display of the sink device.
  • this indicates dynamic range information of the sink device.
  • the lowest level brightness information of the sink device may be represented by using eight bits higher than the lower eight bits.
  • the least significant 1 bit of the value field may indicate the brightness information of the lowest level of the sink device, and the remaining bits of the value field may indicate the brightness information of the highest level of the sink device.
  • the minimum brightness information (represented by sink_black_luminance_level) and the maximum brightness information (sink_white_luminance_level) of the sink device which may be represented using this information may be represented as follows.
  • the minimum brightness information (sink_black_luminance_level) of the sink device is a value indicating the minimum brightness that can be expressed on the display and may be expressed in units of 0.0001 for a range of 0 to 0.05 in consideration of the general minimum brightness. That is, when the physical brightness of the display is called Brightness_black (cd / m2 unit), the actual minimum brightness may be calculated from the minimum brightness information sink_black_luminance_level as follows.
  • Brightness_black sink_black_luminance_level x 10000
  • 0.05 cd / m2 is used as the minimum reference brightness, and 500, which is multiplied by 10000 (decimal), can be transmitted.
  • the maximum brightness information (sink_white_luminance_level) of the sink device is a value representing the maximum brightness that can be expressed on the display and may be expressed in units of 100 for the range of 100 to 10000 in consideration of the general maximum brightness. That is, when the physical brightness of the display is called Brightness_white (in cd / m 2), the actual maximum brightness may be calculated from the maximum brightness information sink_white_luminance_level as follows.
  • Brightness_white sink_white_luminance_level x 100
  • a reference monitor may use 100 cd / m2 as the maximum reference brightness and transmit a value of 1, which is the quotient of 100 (decimal).
  • the maximum brightness information of the sink device and / or the minimum brightness information of the sink device may indicate the performance of the brightness range of the display. That is, the maximum brightness information of the sink device and / or the minimum brightness information of the sink device according to an embodiment of the present invention may be used in consideration of the performance of the display, and the maximum brightness information of the content required for rendering the content in an optimal environment ( Desired content Max Luminance data) and / or Desired content Min Luminance data.
  • Another embodiment of transferring display related information from a sink device to a source device is disclosed.
  • FIG. 14 is a diagram illustrating Display Parameters Data Block of DisplayID as display related information delivered from a sink device to a source device according to an embodiment of the present invention.
  • the Display Parameters Data Block of the DisplayID may include overall parameters of the monitor.
  • the Display Parameters Data Block is a horizontal or vertical size (0x03 or 0x04 offset field), the number of horizontal or vertical pixels (0x05 or 0x06 offset field), and a function that can be supported by the monitor.
  • Information about the flag (offset field is 0x0B), gamma used in the transfer function (offset field is 0x0C), display aspect ratio (offset field is 0x0D), and pixel bit depth (offset field is 0x0E).
  • the Display Parameters Data Block may include the above-described Control option flag information and sink device dynamic range information. That is, according to an embodiment of the present invention, the sink device may transmit the Display Parameters Data Block information including the control option flag and the sink device dynamic range information described above to the source device.
  • the control option flag may be indicated.
  • the offset field is 0x10 or 0x11
  • the representable brightness value of the sink device itself (Sink Black Luminance Level, Sink White Luminance Level, etc.) ) May contain information about.
  • the value field for the control option flag when the offset field is 0x0F, the value field for the Sink Device Dynamic Range information and the description of each value field when the offset field is 0x10 or 0x11 are as illustrated in FIGS. 11 to 13. .
  • transfer curve information suitable for HDR may be transmitted through transfer characteristic gamma.
  • Another embodiment of transferring display related information from a sink device to a source device is disclosed.
  • FIG. 15 illustrates Display Device Data Block as display related information described in the embodiment of the present invention.
  • An embodiment of the present invention shows an example of information transmitted from the source device to the sink device using the Display Device Data Block.
  • the Display Device Data Block includes information that can indicate characteristics of the display panel itself.
  • Display Device Data Block includes the type of display device (offset field is 0x03), the operating mode of display device (offset field is 0x04), the image size that can be represented by the number of pixels (offset field is 0x05 to 0x08), and display aspect ratio (offset field). 0x09 to 0x0A), bit depth (offset field is 0x0E), response speed (offset field is 0x0F), and the like.
  • the control option flag information and the sink device dynamic range information disclosed in the display panel together with the display device data block may be transmitted to the source device.
  • the offset field of the Display Device Data Block when the offset field of the Display Device Data Block is 0x0F, it may indicate a control option flag, and when the offset field of the Display Device Data Block is 0x10 or 0x11, it may indicate sink device dynamic range information.
  • An example of the value field when the offset field of the Display Device Data Block is 0x0F and an example of the value field when the offset field of the Display Device Data Block is 0x10 or 0x11 may be as illustrated in FIGS. 11 to 13 or 14. .
  • the offset field or the value field can be changed to any value.
  • the sink device may transmit the control option flag and the sink device dynamic range information using the Vendor-Specific Data Block of the DisplayID.
  • the Vendor-Specific Data Block is data used when the sink device delivers information not defined in the Data Block.
  • the vendor-specific data block may include the control option flag and the sink device dynamic range information described above in the data block.
  • the sink device may use a Product Identification Data Block of DisplayID.
  • the Product Identification Data Block of the DisplayID may include information about the manufacturer of the display device, the serial number of the display device, and the Product ID.
  • the sink device can check the information of each product through the manufacturer of the display device, the manufacturing date, and the product ID, the sink device can transmit the dynamic range information corresponding to each product to the source device.
  • the Control option flag is transmitted through any one of the above-described embodiments.
  • the sink device may transmit the display related information to the source device using a Transfer Characteristics Data Block.
  • the transfer characteristics data block is a data block for transferring information related to the transfer curve of the display. Transfer characteristics data block This data block is used to display an arbitrary gamma function or to display a piecewise linear curve when it is displayed. Since there is no part defining peak luminance and lowest luminance of the display panel, the sink device can transmit the dynamic range information including the control option flag and the sink device dynamic range information previously described to the transfer characteristics data block to the source device.
  • FIG. 16 illustrates another example in which a sink device delivers display related information to a source device according to an embodiment of the present invention.
  • the sink device may transmit display related information to the source device using Consumer Electronics Association (CEA) EDID extension information.
  • CEA Consumer Electronics Association
  • the sink device may deliver CEA EDID extension information to the source device, including device attribute information supported by the CE Sink device, in addition to the EDID defined by VESA of CEA-861.
  • the sink device can deliver the dynamic range information illustrated in this figure to the source device.
  • the extension data block of the CEA EDID extension information may include a Video, Audio, Speaker Allocation, Vendor-Specific, and Video Capability data block.
  • the extension data block includes a predefined tag code in bits 5-7 of the first byte of each data block to identify each of these data blocks.
  • bits 5-7 of the first byte of the CEA EDID extension data block may include a tag code indicating dynamic range information.
  • the dynamic range information in the CEA EDID extension data block is 8 bits higher than the lower 8 bits of the lower brightness level of the sink device as illustrated above.
  • Information, LSB information of the sink device Lwest Brightness level of Sink device (LSB)) and the highest brightness information of the sink device (Highest Brightness level of Sink device (total 7 bits)).
  • the sink device may transmit the maximum / minimum brightness information of the sink device among the display related information to the source device by using the EDID extension information of the CEA.
  • the maximum brightness information of the sink device may represent the maximum brightness information that can be processed by the sink device
  • the minimum brightness information of the sink device may represent the minimum brightness information that can be processed by the sink device. have.
  • information to be delivered from the source device to the sink device is as follows.
  • the source device determines whether the brightness and the color gamut of the content are suitable for the sink device based on the display related information and the color gamut related information of the sink device, and if necessary, the source device can convert the brightness and the color gamut of the content. have.
  • the source device when processing an ultra high definition image, the source device must transmit information about what processing is performed and information about brightness and color gamut after the image processing to the sink device. This is for controlling the post processing of the sink device. An embodiment thereof will be described in detail as follows.
  • the source device may transmit information related to ultra high definition image processing to the sink device through an InfoFrame defined in CEA 861.
  • 17 is a diagram illustrating information to be delivered from the source device to the sink device according to an embodiment of the present invention.
  • Color gamut information among InfoFrames defined as interface information of a source / sink device in CEA 861 may be transmitted through an AVI InfoFrame.
  • the source device delivers information on the ultra-high definition image processing to the sink device through the InfoFrame.
  • image processing information such as brightness information, arbitrary color gamut information and HDR information or WCG information of an ultra-high definition image may be transmitted to the sink device.
  • the source device may transmit information on post processing, brightness information of content after post processing, content brightness information before post processing, and color expression range information to the sink device.
  • the information on the post processing includes information on the state of the content and may be used as a response to the request of the sink device.
  • the brightness information of the content after the post processing may include minimum brightness information (black_luminance_level) and maximum brightness information (white_luminance_level) of the content.
  • Content minimum brightness information (orig_black_luminance_level) and maximum brightness information (orig_white_luminance_level) before post processing may be included.
  • Color representation range information of the content is represented by Orig_color_gamut information, which will be described in detail.
  • the InfoFrame Type Code indicates the type of this InfoFrame. For example, when this value is 0x07, it may indicate a frame including information on UHD image processing.
  • the information on the UHD image processing may be referred to as dynamic range and mastering information.
  • the dynamic range mastering information according to an embodiment of the present invention may include dynamic range related information of content.
  • the InfoFrame Version Number represents version information of this frame
  • the Length of HDR InfoFrame represents the length information of the HDR InfoFrame.
  • the P3 to P0 fields of Data Byte 1 are fields for controlling (on / off) a post processing process performed by a source device with post_processing_type_flag.
  • option information related to HDR information or WCG information is disclosed using this field, and a detailed example thereof will be described later.
  • contents color gamut and / or container color gamut may be signaled using this field and / or original color gamut information (Orig_color_gamut) to be described later. Detailed description thereof will be described later.
  • the R2 to R0 fields of Data Byte 1 indicate reserved bits, and the E0 field indicates whether to use a new color conversion function (EOTF, etc.) through new_EOTF_flag.
  • the reserved bits are flags that can be used when a new EOTF suitable for HDR information is defined later.
  • Data Byte 2 may include minimum brightness information expressed in the content, which is expressed as black_luminance_level.
  • the maximum 8 bits of the minimum brightness information are represented in the Data Byte 2 field.
  • the minimum brightness information of the content may be expressed in units of 0.0001 for the range of 0 to 0.05 in consideration of the general minimum brightness. That is, when the physical brightness of the display is called Brightness_black (cd / m2 unit), it has the following relationship.
  • Brightness_black black_luminance_level x 10000
  • 0.05 cd / m2 is used as the minimum reference brightness
  • 500 which is a value multiplied by 10000 (decimal) can be expressed as brightness information.
  • Data Byte 3 may include a least significant 1 bit of content minimum brightness information (black_luminance_level) and 7 bits of content maximum brightness information (white_luminance_level).
  • the maximum brightness information is information for indicating the maximum brightness expressed in the content and may represent a value in units of 100 for the range of 100 to 10000 in consideration of the general maximum brightness. That is, when the physical brightness of the display is called Brightness_white (in cd / m2), it has the following relationship.
  • Brightness_white white_luminance_level x 100
  • 100 cd / m2 is used as the maximum reference brightness, and 1 value, which is the quotient of the value divided by 100 (decimal number), can be expressed as brightness information.
  • Data Byte 4 can represent the highest 8 bits of the original minimum brightness information (Orig_black_luminance_level) of the content
  • Data Byte 5 is the lowest 1 bit of the original minimum brightness information (Orig_black_luminance_level) of the content
  • the original maximum brightness information of the content Orig_white_luminance_level
  • the original minimum brightness information (Orig_black_luminance_level) of the content indicates the minimum brightness of the content before HDR processing in the source device.
  • the expression method and range are the same as black_luminance_level, and the implementation of the field in this embodiment may give an option to transmit only when the HDR information is indicated as on in post_processing_type.
  • the original minimum brightness information (Orig_white_luminance_level) of the content indicates the maximum brightness of the content before HDR processing in the source device.
  • the expression method and range are the same as white_luminance_level, and similarly, in this embodiment, the field implementation may give an option to transmit only when the HDR information is marked as on in post_processing_type.
  • the above-described original minimum brightness information (Orig_black_luminance_level) and / or original minimum brightness information are required.
  • (Orig_white_luminance_level) may be used.
  • the brightness range distinguished from the brightness range of the above-described content may include the brightness range before and after image processing, the brightness range used for encoding, the brightness range of the mastering display, the brightness range of the target display, and the brightness range of the container. have.
  • the brightness range of the container may represent the maximum / minimum brightness range of the container when the brightness range of the original content is different from the brightness range of the container.
  • the HDR When the content produced by the LDR is encoded and transmitted, when the content having a narrow brightness range is transmitted to a container having a wide brightness range, when the content having a wide brightness range is transmitted to a container having a narrow brightness range, etc. It may include.
  • the brightness range of the container may be distinguished from the brightness range of the content and may indicate the brightness range of the display.
  • the aforementioned mastering display may represent a display in which a mastering process is performed according to the brightness and / or color information of the content and / or the display. Therefore, the brightness range of the mastering display may represent the brightness range supported by the display.
  • Data Byte 6 may include original color gamut information (Orig_color_gamut) and S3 to S0 may include reserved bits.
  • the original color gamut information (Orig_color_gamut) indicates a color expression range of the content before WCG processing in the source device. Detailed examples of the standard color representation range will be described later.
  • the field implementation may give an option to transmit only when the WCG is marked as on in post_processing_type.
  • the post_processing_type value is set to 0000 (no processing).
  • original color gamut information (Orig_color_gamut) may be used to distinguish contents color gamut and container color gamut and transmit information on each color gamut to the display device.
  • BT. 709 content created by BT it may include the case of transmitting by encoding 2020.
  • Another embodiment of the present invention by using the colorimetry definition (C1, C0) and extended colorimetry (EC2, EC1, EC0) of Data Byte 2, 3 in the AVI Info Frame of CEA 861-F to express the container color gamut By using Orig_color_gamut, contents color gamut can be expressed.
  • another embodiment of the present invention uses the colorimetry definitions (C1, C0) and extended colorimetry (EC2, EC1, EC0) of Data Byte 2, 3 in the AVI Info Frame of CEA 861-F.
  • the gamut can be expressed and container color gamut can be expressed using Orig_color_gamut.
  • the container color gamut is expressed using Orig_color_gamut, and Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-
  • the contents color gamut may be expressed using x and / or white-y.
  • the container color gamut may represent a display color gamut of the display as a meaning distinguished from the content color gamut.
  • Orig_color_gamut, Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x and / or White-y may be color primaries (eg For example, it may include chromaticity coordinates of three primary colors) and / or white colors.
  • the above-described original color gamut information (Orig_color_gamut) may be used.
  • the color gamut distinguished from the content color gamut of the above-described content includes the color gamut before and after image processing, the color gamut of the container, the color gamut used during encoding, the color gamut of the mastering display, and the target.
  • the color of the display can be included.
  • the mastering display may refer to a display in which a mastering process is performed according to the brightness and / or color information of the content and / or the display. That is, the color gamut of the mastering display may indicate a color gamut that can be supported by the display.
  • Data Byte 7 to Data Byte 16 are fields that can indicate arbitrary color gamut information. Any color gamut information in this figure is illustrated as Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x, White-y.
  • Red-x represents the x coordinate of the R color of the color space (for example, CIE 1931) in binary notation.
  • the present embodiment uses a total of 10 bits and is higher than Data Byte 9. 8 bits and upper 2 bits of Data Byte 6 can be used.
  • Red-y is the binary representation of the y coordinate of the R color in the color space (eg CIE 1931).
  • this color information is represented by using all 10 bits, and the upper 8 bits of Data Byte 10 and the lower 2 bits of Data Byte 6 may be used.
  • the source device may transfer color gamut information using Data Byte 7 to Data Byte 16.
  • the original color gamut information may be transmitted using only the information corresponding to Data Byte 7 to Data Byte 16 without using the original color gamut information disclosed in FIG. 11 or the original color gamut information (Orig_color_gamut).
  • the information corresponding to Data Byte 7 to Data Byte 16 may be additionally used only when the original color gamut information (Orig_color_gamut) indicates a specific value.
  • Data Byte 17 may include an E3 field, an E2 field, an E1 field, an E0 field, and / or a Number of Coefficients field.
  • the E3 to E1 fields may indicate the type of EOTF used by the content producer for the optimal picture quality of the HDR content as the EOTF_type.
  • a plurality of EOTF standards may be established and content creators may arbitrarily define and use EOTFs. Details of the contents indicated by the EOTF_type value will be described later.
  • the E0 field may indicate private_EOTF_coeff_flag. If this field value is 1, this field may indicate that a separate coefficient according to EOTF_type is used. For example, when different coefficients are used for the same function, such as when a suitable EOTF coefficient is different according to different maximum brightness, an embodiment of the present invention can transmit an appropriate coefficient for this using this field. have.
  • a separate parameter may be set and signaled through the EOTF_type. If this field value is 0, this field may indicate that a default parameter used universally is used.
  • the parameter and the coefficient may be used in the same meaning.
  • the E0 field when the E0 field is 1, Data Byte 18 to 18 + N may be additionally used. If 0, the Data Byte 18 to 18 + N may not be used.
  • the Number of Coefficients field may indicate the number of coefficients used when the aforementioned E0 field indicates 1.
  • Data Byte 18 may include an EOTF_additional_info field.
  • the EOTF_additional_info field may indicate additional information according to EOTF_type when additional information needs to be transmitted according to EOTF_type. For example, when a suitable EOTF coefficient is different according to different maximum brightness, this field may include information on a target max brightness.
  • this field when it is necessary to transfer coefficients of a plurality of EOTF functions according to various conditions with respect to a given EOTF_type, for example, the coefficients vary according to the maximum brightness and all the coefficients according to various maximum brightnesses are all provided. If required to pass, this field can be used to provide information about each coefficient. In this case, a method of separately specifying a field indicating the number of conditions and specifying EOTF_target_max_brightness and EOTF_Coefficient 1 to N for each condition may be used.
  • Data Byte 18 + 1 to 18 + N may include EOTF_Coefficient 1 to N fields, respectively.
  • the EOTF_Coefficient 1 to N fields may indicate parameter values used when the E0 field is 1. This field may also be used to send any EOTF function.
  • the above information may be assumed to be transmitted from source to sink on an interface. However, this information may be transmitted through separate metadata delivery methods inside the video (eg, SEI message) and / or storage. Accordingly, the same information may be defined in the video source. Otherwise, additional metadata about the corresponding content may be separately supplied from the source device through an external server.
  • the InfoFrame shown in this figure may be named Dynamic Range and Mastering InfoFrame.
  • FIG. 18 illustrates a detailed example of post processing type information disclosed according to an embodiment of the present invention.
  • display related information and color gamut information may be transmitted to the sink device through the InfoFrame.
  • the P3 to P0 fields of InfoFrameData Byte 1 indicate post_processing_type and indicate options related to HDR information or WCG information.
  • the post processing type is as illustrated in this figure.
  • the post_processing_type is 0000, it indicates that no processing is performed on the source device, and if it is 0001, it indicates that the source device has performed dynamic range mapping.
  • the post_processing_type is 0010, it indicates that the source device has performed color gamut mapping, and if the post_processing_type is 0011, it indicates that the source device has processed accordingly based on the information transmitted by the sink device. This value can be used as an initial value.
  • the post_processing_type of 0110 ⁇ 1000 can be used later for information exchange between sink-sources for the function of multi-layer video enhancement, and 1001-1110 can be used for user private.
  • the post_processing_type when the post_processing_type is 1111, this may indicate that the original color gamut information (Orig_color_gamut) is used to separately signal contents color gamut and container color gamut. That is, an embodiment of the present invention may use a post_processing_type field when signaling for color gamut having a meaning distinguished from contents color gamut is required. In the same manner, another embodiment of the present invention may use a post_processing_type field when signaling for a dynamic range of meaning that is distinguished from a contents dynamic range is required. In this case, for example, 1110 may be allocated as post_processing_type.
  • FIG. 19 is a view showing a detailed example of the original color gamut information (Orig_color_gamut) disclosed in accordance with an embodiment of the present invention.
  • the original color gamut information (Orig_color_gamut) of the content may be transmitted to the sink device.
  • the color gamut information (Orig_color_gamut) field of the original content is 0000
  • the color of the original content is REC. 709
  • the color of the original content is BT. 2020 NCL.
  • this field is 0010, 0011, 0100, and 0101
  • the original content colors are xvYCC, DCI-P3, Adobe RGB, and BT. Indicated according to 2020 CL.
  • FIG. 20 illustrates another example of transmitting color information of an image transmitted from a source device to a sink device according to an embodiment of the present invention.
  • the embodiment of the present invention extends the format of AVI InfoFrame version 3 to sink post processing type information (post_processing_type_flag), color conversion function information (new_EOTF_flag), and brightness information (black_luminance_level or white_luminance_level) of an image processed by a source device.
  • sink post processing type information post_processing_type_flag
  • color conversion function information new_EOTF_flag
  • brightness information black_luminance_level or white_luminance_level
  • black_luminance_level or white_luminance_level may be delivered to the sink device.
  • the disclosed AVI InfoFrame may transmit information of an image processed by a source device to a sink device according to a data byte.
  • Data byte 14 to Data byte 29 may include Data byte 1 to Data byte 16 information illustrated in FIGS. 11 to 13, respectively.
  • the source device may transmit information providing information on the performed post processing, brightness information of the content after the post processing, content brightness information before the post processing, and color expression range information to the sink device. .
  • An embodiment of the present invention can extend the format of AVI InfoFrame version 3 to deliver Orig_color_gamut, RGBW index, EOTF_type, private_EOTF_coeff_flag, Number of Coefficients, EOTF_additional_info and / or EOTF_Coefficient to the sink device and define on the interface of the source / sink device
  • the above information can be delivered using the new AVI InfoFrame.
  • Data Byte 30 to Data Byte 31 + N may include Data Byte 17 to Data Byte 18 + N information illustrated in FIGS. 11 to 13, respectively.
  • 21 is a diagram illustrating embodiments of a signal processing device and its operation according to an embodiment of the present invention.
  • an embodiment of a signal processing apparatus includes a source device 100 and a sink device 200.
  • the source device 100 includes a decoder 110, a color gamut mapping unit 120, a dynamic range mapping unit 130, a post processing unit 140, a metadata processor 150, and an option controller 160. .
  • the color gamut mapping unit 120, the dynamic range mapping unit 130, and the post processing unit 140 of the source device 100 may be referred to as a video processing unit, and the color gamut mapping unit 120 and the dynamic range of the video processing unit may be referred to as a video processing unit.
  • the mapping unit 130 and the post processing unit 140 may operate when necessary separately, regardless of the preceding block, during video processing.
  • the sink device 200 includes a source device controller 210, a metadata processor 220, and a panel controller 230.
  • the source device 100 When the source device 100 is connected to the sink device 200 through an interface, information may be transmitted and received according to the protocol illustrated in FIG. 9. Transmission and reception of information between devices described below are transmitted and received via an interface.
  • the source device 100 decodes the encoded UHD video stream, post-processes the decoded UHD video as necessary, or processes the UHD video according to the display capability of the sink device 200, and provides the processed UHD video to the sink device. can do.
  • the sink device 200 may receive and display UHD video decoded by the source device 100.
  • the sink device 200 may provide the source device 100 with information about the display capability of the sink device 200 to display the UHD video from the source device 100.
  • the sink device 200 may receive and display the UHD video that can be expressed.
  • the option controller 160 of the source device 100 may request display related information by transmitting a video option signal through an interface with the sink device 200.
  • the display related information may include display color gamut information and display brightness related information.
  • the video option information transmitted from the source device 100 to the sink device 200 may be according to the example of FIGS. 11 to 14.
  • the metadata processor 150 of the source device 100 may transmit metadata about UHD video to the sink device 100, and the sink device 220 may transmit metadata related to the display to the source device 100. have.
  • the decoder of the source device 100 may receive and decode the encoded UHD video stream.
  • the color gamut mapping unit 120 maps the color gamut information of the decoded UHD video.
  • the color gamut information of the UHD video is mapped using the display related information of the sink device 200 or based on metadata in the UHD video. You can change it.
  • the dynamic range mapping unit 130 may map the dynamic range of the decoded UHD video. As described above, the dynamic range mapping unit 130 uses the display related information of the sink device 200 or based on metadata in the UHD video. You can map and change the dynamic range.
  • the post processing unit 140 may perform video post processing on the decoded UHD video, and likewise, may perform video post processing based on display related information.
  • the metadata processor 150 may transmit metadata of the UHD video to the sink device 200 and receive display related metadata from the sink device.
  • the option controller 160 may transmit video option information to the sink device 200 and receive display option information from the sink device 200. Examples of the display option information transmitted from the sink device 100 to the source device 200 are as illustrated in FIGS. 10 to 16. Meanwhile, the video option information transmitted from the source device 100 to the sink device 200 may be based on the examples of FIGS. 17 to 20.
  • the source device controller 210 of the sink device 200 may transmit a control signal for controlling the source device 100 and may receive a user control signal from a user.
  • the metadata controller 220 of the sink device 200 may receive metadata of the UHD video from the source device 100 and transmit metadata related to the display device to the source device 100.
  • the metadata processor 220 may transmit the video processing control signal to the source device controller 210 so that the source device controller 210 may transmit the control signal.
  • the panel controller 230 may control the display panel according to the display control signal of the metadata processor 220.
  • Embodiments of the present invention may enable video processing adaptive to the display. That is, embodiments of the present invention may vary in information exchange, video processing, and display method between source-sink devices, respectively, according to the performance of the sink device 200.
  • embodiments of the present invention may vary in information exchange, video processing, and display method between source-sink devices, respectively, according to the performance of the sink device 200.
  • the sink device 200 is a high-end UHD sink device.
  • the sink device 200 may transmit display related metadata to the source device 100.
  • the display related information may include color gamut information (or color primary information corresponding to RGBW) of the display and display brightness range related information (eg peak luminance information and black luminance information).
  • the metadata processor 220 of the sink device 200 may process display related information.
  • the metadata processor 220 of the sink device 200 may store display related information and refer to it when processing and displaying content, and may request the information from the source device 100 again as needed.
  • the source device 100 may also transmit control signals of the source device 100 as well as metadata related to color and brightness of the display.
  • the control signal of the source device 100 may include information on what kind of video processing the source device 100 is capable of.
  • the control signal of the source device 100 may be generated based on the displayable color range transmitted by the source device controller 210 of the sink device 200, and may be processed by default without information received from the sink device 200. Can also be generated upon request.
  • the process of exchanging information between the source and sink devices is performed when two devices are connected, but when the broadcast or streaming content is input while the source and sink devices are connected, or when the content is changed or when a specific scene is changed, etc. Information exchange between the two devices can be performed again.
  • video processing may be processed as follows.
  • the post processing unit 140 of the source device 100 determines whether to perform post-processing on the decoded UHD video based on the display related information of the sink device 200 from the metadata processor 150, and a control signal therefor. You can output If the source device 100 may perform image processing related to WCG information or HDR information of the UHD video, for example, color gamut mapping or dynamic range mapping. If the display performance of the sink device 200 is sufficient to reproduce the UHD video after the post-processing of the video, the option controller 160 of the source device 100 may transfer information about it to the post processing unit 140. When the display color gamut information or brightness information of the sink device 200 may be the basis for changing the WCG information or the HDR information of the video, the metadata processor 150 may include the color gamut mapping unit 120 or the dynamic range mapping unit ( 130 may transmit display-related metadata.
  • the post processing unit 140 of the source device 100 may perform post processing using metadata transmitted with the video, for example, a WCG SEI message or an HDR SEI message.
  • the video decoder 110 or the post processor 140 may increase the quality of the output video by decoding the enhancement layer data when the enhancement layer data is transmitted according to scalable coding.
  • the source device 100 may perform the image quality enhancement function on its own.
  • the metadata processor 150 transmits the UHD video metadata including the WCG information or the HDR information of the decoded or post-processed video to the sink device 200.
  • the option controller 160 may transmit the processed video processing information to the source device controller 210 in the video option information.
  • the video option information may follow the example of FIGS. 17 to 20.
  • the decoder 110 may transfer the WCG information or the HDR information of the video to the sink device 200 for reproduction without additional processing.
  • the option controller 160 may signal that there is no separate processing for the video.
  • the sink device 200 may allow the UHD video to be displayed through the display device.
  • the sink device 200 may reproduce the image processed through the source device 100 as it is, but may determine whether the image transmitted by the source device 100 is actually processed for display.
  • the source device controller 210 of the sink device 200 may output a control signal to the source device 100.
  • the source device controller 210 of the sink device 200 may determine a problem portion of the video processing of the source device 100 to inform that the corresponding video processing is turned off. This control function can be turned on / off at the request of the user.
  • the sink device 200 may output a video processing option that is processed or processed by the source device 100 to the user, and provide the user with a menu or interface (UI) for controlling the same.
  • UI menu or interface
  • the sink device 200 analyzes information of the metadata processor 220 of the sink device 200 and then adjusts the display device through the panel controller 230. In this way, a playback environment suitable for content can be provided.
  • the sink device 200 is a conventional UHD sink device.
  • An example of the same parts as in the first embodiment is in accordance with the first embodiment.
  • the sink device 200 transmits metadata about the existing UHD sink device to the source device 100.
  • the metadata of the existing UHD sink device may include display color gamut information (or color primary information corresponding to RGBW) and display brightness related information (eg, peak luminance information and black luminance information).
  • the metadata processor 150 of the source device 100 may receive and process metadata about the existing UHD sink device.
  • the option controller 160 of the source device 100 determines whether or not to go through the post-processing process on the decoded UHD video based on the display-related information obtained from the metadata processor 150 and outputs a control signal.
  • the color gamut mapping unit 120 or the dynamic range mapping unit 130 of the source device 100 may map color gamut information or dynamic range information of the UHD video to information suitable for a display device.
  • the source device 100 may convert it based on meta data in the video data, for example, a WCG SEI message, an HDR SEI message, or the like, or may perform this according to its own function. If the WCG information or the HDR information of the video data is changed, the option controller 160 may store the video option information in the video option information and transmit the same to the sink device 200. Can follow.
  • the source device 100 can transmit the video to the sink device 200 without additional video processing.
  • the option controller 160 of the source device 100 may transmit the metadata, WCG information, or HDR information of the UHD video to the sink device 200 through the video option signal.
  • the display device of the sink device 200 may play UHD video. If it is determined that the WCG information or the HDR information of the UHD video received by the sink device 200 is not appropriate for the display device of the sink device 200, the source device controller 210 transmits a control signal thereto to the source device 100. Can be delivered to. A user may adjust a function related to a display device via a user menu or interface (UI).
  • UI user menu or interface
  • FIG. 22 is a diagram illustrating a configuration of an EOTF type according to an embodiment of the present invention.
  • the EOTF type is 000, this may indicate a reserved bit, and if it is 001, this may indicate that a conversion curve of EOTF_type1 is used, and if 010, this may indicate that a conversion curve of EOTF_type2 is used. If 011-111, this may indicate that the user is private.
  • FIG. 23 illustrates a method for signaling a DCI-P3 color gamut according to an embodiment of the present invention.
  • the present invention can provide the following embodiments to define a new color gamut, such as DCI-P3.
  • An embodiment of the present invention uses the C1 and C0 fields included in Data Byte 2 in the existing AVI InfoFrame 17010 to signal that the EC2 to EC0 fields included in Data Byte 3 are used to expand color gamut. Can be.
  • DCI-P3 may be signaled using reserved bits of the EC2 to EC0 fields. That is, when EC2 to EC0 is 111, this may indicate that DCI-P3 is used. (17030, 17040)
  • Another embodiment of the present invention may signal that there is a colorimetry extension using reserved bits of EC2 to EC0 fields included in Data Byte 3 in the existing AVI InfoFrame 17010. That is, if EC2 to EC0 is 111, this may indicate that there is a colorimetry extension.
  • the DCI-P3 may be signaled using the S3 to S0 fields which are reserved bits included in Data Byte 19 in the above-described AVI InfoFrame or Data Byte 6 in the above-mentioned Dynamic Range and Mastering InfoFrame. . At this time, 3 bits or less or more bits may be used as necessary. Furthermore, it is possible to signal that an arbitrary color gamut is used using the S3 to S0 fields which are the aforementioned reserved bits. (17070)
  • 24 is a diagram illustrating a method for signaling a DCI-P3 color gamut according to another embodiment of the present invention.
  • An embodiment of the present invention uses the C1 and C0 fields included in Data Byte 2 in the existing AVI InfoFrame 18010 to signal that the EC2 to EC0 fields included in Data Byte 3 are used for color gamut extension. Can be.
  • a reserved bit of EC2 to EC0 fields included in Data Byte 3 in the existing AVI InfoFrame 1180 may be used to signal that there is a colorimetry extension. That is, if EC2 to EC0 is 111, this may indicate that there is a colorimetry extension.
  • DCI-P3 may be signaled using a reserved bit in a dynamic range and mastering infoframe according to an embodiment of the present invention. For example, as shown in this figure, a reserved bit included in Data Byte 1 may be used. Further, it may signal that an arbitrary color gamut is used using the reserved bit described above. (18050)
  • 25 is a diagram illustrating a method for signaling a DCI-P3 color gamut according to another embodiment of the present invention.
  • One embodiment of the present invention may define a new InfoFrame to signal a new color gamut such as DCI-P3.
  • a new InfoFrame to signal a new color gamut such as DCI-P3.
  • an InfoFrame having an InfoFrame Type of 0x08 may be newly defined and a bit allocated for a new color gamut may be signaled that a new color gamut is used.
  • Another embodiment of the present invention is a method of extending the existing AVI InfoFrame format, as shown in this figure, may newly define Data Byte 14.
  • the C1 and C0 fields included in Data Byte 2 in the existing AVI InfoFrame it may signal that the EC2 to EC0 fields included in Data Byte 3 are used for color gamut extension.
  • the reserved bit of the EC2 to EC0 fields included in Data Byte 3 in the existing AVI InfoFrame may be used to signal that there is a colorimetry extension. That is, if EC2 to EC0 is 111, this may indicate that there is a colorimetry extension.
  • FIG. 26 is a diagram illustrating a method for delivering information on a transfer function that can be processed by a sink device according to one embodiment of the present invention.
  • This figure may show an example of information transmitted from the source device to the sink device using the Data Block of DisplayID, and the detailed description of the case where the offset field shown in this figure is 0x00 to 0x05 has been described above.
  • an embodiment of the present invention may additionally transmit transfer function related information of a sink device by allocating an offset field.
  • an embodiment of the present invention may signal a predetermined transfer function (BT. 1886, SMPTE ST 2084, etc.) and may signal detailed information on an arbitrary transfer function.
  • BT. 1886, SMPTE ST 2084, etc. a predetermined transfer function
  • this field may indicate a Transfer Function Type flag.
  • the Transfer Function Type flag may signal a Transfer Function Type.
  • Transfer Function is BT. 1886, SMPTE ST 2084, Traditional gamma-SDR Luminance Range, Traditional gamma-HDR Luminance Range, and the like.
  • the transfer function may include an EOTF (Electro Optical Transfer Function).
  • this field may indicate Unspecified TF details.
  • An embodiment of the present invention may express this through separate signaling when supporting any Transfer Function.
  • Transfer Function Type flag 0x80 (hexadecimal) or 10000000 (binary).
  • a type of each transfer function is signaled in consideration of a case in which a variety of transfer functions are also used, and the number of required coefficients, bitdepth, and maximum / minimum brightness information according to each type may be used. Can send information.
  • the transfer function type may refer to one of several types of transfer functions, and when transferring a plurality of transfer functions, a bit (for example, a number of types field) indicating that the plurality of transfer functions is used is separately allocated. Then, this field can be used to indicate the order of a plurality of transfer functions. Detailed description of the information included in the Unspecified TF details will be described later.
  • this field may indicate Unspecified TF coefficients.
  • One embodiment of the present invention may use this field to deliver coefficient information for any Transfer Function.
  • the above coefficient information may include information about an inflection point, a section, a function to be used, and the like.
  • the information delivered by the sink device to the source device may be referred to as extended display identification data (EDID) information.
  • the EDID information may indicate the performance of the sink device.
  • the EDID information may include HDR Static Metadata Data Block, which indicates the HDR performance of the sink device, and the HDR Static Metadata may include information on the aforementioned Transfer Function Type.
  • EDID information may include one or more data blocks.
  • HDR static metadata may be included in the data block and transmitted. Furthermore, the HDR static metadata may include information for identifying that the corresponding data block is a data block including the HDR static metadata and / or information indicating the length of the corresponding data block.
  • FIG. 27 is a view showing specific field values used in a method for transferring information on a transfer function that can be processed by a sink device according to an embodiment of the present invention.
  • a field having an offset of 0x06 is used to indicate a Transfer Function Type
  • 0x07 to 0x0A fields are used to indicate Unspecified TF Details
  • 0x0B to more fields indicate Unspecified TF coefficients.
  • Unspecified TF Details indicates additional information on any Transfer Function when the sink device supports any Transfer Function, and is used for the End of any Transfer Function (Type of Unspecified Transfer Function) or any Transfer Function.
  • the Number of coefficients in Unspecified Transfer Function When a plurality of Transfer Functions comprise an arbitrary Transfer Function, the Number of types of each Transfer Function (Number of types), bitdepth, minimum brightness information of the sink device (Lowest Brightness level of Sink device and / or Highest Brightness level of Sink device.
  • the upper 1 bit of the value value may indicate that the sink device can process the Unspecified Transfer Function, and the next 1 bit is BT. It may indicate that the EOTF according to 1886 can be processed, and the next 1 bit may indicate that the EOTF according to SMPTE ST 2084 can be processed.
  • the upper 4 bits of the value value may be used to indicate the Type of Unspecified Transfer Function, and the lower 4 bits may be used to indicate the Number of coefficients in Unspecified Transfer Function.
  • the upper two bits of the value value may be used to indicate the Number of types, and the next two bits may be used to indicate the bitdepth.
  • the value may indicate the lowest brightness information of the sink device.
  • the upper 1 bit of the value value may indicate the lowest brightness level of the sink device as LSB, and the remaining 7 bits may be the highest brightness level of the sink device. Sink device).
  • the value value may indicate coefficient information used for an arbitrary transfer function.
  • FIG. 28 illustrates a method for signaling container color gamut from a source device to a sink device according to an embodiment of the present invention.
  • signaling for additional colorimetry is required in order to support a wide range of display performance from a wide color gamut (WCG) perspective.
  • WCG wide color gamut
  • the DCI-P3 color space may be signaled.
  • the broadcast system may signal two different color geometry.
  • the broadcast system may signal container color gamut and content color gamut.
  • the container color gamut represents a color gamut used in the process of transmitting, encoding and / or distributing content. That is, the color gamut of the transmission, encoding and / or distribution system.
  • Container color gamut represents the theoretical color boundary of coded values. For example, if the BT.2020 color gamut is used in the process of transmitting, encoding and / or distributing the content, the BT.2020 color gamut corresponds to the container color gamut.
  • the content color gamut represents the color gamut of the actual content. That is, the content color gamut represents a color gamut used in an imaging system for processing content and / or a mastering environment for mastering content.
  • the content color gamut represents the actual color boundary of the mastered content. For example, if a DCI-P3 color gamut is used in an imaging system and / or mastering environment, the DCI-P3 color gamut corresponds to a content color gamut.
  • content mastered in DCI-P3 may be transmitted by a container format according to BT.2020, and content mastered in BT.709 by a container format according to BT.2020. Can be sent.
  • the content color gamut can be used to determine which color mapping process the sink device will use.
  • the content color gamut can be usefully used when the container color gamut does not match the display color gamut of the sink device. For example, if the container color gamut matches the color gamut of the display, you can display the content directly without converting the color gamut, but if the container color gamut does not match the color gamut of the display, you need to convert the color gamut. And content color gamut may be used to properly convert the color gamut.
  • the broadcast system can provide more variety of colors by improving content color gamut and can improve the quality of the displayed content.
  • the sink device when DCI-P3 content is encoded in a BT.2020 container and played on a DCI-P3 display, the sink device generally allows the color of the content to be represented within the color boundary of the display. To adjust the color. As a result of this adjustment, gaggle is shrunk and color distortion of the content occurs due to gaggle shrinking.
  • the DCI-P3 display when information on content color gamut is provided, the DCI-P3 display can display content without color distortion (or with minimal color distortion) due to gait shrinkage (color gamut clipping). Can be displayed. According to this embodiment, since the content color gamut matches the display color gamut, the intention of the original producer can be maintained. Furthermore, the viewer can enjoy the content with the first intended color sense.
  • the container color gamut may be signaled by a colorimetry field and / or an extended colorimetry field in an AVI (Auxiliary Video Informaion) InfoFrame data block.
  • DCI-P3 may be defined in a reserved space in the fields.
  • the value "11" in the colorimetry field and the value "111" in the extended colorimetry field indicate that information about the container color gamut is signaled within the AVI InfoFrame, and the information about the container color gamut is via the container color gamut extenstion field. Signaled.
  • the value "111" of the extended colorimetry field is used to signal information about the container color gamut, there is no space left for color geometry to be added later.
  • the broadcast system may extend container color signaling by extending existing color geometry signaling.
  • the broadcast system may signal additional container colors by defining additional extension fields in the AVI InfoFrame and / or the Dynamic Range and Mastering (DRM) InfoFrame.
  • the reserved space of the current color geometry signaling can be used to inform the availability of additional color geometry extension.
  • the broadcast system may signal the container color gamut without changing the signaling process of the existing color geometry by using the extension field.
  • This figure illustrates a method for signaling container color gamut from a source device to a sink device in accordance with one embodiment of the present invention.
  • an AVI InfoFrame includes a Y field (Y2, Y1, Y0 of Data Byte 1), a colorimetry field (C1, C0 of Data Byte 2), an extended colorimetry field (Data Byte 3).
  • EC2, EC1, EC0 and / or container color gamut extension field (CGE2, CGE1, CGE0 of Data Byte 14).
  • the value "11" of the colorimetry field indicates that the extended colorimetry field has a valid value
  • the value "111" of the extended colorimetry field indicates that the container color gamut extension field has a valid value. Therefore, when the value of the colorimetry field has "11" and the value of the extended colorimetry field has "111", the container color gamut extension field has a valid value.
  • the value "000" of the container color gamut extension field may indicate that the container color gamut is DCI-P3, and the remaining values may indicate color geometry to be used later.
  • the Y field indicates a color component sample format and a chroma sampling format of the content.
  • the colorimetry field is used together with the extended colorimetry field to indicate the color geometry of the content.
  • the color geometry of the content may be signaled by a combination of the Y field, the colorimetry field, and the extended colorimetry field.
  • both the color gamut and the container color gamut of the content may be signaled using the fields included in the AVI InfoFrame.
  • 29 is a diagram illustrating a method for signaling a display color gamut of a sink device from a sink device to a source device according to an embodiment of the present invention.
  • the broadcast system may signal DCI-P3 colormetry by using a resesrved bit in a colorimetry data block of an EDID.
  • the broadcast system may signal DCI-P3 colormetry without changing other color geometry signaling in the existing EDID.
  • the color geometry data block is one of the EDID, and includes a Tag Code field (Byte 1, bits 5-7), a Length field (Byte 1, bits 0-4), and an Extended Tag Code field ( Byte 2), Colorimetry flag field (Byte 3) and / or reserved field (Byte 4, bits 0-3, MD0, MD1, MD2, MD3).
  • the Tag Code field and the Extended Tag Code field identify that this data block is a color geometry data block containing the color geometry of the display.
  • the Length field indicates the length of this data block.
  • the Colorimetry flag field indicates the color geometry of the display. That is, the value 1 of the Colorimetry flag field indicates that the sink device can display the content encoded with the corresponding color geometry.
  • the reserved field may be used to indicate metadata related later.
  • the broadcast system may signal that the display color gamut is the DCI-P3 color gamut defined in SMPTE 431-2 by using MD0 which is one of the reserved fields.
  • MD0 which is one of the reserved fields.
  • the value 1 of the MD0 bit indicates that the display of the sink device can display the DCI-P3 encoded content
  • 0 indicates that the display of the sink device can display the DCI-P3 encoded content. Indicates none.
  • FIG. 30 is a diagram illustrating a method for signaling content color gamut from a source device to a sink device according to an embodiment of the present invention.
  • the source device may provide the sink device with information about the content color gamut by defining a new content color gamut field in the AVI InfoFrame and / or the DRM InfoFrame.
  • the color geometry signaling present in the AVI InfoFrame may be used.
  • the sink device may transmit a flag requesting information about the content color gamut to the source device.
  • a DRM InfoFrame includes a content color gamut field (CCG2, CCG1, CCG0).
  • a value of "000" of the content color gamut field indicates that this field is not used. That is, the value "000" of the content color gamut field may indicate that the content color gamut is the same as the container color gamut, or may indicate that there is no information about the content color gamut.
  • the value "001" of the content color gamut field indicates that the content color gamut is DCI-P3. Other values of the content color gamut field may indicate different color geometry of the content color gamut.
  • FIG. 31 is a diagram illustrating a method for signaling information about content color gamut from a sink device to a source device according to an embodiment of the present invention.
  • the broadcast system may signal a content color gamut request using the resesrved bit in the HDR static metadata data block of the EDID.
  • the broadcast system may signal the content color gamut request without changing other signaling in the existing EDID.
  • the HDR static metadata data block is one of the EDIDs, and includes a Tag Code field (Byte 1, bits 5-7), a Length field (Byte 1, bits 0-4), and an extended tag code. Field (Byte 2) and / or content color gamut request flag field (Byte 3, bit 7).
  • the Tag Code field and the Extended Tag Code field identify that this data block is an HDR static metadata data block containing a content color gamut request flag.
  • the Length field indicates the length of this data block.
  • the content color gamut request flag field (CCG0) indicates whether the sink device requests information on content color gamut from the source device.
  • a value of "0" of the content color gamut request flag field indicates that no signaling for content color gamut is required, and a value of "1" of the content color gamut request flag field indicates that the sink device needs information about the content color gamut.
  • the source device receives a block of HDR static metadata data from the sink device, checks the content color gamut request flag field, and if the value of this field is "1", sends the information about the content color gamut to the sink device. Can be.
  • 32 is a diagram illustrating a method for signaling content color gamut from a source device to a sink device according to another embodiment of the present invention.
  • the source device may provide the sink device with information about the content color gamut by defining a new content color gamut field in the static metadata descriptor (Static_Metadata_Descriptor) in the DRM InfoFrame.
  • Static_Metadata_Descriptor static metadata descriptor
  • a DRM InfoFrame includes a static metadata descriptor identifier field (Static_Metadata_Descriptor ID) and / or a static metadata descriptor (Static_Metadata_Descriptor).
  • the static metadata descriptor is described in Data Byte 3 to Data Byte n of the DRM InfoFrame.
  • the static metadata descriptor identifier field identifies a static metadata descriptor included in the DRM InfoFrame.
  • a value 0 of the static metadata descriptor identifier field indicates that the static metadata descriptor is a static metadata descriptor corresponding to Static Metadata Type 1.
  • Values 1-7 of the static metadata descriptor identifier field indicate reserved values.
  • Static metadata descriptors corresponding to Static Metadata Type 1 can be selected from display_primaries field, white_point field, max_display_mastering_luminance field, min_display_mastering_luminance field, Maximum Content Light Level field, Maximum Frame-average Light Level field and / or content color gamut field (CCG2, CCG1, CCG0) ) May be included.
  • a value of "000" of the content color gamut field indicates that this field is not used. That is, the value "000" of the content color gamut field may indicate that the content color gamut is the same as the container color gamut, or may indicate that there is no information about the content color gamut.
  • the value "001" of the content color gamut field indicates that the content color gamut is DCI-P3.
  • the display_primaries field and the white_point field indicate color geometry values of the mastering display.
  • the max_display_mastering_luminance field and min_display_mastering_luminance field indicate maximum / minimum brightness values of the mastering display.
  • the Maximum Content Light Level field represents the maximum brightness value of the content.
  • the Maximum Frame-average Light Level field represents the maximum frame average brightness value.
  • FIG 33 illustrates a method of signaling content color gamut from a source device to a sink device according to another embodiment of the present invention.
  • a broadcast system defines a new static metadata type and includes a content color gamut field and / or content in a static metadata descriptor having a newly defined static metadata type. It is possible to define the actual color geometry values of.
  • a DRM InfoFrame includes a static metadata descriptor identifier field (Static_Metadata_Descriptor ID) and / or a static metadata descriptor (Static_Metadata_Descriptor).
  • the static metadata descriptor is described in Data Byte 3 to Data Byte n of the DRM InfoFrame.
  • the static metadata descriptor identifier field identifies a static metadata descriptor included in the DRM InfoFrame.
  • a value 0 of the static metadata descriptor identifier field indicates that the static metadata descriptor is a static metadata descriptor corresponding to Static Metadata Type 1.
  • a value 1 of the static metadata descriptor identifier field indicates that the static metadata descriptor is a static metadata descriptor corresponding to Static Metadata Type 2.
  • the static metadata descriptor corresponding to Static Metadata Type 2 includes content color gamut and / or actual color geometry values of the content.
  • Values 2-7 of the static metadata descriptor identifier field indicate reserved values.
  • Static metadata descriptors corresponding to Static Metadata Type 2 may include the content color gamut field (CCG2, CCG1, CCG0) and / or the color geometry values of the content (Red-x, Red-y, Green-x, Green-y, Blue). -x, Blue-y, White-x, White-y).
  • a value of "000" of the content color gamut field indicates that this field is not used. That is, the value "000" of the content color gamut field may indicate that the content color gamut is the same as the container color gamut, or may indicate that there is no information about the content color gamut.
  • the value "001" of the content color gamut field indicates that the content color gamut is DCI-P3. Other values of the content color gamut field may indicate different color geometry of the content color gamut.
  • the color geometry value of the above-described content indicates the positions of the red, green, blue and / or white colors on the color gamut of the content.
  • 34 is a diagram illustrating a method for signaling information about content color gamut from a source device to a sink device according to an embodiment of the present invention.
  • the broadcast system may signal content color gamut using the display_primaries field and the white_point field included in the static metadata descriptor corresponding to Static Metadata Type 1 of the DRM InfoFrame.
  • the DRM InfoFrame includes a content color gamut flag field (CCG_flag), a static metadata descriptor identifier field (Static_Metadata_Descriptor ID, SMD_ID), and / or a static metadata descriptor (Static_Metadata_Descriptor).
  • the content color gamut flag field indicates whether the display_primaries field and the white_point field included in the static metadata descriptor corresponding to the static metadata type 1 are used as color geometry information indicating the color gamut of the content.
  • the content color gamut can be signaled by the display_primaries field and the white_point field described in Data Byte 3 to 18 of the DRM InfoFrame. have. That is, the value 1 of the content color gamut flag field indicates that the display_primaries field and the white_point field indicate color geometry information of the content.
  • the broadcast system may display the display_primaries field without the content color gamut flag field.
  • white_point field may be used to signal content color gamut.
  • 35 is a view illustrating a video data processing method of a source device according to an embodiment of the present invention.
  • a method of processing video data of a source device by transmitting video data of content to a sink device through an interface (SL35010) and / or an AVI infoframe including additional information about the video data. And transmitting the auxiliary video information infoframe to the sink device through the interface (SL35020).
  • the AVI infoframe includes a color geometry field indicating the color gamut of the content, an extended color geometry field indicating the color gamut of the content together with the color geometry field, and a color gamut of the container transmitting the content.
  • a container color gamut extension field wherein the color geometry field contains information indicating that the extension color geometry field is valid, and the extension color geometry field indicates that the container color gamut extension field is valid. Contains information.
  • the video data processing method further comprises the step of receiving from the sink device a color data block including the information on the color gamut supported by the sink device from the sink device.
  • the color geometry data block includes information indicating whether the sink device supports DCI-P3 color gamut.
  • the video data processing method comprises the steps of transmitting a DRM infoframe (Dynamic Range and Mastering InfoFrame) including information on the dynamic range of the video data to the sink device via the interface;
  • the DRM infoframe further includes a content color gamut field indicating a color gamut of the content, wherein the content color gamut field includes information indicating that the color gamut of the content is the same as the color gamut of the container and the content. Contains information indicating that the color gamut of the DCI-P3 color gamut is.
  • the video data processing method includes an HDR static metadata data block (HDR Static Metadata Data Block) indicating the high dynamic range (HDR) performance of the sink device through the interface; And receiving from a device, wherein the HDR static metadata data block includes information indicating whether the sink device needs information about color gamut of the content.
  • HDR Static Metadata Data Block HDR Static Metadata Data Block
  • the video data processing method further comprises the step of transmitting a DRM infoframe including information on the dynamic range of the video data to the sink device via the interface, the DRM info
  • the frame includes a static metadata descriptor and identification information identifying the static metadata descriptor, wherein the static metadata descriptor is a color of a mastering display used to master the content. And at least one of a display color-metry field indicating remetry information and a content color gamut field indicating a color gamut of the content.
  • the video data processing method further comprises the step of transmitting a DRM infoframe including information on the dynamic range of the video data to the sink device via the interface, the DRM info
  • the frame includes a static metadata descriptor and identification information identifying the static metadata descriptor, wherein the static metadata descriptor includes a content color gamut field indicating a color gamut of the content and an actual color geometry value of the content. At least one of the.
  • the DRM infoframe includes information indicating whether the display color metadata field included in the static metadata descriptor is used to describe the color gamut of the content.
  • 36 is a diagram illustrating a video data processing method of a sink device according to an embodiment of the present invention.
  • the AVI infoframe includes a color geometry field indicating the color gamut of the content, an extended color geometry field indicating the color gamut of the content together with the color geometry field, and a color gamut of the container transmitting the content.
  • a container color gamut extension field wherein the color geometry field contains information indicating that the extension color geometry field is valid, and the extension color geometry field indicates that the container color gamut extension field is valid. Contains information.
  • the video data processing method further comprises the step of transmitting a color geometry data block including information on color gamut supported by the sink device to the source device through the interface;
  • the color geometry data block includes information indicating whether the sink device supports DCI-P3 color gamut.
  • the video data processing method includes receiving a DRM infoframe (Dynamic Range and Mastering InfoFrame) including information on the dynamic range of the video data from the source device through the interface
  • the DRM infoframe includes a content color gamut field indicating a color gamut of the content, wherein the content color gamut field includes information indicating that the color gamut of the content is the same as the color gamut of the container; Contains information indicating that the color gamut of the content is DCI-P3 color gamut.
  • the video data processing method includes an HDR static metadata data block (HDR Static Metadata Data Block) indicating a high dynamic range (HDR) performance of a sink device through the interface device; And transmitting to the HDR static metadata data block including information indicating whether the sink device needs information about the color gamut of the content.
  • HDR Static Metadata Data Block HDR Static Metadata Data Block
  • HDR high dynamic range
  • the video data processing method further comprises the step of receiving a DRM infoframe including information on the dynamic range of the video data from the source device via the interface, the DRM The infoframe includes a static metadata descriptor and identification information identifying the static metadata descriptor, the static metadata descriptor of the mastering display used to master the content. And at least one of a display colormetry field indicating colormetry information and a content color gamut field indicating a color gamut of the content.
  • the video data processing method further comprises the step of receiving a DRM infoframe including information on the dynamic range of the video data from the source device via the interface, the DRM The infoframe includes a static metadata descriptor and identification information identifying the static metadata descriptor, wherein the static metadata descriptor includes a content color gamut field indicating the color gamut of the content and the actual color geometry of the content. It contains at least one of the values.
  • FIG. 37 is a diagram showing the configuration of a video data processing apparatus (source device) according to an embodiment of the present invention.
  • the video data processing apparatus (source device) L37010 may provide a first transmitter L37020 for transmitting video data of content to a sink device through an interface and / or additional information about the video data. And a second transmitter L37030 for transmitting an auxiliary video information infoframe to the sink device through the interface.
  • the AVI infoframe includes a color geometry field indicating the color gamut of the content, an extended color geometry field indicating the color gamut of the content together with the color geometry field, and a color gamut of the container transmitting the content.
  • a container color gamut extension field wherein the color geometry field contains information indicating that the extension color geometry field is valid, and the extension color geometry field indicates that the container color gamut extension field is valid. Contains information.
  • FIG. 38 is a diagram showing the configuration of a video data processing apparatus (sink device) according to an embodiment of the present invention.
  • the video data processing apparatus includes a first receiver L38020 for receiving video data of content from a source device through an interface and / or additional information about the video data. And a second receiver (L38030) for receiving an AVI infoframe (Auxiliary Video Information InfoFrame) from the source device through the interface.
  • the AVI infoframe includes a color geometry field indicating the color gamut of the content, an extended color geometry field indicating the color gamut of the content together with the color geometry field, and a color gamut of the container transmitting the content.
  • a container color gamut extension field wherein the color geometry field contains information indicating that the extension color geometry field is valid, and the extension color geometry field indicates that the container color gamut extension field is valid. Contains information.
  • the module or unit may be processors that execute successive procedures stored in a memory (or storage unit). Each of the steps described in the above embodiments may be performed by hardware / processors. Each module / block / unit described in the above embodiments can operate as a hardware / processor.
  • the methods proposed by the present invention can be executed as code. This code can be written to a processor readable storage medium and thus read by a processor provided by an apparatus.
  • Apparatus and method according to the present invention is not limited to the configuration and method of the embodiments described as described above, the above-described embodiments may be selectively all or part of each embodiment so that various modifications can be made It may be configured in combination.
  • the processor-readable recording medium includes all kinds of recording devices that store data that can be read by the processor.
  • Examples of the processor-readable recording medium include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, and the like, and may also be implemented in the form of a carrier wave such as transmission over the Internet.
  • the processor-readable recording medium can also be distributed over network coupled computer systems so that the processor-readable code is stored and executed in a distributed fashion.
  • the present invention is used in the field of providing a series of broadcast signals.

Abstract

본 발명은 방송 신호를 전송하는 방법을 제안한다. 본 발명에 따른 방송 신호를 전송하는 방법은, 지상파 방송망과 인터넷 망을 사용하는 차세대 하이브리드 방송을 지원하는 환경에서 차세대 방송 서비스를 지원할 수 있는 시스템을 제안한다. 또한, 차세대 하이브리드 방송을 지원하는 환경에서, 지상파 방송망과 인터넷 망을 모두 아우를 수 있는 효율적인 시그널링 방안을 제안한다.

Description

방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
본 발명은 방송 신호 송신 장치, 방송 신호 수신 장치, 및 방송 신호 송수신 방법에 관한 것이다.
비디오 신호 처리 속도가 빨라지면서 초고해상도 (ultra high definition; UHD) 비디오를 인코딩/디코딩하는 방안이 연구되고 있다.
UHD 컨텐츠는 기존의 컨텐츠 대비 다양한 측면에서 향상된 화질을 제공하는 것을 목표로 한다. 이를 위해 방송 분야뿐 아니라 다양한 분야에서 UHD 비디오 요소에 대한 연구 및 개발이 진행되고 있다. 그 중 기존 컨텐츠에서 제공하지 못하였던 색감 및 밝기 측면에서 향상된 시청자 경험을 제공에 대한 요구가 높아지고 있다.
이에 따라 UHD 비디오를 구성하는 다양한 요소 중 색상 및 밝기 표현 범위를 확대하여 고품질 영상을 제공하려는 노력이 계속되고 있다.
UHD 디스플레이 기기는 색상 및 밝기 측면의 표현력에서 기존 디스플레이 기기와의 차별성을 갖는다.
그러나, 다양한 디스플레이 기기 환경 하에서 UHD 컨텐츠를 최적의 환경에서 시청하기 위한 기술에 대한 개발되지 않는 문제점이 있다.
예를 들어 같은 차세대 디스플레이 기기 보급이 진행되는 상황에서 UHD 컨텐츠가 공급되는 경우 디스플레이 기기의 물리적 특성에 따라 색감 혹은 밝기 제한이 생겨 컨텐츠 감상이 제대로 이뤄지지 않는 문제점이 있다.
디스플레이 기기에 적응적으로 컨텐츠의 색감 및 밝기를 조정하기 위해서는 디스플레이의 기기 특성에 대한 정확한 분석을 바탕으로 컨텐츠 변환이 이뤄져야 한다. 그러나, 만약 디스플레이 외부 기기를 통해 UHD 컨텐츠가 공급되는 경우, 디스플레이의 기기 특성을 제한적으로 전달하는 문제점이 있었다.
본 발명의 목적은, 다양한 디스플레이 기기 환경 하에서 UHD 컨텐츠를 포함한 컨텐츠를 최적의 환경에서 시청할 수 있는 비디오 처리 방법 및 비디오 처리 장치를 제공하는 것이다.
본 발명의 다른 목적은, UHD 컨텐츠를 포함한 UHD 컨텐츠를 다양한 디스플레이 기기에서 표출할 경우, 그 디스플레이 기기들의 물리적 특성에 따라 색감 혹은 밝기 표현 제한이 적도록 하는 비디오 처리 방법 및 비디오 처리 장치를 제공하는 것이다.
본 발명의 다른 목적은, 디스플레이 외부 기기를 통해 UHD 컨텐츠를 포함한 컨텐츠가 공급되는 경우라도 디스플레이의 기기 특성을 전달하여 UHD 컨텐츠를 포함한 컨텐츠를 최적의 환경에서 시청할 수 있는 비디오 처리 방법 및 비디오 처리 장치를 제공하는 것이다.
본 발명의 목적에 따라, 여기에 포함되고 대략적으로 기재된 바와 같이, 본 발명은 지상파 방송망과 인터넷 망을 사용하는 차세대 하이브리드 방송을 지원하는 환경에서 차세대 방송 서비스를 효과적으로 지원할 수 있는 시스템 및 관련된 시그널링 방안을 제안한다.
본 발명의 실시예에 따르면, 다양한 디스플레이 기기 환경 하에서 UHD 컨텐츠를 포함한 컨텐츠를 최적의 환경에서 시청할 수 있다.
본 발명의 실시예에 따르면, UHD 컨텐츠를 포함한 UHD 컨텐츠를 다양한 디스플레이 기기에서 표출할 경우, 그 디스플레이 기기들의 물리적 특성에 따라 색감 혹은 밝기 표현 제한이 적도록 할 수 있다.
본 발명의 실시예에 따르면 디스플레이 외부 기기를 통해 UHD 컨텐츠가 공급되는 경우라도 디스플레이의 기기 특성을 전달하여 UHD 컨텐츠를 포함한 UHD 컨텐츠를 최적의 환경에서 시청할 수 있다.
본 발명에 대해 더욱 이해하기 위해 포함되며 본 출원에 포함되고 그 일부를 구성하는 첨부된 도면은 본 발명의 원리를 설명하는 상세한 설명과 함께 본 발명의 실시예를 나타낸다.
도 1 은 본 발명의 일 실시예에 따른 프로토콜 스택을 도시한 도면이다.
도 2 는 본 발명의 일 실시예에 따른 서비스 디스커버리 과정을 도시한 도면이다.
도 3 은 본 발명의 일 실시예에 따른 LLS (Low Level Signaling) 테이블 및 SLT (Service List Table)를 도시한 도면이다.
도 4 는 본 발명의 일 실시예에 따른, ROUTE 로 전달되는 USBD 및 S-TSID 를 도시한 도면이다.
도 5 는 본 발명의 일 실시예에 따른, MMT 로 전달되는 USBD 를 도시한 도면이다.
도 6 은 본 발명의 일 실시예에 따른 링크 레이어(Link Layer) 동작을 도시한 도면이다.
도 7 은 본 발명의 일 실시예에 따른 LMT (Link Mapping Table) 를 도시한 도면이다.
도 8는 비디오 영상을 송수신하기 위해 소스 디바이스와 싱크 디바이스가 연결된 예를 나타낸 도면이다.
도 9은 본 발명에 실시예에 따라 소스 디바이스가 싱크 디바이스와 연결된 경우 정보를 송수신하는 실시예를 나타낸 도면이다.
도 10는 본 발명의 실시예에 따라 싱크 디바이스가 소스 디바이스로 전달하는 정보의 일 예를 나타낸 도면이다.
도 11는 본 발명의 실시예에 따라 싱크 디바이스가 소스 디바이스로 전달하는 정보의 일 예로서 위에서 개시한 실시예의 구체적인 필드 값을 예시한 도면이다.
도 12은 개시한 본 발명의 실시예에 따른 control option flag의 상세한 예를 예시한 도면이다.
도 13은 기술한 본 발명의 실시예에 따른 Sink Device Dynamic Range 정보의 상세한 예를 예시한 도면이다.
도 14은 본 발명의 실시예에 따라 싱크 디바이스에서 소스 디바이스로 전달하는 디스플레이 관련 정보로서, DisplayID의 Display Parameters Data Block을 예시한 도면이다.
도 15는 본 발명의 실시예에서 기술하는 디스플레이 관련 정보로서, Display Device Data Block을 예시한 도면이다.
도 16은 본 발명의 일 실시예에 따라 싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 또 다른 예를 예시한 도면이다.
도 17은 본 발명에 실시예에 따라 소스 디바이스에서 싱크 디바이스로 전달할 정보를 예시한 도면이다.
도 18는 본 발명의 실시예에 따라 개시한 포스트 프로세싱 타입 정보의 상세한 예를 개시한 도면이다.
도 19은 본 발명의 실시예에 따라 개시한 오리지널 컬러 개멋 정보(Orig_color_gamut)의 상세한 예를 개시한 도면이다.
도 20는 본 발명의 실시예에 따라 소스 디바이스가 싱크 디바이스로 전달하는 영상의 컬러 정보를 전달하는 다른 예를 개시한다.
도 21는 본 발명의 일 실시예에 따른 신호 처리 장치의 실시예들 및 그 동작을 예시한 도면이다.
도 22은 본 발명의 일 실시예에 따른 EOTF type의 구성을 나타낸 도면이다.
도 23은 본 발명의 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
도 24은 본 발명의 다른 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
도 25는 본 발명의 또 다른 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
도 26은 본 발명의 일 실시예에 따라 싱크 디바이스가 처리 가능한 Transfer Function에 대한 정보를 전달하기 위한 방법을 나타낸 도면이다.
도 27은 본 발명의 일 실시예에 따라 싱크 디바이스가 처리 가능한 Transfer Function에 대한 정보를 전달하기 위한 방법에 사용되는 구체적인 필드값을 나타낸 도면이다.
도 28은 본 발명의 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 컨테이너 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
도 29는 본 발명의 일 실시예에 따라 싱크 디바이스로부터 소스 디바이스로 싱크 디바이스의 디스플레이 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
도 30은 본 발명의 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 콘텐트 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
도 31은 본 발명의 일 실시예에 따라 싱크 디바이스로부터 소스 디바이스로 콘텐트 컬러 개멋에 대한 정보를 시그널링하는 방법을 나타낸 도면이다.
도 32는 본 발명의 다른 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 콘텐트 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
도 33은 본 발명의 다른 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 콘텐트 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
도 34는 본 발명의 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 콘텐트 컬러 개멋에 대한 정보를 시그널링하는 방법을 나타낸 도면이다.
도 35는 본 발명의 일 실시예에 따른 소스 디바이스의 비디오 데이터 처리 방법을 나타낸 도면이다.
도 36은 본 발명의 일 실시예에 따른 싱크 디바이스의 비디오 데이터 처리 방법을 나타낸 도면이다.
도 37은 본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (소스 디바이스)의 구성을 나타낸 도면이다.
도 38은 본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (싱크 디바이스)의 구성을 나타낸 도면이다.
본 발명은 차세대 방송 서비스에 대한 방송 신호 송신 및 수신 장치 및 방법을 제공한다. 본 발명의 일 실시예에 따른 차세대 방송 서비스는 지상파 방송 서비스, 모바일 방송 서비스, UHDTV 서비스 등을 포함한다. 본 발명은 일 실시예에 따라 비-MIMO (non-Multiple Input Multiple Output) 또는 MIMO 방식을 통해 차세대 방송 서비스에 대한 방송 신호를 처리할 수 있다. 본 발명의 일 실시예에 따른 비-MIMO 방식은 MISO (Multiple Input Single Output) 방식, SISO (Single Input Single Output) 방식 등을 포함할 수 있다. 본 발명은 특정 용도에 요구되는 성능을 달성하면서 수신기 복잡도를 최소화하기 위해 최적화된 피지컬 프로파일 (또는 시스템)을 제안한다.
도 1 은 본 발명의 일 실시예에 따른 프로토콜 스택을 도시한 도면이다.
서비스는 복수개의 레이어를 거쳐 수신기로 전달될 수 있다. 먼저 송신측에서는 서비스 데이터를 생성할 수 있다. 송신측의 딜리버리 레이어에서는 서비스 데이터에 전송을 위한 처리를 수행하고, 피지컬 레이어에서는 이를 방송 신호로 인코딩하여 방송망 또는 브로드밴드를 통해 전송할 수 있다.
여기서 서비스 데이터들은 ISO BMFF (base media file format) 에 따른 포맷으로 생성될 수 있다. ISO BMFF 미디어 파일은 방송망/브로드밴드 딜리버리, 미디어 인캡슐레이션(media encapsulation) 및/또는 동기화 포맷(synchronization format) 으로 사용될 수 있다. 여기서 서비스 데이터는 서비스와 관련된 모든 데이터로서, 리니어 서비스를 이루는 서비스 컴포넌트들, 그에 대한 시그널링 정보, NRT (Non Real Time) 데이터, 기타 파일들 등을 포함하는 개념일 수 있다.
딜리버리 레이어에 대해 설명한다. 딜리버리 레이어는 서비스 데이터에 대한 전송 기능을 제공할 수 있다. 서비스 데이터는 방송망및/또는 브로드밴드를 통해 전달될 수 있다.
방송망을 통한 서비스 딜리버리(broadcast service delivery)에 있어 두가지 방법이 있을 수 있다.
첫번째 방법은 MMT (MPEG Media Transport) 에 근거하여, 서비스 데이터들을 MPU (Media Processing Units) 들로 처리하고, 이를 MMTP (MMT protocol) 를 이용하여 전송하는 것일 수 있다. 이 경우, MMTP 를 통해 전달되는 서비스 데이터에는, 리니어 서비스를 위한 서비스 컴포넌트들 및/또는 그에 대한 서비스 시그널링 정보 등이 있을 수 있다.
두번째 방법은 MPEG DASH 에 근거하여, 서비스 데이터들을 DASH 세그먼트들로 처리하고, 이를 ROUTE (Real time Object delivery over Unidirectional Transport) 를 이용하여 전송하는 것일 수 있다. 이 경우, ROUTE 프로토콜을 통해 전달되는 서비스 데이터에는, 리니어 서비스를 위한 서비스 컴포넌트들, 그에 대한 서비스 시그널링 정보 및/또는 NRT 데이터 등이 있을 수 있다. 즉, NRT 데이터 및 파일 등의 논 타임드(non timed) 데이터는 ROUTE 를 통해서 전달될 수 있다.
MMTP 또는 ROUTE 프로토콜에 따라 처리된 데이터는 UDP / IP 레이어를 거쳐 IP 패킷들로 처리될 수 있다. 방송망을 통한 서비스 데이터 전달에 있어서, SLT (Service List Table) 역시 UDP / IP 레이어를 거쳐 방송망을 통해 전달될 수 있다. SLT 는 LLS (Low Level Signaling) 테이블에 포함되어 전달될 수 있는데, SLT, LLS 테이블에 대해서는 후술한다.
IP 패킷들은 링크 레이어에서 링크 레이어 패킷들로 처리될 수 있다. 링크 레이어는 상위 레이어에서 전달되는 다양한 포맷의 데이터를, 링크 레이어 패킷으로 인캡슐레이션한 후, 피지컬 레이어에 전달할 수 있다. 링크 레이어에 대해서는 후술한다.
하이브리드 서비스 딜리버리(hybrid service delivery) 에 있어서는, 적어도 하나 이상의 서비스 엘레멘트가 브로드밴드 패쓰(path) 를 통해 전달될 수 있다. 하이브리드 서비스 딜리버리의 경우, 브로드밴드로 전달되는 데이터에는, DASH 포맷의 서비스 컴포넌트들, 그에 대한 서비스 시그널링 정보 및/또는 NRT 데이터 등이 있을 수 있다. 이 데이터들은 HTTP/TCP/IP 를 거쳐 처리되고, 브로드밴드 전송을 위한 링크 레이어를 거쳐, 브로드밴드 전송을 위한 피지컬 레이어로 전달될 수 있다.
피지컬 레이어는 딜리버리 레이어(상위 레이어 및/또는 링크 레이어)로부터 전달받은 데이터를 처리하여, 방송망 또는 브로드밴드를 통하여 전송할 수 있다. 피지컬 레이어에 대한 자세한 사항은 후술한다.
서비스에 대해 설명한다. 서비스는 전체적으로 사용자에게 보여주는 서비스 컴포넌트의 컬렉션일 수 있고, 컴포넌트는 여러 미디어 타입의 것일 수 있고, 서비스는 연속적이거나 간헐적일 수 있으며, 서비스는 실시간이거나 비실시간일 수 있고, 실시간 서비스는 TV 프로그램의 시퀀스로 구성될 수 있다.
서비스는 여러 타입을 가질 수 있다. 첫 번째로 서비스는 앱 기반 인헨스먼트를 가질 수 있는 리니어 오디오/비디오 또는 오디오만의 서비스일 수 있다. 두 번째로 서비스는 다운로드된 어플리케이션에 의해 그 재생/구성 등이 제어되는 앱 기반 서비스일 수 있다. 세 번째로 서비스는 ESG (Electronic Service Guide) 를 제공하는 ESG 서비스일 수 있다. 네 번째로 긴급 경보 정보를 제공하는 EA (Emergency Alert) 서비스일 수 있다.
앱 기반 인헨스먼트가 없는 리니어 서비스가 방송망을 통해 전달되는 경우, 서비스 컴포넌트는 (1) 하나 이상의 ROUTE 세션 또는 (2) 하나 이상의 MMTP 세션에 의해 전달될 수 있다.
앱 기반 인헨스먼트가 있는 리니어 서비스가 방송망을 통해 전달되는 경우, 서비스 컴포넌트는 (1) 하나 이상의 ROUTE 세션 및 (2) 0개 이상의 MMTP 세션에 의해 전달될 수 있다. 이 경우 앱 기반 인핸스먼트에 사용되는 데이터는 NRT 데이터 또는 기타 파일 등의 형태로 ROUTE 세션을 통해 전달될 수 있다. 본 발명의 일 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트(스트리밍 미디어 컴포넌트)들이 두 프로토콜을 동시에 사용해 전달되는 것이 허용되지 않을 수 있다.
앱 기반 서비스가 방송망을 통해 전달되는 경우, 서비스 컴포넌트는 하나 이상의 ROUTE 세션에 의해 전달될 수 있다. 이 경우, 앱 기반 서비스에 사용되는 서비스 데이터는 NRT 데이터 또는 기타 파일 등의 형태로 ROUTE 세션을 통해 전달될 수 있다.
또한, 이러한 서비스의 일부 서비스 컴포넌트 또는 일부 NRT 데이터, 파일 등은 브로드밴드를 통해 전달될 수 있다(하이브리드 서비스 딜리버리).
즉, 본 발명의 일 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트들은 MMT 프로토콜을 통해 전달될 수 있다. 본 발명의 다른 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트들은 ROUTE 프로토콜을 통해 전달될 수 있다. 본 발명의 또 다른 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트 및 NRT 데이터(NRT 서비스 컴포넌트)들은 ROUTE 프로토콜을 통해 전달될 수 있다. 본 발명의 또 다른 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트들은 MMT 프로토콜을 통해 전달되고, NRT 데이터(NRT 서비스 컴포넌트)들은 ROUTE 프로토콜을 통해 전달될 수 있다. 전술한 실시예들에서, 서비스의 일부 서비스 컴포넌트 또는 일부 NRT 데이터들은 브로드밴드를 통해 전달될 수 있다. 여기서 앱 기반 서비스 내지 앱 기반 인핸스먼트에 관한 데이터들은 NRT 데이터 형태로, ROUTE 에 따른 방송망을 통해 전달되거나 브로드밴드를 통해 전달될 수 있다. NRT 데이터는 로컬리 캐쉬드 데이터(Locally cashed data) 등으로 불릴 수도 있다.
각각의 ROUTE 세션은 서비스를 구성하는 컨텐츠 컴포넌트를 전체적으로 또는 부분적으로 전달하는 하나 이상의 LCT 세션을 포함한다. 스트리밍 서비스 딜리버리에서, LCT 세션은 오디오, 비디오, 또는 클로즈드 캡션 스트림과 같은 사용자 서비스의 개별 컴포넌트를 전달할 수 있다. 스트리밍 미디어는 DASH 세그먼트로 포맷된다.
각각의 MMTP 세션은 MMT 시그널링 메시지 또는 전체 또는 일부 컨텐츠 컴포넌트를 전달하는 하나 이상의 MMTP 패킷 플로우를 포함한다. MMTP 패킷 플로우는 MMT 시그널링 메시지 또는 MPU 로 포맷된 컴포넌트를 전달할 수 있다.
NRT 사용자 서비스 또는 시스템 메타데이터의 딜리버리를 위해, LCT 세션은 파일 기반의 컨텐츠 아이템을 전달한다. 이들 컨텐츠 파일은 NRT 서비스의 연속적 (타임드) 또는 이산적 (논 타임드) 미디어 컴포넌트, 또는 서비스 시그널링이나 ESG 프레그먼트와 같은 메타데이터로 구성될 수 있다. 서비스 시그널링이나 ESG 프레그먼트와 같은 시스템 메타데이터의 딜리버리 또한 MMTP의 시그널링 메시지 모드를 통해 이루어질 수 있다.
수신기에서는 튜너가 주파수들을 스캐닝하다가, 특정 주파수에서 방송 시그널을 감지할 수 있다. 수신기는 SLT 를 추출해 이를 처리하는 모듈로 보낼 수 있다. SLT 파서는 SLT 를 파싱하고 데이터를 획득해 채널 맵에 저장할 수 있다. 수신기는 SLT 의 부트스트랩 정보를 획득하고 ROUTE 또는 MMT 클라이언트에 전달해줄 수 있다. 수신기는 이를 통해 SLS 를 획득할 수 있고, 저장할 수 있다. USBD 등이 획득될 수 있고, 이는 시그널링 파서에 의해 파싱될 수 있다.
도 2 는 본 발명의 일 실시예에 따른 서비스 디스커버리 과정을 도시한 도면이다.
피지컬 레이어의 방송 신호 프레임이 전달하는 브로드캐스트 스트림은 LLS (Low Level Signaling) 을 운반할 수 있다. LLS 데이터는 웰 노운(well known) IP 어드레스/포트 로 전달되는 IP 패킷의 페이로드를 통해서 운반될 수 있다. 이 LLS 는 그 타입에 따라 SLT 를 포함할 수 있다. LLS 데이터는 LLS 테이블의 형태로 포맷될 수 있다. LLS 데이터를 운반하는 매 UDP/IP 패킷의 첫번째 바이트는 LLS 테이블의 시작일 수 있다. 도시된 실시예와 달리 LLS 데이터를 전달하는 IP 스트림은, 다른 서비스 데이터들과 함께 같은 PLP 로 전달될 수도 있다.
SLT 는 빠른 채널 스캔을 통하여 수신기가 서비스 리스트를 생성할 수 있게 하고, SLS 를 로케이팅(locating) 하기 위한 액세스 정보를 제공한다. SLT 는 부트스트랩 정보를 포함하는데, 이 부트스트랩 정보는 수신기가 각각의 서비스에 대한 SLS (Service Layer Signaling) 을 획득할 수 있도록 한다. SLS, 즉 서비스 시그널링 정보가 ROUTE 를 통해 전달되는 경우, 부트스트랩 정보는 SLS 를 운반하는 LCT 채널 내지 그 LCT 채널을 포함하는 ROUTE 세션의 데스티네이션 IP 어드레스 및 데스티네이션 포트 정보를 포함할 수 있다. SLS 가 MMT 를 통해 전달되는 경우, 부트스트랩 정보는 SLS 를 운반하는 MMTP 세션의 데스티네이션 IP 어드레스 및 데스티네이션 포트 정보를 포함할 수 있다.
도시된 실시예에서, SLT 가 기술하는 서비스 #1 의 SLS 는 ROUTE 를 통해 전달되고, SLT 는 해당 SLS 가 전달되는 LCT 채널을 포함하는 ROUTE 세션에 대한 부트스트랩 정보(sIP1, dIP1, dPort1) 를 포함할 수 있다. SLT 가 기술하는 서비스 #2 의 SLS 는 MMT 를 통해 전달되고, SLT 는 해당 SLS 가 전달되는 MMTP 패킷 플로우를 포함하는 MMTP 세션에 대한 부트스트랩 정보(sIP2, dIP2, dPort2) 를 포함할 수 있다.
SLS 는 해당 서비스에 대한 특성을 기술하는 시그널링 정보로서, 해당 서비스 및 해당 서비스의 서비스 컴포넌트를 획득하기 위한 정보를 제공하거나, 해당 서비스를 유의미하게 재생하기 위한 수신기 캐패빌리티 정보 등을 포함할 수 있다. 각 서비스에 대해 별개의 서비스 시그널링을 가지면 수신기는 브로드캐스트 스트림 내에서 전달되는 전체 SLS을 파싱할 필요 없이 원하는 서비스에 대한 적절한 SLS를 획득하면 된다.
SLS 가 ROUTE 프로토콜을 통해 전달되는 경우, SLS 는 SLT 가 지시하는 ROUTE 세션의 특정(dedicated) LCT 채널을 통해 전달될 수 있다. 실시예에 따라 이 LCT 채널은 tsi = 0 로 식별되는 LCT 채널일 수 있다. 이 경우 SLS 는 USBD/USD (User Service Bundle Description / User Service Description), S-TSID (Service-based Transport Session Instance Description) 및/또는 MPD (Media Presentation Description) 를 포함할 수 있다.
여기서 USBD 내지 USD 는 SLS 프래그먼트 중 하나로서, 서비스의 구체적 기술적 정보들을 기술하는 시그널링 허브로서 역할할 수 있다. USBD 는 서비스 식별 정보, 디바이스 캐패빌리티 정보 등을 포함할 수 있다. USBD 는 다른 SLS 프래그먼트(S-TSID, MPD 등) 에의 레퍼런스 정보(URI 레퍼런스)를 포함할 수 있다. 즉, USBD/USD 는 S-TSID 와 MPD 를 각각 레퍼런싱할 수 있다. 또한 USBD 는 수신기가 전송 모드(방송망/브로드밴드)를 결정할 수 있게 해주는 메타데이터 정보를 더 포함할 수 있다. USBD/USD 의 구체적 내용들에 대해서는 후술한다.
S-TSID 는 SLS 프래그먼트 중 하나로서, 해당 서비스의 서비스 컴포넌트를 운반하는 전송 세션에 대한 전체적인 세션 디스크립션 정보를 제공할 수 있다. S-TSID 는 해당 서비스의 서비스 컴포넌트가 전달되는 ROUTE 세션 및/또는 그 ROUTE 세션들의 LCT 채널에 대한 전송 세션 디스크립션 정보를 제공할 수 있다. S-TSID 는 하나의 서비스와 관련된 서비스 컴포넌트들의 컴포넌트 획득(acquisition) 정보를 제공할 수 있다. S-TSID 는, MPD 의 DASH 레프리젠테이션(Representation) 과 해당 서비스 컴포넌트의 tsi 간의 매핑을 제공할 수 있다. S-TSID 의 컴포넌트 획득 정보는 tsi, 관련 DASH 레프리젠테이션의 식별자의 형태로 제공될 수 있으며, 실시예에 따라 PLP ID 를 포함하거나 포함하지 않을 수 있다. 컴포넌트 획득 정보를 통해 수신기는 한 서비스의 오디오/비디오 컴포넌트들을 수집하고 DASH 미디어 세그먼트들의 버퍼링, 디코딩 등을 수행할 수 있다. S-TSID 는 전술한 바와 같이 USBD 에 의해 레퍼런싱될 수 있다. S-TSID 의 구체적 내용들에 대해서는 후술한다.
MPD 는 SLS 프래그먼트 중 하나로서, 해당 서비스의 DASH 미디어 프리젠테이션에 관한 디스크립션을 제공할 수 있다. MPD 는 미디어 세그먼트들에 대한 리소스 식별자(resource identifier) 를 제공하고, 식별된 리소스들에 대한 미디어 프리젠테이션 내에서의 컨텍스트 정보를 제공할 수 있다. MPD 는 방송망을 통해 전달되는 DASH 레프리젠테이션(서비스 컴포넌트)를 기술하고, 또한 브로드밴드를 통해 전달되는 추가적인 DASH 레프리젠테이션을 기술할 수 있다(하이브리드 딜리버리). MPD 는 전술한 바와 같이 USBD 에 의해 레퍼런싱될 수 있다.
SLS 가 MMT 프로토콜을 통해 전달되는 경우, SLS 는 SLT 가 지시하는 MMTP 세션의 특정(dedicated) MMTP 패킷 플로우을 통해 전달될 수 있다. 실시예에 따라 SLS 를 전달하는 MMTP 패킷들의 packet_id 는 00 의 값을 가질 수 있다. 이 경우 SLS 는 USBD/USD 및/또는 MMT Package (MP) 테이블을 포함할 수 있다.
여기서 USBD 는 SLS 프래그먼트의 하나로서, ROUTE 에서의 그것과 같이 서비스의 구체적 기술적 정보들을 기술할 수 있다. 여기서의 USBD 역시 다른 SLS 프래그먼트에의 레퍼런스 정보(URI 레퍼런스)를 포함할 수 있다. MMT 의 USBD 는 MMT 시그널링의 MP 테이블을 레퍼런싱할 수 있다. 실시예에 따라 MMT 의 USBD 는 S-TSID 및/또는 MPD 에의 레퍼런스 정보 또한 포함할 수 있다. 여기서의 S-TSID 는 ROUTE 프로토콜을 통해 전달되는 NRT 데이터를 위함일 수 있다. MMT 프로토콜을 통해 리니어 서비스 컴포넌트가 전달되는 경우에도 NRT 데이터는 ROUTE 프로토콜을 통해 전달될 수 있기 때문이다. MPD 는 하이브리드 서비스 딜리버리에 있어서, 브로드밴드로 전달되는 서비스 컴포넌트를 위함일 수 있다. MMT 의 USBD 의 구체적 내용들에 대해서는 후술한다.
MP 테이블은 MPU 컴포넌트들을 위한 MMT 의 시그널링 메시지로서, 해당 서비스의 서비스 컴포넌트를 운반하는 MMTP 세션에 대한 전체적인 세션 디스크립션 정보를 제공할 수 있다. 또한 MP 테이블은 이 MMTP 세션을 통해 전달되는 에셋(Asset) 에 대한 디스크립션을 포함할 수 있다. MP 테이블은 MPU 컴포넌트들을 위한 스트리밍 시그널링 정보로서, 하나의 서비스에 해당하는 에셋들의 리스트와 이 컴포넌트들의 로케이션 정보(컴포넌트 획득 정보)를 제공할 수 있다. MP 테이블의 구체적인 내용은 MMT 에서 정의된 형태이거나, 변형이 이루어진 형태일 수 있다. 여기서 Asset 이란, 멀티미디어 데이터 엔티티로서, 하나의 유니크 ID 로 연합되고 하나의 멀티미디어 프리젠테이션을 생성하는데 사용되는 데이터 엔티티를 의미할 수 있다. Asset 은 하나의 서비스를 구성하는 서비스 컴포넌트에 해당할 수 있다. MP 테이블을 이용하여 원하는 서비스에 해당하는 스트리밍 서비스 컴포넌트(MPU) 에 접근할 수 있다. MP 테이블은 전술한 바와 같이 USBD 에 의해 레퍼런싱될 수 있다.
기타 다른 MMT 시그널링 메시지가 정의될 수 있다. 이러한 MMT 시그널링 메시지들에 의해 MMTP 세션 내지 서비스에 관련된 추가적인 정보들이 기술될 수 있다.
ROUTE 세션은 소스 IP 어드레스, 데스티네이션 IP 어드레스, 데스티네이션 포트 넘버에 의해 식별된다. LCT 세션은 페어런트 ROUTE 세션의 범위 내에서 유일한 TSI (transport session identifier)에 의해 식별된다. MMTP 세션은 데스티네이션 IP 어드레스 및 데스티네이션 포트 넘버에 의해 식별된다. MMTP 패킷 플로우는 페어런트 MMTP 세션의 범위 내에서 유일한 packet_id에 의해 식별된다.
ROUTE 의 경우 S-TSID, USBD/USD, MPD 또는 이 들을 전달하는 LCT 세션을 서비스 시그널링 채널이라 부를 수도 있다. MMTP 의 경우, USBD/UD, MMT 시그널링 메시지들 또는 이들을 전달하는 패킷 플로우를 서비스 시그널링 채널이라 부를 수도 있다.
도시된 실시예와는 달리, 하나의 ROUTE 또는 MMTP 세션은 복수개의 PLP 를 통해 전달될 수 있다. 즉, 하나의 서비스는 하나 이상의 PLP 를 통해 전달될 수도 있다. 도시된 것과 달리 실시예에 따라 하나의 서비스를 구성하는 컴포넌트들이 서로 다른 ROUTE 세션들을 통해 전달될 수도 있다. 또한, 실시예에 따라 하나의 서비스를 구성하는 컴포넌트들이 서로 다른 MMTP 세션들을 통해 전달될 수도 있다. 실시예에 따라 하나의 서비스를 구성하는 컴포넌트들이 ROUTE 세션과 MMTP 세션에 나뉘어 전달될 수도 있다. 도시되지 않았으나, 하나의 서비스를 구성하는 컴포넌트가 브로드밴드를 통해 전달(하이브리드 딜리버리)되는 경우도 있을 수 있다.
도 3 은 본 발명의 일 실시예에 따른 LLS (Low Level Signaling) 테이블 및 SLT (Service List Table)를 도시한 도면이다.
도시된 LLS 테이블의 일 실시예(t3010) 은, LLS_table_id 필드, provider_id 필드, LLS_table_version 필드 및/또는 LLS_table_id 필드에 따른 정보들을 포함할 수 있다.
LLS_table_id 필드는 해당 LLS 테이블의 타입을 식별하고, provider_id 필드는 해당 LLS 테이블에 의해 시그널링되는 서비스들과 관련된 서비스 프로바이더를 식별할 수 있다. 여기서 서비스 프로바이더는 해당 브로드캐스트 스트림의 전부 또는 일부를 사용하는 브로드캐스터로서, provider_id 필드는 해당 브로드캐스트 스트림을 사용중인 복수의 브로드캐스터들 중 하나를 식별할 수 있다. LLS_table_version 필드는 해당 LLS 테이블의 버전 정보를 제공할 수 있다.
LLS_table_id 필드의 값에 따라, 해당 LLS 테이블은 전술한 SLT, 컨텐트 어드바이저리 레이팅(Content advisory rating) 에 관련된 정보를 포함하는 RRT(Rating Region Table), 시스템 타임과 관련된 정보를 제공하는 SystemTime 정보, 긴급 경보와 관련된 정보를 제공하는 CAP (Common Alert Protocol) 메시지 중 하나를 포함할 수 있다. 실시예에 따라 이들 외에 다른 정보가 LLS 테이블에 포함될 수도 있다.
도시된 SLT 의 일 실시예(t3020) 는, @bsid 속성, @sltCapabilities 속성, sltInetUrl 엘레멘트 및/또는 Service 엘레멘트를 포함할 수 있다. 각 필드들은 도시된 Use 컬럼의 값에 따라 생략되거나, 복수개 존재할 수 있다.
@bsid 속성은 브로드캐스트 스트림의 식별자일 수 있다. @sltCapabilities 속성은 해당 SLT 가 기술하는 모든 서비스들을 디코딩하고 유의미하게 재생하는데 요구되는 캐패빌리티 정보를 제공할 수 있다. sltInetUrl 엘레멘트는 해당 SLT 의 서비스들을 위한 ESG 내지 서비스 시그널링 정보를 브로드밴드를 통해 얻기 위해 사용되는 베이스 URL 정보를 제공할 수 있다. sltInetUrl 엘레멘트는 @urlType 속성을 더 포함할 수 있는데, 이는 해당 URL 을 통해 얻을 수 있는 데이터의 타입을 지시할 수 있다.
Service 엘레멘트는 해당 SLT 가 기술하는 서비스들에 대한 정보를 포함하는 엘레멘트일 수 있으며, 각각의 서비스들에 대해 Service 엘레멘트가 존재할 수 있다. Service 엘레멘트는 @serviceId 속성, @sltSvcSeqNum 속성, @protected 속성, @majorChannelNo 속성, @minorChannelNo 속성, @serviceCategory 속성, @shortServiceName 속성, @hidden 속성, @broadbandAccessRequired 속성, @svcCapabilities 속성, BroadcastSvcSignaling 엘레멘트 및/또는 svcInetUrl 엘레멘트를 포함할 수 있다.
@serviceId 속성은 해당 서비스의 식별자이고, @sltSvcSeqNum 속성은 해당 서비스에 대한 SLT 정보의 시퀀스 넘버를 나타낼 수 있다. @protected 속성은 해당 서비스의 유의미한 재생을 위해 필요한 적어도 하나의 서비스 컴포넌트가 보호(protected)되고 있는지 여부를 지시할 수 있다. @majorChannelNo 속성과 @minorChannelNo 속성은 각각 해당 서비스의 메이저 채널 넘버와 마이너 채널 넘버를 지시할 수 있다.
@serviceCategory 속성은 해당 서비스의 카테고리를 지시할 수 있다. 서비스의 카테고리로는 리니어 A/V 서비스, 리니어 오디오 서비스, 앱 기반 서비스, ESG 서비스, EAS 서비스 등이 있을 수 있다. @shortServiceName 속성은 해당 서비스의 짧은 이름(Short name)을 제공할 수 있다. @hidden 속성은 해당 서비스가 테스팅 또는 독점적(proprietary) 사용을 위한 서비스인지 여부를 지시할 수 있다. @broadbandAccessRequired 속성은 해당 서비스의 유의미한 재생을 위하여 브로드밴드 억세스가 필요한지 여부를 지시할 수 있다. @svcCapabilities 속성은 해당 서비스의 디코딩과 유의미한 재생을 위하여 필요한 캐패빌리티 정보를 제공할 수 있다.
BroadcastSvcSignaling 엘레멘트는 해당 서비스의 브로드캐스트 시그널링에 관련된 정보들을 제공할 수 있다. 이 엘레멘트는 해당 서비스의 방송망을 통한 시그널링에 대하여, 로케이션, 프로토콜, 어드레스 등의 정보를 제공할 수 있다. 자세한 사항은 후술한다.
svcInetUrl 엘레멘트는 해당 서비스를 위한 시그널링 정보를 브로드밴드를 통해 액세스하기 위한 URL 정보를 제공할 수 있다. sltInetUrl 엘레멘트는 @urlType 속성을 더 포함할 수 있는데, 이는 해당 URL 을 통해 얻을 수 있는 데이터의 타입을 지시할 수 있다.
전술한 BroadcastSvcSignaling 엘레멘트는 @slsProtocol 속성, @slsMajorProtocolVersion 속성, @slsMinorProtocolVersion 속성, @slsPlpId 속성, @slsDestinationIpAddress 속성, @slsDestinationUdpPort 속성 및/또는 @slsSourceIpAddress 속성을 포함할 수 있다.
@slsProtocol 속성은 해당 서비스의 SLS 를 전달하는데 사용되는 프로토콜을 지시할 수 있다(ROUTE, MMT 등). @slsMajorProtocolVersion 속성 및 @slsMinorProtocolVersion 속성은 각각 해당 서비스의 SLS 를 전달하는데 사용되는 프로토콜의 메이저 버전 넘버 및 마이너 버전 넘버를 지시할 수 있다.
@slsPlpId 속성은 해당 서비스의 SLS 를 전달하는 PLP 를 식별하는 PLP 식별자를 제공할 수 있다. 실시예에 따라 이 필드는 생략될 수 있으며, SLS 가 전달되는 PLP 정보는 후술할 LMT 내의 정보와, SLT 의 부트스트랩 정보를 조합하여 확인될 수도 있다.
@slsDestinationIpAddress 속성, @slsDestinationUdpPort 속성 및 @slsSourceIpAddress 속성은 각각 해당 서비스의 SLS 를 전달하는 전송 패킷의 데스티네이션 IP 어드레스, 데스티네이션 UDP 포트 및 소스 IP 어드레스 를 지시할 수 있다. 이들은 SLS 가 전달되는 전송세션(ROUTE 세션 또는 MMTP 세션)을 식별할 수 있다. 이들은 부트스트랩 정보에 포함될 수 있다.
도 4 는 본 발명의 일 실시예에 따른, ROUTE 로 전달되는 USBD 및 S-TSID 를 도시한 도면이다.
도시된 USBD 의 일 실시예(t4010) 은, bundleDescription 루트 엘레멘트를 가질 수 있다. bundleDescription 루트 엘레멘트는 userServiceDescription 엘레멘트를 가질 수 있다. userServiceDescription 엘레멘트는 하나의 서비스에 대한 인스턴스일 수 있다.
userServiceDescription 엘레멘트는 @globalServiceID 속성, @serviceId 속성, @serviceStatus 속성, @fullMPDUri 속성, @sTSIDUri 속성, name 엘레멘트, serviceLanguage 엘레멘트, capabilityCode 엘레멘트 및/또는 deliveryMethod 엘레멘트를 포함할 수 있다. 각 필드들은 도시된 Use 컬럼의 값에 따라 생략되거나, 복수개 존재할 수 있다.
@globalServiceID 속성은 해당 서비스의 글로벌하게 유니크한(globally unique) 식별자로서, ESG 데이터와 링크되는데 사용될 수 있다(Service@globalServiceID). @serviceId 속성은 SLT 의 해당 서비스 엔트리와 대응되는 레퍼런스로서, SLT 의 서비스 ID 정보와 동일할 수 있다. @serviceStatus 속성은 해당 서비스의 상태를 지시할 수 있다. 이 필드는 해당 서비스가 액티브인지 인액티브(inactive) 상태인지 여부를 지시할 수 있다.
@fullMPDUri 속성은 해당 서비스의 MPD 프래그먼트를 레퍼런싱할 수 있다. MPD 는 전술한 바와 같이 방송망 또는 브로드밴드를 통해 전달되는 서비스 컴포넌트에 대한 재생 디스크립션을 제공할 수 있다. @sTSIDUri 속성은 해당 서비스의 S-TSID 프래그먼트를 레퍼런싱할 수 있다. S-TSID 는 전술한 바와 같이 해당 서비스를 운반하는 전송 세션에의 액세스와 관련된 파라미터들을 제공할 수 있다.
name 엘레멘트는 해당 서비스의 이름을 제공할 수 있다. 이 엘레멘트는 @lang 속성을 더 포함할 수 있는데, 이 필드는 name 엘레멘트가 제공하는 이름의 언어를 지시할 수 있다. serviceLanguage 엘레멘트는 해당 서비스의 이용 가능한(available) 언어들을 지시할 수 있다. 즉, 이 엘레멘트는 해당 서비스가 제공될 수 있는 언어들을 나열할 수 있다.
capabilityCode 엘레멘트는 해당 서비스를 유의미하게 재생하기 위해 필요한 수신기 측의 캐패빌리티 또는 캐패빌리티 그룹 정보를 지시할 수 있다. 이 정보들은 서비스 아나운스먼트(announccement) 에서 제공되는 캐패빌리티 정보 포맷과 호환될 수 있다.
deliveryMethod 엘레멘트는 해당 서비스의 방송망 또는 브로드밴드를 통해 액세스되는 컨텐츠들에 대하여, 전송 관련 정보들을 제공할 수 있다. deliveryMethod 엘레멘트는 broadcastAppService 엘레멘트 및/또는 unicastAppService 엘레멘트를 포함할 수 있다. 이 엘레멘트들은 각각 basePattern 엘레멘트를 하위 엘레멘트로 가질 수 있다.
broadcastAppService 엘레멘트는 방송망을 통해 전달되는 DASH 레프리젠테이션에 대한 전송 관련 정보를 포함할 수 있다. 이 DASH 레프리젠테이션들은 해당 서비스 미디어 프리젠테이션의 모든 피리오드(Period)에 걸친 미디어 컴포넌트들을 포함할 수 있다.
이 엘레멘트의 basePattern 엘레멘트는 수신기가 세그먼트 URL 과 매칭하는데 사용되는 캐릭터 패턴을 나타낼 수 있다. 이는 DASH 클라이언트가 해당 레프리젠테이션의 세그먼트들을 요청하는데 사용될 수 있다. 매칭된다는 것은 해당 미디어 세그먼트가 방송망을 통해 전달된다는 것을 암시할 수 있다.
unicastAppService 엘레멘트는 브로드밴드를 통해 전달되는 DASH 레프리젠테이션에 대한 전송 관련 정보를 포함할 수 있다. 이 DASH 레프리젠테이션들은 해당 서비스 미디어 프리젠테이션의 모든 피리오드(Period)에 걸친 미디어 컴포넌트들을 포함할 수 있다.
이 엘레멘트의 basePattern 엘레멘트는 수신기가 세그먼트 URL 과 매칭하는데 사용되는 캐릭터 패턴을 나타낼 수 있다. 이는 DASH 클라이언트가 해당 레프리젠테이션의 세그먼트들을 요청하는데 사용될 수 있다. 매칭된다는 것은 해당 미디어 세그먼트가 브로드밴드를 통해 전달된다는 것을 암시할 수 있다.
도시된 S-TSID 의 일 실시예(t4020) 은, S-TSID 루트 엘레멘트를 가질 수 있다. S-TSID 루트 엘레멘트는 @serviceId 속성 및/또는 RS 엘레멘트를 포함할 수 있다. 각 필드들은 도시된 Use 컬럼의 값에 따라 생략되거나, 복수개 존재할 수 있다.
@serviceId 속성은 해당 서비스의 식별자로서, USBD/USD 의 해당 서비스를 레퍼런싱할 수 있다. RS 엘레멘트는 해당 서비스의 서비스 컴포넌트들이 전달되는 ROUTE 세션들에 대한 정보를 기술할 수 있다. 이러한 ROUTE 세션의 개수에 따라, 이 엘레멘트는 복수개 존재할 수 있다. RS 엘레멘트는 @bsid 속성, @sIpAddr 속성, @dIpAddr 속성, @dport 속성, @PLPID 속성 및/또는 LS 엘레멘트를 더 포함할 수 있다.
@bsid 속성은 해당 서비스의 서비스 컴포넌트들이 전달되는 브로드캐스트 스트림의 식별자일 수 있다. 이 필드가 생략된 경우, 디폴트 브로드캐스트 스트림은 해당 서비스의 SLS 를 전달하는 PLP 를 포함하는 브로드캐스트 스트림일 수 있다. 이 필드의 값은 SLT 의 @bsid 속성과 같은 값일 수 있다.
@sIpAddr 속성, @dIpAddr 속성 및 @dport 속성은 각각 해당 ROUTE 세션의 소스 IP 어드레스, 데스티네이션 IP 어드레스 및 데스티네이션 UDP 포트를 나타낼 수 있다. 이 필드들이 생략되는 경우, 디폴트 값들은 해당 SLS 를 전달하는, 즉 해당 S-TSID 를 전달하고 있는 현재의, ROUTE 세션의 소스 IP 어드레스, 데스티네이션 IP 어드레스 및 데스티네이션 UDP 포트값들일 수 있다. 현재 ROUTE 세션이 아닌, 해당 서비스의 서비스 컴포넌트들을 전달하는 다른 ROUTE 세션에 대해서는, 본 필드들이 생략되지 않을 수 있다.
@PLPID 속성은 해당 ROUTE 세션의 PLP ID 정보를 나타낼 수 있다. 이 필드가 생략되는 경우, 디폴트 값은 해당 S-TSID 가 전달되고 있는 현재 PLP 의 PLP ID 값일 수 있다. 실시예에 따라 이 필드는 생략되고, 해당 ROUTE 세션의 PLP ID 정보는 후술할 LMT 내의 정보와, RS 엘레멘트의 IP 어드레스 / UDP 포트 정보들을 조합하여 확인될 수도 있다.
LS 엘레멘트는 해당 서비스의 서비스 컴포넌트들이 전달되는 LCT 채널들에 대한 정보를 기술할 수 있다. 이러한 LCT 채널의 개수에 따라, 이 엘레멘트는 복수개 존재할 수 있다. LS 엘레멘트는 @tsi 속성, @PLPID 속성, @bw 속성, @startTime 속성, @endTime 속성, SrcFlow 엘레멘트 및/또는 RepairFlow 엘레멘트를 포함할 수 있다.
@tsi 속성은 해당 LCT 채널의 tsi 정보를 나타낼 수 있다. 이를 통해 해당 서비스의 서비스 컴포넌트가 전달되는 LCT 채널들이 식별될 수 있다. @PLPID 속성은 해당 LCT 채널의 PLP ID 정보를 나타낼 수 있다. 실시예에 따라 이 필드는 생략될 수 있다. @bw 속성은 해당 LCT 채널의 최대 대역폭를 나타낼 수 있다. @startTime 속성은 해당 LCT 세션의 스타트 타임을 지시하고, @endTime 속성은 해당 LCT 채널의 엔드 타임을 지시할 수 있다.
SrcFlow 엘레멘트는 ROUTE 의 소스 플로우에 대해 기술할 수 있다. ROUTE 의 소스 프로토콜은 딜리버리 오브젝트를 전송하기 위해 사용되며, 한 ROUTE 세션 내에서 적어도 하나 이상의 소스 플로우를 설정(establish)할 수 있다. 이 소스 플로우들은 관련된 오브젝트들을 오브젝트 플로우로서 전달할 수 있다.
RepairFlow 엘레멘트는 ROUTE 의 리페어 플로우에 대해 기술할 수 있다. 소스 프로토콜에 따라 전달되는 딜리버리 오브젝트들은 FEC (Forward Error Correction) 에 따라 보호될 수 있는데, 리페어 프로토콜은 이러한 FEC 프로텍션을 가능케 하는 FEC 프레임워크(framework)를 정의할 수 있다.
도 5 는 본 발명의 일 실시예에 따른, MMT 로 전달되는 USBD 를 도시한 도면이다.
도시된 USBD 의 일 실시예는, bundleDescription 루트 엘레멘트를 가질 수 있다. bundleDescription 루트 엘레멘트는 userServiceDescription 엘레멘트를 가질 수 있다. userServiceDescription 엘레멘트는 하나의 서비스에 대한 인스턴스일 수 있다.
userServiceDescription 엘레멘트는 @globalServiceID 속성, @serviceId 속성, Name 엘레멘트, serviceLanguage 엘레멘트, contentAdvisoryRating 엘레멘트, Channel 엘레멘트, mpuComponent 엘레멘트, routeComponent 엘레멘트, broadbandComponent 엘레멘트 및/또는 ComponentInfo 엘레멘트를 포함할 수 있다. 각 필드들은 도시된 Use 컬럼의 값에 따라 생략되거나, 복수개 존재할 수 있다.
@globalServiceID 속성, @serviceId 속성, Name 엘레멘트 및/또는 serviceLanguage 엘레멘트는 전술한 ROUTE 로 전달되는 USBD 의 해당 필드들과 같을 수 있다. contentAdvisoryRating 엘레멘트는 해당 서비스의 컨텐트 어드바이저리(advisory) 레이팅을 나타낼 수 있다. 이 정보들은 서비스 아나운스먼트(announccement) 에서 제공되는 컨텐트 어드바이저리 레이팅 정보 포맷과 호환될 수 있다. Channel 엘레멘트는 해당 서비스와 관련된 정보들을 포함할 수 있다. 이 엘레멘트의 자세한 내용에 대해서는 후술한다.
mpuComponent 엘레멘트는 해당 서비스의 MPU 로서 전달되는 서비스 컴포넌트들에 대한 디스크립션을 제공할 수 있다. 이 엘레멘트는 @mmtPackageId 속성 및/또는 @nextMmtPackageId 속성을 더 포함할 수 있다. @mmtPackageId 속성은 해당 서비스의 MPU 로서 전달되는 서비스 컴포넌트들의 MMT 패키지(Package) 를 레퍼런싱할 수 있다. @nextMmtPackageId 속성은 시간상 @mmtPackageId 속성이 레퍼런싱하는 MMT 패키지 다음으로 사용될 MMT 패키지를 레퍼런싱할 수 있다. 이 엘레멘트의 정보들을 통해 MP 테이블이 레퍼런싱될 수 있다.
routeComponent 엘레멘트는 ROUTE 로 전달되는 해당 서비스의 서비스 컴포넌트들에 대한 디스크립션을 포함할 수 있다. 리니어 서비스 컴포넌트들이 MMT 프로토콜로 전달되는 경우라 하더라도, NRT 데이터들은 전술한 바와 같이 ROUTE 프로토콜에 따라 전달될 수 있다. 이 엘레멘트는 이러한 NRT 데이터들에 대한 정보들을 기술할 수 있다. 이 엘레멘트의 자세한 내용에 대해서는 후술한다.
broadbandComponent 엘레멘트는 브로드밴드로 전달되는 해당 서비스의 서비스 컴포넌트들에 대한 디스크립션을 포함할 수 있다. 하이브리드 서비스 딜리버리에 있어서, 한 서비스의 일부 서비스 컴포넌트 또는 기타 파일들은 브로드밴드를 통해 전달될 수 있다. 이 엘레멘트는 이러한 데이터들에 대한 정보들을 기술할 수 있다. 이 엘레멘트는 @fullMPDUri 속성을 더 포함할 수 있다. 이 속성은 브로드밴드로 전달되는 서비스 컴포넌트들에 대해 기술하는 MPD 를 레퍼런싱할 수 있다. 하이브리드 서비스 딜리버리 이외에도, 터널 내의 주행 등으로 인해 방송 신호가 약화되는 경우에 있어, 방송망-브로드밴드 간의 핸드오프(handoff) 를 지원하기 위해 본 엘레멘트가 필요할 수 있다. 방송 신호가 약해지는 경우, 브로드밴드를 통해 서비스 컴포넌트를 획득하다가, 다시 방송 신호가 강해지면 방송망을 통해 서비스 컴포넌트를 획득하여 서비스의 연속성이 보장될 수 있다.
ComponentInfo 엘레멘트는 해당 서비스의 서비스 컴포넌트들에 대한 정보를 포함할 수 있다. 서비스의 서비스 컴포넌트들의 개수에 따라, 이 엘레멘트는 복수개 존재할 수 있다. 이 엘레멘트는 각 서비스 컴포넌트의 타입, 롤(role), 이름, 식별자, 프로텍션 여부 등의 정보들을 기술할 수 있다. 이 엘레멘트의 자세한 정보에 대해서는 후술한다.
전술한 Channel 엘레멘트는 @serviceGenre 속성, @serviceIcon 속성 및/또는 ServiceDescription 엘레멘트를 더 포함할 수 있다. @serviceGenre 속성은 해당 서비스의 장르를 지시하고, @serviceIcon 속성은 해당 서비스를 대표하는 아이콘(icon) 의 URL 정보를 포함할 수 있다. ServiceDescription 엘레멘트는 해당 서비스의 서비스 디스크립션을 제공하는데, 이 엘레멘트는 @serviceDescrText 속성 및/또는 @serviceDescrLang 속성을 더 포함할 수 있다. 이 속성들은 각각 해당 서비스 디스크립션의 텍스트 및 그 텍스트에 사용되는 언어를 지시할 수 있다.
전술한 routeComponent 엘레멘트는 @sTSIDUri 속성, @sTSIDDestinationIpAddress 속성, @sTSIDDestinationUdpPort 속성, @sTSIDSourceIpAddress 속성, @sTSIDMajorProtocolVersion 속성 및/또는 @sTSIDMinorProtocolVersion 속성을 더 포함할 수 있다.
@sTSIDUri 속성은 S-TSID 프래그먼트를 레퍼런싱할 수 있다. 이 필드는 전술한 ROUTE 로 전달되는USBD 의 해당 필드와 같을 수 있다. 이 S-TSID 는 ROUTE 로 전달되는 서비스 컴포넌트들에 대한 액세스 관련 정보를 제공할 수 있다. 이 S-TSID 는 MMT 프로토콜에 따라 리니어 서비스 컴포넌트들이 전달되는 상황에서, ROUTE 프로토콜에 따라 전달되는 NRT 데이터들을 위해 존재할 수 있다.
@sTSIDDestinationIpAddress 속성, @sTSIDDestinationUdpPort 속성 및 @sTSIDSourceIpAddress 속성은 각각 전술한 S-TSID 를 운반하는 전송 패킷의 데스티네이션 IP 어드레스, 데스티네이션 UDP 포트, 소스 IP 어드레스를 나타낼 수 있다. 즉, 이 필드들은 전술한 S-TSID 를 운반하는 전송 세션(MMTP 세션 또는 ROUTE 세션)을 식별할 수 있다.
@sTSIDMajorProtocolVersion 속성 및 @sTSIDMinorProtocolVersion 속성은 전술한 S-TSID 를 전달하는데 사용되는 전송 프로토콜의 메이저 버전 넘버 및 마이너 버전 넘버를 지시할 수 있다.
전술한 ComponentInfo 엘레멘트는 @componentType 속성, @componentRole 속성, @componentProtectedFlag 속성, @componentId 속성 및/또는 @componentName 속성을 더 포함할 수 있다.
@componentType 속성은 해당 컴포넌트의 타입을 지시할 수 있다. 예를 들어 이 속성은 해당 컴포넌트가 오디오, 비디오, 클로즈드캡션 컴포넌트인지를 지시할 수 있다. @componentRole 속성은 해당 컴포넌트의 롤(역할)을 지시할 수 있다. 예를 들어 이 속성은 해당 컴포넌트가 오디오 컴포넌트인 경우 메인 오디오, 뮤직, 코멘터리 등인지를 지시할 수 있다. 해당 컴포넌트가 비디오 컴포넌트인 경우 프라이머리 비디오인지 등을 지시할 수 있다. 해당 컴포넌트가 클로즈드 캡션 컴포넌트인 경우 노말 캡션인지 이지리더(easy reader) 타입인지 등을 지시할 수 있다.
@componentProtectedFlag 속성은 해당 서비스 컴포넌트가 프로텍티드되었는지, 예를 들어 암호화되었는지를 지시할 수 있다. @componentId 속성은 해당 서비스 컴포넌트의 식별자를 나타낼 수 있다. 이 속성의 값은 이 서비스 컴포넌트에 해당하는 MP 테이블의 asset_id (에셋 ID) 와 같은 값일 수 있다. @componentName 속성은 해당 서비스 컴포넌트의 이름을 나타낼 수 있다.
도 6 은 본 발명의 일 실시예에 따른 링크 레이어(Link Layer) 동작을 도시한 도면이다.
링크 레이어는 피지컬 레이어와 네트워크 레이어 사이의 레이어일 수 있다. 송신 측에서는 네트워크 레이어에서 피지컬 레이어로 데이터를 전송하고, 수신 측에서는 피지컬 레이어에서 네트워크 레이어로 데이터를 전송할 수 있다(t6010). 링크 레이어의 목적은 피지컬 레이어에 의한 처리를 위해 모든 입력 패킷 타입을 하나의 포맷으로 압축(abstracting)하는 것, 아직 정의되지 않은 입력 패킷 타입에 대한 유연성(flexibility) 및 추후 확장 가능성을 보장하는 것일 수 있다. 또한 링크 레이어는 입력 패킷의 헤더의 불필요한 정보를 압축하는 옵션을 제공함으로써, 입력 데이터가 효율적으로 전송될 수 있도록 할 수 있다. 링크 레이어의 오버헤드 리덕션, 인캡슐레이션 등의 동작은 링크 레이어 프로토콜이라 불리고, 해당 프로토콜을 이용하여 생성된 패킷은 링크 레이어 패킷이라 불릴 수 있다. 링크 레이어는 패킷 인캡슐레이션(packet encapsulation), 오버헤드 리덕션(Overhead Reduction) 및/또는 시그널링 전송(Signaling Transmission) 등의 기능을 수행할 수 있다.
송신측 기준으로, 링크 레이어(ALP)는 입력 패킷에 대하여 오버헤드 리덕션 과정을 수행한 후 이들을 링크 레이어 패킷으로 인캡슐레이션할 수 있다. 또한 실시예에 따라 링크 레이어는 오버헤드 리덕션 과정을 수행하지 아니하고, 링크 레이어 패킷으로 인캡슐레이션할 수도 있다. 링크 레이어 프로토콜의 사용으로 인해 피지컬 레이어 상에서 데이터의 전송에 대한 오버헤드가 크게 감소할 수 있으며, 본 발명에 따른 링크 레이어 프로토콜은 IP 오버헤드 리덕션 및/또는 MPEG-2 TS 오버헤드 리덕션을 제공할 수 있다.
도시된, IP 패킷이 입력패킷으로 입력되는 경우에 있어서(t6010), 링크 레이어는 IP 헤더 압축, 어댑테이션 및/또는 인캡슐레이션 과정을 차례로 수행할 수 있다. 실시예에 따라 일부 과정은 생략될 수 있다. 먼저, RoHC 모듈이 IP 패킷 헤더 압축을 수행하여 불필요한 오버헤드를 줄이고, 어댑테이션 과정을 통해 컨텍스트 정보가 추출되고 대역 외로 전송될 수 있다. IP 헤더 압축과 어댑테이션 과정을 통칭하여 IP 헤더 압축이라 부를 수도 있다. 이 후 인캡슐레이션 과정을 통해 IP 패킷들이 링크 레이어 패킷들로 인캡슐레이션될 수 있다.
MPEG 2 TS 패킷이 입력패킷으로 입력되는 경우에 있어서, 링크 레이어는 TS 패킷에 대한 오버헤드 리덕션 및/또는 인캡슐레이션 과정을 차례로 수행할 수 있다. 실시예에 따라 일부 과정은 생략될 수 있다. 오버헤드 리덕션에 있어, 링크 레이어는 싱크 바이트 제거, 널 패킷 삭제 및/또는 공통(common) 헤더 제거 (압축)을 제공할 수 있다. 싱크 바이트 제거를 통해 TS 패킷당 1 바이트의 오버헤드 리덕션이 제공될 수 있다. 수신측에서 재삽입될 수 있는 방식으로 널 패킷 삭제가 수행될 수 있다. 또한 연속된 헤더들 간의 공통되는 정보들이 수신측에서 복구될 수 있는 방식으로 삭제(압축)될 수 있다. 각 오버헤드 리덕션 과정 중 일부는 생략될 수 있다. 이 후 인캡슐레이션 과정을 통해 TS 패킷들이 링크 레이어 패킷들로 인캡슐레이션될 수 있다. TS 패킷의 인캡슐레이션에 대한 링크 레이어 패킷 구조는 다른 타입의 패킷들과는 다를 수 있다.
먼저 IP 헤더 압축(IP Header Compression) 에 대해서 설명한다.
IP 패킷은 고정된 헤더 포맷을 가지고 있으나, 통신 환경에서 필요한 일부 정보는 브로드캐스트 환경에서 불필요할 수 있다. 링크 레이어 프로토콜은 IP 패킷의 헤더를 압축함으로써 브로드캐스트 오버헤드를 줄이는 메커니즘을 제공할 수 있다.
IP 헤더 압축은 헤더 컴프레서/디컴프레서 및/또는 어댑테이션 모듈을 포함할 수 있다. IP 헤더 컴프레서(RoHC 컴프레서)는 RoHC 방식에 기초하여 각 IP 패킷 헤더의 크기를 감소시킬 수 있다. 이 후 어댑테이션 모듈은 컨텍스트 정보를 추출하고 각 패킷 스트림으로부터 시그널링 정보를 생성할 수 있다. 수신기는 해당 패킷 스트림에 관련된 시그널링 정보를 파싱하고 컨텍스트 정보를 그 패킷 스트림에 붙일(attach) 수 있다. RoHC 디컴프레서는 패킷 헤더를 복구하여 원래의 IP 패킷을 재구성할 수 있다. 이하, IP 헤더 압축이란, 헤더 컴프레서에 의한 IP 헤더 압축만을 의미할 수도 있고, IP 헤더 압축과 어댑테이션 모듈에 의한 어댑테이션 과정을 합한 개념을 의미할 수도 있다. 디컴프레싱(decompressing) 에 대해서도 마찬가지이다.
이하, 어댑테이션(Adaptation) 에 대해서 설명한다.
단방향 링크를 통한 전송의 경우, 수신기가 컨텍스트의 정보를 갖고 있지 않으면, 디컴프레서는 완전한 컨텍스트를 수신할 때까지 수신된 패킷 헤더를 복구할 수 없다. 이는 채널 변경 지연 및 턴 온 딜레이 (turn-on delay)를 초래할 수 있다. 따라서 어댑테이션 기능을 통해, 컴프레서/디컴프레서 간의 컨피규레이션 파라미터와 컨텍스트 정보가 대역 외로 전송될 수 있다. 어댑테이션 펑션(function)은 컨텍스트 정보 및/또는 컨피규레이션 파라미터들을 이용하여 링크 레이어 시그널링을 생성(construction) 할 수 있다. 어댑테이션 펑션은 예전(previous) 컨피규레이션 파라미터 및/또는 컨텍스트 정보를 이용하여 각각의 피지컬 프레임을 통해 주기적으로 링크 레이어 시그널링을 전송할 수 있다.
압축된 IP 패킷들로부터 컨텍스트 정보가 추출되는데, 어댑테이션 모드에 따라 다양한 방법이 사용될 수 있다.
모드 #1 은 압축된 패킷 스트림에 대해 어떠한 동작도 수행하지 않는 모드로서, 어댑테이션 모듈이 버퍼로서 동작하는 모드일 수 있다.
모드 #2 는 압축된 패킷 스트림 중, IR 패킷을 검출하여 컨텍스트 정보(스태틱 체인)을 추출하는 모드일 수 있다. 추출후 IR 패킷은 IR-DYN 패킷으로 전환되고, IR-DYN 패킷은 원래의 IR 패킷을 대체하여 패킷 스트림 내에서 같은 순서로 전송될 수 있다.
모드 #3 (t6020) 는 압축된 패킷 스트림 중, IR 및 IR-DYN 패킷을 검출하고 컨텍스트 정보를 추출하는 모드일 수 있다. IR 패킷으로부터 스태틱 체인 및 다이나믹 체인이, IR-DYN 패킷으로부터 다이나믹 체인이 추출될 수 있다. 추출후 IR 및 IR-DYN 패킷은 일반 압축 패킷으로 전환될 수 있다. 전환된 패킷은 원래의 IR 및 IR-DYN 패킷을 대체하여 패킷 스트림 내에서 같은 순서로 전송될 수 있다.
각 모드에서, 컨텍스트 정보가 추출되고 남은 패킷들은, 압축된 IP 패킷을 위한 링크 레이어 패킷 구조에 따라 인캡슐레이션 되어 전송될 수 있다. 컨텍스트 정보들은, 링크 레이어 시그널링으로서, 시그널링 정보를 위한 링크 레이어 패킷 구조에 따라 인캡슐레이션 되어 전송될 수 있다.
추출된 컨텍스트 정보는 RDT (RoHC-U Description Table) 에 포함되어 RoHC 패킷 플로우와 별도로 전송될 수 있다. 컨텍스트 정보는 다른 시그널링 정보와 함께 특정(specific) 피지컬 데이터 경로를 통해 전송될 수 있다. 특정 피지컬 데이터 경로란, 실시예에 따라, 일반적인 PLP 중 하나를 의미할 수도 있고, LLS (Low Level Signaling) 이 전달되는 PLP 를 의미할 수도 있고, 지정된(dedicated) PLP 일 수도 있고, L1 시그널링 패쓰(path)를 의미할 수도 있다. 여기서 RDT 는 컨텍스트 정보(스태틱 체인 및/또는 다이나믹 체인) 및/또는 헤더 컴프레션과 관련된 정보를 포함하는 시그널링 정보일 수 있다. 실시예에 따라 RDT 는 컨텍스트 정보가 바뀔 때마다 전송될 수 있다. 또한 실시예에 따라 RDT 는 매 피지컬 프레임에서 전송될 수 있다. 매 피지컬 프레임에서 RDT 를 전송하기 위해서, 예전(previous) RDT 가 재사용(re-use)될 수 있다.
수신기는 패킷 스트림을 획득하기 앞서, 최초 PLP 를 선택해 SLT, RDT, LMT 등의 시그널링 정보를 먼저 획득할 수 있다. 수신기는 이 시그널링 정보들이 획득되면, 이 들을 조합하여 서비스 - IP 정보 - 컨텍스트 정보 - PLP 간의 매핑을 획득할 수 있다. 즉, 수신기는 어떤 서비스가 어느 IP 스트림들로 전송되는지, 어떤 PLP 로 어떤 IP 스트림들이 전달되는지 등을 알 수 있고, 또한 PLP 들의 해당 컨텍스트 정보들을 획득할 수 있다. 수신기는 특정 패킷 스트림을 운반하는 PLP 를 선택하여 디코딩 할 수 있다. 어댑테이션 모듈은 컨텍스트 정보를 파싱하고 이를 압축된 패킷들과 합칠 수 있다. 이를 통해 패킷 스트림이 복구될 수 있고, 이는 RoHC 디컴프레서로 전달될 수 있다. 이후 디컴프레션이 시작될 수 있다. 이 때 수신기는 어댑테이션 모드에 따라, IR 패킷을 디텍팅하여 최초 수신된 IR 패킷으로부터 디컴프레션을 시작하거나(모드 1), IR-DYN 패킷을 디텍팅하여 최초 수신된 IR-DYN 패킷으로부터 디컴프레션을 시작하거나(모드 2), 아무 일반 압축 패킷(compressed packet)으로부터 디컴프레션을 시작할 수 있다(모드 3).
이하, 패킷 인캡슐레이션에 대해서 설명한다.
링크 레이어 프로토콜은 IP 패킷, TS 패킷 등의 모든 타입의 인풋 패킷들을 링크 레이어 패킷으로인캡슐레이션할 수 있다. 이를 통해 피지컬 레이어는 네트워크 레이어의 프로토콜 타입과는 독립적으로 하나의 패킷 포맷만 처리하면 된다(여기서 네트워크 레이어 패킷의 일종으로 MPEG-2 TS 패킷을 고려). 각 네트워크 레이어 패킷 또는 입력 패킷은 제네릭 링크 레이어 패킷의 페이로드로 변형된다.
패킷 인캡슐레이션 과정에서 분할(segmentation) 이 활용될 수 있다. 네트워크 레이어 패킷이 지나치게 커서 피지컬 레이어에서 처리하지 못하는 경우, 네트워크 레이어 패킷은 두 개 이상의 세그먼트들로 나누어질 수 있다. 링크 레이어 패킷 헤더는 송신 측에서 분할을 실행하고 수신 측에서 재결합을 실행하기 위한 필드들을 포함할 수 있다. 각 세그먼트들은 원래 위치와 같은 순서로 링크 레이어 패킷으로 인캡슐레이션될 수 있다.
패킷 인캡슐레이션 과정에서 연쇄(concatenation) 또한 활용될 수 있다. 링크 레이어 패킷의 페이로드가 여러 네트워크 레이어 패킷을 포함할 정도로 네트워크 레이어 패킷이 충분히 작은 경우, 연쇄가 수행될 수 있다. 링크 레이어 패킷 헤더는 연쇄를 실행하기 위한 필드들을 포함할 수 있다. 연쇄의 경우 각 입력 패킷들은 원래의 입력 순서와 같은 순서로 링크 레이어 패킷의 페이로드로 인캡슐레이션될 수 있다.
링크 레이어 패킷은 헤더와 페이로드를 포함할 수 있고, 헤더는 베이스 헤더, 추가(additional) 헤더 및/또는 옵셔널 헤더가 포함될 수 있다. 추가 헤더는 연쇄나 분할 등의 상황에 따라 더 추가될 수 있는데, 추가헤더에는 상황에 맞춘 필요한 필드들이 포함될 수 있다. 또한 추가적인 정보의 전달을 위해 옵셔널 헤더가 더 추가될 수도 있다. 각각의 헤더 구조는 기 정의되어 있을 수 있다. 전술한 바와 같이 입력 패킷이 TS 패킷인 경우에는, 다른 패킷들과는 다른 링크 레이어 헤더 구조가 사용될 수 있다.
이하, 링크 레이어 시그널링에 대해서 설명한다.
링크 레이어 시그널링은 IP 레이어보다 하위 레벨에서 동작할 수 있다. 수신측에서는 LLS, SLT, SLS 등의 IP 레벨 시그널링보다, 링크 레이어 시그널링을 더 빠르게 획득할 수 있다. 따라서 링크 레이어 시그널링은 세션 설정(establishment) 이전에 획득될 수 있다.
링크 레이어 시그널링에는 인터널 링크 레이어 시그널링과 익스터널 링크 레이어 시그널링이 있을 수 있다. 인터널 링크 레이어 시그널링은 링크 레이어에서 생성된 시그널링 정보일 수 있다. 전술한 RDT 나 후술할 LMT 등이 여기에 해당할 수 있다. 익스터널 링크 레이어 시그널링은 외부 모듈 또는 외부 프로토콜, 상위 레이어로부터 전달받은 시그널링 정보일 수 있다. 링크 레이어는 링크 레이어 시그널링을 링크 레이어 패킷으로 인캡슐레이션하여 전달할 수 있다. 링크 레이어 시그널링을 위한 링크 레이어 패킷 구조(헤더 구조)가 정의될 수 있는데, 이 구조에 따라 링크 레이어 시그널링 정보가 인캡슐레이션될 수 있다.
도 7 은 본 발명의 일 실시예에 따른 LMT (Link Mapping Table) 를 도시한 도면이다.
LMT 는 PLP 로 운반되는 상위 레이어 세션들의 리스트를 제공할 수 있다. 또한 LMT 는 상위 레이어 세션들을 전달하는 링크 레이어 패킷들을 프로세싱하기 위한 추가적인 정보들을 제공할 수 있다. 여기서 상위 레이어 세션은 멀티캐스트(multicast) 라고 불릴 수도 있다. LMT 를 통해 특정 PLP 를 통해 어떠한 IP 스트림들, 어떠한 전송 세션들이 전송되고 있는지에 대한정보가 획득될 수 있다. 반대로 특정 전송 세션이 어느 PLP 로 전달되는지에 대한 정보를 획득할 수 있다.
LMT 는 LLS 를 운반하는 것으로 식별된 어떤 PLP 로도 전달될 수 있다. 여기서 LLS 가 전달되는 PLP 는 피지컬 레이어의 L1 디테일 시그널링 정보의 LLS 플래그에 의해 식별될 수 있다. LLS 플래그는 각각의 PLP 에 대하여, 해당 PLP 로 LLS 가 전달되는지 여부를 지시하는 플래그 필드일 수 있다. 여기서 L1 디테일 시그널링 정보는 후술할 PLS2 데이터에 해당할 수 있다.
즉, LMT 는 LLS 와 함께, 같은 PLP 로 전달될 수 있다. 각각의 LMT 들은 전술한 바와 같이 PLP 들과 IP 어드레스/포트간의 매핑을 기술할 수 있다. 전술한 바와 같이 LLS 는 SLT 를 포함할 수 있는데, LMT 가 기술하는 이 IP 어드레스/포트들은, 해당 LMT 와 같은 PLP 로 전달되는 SLT 가 기술하는, 모든(any) 서비스와 관련된 모든(any) IP 어드레스/포트들일 수 있다.
실시예에 따라 전술한 SLT, SLS 등에서의 PLP 식별자 정보가 활용되어, SLT, SLS 가 지시하는 특정전송 세션이 어느 PLP 로 전송되고 있는지에 대한 정보가 확인될 수 있다.
다른 실시예에 따라 전술한 SLT, SLS 등에서의 PLP 식별자 정보는 생략되고, SLT, SLS 가 지시하는 특정 전송 세션에 대한 PLP 정보는 LMT 내의 정보를 참조함으로써 확인될 수 있다. 이 경우 수신기는 LMT 와 다른 IP 레벨 시그널링 정보들을 조합하여, 알고자 하는 PLP 를 식별할 수 있다. 이 실시예에 있어서도 SLT, SLS 등에서의 PLP 정보는 생략되지 않고, SLT, SLS 등에 남아있을 수 있다.
도시된 실시예에 따른 LMT 는, signaling_type 필드, PLP_ID 필드, num_session 필드 및/또는 각각의 세션들에 대한 정보들을 포함할 수 있다. 도시된 실시예의 LMT 는 하나의 PLP 에 대해서, 그 PLP 로 전송되는 IP 스트림들을 기술하고 있지만, 실시예에 따라 LMT 에 PLP 루프가 추가되어, 복수개의 PLP 에 대한 정보가 기술될 수도 있다. 이 경우 LMT 는, 전술한 바와 같이, 함께 전달되는 SLT 가 기술하는 모든 서비스와 관련된 모든 IP 어드레스/포트들에 대한 PLP 들을, PLP 루프로 기술할 수 있다.
signaling_type 필드는 해당 테이블에 의해 전달되는 시그널링 정보의 타입을 지시할 수 있다. LMT 에 대한 signaling_type 필드의 값은 0x01로 설정될 수 있다. signaling_type 필드는 생략될 수 있다. PLP_ID 필드는 기술하고자 하는 대상 PLP 를 식별할 수 있다. PLP 루프가 사용되는 경우, 각각의 PLP_ID 필드는 각각의 대상 PLP 를 식별할 수 있다. PLP_ID 필드부터는 PLP 루프 내에 포함될 수 있다. 이하 언급되는 PLP_ID 필드는 PLP 루프 중의 PLP 하나에 대한 식별자이며, 이하 설명되는 필드들은 그 해당 PLP 에 대한 필드들일 수 있다.
num_session 필드는 해당 PLP_ID 필드에 의해 식별되는 PLP 로 전달되는 상위 레이어 세션들의 개수를 나타낼 수 있다. num_session 필드가 나타내는 개수에 따라, 각각의 세션들에 대한 정보들이 포함될 수 있다. 이정보에는 src_IP_add 필드, dst_IP_add 필드, src_UDP_port 필드, dst_UDP_port 필드, SID_flag 필드, compressed_flag 필드, SID 필드 및/또는 context_id 필드가 있을 수 있다.
src_IP_add 필드, dst_IP_add 필드, src_UDP_port 필드 및 dst_UDP_port 필드는 해당 PLP_ID 필드에 의해 식별되는 PLP 로 전달되는 상위 레이어 세션들 중, 해당 전송 세션에 대한 소스 IP 어드레스, 데스티네이션 IP 어드레스, 소스 UDP 포트, 데스티네이션 UDP 포트를 나타낼 수 있다.
SID_flag 필드는 해당 전송 세션을 전달하는 링크 레이어 패킷이 그 옵셔널 헤더에 SID 필드를 갖는지 여부를 지시할 수 있다. 상위 레이어 세션을 전달하는 링크 레이어 패킷은 그 옵셔널 헤더에 SID 필드를 가질 수 있고, 그 SID 필드 값은 후술할 LMT 내의 SID 필드와 동일할 수 있다.
compressed_flag 필드는 해당 전송 세션을 전달하는 링크 레이어 패킷의 데이터들에 헤더 컴프레션이 적용되었는지 여부를 지시할 수 있다. 또한 본 필드의 값에 따라 후술할 context_id 필드의 존부가 결정될 수 있다. 헤더 컴프레션이 적용된 경우(compressed_flag = 1), RDT 가 존재할 수 있고, 그 RDT 의 PLP ID 필드는 본 compressed_flag 필드와 관련된 해당 PLP_ID 필드와 같은 값을 가질 수 있다.
SID 필드는 해당 전송 세션을 전달하는 링크 레이어 패킷들에 대한 SID (sub stream ID) 를 지시할 수 있다. 이 링크 레이어 패킷들은, 그 옵셔널 헤더에 본 SID 필드와 같은 값을 가지는 SID 를 포함하고 있을 수 있다. 이를 통해 수신기는 링크 레이어 패킷을 전부 파싱할 필요 없이, LMT 의 정보와 링크 레이어 패킷 헤더의 SID 정보를 이용하여, 링크 레이어 패킷들을 필터링할 수 있다.
context_id 필드는 RDT 내의 CID(context id) 에 대한 레퍼런스를 제공할 수 있다. RDT 의 CID 정보는 해당되는 압축 IP 패킷 스트림에 대한 컨텍스트 ID 를 나타낼 수 있다. RDT 는 해당 압축 IP 패킷 스트림에 대한 컨텍스트 정보들을 제공할 수 있다. 본 필드를 통해 RDT 와 LMT 가 연관될 수 있다.
전술한, 본 발명의 시그널링 정보/테이블의 실시예들에 있어서, 각각의 필드, 엘레멘트, 속성들은 생략되거나 다른 필드로 대체될 수 있으며, 실시예에 따라 추가적인 필드, 엘레멘트, 속성들이 추가될 수도 있다.
본 발명의 일 실시예에서, 한 서비스의 서비스 컴포넌트들이 복수개의 ROUTE 세션을 통해 전달될 수 있다. 이 경우, SLT 의 부트스트랩 정보를 통하여 SLS 가 획득될 수 있다. 이 SLS 의 USBD 를 통해 S-TSID 와 MPD 가 레퍼런싱될 수 있다. S-TSID 는 SLS 가 전달되고 있는 ROUTE 세션 뿐 아니라, 서비스 컴포넌트들이 전달되고 있는 다른 ROUTE 세션에 대한 전송 세션 디스크립션 정보 또한 기술할 수 있다. 이를 통해 복수개의 ROUTE 세션을 통해 전달되는 서비스 컴포넌트들이 모두 수집될 수 있다. 이러한 사항은 한 서비스의 서비스 컴포넌트들이 복수개의 MMTP 세션을 통해 전달되는 경우에도 유사하게 적용될 수 있다. 참고로, 하나의 서비스 컴포넌트는 복수개의 서비스에 의해 동시에 사용될 수도 있다.
본 발명의 또 다른 실시예에서, ESG 서비스에 대한 부트스트래핑은 방송망 또는 브로드밴드에 의해 수행될 수 있다. 브로드밴드를 통한 ESG 획득을 통해, SLT 의 URL 정보가 활용될 수 있다. 이 URL 로 ESG 정보 등이 요청될 수 있다.
본 발명의 또 다른 실시예에서, 한 서비스의 서비스 컴포넌트가 하나는 방송망으로 하나는 브로드밴드로 전달될 수 있다(하이브리드). S-TSID 는 방송망으로 전달되는 컴포넌트들에 대해 기술해, ROUTE 클라이언트가 원하는 서비스 컴포넌트들을 획득케 할 수 있다. 또한 USBD 는 베이스 패턴 정보를 가지고 있어, 어느 세그먼트들이(어느 컴포넌트들이) 어느 경로로 전달되는지 기술할 수 있다. 따라서 수신기는 이를 이용해, 브로드밴드 서버로 요청해야될 세그먼트는 무엇인지, 방송 스트림에서 찾아야될 세그먼트는 무엇인지 알 수 있다.
본 발명의 또 다른 실시예에서, 서비스에 대한 스케일러블(scalable) 코딩이 수행될 수 있다. USBD 는 해당 서비스를 렌더링하기 위해 필요한 모든 캐패빌리티 정보를 가질 수 있다. 예를 들어 한 서비스가 HD 또는 UHD 로 제공되는 경우, USBD 의 캐패빌리티 정보는 "HD 또는 UHD" 값을 가질 수 있다. 수신기는 MPD 를 이용하여 UHD 또는 HD 서비스를 렌더링하기 위하여 어느 컴포넌트가 재생되어야 하는지 알 수 있다.
본 발명의 또 다른 실시예에서, SLS 를 전달하는 LCT 채널로 전달되는 LCT 패킷들의 TOI 필드를 통해, 해당 LCT 패킷들이 어느 SLS 프래그먼트를 전달하고 있는지(USBD, S-TSID, MPD 등..) 가 식별될 수 있다.
본 발명의 또 다른 실시예에서, 앱 기반 인핸스먼트/ 앱 기반 서비스에 사용될 앱 컴포넌트들은 NRT 컴포넌트로서 방송망을 통해 전달되거나 브로드밴드를 통해 전달될 수 있다. 또한 앱 기반 인핸스먼트에 대한 앱 시그널링은 SLS 와 함께 전달되는 AST (Application Signaling Table) 에 의해 수행될 수 있다. 또한 앱이 수행할 동작에 대한 시그널링인 이벤트는 SLS 와 함께 EMT (Event Message Table) 형태로 전달되거나, MPD 내에 시그널링되거나, DASH 레프리젠테이션 내에 box 형태로 인밴드(in-band) 시그널링될 수 있다. AST, EMT 등은 브로드밴드를 통해 전달될 수도 있다. 수집된 앱 컴포넌트들과 이러한 시그널링 정보들을 이용해 앱 기반 인핸스먼트 등이 제공될 수 있다.
본 발명의 또 다른 실시예에서, 긴급 경보를 위해 CAP 메시지가 전술한 LLS 테이블에 포함되어 제공될 수 있다. 긴급 경보를 위한 리치 미디어(Rich Media) 컨텐츠 역시 제공될 수 있다. 리치 미디어는 CAP 메시지에 의해 시그널링될 수 있으며, 리치 미디어가 존재하는 경우 이는 SLT 에 의해 시그널링되는 EAS 서비스로서 제공될 수 있다.
본 발명의 또 다른 실시예에서, MMT 프로토콜에 따라 리니어 서비스 컴포넌트들이 방송망을 통해 전달될 수 있다. 이 경우 해당 서비스에 대한 NRT 데이터(예를 들어 앱 컴포넌트)들은 ROUTE 프로토콜에 따라 방송망을 통해 전달될 수 있다. 또한 해당 서비스에 대한 데이터가 브로드밴드를 통해 전달될 수도 있다. 수신기는 SLT 의 부트스트랩 정보를 이용해 SLS 를 전달하는 MMTP 세션에 접근할 수 있다. MMT 에 따른 SLS 의 USBD 는 MP 테이블을 레퍼런싱하여, 수신기가 MMT 프로토콜에 따라 전달되는 MPU 로 포맷된 리니어 서비스 컴포넌트들을 획득케 할 수 있다. 또한, USBD 는 S-TSID 를 더 레퍼런싱하여, 수신기가 ROUTE 프로토콜에 따라 전달되는 NRT 데이터를 획득케 할 수 있다. 또한, USBD 는 MPD 를 더 레퍼런싱하여, 브로드밴드를 통해 전달되는 데이터에 대한 재생 디스크립션을 제공할 수 있다.
본 발명의 또 다른 실시예에서, 수신기는 그 컴패니언 디바이스에 스트리밍 컴포넌트 및/또는 파일 컨텐트 아이템(파일 등)을 획득할 수 있는 로케이션 URL 정보를, 웹소켓 등의 방법을 통해 전달할 수 있다. 컴패니언 디바이스의 어플리케이션은 이 URL 로 HTTP GET 등을 통해 요청하여 해당 컴포넌트, 데이터 등을 획득할 수 있다. 그 밖에 수신기는 시스템 타임 정보, 긴급 경보 정보 등의 정보를 컴패니언 디바이스 측에 전달할 수 있다.
도 8은 비디오 영상을 송수신하기 위해 소스 디바이스와 싱크 디바이스가 연결된 예를 나타낸 도면이다. 이 도면에서 영상의 디코딩과 화질 처리가 가능한 소스 디바이스와 영상의 출력이 가능한 싱크 디바이스의 정보 교환은 다음과 같다.
소스 디바이스(100)는 방송, 블루레이(Blu-ray), UV(Ultra Violet), SCSA(Secure Content Storage Association) 등의 저장매체, IP (internet protocol) 스트리밍 등 다양한 경로로 들어오는 영상에 대해 복호화(decoding)하는 기기 또는 화질처리를 위한 비디오 프로세싱이 가능한 기기를 총칭한다. 예를 들면 셋탑박스, 블루레이 디스크(BD) 플레이어와 같은 저장매체의 플레이어, 컴퓨터 등이 이에 해당한다.
소스 디바이스(100)의 비디오 프로세싱은 WCG(Wide color gamut) 또는 HDR(high dynamic range) 또는 기타 포스트 프로세싱(post processing) 등의 화질을 변화시키는 방식이 포함될 수 있다. 이 경우 영상에 대해 일괄적으로 비디오 프로세싱을 하는 것이 아니라 싱크 디바이스가 제공하는 디스플레이 정보, 예를 들면 컬러 개멋(color gamut) 정보 또는 다이나믹 레인지(dynamic range) 정보 등에 기초하여 해당 비디오 소스가 디스플레이 기기에서 재생가능한지 판단하고 필요한 경우 재생에 재생하기 적합한 화질로 변환하여 제공한다.
또한 소스 디바이스(100)의 영상처리 과정을 싱크 디바이스(200)에서 컨트롤 할 필요가 있는 경우 이에 대한 정보를 제공하여 소스 디바이스(100)에서 어떤 영상 처리 과정이 사용되었는지에 대한 정보를 제공 받을 수 있다.
소스 디바이스(100)는 싱크 디바이스(200)로부터 디스플레이 관련 메타 정보 또는 디스플레이 옵션 정보를 수신할 수 있다. 그리고, 수신된 정보를 기반으로 소스 디바이스(100)는 싱크 디바이스(200)에 UHD 비디오 메타데이터와 프로세싱된 비디오의 프로세싱 옵션정보를 제공할 수 있다. 싱크 디바이스(200)는 이를 소스 디바이스(100)가 제공한 데이터나 정보를 기초로 소스 디바이스(100)가 프로세싱한 비디오를 표출할 수 있다. 싱크 디바이스(200)는 해당 디스플레이에 맞는 컬러 개멋 정보나 다이나믹 레인지 범위 내에서 소스 디바이스(100)가 프로세싱한 비디오를 표출할 수 있다.
도 9는 본 발명에 실시예에 따라 소스 디바이스가 싱크 디바이스와 연결된 경우 정보를 송수신하는 실시예를 나타낸 도면이다.
이 예는 소스 디바이스가 싱크 디바이스와 HDMI 또는 Display Port와 같은 유선 인터페이스와 연결될 경우를 나타낸다. 이 예는, Source Device와 Sink Device가 유선 인터페이스로 연결되어 있을 시, EDID (Extended Display Identification Data)의 HDR(High Dynamic Range)의 데이터 블록을 통해 Sink Device(200)에서 Source Device(100)의 HDR 및 WCG 기능을 제어(Activation or Deactivation)하고, 이를 이용해 Source Device가 Sink Device의 변경된 EDID를 읽어오는 실시예를 예시한다.
Source Device가 Sink Device에 유선 인터페이스로 연결되면 Source Device는 해당 유선 인터페이스의 +5V power line에 high level 전압을 인가하고 Sink Device는 이를 통해 Source Device가 연결됨을 확인한다 (S1).
Sink Device는 low level 전압으로 유지되고 있는 Hot Plug Detect line에 high level 전압을 인가함으로써 Source Device에 Sink Device와 연결 완료 및 EDID와 같은 디스플레이 관련 정보(이하 디스플레이 관련 정보)를 읽을 준비가 되었음을 소스 디바이스에 알려준다(S2).
Source Device는, Hot Plug Detect line이 high level로 천이됨을 확인하고 Display Data Channel을 통해 디스플레이 관련 정보에 대한 읽기 요청을 Sink Device에게 하고 (S3), Sink Device는 디스플레이 관련 정보를 Display Data Channel을 통해 Source Device에 전송한다(S4).
Sink Device에서 사용자의 요청에 의해 Signaling 되거나 혹은 Sink Device의 기능적 판단에 의해 디스플레이 관련 정보의 HDR Data Block 의 Control option flag에 해당 field가 변경되면(S5), Sink Device는 Source Device에 디스플레이 관련 정보의 update된 정보를 알려주기 위해 Hot Plug Detect line에 low level 전압을 인가하고 이 전압을 일정시간, 예를 들면 최소 100ms 동안 유지한다(S6).
소스 디바이스에서 디스플레이 관련 정보 읽기가 가능해지면 Sink Device는 Hot Plug line에 high level 전압을 인가하고(S7) Source Device는 이를 감지하고 Display Data Channel을 통해 디스플레이 관련 정보 읽기 요청을 한다(S8). 그리고 Sink Device는 Display Data Channel을 통해 변경된 디스플레이 관련 정보를 송신한다(S9).
이러한 동작을 기초로 본 발명의 실시예에 대한 소스 디바이스와 싱크 디바이스 간의 정보 교환의 예를 설명하면 다음과 같다.
본 발명의 실시예에 따르면 위에서 설명한 S3 또는 S8의 요청에 대한 응답으로, 싱크 디바이스는 컬러 개멋(color gamut) 정보 및 밝기(brightness) 정보를 소스 디바이스에 전달할 수 있다 (S4 또는 S9에 포함).
Color gamut 정보는 RGBW에 해당하는 색 공간인 CIE xy diagram 상의 color primary 좌표 혹은 BT. 709 또는 BT. 2020 등의 컬러 개멋(color gamut) 정보를 포함할 수 있다. 이 정보는 인터페이스에서 정의되어 있는 DisplayID의 color characteristics data block 등을 통해 전달될 수 있다. 밝기(brightness) 관련 정보는 최대 밝기 또는 최소 밝기 값을 포함할 수 있고, 실시예에서 개시하는 예에 따르면 인터페이스의 DisplayID, EDID, 또는 EDID extension 정보 등에 정의된 datablock을 이용하여 전달될 수 있다.
그러면, 소스 디바이스는 전달된 디스플레이 관련 정보를 바탕으로 비디오의 색상 또는 밝기 정보를 조정할 필요가 있는지 판단한다. 만약 소스 디바이스가 색상 또는 밝기 조정이 필요하다고 판단되는 경우 비디오에서 제공하는 컬러 매핑(color mapping) 혹은 다이나믹 레인지 매핑(dynamic range mapping) 정보를 기반으로 변환하거나, 소스 디바이스 자체적으로 비디오의 색상 또는 밝기 정보를 제공하는 방법을 사용할 수도 있다.
소스 디바이스는 이렇게 조정된 최종 영상을 싱크 디바이스에 전달한다. 이 때, 최종 비디오에 대한 컬러 개멋(color gamut) 또는 다이나믹 레인지(dynamic range) 관련 metadata를 인터페이스의 InfoFrame을 통해 전달할 수 있다. 컬러 개멋(Color gamut) 정보의 경우 인터페이스의 AVI infoFrame 에서 기존에 정의하고 있는 color gamut 정보(예를 들면 BT. 709, BT. 2020 등) 를 이용하여 전달할 수 있다. 다이나믹 레인지(dynamic range) 관련 정보는 최대 또는 최소 밝기 정보를 전달할 수 있으며, 실시예들에서 기술하는 방법을 통해 새로운 InfoFrame을 정의하거나 AVI InfoFrame을 확장하는 방법을 통해 전달할 수 있다.
소스 디바이스가 최종 영상을 전달할 때 소스 디바이스에서 처리된 video processing에 대한 정보를 제공할 필요가 있는 경우, 실시예들에서 기술하는 방법을 통해 InfoFrame 내 post_processing_type를 이용하여 HDR 정보 또는 WCG 정보와 같은 video processing unit의 처리 정보를 전달할 수 있다. 또한, 최종 영상에 대해 HDR 정보와 관련하여 새로운 EOTF(electro-optical transfer function)와 같은 색 변환 함수 정보가 정의되어 사용되었거나, 사용될 필요가 있는 경우 새로운 색 변환 함수 정보에 대한 정보를 인터페이스 정보의 flag 등을 이용하여 전달할 수 있다.
최종 처리된 영상에 대해 싱크 디바이스는 소스 디바이스의 처리가 적절한지 판단하고, 이에 대한 feedback을 통해 소스 디바이스의 제어가 필요한지 판단할 수 있다. 이 경우 실시예들에서 기술하는 DisplayID, EDID, EDID extension 정보 등에 정의된 데이터블록(datablock)내의 Control Option Flag를 통해 이를 제어할 수 있다. 만약 WCG 정보 또는 HDR 정보 등 소스 디바이스의 비디오 프로세싱(video processing)에서 처리된 결과가 적절한 경우 싱크 디바이스는 WCG 정보 또는 HDR 정보와 관련된 비트를 활성화(on) 시켜 동일한 처리가 계속되도록 제어할 수 있다.
처리가 부적절한 경우 싱크 디바이스는 WCG 정보 또는 HDR 정보와 관련 비트를 비활성화(off) 시킴으로써 소스 디바이스에서 현재 수행중인 video processing을 사용하지 않도록 제어할 수 있다.
싱크 디바이스는, Control Option Flag 를 통해 전달된 정보가 현재 소스 디바이스에서 처리 중인 video processing과 다른 경우 Control Option Flag 에 있는 정보를 기준으로 video processing을 변경한다. 변경된 비디오 처리와 관련하여 UHD video metadata가 변경되는 경우 InfoFrame 내 컬러 특성(color characteristics) 정보 및 밝기(brightness) 정보를 변경하며, 포스트 프로세싱 타입(post_processing_type)을 변경한 video processing 과정에 맞게 업데이트할 수 있다. 그리고 S5의 과정이 수행된다.
이하에서는 싱크 디바이스가 소스 디바이스에 전달되는 정보를 예시한다.
본 발명의 실시예에 따르면 소스 디바이스가 HDR 관련 정보를 처리하는 경우, 싱크 디바이스가 재생 가능한 정보를 기반으로 소스 디바이스는 싱크 디바이스에 적합한 영상 처리를 수행할 수 있다. 이 경우 싱크 디바이스는 display 밝기 범위에 대한 적절한 정보, 예를 들면 Sink Black Luminance Level, Sink White Luminance Level, 및 소스 디바이스의 post processing을 control 할 수 있는 flag 등을 소스 디바이스에 전달할 수 있다. 이 경우 DisplayID, EDID, 혹은 EDID extension 의 data block을 이용할 수 있는데, 이에 대해 상세한 예를 개시하면 다음과 같다.
도 10은 본 발명의 실시예에 따라 싱크 디바이스가 소스 디바이스로 전달하는 정보의 일 예를 나타낸 도면이다.
이 도면은 DisplayID의 Data Block을 이용하여 소스 디바이스가 싱크 디바이스로 전달하는 정보의 예를 나타낸다.
이 도면은, DisplayID의 Data Block의 offset 필드, value 필드, 및 그에 대한 description과 포맷을 예시한다. 예를 들면 DisplayID의 Data Block의 offset필드가 0x00, value필드가 0x14인 경우, HDR 데이터 블록을 나타낼 수 있다.
이 도면에서 예시한 바와 같이 offset 필드가 0x03인 경우 소스 디바이스의 post processing을 control 할 수 있는 flag (control option flag)를 나타낼 수 있다. 이에 대한 상세한 value의 예는 후술한다.
그리고, offset 필드가 0x04 또는 0x05인 경우 싱크 디바이스 자체의 표현 가능한 밝기 값 (Sink Black Luminance Level, Sink White Luminance Level 등)에 대한 정보를 전달할 수 있다.
DisplayID의 Data Block은 추후 offset 필드값에 따라 비디오 처리에 필요한 정보들을 더 포함할 수 있다. 예를 들어 offset 필드가 0x03인 경우 현재의 reserved 필드 등을 이용하여 HDR 관련 post processing 관련 정보들을 전달할 수 있다.
여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하고, control option flag의 상세한 예와 싱크 디바이스의 디스플레이 정보에 대한 예는 이하에서 개시한다.
도 11은 본 발명의 실시예에 따라 싱크 디바이스가 소스 디바이스로 전달하는 정보의 일 예로서 위에서 개시한 실시예의 구체적인 필드 값을 예시한 도면이다.
싱크 디바이스가 소스 디바이스로 전달하는 정보로서 DisplayID의 Data Block의 Control option flag는 소스 디바이스가 수행하는 post processing 과정을 control (on/off) 하는 필드이다. 본 발명의 실시예에 따르면 이를 이용하여 소스/싱크 디바이스의 인터페이스 상에서 향후 제공될 다양한 옵션을 나타낼 수 있는데 여기서는 HDR, WCG 관련 옵션들을 개시하였다.
위에서 DisplayID의 Data Block의 offset 필드가 0x03인 경우 소스 디바이스를 제어할 수 있는 control option flag 정보임을 나타낼 수 있음을 개시하였다. Value 필드의 비트 위치에 따라 소스 디바이스의 HDR 프로세싱을 활성화시키거나, 소스 디바이스의 WCG 프로세싱을 활성화시킬 수 있다. 이 예에서는 하위 2개 비트로 이에 대한 정보를 각각 표현하였다.
본 실시예에서 개시된 필드는 사용자의 요청에 의해 시그널링되거나 혹은 싱크 디바이스의 기능적 판단에 의해 (싱크 디바이스의 처리 능력이 상위에 있는 경우 등) 제어될 수 있다. 본 발명의 실시예는 Reserved bit를 이용하여 FRC(Frame Rate Control)와, multi-layer video enhancement의 기능에 대해 싱크-소스 디바이스간 정보 교환을 수행할 수도 있다. 여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하다
도 12는 개시한 본 발명의 실시예에 따른 control option flag의 상세한 예를 예시한 도면이다.
control option flag를 나타내는 offset 필드의 value 필드의 하위 2개의 bit에 각각 소스 디바이스에서 이뤄지는 HDR, WCG 처리에 대한 control을 하도록 하는 정보를 설정할 수 있다. 두 개의 flag에 대한 조합에 의해 아래의 예시와 같이 사용할 수 있다.
이 예에서, value 필드가 00000000인 경우, Source device에서 아무런 처리를 하지 않음을 나타낸다. 예를 들어 value 필드가 10000000 인 경우, Source device의 HDR 처리에 대한 정보를 나타내는데, Source device에서 HDR 만을 처리하는 option을 나타낼 수 있다. 다른 예로서, value 필드가 01000000 인 경우, Source device의 WCG 처리에 대한 정보를 나타내고 Source device에서 WCG 만을 처리하는 option을 나타낼 수 있다.
다른 예로서, value 필드가 11000000 인 경우, Sink device에서 전달한 정보를 바탕으로 source device가 HDR 및 WCG에 대해 모두 처리하도록 하는 컨트롤 옵션 정보를 나타내고, 이 값이 초기 값으로 사용될 수 있다.
도 13은 기술한 본 발명의 실시예에 따른 Sink Device Dynamic Range 정보의 상세한 예를 예시한 도면이다.
개시한 것처럼 싱크 디바이스는 DisplayID의 Data Block를 이용하여 싱크 디바이스의 dynamic range 정보를 소스 디바이스에 전달하여 싱크 디바이스가 표현할 수 있는 밝기 정보 등을 소스 디바이스에 알려줄 수 있다.
싱크 디바이스의 dynamic range에 대한 정보는 sink device의 display에서 표현할 수 있는 dynamic range를 표현하기 위한 최대 및 최소 물리적 밝기 값 (nit 혹은 cd/m2 단위)를 지칭한다.
예를 들어 DisplayID의 Data Block의 offset 필드가 0x04 또는 0x05인 경우 이용하여 싱크 디바이스의 dynamic range 정보를 나타낸다.
이 예에서 DisplayID의 Data Block의 offset 필드가 0x04인 경우 하위 8비트보다 높은 8개비트를 이용해 싱크 디바이스의 가장 낮은 레벨의 밝기정보를 나타낼 수 있다.
DisplayID의 Data Block의 offset 필드가 0x05인 경우, value 필드의 최하위 1비트는 싱크 디바이스의 가장 낮은 레벨의 밝기정보를 나타내고, value 필드의 나머지 비트로 싱크 디바이스의 가장 높은 레벨의 밝기정보를 나타낼 수 있다.
여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하다
이 정보를 이용해 나타낼 수 있는 싱크 디바이스의 최소 밝기 정보(sink_black_luminance_level 로 표기), 및 최대 밝기 정보 (sink_white_luminance_level)는 아래와 같이 나타낼 수 있다.
예를 들어 싱크 디바이스의 최소 밝기 정보(sink_black_luminance_level)는 display에서 표현할 수 있는 최소 밝기를 나타내기 위한 값으로써, 일반적인 최저 밝기를 고려하여 0~0.05 범위에 대해 0.0001 단위로 값을 표현할 수 있다. 즉, display의 물리적 밝기를 Brightness_black (cd/m2 단위)라고 할 때, 실제 최소 밝기는 이 최소 밝기 정보(sink_black_luminance_level)로부터 아래와 같이 산출될 수 있다.
Brightness_black = sink_black_luminance_level x 10000
(0<= sink_black_luminance_level <= 500 < 29)
예를 들어 reference monitor의 경우 0.05 cd/m2 를 최소 기준 밝기로 삼으며, 10000(10진수)을 곱한 값인 500을 전송할 수 있다.
싱크 디바이스의 최대 밝기 정보(sink_white_luminance_level)는 display에서 표현할 수 있는 최대 밝기를 나타내기 위한 값으로써, 일반적인 최대 밝기를 고려하여 100~10000 범위에 대해 100 단위로 값을 표현할 수 있다. 즉, display의 물리적 밝기를 Brightness_white (cd/m2단위)라고 할 때 , 실제 최대 밝기는 이 최대 밝기 정보(sink_white_luminance_level)로부터 아래와 같이 산출될 수 있다.
Brightness_white = sink_white_luminance_level x 100
(1<= sink_white_luminance_level <= 100 < 27)
예를 들어 reference monitor의 경우 100 cd/m2 를 최대 기준 밝기로 삼으며, 100(10진수)으로 나눈 값의 몫인 1 값을 전송할 수 있다.
본 발명의 일 실시예에 따르면, 싱크 디바이스의 최대 밝기 정보 및/또는 싱크 디바이스의 최소 밝기 정보는 디스플레이의 밝기 범위에 대한 성능을 나타낼 수 있다. 즉, 본 발명의 일 실시예에 따른 싱크 디바이스의 최대 밝기 정보 및/또는 싱크 디바이스의 최소 밝기 정보는 디스플레이의 성능을 고려하여, 컨텐츠를 최적의 환경에서 렌더링하기 위해 요구되는 컨텐츠의 최대 밝기 정보 (Desired content Max Luminance data) 및/또는 최소 밝기 정보 (Desired content Min Luminance data)를 나타낼 수 있다.
싱크 디바이스에서 소스 디바이스로 디스플레이 관련 정보를 전달하는 다른 실시예를 개시한다.
도 14는 본 발명의 실시예에 따라 싱크 디바이스에서 소스 디바이스로 전달하는 디스플레이 관련 정보로서, DisplayID의 Display Parameters Data Block을 예시한 도면이다.
디스플레이 관련 정보로서 DisplayID의 Display Parameters Data Block은 모니터의 전체적인 파라미터를 포함할 수 있다. 이 도면에서 예시한 바와 같이 예를 들면, Display Parameters Data Block은 영상의 수평 또는 수직 size (offset 필드가 0x03 또는 0x04), 수평 또는 수직 pixel 개수(offset 필드가 0x05 또는 0x06), monitor에서 지원 가능한 기능에 대한 flag (offset 필드가 0x0B), transfer function에서 사용되는 gamma(offset 필드가 0x0C), display aspect ratio(offset 필드가 0x0D), pixel bit depth (offset 필드가 0x0E)등의 정보가 포함된다.
본 발명의 실시예에 따르면 Display Parameters Data Block은 위에서 기술한 Control option flag정보와 sink device dynamic range 정보를 포함할 수 있다. 즉, 본 발명의 실시예에 따르면 싱크 디바이스는 위에서 개시한 Control option flag와 sink device dynamic range 정보를 포함한 Display Parameters Data Block 정보를 source device에 전달할 수 있다.
이 실시예에서 Display Parameters Data Block의 offset 필드가 0x0F인 경우 control option flag를 나타낼 수 있고, offset 필드가 0x10 또는 0x11인 경우 싱크 디바이스 자체의 표현 가능한 밝기 값 (Sink Black Luminance Level, Sink White Luminance Level 등)에 대한 정보를 포함할 수 있다.
offset 필드가 0x0F인 경우 control option flag에 대한 value 필드와, offset 필드가 0x10 또는 0x11인 경우 Sink Device Dynamic Range 정보에 대한 value 필드 및 각 value 필드에 대한 설명은 도 11 내지 도 13 에서 예시한 바와 같다. 여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하다
본 발명의 실시예는, Transfer Characteristic Gamma 를 통해 HDR에 적합한 transfer curve 정보를 전달할 수 있다.
싱크 디바이스에서 소스 디바이스로 디스플레이 관련 정보를 전달하는 다른 실시예를 개시한다.
도 15는 본 발명의 실시예에서 기술하는 디스플레이 관련 정보로서, Display Device Data Block을 예시한 도면이다. 본 발명의 실시예는 Display Device Data Block을 이용하여 소스 디바이스가 싱크 디바이스로 전달하는 정보의 예를 나타낸다.
Display Device Data Block은 디스플레이 패널(panel) 자체의 특성을 나타낼 수 있는 정보를 포함한다. Display Device Data Block 은 display device의 종류(offset 필드가 0x03), display device 의 operating mode(offset 필드가 0x04), pixel 수로 나타낼 수 있는 영상 크기(offset 필드가 0x05 내지 0x08), display aspect ratio(offset 필드가 0x09 내지 0x0A), bit depth (offset 필드가 0x0E), 응답 속도 (offset 필드가 0x0F)등을 나타낸다. 본 발명의 실시예는 이 도면에서 예시한 바와 같이 Display Device Data Block과 함께 디스플레이 패널의 개시한 Control option flag정보와 sink device dynamic range 정보를 source device에 전달할 수 있다.
본 발명의 실시예에 따르면 Display Device Data Block의 offset 필드가 0x0F 인 경우 control option flag 를 나타낼 수 있고, Display Device Data Block의 offset 필드가 0x10 또는 0x11 인 경우 sink device dynamic range 정보를 나타낼 수 있다.
Display Device Data Block의 offset 필드가 0x0F 인 경우 value 필드의 예와, Display Device Data Block의 offset 필드가 0x10 또는 0x11 인 경우 value 필드의 예는 도 11 내지 도 13 또는 도 14에서 예시한 바에 따를 수 있다. 여기서 offset 필드나 value 필드 값의 임의의 값으로서 변경이 가능하다.
싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 다른 예로서, 싱크 디바이스는 DisplayID의 Vendor-Specific Data Block을 이용하여 Control option flag와 sink device dynamic range 정보를 전달할 수 있다. Vendor-Specific Data Block 은 싱크 디바이스가 Data Block 에 정의되지 않은 정보를 전달할 경우 사용하는 데이터로서, 이 데이터 블록에 위에서 개시한 Control option flag와 sink device dynamic range 정보를 포함하여 전달할 수 있다.
싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 또 다른 예로서, 싱크 디바이스는 DisplayID의 Product Identification Data Block을 이용할 수 있다.
DisplayID의 Product Identification Data Block은 display device의 제조업체에 대한 정보, display device의 serial number, Product ID 등을 포함할 수 있다. 이 때 싱크 디바이스가 display device의 제조업체, 제조 연월, Product ID 등을 통해 각 제품의 정보를 확인할 수 있는 경우, 이 정보를 이용하여 각 제품에 대응되는 dynamic range 정보를 소스 디바이스에 전달할 수 있다. 본 발명에 따르면 DisplayID의 Product Identification Data Block이 제품의 식별정보로 dynamic range 정보를 전달하는 경우, Control option flag는 위에서 개시한 실시예들 중 어느 하나의 예를 통해 전달한다.
싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 또 다른 예로서, 싱크 디바이스가 Transfer Characteristics Data Block 을 이용하여 디스플레이 관련 정보를 소스 디바이스에 전달할 수 있다. Transfer characteristics data block은 디스플레이의 transfer curve 관련 정보를 전달하는 data block 이다. Transfer characteristics data block 디스플레이 시에 임의의 gamma function을 사용하거나, piecewise linear curve를 지원하는 경우 이를 표시하기 위한 Data block이다. 디스플레이 패널의 peak luminance 및 최하위 luminance를 정의한 부분은 없기 때문에 싱크 디바이스는 Transfer characteristics data block 에 앞에 개시한 Control option flag와 sink device dynamic range 정보를 포함한 dynamic range 정보를 source device에 전달할 수 있다.
도 16은 본 발명의 일 실시예에 따라 싱크 디바이스가 소스 디바이스로 디스플레이 관련 정보를 전달하는 또 다른 예를 예시한 도면이다. 본 발명의 실시예에 따르면 싱크 디바이스는 CEA(Consumer Electronics Association) EDID extension 정보를 이용하여 디스플레이 관련 정보를 소스 디바이스에 전달할 수 있다.
싱크 디바이스는 CEA-861 의 VESA에서 정의한 EDID외에 CE Sink device에서 지원 가능한 device 속성 정보를 포함한 CEA EDID extension 정보를 소스 디바이스에 전달할 수 있다. 이 경우 싱크 디바이스는 이 도면에서 예시한 dynamic range 정보를 소스 디바이스에 전달할 수 잇다.
CEA EDID extension 정보의 extension data block은 Video, Audio, Speaker Allocation, Vendor-Specific, 및 Video Capability data block을 포함할 수 있다. extension data block은 이 data block을 각각 식별하기 위해 미리 정의된 Tag Code를 각 data block의 첫 번째 byte의 bits 5-7에 포함한다.
발명의 실시예에 따르면 CEA EDID extension data block의 첫 번째 byte의 bits 5-7는 dynamic range 정보를 표시하는 tag code를 포함할 수 있다.
그리고, 이 도면에서 예시한 바와 같이 CEA EDID extension data block내에 dynamic range 정보를 위에서 예시한 바와 같이 싱크 디바이스의 최소 밝기 정보(Lowest Brightness level of Sink device 중 하위 8비트보다 높은 8비트 (higher 8 bits) 정보, 싱크 디바이스의 최소 밝기의 LSB 정보(Lowest Brightness level of Sink device (LSB)) 및 싱크 디바이스의 최대 밝기 정보(Highest Brightness level of Sink device (total 7 bits))로 표현할 수 있다. 비트 할당은 임의적인 것으로 변경이 가능하다. 따라서, 본 발명의 실시예에 따르면, 싱크 디바이스가 CEA의 EDID extension 정보를 이용하여 소스 디바이스로 디스플레이 관련 정보 중 싱크 디바이스의 최대/최소 밝기 정보를 전달할 수 있다.
본 발명의 일 실시예에 따른 싱크 디바이스의 최대 밝기 정보는 싱크 디바이스에서 처리할 수 있는 최대 밝기 정보를 나타낼 수 있고, 싱크 디바이스의 최소 밝기 정보는 싱크 디바이스에서 처리할 수 있는 최소 밝기 정보를 나타낼 수 있다.
다음으로 본 발명의 실시예에 따라 소스 디바이스에서 싱크 디바이스로 전달할 정보를 개시하면 다음과 같다.
소스 디바이스는, 싱크 디바이스의 디스플레이 관련 정보 및 color gamut 관련 정보를 기반으로 컨텐츠의 밝기 및 컬러 gamut 등이 sink device에 적합한지 판단하고, 필요한 경우 소스 디바이스는 컨텐츠의 밝기 및 컬러 gamut 등을 변환할 수 있다. 이 경우 초고화질 영상을 처리할 경우 source device는 어떠한 처리가 이뤄졌는지에 대한 정보 및 영상 처리 이후의 밝기 및 color gamut에 대한 정보를 싱크 디바이스에 전달해야 한다. 이는 싱크 디바이스의 포스트 프로세싱을 제어하기 위한 것인데 이에 대한 실시예를 상세히 개시하면 다음과 같다.
본 발명에 실시예에 따라 소스 디바이스는 CEA 861에 정의 된 InfoFrame을 통해 싱크 디바이스로 초고화질 영상 처리 관련 정보를 전달할 수 있다.
도 17은 본 발명에 실시예에 따라 소스 디바이스에서 싱크 디바이스로 전달할 정보를 예시한 도면이다.
CEA 861에서 소스/싱크 디바이스의 인터페이스 정보로서 정의된 InfoFrame 중 color gamut 정보는 AVI InfoFrame을 통해 전달될 수 있다. 본 발명의 실시예는 소스 디바이스가 초고화질 영상 처리에 대한 정보를 InfoFrame을 통해 싱크 디바이스로 전달한다. 이를 이용해 초고화질 영상의 brightness 정보, 임의의 color gamut 정보 및 HDR 정보 또는 WCG 정보 등의 영상 처리 정보를 싱크 디바이스로 전달하도록 할 수 있다. 본 실시예에 따르면 소스 디바이스는 수행한 post processing에 대한 정보와 post processing 이후의 컨텐츠의 밝기 정보, post processing 이전의 컨텐츠 밝기 정보 및 컬러 표현 범위 정보를 싱크 디바이스로 전달할 수 있다.
post processing에 대한 정보는 컨텐츠의 상태에 대한 정보를 포함하고, 싱크 디바이스의 요청에 대한 응답으로 사용될 수 있다. post processing 이후의 컨텐츠의 밝기 정보는 컨텐츠의 최소 밝기 정보(black_luminance_level) 와 컨텐츠의 최대 밝기 정보(white_luminance_level)를 포함할 수 있다. post processing 이전의 컨텐츠 최소 밝기 정보(orig_black_luminance_level)와 최대 밝기 정보(orig_white_luminance_level)를 포함할 수도 있다. 컨텐츠의 컬러 표현 범위 정보는 Orig_color_gamut 정보로 나타내었는데 이에 대해서는 상세히 설명한다.
InfoFrame Type Code는 이 InfoFrame의 Type을 나타내는데, 예를 들어 이 값이 0x07인 경우 UHD 영상처리에 대한 정보를 포함하는 프레임을 나타낼 수 있다. 여기서, UHD 영상처리에 대한 정보는 다이나믹 레인지 마스터링 정보 (Dynamic Range and Mastering information)으로 명명될 수 있다. 본 발명의 일 실시예에 따른 다이나믹 레인지 마스터링 정보는 컨텐츠의 다이나믹 레인지 관련 정보를 포함할 수 있다.
InfoFrame Version Number는 이 프레임의 버전 정보를 나타내고, Length of HDR InfoFrame는 HDR InfoFrame의 길이 정보를 나타낸다.
Data Byte 1의 P3 내지 P0 필드는, post_processing_type_flag 로 source device가 수행하는 post processing 과정을 control (on/off) 하기 위한 필드이다. 여기서는 이 필드를 이용해 HDR 정보 또는 WCG 정보 관련 option 정보를 개시하고, 이에 대한 상세한 예는 이하에서 후술한다. 본 발명의 일 실시예는, BT. 709로 제작된 컨텐츠를 BT. 2020으로 인코딩하여 전송하는 경우, 이 필드 및/또는 후술할 오리지널 컬러 개멋 정보 (Orig_color_gamut)를 이용하여 contents color gamut 및/또는 container color gamut을 구분하여 각각을 시그널링할 수 있다. 이에 대한 상세한 설명은 후술한다.
그리고, Data Byte 1의 R2~R0 필드는 reserved bits를 나타내고, E0 필드는 new_EOTF_flag를 통해 새로운 색 변환 함수(EOTF 등)를 사용할지 여부를 나타낸다. reserved bits는 추후 HDR 정보에 적합한 새로운 EOTF 가 정의되면 사용할 수 있는 flag 이다.
Data Byte 2는 컨텐츠에서 표현하는 최소 밝기 정보를 포함할 수 있는데 여기서는 black_luminance_level로 표현하였다. 이 실시예에서는 최소 밝기 정보의 최고 8비트를 Data Byte 2 필드에 표현하도록 하였다.
컨텐츠의 최소 밝기 정보는 일반적인 최저 밝기를 고려하여 0~0.05 범위에 대해 0.0001 단위로 값을 표현할 수 있다. 즉, display의 물리적 밝기를 Brightness_black (cd/m2 단위)라고 할 때 다음과 같은 관계를 갖는다.
Brightness_black = black_luminance_level x 10000
(0<= black_luminance_level <= 500 < 29)
예를 들어 reference monitor의 경우 0.05 cd/m2 를 최소 기준 밝기로 삼으며, 10000(10진수)을 곱한 값인 500을 밝기 정보로 표현할 수 있다.
Data Byte 3은, 이 도면에서 예시한 바와 같이 컨텐츠 최소 밝기 정보(black_luminance_level)의 최하위 1비트와 컨텐츠 최대 밝기 정보 (white_luminance_level) 7비트를 포함할 수 있다.
최대 밝기 정보 (white_luminance_level) 는 컨텐츠에서 표현하는 최대 밝기를 나타내기 위한 정보로써, 일반적인 최대 밝기를 고려하여 100~10000 범위에 대해 100 단위로 값을 표현할 수 있다. 즉, display의 물리적 밝기를 Brightness_white (cd/m2단위)라고 할 때 다음과 같은 관계를 갖는다.
Brightness_white = white_luminance_level x 100
(1<= white_luminance_level <= 100 < 27)
예를 들어 reference monitor의 경우 100 cd/m2 를 최대 기준 밝기로 삼으며, 100(10진수)으로 나눈 값의 몫인 1 값을 밝기 정보로 표현할 수 있다.
Data Byte 4는 컨텐츠의 오리지널 최소 밝기 정보 (Orig_black_luminance_level)의 최상위 8비트를 표현할 수 있고, Data Byte 5는 컨텐츠의 오리지널 최소 밝기 정보 (Orig_black_luminance_level)의 최하위 1비트와 컨텐츠의 오리지널 최대 밝기 정보(Orig_white_luminance_level)) 7비트를 표현할 수 있다.
컨텐츠의 오리지널 최소 밝기 정보 (Orig_black_luminance_level)는 source device에서 HDR 처리 이전 컨텐츠의 최소 밝기를 나타낸다. 표현 방법 및 범위는 black_luminance_level와 동일하고 본 실시예에서 필드의 구현은 post_processing_type에서 HDR 정보가 on 된 것으로 표시되는 경우에만 전송하도록 옵션을 줄 수도 있다.
유사하게 컨텐츠의 오리지널 최소 밝기 정보 (Orig_white_luminance_level)는 source device에서 HDR 처리 이전 컨텐츠의 최대 밝기를 나타낸다. 표현 방법 및 범위는 white_luminance_level와 동일하고 마찬가지로 본 실시예에서 필드 구현은 post_processing_type에서 HDR정보가 on 된 것으로 표시되는 경우에만 전송하도록 옵션을 줄 수도 있다.
본 발명의 일 실시예에 따르면, 컨텐츠의 밝기 범위 (contents dynamic range)와 구분되는 밝기 범위 (dynamic range)에 대한 시그널링이 필요한 경우, 상술한 오리지널 최소 밝기 정보 (Orig_black_luminance_level) 및/또는 오리지널 최소 밝기 정보 (Orig_white_luminance_level)가 사용될 수 있다. 이 때, 상술한 컨텐츠의 밝기 범위와 구분되는 밝기 범위는 image processing 전후의 밝기 범위, 인코딩 시 사용된 밝기 범위, mastering display의 밝기 범위, target display의 밝기 범위, container의 밝기 범위 등을 포함할 수 있다. 여기서, container의 밝기 범위는 원본 컨텐츠의 밝기 범위 (Dynamic range)와 컨테이너 (container)의 밝기 범위가 다른 경우의 container의 최대/최소 밝기 범위를 나타낼 수 있다. 예를 들어, 원본 컨텐츠의 밝기 범위 (Dynamic range)와 컨테이너 (container)의 밝기 범위가 다른 경우란 LDR (Low Dynamic Range)로 제작된 컨텐츠를 HDR (High Dynamic Range)로 인코딩하여 전송하는 경우, HDR로 제작된 컨텐츠를 LDR로 인코딩하여 전송하는 경우, 좁은 밝기 범위를 갖는 컨텐츠를 넓은 밝기 범위를 갖는 container로 전송하는 경우, 넓은 밝기 밤위를 갖는 컨텐츠를 좁은 밝기 범위를 갖는 container로 전송하는 경우 등을 포함할 수 있다. 여기서, container의 밝기 범위는 content의 밝기 범위와 구분되는 의미로서 display의 밝기 범위를 나타낼 수 있다. 또한, 상술한 마스터링 디스플레이 (mastering display)는 컨텐츠 및/또는 디스플레이의 밝기 및/또는 컬러 정보에 따라 마스터링 과정이 이루어지는 디스플레이를 나타낼 수 있다. 따라서, mastering display의 밝기 범위는 display에서 지원 가능한 밝기 범위를 나타낼 수 있다.
Data Byte 6은 오리지널 컬러 개멋 정보(Orig_color_gamut) 및 S3 ~ S0이 reserved bits를 포함할 수 있다. 오리지널 컬러 개멋 정보(Orig_color_gamut)는 source device에서 WCG 처리 이전 컨텐츠의 색 표현 범위를 나타낸다. 표준 색 표현 범위에 대한 상세한 예는 후술한다. 본 실시예에서 필드 구현은 post_processing_type에서 WCG가 on 된 것으로 표시되는 경우에만 전송하도록 옵션을 줄 수도 있다.
본 발명의 일 실시예는, 소스 디바이스에서 별도의 color gamut mapping 처리를 하지 않는 경우 중, 원본 컨텐츠의 color gamut과 컨테이너 (container)의 color gamut이 다른 경우, post_processing_type의 값을 0000 (아무 처리도 하지 않음) 또는 1111 (Different color gamut)로 시그널링함으로써 오리지널 컬러 개멋 정보 (Orig_color_gamut)를 사용하여 contents color gamut 및 container color gamut을 구분하여 각 컬러 개멋에 대한 정보를 디스플레이 장치에 전달할 수 있다. 여기서, 상술한 원본 컨텐츠의 color gamut과 컨테이너 (container)의 color gamut이 다른 경우는 BT. 709로 제작된 컨텐츠를 BT. 2020으로 인코딩하여 전송하는 경우를 포함할 수 있다. 본 발명의 다른 일 실시예는, CEA 861-F의 AVI Info Frame 내 Data Byte 2, 3의 colorimetry 정의 (C1, C0)와 extended colorimetry (EC2, EC1, EC0)을 이용하여 container color gamut을 표현하고, Orig_color_gamut을 이용하여 contents color gamut을 표현할 수 있다. 이와 반대로, 본 발명의 또 다른 일 실시예는, CEA 861-F의 AVI Info Frame 내 Data Byte 2, 3의 colorimetry 정의 (C1, C0)와 extended colorimetry (EC2, EC1, EC0)을 이용하여 contents color gamut을 표현하고, Orig_color_gamut을 이용하여 container color gamut을 표현할 수 있다. 또한, 본 발명의 또 다른 일 실시예는, Orig_color_gamut를 이용하여 contents color gamut을 표현하고, Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x 및/또는 White-y를 이용하여 container color gamut을 표현할 수 있다. 이와 반대로, 본 발명의 또 다른 일 실시예는, Orig_color_gamut를 이용하여 container color gamut을 표현하고, Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x 및/또는 White-y를 이용하여 contents color gamut을 표현할 수 있다. 여기서, container color gamut은 content color gamut과 구분되는 의미로서 display의 컬러 개멋 (display color gamut)을 나타낼 수 있다. 나아가, 본 발명의 일 실시예에 따른 Orig_color_gamut, Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x 및/또는 White-y은 color primaries (예를 들어, 삼원색) 및/또는 화이트 색상의 색도 좌표를 포함할 수 있다.
본 발명의 일 실시예에 따르면, 컨텐츠의 컬러 개멋 (contents color gamut)과 구분되는 컬러 개멋 (color gamut)에 대한 시그널링이 필요한 경우, 상술한 오리지널 컬러 개멋 정보 (Orig_color_gamut)가 사용될 수 있다. 이 때, 상술한 컨텐츠의 컬러 개멋 (contents color gamut)과 구분되는 컬러 개멋 (color gamut)은 image processing 전후의 컬러 개멋, container의 컬러 개멋, 인코딩 시 사용된 컬러 개멋, mastering display의 컬러 개멋, target display의 컬러 개멋 등을 포함할 수 있다. 여기서, 마스터링 디스플레이 (mastering display)는 컨텐츠 및/또는 디스플레이의 밝기 및/또는 컬러 정보에 따라 마스터링 과정이 이루어지는 디스플레이를 나타낼 수 있다. 즉, mastering display의 컬러 개멋은 display에서 지원 가능한 color gamut을 나타낼 수 있다.
Data Byte 7부터 Data Byte 16은 임의의 컬러 개멋 정보를 나타낼 수 있는 필드이다. 이 도면에서 임의의 컬러 개멋 정보는 Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x, White-y로 예시하였다.
여기서 Red-x는 색공간 (예를 들어 CIE 1931)의 R 색상의 x 좌표를 0~1 사이의 값을 2진법으로 나타낸 것인데, 본 실시 예는 전체 10 bit를 사용하며, Data Byte 9의 상위 8 bit와 Data Byte 6의 상위 2bit 을 사용할 수 있다.
유사하게 Red-y는 색공간 (예를 들어 CIE 1931)의 R 색상의 y 좌표를 0~1 사이의 값에 대해 2진법으로 나타낸 것이다. 본 실시 예는 전체 10 bit를 사용하여 이 색 정보를 나타내며, Data Byte 10의 상위 8 bit와 Data Byte 6의 하위 2bit 을 사용할 수 있다.
소스 디바이스는 위에서 개시한 컨텐츠의 오리지널 컬러 개멋 정보(Orig_color_gamut)에서 적절한 정보를 표현하지 못하는 경우, Data Byte 7부터 Data Byte 16를 사용하여 컬러 개멋 정보를 전달할 수 있다.
본 발명의 다른 실시예로서 도 11에서 개시한 혹은 오리지널 컬러 개멋 정보(Orig_color_gamut)는 사용하지 않고 Data Byte 7부터 Data Byte 16에 해당하는 정보만을 사용하여 오리지널 컬러 개멋 정보를 전송할 수도 있다. 또는 오리지널 컬러 개멋 정보(Orig_color_gamut)가 특정한 값을 나타내는 경우에만 Data Byte 7부터 Data Byte 16에 해당하는 정보를 추가로 활용하도록 이용할 수도 있다.
Data Byte 17은 E3 필드, E2 필드, E1 필드, E0 필드 및/또는 Number of Coefficients 필드를 포함할 수 있다.
E3 내지 E1 필드는 EOTF_type으로서 HDR 컨텐츠의 최적 화질을 위해 컨텐츠 제작자가 사용한 EOTF의 종류를 나타낼 수 있다. 본 발명의 일 실시예에 따르면, 복수의 EOTF 표준이 제정될 수 있고 컨텐츠 제작자가 임의로 EOTF를 정의하여 사용할 수 있다. EOTF_type 값이 나타내는 내용에 대한 상세한 설명은 후술한다.
E0 필드는 private_EOTF_coeff_flag를 나타낼 수 있다. 이 필드 값이 1인 경우, 이 필드는 EOTF_type에 따른 별도의 coefficient가 사용되었음을 나타낼 수 있다. 예를 들어, 서로 다른 최대 밝기에 따라 적합한 EOTF coefficient가 다른 경우와 같이, 동일 함수에 대하여 서로 다른 계수가 사용되는 경우, 본 발명의 일 실시예는 이 필드를 이용하여 이에 대한 적절한 coefficient를 전송할 수 있다. 또한, 본 발명의 다른 일 실시예에 따르면, 별도의 파라미터가 세팅되고 EOTF_type을 통하여 시그널링될 수 있다. 이 필드 값이 0인 경우, 이 필드는 범용적으로 사용되는 default 파라미터가 사용됨을 나타낼 수 있다. 여기서, 파라미터와 coefficient는 동일한 의미로 사용될 수 있다. 본 발명의 일 실시예에 따르면, E0 필드가 1인 경우, Data Byte 18 내지 18+N이 추가적으로 사용될 수 있고, 0인 경우, Data Byte 18 내지 18+N은 사용되지 않을 수 있다.
Number of Coefficients 필드는 상술한 E0 필드가 1을 나타내는 경우에 사용되는 coefficient의 개수를 나타낼 수 있다.
Data Byte 18은 EOTF_additional_info 필드를 포함할 수 있다. EOTF_additional_info 필드는 EOTF_type에 따라 추가적인 정보가 전달될 필요가 있는 경우, EOTF_type에 따른 추가적인 정보를 나타낼 수 있다. 예를 들어, 서로 다른 최대 밝기에 따라 적합한 EOTF coefficient가 다른 경우, 이 필드는 목표로 하는 최대 밝기 (target max brightness)에 대한 정보를 포함할 수 있다. 본 발명의 일 실시예에 따르면, 주어진 EOTF_type에 대하여 다양한 조건에 따른 복수의 EOTF 함수의 계수를 전달할 필요가 있는 경우, 예를 들면, 최대 밝기에 따라 계수가 달라지고 다양한 최대 밝기에 따른 계수들을 모두 전달해야 하는 경우, 이 필드는 각 계수들에 대한 정보를 제공하기 위해 사용될 수 있다. 이 경우, 조건들의 개수를 나타내는 필드를 별도로 지정하고 각 조건에 대하여 EOTF_target_max_brightness, EOTF_Coefficient 1 내지 N을 지정하는 방법이 사용될 수 있다.
Data Byte 18+1 내지 18+N은 각각 EOTF_Coefficient 1 내지 N 필드를 포함할 수 있다. EOTF_Coefficient 1 내지 N 필드는 E0 필드가 1인 경우 사용되는 파라미터 값을 나타낼 수 있다. 또한 이 필드는 임의의 EOTF 함수를 전송하는데 사용될 수 있다.
상술한 정보들은 인터페이스 (interface) 상에서 소스에서 싱크로 전송되는 것을 전제로 할 수 있다. 하지만, 이 정보들은 비디오 내부 (예를 들면, SEI message) 및/또는 스토리지 (storage)의 별도의 메타데이터 전달 방법을 통하여 전송될 수 있다. 따라서, 동일한 정보가 비디오 소스에도 정의되어 있을 수 있으며, 그렇지 않은 경우 소스 디바이스에서 해당 컨텐츠에 대한 추가 메타데이터를 external server 등을 통하여 별도로 공급받을 수 있다.
본 발명의 일 실시예에 따르면, 이 도면에서 나타낸 InfoFrame은 Dynamic Range and Mastering InfoFrame으로 명명될 수 있다.
도 18는 본 발명의 실시예에 따라 개시한 포스트 프로세싱 타입 정보의 상세한 예를 개시한 도면이다. 개시한 것처럼 소스 디바이스가 UHD 영상을 싱크 디바이스에 맞게 포스트 프로세싱한 경우 디스플레이 관련 정보 및 컬러 개멋 정보를 InfoFrame를 통해 싱크 디바이스로 전달할 수 있다.
InfoFrameData Byte 1의 P3 내지 P0 필드는, post_processing_type을 나타내고 HDR 정보 또는 WCG 정보 관련 option을 나타내는데 포스트 프로세싱 타입은 이 도면에서 예시한 바와 같다.
예를 들어 post_processing_type이 0000인 경우, Source device에서 아무런 처리를 하지 않음을 나타내고, 0001인 경우, Source device가dynamic range mapping을 수행했음을 나타낸다.
예를 들어 post_processing_type이 0010인 경우, Source device가 color gamut mapping을 수행했음을 나타내고, post_processing_type이 0011인 경우, Sink device가 전달한 정보를 바탕으로 이에 맞게 source device가 처리했음을 나타낸다. 이 값은 초기 값(initial value)으로 사용될 수 있다.
post_processing_type이 0110~1000은 추후에 multi-layer video enhancement 의 기능에 대해 sink-source간 정보 교환을 위해 사용될 수 있고, 1001-1110 은 User private를 위해 사용될 수 있다.
예를 들어, post_processing_type이 1111인 경우, 오리지널 컬러 개멋 정보 (Orig_color_gamut)가 contents color gamut 및 container color gamut을 구분하여 시그널링하는 데 사용됨을 나타낼 수 있다. 즉, 본 발명의 일 실시예는, contents color gamut과 구분되는 의미의 color gamut에 대한 시그널링이 필요한 경우, post_processing_type 필드를 이용할 수 있다. 이와 동일한 방법으로, 본 발명의 다른 일 실시예는, 컨텐츠의 밝기 범위 (contents dynamic range)와 구분되는 의미의 밝기 범위 (dynamic range)에 대한 시그널링이 필요한 경우, post_processing_type 필드를 이용할 수 있다. 이 경우, 예를 들어, post_processing_type으로 1110이 할당될 수 있다.
도 19은 본 발명의 실시예에 따라 개시한 오리지널 컬러 개멋 정보(Orig_color_gamut)의 상세한 예를 개시한 도면이다.
기술한 바와 같이 소스 디바이스가 UHD 영상을 싱크 디바이스에 맞게 프로세싱한 경우 컨텐츠의 오리지널 컬러 개멋 정보(Orig_color_gamut)를 싱크 디바이스에 전송할 수 있다.
이 예에서 오리지널 컨텐츠의 컬러 개멋 정보(Orig_color_gamut)의 필드가 0000인 경우 오리지널 컨텐츠의 컬러는 REC. 709을 따른 것을 나타내고, 0001인 경우 오리지널 컨텐츠의 컬러는 BT. 2020 NCL을 따른 것을 나타낸다. 유사하게 이 필드가 0010, 0011, 0100, 0101인 경우 각각 오리지널 컨텐츠의 컬러는 xvYCC, DCI-P3, Adobe RGB 및 BT. 2020 CL에 따라 정의되었음을 나타낸다.
도 20는 본 발명의 실시예에 따라 소스 디바이스가 싱크 디바이스로 전달하는 영상의 컬러 정보를 전달하는 다른 예를 개시한다.
본 발명의 실시예는, AVI InfoFrame version 3의 형식을 확장하여 소스 디바이스가 처리한 영상의 포스트 프로세싱 타입 정보(post_processing_type_flag), 색 변환함수 정보(new_EOTF_flag) 및 영상의 밝기 정보(black_luminance_level 또는 white_luminance_level)를 싱크 디바이스에 전달할 수 있다. 또는 본 발명의 실시예는 소스/싱크 디바이스의 인터페이스 상에서 정의된 새로운 AVI InfoFrame를 이용하여 소스 디바이스가 처리한 영상의 포스트 프로세싱 타입 정보(post_processing_type_flag), 색 변환함수 정보(new_EOTF_flag) 및 영상의 밝기 정보(black_luminance_level 또는 white_luminance_level)를 싱크 디바이스에 전달할 수 있다.
개시한 AVI InfoFrame은 Data byte에 따라 소스 디바이스가 싱크 디바이스에 처리된 영상의 정보를 전달할 수 있다. 이 예에서 Data byte14 내지 Data byte29는 도 11 내지 도 13에서 예시한 Data byte 1 내지 Data byte 16정보를 각각 포함할 수 있다.
따라서, 본 실시예에 따르면 소스 디바이스는 수행한 post processing에 대한 정보를 제공하는 정보와 post processing 이후의 컨텐츠의 밝기 정보, post processing 이전의 컨텐츠 밝기 정보 및 컬러 표현 범위 정보를 싱크 디바이스로 전달할 수 있다.
본 발명의 실시예는, AVI InfoFrame version 3의 형식을 확장하여 Orig_color_gamut, RGBW index, EOTF_type, private_EOTF_coeff_flag, Number of Coefficients, EOTF_additional_info 및/또는 EOTF_Coefficient를 싱크 디바이스에 전달할 수 있고, 소스/싱크 디바이스의 인터페이스 상에서 정의된 새로운 AVI InfoFrame를 이용하여 상술한 정보를 전달할 수 있다.
이 도면에서 Data Byte 30 내지 Data Byte 31+N은 도 11 내지 도 13에서 예시한 Data Byte 17 내지 Data Byte 18+N 정보를 각각 포함할 수 있다.
도 21는 본 발명의 일 실시예에 따른 신호 처리 장치의 실시예들 및 그 동작을 예시한 도면이다.
먼저 본 발명의 일 실시예에 따른 신호 처리 장치의 실시예는 소스 디바이스(100)와 싱크 디바이스(200)를 포함한다.
소스 디바이스(100)는, 디코더(110), 컬러 개멋 매핑부(120), 다이나믹 레인지 매핑부(130), 포스트 프로세싱부(140), 메타데이터 프로세서(150) 및 옵션 컨트롤러(160)를 포함한다.
소스 디바이스(100)의 컬러 개멋 매핑부(120), 다이나믹 레인지 매핑부(130) 및 포스트 프로세싱부(140)는 비디오 처리부로 호칭할 수 있고, 비디오 처리부의 컬러 개멋 매핑부(120), 다이나믹 레인지 매핑부(130) 및 포스트 프로세싱부(140)는 비디오 처리 시에 앞의 블록과 상관없이 각각 개별적으로 필요한 경우 동작할 수 있다.
싱크 디바이스(200)는 소스 디바이스 컨트롤러(210), 메타데이터 프로세서(220) 및 패널 컨트롤러(230)를 포함한다. 소스 디바이스가(100)가 싱크 디바이스(200)와 인터페이스로 연결된 경우, 도 9에서 예시한 바와 같은 프로토콜에 따라 정보를 송수신할 수 있다. 이하에서 기술하는 디바이스 간의 정보의 전송과 수신은 인터페이스를 통해 전송 및 수신된다.
소스 디바이스(100)는 인코딩된 UHD 비디오 스트림을 복호하고, 필요에 따라 복호된 UHD 비디오를 후처리하거나 싱크 디바이스(200)의 표출 능력에 맞게 UHD 비디오를 처리하고 처리된 UHD 비디오를 싱크 디바이스에 제공할 수 있다.
싱크 디바이스(200)는 소스 디바이스(100)가 디코딩한 UHD 비디오를 수신하여 표출할 수 있는데, 소스 디바이스(100)에게 싱크 디바이스(200)의 표출 능력에 대한 정보를 제공하여 소스 디바이스(100)로부터 싱크 디바이스(200)가 표출 가능한 UHD 비디오를 수신하여 표출할 수 있다.
소스 디바이스(100)의 옵션 컨트롤러(160)는 싱크 디바이스(200)와의 인터페이스를 통해 비디오 옵션 신호를 전송하여 디스플레이 관련 정보를 요청할 수 있다. 디스플레이 관련 정보는 디스플레이 컬러 개멋 정보와 디스플레이 밝기 관련 정보를 포함할 수 있다. 소스 디바이스(100)에서 싱크 디바이스(200)로 전송하는 비디오 옵션 정보는 도 11 내지 도 14의 예에 따를 수 있다.
소스 디바이스(100)의 메타데이터 프로세서(150)는 UHD 비디오에 대한 메타 데이터를 싱크 디바이스(100)로 전송할 수 있고, 싱크 디바이스(220)는 디스플레이에 관련된 메타 데이터를 소스 디바이스(100)로 전송할 수 있다.
소스 디바이스(100)의 디코더는 인코딩된 UHD 비디오 스트림을 수신하여 복호할 수 있다.
컬러 개멋 매핑부(120) 디코딩된 UHD 비디오의 컬러 개멋 정보를 매핑하는데, 이 경우 싱크 디바이스(200)의 디스플레이 관련 정보를 이용하거나 UHD 비디오 내 메타데이터에 기반하여 UHD 비디오의 컬러 개멋 정보를 매핑하고 변경할 수 있다.
또는 다이나믹 레인지 매핑부(130)는 디코딩된 UHD 비디오에 대한 다이나믹 레인지를 매핑할 수 있는데, 기술한 바와 같이 싱크 디바이스(200)의 디스플레이 관련 정보를 이용하거나 UHD 비디오 내 메타데이터에 기반하여 UHD 비디오의 다이나믹 레인지를 매핑하고 변경할 수 있다.
포스트 프로세싱부(140)는 디코딩된 UHD 비디오에 대해 비디오 포스트 프로세싱을 수행할 수 있으며, 마찬가지로 디스플레이 관련 정보에 기반하여 비디오 포스트 프로세싱을 수행할 수 있다.
메타데이터 프로세서(150)는 UHD 비디오의 메타데이터를 싱크 디바이스(200)로 전송하고, 싱크 디바이스로부터 디스플레이 관련된 메타데이터를 수신할 수 있다
옵션 컨트롤러(160)는 싱크 디바이스(200)에 비디오 옵션 정보를 전송하고, 싱크 디바이스(200)로부터 디스플레이 옵션 정보를 수신할 수 있다. 싱크 디바이스(100)에서 소스 디바이스(200)로 전송하는 디스플레이 옵션 정보의 예는 도 10 내지 도 16에 예시한 바와 같다. 한편, 소스 디바이스(100)에서 싱크 디바이스(200)로 전송하는 비디오 옵션 정보는 도 17 내지 도 20의 예에 따를 수 있다.
싱크 디바이스(200)의 소스 디바이스 컨트롤러(210)는 소스 디바이스(100)를 컨트롤할 수 있는 컨트롤 신호를 전송할 수 있고, 사용자로부터 사용자 컨트롤 신호를 수신할 수도 있다.
싱크 디바이스(200)의 메타데이터 컨트롤러(220)는 소스 디바이스(100)로부터 UHD 비디오의 메타데이터를 수신할 수 있고, 디스플레이 기기와 관련된 메타데이터를 소스 디바이스(100)로 전송할 수 있다. 메타데이터 프로세서(220)는 소스 디바이스 컨트롤러(210)로 비디오 프로세싱 컨트롤 신호를 전송하여 소스 디바이스 컨트롤러(210)가 컨트롤 신호를 전송하도록 할 수 있다.
패널 컨트롤러(230)는 메타데이터 프로세서(220)의 디스플레이 컨트롤 신호에 따라 디스플레이 패널을 제어할 수 있다.
본 발명의 실시예는 디스플레이에 적응적인 비디오 처리가 가능하도록 할 수 있다. 즉, 본 발명의 실시예들은 싱크 디바이스(200)의 성능에 따라 각각 소스-싱크 디바이스들 간의 정보교환, 비디오 프로세싱, 및 디스플레이되는 방식이 각각 달라질 수 있다. 이하에서는 싱크 디바이스(200)의 메타 데이터 정보를 소스 디바이스(100)로 전송하고, 소스 디바이스에서 디스플레이 관련 정보를 기반으로 영상처리를 한 후 싱크 디바이스(200)를 이를 수신하여 비디오를 출력하는 예에 대해 상세히 기술한다.
먼저, 싱크 디바이스(200)가 하이엔드 UHD 싱크 디바이스인 경우에 대한 제 1 실시예를 개시한다.
싱크 디바이스(200)가 하이엔드 UHD 싱크 디바이스인 경우, 싱크 디바이스(200)는 디스플레이 관련 메타데이터를 소스 디바이스(100)로 전송할 수 있다. 디스플레이 관련 정보는 디스플레이의 컬러 개멋 정보 (또는 RGBW에 해당하는 color primary정보)와 디스플레이 밝기 범위 관련 정보 (예를 들면 peak luminance 정보, black luminance 정보)를 포함할 수 있다. 싱크 디바이스(200)의 메타데이터 프로세서(220)는 디스플레이 관련 정보를 처리할 수 있다. 예를 들어 싱크 디바이스(200)의 메타데이터 프로세서(220)는 디스플레이 관련 정보를 저장하여 컨텐츠 처리 및 디스플레이 시에 참조할 수 있고, 필요에 따라 소스 디바이스(100)에 이 정보를 다시 요청할 수도 있다.
소스 디바이스(100)는 디스플레이 관련 정보를 싱크 디바이스(200)에 전달할 때 디스플레이의 색상 및 밝기 관련한 metadata 뿐만 아니라 소스 디바이스(100)의 control signal도 전달할 수 있다.
소스 디바이스(100)의 control signal는 소스 디바이스(100)가 어떠한 종류의 video processing이 가능한지에 대한 정보를 포함할 수 있다. 소스 디바이스(100)의 control signal는 싱크 디바이스(200)의 소스 디바이스 컨트롤러(210)가 전달하는 디스플레이할 수 있는 색 범위를 기초로 생성될 수도 있고, 싱크 디바이스(200)로부터 전달받은 정보 없이 디폴트 처리 요청에 따라 생성될 수도 있다.
소스-싱크 디바이스 간의 정보 교환 과정은 두 디바이스가 연결된 시점에서 동작하지만, 소스-싱크 디바이스가 연결된 상태에서 방송 또는 스트리밍 컨텐츠가 입력되는 경우, 또는 컨텐츠가 변경되는 경우, 또는 특정 scene이 변경되는 시점 등에서 두 디바이스의 정보 교환이 다시 수행될 수 있다.
싱크 디바이스(200)가 하이엔드 UHD 싱크 디바이스인 경우 비디오 프로세싱은 다음과 같이 처리될 수 있다.
소스 디바이스(100)의 포스트 프로세싱부(140)는 메타데이터 프로세서(150)로부터 싱크 디바이스(200)의 디스플레이 관련 정보에 기초하여 디코딩된 UHD 비디오에 후처리를 수행해야 하는지 판단하고, 이에 대한 컨트롤 신호를 출력할 수 있다. 만약 소스 디바이스(100)는 UHD 비디오의 WCG 정보 또는 HDR 정보와 관련된 영상 처리, 예를 들면 컬러 개멋 매핑 또는 다이나믹 레인지 매핑을 수행할 수 있다. 싱크 디바이스(200)의 디스플레이 성능이 비디오의 후처리 후 UHD 비디오를 재생하는데 충분한 경우, 소스 디바이스(100)의 옵션 컨트롤러(160)는 포스트 프로세싱부(140)에 그에 대한 정보를 전달할 수 있다. 싱크 디바이스(200)의 디스플레이 컬러 개멋 정보 또는 밝기 정보가 비디오의 WCG 정보 또는 HDR 정보를 변경하는데 기초가 될 수 있는 경우 메타데이터 프로세서(150)는 컬러 개멋 매핑부(120) 또는 다이나믹 레인지 매핑부(130)에 디스플레이 관련 메타데이터를 전송할 수 있다.
소스 디바이스(100)의 포스트 프로세싱부(140)는 비디오와 함께 전송되는 메타데이터, 예를 들면 WCG SEI message 또는 HDR SEI message를 이용하여 포스트 프로세싱이 수행될 수도 있다. 비디오디코더(110) 또는 포스트 프로세싱부(140)는 scalable coding에 따라 enhancement layer 데이터가 전송된 경우라면 enhancement layer 데이터를 디코딩하여 출력되는 비디오의 화질을 높일 수 있다.
출력 비디오의 화질이 디스플레이 화질에 맞게 추가 향상이 가능하지만 싱크 디바이스(200) 로부터 비디오 처리를 위한 추가 정보가 없는 경우 소스 디바이스(100)는 자체적으로 화질 향상 기능을 수행할 수 있다.
메타데이터 프로세서(150)는 디코딩되거나 후처리된 비디오의 WCG 정보 또는 HDR 정보를 포함한 UHD video metadata를 싱크 디바이스(200)로 전달한다. 또한, 옵션 컨트롤러(160)는 처리된 비디오 프로세싱 정보를 비디오 옵션 정보(video option signal)에 담아 소스 디바이스 컨트롤러(210)로 전송할 수 있다. 비디오 옵션 정보는 도 17 내지 도 20의 예에 따를 수 있다.
만약 디코더(110)가 복호화한 영상 자체가 디스플레이에 적합한 비디오인 경우 비디오의 WCG 정보 또는 HDR 정보에 대해 별도의 처리 없이 재생을 위해 싱크 디바이스(200)로 전달할 수도 있다. 이 경우 옵션 컨트롤러(160)는 비디오에 대해 별도의 처리가 없었음을 시그널링할 수 있다.
싱크 디바이스(200)는 UHD 비디오를 디스플레이 기기를 통해 표출하도록 할 수 있다. 이 경우 싱크 디바이스(200)는 소스 디바이스(100)를 통해 처리된 영상을 그대로 재생할 수 있지만, 소스 디바이스(100)가 전달하는 영상이 실제로 디스플레이에 적합하게 처리되었는지 여부를 판단할 수 있다. 그리고, 싱크 디바이스(200)의 소스 디바이스 컨트롤러(210)는 소스 디바이스(100)에 컨트롤 신호를 출력할 수 있다. 싱크 디바이스(200)의 소스 디바이스 컨트롤러(210)는 영상이 적합하게 처리되지 않는 경우 control signal을 소스 디바이스(100)의 video processing 중 문제가 되는 부분을 판단하여 해당 비디오 프로세싱이 오프되도록 알릴 수 있다. 이런 컨트롤 기능은 사용자의 요청에 의해 온/오프(on/off)될 수 있다. 싱크 디바이스(200)는 소스 디바이스(100)가 처리 가능한 혹은 처리하고 있는 video processing option을 사용자에게 출력하고, 이를 컨트롤 할 수 있는 메뉴 또는 인터페이스(UI)를 사용자에게 제공할 수 있다.
싱크 디바이스(200)는 디스플레이 기기의 밝기 및 색상을 조정할 수 있는 기능이 있는 경우, 싱크 디바이스(200)의 메타데이터 프로세서(220)의 정보를 분석한 후 패널 컨트롤러(230)를 통해 디스플레이 기기를 조정하여 컨텐츠에 적합한 재생 환경을 제공할 수 있다.
다음으로, 싱크 디바이스(200)가 기존의 UHD 싱크 디바이스인 경우에 대한 제 2 실시예를 개시한다. 제 1실시예와 동일한 부분에 대한 예는 제 1 실시예에 따른다.
싱크 디바이스(200)는 기존의 UHD 싱크 디바이스에 대한 메타데이터를 소스 디바이스(100)로 전송한다. 기존의 UHD 싱크 디바이스에 대한 메타데이터는 디스플레이 컬러 개멋 정보(혹은 RGBW에 해당하는 color primary정보)와 디스플레이 밝기 관련 정보(예를 들면 peak luminance 정보, black luminance 정보)를 포함할 수 있다. 소스 디바이스(100)의 메타데이터 프로세서(150)는 기존의 UHD 싱크 디바이스에 대한 메타데이터를 수신하여 처리할 수 있다.
소스 디바이스(100)의 옵션 컨트롤러(160)는 메타데이터 프로세서(150)에서 획득한 디스플레이 관련 정보를 바탕으로 디코딩된 UHD video에 대해 후처리 과정을 거칠지 여부에 대해 판단하여 컨트롤 신호를 출력한다.
만약 디스플레이의 성능이 비디오에서 표현하고자 하는 화질 (색상 및 밝기)에 못 미치는 경우 비디오에 적절한 처리를 거쳐 디스플레이에서 표현 가능한 색상 및 밝기로 변화시킬 수 있다. 예를 들어 소스 디바이스(100)의 컬러 개멋 매핑부(120) 또는 다이나믹 레인지 매핑부(130)는 UHD 비디오의 컬러 개멋 정보나 다이나믹 레인지 정보를 디스플레이 기기에 맞는 정보로 매핑할 수 있다.
소스 디바이스(100)는 비디오 데이터내의 메타 데이터, 예를 들면 WCG SEI message, HDR SEI message 등을 기반으로 이를 변환시킬 수도 있고, 소스 디바이스(100)의 자체적 기능에 따라 이를 수행할 수도 있다. 만약 비디오 데이터의 WCG 정보 또는 HDR 정보가 변경된 경우 옵션 컨트롤러(160)는 이를 비디오 옵션 정보 (video option signal)에 담아 싱크 디바이스(200)로 전송할 수 있다 비디오 옵션 정보는 도 17 내지 도 20의 예에 따를 수 있다.
싱크 디바이스(200)의 디스플레이의 색상 및 밝기 표현 범위가 비디오의 색상 및 밝기 범위를 지원할 수 있는 경우 소스 디바이스(100)는 추가적인 비디오 프로세싱없이 비디오를 싱크 디바이스(200)에 전송할 수 있다. 그리고, 소스 디바이스(100)의 옵션 컨트롤러(160)는 UHD video 의 metadata 또는 WCG 정보 또는 HDR 정보가 처리되지 않았음을 video option signal을 통해 싱크 디바이스(200)에 전달할 수 있다.
싱크 디바이스(200)의 디스플레이 기기는 UHD video를 재생할 수 있다. 싱크 디바이스(200)가 수신한 UHD video의 WCG 정보 또는 HDR 정보가 싱크 디바이스(200)의 디스플레이 기기에 적절하지 않다고 판단되는 경우, 소스 디바이스 컨트롤러(210)는 이에 대한 컨트롤 신호를 소스 디바이스(100)로 전달할 수 있다. 사용자는 사용자 메뉴 또는 인터페이스(UI)를 디스플레이 기기에 관련 기능을 조절할 수도 있다.
도 22은 본 발명의 일 실시예에 따른 EOTF type의 구성을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, EOTF type이 000이면 이는 reserved 비트임을 나타낼 수 있고, 001이면 이는 EOTF_type1의 변환 곡선이 사용됨을 나타낼 수 있고, 010이면 이는 EOTF_type2의 변환 곡선이 사용됨을 나타낼 수 있고, 011-111이면 이는 user private임을 나타낼 수 있다.
도 23은 본 발명의 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
본 발명은 DCI-P3와 같이 새로운 color gamut을 정의하기 위하여 다음과 같은 실시예를 제공할 수 있다.
본 발명의 일 실시예는 기존의 AVI InfoFrame (17010) 내의 Data Byte 2에 포함된 C1 및 C0 필드를 이용하여, 컬러 개멋의 확장을 위해 Data Byte 3에 포함된 EC2 내지 EC0 필드가 사용됨을 시그널링할 수 있다. (17020) 그리고, EC2 내지 EC0 필드의 reserved bit를 이용하여 DCI-P3를 시그널링할 수 있다. 즉, EC2 내지 EC0가 111이면 DCI-P3가 사용됨을 나타낼 수 있다. (17030, 17040)
본 발명의 다른 일 실시예는 기존의 AVI InfoFrame (17010) 내의 Data Byte 3에 포함된 EC2 내지 EC0 필드의 reserved bit를 이용하여 colorimetry extension이 있음을 시그널링할 수 있다. 즉, EC2 내지 EC0가 111이면 colorimetry extension이 있음을 나타낼 수 있다. (17030, 17050) 그리고, 전술한 AVI InfoFrame 내의 Data Byte 19 또는 전술한 Dynamic Range and Mastering InfoFrame 내의 Data Byte 6에 포함된 reserved bit인 S3 내지 S0 필드를 이용하여 DCI-P3가 사용됨을 시그널링할 수 있다. (17060, 17070) 이 때, 필요에 따라 3 비트 이하 또는 초과되는 비트가 사용될 수 있다. 나아가, 상술한 reserved bit인 S3 내지 S0 필드를 이용하여 임의의 color gamut이 사용됨을 시그널링할 수 있다. (17070)
도 24은 본 발명의 다른 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
본 발명의 일 실시예는 기존의 AVI InfoFrame (18010) 내의 Data Byte 2에 포함된 C1 및 C0 필드를 이용하여, 컬러 개멋의 확장을 위해 Data Byte 3에 포함된 EC2 내지 EC0 필드가 사용됨을 시그널링할 수 있다. (18020) 그리고, 기존의 AVI InfoFrame (18010) 내의 Data Byte 3에 포함된 EC2 내지 EC0 필드의 reserved bit를 이용하여 colorimetry extension이 있음을 시그널링할 수 있다. 즉, EC2 내지 EC0가 111이면 colorimetry extension이 있음을 나타낼 수 있다. (18030, 18040) 그리고, 본 발명의 일 실시예에 따른 Dynamic Range and Mastering InfoFrame 내의 reserved bit를 이용하여 DCI-P3가 사용됨을 시그널링할 수 있다. 예를 들면, 이 도면에 도시된 바와 같이, Data Byte 1에 포함된 reserved bit가 사용될 수 있다. (18060) 나아가, 상술한 reserved bit를 이용하여 임의의 color gamut이 사용됨을 시그널링할 수 있다. (18050)
도 25는 본 발명의 또 다른 일 실시예에 따른 DCI-P3 컬러 개멋을 시그널링하기 위한 방법을 나타낸 도면이다.
본 발명의 일 실시예는 DCI-P3와 같은 새로운 컬러 개멋을 시그널링하기 위하여 새로운 InfoFrame을 정의할 수 있다. 예를 들어, InfoFrame Type이 0x08인 InfoFrame을 새로 정의하고 새로운 컬러 개멋을 위한 비트를 할당하여 새로운 컬러 개멋이 사용됨을 시그널링할 수 있다.
본 발명의 다른 일 실시예는 기존의 AVI InfoFrame 포맷을 확장하는 방법으로서 이 도면에 도시된 바와 같이, Data Byte 14를 새로 정의할 수 있다. 이 때, 기존의 AVI InfoFrame 내의 Data Byte 2에 포함된 C1 및 C0 필드를 이용하여, 컬러 개멋의 확장을 위해 Data Byte 3에 포함된 EC2 내지 EC0 필드가 사용됨을 시그널링할 수 있다. 그리고, 기존의 AVI InfoFrame 내의 Data Byte 3에 포함된 EC2 내지 EC0 필드의 reserved bit를 이용하여 colorimetry extension이 있음을 시그널링할 수 있다. 즉, EC2 내지 EC0가 111이면 colorimetry extension이 있음을 나타낼 수 있다. 여기서, 본 발명의 일 실시예는 하위 호환성을 고려하는 경우, 기존의 AVI InfoFrame과 동일한 version number를 사용하면서 Data Byte 3의 EC2 내지 EC0 필드가 111이면 colorimetry extension이 있음을 인식하고 Data Byte 14를 읽어올 수 있다. 반면, 하위 호환성을 고려하지 않아도 되는 경우, 이 도면에 도시된 바와 같이, 본 발명의 다른 일 실시예는 AVI InfoFrame에 새로운 version number를 부여하고 Length of AVI InfoFrame을 14로 설정하여 해당 InfoFrame이 Data Byte 14까지 정의되어 있음을 시그널링하고, Data Byte 3의 EC2 내지 EC0 필드가 111이면 colorimetry extension이 있음을 인식하고 해당 colorimetry를 시그널링할 수 있다.
도 26은 본 발명의 일 실시예에 따라 싱크 디바이스가 처리 가능한 Transfer Function에 대한 정보를 전달하기 위한 방법을 나타낸 도면이다.
이 도면은 DisplayID의 Data Block을 이용하여 소스 디바이스가 싱크 디바이스로 전달하는 정보의 예를 나타낼 수 있고, 이 도면에서 도시된 offset 필드가 0x00 내지 0x05인 경우에 대한 상세한 설명은 전술하였다.
본 발명의 일 실시예는 이 도면에 도시된 바와 같이, offset 필드를 할당하여 싱크 디바이스의 Transfer Function 관련 정보를 추가적으로 전달할 수 있다. 이 때, 본 발명의 일 실시예는 미리 지정되어 있는 Transfer Function (BT. 1886, SMPTE ST 2084 등)을 시그널링할 수 있고, 임의의 Transfer Function에 대한 상세 정보를 시그널링할 수 있다.
이 도면에 도시된 바와 같이, offset 필드가 0x06이면 이 필드는 Transfer Function Type flag를 나타낼 수 있다. Transfer Function Type flag는 Transfer Function Type을 시그널링할 수 있다. 본 발명의 일 실시예는 각각의 Transfer Function을 flag로 지정함으로써 복수의 Transfer Function을 지원하는 경우에도 지원하는 모든 Transfer Function을 동시에 시그널링할 수 있다. 여기서, Transfer Function은 BT. 1886, SMPTE ST 2084, Traditional gamma - SDR Luminance Range, Traditional gamma - HDR Luminance Range 등을 포함할 수 있다. 여기서, Transfer Function은 EOTF (Electro Optical Transfer Function)를 포함할 수 있다.
offset 필드가 0x07 내지 0x0A이면 이 필드는 Unspecified TF details를 나타낼 수 있다. 본 발명의 일 실시예는 임의의 Transfer Function을 지원하는 경우 별도의 시그널링을 통하여 이를 표현할 수 있다. 예를 들어, 임의의 Transfer Function을 지원하는 경우, Transfer Function Type flag = 0x80 (16진수) 또는 10000000 (2진수) 으로 나타낼 수 있다. 본 발명의 일 실시예는 임의의 Transfer Function도 그 종류가 다양한 경우를 고려하여 각 Transfer Function의 타입을 시그널링하고, 각 타입에 따라 필요한 계수의 개수, bitdepth, 각 타입에 따른 최대/최소 밝기 정보 등의 보가 정보를 전달할 수 있다. 이 때, Transfer Function type은 여러 종류의 Transfer Function 중 하나를 지칭할 수 있고 복수개의 Transfer Function을 전달하는 경우, 복수개의 Transfer Function이 사용됨을 나타내는 비트 (예를 들어, Number of types 필드)를 따로 할당한 뒤, 이 필드를 이용하여 복수개의 Transfer Function의 순서를 나타낼 수 있다. Unspecified TF details가 포함하는 정보에 대한 상세한 설명은 후술한다.
offset 필드가 0x0B 또는 그 이상이면, 이 필드는 Unspecified TF coefficients를 나타낼 수 있다. 본 발명의 일 실시예는 이 필드를 이용하여 임의의 Transfer Function에 대한 계수 정보를 전달할 수 있다. 상술한 계수 정보는 Transfer Function의 변곡점, 구간, 사용되는 함수에 대한 정보 등을 포함할 수 있다.
본 발명의 일 실시예에 따르면, 싱크 디바이스가 소스 디바이스로 전달하는 정보는 EDID (Extended Display Identification Data) 정보로 명명될 수 있다. 여기서, EDID 정보는 싱크 디바이스의 성능을 나타낼 수 있다. 나아가, EDID 정보는 싱크 디바이스의 HDR 관한 성능을 나타내는 HDR 스테틱 메타데이터 (HDR Static Metadata Data Block)를 포함하고, 상기 HDR 스테틱 메타데이터는 전술한 Transfer Function Type에 대한 정보를 포함할 수 있다.
본 발명의 일 실시예에 따른 EDID 정보는 하나 이상의 데이터 블록을 포함할 수 있다.
본 발명의 일 실시예에 따른 HDR 스테틱 메타데이터는 데이터 블록에 포함되어 전송될 수 있다. 나아가, HDR 스테틱 메타데이터는 해당 데이터 블록이 HDR 스테틱 메타데이터를 포함하는 데이터 블록임을 식별하는 정보 및/또는 해당 데이터 블록의 길이를 나타내는 정보를 포함할 수 있다.
도 27은 본 발명의 일 실시예에 따라 싱크 디바이스가 처리 가능한 Transfer Function에 대한 정보를 전달하기 위한 방법에 사용되는 구체적인 필드값을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, offset이 0x06인 필드는 Transfer Function Type을 나타내기 위해 사용되고, 0x07 내지 0x0A 필드는 Unspecified TF Details를 나타내기 위해 사용되고, 0x0B 내지 그 이상의 필드는 Unspecified TF coefficients를 나타내기 위해 사용될 수 있다. 여기서, Unspecified TF Details는 임의의 Transfer Function을 싱크 디바이스가 지원하는 경우, 임의의 Transfer Function에 대한 부가 정보를 나타내고, 임의의 Transfer Function의 종료 (Type of Unspecified Transfer Function), 임의의 Transfer Function에 사용된 계수의 개수 (Number of coefficients in Unspecified Transfer Function), 임의의 Transfer Function을 복수의 Transfer Function이 구성하는 경우 각 Transfer Function의 타입 개수 (Number of types), bitdepth, 싱크 디바이스의 최소 밝기 정보 (Lowest Brightness level of Sink device) 및/또는 싱크 디바이스의 최대 밝기 정보 (Highest Brightness level of Sink device)를 포함할 수 있다.
offset 필드가 0x06인 경우, value 값의 상위 1비트는 싱크 디바이스가 Unspecified Transfer Function을 처리 가능함을 나타낼 수 있고, 그 다음 1 비트는 BT. 1886에 따른 EOTF를 처리 가능함을 나타낼 수 있고, 그 다음 1 비트는 SMPTE ST 2084에 따른 EOTF를 처리 가능함을 나타낼 수 있다.
offset 필드가 0x07인 경우, value 값의 상위 4 비트는 Type of Unspecified Transfer Function을 나타내기 위하여 사용될 수 있고, 하위 4 비트는 Number of coefficients in Unspecified Transfer Function을 나타내기 위하여 사용될 수 있다.
offset 필드가 0x08인 경우, value 값의 상위 2 비트는 Number of types를 나타내기 위하여 사용될 수 있고, 그 다음 2 비트는 bitdepth를 나타내기 위하여 사용될 수 있다.
offset 필드가 0x09인 경우, value 값은 싱크 디바이스의 최소 밝기 정보 (Lowest Brightness level of Sink device)를 나타낼 수 있다.
offset 필드가 0x0A인 경우, value 값의 상위 1 비트는 싱크 디바이스의 최소 밝기 정보 (Lowest Brightness level of Sink device)를 LSB로 나타낼 수 있고, 나머지 7 비트는 싱크 디바이스의 최대 밝기 정보 (Highest Brightness level of Sink device)를 나타낼 수 있다.
offset 필드가 0x0B 내지 그 이상인 경우, value 값은 임의의 Transfer Function에 사용되는 계수 정보를 나타낼 수 있다.
도 28은 본 발명의 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 컨테이너 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, WCG (wide color gamut) 관점에서 넓은 범위의 디스플레이 성능을 지원하기 위하여 추가적인 컬러리메트리 (colorimetry)에 대한 시그널링이 필요하다. 본 발명의 일 실시예에 따르면, DCI-P3 색 공간이 시그널링될 수 있다.
본 발명의 일 실시예에 따르면, 방송 시스템은 서로 다른 두 가지 컬러리메트리를 시그널링할 수 있다. 방송 시스템은 컨테이너 컬러 개멋 (container color gamut) 및 콘텐트 컬러 개멋 (content color gamut)을 시그널링할 수 있다.
본 발명의 일 실시예에 따르면, 컨테이너 컬러 개멋은 콘텐츠를 전송, 인코딩 및/또는 분배 (distribution)하는 과정에서 사용되는 컬러 개멋을 나타낸다. 즉, 전송, 인코딩 및/또는 분배 시스템의 컬러 개멋을 나타낸다. 컨테이너 컬러 개멋은 코딩된 값들의 이론적인 컬러 바운더리 (color boundary)를 나타낸다. 예를 들어, BT.2020 컬러 개멋이 콘텐츠의 전송, 인코딩 및/또는 분배 과정에서 사용된다면, BT.2020 컬러 개멋이 컨테이너 컬러 개멋에 해당한다.
본 발명의 일 실시예에 따르면, 콘텐트 컬러 개멋은 실제 콘텐츠의 컬러 개멋을 나타낸다. 즉, 콘텐트 컬러 개멋은 콘텐츠를 이미지 처리하는 이미징 시스템 (imaging system) 및/또는 콘텐츠를 마스터링하는 마스터링 환경 (mastering environment)에서 사용되는 컬러 개멋을 나타낸다. 콘텐트 컬러 개멋은 마스터링된 콘텐트의 실제 컬러 바운더리를 나타낸다. 예를 들어, DCI-P3 컬러 개멋이 이미징 시스템 및/또는 마스터링 환경에서 사용된다면, DCI-P3 컬러 개멋이 콘텐트 컬러 개멋에 해당한다.
본 발명의 일 실시예에 따르면, DCI-P3로 마스터링된 콘텐트가 BT.2020에 따른 컨테이너 포맷에 의해 전송될 수 있고, BT.709로 마스터링된 콘텐트가 BT.2020에 따른 컨테이너 포맷에 의해 전송될 수 있다.
본 발명의 일 실시예에 따르면, 콘텐트 컬러 개멋은 싱크 디바이스가 어떤 컬러 매핑 프로세스를 사용할 지를 결정하는데 사용될 수 있다. 콘텐트 컬러 개멋은 컨테이너 컬러 개멋이 싱크 디바이스의 디스플레이 컬러 개멋과 일치하지 않는 경우 유용하게 사용될 수 있다. 예를 들어, 컨테이너 컬러 개멋이 디스플레이의 컬러 개멋과 일치하는 경우, 컬러 개멋을 변환하지 않고 콘텐츠를 바로 디스플레이할 수 있지만, 컨테이너 컬러 개멋이 디스플레이의 컬러 개멋과 일치 하지 않으면, 컬러 개멋의 변환이 필요하고 컬러 개멋을 적절히 변환하기 위하여 콘텐트 컬러 개멋이 사용될 수 있다. 방송 시스템은 콘텐트 컬러 개멋을 시그널링함으로써 더 다양한 색감을 제공할 수 있고 디스플레이되는 콘텐트의 질을 향상시킬 수 있다.
본 발명의 일 실시예에 따라, DCI-P3 콘텐트가 BT.2020 컨테이너 내에 인코딩되고 DCI-P3 디스플레이에서 재생되는 경우, 싱크 디바이스는 일반적으로 콘텐트의 컬러가 디스플레이의 컬러 바운더리 내에서 표현될 수 있도록 콘텐트의 컬러를 조정한다. 이러한 조정의 결과, 개멋이 수축되고 개멋의 수축에 의해 콘텐트의 컬러 왜곡이 발생한다. 하지만, 본 발명의 일 실시예에 따라, 콘텐트 컬러 개멋에 대한 정보가 제공되는 경우, DCI-P3 디스플레이는 개멋의 수축 (컬러 개멋 클리핑)에 의한 컬러 왜곡 없이 (또는 최소한의 컬러 왜곡으로) 콘텐트를 디스플레이할 수 있다. 이 실시예에 따르면, 콘텐트 컬러 개멋이 디스플레이 컬러 개멋과 일치하기 때문에, 최초 제작자의 의도가 유지될 수 있다. 나아가, 시청자는 최초 의도된 컬러감을 갖는 콘텐트를 즐길 수 있다.
본 발명의 일 실시예에 따르면, 컨테이너 컬러 개멋은 AVI (Auxiliary Video Informaion) InfoFrame 데이터 블록 (data block) 내의 colorimetry 필드 및/또는 extended colorimetry 필드에 의해 시그널링될 수 있다. 본 발명의 일 실시예에 따르면, DCI-P3는 상기 필드들 내의 reserved 공간에 정의될 수 있다. 예를 들어, colorimetry 필드의 값 "11" 및 extended colorimetry 필드의 값 "111"은 컨테이너 컬러 개멋에 대한 정보가 AVI InfoFrame 내에서 시그널링됨을 나타내고, 컨테이너 컬러 개멋에 대한 정보는 container color gamut extenstion 필드를 통해 시그널링된다. 하지만, 컨테이너 컬러 개멋에 대한 정보를 시그널링하기 위하여 extended colorimetry 필드의 값 "111"을 사용하면, 추후 추가될 컬러리메트리를 위한 남은 공간이 없게 된다.
본 발명의 일 실시예에 따르면, 방송 시스템은 기존의 컬러리메트리 시그널링을 확장하여 컨테이너 컬러 개멋을 시그널링할 수 있다. 구체적으로, 방송 시스템은 AVI InfoFrame 및/또는 Dynamic Range and Mastering (DRM) InfoFrame 내에 부가적인 확장 필드를 정의하여 컨테이너 컬러 개멋을 시그널링할 수 있다. 현재 컬러리메트리 시그널링의 reserved 공간은 부가적인 컬러리메트리 확장의 이용가능성을 알리기 위해 사용될 수 있다. 방송 시스템은 상술한 바와 같이 확장 필드를 이용함으로써 기존 컬러리메트리의 시그널링 과정을 변경하지 않고 컨테이너 컬러 개멋을 시그널링할 수 있다.
이 도면은 본 발명의 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 컨테이너 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
이 도면을 참조하면, 본 발명의 일 실시예에 따른 AVI InfoFrame은 Y 필드 (Data Byte 1의 Y2, Y1, Y0), colorimetry 필드 (Data Byte 2의 C1, C0), extended colorimetry 필드 (Data Byte 3의 EC2, EC1, EC0) 및/또는 container color gamut extension 필드 (Data Byte 14의 CGE2, CGE1, CGE0)를 포함한다.
본 발명의 일 실시예에 따르면, colorimetry 필드의 값 "11"은 extended colorimetry 필드가 유효한 값을 가짐을 나타내고, extended colorimetry 필드의 값 "111"은 container color gamut extension 필드가 유효한 값을 가짐을 나타낸다. 따라서, colorimetry 필드의 값이 "11"을 갖고 extended colorimetry 필드의 값이 "111"을 갖는 경우, container color gamut extension 필드는 유효한 값을 갖게된다. 본 발명의 일 실시예에 따르면, container color gamut extension 필드의 값 "000"은 컨테이너 컬러 개멋이 DCI-P3임을 나타내고, 나머지 값들은 추후 사용될 컬러리메트리를 나타낼 수 있다.
본 발명의 일 실시예에 따르면, Y 필드는 콘텐츠의 컬러 컴포넌트 샘플 포맷 (color component sample format) 및 크로마 샘플링 포맷 (chroma sampling format)을 나타낸다. colorimetry 필드는 extended colorimetry 필드와 함께 사용되어 콘텐츠의 컬러리메트리를 나타낸다. 나아가, Y 필드, colorimetry 필드 및 extended colorimetry 필드의 조합에 의하여 콘텐츠의 컬러리메트리가 시그널링될 수 있다.
본 발명의 일 실시예에 따르면, AVI InfoFrame에 포함된 필드들을 이용하여 콘텐츠의 컬러 개멋 및 컨테이너 컬러 개멋을 모두 시그널링할 수 있다.
도 29는 본 발명의 일 실시예에 따라 싱크 디바이스로부터 소스 디바이스로 싱크 디바이스의 디스플레이 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, 방송 시스템은 EDID의 컬러리메트리 데이터 블록 (colorimetry data block) 내의 resesrved bit를 이용하여 DCI-P3 컬러메트리를 시그널링할 수 있다. 방송 시스템은 기존 EDID 내의 다른 컬러리메트리 시그널링의 변경 없이 DCI-P3 컬러메트리를 시그널링할 수 있다.
본 발명의 일 실시예에 따르면, 컬러리메트리 데이터 블록은 EDID 중에 하나로서, Tag Code 필드 (Byte 1, bits 5-7), Length 필드 (Byte 1, bits 0-4), Extended Tag Code 필드 (Byte 2), Colorimetry flag 필드 (Byte 3) 및/또는 reserved 필드 (Byte 4, bits 0-3, MD0, MD1, MD2, MD3)를 포함한다. Tag Code 필드 및 Extended Tag Code 필드 는 이 데이터 블록이 디스플레이의 컬러리메트리를 포함하는 컬러리메트리 데이터 블록임을 식별한다. Length 필드는 이 데이터 블록의 길이를 나타낸다. Colorimetry flag 필드는 디스플레이의 컬러리메트리를 나타낸다. 즉, Colorimetry flag 필드의 값 1은 해당 컬러리메트리로 인코딩된 콘텐츠를 싱크 디바이스가 디스플레이할 수 있음을 나타낸다. reserved 필드는 추후 개멋 관련된 메타데이터를 나타내기 위해 사용될 수 있다.
본 발명의 일 실시예에 따르면, 방송 시스템은 reserved 필드 중 하나인 MD0을 이용하여 디스플레이 컬러 개멋이 SMPTE 431-2에 정의된 DCI-P3 컬러 개멋임을 시그널링할 수 있다. 이 실시예에 따르면, MD0 비트의 값 1은 싱크 디바이스의 디스플레이가 DCI-P3로 인코딩된 콘텐츠를 디스플레이할 수 있음을 나타내고, 0은 싱크 디바이스의 디스플레이가 DCI-P3로 인코딩된 콘텐츠를 디스플레이할 수 없음을 나타낸다.
도 30은 본 발명의 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 콘텐트 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, 소스 디바이스는 AVI InfoFrame 및/또는 DRM InfoFrame 내에 새로운 콘텐트 컬러 개멋 필드를 정의함으로써 콘텐트 컬러 개멋에 대한 정보를 싱크 디바이스에게 제공할 수 있다.
본 발명의 일 실시예에 따르면, 싱크 디바이스가 상술한 실시예에 따른 콘텐트 컬러 개멋에 대한 시그널링을 이해하지 못하는 경우, AVI InfoFrame에 존재하는 컬러리메트리 시그널링이 사용될 수 있다.
본 발명의 일 실시예에 따르면, 싱크 디바이스는 콘텐트 컬러 개멋에 대한 정보를 요청하는 플래그를 소스 디바이스에게 전송할 수 있다.
이 도면을 참조하면, 본 발명의 일 실시예에 따른 DRM InfoFrame은 content color gamut 필드 (CCG2, CCG1, CCG0)를 포함한다. content color gamut 필드의 값 "000"은 이 필드가 사용되지 않음을 나타낸다. 즉, content color gamut 필드의 값 "000"은 콘텐트 컬러 개멋이 컨테이너 컬러 개멋과 동일함을 나타낼 수 있고, 또는 콘텐트 컬러 개멋에 대한 정보가 없음을 나타낼 수 있다. content color gamut 필드의 값 "001"은 콘텐트 컬러 개멋이 DCI-P3임을 나타낸다. content color gamut 필드의 다른 값들은 콘텐트 컬러 개멋의 다른 컬러리메트리를 나타낼 수 있다.
도 31은 본 발명의 일 실시예에 따라 싱크 디바이스로부터 소스 디바이스로 콘텐트 컬러 개멋에 대한 정보를 시그널링하는 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, 방송 시스템은 EDID의 HDR 스테틱 메타데이터 데이터 블록 (HDR static metadata data block) 내의 resesrved bit를 이용하여 콘텐트 컬러 개멋 리퀘스트를 시그널링할 수 있다. 방송 시스템은 기존 EDID 내의 다른 시그널링의 변경 없이 콘텐트 컬러 개멋 리퀘스트를 시그널링할 수 있다.
본 발명의 일 실시예에 따르면, HDR 스테틱 메타데이터 데이터 블록은 EDID 중에 하나로서, Tag Code 필드 (Byte 1, bits 5-7), Length 필드 (Byte 1, bits 0-4), Extended Tag Code 필드 (Byte 2) 및/또는 content color gamut request flag 필드 (Byte 3, bit 7)를 포함한다. Tag Code 필드 및 Extended Tag Code 필드는 이 데이터 블록이 콘텐트 컬러 개멋 리퀘스트 플래그를 포함하는 HDR 스테틱 메타데이터 데이터 블록임을 식별한다. Length 필드는 이 데이터 블록의 길이를 나타낸다. content color gamut request flag 필드 (CCG0)는 싱크 디바이스가 소스 디바이스에게 콘텐트 컬러 개멋에 대한 정보를 요청하는지 여부를 나타낸다. content color gamut request flag 필드의 값 "0"은 콘텐트 컬러 개멋에 대한 시그널링이 필요없음을 나타내고, content color gamut request flag 필드의 값 "1"은 싱크 디바이스가 콘텐트 컬러 개멋에 대한 정보가 필요함을 나타낸다. 예를 들어, 소스 디바이스는 싱크 디바이스로부터 HDR 스테틱 메타데이터 데이터 블록을 수신하고 content color gamut request flag 필드를 확인한 후, 이 필드의 값이 "1"이면 싱크 디바이스에게 콘텐트 컬러 개멋에 대한 정보를 전송할 수 있다.
도 32는 본 발명의 다른 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 콘텐트 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, 소스 디바이스는 DRM InfoFrame 내의 스테틱 메타데이터 디스크립터 (Static_Metadata_Descriptor) 내에 새로운 콘텐트 컬러 개멋 필드를 정의함으로써 콘텐트 컬러 개멋에 대한 정보를 싱크 디바이스에게 제공할 수 있다.
이 도면을 참조하면, 본 발명의 일 실시예에 따른 DRM InfoFrame은 스테틱 메타데이터 디스크립터 식별자 필드 (Static_Metadata_Descriptor ID) 및/또는 스테틱 메타데이터 디스크립터 (Static_Metadata_Descriptor)를 포함한다. 스테틱 메타데이터 디스크립터는 DRM InfoFrame의 Data Byte 3 내지 Data Byte n에 기술된다. 스테틱 메타데이터 디스크립터 식별자 필드는 DRM InfoFrame에 포함되는 스테틱 메타데이터 디스크립터를 식별한다. 스테틱 메타데이터 디스크립터 식별자 필드의 값 0은 스테틱 메타데이터 디스크립터가 Static Metadata Type 1에 해당하는 스테틱 메타데이터 디스크립터임을 나타낸다. 스테틱 메타데이터 디스크립터 식별자 필드의 값 1-7은 reserved 값을 나타낸다.
Static Metadata Type 1에 해당하는 스테틱 메타데이터 디스크립터은 display_primaries 필드, white_point 필드, max_display_mastering_luminance 필드, min_display_mastering_luminance 필드, Maximum Content Light Level 필드, Maximum Frame-average Light Level 필드 및/또는 content color gamut 필드 (CCG2, CCG1, CCG0)를 포함할 수 있다. content color gamut 필드의 값 "000"은 이 필드가 사용되지 않음을 나타낸다. 즉, content color gamut 필드의 값 "000"은 콘텐트 컬러 개멋이 컨테이너 컬러 개멋과 동일함을 나타낼 수 있고, 또는 콘텐트 컬러 개멋에 대한 정보가 없음을 나타낼 수 있다. content color gamut 필드의 값 "001"은 콘텐트 컬러 개멋이 DCI-P3임을 나타낸다. content color gamut 필드의 다른 값들은 콘텐트 컬러 개멋의 다른 컬러리메트리를 나타낼 수 있다. display_primaries 필드 및 white_point 필드는 마스터링 디스플레이의 컬러리메트리 값들을 나타낸다. max_display_mastering_luminance 필드 및 min_display_mastering_luminance 필드는 마스터링 디스플레이의 최대/최소 밝기 값을 나타낸다. Maximum Content Light Level 필드는 콘텐트의 최대 밝기 값을 나타낸다. Maximum Frame-average Light Level 필드는 최대 프레임 평균 밝기 값을 나타낸다.
도 33은 본 발명의 다른 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 콘텐트 컬러 개멋을 시그널링하는 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, 방송 시스템은 새로운 스테틱 메타데이터 타입 (Static Metadata Type)을 정의하고 새로 정의된 스테틱 메타데이터 타입을 갖는 스테틱 메타데이터 디스크립터 내에 콘텐트 컬러 개멋 필드 및/또는 콘텐트의 실제 컬러리메트리 값들을 정의할 수 있다.
이 도면을 참조하면, 본 발명의 일 실시예에 따른 DRM InfoFrame은 스테틱 메타데이터 디스크립터 식별자 필드 (Static_Metadata_Descriptor ID) 및/또는 스테틱 메타데이터 디스크립터 (Static_Metadata_Descriptor)를 포함한다. 스테틱 메타데이터 디스크립터는 DRM InfoFrame의 Data Byte 3 내지 Data Byte n에 기술된다. 스테틱 메타데이터 디스크립터 식별자 필드는 DRM InfoFrame에 포함되는 스테틱 메타데이터 디스크립터를 식별한다. 스테틱 메타데이터 디스크립터 식별자 필드의 값 0은 스테틱 메타데이터 디스크립터가 Static Metadata Type 1에 해당하는 스테틱 메타데이터 디스크립터임을 나타낸다. 스테틱 메타데이터 디스크립터 식별자 필드의 값 1은 스테틱 메타데이터 디스크립터가 Static Metadata Type 2에 해당하는 스테틱 메타데이터 디스크립터임을 나타낸다. 본 발명의 일 실시예에 따르면, Static Metadata Type 2에 해당하는 스테틱 메타데이터 디스크립터는 콘텐트 컬러 개멋 및/또는 콘텐트의 실제 컬러리메트리 값들을 포함한다. 스테틱 메타데이터 디스크립터 식별자 필드의 값 2-7은 reserved 값을 나타낸다.
Static Metadata Type 2에 해당하는 스테틱 메타데이터 디스크립터은 content color gamut 필드 (CCG2, CCG1, CCG0) 및/또는 콘텐트의 컬러리메트리 값 (Red-x, Red-y, Green-x, Green-y, Blue-x, Blue-y, White-x, White-y)을 포함할 수 있다. content color gamut 필드의 값 "000"은 이 필드가 사용되지 않음을 나타낸다. 즉, content color gamut 필드의 값 "000"은 콘텐트 컬러 개멋이 컨테이너 컬러 개멋과 동일함을 나타낼 수 있고, 또는 콘텐트 컬러 개멋에 대한 정보가 없음을 나타낼 수 있다. content color gamut 필드의 값 "001"은 콘텐트 컬러 개멋이 DCI-P3임을 나타낸다. content color gamut 필드의 다른 값들은 콘텐트 컬러 개멋의 다른 컬러리메트리를 나타낼 수 있다. 상술한 콘텐트의 컬러리메트리 값은 콘텐트가 표현된 컬러 개멋 상 Red, Green, Blue 및/또는 White 색상의 위치를 나타낸다.
도 34는 본 발명의 일 실시예에 따라 소스 디바이스로부터 싱크 디바이스로 콘텐트 컬러 개멋에 대한 정보를 시그널링하는 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따르면, 방송 시스템은 DRM InfoFrame의 Static Metadata Type 1에 해당하는 스테틱 메타데이터 디스크립터 내에 포함된 display_primaries 필드 및 white_point 필드를 이용하여 콘텐트 컬러 개멋을 시그널링할 수 있다.
본 발명의 일 실시예에 따른 DRM InfoFrame은 content color gamut flag 필드 (CCG_flag), 스테틱 메타데이터 디스크립터 식별자 필드 (Static_Metadata_Descriptor ID, SMD_ID) 및/또는 스테틱 메타데이터 디스크립터 (Static_Metadata_Descriptor)를 포함한다. content color gamut flag 필드는 Static Metadata Type 1에 해당하는 스테틱 메타데이터 디스크립터 내에 포함된 display_primaries 필드 및 white_point 필드가 콘텐트의 컬러 개멋을 나타내는 컬러리메트리 정보로 사용되는지 여부를 나타낸다. 스테틱 메타데이터 디스크립터 식별자 필드의 값이 0이고, content color gamut flag 필드의 값이 1인 경우, 콘텐트 컬러 개멋은 DRM InfoFrame의 Data Byte 3 내지 18에 기술된 display_primaries 필드 및 white_point 필드에 의하여 시그널링될 수 있다. 즉, content color gamut flag 필드의 값 1은 display_primaries 필드 및 white_point 필드가 콘텐트의 컬러리메트리 정보를 나타냄을 나타낸다.
본 발명의 다른 일 실시예에 따르면, DRM InfoFrame 내의 display_primaries 필드 및 white_point 필드가 콘텐트 컬러 개멋을 기술하기 위해 사용됨을 소스 디바이스 및 싱크 디바이스 모두가 알고 있는 경우, 방송 시스템은 content color gamut flag 필드없이 display_primaries 필드 및 white_point 필드를 이용하여 콘텐트 컬러 개멋을 시그널링할 수 있다.
도 35는 본 발명의 일 실시예에 따른 소스 디바이스의 비디오 데이터 처리 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따른 소스 디바이스의 비디오 데이터 처리 방법은 인터페이스를 통해 콘텐트의 비디오 데이터를 싱크 디바이스로 전송하는 단계 (SL35010) 및/또는 상기 비디오 데이터에 대한 부가 정보를 포함하는 AVI 인포프레임 (Auxiliary Video Information InfoFrame)을 상기 인터페이스를 통해 상기 싱크 디바이스로 전송하는 단계 (SL35020)를 포함한다. 이 때, 상기 AVI 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 컬러리메트리 필드, 상기 컬러리메트리 필드와 함께 상기 콘텐트의 컬러 개멋을 나타내는 확장 컬러리메트리 필드 및 상기 콘텐트를 전송하는 컨테이너의 컬러 개멋을 나타내는 컨테이너 컬러 개멋 확장 필드를 포함하고, 상기 컬러리메트리 필드는 상기 확장 컬러리메트리 필드가 유효함을 나타내는 정보를 포함하고, 상기 확장 컬러리메트리 필드는 상기 컨테이너 컬러 개멋 확장 필드가 유효함을 나타내는 정보를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 상기 싱크 디바이스가 지원하는 컬러 개멋에 대한 정보를 포함하는 컬러리메트리 데이터 블록을 상기 인터페이스를 통해 상기 싱크 디바이스로부터 수신하는 단계를 더 포함하고, 상기 컬러리메트리 데이터 블록은 상기 싱크 디바이스가 DCI-P3 컬러 개멋을 지원하는지 여부를 나타내는 정보를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임 (Dynamic Range and Mastering InfoFrame)을 상기 인터페이스를 통해 싱크 디바이스로 전송하는 단계를 더 포함하고, 상기 DRM 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드를 포함하고, 상기 콘텐트 컬러 개멋 필드는 상기 콘텐트의 컬러 개멋이 상기 컨테이너의 컬러 개멋과 동일함을 나타내는 정보 및 상기 콘텐트의 컬러 개멋이 DCI-P3 컬러 개멋임을 나타내는 정보를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 상기 싱크 디바이스의 HDR (High Dynamic Range) 성능을 나타내는 HDR 스테틱 메타데이터 데이터 블록 (HDR Static Metadata Data Block)을 상기 인터페이스를 통해 상기 싱크 디바이스로부터 수신하는 단계를 더 포함하고, 상기 HDR 스테틱 메타데이터 데이터 블록은 상기 싱크 디바이스가 상기 콘텐트의 컬러 개멋에 대한 정보를 필요로하는지 여부를 나타내는 정보를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임을 상기 인터페이스를 통해 싱크 디바이스로 전송하는 단계를 더 포함하고, 상기 DRM 인포프레임은 스테틱 메타데이터 디스크립터 (Static Metadata Descriptor) 및 상기 스테틱 메타데이터 디스크립터를 식별하는 식별 정보를 포함하고, 상기 스테틱 메타데이터 디스크립터는 상기 콘텐트를 마스터링 처리하기 위해 사용되는 마스터링 디스플레이의 컬러리메트리 정보를 나타내는 디스플레이 컬러리메트리 필드 및 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드 중 적어도 하나를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임을 상기 인터페이스를 통해 싱크 디바이스로 전송하는 단계를 더 포함하고, 상기 DRM 인포프레임은 스테틱 메타데이터 디스크립터 및 상기 스테틱 메타데이터 디스크립터를 식별하는 식별 정보를 포함하고, 상기 스테틱 메타데이터 디스크립터는 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드 및 상기 콘텐트의 실제 컬러리메트리 값 중 적어도 하나를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 DRM 인포프레임은 상기 스테틱 메타데이터 디스크립터에 포함된 상기 디스플레이 컬러리메트리 필드가 상기 콘텐트의 컬러 개멋을 기술하기 위해 사용되는지 여부를 나타내는 정보를 포함한다.
도 36은 본 발명의 일 실시예에 따른 싱크 디바이스의 비디오 데이터 처리 방법을 나타낸 도면이다.
본 발명의 일 실시예에 따른 싱크 디바이스의 비디오 데이터 처리 방법인터페이스를 통해 콘텐트의 비디오 데이터를 소스 디바이스로부터 수신하는 단계 (SL36010) 및/또는 상기 비디오 데이터에 대한 부가 정보를 포함하는 AVI 인포프레임 (Auxiliary Video Information InfoFrame)을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 단계 (SL36020)를 포함한다. 이 때, 상기 AVI 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 컬러리메트리 필드, 상기 컬러리메트리 필드와 함께 상기 콘텐트의 컬러 개멋을 나타내는 확장 컬러리메트리 필드 및 상기 콘텐트를 전송하는 컨테이너의 컬러 개멋을 나타내는 컨테이너 컬러 개멋 확장 필드를 포함하고, 상기 컬러리메트리 필드는 상기 확장 컬러리메트리 필드가 유효함을 나타내는 정보를 포함하고, 상기 확장 컬러리메트리 필드는 상기 컨테이너 컬러 개멋 확장 필드가 유효함을 나타내는 정보를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 싱크 디바이스가 지원하는 컬러 개멋에 대한 정보를 포함하는 컬러리메트리 데이터 블록을 상기 인터페이스를 통해 상기 소스 디바이스로 전송하는 단계를 더 포함하고, 상기 컬러리메트리 데이터 블록은 상기 싱크 디바이스가 DCI-P3 컬러 개멋을 지원하는지 여부를 나타내는 정보를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임 (Dynamic Range and Mastering InfoFrame)을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 단계를 더 포함하고, 상기 DRM 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드를 포함하고, 상기 콘텐트 컬러 개멋 필드는 상기 콘텐트의 컬러 개멋이 상기 컨테이너의 컬러 개멋과 동일함을 나타내는 정보 및 상기 콘텐트의 컬러 개멋이 DCI-P3 컬러 개멋임을 나타내는 정보를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 싱크 디바이스의 HDR (High Dynamic Range) 성능을 나타내는 HDR 스테틱 메타데이터 데이터 블록 (HDR Static Metadata Data Block)을 상기 인터페이스를 통해 상기 소스 디바이스로 전송하는 단계를 더 포함하고, 상기 HDR 스테틱 메타데이터 데이터 블록은 상기 싱크 디바이스가 상기 콘텐트의 컬러 개멋에 대한 정보를 필요로하는지 여부를 나타내는 정보를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 단계를 더 포함하고, 상기 DRM 인포프레임은 스테틱 메타데이터 디스크립터 (Static Metadata Descriptor) 및 상기 스테틱 메타데이터 디스크립터를 식별하는 식별 정보를 포함하고, 상기 스테틱 메타데이터 디스크립터는 상기 콘텐트를 마스터링 처리하기 위해 사용되는 마스터링 디스플레이의 컬러리메트리 정보를 나타내는 디스플레이 컬러리메트리 필드 및 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드 중 적어도 하나를 포함한다.
본 발명의 다른 일 실시예에 따르면, 상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 단계를 더 포함하고, 상기 DRM 인포프레임은 스테틱 메타데이터 디스크립터 및 상기 스테틱 메타데이터 디스크립터를 식별하는 식별 정보를 포함하고, 상기 스테틱 메타데이터 디스크립터는 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드 및 상기 콘텐트의 실제 컬러리메트리 값 중 적어도 하나를 포함한다.
도 37은 본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (소스 디바이스)의 구성을 나타낸 도면이다.
본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (소스 디바이스, L37010)는 인터페이스를 통해 콘텐트의 비디오 데이터를 싱크 디바이스로 전송하는 제 1 전송부 (L37020) 및/또는 상기 비디오 데이터에 대한 부가 정보를 포함하는 AVI 인포프레임 (Auxiliary Video Information InfoFrame)을 상기 인터페이스를 통해 상기 싱크 디바이스로 전송하는 제 2 전송부 (L37030)를 포함한다. 이 때, 상기 AVI 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 컬러리메트리 필드, 상기 컬러리메트리 필드와 함께 상기 콘텐트의 컬러 개멋을 나타내는 확장 컬러리메트리 필드 및 상기 콘텐트를 전송하는 컨테이너의 컬러 개멋을 나타내는 컨테이너 컬러 개멋 확장 필드를 포함하고, 상기 컬러리메트리 필드는 상기 확장 컬러리메트리 필드가 유효함을 나타내는 정보를 포함하고, 상기 확장 컬러리메트리 필드는 상기 컨테이너 컬러 개멋 확장 필드가 유효함을 나타내는 정보를 포함한다.
도 38은 본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (싱크 디바이스)의 구성을 나타낸 도면이다.
본 발명의 일 실시예에 따른 비디오 데이터 처리 장치 (싱크 디바이스, L38010)는 인터페이스를 통해 콘텐트의 비디오 데이터를 소스 디바이스로부터 수신하는 제 1 수신부 (L38020) 및/또는 상기 비디오 데이터에 대한 부가 정보를 포함하는 AVI 인포프레임 (Auxiliary Video Information InfoFrame)을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 제 2 수신부 (L38030)를 포함한다. 이 때, 상기 AVI 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 컬러리메트리 필드, 상기 컬러리메트리 필드와 함께 상기 콘텐트의 컬러 개멋을 나타내는 확장 컬러리메트리 필드 및 상기 콘텐트를 전송하는 컨테이너의 컬러 개멋을 나타내는 컨테이너 컬러 개멋 확장 필드를 포함하고, 상기 컬러리메트리 필드는 상기 확장 컬러리메트리 필드가 유효함을 나타내는 정보를 포함하고, 상기 확장 컬러리메트리 필드는 상기 컨테이너 컬러 개멋 확장 필드가 유효함을 나타내는 정보를 포함한다.
모듈 또는 유닛은 메모리(또는 저장 유닛)에 저장된 연속된 수행과정들을 실행하는 프로세서들일 수 있다. 전술한 실시예에 기술된 각 단계들은 하드웨어/프로세서들에 의해 수행될 수 있다. 전술한 실시예에 기술된 각 모듈/블락/유닛들은 하드웨어/프로세서로서 동작할 수 있다. 또한, 본 발명이 제시하는 방법들은 코드로서 실행될 수 있다. 이 코드는 프로세서가 읽을 수 있는 저장매체에 쓰여질 수 있고, 따라서 장치(apparatus)가 제공하는 프로세서에 의해 읽혀질 수 있다.
설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시 예들을 병합하여 새로운 실시 예를 구현하도록 설계하는 것도 가능하다. 그리고, 통상의 기술자의 필요에 따라, 이전에 설명된 실시 예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.
본 발명에 따른 장치 및 방법은 상술한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상술한 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
한편, 본 발명이 제안하는 방법을 네트워크 디바이스에 구비된, 프로세서가 읽을 수 있는 기록매체에, 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.
그리고, 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양 발명의 설명은 보충적으로 적용될 수가 있다.
본 발명의 사상이나 범위를 벗어나지 않고 본 발명에서 다양한 변경 및 변형이 가능함은 당업자에게 이해된다. 따라서, 본 발명은 첨부된 청구항 및 그 동등 범위 내에서 제공되는 본 발명의 변경 및 변형을 포함하는 것으로 의도된다.
본 명세서에서 장치 및 방법 발명이 모두 언급되고, 장치 및 방법 발명 모두의 설명은 서로 보완하여 적용될 수 있다.
다양한 실시예가 본 발명을 실시하기 위한 최선의 형태에서 설명되었다.
본 발명은 일련의 방송 신호 제공 분야에서 이용된다.
본 발명의 사상이나 범위를 벗어나지 않고 본 발명에서 다양한 변경 및 변형이 가능함은 당업자에게 자명하다. 따라서, 본 발명은 첨부된 청구항 및 그 동등 범위 내에서 제공되는 본 발명의 변경 및 변형을 포함하는 것으로 의도된다.

Claims (15)

  1. 인터페이스를 통해 콘텐트의 비디오 데이터를 싱크 디바이스로 전송하는 단계; 및
    상기 비디오 데이터에 대한 부가 정보를 포함하는 AVI 인포프레임 (Auxiliary Video Information InfoFrame)을 상기 인터페이스를 통해 상기 싱크 디바이스로 전송하는 단계를 포함하는 비디오 데이터 처리 방법으로서,
    상기 AVI 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 컬러리메트리 필드, 상기 컬러리메트리 필드와 함께 상기 콘텐트의 컬러 개멋을 나타내는 확장 컬러리메트리 필드 및 상기 콘텐트를 전송하는 컨테이너의 컬러 개멋을 나타내는 컨테이너 컬러 개멋 확장 필드를 포함하고,
    상기 컬러리메트리 필드는 상기 확장 컬러리메트리 필드가 유효함을 나타내는 정보를 포함하고, 상기 확장 컬러리메트리 필드는 상기 컨테이너 컬러 개멋 확장 필드가 유효함을 나타내는 정보를 포함하는 비디오 데이터 처리 방법.
  2. 제 1 항에 있어서,
    상기 비디오 데이터 처리 방법은 상기 싱크 디바이스가 지원하는 컬러 개멋에 대한 정보를 포함하는 컬러리메트리 데이터 블록을 상기 인터페이스를 통해 상기 싱크 디바이스로부터 수신하는 단계를 더 포함하고,
    상기 컬러리메트리 데이터 블록은 상기 싱크 디바이스가 DCI-P3 컬러 개멋을 지원하는지 여부를 나타내는 정보를 포함하는 비디오 데이터 처리 방법.
  3. 제 1 항에 있어서,
    상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임 (Dynamic Range and Mastering InfoFrame)을 상기 인터페이스를 통해 싱크 디바이스로 전송하는 단계를 더 포함하고,
    상기 DRM 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드를 포함하고, 상기 콘텐트 컬러 개멋 필드는 상기 콘텐트의 컬러 개멋이 상기 컨테이너의 컬러 개멋과 동일함을 나타내는 정보 및 상기 콘텐트의 컬러 개멋이 DCI-P3 컬러 개멋임을 나타내는 정보를 포함하는 비디오 데이터 처리 방법.
  4. 제 1 항에 있어서,
    상기 비디오 데이터 처리 방법은 상기 싱크 디바이스의 HDR (High Dynamic Range) 성능을 나타내는 HDR 스테틱 메타데이터 데이터 블록 (HDR Static Metadata Data Block)을 상기 인터페이스를 통해 상기 싱크 디바이스로부터 수신하는 단계를 더 포함하고,
    상기 HDR 스테틱 메타데이터 데이터 블록은 상기 싱크 디바이스가 상기 콘텐트의 컬러 개멋에 대한 정보를 필요로하는지 여부를 나타내는 정보를 포함하는 비디오 데이터 처리 방법.
  5. 제 1 항에 있어서,
    상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임을 상기 인터페이스를 통해 싱크 디바이스로 전송하는 단계를 더 포함하고,
    상기 DRM 인포프레임은 스테틱 메타데이터 디스크립터 (Static Metadata Descriptor) 및 상기 스테틱 메타데이터 디스크립터를 식별하는 식별 정보를 포함하고,
    상기 스테틱 메타데이터 디스크립터는 상기 콘텐트를 마스터링 처리하기 위해 사용되는 마스터링 디스플레이의 컬러리메트리 정보를 나타내는 디스플레이 컬러리메트리 필드 및 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드 중 적어도 하나를 포함하는 비디오 데이터 처리 방법.
  6. 제 1 항에 있어서,
    상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임을 상기 인터페이스를 통해 싱크 디바이스로 전송하는 단계를 더 포함하고,
    상기 DRM 인포프레임은 스테틱 메타데이터 디스크립터 및 상기 스테틱 메타데이터 디스크립터를 식별하는 식별 정보를 포함하고,
    상기 스테틱 메타데이터 디스크립터는 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드 및 상기 콘텐트의 실제 컬러리메트리 값 중 적어도 하나를 포함하는 비디오 데이터 처리 방법.
  7. 제 5 항에 있어서,
    상기 DRM 인포프레임은 상기 스테틱 메타데이터 디스크립터에 포함된 상기 디스플레이 컬러리메트리 필드가 상기 콘텐트의 컬러 개멋을 기술하기 위해 사용되는지 여부를 나타내는 정보를 포함하는 비디오 데이터 처리 방법.
  8. 인터페이스를 통해 콘텐트의 비디오 데이터를 소스 디바이스로부터 수신하는 단계; 및
    상기 비디오 데이터에 대한 부가 정보를 포함하는 AVI 인포프레임 (Auxiliary Video Information InfoFrame)을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 단계를 포함하는 비디오 데이터 처리 방법으로서,
    상기 AVI 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 컬러리메트리 필드, 상기 컬러리메트리 필드와 함께 상기 콘텐트의 컬러 개멋을 나타내는 확장 컬러리메트리 필드 및 상기 콘텐트를 전송하는 컨테이너의 컬러 개멋을 나타내는 컨테이너 컬러 개멋 확장 필드를 포함하고,
    상기 컬러리메트리 필드는 상기 확장 컬러리메트리 필드가 유효함을 나타내는 정보를 포함하고, 상기 확장 컬러리메트리 필드는 상기 컨테이너 컬러 개멋 확장 필드가 유효함을 나타내는 정보를 포함하는 비디오 데이터 처리 방법.
  9. 제 8 항에 있어서,
    상기 비디오 데이터 처리 방법은 싱크 디바이스가 지원하는 컬러 개멋에 대한 정보를 포함하는 컬러리메트리 데이터 블록을 상기 인터페이스를 통해 상기 소스 디바이스로 전송하는 단계를 더 포함하고,
    상기 컬러리메트리 데이터 블록은 상기 싱크 디바이스가 DCI-P3 컬러 개멋을 지원하는지 여부를 나타내는 정보를 포함하는 비디오 데이터 처리 방법.
  10. 제 8 항에 있어서,
    상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임 (Dynamic Range and Mastering InfoFrame)을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 단계를 더 포함하고,
    상기 DRM 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드를 포함하고, 상기 콘텐트 컬러 개멋 필드는 상기 콘텐트의 컬러 개멋이 상기 컨테이너의 컬러 개멋과 동일함을 나타내는 정보 및 상기 콘텐트의 컬러 개멋이 DCI-P3 컬러 개멋임을 나타내는 정보를 포함하는 비디오 데이터 처리 방법.
  11. 제 8 항에 있어서,
    상기 비디오 데이터 처리 방법은 싱크 디바이스의 HDR (High Dynamic Range) 성능을 나타내는 HDR 스테틱 메타데이터 데이터 블록 (HDR Static Metadata Data Block)을 상기 인터페이스를 통해 상기 소스 디바이스로 전송하는 단계를 더 포함하고,
    상기 HDR 스테틱 메타데이터 데이터 블록은 상기 싱크 디바이스가 상기 콘텐트의 컬러 개멋에 대한 정보를 필요로하는지 여부를 나타내는 정보를 포함하는 비디오 데이터 처리 방법.
  12. 제 8 항에 있어서,
    상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 단계를 더 포함하고,
    상기 DRM 인포프레임은 스테틱 메타데이터 디스크립터 (Static Metadata Descriptor) 및 상기 스테틱 메타데이터 디스크립터를 식별하는 식별 정보를 포함하고,
    상기 스테틱 메타데이터 디스크립터는 상기 콘텐트를 마스터링 처리하기 위해 사용되는 마스터링 디스플레이의 컬러리메트리 정보를 나타내는 디스플레이 컬러리메트리 필드 및 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드 중 적어도 하나를 포함하는 비디오 데이터 처리 방법.
  13. 제 8 항에 있어서,
    상기 비디오 데이터 처리 방법은 상기 비디오 데이터의 다이나믹 레인지에 대한 정보를 포함하는 DRM 인포프레임을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 단계를 더 포함하고,
    상기 DRM 인포프레임은 스테틱 메타데이터 디스크립터 및 상기 스테틱 메타데이터 디스크립터를 식별하는 식별 정보를 포함하고,
    상기 스테틱 메타데이터 디스크립터는 상기 콘텐트의 컬러 개멋을 나타내는 콘텐트 컬러 개멋 필드 및 상기 콘텐트의 실제 컬러리메트리 값 중 적어도 하나를 포함하는 비디오 데이터 처리 방법.
  14. 인터페이스를 통해 콘텐트의 비디오 데이터를 싱크 디바이스로 전송하는 제 1 전송부; 및
    상기 비디오 데이터에 대한 부가 정보를 포함하는 AVI 인포프레임 (Auxiliary Video Information InfoFrame)을 상기 인터페이스를 통해 상기 싱크 디바이스로 전송하는 제 2 전송부를 포함하는 비디오 데이터 처리 장치로서,
    상기 AVI 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 컬러리메트리 필드, 상기 컬러리메트리 필드와 함께 상기 콘텐트의 컬러 개멋을 나타내는 확장 컬러리메트리 필드 및 상기 콘텐트를 전송하는 컨테이너의 컬러 개멋을 나타내는 컨테이너 컬러 개멋 확장 필드를 포함하고,
    상기 컬러리메트리 필드는 상기 확장 컬러리메트리 필드가 유효함을 나타내는 정보를 포함하고, 상기 확장 컬러리메트리 필드는 상기 컨테이너 컬러 개멋 확장 필드가 유효함을 나타내는 정보를 포함하는 비디오 데이터 처리 장치.
  15. 인터페이스를 통해 콘텐트의 비디오 데이터를 소스 디바이스로부터 수신하는 제 1 수신부; 및
    상기 비디오 데이터에 대한 부가 정보를 포함하는 AVI 인포프레임 (Auxiliary Video Information InfoFrame)을 상기 인터페이스를 통해 상기 소스 디바이스로부터 수신하는 제 2 수신부를 포함하는 비디오 데이터 처리 장치로서,
    상기 AVI 인포프레임은 상기 콘텐트의 컬러 개멋을 나타내는 컬러리메트리 필드, 상기 컬러리메트리 필드와 함께 상기 콘텐트의 컬러 개멋을 나타내는 확장 컬러리메트리 필드 및 상기 콘텐트를 전송하는 컨테이너의 컬러 개멋을 나타내는 컨테이너 컬러 개멋 확장 필드를 포함하고,
    상기 컬러리메트리 필드는 상기 확장 컬러리메트리 필드가 유효함을 나타내는 정보를 포함하고, 상기 확장 컬러리메트리 필드는 상기 컨테이너 컬러 개멋 확장 필드가 유효함을 나타내는 정보를 포함하는 비디오 데이터 처리 장치.
PCT/KR2016/011202 2015-10-06 2016-10-06 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법 WO2017061796A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/759,798 US10587852B2 (en) 2015-10-06 2016-10-06 Broadcast signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201562238097P 2015-10-06 2015-10-06
US62/238,097 2015-10-06
US201562238721P 2015-10-08 2015-10-08
US62/238,721 2015-10-08

Publications (1)

Publication Number Publication Date
WO2017061796A1 true WO2017061796A1 (ko) 2017-04-13

Family

ID=58487982

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/011202 WO2017061796A1 (ko) 2015-10-06 2016-10-06 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Country Status (2)

Country Link
US (1) US10587852B2 (ko)
WO (1) WO2017061796A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019094346A1 (en) * 2017-11-08 2019-05-16 Interdigital Vc Holdings, Inc. Processing an image

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017061796A1 (ko) * 2015-10-06 2017-04-13 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
IL305702B1 (en) * 2016-10-05 2024-03-01 Dolby Laboratories Licensing Corp Messaging information volume source color
CN109587546B (zh) * 2018-11-27 2020-09-22 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备和计算机可读介质
US11012723B2 (en) * 2019-01-02 2021-05-18 Tencent America LLC Service descriptions for multimedia streaming
CN113439445B (zh) * 2019-02-20 2023-03-28 华为技术有限公司 用于启用超高清联盟指定参考模式（uhda-srm）的技术
WO2020226674A1 (en) * 2019-05-06 2020-11-12 Huawei Technologies Co. Ltd. Display of video content on a sink device using advanced features
KR20220068008A (ko) * 2020-11-18 2022-05-25 엘지전자 주식회사 디스플레이 장치 및 그의 edid 정보 변경 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100157154A1 (en) * 2007-08-02 2010-06-24 Sony Corporation Image processing apparatus
US20140079113A1 (en) * 2011-05-10 2014-03-20 Koninklijke Philips N.V. High dynamic range image signal generation and processing
WO2014130343A2 (en) * 2013-02-21 2014-08-28 Dolby Laboratories Licensing Corporation Display management for high dynamic range video
US20140369662A1 (en) * 2007-03-13 2014-12-18 Sony Corporation Communication system, transmission apparatus, transmission method, reception apparatus and reception method
WO2015076608A1 (ko) * 2013-11-21 2015-05-28 엘지전자 주식회사 비디오 처리 방법 및 비디오 처리 장치

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2023632B1 (en) * 2006-05-16 2013-10-02 Sony Corporation Communication system, transmission device, reception device, communication method, and program
JP5240491B2 (ja) * 2007-06-26 2013-07-17 ソニー株式会社 送信装置および受信装置
US9055281B2 (en) * 2010-05-20 2015-06-09 Samsung Electronics Co., Ltd. Source device and sink device and method of transmitting and receiving multimedia service and related data
US9292940B2 (en) * 2011-04-28 2016-03-22 Koninklijke Philips N.V. Method and apparatus for generating an image coding signal
US9774819B2 (en) * 2013-06-20 2017-09-26 Saturn Licensing Llc Reproduction device, reproduction method, and recording medium
TWI684364B (zh) * 2013-06-21 2020-02-01 日商新力股份有限公司 送訊裝置、高動態範圍影像資料送訊方法、收訊裝置、高動態範圍影像資料收訊方法及程式
US9779687B2 (en) * 2014-03-13 2017-10-03 Lg Electronics Inc. Device and method for transmitting and receiving data using HDMI
CN106134210B (zh) * 2014-03-24 2019-04-16 Lg电子株式会社 利用hdmi进行数据发送和接收的装置和方法
EP3145207B1 (en) * 2014-05-12 2020-10-21 Sony Corporation Communication apparatus, communication method, and computer program
KR101785671B1 (ko) * 2014-05-20 2017-11-06 엘지전자 주식회사 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치
KR20170020776A (ko) * 2014-06-12 2017-02-24 엘지전자 주식회사 Hdmi를 사용하여 데이터를 송수신하기 위한 방법 및 장치
KR101809967B1 (ko) * 2014-08-08 2017-12-18 엘지전자 주식회사 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치
JP2016052015A (ja) * 2014-08-29 2016-04-11 株式会社東芝 電子機器および色域判定方法
WO2016060447A2 (ko) * 2014-10-14 2016-04-21 엘지전자(주) Hdmi를 사용한 데이터 송수신 기기 및 방법
WO2016060474A1 (ko) * 2014-10-14 2016-04-21 엘지전자(주) Hdmi를 사용하여 데이터를 송수신하기 위한 방법 및 장치
WO2017061796A1 (ko) * 2015-10-06 2017-04-13 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140369662A1 (en) * 2007-03-13 2014-12-18 Sony Corporation Communication system, transmission apparatus, transmission method, reception apparatus and reception method
US20100157154A1 (en) * 2007-08-02 2010-06-24 Sony Corporation Image processing apparatus
US20140079113A1 (en) * 2011-05-10 2014-03-20 Koninklijke Philips N.V. High dynamic range image signal generation and processing
WO2014130343A2 (en) * 2013-02-21 2014-08-28 Dolby Laboratories Licensing Corporation Display management for high dynamic range video
WO2015076608A1 (ko) * 2013-11-21 2015-05-28 엘지전자 주식회사 비디오 처리 방법 및 비디오 처리 장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019094346A1 (en) * 2017-11-08 2019-05-16 Interdigital Vc Holdings, Inc. Processing an image
CN111567048A (zh) * 2017-11-08 2020-08-21 交互数字Vc控股公司 对图像进行处理

Also Published As

Publication number Publication date
US20180262731A1 (en) 2018-09-13
US10587852B2 (en) 2020-03-10

Similar Documents

Publication Publication Date Title
WO2018004291A1 (ko) 방송 신호 송신 방법, 방송 신호 수신 방법, 방송 신호 송신 장치 및 방송 신호 수신 장치
WO2017061796A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2017030425A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2016182371A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2015178598A1 (ko) 디스플레이 적응적 영상 재생을 위한 비디오 데이터 처리 방법 및 장치
WO2017043863A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2017007192A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2015102449A1 (ko) 컬러 개멋 리샘플링을 기반으로 하는 방송 신호 송수신 방법 및 장치
WO2016171518A2 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2010021525A2 (en) A method for processing a web service in an nrt service and a broadcast receiver
WO2014209057A1 (ko) 지상파 방송망과 인터넷 프로토콜망 연동 기반의 하이브리드 방송 시스템에서 방송 서비스의 송수신 방법 및 장치
WO2016093586A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2015199468A1 (ko) 방송 신호 송/수신 처리 방법 및 장치
WO2016089095A1 (ko) 방송 신호 송신 방법, 방송 신호 송신 장치, 방송 신호 수신 방법 및 방송 신호 수신 장치
WO2015034306A1 (ko) 디지털 방송 시스템에서 고화질 uhd 방송 컨텐츠 송수신 방법 및 장치
WO2017135673A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2015133770A1 (en) Apparatus and methods for transmitting / receiving a broadcast signal
WO2016171496A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2016163603A1 (ko) Xml 자막에 기반한 방송 서비스를 위한 방송 신호 송수신 방법 및 장치
WO2016108606A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2016064150A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2016144031A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2017061792A1 (ko) 방송 신호 송수신 장치 및 방법
WO2016178549A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2016171528A1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16853912

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15759798

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16853912

Country of ref document: EP

Kind code of ref document: A1