JP2017511080A - カラーガマットリサンプリングに基づく放送信号送受信方法及び装置 - Google Patents

カラーガマットリサンプリングに基づく放送信号送受信方法及び装置 Download PDF

Info

Publication number
JP2017511080A
JP2017511080A JP2016562719A JP2016562719A JP2017511080A JP 2017511080 A JP2017511080 A JP 2017511080A JP 2016562719 A JP2016562719 A JP 2016562719A JP 2016562719 A JP2016562719 A JP 2016562719A JP 2017511080 A JP2017511080 A JP 2017511080A
Authority
JP
Japan
Prior art keywords
color gamut
information
color
resampling
gamut
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016562719A
Other languages
English (en)
Other versions
JP6282357B2 (ja
Inventor
オ,ヒュンムク
ス,ジョンイル
フワン,スジン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of JP2017511080A publication Critical patent/JP2017511080A/ja
Application granted granted Critical
Publication of JP6282357B2 publication Critical patent/JP6282357B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/06Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed using colour palettes, e.g. look-up tables
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/06Colour space transformation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Of Color Television Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

【課題】カラーガマットリサンプリングに基づく放送信号を送受信する方法及び/又は装置を提供する。【解決手段】本発明の一実施例に係る放送信号送信方法は、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングするステップと、前記リサンプリングに関する情報を示すカラーガマットリサンプリング情報を含むシグナリング情報を生成するステップと、前記生成されたシグナリング情報及び前記第2カラーガマットベースのコンテンツデータをそれぞれエンコードするステップと、前記エンコードされたコンテンツデータ及び前記エンコードされたシグナリング情報を送信するステップとを有する。【選択図】図1

Description

本発明は、放送信号の送受信に関する。より詳しくは、カラーガマットリサンプリングに基づく放送信号の送受信方法及び/又は装置に関する。
デジタル技術及び通信技術の発展により、放送、映画だけでなく、インターネット及び個人メディアなどの様々な領域でオーディオ及びビデオ中心のマルチメディアコンテンツの普及及び需要が急速に拡大している。しかも、放送及び映画で立体感を提供する3DTV/3D映画が普遍化するにつれて、事実感や現場感を提供する実感メディアへの消費者のニーズも増加している。また、ディスプレイ技術の発展と共に家庭のTV画面が大型化するにつれて、HD級以上の高画質で実感のあるコンテンツを楽しもうとする消費も増加している。このようなPost−HDTV市場に備えて、3DTVと共に、UHDTV(Ultra High Definition TV)のような実感放送が次世代放送サービスとして関心を受けており、特に、UHD(Ultra High Definition)放送サービスに関して多く議論されている。
UHDディスプレイ及び送受信機の発展に伴ってUHDサービスの導入が様々な分野で試みられている。UHD放送では、既存のコンテンツでは表現できなかった色相及び/又は明るさを表現することによって、既存の放送との差別化を図り、高度の現場感を提供することができる。しかし、幅広い色範囲(Wide Color Gamut;WCG)及び/又は幅広い明るさ(High Dynamic Range;HDR)の映像に対する研究は未だ進行中であり、幅広い色範囲及び/又は幅広い明るさをディスプレイできるディスプレイ装置の開発も未だ進行中である。
UHD放送は、既存のHD放送に比べて様々な側面で視聴者に豊富な色相、向上した画質及び没入感を提供することを目指している。そのために、既存のTVに比べて広い色域を定めるなど、UHD放送関連標準が制定されている。UHDコンテンツはHVS(Human Visual System)で直接取得する色感に最も近い情報を提供することによって、向上した画質及び躍動感を提供することができる。現在の放送システムでも最適の色感を提供するために、コンテンツ伝送の前に色感向上のための様々な後処理手順を行っているが、事実には、視聴者のディスプレイ環境とコンテンツ製作者の作業環境の違いによって色感が完壁に表現されない現状である。UHD放送では、既存HD放送との差別化された放送サービスを提供するために、様々な側面で視聴者にリアルなコンテンツを提供するための議論が行われている。その中でも、コンテンツの明るさの表現範囲を人の視覚体系に近接させるための考慮として、HDR(High Dynamic Range)の必要性が提起されている。
WCGを有する映像フォーマット標準が制定されたのは最近であり、WCGに基づく映像取得装置及びディスプレイ装置の普及には時間がかかると予想される。このため、UHDサービス伝送標準は将来互換性を考慮して制定されるだろう。このとき、既存のカラーガマットを有するビデオをWCG伝送フォーマットを用いてサービスする場合が発生しうるが、この場合、受信端にとっては適切な処理によって、ディスプレイ環境を考慮した高品質のサービスを提供するための方法が必要である。
既存のアナログ放送をはじめとするSDTV、HDTVでは、ビデオサービス技術の発展に伴って標準色範囲(standard color gamut)を制定し、これに基づいて映像の取得から後処理、伝送及びディスプレイに至るまで一様のカラーガマットを使用してきた。すなわち、目標とするサービスに対してマッチされるカラーガマットが存在したため、プロダクション及び/又は伝送端ではそれに基づいて後処理して伝送すればよく、各段階でカラーガマットの差異については考慮しなくて済んだ。しかし、UHDでは様々なカラーガマットが考慮されている。例えば、現在HDTVで使用中のREC.709、UHDTV標準で制定されたBT.2020、HDTVとUHDTVとの中間範囲を含むDCI−P3、xvYCCなどがある。現在使われている映像取得装置ではREC.709ベースのカラーガマットだけを支援しており、ディスプレイでも同様に、REC.709ベースの映像だけを支援している。このように、映像取得及び出力装置の両方にBT.2020が導入されるには時間がかかりそうであり、この場合、将来互換性の問題を考慮して、単一放送サービスでも両方の場合を全て支援できるサービスを開発する必要が高まりつつある。
本発明が遂げようとする課題は、前述した問題点を解決するために、カラーガマットリサンプリングに基づく放送信号の送受信方法及び/又は装置を提供することである。
なお、本発明が遂げようとする課題は、本来のコンテンツのカラーガマットとコンテンツが含まれて伝送されるコンテナのカラーガマットとが一致しない場合に発生する、受信端におけるディスプレイ劣化を減らす方法を提供することである。
なお、本発明が遂げようとする課題は、コンテンツのカラーガマットとコンテナのカラーガマットをそれぞれ区分してシグナルする方法を提供することである。
なお、本発明が遂げようとする課題は、コンテンツのカラーガマットとコンテナのカラーガマットとが異なる場合に、カラーガマットのリサンプリングのためのシグナリング情報を提供することである。
なお、本発明が遂げようとする課題は、受信機のディスプレイ性能によってカラーガマットのリサンプリングを行うか否かを決定し、受信機のディスプレイ性能に適したコンテンツを提供することである。
本発明の一実施例に係る放送信号送信方法は、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングするステップと、前記リサンプリングに関する情報を示すカラーガマットリサンプリング情報を含むシグナリング情報を生成するステップと、前記生成されたシグナリング情報及び前記第2カラーガマットベースのコンテンツデータをそれぞれエンコードするステップと、前記エンコードされたコンテンツデータ及び前記エンコードされたシグナリング情報を送信するステップとを有することができる。
好適には、前記カラーガマットリサンプリング情報は、前記第1カラーガマットに関する情報、前記第2カラーガマットに関する情報、前記リサンプリングの方式を示すカラーガマットリサンプリングタイプ情報、及び前記カラーガマットリサンプリングタイプ情報によるカラーガマットリサンプリングタイプの詳細情報を含むことができる。
好適には、前記第1カラーガマットに関する情報は、前記第1カラーガマットのタイプを示す情報、及び前記第1カラーガマットが既存に定義されたカラーガマットでない場合、前記第1カラーガマットを定義するための基準色相の色空間上の座標情報を含み、前記第2カラーガマットに関する情報は、前記第2カラーガマットのタイプを示す情報、及び前記第2カラーガマットが既存に定義されたカラーガマットでない場合、前記第2カラーガマットを定義するための基準色相の色空間上の座標情報を含むことができる。
好適には、前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを、カラーガマットの影響を受けない中立的な色空間上の値に変換し、前記変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記中立的な色空間のタイプを示す情報、前記第1カラーガマットベースのコンテンツデータを前記中立的な色空間上の値に変換するために用いる変換式の係数情報、及び前記変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含むことができる。
好適には、前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに直接変換する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記第1カラーガマットベースのコンテンツデータを前記第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含み、前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータ及び第2カラーガマットベースのコンテンツデータのマッピング情報を示すルックアップテーブル(look up table)を利用する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記ルックアップテーブルのタイプ情報及び前記ルックアップテーブルの構成要素情報を含むことができる。
好適には、前記シグナリング情報は、PMT(Program Map Table)、EIT(Event Information Table)、VUIメッセージ(Video Usuability Information message)、及びSEIメッセージ(Supplemental Enhancement Information message)を含み、前記PMT及びEITのうち少なくとも一つは、前記放送信号に含まれた放送サービスがカラーガマットリサンプリングベースの放送サービスであることを識別する情報を含むことができる。
好適には、前記カラーガマットリサンプリング情報は、PMT、EIT、VUIメッセージ及びSEIメッセージのうち少なくとも一つに含まれてもよい。
本発明の他の実施例に係る放送信号受信方法は、第1カラーガマットベースのコンテンツデータ、及び前記第1カラーガマットベースのコンテンツデータに対するカラーガマットリサンプリング情報を含むシグナリング情報を受信するステップと、前記受信されたシグナリング情報及び第1カラーガマットベースのコンテンツデータをそれぞれデコードするステップと、前記デコードされたシグナリング情報に基づいて、前記デコードされた第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングして前記第2カラーガマットベースのディスプレイで出力したり、又は前記デコードされた第1カラーガマットベースのコンテンツデータを前記第1カラーガマットベースのディスプレイで出力するステップとを有することができる。
好適には、前記カラーガマットリサンプリング情報は、前記第1カラーガマットに関する情報、前記第2カラーガマットに関する情報、前記リサンプリングの方式を示すカラーガマットリサンプリングタイプ情報、及び前記カラーガマットリサンプリングタイプ情報によるカラーガマットリサンプリングタイプの詳細情報を含むことができる。
好適には、前記第1カラーガマットに関する情報は、前記第1カラーガマットのタイプを示す情報、及び前記第1カラーガマットが既存に定義されたカラーガマットでない場合、前記第1カラーガマットを定義するための基準色相の色空間上の座標情報を含み、前記第2カラーガマットに関する情報は、前記第2カラーガマットのタイプを示す情報、及び前記第2カラーガマットが既存に定義されたカラーガマットでない場合、前記第2カラーガマットを定義するための基準色相の色空間上の座標情報を含むことができる。
好適には、前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを、カラーガマットの影響を受けない中立的な色空間上の値に変換し、前記変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記中立的な色空間のタイプを示す情報、前記第1カラーガマットベースのコンテンツデータを前記中立的な色空間上の値に変換するために用いる変換式の係数情報、及び前記変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含むことができる。
好適には、前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに直接変換する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記第1カラーガマットベースのコンテンツデータを前記第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含み、前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータ及び第2カラーガマットベースのコンテンツデータのマッピング情報を示すルックアップテーブル(look up table)を利用する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記ルックアップテーブルのタイプ情報及び前記ルックアップテーブルの構成要素情報を含むことができる。
好適には、前記シグナリング情報は、PMT(Program Map Table)、EIT(Event Information Table)、VUIメッセージ(Video Usuability Information message)、及びSEIメッセージ(Supplemental Enhancement Information message)を含み、前記PMT及びEITのうち少なくとも一つは、前記放送信号に含まれた放送サービスがカラーガマットリサンプリングベースの放送サービスであることを識別する情報を含むことができる。
好適には、前記カラーガマットリサンプリング情報は、PMT、EIT、VUIメッセージ及びSEIメッセージのうち少なくとも一つに含まれてもよい。
本発明の他の実施例に係る放送信号送信装置は、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングするカラーガマットリサンプリング部と、前記リサンプリングに関する情報を示すカラーガマットリサンプリング情報を含むシグナリング情報を生成するシグナリング情報生成部と、前記生成されたシグナリング情報及び前記第2カラーガマットベースのコンテンツデータをそれぞれエンコードするエンコーダと、前記エンコードされたコンテンツデータ及び前記エンコードされたシグナリング情報を送信する伝送部とを備えることができる。
本発明の他の実施例に係る放送信号受信装置は、第1カラーガマットベースのコンテンツデータ、及び前記第1カラーガマットベースのコンテンツデータに対するカラーガマットリサンプリング情報を含むシグナリング情報を受信する受信部と、前記受信されたシグナリング情報及び第1カラーガマットベースのコンテンツデータをそれぞれデコードするデコーダと、前記デコードされたシグナリング情報に基づいて、前記デコードされた第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングして前記第2カラーガマットベースのディスプレイで出力したり、又は前記デコードされた第1カラーガマットベースのコンテンツデータを前記第1カラーガマットベースのディスプレイで出力する出力部とを備えることができる。
本発明によれば、カラーガマットリサンプリングに基づく放送信号を送受信することができる。
本発明によれば、本来のコンテンツのカラーガマットとコンテンツが含まれて伝送されるコンテナのカラーガマットとが一致しない場合に発生する、受信端におけるディスプレイ劣化を減らすことができる。
本発明によれば、コンテンツのカラーガマットとコンテナのカラーガマットをそれぞれコンテンツの受信前に受信し、カラーガマットリサンプリングが必要であるか否かをあらかじめ判断することができる。
本発明によれば、受信機のディスプレイ性能によってカラーガマットをリサンプリングするか否かを決定し、受信機のディスプレイ性能に適したコンテンツを提供することができる。
本発明によれば、それぞれ別個のカラーガマットを有するディスプレイを全て支援することができる。
本発明によれば、一つの放送システムで様々なUHDサービスを同時に支援することができる。
図1は、本発明の一実施例に係る放送信号の送信方法を示す図である。 図2は、本発明の一実施例に係るビデオの送受信手順を示す図である。 図3は、本発明の一実施例に係る受信機の動作を示す図である。 図4は、本発明の一実施例に係るガマットリサンプリング過程の詳細な動作を含む受信機の動作を示す図である。 図5は、本発明の一実施例に係るビデオ後処理過程(video post−processing)の動作を示す図である。 図6は、本発明の一実施例に係るgamut_resampling_info(payloadsize)を含むSEIメッセージの構造を示す図である。 図7は、本発明の一実施例に係るgamut_resampling_info(payloadsize)の構成を示す図である。 図8は、本発明の一実施例に係るgeneral_color_primaries()の構成を示す図である。 図9は、本発明の一実施例に係るgamut_resampling_info()の構成を示す図である。 図10は、本発明の一実施例に係るcontainer_color_gamut_typeの構成を示す図である。 図11は、本発明の一実施例に係るcontent_color_gamut_typeの構成を示す図である。 図12は、本発明の一実施例に係るgamut_resampling_typeの構成を示す図である。 図13は、本発明の一実施例に係るcolor_space_typeの構成を示す図である。 図14は、本発明の一実施例に係るガマットリサンプリング過程で現在カラーガマットを基準にRGBで表現された値をXYZに変換するマッピング関数(mapping function)による変換式を示す図である。 図15は、本発明の一実施例に係るガマットリサンプリング過程でXYZで表現された色相を、目標カラーガマットを基準に表現されたRGB値に変換するマッピング関数による変換式を示す図である。 図16は、本発明の一実施例に係るガマットリサンプリング過程で単一変換式に基づいて現在カラーガマットを基準にRGBで表現された値を目標カラーガマットを基準に表現されたR’G’B’値に変換するマッピング関数による変換式を示す図である。 図17は、本発明の一実施例に係るLUT_typeの構成を示す図である。 図18は、本発明の一実施例に係るPMT(Program Map Table)の構成を示す図である。 図19は、本発明の一実施例に係るUHD_program_info_descriptor()の構成を示す図である。 図20は、本発明の一実施例に係るUHD_service_typeの構成を示す図である。 図21は、本発明の一実施例に係るEIT(Event Information Table)の構成を示す図である。 図22は、本発明の一実施例に係るgamut_resampling_info_descriptor()の構成を示す図である。 図23は、本発明の一実施例に係るgamut_resampling_metadata()の構成を示す図である。 図24は、本発明の一実施例に係る送信機の動作を示す図である。 図25は、本発明の一実施例に係る受信機の構造及び動作を示す図である。 図26は、本発明の一実施例に係る放送信号の受信方法を示す図である。 図27は、本発明の一実施例に係る放送信号の送信装置の構成を示す図である。 図28は、本発明の一実施例に係る放送信号の受信装置の構成を示す図である。
以下、添付の図面及び添付の図面に記載された内容を参照して、本発明の実施例を詳しく説明する。ただし、本発明がこれらの実施例に制限又は限定されるわけではない。
本明細書で使われる用語は、本発明における機能を考慮すると共に、可能な限り現在広く使われている一般的な用語を選択したが、これは、当該分野に従事する技術者の意図、慣例、又は新しい技術の出現などによって変更してもよい。また、特定の場合には、出願人が任意に選定した用語もあり、その場合には、該当する発明の説明部分でその意味を記載するものとする。したがって、本明細書で使われる用語は、単純な用語の名称ではなく、その用語が持つ実質的な意味と本明細書の全般にわたる内容に基づいて解釈しなければならないことは明らかである。
図1は、本発明の一実施例に係る放送信号の送信方法を示す図である。
本発明の一実施例は、次のような過程によって放送信号を送信することができる。まず、本発明の一実施例に係る送信機は、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングすることができる(S1010)。本発明の一実施例に係る第1カラーガマットは、カメラで取得した時の本来のコンテンツデータのカラーガマットを意味することができ、本発明の一実施例によればREC.709カラーガマットがそれに当たる。本発明の一実施例によれば、送信側で第1カラーガマットをコンテンツカラーガマットと命名することができる。本発明の一実施例に係る第2カラーガマットは、コンテンツデータを編集及び/又は伝送するためのカラーガマットであり、本発明の一実施例によればBT.2020カラーガマットがそれに当たる。本発明の一実施例によれば、送信側で第2カラーガマットをコンテナカラーガマットと命名することができる。本発明の一実施例に係るカラーガマットは、色表現範囲又は色空間を示す意味で使うことができる。本発明の一実施例に係るリサンプリングする段階(S1010)に関する詳細な説明は、図2及び図24の説明部分で後述する。次に、本発明の一実施例に係る送信機は、上述したリサンプリングに関する情報を示すカラーガマットリサンプリング情報を含むシグナリング情報を生成することができる(S1020)。本発明の一実施例に係るカラーガマットリサンプリング情報は、gamut_resampling_info(payloadsize)を意味することができ、本発明の一実施例に係るgamut_resampling_info(payloadsize)は、gamut_resampling_info()とは異なる意味を有することができる。本発明の一実施例に係るシグナリング情報を生成する段階(S1020)に関する詳細な説明は、図6、図7、図8、図18、図19、図21、図22、図23の説明部分で後述する。次に、本発明の一実施例に係る送信機は、生成されたシグナリング情報、及び第2カラーガマットに基づいてリサンプリングされたコンテンツデータをそれぞれエンコードすることができる(S1030)。これに関する詳細な説明は、図24の説明部分で後述する。次に、本発明の一実施例に係る送信機は、エンコードされたコンテンツデータ及びエンコードされたシグナリング情報を伝送することができる(S1040)。このとき、コンテンツデータ及び/又はシグナリング情報は、地上波放送網、ケーブル網及び/又はインターネット網で伝送することができる。これに関する詳細な説明は、図24の説明部分で後述する。
本発明の他の実施例によれば、上述したカラーガマットリサンプリング情報は、第1カラーガマットに関する情報、第2カラーガマットに関する情報、リサンプリングの方式を示すカラーガマットリサンプリングタイプ情報、及び/又はカラーガマットリサンプリングタイプ情報によるカラーガマットリサンプリングタイプの詳細情報を含むことができる。本発明の一実施例によれば、送信側で第1カラーガマットに関する情報にはcontent_color_gamut_type及び/又はgeneral_color_primaries()を含めることができ、第2カラーガマットに関する情報にはcontainer_color_gamut_type及び/又はgeneral_color_primaries()をめることができる。本発明の一実施例に係るカラーガマットリサンプリングタイプ情報は、gamut_resampling_typeを意味することができ、カラーガマットリサンプリングタイプの詳細情報はgamut_resampling_info()を意味することができる。これに関する詳細な説明は、図6乃至図17の説明部分で後述する。
本発明の他の実施例によれば、第1カラーガマットに関する情報は、第1カラーガマットのタイプを示す情報、及び/又は第1カラーガマットが既存に定義されたカラーガマットでない場合には、第1カラーガマットを定義するための基準色相の色空間上の座標情報を含むことができ、第2カラーガマットに関する情報は、第2カラーガマットのタイプを示す情報、及び/又は第2カラーガマットが既存に定義されたカラーガマットでない場合には、第2カラーガマットを定義するための基準色相の色空間上の座標情報を含むことができる。本発明の一実施例に係るカラーガマットは、既存に標準と定義されたカラーガマットに該当してもよく、任意に定義されたカラーガマットに該当してもよい。本発明の一実施例に係る第1カラーガマットのタイプを示す情報はcontent_color_gamut_typeを意味することができ、第1カラーガマットが既存に定義されたカラーガマットでない第1カラーガマットを定義するための基準色相の色空間上の座標情報は、general_color_primaries()に含まれた座標情報を意味することができる。本発明の一実施例に係る第2カラーガマットのタイプを示す情報は、container_color_gamut_typeを意味することができ、第2カラーガマットが既存に定義されたカラーガマットでない場合、第2カラーガマットを定義するための基準色相の色空間上の座標情報は、general_color_primaries()に含まれた座標情報を意味することができる。これに関する詳細な説明は、図7,図8の説明部分で後述する。
本発明の他の実施例によれば、カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータをカラーガマットの影響を受けない中立的な色空間上の値に変換し、変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換する方式である場合、カラーガマットリサンプリングタイプの詳細情報は、中立的な色空間のタイプを示す情報、第1カラーガマットベースのコンテンツデータを中立的な色空間上の値に変換するために用いる変換式の係数情報、及び/又は変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含むことができる。本発明の一実施例に係る中立的な色空間のタイプを示す情報は、color_space_typeを意味することができ、第1カラーガマットベースのコンテンツデータを中立的な色空間上の値に変換するために用いる変換式の係数情報は、RGB_XYZ_mapping_function_coeff[i]を意味することができ、変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報は、XYZ_to_RGBprime_mapping_function_coeff[i]を意味することができる。これに関する詳細な説明は、図7、図9の説明部分で後述する。
本発明の他の実施例によれば、カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに直接変換する方式である場合、カラーガマットリサンプリングタイプの詳細情報は、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含むことができ、カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータ及び第2カラーガマットベースのコンテンツデータのマッピング情報を示すルックアップテーブル(look up table)を利用する方式である場合、カラーガマットリサンプリングタイプの詳細情報は、ルックアップテーブルのタイプ情報及びこのルックアップテーブルの構成要素情報を含むことができる。本発明の一実施例に係るカラーガマットリサンプリングタイプの詳細情報において、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報は、gamut_resampling_function_coeff[i]を意味することができ、ルックアップテーブルのタイプ情報はLUT_typeを意味することができ、ルックアップテーブルの構成要素情報はLUT_info()を意味することができる。これに関する詳細な説明は、図7、図9の説明部分で後述する。
本発明の他の実施例によれば、シグナリング情報は、PMT(Program Map Table)、EIT(Event Information Table)、VUIメッセージ(Video Usuability Information message)及び/又はSEIメッセージ(Supplemental Enhancement Information message)を含み、本発明の一実施例に係るPMT及びEITのうち少なくとも一つは、伝送される放送信号に含まれた放送サービスがカラーガマットリサンプリングベースの放送サービスであることを識別する情報を含むことができる。これに関する詳細な説明は、図6、図18、図19、図20、図21の説明部分で後述する。
本発明の他の実施例によれば、カラーガマットリサンプリング情報は、PMT、EIT、VUIメッセージ及びSEIメッセージのうち少なくとも一つに含まれてもよい。これに関する詳細な説明は、図6、図7、図18、図19、図20、図21、図22、図23の説明部分で後述する。
図2は、本発明の一実施例に係るビデオの送受信手順を示す図である。
本発明の一実施例に係るビデオの送受信手順は、レガシーコンテンツ取得過程(legacy image sensor/legacy content(REC.709))2010、ガマットリサンプリング過程(gamut re−sampling)2020、プロダクション及びコンテンツ製作過程(production/content provider(BT.2020))2030、ガマットリサンプリング逆過程(gamut re−sampling(inverse))2040、及び/又はディスプレイ過程(legacy display(REC.709))2050を含むことができる。
レガシーコンテンツ取得過程(legacy image sensor/legacy content(REC.709))2010で、本発明の一実施例は、レガシーカメラで取得したレガシーコンテンツを取得することができる。本発明の一実施例に係るレガシーコンテンツは、REC.709カラーガマットベースのものとすることができる。本発明の一実施例に係るREC.709カラーガマットに基づくレガシーコンテンツの色相は、色座標平面上に示すように、2060の三角形で表現することができる。
ガマットリサンプリング過程(gamut re−sampling)2020は、2つの異なるカラーガマット(color gamut)で共通に表現できる色相を対象にして、一つのカラーガマットに基づいて示したRGB又はYCbCr値を、他のカラーガマットに基づくRGB又はYCbCr値で示す過程を意味することができる。本発明の一実施例によれば、色座標平面上で同一座標に位置している色相であっても、それぞれ別個のカラーガマットに基づく場合には、RGB又はYCbCr値が変わってもよい。これは、個別の幅を有するカラーガマットを同一個数のデジタル値(digital vlaue)にサンプリング(sampling)する過程で個別のデジタル値へのマッピング(mapping)がなされるためであろう。例えば、8ビットのビット深度(bit depth)を有するディスプレイにカラー値を表現する場合、色座標平面上の色座標(0.3,0.6)に対して、BT.709に基づくRGB又はYCbCrを表現すれば(0,255,0)という値を有し、BT.2020に基づくRGB又はYCbCrを表現すれば(10,200,30)という全く新しい値を有することができる。ここで、上述した色座標平面は、CIE 1931 xy chromaticity diagramに該当し得る。すなわち、本発明の一実施例に係るガマットリサンプリング2020,2040は、一つのカラーガマットによって定義されたデジタル値を他のカラーガマットに基づくデジタル値で表現することを意味することができる。本発明の一実施例に係るガマットリサンプリングは、コンテンツの色空間を基準色空間(color space)に変換することによって色座標平面上でカラーガマットに影響を受けないように表現した後、目標カラーガマットにカラーガマットを変換し、ビット深度量子化(quantization)を行う過程を含むことができる。すなわち、本発明の一実施例は、特定カラーガマットに基づいて表現されたRGB色相を色座標平面にマップさせる過程によって、与えられたカラーガマットの影響を受けない中立的な空間で色相を表現した後、これをさらに新しいカラーガマットに基づいて再び表現することができる。上述した過程は、2つのカラーガマットに対して、重複する範囲で定義された色相を、新しいカラーガマットに基づいて再び表現する過程に該当し得る。例えば、広い範囲のカラーガマットに存在する色相を狭い範囲のカラーガマットの色相で表現しなければならない場合、上述した過程は、範囲を外れる色相に対してクリッピング(clipping)をすることと同じ効果を有することができる。本発明の一実施例に係るRGBは色相モデルの一種であり、色をレッド(Red)、グリーン(Green)、ブルー(Blue)の3つの成分の組合せで表現するものである。例えば、RGBモデルで、黒色はR=G=B=0、白色はR=G=B=255,黄色はR=G=255などと表現することができる。本発明の一実施例に係るYCbCrは、映像システムで使われる色空間の一種であり、カラー情報から明るさ成分と色差成分を分離した色表現方式を意味することができる。ここで、Yは、輝度信号、Cb及びCrは色差信号を意味することができる。YCbCrは絶対色空間ではなく、RGBの三原色が視覚的に均一な情報を有するRGB情報を明るさ信号及び色差信号によってそれぞれ別個の情報を有するように数式で変換した色表現方式に該当し得る。
プロダクション及びコンテンツ製作過程(production/content provider(BT.2020))2030で、本発明の一実施例は、ガマットリサンプリングされたコンテンツの映像を補正及び/又は編集などをすることができ、前のガマットリサンプリング過程で変換されたカラーガマットに基づいてコンテンツを受信端に伝送することができる。これに関する詳細な説明は後述する。
ガマットリサンプリング逆過程(gamut re−sampling(inverse))2040は、上述したガマットリサンプリング過程2020と同一であってもよい。例えば、ガマットリサンプリング過程2020でREC.709カラーガマットをBT.2020カラーガマットに変換した場合には、ガマットリサンプリング逆過程2040では、BT.2020カラーガマットをREC.709カラーガマットに変換することができる。本発明の一実施例は、新しいカラーガマットに対してマッピングが終わると、ディスプレイビット深度(display bit depth)によって量子化(quantization)過程を経て最終ピクセル値を生成することができる。
ディスプレイ過程(legacy display(REC.709))2050で、本発明の一実施例は、ガマットリサンプリング逆過程2040で変換されたカラーガマットに基づくコンテンツをディスプレイすることができる。例えば、ガマットリサンプリング逆過程2040で目標カラーガマット(BT.2020)をレガシーコンテンツのカラーガマットであるREC.709カラーガマットに変換することができ、本発明の一実施例に係るレガシーディスプレイは、REC.709カラーガマットに基づくレガシーコンテンツをディスプレイすることができる。
本発明の一実施例によれば、色符号化(color encoding)時のカラーガマットはUHDTV標準に従うが、コンテンツ及びディスプレイのカラーガマットは既存の標準に従う場合、本発明の一実施例は、これら2種類のカラーガマット情報及びガマットリサンプリングのための情報を受信端に伝達することができ、これによって、別個のカラーガマットを有するディスプレイを全て支援することができる。本発明の一実施例によれば、既存に用いられていたスケーラブル(scalable)ベースの拡張とは違い、既存のコーデックをそのまま使用しながら、ビデオ情報に基づいて将来拡張性を考慮することができ、したがって、本発明の一実施例を、様々なUHDサービスを提供するために用いることができる。例えば、DVBでUHD−1 phase 1及び2サービスを同時に支援することができる。
本発明の一実施例によれば、それぞれ異なるカラーガマットの使用は、色符号化時にUHDTV標準カラーガマットに従う場合、将来拡張性及び将来プロダクション(production)インフラの持続性側面で有利であり、映像取得及びディスプレイ装置に対しても、現在普及されている装備から将来使われる装備に至るまで様々な装備を支援するという側面で有利である。本発明の一実施例は、既存のHDTVコンテンツをUHDTV環境で提供する場合にカラーガマットの側面で発生する問題点を解決することができる。
本発明の一実施例は、XYZのようにBT.2020よりも広い色表現範囲を色符号化に使用する場合にも適用することができる。
図3は、本発明の一実施例に係る受信機の動作を示す図である。
本発明の一実施例に係る受信機の動作は、デコーディング過程(decoder)3010、ガマットリサンプリング過程(gamut re−sampling)3020、ビデオ後処理過程(video post−processing)3030、及び/又はディスプレイ過程(display)3040を含むことができる。
デコーディング過程(decoder)3010で、本発明の一実施例に係る受信機は、圧縮されたUHDビデオストリーム(compressed UHD video stream)を受信してデコードすることができる。
ガマットリサンプリング過程(gamut re−sampling)3020で受信機は、デコードされたUHDビデオ(uncompressed UHD video)が表現されたカラーガマットを変換することができる。このとき、コンテナのカラーガマット、コンテンツのカラーガマット及び/又はディスプレイのカラーガマットに関する情報を用いることができる。これに関する詳細な説明は後述する。
ビデオ後処理過程(video post−processing)3030で受信機は、ガマットリサンプリングされたUHDビデオ(gamut re−sampled UHD video)を後処理し、より一層向上した画質を有するUHDビデオを生成することができる。これに関する詳細な説明は後述する。
ディスプレイ過程(display)3040で受信機は、後処理されたUHDビデオをディスプレイすることができる。
図4は、本発明の一実施例に係るガマットリサンプリング過程の詳細な動作を含む受信機の動作を示す図である。
本発明の一実施例に係るガマットリサンプリング過程3020は、コンテナガマットマッチング過程(container gamut matching)4010、コンテンツガマットマッチング過程(content gamut matching)4020、第1ガマットマッピング過程(gamut mapping(clipping))4030、及び/又はビット深度量子化過程(bit depth quantization)4040を含むことができ、本発明の一実施例に係る受信機の動作は、ガマットリサンプリング過程3020、第2ガマットマッピング過程(gamut mapping(conversion))4050、レガシーディスプレイ過程(legacy display)4060及び/又はWCGディスプレイ過程(WCG display)4070を含むことができる。
本発明の一実施例によれば、受信機のディスプレイ特性によって、受信機のディスプレイがレガシーディスプレイである場合と、WCG UHDディスプレイである場合とに区別して受信機の動作を説明することができる。
本発明の一実施例に係る受信機のディスプレイがレガシーディスプレイである場合(シナリオ1)、すなわち、VUI(video usuability information)又はSEI(supplemental enhancement information)メッセージで伝達されるビデオカラーガマットが受信機で表現不可能であると判断される場合、受信機は、レガシーディスプレイに適するようにビデオを処理することができる。
コンテナガマットマッチング過程(container gamut matching)4010は、VUI又はSEIメッセージで伝達されたコンテナのカラーガマットをディスプレイのカラーガマットと比較することができる。この時、VUI内に定義されたcolour_primariesを用いたり、又は後述するcontainer_color_gamut_typeを用いることができる。受信機が伝達されたコンテナのカラーガマットを表現できないと判断される場合、すなわち、受信機のディスプレイがレガシーディスプレイとして判断される場合、受信機は、受信された映像を後述の追加処理過程によって受信機のレガシーディスプレイに適した映像に変換することができる。
コンテンツガマットマッチング過程(content gamut matching)4020は、コンテナのカラーガマットを受信機のディスプレイで表現できない場合、コンテンツ自体のカラーガマット情報をディスプレイのカラーガマットと比較することができる。コンテンツのカラーガマットがディスプレイのカラーガマットとマッチされる場合、後述する第1ガマットマッピング過程によってガマットリサンプリング過程を行うことができる。一方、コンテンツのカラーガマットがディスプレイのカラーガマットとマッチされない場合、後述する第2ガマットマッピング過程によって、コンテンツの色表現範囲をディスプレイの色表現範囲内でディスプレイ可能に変換することができる。
第1ガマットマッピング過程(gamut mapping(clipping))4030は、WCGディスプレイを支援するために広い範囲のカラーガマットで表現されたコンテンツを、本来の色表現範囲で再び示す過程に該当し得る。この過程は、次のように大きく2つの過程を経ることができる。まず、受信機は、WCGディスプレイを支援するための広い範囲のカラーガマットを、相対的に狭いカラーガマットに変換することができる。この時、カラーガマットの変換は、両カラーガマットの間にあらかじめ約束されている変換関数を用いたり(gamut_resampling_type=predefined gamut re−sampling)、ガマットリサンプリング変換のための段階別の要素関数を直接伝送したり、又は、全体ガマットリサンプリング変換式又はLUT(look up table)の形態で変換関数を全て送信するなどの方法を用いて行うことができる。本発明の一実施例に係る第1ガマットマッピング過程は、WCGコンテンツをレガシーディスプレイで再生する場合においてカラーガマットクリッピング(clipping)を用いるときにも同一に適用することができる。すなわち、受信機は、WCGをレガシーディスプレイで表現する際、色域外カラー(out of gamut color)が発生する場合にハード閾値法(hard thresholding)を用いてクリッピング効果を得ることができる。
ビット深度量子化過程(bit depth quantization)4040は、上述した第1ガマットマッピング過程がなされた後、本来のカラーガマットに基づいて表現された色相をディスプレイのビット深度に合わせてビット深度を量子化する過程に該当し得る。これは、カラーガマットが変換された映像を、ディスプレイのビット深度に合わせて変更する過程を意味することができる。
第2ガマットマッピング過程(gamut mapping(conversion))4050は、レガシーディスプレイのカラーガマットとコンテンツのカラーガマットとがマッチされない場合に、ディスプレイのカラーガマットを基準にしてコンテンツのカラーガマットに基づく色相を変換する過程に該当し得る。ここで、レガシーディスプレイのカラーガマットとコンテンツのカラーガマットとがマッチされない場合、コンテンツはWCGコンテンツに該当し得る。この場合、受信機は、前述したように、WCGコンテンツをクリッピングし、クリッピングされたWCGコンテンツをレガシーディスプレイで再生することができるが、一層向上した色感の表現のために、ディスプレイのカラーガマットを基準にガマット外(out of gamut)となる色相を適切に表現すると同時に、ガマット内に存在する色相に対しては本来の色相を維持するようにWCGコンテンツを変換することができる。
レガシーディスプレイ過程(legacy display)4060は、上述した過程で加工されたビデオを、レガシーUHDディスプレイで再生する過程に該当し得る。必要な場合、本発明の一実施例は、ディスプレイの前に受信機のビデオ後処理過程を行い、一層向上した画質を提供することができる。
本発明の一実施例に係る受信機のディスプレイがWCG UHDディスプレイである場合(シナリオ2)、すなわち、VUI(video usuability information)又はSEI(supplemental enhancement information)メッセージで伝達されるビデオカラーガマットが受信機で表現可能であると判断される場合、受信機は、下記の動作によってガマットリサンプリング過程無しでコンテンツを再生することができる。
コンテナガマットマッチング過程(container gamut matching)4010で受信機は、VUI又はSEIメッセージで伝達されたコンテナのカラーガマットをディスプレイのカラーガマットと比較し、伝達されたコンテンツの色相を当該受信機のディスプレイで表現できるか否かを判断することができる。伝達されたコンテナのカラーガマットを表現できると判断される場合、受信機のディスプレイはWCG UHDディスプレイとして判断され、受信機は、伝達されたコンテンツを追加処理無しでディスプレイすることができる。
WCGディスプレイ過程(WCG display)4070で受信機は、上述したコンテナガマットマッチング過程4010で受信機が伝達されたコンテナのカラーガマットを十分に表現できると判断される場合、すなわち、受信機のディスプレイがWCG UHDディスプレイに該当する場合、伝達されるビデオを直ちにWCG UHDディスプレイで再生することができる。必要な場合、本発明の一実施例は、ディスプレイの前に、受信機のビデオ後処理過程によって一層向上した画質を提供することもできる。
本発明の一実施例によれば、上述したコンテナガマットマッチング過程(container gamut matching)4010、コンテンツガマットマッチング過程(content gamut matching)4020、第1ガマットマッピング過程(gamut mapping(clipping))4030、ビット深度量子化過程(bit depth quantization)4040及び又はガマットリサンプリング過程3020においてガマットリサンプリングメタデータ及び/又はディスプレイ情報を用いることができ、ガマットリサンプリングメタデータはコンテナのカラーガマット、コンテンツのカラーガマットに関する情報を含むことができ、ディスプレイ情報はディスプレイのカラーガマットに関する情報を含むことができる。
図5は、本発明の一実施例に係るビデオ後処理過程(video post−processing)の動作を示す図である。
本発明の一実施例に係るビデオ後処理過程3030は、トーンマッピング過程(tone mapping)5010、伝達曲線過程(transfer curve)5020、及び/又は色相補正過程(color correction matrix)5030を含むことができる。
トーンマッピング過程(tone mapping)5010は、ガマットリサンプリングされたビデオを、ビデオの明るい部分は鮮明に、暗い部分はより明るく変換することができる。
伝達曲線過程(transfer curve)5020は、伝達曲線(transfer curve)を用いて、トーンマップされたビデオを一層向上した画質を有するビデオに変換することができる。
色相補正過程(color correction matrix)5030は、色補正マトリクスを用いて、ビデオを色補正されたビデオに変換することができる。
図6は、本発明の一実施例に係るgamut_resampling_info(payloadsize)を含むSEIメッセージの構造を示す図である。
本発明の一実施例に係るgamut_resampling_info(payloadsize)は、SEIメッセージを送信するパケットのペイロードで伝送することができる。本発明の一実施例によれば、上述したgamut_resampling_info(payloadsize)は、gamut re−sampling information descriptorを意味することができる。
図7は、本発明の一実施例に係るgamut_resampling_info(payloadsize)の構成を示す図である。
本発明の一実施例に係るgamut_resampling_info(payloadsize)は、container_color_gamut_typeフィールド、content_color_gamut_typeフィールド、general_color_primaries()、gamut_resampling_typeフィールド及び/又はgamut_resampling_info()を含むことができる。
container_color_gamut_typeフィールドは、コンテンツを供給するに先立ち、映像の後処理作業(過程)及び伝送の基準となる色表現範囲を示すことができる。本発明の一実施例は、映像後処理作業で使われるカラーガマットが色符号化で使われるカラーガマットと同一であると前提している。本発明の他の実施例は、後処理作業に使われるカラーガマットが色符号化に使われるカラーガマットと異なる場合、それぞれを個別にシグナルし、色符号化に使われるカラーガマットを基準として用いることができる。本発明の一実施例は、標準と定義されたカラーガマットをシグナルすることができ、任意の色表現範囲が使われる場合、このフィールドを0110値に設定した後、RGBW_primaries()でレッド(red)、グリーン(green)、ブルー(blue)、ホワイト(white)の座標をシグナルすることができる。このフィールドが有するフィールド値に関する説明は、後述する。
content_color_gamut_typeフィールドは、原本コンテンツの色表現範囲を示すことができる。このフィールドは、標準と定義されたカラーガマットをシグナルすることができ、任意の色表現範囲が使われる場合、このフィールドを0110値に設定した後、RGBW_primaries()でレッド、グリーン、ブルー、ホワイトの座標をシグナルすることができる。このフィールドが有するフィールド値に関する説明は後述する。
gamut_resampling_typeフィールドは、コンテナのカラーガマットを基準に表現されている色相をコンテンツのカラーガマットを基準に表現した時の値を求めるためのガマットリサンプリングのタイプを示すことができる。このフィールドが有するフィールド値に関する説明は後述する。
general_color_primaries()及びgamut_resampling_info()に関する説明は後述する。
本発明の一実施例によれば、上述したgamut_resampling_info(payloadsize)とgamut_resampling_info(payloadsize)に含まれたgamut_resampling_info()は異なってもよい。
図8は、本発明の一実施例に係るgeneral_color_primaries()の構成を示す図である。
本発明の一実施例によれば、コンテナカラーガマット又はコンテンツカラーガマットのカラーガマットタイプ(color gamut type)が、標準と指定された値ではなく任意の値を使用することを示す場合、送信側は、カラーガマットを定義できる色相の色空間上座標を伝送することができる。本発明の一実施例は、レッド、グリーン、ブルー、ホワイト(R,G,B,W)に基づいて色範囲を定義することができる。また、本発明の他の実施例は、RGB以外の原色(color primary)を用いて色範囲を定義することができ、この場合に対してもgeneral_color_primaries()を用いて表現することができる。
本発明の一実施例に係るgeneral_color_primaries()は、デスクリプタの形態を有することができる。
本発明の一実施例に係るgeneral_color_primaries()は、RGBW_primary_flagフィールド、color_primary_r_xフィールド、color_primary_r_yフィールド、color_primary_g_xフィールド、color_primary_g_yフィールド、color_primary_b_xフィールド、color_primary_b_yフィールド、color_primary_numbers_minus_3フィールド、color_primary_x[i]フィールド、color_primary_y[i]フィールド、white_primary_xフィールド及び/又はwhite_primary_yフィールドを含むことができる。
RGBW_primary_flagフィールドは、任意のカラーガマットを表現する方法を示すことができる。任意の三原色(RGB)に基づいてカラーガマットを示す場合、このフィールドは1値を有し、RGB以外の値に基づいてカラーガマットを示す場合、このフィールドは0値を有することができる。
color_primary_r_xフィールドは、色空間上でレッド(R)色のx座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。
color_primary_r_yフィールドは、色空間上でレッド(R)色のy座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。
color_primary_g_xフィールドは、色空間上でグリーン(G)色のx座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。
color_primary_g_yフィールドは、色空間上でグリーン(G)色のy座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。
color_primary_b_xフィールドは、色空間上でブルー(B)色のx座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。
color_primary_b_yフィールドは、色空間上でブルー(B)色のy座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。ここで、上述した色空間はCIE 1931に該当してもよい。
color_primary_numbers_minus_3フィールドは、RGB以外の原色を用いて色表現範囲を定義する場合、原色の個数を示すことができる。本発明の一実施例は、色座標平面で複数の色相を示すための最小のプライマリ(primary)を3と仮定し、使用可能な原色値の個数を3<=color_primary_numbers_minus_3+3<=18と定義することができる。
color_primary_x[i]フィールドは、RGB以外の原色を用いて色表現範囲を定義する場合、i番目の原色の色空間上x座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。
color_primary_y[i]フィールドは、RGB以外の原色を用いて色表現範囲を定義する場合、i番目の原色の色空間上y座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。
white_primary_xフィールドは、色空間上ホワイト色のx座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。
white_primary_yフィールドは、色空間上ホワイト色のy座標を示すことができる。このフィールドは、0〜1範囲の値に対して2進化した値を示すことができ、基準となる値との差値を示すことができる。
図9は、本発明の一実施例に係るgamut_resampling_info()の構成を示す図である。
本発明の一実施例に係るgamut_resampling_info()は、デスクリプタの形態を有することができ、上述した本発明の一実施例に係るgamut_resampling_info(payloadsize)に含まれてもよい。
本発明の一実施例に係るgamut_resampling_info()は、color_space_typeフィールド、RGB_to_XYZ_mapping_function_flagフィールド、XYZ_to_RGBprime_mapping_function_flagフィールド、number_of_coeffフィールド、RGB_XYZ_mapping_function_coeff[i]フィールド、XYZ_to_RGBprime_mapping_function_coeff[i]フィールド、gamut_resampling_function_coeff[i]フィールド、LUT_typeフィールド及び/又はLUT_info()を含むことができる。
color_space_typeフィールドは、ガマットリサンプリング時に用いられる任意の色空間を示すことができる。このフィールドが有するフィールド値に関する説明は後述する。
RGB_to_XYZ_mapping_function_flagフィールドが1値を有する場合、このフィールドは、現在カラーガマットを基準にRGBで表現された値をXYZに変換するマッピング関数(mapping function)の要素が直接シグナリングされることを示すことができる。このフィールドが0値を有する場合、このフィールドは、与えられたcolor_space_typeに対してあらかじめ定められた値を使用したり、又は受信機で類推してマッピングを行うことを示すことができる。本発明の一実施例によれば、このフィールドは、RGB to XYZではなくYCbCr to XYZ又はその他のカラーに対するマッピング関数を表現するためにも用いることができる。
XYZ_to_RGBprime_mapping_function_flagフィールドが1値を有する場合、このフィールドは、XYZで表現された色相を目標カラーガマットを基準に表現されたRGB値に変換するマッピング関数(mapping function)の要素が直接シグナリングされることを示すことができる。このフィールドが0値を有する場合、このフィールドは、与えられたcolor_space_typeに対してあらかじめ定められた値を使用したり、又は受信機で類推してマッピングを行うことを示すことができる。本発明の一実施例によれば、このフィールドは、RGB to XYZではなくYCbCr to XYZ又はその他のカラーに対するマッピング関数を表現するためにも用いることができる。
number_of_coeffフィールド(RGB_to_XYZ_mapping_function_flagループ内に存在)は、現在カラーガマットを基準にRGBで表現された値をXYZに変換するマッピング関数の要素(係数)の個数を示すことができる。
RGB_XYZ_mapping_function_coeff[i]フィールドは、現在カラーガマットを基準にRGBで表現された値をXYZに変換するマッピング関数の要素を示すことができる。本発明の一実施例は、線形マトリクス(linear matrix)を用いて変換する場合を仮定しており、各要素は、後述する図面のように一つの変換式を構成することができる。
number_of_coeffフィールド(XYZ_to_RGBprime_mapping_function_flagループ内に存在)は、色空間上でXYZで表現された色相を、目標カラーガマットを基準に表現されたRGB値に変換するマッピング関数の要素の個数を示すことができる。
XYZ_to_RGBprime_mapping_function_coeff[i]フィールドは、色空間上でXYZで表現された色相を、目標カラーガマットを基準に表現されたRGB値に変換するマッピング関数の要素を示すことができる。本発明の一実施例は、線形マトリクスを用いて変換する場合を仮定しており、各要素は、後述する図面のように一つの変換式を構成することができる。
number_of_coeffフィールド(gamut_resampling_type==’0010’ループ内に存在)は、単一変換式に基づいて、現在カラーガ
マットを基準にRGBで表現された値を目標カラーガマットを基準に表現されたR’G
’B’値に変換するマッピング関数の要素の個数を示すことができる。
gamut_resampling_function_coeff[i]フィールドは、単一変換式に基づいて、現在カラーガマットを基準にRGBで表現された値を目標カラーガマットを基準に表現されたR’G’B’値に変換するマッピング関数の要素
の個数を示すことができる。本発明の一実施例によれば、このフィールドは、受信端で別の処理無しでコンテンツプロバイダ(content provider)が提供する変換をそのまま利用する場合に用いることができる。本発明の一実施例は、線形マトリクスを用いて変換する場合を仮定しており、各要素は、後述する図面のように一つの変換式を構成することができる。
LUT_typeフィールドは、gamut_resampling_typeが0011である場合に用いられるLUT(look up table)の種類を示すことができる。本発明の一実施例に係るLUTは、カラーマッピング(color mapping)のために用いられる方法の一つであり、入力値(input value)及び出力値(output value)を一対一マッチさせるテーブルを意味することができる。このフィールドが有するフィールド値に関する説明は後述する。
LUT_info()は、上述したLUT_typeによるLUTの構成要素を含むことができる。
図10は、本発明の一実施例に係るcontainer_color_gamut_typeの構成を示す図である。
本発明の一実施例に係るcontainer_color_gamut_typeフィールドは、本発明の一実施例に係るgamut_resampling_info(payloadsize)に含めることができる。
本発明の一実施例に係るcontainer_color_gamut_typeが0000であれば、カラーガマットはBT.601であることを示し、0001であればBT.709、0010であればDCI−P3、0011であればBT.2020(NCL)、0100であればBT.2020(CL)、0101であればXYZ、0110であれば、カラーガマットはユーザの定義に従うことを示すことができる。
図11は、本発明の一実施例に係るcontent_color_gamut_typeの構成を示す図である。
本発明の一実施例に係るcontent_color_gamut_typeフィールドは、本発明の一実施例に係るgamut_resampling_info(payloadsize)に含めることができる。
本発明の一実施例に係るcontent_color_gamut_typeが0000であれば、カラーガマットはBT.601であることを示し、0001であればBT.709、0010であればDCI−P3、0011であればBT.2020(NCL)、0100であればBT.2020(CL)、0101であればXYZ、0110であれば、カラーガマットはユーザの定義に従うことを示すことができる。
図12は、本発明の一実施例に係るgamut_resampling_typeの構成を示す図である。
本発明の一実施例に係るgamut_resampling_typeフィールドは、本発明の一実施例に係るgamut_resampling_info(payloadsize)に含めることができる。
本発明の一実施例に係るgamut_resampling_typeが0000である場合、受信機は、コンテナカラーガマット及びコンテンツカラーガマットの情報に基づいて受信機で類推する方法、又はあらかじめ約束された方法(pre−defined gamut re−sampling)を用いて、ガマットリサンプリングを行うことができる。0001乃至0011である場合、受信機は、前述したgamut_resampling_info()に定義された方法を用いてガマットリサンプリングを行うことができる。0001である場合(gamut re−sampling functions)、受信機は、ガマットリサンプリングを2段階(RGB to XYZ及びXYZ to RGB)に区別し、各段階に対するマッピング関数を用いてガマットリサンプリングを行うことができる。この時、XYZを表現する色空間が指定されてもよい。
gamut_resampling_typeが0010である場合(single function conversion)、受信機は、全過程に対して任意のマトリクスで表現して伝達できる方法を用いて ガマットリサンプリングを行うことができる。本発明の一実施例によれば、この場合、受信機は、現在カラーガマットに基づくRGB値を、中途にXYZへと変換することなく、新しいカラーガマットに基づくR’G
’B’値に直ちにガマットリサンプリングすることができる。
gamut_resampling_typeが0011である場合(Look Up Table)、受信機は、伝達されたLUT(Look Up Table)を用いてガマットリサンプリングを行うことができる。
本発明の一実施例によれば、gamut_resampling_typeが0010又は0011ではなく0001値を有する場合、RGBからXYZへの変換式及びXYZからRGBへの変換式がそれぞれ与えられるが、このように別の過程でそれぞれの変換式を詳しく伝達することによって、受信機は、各段階に適切な画像補正(image enhancement)を追加することができ、これによって、一層向上した画質の映像を取得することができる。
図13は、本発明の一実施例に係るcolor_space_typeの構成を示す図である。
本発明の一実施例に係るcolor_space_typeフィールドは、本発明の一実施例に係るgamut_resampling_info()に含めることができる。
本発明の一実施例に係るcolor_space_typeが0000であれば、本発明の一実施例に係るガマットリサンプリング時にCIE 1931色空間が用いられることを示すことができる。
color_space_typeが0001であれば、本発明の一実施例に係るガマットリサンプリング時にCIE Lab色空間が用いられることを示すことができる。
color_space_typeが0010であれば、本発明の一実施例に係るガマットリサンプリング時にCIE Luv色空間が用いられることを示すことができる。
図14は、本発明の一実施例に係るガマットリサンプリング過程で、現在カラーガマットを基準にRGBで表現された値をXYZに変換するマッピング関数(mapping function)による変換式を示す図である。
本発明の一実施例は、同図に示すマトリクス変換式を用いて、現在カラーガマットを基準にRGBで表現された値をXYZに変換することができる。
図15は、本発明の一実施例に係るガマットリサンプリング過程で、XYZで表現された色相を目標カラーガマットを基準に表現されたRGB値に変換するマッピング関数による変換式を示す図である。
本発明の一実施例は、同図に示すマトリクス変換式を用いて、XYZで表現された色相を目標カラーガマットを基準に表現されたRGB値に変換することができる。
図16は、本発明の一実施例に係るガマットリサンプリング過程で、単一変換式に基づいて、現在カラーガマットを基準にRGBで表現された値を目標カラーガマットを基準に表現されたR’G’B’値に変換するマッピング関数による変換式を示す図である
本発明の一実施例は、同図に示すマトリクス変換式を用いて、現在カラーガマットを基準にRGBで表現された値を目標カラーガマットを基準に表現されたR’G’B’値
に変換することができる。
図17は、本発明の一実施例に係るLUT_typeの構成を示す図である。
本発明の一実施例によれば、全色相に対して入力値と出力値をマッチさせるLUTの場合にはデータサイズが極めて大きいため、これをメタデータの形態で伝達することは容易でない。したがって、本発明の一実施例によれば、色相の3D座標を全て利用するのではなく、各チャネルに独立してマッチさせる方法又は基準点に基づいてLUT構成要素を推定する方法を用いることができる。
本発明の一実施例に係るLUT_typeが0000であれば、各チャネルに独立してマッチングをするタイプのLUTが用いられることを示すことができ、0001であれば、3D座標を全て利用するタイプのLUTが用いられることを示すことができ、0010であれば、基準点に基づいてLUT構成要素を推定するタイプのLUTが用いられることを示すことができる。
図18は、本発明の一実施例に係るPMT(Program Map Table)の構成を示す図である。
本発明の一実施例によれば、前述したgamut_resampling_info(payloadsize)を用いたUHDサービスのために、SEIメッセージでメタデータを伝送する及び/又はPMTでUHDサービスに対するシグナリングをする必要がある。さらに、後述するが、本発明の一実施例は、EIT(Event Information Table)を用いてサービスレベルでUHDサービス及び/又はgamut_resampling_info(payloadsize)をシグナルすることができる。
本発明の一実施例に係るPMTは、table_idフィールド、section_syntax_indicatorフィールド、section_lengthフィールド、program_numberフィールド、version_numberフィールド、current_next_indicatorフィールド、section_numberフィールド、last_section_numberフィールド、PCR_PIDフィールド、program_info_lengthフィールド、descriptor()、stream_typeフィールド、elementary_PIDフィールド、ES_info_lengthフィールド、descriptor()及び/又はCRC_32フィールドを含む。
table_idフィールドは、テーブルのタイプを識別する。table_idフィールドは、当該テーブルセクションがPMTを構成するセクションであることを示す役割を担うことができる。
section_syntax_indicatorフィールドは、当該フィールドに続くテーブルセクションのフォーマットを示す。当該フィールドの値が0であれば、当該テーブルセクションはshortフォーマットであることを示す。当該フィールドの値が1であれば、当該テーブルセクションは一般的なlongフォーマットに従う。
section_lengthフィールドは、当該テーブルセクションの長さを示す。section_lengthフィールドは、当該フィールド以降から当該テーブルセクションの終わりまでの長さを示すため、当該テーブルセクションの実際の長さは、sercion_lengthフィールドが示す値に3バイトを足した値になり得る。
program_numberフィールドは、トランスポートストリーム内に存在する各プログラムサービス又は仮想チャネル(virtual channel)を識別する。
version_numberフィールドは、プライベートテーブルセクション(private table section)のバージョンナンバーを示す。受信機は、当該フィールド及び後述するcurrent_next_indicatorフィールドを用いて、メモリに保存されているテーブルセクションのうち、最も最近のものを見いだすことができる。
current_next_indicatorフィールドが示す値が1であれば、現在伝送されるテーブルが有効であることを示し、0であれば、現在伝送されるテーブルが現在は有効でないが、将来に有効であることを示す。
section_numberフィールドは、当該セクションが当該テーブルの何番目のセクションであるかを示す。
last_section_numberフィールドは、当該テーブルを構成しているセクションのうち、最後のセクションの番号を示す。
PCR_PIDフィールドは、プログラムサービスのためのPCR(Program Clock Reference)が存在するパケットID(packet ID)を示す。
program_info_lengthフィールドは、後続するプログラム情報(program_info)を示すデスクリプタの長さを示す。
descriptor()は、当該テーブルセクションに該当するプログラムに関する情報を示すデスクリプタを意味する。本発明の一実施例によれば、このデスクリプタは、UHDサービスの種類を識別するUHD_program_info_descriptor()を含むことができる。
stream_typeフィールドは、当該テーブルが説明しているプログラムを構成する各単位ストリームの種類を示す。
elementary_PIDフィールドは、当該テーブルが説明しているプログラムを構成する各単位ストリームのパケットID(packet ID)を示す。
ES_info_lengthフィールドは、後続する各単位ストリームに関する情報(ES_info)を示すデスクリプタの長さを示す。
descriptor()は、当該テーブルが説明しているプログラムを構成する単位ストリームのうち、一つの単位ストリームに関する情報を示すデスクリプタを意味する。本発明の一実施例によれば、このデスクリプタは、前述したgamut_resampling_info(payloadsize)を含むデスクリプタ及び/又は前述したgamut_resampling_info()を含むデスクリプタを含むことができる。
CRC_32フィールドは、当該テーブルセクションに含まれたデータに誤りがあるかを確認するために用いられるCRC値を示す。
本発明の一実施例に係るPMTを、MPEG−TSを介して帯域内(In band)伝送することができ、PMTを含むPSI情報全体を、xml形態でIPを介して伝送することができる。
図19は、本発明の一実施例に係るUHD_program_info_descriptor()の構成を示す図である。
本発明の一実施例に係るUHD_program_info_descriptor()は、descriptor_tagフィールド、descriptor_lengthフィールド及び/又はUHD_service_typeフィールドを含むことができる。
descriptor_tagフィールドは、このデスクリプタがUHDサービスのタイプ情報を含むデスクリプタであることを示すことができる。
descriptor_lengthフィールドは、このデスクリプタの長さを示すことができる。
UHD_service_typeフィールドは、UHDサービスの種類に関する情報を提供することができる。このフィールドが有するフィールド値に関する説明は後述する。
図20は、本発明の一実施例に係るUHD_service_typeの構成を示す図である。
本発明の一実施例に係るUHD_service_typeフィールドは、前述したUHD_program_info_descriptor()に含めることができる。
本発明の一実施例に係るUHD_service_typeが0000であれば、提供されるサービスがUHD1(4K)サービスであることを示すことができる。
UHD_service_typeが0001であれば、提供されるサービスがUHD2(8K)サービスであることを示すことができる。
UHD_service_type1000乃至1111は、ユーザの定義に従って用いることができる。本発明の一実施例によれば、UHD_service_typeは、UHDサービスの品質(quality)によって区別されたサービスを示すために用いることができる。本発明の一実施例によれば、UHD_service_typeが1010であれば、ガマットリサンプリングに基づくUHD1サービスであることを示すことができる。
図21は、本発明の一実施例に係るEIT(Event Information Table)の構成を示す図である。
本発明の一実施例は、EIT(Event Information Table)を用いてサービスレベルでUHDサービス及び/又はgamut_resampling_info(payloadsize)をシグナルすることができる。
本発明の一実施例に係るEITは、table_idフィールド、section_syntax_indicatorフィールド、section_lengthフィールド、service_idフィールド、version_numberフィールド、current_next_indicatorフィールド、section_numberフィールド、last_section_numberフィールド、transport_stream_idフィールド、original_network_idフィールド、segment_last_section_numberフィールド、last_table_idフィールド、event_idフィールド、start_timeフィールド、durationフィールド、running_statusフィールド、free_CA_modeフィールド、descriptors_loop_lengthフィールド、descriptor()及び/又はCRC_32フィールドを含む。
table_idフィールドは、テーブルのタイプを識別する。table_idフィールドは、当該テーブルセクションがEITを構成するセクションであることを示す役割を担うことができる。
section_syntax_indicatorフィールドは、当該フィールドに続くテーブルセクションのフォーマットを示す。当該フィールドの値が0であれば、当該テーブルセクションはshortフォーマットであることを示す。当該フィールドの値が1であれば、当該テーブルセクションは一般的なlongフォーマットに従う。
section_lengthフィールドは、当該テーブルセクションの長さを示す。section_lengthフィールドは、当該フィールドの以降から当該テーブルセクションの終わりまでの長さを示すことができる。
service_idフィールドは、トランスポートストリーム内に存在する各サービスを識別する。service_idフィールドは、PMTでprogram_numberフィールドとその機能が同一であってもよい。
version_numberフィールドは、プライベートテーブルセクション(private table section)のバージョンナンバーを示す。受信機は、当該フィールドと後述するcurrent_next_indicatorフィールドを用いて、メモリに保存されているテーブルセクションのうち最も最近のものを見いだすことができる。
current_next_indicatorフィールドが示す値が1であれば、現在伝送されるテーブルが有効であることを示し、0であれば、現在伝送されるテーブルが現在は有効でないが、将来に有効であることを示す。
section_numberフィールドは、当該セクションが当該テーブルの何番目のセクションであるかを示す。
last_section_numberフィールドは、当該テーブルを構成しているセクションのうち、最後のセクションの番号を示す。
transport_stream_idフィールドは、当該テーブルで説明しようとするトランスポートストリーム(TS)を識別する。
original_network_idフィールドは、当該テーブルで記述するサービス又はイベントを送信した最初の放送局を識別することができる。
segment_last_section_numberフィールドは、sub tableが存在する場合、該当のセグメントの最後のセクションナンバーを示す。sub tableに分けられない場合、当該フィールドが示す値は、last_section_numberフィールドが示す値と同じ値を示すことができる。
last_table_idフィールドは、用いられた最後のtable_idを示す。
event_idフィールドは、それぞれのイベントを識別し、一つのサービス内で唯一の値を有する。
start_timeフィールドは、該当のイベントの開始時間を示す。
durationフィールドは、該当のイベントの持続時間を示す。例えば、1時間45分30秒間持続するプログラムであれば、durationフィールドは、0x014530値を示すことができる。
running_statusフィールドは、該当のイベントの状態を示す。
free_CA_modeフィールドが示す値が0であれば、サービスを構成するコンポーネントストリームがスクランブルされていないことを示し、1であれば、一つ以上のストリームに対する接近がCAシステムによって調節されることを示す。CAシステムは、Conditional Access Systemの略語であり、放送の視聴が契約者に限られるように、放送コンテンツの暗号化機能、及び契約者だけが暗号を解いて放送コンテンツを視聴できる機能を提供するシステムを意味する。
descriptors_loop_lengthフィールドは、当該フィールドに続くデスクリプタの長さを合算した値を示す。
descriptor()は、各イベントに対して記述するデスクリプタを意味する。本発明の一実施例によれば、このデスクリプタは、UHDサービスの種類を示すUHD_program_info_descriptor()及び/又はgamut_resampling_info(payloadsize)を含むデスクリプタを含むことができる。ここで、上述したgamut_resampling_info(payloadsize)を含むデスクリプタから、本発明の一実施例はイベントレベルでカラーガマットの変換のためのメタデータを含むか否かを確認することができ、受信機で該当のカラーガマットに基づくコンテンツを収容可能か否かを判断することができる。本発明の一実施例によれば、このデスクリプタに含まれる上述した情報は、ケーブル放送の場合にAEITに含まれてもよい。
CRC_32フィールドは、当該テーブルセクションに含まれたデータに誤りがあるか否か確認するために用いるCRC値を示す。
本発明の一実施例に係るEITは、TSによってテーブル(table)の形態で伝送することができ、xml形態でIPストリームによって伝送することができる。
本発明の一実施例は、EITのUHD_program_info_descriptor()に含まれたUHD_service_typeが1010(ガマットリサンプリングに基づくUHD1(4K)サービス)であれば、メタデータを用いたガマットリサンプリング可能であることが分かる。
本発明の他の実施例は、EITのUHD_program_info_descriptor()に含まれたUHD_service_typeが0000(UHD1(4K)サービス)であれば、gamut_resampling_info(payloadsize)を含むデスクリプタの存在有無を確認することによって、メタデータを用いたガマットリサンプリングが可能であることが分かる。
図22は、本発明の一実施例に係るgamut_resampling_info_descriptor()の構成を示す図である。
本発明の一実施例によれば、gamut_resampling_info_descriptor()は、前述したgamut_resampling_info(payloadsize)を含むデスクリプタと同一であってもよい。
本発明の一実施例に係るgamut_resampling_info_descriptor()は、descriptor_tagフィールド、descriptor_lengthフィールド及び/又はgamut_resampling_metadata()を含むことができる。
descriptor_tagフィールドは、このデスクリプタがgamut_resampling_metadata()を含むデスクリプタであることを示すことができる。
descriptor_lengthフィールドは、このデスクリプタの長さを示すことができる。
gamut_resampling_metadata()は、ガマットリサンプリング関連情報を含み、これに関する説明は後述する。
本発明の一実施例は、EITでgamut_resampling_info_descriptor()を用いてガマットリサンプリング関連情報を伝達する場合、コンテナカラーガマット及び/又はコンテンツカラーガマットを伝達することによって、将来時点に伝送されるプログラムに対する受信及び動作についてあらかじめ判断することができる。
図23は、本発明の一実施例に係るgamut_resampling_metadata()の構成を示す図である。
本発明の一実施例に係るgamut_resampling_metadata()は、前述したgamut_resampling_info(payloadsize)と同一であってもよい。
本発明の一実施例に係るgamut_resampling_metadata()は、container_color_gamut_typeフィールド、content_color_gamut_typeフィールド、general_color_primaries()及び/又はgamut_resampling_typeフィールドを含むことができ、図示してはいないが、gamut_resampling_info()をさらに含むことができる。
本発明の一実施例に係るgamut_resampling_metadata()が含むフィールドのうち、前述したgamut_resampling_info(payload)が含むフィールドと同じ名称を有するフィールドは、gamut_resampling_info(payload)に含まれた同じフィールドと同じ意味を有することができる。
本発明の一実施例に係るgamut_resampling_metadata()は、gamut_resampling_metadata(payloadsize)と同じ意味を有することができる。
図24は、本発明の一実施例に係る送信機の動作を示す図である。
本発明の一実施例によれば、同図は、狭い色表現範囲(例えば、REC.709)ベースのUHDカメラで取得したビデオを、広い色表現範囲(例えば、BT.2020)ベースの色相で表して送信する送信機の動作を示す図である。
本発明の一実施例に係る送信機の動作は、UHDカメラ(UHD camera)過程24010、ガマットリサンプリング(Gamut re−sampling)過程24020、カラーレンダリング(Color rendering)過程24030、カラーエンコーディング(Color encoding)過程24040、メタデータジェネレータ(Metadata generator)過程24050、及び/又はビデオエンコーディング(Video encoding)過程24060を含むことができる。
UHDカメラ(UHD camera)過程24010で、本発明の一実施例は、REC.709カラーガマットを有するUHDカメラで撮影したビデオを取得することができる。
ガマットリサンプリング(Gamut re−sampling)過程24020で、送信機は、REC.709カラーガマットを有するUHDカメラで取得したビデオに対して、このビデオが適用されたREC.709カラーガマットを、映像補正及び伝送のための色表現範囲であるBT.2020カラーガマットに変換することができる。変換されたBT.2020カラーガマットは、最終受信端で映像を再生する際に目標とするディスプレイのカラーガマットを意味することができる。本発明の一実施例によれば、この過程で用いられた変換に対する逆変換関連情報は、メタデータの形態で受信端に伝送することができる。上述した逆変換関連情報は、目標とするディスプレイのカラーガマット(BT.2020)を満たさないレガシーディスプレイのために用いることができる。この過程は、本発明の一実施例に係るカラーガマットリサンプリング部で行うことができる。
カラーレンダリング(Color rendering)過程24030で、前の過程でカラーガマットが変換されたコンテンツは、スタジオ/コンテンツプロバイダ/プロダクション(studio/content provider/production)端で行う映像補正及び編集過程を経ることができる。この過程は、ガマットリサンプリング過程の後に位置すればよく、この過程で生成されたビデオ関連情報は、カラリストメタデータ(colorist metadata)(又はcolorist information)で伝送することができる。この過程は、本発明の一実施例に係るカラーガマットリサンプリング部で行うことができる。
カラエンコーディング(Color encoding)過程24040で、送信機は、カラー映像を伝送するためにRGBをYCbCrに変換することができる。このとき、前述したガマットリサンプリングによって変換されたBT.2020カラーガマットを基準に変換を行うことができる。本発明の一実施例によれば、この過程でRGB to YCbCr変換情報及び/又はカラーガマット情報をビデオメタデータ(VUI)で伝送することができる。上述した情報は、同図に示す色符号化情報(color encoding information)に含まれてもよい。この過程は、本発明の一実施例に係るエンコーダで行うことができる。
メタデータジェネレータ(Metadata generator)過程24050では、ガマットリサンプリング(Gamut re−sampling)過程24020で生成されたガマットリサンプリングに用いられた変換に対する逆変換情報(gamut re−sampling function)、カラーレンダリング(Color rendering)過程24030で生成されたカラリスト情報(colorist information)、及び/又はカラーエンコーディング(Color encoding)過程24040で生成されたRGB to YCbCr変換情報及び/又はカラーガマット情報を含む色符号化情報(color encoding information)を含むメタデータを生成することができる。本発明の一実施例によれば、この過程によってガマットリサンプリングメタデータ、VUIなどを生成することができる。この過程は、本発明の一実施例に係るシグナリング情報生成部で行うことができる。
ビデオエンコーディング(Video encoding)過程24060で、送信機は、UHD映像の伝送のために、ビデオコーデックを用いて圧縮を行うことができる。本発明の一実施例によれば、ガマットリサンプリングメタデータ、VUIなどを含む映像画質関連メタデータがビデオソースに含まれてもよい。この過程は、本発明の一実施例に係るエンコーダで行うことができる。
上述したREC.709及びBT.2020は本発明の一実施例であり、他の標準の他のカラーガマットが用いられてもよい。
図25は、本発明の一実施例に係る受信機の構造及び動作を示す図である。
本発明の一実施例によってWCGビデオが伝送される場合、受信機が信号を分析し、ガマットリサンプリングを用いて映像を出力する全過程は、次のとおりである。
本発明の一実施例に係る受信機は、受信されたPMTのUHD_program_info_descriptorを用いて、原本UHDTV放送を構成するためにさらに受け取るべき別途のサービス又はメディアがあるか把握することができる。受信機は、UHD_program_info_descriptorに含まれたUHD_service_typeが1010である場合、SEIメッセージで伝達される追加情報があることを把握することができる。又は、受信機は、UHD_program_info_descriptorに含まれたUHD_service_typeが0000又は0001である場合、EITで伝達される追加情報があることを把握することができる。
本発明の一実施例は、VUIに含まれたカラーガマット情報に基づいてカラーガマットを判断することができるが、VUIに含まれたカラーガマットが受信機のディスプレイで表現可能であると判断される場合、受信機は、ビデオ後処理過程を経た後、最終的にコンテンツをディスプレイすることができる。一方、VUIに含まれたカラーガマット情報がディスプレイで表現できる色表現範囲を超える場合、本発明の一実施例は、SEIメッセージ又はEITなどで伝送される追加情報を用いて、実際コンテンツが表現するカラーガマットを把握し、これに基づいてディスプレイに適するようにカラーガマットを変換することができる。
本発明の一実施例は、gamut_resampling_info(payloadsize)を含むSEIメッセージ又はEITのgamut_resampling_info_descriptorで実際コンテンツのカラーガマット情報、色符号化時のカラーガマット情報(コンテナカラーガマット情報)及び/又はガマットリサンプリング情報を受信することができる。
本発明の一実施例は、コンテンツのカラーガマットがディスプレイで表現するに適した範囲であると判断される場合、及び/又はgamut_resampling_typeが示すガマットリサンプリング方式が受信機で処理可能であると判断される場合、ガマットリサンプリングを行うことができる。この時、本発明の一実施例は、gamut_resampling_typeによってcontainer_color_gamut_typeからcontent_color_gamut_typeに変換する指定された関数を受信機で直接処理するようにしたり、製作者が直接送信した関数の係数を用いてカラーガマットを変換することができる。なお、本発明の一実施例によれば、必要な場合、受信機は、ガマットリサンプリング過程中に色感向上のためのカラ強化(color enhancement)処理を行うことができる。本発明の一実施例は、content_color_gamut_typeがディスプレイのカラーガマットに比べて広い領域を有すると判断される場合、受信されるコンテンツをWCGコンテンツと判断することができ、WCHコンテンツにガマットリサンプリングを適用してクリッピングと同じ効果を得ることができる。又は、本発明の一実施例は、WCGコンテンツをレガシーディスプレイで適切に表現するための別の作業を行うことができる。
本発明の一実施例によれば、受信機は、カラーガマットが変換されたコンテンツ映像の各ピクセル値に対してビット深度量子化過程を行うことができる。本発明の一実施例に係るビット深度量子化は、受信機のディスプレイのビット深度内でコンテンツを適切に表現するために行うことができる。また、ビット深度量子化過程は、ビデオ後処理過程であるトーンマッピング(tone mapping)及び/又は伝達曲線(transfer curve)と関連付いて動作することができる。
本発明の一実施例によれば、受信機は、コンテンツを最終的にディスプレイする前にビデオ後処理過程(video post processing)を行い、一層向上した色感又は明るさを有する映像を出力することができる。本発明の一実施例によれば、このとき、SEIメッセージに含まれたcontent_color_gamut_type又はRGBWの原色値を用いることができる。
本発明の一実施例に係る受信機は、チューナ及び復調器(tuner and demodulator)25010、VSBデコーダ(VSB decoder)25020、デマチルプレクサ(demux)25030、セクションデータプロセッサ(section data processor)25040、デコーダ(decoder)25050、ガマットマッチングユニット(gamut matching unit)25060、及び/又はガマットマッピングユニット(gamut mapping unit)25070を含むことができる。
チューナ及び復調器25010は、送信側から放送信号を受信して復調することができる。本発明の一実施例によれば、UHDビデオ又はガマットリサンプリングに基づくUHDビデオが放送信号に含まれてもよい。
VSBデコーダ25020、VSB変調された放送信号をデコードすることができる。
デマルチプレクサ25030は、多重化された放送信号に含まれたビデオデータ、オーディオデータ及びシグナリングデータを抽出することができる。
セクションデータプロセッサ25040、デマルチプレクサ25030で抽出されたセクションデータをパース及び/又は処理することができる。本発明の一実施例によれば、上述したセクションデータは、PMT(program map table)、VCT(virtual channel table)、EIT(event information table)、SDT(service description table)などを含むことができる。
デコーダ25050は、デマルチプレクサ25030で抽出されたビデオ又はオーディオデータをデコードすることができる。
ガマットマッチングユニット25060は、VUI又はSEIメッセージで伝達されたコンテナのカラーガマットを、ディスプレイのカラーガマットと比較することができる。このとき、VUI内に定義されたcolour_primariesを用いたり、又は前述したcontainer_color_gamut_typeを用いることができる。受信機が伝達されたコンテナのカラーガマットを表現できないと判断される場合、すなわち、受信機のディスプレイがレガシーディスプレイであると判断される場合、受信機は、受信された映像を追加処理過程によって受信機のレガシーディスプレイに適した映像に変換することができる。コンテナカラーガマットがディスプレイで表現可能であると判断される場合、コンテンツはBT.2020ベースのUHDビデオ25090に該当し得る。
ガマットマッピングユニット25070は、WCGディスプレイを支援するために広い範囲のカラーガマットで表現されたコンテンツを、本来の色表現範囲で再び表すことができる。これに関する詳細な説明は前述した。本発明の一実施例によってカラーガマットが変換されたコンテンツはREC.709ベースのUHDビデオ25080に該当し得る。
図26は、本発明の一実施例に係る放送信号の受信方法を示す図である。
本発明の一実施例は、次のような手順で放送信号を受信することができる。まず、本発明の一実施例に係る受信機は、第1カラーガマットベースのコンテンツデータ、及び該第1カラーガマットベースのコンテンツデータに対するカラーガマットリサンプリング情報を含むシグナリング情報を受信することができる(S26010)。本発明の一実施例に係る受信側で用いられる第1カラーガマット及び第2カラーガマットは、送信側で用いられる第1カラーガマット及び第2カラーガマットと異なる意味を有することができる。本発明の一実施例に係る受信側で、第1カラーガマットはコンテナカラーガマットを意味するものであり、コンテンツデータの編集及び/又は伝送フォーマットによるカラーガマットを意味することができ、第2カラーガマットは、本来のコンテンツのカラーガマット又はディスプレイのカラーガマットを意味することができる。一方、本発明の一実施例に係る送信側で用いられる第1カラーガマットは、本来のコンテンツのカラーガマットを意味することができ、第2カラーガマットはコンテナのカラーガマットを意味することができる。したがって、本発明の一実施例に係る受信側で、第1カラーガマットはBT.2020カラーガマットを表すことができ、第2カラーガマットはREC.709カラーガマットを表すことができる。これに関する詳細な説明は、図2、図3、図4、図6、図7、図25の説明部分で前述した。次に、本発明の一実施例に係る受信機は、受信されたシグナリング情報及び第1カラーガマットベースのコンテンツデータをそれぞれデコードすることができる(S26020)。これに関する詳細な説明は、図3、図4、図6、図7、図25の説明部分で前述した。次に、本発明の一実施例に係る受信機は、デコードされたシグナリング情報に基づいて、デコードされた第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングして第2カラーガマットベースのディスプレイで出力したり、又はデコードされた第1カラーガマットベースのコンテンツデータを第1カラーガマットベースのディスプレイで出力することができる(S26030)。本発明の一実施例に係る第2カラーガマットベースのディスプレイは、レガシーディスプレイと命名することができ、REC.709カラーガマットベースのディスプレイを表すことができる。本発明の一実施例に係る第2カラーガマットベースのディスプレイは、WCGを表現できるディスプレイを意味することができ、BT.2020カラーガマットベースのディスプレイを表すことができる。これに関する詳細な説明は、図3、図4、図25の説明部分で前述した。
本発明の他の実施例によれば、上述したカラーガマットリサンプリング情報は、第1カラーガマットに関する情報、第2カラーガマットに関する情報、リサンプリングの方式を示すカラーガマットリサンプリングタイプ情報、及び/又はカラーガマットリサンプリングタイプ情報によるカラーガマットリサンプリングタイプの詳細情報を含むことができる。本発明の一実施例によれば、受信側で、第1カラーガマットに関する情報は、container_color_gamut_type及び/又はgeneral_color_primaries()を含むことができ、第2カラーガマットに関する情報は、content_color_gamut_type及び/又はgeneral_color_primaries()を含むことができる。本発明の一実施例に係るカラーガマットリサンプリングタイプ情報は、gamut_resampling_typeを意味することができ、カラーガマットリサンプリングタイプの詳細情報は、gamut_resampling_info()を意味することができる。これに関する詳細な説明は、図6乃至図17の説明部分で前述した。
本発明の他の実施例によれば、第1カラーガマットに関する情報は、第1カラーガマットのタイプを示す情報、及び/又は第1カラーガマットが既存に定義されたカラーガマットでない場合、第1カラーガマットを定義するための基準色相の色空間上の座標情報を含むことができ、第2カラーガマットに関する情報は、第2カラーガマットのタイプを示す情報、及び/又は第2カラーガマットが既存に定義されたカラーガマットでない場合、第2カラーガマットを定義するための基準色相の色空間上の座標情報を含むことができる。本発明の一実施例に係るカラーガマットは、既存に標準と定義されたカラーガマットに該当してもよく、任意に定義されたカラーガマットに該当してもよい。本発明の一実施例に係る受信側で、別途に第1カラーガマットのタイプを示す情報はcontainer_color_gamut_typeを意味することができ、第1カラーガマットが既存に定義されたカラーガマットでない場合、第1カラーガマットを定義するための基準色相の色空間上の座標情報は、general_color_primaries()に含まれた座標情報を意味することができる。本発明の一実施例に係る受信側で、第2カラーガマットのタイプを示す情報はcontent_color_gamut_typeを意味することができ、第2カラーガマットが既存に定義されたカラーガマットでない場合、第2カラーガマットを定義するための基準色相の色空間上の座標情報は、general_color_primaries()に含まれた座標情報を意味することができる。これに関する詳細な説明は、図7、図8の説明部分で前述した。
本発明の他の実施例によれば、カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを、カラーガマットの影響を受けない中立的な色空間上の値に変換し、変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換する方式である場合、カラーガマットリサンプリングタイプの詳細情報は、中立的な色空間のタイプを示す情報、第1カラーガマットベースのコンテンツデータを中立的な色空間上の値に変換するために用いる変換式の係数情報、及び/又は変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含むことができる。本発明の一実施例に係る中立的な色空間のタイプを示す情報は、color_space_typeを意味することができ、第1カラーガマットベースのコンテンツデータを中立的な色空間上の値に変換するために用いる変換式の係数情報は、RGB_XYZ_mapping_function_coeff[i]を意味することができ、変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報は、XYZ_to_RGBprime_mapping_function_coeff[i]を意味することができる。これに関する詳細な説明は、図7、図9の説明部分で前述した。
本発明の他の実施例によれば、カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに直接変換する方式である場合、カラーガマットリサンプリングタイプの詳細情報は、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含むことができ、カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータ及び第2カラーガマットベースのコンテンツデータのマッピング情報を示すルックアップテーブル(look up table)を利用する方式である場合、カラーガマットリサンプリングタイプの詳細情報は、ルックアップテーブルのタイプ情報及び該ルックアップテーブルの構成要素情報を含むことができる。本発明の一実施例に係るカラーガマットリサンプリングタイプの詳細情報は、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報はgamut_resampling_function_coeff[i]を意味することができ、ルックアップテーブルのタイプ情報はLUT_typeを意味することができ、ルックアップテーブルの構成要素情報はLUT_info()を意味することができる。これに関する詳細な説明は、図7、図9の説明部分で前述した。
本発明の他の実施例によれば、シグナリング情報は、PMT(Program Map Table)、EIT(Event Information Table)、VUIメッセージ(Video Usuability Information message)及び/又はSEIメッセージ(Supplemental Enhancement Information message)を含み、本発明の一実施例に係るPMT及びEITのうち少なくとも一つは、伝送される放送信号に含まれた放送サービスがカラーガマットリサンプリングベースの放送サービスであることを識別する情報を含むことができる。これに関する詳細な説明は、図6、図18、図19、図20、図21の説明部分で前述した。
本発明の他の実施例によれば、カラーガマットリサンプリング情報は、PMT、EIT、VUIメッセージ及びSEIメッセージのうち少なくとも一つに含まれてもよい。これに関する詳細な説明は、図6、図7、図18、図19、図20、図21、図22、図23の説明部分で前述した。
図27は、本発明の一実施例に係る放送信号の送信装置の構成を示す図である。
本発明の一実施例に係る送信装置27050は、カラーガマットリサンプリング部27010、シグナリング情報生成部27020、生成されたシグナリング情報及び第2カラーガマットベースのコンテンツデータをそれぞれエンコードするエンコーダ27030、及び/又はエンコードされたコンテンツデータ及びエンコードされたシグナリング情報を送信する伝送部27040を含むことができる。
本発明の一実施例に係る送信装置が含む各構成は、対応する前述した本発明の一実施例に係る放送信号の送信方法における各段階の過程を行うことができる。
カラーガマットリサンプリング部27010は、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングすることができる。これに関する詳細な説明は、図2、図24の説明部分で前述した。
シグナリング情報生成部27020は、リサンプリングに関する情報を示すカラーガマットリサンプリング情報を含むシグナリング情報を生成することができる。これに関する詳細な説明は、図6、図7、図8、図18、図19、図21、図22、図23の説明部分で前述した。
エンコーダ27030は、生成されたシグナリング情報及び第2カラーガマットベースのコンテンツデータをそれぞれエンコードすることができる。これに関する詳細な説明は図24の説明部分で前述した。
伝送部27040は、エンコードされたコンテンツデータ及びエンコードされたシグナリング情報を伝送することができる。これに関する詳細な説明は、図24の説明部分で前述した。
図28は、本発明の一実施例に係る放送信号の受信装置の構成を示す図である。
本発明の一実施例に係る受信装置28040は、受信部28010、デコーダ28020、及び/又は出力部28030を含むことができる。
本発明の一実施例に係る受信装置が含む各構成は、対応する前述した本発明の一実施例に係る放送信号の受信方法における各段階の過程を行うことができる。
受信部28010は、第1カラーガマットベースのコンテンツデータ、及び該第1カラーガマットベースのコンテンツデータに対するカラーガマットリサンプリング情報を含むシグナリング情報を受信することができる。これに関する詳細な説明は、図2、図3、図4、図6、図7、図25の説明部分で前述した。本発明の一実施例に係る受信部28010は、前述したチューナ(tuner)、復調器(demodulator)、VSBデコーダ(VSB decoder)、及び/又はデマルチプレクサ(demux)を含むことができる。
デコーダ28020は、受信されたシグナリング情報及び第1カラーガマットベースのコンテンツデータをそれぞれデコードすることができる。これに関する詳細な説明は、図3、図4、図6、図7、図25の説明部分で前述した。本発明の一実施例に係るデコーダ28020は、前述したセクションデータプロセッサ(section data processor)及び/又はデコーダ(decoder)を含むことができる。
出力部28030は、デコードされたシグナリング情報に基づいて、デコードされた第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングして該第2カラーガマットベースのディスプレイで出力したり、又はデコードされた第1カラーガマットベースのコンテンツデータを第1カラーガマットベースのディスプレイで出力することができる。これに関する詳細な説明は、図3、図4、図25の説明部分で前述した。本発明の一実施例に係る出力部28030は、前述したガマットマッチングユニット(gamut matching unit)及び/又はガマットマッピングユニット(gamut mapping unit)を含むことができる。
説明の便宜のために各図を区分して説明したが、各図に示した実施例を併合して新しい実施例を実現するように設計することも可能である。そして、当業者の必要によって、以上説明した実施例を実行するためのプログラムが記録されているコンピュータで読み取り可能な記録媒体を設計することも、本発明の権利範囲に属する。
本発明に係る装置及び方法は、以上説明した実施例の構成及び方法が限定的に適用されるものではなく、上述した実施例の様々な変形が可能なように、各実施例の全部又は一部を選択的に組み合せて構成することもできる。
一方、本発明の映像処理方法を、ネットワークデバイスに具備された、プロセッサで読み取り可能な記録媒体に、プロセッサで読み取り可能なコードとして具現することができる。プロセッサで読み取り可能な記録媒体は、プロセッサで読み取り可能なデータが記憶される如何なる種類の記録装置も含む。プロセッサで読み取り可能な記録媒体の例には、ROM、RAM、CD−ROM、磁気テープ、フロッピーディスク、光データ記憶装置などがあり、また、インターネットを介した伝送などのようなキャリアウェーブの形態で具現されるものも含む。また、プロセッサで読み取り可能な記録媒体は、ネットワークで接続されたコンピュータシステムに分散され、分散方式でプロセッサで読み取り可能なコードが記憶されて実行されてもよい。
また、以上では、本発明の好適な実施例について図示及び説明したが、本発明は、上述した特定の実施例に限定されず、特許請求の範囲で請求する本発明の要旨から逸脱しない限度で、当該発明の属する技術の分野における通常の知識を有する者にとって様々な変形実施が可能であることは無論である。これらの変形実施も、本発明の技術的思想や展望から個別的に理解してはならない。
そして、本明細書では物の発明も、方法の発明も共に説明しており、必要によって、両発明の説明を補充的に適用してもよい。
様々な実施例が、本発明を実施するための形態で説明されている。
本発明は放送産業全般に利用可能である。

Claims (16)

  1. 第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングするステップと、
    前記リサンプリングに関する情報を示すカラーガマットリサンプリング情報を含むシグナリング情報を生成するステップと、
    前記生成されたシグナリング情報及び前記第2カラーガマットベースのコンテンツデータをそれぞれエンコードするステップと、
    前記エンコードされたコンテンツデータ及び前記エンコードされたシグナリング情報を送信するステップと、
    を有する、放送信号送信方法。
  2. 前記カラーガマットリサンプリング情報は、前記第1カラーガマットに関する情報、前記第2カラーガマットに関する情報、前記リサンプリングの方式を示すカラーガマットリサンプリングタイプ情報、及び前記カラーガマットリサンプリングタイプ情報によるカラーガマットリサンプリングタイプの詳細情報を含む、請求項1に記載の放送信号送信方法。
  3. 前記第1カラーガマットに関する情報は、前記第1カラーガマットのタイプを示す情報、及び前記第1カラーガマットが既存に定義されたカラーガマットでない場合、前記第1カラーガマットを定義するための基準色相の色空間上の座標情報を含み、
    前記第2カラーガマットに関する情報は、前記第2カラーガマットのタイプを示す情報、及び前記第2カラーガマットが既存に定義されたカラーガマットでない場合、前記第2カラーガマットを定義するための基準色相の色空間上の座標情報を含む、請求項2に記載の放送信号送信方法。
  4. 前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを、カラーガマットの影響を受けない中立的な色空間上の値に変換し、前記変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記中立的な色空間のタイプを示す情報、前記第1カラーガマットベースのコンテンツデータを前記中立的な色空間上の値に変換するために用いる変換式の係数情報、及び前記変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含む、請求項2に記載の放送信号送信方法。
  5. 前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに直接変換する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記第1カラーガマットベースのコンテンツデータを前記第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含み、
    前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータ及び第2カラーガマットベースのコンテンツデータのマッピング情報を示すルックアップテーブル(look up table)を利用する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記ルックアップテーブルのタイプ情報及び前記ルックアップテーブルの構成要素情報を含む、請求項2に記載の放送信号送信方法。
  6. 前記シグナリング情報は、PMT(Program Map Table)、EIT(Event Information Table)、VUIメッセージ(Video Usuability Information message)、及びSEIメッセージ(Supplemental Enhancement Information message)を含み、
    前記PMT及びEITのうち少なくとも一つは、前記放送信号に含まれた放送サービスがカラーガマットリサンプリングベースの放送サービスであることを識別する情報を含む、請求項1に記載の放送信号送信方法。
  7. 前記カラーガマットリサンプリング情報は、PMT、EIT、VUIメッセージ及びSEIメッセージのうち少なくとも一つに含まれる、請求項6に記載の放送信号送信方法。
  8. 第1カラーガマットベースのコンテンツデータ、及び前記第1カラーガマットベースのコンテンツデータに対するカラーガマットリサンプリング情報を含むシグナリング情報を受信するステップと、
    前記受信されたシグナリング情報及び第1カラーガマットベースのコンテンツデータをそれぞれデコードするステップと、
    前記デコードされたシグナリング情報に基づいて、前記デコードされた第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングして前記第2カラーガマットベースのディスプレイで出力したり、又は前記デコードされた第1カラーガマットベースのコンテンツデータを前記第1カラーガマットベースのディスプレイで出力するステップと、
    を有する、放送信号受信方法。
  9. 前記カラーガマットリサンプリング情報は、前記第1カラーガマットに関する情報、前記第2カラーガマットに関する情報、前記リサンプリングの方式を示すカラーガマットリサンプリングタイプ情報、及び前記カラーガマットリサンプリングタイプ情報によるカラーガマットリサンプリングタイプの詳細情報を含む、請求項8に記載の放送信号受信方法。
  10. 前記第1カラーガマットに関する情報は、前記第1カラーガマットのタイプを示す情報、及び前記第1カラーガマットが既存に定義されたカラーガマットでない場合、前記第1カラーガマットを定義するための基準色相の色空間上の座標情報を含み、
    前記第2カラーガマットに関する情報は、前記第2カラーガマットのタイプを示す情報、及び前記第2カラーガマットが既存に定義されたカラーガマットでない場合、前記第2カラーガマットを定義するための基準色相の色空間上の座標情報を含む、請求項9に記載の放送信号受信方法。
  11. 前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを、カラーガマットの影響を受けない中立的な色空間上の値に変換し、前記変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記中立的な色空間のタイプを示す情報、前記第1カラーガマットベースのコンテンツデータを前記中立的な色空間上の値に変換するために用いる変換式の係数情報、及び前記変換された中立的な色空間上の値を第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含む、請求項9に記載の放送信号受信方法。
  12. 前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータに直接変換する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記第1カラーガマットベースのコンテンツデータを前記第2カラーガマットベースのコンテンツデータに変換するために用いる変換式の係数情報を含み、
    前記カラーガマットリサンプリングタイプ情報によるリサンプリング方式が、第1カラーガマットベースのコンテンツデータ及び第2カラーガマットベースのコンテンツデータのマッピング情報を示すルックアップテーブル(look up table)を利用する方式である場合、前記カラーガマットリサンプリングタイプの詳細情報は、前記ルックアップテーブルのタイプ情報及び前記ルックアップテーブルの構成要素情報を含む、請求項9に記載の放送信号受信方法。
  13. 前記シグナリング情報は、PMT(Program Map Table)、EIT(Event Information Table)、VUIメッセージ(Video Usuability Information message)、及びSEIメッセージ(Supplemental Enhancement Information message)を含み、
    前記PMT及びEITのうち少なくとも一つは、前記放送信号に含まれた放送サービスがカラーガマットリサンプリングベースの放送サービスであることを識別する情報を含む、請求項8に記載の放送信号受信方法。
  14. 前記カラーガマットリサンプリング情報は、PMT、EIT、VUIメッセージ及びSEIメッセージのうち少なくとも一つに含まれる、請求項13に記載の放送信号受信方法。
  15. 第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングするカラーガマットリサンプリング部と、
    前記リサンプリングに関する情報を示すカラーガマットリサンプリング情報を含むシグナリング情報を生成するシグナリング情報生成部と、
    前記生成されたシグナリング情報及び前記第2カラーガマットベースのコンテンツデータをそれぞれエンコードするエンコーダと、
    前記エンコードされたコンテンツデータ及び前記エンコードされたシグナリング情報を送信する伝送部と、
    を備える、放送信号送信装置。
  16. 第1カラーガマットベースのコンテンツデータ、及び前記第1カラーガマットベースのコンテンツデータに対するカラーガマットリサンプリング情報を含むシグナリング情報を受信する受信部と、
    前記受信されたシグナリング情報及び第1カラーガマットベースのコンテンツデータをそれぞれデコードするデコーダと、
    前記デコードされたシグナリング情報に基づいて、前記デコードされた第1カラーガマットベースのコンテンツデータを第2カラーガマットベースのコンテンツデータにリサンプリングして前記第2カラーガマットベースのディスプレイで出力したり、又は前記デコードされた第1カラーガマットベースのコンテンツデータを前記第1カラーガマットベースのディスプレイで出力する出力部と、
    を備える、放送信号受信装置。
JP2016562719A 2014-01-06 2015-01-05 カラーガマットリサンプリングに基づく放送信号送受信方法及び装置 Active JP6282357B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201461923773P 2014-01-06 2014-01-06
US61/923,773 2014-01-06
PCT/KR2015/000068 WO2015102449A1 (ko) 2014-01-06 2015-01-05 컬러 개멋 리샘플링을 기반으로 하는 방송 신호 송수신 방법 및 장치

Publications (2)

Publication Number Publication Date
JP2017511080A true JP2017511080A (ja) 2017-04-13
JP6282357B2 JP6282357B2 (ja) 2018-02-21

Family

ID=53493713

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016562719A Active JP6282357B2 (ja) 2014-01-06 2015-01-05 カラーガマットリサンプリングに基づく放送信号送受信方法及び装置

Country Status (5)

Country Link
US (4) US10027996B2 (ja)
EP (1) EP3094096B1 (ja)
JP (1) JP6282357B2 (ja)
KR (1) KR101804925B1 (ja)
WO (1) WO2015102449A1 (ja)

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3092800B1 (en) * 2014-01-07 2022-12-28 Dolby Laboratories Licensing Corporation Techniques for encoding, decoding and representing high dynamic range images
MX368825B (es) * 2015-02-17 2019-10-18 Sony Corp Aparato de transmisión, método de transmisión, aparato de recepción y método de recepción.
EP3067882A1 (en) * 2015-03-10 2016-09-14 Thomson Licensing Adaptive color grade interpolation method and device
JP6320440B2 (ja) 2015-08-04 2018-05-09 ドルビー ラボラトリーズ ライセンシング コーポレイション ハイダイナミックレンジ信号のための信号再構成
CN107847119B (zh) * 2015-08-06 2020-07-10 索尼奥林巴斯医疗解决方案公司 医疗信号处理装置、医疗显示装置和医疗观察系统
US20190007709A1 (en) * 2015-08-20 2019-01-03 Lg Electronics Inc. Broadcast signal transmission apparatus, broadcast signal reception apparatus, broadcast signal transmission method and broadcast signal reception method
JP6645871B2 (ja) * 2015-09-30 2020-02-14 マクセル株式会社 放送システム
CN113660524A (zh) * 2015-09-25 2021-11-16 麦克赛尔株式会社 显示装置和显示控制方法
JP6616212B2 (ja) * 2015-09-28 2019-12-04 マクセル株式会社 表示制御方法
JP6645869B2 (ja) * 2015-09-29 2020-02-14 マクセル株式会社 放送システム
WO2017051808A1 (ja) 2015-09-25 2017-03-30 日立マクセル株式会社 放送受信装置
JP6441247B2 (ja) * 2015-10-01 2018-12-19 マクセル株式会社 表示制御方法
US10043484B2 (en) * 2015-10-06 2018-08-07 Apple Inc. Dual-target image color rendering
JP6872098B2 (ja) * 2015-11-12 2021-05-19 ソニーグループ株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
US9916638B2 (en) * 2016-07-20 2018-03-13 Dolby Laboratories Licensing Corporation Transformation of dynamic metadata to support alternate tone rendering
US9747282B1 (en) 2016-09-27 2017-08-29 Doppler Labs, Inc. Translation with conversational overlap
US11533450B2 (en) * 2017-09-25 2022-12-20 Comcast Cable Communications, Llc Anti-piracy video transmission and display
US10630867B2 (en) 2018-09-17 2020-04-21 Samsung Electronics Co., Ltd. Perceptual hue preserved color-gamut transferring in non-uniform CIE-1931 color space
EP3672267A1 (en) 2018-12-20 2020-06-24 InterDigital VC Holdings, Inc. Methods for processing audio and/or video contents and corresponding signal, devices, electronic assembly, system, computer readable program products and computer readable storage media
US11348553B2 (en) 2019-02-11 2022-05-31 Samsung Electronics Co., Ltd. Color gamut mapping in the CIE 1931 color space
EP3716619A1 (en) * 2019-03-28 2020-09-30 InterDigital CE Patent Holdings Gamut estimation
CN111768745B (zh) * 2020-08-07 2021-04-06 四川长虹电器股份有限公司 一种提高液晶电视色域重合度的系统调试方法
US11361476B2 (en) 2020-09-14 2022-06-14 Apple Inc. Efficient color mapping systems and methods
TWI839952B (zh) * 2022-11-17 2024-04-21 香港商冠捷投資有限公司 圖案顯示方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007010779A1 (ja) * 2005-07-15 2007-01-25 Matsushita Electric Industrial Co., Ltd. パケット送信装置
JP2008136025A (ja) * 2006-11-29 2008-06-12 Sony Corp 記録装置、記録方法、撮像装置、再生装置およびビデオシステム
JP2008211468A (ja) * 2007-02-26 2008-09-11 Canon Inc 記録制御装置及び記録制御装置の制御方法
WO2010004726A1 (ja) * 2008-07-08 2010-01-14 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、プログラム、及び集積回路
US20120026405A1 (en) * 2010-08-02 2012-02-02 Dolby Laboratories Licensing Corporation System and Method of Creating or Approving Multiple Video Streams
US20130194321A1 (en) * 2010-10-18 2013-08-01 Dolby Laboratories Licensing Corporation Image processing methods and apparatus using localized gamut definitions
JP2013543290A (ja) * 2010-08-25 2013-11-28 ドルビー ラボラトリーズ ライセンシング コーポレイション 画像のダイナミックレンジの拡大
WO2014002324A1 (en) * 2012-06-27 2014-01-03 Sharp Kabushiki Kaisha Method for converting data, display device, computing device and program incorporating same, and method for optimising coefficients and device and program incorporating same

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7583406B2 (en) * 2005-08-23 2009-09-01 Eastman Kodak Company Color transforms for concave device gamuts
JP5619600B2 (ja) 2007-04-03 2014-11-05 トムソン ライセンシングThomson Licensing 異なる色域を有するディスプレイを色補正する方法およびシステム
US7623560B2 (en) * 2007-09-27 2009-11-24 Ostendo Technologies, Inc. Quantum photonic imagers and methods of fabrication thereof
JP5314029B2 (ja) * 2008-08-29 2013-10-16 パナソニック株式会社 色信号変換装置及び色信号変換方法
KR20100092693A (ko) * 2009-02-13 2010-08-23 엘지전자 주식회사 영상신호 처리방법 및 시스템
KR101747782B1 (ko) * 2010-12-23 2017-06-19 한국전자통신연구원 이기종 영상기기 간 색 일치 장치 및 그 방법
US10009591B2 (en) * 2011-12-04 2018-06-26 Lg Electronics Inc. Digital broadcasting reception method and apparatus capable of displaying stereoscopic images
KR101930880B1 (ko) * 2012-02-23 2018-12-20 삼성디스플레이 주식회사 액정 표시 장치 및 그 구동 방법
KR20130141920A (ko) 2012-06-18 2013-12-27 삼성디스플레이 주식회사 색역 변환 시스템 및 방법
TWI676389B (zh) * 2013-07-15 2019-11-01 美商內數位Vc專利控股股份有限公司 至少一種色彩轉換之編碼方法和編碼器、解碼器、顯示裝置、編碼視訊訊號、電腦程式製品及處理器可讀式媒體

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007010779A1 (ja) * 2005-07-15 2007-01-25 Matsushita Electric Industrial Co., Ltd. パケット送信装置
JP2008136025A (ja) * 2006-11-29 2008-06-12 Sony Corp 記録装置、記録方法、撮像装置、再生装置およびビデオシステム
JP2008211468A (ja) * 2007-02-26 2008-09-11 Canon Inc 記録制御装置及び記録制御装置の制御方法
WO2010004726A1 (ja) * 2008-07-08 2010-01-14 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、プログラム、及び集積回路
US20120026405A1 (en) * 2010-08-02 2012-02-02 Dolby Laboratories Licensing Corporation System and Method of Creating or Approving Multiple Video Streams
JP2013543290A (ja) * 2010-08-25 2013-11-28 ドルビー ラボラトリーズ ライセンシング コーポレイション 画像のダイナミックレンジの拡大
US20130194321A1 (en) * 2010-10-18 2013-08-01 Dolby Laboratories Licensing Corporation Image processing methods and apparatus using localized gamut definitions
WO2014002324A1 (en) * 2012-06-27 2014-01-03 Sharp Kabushiki Kaisha Method for converting data, display device, computing device and program incorporating same, and method for optimising coefficients and device and program incorporating same

Also Published As

Publication number Publication date
US10567811B2 (en) 2020-02-18
JP6282357B2 (ja) 2018-02-21
US20170048561A1 (en) 2017-02-16
EP3094096A1 (en) 2016-11-16
WO2015102449A1 (ko) 2015-07-09
US10027996B2 (en) 2018-07-17
EP3094096B1 (en) 2018-09-26
US11871053B2 (en) 2024-01-09
KR101804925B1 (ko) 2017-12-05
US11006156B2 (en) 2021-05-11
US20210227267A1 (en) 2021-07-22
EP3094096A4 (en) 2017-10-04
US20200154150A1 (en) 2020-05-14
US20180295393A1 (en) 2018-10-11
KR20160091953A (ko) 2016-08-03

Similar Documents

Publication Publication Date Title
JP6282357B2 (ja) カラーガマットリサンプリングに基づく放送信号送受信方法及び装置
US10402681B2 (en) Image processing apparatus and image processing method
US10136181B2 (en) Playback method and playback device
JP5690267B2 (ja) コンテンツ配信のための方法およびシステム
JP2019135871A (ja) 送信装置、送信方法、受信装置、受信方法、表示装置および表示方法
KR101978222B1 (ko) 방송 신호 송수신 방법 및 장치
JP2016530780A (ja) デジタル放送システムにおける高品質の色感表現のための超高画質放送信号送受信方法及び装置
US10368144B2 (en) Method and device for transmitting and receiving broadcast signal
US10582269B2 (en) Method and device for transmitting and receiving broadcast signal
JP6789808B2 (ja) 記録装置、記録方法
JP6789805B2 (ja) 記録装置、記録方法
JP6789806B2 (ja) 表示装置、表示装置の表示制御方法
JP6789809B2 (ja) 表示装置、表示装置の表示制御方法
JP6789807B2 (ja) 放送波の送受信システム
JP2021036697A (ja) 受信装置
JP2021036696A (ja) 受信装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170713

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170815

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171114

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180109

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180123

R150 Certificate of patent or registration of utility model

Ref document number: 6282357

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250