JP6834939B2 - 送信装置、送信方法、受信装置および受信方法 - Google Patents

送信装置、送信方法、受信装置および受信方法 Download PDF

Info

Publication number
JP6834939B2
JP6834939B2 JP2017500620A JP2017500620A JP6834939B2 JP 6834939 B2 JP6834939 B2 JP 6834939B2 JP 2017500620 A JP2017500620 A JP 2017500620A JP 2017500620 A JP2017500620 A JP 2017500620A JP 6834939 B2 JP6834939 B2 JP 6834939B2
Authority
JP
Japan
Prior art keywords
dynamic range
conversion
video data
transmission
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017500620A
Other languages
English (en)
Other versions
JPWO2016132976A1 (ja
Inventor
塚越 郁夫
郁夫 塚越
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JPWO2016132976A1 publication Critical patent/JPWO2016132976A1/ja
Application granted granted Critical
Publication of JP6834939B2 publication Critical patent/JP6834939B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605Creation or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362Generation or processing of Service Information [SI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)

Description

本技術は、送信装置、送信方法、受信装置および受信方法に関し、詳しくは、通常ダイナミックレンジビデオデータを送信する送信装置等に関する。
従来、ハイダイナミックレンジビデオデータにハイダイナミックレンジ光電変換を適用して得られた伝送ビデオデータを送信することが考えられている。以下、ハイダイナミックレンジを、適宜、「HDR」と表記する。例えば、非特許文献1には、従来受信機による受信を考慮した、従来の光電変換特性(ガンマ特性)との互換領域を含むHDR光電変換特性(新ガンマ特性)についての記載がある。
Tim Borer, "Non-Linear Opto-Electrical Transfer Functions for High Dynamic Range Television", Research & Development White Paper WHP 283, July 2014
本技術の目的は、通常ダイナミックレンジビデオデータの送信とハイダイナミックレンジビデオデータの送信とを単一の伝送方法で行う場合の受信側処理の簡単化を図ることにある。
本技術の概念は、
通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、上記通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換を行ってハイダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換部と、
上記ハイダイナミックレンジ伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコード部と、
上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信部を備える
送信装置にある。
本技術において、ダイナミックレンジ変換部により、通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、ダイナミックレンジ変換が行われて、ハイダイナミックレンジ伝送ビデオデータが得られる。この場合、通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいて、変換が行われる。例えば、変換情報は、変換係数または変換テーブルである、ようにされてもよい。
エンコード部により、ハイダイナミックレンジ伝送ビデオデータにエンコード処理が施されてビデオストリームが得られる。送信部により、このビデオストリームを含む所定フォーマットのコンテナが送信される。例えば、コンテナは、インターネットの配信などで用いられるMP4、デジタル放送規格で採用されているトランスポートストリーム(MPEG−2 TS)、あるいはそれ以外のフォーマットのコンテナであってもよい。
このように本技術においては、通常ダイナミックレンジ伝送ビデオデータをハイダイナミックレンジ伝送ビデオデータに変換して伝送するものである。そのため、受信側では、通常ダイナミックレンジビデオデータの送信時にあっても、ハイダイナミックレンジビデオデータの送信時と同様の処理を行うことが可能となり、通常ダイナミックレンジビデオデータの送信とハイダイナミックレンジビデオデータの送信とが時系列的に混在するような場合の受信側処理の簡単化が可能となる。
なお、本技術において、例えば、通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報を、ビデオストリームおよび/またはコンテナに挿入する情報挿入部をさらに備える、ようにされてもよい。このように変換情報が挿入される場合、受信側では、この変換情報を用いて、ハイダイナミックレンジ伝送ビデオデータから通常ダイナミックレンジ伝送ビデオデータに変換して通常ダイナミックレンジの画像表示を行うための処理が容易となる。
また、本技術において、例えば、情報挿入部は、コンテナに、ビデオストリームがハイダイナミックレンジに対応していることを示す情報をさらに挿入する、ようにされてもよい。この情報により、受信側では、ビデオストリームがハイダイナミックレンジに対応していることを容易に認識可能となる。
また、本技術において、例えば、情報挿入部は、コンテナに、ハイダイナミックレンジ光電変換特性に対応したハイダイナミックレンジ電光変換特性を示す情報をさらに挿入する、ようにされてもよい。この情報により、受信側では、ハイダイナミックレンジ光電変換特性に対応したハイダイナミックレンジ電光変換特性を容易に認識可能となる。
また、本技術において、例えば、情報挿入部は、コンテナに、元々のビデオデータが通常ダイナミックレンジビデオデータであることを示す情報をさらに挿入する、ようにされてもよい。この情報により、受信側では、元々のビデオデータが通常ダイナミックレンジビデオデータであることを容易に認識可能となる。
また、本技術の他の概念は、
ハイダイナミックレンジ伝送ビデオデータが符号化されて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信部と、
上記ビデオストリームにデコード処理を施して上記ハイダイナミックレンジ伝送ビデオデータを得るデコード部と、
上記デコード部で得られたハイダイナミックレンジ伝送ビデオデータに、ダイナミックレンジ変換を行って通常ダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換部と、
上記ダイナミックレンジ変換部で得られた通常ダイナミックレンジ伝送ビデオデータに、通常ダイナミックレンジ電光変換特性による電光変換を施して表示用の通常ダイナミックレンジビデオデータを得る電光変換部を備える
受信装置にある。
本技術において、受信部により、ハイダイナミックレンジ伝送ビデオデータが符号化されて得られたビデオストリームを含む所定フォーマットのコンテナが受信される。デコード部により、ビデオストリームにデコード処理が施されてハイダイナミックレンジ伝送ビデオデータが得られる。
ダイナミックレンジ変換部により、デコード部で得られたハイダイナミックレンジ伝送ビデオデータに、ダイナミックレンジ変換が行われて通常ダイナミックレンジ伝送ビデオデータが得られる。そして、電光変換部により、通常ダイナミックレンジ伝送ビデオデータに通常ダイナミックレンジ電光変換特性による電光変換が施されて表示用の通常ダイナミックレンジビデオデータが得られる。
このように本技術においては、デコード処理で得られたハイダイナミックレンジ伝送ビデオデータにダイナミックレンジ変換を行って通常ダイナミックレンジ伝送ビデオデータを得るものである。そのため、ハイダイナミックレンジ伝送ビデオデータとして伝送されてくる場合にあっても通常ダイナミックレンジの画像表示を良好に行い得る。
なお、本技術において、例えば、デコード部で得られたハイダイナミックレンジ伝送ビデオデータは、通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、上記通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換処理が施されて得られたものである、ようにされてもよい。
また、本技術において、例えば、ビデオストリームおよび/またはコンテナに、変換情報が挿入されており、ビデオストリームおよび/またはコンテナから変換情報を抽出する変換情報抽出部をさらに備え、ダイナミックレンジ変換部は、変換情報抽出部で抽出された変換情報に基づいてダイナミックレンジ変換を行う、ようにされてもよい。
本技術によれば、通常ダイナミックレンジビデオデータの送信とハイダイナミックレンジビデオデータの送信とが時系列的に混在するような場合の受信側処理の簡単化を図ることができる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
MPEG−DASHベースのストリーム配信システムの構成例を示すブロック図である。 MPDファイルに階層的に配置されている各構造体の関係の一例を示す図である。 実施の形態としての送受信システムの構成例を示すブロック図である。 サービス送信システムの構成例を示すブロック図である。 サービス送信システムにおけるダイナミックレンジ変換部の動作を説明するための図である。 符号化方式がHEVCである場合におけるGOPの先頭のアクセスユニットを示す図である。 ダイナミックレンジ・コンバージョンSEIメッセージの構造例を示す図である。 ダイナミックレンジ・コンバージョンSEIメッセージの構造例における主要な情報の内容を示す図である。 ノンフラグメンテッドMP4(Non-Fragmented MP4)の場合(VODサービス)におけるメディアファイル実体について説明するための図である。 フラグメンテッドMP4(Fragmented MP4)の場合(マルチキャストサービス)におけるメディアファイル実体について説明するための図である。 フラグメンテッドMP4(Fragmented MP4)の場合(放送)におけるメディアファイル実体について説明するための図である。 MPDファイル記述例を示す図である。 “SupplementaryDescriptor”の「Value」セマンティスクスを示す図である。 サービス受信機の構成例を示すブロック部である。 対象ストリームの元々のビデオデータがSDRビデオデータである場合におけるダイナミックレンジ逆変換の詳細を説明するための図である。 対象ストリームの元々のビデオデータがHDRビデオデータである場合におけるダイナミックレンジ逆変換の詳細を説明するための図である。 ダイナミックレンジ・コンバージョン・デスクリプタの構造例を示す図である。 ダイナミックレンジ・コンバージョン・デスクリプタの構造例における主要な情報の内容を示す図である。 トランスポートストリームの構成例を示す図である。
以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明を以下の順序で行う。
1.実施の形態
2.変形例
<1.実施の形態>
[MPEG−DASHベースのストリーム配信システムの概要]
最初に、本技術を適用し得るMPEG−DASHベースのストリーム配信システムの概要を説明する。
図1(a)は、MPEG−DASHベースのストリーム配信システム30Aの構成例を示している。この構成例では、メディアストリームとMPDファイルが、通信ネットワーク伝送路(通信伝送路)を通じて送信される。このストリーム配信システム30Aは、DASHストリームファイルサーバ31およびDASH MPDサーバ32に、N個のサービス受信機33-1,33-2,・・・,33-Nが、CDN(Content Delivery Network)34を介して、接続された構成となっている。
DASHストリームファイルサーバ31は、所定のコンテンツのメディアデータ(ビデオデータ、オーディオデータ、字幕データなど)に基づいて、DASH仕様のストリームセグメント(以下、適宜、「DASHセグメント」という)を生成し、サービス受信機からのHTTP要求に応じてセグメントを送出する。このDASHストリームファイルサーバ31は、ストリーミング専用のサーバであってもよいし、また、ウェブ(Web)サーバで兼用されることもある。
また、DASHストリームファイルサーバ31は、サービス受信機33(33-1,33-2,・・・,33-N)からCDN34を介して送られてくる所定ストリームのセグメントの要求に対応して、そのストリームのセグメントを、CDN34を介して、要求元の受信機に送信する。この場合、サービス受信機33は、MPD(Media Presentation Description)ファイルに記載されているレートの値を参照して、クライアントの置かれているネットワーク環境の状態に応じて、最適なレートのストリームを選択して要求を行う。
DASH MPDサーバ32は、DASHストリームファイルサーバ31において生成されるDASHセグメントを取得するためのMPDファイルを生成するサーバである。コンテンツマネジメントサーバ(図示せず)からのコンテンツメタデータと、DASHストリームファイルサーバ31において生成されたセグメントのアドレス(url)をもとに、MPDファイルを生成する。なお、DASHストリームファイルサーバ31とDASH MPDサーバ32は、物理的に同じものであってもよい。
MPDのフォーマットでは、ビデオやオーディオなどのそれぞれのストリーム毎にリプレゼンテーション(Representation)という要素を利用して、それぞれの属性が記述される。例えば、MPDファイルには、レートの異なる複数のビデオデータストリーム毎に、リプレゼンテーションを分けてそれぞれのレートが記述される。サービス受信機33では、そのレートの値を参考にして、上述したように、サービス受信機33の置かれているネットワーク環境の状態に応じて、最適なストリームを選択できる。
図1(b)は、MPEG−DASHベースのストリーム配信システム30Bの構成例を示している。この構成例では、メディアストリームとMPDファイルが、RF伝送路(放送伝送路)を通じて送信される。このストリーム配信システム30Bは、DASHストリームファイルサーバ31およびDASH MPDサーバ32が接続された放送送出システム36と、M個のサービス受信機35-1,35-2,・・・,35-Mとで構成されている。
このストリーム配信システム30Bの場合、放送送出システム36は、DASHストリームファイルサーバ31で生成されるDASH仕様のストリームセグメント(DASHセグメント)およびDASH MPDサーバ32で生成されるMPDファイルを、放送波に載せて送信する。
図2は、MPDファイルに階層的に配置されている各構造体の関係の一例を示している。図2(a)に示すように、MPDファイル全体としてのメディア・プレゼンテーション(Media Presentation)には、時間間隔で区切られた複数のピリオド(Period)が存在する。例えば、最初のピリオドはスタートが0秒から、次のピリオドはスタートが100秒から、などとなっている。
図2(b)に示すように、ピリオドには、複数のアダプテーションセット(AdaptationSet)が存在する。各アダプテーションセットはビデオやオーディオ等のメディアタイプの違いや、同じメディアタイプでも言語の違い、視点の違い等に依存する。図2(c)に示すように、アダプテーションセットには複数のリプレゼンテーション(Representation)が存在する。各リプレゼンテーションはストリーム属性、例えばレートの違い等に依存する。
図2(d)に示すように、リプレゼンテーションには、セグメントインフォ(SegmentInfo)が含まれている。このセグメントインフォには、図2(e)に示すように、イニシャライゼーション・セグメント(Initialization Segment)と、ピリオドをさらに細かく区切ったセグメント(Segment)毎の情報が記述される複数のメディア・セグメント(Media Segment)が存在する。メディアセグメントには、ビデオやオーディオなどのセグメントデータを実際に取得するためのアドレス(url)の情報等が存在する。
なお、アダプテーションセットに含まれる複数のリプレゼンテーションの間では、ストリームのスイッチングを自由に行うことができる。これにより、受信側のネットワーク環境の状態に応じて、最適なレートのストリームを選択でき、途切れのないビデオ配信が可能となる。
[送受信システムの構成例]
図3は、実施の形態としての送受信システム10の構成例を示している。この送受信システム10は、サービス送信システム100とサービス受信機200により構成されている。この送受信システム10において、サービス送信システム100は、上述の図1(a)に示すストリーム配信システム30AのDASHストリームファイルサーバ31およびDASH MPDサーバ32に対応する。また、この送受信システム10において、サービス送信システム100は、上述の図1(b)に示すストリーム配信システム30BのDASHストリームファイルサーバ31、DASH MPDサーバ32および放送送出システム36に対応する。
また、この送受信システム10において、サービス受信機200は、上述の図1(a)に示すストリーム配信システム30Aのサービス受信機33(33-1,33-2,・・・,33-N)に対応する。また、この送受信システム10において、サービス受信機200は、上述の図1(b)に示すストリーム配信システム30Bのサービス受信機35(35-1,35-2,・・・,35-M)に対応する。
サービス送信システム100は、DASH/MP4、つまりメタファイルとしてのMPDファイルと、ビデオやオーディオなどのメディアストリーム(メディアセグメント)が含まれるMP4を、通信ネットワーク伝送路(図1(a)参照)またはRF伝送路(図1(b)参照)を通じて、送信する。
「サービス送信システムの構成例」
図4は、サービス送信システム100の構成例を示している。このサービス送信システム100は、制御部101と、HDR光電変換部103と、SDR光電変換部104と、ダイナミックレンジ変換部105と、切換スイッチ106と、RGB/YCbCr変換部107と、ビデオエンコーダ108と、コンテナエンコーダ109と、送信部110を有している。
制御部101は、CPU(Central Processing Unit)を備えて構成され、制御プログラムに基づいて、サービス送信システム100の各部の動作を制御する。HDR光電変換部103は、高コントラストカメラ出力、すなわちHDR(ハイダイナミックレンジ)ビデオデータVhに対して、HDR光電変換特性を適用して光電変換し、HDR伝送ビデオデータを得る。このHDR伝送ビデオデータは、HDR OETFで映像制作された映像素材となる。
SDR光電変換部104は、通常コントラストカメラ出力、すなわちSDR(通常ダイナミックレンジ)ビデオデータVsに対して、SDR光電変換特性を適用して光電変換し、SDR伝送ビデオデータを得る。このSDR伝送ビデオデータは、SDR OETFで映像制作された映像素材となる。
ダイナミックレンジ変換部105は、SDR伝送ビデオデータにダイナミックレンジ変換を行ってHDR伝送ビデオデータを得る。つまり、このダイナミックレンジ変換部105は、SDR OETFで映像制作された映像素材であるSDR伝送ビデオデータをHDR伝送ビデオデータに変換する。ここで、ダイナミックレンジ変換部105は、SDR光電変換特性による変換データの値をHDR光電変換特性による変換データの値に変換するための変換情報に基づいて、ダイナミックレンジ変換を行う。この変換情報は、例えば、制御部101から与えられる。
図5を参照して、ダイナミックレンジ変換について、さらに説明する。実線aは、SDR光電変換特性を示すSDR OETFカーブの一例を示している。実線bは、HDR光電変換特性を示すHDR OETFカーブの一例を示している。横軸は入力輝度レベルを示し、P1はSDR最大レベルに対応する入力輝度レベルを示し、P2はHDR最大レベルに対応する入力輝度レベルを示している。
また、縦軸は伝送符号値または正規化された符号化レベルの相対値を示す。相対最大レベルMはHDR最大レベルおよびSDR最大レベルを示す。基準レベルGは、SDR最大レベルに対応する入力輝度レベルP1におけるHDR OETFの伝送レベルを示すもので、いわゆるリファレンスの白レベルを意味し、このレベルよりも高い範囲をHDR特有のきらめき表現に利用することを示す。分岐レベルBは、SDR OETFカーブとHDR OETFカーブとが同一軌道から分岐して別れるレベルを示す。Pfは、分岐レベルに対応する入力輝度レベルを示す。なお、この分岐レベルBは、0以上の任意の値とすることができる。
ダイナミックレンジ変換部105におけるダイナミックレンジ変換では、SDR伝送ビデオデータのうち、分岐レベルBから相対最大レベルMまでが、HDR光電変換特性による変換データの値となるように変換される。この場合、SDR最大レベルである相対最大レベルMは基準レベルGと一致するようにされる。なお、分岐レベルB未満の入力データは、そのまま出力データとされる。
ここで、変換情報は、変換テーブルあるいは変換係数で与えられる。変換テーブルで与えられる場合、ダイナミックレンジ変換部105は、この変換テーブルを参照して変換を行う。一方、変換係数で与えられる場合、ダイナミックレンジ変換部105は、この変換係数を用いた演算により変換を行う。例えば、変換係数をCとするとき、分岐レベルBから相対最大レベルMまでの入力データに関して、以下の(1)式により、変換を行う。
出力データ=分岐レベルB+(入力データ−分岐レベルB)*C ・・・(1)
図4に戻って、切換スイッチ106は、HDR光電変換部103で得られたHDR伝送ビデオデータまたはダイナミックレンジ変換部105で得られたHDR伝送ビデオデータを選択的に取り出す。RGB/YCbCr変換部107は、切換スイッチ106で取り出されたHDR伝送ビデオデータをRGBドメインからYCbCr(輝度・色差)ドメインに変換する。この場合、RGB/YCbCr変換部107は、色空間情報に基づいて、色空間に対応した変換式を用いて変換を行う。なお、これらの色空間のドメインは、RGBドメインに限定されるものではなく、また、輝度・色差ドメインはYCbCrに限定されるわけではない。
ビデオエンコーダ108は、RGB/YCbCr変換部107でYCbCrドメインに変換されたHDR伝送ビデオデータV1に対して、例えば、MPEG4−AVCあるいはHEVCなどの符号化を施して符号化ビデオデータを得、この符号化ビデオデータを含むビデオストリーム(ビデオエレメンタリストリーム)VSを生成する。
この際、ビデオエンコーダ108は、アクセスユニット(AU)のSPS NALユニットのVUI(video usability information)の領域に、HDRのストリームであること、さらにはHDR電光変換特性などを示すメタ情報を挿入する。また、ビデオエンコーダ108は、アクセスユニット(AU)の“SEIs”の部分に、上述したダイナミックレンジ変換の変換情報を持つ、新規定義するダイナミックレンジ・コンバージョンSEIメッセージ(Dynamic_range_conv SEI message)を挿入する。
図6は、符号化方式がHEVCである場合におけるGOP(Group Of Pictures)の先頭のアクセスユニットを示している。HEVCの符号化方式の場合、画素データが符号化されているスライス(slices)の前にデコード用のSEIメッセージ群「Prefix_SEIs」が配置され、このスライス(slices)の後に表示用のSEIメッセージ群「Suffix_SEIs」が配置される。ダイナミックレンジ・コンバージョンSEIメッセージは、図示のように、例えば、SEIメッセージ群「Suffix_SEIs」として配置される。
図7は、ダイナミックレンジ・コンバージョンSEIメッセージの構造例(Syntax)を示している。図8は、その構造例における主要な情報の内容(Semantics)を示している。「Dynamic_range_conv_cancel_flag」の1ビットのフラグ情報は、“Dynamic_range_conv”のメッセージをリフレッシュするかを示す。“0”は、“Dynamic_range_conv”のメッセージをリフレッシュすることを示す。“1”は、“Dynamic_range_conv”のメッセージをリフレッシュしないこと、つまり前のメッセージをそのまま維持することを示す。
「Dynamic_range_conv_cancel_flag」が“0”であるとき、以下のフィールドが存在する。「coded_data_bit_depth」の8ビットフィールドは、符号化画素ビット数(伝送符号値のビット数)を示す。「reference_level」の14ビットフィールドは、基準輝度レベル値、つまり基準レベルG(図5参照)を示す。「ratio_conversion_flag」の1ビットのフラグ情報は、シンプル変換によること、つまり変換係数が存在することを示す。「conversion_table_flag」の1ビットのフラグ情報は、変換テーブルによること、つまり変換テーブル情報が存在することを示す。「branch_level」の16ビットフィールドは、分岐レベルB(図5参照)を示す。
「ratio_conversion_flag」が“1”であるとき、「level_conversion_ratio」の8ビットフィールドが存在する。このフィールドは、変換係数(レベル変換の比)を示す。「conversion_table_flag」が“1”であるとき、「table_size」の8ビットフィールドが存在する。このフィールドは、変換テーブルの入力数を示す。そして、その入力数だけ、「level_R[i]」、「level_G[i]」、「level_B[i]」の各16ビットフィールドが存在する。「level_R[i]」のフィールドは、赤コンポーネント(Red component)の変換後の値を示す。「level_G[i]」のフィールドは、緑コンポーネント(Red component)の変換後の値を示す。「level_B[i]」のフィールドは、青コンポーネント(Red component)の変換後の値を示す。
なお、符号化画素ビット数が8ビットであるときは入力データの各値に対応した値が存在することになる。しかし、符号化画素ビット数が10ビット、12ビットなどであるときは、入力データの上位8ビットの各値に対応した値のみが存在することになる。この場合、受信側で変換テーブルを使用する際には、残りの下位ビットの値に関しては補間値が用いられることになる。
図1に戻って、コンテナエンコーダ109は、ビデオエンコーダ108で生成されたビデオストリームVSを含むコンテナ、ここではMP4を、配信ストリームSTMとして生成する。ノンフラグメンテッドMP4(Non-Fragmented MP4)の場合(VODサービス)における、「<baseURL>」で示されるロケーション先のメディアファイル実体について説明する。
この場合、図9に示すように、“url 1”として定義されることがある。この場合、最初にファイルタイプが記述される“ftyp”ボックスが配置される。この“ftyp”ボックスにより、断片化されていないMP4ファイルであることが示される。続いて、“moov”ボックスおよび“mdat”ボックスが配置される。“moov”ボックスには、全てのメタデータ、例えば、トラックのヘッダ情報、コンテンツ内容のメタ記述、時刻情報などが含まれる。“mdat”ボックスには、メディアデータ本体であるSLICE NALユニットが配置される。なお、この“mdat”ボックスに、SPS、VPS、PPS、SEIの各NALユニットも配置可能である。
また、“moov”ボックスの下にある“stsd”ボックスに、SPS、VPS、PPS、SEIの各NALユニットが配置される(方法1)。SPS NALユニットのVUI(video usability information)の領域のメタ情報でHDRのストリームであることなどが示される。また、SEI NALユニットとして、上述したダイナミックレンジ・コンバージョンSEIメッセージのNALユニットも存在する。なお、“moov”ボックスの下にある“udta”ボックスに“kind”ボックスで定義される要素で、HDRのストリームであることなどが示されてもよい(方法2)。
また、フラグメンテッドMP4(Fragmented MP4)の場合(マルチキャストサービス)における、「<baseURL>」で示されるロケーション先のメディアファイル実体について説明する。
この場合、図10に示すように、“url 2”として定義されることがある。この場合、最初にファイルタイプが記述される“styp”ボックスが配置される。続いて、セグメントインデックスが記述される“sidx”ボックスが配置される。それに続いて、所定個数のムービーフラグメント(Movie Fragment)が配置される。
各ムービーフラグメントは、“moov”ボックスと、フラグメントの制御情報が入る“moof”ボックスと、メディアデータ本体が入る“mdat”ボックスから構成される。マルチキャストサービスでは、ランダムアクセスを受けなければならず、それに対応するために各ムービーフラグメントに“moov”ボックスの配置が必要となる。これは、後述する放送の場合も同様である。“mdat”ボックスには、メディアデータ本体であるSLICE NALユニットが配置される。なお、この“mdat”ボックスに、SPS、VPS、PPS、SEIの各NALユニットも配置可能である。
また、“moov”ボックスの下にある“stsd”ボックスに、SPS、VPS、PPS、SEIの各NALユニットが配置される(方法1)。SPS NALユニットのVUI(video usability information)の領域のメタ情報でHDRのストリームであることなどが示される。また、SEI NALユニットとして、上述したダイナミックレンジ・コンバージョンSEIメッセージのNALユニットも存在する。なお、“moov”ボックスの下にある“udta”ボックスに“kind”ボックスで定義される要素で、HDRのストリームであることなどが示されてもよい(方法2)。
また、フラグメンテッドMP4(Fragmented MP4)の場合(放送)におけるメディアファイル実体について説明する。この場合、図11に示すように、最初にファイルタイプが記述される“styp”ボックスが配置される。続いて、セグメントインデックスが記述される“sidx”ボックスが配置される。それに続いて、“MPD”ボックスとムービーフラグメント(Movie Fragment)の組み合わせが所定個数配置される。
“MPD”ボックスに、MPDファイルが配置される。各ムービーフラグメントは、“moov”ボックスと、フラグメントの制御情報が入る“moof”ボックスと、メディアデータ本体が入る“mdat”ボックスから構成される。“mdat”ボックスには、メディアデータ本体であるSLICE NALユニットが配置される。なお、この“mdat”ボックスに、SPS、VPS、PPS、SEIの各NALユニットも配置可能である。
また、“moov”ボックスの下にある“stsd”ボックスに、SPS、VPS、PPS、SEIの各NALユニットが配置される(方法1)。SPS NALユニットのVUI(video usability information)の領域のメタ情報でHDRのストリームであることなどが示される。また、SEI NALユニットとして、上述したダイナミックレンジ・コンバージョンSEIメッセージのNALユニットも存在する。なお、“moov”ボックスの下にある“udta”ボックスに“kind”ボックスで定義される要素で、HDRのストリームであることなどが示されてもよい(方法2)。
なお、MPDファイルに、上述のVUI領域のメタ情報やダイナミック変換情報などを含めることも考えられる。MPDファイルでは、“SupplementaryDescriptor”により、「schemeIdUri」を、従来の規格における既定義とは別に、放送その他のアプリケーションとして新規に定義することが可能である。
図12は、MPDファイル記述例を示している。ここでは、説明の簡単化のためにビデオストリームに関する情報のみが記述されている例を示しているが、実際にはビデオストリームの他のメディアストリームに関する情報も記述されている。図13は、“SupplementaryDescriptor”の「Value」セマンティスクスを示している。
「<AdaptationSet mimeType=“video/mp4” group=“1”>」の記述により、ビデオストリームに対するアダプテーションセット(AdaptationSet)が存在し、そのビデオストリームはMP4ファイル構造で供給され、グループ1が割り当てられていることが示されている。「<SupplementaryDescriptor schemeIdUri=“urn:brdcst:codecType” value= “hevc”/>の記述により、ビデオストリームのコーデックが「HEVC」であることが示されている。
<SupplementaryDesctiptor schemeIdUri=“urn:brdcst:video:highdynamicrange” value=“HDR”/>の記述により、対象ストリームがHDRストリームであることが示される。なお、“HDR”の代わりに“1”が記述されて、HDRストリームであることが示されてもよい。また、HDRストリームであることを示す場合には、“SDR”あるいは“0”が記述される。
<SupplementaryDesctiptor schemeIdUri=“urn:brdcst:video:transferfunction” value=“EOTFtype”/>の記述により、電光変換特性(EOTF特性)が示される。例えば、「BT.709-5 Transfer Function」である場合には、“EOTFtype”の部分に、“bt709”または“1”が記述される。また、例えば、「10bit BT.2020 Transfer Function」である場合には、“EOTFtype”の部分に、“bt2020”または“14”が記述される。また、例えば、「SMPTE 2084 Transfer Function」である場合には、“EOTFtype”の部分に、“st2028”または“16”が記述される。
<SupplementaryDesctiptor schemeIdUri=“urn:brdcst:video:xycolourprimaries” value=“ColorGamut”/>の記述により、色空間が示される。例えば、「BT.709-5」である場合には、“ColorGamut”の部分に、“bt709”または“1”が記述される。また、例えば、「BT.2020」である場合には、“ColorGamut”の部分に、“bt2020”または“9”が記述される。また、例えば、「SMPTE 428 or XYZ」である場合には、“ColorGamut”の部分に、“st428”または“10”が記述される。
<SupplementaryDesctiptor schemeIdUri=“urn:brdcst:video:matrixcoefficients” value=“ColorMatrix”/>の記述により、色マトリクス係数が示される。例えば、「BT.709-5」である場合には、“ColorMatrix”の部分に、“bt709”または“1”が記述される。また、例えば、「BT.2020 non-constant lumiinance」である場合には、“ColorMatrix”の部分に、“bt2020n”または“9”が記述される。また、例えば、「SMPTE 2085 or Y′D′zD′x」である場合には、“ColorMatrix”の部分に、“st2085”または“11”が記述される。
<SupplementaryDesctiptor schemeIdUri=“urn:brdcst:video:referencelevel” value=“RefLevel”/>の記述により、基準レベルG(図5参照)が示される。“RefLevel”の部分に、最大「1」に正規化された相対範囲の中を0〜100の値で指定した基準レベルが記述される。受信側では、この値を100で割ったものが相対基準レベルとして認識される。この相対基準レベルは、ダイナミックレンジ変換の変換情報としての変換係数を構成する。
<SupplementaryDesctiptor schemeIdUri=“urn:brdcst:video:branchlevel” value=“BranchLevel”/>の記述により、分岐レベルB(図5参照)が示される。“BranchLevel” の部分に、最大「1」に正規化された相対範囲の中を0〜100の値で指定した分岐レベルが記述される。受信側では、この値を100で割ったものが相対基準レベルとして認識される。
<SupplementaryDesctiptor schemeIdUri=“urn:brdcst:video:streamdependency” value=“DependType”/>の記述により、対象ストリームがインデペンデントストリームであるか示される。インデペンデントストリームである場合、“DependType”の部分に、“base”または“0”が記述される。デペンデントストリームである場合、“DependType”の部分に、“extended”または“1”が記述される。
<SupplementaryDesctiptor schemeIdUri=“urn:brdcst:video:originaldynamicrange” value=“DrangeType”/>の記述により、対象ストリームの元々のビデオデータがSDRビデオデータであるか示される。SDRビデオデータである場合には、“DrangeType”の部分に、“sdr”が記述される。HDRビデオデータである場合には、“DrangeType”の部分に、“hdr”が記述される。
「<Representation id=“1” bandwidth=“20000000”>」の記述により、グループ1のアダプテーションセットの中に、「Representation id=“1”」で識別されるリプレゼンテーションとして、グループ1“group1”の符号化データを含むビットレートが20Mbpsのビデオストリームの存在が示されている。そして、「<baseURL>video/jp/20000000.mp4</BaseURL>」の記述により、そのビデオストリームのロケーション先が、「video/jp/20000000.mp4」として示されている。
図12のMPDファイル記述例は、デペンデントストリームが存在する場合の例である。「<AdaptationSet mimeType=“video/mp4” group=“2”>」の記述により、ビデオストリームに対するアダプテーションセット(AdaptationSet)が存在し、そのビデオストリームはMP4ファイル構造で供給され、グループ2が割り当てられていることが示されている。詳細説明は省略するが、このグループ2のビデオストリームに関しても、上述のグループ1のビデオストリームに関すると同様の情報が記述されている。
なお、上述した“moov”ボックスの下にある“udta”ボックスに“kind”ボックスで定義される要素としては、例えば、図12の破線枠で囲んだ要素とすることができる。
図4に戻って、送信部110は、コンテナエンコーダ109で得られたMP4の配信ストリームSTMを、放送波あるいはネットのパケットに載せて、サービス受信機200に送信する。
図4に示すサービス送信システム100の動作を簡単に説明する。高コントラストカメラ出力であるHDRビデオデータVhはHDR光電変換部103に供給される。このHDR光電変換部103では、HDRビデオデータVhにHDR光電変換特性で光電変換が施され、HDR OETFで映像制作された映像素材としてのHDR伝送ビデオデータが得られる。
また、通常コントラストカメラ出力であるSDRビデオデータVsはSDR光電変換部104に供給される。このSDR光電変換部104では、SDRビデオデータVsにSDR光電変換特性で光電変換が施され、SDR OETFで映像制作された映像素材としてのSDR伝送ビデオデータが得られる。
SDR光電変換部104で得られたSDR伝送ビデオデータは、ダイナミックレンジ変換部105に供給される。ダイナミックレンジ変換部105では、制御部101から供給される変換情報(変換テーブル、変換係数)に基づいて、SDR伝送ビデオデータにダイナミックレンジ変換が施される。このダイナミックレンジ変換により、SDR伝送ビデオデータは、HDR伝送ビデオデータに変換される(図5参照)。
切換スイッチ106では、制御部101の制御により、HDR光電変換部103で得られたHDR伝送ビデオデータあるいはダイナミックレンジ変換部105で得られたHDR伝送ビデオデータが選択的に取り出される。このように取り出されたHDR伝送ビデオデータは、RGB/YCbCr変換部107でRGBドメインからYCbCr(輝度・色差)ドメインに変換される。
YCbCrドメインに変換されたHDR伝送ビデオデータV1は、ビデオエンコーダ108に供給される。このビデオエンコーダ108では、HDR伝送ビデオデータV1に対して、例えば、MPEG4−AVCあるいはHEVCなどの符号化が施されて符号化ビデオデータが得られ、この符号化ビデオデータを含むビデオストリームVSが生成される。
この際、ビデオエンコーダ108では、アクセスユニット(AU)のSPS NALユニットのVUI(video usability information)の領域に、HDRのストリームであること、さらにはHDR電光変換特性などを示すメタ情報が挿入される。また、ビデオエンコーダ108では、アクセスユニット(AU)の“SEIs”の部分に、ダイナミックレンジ変換の変換情報(変換ケーブル、変換係数)を持つ、新規定義するダイナミックレンジ・コンバージョンSEIメッセージが挿入される(図7参照)。
ビデオエンコーダ108で得られたビデオストリームVSは、コンテナエンコーダ109に供給される。コンテナエンコーダ109では、ビデオストリームVSを含むコンテナであるMP4が配信ストリームSTMとして生成される。この際、MP4には、例えば、“moov”ボックスの下などに、HDRのストリームであることなどを示すメタ情報が挿入される。
この配信ストリームSTMは、送信部110により、放送波あるいはネットのパケットに載せて、サービス受信機200に送信される。
「サービス受信機の構成例」
図14は、サービス受信機200の構成例を示している。このサービス受信機200は、制御部201と、受信部202と、コンテナデコーダ203と、ビデオデコーダ204と、YCbCr/RGB変換部205と、切換スイッチ206と、HDR電光変換部207と、ダイナミックレンジ逆変換部208と、SDR電光変換部209を有している。
制御部201は、CPU(Central Processing Unit)を備えて構成され、制御プログラムに基づいて、サービス受信機200の各部の動作を制御する。受信部202は、サービス送信システム100から放送波あるいはネットのパケットに載せて送られてくるMP4の配信ストリームSTMを受信する。コンテナデコーダ203は、MP4からビデオストリームVSを抽出する。また、コンテナデコーダ203は、MP4からメタ情報を抽出し、制御部201に送る。制御部201は、このメタ情報から、HDRのストリームであること、HDR電光変換特性情報、元々のビデオデータの情報などを認識する。
ビデオデコーダ204は、コンテナデコーダ203で抽出されるビデオストリームVSに対して復号化処理を行って、HDR伝送ビデオデータV1を得る。また、ビデオデコーダ204は、ビデオストリームVSを構成する各アクセスユニットに挿入されているパラメータセットやSEIメッセージを抽出し、制御部201に送る。
制御部201は、SPS NALユニットのVUIの領域のメタ情報から、HDRのストリームであること、HDR電光変換特性情報などを認識する。また、ダイナミックレンジ・コンバージョンSEIメッセージからダイナミックレンジの変換情報(変換テーブル、変換係数)を認識する。
YCbCr/RGB変換部205は、ビデオデコーダ204で得られたHDR伝送ビデオデータV1を、YCbCr(輝度・色差)ドメインからRGBドメインに変換する。切換スイッチ206は、制御部201の制御のもと、RGBドメインに変換されたHDR伝送ビデオデータV1を、HDR電光変換部207、あるいはダイナミックレンジ逆変換部208に送る。
この場合、表示モニタ(図示せず)がHDR対応であるとき、切換スイッチ206は、HDR伝送ビデオデータをHDR電光変換部207に送る。一方、表示モニタがSDR対応であるとき、切換スイッチ206は、HDR伝送ビデオデータをダイナミックレンジ逆変換部208に送る。
制御部201は、HDR光電変換部207に、メタ情報から認識したHDR電光変換特性、つまり送信側で用いられたHDR光電変換特性に対応したHDR電光変換特性を設定する。HDR光電変換部207は、切換スイッチ206で取り出されたHDR伝送ビデオデータV1に、HDR電光変換特性を適用して、HDR画像を表示するための表示用ビデオデータVhdを得る。
制御部201は、ダイナミックレンジ逆変換部208に、例えば、ダイナミックレンジ・コンバージョンSEIメッセージから認識したダイナミックレンジの変換情報(変換テーブル、変換係数)を与える。ダイナミックレンジ逆変換部208は、切換スイッチ206で取り出されたHDR伝送ビデオデータV1に、この変換情報に基づいて、ダイナミックレンジ逆変換を行ってSDR伝送ビデオデータを得る。
図15を参照して、対象ストリームの元々のビデオデータがSDRビデオデータである場合におけるダイナミックレンジ逆変換の詳細を説明する。縦軸は出力輝度レベルを示し、図5の横軸に対応する。また、横軸は伝送符号値を示し、図5の縦軸に対応する。実線aは、SDR電光変換特性を示すSDR EOTFカーブである。このSDR EOTFカーブは、図5に実線aで示すSDR OETFカーブに対応している。実線bは、HDR電光変換特性を示すHDR EOTFカーブである。このHDR EOTFカーブは、図5に実線bで示すHDR OETFカーブに対応している。
ダイナミックレンジ逆変換部208におけるダイナミックレンジ逆変換では、HDR伝送ビデオデータのうち、分岐レベルBから基準レベルGまでが、SDR光電変換特性による変換データの値と一致するように変換される。この場合、基準レベルGはSDR最大レベルである相対最大レベルMと一致するようにされる。なお、分岐レベルB未満の入力データは、そのまま出力データとされる。
ここで、変換情報は、上述したように変換テーブルあるいは変換係数で与えられる。変換テーブルで与えられる場合、ダイナミックレンジ逆変換部208は、この変換テーブルを参照して変換を行う。一方、変換係数で与えられる場合、ダイナミックレンジ逆変換部208は、この変換係数を用いた演算により変換を行う。例えば、変換係数をCとするとき、分岐レベルBから基準レベルGまでの入力データに関して、以下の(2)式により、変換を行う。
出力データ=分岐レベルB+(入力データ−分岐レベルB)*1/C ・・・(2)
次に、図16を参照して、対象ストリームの元々のビデオデータがHDRビデオデータである場合におけるダイナミックレンジ逆変換の詳細を説明する。この場合、ダイナミックレンジ逆変換部208では、HDR EOTFカーブへの入力レベルが、SDR EOTFカーブへの入力レベルに変換される。この図16において、図15と対応する部分には同一符号を付して示している。なお、P1´は、基準レベルGより低い所定のレベルHに対応した出力輝度レベルを示している。
この場合、ダイナミックレンジ逆変換部208におけるダイナミックレンジ逆変換では、基準レベルGより低い所定のレベルHまでの入力データに関しては、上述の元々のビデオデータがSDRビデオデータである場合におけるダイナミックレンジ逆変換の場合と同様の変換が行われる。そして、レベルHからレベルMまでの入力データに関しては、一点鎖線で示すトーンマッピング特性TMに基づいてレベル変換が行われて出力データが得られる。この場合、例えば、レベルHはレベルH´に変換され、基準レベルGはレベルG´に変換され、レベルMはそのままレベルMとされる。
このようにレベルHからレベルMまでの入力データに関してトーンマッピング特性TMに基づいたレベル変換がなされることで、基準レベルGから相対最大レベルMまでのレベル飽和による画質劣化の低減が可能となる。
SDR電光変換部209は、ダイナミックレンジ逆変換部208で得られたSDR伝送ビデオデータに、SDR電光変換特性を適用して、SDR画像を表示するための表示用ビデオデータVsdを得る。
図14に示すサービス受信機200の動作を簡単に説明する。受信部202では、サービス送信システム100から放送波あるいはネットのパケットに載せて送られてくるMP4の配信ストリームSTMが受信される。この配信ストリームSTMは、コンテナデコーダ203に供給される。コンテナデコーダ203では、MP4からビデオストリームVSが抽出される。また、コンテナデコーダ203では、MP4からメタ情報が抽出され、制御部201に送られる。制御部201では、このメタ情報から、HDRのストリームであること、HDR電光変換特性情報、元々のビデオデータの情報などが認識される。
コンテナデコーダ203で抽出されたビデオストリームVSは、ビデオデコーダ204に供給される。ビデオデコーダ204では、ビデオストリームVSに対して復号化処理が施され、HDR伝送ビデオデータV1が得られる。また、ビデオデコーダ204では、ビデオストリームVSを構成する各アクセスユニットに挿入されているパラメータセットやSEIメッセージが抽出され、制御部201に送られる。
制御部201では、SPS NALユニットのVUIの領域のメタ情報から、HDRのストリームであること、HDR電光変換特性情報などが認識される。また、ダイナミックレンジ・コンバージョンSEIメッセージからダイナミックレンジの変換情報(変換テーブル、変換係数)が認識される。
ビデオデコーダ204で得られたHDR伝送ビデオデータV1は、YCbCr/RGB変換部205でCbCr(輝度・色差)ドメインからRGBドメインに変換される。RGBドメインに変換されたHDR伝送ビデオデータV1は、表示モニタがHDR対応であるとき、切換スイッチ206を通じて、HDR電光変換部207に供給される。
HDR光電変換部207では、HDR伝送ビデオデータV1に、HDR電光変換特性が適用されて、HDR画像を表示するための表示用ビデオデータVhdが得られる。この表示用ビデオデータVhdは、表示モニタの表示能力に応じて適宜表示マッピング処理が施された後に、表示モニタに供給され、HDR画像の表示が行われる。
一方、RGBドメインに変換されたHDR伝送ビデオデータV1は、表示モニタがSDR対応であるとき、切換スイッチ206を通じて、ダイナミックレンジ逆変換部208に供給される。ダイナミックレンジ逆変換部208に、制御部201から、ダイナミックレンジの変換情報(変換テーブル、変換係数)が与えられる。ダイナミックレンジ逆変換部208では、HDR伝送ビデオデータV1に、この変換情報に基づいてダイナミックレンジ逆変換が行われ、SDR伝送ビデオデータに変換される(図15参照)。なお、これらの色空間のドメインは、RGBドメインに限定されるものではなく、また、輝度・色差ドメインはYCbCrに限定されるわけではない。
このSDR伝送ビデオデータは、SDR電光変換部209に供給される。SDR電光変換部209では、SDR伝送ビデオデータに、SDR電光変換特性が適用されて、SDR画像を表示するための表示用ビデオデータVsdが得られる。この表示用ビデオデータVsdは、表示モニタの表示能力に応じて適宜表示マッピング処理が施された後に、表示モニタに供給され、SDR画像の表示が行われる。
上述したように、図3に示す送受信システム10においては、SDR OETFで映像制作された映像素材であるSDR伝送ビデオデータをHDR伝送ビデオデータに変換して伝送するものである。そのため、受信側ではSDRビデオデータの送信時にあっても、HDRビデオデータの送信時と同様の処理を行うことができ、SDRビデオデータの送信とHDRビデオデータの送信とが交互に行われる場合の受信側処理の簡単化を図ることができる。
また、図3に示す送受信システム10においては、SDR光電変換特性による変換データの値をHDR光電変換特性による変換データの値に変換するためのダイナミックレンジの変換情報(変換ケーブル、変換係数)を、ビデオストリームやコンテナに挿入して伝送するものである。そのため、受信側では、この変換情報を用いて、HDR伝送ビデオデータをSDR伝送ビデオデータに変換してSDR画像表示を行うための処理が容易となる。
<2.変形例>
なお、上述していないが、本技術において前提としている「reference_level」、「branch_level」、「level_conversion_ratio」の値が送受信側で固定に定義される場合、サービス受信機200は、これらの要素が伝送されずとも上記の値が予め保証される配信において、受信したデータに対して同様のレベル変換を行う機能をもつ受信機であってもよい。
また、上述実施の形態においては、コンテナがMP4である例を示した。しかし、本技術は、MP4に限定されるものではなく、MPEG−2 TSやMMTなどの他のフォーマットのコンテナであっても同様に適用し得る。
例えば、MPEG−2 TSの場合には、図4に示すサービス送信システム100のコンテナエンコーダ109では、ビデオストリームVSが含まれたトランスポートストリームTSが生成される。
この際、コンテナエンコーダ109では、トランスポートストリームTSに、HDRのストリームであることなどを示すメタ情報が挿入される。例えば、コンテナエンコーダ109は、プログラム・マップ・テーブル(PMT:Program Map Table)の配下に、ダイナミックレンジ・コンバージョン・デスクリプタ(Dynamic_range_conversion descriptor)を挿入する。
図17は、ダイナミックレンジ・コンバージョン・デスクリプタの構造例(Syntax)を示している。図18は、その構造例における主要な情報の内容(Semantics)を示している。「descriptor_tag」の8ビットフィールドは、デスクリプタタイプを示し、ここでは、ハイダイナミックレンジ・デスクリプタであることを示す。「descriptor_length」の8ビットフィールドは、デスクリプタの長さ(サイズ)を示し、デスクリプタの長さとして以降のバイト数を示す。
「highdynamicrange」の8ビットフィールドは、対象ストリームがHDRストリームであるか示す。“1”はHDRストリームであることを示し、“0”はSDRストリームであることを示す。「transferfunction」の8ビットフィールドは、電光変換特性(EOTF特性)を示す。例えば、“1”は「BT.709-5 Transfer Function」を示し、“14”は「10bit BT.2020 Transfer Function」を示し、“16”は「SMPTE 2084 Transfer Function」を示す。
「xycolourprimaries」の8ビットフィールドは、色空間を示す。例えば、“1”は「BT.709-5」を示し、“9”は「BT.2020」を示し、“10”は「SMPTE 428 or XYZ」を示す。「matrixcoefficients」の8ビットフィールドは、色マトリクス係数を示す。例えば、“1”は「BT.709-5」を示し、“9”は「BT.2020 non-constant lumiinance」を示し、“11”は「SMPTE 2085 or Y′D′zD′x」を示す。
「referencelevel」の8ビットフィールドは、基準レベルG(図5参照)を示す。この場合、基準レベルGとして、最大「1」に正規化された相対範囲の中を0〜100の値で指定した値が記述される。受信側では、この値を100で割ったものが相対基準レベルとして認識される。この相対基準レベルは、ダイナミックレンジ変換の変換情報としての変換係数を構成する。
「branchlevel」の8ビットフィールドは、分岐レベルB(図5参照)を示す。この場合、分岐レベルBとして、最大「1」に正規化された相対範囲の中を0〜100の値で指定した値が記述される。受信側では、この値を100で割ったものが分岐レベルとして認識される。
「streamdependency」の4ビットフィールドは、対象ストリームがインデペンデントストリームであるか示す。例えば、“0”はインデペンデントストリームであることを示し、“1”はデペンデントストリームであることを示す。「originaldynamicrange」の4ビットフィールドは、対象ストリームの元々のビデオデータがSDRビデオデータであるか示す。例えば、“0”はSDRビデオデータであることを示し、“1”はHDRビデオデータであるか示す。
図19は、トランスポートストリームTSの構成例を示している。この構成例では、PID1で識別されるビデオストリームのPESパケット「video PES1」が存在する。アクセスユニットのSPSのVUIの領域に、HDRストリームであること、HDR電光変換特性などを示すメタ情報が挿入されている。また、アクセスユニットに、ダイナミックレンジの変換情報が記述されたダイナミックレンジ・コンバージョンSEIメッセージが挿入される。
また、トランスポートストリームTSには、PSI(Program Specific Information)として、PMT(Program Map Table)が含まれている。PSIは、トランスポートストリームに含まれる各エレメンタリストリームがどのプログラムに属しているかを記した情報である。PMTには、プログラム全体に関連する情報を記述するプログラム・ループ(Program loop)が存在する。
PMTには、各エレメンタリストリームに関連した情報を持つエレメンタリストリーム・ループが存在する。この構成例では、ビデオストリームに対応したビデオエレメンタリストリーム・ループ(video ES loop)が存在する。ビデオエレメンタリストリーム・ループ(video ES loop)には、ビデオストリームに対応して、ストリームタイプ、PID(パケット識別子)等の情報が配置されると共に、そのビデオストリームに関連する情報を記述するデスクリプタも配置される。
このビデオストリームの「Stream_type」の値は、例えばHEVCビデオストリームを示す値に設定され、PID情報はビデオストリームのPESパケット「video PES」に付与されるPID1を示すものとされる。デスクリプタの一つとして、ダイナミックレンジ・コンバージョン・デスクリプタが挿入されている。
また、本技術は、以下のような構成を取ることもできる。
(1)通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、上記通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換を行ってハイダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換部と、
上記ハイダイナミックレンジ伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコード部と、
上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信部を備える
送信装置。
(2)上記変換情報を、上記ビデオストリームおよび/または上記コンテナに挿入する情報挿入部をさらに備える
前記(1)に記載の送信装置。
(3)上記情報挿入部は、上記コンテナに、上記ビデオストリームがハイダイナミックレンジに対応していることを示す情報をさらに挿入する
前記(2)に記載の送信装置。
(4)上記情報挿入部は、上記コンテナに、上記ハイダイナミックレンジ光電変換特性に対応したハイダイナミックレンジ電光変換特性を示す情報をさらに挿入する
前記(2)または(3)に記載の送信装置。
(5)上記情報挿入部は、上記コンテナに、元々のビデオデータが通常ダイナミックレンジビデオデータであることを示す情報をさらに挿入する
前記(2)から(4)のいずれかに記載の送信装置。
(6)上記変換情報は、変換係数である
前記(1)から(5)のいずれかに記載の送信装置。
(7)上記変換情報は、変換テーブルである
前記(1)から(5)のいずれかに記載の送信装置。
(8)通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、上記通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換を行ってハイダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換ステップと、
上記ハイダイナミックレンジ伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコードステップと、
送信部により、上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信ステップを有する
送信方法。
(9)ハイダイナミックレンジ伝送ビデオデータが符号化されて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信部と、
上記ビデオストリームにデコード処理を施して上記ハイダイナミックレンジ伝送ビデオデータを得るデコード部と、
上記デコード部で得られたハイダイナミックレンジ伝送ビデオデータに、ダイナミックレンジ変換を行って通常ダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換部と、
上記ダイナミックレンジ変換部で得られた通常ダイナミックレンジ伝送ビデオデータに、通常ダイナミックレンジ電光変換特性による電光変換を施して表示用の通常ダイナミックレンジビデオデータを得る電光変換部を備える
受信装置。
(10)上記デコード部で得られたハイダイナミックレンジ伝送ビデオデータは、通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、上記通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換処理が施されて得られたものである
前記(9)に記載の受信装置。
(11)上記ビデオストリームおよび/または上記コンテナに、変換情報が挿入されており、
上記ビデオストリームおよび/または上記コンテナから上記変換情報を抽出する変換情報抽出部をさらに備え、
上記ダイナミックレンジ変換部は、上記変換情報抽出部で抽出された上記変換情報に基づいて上記ダイナミックレンジ変換を行う
前記(9)または(10)に記載の受信装置。
(12)受信部により、ハイダイナミックレンジ伝送ビデオデータが符号化されて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信ステップと、
上記ビデオストリームにデコード処理を施して上記ハイダイナミックレンジ伝送ビデオデータを得るデコードステップと、
上記デコードステップで得られたハイダイナミックレンジ伝送ビデオデータに、ダイナミックレンジ変換を行って通常ダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換ステップと、
上記ダイナミックレンジ変換ステップで得られた通常ダイナミックレンジ伝送ビデオデータに、通常ダイナミックレンジ電光変換特性による電光変換を施して表示用の通常ダイナミックレンジビデオデータを得る電光変換ステップを有する
受信方法。
本技術の主な特徴は、SDR OETFで映像制作された映像素材であるSDR伝送ビデオデータをHDR伝送ビデオデータに変換して伝送することで、SDRビデオデータの送信とHDRビデオデータの送信とが時系列的に混在するような場合の受信側処理の簡単化を図るようにしたことである(図4、図5参照)。
10・・・送受信システム
30A,30B・・・MPEG−DASHベースのストリーム配信システム
31・・・DASHストリームファイルサーバ
32・・・DASH MPDサーバ
33,33-1〜33-N・・・サービス受信機
34・・・CDN
35,35-1〜35-M・・・サービス受信機
36・・・放送送出システム
100・・・サービス送信システム
101・・・制御部
103・・・HDR光電変換部
104・・・SDR光電変換部
105・・・ダイナミックレンジ変換部
106・・・切換スイッチ
107・・・RGB/YCbCr変換部
108・・・ビデオエンコーダ
109・・・コンテナエンコーダ
110・・・送信部
200・・・サービス受信機
201・・・制御部
202・・・受信部
203・・・コンテナデコーダ
204・・・ビデオデコーダ
205・・・YCbCr/RGB変換部
206・・・切換スイッチ
207・・・HDR電光変換部
208・・・ダイナミックレンジ逆変換部
209・・・SDR電光変換部

Claims (12)

  1. 通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、上記通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換を行ってハイダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換部と、
    上記ハイダイナミックレンジ伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコード部と、
    上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信部を備え、
    上記通常ダイナミックレンジ光電変換特性は所定の入力輝度レベルまで上記ハイダイナミックレンジ光電変換特性と同一の特性を持ち、
    上記ダイナミックレンジ変換部は、上記通常ダイナミックレンジ伝送ビデオデータのうち上記所定の入力輝度レベルに対応した分岐レベル以上に対して上記ダイナミックレンジ変換をする
    送信装置。
  2. 上記変換情報を、上記ビデオストリームおよび/または上記コンテナに挿入する情報挿入部をさらに備える
    請求項1に記載の送信装置。
  3. 上記情報挿入部は、上記コンテナに、上記ビデオストリームがハイダイナミックレンジに対応していることを示す情報をさらに挿入する
    請求項2に記載の送信装置。
  4. 上記情報挿入部は、上記コンテナに、上記ハイダイナミックレンジ光電変換特性に対応したハイダイナミックレンジ電光変換特性を示す情報をさらに挿入する
    請求項2に記載の送信装置。
  5. 上記情報挿入部は、上記コンテナに、元々のビデオデータが通常ダイナミックレンジビデオデータであることを示す情報をさらに挿入する
    請求項2に記載の送信装置。
  6. 上記変換情報は、変換係数である
    請求項1に記載の送信装置。
  7. 上記変換情報は、変換テーブルである
    請求項1に記載の送信装置。
  8. 上記分岐レベルの情報を、上記ビデオストリームおよび/または上記コンテナに挿入する情報挿入部をさらに備える
    請求項1に記載の送信装置。
  9. 通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、上記通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換を行ってハイダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換ステップと、
    上記ハイダイナミックレンジ伝送ビデオデータにエンコード処理を施してビデオストリームを得るエンコードステップと、
    送信部により、上記ビデオストリームを含む所定フォーマットのコンテナを送信する送信ステップを有し、
    上記通常ダイナミックレンジ光電変換特性は所定の入力輝度レベルまで上記ハイダイナミックレンジ光電変換特性と同一の特性を持ち、
    上記ダイナミックレンジ変換ステップでは、上記通常ダイナミックレンジ伝送ビデオデータのうち上記所定の入力輝度レベルに対応した分岐レベル以上に対して上記ダイナミックレンジ変換をする
    送信方法。
  10. ハイダイナミックレンジ伝送ビデオデータが符号化されて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信部と、
    上記ビデオストリームにデコード処理を施して上記ハイダイナミックレンジ伝送ビデオデータを得るデコード部を備え、
    上記デコード部で得られた上記ハイダイナミックレンジ伝送ビデオデータは、通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、上記通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換が行われて得られたものであり、
    上記通常ダイナミックレンジ光電変換特性は所定の入力輝度レベルまで上記ハイダイナミックレンジ光電変換特性と同一の特性を持ち、
    上記ダイナミックレンジ変換では、上記通常ダイナミックレンジ伝送ビデオデータのうち上記所定の入力輝度レベルに対応した分岐レベル以上に対して上記ダイナミックレンジ変換がされており、
    上記デコード部で得られたハイダイナミックレンジ伝送ビデオデータに、上記変換情報に基づいてダイナミックレンジ変換を行って通常ダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換部と、
    上記ダイナミックレンジ変換部で得られた通常ダイナミックレンジ伝送ビデオデータに、通常ダイナミックレンジ電光変換特性による電光変換を施して表示用の通常ダイナミックレンジビデオデータを得る電光変換部をさらに備え、
    上記ダイナミックレンジ変換部は、上記ハイダイナミックレンジ伝送ビデオデータのうち上記所定の入力輝度レベルに対応した分岐レベル以上に対して上記ダイナミックレンジ変換をする
    受信装置。
  11. 上記ビデオストリームおよび/または上記コンテナに、上記変換情報が挿入されており、
    上記ビデオストリームおよび/または上記コンテナから上記変換情報を抽出する変換情報抽出部をさらに備え、
    上記ダイナミックレンジ変換部は、上記変換情報抽出部で抽出された上記変換情報に基づいて上記ダイナミックレンジ変換を行う
    請求項10に記載の受信装置。
  12. 受信部により、ハイダイナミックレンジ伝送ビデオデータが符号化されて得られたビデオストリームを含む所定フォーマットのコンテナを受信する受信ステップと、
    上記ビデオストリームにデコード処理を施して上記ハイダイナミックレンジ伝送ビデオデータを得るデコードステップを有し、
    上記デコードステップで得られた上記ハイダイナミックレンジ伝送ビデオデータは、通常ダイナミックレンジビデオデータに通常ダイナミックレンジ光電変換特性による光電変換が施されて得られた通常ダイナミックレンジ伝送ビデオデータに、上記通常ダイナミックレンジ光電変換特性による変換データの値をハイダイナミックレンジ光電変換特性による変換データの値に変換するための変換情報に基づいてダイナミックレンジ変換が行われて得られたものであり、
    上記通常ダイナミックレンジ光電変換特性は所定の入力輝度レベルまで上記ハイダイナミックレンジ光電変換特性と同一の特性を持ち、
    上記ダイナミックレンジ変換では、上記通常ダイナミックレンジ伝送ビデオデータのうち上記所定の入力輝度レベルに対応した分岐レベル以上に対して上記ダイナミックレンジ変換がされており、
    上記デコードステップで得られたハイダイナミックレンジ伝送ビデオデータに、上記変換情報に基づいてダイナミックレンジ変換を行って通常ダイナミックレンジ伝送ビデオデータを得るダイナミックレンジ変換ステップと、
    上記ダイナミックレンジ変換ステップで得られた通常ダイナミックレンジ伝送ビデオデータに、通常ダイナミックレンジ電光変換特性による電光変換を施して表示用の通常ダイナミックレンジビデオデータを得る電光変換ステップをさらに有し、
    上記ダイナミックレンジ変換ステップでは、上記ハイダイナミックレンジ伝送ビデオデータのうち上記所定の入力輝度レベルに対応した分岐レベル以上に対して上記ダイナミックレンジ変換をする
    受信方法。
JP2017500620A 2015-02-17 2016-02-09 送信装置、送信方法、受信装置および受信方法 Active JP6834939B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015029106 2015-02-17
JP2015029106 2015-02-17
PCT/JP2016/053858 WO2016132976A1 (ja) 2015-02-17 2016-02-09 送信装置、送信方法、受信装置および受信方法

Publications (2)

Publication Number Publication Date
JPWO2016132976A1 JPWO2016132976A1 (ja) 2017-11-24
JP6834939B2 true JP6834939B2 (ja) 2021-02-24

Family

ID=56689259

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017500620A Active JP6834939B2 (ja) 2015-02-17 2016-02-09 送信装置、送信方法、受信装置および受信方法

Country Status (7)

Country Link
US (3) US10390057B2 (ja)
EP (1) EP3261352B1 (ja)
JP (1) JP6834939B2 (ja)
KR (1) KR102423434B1 (ja)
CA (1) CA2976183C (ja)
MX (1) MX368825B (ja)
WO (1) WO2016132976A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016152684A1 (ja) * 2015-03-24 2016-09-29 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
CN107534798A (zh) 2015-04-22 2018-01-02 Lg 电子株式会社 广播信号发送设备、广播信号接收设备、广播信号发送方法和广播信号接收方法
KR102509504B1 (ko) * 2015-08-24 2023-03-13 인터디지털 매디슨 페턴트 홀딩스 에스에이에스 코딩 및 디코딩 방법과 대응하는 디바이스
US10536665B2 (en) * 2016-02-01 2020-01-14 Lg Electronics Inc. Device for transmitting broadcast signal, device for receiving broadcast signal, method for transmitting broadcast signal, and method for receiving broadcast signal
WO2018055945A1 (ja) * 2016-09-20 2018-03-29 ソニー株式会社 映像信号処理装置、映像信号処理方法および映像信号処理システム
WO2018070255A1 (ja) * 2016-10-11 2018-04-19 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
CN108737877B (zh) * 2017-04-21 2020-06-02 华为技术有限公司 图像处理的方法、装置和终端设备
TWI808970B (zh) * 2018-04-30 2023-07-21 圓剛科技股份有限公司 影像訊號轉換裝置
US10819915B1 (en) 2019-10-17 2020-10-27 Horiba Instruments Incorporated Apparatus and method generating high dynamic range video
US11508296B2 (en) * 2020-06-24 2022-11-22 Canon Kabushiki Kaisha Image display system for displaying high dynamic range image
US11412174B2 (en) * 2020-09-22 2022-08-09 Microsoft Technology Licensing, Llc Efficient electro-optical transfer function (EOTF) curve for standard dynamic range (SDR) content

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1069779B1 (en) * 1999-02-09 2016-04-13 Sony Corporation Coding system and its method
JP4806329B2 (ja) * 2006-10-23 2011-11-02 三洋電機株式会社 撮像装置及び撮像方法
JP5012333B2 (ja) * 2007-08-30 2012-08-29 コニカミノルタアドバンストレイヤー株式会社 画像処理装置および画像処理方法ならびに撮像装置
TWI479898B (zh) * 2010-08-25 2015-04-01 Dolby Lab Licensing Corp 擴展影像動態範圍
EP2448251B1 (en) * 2010-10-31 2019-09-25 Mobileye Vision Technologies Ltd. Bundling night vision and other driver assistance systems (DAS) using near infra red (NIR) illumination and a rolling shutter
US8743291B2 (en) * 2011-04-12 2014-06-03 Dolby Laboratories Licensing Corporation Quality assessment for images that have extended dynamic ranges or wide color gamuts
WO2012158504A1 (en) * 2011-05-16 2012-11-22 Dolby Laboratories Licensing Corporation Efficient architecture for layered vdr coding
WO2013059116A1 (en) * 2011-10-20 2013-04-25 Dolby Laboratories Licensing Corporation Method and system for video equalization
US8954759B2 (en) * 2012-09-14 2015-02-10 Avalanche Technology, Inc. Secure spin torque transfer magnetic random access memory (STTMRAM)
JP5647209B2 (ja) * 2012-11-07 2014-12-24 オリンパスイメージング株式会社 撮像装置及び撮像方法
JP6233656B2 (ja) * 2012-12-21 2017-11-22 ソニー株式会社 画像処理装置および方法
CN105324997B (zh) * 2013-06-17 2018-06-29 杜比实验室特许公司 用于增强动态范围信号的分层编码的自适应整形
CN110867198B (zh) * 2013-06-20 2022-02-25 索尼公司 显示装置
JP2015008361A (ja) 2013-06-24 2015-01-15 ソニー株式会社 再生装置、再生方法、および記録媒体
CN105393525B (zh) * 2013-07-18 2019-04-12 皇家飞利浦有限公司 创建用于对hdr图像编码的代码映射函数的方法和装置以及使用这样的编码图像的方法和装置
JP6202330B2 (ja) * 2013-10-15 2017-09-27 ソニー株式会社 復号装置および復号方法、並びに符号化装置および符号化方法
WO2015073377A1 (en) * 2013-11-13 2015-05-21 Dolby Laboratories Licensing Corporation Workflow for content creation and guided display management of edr video
EP3070934A4 (en) * 2013-11-13 2017-03-29 LG Electronics Inc. Broadcast signal transmission method and apparatus for providing hdr broadcast service
KR101804925B1 (ko) * 2014-01-06 2017-12-05 엘지전자 주식회사 컬러 개멋 리샘플링을 기반으로 하는 방송 신호 송수신 방법 및 장치
EP3748975A1 (en) * 2014-02-07 2020-12-09 Sony Corporation Transmission device, transmission method, reception device, reception method, display device, and display method
KR102330316B1 (ko) * 2014-02-25 2021-11-24 애플 인크. 비디오 인코딩 및 디코딩을 위한 적응형 전달 함수
EP3145206B1 (en) * 2014-05-15 2020-07-22 Sony Corporation Communication apparatus, communication method, and computer program
JP6421504B2 (ja) * 2014-07-28 2018-11-14 ソニー株式会社 画像処理装置及び画像処理方法
MX360781B (es) * 2014-09-22 2018-11-16 Panasonic Ip Man Co Ltd Método de reproducción y aparato de reproducción.
US10924743B2 (en) * 2015-02-06 2021-02-16 Microsoft Technology Licensing, Llc Skipping evaluation stages during media encoding
US10027856B2 (en) * 2015-03-05 2018-07-17 Sony Corporation Devices and methods for transmitting transmission video data

Also Published As

Publication number Publication date
JPWO2016132976A1 (ja) 2017-11-24
CA2976183C (en) 2023-06-20
US20180014040A1 (en) 2018-01-11
MX2017010251A (es) 2017-11-17
EP3261352B1 (en) 2020-09-09
US20190335211A1 (en) 2019-10-31
US11838564B2 (en) 2023-12-05
KR20170120578A (ko) 2017-10-31
US20220060763A1 (en) 2022-02-24
KR102423434B1 (ko) 2022-07-22
US11178434B2 (en) 2021-11-16
EP3261352A4 (en) 2018-07-04
CA2976183A1 (en) 2016-08-25
EP3261352A1 (en) 2017-12-27
MX368825B (es) 2019-10-18
WO2016132976A1 (ja) 2016-08-25
US10390057B2 (en) 2019-08-20

Similar Documents

Publication Publication Date Title
JP6834939B2 (ja) 送信装置、送信方法、受信装置および受信方法
US20230104968A1 (en) Transmitting device, transmitting method, receiving device, and receiving method
JP2019135871A (ja) 送信装置、送信方法、受信装置、受信方法、表示装置および表示方法
JP6897843B2 (ja) 送信装置、送信方法、受信装置および受信方法
US11792452B2 (en) Transmission device, transmission method, reception device and reception method
JP7232183B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP2021177670A (ja) 送信装置および送信方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191217

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200714

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200909

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210118

R151 Written notification of patent or utility model registration

Ref document number: 6834939

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151