JP6863271B2 - 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム - Google Patents
情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム Download PDFInfo
- Publication number
- JP6863271B2 JP6863271B2 JP2017500575A JP2017500575A JP6863271B2 JP 6863271 B2 JP6863271 B2 JP 6863271B2 JP 2017500575 A JP2017500575 A JP 2017500575A JP 2017500575 A JP2017500575 A JP 2017500575A JP 6863271 B2 JP6863271 B2 JP 6863271B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- stream
- file
- information
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 180
- 238000003672 processing method Methods 0.000 title claims description 17
- 238000012545 processing Methods 0.000 claims description 203
- 238000000034 method Methods 0.000 claims description 104
- 230000008569 process Effects 0.000 claims description 104
- 238000006243 chemical reaction Methods 0.000 claims description 74
- 238000012546 transfer Methods 0.000 claims description 39
- 230000006870 function Effects 0.000 description 25
- 230000006854 communication Effects 0.000 description 24
- 238000004891 communication Methods 0.000 description 23
- AWSBQWZZLBPUQH-UHFFFAOYSA-N mdat Chemical compound C1=C2CC(N)CCC2=CC2=C1OCO2 AWSBQWZZLBPUQH-UHFFFAOYSA-N 0.000 description 23
- 230000009977 dual effect Effects 0.000 description 12
- 238000004458 analytical method Methods 0.000 description 7
- 238000007726 management method Methods 0.000 description 7
- 241000136406 Comones Species 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 238000007405 data analysis Methods 0.000 description 4
- 102100022523 Acetoacetyl-CoA synthetase Human genes 0.000 description 3
- 101000678027 Homo sapiens Acetoacetyl-CoA synthetase Proteins 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000003340 mental effect Effects 0.000 description 2
- WZFUQSJFWNHZHM-UHFFFAOYSA-N 2-[4-[2-(2,3-dihydro-1H-inden-2-ylamino)pyrimidin-5-yl]piperazin-1-yl]-1-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)ethanone Chemical compound C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)N1CCN(CC1)CC(=O)N1CC2=C(CC1)NN=N2 WZFUQSJFWNHZHM-UHFFFAOYSA-N 0.000 description 1
- 230000002730 additional effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
- H04N7/0122—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal the input and the output signals having different aspect ratios
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
- G11B27/327—Table of contents
- G11B27/329—Table of contents on a disc [VTOC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/756—Media network packet handling adapting media to device capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2362—Generation or processing of Service Information [SI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/84—Television signal recording using optical recording
- H04N5/85—Television signal recording using optical recording on discs or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2541—Blu-ray discs; Blue laser DVR discs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0125—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards being a high definition standard
Description
現行のBD−ROMは、主にHD画像、いわゆるハイビジョン対応の2K画像が記録されているものが多いが、今後、高画質化が進み、超高精細画像(UHD:Ultra High Definition画像)である4K画像を記録したメディアが増加することが予想される。
なお、BDを利用したデータ記録再生処理や、4K画像については、例えば特許文献1(特開2011−023071号公報)等に記載がある。
BDAでは、4K画像に対する対応のみではなく、ディスプレイに出力する画像の色域やコントラスト比を拡張したHDR(High Dynamic Range)画像の対応も考慮に入れた規格化を策定中である。
今後、4K画像のみならずHDR画像を出力可能なディスプレイが徐々に普及していくものと想定される。
従って、HDR画像コンテンツを記録したメディアが、HDR非対応ディスプレイによって再生されることも考慮しなくてはならない。
データ処理部が、処理対象データを格納したトランスポートストリーム(TS)ファイルを取得し、
トランスポートストリーム(TS)ファイルに格納された画像属性情報を取得し、
取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する構成であり、
前記画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含み、
前記データ処理部は、
フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行する情報処理装置にある。
トランスポートストリーム(TS)ファイルを生成するデータ処理部を有し、
前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納する画像ストリーム単位の画像属性情報として、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報をトランスポートストリーム(TS)ファイルに格納する情報処理装置にある。
トランスポートストリーム(TS)ファイルを記録した情報記録媒体であり、
前記トランスポートストリーム(TS)ファイルは、
トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報を含み、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を記録した構成であり、
前記データ処理部は、
トランスポートストリーム(TS)ファイルを読み取り、フォーマット変換、または出力処理を実行する情報処理装置において、処理対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行することを可能とした情報記録媒体にある。
情報処理装置において実行する情報処理方法であり、
前記情報処理装置のデータ処理部が、処理対象データを格納したトランスポートストリーム(TS)ファイルを取得するファイル取得ステップと、
トランスポートストリーム(TS)ファイルに格納された画像属性情報を取得し、
取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する処理実行ステップを実行し、
前記画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含み、
前記データ処理部は、前記処理実行ステップにおいて、
フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行する情報処理方法にある。
情報処理装置において実行する情報処理方法であり、
前記情報処理装置は、
トランスポートストリーム(TS)ファイルを生成するデータ処理部を有し、
前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納する画像ストリーム単位の画像属性情報として、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報をトランスポートストリーム(TS)ファイルに格納する情報処理方法にある。
情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置のデータ処理部に、処理対象データを格納したトランスポートストリーム(TS)ファイルを取得するファイル取得ステップと、
トランスポートストリーム(TS)ファイルに格納された画像属性情報を取得し、
取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する処理実行ステップを実行させ、
前記画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含み、
前記プログラムは、前記処理実行ステップにおいて、
前記データ処理部に、フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行させるプログラムにある。
情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置は、
トランスポートストリーム(TS)ファイルを生成するデータ処理部を有し、
前記プログラムは、前記データ処理部に、
トランスポートストリーム(TS)ファイルに格納する画像ストリーム単位の画像属性情報として、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報をトランスポートストリーム(TS)ファイルに格納する処理を実行させるプログラムにある。
具体的には、データ処理部が、処理対象データを格納したTSファイルに格納された画像属性情報を取得し、取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する。画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含む。データ処理部は、フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行する。
本構成により、トランスポートストリーム(TS)ファイルから、画像属性情報を取得して、取得属性に応じた処理を実行する構成が実現される。
なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
1.MPEG−2TSフォーマットについて
2.MP4フォーマットについて
3.MPEG−2TSフォーマットデータから画像データ属性情報取得を可能とした構成例について
3−1.ビデオエレメンタリストリームのタイプ情報(video_stream_type)
3−2.ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)
3−3.ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
3−4.ビデオエレメンタリストリームの色情報(colour_primaries)
3−5.ビデオエレメンタリストリーム属性情報[(2)+(3)+(4)](video_d_range2)
3−6.ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
4.具体的な画像属性情報記録例について
4−1.属性情報記録例1:属性情報(1)(3)(4)(6)を記録した例
4−2.属性情報記録例2:属性情報(2)(3)(4)(6)を記録した例
4−3.属性情報記録例3:属性情報(5)(6)を記録した例
5.情報処理装置の実行するデータ処理のシーケンス例について
5−1.MPEG−2TSフォーマットからMP4フォーマットへの変換処理シーケンス
5−2.MPEG−2TSフォーマットデータの再生処理シーケンス
5−3.MPEG−2TSファイルの生成処理シーケンスについて(ビデオストリームタイプの設定)
5−4.MPEG−2TSファイルの生成処理シーケンスについて(ビデオストリームタイプ以外の属性の設定)
6.情報処理装置の構成例について
6−1.フォーマット変換およびデータ記録処理を実行する情報処理装置の構成例について
6−2.データ再生、またはデータ生成、記録処理を実行する情報処理装置の構成例について
7.本開示の構成のまとめ
本開示は、例えばBD(Blu−ray(登録商標) Disc)等の情報記録媒体に記録されたデータ、あるいは、例えばサーバや放送局からの受信データがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを確実に確認することを可能とするための構成を提供する。
図1は、例えばROM型のBD(Blu−ray(登録商標) Disc)である情報記録媒体(メディア)10に記録されたBDMVフォーマットに従った記録データのディレクトリを示す図である。
管理情報設定部11(AACSディレクトリ)には、データの暗号化鍵であるCPSユニットキーファイルや利用制御情報ファイルなどが格納される。
インデックスファイル、
プレイリストファイル、
クリップ情報ファイル、
クリップAVストリームファイル、
BDJOファイル、
例えば、これらのファイルが記録される。
プレイリストファイルは、タイトルによって指定される再生プログラムのプログラム情報に従ったコンテンツの再生順等を規定したファイルであり、再生位置情報を持つクリップ情報に対する指定情報を有する。
クリップ情報ファイルは、プレイリストファイルによって指定されるファイルであり、クリップAVストリームファイルの再生位置情報等を有する。
クリップAVストリームファイルは、再生対象となるAVストリームデータを格納したファイルである。
BDJOファイルは、JAVA(登録商標)プログラム、コマンド等を格納したファイルの実行制御情報を格納したファイルである。
(a)まず、再生アプリケーションによってインデックスファイルから特定のタイトルを指定する。
(b)指定されたタイトルに関連付けられた再生プログラムが選択される。
(c)選択された再生プログラムのプログラム情報に従ってコンテンツの再生順等を規定したプレイリストが選択される。
(d)選択されたプレイリストに規定されたクリップ情報によって、コンテンツ実データとしてのAVストリームあるいはコマンドが読み出されて、AVストリームの再生や、コマンドの実行処理が行われる。
プレイリストファイル、
クリップ情報ファイル、
クリップAVストリームファイル、
これらのデータの対応関係を説明する図である。
プレイリスト(PlayList)ファイルを含むプレイリストレイヤ、
クリップAVストリーム(Clip AV Stream)ファイルと、クリップ情報(Clip Information)ファイルからなるクリップレイヤ、
これらの2つのレイヤに区分できる。
クリップAVストリームファイルに含まれるデータの詳細情報、例えばMPEGデータのIピクチャ位置情報などを記録したEPマップなどの管理情報がクリップ情報ファイルに記録される。
プレイリスト(PlayList)ファイルには、1つ以上のプレイアイテム(PlayItem)が設定され、プレイアイテムの各々が、クリップ(=クリップ情報ファイル+クリップAVストリームファイル)レイヤに含まれる再生可能データに対する再生区間の指定情報を有する。
MP4フォーマットの概要については後述する。
画像:MPEG−1、MPEG−2、AVC(MPEG−4AVC)、HEVC(MPEG−4HEVC)、
音声:MP1,MP2,MP3,リニアPCM,DTS
静止画:JPEG
例えば上記の各符号化データがMPEG−2TSにおいて規定するTS(トランスポートストリーム)パケットに分散して格納される。
図3(A)に示すように、MPEG−2TSファイルは、整数個のアラインドユニット(Aligned unit)から構成される。
アラインドユニット(Aligned unit)の大きさは、6kB(=6144バイト(2048×3バイト))である。
アラインドユニット(Aligned unit)は、ソースパケットの第一バイト目から始まる。
図3(C)に示すように、一つのソースパケットは、TP_extra_headerとTSパケットから成る。TP_extra_headerは、4バイト長であり、またTSパケットは、188バイト長である。
図3(E)に示すように、TSパケットのヘッダ(TPヘッダ)にはペイロードのデータ種類を示すPID(プログラムID)が記録される。
TSパケットのペイロードに格納される属性情報や制御情報は、具体的には、例えば、PSI/SI(Program Specific Information)と呼ばれる情報である。
PSI/SIには、例えば、プログラムマップテーブル(PMT:Program Map Table)が含まれる。
(a)同期用バイト(Sync byte)
(b)トランスポートエラー識別子(Transport_error_indicator)
(c)ペイロードユニットスタート識別子(Payload_unit_start_indicator)
(d)トランスポートプライオリティ(Transport_priority)
(e)プログラムID(PID)
(f)トランスポートスクランブリングコントロール(Transport scrambling control)
(g)アダプテーションフィールドコントロール(Adaptation field contrpl)
(h)コンティニュイティカウンタ(Continuity counter)
(i)アダプテーションフィールド(Adaptation field)
次に、例えばスマートフォンなどにおいて多く利用されるフラッシュメモリ等にデータ記録を行う場合に適したフォーマットであるMP4フォーマットについて説明する。
図4、図5を参照して、MP4フォーマットの概要について説明する。
図4には、ISO/IEC14496−14で規定されたMP4フォーマットの例として、以下の2つの例を示している。
(a)フラグメンテッド(分割型)MP4ファイル(fragmented movie)
(b)ノンフラグメンテッド(非分割型)MP4ファイル(Non−fragmented movie)
これら図4(a),(b)に示すMP4ファイルは、MP4フォーマットに従ったデータの記録あるいは再生処理における1つの処理単位として設定されるファイルである。
(b)ノンフラグメンテッド(非分割型)MP4ファイル(Non−fragmented movie)は、再生対象データである画像や音声などのデータを分割せずに格納したファイルフォーマットである。
各ボックスは、ボックスサイズ(box−size)、ボックスタイプ(box−type)、ボックスデータ(box−data)の各領域を有する。
ボックスサイズ(box−size)には、ボックスのデータ長(バイトサイズ)が記録される。
ボックスタイプ(box−type)には、ボックスに格納するデータの種類が記録される。
ボックスデータ(box−data)には、ボックスタイプで示される種類のデータが記録される。
moovボックス、
trakボックス、
moofボックス、
trafボックス、
mdatボックス、
上記の各ボックスが設定される。
また、mdatボックスの各々にはmoofボックスが対応付けられており、moofボックスには、moofボックスに対応付けられたmdatボックスに格納した分割実データに関する属性情報、再生制御情報等のメタデータを格納する。
trafボックスには、対応付けられた実データ(mdat)の再生シーケンス情報等が格納される。
moovボックス内には、1つ以上のtrakボックスが設定される。trakボックスは、例えば画像、音声、字幕等のデータ種類別に設定可能であり、各データの再生シーケンス情報等を格納する。
また、MP4ファイルの格納音声データに複数の異なる音声データ、例えば日本語音声、英語音声等が含まれる場合には、これらの音声種類に応じて個別のtrakボックスを設定可能である。
同様に、MP4ファイルの格納字幕データに複数の異なる字幕データ、例えば日本語字幕、英語字幕等が含まれる場合には、これらの字幕種類に応じて個別のtrakボックスを設定可能である。
図4(b)に示すノンフラグメンテッド(非分割型)MP4ファイルには、以下のタイプのボックスが設定される。
moovボックス、
trakボックス、
mdatボックス、
上記の各ボックスが設定される。
moovボックスには、再生対象データである実データ(mdat)に対応して設定されるメタデータ、例えば再生対象実データ(mdat)の属性や再生制御情報を含むメタデータが格納される。
moovボックス内に設定されるtrakボックスには、実データ(mdat)の再生シーケンス情報等が格納される。
MP4フォーマットに関する規格化団体であるDECE(Digital Entertainment Content Ecoststem)は、MP4ベースの新たなファイルフォーマットとしてCFF(Common File Format)を規格化した。このCFFについて、図5を参照して説明する。
moovボックス、
trakボックス、
moofボックス、
trafボックス、
mdatボックス、
上記の各ボックスが設定される。
ただし、CFFでは、各mdatボックスには、1つの種類のデータのみを格納するという制約が設けられている。
すなわち、各mdatボックスには、
(a)画像
(b)音声
(c)字幕
これらのデータのいずれか一種類のデータを格納する。上記(a)〜(c)のデータを混在させて格納してはならないという制約がある。
同様に、異なる音声データ、例えば日本語音声、英語音声等についても個別のmdatボックスに格納し、日本語字幕、英語字幕等についても異なるmdatボックスに格納する。
しかし、図5に示すCFF(Common File Format)では、1つのmdatボックスには、1つの種類のデータのみしか格納してはならないという制約が設けられている。
従ってmdatボックス対応のメタデータ格納領域であるmoofボックスも、画像、音声、字幕いずれか一種類のデータに対応して設定されるメタデータを格納する設定となる。
CFF(Common File Format)では、1つのmdatボックスには画像サンプルのみの集合、あるいは音声サンプルのみの集合、または字幕サンプルのみの集合、いずれか同一種類のデータサンプルの集合が格納されることになる。
CFFファイルに格納することが許容されるデータ形式には、例えば、以下のデータ形式がある。
画像(Video):AVC(MPEG−4AVC)、HEVC(MPEG−4HEVC)、
音声(Audio):MPEG−4−AAC、Dolby、AC−3
字幕(subtitle):SMPTE Timed Text(SMPTE−TT)
先に説明したように、本開示は、例えばBD(Blu−ray(登録商標) Disc)等の情報記録媒体に記録されたデータ、あるいは、例えばサーバや放送局からの受信データがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを確実に確認することを可能とするための構成を提供する。
さらに、読み出したトランスポートストリーム(TS)ファイル51に基づくフォーマット変換を実行してMP4フォーマットデータファイル61を生成して第2メディア(フラッシュメモリ)65に記録する。
すなわち、情報処理装置60は、フォーマット変換処理において、トランスポートストリーム(TS)ファイル51からトランスポートストリーム(TS)ファイル51に格納された画像データがHDR画像であるかSDR画像であるかを確認する処理を行なわなければならない。
送信データは、MPEG−2TSフォーマットに従って生成されたトランスポートストリーム(TS)ファイル80である。
例えば、受信装置90側で利用されるディスプレイがSDR専用であり、HDR非対応の場合は、送信装置70からに送信されるトランスポートストリーム(TS)ファイル80に格納された画像データがHDR画像である場合はSDR画像に変換する処理が必要となる。
図8(D)トランスポートパケット(TSパケット)は、図3(D)に示すトランスポートパケット(TSパケット)に対応する。
図3(E)に示すように、TSパケットのヘッダ(TPヘッダ)にはペイロードのデータ種類を示すPID(プログラムID)が記録される。
PSI/SIには、例えば、プログラムマップテーブル(PMT:Program Map Table)が含まれる。
プログラムマップテーブル(PMT)に記録される主なデータは以下のデータである。
(1)サービス識別子(program_number)
(2)PCR_PID
(3)エレメンタリストリーム(ES)情報
(3a)ストリームタイプ
(3b)エレメンタリPID
(3c)エレメンタリ対応情報(情報記述子:descriptor)
(2)PCR_PIDは、プログラム・クロック・リフェランス(program clock reference)PIDであり、サービス(コンテンツ)対応のタイムスタンプを格納したパケットのPID情報である。
画像(Video)、音声(Audio)、字幕(Caption)各々の情報が順次、記録される。
(3a)ストリームタイプ
(3b)エレメンタリPID
(3c)データコンポーネント(ES)情報(ES情報)
(3b)エレメンタリPIDは、ストリームタイプで規定された種類のデータを格納したTSパケットのPIDを示す。
(3c)データコンポーネント情報(ES情報)には、ストリームタイプで規定された種類のデータ(ES:画像、音声、字幕)に関する追加情報、すなわちエレメンタリPID(elementary_PID)によって識別される各エレメンタリストリーム(ES)単位の制御情報、属性情報等の追加情報が記録される。
個々のビデオエレメンタリストリームに関する様々な属性情報の記録構成例である。図10に示す例では、以下の各情報が記録されている。
符号化タイプ(stream_coding_type)
画像フォーマット(video_format)
フレームレート(frame_rate)
アスペクト比(aspect_ratio)
本開示の構成では、このリザーブ領域に、画像の新たな追加属性情報を記録する。
追加する属性情報もエレメンタリPID(elementary_PID)によって識別されるエレメンタリストリーム単位の属性情報である。
以下、リザーブ領域(stuffing_bits)に新たに追加記録する画像属性情報の例について説明する。
(1)ビデオエレメンタリストリームのタイプ情報(video_stream_type)
(2)ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
(5)ビデオエレメンタリストリーム属性情報[(2)+(3)+(4)](video_d_range2)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
まず、図11を参照して(1)ビデオエレメンタリストリームのタイプ情報(video_stream_type)の記録例について説明する。
図11には、ビデオエレメンタリストリームのタイプ情報(video_stream_type)を4ビットデータとして記録する例を示している。
図10を参照して説明したデータコンポーネント情報(ES情報)に記録されるビデオエレメンタリストリームに関する属性情報記録領域[HDMV_video_registration_descriptor]に設定されるリザーブ領域(stuffing_bits)の一部の4ビットを用いてビデオエレメンタリストリームのタイプ情報(video_stream_type)を記録する例である。
各ビット値の定義を以下のように設定する。
0(=0000):このエレメンタリストリームはシングルSDRビデオである。
1(=0001):このエレメンタリストリームはシングルHDRビデオである。
2(=0010):このエレメンタリストリームは二重ストリーム(dual stream)方式のストリームに属する基本ビデオストリームである。
3(=0011):このエレメンタリストリームは二重ストリーム(dual stream)方式のストリームに属する拡張ビデオストリームである。
4〜15(=0100〜1111):リザーブ
(a)基本ビデオストリームのみを利用したHDRビデオ再生処理、
(b)基本ビデオストリームと拡張ビデオストリームの2つのビデオストリームを利用したHDRビデオ再生処理、
上記(a),(b)の2つのタイプのビデオ再生処理が可能である。
拡張ビデオストリームは、基本ビデオストリームに対して画像変換を行うための追加情報が格納されている。拡張ビデオストリームに格納された追加情報を利用することで、基本ビデオストリームのみを利用した出力画像に対し、表示装置に対してより適切な画像出力を実現する。
例えば、基本ビデオストリームと拡張ビデオストリームの2つのビデオストリームを利用したHDRビデオ再生処理は、基本ビデオストリームのみを利用したHDRビデオ再生処理より高画質な画像再生が実現される。
あるいは、拡張ビデオストリームに格納される拡張情報を利用して、基本ビデオストリームのみを利用した場合に生成されるHDR画像をSDR画像に変換し、HDR非対応の従来ディスプレイでのSDRビデオ再生を実現する。
次に、図12を参照して(2)ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)の記録例について説明する。
図12には、ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)を4ビットデータとして記録する例を示している。
図10を参照して説明したデータコンポーネント情報(ES情報)に記録されるビデオエレメンタリストリームに関する属性情報記録領域[HDMV_video_registration_descriptor]に設定されるリザーブ領域(stuffing_bits)の一部の4ビットを用いてビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)を記録する例である。
各ビット値の定義を以下のように設定する。
0(=0000):このエレメンタリストリームはSDRビデオである。(またはSDR再生を意図したビデオである)
1(=0001):このエレメンタリストリームはHDRビデオである。(またはHDR再生を意図したビデオである)
2〜15(=0010〜1111):リザーブ
次に、図13を参照して(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)の記録例について説明する。
図10を参照して説明したデータコンポーネント情報(ES情報)に記録されるビデオエレメンタリストリームに関する属性情報記録領域[HDMV_video_registration_descriptor]に設定されるリザーブ領域(stuffing_bits)の一部の4ビットを用いてビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)を記録する例である。
各ビット値の定義を以下のように設定する。
0(=0000):特定せず(unspecified)
1(=0001):このエレメンタリストリームはITU−R BT.709−5準拠の光電変換関数(OETF:Optical−Electro Transfer Function)を用いて作成された画像であることを示す。(このエレメンタリストリームのビデオを表示するディスプレイはITU−R BT.1886に準拠した電光変換関数(EOTF:Electro−Optical Transfer Function)を適用した表示処理を実行することを想定)
3〜15(=0011〜1111):リザーブ
なお、これはSDRビデオ対応の転送特性(ガンマ特性)に相当し、再生装置等の情報処理装置は、SDRビデオ対応の転送特性(ガンマ特性)に従った処理(ガンマ変換)を実行して表示装置に対する出力信号を生成することになる。
なお、これはHDRビデオ対応の転送特性(ガンマ特性)に相当し、再生装置等の情報処理装置は、HDRビデオ対応の転送特性(ガンマ特性)に従った処理(ガンマ変換)を実行して表示装置に対する出力信号を生成することになる。
次に、図14を参照して(4)ビデオエレメンタリストリームの色情報(colour_primaries)の記録例について説明する。
図10を参照して説明したデータコンポーネント情報(ES情報)に記録されるビデオエレメンタリストリームに関する属性情報記録領域[HDMV_video_registration_descriptor]に設定されるリザーブ領域(stuffing_bits)の一部の4ビットを用いてビデオエレメンタリストリームの色情報(colour_primaries)を記録する例である。
各ビット値の定義を以下のように設定する。
0(=0000):特定せず(unspecified)
1(=0001):このエレメンタリストリームはITU−R BT.709−5準拠の3元色点と基準色を有することを示す。
2(=0010):このエレメンタリストリームはITU−R BT.2020準拠の3元色点と基準色を有することを示す。
3〜15(=0011〜1111):リザーブ
なお、これはSDRビデオ対応の色設定であり、再生装置等の情報処理装置は、SDRビデオ対応の画像出力処理を実行して表示装置に対する出力信号を生成することになる。
なお、これはHDRビデオ対応の色設定であり、再生装置等の情報処理装置は、HDRビデオ対応の画像出力処理を実行して表示装置に対する出力信号を生成することになる。
次に、図15を参照して(5)ビデオエレメンタリストリーム属性情報[(2)+(3)+(4)](video_d_range2)の記録例について説明する。
ビデオエレメンタリストリームの属性情報[(2)+(3)+(4)]とは、上述した属性情報、すなわち、
(2)ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
これらの画像属性情報である。
各ビット値の定義を以下のように設定する。
0(=0000):特定せず(unspecified)
1(=0001):このエレメンタリストリームはITU−R BT.709−5準拠のOETFと、ITU−R BT.709−5準拠の3元色点と基準色の適用画像データであることを示す。
2(=0010):このエレメンタリストリームはITU−R BT.709−5準拠のOETFと、ITU−R BT.2020準拠の3元色点と基準色の適用画像データであることを示す。
3(=0011):このエレメンタリストリームは、表示ディスプレイとしてSMPTE ST2084準拠のEOTFの適用タイプを想定し、ITU−R BT.2020準拠の3元色点と基準色に基づいて生成された画像データであることを示す。
4〜15(=0100〜1111):リザーブ
これはSDR画像データに相当する特性であり、再生装置等の情報処理装置は、SDRビデオ対応の画像出力処理を実行して表示装置に対する出力信号を生成することになる。
これは広色域色を持つ特定のSDR画像データに相当する特性であり、再生装置等の情報処理装置は、広色域色を持つ特定のSDRビデオ対応の画像出力処理を実行して表示装置に対する出力信号を生成することになる。
これはHDR画像データに相当する特性であり、再生装置等の情報処理装置は、HDRビデオ対応の画像出力処理を実行して表示装置に対する出力信号を生成することになる。
次に、図16を参照して(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)の記録例について説明する。
図10を参照して説明したデータコンポーネント情報(ES情報)に記録されるビデオエレメンタリストリームに関する属性情報記録領域[HDMV_video_registration_descriptor]に設定されるリザーブ領域(stuffing_bits)の一部の4ビットを用いてビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)を記録する例である。
各ビット値の定義を以下のように設定する。
0(=0000):このエレメンタリストリームは非定輝度タイプのYCbCr信号(Y' C'b C'r)を有することを示す。
1(=0001):このエレメンタリストリームは定輝度タイプのYCbCr信号(Y'c C'bc C'rc)を有することを示す。
2(=0010):特定せず(unspecified)
3〜15(=0011〜1111):リザーブ
1つは、非定輝度タイプのYCbCr信号(Y' C'b C'r)であり、もう1は、定輝度タイプのYCbCr信号(Y'c C'bc C'rc)である。
非定輝度タイプのYCbCr信号は、出力色に応じた輝度変化を許容した構成を有し、SDR画像で利用される場合が多い。一方、定輝度タイプのYCbCr信号は、出力色に応じた輝度変化を低減した構成を有し、HDR画像で利用される場合が多いYCbCr信号タイプである。
この設定の場合、再生装置等の情報処理装置は、定輝度タイプのYCbCr信号の出力処理による画像再生を実行することになる。これは、多くの場合HDRビデオ対応の画像出力処理となる。
次に、具体的な画像属性情報記録例について説明する。
図11〜図16を参照して説明した画像属性情報、すなわち、
(1)ビデオエレメンタリストリームのタイプ情報(video_stream_type)
(2)ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
(5)ビデオエレメンタリストリーム属性情報[(2)+(3)+(4)](video_d_range2)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
これらの情報は、エレメンタリストリーム(ES)単位の画像属性情報として、プログラムマップテーブル(PMT)に記録する。
以下、具体的な画像属性情報の複数の記録例について説明する。
まず、図17を参照して、属性情報記録例1について説明する。
、属性情報記録例1は、上述した属性情報(1)〜(6)中、(1)(3)(4)(6)を記録した例について説明する。
図17に示すデータは、先に図10を参照して説明したデータ、すなわち、TSパケットに格納されるPSI/SI情報中のプログラムマップテーブル(PMT)の構成データである。具体的には、PMT中のデータコンポーネント情報(ES情報)に記録されるビデオエレメンタリストリーム単位の属性情報の構成データ[HDMV_video_registration_descriptor]の例である。
図17に示す例は、このリザーブ領域に、上述した属性情報(1)〜(6)中、属性情報(1)(3)(4)(6)を記録した例である。
すなわち、以下の属性情報を記録している。
(1)ビデオエレメンタリストリームのタイプ情報(video_stream_type)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
データフィールド112には、先に図16を参照して説明した(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)を4ビットデータとして記録する。
データフィールド114には、先に図16を参照して説明した(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)を4ビットデータとして記録する。
よみとった属性情報(メタデータ)に基づいて、この属性情報に対応するPID対応の画像エレメンタリストリームの属性を確認することができる。
(1)ビデオエレメンタリストリームのタイプ情報(video_stream_type)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
すなわち、SDR画像対応の再生処理や、HDR画像対応の再生処理の制御を正しく効率的に実行することが可能となる。
次に、図18を参照して、属性情報記録例2について説明する。
、属性情報記録例2は、上述した属性情報(1)〜(6)中、(2)(3)(4)(6)を記録した例について説明する。
図18に示すデータは、図17と同様、先に図10を参照して説明したデータ、すなわち、TSパケットに格納されるPSI/SI情報中のプログラムマップテーブル(PMT)の構成データである。具体的には、PMT中のデータコンポーネント情報(ES情報)に記録されるビデオエレメンタリストリーム単位の属性情報の構成データ[HDMV_video_registration_descriptor]の例である。
図18に示す例は、このリザーブ領域に、上述した属性情報(1)〜(6)中、属性情報(2)(3)(4)(6)を記録した例である。
すなわち、以下の属性情報を記録している。
(2)ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
データフィールド122には、先に図16を参照して説明した(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)を4ビットデータとして記録する。
データフィールド124には、先に図16を参照して説明した(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)を4ビットデータとして記録する。
よみとった属性情報(メタデータ)に基づいて、この属性情報に対応するPID対応の画像エレメンタリストリームの属性を確認することができる。
(2)ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
すなわち、SDR画像対応の再生処理や、HDR画像対応の再生処理の制御を正しく効率的に実行することが可能となる。
次に、図19を参照して、属性情報記録例3について説明する。
、属性情報記録例3は、上述した属性情報(1)〜(6)中、(5)(6)を記録した例について説明する。
図19に示すデータは、図17、図18と同様、先に図10を参照して説明したデータ、すなわち、TSパケットに格納されるPSI/SI情報中のプログラムマップテーブル(PMT)の構成データである。具体的には、PMT中のデータコンポーネント情報(ES情報)に記録されるビデオエレメンタリストリーム単位の属性情報の構成データ[HDMV_video_registration_descriptor]の例である。
図19に示す例は、このリザーブ領域に、上述した属性情報(1)〜(6)中、属性情報(5)(6)を記録した例である。
すなわち、以下の属性情報を記録している。
(5)ビデオエレメンタリストリーム属性情報[(2)+(3)+(4)](video_d_range2)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
データフィールド132には、先に図16を参照して説明した(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)を4ビットデータとして記録する。
よみとった属性情報(メタデータ)に基づいて、この属性情報に対応するPID対応の画像エレメンタリストリームの属性を確認することができる。
(5)ビデオエレメンタリストリーム属性情報[(2)+(3)+(4)](video_d_range2)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
すなわち、SDR画像対応の再生処理や、HDR画像対応の再生処理の制御を正しく効率的に実行することが可能となる。
次に、図20以下に示すフローチャートを参照して情報処理装置の実行するデータ処理のシーケンス例について説明する。
まず、図20に示すフローチャートを参照して情報処理装置が、BD等の記録媒体、あるいは外部から入力したMPEG−2TSファイルをMP4ファイルにフォーマット変換し、フラッシュメモリ等のメディアに記録する、あるいは出力部を介して外部に出力する処理のシーケンスについて説明する。
以下、各ステップの処理について、順次、説明する。
まず、ステップS101において、ユーザは、フォーマット変換および外部出力の対象となるコンテンツのタイトルを選択する。
例えば、情報処理装置に装着されたBDから読み出されたコンテンツタイトルリストを表示部に表示してタイトル選択が実行される。
ステップS102において、情報処理装置のデータ処理部は、ユーザが選択したタイトルに対応するクリップ(クリップ情報ファイルとクリップAVストリームファイル)を特定する。
ステップS103において、情報処理装置のデータ処理部は、ステップS102で特定されたクリップAVストリームファイル、すなわち、MPEG−2TSファイルを読み出す。
MPEG−2TSファイルは先に図3を参照して説明した構成を持つファイルである。
ステップS104において、情報処理装置のデータ処理部は、ステップS103で読み出したMPEG−2TSファイルのフォーマット変換を実行してMP4ファイルを生成する。
具体的には、例えばフォーマット変換対象となる画像データがHDR画像かSDR画像かを確認し、確認結果に応じてMP4ファイルに格納した画像の属性情報をMP4ファイルの画像メタデータ格納領域に記録する処理などを行う。
(1)ビデオエレメンタリストリームのタイプ情報(video_stream_type)
(2)ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
(5)ビデオエレメンタリストリーム属性情報[(2)+(3)+(4)](video_d_range2)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
ステップS105において、情報処理装置のデータ処理部は、ステップS104で生成したMP4ファイルをフラッシュメモリ等の第2の記録媒体に記録、あるいは通信部、出力部等を介して外部機器、または外部メディアに出力する。
情報処理装置は、フォーマット変換時に、処理対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行する。具体的には、MP4ファイルのメタデータ記録領域に、MPEG−2TSファイルに記録された画像属性(例 えばHDR画像かSDR画像か等)を正しく記録する。
MP4ファイルの再生処理を実行する再生装置は、このメタデータを参照して画像属性に応じた正しい再生処理を実行することが可能となる。
次に、図21に示すフローチャートを参照して情報処理装置が記録媒体、あるいは外部から入力したMPEG−2TSファイルの再生を実行する処理のシーケンスについて説明する。
以下、各ステップの処理について、順次、説明する。
まず、ステップS151において、情報処理装置のデータ処理部は、記録媒体、あるいは外部からMPEG−2TSファイルを入力する。
ステップS152において、情報処理装置のデータ処理部は、ステップS151で入力したMPEG−2TSファイルのTSパケットに格納された属性情報(PSI/SI)のプログラムマップテーブル(PMT)を参照して、MPEG−2TSファイルに格納された画像データの属性を確認して、確認した属性に応じた処理を実行する。
具体的には、例えば再生対象となる画像データがHDR画像かSDR画像かを確認し、確認結果に応じて再生処理や出力処理の設定を実行する。
(1)ビデオエレメンタリストリームのタイプ情報(video_stream_type)
(2)ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
(5)ビデオエレメンタリストリーム属性情報[(2)+(3)+(4)](video_d_range2)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
ステップS153において、情報処理装置のデータ処理部は、ステップS152において実行して設定に従ってTSパケットに格納された画像データの再生、出力を実行する。
再生装置は、再生処理対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行することが可能となる。
すなわち、MPEG2−TSファイルから直接、MPEG−2TSファイルに記録された画像属性(例えばHDR画像かSDR画像か等)が取得されるので、例えばプレイリストファイル等のデータベースファイルが取得できない場合でも、TSパケットに格納された画像の属性(例えばHDRかSDRか)に応じた正しい再生処理を実行することが可能となる。
次に、図22に示すフローチャートを参照して情報処理装置がMPEG−2TSファイルの生成処理を実行する処理シーケンスについて説明する。
例えば撮像装置において撮影されたHDR画像、あるいはSDR画像を入力して、入力画像を格納したMPEG−2TSファイルの生成処理を実行する処理シーケンスである。
以下、各ステップの処理について、順次、説明する。
まず、ステップS201において、情報処理装置のデータ処理部は、MPEG−2TSファイルに格納する画像が、デュアル(dual)ストリームか、シングル(single)ストリームかを判別する。
SDRビデオシングルストリーム
HDRビデオシングルストリーム、
HDRビデオデュアルストリーム、
これらの3種類がある。
HDRビデオデュアルストリームは、HDRビデオ基本ストリームとHDRビデオ拡張ストリームの2本(デュアル)のストリームから構成される。
デュアルストリームである場合はステップS202に進み、シングルストリームである場合はステップS203に進む。
MPEG−2TSファイルに格納する画像がデュアル(dual)ストリームである場合、ステップS202に進む。
HDRビデオ基本ストリーム、
HDRビデオ拡張ストリーム、
これら2つの画像ストリームから構成されることになる。
具体的には、
HDRビデオ基本ストリームのビデオストリームタイプ(video_stream_type)を2、
HDRビデオ拡張ストリームのビデエストリームタイプ(video_stream_type)を3、
にセットする
これらの設定は、先に図11を参照して説明した属性情報設定例に対応したものである。
一方、ステップS201において、MPEG−2TSファイルに格納する画像がシングル(single)ストリームである場合、ステップS203に進む。
ステップS203では、MPEG−2TSファイルに格納する画像が、
HDRビデオテトリームか、
SDRビデオストリームか、
を判別する。
MPEG−2TSファイルに格納する画像がHDRビデオテトリームである場合は、ステップS205に進む。
MPEG−2TSファイルに格納する画像がSDRビデオテトリームである場合は、ステップS204において、このストリーム(ES:エレメンタリストリーム)単位の属性情報をPSI/SIのプログラムケマッフテーブル(PMT)に記録する。
具体的には、
SDRビデオストリームのビデオストリームタイプ(video_stream_type)を0、
にセットする
この設定は、先に図11を参照して説明した属性情報設定例に対応したものである。
一方、MPEG−2TSファイルに格納する画像がHDRビデオテトリームである場合は、ステップS205において、このストリーム(ES:エレメンタリストリーム)単位の属性情報をPSI/SIのプログラムケマッフテーブル(PMT)に記録する。
具体的には、
HDRビデオストリームのビデオストリームタイプ(video_stream_type)を1、
にセットする
この設定は、先に図11を参照して説明した属性情報設定例に対応したものである。
次に、図23に示すフローチャートを参照して情報処理装置がMPEG−2TSファイルの生成処理を実行する処理シーケンスについて説明する。
図22のフローでは、ビデオストリームタイプの設定シーケンスのみ説明したが、図23のフローは、ビデオストリームタイプ以外の属性設定シーケンスである。
MPEG−2TSファイルの生成に際しては、図22に示すフローと図23に示すフローを連続的に実行することになる。
以下、各ステップの処理について、順次、説明する。
まず、ステップS301において、情報処理装置のデータ処理部は、MPEG−2TSファイルに格納する画像の転送特性(transfer_characterisics)を取得し、取得した画像の転送特性(transfer_characterisics)を各ストリーム(ES:エレメンタリストリーム)単位の属性情報をPSI/SIのプログラムケマッフテーブル(PMT)に記録する。
すなわち、以下のいずれかのビット値を記録する。
0(=0000):特定せず(unspecified)
1(=0001):このエレメンタリストリームはITU−R BT.709−5準拠の光電変換関数(OETF:Optical−Electro Transfer Function)を用いて作成された画像であることを示す。(このエレメンタリストリームのビデオを表示するディスプレイはITU−R BT.1886に準拠した電光変換関数(EOTF:Electro−Optical Transfer Function)を適用した表示処理を実行することを想定)
2(=0010):このエレメンタリストリームのビデオを表示するディスプレイはSMPTE ST2084に準拠した電光変換関数(EOTF:Electro−Optical Transfer Function)を適用した表示処理を実行することを想定)
次に、ステップS302において、情報処理装置のデータ処理部は、MPEG−2TSファイルに格納する画像の色情報(colour_primaries)を取得し、取得した画像の色情報(colour_primaries)を各ストリーム(ES:エレメンタリストリーム)単位の属性情報をPSI/SIのプログラムケマッフテーブル(PMT)に記録する。
すなわち、以下のいずれかのビット値を記録する。
0(=0000):特定せず(unspecified)
1(=0001):このエレメンタリストリームはITU−R BT.709−5準拠の3元色点と基準色を有することを示す。
2(=0010):このエレメンタリストリームはITU−R BT.2020準拠の3元色点と基準色を有することを示す。
次に、ステップS303において、情報処理装置のデータ処理部は、MPEG−2TSファイルに格納する画像のYCbCr情報(luma_chroma_signal_format)を取得し、取得した画像のYCbCr情報(luma_chroma_signal_format)を各ストリーム(ES:エレメンタリストリーム)単位の属性情報をPSI/SIのプログラムケマッフテーブル(PMT)に記録する。
すなわち、以下のいずれかのビット値を記録する。
0(=0000):このエレメンタリストリームは非定輝度タイプのYCbCr信号(Y' C'b C'r)を有することを示す。
1(=0001):このエレメンタリストリームは定輝度タイプのYCbCr信号(Y'c C'bc C'rc)を有することを示す。
2(=0010):特定せず(unspecified)
これらの処理によって、例えば先に図17に示すストリーム単位の画像属性情報が記録されたプログラムマップテーブル(PMT)が完成し、このPMTを含むPSI/SIをTSパケットに格納したMPEG−2TSファイルが生成される。
図18に示す記録例や図19に示す記録例に従った属性情報を記録する場合は、各記録例に含まれる属性情報を取得してPMTに記録する処理を実行することになる。
次に、上述した実施例に従った処理を実行する情報処理装置の構成例について説明する。
まず、図24、図25を参照してフォーマット変換およびデータ記録処理を実行する情報処理装置の構成例について説明する。
図24に示す情報処理装置600は、第1メディア610に記録されたMPEG−2TSフォーマットデータを変換して生成したMP4フォーマットデータを第2メディア620に記録する情報処理装置である。
あるいは、通信部603を介して入力したデータをフラッシュメモリ等の第2メディア620に記録する処理を行なう。
情報処理装置600は、第2メディア620に対するデータ記録処理に際して、MPEG−2TSフォーマットからMP4フォーマットへのフォーマット変換を実行する。
また、入力部602は、メディアに記録する画像や音声等を入力する撮像部、マイクを持つ構成としてもよい。
通信部603は、例えば外部サーバ、あるいは外部機器との通信を行い、メディアに対する記録データや、記録データに関する制御情報、あるいはコピー処理の許可情報の取得など、各種の通信処理に利用される。
具体的には、第2メディア620に対するデータ記録時に第1メディア610から読み出したデータ、あるいは通信部603を介して入力したデータを一時的に格納する領域としても利用される。
記憶部604は、例えばRAM、ROM等によって構成される。
出力部605は、外部装置に対する出力部や、メディアからの再生データの出力部によって構成される。例えば、第2メディア620に対するデータ記録処理の進行状況の表示、ユーザに対するメッセージ表示などに利用され、ディスプレイやスピーカ等を含む。
データ変換部608は、第1メディア610の記録データ、あるいは通信部603を介して入力するデータのフォーマットである第1フォーマットのデータを、データ記録先である第2メディア620に記録する際のデータフォーマットである第2フォーマットに変換するフォーマット変換処理を実行する。
なお、第1フォーマットとは、例えはMPEG−2TSフォーマットデータであり、第2フォーマットは、MP4フォーマットデータである。
なお、第1メディア610、第2メディア620は、上記の組み合わせに限らず、様々な組み合わせが可能である。
図25に示すように、データ変換部608は、データ解析部650、属性情報(PSI/SI)解析部651、画像データ変換部652、音声データ変換部653、字幕データ変換部654、多重化処理実行部655を有する。
画像データ、
音声データ、
字幕データ、
属性情報(PSI/SI)、
これら各種類のデータに分類する。
プログラムマップテーブル(PMT)は、先に図9を参照して説明した構成を有し、この中に例えば図17〜図19を参照して説明した画像エレメンタリストリームの画像属性情報等が記録されている。
(1)ビデオエレメンタリストリームのタイプ情報(video_stream_type)
(2)ビデオエレメンタリストリームのダイナミックレンジ識別フラグ(video_d_range)
(3)ビデオエレメンタリストリームの転送特性(ガンマ特性)情報(transfer_characteristics)
(4)ビデオエレメンタリストリームの色情報(colour_primaries)
(5)ビデオエレメンタリストリーム属性情報[(2)+(3)+(4)](video_d_range2)
(6)ビデオエレメンタリストリームのYCbCr情報(luma_chroma_signal_format)
多重化処理実行部655は、MP4ファイルに格納する画像データに対応するメタデータ記録領域に上記の(1)〜(6)に対応する属性情報を記録したMP4ファィルを生成する。
音声データ変換部653は、MP4フォーマットの音声データを生成して多重化処理実行部655に出力する。
字幕データ変換部654は、MP4フォーマットの字幕データを生成して多重化処理実行部655に出力する。
(a)画像データ生成部652の生成した第2フォーマット(MP4)形式の画像フォーマットデータ、
(b)音声データ生成部653の生成した第2フォーマット(MP4)形式の音声フォーマットデータ、
(c)字幕データ生成部654の生成した第2フォーマット(MP4)形式の字幕フォーマットデータ、
(d)属性情報(PSI/SI)解析部651が生成した第2フォーマット(MP4)形式のメタデータ、
例えば、これらの各データの多重化処理を実行して、第2フォーマット(MP4)形式の記録データを生成する。
次に、MP4フォーマットデータの再生処理を実行する情報処理装置や、MP4フォーマットデータの生成処理、記録処理等を実行する情報処理装置のハードウェア構成例について、図26を参照して説明する。
以上、特定の実施例を参照しながら、本開示の実施例について詳解してきた。しかしながら、本開示の要旨を逸脱しない範囲で当業者が実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本開示の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。
(1) データ処理部が、処理対象データを格納したトランスポートストリーム(TS)ファイルを取得し、
トランスポートストリーム(TS)ファイルに格納された画像属性情報を取得し、
取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する構成であり、
前記画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含み、
前記データ処理部は、
フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行する情報処理装置。
トランスポートストリーム(TS)ファイルを、MP4ファイルに変換するフォーマット変換を実行し、
トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報を取得して、MP4ファイルのメタデータ格納領域に格納する処理を実行する(1)に記載の情報処理装置。
トランスポートストリーム(TS)ファイルに格納されたデータの再生処理を実行し、
トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報を取得して、再生対象データがHDR画像であるか、SDR画像であるかを判別して判別結果に応じた再生制御を行う(1)に記載の情報処理装置。
前記データ処理部は、
プログラムマップテーブル(PMT)から、画像ストリーム単位の画像属性情報を取得する(1)〜(3)いずれかに記載の情報処理装置。
前記画像属性情報は、
HDR画像ストリームが基本HDR画像ストリームであるか、拡張HDR画像ストリームであるかを識別可能な情報を含む(1)〜(4)いずれかに記載の情報処理装置。
トランスポートストリーム(TS)ファイルに格納された画像ストリームの転送特性(ガンマ特性)を識別可能な情報を含む(1)〜(5)いずれかに記載の情報処理装置。
トランスポートストリーム(TS)ファイルに格納された画像ストリームの色情報を識別可能な情報を含む(1)〜(6)いずれかに記載の情報処理装置。
トランスポートストリーム(TS)ファイルに格納された画像ストリームのYCbCr情報を識別可能な情報を含む(1)〜(7)いずれかに記載の情報処理装置。
前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納する画像ストリーム単位の画像属性情報として、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報をトランスポートストリーム(TS)ファイルに格納する情報処理装置。
前記画像属性情報を、トランスポートストリーム(TS)ファイル内のPSI/SIデータ内のプログラムマップテーブル(PMT)に記録する(9)に記載の情報処理装置。
前記データ処理部は、
HDR画像ストリームが基本HDR画像ストリームであるか、拡張HDR画像ストリームであるかを識別可能な情報を含む画像属性情報をトランスポートストリーム(TS)ファイルに格納する(9)〜(10)いずれかに記載の情報処理装置。
トランスポートストリーム(TS)ファイルに格納する画像ストリームの転送特性(ガンマ特性)を識別可能な画像属性情報をトランスポートストリーム(TS)ファイルに格納する(9)〜(11)いずれかに記載の情報処理装置。
トランスポートストリーム(TS)ファイルに格納する画像ストリームの色情報を識別可能な画像属性情報をトランスポートストリーム(TS)ファイルに格納する(9)〜(12)いずれかに記載の情報処理装置。
トランスポートストリーム(TS)ファイルに格納する画像ストリームのYCbCr情報を識別可能な画像属性情報をトランスポートストリーム(TS)ファイルに格納する(9)〜(13)いずれかに記載の情報処理装置。
前記トランスポートストリーム(TS)ファイルは、
トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報を含み、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を記録した構成であり、
前記データ処理部は、
トランスポートストリーム(TS)ファイルを読み取り、フォーマット変換、または出力処理を実行する情報処理装置において、処理対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行することを可能とした情報記録媒体。
前記情報処理装置のデータ処理部が、処理対象データを格納したトランスポートストリーム(TS)ファイルを取得するファイル取得ステップと、
トランスポートストリーム(TS)ファイルに格納された画像属性情報を取得し、
取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する処理実行ステップを実行し、
前記画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含み、
前記データ処理部は、前記処理実行ステップにおいて、
フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行する情報処理方法。
前記情報処理装置は、
トランスポートストリーム(TS)ファイルを生成するデータ処理部を有し、
前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納する画像ストリーム単位の画像属性情報として、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報をトランスポートストリーム(TS)ファイルに格納する情報処理方法。
前記情報処理装置のデータ処理部に、処理対象データを格納したトランスポートストリーム(TS)ファイルを取得するファイル取得ステップと、
トランスポートストリーム(TS)ファイルに格納された画像属性情報を取得し、
取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する処理実行ステップを実行させ、
前記画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含み、
前記プログラムは、前記処理実行ステップにおいて、
前記データ処理部に、フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行させるプログラム。
前記情報処理装置は、
トランスポートストリーム(TS)ファイルを生成するデータ処理部を有し、
前記プログラムは、前記データ処理部に、
トランスポートストリーム(TS)ファイルに格納する画像ストリーム単位の画像属性情報として、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報をトランスポートストリーム(TS)ファイルに格納する処理を実行させるプログラム。
具体的には、データ処理部が、処理対象データを格納したTSファイルに格納された画像属性情報を取得し、取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する。画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含む。データ処理部は、フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行する。
本構成により、トランスポートストリーム(TS)ファイルから、画像属性情報を取得して、取得属性に応じた処理を実行する構成が実現される。
11 管理情報設定部(AACSディレクトリ)
12 データ部(BDMVディレクトリ)
50 第1メディア
51 トランスポートストリーム(TS)ファイル
60 情報処理装置
61 MP4フォーマットデータファイル
65 第2メディア
70 送信装置
80 トランスポートストリーム(TS)ファイル
90 受信装置
600 情報処理装置
601 制御部
602 入力部
603 通信部
604 記憶部
605 出力部
606 第1メディアインタフェース
607 データバッファ
608 データ変換部
609 第2メディアインタフェース
610 第1メディア
620 第2メディア
650 データ解析部
651 属性情報(PSI/SI)解析部
652 画像データ変換部
653 音声データ変換部
654 字幕データ変換部
655 多重化処理部
701 CPU
702 ROM
703 RAM
704 バス
705 入出力インタフェース
706 入力部
707 出力部
708 記憶部
709 通信部
710 ドライブ
711 リムーバブルメディア
Claims (18)
- データ処理部が、処理対象データを格納したトランスポートストリーム(TS)ファイルを取得し、
トランスポートストリーム(TS)ファイルに格納された画像属性情報を取得し、
取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する構成であり、
前記画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含み、
前記画像属性情報は、画像ストリームがHDR画像である場合のビット値と、画像ストリームがSDR画像である場合のビット値とを異なる設定としたビット値設定情報を含み、
前記データ処理部は、
フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行する情報処理装置。 - 前記データ処理部は、
トランスポートストリーム(TS)ファイルを、MP4ファイルに変換するフォーマット変換を実行し、
トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報を取得して、MP4ファイルのメタデータ格納領域に格納する処理を実行する請求項1に記載の情報処理装置。 - 前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納されたデータの再生処理を実行し、
トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報を取得して、再生対象データがHDR画像であるか、SDR画像であるかを判別して判別結果に応じた再生制御を行う請求項1に記載の情報処理装置。 - 前記画像属性情報は、トランスポートストリーム(TS)ファイル内のPSI/SIデータ内のプログラムマップテーブル(PMT)に記録され、
前記データ処理部は、
プログラムマップテーブル(PMT)から、画像ストリーム単位の画像属性情報を取得する請求項1に記載の情報処理装置。 - トランスポートストリーム(TS)ファイルに格納された画像ストリームが、HDR画像である場合、
前記画像属性情報は、
HDR画像ストリームが基本HDR画像ストリームであるか、拡張HDR画像ストリームであるかを識別可能な情報を含む請求項1に記載の情報処理装置。 - 前記画像属性情報は、
トランスポートストリーム(TS)ファイルに格納された画像ストリームの転送特性(ガンマ特性)を識別可能な情報を含む請求項1に記載の情報処理装置。 - 前記画像属性情報は、
トランスポートストリーム(TS)ファイルに格納された画像ストリームの色情報を識別可能な情報を含む請求項1に記載の情報処理装置。 - 前記画像属性情報は、
トランスポートストリーム(TS)ファイルに格納された画像ストリームのYCbCr情報を識別可能な情報を含む請求項1に記載の情報処理装置。 - トランスポートストリーム(TS)ファイルを生成するデータ処理部を有し、
前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納する画像ストリーム単位の画像属性情報として、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報をトランスポートストリーム(TS)ファイルに格納する処理を実行する構成であり、
前記画像属性情報は、画像ストリームがHDR画像である場合のビット値と、画像ストリームがSDR画像である場合のビット値とを異なる設定としたビット値設定情報を含む情報処理装置。 - 前記データ処理部は、
前記画像属性情報を、トランスポートストリーム(TS)ファイル内のPSI/SIデータ内のプログラムマップテーブル(PMT)に記録する請求項9に記載の情報処理装置。 - トランスポートストリーム(TS)ファイルに格納する画像ストリームが、HDR画像である場合、
前記データ処理部は、
HDR画像ストリームが基本HDR画像ストリームであるか、拡張HDR画像ストリームであるかを識別可能な情報を含む画像属性情報をトランスポートストリーム(TS)ファイルに格納する請求項9に記載の情報処理装置。 - 前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納する画像ストリームの転送特性(ガンマ特性)を識別可能な画像属性情報をトランスポートストリーム(TS)ファイルに格納する請求項9に記載の情報処理装置。 - 前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納する画像ストリームの色情報を識別可能な画像属性情報をトランスポートストリーム(TS)ファイルに格納する請求項9に記載の情報処理装置。 - 前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納する画像ストリームのYCbCr情報を識別可能な画像属性情報をトランスポートストリーム(TS)ファイルに格納する請求項9に記載の情報処理装置。 - 情報処理装置において実行する情報処理方法であり、
前記情報処理装置のデータ処理部が、処理対象データを格納したトランスポートストリーム(TS)ファイルを取得するファイル取得ステップと、
トランスポートストリーム(TS)ファイルに格納された画像属性情報を取得し、
取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する処理実行ステップを実行し、
前記画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含み、
前記画像属性情報は、画像ストリームがHDR画像である場合のビット値と、画像ストリームがSDR画像である場合のビット値とを異なる設定としたビット値設定情報を含み、
前記データ処理部は、前記処理実行ステップにおいて、
フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行する情報処理方法。 - 情報処理装置において実行する情報処理方法であり、
前記情報処理装置は、
トランスポートストリーム(TS)ファイルを生成するデータ処理部を有し、
前記データ処理部は、
トランスポートストリーム(TS)ファイルに格納する画像ストリーム単位の画像属性情報として、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報をトランスポートストリーム(TS)ファイルに格納する処理を実行し、
前記画像属性情報は、画像ストリームがHDR画像である場合のビット値と、画像ストリームがSDR画像である場合のビット値とを異なる設定としたビット値設定情報を含む情報処理方法。 - 情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置のデータ処理部に、処理対象データを格納したトランスポートストリーム(TS)ファイルを取得するファイル取得ステップと、
トランスポートストリーム(TS)ファイルに格納された画像属性情報を取得し、
取得した画像属性情報を適用したフォーマット変換、または出力処理を実行する処理実行ステップを実行させ、
前記画像属性情報は、トランスポートストリーム(TS)ファイルに格納された画像ストリーム単位の画像属性情報であり、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報を含み、
前記画像属性情報は、画像ストリームがHDR画像である場合のビット値と、画像ストリームがSDR画像である場合のビット値とを異なる設定としたビット値設定情報を含み、
前記プログラムは、前記処理実行ステップにおいて、
前記データ処理部に、フォーマット変換、または出力処理の対象となる画像ストリームがHDR画像であるか、SDR画像であるかに応じた制御を実行させるプログラム。 - 情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置は、
トランスポートストリーム(TS)ファイルを生成するデータ処理部を有し、
前記プログラムは、前記データ処理部に、
トランスポートストリーム(TS)ファイルに格納する画像ストリーム単位の画像属性情報として、少なくとも各画像ストリームがHDR(High Dynamic Range)画像であるか、SDR(Standard Dynamic Range)画像であるかを識別可能とした画像属性情報をトランスポートストリーム(TS)ファイルに格納する処理を実行させ、
前記画像属性情報は、画像ストリームがHDR画像である場合のビット値と、画像ストリームがSDR画像である場合のビット値とを異なる設定としたビット値設定情報を含むプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015027930 | 2015-02-16 | ||
JP2015027930 | 2015-02-16 | ||
PCT/JP2016/052334 WO2016132836A1 (ja) | 2015-02-16 | 2016-01-27 | 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016132836A1 JPWO2016132836A1 (ja) | 2017-11-24 |
JP6863271B2 true JP6863271B2 (ja) | 2021-04-21 |
Family
ID=56622486
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017500575A Active JP6863271B2 (ja) | 2015-02-16 | 2016-01-27 | 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20160241808A1 (ja) |
EP (1) | EP3261339B1 (ja) |
JP (1) | JP6863271B2 (ja) |
WO (1) | WO2016132836A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160307603A1 (en) * | 2015-04-15 | 2016-10-20 | Sony Corporation | Information processing device, information recording medium, information processing method, and program |
KR102518817B1 (ko) * | 2015-04-23 | 2023-04-06 | 엘지전자 주식회사 | 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법 |
CN109479111B (zh) * | 2016-07-27 | 2021-08-03 | 松下知识产权经营株式会社 | 图像处理装置、再生装置、图像处理方法以及再生方法 |
TW201946445A (zh) * | 2018-04-30 | 2019-12-01 | 圓剛科技股份有限公司 | 影像處理方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9060180B2 (en) * | 2011-06-10 | 2015-06-16 | Dolby Laboratories Licensing Corporation | Drift-free, backwards compatible, layered VDR coding |
ES2774219T3 (es) * | 2011-06-14 | 2020-07-17 | Koninklijke Philips Nv | Procesamiento de gráficos para video de alto rango dinámico |
EP3618434B1 (en) * | 2012-10-09 | 2021-04-14 | SONY Corporation | Image-processing device and method |
CN105165001B (zh) * | 2013-04-30 | 2019-08-09 | 索尼公司 | 发送设备、发送方法、接收设备、以及接收方法 |
JP2015008360A (ja) * | 2013-06-24 | 2015-01-15 | ソニー株式会社 | 再生装置、再生方法、および記録媒体 |
EP3022935A1 (en) * | 2013-07-19 | 2016-05-25 | Koninklijke Philips N.V. | Hdr metadata transport |
TWI630821B (zh) * | 2013-07-19 | 2018-07-21 | 新力股份有限公司 | File generation device, file generation method, file reproduction device, and file reproduction method |
KR101797505B1 (ko) * | 2013-11-13 | 2017-12-12 | 엘지전자 주식회사 | Hdr 방송 서비스 제공을 위한 방송 신호 송수신 방법 및 장치 |
JP6467680B2 (ja) * | 2014-01-10 | 2019-02-13 | パナソニックIpマネジメント株式会社 | ファイル生成方法およびファイル生成装置 |
EP3185572B1 (en) * | 2014-08-19 | 2023-03-08 | Panasonic Intellectual Property Management Co., Ltd. | Transmission method, reproduction method and reproduction device |
HUE053609T2 (hu) * | 2014-11-07 | 2021-07-28 | Sony Corp | Átviteli készülék, átviteli eljárás, vételi készülék és vételi eljárás |
JP6601729B2 (ja) * | 2014-12-03 | 2019-11-06 | パナソニックIpマネジメント株式会社 | データ生成方法、データ再生方法、データ生成装置及びデータ再生装置 |
-
2016
- 2016-01-27 WO PCT/JP2016/052334 patent/WO2016132836A1/ja active Application Filing
- 2016-01-27 EP EP16752225.9A patent/EP3261339B1/en active Active
- 2016-01-27 JP JP2017500575A patent/JP6863271B2/ja active Active
- 2016-02-09 US US15/019,414 patent/US20160241808A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
EP3261339A1 (en) | 2017-12-27 |
EP3261339B1 (en) | 2022-01-05 |
EP3261339A4 (en) | 2018-08-22 |
US20160241808A1 (en) | 2016-08-18 |
JPWO2016132836A1 (ja) | 2017-11-24 |
WO2016132836A1 (ja) | 2016-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6508248B2 (ja) | 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム | |
CN109478412B (zh) | 信息处理设备、信息处理方法和程序 | |
JP6863271B2 (ja) | 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム | |
CN102474588A (zh) | 发送控制装置、接收控制装置、发送控制方法、接收控制方法、以及发送控制程序 | |
JP6992740B2 (ja) | 情報処理装置、表示装置、情報記録媒体、および情報処理方法、並びにプログラム | |
JP7052733B2 (ja) | 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム | |
US11006173B2 (en) | Information processing device, information recording medium, and information processing method, and program | |
JP6500895B2 (ja) | 情報処理装置、情報生成装置、情報記録媒体、および情報処理方法、並びにプログラム | |
JP7147755B2 (ja) | 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム | |
US11259073B2 (en) | Information processing apparatus, information recording medium, information processing method, and program | |
WO2018190122A1 (ja) | 情報処理装置、および情報処理方法、並びにプログラム | |
JPWO2018135258A1 (ja) | 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム | |
JP7070564B2 (ja) | 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム | |
JP2015153441A (ja) | 情報処理装置、情報記録装置、情報記録媒体、および情報処理方法、並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190111 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200331 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200514 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200804 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200917 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210302 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210315 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6863271 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |