JP7039668B2 - 画像データカプセル化 - Google Patents
画像データカプセル化 Download PDFInfo
- Publication number
- JP7039668B2 JP7039668B2 JP2020161802A JP2020161802A JP7039668B2 JP 7039668 B2 JP7039668 B2 JP 7039668B2 JP 2020161802 A JP2020161802 A JP 2020161802A JP 2020161802 A JP2020161802 A JP 2020161802A JP 7039668 B2 JP7039668 B2 JP 7039668B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- item
- information
- box
- still images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000005538 encapsulation Methods 0.000 title description 22
- 238000000034 method Methods 0.000 claims description 97
- 238000012545 processing Methods 0.000 claims description 19
- 230000000694 effects Effects 0.000 description 52
- 238000006243 chemical reaction Methods 0.000 description 38
- 230000009466 transformation Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 9
- 238000004590 computer program Methods 0.000 description 7
- AWSBQWZZLBPUQH-UHFFFAOYSA-N mdat Chemical compound C1=C2CC(N)CCC2=CC2=C1OCO2 AWSBQWZZLBPUQH-UHFFFAOYSA-N 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 6
- 230000001419 dependent effect Effects 0.000 description 6
- 239000000203 mixture Substances 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 238000013461 design Methods 0.000 description 5
- 238000000844 transformation Methods 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 239000012634 fragment Substances 0.000 description 3
- 230000001788 irregular Effects 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 230000008520 organization Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000000354 decomposition reaction Methods 0.000 description 2
- 238000009795 derivation Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 235000013446 pixi Nutrition 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000002441 reversible effect Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000007429 general method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23614—Multiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
- H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Computer Graphics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Television Signal Processing For Recording (AREA)
- Photoreceptors In Electrophotography (AREA)
- Holo Graphy (AREA)
Description
-任意選択で復号器において使用されるタイミングを有し、画像が他の画像に依存する場合がある画像シーケンスの記憶。
-単一の画像と、独立して符号化された画像の集合体の記憶。
本発明は上記の状況内にある。
-画像エリアを1つ以上のタイルに分割するための空間パラメーターを含むタイル記述情報を与えることと、
-単一の画像のタイルを表すビットストリームの部分を識別するタイルピクチャアイテム情報を与えることと、
-上記タイルピクチャアイテムを上記タイル記述情報にリンクする参照情報を与えることと、
-上記ビットストリームを、上記与えられた情報とともに、カプセル化データファイルとして出力することと、
を含む。
例えば、記述情報はタイルピクチャアイテムごとに、空間パラメーターの組を含む。
例えば、タイル記述情報は、2つ以上のタイルピクチャアイテムに共通の空間パラメーターを含む。
例えば、タイル記述情報はビットストリーム内に埋め込まれる。
例えば、タイル記述情報はメタデータとして与えられる。
例えば、参照情報は、参照タイプと、上記タイル記述情報を含む付加的な記述メタデータとを含む。
例えば、参照情報は、参照タイプと、上記タイル記述情報に関連する参照パラメーターとを含む。
例えば、タイルピクチャアイテムはグループ化され、タイルピクチャアイテムのグループを上記タイル記述情報にリンクするための参照情報が与えられる。
例えば、メタデータアイテムを別のアイテムにリンクする全ての参照が、カプセル化されたデータファイル内の単一の参照ボックス内に含まれる。
例えば、任意のタイプの、1つのアイテムからの全ての関係が単一のアイテム情報記述子内に記憶される。
例えば、上記出力することは、アダプティブストリーミングのためにサーバーモジュールによって実行される。
例えば、上記出力することは、メモリに記憶するために実行される。
例えば、上記出力することは、表示のためにディスプレイモジュールによって実行される。
例えば、上記出力することは、送信のために通信モジュールによって実行される。
例えば、上記カプセル化されたデータファイルは標準化されたファイルフォーマットに対応する。
例えば、上記カプセル化されたデータファイルは復号可能及び再生可能である。
-画像対象領域を選択することと、
-上記タイル記述情報から、選択された対象エリアに対応するタイルを識別することと、
-上記識別されたタイルにリンクされる1つ以上のタイルピクチャアイテムを選択することであって、各タイルピクチャアイテムは単一の画像のタイルを表すビットストリームの部分を識別することと、
-選択されたタイルピクチャアイテム(複数の場合もある)によって識別されたビットストリームの部分を抽出することと、
-上記抽出されたビットストリーム部分を出力することと、
を含む。
例えば、上記出力することは、メモリに記憶するために実行される。
例えば、上記出力することは、表示のためにディスプレイモジュールによって実行される。
例えば、上記出力することは、送信のために通信モジュールによって実行される。
例えば、上記カプセル化されたデータファイルは標準化されたファイルフォーマットに対応する。
例えば、上記カプセル化されたデータファイルは復号可能及び再生可能である。
-上記少なくとも1つの画像の複数の画像部分への空間細分割を取得することと、
-上記複数の画像部分のうちの1つの画像部分を表す、上記画像データ内のデータ部分を識別する少なくとも1つの部分識別データを特定することと、
-上記画像データを、少なくとも、
○上記少なくとも1つの画像の上記細分割を表す細分割記述データと、
○上記部分識別データと、
○上記細分割記述データ及び上記部分識別データをリンクする参照データと、
ともに、上記カプセル化ファイルにカプセル化することと、
を含む。
例えば、上記ビデオシーケンスの上記時間部分の画像の同じ画像部分をそれぞれ表す、複数の部分識別データが特定される。
例えば、少なくとも上記細分割記述データが画像データへのメタデータとしてカプセル化される。
例えば、上記空間細分割は、上記画像データを含むビットストリーム内に埋め込まれる。
例えば、画像部分ごとに、それぞれの部分識別データが特定される。
例えば、複数の画像部分のための共通の部分識別データが特定される。
例えば、参照データは、参照タイプと、上記細分割記述データに関連する参照パラメーターとを含む。
例えば、上記細分割記述データはメタデータアイテムにおいて参照される。
例えば、部分識別データはグループ化され、参照データは、部分識別データのグループを上記部分識別データにリンクする。
例えば、上記カプセル化されたファイルは、画像データのための全ての参照データを含む単一の参照ボックスを含む。
例えば、上記カプセル化されたファイルは、上記細分割記述データと、部分識別データと、参照データとの間の関係の表現を含む記述を含む。
-少なくとも1つの画像を表す画像データと、
-上記少なくとも1つの画像データの複数の画像部分への空間細分割を表す細分割記述データと、
-上記複数の画像部分のうちの1つの画像部分を表す、上記画像データ内のデータ部分を識別する少なくとも1つの部分識別データと、
-上記細分割記述データと上記部分情報とをリンクする参照データと、
を含み、
その方法は、
-上記少なくとも1つの画像内の対象領域を特定することと、
-上記細分割記述データに基づいて、上記対象領域に属する少なくとも1つの画像部分を特定することと、
-上記参照データに基づいて、上記対象領域に属する上記少なくとも1つの画像部分を表す、上記画像データ内のデータ部分を識別する少なくとも1つの部分識別データにアクセスすることと、
-上記画像データ内の上記データ部分を抽出することと、
を含む。
例えば、複数の部分識別データは、上記ビデオシーケンスの上記時間部分の画像の同じ画像部分をそれぞれ表す。
例えば、少なくとも上記細分割記述データが画像データへのメタデータとしてカプセル化される。
例えば、画像部分ごとに、それぞれの部分識別データが特定される。
例えば、複数の画像部分のための共通の部分識別データが特定される。
その方法は、上記対象領域を表示することを更に含むことができる。
例えば、参照データは、参照タイプと、上記細分割記述データを含む付加的な記述メタデータとを含む。
例えば、参照データは、参照タイプと、細分割記述データに関連する参照パラメーターとを含む。
例えば、上記細分割記述データはメタデータアイテムにおいて参照される。
例えば、部分識別データはグループ化され、参照データは、部分識別データのグループを上記部分識別データにリンクする。
例えば、上記カプセル化されたファイルは、画像データのための全ての参照データを含む単一の参照ボックスを含む。
例えば、上記カプセル化されたファイルは、上記細分割記述データと、部分識別データと、参照データとの間の関係の表現を含む記述を含む。
-画像エリアを1つ以上のタイルに分割するための空間パラメーターを含むタイル記述情報を与え、単一の画像のタイルを表すビットストリームの部分を識別するピクチャアイテム情報を与え、上記タイルピクチャアイテムを上記タイル記述情報にリンクする参照情報を与えるように構成される処理ユニットと、
-上記ビットストリームを、上記与えられた情報とともに、カプセル化されたデータファイルとして出力するように構成される通信ユニットと、
を備えることができる。
-画像対象領域を選択し、上記タイル記述情報から、選択された対象エリアに対応するタイルを識別し、上記識別されたタイルにリンクされる、それぞれが単一の画像のタイルを表すビットストリームの部分を識別する1つ以上のピクチャアイテムを選択し、選択されたタイルピクチャアイテム(複数の場合もある)によって識別されたビットストリームの部分を抽出するように構成される処理ユニットと、
-上記抽出されたビットストリーム部分を出力するように構成される通信ユニットと、
を備えることができる。
-上記少なくとも1つの画像の上記細分割を表す細分割記述データと、
-上記部分識別データと、
-上記細分割記述データと上記部分識別データとをリンクする参照データと、
ともに、上記カプセル化ファイルの中にカプセル化するように構成される処理ユニットを備えることができる。
-少なくとも1つの画像を表す画像データと、
-上記少なくとも1つの画像データの複数の画像部分への空間細分割を表す細分割記述データと、
-上記複数の画像部分のうちの1つの画像部分を表す、上記画像データ内のデータ部分を識別する少なくとも1つの部分識別データと、
-上記細分割記述データと上記部分情報とをリンクする参照データと、
を含むカプセル化ファイルを処理するように構成することができる。
-第5の態様又は第7の態様による第1のデバイスと、
-上記第1のデバイスからのファイルを処理するための、第6の態様又は第8の態様による第2のデバイスと、
を備えるシステムが提供される。
1つ以上の画像を表す符号化ビットストリームをカプセル化する方法であって、カプセル化されたビットストリームはデータパートと、メタデータパートとを含む、方法が提供される。その方法は、
単一の画像のサブ画像又は画像を表すデータパートの部分を識別する画像アイテム情報を与えることと、
1つ以上の画像に関連する表示パラメーター及び/又は変換演算子を含むパラメーターを含む画像記述情報を与えることと、
上記ビットストリームを、上記与えられた情報とともに、カプセル化されたデータファイルとして出力することと、
を含み、
画像記述情報は、メタデータパート内に記憶される。
-タイプ情報、及び/又は、
-画像アイテム情報を上記パラメーターにリンクするために使用される識別子、
を含む付加データに関連付けられる。
一実施形態において、付加データはヘッダーである。
一実施形態において、付加データは仮想アイテムである。
別の実施形態において、画像記述情報に含まれる各変換演算子が、変換済みアイテムを上記変換演算子にリンクするために使用される識別子を含む付加データに関連付けられる。
一実施形態において、メタデータパートに記憶されるボックスは、少なくとも1つの変換演算子を含む。
-変換演算子が適用される元の画像を識別するための情報と、
-データパート内の変換済みアイテムの場所を特定するための情報と、
を更に含む。
-対象の画像又はサブ画像を選択することと、
-上記参照された画像又はサブ画像記述情報から、メタデータパートからの関連する表示パラメーター及び/又は変換演算子を識別することと、
-変換演算子が識別された場合、画像又はサブ画像に変換を適用するとともに、上記表示パラメーターに従って、最終的に変換された上記画像又はサブ画像を表示することと、
を含む。
-タイプ情報、及び/又は、
-画像又はサブ画像アイテム情報を上記パラメーターにリンクするために使用される識別子、
を含む。
一実施形態において、メタデータパートは、ISOBMFFの「メタ」データボックス内に含まれる。
一実施形態において、付加データはヘッダーである。
一実施形態において、付加データは仮想アイテムである。
別の実施形態において、画像記述情報に含まれる各変換演算子が、変換済みアイテムを上記変換演算子にリンクするために使用される識別子を含む付加データに関連付けられる。
一実施形態において、メタデータパートに記憶されるボックスは、少なくとも1つの変換演算子を含む。
一実施形態において、カプセル化されたビットストリームのデータパートは、1つ以上の変換演算子に関連付けられる変換済みアイテムを含み、メタデータパートは、
-変換演算子が適用される元の画像を識別するための情報と、
-データパート内の変換済みアイテムの場所を特定するための情報と、
を更に含む。
一実施形態において、変換済みアイテムは、少なくとも1つの変換インデックスを含み、インデックスはメタデータパート内の変換演算子のうちの1つを識別できるようにする。
単一の画像及び/又は単一の画像の組のサブ画像又は画像を表す前記データパートの部分を識別する画像アイテム情報を与えることと、
1つ以上の画像に関連する表示パラメーター及び/又は変換演算子を含むパラメーターを含む画像記述情報を与えることと、
前記ビットストリームを、前記与えられた情報とともに、カプセル化されたデータファイルとして出力することと、
を含む、方法が提供される。
検討対象の画像アイテム情報ごとの第1の識別子であって、該第1の識別子は、画像アイテム情報の特性として規定され、前記専用共有ボックス内の同じ値を有する第2の識別子を参照する、第1の識別子と、
前記専用共有ボックス内に含まれる1つ又は幾つかの第2の識別子であって、各第2の識別子は1つの画像記述情報を参照する、1つ又は幾つかの第2の識別子と、
を含む。
検討対象の画像アイテム情報ごとの第1の識別子及び第2の識別子であって、該第1の識別子は、画像アイテム情報の特性として規定され、前記表示パラメーターに関連する前記専用共有ボックス内の第3の識別子を参照し、該第2の識別子は、画像アイテム情報の特性として規定され、前記変換演算子に関連する前記専用共有ボックス内の第4の識別子を参照する、第1の識別子及び第2の識別子と、
前記表示パラメーター及び前記変換演算子に関連する前記専用共有ボックス内にそれぞれ含まれる1つ又は幾つかの第3の識別子及び第4の識別子であって、各第3の識別子及び第4の識別子はそれぞれ、表示パラメーター及び変換演算子を参照する、1つ又は幾つかの第3の識別子及び第4の識別子と、
を備える。
単一の画像及び/又は単一の画像の組のサブ画像又は画像を表す前記データパートの部分を識別する画像アイテム情報を取得することと、
1つ以上の画像に関連する表示パラメーター及び/又は変換演算子を含むパラメーターを含む画像記述情報を取得することと、
前記ビットストリームを、前記決定された情報とともに、カプセル化されたデータファイルとして抽出することと、
を含む、方法が提供される。
検討対象の画像アイテム情報ごとの第1の識別子であって、該第1の識別子は、画像アイテム情報の特性として規定され、前記専用共有ボックス内の同じ値を有する第2の識別子を参照する、第1の識別子と、
前記専用共有ボックス内に含まれる1つ又は幾つかの第2の識別子であって、各第2の識別子は1つの画像記述情報を参照する、1つ又は幾つかの第2の識別子と、
を含む。
検討対象の画像アイテム情報ごとの第1の識別子及び第2の識別子であって、該第1の識別子は、画像アイテム情報の特性として規定され、前記表示パラメーターに関連する前記専用共有ボックス内の第3の識別子を参照し、該第2の識別子は、画像アイテム情報の特性として規定され、前記変換演算子に関連する前記専用共有ボックス内の第4の識別子を参照する、第1の識別子及び第2の識別子と、
前記表示パラメーター及び前記変換演算子に関連する前記専用共有ボックス内にそれぞれ含まれる1つ又は幾つかの第3の識別子及び第4の識別子であって、各第3の識別子及び第4の識別子はそれぞれ、表示パラメーター及び変換演算子を参照する、1つ又は幾つかの第3の識別子及び第4の識別子と、
を備える。
一実施形態において、前記表示パラメーターのうちの1つは、単一の画像の部分に対応する単一の画像の組を規定するためのグリッドである。
一実施形態において、前記単一の画像の組からの前記画像は同じ単一の画像に関連する。
前記第1のデバイスからのファイルを処理するための、本発明の第19の態様による第2のデバイスと、
を備える、システムが提供される。
単一の画像及び/又は単一の画像の組のサブ画像又は画像を表す前記データパートの部分を識別する画像アイテム情報を与えることと、
1つ以上の画像に関連する表示パラメーター及び/又は変換演算子を含むパラメーターを含む画像記述情報を与えることと、
前記ビットストリームを、前記与えられた情報とともに、カプセル化されたデータファイルとして出力することと、
を含む、方法が提供される。
単一の画像及び/又は単一の画像の組のサブ画像又は画像を表す前記データパートの一部分を識別する画像アイテム情報を取得することと、
1つ以上の画像に関連する表示パラメーター及び/又は変換演算子を含むパラメーターを含む画像記述情報を取得することと、
前記ビットストリームを、前記決定された情報とともに、カプセル化されたデータファイルとして抽出することと、
を含み、
前記画像記述情報は、1つ又は2つの専用ボックス内で規定され、各画像記述情報は、前記画像アイテム情報を少なくとも1つの画像記述情報にリンクするための構造を介して検索可能である、方法が提供される。
前記第1のデバイスからのファイルを処理するための、本発明の第26の態様による第2のデバイスと、
を備える、システムが提供される。
技術的状況をより深く理解するために、連続した時間フレームを有するビデオ200を示す図2を参照しながら、ビデオタイリングが説明される。各フレーム201は、「タイル」T1~T8と呼ばれる8つの部分に(ここでは、長方形部分)に分割される。タイルの数及び形状は異なることができる。以下において、ビデオフレームのどのインデックスでも、タイリングは同じであると考えられる。
-スライスセグメント内の全てのCTUが同じタイルに属する。
-タイル内の全てのCTUが同じスライスセグメントに属する。
図4を参照すると、タイルのISOBMFFファイルフォーマットへのカプセル化が説明される。例えば、各タイルは専用トラックの中にカプセル化される。全てのタイルの共通のセットアップ及び初期化情報が、例えば、「タイルベーストラック」と呼ばれる、特定のトラックの中にカプセル化される。このようにして、フルビデオは、これら全てのトラックの構成物、すなわち、タイルベーストラック、及びタイルトラックの組としてカプセル化される。
-幾つかのアイテムが、サンプルグループに類似であるが、各アイテムタイプに特有であるメタデータの組を記述できるようにする。
-任意のアイテムの場合に、所与のタイプのアイテム参照のための1つのパラメーターを記述する能力を追加する。パラメーターは、その後、参照されるアイテムのタイプ(グループ化タイプに類似)に応じて解釈されることになる。
-ボックス「SampleGroupDescriptionBox」は、特性のリスト(「SampleGroupEntry」のリスト)を規定するパラメーター「sgpd」を有する。
-ボックス「SampleToGroupBox」は、特性へのマッピングとともにサンプルグループのリストを規定するパラメーター「sbgp」を有する。
現在のバージョン:
-「version」は、TileInfoDataItemのための構文のバージョンを示す。値0のみが規定される。
-「regular_spacing」は、グリッド内の全てのタイルが同じ幅及び同じ高さを有するかを示す。
-「reference_width、reference_height」は、グリッドが記述される単位を指示する。これらの単位は、このアイテムを参照する画像のピクセル解像度に一致しても、一致しなくてもよい。グリッドが規則的である場合には、「reference_width」(又は「reference_height」)は、「nb_cell_horiz」(又は「nb_cell_vert」)の倍数とすべきである。
-「cell_width」は、左から始めて、不規則なタイル内のグリッドの水平方向の分割を与える。
-「cell_height」は、上から始めて、不規則なタイル内のグリッドの垂直方向の分割を与える。
上記の手法は、全てのタイルのためのタイリング情報を共有することを可能にする。
定義:
ボックスタイプ:「isre」
コンテナー:単純画像メタデータアイテム(「simd」)
必須:非必須
量:アイテムあたり0又は1
構文:
horizontal_display_offsetは画像の水平オフセットを指定する。
vertical_display_offsetは画像の垂直オフセットを指定する。
display_widthは画像の幅を指定する。
display_heightは画像の高さを指定する。
layerは画像の前から後への順序付けを指定する。小さい番号の画像ほど視認者に近く、0は標準値であり、-1はレイヤ0の前方にあり、他も同様である。
-水平方向:全ての「isre」ボックスの場合の(horizontal_display_offset+display_width)の最大値。
-垂直方向:全ての「isre」ボックスの場合の(vertical_display_offset+display_height)の最大値。
-item_iref_parameter_countは、それに関するパラメーターが与えられる参照タイプの数を与える。これは、図6のアイテム605に対して変更されない。
-iref_typeは、それに関するパラメーターがこのアイテムの場合に当てはまる、「iref」ボックスにおいて示されるような参照タイプを与える。これは、図6のアイテム605に対して変更されない。
-parameterは、ここでは、新たなボックスItemReferenceParameterEntryを介して拡張手段を与えるので、iref_parameter(図6のアイテム605)とは異なる。この新たなボックスを(タイリング構成においてタイルインデックスのためのTileIndexItemReferenceParameterEntryを用いて上記で行われたように)特殊化することによって、カプセル化及び構文解析モジュールがこの特殊化されたボックスの構造を認識している場合には、任意の種類の付加メタデータを情報アイテムエントリに関連付けることができる。これは、ItemReferenceParameterEntryの標準的なタイプによって、又は構成によって、若しくはネゴシエーションステップにおいて、パラメーターエントリの構造を与えることによって行うことができる。パラメーターの意味は、タイプiref_typeを有するアイテムの意味によって与えられる。
-item_ID:このアイテムのID(又は識別子)。iinf、iloc又はipro内にitem_ID値が同じであるエントリを有することは違反である。
-item_typeは、「mime」のような規定された有効なアイテムタイプ指示子である32ビット値、通常、4つの印刷可能文字である。
-アイテム参照の数が多い。
-効果を次々につなげるときにアイテムの数が増える。
-画像の組又は対象領域のような画像の部分を意味する、アイテムの所与の組のための効果を相互的にできない。
-カプセル化された画像ファイルの作成が極めて複雑になる。すなわち、1つの派生画像アイテム内の1つの効果に触ることは、全ての派生画像が同じエクステントを共有するか否かを調べるためにそれらの画像を検査し、潜在的には、その一部を書き換えることを意味する。
-画像ファイルリーダーが、一連の変換/効果がそのファイル内の異なるアイテム上で同じであるか否かを(直接シグナリングすることなく)解明する必要があるので、構文解析もそれほど簡単ではない。
-新たな変換/効果が、適用すべき一連の変換/効果内の変換/効果とともに絶えず記憶されないときにはいつでも、変換/効果ごとに、itemLocationBox(「iloc」)において新たなエクステントが必要とされることになる。さらに、効果の組み合わせ又は連鎖は、データパート内に隣接するエクステント上に記憶されないときに犠牲が大きい場合がある。
-記述メタデータとリンクされる正規のアイテム(画像又は画像の一部(例えば、hvc1、...)(上記で提案されたように、「init」又は「simr」参照タイプを通して、又は記述メタデータを記述する任意の参照タイプを通して)。
-「派生画像」アイテムからソースアイテムへの「dimg」アイテム参照を通して識別される1つ以上のソースアイテム(画像又は画像の一部)に適用される効果(又は変換)の集合体である「派生画像」。
-幾つかの異なる効果の集合体を含む、変換/効果を表す構造。
-効果の再利用可能性:一度だけ宣言され、潜在的には複数回参照される。
-効果の集合体を規定することによる、よりコンパクトな記述(それに関して以下に更に説明される)。
-itemLocationBoxの新たなエクステントが必要とされないことを含む、全体的な可読性。
-アイテム参照の数が少ないままである。
派生画像はファイルのデータパート内に記憶される。
effect_typeは、このクラスから派生する効果のボックスタイプであり、固有の4文字コードがこの種のボックスを識別する。
effect_idは、所与の効果又は変換のための固有識別子である。この識別子は「メタ」ボックス内で固有にすべきである。
nb_bits_effectは、バージョン値から導出され、effect_idを表すために使用されるビット数を示す。
-回転効果:回転効果は、90度の単位において反時計回りの方向にソース画像を変換する。
ボックスタイプ:「erot」
コンテナー:effd
必須:非必須
量:0以上
angle*90:それは角度の単位において角度(反時計回りの方向)を指定する。
-クリーンアパーチャ効果:クリーンアパーチャ効果は、ソース画像の可視部分を変更する。
ボックスタイプ:「ecla」
コンテナー:effd
必須:非必須
量:0以上
nb_bits_effectは、親クラスBaseEffectBoxから派生し、CleanApertureEffectBoxの異なるフィールドを表すために使用されるビット数を示す。
hSpacing、vSpacing:ピクセルの相対的な幅及び高さを規定する。
cleanApertureWidthN、cleanApertureWidthD:画像のカウントされたピクセル内の厳密なクリーンアパーチャ幅を規定する分数である。
cleanApertureHeightN、cleanApertureHeightD:画像のカウントされたピクセル内の厳密なクリーンアパーチャ高を規定する分数である。
horizOffN、horizOffD:クリーンアパーチャ中心-(幅-1)/2(通常0)の水平オフセットを規定する分数である。
vertOffN、vertOffD:クリーンアパーチャ中心-(高さ-1)/2(通常0)の垂直オフセットを規定する分数である。
ボックスタイプ:「ecol」
コンテナー:effd
必須:非必須
量:0以上
nb_bits_effectは、親クラスBaseEffectBoxから派生し、EffectCollectionBoxの異なるフィールドを表すために使用されるビット数を示す。
apply_effect_id:ソース画像に適用すべき効果のIDを示す。
nb_bits_effectsは、親クラスBaseEffectBoxから派生し、OverlayEffectBoxの異なるフィールドを表すために使用されるビット数を示す。
fill_requiredは、結果として構成された画像内に、背景値で満たすべき穴が存在するか否かを示す。
canvas_fill_value:任意の入力画像のピクセルが特定のピクセルロケーションに位置しない場合に使用される、チャネルあたりのピクセル値を示す。入力画像が3つ未満のチャネルを含む場合には、入力画像内に存在しないチャネルに対応するcanvas_fill_valueの意味は規定されない。
nb_imagesは、それぞれがimage_item_IDパラメーターによって示されるようなそのitem_IDによって識別される、構成すべき画像の数を示す。
output_width、output_height:入力画像が配置される、出力画像の幅及び高さをそれぞれ指定する。出力画像のピクチャエリアはキャンバスと呼ばれる。
horizontal_offset、vertical_offset:入力画像が位置する、キャンバスの左上角からのオフセットを規定する。負のオフセット値を有するピクセルロケーションは出力画像に含まれない。output_width以上の水平ピクセルロケーションは出力画像に含まれない。output_height以上の垂直ピクセルロケーションは出力画像に含まれない。
-アイテム間で共有されるボックス構造の記述メタデータ及び規範メタデータを含むために、SharedItemPropertiesBox(「sitp」)と呼ばれる新たな専用ボックスが規定される。
-ボックス構造の記述メタデータ及び規範メタデータをアイテムに関連付けるためにItem Info Entry(「infe」)を変更する。そのメタデータは、メタデータがこのアイテムにのみ関連する場合には、「infe」ボックス内に直接記憶することができ、メタデータが幾つかのアイテム間で共有される場合には、「sitp」ボックス内に記憶し、「infe」ボックスから参照することができる。
-画像アイテムとトラック内のサンプルとの間で同じ初期化データを共有できるようにするための新たなボックス(初期化パラメーターを表すSampleDescriptionEntryReference「sder」)。
ボックスタイプ:「sitp」
コンテナー:メタボックス(「meta」)
必須:非必須
量:0又は1
included_prop_count:アレイitem_propertiesに含まれる特性(記述メタデータ又は規範メタデータ)の数。
item_properties:このアイテムのための付加情報(アイテム情報の特性)を与えるボックスのアレイ又はボックスのテーブル。許されるボックスは、SharedItemPropertiesBoxの場合と同じである。
indexed_prop_count:SharedItemPropertiesボックス内の特性への参照数。
box_prop_idx:「メタ」ボックスのSharedItemPropertiesボックス内に記憶されるボックスのリストへの0ベースのインデックス。
ボックスタイプ:「irot」
コンテナー:SharedItemProperties
必須:非必須
量:0以上
versionは0に等しいものとする。
flagsは0に等しいものとする。
angle*90は角度の単位において角度(反時計回りの方向)を規定する。
ボックスタイプ:「iovl」
コンテナー:SharedItemProperties
必須:非必須
量:0以上
versionは0に等しいものとする。
0に等しい(flags&1)は、フィールドoutput_width、output_height、horizontal_offset及びvertical_offsetの長さが16ビットであることを規定する。1に等しい(flags&1)は、フィールドoutput_width、output_height、horizontal_offset及びvertical_offsetの長さが32ビットであることを規定する。1より大きいflagsの値は予約される。
canvas_fill_value:任意の入力画像のピクセルが特定のピクセルロケーションに位置しない場合に使用されるチャネルあたりのピクセル値を示す。fill値はRGBAとして規定される(ループカウンターjに対応するR、G、B及びAはそれぞれ0、1、2、及び3に等しい)。RGB値は、IEC61966-2-1内に規定されるようなsRGB色空間内にある。A値は、0(完全に透明)から65535(完全に不透明)に及ぶ線形不透明値である。
output_width、output_height:入力画像が配置される出力画像の幅及び高さをそれぞれ規定する。出力画像の画像エリアはキャンバスと呼ばれる。
reference_countは、タイプ「dimg」のSingleItemTypeReferenceBoxから取得され、ただし、このボックスを使用するアイテムは、from_item_IDフィールドによって識別される。
horizontal_offset、vertical_offset:入力画像が位置する、キャンバスの左上角からのオフセットを規定する。負のオフセット値を有するピクセルロケーションは出力画像に含まれない。output_width以上の水平ピクセルロケーションは出力画像に含まれない。output_height以上の垂直ピクセルロケーションは出力画像に含まれない。
ボックスタイプ:「grid」
コンテナー:SharedItemProperties
必須:非必須
量:0以上
versionは0に等しいものとする。
0に等しい(flags&1)は、フィールドoutput_width、output_heightの長さが16ビットであることを規定する。1に等しい(flags&1)は、フィールドoutput_width、output_heightの長さが32ビットであることを規定する。1より大きいflagsの値は予約される。
output_width、output_height:入力画像が配置される出力画像の幅及び高さをそれぞれ規定する。出力画像の画像エリアはキャンバスと呼ばれる。
rows、columns:入力画像の行の数、及び行あたりの入力画像の数を規定する。入力画像は、アイテム参照の順序において、最初に最も上の行を占め、その後、2行目以降を占める。
ボックスタイプ:「sder」
コンテナー:SharedItemProperties
必須:非必須
量:0以上
track_ID:その初期化が再利用されるトラックの識別子。
sample_description_index:このアイテム内のデータを記述する関連付けられるトラック内のサンプルエントリの1ベースのインデックス。
本発明のこの最後の態様の更なる例が付録に記述される。
-CPUで表される、マイクロプロセッサのような中央処理ユニット901。
-本発明の実施形態の方法の実行可能コードを記憶するための、RAMで表される、ランダムアクセスメモリ902、並びにマニフェストを読み出し、及び書き込むために、及び/又はビデオを符号化するために、及び/又は所与のファイルフォーマット下でデータを読み出すか、又は生成するための方法を実施するために必要とされる変数及びパラメーターを記録するように構成されるレジスタ。その記憶容量は、例えば、拡張ポートに接続されるオプションのRAMによって拡張することができる。
-本発明の実施形態を実施するためのコンピュータープログラムを記憶するための、ROMで表される、リードオンリーメモリ903。
-ネットワークインターフェース904は通常、処理されるべきデジタルデータがそれを介して送信又は受信される通信ネットワークに接続される。ネットワークインターフェース904は単一のネットワークインターフェースとすることができるか、又は異なるネットワークインターフェースの組(例えば、有線及び無線インターフェース、又は異なる種類の有線又は無線インターフェース)から構成することができる。データが、CPU901において実行されるソフトウェアアプリケーションの制御下で、送信するためにネットワークインターフェースに書き込まれるか、又は受信するためにネットワークインターフェースから読み出される。
-ユーザーから入力を受信するか、又はユーザーに情報を表示するためのユーザーインターフェース905。
-HDで表される、ハードディスク906。
-ビデオソース又はディスプレイのような外部デバイスからデータを受信し/外部デバイスにデータを送信するためのI/Oモジュール907。
Claims (25)
- 1つ以上の静止画像のメタデータが格納されたボックスの階層構造を有する画像ファイルを生成する方法であって、該方法は、
1つ以上の静止画像を取得し、
前記1つ以上の静止画像のそれぞれに関連する1つ以上のプロパティを識別し、
前記生成された画像ファイルは、
(1)専用ボックスにリストされた1つ以上のプロパティと、
(2)前記1つ以上のプロパティのそれぞれの識別情報と、前記1つ以上の静止画像のそれぞれの識別情報とを関連付けるための関連情報と、
を含む
ことを特徴とする、方法。 - 前記画像ファイルは、前記1つ以上の静止画像の夫々に対する情報を示す”Item Information Box”をさらに含み、
前記1つ以上のプロパティのそれぞれの前記識別情報と、前記1つ以上の静止画像のそれぞれの前記識別情報とを関連付けるための前記関連情報は、前記専用ボックスとは異なる所定のボックスにおいて記述されることを特徴とする請求項1に記載の方法。 - 前記専用ボックスは、少なくとも1つのサブボックス“ispe”を含み、前記少なくとも1つのサブボックス“ispe”のそれぞれは、前記1つ以上の静止画像の幅および高さを含むプロパティを記述することを特徴とする請求項2に記載の方法。
- 前記専用ボックスは、少なくとも1つ以上のサブボックス”hvcC”を含み、前記少なくとも1つ以上のサブボックス”hvcC”のそれぞれは、前記1つ以上の画像をデコードするための情報を示すプロパティを記述することを特徴とする請求項1に記載の方法。
- 前記関連情報は、識別された前記1つ以上のプロパティのうちの1つのプロパティの識別情報と、少なくとも2つ以上の静止画像に対応する識別情報との間の対応付けを表すことを特徴とする請求項2または3に記載の方法。
- 前記画像ファイルは、複数の静止画像に基づいて生成されることを特徴とする請求項1~5のいずれか一項に記載の方法。
- 前記画像ファイルは、1つの静止画像に対応する複数のサブ画像に基づいて生成されることを特徴とする請求項1から5の何れか1項に記載の方法。
- 前記画像ファイルは、メタデータ部分とメディアデータ部分とを含み、前記1つ以上のプロパティと前記関連情報とは、前記メタデータ部分に記述されることを特徴とする請求項1~7のいずれか一項に記載の方法。
- 前記1つ以上のプロパティのそれぞれの前記識別情報は、前記1つ以上のプロパティが前記専用ボックスにリストされた順を示すインデックス番号に対応することを特徴とする請求項1~8のいずれか一項に記載の方法。
- 1つ以上の静止画像のメタデータが格納されたボックスの階層構造を有する画像ファイルに基づいて静止画像を出力する方法であって、該方法は、
(1)専用ボックスにリストされた1つ以上のプロパティと、
(2)前記1つ以上のプロパティのそれぞれの識別情報と、1つ以上の静止画像のそれぞれの識別情報とを関連付けるための関連情報と、を少なくとも含む画像ファイルを取得し、
前記取得した画像ファイルに基づいて静止画像を出力する
ことを特徴とする方法。 - 前記画像ファイルは、前記1つ以上の静止画像の夫々に対する情報を示す”Item Information Box”をさらに含み、
前記1つ以上のプロパティのそれぞれの前記識別情報と、前記1つ以上の静止画像のそれぞれの前記識別情報とを関連付けるための前記関連情報は、前記専用ボックスとは異なる所定のボックスにおいて記述されることを特徴とする請求項10に記載の方法。 - 前記専用ボックスは、少なくとも1つのサブボックス“ispe”を含み、前記少なくとも1つのサブボックス“ispe”のそれぞれは、前記1つ以上の静止画像の幅および高さを含むプロパティを記述することを特徴とする請求項11に記載の方法。
- 前記専用ボックスは、少なくとも1つ以上のサブボックス”hvcC”を含み、前記少なくとも1つ以上のサブボックス”hvcC”のそれぞれは、前記1つ以上の静止画像をデコードするための情報を示すプロパティを記述することを特徴とする請求項10に記載の方法。
- 前記関連情報は、識別された前記1つ以上のプロパティのうちの1つのプロパティの識別情報と、少なくとも2つ以上の静止画像に対応する識別情報との間の対応付けを表すことを特徴とする請求項11または12に記載の方法。
- 前記画像ファイルは、複数の静止画像に基づいて生成されることを特徴とする請求項10~14のいずれか一項に記載の方法。
- 前記画像ファイルは、1つの静止画像に対応する複数のサブ画像に基づいて生成されることを特徴とする請求項10~14のいずれか一項に記載の方法。
- 前記画像ファイルは、メタデータ部分とメディアデータ部分とを含み、前記1つ以上のプロパティと前記関連情報とは、前記メタデータ部分に記述されることを特徴とする請求項11~16のいずれか一項に記載の方法。
- 前記1つ以上のプロパティのそれぞれの前記識別情報は、前記1つ以上のプロパティが前記専用ボックスにリストされた順を示すインデックス番号に対応することを特徴とする請求項10~17のいずれか一項に記載の方法。
- 1つ以上の静止画像のメタデータが格納されたボックスの階層構造を有する画像ファイルを生成する装置であって、該装置は、
1つ以上の静止画像を取得する取得部と、
前記1つ以上の静止画像のそれぞれに関連する1つ以上のプロパティを識別する識別部と
を備え、
前記生成された画像ファイルは、
(1)専用ボックスにリストされた1つ以上のプロパティと、
(2)前記1つ以上のプロパティのそれぞれの識別情報と、前記1つ以上の静止画像のそれぞれの識別情報とを関連付けるための関連情報と、
を含むことを特徴とする、装置。 - 1つ以上の静止画像のメタデータが格納されたボックスの階層構造を有する画像ファイルに基づいて静止画像を出力する装置であって、該装置は、
(1)専用ボックスにリストされた1つ以上のプロパティと、
(2)前記1つ以上のプロパティのそれぞれの識別情報と、1つ以上の静止画像のそれぞれの識別情報とを関連付けるための関連情報と、
を少なくとも含む画像ファイルを取得する取得部と、
前記取得した画像ファイルに基づいて静止画像を出力する出力部と
を備える
ことを特徴とする、装置。 - 請求項1~9のいずれか一項に記載の方法を実施するために構成される、1つ以上の静止画像を表す符号化ビットストリームをカプセル化するための装置。
- 請求項10~18のいずれか一項に記載の方法を実施するために構成される、1つ以上の静止画像を表すカプセル化されたビットストリームを処理するための装置。
- 請求項21に記載の装置と、
前記装置からのファイルを処理するための、請求項22に記載の装置と、
を備える、システム。 - 請求項1~18のいずれか一項に記載の方法をコンピュータが実行するためのプログラム。
- 請求項24に記載のプログラムを記憶したコンピュータで読み取り可能な記憶媒体。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021178907A JP7293312B2 (ja) | 2015-06-16 | 2021-11-01 | 画像データカプセル化 |
JP2023094529A JP2023120249A (ja) | 2015-06-16 | 2023-06-08 | 画像データカプセル化 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
GB1510608.1 | 2015-06-16 | ||
GB1510608.1A GB2539461B (en) | 2015-06-16 | 2015-06-16 | Image data encapsulation |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017564598A Division JP2018522469A (ja) | 2015-06-16 | 2016-06-08 | 画像データカプセル化 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021178907A Division JP7293312B2 (ja) | 2015-06-16 | 2021-11-01 | 画像データカプセル化 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021057899A JP2021057899A (ja) | 2021-04-08 |
JP7039668B2 true JP7039668B2 (ja) | 2022-03-22 |
Family
ID=53784855
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017564598A Pending JP2018522469A (ja) | 2015-06-16 | 2016-06-08 | 画像データカプセル化 |
JP2020161802A Active JP7039668B2 (ja) | 2015-06-16 | 2020-09-28 | 画像データカプセル化 |
JP2021178907A Active JP7293312B2 (ja) | 2015-06-16 | 2021-11-01 | 画像データカプセル化 |
JP2023094529A Pending JP2023120249A (ja) | 2015-06-16 | 2023-06-08 | 画像データカプセル化 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017564598A Pending JP2018522469A (ja) | 2015-06-16 | 2016-06-08 | 画像データカプセル化 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021178907A Active JP7293312B2 (ja) | 2015-06-16 | 2021-11-01 | 画像データカプセル化 |
JP2023094529A Pending JP2023120249A (ja) | 2015-06-16 | 2023-06-08 | 画像データカプセル化 |
Country Status (13)
Country | Link |
---|---|
US (3) | US10645379B2 (ja) |
EP (2) | EP3311585B1 (ja) |
JP (4) | JP2018522469A (ja) |
KR (2) | KR102166877B1 (ja) |
CN (2) | CN112153386B (ja) |
BR (1) | BR112017025498A2 (ja) |
CA (2) | CA2988476A1 (ja) |
ES (1) | ES2943233T3 (ja) |
GB (1) | GB2539461B (ja) |
MX (2) | MX2017015444A (ja) |
RU (2) | RU2719368C2 (ja) |
SG (1) | SG10202002513XA (ja) |
WO (1) | WO2016202664A1 (ja) |
Families Citing this family (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2539461B (en) | 2015-06-16 | 2020-01-08 | Canon Kk | Image data encapsulation |
EP3412032A1 (en) * | 2016-02-02 | 2018-12-12 | Fraunhofer Gesellschaft zur Förderung der Angewand | Scene section and region of interest handling in video streaming |
EP3293981A1 (en) * | 2016-09-08 | 2018-03-14 | Koninklijke KPN N.V. | Partial video decoding method, device and system |
DE112017006610T5 (de) * | 2016-12-27 | 2019-09-12 | Sony Corporation | Bildverarbeitungsvorrichtung und Verfahren |
GB2560921B (en) * | 2017-03-27 | 2020-04-08 | Canon Kk | Method and apparatus for encoding media data comprising generated content |
CN107071515B (zh) * | 2017-04-08 | 2018-12-07 | 腾讯科技(深圳)有限公司 | 一种图片文件处理方法及系统 |
GB2572947A (en) * | 2018-04-05 | 2019-10-23 | Canon Kk | Method and apparatus for encapsulating images in a file |
WO2019193097A1 (en) * | 2018-04-05 | 2019-10-10 | Canon Kabushiki Kaisha | Method and apparatus for encapsulating images in a file |
GB2574445A (en) | 2018-06-06 | 2019-12-11 | Canon Kk | Method, device, and computer program for transmitting media content |
BR112020026646A2 (pt) | 2018-06-26 | 2021-03-23 | Huawei Technologies Co., Ltd. | Projetos de sintaxe de alto nível para codificação de nuvem de pontos |
EP3854105A4 (en) * | 2018-09-20 | 2022-06-22 | Nokia Technologies Oy | ARTIFICIAL INTELLIGENCE APPARATUS AND METHOD |
JP7267703B2 (ja) * | 2018-09-27 | 2023-05-02 | キヤノン株式会社 | 画像データ格納装置、画像データ格納方法、及び、プログラム |
KR102106716B1 (ko) * | 2018-11-15 | 2020-05-04 | 전자부품연구원 | 타일 기반 스트리밍을 위한 분산 트랜스코딩 방법 및 시스템 |
WO2020120833A1 (en) * | 2018-12-10 | 2020-06-18 | Nokia Technologies Oy | An apparatus and a method for signaling information in a container file format |
JP7303625B2 (ja) | 2018-12-18 | 2023-07-05 | キヤノン株式会社 | 画像ファイル生成装置、画像ファイル生成方法、及びプログラム |
WO2020130331A1 (ko) * | 2018-12-21 | 2020-06-25 | (주)소프트제국 | 블록체인에서 노드들간 블록 및 전자 문서를 공유 및 검증하는 방법 |
US11902555B2 (en) | 2018-12-28 | 2024-02-13 | Sony Group Corporation | Information processing device and information processing method |
GB2582155B (en) * | 2019-03-12 | 2023-12-27 | Canon Kk | Method, device, and computer program for signaling available portions of encapsulated media content |
GB2585052B (en) * | 2019-06-26 | 2023-07-26 | Canon Kk | Method and apparatus for encapsulating panorama images in a file |
EP3992916A4 (en) * | 2019-07-01 | 2023-06-21 | Canon Kabushiki Kaisha | DEVICE, METHOD AND PROGRAM FOR GENERATION OF IMAGE FILES |
JP7370047B2 (ja) | 2019-10-29 | 2023-10-27 | 株式会社ニッキ | エンジンの失火診断検出方法 |
JP7442302B2 (ja) * | 2019-11-22 | 2024-03-04 | キヤノン株式会社 | データ処理装置およびその制御方法、プログラム |
GB2590435B (en) * | 2019-12-17 | 2023-12-20 | Canon Kk | Method, device, and computer program for improving encapsulation of media content |
EP4097976A4 (en) * | 2020-02-21 | 2023-03-01 | Beijing Bytedance Network Technology Co., Ltd. | SLICE AND TILE PARTITIONING IN VIDEO ENCODING |
GB2593945A (en) * | 2020-04-06 | 2021-10-13 | Canon Kk | Method and apparatus for encapsulating region related annotation in an image file |
EP4131961A4 (en) * | 2020-04-13 | 2023-09-13 | LG Electronics, Inc. | DEVICE FOR TRANSMITTING POINT CLOUD DATA, METHOD FOR TRANSMITTING POINT CLOUD DATA, DEVICE FOR RECEIVING POINT CLOUD DATA AND METHOD FOR RECEIVING POINT CLOUD DATA |
GB2596325B (en) * | 2020-06-24 | 2023-04-19 | Canon Kk | Method and apparatus for encapsulating annotated region in ISOBMFF tracks |
EP4205390A1 (en) * | 2020-12-17 | 2023-07-05 | Huawei Technologies Co., Ltd. | Decoding and encoding of neural-network-based bitstreams |
WO2022135508A1 (en) * | 2020-12-23 | 2022-06-30 | Beijing Bytedance Network Technology Co., Ltd. | Video decoder initialization information constraints |
CN113891015A (zh) * | 2021-09-16 | 2022-01-04 | 平安养老保险股份有限公司 | 基于人工智能的图像处理方法、装置和计算机设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014111547A1 (en) | 2013-01-18 | 2014-07-24 | Canon Kabushiki Kaisha | Method, device, and computer program for encapsulating partitioned timed media data |
WO2015008686A1 (ja) | 2013-07-19 | 2015-01-22 | ソニー株式会社 | ファイル生成装置および方法、並びにコンテンツ再生装置および方法 |
Family Cites Families (40)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6633685B1 (en) * | 1998-08-05 | 2003-10-14 | Canon Kabushiki Kaisha | Method, apparatus, and storage media for image processing |
JP2000200283A (ja) * | 1999-01-06 | 2000-07-18 | Canon Inc | 画像処理システム、画像処理装置、画像処理方法及び記憶媒体 |
JP3745179B2 (ja) * | 1999-01-12 | 2006-02-15 | キヤノン株式会社 | 情報処理装置及びその制御方法及び記憶媒体 |
JP2000209580A (ja) * | 1999-01-13 | 2000-07-28 | Canon Inc | 画像処理装置およびその方法 |
US20020120596A1 (en) * | 2001-02-24 | 2002-08-29 | Matthew Gershoff | Content store with inheritance |
US7480382B2 (en) * | 2003-09-30 | 2009-01-20 | Microsoft Corporation | Image file container |
FR2868896B1 (fr) * | 2004-04-13 | 2008-03-14 | Canon Kk | Procede et dispositif de controle d'acces a un document numerique partage dans un reseau de communication de type poste a poste |
US7512878B2 (en) * | 2004-04-30 | 2009-03-31 | Microsoft Corporation | Modular document format |
JP4368748B2 (ja) * | 2004-06-28 | 2009-11-18 | 株式会社リコー | コンテンツの編集方法、文書ファイル構造、情報処理装置およびシステム並びにプログラム |
EP1932315A4 (en) * | 2005-09-01 | 2012-05-09 | Nokia Corp | METHOD FOR INTEGRATING SVG CONTENT INTO ISO MULTIMEDIA FILE FORMAT FOR PROGRESSIVE DOWNLOAD AND CONTINUOUS TRANSMISSION OF RICH MULTIMEDIA CONTENT |
JP2007109329A (ja) * | 2005-10-14 | 2007-04-26 | Canon Inc | 画像データ記録装置、画像データ再生装置、画像データ記録方法、プログラム及び記録媒体 |
US9432433B2 (en) | 2006-06-09 | 2016-08-30 | Qualcomm Incorporated | Enhanced block-request streaming system using signaling or block creation |
US20080007650A1 (en) * | 2006-06-23 | 2008-01-10 | Broadcom Corporation, A California Corporation | Processing of removable media that stores full frame video & sub-frame metadata |
US20080037825A1 (en) * | 2006-08-08 | 2008-02-14 | Gcs Research Llc | Digital Watermarking for Geospatial Images |
US8775474B2 (en) * | 2007-06-29 | 2014-07-08 | Microsoft Corporation | Exposing common metadata in digital images |
JP4861302B2 (ja) * | 2007-12-26 | 2012-01-25 | オリンパスイメージング株式会社 | 画像ファイル作成装置、画像ファイル作成方法 |
KR20090088772A (ko) * | 2008-02-15 | 2009-08-20 | 삼성전자주식회사 | 슬라이드 쇼를 위한 영상파일을 생성 및 재생하기 위한시스템 및 방법 |
US8406531B2 (en) * | 2008-05-15 | 2013-03-26 | Yahoo! Inc. | Data access based on content of image recorded by a mobile device |
CA2730543C (en) * | 2008-07-16 | 2014-04-22 | Nokia Corporation | Method and apparatus for track and track subset grouping |
US20100191765A1 (en) * | 2009-01-26 | 2010-07-29 | Raytheon Company | System and Method for Processing Images |
RU2622621C2 (ru) * | 2009-11-04 | 2017-06-16 | Амотек Ко., Лтд. | Система и способ для потоковой передачи воспроизводимого контента |
JP5605608B2 (ja) | 2010-03-30 | 2014-10-15 | ソニー株式会社 | 送信装置及び方法、並びにプログラム |
ES2664867T3 (es) * | 2010-07-21 | 2018-04-23 | Mbda Uk Limited | Método de procesamiento de imagen |
US20120233345A1 (en) | 2010-09-10 | 2012-09-13 | Nokia Corporation | Method and apparatus for adaptive streaming |
US9111330B2 (en) * | 2011-05-27 | 2015-08-18 | Dolby Laboratories Licensing Corporation | Scalable systems for controlling color management comprising varying levels of metadata |
WO2013042766A1 (ja) | 2011-09-22 | 2013-03-28 | オリンパス株式会社 | 画像処理装置、画像処理システム、及び画像読出し装置 |
US9648317B2 (en) * | 2012-01-30 | 2017-05-09 | Qualcomm Incorporated | Method of coding video and storing video content |
US10038899B2 (en) | 2012-10-04 | 2018-07-31 | Qualcomm Incorporated | File format for video data |
US11290510B2 (en) * | 2012-11-29 | 2022-03-29 | Samsung Electronics Co., Ltd. | Method and apparatus for encapsulation of motion picture experts group media transport assets in international organization for standardization base media files |
GB2519746B (en) * | 2013-10-22 | 2016-12-14 | Canon Kk | Method, device and computer program for encapsulating scalable partitioned timed media data |
US9648348B2 (en) | 2013-10-23 | 2017-05-09 | Qualcomm Incorporated | Multi-layer video file format designs |
EP3078195A4 (en) | 2013-12-02 | 2017-08-09 | Nokia Technologies OY | Video encoding and decoding |
EP3092772B1 (en) * | 2014-01-07 | 2019-07-31 | Nokia Technologies Oy | Media encapsulating and decapsulating |
GB2524726B (en) * | 2014-03-25 | 2018-05-23 | Canon Kk | Image data encapsulation with tile support |
GB2531271A (en) * | 2014-10-14 | 2016-04-20 | Nokia Technologies Oy | An apparatus, a method and a computer program for image sequence coding and decoding |
WO2016097482A1 (en) * | 2014-12-19 | 2016-06-23 | Nokia Technologies Oy | Media encapsulating and decapsulating |
GB2535453A (en) * | 2015-02-10 | 2016-08-24 | Canon Kk | Method, device, and computer program for encapsulating hevc layered media data |
US9965824B2 (en) * | 2015-04-23 | 2018-05-08 | Google Llc | Architecture for high performance, power efficient, programmable image processing |
US9756268B2 (en) * | 2015-04-23 | 2017-09-05 | Google Inc. | Line buffer unit for image processor |
GB2539461B (en) | 2015-06-16 | 2020-01-08 | Canon Kk | Image data encapsulation |
-
2015
- 2015-06-16 GB GB1510608.1A patent/GB2539461B/en active Active
-
2016
- 2016-06-08 CA CA2988476A patent/CA2988476A1/en active Pending
- 2016-06-08 ES ES16727713T patent/ES2943233T3/es active Active
- 2016-06-08 CN CN202010989317.8A patent/CN112153386B/zh active Active
- 2016-06-08 KR KR1020197031439A patent/KR102166877B1/ko active IP Right Grant
- 2016-06-08 KR KR1020187000514A patent/KR102038783B1/ko active IP Right Grant
- 2016-06-08 CA CA3192369A patent/CA3192369A1/en active Pending
- 2016-06-08 BR BR112017025498A patent/BR112017025498A2/pt unknown
- 2016-06-08 RU RU2019115882A patent/RU2719368C2/ru active
- 2016-06-08 SG SG10202002513XA patent/SG10202002513XA/en unknown
- 2016-06-08 RU RU2018101240A patent/RU2690167C1/ru active
- 2016-06-08 US US15/574,119 patent/US10645379B2/en active Active
- 2016-06-08 EP EP16727713.6A patent/EP3311585B1/en active Active
- 2016-06-08 CN CN201680035232.8A patent/CN107750462B/zh active Active
- 2016-06-08 EP EP22199029.4A patent/EP4135336A1/en active Pending
- 2016-06-08 JP JP2017564598A patent/JP2018522469A/ja active Pending
- 2016-06-08 MX MX2017015444A patent/MX2017015444A/es unknown
- 2016-06-08 WO PCT/EP2016/063035 patent/WO2016202664A1/en active Application Filing
-
2017
- 2017-11-30 MX MX2021002494A patent/MX2021002494A/es unknown
-
2020
- 2020-03-26 US US16/831,536 patent/US11985302B2/en active Active
- 2020-09-28 JP JP2020161802A patent/JP7039668B2/ja active Active
-
2021
- 2021-11-01 JP JP2021178907A patent/JP7293312B2/ja active Active
-
2023
- 2023-06-08 JP JP2023094529A patent/JP2023120249A/ja active Pending
-
2024
- 2024-02-07 US US18/435,807 patent/US20240179297A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014111547A1 (en) | 2013-01-18 | 2014-07-24 | Canon Kabushiki Kaisha | Method, device, and computer program for encapsulating partitioned timed media data |
WO2015008686A1 (ja) | 2013-07-19 | 2015-01-22 | ソニー株式会社 | ファイル生成装置および方法、並びにコンテンツ再生装置および方法 |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7039668B2 (ja) | 画像データカプセル化 | |
JP7098786B2 (ja) | 画像データのカプセル化 | |
US10567784B2 (en) | Description of image composition with HEVC still image file format | |
US20170134756A1 (en) | Image data encapsulation with referenced description information | |
GB2573939A (en) | Image data encapsulation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201012 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201211 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210729 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210831 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211101 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220309 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7039668 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |