JP5661218B2 - 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 - Google Patents
高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 Download PDFInfo
- Publication number
- JP5661218B2 JP5661218B2 JP2014505400A JP2014505400A JP5661218B2 JP 5661218 B2 JP5661218 B2 JP 5661218B2 JP 2014505400 A JP2014505400 A JP 2014505400A JP 2014505400 A JP2014505400 A JP 2014505400A JP 5661218 B2 JP5661218 B2 JP 5661218B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- hdr
- value
- color
- luminance ratio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 147
- 230000004048 modification Effects 0.000 claims description 44
- 238000012986 modification Methods 0.000 claims description 44
- 238000012545 processing Methods 0.000 claims description 30
- 238000013507 mapping Methods 0.000 claims description 24
- 230000008569 process Effects 0.000 claims description 24
- 238000012937 correction Methods 0.000 claims description 23
- 238000013139 quantization Methods 0.000 claims description 14
- 238000006243 chemical reaction Methods 0.000 claims description 12
- 238000007667 floating Methods 0.000 claims description 9
- 238000007781 pre-processing Methods 0.000 claims description 8
- 230000009466 transformation Effects 0.000 claims description 8
- 230000036541 health Effects 0.000 claims description 4
- 230000002441 reversible effect Effects 0.000 claims description 4
- 230000009471 action Effects 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 16
- 239000011159 matrix material Substances 0.000 description 12
- 230000005540 biological transmission Effects 0.000 description 7
- 238000013459 approach Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000009877 rendering Methods 0.000 description 5
- 238000000844 transformation Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 239000002131 composite material Substances 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000003550 marker Substances 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000007935 neutral effect Effects 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 229920006395 saturated elastomer Polymers 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000002845 discoloration Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000003278 mimic effect Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
- 238000012797 qualification Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- WFKWXMTUELFFGS-UHFFFAOYSA-N tungsten Chemical compound [W] WFKWXMTUELFFGS-UHFFFAOYSA-N 0.000 description 1
- 229910052721 tungsten Inorganic materials 0.000 description 1
- 239000010937 tungsten Substances 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/41—Bandwidth or redundancy reduction
- H04N1/411—Bandwidth or redundancy reduction for the transmission or storage or reproduction of two-tone pictures, e.g. black and white pictures
- H04N1/413—Systems or arrangements allowing the picture to be reproduced without loss or modification of picture-information
- H04N1/417—Systems or arrangements allowing the picture to be reproduced without loss or modification of picture-information using predictive or differential encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/407—Control or modification of tonal gradation or of extreme levels, e.g. background level
- H04N1/4072—Control or modification of tonal gradation or of extreme levels, e.g. background level dependent on the contents of the original
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/6058—Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut
- H04N1/6063—Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut dependent on the contents of the image to be reproduced
- H04N1/6066—Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut dependent on the contents of the image to be reproduced dependent on the gamut of the image to be reproduced
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/85—Camera processing pipelines; Components thereof for processing colour signals for matrixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/67—Circuits for processing colour signals for matrixing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Color Image Communication Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Processing Of Color Television Signals (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Color Television Image Signal Generators (AREA)
- Studio Devices (AREA)
- Picture Signal Circuits (AREA)
Description
本願は、2011年4月15日に出願された米国仮特許出願第61/476,174号および2011年10月28日に出願された米国特許仮出願第61/552,868号の優先権を主張する。両出願はここに参照によりその全体において組み込まれる。
本発明は、概括的には画像処理に、詳細には高ダイナミックレンジ画像のエンコード、デコードおよび表現に関する。
1.概観
2.HDR画像エンコーダ
3.ホワイトバランス補正
4.HDR画像デコーダ
5.例示的なプロセス・フロー
6.実装機構――ハードウェアの概観
7.等価物、拡張、代替その他。
この概観は、本発明の可能な実施形態のいくつかの側面の基本的な記述を呈示する。この概観は、可能な実施形態の諸側面の包括的または網羅的な要約ではないことを注意しておくべきである。さらに、この概観は、可能な実施形態の特に重要な諸側面または諸要素を特定するものとも、個別的には該可能な実施形態の、一般には本発明のいかなる範囲を確定するものとも理解されることは意図されていないことを注意しておくべきである。この概観は、単に例示的な可能な実施形態に関係するいくつかの概念を凝縮され簡略化された形式で呈示するものであり、単に、後述する例示的な可能な諸実施形態のより詳細な記述に対する概念的な序章として理解されるべきである。
図1は、本発明のいくつかの可能な実施形態に基づく例示的なHDR画像エンコーダを示している。いくつかの可能な実施形態では、HDR画像エンコーダは、一つまたは複数のコンピューティング装置によって実装され、入力HDR画像を、標準に基づくまたは独自の画像フォーマットにおけるTM画像およびHDR再構成データにエンコードするための画像処理技法を実装するソフトウェアおよび/またはハードウェア・コンポーネントをもって構成されている。
しばしば、ユーザーはデジタル・カメラで画像を取り込み、取り込まれた画像から導出されるHDR画像をレンダリングすることが望まれる。画像を取り込むカメラのカメラRAWフォーマットがわかっていたとすると、高いクロマ忠実度でHDR画像を生成することが可能であることがありうる。しかしながら、事後ホワイトバランス処理は、少なくとも二つの理由のため、標準的なJPEGを使って正しく実行するのは難しいことがある。(1)レンダリングされる色空間からセンサー色に戻す厳密なマッピングがわかっていない、(2)異なる色チャネルに対してクランピングが不均等に適用されている。もとのセンサー値に線形に関係する色空間にどのようにしてたどり着くかを知ることなく、ホワイトバランス補正はうまくできない。
JPEG-HDRは、高ダイナミックレンジ画像の格納を可能にするためにJPEG規格の拡張として作成された。JPEG-HDRについての既存のフォーマットでは、JPEG-HDRは事実上、ホワイトバランス補正に影響する二つの画像チャネル――つまり、基本層の(トーンマッピングされた)JPEG画像と、較正された線形色空間を復元するために利用されうる残差層――をもち、それによりカメラRAWの利点の多くを与える。追加的なダイナミックレンジは、実のところ、システムに、色値を、基本層においてレンダリングされるものを超えて補正することを許容する。しかしながら、HDRについてさえしばしばそうであるように、取り込まれたレンジがシーン値のフル・レンジをカバーしない場合には、いくらかの追加的な情報を加えることが望ましいことがある。
図2は、本発明のいくつかの可能な実施形態に基づく例示的なHDR画像デコーダを示している。ある例示的な実施形態では、HDR画像デコーダは、一つまたは複数のコンピューティング装置によって実装され、トーンマッピングされたベースRGB画像およびHDR再構成データを含むHDR画像データ(図2ではHDR 202として表されている)をデコードするための画像処理技法を実装するソフトウェアおよび/またはハードウェア・コンポーネントをもって構成されている。ある例示的な実施形態では、HDR再構成データは、ルミナンス比値、CbおよびCr残差値および上記データに関係するパラメータおよび補助データをいう。ある例示的な実施形態では、HDR画像デコーダによってデコードされる画像データは、ある画像フォーマット(たとえばJPEG-HDR)での画像ファイル中にある。
図3のAは、本発明のある可能な実施形態に基づく例示的なプロセス・フローを示している。いくつかの可能な実施形態では、(たとえば図1に示されるような)HDR画像エンコーダのような一つまたは複数のコンピューティング装置がこのプロセス・フローを実行してもよい。HDR画像エンコーダは、JPEG画像エンコーダのような標準に基づく画像エンコーダに一つまたは複数の新たな処理ブロックを加えることによって、および/または一つまたは複数の既存の処理ブロックを修正することによって実装されてもよい。ブロック302では、HDR画像エンコーダは、高ダイナミックレンジ(HDR)画像を受け取る。ある例示的な実施形態では、HDR画像は、固定小数点画像または浮動小数点画像の一方である。ある例示的な実施形態では、HDR画像は、JPEG、JPEG-2000、MPEG、AVI、TIFF、BMP、GIFFまたは他の画像フォーマットの一つでエンコードされている。
ある実施形態によれば、本稿に記載される技法は、一つまたは複数の特殊目的コンピューティング装置によって実装される。特殊目的コンピューティング装置は、本技法を実行するよう固定構成とされていてもよいし、あるいは一つまたは複数の特定用途向け集積回路(ASIC)またはフィールド・プログラマブル・ゲート・アレイ(FPGA)のような、本技法を実行するよう持続的にプログラムされたデジタル電子デバイスを含んでいてもよいし、あるいはファームウェア、メモリ、他の記憶または組み合わせにおけるプログラム命令に従って本技法を実行するようプログラムされた一つまたは複数の汎用ハードウェア・プロセッサを含んでいてもよい。そのような特殊目的コンピューティング装置は、カスタムの固定構成論理、ASICまたはFPGAをカスタムのプログラミングと組み合わせて本技法を達成してもよい。特殊目的コンピューティング装置はデスクトップ・コンピュータ・システム、ポータブル・コンピュータ・システム、ハンドヘルド装置、ネットワーキング装置または本技法を実装するために固定構成および/またはプログラム論理を組み込んでいる他の任意の装置であってもよい。
以上の明細書では、本発明の可能な諸実施形態について、実装によって変わりうる数多くの個別的詳細に言及しつつ述べてきた。このように、何が本発明であるか、何が出願人によって本発明であると意図されているかの唯一にして排他的な指標は、この出願に対して付与される特許の請求項の、その後の訂正があればそれも含めてかかる請求項が特許された特定の形のものである。かかる請求項に含まれる用語について本稿で明示的に記載される定義があったとすればそれは請求項において使用される当該用語の意味を支配する。よって、請求項に明示的に記載されていない限定、要素、属性、特徴、利点もしくは特性は、いかなる仕方であれかかる請求項の範囲を限定すべきではない。よって、明細書および図面は制約する意味ではなく例示的な意味で見なされるべきものである。
いくつかの態様を記載しておく。
〔態様1〕
高ダイナミックレンジ(HDR)画像を受領する段階と;
HDR画像に基づいて生成されたトーンマッピングされた(TM)画像を受領する段階であって、前記TM画像は、前記TM画像とルミナンス比画像からでは回復できない一つまたは複数の色改変を含む、段階と;
前記HDR画像のルミナンス値を、個々のピクセルごとに前記TM画像のルミナンス値で割ることによって、個々のピクセルごとにルミナンス比値を計算する段階と;
前記ルミナンス比値を前記HDR画像に適用して再マッピングされた画像を生成する段階と;
前記再マッピングされた画像および前記TM画像に基づいて、ある色空間の色チャネルにおける残差値を決定する段階と;
HDR再構成データとともに前記TM画像を出力する段階であって、前記HDR再構成データは、前記ルミナンス比値および前記残差値から導出される、段階とを含む、
方法。
〔態様2〕
前記再マッピングされた画像および前記TM画像の少なくとも一方を異なる色空間から前記残差の前記色空間に変換する段階をさらに含む、態様1記載の方法。
〔態様3〕
前記色空間がYCbCr色空間であり、前記色空間の前記色チャネルがCb色チャネルおよびCr色チャネルを含む、態様1記載の方法。
〔態様4〕
前記色空間の前記色チャネルにおける残差値が、前記色チャネルにおける、前記再マッピングされた画像から導出された第一のピクセル値と、前記色チャネルにおける、前記TM画像から導出された第二のピクセル値との間の差として計算される、態様3記載の方法。
〔態様5〕
前記TM画像中の前記一つまたは複数の色改変の少なくとも一つが、一つまたは複数のピクセルにおけるクリッピングまたは色相改変の一方によって引き起こされる、態様1記載の方法。
〔態様6〕
前記HDR再構成データが、前記ルミナンス比値および前記色空間の前記色チャネルにおける前記残差値から導出される量子化された値をもつ残差画像を含む、態様1記載の方法。
〔態様7〕
前記HDR再構成データが、前記量子化された値の範囲を指定するパラメータをさらに含む、態様6記載の方法。
〔態様8〕
前記HDR再構成データが、画像ファイルのアプリケーション・セグメントに格納され、前記TM画像は前記画像ファイルにおけるベース画像となる、態様1記載の方法。
〔態様9〕
前記画像ファイルがJPEG-HDRフォーマットである、態様1記載の方法。
〔態様10〕
前記HDR画像に対して一つまたは複数の健常性チェックを実行する段階をさらに含む、態様1記載の方法。
〔態様11〕
前記TM画像中の任意の数のピクセルに対する、任意のトーンマッピング処理器を用いた任意のトーンマッピング処理および/または任意の色改変を許容することをさらに含む、態様1記載の方法。
〔態様12〕
前記TM画像中のゼロ、一または複数の色チャネル・ゼロ値をゼロまたは閾値より小さな値で置き換える段階をさらに含む、態様1記載の方法。
〔態様13〕
前記HDR画像、前記TM画像または前記再マッピングされた画像のうちの少なくとも一つに色空間変換を適用する段階をさらに含む、態様1記載の方法。
〔態様14〕
前記TM画像と前記再マッピングされた画像との間のルミナンス残差値がみなゼロである、態様1記載の方法。
〔態様15〕
前記HDR画像が固定小数点画像または浮動小数点画像の一方である、態様1記載の方法。
〔態様16〕
前記HDR画像に対するトーンマッピング処理器によって要求される前処理動作を実行する段階をさらに含み、前記前処理動作は、色空間変換、ガンマ・エンコード、ガンマ・デコード、ダウンサンプリングまたはアップサンプリングのうちの一つである、態様1記載の方法。
〔態様17〕
前記TM画像において実行されているガンマ・エンコードに関係する情報を受領し、前記色空間の色チャネルにおける前記残差値を決定する前に、前記TM画像に対してガンマ・エンコードの逆処理を実行して中間TM画像を生成することをさらに含む、態様1記載の方法。
〔態様18〕
前記HDR画像がJPEG、JPEG-2000、MPEG、AVI、TIFF、BMP、GIFFまたは他の画像フォーマットのうちの一つでエンコードされる、態様1記載の方法。
〔態様19〕
トーンマッピングされた(TM)ベース画像およびHDR再構成データを含む画像ファイルをパースする段階であって、前記HDR再構成データは、量子化されたルミナンス比値および色空間の色チャネルにおける量子化された残差値を含み、前記TMベース画像は、該TMベース画像とルミナンス比画像からでは復元できない一つまたは複数の色改変を含んでいる、段階と;
前記量子化されたルミナンス比値および前記色空間の前記色チャネルにおける前記量子化された残差値に関係する量子化パラメータを抽出する段階と;
少なくとも部分的に前記量子化パラメータに基づいて、前記量子化されたルミナンス比値および前記量子化された残差値をルミナンス比値および前記色空間の前記色チャネルにおける残差値に変換する段階と;
前記TMベース画像と、前記ルミナンス比値および前記色空間の前記色チャネルにおける残差値とを使ってHDR画像を再構成する段階とを含む、
方法。
〔態様20〕
前記画像ファイルが標準に基づく画像デコーダを用いてパースされる、態様19記載の方法。
〔態様21〕
前記量子化されたルミナンス比および前記量子化された残差値が残差画像中に格納されており、前記残差画像および前記TMベース画像が共通の手順を使って量子化解除および圧縮解除される、態様19記載の方法。
〔態様22〕
前記TMベース画像が、任意の数のピクセルに対する、任意のトーンマッピング処理器を用いた任意のトーンマッピング処理および/または任意の色改変の結果を含む、態様19記載の方法。
〔態様23〕
前記HDR画像が固定小数点画像または浮動小数点画像の一方である、態様19記載の方法。
〔態様24〕
色空間変換、ガンマ・エンコード、ガンマ・デコード、ダウンサンプリングまたはアップサンプリングのうちのあるアクションを実行する段階をさらに含む、態様19記載の方法。
〔態様25〕
前記画像ファイルがJPEG、JPEG-2000、MPEG、AVI、TIFF、BMP、GIFFまたは他の画像フォーマットのうちの一つである、態様19記載の方法。
〔態様26〕
トーンマッピングされた(TM)ベース画像およびHDR再構成データを画像ファイル中にエンコードする段階を含む方法であって、前記HDR再構成データは量子化されたルミナンス比値およびある色空間の色チャネルにおける量子化された残差値を含み、前記TMベース画像は、前記TMベース画像とルミナンス比画像からでは復元できない一つまたは複数の色改変を含む、
方法。
〔態様27〕
トーンマッピングされた(TM)画像およびHDR再構成データを含む画像ファイルを伝送する段階を含む方法であって、前記HDR再構成データは量子化されたルミナンス比値およびある色空間の色チャネルにおける量子化された残差値を含み、前記TMベース画像は、前記TMベース画像とルミナンス比画像からでは復元できない一つまたは複数の色改変を含む、
方法。
〔態様28〕
画像ファイルをトーンマッピングされた(TM)画像およびHDR再構成データにデコードする段階を含む方法であって、前記HDR再構成データは量子化されたルミナンス比値およびある色空間の色チャネルにおける量子化された残差値を含み、前記TMベース画像は、前記TMベース画像とルミナンス比画像からでは復元できない一つまたは複数の色改変を含む、
方法。
〔態様29〕
前記画像ファイルが、アプリケーション・セグメント内に色残差値を格納することをサポートするJPEG-HDRフォーマットである、態様25ないし27のうちいずれか一項記載の方法。
〔態様30〕
態様1、19、26、27または28のうちいずれか一項記載の方法を実行するよう構成された、プロセッサを有する装置。
〔態様31〕
一つまたは複数のプロセッサによって実行されたときに、態様1、19、26、27または28のうちいずれか一項記載の方法の実行を引き起こすソフトウェア命令を含むコンピュータ可読記憶媒体。
〔態様32〕
初期画像データに対してホワイトバランス補正を実行する方法であって、前記初期画像データはトーンマッピングされた(TM)画像データおよび残差画像データを含み、前記残差画像データはさらに高ダイナミックレンジ(HDR)画像データと、実効線形センサー値およびホワイトバランス乗数を含み、当該方法は:
前記残差画像データから前記実効線形センサー値および前記ホワイトバランス乗数を復元する段階と;
前記実効線形センサー値および前記初期画像データからセンサー色空間値を生成して第一の中間画像データを形成する段階と;
各色チャネルについて、前記第一の中間画像データにホワイトバランス乗数を適用して第二の中間画像データを生成する段階と;
前記初期画像データから利用可能なHDR画像データがなければ、第二の中間画像データを、最大色チャネル値の最小にクランピングして第三の中間画像データを形成する段階と;
クランピングが実行されなかった場合、前記第二の中間画像データを目標モニタ色空間に変換して最終的な画像データを形成する段階と;
クランピングが実行された場合、前記第三の中間画像データを目標モニタ色空間に変換して最終的な画像データを形成する段階とを含む、
方法。
〔態様33〕
前記初期画像データがJPEG-HDRフォーマットでフォーマットされている、態様32記載の方法。
〔態様34〕
前記初期画像データが、RGB色チャネルのそれぞれにおいて取り込まれるHDRについての上センサー・レンジを含む、態様33記載の方法。
〔態様35〕
前記上センサー・レンジが、ホワイトバランス乗数および行列を含み、前記行列はさらに実効線形センサー値を含む、態様34記載の方法。
〔態様36〕
前記最終的な画像データは画像エンコーダのHDR経路に入力される、態様35記載の方法。
〔態様37〕
初期画像データを処理する方法であって;
前記初期画像データを入力する段階と;
センサー色空間データおよびホワイトバランス乗数を入力する段階と;
前記画像データについて新たな白色点が想定される場合、新たなホワイトバランス乗数を計算して現在のホワイトバランス乗数を生成する段階と;
前記画像データ中の各ピクセルについて、前記初期画像データを、前記センサー色空間に戻して第一の中間画像データにする変換をする段階と;
前記中間画像データ中の各色チャネルについて、前記現在のホワイトバランス乗数を適用して第二の中間画像データを生成する段階と;
前記第二の中間画像データを、すべての色チャネル最大値の最小値量にクランピングして第三の中間画像データを生成する段階と;
前記第三の中間画像データを所望されるモニタ色空間に変換して第四の中間画像データを生成する段階とを含む、
方法。
〔態様38〕
前記第四の中間画像データがトーンマッピング処理器に入力される、態様37記載の方法。
〔態様39〕
前記初期画像データが、画像取り込み装置によって取り込まれ、さらに、前記画像取り込み装置のカメラRAWデータが利用可能でない、態様37記載の方法。
〔態様40〕
前記画像取り込み装置が複数の色チャネルにおいて画像データを取り込むことができ、さらに、少なくとも二つの前記色チャネルが、黒から白への勾配に沿った異なるルミナンス値において飽和する、態様39記載の方法。
〔態様41〕
高ダイナミックレンジ(HDR)画像を受領する段階と;
前記HDRデータに対してホワイトバランス補正を処理する段階と;
前記HDR画像に基づいて生成されたトーンマッピングされた(TM)画像を受領する段階であって、前記TM画像は、前記TM画像とルミナンス比画像からでは回復できない一つまたは複数の色改変を含む、段階と;
前記HDR画像のルミナンス値を、個々のピクセルごとに前記TM画像のルミナンス値で割ることによって、個々のピクセルごとにルミナンス比値を計算する段階と;
前記ルミナンス比値を前記HDR画像に適用して再マッピングされた画像を生成する段階と;
前記再マッピングされた画像および前記TM画像に基づいて、ある色空間の色チャネルにおける残差値を決定する段階と;
HDR再構成データとともに前記TM画像を出力する段階であって、前記HDR再構成データは、前記ルミナンス比値および前記残差値から導出される、段階とを含む、
方法。
〔態様42〕
トーンマッピングされた(TM)ベース画像およびHDR再構成データを含む画像データを含む画像ファイルをパースする段階であって、前記HDR再構成データは、量子化されたルミナンス比値、色空間の色チャネルにおける量子化された残差値、ホワイトバランス乗数および実効線形センサー値を含み、前記TMベース画像は、該TMベース画像とルミナンス比画像からでは復元できない一つまたは複数の色改変を含んでいる、段階と;
前記量子化されたルミナンス比値および前記色空間の前記色チャネルにおける前記量子化された残差値に関係する量子化パラメータを抽出する段階と;
少なくとも部分的に前記ホワイトバランス乗数および実効線形センサー値に基づいて、前記画像データのホワイトバランスを補正する段階と;
少なくとも部分的に前記量子化パラメータに基づいて、前記量子化されたルミナンス比値および前記量子化された残差値をルミナンス比値および前記色空間の前記色チャネルにおける残差値に変換する段階と;
前記TMベース画像と、前記ルミナンス比値および前記色空間の前記色チャネルにおける残差値とを使ってHDR画像を再構成する段階とを含む、
方法。
〔態様43〕
態様32、37、41または42のうちいずれか一項記載の方法を実行するよう構成された、プロセッサを有する装置。
〔態様44〕
一つまたは複数のプロセッサによって実行されたときに、態様32、37、41または42のうちいずれか一項記載の方法の実行を引き起こすソフトウェア命令を含む、コンピュータ可読記憶媒体。
Claims (30)
- 高ダイナミックレンジ(HDR)画像を受領する段階と;
HDR画像に基づいて生成されたトーンマッピングされた(TM)画像を受領する段階であって、前記TM画像は、前記TM画像とルミナンス比画像からでは回復できない一つまたは複数の色改変を含む、段階と;
前記HDR画像のルミナンス値を、個々のピクセルごとに前記TM画像のルミナンス値で割ることによって、個々のピクセルごとに前記ルミナンス比画像についてのルミナンス比値を計算する段階と;
前記ルミナンス比値を前記HDR画像に適用して再マッピングされた画像を生成する段階と;
前記再マッピングされた画像および前記TM画像に基づいて、ある色空間の色チャネルにおける残差値を決定する段階と;
HDR再構成データとともに前記TM画像を出力する段階であって、前記HDR再構成データは、前記ルミナンス比値および前記残差値から導出される、段階とを含んでおり、
前記色空間の前記色チャネルにおける残差値が、前記色チャネルにおける、前記再マッピングされた画像から導出された第一のピクセル値と、前記色チャネルにおける、前記TM画像から導出された第二のピクセル値との間の差として計算される、
方法。 - 前記再マッピングされた画像および前記TM画像の少なくとも一方を異なる色空間から前記残差の前記色空間に変換する段階をさらに含む、請求項1記載の方法。
- 前記色空間がYCbCr色空間であり、前記色空間の前記色チャネルがCb色チャネルおよびCr色チャネルを含む、請求項1記載の方法。
- 前記TM画像中の前記一つまたは複数の色改変の少なくとも一つが、一つまたは複数のピクセルにおけるクリッピングまたは色相改変の一方によって引き起こされる、請求項1記載の方法。
- 高ダイナミックレンジ(HDR)画像を受領する段階と;
HDR画像に基づいて生成されたトーンマッピングされた(TM)画像を受領する段階であって、前記TM画像は、前記TM画像とルミナンス比画像からでは回復できない一つまたは複数の色改変を含む、段階と;
前記HDR画像のルミナンス値を、個々のピクセルごとに前記TM画像のルミナンス値で割ることによって、個々のピクセルごとに前記ルミナンス比画像についてのルミナンス比値を計算する段階と;
前記ルミナンス比値を前記HDR画像に適用して再マッピングされた画像を生成する段階と;
前記再マッピングされた画像および前記TM画像に基づいて、ある色空間の色チャネルにおける残差値を決定する段階と;
HDR再構成データとともに前記TM画像を出力する段階であって、前記HDR再構成データは、前記ルミナンス比値および前記残差値から導出される、段階とを含んでおり、
前記HDR再構成データが、前記ルミナンス比値および前記色空間の前記色チャネルにおける前記残差値から導出される量子化された値をもつ残差画像を含む、
方法。 - 前記HDR再構成データが、前記量子化された値の範囲を指定するパラメータをさらに含む、請求項5記載の方法。
- 前記HDR再構成データが、画像ファイルのアプリケーション・セグメントに格納され、前記TM画像は前記画像ファイルにおけるベース画像となる、請求項1記載の方法。
- 前記画像ファイルがJPEG-HDRフォーマットである、請求項1記載の方法。
- 前記HDR画像に対して一つまたは複数の健常性チェックを実行する段階をさらに含む、請求項1記載の方法。
- 前記一つまたは複数の色改変が前記TM画像中の一つまたは複数のピクセルに対して適用されている、請求項1記載の方法。
- 前記TM画像中のゼロ、一または複数の色チャネル・ゼロ値をゼロまたは閾値より小さな値で置き換える段階をさらに含む、請求項1記載の方法。
- 前記HDR画像、前記TM画像または前記再マッピングされた画像のうちの少なくとも一つに色空間変換を適用する段階をさらに含む、請求項1記載の方法。
- 前記TM画像と前記再マッピングされた画像との間のルミナンス残差値がみなゼロである、請求項1記載の方法。
- 前記HDR画像が固定小数点画像または浮動小数点画像の一方である、請求項1記載の方法。
- 前記HDR画像に対するトーンマッピング処理器によって要求される前処理動作を実行する段階をさらに含み、前記前処理動作は、色空間変換、ガンマ・エンコード、ガンマ・デコード、ダウンサンプリングまたはアップサンプリングのうちの一つである、請求項1記載の方法。
- 前記TM画像において実行されているガンマ・エンコードに関係する情報を受領し、前記色空間の色チャネルにおける前記残差値を決定する前に、前記TM画像に対してガンマ・エンコードの逆処理を実行して中間TM画像を生成することをさらに含む、請求項1記載の方法。
- 前記HDR画像がJPEG、JPEG-2000、MPEG、AVI、TIFF、BMP、GIFFまたは他の画像フォーマットのうちの一つでエンコードされる、請求項1記載の方法。
- トーンマッピングされた(TM)ベース画像およびHDR再構成データを含む画像ファイルを受領する段階であって、前記HDR再構成データは、量子化されたルミナンス比値および色空間の色チャネルにおける量子化された残差値を含み、前記TMベース画像は、該TMベース画像と個々のピクセルについて前記ルミナンス比値を有するルミナンス比画像からでは復元できない一つまたは複数の色改変を含んでいる、段階と;
前記量子化されたルミナンス比値および前記色空間の前記色チャネルにおける前記量子化された残差値に関係する量子化パラメータを抽出する段階と;
少なくとも部分的に前記量子化パラメータに基づいて、前記量子化されたルミナンス比値および前記量子化された残差値をルミナンス比値および前記色空間の前記色チャネルにおける残差値に変換する段階と;
前記TMベース画像と、前記ルミナンス比値および前記色空間の前記色チャネルにおける残差値とを使ってHDR画像を再構成する段階とを含む、
方法。 - 前記画像ファイルが標準に基づく画像デコーダを用いて構成要素に分解される、請求項18記載の方法。
- 前記量子化されたルミナンス比および前記量子化された残差値が残差画像中に格納されており、前記残差画像および前記TMベース画像が共通の手順を使って量子化解除および圧縮解除される、請求項18記載の方法。
- 前記TMベース画像が、任意の数のピクセルに対する、任意のトーンマッピング処理器を用いた任意のトーンマッピング処理および/または任意の色改変の結果を含む、請求項18記載の方法。
- 前記HDR画像が固定小数点画像または浮動小数点画像の一方である、請求項18記載の方法。
- 色空間変換、ガンマ・エンコード、ガンマ・デコード、ダウンサンプリングまたはアップサンプリングのうちのあるアクションを実行する段階をさらに含む、請求項18記載の方法。
- 前記画像ファイルがJPEG、JPEG-2000、MPEG、AVI、TIFF、BMP、GIFFまたは他の画像フォーマットのうちの一つである、請求項18記載の方法。
- 請求項1または18記載の方法を実行するよう構成された、プロセッサを有する装置。
- 一つまたは複数のプロセッサによって実行されたときに、請求項1または18記載の方法の実行を引き起こすソフトウェア命令を含むコンピュータ可読記憶媒体。
- 高ダイナミックレンジ(HDR)画像を受領する段階と;
前記HDRデータに対してホワイトバランス補正を処理する段階と;
前記HDR画像に基づいて生成されたトーンマッピングされた(TM)画像を受領する段階であって、前記TM画像は、前記TM画像とルミナンス比画像からでは回復できない一つまたは複数の色改変を含む、段階と;
前記HDR画像のルミナンス値を、個々のピクセルごとに前記TM画像のルミナンス値で割ることによって、個々のピクセルごとに前記ルミナンス比画像についてのルミナンス比値を計算する段階と;
前記ルミナンス比値を前記HDR画像に適用して再マッピングされた画像を生成する段階と;
前記再マッピングされた画像および前記TM画像に基づいて、ある色空間の色チャネルにおける残差値を決定する段階と;
HDR再構成データとともに前記TM画像を出力する段階であって、前記HDR再構成データは、前記ルミナンス比値および前記残差値から導出される、段階とを含んでおり、
前記色空間の前記色チャネルにおける残差値が、前記色チャネルにおける、前記再マッピングされた画像から導出された第一のピクセル値と、前記色チャネルにおける、前記TM画像から導出された第二のピクセル値との間の差として計算される、
方法。 - トーンマッピングされた(TM)ベース画像およびHDR再構成データを含む画像データを含む画像ファイルを受領する段階であって、前記HDR再構成データは、量子化されたルミナンス比値、色空間の色チャネルにおける量子化された残差値、ホワイトバランス乗数および実効線形センサー値を含み、前記TMベース画像は、該TMベース画像と個々のピクセルについて前記ルミナンス比値を有するルミナンス比画像からでは復元できない一つまたは複数の色改変を含んでいる、段階と;
前記量子化されたルミナンス比値および前記色空間の前記色チャネルにおける前記量子化された残差値に関係する量子化パラメータを抽出する段階と;
少なくとも部分的に前記ホワイトバランス乗数および実効線形センサー値に基づいて、前記画像データのホワイトバランスを補正する段階と;
少なくとも部分的に前記量子化パラメータに基づいて、前記量子化されたルミナンス比値および前記量子化された残差値をルミナンス比値および前記色空間の前記色チャネルにおける残差値に変換する段階と;
前記TMベース画像と、前記ルミナンス比値および前記色空間の前記色チャネルにおける残差値とを使ってHDR画像を再構成する段階とを含む、
方法。 - 請求項27または28記載の方法を実行するよう構成された、プロセッサを有する装置。
- 一つまたは複数のプロセッサによって実行されたときに、請求項27または28記載の方法の実行を引き起こすソフトウェア命令を含む、コンピュータ可読記憶媒体。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161476174P | 2011-04-15 | 2011-04-15 | |
US61/476,174 | 2011-04-15 | ||
US201161552868P | 2011-10-28 | 2011-10-28 | |
US61/552,868 | 2011-10-28 | ||
PCT/US2012/033795 WO2012142589A2 (en) | 2011-04-15 | 2012-04-16 | Encoding, decoding, and representing high dynamic range images |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014215904A Division JP5893708B2 (ja) | 2011-04-15 | 2014-10-23 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 |
JP2014243655A Division JP5762615B2 (ja) | 2011-04-15 | 2014-12-02 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014510988A JP2014510988A (ja) | 2014-05-01 |
JP5661218B2 true JP5661218B2 (ja) | 2015-01-28 |
Family
ID=47010032
Family Applications (5)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014505400A Active JP5661218B2 (ja) | 2011-04-15 | 2012-04-16 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 |
JP2014215904A Active JP5893708B2 (ja) | 2011-04-15 | 2014-10-23 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 |
JP2014243655A Active JP5762615B2 (ja) | 2011-04-15 | 2014-12-02 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法 |
JP2016033134A Active JP6058183B2 (ja) | 2011-04-15 | 2016-02-24 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 |
JP2016236496A Active JP6469631B2 (ja) | 2011-04-15 | 2016-12-06 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 |
Family Applications After (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014215904A Active JP5893708B2 (ja) | 2011-04-15 | 2014-10-23 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 |
JP2014243655A Active JP5762615B2 (ja) | 2011-04-15 | 2014-12-02 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法 |
JP2016033134A Active JP6058183B2 (ja) | 2011-04-15 | 2016-02-24 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 |
JP2016236496A Active JP6469631B2 (ja) | 2011-04-15 | 2016-12-06 | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 |
Country Status (13)
Country | Link |
---|---|
US (1) | US8248486B1 (ja) |
EP (3) | EP3376749B1 (ja) |
JP (5) | JP5661218B2 (ja) |
KR (9) | KR101939135B1 (ja) |
CN (2) | CN103503429B (ja) |
BR (1) | BR112013026191B1 (ja) |
CA (2) | CA3000434C (ja) |
ES (1) | ES2686980T3 (ja) |
HK (1) | HK1188354A1 (ja) |
IL (3) | IL228761A (ja) |
RU (2) | RU2640717C1 (ja) |
TW (5) | TWI513327B (ja) |
WO (1) | WO2012142589A2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230169689A1 (en) * | 2021-11-30 | 2023-06-01 | Texas Instruments Incorporated | Suppression of clipping artifacts from color conversion |
Families Citing this family (82)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5383360B2 (ja) * | 2009-07-15 | 2014-01-08 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
TWI513327B (zh) | 2011-04-15 | 2015-12-11 | Dolby Lab Licensing Corp | 高動態範圍影像的編碼、解碼及表示 |
US8891863B2 (en) * | 2011-06-13 | 2014-11-18 | Dolby Laboratories Licensing Corporation | High dynamic range, backwards-compatible, digital cinema |
KR101845231B1 (ko) * | 2011-06-14 | 2018-04-04 | 삼성전자주식회사 | 영상 처리 장치 및 방법 |
TWI523500B (zh) * | 2012-06-29 | 2016-02-21 | 私立淡江大學 | 影像的動態範圍壓縮方法與影像處理裝置 |
US9489706B2 (en) * | 2012-07-02 | 2016-11-08 | Qualcomm Technologies, Inc. | Device and algorithm for capturing high dynamic range (HDR) video |
CN105787909B (zh) | 2012-08-08 | 2018-07-20 | 杜比实验室特许公司 | 用于高动态范围图像的图像处理 |
RU2633128C2 (ru) * | 2013-02-21 | 2017-10-11 | Конинклейке Филипс Н.В. | Улучшенные способы и устройства кодирования и декодирования hdr изображения |
TWI711310B (zh) | 2013-06-21 | 2020-11-21 | 日商新力股份有限公司 | 送訊裝置、高動態範圍影像資料送訊方法、收訊裝置、高動態範圍影像資料收訊方法及程式 |
TWI676389B (zh) | 2013-07-15 | 2019-11-01 | 美商內數位Vc專利控股股份有限公司 | 至少一種色彩轉換之編碼方法和編碼器、解碼器、顯示裝置、編碼視訊訊號、電腦程式製品及處理器可讀式媒體 |
ES2769593T3 (es) * | 2013-07-16 | 2020-06-26 | Koninklijke Philips Nv | Procedimiento y aparato para crear una función EOTF para un mapeo de código universal para una imagen HDR |
TWI646828B (zh) * | 2013-09-03 | 2019-01-01 | 日商新力股份有限公司 | 解碼裝置及解碼方法、以及編碼裝置及編碼方法 |
US9264683B2 (en) | 2013-09-03 | 2016-02-16 | Sony Corporation | Decoding device and decoding method, encoding device, and encoding method |
US9036908B2 (en) * | 2013-09-30 | 2015-05-19 | Apple Inc. | Backwards compatible extended image format |
EP3092800B1 (en) * | 2014-01-07 | 2022-12-28 | Dolby Laboratories Licensing Corporation | Techniques for encoding, decoding and representing high dynamic range images |
CN103747225B (zh) * | 2014-01-23 | 2015-11-18 | 福州大学 | 基于颜色空间转换的高动态范围图像双屏显示方法 |
EP3829171A1 (en) * | 2014-02-25 | 2021-06-02 | Apple Inc. | Adaptive transfer function for video encoding and decoding |
PL3324629T3 (pl) * | 2014-05-28 | 2019-11-29 | Koninklijke Philips Nv | Sposoby i urządzenia do kodowania obrazów hdr oraz sposoby i urządzenia do wykorzystania tak zakodowanych obrazów |
US20150350641A1 (en) * | 2014-05-29 | 2015-12-03 | Apple Inc. | Dynamic range adaptive video coding system |
EP3157242B1 (en) * | 2014-06-10 | 2019-07-03 | Panasonic Intellectual Property Management Co., Ltd. | Display system, display method, and display device |
WO2015193116A1 (en) * | 2014-06-20 | 2015-12-23 | Thomson Licensing | Method and device for decoding a hdr picture from a bitstream representing a ldr picture and an illumination picture |
EP2958328A1 (en) * | 2014-06-20 | 2015-12-23 | Thomson Licensing | Method and device for signaling in a bitstream a picture/video format of an LDR picture and a picture/video format of a decoded HDR picture obtained from said LDR picture and an illumination picture |
WO2015193117A1 (en) * | 2014-06-20 | 2015-12-23 | Thomson Licensing | Method and device for decoding a hdr picture from a bitstream representing a ldr picture and an illumination picture |
EP2958330A1 (en) * | 2014-06-20 | 2015-12-23 | Thomson Licensing | Method and device for decoding a HDR picture from a bitstream representing a LDR picture and an illumination picture |
EP3174280A1 (en) * | 2014-06-23 | 2017-05-31 | Panasonic Intellectual Property Management Co., Ltd. | Conversion method and conversion apparatus |
EP2961168A1 (en) * | 2014-06-27 | 2015-12-30 | Thomson Licensing | Method and apparatus for predicting image samples for encoding or decoding |
MX368411B (es) | 2014-08-08 | 2019-10-02 | Koninklijke Philips Nv | Metodos y aparatos para codificacion de imagenes de alto rango dinamico (hdr). |
US10277771B1 (en) | 2014-08-21 | 2019-04-30 | Oliver Markus Haynold | Floating-point camera |
JP6331882B2 (ja) | 2014-08-28 | 2018-05-30 | ソニー株式会社 | 送信装置、送信方法、受信装置および受信方法 |
JP6194427B2 (ja) | 2014-10-06 | 2017-09-06 | テレフオンアクチーボラゲット エルエム エリクソン(パブル) | 量子化パラメータのコーディング及び導出 |
US10469849B2 (en) * | 2014-10-07 | 2019-11-05 | Trellis Europe Srl | Video and image encoding process |
US10225485B1 (en) | 2014-10-12 | 2019-03-05 | Oliver Markus Haynold | Method and apparatus for accelerated tonemapping |
BR112017009528A2 (pt) | 2014-11-10 | 2018-02-06 | Koninklijke Philips N.V. | aparelho e método para decodificar um sinal de vídeo de hdr integrado a partir de um ou mais sinais da fonte, aparelho para codificar um sinal de vídeo, e método de decodificação de um sinal de vídeo |
US9860504B2 (en) | 2015-01-09 | 2018-01-02 | Vixs Systems, Inc. | Color gamut mapper for dynamic range conversion and methods for use therewith |
US9589313B2 (en) * | 2015-01-09 | 2017-03-07 | Vixs Systems, Inc. | Dynamic range converter with pipelined architecture and methods for use therewith |
US9654755B2 (en) * | 2015-01-09 | 2017-05-16 | Vixs Systems, Inc. | Dynamic range converter with logarithmic conversion and methods for use therewith |
CA2975172C (en) | 2015-01-30 | 2023-04-04 | Thomson Licensing | A method and apparatus of encoding and decoding a color picture |
EP3051821A1 (en) * | 2015-01-30 | 2016-08-03 | Thomson Licensing | Method and apparatus for encoding and decoding high dynamic range (HDR) videos |
CN107409213B (zh) * | 2015-03-02 | 2020-10-30 | 杜比实验室特许公司 | 用于高动态范围图像的内容自适应感知量化器 |
CN104835131B (zh) * | 2015-04-20 | 2018-05-15 | 中国科学技术大学先进技术研究院 | 一种基于ic实现hdr图像生成及色调映射的方法和系统 |
JP6663214B2 (ja) * | 2015-05-26 | 2020-03-11 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 表示方法および表示装置 |
WO2016189774A1 (ja) * | 2015-05-26 | 2016-12-01 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 表示方法および表示装置 |
US10674182B2 (en) * | 2015-06-05 | 2020-06-02 | Telefonaktiebolaget Lm Ericsson (Publ) | Pixel pre-processing and encoding |
EP3113495A1 (en) * | 2015-06-30 | 2017-01-04 | Thomson Licensing | Methods and devices for encoding and decoding a hdr color picture |
EP3113496A1 (en) | 2015-06-30 | 2017-01-04 | Thomson Licensing | Method and device for encoding both a hdr picture and a sdr picture obtained from said hdr picture using color mapping functions |
EP3119088A1 (en) * | 2015-07-16 | 2017-01-18 | Thomson Licensing | Method and device for encoding an image, method and device for decoding an image |
WO2017046408A1 (en) * | 2015-09-18 | 2017-03-23 | Thomson Licensing | Determination of a co-located luminance sample of a color component sample, for hdr coding/decoding |
US10244249B2 (en) * | 2015-09-21 | 2019-03-26 | Qualcomm Incorporated | Fixed point implementation of range adjustment of components in video coding |
US10200690B2 (en) * | 2015-09-22 | 2019-02-05 | Qualcomm Incorporated | Video decoder conformance for high dynamic range (HDR) video coding using a core video standard |
US10080005B2 (en) * | 2015-11-09 | 2018-09-18 | Netflix, Inc. | High dynamic range color conversion correction |
EP3182691B1 (en) * | 2015-12-17 | 2018-10-31 | Thomson Licensing | Method of encoding raw color coordinates provided by a camera representing colors of a scene having two different illuminations |
US10148972B2 (en) * | 2016-01-08 | 2018-12-04 | Futurewei Technologies, Inc. | JPEG image to compressed GPU texture transcoder |
CN108781290B (zh) * | 2016-03-07 | 2023-07-04 | 皇家飞利浦有限公司 | 一种hdr视频编码器及其编码方法、hdr视频解码器及其解码方法 |
GB2549696A (en) * | 2016-04-13 | 2017-11-01 | Sony Corp | Image processing method and apparatus, integrated circuitry and recording medium |
JP6937781B2 (ja) * | 2016-05-04 | 2021-09-22 | インターデジタル ヴイシー ホールディングス, インコーポレイテッド | 高ダイナミックレンジ画像を符号化ビットストリームへ符号化/復号する方法と装置 |
ITUA20163652A1 (it) * | 2016-05-20 | 2017-11-20 | Trellis Europe S R L | Metodo per la codifica e decodifica di immagini hdr |
CN107767838B (zh) | 2016-08-16 | 2020-06-02 | 北京小米移动软件有限公司 | 色域映射方法及装置 |
GB2554669B (en) * | 2016-09-30 | 2022-04-06 | Apical Ltd | Image processing |
US10244244B2 (en) * | 2016-10-26 | 2019-03-26 | Dolby Laboratories Licensing Corporation | Screen-adaptive decoding of high dynamic range video |
US10218952B2 (en) | 2016-11-28 | 2019-02-26 | Microsoft Technology Licensing, Llc | Architecture for rendering high dynamic range video on enhanced dynamic range display devices |
GB2557997B (en) * | 2016-12-21 | 2019-05-01 | Apical Ltd | Encoding and Decoding of image data |
JP6852411B2 (ja) * | 2017-01-19 | 2021-03-31 | ソニー株式会社 | 映像信号処理装置、映像信号処理方法およびプログラム |
US10104334B2 (en) | 2017-01-27 | 2018-10-16 | Microsoft Technology Licensing, Llc | Content-adaptive adjustment of display device brightness levels when rendering high dynamic range content |
US10176561B2 (en) | 2017-01-27 | 2019-01-08 | Microsoft Technology Licensing, Llc | Content-adaptive adjustments to tone mapping operations for high dynamic range content |
JP6738972B2 (ja) | 2017-02-15 | 2020-08-12 | ドルビー ラボラトリーズ ライセンシング コーポレイション | ハイダイナミックレンジ画像のためのトーン曲線マッピング |
EP3367658A1 (en) * | 2017-02-24 | 2018-08-29 | Thomson Licensing | Method and device for reconstructing an hdr image |
EP3373585A1 (en) * | 2017-03-09 | 2018-09-12 | Thomson Licensing | Method for inverse tone mapping of an image with visual effects |
JP6866224B2 (ja) * | 2017-05-09 | 2021-04-28 | キヤノン株式会社 | 画像符号化装置、画像復号装置、画像符号化方法及びプログラム |
KR102344334B1 (ko) | 2017-06-27 | 2021-12-29 | 삼성전자주식회사 | 영상을 처리하기 위한 방법 및 디스플레이 장치 |
US10755392B2 (en) * | 2017-07-13 | 2020-08-25 | Mediatek Inc. | High-dynamic-range video tone mapping |
US11423522B2 (en) * | 2017-11-24 | 2022-08-23 | Interdigital Vc Holdings, Inc. | Method and apparatus for colour correction during HDR to SDR conversion |
MX2020006142A (es) * | 2017-12-12 | 2020-08-13 | Interdigital Vc Holdings Inc | Procesamiento de una imagen. |
TWI644264B (zh) * | 2017-12-22 | 2018-12-11 | 晶睿通訊股份有限公司 | 影像辨識方法及其影像辨識裝置 |
CN110674622B (zh) * | 2018-07-03 | 2022-12-20 | 百度在线网络技术(北京)有限公司 | 可视化图表生成方法、系统、存储介质及电子设备 |
US10957024B2 (en) | 2018-10-30 | 2021-03-23 | Microsoft Technology Licensing, Llc | Real time tone mapping of high dynamic range image data at time of playback on a lower dynamic range display |
CN109919841B (zh) * | 2019-01-24 | 2022-12-27 | 重庆邮电大学 | 一种用于高动态范围图像联合上采样的导向图的合成方法 |
KR20200109276A (ko) * | 2019-03-12 | 2020-09-22 | 주식회사 엑스리스 | 영상 신호 부호화/복호화 방법 및 이를 위한 장치 |
CN110232669A (zh) * | 2019-06-19 | 2019-09-13 | 湖北工业大学 | 一种高动态范围图像的色调映射方法及系统 |
KR20210009255A (ko) | 2019-07-16 | 2021-01-26 | 삼성전자주식회사 | 이미지 센서 및 이를 포함하는 이미지 처리 시스템 |
US20220261954A1 (en) * | 2019-11-05 | 2022-08-18 | Google Llc | Highlight recovery for image processing pipeline |
CN114640834B (zh) * | 2020-12-15 | 2024-03-19 | 华为技术有限公司 | 一种图像处理的方法以及相关装置 |
CN113271449B (zh) * | 2021-07-21 | 2021-09-28 | 北京小鸟科技股份有限公司 | 多种hdr视频的转换系统、方法、设备 |
Family Cites Families (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4649568A (en) | 1984-10-22 | 1987-03-10 | Polaroid Corporation | Reconstitution of images |
JP2663189B2 (ja) | 1990-01-29 | 1997-10-15 | 富士写真フイルム株式会社 | 画像のダイナミックレンジ圧縮処理方法 |
US5414527A (en) | 1991-08-14 | 1995-05-09 | Fuji Xerox Co., Ltd. | Image encoding apparatus sensitive to tone variations |
JP3222577B2 (ja) | 1992-09-16 | 2001-10-29 | 古河電気工業株式会社 | 熱交換器用アルミニウム合金フィン材 |
US5742892A (en) | 1995-04-18 | 1998-04-21 | Sun Microsystems, Inc. | Decoder for a software-implemented end-to-end scalable video delivery system |
US5621660A (en) | 1995-04-18 | 1997-04-15 | Sun Microsystems, Inc. | Software-based encoder for a software-implemented end-to-end scalable video delivery system |
US6285784B1 (en) | 1998-09-28 | 2001-09-04 | Eastman Kodak Company | Method of applying manipulations to an extended color gamut digital image |
US6282313B1 (en) | 1998-09-28 | 2001-08-28 | Eastman Kodak Company | Using a set of residual images to represent an extended color gamut digital image |
US6282311B1 (en) | 1998-09-28 | 2001-08-28 | Eastman Kodak Company | Using a residual image to represent an extended color gamut digital image |
US6335983B1 (en) | 1998-09-28 | 2002-01-01 | Eastman Kodak Company | Representing an extended color gamut digital image in a limited color gamut color space |
US6282312B1 (en) | 1998-09-28 | 2001-08-28 | Eastman Kodak Company | System using one or more residual image(s) to represent an extended color gamut digital image |
US6301393B1 (en) * | 2000-01-21 | 2001-10-09 | Eastman Kodak Company | Using a residual image formed from a clipped limited color gamut digital image to represent an extended color gamut digital image |
US6748106B1 (en) | 2000-03-28 | 2004-06-08 | Eastman Kodak Company | Method for representing an extended color gamut digital image on a hard-copy output medium |
US6738427B2 (en) | 2000-09-15 | 2004-05-18 | International Business Machines Corporation | System and method of processing MPEG streams for timecode packet insertion |
WO2002045020A1 (en) | 2000-11-30 | 2002-06-06 | Canon Kabushiki Kaisha | Image processing device, image processing method, storage medium, and program |
US6606418B2 (en) | 2001-01-16 | 2003-08-12 | International Business Machines Corporation | Enhanced compression of documents |
JP3966117B2 (ja) | 2001-09-06 | 2007-08-29 | 富士ゼロックス株式会社 | 画像処理装置、画像符号化装置および画像印刷装置ならびにそれらの方法 |
JP2004029639A (ja) | 2002-06-28 | 2004-01-29 | Canon Inc | ビット数削減方法 |
US7260265B2 (en) * | 2002-10-04 | 2007-08-21 | International Business Machines Corporation | Enhancing compression while transcoding JPEG images |
TWI381686B (zh) * | 2003-11-12 | 2013-01-01 | Qualcomm Inc | 具有改良的鏈路控制之高資料速率介面 |
US7492375B2 (en) * | 2003-11-14 | 2009-02-17 | Microsoft Corporation | High dynamic range image viewing on low dynamic range displays |
US8218625B2 (en) * | 2004-04-23 | 2012-07-10 | Dolby Laboratories Licensing Corporation | Encoding, decoding and representing high dynamic range images |
US20050259729A1 (en) * | 2004-05-21 | 2005-11-24 | Shijun Sun | Video coding with quality scalability |
JP2006019847A (ja) * | 2004-06-30 | 2006-01-19 | Fuji Photo Film Co Ltd | 画像処理装置および方法並びにプログラム |
KR100657268B1 (ko) | 2004-07-15 | 2006-12-14 | 학교법인 대양학원 | 컬러 영상의 신축적 부호화, 복호화 방법 및 장치 |
JP2006157453A (ja) * | 2004-11-29 | 2006-06-15 | Sony Corp | 画像処理装置、画像処理方法及び撮像装置 |
EP1989882B1 (en) * | 2006-01-23 | 2015-11-11 | Max-Planck-Gesellschaft zur Förderung der Wissenschaften e.V. | High dynamic range codecs |
US8014445B2 (en) * | 2006-02-24 | 2011-09-06 | Sharp Laboratories Of America, Inc. | Methods and systems for high dynamic range video coding |
EP1871113A1 (en) | 2006-06-20 | 2007-12-26 | THOMSON Licensing | Method and apparatus for encoding video enhancement layer with multiresolution color scalability |
CN101507284B (zh) | 2006-07-17 | 2012-06-27 | 汤姆森许可贸易公司 | 用于对视频颜色增强数据进行编码的方法和设备,以及用于对视频颜色增强数据进行解码的方法和设备 |
BRPI0622046B1 (pt) | 2006-09-30 | 2020-01-21 | Interdigital Vc Holdings Inc | método e dispositivo para codificar e decodificar camada de aprimoramento de cor para vídeo |
CA2570090C (en) * | 2006-12-06 | 2014-08-19 | Brightside Technologies Inc. | Representing and reconstructing high dynamic range images |
US8237865B2 (en) | 2006-12-18 | 2012-08-07 | Emanuele Salvucci | Multi-compatible low and high dynamic range and high bit-depth texture and video encoding system |
US7826673B2 (en) * | 2007-01-23 | 2010-11-02 | Sharp Laboratories Of America, Inc. | Methods and systems for inter-layer image prediction with color-conversion |
TW200845723A (en) | 2007-04-23 | 2008-11-16 | Thomson Licensing | Method and apparatus for encoding video data, method and apparatus for decoding encoded video data and encoded video signal |
US7961983B2 (en) * | 2007-07-18 | 2011-06-14 | Microsoft Corporation | Generating gigapixel images |
US7940311B2 (en) * | 2007-10-03 | 2011-05-10 | Nokia Corporation | Multi-exposure pattern for enhancing dynamic range of images |
US8175158B2 (en) * | 2008-01-04 | 2012-05-08 | Sharp Laboratories Of America, Inc. | Methods and systems for inter-layer image prediction parameter determination |
JP4544308B2 (ja) * | 2008-01-11 | 2010-09-15 | ソニー株式会社 | 画像処理装置、撮像装置、方法およびプログラム |
US8953673B2 (en) | 2008-02-29 | 2015-02-10 | Microsoft Corporation | Scalable video coding and decoding with sample bit depth and chroma high-pass residual layers |
JP2009224971A (ja) * | 2008-03-14 | 2009-10-01 | Omron Corp | 画像処理装置 |
JP5395500B2 (ja) * | 2008-07-22 | 2014-01-22 | キヤノン株式会社 | 測定装置および画像形成装置 |
US8373718B2 (en) * | 2008-12-10 | 2013-02-12 | Nvidia Corporation | Method and system for color enhancement with color volume adjustment and variable shift along luminance axis |
KR101007101B1 (ko) * | 2009-01-07 | 2011-01-10 | 한양대학교 산학협력단 | 적응형 톤 매핑 장치 및 방법, 그리고 이를 이용한 영상 처리 시스템 |
US8406569B2 (en) * | 2009-01-19 | 2013-03-26 | Sharp Laboratories Of America, Inc. | Methods and systems for enhanced dynamic range images and video from multiple exposures |
US8290295B2 (en) * | 2009-03-03 | 2012-10-16 | Microsoft Corporation | Multi-modal tone-mapping of images |
BRPI1009443B1 (pt) * | 2009-03-13 | 2021-08-24 | Dolby Laboratories Licensing Corporation | Método de geração de parâmetros de mapeamento de tons inverso, método de compactação de dados de vídeo e método para geração de um fluxo de bits de saída a partir de um fluxo de bits de entrada |
CN101626454B (zh) * | 2009-04-10 | 2011-01-05 | 黄宝华 | 一种增强视频可视性的方法 |
US8525900B2 (en) * | 2009-04-23 | 2013-09-03 | Csr Technology Inc. | Multiple exposure high dynamic range image capture |
US8766999B2 (en) * | 2010-05-20 | 2014-07-01 | Aptina Imaging Corporation | Systems and methods for local tone mapping of high dynamic range images |
EP2591602A1 (en) * | 2010-07-06 | 2013-05-15 | Koninklijke Philips Electronics N.V. | Generation of high dynamic range images from low dynamic range images |
TWI513327B (zh) | 2011-04-15 | 2015-12-11 | Dolby Lab Licensing Corp | 高動態範圍影像的編碼、解碼及表示 |
US8891863B2 (en) * | 2011-06-13 | 2014-11-18 | Dolby Laboratories Licensing Corporation | High dynamic range, backwards-compatible, digital cinema |
-
2012
- 2012-04-13 TW TW101113197A patent/TWI513327B/zh active
- 2012-04-13 TW TW106101713A patent/TWI624182B/zh active
- 2012-04-13 TW TW104108766A patent/TWI521973B/zh active
- 2012-04-13 TW TW104139426A patent/TWI580275B/zh active
- 2012-04-13 TW TW107106010A patent/TWI690211B/zh active
- 2012-04-16 KR KR1020187002766A patent/KR101939135B1/ko active IP Right Grant
- 2012-04-16 KR KR1020137026854A patent/KR101632596B1/ko active IP Right Grant
- 2012-04-16 KR KR1020157011738A patent/KR101825347B1/ko active IP Right Grant
- 2012-04-16 KR KR1020147032975A patent/KR101552479B1/ko active IP Right Grant
- 2012-04-16 WO PCT/US2012/033795 patent/WO2012142589A2/en active Application Filing
- 2012-04-16 KR KR1020197000873A patent/KR102029670B1/ko active IP Right Grant
- 2012-04-16 KR KR1020167015590A patent/KR101695633B1/ko active IP Right Grant
- 2012-04-16 RU RU2016116032A patent/RU2640717C1/ru active
- 2012-04-16 EP EP18165945.9A patent/EP3376749B1/en active Active
- 2012-04-16 CN CN201280018609.0A patent/CN103503429B/zh active Active
- 2012-04-16 RU RU2013150934/08A patent/RU2589857C2/ru active
- 2012-04-16 EP EP12770665.3A patent/EP2697962B1/en active Active
- 2012-04-16 CN CN201410094013.XA patent/CN103888743B/zh active Active
- 2012-04-16 JP JP2014505400A patent/JP5661218B2/ja active Active
- 2012-04-16 KR KR1020157021358A patent/KR101684334B1/ko active IP Right Grant
- 2012-04-16 CA CA3000434A patent/CA3000434C/en active Active
- 2012-04-16 KR KR1020197028647A patent/KR102128233B1/ko active IP Right Grant
- 2012-04-16 CA CA2830678A patent/CA2830678C/en active Active
- 2012-04-16 BR BR112013026191-9A patent/BR112013026191B1/pt active IP Right Grant
- 2012-04-16 KR KR1020157017409A patent/KR101751226B1/ko active IP Right Grant
- 2012-04-16 ES ES16198562.7T patent/ES2686980T3/es active Active
- 2012-04-16 EP EP16198562.7A patent/EP3166298B1/en active Active
- 2012-04-17 US US13/449,119 patent/US8248486B1/en active Active
-
2013
- 2013-10-07 IL IL228761A patent/IL228761A/en active IP Right Grant
-
2014
- 2014-02-14 HK HK14101411.3A patent/HK1188354A1/xx unknown
- 2014-10-23 JP JP2014215904A patent/JP5893708B2/ja active Active
- 2014-12-02 JP JP2014243655A patent/JP5762615B2/ja active Active
-
2015
- 2015-04-02 IL IL238138A patent/IL238138B/en active IP Right Grant
-
2016
- 2016-02-24 JP JP2016033134A patent/JP6058183B2/ja active Active
- 2016-12-06 JP JP2016236496A patent/JP6469631B2/ja active Active
-
2018
- 2018-05-01 IL IL259069A patent/IL259069B/en active IP Right Grant
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230169689A1 (en) * | 2021-11-30 | 2023-06-01 | Texas Instruments Incorporated | Suppression of clipping artifacts from color conversion |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6469631B2 (ja) | 高ダイナミックレンジ画像のエンコード、デコードおよび表現のための方法、装置および媒体 | |
US10511837B2 (en) | Encoding, decoding, and representing high dynamic range images | |
US10264259B2 (en) | Encoding, decoding, and representing high dynamic range images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131011 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140728 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140805 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141023 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141118 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141202 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5661218 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |