JP7086587B2 - 復号された画像データから画像データを再構成する方法および装置 - Google Patents
復号された画像データから画像データを再構成する方法および装置 Download PDFInfo
- Publication number
- JP7086587B2 JP7086587B2 JP2017239281A JP2017239281A JP7086587B2 JP 7086587 B2 JP7086587 B2 JP 7086587B2 JP 2017239281 A JP2017239281 A JP 2017239281A JP 2017239281 A JP2017239281 A JP 2017239281A JP 7086587 B2 JP7086587 B2 JP 7086587B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- parameters
- image
- parameter
- original image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/98—Adaptive-dynamic-range coding [ADRC]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
- H04N9/69—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits for modifying the colour signals by gamma correction
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Image Processing (AREA)
Description
上記パラメータが失われている(lost)、破損している(corrupted)、または、グラフィックスまたはオーバーレイが付与されている復号された画像データと一致して(aligned)いないかどうかをチェックするステップと、
上記パラメータのうちの少なくとも1つが失われている、破損している、または、グラフィックスまたはオーバーレイが付与されている復号された画像データと一致していない場合に、
どのように上記パラメータが処理されているかを示す情報データに従って復元モード(recovery mode)を選択するステップと、
上記少なくとも1つの失われている、破損している、または、一致していないパラメータを、選択した復元モード、画像データの上記再構成を適用し、さらに、上記復元されたパラメータを考慮することによって復元するステップと、を含む。
パラメータは、
上記パラメータの値が値範囲から外れている、
上記パラメータが他のパラメータ値に従ったコヒーレント値を有していない、
の条件のうちの少なくとも1つを満たしている場合に破損しているとみなされる。
復元モードはパラメータのうちの幾つかのみが失われていない、破損していない、または、グラフィックスまたはオーバーレイが付与された復号された画像データと一致していないとしても、復元されたパラメータによってパラメータの全てを置き換えるものである。
復元モードは、各失われている、破損している、または、一致していないパラメータを復元されたパラメータによって置き換えるものである。
は、第1の画像のガンマ圧縮された成分を指し、これらのプライム記号が小文字の記号であるとき、例えば、(y’,u’,v’)は、第2の画像のガンマ圧縮された成分を指す。
(外2)
と一致していない場合に復元されたパラメータPrである。
(外5)
は、ビットストリーム(信号)Bまたは他の任意のビットストリームから取得され、場合によっては、このビットストリームは、ローカル・メモリまたは他の任意の記憶媒体に記憶することができる。
(外6)
と一致していないかどうかをチェックする。
失われている、破損している、または、グラフィックスまたはオーバーレイが付与されている復号された画像
(外7)
と一致していないものが存在しない場合には、パラメータSPの組は、パラメータPのみを含む。
(外8)
と一致していない場合には、(ステップ10)のサブステップ103において、モジュールM5は、どのように上記パラメータが処理されているかを示す情報データIDを取得し、(ステップ10)のサブステップ104において、モジュールM6は、上記情報データIDに従って、復元モジュールRMiを選択し、(ステップ10)のサブステップ105において、モジュールM7は、選択された復元モジュールRMiを適用することによって、上記少なくとも1つの失われている、破損している、または一致していないパラメータを復元する。少なくとも1つの復元されたパラメータPrは、パラメータSPの組に追加される。
(外9)
の上にグラフィックスを挿入する場合に、この方法は、一致していないパラメータを復号された画像I2にグラフィックス(またはオーバーレイ)を加えたものに適応したパラメータで置き換えるための特定の復元モードを選択し、グラフィックスまたはオーバーレイが付与された上記復号された画像
(外10)
から上記復元されたパラメータを使用することによって画像I3を再構成するため、これにより、何らかのちらつきのアーティファクトや所望しない効果によって再構成された画像の品質に影響が与えられることを回避するという利点がある。
(外11)
および取得されたパラメータSPの組から原画像データI1を表す画像I3を再構成する方法を使用した例を示している。
(外12)
が取得され(ステップ11)、パラメータSPの組は、図1に説明されているように取得される(ステップ10)。そして、前処理段階10とは機能的に逆である、後処理段階20は、復号された画像
(外13)
およびパラメータSPの組から画像I3を再構成する。
(外14)
のフォーマットを後処理段階12の入力の特定のフォーマットに適応化させることができ、ステップ26において、画像I3を、対象の装置(例えば、セットトップ・ボックス、コネクテッドTV、HDR/SDR対応CE装置、ブルーレイ・ディスク・プレイヤ)の少なくとも1つの特性に適応化させることができ、且つ/または、復号された画像
(外15)
および画像I3または原画像I1が異なる色空間および/または色域で表される場合に、逆色域マッピングを使用することができる。
ここで、TMは、マッピング関数である。マッピング関数TMは、原画像I1の輝度のダイナミック・レンジを減少または増加させることができ、その逆の処理は、画像の輝度のダイナミック・レンジを増加または減少させることになるであろう。
ここで、aおよびbは、パラメータSPの組の2つのパラメータである。
(外17)
に関連するパラメータを含むことができる。これらのパラメータは、ダイナミック・メタデータに関連しており、ビットストリームにおいて、例えば、ビットストリームBにおいて搬送される。パラメータaおよびbもまた、ビットストリームにおいて搬送することができる。
(外18)
を取得し、復号された画像
(外19)
は、そして、SDRまたはHDR対応CEディスプレイのために利用可能となる。
y1=TM(L)
ここでγは、好ましくは、2.4である、ガンマ係数とすることができる。
(外27)
の比に値が依存するスケーリング関数
(外28)
によって除算される。
ここで、Ωは、原画像I1の原色に依存する定数値である(例えば、BT.2020では、1.3となる)。
y’1および成分
(外30)
に従って、復号された画像
(外31)
の第2および第3の成分u’、v’を逆補正することによって導出される。
(外34)
から任意の画像I3を再構成することに拡張することができる。
tmInputSignalBlackLevelOffset、
tmInputSignalWhiteLevelOffset、
shadowGain、
highlightGain、
midToneWidthAdjFactor、
tmOutputFineTuning parameters、
である。
(外36)
を定義するために使用される色補正パラメータ((saturationGainNumVal、saturationGainX(i)およびsaturationGainY(i))である(ETSI勧告ETSI TS 103 433 V1.1.1節6.3.5および6.3.6)。
(外37)
(IutCC)もまた、取得された色補正パラメータから再構成される(導出される)(さらなる詳細については、勧告ETSI TS103 433V1.1.1 節7.2.3.2を参照)。
(外38)
を表す区分的な線形曲線のピボット・ポイントとすることができる。例えば、ダイナミック・メタデータは、ピボット・ポイントの数を示すcolorCorrectioNumVal、ピボット・ポイントのx値を示すcolorCorrectionX、ピボット・ポイントのy値を示すcolorCorrectionYである(さらなる詳細については、勧告ETSI TS103 433V1.1.1 節6.2.8および節6.3.8を参照)。
(外39)
を表す区分的な線形曲線のピボット・ポイントおよび彩度から輝度への入射パラメータaおよびbが取得される。
(外40)
もまた、このスケーリング関数
(外41)
を表す区分的な線形曲線に関するピボット・ポイントのものより導出される(さらなる詳細については、勧告ETSI TS103 433V1.1.1 節7.2.3.4を参照)。
(外42)
がSDR画像であることを示す。
(外43)
がHDR10画像であり、マッピング関数TMがPQ伝達関数であることを示す。
(外44)
がHLG10画像であり、マッピング関数TMが原画像I1に対するHLG伝達関数であることを示す。
・パラメータの値が所定の値の範囲から外れている(例えば、適合範囲が0~6である場合、saturation_gain_num_valは、10である)
・上記パラメータが他のパラメータ値に従ったコヒーレント値を有していない(例えば、saturation_gain_y[i]は、外れ値、すなわち、他のsaturation_gain_y[i]の値から遠く離れた値を含む。通常saturation_gain[0]からsaturation_gain[4]までは、0~16の範囲にある値であり、saturation_gain[1]=255である。)
shadow_gain_control =Clip)(0; 255; Floor(rs(hdrDisplayMaxLuminance) x 127,5 +0,5)
ここで、
である。
(外46)
にオーバーレイが追加されなければならない旨のイベントを決定モジュールに信号伝達/送信する(通常は、overlay_present_flagを1に設定する)任意の(中間)装置で実施されるように意図されている。
(外47)
が取得され(ステップ11)、画像I3が再構成される(ステップ12)。
(外48)
に付与されるべき場合には、復号された画像
(外49)
が取得され(ステップ11)、ステップ60において、合成画像I’2が復号された画像
(外50)
にグラフィックス(オーバーレイ)を付与することによって取得される。
(外52)
にパラメータPを加えたもの、または、合成画像I’2にパラメータPrを加えたものが上記TVセットに送信される。
例えば、DSP(Digital Signal Processor)である、プロセッサ72(またはCPU)と、
ROM(Read Only Memory)73と、
RAM(Random Access Memory)74と、
アプリケーションに対してデータを送受信するためのI/Oインタフェース75と、
バッテリ76と、を含む。
ローカル・メモリ(73または74)、例えば、ビデオ・メモリまたはRAM(またはRandom Access Memory)、フラッシュ・メモリ、ROM(またはRead Only Memory)、ハードディスクと、
ストレージ・インタフェース(75)、例えば、大容量記憶装置、RAM、フラッシュ・メモリ、ROM、光学ディスクまたは磁気サポートとのインタフェースと、
通信インタフェース(75)、例えば、有線インタフェース(例えば、バス・インタフェース、広域ネットワーク・インタフェース、ローカルエリア・ネットワーク・インタフェース)または無線インタフェース(IEEE802.11インタフェースまたはBlurtooth(商標)インタフェース)などと、
ピクチャ取り込み回路(例えば、CCD(Charge-Coupled Device)またはCMOS(Complementary Metal-Oxide-Semiconductor)などのセンサ)と、
を含む要素を組み合わせたものである。
モバイル・デバイスと、
通信デバイスと、
ゲーム・デバイスと、
タブレット(またはタブレット・コンピュータ)と、
ラップトップと、
静止画像カメラと、
ビデオ・カメラと、
符号化チップ/復号チップと、
TVセットと、
セットトップ・ボックスと、
ディスプレイと、
静止画像サーバと、
ビデオ・サーバ(例えば、ブロードキャスト・サーバ、ビデオオンデマンド・サーバ、または、ウェブサーバ)と、
を含む要素を組み合わせたものである。
[付記1]
復号された画像データ(
(外52-1)
)およびビットストリームから取得された(101)パラメータから原画像データ(I 1 )を表す画像データ(I 3 )を再構成する方法であって、前記パラメータは、前記原画像データ(I 1 )から処理されており、
前記パラメータが失われている、破損している、または、グラフィックスまたはオーバーレイが付与されている復号された画像データと一致していないかどうかをチェックするステップ(102)と、
前記パラメータのうちの少なくとも1つが失われている、破損している、または、グラフィックスまたはオーバーレイが付与されている復号された画像データと一致していない場合に、
どのように前記パラメータが処理されているかを示す情報データ(ID、103)に従って復元モード(RMi)を選択するステップ(104)と、
前記少なくとも1つの失われている、破損している、または、一致していないパラメータを、前記選択した復元モード(RMi)、画像データ(I 3 )の前記再構成を適用し、さらに、復元されたパラメータ(12)を考慮することによって復元するステップ(105)と、
を含む、前記方法。
[付記2]
復号された画像データおよびビットストリームから取得されたパラメータから原画像データを表す画像データを再構成する装置であって、前記パラメータは、前記原画像データから処理されており、
前記装置は、
前記パラメータが失われている、破損している、または、グラフィックスまたはオーバーレイが付与されている復号された画像データと一致していないかどうかをチェックする手段と、
前記パラメータのうちの少なくとも1つが失われている、破損している、または、グラフィックスまたはオーバーレイが付与されている復号された画像データと一致していない場合に、
どのように前記パラメータが処理されているかを示す情報データに従って復元モードを選択する手段と、
前記失われている、破損している、または、一致していないパラメータを、前記選択した復元モード、画像データの前記再構成を適用し、さらに、復元されたパラメータを考慮することによって復元する手段と、を含む、前記装置。
[付記3]
前記情報データ(ID)がビットストリームにおけるシンタックス要素によって明示的に信号伝達される、付記1に記載の方法または付記2に記載の装置。
[付記4]
前記情報データ(ID)が黙示的に信号伝達される、付記1に記載の方法または付記2に記載の装置。
[付記5]
前記情報データ(ID)は、パラメータを処理するために原画像データ(I 1 )に適用される処理の内容を識別する、付記1~4のいずれか1つに記載の方法または装置。
[付記6]
前記パラメータは、当該パラメータがビットストリームから取得されない場合に失われているとみなされる、付記1および3~5のいずれか1つに記載の方法または付記2~5のいずれか1つに記載の装置。
[付記7]
パラメータは、
前記パラメータの値が値範囲から外れている、
前記パラメータが他のパラメータ値に従ったコヒーレント値を有していない、
の条件のうちの少なくとも1つを満たしている場合に破損しているとみなされる、付記1および3~6のいずれか1つに記載の方法または付記2~6のいずれか1つに記載の装置。
[付記8]
復元モードは、前記パラメータのうちの幾つかのみが失われていない、破損していない、または、グラフィックスまたはオーバーレイが付与された復号された画像データと一致していないとしても、復元されたパラメータによって前記パラメータの全てを置き換えるものである、付記1および3~7のいずれか1つに記載の方法または付記2~7のいずれか1つに記載の装置。
[付記9]
復元モードは、各失われている、破損している、または、一致していないパラメータを復元されたパラメータによって置き換えるものである、付記1および3~8のいずれか1つに記載の方法または付記2~8のいずれか1つに記載の装置。
[付記10]
復元モードは、各失われている、破損している、または、一致していないパラメータを既に記憶された所定のパラメータ値の組のうちの値によって置き換えるものである、付記1および3~9のいずれか1つに記載の方法または付記2~9のいずれか1つに記載の装置。
[付記11]
復元モードは、原画像データの少なくとも1つの特性、または、前記原画像データまたは再構成されるべき画像データをグレーディングするために使用されるマスタリング・ディスプレイの少なくとも1つの特性、または、再構成された画像データの少なくとも1つの特性、または、対象のディスプレイの少なくとも1つの特性に従って選択される、付記1および3~10のいずれか1つに記載の方法または付記2~10のいずれか1つに記載の装置。
[付記12]
プログラムがコンピュータ上で実行されるとき、付記1、3~11のうちのいずれか1つに記載の方法のステップを実行するプログラム・コード命令を含む、コンピュータ・プログラム・プロダクト。
[付記13]
プログラムがコンピュータ上で実行されるとき、付記1、3~11のうちのいずれか1つに記載の方法のステップを実行するプログラム・コード命令が記憶された非一時的プロセッサ読み取り可能媒体。
Claims (14)
- 復号された画像データおよびビットストリームから取得されたパラメータから原画像データを表す画像データを再構成する方法であって、前記パラメータは、前記原画像データから処理されており、
復号された画像にグラフィックがオーバーレイされるという決定に応じて、
どのように前記パラメータが処理されているかを示す情報データに従って復元モードを選択することと、
前記選択された復元モードを適用することによって、パラメータを復元することと、
前記復号された画像データおよび少なくとも1つの復元されたパラメータに基づいて画像データを再構築することであって、少なくとも前記復号された画像データの輝度の逆マッピングおよび前記復号された画像データの彩度補正を含む、ことと、
を含む、前記方法。 - 前記情報データがビットストリームにおけるシンタックス要素によって明示的に信号伝達される、請求項1に記載の方法。
- 前記情報データが黙示的に信号伝達される、請求項1に記載の方法。
- 前記情報データは、パラメータを処理するために原画像データに適用される処理の内容を識別する、請求項1に記載の方法。
- 復元モードは、前記パラメータを、既に記憶された所定のパラメータの組によって置き換えるものである、請求項1に記載の方法。
- 復元モードは、原画像データの少なくとも1つの特性、または、前記原画像データまたは再構成されるべき画像データをグレーディングするために使用されるマスタリング・ディスプレイの少なくとも1つの特性、または、再構成された画像データの少なくとも1つの特性、または、対象のディスプレイの少なくとも1つの特性に従って選択される、請求項1に記載の方法。
- 復号された画像データおよびビットストリームから取得されたパラメータから原画像データを表す画像データを再構成する装置であって、前記パラメータは、前記原画像データから処理されており、
前記装置は、
復号された画像にグラフィックがオーバーレイされるという決定に応じて、
どのように前記パラメータが処理されているかを示す情報データに従って復元モードを選択する手段と、
前記選択された復元モードを適用することによって、パラメータを復元する手段と、
前記復号された画像データおよび少なくとも1つの復元されたパラメータに基づいて画像データを再構築する手段であって、少なくとも前記復号された画像データの輝度の逆マッピングおよび前記復号された画像データの彩度補正を含む、手段と、
を含む、前記装置。 - 前記情報データがビットストリームにおけるシンタックス要素によって明示的に信号伝達される、請求項7に記載の装置。
- 前記情報データが黙示的に信号伝達される、請求項7に記載の装置。
- 前記情報データは、パラメータを処理するために原画像データに適用される処理の内容を識別する、請求項7に記載の装置。
- 復元モードは、前記パラメータを、既に記憶された所定のパラメータの組によって置き換えるものである、請求項7に記載の装置。
- 復元モードは、原画像データの少なくとも1つの特性、または、前記原画像データまたは再構成されるべき画像データをグレーディングするために使用されるマスタリング・ディスプレイの少なくとも1つの特性、または、再構成された画像データの少なくとも1つの特性、または、対象のディスプレイの少なくとも1つの特性に従って選択される、請求項7に記載の装置。
- プログラムがコンピュータ上で実行されるとき、請求項1~6のうちのいずれか1項に記載の方法のステップを実行するプログラム・コード命令を含む、コンピュータ・プログラム。
- プログラムがコンピュータ上で実行されるとき、請求項1~6のうちのいずれか1項に記載の方法のステップを実行するプログラム・コード命令が記憶された非一時的プロセッサ読み取り可能媒体。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US15/868,111 US11310532B2 (en) | 2017-02-24 | 2018-01-11 | Method and device for reconstructing image data from decoded image data |
| US17/669,218 US20220167019A1 (en) | 2017-02-24 | 2022-02-10 | Method and device for reconstructing image data from decoded image data |
| JP2022093177A JP7340659B2 (ja) | 2017-02-24 | 2022-06-08 | 復号された画像データから画像データを再構成する方法および装置 |
Applications Claiming Priority (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP17305212.7 | 2017-02-24 | ||
| EP17305212.7A EP3367684A1 (en) | 2017-02-24 | 2017-02-24 | Method and device for decoding a high-dynamic range image |
| EP17158481 | 2017-02-28 | ||
| EP17158481.6 | 2017-02-28 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022093177A Division JP7340659B2 (ja) | 2017-02-24 | 2022-06-08 | 復号された画像データから画像データを再構成する方法および装置 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2018191269A JP2018191269A (ja) | 2018-11-29 |
| JP2018191269A5 JP2018191269A5 (ja) | 2021-01-28 |
| JP7086587B2 true JP7086587B2 (ja) | 2022-06-20 |
Family
ID=60811990
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017239281A Active JP7086587B2 (ja) | 2017-02-24 | 2017-12-14 | 復号された画像データから画像データを再構成する方法および装置 |
Country Status (9)
| Country | Link |
|---|---|
| US (1) | US11257195B2 (ja) |
| EP (2) | EP3367685B1 (ja) |
| JP (1) | JP7086587B2 (ja) |
| KR (2) | KR102458747B1 (ja) |
| CN (2) | CN108513134B (ja) |
| CA (2) | CA2989134A1 (ja) |
| MX (2) | MX391034B (ja) |
| RU (1) | RU2758035C2 (ja) |
| WO (1) | WO2018153800A1 (ja) |
Families Citing this family (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11310532B2 (en) | 2017-02-24 | 2022-04-19 | Interdigital Vc Holdings, Inc. | Method and device for reconstructing image data from decoded image data |
| EP3718304A1 (en) * | 2017-12-01 | 2020-10-07 | InterDigital VC Holdings, Inc. | Processing an image |
| CN109598671A (zh) * | 2018-11-29 | 2019-04-09 | 北京市商汤科技开发有限公司 | 图像生成方法、装置、设备及介质 |
| EP3709272A1 (en) * | 2019-03-15 | 2020-09-16 | InterDigital VC Holdings, Inc. | Processing a point cloud |
| MX2022013191A (es) * | 2020-04-22 | 2023-01-05 | Dolby Laboratories Licensing Corp | Optimización iterativa de funciones de remodelación en códec de imágenes hdr de una sola capa. |
| KR102929736B1 (ko) | 2020-05-05 | 2026-02-24 | 인터디지털 씨이 페이튼트 홀딩스, 에스에이에스 | Sl-hdrx 시스템용 신호에 조정되는 sdr 및 hdr 디스플레이상에서의 크로마 부스트 |
| CN111654707B (zh) * | 2020-06-03 | 2022-03-15 | 福建师范大学福清分校 | 一种基于俄罗斯方块的信息隐藏方法及终端 |
| CN112188179B (zh) * | 2020-08-28 | 2022-07-08 | 北京小米移动软件有限公司 | 图像缩略图显示方法、图像缩略图显示装置及存储介质 |
| JP2022085475A (ja) * | 2020-11-27 | 2022-06-08 | シャープ株式会社 | 動画像符号化装置、復号装置 |
| CN113592770B (zh) * | 2021-06-23 | 2024-02-23 | 中国科学院南京地理与湖泊研究所 | 一种去除水草影响的藻华遥感识别方法 |
| US11606605B1 (en) | 2021-09-30 | 2023-03-14 | Samsung Electronics Co., Ltd. | Standard dynamic range (SDR) / hybrid log-gamma (HLG) with high dynamic range (HDR) 10+ |
| CN115564659B (zh) | 2022-02-28 | 2024-04-05 | 荣耀终端有限公司 | 视频处理方法和装置 |
| CN114936174B (zh) * | 2022-06-09 | 2024-01-30 | 中国兵器工业计算机应用技术研究所 | 基于地面无人平台的图像处理与融合计算方法 |
| US12530757B2 (en) * | 2022-11-09 | 2026-01-20 | Apple Inc. | Techniques for generating gain maps based on acquired images |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006279388A (ja) | 2005-03-29 | 2006-10-12 | Matsushita Electric Ind Co Ltd | 動画像復号化装置および動画像復号化方法 |
| US20150117551A1 (en) | 2013-10-24 | 2015-04-30 | Dolby Laboratories Licensing Corporation | Error Control in Multi-Stream EDR Video Codec |
| WO2017114016A1 (zh) | 2015-12-31 | 2017-07-06 | 中兴通讯股份有限公司 | 图像解码和编码方法、解码和编码装置、解码器及编码器 |
Family Cites Families (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5856973A (en) * | 1996-09-10 | 1999-01-05 | Thompson; Kenneth M. | Data multiplexing in MPEG server to decoder systems |
| US8406569B2 (en) * | 2009-01-19 | 2013-03-26 | Sharp Laboratories Of America, Inc. | Methods and systems for enhanced dynamic range images and video from multiple exposures |
| EP2446636A1 (en) * | 2009-06-24 | 2012-05-02 | Dolby Laboratories Licensing Corporation | Method for embedding subtitles and/or graphic overlays in a 3d or multi-view video data |
| EP2375751A1 (en) * | 2010-04-12 | 2011-10-12 | Panasonic Corporation | Complexity reduction of edge-detection based spatial interpolation |
| TWI559779B (zh) * | 2010-08-25 | 2016-11-21 | 杜比實驗室特許公司 | 擴展影像動態範圍 |
| TWI759223B (zh) | 2010-12-03 | 2022-03-21 | 美商杜比實驗室特許公司 | 音頻解碼裝置、音頻解碼方法及音頻編碼方法 |
| WO2012074328A2 (ko) * | 2010-12-03 | 2012-06-07 | 엘지전자 주식회사 | 다시점 3차원 방송 신호를 수신하기 위한 수신 장치 및 방법 |
| US9075806B2 (en) * | 2011-02-22 | 2015-07-07 | Dolby Laboratories Licensing Corporation | Alignment and re-association of metadata for media streams within a computing device |
| RU2616158C2 (ru) * | 2011-04-28 | 2017-04-12 | Конинклейке Филипс Н.В. | Устройства и способы для кодирования и декодирования hdr-изображений |
| JP2013066075A (ja) * | 2011-09-01 | 2013-04-11 | Sony Corp | 送信装置、送信方法および受信装置 |
| CA2850031C (en) * | 2011-09-27 | 2023-07-11 | Koninklijke Philips N.V. | Apparatus and method for dynamic range transforming of images |
| JP6309978B2 (ja) * | 2013-02-21 | 2018-04-11 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 改善されたhdrイメージ符号化及び復号化方法、装置 |
| WO2015103032A1 (en) * | 2014-01-02 | 2015-07-09 | Vid Scale, Inc. | Methods and systems for scalable video coding with mixed interlace and progressive content |
| AU2015223123A1 (en) | 2014-02-25 | 2016-09-15 | Apple Inc. | Adaptive transfer function for video encoding and decoding |
| US20150264345A1 (en) * | 2014-03-13 | 2015-09-17 | Mitsubishi Electric Research Laboratories, Inc. | Method for Coding Videos and Pictures Using Independent Uniform Prediction Mode |
| EP3324629B1 (en) * | 2014-05-28 | 2019-06-19 | Koninklijke Philips N.V. | Methods and apparatuses for encoding an hdr images, and methods and apparatuses for use of such encoded images |
| EP3051486A1 (en) * | 2015-01-30 | 2016-08-03 | Thomson Licensing | Method and apparatus for encoding and decoding high dynamic range (HDR) videos |
| CN107690811B (zh) | 2015-06-05 | 2020-08-04 | 苹果公司 | 呈现和显示高动态范围内容 |
| EP3113496A1 (en) * | 2015-06-30 | 2017-01-04 | Thomson Licensing | Method and device for encoding both a hdr picture and a sdr picture obtained from said hdr picture using color mapping functions |
| EP3329679A1 (en) | 2015-07-28 | 2018-06-06 | VID SCALE, Inc. | High dynamic range video coding architectures with multiple operating modes |
| EP3131284A1 (en) * | 2015-08-13 | 2017-02-15 | Thomson Licensing | Methods, systems and aparatus for hdr to hdr inverse tone mapping |
| EP3338452B1 (en) * | 2015-09-23 | 2020-08-26 | ARRIS Enterprises LLC | Signalling of reshaping functions for coding high dynamic range and wide color gamut sequences |
-
2017
- 2017-12-14 JP JP2017239281A patent/JP7086587B2/ja active Active
- 2017-12-15 RU RU2017144024A patent/RU2758035C2/ru active
- 2017-12-15 CA CA2989134A patent/CA2989134A1/en active Pending
- 2017-12-15 MX MX2017016554A patent/MX391034B/es unknown
- 2017-12-15 MX MX2022003583A patent/MX2022003583A/es unknown
- 2017-12-15 KR KR1020170172832A patent/KR102458747B1/ko active Active
- 2017-12-15 EP EP17306780.2A patent/EP3367685B1/en active Active
- 2017-12-15 CN CN201711360544.9A patent/CN108513134B/zh active Active
-
2018
- 2018-02-19 WO PCT/EP2018/053984 patent/WO2018153800A1/en not_active Ceased
- 2018-02-19 CA CA3054488A patent/CA3054488A1/en active Pending
- 2018-02-19 US US16/488,581 patent/US11257195B2/en active Active
- 2018-02-19 KR KR1020197027425A patent/KR20190117686A/ko not_active Ceased
- 2018-02-19 EP EP18704571.1A patent/EP3586509B1/en active Active
- 2018-02-19 CN CN201880025039.5A patent/CN110574376B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006279388A (ja) | 2005-03-29 | 2006-10-12 | Matsushita Electric Ind Co Ltd | 動画像復号化装置および動画像復号化方法 |
| US20150117551A1 (en) | 2013-10-24 | 2015-04-30 | Dolby Laboratories Licensing Corporation | Error Control in Multi-Stream EDR Video Codec |
| WO2017114016A1 (zh) | 2015-12-31 | 2017-07-06 | 中兴通讯股份有限公司 | 图像解码和编码方法、解码和编码装置、解码器及编码器 |
Non-Patent Citations (1)
| Title |
|---|
| Pankaj Topiwala, Wei Dai, and Madhu Krishnan,AHG14: Tone Mapping Information and Related SEIs for HDR Coding,Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,JCTVC-Y0042r4,25th Meeting: Chengdu, CN,2016年11月,pp.1-10 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP3586509B1 (en) | 2024-05-29 |
| CN110574376A (zh) | 2019-12-13 |
| BR112019017651A2 (pt) | 2020-03-31 |
| US20200394774A1 (en) | 2020-12-17 |
| MX391034B (es) | 2025-03-21 |
| EP3367685B1 (en) | 2024-04-24 |
| MX2017016554A (es) | 2018-11-09 |
| BR102017027195A2 (pt) | 2018-10-30 |
| CA2989134A1 (en) | 2018-08-24 |
| CN110574376B (zh) | 2022-10-21 |
| KR102458747B1 (ko) | 2022-10-24 |
| CN108513134B (zh) | 2023-05-26 |
| US11257195B2 (en) | 2022-02-22 |
| KR20180098117A (ko) | 2018-09-03 |
| RU2758035C2 (ru) | 2021-10-25 |
| RU2017144024A3 (ja) | 2021-04-19 |
| RU2021128023A (ru) | 2021-10-28 |
| KR20190117686A (ko) | 2019-10-16 |
| JP2018191269A (ja) | 2018-11-29 |
| EP3367685A1 (en) | 2018-08-29 |
| MX2022003583A (es) | 2022-05-26 |
| RU2017144024A (ru) | 2019-06-17 |
| EP3586509A1 (en) | 2020-01-01 |
| CA3054488A1 (en) | 2018-08-30 |
| WO2018153800A1 (en) | 2018-08-30 |
| CN108513134A (zh) | 2018-09-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7086587B2 (ja) | 復号された画像データから画像データを再構成する方法および装置 | |
| JP7340659B2 (ja) | 復号された画像データから画像データを再構成する方法および装置 | |
| US11024017B2 (en) | Tone mapping adaptation for saturation control | |
| US10600163B2 (en) | Method and device for reconstructing a display adapted HDR image | |
| KR102537393B1 (ko) | Hdr 이미지를 재구성하기 위한 방법 및 디바이스 | |
| CN111434113B (zh) | 用于高动态范围重建的饱和控制 | |
| JP2021530884A (ja) | Sl−hdr2形式の中間ダイナミックレンジビデオ信号を処理する方法及び装置 | |
| JP7074461B2 (ja) | ディスプレイ適合hdr画像を再構成する方法およびデバイス | |
| WO2019203973A1 (en) | Method and device for encoding an image or video with optimized compression efficiency preserving image or video fidelity | |
| CN112425168B (zh) | 编码图像的方法和装置 | |
| RU2836275C2 (ru) | Способ и устройство для реконструкции данных изображений по декодированным данным изображений | |
| KR102369771B1 (ko) | 디스플레이 적응형 hdr 이미지를 재구성하기 위한 방법 및 디바이스 | |
| RU2776101C1 (ru) | Способ и устройство для восстановления адаптированного к дисплею изображения hdr | |
| CA2986520C (en) | Method and device for reconstructing a display adapted hdr image | |
| EP3528201A1 (en) | Method and device for controlling saturation in a hdr image | |
| CA2986520A1 (en) | Method and device for reconstructing a display adapted hdr image |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20171219 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20180223 |
|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20181220 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20181227 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20191106 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201209 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201209 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220117 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220125 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220411 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220513 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220608 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7086587 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |












































