JP6822123B2 - 画像処理装置、画像処理方法及びプログラム - Google Patents
画像処理装置、画像処理方法及びプログラム Download PDFInfo
- Publication number
- JP6822123B2 JP6822123B2 JP2016246000A JP2016246000A JP6822123B2 JP 6822123 B2 JP6822123 B2 JP 6822123B2 JP 2016246000 A JP2016246000 A JP 2016246000A JP 2016246000 A JP2016246000 A JP 2016246000A JP 6822123 B2 JP6822123 B2 JP 6822123B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- code amount
- unit
- transfer function
- mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/115—Selection of the code volume for a coding unit prior to coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/162—User input
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/19—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding using optimisation based on Lagrange multipliers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/87—Regeneration of colour television signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
Description
なお、上記の効果は必ずしも限定的なものではなく、上記の効果と共に、又は上記の効果に代えて、本明細書に示されたいずれかの効果、又は本明細書から把握され得る他の効果が奏されてもよい。
1.関連技術の説明
1−1.SDR及びHDR
1−2.コーデック歪み
1−3.伝達関数
1−4.色域
2.第1の実施形態
2−1.導入
2−2.システムの概要
2−3.画像処理装置の概略的な構成
2−4.符号化部及び制御部の詳細な構成
2−5.処理の流れ
2−6.変形例
2−7.第1の実施形態のまとめ
3.第2の実施形態
3−1.導入
3−2.システムの概要
3−3.画像処理装置の概略的な構成
3−4.符号化部及び制御部の詳細な構成
3−5.処理の流れ
3−6.第2の実施形態のまとめ
4.ハードウェア構成例
5.総括
[1−1.SDR及びHDR]
近年、実世界の様子をより忠実に再現し又はより豊富な明るさ及び色彩で映像を再生することを可能とするための、映像信号表現の拡張が進められている。HDRは、従来の標準的なダイナミックレンジであるSDRよりも広い輝度ダイナミックレンジで画像又は映像を表現しようとする概念である。
SDR映像かHDR映像かに関わらず、画像信号を非可逆圧縮を含む映像符号化方式で符号化すると、復号される画像信号に基づいて再生される画像に、画質の劣化が生じる。こうした画質の劣化を、本明細書ではコーデック歪みという。コーデック歪みの度合いは、PSNR(Peak Signal-to-Noise Ratio)という指標で評価され得る。概して、符号化効率を同等とした場合、H.264/AVCで符号化/復号された画像の画質は、MPEG−2で符号化/復号された画像の画質よりも高く、H.265/HEVCで符号化/復号された画像の画質はH.264/AVCよりも高い。しかしながら、通常、コーデック歪みの評価は、エンコーダへ入力される原画像とデコーダから出力される復号画像とを比較することにより行われる。HDR映像の撮像若しくは表示の際に行われる信号変換、又はダイナミックレンジの縮減若しくは拡張がコーデック歪みにどのように作用するかは、あまり知られていない。
−輝度の高い領域(例えば、空の中の雲)
−色の鮮やかな領域(例えば、赤色又は青色に光るランプ)
これらの部分領域において歪みが顕著となる原因は、HDR用の信号フォーマットの信号伝達関数に関連する。
一般に、撮像装置における光から画像信号への信号変換の特性は、OETF(Opto-Electronic Transfer Function;光電気伝達関数)でモデル化される。図3は、典型的なSDR用の信号フォーマットのOETF及びHDR用の信号フォーマットのOETFのそれぞれの例を示している。図3において、横軸は、変換前の光の輝度ダイナミックレンジを表し、100%が100nitの輝度に相当する。縦軸は、変換後の画像信号の符号値を表し、10bitの場合には符号値は0から1023までの値をとり得る。図中に破線で示したSDR用の信号フォーマット(例えば、BT.709)のOETFと実線で示したHDR用のOETF(例えば、HLG、ST2084又はS−Log3)とを比較すると、特に符号値が相対的に大きい部分において伝達関数の傾きの違いが顕著である。これは、こうした部分において、HDRのケースではSDRと比較して画像情報がより高い圧縮比で圧縮されていること、即ち符号値の同程度の変化がHDRのケースではSDRのケースよりも大きい階調の変化を表すことを意味している。RGB表色系において赤色(R)成分、緑色(G)成分及び青色(B)成分の各々の伝達関数を解析した場合にも、図3に示したグラフに類似したHDRとSDRとの間の信号伝達特性の違いが確認された。
実世界の様子をより忠実に再現し又はよりリッチな映像表現を可能とする技術として、HDRと共に色域もまた重要な概念である。ITU−Rにより標準化されたBT.2020は、これまで多くのアプリケーションで使用されてきたBT.709の色域と比較して、より鮮やかな色彩を表現することを可能とする色域を定義している。図5は、BT.709及びBT.2020により定義されている色域について説明するための説明図である。図5を参照すると、所定の拘束条件を用いて3次元の色空間を2次元平面へマッピングした色域グラフが示されている。グラフ中の十字マークは、白色がマッピングされる位置を示す。グラフ中の破線は、BT.709に従って表現することのできる色の範囲を示す。グラフ中の実線は、BT.2020に従って表現することのできる色の範囲を示す。グラフ中の点線は、人間の視覚が識別することのできる色の範囲を示す。図5から理解されるように、BT.2020は、BT.709よりも多彩な色を表現することを可能とする。BT.709が実世界に存在する色の約75%を表現可能であるのに対し、BT.2020は99%以上の色を表現可能であると言われている。BT.2020は、SDR映像の色域として利用されてもよく、又はHDR映像の色域として利用されてもよい。
[2−1.導入]
HDR用の信号フォーマットを用いた場合に画像内の部分領域において顕著となる上述したコーデック歪みのうちのいくつかは、特に画像信号の各色成分のダイナミックレンジのうち相対的に大きい符号値に対応するサブレンジにおいて、原信号の階調を表現するための割り当て符号量が不足することを原因としている。MPEG−2、H.264/AVC又はH.265/HEVCといった映像符号化方式に準拠するエンコーダは、所要の圧縮率を達成するために、画像信号を周波数ドメインにおいて量子化する。通常は、イントラ予測又はインター予測といった予測技術を適用した後の予測残差を直交変換することにより得られる変換係数が量子化される。しかし、SDR映像の符号化のために最適化されたそれらエンコーダにより使用される量子化ステップは、HDR用の信号フォーマットが使用される場合にはしばしば大き過ぎる。これは、大きい符号値に対応するサブレンジにおいて、既に信号変換の際に階調情報が(SDRのケースよりも)強く圧縮されているという事実を、既存のエンコーダが考慮していないからである。
図6Aは、本実施形態に係る画像処理システムの構成の第1の例を示す説明図である。図6Aに示した画像処理システム10aは、撮像装置11、信号処理装置14、及びサーバ装置15を含む。
図7Aは、本実施形態に係る画像処理装置の概略的な構成の第1の例を示すブロック図である。図7Aに示した画像処理装置100aは、例えば、図6Aの例におけるサーバ装置15、又は図6Bの例における撮像装置12若しくは端末装置16(又は、それら装置のいずれかに搭載される画像処理モジュール)であってよい。画像処理装置100aは、信号取得部101、情報取得部103、符号化部110及び制御部140を備える。
本項では、図7A及び図7Bに示した符号化部110及び制御部140のより具体的な構成について詳しく説明する。図8は、第1の実施形態に係る符号化部及び制御部の詳細な構成の一例を示すブロック図である。
図8を参照すると、符号化部110は、並び替えバッファ111、ブロック設定部112、減算部113、直交変換部114、量子化部115、可逆符号化部116、逆量子化部121、逆直交変換部122、加算部123、ループフィルタ124、フレームメモリ126、スイッチ127、モード選択部128、イントラ予測部130及びインター予測部135を備える。
図8を参照すると、制御部140は、統計演算部141及び符号量制御部143を備える。
第1の実施例において、符号量制御部143は、輝度成分の強さがより強い部分領域(即ち、高輝度部分)により多くの符号量が割り当てられるように、各部分領域について使用される量子化ステップをスケーリングする。各部分領域の輝度成分の強さは、統計演算部141により算出される部分領域ごとの統計から把握される。ここでは、符号量制御部143は、量子化ステップを各部分領域の輝度成分の強さに依存する保護比で除算することにより、量子化ステップをスケーリングするものとする。保護比は、部分領域の画質をどの程度保護するかを表すパラメータである。保護比の値が大きいほど、量子化ステップの値は小さくなり、当該量子化ステップが適用される部分領域の画質はより強く保護される。なお、保護比での実際の除算は、保護比を提供される量子化部115において行われてよい。
第2の実施例において、符号量制御部143は、色差成分の強さがより強い部分領域(即ち、高色差部分)により多くの符号量が割り当てられるように、各部分領域について使用される量子化ステップをスケーリングする。
図10の点P1、P2及びP3(「黄色」、「シアン」及び「緑色」)は、上述したように、色の鮮やかな(R成分、G成分及びB成分のうちの1つ以上が強い)領域に属し且つ高輝度(Y成分が強い)領域にも属する。このような色を有する部分領域を高輝度部分として保護しながら高色差部分としても保護すると、割り当て符号量が不適切なほど多くなってしまう可能性がある。そこで、符号量制御部143は、輝度成分及び色差成分のうちの一方の強さに応じて量子化ステップがスケーリングされた部分領域の当該量子化ステップを、輝度成分及び色差成分のうちの他方の強さに応じてスケーリングしなくてもよい。
(1)符号化制御処理
図12は、本実施形態に係る符号化制御処理の流れの一例を示すフローチャートである。ここで説明する符号化制御処理は、映像を構成する個々の画像について繰り返されてよい。複数の画像にわたって変化しないパラメータを取得し又は設定するための処理ステップは、2回目以降の繰り返しにおいてスキップされてもよい。なお、ここでは、説明の簡明さのために、符号量の制御に直接的に関連しない処理ステップについての説明は省略される。
図13Aは、図12のステップS140において実行され得る量子化制御処理の流れの第1の例を示すフローチャートである。第1の例は、画像内の高輝度部分の階調を保護するための量子化制御処理の流れの一例を示している。
図13Bは、図12のステップS140において実行され得る量子化制御処理の流れの第2の例を示すフローチャートである。第2の例は、画像内の高色差部分の階調を保護するための量子化制御処理の流れの一例を示している。
図13Cは、図12のステップS140において実行され得る量子化制御処理の流れの第3の例を示すフローチャートである。第3の例は、画像内の高輝度部分及び高色差部分の双方の階調を保護するための量子化制御処理の流れの一例を示している。
ここまで、画像を符号化する機能を有する画像処理装置が、画像に適用された伝達関数の種別に基づいて、部分領域ごとの割り当て符号量を制御する処理のオン/オフを切り替える例について説明した。しかしながら、本実施形態のアイディアは、伝達関数の種別の判定を経ることなく、部分領域ごとの割り当て符号量の制御が実行されるケースにも適用可能である。本項では、そうした一変形例について説明する。
図14は、第1の実施形態に係る画像処理装置の構成の一変形例を示すブロック図である。図14に示した画像処理装置100cは、例えば、図6Aの例におけるサーバ装置15、又は図6Bの例における撮像装置12若しくは端末装置16(又は、それら装置のいずれかに搭載される画像処理モジュール)であってよい。画像処理装置100cは、信号取得部101、符号化部110及び制御部140cを備える。
図15は、図14を用いて説明した変形例に係る符号化制御処理の流れの一例を示すフローチャートである。ここで説明する符号化制御処理は、映像を構成する個々の画像について繰り返されてよい。複数の画像にわたって変化しないパラメータを取得し又は設定するための処理ステップは、2回目以降の繰り返しにおいてスキップされてもよい。なお、ここでは、説明の簡明さのために、符号量の制御に直接的に関連しない処理ステップについての説明は省略される。
ここまで、図6A〜図15を用いて、本開示に係る技術の第1の実施形態について説明した。上述した実施形態では、光と画像信号との間の変換に関する伝達関数に基づいて取得される画像を符号化する際に、伝達関数に基づいて、画像の各部分領域に割り当てられる符号量が制御される。かかる構成によれば、どういった伝達関数が画像に適用されるかに依存して部分領域ごとに割り当て符号量を変化させることができる。それにより、伝達関数の選択の結果として原信号の階調を表現するための割り当て符号量が不足することを原因として、画像の部分領域においてコーデック歪みが顕著となることを防止することが可能となる。
[3−1.導入]
多くの映像符号化方式において、エンコーダは、画像を符号化する際に、選択可能な複数のモードから符号化効率の観点で最良のモードを選択し、選択したモードを示すモード情報を符号化してデコーダへ伝送する。そうしたモード選択は、例えば、イントラ予測における予測モード(例えば、予測方向及び予測ブロックサイズ)の選択、インター予測における予測モード(例えば、動きベクトル、予測ブロックサイズ及び参照ピクチャ)の選択、並びにイントラ予測モードとインター予測モードとの間の予測手法の選択を含み得る。モード選択は、通常、原画像データから予測画像データを減算して残る予測残差から発生する符号量とオーバヘッドとしてのモード情報から発生する符号量との和に相当し得るコストを、複数の候補モードにわたって評価することにより行われる。しかし、SDR映像のために設計され又はチューニングされたコスト評価式は、必ずしもHDR映像のために最適ではない。なぜなら、HDR映像の画像信号においては、SDR映像と比較して画像情報がより強く圧縮されており、同じ評価式が使用される場合には予測残差から発生する符号量のモード間の差異が過小評価されがちだからである。
本実施形態に係る画像処理システムは、第1の実施形態における画像処理システム10a又は10bと同様に構成されてよい。例えばシステム内の撮像装置、サーバ装置若しくは端末装置、又はそれら装置のいずれかに搭載される画像処理モジュールは、光と画像信号との間の変換に関する伝達関数に基づいて取得される画像を符号化する画像処理装置(即ち、エンコーダ)としての機能を有する。本実施形態では、エンコーダが画像を符号化する際に、伝達関数に基づいて、モード選択のための予測残差符号量又はモード符号量が制御される。それにより、HDR用の信号フォーマットが使用される場合の不適切なモードの選択が回避され、画質の劣化が軽減される。次項より、そうした画像処理装置の具体的かつ例示的な構成について詳しく説明する。
図17Aは、本実施形態に係る画像処理装置の概略的な構成の第1の例を示すブロック図である。図17Aに示した画像処理装置200aは、信号取得部201、情報取得部203、符号化部210及び制御部240を備える。
本項では、図17A及び図17Bに示した符号化部210及び制御部240のより具体的な構成について詳しく説明する。図18は、第2の実施形態に係る符号化部及び制御部の詳細な構成の一例を示すブロック図である。
図18を参照すると、符号化部210は、並び替えバッファ211、ブロック設定部212、減算部213、直交変換部214、量子化部215、可逆符号化部216、逆量子化部221、逆直交変換部222、加算部223、ループフィルタ224、フレームメモリ226、スイッチ227、モード選択部228、イントラ予測部230及びインター予測部235を備える。
図18を参照すると、制御部240は、コスト制御部241及び設定値記憶部243を備える。コスト制御部241は、符号化される画像に適用される伝達関数の種別を、情報取得部203又は204から入力される入力情報に基づいて判定する。そして、コスト制御部241は、判定した伝達関数の種別に基づいて、符号化部210の1つ以上のセクションにおけるモード選択のためのコストの評価を制御する。より具体的には、コスト制御部241は、例えば、コスト評価式に算入される予測残差符号量及びモード符号量のうちの一方をスケーリングすることにより、コスト評価における予測残差の寄与とモード情報の寄与との間のバランスを調整することができる。コスト評価の際に、複数の候補モードにわたる予測残差符号量の変動に対してモード符号量の変動が大きい場合、モード選択へのモード符号量の寄与が予測残差符号量の寄与と比較して過剰となり、結果的に予測残差符号量の変動を過小評価した状態で最適なモードが決定される。逆に、複数の候補モードにわたる予測残差符号量の変動に対してモード符号量の変動が小さい場合、モード選択へのモード符号量の寄与が予測残差符号量の寄与と比較して過少となり、結果的にモード符号量の変動を過小評価した状態で最適なモードが決定される。そのため、これら符号量の寄与を良好に調整して両者の間のバランスを最適化し、適正なコスト評価を行うことが有益である。
図20は、本実施形態に係る符号化制御処理の流れの一例を示すフローチャートである。ここで説明する符号化制御処理は、映像を構成する個々の画像について繰り返されてよい。複数の画像にわたって変化しないパラメータを取得し又は設定するための処理ステップは、2回目以降の繰り返しにおいてスキップされてもよい。なお、ここでは、説明の簡明さのために、モード選択の制御に直接的に関連しない処理ステップについての説明は省略される。
ここまで、図16A〜図20を用いて、本開示に係る技術の第2の実施形態について説明した。上述した実施形態では、光と画像信号との間の変換に関する伝達関数に基づいて取得される画像を符号化する際に、伝達関数に基づいて、画像を符号化する際のモード選択のための予測残差符号量又はモード符号量が制御される。かかる構成によれば、画一的ではなく、どういった伝達関数が画像に適用されるかに依存して異なる評価式でモード選択のためのコスト評価を行うことができる。それにより、不自然な予測モードの偏りが生じることを防止し、予測精度を改善して画像の歪みを軽減することが可能となる。
前節までに説明した実施形態は、ソフトウェア、ハードウェア、及びソフトウェアとハードウェアとの組合せのいずれを用いて実現されてもよい。画像処理装置100a、100b、100c、200a又は200bがソフトウェアを使用する場合、ソフトウェアを構成するプログラムは、例えば、装置の内部又は外部に設けられる記憶媒体(非一時的な媒体:non-transitory media)に予め格納される。そして、各プログラムは、例えば、実行時にRAM(Random Access Memory)に読み込まれ、CPU(Central Processing Unit)などのプロセッサにより実行される。
本開示に係る技術は、ここまでに詳しく説明した仕組みに従って、多様化しつつある信号表現に必ずしも十分に適応できていない例えばデジタルビデオカメラ、デジタルカムコーダ、ビデオエンコーダ、又はエンコード機能を有する任意の種類の既存の装置に対する改善を提供する。本開示に係る技術によれば、HDR映像を再生する際にダイナミックレンジの拡張に伴って拡大されるコーデック歪みが軽減され、良好な画質でHDR映像を再生することが可能となる。本開示に係る技術は、静止画の符号化へと応用されてもよい。
(1)
光と画像信号との間の変換に関する伝達関数に基づいて取得される画像を符号化する符号化部と、
前記伝達関数に基づいて、前記符号化部において前記画像を符号化する際のモード選択のための予測残差符号量又はモード符号量を制御する制御部と、
を備える画像処理装置。
(2)
前記制御部は、第1のダイナミックレンジに対応する第1の伝達関数が前記画像に適用されている場合に、前記第1のダイナミックレンジよりも狭い第2のダイナミックレンジに対応する第2の伝達関数が前記画像に適用されている場合よりも前記モード符号量が少なくなるように、前記モード符号量を制御する、前記(1)に記載の画像処理装置。
(3)
前記制御部は、第1のダイナミックレンジに対応する第1の伝達関数が前記画像に適用されている場合に、前記第1のダイナミックレンジよりも狭い第2のダイナミックレンジに対応する第2の伝達関数が前記画像に適用されている場合よりも前記予測残差符号量が多くなるように、前記予測残差符号量を制御する、前記(1)に記載の画像処理装置。
(4)
前記第1のダイナミックレンジは、100nitより高い輝度での表示を可能とするためのダイナミックレンジである、前記(2)又は前記(3)に記載の画像処理装置。
(5)
前記符号化部により実行される符号化処理は、イントラ予測を含み、
前記制御部により制御される前記予測残差符号量又は前記モード符号量は、前記イントラ予測における複数の候補モードからのモード選択の際に使用される、
前記(1)〜(4)のいずれか1項に記載の画像処理装置。
(6)
前記符号化部により実行される符号化処理は、インター予測を含み、
前記制御部により制御される前記予測残差符号量又は前記モード符号量は、前記インター予測における複数の候補モードからのモード選択の際に使用される、
前記(1)〜(5)のいずれか1項に記載の画像処理装置。
(7)
前記符号化部により実行される符号化処理は、イントラ予測及びインター予測を含み、
前記制御部により制御される前記予測残差符号量又は前記モード符号量は、前記イントラ予測又は前記インター予測である予測手法の選択の際に使用される、
前記(1)〜(6)のいずれか1項に記載の画像処理装置。
(8)
前記制御部は、前記画像に適用される前記伝達関数に関する入力情報に基づいて、前記伝達関数の種別を判定し、判定した前記種別に基づいて前記予測残差符号量又は前記モード符号量を制御する、前記(1)〜(7)のいずれか1項に記載の画像処理装置。
(9)
複数の候補モードのうち、前記予測残差符号量及び前記モード符号量を含むコストが最小となるモードを選択するモード選択部、をさらに備え、
前記符号化部は、前記モード選択部により選択されるモードに従って前記画像を符号化する、
前記(1)〜(8)のいずれか1項に記載の画像処理装置。
(10)
前記入力情報は、ユーザインタフェースを介して取得された情報である、前記(8)に記載の画像処理装置。
(11)
前記入力情報は、前記画像を表現する入力画像信号と多重化される補助信号から取得された情報である、前記(8)に記載の画像処理装置。
(12)
前記画像処理装置は、伝達関数の種別に関連付けられる前記モード符号量の値、又は、前記予測残差符号量若しくは前記モード符号量の制御のためのパラメータを記憶する記憶部、をさらに備える、前記(8)に記載の画像処理装置。
(13)
光と画像信号との間の変換に関する伝達関数に基づいて取得される画像を符号化することと、
前記伝達関数に基づいて、前記画像を符号化する際のモード選択のための予測残差符号量又はモード符号量を制御することと、
を含む画像処理方法。
(14)
画像処理装置のプロセッサを、
光と画像信号との間の変換に関する伝達関数に基づいて取得される画像を符号化する符号化部と、
前記伝達関数に基づいて、前記符号化部において前記画像を符号化する際のモード選択のための予測残差符号量又はモード符号量を制御する制御部と、
として機能させるためのプログラム。
101 信号取得部
102 信号処理部
103,104 情報取得部
107 記憶部
110 符号化部
115 量子化部
140,140c 制御部
200a,200b 画像処理装置
201 信号取得部
202 信号処理部
203,204 情報取得部
207 記憶部
210 符号化部
228 モード選択部
230 イントラ予測部
235 インター予測部
240 制御部
Claims (13)
- 光と画像信号との間の変換に関する伝達関数に基づいて取得される画像を符号化する符号化部と、
前記伝達関数に基づいて、前記符号化部において前記画像を符号化する際のモード選択のための予測残差符号量又はモード符号量を制御する制御部と、
を備え、前記制御部は、第1のダイナミックレンジに対応する第1の伝達関数が前記画像に適用されている場合に、前記第1のダイナミックレンジよりも狭い第2のダイナミックレンジに対応する第2の伝達関数が前記画像に適用されている場合よりも前記モード符号量が少なくなるように、前記モード符号量を制御する画像処理装置。 - 前記制御部は、第1のダイナミックレンジに対応する第1の伝達関数が前記画像に適用されている場合に、前記第1のダイナミックレンジよりも狭い第2のダイナミックレンジに対応する第2の伝達関数が前記画像に適用されている場合よりも前記予測残差符号量が多くなるように、前記予測残差符号量を制御する、請求項1に記載の画像処理装置。
- 前記第1のダイナミックレンジは、100nitより高い輝度での表示を可能とするためのダイナミックレンジである、請求項2に記載の画像処理装置。
- 前記符号化部により実行される符号化処理は、イントラ予測を含み、
前記制御部により制御される前記予測残差符号量又は前記モード符号量は、前記イントラ予測における複数の候補モードからのモード選択の際に使用される、
請求項1〜3のいずれか1項に記載の画像処理装置。 - 前記符号化部により実行される符号化処理は、インター予測を含み、
前記制御部により制御される前記予測残差符号量又は前記モード符号量は、前記インター予測における複数の候補モードからのモード選択の際に使用される、
請求項1〜4のいずれか1項に記載の画像処理装置。 - 前記符号化部により実行される符号化処理は、イントラ予測及びインター予測を含み、
前記制御部により制御される前記予測残差符号量又は前記モード符号量は、前記イントラ予測又は前記インター予測である予測手法の選択の際に使用される、
請求項1〜5のいずれか1項に記載の画像処理装置。 - 前記制御部は、前記画像に適用される前記伝達関数に関する入力情報に基づいて、前記伝達関数の種別を判定し、判定した前記種別に基づいて前記予測残差符号量又は前記モード符号量を制御する、請求項1〜6のいずれか1項に記載の画像処理装置。
- 複数の候補モードのうち、前記予測残差符号量及び前記モード符号量を含むコストが最小となるモードを選択するモード選択部、をさらに備え、
前記符号化部は、前記モード選択部により選択されるモードに従って前記画像を符号化する、
請求項1〜7のいずれか1項に記載の画像処理装置。 - 前記入力情報は、ユーザインタフェースを介して取得された情報である、請求項7に記載の画像処理装置。
- 前記入力情報は、前記画像を表現する入力画像信号と多重化される補助信号から取得された情報である、請求項7に記載の画像処理装置。
- 前記画像処理装置は、伝達関数の種別に関連付けられる前記モード符号量の値、又は、前記予測残差符号量若しくは前記モード符号量の制御のためのパラメータを記憶する記憶部、をさらに備える、請求項7に記載の画像処理装置。
- 光と画像信号との間の変換に関する伝達関数に基づいて取得される画像を符号化することと、
前記伝達関数に基づいて、前記画像を符号化する際のモード選択のための予測残差符号量又はモード符号量を制御することと、
を含み、前記モード符号量を制御することは、第1のダイナミックレンジに対応する第1の伝達関数が前記画像に適用されている場合に、前記第1のダイナミックレンジよりも狭い第2のダイナミックレンジに対応する第2の伝達関数が前記画像に適用されている場合よりも前記モード符号量が少なくなるように、前記モード符号量を制御することを含む画像処理方法。 - 画像処理装置のプロセッサを、
光と画像信号との間の変換に関する伝達関数に基づいて取得される画像を符号化する符号化部と、
前記伝達関数に基づいて、前記符号化部において前記画像を符号化する際のモード選択のための予測残差符号量又はモード符号量を制御する制御部と、
として機能させ、前記制御部は、第1のダイナミックレンジに対応する第1の伝達関数が前記画像に適用されている場合に、前記第1のダイナミックレンジよりも狭い第2のダイナミックレンジに対応する第2の伝達関数が前記画像に適用されている場合よりも前記モード符号量が少なくなるように、前記モード符号量を制御するためのプログラム。
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016246000A JP6822123B2 (ja) | 2016-12-19 | 2016-12-19 | 画像処理装置、画像処理方法及びプログラム |
PCT/JP2017/037572 WO2018116603A1 (ja) | 2016-12-19 | 2017-10-17 | 画像処理装置、画像処理方法及びプログラム |
CN201780076633.2A CN110050464B (zh) | 2016-12-19 | 2017-10-17 | 图像处理设备、图像处理方法和存储介质 |
KR1020197016934A KR20190097011A (ko) | 2016-12-19 | 2017-10-17 | 화상 처리 장치, 화상 처리 방법 및 프로그램 |
EP17885292.7A EP3557869B1 (en) | 2016-12-19 | 2017-10-17 | Image processing device, image processing method, and program |
US16/346,783 US11190744B2 (en) | 2016-12-19 | 2017-10-17 | Image processing device, image processing method, and program for determining a cost function for mode selection |
BR112019011920-5A BR112019011920A2 (pt) | 2016-12-19 | 2017-10-17 | dispositivo e método de processamento de imagem, e, programa. |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016246000A JP6822123B2 (ja) | 2016-12-19 | 2016-12-19 | 画像処理装置、画像処理方法及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018101867A JP2018101867A (ja) | 2018-06-28 |
JP2018101867A5 JP2018101867A5 (ja) | 2020-01-30 |
JP6822123B2 true JP6822123B2 (ja) | 2021-01-27 |
Family
ID=62627298
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016246000A Active JP6822123B2 (ja) | 2016-12-19 | 2016-12-19 | 画像処理装置、画像処理方法及びプログラム |
Country Status (7)
Country | Link |
---|---|
US (1) | US11190744B2 (ja) |
EP (1) | EP3557869B1 (ja) |
JP (1) | JP6822123B2 (ja) |
KR (1) | KR20190097011A (ja) |
CN (1) | CN110050464B (ja) |
BR (1) | BR112019011920A2 (ja) |
WO (1) | WO2018116603A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10453221B2 (en) * | 2017-04-10 | 2019-10-22 | Intel Corporation | Region based processing |
JP7147145B2 (ja) * | 2017-09-26 | 2022-10-05 | 富士通株式会社 | 動画像符号化装置、動画像符号化方法、及び動画像符号化プログラム |
US11775589B2 (en) * | 2019-08-26 | 2023-10-03 | Google Llc | Systems and methods for weighted quantization |
CN111291989B (zh) * | 2020-02-03 | 2023-03-24 | 重庆特斯联智慧科技股份有限公司 | 一种大型建筑人流深度学习调配系统及其方法 |
CN113630563B (zh) * | 2020-05-08 | 2022-07-22 | 华为技术有限公司 | 一种高动态范围hdr视频的处理方法、编码设备和解码设备 |
US11638019B2 (en) * | 2020-07-29 | 2023-04-25 | Alibaba Group Holding Limited | Methods and systems for prediction from multiple cross-components |
US11270468B1 (en) * | 2020-12-18 | 2022-03-08 | Facebook Technologies, Llc. | Joint color image and texture data compression |
US11647193B2 (en) * | 2020-12-18 | 2023-05-09 | Meta Platforms Technologies, Llc | Adaptive range packing compression |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008252176A (ja) * | 2007-03-29 | 2008-10-16 | Toshiba Corp | 動画像符号化装置及び方法 |
MX2010005563A (es) | 2007-12-20 | 2010-06-03 | Basf Se | Preparacion de terpolimeros cationicos y composiciones para el cuidado personal. |
US8175158B2 (en) * | 2008-01-04 | 2012-05-08 | Sharp Laboratories Of America, Inc. | Methods and systems for inter-layer image prediction parameter determination |
EP2702766B1 (en) * | 2011-04-28 | 2017-06-14 | Koninklijke Philips N.V. | Apparatuses and methods for hdr image encoding and decoding |
CN103369142B (zh) | 2013-07-09 | 2015-02-04 | 广东欧珀移动通信有限公司 | 一种防止打电话误操作的方法及系统 |
JP6202330B2 (ja) * | 2013-10-15 | 2017-09-27 | ソニー株式会社 | 復号装置および復号方法、並びに符号化装置および符号化方法 |
RU2663359C1 (ru) | 2013-12-27 | 2018-08-03 | Сони Корпорейшн | Устройство и способ обработки изображений |
WO2015130796A1 (en) * | 2014-02-25 | 2015-09-03 | Apple Inc. | Adaptive video processing |
US10136133B2 (en) * | 2014-11-11 | 2018-11-20 | Dolby Laboratories Licensing Corporation | Rate control adaptation for high-dynamic range images |
US20160309154A1 (en) * | 2015-04-17 | 2016-10-20 | Qualcomm Incorporated | Dynamic range adjustment for high dynamic range and wide color gamut video coding |
EP3304912A4 (en) * | 2015-06-07 | 2018-06-06 | Sharp Kabushiki Kaisha | Systems and methods for optimizing video coding based on a luminance transfer function or video color component values |
US10244245B2 (en) * | 2015-06-08 | 2019-03-26 | Qualcomm Incorporated | Content-adaptive application of fixed transfer function to high dynamic range (HDR) and/or wide color gamut (WCG) video data |
US10200690B2 (en) * | 2015-09-22 | 2019-02-05 | Qualcomm Incorporated | Video decoder conformance for high dynamic range (HDR) video coding using a core video standard |
AU2015261734A1 (en) * | 2015-11-30 | 2017-06-15 | Canon Kabushiki Kaisha | Method, apparatus and system for encoding and decoding video data according to local luminance intensity |
WO2017123133A1 (en) * | 2016-01-12 | 2017-07-20 | Telefonaktiebolaget Lm Ericsson (Publ) | Video coding using hybrid intra prediction |
EP3301925A1 (en) * | 2016-09-30 | 2018-04-04 | Thomson Licensing | Method for local inter-layer prediction intra based |
-
2016
- 2016-12-19 JP JP2016246000A patent/JP6822123B2/ja active Active
-
2017
- 2017-10-17 WO PCT/JP2017/037572 patent/WO2018116603A1/ja active Application Filing
- 2017-10-17 KR KR1020197016934A patent/KR20190097011A/ko not_active Application Discontinuation
- 2017-10-17 EP EP17885292.7A patent/EP3557869B1/en active Active
- 2017-10-17 CN CN201780076633.2A patent/CN110050464B/zh active Active
- 2017-10-17 US US16/346,783 patent/US11190744B2/en active Active
- 2017-10-17 BR BR112019011920-5A patent/BR112019011920A2/pt not_active IP Right Cessation
Also Published As
Publication number | Publication date |
---|---|
EP3557869B1 (en) | 2023-03-29 |
EP3557869A4 (en) | 2020-01-22 |
CN110050464A (zh) | 2019-07-23 |
CN110050464B (zh) | 2022-02-11 |
KR20190097011A (ko) | 2019-08-20 |
BR112019011920A2 (pt) | 2019-10-29 |
US11190744B2 (en) | 2021-11-30 |
JP2018101867A (ja) | 2018-06-28 |
EP3557869A1 (en) | 2019-10-23 |
WO2018116603A1 (ja) | 2018-06-28 |
US20190281267A1 (en) | 2019-09-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6822122B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6822123B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6822121B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
CN109155848B (zh) | 用于高动态范围及宽色域视频译码的环路内样本处理 | |
JP6882198B2 (ja) | 高ダイナミックレンジ(hdr)および/または広色域(wcg)ビデオデータへの固定伝達関数のコンテンツ適応型適用 | |
TWI601417B (zh) | 可適性色彩空間轉換寫碼 | |
KR101311402B1 (ko) | 영상의 부호화 방법 및 장치, 복호화 방법 및 장치 | |
US9571838B2 (en) | Image processing apparatus and image processing method | |
TW201924336A (zh) | 利用內容適應性空間變化量化之視訊寫碼 | |
KR20200037272A (ko) | 비디오 코딩에서 크로스-성분 동적 범위 조정 (cc-dra) 의 시스템 및 방법 | |
US20130107956A1 (en) | Generation of high dynamic range images from low dynamic range images | |
US20100208989A1 (en) | Image coding method, image decoding method, image coding apparatus, image decoding apparatus, program and integrated circuit | |
WO2012153578A1 (ja) | 画像処理装置及び画像処理方法 | |
CA2615299A1 (en) | Image encoding device, image decoding device, image encoding method, and image decoding method | |
KR20080015592A (ko) | 영상의 부호화, 복호화 방법 및 장치 | |
KR20070096737A (ko) | 영상의 부호화 방법 및 장치, 복호화 방법 및 장치 | |
CN1695381A (zh) | 在数字视频信号的后处理中使用编码信息和局部空间特征的清晰度增强 | |
CN111937384A (zh) | 视频编码中基于变换的量化与动态范围调整尺度推导的协调 | |
TWI765903B (zh) | 用於循環樣本處理之視訊寫碼工具 | |
WO2019003676A1 (ja) | 画像処理装置と画像処理方法およびプログラム | |
JP6269431B2 (ja) | 画像処理装置、画像処理方法及び画像処理システム | |
CN114205586A (zh) | 基于多色彩空间进行率失真优化的视频处理方法及应用 | |
Gommelet et al. | Optical-flow based nonlinear weighted prediction for SDR and backward compatible HDR video coding | |
AU2016200566B2 (en) | Image processing device and method | |
CN114449279A (zh) | 基于视频质量度量的视频编码 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190208 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190214 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190222 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190515 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190522 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191212 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191212 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200908 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201030 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201221 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6822123 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |