JP2018107534A - 映像符号化装置、映像符号化方法、映像復号装置、及び映像復号方法 - Google Patents

映像符号化装置、映像符号化方法、映像復号装置、及び映像復号方法 Download PDF

Info

Publication number
JP2018107534A
JP2018107534A JP2016250012A JP2016250012A JP2018107534A JP 2018107534 A JP2018107534 A JP 2018107534A JP 2016250012 A JP2016250012 A JP 2016250012A JP 2016250012 A JP2016250012 A JP 2016250012A JP 2018107534 A JP2018107534 A JP 2018107534A
Authority
JP
Japan
Prior art keywords
encoding
pixel value
result
decoding
pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016250012A
Other languages
English (en)
Inventor
数井　君彦
Kimihiko Kazui
君彦 数井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2016250012A priority Critical patent/JP2018107534A/ja
Priority to US15/816,000 priority patent/US20180184097A1/en
Publication of JP2018107534A publication Critical patent/JP2018107534A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】映像符号化においてパレット符号化が行われる場合に、フィルタ処理による画質の劣化を抑止する。
【解決手段】パレット符号化部３１１は、映像に含まれるブロック内の複数の画素値のうち、パレットに登録された第１画素値を、パレットを用いて符号化することで、第１画素値の符号化結果を生成する。また、パレット符号化部３１１は、パレットに登録されていない第２画素値を量子化することで、第２画素値の量子化結果を生成し、第１画素値の符号化結果から第１局所復号結果を生成し、第２画素値の量子化結果から第２局所復号結果を生成する。フィルタ部３１２は、第２局所復号結果に対してフィルタ処理を適用し、第１局所復号結果と、第２局所復号結果に対してフィルタ処理を適用した結果とを含む、ブロックの局所復号画像を生成する。出力部３１３は、第１画素値の符号化結果と第２画素値の量子化結果とを含む符号化映像を出力する。
【選択図】図３

Description

本発明は、映像符号化装置、映像符号化方法、映像復号装置、及び映像復号方法に関する。
動画像データは、非常に大きなデータ量を有することが多い。このため、送信装置から受信装置へ動画像データを送信する場合、又は動画像データを記憶装置に格納する場合には、動画像データの圧縮符号化が行われる。
代表的な動画像符号化標準としては、Moving Picture Experts Group phase 2（ＭＰＥＧ−２）、ＭＰＥＧ−４、又はH.264 MPEG-4 Advanced Video Coding（ＭＰＥＧ−４ ＡＶＣ／Ｈ．２６４）が知られている。これらの動画像符号化標準は、International Organization for Standardization/International Electrotechnical Commission（ＩＳＯ／ＩＥＣ）により策定されている。
また、新たな動画像符号化標準として、High Efficiency Video Coding（ＨＥＶＣ，ＭＰＥＧ−Ｈ／Ｈ．２６５）がJoint Collaborative Team on Video Coding（ＪＣＴＶＣ）により策定されている（例えば、非特許文献１を参照）。
上述した動画像符号化標準は、インター予測符号化とイントラ予測符号化の２つの符号化方式を採用している。インター予測符号化は、符号化対象ピクチャを符号化済みピクチャの情報を用いて符号化する符号化方式であり、イントラ予測符号化は、符号化対象ピクチャが持つ情報のみを用いて符号化対象ピクチャを符号化する符号化方式である。
近年のInformation Technology（ＩＴ）の進歩に伴い、各種カメラで撮影された自然画像に加えて、パーソナルコンピュータ（ＰＣ）のデスクトップ画面のようなスクリーンコンテンツ画像に対しても、動画像符号化標準を適用する流れが生じている。例えば、Wireless display、デスクトップ仮想化（Virtual Display Infrastructure，ＶＤＩ）等がこの流れに属する。
Wireless displayを用いることで、ＰＣ又はゲーム機器の表示映像をフラットパネルディスプレイに対して無線伝送することができる。また、ＶＤＩを用いることで、仮想オペレーティングシステム（仮想ＯＳ）のユーザ画面を、インターネットプロトコル（ＩＰ）によってシンクライアント端末に伝送することができる。
スクリーンコンテンツ画像は、自然画像とは異なる特徴を持っている。具体的には、ブロック内における画素値のバリエーションが非常に少ない点が挙げられる。例えば、２４ビット映像の場合、文書編集画面では、１６７７万色中で高々２０色程度しか使用されていない。
２０１３年に国際標準化されたＨＥＶＣ規格の第３版では、スクリーンコンテンツ画像を高能率に圧縮符号化するための技術が導入されている。その１つがパレット符号化である（例えば、特許文献１を参照）。
図１は、映像符号化装置におけるパレット符号化の例を示している。図１のブロックの画像１０１は６４（８×８）個の画素を含み、画像１０１の各画素値から、このブロックを符号化するためのパレット１０３が生成される。パレット１０３の各エントリは、画像１０１に含まれる色に対応し、インデックス及び画素値を含む。インデックスは、色を表す符号であり、画素値は、色を表す画素値である。この例では、画素値として（Ｒ，Ｇ，Ｂ）が用いられている。パレット１０３は、パレットテーブルと呼ばれることもある。
パレット１０３を用いて画像１０１の各画素値をインデックスに置き換えることで、インデックスマップ１０２が生成され、インデックスマップ１０２及びパレット１０３を符号化することで、画像１０１の符号化結果が生成される。ブロック内における画素値のバリエーションが少ない場合には、インデックスマップ１０２の情報量が小さくなるため、符号化効率が向上する。
Ｒ、Ｇ、及びＢの各値は８ビットで表されるため、画像１０１の１画素当たりの情報量は、８×３＝２４ビットであり、画像１０１全体の情報量は、２４×６４＝１５３６ビットになる。これに対して、各インデックスは３ビットで表されるため、インデックスマップ１０２の情報量は、３×６４＝１９２ビットである。
パレット符号化は、可逆符号化と非可逆符号化の両方のモードで使用可能である。非可逆符号化の場合には、エスケープ符号化が用いられる。エスケープ符号化では、ブロックに含まれる画素値の種類がパレットに登録されている画素値の種類よりも多い場合に、パレットに登録されていない画素値が直接量子化されて符号化される。
図１の画像１０１の場合、右上の画素１１１の画素値がエスケープ符号化され、インデックスマップ１０２内の対応する位置に、エスケープ符号化を示すインデックス“５”が記録されている。映像符号化装置によって生成されたビットストリームを復号する映像復号装置は、画素のインデックスがエスケープ符号化を示す場合、ビットストリームに含まれる、量子化された画素値を逆量子化することで、元の画素値を復元する。
パレット符号化によって生成される符号の情報量はパレットの大きさに比例するため、ビットストリームに対してレート制御を行う場合、パレットの大きさとエスケープ符号化の量子化スケールの２つのパラメータが変更される。
復号画像に対してフィルタ処理を適用する適応フィルタも知られている（例えば、特許文献２〜特許文献４を参照）。
特開２０１６−７６９２４号公報 国際公開第２０１５／１６３０４６号パンフレット 国際公開第２０１２／０８１７０６号パンフレット 特表２０１５−５１９８５３号公報
"Text of ISO/IEC FDIS 23008-2:201x High Efficiency Video Coding [3rd ed.]", ISO/IEC JTC1/SC29/WG11/N16046, February 2016
従来のパレット符号化では、エスケープ符号化における量子化による画質の劣化を軽減するために、局所復号画像に対してフィルタ処理が適用されることがある。しかし、エスケープ符号化されていない画素に対してフィルタ処理が適用された場合、不要なフィルタ処理によってその画素の画質が劣化する。
なお、かかる問題は、スクリーンコンテンツ画像に対するパレット符号化に限らず、画素値のバリエーションが少ない他の画像に対するパレット符号化においても生ずるものである。
１つの側面において、本発明は、映像符号化においてパレット符号化が行われる場合に、フィルタ処理による画質の劣化を抑止することを目的とする。
１つの案では、映像符号化装置は、パレット符号化部、フィルタ部、及び出力部を含む。
パレット符号化部は、符号化対象映像に含まれる符号化対象ブロック内の複数の画素値のうち、符号化対象ブロックのパレットに登録された第１画素値を、パレットを用いて符号化することで、第１画素値の符号化結果を生成する。また、パレット符号化部は、パレットに登録されていない第２画素値を量子化することで、第２画素値の量子化結果を生成する。そして、パレット符号化部は、第１画素値の符号化結果から第１局所復号結果を生成し、第２画素値の量子化結果から第２局所復号結果を生成する。
フィルタ部は、第２局所復号結果に対してフィルタ処理を適用し、第１局所復号結果と、第２局所復号結果に対してフィルタ処理を適用した結果とを含む、符号化対象ブロックの局所復号画像を生成する。出力部は、第１画素値の符号化結果と第２画素値の量子化結果とを含む符号化映像を出力する。
実施形態によれば、映像符号化においてパレット符号化が行われる場合に、フィルタ処理による画質の劣化を抑止することができる。
パレット符号化を示す図である。 ＳＡＯフィルタによるフィルタ処理を示す図である。 映像符号化装置の機能構成図である。 映像符号化処理のフローチャートである。 映像復号装置の機能構成図である。 映像復号処理のフローチャートである。 映像符号化装置の具体例を示す機能構成図である。 映像符号化装置のＳＡＯフィルタ部の機能構成図である。 映像符号化処理の具体例を示すフローチャートである。 映像復号装置の具体例を示す機能構成図である。 映像復号装置のＳＡＯフィルタ部の機能構成図である。 映像復号処理の具体例を示すフローチャートである。 ＣＴＵのシンタックスを示す図である。 コーディング四分木のシンタックスを示す図である。 ＣＵのシンタックスを示す図である。 情報処理装置の構成図である。
以下、図面を参照しながら、実施形態を詳細に説明する。
まず、ＨＥＶＣにおけるブロック分割について説明する。ＨＥＶＣでは、Coding Tree Unit（ＣＴＵ）、Coding Unit（ＣＵ）、Prediction Unit（ＰＵ）、及びTransform Unit（ＴＵ）と呼ばれる４種類のブロックが用意されている。ＣＴＵは、ブロック分割を木構造とみなしたときの根ノードとなるブロックであり、ＣＵが取りうる最大ブロックサイズに対応する。
ＣＵは、その木構造の葉ノードとなるブロックであり、インター予測、イントラ予測等の予測モードが決定される単位である。ＰＵは、ＣＵをさらに分割したブロックであり、ＣＵに対して決められた予測モードの中で、最適な予測方法が選択される単位である。例えば、イントラ予測の場合は、予測方向が選択され、インター予測の場合は、動きベクトルが選択される。ＴＵは、ＣＵをさらに分割したブロックであり、直交変換が実施される単位である。パレット符号化は、ＣＵを単位として実施され、ＣＵ毎に符号化に用いるパレットが生成される。
ＨＥＶＣ規格では、直交変換係数の量子化によって生じる劣化を軽減するためのポストフィルタとして、デブロッキングフィルタに加えて、サンプルアダプティブオフセット（Sample Adaptive Offset，ＳＡＯ）フィルタも採用されている。デブロッキングフィルタは、ＡＶＣ規格から採用されている。
図２は、ＳＡＯフィルタによるフィルタ処理の例を示している。復号画像に対してデブロッキングフィルタによるフィルタ処理が適用された結果に対して、ＳＡＯフィルタによるフィルタ処理が適用される。
ＳＡＯフィルタによるフィルタ処理には、エッジオフセットとバンドオフセットの２つのフィルタモードがあり、ＣＵ単位でいずれかのフィルタモードを選択することができる。エッジオフセットによるフィルタ処理は、ＣＵ内におけるエッジの歪みを補正する処理であり、バンドオフセットによるフィルタ処理は、ＣＵ内における階調の歪みを補正する処理である。
図２（ａ）は、エッジオフセットの例を示している。エッジオフセットによるフィルタ処理では、ＣＵ内の各画素の画素値に対して、ＣＵ単位で選択されるエッジ方向の画素値変動の形状に対応するオフセット値が加算される。
この例では、処理対象ＣＵ２０１に対して、Ｃｌａｓｓ １（水平方向）、Ｃｌａｓｓ ２（垂直方向）、Ｃｌａｓｓ ３（４５度方向）、又はＣｌａｓｓ ４（１３５度方向）のいずれか１つのエッジ方向が選択される。次に、処理対象ＣＵ２０１内の各画素の画素値と、その画素に隣接する２画素の画素値とを比較することで、エッジ方向の画素値変動の形状を示すカテゴリが計算される。このとき、隣接する２画素は、エッジ方向に応じて選択される。
例えば、Ｃｌａｓｓ １が選択された場合、処理対象画素２１１に対して水平方向に隣接する画素２１２及び画素２１３が参照画素として選択される。そして、処理対象画素２１１、参照画素２１２、及び参照画素２１３の画素値の相対関係が、Ｃａｔｅｇｏｒｙ １〜Ｃａｔｅｇｏｒｙ ４又はその他の形状のいずれに対応するかが決定される。
次に、処理対象ＣＵ２０１内の各画素の画素値に対して、決定されたカテゴリに対応するオフセット値を加算することで、フィルタ処理後のＣＵ２０２が生成される。Ｃａｔｅｇｏｒｙ １〜Ｃａｔｅｇｏｒｙ ４に対応するオフセット値は、それぞれ、ｑ１〜ｑ４であり、その他の形状に対応するオフセット値は０である。例えば、処理対象画素２１１のカテゴリがＣａｔｅｇｏｒｙ ３である場合、処理対象画素２１１の画素値ｐに対してオフセット値ｑ３が加算され、画素値がｐ＋ｑ３に変更される。
図２（ｂ）は、バンドオフセットの例を示している。バンドオフセットによるフィルタ処理では、ＣＵ内の各画素の画素値に対して、画素値のレンジに対応するオフセット値が加算される。各レンジは、画素値の下限値及び上限値によって規定することができる。
この例では、処理対象ＣＵ２０１内の各画素の画素値が、Ｒａｎｇｅ ０（ｒ０）、Ｒａｎｇｅ １（ｒ１）、Ｒａｎｇｅ ２（ｒ２）、Ｒａｎｇｅ ３（ｒ３）等のうち、いずれのレンジに属するかが決定される。
次に、処理対象ＣＵ２０１内の各画素の画素値に対して、決定されたレンジに対応するオフセット値を加算することで、フィルタ処理後のＣＵ２０３が生成される。Ｒａｎｇｅ ０に対応するオフセット値は０であり、Ｒａｎｇｅ １〜Ｒａｎｇｅ ３に対応するオフセット値は、それぞれ、ｏ１〜ｏ３である。例えば、処理対象画素２１１の画素値ｐがＲａｎｇｅ ２に属する場合、画素値ｐに対してオフセット値ｏ２が加算され、画素値がｐ＋ｏ２に変更される。
スクリーンコンテンツ画像の非可逆符号化では、パレット符号化とＳＡＯフィルタとを併用することで、符号化効率を改善することが可能である。しかしながら、ＨＥＶＣ規格のＳＡＯフィルタを適用すると、望ましくない画質の劣化が発生することがある。
パレット符号化において、非可逆符号化としてエスケープ符号化を使用する場合、量子化による画質の劣化は、エスケープ符号化された画素に対してのみ重畳される。一方、エスケープ符号化されていない画素の画素値には、量子化による劣化は発生しない。以下では、エスケープ符号化された画素を、エスケープ符号化画素と記し、エスケープ符号化されていない画素を、非エスケープ符号化画素と記すことがある。
ＳＡＯフィルタは、量子化による劣化を軽減するフィルタ処理であり、ＣＵ内のすべての画素に対して適用される。この場合、量子化による劣化が発生していない非エスケープ符号化画素に対してもＳＡＯフィルタが適用される。このため、不要なフィルタ処理によって非エスケープ符号化画素の画質が劣化し、符号化効率（圧縮効率）が低下する。
図３は、実施形態の映像符号化装置の機能構成例を示している。図３の映像符号化装置３０１は、パレット符号化部３１１、フィルタ部３１２、及び出力部３１３を含む。
図４は、図３の映像符号化装置３０１が行う映像符号化処理の例を示すフローチャートである。まず、パレット符号化部３１１は、符号化対象映像に含まれる符号化対象ブロック内の複数の画素値のうち、符号化対象ブロックのパレットに登録された第１画素値を、パレットを用いて符号化することで、第１画素値の符号化結果を生成する（ステップ４０１）。そして、パレット符号化部３１１は、第１画素値の符号化結果から第１局所復号結果を生成する（ステップ４０２）。
次に、パレット符号化部３１１は、パレットに登録されていない第２画素値を量子化することで、第２画素値の量子化結果を生成し（ステップ４０３）、第２画素値の量子化結果から第２局所復号結果を生成する（ステップ４０４）。
次に、フィルタ部３１２は、第２局所復号結果に対してフィルタ処理を適用し（ステップ４０５）、第１局所復号結果と、第２局所復号結果に対してフィルタ処理を適用した結果とを含む、符号化対象ブロックの局所復号画像を生成する（ステップ４０６）。そして、出力部３１３は、第１画素値の符号化結果と第２画素値の量子化結果とを含む符号化映像を出力する（ステップ４０７）。
このような映像符号化装置３０１によれば、映像符号化においてパレット符号化が行われる場合に、フィルタ処理による画質の劣化を抑止することができる。
図５は、実施形態の映像復号装置の機能構成例を示している。図５の映像復号装置５０１は、パレット復号部５１１、フィルタ部５１２、及び出力部５１３を含む。
図６は、図５の映像復号装置５０１が行う映像復号処理の例を示すフローチャートである。まず、パレット復号部５１１は、復号対象映像に含まれる復号対象ブロック内の第１画素の符号化結果を、復号対象ブロックのパレットを用いて復号することで、第１画素の第１画素値を復元する（ステップ６０１）。次に、パレット復号部５１１は、復号対象ブロック内の第２画素の量子化結果を逆量子化することで、第２画素の第２画素値を復元する（ステップ６０２）。
次に、フィルタ部５１２は、第２画素値に対してフィルタ処理を適用し（ステップ６０３）、第１画素値と、第２画素値に対してフィルタ処理を適用した結果とを含む、復号対象ブロックの復号画像を生成する（ステップ６０４）。そして、出力部５１３は、復号対象ブロックの復号画像を含む復号映像を出力する（ステップ６０５）。
このような映像復号装置５０１によれば、映像符号化においてパレット符号化が行われる場合に、フィルタ処理による画質の劣化を抑止することができる。
図７は、図３の映像符号化装置３０１の具体例を示している。図７の映像符号化装置３０１は、パレット符号化部３１１、出力部３１３、符号化モード決定部７０１、フレームメモリ７０２、予測符号化部７０３、デブロッキングフィルタ部７０４、及びＳＡＯフィルタ部７０５を含む。さらに、映像符号化装置３０１は、ＳＡＯフィルタ部７０６及びエントロピー符号化部７０７を含む。ＳＡＯフィルタ部７０６は、図３のフィルタ部３１２に対応する。
映像符号化装置３０１は、例えば、ハードウェア回路として実装することができる。この場合、映像符号化装置３０１の各構成要素を個別の回路として実装してもよく、１つの集積回路として実装してもよい。
映像符号化装置３０１は、入力される符号化対象映像を符号化し、符号化映像のビットストリームを出力する。符号化対象映像は、複数の時刻それぞれにおける複数の画像を含む。各画像は、カラー画像であってもよく、モノクロ画像であってもよい。画像がカラー画像である場合、画素値はＲＧＢ形式であってもよく、ＹＵＶ形式であってもよい。各画像は、フレーム又はピクチャと呼ばれることもある。
符号化対象映像に含まれる各画像は、ブロック毎に分割され、各ブロックが符号化対象ブロックとして、予測符号化部７０３及びパレット符号化部３１１に入力される。ＨＥＶＣの場合、各ブロックはＣＴＵ又はＣＵに対応する。
フレームメモリ７０２は、各ブロックの局所復号画像を記憶する記憶部であり、局所復号画像を符号化対象ブロックの参照画像として符号化モード決定部７０１へ出力する。符号化モード決定部７０１は、符号化対象映像とフレームメモリ７０２から出力される参照画像とを用いて、各ブロックのブロックサイズ及び符号化モードを決定する。各ブロックの符号化モードは、イントラ予測符号化、インター予測符号化、又はパレット符号化のいずれかである。
ブロックの符号化モードとしてイントラ予測符号化又はインター予測符号化を選択した場合、符号化モード決定部７０１は、ブロックサイズ、符号化モード、及び予測画素値を予測符号化部７０３へ出力する。予測画素値は、隣接ブロックの局所復号画素値又は参照画像の局所復号画素値から生成される。ブロックの符号化モードとしてパレット符号化を選択した場合、符号化モード決定部７０１は、ブロックサイズ及び符号化モードをパレット符号化部３１１へ出力する。
予測符号化部７０３は、符号化モードがイントラ予測符号化又はインター予測符号化である場合、符号化対象ブロックの予測符号化を行う。このとき、予測符号化部７０３は、符号化対象ブロック内の各画素の画素値から予測画素値を減算して、予測誤差を生成する。そして、予測符号化部７０３は、予測誤差を直交変換した後に量子化して、係数情報を生成する。直交変換としては、例えば、離散コサイン変換、離散ウェーブレット変換等が用いられる。
次に、予測符号化部７０３は、符号化モード（予測モード）等の予測符号化パラメータと係数情報とを、エントロピー符号化部７０７へ出力する。符号化モードがイントラ予測符号化である場合、予測符号化パラメータは、さらに予測方向を示す情報を含み、符号化モードがインター予測符号化である場合、予測符号化パラメータは、さらに動きベクトルを示す情報を含む。
また、予測符号化部７０３は、係数情報を逆量子化した後に逆直交変換して、再構成予測誤差を生成し、再構成予測誤差と予測画素値とを加算して、ポストフィルタ前の局所復号画素値を生成する。そして、予測符号化部７０３は、ポストフィルタ前の局所復号画素値をデブロッキングフィルタ部７０４へ出力する。
デブロッキングフィルタ部７０４は、ポストフィルタ前の局所復号画素値に対して、デブロッキングフィルタ処理を適用し、デブロッキングフィルタ処理の結果をＳＡＯフィルタ部７０５へ出力する。
ＳＡＯフィルタ部７０５は、デブロッキングフィルタ処理の結果に対して、ＳＡＯフィルタ処理を適用する。ＳＡＯフィルタ処理としては、例えば、ＨＥＶＣ規格で規定されているＳＡＯフィルタ処理を用いることができる。
まず、ＳＡＯフィルタ部７０５は、バンドオフセット、エッジオフセット、又はフィルタ非適用のいずれかのフィルタモードを選択する。そして、ＳＡＯフィルタ部７０５は、フィルタモードがバンドオフセットである場合、各レンジに対応するオフセット値を計算し、フィルタモードがエッジオフセットである場合、各カテゴリに対応するオフセット値を計算する。これらのオフセット値は、符号化前の画素値とＳＡＯフィルタ処理が適用された後の画素値との差分が最小になるように決定される。
次に、ＳＡＯフィルタ部７０５は、ブロック内の各画素の画素値に対して、選択したフィルタモードにおけるオフセット値を加算して、ポストフィルタ後の局所復号画素値を生成し、フレームメモリ７０２へ出力する。また、ＳＡＯフィルタ部７０５は、フィルタモード、オフセット値等を含むＳＡＯパラメータを、エントロピー符号化部７０７へ出力する。ＨＥＶＣの場合、ＳＡＯパラメータは、Largest Coding Unit（ＬＣＵ）単位で決定される。
フレームメモリ７０２は、符号化対象ブロック内の各画素の局所復号画素値を局所復号画像として蓄積する。この局所復号画像は、後続する画像に対する参照画像として用いられる。
パレット符号化部３１１は、符号化モードがパレット符号化である場合、符号化対象ブロックのパレット符号化を行う。まず、パレット符号化部３１１は、符号化対象ブロック内の各画素の画素値から、符号化対象ブロックのパレットを生成する。
次に、パレット符号化部３１１は、生成したパレットを参照して、符号化対象ブロック内の画素の画素値がパレットに登録されている場合、その画素値をパレット内の対応するインデックスに置き換える。一方、符号化対象ブロック内の画素の画素値がパレットに登録されていない場合、パレット符号化部３１１は、その画素値をエスケープ符号化を示すインデックスに置き換えるとともに、その画素値を量子化して量子化結果を生成する。
次に、パレット符号化部３１１は、符号化対象ブロックのパレット、各画素のインデックス、及びエスケープ符号化された画素の量子化結果を、エントロピー符号化部７０７へ出力する。そして、パレット符号化部３１１は、パレットの大きさ、エスケープ符号化の量子化スケール等を含むパレット符号化パラメータを、エントロピー符号化部７０７へ出力する。
また、パレット符号化部３１１は、各画素のポストフィルタ前の局所復号画素値を生成して、各画素のインデックス及び局所復号画素値をＳＡＯフィルタ部７０６へ出力する。
非エスケープ符号化画素の場合、パレット符号化部３１１は、パレット内において符号化結果のインデックスに対応する画素値を、ポストフィルタ前の局所復号画素値として用いる。この場合、局所復号画素値は、符号化前の画素値に一致する。一方、エスケープ符号化画素の場合、パレット符号化部３１１は、量子化結果を逆量子化して、ポストフィルタ前の局所復号画素値を生成する。この場合、局所復号画素値は、符号化前の画素値に必ずしも一致しない。
ＳＡＯフィルタ部７０６は、ポストフィルタ前の局所復号画素値に対して、ＳＡＯフィルタ処理を適用する。まず、ＳＡＯフィルタ部７０６は、符号化対象ブロック内のエスケープ符号化画素の局所復号画素値のみを用いて、バンドオフセット、エッジオフセット、又はフィルタ非適用のいずれかのフィルタモードを選択する。
そして、ＳＡＯフィルタ部７０６は、フィルタモードがバンドオフセットである場合、各レンジに対応するオフセット値を計算し、フィルタモードがエッジオフセットである場合、各カテゴリに対応するオフセット値を計算する。これらのオフセット値は、エスケープ符号化画素の符号化前の画素値とＳＡＯフィルタ処理が適用された後の画素値との差分が最小になるように決定される。
次に、ＳＡＯフィルタ部７０６は、ブロック内の各エスケープ符号化画素の局所復号画素値に対して、選択したフィルタモードにおけるオフセット値を加算して、ポストフィルタ後の局所復号画素値を生成し、フレームメモリ７０２へ出力する。また、ＳＡＯフィルタ部７０６は、ブロック内の各非エスケープ符号化画素の局所復号画素値を、ポストフィルタ後の局所復号画素値としてフレームメモリ７０２へ出力する。
そして、ＳＡＯフィルタ部７０６は、フィルタモード、オフセット値等を含むＳＡＯパラメータを、エントロピー符号化部７０７へ出力する。ＨＥＶＣの場合、ＳＡＯパラメータは、ＬＣＵ単位で決定される。
エントロピー符号化部７０７は、予測符号化部７０３、パレット符号化部３１１、ＳＡＯフィルタ部７０５、及びＳＡＯフィルタ部７０６から出力される情報に対してエントロピー符号化を行い、符号化映像のビットストリームを生成する。
エントロピー符号化される情報には、ピクチャタイプ等の画像単位の符号化パラメータ、画像中の各ＬＣＵのＳＡＯパラメータ、及び各ブロックの符号化モードが含まれる。エントロピー符号化される情報には、さらに、予測符号化パラメータ、係数情報、パレット符号化パラメータ、パレット、インデックス、及びエスケープ符号化画素の量子化結果が含まれる。エントロピー符号化では、情報中の各シンボルの出現頻度に応じて、可変長符号が割り当てられる。
出力部３１３は、エントロピー符号化部７０７が生成した符号化映像のビットストリームを、映像復号装置５０１へ出力する。
図８は、図７のＳＡＯフィルタ部７０６の機能構成例を示している。図８のＳＡＯフィルタ部７０６は、画素選択部８０１、バンドオフセット計算部８０２、エッジオフセット計算部８０３、画素フィルタ部８０４、及び合成部８０５を含む。画素選択部８０１には、エスケープ符号化画素及び非エスケープ符号化画素の局所復号画素値が混在する局所復号ブロックデータが入力される。
画素選択部８０１は、ブロック内の各画素のインデックスを参照し、インデックスがエスケープ符号化画素を示している場合、その画素の局所復号画素値をバンドオフセット計算部８０２、エッジオフセット計算部８０３、及び画素フィルタ部８０４へ出力する。一方、インデックスが非エスケープ符号化画素を示している場合、画素選択部８０１は、その画素の局所復号画素値を合成部８０５へ出力する。
バンドオフセット計算部８０２は、エスケープ符号化画素の局所復号画素値と符号化対象映像に含まれる原画像の画素値とを用いて、バンドオフセットのフィルタモードにおけるオフセット値及び符号化コストを計算する。符号化コストとしては、例えば、バンドオフセットのオフセット値の符号化データ量、及び局所復号画素値と原画像の画素値との差分を用いることができる。そして、バンドオフセット計算部８０２は、ブロック内の複数のエスケープ符号化画素に対するオフセット値のリストと符号化コストとを、画素フィルタ部８０４へ出力する。
また、バンドオフセット計算部８０２は、バンドオフセットのフィルタモードとオフセット値のリストとを含むＳＡＯパラメータを、エントロピー符号化部７０７へ出力する。
エッジオフセット計算部８０３は、エスケープ符号化画素の局所復号画素値と符号化対象映像に含まれる原画像の画素値とを用いて、エッジオフセットのフィルタモードにおけるオフセット値及び符号化コストを計算する。符号化コストとしては、例えば、エッジオフセットのオフセット値の符号化データ量、及び局所復号画素値と原画像の画素値との差分を用いることができる。そして、エッジオフセット計算部８０３は、ブロック内の複数のエスケープ符号化画素に対するオフセット値のリストと符号化コストとを、画素フィルタ部８０４へ出力する。
また、エッジオフセット計算部８０３は、エッジオフセットのフィルタモードとオフセット値のリストとを含むＳＡＯパラメータを、エントロピー符号化部７０７へ出力する。
画素フィルタ部８０４は、バンドオフセット及びエッジオフセットの２つのフィルタモードにおける符号化コストを比較して、符号化コストが小さい方のフィルタモードを選択する。そして、画素フィルタ部８０４は、選択したフィルタモードのオフセット値のリストを用いて、エスケープ符号化画素の局所復号画素値に対して、そのエスケープ符号化画素のオフセット値を加算し、加算結果の局所復号画素値を合成部８０５へ出力する。
合成部８０５は、ブロック内の非エスケープ符号化画素に対しては、画素選択部８０１から出力される局所復号画素値を出力し、エスケープ符号化画素に対しては、画素フィルタ部８０４から出力される局所復号画素値を出力する。これにより、フィルタ処理が適用された局所復号画素値とフィルタ処理が適用されていない局所復号画素値とが混在する局所復号ブロックデータが出力される。
図７の映像符号化装置３０１によれば、パレット符号化されたブロック内の画素のうち、エスケープ符号化画素のみに対してＳＡＯフィルタ処理が適用され、非エスケープ符号化画素に対してはＳＡＯフィルタ処理が適用されない。したがって、量子化による劣化が発生していない非エスケープ符号化画素の画質が損なわれないため、高画質の局所復号画像を生成することができる。さらに、高画質の局所復号画像を参照画像として用いて、後続する画像の予測符号化を行うことで、映像を効率良く符号化することができる。
図９は、図７の映像符号化装置３０１が行う映像符号化処理の具体例を示すフローチャートである。まず、符号化モード決定部７０１は、符号化対象映像に含まれる画像内の符号化対象ブロックのブロックサイズ及び符号化モードを決定する（ステップ９０１）。そして、予測符号化部７０３及びパレット符号化部３１１は、符号化モードがパレット符号化であるか否かを判定する（ステップ９０２）。
符号化モードがパレット符号化である場合（ステップ９０２，ＹＥＳ）、パレット符号化部３１１は、符号化対象ブロックのパレット符号化を行う（ステップ９０３）。次に、ＳＡＯフィルタ部７０６のバンドオフセット計算部８０２及びエッジオフセット計算部８０３は、符号化対象ブロック内のエスケープ符号化画素の局所復号画素値を用いて、オフセット値を計算する（ステップ９０４）。
次に、画素フィルタ部８０４は、フィルタモードを選択し、符号化対象ブロック内のエスケープ符号化画素に対して、選択したフィルタモードのＳＡＯフィルタ処理を適用する（ステップ９０５）。そして、エントロピー符号化部７０７は、符号化対象ブロックのパレット、各画素のインデックス、及びエスケープ符号化された画素の量子化結果、及びＳＡＯパラメータに対して、エントロピー符号化を行う。
一方、符号化モードがパレット符号化ではない場合（ステップ９０２，ＮＯ）、予測符号化部７０３は、符号化対象ブロックの予測符号化を行う（ステップ９０８）。次に、デブロッキングフィルタ部７０４は、符号化対象ブロック内の各画素の局所復号画素値に対して、デブロッキングフィルタ処理を適用する（ステップ９０９）。
次に、ＳＡＯフィルタ部７０５は、符号化対象ブロック内のすべての画素の局所復号画素値を用いて、オフセット値を計算する（ステップ９１０）。次に、ＳＡＯフィルタ部７０５は、フィルタモードを選択し、符号化対象ブロック内のすべての画素に対して、選択したフィルタモードのＳＡＯフィルタ処理を適用する（ステップ９１１）。そして、エントロピー符号化部７０７は、予測符号化パラメータ、係数情報、及びＳＡＯパラメータに対して、エントロピー符号化を行う。
次に、映像符号化装置３０１は、画像内のすべてのブロックを符号化したか否かをチェックする（ステップ９０６）。符号化されていないブロックが残っている場合（ステップ９０６，ＮＯ）、映像符号化装置３０１は、次のブロックについてステップ９０１以降の処理を繰り返す。
すべてのブロックを符号化した場合（ステップ９０６，ＹＥＳ）、映像符号化装置３０１は、符号化対象映像に含まれるすべての画像を符号化したか否かをチェックする（ステップ９０７）。符号化されていない画像が残っている場合（ステップ９０７，ＮＯ）、映像符号化装置３０１は、次の画像についてステップ９０１以降の処理を繰り返す。そして、すべての画像を符号化した場合（ステップ９０７，ＹＥＳ）、映像符号化装置３０１は、処理を終了する。
図１０は、図５の映像復号装置５０１の具体例を示している。図１０の映像復号装置５０１は、パレット復号部５１１、出力部５１３、エントロピー復号部１００１、予測復号部１００２、デブロッキングフィルタ部１００３、ＳＡＯフィルタ部１００４、ＳＡＯフィルタ部１００５、及びフレームメモリ１００６を含む。ＳＡＯフィルタ部１００５は、図５のフィルタ部５１２に対応する。
映像復号装置５０１は、例えば、ハードウェア回路として実装することができる。この場合、映像復号装置５０１の各構成要素を個別の回路として実装してもよく、１つの集積回路として実装してもよい。
図７の映像符号化装置３０１から出力される符号化映像のビットストリームは、復号対象映像のビットストリームとして映像復号装置５０１に入力される。映像復号装置５０１は、符号化映像のビットストリームを復号し、復号映像を出力する。
エントロピー復号部１００１は、符号化映像のビットストリームに対するエントロピー復号を行って、画像単位の符号化パラメータ、画像中の各ＬＣＵのＳＡＯパラメータ、各ブロックの符号化モードを抽出する。エントロピー復号部１００１は、さらに、予測符号化パラメータ、係数情報、パレット符号化パラメータ、パレット、インデックス、及びエスケープ符号化画素の量子化結果も抽出する。
エントロピー復号部１００１は、画像単位の符号化パラメータ及び各ブロックの符号化モードを、予測復号部１００２及びパレット復号部５１１へ出力し、ＳＡＯパラメータをＳＡＯフィルタ部１００４及びＳＡＯフィルタ部１００５へ出力する。また、エントロピー復号部１００１は、予測符号化パラメータ及び係数情報を予測復号部１００２へ出力し、パレット符号化パラメータ、パレット、インデックス、及びエスケープ符号化画素の量子化結果をパレット復号部５１１へ出力する。
フレームメモリ１００６は、各ブロックの復号画像を記憶する記憶部であり、復号画像を復号対象ブロックの参照画像として予測復号部１００２へ出力する。
予測復号部１００２は、符号化モードがイントラ予測符号化又はインター予測符号化である場合、復号対象ブロックの予測復号を行う。このとき、予測復号部１００２は、係数情報を逆量子化した後に逆直交変換して、再構成予測誤差を生成し、再構成予測誤差と予測画素値とを加算して、ポストフィルタ前の復号画素値を生成する。予測画素値は、隣接ブロックの復号画素値又は参照画像の復号画素値から生成される。そして、予測復号部１００２は、ポストフィルタ前の復号画素値をデブロッキングフィルタ部１００３へ出力する。
デブロッキングフィルタ部７０４は、ポストフィルタ前の復号画素値に対して、デブロッキングフィルタ処理を適用し、デブロッキングフィルタ処理の結果をＳＡＯフィルタ部１００４へ出力する。
ＳＡＯフィルタ部１００４は、エントロピー復号部１００１から出力されるＳＡＯパラメータのフィルタモードがバンドオフセット又はエッジオフセットである場合、デブロッキングフィルタ処理の結果に対してＳＡＯフィルタ処理を適用する。ＳＡＯフィルタ部１００４は、ブロック内の各画素の画素値に対して、ＳＡＯパラメータのフィルタモードにおけるオフセット値を加算して、ポストフィルタ後の復号画素値を生成し、フレームメモリ１００６へ出力する。
フレームメモリ１００６は、復号対象ブロック内の各画素の復号画素値を復号画像として蓄積するとともに、その表示タイミングに合わせて出力部５１３へ出力する。フレームメモリ１００６に蓄積された復号画像は、後続する画像に対する参照画像として用いられる。出力部５１３は、符号化映像に含まれる各時刻の画像内のすべてのブロックの復号画像を、復号映像の１枚の画面として、不図示の表示装置等へ出力する。
パレット復号部５１１は、符号化モードがパレット符号化である場合、復号対象ブロックのパレット復号を行って、各画素のインデックスからポストフィルタ前の復号画素値を生成する。そして、パレット復号部５１１は、復号対象ブロック内の各画素のインデックス及び復号画素値を、ＳＡＯフィルタ部１００５へ出力する。
インデックスに対応する画素値がパレットに登録されている場合、パレット復号部５１１は、その画素値をポストフィルタ前の復号画素値として用いる。一方、インデックスがエスケープ符号化を示している場合、パレット復号部５１１は、エスケープ符号化画素の量子化結果を逆量子化して、ポストフィルタ前の復号画素値を生成する。
ＳＡＯフィルタ部１００５は、エントロピー復号部１００１から出力されるＳＡＯパラメータのフィルタモードがバンドオフセット又はエッジオフセットである場合、ポストフィルタ前の復号画素値に対してＳＡＯフィルタ処理を適用する。このとき、ＳＡＯフィルタ部１００５は、ブロック内の各エスケープ符号化画素の復号画素値に対して、ＳＡＯパラメータのフィルタモードにおけるオフセット値を加算して、ポストフィルタ後の復号画素値を生成し、フレームメモリ１００６へ出力する。
図１１は、図１０のＳＡＯフィルタ部１００５の機能構成例を示している。図１１のＳＡＯフィルタ部１００５は、画素選択部１１０１、画素フィルタ部１１０２、及び合成部１１０３を含む。画素選択部１１０１には、エスケープ符号化画素及び非エスケープ符号化画素の復号画素値が混在する復号ブロックデータと、ＳＡＯパラメータとが入力される。
画素選択部１１０１は、ブロック内の各画素のインデックスを参照し、インデックスがエスケープ符号化画素を示している場合、ＳＡＯパラメータのフィルタモード及びオフセット値のリストと、その画素の復号画素値とを、画素フィルタ部１１０２へ出力する。一方、インデックスが非エスケープ符号化画素を示している場合、画素選択部１１０１は、その画素の復号画素値を合成部１１０３へ出力する。
画素フィルタ部１１０２は、フィルタモードに基づき、オフセット値のリストを用いて、エスケープ符号化画素の復号画素値に対して、そのエスケープ符号化画素のオフセット値を加算し、加算結果の復号画素値を合成部１１０３へ出力する。
合成部１１０３は、ブロック内の非エスケープ符号化画素に対しては、画素選択部１１０１から出力される復号画素値を出力し、エスケープ符号化画素に対しては、画素フィルタ部１１０２から出力される復号画素値を出力する。これにより、フィルタ処理が適用された復号画素値とフィルタ処理が適用されていない復号画素値とが混在する復号ブロックデータが出力される。
図１０の映像復号装置５０１によれば、パレット符号化されたブロック内の画素のうち、エスケープ符号化画素のみに対してＳＡＯフィルタ処理が適用され、非エスケープ符号化画素に対してはＳＡＯフィルタ処理が適用されない。したがって、量子化による劣化が発生していない非エスケープ符号化画素の画質が損なわれないため、高画質の復号画像を生成することができる。さらに、高画質の復号画像を参照画像として用いて、後続する画像の予測復号を行うことで、高画質の映像を復元することができる。
図１２は、図１０の映像復号装置５０１が行う映像復号処理の具体例を示すフローチャートである。まず、予測復号部１００２及びパレット復号部５１１は、符号化映像に含まれる画像内の復号対象ブロックの符号化モードが、パレット符号化であるか否かを判定する（ステップ１２０１）。
符号化モードがパレット符号化である場合（ステップ１２０１，ＹＥＳ）、パレット復号部５１１は、復号対象ブロックのパレット復号を行う（ステップ１２０２）。次に、ＳＡＯフィルタ部１００５の画素フィルタ部１１０２は、復号対象ブロック内のエスケープ符号化画素に対して、フィルタモードが示すＳＡＯフィルタ処理を適用する（ステップ１２０３）。そして、合成部１１０３は、ＳＡＯフィルタ処理が適用された復号画素値と非エスケープ符号化画素の復号画素値とを含む、復号対象ブロックの復号画像を出力する。
一方、符号化モードがパレット符号化ではない場合（ステップ１２０１，ＮＯ）、予測復号部１００２は、復号対象ブロックの予測復号を行う（ステップ１２０６）。次に、デブロッキングフィルタ部１００３は、復号対象ブロック内の各画素の復号画素値に対して、デブロッキングフィルタ処理を適用する（ステップ１２０７）。次に、ＳＡＯフィルタ部１００４は、復号対象ブロック内のすべての画素に対して、フィルタモードが示すＳＡＯフィルタ処理を適用し、復号対象ブロックの復号画像を出力する（ステップ１２０８）。
次に、映像復号装置５０１は、画像内のすべてのブロックを復号したか否かをチェックする（ステップ１２０４）。復号されていないブロックが残っている場合（ステップ１２０４，ＮＯ）、映像復号装置５０１は、次のブロックについてステップ１２０１以降の処理を繰り返す。
すべてのブロックを復号した場合（ステップ１２０４，ＹＥＳ）、映像復号装置５０１は、符号化映像に含まれるすべての画像を復号したか否かをチェックする（ステップ１２０５）。復号されていない画像が残っている場合（ステップ１２０５，ＮＯ）、映像復号装置５０１は、次の画像についてステップ１２０１以降の処理を繰り返す。そして、すべての画像を復号した場合（ステップ１２０５，ＹＥＳ）、映像復号装置５０１は、処理を終了する。
ＨＥＶＣ規格の場合、ＳＡＯパラメータは、映像符号化装置３０１から映像復号装置５０１へＬＣＵ単位（ＣＴＵ単位）で伝送される。しかし、パレット符号化されたＣＵとパレット符号化されていないＣＵとの間では、ＳＡＯフィルタ処理の対象となる画素が異なるため、これらのＣＵでは互いに異なるＳＡＯパラメータを用いた方が望ましい場合がある。そこで、符号化対象ＣＵがパレット符号化された場合、ＣＴＵのシンタックスに加えて、符号化対象ＣＵのシンタックスにもＳＡＯパラメータを付加することが考えられる。
図１３は、ＣＴＵのシンタックスの例を示している。図１３のシンタックスは、ＨＥＶＣ規格と等価である。slice_sao_luma_flag又はslice_sao_chroma_flagが論理“１”である場合、すなわち、ＳＡＯフィルタ処理が有効である場合、ＳＡＯパラメータsao()がＬＣＵ単位で伝送される。
図１４は、コーディング四分木（Coding Quadtree）のシンタックスの例を示している。図１４のシンタックスは、ＨＥＶＣ規格と等価である。四分木フラグsplit_cu_flagが論理“０”である場合、ＣＵデータcoding_unit()が出現する。
図１５は、ＣＵのシンタックスの例を示している。図１５のシンタックスは、palette_coding()に続く２行を除き、ＨＥＶＣ規格と等価である。slice_sao_luma_flag又はslice_sao_chroma_flagが論理“１”である場合、すなわち、ＳＡＯフィルタ処理が有効である場合、新たに追加されたＳＡＯパラメータsao_cu()がＣＵ単位で伝送される。sao_cu()は、対応するＣＵのみに対して適用されるＳＡＯパラメータであり、ＬＣＵ単位のＳＡＯパラメータsao()は、そのＣＵに対しては無効となる。図１５のシンタックスを用いることで、ＳＡＯパラメータをＣＵ単位で伝送することが可能になる。
映像符号化装置３０１及び映像復号装置５０１は、様々な用途に利用される。例えば、映像符号化装置３０１及び映像復号装置５０１を、映像送信装置、映像受信装置、テレビ電話システム、仮想デスクトップシステム、コンピュータ、又は携帯電話機に組み込むことも可能である。
図３及び図７の映像符号化装置３０１の構成は一例に過ぎず、映像符号化装置３０１の用途又は条件に応じて一部の構成要素を省略又は変更してもよい。例えば、図７の映像符号化装置３０１において、ブロックの予測符号化を行わない場合、予測符号化部７０３、デブロッキングフィルタ部７０４、及びＳＡＯフィルタ部７０５を省略することができる。エントロピー符号化を行わない場合、エントロピー符号化部７０７を省略することができる。
図５及び図１０の映像復号装置５０１の構成は一例に過ぎず、映像復号装置５０１の用途又は条件に応じて一部の構成要素を省略又は変更してもよい。例えば、図１０の映像復号装置５０１において、ブロックの予測復号を行わない場合、予測復号部１００２、デブロッキングフィルタ部１００３、及びＳＡＯフィルタ部１００４を省略することができる。エントロピー復号を行わない場合、エントロピー復号部１００１を省略することができる。
図８のＳＡＯフィルタ部７０６の構成は一例に過ぎず、映像符号化装置３０１の用途又は条件に応じて一部の構成要素を省略又は変更してもよい。例えば、バンドオフセットのフィルタモードを使用しない場合、バンドオフセット計算部８０２を省略することができ、エッジオフセットのフィルタモードを使用しない場合、エッジオフセット計算部８０３を省略することができる。
図１１のＳＡＯフィルタ部１００５の構成は一例に過ぎず、映像復号装置５０１の用途又は条件に応じて一部の構成要素を省略又は変更してもよい。
図４、図６、図９、及び図１２に示したフローチャートは一例に過ぎず、映像符号化装置３０１及び映像復号装置５０１の構成又は条件に応じて一部の処理を省略又は変更してもよい。例えば、図９の映像符号化処理において、ブロックの予測符号化を行わない場合、ステップ９０８〜ステップ９１１の処理を省略することができる。図１２の映像復号処理において、ブロックの予測復号を行わない場合、ステップ１２０６〜ステップ１２０８の処理を省略することができる。
図１のパレット符号化及び図２のフィルタ処理は一例に過ぎず、パレットのデータ構造、エッジオフセットのエッジ方向及びカテゴリ、バンドオフセットのレンジ等は、符号化対象映像に応じて変化する。図１３〜図１５のシンタックスは一例に過ぎず、動画像符号化標準に応じて別のシンタックスを用いてもよい。
パレット符号化が適用される符号化対象映像は、スクリーンコンテンツ画像を含む映像に限定されるものではなく、画素値のバリエーションが少ない他の画像を含む映像であってもよい。
図３及び図７の映像符号化装置３０１と図５及び図１０の映像復号装置５０１は、ハードウェア回路として実装することもでき、図１６に示すような情報処理装置（コンピュータ）を用いて実装することもできる。
図１６の情報処理装置は、Central Processing Unit（ＣＰＵ）１６０１、メモリ１６０２、入力装置１６０３、出力装置１６０４、補助記憶装置１６０５、媒体駆動装置１６０６、及びネットワーク接続装置１６０７を備える。これらの構成要素はバス１６０８により互いに接続されている。
メモリ１６０２は、例えば、Read Only Memory（ＲＯＭ）、Random Access Memory（ＲＡＭ）、フラッシュメモリ等の半導体メモリであり、処理に用いられるプログラム及びデータを記憶する。メモリ１６０２は、図７のフレームメモリ７０２又は図１０のフレームメモリ１００６として用いることができる。
ＣＰＵ１６０１（プロセッサ）は、例えば、メモリ１６０２を利用してプログラムを実行することにより、図３及び図７のパレット符号化部３１１、及び図３のフィルタ部３１２として動作する。ＣＰＵ１６０１は、プログラムを実行することにより、図７の符号化モード決定部７０１、予測符号化部７０３、デブロッキングフィルタ部７０４、ＳＡＯフィルタ部７０５、ＳＡＯフィルタ部７０６、及びエントロピー符号化部７０７としても動作する。
ＣＰＵ１６０１は、プログラムを実行することにより、図８の画素選択部８０１、バンドオフセット計算部８０２、エッジオフセット計算部８０３、画素フィルタ部８０４、及び合成部８０５としても動作する。
ＣＰＵ１６０１は、プログラムを実行することにより、図５及び図１０のパレット復号部５１１、及び図５のフィルタ部５１２として動作する。ＣＰＵ１６０１は、プログラムを実行することにより、図１０のエントロピー復号部１００１、予測復号部１００２、デブロッキングフィルタ部１００３、ＳＡＯフィルタ部１００４、及びＳＡＯフィルタ部１００５としても動作する。
ＣＰＵ１６０１は、プログラムを実行することにより、図１１の画素選択部１１０１、画素フィルタ部１１０２、及び合成部１１０３としても動作する。
入力装置１６０３は、例えば、キーボード、ポインティングデバイス等であり、ユーザ又はオペレータからの指示や情報の入力に用いられる。出力装置１６０４は、例えば、表示装置、プリンタ、スピーカ等であり、ユーザ又はオペレータへの問い合わせや処理結果の出力に用いられる。処理結果は、復号映像であってもよい。
補助記憶装置１６０５は、例えば、磁気ディスク装置、光ディスク装置、光磁気ディスク装置、テープ装置等である。補助記憶装置１６０５は、ハードディスクドライブ又はフラッシュメモリであってもよい。情報処理装置は、補助記憶装置１６０５にプログラム及びデータを格納しておき、それらをメモリ１６０２にロードして使用することができる。
媒体駆動装置１６０６は、可搬型記録媒体１６０９を駆動し、その記録内容にアクセスする。可搬型記録媒体１６０９は、メモリデバイス、フレキシブルディスク、光ディスク、光磁気ディスク等である。可搬型記録媒体１６０９は、Compact Disk Read Only Memory（ＣＤ−ＲＯＭ）、Digital Versatile Disk（ＤＶＤ）、又はUniversal Serial Bus（ＵＳＢ）メモリであってもよい。ユーザ又はオペレータは、この可搬型記録媒体１６０９にプログラム及びデータを格納しておき、それらをメモリ１６０２にロードして使用することができる。
このように、処理に用いられるプログラム及びデータを格納するコンピュータ読み取り可能な記録媒体には、メモリ１６０２、補助記憶装置１６０５、及び可搬型記録媒体１６０９のような、物理的な（非一時的な）記録媒体が含まれる。
ネットワーク接続装置１６０７は、Local Area Network（ＬＡＮ）、インターネット等の通信ネットワークに接続され、通信に伴うデータ変換を行う通信インタフェースである。ネットワーク接続装置１６０７は、図３及び図７の出力部３１３として用いることができる。情報処理装置は、プログラム及びデータを外部の装置からネットワーク接続装置１６０７を介して受け取り、それらをメモリ１６０２にロードして使用することもできる。
なお、情報処理装置が図１６のすべての構成要素を含む必要はなく、用途又は条件に応じて一部の構成要素を省略することも可能である。例えば、ユーザ又はオペレータとのインタフェースが不要の場合は、入力装置１６０３及び出力装置１６０４を省略してもよい。また、情報処理装置が可搬型記録媒体１６０９にアクセスしない場合は、媒体駆動装置１６０６を省略してもよい。
開示の実施形態とその利点について詳しく説明したが、当業者は、特許請求の範囲に明確に記載した本発明の範囲から逸脱することなく、様々な変更、追加、省略をすることができるであろう。
図２乃至図１６を参照しながら説明した実施形態に関し、さらに以下の付記を開示する。
（付記１）
符号化対象映像に含まれる符号化対象ブロック内の複数の画素値のうち、前記符号化対象ブロックのパレットに登録された第１画素値を、前記パレットを用いて符号化することで、前記第１画素値の符号化結果を生成し、前記複数の画素値のうち前記パレットに登録されていない第２画素値を量子化することで、前記第２画素値の量子化結果を生成し、前記第１画素値の前記符号化結果から第１局所復号結果を生成し、前記第２画素値の前記量子化結果から第２局所復号結果を生成するパレット符号化部と、
前記第２局所復号結果に対してフィルタ処理を適用し、前記第１局所復号結果と、前記第２局所復号結果に対して前記フィルタ処理を適用した結果とを含む、前記符号化対象ブロックの局所復号画像を生成するフィルタ部と、
前記第１画素値の前記符号化結果と前記第２画素値の前記量子化結果とを含む符号化映像を出力する出力部と、
を備えることを特徴とする映像符号化装置。
（付記２）
前記符号化対象ブロックの前記局所復号画像を記憶する記憶部と、
前記局所復号画像を参照して、前記符号化対象映像に含まれるブロックの予測符号化を行う予測符号化部と、
をさらに備えることを特徴とする付記１記載の映像符号化装置。
（付記３）
前記フィルタ処理は、前記符号化対象ブロック内におけるエッジの歪みを補正する第１フィルタ処理、又は前記符号化対象ブロック内における階調の歪みを補正する第２フィルタ処理であることを特徴とする付記１又は２記載の映像符号化装置。
（付記４）
符号化対象映像に含まれる符号化対象ブロック内の複数の画素値のうち、前記符号化対象ブロックのパレットに登録された第１画素値を、前記パレットを用いて符号化することで、前記第１画素値の符号化結果を生成し、
前記第１画素値の前記符号化結果から第１局所復号結果を生成し、
前記複数の画素値のうち前記パレットに登録されていない第２画素値を量子化することで、前記第２画素値の量子化結果を生成し、
前記第２画素値の前記量子化結果から第２局所復号結果を生成し、
前記第２局所復号結果に対してフィルタ処理を適用し、
前記第１局所復号結果と、前記第２局所復号結果に対して前記フィルタ処理を適用した結果とを含む、前記符号化対象ブロックの局所復号画像を生成し、
前記第１画素値の前記符号化結果と前記第２画素値の前記量子化結果とを含む符号化映像を出力する、
処理をコンピュータに実行させる映像符号化プログラム。
（付記５）
前記コンピュータは、前記符号化対象ブロックの前記局所復号画像を参照して、前記符号化対象映像に含まれるブロックの予測符号化を行うことを特徴とする付記４記載の映像符号化プログラム。
（付記６）
映像符号化装置が、
符号化対象映像に含まれる符号化対象ブロック内の複数の画素値のうち、前記符号化対象ブロックのパレットに登録された第１画素値を、前記パレットを用いて符号化することで、前記第１画素値の符号化結果を生成し、
前記第１画素値の前記符号化結果から第１局所復号結果を生成し、
前記複数の画素値のうち前記パレットに登録されていない第２画素値を量子化することで、前記第２画素値の量子化結果を生成し、
前記第２画素値の前記量子化結果から第２局所復号結果を生成し、
前記第２局所復号結果に対してフィルタ処理を適用し、
前記第１局所復号結果と、前記第２局所復号結果に対して前記フィルタ処理を適用した結果とを含む、前記符号化対象ブロックの局所復号画像を生成し、
前記第１画素値の前記符号化結果と前記第２画素値の前記量子化結果とを含む符号化映像を出力する、
ことを特徴とする映像符号化方法。
（付記７）
前記映像符号化装置は、前記符号化対象ブロックの前記局所復号画像を参照して、前記符号化対象映像に含まれるブロックの予測符号化を行うことを特徴とする付記６記載の映像符号化方法。
（付記８）
復号対象映像に含まれる復号対象ブロック内の第１画素の符号化結果を、前記復号対象ブロックのパレットを用いて復号することで、前記第１画素の第１画素値を復元し、前記復号対象ブロック内の第２画素の量子化結果を逆量子化することで、前記第２画素の第２画素値を復元するパレット復号部と、
前記第２画素値に対してフィルタ処理を適用し、前記第１画素値と、前記第２画素値に対して前記フィルタ処理を適用した結果とを含む、前記復号対象ブロックの復号画像を生成するフィルタ部と、
前記復号対象ブロックの前記復号画像を含む復号映像を出力する出力部と、
を備えることを特徴とする映像復号装置。
（付記９）
前記復号対象ブロックの前記復号画像を記憶する記憶部と、
前記復号画像を参照して、前記復号対象映像に含まれるブロックの予測復号を行う予測復号部と、
をさらに備えることを特徴とする付記８記載の映像復号装置。
（付記１０）
前記フィルタ処理は、前記復号対象ブロック内におけるエッジの歪みを補正する第１フィルタ処理、又は前記復号対象ブロック内における階調の歪みを補正する第２フィルタ処理であることを特徴とする付記８又は９記載の映像復号装置。
（付記１１）
復号対象映像に含まれる復号対象ブロック内の第１画素の符号化結果を、前記復号対象ブロックのパレットを用いて復号することで、前記第１画素の第１画素値を復元し、
前記復号対象ブロック内の第２画素の量子化結果を逆量子化することで、前記第２画素の第２画素値を復元し、
前記第２画素値に対してフィルタ処理を適用し、
前記第１画素値と、前記第２画素値に対して前記フィルタ処理を適用した結果とを含む、前記復号対象ブロックの復号画像を生成し、
前記復号対象ブロックの前記復号画像を含む復号映像を出力する、
処理をコンピュータに実行させる映像復号プログラム。
（付記１２）
前記コンピュータは、前記復号対象ブロックの前記復号画像を参照して、前記復号対象映像に含まれるブロックの予測復号を行うことを特徴とする付記１１記載の映像復号プログラム。
（付記１３）
映像復号装置が、
復号対象映像に含まれる復号対象ブロック内の第１画素の符号化結果を、前記復号対象ブロックのパレットを用いて復号することで、前記第１画素の第１画素値を復元し、
前記復号対象ブロック内の第２画素の量子化結果を逆量子化することで、前記第２画素の第２画素値を復元し、
前記第２画素値に対してフィルタ処理を適用し、
前記第１画素値と、前記第２画素値に対して前記フィルタ処理を適用した結果とを含む、前記復号対象ブロックの復号画像を生成し、
前記復号対象ブロックの前記復号画像を含む復号映像を出力する、
ことを特徴とする映像復号方法。
（付記１４）
前記映像復号装置は、前記復号対象ブロックの前記復号画像を参照して、前記復号対象映像に含まれるブロックの予測復号を行うことを特徴とする付記１３記載の映像復号方法。
１０１ 画像
１０２ インデックスマップ
１０３ パレット
１１１ 画素
２０１ 処理対象ＣＵ
２０２、２０３ ＣＵ
２１１ 処理対象画素
２１２、２１３ 参照画素
３０１ 映像符号化装置
３１１ パレット符号化部
３１２ フィルタ部
３１３ 出力部
５０１ 映像復号装置
５１１ パレット復号部
５１２ フィルタ部
５１３ 出力部
７０１ 符号化モード決定部
７０２、１００６ フレームメモリ
７０３ 予測符号化部
７０４、１００３ デブロッキングフィルタ部
７０５、７０６、１００４、１００５ ＳＡＯフィルタ部
７０７ エントロピー符号化部
８０１、１１０１ 画素選択部
８０２ バンドオフセット計算部
８０３ エッジオフセット計算部
８０４、１１０２ 画素フィルタ部
８０５、１１０３ 合成部
１００１ エントロピー復号部
１００２ 予測復号部
１６０１ ＣＰＵ
１６０２ メモリ
１６０３ 入力装置
１６０４ 出力装置
１６０５ 補助記憶装置
１６０６ 媒体駆動装置
１６０７ ネットワーク接続装置
１６０８ バス
１６０９ 可搬型記録媒体

Claims (10)

  1. 符号化対象映像に含まれる符号化対象ブロック内の複数の画素値のうち、前記符号化対象ブロックのパレットに登録された第１画素値を、前記パレットを用いて符号化することで、前記第１画素値の符号化結果を生成し、前記複数の画素値のうち前記パレットに登録されていない第２画素値を量子化することで、前記第２画素値の量子化結果を生成し、前記第１画素値の前記符号化結果から第１局所復号結果を生成し、前記第２画素値の前記量子化結果から第２局所復号結果を生成するパレット符号化部と、
    前記第２局所復号結果に対してフィルタ処理を適用し、前記第１局所復号結果と、前記第２局所復号結果に対して前記フィルタ処理を適用した結果とを含む、前記符号化対象ブロックの局所復号画像を生成するフィルタ部と、
    前記第１画素値の前記符号化結果と前記第２画素値の前記量子化結果とを含む符号化映像を出力する出力部と、
    を備えることを特徴とする映像符号化装置。
  2. 前記符号化対象ブロックの前記局所復号画像を記憶する記憶部と、
    前記局所復号画像を参照して、前記符号化対象映像に含まれるブロックの予測符号化を行う予測符号化部と、
    をさらに備えることを特徴とする請求項１記載の映像符号化装置。
  3. 前記フィルタ処理は、前記符号化対象ブロック内におけるエッジの歪みを補正する第１フィルタ処理、又は前記符号化対象ブロック内における階調の歪みを補正する第２フィルタ処理であることを特徴とする請求項１又は２記載の映像符号化装置。
  4. 符号化対象映像に含まれる符号化対象ブロック内の複数の画素値のうち、前記符号化対象ブロックのパレットに登録された第１画素値を、前記パレットを用いて符号化することで、前記第１画素値の符号化結果を生成し、
    前記第１画素値の前記符号化結果から第１局所復号結果を生成し、
    前記複数の画素値のうち前記パレットに登録されていない第２画素値を量子化することで、前記第２画素値の量子化結果を生成し、
    前記第２画素値の前記量子化結果から第２局所復号結果を生成し、
    前記第２局所復号結果に対してフィルタ処理を適用し、
    前記第１局所復号結果と、前記第２局所復号結果に対して前記フィルタ処理を適用した結果とを含む、前記符号化対象ブロックの局所復号画像を生成し、
    前記第１画素値の前記符号化結果と前記第２画素値の前記量子化結果とを含む符号化映像を出力する、
    処理をコンピュータに実行させる映像符号化プログラム。
  5. 映像符号化装置が、
    符号化対象映像に含まれる符号化対象ブロック内の複数の画素値のうち、前記符号化対象ブロックのパレットに登録された第１画素値を、前記パレットを用いて符号化することで、前記第１画素値の符号化結果を生成し、
    前記第１画素値の前記符号化結果から第１局所復号結果を生成し、
    前記複数の画素値のうち前記パレットに登録されていない第２画素値を量子化することで、前記第２画素値の量子化結果を生成し、
    前記第２画素値の前記量子化結果から第２局所復号結果を生成し、
    前記第２局所復号結果に対してフィルタ処理を適用し、
    前記第１局所復号結果と、前記第２局所復号結果に対して前記フィルタ処理を適用した結果とを含む、前記符号化対象ブロックの局所復号画像を生成し、
    前記第１画素値の前記符号化結果と前記第２画素値の前記量子化結果とを含む符号化映像を出力する、
    ことを特徴とする映像符号化方法。
  6. 復号対象映像に含まれる復号対象ブロック内の第１画素の符号化結果を、前記復号対象ブロックのパレットを用いて復号することで、前記第１画素の第１画素値を復元し、前記復号対象ブロック内の第２画素の量子化結果を逆量子化することで、前記第２画素の第２画素値を復元するパレット復号部と、
    前記第２画素値に対してフィルタ処理を適用し、前記第１画素値と、前記第２画素値に対して前記フィルタ処理を適用した結果とを含む、前記復号対象ブロックの復号画像を生成するフィルタ部と、
    前記復号対象ブロックの前記復号画像を含む復号映像を出力する出力部と、
    を備えることを特徴とする映像復号装置。
  7. 前記復号対象ブロックの前記復号画像を記憶する記憶部と、
    前記復号画像を参照して、前記復号対象映像に含まれるブロックの符号化結果に対する予測復号を行う予測復号部と、
    をさらに備えることを特徴とする請求項６記載の映像復号装置。
  8. 前記フィルタ処理は、前記復号対象ブロック内におけるエッジの歪みを補正する第１フィルタ処理、又は前記復号対象ブロック内における階調の歪みを補正する第２フィルタ処理であることを特徴とする請求項６又は７記載の映像復号装置。
  9. 復号対象映像に含まれる復号対象ブロック内の第１画素の符号化結果を、前記復号対象ブロックのパレットを用いて復号することで、前記第１画素の第１画素値を復元し、
    前記復号対象ブロック内の第２画素の量子化結果を逆量子化することで、前記第２画素の第２画素値を復元し、
    前記第２画素値に対してフィルタ処理を適用し、
    前記第１画素値と、前記第２画素値に対して前記フィルタ処理を適用した結果とを含む、前記復号対象ブロックの復号画像を生成し、
    前記復号対象ブロックの前記復号画像を含む復号映像を出力する、
    処理をコンピュータに実行させる映像復号プログラム。
  10. 映像復号装置が、
    復号対象映像に含まれる復号対象ブロック内の第１画素の符号化結果を、前記復号対象ブロックのパレットを用いて復号することで、前記第１画素の第１画素値を復元し、
    前記復号対象ブロック内の第２画素の量子化結果を逆量子化することで、前記第２画素の第２画素値を復元し、
    前記第２画素値に対してフィルタ処理を適用し、
    前記第１画素値と、前記第２画素値に対して前記フィルタ処理を適用した結果とを含む、前記復号対象ブロックの復号画像を生成し、
    前記復号対象ブロックの前記復号画像を含む復号映像を出力する、
    ことを特徴とする映像復号方法。
JP2016250012A 2016-12-22 2016-12-22 映像符号化装置、映像符号化方法、映像復号装置、及び映像復号方法 Pending JP2018107534A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016250012A JP2018107534A (ja) 2016-12-22 2016-12-22 映像符号化装置、映像符号化方法、映像復号装置、及び映像復号方法
US15/816,000 US20180184097A1 (en) 2016-12-22 2017-11-17 Apparatus and method for video coding, apparatus and method for video decoding, and non-transitory computer-readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016250012A JP2018107534A (ja) 2016-12-22 2016-12-22 映像符号化装置、映像符号化方法、映像復号装置、及び映像復号方法

Publications (1)

Publication Number Publication Date
JP2018107534A true JP2018107534A (ja) 2018-07-05

Family

ID=62630601

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016250012A Pending JP2018107534A (ja) 2016-12-22 2016-12-22 映像符号化装置、映像符号化方法、映像復号装置、及び映像復号方法

Country Status (2)

Country Link
US (1) US20180184097A1 (ja)
JP (1) JP2018107534A (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015191838A1 (en) * 2014-06-11 2015-12-17 Qualcomm Incorporated Determining quantization parameter (qp) values and delta qp values for palette coded blocks in video coding
JP2016103804A (ja) * 2014-11-28 2016-06-02 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10356432B2 (en) * 2015-09-14 2019-07-16 Qualcomm Incorporated Palette predictor initialization and merge for video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015191838A1 (en) * 2014-06-11 2015-12-17 Qualcomm Incorporated Determining quantization parameter (qp) values and delta qp values for palette coded blocks in video coding
JP2016103804A (ja) * 2014-11-28 2016-06-02 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JOEL SOLE ET AL.: "Non-CE6: Delta QP signalling for palette", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JCTVC-S0043-r2, JPN6020024068, October 2014 (2014-10-01), pages 1 - 3, ISSN: 0004301655 *
JOEL SOLE ET AL.: "Non-SCCE3: Delta QP signalling in palette mode", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JCTVC-R0237, JPN6020024066, June 2014 (2014-06-01), pages 1 - 3, ISSN: 0004301654 *

Also Published As

Publication number Publication date
US20180184097A1 (en) 2018-06-28

Similar Documents

Publication Publication Date Title
JP7003191B2 (ja) 映像復号化方法および映像符号化方法
KR101894971B1 (ko) 색차 성분 양자화 매개 변수 결정 방법 및 이러한 방법을 사용하는 장치
CN113115047B (zh) 视频编解码方法和设备
EP2829064B1 (en) Parameter determination for exp-golomb residuals binarization for lossless intra hevc coding
US10116962B2 (en) Image coding device, image decoding device, image coding method and image decoding method
KR102584163B1 (ko) 영상 부호화 장치
US20230396781A1 (en) Coding enhancement in cross-component sample adaptive offset
JP6481457B2 (ja) 動画像符号化装置、動画像符号化方法、動画像復号装置、及び動画像復号方法
US20240007662A1 (en) Coding enhancement in cross-component sample adaptive offset
US20230319315A1 (en) Coding enhancement in cross-component sample adaptive offset
WO2022130663A1 (ja) 復号装置、プログラム、及び復号方法
JP2018107534A (ja) 映像符号化装置、映像符号化方法、映像復号装置、及び映像復号方法
US20240137546A1 (en) Coding enhancement in cross-component sample adaptive offset
KR20140048806A (ko) 공간 해상도에 기반한 계층 간 예측 장치 및 방법
JP2023504372A (ja) ジョイントクロマの符号化されたブロックに対するスケーリング処理

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190910

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200625

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200714

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20210202