JP2021508976A - 符号化方法及びその装置、復号方法及びその装置 - Google Patents

符号化方法及びその装置、復号方法及びその装置 Download PDF

Info

Publication number
JP2021508976A
JP2021508976A JP2020535588A JP2020535588A JP2021508976A JP 2021508976 A JP2021508976 A JP 2021508976A JP 2020535588 A JP2020535588 A JP 2020535588A JP 2020535588 A JP2020535588 A JP 2020535588A JP 2021508976 A JP2021508976 A JP 2021508976A
Authority
JP
Japan
Prior art keywords
quantization parameter
block
current
quantization
coding unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020535588A
Other languages
English (en)
Other versions
JP7422075B2 (ja
Inventor
ヤン,ヒチョル
パク,ミンス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2021508976A publication Critical patent/JP2021508976A/ja
Priority to JP2024003796A priority Critical patent/JP2024038376A/ja
Application granted granted Critical
Publication of JP7422075B2 publication Critical patent/JP7422075B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

ブロック分割情報及びブロックサイズ情報のうち少なくとも一つによって決定された現在量子化グループの予測量子化パラメータを決定する段階、現在量子化グループの差分量子化パラメータを決定する段階、現在量子化グループの予測量子化パラメータと差分量子化パラメータとに基づいて、現在量子化グループの量子化パラメータを決定する段階、及び現在量子化グループの量子化パラメータにより、現在量子化グループに含まれた現在ブロックを逆量子化する段階を含む映像復号方法が提供される。

Description

本発明は、映像の符号化方法及び復号方法に係り、さらに具体的には、効率的に動きベクトルについての情報を符号化及び復号する方法に関する。
高画質の映像は、符号化時、多量のデータが要求される。しかし、映像データを伝達するために許容される帯域幅は、限定されており、映像データの伝送時に適用されるデータレートが制限されてしまう。従って、効率的な映像データ伝送のために、画質の劣化を最小化させながら、圧縮率を上昇させた映像データの符号化方法及び復号方法が必要である。
映像データは、ピクセル間の空間的重複性及び時間的重複性を除去することによっても圧縮される。隣接したピクセル間に共通した特徴を有することが一般的であるために、隣接したピクセル間の重複性を除去するために、ピクセルからなるデータ単位で符号化情報が伝送される。
データ単位に含まれたピクセルのピクセル値は直接伝送されず、ピクセル値を獲得するために必要な方法が伝送される。ピクセル値を原本値と類似して予測する予測方法がデータ単位ごとに決定され、予測方法に係わる符号化情報が、符号化器から復号器に伝送される。また、予測値が原本値と完全に同じではないので、原本値と予測値との差に係わるレジデュアルデータが符号化器から復号器に伝送される。
予測が正確になるほど、予測方法特定に必要な符号化情報が増加するが、レジデュアルデータの大きさが低減することになる。従って、符号化情報とレジデュアルデータとの大きさを考慮し、予測方法が決定される。特に、ピクチャから分割されたデータ単位は、多様な大きさを有するが、データ単位が大きいほど、予測の正確度が低下する可能性が高い代わりに、符号化情報が減少することになる。従って、ピクチャの特性に合うようにブロックの大きさが決定される。
また、予測方法には、イントラ予測とインター予測とがある。イントラ予測は、ブロックの周辺ピクセルから、ブロックのピクセルを予測する方法である。インター予測は、ブロックが含まれたピクチャが参照する他のピクチャのピクセルを参照し、ピクセルを予測する方法である。従って、イントラ予測により、空間的重複性が除去され、インター予測により、時間的重複性が除去される。
予測方法の数が増加するほど、予測方法を示すための符号化情報の量は、増加する。従って、ブロックに適用される符号化情報も、他のブロックから予測し、符号化情報の大きさを低減させることができる。
人間の視覚が認知することができない限度において、映像データの損失が許容されるが、レジデュアルデータを、変換過程及び量子化過程により、損失圧縮(lossy compression)し、レジデュアルデータの量を減少させることができる。
ブロック分割情報及びブロックサイズ情報による量子化グループの量子化パラメータ決定を行う映像符号化方法及び映像符号化装置が開示される。また、ブロック分割情報及びブロックサイズ情報による量子化グループの量子化パラメータ決定を行う映像復号方法及び映像復号装置が開示される。
また、現在ブロックの位置及び大きさのうち少なくとも一つに基づく現在ブロックと現在量子化パラメータユニットとのマッチングを行う映像符号化方法及び映像符号化装置が開示される。また、現在ブロックの位置及び大きさのうち少なくとも一つに基づく現在ブロックと現在量子化パラメータユニットとのマッチングを行う映像復号方法及び映像復号装置が開示される。
併せて、本開示の一実施形態による映像符号化方法及び映像復号方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体が開示される。
ブロック分割情報及びブロックサイズ情報のうち少なくとも一つによって決定された現在量子化グループの予測量子化パラメータを決定する段階、前記現在量子化グループの差分量子化パラメータを決定する段階、前記現在量子化グループの前記予測量子化パラメータと前記差分量子化パラメータとに基づき、前記現在量子化グループの量子化パラメータを決定する段階、及び前記現在量子化グループの量子化パラメータにより、前記現在量子化グループに含まれた現在ブロックを逆量子化する段階を含む映像復号方法が提供される。
ブロック分割情報及びブロックサイズ情報のうち少なくとも一つによって決定された現在量子化グループの予測量子化パラメータを決定し、前記現在量子化グループの差分量子化パラメータを決定し、前記現在量子化グループの前記予測量子化パラメータと前記差分量子化パラメータとに基づき、前記現在量子化グループの量子化パラメータを決定し、かつ前記現在量子化グループの量子化パラメータにより、前記現在ブロックを逆量子化するプロセッサを含む映像復号装置が提供される。
現在ブロックの位置、大きさのうち少なくとも一つに基づき、前記現在ブロックを現在量子化パラメータユニットとマッチングさせる段階、前記現在量子化パラメータユニットに係わる予測量子化パラメータを獲得する段階、前記現在量子化パラメータユニットに係わる差分量子化パラメータを獲得する段階、前記予測量子化パラメータ及び前記差分量子化パラメータに基づき、前記現在量子化パラメータユニットの量子化パラメータを決定する段階、並びに前記現在量子化パラメータユニットの量子化パラメータにより、前記現在ブロックを逆量子化する段階を含む映像復号方法が提供される。
現在ブロックの位置、大きさのうち少なくとも一つに基づき、前記現在ブロックを現在量子化パラメータユニットとマッチングさせ、前記現在量子化パラメータユニットに係わる予測量子化パラメータを獲得し、前記現在量子化パラメータユニットに係わる差分量子化パラメータを獲得し、前記予測量子化パラメータ及び前記差分量子化パラメータに基づき、前記現在量子化パラメータユニットの量子化パラメータを決定し、前記現在量子化パラメータユニットの量子化パラメータにより、前記現在ブロックを逆量子化するプロセッサを含む映像復号装置が提供される。
前記映像符号化方法及び前記映像復号方法を遂行するプログラムが記録されたコンピュータに記録可能な記録媒体が提供される。
本実施形態がなる技術的課題は、前述のような技術的課題に限定されるものではなく、以下の実施形態から他の技術的課題が類推されもする。
量子化グループまたは量子化パラメータユニットにより、ブロックの量子化パラメータを決定することにより、量子化パラメータ決定に必要な情報が効率的に圧縮されるのである。
本開示の一実施形態による、ツリー構造による符号化単位に基づく映像符号化装置のブロック図を図示する図である。 一実施形態による、ツリー構造による符号化単位に基づく映像復号装置のブロック図を図示する図である。 一実施形態により、現在符号化単位が分割され、少なくとも1つの符号化単位が決定される過程を図示する図である。 一実施形態により、非正方形の形態である符号化単位が分割され、少なくとも1つの符号化単位が決定される過程を図示する図である。 一実施形態により、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、符号化単位が分割される過程を図示する図である。 一実施形態により、奇数個の符号化単位のうち所定の符号化単位が決定される方法を図示する図である。 一実施形態により、現在符号化単位が分割され、複数個の符号化単位が決定される場合、複数個の符号化単位が処理される順序を図示する図である。 一実施形態により、所定の順序で符号化単位が処理されえない場合、現在符号化単位が奇数個の符号化単位に分割されるように決定される過程を図示する図である。 一実施形態により、第1符号化単位が分割され、少なくとも1つの符号化単位が決定される過程を図示する図である。 一実施形態により、第1符号化単位が分割されて決定された非正方形状の第2符号化単位が、所定の条件を満足する場合、第2符号化単位が分割されうる形態が制限されることを図示する図である。 一実施形態により、分割形態情報が4個の正方形状の符号化単位に分割することを示すことができない場合、正方形状の符号化単位が分割される過程を図示する図である。 一実施形態により、複数個の符号化単位間の処理順序が符号化単位の分割過程によって異なりうることを図示した図である。 一実施形態により、符号化単位が再帰的に分割され、複数個の符号化単位が決定される場合、符号化単位の形態及び大きさが変わることにより、符号化単位の深度が決定される過程を図示する図である。 一実施形態による、符号化単位の形態及び大きさによっても決定される深度、及び符号化単位区分のためのインデックス(PID:part index)を図示する図である。 一実施形態により、ピクチャに含まれる複数個の所定のデータ単位により、複数個の符号化単位が決定されたところを図示する図である。 一実施形態による、ピクチャに含まれる基準符号化単位の決定順序を決定する基準になるプロセッシングブロックを図示する図である。 ブロックの量子化パラメータを決定し、決定された量子化パラメータによってブロックのレジデュアルデータを復号する映像復号装置を示す図である。 量子化グループを、四分木分割回数によって決定する実施形態について説明する図である。 量子化グループを、四分木分割回数によって決定する実施形態について説明する図である。 量子化グループを、四分木分割回数によって決定する実施形態について説明する図である。 量子化グループを、四分木分割回数によって決定する実施形態について説明する図である。 非四分木分割が適用される最大符号化ブロックにおける量子化グループ決定方法の一実施形態を図示する図である。 非四分木分割が適用される最大符号化ブロックにおける量子化グループ決定方法の一実施形態を図示する図である。 非四分木分割が適用される最大符号化ブロックにおける量子化グループ決定方法の一実施形態を図示する図である。 四分木分割と非四分木分割とがいずれも許容される場合、ビットストリームに含まれた差分量子化パラメータを復号する方法についてのシンタックス構造について説明する図である。 量子化グループによってブロックの量子化パラメータを決定し、決定された量子化パラメータによってブロックのレジデュアルデータを復号する映像復号方法を図示する図である。 量子化パラメータユニット構造と符号化ブロックツリー構造との一実施形態を示す図である。 現在ブロックに対応する量子化パラメータユニットを決定する方法を図示する図である。 現在ブロックに対応する量子化パラメータユニットを決定する方法を図示する図である。 ブロックと量子化パラメータユニットとの対応関係を図示する。 ブロックと量子化パラメータユニットとの対応関係を図示する。 量子化パラメータユニットによってブロックの量子化パラメータを決定し、決定された量子化パラメータによってブロックのレジデュアルデータを復号する映像復号方法を図示する図である。
ブロック分割情報及びブロックサイズ情報のうち少なくとも一つによって決定された現在量子化グループの予測量子化パラメータを決定する段階、前記現在量子化グループの差分量子化パラメータを決定する段階、前記現在量子化グループの前記予測量子化パラメータと前記差分量子化パラメータとに基づき、前記現在量子化グループの量子化パラメータを決定する段階、及び前記現在量子化グループの量子化パラメータにより、前記現在量子化グループに含まれた現在ブロックを逆量子化する段階を含む映像復号方法が提供される。そして、前記映像復号方法を遂行するプロセスを含む映像復号装置が提供される。
現在ブロックの位置、大きさのうち少なくとも一つに基づき、前記現在ブロックを現在量子化パラメータユニットとマッチングさせる段階、前記現在量子化パラメータユニットに係わる予測量子化パラメータを獲得する段階、前記現在量子化パラメータユニットに係わる差分量子化パラメータを獲得する段階、前記予測量子化パラメータ及び前記差分量子化パラメータに基づき、前記現在量子化パラメータユニットの量子化パラメータを決定する段階、並びに前記現在量子化パラメータユニットの量子化パラメータにより、前記現在ブロックを逆量子化する段階を含む映像復号方法が提供される。そして、前記映像復号方法を遂行するプロセスを含む映像復号装置が提供される。
開示された実施形態の利点、特徴、及びそれらを達成する方法は、添付される図面と共に後述されている実施形態を参照すれば、明確になるであろう。しかし、本開示は、以下で開示される実施形態に限定されるものではなく、互いに異なる多様な形態にも具現され、ただ、本実施形態は、本開示の開示を完全なものにし、本開示が属する技術分野で当業者に発明の範疇を完全に知らせるために提供されるのみである。
本明細書で使用される用語について簡略に説明し、開示された実施形態について具体的に説明する。
本明細書で使用される用語は、本開示での機能を考慮しながら、可能な限り現在汎用される一般的な用語を選択したが、それは、関連分野に携わる技術者の意図、判例、または新たな技術の出現などによっても異なる。また、特定の場合は、出願人が任意に選定した用語もあり、その場合、当該発明の説明部分において、詳細にその意味を記載する。従って、本開示で使用される用語は、単純な用語の名称ではなく、その用語が有する意味と、本開示の全般にわたる内容とを基に定義されなければならない。
本明細書での単数の表現は、文脈上明白に単数であると特定しない限り、複数の表現を含む。
明細書全体において、ある部分がある構成要素を「含む」とするとき、それは、特別に反対となる記載がない限り、他の構成要素を除くものではなく、他の構成要素をさらに含んでもよいということを意味する。また、明細書で使用される「部」という用語は、ソフトウェア、FPGAまたはASICのようなハードウェア構成要素を意味し、「部」は、ある役割を行う。しかしながら、「部」は、ソフトウェアまたはハードウェアに限定される意味ではない。「部」は、アドレッシングすることができる記録媒体にあるようにも構成され、1またはそれ以上のプロセッサを再生させるようにも構成される。従って、一例として、「部」は、ソフトウェア構成要素、客体指向ソフトウェア構成要素、クラス構成要素及びタスク構成要素のような構成要素、並びにプロセス、関数、属性、プロシージャ、サブルーチン、プログラムコードのセグメント、ドライバ、ファームウェア、マイクロコード、回路、データ、データベース、データ構造、テーブル、アレイ及び変数を含む。構成要素及び「部」において提供される機能は、さらに小数の構成要素及び「部」に結合されるか、あるいは追加的な構成要素と「部」とにさらに分離されもする。
「現在ブロック」は、現在符号化または復号される符号化単位、予測単位及び変換単位のうち一つを意味する。もし、説明の便宜のために、予測単位、変換単位のようなその他種類のブロックを区分する必要がある時は、「現在符号化ブロック」、「現在予測ブロック」、「現在変換ブロック」が使用されもする。また、「下位ブロック」は、「現在ブロック」から分割されたデータ単位を意味する。そして、「上位ブロック」は、「現在ブロック」を含むデータ単位を意味する。
以下、「サンプル」は、映像のサンプリング位置に割り当てられたデータであり、プロセッシング対象になるデータを意味する。例えば、空間領域の映像において、ピクセル値、変換領域上の変換係数がサンプルでもある。そのような少なくとも1つのサンプルを含む単位を、ブロックと定義することができる。
以下では、添付した図面を参照し、本実施形態について、本開示が属する技術分野で当業者が容易に実施することができるように詳細に説明する。そして、図面において、本開示について明確に説明するために、説明と関係ない部分は、省略する。
図1Aは、本開示の一実施形態による、ツリー構造による符号化単位に基づく映像符号化装置100のブロック図を図示する。
映像符号化装置100は、符号化部110、ビットストリーム生成部120を含む。
符号化部110は、最大符号化単位の大きさにより、ピクチャ、またはピクチャに含まれたスライスを、複数の最大符号化単位に分割する。該最大符号化単位は、サイズ32x32,64x64,128x128,256x256のようなデータ単位であり、縦横に大きさが2の自乗である正方形のデータ単位でもある。符号化部110は、最大符号化単位の大きさを示す最大符号化単位サイズ情報をビットストリーム生成部120に提供することができる。そして、ビットストリーム生成部120は、最大符号化単位サイズ情報をビットストリームに含めることができる。
符号化部110は、最大符号化単位を分割して符号化単位を決定する。符号化単位の分割いかんは、率・歪曲最適化(rate-distortion optimization)により、符号化単位の分割が効率的であるか否かということによって決定される。そして、符号化単位が分割されたか否かということを示す分割情報が生成されうる。該分割情報は、フラグ形態にも表現される。
符号化単位は、多様な方法によっても分割される。例えば、正方形の符号化単位は、幅と高さとが半分である4個の正方形の符号化単位にも分割される。該正方形の符号化単位は、幅が半分である2個の長方形の符号化単位にも分割される。該正方形の符号化単位は、高さが半分である2個の長方形の符号化単位にも分割される。該正方形の符号化単位は、幅または高さを1:2:1に分割することにより、3つの符号化単位にも分割される。
幅が高さの2倍である長方形の符号化単位は、2個の正方形の符号化単位にも分割される。幅が高さの2倍である長方形の符号化単位は、2個の幅が高さの4倍である長方形の符号化単位にも分割される。幅が高さの2倍である長方形の符号化単位は、幅を1:2:1に分割することにより、2個の長方形の符号化単位、及び1つの正方形の符号化単位にも分割される。
同様に、高さが幅の2倍である長方形の符号化単位は、2個の正方形の符号化単位にも分割される。また、高さが幅の2倍である長方形の符号化単位は、2個の高さが幅の4倍である長方形の符号化単位にも分割される。同様に、高さが幅の2倍である長方形の符号化単位は、高さを1:2:1に分割することにより、2個の長方形の符号化単位、及び1つの正方形の符号化単位にも分割される。
映像符号化装置100において、2個以上の分割方法が使用可能である場合、映像符号化装置100で使用可能である分割方法のうち、符号化単位にも使用される分割方法についての情報がピクチャごとにも決定される。従って、ピクチャごとに、特定の分割方法だけが使用されるようにも決定される。もし映像符号化装置100が1つの分割方法のみを使用する場合、符号化単位にも使用される分割方法についての情報は、別途に決定されない。
特定サイズの符号化単位については、特定の分割方法によっても分割される。例えば、符号化単位サイズが256x265である場合、符号化単位は、幅と高さとが半分である4個の正方形の符号化単位だけに分割されるようにも設定される。
符号化単位の分割情報が、符号化単位が分割されることを示すとき、符号化単位の分割方法を示す分割形態情報が生成されうる。もし符号化単位が属したピクチャで使用されうる分割方法が一つである場合、分割形態情報は、生成されない。もし分割方法が符号化単位周辺の符号化情報に適応的に決定される場合、分割形態情報は、生成されない。
前述のように、符号化単位の最大サイズにより、現在ピクチャの映像データは、最大符号化単位に分割される。そして、該最大符号化単位は、最大符号化単位から階層的に分割された符号化単位を含んでもよい。上位符号化単位の分割形態により、下位符号化単位の形態と位置とが決定されうる。そして、符号化単位の分割を制限する符号化単位の最小サイズがあらかじめ設定されてもいる。
符号化部110は、符号化単位を階層的に分割したときの符号化効率と、符号化単位を分割していないときの符号化効率とを比較する。そして、符号化部110は、比較結果により、符号化単位を分割するか否かということを決定する。もし符号化単位の分割がさらに効率的であると決定された場合、符号化部110は、符号化単位を階層的に分割する。もし比較結果により、符号化単位を分割しない方が効率的であると決定された場合、符号化単位を分割しない。符号化単位の分割いかんは、隣接した他の符号化単位の分割いかんに独立しても決定される。
最終的に分割された符号化単位は、イントラ予測またはインター予測によっても予測される。該イントラ予測は、予測単位周辺の参照サンプルを利用し、予測単位のサンプルを予測する方法である。該インター予測は、現在ピクチャが参照する参照ピクチャから参照サンプルを獲得し、予測単位のサンプルを予測する方法である。
符号化部110は、イントラ予測のために、複数のイントラ予測方法を予測単位に適用し、最も効率的なイントラ予測方法を選択することができる。該イントラ予測方法には、DCモード、プラナ(planar)モード、垂直モード及び水平モードのような方向性(directional)モードなどが含まれる。
該イントラ予測は、符号化単位周辺の復元サンプルを、参照サンプルとして使用する場合、予測単位ごとにも行われる。しかし、符号化単位内部の復元サンプルが、参照サンプルとして使用される場合、符号化単位内部の参照サンプルの復元が、予測より優先されなければならないので、変換単位の変換順序に、予測単位の予測順序が従属しうる。従って、符号化単位内部の復元サンプルが参照サンプルとして使用される場合、予測単位について、予測単位に対応する変換単位に係わるイントラ予測方法だけが決定され、実質的なイントラ予測は、変換単位ごとにも行われる。
符号化部110は、最適の動きベクトル及び参照ピクチャを決定することにより、最も効率的なインター予測方法を選択することができる。符号化単位決定部120は、インター予測のために、現在符号化単位から、空間的、時間的に隣接する符号化単位から、複数の動きベクトル候補を決定し、そのうち、最も効率的な動きベクトルを、動きベクトルとして決定することができる。同様に、現在符号化単位から、空間的、時間的に隣接する符号化単位から複数の参照ピクチャ候補を決定し、そのうち、最も効率的な参照ピクチャを決定することができる。本実施形態により、参照ピクチャは、現在ピクチャについて、事前に決定された参照ピクチャリストのうちからも決定される。本実施形態により、予測正確性のために、複数の動きベクトル候補のうち最も効率的な動きベクトルを、予測動きベクトルとして決定し、予測動きベクトルを補正し、動きベクトルを決定することができる。該インター予測は、符号化単位内部の予測単位別ごとに並列的にも行わる。
符号化部110は、スキップモードにより、動きベクトル及び参照ピクチャを示す情報のみを獲得し、符号化単位を復元することができる。スキップモードによれば、動きベクトル及び参照ピクチャを示す情報を除き、残差信号を含んだ全ての符号化情報が省略される。残差信号が省略されるので、予測の正確性が非常に高い場合、スキップモードが使用されうる。
予測単位に係わる予測方法によって使用されるパーティションモードが制限されうる。例えば、イントラ予測には、2Nx2N,NxNサイズの予測単位に係わるパーティションモードだけが適用される一方、インター予測には、2Nx2N,2NxN,Nx2N,NxNサイズの予測単位に係わるパーティションモードが適用されうる。また、インター予測のスキップモードには、2Nx2Nサイズの予測単位に係わるパーティションモードだけが適用されうる。映像符号化装置100において、各予測方法について許容されるパーティションモードは、符号化効率によっても変更される。
映像符号化装置100は、符号化単位を基準に変換を行うことができる。映像符号化装置100は、符号化単位に含まれたピクセルに係わる原本値と予測値との差値であるレジデュアルデータを、所定の過程を経て変換させることができる。例えば、映像符号化装置100は、レジデュアルデータに対し、量子化及びDCT/DST変換を介して損失圧縮を行うことができる。または、映像符号化装置100は、レジデュアルデータを量子化なしに無損失圧縮を行うことができる。
結論として、符号化部110は、複数のイントラ予測方法及びインター予測方法のうち、現在符号化単位に最も効率的な予測方法を決定する。そして、符号化部110は、予測結果による符号化効率により、現在符号化単位の予測方法を判断する。同様に、符号化部110は、変換結果による符号化効率により、変換方法を決定することができる。最も効率的な符号化単位の予測方法及び変換方法の決定方式により、最終的に、符号化単位の符号化効率が決定される。符号化部110は、最終的に分割された符号化単位の符号化効率により、最大符号化単位の階層構造を確定する。
符号化部110は、符号化単位の符号化効率性、予測方法の予測効率性などを、ラグランジュ乗数(Lagrangian multiplier)基盤の率・歪曲最適化技法を利用して測定することができる。
符号化部110は、決定された最大符号化単位の階層構造により、符号化単位の分割いかんを示す分割情報を生成することができる。そして、符号化部110は、分割が完了した符号化単位について、予測単位決定のためのパーティションモード情報、及び変換単位決定のための変換単位分割情報を生成することができる。また、符号化部110は、符号化単位の分割方法が2個以上である場合、分割方法を示す分割形態情報を、分割情報と共に生成することができる。そして、符号化部110は、予測単位及び変換単位に使用された予測方法及び変換方法についての情報を生成することができる。
ビットストリーム生成部120は、最大符号化単位の階層構造により、符号化部110が生成した情報を、ビットストリーム形態に出力することができる。
一実施形態による最大符号化単位のツリー構造による符号化単位、予測単位及び変換単位の決定方式については、図3ないし図12を参照して詳細に後述する。
図1Bは、一実施形態による、ツリー構造による符号化単位に基づく映像復号装置150のブロック図を図示する。
映像復号装置150は、受信部160及び復号部170を含む。
一実施形態による映像復号装置150の復号動作のための符号化単位、予測単位、変換単位、各種分割情報というような各種用語の定義は、図1及び映像符号化装置100を参照して説明したところと同一である。また、映像復号装置150の目的が、映像データの復元であるが、映像符号化装置100で使用された多様な符号化方法が、映像復号装置150にも適用される。
受信部160は、符号化された映像に係わるビットストリームを受信してパージングする。復号部170は、パージングされたビットストリームから、最大符号化単位別に、復号に必要な情報を抽出し、復号部170に提供する。復号部170は、現在ピクチャに係わるヘッダ、シーケンスパラメータセットまたはピクチャパラメータセットから、現在ピクチャの符号化単位の最大サイズについての情報を抽出することができる。
また、復号部170は、パージングされたビットストリームから、最大符号化単位別に、ツリー構造による符号化単位に係わる分割情報を抽出する。抽出された分割情報は、復号部170に出力される。復号部170は、最大符号化単位を抽出された分割情報によって分割し、最大符号化単位のツリー構造を決定することができる。
復号部170が抽出した分割情報は、映像符号化装置100により、最小符号化誤差を発生させると決定されたツリー構造に対する分割情報である。従って、映像復号装置150は、最小符号化誤差を発生させる符号化方式によってデータを復号し、映像を復元することができる。
復号部170は、符号化単位に含まれた予測単位及び変換単位のようなデータ単位に係わる分割情報を抽出することができる。例えば、復号部170は、予測単位に係わる最も効率的なパーティションモードについての情報を抽出することができる。そして、復号部170は、変換単位において最も効率的なツリー構造に係わる変換分割情報を抽出することができる。
また、復号部170は、符号化単位から分割された予測単位について、最も効率的な予測方法についての情報を獲得することができる。そして、復号部170は、符号化単位から分割された変換単位について、最も効率的な変換方法についての情報を獲得することができる。
復号部170は、映像符号化装置100のビットストリーム生成部120においてビットストリームを構成する方式により、ビットストリームから情報を抽出する。
復号部170は、分割情報に基づいて、最大符号化単位を最も効率的なツリー構造を有した符号化単位に分割することができる。そして、復号部170は、パーティションモードについての情報により、符号化単位を予測単位に分割することができる。復号部170は、変換分割情報により、符号化単位を変換単位に分割することができる。
復号部170は、予測単位を、予測方法についての情報によって予測することができる。そして、復号部170は、変換単位を変換方法についての情報により、ピクセルの原本値と予測値との差に該当するレジデュアルデータを逆量子化及び逆変換することができる。また、復号部170は、予測単位の予測結果と、変換単位の変換結果とにより、符号化単位のピクセルを復元することができる。
図2は、一実施形態による、映像復号装置150が現在符号化単位を分割し、少なくとも1つの符号化単位を決定する過程を図示する。
一実施形態により、映像復号装置150は、ブロック形態情報を利用し、符号化単位の形態を決定することができ、分割形態情報を利用し、符号化単位がいかなる形態に分割されるかということを決定することができる。すなわち、映像復号装置150が利用するブロック形態情報がいかなるブロック形態を示すかということにより、分割形態情報が示す符号化単位の分割方法が決定されうる。
一実施形態により、映像復号装置150は、現在符号化単位が正方形状であるということを示すブロック形態情報を利用することができる。例えば、映像復号装置150は、分割形態情報により、正方形の符号化単位を分割しないか、垂直に分割するか、水平に分割するか、4個の符号化単位に分割するかというようなことを決定することができる。図2を参照すれば、現在符号化単位200のブロック形態情報が正方形状を示す場合、復号部180は、分割されないことを示す分割形態情報により、現在符号化単位200と同一サイズを有する符号化単位210aを分割しないか、あるいは所定の分割方法を示す分割形態情報に基づいて分割された符号化単位210b,210c,210dなどを決定することができる。
図2を参照すれば、映像復号装置150は、一実施形態により、垂直方向に分割されることを示す分割形態情報に基づいて、現在符号化単位200を垂直方向に分割した2つの符号化単位210bを決定することができる。映像復号装置150は、水平方向に分割されることを示す分割形態情報に基づいて、現在符号化単位200を水平方向に分割した2つの符号化単位210cを決定することができる。映像復号装置150は、垂直方向及び水平方向に分割されることを示す分割形態情報に基づいて、現在符号化単位200を垂直方向及び水平方向に分割した4つの符号化単位210dを決定することができる。ただし、正方形の符号化単位が分割されうる分割形態は、前述の形態に限定して解釈されるものではなく、分割形態情報が示すことができる多様な形態が含まれてもよい。正方形の符号化単位が分割される所定の分割形態は、以下において、多様な実施形態を介して具体的に説明することにする。
図3は、一実施形態により、映像復号装置150が非正方形状である符号化単位を分割し、少なくとも1つの符号化単位を決定する過程を図示する。
一実施形態により、映像復号装置150は、現在符号化単位が非正方形状であるということを示すブロック形態情報を利用することができる。映像復号装置150は、分割形態情報により、非正方形の現在符号化単位を分割しないか、あるいは所定の方法で分割するかということを決定することができる。図3を参照すれば、現在符号化単位300または350のブロック形態情報が非正方形状を示す場合、映像復号装置150は、分割されないことを示す分割形態情報により、現在符号化単位300または350と同一サイズを有する符号化単位310または360を分割しないか、あるいは所定の分割方法を示す分割形態情報に基づいて分割された符号化単位320a,320b,330a,330b,330c,370a,370b,380a,380b,380cを決定することができる。非正方形の符号化単位が分割される所定の分割方法は、以下において、多様な実施形態を介して具体的に説明することにする。
一実施形態により、映像復号装置150は、分割形態情報を利用し、符号化単位が分割される形態を決定することができ、その場合、該分割形態情報は、符号化単位が分割されて生成される少なくとも1つの符号化単位の個数を示すことができる。図3を参照すれば、分割形態情報が2つの符号化単位に、現在符号化単位300または350が分割されることを示す場合、映像復号装置150は、分割形態情報に基づいて、現在符号化単位300または350を分割し、現在符号化単位に含まれる2つの符号化単位320a,320b,または370a,370bを決定することができる。
一実施形態により、映像復号装置150が分割形態情報に基づいて、非正方形状の現在符号化単位300または350を分割する場合、非正方形の現在符号化単位300または350の長辺位置を考慮し、現在符号化単位を分割することができる。例えば、映像復号装置150は、現在符号化単位300または350の形態を考慮し、現在符号化単位300または350の長辺を分割する方向に、現在符号化単位300または350を分割し、複数個の符号化単位を決定することができる。
一実施形態により、分割形態情報が奇数個のブロックに符号化単位を分割することを示す場合、映像復号装置150は、現在符号化単位300または350に含まれる奇数個の符号化単位を決定することができる。例えば、分割形態情報が3個の符号化単位に、現在符号化単位300または350を分割することを示す場合、映像復号装置150は、現在符号化単位300または350を、3個の符号化単位330a,330b,330c,380a,380b,380cに分割することができる。一実施形態により、映像復号装置150は、現在符号化単位300または350に含まれる奇数個の符号化単位を決定することができ、決定された符号化単位の大きさは、いずれもが同一ではない。例えば、決定された奇数個の符号化単位330a,330b,330c,380a,380b,380cのうち、所定符号化単位330bまたは380bの大きさは、他の符号化単位330a,330c,380a,380cとは異なる大きさを有することもできる。すなわち、現在符号化単位300または350が分割されて決定されうる符号化単位は、複数の種類の大きさを有することができる。
一実施形態により、分割形態情報が奇数個のブロックに符号化単位が分割されることを示す場合、映像復号装置150は、現在符号化単位300または350に含まれる奇数個の符号化単位を決定することができ、さらには、映像復号装置150は、分割して生成される奇数個の符号化単位のうち少なくとも1つの符号化単位について、所定制限を置くことができる。図3を参照すれば、映像復号装置150は、現在符号化単位300または350が分割されて生成された3個の符号化単位330a,330b,330c,380a,380b,380cのうち中央に位置する符号化単位330b,380bに対する復号過程を、他の符号化単位330a,330c,380a,380cと異なるようにすることができる。例えば、映像復号装置150は、中央に位置する符号化単位330b,380bについては、他の符号化単位330a,330c,380a,380cと異なり、それ以上分割されないように制限するか、あるいは所定回数だけ分割されるように制限することができる。
図4は、一実施形態により、映像復号装置150がブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、符号化単位を分割する過程を図示する。
一実施形態により、映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、正方形状の第1符号化単位400を、符号化単位に分割するか、あるいは分割しないと決定することができる。一実施形態により、分割形態情報が、水平方向に第1符号化単位400を分割することを示す場合、映像復号装置150は、第1符号化単位400を水平方向に分割し、第2符号化単位410を決定することができる。一実施形態により、利用される第1符号化単位、第2符号化単位、第3符号化単位は、符号化単位間の分割前後関係を理解するために利用された用語である。例えば、第1符号化単位を分割すれば、第2符号化単位が決定され、第2符号化単位が分割されれば、第3符号化単位が決定されうる。以下においては、利用される第1符号化単位、第2符号化単位及び第3符号化単位の関係は、前述の特徴によるものであるとも理解される。
一実施形態により、映像復号装置150は、決定された第2符号化単位410を、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、符号化単位に分割するか、あるいは分割しないと決定することができる。図4を参照すれば、映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、第1符号化単位400を分割し、決定された非正方形状の第2符号化単位410を、少なくとも1つの第3符号化単位420a,420b,420c,420dなどに分割するか、あるいは第2符号化単位410を分割しないのである。映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つを獲得することができ、映像復号装置150は、獲得したブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、第1符号化単位400を分割し、例えば、多様な形態の複数個の第2符号化単位410を分割することができ、第2符号化単位410は、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、第1符号化単位400が分割された方式によっても分割される。一実施形態により、第1符号化単位400が第1符号化単位400に係わるブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、第2符号化単位410に分割された場合、第2符号化単位410も、第2符号化単位410に係わるブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、例えば、第3符号化単位420a,420b,420c,420dなどにも分割される。すなわち、符号化単位は、符号化単位それぞれに係わる分割形態情報及びブロック形態情報のうち少なくとも一つに基づいて、再帰的にも分割される。符号化単位の再帰的分割に利用されうる方法については、多様な実施形態を介して後述することにする。
一実施形態により、映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、第3符号化単位420a,420b,420c,420dなどそれぞれを符号化単位に分割するか、あるいは第2符号化単位410を分割しないと決定することができる。映像復号装置150は、一実施形態により、非正方形状の第2符号化単位410を、奇数個の第3符号化単位420b,420c,420dに分割することができる。映像復号装置150は、奇数個の第3符号化単位420b,420c,420dにおいて、 所定第3符号化単位について、所定制限を置くことができる。例えば、映像復号装置150は、奇数個の第3符号化単位420b,420c,420dのうち真ん中に位置する符号化単位420cについては、それ以上分割されないと制限するか、あるいは設定可能な回数に分割されなければならないと制限することができる。図4を参照すれば、映像復号装置150は、非正方形状の第2符号化単位410に含まれる奇数個の第3符号化単位420b,420c,420dのうち真ん中に位置する符号化単位420cは、それ以上分割されないか、あるいは所定分割形態に分割(例えば、4個の符号化単位だけに分割するか、あるいは第2符号化単位410が分割された形態に対応する形態に分割する)されると制限するか、あるいは所定回数だけに分割(例えば、n回だけ分割される;n>0)すると制限することができる。ただし、真ん中に位置した符号化単位420cに対する前記制限は、単なる実施形態に過ぎないので、前述の実施形態に制限されて解釈されるものではなく、真ん中に位置した符号化単位420cが、異なる符号化単位420b,420dと異なるようにも復号される多様な制限を含むと解釈されなければならない。
一実施形態により、映像復号装置150は、現在符号化単位を分割するために利用されるブロック形態情報及び分割形態情報のうち少なくとも一つを、現在符号化単位内の所定位置で獲得することができる。
一実施形態により、映像復号装置150は、現在符号化単位が所定個数の符号化単位に分割された場合、そのうち1つの符号化単位を選択することができる。複数個の符号化単位のうち一つを選択するための方法は、多様でもあり、そのような方法に係わる説明は、以下の多様な実施形態を介して後述することにする。
一実施形態により、映像復号装置150は、現在符号化単位を、複数個の符号化単位に分割し、所定位置の符号化単位を決定することができる。
図5は、一実施形態により、映像復号装置150が、奇数個の符号化単位のうち所定位置の符号化単位を決定するための方法を図示する。
一実施形態により、映像復号装置150は、奇数個の符号化単位のうち真ん中に位置する符号化単位を決定するために、奇数個の符号化単位それぞれの位置を示す情報を利用することができる。図5を参照すれば、映像復号装置150は、現在符号化単位500を分割し、奇数個の符号化単位520a,520b,520cを決定することができる。映像復号装置150は、奇数個の符号化単位520a,520b,520cの位置についての情報を利用し、真ん中符号化単位520bを決定することができる。例えば、映像復号装置150は、符号化単位520a,520b,520cに含まれる所定サンプルの位置を示す情報に基づいて、符号化単位520a,520b,520cの位置を決定することにより、真ん中に位置する符号化単位520bを決定することができる。具体的には、映像復号装置150は、符号化単位520a,520b,520cの左側上端のサンプル530a,530b,530cの位置を示す情報に基づいて、符号化単位520a,520b,520cの位置を決定することにより、真ん中に位置する符号化単位520bを決定することができる。
一実施形態により、符号化単位520a,520b,520cにそれぞれ含まれる左側上端のサンプル530a,530b,530cの位置を示す情報は、符号化単位520a,520b,520cのピクチャ内での位置または座標についての情報を含んでもよい。一実施形態により、符号化単位520a,520b,520cにそれぞれ含まれる左側上端のサンプル530a,530b,530cの位置を示す情報は、現在符号化単位500に含まれる符号化単位520a,520b,520cの幅または高さを示す情報を含んでもよく、そのような幅または高さは、符号化単位520a,520b,520cのピクチャ内での座標間の差を示す情報に該当する。すなわち、映像復号装置150は、符号化単位520a,520b,520cのピクチャ内での位置または座標についての情報を直接利用するか、あるいは座標間の差値に対応する符号化単位の幅または高さについての情報を利用することにより、真ん中に位置する符号化単位520bを決定することができる。
一実施形態により、上端符号化単位520aの左側上端のサンプル530aの位置を示す情報は、(xa,ya)座標を示すことができ、真ん中符号化単位520bの左側上端のサンプル530bの位置を示す情報は、(xb,yb)座標を示すことができ、下端符号化単位520cの左側上端のサンプル530cの位置を示す情報は、(xc,yc)座標を示すことができる。映像復号装置150は、符号化単位520a,520b,520cにそれぞれ含まれる左側上端のサンプル530a,530b,530cの座標を利用し、真ん中符号化単位520bを決定することができる。例えば、左側上端のサンプル530a,530b,530cの座標を、昇順または降順に整列したとき、真ん中に位置するサンプル530bの座標である(xb,yb)を含む符号化単位520bを、現在符号化単位500が分割されて決定された符号化単位520a,520b,520cのうち真ん中に位置する符号化単位に決定することができる。ただし、左側上端のサンプル530a,530b,530cの位置を示す座標は、ピクチャ内での絶対的な位置を示す座標を示すことができ、さらには、上端符号化単位520aの左側上端のサンプル530aの位置を基準に、真ん中符号化単位520bの左側上端のサンプル530bの相対的位置を示す情報である(dxb,dyb)座標、下端符号化単位520cの左側上端のサンプル530cの相対的位置を示す情報である(dxc,dyc)座標を利用することもできる。また、符号化単位に含まれるサンプルの位置を示す情報として、当該サンプルの座標を利用することにより、所定位置の符号化単位を決定する方法は、前述の方法に限定して解釈されるものではなく、サンプルの座標を利用することができる多様な算術的方法と解釈されなければならない。
一実施形態により、映像復号装置150は、現在符号化単位500を、複数個の符号化単位520a,520b,520cに分割することができ、符号化単位520a,520b,520cのうち、所定基準により、符号化単位を選択することができる。例えば、映像復号装置150は、符号化単位520a,520b,520cにおいて、大きさが異なる符号化単位520bを選択することができる。
一実施形態により、映像復号装置150は、上端符号化単位520aの左側上端のサンプル530aの位置を示す情報である(xa,ya)座標、真ん中符号化単位520bの左側上端のサンプル530bの位置を示す情報である(xb,yb)座標、下端符号化単位520cの左側上端のサンプル530cの位置を示す情報である(xc,yc)座標を利用し、符号化単位520a,520b,520cそれぞれの幅または高さを決定することができる。映像復号装置150は、符号化単位520a,520b,520cの位置を示す座標である(xa,ya)、(xb,yb)、(xc,yc)を利用し、符号化単位520a,520b,520cそれぞれの大きさを決定することができる。
一実施形態により、映像復号装置150は、上端符号化単位520aの幅を、xb−xaと決定することができ、高さをyb−yaと決定することができる。一実施形態により、映像復号装置150は、真ん中符号化単位520bの幅を、xc−xbと決定することができ、高さを、yc−ybと決定することができる。一実施形態により、映像復号装置150は、下端符号化単位の幅または高さは、現在符号化単位の幅または高さと、上端符号化単位520a及び真ん中符号化単位520bの幅及び高さを利用して決定することができる。映像復号装置150は、決定された符号化単位520a,520b,520cの幅及び高さに基づいて、他の符号化単位と異なる大きさを有する符号化単位を決定することができる。図5を参照すれば、映像復号装置150は、上端符号化単位520a及び下端符号化単位520cの大きさと異なる大きさを有する真ん中符号化単位520bを、所定位置の符号化単位と決定することができる。ただし、前述の映像復号装置150が、他の符号化単位と異なる大きさを有する符号化単位を決定する過程は、サンプル座標に基づいて決定される符号化単位の大きさを利用し、所定位置の符号化単位を決定する一実施形態に過ぎないので、所定サンプル座標によって決定される符号化単位の大きさを比較し、所定位置の符号化単位を決定する多様な過程が利用されうる。
ただし、符号化単位の位置を決定するために考慮するサンプルの位置は、前述の左側上端に限定して解釈されるものではなく、符号化単位に含まれる任意のサンプルの位置についての情報が利用されうるとも解釈される。
一実施形態により、映像復号装置150は、現在符号化単位の形態を考慮し、現在符号化単位が分割されて決定される奇数個の符号化単位のうち所定位置の符号化単位を選択することができる。例えば、現在符号化単位が、幅が高さより長い非正方形状であるならば、映像復号装置150は、水平方向に沿って、所定位置の符号化単位を決定することができる。すなわち、映像復号装置150は、水平方向に位置を異にする符号化単位のうち一つを決定し、当該符号化単位に係わる制限を置くことができる。現在符号化単位が、高さが幅より長い非正方形状であるならば、映像復号装置150は、垂直方向に沿って、所定位置の符号化単位を決定することができる。すなわち、映像復号装置150は、垂直方向に位置を異にする符号化単位のうち一つを決定し、当該符号化単位に係わる制限を置くことができる。
一実施形態により、映像復号装置150は、偶数個の符号化単位のうち所定位置の符号化単位を決定するために、偶数個の符号化単位それぞれの位置を示す情報を利用することができる。映像復号装置150は、現在符号化単位を分割し、偶数個の符号化単位を決定することができ、偶数個の符号化単位の位置についての情報を利用し、所定位置の符号化単位を決定することができる。それに係わる具体的な過程は、図5で説明した奇数個の符号化単位のうち所定位置(例えば、真ん中位置)の符号化単位を決定する過程に対応する過程でもあるので、省略する。
一実施形態により、非正方形状の現在符号化単位を、複数個の符号化単位に分割した場合、複数個の符号化単位のうち所定位置の符号化単位を決定するために、分割過程において、所定位置の符号化単位に係わる所定情報を利用することができる。例えば、映像復号装置150は、現在符号化単位が複数個に分割された符号化単位のうち、真ん中に位置する符号化単位を決定するために、分割過程において、真ん中符号化単位に含まれたサンプルに保存されたブロック形態情報及び分割形態情報のうち少なくとも一つを利用することができる。
図5を参照すれば、映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、現在符号化単位500を、複数個の符号化単位520a,520b,520cに分割することができ、複数個の符号化単位520a,520b,520cのうち真ん中に位置する符号化単位520bを決定することができる。さらには、映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つが獲得される位置を考慮し、真ん中に位置する符号化単位520bを決定することができる。すなわち、現在符号化単位500のブロック形態情報及び分割形態情報のうち少なくとも一つは、現在符号化単位500の真ん中に位置するサンプル540から獲得され、前記ブロック形態情報及び前記分割形態情報のうち少なくとも一つに基づいて、現在符号化単位500が、複数個の符号化単位520a,520b,520cに分割された場合、前記サンプル540を含む符号化単位520bを、真ん中に位置する符号化単位と決定することができる。ただし、真ん中に位置する符号化単位と決定するために利用される情報が、ブロック形態情報及び分割形態情報のうち少なくとも一つに限定して解釈されるものではなく、多種の情報が、真ん中に位置する符号化単位を決定する過程でも利用される。
一実施形態により、所定位置の符号化単位を識別するための所定情報は、決定しようとする符号化単位に含まれる所定サンプルから獲得されうる。図5を参照すれば、映像復号装置150は、現在符号化単位500が分割されて決定された複数個の符号化単位520a,520b,520cのうち、所定位置の符号化単位(例えば、複数個に分割された符号化単位のうち、真ん中に位置する符号化単位)を決定するために、現在符号化単位500内の所定位置のサンプル(例えば、現在符号化単位500の真ん中に位置するサンプル)から獲得されるブロック形態情報及び分割形態情報のうち少なくとも一つを利用することができる。すなわち、映像復号装置150は、現在符号化単位500のブロック形態を考慮し、前記所定位置のサンプルを決定することができ、映像復号装置150は、現在符号化単位500が分割されて決定される複数個の符号化単位520a,520b,520cにおいて、所定情報(例えば、ブロック形態情報及び分割形態情報のうち少なくとも一つ)が獲得されうるサンプルが含まれた符号化単位520bを決定し、所定制限を置くことができる。図5を参照すれば、一実施形態により、映像復号装置150は、所定情報が獲得されうるサンプルとして、現在符号化単位500の真ん中に位置するサンプル540を決定することができ、映像復号装置150は、そのようなサンプル540が含まれる符号化単位520bに対し、復号過程での所定制限を置くことができる。ただし、所定情報が獲得されうるサンプルの位置は、前述の位置に限定して解釈されるものではなく、制限を置くために決定しようとする符号化単位520bに含まれる任意の位置のサンプルとも解釈される。
一実施形態により、所定情報が獲得されうるサンプルの位置は、現在符号化単位500の形態によっても決定される。一実施形態により、ブロック形態情報は、現在符号化単位の形態が正方形であるか、あるいは非正方形であるかということを決定することができ、形態により、所定情報が獲得されうるサンプルの位置を決定することができる。例えば、映像復号装置150は、現在符号化単位の幅についての情報、及び高さについての情報のうち少なくとも一つを利用し、現在符号化単位の幅及び高さのうち少なくとも一つを半分に分割する境界上に位置するサンプルを、所定情報が獲得されうるサンプルと決定することができる。また、他の例を挙げれば、映像復号装置150は、現在符号化単位に係わるブロック形態情報が非正方形状であるということを示す場合、現在符号化単位の長辺を半分に分割する境界に隣接するサンプルのうち一つを、所定情報が獲得されうるサンプルと決定することができる。
一実施形態により、映像復号装置150は、現在符号化単位を複数個の符号化単位に分割した場合、複数個の符号化単位のうち所定位置の符号化単位を決定するために、ブロック形態情報及び分割形態情報のうち少なくとも一つを利用することができる。一実施形態により、映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つを、符号化単位に含まれた所定位置のサンプルから獲得することができ、映像復号装置150は、現在符号化単位が分割されて生成された複数個の符号化単位を、複数個の符号化単位それぞれに含まれた所定位置のサンプルから獲得される分割形態情報及びブロック形態情報のうち少なくとも一つを利用し、分割することができる。すなわち、符号化単位は、符号化単位それぞれに含まれた所定位置のサンプルから獲得されるブロック形態情報及び分割形態情報のうち少なくとも一つを利用し、再帰的にも分割される。符号化単位の再帰的分割過程については、図4を介して説明したので、詳細な説明は、省略する。
一実施形態により、映像復号装置150は、現在符号化単位を分割し、少なくとも1つの符号化単位を決定することができ、そのような少なくとも1つの符号化単位が復号される順序を、所定ブロック(例えば、現在符号化単位)によって決定することができる。
図6は、一実施形態により、映像復号装置150が現在符号化単位を分割し、複数個の符号化単位を決定する場合、複数個の符号化単位が処理される順序を図示する。
一実施形態により、映像復号装置150は、ブロック形態情報及び分割形態情報により、第1符号化単位600を垂直方向に分割し、第2符号化単位610a,610bを決定するか、第1符号化単位600を水平方向に分割し、第2符号化単位630a,630bを決定するか、あるいは第1符号化単位600を垂直方向及び水平方向に分割し、第2符号化単位650a,650b,650c,650dを決定することができる。
図6を参照すれば、映像復号装置150は、第1符号化単位600を垂直方向に分割して決定された第2符号化単位610a,610bが水平方向610cに処理されるように、順序を決定することができる。映像復号装置150は、第1符号化単位600を水平方向に分割して決定された第2符号化単位630a,630bの処理順序を、垂直方向630cに決定することができる。映像復号装置150は、第1符号化単位600を垂直方向及び水平方向に分割して決定された第2符号化単位650a,650b,650c,650dを、1行に位置する符号化単位が処理された後、次の行に位置する符号化単位が処理される所定順序(例えば、ラスタースキャン順序(raster scan orderまたはzスキャン順序(z scan order)650eなどによって決定することができる。
一実施形態により、映像復号装置150は、符号化単位を再帰的に分割することができる。図6を参照すれば、映像復号装置150は、第1符号化単位600を分割し、複数個の符号化単位610a,610b,630a,630b,650a,650b,650c,650dを決定することができ、決定された複数個の符号化単位610a,610b,630a,630b,650a,650b,650c,650dそれぞれを再帰的に分割することができる。複数個の符号化単位610a,610b,630a,630b,650a,650b,650c,650dを分割する方法は、第1符号化単位600を分割する方法に対応する方法にもなる。それにより、複数個の符号化単位610a,610b,630a,630b,650a,650b,650c,650dは、それぞれ独立して、複数個の符号化単位にも分割される。図6を参照すれば、映像復号装置150は、第1符号化単位600を垂直方向に分割し、第2符号化単位610a,610bを決定することができ、さらには、第2符号化単位610a,610bそれぞれを独立して分割するか、あるいは分割しないと決定することができる。
一実施形態により、映像復号装置150は、左側の第2符号化単位610aを水平方向に分割し、第3符号化単位620a,620bに分割することができ、右側の第2符号化単位610bは、分割しない。
一実施形態により、符号化単位の処理順序は、符号化単位の分割過程に基づいても決定される。言い換えれば、分割された符号化単位の処理順序は、分割される直前の符号化単位の処理順序に基づいても決定される。映像復号装置150は、左側の第2符号化単位610aが分割されて決定された第3符号化単位620a,620bが処理される順序を、右側の第2符号化単位610bと独立して決定することができる。左側の第2符号化単位610aが水平方向に分割され、第3符号化単位620a,620bが決定されたので、第3符号化単位620a,620bは、垂直方向620cにも処理される。また、左側の第2符号化単位610a及び右側の第2符号化単位610bが処理される順序は、水平方向610cに該当するので、左側の第2符号化単位610aに含まれる第3符号化単位620a,620bが垂直方向620cに処理された後、右側符号化単位610bが処理されうる。前述の内容は、符号化単位が、それぞれ分割前の符号化単位によって処理順序が決定される過程について説明するためのものであるので、前述の実施形態に限定して解釈されるものではなく、多様な形態に分割されて決定される符号化単位が、所定順序によって独立して処理されうる多様な方法に利用されると解釈されなければならない。
図7は、一実施形態により、映像復号装置150が、所定順序符号化単位が処理されえない場合、現在符号化単位が、奇数個の符号化単位に分割されるということを決定する過程を図示する。
一実施形態により、映像復号装置150は、獲得されたブロック形態情報及び分割形態情報に基づいて、現在符号化単位が、奇数個の符号化単位に分割されることを決定することができる。図7を参照すれば、正方形状の第1符号化単位700が、非正方形状の第2符号化単位710a,710bにも分割され、第2符号化単位710a,710bは、それぞれ独立して、第3符号化単位720a,720b,720c,720d,720eにも分割される。一実施形態により、映像復号装置150は、第2符号化単位のうち左側符号化単位710aは、水平方向に分割し、複数個の第3符号化単位720a,720bを決定することができ、右側符号化単位710bは、奇数個の第3符号化単位720c,720d,720eに分割することができる。
一実施形態により、映像復号装置150は、第3符号化単位720a,720b,720c,720d,720eが所定順序によっても処理されるか否かということを判断し、奇数個に分割された符号化単位が存在するか否かということを決定することができる。図7を参照すれば、映像復号装置150は、第1符号化単位700を再帰的に分割し、第3符号化単位720a,720b,720c,720d,720eを決定することができる。映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づき、第1符号化単位700、第2符号化単位710a,710bまたは第3符号化単位720a,720b,720c,720d,720eが分割される形態のうち奇数個の符号化単位に分割されるか否かということを決定することができる。例えば、第2符号化単位710a,710bのうち、右側に位置する符号化単位が、奇数個の第3符号化単位720c,720d,720eにも分割される。第1符号化単位700に含まれる複数個の符号化単位が処理される順序は、所定順序(例えば、zスキャン順序(z−scan order)730)にもなり、映像復号装置150は、右側第2符号化単位710bが奇数個に分割されて決定された第3符号化単位720c,720d,720eが、前記所定順序によって処理されうる条件を満足するか否かということを判断することができる。
一実施形態により、映像復号装置150は、第1符号化単位700に含まれる第3符号化単位720a,720b,720c,720d,720eが、所定順序によって処理されうる条件を満足するか否かということを決定することができ、前記条件は、第3符号化単位720a,720b,720c,720d,720eの境界に沿って、第2符号化単位710a,710bの幅及び高さのうち少なくとも一つが半分に分割されるか否かということと係わる。例えば、非正方形状の左側第2符号化単位710aの高さを半分に分割して決定される第3符号化単位720a,720bは、条件を満足するが、右側第2符号化単位710bを3個の符号化単位に分割して決定される第3符号化単位720c,720d,720eの境界が、右側第2符号化単位710bの幅または高さを半分に分割することができないので、第3符号化単位720c,720d,720eは、条件を満足することができないと決定され、映像復号装置150は、そのような条件不満足の場合、スキャン順序の断絶(disconnection)と判断し、該判断結果に基づいて、右側第2符号化単位710bは、奇数個の符号化単位に分割されるように決定することができる。一実施形態により、映像復号装置150は、奇数個の符号化単位に分割される場合、分割された符号化単位のうち所定位置の符号化単位について、所定制限を置くことができ、そのような制限内容または所定位置などについては、多様な実施形態を介して説明したので、詳細な説明は、省略する。
図8は、一実施形態により、映像復号装置150が、第1符号化単位800を分割し、少なくとも1つの符号化単位を決定する過程を図示する。一実施形態により、映像復号装置150は、受信部160を介して獲得したブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、第1符号化単位800を分割することができる。正方形状の第1符号化単位800は、4個の正方形状を有する符号化単位に分割されるか、あるいは非正方形状の複数個の符号化単位に分割することができる。例えば、図8を参照すれば、ブロック形態情報が、第1符号化単位800は、正方形であることを示し、分割形態情報が非正方形の符号化単位に分割されることを示す場合、映像復号装置150は、第1符号化単位800を複数個の非正方形の符号化単位に分割することができる。具体的には、分割形態情報が、第1符号化単位800を水平方向または垂直方向に分割し、奇数個の符号化単位を決定することを示す場合、映像復号装置150は、正方形状の第1符号化単位800を、奇数個の符号化単位として垂直方向に分割されて決定された第2符号化単位810a,810b,810c、または水平方向に分割されて決定された第2符号化単位820a,820b,820cに分割することができる。
一実施形態により、映像復号装置150は、第1符号化単位800に含まれる第2符号化単位810a,810b,810c,820a,820b,820cが、所定順序によって処理されうる条件を満足するか否かということを決定することができ、前記条件は、第2符号化単位810a,810b,810c,820a,820b,820cの境界に沿って、第1符号化単位800の幅及び高さのうち少なくとも一つが半分に分割されるか否かということと係わる。図8を参照すれば、正方形状の第1符号化単位800を垂直方向に分割して決定される第2符号化単位810a,810b,810cの境界が、第1符号化単位800の幅を半分に分割することができないので、第1符号化単位800は、所定順序によって処理されうる条件を満足することができないとも決定される。また、正方形状の第1符号化単位800を水平方向に分割して決定される第2符号化単位820a,820b,820cの境界が、第1符号化単位800の幅を半分に分割することができないので、第1符号化単位800は、所定順序によって処理されうる条件を満足することができないとも決定される。映像復号装置150は、そのような条件不満足の場合、スキャン順序の断絶と判断し、判断結果に基づいて、第1符号化単位800は、奇数個の符号化単位に分割されるように決定することができる。一実施形態により、映像復号装置150は、奇数個の符号化単位に分割される場合、分割された符号化単位のうち所定位置の符号化単位について、所定制限を置くことができ、そのような制限内容または所定位置などについては、多様な実施形態を介して説明したので、詳細な説明は、省略する。
一実施形態により、映像復号装置150は、第1符号化単位を分割し、多様な形態の符号化単位を決定することができる。
図8を参照すれば、映像復号装置150は、正方形状の第1符号化単位800、非正方形状の第1符号化単位830または850を多様な形態の符号化単位に分割することができる。
図9は、一実施形態により、映像復号装置150が、第1符号化単位900が分割されて決定された非正方形状の第2符号化単位が、所定条件を満足する場合、第2符号化単位が分割されうる形態が制限されることを図示する。
一実施形態により、映像復号装置150は、受信部160を介して獲得したブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、正方形状の第1符号化単位900を、非正方形状の第2符号化単位910a,910b,920a,920bに分割すると決定することができる。第2符号化単位910a,910b,920a,920bは、独立しても分割される。それにより、映像復号装置150は、第2符号化単位910a,910b,920a,920bそれぞれに係わるブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、複数個の符号化単位に分割するか、あるいは分割しないと決定することができる。一実施形態により、映像復号装置150は、垂直方向に第1符号化単位900が分割されて決定された非正方形状の左側第2符号化単位910aを水平方向に分割し、第3符号化単位912a,912bを決定することができる。ただし、映像復号装置150は、左側第2符号化単位910aを水平方向に分割した場合、右側第2符号化単位910bは、左側第2符号化単位910aが分割された方向と同一水平方向に分割されえないように制限することができる。もし右側第2符号化単位910bが同一方向に分割され、第3符号化単位914a,914bが決定された場合、左側第2符号化単位910a及び右側第2符号化単位910bが、水平方向にそれぞれ独立して分割されることにより、第3符号化単位912a,912b,914a,914bが決定されうる。しかし、それは、映像復号装置150が、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、第1符号化単位900を4個の正方形状の第2符号化単位930a,930b,930c,930dに分割したところと同一結果であり、それは、映像復号側面において非効率的なものである。
一実施形態により、映像復号装置150は、水平方向に第1符号化単位330が分割されて決定された非正方形状の第2符号化単位920aまたは920bを垂直方向に分割し、第3符号化単位922a,922b,924a,924bを決定することができる。ただし、映像復号装置150は、第2符号化単位のうち一つ(例えば、上端第2符号化単位920a)を垂直方向に分割した場合、前述の理由により、他の第2符号化単位(例えば、下端符号化単位920b)は、上端第2符号化単位920aが分割された方向と同一垂直方向に分割されえないように制限することができる。
図10は、一実施形態により、分割形態情報が4個の正方形状の符号化単位に分割することを示すことができない場合、映像復号装置150が、正方形状の符号化単位を分割する過程を図示する。
一実施形態により、映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、第1符号化単位1000を分割し、第2符号化単位1010a,1010b,1020a,1020bなどを決定することができる。分割形態情報には、符号化単位が分割されうる多様な形態についての情報が含まれてもよいが、多様な形態についての情報には、正方形状の4個の符号化単位に分割するための情報が含まれえない場合がある。そのような分割形態情報によれば、映像復号装置150は、正方形状の第1符号化単位1000を、4個の正方形状の第2符号化単位1030a,1030b,1030c,1030dに分割することができない。分割形態情報に基づいて、映像復号装置150は、非正方形状の第2符号化単位1010a,1010b,1020a,1020bなどを決定することができる。
一実施形態により、映像復号装置150は、非正方形状の第2符号化単位1010a,1010b,1020a,1020bなどをそれぞれ独立して分割することができる。再帰的な方法を介して、第2符号化単位1010a,1010b,1020a,1020bなどそれぞれが、所定順にも分割され、それは、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、第1符号化単位1000が分割される方法に対応する分割方法でもある。
例えば、映像復号装置150は、左側第2符号化単位1010aが水平方向に分割され、正方形状の第3符号化単位1012a,1012bを決定することができ、右側第2符号化単位1010bが水平方向に分割され、正方形状の第3符号化単位1014a,1014bを決定することができる。さらには、映像復号装置150は、左側第2符号化単位1010a及び右側第2符号化単位1010bのいずれもが水平方向に分割され、正方形状の第3符号化単位1016a,1016b,1016c,1016dを決定することもできる。そのような場合、第1符号化単位1000が、4個の正方形状の第2符号化単位1030a,1030b,1030c,1030dに分割されたところと同一形態に符号化単位が決定されうる。
他の例を挙げれば、映像復号装置150は、上端第2符号化単位1020aが垂直方向に分割され、正方形状の第3符号化単位1022a,1022bを決定することができ、下端第2符号化単位1020bが垂直方向に分割され、正方形状の第3符号化単位1024a,1024bを決定することができる。さらには、映像復号装置150は、上端第2符号化単位1020a及び下端第2符号化単位1020のbのいずれもが垂直方向に分割され、正方形状の第3符号化単位1022a,1022b,1024a,1024bを決定することもできる。そのような場合、第1符号化単位1000が、4個の正方形状の第2符号化単位1030a,1030b,1030c,1030dに分割されたところと同一形態で符号化単位が決定されうる。
図11は、一実施形態により、複数個の符号化単位間の処理順序が、符号化単位の分割過程によって異なりうることを図示したものである。
一実施形態により、映像復号装置150は、ブロック形態情報及び分割形態情報に基づいて、第1符号化単位1100を分割することができる。ブロック形態情報が正方形状を示し、分割形態情報が、第1符号化単位1100が水平方向及び垂直方向のうち少なくとも1つの方向に分割されることを示す場合、映像復号装置150は、第1符号化単位1100を分割し、例えば、第2符号化単位1110a,1110b,1120a,1120b,1130a,1130b,1130c,1130dなどを決定することができる。図11を参照すれば、第1符号化単位1100が、水平方向または垂直方向だけに分割されて決定された非正方形状の第2符号化単位1110a,1110b,1120a,1120bは、それぞれに係わるブロック形態情報及び分割形態情報に基づいて、独立しても分割される。例えば、映像復号装置150は、第1符号化単位1100が垂直方向に分割されて生成された第2符号化単位1110a,1110bを水平方向にそれぞれ分割し、第3符号化単位1116a,1116b,1116c,1116dを決定することができ、第1符号化単位1100が水平方向に分割されて生成された第2符号化単位1120a,1120bを、水平方向にそれぞれ分割し、第3符号化単位1126a,1126b,1126c,1126dを決定することができる。そのような第2符号化単位1110a,1110b,1120a,1120bの分割過程は、図9と係わって説明したので、詳細な説明は、省略する。
一実施形態により、映像復号装置150は、所定順序により、符号化単位を処理することができる。所定順序による符号化単位の処理に係わる特徴は、図6と係わって説明したので、詳細な説明は、省略する。図11を参照すれば、映像復号装置150は、正方形状の第1符号化単位1100を分割し、4個の正方形状の第3符号化単位1116a,1116b,1116c,1116d,1126a,1126b,1126c,1126dを決定することができる。一実施形態により、映像復号装置150は、第1符号化単位1100が分割される形態により、第3符号化単位1116a,1116b,1116c,1116d,1126a,1126b,1126c,1126dの処理順序を決定することができる。
一実施形態により、映像復号装置150は、垂直方向に分割されて生成された第2符号化単位1110a,1110bを水平方向にそれぞれ分割し、第3符号化単位1116a,1116b,1116c,1116dを決定することができ、映像復号装置150は、左側第2符号化単位1110aに含まれる第3符号化単位1116a,1116bを垂直方向にまず処理した後、右側第2符号化単位1110bに含まれる第3符号化単位1116c,1116dを垂直方向に処理する順序(1117)により、第3符号化単位1116a,1116b,1116c,1116dを処理することができる。
一実施形態により、映像復号装置150は、水平方向に分割されて生成された第2符号化単位1120a,1120bを垂直方向にそれぞれ分割し、第3符号化単位1126a,1126b,1126c,1126dを決定することができ、映像復号装置150は、上端第2符号化単位1120aに含まれる第3符号化単位1126a,1126bを水平方向にまず処理した後、下端第2符号化単位1120bに含まれる第3符号化単位1126c,1126dを水平方向に処理する順序(1127)により、第3符号化単位1126a,1126b,1126c,1126dを処理することができる。
図11を参照すれば、第2符号化単位1110a,1110b,1120a,1120bがそれぞれ分割され、正方形状の第3符号化単位1116a,1116b,1116c,1116d,1126a,1126b,1126c,1126dが決定されうる。垂直方向に分割されて決定された第2符号化単位1110a,1110b、及び水平方向に分割されて決定された第2符号化単位1120a,1120bは、互いに異なる形態に分割されたものであるが、以後に決定される第3符号化単位1116a,1116b,1116c,1116d,1126a,1126b,1126c,1126dによれば、結局、同一形態の符号化単位において、第1符号化単位1100が分割された結果になる。それにより、映像復号装置150は、ブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて、異なる過程を介して、再帰的に符号化単位を分割することにより、結果として、同一形態の符号化単位を決定しても、同一形態に決定された複数個の符号化単位を互いに異なる順序で処理することができる。
図12は、一実施形態により、符号化単位が再帰的に分割され、複数個の符号化単位が決定される場合、符号化単位の形態及び大きさが変わることにより、符号化単位深度が決定される過程を図示する。
一実施形態により、映像復号装置150は、符号化単位の深度を,所定基準によって決定することができる。例えば、所定基準は、符号化単位の長辺長にもなる。映像復号装置150は、現在符号化単位の長辺長が分割される前の符号化単位の長辺長より、2(n>0)倍に分割された場合、現在符号化単位の深度は、分割される前の符号化単位の深度よりnほど深度が増大したと決定することができる。以下においては、深度が増大された符号化単位を下位深度の符号化単位と表現することにする。
図12を参照すれば、一実施形態により、正方形状であるということを示すブロック形態情報(例えば、ブロック形態情報は、「0:SQUARE」を示すことができる)に基づいて、映像復号装置150は、正方形状である第1符号化単位1200を分割し、下位深度の第2符号化単位1202、第3符号化単位1204などを決定することができる。正方形状の第1符号化単位1200の大きさを2Nx2Nとするならば、第1符号化単位1200の幅及び高さを1/2倍に分割して決定された第2符号化単位1202は、NxNの大きさを有することができる。さらには、第2符号化単位1202の幅及び高さを1/2サイズに分割して決定された第3符号化単位1204は、N/2xN/2の大きさを有することができる。その場合、第3符号化単位1204の幅及び高さは、第1符号化単位1200の1/2倍に該当する。第1符号化単位1200の深度がDである場合、第1符号化単位1200の幅及び高さの1/2倍である第2符号化単位1202の深度は、D+1でもあり、第1符号化単位1200の幅及び高さの1/2倍である第3符号化単位1204の深度は、D+2でもある。
一実施形態により、非正方形状を示すブロック形態情報(例えば、ブロック形態情報は、高さが幅より大きい非正方形であるということを示す「1:NS_VER」、または幅が高さより大きい非正方形であるということを示す「2:NS_HOR」を示すことができる)に基づき、映像復号装置150は、非正方形状である第1符号化単位1210または1220を分割し、下位深度の第2符号化単位1212または1222、第3符号化単位1214または1224などを決定することができる。
映像復号装置150は、Nx2Nサイズの第1符号化単位1210の幅及び高さのうち少なくとも一つを分割し、例えば、第2符号化単位1202,1212,1222などを決定することができる。すなわち、映像復号装置150は、第1符号化単位1210を水平方向に分割し、NxNサイズの第2符号化単位1202、またはNxN/2サイズの第2符号化単位1222を決定することができ、水平方向及び垂直方向に分割し、N/2xNサイズの第2符号化単位1212を決定することもできる。
一実施形態により、映像復号装置150は、2NxNサイズの第1符号化単位1220の幅及び高さのうち少なくとも一つを分割し、例えば、第2符号化単位1202,1212,1222などを決定することもできる。すなわち、映像復号装置150は、第1符号化単位1220を垂直方向に分割し、NxNサイズの第2符号化単位1202、またはN/2xNサイズの第2符号化単位1212を決定することができ、水平方向及び垂直方向に分割し、NxN/2サイズの第2符号化単位1222を決定することもできる。
一実施形態により、映像復号装置150は、NxNサイズの第2符号化単位1202の幅及び高さのうち少なくとも一つを分割し、例えば、第3符号化単位1204,1214,1224などを決定することもできる。すなわち、映像復号装置150は、第2符号化単位1202を垂直方向及び水平方向に分割し、N/2xN/2サイズの第3符号化単位1204を決定するか、N/2xN/2サイズの第3符号化単位1214を決定するか、あるいはN/2xN/2サイズの第3符号化単位1224を決定することができる。
一実施形態により、映像復号装置150は、N/2xNサイズの第2符号化単位1212の幅及び高さのうち少なくとも一つを分割し、例えば、第3符号化単位1204,1214,1224などを決定することもできる。すなわち、映像復号装置150は、第2符号化単位1212を水平方向に分割し、N/2xN/2サイズの第3符号化単位1204、またはN/2xN/2サイズの第3符号化単位1224を決定するか、あるいは垂直方向及び水平方向に分割し、N/2xN/2サイズの第3符号化単位1214を決定することができる。
一実施形態により、映像復号装置150は、NxN/2サイズの第2符号化単位1214の幅及び高さのうち少なくとも一つを分割し、例えば、第3符号化単位1204,1214,1224などを決定することもできる。すなわち、映像復号装置150は、第2符号化単位1212を垂直方向に分割し、N/2xN/2サイズの第3符号化単位1204、またはN/2xN/2サイズの第3符号化単位1214を決定するか、あるいは垂直方向及び水平方向に分割し、N/2xN/2サイズの第3符号化単位1224を決定することができる。
一実施形態により、映像復号装置150は、例えば、正方形状の符号化単位1200,1202,1204を、水平方向または垂直方向に分割することができる。例えば、2Nx2Nサイズの第1符号化単位1200を垂直方向に分割し、Nx2Nサイズの第1符号化単位1210を決定するか、あるいは水平方向に分割し、2NxNサイズの第1符号化単位1220を決定することができる。一実施形態により、深度が符号化単位の最長辺長に基づいて決定される場合、2Nx2Nサイズの第1符号化単位1200,1202または1204が、水平方向または垂直方向に分割されて決定される符号化単位の深度は、第1符号化単位1200,1202または1204の深度と同一でもある。
一実施形態により、第3符号化単位1214または1224の幅及び高さは、第1符号化単位1210または1220の1/2倍に該当する。第1符号化単位1210または1220の深度がDである場合、第1符号化単位1210または1220の幅及び高さの1/2倍である第2符号化単位1212または1214の深度は、D+1でもあり、第1符号化単位1210または1220の幅及び高さの1/2倍である第3符号化単位1214または1224の深度は、D+2でもある。
図13は、一実施形態により、符号化単位の形態及び大きさによっても決定される深度、及び符号化単位区分のためのインデックス(PID:part index)を図示する。
一実施形態により、映像復号装置150は、正方形状の第1符号化単位1300を分割し、多様な形態の第2符号化単位を決定することができる。図13を参照すれば、映像復号装置150は、分割形態情報により、第1符号化単位1300を垂直方向及び水平方向のうち少なくとも1つの方向に分割し、第2符号化単位1302a,1302b,1304a,1304b,1306a,1306b,1306c,1306dを決定することができる。すなわち、映像復号装置150は、第1符号化単位1300に係わる分割形態情報に基づいて、第2符号化単位1302a,1302b,1304a,1304b,1306a,1306b,1306c,1306dを決定することができる。
一実施形態により、正方形状の第1符号化単位1300に係わる分割形態情報によって決定される第2符号化単位1302a,1302b,1304a,1304b,1306a,1306b,1306c,1306dは、長辺長に基づいて、深度が決定されうる。例えば、正方形状の第1符号化単位1300の一辺長と、非正方形状の第2符号化単位1302a,1302b,1304a,1304bの長辺長とが同一であるので、第1符号化単位1300と、非正方形状の第2符号化単位1302a,1302b,1304a,1304bとの深度は、Dとして同一であると見られる。それに反し、映像復号装置150が、分割形態情報に基づいて、第1符号化単位1300を4個の正方形状の第2符号化単位1306a,1306b,1306c,1306dに分割した場合、正方形状の第2符号化単位1306a,1306b,1306c,1306dの一辺長は、第1符号化単位1300の一辺長の1/2倍であるので、第2符号化単位1306a,1306b,1306c,1306dの深度は、第1符号化単位1300の深度であるDより1深度下位であるD+1の深度でもある。
一実施形態により、映像復号装置150は、高さが幅より長い形態の第1符号化単位1310を、分割形態情報によって水平方向に分割し、複数個の第2符号化単位1312a,1312b,1314a,1314b,1314cに分割することができる。一実施形態により、映像復号装置150は、幅が高さより大きい形態の第1符号化単位1320を、分割形態情報によって垂直方向に分割し、複数個の第2符号化単位1322a,1322b,1324a,1324b,1324cに分割することができる。
一実施形態により、非正方形状の第1符号化単位1310または1320に係わる分割形態情報によって決定される第2符号化単位1312a,1312b,1314a,1314b,1316a,1316b,1316c,1316dは、長辺長に基づいて、深度が決定されうる。例えば、正方形状の第2符号化単位1312a,1312bの一辺長は、高さが幅より大きい非正方形状の第1符号化単位1310の一辺長の1/2倍であるので、正方形状の第2符号化単位1302a,1302b,1304a,1304bの深度は、非正方形状の第1符号化単位1310の深度Dより1深度下位である深度であるD+1である。
さらには、映像復号装置150が、分割形態情報に基づいて、非正方形状の第1符号化単位1310を、奇数個の第2符号化単位1314a,1314b,1314cに分割することができる。奇数個の第2符号化単位1314a,1314b,1314cは、非正方形状の第2符号化単位1314a,1314c、及び正方形状の第2符号化単位1314bを含んでもよい。その場合、非正方形状の第2符号化単位1314a,1314cの長辺長、及び正方形状の第2符号化単位1314bの一辺長は、第1符号化単位1310の一辺長の1/2倍であるので、第2符号化単位1314a,1314b,1314cの深度は、第1符号化単位1310の深度であるDより1深度下位であるD+1の深度でもある。映像復号装置150は、第1符号化単位1310と係わる符号化単位の深度を決定する前記方式に対応する方式で、幅が高さより大きい非正方形状の第1符号化単位1320と係わる符号化単位の深度を決定することができる。
一実施形態により、映像復号装置150は、分割された符号化単位の区分のためのインデックス(PID)決定において、奇数個に分割された符号化単位が互いに同一サイズではない場合、符号化単位間のサイズ比に基づいて、インデックスを決定することができる。図13を参照すれば、奇数個に分割された符号化単位1314a,1314b,1314cのうち真ん中に位置する符号化単位1314bは、他の符号化単位1314a,1314cと、幅は、同一であるが、高さが異なる符号化単位1314a,1314cの高さの2倍であることがある。すなわち、その場合、真ん中に位置する符号化単位1314bは、他の符号化単位1314a,1314cの二つを含んでもよい。従って、スキャン順序により、真ん中に位置する符号化単位1314bのインデックス(PID)が1であるならば、その次の順序に位置する符号化単位1314cは、インデックスが2が増加した3でもある。すなわち、インデックス値の不連続性が存在しうる。一実施形態により、映像復号装置150は、そのような分割された符号化単位間区分のためのインデックスの不連続性の存在いかんに基づいて、奇数個に分割された符号化単位が、互いに同一サイズではないか否かということ決定することができる。
一実施形態により、映像復号装置150は、現在符号化単位から分割されて決定された複数個の符号化単位を区分するためのインデックスの値に基づいて、特定分割形態に分割されたものであるか否かということを決定することができる。図13を参照すれば、映像復号装置150は、高さが幅より大きい長方形状の第1符号化単位1310を分割し、偶数個の符号化単位1312a,1312bを決定するか、あるいは奇数個の符号化単位1314a,1314b,1314cを決定することができる。映像復号装置150は、複数個の符号化単位それぞれを区分するために、各符号化単位を示すインデックス(PID)を利用することができる。一実施形態により、PIDは、それぞれの符号化単位の所定位置のサンプル(例えば、左側上端サンプル)から獲得されうる。
一実施形態により、映像復号装置150は、符号化単位の区分のためのインデックスを利用して分割されて決定された符号化単位のうち所定位置の符号化単位を決定することができる。一実施形態により、高さが幅より大きい長方形状の第1符号化単位1310に係わる分割形態情報が、3個の符号化単位に分割されることを示す場合、映像復号装置150は、第1符号化単位1310を、3個の符号化単位1314a,1314b,1314cに分割することができる。映像復号装置150は、3個の符号化単位1314a,1314b,1314cそれぞれに係わるインデックスを割り当てることができる。映像復号装置150は、奇数個に分割された符号化単位のうち真ん中符号化単位を決定するために、各符号化単位に係わるインデックスを比較することができる。映像復号装置150は、符号化単位のインデックスに基づいて、インデックスのうち真ん中値に該当するインデックスを有する符号化単位1314bを、第1符号化単位1310が分割されて決定された符号化単位のうち真ん中位置の符号化単位として決定することができる。一実施形態により、映像復号装置150は、分割された符号化単位区分のためのインデックス決定において、符号化単位が互いに同一サイズではない場合、符号化単位間のサイズ比に基づいて、インデックスを決定することができる。図13を参照すれば、第1符号化単位1310が分割されて生成された符号化単位1314bは、他の符号化単位1314a,1314cと、幅は、同一であるが、高さが異なる符号化単位1314a,1314cの高さの2倍でもある。その場合、真ん中に位置する符号化単位1314bのインデックス(PID)が1であるならば、その次の順序に位置する符号化単位1314cは、インデックスが2が増加した3でもある。そのような場合のように、均一にインデックスが増加していて、増加幅が異なる場合、映像復号装置150は、他の符号化単位と異なる大きさを有する符号化単位を含む複数個の符号化単位に分割されたと決定することができる、一実施形態により、分割形態情報が奇数個の符号化単位に分割されることを示す場合、映像復号装置150は、奇数個の符号化単位のうち所定位置の符号化単位(例えば、真ん中符号化単位)が、他の符号化単位と大きさが異なる形態に現在符号化単位を分割することができる。その場合、映像復号装置150は、符号化単位に係わるインデックス(PID)を利用し、異なる大きさを有する真ん中符号化単位を決定することができる。ただし、前述のインデックス、決定しようとする所定位置の符号化単位の大きさまたは位置は、一実施形態について説明するために特定したものであり、それらに限定して解釈されるものではなく、多様なインデックス、符号化単位の位置及び大きさが利用されうると解釈されなければならない。
一実施形態により、映像復号装置150は、符号化単位の再帰的な分割が始まる所定データ単位を利用することができる。
図14は、一実施形態により、ピクチャに含まれる複数個の所定データ単位により、複数個の符号化単位が決定されたところを図示する。
一実施形態により、所定データ単位は、符号化単位が、ブロック形態情報及び分割形態情報のうち少なくとも一つを利用し、再帰的に分割され始めるデータ単位とも定義される。すなわち、現在ピクチャを分割する複数個の符号化単位が決定される過程で利用される最上位深度の符号化単位に該当する。以下においては、説明上、便宜のために、そのような所定データ単位を基準データ単位と称することにする。
一実施形態により、基準データ単位は、所定の大きさ及び形態を示すことができる。一実施形態により、基準符号化単位は、MxNのサンプルを含んでもよい。ここで、M及びNは、互いに同一でもあり、2の乗数として表現される整数でもある。すなわち、基準データ単位は、正方形または非正方形状を示すことができ、以後、整数個の符号化単位にも分割される。
一実施形態により、映像復号装置150は、現在ピクチャを、複数個の基準データ単位に分割することができる。一実施形態により、映像復号装置150は、現在ピクチャを分割する複数個の基準データ単位を、それぞれの基準データ単位に係わる分割情報を利用して分割することができる。そのような基準データ単位の分割過程は、四分木(quad-tree)構造を利用した分割過程に対応する。
一実施形態により、映像復号装置150は、現在ピクチャに含まれる基準データ単位が有することができる最小サイズを事前に決定することができる。それにより、映像復号装置150は、最小サイズ以上の大きさを有する多様な大きさの基準データ単位を決定することができ、決定された基準データ単位を基準に、ブロック形態情報及び分割形態情報を利用し、少なくとも1つの符号化単位を決定することができる。
図14を参照すれば、映像復号装置150は、正方形状の基準符号化単位1400を利用することができ、または非正方形状の基準符号化単位1402を利用することもできる。一実施形態により、基準符号化単位の形態及び大きさは、少なくとも1つの基準符号化単位を含んでもよい多様なデータ単位(例えば、シーケンス(sequence)、ピクチャ(picture)、スライス(slice)、スライスセグメント(slice segment)、最大符号化単位などによっても決定される。
一実施形態により、映像復号装置150の受信部160は、基準符号化単位の形態についての情報、及び基準符号化単位の大きさについての情報のうち少なくとも一つを、前記多様なデータ単位ごとに、ビットストリームから獲得することができる。正方形状の基準符号化単位1400に含まれる少なくとも1つの符号化単位が決定される過程は、図10の現在符号化単位300が分割される過程を介して説明し、非正方形状の基準符号化単位1400に含まれる少なくとも1つの符号化単位の決定される過程は、図11の現在符号化単位1100または1150が分割される過程を介して説明したので、詳細な説明は、省略する。
一実施形態により、映像復号装置150は、所定条件に基づいて事前に決定される一部データ単位により、基準符号化単位の大きさ及び形態を決定するために、基準符号化単位の大きさ及び形態を識別するためのインデックスを利用することができる。すなわち、受信部160は、ビットストリームから、前記多様なデータ単位(例えば、シーケンス、ピクチャ、スライス、スライスセグメント、最大符号化単位など)のうち、所定条件(例えば、スライス以下の大きさを有するデータ単位)を満足するデータ単位として、スライス、スライスセグメント、最大符号化単位などごとに、基準符号化単位の大きさ及び形態の識別のためのインデックスのみを獲得することができる。映像復号装置150は、インデックスを利用することにより、前記所定条件を満足するデータ単位ごとに、基準データ単位の大きさ及び形態を決定することができる。基準符号化単位の形態についての情報、及び基準符号化単位の大きさについての情報を、相対的に小サイズのデータ単位ごとに、ビットストリームから獲得して利用する場合、ビットストリームの利用効率が良好でもないので、基準符号化単位の形態についての情報、及び基準符号化単位の大きさについての情報を直接獲得する代わりに、前記インデックスのみを獲得して利用することができる。その場合、基準符号化単位の大きさ及び形態を示すインデックスに対応する基準符号化単位の大きさ及び形態のうち少なくとも一つは、事前に決まってもいる。すなわち、映像復号装置150は、事前に決定された基準符号化単位の大きさ及び形態のうち少なくとも一つをインデックスによって選択することにより、インデックス獲得の基準になるデータ単位に含まれる基準符号化単位の大きさ及び形態のうち少なくとも一つを決定することができる。
一実施形態により、映像復号装置150は、1つの最大符号化単位に含む少なくとも1つの基準符号化単位を利用することができる。すなわち、映像を分割する最大符号化単位には、少なくとも1つの基準符号化単位が含まれ、それぞれの基準符号化単位の再帰的な分割過程を介して、符号化単位が決定されうる。一実施形態により、最大符号化単位の幅及び高さのうち少なくとも一つは、基準符号化単位の幅及び高さのうち少なくとも1つの整数倍に該当する。一実施形態により、基準符号化単位の大きさは、最大符号化単位を、四分木構造により、n回分割した大きさでもある。すなわち、映像復号装置150は、最大符号化単位を、四分木構造によってn回分割し、基準符号化単位を決定することができ、多様な実施形態により、基準符号化単位をブロック形態情報及び分割形態情報のうち少なくとも一つに基づいて分割することができる。
図15は、一実施形態により、ピクチャ1500に含まれる基準符号化単位の決定順序を決定する基準になるプロセッシングブロックを図示する。
一実施形態により、映像復号装置150は、ピクチャを分割する少なくとも1つのプロセッシングブロックを決定することができる。プロセッシングブロックとは、映像を分割する少なくとも1つの基準符号化単位を含むデータ単位であり、プロセッシングブロックに含まれる少なくとも1つの基準符号化単位は、特定順にも決定される。すなわち、それぞれのプロセッシングブロックで決定される少なくとも1つの基準符号化単位の決定順序は、基準符号化単位が決定されうる多様な順序の種類のうち一つにも該当し、それぞれのプロセッシングブロックで決定される基準符号化単位決定順序は、プロセッシングブロックごとにも異なる。プロセッシングブロックごとに決定される基準符号化単位の決定順序は、ラスタースキャン、Zスキャン、Nスキャン(N−scan)、右上向き対角スキャン(up-right diagonal scan)、水平的スキャン(horizontal scan)、垂直的スキャン(vertical scan)のような多様な順序のうち一つでもあるが、決定されうる順序は、前記スキャン順序に限定して解釈されるものではない。
一実施形態により、映像復号装置150は、プロセッシングブロックの大きさについての情報を獲得し、映像に含まれる少なくとも1つのプロセッシングブロックの大きさを決定することができる。映像復号装置150は、プロセッシングブロックの大きさについての情報をビットストリームから獲得し、映像に含まれる少なくとも1つのプロセッシングブロックの大きさを決定することができる。そのようなプロセッシングブロックの大きさは、プロセッシングブロックの大きさについての情報が示すデータ単位の所定サイズでもある。
一実施形態により、映像復号装置150の受信部160は、ビットストリームからプ、ロセッシングブロックの大きさについての情報を、特定のデータ単位ごとに獲得することができる。例えば、プロセッシングブロックの大きさについての情報は、映像、シーケンス、ピクチャ、スライス、スライスセグメントなどのデータ単位で、ビットストリームからも獲得される。すなわち、受信部160は、前述の多くのデータ単位ごとに、ビットストリームから、プロセッシングブロックの大きさについての情報を獲得することができ、映像復号装置150は、獲得されたプロセッシングブロックの大きさについての情報を利用し、ピクチャを分割する少なくとも1つのプロセッシングブロックの大きさを決定することができ、そのようなプロセッシングブロックの大きさは、基準符号化単位の整数倍の大きさでもある。
一実施形態により、映像復号装置150は、ピクチャ1500に含まれるプロセッシングブロック1502,1512の大きさを決定することができる。例えば、映像復号装置150は、ビットストリームから獲得されたプロセッシングブロックの大きさについての情報に基づいて、プロセッシングブロックの大きさを決定することができる。図15を参照すれば、映像復号装置150は、一実施形態により、プロセッシングブロック1502,1512の横サイズを、基準符号化単位横サイズの4倍、縦サイズを、基準符号化単位の縦サイズの4倍と決定することができる。映像復号装置150は、少なくとも1つのプロセッシングブロック内において、少なくとも1つの基準符号化単位が決定される順序を決定することができる。
一実施形態により、映像復号装置150は、プロセッシングブロックの大きさに基づいて、ピクチャ1500に含まれるそれぞれのプロセッシングブロック1502,1512を決定することができ、プロセッシングブロック1502,1512に含まれる少なくとも1つの基準符号化単位の決定順序を決定することができる。一実施形態により、基準符号化単位の決定は、基準符号化単位の大きさの決定を含んでもよい。
一実施形態により、映像復号装置150は、ビットストリームから、少なくとも1つのプロセッシングブロックに含まれる少なくとも1つの基準符号化単位の決定順序についての情報を獲得することができ、獲得した決定順序についての情報に基づいて、少なくとも1つの基準符号化単位が決定される順序を決定することができる。決定順序についての情報は、プロセッシングブロック内において、基準符号化単位が決定される順序または方向とも定義される。すなわち、基準符号化単位が決定される順序は、それぞれのプロセッシングブロックごとに独立して決定されうる。
一実施形態により、映像復号装置150は、特定データ単位ごとに、基準符号化単位の決定順序についての情報を、ビットストリームから獲得することができる。例えば、受信部160は、基準符号化単位の決定順序についての情報を、映像、シーケンス、ピクチャ、スライス、スライスセグメント、プロセッシングブロックなどのデータ単位ごとに、ビットストリームから獲得することができる。基準符号化単位の決定順序についての情報は、プロセッシングブロック内での基準符号化単位決定順序を示すので、決定順序についての情報は、整数個のプロセッシングブロックを含む特定データ単位ごとにも獲得される。
映像復号装置150は、一実施形態によって決定された順序に基づいて、少なくとも1つの基準符号化単位を決定することができる。
一実施形態により、受信部160は、ビットストリームから、プロセッシングブロック1502,1512と係わる情報として、基準符号化単位決定順序についての情報を獲得することができ、映像復号装置150は、前記プロセッシングブロック1502,1512に含まれた少なくとも1つの基準符号化単位を決定する順序を決定し、符号化単位の決定順序により、ピクチャ1500に含まれる少なくとも1つの基準符号化単位を決定することができる。図15を参照すれば、映像復号装置150は、それぞれのプロセッシングブロック1502,1512と係わる少なくとも1つの基準符号化単位の決定順序(1504,1514)を決定することができる。例えば、基準符号化単位の決定順序についての情報が、プロセッシングブロックごとに獲得される場合、それぞれのプロセッシングブロック1502,1512と係わる基準符号化単位決定順序は、プロセッシングブロックごとにも異なる。プロセッシングブロック1502と係わる基準符号化単位決定順序(1504)がラスタースキャン順序である場合、プロセッシングブロック1502に含まれる基準符号化単位は、ラスタースキャン順序によっても決定される。それに反し、他のプロセッシングブロック1512と係わる基準符号化単位決定順序(1514)がラスタースキャン順序の逆順である場合、プロセッシングブロック1512に含まれる基準符号化単位は、ラスタースキャン順序の逆順によっても決定される。
図1ないし図15においては、映像を最大符号化単位に分割し、最大符号化単位を階層的ツリー構造の符号化単位に分割する方法について説明された。図16ないし図24においては、現在ブロックの量子化パラメータの決定方法について説明される。
図1の映像符号化装置100は、符号化単位に含まれたピクセルに係わる原本値と予測値との差値であるレジデュアルデータを、所定過程を経て変換させることができる。このとき、映像符号化装置100は、変換されたレジデュアルデータを量子化することにより、レジデュアルデータを損失させる代わりに、レジデュアルデータの大きさを縮小させることができる。
レジデュアルデータの量子化は、量子化パラメータに基づいても行われる。量子化パラメータは、現在ブロックのレジデュアルデータの量子化に必要なスケーリング行列の導出に使用されるインデックスである。量子化パラメータが大きければ、元素が相対的に大きいスケーリング行列が導出される。従って、量子化パラメータが大きければ、レジデュアルデータが多く損失される代わりに、レジデュアルデータの圧縮率が上昇する。反対に、量子化パラメータが小さければ、元素が相対的に小さいスケーリング行列が導出される。従って、量子化パラメータが小さければ、レジデュアルデータが少なく損失される代わりに、レジデュアルデータの圧縮率が低下する。
すなわち、レジデュアルデータの圧縮率が上昇しても、主観的画質低下が小さい場合には、高い量子化パラメータが使用されうる。しかし、レジデュアルデータの圧縮率が上昇すれば、主観的画質低下が感知されうる場合には、低い量子化パラメータが使用されなければならない。従って、同一ピクチャのブロック間においても、画質低下いかんなどを考慮し、互いに異なる量子化パラメータが使用されなければならない。
図16は、ブロックの量子化パラメータを決定し、決定された量子化パラメータにより、ブロックのレジデュアルデータを復号する映像復号装置を示す。
映像復号装置1600は、量子化パラメータ決定部1610及び逆量子化部1620を含む。図16において、量子化パラメータ決定部1610及び逆量子化部1620は、別途の構成単位として表現されているが、実施形態により、量子化パラメータ決定部1610及び逆量子化部1620は、合され、1つの構成単位によっても具現される。
図16において、量子化パラメータ決定部1610及び逆量子化部1620は、1つの装置に位置した構成単位に表現されているが、量子化パラメータ決定部1610及び逆量子化部1620の各機能を担当する装置は、必ずしも物理的に隣接する必要はない。従って、実施形態により、量子化パラメータ決定部1610及び逆量子化部1620が分散されてもいる。
量子化パラメータ決定部1610及び逆量子化部1620は、実施形態により、1つのプロセッサによっても具現される。また、実施形態により、複数個のプロセッサによっても具現される。
映像復号装置1600は、1以上のブロックを含む量子化グループに基づいた逆量子化を行うことができる。以下、量子化グループに基づいた逆量子化方法について説明される。
ブロックごとに量子化パラメータが異なる場合、量子化パラメータについての情報が増加する。従って、ブロック単位で量子化パラメータを決定する場合、符号化効率が低下してしまう。従って、符号化効率上昇のために複数のブロックについて、同一量子化パラメータを決定する方法が論議される。
一般的に、隣接したブロックは、同一であるか、または類似した量子化パラメータを有する。従って、映像復号装置1600は、隣接したブロックに同一量子化パラメータを使用することができる。同一量子化パラメータを使用する互いに隣接した複数のブロックを量子化グループと言う。
該量子化グループは、最大符号化単位を基準にも決定される。例えば、最大符号化単位から所定回数ほど分割されることによって生成されたブロックについて、量子化グループが設定されうる。該量子化グループが設定されたブロックが追加分割されない場合、量子化グループの量子化パラメータは、量子化グループが設定された1つのブロックだけに適用される。反対に、もし量子化グループに対応するブロックが追加分割される場合、量子化グループの量子化パラメータは、量子化グループが設定されたブロックの分割によって生成された下位ブロック全部についても適用される。
または、該量子化グループは、大きさに基づいても決定される。例えば、ブロックの大きさが、量子化グループ基準サイズと同じであるか、あるいはそれより小さい場合、前記ブロックについて量子化グループが設定されうる。もし量子化グループが設定されたブロックが追加分割されない場合、量子化グループの量子化パラメータは、量子化グループが設定された1つのブロックだけに適用される。反対に、もし量子化グループに対応するブロックが追加分割される場合、量子化グループの量子化パラメータは、量子化グループが設定されたブロックの分割によって生成された下位ブロック全部についても適用される。従って、量子化グループに基づいて、ブロックの量子化パラメータを決定することにより、量子化パラメータについての情報が低減する。
量子化パラメータ決定部1610は、現在量子化グループの上位データ単位について、差分量子化パラメータ許容フラグを獲得することができる。そして、量子化パラメータ決定部1610は、差分量子化パラメータ許容フラグが、差分量子化パラメータによる量子化パラメータの決定が許容されることを示すとき、現在ブロックの差分量子化パラメータを獲得することができる。
前記上位データ単位は、ビデオパラメータセット(VPS:video parameter set)、シーケンスパラメータセット(SPS:sequence parameter set、SPS)、ピクチャパラメータセット(PPS:picture parameter set)のうち一つでもある。従って、量子化パラメータ決定部1610は、上位データ単位に含まれた全てのブロックについて、量子化グループによる量子化パラメータを決定方法を適用することができる。
量子化パラメータ決定部1610は、現在量子化グループの上位データ単位について、量子化グループ情報を獲得することができる。量子化グループ情報は、量子化グループを決定する方法を示す。例えば、量子化グループ情報は、ブロック分割情報またはブロックサイズ情報を含んでもよい。量子化パラメータ決定部1610は、差分量子化パラメータ許容フラグが差分量子化パラメータを許容する場合、量子化グループ情報を獲得することができる。
量子化パラメータ決定部1610は、ブロック分割情報及びブロックサイズ情報のうち少なくとも一つによって決定された現在量子化グループの予測量子化パラメータを決定する。
ブロック分割情報は、四分木分割回数及び非四分木分割回数を含んでもよい。四分木分割回数は、最大符号化ブロックから、現在量子化グループを獲得するために、四分木分割が行われた回数を示す。例えば、図2の210dによる分割が四分木分割に該当する。
そして、非四分木分割回数は、最大符号化ブロックから現在量子化グループを獲得するために、四分木分割ではない分割が遂行された回数を示す。例えば、図3に開示された分割方法が、非四分木分割に該当する。
ブロックサイズ情報は、ブロックの広さ、またはブロック広さの二進ログ値を含んでもよい。また、ブロックの高さ及び幅、またはブロックの高さ及び幅の二進ログ値を含んでもよい。
一実施形態によれば、量子化パラメータ決定部1610は、現在量子化グループを、四分木分割回数によって決定することができる。最大符号化単位分割に四分木分割だけが使用されれば、四分木分割回数による所定サイズ以上のブロックについて量子化グループが設定されうる。例えば、最大符号化単位の大きさが256x256であり、四分木分割回数が2回である場合、64x64サイズ、またはその以上のブロックについて、量子化グループが設定される。
図17Aないし図17Dにおいては、量子化グループを、四分木分割回数によって決定する実施形態について説明される。
図17Aによれば、最大符号化ブロック1700は、四分木分割により、4個のブロック1702,1704,1706,1708に分割される。そして、ブロック1702,1704,1706,1708の四分木分割回数は、1に設定される。ブロック1704は、四分木分割により、4個のブロック1710,1712,1714,1716に分割される。そして、ブロック1710,1712,1714,1716の四分木分割回数は、2に設定される。ブロック1716は、四分木分割により、4個のブロック1718、1720,1722,1724に分割される。そして、ブロック1718,1720,1722,1724の四分木分割回数は、3に設定される。最大符号化ブロック1700の分割完了によって決定されたブロック1702,1706,1708,1710,1712,1714,1718,1720,1722,1724に基づき、予測及び変換符号化と、復号とが行われる。
図17Aから分かるように、四分木分割回数が1ずつ増加するほど分割されたブロックの大きさが半分に低減する。従って、四分木分割だけが許容される場合、四分木分割回数により、ブロックの大きさが決定されうる。
図17Bは、四分木分割回数が1であるブロックについて量子化グループを決定する実施形態を図示する。図17Bによれば、四分木分割回数が1である4個のブロック1702,1704,1706,1708について、量子化グループが設定される。
ブロック1702,1706,1708に係わる量子化グループには、それぞれ1つのブロックだけが含まれる。しかし、ブロック1704に係わる量子化グループには、ブロック1704の下位ブロック1710,1712,1714,1718,1720,1722,1724が含まれる。従って、ブロック1704の下位ブロック1710,1712,1714,1718,1720,1722,1724は、同一量子化パラメータによる量子化及び逆量子化が適用されうる。
図17Cは四分木分割回数が2であるブロックについて、量子化グループを決定する実施形態を図示する。図17Cによれば、四分木分割回数が2以下であるブロック1702,1706,1708,1710,1712,1714,1716について、量子化グループが設定される。ブロック1702,1706,1708の場合、四分木分割回数が1だ追加分割されないために、ブロック1702,1706,1708について、量子化グループが設定される。
ブロック1702,1706,1708,1710,1712,1714に係わる量子化グループには、それぞれ1つのブロックだけが含まれる。しかし、ブロック1716に係わる量子化グループには、ブロック1716の下位ブロック1718,1720,1722,1724が含まれる。従って、ブロック1716の下位ブロック1718,1720,1722,1724は、同一量子化パラメータによる量子化及び逆量子化が適用されうる。
図17Dは、四分木分割回数が3であるブロックについて、量子化グループを決定する実施形態を図示する。図17Dにおいては、四分木分割回数が4であるブロックがないので、全てのブロック1702,1706,1708,1710,1712,1714,1718,1720,1722,1724について、量子化グループが設定される。
図17Aないし図17Dによれば、ブロック分割情報の四分木分割回数が増加するほど、量子化グループの大きさが小さくなる。反対に、ブロック分割情報の四分木分割回数が低減するほど、量子化グループの大きさが大きくなる。従って、ブロック分割情報の四分木分割回数により、量子化パラメータ情報の大きさが増減する。
量子化パラメータ決定部1610は、現在量子化グループを、四分木分割回数及び非四分木分割回数によって決定することができる。もし四分木分割だけではなく、非四分木分割がブロック分割に適用されるならば、図17Aないし図17Dで図示された量子化グループ決定方法が適用されない。従って、非四分木分割回数を追加して考慮し、量子化グループを決定するか、あるいは量子化グループの大きさにより、量子化グループを決定する方法が適用されうる。図18Aないし図18Cは、非四分木分割が適用される最大符号化ブロックにおける量子化グループ決定方法の一実施形態が図示される。
図18Aは、最大符号化ブロック1800がいかように分割されたかということを図示する。ブロック内部に表示された数字は、最大符号化ブロック1800からの分割回数を示す。
最大符号化ブロック1800は、4個のブロック1802,1804,1806,1808に四分木分割される。ブロック1802は、追加分割されないので、ブロック1802の分割回数は、1である。以下、最大符号化ブロック1800の大きさは、4Nx4Nであるということを前提に説明される。
ブロック1804は、2個の2NxNブロック1810,1812に分割される。そして、ブロック1810は、2個のNxNブロック1814,1816に分割され、ブロック1812は、2個のN/2xNブロック1818,1822と、1個のNxNブロック1820とに分割される。ブロック1804の下位ブロック1814,1816,1818,1820,1822の分割回数は、いずれも3である。
ブロック1806は、2個のNx2Nブロック1824,1826に分割される。そして、ブロック1824は、2個のNxNブロック1828,1830に分割され、ブロック1826は、2個のNxN/2ブロック1840,1844と、1個のNxNブロック1842に分割される。そして、ブロック1828は、2個のN/2xNブロック1832,1834に分割される。そして、ブロック1834は、2個のN/2xN/2ブロック1836,1838に分割される。ブロック1806の下位ブロック1828,1830,1840,1842,1844の分割回数は、3である。そして、ブロック1828から分割されたブロック1832の分割回数は、4であり、ブロック1836,1838の分割回数は、5である。
ブロック1808は、4個のNxNブロック1846,1848,1850,1852に分割される。そして、ブロック1846は、4個のNxNブロック1854,1856,1858,1860に分割される。また、ブロック1848は、2個のNx2Nブロック1862,1864に分割され、ブロック1862は、2個のNxNブロック1866,1868に分割される。ブロック1850,1852の分割回数は、2であり、ブロック1854,1856,1858,1860,1864の分割回数は、3である。そして、ブロック1866,1868の分割回数は、4である。
もし量子化グループをブロックの分割回数によって決定する場合、量子化グループの大きさが均一ではないという問題点がある。具体的には、図18Bにおいて、量子化グループサイズの不均一について説明される。
図18Bは、分割回数が3であるブロックについて、量子化グループを設定する実施形態について説明する。図18Bによれば、分割回数が3以下であるブロック1802,1814,1816,1818,1820,1822,1828,1830,1840,1842,1844,1850,1852,1854,1856,1858,1860,1862,1864について、量子化グループが設定される。
しかし、ブロック1814と、ブロック1854との分割回数が同一であるが、ブロック1814の大きさが、ブロック1854の大きさの4倍である。そして、ブロック1836とブロック1854は、大きさが同一であるが、ブロック1836は、ブロック1828に対応する量子化グループの量子化パラメータが適用される一方、ブロック1854は、ブロック1854に対応する量子化グループの量子化パラメータが適用される。
図17Aないし図17Dの実施形態のように、四分木分割だけ行われる場合には、量子化グループの大きさが同一である。しかし、先に説明したように、非四分木分割が行われるとき、分割回数によって量子化グループを設定する場合、量子化グループの大きさが異なるという問題点がある。
図18Cにおいては、前記問題点を解決するための方法について説明される。例えば、量子化パラメータ決定部1610は、四分木分割回数と非四分木分割回数との加重和により、現在量子化グループを決定することができる。該四分木分割は、垂直分割と水平分割とを連続して適用するところと同一である。従って、1回の四分木分割は、実質的に2回の非四分木分割と同一である。
従って、量子化パラメータ決定部1610は、分割回数を、四分木分割回数と非四分木分割回数とに細分化し、2:1の加重値による四分木分割回数と非四分木分割回数との加重和に基づいて、量子化グループを設定することができる。
例えば、ブロック1814は、最大符号化ブロック1800から1回の四分木分割と、2回の非四分木分割とによって生成される。従って、ブロック1814の2:1の加重値による四分木分割回数と非四分木分割回数との加重和は4になる。そして、ブロック1846は、最大符号化ブロック1800から、2回の四分木分割によって生成される。従って、ブロック1846の2:1の加重値による四分木分割回数と非四分木分割回数との加重和は4になる。従って、前記加重和が4であるブロックについて量子化グループが設定されるとき、図18Bと異なり、図18Cにおいては、ブロック1854は、ブロック1846について設定された量子化グループから、量子化パラメータを獲得することになる。
他の実施形態によれば、量子化パラメータ決定部1610は、ブロックの高さ及び幅の和、またはブロックの高さ及び幅の平均に基づいて、現在量子化グループを決定することができる。例えば、NxNサイズのブロックについて量子化グループが設定される場合、ブロック1814とブロック1846とについて量子化グループが設定される。従って、図18Bと異なり、図18Cにおいては、ブロック1854は、ブロック1846について設定された量子化グループから量子化パラメータを獲得することになる。上位ブロック1812,1826が、NxNサイズより大きく、対応する量子化グループがないので、ブロック1818,1822,1840,1844は、NxNサイズより小さいにもかかわらず、量子化グループが設定される。
類似して、量子化パラメータ決定部1610は、ブロックの高さ及び幅の二進ログ値の和、またはブロックの高さ及び幅の二進ログ値の平均に基づいて、現在量子化グループを決定することができる。または、量子化パラメータ決定部1610は、ブロックの広さ、または広さの二進ログ値に基づいて、現在量子化グループを決定することができる。
量子化パラメータ決定部1610は、現在量子化グループの上側隣接ブロックの量子化パラメータ、現在量子化グループの左側隣接ブロックの量子化パラメータ、及び現在量子化グループ直前に復号された量子化グループの量子化パラメータに基づき、現在ブロックの予測量子化パラメータを決定することができる。
例えば、量子化パラメータ決定部1610は、上側隣接ブロックの量子化パラメータと、左側隣接ブロックの量子化パラメータとの平均を、現在量子化グループの量子化パラメータと決定することができる。もし上側隣接ブロックの量子化パラメータが存在しない場合、量子化パラメータ決定部1610は、上側隣接ブロックの量子化パラメータの代わりに、現在量子化グループ直前に復号された量子化グループの量子化パラメータを、現在量子化グループの量子化パラメータ決定に使用することができる。同様に、もし左側隣接ブロックの量子化パラメータが存在しない場合、量子化パラメータ決定部1610は、左側隣接ブロックの量子化パラメータの代わりに、現在量子化グループ直前に復号された量子化グループの量子化パラメータを、現在量子化グループの量子化パラメータ決定に使用することができる
また、量子化パラメータ決定部1610は、スライスまたはピクチャの基本量子化パラメータを、予測量子化パラメータとして決定することができる。例えば、現在量子化グループが参照する上側隣接ブロックの量子化パラメータ、左側隣接ブロックの量子化パラメータ、及び現在量子化グループ直前に復号された量子化グループの量子化パラメータがないとき、前記基本量子化パラメータが使用されうる。
量子化パラメータ決定部1610は、現在量子化グループの差分量子化パラメータを決定する。量子化パラメータ決定部1610は、ビットストリームから、差分量子化パラメータサイズ情報と、差分量子化パラメータ符号情報とを獲得することができる。そして、量子化パラメータ決定部1610は、差分量子化パラメータサイズ情報と差分量子化パラメータ符号情報とにより、現在量子化グループの差分量子化パラメータを決定することができる。
量子化パラメータ決定部1610は、現在量子化グループに、2個以上のブロックが含まれる場合、スキャン順序上で、始めに復号されるブロックについて、差分量子化パラメータサイズ情報と差分量子化パラメータ符号情報とを獲得することができる。そして、量子化パラメータ決定部1610は、現在量子化グループの残りブロックについて、差分量子化パラメータサイズ情報と差分量子化パラメータ符号情報とを獲得せず、始めに復号されるブロックについて決定された量子化パラメータを、残りブロックに適用する。従って、結果として、量子化パラメータ決定部1610は、現在量子化グループの全てのブロックに、同一量子化パラメータを適用する。
量子化パラメータ決定部1610は、現在量子化グループの全てのブロックを復号し、新たな量子化グループのブロックを復号するとき、差分量子化パラメータ及び差分量子化パラメータに係わる情報を初期化することができる。前記差分量子化パラメータに係わる情報は、差分量子化パラメータがすでに復号されたか否かということを示す差分量子化パラメータ復号情報と、量子化グループの位置を示す量子化グループ位置情報とが含まれてもよい。
量子化パラメータ決定部1610は、前記差分量子化パラメータ及び差分量子化パラメータに係わる情報を初期化し、ビットストリームから、新たな差分量子化パラメータサイズ情報と、差分量子化パラメータ符号情報とを獲得することができる。
量子化パラメータ決定部1610は、現在量子化グループの予測量子化パラメータと、差分量子化パラメータとに基づいて、現在量子化グループの量子化パラメータを決定する。具体的には、量子化パラメータ決定部1610は、現在量子化グループの予測量子化パラメータと差分量子化パラメータとの和に基づいて、量子化パラメータを決定することができる。実施形態により、量子化パラメータ決定部1610は、ビットストリームから、量子化パラメータオフセット情報を獲得し、前記決定された量子化パラメータを、量子化パラメータオフセット情報によって調整することができる。
逆量子化部1620は、現在量子化グループの量子化パラメータにより、現在量子化グループに含まれた現在ブロックを逆量子化する。
図19は、四分木分割と非四分木分割とがいずれも許容される場合、ビットストリームに含まれた差分量子化パラメータを復号する方法についてのシンタックス構造について説明する。
図19の上端テーブルは、四分木分割シンタックス構造(coding_quadtree)について説明する。図19の四分木分割シンタックス構造は、四分木分割いかんを決定する前、差分量子化パラメータ及び差分量子化パラメータに係わる情報の初期化いかんを決定する構成を開示する。
図19の四分木分割シンタックス構造において、「cu_qp_delta_enabled_flag」は、差分量子化パラメータ許容フラグについて、「cqtDepth」は、四分木分割回数を、「diff_cu_qp_delta_depth」は、ブロック分割情報を示す。そして、「CuQpDeltaVal」は、差分量子化パラメータを、「IsCuQpDeltaCoded」は、差分量子化パラメータ復号情報を、「CuQgTopLeftX」と「CuQgTopLeftY」は、量子化グループ位置情報を示す。
図19によれば、「cu_qp_delta_enabled_flag」が1を示し、「cqtDepth」が「diff_cu_qp_delta_depth」より小さいか、または同じであるとき、「CuQpDeltaVal」と「IsCuQpDeltaCoded」とが0に決定され、「CuQgTopLeftX」、「CuQgTopLeftY」は、現在ブロックの左上側サンプル位置を示すx0,y0と決定される。
「cu_qp_delta_enabled_flag」が1を示すことは、差分量子化パラメータの獲得が許容されることを意味する。
そして、「cqtDepth」が「diff_cu_qp_delta_depth」より小さいか、または同じであるということは、現在ブロックの四分木分割回数が、ブロック分割情報で示す量子化グループの基準になる分割回数より少ないか、または同じであるということを意味する。それは、現在ブロックの四分木分割回数が、量子化グループの基準になる分割回数より少ないかか、または同じであるということは、現在ブロックが、現在ブロック以前に復号されたブロックの量子化グループに含まれないということを示す。
前記条件が満足されるとき、「CuQpDeltaVal」と「IsCuQpDeltaCoded」とが0に決定され、ビットストリームから新たに獲得される差分量子化パラメータ情報により、「CuQgTopLeftX」及び「CuQgTopLeftY」に位置した量子化グループに係わる新たな差分量子化パラメータが獲得される。
図19の中央テーブルは、非四分木分割シンタックス構造について説明する。図19の非四分木分割シンタックス構造は、非四分木分割いかんを決定する前、差分量子化パラメータ及び差分量子化パラメータに係わる情報の初期化いかんを決定する構成を開示する。
図19の非四分木分割シンタックス構造において、「cu_qp_delta_enabled_flag」は、差分量子化パラメータ許容フラグを、「cqtDepth」は、四分木分割回数を、「mttDepth」は、非四分木分割回数を、「diff_cu_qp_delta_depth」は、ブロック分割情報を示す。そして、「CuQpDeltaVal」は、差分量子化パラメータを、「IsCuQpDeltaCoded」は、差分量子化パラメータ復号情報を、「CuQgTopLeftX」と「CuQgTopLeftY」は、量子化グループ位置情報を示す。
図19によれば、「cu_qp_delta_enabled_flag」が1を示し、「cqtDepth」と「mttDepth」との和が「diff_cu_qp_delta_depth」より小さいか、または同じであるとき、「CuQpDeltaVal」と「IsCuQpDeltaCoded」とが0に決定され、「CuQgTopLeftX」、「CuQgTopLeftY」は、現在ブロックの左上側サンプル位置を示すx0,y0と決定される。
四分木分割シンタックス構造と類似し、非四分木分割シンタックス構造においても、差分量子化パラメータ及び差分量子化パラメータに係わる情報が初期化される。ただし、非四分木分割シンタックス構造においては、四分木分割シンタックス構造と異なり、「cqtDepth」の代わりに、「cqtDepth」と「mttDepth」との和と、「diff_cu_qp_delta_depth」とが比較される差がある。図19においては、「cqtDepth」と「mttDepth」との合が「diff_cu_qp_delta_depth」と比較されたが、実施形態により、「cqtDepth」と「mttDepth」との加重和が「diff_cu_qp_delta_depth」とも比較される。
図19の下端テーブルは、変換ブロックシンタックス構造について説明する。tu_cbf_luma[x0][y0]は、(x0,y0)に位置した現在ルマブロックに、レジデュアルデータが存在するか否かということを示す。そして、tu_cbf_cb[x0][y0]とtu_cbf_cr[x0][y0]は、それぞれ(x0,y0)に位置した現在Cbブロックと現在Crブロックとに、レジデュアルデータが存在するか否かということを示す。もし現在ルマブロック、現在Cbブロック及び現在Crブロックについて、レジデュアルデータが存在しない場合、差分量子化パラメータ情報は、獲得されない。
反対に、現在ルマブロック、現在Cbブロック及び現在Crブロックのうち一つにもレジデュアルデータを含む場合、ビットストリームから、差分量子化パラメータサイズ情報を示す「cu_qp_delta_abs」及び差分量子化パラメータ符号情報を示す「cu_qp_delta_sign_flag」が獲得される。そして、「cu_qp_delta_abs」と「cu_qp_delta_sign_flag」とから、差分量子化パラメータを示す「CuQpDeltaVal」が決定される。また、差分量子化パラメータが存在するか否かということを示す「IsCuQpDeltaCoded」は、1に決定される。
現在ブロックの次に復号されるブロックが、現在ブロックと同一量子化グループに含まれる場合(すなわち、「cqtDepth」または「cqtDepth」と、「mttDepth」の(加重)合が、「diff_cu_qp_delta_depth」より大きい場合)、「CuQpDeltaVal」と「IsCuQpDeltaCoded」とが初期化されないので、現在ブロックの次に復号されるブロックは、現在ブロックの復号過程で使用された「CuQpDeltaVal」によって逆量子される。
図19においては、差分量子化パラメータ情報を獲得する構成が、変換ブロックシンタックスによって具現されたが、実施形態により、他のシンタックスによっても具現されうる。
図20は、量子化グループにより、ブロックの量子化パラメータを決定し、決定された量子化パラメータにより、ブロックのレジデュアルデータを復号する映像復号方法を図示する。
段階2010において、ブロック分割情報及びブロックサイズ情報のうち少なくとも一つによって決定された現在量子化グループの予測量子化パラメータが決定される。
現在量子化グループは、四分木分割回数及び非四分木分割回数によっても決定される。具体的には、現在量子化グループは、四分木分割回数と非四分木分割回数との加重和によっても決定される。
現在量子化グループは、ブロックの高さ及び幅の和、またはブロックの高さ及び幅の平均に基づいても決定される。または、現在量子化グループは、ブロックの高さ及び幅の二進ログ値の和、またはブロックの高さ及び幅の二進ログ値の平均に基づいても決定される。または、現在量子化グループは、ブロックの広さ、または広さの二進ログ値に基づいても決定される。
現在量子化グループの上側隣接ブロックの量子化パラメータ、現在量子化グループの左側隣接ブロックの量子化パラメータ、及び現在量子化グループ直前に復号された量子化グループの量子化パラメータに基づき、現在ブロックの予測量子化パラメータが決定されうる。
段階2020において、現在量子化グループの差分量子化パラメータが決定される。具体的には、差分量子化パラメータサイズ情報と差分量子化パラメータ符号情報とがビットストリームから獲得されうる。そして、差分量子化パラメータサイズ情報と差分量子化パラメータ符号情報とにより、現在量子化グループの差分量子化パラメータが決定されうる。
一実施形態により、差分量子化パラメータ許容フラグが、差分量子化パラメータによる量子化パラメータの決定が許容されることを示すとき、現在ブロックの差分量子化パラメータが獲得されうる。
段階2030において、現在量子化グループの予測量子化パラメータと差分量子化パラメータとに基づいて、現在量子化グループの量子化パラメータが決定される。例えば、予測量子化パラメータと差分量子化パラメータとの和に基づいて、現在量子化グループの量子化パラメータが決定されうる。
段階2040において、現在量子化グループの量子化パラメータにより、現在量子化グループに含まれた現在ブロックが逆量子される。
また、図20の映像復号方法は、図16の映像復号装置の量子化グループによる量子化パラメータ決定方法についての多様な実施形態を含んでもよい。
映像復号装置1600は、同一量子化パラメータが使用される領域を示す量子化パラメータユニットに基づいた逆量子化を行うことができる。以下、量子化パラメータユニットに基づいた逆量子化方法について説明される。
図21は、量子化パラメータユニット構造と符号化ブロックツリー構造との一実施形態を示す。
ピクチャまたはスライスは、部分ごとに、主観的画質低下の憂いが異なる。従って、符号化率の最適化のために、ピクチャまたはスライスの各部分の特徴により、他の量子化パラメータが設定される必要がある。量子化パラメータの分布は、符号化の基本単位である符号化ブロックツリー構造と同じではない。従って、量子化パラメータユニットマップは、符号化ブロックツリー構造と独立して決定される。
図21において、量子化パラメータユニット2110は、MxNサイズの長方形でもある。このとき、ピクチャは、複数の量子化パラメータユニットで構成された量子化パラメータマップ2120によって表現される。量子化パラメータマップ2120において、量子化パラメータユニットは、それぞれ量子化パラメータを有する。図21においては、量子化パラメータユニット2110が長方形に表現されたが、実施形態により、量子化パラメータユニット2110は、長方形ではない他の不規則な形態にも表現される。
量子化パラメータユニット2110の量子化パラメータは、対応するピクチャの一部分の特徴によっても決定される。量子化パラメータユニットマップ2120と量子化パラメータユニット2110との量子化パラメータは、符号化ブロック構造2140による予測符号化情報に対し、独立して符号化及び復号される。そして、符号化ブロック2130のレジデュアルデータの符号化過程及び復号過程において、符号化ブロック2130の位置に対応する量子化パラメータユニット2110から、量子化パラメータが獲得されうる。
量子化パラメータ決定部1610は、現在ブロックの位置、大きさのうち少なくとも一つに基づき、現在ブロックを、現在量子化パラメータユニットとマッチングさせることができる。
例えば、量子化パラメータ決定部1610は、現在ブロックの左上側サンプルの座標値を含む量子化パラメータユニットを、現在ブロックの現在量子化パラメータユニットと決定することができる。
他の例として、量子化パラメータ決定部1610は、現在ブロックが、複数の量子化パラメータユニットを含む場合、複数の量子化パラメータユニットを、現在ブロックの現在量子化パラメータユニットと決定することができる。このとき、量子化パラメータ決定部1610は、現在量子化パラメータユニットの複数量子化パラメータの平均値を、現在ブロックの量子化パラメータと決定することができる。
図22A及び図22Bにおいて、現在ブロックに対応する量子化パラメータユニットを決定する方法が図示される。
図22Aは、量子化パラメータユニット2200に、複数の符号化ブロック2202ないし2224が対応する実施形態を示す。量子化パラメータユニット2200に全部含まれるブロック2202,2204,2206,2210,2212,2214は、量子化パラメータユニット2200に対応する量子化パラメータによって逆量子化される。
そして、量子化パラメータユニット2200に一部だけ含まれるブロックは、ブロックの左上側サンプルを基準に、量子化パラメータユニット2200の量子化パラメータが適用されるか否かということが決定されうる。従って、左上側サンプルが量子化パラメータユニット2200に含まれるブロック2208,2216,2218,2220,2222,2224は、量子化パラメータユニット2200に対応する量子化パラメータによっても逆量子化される。
図22Aにおいて、ブロックの左上側サンプルを基準に、量子化パラメータユニットを決定する実施形態について説明されたが、実施形態により、ブロックの中央サンプル、偶像側サンプル、左下側サンプル、右下側サンプルなどにより、ブロックの量子化パラメータユニットが決定されうる。
図22Bは、ブロック2250に、複数の量子化パラメータユニット2252ないし2274が対応する実施形態を示す。
量子化パラメータユニット2252,2254,2258,2260,2264,2266は、ブロック2250に全部含まれる。従って、ブロック2250は、量子化パラメータユニット2252,2254,2258,2260,2264,2266のうち、少なくとも1つの量子化パラメータによっても逆量子化される。例えば、ブロック2250の量子化パラメータは、量子化パラメータユニット2252,2254,2258,2260,2264,2266の量子化パラメータの平均と決定されうる。
または、ブロック2250に一部だけ重なる量子化パラメータユニット2256,2262,2268,2270,2272,2274も、ブロック2250の量子化パラメータを決定するためにも使用される。従って、量子化パラメータユニット2252ないし2274のうち少なくとも一つから決定された量子化パラメータにより、ブロック2250が逆量子化されうる。
図23A及び図23Bは、ブロックと量子化パラメータユニットとの対応関係を図示する。
図23Aは、一実施形態によるブロックツリー構造と量子化パラメータマップとを図示する。一実施形態によれば、ブロックの左上側サンプルに対応する量子化パラメータユニットがブロックと対応する。従って、ブロック2308は、量子化パラメータユニット2300と、ブロック2310は、量子化パラメータユニット2302と、ブロック2312は、量子化パラメータユニット2304と、ブロック2314は、量子化パラメータユニット2306と対応する。もしブロックと量子化パラメータユニットとの対応基準が異なる場合には、ブロック2308に、他の量子化パラメータユニット2302,2304,2306が対応する。
図23Bは、一実施形態によるブロックツリー構造と量子化パラメータマップとを図示する。図23Aと同様に、ブロックの左上側サンプルに対応する量子化パラメータユニットがブロックと対応するとき、ブロック2328,2330,2332,2334は、いずれも量子化パラメータユニット2334に対応する。ブロック2328,2330,2332,2334について、いずれも量子化パラメータユニット2334の量子化パラメータが適用されるので、復号順序が最も先になるブロック2328について、最初に量子化パラメータが計算される。そして、ブロック2330,2332,2334には、ブロック2328に使用された量子化パラメータがそのまま使用されうる。
レジデュアルデータがないブロックについては、量子化パラメータが決定されない。例えば、ブロック2328にレジデュアルデータがない場合、ブロック2328に対する逆量子化が不要であるので、ブロック2328の量子化パラメータが決定されない。ブロック2328の次に復号されるブロック2330にレジデュアルデータがある場合、ブロック2330に係わる量子化パラメータが決定されうる。そして、ブロック2332,2334には、ブロック2330に使用された量子化パラメータがそのまま使用されうる。
量子化パラメータ決定部1610は、現在量子化パラメータユニットに係わる予測量子化パラメータを獲得することができる。
量子化パラメータ決定部1610は、現在量子化パラメータユニットの左側量子化パラメータユニット、現在量子化パラメータユニットの上側量子化パラメータユニット、及び現在ブロックの直前に復号されたブロックのうち少なくとも一つから、予測量子化パラメータを獲得することができる。
または、量子化パラメータ決定部1610は、現在量子化パラメータユニットが含まれたピクチャまたはスライスに係わる予測量子化パラメータを、現在量子化パラメータユニットに係わる予測量子化パラメータと決定することができる。
量子化パラメータ決定部1610は、現在量子化パラメータユニットに係わる差分量子化パラメータを獲得することができる。
量子化パラメータ決定部1610は、予測量子化パラメータ及び差分量子化パラメータに基づき、現在量子化パラメータユニットの量子化パラメータを決定することができる。
逆量子化部1620は、現在量子化パラメータユニットの量子化パラメータにより、現在ブロックを逆量子化することができる。
図24は、量子化パラメータユニットにより、ブロックの量子化パラメータを決定し、決定された量子化パラメータにより、ブロックのレジデュアルデータを復号する映像復号方法を図示する。
段階2410は、現在ブロックの位置、大きさのうち少なくとも一つに基づき、現在ブロックは、現在量子化パラメータユニットとマッチングされる。
一実施形態により、現在ブロックの左上側サンプルの座標値を含む量子化パラメータユニットが現在ブロックの現在量子化パラメータユニットとも決定される。
一実施形態により、現在ブロックが、複数の量子化パラメータユニットを含む場合、複数の量子化パラメータユニットが、現在ブロックの現在量子化パラメータユニットとも決定される。このとき、複数の量子化パラメータユニットのうち少なくとも一つから、現在ブロックの現在量子化パラメータが決定されうる。
段階2420は、現在量子化パラメータユニットに係わる予測量子化パラメータが獲得される。
一実施形態により、現在量子化パラメータユニットの左側量子化パラメータユニット、現在量子化パラメータユニットの上側量子化パラメータユニット、及び現在ブロックの直前に復号されたブロックのうち少なくとも一つから、予測量子化パラメータにもなる。
または、現在量子化パラメータユニットが含まれたピクチャまたはスライスに係わる予測量子化パラメータ、現在量子化パラメータユニットに係わる予測量子化パラメータとも決定される。
段階2430は、現在量子化パラメータユニットに係わる差分量子化パラメータが獲得される。
段階2440は、予測量子化パラメータ及び差分量子化パラメータに基づき、現在量子化パラメータユニットの量子化パラメータが決定される。
段階2450は、現在量子化パラメータユニットの量子化パラメータにより、現在ブロックが逆量子化される。
また、図24の映像復号方法は、図16の映像復号装置の量子化グループによる量子化パラメータ決定方法についての多様な実施形態を含んでもよい。
図1ないし図24を参照して説明されたツリー構造の符号化単位に基づく映像符号化技法により、ツリー構造の符号化単位ごとに、空間領域の映像データが符号化され、ツリー構造の符号化単位に基づく映像復号技法により、最大符号化単位ごとに復号が行われながら、空間領域の映像データが復元され、ピクチャ及びピクチャシーケンスである映像が復元されうる。復元されたビデオは、再生装置によって再生されるか、記録媒体に保存されるか、あるいはネットワークを介して伝送されうる。
なお、前述の本開示の実施形態は、コンピュータで実行されうるプログラムに作成可能であり、コンピュータで読み取り可能である記録媒体を利用し、前記プログラムを動作させる汎用デジタルコンピュータでも具現される。
本開示は、特定の最上の実施形態と係わって説明されたが、それら以外に、本開示に代替、変形及び修正の適用された発明は、前述の説明に照らし、当業者に明白であろう。すなわち、特許請求の範囲は、そのような全ての代替、変形及び修正された発明を含むように解釈する。従って、本願の明細書及び図面で説明した全ての内容は、例示的であって非制限的な意味に解釈しなければならない。

Claims (18)

  1. ブロック分割情報及びブロックサイズ情報のうち少なくとも一つによって決定された現在量子化グループの予測量子化パラメータを決定する段階と、
    前記現在量子化グループの差分量子化パラメータを決定する段階と、
    前記現在量子化グループの前記予測量子化パラメータと前記差分量子化パラメータとに基づき、前記現在量子化グループの量子化パラメータを決定する段階と、
    前記現在量子化グループの量子化パラメータにより、前記現在量子化グループに含まれた現在ブロックを逆量子化する段階と、を含む映像復号方法。
  2. 前記現在量子化グループの予測量子化パラメータを決定する段階は、
    前記現在量子化グループの上側隣接ブロックの量子化パラメータ、前記現在量子化グループの左側隣接ブロックの量子化パラメータ、及び前記現在量子化グループ直前に復号された量子化グループの量子化パラメータに基づき、前記現在ブロックの予測量子化パラメータを決定することを特徴とする請求項1に記載の映像復号方法。
  3. 前記現在量子化グループは、現在ブロックを含めた1以上のブロックを含み、
    前記現在量子化グループに含まれたブロックは、同一量子化パラメータによって逆量子化されることを特徴とする請求項1に記載の映像復号方法。
  4. 前記ブロック分割情報は、四分木分割回数及び非四分木分割回数を含み、
    前記現在量子化グループは、四分木分割回数及び非四分木分割回数によって決定され、
    前記四分木分割回数は、前記最大符号化ブロックから、前記現在量子化グループを獲得するために、四分木分割が行われた回数を示し、前記非四分木分割回数は、前記最大符号化ブロックから、前記現在量子化グループを獲得するために、四分木分割ではない分割が行われた回数を示すことを特徴とする請求項1に記載の映像復号方法。
  5. 前記現在量子化グループは、四分木分割回数と非四分木分割回数との加重和によって決定されることを特徴とする請求項4に記載の映像復号方法。
  6. 前記ブロックサイズ情報は、ブロックの高さ及び幅を含み、
    前記現在量子化グループは、前記ブロックの高さ及び幅の和、または前記ブロックの高さ及び幅の平均に基づいて決定されることを特徴とする請求項1に記載の映像復号方法。
  7. 前記ブロックサイズ情報は、ブロックの高さ及び幅の二進ログ値を含み、
    前記現在量子化グループは、前記ブロックの高さ及び幅の二進ログ値の和、または前記ブロックの高さ及び幅の二進ログ値の平均に基づいて決定されることを特徴とする請求項1に記載の映像復号方法。
  8. 前記ブロックサイズ情報は、ブロックの広さ、または前記広さの二進ログ値を含み、
    前記現在量子化グループは、前記ブロックの広さ、または前記広さの二進ログ値に基づいて決定されることを特徴とする請求項1に記載の映像復号方法。
  9. 前記現在量子化グループの差分量子化パラメータを決定する段階は、
    ビットストリームから、差分量子化パラメータサイズ情報と差分量子化パラメータ符号情報とを獲得する段階と、
    前記差分量子化パラメータサイズ情報と、前記差分量子化パラメータ符号情報とにより、前記現在量子化グループの差分量子化パラメータを決定する段階を含むことを特徴とする請求項1に記載の映像復号方法。
  10. 前記映像復号方法は、
    前記現在量子化グループの上位データ単位について、差分量子化パラメータ許容フラグを獲得する段階をさらに含み、
    前記現在量子化グループの差分量子化パラメータを決定する段階は、
    前記差分量子化パラメータ許容フラグが、前記差分量子化パラメータによる量子化パラメータの決定が許容されることを示すとき、前記現在ブロックの差分量子化パラメータを獲得することを特徴とする請求項1に記載の映像復号方法。
  11. ブロック分割情報及びブロックサイズ情報のうち少なくとも一つによって決定された現在量子化グループの予測量子化パラメータを決定し、
    前記現在量子化グループの差分量子化パラメータを決定し、
    前記現在量子化グループの前記予測量子化パラメータと前記差分量子化パラメータとに基づき、前記現在量子化グループの量子化パラメータを決定し、
    前記現在量子化グループの量子化パラメータにより、前記現在ブロックを逆量子化するプロセッサを含む映像復号装置。
  12. 現在ブロックの位置、大きさのうち少なくとも一つに基づき、前記現在ブロックを現在量子化パラメータユニットとマッチングさせる段階と、
    前記現在量子化パラメータユニットに係わる予測量子化パラメータを獲得する段階と、
    前記現在量子化パラメータユニットに係わる差分量子化パラメータを獲得する段階と、
    前記予測量子化パラメータ及び前記差分量子化パラメータに基づき、前記現在量子化パラメータユニットの量子化パラメータを決定する段階と、
    前記現在量子化パラメータユニットの量子化パラメータにより、前記現在ブロックを逆量子化する段階を含む映像復号方法。
  13. 前記現在量子化パラメータユニットが含まれたピクチャまたはスライスの全ての量子化パラメータユニットは、MxNサイズの長方形であることを特徴とする請求項12に記載の映像復号方法。
  14. 前記現在量子化パラメータユニットに係わる予測量子化パラメータを獲得する段階は、
    前記現在量子化パラメータユニットの左側量子化パラメータユニット、前記現在量子化パラメータユニットの上側量子化パラメータユニット、及び前記現在ブロックの直前に復号されたブロックのうち少なくとも一つから、予測量子化パラメータを獲得することを特徴とする請求項12に記載の映像復号方法。
  15. 前記現在量子化パラメータユニットに係わる予測量子化パラメータを獲得する段階は、
    前記現在量子化パラメータユニットが含まれたピクチャまたはスライスに係わる予測量子化パラメータを、前記現在量子化パラメータユニットに係わる予測量子化パラメータと決定することを特徴とする請求項12に記載の映像復号方法。
  16. 前記現在ブロックの位置、大きさのうち少なくとも一つに基づき、前記現在ブロックを現在量子化パラメータユニットとマッチングさせる段階は、
    前記現在ブロックの左上側サンプルの座標値を含む量子化パラメータユニットを、前記現在ブロックの現在量子化パラメータユニットと決定することを特徴とする請求項12に記載の映像復号方法。
  17. 前記現在ブロックの位置、大きさのうち少なくとも一つに基づき、前記現在ブロックを現在量子化パラメータユニットとマッチングさせる段階は、
    前記現在ブロックが、複数の量子化パラメータユニットを含む場合、前記複数の量子化パラメータユニットを、前記現在ブロックの現在量子化パラメータユニットと決定することを特徴にし、
    前記現在量子化パラメータユニットに係わる予測量子化パラメータを獲得する段階、前記現在量子化パラメータユニットに係わる差分量子化パラメータを獲得する段階、並びに前記予測量子化パラメータ及び前記差分量子化パラメータに基づき、前記現在量子化パラメータユニットの量子化パラメータを決定する段階は、
    前記複数の現在量子化パラメータユニットそれぞれについて遂行されることを特徴にし、
    前記現在量子化パラメータユニットの量子化パラメータにより、前記現在ブロックを逆量子化する段階は、
    前記複数の現在量子化パラメータユニットの量子化パラメータの平均値により、前記現在ブロックを逆量子化することを特徴とする請求項12に記載の映像復号方法。
  18. 現在ブロックの位置、大きさのうち少なくとも一つに基づき、前記現在ブロックを現在量子化パラメータユニットとマッチングさせ、
    前記現在量子化パラメータユニットに係わる予測量子化パラメータを獲得し、
    前記現在量子化パラメータユニットに係わる差分量子化パラメータを獲得し、
    前記予測量子化パラメータ及び前記差分量子化パラメータに基づき、前記現在量子化パラメータユニットの量子化パラメータを決定し、
    前記現在量子化パラメータユニットの量子化パラメータにより、前記現在ブロックを逆量子化するプロセッサを含む映像復号装置。
JP2020535588A 2018-01-02 2019-01-02 符号化方法及びその装置、復号方法及びその装置 Active JP7422075B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2024003796A JP2024038376A (ja) 2018-01-02 2024-01-15 符号化方法及びその装置、復号方法及びその装置

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201862612770P 2018-01-02 2018-01-02
US62/612,770 2018-01-02
US201862628410P 2018-02-09 2018-02-09
US62/628,410 2018-02-09
PCT/KR2019/000041 WO2019135601A1 (ko) 2018-01-02 2019-01-02 부호화 방법 및 그 장치, 복호화 방법 및 그 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2024003796A Division JP2024038376A (ja) 2018-01-02 2024-01-15 符号化方法及びその装置、復号方法及びその装置

Publications (2)

Publication Number Publication Date
JP2021508976A true JP2021508976A (ja) 2021-03-11
JP7422075B2 JP7422075B2 (ja) 2024-01-25

Family

ID=67144441

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020535588A Active JP7422075B2 (ja) 2018-01-02 2019-01-02 符号化方法及びその装置、復号方法及びその装置
JP2024003796A Pending JP2024038376A (ja) 2018-01-02 2024-01-15 符号化方法及びその装置、復号方法及びその装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2024003796A Pending JP2024038376A (ja) 2018-01-02 2024-01-15 符号化方法及びその装置、復号方法及びその装置

Country Status (10)

Country Link
US (5) US11438614B2 (ja)
EP (1) EP3737098A4 (ja)
JP (2) JP7422075B2 (ja)
KR (6) KR102450974B1 (ja)
CN (5) CN111543056B (ja)
AU (5) AU2019205693B2 (ja)
PH (1) PH12020500550A1 (ja)
RU (1) RU2771291C2 (ja)
SG (1) SG11202006004PA (ja)
WO (1) WO2019135601A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11936868B2 (en) 2018-11-08 2024-03-19 Interdigital Vc Holdings, Inc. Quantization for video encoding or decoding based on the surface of a block
EP3881530A4 (en) * 2019-08-23 2022-09-28 Tencent America LLC VIDEO CODING METHOD AND APPARATUS
US20230283768A1 (en) * 2020-08-04 2023-09-07 Hyundai Motor Company Method for predicting quantization parameter used in a video encoding/decoding apparatus
CN114598873B (zh) * 2020-12-03 2023-06-20 华为技术有限公司 量化参数的解码方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013223097A (ja) * 2012-04-16 2013-10-28 Jvc Kenwood Corp 画像復号装置、画像復号方法及び画像復号プログラム
US20140112593A1 (en) * 2011-08-31 2014-04-24 Tsinghua University Method and apparatus for obtaining size of transform block
WO2015194669A1 (ja) * 2014-06-19 2015-12-23 シャープ株式会社 画像復号装置、画像符号化装置および予測画像生成装置
JP2017521920A (ja) * 2014-06-11 2017-08-03 クゥアルコム・インコーポレイテッドQualcomm Incorporated ビデオコーディングにおけるパレットコード化ブロックの量子化パラメータ(qp)値とデルタqp値の決定
WO2017203930A1 (en) * 2016-05-27 2017-11-30 Sharp Kabushiki Kaisha Systems and methods for varying quantization parameters

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
HUE055548T2 (hu) 2011-01-13 2021-12-28 Canon Kk Képkódoló berendezés, képkódoló eljárás és program, valamint képdekódoló berendezés, képdekódoló eljárás és program
JP2013034037A (ja) * 2011-03-09 2013-02-14 Canon Inc 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
WO2012120822A1 (en) 2011-03-09 2012-09-13 Canon Kabushiki Kaisha Image coding apparatus, method for coding image, program therefor, image decoding apparatus, method for decoding image, and program therefor
KR101442127B1 (ko) * 2011-06-21 2014-09-25 인텔렉추얼디스커버리 주식회사 쿼드트리 구조 기반의 적응적 양자화 파라미터 부호화 및 복호화 방법 및 장치
US9510020B2 (en) * 2011-10-20 2016-11-29 Qualcomm Incorporated Intra pulse code modulation (IPCM) and lossless coding mode deblocking for video coding
KR20130049523A (ko) 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 장치
TWI603611B (zh) * 2011-12-21 2017-10-21 Jvc Kenwood Corp Motion picture encoding apparatus, motion picture encoding method, and recording medium for moving picture encoding program
PT2811745T (pt) * 2012-01-30 2018-12-17 Samsung Electronics Co Ltd Método e aparelho para codificação e descodificação de vídeo com base em unidade de dados hierárquicos que compreendem a previsão de parâmetros de quantificação
BR122020010110B1 (pt) 2012-03-28 2021-08-17 JVC Kenwood Corporation Dispositivo de codificação de imagem
JP6564315B2 (ja) * 2015-12-04 2019-08-21 日本放送協会 符号化装置、復号装置、及びプログラム
CN109155857B (zh) * 2016-03-11 2023-05-30 数字洞察力有限公司 视频编码方法以及装置
EP3442231A4 (en) * 2016-05-02 2019-12-04 Industry - University Cooperation Foundation Hanyang University BILDCODE / DECODE PROCESS AND DEVICE USING INTRA-SCREEN PREDICTION
MX2018014491A (es) * 2016-05-25 2019-08-14 Arris Entpr Llc Metodo de particionamiento de bloque general.
US10448056B2 (en) * 2016-07-15 2019-10-15 Qualcomm Incorporated Signaling of quantization information in non-quadtree-only partitioned video coding
EP3488610A4 (en) * 2016-07-22 2019-07-17 Sharp Kabushiki Kaisha SYSTEMS AND METHOD FOR CODING VIDEO DATA BY ADAPTIVE COMPONENT CALING
WO2018018486A1 (en) * 2016-07-28 2018-02-01 Mediatek Inc. Methods of reference quantization parameter derivation for signaling of quantization parameter in quad-tree plus binary tree structure
US10863186B2 (en) * 2016-08-26 2020-12-08 Sharp Kabushiki Kaisha Image decoding apparatus and image coding apparatus
JP2020504973A (ja) * 2017-01-03 2020-02-13 エルジー エレクトロニクス インコーポレイティド 画像処理方法及びそのための装置
US10848788B2 (en) * 2017-01-06 2020-11-24 Qualcomm Incorporated Multi-type-tree framework for video coding
EP3577898A4 (en) * 2017-01-31 2020-06-24 Sharp Kabushiki Kaisha SYSTEMS AND METHODS FOR PARTITIONING A VIDEO BLOCK IMAGE FOR VIDEO CODING
WO2018142795A1 (en) * 2017-01-31 2018-08-09 Sharp Kabushiki Kaisha Systems and methods for performing planar intra prediction video coding
US10820017B2 (en) * 2017-03-15 2020-10-27 Mediatek Inc. Method and apparatus of video coding
CN112601085A (zh) * 2017-06-28 2021-04-02 华为技术有限公司 一种图像数据的编码、解码方法及装置
CN110892718B (zh) 2017-07-06 2023-02-03 三星电子株式会社 视频编码方法和装置、视频解码方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140112593A1 (en) * 2011-08-31 2014-04-24 Tsinghua University Method and apparatus for obtaining size of transform block
JP2013223097A (ja) * 2012-04-16 2013-10-28 Jvc Kenwood Corp 画像復号装置、画像復号方法及び画像復号プログラム
JP2017521920A (ja) * 2014-06-11 2017-08-03 クゥアルコム・インコーポレイテッドQualcomm Incorporated ビデオコーディングにおけるパレットコード化ブロックの量子化パラメータ(qp)値とデルタqp値の決定
WO2015194669A1 (ja) * 2014-06-19 2015-12-23 シャープ株式会社 画像復号装置、画像符号化装置および予測画像生成装置
WO2017203930A1 (en) * 2016-05-27 2017-11-30 Sharp Kabushiki Kaisha Systems and methods for varying quantization parameters

Also Published As

Publication number Publication date
KR102450974B1 (ko) 2022-10-06
US11706432B2 (en) 2023-07-18
JP2024038376A (ja) 2024-03-19
KR20200035158A (ko) 2020-04-01
AU2023200269B2 (en) 2023-08-17
KR20200136502A (ko) 2020-12-07
AU2023200269A1 (en) 2023-02-16
US20220224930A1 (en) 2022-07-14
AU2023254882A1 (en) 2023-11-16
CN116233431A (zh) 2023-06-06
AU2019205693B2 (en) 2022-12-01
CN116233430A (zh) 2023-06-06
RU2020125153A3 (ja) 2022-02-03
CN111543056A (zh) 2020-08-14
US11706435B2 (en) 2023-07-18
AU2023254881A1 (en) 2023-11-16
US11706434B2 (en) 2023-07-18
US20200329251A1 (en) 2020-10-15
RU2020125153A (ru) 2022-02-03
CN111543056B (zh) 2023-03-28
US20220224929A1 (en) 2022-07-14
KR102500762B1 (ko) 2023-02-16
US11706433B2 (en) 2023-07-18
US20220224928A1 (en) 2022-07-14
AU2019205693A1 (en) 2020-07-02
CN116233432A (zh) 2023-06-06
SG11202006004PA (en) 2020-07-29
PH12020500550A1 (en) 2021-01-25
CN116233433A (zh) 2023-06-06
KR20220017005A (ko) 2022-02-10
KR20220017004A (ko) 2022-02-10
JP7422075B2 (ja) 2024-01-25
WO2019135601A1 (ko) 2019-07-11
KR20230025504A (ko) 2023-02-21
US11438614B2 (en) 2022-09-06
RU2771291C2 (ru) 2022-04-29
AU2023254883A1 (en) 2023-11-16
KR102450359B1 (ko) 2022-10-04
EP3737098A1 (en) 2020-11-11
US20220224931A1 (en) 2022-07-14
KR102357295B1 (ko) 2022-02-08
EP3737098A4 (en) 2021-06-09
KR20220017003A (ko) 2022-02-10
KR102185371B1 (ko) 2020-12-01

Similar Documents

Publication Publication Date Title
JP7041277B2 (ja) 符号化方法及びその装置、復号方法及びその装置
KR102524588B1 (ko) 부호화 순서 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
JP7069379B2 (ja) 符号化順序符号化方法及びその装置、該復号方法及びその装置
JP7422075B2 (ja) 符号化方法及びその装置、復号方法及びその装置
KR102484387B1 (ko) 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
KR20170136411A (ko) 부호화 순서 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
KR20200123836A (ko) 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
KR20200120605A (ko) 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
KR20210021938A (ko) 부호화 방법 및 그 장치, 복호화 방법 및 그 장치

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230317

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230627

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230925

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231219

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240115

R150 Certificate of patent or registration of utility model

Ref document number: 7422075

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150