JP6412910B2 - ビデオを復号化する方法、ビデオを符号化する方法、デコーダ、エンコーダ、復号プログラムを記録したコンピュータ読み取り可能な記録媒体、および符号化プログラムを記録したコンピュータ読み取り可能な記録媒体 - Google Patents

ビデオを復号化する方法、ビデオを符号化する方法、デコーダ、エンコーダ、復号プログラムを記録したコンピュータ読み取り可能な記録媒体、および符号化プログラムを記録したコンピュータ読み取り可能な記録媒体 Download PDF

Info

Publication number
JP6412910B2
JP6412910B2 JP2016230306A JP2016230306A JP6412910B2 JP 6412910 B2 JP6412910 B2 JP 6412910B2 JP 2016230306 A JP2016230306 A JP 2016230306A JP 2016230306 A JP2016230306 A JP 2016230306A JP 6412910 B2 JP6412910 B2 JP 6412910B2
Authority
JP
Japan
Prior art keywords
tile
slice
decoding
encoding
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016230306A
Other languages
English (en)
Other versions
JP2017079481A (ja
Inventor
キラン ミスラ
キラン ミスラ
クリストファー エー. セガール
クリストファー エー. セガール
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Velos Media International Ltd
Original Assignee
Velos Media International Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=47506217&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP6412910(B2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Velos Media International Ltd filed Critical Velos Media International Ltd
Publication of JP2017079481A publication Critical patent/JP2017079481A/ja
Application granted granted Critical
Publication of JP6412910B2 publication Critical patent/JP6412910B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43Hardware specially adapted for motion estimation or compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/55Motion estimation with spatial constraints, e.g. at image or region borders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H04N19/615Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

関連出願の相互参照は無い。
本発明は、ビデオの符号化及び復号に関する。
デジタル・ビデオは、典型的には、一連の画像またはフレームとして表され、これらの各々が画素の配列を含む。各画素は、輝度及び/または色情報などの情報を含む。多くの場合、各画素は3色のセットとして表され、その各々は8ビットのカラー値によって定義される。
ビデオ符号化方式、例えば、H.264/MPEG−4 AVC(H.264/AVC)は、一般的に複雑性の増大と引き換えに、より高い符号化効率を提供する。また、ビデオ符号化方式に対しての、ビデオ品質の要求の増大と、ビデオ解像度の要求の増大も、符号化の複雑さを増大させることになる。並列復号に適しているビデオ・デコーダは、復号処理の速度を向上させ、メモリ要件を低減することができ、そして並列符号化に適しているビデオ・エンコーダは、符号化処理の速度を向上させ、メモリ要件を低減することができる。
H.264/MPEG−4 AVC[ITU−T VCEG及びISO/IEC MPEGの合同ビデオ・チーム、「H.264:オーディオ・ビジュアル・サービス全般のための先進ビデオ符号化方式、(H.264:Advanced video coding for generic audiovisual services)」ITU−T 勧告 H.264及びISO/IEC 14496−10(MPEG4−第10部),2007年11月]及び同様にJCT−VC,[「検討中のテスト・モデル案(Draft Test Model Under Consideration)」JCTVC−A205、JCT−VC会議、ドレスデン、2010年4月(JCT−VC)]は、圧縮効率のために、ビデオ・シーケンスにおいて、マクロブロック予測及びそれに続く残差符号化を使用し、時間的、空間的冗長性を低減するビデオ・コーデック(エンコーダ/デコーダ)の仕様であり、両方とも、その全体が参照により本明細書に組み込まれる。
本発明の前述の及び他の目的、特徴、及び利点は、添付の図面と併せて、本発明の以下の詳細の説明を考慮して、より容易に理解されるであろう。
本発明の1つの実施形態は、ビデオを復号する方法であって、
(a)少なくとも1つのスライスと少なくとも1つのタイルとを含む前記ビデオのフレームを受信するステップであって、
前記少なくとも1つのスライスの各々は、他の前記少なくとも1つのスライスとは独立に復号され、且つ前記少なくとも1つのタイルから構成され、
前記少なくとも1つのタイルの特徴は、前記フレームの矩形領域であり、且つラスター走査の順序に配置されている前記復号するための符号化単位を有することである、ステップと、
(b)前記少なくとも1つのタイルの位置情報が前記スライス内で送信されているかどうかを示す第1の情報を受信するステップと、
(c)前記少なくとも1つのタイルを復号することに適する第2の情報を受信するステップであって、
前記第2の情報は前記少なくとも1つのタイルの位置を含む、ステップと
を備える、ビデオを復号する方法を開示する。
本発明の別の実施形態は、ビデオを復号する方法であって、
(a)少なくとも1つのスライスと少なくとも1つのタイルとを含む前記ビデオのフレームを受信するステップであって、前記少なくとも1つのスライスの各々の特徴は、他の前記少なくとも1つのスライスとは独立に復号されることであり、前記少なくとも1つのタイルの各々の特徴は、前記フレームの矩形領域であり、且つラスター走査の順序に配置されている、前記復号するための符号化単位を有することであり、前記フレームの前記少なくとも1つのタイルは、前記フレームのラスター走査の順序に集合的に配置されている、ステップと、
(b)前記タイルの少なくとも1つの最初の最大符号化単位からデータのセットを受信するステップであって、前記データのセットは、(1)最大符号化単位アドレスを表す値と、(2)スライス指標を表す値と、(3)量子化パラメータ情報を表す値とを含む、ステップと
を備える、ビデオを復号する方法を開示する。
H.264/AVCビデオ・エンコーダを示す。 H.264/AVCビデオ・デコーダを示す。 例示的なスライス構造を示す。 別の例示的なスライス構造を示す。 エントロピ・スライスの再構築を示す。 エントロピ・スライスの並列再構築を示す。 1つのスライスと9つのタイルを有するフレームを示す。 3つのスライスと3つのタイルを有するフレームを示す。 タイルに対してのエントロピの選択を示す。 タイルに対してのエントロピの選択を示す。 タイルに対しての別のエントロピの選択を示す。 タイルに対しての別のエントロピの選択を示す。 タイルに対してのさらに別のエントロピの選択を示す。 例示的なシンタックスを示す。 例示的なシンタックスを示す。 タイルの開始に関する明示的な信号を示す。 タイルの開始に関する黙示的な信号を示す。 ライト・ウエイト・タイル・ヘッダーのセットを示す。 スライス・パラメータ指標セットのセットを示す。 タイル終了フラグを示す。
エントロピ符号化/復号を使用する任意のビデオ・コーダ/デコーダ(コーデック)が本明細書に記載の実施形態に適合可能であるが、例示的な実施形態を、単に例示の目的のためにH.264/AVCエンコーダとH.264/AVCデコーダに関連させて説明する。多数のビデオ符号化方式は、ブロック・ベースのハイブリッド・ビデオ符号化のアプローチに基づいており、情報源符号化方式は、フレーム間予測とも称されるピクチャ間予測、フレーム内予測とも称されるピクチャ内予測、及び予測残差の変換符号化のハイブリッドである。フレーム間予測は、時間的冗長性を利用するものであり、フレーム内と予測残差の変換符号化は空間的冗長性を利用するものである。
図1は、例示的なH.264/AVCビデオ・エンコーダ2を示す。フレームとも称される入力ピクチャ4を、符号化のために供給することができる。予測信号6及び残差信号8が生成され、予測信号6は、フレーム間予測10またはフレーム内予測12のいずれかに基づくものとすることができる。フレーム間予測10は、1つ以上の記憶された、参照フレームとも称される参照ピクチャ16、及び入力フレーム4と参照フレーム16との間の動き推定セクション18の処理によって決定される動き情報19を使用する動き補償セクション14によって決定することができる。フレーム内予測12は、復号信号22を使用してフレーム内予測セクション20によって決定することができる。残差信号8は、予測信号6から入力フレーム4を減算することによって決定することができる。残差信号8は、変換/スケーリング/量子化セクション24によって、変換、スケーリング、量子化され、量子化変換係数26が生成される。復号信号22は、予測信号6を、量子化変換係数26を使用して逆(変換/スケーリング/量子化)セクション30によって生成された信号28に加算して生成することができる。動き情報19と量子化変換係数26を、エントロピ符号化セクション32によって、エントロピ符号化し、圧縮ビデオ・ビットストリーム34に書き込むことができる。例えば参照フレームの一部である出力画像領域38は、エンコーダ2において、再構築されたフィルタ前の信号22を使用してデブロッキング・フィルタ36によって生成されてもよい。この出力フレームは、後続の入力ピクチャを符号化するための参照フレームとして使用することができる。
図2は、例示的なH.264/AVCビデオ・デコーダ50を示す。ビットストリームとも称される入力信号52を、復号のために供給することができる。受信したシンボルを、エントロピ復号セクション54によってエントロピ復号し、動き情報56と、イントラ予測情報57と、量子化され、スケーリングされた変換係数58とを生成することができる。動き情報56は、動き補償セクション60によってフレーム・メモリ64に存在する1つ以上の参照フレーム84の一部と組み合わせることができ、そしてフレーム間予測68を生成することができる。量子化され、スケーリングされた変換係数58を、逆量子化し、スケーリングし、逆変換し、復号された残差信号70を生成することができる。残差信号70を、予測信号、すなわちフレーム間予測信号68またはフレーム内予測信号76のいずれかに加算することができる。フレーム内予測情報は、フレーム内予測セクション74によって、現フレームの既に復号された情報72と組み合わされ、加算された信号72を生成することができる。加算された信号72は、デブロッキング・フィルタ80でフィルタ処理し、フィルタ処理された信号82は、フレーム・メモリ64に書き込むことができる。
H.264/AVCにおいて、入力ピクチャは、固定サイズのマクロブロックに区分することができ、各マクロブロックは、輝度成分の16×16サンプルと、2つの色差成分の各々8×8サンプルとの矩形のピクチャ領域をカバーする。H.264/AVC標準の復号処理は、マクロブロックの処理単位を規定している。エントロピ・デコーダ54は、圧縮ビデオ・ビットストリーム52のシンタックス要素を構文解析し、それらを多重分離する。H.264/AVCは、2つの異なるエントロピ復号方法、すなわち、CAVLCと呼ばれ、コンテキスト適応切り替え可変長符号のセットの使用に基づく複雑性の低い方式と、CABACと呼ばれ、計算量がより厳しく要求される、コンテキスト・ベースの適応型2値算術符号化の方式と、を指定する。そのようなエントロピ復号方式の両方において、現在のシンボルの復号は、前に正しく復号されたシンボルと、適応的に更新されたコンテキスト・モデルとに依存することができる。更に、例えば、予測データ情報、残差データ情報、異なる色平面などの異なるデータ情報は、一緒に多重化することができる。多重分離は、要素がエントロピ復号されるまで待つことが可能である。
エントロピ復号した後に、マクロブロックを、逆量子化及び逆変換を経た残差信号と、フレーム内予測信号またはフレーム間予測信号のいずれかの予測信号とを取得して再構築することができる。ブロック歪みは、復号されたマクロブロックにデブロッキング・フィルタを適用することにより低減できる。典型的には、そのような後続の処理は、入力信号がエントロピ復号された後に開始されるので、エントロピ復号が復号において潜在的ボトルネックとなってしまう。同様に、例えば、H.264/AVCにおけるレイヤー間予測または他のスケーリング可能なコーデックにおけるレイヤー間予測など、代替の予測メカニズムが使用されるコーデックにおいて、エントロピ復号は、デコーダにおける処理の前に行う必要がある場合があるので、エントロピ復号が潜在的ボトルネックとなる。
複数のマクロブロックを含む入力ピクチャは、1つまたは数個のスライスに区分することができる。1つのスライスが表すピクチャの領域におけるサンプルの値は、エンコーダとデコーダとで使用した参照ピクチャが同一であり、デブロッキング・フィルタリングがスライスの境界を越えた情報を使用しない場合、他のスライスからのデータを使わずに、適切に復号され得る。それ故に、1つのスライスに対するエントロピ復号とマクロブロックの再構築は、他のスライスに依存しない。特に、エントロピ復号状態は、各スライスの開始時にリセットしてもよい。エントロピ復号及び再構築の両方について、近傍の利用可能性を定義する時に、他のスライスのデータは、利用不可とマークすることができる。スライスは、並列に、エントロピ復号され、再構築することが可能である。イントラ予測及び動きベクトル予測は、好ましくは、スライスの境界を越えることは許可されない。これに対し、デブロッキング・フィルタリングは、スライス境界をまたがる情報を使用することができる。
図3は、水平方向に11個のマクロブロックと垂直方向に9個のマクロブロックとを含む例示的なビデオ・ピクチャ90を示す(9個の例示的なマクロブロックには91〜99とラベルが付けられている)。図3には、例示的な3つのスライスが示されており、第1のスライスは「スライス#0」100と示され、第2のスライスは「スライス#1」101と示され、第3のスライスは「スライス#2」102と示されている。H.264/AVCデコーダは、3つのスライス100、101、102を並列に復号し、再構築することが可能である。各スライドは、逐次方式で走査線順に送信することができる。各スライスの復号/再構築の処理の開始時に、コンテキスト・モデルは、初期化またはリセットされ、他のスライスのマクロブロックは、エントロピ復号及びマクロブロック再構築の両方に対して利用不可とマークされる。従って、あるマクロブロック、例えば、「スライス#1」内の93とラベルが付いたマクロブロックに対して、「スライス#0」内のマクロブロック(例えば、91及び92とラベルが付けられたマクロブロック)は、コンテキスト・モデルの選択または再構築に使用できない。一方、あるマクロブロック、例えば、「スライス#1」内の95とラベルが付いたマクロブロックに対して、「スライス#1」内の他のマクロブロック(例えば、93及び94とラベルが付けられたマクロブロック)は、コンテキスト・モデルの選択または再構築に使用できる。従って、エントロピ復号及びマクロブロック再構築は、1つのスライス内において、逐次進行する。スライスがフレキシブル・マクロブロック順序(FMO)を使用して定義されていない限り、スライス内のマクロブロックは、ラスター走査の順序で処理される。
フレキシブル・マクロブロック順序は、ピクチャがスライスに区分される方法を変更するためにスライス・グループを定義する。スライス・グループ内のマクロブロックは、マクロブロック対スライス・グループのマップで定義され、それは、スライス・ヘッダー内のピクチャ・パラメータ・セットの内容及び追加情報によって通知される。マクロブロック対スライス・グループのマップは、ピクチャ内の各マクロブロックに対するスライス・グループ識別番号から構成される。スライス・グループ識別番号は、関連するマクロブロックが属するスライス・グループを規定する。各スライス・グループは、1つ以上のスライスに区分することができ、1つのスライスは、同じスライス・グループ内のマクロブロックのシーケンスであり、該シーケンスは、特定のスライス・グループのマクロブロックのセット内でラスター走査の順序で処理される。エントロピ復号及びマクロブロック再構築は、1つのスライス・グループ内で逐次進行する。
図4は、3つのスライス・グループへのマクロブロックの割り当ての例示を示し、第1のスライス・グループは、「スライス・グループ#0」103と表され、第2のスライス・グループは、「スライス・グループ#1」104と表され、第3のスライス・グループは、「スライス・グループ#2」105と表されている。これらのスライス・グループ103、104、105は、ピクチャ90において、それぞれ、2つの前景領域と1つの背景領域とに関連するようにしてもよい。
ピクチャは、1つ以上の再構築スライスに区分することが可能で、再構築スライスは、エンコーダとデコーダとで使用された参照ピクチャが同一である場合、その再構築スライスが表すピクチャの領域のサンプルの値が他の再構築スライスからのデータを使わずに正しく再構築できるという意味で、自己完結型であり得る。再構築スライス内の全ての再構築マクロブロックは、再構築のための近傍の定義付けに利用可能であってもよい。
再構築スライスは、2つ以上のエントロピ・スライスに区分することが可能で、エントロピ・スライスは、エントロピ・スライスが表すピクチャの領域におけるシンボル値が他のエントロピ・スライスからのデータを使わずに、正しくエントロピ復号できるという意味で、自己完結型であり得る。エントロピ符号化状態は、各エントロピ・スライスの復号開始時にリセットすることができる。他のエントロピ・スライスのデータは、エントロピ復号のために近傍の利用可能性を定義する際に、利用不可とマークすることが可能である。他のエントロピ・スライスのマクロブロックは、現在のブロックのコンテキスト・モデルの選択に使用できない。コンテキスト・モデルは、エントロピ・スライス内においてのみ更新可能である。従って、エントロピ・スライスに関連した各エントロピ・デコーダは、それ自体のコンテキスト・モデルのセットを維持するとよい。
エンコーダは、再構築スライスをエントロピ・スライスに区分するか否かを決定し、その決定をビットストリーム中で通知することができる。その信号は、「entropy_slice_flag」と示すことができるエントロピ・スライス・フラグを含むことができる。図5を参照して、エントロピ・スライス・フラグを調べることができ(130)、エントロピ・スライス・フラグが、ピクチャまたは再構築スライスに関連したエントロピ・スライスが無い(132)ことを示す場合、ヘッダーは、通常のスライス・ヘッダーとして構文解析することができる(134)。エントロピ・デコーダ状態は、リセットすることが可能で(136)、エントロピ復号及び再構築のための近傍情報を定義することができる(138)。次いで、スライス・データをエントロピ復号することができ(140)、スライスを再構築することが可能である(142)。エントロピ・スライス・フラグが、ピクチャと関連したエントロピ・スライスまたは再構築スライスがある(146)ことを示す場合、ヘッダーは、エントロピ・スライス・ヘッダーとして構文解析することができる(148)。エントロピ・デコーダ状態は、リセットすることが可能で(150)、エントロピ復号のための近傍情報を定義することができ(152)、エントロピ・スライス・データを、エントロピ復号することができる(154)。次いで、再構築のための近傍情報を定義することが可能で(156)、スライスを再構築することができる(142)。スライスの再構築(142)後、次のスライスまたはピクチャが分析されてもよい(158)。
図6を参照して、デコーダは、並列復号が可能であり、それ自体の並列性の度合いを定義することができ、例えば、並列にN個のエントロピ・スライスを復号する能力を備えるデコーダを考慮する。このデコーダは、N個のエントロピ・スライスを識別することができる(170)。現在のピクチャまたは再構築スライスにおいて、N個より少ないエントロピ・スライスが利用可能である場合、デコーダは、後続のピクチャまたは再構築スライスからのエントロピ・スライスを、それらが利用可能であれば、復号することが可能である。あるいは、デコーダは、現在のピクチャまたは再構築スライスが完全に処理されるまで待って、その後、後続のピクチャまたは再構築スライスの部分を復号してもよい。最大N個のエントロピ・スライスの識別(170)後、識別されたエントロピ・スライスの各々を、独立にエントロピ復号してもよい。第1のエントロピ・スライスを復号することができる(172〜176)。第1のエントロピ・スライの復号(172〜176)は、デコーダ状態のリセット(172)を含むことが可能である。CABACエントロピ復号が使用される場合、CABAC状態をリセットすることができる。第1のエントロピ・スライスのエントロピ復号のための近傍情報を定義することができ(174)、第1のエントロピ・スライス・データを復号することが可能である(176)。最大N個までのエントロピ・スライスの各々に対して、これらのステップを実行することができる(N番目のエントロピ・スライスに対して178〜182)。エントロピ・スライスの全部または一部がエントロピ復号されると、デコーダは、エントロピ・スライスを再構築することができる(184)。
エントロピ・スライスがN個より多い場合、復号スレッドは、1個のエントロピ・スライスのエントロピ復号完了後に、次のエントロピ・スライスのエントロピ復号を開始することができる。従って、スレッドが低複雑性のエントロピ・スライスのエントロピ復号を終了すると、そのスレッドは他のスレッドの復号の終了を待たずに、別のエントロピ・スライスの復号を開始することができる。
図3に示すように、スライスの配置は、ラスター走査またはラスター走査順序としても知られている画像の走査順序に並んだ一対のマクロブロックの間に、各スライスを定義することに限定することができる。この走査順のスライスの配置は、計算効率は良いが、高効率の並列符号化と並列復号には適さない傾向がある。更に、このスライスの走査順序の定義は、符号化効率に非常に適した共通の特性を持っている可能性が高い、画像のより小さな局所領域をグループにしない傾向がある。図4に示したようなスライスの配置は、その配置において柔軟性は高いが、高効率の並列符号化と並列復号には適さない傾向がある。更に、この非常に柔軟なスライスの定義は、デコーダに実装するためには、計算上複雑である。
図7を参照すると、あるタイル方式では、画像が矩形(正方形を含む)領域のセットに分割されている。タイルの各々の中のマクロブロック(例えば、最大符号化単位)は、ラスター走査順序に符号化され、復号される。タイルの配置も同様に、ラスター走査順序に符号化され、復号される。従って、任意の適切な数(例えば、0以上)の列の境界があってもよいし、任意の適切な数(例えば、0以上)の行の境界があってもよい。従って、図7で示されている1つのスライスのように、フレームは、1つ以上のスライスを定義することが可能である。幾つかの実施形態において、異なるタイルに位置するマクロブロックは、近傍マクロブロック情報に依存する、イントラ予測、動き補償、エントロピ符号化コンテキスト選択または他の処理に利用可能ではない。
図8を参照すると、このタイル方式では、画像が3個の矩形列のセットに分割されて示されている。タイルの各々の中のマクロブロック(例えば、最大符号化単位)は、ラスター走査順序に符号化され、復号される。タイルも、同様にラスター走査順序で符号化され、復号される。1つ以上のスライスをタイルの走査順序で定義することができる。スライスの各々は独立に復号可能である。例えば、スライス1は、マクロブロック1〜9を含むように定義することができ、スライス2は、マクロブロック10〜28を含むように定義することができ、スライス3は、3個のタイルに跨るマクロブロック29〜126を含むように定義することができる。タイルの使用により、フレームの、より局部的な領域のデータを処理することによって、符号化効率が促進される。
1つの実施形態において、エントロピ符号化・復号処理は、各タイルの開始時に初期化される。エンコーダにおいて、この初期化には、エントロピ・エンコーダ内の残りの情報をビットストリームに書き込む、フラッシングとして知られる処理と、あらかじめ定義され設定されたビットストリーム位置の1つに到達するために、ビットストリームに追加のデータをパディングする処理と、エントロピ・エンコーダを、所定の、またはエンコーダ及びデコーダの両方に知られている既知の状態に設定する処理とを含めることができる。多くの場合、既知の状態は、値のマトリックスの形である。更に、所定のビットストリームの位置は、ビットの倍数でアラインされた、すなわち、バイト・アラインされた位置とすることができる。デコーダにおいて、この初期化処理は、エントロピ・デコーダを、エンコーダ及びデコーダの両方に知られている既知の状態に設定し、ビットストリーム内のビットを、あらかじめ定義され設定されたビットストリーム位置を読み込むまで、無視する処理を含んでもよい。
幾つかの実施形態において、複数の既知の状態が、エンコーダとデコーダに対して利用可能であり、エントロピ符号化処理及び/またはエントロピ復号処理の初期化に使用することができる。従来から、初期化に使われる既知の状態は、エントロピ初期化インジケータ値を有するスライス・ヘッダーで通知されている。図7及び図8で示したタイル方式では、タイルとスライスとは互いにアラインされていない。従って、タイルとスライスとがアラインされていないので、従来は、スライス内の最初のマクロブロックと同一の位置にある、ラスター走査順序で最初のマクロブロックを含まないタイルに対して、エントロピ初期化インジケータ値は、送信されることはない。例えば、図7を参照すると、マクロブロック1は、スライス・ヘッダーで送信されるエントロピ初期化インジケータ値を使用して初期化されるが、次のタイルのマクロブロック16に対して、同様なエントロピ初期化インジケータ値は無い。通常、同様なエントロピ初期化インジケータ情報は、単一のスライス(マクロブロック1に対するスライス・ヘッダーを有する)のタイルに対応するマクロブロック34、43、63、87、99、109、及び121に対して、存在しない。
図8を参照すると、エントロピ初期化インジケータ値は、3つのスライスに対して同様に、スライス1のマクロブロック1に対するスライス・ヘッダーの中に提供され、スライス2のマクロブロック10に対するスライス・ヘッダーの中に提供され、スライス3のマクロブロック29に対するスライス・ヘッダーの中に提供されている。しかしながら、図7と同様の形で、エントロピ初期化インジケータ値が、中央のタイル(マクロブロック37から始まっている)及び右側のタイル(マクロブロック100から始まっている)には欠如している。中央及び右側のタイルに対してエントロピ初期化インジケータ値が無ければ、タイルのマクロブロックを、並列方式で高い符号化効率により効果的に符号化及び復号するのに問題がある。
1つのフレーム内に1つ以上のタイル及び1つ以上のスライスを使用しているシステムでは、エントロピ初期化インジケータ値をタイルの最初のマクロブロック(例えば、最大符号化単位)と共に提供するのが好ましい。図7のマクロブロック16と共に、エントロピ初期化インジケータ値がエントロピ初期化情報を明示的に選択するために提供されている。その明示的決定には、いかなる適切な方式を使ってもよく、例えば、前のスライス・ヘッダー等の中にある前のエントロピ初期化インジケータ値を使用すべきであるということを示すこと、または、そうでなければ、それぞれのマクロブロック/タイルに関連付けられたエントロピ初期化インジケータ値を送信することが可能である。このように、スライスにエントロピ指標値を含むヘッダーを含めることを可能にしながら、タイルの最初のマクロブロックにも同様にエントロピ初期化インジケータ値を含めることができる。
図9Aを参照して、この追加情報の符号化は次のようであってもよい。
If (num_column_minus1>0 && num_rows_min1>0)
then
tile_cabac_init_idc_present_flag
num_column_minus1>0は、タイル内の列の数が0でないかを決定し、num_rows_min1>0は、タイル内の行の数が0でないかを決定し、両者は実質的に、タイルが符号化/復号で使用されているかを決定する。タイルが使用されている場合、tile_cabac_init_idc_present_flagは、エントロピ初期化インジケータ値がエンコーダからデコーダに伝えられる方法を示すフラグである。例えば、フラグが第1の値に設定されている場合、前に送られたエントロピ初期化インジケータ値を使用するというような第1のオプションを選択することができる。具体的な例として、この前に送られたエントロピ初期化インジケータ値は、タイルの最初のマクロブロックを含んでいるスライスに対応するスライス・ヘッダーで送信されたエントロピ初期化インジケータ値に等しくすることが可能である。例えば、フラグが第2の値に設定されている場合、エントロピ初期化インジケータ値が、対応するタイルのビットストリームの中に提供されるというような第2のオプションが選択されてもよい。具体的な例として、エントロピ初期化インジケータ値は、タイルの最初のマクロブロックに対応するデータの中に提供される。
エントロピ初期化インジケータ値がエンコーダからデコーダに伝えられる方法を示すフラグを通知するシンタックスは、次のようにすることができる。
図9Bを参照して、シーケンス・パラメータ・セット(例えば、フレームのシーケンスに関する情報)及び/またはピクチャ・パラメータ・セット(例えば、特定のフレームに関する情報)に含まれるフラグのような他の方式が、タイルが使用されているかを決定するために使われてもよい。
シンタックスは、次のようにすることができる。
tile_enable_flagは、タイルが現在のピクチャで使用されているかを決定する。
図10Aと10Bを参照して、タイルに対する適切なエントロピ初期化インジケータ値情報を提供する方式は次のようにすることができる。
第1に、マクロブロック(例えば、符号化単位)が、タイルにおける最初のマクロブロックであるかどうかを確認する。それ故、この方式は、エントロピ初期化インジケータ値を含む可能性があるタイルの最初のマクロブロックを決定する。図7を参照すると、これは、マクロブロック1、16、34、43、63、87、99、109、及び121を指している。図8を参照すると、これは、マクロブロック1、37及び100を指している。
第2に、タイルの最初のマクロブロック(例えば、符号化単位)が、スライスの最初のマクロブロック(例えば、符号化単位)でないことを確認する。それ故、この方式は、スライス内のさらなるタイルを識別する。図7を参照すると、これは、マクロブロック16、34、43、3、87、99、109、及び121を指している。図8を参照すると、これは、マクロブロック37及び100を指している。
第3に、tile_cabac_init_idc_flagが第1の値に等しいかどうか、且つタイルが有効かどうかを確認する。1つの特定の実施形態では、この値は0に等しい。第2の実施形態では、この値は1に等しい。更なる実施形態では、(num_column_min1>0 && num_rows_min1>0)の場合、タイルは有効化される。別の実施形態では、tile_enable_flagが1に等しい場合に、タイルは有効化される。
そのように識別されたマクロブロックに対して、tile_cabac_init_idc_present_flagを設定することができる。
次いで、システムは、tile_cabac_init_idc_flagが存在し、且つ(num_column_minus1>0 && num_rows_min1>0)である場合にのみ、tile_cabac_init_idc_present_flagの信号を送ればよい。それ故、システムは、タイルが使用されていて、フラグが、エントロピ情報が送信されていること(すなわち、cabac_init_idc flag)を示す場合のみ、エントロピ情報を送信する。
符号化シンタックスは、次のようにすることができる。
一般的に、スライスの最初のマクロブロックに関連していないタイルの最初のマクロブロック(例えば、符号化単位)に関連する1つ以上のフラグが、エントロピ初期化インジケータ値を定義することができる。フラグは、エントロピ初期化インジケータ値が前に提供された情報であるか、デフォルト値であるか、または提供されることになっているエントロピ初期化インジケータ値であるかを示すことができる。
再び図7を参照する。デコーダは、ピクチャ・フレーム内のマクロブロック16の位置を知ってはいるが、エントロピ復号が原因で、マクロブロック15がエントロピ復号されるまで、ビットストリームの中の、マクロブロック16を記述するビットの位置が分からない。復号を行って次のマクロブロックを識別するこのやり方は、ビットのオーバヘッドが小さく保たれ、好ましい。しかしながら、タイルを並列に復号することには役立たない。フレームの中の特定のタイルに対してビットストリームの中の特定の位置を識別する能力を高めて、エントロピ復号の完了を待たずに、異なるタイルをデコーダで同時に並列に復号できるようにするために、ビットストリームの中でのタイルの位置を識別する信号をビットストリームの中に含めることが可能である。図11を参照する。ビットストリームの中でのタイルの位置の通知は、スライスのヘッダーで提供されるのが好ましい。フラグが、ビットストリームの中でのタイルの位置がスライス内で送信されていることを示す場合、スライス内のタイル(群)それぞれの最初のマクロブロックの、スライス内での位置に加えて、フレーム内のそのようなタイルの数を含むことも好ましい。更に、所望であれば、選択されたタイルのセットに対してのみの位置情報が含まれてもよい。
符号化シンタックスは、次のようにすることができる。
タイル位置がビットストリームの中に送信されているかどうかを、tile_locations_flagで通知する。tile_offset[i]は、絶対位置値または差分サイズ値(前に符号化されたタイルに対してのタイル・サイズの相違)または任意の適切な方式を使って、通知することができる。
この方式は、オーバヘッドは小さいが、エンコーダは、一般的には、全てのタイルが符号化されるまでビットストリームを送信できない。
幾つかの実施形態では、連続するタイルの、最大値とも称される最大絶対位置値または最大差分サイズ値に関するデータを含むのが好ましい。そのような情報により、エンコーダは、識別された最大値をサポートするために必要なビット数だけを送信でき、デコーダは、識別された最大値をサポートするために必要なビット数だけを受信できる。例えば、比較的小さい最大値に対しては、タイル位置情報には小さいビット深度のみが必要となる。例えば、比較的大きい最大値に対しては、タイル位置情報には大きいビット深度が必要となる。
エントロピ復号を待たずに、デコーダにおいて異なるタイルを並列に処理できるように、異なるタイルを識別する能力を高める別の方式として、各タイルの開始に関連付けられた、ビットストリーム内のマーカーを使用してもよい。これらのタイル・マーカーは、ビットストリームのその特定の部分のエントロピ復号を待たないで、識別されるように、ビットストリーム内に含まれる。一実施形態では、マーカーは、0×000001で始まり、別の実施形態では、マーカーは、0×000002で始まり、別の実施形態では、マーカーは、0×000004または任意の他の適切なビットのシーケンスで始まる。更にマーカーは、タイル及び/またはタイルの最初のマクロブロックに関連付けられた追加のヘッダーを含むことができる。この方法で、結果としてビット・レートは増加するが、エンコーダは、全てのタイルが符号化されるのを待たずに、符号化後に各タイルをビットストリームに書き込むことができる。更に、バッファリングと併せて使用される場合は特に、デコーダは、より効率的な方法でビットストリームを構文解析し、異なるタイルを識別できる。
タイル・ヘッダーは、スライス・ヘッダーと同様であるが、典型的には、より少ない情報が含まれている。必要となる主要な情報は、次のブロックのマクロブロック番号とエントロピ初期化データとスライス指標(タイル内の最初の符号化単位(CU:coding
unit)が属するスライスを示す)である。そのようなタイル・ヘッダーの符号化シンタックスは、図12Aに示したようなものでもよい。あるいは、主要な情報には、初期量子化パラメータも含めることができる。そのようなタイル・ヘッダーの符号化シンタックスは、図12Bに示したようなものでもよい。スライス・ヘッダーで送信されず、且つタイル・ヘッダーにない値は、スライス・ヘッダーに送信された値にリセットすることができる。
幾つかの実施形態では、マーカーは、ビットストリームに含まれ、タイルの開始部に関連付けられる。しかしながら、マーカーは、ビットストリーム内のすべてのタイルに含まれていなくてもよい。これは、エンコーダ及びデコーダが異なるレベルの並列処理で動作することを容易にする。例えば、エンコーダは、ビットストリームには4つのマーカーしか含まなくても、64個のタイルを使用できる。これにより、64の処理を並列に符号化することが可能になり、4つの処理を並列に復号することが可能になる。幾つかの実施形態では、ビットストリーム内のマーカーの数は、エンコーダとデコーダの両方に知られている方法で規定される。例えば、マーカーの数は、ビットストリーム内で通知することも、プロファイルまたはレベルで定義することもできる。
幾つかの実施形態では、位置データがビットストリームの中に含められ、タイルの開始部に関連付けられている。しかしながら、位置データは、ビットストリーム内のすべてのタイルに含まれていなくてもよい。これは、エンコーダ及びデコーダが異なるレベルの並列処理で動作することを容易にする。例えば、エンコーダは、ビットストリームには4つの位置しか含まなくても、64個のタイルを使用できる。これは、64の処理を並列に符号化することを可能にし、4つの処理を並列に復号することを可能にする。幾つかの実施形態では、ビットストリーム内の位置の数は、エンコーダ及びデコーダの両方に知られている方法で指定される。例えば、位置の数は、ビットストリーム内で通知することも、プロファイルまたはレベルで定義することもできる。
図13を参照して、タイルの開始を明示的に識別する1つの例示的方式を示す。タイル指標の値が初期化され(TileIdx=0)、前のタイル位置の値が初期化され(PreviousLocation=0)、前のタイル・サイズの値が初期化され(PreviousTileSize=0)、タイルの数の値が初期化される(TileCount=(num_columns_minus1+1)*(num_rows_minus1+1)(300)。タイル・データは、タイルの最初の最大符号化単位(LCU)のビットストリームに書き込まれ(310)、それは、典型的には、ピクチャの先頭において、左上側の角のLCUである。タイル・データは、タイル内の画素値を再構築するために必要なデータである。書き込まれるべき別のタイルがある場合(320)、値のセットを修正することができる。タイルの内の最大符号化単位の数を示す現在のタイル・サイズを更新することができる(CurrentTileSize = CurrentLocation − PreviousLocation)(330)。ここで、CurrentLocationは、ビットストリーム内の現在のタイルの開始の位置である。別の実施形態では、現在のタイル・サイズは、タイル内の符号化単位の数を表すように更新することができる。現在のタイル・サイズと前のタイル・サイズの間のオフセットを表すタイル差分オフセット(340)は、更新することができる。前の位置は、現在の位置に設定することができ(PreviousLocation = CurrentLocation)、前のタイル・サイズは、現在のタイル・サイズに設定することができ(PreviousTileSize = CurrentTileSize)、タイル指標は、インクリメントすることができる(TileIdx = TileIdx + 1)(350)。次のタイルの最初のLCUは、データと共に書き込むことができる(310)。この再帰的な処理が、スライス内に書き込まれるべき追加のタイルがなくなる(335)まで、繰り返される。
タイル数が1より大きい場合(TileCount>1)(360)、タイル位置情報フラグの存在が設定される(TileLocationInformationPresentFlag = .T.)(370)。更に、例えば、TileLocationInformationPresentFlag、TileDifferentialOffset[0]、TileDifferentialOffset[1]、・・・、TileDifferentialOffset[NumberOfTilesMinus1]を含む値のセットが書き込まれてもよい(380)。ここに、NumberOfTilesMinus1は、TileCountー1に等しい。幾つかの実施形態では、値のセットは、スライス・ヘッダーに書き込まれる(380)。タイルが1つだけ存在する場合(360)、タイルに関係する追加のデータの格納はスキップされる(385)。幾つかの実施形態では、TileDifferentialOffsetは、現在のスライス内のタイル・サイズを表す。
図14を参照して、タイルの開始を黙示的に識別する例示的な方式を示す。タイル指標の値が初期化され(TileIdx=0)、前のタイル位置が初期化され(PreviousLocation=0)、前のタイル・サイズが初期化される(PreviousTileSize=0)(400)。タイル・データは、タイルの最初の最大符号化単位(LCU)のビットストリームに書き込まれ(410)、それは、典型的には、ピクチャの先頭において、左上側の角のLCUである。書き込まれるべき別のタイルが存在する場合(420)、値のセットがタイルの符号化単位に書き込まれる(425)。書き込まれる値(425)は、マーカー及び/またはタイル・ヘッダー情報を含んでもよく、タイル・ヘッダーは、lightweight_slice_flagまたは等価なものを有するスライス・ヘッダーであってもよい。タイル・ヘッダー情報は、例えば、最大符号化単位アドレスと、スライス指標と、量子化パラメータ情報とを含んでもよい。次のタイルの最初のLCUは、データと共に書き込まれる(410)。この再帰的な処理が、スライス内に書き込まれるべき追加のタイルがなくなる(430)まで、繰り返される。タイル開始位置の黙示的及び/または明示的な通知は、ビットストリームの中に含まれていると理解されたい。
図15を参照して、タイル・ヘッダーは、LCUアドレス、スライス指標及び/または量子化パラメータ情報に加えて、1つ以上のタイル指標値を含むことができる。LCUアドレスは、タイル指標値TileIdxで置き換えられる場合がある。スライス指標は、ビットストリーム内で前に送信されたスライス・パラメータ・セットを指すスライス・パラメータ・セット指標で置き換えられる場合がある。スライス・パラメータ・セットは、量子化パラメータ、エントロピ・コーダ初期化パラメータ、参照リスト・パラメータ、またはループ・フィルタ・パラメータに対する値を含むことができるが、それに限定されない。タイル指標値は、例えば、タイル指標マイナス1のような、任意の適切な値とすることができる。この方法で、最初のタイルに番号0を付け、順次タイルに番号を付ける。タイル指標値を含むことにより、タイルの復号は、計算上の複雑性がより低下する。本発明の幾つかの実施形態では、タイル指標値は、ビットストリームまたはスライスの中の最初のタイルに対応しないタイル・ヘッダーにのみ存在する。
更に、特定のスライスに対して、スライス・ヘッダー内の現在の情報またはスライス・ヘッダー内の前に送信された情報のどちらを使うかを表すフラグがタイル・ヘッダーに含まれていてもよい。これは、システムの計算上の複雑性を更に低減すると共にビットストリームのビット・レートも低減する。
本発明の1つの実施形態では、フラグの存在は、ビットストリーム内においてslice_parameter_set_present_flagで表されてもよい。slice_parameter_set_present_flagのシンタックスは、次のようであってもよい。
slice_parameter_set_present_flagは、スライス・パラメータ・セットが送信されているかをビットストリーム内で通知する。1つの例示的シンタックスは、ピクチャ・パラメータ・セットに対してである。スライス・パラメータ・セット指標は、slice_parameter_set_present_flagが、スライス・パラメータ・セットがビットストリーム内で送信されていることを表す場合にのみ、ビットストリーム内で送信される。「slice_parameter_set_present_flag」が存在し、且つTRUE値に設定されている場合、slice_parameter_set_flagが通知される。「slice_parameter_set_present_flag」が存在し、且つFALSE値に設定されている場合、slice_parameter_set_flagが通知されない。幾つかの実施形態では、「slice_parameter_set_present_flag」がFALSE値に設定されている時、前に送信されたスライス・ヘッダーからの情報が使用される。幾つかの実施形態では、TRUE値は1に等しい場合がある。幾つかの実施形態では、FALSE値は0に等しい場合がある。以下に説明するように、この処理は、フラグslice_parameter_set_flagによって通知されたときに、幾つかのタイル・ヘッダーに対して、スキップしてもよい。本発明の幾つかの実施形態では、フラグslice_parameter_set_flagは、真値であると推測される。
図16を参照して、タイル・ヘッダーは、スライス・パラメータ・セット指標値を含んでもよい。スライス・パラメータ・セット指標値は、前に送信されたスライス・ヘッダー内の情報である、スライス・パラメータ・セットの中の1つ以上のセットを指してもよい。スライス・パラメータ・セットの各々は、例えば、量子化パラメータ(QP)、コンテキスト・ベースの適応型2値算術符号化情報(cabac_init_idc)、参照ピクチャ・リスト修正、またはループ・フィルタ情報を含んでもよい。ループ・フィルタ情報は、典型的に、例えば、適応型ループ・フィルタ情報、サンプル適応型オフセット情報、デブロッキング・フィルタ情報を含む。
例示的なタイル・ヘッダーのシンタックスは、次のようである。

slice_parameter_set_idは、スライス・パラメータ・セット指標値を表し、前に送信されたビットストリーム内の特定のスライス・パラメータ・セットを指す。図16は、2つの異なるタイル・ヘッダーが、2つの異なるslice_parameter_set_idをどのように含み、前に送信されたビットストリーム内の2つの異なるスライス・パラメータ・セットをどのように参照するか、を示す。
tile_idxー1は、タイル指標マイナス1を指定することができる。tile_idx−1は、符号なし数とすることができる。tile_idxー1は、vビットを使うことができ、vはピクチャ内のタイルの最大数に基づいて決められる。例えば、vは、RoundAbove(log2(TileCountー1))として計算することができる。ここで、RoundAbove(x)は、xに等しいかまたはxより大きい最初の整数値に丸めることを表す。
前に述べたように、slice_parameter_set_flagは、slice_parameter_set_idがビットストリーム内で送信されているかどうかを指定する。slice_parameter_set_flagが第1の値である場合、slice_parameter_set_idは、ビットストリームで送信されておらず、既存のアクティブなスライス・パラメータ・セットがタイルに対して使用される。1つの実施形態では、アクティブなスライス・パラメータ・セットは、前のタイルで使われたスライス・パラメータ・セットである。第2の実施形態では、アクティブなスライス・パラメータ・セットは、前のタイルの中の最後の符号化単位によって使用されたスライス・パラメータ・セットである。slice_parameter_set_flagが、第2の値の場合、slice_parameter_set_idがビットストリーム内で送信される。1つの実施形態では、第1と第2の値は、それぞれ、0及び1である。
slice_parameter_set_idは、タイルによって参照されるスライス・パラメータ・セット識別子を指定する。
図17を参照して、フラグを、タイルの終端を示すためにタイルの終端に含めてもよい。この方法で、タイルの終端を決定することに関する計算上の複雑さを簡単にできる。
幾つかのケースで、本記載は、スライス及び/またはタイルに適したデータを有するビットストリームを生成する方式を例示した。この情報が適切な方法でビットストリーム内に含まれていることによって、デコーダは、このデータを、同様に受信し、ビットストリームをより効果的に復号するために使用できる。
前述の明細書において用いた用語および表現は、限定ではなく説明のための用語としてその中で使用されており、そのような用語および表現の使用において、図示及び説明した特徴またはその一部の等価物を排除する意図はなく、本発明の範囲は以下の特許請求の範囲によってのみ規定され限定されることが分かる。

Claims (9)

  1. ビデオを復号化する方法であって、
    タイルが有効かどうかを示す第1フラグを復号し、タイルが有効であると示された場合、
    (a)少なくとも1つのスライスと少なくとも1つのタイルとを含む前記ビデオのフレームを復号するステップであって、
    前記少なくとも1つのタイルの特徴は、前記フレームの矩形領域であり、且つラスター走査の順序に配置されている符号化単位を有することである、ステップと、
    (b)前記少なくとも1つのスライスのスライスヘッダーから、前記少なくとも1つのタイルの位置情報が前記スライスヘッダーにおいて送信されているかどうかを示す第1情報を復号するステップと、
    (c)前記第1情報が、前記少なくとも1つのタイルの位置情報が前記スライスヘッダーにおいて送信されていることを示す場合に、前記スライスヘッダーから、前記少なくとも1つのタイルの開始のバイト・アラインされた位置を示す第2情報を復号するステップと、
    (d)前記少なくとも1つのタイルの終端において、前記タイルの終端を示す第2フラグを復号し、かつ、前記タイルの開始のバイト・アラインされた位置に到達するまでパディングビットを復号するステップと、
    (e)前記少なくとも1つのタイルの各々の開始のバイト・アラインされた位置において、前記各ステップの復号におけるエントロピ復号処理を初期化するステップと、
    を備える、方法。
  2. スライスは、少なくとも1つのタイルを含む
    請求項1に記載の方法。
  3. エントロピ初期化インジケータ値が前記スライスヘッダーから復号される
    請求項1に記載の方法。
  4. 前記エントロピ復号処理を初期化するステップは、前記エントロピ初期化インジケータ値に基づく
    請求項3に記載の方法。
  5. ビデオを符号化する方法であって、
    (a)少なくとも1つのスライスと少なくとも1つのタイルとを含む前記ビデオのフレームのビットストリームを符号化するステップであって、
    前記少なくとも1つのタイルの特徴は、前記フレームの矩形領域であり、且つラスター走査の順序に配置されている符号化単位を有することである、ステップと、
    (b)前記タイルが有効かどうかを示す第1フラグを符号化し、前記タイルが有効であると示された場合、前記少なくとも1つの前記タイルの位置情報が前記少なくとも1つのスライスのスライスヘッダーにおいて送信されているかどうかを示す第1情報であって前記スライスヘッダーにおいて送信される前記第1情報を符号化するステップと、
    (c)前記第1情報が、前記少なくとも1つのタイルの位置情報が前記スライスヘッダーにおいて送信されていることを示す場合に、前記少なくとも1つのタイルの開始のバイト・アラインされた位置を示す第2情報であって前記スライスヘッダーにおいて送信される前記第2情報を符号化するステップと、
    (d)前記少なくとも1つのタイルの終端において、前記タイルの終端を示す第2フラグを符号化し、かつ、前記タイルの開始のバイト・アラインされた位置に到達するまでパディングビットを符号化するステップと、
    (e)前記少なくとも1つのタイルの各々の開始のバイト・アラインされた位置において、前記各ステップの符号化におけるエントロピ符号化処理を初期化するステップと、
    を備える方法。
  6. ビデオを復号化するデコーダであって、
    タイルが有効かどうかを示す第1フラグを復号し、タイルが有効であると示された場合、
    (a)少なくとも1つのスライスと少なくとも1つのタイルとを含む前記ビデオのフレームを復号する復号部であって、
    前記少なくとも1つのタイルの特徴は、前記フレームの矩形領域であり、且つラスター走査の順序に配置されている符号化単位を有することである、復号部と、
    (b)前記少なくとも1つのタイルの各々の開始のバイト・アラインされた位置において、前記復号部におけるエントロピ復号処理を初期化する初期化部と、
    を備え、
    前記復号部は、
    前記少なくとも1つのスライスのスライスヘッダーから、前記少なくとも1つのタイルの位置情報が前記スライスヘッダーにおいて送信されているかどうかを示す第1情報を復号し、
    前記第1情報が、前記少なくとも1つのタイルの位置情報が前記スライスヘッダーにおいて送信されていることを示す場合に、前記スライスヘッダーから、前記少なくとも1つのタイルの開始のバイト・アラインされた位置を示す第2情報を復号し、
    前記少なくとも1つのタイルの終端において、前記タイルの終端を示す第2フラグを復号し、かつ、前記タイルの開始のバイト・アラインされた位置に到達するまでパディングビットを復号する、デコーダ。
  7. ビデオを符号化するエンコーダであって、
    (a)少なくとも1つのスライスと少なくとも1つのタイルとを含む前記ビデオのフレームのビットストリームを符号化する符号化部であって、
    前記少なくとも1つのタイルの特徴は、前記フレームの矩形領域であり、且つラスター走査の順序に配置されている符号化単位を有することである、符号化部と、
    (b)前記少なくとも1つのタイルの各々の開始のバイト・アラインされた位置において、前記符号化部におけるエントロピ符号化処理を初期化する初期化部と、
    を備え、
    前記符号化部は、
    前記タイルが有効かどうかを示す第1フラグを符号化し、前記タイルが有効であると示された場合、前記少なくとも1つの前記タイルの位置情報が前記少なくとも1つのスライスのスライスヘッダーにおいて送信されているかどうかを示す第1情報であって前記スライスヘッダーにおいて送信される前記第1情報を符号化し、
    前記第1情報が、前記少なくとも1つのタイルの位置情報が前記スライスヘッダーにおいて送信されていることを示す場合に、前記少なくとも1つのタイルの開始のバイト・アラインされた位置を示す第2情報であって前記スライスヘッダーにおいて送信される前記第2情報を符号化し、
    前記少なくとも1つのタイルの終端において、前記タイルの終端を示す第2フラグを符号化し、かつ、前記タイルの開始のバイト・アラインされた位置までパディングビットを符号化する、エンコーダ。
  8. 請求項6に記載のデコーダとしてコンピュータを機能させるための復号プログラムであって、前記復号部および前記初期化部としてコンピュータを機能させるための復号プログラムを記録したコンピュータ読み取り可能な記録媒体。
  9. 請求項7に記載のエンコーダとしてコンピュータを機能させるための符号化プログラムであって、前記符号化部および前記初期化部としてコンピュータを機能させるための符号化プログラムを記録したコンピュータ読み取り可能な記録媒体。
JP2016230306A 2011-07-11 2016-11-28 ビデオを復号化する方法、ビデオを符号化する方法、デコーダ、エンコーダ、復号プログラムを記録したコンピュータ読み取り可能な記録媒体、および符号化プログラムを記録したコンピュータ読み取り可能な記録媒体 Active JP6412910B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/180,419 2011-07-11
US13/180,419 US8767824B2 (en) 2011-07-11 2011-07-11 Video decoder parallelization for tiles

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015225472A Division JP6050880B2 (ja) 2011-07-11 2015-11-18 ビデオ・デコーダのタイルに対しての並列化

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2018186688A Division JP6708716B2 (ja) 2011-07-11 2018-10-01 ビデオを復号化する方法、ビデオを符号化する方法、デコーダ、エンコーダ、復号プログラムを記録したコンピュータ読み取り可能な記録媒体、および符号化プログラムを記録したコンピュータ読み取り可能な記録媒体

Publications (2)

Publication Number Publication Date
JP2017079481A JP2017079481A (ja) 2017-04-27
JP6412910B2 true JP6412910B2 (ja) 2018-10-24

Family

ID=47506217

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2014500588A Pending JP2014525151A (ja) 2011-07-11 2012-07-10 ビデオ・デコーダのタイルに対しての並列化
JP2015225472A Active JP6050880B2 (ja) 2011-07-11 2015-11-18 ビデオ・デコーダのタイルに対しての並列化
JP2016230306A Active JP6412910B2 (ja) 2011-07-11 2016-11-28 ビデオを復号化する方法、ビデオを符号化する方法、デコーダ、エンコーダ、復号プログラムを記録したコンピュータ読み取り可能な記録媒体、および符号化プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2018186688A Active JP6708716B2 (ja) 2011-07-11 2018-10-01 ビデオを復号化する方法、ビデオを符号化する方法、デコーダ、エンコーダ、復号プログラムを記録したコンピュータ読み取り可能な記録媒体、および符号化プログラムを記録したコンピュータ読み取り可能な記録媒体

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2014500588A Pending JP2014525151A (ja) 2011-07-11 2012-07-10 ビデオ・デコーダのタイルに対しての並列化
JP2015225472A Active JP6050880B2 (ja) 2011-07-11 2015-11-18 ビデオ・デコーダのタイルに対しての並列化

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2018186688A Active JP6708716B2 (ja) 2011-07-11 2018-10-01 ビデオを復号化する方法、ビデオを符号化する方法、デコーダ、エンコーダ、復号プログラムを記録したコンピュータ読み取り可能な記録媒体、および符号化プログラムを記録したコンピュータ読み取り可能な記録媒体

Country Status (4)

Country Link
US (9) US8767824B2 (ja)
EP (2) EP3800890A1 (ja)
JP (4) JP2014525151A (ja)
WO (1) WO2013008942A1 (ja)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2972588A1 (fr) 2011-03-07 2012-09-14 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
US9325999B2 (en) * 2011-03-10 2016-04-26 Sharp Kabushiki Kaisha Video decoder for slices
FR2977111A1 (fr) 2011-06-24 2012-12-28 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
US8767824B2 (en) * 2011-07-11 2014-07-01 Sharp Kabushiki Kaisha Video decoder parallelization for tiles
US9584819B2 (en) * 2011-10-24 2017-02-28 Qualcomm Incorporated Grouping of tiles for video coding
US9247258B2 (en) * 2011-10-26 2016-01-26 Qualcomm Incorporated Unified design for picture partitioning schemes
EP2775715A4 (en) 2011-10-31 2015-09-23 Mitsubishi Electric Corp DEVICES AND METHODS FOR ENCODING AND DECODING MOVING IMAGES
US8964849B2 (en) 2011-11-01 2015-02-24 Blackberry Limited Multi-level significance maps for encoding and decoding
FR2982447A1 (fr) 2011-11-07 2013-05-10 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
FR2982446A1 (fr) 2011-11-07 2013-05-10 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
EP2595380B1 (en) 2011-11-19 2015-10-21 BlackBerry Limited Multi-level significance map scanning
TWI606718B (zh) * 2012-01-03 2017-11-21 杜比實驗室特許公司 規定視覺動態範圍編碼操作及參數
SG10201608508QA (en) * 2012-01-20 2016-12-29 Samsung Electronics Co Ltd Video Encoding Method And Apparatus And Video Decoding Method And Apparatus Using Unified Syntax For Parallel Processing
US10244246B2 (en) * 2012-02-02 2019-03-26 Texas Instruments Incorporated Sub-pictures for pixel rate balancing on multi-core platforms
EP2811742A4 (en) 2012-02-04 2015-09-02 Lg Electronics Inc VIDEO CODING METHOD, VIDEO DECODING METHOD AND DEVICE THEREFOR
JP6222576B2 (ja) * 2012-03-21 2017-11-01 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、および画像符号化復号装置
BR112014024270B1 (pt) 2012-04-06 2023-01-17 Sony Corporation Dispositivo e método de decodificação
GB2502620B (en) * 2012-06-01 2020-04-22 Advanced Risc Mach Ltd A parallel parsing video decoder and method
KR102249484B1 (ko) * 2012-06-26 2021-05-12 엘지전자 주식회사 비디오 인코딩 방법, 비디오 디코딩 방법 및 이를 이용하는 장치
JP6214235B2 (ja) * 2012-07-02 2017-10-18 キヤノン株式会社 ファイル生成方法、ファイル生成装置、及びプログラム
US20140192899A1 (en) * 2013-01-09 2014-07-10 Mediatek Inc. Method and apparatus for referring to bitstream address related information derived from segment of multi-tile picture to determine bitstream start address of tile of multi-tile picture
US20150023410A1 (en) * 2013-07-16 2015-01-22 Arcsoft Hangzhou Co., Ltd. Method for simultaneously coding quantized transform coefficients of subgroups of frame
US10080019B2 (en) 2014-09-19 2018-09-18 Intel Corporation Parallel encoding for wireless displays
CN113115036A (zh) * 2015-11-24 2021-07-13 三星电子株式会社 视频解码方法和设备及其编码方法和设备
US9794574B2 (en) 2016-01-11 2017-10-17 Google Inc. Adaptive tile data size coding for video and image compression
US10575007B2 (en) 2016-04-12 2020-02-25 Microsoft Technology Licensing, Llc Efficient decoding and rendering of blocks in a graphics pipeline
US10034026B2 (en) * 2016-04-22 2018-07-24 Akila Subramaniam Device for and method of enabling the processing of a video stream
US10157480B2 (en) 2016-06-24 2018-12-18 Microsoft Technology Licensing, Llc Efficient decoding and rendering of inter-coded blocks in a graphics pipeline
ES2963845T3 (es) * 2016-07-14 2024-04-02 Koninklijke Kpn Nv Codificación de vídeo
US10771791B2 (en) * 2016-08-08 2020-09-08 Mediatek Inc. View-independent decoding for omnidirectional video
US11197010B2 (en) 2016-10-07 2021-12-07 Microsoft Technology Licensing, Llc Browser-based video decoder using multiple CPU threads
CN107113430B (zh) 2016-10-12 2019-04-30 深圳市大疆创新科技有限公司 码率控制的方法、计算机系统和装置
US10694202B2 (en) * 2016-12-01 2020-06-23 Qualcomm Incorporated Indication of bilateral filter usage in video coding
DE112017006610T5 (de) * 2016-12-27 2019-09-12 Sony Corporation Bildverarbeitungsvorrichtung und Verfahren
US11290728B2 (en) * 2018-07-02 2022-03-29 Nokia Technologies Oy Method and apparatus for tile-relative addressing in video coding
CN112703736B (zh) * 2018-09-14 2022-11-25 华为技术有限公司 视频译码方法,视频译码设备以及非瞬时性计算机可读介质
EP3664451B1 (en) * 2018-12-06 2020-10-21 Axis AB Method and device for encoding a plurality of image frames
CN113170127B (zh) * 2018-12-07 2024-10-18 三星电子株式会社 使用并行块和条带的视频编码方法和解码方法以及使用并行块和条带的视频编码装置和解码装置
WO2020140281A1 (zh) * 2019-01-04 2020-07-09 京东方科技集团股份有限公司 图像数据处理方法及传输装置、图像显示方法及存储介质
CN112470479B (zh) 2019-02-26 2024-07-30 苹果公司 视频信号编码/解码方法及存储介质
US20220368946A1 (en) * 2019-11-07 2022-11-17 Intel Corporation Heterogeneous real-time streaming and decoding of ultra-high resolution video content
CN113038140B (zh) * 2019-12-24 2024-05-28 扬智电子科技(成都)有限公司 上下文适应性二进制算术编码的视频解码方法与其视频解码装置
KR20220123717A (ko) 2020-01-12 2022-09-08 후아웨이 테크놀러지 컴퍼니 리미티드 비-직사각형 병합 모드로 가중 예측을 하모나이징하는 방법 및 장치
WO2021164785A1 (en) * 2020-02-21 2021-08-26 Beijing Bytedance Network Technology Co., Ltd. Coding of pictures containing slices and tiles
EP4097976A4 (en) 2020-02-21 2023-03-01 Beijing Bytedance Network Technology Co., Ltd. SLICE AND TILE PARTITIONING IN VIDEO ENCODING
CN113505254B (zh) * 2021-07-08 2024-01-23 山东志盈医学科技有限公司 服务器高效存储数字切片的方法和装置

Family Cites Families (95)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04185119A (ja) * 1990-11-20 1992-07-02 Matsushita Electric Ind Co Ltd 可変長符号化装置
US5220325A (en) * 1991-03-28 1993-06-15 At&T Bell Laboratories Hierarchical variable length decoder for digital video data
US7095783B1 (en) * 1992-06-30 2006-08-22 Discovision Associates Multistandard video decoder and decompression system for processing encoded bit streams including start codes and methods relating thereto
US5784631A (en) * 1992-06-30 1998-07-21 Discovision Associates Huffman decoder
US5878273A (en) * 1993-06-24 1999-03-02 Discovision Associates System for microprogrammable state machine in video parser disabling portion of processing stages responsive to sequence-- end token generating by token generator responsive to received data
US5663725A (en) * 1995-11-08 1997-09-02 Industrial Technology Research Institute VLC decoder with sign bit masking
US5959690A (en) * 1996-02-20 1999-09-28 Sas Institute, Inc. Method and apparatus for transitions and other special effects in digital motion video
US5767797A (en) 1996-06-18 1998-06-16 Kabushiki Kaisha Toshiba High definition video decoding using multiple partition decoders
US6101276A (en) * 1996-06-21 2000-08-08 Compaq Computer Corporation Method and apparatus for performing two pass quality video compression through pipelining and buffer management
US6651252B1 (en) * 1999-10-27 2003-11-18 Diva Systems Corporation Method and apparatus for transmitting video and graphics in a compressed form
US6940912B2 (en) * 2000-04-21 2005-09-06 Microsoft Corporation Dynamically adaptive multimedia application program interface and related methods
US6614442B1 (en) 2000-06-26 2003-09-02 S3 Graphics Co., Ltd. Macroblock tiling format for motion compensation
US20030118102A1 (en) * 2000-11-10 2003-06-26 Weiping Li Encoding and decoding of truncated scalable bitstreams
EP1374429A4 (en) * 2001-03-05 2009-11-11 Intervideo Inc SYSTEMS AND METHOD FOR CODING AND DECODING REDUNDANT MOTION VECTORS IN COMPRESSED VIDEO BITSTRAMS
WO2004006446A2 (en) * 2002-07-02 2004-01-15 Conexant Systems, Inc. Hypothetical reference decoder for compressed image and video
US9192859B2 (en) * 2002-12-10 2015-11-24 Sony Computer Entertainment America Llc System and method for compressing video based on latency measurements and other feedback
US20050013498A1 (en) * 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
US7724827B2 (en) * 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US8064520B2 (en) * 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
KR20050049964A (ko) * 2003-11-24 2005-05-27 엘지전자 주식회사 압축 동영상의 고속 해상도 변환 장치
US7379608B2 (en) * 2003-12-04 2008-05-27 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung, E.V. Arithmetic coding for transforming video and picture data units
ATE555475T1 (de) * 2004-04-28 2012-05-15 Panasonic Corp Stream-erzeugungsvorrichtung für bewegliche bilder, kodierungsvorrichtung für bewegliche bilder, multiplex-vorrichtung für bewegliche bilder und decodierungsvorrichtung für bewegliche bilder
US7487193B2 (en) * 2004-05-14 2009-02-03 Microsoft Corporation Fast video codec transform implementations
US8374238B2 (en) * 2004-07-13 2013-02-12 Microsoft Corporation Spatial scalability in 3D sub-band decoding of SDMCTF-encoded video
US7881546B2 (en) * 2004-09-08 2011-02-01 Inlet Technologies, Inc. Slab-based processing engine for motion video
US7929776B2 (en) * 2005-03-10 2011-04-19 Qualcomm, Incorporated Method and apparatus for error recovery using intra-slice resynchronization points
US8422546B2 (en) * 2005-05-25 2013-04-16 Microsoft Corporation Adaptive video encoding using a perceptual model
US20070147497A1 (en) * 2005-07-21 2007-06-28 Nokia Corporation System and method for progressive quantization for scalable image and video coding
US7949054B2 (en) 2006-06-01 2011-05-24 Microsoft Corporation Flexible data organization for images
US8000388B2 (en) * 2006-07-17 2011-08-16 Sony Corporation Parallel processing apparatus for video compression
JP2008193627A (ja) * 2007-01-12 2008-08-21 Mitsubishi Electric Corp 画像符号化装置、画像復号装置、および画像符号化方法、画像復号方法
US8515194B2 (en) * 2007-02-21 2013-08-20 Microsoft Corporation Signaling and uses of windowing information for images
TWI341657B (en) * 2007-04-03 2011-05-01 Nat Univ Tsing Hua Cabac decoding method
US8189676B2 (en) * 2007-04-05 2012-05-29 Hong Kong University Of Science & Technology Advance macro-block entropy coding for advanced video standards
US9313515B2 (en) * 2007-05-16 2016-04-12 Thomson Licensing Methods and apparatus for the use of slice groups in encoding multi-view video coding (MVC) information
JP4356028B2 (ja) * 2007-05-17 2009-11-04 ソニー株式会社 情報処理装置および方法
US8693541B2 (en) * 2007-05-24 2014-04-08 Samsung Electronics Co., Ltd System and method of providing motion estimation
US9648325B2 (en) * 2007-06-30 2017-05-09 Microsoft Technology Licensing, Llc Video decoding implementations for a graphics processing unit
US8254455B2 (en) * 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
US8265144B2 (en) * 2007-06-30 2012-09-11 Microsoft Corporation Innovations in video decoder implementations
US20090074075A1 (en) * 2007-09-14 2009-03-19 The Hong Kong University Of Science And Technology Efficient real-time rate control for video compression processes
BR122012021950A2 (pt) * 2007-10-05 2015-08-04 Thomson Licensing Aparelho para incorporação de informação de usabilidade de vídeo (vui) em um sistema de codificação de vídeo com múltiplos visualizações (mvc)
US8542748B2 (en) 2008-03-28 2013-09-24 Sharp Laboratories Of America, Inc. Methods and systems for parallel video encoding and decoding
CN102055963A (zh) 2008-06-13 2011-05-11 华为技术有限公司 一种视频编码、解码方法及编码、解码装置
US8908763B2 (en) * 2008-06-25 2014-12-09 Qualcomm Incorporated Fragmented reference in temporal compression for video coding
US8290782B2 (en) * 2008-07-24 2012-10-16 Dts, Inc. Compression of audio scale-factors by two-dimensional transformation
WO2010017166A2 (en) * 2008-08-04 2010-02-11 Dolby Laboratories Licensing Corporation Overlapped block disparity estimation and compensation architecture
US8213503B2 (en) * 2008-09-05 2012-07-03 Microsoft Corporation Skip modes for inter-layer residual video coding and decoding
US8326075B2 (en) * 2008-09-11 2012-12-04 Google Inc. System and method for video encoding using adaptive loop filter
US8311111B2 (en) * 2008-09-11 2012-11-13 Google Inc. System and method for decoding using parallel processing
US8634457B2 (en) * 2008-09-26 2014-01-21 Qualcomm Incorporated Determining availability of video data units
KR101590633B1 (ko) * 2008-11-11 2016-02-02 삼성전자주식회사 슬라이스 단위로 분할된 동영상을 처리하는 동영상 부호화/복호화장치 및 동영상 부호화/복호화방법
US9467699B2 (en) 2008-12-03 2016-10-11 Hfi Innovation Inc. Method for performing parallel coding with ordered entropy slices, and associated apparatus
US20100226438A1 (en) * 2009-02-04 2010-09-09 Droplet Technology, Inc. Video Processing Systems, Methods and Apparatus
US20100226441A1 (en) * 2009-03-06 2010-09-09 Microsoft Corporation Frame Capture, Encoding, and Transmission Management
US20100232504A1 (en) * 2009-03-13 2010-09-16 The State of Oregon acting by and through the State Board of Higher Education on behalf of the Supporting region-of-interest cropping through constrained compression
US8438397B2 (en) * 2009-06-04 2013-05-07 Broadcom Corporation Watermarking for compressed scalable coded bitstreams
JP5233897B2 (ja) * 2009-07-31 2013-07-10 ソニー株式会社 画像処理装置および方法
KR101377530B1 (ko) * 2009-08-21 2014-03-27 에스케이텔레콤 주식회사 적응적 움직임 벡터 해상도를 이용한 영상 부호화/복호화 방법 및 장치
US8699565B2 (en) * 2009-08-27 2014-04-15 Hewlett-Packard Development Company, L.P. Method and system for mixed-resolution low-complexity information coding and a corresponding method and system for decoding coded information
US9877033B2 (en) * 2009-12-21 2018-01-23 Qualcomm Incorporated Temporal and spatial video block reordering in a decoder to improve cache hits
US20110194613A1 (en) * 2010-02-11 2011-08-11 Qualcomm Incorporated Video coding with large macroblocks
US8588536B2 (en) * 2010-02-22 2013-11-19 Texas Instruments Incorporated Guaranteed-rate tiled image data compression
US8542737B2 (en) * 2010-03-21 2013-09-24 Human Monitoring Ltd. Intra video image compression and decompression
US20110280314A1 (en) * 2010-05-12 2011-11-17 Texas Instruments Incorporated Slice encoding and decoding processors, circuits, devices, systems and processes
US9154807B2 (en) * 2010-06-25 2015-10-06 Qualcomm Incorporated Inclusion of switched interpolation filter coefficients in a compressed bit-stream
US20110317757A1 (en) * 2010-06-25 2011-12-29 Qualcomm Incorporated Intra prediction mode signaling for finer spatial prediction directions
US9485546B2 (en) * 2010-06-29 2016-11-01 Qualcomm Incorporated Signaling video samples for trick mode video representations
US20130194386A1 (en) * 2010-10-12 2013-08-01 Dolby Laboratories Licensing Corporation Joint Layer Optimization for a Frame-Compatible Video Delivery
US9258573B2 (en) * 2010-12-07 2016-02-09 Panasonic Intellectual Property Corporation Of America Pixel adaptive intra smoothing
US9462280B2 (en) * 2010-12-21 2016-10-04 Intel Corporation Content adaptive quality restoration filtering for high efficiency video coding
US8761245B2 (en) * 2010-12-21 2014-06-24 Intel Corporation Content adaptive motion compensation filtering for high efficiency video coding
US9060174B2 (en) * 2010-12-28 2015-06-16 Fish Dive, Inc. Method and system for selectively breaking prediction in video coding
US9300976B2 (en) 2011-01-14 2016-03-29 Cisco Technology, Inc. Video encoder/decoder, method and computer program product that process tiles of video data
US9215473B2 (en) * 2011-01-26 2015-12-15 Qualcomm Incorporated Sub-slices in video coding
EP2678944B1 (en) 2011-02-25 2019-11-06 BlackBerry Limited Methods and devices for data compression using offset-based adaptive reconstruction levels
PT3001682T (pt) * 2011-03-01 2017-05-18 ERICSSON TELEFON AB L M (publ) Controlo de filtragem de desbloqueamento
US9325999B2 (en) * 2011-03-10 2016-04-26 Sharp Kabushiki Kaisha Video decoder for slices
US20120230398A1 (en) * 2011-03-10 2012-09-13 Christopher Andrew Segall Video decoder parallelization including slices
US20120230399A1 (en) * 2011-03-10 2012-09-13 Christopher Andrew Segall Video decoder parallelization including a bitstream signal
US9532058B2 (en) * 2011-06-03 2016-12-27 Qualcomm Incorporated Intra prediction mode coding with directional partitions
US20120314767A1 (en) * 2011-06-13 2012-12-13 Qualcomm Incorporated Border pixel padding for intra prediction in video coding
US10298939B2 (en) * 2011-06-22 2019-05-21 Qualcomm Incorporated Quantization in video coding
US8767824B2 (en) * 2011-07-11 2014-07-01 Sharp Kabushiki Kaisha Video decoder parallelization for tiles
US9398307B2 (en) * 2011-07-11 2016-07-19 Sharp Kabushiki Kaisha Video decoder for tiles
US9584819B2 (en) * 2011-10-24 2017-02-28 Qualcomm Incorporated Grouping of tiles for video coding
US9247258B2 (en) * 2011-10-26 2016-01-26 Qualcomm Incorporated Unified design for picture partitioning schemes
US9332259B2 (en) * 2012-01-18 2016-05-03 Qualcomm Incorporated Indication of use of wavefront parallel processing in video coding
US9584812B2 (en) * 2012-01-20 2017-02-28 Blackberry Limited Methods and devices for context set selection
US9565437B2 (en) * 2013-04-08 2017-02-07 Qualcomm Incorporated Parameter set designs for video coding extensions
US9648335B2 (en) * 2013-07-12 2017-05-09 Qualcomm Incorporated Bitstream restrictions on picture partitions across layers
US9451254B2 (en) * 2013-07-19 2016-09-20 Qualcomm Incorporated Disabling intra prediction filtering
US11240526B2 (en) * 2017-01-02 2022-02-01 Industry-University Cooperation Foundation Hanyang University Method and apparatus for decoding image using interpicture prediction
EP3606077A4 (en) * 2017-03-22 2021-01-06 Industry - University Cooperation Foundation Hanyang University LOOP FILTERING PROCESS ACCORDING TO AN ADAPTIVE PIXEL CLASSIFICATION STANDARD
CN116320400A (zh) * 2017-07-03 2023-06-23 汉阳大学校产学协力团 利用包含追加区域的分割单位的影像解码方法以及装置

Also Published As

Publication number Publication date
US10390013B2 (en) 2019-08-20
US20240015291A1 (en) 2024-01-11
US20140247881A1 (en) 2014-09-04
US20170048523A1 (en) 2017-02-16
WO2013008942A1 (en) 2013-01-17
JP2017079481A (ja) 2017-04-27
JP6050880B2 (ja) 2016-12-21
US20190327469A1 (en) 2019-10-24
US9525877B2 (en) 2016-12-20
US20220408090A1 (en) 2022-12-22
US11451776B2 (en) 2022-09-20
JP2014525151A (ja) 2014-09-25
EP2732630A1 (en) 2014-05-21
US20140247882A1 (en) 2014-09-04
US9300962B2 (en) 2016-03-29
JP2016076946A (ja) 2016-05-12
US8767824B2 (en) 2014-07-01
US11805253B2 (en) 2023-10-31
EP3800890A1 (en) 2021-04-07
US20140254671A1 (en) 2014-09-11
US20200413060A1 (en) 2020-12-31
US20130016771A1 (en) 2013-01-17
EP2732630A4 (en) 2015-04-15
US10812799B2 (en) 2020-10-20
JP2019017104A (ja) 2019-01-31
JP6708716B2 (ja) 2020-06-10
US9185411B2 (en) 2015-11-10

Similar Documents

Publication Publication Date Title
JP6412910B2 (ja) ビデオを復号化する方法、ビデオを符号化する方法、デコーダ、エンコーダ、復号プログラムを記録したコンピュータ読み取り可能な記録媒体、および符号化プログラムを記録したコンピュータ読み取り可能な記録媒体
US9667971B2 (en) Video decoder for slices
JP6588507B2 (ja) 復号方法、復号装置、符号化方法及び符号化装置。
US20130016786A1 (en) Video decoder for tiles
TWI568243B (zh) 視訊解碼方法

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20171211

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20171218

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20171205

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180123

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A132

Effective date: 20180529

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180815

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180904

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181001

R150 Certificate of patent or registration of utility model

Ref document number: 6412910

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250