JP2018152864A - 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置 - Google Patents

映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置 Download PDF

Info

Publication number
JP2018152864A
JP2018152864A JP2018085564A JP2018085564A JP2018152864A JP 2018152864 A JP2018152864 A JP 2018152864A JP 2018085564 A JP2018085564 A JP 2018085564A JP 2018085564 A JP2018085564 A JP 2018085564A JP 2018152864 A JP2018152864 A JP 2018152864A
Authority
JP
Japan
Prior art keywords
picture
reference picture
information
video
layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018085564A
Other languages
English (en)
Other versions
JP6556903B2 (ja
Inventor
カン、ジョン、ウォン
Jung Won Kang
リー、ハ、ヒョン
Ha Hyun Lee
チェ、ジン、ス
Jin Soo Choi
キム、ジン、ウン
Jin Woong Kim
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=49635785&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2018152864(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of JP2018152864A publication Critical patent/JP2018152864A/ja
Application granted granted Critical
Publication of JP6556903B2 publication Critical patent/JP6556903B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Control Of El Displays (AREA)

Abstract

【課題】階層的ビットストリーム内の抽出及びスケーラビリティ情報を記述する方法及び装置を提供する。【解決手段】映像情報デコーディング方法は、エンコーディングされた映像に関連した情報を含むNAL(Network Abstraction Layer)ユニットを含むビットストリームを受信するステップと、NALユニットのNALユニットヘッダをパーシングするステップとを含む。NALユニットヘッダは、エンコーディング時、全体ビットストリームで非参照ピクチャであるか、または参照ピクチャであるかを示す1ビットのフラグ情報を含まない。【選択図】図5

Description

本発明は、ビデオ符号化及び復号化処理に関し、より詳しくは、ビットストリーム内のビデオの情報をデコーディングする方法及び装置に関する。
最近、HD(High Definition)解像度を有する放送サービスが韓国内だけではなく、世界的に拡大されるにつれて、多くのユーザが高解像度、高画質の映像に慣れており、それによって、多くの機関が次世代映像機器に対する開発に拍車を掛けている。また、HDTVと共にHDTVの4倍以上の解像度を有するUHD(Ultra High Definition)に対する関心が増大しながら、より高い解像度、高画質の映像に対する圧縮機術が要求されている。
映像圧縮のために、時間的に以前及び/または以後のピクチャから現在ピクチャに含まれている画素値を予測するインター(inter)予測技術、現在ピクチャ内の画素情報を利用して現在ピクチャに含まれている画素値を予測するイントラ(intra)予測技術、出現頻度が高いシンボル(symbol)に短い符号を割り当て、出現頻度が低いシンボルに長い符号を割り当てるエントロピー符号化技術などが使われることができる。
映像圧縮技術には、流動的なネットワーク環境を考慮せずにハードウェアの制限的な動作環境下で一定のネットワーク帯域幅を提供する技術がある。しかし、随時帯域幅が変化するネットワーク環境に適用される映像データを圧縮するためには新たな圧縮技術が要求され、そのために、スケーラブル(scalable)ビデオ符号化/復号化方法が使われることができる。
本発明の技術的課題は、階層的ビットストリーム内の抽出及びスケーラビリティ情報を記述する方法及び装置を提供することである。
本発明の他の技術的課題は、柔軟な方式で多様な種類のビットストリームのスケーラビリティ情報を表現する方法及び装置を提供することである。
本発明の他の技術的課題は、階層的ビットストリーム内の抽出及びスケーラビリティ情報をパケットレベルでの適応的に変換可能に提供する方法及び装置を提供することである。
本発明の一実施例に係る映像情報デコーディング方法は、エンコーディングされた映像に関連した情報を含むNAL(Network Abstraction Layer)ユニットを含むビットストリームを受信するステップと、前記NALユニットのNALユニットヘッダをパーシングするステップとを含み、前記NALユニットヘッダは、前記NALユニットのエンコーディング時、全体ビットストリームで非参照ピクチャであるか、または参照ピクチャであるかを示す1ビットのフラグ情報を含まない。
本発明の一実施例に係る映像デコーディング方法は、受信されたピクチャをデコーディングするステップと、デコーディングされたピクチャをDPB(decoded picture buffer)に参照ピクチャで表示するステップと、前記デコーディングされたピクチャの次のピクチャに対するスライスヘッダをパーシングするステップと、前記スライスヘッダに含まれている参照ピクチャ情報に基づき、前記デコーディングされたピクチャが参照ピクチャであるか、または非参照ピクチャであるかを表示するステップとを含む。
本発明の他の実施例として、活性化されるパラメータセットに対する情報を含むSEI(Supplemental enhancement information)メッセージを受信し、前記パラメータセットに対する情報をパーシングする。
本発明の一実施例によると、階層的ビットストリーム内の抽出及びスケーラビリティ情報を記述する方法及び装置が提供される。
本発明の一実施例によると、柔軟な方式で多様な種類のビットストリームのスケーラビリティ情報を表現する方法及び装置が提供される。
本発明の他の実施例によると、階層的ビットストリーム内の抽出及びスケーラビリティ情報をパケットレベルでの適応的に変換可能に提供する方法及び装置が提供される。
映像符号化装置の一実施例に係る構成を示すブロック図である。 映像復号化装置の一実施例に係る構成を示すブロック図である。 本発明が適用されることができる、複数階層を利用したスケーラブルビデオコーディング構造の一実施例を概略的に示す概念図である。 本発明による映像情報のエンコーディング方法を説明するための制御流れ図である。 本発明による映像情報のデコーディング方法を説明するための制御流れ図である。
以下、図面を参照して本発明の実施形態に対して具体的に説明する。本明細書の実施例を説明するにあたって、関連した公知構成または機能に対する具体的な説明が本明細書の要旨を不明にすると判断される場合、その詳細な説明は省略する。
一構成要素が他の構成要素に“連結されている”または“接続されている”と言及された場合、該当他の構成要素に直接的に連結されている、または接続されていることもあるが、中間に他の構成要素が存在することもあると理解しなければならない。また、本発明において、特定構成を“含む”と記述する内容は、該当構成以外の構成を排除するものではなく、追加的な構成が本発明の実施または本発明の技術的思想の範囲に含まれることができることを意味する。
第1、第2などの用語は、多様な構成要素の説明に使われることができるが、前記構成要素は、前記用語により限定されてはならない。前記用語は、一つの構成要素を他の構成要素から区別する目的にのみ使われる。例えば、本発明の権利範囲を外れない限り、第1の構成要素は第2の構成要素と命名することができ、同様に、第2の構成要素も第1の構成要素と命名することができる。
また、本発明の実施例に示す構成部は、互いに異なる特徴的な機能を示すために独立的に図示されるものであり、各構成部が分離されたハードウェアや一つのソフトウェア構成単位に構成されることを意味しない。即ち、各構成部は、説明の便宜上、各々の構成部として羅列して含むものであり、各構成部のうち少なくとも2個の構成部が統合されて一つの構成部からなり、または一つの構成部が複数個の構成部に分けられて機能を遂行することができ、このような各構成部の統合された実施例及び分離された実施例も本発明の本質から外れない限り、本発明の権利範囲に含まれる。
また、一部の構成要素は、本発明で本質的な機能を遂行する必須な構成要素ではなく、単に性能を向上させるための選択的構成要素である。本発明は、単に性能向上のために使われる構成要素を除いた本発明の本質を具現するのに必須な構成部のみを含んで具現されることができ、単に性能向上のために使われる選択的構成要素を除いた必須構成要素のみを含む構造も本発明の権利範囲に含まれる。
図1は、映像符号化装置の一実施例に係る構成を示すブロック図である。スケーラブル(scalable)ビデオ符号化/復号化方法または装置は、スケーラビリティ(scalability)を提供しない一般的な映像符号化/復号化方法または装置の拡張(extension)により具現されることができ、図1のブロック図は、スケーラブルビデオ符号化装置のベースになることができる映像符号化装置の一実施例を示す。
図1を参照すると、前記映像符号化装置100は、動き予測部111、動き補償部112、イントラ予測部120、スイッチ115、減算器125、変換部130、量子化部140、エントロピー符号化部150、逆量子化部160、逆変換部170、加算器175、フィルタ部180及び参照映像バッファ190を含む。
映像符号化装置100は、入力映像に対してイントラ(intra)モードまたはインター(inter)モードに符号化を実行することで、ビットストリーム(bit stream)を出力することができる。イントラ予測は画面内予測を意味し、インター予測は画面間予測を意味する。イントラモードである場合、スイッチ115がイントラに切り替えられ、インターモードである場合、スイッチ115がインターに切り替えられる。映像符号化装置100は、入力映像の入力ブロックに対する予測ブロックを生成した後、入力ブロックと予測ブロックとの差分を符号化することができる。
イントラモードである場合、イントラ予測部120は、現在ブロック周辺の既に符号化されたブロックの画素値を利用して空間的予測を実行することで、予測ブロックを生成することができる。
インターモードである場合、動き予測部111は、動き予測過程で参照映像バッファ190に格納されている参照映像で入力ブロックと最もよくマッチされる領域を探して動きベクトルを求めることができる。動き補償部112は、動きベクトルと参照映像バッファ190に格納されている参照映像を利用して動き補償を実行することによって、予測ブロックを生成することができる。
減算器125は、入力ブロックと生成された予測ブロックとの差分により残余ブロック(residual block)を生成することができる。変換部130は、残余ブロックに対して変換(transform)を実行することで、変換係数(transform coefficient)を出力することができる。そして、量子化部140は、入力された変換係数を量子化パラメータによって量子化し、量子化された係数(quantized coefficient)を出力することができる。
エントロピー符号化部150は、量子化部140で算出された値または符号化過程で算出された符号化パラメータ値などに基づき、シンボル(symbol)を確率分布によってエントロピー符号化することで、ビットストリーム(bit stream)を出力することができる。エントロピー符号化方法は、多様な値を有するシンボルの入力を受け、統計的な重複性を除去すると共に、復号可能な2進数の列で表現する方法である。
ここで、シンボルとは、符号化/復号化対象構文要素(syntax element)及び符号化パラメータ(coding parameter)、残余信号(residual signal)の値などを意味する。符号化パラメータは、符号化及び復号化に必要な媒介変数であって、構文要素のように符号化器で符号化されて復号化器に伝達される情報だけでなく、符号化または復号化過程で類推されることができる情報を含むことができ、映像を符号化または復号化する時に必要な情報を意味する。符号化パラメータは、例えば、イントラ/インター予測モード、移動/動きベクトル、参照映像索引、符号化ブロックパターン、残余信号有無、変換係数、量子化された変換係数、量子化パラメータ、ブロックの大きさ、ブロック分割情報などの値または統計を含むことができる。また、残余信号は、原信号と予測信号との差を意味し、また、原信号と予測信号との差が変換(transform)された形態の信号または原信号と予測信号との差が変換されて量子化された形態の信号を意味する。残余信号は、ブロック単位では残余ブロックという。
エントロピー符号化が適用される場合、高い発生確率を有するシンボルに少ない数のビットが割り当てられ、低い発生確率を有するシンボルに多い数のビットが割り当てられてシンボルが表現されることによって、符号化対象シンボルに対するビット列の大きさが減少されることができる。したがって、エントロピー符号化を介して映像符号化の圧縮性能が高まることができる。
エントロピー符号化のために、指数ゴロム(exponential golomb)、CAVLC(Context−Adaptive Variable Length Coding)、CABAC(Context−Adaptive Binary Arithmetic Coding)のような符号化方法が使われることができる。例えば、エントロピー符号化部150には、可変長さ符号化(VLC:Variable Lenghth Coding/Code)テーブルのようなエントロピー符号化を実行するためのテーブルが格納されることができ、エントロピー符号化部150は、格納された可変長さ符号化(VLC)テーブルを使用してエントロピー符号化を実行することができる。また、エントロピー符号化部150は、対象シンボルの2進化(binarization)方法及び対象シンボル/ビン(bin)の確率モデル(probability model)を導出した後、導出された2進化方法または確率モデルを使用してエントロピー符号化を実行することもできる。
量子化された係数は、逆量子化部160で逆量子化され、逆変換部170で逆変換されることができる。逆量子化、逆変換された係数は、加算器175を介して予測ブロックと加えられて復元ブロックが生成されることができる。
復元ブロックは、フィルタ部180を経て、フィルタ部180は、デブロッキングフィルタ(deblocking filter)、SAO(Sample Adaptive Offset)、ALF(Adaptive Loop Filter)のうち少なくとも一つ以上を復元ブロックまたは復元ピクチャに適用することができる。フィルタ部180を経た復元ブロックは、参照映像バッファ190に格納されることができる。
図2は、映像復号化装置の一実施例に係る構成を示すブロック図である。図1で詳述したように、スケーラブルビデオ符号化/復号化方法または装置は、スケーラビリティを提供しない一般的な映像符号化/復号化方法または装置の拡張により具現されることができ、図2のブロック図は、スケーラブルビデオ復号化装置のベースになることができる映像復号化装置の一実施例を示す。
図2を参照すると、前記映像復号化装置200は、エントロピー復号化部210、逆量子化部220、逆変換部230、イントラ予測部240、動き補償部250、フィルタ部260及び参照映像バッファ270を含む。
映像復号化装置200は、符号化器から出力されたビットストリームの入力を受けてイントラモードまたはインターモードに復号化を実行することで、再構成された映像、即ち、復元映像を出力することができる。イントラモードである場合、スイッチがイントラに切り替えられ、インターモードである場合、スイッチがインターに切り替えられる。映像復号化装置200は、入力されたビットストリームから復元された残余ブロック(residual block)を得て、予測ブロックを生成した後、復元された残余ブロックと予測ブロックを加えて再構成されたブロック、即ち、復元ブロックを生成することができる。
エントロピー復号化部210は、入力されたビットストリームを確率分布によってエントロピー復号化し、量子化された係数(quantized coefficient)形態のシンボルを含むシンボルを生成することができる。エントロピー復号化方法は、2進数の列の入力を受けて各シンボルを生成する方法である。エントロピー復号化方法は、前述したエントロピー符号化方法と同様である。
量子化された係数は、逆量子化部220で逆量子化され、逆変換部230で逆変換され、量子化された係数が逆量子化/逆変換された結果、復元された残余ブロック(residual block)が生成されることができる。
イントラモードである場合、イントラ予測部240は、現在ブロック周辺の既に符号化されたブロックの画素値を利用して空間的予測を実行することで、予測ブロックを生成することができる。インターモードである場合、動き補償部250は、動きベクトル及び参照映像バッファ270に格納されている参照映像を利用して動き補償を実行することによって、予測ブロックを生成することができる。
復元された残余ブロックと予測ブロックは、加算器255を介して加えられ、加えられたブロックは、フィルタ部260を経る。フィルタ部260は、デブロッキングフィルタ、SAO、ALFのうち少なくとも一つ以上を復元ブロックまたは復元ピクチャに適用することができる。フィルタ部260は、再構成された映像、即ち、復元映像を出力する。
復元映像は、参照映像バッファ270に格納されて画面間予測に使われることができる。
前記映像復号化装置200に含まれているエントロピー復号化部210、逆量子化部220、逆変換部230、イントラ予測部240、動き補償部250、フィルタ部260及び参照映像バッファ270のうち、映像の復号化に直接的に関連した構成要素、例えば、エントロピー復号化部210、逆量子化部220、逆変換部230、イントラ予測部240、動き補償部250、フィルタ部260などを他の構成要素と区分して復号化部またはデコーディング部で表現することができる。
また、映像復号化装置200は、ビットストリームに含まれているエンコーディングされた映像に関連した情報をパーシングするパーシング部(図示せず)をさらに含むことができる。パーシング部は、エントロピー復号化部210を含むこともでき、エントロピー復号化部210に含まれることもできる。また、このようなパーシング部は、デコーディング部の一つの構成要素で具現されることもできる。
図3は、本発明が適用されることができる、複数階層を利用したスケーラブルビデオコーディング構造の一実施例を概略的に示す概念図である。図3において、GOP(Group of Picture)は、ピクチャ群、即ち、ピクチャのグループを示す。
映像データを送信するためには送信媒体が必要であり、その性能は、多様なネットワーク環境によって送信媒体別に異なる。このような多様な送信媒体またはネットワーク環境への適用のためにスケーラブルビデオコーディング方法が提供されることができる。
スケーラブルビデオコーディング方法は、階層(layer)間のテクスチャ情報、動き情報、残余信号などを活用して階層間重複性を除去して符号化/復号化性能を高めるコーディング方法である。スケーラブルビデオコーディング方法は、送信ビット率、送信エラー率、システムリソースなどの周辺条件によって、空間的、時間的、画質的な観点で多様なスケーラビリティを提供することができる。
スケーラブルビデオコーディングは、多様なネットワーク状況に適用可能なビットストリームを提供することができるように、複数階層(multiple layers)構造を使用して実行されることができる。例えば、スケーラブルビデオコーディング構造は、一般的な映像符号化方法を利用して映像データを圧縮処理する基本階層を含むことができ、基本階層の符号化情報及び一般的な映像符号化方法を共に使用して映像データを圧縮処理する向上階層を含むことができる。
ここで、階層(layer)は、空間(spatial、例えば、映像の大きさ)、時間(temporal、例えば、符号化順序、映像出力順序、フレームレート)、画質、複雑度などを基準にした区分される映像及びビットストリーム(bit stream)の集合を意味する。また、基本階層は、参照階層またはBase layerを意味し、向上階層は、Enhancement layerを意味する。また、複数の階層は、相互間に従属性を有することもできる。
図3を参照すると、例えば、基本階層は、SD(standard definition)、15Hzのフレーム率、1Mbpsビット率で定義されることができ、第1の向上階層は、HD(high definition)、30Hzのフレーム率、3.9Mbpsビット率で定義されることができ、第2の向上階層は、4K−UHE(ultra high definition)、60Hzのフレーム率、27.2Mbpsビット率で定義されることができる。前記フォーマット(format)、フレーム率、ビット率等は、一つの実施例に過ぎず、必要によって異なるように決まることができる。また、使われる階層の数も本実施例に限定されるものではなく、状況によって異なるように決まることができる。
例えば、送信帯域幅が4Mbpsの場合、前記第1の向上階層HDのフレームレートを減らして15Hz以下に送信することができる。スケーラブルビデオコーディング方法は、前記図3の実施例で詳述した方法により時間的、空間的、画質的スケーラビリティを提供することができる。
以下、スケーラブルビデオコーディングは、符号化観点において、スケーラブルビデオ符号化と同じ意味を有し、復号化観点において、スケーラブルビデオ復号化と同じ意味を有する。
前述したように、異種の通信網及び多様な端末によって、スケーラビリティは、現在ビデオフォーマットの重要な機能になった。AVC(Advanced Video Coding)の拡張標準であるSVC(Scalable Video Coding)は、圧縮効率を最大限維持すると共に、多様な範囲のビットレートを有するビットストリームを生成することができるように開発された。多様なデバイス及びネットワークの特性と変化を満たすために、SVCビットストリームは、容易に多様な方式で抽出されることができる。即ち、SVC標準は、空間的(spatial)、時間的(temporal)、画質(SNR)スケーラビリティを提供する。
一方、複数の階層を含むビットストリームは、パケットスイッチングネットワーク(packet−switching network)を介してビデオの適応的送信を容易にするNAL(Network Abstraction Layer)unitで構成される。複数の階層と同様に、ビットストリーム内の複数の多視点映像を含むマルチビュービデオコーディング(multi−view video coding)における複数の視点間の関係は、複数のレイヤをサポートするビデオでの空間的階層(spatial layer)間の関係と同様である。
コンテンツ伝達経路(content delivery path)における全てのノードでビットストリームを効果的且つ効率的に変換するためにはビットストリームのスケーラビリティ情報が相当重要である。現在単一レイヤに対するビデオコーディングの標準(high efficiency video coding)では、NAL Unit(以下、NALU)ヘッダ(header)に階層情報と関連した2個のフィールドであるtemporal_idとreserved_one_5bitsが存在する。3bitsの長さを有するtemporal_idは、ビデオビットストリームの時間的レイヤ(temporal layer)を示し、reserved_one_5bitsは、以後に他の階層情報を示すための領域に該当する。
時間的レイヤは、ビデオコーディングレイヤ(video coding layer、VCL)NAL unitで構成された時間的にスケールされることができるビットストリームのレイヤを意味し、時間的レイヤは、特定のtemporal_id値を有する。
本発明は、複数のレイヤをサポートするビットストリーム内で映像の抽出情報(extraction)及び階層的情報(scalability information)を効果的に記述し、それをシグナリングするための方法及びそれを具現する装置に関する発明である。
本発明では、ビットストリームを2つのタイプ、時間スケーラビリティ(temporal scalability)のみをサポートする基本タイプ(base type)と、時間を含む空間/画質/視点をサポートするスケーラビリティを有することができる拡張タイプ(extended type)とに分けて説明する。
ビットストリームの第1のタイプは、単一階層ビデオをサポートするビットストリームに対するものであり、第2のタイプは、HEVCベースの階層的ビデオ符号化で向上階層のためのものである。以下、2つのビットストリームタイプのスケーラビリティ情報を表現するための改善方案を提案する。本発明によると、拡張タイプにおいて、5bitのreserved_one_5bitsは、スケーラブル階層の識別子を示すlayer_idとして使われることができる。
NALUヘッダからnal_ref_flag除去
nal_ref_flagは、非参照ピクチャ(non−reference picture)を示すために使われる。この情報は、非参照ピクチャと参照ピクチャ(reference picture)との間の概略的な優先順位を示すが、送信のためのnal_ref_flagの使用は多少制限的である。
参照ピクチャ(Reference picture)は、デコーディング順序上、後続のピクチャ(subsequent pictures)のデコーディング時、画面間予測のために使われることができるサンプルを含むピクチャを意味する。
非参照ピクチャ(non−reference picture)は、デコーディング順序上、後続のピクチャのデコーディング時、画面間予測のために使われないサンプルを含むピクチャを意味する。
nal_ref_flagは、エンコーディング時、該当nalユニットが全体ビットストリーム上で非参照ピクチャであるか、または参照ピクチャであるかを示す情報を示すフラグである。
nal_ref_flagが1の場合、NALUは、SPS(sequence parameter set)、PPS(picture parameter set)、APS(adaptation parameter set)または参照ピクチャのスライスを含むことを意味し、nal_ref_flagが0の場合、NALUは、非参照ピクチャの一部または全部を含むスライスを含むことを意味する。
このとき、nal_ref_flag値が1であるNALUは、参照ピクチャのスライスを含むことができ、nal_ref_flagは、VPS(video parameter set)、SPS(sequence parameter set)、PPS(picture parameter set)のNALUに対して1の値を有する。特定ピクチャのVCL NALUのうち一つが、nal_ref_flag値が0の場合、該当ピクチャの全てのVCL NALUに対してnal_ref_flagは、0の値を有する。
一方、全ての非参照ピクチャ(non−reference picture)、特に、大部分最上位時間的レイヤに該当する非参照ピクチャが抽出されると、抽出後に残った全てのピクチャのnal_ref_flagは1になる。
しかし、適応変換された(抽出された)ビットストリームの一部ピクチャ、即ち、残ったビットストリームで最上位時間的レイヤに該当するピクチャは、nal_ref_flagが1であるとしても非参照ピクチャになる。
即ち、NALUヘッダの他のシンタックス要素(例えば、temporal_id)が適応変換(抽出)をサポートするのに一層効果的である。即ち、ビットストリームが含む全体時間的レイヤの個数とNALUヘッダのtemporal_id値を利用し、所望の時間的レイヤを含むビットストリームを抽出することができる。
また、nal_ref_flagは、nal_ref_flagを含むNALUで構成されたピクチャをデコーディング(復元)した後、DPB(decoded picture buffer)のようなメモリに格納する時、該当ピクチャを以後に参照ピクチャとして使用するかどうかを表示する時も使われることができる。nal_ref_flagが1の場合、以後に参照ピクチャとして使われると表示し、nal_ref_flagが0の場合、以後に参照ピクチャとして使用しないと表示することができる。
nal_ref_flagを介して該当NALUが非参照ピクチャであるか、または参照ピクチャであるかを判断せずに、デコーディングされたピクチャをDPBに格納する時、参照ピクチャで表示することができる。この場合、デコーディングされたピクチャが非参照ピクチャであるが、参照ピクチャで表示されても、デコーディング順序上、該当ピクチャの次のピクチャをデコーディングするにあたって、次のピクチャのヘッダ(slice header)に伝達される参照ピクチャリストに該当ピクチャが含まれていないため、問題が発生しない。
即ち、次のピクチャをデコーディングする時、スライスヘッダに含まれている参照ピクチャリストによって以前にデコーディングされたピクチャが参照ピクチャであるか、または非参照ピクチャであるかが表示される。したがって、nal_ref_flagを介してデコーディングされたピクチャが参照ピクチャであるかどうかが判断されずに、参照ピクチャで表示されても、デコーディングされたピクチャを参照ピクチャまたは非参照ピクチャと判断するのに問題が発生しない。
本発明では、NALUヘッダからnal_ref_flagを削除し、またはnal_ref_flagの意味(semantics)を変更することを提案する。nal_ref_flag削除と関連した実施例は、下記の通りである。
実施例1
nal_ref_flagをslice_ref_flagに変更し、フラグの位置をNALUヘッダからスライスヘッダ(slice header)に移す。スライスヘッダのシンタックスは、表1のように修正されることができる。
Figure 2018152864
表1において、slice_ref_flagの値が1の場合、スライスが参照ピクチャの一部であることを指示し、0の場合、スライスが非参照ピクチャの一部であることを指示する。
実施例2
nal_ref_flagをau_ref_flagに変更し、フラグの位置をNALUヘッダからアクセスユニットデリミタ(access unit delimiter)に移す。アクセスユニットデリミタのシンタックスは、表2の通りである。
Figure 2018152864
表2において、au_ref_flagが1の場合、アクセスユニットが参照ピクチャを含むことを指示し、0の場合、アクセスユニットが非参照ピクチャを含むことを指示する。
実施例3
nal_ref_flagを他のシンタックスに移動させずに、nal_ref_flagをNALUヘッダから削除する。
エンコーディング時、全体ビットストリームで非参照ピクチャであるか、または参照ピクチャであるかを示す1ビットのフラグ情報であるnal_ref_flagが削除されると、nal_ref_flagによって実行されたピクチャが参照ピクチャであるかどうかに対する判断は、他の過程を介して実行されることができる。受信されたピクチャをデコーディングした後、デコーディングされたピクチャをDPB(decoded picture buffer)に無条件参照ピクチャで表示する。即ち、デコーディングされたピクチャが参照ピクチャであるかどうかを判断せずに、参照ピクチャで表示されることができる。
その後、デコーディングされたピクチャの次のピクチャに対するスライスヘッダをパーシングし、スライスヘッダに含まれている参照ピクチャ情報に基づいてデコーディングされたピクチャが参照ピクチャであるか、または非参照ピクチャであるかを表示することができる。
実施例4
NALUヘッダからnal_ref_flagを削除し、非参照ピクチャのNALUという情報を示すためにtemporal_idを使用することができる。temporal_idは“7”、またはビットストリームに含まれている最大時間的レイヤの個数−1(即ち、max_temporal_layers_minus1)、または“0”を除いた既設定された値になることができる。
実施例5
NALUヘッダからnal_ref_flagを削除し、非参照ピクチャのNALUという情報を示すためにreserved_one_5bitsをpriority_id構成要素として使用することができる。priority_idは、該当NALUの優先順位(priority)を示す識別子であって、異なる空間、時間及び画質に関係なく優先順位によるビットストリーム抽出機能を提供するために使われる。
即ち、もし、temporal_id=Taが最上位時間的レイヤの識別子である場合、temporal_id=Taであり、priority_id=31(または、他の特定値)であるNALUを非参照ピクチャのNALUであることを示すために使用する。
nal_ref_flagをシグナリングするために使われた1bitは、下記のうちいずれか一つとして使われることができる。
(1)nal_unit_typeの指示に使われることができる。nal_unit_typeは、7bits信号になることができ、NALUタイプの個数は、2倍に増加することができる。
(2)temporal_idの指示に使われることができる。temporal_idは、4bits信号になることができ、最大時間的レイヤの数が2倍に増加することができる。
(3)layer_idを指示するために使われることができる。layer_idは、階層的ビットストリームのスケーラブル階層の識別子を意味し、reserved_one_5bitsシンタックス要素によってシグナリングされることができる。スケーラブル階層を識別するために使われたreserved_one_5bitsの5bitにnal_ref_flagのシグナリングのために使用した1bitが追加されることで、layer_idは6bit信号になることができる。6bitを使用するようになると、64個のスケーラブル階層を識別することができる。
(4)reserved_one_5bitsがpriorityを示すかどうかを知らせるflagとして使われることができる。
(5)reserved_bitとして使われることができる。
もし、nal_ref_flagをNALUヘッダから削除しない場合、nal_ref_flagの意味は、下記のように修正されることができる。
nal_ref_flagが0の場合、NALUは、非参照ピクチャのスライスのみを含むことを指示し、nal_ref_flagが1の場合、NALUは、参照ピクチャまたは非参照ピクチャのスライスを含むことができることを指示する。
ビデオパラメータセットの活性化シグナリング
ビデオパラメータセット(video parameter set)は、映像をデコーディングするための最も基本的な情報を含み、既存のSPSに存在した内容を含むことができる。
ビデオパラメータセットには、時間的スケーラビリティをサポートする時間的レイヤを示すサブレイヤ(sub−layer)に対する情報と、空間的(spatial)、クオリティ的(quality)及び視点的(view)スケーラビリティをサポートする複数の階層に対する情報とを含むことができる。即ち、ビデオパラメータセットは、複数の階層情報、即ち、HEVC extensionのためのシンタックスを含むこともできる。
A.ビデオパラメータセット(Video Parameter Set)
ビデオパラメータセットに対するシンタックスは、表3の通りである。
Figure 2018152864
表3において、大部分のシンタックスは、単一レイヤを含むビットストリームに適用されるSPSシンタックスと同じ意味を有し、追加的な部分は、下記の通りである。
−video_parameter_set_idは、ビデオパラメータセット(video parameter set)の識別子を意味し、SPS(sequence parameter set)、SEI(supplemental enhancement information)、アクセスユニットデリミタ(access unit delimiter)で参照されることができる。
−priority_id_flagが1の場合、reserved_one_5bitsがSVC標準のpriority_idと同じく使われることを意味し、priority_id_flagが0の場合、reserved_one_5bitsがlayer_idとして使われることを意味する。
−extension_info_flagが0の場合、ビットストリームがHEVCの単一階層標準に従うことを指示し、1の場合、スケーラビリティのサポートのための向上階層(HEVC extensionをサポートする場合)を示し、階層と関連した情報が提供される。
B.シーケンスパラメータセット(Sequence Parameter Set、SPS)修正
表4のように、既存シンタックスのうち一部は、VPSに反映され、SPSから削除されることができる。一方、SPSにはvps_idシンタックス要素が追加されることができる。vps_idが追加されたSPSシンタックスは、表4の通りである。表4において、削除されたシンタックスは、シンタックス中間に線を引いて表現される。
vps_idは、SPSにより参照されるビデオパラメータセット(video parameter set)を識別するための識別子を指示し、vps_idは、0〜Xの範囲を有することができる。
Figure 2018152864
C.ビデオパラメータセット(Video Parameter Set)のための活性化(activation)シグナリング
スライスヘッダには、該当スライスが参照するピクチャパラメータセットに対するインデックス情報が含まれており、ピクチャパラメータセットには、該当ピクチャが参照するシーケンスパラメータセットに対するインデックス情報が含まれている。シーケンスパラメータセットには、該当シーケンスが参照するビデオパラメータセットに対する情報が含まれている。このようにパラメータセットに対する情報をパーシングし、パーシングされた該当パラメータセット情報を参照することを活性化(activation)という。
特定パラメータセットに対する情報を利用するために、即ち、パラメータセットを活性化するためにはスライスヘッダから順次にパーシングされなければならない。いずれのSPSが活性化されるか(active)を知るために、全てのスライスヘッダ(slice header)及び関連したPPSが分析されなければならないことを意味する。
単一階層を含むビットストリームのうち、サブレイヤ(時間的レイヤ)の中から一部を抽出する時、抽出器(extractor)は、NALUヘッダと複数のパラメータセット(parameter set)を分析(パーシング)する必要がある。
もし、ビデオパラメータセットまたはシーケンスパラメータセットにNALUの抽出のための情報が含まれている場合、抽出器は、スライスヘッダから順次に上位のパラメータセットをパーシングしなければならない。これは抽出器がパラメータセット(parameter set)とスライスヘッダ(slice header)の全てのシンタックス要素を理解しなければならないということを意味する。
また、映像のデコーディング過程でも複雑なパーシング過程無しでvps_idまたはsps_idを探し、必要なパラメータセットのみを活性化することができる。この場合、ビデオパラメータセットまたはシーケンスパラメータセットが活性化されるパラメータインデックス情報を含む場合、複雑なスライスヘッダ(slice header)及び関連したPPSに対するパーシング手順を減少させることができる。
一方、このようなシンタックスの要素のうち、一部分のみがビットストリーム抽出のために必要な情報を含むことができる。それにも拘わらず、抽出器が全てのシンタックス要素を分析することは、大きい負担になることができる。このような問題を解決するために、下記のような方法を提案する。
本発明において、パラメータセットの活性化(activation)は、抽出器がスライスヘッダ(slice header)及びそれと関連したPPS(picture parameter set)の分析無しでいずれのパラメータセットが活性化されるかを知ることができるようにシグナリングすることを意味する。
本発明によると、いずれのビデオパラメータセット、シーケンスパラメータセットまたはピクチャパラメータセットが活性化されるかどうかを別途にシグナリングすることで、抽出器は、全てのスライスヘッダ(slice header)及び関連したPPSを分析しなければならない負担を減少させることができる。
ビデオパラメータセットは、アップデートされることもできる。抽出器がスライスヘッダを分析せずに、現在活性化されるVPS及び関連したSPSまたはPPSを知ることができるように、下記の方法のうち一つが使われることができる。
(1)vps_id、sps_id、pps_idをアクセスユニットデリミタ(access unit delimiter)に含ませることができる。vps_id、sps_id、pps_idは、各々、関連したAU内のNALUのために使われたビデオパラメータセット、シーケンスパラメータセット、ピクチャパラメータセットの識別子を示す。
アクセスユニットデリミタ(Access unit delimiter)内に各識別子の存在可否を示すために、vps_id_present_flag、sps_id_present_flag、pps_id_present_flagを使用し、提案するアクセスユニットデリミタのシンタックスは、表5の通りである。
Figure 2018152864
(1−1)他の方法は、表6のように、sps_id及びpps_idを除いてvps_idのみをアクセスユニットデリミタ(access unit delimiter)に含ませることができる。
Figure 2018152864
(2)ビデオパラメータセットの活性化シグナリングのための他の方法は、新たなSEIメッセージ(parameter_set_reference)を使用することである。SEIメッセージは、関連したAU内のNALUのために使われたビデオパラメータセット、シーケンスパラメータセット、ピクチャパラメータセットの識別子を示すvps_id、sps_id、pps_idの存在可否を知らせるためのシンタックスを含む。
各識別子の存在可否を示すために、vps_id_present_flag、sps_id_present_flag、pps_id_present_flagシンタックスが使われることができ、SEIシンタックスは、表7の通りである。
Figure 2018152864
(2−1)また、表8のようにpps_idを除いてsps_idとvps_idをSEIメッセージに含ませて活性化を知らせることもできる。SEIメッセージに含まれているsps_idとvps_idは、該当SEIメッセージと関連したアクセスユニット(access unit)のビデオコーディングレイヤNALUが参照するsps_idとvps_idを含むことができる。したがって、sps_idとvps_idは、活性化される可能性があるパラメータセットの情報を示すことができる。
Figure 2018152864
表8において、vps_idは、現在活性化されるビデオパラメータセットのvideo_parameter_set_idを示す。vps_id値は、0〜15の値を有することができる。
sps_id_present_flagが1の値を有する場合、現在活性化されるシーケンスパラメータセットのsequence_parameter_set_idが該当SEIメッセージに含まれていることを示し、sps_id_present_flagが0の値を有する場合、活性化されるシーケンスパラメータセットのsequence_parameter_set_idが該当SEIメッセージに含まれていないことを示す。
sps_idは、現在活性化されるシーケンスパラメータセットのsequence_parameter_set_idを示す。sps_idは、0〜31の値、より限定的には、0〜15の値を有することができる。
psr_extension_flagが0の場合、parameter set reference SEI message extensionシンタックス要素がparameter set reference SEIメッセージに含まれていないことを意味し、psr_extension_flagが1の場合、parameter set reference SEI message extensionシンタックス要素をparameter set reference SEIメッセージが含まれてシンタックスを拡張して使用することを意味する。
psr_extension_lengthは、psr_extension_dataの長さを示す。psr_extension_lengthは、0〜256の範囲を値を有することができ、psr_extension_data_byteは、どのような値も有することができる。
(2−2)また、表9のように、pps_idを除いて一つ以上のsps_idとvps_idをSEIメッセージに含ませてシグナリングすることもできる。
Figure 2018152864
表9において、vps_idは、現在活性化されるビデオパラメータセットのvideo_parameter_set_idを示す。vps_idは、0〜15の値を有することができる。
num_reference_spsは、現在活性化されるvps_idを参照するシーケンスパラメータセットの個数を示す。
sps_id(i)は、現在活性化されるシーケンスパラメータセットのsequence_parameter_set_idを示し、sps_idは、0〜31の値、より限定的には、0〜15の値を有することができる。
(2−3)また、表10のように、sps_id及びpps_idを除いてvps_idのみをSEIメッセージに含ませてシグナリングすることもできる。
Figure 2018152864
(3)ビデオパラメータセットの活性化シグナリングのための他の方法は、Buffering period SEIメッセージにvps_id、sps_id、pps_idを知らせる情報を含ませることである。表11は、vps_id、sps_id、pps_id識別子の存在可否を示すためのvps_id_present_flag、sps_id_present_flag、pps_id_present_flagを含んでいるシンタックスを示す。
Figure 2018152864
(3−1)また、表12のように、sps_id及びpps_idを除いてvps_idのみをBuffering period SEIメッセージに含ませてパラメータセットの活性化をシグナリングすることもできる。
Figure 2018152864
(4)パラメータセットの活性化シグナリングのための他の方法は、Recovery point SEIメッセージにvps_id、sps_id、pps_idを知らせる情報を含ませることである。表13は、vps_id、sps_id、pps_id識別子の存在可否を示すためのvps_id_present_flag、sps_id_present_flag、pps_id_present_flagを含んでいるシンタックスを示す。
Figure 2018152864
(4−1)また、表14のように、sps_id及びpps_idを除いてvps_idのみをRecovery point SEIメッセージに含ませて知らせる方法もある。
Figure 2018152864
前述したvps_idまたはsps_idを伝達するメッセージは、IRAP(intra random access point)アクセスユニットに含まれることができる。
前述した情報シグナリング方法のうち少なくとも一つがアクセスユニットに含まれて使われる場合、抽出器は、ビットストリームを抽出するために、前記シグナリング方法を介してvps_id、sps_id、pps_id値を探し、一つ以上のvps/sps/ppsを管理することができる。
また、デコーディング装置またはデコーディングを実行するデコーディング部は、前記シグナリング方法を介してvps_id、sps_id、pps_id値を探し、該当パラメータセットを活性化してパラメータセットと関連したAUをデコーディングすることができる。
拡張タイプ(Extended type)におけるビットストリームの表現
以下、階層拡張をサポートするビットストリームを含む場合、スケーラブル階層に対する情報を表示し、これをシグナリングするためのVPSのextension_info()と新たなSEIメッセージを提案する。拡張タイプ(Extended type)において、ビットストリームを表現するためには下記のような情報がシグナリングされることができる。
layer_idは、レイヤの優先順位(priority)値を伝達するかどうかを示すものをシグナリングする。
このとき、各layer_id値に対応して空間階層(dependency_id値により識別)、画質階層(quality_id値により識別)、視点(view_id値により識別)などをシグナリングすることができ、時間的レイヤは、NALUヘッダのtemporal_idにより識別されることができる。
また、layer_idと関連したビデオの領域はregion_idによりシグナリングされることができる。
また、スケーラブル階層のうち、dependency情報、各スケーラブル階層のbitrate情報、各スケーラブル階層の品質情報がシグナリングされることができる。
extension_info()シンタックスは、表15の通りである。
Figure 2018152864
Figure 2018152864
表15のシンタックスに対する意味は、下記の通りである。
−num_frame_sizes_minus1 plus1は、符号化されたビデオシーケンス内に含まれている他の種類の映像の大きさ情報(例えば、pic_width_in_luma_samples[i]、pic_height_in_luma_samples[i]、pic_cropping_flag[i]、pic_cropping_flag[i]、pic_crop_left_offset[i]、pic_crop_right_offsetv[i]、pic_crop_top_offset[i]、pic_crop_bottom_offset[i])の最大個数を示す。num_frame_sizes_minus1値は、0〜Xの範囲を有することができる。他の種類の映像とは、異なる解像度を有する映像を含むことができる。
−num_rep_formats_minus1 plus1は、符号化されたビデオシーケンス内に含まれている他の種類のビット深さ(bit depth)と色差フォーマット(chroma format)(例えば、bit_depth_luma_minus8[i]、bit_depth_chroma_minus8[i]、及びchroma_format_idc values[i])の最大個数を示す。num_rep_formats_minus1値は、0〜Xの範囲を有する。
−pic_width_in_luma_samples[i]、pic_height_in_luma_samples[i]、pic_cropping_flag[i]、pic_cropping_flag[i]、pic_crop_left_offset[i]、pic_crop_right_offsetv[i]、pic_crop_top_offset[i]、pic_crop_bottom_offset[i]は、符号化されたビデオシーケンスのi番目のpic_width_in_luma_samples、pic_height_in_luma_samples、pic_cropping_flag、pic_cropping_flag、pic_crop_left_offset、pic_crop_right_offsetv、pic_crop_top_offset、pic_crop_bottom_offset値を示す。
−bit_depth_luma_minus8[i]、bit_depth_chroma_minus8[i]、及びchroma_format_idc[i]は、符号化されたビデオシーケンスのi番目のbit_depth_luma_minus8、bit_depth_chroma_minus8、及びchroma_format_idc値を示す。
−num_layers_minus1は、ビットストリームで可能なスケーラブル階層の数を示す。
−dependency_id_flagが1の場合、layer_id値と関連した一つ以上のdependency_id値があることを示す。
−quality_id_flagが1の場合、layer_id値と関連した一つ以上のquality_id値があることを示す。
−view_id_flagが1の場合、layer_id値と関連した一つ以上のview_id値があることを示す。
−region_id_flagが1の場合、layer_id値と関連した一つ以上のregion_id値があることを示す。
−layer_dependency_info_flagが1の場合、スケーラブル階層のdependency情報を提供することを示す。
−frame_size_idx[i]は、layer_id値がiである階層に適用されるframe sizeのセットに対するインデックスを示す。frame_size_idx[i]は、0〜X範囲の値を有する。
−rep_format_idx[i]は、layer_id値がiである階層に適用されるビット深さ(bit depth)と色差フォーマット(chroma format)のセットに対するインデックスを示す。rep_format_idx[i]は、0〜X範囲の値を有する。
−one_dependency_id_flag[i]が1の場合、layer_id値がiと関連した一つのdependency_idのみが存在することを示し、one_dependency_id_flag[i]が0の場合、layer_id値がiと関連した二つまたはそれ以上のdependency_id値が存在することを示す。
−dependency_id[i]は、layer_id値がiと関連したdependency_id値を示す。
−dependency_id_min[i]及びdependency_id_max[i]は、layer_id値がiと関連した最小dependency_id値と最大dependency_id値を各々示す。
−one_quality_id_flag[i]が1の場合、layer_id値がiと関連した一つのquality_idのみ存在することを示し、one_quality_id_flag[i]が0の場合、layer_id値がiと関連した二つまたはそれ以上のquality_id値が存在することを示す。
−quality_id[i]は、layer_id値がiと関連したquality_id値を示す。
−quality_id_min[i]及びquality_id_max[i]は、layer_id値がiと関連した最小qualtiy_id値と最大quality_id値を各々示す。
−one_view_id_flag[i]が1の場合、layer_id値がiと関連した一つのview_idが存在することを示し、0の場合、layer_id値がiと関連した二つまたはそれ以上のview_id値が存在することを示す。
−view_id[i]はlayer_id値がiと関連したview_id値を示す。
−depth_flag[i]が1の場合、layer_id値がiである現在スケーラブル階層が3Dビデオビットストリームの深さ情報を含んでいることを示す。
−view_id_min[i]及びview_id_max[i]は、layer_id値がiと関連した最小view_id値と最大view_id値を各々示す。
−num_regions_minus1 plus1は、layer_id値がiと関連した領域の個数を示す。
−region_id[j]は、layer_id値がiと関連した領域jの識別子を示す。
−num_directly_dependent_layers[i]は、現在スケーラブル階層iが直接的に関連したスケーラブル階層(デコーディング時、予測信号の形成に必要な階層)の数を示す。
−directly_dependent_layer_id_delta_minus1[i][j] plus1は、現在スケーラブル階層であるlayer_id[i]と、現在スケーラブル階層が直接的に関連したj番目のスケーラブル階層の階層識別子との間の差を示す。j番目の直接的に関連したスケーラブル階層の階層識別子は、(layer_id[i]−directly_dependent_layer_id_delta_minus1[i][j]−1)である。
他の実施例に係るextension_info()シンタックスは、表16の通りである。
Figure 2018152864
表16に示すように、pic_width_in_luma_samples[i]及びpic_height_in_luma_samples[i]、bit_depth_luma_minus8[i]、bit_depth_chroma_minus8[i]、及びchroma_format_idc[i]は、異なるリプリゼンテーションフォーマットに対する情報にシグナリングされることができる。
他の実施例によると、pic_width_in_luma_samples[i]、pic_height_in_luma_samples[i]、bit_depth_luma_minus8[i]、bit_depth_chroma_minus8[i]、及びchroma_format_idc[i]は、異なる映像、即ち、異なる解像度を有するピクチャに対する情報にシグナリングされることができる。
ビットレートとクオリティ情報のシグナリングのための活性化SEIメッセージに対するシンタックスは、表17の通りである。
Figure 2018152864
表17のシンタックスに対する意味は、下記の通りである。
−num_layers_minus1は、ビットストリームで提供可能なスケーラブル階層の数を示す。
−bitrate_info_flagが1の場合、各々のスケーラブル階層に対するビットレート情報が提供されることを指示する。
−quality_info_flagが1の場合、各々のスケーラブル階層に対するクオリティ値に対する情報が提供されることを示す。
−quality_type_flagが1の場合、各々のスケーラブル階層に対するクオリティタイプに対する情報が提供されることを示す。
−max_bitrate[i]は、layer_id値がiであるスケーラブル階層の最大ビットレートを示し、average_bitrate[i]は、layer_id値がiであるスケーラブル階層の平均ビットレートを示す。
−quality_value[i]は、スケーラブル階層iのクオリティ値を示す。
−quality_type_uri[QualityTypeUriIdx]は、UTF−8 characterで符号化されたnull0terminated stringのQualityTypeUriIdx−thバイト(byte)であり、クオリティ値のタイプに対する表現を含むURI(universal resource identifier)を示す。
以下、効率的なビットストリーム抽出のための記述方式の改善として、VPS(video parameter set)を改善させる方案を提案する。
階層参照(Layer referencing)
複数の階層をサポートするビットストリームでlayer_idとスケーラビリティ次元ID(scalability dimension ID)との間の関係を指示する方法として、layer_idとスケーラビリティ次元ID(scalability dimension ID)との間のマッピング方法を知らせる第1の方法と、layer_idのビットを分割(partitioningまたはsplicing)して割り当てられたビットにどのような次元タイプが存在するかを知らせる第2の方法とが存在できる。
複数の階層をサポートするビットストリームで次元タイプ(dimension type)とは、空間的スケーラビリティ、クオリティ的スケーラビリティのようなスケーラビリティのタイプを意味し、次元ID(dimension ID)は、特定の次元タイプが有することができるレイヤに対するインデックスを意味する。
複数の階層をサポートするビットストリームで、特定次元(dimension)では特定階層(理解を助けるために、例えば、単一階層のビットストリームで時間的スケーラビリティをサポートする場合、時間的レイヤ(sub−layer)3)が次の低い階層(例えば、時間的レイヤ(sub−layer))を直接的に参照することは一般的である。
また、例えば、空間スケーラビリティをサポートする場合は、空間レイヤ2が次の低い空間階層1を直接的に参照することを意味する。
したがって、前記のような場合を示すために、基本参照(default direct dependency)を有する次元を先に記述することを提案する。
その後、特定連関性(dependency)を階層(scalable layer)に対する説明パート(description loop)で具体的に記述することができる。
以下、前記二つの方法を利用して階層参照に対するシグナリングをするための方案を提示する。vps_extensionのための改善されたシンタックスは、表18乃至表21の通りである。
Figure 2018152864
表18は、第1の方法を利用してlayer_idとスケーラビリティ次元ID(scalability dimension ID)をマッピングさせているシンタックスを示している。表18のシンタックスに対する意味は、下記の通りである。
−all_default_dependency_flagが1の場合、全ての階層次元が基本参照(default dependency)を有することを指示する。即ち、特定次元iにおいて、dimension_id[i]=nである階層は、デフォルトとしてdimension_id[i]=n−1を有する他の階層を直接的に参照することを意味する。
all_default_dependency_flagが0の場合、全ての階層次元が基本参照を有するものではないことを示す。all_default_dependency_flagが0の場合、下のnum_default_dim_minus1がシグナリングされる。
−num_default_dim_minus1は、基本参照(default dependency)を有する次元の数を示す。
−dimension[j]は、基本参照(default dependency)を有する階層次元のタイプを明示する。即ち、基本参照(default dependency)を有する次元の数を一つずつ増加させながら、基本参照を有する階層次元のタイプに対する情報がシグナリングされる。該当次元において、上位階層(例えば、dimension_id=n)は、次の下位階層(例えば、dimension_id=n−1)を直接的に参照する。
−specific_dependency_flag[i]が1の場合、該当階層のために具体的に記述された直接参照(direct dependences/references)があることを意味する。したがって、specific_dependency_flag[i]が1の場合、該当階層が直接参照するレイヤの個数と該当レイヤのIDがシグナリングされる。
階層Cが階層Bを直接的に参照するということは、階層Cを復号化するために、デコーダは、階層Bの情報(デコーディングされ、またはデコーディングされない)を使用しなければならないという意味である。しかし、もし、階層Bが直接的に階層Aの情報を使用する場合、階層Cは階層Aを直接的に参照すると判断されない。
Figure 2018152864
表19は、第2の方法を利用してlayer_idのビットをスケーラビリティ次元タイプに割り当て、割り当てられた次元タイプの長さをシグナリングするシンタックスを示している。
表19に含まれているnum_dimensions_minus1は、NALUヘッダ内に存在する階層次元の数を示す。即ち、NALUヘッダに存在する階層次元の数を把握し、該当階層次元毎に存在する階層タイプと次元タイプに割り当てられたビット数を把握する。
表19のシンタックス階層参照のためのシンタックスall_default_dependency_flag、num_default_dim_minus1、dimension[j]及びspecific_dependency_flag[i]に対する説明は、表18に含まれているシンタックスと同じ意味を有する。
表20及び表21は、表18及び表19と異なる方式のシンタックスを示す。表20は、第1の方法を利用する場合、基本参照(default dependency)を示す他のシンタックスを示し、表21は、第2の方法を利用する場合、基本参照(default dependency)を示す他のシンタックスを示す。
Figure 2018152864
Figure 2018152864
表20及び表21のシンタックスのうち、表18及び表19と重複するシンタックスに対する説明は省略する。
表20及び表21に含まれている新たなシンタックスdefault_dependency_flag[i]は、次元タイプiが基本参照を使用するかどうかを示す。該当次元において、高い階層(例えば、dimension_id[i]=n)は、下の階層(例えば、dimension_id[i]=n−1)を直接的に参照する。
即ち、num_dimensions_minus1とdimension_type[i]によって特定次元タイプが指定される場合、該当次元タイプが基本参照を使用するかどうかをシグナリングし、そうでない場合、該当階層が直接的に参照するレイヤに対する情報をシグナリングする。
本発明による次元タイプ(dimensions type)を示す場合、表22の通りである。
Figure 2018152864
本発明によると、既存の次元タイプで次元タイプ4及び5、即ち、priority ID及びregion IDを示すタイプが追加された。
dimension_type[i][j]は、基本的に0〜5の値を有することができる。他の値は、以後に定義されることができ、デコーダは、0〜5の値でない場合、dimension_type[i][j]の値を無視することができる。
dimension_typeが4の値を有する場合、該当dimension_idは、SVC標準でビットストリームのpriority階層のidを示す。
dimension_typeが5の値を有する場合、該当dimension_idは、ビットストリームの特定領域のidを示す。特定領域は、ビットストリーム内で一つ以上の時空間セグメント(spatial−temporal segment)になることができる。
図4は、本発明による映像情報のエンコーディング方法を説明するための制御流れ図である。
図示されているように、符号化装置は、映像に関連した情報を含むNAL(Network Abstraction Layer)ユニットをエンコーディングする(S401)。
NALユニットのNALユニットヘッダは、NALユニットが非参照ピクチャの少なくとも一部または全部を含むスライスを含むかどうかを示す情報を含まない。
一方、NALユニットヘッダは、スケーラブル階層をサポートするビットストリームでスケーラブル階層を識別するための階層識別情報を含んでいる。
このとき、NALユニットヘッダに含まれないNALユニットが非参照ピクチャの少なくとも一部または全部を含むスライスを含むかどうかを示す情報をシグナリングするために使われたビットは、階層識別情報をシグナリングするために使われることができる。
また、NALユニットは、映像のデコーディングのために必要な多様な前記パラメータセットに対する情報を含むことができる。
符号化装置は、活性化されるパラメータセットに対する情報を含むSEI(Supplemental enhancement information)メッセージを独立されたNALユニットにエンコーディングすることができる。
活性化されるパラメータセットに対する情報は、活性化されるビデオパラメータセットをインデクシングする情報及び活性化されるシーケンスパラメータセットをインデクシングする情報のうち少なくとも一つを含むことができる。
また、活性化されるパラメータセットに対する情報は、活性化されるビデオパラメータセットをインデクシングする情報、活性化されるビデオパラメータセットを参照するシーケンスパラメータセットの個数を示す情報、及びシーケンスパラメータセットをインデクシングする情報を含むことができる。
このようなパラメータセットに対する情報は、復号化装置が時間的スケーラビリティを提供するサブレイヤを抽出する時に利用されることができる。
また、デコーディング装置またはデコーディングを実行するデコーディング部は、ビデオコーディングレイヤNALUのデコーディング時に必要なパラメータセットを活性化する時、前記パラメータセットに対する情報を利用することができる。
符号化装置は、エンコーディングされた映像に関連した情報を含むNALユニットをビットストリームに送信する(S402)。
図5は、本発明による映像情報のデコーディング方法を説明するための制御流れ図である。
図5を参照すると、復号化装置は、ビットストリームを介してエンコーディングされた映像に関連した情報を含むNALユニットを受信する(S501)。
復号化装置は、NALユニットのヘッダ及びNALペイロード(payload)をパーシングする(S502)。映像情報に対するパーシングは、エントロピー復号化部または別途のパーシング部で実行されることができる。
復号化装置は、パーシングを介してNALユニットヘッダ及びNALペイロードに含まれている多様な情報を取得することができる。
NALユニットヘッダは、スケーラブル階層をサポートするビットストリームでスケーラブル階層を識別するための階層識別情報を含み、NALユニットのエンコーディング時、全体ビットストリームで非参照ピクチャであるか、または参照ピクチャであるかを示す1ビットのフラグ情報を含まない。
このとき、NALユニットヘッダに含まれないNALユニットが非参照ピクチャの少なくとも一部または全部を含むスライスを含むかどうかを示す情報をシグナリングするために使われたビットは、階層識別情報をシグナリングするために使われることができる。
また、復号化装置は、パーシングを介してSEIメッセージに含まれている該当SEIメッセージと関連したNALUをデコーディングするために必要なパラメータセットに対する情報を取得することができる。
活性化されるパラメータセットに対する情報は、活性化されるビデオパラメータセットをインデクシングする情報及び活性化されるシーケンスパラメータセットをインデクシングする情報のうち少なくとも一つを含むことができる。
また、活性化されるパラメータセットに対する情報は、活性化されるビデオパラメータセットをインデクシングする情報、活性化されるビデオパラメータセットを参照するシーケンスパラメータセットの個数を示す情報、及びシーケンスパラメータセットをインデクシングする情報を含むことができる。
このようなパラメータセットに対する情報は、復号化装置が時間的スケーラビリティを提供するサブレイヤを抽出する時に利用されることができる。
追加的にパラメータセットに対する情報は、ビットストリームを復号化する時またはセッションネゴシエーション(例えば、IP網おけるストリーミング時、session negotiation)する時に利用されることができる。
前述した実施例において、方法は一連のステップまたはブロックで流れ図に基づいて説明されているが、本発明は、ステップの順序に限定されるものではなく、あるステップは、前述と異なるステップと、異なる順序にまたは同時に発生できる。また、当該技術分野において、通常の知識を有する当業者であれば、流れ図に示すステップが排他的でなく、他のステップが含まれ、または流れ図の一つまたはそれ以上のステップが本発明の範囲に影響を及ぼさすに削除可能であることを理解することができる。
前述した実施例は、多様な態様の例示を含む。多様な態様を示す全ての可能な組合せを記述することはできないが、当該技術分野の通常の知識を有する者であれば、他の組合せが可能であることを認識することができる。したがって、本発明は、特許請求の範囲内に属する全ての交替、修正、及び変更を含む。

Claims (14)

  1. ピクチャおよび前記ピクチャの次のピクチャのスライスヘッダをエンコードするエンコーディング部を含み、
    前記スライスヘッダは前記ピクチャが参照ピクチャまたは非参照ピクチャであるかを示す参照ピクチャ情報を含むことを特徴とする映像エンコーディング装置。
  2. 前記ピクチャおよび前記次のピクチャを含む映像のデコーディング過程のために、前記参照ピクチャ情報は、前記ピクチャが参照ピクチャまたは非参照ピクチャであるかどうかを再表示するために用いられることを特徴とする請求項1に記載の映像エンコーディング装置。
  3. 前記エンコーディング部はNAL(Network Abstraction Layer)ユニットのNALユニットヘッダをエンコードし、
    前記NALユニットヘッダは、エンコードされた映像に関連する情報を含み、
    前記NALユニットヘッダは、前記NALユニットが参照ピクチャまたは非参照ピクチャであるかを示す情報を含まないことを特徴とする請求項1に記載の映像エンコーディング装置。
  4. 前記エンコードされた映像は、前記次のピクチャに対応することを特徴とする請求項3に記載の映像エンコーディング装置。
  5. 前記エンコーディング部は、前記ピクチャのためのNAL(Network Abstraction Layer)ユニットのNALユニットヘッダをエンコードし、
    前記NALユニットヘッダは、前記ピクチャが参照ピクチャまたは非参照ピクチャであるかを示す情報を含まないことを特徴とする請求項1に記載の映像エンコーディング装置。
  6. ピクチャをエンコーディングする段階;および
    前記ピクチャの次のピクチャのスライスヘッダをエンコーディングする段階を含み、
    前記スライスヘッダは、前記ピクチャが参照ピクチャまたは非参照ピクチャであるかを示す参照ピクチャ情報を含むことを特徴とする映像エンコーディング方法。
  7. 請求項6に記載の映像エンコーディング方法によって生成されたデータストリームを記憶するデジタル記憶媒体。
  8. ピクチャの情報および前記ピクチャの次のピクチャのスライスヘッダの情報を含むデータストリームを生成する段階;および
    前記データストリームを記憶する段階を含み、
    前記スライスヘッダは、前記ピクチャが参照ピクチャまたは非参照ピクチャであるかを示す参照ピクチャ情報を含むことを特徴とするデータストリームを記憶する方法。
  9. ピクチャの情報および前記ピクチャの次のピクチャのスライスヘッダの情報を含むデータストリームを生成する段階を含み、
    前記スライスヘッダは、前記ピクチャが参照ピクチャまたは非参照ピクチャであるかを示す参照ピクチャ情報を含むことを特徴とするデータストリームを生成する方法。
  10. データストリームを記憶するデジタル記憶媒体であって、
    前記データストリームは、
    ピクチャの情報;および
    前記ピクチャの次のピクチャのスライスヘッダの情報を含み、
    前記スライスヘッダは、前記ピクチャが参照ピクチャまたは非参照ピクチャであるかを示す参照ピクチャ情報を含むことを特徴とするデジタル記憶媒体。
  11. 前記ピクチャおよび前記次のピクチャを含む映像のデコーディング過程のために、前記参照ピクチャ情報は、前記ピクチャが参照ピクチャまたは非参照ピクチャであるかどうかを再表示するために用いられることを特徴とする請求項10に記載のデジタル記憶媒体。
  12. 前記データストリームは、エンコードされた映像に関連する情報を含むNAL(Network Abstraction Layer)ユニットのNALユニットヘッダを含み、
    前記NALユニットヘッダは、前記NALユニットが参照ピクチャまたは非参照ピクチャであるかを示す情報を含まないことを特徴とする請求項10に記載のデジタル記憶媒体。
  13. 前記エンコードされた映像は、前記次のピクチャに対応することを特徴とする請求項12に記載のデジタル記憶媒体。
  14. 前記ピクチャの情報は、前記ピクチャためのNAL(Network Abstraction Layer)ユニットのNALユニットヘッダを含み、
    前記NALユニットヘッダは、前記ピクチャが参照ピクチャまたは非参照ピクチャであるかを示す情報を含まないことを特徴とする請求項10に記載のデジタル記憶媒体。
JP2018085564A 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法 Active JP6556903B2 (ja)

Applications Claiming Priority (16)

Application Number Priority Date Filing Date Title
KR20120038870 2012-04-16
KR10-2012-0038870 2012-04-16
KR10-2012-0066606 2012-06-21
KR20120066606 2012-06-21
KR20120067925 2012-06-25
KR10-2012-0067925 2012-06-25
KR10-2012-0071933 2012-07-02
KR20120071933 2012-07-02
KR10-2012-0077012 2012-07-16
KR20120077012 2012-07-16
KR1020120108925A KR20130116782A (ko) 2012-04-16 2012-09-28 계층적 비디오 부호화에서의 계층정보 표현방식
KR10-2012-0108925 2012-09-28
KR10-2012-0112598 2012-10-10
KR1020120112598A KR20130116783A (ko) 2012-04-16 2012-10-10 계층적 비디오 부호화에서의 계층정보 표현방식
KR1020130041862A KR101378861B1 (ko) 2012-04-16 2013-04-16 영상 정보 디코딩 방법, 영상 디코딩 방법 및 이를 이용하는 장치
KR10-2013-0041862 2013-04-16

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017146933A Division JP6549189B2 (ja) 2012-04-16 2017-07-28 映像エンコーディング方法およびビットストリームの生成方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2019122109A Division JP6871312B2 (ja) 2012-04-16 2019-06-28 映像デコーディング方法、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法

Publications (2)

Publication Number Publication Date
JP2018152864A true JP2018152864A (ja) 2018-09-27
JP6556903B2 JP6556903B2 (ja) 2019-08-07

Family

ID=49635785

Family Applications (30)

Application Number Title Priority Date Filing Date
JP2015506892A Active JP5933815B2 (ja) 2012-04-16 2013-04-16 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2016031335A Active JP6186026B2 (ja) 2012-04-16 2016-02-22 映像デコーディング装置
JP2016092745A Active JP6163229B2 (ja) 2012-04-16 2016-05-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2016092752A Active JP6224163B2 (ja) 2012-04-16 2016-05-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2016092749A Active JP6163230B2 (ja) 2012-04-16 2016-05-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2016092743A Active JP6224162B2 (ja) 2012-04-16 2016-05-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2017146933A Active JP6549189B2 (ja) 2012-04-16 2017-07-28 映像エンコーディング方法およびビットストリームの生成方法
JP2018085588A Active JP6556904B2 (ja) 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2018085634A Active JP6556907B2 (ja) 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2018085564A Active JP6556903B2 (ja) 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2018085608A Active JP6556905B2 (ja) 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2018085624A Active JP6556906B2 (ja) 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2018087416A Active JP6549282B2 (ja) 2012-04-16 2018-04-27 映像デコーディング方法および映像エンコーディング方法
JP2018087408A Active JP6553246B2 (ja) 2012-04-16 2018-04-27 映像デコーディング方法および映像エンコーディング方法
JP2018087395A Active JP6553245B2 (ja) 2012-04-16 2018-04-27 映像デコーディング方法および映像エンコーディング方法
JP2018087426A Active JP6549283B2 (ja) 2012-04-16 2018-04-27 映像デコーディング方法および映像エンコーディング方法
JP2019122109A Active JP6871312B2 (ja) 2012-04-16 2019-06-28 映像デコーディング方法、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2019122072A Active JP6841869B2 (ja) 2012-04-16 2019-06-28 映像デコーディング方法および映像エンコーディング方法
JP2021024625A Active JP7041294B2 (ja) 2012-04-16 2021-02-18 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2021069283A Active JP7123210B2 (ja) 2012-04-16 2021-04-15 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022037465A Active JP7305831B2 (ja) 2012-04-16 2022-03-10 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127436A Active JP7367145B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127407A Active JP7367143B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127432A Active JP7367144B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127399A Active JP7367142B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127390A Active JP7367141B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022128498A Active JP7432668B2 (ja) 2012-04-16 2022-08-10 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022128503A Active JP7431290B2 (ja) 2012-04-16 2022-08-10 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2023179054A Pending JP2023179726A (ja) 2012-04-16 2023-10-17 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2024015010A Pending JP2024050775A (ja) 2012-04-16 2024-02-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置

Family Applications Before (9)

Application Number Title Priority Date Filing Date
JP2015506892A Active JP5933815B2 (ja) 2012-04-16 2013-04-16 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2016031335A Active JP6186026B2 (ja) 2012-04-16 2016-02-22 映像デコーディング装置
JP2016092745A Active JP6163229B2 (ja) 2012-04-16 2016-05-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2016092752A Active JP6224163B2 (ja) 2012-04-16 2016-05-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2016092749A Active JP6163230B2 (ja) 2012-04-16 2016-05-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2016092743A Active JP6224162B2 (ja) 2012-04-16 2016-05-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2017146933A Active JP6549189B2 (ja) 2012-04-16 2017-07-28 映像エンコーディング方法およびビットストリームの生成方法
JP2018085588A Active JP6556904B2 (ja) 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2018085634A Active JP6556907B2 (ja) 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法

Family Applications After (20)

Application Number Title Priority Date Filing Date
JP2018085608A Active JP6556905B2 (ja) 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2018085624A Active JP6556906B2 (ja) 2012-04-16 2018-04-26 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2018087416A Active JP6549282B2 (ja) 2012-04-16 2018-04-27 映像デコーディング方法および映像エンコーディング方法
JP2018087408A Active JP6553246B2 (ja) 2012-04-16 2018-04-27 映像デコーディング方法および映像エンコーディング方法
JP2018087395A Active JP6553245B2 (ja) 2012-04-16 2018-04-27 映像デコーディング方法および映像エンコーディング方法
JP2018087426A Active JP6549283B2 (ja) 2012-04-16 2018-04-27 映像デコーディング方法および映像エンコーディング方法
JP2019122109A Active JP6871312B2 (ja) 2012-04-16 2019-06-28 映像デコーディング方法、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法
JP2019122072A Active JP6841869B2 (ja) 2012-04-16 2019-06-28 映像デコーディング方法および映像エンコーディング方法
JP2021024625A Active JP7041294B2 (ja) 2012-04-16 2021-02-18 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2021069283A Active JP7123210B2 (ja) 2012-04-16 2021-04-15 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022037465A Active JP7305831B2 (ja) 2012-04-16 2022-03-10 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127436A Active JP7367145B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127407A Active JP7367143B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127432A Active JP7367144B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127399A Active JP7367142B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022127390A Active JP7367141B2 (ja) 2012-04-16 2022-08-09 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022128498A Active JP7432668B2 (ja) 2012-04-16 2022-08-10 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2022128503A Active JP7431290B2 (ja) 2012-04-16 2022-08-10 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2023179054A Pending JP2023179726A (ja) 2012-04-16 2023-10-17 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2024015010A Pending JP2024050775A (ja) 2012-04-16 2024-02-02 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置

Country Status (16)

Country Link
US (10) US10602160B2 (ja)
EP (7) EP3340630B1 (ja)
JP (30) JP5933815B2 (ja)
KR (24) KR20130116782A (ja)
CN (12) CN108769713B (ja)
CY (1) CY1122257T1 (ja)
DK (1) DK2840788T3 (ja)
ES (1) ES2748463T3 (ja)
HR (1) HRP20191726T1 (ja)
HU (1) HUE045980T2 (ja)
LT (1) LT2840788T (ja)
PL (2) PL3340630T3 (ja)
PT (1) PT2840788T (ja)
RS (1) RS59596B1 (ja)
SI (1) SI2840788T1 (ja)
WO (2) WO2013157828A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018152865A (ja) * 2012-04-16 2018-09-27 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014038906A1 (ko) * 2012-09-09 2014-03-13 엘지전자 주식회사 영상 복호화 방법 및 이를 이용하는 장치
US10805605B2 (en) * 2012-12-21 2020-10-13 Telefonaktiebolaget Lm Ericsson (Publ) Multi-layer video stream encoding and decoding
US10129550B2 (en) * 2013-02-01 2018-11-13 Qualcomm Incorporated Inter-layer syntax prediction control
WO2014196198A1 (ja) * 2013-06-05 2014-12-11 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置
US9648333B2 (en) * 2013-10-11 2017-05-09 Vid Scale, Inc. High level syntax for HEVC extensions
KR102248848B1 (ko) 2013-10-26 2021-05-06 삼성전자주식회사 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치
WO2015083986A1 (ko) * 2013-12-03 2015-06-11 주식회사 케이티 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
KR20150064678A (ko) * 2013-12-03 2015-06-11 주식회사 케이티 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
KR101792518B1 (ko) * 2013-12-16 2017-11-02 엘지전자 주식회사 트릭 플레이 서비스 제공을 위한 신호 송수신 장치 및 신호 송수신 방법
WO2015105399A1 (ko) * 2014-01-13 2015-07-16 삼성전자 주식회사 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치.
JP5886341B2 (ja) 2014-03-07 2016-03-16 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
JP6150134B2 (ja) * 2014-03-24 2017-06-21 ソニー株式会社 画像符号化装置および方法、画像復号装置および方法、プログラム、並びに記録媒体
WO2016098056A1 (en) 2014-12-18 2016-06-23 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
WO2016204374A1 (ko) * 2015-06-18 2016-12-22 엘지전자 주식회사 영상 코딩 시스템에서 영상 필터링 방법 및 장치
KR102602690B1 (ko) * 2015-10-08 2023-11-16 한국전자통신연구원 화질에 기반한 적응적 부호화 및 복호화를 위한 방법 및 장치
JP6969559B2 (ja) * 2016-08-22 2021-11-24 ソニーグループ株式会社 送信装置、送信方法、受信装置および受信方法
JP6350638B2 (ja) * 2016-11-16 2018-07-04 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
US10692262B2 (en) 2017-01-12 2020-06-23 Electronics And Telecommunications Research Institute Apparatus and method for processing information of multiple cameras
WO2020004420A1 (en) * 2018-06-30 2020-01-02 Sharp Kabushiki Kaisha Systems and methods for signaling picture types of pictures included in coded video
US10904545B2 (en) * 2018-12-26 2021-01-26 Tencent America LLC Method for syntax controlled decoded picture buffer management
CN113661714B (zh) * 2019-03-11 2024-10-01 交互数字Vc控股公司 子画面比特流提取和重新定位
WO2020184673A1 (ja) * 2019-03-12 2020-09-17 ソニー株式会社 画像復号装置、画像復号方法、画像符号化装置、および画像符号化方法
US11310560B2 (en) * 2019-05-17 2022-04-19 Samsung Electronics Co., Ltd. Bitstream merger and extractor
WO2020235552A1 (en) * 2019-05-19 2020-11-26 Sharp Kabushiki Kaisha Systems and methods for signaling picture property information in video coding
EP3979640A4 (en) * 2019-05-28 2023-05-31 Samsung Electronics Co., Ltd. VIDEO CODING METHOD AND APPARATUS AND VIDEO DECODING METHOD AND APPARATUS FOR PREVENTING SMALL SIZE INTRABLOCK
CN113950842A (zh) * 2019-06-20 2022-01-18 索尼半导体解决方案公司 图像处理装置和方法
US11032548B2 (en) * 2019-06-24 2021-06-08 Tencent America LLC Signaling for reference picture resampling
US11457242B2 (en) * 2019-06-24 2022-09-27 Qualcomm Incorporated Gradual random access (GRA) signalling in video coding
BR112022000158A2 (pt) * 2019-07-08 2022-02-22 Huawei Tech Co Ltd Restrições de imagem de unidade de nal mista em codificação de vídeo
CN110446047A (zh) * 2019-08-16 2019-11-12 苏州浪潮智能科技有限公司 视频码流的解码方法及装置
EP4044603A4 (en) * 2019-10-07 2023-11-29 LG Electronics Inc. POINT CLOUD DATA TRANSMITTING APPARATUS, POINT CLOUD DATA TRANSMITTING METHOD, POINT CLOUD DATA RECEIVING APPARATUS AND POINT CLOUD DATA RECEIVING METHOD
CN117915112A (zh) * 2019-10-07 2024-04-19 华为技术有限公司 编码器、解码器及对应方法
KR20220100710A (ko) 2019-12-23 2022-07-15 엘지전자 주식회사 Nal 유닛 타입 기반 영상 또는 비디오 코딩
WO2021132963A1 (ko) * 2019-12-23 2021-07-01 엘지전자 주식회사 슬라이스 또는 픽처에 대한 nal 유닛 타입 기반 영상 또는 비디오 코딩
MX2022007897A (es) * 2019-12-23 2022-09-26 Lg Electronics Inc Codificacion de imagen o video basada en informacion asociada a la unidad nal.
EP4082198A4 (en) * 2019-12-27 2023-08-16 Alibaba Group Holding Limited METHOD AND DEVICE FOR SIGNALING SUBPICTURE PARTITIONING INFORMATION
EP4087255A4 (en) 2020-01-02 2024-01-17 Lg Electronics Inc. METHOD AND APPARATUS FOR DECODING IMAGE INFORMATION INCLUDING AN IMAGE HEAD
KR20220100711A (ko) 2020-01-02 2022-07-15 엘지전자 주식회사 영상 디코딩 방법 및 그 장치
KR20220100063A (ko) 2020-01-02 2022-07-14 엘지전자 주식회사 Ph nal 유닛 코딩 관련 영상 디코딩 방법 및 그 장치
WO2021145687A1 (ko) * 2020-01-14 2021-07-22 엘지전자 주식회사 서브 픽처 및 픽처 헤더에 관한 정보를 시그널링하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
CN115299053A (zh) * 2020-03-16 2022-11-04 字节跳动有限公司 可缩放视频编解码中的随机访问点访问单元
KR20220154792A (ko) * 2020-03-17 2022-11-22 후아웨이 테크놀러지 컴퍼니 리미티드 인코더, 디코더 및 대응하는 방법
CN113453006B (zh) * 2020-03-25 2024-04-16 腾讯美国有限责任公司 一种图片封装方法、设备以及存储介质
CN116915967A (zh) * 2020-04-12 2023-10-20 Lg电子株式会社 点云数据发送设备和方法以及点云数据接收设备和方法
KR20230011990A (ko) * 2020-05-12 2023-01-25 엘지전자 주식회사 영상/비디오 코딩 시스템에서 단일 레이어 비트스트림 내 파라미터 세트의 참조를 처리하는 방법 및 장치
KR102421720B1 (ko) * 2020-05-29 2022-07-18 삼성전자주식회사 영상의 ai 부호화 및 ai 복호화를 위한 장치, 및 방법
US11223841B2 (en) * 2020-05-29 2022-01-11 Samsung Electronics Co., Ltd. Apparatus and method for performing artificial intelligence encoding and artificial intelligence decoding on image
WO2021251611A1 (en) 2020-06-11 2021-12-16 Samsung Electronics Co., Ltd. Apparatus and method for performing artificial intelligence encoding and decoding on image by using low-complexity neural network
US20220321918A1 (en) 2021-04-02 2022-10-06 Qualcomm Incorporated Picture orientation and quality metrics supplemental enhancement information message for video coding
JP2024512602A (ja) * 2021-04-02 2024-03-19 クゥアルコム・インコーポレイテッド ビデオコーディングのためのピクチャ向きおよび品質メトリクス補足拡張情報メッセージ
WO2024167266A1 (ko) * 2023-02-09 2024-08-15 삼성전자 주식회사 전자 장치 및 전자 장치에서 스케일러블 코덱을 처리하는 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013043913A1 (en) * 2011-09-23 2013-03-28 Qualcomm Incorporated Video coding with subsets of a reference picture set
JP2018152868A (ja) * 2012-04-16 2018-09-27 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置

Family Cites Families (82)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1578136A3 (en) * 1998-01-27 2005-10-19 AT&T Corp. Method and apparatus for encoding video shape and texture information
US6895048B2 (en) * 1998-03-20 2005-05-17 International Business Machines Corporation Adaptive encoding of a sequence of still frames or partially still frames within motion video
KR20040106414A (ko) * 2002-04-29 2004-12-17 소니 일렉트로닉스 인코포레이티드 미디어 파일에서 진보된 코딩 포맷의 지원
US8752197B2 (en) * 2002-06-18 2014-06-10 International Business Machines Corporation Application independent system, method, and architecture for privacy protection, enhancement, control, and accountability in imaging service systems
CN100423581C (zh) * 2002-12-30 2008-10-01 Nxp股份有限公司 动态图形的编码/解码方法及其设备
JP4479160B2 (ja) * 2003-03-11 2010-06-09 チッソ株式会社 シルセスキオキサン誘導体を用いて得られる重合体
KR100596706B1 (ko) * 2003-12-01 2006-07-04 삼성전자주식회사 스케일러블 비디오 코딩 및 디코딩 방법, 이를 위한 장치
AU2004310917B2 (en) 2003-12-01 2009-10-01 Samsung Electronics Co., Ltd. Method and apparatus for scalable video encoding and decoding
US7415069B2 (en) * 2003-12-09 2008-08-19 Lsi Corporation Method for activation and deactivation of infrequently changing sequence and picture parameter sets
US7586924B2 (en) * 2004-02-27 2009-09-08 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for coding an information signal into a data stream, converting the data stream and decoding the data stream
EP2190192B1 (en) * 2004-06-02 2014-08-06 Panasonic Corporation Picture coding apparatus and picture decoding apparatus
JP4575129B2 (ja) * 2004-12-02 2010-11-04 ソニー株式会社 データ処理装置およびデータ処理方法、並びにプログラムおよびプログラム記録媒体
KR20060068254A (ko) 2004-12-16 2006-06-21 엘지전자 주식회사 비디오 부호화 방법, 복호화 방법 그리고, 복호화 장치
JP2006203661A (ja) * 2005-01-21 2006-08-03 Toshiba Corp 動画像符号化装置、動画像復号装置及び符号化ストリーム生成方法
JP2006211274A (ja) * 2005-01-27 2006-08-10 Toshiba Corp 記録媒体、この記録媒体を再生する方法並びにその再生装置及び記録媒体に映像データを記録する記録装置並びにその記録方法
JP2008536420A (ja) 2005-04-13 2008-09-04 ノキア コーポレイション スケーラビリティ情報の符号化、格納およびシグナリング
BRPI0610398B1 (pt) * 2005-04-13 2019-07-02 Nokia Technologies Oy Método e aparelho
KR100878811B1 (ko) * 2005-05-26 2009-01-14 엘지전자 주식회사 비디오 신호의 디코딩 방법 및 이의 장치
WO2006126841A1 (en) 2005-05-26 2006-11-30 Lg Electronics Inc. Method for providing and using information about inter-layer prediction for video signal
EP1773063A1 (en) * 2005-06-14 2007-04-11 Thomson Licensing Method and apparatus for encoding video data, and method and apparatus for decoding video data
FR2888424A1 (fr) * 2005-07-07 2007-01-12 Thomson Licensing Sas Dispositif et procede de codage et de decodage de donnees video et train de donnees
KR20080066784A (ko) 2005-10-11 2008-07-16 노키아 코포레이션 규모가변적 비디오 코딩을 위한 효율적 디코딩 화상 버퍼관리
WO2007046957A1 (en) * 2005-10-12 2007-04-26 Thomson Licensing Method and apparatus for using high-level syntax in scalable video encoding and decoding
MY159176A (en) * 2005-10-19 2016-12-30 Thomson Licensing Multi-view video coding using scalable video coding
KR100763196B1 (ko) * 2005-10-19 2007-10-04 삼성전자주식회사 어떤 계층의 플래그를 계층간의 연관성을 이용하여부호화하는 방법, 상기 부호화된 플래그를 복호화하는방법, 및 장치
WO2007081150A1 (en) 2006-01-09 2007-07-19 Electronics And Telecommunications Research Institute Method defining nal unit type and system of transmission bitstream and redundant slice coding
JP4731343B2 (ja) * 2006-02-06 2011-07-20 富士通東芝モバイルコミュニケーションズ株式会社 復号装置
EP1827023A1 (en) * 2006-02-27 2007-08-29 THOMSON Licensing Method and apparatus for packet loss detection and virtual packet generation at SVC decoders
US8767836B2 (en) * 2006-03-27 2014-07-01 Nokia Corporation Picture delimiter in scalable video coding
JP5213064B2 (ja) * 2006-03-29 2013-06-19 トムソン ライセンシング マルチビュービデオ符号化方法及びその装置
CN101455084A (zh) * 2006-03-30 2009-06-10 Lg电子株式会社 用于解码/编码视频信号的方法和装置
EP2039168A2 (en) * 2006-07-05 2009-03-25 Thomson Licensing Methods and apparatus for multi-view video encoding and decoding
KR20080007086A (ko) * 2006-07-14 2008-01-17 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
US8532178B2 (en) 2006-08-25 2013-09-10 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal with inter-view reference picture list construction
CN101395925B (zh) * 2006-09-07 2013-01-02 Lg电子株式会社 用于解码/编码视频信号的方法及装置
EP2060123A4 (en) 2006-09-07 2016-05-04 Lg Electronics Inc METHOD AND DEVICE FOR DECODING / ENCODING A VIDEO SIGNAL
EP2067358A2 (en) * 2006-09-28 2009-06-10 Thomson Licensing Method for rho-domain frame level bit allocation for effective rate control and enhanced video coding quality
KR101385808B1 (ko) * 2006-10-16 2014-04-17 톰슨 라이센싱 비디오 동작 동안 nal 유닛을 이용하여 동시 디코딩 리프레시를 시그널링하는 방법
CA2666452C (en) * 2006-10-16 2014-12-16 Nokia Corporation System and method for implementing efficient decoded buffer management in multi-view video coding
US20100027615A1 (en) * 2006-10-24 2010-02-04 Purvin Bibhas Pandit Picture identification for multi-view video coding
EP1985121A4 (en) * 2006-11-17 2010-01-13 Lg Electronics Inc METHOD AND DEVICE FOR DECODING / CODING A VIDEO SIGNAL
JP5157140B2 (ja) * 2006-11-29 2013-03-06 ソニー株式会社 記録装置、記録方法、情報処理装置、情報処理方法、撮像装置およびビデオシステム
EP2103136B1 (en) * 2006-12-21 2017-11-01 Thomson Licensing Methods and apparatus for improved signaling using high level syntax for multi-view video coding and decoding
JP5535646B2 (ja) 2007-01-05 2014-07-02 トムソン ライセンシング スケーラブル映像符号化用の仮想リファレンスデコーダ
US9344362B2 (en) 2007-01-12 2016-05-17 University-Industry Cooperation Group Of Kyung Hee University Packet format of network abstraction layer unit, and algorithm and apparatus for video encoding and decoding using the format, QOS control algorithm and apparatus for IPV6 label switching using the format
JP5023739B2 (ja) 2007-02-28 2012-09-12 ソニー株式会社 画像情報符号化装置及び符号化方法
JP5156088B2 (ja) * 2007-03-23 2013-03-06 エルジー エレクトロニクス インコーポレイティド ビデオ信号のデコーディング/エンコーディング方法及び装置
EP2137973B1 (en) * 2007-04-12 2019-05-01 InterDigital VC Holdings, Inc. Methods and apparatus for video usability information (vui) for scalable video coding (svc)
US20100142613A1 (en) * 2007-04-18 2010-06-10 Lihua Zhu Method for encoding video data in a scalable manner
KR101556131B1 (ko) * 2007-08-24 2015-09-30 엘지전자 주식회사 디지털 방송 시스템 및 데이터 처리 방법
BR122012021950A2 (pt) * 2007-10-05 2015-08-04 Thomson Licensing Aparelho para incorporação de informação de usabilidade de vídeo (vui) em um sistema de codificação de vídeo com múltiplos visualizações (mvc)
KR101345287B1 (ko) 2007-10-12 2013-12-27 삼성전자주식회사 스케일러블 영상 부호화 방법 및 장치와 그 영상 복호화방법 및 장치
WO2010011295A1 (en) 2008-07-22 2010-01-28 Thomson Licensing Methods for error concealment due to enhancement layer packet loss in scalable video coding (svc) decoding
WO2010041855A2 (en) * 2008-10-06 2010-04-15 Lg Electronics Inc. A method and an apparatus for processing a video signal
US20100226227A1 (en) * 2009-03-09 2010-09-09 Chih-Ching Yu Methods and apparatuses of processing readback signal generated from reading optical storage medium
JP5332773B2 (ja) * 2009-03-18 2013-11-06 ソニー株式会社 画像処理装置および方法
US8566393B2 (en) * 2009-08-10 2013-10-22 Seawell Networks Inc. Methods and systems for scalable video chunking
KR101124723B1 (ko) 2009-08-21 2012-03-23 에스케이플래닛 주식회사 해상도 시그널링을 이용한 스케일러블 비디오 재생 시스템 및 방법
US8976871B2 (en) * 2009-09-16 2015-03-10 Qualcomm Incorporated Media extractor tracks for file format track selection
US9369718B2 (en) 2009-10-30 2016-06-14 Sun Patent Trust Decoding method, decoding apparatus, coding method, and coding apparatus using a quantization matrix
EP2346261A1 (en) * 2009-11-18 2011-07-20 Tektronix International Sales GmbH Method and apparatus for multiplexing H.264 elementary streams without timing information coded
CN102103651B (zh) 2009-12-21 2012-11-14 中国移动通信集团公司 一种一卡通系统的实现方法和系统以及一种智能卡
US9185439B2 (en) * 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
KR20120015260A (ko) 2010-07-20 2012-02-21 한국전자통신연구원 스케일러빌리티 및 뷰 정보를 제공하는 스트리밍 서비스를 위한 방법 및 장치
KR20120038870A (ko) 2010-10-14 2012-04-24 정태길 클라우드 컴퓨팅 기반의 모바일 오피스 프린팅 부가 서비스 방법
KR101158244B1 (ko) 2010-12-14 2012-07-20 주식회사 동호 하천 친환경 생태 조성 구조체 및 시스템
JP2012142551A (ja) 2010-12-16 2012-07-26 Nisshin:Kk 加熱処理方法およびその装置
KR101740425B1 (ko) 2010-12-23 2017-05-26 에스케이텔레콤 주식회사 중계기 및 상기 중계기의 신호 중계 방법
KR101214465B1 (ko) 2010-12-30 2012-12-21 주식회사 신한엘리베이타 가볍고 방수성이 우수한 방수발판부재가 구비된 에스컬레이터 장치
WO2012096981A1 (en) 2011-01-14 2012-07-19 Vidyo, Inc. Improved nal unit header
US20120230409A1 (en) 2011-03-07 2012-09-13 Qualcomm Incorporated Decoded picture buffer management
AU2012225513B2 (en) 2011-03-10 2016-06-23 Vidyo, Inc. Dependency parameter set for scalable video coding
JP5708124B2 (ja) 2011-03-25 2015-04-30 三菱電機株式会社 半導体装置
PL3410725T3 (pl) * 2011-06-30 2022-02-21 Telefonaktiebolaget Lm Ericsson (Publ) Sygnalizacja obrazu referencyjnego
US20130114743A1 (en) 2011-07-13 2013-05-09 Rickard Sjöberg Encoder, decoder and methods thereof for reference picture management
US10158873B2 (en) 2011-11-30 2018-12-18 Qualcomm Incorporated Depth component removal for multiview video coding (MVC) compatible three-dimensional video coding (3DVC)
US9451252B2 (en) 2012-01-14 2016-09-20 Qualcomm Incorporated Coding parameter sets and NAL unit headers for video coding
TWI752680B (zh) 2012-04-13 2022-01-11 美商Ge影像壓縮有限公司 用以自資料串流重構圖像的解碼器及方法、用以將圖像編碼入資料串流的編碼器及方法、與相關電腦程式及機器可存取媒體
US9554146B2 (en) 2012-09-21 2017-01-24 Qualcomm Incorporated Indication and activation of parameter sets for video coding
ES2648970T3 (es) * 2012-12-21 2018-01-09 Telefonaktiebolaget Lm Ericsson (Publ) Codificación y decodificación de flujo de video multicapa
EP2982123A4 (en) * 2013-04-05 2016-09-07 Sharp Kk DECODING INTERMEDIATE REFERENCE IMAGE SETS AND CONSTRUCTING REFERENCE PICTURES
US9565437B2 (en) 2013-04-08 2017-02-07 Qualcomm Incorporated Parameter set designs for video coding extensions

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013043913A1 (en) * 2011-09-23 2013-03-28 Qualcomm Incorporated Video coding with subsets of a reference picture set
WO2013043887A1 (en) * 2011-09-23 2013-03-28 Qualcomm Incorporated Reference picture list construction for video coding
JP2018152868A (ja) * 2012-04-16 2018-09-27 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2018152865A (ja) * 2012-04-16 2018-09-27 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
BENJAMIN BROSS ET AL.: "High efficiency video coding (HEVC) text specification draft 6", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC)OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-H1003 (version 22), JPN6019002203, 2 April 2012 (2012-04-02), pages 34 - 36, ISSN: 0003967397 *
JUNG WON KANG ET AL.: "On NAL unit header", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JCTVC-I0251, JPN6019002205, April 2012 (2012-04-01), pages 1 - 3, ISSN: 0003967398 *
YE-KUI WANG AND YING CHEN: "High-level syntax hook for HEVC multi-standard extensions", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, vol. JCTVC-I0355, JPN6019002207, April 2012 (2012-04-01), pages 1 - 5, ISSN: 0003967399 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018152865A (ja) * 2012-04-16 2018-09-27 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
JP2018152868A (ja) * 2012-04-16 2018-09-27 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute 映像情報デコーディング方法、映像デコーディング方法及びそれを利用する装置
US10595026B2 (en) 2012-04-16 2020-03-17 Electronics And Telecommunications Research Institute Decoding method and device for bit stream supporting plurality of layers
US10602160B2 (en) 2012-04-16 2020-03-24 Electronics And Telecommunications Research Institute Image information decoding method, image decoding method, and device using same
US10958919B2 (en) 2012-04-16 2021-03-23 Electronics And Telecommunications Resarch Institute Image information decoding method, image decoding method, and device using same
US10958918B2 (en) 2012-04-16 2021-03-23 Electronics And Telecommunications Research Institute Decoding method and device for bit stream supporting plurality of layers
US11483578B2 (en) 2012-04-16 2022-10-25 Electronics And Telecommunications Research Institute Image information decoding method, image decoding method, and device using same
US11490100B2 (en) 2012-04-16 2022-11-01 Electronics And Telecommunications Research Institute Decoding method and device for bit stream supporting plurality of layers
US20230035462A1 (en) 2012-04-16 2023-02-02 Electronics And Telecommunications Research Institute Image information decoding method, image decoding method, and device using same
US11949890B2 (en) 2012-04-16 2024-04-02 Electronics And Telecommunications Research Institute Decoding method and device for bit stream supporting plurality of layers
US12028538B2 (en) 2012-04-16 2024-07-02 Electronics And Telecommunications Research Institute Image information decoding method, image decoding method, and device using same

Also Published As

Publication number Publication date
JP2019198103A (ja) 2019-11-14
JP2022160642A (ja) 2022-10-19
CN108769711B (zh) 2021-08-10
KR101378861B1 (ko) 2014-04-02
JP2017225148A (ja) 2017-12-21
CN108769705B (zh) 2023-06-30
JP2024050775A (ja) 2024-04-10
EP2840787A1 (en) 2015-02-25
KR20140071517A (ko) 2014-06-11
JP6556904B2 (ja) 2019-08-07
JP7367142B2 (ja) 2023-10-23
EP2840788B1 (en) 2019-08-14
JP7041294B2 (ja) 2022-03-23
PL3340630T3 (pl) 2021-11-08
JP6556903B2 (ja) 2019-08-07
KR101843565B1 (ko) 2018-03-30
JP6553245B2 (ja) 2019-07-31
ES2748463T3 (es) 2020-03-16
EP3570546A1 (en) 2019-11-20
US20150063453A1 (en) 2015-03-05
HRP20191726T1 (hr) 2020-01-24
JP6224162B2 (ja) 2017-11-01
CN108769709B (zh) 2021-02-19
JP6553246B2 (ja) 2019-07-31
KR20170117935A (ko) 2017-10-24
US10958919B2 (en) 2021-03-23
KR20180035757A (ko) 2018-04-06
KR20130129338A (ko) 2013-11-28
JP2018152865A (ja) 2018-09-27
JP7367141B2 (ja) 2023-10-23
JP2016178665A (ja) 2016-10-06
KR20140071514A (ko) 2014-06-11
KR20180035758A (ko) 2018-04-06
EP2840787A4 (en) 2016-03-16
JP7367144B2 (ja) 2023-10-23
JP2021108492A (ja) 2021-07-29
KR101904234B1 (ko) 2018-10-05
CN108769708B (zh) 2021-02-19
JP7367145B2 (ja) 2023-10-23
CN108769713B (zh) 2023-09-26
CN108769686B (zh) 2021-07-27
CN104303503A (zh) 2015-01-21
US20200177895A1 (en) 2020-06-04
JP2022160680A (ja) 2022-10-19
CN108769706B (zh) 2023-04-14
JP6871312B2 (ja) 2021-05-12
EP2840788A1 (en) 2015-02-25
WO2013157826A1 (ko) 2013-10-24
KR20180035754A (ko) 2018-04-06
JP2023179726A (ja) 2023-12-19
CN108769686A (zh) 2018-11-06
US20230032927A1 (en) 2023-02-02
KR101719344B1 (ko) 2017-03-24
CY1122257T1 (el) 2020-11-25
KR20180036928A (ko) 2018-04-10
KR20140071515A (ko) 2014-06-11
JP6841869B2 (ja) 2021-03-10
US10595026B2 (en) 2020-03-17
JP2019198102A (ja) 2019-11-14
CN108769710A (zh) 2018-11-06
JP2016174385A (ja) 2016-09-29
EP3086556A1 (en) 2016-10-26
CN108769687B (zh) 2022-10-04
JP2022160679A (ja) 2022-10-19
JP6556907B2 (ja) 2019-08-07
KR101904237B1 (ko) 2018-10-05
JP2018152867A (ja) 2018-09-27
KR101843566B1 (ko) 2018-03-30
JP6556906B2 (ja) 2019-08-07
JP2022091806A (ja) 2022-06-21
RS59596B1 (sr) 2020-01-31
US11483578B2 (en) 2022-10-25
JP7367143B2 (ja) 2023-10-23
JP6549189B2 (ja) 2019-07-24
CN108769712B (zh) 2021-11-19
JP6556905B2 (ja) 2019-08-07
SI2840788T1 (sl) 2020-01-31
KR101739748B1 (ko) 2017-05-25
KR102062329B1 (ko) 2020-01-03
CN104303503B (zh) 2018-05-22
KR101904264B1 (ko) 2018-10-05
KR20160086807A (ko) 2016-07-20
EP3340630B1 (en) 2021-06-30
KR101904242B1 (ko) 2018-10-05
JP2018152874A (ja) 2018-09-27
JP2016174384A (ja) 2016-09-29
EP3893511A1 (en) 2021-10-13
JP2018152866A (ja) 2018-09-27
KR20170017965A (ko) 2017-02-15
US20150092836A1 (en) 2015-04-02
US20240205428A1 (en) 2024-06-20
DK2840788T3 (da) 2019-10-07
KR20180035759A (ko) 2018-04-06
US20210136393A1 (en) 2021-05-06
KR101488495B1 (ko) 2015-02-03
JP2018152871A (ja) 2018-09-27
JP2018152872A (ja) 2018-09-27
JP2022160640A (ja) 2022-10-19
US10958918B2 (en) 2021-03-23
CN108769711A (zh) 2018-11-06
KR20180035760A (ko) 2018-04-06
KR20130118253A (ko) 2013-10-29
KR20190025584A (ko) 2019-03-11
JP2022160645A (ja) 2022-10-19
LT2840788T (lt) 2019-12-10
PT2840788T (pt) 2019-10-18
EP3340630A1 (en) 2018-06-27
KR101488493B1 (ko) 2015-02-03
JP2018152873A (ja) 2018-09-27
PL2840788T3 (pl) 2020-06-01
KR20130116783A (ko) 2013-10-24
JP6186026B2 (ja) 2017-08-23
JP6549282B2 (ja) 2019-07-24
JP6163229B2 (ja) 2017-07-12
KR101904247B1 (ko) 2018-10-05
KR20180035755A (ko) 2018-04-06
KR101904255B1 (ko) 2018-10-05
KR20160086806A (ko) 2016-07-20
KR101931719B1 (ko) 2018-12-24
JP2022160641A (ja) 2022-10-19
JP6549283B2 (ja) 2019-07-24
EP3866472A1 (en) 2021-08-18
JP2015517274A (ja) 2015-06-18
WO2013157828A1 (ko) 2013-10-24
KR101904258B1 (ko) 2018-10-05
JP2016146636A (ja) 2016-08-12
KR20140071516A (ko) 2014-06-11
US11949890B2 (en) 2024-04-02
CN108769705A (zh) 2018-11-06
JP7123210B2 (ja) 2022-08-22
JP5933815B2 (ja) 2016-06-15
JP7431290B2 (ja) 2024-02-14
KR20160086805A (ko) 2016-07-20
JP6163230B2 (ja) 2017-07-12
KR101640583B1 (ko) 2016-07-19
KR20180036927A (ko) 2018-04-10
US20200169741A1 (en) 2020-05-28
KR20130118254A (ko) 2013-10-29
CN108769687A (zh) 2018-11-06
CN108769713A (zh) 2018-11-06
KR101673291B1 (ko) 2016-11-09
CN108769706A (zh) 2018-11-06
KR101488494B1 (ko) 2015-02-03
US12028538B2 (en) 2024-07-02
US11490100B2 (en) 2022-11-01
KR20130116782A (ko) 2013-10-24
US20210176481A1 (en) 2021-06-10
JP7432668B2 (ja) 2024-02-16
KR20140074875A (ko) 2014-06-18
HUE045980T2 (hu) 2020-02-28
KR101953703B1 (ko) 2019-03-05
KR101719345B1 (ko) 2017-03-24
KR101488496B1 (ko) 2015-02-03
JP2022160644A (ja) 2022-10-19
CN108769710B (zh) 2021-04-30
US20240155140A1 (en) 2024-05-09
US20230035462A1 (en) 2023-02-02
CN108769709A (zh) 2018-11-06
JP2018152868A (ja) 2018-09-27
CN108769707A (zh) 2018-11-06
JP2016178664A (ja) 2016-10-06
CN108769707B (zh) 2023-08-25
CN108769712A (zh) 2018-11-06
JP7305831B2 (ja) 2023-07-10
JP2021093747A (ja) 2021-06-17
CN108769708A (zh) 2018-11-06
US10602160B2 (en) 2020-03-24
JP6224163B2 (ja) 2017-11-01
EP2840788A4 (en) 2016-07-06

Similar Documents

Publication Publication Date Title
JP6556907B2 (ja) 映像エンコーディング装置、映像エンコーディング方法、データストリーム記憶方法、およびデータストリーム生成方法

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190611

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190710

R150 Certificate of patent or registration of utility model

Ref document number: 6556903

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S201 Request for registration of exclusive licence

Free format text: JAPANESE INTERMEDIATE CODE: R314201

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350