JP7529795B2 - 参照ピクチャリスト上の制約 - Google Patents
参照ピクチャリスト上の制約 Download PDFInfo
- Publication number
- JP7529795B2 JP7529795B2 JP2022563090A JP2022563090A JP7529795B2 JP 7529795 B2 JP7529795 B2 JP 7529795B2 JP 2022563090 A JP2022563090 A JP 2022563090A JP 2022563090 A JP2022563090 A JP 2022563090A JP 7529795 B2 JP7529795 B2 JP 7529795B2
- Authority
- JP
- Japan
- Prior art keywords
- picture
- subpicture
- order
- sub
- random access
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Television Signal Processing For Recording (AREA)
Description
本願は、2021年4月19日出願の国際特許出願第PCT/US2021/027963号に基づくものであり、2020年4月20日出願の米国特許仮出願第63/012713号の優先権および利益を主張する。前述のすべての特許出願は、その全体が参照により本明細書に組み込まれる。
AU Access Unit(アクセスユニット)
AUD Access Unit Delimiter(アクセスユニット区切り文字)
AVC Advanced Video Coding(高度映像コーディング)
CLVS Coded Layer Video Sequence(コーディングされたレイヤ映像シーケンス)
CPB Coded Picture Buffer(コーディングされたピクチャバッファ)
CRA Clean Random Access(クリーンランダムアクセス)
CTU Coding Tree Unit(コーディングツリーユニット)
CVS Coded Video Sequence(コーディングされた映像シーケンス)
DCI Decoding Capability Information(復号能力情報)
DPB Decoded Picture Buffer(復号ピクチャバッファ)
EOB End Of Bitstream(ビットストリーム終端)
EOS End Of Sequence(シーケンス終端)
GDR Gradual Decoding Refresh(漸次的復号更新)
HEVC High Efficiency Video Coding(高効率映像コーディング)
HRD Hypothetical Reference Decoder(仮想参照デコーダ)
IDR Instantaneous Decoding Refresh(瞬時復号更新)
JEM Joint Exploration Model(共同探索モデル)
MCTS Motion-Constrained Tile Sets(動き制約タイルセット)
NAL Network Abstraction Layer(ネットワーク抽象化レイヤ)
OLS Output Layer Set(出力レイヤセット)
PH Picture Header(ピクチャヘッダ)
PPS Picture Parameter Set(ピクチャパラメータセット)
PTL Profile,Tier and Level(プロファイル、層およびレベル)
PU Picture Unit(ピクチャユニット)
RADL Random Access Decodable Leading(ランダムアクセス復号可能リード)(ピクチャ)
RAP Random Access Point(ランダムアクセスポイント)
RASL Random Access Skipped Leading(ランダムアクセススキップリード)(ピクチャ)
RBSP Raw Byte Sequence Payload(生バイトシーケンスペイロード)
RPL Reference Picture List(参照ピクチャリスト)
SEI Supplemental Enhancement Information(補足強化情報)
SPS Sequence Parameter Set(シーケンスパラメータセット)
STSA Step-wise Temporal Sublayer Access(段階的時間的サブレイヤアクセス)
SVC Scalable Video Coding(スケーラブル映像コーディング)
VCL Video Coding Layer(映像コーディングレイヤ)
VPS Video Parameter Set(映像パラメータセット)
VTM VVC Test Model(VVC試験モデル)
VUI Video Usability Information(映像ユーザビリティ情報)
VVC Versatile Video Coding(汎用映像コーディング)
i)BLAピクチャの基本機能性は、CRAピクチャにシーケンスNALユニットの終端を加えることで実現でき、このシーケンスNALユニットの終端が存在することは、後続のピクチャが単層ビットストリームにおいて新しいCVSを開始することを示す。
ii)VVCの開発において、NALユニットヘッダのNALユニットタイプフィールドに6ビットの代わりに5ビットを用いることによって示されるように、HEVCよりも少ないNALユニットタイプを規定することが望ましかった。
(特定のピクチャの)関連付けられたIRAPピクチャ:復号順における前のIRAPピクチャ(存在する場合)は、特定のピクチャと同じ値nuh_layer_idを有する。
クリーンランダムアクセス(CRA)PU:コーティングされたピクチャがCRAピクチャであるPU。
クリーンランダムアクセス(CRA)ピクチャ:それぞれのVCL NALユニットのnal_unit_typeがCRA_NUTであるIRAPピクチャ。
コーディング映像シーケンス(CVS):復号順で、CVSS AUに続き、CVSS AUである後続のAUまで(ただし後続のAUは含まない)のすべてのAUを含む、CVSS AUでない0以上のAUから構成される、AUのシーケンス。
コーディング映像シーケンス開始(CVSS)AU:CVSの各レイヤにPUがあり、各PUのコーディングされたピクチャがCLVSSピクチャであるAU。
漸次的復号更新(GDR)AU:本PU各々のコーディングされたピクチャがGDRピクチャであるAU。
漸次的復号更新(GDR)PU:コーディングされたピクチャがGDRピクチャであるPU。
漸次的復号更新(GDR)ピクチャ:NALユニットのnal_unit_typeがGDR_NUTであるピクチャ。
瞬時復号更新(IDR)PU:コーディングされたピクチャがIDRピクチャであるPU。
瞬時復号更新(IDR)ピクチャ:それぞれのVCL NALユニットのnal_unit_typeがIDR_W_RADLまたはIDR_N_LPであるIRAPピクチャ。
イントラランダムアクセスポイント(IRAP)AU:CVSの各レイヤにPUが存在し、各PUのコーディングされたピクチャがIRAPピクチャであるAU。
イントラランダムアクセスポイント(IRAP)PU:コーディングされたピクチャがIRAPピクチャであるPU。
イントラランダムアクセスポイント(IRAP)ピクチャ:IDR_W_RADLからCRA_NUTの範囲内で、すべてのVCL NALユニットのnal_unit_typeが同じ値であるコーディングされたピクチャ。
先頭ピクチャ:関連付けられたIRAPピクチャと同じレイヤにあり、関連付けられたIRAPピクチャに出力順で先行するピクチャ。
出力順:復号ピクチャがDPBから出力される順番(DPBから出力される復号ピクチャの場合)。
ランダムアクセス復号可能先頭(RADL)PU:コーディングされたピクチャがRADLピクチャであるPU。
ランダムアクセス復号可能先頭(RADL)ピクチャ:それぞれのVCL NALユニットのnal_unit_typeがRADL_NUTであるピクチャ。
ランダムアクセススキップ先頭(RASL)PU:コーディングされたピクチャが、RASLピクチャであるPU。
ランダムアクセススキップ先頭(RASL)ピクチャ:それぞれのVCL NALユニットのnal_unit_typeがRASL_NUTであるピクチャ。
段階的時間的サブレイヤアクセス(STSA)PU:コーディングされたピクチャがSTSAピクチャであるPU。
段階的時間的サブレイヤアクセス(STSA)ピクチャ:それぞれのVCL NALユニットのnal_unit_typeがSTSA_NUTであるピクチャ。
注- STSAピクチャは、インター予測参照に対してSTSAピクチャと同じTemporalIdを有するピクチャを使用しないことに留意されたい。STSAピクチャと同じTemporalIdを有する復号順序でSTSAピクチャの後続のピクチャは、STSAピクチャと同じTemporalIdを有する復号順序でインター予測参照にはSTSAピクチャの前のピクチャを使用しない。STSAピクチャは、STSAピクチャにおいて、STSAピクチャを含むサブレイヤに対して、直下のサブレイヤからのアップスイッチを有効化する。STSAピクチャのTemporal Idは0より大きくなければならない。
サブピクチャ:ピクチャ内の1つ以上のスライスの矩形領域。
後端ピクチャ:出力順の関連付けられたIRAPピクチャに続くnon-IRAPピクチャで、STSAピクチャではない。
注- IRAPピクチャに関連付けられた後端ピクチャも、IRAPピクチャの復号順に従うことに留意されたい。関連付けられたIRAPピクチャの出力順に続き、関連付けられたIRAPピクチャに復号順で先行するピクチャは、許可されない。
nuh_reserved_zero_bitは、0に等しいものとする。nuh_reserved_zero_bitの値1は、将来、ITU-T|ISO/IECにより規定してもよい。デコーダは、nuh_reserved_zero_bitが1に等しいNALユニットを無視する(すなわち、ビットストリームから削除し、廃棄する)。
nuh_layer_idの値は、1つのコーディングされたピクチャのすべてのVCL NALユニットに対して同じであるものとする。コーディングされたピクチャまたはPUのnuh_layer_idの値は、コーディングされたピクチャまたはPUのVCL NALユニットのnuh_layer_idの値である。
AUD、PH、EOS、FD NALユニットのnuh_layer_idの値は、以下のように制約される。
- nal_unit_typeがAUD_NUTに等しい場合、nuh_layer_idはvps_layer_id[0]に等しいものとする。
- あるいは、nal_unit_typeがPH_NUT、EOS_NUT、FD_NUTに等しい場合、nuh_layer_idは関連付けられたVCL NALユニットのnuh_layer_idであるものとする。
注1- DCI、VPS、およびEOB NALユニットのnuh_layer_idの値は制約されていない。
nal_unit_typeは、表5で規定されているように、NALユニットタイプ、すなわちNALユニットに含まれるRBSPデータ構造のタイプを規定する。
UNSPEC_28..UNSPEC_31の範囲内にあり、意味論が規定されていないnal_unit_typeを有するNALユニットは、本明細書で規定される復号処理に影響を及ぼさないものとする。
注2- UNSPEC_28..UNSPEC_31の範囲内にあるNALユニットタイプ、アプリケーションにより決定されたとおりに使用されてもよい。本明細書では、nal_unit_typeのこれらの値の復号処理は規定されていない。異なるアプリケーションはこれらのNALユニットタイプを異なる目的で使用してもよいので、これらのnal_unit_type値を有するNALユニットを生成するエンコーダの設計、およびこれらのnal_unit_type値を有するNALユニットのコンテンツを解釈するデコーダの設計にあたり、特に注意しなければならない。本明細書は、これらの値の管理を定義していない。これらのnal_unit_type値は、使用の「衝突」(すなわち、同じnal_unit_type値に対するNALユニットのコンテンツの意味の異なる定義)が重要でない、または可能でない、または管理された状況、例えば、制御アプリケーションまたはトランスポート仕様において、またはビットストリームが分散される環境を制御することによって定義または管理されるコンテキストでの使用にのみ適している場合がある。
(附属書Cに規定されるように)ビットストリームのDUにおけるデータの数を決定すること以外の目的のために、デコーダは、nal_unit_typeの予約済みの値を使用するすべてのNALユニットのコンテンツを無視する(ビットストリームから取り除き、廃棄する)ものとする。
注3- この要件は、本明細書に適合する拡張を将来的に定義することを可能にする。
注5- IDR_N_LPに等しいnal_unit_typeを有するIDR(Instantaneous Decoding Refresh)ピクチャは、ビットストリームに存在する関連付けられた先頭ピクチャを有さない。IDR_W_RADLに等しいnal_unit_typeを有するIDRピクチャは、ビットストリームに存在する関連付けられたRASLピクチャ有していないが、ビットストリームに関連付けられたRADLピクチャを有していてもよい。
-mixed_nalu_types_in_pic_flagが0に等しい場合、nal_unit_typeの値は、ピクチャの全てのVCL NALユニットについて同一であるものとし、ピクチャまたはPUは、このピクチャまたはPUのコーディングされたスライスNALユニットと同一のNALユニットタイプを有するとみなされる。
- そうでない場合(mixed_nalu_types_in_pic_flagが1に等しい)、このピクチャは、少なくとも2つのサブピクチャを有し、このピクチャのVCL NALユニットは、以下のような正確に2つの異なるnal_unit_type値を有するものとする。このピクチャの少なくとも1つのサブピクチャのVCL NALユニットは、全てSTSA_NUT、RADL_NUT、RASL_NUT、IDR_W_RADL、IDR_N_LP、またはCRA_NUTに等しい特定のnal_unit_typeを有する一方、ピクチャ内の他のサブピクチャのVCL NALユニットは、全て、異なる特定値としてTRAIL_NUT、RADL_NUT、またはRASL_NUTに等しいnal_unit_typeを有するものとする。
-各ピクチャは、復号順においてビットストリームの第1のピクチャを除き、復号順において前のIRAPピクチャに関連付けられていると考えられる。
-ピクチャがIRAPピクチャの先頭ピクチャである場合、RADLまたはRASLピクチャとする。
-ピクチャがIRAPピクチャの後端ピクチャである場合、RADLまたはRASLピクチャではないものとする。
-IDRピクチャに関連付けられたRASLピクチャは、ビットストリームに含まれていないものとする。
-RADLピクチャは、IDR_N_LPに等しいnal_unit_typeを有するIDRピクチャに関連付けられたビットストリームに含まれていないものとする。
注6- 各パラメータセットが参照されるときに、(ビットストリームにおいて、または本明細書で規定されていない外部手段によって)利用可能である限り、IRAP PUの前のすべてのPUを破棄することにより、IRAP PUの位置でランダムアクセスを実行する(かつ、復号順においてIRAPピクチャおよびすべての後続の非RASLピクチャを正しく復号する)ことが可能である。
-IRAPピクチャに復号順で先行するピクチャは、IRAPピクチャに出力順で先行し、IRAPピクチャに関連付けられたRADLピクチャを出力順で先行するものとする。
-CRAピクチャに関連付けられたRASLピクチャは、出力順でCRAピクチャに関連付けられたRADLピクチャに先行するものとする。
-CRAピクチャに関連付けられたRASLピクチャは、復号順でCRAピクチャに先行するIRAPピクチャの出力順に従うものとする。
-field_seq_flagが0に等しく、現在のピクチャがIRAPピクチャに関連付けられた先頭ピクチャに等しい場合、同じIRAPピクチャに関連付けられたすべての非先頭ピクチャに復号順で先行するものとする。そうでない場合、picAおよびpicBを、それぞれ、1つのIRAPピクチャに関連付けられた、復号順序において、最初のおよび最後の先頭ピクチャとすると、復号順において、復号順でpicAに先行する非先頭ピクチャが最大1つ存在し、復号順でpicAおよびpicBの間に非先頭ピクチャはないものとする。
nuh_temporal_id_plus1の値は0に等しくないものとする。
変数TemporalIdは、以下のように導出される。
TemporalId=nuh_temporal_id_plus1-1 (36)
nal_unit_typeがIDR_W_RADL~RSV_IRAP_12の範囲内にある場合、TemporalIdは0に等しいものとする。
nal_unit_typeがSTSA_NUTであり、vps_independent_layer_flag[GeneralLayerIdx[nuh_layer_id]]が1に等しい場合は、TemporalIdは0でないものとする。
TemporalIdの値は、1つのAUのすべてのVCL NALユニットに対して同じであるものとする。コーディングされたピクチャ、PU、またはAUのTemporalIdの値は、コーディングされたピクチャ、PU、またはAUのVCL NALユニットのTemporalIdの値である。サブレイヤ表現のTemporalIdの値は、サブレイヤ表現におけるすべてのVCL NALユニットのTemporalIdの最大値である。
-nal_unit_typeがDCI_NUT、VPS_NUT、VPS_NUT、またはSPS_NUTに等しい場合、TemporalIdは0に等しく、NALユニットを含むAUのTemporalIdは0に等しいものとする。
-そうでない場合、nal_unit_typeがPH_NUTに等しい場合、TemporalIdは、NALユニットを含むPUのTemporalIdであるものとする。
-そうでない場合、nal_unit_typeがEOS_NUTまたはEOB_NUTに等しい場合、TemporalIdは0に等しいものとする。
-そうでない場合、nal_unit_typeがAUD_NUT、FD_NUT、PREFIX_SEI_NUT、またはSUFFIX_SEI_NUTに等しい場合、TemporalIdはNALユニットを含むAUのTemporalIdであるものとする。
-そうでない場合、nal_unit_typeがPPS_NUT、PREFIX_APS_NUT、またはSUFFIX_APS_NUTに等しい場合、TemporalIdはNALユニットを含むPUのTemporalId以上であるものとする。
注7- NALユニットが非VCL NALユニットである場合、TemporalIdの値は、非VCL NALユニットが適用されるすべてのAUのTemporalId値の最小値に等しい。nal_unit_typeがPPS_NUT、PREFIX_APS_NUT、またはSUFFIX_APS_NUTに等しい場合、TemporalIdは、AUを含むTemporalId以上であってもよく、すべてのPPSおよびAPSがビットストリームの始まりに含まれてもよく(例えば、それらが帯域外に輸送されている場合、受信機はそれらをビットストリームの先端に配置する)、第1のコーディングされたピクチャは、0に等しいTemporalIdを有する。
1に等しいmixed_nalu_types_nalu_pic_flagは、PPSを参照する各ピクチャが2つ以上のVCL NALユニットを有し、VCL NALユニットがnal_unit_typeの同じ値を有さず、ピクチャがIRAPピクチャでないことを規定する。0に等しいmixed_nalu_types_in_pic_flagは、PPSを参照する各ピクチャが1つ以上のVCL NALユニットを有し、PPSを参照する各ピクチャのVCL NALがnal__unit_typeの同じ値を有することを規定する。
no_mixed_nalu_types_in_pic_constraint_flagが1に等しい場合は、mixed_nalu_types_in_pic_flagの値は0に等しいものとする。
nal_unit_type値nalUnitTypeAがIDR_W_RADL~CRA_NUTの範囲内にある各スライスで、nal_unit_typeの別の値を有する1つ以上のスライスをも含むpicA(すなわち、ピクチャpicAのmixed_nalu_types_in_pic_flagの値が1に等しい)において、下記が適用される。
-このスライスは、対応するsubpic_treated_as_pic_flag[i]の値が1に等しいサブピクチャsubpicAに属するものとする。
-このスライスは、nal_unit_typeがnalUnitTypeAに等しくないVCL NALユニットを含むpicAのサブピクチャに属さないものとする。
-nalUnitTypeAがCRAに等しい場合、復号順序および出力順序でCLVSにおける現在のピクチャに後続するすべてのPUのために、それらのPUにおけるsubpicAにおけるスライスのRefPicList[0]およびRefPicList[1]は、アクティブエントリにおける復号順でpicAに先行するいずれのピクチャも含まないものとする。
-そうでない場合(すなわち、nalUnitTypeAがIDR_W_RADLまたはIDR_N_LPである)、復号順に現在のピクチャに続くCLVSにおけるすべてのPUについて、これらのPUにおけるsubpicAにおけるスライスのRefPicList[0]もRefPicList[1]のいずれも、アクティブエントリにおいて復号順でpicAに先行する任意のピクチャを含まないものとする。
注1- 1に等しいmixed_nalu_types_in_pic_flagは、PPSを参照するピクチャが、異なるNALユニットタイプを有するスライスを含み、例えば、サブピクチャビットストリームマージ演算に由来するコーディングされたピクチャであり、ビットストリーム構造のマッチングと更に元のビットストリームのパラメータのアラインメントとを確実にしなければならないことを示す。このようなアラインメントの一例は、以下のようである。sps_idr_rpl_present_flagの値が0に等しく、mixed_nalu_types_in_pic_flagが1に等しい場合は、PPSを参照するピクチャは、nal_unit_typeがIDR_W_RADLまたはIDR_N__LPと等しいスライスを有することはできない。
...
ph_pic_order_cnt_lsbは、現在のピクチャのピクチャオーダカウントmodulo MaxPicOrderCntLsbを規定する。ph_pic_order_cnt_lsb構文要素の長さは、log2_max_pic_order_cnt_lsb_minus4+4ビットである。ph_pic_order_cnt_lsbの値は、0~MaxPicOrderCntLsb-1の範囲内にあるものとする。
RpPicOrderCntVal=PicOrderCntVal + recovery_poc_cnt (81)
...
各iが0または1に等しい場合、RefPicList[i]における第1のNumRefIdxActive[i]エントリは、RefPicList[i]におけるアクティブエントリと称され、RefPicList[i]における他のエントリは、RefPicList[i]における非アクティブエントリと称される。
注2- 特定のピクチャは、RefPicList[0]におけるエントリおよびRefPicList[1]におけるエントリの両方により参照されることがあり得る。また、特定のピクチャが、RefPicList[0]における複数のエントリによって、またはRefPicList[1]における複数のエントリにより参照されることもあり得る。
注3- RefPicList[0]のアクティブエントリおよびRefPicList[1]のアクティブエントリは、現在のピクチャおよび復号順において現在のピクチャに続く1または複数のピクチャのインター予測のために使用してもよい全ての参照ピクチャをまとめて参照する。RefPicList[0]の非アクティブエントリおよびRefPicList[1]の非アクティブエントリは、現在のピクチャのインター予測のためには使用されないが、復号順において現在のピクチャに続く1つ以上のピクチャのためのインター予測において用いられ得る全ての参照ピクチャを集合的に参照する。
注4- RefPicList[0]またはRefPicList[1]には、対応するピクチャがDPBに存在しないため、「参照ピクチャなし」に等しいエントリが1または複数ある場合がある。「参照ピクチャなし」に等しいRefPicList[0]またはRefPicList[0]における各非アクティブエントリは、無視されるべきである。「参照ピクチャなし」に等しいRefPicList[0]またはRefPicList[1]における各アクティブエントリごとに、意図しないピクチャ損失を推測すべきである。
- 各iが0または1に等しい場合、num_ref_entries[i][RplsIdx[i]]は、NumRefIdxActive[i]よりも小さくてはならない。
- RefPicList[0]またはRefPicList[1]の各アクティブエントリによって参照されるピクチャは、DPBに含まれ、かつ現在のピクチャのTemporalId以下とする。
- RefPicList[0]またはRefPicList[1]の各エントリによって参照されるピクチャは、現在のピクチャではなく、0に等しいnon_reference_picture_flagを有するものとする。
- ピクチャのスライスのRefPicList[0]またはRefPicList[1]におけるSTRPエントリと、同じピクチャの同じスライスまたは異なるスライスのRefPicList[0]またはRefPicList[1]におけるLTRPエントリとは、同じピクチャを参照しないものとする。
- 現在のピクチャのPicOrderCntValとエントリにより参照されるピクチャのPicOrderCntValとの差分が224以上であるRefPicList[0]またはRefPicList[1]において、LTRPエントリはないものとする。
- setOfRefPicsは、RefPicList[0]において現在のピクチャと同じnuh_layer_idを有する全てのエントリと、RefPicList[1]において現在のピクチャと同じnuh_layer_idを有する全てのエントリとにより参照される固有のピクチャのセットである。setOfRefPicsにおけるピクチャの数は、MaxDpbSize-1以下であるものとする。ここで、MaxDpbSizeは、A.4.2項に規定されるとおりであり、setOfRefPicsは、ピクチャの全てのスライスで同一である。
- 現在のスライスがSTSA_NUTに等しいnal_unit_typeを有する場合、現在のピクチャのものとTemporalIdが等しく、かつnuh_layer_idが現在のピクチャのものと等しいRefPicList[0]またはRefPicList[1]においてアクティブエントリが存在しないものとする。
- 現在のピクチャが、復号順において、現在のピクチャのものとTemporalIdが等しく、かつ現在のピクチャのものとnuh_layer_idが等しいSTSAピクチャの後に続くピクチャである場合、復号順において、STSAピクチャに先行し、現在のピクチャのものとTemporalIdが等しく、かつ現在のピクチャのものとnuh_layer_idが等しいピクチャは、RefPicList[0]またはRefPicList[1]にアクティブエントリとして含まれるピクチャはないものとする。
- 現在のピクチャがCRAピクチャの場合、RefPicList[0]またはRefPicList[1]のエントリにより参照されるピクチャであって、復号順において先行するIRAPピクチャ(存在する場合)に、出力順または復号順において、先行するピクチャはないものとする。
- 現在のピクチャが後端ピクチャである場合、RefPicList[0]またはRefPicList[1]のアクティブエントリにより参照されるピクチャであって、現在のピクチャに関連付けられたIRAPピクチャのために利用不可な参照ピクチャを生成するための復号処理によって生成されたピクチャはないものとする。
- 現在のピクチャが、復号順と出力順の両方において、同じIRAPピクチャに関連付けられた1または複数の先頭ピクチャに続く後端ピクチャである場合、RefPicList[0]またはRefPicList[1]のエントリにより参照されるピクチャであって、現在のピクチャに関連付けられたIRAPピクチャのために利用不可な参照ピクチャを生成するための復号処理により生成されたピクチャはないものとする。
- 現在のピクチャがリカバリポイントピクチャであるか、またはリカバリポイントピクチャの出力順序において後続するピクチャである場合、リカバリポイントピクチャのGDRピクチャのために使用不可能な参照ピクチャを生成するための復号処理によって生成されたピクチャを含むRefPicList[0]またはRefPicList[1]のエントリはない。
- 現在のピクチャが後端ピクチャである場合、出力順または復号順において、関連付けられたIRAPピクチャに先行するRefPicList[0]またはRefPicList[1]のアクティブエントリにより参照されるピクチャはないものとする。
- 現在のピクチャが、復号順および出力順の両方において、同じIRAPピクチャに関連付けられた1または複数の先頭ピクチャに続く後端ピクチャである場合、出力順または復号順において、関連付けられたIRAPピクチャに先行するRefPicList[0]またはRefPicList[1]におけるエントリにより参照されるピクチャはないものとする。
- 現在のピクチャがRADLピクチャである場合、RefPicList[0]またはRefPicList[1]に以下のいずれかに該当するアクティブエントリはないものとする。
o RASLピクチャ
o 利用不可能な参照ピクチャを生成するために、復号処理によって生成されたピクチャ
o 関連付けられたIRAPピクチャに復号順において先行するピクチャ
- 現在のピクチャのスライスのRefPicList[0]またはRefPicList[1]における各ILRPエントリにより参照されるピクチャは、現在のピクチャと同じAU内にあるものとする。
- 現在のピクチャのスライスのRefPicList[0]またはRefPicList[1]における各ILRPエントリにより参照されるピクチャは、DPBに存在し、かつ現在のピクチャのものよりも小さいnuh_layer_idを有するものとする。
- スライスのRefPicList[0]またはRefPicList[1]における各ILRPエントリは、アクティブエントリであるものとする。
...
chroma_format_idcの値に基づいて、現在のピクチャのサンプル配列の数は、以下のとおりである。
-chroma_format_idcが0に等しい場合、現在のピクチャは、1つのサンプル配列SLからなる。
-そうでない場合(chroma_format_idcが0でない場合)、現在のピクチャは、3つのサンプル配列SL、SCb、SCrからなる。
現在のピクチャの復号処理は、項目7からの構文要素および大文字変数を入力とする。各NALユニットにおける各構文要素の意味を解釈する場合、また項目8の残りの部分において、用語「ビットストリーム」(またはその一部、例えば、ビットストリームのCVS)は、BitstreamToDecode(またはその一部)を指す。
-separate_colour_plane_flagが0に等しい場合、現在のピクチャを出力として、復号処理を1回呼び出す。
-そうでない場合(separate_colour_plane_flagが1に等しい)、復号処理を3回呼び出す。復号処理への入力は、colour_plane_idの値が同一なコーディングされたピクチャの全てのNALユニットである。colour_plane_idの特定値を有するNALユニットの復号処理は、colour_plane_idの特定値を有する単色カラーフォーマットを有するCVSのみがビットストリームに存在するかのように特定される。3つの復号処理の各々のアウトプットは、現在のピクチャの3つのサンプル配列の1つに割り当てられ、colour_plane_idがそれぞれ0、1、および2に等しいNALユニットが、SL、SCb、およびSCrに割り当てられる。
- ピクチャオーダカウントに関連する変数および関数は、8.3.1項で規定されるように導出される。これは、ピクチャの第1のスライスに対してのみ呼び出す必要がある。
- 非IDRピクチャの各スライスの復号処理の最初に、参照ピクチャリスト0(RefPicList[0])と参照ピクチャリスト1(RefPicList[1])の導出のために、8.3.2項に規定された参照ピクチャリスト構築のための復号処理が呼び出される。
- 8.3.3項の参照ピクチャマーキングのための復号処理が呼び出され、参照ピクチャは、「参照のために使用されていない」または「長期参照のために使用される」としてマークされてもよい。これは、ピクチャの第1のスライスに対してのみ呼び出す必要がある。
- 現在のピクチャが、NoOutputBeforeRecoveryFlagが1に等しいCRAピクチャまたはNoOutputBeforeRecoveryFlagが1に等しいGDRピクチャである場合、8.3.4項で規定される利用不可能な参照ピクチャを生成するための復号処理が呼び出されるが、ピクチャの第1のスライスに対してのみ呼び出される必要がある。
- PictureOutputFlagは、以下のように設定される。
- 以下の条件の1つが真である場合、PictureOutputFlagを0に等しく設定する。
- 現在のピクチャはRASLピクチャであり、関連付けられたIRAPピクチャのNoOutputBeforeRecoveryFlagは1に等しい。
- gdr_enabled_flagは1に等しく、現在のピクチャは、NoOutputBeforeRecoveryFlagが1に等しいGDRピクチャである。
- gdr_enabled_flagは1に等しく、現在のピクチャは、NoOutputBeforeRecoveryFlagが1に等しいGDRピクチャに関連付けられ、現在のピクチャのPicOrderCntValは、関連付けられたGDRピクチャのRpPicOrderCntValよりも小さい。
- sps_video_parameter_set_idが0より大きく、ols_mode_idcが0に等しく、現在のAUは、以下の条件を全て満たすピクチャpicAを含む。
- PicAは、1に等しいPictureOutputFlagを有する。
- PicAは、現在のピクチャのものよりも大きいnuh_layer_id nuhLidを有する。
- PicAはOLSの出力レイヤに属する(すなわち、OutputLayerIdInOls[TargetOlsIdx][0]はnuhLidに等しい)。
- sps_video_parameter_set_idが0より大きく、ols_mode_idcが2に等しく、ols_output_layer_flag[TargetOlsIdx][GeneralLayerIdx[nuh_layer_id]]は0に等しい。
- そうでない場合、PictureOutputFlagがpic_output_flagに等しく設定される。
a. 更に、1つ以上の用語が定義されている:関連付けられたGDRサブピクチャ、関連付けられたIRAPサブピクチャ、CRAサブピクチャ、GDRサブピクチャ、IDRサブピクチャ、IRAPサブピクチャ、先頭サブピクチャ、RADLサブピクチャ、RASLサブピクチャ、STSAサブピクチャ、後端サブピクチャ。
a. 一例において、この制約は、以下のように規定される。ピクチャ内にサブピクチャインデックスiおよびjを有する任意の2つの隣接するサブピクチャの場合、subpic_transpeted_pic_flag[i]またはsubpic_transpeted_pic_flag[j]が0に等しい場合、2つのサブピクチャは、同じNALユニットタイプを持つものとする。
a. あるいは、サブピクチャインデックスiを有するいずれかのサブピクチャが0に等しいsubpic_transpeted_pic_flag[i]を有する場合、ピクチャにおける全てのサブピクチャは、同一のNALユニットタイプを有するものとする(すなわち、ピクチャにおける全てのVCL NALユニットは、同一のNALユニットタイプを有するものとする、すなわち、mixed_nalu_types_in_pic_flagが0に等しいものとする)。これは、全てのサブピクチャが、それらに対応する1に等しいsubpic_treated_as_pic_flag[]を有する場合、mixed_naru_types_in_pic_flagが1にだけなり得ることを意味する。
このように、デコーダを適合させるために出力される全てのピクチャが正確である必要があるという制約によって、このようなピクチャ内のRADLサブピクチャを保証することができる。しかし、関連付けられたCRAピクチャが1に等しいNoOutputBeforeRecoveryFlagを有する場合、このようなピクチャ内の「中間値」RASLサブピクチャの「正確性」の保証も行われるが、実際には必要ではない。保証の不必要な部分は、問題ではなく、適合するエンコーダまたはデコーダを実装するための複雑さを増すこともない。この場合、NoOutputBeforeRecoveryFlagが1であるCRAピクチャに関連付けられたこのようなRASLサブピクチャは、復号処理によって出力されてもよいが、表示に使用することを意図していないので、表示に使用するべきでないことを明確にするために、注意を追加することが有用である。
a. RASLサブピクチャを含むピクチャ
b. 関連付けされたIRAPサブピクチャを含むピクチャに、復号順において先行するピクチャ。
a. nuh_layer_idがlayerIdに等しく、subpicIdxに等しいサブピクチャインデックスを持つRASLサブピクチャを含むピクチャ。
b. 関連付けされたIRAPサブピクチャを含むピクチャに、復号順において先行するピクチャ。
nal_unit_typeは、表5で規定されているように、NALユニットタイプ、すなわちNALユニットに含まれるRBSPデータ構造のタイプを規定する。
UNSPEC_28..UNSPEC_31の範囲内にあり、意味論が規定されていないnal_unit_typeを有するNALユニットは、本明細書で規定される復号処理に影響を及ぼさないものとする。
注2- UNSPEC_28..UNSPEC_31の範囲内にあるNALユニットタイプ、アプリケーションにより決定されたとおりに使用されてもよい。本明細書では、nal_unit_typeのこれらの値の復号処理は規定されていない。異なるアプリケーションはこれらのNALユニットタイプを異なる目的で使用してもよいので、これらのnal_unit_type値を有するNALユニットを生成するエンコーダの設計、およびこれらのnal_unit_type値を有するNALユニットのコンテンツを解釈するデコーダの設計にあたり、特に注意しなければならない。本明細書は、これらの値の管理を定義していない。これらのnal_unit_type値は、使用の「衝突」(すなわち、同じnal_unit_type値に対するNALユニットのコンテンツの意味の異なる定義)が重要でない、または可能でない、または管理された状況、例えば、制御アプリケーションまたはトランスポート仕様において、またはビットストリームが分散される環境を制御することによって定義または管理されるコンテキストでの使用にのみ適している場合がある。
(附属書Cに規定されるように)ビットストリームのDUにおけるデータの数を決定すること以外の目的のために、デコーダは、nal_unit_typeの予約済みの値を使用するすべてのNALユニットのコンテンツを無視する(ビットストリームから取り除き、廃棄する)ものとする。
注3-この要件は、本明細書に適合する拡張を将来的に定義することを可能にする。
注5- IDR_N_LPに等しいnal_unit_typeを有するIDR(Instantaneous Decoding Refresh)ピクチャは、ビットストリームに存在する関連付けられた先頭ピクチャを有さない。IDR_W_RADLに等しいnal_unit_typeを有するIDRピクチャは、ビットストリームに存在する関連付けられたRASLピクチャ有していないが、ビットストリームに関連付けられたRADLピクチャを有していてもよい。
nal_unit_typeの値は、1つのサブピクチャのすべてのVCL NALユニットについて同じものとする。1つのサブピクチャは、このサブピクチャのVCL NALユニットと同じNALユニットタイプを有すると見なされている。
- mixed_nalu_types_in_pic_flagが0に等しい場合、nal_unit_typeの値は、ピクチャの全てのVCL NALユニットについて同一であるものとし、ピクチャまたはPUは、このピクチャまたはPUのNALユニットと同一のNALユニットタイプを有するとみなされる。
- そうでない場合(mixed_nalu_types_in_pic_flagが1に等しい)、このピクチャは、少なくとも2つのサブピクチャを有し、このピクチャのVCL NALユニットは、以下のような正確に2つの異なるnal_unit_type値を有するものとする。このピクチャの少なくとも1つのサブピクチャのVCL NALユニットは、全てSTSA_NUT、RADL_NUT、RASL_NUT、IDR_W_RADL、IDR_N_LP、またはCRA_NUTに等しい特定のnal_unit_typeを有する一方、ピクチャ内の他のサブピクチャのVCL NALユニットは、全て、異なる特定値としてTRAIL_NUT、RADL_NUT、またはRASL_NUTに等しいnal_unit_typeを有するものとする。
1に等しいmixed_nalu_types_nalu_pic_flagは、PPSを参照する各ピクチャが2つ以上のVCL NALユニットを有し、VCL NALユニットがnal_unit_typeの同じ値を有さない[[ピクチャがIRAPピクチャでない]]ことを規定する。0に等しいmixed_nalu_types_in_pic_flagは、PPSを参照する各ピクチャが1つ以上のVCL NALユニットを有し、PPSを参照する各ピクチャのVCL NALがnal__unit_typeの同じ値を有することを規定する。
no_mixed_nalu_types_in_pic_constraint_flagが1に等しい場合は、mixed_nalu_types_in_pic_flagの値は0に等しいものとする。
- このスライスは、対応するsubpic_treated_as_pic_flag[i]の値が1に等しいサブピクチャsubpicAに属するものとする。
- このスライスは、nal_unit_typeがnalUnitTypeAに等しくないVCL NALユニットを含むpicAのサブピクチャに属さないものとする。
- nalUnitTypeAがCRAに等しい場合、復号順序および出力順序でCLVSにおける現在のピクチャに後続するすべてのPUのために、それらのPUにおけるsubpicAにおけるスライスのRefPicList[0]およびRefPicList[1]は、アクティブエントリにおける復号順でpicAに先行するいずれのピクチャも含まないものとする。
- そうでない場合(すなわち、nalUnitTypeAがIDR_W_RADLまたはIDR_N_LPである)、復号順において現在のピクチャに続くCLVSにおけるすべてのPUについて、これらのPUにおけるsubpicAにおけるスライスのRefPicList[0]とRefPicList[1]のいずれも、アクティブエントリにおいて復号順でpicAに先行する任意のピクチャを含まないものとする。]]
...
ビットストリーム適合性の要件は、以下の制約が適用されることである。
- RefPicList[0]またはRefPicList[1]の各アクティブエントリによって参照されるピクチャは、DPBに含まれ、かつ現在のピクチャのTemporalId以下とする。
- RefPicList[0]またはRefPicList[1]の各エントリによって参照されるピクチャは、現在のピクチャではなく、0に等しいnon_reference_picture_flagを有するものとする。
- ピクチャのスライスのRefPicList[0]またはRefPicList[1]におけるSTRPエントリと、同じピクチャの同じスライスまたは異なるスライスのRefPicList[0]またはRefPicList[1]におけるLTRPエントリとは、同じピクチャを参照しないものとする。
- 現在のピクチャのPicOrderCntValとエントリにより参照されるピクチャのPicOrderCntValとの差分が224以上であるRefPicList[0]またはRefPicList[1]において、LTRPエントリはないものとする。
- setOfRefPicsは、RefPicList[0]において現在のピクチャと同じnuh_layer_idを有する全てのエントリと、RefPicList[1]において現在のピクチャと同じnuh_layer_idを有する全てのエントリとにより参照される固有のピクチャのセットである。setOfRefPicsにおけるピクチャの数は、MaxDpbSize-1以下であるものとする。ここで、MaxDpbSizeは、A.4.2項に規定されるとおりであり、setOfRefPicsは、ピクチャの全てのスライスで同一である。
- 現在のスライスがSTSA_NUTに等しいnal_unit_typeを有する場合、現在のピクチャのものとTemporalIdが等しく、かつnuh_layer_idが現在のピクチャのものと等しいRefPicList[0]またはRefPicList[1]においてアクティブエントリが存在しないものとする。
- 現在のピクチャが、復号順において、現在のピクチャのものとTemporalIdが等しく、かつ現在のピクチャのものとnuh_layer_idが等しいSTSAピクチャの後に続くピクチャである場合、復号順において、STSAピクチャに先行し、現在のピクチャのものとTemporalIdが等しく、かつ現在のピクチャのものとnuh_layer_idが等しいピクチャは、RefPicList[0]またはRefPicList[1]にアクティブエントリとして含まれるピクチャはないものとする。
o RASLピクチャ
o 関連付けられたIRAPピクチャに復号順において先行するピクチャ
- 現在のピクチャのスライスのRefPicList[0]またはRefPicList[1]における各ILRPエントリにより参照されるピクチャは、DPBに存在し、かつ現在のピクチャのものよりも小さいnuh_layer_idを有するものとする。
- スライスのRefPicList[0]またはRefPicList[1]における各ILRPエントリは、アクティブエントリであるものとする。
Claims (14)
- 映像処理方法であって、
1つ以上のサブピクチャを含む1つ以上のピクチャを含む映像と前記映像のビットストリームとの間の変換を行うことを含み、
前記ビットストリームは、サブピクチャがイントラランダムアクセスポイントサブピクチャの先頭サブピクチャでない場合、ランダムアクセス復号可能な先頭サブピクチャまたはランダムアクセススキップ先頭サブピクチャになり得ないことを規定するフォーマット規則に準拠し、
前記先頭サブピクチャは、出力順で前記イントラランダムアクセスポイントサブピクチャに先行し、
前記フォーマット規則は、前記ビットストリームにおいてピクチャが示される順序を規定し、
前記フォーマット規則は、現在のスライスの参照ピクチャリストのエントリが、第1の順序又は第2の順序に従って第2のピクチャに先行する第1のピクチャを含むことを禁止し、
前記第2のピクチャは、0以上の関連する先頭サブピクチャを有し、現在のサブピクチャと同じネットワーク抽象化レイヤ(NAL)ユニットのレイヤ識別子及び同じサブピクチャインデックスを有する、イントラランダムアクセスポイントサブピクチャを含み、
前記現在のサブピクチャは、前記イントラランダムアクセスポイントサブピクチャ及び前記0以上の関連する先頭サブピクチャに前記第1の順序及び前記第2の順序で後続し、
前記第1の順序は、復号順であり、
前記第2の順序は、出力順であり、
前記参照ピクチャリストは、List0参照ピクチャリスト又はList1参照ピクチャリストを含む、
方法。 - 前記イントラランダムアクセスポイントサブピクチャは、全ての映像コーディングレイヤ(VCL)ネットワーク抽象化レイヤ(NAL)ユニットがIDR_W_RADLからCRA_NUTまでの範囲内の同じ値のNALユニットタイプを有するサブピクチャであり、
前記ランダムアクセス復号可能な先頭サブピクチャが、各VCL NALユニットがRADL_NUTに等しいNALユニットタイプを有するサブピクチャであり、
前記ランダムアクセススキップ先頭サブピクチャは、各映像コーディングレイヤ(VCL)ネットワーク抽象化レイヤ(NAL)がRASL_NUTに等しいNALユニットタイプを有するサブピクチャである、
請求項1に記載の方法。 - 前記フォーマット規則は、更に、第1のサブピクチャ及び第2のサブピクチャが同じネットワーク抽象化レイヤ(NAL)ユニットのレイヤ識別子及び同じサブピクチャインデックスを有すること、及び、前記第1のサブピクチャが前記第2のサブピクチャに復号順で先行することに応答して、リカバリポイントピクチャにおいて前記第1のサブピクチャが前記第2のサブピクチャに出力順で先行することを規定する、
請求項1に記載の方法。 - 前記現在のサブピクチャがクリーンランダムアクセスサブピクチャである場合、前記フォーマット規則は、前記現在のスライスの前記参照ピクチャリストのエントリが、前記現在のピクチャに第4の順序に従って先行する第4のピクチャに第3の順序に従って先行する第3のピクチャを含むことを禁止し、
前記第4のピクチャが、前記現在のサブピクチャと同じネットワーク抽象化レイヤ(NAL)ユニットのレイヤ識別子及び同じサブピクチャインデックスを有するイントラランダムアクセスポイントサブピクチャを含み、
前記クリーンランダムアクセスサブピクチャは、各VCL NALユニットがCRA_NUTに等しいnal_unit_typeを有するイントラランダムアクセスポイントサブピクチャである、
請求項1~3のいずれか1項に記載の方法。 - 前記第3の順序は、前記復号順又は前記出力順を含み、
前記第4の順序が、前記復号順を含み、
前記参照ピクチャリストは、前記List0参照ピクチャリスト又は前記List1参照ピクチャリストを含む、
請求項4に記載の方法。 - 前記フォーマット規則は、前記現在のスライスの前記参照ピクチャリストのアクティブエントリが、第5の順序に従って第6のピクチャに先行する第5のピクチャを含むことを禁止し、
前記第6のピクチャは、現在のサブピクチャと同じネットワーク抽象化レイヤ(NAL)ユニットのレイヤ識別子及び同じサブピクチャインデックスを有するイントラランダムアクセスポイントサブピクチャを含み、
前記現在のサブピクチャは、前記イントラランダムアクセスポイントサブピクチャに第6の順序で後続する、
請求項1に記載の方法。 - 前記第5の順序は、前記復号順又は前記出力順を含み、
前記第6の順序は、前記復号順及び前記出力順を含み、
前記アクティブエントリは、前記現在のスライスのインター予測の参照インデックスとして使用可能なエントリに対応し、
前記参照ピクチャリストは、前記List0参照ピクチャリスト又は前記List1参照ピクチャリストを含む、
請求項6に記載の方法。 - 前記フォーマット規則は、更に、
前記現在のサブピクチャがランダムアクセス復号可能な先頭サブピクチャであることに応答して、前記現在のスライスの前記参照ピクチャリストのアクティブエントリが、現在のサブピクチャのものと同じサブピクチャインデックスを有するランダムアクセススキップ先頭サブピクチャを含む第7のピクチャと、前記ランダムアクセス復号可能な先頭サブピクチャに関連するイントラランダムアクセスポイントサブピクチャを含む第9のピクチャに復号順で先行する第8のピクチャと、のいずれか1つ以上を含むことを禁止することを規定する、
請求項1に記載の方法。 - 前記アクティブエントリは、前記現在のスライスのインター予測の参照インデックスとして使用可能なエントリに対応し、
前記参照ピクチャリストは、前記List0参照ピクチャリスト又は前記List1参照ピクチャリストを含む、
請求項8に記載の方法。 - 前記変換を行うことは、前記映像を前記ビットストリームに符号化することを含む、
請求項1~9のいずれか1項に記載の方法。 - 前記変換を行うことは、前記ビットストリームから前記映像を復号することを含む、
請求項1~9のいずれか1項に記載の方法。 - 処理装置と、命令を有する非一時的メモリと、を含む映像データを処理する装置であって、
前記命令は、前記処理装置による実行時に、前記処理装置に、
1つ以上のサブピクチャを含む1つ以上のピクチャを含む映像と前記映像のビットストリームとの間の変換を行わせ、
前記ビットストリームは、サブピクチャがイントラランダムアクセスポイントサブピクチャの先頭サブピクチャでない場合、ランダムアクセス復号可能な先頭サブピクチャまたはランダムアクセススキップサブピクチャになり得ないことを規定するフォーマット規則に準拠し、
前記先頭サブピクチャは、出力順で前記イントラランダムアクセスポイントサブピクチャに先行し、
前記フォーマット規則は、前記ビットストリームにおいてピクチャが示される順序を規定し、
前記フォーマット規則は、現在のスライスの参照ピクチャリストのエントリが、第1の順序又は第2の順序に従って第2のピクチャに先行する第1のピクチャを含むことを禁止し、
前記第2のピクチャは、0以上の関連する先頭サブピクチャを有し、現在のサブピクチャと同じネットワーク抽象化レイヤ(NAL)ユニットのレイヤ識別子及び同じサブピクチャインデックスを有する、イントラランダムアクセスポイントサブピクチャを含み、
前記現在のサブピクチャは、前記イントラランダムアクセスポイントサブピクチャ及び前記0以上の関連する先頭サブピクチャに前記第1の順序及び前記第2の順序で後続し、
前記第1の順序は、復号順であり、
前記第2の順序は、出力順であり、
前記参照ピクチャリストは、List0参照ピクチャリスト又はList1参照ピクチャリストを含む、
装置。 - 命令を記憶する非一時的なコンピュータ可読記憶媒体であって、
前記命令は、処理装置に、
1つ以上のサブピクチャを含む1つ以上のピクチャを含む映像と前記映像のビットストリームとの間の変換を行わせ、
前記ビットストリームは、サブピクチャがイントラランダムアクセスポイントサブピクチャの先頭サブピクチャでない場合、ランダムアクセス復号可能な先頭サブピクチャまたはランダムアクセススキップサブピクチャになり得ないことを規定するフォーマット規則に準拠し、
前記先頭サブピクチャは、出力順で前記イントラランダムアクセスポイントサブピクチャに先行し、
前記フォーマット規則は、前記ビットストリームにおいてピクチャが示される順序を規定し、
前記フォーマット規則は、現在のスライスの参照ピクチャリストのエントリが、第1の順序又は第2の順序に従って第2のピクチャに先行する第1のピクチャを含むことを禁止し、
前記第2のピクチャは、0以上の関連する先頭サブピクチャを有し、現在のサブピクチャと同じネットワーク抽象化レイヤ(NAL)ユニットのレイヤ識別子及び同じサブピクチャインデックスを有する、イントラランダムアクセスポイントサブピクチャを含み、
前記現在のサブピクチャは、前記イントラランダムアクセスポイントサブピクチャ及び前記0以上の関連する先頭サブピクチャに前記第1の順序及び前記第2の順序で後続し、
前記第1の順序は、復号順であり、
前記第2の順序は、出力順であり、
前記参照ピクチャリストは、List0参照ピクチャリスト又はList1参照ピクチャリストを含む、
非一時的なコンピュータ可読記憶媒体。 - 映像のビットストリームを格納するための方法であって、
1つ以上のサブピクチャを含む1つ以上のピクチャを含む前記映像の前記ビットストリームを生成することと、
前記ビットストリームを非一時的コンピュータ可読記録媒体に格納することと、
を含み、
前記ビットストリームは、サブピクチャがイントラランダムアクセスポイントサブピクチャの先頭サブピクチャでない場合、ランダムアクセス復号可能な先頭サブピクチャまたはランダムアクセススキップサブピクチャになり得ないことを規定するフォーマット規則に準拠し、
前記先頭サブピクチャは、出力順で前記イントラランダムアクセスポイントサブピクチャに先行し、
前記フォーマット規則は、前記ビットストリームにおいてピクチャが示される順序を規定し、
前記フォーマット規則は、現在のスライスの参照ピクチャリストのエントリが、第1の順序又は第2の順序に従って第2のピクチャに先行する第1のピクチャを含むことを禁止し、
前記第2のピクチャは、0以上の関連する先頭サブピクチャを有し、現在のサブピクチャと同じネットワーク抽象化レイヤ(NAL)ユニットのレイヤ識別子及び同じサブピクチャインデックスを有する、イントラランダムアクセスポイントサブピクチャを含み、
前記現在のサブピクチャは、前記イントラランダムアクセスポイントサブピクチャ及び前記0以上の関連する先頭サブピクチャに前記第1の順序及び前記第2の順序で後続し、
前記第1の順序は、復号順であり、
前記第2の順序は、出力順であり、
前記参照ピクチャリストは、List0参照ピクチャリスト又はList1参照ピクチャリストを含む、
方法。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US202063012713P | 2020-04-20 | 2020-04-20 | |
| US63/012,713 | 2020-04-20 | ||
| PCT/US2021/027963 WO2021216448A1 (en) | 2020-04-20 | 2021-04-19 | Constraints on reference picture lists |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023522224A JP2023522224A (ja) | 2023-05-29 |
| JP7529795B2 true JP7529795B2 (ja) | 2024-08-06 |
Family
ID=78269884
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022563090A Active JP7529795B2 (ja) | 2020-04-20 | 2021-04-19 | 参照ピクチャリスト上の制約 |
Country Status (6)
| Country | Link |
|---|---|
| US (2) | US11889060B2 (ja) |
| EP (1) | EP4122195A4 (ja) |
| JP (1) | JP7529795B2 (ja) |
| KR (1) | KR20230002395A (ja) |
| CN (2) | CN115462070B (ja) |
| WO (1) | WO2021216448A1 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN120956932A (zh) * | 2019-12-23 | 2025-11-14 | Lg电子株式会社 | 图像信息编码/解码设备和用于比特流的设备 |
Family Cites Families (46)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| ES2347385T3 (es) | 2004-04-28 | 2010-10-28 | Panasonic Corporation | Aparato de generacion de flujo de imagenes en movimiento, aparato de codificacion de imagenes en movimiento, aparato de multiplexado de imagenes en movimiento y aparato de descodificacion de imagenes en movimiento. |
| US8665968B2 (en) | 2009-09-30 | 2014-03-04 | Broadcom Corporation | Method and system for 3D video coding using SVC spatial scalability |
| US10003817B2 (en) * | 2011-11-07 | 2018-06-19 | Microsoft Technology Licensing, Llc | Signaling of state information for a decoded picture buffer and reference picture lists |
| US9503702B2 (en) | 2012-04-13 | 2016-11-22 | Qualcomm Incorporated | View synthesis mode for three-dimensional video coding |
| US9979958B2 (en) * | 2012-04-20 | 2018-05-22 | Qualcomm Incorporated | Decoded picture buffer processing for random access point pictures in video sequences |
| US9736476B2 (en) | 2012-04-27 | 2017-08-15 | Qualcomm Incorporated | Full random access from clean random access pictures in video coding |
| US20140003504A1 (en) * | 2012-07-02 | 2014-01-02 | Nokia Corporation | Apparatus, a Method and a Computer Program for Video Coding and Decoding |
| US9491457B2 (en) | 2012-09-28 | 2016-11-08 | Qualcomm Incorporated | Signaling of regions of interest and gradual decoding refresh in video coding |
| US20140092953A1 (en) | 2012-10-02 | 2014-04-03 | Sharp Laboratories Of America, Inc. | Method for signaling a step-wise temporal sub-layer access sample |
| EP2907318A1 (en) | 2012-10-09 | 2015-08-19 | Cisco Technology, Inc. | Output management of prior decoded pictures at picture format transitions in bitstreams |
| US9325997B2 (en) | 2012-11-16 | 2016-04-26 | Huawei Technologies Co., Ltd | Signaling scalability information in a parameter set |
| KR102338919B1 (ko) | 2012-11-21 | 2021-12-13 | 엘지전자 주식회사 | 영상 디코딩 방법 및 이를 이용하는 장치 |
| US9398293B2 (en) * | 2013-01-07 | 2016-07-19 | Qualcomm Incorporated | Gradual decoding refresh with temporal scalability support in video coding |
| US20140218473A1 (en) | 2013-01-07 | 2014-08-07 | Nokia Corporation | Method and apparatus for video coding and decoding |
| US9521393B2 (en) | 2013-01-07 | 2016-12-13 | Qualcomm Incorporated | Non-nested SEI messages in video coding |
| US9992493B2 (en) * | 2013-04-01 | 2018-06-05 | Qualcomm Incorporated | Inter-layer reference picture restriction for high level syntax-only scalable video coding |
| US9674533B2 (en) | 2013-04-05 | 2017-06-06 | Qualcomm Incorporated | Picture alignments in multi-layer video coding |
| KR20150009467A (ko) | 2013-07-15 | 2015-01-26 | 주식회사 케이티 | 스케일러블 비디오 신호 인코딩/디코딩 방법 및 장치 |
| US9525883B2 (en) * | 2013-07-15 | 2016-12-20 | Qualcomm Incorporated | Cross-layer alignment of intra random access point pictures |
| US9860529B2 (en) | 2013-07-16 | 2018-01-02 | Qualcomm Incorporated | Processing illumination compensation for video coding |
| US10070125B2 (en) * | 2013-07-31 | 2018-09-04 | Nokia Technologies Oy | Method and apparatus for video coding and decoding |
| WO2015101716A1 (en) * | 2014-01-03 | 2015-07-09 | Nokia Technologies Oy | Parameter set coding |
| US9794558B2 (en) * | 2014-01-08 | 2017-10-17 | Qualcomm Incorporated | Support of non-HEVC base layer in HEVC multi-layer extensions |
| WO2015125494A1 (en) | 2014-02-21 | 2015-08-27 | Sharp Kabushiki Kaisha | System for temporal identifier handling for hybrid scalability |
| US20150264404A1 (en) * | 2014-03-17 | 2015-09-17 | Nokia Technologies Oy | Method and apparatus for video coding and decoding |
| CN106464893B (zh) | 2014-03-17 | 2019-12-03 | 诺基亚技术有限公司 | 用于视频编码和解码的装置、方法和计算机程序 |
| WO2015192991A1 (en) * | 2014-06-18 | 2015-12-23 | Telefonaktiebolaget L M Ericsson (Publ) | Random access in a video bitstream |
| MX379020B (es) | 2014-09-30 | 2025-03-11 | Microsoft Technology Licensing Llc | Reglas para modos de prediccion intra-imagen cuando se habilita el procesamiento paralelo de onda frontal. |
| US9800898B2 (en) | 2014-10-06 | 2017-10-24 | Microsoft Technology Licensing, Llc | Syntax structures indicating completion of coded regions |
| US10284867B2 (en) * | 2014-12-18 | 2019-05-07 | Nokia Technologies Oy | Apparatus, a method and a computer program for video coding and decoding |
| US20170105004A1 (en) | 2015-10-07 | 2017-04-13 | Qualcomm Incorporated | Methods and systems of coding a predictive random access picture using a background picture |
| CN113273202A (zh) * | 2019-01-04 | 2021-08-17 | 华为技术有限公司 | 基于子图像的随机接入 |
| WO2020185923A1 (en) | 2019-03-11 | 2020-09-17 | Futurewei Technologies, Inc. | Mixed nal unit type picture constraints |
| CN117692630A (zh) * | 2019-05-11 | 2024-03-12 | 北京字节跳动网络技术有限公司 | 视频处理中编解码工具的选择性使用 |
| US11166033B2 (en) | 2019-06-06 | 2021-11-02 | Qualcomm Incorporated | Adaptation parameter set in access unit in video coding |
| US11483558B2 (en) | 2019-06-21 | 2022-10-25 | Tencent America LLC | Method for region-wise scalability with adaptive resolution change |
| US20210076074A1 (en) | 2019-09-11 | 2021-03-11 | Qualcomm Incorporated | Maximum and minimum block sizes signaling at high level syntax for video coding and transform units |
| JP7414980B2 (ja) * | 2019-10-13 | 2024-01-16 | 北京字節跳動網絡技術有限公司 | 参照ピクチャリサンプリングと映像コーディングツールとの間の相互作用 |
| US11477487B2 (en) * | 2019-12-10 | 2022-10-18 | Zte (Uk) Limited | Subpicture signaling in video coding |
| US11375232B2 (en) | 2019-12-10 | 2022-06-28 | Zte (Uk) Limited | Sub picture signaling in video coding |
| JP7659561B2 (ja) | 2019-12-20 | 2025-04-09 | フラウンホッファー-ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | ビデオストリームにおいて異なるnalユニットタイプのnalユニットを混合するためのデコーダ、エンコーダおよび方法 |
| US12184836B2 (en) | 2019-12-23 | 2024-12-31 | Lg Electronics Inc. | Image or video coding based on NAL unit-associated information |
| US11399188B2 (en) | 2020-01-01 | 2022-07-26 | Tencent America LLC | Method for mixed NAL unit type support in a coded picture |
| WO2021136553A1 (en) * | 2020-01-05 | 2021-07-08 | Beijing Bytedance Network Technology Co., Ltd. | Using adaptive color transform in video coding |
| KR102928668B1 (ko) * | 2020-03-05 | 2026-02-20 | 노키아 테크놀로지스 오와이 | 혼성 nal 유닛 타입에 기반하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법 |
| KR102772670B1 (ko) * | 2020-03-21 | 2025-02-24 | 두인 비전 컴퍼니 리미티드 | 서브 픽처 및 스케일러빌러티 조합 |
-
2021
- 2021-04-19 JP JP2022563090A patent/JP7529795B2/ja active Active
- 2021-04-19 KR KR1020227035276A patent/KR20230002395A/ko active Pending
- 2021-04-19 WO PCT/US2021/027963 patent/WO2021216448A1/en not_active Ceased
- 2021-04-19 EP EP21791788.9A patent/EP4122195A4/en active Pending
- 2021-04-19 CN CN202180029943.5A patent/CN115462070B/zh active Active
- 2021-04-19 CN CN202510549090.8A patent/CN120186354A/zh active Pending
-
2022
- 2022-10-20 US US17/969,976 patent/US11889060B2/en active Active
-
2023
- 2023-12-04 US US18/528,032 patent/US20240137493A1/en active Pending
Non-Patent Citations (1)
| Title |
|---|
| Ye-Kui et al.,AHG8/AHG9/AHG12: On mixed subpicture types within a picture,Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 18th Meeting: by teleconference, 15-24 April 2020,JVET-R0042-v1,2020年03月25日,pp.1,3-4,6-7,9-10 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN120186354A (zh) | 2025-06-20 |
| BR112022021342A2 (pt) | 2022-12-13 |
| EP4122195A4 (en) | 2023-06-21 |
| KR20230002395A (ko) | 2023-01-05 |
| CN115462070A (zh) | 2022-12-09 |
| JP2023522224A (ja) | 2023-05-29 |
| CN115462070B (zh) | 2025-05-16 |
| EP4122195A1 (en) | 2023-01-25 |
| US20230059682A1 (en) | 2023-02-23 |
| WO2021216448A1 (en) | 2021-10-28 |
| US11889060B2 (en) | 2024-01-30 |
| US20240137493A1 (en) | 2024-04-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7544843B2 (ja) | サブピクチャとスケーラビリティの組み合わせ | |
| JP7488353B2 (ja) | サブピクチャの順序関係 | |
| US12483694B2 (en) | Sublayers information in video coding | |
| JP7529795B2 (ja) | 参照ピクチャリスト上の制約 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221121 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221121 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231226 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240116 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240415 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240625 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240725 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7529795 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |






















