JP6854888B2 - ビデオ符号化方法、コンピュータ装置および記憶媒体 - Google Patents

ビデオ符号化方法、コンピュータ装置および記憶媒体 Download PDF

Info

Publication number
JP6854888B2
JP6854888B2 JP2019523039A JP2019523039A JP6854888B2 JP 6854888 B2 JP6854888 B2 JP 6854888B2 JP 2019523039 A JP2019523039 A JP 2019523039A JP 2019523039 A JP2019523039 A JP 2019523039A JP 6854888 B2 JP6854888 B2 JP 6854888B2
Authority
JP
Japan
Prior art keywords
frame
video frame
mode
current
currently
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019523039A
Other languages
English (en)
Other versions
JP2019537365A (ja
Inventor
マオ,シュナン
ガオ,シンウェイ
グオ,リーツァイ
シ,ヨンファン
ガオ,アンリン
デン,ハイボ
グ,チェンチェン
ルヴ,ジン
Original Assignee
テンセント・テクノロジー・(シェンジェン)・カンパニー・リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by テンセント・テクノロジー・(シェンジェン)・カンパニー・リミテッド filed Critical テンセント・テクノロジー・(シェンジェン)・カンパニー・リミテッド
Publication of JP2019537365A publication Critical patent/JP2019537365A/ja
Application granted granted Critical
Publication of JP6854888B2 publication Critical patent/JP6854888B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

[関連出願への相互参照]
本願は、2017年3月21日にて中国特許庁へ出願した、出願番号が2017101707348で、発明の名称が「ビデオ符号化方法および装置、ビデオ復号方法および装置」である中国特許出願の優先権を主張しており、その内容を全て参照により本願に組み込むものとする。
[技術分野]
本願は、コンピュータの技術分野に関し、特に、ビデオ符号化方法、ビデオ復号方法、コンピュータ装置および記憶媒体に関する。
デジタルメディア技術およびコンピュータ技術の発展に伴い、ビデオは、例えばモバイル通信、ネットワーク監視、ネットワークテレビ等の各分野に適用されていく。ハードウェアの性能および画面の解像度の向上につれ、ユーザの高精細度ビデオに対する要望がますます強まっている。
モバイル帯域幅が限られた条件下で、従来のエンコーダは、ビデオフレームを同一の解像度で符号化しているため、シーンによっては、ビデオ品質が悪いという問題が出てくることがあり、例えば、750kbpsでは、動きの激しいシーンについて、高い解像度で符号化すると主観品質が低く、H.264/H.265/iOS等のエンコーダはいずれも同様な問題があると考えられる。
本願に提供される様々な実施例によれば、ビデオ符号化方法、ビデオ復号方法、コンピュータ装置および記憶媒体を提供する。
ビデオ符号化方法であって、
コンピュータ装置が、符号化対象となるビデオフレームを取得し、前記符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、フル解像度モードとダウンサンプリングモードとを含むオプションの符号化モードから現在符号化モードを確定することと、
前記コンピュータ装置が、前記符号化対象となるビデオフレームを現在符号化モードに応じて処理して、現在符号化ビデオフレームを得て、前記現在符号化モードがダウンサンプリングモードである場合に、前記符号化対象となるビデオフレームをダウンサンプリングして、現在符号化ビデオフレームを得て、前記現在符号化モードがフル解像度モードである場合に、前記符号化対象となるビデオフレームを現在符号化ビデオフレームとして確定することと、
前記現在符号化ビデオフレームがインター符号化フレームである場合に、前記コンピュータ装置は、前記現在符号化ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、対応する処理参照フレームを得て、具体的には、前記コンピュータ装置は、前記現在参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、前記現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得ることと、
前記コンピュータ装置が、前記処理参照フレームに基づいて前記現在符号化ビデオフレームを符号化して、現在符号化モード情報が付加された第1の符号化データを得ることと、を含む。
コンピュータ装置であって、メモリおよびプロセッサを備え、前記メモリにコンピュータ読み取り可能な命令が記憶されており、前記コンピュータ読み取り可能な命令は、前記プロセッサによって実行されると、前記プロセッサに、
符号化対象となるビデオフレームを取得し、前記符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、フル解像度モードとダウンサンプリングモードとを含むオプションの符号化モードから現在符号化モードを確定するステップと、
前記符号化対象となるビデオフレームを現在符号化モードに応じて処理して、現在符号化ビデオフレームを得て、前記現在符号化モードがダウンサンプリングモードである場合に、前記符号化対象となるビデオフレームをダウンサンプリングして、現在符号化ビデオフレームを得て、前記現在符号化モードがフル解像度モードである場合に、前記符号化対象となるビデオフレームを現在符号化ビデオフレームとして確定するステップと、
前記現在符号化ビデオフレームがインター符号化フレームである場合に、前記現在符号化ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、対応する処理参照フレームを得て、具体的には、前記現在参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、前記現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得るステップと、
前記処理参照フレームに基づいて前記現在符号化ビデオフレームを符号化して、現在符号化モード情報が付加された第1の符号化データを得るステップと、を実行させる。
コンピュータ読み取り可能な命令が記憶された1つ又は複数の不揮発性記憶媒体であって、前記コンピュータ読み取り可能な命令は、1つ又は複数のプロセッサによって実行されると、1つ又は複数のプロセッサに、
符号化対象となるビデオフレームを取得し、前記符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、フル解像度モードとダウンサンプリングモードとを含むオプションの符号化モードから現在符号化モードを確定するステップと、
前記符号化対象となるビデオフレームを現在符号化モードに応じて処理して、現在符号化ビデオフレームを得て、前記現在符号化モードがダウンサンプリングモードである場合に、前記符号化対象となるビデオフレームをダウンサンプリングして、現在符号化ビデオフレームを得て、前記現在符号化モードがフル解像度モードである場合に、前記符号化対象となるビデオフレームを現在符号化ビデオフレームとして確定するステップと、
前記現在符号化ビデオフレームがインター符号化フレームである場合に、前記現在符号化ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、対応する処理参照フレームを得て、具体的には、前記現在参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、前記現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得るステップと、
前記処理参照フレームに基づいて前記現在符号化ビデオフレームを符号化して、現在符号化モード情報が付加された第1の符号化データを得るステップと、を実行させる。
ビデオ復号方法であって、
コンピュータ装置が、符号化データを取得し、前記符号化データに対応する各符号化ビデオフレームに現在符号化モード情報が付加されていることと、
前記コンピュータ装置が、前記現在符号化モード情報に基づいて、現在復号ビデオフレームに対応する現在復号モードを確定することと、
前記現在復号ビデオフレームがインター符号化フレームである場合に、前記コンピュータ装置は、前記現在復号ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在復号ビデオフレームの解像度の高低に基づいて処理参照フレームを得て、具体的には、前記コンピュータ装置は、前記現在参照フレームの解像度が現在復号ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、前記現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得ることと、
前記コンピュータ装置が、前記処理参照フレームに基づいて現在復号ビデオフレームを復号して、再構築ビデオフレームを得ることと、
前記コンピュータ装置が、前記再構築ビデオフレームを前記現在復号モードに従って処理して復号ビデオフレームを得て、前記現在復号モードがダウンサンプリングモードである場合に、前記再構築ビデオフレームをアップサンプリングして復号ビデオフレームを得て、前記現在符号化モード情報がフルサンプリングモードである場合に、前記再構築ビデオフレームを復号ビデオフレームとして確定することと、を含む。
コンピュータ装置であって、メモリおよびプロセッサを備え、前記メモリにコンピュータ読み取り可能な命令が記憶されており、前記コンピュータ読み取り可能な命令は、前記プロセッサによって実行されると、前記プロセッサに、
符号化データを取得し、前記符号化データに対応する各符号化ビデオフレームに現在符号化モード情報が付加されているステップと、
前記現在符号化モード情報に基づいて、現在復号ビデオフレームに対応する現在復号モードを確定するステップと、
前記現在復号ビデオフレームがインター符号化フレームである場合に、前記現在復号ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在復号ビデオフレームの解像度の高低に基づいて処理参照フレームを得て、具体的には、前記現在参照フレームの解像度が現在復号ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、前記現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得るステップと、
前記処理参照フレームに基づいて現在復号ビデオフレームを復号して、再構築ビデオフレームを得るステップと、
前記再構築ビデオフレームを前記現在復号モードに従って処理して復号ビデオフレームを得て、前記現在復号モードがダウンサンプリングモードである場合に、前記再構築ビデオフレームをアップサンプリングして復号ビデオフレームを得て、前記現在符号化モード情報がフルサンプリングモードである場合に、前記再構築ビデオフレームを復号ビデオフレームとして確定するステップと、を実行させる。
コンピュータ読み取り可能な命令が記憶された1つ又は複数の不揮発性記憶媒体であって、前記コンピュータ読み取り可能な命令は、1つ又は複数のプロセッサによって実行されると、1つ又は複数のプロセッサに、
符号化データを取得し、前記符号化データに対応する各符号化ビデオフレームに現在符号化モード情報が付加されているステップと、
前記現在符号化モード情報に基づいて、現在復号ビデオフレームに対応する現在復号モードを確定するステップと、
前記現在復号ビデオフレームがインター符号化フレームである場合に、前記現在復号ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在復号ビデオフレームの解像度の高低に基づいて処理参照フレームを得て、具体的には、前記現在参照フレームの解像度が現在復号ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、前記現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得るステップと、
前記処理参照フレームに基づいて現在復号ビデオフレームを復号して、再構築ビデオフレームを得るステップと、
前記再構築ビデオフレームを前記現在復号モードに従って処理して復号ビデオフレームを得て、前記現在復号モードがダウンサンプリングモードである場合に、前記再構築ビデオフレームをアップサンプリングして復号ビデオフレームを得て、前記現在符号化モード情報がフルサンプリングモードである場合に、前記再構築ビデオフレームを復号ビデオフレームとして確定するステップと、を実行させる。
本願の1つ又は複数の実施例の詳細について、以下の図面および説明において紹介する。本願の他の特徴、目的および利点は、明細書、図面および特許請求の範囲から明らかとなる。
本願の実施例における技術的構成をより明確に説明するために、以下、実施例の説明に必要な図面を簡単に説明するが、以下で説明される図面は本願の実施例の一部に過ぎないことは、言うまでもないことである。当業者にとって、創造的な労働を要せずに、これらの図面に基づいて他の図面を得ることもできる。
一実施例におけるビデオ符号化方法およびビデオ復号方法の適用環境図である。 一実施例における図1の端末の内部構造図である。 一実施例における図1のサーバの内部構造図である。 一実施例におけるビデオ符号化方法のフローチャートである。 一実施例における量子化パラメータに基づいて現在符号化モードを確定するフローチャートである。 一実施例における符号化率に基づいて現在符号化モードを確定するフローチャートである。 一実施例における画像特徴情報に基づいて現在符号化モードを確定するフローチャートである。 他の実施例における現在符号化モードを確定するフローチャートである。 更なる実施例における現在符号化モードを確定するフローチャートである。 一実施例におけるビデオ復号方法のフローチャートである。 一実施例における符号化・復号仕組み模式図である。 一実施例におけるダウンサンプリングモードでの符号化フロー模式図である。 一実施例におけるビデオ符号化装置の構造ブロック図である。 一実施例における符号化モード確定モジュールの構造ブロック図である。 他の実施例におけるビデオ符号化装置の構造ブロック図である。 一実施例における符号化処理参照フレーム確定モジュールの構造ブロック図である。 一実施例におけるビデオ復号装置の構造ブロック図である。
図1は、一実施例におけるビデオ符号化方法、ビデオ復号方法が実行される適用環境図である。図1に示すように、該適用環境は、端末110およびサーバ120を含み、端末110、サーバ120は、ネットワークを介して通信する。
端末110は、スマートフォン、タブレット型コンピュータ、ノート型コンピュータ、デスクトップ型コンピュータ等とすることができるが、これらに限定されない。ビデオ符号化方法、ビデオ復号方法は、端末110又はサーバ120にて完成されることができ、端末110は、符号化対象となるビデオフレームをビデオ符号化方法を用いて適応解像度符号化した後サーバ120に送信することができれば、サーバ120から適応解像度の符号化データを受信し、ビデオ復号方法を用いて復号した後復号ビデオフレームを生成することもできる。サーバ120は、コードストリームを記憶する際にトランスコードすることができ、この場合、ビデオ符号化方法はサーバにて完成され、一方、サーバ120によるコードストリームの復号が必要であれば、ビデオ復号方法はサーバにて完成される。
図2は、一実施例におけるコンピュータ装置の内部構造図を示している。該コンピュータ装置は、具体的には、図1における端末110であることができ、該端末110は、システムバスを介して接続されるプロセッサ、メモリ、ネットワークインターフェース、表示画面および入力装置を備える。メモリは、不揮発性記憶媒体および内部ストレージを含む。該コンピュータ装置の不揮発性記憶媒体は、オペレーティングシステムおよびコンピュータ読み取り可能な命令を記憶することができる。該コンピュータ読み取り可能な命令は、実行されると、プロセッサにビデオ符号化方法又はビデオ復号方法を実行させることができる。該内部ストレージにもコンピュータ読み取り可能な命令が記憶されてもよく、該コンピュータ読み取り可能な命令は、プロセッサによって実行されると、プロセッサにビデオ符号化方法又はビデオ復号方法を実行させることができる。該プロセッサは、端末110全体の動作をサポートするための計算および制御能力を提供する。ネットワークインターフェースは、サーバ120とネットワーク通信を行う。表示画面は、アプリケーションインターフェース等を表示し、液晶ディスプレイ又は電子インクディスプレイであることができ、入力装置は、ユーザから入力されたコマンド又はデータ等を受信し、表示画面上に覆われたタッチ層であってもよいし、端末のケースに設けられたキー、トラックボール又はタッチパッドであってもよく、さらに、外付けのキーボード、タッチパッド又はマウス等であってもよい。タッチパネルが付いた端末110は、表示画面および入力装置をタッチパネルとすることができる。図2に示される構造は、本願の構成に関する一部の構造のブロック図に過ぎず、本願の構成が適用される端末を限定するものではなく、具体的な端末は、図示よりも多い又は少ない部品を含むか、或いは、一部の部品を組み合わせるか、或いは、異なる部品配置を有することができる。
図3は、一実施例におけるコンピュータ装置の内部構造図を示している。該コンピュータ装置は、具体的には、図1におけるサーバ120であることができ、該サーバ120は、システムバスを介して接続されるプロセッサ、メモリおよびネットワークインターフェースを備える。メモリは、不揮発性記憶媒体および内部ストレージを含む。該コンピュータ装置の不揮発性記憶媒体は、オペレーティングシステムおよびコンピュータ読み取り可能な命令を記憶することができる。該コンピュータ読み取り可能な命令は、実行されると、プロセッサにビデオ符号化方法又はビデオ復号方法を実行させることができる。該内部ストレージにもコンピュータ読み取り可能な命令が記憶されてもよく、該コンピュータ読み取り可能な命令は、プロセッサによって実行されると、プロセッサにビデオ符号化方法又はビデオ復号方法を実行させることができる。該サーバ120のプロセッサは、サーバ120全体の動作をサポートするための計算および制御能力を提供する。該サーバ120のネットワークインターフェースは、外部の端末110とネットワークを介して接続され通信する。図2および図3に示される構造は、本願の構成に関する一部の構造のブロック図に過ぎず、本願の構成が適用される端末を限定するものではなく、具体的な端末又はサーバは、図示よりも多い又は少ない部品を含むか、或いは、一部の部品を組み合わせるか、或いは、異なる部品配置を有することができる。
一実施例において、図4に示すように、ビデオ符号化方法を提供し、上記適用環境における端末又はサーバに適用されることを例として説明し、以下のステップS210〜ステップS250を含む。
ステップS210:符号化対象となるビデオフレームを取得し、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、オプションの符号化モードから現在符号化モードを確定し、オプションの符号化モードはフル解像度モードとダウンサンプリングモードとを含む。
具体的には、符号化対象となるビデオフレームは、即時通信のためにリアルタイムに収集されたビデオフレームであってもよいし、記憶されたビデオに対応するビデオフレームであってもよい。ビデオの現在符号化情報とは、ビデオの符号化時に得られたビデオ圧縮パラメータ情報であり、例えば、フレーム予測タイプ、動きベクトル、量子化パラメータ、映像のソース、符号化率、フレームレートおよび解像度のうちの1種又は複数種である。フレーム予測タイプは、Iフレームなどのイントラ予測、Pフレームなどの前方向インター予測、Bフレームなどの双方向インター予測を含む。画像特徴情報とは、画像コンテンツに関する情報であり、画像動き情報および画像テクスチャ情報のうちの1種又は複数種などを含み、例えば、エッジ等を含む。現在符号化情報及び/又は画像特徴情報に基づいて、符号化対象となるビデオフレームに対応する現在符号化モードを確定し、フルサンプリングモード又はダウンサンプリングモードであることができる。ダウンサンプリングモードとは、符号化対象となるビデオフレームをダウンサンプリングしてから符号化することを意味し、ダウンサンプリングのアルゴリズムは必要に応じてカスタマイズしてもよく、垂直ダウンサンプリング、水平ダウンサンプリング、垂直・水平ダウンサンプリングを含み、直接平均、フィルタ、バイキュービック補間(bicubic interpolation)、バイリニア補間(bilinear Interpolation)等のアルゴリズムを用いてダウンサンプリングすることができ、フルサンプリングモードとは、符号化対象となるビデオフレームを直接符号化することを意味する。
現在符号化情報及び/又は画像特徴情報は、ビデオフレームに対応するシーン、細部の複雑さ、動きの激しさ等を反映し、例えば、動きベクトル、量子化パラメータ、符号化率等により動きシーンを判断することができ、量子化パラメータが大きければ、一般的には動きが激しく、動きベクトルが大きければ、画像のシーンが動きの大きいシーンであることを示す。符号化済みIフレームとPフレーム、或いは符号化済みIフレームとBフレームの符号化率の比により判断することもでき、この比が第1の予め設定された閾値を超えた場合に、静止画であると判断し、この比が第2の予め設定された閾値未満である場合に、動きの激しい画像であると判断することができる。或いは、直接画像コンテンツに基づいて対象オブジェクトを追跡し、対象オブジェクトの動き速度に基づいて、動きの大きいシーンであるか否かを判定する。符号化率が一定であるときに表現できる情報量は決められており、動きの激しいシーンは、時間領域の情報量が大きく、これに伴い、空間領域の情報表現に利用可能な符号化率が低いため、低い解像度を用いることで優れた画像品質効果を達成することができ、ダウンサンプリングモードを選択して符号化する傾向にある。
フレーム予測タイプにより画面切替シーンを確定することができ、他のフレームに対するフレーム予測タイプの影響により、好んだ符号化モードを確定することもできる。例えば、Iフレームは、一般的には、先頭フレームあるか、或いは画面が切り替えられることがあり、Iフレームの品質は続くPフレーム又はBフレームの品質に影響を与えるため、イントラ予測フレームは、画像品質を保証するために、インター予測フレームに比べフル解像度符号化を選択する傾向がある。PフレームはBフレームの参照フレームとされることができ、Pフレームの画像品質が続くBフレームの画像品質に影響を与えるため、Pフレーム符号化を利用する場合は、Bフレーム符号化を利用する場合に比べフル解像度符号化を選択する傾向がある。
画像テクスチャ情報などの画像特徴情報により、符号化対象となるビデオフレームのテクスチャの複雑さを確定し、テクスチャが複雑で、細部が多く含まれていれば、画像の空域情報が多くなり、ダウンサンプリングすれば、ダウンサンプリングによって多くの細部情報がなくなるおそれがあり、ビデオ品質を損なうことから、テクスチャが複雑な符号化対象となるビデオフレームは、テクスチャが簡単な符号化対象となるビデオフレームに比べフル解像度符号化を選択する傾向がある。
以上の様々な符号化モード選択ルールに従い、現在符号化情報及び/又は画像特徴情報のうちの1種又は複数種の情報に基づいて、オプションの符号化モードから現在符号化モードを確定することができ、複数種の情報を考慮する場合、複数種の情報を統合して重み付けし、各情報に対応する符号化モード選択ルールに連動して最終の現在符号化モードを確定することができる。
ステップS220:符号化対象となるビデオフレームを現在符号化モードに応じて処理して、現在符号化ビデオフレームを得て、前記現在符号化モードがダウンサンプリングモードである場合に、符号化対象となるビデオフレームをダウンサンプリングして、現在符号化ビデオフレームを得て、前記現在符号化モードがフルサンプリングモードである場合に、符号化対象となるビデオフレームを現在符号化ビデオフレームとして確定する。
具体的には、ダウンサンプリングのアルゴリズムは必要に応じてカスタマイズしてもよく、垂直ダウンサンプリング、水平ダウンサンプリング、垂直・水平ダウンサンプリングを含む。具体的な方向におけるサンプリングのパラメータは必要に応じてカスタマイズしてもよく、1つの具体的な実施例において、符号化対象となるビデオフレームに対して水平1/2ダウンサンプリングを行うと、サンプリングされた画像の幅は、元のビデオフレームの半分となり、符号化対象となるビデオフレームに対して垂直1/2ダウンサンプリングを行うと、サンプリングされた画像の高さは、元のビデオフレームの半分となる。現在符号化モードがフルサンプリングモードであれば、符号化対象となるビデオフレームをサンプリングする必要がなく、そのまま現在符号化ビデオフレームとすることができる。ダウンサンプリングして得られた画像の幅、高さは、最大符号化ブロックの整倍数でなければ、画像を最大符号化ブロックの整倍数となるように画素拡大する必要がある。
ステップS230:前記現在符号化ビデオフレームがインター符号化フレームである場合に、現在符号化ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、対応する処理参照フレームを得て、具体的には、現在参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、ステップS240に入る。
具体的には、現在符号化ビデオフレームに対応する現在参照フレームは、インター予測タイプによっては、前方向参照フレーム又は双方向参照フレームであることができ、参照フレームの数は1つ又は複数であることができる。現在参照フレームは現在符号化ビデオフレームと解像度が同じであれば、現在参照フレームをそのまま処理参照フレームとして確定することができる。
一実施例において、前記現在符号化ビデオフレームがイントラ符号化フレームである場合に、イントラ符号化などを直接行って第2の符号化データを得て、第2の符号化データに現在符号化モード情報が付加されている。
具体的には、現在符号化ビデオフレームのイントラ予測を行ってイントラ予測残差を得て、イントラ予測残差の変換、量子化、エントロピー符号化などを行って第2の符号化データを得る。符号化中、予測モード選択速度を高めるために、迅速モード選択アルゴリズムを利用することができ、また、ターゲット符号化率を達成するために、符号化率制御アルゴリズムに従って量子化パラメータを設定する。符号化した後、第2の符号化データを得て、第2の符号化データに現在符号化モード情報が付加されており、つまり、コードストリームにフラグビットも追加され、フラグビットは、現在符号化ビデオフレームがフル解像度符号化を利用するか、それともダウンサンプリング符号化を利用するかを記述する。イントラ符号化フレームは、ダウンサンプリング符号化モードであってもよく、Iフレームの符号化率が高すぎることに起因するパケットロス問題を効果的に回避することができる。
ステップS240:現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得る。
具体的には、予め設定されたサンプリングルールは必要に応じてカスタマイズしてもよく、現在符号化ビデオフレームの解像度、参照フレームと現在符号化ビデオフレームとの距離に関連し得る。例えば、現在参照フレームと現在符号化ビデオフレームとの距離Dが予め設定された閾値を超えた場合に、1/Mダウンサンプリングを利用し、そうでない場合に、1/Nダウンサンプリングを利用し、ただし、M<Nである。距離が大きい現在参照フレームは、距離が小さい現在参照フレームよりも参照価値が低い可能性があるため、距離が大きい現在参照フレームは、現在符号化ビデオフレームと解像度が異なっても、サンプリングを行わずに済むか、或いは、サンプリング後の解像度の変化を小さくすることで、サンプリング速度を大きくし、符号化速度全体を高めることができる。一実施例において、Mの値は距離Dに伴い変化することにより、サンプリングパラメータの柔軟性をさらに高める。
ステップS250:処理参照フレームに基づいて現在符号化ビデオフレームを符号化して、第1の符号化データを得て、第1の符号化データに現在符号化モード情報が付加されている。
具体的には、処理参照フレームの予測により予測残差を得て、予測残差の変換、量子化、エントロピー符号化などを行って符号化データを得る。符号化中、予測モード選択速度を高めるために、迅速モード選択アルゴリズムを利用することができ、また、ターゲット符号化率を達成するために、符号化率制御アルゴリズムに従って量子化パラメータを設定する。符号化した後、符号化データを得て、符号化データに現在符号化モード情報が付加されており、つまり、コードストリームにフラグビットも追加され、フラグビットは、現在符号化ビデオフレームがフル解像度符号化を利用するか、それともダウンサンプリング符号化を利用するかを記述する。
一実施例において、現在参照フレームは現在符号化ビデオフレームと解像度が異なる場合に、現在参照フレームをサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得る。現在参照フレームをサンプリングすることは、アップサンプリングおよびダウンサンプリングを含み、現在参照フレームの解像度が現在符号化ビデオフレームの解像度よりも高ければ、現在参照フレームをダウンサンプリングして処理参照フレームを得て、現在参照フレームの解像度が現在符号化ビデオフレームの解像度よりも低ければ、現在参照フレームをアップサンプリングして処理参照フレームを得る。一実施例において、現在参照フレームの数が複数であれば、各現在参照フレームをそれぞれ現在参照フレームの解像度と現在符号化ビデオフレームの解像度とに基づいてサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得る。
具体的には、処理参照フレームの解像度と現在符号化ビデオフレームの解像度とが同じであることにより、処理参照フレームと現在符号化ビデオフレームの画像一致度をある程度向上させることができ、インター予測の正確度を向上させ、予測残差を低減し、符号化画像の品質を向上させる。
一実施例において、現在参照フレームをサンプリングするサンプリングアルゴリズムが、ステップS220で符号化対象となるビデオフレームをダウンサンプリングして現在符号化ビデオフレームを得るサンプリングアルゴリズムとマッチングし、即ち、現在参照フレームをダウンサンプリングする場合、このダウンサンプリングアルゴリズムは、ステップS220で符号化対象となるビデオフレームをダウンサンプリングして現在符号化ビデオフレームを得るダウンサンプリングアルゴリズムと同様である。一方、現在参照フレームをアップサンプリングする場合、このアップサンプリングアルゴリズムと、ステップS220で符号化対象となるビデオフレームをダウンサンプリングして現在符号化ビデオフレームを得るダウンサンプリングアルゴリズムとは、マッチングする逆のサンプリングアルゴリズムである。
具体的には、現在参照フレームをサンプリングするサンプリングアルゴリズムが、符号化対象となるビデオフレームをダウンサンプリングして現在符号化ビデオフレームを得るサンプリングアルゴリズムとマッチングすることにより、現在参照フレームと現在符号化ビデオフレームの画像一致度をさらに向上させることができ、インター予測の正確度をさらに向上させ、予測残差を低減し、符号化画像の品質を向上させる。
本実施例において、符号化対象となるビデオフレームを取得し、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、フル解像度モードとダウンサンプリングモードとを含むオプションの符号化モードから現在符号化モードを確定し、符号化対象となるビデオフレームを現在符号化モードに応じて処理して、現在符号化ビデオフレームを得て、現在符号化モードがダウンサンプリングモードである場合に、符号化対象となるビデオフレームをダウンサンプリングして、現在符号化ビデオフレームを得て、現在符号化モードがフル解像度モードである場合に、符号化対象となるビデオフレームを現在符号化ビデオフレームとして確定し、前記現在符号化ビデオフレームがインター符号化フレームである場合に、現在符号化ビデオフレームに対応する現在参照フレームを取得し、現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、対応する処理参照フレームを得て、具体的には、現在参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得て、さらに、処理参照フレームに基づいて現在符号化ビデオフレームを符号化して、現在符号化モード情報が付加された第1の符号化データを得ることにより、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、符号化対象となるビデオフレームの符号化モードを適応的に確定することができるため、異なるシーンごとに、適切な解像度を適応的に選択して符号化し、ダウンサンプリング符号化により空域情報を適応的に低減することができ、これにより、異なるシーンごとに、限られた帯域幅でのビデオ品質を向上させるとともに、現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、現在参照フレームの解像度を調整することができ、現在参照フレームは現在符号化ビデオフレームと解像度が異なっても、参照フレームとされることができ、参照フレームの使用効率を向上させ、そのうえ、インター予測の正確度を向上させ、予測残差を低減し、符号化画像の品質を向上させることができる。
一実施例において、現在符号化情報は、量子化パラメータ情報を含み、図5に示すように、ステップS210では、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、オプションの符号化モードから現在符号化モードを確定するステップは、ステップS211〜ステップS212を含む。
ステップS211:符号化対象となるビデオフレームに対応する現在量子化パラメータを取得する。
具体的には、符号化率が厳しく要求されないシーンでは、符号化の前に、それぞれの符号化対象となるビデオフレームごとに粒度が粗い量子化パラメータを割り当てることができ、例えば、1フレームに1つの量子化パラメータが対応し、この場合、現在量子化パラメータを簡便かつ迅速に取得することができる。或いは、1フレームを異なるスライス(slice)に分割し、各スライスごとに1つの量子化パラメータが対応し、この場合、各スライスに対応する量子化パラメータから現在量子化パラメータを算出することができ、例えば、各スライスに対応する量子化パラメータの平均値又は中央値を現在量子化パラメータとすることができる。符号化率が厳しく要求されるシーンでは、符号化の時に、それぞれの符号化対象となるビデオフレームごとにマクロブロック単位で粒度が細かい量子化パラメータを割り当て、それぞれの対応する量子化パラメータを基準量子化パラメータ付近で調整することができ、或いは、基準量子化パラメータを現在量子化パラメータとするか、又は、各マクロブロックに対応する平均値又は中央値を算出して現在量子化パラメータとすることができる。
ステップS212:符号化対象となるビデオフレームのフレーム予測タイプを取得し、フレーム予測タイプに対応する量子化パラメータ閾値を取得し、現在量子化パラメータが量子化パラメータ閾値より大きい場合に、現在符号化モードがダウンサンプリングモードであると確定し、そうでない場合に、現在符号化モードがフル解像度モードであると確定する。
具体的には、符号化モード確定ルールに従い、一般的には、イントラ予測フレームは、インター予測フレームに比べフル解像度符号化を選択する傾向があり、Pフレームの符号化は、Bフレームの符号化を利用する場合に比べフル解像度符号化を選択する傾向があるため、Iフレームの量子化パラメータ閾値がPフレームの量子化パラメータ閾値以上であり、Pフレームの量子化パラメータ閾値がBフレームの量子化パラメータ閾値以上であるとすると、現在符号化モードは、現在量子化パラメータが量子化パラメータ閾値より大きい場合にのみ、ダウンサンプリングモードであると確定され、そうでない場合に、フル解像度モードであると確定される。現在量子化パラメータが大きいほど、一般的には、動きが激しくなり、動きの激しいシーンでは、ダウンサンプリングモードを選択して符号化する傾向にある。
本実施例において、異なるフレーム予測タイプと量子化パラメータとを異なる量子化パラメータ閾値によって組み合わせて、符号化対象となるビデオフレームの現在符号化モードを確定することにより、現在符号化モードの確定精度を向上させることができる。
一実施例において、現在符号化情報は、符号化率情報を含み、図6に示すように、ステップS210では、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、オプションの符号化モードから現在符号化モードを確定するステップは、ステップS213〜ステップS214を含む。
ステップS213:符号化対象となるビデオフレームに対応する現在ターゲット符号化率を取得する。
具体的には、符号化率が厳しく要求されるシーンでは、コードストリームのターゲット符号化率に基づいて、それぞれのフレームに対応するフレームターゲット符号化率を算出し割り当て、かつ、それぞれのフレームに対応するフレームターゲット符号化率は、過去の実際の符号化率に基づいて調整されてもよく、符号化率割り当てアルゴリズムに従って、符号化対象となるビデオフレームに対応する現在ターゲット符号化率を算出することができる。
ステップS214:符号化対象となるビデオフレームのフレーム予測タイプを取得し、フレーム予測タイプに対応する符号化率閾値を取得し、現在ターゲット符号化率が符号化率閾値より高い場合に、現在符号化モードがフル解像度モードであると確定し、そうでない場合に、現在符号化モードがダウンサンプリングモードであると確定する。
具体的には、符号化モード確定ルールに従い、一般的には、イントラ予測フレームは、インター予測フレームに比べフル解像度符号化を選択する傾向があり、かつ、Iフレームはイントラ符号化しか利用せず、一般的には、符号化率が高いとともに、割り当てられたターゲット符号化率も高く、Pフレームの符号化は、Bフレームの符号化を利用する場合に比べフル解像度符号化を選択する傾向があり、かつ、PフレームおよびBフレームは、他のフレームを参照して符号化することができるため、一般的には、イントラ予測フレームよりも少ないターゲット符号化率が割り当てられる。このため、Iフレームの符号化率閾値がPフレームの符号化率閾値よりも大きく、Pフレームの符号化率閾値がBフレームの符号化率閾値以上であるとする。現在ターゲット符号化率が符号化率閾値より高い場合に、現在符号化モードがフル解像度モードであると確定し、そうでない場合に、現在符号化モードがダウンサンプリングモードであると確定する。ターゲット符号化率が高く、かつ予め設定された閾値を超えていることは、多くの画像の細部を有することを表し、フル解像度モードを選択して符号化することにより、画像の細部をそのままにすることができ、画像品質を保証する。
本実施例において、異なるフレーム予測タイプと符号化率とを異なる符号化率閾値によって組み合わせて、符号化対象となるビデオフレームの現在符号化モードを確定することにより、現在符号化モードの確定精度を向上させることができる。
一実施例において、画像特徴情報は、動き特徴情報およびテクスチャ情報を含み、図7に示すように、ステップS210では、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、オプションの符号化モードから現在符号化モードを確定するステップは、ステップS215〜ステップS216を含む。
ステップS215:動き特徴情報に基づいて動き度合いを確定し、テクスチャ情報に基づいてテクスチャの複雑さを確定する。
具体的には、画像コンテンツに基づいて、例えば、物体追跡アルゴリズム等によって、動き特徴情報を抽出することができ、動き度合いは、画像の動きの激しさを表し、例えば動き速度などの異なる特徴によって評価することができる。画素の勾配を算出して画像の細部のテクスチャ情報を得ることにより、画像のテクスチャの複雑さを確定することができる。
ステップS216:動き度合いが動きの予め設定された閾値を超えた場合に、或いは、テクスチャの複雑さがテクスチャの予め設定された閾値を超えていない場合に、現在符号化モードがダウンサンプリングモードであると確定し、そうでない場合に、現在符号化モードがフル解像度モードであると確定する。
具体的には、符号化モード確定ルールに従い、動きの激しいシーンでは、ダウンサンプリングモードを選択して符号化する傾向にあり、テクスチャが複雑な符号化対象となるビデオフレームは、テクスチャが簡単な符号化対象となるビデオフレームに比べフル解像度符号化を選択する傾向があるため、動き度合いが動きの予め設定された閾値を超えた場合に、或いは、テクスチャの複雑さがテクスチャの予め設定された閾値を超えていない場合に、現在符号化モードがダウンサンプリングモードであると確定し、そうでない場合に、現在符号化モードがフル解像度モードであると確定する。
本実施例において、現在符号化モードは、画像コンテンツ情報に基づいて直接確定されることができ、符号化プロセスによらず、符号化の前に画像を分析し画像特徴を抽出することで各ビデオフレームに対応する符号化モードを得ることができる。
一実施例において、図8に示すように、ステップS210では、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、オプションの符号化モードから現在符号化モードを確定するステップは、ステップS217〜ステップS219を含む。
ステップS217:符号化対象となるビデオフレームのフレーム予測タイプを取得し、イントラ予測フレームである場合に、現在符号化モードがフル解像度モードであると確定する。
ステップS218:双方向インター予測フレームである場合に、現在符号化モードがダウンサンプリングモードであると確定する。
ステップS219:前方向インター予測フレームである場合に、量子化パラメータ情報、符号化率情報、画像特徴情報のうちの少なくとも1種の情報に基づいて現在符号化モードを確定する。
具体的には、フレーム予測タイプによって、イントラ予測フレームである場合に、現在符号化モードがフル解像度モードであると確定し、Iフレームの符号化品質を保証し、双方向インター予測フレームである場合に、現在符号化モードがダウンサンプリングモードであると確定し、また、符号化対象となるビデオフレームが前方向インター予測フレームである場合に、量子化パラメータ情報、符号化率情報、画像特徴情報のうちの少なくとも1種の情報に基づいて現在符号化モードを確定することにより、特定したフレーム予測タイプについて現在符号化モードを迅速に確定することができ、符号化効率を向上させる。
一実施例において、現在符号化情報は、量子化パラメータ情報、符号化率情報およびフレーム予測タイプを含み、画像特徴情報は、動き特徴情報およびテクスチャ情報を含み、図9に示すように、ステップS210では、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、オプションの符号化モードから現在符号化モードを確定するステップは、ステップS2101〜ステップS2102を含む。
ステップS2101:予め設定された条件と符号化モードとの対応関係テーブルを取得し、予め設定された条件は、量子化パラメータ、符号化率、フレーム予測タイプ、動き度合いおよびテクスチャの複雑さのうちの少なくとも2つの条件を含む。
具体的には、対応関係テーブルには、異なる予め設定された条件に対応する符号化モードがリストアップされており、少なくとも、2つの予め設定された条件に基づいて符号化モードを確定し、予め設定された条件は必要に応じてカスタマイズしてもよく、例えば、量子化パラメータが第1の予め設定された閾値よりも大きく、符号化率が第2の予め設定された閾値よりも高いなどとする。複数の予め設定された条件を組み合わせ、テーブルによって符号化モードを迅速に確定することができる。
ステップS2102:現在符号化情報、画像特徴情報から少なくとも2種の情報を取得し、対応関係テーブルにおける対応する予め設定された条件とのマッチングを行い、ターゲット符号化モードを現在符号化モードとして確定する。
具体的には、現在符号化情報、画像特徴情報から少なくとも2種の情報を取得し、現在符号化情報のうちの少なくとも2種の情報、例えば符号化率、フレーム予測タイプであることができれば、画像特徴情報のうちの少なくとも2種の情報、例えばテクスチャ情報、動き速度であることができ、また、現在符号化情報と画像特徴情報とを組み合わせた少なくとも2種の情報、例えば符号化率およびテクスチャ情報であることができる。テーブルに問い合わせることで、情報が満足する予め設定された条件に基づいて、対応するターゲット符号化モードを現在符号化モードとして確定する。2種又は複数種の情報によって現在符号化モードを確定する際に、テーブルに問い合わせることで、現在符号化モードを迅速に得ることができ、簡単かつ便利である。
一実施例において、図10に示すように、ビデオ復号方法を提供し、上記適用環境における端末又はサーバに適用されることを例として説明し、以下のステップS310〜ステップS350を含む。
ステップS310:符号化データを取得し、符号化データに対応する各符号化ビデオフレームに現在符号化モード情報が付加されており、現在符号化モード情報に基づいて、現在復号ビデオフレームに対応する現在復号モードを確定する。
具体的には、コードストリームにおける予め設定された位置に対応するフラグビットを取得し、フラグビットによって現在符号化モード情報を得ることにより、現在復号モードがフル解像度モードであるか、それともダウンサンプリングモードであるかを判断することができる。現在復号モードが現在符号化モードと同じである。
ステップS320:現在復号ビデオフレームがインター符号化フレームである場合に、現在復号ビデオフレームに対応する現在参照フレームを取得し、現在参照フレームと現在復号ビデオフレームの解像度の高低に基づいて処理参照フレームを得て、具体的には、現在参照フレームの解像度が現在復号ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、ステップS330に入る。
具体的には、現在復号ビデオフレームに対応する現在参照フレームは、インター予測タイプによっては、前方向参照フレーム又は双方向参照フレームであることができ、参照フレームの数は1つ又は複数であることができる。現在参照フレームは現在復号ビデオフレームと解像度が同じであれば、現在参照フレームをそのまま処理参照フレームとして確定することができる。
一実施例において、現在復号ビデオフレームがイントラ符号化フレームである場合に、直接復号して再構築ビデオフレームを得る。
ステップS330:現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得る。
具体的には、復号時に利用される予め設定されたサンプリングルールは、符号化時に利用される予め設定されたサンプリングルールと同様に、現在符号化ビデオフレームの解像度、現在参照フレームと現在符号化ビデオフレームとの距離に関連し得る。例えば、現在参照フレームと現在符号化ビデオフレームとの距離Dが予め設定された閾値を超えた場合に、1/Mダウンサンプリングを利用し、そうでない場合に、1/Nダウンサンプリングを利用し、ただし、M<Nである。距離が大きい参照フレームは、距離が小さい参照フレームよりも参照価値が低い可能性があるため、距離が大きい現在参照フレームは、現在符号化ビデオフレームと解像度が異なっても、サンプリングを行わずに済むか、或いは、サンプリング後の解像度の変化を小さくすることで、復号の時に、同様な方法でサンプリング速度を大きくし、復号速度全体を高めることができる。一実施例において、Mの値は距離Dに伴い変化することにより、サンプリングパラメータの柔軟性をさらに高める。一実施例において、現在参照フレームは現在復号ビデオフレームと解像度が異なる場合に、現在参照フレームをサンプリングして、現在復号ビデオフレームと同じ解像度の処理参照フレームを得て、現在参照フレームをサンプリングすることは、アップサンプリングおよびダウンサンプリングを含み、現在参照フレームの解像度が現在復号ビデオフレームの解像度より高い場合に、現在参照フレームをダウンサンプリングして処理参照フレームを得て、現在参照フレームの解像度が現在符号化ビデオフレームの解像度よりも低い場合に、現在参照フレームをアップサンプリングして処理参照フレームを得る。一実施例において、現在参照フレームの数が複数である場合に、各現在参照フレームをそれぞれ参照フレームの解像度と現在復号ビデオフレームの解像度とに基づいてサンプリングして、現在復号ビデオフレームと同じ解像度の処理参照フレームを得る。
一実施例において、現在参照フレームをサンプリングするサンプリングアルゴリズムは、ステップS340で再構築ビデオフレームをダウンサンプリングして復号ビデオフレームを得るサンプリングアルゴリズムとマッチングし、即ち、参照フレームをダウンサンプリングする場合、このダウンサンプリングアルゴリズムは、ステップS340で再構築ビデオフレームをダウンサンプリングして復号ビデオフレームを得るダウンサンプリングアルゴリズムと同様である。一方、参照フレームをアップサンプリングする場合、このアップサンプリングアルゴリズムと、ステップS340で再構築ビデオフレームをダウンサンプリングして復号ビデオフレームを得るダウンサンプリングアルゴリズムとは、マッチングする逆のサンプリングアルゴリズムである。
ステップS340:処理参照フレームに基づいて現在復号ビデオフレームを復号して、再構築ビデオフレームを得る。
具体的には、予測残差を復号し、処理参照フレームに対応する予測画素と重畳して再構築ビデオフレームを得る。
ステップS350:再構築ビデオフレームを現在復号モードに従って処理して復号ビデオフレームを得て、現在復号モードがダウンサンプリングモードである場合に、再構築ビデオフレームをアップサンプリングして復号ビデオフレームを得て、現在符号化モード情報がフルサンプリングモードである場合に、再構築ビデオフレームを復号ビデオフレームとして確定する。
具体的には、再構築ビデオフレームをアップサンプリングするアルゴリズムと、符号化側で符号化対象となるビデオフレームをダウンサンプリングして現在符号化ビデオフレームを得るアルゴリズムとは、マッチングする逆のサンプリングアルゴリズムである。
本実施例において、符号化データを取得し、符号化データに対応する各符号化ビデオフレームに現在符号化モード情報が付加されており、現在符号化モード情報に基づいて、現在復号ビデオフレームに対応する現在復号モードを確定し、現在復号ビデオフレームがインター符号化フレームである場合に、現在復号ビデオフレームに対応する現在参照フレームを取得し、現在参照フレームと現在復号ビデオフレームの解像度の高低に基づいて処理参照フレームを得て、具体的には、現在参照フレームの解像度が現在復号ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得て、処理参照フレームに基づいて現在復号ビデオフレームを復号して、再構築ビデオフレームを得て、再構築ビデオフレームを現在復号モードに従って処理して復号ビデオフレームを得て、現在復号モードがダウンサンプリングモードであれば、再構築ビデオフレームをアップサンプリングして復号ビデオフレームを得て、現在符号化モード情報がフルサンプリングモードであれば、再構築ビデオフレームを復号ビデオフレームとして確定することにより、適応変化モードで符号化するコードストリームについて、参照フレームの解像度を適応的に調整して復号することができ、適応変化モードで符号化するコードストリームは、異なるシーンごとに適切な解像度を選択して符号化するコードストリームであり、これにより、高い画像品質のコードストリームに対する復号をサポートする。
図11に示すように、1つの具体的な実施例においてビデオ符号化方法とビデオ復号方法が適用された符号化・復号仕組み図であり、符号化・復号仕組みに入力された符号化対象となるビデオフレームについて、まず解像度選択モジュール410に入り、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、オプションの符号化モードから現在符号化モードを確定し、フル解像度モードであれば、フル解像度符号化モジュール420に入り、現在符号化対象となるビデオフレームのフル解像度符号化を行って符号化コードストリームを出力する。ダウンサンプリングモードであれば、ダウンサンプリング符号化モジュール430に入り、現在符号化対象となるビデオフレームをダウンサンプリングして現在符号化ビデオフレームを得て、現在符号化ビデオフレームを符号化して符号化コードストリームを出力する。符号化コードストリームを複合解像度復号モジュール440に入力し、復号した後、再構築ビデオフレームを得て、ダウンサンプリングモードであれば、再構築ビデオフレームをアップサンプリングして復号ビデオフレームを得て、そうでなければ、復号ビデオフレームを直接出力する。
ダウンサンプリング符号化モジュール430の符号化時の具体的なフローは、図12に示すように、まず最初にイントラ符号化フレームであるか否かを判断し、YESであれば、イントラ予測を直接行って予測残差を得るとともに、変換、量子化、エントロピー符号化などを行って符号化データを得る。イントラ符号化フレームでなければ、参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、YESであれば、イントラ又はインター予測を行って予測残差を得るとともに、変換、量子化、エントロピー符号化などを行って符号化データを得る。参照フレームと現在符号化ビデオフレームとは解像度が異なっていれば、参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、現在符号化ビデオフレームに対応する処理参照フレームを得てから、イントラ又はインター予測を行って予測残差を得るとともに、変換、量子化、エントロピー符号化などを行って符号化データを得る。符号化中、予測モード選択速度を高めるために、迅速モード選択アルゴリズムを利用することができ、また、ターゲット符号化率を達成するために、符号化率制御アルゴリズムに従って量子化パラメータを設定する。
一実施例において、コンピュータ装置をさらに提供し、該コンピュータ装置の内部構造は、図2又は図3に示すようなものとすることができ、該コンピュータ装置は、ビデオ符号化装置およびビデオ復号装置の少なくとも一方を備え、ビデオ符号化装置およびビデオ復号装置に各モジュールが備えられ、各モジュールは、全部又は一部がソフトウェア、ハードウェア又はそれらの組み合わせにより実現されることができる。
一実施例において、図13に示すように、ビデオ符号化装置を提供し、以下のモジュールを備える。
符号化モード確定モジュール510は、符号化対象となるビデオフレームを取得し、符号化対象となるビデオフレームの現在符号化情報及び/又は画像特徴情報に基づいて、オプションの符号化モードから現在符号化モードを確定し、オプションの符号化モードはフル解像度モードとダウンサンプリングモードとを含む。
前処理モジュール520は、符号化対象となるビデオフレームを現在符号化モードに応じて処理して、現在符号化ビデオフレームを得て、現在符号化モードがダウンサンプリングモードである場合に、符号化対象となるビデオフレームをダウンサンプリングして、現在符号化ビデオフレームを得て、現在符号化モードがフル解像度モードである場合に、符号化対象となるビデオフレームを現在符号化ビデオフレームとして確定する。
符号化処理参照フレーム確定モジュール530は、現在符号化ビデオフレームがインター符号化フレームである場合に、現在符号化ビデオフレームに対応する現在参照フレームを取得し、現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、対応する処理参照フレームを得て、具体的には、現在参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得る。
インター符号化モジュール540は、処理参照フレームに基づいて現在符号化ビデオフレームを符号化して、第1の符号化データを得て、第1の符号化データに現在符号化モード情報が付加されている。
一実施例において、現在符号化情報は、量子化パラメータ情報を含み、符号化モード確定モジュール510は、さらに、符号化対象となるビデオフレームに対応する現在量子化パラメータを取得し、符号化対象となるビデオフレームのフレーム予測タイプを取得し、フレーム予測タイプに対応する量子化パラメータ閾値を取得し、現在量子化パラメータが量子化パラメータ閾値より大きい場合に、現在符号化モードがダウンサンプリングモードであると確定し、そうでない場合に、現在符号化モードがフル解像度モードであると確定する。
一実施例において、現在符号化情報は、符号化率情報を含み、符号化モード確定モジュール510は、さらに、符号化対象となるビデオフレームに対応する現在ターゲット符号化率を取得し、符号化対象となるビデオフレームのフレーム予測タイプを取得し、フレーム予測タイプに対応する符号化率閾値を取得し、現在ターゲット符号化率が符号化率閾値より高い場合に、現在符号化モードがフル解像度モードであると確定し、そうでない場合に、現在符号化モードがダウンサンプリングモードであると確定する。
一実施例において、画像特徴情報は、動き特徴情報およびテクスチャ情報を含み、符号化モード確定モジュール510は、さらに、動き特徴情報に基づいて動き度合いを確定し、テクスチャ情報に基づいてテクスチャの複雑さを確定し、動き度合いが動きの予め設定された閾値を超えた場合に、或いは、テクスチャの複雑さがテクスチャの予め設定された閾値を超えていない場合に、現在符号化モードがダウンサンプリングモードであると確定し、そうでない場合に、現在符号化モードがフル解像度モードであると確定する。
一実施例において、図14に示すように、符号化モード確定モジュール510は、
符号化対象となるビデオフレームのフレーム予測タイプを取得し、イントラ予測フレームである場合に、現在符号化モードがフル解像度モードであると確定し、双方向インター予測フレームである場合に、現在符号化モードがダウンサンプリングモードであると確定する符号化モード迅速確定ユニット511と、
前方向インター予測フレームであれば、量子化パラメータ情報、符号化率情報、画像特徴情報のうちの少なくとも1種の情報に基づいて現在符号化モードを確定する符号化モード精緻確定ユニット512と、を含む。
一実施例において、図15に示すように、該装置は、
現在符号化ビデオフレームがイントラ符号化フレームである場合に、イントラ符号化を直接行って、現在符号化モード情報が付加された第2の符号化データを得るイントラ符号化モジュール550をさらに備える。
一実施例において、図16に示すように、符号化処理参照フレーム確定モジュール530は、
現在参照フレームの解像度が現在符号化ビデオフレームの解像度より高い場合に、現在参照フレームをダウンサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得る第1のサンプリングユニット531と、
現在参照フレームの解像度が現在符号化ビデオフレームの解像度よりも低い場合に、現在参照フレームをアップサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得る第2のサンプリングユニット532と、を含む。
一実施例において、図17に示すように、ビデオ復号装置を提供し、以下のモジュールを備える。
復号モード確定モジュール610は、符号化データを取得し、符号化データに対応する各符号化ビデオフレームに現在符号化モード情報が付加されており、現在符号化モード情報に基づいて、現在復号ビデオフレームに対応する現在復号モードを確定する。
復号処理参照フレーム確定モジュール620は、現在復号ビデオフレームがインター符号化フレームである場合に、現在復号ビデオフレームに対応する現在参照フレームを取得し、現在参照フレームと現在復号ビデオフレームの解像度の高低に基づいて処理参照フレームを得て、具体的には、現在参照フレームの解像度が現在復号ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得る。
再構築モジュール630は、処理参照フレームに基づいて現在復号ビデオフレームを復号して、再構築ビデオフレームを得る。
復号ビデオフレーム確定モジュール640は、再構築ビデオフレームを現在復号モードに従って処理して復号ビデオフレームを得て、現在復号モードがダウンサンプリングモードであれば、再構築ビデオフレームをアップサンプリングして復号ビデオフレームを得て、現在符号化モード情報がフルサンプリングモードであれば、再構築ビデオフレームを復号ビデオフレームとして確定する。
本願の各実施例における各ステップは、必ずしもステップの番号で示される順番で順に実行されるとは限らないことは、理解されるべきである。本文ではそうでないとする明確な指示がない限り、これらのステップの実行順番は厳しく制限されていないとともに、これらのステップは他の順番で実行されてもよい。そして、各実施例における少なくとも一部のステップは、複数のサブステップ又は複数の段階を含んでもよく、これらのサブステップ又は段階は、必ずしも同じタイミングで実行され完成されるとは限らず、異なるタイミングで実行されてもよく、これらのサブステップ又は段階の実行順番も、必ずしも順に行われるとは限らず、他のステップ、又は他のステップのサブステップ又は段階の少なくとも一部と順次又は交互に実行されてもよい。
上述実施例方法におけるフローの全部又は一部は、コンピュータプログラムが関連するハードウェアを命令して完成させることができ、上記プログラムは、不揮発性コンピュータ読み取り可能な記憶媒体に記憶されることができ、該プログラムは、実行されると、上述のような各方法の実施例のフローを含むことができる、と当業者が理解されることができる。本願に提供される各実施例に挙げられたメモリ、記憶、データベース又は他の媒体は、それぞれ、不揮発性及び/又は揮発性メモリを含むことができる。不揮発性メモリは、リードオンリーメモリ(ROM)、プログラマブルROM(PROM)、電気的プログラマブルROM(EPROM)、電気的消去可能プログラマブルROM(EEPROM)又はフラッシュメモリを含むことができる。揮発性メモリは、ランダムアクセスメモリ(RAM)又は外部キャッシュを含むことができる。説明のために、RAMは、様々な形態で得られ、例えば、スタティック RAM(SRAM)、ダイナミックRAM(DRAM)、シンクロナスDRAM(SDRAM)、ダブルデータレートSDRAM(DDRSDRAM)、エンハンストSDRAM(ESDRAM)、同期リンク(Synchlink)DRAM(SLDRAM)、ラムバス(Rambus)ダイレクトRAM(RDRAM)、ダイレクトラムバスダイナミックRAM(DRDRAM)、及びラムバスダイナミックRAM(RDRAM)等があるが、これらに限定されない。
上述した実施例の各技術的特徴を任意に組み合わせることができ、説明を簡潔にするために、上述した実施例における各技術的特徴の存在可能な組み合わせをすべて説明していないが、しかし、これらの技術的特徴の組み合わせが互いに矛盾していなければ、すべてが本明細書に記載の範囲にあると考えられるべきである。
上述した実施例は、本願のいくつかの実施形態のみを表し、その説明は具体的かつ詳細に行われているが、しかし、これにより発明特許範囲が制限されていると理解されてはいけない。なお、当業者にとって、本願の趣旨から逸脱しない限り、若干の変形や改良も可能であり、すべて本願の保護範囲内である。このため、本特許出願の保護範囲は特許請求の範囲によって限定されるべきである。

Claims (12)

  1. コンピュータ装置が、符号化対象となるビデオフレームを取得し、前記符号化対象となるビデオフレームのターゲット符号化率及びフレーム予測タイプを取得し前記ターゲット符号化率が前記フレーム予測タイプに対応する符号化率閾値より高い場合、フル解像度モードとダウンサンプリングモードとを含むオプションの符号化モードから現在符号化モードがフル解像度モードであると確定し、前記ターゲット符号化率が前記フレーム予測タイプに対応する符号化率閾値以下である場合、前記現在符号化モードがダウンサンプリングモードであると確定することと、
    前記コンピュータ装置が、前記符号化対象となるビデオフレームを現在符号化モードに応じて処理して、現在符号化ビデオフレームを得て、前記現在符号化モードがダウンサンプリングモードである場合に、前記符号化対象となるビデオフレームをダウンサンプリングして、現在符号化ビデオフレームを得て、前記現在符号化モードがフル解像度モードである場合に、前記符号化対象となるビデオフレームを現在符号化ビデオフレームとして確定することと、
    前記現在符号化ビデオフレームがインター符号化フレームである場合に、前記コンピュータ装置は、前記現在符号化ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、対応する処理参照フレームを得て、具体的には、前記コンピュータ装置は、前記現在参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、前記現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得ることと、
    前記コンピュータ装置が、前記処理参照フレームに基づいて前記現在符号化ビデオフレームを符号化して、現在符号化モード情報が付加された第1の符号化データを得ることと、
    を含むビデオ符号化方法。
  2. 前記コンピュータ装置が、符号化対象となるビデオフレームを取得した後、
    前記コンピュータ装置が、前記符号化対象となるビデオフレームのフレーム予測タイプを取得し、イントラ予測フレームである場合に、前記現在符号化モードがフル解像度モードであると確定することと、
    双方向インター予測フレームである場合に、前記コンピュータ装置は、前記現在符号化モードがダウンサンプリングモードであると確定することと、
    前方向インター予測フレームである場合に、前記コンピュータ装置は、符号化率に基づいて現在符号化モードを確定することと、をさらに含む、
    ことを特徴とする請求項に記載の方法。
  3. 前記現在符号化ビデオフレームがイントラ符号化フレームである場合に、前記コンピュータ装置は、イントラ符号化を直接行って、現在符号化モード情報が付加された第2の符号化データを得ること、をさらに含む、
    ことを特徴とする請求項1に記載の方法。
  4. 前記コンピュータ装置が、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得ることは、
    現在参照フレームの解像度が現在符号化ビデオフレームの解像度より高い場合に、前記コンピュータ装置は、現在参照フレームをダウンサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得て、現在参照フレームの解像度が現在符号化ビデオフレームの解像度よりも低い場合に、前記コンピュータ装置は、現在参照フレームをアップサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得ること、を含む、
    ことを特徴とする請求項1に記載の方法。
  5. メモリとプロセッサとを備え、前記メモリにコンピュータ読み取り可能な命令が記憶されており、前記コンピュータ読み取り可能な命令は、前記プロセッサによって実行されると、前記プロセッサに、
    符号化対象となるビデオフレームを取得し、前記符号化対象となるビデオフレームのターゲット符号化率及びフレーム予測タイプを取得し前記ターゲット符号化率が前記フレーム予測タイプに対応する符号化率閾値より高い場合、フル解像度モードとダウンサンプリングモードとを含むオプションの符号化モードから現在符号化モードがフル解像度モードであると確定し、前記ターゲット符号化率が前記フレーム予測タイプに対応する符号化率閾値以下である場合、前記現在符号化モードがダウンサンプリングモードであると確定するステップと、
    前記符号化対象となるビデオフレームを現在符号化モードに応じて処理して、現在符号化ビデオフレームを得て、前記現在符号化モードがダウンサンプリングモードである場合に、前記符号化対象となるビデオフレームをダウンサンプリングして、現在符号化ビデオフレームを得て、前記現在符号化モードがフル解像度モードである場合に、前記符号化対象となるビデオフレームを現在符号化ビデオフレームとして確定するステップと、
    前記現在符号化ビデオフレームがインター符号化フレームである場合に、前記現在符号化ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、対応する処理参照フレームを得て、具体的には、前記現在参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、前記現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得るステップと、
    前記処理参照フレームに基づいて前記現在符号化ビデオフレームを符号化して、現在符号化モード情報が付加された第1の符号化データを得るステップと、を実行させる、
    コンピュータ装置。
  6. 前記符号化対象となるビデオフレームを取得した後、前記コンピュータ読み取り可能な命令は、前記プロセッサに、
    前記符号化対象となるビデオフレームのフレーム予測タイプを取得し、イントラ予測フレームである場合に、前記現在符号化モードがフル解像度モードであると確定するステップと、
    双方向インター予測フレームである場合に、前記現在符号化モードがダウンサンプリングモードであると確定するステップと、
    前方向インター予測フレームである場合に、符号化率に基づいて現在符号化モードを確定するステップと、をさらに実行させる、
    ことを特徴とする請求項に記載のコンピュータ装置。
  7. 前記コンピュータ読み取り可能な命令は、前記プロセッサに、
    前記現在符号化ビデオフレームがイントラ符号化フレームである場合に、イントラ符号化を直接行って、現在符号化モード情報が付加された第2の符号化データを得るステップ、をさらに実行させる、
    ことを特徴とする請求項に記載のコンピュータ装置。
  8. 前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得ることは、
    現在参照フレームの解像度が現在符号化ビデオフレームの解像度より高い場合に、現在参照フレームをダウンサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得て、現在参照フレームの解像度が現在符号化ビデオフレームの解像度よりも低い場合に、現在参照フレームをアップサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得ること、を含む、
    ことを特徴とする請求項に記載のコンピュータ装置。
  9. コンピュータ読み取り可能な命令が記憶された1つ又は複数の不揮発性記憶媒体であって、前記コンピュータ読み取り可能な命令は、1つ又は複数のプロセッサによって実行されると、1つ又は複数のプロセッサに、
    符号化対象となるビデオフレームを取得し、前記符号化対象となるビデオフレームのターゲット符号化率及びフレーム予測タイプを取得し、フル解像度モードとダウンサンプリングモードとを含むオプションの符号化モードから現在符号化モードがフル解像度モードであると確定し、前記ターゲット符号化率が前記フレーム予測タイプに対応する符号化率閾値以下である場合、前記現在符号化モードがダウンサンプリングモードであると確定するステップと、
    前記符号化対象となるビデオフレームを現在符号化モードに応じて処理して、現在符号化ビデオフレームを得て、前記現在符号化モードがダウンサンプリングモードである場合に、前記符号化対象となるビデオフレームをダウンサンプリングして、現在符号化ビデオフレームを得て、前記現在符号化モードがフル解像度モードである場合に、前記符号化対象となるビデオフレームを現在符号化ビデオフレームとして確定するステップと、
    前記現在符号化ビデオフレームがインター符号化フレームである場合に、前記現在符号化ビデオフレームに対応する現在参照フレームを取得し、前記現在参照フレームと現在符号化ビデオフレームの解像度の高低に基づいて、対応する処理参照フレームを得て、具体的には、前記現在参照フレームの解像度が現在符号化ビデオフレームと同じであるか否かを判断し、解像度が同じである場合に、前記現在参照フレームをそのまま処理参照フレームとして確定し、そうでない場合に、前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得るステップと、
    前記処理参照フレームに基づいて前記現在符号化ビデオフレームを符号化して、現在符号化モード情報が付加された第1の符号化データを得るステップと、を実行させる記憶媒体。
  10. 前記符号化対象となるビデオフレームを取得した後、前記コンピュータ読み取り可能な命令は、前記プロセッサに、
    前記符号化対象となるビデオフレームのフレーム予測タイプを取得し、イントラ予測フレームである場合に、前記現在符号化モードがフル解像度モードであると確定するステップと、
    双方向インター予測フレームである場合に、前記現在符号化モードがダウンサンプリングモードであると確定するステップと、
    前方向インター予測フレームである場合に、符号化率に基づいて現在符号化モードを確定するステップと、をさらに実行させる、
    ことを特徴とする請求項に記載の記憶媒体。
  11. 前記コンピュータ読み取り可能な命令は、前記プロセッサに、
    前記現在符号化ビデオフレームがイントラ符号化フレームである場合に、イントラ符号化を直接行って、現在符号化モード情報が付加された第2の符号化データを得るステップ、をさらに実行させる、
    ことを特徴とする請求項に記載の記憶媒体。
  12. 前記現在参照フレームを予め設定されたサンプリングルールに従ってサンプリングして、対応する処理参照フレームを得ることは、
    現在参照フレームの解像度が現在符号化ビデオフレームの解像度より高い場合に、現在参照フレームをダウンサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得て、現在参照フレームの解像度が現在符号化ビデオフレームの解像度よりも低い場合に、現在参照フレームをアップサンプリングして、現在符号化ビデオフレームと同じ解像度の処理参照フレームを得ること、を含む、
    ことを特徴とする請求項に記載の記憶媒体。
JP2019523039A 2017-03-21 2018-03-09 ビデオ符号化方法、コンピュータ装置および記憶媒体 Active JP6854888B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201710170734.8 2017-03-21
CN201710170734.8A CN107155107B (zh) 2017-03-21 2017-03-21 视频编码方法和装置、视频解码方法和装置
PCT/CN2018/078609 WO2018171447A1 (zh) 2017-03-21 2018-03-09 视频编码方法、视频解码方法、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
JP2019537365A JP2019537365A (ja) 2019-12-19
JP6854888B2 true JP6854888B2 (ja) 2021-04-07

Family

ID=59792454

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019523039A Active JP6854888B2 (ja) 2017-03-21 2018-03-09 ビデオ符号化方法、コンピュータ装置および記憶媒体

Country Status (6)

Country Link
US (1) US10721466B2 (ja)
EP (1) EP3606067A4 (ja)
JP (1) JP6854888B2 (ja)
KR (1) KR20190103297A (ja)
CN (2) CN107155107B (ja)
WO (1) WO2018171447A1 (ja)

Families Citing this family (85)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107155107B (zh) 2017-03-21 2018-08-03 腾讯科技(深圳)有限公司 视频编码方法和装置、视频解码方法和装置
CN107277519B (zh) * 2017-06-30 2019-11-15 武汉斗鱼网络科技有限公司 一种判断视频帧的帧类型的方法及电子设备
CN109819263B (zh) * 2017-11-22 2022-08-19 腾讯科技(深圳)有限公司 视频编码方法、装置、计算机设备及存储介质
CN110049321B (zh) * 2018-01-16 2022-09-06 腾讯科技(深圳)有限公司 视频编码方法、装置、设备及存储介质
CN110139168B (zh) * 2018-02-02 2021-07-13 中南大学 视频编码方法、装置、计算机设备及存储介质
WO2019153351A1 (en) * 2018-02-12 2019-08-15 SZ DJI Technology Co., Ltd. Image processing
CN111937401B (zh) * 2018-04-13 2022-08-16 皇家Kpn公司 基于块级超分辨率的视频编码的方法和装置
CN108391127B (zh) * 2018-04-27 2021-08-10 腾讯科技(深圳)有限公司 视频编码方法、装置、存储介质及设备
CN108769682B (zh) * 2018-06-20 2022-08-16 腾讯科技(深圳)有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108833923B (zh) * 2018-06-20 2022-03-29 腾讯科技(深圳)有限公司 视频编码、解码方法、装置、存储介质和计算机设备
CN108848377B (zh) 2018-06-20 2022-03-01 腾讯科技(深圳)有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108848380B (zh) * 2018-06-20 2021-11-30 腾讯科技(深圳)有限公司 视频编码和解码方法、装置、计算机设备及存储介质
CN108924553B (zh) * 2018-06-20 2021-10-08 腾讯科技(深圳)有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108848381B (zh) 2018-06-20 2021-09-24 腾讯科技(深圳)有限公司 视频编码方法、解码方法、装置、计算机设备及存储介质
CN108848376B (zh) * 2018-06-20 2022-03-01 腾讯科技(深圳)有限公司 视频编码、解码方法、装置和计算机设备
CN108833917B (zh) 2018-06-20 2022-04-08 腾讯科技(深圳)有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108769681B (zh) * 2018-06-20 2022-06-10 腾讯科技(深圳)有限公司 视频编码、解码方法、装置、计算机设备和存储介质
CN108833916B (zh) 2018-06-20 2021-09-24 腾讯科技(深圳)有限公司 视频编码、解码方法、装置、存储介质和计算机设备
CN108833918B (zh) * 2018-06-20 2021-09-17 腾讯科技(深圳)有限公司 视频编码方法、解码方法、装置、计算机设备及存储介质
CN109413421B (zh) * 2018-10-26 2021-01-19 张豪 视频编码方法、设备以及视频解码方法、设备
CN109379592B (zh) * 2018-10-26 2021-04-30 北京北方安恒利数码技术有限公司 图像编码方法及其设备
CN111193926B (zh) * 2018-11-14 2022-10-25 腾讯科技(深圳)有限公司 编码数据处理方法、装置、计算机设备和存储介质
CN111193927B (zh) 2018-11-14 2022-09-23 腾讯科技(深圳)有限公司 编码数据处理方法、装置、计算机设备和存储介质
US11290734B2 (en) * 2019-01-02 2022-03-29 Tencent America LLC Adaptive picture resolution rescaling for inter-prediction and display
EP3777170A4 (en) * 2019-03-01 2021-11-10 Alibaba Group Holding Limited ADAPTIVE RESOLUTION VIDEO CODING
CN111711817B (zh) * 2019-03-18 2023-02-10 四川大学 一种结合卷积神经网络的hevc帧内编码压缩性能优化方法
CN110139113B (zh) * 2019-04-30 2021-05-14 腾讯科技(深圳)有限公司 视频资源的传输参数分发方法及装置
CN111901605B (zh) * 2019-05-06 2022-04-29 阿里巴巴集团控股有限公司 视频处理方法、装置、电子设备及存储介质
KR20220030940A (ko) * 2019-07-09 2022-03-11 알리바바 그룹 홀딩 리미티드 해상도 적응형 비디오 코딩
CN110324708A (zh) * 2019-07-16 2019-10-11 浙江大华技术股份有限公司 视频处理方法、终端设备及计算机存储介质
CN112449182A (zh) * 2019-08-28 2021-03-05 广州虎牙科技有限公司 视频编码方法、装置、设备及存储介质
CN110536168B (zh) * 2019-09-11 2021-09-17 北京达佳互联信息技术有限公司 视频上传方法、装置、电子设备及存储介质
CN110572654B (zh) * 2019-09-27 2024-03-15 腾讯科技(深圳)有限公司 视频编码、解码方法和装置、存储介质及电子装置
CN110677721B (zh) * 2019-09-27 2022-09-13 腾讯科技(深圳)有限公司 视频编解码方法和装置及存储介质
CN110545433B (zh) * 2019-09-27 2023-03-21 腾讯科技(深圳)有限公司 视频编解码方法和装置及存储介质
CN110650357B (zh) 2019-09-27 2023-02-10 腾讯科技(深圳)有限公司 视频解码方法及装置
CN110636312B (zh) * 2019-09-27 2023-10-24 腾讯科技(深圳)有限公司 视频编解码方法和装置及存储介质
CN110572672B (zh) * 2019-09-27 2024-03-15 腾讯科技(深圳)有限公司 视频编解码方法和装置、存储介质及电子装置
CN110572673B (zh) * 2019-09-27 2024-04-09 腾讯科技(深圳)有限公司 视频编解码方法和装置、存储介质及电子装置
CN110636302B (zh) * 2019-09-27 2023-10-24 腾讯科技(深圳)有限公司 视频解码、编码方法和装置、存储介质及解码器、编码器
CN110572674B (zh) * 2019-09-27 2024-03-15 腾讯科技(深圳)有限公司 视频编解码方法和装置、存储介质及电子装置
CN110662071B (zh) * 2019-09-27 2023-10-24 腾讯科技(深圳)有限公司 视频解码方法和装置、存储介质及电子装置
CN110677653B (zh) * 2019-09-27 2024-01-09 腾讯科技(深圳)有限公司 视频编解码方法和装置及存储介质
CN110582022B (zh) * 2019-09-27 2022-12-30 腾讯科技(深圳)有限公司 视频编解码方法和装置及存储介质
CN110636295B (zh) * 2019-09-27 2023-10-24 腾讯科技(深圳)有限公司 视频编解码方法和装置、存储介质及电子装置
CN110636293B (zh) * 2019-09-27 2024-03-15 腾讯科技(深圳)有限公司 视频编码、解码方法和装置、存储介质及电子装置
CN110572677B (zh) * 2019-09-27 2023-10-24 腾讯科技(深圳)有限公司 视频编解码方法和装置、存储介质及电子装置
CN110677647B (zh) * 2019-09-27 2024-02-09 腾讯科技(深圳)有限公司 视频解码、编码方法和装置、存储介质与解码器、编码器
CN110545431B (zh) * 2019-09-27 2023-10-24 腾讯科技(深圳)有限公司 视频解码方法及装置、视频编码方法及装置
CN112801932A (zh) * 2019-10-28 2021-05-14 深圳市万普拉斯科技有限公司 图像显示方法、装置、电子设备和存储介质
CN111182310A (zh) * 2019-12-26 2020-05-19 腾讯科技(深圳)有限公司 视频处理方法、装置、计算机可读介质及电子设备
JP7500981B2 (ja) 2020-02-05 2024-06-18 富士通株式会社 画像符号化装置、画像復号装置、及び画像処理システム
CN111263153B (zh) * 2020-02-20 2022-10-11 广州市百果园信息技术有限公司 视频编码方法、装置、设备及存储介质
CN111343503B (zh) * 2020-03-31 2022-03-04 北京金山云网络技术有限公司 视频的转码方法、装置、电子设备及存储介质
CN111510740B (zh) * 2020-04-03 2022-08-30 咪咕文化科技有限公司 转码方法、装置、电子设备和计算机可读存储介质
CN113747161A (zh) * 2020-05-29 2021-12-03 北京金山云网络技术有限公司 信息的获取方法和装置、存储介质和电子装置
CN112001854A (zh) * 2020-07-14 2020-11-27 浙江大华技术股份有限公司 一种编码图像的修复方法及相关系统和装置
CN111787322B (zh) * 2020-08-04 2022-05-13 北京百度网讯科技有限公司 视频编码的方法、装置、电子设备及计算机可读存储介质
CN112383777B (zh) * 2020-09-28 2023-09-05 北京达佳互联信息技术有限公司 视频编码方法、装置、电子设备及存储介质
CN112351277B (zh) * 2020-11-04 2024-04-05 北京金山云网络技术有限公司 一种视频的编码方法和装置,视频的解码方法和装置
US20220159269A1 (en) * 2020-11-17 2022-05-19 Ofinno, Llc Reduced Residual Inter Prediction
CN112153082B (zh) * 2020-11-25 2021-03-09 深圳乐播科技有限公司 一种在安卓系统中平滑显示实时流视频画面的方法及装置
CN112672151B (zh) * 2020-12-09 2023-06-20 北京达佳互联信息技术有限公司 视频处理方法、装置、服务器及存储介质
CN112839234B (zh) * 2021-01-18 2021-11-26 陕西师范大学 屏幕内容编码标准帧内图像码率的估计方法
CN113301332B (zh) * 2021-04-12 2024-06-21 阿里巴巴创新公司 视频解码方法、系统和介质
CN113242433B (zh) * 2021-04-27 2022-01-21 中国科学院国家空间科学中心 图像压缩方法及基于arm多核异构处理器的图像压缩系统
CN113329228B (zh) * 2021-05-27 2024-04-26 杭州网易智企科技有限公司 视频编码方法、解码方法、装置、电子设备及存储介质
CN113452996B (zh) * 2021-06-08 2024-04-19 杭州网易智企科技有限公司 一种视频编码、解码方法及装置
CN113382258B (zh) * 2021-06-10 2022-10-21 北京百度网讯科技有限公司 视频编码方法、装置、设备和介质
CN113438485B (zh) * 2021-06-25 2022-11-01 北京金山云网络技术有限公司 图像编码方法、装置、电子设备和存储介质
CN113949871A (zh) * 2021-09-13 2022-01-18 镕铭微电子(济南)有限公司 一种视频编码方法及装置
KR20240090206A (ko) * 2021-09-23 2024-06-21 엘지전자 주식회사 영상 부호화/복호화 방법, 비트스트림을 전송하는 방법 및 비트스트림을 저장한 기록 매체
CN113766274A (zh) * 2021-09-23 2021-12-07 阿里云计算有限公司 图像编码、解码方法、电子设备及存储介质
CN113766232B (zh) * 2021-09-24 2024-06-07 百果园技术(新加坡)有限公司 一种编码、解码方法、装置、电子设备及存储介质
CN113781312B (zh) * 2021-11-11 2022-03-25 深圳思谋信息科技有限公司 视频增强方法、装置、计算机设备和存储介质
CN114302139A (zh) * 2021-12-10 2022-04-08 阿里巴巴(中国)有限公司 视频编码方法、视频解码方法及装置
CN114286136B (zh) * 2021-12-28 2024-05-31 咪咕文化科技有限公司 视频播放编码方法、装置、设备及计算机可读存储介质
CN114422805B (zh) * 2022-03-30 2022-09-02 浙江智慧视频安防创新中心有限公司 一种视频编解码方法、装置及设备
CN115134629B (zh) * 2022-05-23 2023-10-31 阿里巴巴(中国)有限公司 视频传输方法、系统、设备及存储介质
CN115209160A (zh) * 2022-06-13 2022-10-18 北京大学深圳研究生院 视频压缩方法、电子设备及可读存储介质
CN115474075A (zh) * 2022-07-31 2022-12-13 浙江工业大学 一种面向移动机器人的视频编码参数控制方法
CN115442589A (zh) * 2022-08-03 2022-12-06 珠海全志科技股份有限公司 基于视频帧信息的视频源压缩质量分析方法及装置
CN115225911B (zh) * 2022-08-19 2022-12-06 腾讯科技(深圳)有限公司 一种码率自适应方法、装置、计算机设备和存储介质
CN117750014A (zh) * 2022-11-24 2024-03-22 行吟信息科技(武汉)有限公司 视频编码方法、装置及存储介质
CN115802031A (zh) * 2023-01-28 2023-03-14 深圳传音控股股份有限公司 处理方法、处理设备及存储介质

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004023670A (ja) * 2002-06-19 2004-01-22 Nec Corp 画像符号化装置および同方式
JP2005286594A (ja) * 2004-03-29 2005-10-13 Nec Engineering Ltd 映像符号化装置
KR100679018B1 (ko) * 2004-09-07 2007-02-05 삼성전자주식회사 다계층 비디오 코딩 및 디코딩 방법, 비디오 인코더 및디코더
US8155189B2 (en) * 2005-10-19 2012-04-10 Freescale Semiconductor, Inc. System and method of coding mode decision for video encoding
US7956930B2 (en) * 2006-01-06 2011-06-07 Microsoft Corporation Resampling and picture resizing operations for multi-resolution video coding and decoding
CN101778275B (zh) * 2009-01-09 2012-05-02 深圳市融创天下科技股份有限公司 一种自适应时间域和空间域分辨率框架的图像处理方法
US8315310B2 (en) * 2010-01-08 2012-11-20 Research In Motion Limited Method and device for motion vector prediction in video transcoding using full resolution residuals
KR101522850B1 (ko) * 2010-01-14 2015-05-26 삼성전자주식회사 움직임 벡터를 부호화, 복호화하는 방법 및 장치
CN101938656B (zh) * 2010-09-27 2012-07-04 上海交通大学 基于关键帧超分辨率重建的视频编解码系统
US8780987B1 (en) * 2011-04-28 2014-07-15 Google Inc. Method and apparatus for encoding video by determining block resolution
US20120275511A1 (en) * 2011-04-29 2012-11-01 Google Inc. System and method for providing content aware video adaptation
US9071841B2 (en) * 2011-05-17 2015-06-30 Microsoft Technology Licensing, Llc Video transcoding with dynamically modifiable spatial resolution
EP2536143B1 (en) * 2011-06-16 2015-01-14 Axis AB Method and a digital video encoder system for encoding digital video data
CN102355584B (zh) * 2011-10-31 2013-09-25 电子科技大学 基于帧内预测编码模式的码率控制方法
CN103813174B (zh) * 2012-11-12 2016-04-27 腾讯科技(深圳)有限公司 一种混合分辨率编解码方法和装置
CN105187824A (zh) * 2014-06-10 2015-12-23 杭州海康威视数字技术股份有限公司 图像编码方法和装置以及图像解码方法和装置
CN104410861A (zh) * 2014-11-24 2015-03-11 华为技术有限公司 视频编码方法及装置
GB2534409A (en) * 2015-01-23 2016-07-27 Sony Corp Data encoding and decoding
US9788077B1 (en) * 2016-03-18 2017-10-10 Amazon Technologies, Inc. Rendition switching
CN105959700B (zh) * 2016-05-31 2020-04-14 腾讯科技(深圳)有限公司 视频图像编码的方法、装置、存储介质和终端设备
CN106162180A (zh) * 2016-06-30 2016-11-23 北京奇艺世纪科技有限公司 一种图像编解码方法及装置
US10148963B2 (en) * 2016-09-23 2018-12-04 Arm Limited Methods of and apparatus for encoding data arrays
CN107155107B (zh) * 2017-03-21 2018-08-03 腾讯科技(深圳)有限公司 视频编码方法和装置、视频解码方法和装置

Also Published As

Publication number Publication date
US10721466B2 (en) 2020-07-21
CN108495130A (zh) 2018-09-04
JP2019537365A (ja) 2019-12-19
WO2018171447A1 (zh) 2018-09-27
KR20190103297A (ko) 2019-09-04
CN107155107B (zh) 2018-08-03
CN107155107A (zh) 2017-09-12
EP3606067A4 (en) 2020-11-04
US20190253704A1 (en) 2019-08-15
CN108495130B (zh) 2021-04-20
EP3606067A1 (en) 2020-02-05

Similar Documents

Publication Publication Date Title
JP6854888B2 (ja) ビデオ符号化方法、コンピュータ装置および記憶媒体
CN108848376B (zh) 视频编码、解码方法、装置和计算机设备
US11563974B2 (en) Method and apparatus for video decoding
US11323739B2 (en) Method and apparatus for video encoding and decoding
US11665350B2 (en) Method and apparatus for video encoding and decoding
US11206405B2 (en) Video encoding method and apparatus, video decoding method and apparatus, computer device, and storage medium
US11412229B2 (en) Method and apparatus for video encoding and decoding
US20230393802A1 (en) Real-time screen sharing
US11412228B2 (en) Method and apparatus for video encoding and decoding
JP7114153B2 (ja) ビデオエンコーディング、デコーディング方法、装置、コンピュータ機器及びコンピュータプログラム
CN108924553B (zh) 视频编码、解码方法、装置、计算机设备和存储介质
CN110049336B (zh) 视频编码方法和视频解码方法
US11330254B2 (en) Video encoding method and apparatus, video decoding method and apparatus, computer device, and storage medium
CN110753231A (zh) 多通道视频处理系统的方法与装置
US12041264B2 (en) Method and apparatus for video encoding and decoding

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190426

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200424

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200609

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200909

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210309

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210316

R150 Certificate of patent or registration of utility model

Ref document number: 6854888

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250