JP5970724B2 - ビデオ符号化圧縮品質を取得するための方法および装置 - Google Patents

ビデオ符号化圧縮品質を取得するための方法および装置 Download PDF

Info

Publication number
JP5970724B2
JP5970724B2 JP2015524628A JP2015524628A JP5970724B2 JP 5970724 B2 JP5970724 B2 JP 5970724B2 JP 2015524628 A JP2015524628 A JP 2015524628A JP 2015524628 A JP2015524628 A JP 2015524628A JP 5970724 B2 JP5970724 B2 JP 5970724B2
Authority
JP
Japan
Prior art keywords
video
complexity
frame
bit rate
rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015524628A
Other languages
English (en)
Other versions
JP2015528264A (ja
Inventor
李娜 ▲孫▼
李娜 ▲孫▼
山 高
山 高
清鵬 ▲謝▼
清鵬 ▲謝▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of JP2015528264A publication Critical patent/JP2015528264A/ja
Application granted granted Critical
Publication of JP5970724B2 publication Critical patent/JP5970724B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/02—Diagnosis, testing or measuring for television systems or their details for colour television signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Description

本発明は、データ処理技術の分野に関し、具体的には、ビデオ符号化圧縮品質を取得するための方法および装置に関する。
本発明は、2012年8月21日に中国国家知識財産権局に出願された中国特許出願第201210299000.7号「METHOD AND APPARATUS FOR ACQUIRING VIDEO CODING COMPRESSION QUALITY」の優先権を主張し、その全体を参照により本明細書に組み込む。
ネットワーク技術の発展とともに、ビデオオンデマンド、ウェブテレビ、テレビ電話などがブロードバンドネットワークの主なサービスとなっており、またこれらのサービスは、第3世代(3G、the 3rd Generation)ワイヤレスネットワークの主なサービスとなるだろう。ネットワークビデオの急速な発展という状況において、ネットワークビデオの品質を便利かつ効果的に評価する方法は重要な課題となっており、ネットワークビデオアプリケーションにおいて早急に解決する必要がある。
従来技術では、ネットワークビデオ品質評価方法は、完全基準ビデオ品質評価方法(full-reference video quality assessment method)を含む。この方法は、ピーク信号対雑音比(PSNR、Peak Signal to Noise Ratio)を計算する方法を使用することによってビデオの品質を評価し、本方法の処理は一般的に、元の基準ビデオおよび端末ビデオを取得するステップと、PSNRを計算するために元の基準ビデオと端末ビデオとを比較するステップと、PSNRの特定の値に応じてビデオ品質を決定するステップとを含む。
しかしながら、この方法では、完全な元の基準ビデオおよび端末ビデオを取得して、ビデオストリームを深く完全に解析する必要があり、したがって評価が非常に複雑であり、ビデオ品質評価をリアルタイムに実行することができない。
本発明の実施形態は、従来技術における問題を解決するために、評価の複雑性を低減することができ、またビデオ品質をリアルタイムに評価することを可能にする、ビデオ符号化圧縮品質を取得するための方法および装置を提供する。
前述の技術的な問題を解決するために、本発明の実施形態は、以下の技術的ソリューションを開示する。
一態様によれば、本発明の実施形態は、
ビデオストリーム情報を取得するステップであって、ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含むステップと、
ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算するステップであって、ビデオコンテンツ複雑性が、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含むステップと、
ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するステップとを含む、ビデオ符号化圧縮品質を取得するための方法を提供する。
さらに、ビデオストリーム情報を取得するステップは、
ビデオフレームタイプ、ビデオフレームサイズ、およびフレームレートを取得するステップと、
あらかじめ定められた時間内に、ビデオストリームの総データ量を取得するステップと、
ビデオストリームの総データ量対あらかじめ定められた時間の比率に従ってビットレートを決定するステップとを含む。
さらに、ビデオストリームの総データ量は、受信したビデオストリームのデータ量と、失われたビデオストリームのデータ量の合計である。
さらに、ビデオコンテンツ複雑性が時間複雑性を含むとき、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算するステップは、
ビデオフレームタイプおよびビデオフレームサイズに従って、あらかじめ定められた時間内にIフレームの平均サイズを計算するステップと、
ビットレート対Iフレームの平均サイズの比率に従って、時間複雑性を決定するステップとを含み、
ビデオコンテンツ複雑性が空間複雑性を含むとき、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算するステップは、
ビデオフレームタイプおよびビデオフレームサイズに従って、あらかじめ定められた時間内にPフレームの平均サイズを計算するステップと、
ビットレート対Pフレームの平均サイズの比率に従って、空間複雑性を決定するステップとを含む。
Figure 0005970724
さらに、時間複雑性は、具体的には、
Figure 0005970724
であり、上式で、TCCは時間複雑性であり、BRはビットレートであり、ABIはIフレームの平均サイズであり、a0は定数である。
さらに、ビデオストリーム情報はビデオフレーム量子化パラメータをさらに含み、
ビデオコンテンツ複雑性が時間複雑性を含むとき、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算するステップは、
ビデオフレーム量子化パラメータの場合、ビデオフレームタイプに従ってPフレームの各ピクセルのビット数を計算するステップと、
Pフレームの各ピクセルのビット数と、ビデオフレーム量子化パラメータに対応する第1のパラメトリック値とに従って、時間複雑性を計算するステップとを含み、
ビデオコンテンツ複雑性が空間複雑性を含むとき、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算するステップは、
ビデオフレーム量子化パラメータの場合、ビデオフレームタイプに従って、Iフレームの各ピクセルのビット数を計算するステップと、
Iフレームの各ピクセルのビット数と、ビデオフレーム量子化パラメータに対応する第2のパラメトリック値とに従って、空間複雑性を計算するステップとを含む。
さらに、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するステップの前に、該方法は、
ビットレートおよびフレームレートに従って、修正されたビットレートを計算するステップをさらに含み、
ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するステップは、
修正されたビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するステップを含む。
さらに、ビットレートおよびフレームレートに従って、修正されたビットレートを計算するステップは、
取得されたフレームレートと基準フレームレートとの間の、より小さい値を決定するステップと、
ビットレート対より小さい値の比率に従って、修正されたビットレートを決定するステップとを含む。
さらに、修正されたビットレートは、具体的には、
Figure 0005970724
であり、上式で、MBRは修正されたビットレートであり、BRはビットレートであり、fpsはフレームレートであり、30は基準フレームレートである。
さらに、修正されたビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するステップは、
修正されたビットレート、ビデオコンテンツ複雑性、およびビデオ品質評価パラメータに従って、ビデオ符号化圧縮歪みを計算するステップと、
ビデオ符号化圧縮歪み、およびフレームレートに従って、ビデオ符号化圧縮品質を計算するステップとを含む。
さらに、ビデオコンテンツ複雑性が空間複雑性だけを含むとき、ビデオ符号化圧縮歪みは、具体的には、
Figure 0005970724
であり、上式で、VDcはビデオ符号化圧縮歪みであり、MOSはビデオ品質評価パラメータであり、MOSmaxはビデオ品質評価パラメータの最大値であり、MOSminはビデオ品質評価パラメータの最小値であり、MBRは修正されたビットレートであり、TCCは時間複雑性であり、a1、a2、a3、およびa4は定数である。
さらに、ビデオ符号化圧縮歪み、およびフレームレートに従って、ビデオ符号化圧縮品質を計算するステップは、
フレームレートが24以上であるとき、ビデオ品質評価パラメータの最大値と、ビデオ符号化圧縮歪みとの間の差を、ビデオ符号化圧縮品質として使用するステップ、または、
フレームレートが24以下であるとき、ビデオコンテンツ複雑性およびフレームレートに基づいて、ビデオ品質評価パラメータの最大値と、ビデオ符号化圧縮歪みとの間の差を修正して、修正された結果をビデオ符号化圧縮品質として使用するステップを含む。
さらに、ビデオ符号化圧縮品質は、具体的には、
Figure 0005970724
である。
別の態様によれば、本発明の実施形態は、
ビデオストリーム情報を取得するように構成された情報取得ユニットであって、ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含む情報取得ユニットと、
情報取得ユニットによって取得されたビデオストリーム情報に従って、ビデオコンテンツ複雑性を計算するように構成された複雑性計算ユニットであって、ビデオコンテンツ複雑性が、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含む複雑性計算ユニットと、
情報取得ユニットによって取得されたビットレートおよびフレームレート、ならびに複雑性計算ユニットによって取得されたビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成された品質評価ユニットとを含む、ビデオ符号化圧縮品質を取得するための装置をさらに提供する。
さらに、情報取得ユニットは、
あらかじめ定められた時間内に、ビデオストリームの総データ量を取得して、ビデオストリームの総データ量対あらかじめ定められた時間の比率に従ってビットレートを決定するように構成された、ビットレート取得サブユニットを含む。
さらに、複雑性計算ユニットは、
ビデオコンテンツ複雑性が時間複雑性を含むとき、ビデオフレームタイプおよびビデオフレームサイズに従って、あらかじめ定められた時間内にIフレームの平均サイズを計算して、ビットレート対Iフレームの平均サイズの比率に従って、時間複雑性を決定するように構成された第1の時間サブユニットと、
ビデオコンテンツ複雑性が空間複雑性を含むとき、情報取得ユニットによって取得されたビデオフレームタイプおよびビデオフレームサイズに従って、あらかじめ定められた時間内にPフレームの平均サイズを計算して、ビットレート対Pフレームの平均サイズの比率に従って、空間複雑性を決定するように構成された第1の空間サブユニットとを含む。
さらに、複雑性計算ユニットは、
情報取得ユニットによって取得されたビデオストリーム情報が、ビデオフレーム量子化パラメータをさらに含み、ビデオコンテンツ複雑性が時間複雑性を含むとき、ビデオフレーム量子化パラメータの場合、ビデオフレームタイプに従って、Pフレームの各ピクセルのビット数を計算して、Pフレームの各ピクセルのビット数、およびビデオフレーム量子化パラメータに対応する第1のパラメトリック値に従って、時間複雑性を計算するように構成された第2の時間サブユニットと、
情報取得ユニットによって取得されたビデオストリーム情報が、ビデオフレーム量子化パラメータをさらに含み、ビデオコンテンツ複雑性が空間複雑性を含むとき、ビデオフレーム量子化パラメータのとき、ビデオフレームタイプに従って、Iフレームの各ピクセルのビット数を計算して、Iフレームの各ピクセルのビット数、およびビデオフレーム量子化パラメータに対応する第2のパラメトリック値に従って、空間複雑性を計算するように構成された第2の空間サブユニットとを含む。
さらに、該装置は、
品質評価ユニットが、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を決定する前に、ビットレートおよびフレームレートに従って、修正されたビットレートを計算するように構成されたビットレート修正ユニットをさらに含み、
品質評価ユニットが、ビットレート修正ユニットによって取得された修正されたビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように特に構成される。
さらに、ビットレート修正ユニットは、
情報取得ユニットによって取得されたフレームレートと基準フレームレートとの間の、より小さい値を決定するように構成された比較サブユニットと、
ビットレート対より小さい値の比率に従って、修正されたビットレートを決定するように構成された計算サブユニットとを含む。
さらに、品質評価ユニットは、
ビットレート修正ユニットによって取得された修正されたビットレート、ビデオコンテンツ複雑性、およびビデオ品質評価パラメータに従って、ビデオ符号化圧縮歪みを計算するように構成された歪み計算サブユニットと、
ビデオ符号化圧縮歪み、およびフレームレートに従って、ビデオ符号化圧縮品質を計算するように構成された評価サブユニットとを含む。
さらに、評価サブユニットは、フレームレートが24以上であるとき、ビデオ品質評価パラメータの最大値と、ビデオ符号化圧縮歪みとの間の差を、ビデオ符号化圧縮品質として使用する、または、フレームレートが24以下であるとき、ビデオコンテンツ複雑性およびフレームレートに基づいて、ビデオ品質評価パラメータの最大値と、ビデオ符号化圧縮歪みとの間の差を修正して、修正された結果をビデオ符号化圧縮品質として使用するように特に構成される。
別の態様によれば、本発明の実施形態は、第1のトランシーバと、第1のプロセッサとを含む端末であって、
第1のトランシーバが、ビデオストリームを受信するように構成され、
第1のプロセッサが、第1のトランシーバによって受信されたビデオストリームからビデオストリーム情報を取得して、ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含み、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算して、ビデオコンテンツ複雑性が、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含み、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成される端末をさらに提供する。
別の態様によれば、本発明の実施形態は、第2のトランシーバと、第2のプロセッサとを含む端末であって、
第2のトランシーバが、ビデオストリームを送信するように構成され、
第2のプロセッサが、第2のトランシーバによって送信されたビデオストリームからビデオストリーム情報を取得して、ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含み、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算して、ビデオコンテンツ複雑性が、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含み、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成される端末をさらに提供する。
別の態様によれば、本発明の実施形態は、ネットワーク側に配置され、第3のトランシーバと、第3のプロセッサとを含むサーバであって、
第3のトランシーバが、伝送端から受信端にビデオストリームを伝送するように構成され、
第3のプロセッサが、第3のトランシーバによって伝送されたビデオストリームからビデオストリーム情報を取得して、ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含み、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算して、ビデオコンテンツ複雑性が、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含み、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成されるサーバをさらに提供する。
本発明の実施形態では、ビデオストリームのビデオフレーム情報、ビットレート、フレームレート、およびビデオコンテンツ複雑性が取得される限り、ビデオ符号化圧縮品質を取得することができる。ビデオ符号化圧縮品質は、後続のビデオ品質評価において使用され得る。この処理では、完全な元の基準ビデオおよび完全な端末ビデオを取得して、特定のMVまたはビデオストリームの残余を深く解析する必要はない。この処理はビデオ品質評価の複雑性を大いに低減し、評価をリアルタイムに実行することができるようになる。さらに、ビデオコンテンツ特性(すなわち、ビデオコンテンツ複雑性)の影響、およびフレームレートの影響が考慮されるので、評価された符号化圧縮品質は、人間の目の主観的感覚をより良く満足させる。
本発明の実施形態における、または従来技術における技術的ソリューションをより明確に説明するために、以下で、実施形態または従来技術を説明するために必要な添付の図面を簡単に紹介する。創造的努力なしに、当業者がこれらの添付の図面から他の図面を依然として導き出すことができることは明らかである。
本発明による、ビデオ符号化圧縮品質を取得するための方法の第1の実施形態のフローチャートである。 本発明による、ビデオ符号化圧縮品質を取得するための方法の第2の実施形態のフローチャートである。 図2に示された実施形態において、修正されたビットレートを取得するための方法のフローチャートである。 図2に示された実施形態において、時間複雑性を取得するための方法のフローチャートである。 本発明による、ビデオ符号化圧縮品質を取得するための方法の第3の実施形態のフローチャートである。 図5に示された実施形態において、空間複雑性を取得するための方法のフローチャートである。 本発明による、ビデオ符号化圧縮品質を取得するための方法の第4の実施形態のフローチャートである。 本発明による、ビデオ符号化圧縮品質を取得するための方法の第5の実施形態のフローチャートである。 本発明による、ビデオ符号化圧縮品質を取得するための装置の第1の実施形態のブロック図である。 本発明による、ビデオ符号化圧縮品質を取得するための装置の第2の実施形態のブロック図である。 本発明による端末の第1の実施形態のブロック図である。 本発明による端末の第2の実施形態のブロック図である。 本発明によるサーバの実施形態のブロック図である。
当業者が、本発明の実施形態における技術的ソリューションをより良く理解できるようにするために、また本発明の実施形態の前述の目的、特徴、および利点をより明確かつより分かりやすくするために、以下で、添付の図面を参照して、本発明の実施形態の技術的ソリューションをより詳細に説明する。
図1を参照すると、図1は、本発明によるビデオ符号化圧縮品質を取得するための方法の第1の実施形態のフローチャートである。
本発明のこの実施形態によって提供される方法は、ビデオストリームを送信するための伝送端に適用されてもよく、またビデオストリームを伝送するためのネットワーク側に適用されてもよく、ビデオストリームを受信するための受信端に適用されてもよい。該方法は、以下を含み得る。
ステップ101:ビデオストリーム情報を取得する。ビデオストリーム情報は、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含む。
本発明のこの実施形態では、まずビデオストリーム情報が取得される。該情報は、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含むことができ、もちろん他の情報、たとえばビデオフレーム量子化パラメータなども含むことができる。
ビデオフレームタイプは、具体的には、Iフレーム(Iフレームは、ビデオのフレーム内符号化フレームを指す)、およびPフレーム(Pフレームは、ビデオのフレーム間符号化フレームを指す)でよい。また、フレームタイプは、既存のフレームタイプ検出方法によって、またはデータストリームを解析することなどによって取得され得る。ビデオストリーム内のビデオフレームのサイズは、バイト(byte)、ビット(bit)、またはキロビット(Kbit)でよい。ビットレートの単位がキロビット/秒(Kbps)であるとき、ビデオフレームサイズの単位はキロビット(Kbit)である。
フレームレートは、ネットワーク伝送によって事前設定または取得されてもよく、また、RTPタイムスタンプに従って推定されてもよい。RTPタイムスタンプによって表わされる時間は、クロック周波数計算を通じて取得される。フレームレート=クロック周波数/表示順で隣接する2つのフレーム間のRTPタイムスタンプの増分である。通常、ビデオのクロック周波数は9000である。ビットレートは、1秒当たりのビデオデータ量である。計算についての詳細は、以下の実施形態の説明を参照されたい。
ステップ102:ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算する。ビデオコンテンツ複雑性は、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含む。
本発明の方法のこの実施形態では、ビデオコンテンツ複雑性は、時間複雑性だけを含んでもよく、空間複雑性だけを含んでもよく、また両方の複雑性を含んでもよい。時間複雑性が計算されるとき、時間複雑性は、ビデオフレーム内のIフレームのサイズと、前述のステップで取得されたビットレートとに従って具体的に決定することができ、また、ビデオストリーム情報がビデオフレーム量子化パラメータをさらに含むとき、量子化パラメータに対応するPフレームの各ピクセルに対応するバイト数によって決定することもできる。空間複雑性が計算されるとき、空間複雑性は、ビデオフレーム内のPフレームのサイズ、および前述のステップで取得されたビットレートに従って具体的に決定することができ、また、ビデオストリーム情報がビデオフレーム量子化パラメータをさらに含むとき、量子化パラメータに対応するIフレームの各ピクセルに対応するバイト数に従って決定することもできる。詳細については、以下の実施形態の説明を参照されたい。
ステップ103:ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算する。
ビットレートの後、フレームレートおよびビデオコンテンツ複雑性が取得されて、その3つに従ってビデオ符号化圧縮品質が直接決定され得る。また、ビットレートおよびビデコンテンツ複雑性に従って、まずビデオ符号化圧縮歪みを決定することができ、次いで、ビデオ符号化圧縮歪みおよびフレームレートに従ってビデオ符号化圧縮品質が決定される。
ビデオ符号化圧縮品質は、ビデオストリーム全体の品質を正確に評価する基礎である。ビデオ符号化圧縮品質に基づいて、ネットワークビデオの品質が評価され得る。一般的に、比較的高いビデオ符号化圧縮品質は、高いネットワークビデオ品質につながる。
本発明のこの実施形態では、前述のステップにおいて、ビデオストリームのビデオフレーム情報、ビットレート、フレームレート、およびビデオコンテンツ複雑性が取得される限り、ビデオ符号化圧縮品質を取得することができる。この処理では、完全な元の基準ビデオおよび完全な端末ビデオを取得して、特定のMVまたはビデオストリームの残余を深く解析する必要はない。これによって、ビデオ品質評価の複雑性が大いに低減し、評価をリアルタイムに実行することができるようになる。さらに、ビデオコンテンツ特性(すなわち、ビデオコンテンツ複雑性)の影響、およびフレームレートの影響が考慮されるので、評価された符号化圧縮品質は、人間の目の主観的感覚をより良く満足させる。
図2を参照すると、図2は、本発明による、ビデオ符号化圧縮品質を取得するための方法の第2の実施形態のフローチャートである。
この実施形態は、該方法が、ビデオストリームを伝送するためにネットワーク側に適用される、またはビデオストリームを受信するために受信端に適用される例を使用することによって説明される。該方法は、以下を含み得る。
ステップ201:あらかじめ定められた時間内に、ビデオストリーム情報を取得する。ビデオストリーム情報は、Iフレームのサイズ、フレームレート、およびビデオストリームの総データ量を含む。
このステップでは、一定の時間内にビデオストリームがまず受信され、時間はMTとして表わされ、次いでビデオストリーム内の情報が取得される。
ビデオストリーム内のIフレームが、ビデオフレームのサイズを使用することによって、またはデータストリームを解析することによって取得されて、Iフレームのサイズがさらに取得され、
RTPタイムスタンプに従って、事前設定されたフレームレートが取得されるか、フレームレートが取得され、フレームレートがfpsとしてマークされ、
受信されたビデオデータパケットまたはビデオフレームに従って、失われたデータパケットまたはビデオフレームがあるかどうかが推測され、ある場合、失われたデータパケットまたはビデオフレームのデータ量が推測され、次いで、受信されたデータパケットまたはビデオフレームのデータ量と失われたデータ量との合計が計算され、MT内のビデオストリームの総データ量を取得できるようにして、総データ量は、ΣRTPpayloadSize(ビデオデータパケットのペイロードの総データ量)、またはΣFrameSize(ビデオフレームの総データ量)としてマークされる。失われたデータ量は、受信されたデータパケットまたはビデオフレームのデータ量に従って推測することができ、多くの方法がある。たとえば、失われたパケットのサイズは、正確に受信された以前のパケットのサイズと等しく、または失われたビデオフレームのサイズは、正確に受信された以前のフレームのサイズと等しい。
もちろん、前述のビデオストリーム情報は、ここには列挙されていない他の方法で取得することもできる。
ステップ202:ビットレートを取得するために、ビデオストリームの総データ量対時間の比率を計算する。
ビットレートは、
Figure 0005970724
または、
Figure 0005970724
であり、ビットレートの単位はキロビット/秒である。
もちろん、ビデオストリームの総データ量対時間の比率の関数が、ビットレートとして使用されてもよい。
ステップ203:ビットレートおよびフレームレートに従って、修正されたビットレートを計算する。
フレームレートの低減は、単一フレームの画質の向上につながる場合がある。したがって、この実施形態において修正されたビットレートを取得するために、前述の計算を通じて取得されたビットレートもフレームレートに従って修正され得る。具体的には、修正されたビットレートを取得する処理は、以下のステップ301〜302を含み得る。
ステップ301:ビデオストリームから取得されたフレームレートと基準フレームレートとの間のより小さい値を決定する。
人間の目の視覚機能の持続性のため、人間の目は、1秒当たり30フレームを超えるピクチャを区別することができない。したがって、30のフレームレートが基準として使用されてよく、すなわち、基準フレームレートは30でよい。もちろん、必要に応じて他の数が選択されてもよい。さらに、より小さい値、すなわちMin(fps, 30)が取得される。
ステップ302:計算されたビットレート対前述のより小さい値の比率に従って、修正されたビットレートを決定する。
修正されたビットレートはMBRとしてマークされ、
Figure 0005970724
である。他の実施形態では、この比率の別の倍数または関数も、修正されたビットレートとして選択されてよい。
ステップ203は、修正されたビットレートを使用する必要があるときに実行されてよく、この実施形態における順序に限定されない。他の実施形態では、ステップ203は含まれない場合がある。すなわち、後続の計算は、修正されたビットレートを使用することなしに、ビットレートが取得された後にビットレートに従って直接実行される。
ステップ204:ビットレート対Iフレームのサイズの比率に従って、時間複雑性を決定する。
ビデオ内に符号化圧縮歪みがあるとき、異なるビデオコンテンツ複雑性、すなわち、異なる時間複雑性および空間複雑性のために、同じビットレートで異なるデータストリームの主観的経験の間に大きな差がある。より低いビットレートの場合は特に、リッチなコンテンツを有するデータストリームの主観的経験は、シンプルなコンテンツを有するデータストリームの主観的経験よりも明らかに劣る。したがって、ビデオ符号化圧縮品質が計算されるとき、ビデオコンテンツ複雑性を考慮する必要がある。この実施形態では、説明のための例として時間コンテンツ複雑性が使用される。
大量のデータストリームの統計解析実験によって、特定のビットレートの場合、大きな時間複雑性のシーケンスのP/Bフレームは、一般的に、より小さい時間複雑性のシーケンスのP/Bフレームよりも多いが、平均的なIフレームのP/Bフレームよりも少ない。したがって、ビットレートBR対Iフレームの平均サイズの比率は、ビデオコンテンツ特性のうちの1つ、すなわち時間複雑性を、ある程度反映することができる。時間複雑性は、TCCとしてマークされる。
時間複雑性を決定するための方法は、具体的には、以下のステップ401〜402を含み得る。
ステップ401:あらかじめ定められた時間内に、Iフレームのサイズに従って、Iフレームの平均サイズを決定する。
このステップでは、あらかじめ定められた時間内に、ビデオストリームのすべてのIフレームを取得することができ、次いで、すべてのIフレームのサイズの平均値が、Iフレームの平均サイズとして決定される。また、平均値は、Iフレームのうちのいくつかを選択することによって計算することができる。Iフレームの平均サイズはABIとしてマークされる。
ステップ402:ビットレート対Iフレームの平均サイズの比率に従って、時間複雑性を決定する。
具体的には、時間複雑性は、以下の式を使用することによって計算することができる。
Figure 0005970724
上式で、a0は定数である。
ステップ205:修正されたビットレート、時間複雑性、およびビデオ品質評価パラメータに従って、ビデオ符号化圧縮歪みを計算する。
ビデオのより大きい時間複雑性は、同じビットレートで、より大きい圧縮歪みにつながる。具体的には、歪みは以下の式に従って計算することができる。
Figure 0005970724
上式で、VDcはビデオ符号化圧縮歪みであり、MOSはビデオ品質評価パラメータであり、MOSmaxはビデオ品質評価パラメータの最大値であって、ビデオの最高点であり(5段階マーキングシステムの場合は、5点)、MOSminはビデオ品質評価パラメータの最小値であって、ビデオの最小点であり(5段階マーキングシステムの場合は、1点)、a1、a2、a3、およびa4は定数である。
別の実施形態では、ビデオ符号化圧縮品質は、修正されたビットレートおよび時間複雑性に従って直接取得することもできる。別の実施形態では、ステップ203が実行されない場合、ステップ202で取得されたビットレートは修正されず、ビデオ符号化圧縮歪みまたはビデオ符号化圧縮品質も、ビットレートおよび時間複雑性に従って直接取得することができる。
ステップ206:ビデオ符号化圧縮歪みおよびフレームレートに従って、ビデオ符号化圧縮品質を計算する。
ビデオ符号化圧縮品質は、ビデオ品質評価パラメータの最大値と、ビデオ符号化圧縮歪みとの間の差を指す。しかしながら、ビデオのフレームレートが低下すると、再生中にビデオに時間的不連続性が発生する。より小さいフレームレートは、より明らかな不連続性、およびより劣った圧縮品質につながる。フレームレートの影響を考慮すると、ビデオ符号化圧縮品質は、具体的には、以下の式に従って計算することができる。
Figure 0005970724
フレームレートが24以上であるとき、ビデオ品質評価パラメータの最大値と、ビデオ符号化圧縮歪みとの間の差が、ビデオ符号化圧縮品質として使用される。フレームレートfpsが24を下回るとき、ビデオ再生中に不連続性が発生する。したがって、圧縮品質がある程度低下する。この場合、ビデオ品質評価パラメータの最大値と、ビデオ符号化圧縮歪みとの間の差が、時間複雑性に基づいて修正され、修正された結果が、ビデオ符号化圧縮品質として使用される。上式で、a5とb5の両方が定数であり、より小さいフレームレート、またはより大きい時間複雑性が、より劣った圧縮品質につながる。いくつかの適用シナリオでは、たとえば、端末デバイス(ネットワークデバイスまたはテストデバイス)の動作能力が非常に低いとき、このセクションに関連する式の特定の動作結果を、たとえば、
Figure 0005970724
のテーブルルックアップによって置換することができる。ビデオの品質は、ビデオ符号化圧縮品質によって測定することができる。
本発明のこの実施形態では、完全な元の基準ビデオおよび完全な端末ビデオを取得して、ビデオストリームを深く完全に解析する必要はなく、またビデオ符号化圧縮品質は、ビデオストリームのビットレートおよびフレームレートについての情報が取得される限り、ビデオ品質評価を完了するために取得され得る。評価の複雑性が低く、したがって評価をリアルタイムに達成することができる。さらに、この方法では、ビデオコンテンツ特性におけるフレームレートの影響および時間複雑性の影響が考慮されるので、この方法は、人間の目の視覚システムによる符号化圧縮歪みの認識をより良く満足させる。
図5を参照すると、図5は、本発明による、ビデオ符号化圧縮品質を取得するための方法の第3の実施形態のフローチャートである。
この実施形態は、該方法が、ビデオストリームを伝送するためにネットワーク側に適用される、またはビデオストリームを受信するために受信端に適用される例を依然として使用することによって説明される。この実施形態と、前述の実施形態との間の差は、前述の実施形態では、取得されたビデオ符号化圧縮品質において、ビデオコンテンツ複雑性における時間複雑性の影響だけが考慮されるが、この実施形態では、ビデオコンテンツ複雑性の別の特性、すなわち空間複雑性がさらに考慮されるという点にある。該方法は、以下のステップを含み得る。
ステップ501:あらかじめ定められた時間内に、ビデオストリームのフレームタイプ、フレームサイズ、フレームレート、ビットレート、修正されたビットレート、および時間複雑性を取得する。
このステップでは、ビデオフレームのサイズを使用することによって、またはデータストリームを解析することによって、ビデオストリーム内のIフレームおよびPフレームを取得することができ、IフレームのサイズおよびPフレームのサイズをさらに取得することができる。このステップでは、フレームレートfps、ビットレートBR、修正されたビットレートMBR、および時間複雑性TCCを取得するステップは、前述の実施形態におけるステップ201〜204と類似しており、ここでは繰り返さない。
ステップ502:ビットレートおよびPフレームのサイズに従って、空間複雑性を決定する。
大量のデータストリームの統計解析実験によって、特定のビットレートの場合、より大きな空間複雑性のシーケンスの平均的なIフレームは、一般的に、より小さい空間複雑性のシーケンスの平均的なIフレームよりも多いが、P/Bフレームの平均的なIフレームよりも少ない。したがって、ビットレートBR対Pフレームの平均サイズの比率は、ビデオコンテンツ特性のうちの1つ、すなわち空間複雑性を、ある程度反映することができる。空間複雑性は、SCCとしてマークされる。
空間複雑性を決定するための方法は、具体的には、以下のステップ601〜602を含み得る。
ステップ601:あらかじめ定められた時間内に、Pフレームのサイズに従って、Pフレームの平均サイズを決定する。
このステップでは、Pフレームの平均サイズを計算するための方法は、前述の実施形態のステップ401におけるIフレームの平均サイズを計算するための方法と類似しており、ここでは繰り返さない。Pフレームの平均サイズは、ABPとしてマークされる。
ステップ602:ビットレート対Pフレームの平均サイズの比率に従って、空間複雑性を決定する。
具体的には、空間複雑性は、以下の式を使用することによって計算することができる。
Figure 0005970724
上式で、b0は定数である。
ステップ503:修正されたビットレート、時間複雑性および空間複雑性、ならびにビデオ品質評価パラメータに従って、ビデオ符号化圧縮歪みを計算する。
ビデオのより大きい時間複雑性、または空間複雑性、あるいはより大きい時間複雑性と空間複雑性の両方は、同じビットレートでより大きい圧縮歪みにつながる。ビデオ符号化圧縮歪みは、以下の式に従って計算することができる。
Figure 0005970724
上式で、VDcはビデオ符号化圧縮歪みであり、MOSはビデオ品質評価パラメータであり、MOSmaxはビデオ品質評価パラメータの最大値であって、ビデオの最高点であり(5段階マーキングシステムの場合は、5点)、MOSminはビデオ品質評価パラメータの最小値であって、ビデオの最小点であり(5段階マーキングシステムの場合は、1点)、c1、d1、e1、c2、d2、およびe2は定数である。
ステップ504:ビデオ符号化圧縮歪みおよびフレームレートに従って、ビデオ符号化圧縮品質を計算する。
ビデオ符号化圧縮歪みが取得された後、前述の実施形態のステップ206における式と同じ式を使用することによって、ビデオ符号化圧縮品質を取得することができる。
本発明のこの実施形態では、ビデオ符号化圧縮品質は、ビデオストリームのビットレートおよびフレームレートについての情報が取得される限り、ビデオ品質評価を完了するために取得され得る。評価の複雑性が低く、したがって評価をリアルタイムに達成することができる。さらに、この方法ではビデオコンテンツ特性におけるフレームレートの影響、ならびに時間複雑性および空間複雑性の影響が考慮されるので、この方法は、人間の目の視覚システムによる符号化圧縮歪みの認識をより良く満足させる。
本発明の別の実施形態では、ビデオ符号化圧縮歪みが取得される時に、時間複雑性TCCを考慮することなしに、空間複雑性SCCの影響だけを考慮することができる。このとき、ビデオ符号化圧縮歪みは、以下の式に従って計算することができる。
Figure 0005970724
上式で、f1、f2、f3、およびf4は定数である。
フレームレートの影響を考慮すると、対応するビデオ符号化圧縮品質は、具体的には、ビデオ符号化圧縮品質を取得するために、前述の実施形態のステップ206における式と同じ式を使用することによって計算することができる。
図7を参照すると、図7は、本発明による、ビデオ符号化圧縮品質を取得するための方法の第4の実施形態のフローチャートである。
この実施形態は、該方法が、ビデオストリームを伝送するためにネットワーク側に適用される、またはビデオストリームを受信するために受信端に適用される例を依然として使用することによって説明される。この実施形態と、前述の実施形態との間の差は、ビデオコンテンツ複雑性、すなわち時間複雑性および空間複雑性を取得するための方法が、前述の実施形態における方法とは異なるという点にある。該方法は、以下のステップを含み得る。
ステップ701:あらかじめ定められた時間内に、ビデオストリームのフレームタイプ、フレームレート、ビットレート、修正されたビットレート、およびビデオフレーム量子化パラメータを取得する。
このステップでは、ビデオフレームのサイズを使用することによって、またはデータストリームを解析することによって、ビデオストリームのIフレームおよびPフレームを取得することができ、IフレームのサイズおよびPフレームのサイズをさらに取得することができる。このステップでは、フレームレートfps、ビットレートBR、および修正されたビットレートMBRを取得するステップは、前述の実施形態におけるステップ201〜203と類似しており、ここでは繰り返さない。
このステップでは、ビデオストリーム内のビデオフレームの量子化パラメータをさらに取得する必要があり、量子化パラメータはQPとしてマークされる。量子化パラメータ(QP)は、符号化処理にとって重要なパラメータである。このパラメータの設定は、ビデオ画像の符号化品質を決定する。より大きいQPは、より劣ったビデオ画質につながる。特定のQP値は、ビデオストリームを解析することによって取得することができる。
ステップ702:時間複雑性を計算する。
特定のQPの場合、より大きいPフレームは、ビデオのより大きい時間複雑性を示す。Pフレームの各ピクセルの平均ビット数(ABPPとしてマークされる)は、時間複雑性の値を反映することができる。時間複雑性を計算するステップは、
ビデオフレーム量子化パラメータの場合、ビデオフレームタイプに従ってPフレームの各ピクセルのビット数を計算するステップと、
Pフレームの各ピクセルのビット数、およびビデオフレーム量子化パラメータに対応する第1のパラメトリック値に従って、時間複雑性を計算するステップとを含み得る。
具体的には、時間複雑性は、以下の式に従って計算することができる。
TCC=h1・ABPP+h2
上式で、h1とh2の両方はQPに関連する第1のパラメータであり、すなわち各QP値がh1とh2のグループに対応する。
ビデオストリームの時間複雑性は2つの方法で計算することもできるが、この2つの方法に限定されない。ある方法は、TCCが各PフレームのQPおよびABPPに従って計算されて、次いで、平均値計算方法を使用することによって、ビデオストリーム全体のTCCが取得される。第2の方法は、ビデオストリーム全体におけるPフレームのQPの平均値およびABPPの平均値が計算されて、次いで、前述の式を使用することによって、ビデオストリーム全体のTCCが計算される。単一のフレームの時間複雑性を計算する方法についての詳細は、特許出願第200910161628.9号、公開第CN101635846B号「VIDEO QUALITY ASSESSMENT METHOD, SYSTEM AND APPARATUS」の記述を参照されたい。
ステップ703:空間複雑性を計算する。
特定のQPの場合、より大きいIフレームは、ビデオのより大きい空間複雑性を示す。Iフレームの各ピクセルの平均ビット数(ABIPとしてマークされる)は、空間複雑性の値を反映することができる。空間複雑性を計算する処理は、
ビデオフレーム量子化パラメータの場合、ビデオフレームタイプに従って、Iフレームの各ピクセルのビット数を計算するステップと、
Iフレームの各ピクセルのビット数、およびビデオフレーム量子化パラメータに対応する第2のパラメトリック値に従って、空間複雑性を計算するステップとを含み得る。
具体的には、空間複雑性は、以下の式に従って計算することができる。
SCC=j1・ABIP+j2
上式で、j1とj2の両方はQPに関連する第2のパラメータであり、すなわち各QP値がj1とj2のグループに対応する。
同様に、ビデオストリームの空間複雑性は2つの方法によって計算することもできるが、この2つの方法に限定されない。ある方法は、SCCが各IフレームのQPおよびABIPに従って計算されて、次いで、平均値計算方法を使用することによって、ビデオストリーム全体のSCCが取得される。第2の方法は、ビデオストリーム全体におけるIフレームのQPの平均値およびABIPの平均値が計算されて、次いで、前述の式を使用することによって、ビデオストリーム全体のSCCが計算される。単一のフレームの時間複雑性を計算する方法についての詳細は、特許出願第200910161628.9号、公開第CN101635846B号「VIDEO QUALITY ASSESSMENT METHOD, SYSTEM AND APPARATUS」の記述を参照されたい。
ステップ702および703は、順序を交換されてもよく、同時に実行されてもよい。
ステップ704:修正されたビットレート、時間複雑性、空間複雑性、およびビデオ品質評価パラメータに従って、ビデオ符号化圧縮歪みを計算する。
ステップ705:ビデオ符号化圧縮歪みおよびフレームレートに従って、ビデオ符号化圧縮品質を計算する。
TCCとSCCが決定された後、前述の実施形態のステップ503〜504における方法を参照することによって、ステップ704および705におけるビデオ符号化圧縮歪みおよびビデオ符号化圧縮品質を計算して、取得することができる。
別の実施形態では、ビデオ符号化圧縮歪みおよびビデオ符号化圧縮品質の計算は、TCCまたはSCCだけを使用することによって実行することもできる。処理についての詳細は、前述の実施形態における対応する説明を参照されたい。ここでは繰り返さない。
本発明のこの実施形態では、評価の複雑性が低減し、したがって評価をリアルタイムに達成することができる。さらに、この方法ではビデオコンテンツ特性におけるフレームレートの影響、ならびに時間複雑性および空間複雑性の影響が考慮されるので、この方法は、人間の目の視覚システムによる符号化圧縮歪みの認識をより良く満足させる。
図8を参照すると、図8は、本発明による、ビデオ符号化圧縮品質を取得するための方法の第5の実施形態のフローチャートである。
この実施形態は、該方法が、ビデオストリームを伝送するためにネットワーク側に適用される、またはビデオストリームを受信するために受信端に適用される例を依然として使用することによって説明される。該方法は、以下のステップを含み得る。
ステップ801:あらかじめ定められた時間内に、ビデオストリームのフレームタイプおよびビデフレーム量子化パラメータを取得する。
このステップでは、ビデオフレームのサイズを使用することによって、またはデータストリームを解析することによって、ビデオストリーム内のIフレームおよびPフレームが取得され、またビデオストリーム内のビデオフレームの量子化パラメータQPが取得される。
ステップ802:ビデオストリームの平均ビデオフレーム量子化パラメータに従って、ビデオストリームの基本的なビデオ符号化圧縮歪みを計算する。
人間の目の視覚マスキングのため、特定のQPの場合、大きな時間的複雑性と空間複雑性を有するビデオの圧縮歪みは比較的小さい。このステップでは、QPに従ってまず量子化ステップ(QPstep)が取得され、次いで、基本的なビデオ符号化圧縮歪みVD'cが、テーブルをルックアップすることによって取得されるか、式を使用することによって計算される。基本的なビデオ符号化圧縮歪みVD'cは、具体的には、以下の式を使用することによって取得され得る。
VDc'=(MOSmax-MOSmin)・func1(QP)、または、
VDc'=(MOSmax-MOSmin)・func1(QPstep)
上式で、func1(QP)はQPに正比例する関数であり、func1(QPstep)はQPstepに正比例する関数であり、func1(QP)とfunc1(QPstep)の両方は0と1との間であり、線形でもよく非線形でもよく、たとえばfunc1(QP)=k1+k2・QPである。
ステップ803:ビデオフレーム量子化パラメータの場合にPフレームの各ピクセルの平均ビット数に従って時間複雑性を決定して、ビデオフレーム量子化パラメータの場合にIフレームの各ピクセルの平均ビット数に従って空間複雑性を決定する。
このステップは、前述の実施形態におけるステップ702〜703と同じであり、ここでは繰り返さない。時間複雑性TCCおよび空間複雑性SCCが取得された後、次のステップ804が実行され得る。
ステップ804:時間複雑性と空間複雑性に従って、基本的なビデオ符号化圧縮歪みを修正して、ビデオ符号化圧縮歪みを計算する。
修正処理において、基本的なビデオ符号化圧縮歪みは、時間複雑性と空間複雑性の関数func2(TCC, SCC)に基づいて修正され得る。具体的には、修正は、以下の式を使用することによって実行され得る。
VDc=VDc'・func2(TCC, SCC)
上式で、func2(TCC, SCC)はTCCとSCCに反比例する関数であり、また0と1との間であり、より大きいTCCおよび/またはSCCは、より小さいfunc2(TCC, SCC)につながり、func2(TCC, SCC)は線形でも非線形でもよく、たとえば、func2(TCC, SCC)=k3・TCC+k4・SCC+k5である。
ステップ805:ビデオ符号化圧縮歪みおよびフレームレートに従って、ビデオ符号化圧縮品質を計算する。
TCC、SCC、およびVDcが決定された後、前述の実施形態におけるステップ504の方法を参照することによって、ビデオ符号化圧縮品質を計算して、取得することができる。
本発明のこの実施形態では、ビデオ符号化圧縮品質は、ビデオストリームのビットレートおよびフレームレートについての情報が取得される限り、ビデオ品質評価を完了するために取得され得る。評価の複雑性が低く、したがって評価をリアルタイムに達成することもできる。さらに、この方法ではビデオコンテンツ特性におけるフレームレートの影響、ならびに時間複雑性および空間複雑性の影響が考慮されるので、この方法は、人間の目の視覚システムによる符号化圧縮歪みの認識をより良く満足させる。
本発明の別の実施形態では、ビデオ符号化圧縮品質が取得される時に、空間複雑性SCCまたは時間複雑性TCCだけが考慮され得る。すなわち、空間複雑性の関数だけ、または時間複雑性の関数だけを使用することに従って、基本的なビデオ符号化圧縮歪みを修正することができ、ビデオ符号化圧縮品質は、ビデオ符号化圧縮歪みが取得された後にさらに決定される。
前述の実施形態におけるステップのシーケンスは必要に応じて調整することができるが、前述のステップシーケンスに限定されない。
該方法の前述の実施形態は、ビデオ品質評価を実行できるように、ビデオストリームを伝送するためにネットワーク側に適用されてもよく、ビデオストリームを受信するために受信端に適用されてもよい。
該方法の前述の実施形態は、ビデオストリームの伝送端にも適用することができる。伝送端、前述のネットワーク側、および受信端の間の差は、伝送端によって取得されたビデオストリーム情報において、ビデオデータパケットまたはビデオフレームの損失が発生しないので、ビデオストリームの総データ量は、送信されるべきビデオデータパケットのペイロードの総データ量、またはビデオフレームの総データ量と等しいという点にある。
本発明の実施形態における技法は、ソフトウェア、および必要な汎用ハードウェアプラットフォームによって実装され得ることを、当業者は明確に理解するべきである。そのような理解に基づいて、本質的に本発明の技術的ソリューション、または従来技術に寄与する部分、あるいは技術的ソリューションの一部は、ソフトウェア製品の形態で実装することができる。ソフトウェア製品は、ROM/RAM、磁気ディスク、または光ディスクなどの記憶媒体に格納され、コンピュータデバイス(パーソナルコンピュータ、サーバ、またはネットワークデバイスであってよい)に、本発明の実施形態において説明した方法のステップのうちのすべてまたは一部を実行するように指示するためのいくつかの命令を含む。
前述は、本発明の方法実施形態の説明である。前述の方法を実装するための装置を、以下で説明する。
図9を参照すると、図9は、本発明による、ビデオ符号化圧縮品質を取得するための装置の第1の実施形態のブロック図である。
該装置は、以下を含む。
ビデオストリーム情報を取得するように構成された情報取得ユニット901であって、ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含む、情報取得ユニット901と、
情報取得ユニット901によって取得されたビデオストリーム情報に従って、ビデオコンテンツ複雑性を計算するように構成された複雑性計算ユニット902であって、ビデオコンテンツ複雑性が、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含む複雑性計算ユニット902と、
情報取得ユニット901によって取得されたビットレートおよびフレームレート、ならびに複雑性計算ユニット902によって取得されたビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成された品質評価ユニット903とを含む、ビデオ符号化圧縮品質を取得するための装置をさらに提供する。
情報取得ユニット901は、ビデオストリーム情報をまず取得する。該情報は、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含むことができ、もちろん他の情報、たとえばビデオフレーム量子化パラメータなどを含むこともできる。複雑性計算ユニット902は、ビデオストリーム情報に従ってビデオコンテンツ複雑性を決定する。ビデオコンテンツ複雑性は、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含み得る。時間複雑性が計算されるとき、時間複雑性は、ビデオフレーム内のIフレームのサイズと、前述のステップによって取得されたビットレートとに従って具体的に決定することができ、また、ビデオストリーム情報がビデオフレーム量子化パラメータ情報をさらに含むとき、量子化パラメータに対応するPフレームの各ピクセルに対応するバイト数に従って決定することもできる。空間複雑性が計算されるとき、空間複雑性は、ビデオフレーム内のPフレームのサイズ、およびビットレートに従って具体的に決定することができ、また、ビデオストリーム情報がビデオフレーム量子化パラメータ情報をさらに含むとき、量子化パラメータに対応するIフレームの各ピクセルに対応するバイト数に従って決定することもできる。最後に、品質評価ユニット903は、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従ってビデオ符号化圧縮品質を決定することができ、また、ビットレートおよびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮歪みをまず決定して、次いで、ビデオ符号化圧縮歪みおよびフレームレートに従ってビデオ符号化圧縮品質を決定することができる。
本発明のこの実施形態では、前述のユニットによってビデオ符号化圧縮品質を取得することによって、装置が完全な元の基準ビデオおよび端末ビデオを取得して、特定のMVまたは残余を深く解析する必要がなくなる。これによって、ビデオ品質評価の複雑性が大いに低減し、評価をリアルタイムに実行することができるようになる。さらに、ビデオコンテンツ特性(すなわち、ビデオコンテンツ複雑性)の影響、およびフレームレートの影響が考慮されるので、評価された符号化圧縮品質は、人間の目の主観的感覚をより良く満足させる。
図10を参照すると、図10は、本発明による、ビデオ符号化圧縮品質を取得するための装置の第2の実施形態のブロック図である。
この実施形態では、該装置は、情報取得ユニット1001、複雑性計算ユニット1002、および品質評価ユニット1003以外に、ビットレート修正ユニット1004をさらに含み得る。
この実施形態では、情報取得ユニット1001は、あらかじめ定められた時間内に、ビデオストリームの総データ量を取得して、ビデオストリームの総データ量対あらかじめ定められた時間の比率に従ってビットレートを決定するように構成されたビットレート取得サブユニットを含み得る。
複雑性計算ユニット1002は、
ビデオコンテンツ複雑性が時間複雑性を含むとき、ビデオフレームタイプおよびビデオフレームサイズに従って、あらかじめ定められた時間内にIフレームの平均サイズを計算して、ビットレート対Iフレームの平均サイズの比率に従って、時間複雑性を決定するように構成された第1の時間サブユニット1021と、
ビデオコンテンツ複雑性が空間複雑性を含むとき、ビデオフレームタイプおよびビデオフレームサイズに従って、あらかじめ定められた時間内にPフレームの平均サイズを計算して、ビットレート対Pフレームの平均サイズの比率に従って、空間複雑性を決定するように構成された第1の空間サブユニット1022とを含み得る。
ビットレート修正ユニット1004は、品質評価ユニット1003が、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を決定する前に、ビットレートおよびフレームレートに従って、修正されたビットレートを計算するように構成される。ビットレート修正ユニット1004は、
情報取得ユニット1001によって取得されたフレームレートと基準フレームレートとの間の、より小さい値を決定するように構成された比較サブユニット1041と、
ビットレート対より小さい値の比率に従って、修正されたビットレートを決定するように構成された計算サブユニット1042とをさらに含み得る。
品質評価ユニット1003は、ビットレート修正ユニット1004によって取得された修正されたビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように特に構成される。品質評価ユニット1003は、
ビットレート修正ユニットによって取得された修正されたビットレート、ビデオコンテンツ複雑性、およびビデオ品質評価パラメータに従って、ビデオ符号化圧縮歪みを計算するように構成された歪み計算サブユニット1031と、
ビデオ符号化圧縮歪み、およびフレームレートに従って、ビデオ符号化圧縮品質を計算するように構成された評価サブユニット1032とを含み得る。評価サブユニット1032は、フレームレートが24以上であるとき、ビデオ品質評価パラメータの最大値と、ビデオ符号化圧縮歪みとの間の差を、ビデオ符号化圧縮品質として使用する、または、フレームレートが24以下であるとき、ビデオコンテンツ複雑性およびフレームレートに基づいて、ビデオ品質評価パラメータの最大値と、ビデオ符号化圧縮歪みとの間の差を修正して、修正された結果をビデオ符号化圧縮品質として使用するように特に構成される。
本発明の別の実施形態では、情報取得ユニットによって取得されたビデオストリーム情報が、ビデオフレーム量子化パラメータをさらに含む場合、複雑性計算ユニットは、
情報取得ユニットによって取得されたビデオストリーム情報が、ビデオフレーム量子化パラメータをさらに含み、ビデオコンテンツ複雑性が時間複雑性を含むとき、ビデオフレーム量子化パラメータの場合、ビデオフレームタイプに従って、Pフレームの各ピクセルのビット数を計算して、Pフレームの各ピクセルのビット数と、ビデオフレーム量子化パラメータに対応する第1のパラメトリック値とに従って、時間複雑性を計算するように構成された第2の時間サブユニットと、
情報取得ユニットによって取得されたビデオストリーム情報が、ビデオフレーム量子化パラメータをさらに含み、ビデオコンテンツ複雑性が空間複雑性を含むとき、ビデオフレーム量子化パラメータの場合、ビデオフレームタイプに従って、Iフレームの各ピクセルのビット数を計算して、Iフレームの各ピクセルのビット数と、ビデオフレーム量子化パラメータに対応する第2のパラメトリック値とに従って、空間複雑性を計算するように構成された第2の空間サブユニットとを含み得る。
ビデオコンテンツ複雑性が複雑性計算ユニットによって取得された後、ビットレート修正ユニット1004および品質評価ユニット1003によってビデオ符号化品質も取得され得る。
本発明のこの実施形態では、前述のユニットによってビデオ符号化圧縮品質を取得することによって、装置が完全な元の基準ビデオおよび端末ビデオを取得して、特定のMVまたは残余を深く解析する必要がなくなる。これによって、ビデオ品質評価の複雑性が大いに低減し、評価をリアルタイムに実行することができるようになる。さらに、ビデオコンテンツ特性(すなわち、ビデオコンテンツ複雑性)の影響、およびフレームレートの影響が考慮されるので、評価された符号化圧縮品質は、人間の目の主観的感覚をより良く満足させる。
図11を参照すると、図11は、本発明による端末の第1の実施形態のブロック図である。
この実施形態では、端末は、第1のトランシーバ1101と、第1のプロセッサ1102とを含み得る。
第1のトランシーバ1101は、ビデオストリームを受信するように構成される。
第1のプロセッサ1102は、第1のトランシーバ1101によって受信されたビデオストリームからビデオストリーム情報を取得して、ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含み、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算して、ビデオコンテンツ複雑性が、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含み、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成される。
この実施形態では、端末は、ビデオ符号化圧縮品質を取得するためにビデオストリームの受信端に配置されてよい。端末はビデオ品質評価の複雑性を大いに低減し、評価をリアルタイムに実行することができるようになるようになる。さらに、ビデオコンテンツ特性(すなわち、ビデオコンテンツ複雑性)の影響、およびフレームレートの影響が考慮されるので、評価された符号化圧縮品質は、人間の目の主観的感覚をより良く満足させる。
図12を参照すると、図12は、本発明による端末の第2の実施形態のブロック図である。
この実施形態では、端末は、第2のトランシーバ1201と、第2のプロセッサ1202とを含み得る。
第2のトランシーバ1201は、ビデオストリームを送信するように構成される。
第2のプロセッサ1202は、第2のトランシーバ1201によって送信されたビデオストリームからビデオストリーム情報を取得して、ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含み、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算して、ビデオコンテンツ複雑性が、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含み、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成される。
この実施形態では、端末は、後続のビデオ品質評価において使用するために、ビデオ符号化圧縮品質を取得するためにビデオストリームの伝送端に配置されてよい。端末はビデオ品質評価の複雑性を大いに低減し、評価をリアルタイムに実行することができるようになる。さらに、ビデオコンテンツ特性(すなわち、ビデオコンテンツ複雑性)の影響、およびフレームレートの影響が考慮されるので、評価された符号化圧縮品質は、人間の目の主観的感覚をより良く満足させる。
図13を参照すると、図13は、本発明によるサーバの実施形態のブロック図である。
サーバは、ネットワーク側に配置され、第3のトランシーバ1301と、第3のプロセッサ1302とを含み得る。
第3のトランシーバ1301は、伝送端から受信端にビデオストリームを伝送するように構成される。
第3のプロセッサ1302は、第3のトランシーバ1301によって伝送されたビデオストリームからビデオストリーム情報を取得して、ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを含み、ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算して、ビデオコンテンツ複雑性が、時間複雑性、または空間複雑性、あるいは時間複雑性と空間複雑性の両方を含み、ビットレート、フレームレート、およびビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成される。
この実施形態では、サーバが後続のビデオ品質評価において使用するためのビデオ符号化圧縮品質を取得できるようにするために、サーバは、ビデオストリームを伝送するために、ネットワーク側に配置されてよい。ビデオ品質の評価の複雑性が大いに低下して、評価をリアルタイムに実行できるようになる。さらに、ビデオコンテンツ特性(すなわち、ビデオコンテンツ複雑性)の影響、およびフレームレートの影響が考慮されるので、評価された符号化圧縮品質は、人間の目の主観的感覚をより良く満足させる。
この明細書における実施形態は、すべての進歩的な方法で説明されているが、実施形態における同一または類似の部分についてはこれらの実施形態が参照されてよく、各実施形態は他の実施形態との相違点に焦点を当てている。特に、システム実施形態は方法実施形態と基本的に類似しており、したがって簡単に説明されている。関連する部分については、方法実施形態における部分的な説明が参照されてよい。
前述の説明は本発明の実装形態方法であるが、本発明の保護範囲を限定することを意図するものではない。本発明の趣旨および原理から逸脱することなしに行われる、任意の修正、均等な置換、および改善は、本発明の保護範囲内に含まれるものとする。
901 情報取得ユニット
902 複雑性計算ユニット
903 品質評価ユニット
1001 情報取得ユニット
1002 複雑性計算ユニット
1003 品質評価ユニット
1004 ビットレート修正ユニット
1021 第1の時間サブユニット
1022 第1の空間サブユニット
1031 歪み計算サブユニット
1032 評価サブユニット
1041 比較サブユニット
1042 計算サブユニット
1101 第1のトランシーバ
1102 第1のプロセッサ
1201 第2のトランシーバ
1202 第2のプロセッサ
1301 第3のトランシーバ
1302 第3のプロセッサ

Claims (22)

  1. ビデオストリーム情報を取得するステップであって、前記ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを備えるステップと、
    前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算するステップであって、前記ビデオコンテンツ複雑性が、時間複雑性を備えるステップと、
    前記ビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するステップと、
    を備え、
    前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算する前記ステップは、
    前記ビデオフレームタイプおよび前記ビデオフレームサイズに従って、前記あらかじめ定められた時間内にIフレームの平均サイズを計算するステップと、
    前記ビットレート対前記Iフレームの前記平均サイズの比率に従って、前記時間複雑性を決定するステップとを備えることを特徴とするビデオ符号化圧縮品質を取得するための方法。
  2. ビデオストリーム情報を取得する前記ステップが、
    前記ビデオフレームタイプ、前記ビデオフレームサイズ、および前記フレームレートを取得するステップと、
    あらかじめ定められた時間内に、ビデオストリームの総データ量を取得するステップと、
    前記ビデオストリームの前記総データ量対前記あらかじめ定められた時間の比率に従って前記ビットレートを決定するステップとを備えることを特徴とする請求項1に記載の方法。
  3. 前記ビデオストリームの前記総データ量が、受信したビデオストリームのデータ量と、失われたビデオストリームのデータ量の合計であることを特徴とする請求項2に記載の方法。
  4. ビデオストリーム情報を取得するステップであって、前記ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを備えるステップと、
    前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算するステップであって、前記ビデオコンテンツ複雑性が、空間複雑性を備えるステップと、
    前記ビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するステップと
    を備え、
    前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算する前記ステップが、
    前記ビデオフレームタイプおよび前記ビデオフレームサイズに従って、前記あらかじめ定められた時間内にPフレームの平均サイズを計算するステップと、
    前記ビットレート対前記Pフレームの前記平均サイズの比率に従って、前記空間複雑性を決定するステップとを備えることを特徴とするビデオ符号化圧縮品質を取得するための方法。
  5. 前記時間複雑性が、具体的には、
    Figure 0005970724
     であり、上式で、TCCが前記時間複雑性であり、BRが前記ビットレートであり、ABIがIフ
    レームの前記平均サイズであり、a0が定数であることを特徴とする請求項1に記載の方法。
  6. ビデオ符号化圧縮品質を取得するための方法であって、
    ビデオストリーム情報を取得するステップであって、前記ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを備えるステップと、
    前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算するステップであって、前記ビデオコンテンツ複雑性が、時間複雑性を備えるステップと、
    前記ビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するステップと
    を備え、
    前記ビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するステップの前に、前記方法が、
    前記ビットレートおよび前記フレームレートに従って、修正されたビットレートを計算するステップをさらに備え、
    前記ビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算する前記ステップが、
    前記修正されたビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、前記ビデオ符号化圧縮品質を計算するステップを備えることを特徴とする方法。
  7. 前記ビットレートおよび前記フレームレートに従って、修正されたビットレートを計算する前記ステップが、
    前記取得されたフレームレートと基準フレームレートとの間の、より小さい値を決定するステップと、
    前記ビットレート対前記より小さい値の比率に従って、前記修正されたビットレートを決定するステップとを備えることを特徴とする請求項6に記載の方法。
  8. 前記修正されたビットレートが、具体的には、
    Figure 0005970724
     であり、上式で、MBRが前記修正されたビットレートであり、BRが前記ビットレートであ
    り、fpsが前記フレームレートであり、30が前記基準フレームレートであることを特徴とする請求項7に記載の方法。
  9. 前記修正されたビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って前記ビデオ符号化圧縮品質を計算する前記ステップが、
    前記修正されたビットレート、前記ビデオコンテンツ複雑性、およびビデオ品質評価パラメータに従って、ビデオ符号化圧縮歪みを計算するステップと、
    前記ビデオ符号化圧縮歪み、および前記フレームレートに従って、前記ビデオ符号化圧縮品質を計算するステップとを備えることを特徴とする請求項6から8のいずれか一項に記載の方法。
  10. 前記ビデオ符号化圧縮歪みが、具体的には、
    Figure 0005970724
     であり、上式で、VDcが前記ビデオ符号化圧縮歪みであり、MOSが前記ビデオ品質評価パラ
    メータであり、MOSmaxが前記ビデオ品質評価パラメータの最大値であり、MOSminが前記ビデオ品質評価パラメータの最小値であり、MBRが前記修正されたビットレートであり、TCCが前記時間複雑性であり、a1、a2、a3、およびa4が定数であることを特徴とする請求項9に記載の方法。
  11. 前記ビデオ符号化圧縮歪み、および前記フレームレートに従って、前記ビデオ符号化圧縮品質を計算する前記ステップが、
    前記フレームレートが24以上であるとき、前記ビデオ品質評価パラメータの最大値と、前記ビデオ符号化圧縮歪みとの間の差を、前記ビデオ符号化圧縮品質として使用するステップ、または、
    前記フレームレートが24以下であるとき、前記ビデオコンテンツ複雑性および前記フレームレートに基づいて、前記ビデオ品質評価パラメータの前記最大値と、前記ビデオ符号化圧縮歪みとの間の差を修正して、前記修正された結果を前記ビデオ符号化圧縮品質として使用するステップを備えることを特徴とする請求項9または10に記載の方法。
  12. 前記ビデオ符号化圧縮品質が、具体的には、
    Figure 0005970724
     であることを特徴とする請求項11に記載の方法。
  13. ビデオストリーム情報を取得するように構成された情報取得ユニットであって、前記ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを備える情報取得ユニットと、
    前記情報取得ユニットによって取得された前記ビデオストリーム情報に従って、ビデオコンテンツ複雑性を計算するように構成された複雑性計算ユニットであって、前記ビデオコンテンツ複雑性が、時間複雑性を備える複雑性計算ユニットであって、
    前記複雑性計算ユニットは、前記ビデオフレームタイプおよびビデオフレームサイズに従って、前記あらかじめ定められた時間内にIフレームの平均サイズを計算して、前記ビットレート対前記Iフレームの前記平均サイズの比率に従って、前記時間複雑性を決定するように構成された第1の時間サブユニットを備える複雑性計算ユニットと、
    前記情報取得ユニットによって取得された前記ビットレートおよび前記フレームレート、ならびに前記複雑性計算ユニットによって取得された前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成された品質評価ユニットとを備えることを特徴とするビデオ符号化圧縮品質を取得するための装置。
  14. 前記情報取得ユニットが、
    あらかじめ定められた時間内に、ビデオストリームの総データ量を取得して、前記ビデオストリームの前記総データ量対前記あらかじめ定められた時間の比率に従って前記ビットレートを決定するように構成されたビットレート取得サブユニットを備えることを特徴とする請求項13に記載の装置。
  15. ビデオストリーム情報を取得するように構成された情報取得ユニットであって、前記ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを備える情報取得ユニットと、
    前記情報取得ユニットによって取得された前記ビデオストリーム情報に従って、ビデオコンテンツ複雑性を計算するように構成された複雑性計算ユニットであって、前記ビデオコンテンツ複雑性が、空間複雑性を備える複雑性計算ユニットと、
    前記情報取得ユニットによって取得された前記ビットレートおよび前記フレームレート、ならびに前記複雑性計算ユニットによって取得された前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成された品質評価ユニットとを備え、
    前記複雑性計算ユニットが、
    前記ビデオフレームタイプおよび前記ビデオフレームサイズに従って、前記あらかじめ定められた時間内にPフレームの平均サイズを計算して、前記ビットレート対前記Pフレームの前記平均サイズの比率に従って、前記空間複雑性を決定するように構成された第1の空間サブユニットを備えることを特徴とするビデオ符号化圧縮品質を取得するための装置。
  16. ビデオストリーム情報を取得するように構成された情報取得ユニットであって、前記ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを備える情報取得ユニットと、
    前記情報取得ユニットによって取得された前記ビデオストリーム情報に従って、ビデオコンテンツ複雑性を計算するように構成された複雑性計算ユニットであって、前記ビデオコンテンツ複雑性が、時間複雑性または空間複雑性を備える複雑性計算ユニットと、
    前記情報取得ユニットによって取得された前記ビットレートおよび前記フレームレート、ならびに前記複雑性計算ユニットによって取得された前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成された品質評価ユニットと、
    前記品質評価ユニットが、前記ビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、前記ビデオ符号化圧縮品質を決定する前に、前記ビットレートおよび前記フレームレートに従って、修正されたビットレートを計算するように構成されたビットレート修正ユニットとを備え、
    前記品質評価ユニットが、前記ビットレート修正ユニットによって取得された前記修正されたビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、前記ビデオ符号化圧縮品質を計算するように特に構成されることを特徴とするビデオ符号化圧縮品質を取得するための装置。
  17. 前記ビットレート修正ユニットが、
    前記情報取得ユニットによって取得された前記フレームレートと基準フレームレートとの間の、より小さい値を決定するように構成された比較サブユニットと、
    前記ビットレート対前記より小さい値の比率に従って、前記修正されたビットレートを決定するように構成された計算サブユニットとを備えることを特徴とする請求項16に記載の装置。
  18. 前記品質評価ユニットが、
    前記ビットレート修正ユニットによって取得された前記修正されたビットレート、前記ビデオコンテンツ複雑性、およびビデオ品質評価パラメータに従って、ビデオ符号化圧縮歪みを計算するように構成された歪み計算サブユニットと、
    前記ビデオ符号化圧縮歪み、および前記フレームレートに従って、前記ビデオ符号化圧縮品質を計算するように構成された評価サブユニットとを備えることを特徴とする請求項16または17に記載の装置。
  19. 前記評価サブユニットが、前記フレームレートが24以上であるとき、前記ビデオ品質評価パラメータの最大値と、前記ビデオ符号化圧縮歪みとの間の差を、前記ビデオ符号化圧縮品質として使用する、または、前記フレームレートが24以下であるとき、前記ビデオコンテンツ複雑性および前記フレームレートに基づいて、前記ビデオ品質評価パラメータの前記最大値と、前記ビデオ符号化圧縮歪みとの間の差を修正して、前記修正された結果を前記ビデオ符号化圧縮品質として使用するように特に構成されることを特徴とする請求項18に記載の装置。
  20. トランシーバと、プロセッサとを備える端末であって、
    前記トランシーバが、ビデオストリームを受信するように構成され、
    前記プロセッサが、前記トランシーバによって受信された前記ビデオストリームからビデオストリーム情報を取得して、前記ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを備え、前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算して、前記ビデオコンテンツ複雑性が、時間複雑性を備え、前記ビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成され、
    前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算することは、
    前記ビデオフレームタイプおよび前記ビデオフレームサイズに従って、前記あらかじめ定められた時間内にIフレームの平均サイズを計算することと、
    前記ビットレート対前記Iフレームの前記平均サイズの比率に従って、前記時間複雑性を決定することとを含むことを特徴とする端末。
  21. トランシーバと、プロセッサとを備える端末であって、
    前記トランシーバが、ビデオストリームを送信するように構成され、
    前記プロセッサが、前記トランシーバによって送信された前記ビデオストリームからビデオストリーム情報を取得して、前記ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを備え、前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算して、前記ビデオコンテンツ複雑性が、時間複雑性を備え、前記ビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成され、
    前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算することは、
    前記ビデオフレームタイプおよび前記ビデオフレームサイズに従って、前記あらかじめ定められた時間内にIフレームの平均サイズを計算することと、
    前記ビットレート対前記Iフレームの前記平均サイズの比率に従って、前記時間複雑性を決定することとを含むことを特徴とする端末。
  22. ネットワーク側に配置され、トランシーバと、プロセッサとを備えるサーバであって、
    前記トランシーバが、伝送端から受信端にビデオストリームを伝送するように構成され、
    前記プロセッサが、前記トランシーバによって伝送された前記ビデオストリームからビデオストリーム情報を取得して、前記ビデオストリーム情報が、ビデオフレームタイプ、ビデオフレームサイズ、フレームレート、およびビットレートを備え、前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算して、前記ビデオコンテンツ複雑性が、時間複雑性を備え、前記ビットレート、前記フレームレート、および前記ビデオコンテンツ複雑性に従って、ビデオ符号化圧縮品質を計算するように構成され、
    前記ビデオストリーム情報に従ってビデオコンテンツ複雑性を計算することは、
    前記ビデオフレームタイプおよび前記ビデオフレームサイズに従って、前記あらかじめ定められた時間内にIフレームの平均サイズを計算することと、
    前記ビットレート対前記Iフレームの前記平均サイズの比率に従って、前記時間複雑性を決定することとを含むことを特徴とするサーバ。
JP2015524628A 2012-08-21 2013-08-20 ビデオ符号化圧縮品質を取得するための方法および装置 Active JP5970724B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201210299000.7A CN103634594B (zh) 2012-08-21 2012-08-21 一种获得视频编码压缩质量的方法及装置
CN201210299000.7 2012-08-21
PCT/CN2013/081818 WO2014029315A1 (zh) 2012-08-21 2013-08-20 一种获得视频编码压缩质量的方法及装置

Publications (2)

Publication Number Publication Date
JP2015528264A JP2015528264A (ja) 2015-09-24
JP5970724B2 true JP5970724B2 (ja) 2016-08-17

Family

ID=50149440

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015524628A Active JP5970724B2 (ja) 2012-08-21 2013-08-20 ビデオ符号化圧縮品質を取得するための方法および装置

Country Status (8)

Country Link
US (1) US9906784B2 (ja)
EP (1) EP2858364A4 (ja)
JP (1) JP5970724B2 (ja)
KR (1) KR101641994B1 (ja)
CN (2) CN104780369B (ja)
HK (1) HK1194577A1 (ja)
SG (1) SG11201408797RA (ja)
WO (1) WO2014029315A1 (ja)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103929637B (zh) * 2014-04-23 2016-03-30 无锡天脉聚源传媒科技有限公司 一种视频比较装置及其比较方法
CN105208388B (zh) * 2014-06-24 2019-03-05 深圳市腾讯计算机系统有限公司 视频通讯中动态调整编码帧率的方法和系统
CN104811694B (zh) 2015-04-28 2017-03-08 华为技术有限公司 一种视频数据质量评估的方法和装置
CN106713901B (zh) * 2015-11-18 2018-10-19 华为技术有限公司 一种视频质量评价方法及装置
CN105828069B (zh) * 2016-04-06 2019-01-18 上海交通大学 一种基于主观质量评估的编码器自适应调整方法
CN105847970A (zh) * 2016-04-06 2016-08-10 华为技术有限公司 视频显示质量的计算方法及设备
CN107404646B (zh) * 2016-05-20 2019-11-29 华为技术有限公司 视频质量评估的方法、装置和头端设备
CN107920279B (zh) 2016-10-08 2020-03-20 华为技术有限公司 评估视频质量的方法和设备
CN106791851B (zh) * 2016-12-07 2019-07-09 中国联合网络通信集团有限公司 一种基于可伸缩视频编码技术的视频传输方法及装置
CN108809893B (zh) * 2017-04-27 2020-03-27 华为技术有限公司 一种视频质量评估方法和设备
US10686867B2 (en) * 2017-05-12 2020-06-16 Guavus, Inc. Scaled in-order record input ingestion for file-based streams in multi-threaded environments
CN110876082B (zh) * 2018-08-31 2020-12-29 网宿科技股份有限公司 一种视频帧的复杂度的确定方法及装置
CN110213585B (zh) 2018-10-31 2022-10-28 腾讯科技（深圳）有限公司 视频编码方法、装置、计算机可读存储介质和计算机设备
CN109361918B (zh) * 2018-12-24 2021-04-20 天津天地伟业信息系统集成有限公司 一种新型三维视频编码质量评价方法
US11310475B2 (en) * 2019-08-05 2022-04-19 City University Of Hong Kong Video quality determination system and method
CN110536168B (zh) * 2019-09-11 2021-09-17 北京达佳互联信息技术有限公司 视频上传方法、装置、电子设备及存储介质
US11962781B2 (en) * 2020-02-13 2024-04-16 Ssimwave Inc. Video encoding complexity measure system
CN111327950B (zh) * 2020-03-05 2021-08-06 腾讯科技（深圳）有限公司 一种视频转码方法及装置
CN112437314B (zh) * 2020-10-16 2022-11-01 陕西师范大学 高效视频编码标准帧内图像质量估计方法
CN112861852A (zh) * 2021-01-19 2021-05-28 北京金山云网络技术有限公司 样本数据筛选方法、装置、电子设备及存储介质
CN113038142B (zh) * 2021-03-25 2022-11-01 北京金山云网络技术有限公司 视频数据的筛选方法、装置及电子设备
CN113366531A (zh) * 2021-03-31 2021-09-07 华为技术有限公司 图像处理方式的确定方法及装置
CN113271462B (zh) * 2021-05-17 2022-12-02 北京百度网讯科技有限公司 视频编码算法的评价方法及装置、计算机设备及介质

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6570922B1 (en) * 1998-11-24 2003-05-27 General Instrument Corporation Rate control for an MPEG transcoder without a priori knowledge of picture type
US8204323B2 (en) 2003-06-05 2012-06-19 Aware, Inc. Image quality control techniques
US7936973B2 (en) * 2003-07-18 2011-05-03 Koninklijke Philips Electronics N.V. Detecting a content item in a digital video stream
JP4377357B2 (ja) 2005-07-07 2009-12-02 日本電信電話株式会社 映像品質推定装置および映像品質推定方法
EP1958454B1 (en) 2005-12-05 2016-04-27 British Telecommunications Public Limited Company Non-intrusive video quality measurement
US7965203B2 (en) 2006-05-09 2011-06-21 Nippon Telegraph And Telephone Corporation Video quality estimation apparatus, method, and program
JP4490483B2 (ja) * 2006-05-09 2010-06-23 日本電信電話株式会社 映像品質推定装置、方法、およびプログラム
JP4817246B2 (ja) 2006-07-31 2011-11-16 Ｋｄｄｉ株式会社 映像品質の客観評価装置
EP2615833B1 (en) 2006-10-19 2014-05-21 Telefonaktiebolaget L M Ericsson (publ) A method for determining video quality
DE602007007587D1 (de) 2007-05-25 2010-08-19 Psytechnics Ltd Videoqualitätsbestimmung
JP4787210B2 (ja) 2007-05-30 2011-10-05 日本電信電話株式会社 映像品質推定方法、装置、およびプログラム
KR100996348B1 (ko) 2007-08-07 2010-11-23 주식회사 케이티테크 적응형 스트리밍 서비스 버퍼링 방법 및 이를 이용한스트리밍 서비스 수신장치
JP4796019B2 (ja) 2007-08-08 2011-10-19 日本電信電話株式会社 映像品質推定装置、方法、およびプログラム
CA2668003C (en) 2007-08-22 2013-04-02 Nippon Telegraph And Telephone Corporation Video quality estimation device, video quality estimation method, frame type judgment method, and recording medium
CN101442400B (zh) 2007-11-23 2012-03-07 国际商业机器公司 在数字内容传送系统中使用的质量管理器和方法
JP5172440B2 (ja) 2008-01-08 2013-03-27 日本電信電話株式会社 映像品質推定装置、方法およびプログラム
US20120020415A1 (en) 2008-01-18 2012-01-26 Hua Yang Method for assessing perceptual quality
EP2106154A1 (en) * 2008-03-28 2009-09-30 Deutsche Telekom AG Audio-visual quality estimation
JP4802209B2 (ja) 2008-05-09 2011-10-26 日本電信電話株式会社 映像品質推定方法、装置およびプログラム
JP4914400B2 (ja) 2008-05-09 2012-04-11 日本電信電話株式会社 品質推定方法、品質推定システム、ユーザ端末、品質管理端末およびプログラム
EP2296379A4 (en) * 2008-07-21 2011-07-20 Huawei Tech Co Ltd METHOD, SYSTEM AND DEVICE FOR EVALUATING A VIDEO QUALITY
CN101448175B (zh) 2008-12-25 2010-12-01 华东师范大学 一种无参考的流视频质量评估方法
CN101790107B (zh) 2009-01-22 2012-10-17 华为技术有限公司 一种测量视频质量的方法、装置及系统
JP5405915B2 (ja) * 2009-06-22 2014-02-05 日本電信電話株式会社 映像品質推定装置、映像品質推定方法および映像品質推定装置の制御プログラム
JP5221459B2 (ja) 2009-07-01 2013-06-26 日本電信電話株式会社 映像品質推定装置、システム、方法およびプログラム
EP2493205B1 (en) * 2009-10-22 2015-05-06 Nippon Telegraph And Telephone Corporation Video quality estimation device, video quality estimation method, and video quality estimation program
ES2675806T3 (es) * 2010-12-10 2018-07-12 Deutsche Telekom Ag Método y aparato para evaluar la calidad de una señal de video durante la codificación y transmisión de la señal de video
US8885050B2 (en) 2011-02-11 2014-11-11 Dialogic (Us) Inc. Video quality monitoring
CN104883563B (zh) 2011-04-11 2017-04-12 华为技术有限公司 一种视频数据质量评估方法和装置
CN102158729B (zh) * 2011-05-05 2012-11-28 西北工业大学 无参考的视频序列编码质量客观评价方法
US10075710B2 (en) * 2011-11-24 2018-09-11 Thomson Licensing Video quality measurement
PT2701397E (pt) 2012-08-20 2014-12-12 Deutsche Telekom Ag Modelo de qualidade de vídeo dependente do conteúdo para serviços de fluxo de vídeo

Also Published As

Publication number Publication date
SG11201408797RA (en) 2015-02-27
JP2015528264A (ja) 2015-09-24
WO2014029315A1 (zh) 2014-02-27
US9906784B2 (en) 2018-02-27
KR101641994B1 (ko) 2016-07-29
EP2858364A1 (en) 2015-04-08
CN103634594B (zh) 2015-04-29
KR20150027248A (ko) 2015-03-11
US20150110204A1 (en) 2015-04-23
EP2858364A4 (en) 2015-05-27
CN104780369A (zh) 2015-07-15
CN103634594A (zh) 2014-03-12
CN104780369B (zh) 2018-04-17
HK1194577A1 (en) 2014-10-17

Similar Documents

Publication Publication Date Title
JP5970724B2 (ja) ビデオ符号化圧縮品質を取得するための方法および装置
US9419875B2 (en) Video quality assessment method and apparatus
DK2347599T3 (en) METHOD AND SYSTEM FOR DETERMINING A QUALITY VALUE OF A VIDEO FLOW
KR101783071B1 (ko) 비디오 신호의 인코딩 또는 압축 중에 비디오 신호의 품질을 평가하는 방법 및 장치
JP4787210B2 (ja) 映像品質推定方法、装置、およびプログラム
EP2833639B1 (en) Method and device for evaluating video quality
EP2908522B1 (en) Method and device for evaluating video freeze distortion degree
JP4861371B2 (ja) 映像品質推定装置、方法、およびプログラム
WO2017084256A1 (zh) 一种视频质量评价方法及装置
US9723301B2 (en) Method and apparatus for context-based video quality assessment
JP4787303B2 (ja) 映像品質推定装置、方法、およびプログラム
EP2954677B1 (en) Method and apparatus for context-based video quality assessment
JP5707461B2 (ja) 映像品質推定装置、映像品質推定方法及びプログラム
JP2011004354A (ja) 映像品質推定装置、映像品質推定方法および映像品質推定装置の制御プログラム
JP6061778B2 (ja) 映像品質評価装置、映像品質評価方法及びプログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160323

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160614

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160621

R150 Certificate of patent or registration of utility model

Ref document number: 5970724

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250