JP2007525902A - 圧縮デジタルビデオにおけるｍｐｅｇ損傷のグローバル指示に関するシステム及び方法 - Google Patents

圧縮デジタルビデオにおけるｍｐｅｇ損傷のグローバル指示に関するシステム及び方法 Download PDF

Info

Publication number
JP2007525902A
JP2007525902A JP2007500345A JP2007500345A JP2007525902A JP 2007525902 A JP2007525902 A JP 2007525902A JP 2007500345 A JP2007500345 A JP 2007500345A JP 2007500345 A JP2007500345 A JP 2007500345A JP 2007525902 A JP2007525902 A JP 2007525902A
Authority
JP
Japan
Prior art keywords
video
global indicator
value
encoded
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2007500345A
Other languages
English (en)
Inventor
リラ ボロクツキー
ゾン コーネリス コンラドゥス アドリアヌス マリア ヴァン
イビン ヤン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2007525902A publication Critical patent/JP2007525902A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Picture Signal Circuits (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

符号化ビデオ信号を処理するステップを決定する方法が、前記符号化ビデオ信号を復号化するステップと、前記復号化ビデオからフレームに関するグローバルインディケータ値を決定するステップと、前記グローバルインディケータに基づき前記フレームの前記復号化ビデオにビデオ処理を提供するステップと、を含む。加えて、符号化デジタルビデオ信号を処理する機器が、符号化ビデオ復号器と、メトリック計算モジュールと、ビデオ処理モジュールと、を備え、前記メトリック計算モジュールが、前記符号化ビデオ信号の品質を示すグローバルインディケータの少なくとも１つの値を計算し、前記メトリック計算モジュールが、前記グローバルインディケータを、前記値に応じて前記符号化ビデオ信号を選択に処理する前記ビデオ処理モジュールに供給する。

Description

本出願は、2003年12月4日に出願され、Boroczky等への「A Unified Metric For Digital Video Processing (UMDVP)」の表題を与えられる、国際特許出願第IB2003/0057号から35 U.S.C. §120及び35 USC §365(c)の下に優先権を請求する。この出願は、本譲渡人に割り当てられる。この出願の開示は、本文書において参照により特に組み込まれる。
圧縮デジタルビデオソースは、デジタル地上放送、デジタルケーブル／衛星、ＰＶＲ（パーソナルビデオレコーダ）、ＤＶＤ等を通じて現代の家族に入ってきている。出現しているデジタルビデオ製品は、消費者に革命的な経験をもたらしている。同時に、これらは、ビデオ処理機能に関して新たな挑戦を生じさせてもいる。例えば、低ビットレートが、しばしば、帯域幅効率を得るために選択される。ビットレートが低くなればなるほど、圧縮符号化及び復号化処理によって導入される損傷は、不愉快なものになる。
標準画質ビデオのデジタル地上テレビ放送に関して、約6Mbit/sのビットレートが、画像品質と伝送帯域幅効率との間の良好な妥協点であると考慮される。（これの更なる詳細は、“MPEG-2 Video Compressions,”IEEE Electronics & Communication Engineering Journal,December 1995,pp.257-264に見出され得る。）しかし、放送局は、ときどき、多重化によりより多くの番組を有するために、6Mbit/sよりかなり低いビットレートを選択する。一方で、多くの処理機能は、デジタル圧縮を考慮するのに失敗する。結果として、これらは、次善に圧縮デジタルビデオに実行し得る。
MPEG-2は、デジタルビデオ圧縮標準として広く採用されており、新しいデジタルテレビサービスの基礎である。個々のMPEG-2後処理技法を方向付けるメトリック(metrics)が開発されている。斯様なメトリックの１つは、“A New Enhancement Method for Digital Video Applications”,IEEE Transactions on Consumer Electronics,Vol.48,No.3,August 2002,pp.435-443における記事に規定される。この記事において、復号化された圧縮デジタルビデオの後処理に関するシャープネス増大方法の実行を向上する有用性メトリック（ＵＭＥ：Usefulness Metric for Enhancement）が規定される。しかし、完全なデジタルビデオ後処理システムは、シャープネス増大だけでなく、解像度増大及びアーチファクト低減も含まなければならない。シャープネス増大に関するＵＭＥ及び他のメトリックのフォーカスだけでは、これらの有用性を制限する。
画像品質は、（例えばＤＴＶ，ＤＶＤ，ＤＶＤレコード等の）デジタルビデオ製品に関する最も重要な点のうちの１つである。これらの製品は、ビデオリソースをMPEG-2で受信及び／又は記憶する。MPEG-2圧縮標準は、ブロックに基づくＤＣＴ変換を用い、画質品質を低減する符号化アーチファクトになり得る不可逆(lossy)圧縮である。これらの符号化アーチファクトの最も一般的かつ視覚的なものは、ブロック歪(blockiness)及びリンギング(ringing)である。これらの製品で実行されるビデオ後処理機能のなかには、アップスケーリング及びシャープネス増大から成るシャープネス増大又は解像度増大があり、MPEG-2アーチファクト低減は、品質向上に関して重要な機能である。これら２つの機能にとって、互いの効果を相殺しないことが有益である。例えば、MPEG-2ブロッキングアーチファクト低減は、画像をぼやけさせる傾向がある一方で、シャープネス増大は、画像をよりシャープにする。これら２つの機能間の相互作用が無視される場合、終了結果は、以前のブロッキングアーチファクト低減作用がブロック効果を低減したものの、シャープネス増大によるブロッキング効果を修復することになり得る。
ブロック歪は、隣接するブロックの個別の符号化により、ブロック境界において可視不連続性として現れる。リンギングは、通常滑らかなテクスチャの領域における高コントラストエッジに沿って最も明白であり、エッジから外側へ延在するリップルとして現れる。リンギングは、エッジの表現において重要な役割を演じる高周波数ＤＣＴコンポーネントの突然の切頭により生じられる。
特定の既知のメトリックは、ビデオエンハンスメントを提供するのに、及びアーチファクト低減及び他のビデオ劣化の潜在的なソースを扱うのに必須な情報を提供するのに有益である。しかし、これら既知のメトリックの決定は、非常に複雑な計算技法を必要とする。斯様であるので、これらの技法を用いるビデオ品質強化は、通常、より費用掛かるコンポーネントに関して留保される。
したがって必要とされるものは、少なくとも上記で参照される既知の技法の欠点を対処する信号のビデオ品質のメトリックを決定する方法及び機器である。
１つの例証の実施例によると、符号化ビデオ信号を処理するステップを決定する方法が、前記符号化ビデオ信号を復号化するステップと、前記復号化ビデオ信号からフレームに関するグローバルインディケータ値を決定するステップと、前記グローバルインディケータに基づき前記フレームの前記復号化ビデオにビデオ処理を提供するステップと、を含む。
別の例証の実施例によると、符号化デジタルビデオ信号を処理する機器が、符号化ビデオ復号器と、メトリック計算モジュールと、ビデオ処理モジュールと、を備え、前記メトリック計算モジュールが、前記符号化ビデオ信号の品質を示すグローバルインディケータの少なくとも１つの値を計算し、前記メトリック計算モジュールが、前記値に応じて前記符号化ビデオ信号を選択に処理する前記ビデオ処理モジュールに前記グローバルインディケータ値を供給する。
以下の詳細な説明において、制限する目的ではなく説明する目的で、特定の詳細を開示する例証の実施例が、本発明の完全な理解を提供するために示される。しかし、本発明が本文書で開示される特定の詳細から逸脱する他の実施例で実施され得ることは、本発明の利益を有した当業者にとって明らかである。更に、周知の機器及び方法の説明は、本発明の説明を曖昧にしないようにするために省略され得る。斯様な方法及び機器は、該例証の実施例を実施することにおいて本発明者の考慮の範囲内に明らかにある。可能であるいずれの箇所においても、同様の参照符号は、全体にわたり同様の特徴を参照する。
簡潔に言うと、例証の実施例は、符号化ビデオを処理する方法及び機器に対して描かれる。該例証の実施例は、フレーム内のビデオ信号の品質を示すメトリックを計算するステップを含む。例証的に、該メトリックは、フレーム毎のグローバルインディケータ（ここではGIframe又はＧＩと称される）と称され、該ビデオ信号の品質を定量化する１つ又は複数のパラメータから成り得る。２つの符号化パラメータが、例証的に、例証の実施例においてＧＩを計算するのに用いられる。第１は、量子化パラメータ(q_scale)であり、第２は、輝度ブロックを符号化するのに費やされるビットの数(num_bits)である。q_scaleは、各１６×１６画素マクロブロックに関する量子化スケールである。このパラメータは、直ちに、符号化ビデオビットストリームから抽出され得る。更に、各８×８ブロックに関するnum_bitsは、直ちに、わずかな計算費用で復号化ビットストリームから決定され得る。更には、色度ブロックを符号化するのに費やされるビットの数もＧＩを計算するのに用いられ得ることを特記される。
本文書の更なる詳細に記載されるように、１つの例証の実施例において、ＧＩは、q_scaleに反比例する。別の例証の実施例において、ＧＩは、フレーム内の複数のマクロブロックに関するq_scale値の合計に反比例である。マクロブロックの数は、フレーム全体を含み得るか、又はその一部のみであり得る。更に、他の例証の実施例において、ＧＩは、num_bitsに比例し得る。更なる他の例証の実施例において、ＧＩは、フレームを構成する複数のブロックに関するnum_bitsの合計に比例し得る。同様に、ブロックの数は、フレーム全体を含み得るか、その一部のみであり得る。
特定の例証の実施例を説明する前に、該例証の実施例のビデオ圧縮技術は例証的にMPEG-2であることを特記される。しかし、他の圧縮技術が、例証の実施例を実施するのに有益である。これらの圧縮技術は、例証的に、２〜３例を挙げるとMPEG-1、MPEG-4及びMPEG-7を含む。通常、例証の実施例と調和を保つのに、メトリックが計算され、比較的簡素なやり方でフレームを特徴付けるのに用いられ得る。斯様であるので、様々なビデオ圧縮技術が、例証の実施例から有益であり得る。加えて、例証の実施例においてＧＩを計算するのに用いられる符号化パラメータnum_bits及びq_scaleは、単に例証的なものであることを特記される。斯様であるので、復号化ビデオ信号の品質を定量化するのに有用な他の符号化パラメータが用いられ得る。最後として、本文書に記載される方法及び装置は、ソフトウェア又はハードウェアで実施化され得、又はハードウェアとソフトウェアとの組合せが所望の性能レベルを得るために用いられ得る。
図１は、例証の実施例に従うビデオ処理システム１００の概略ブロック図である。該例証の実施例において、符号化／処理化ビデオフォーマットは、例証的に、MPEG-2であり、システムのモジュールは、MPEG-2信号を処理するためのものである。しかし、上記に参照されるように、他の種類の符号化も例証の実施例の範囲内で用いられ得る。斯様であるので、復号器モジュールがMPEG-2復号器としてラベル付けされる又は称される一方で、該復号器モジュールは、例えばMPEG-4復号器であり得ることを理解される。図１の例証の実施例のモジュールは、ここで説明される機能を実行するハードウェア若しくはソフトウェア、又はその両方を含むことも特記される。このハードウェハ及び／又はソフトウェアは、当該技術分野の通常の技術のうちの１つの範囲内にあり、したがって、例証の実施例の説明を曖昧にしないようにするために詳細には説明されない。
システム１００において、MPEG-2ビットストリーム１０１は、MPEG-2復号器１０２に入力され、ビットストリーム１０１を復号化する。復号器１０２は、ビットストリーム１０１から復号化ビデオ信号(ビットストリーム)１０４及び符号化情報１０３を出力する。該符号化情報は、本文書で説明される例証の実施例の方法に従いＧＩの計算を含む更なる処理に関して示されるグローバルインディケータ計算モジュール１０６に入力される。任意選択的に、（図示されない）タップが、例証の実施例の方法に従いＧＩの計算を含む更なる処理に関してＧＩ計算モジュール１０６に復号化ビデオ１０５の一部を供給する。
ＧＩ計算モジュール１０６は、ここで説明される方法によってＧＩを計算するハードウェア、ソフトウェア又はその両方を含む。ＧＩが計算された後に、ＧＩ値１０９はビデオ処理モジュール１０７に入力される。例証的に、該ビデオ処理モジュールは、ビデオエンハンスメントモジュール１１０、アーチファクト低減モジュール１１１及びノイズ低減モジュール１１２を含む。
当該説明が進むに連れて更に明らかになるように、モジュール１１０〜１１２は、復号化ビデオを特定の順序で処理し得る。順序だけでなく処理の程度も、各特定のフレーム又はフレームの一部に関するＧＩの値１０９によって支配されるＧＩによって決定され得ることを特記される。モジュールのすべてが必ずしも各フレームの符号化ビデオを処理しないことを特記される。例えば、あるフレームに関するＧＩ値が著しいアーチファクトが存在することを示す場合、ビデオエンハンスメントモジュール１１０がアーチファクトを増大させ得るので、ビデオエンハンスメントモジュール１１０は用いられ得ない。代替的に、アーチファクトを増大する可能性を低減するために、ビデオエンハンスメントモジュール１１０が信号を処理する前に、アーチファクト低減モジュール１１１が復号化ビデオ１０５を処理し得る。
ビデオ処理モジュール１０７及びこのモジュールから成るモジュールは、技術分野において既知である。斯様な装置は、デジタルビデオ処理技術の当業者の範囲にあり、例証の実施例の説明を曖昧にしないようにするために詳細には説明されない。しかし、例証の実施例のメトリックである、すなわちＧＩ（１０９）は、符号化ビデオ信号の品質についてこれらのモジュール（１１０〜１１２）にフィードバックを最終的に提供することを特記される。これらのモジュールの斯様な修正が、この新規のメトリックを用いるモジュールを適合するのに必要であり得るからである。
最終的に、モジュール１１０〜１１２のそれぞれが復号化ビデオ１０４を処理した後で、後処理ビデオ信号１０８が出力される。
図２は、例証の実施例に従う符号化デジタルビデオ信号２００の処理する方法のフローチャートである。方法２００のステップは、上記のビデオ処理システム１００などのシステムを組み合わせて有用に実行される。斯様であるので、当該方法の特定の態様を例証及び強調するために、システム１１０の様々なコンポーネントに参照がされる。
初めに、MPEG-2又は他のフォーマット化されたビットストリームなどの入力符号化デジタルビデオ信号（ビットストリーム）２０１は、ステップ２０２で、上記のモジュール１０２などの復号化モジュールによって復号化される。次に、ステップ２０３において、符号化情報が、モジュール１０６などのＧＩ計算モジュールに供給される。この情報が例証的な方法のこのステップで供給されることに加えて、復号化ビデオビットストリームの一部が供給され得る。この復号化ビデオは、後続のステップにおけるフレームに関するＧＩの計算で役に立ち得る。
ＧＩ計算モジュールは、ステップ２０４において、特定のフレームに関するＧＩ値を計算する。例証的な計算方法は、例証の実施例と組み合わせて以下に説明される。しかし、復号化ビデオの品質を決定するのに用いられ得る多数のパラメータが存在するので、該例証的な方法が制限をすることを意図されないことを強調される。むしろ、例証の実施例に従い、様々な他のパラメータが、ビデオの品質を示すビデオの特定のフレームに関するグローバルメトリックを比較的簡単な方法で及び実時間で計算するのに用いられ得、これにより更なるビデオ処理ステップがフレームのビデオの品質を向上するように生じられ得ることが強調される。
第１の方法において、フレームに関するＧＩ値は、
Figure 2007525902
 によって最小値として計算される。
この計算例において、２つのパラメータが、特定のフレームに関するＧＩ値を形成するのに用いられる。すなわち、第１因数であるq_scaleは、どのくらいの量子化が特定のマクロブロック（１６×１６の画素）に適用される必要があったかを示し、したがって、マクロブロックの圧縮の程度を示す。斯様であるので、小さいq_scale値は、著しい圧縮程度を有さない良い品質のビデオマクロブロックを示す。斯様なq_scale値は、マクロブロックが、比較的圧縮しやすく、ブロッキング及びリンギングアーチファクトが比較的ないということを示し得る。更に、斯様な値は、マクロブロックの関連する情報の比較的小さな部分が、圧縮により失われたことを示す。したがって、数式（１）により、q_scale値などの最低値は、良好なビデオフレームを示す、比較的高いＧＩ値を提供する傾向があり得る。
代替的に、q_scale値が、比較的高い場合、マクロブロックは、比較的高い程度の圧縮を必要としていて、かなり著しい量の関連するビデオ情報が、圧縮処理で失われている。更に、マクロブロックは、比較的大きな部分のブロッキング及びリンギングアーチファクトを有し得る。斯様なq_scale値は、低い品質ビデオフレームを示す比較的低いＧＩ値を提供する傾向にあり得る。
ＧＩが直接比例するもう１つの因数は、num_bitsすなわち８×８ブロック毎に符号化するのに用いられるビットの数である。理解され得るように、比較的大きい数のブロック毎のビットの数が存在する場合、より多くのビデオ情報及びおそらく良い品質のビデオブロックが存在する。したがって、この値が比較的大きい場合、フレームの品質はより良いものであり、おそらく劣等な品質フレームよりも少ないアーチファクトをフレームに有することになる。num_bitsが減少される場合、ＧＩは一定である。同一の「シーン」内容が減少され、品質は低下されると仮定する。この場合、フレームにおいてより多くのアーチファクトが存在する可能性がある。このことは、ビデオが可変ビットレートで符号化された場合に発生し得る。しかし、num_bitsの値が定数である場合、q_scaleが高ければ高い程（ＧＩが低い程）、フレームにアーチファクトがますます存在し得る（逆も同様である）。例証的に、このことは、一定ビットレート符号化に関して組み込まれ得る。
最後として、フレームの選択された領域に関する複数のＧＩ値は、数式（１）の修正版を通じて決定され得ることを特記される。これにより、平均ＧＩ値が決定され、復号化ビデオを処理するのにビデオ処理モジュールに入力され得る。代替的に、個々のＧＩ値は、個々の要件に基づき各領域に関して所望の処理（例えば、ビデオエンハンスメント、アーチファクト低減、ノイズ低減）をもたらすために、各個々の領域の復号化ビデオを選択的に処理するビデオ処理モジュールに入力され得る。
別の例証の実施例に従うと、グローバルインディケータは、
Figure 2007525902
 によって、ステップ２０４で計算され得る。
したがって、数式（２）は、フレーム内の合計ブロック数に関する比率（num_bits/q_scale）の平均を計算する。この値は、フレームの平均品質を示す。数式（１）を通じたＧＩの計算と関連させて説明されるように、当該例証の実施例のＧＩは、ビデオ処理モジュールに入力され、その値に基づき、品質を増加させるために、復号化ビデオに適用されるビデオ処理の種類及び適切な程度を選択するのに用いられる。例証の実施例のＧＩ値のように、数式（２）からのＧＩ値が大きければ大きいほど、ビデオの品質は良くなり、したがって、アーチファクト低減、ビデオ処理、及び場合によっては必要とされるより多くのシャープネス強化が少なくなる。前記値が低いほどビデオの品質は乏しくなり、フレームの復号化ビデオのより多くの処理が必要とされ得る。
前記例証の実施例と同様に、数式（２）は、複数の領域に適用され得、複数の平均値を生じ、各領域に関して１つである。数式（２）は、フレーム全体に対してではなく特定の領域に対する合計数及び平均値を用いて修正され得る。これらのＧＩ値は、各領域に関して個々の値を平均化することによってより正確な平均値を計算するのに用いられ得るか、又は上記のように、個別に、各領域に関して復号化ビデオを処理するのに用いられ得る。
上述のように、上記の例証の実施例で用いられるパラメータ及び適用される計算法は、可能な実施例の範囲を制限するように意図されていない。このことを達成するために、当該開示を精査した当業者は、これらの範囲内にある、ＧＩを計算するのに用いられ得る他のパラメータ及び計算法を理解し得ることは明らかである。これらは、当該実施例の範囲内にあるように意図される。
ビデオ信号が圧縮MPEG-2信号である当該実施例において、これらのＧＩ値は、Ｉ(Intra)フレームに関して計算され得ることを特記される。Ｐ(Predictive)フレーム及びＢ(Bi-directional)フレームに関しては、前のＩフレームに関して計算されたＧＩ値が用いられ得るか、又はＩフレームのＧＩ値は、Ｐ及びＢフレームがＩフレームよりわずかに低い品質を通常有するという事実を利用するように変調され得る。更に、シーン変化がＰ又はＢフレームで生じる場合、ＧＩは、フレーム内符号化ブロックのみを用いてフレームに関して１つ(又は複数)を計算することによってリセットされ得る。シーン変化の間において、ＧＩは、突然の変化を避けるために、低域通過フィルタを用いて一時的に処理され得る。
ステップ２０４でフレーム又は領域のＧＩ値が計算された後で、その値は、ビデオ処理モジュール１０９に伝送され、該ビデオ信号は、ステップ２０５において、ＧＩ値を用いて処理される。上記の参照されるように、ＧＩの値は、特定のフレーム又は領域の復号化ビデオの品質を示し、及び復号化ビデオ信号における欠陥、及び不足を適切に対処するために、ビデオ処理モジュール１０９のモジュール１１０〜１１２によって組み込まれる。例えば、ＧＩ値が低い場合、アーチファクトが存在する可能性がある。アーチファクト低減モジュールは、仮になんらかのビデオエンハンスメントが実行される場合、いずれのビデオエンハンスメントの前にこれらのアーチファクトを低減し得る。別の例を用いると、ＧＩ値が高い場合、復号化ビデオの品質は良好であり、比較的アーチファクトがない。この場合、アーチファクト低減は、オフにされ、ビデオエンハンスメントが実行される。必要である場合、ノイズ低減が、これらの例においてと同様に実行され得る。
最終的に、ステップ２０５の完了の後に、後処理ビデオ信号がステップ２０６で出力される。
この開示を考慮して、ここで説明される様々な方法及び装置は、所望の性能レベルを達成するために、ソフトウェア、ハードウェハ又は２つの組合せで実施化され得ることを特記される。更に、様々な方法及びパラメータは、例としてのみ含まれ、いかなる制限する意味にはない。したがって、記載の実施例は、単に例示的であり、フレーム又はフレームの複数の領域に関するグローバルインディケータを提供する。このグローバルインディケータは、該グローバルインディケータに基づき復号化ビデオビットストリームを処理するビデオ処理モジュールに入力され得る。この開示を考慮して、当業者は、添付の請求項の範囲内に留まる一方で、復号化デジタルビデオの自身の処理を決定するために、様々な装置及び方法の例を実施化し得る。
図１は、１つの例証の実施例によるビデオ処理システムの概略的なブロック図である。 図２は、１つの例証の実施例による符号化ビデオを処理する方法のフローチャートである。

Claims (20)

  1. 符号化ビデオ信号を処理する方法であって、
    前記符号化ビデオ信号を復号化するステップと、
    復号化ビデオ信号の符号化情報からフレームに関するグローバルインディケータ値を決定するステップと、
    前記グローバルインディケータに基づき前記フレームの前記復号化ビデオにビデオ処理を提供するステップと、
    を含む方法。
  2. 前記ビデオ処理が、ビデオエンハンスメント、アーチファクト低減、及びノイズ低減から本質的に成る、請求項１に記載の方法。
  3. 前記グローバルインディケータが、量子化パラメータに反比例する、請求項１に記載の方法。
  4. 前記グローバルインディケータが、輝度ブロックを符号化するのに費やされるビットの数に比例する、請求項１に記載の方法。
  5. 前記グローバルインディケータが、色度ブロックを符号化するのに費やされるビットの数に比例する、請求項１に記載の方法。
  6. 前記グローバルインディケータが、前記フレームの領域の複数のグローバルインディケータ値の平均値である、請求項１に記載の方法。
  7. 前記方法が、比較的大きい数のアーチファクトを示す前記グローバルインディケータの値に基づき前記ビデオエンハンスメントを実行しないステップを更に含む、請求項２に記載の方法。
  8. 前記方法が、もし実行するとしても、比較的大きい数のアーチファクトを示す前記グローバルインディケータの値に基づき、前記アーチファクト低減を実行した後にのみ前記ビデオエンハンスメントを実行するステップを更に含む、請求項２に記載の方法。
  9. 前記方法が、比較的高品質な復号化ビデオ信号を示すグローバルインディケータの値に基づきビデオエンハンスメントステップを実行しないステップを更に含む、請求項２に記載の方法。
  10. 符号化ビデオ復号器モジュールと、
    メトリック計算モジュールと、
    ビデオ処理モジュールと、
    を備える、符号化デジタルビデオ信号を処理する機器であって、
    前記メトリック計算モジュールが、前記符号化ビデオ信号の品質を示すグローバルインディケータの少なくとも１つの値を計算し、前記メトリック計算モジュールが、前記グローバルインディケータを、前記符号化ビデオ信号を前記値に応じて選択に処理する前記ビデオ処理モジュールに供給する機器。
  11. 前記ビデオ処理モジュールが、ビデオエンハンスメントモジュールを含む、請求項１０に記載の機器。
  12. 前記ビデオ処理モジュールが、アーチファクト低減モジュールを含む、請求項１０に記載の機器。
  13. 前記グローバルインディケータが、量子化パラメータに反比例する、請求項１０に記載の機器。
  14. 前記グローバルインディケータが、色度ブロックを符号化するのに費やされるビットの数に比例する、請求項１０に記載の機器。
  15. 前記グローバルインディケータが、前記フレームの領域の複数のグローバルインディケータ値の平均値である、請求項１０に記載の機器。
  16. 前記モジュールのそれぞれが、ハードウェア、ソフトウェア、又はその両方で実施化される、請求項１０に記載の機器。
  17. 前記グローバルインディケータの値が比較的大きい数のアーチファクトを示す場合に、ビデオエンハンスメントステップが実行されない、請求項１１に記載の機器。
  18. 前記ビデオ処理モジュールが、もし実行するとしても、比較的大きい数のアーチファクトを示す前記グローバルインディケータの値に基づき、アーチファクト低減を実行した後にのみビデオエンハンスメントステップを実行する、請求項１０に記載の機器。
  19. 前記機器が、ビデオ表示装置に含まれる、請求項１０に記載の機器。
  20. 前記符号化ビデオが、MPEG-1、MPEG-2、MPEG-4又はMPEG-7のうちの１つを用いて符号化される、請求項１に記載の機器。
JP2007500345A 2004-02-27 2005-02-23 圧縮デジタルビデオにおけるｍｐｅｇ損傷のグローバル指示に関するシステム及び方法 Withdrawn JP2007525902A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US54867204P 2004-02-27 2004-02-27
PCT/IB2005/050665 WO2005086491A1 (en) 2004-02-27 2005-02-23 System and method for global indication of mpeg impairments in compressed digital video

Publications (1)

Publication Number Publication Date
JP2007525902A true JP2007525902A (ja) 2007-09-06

Family

ID=34919388

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007500345A Withdrawn JP2007525902A (ja) 2004-02-27 2005-02-23 圧縮デジタルビデオにおけるｍｐｅｇ損傷のグローバル指示に関するシステム及び方法

Country Status (6)

Country Link
US (1) US20070139564A1 (ja)
EP (1) EP1721469A1 (ja)
JP (1) JP2007525902A (ja)
KR (1) KR20060127159A (ja)
CN (1) CN1926878A (ja)
WO (1) WO2005086491A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8345765B2 (en) 2009-03-31 2013-01-01 Kabushiki Kaisha Toshiba Image coding distortion reduction apparatus and method

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008088482A1 (en) * 2006-12-28 2008-07-24 Thomson Licensing Method and apparatus for automatic visual artifact analysis and artifact reduction
EP2034443A1 (en) * 2007-09-06 2009-03-11 Thomson Licensing Method and apparatus for processing video data using cartoonization
JP5078837B2 (ja) * 2007-10-29 2012-11-21 キヤノン株式会社 符号化装置、符号化装置の制御方法及びコンピュータプログラム
KR20110005093A (ko) * 2009-07-09 2011-01-17 삼성전자주식회사 압축 노이즈를 감소시키기 위한 영상처리방법 및 장치
US11997275B2 (en) * 2018-08-27 2024-05-28 AT Technologies ULC Benefit-based bitrate distribution for video encoding

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100242636B1 (ko) * 1996-03-23 2000-02-01 윤종용 블록화효과 및 링잉노이즈 감소를 위한 신호적응후처리시스템
GB9822094D0 (en) * 1998-10-09 1998-12-02 Snell & Wilcox Ltd Improvements in data compression
EP1209624A1 (en) * 2000-11-27 2002-05-29 Sony International (Europe) GmbH Method for compressed imaging artefact reduction
US7161633B2 (en) * 2001-01-10 2007-01-09 Koninklijke Philips Electronics N.V. Apparatus and method for providing a usefulness metric based on coding information for video enhancement
US6862372B2 (en) * 2001-12-27 2005-03-01 Koninklijke Philips Electronics N.V. System for and method of sharpness enhancement using coding information and local spatial features

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8345765B2 (en) 2009-03-31 2013-01-01 Kabushiki Kaisha Toshiba Image coding distortion reduction apparatus and method

Also Published As

Publication number Publication date
EP1721469A1 (en) 2006-11-15
US20070139564A1 (en) 2007-06-21
WO2005086491A1 (en) 2005-09-15
CN1926878A (zh) 2007-03-07
KR20060127159A (ko) 2006-12-11

Similar Documents

Publication Publication Date Title
JP4334768B2 (ja) 圧縮映像のブリージングアーチファクトを低減する方法および装置
US6862372B2 (en) System for and method of sharpness enhancement using coding information and local spatial features
US20100254450A1 (en) Video coding method, video decoding method, video coding apparatus, video decoding apparatus, and corresponding program and integrated circuit
US8295633B2 (en) System and method for an adaptive de-blocking filter after decoding of compressed digital video
KR20050084266A (ko) 디지털 비디오 처리용 통합 규준
JPH09200759A (ja) ビデオ信号復号化システムおよびノイズ抑圧方法
JP2008205534A (ja) 符号化方式変換装置
JP5133290B2 (ja) 動画像符号化装置および復号装置
US7031388B2 (en) System for and method of sharpness enhancement for coded digital video
JP2007525902A (ja) 圧縮デジタルビデオにおけるｍｐｅｇ損傷のグローバル指示に関するシステム及び方法
US20020122603A1 (en) Method and system for sharpness enhancement for coded video
WO2016133865A1 (en) Inter-layer prediction for signals with enhanced dynamic range
US20020131512A1 (en) Apparatus and method for providing a usefulness metric based on coding information for video enhancement
US20120133836A1 (en) Frame level quantization estimation
JP3800435B2 (ja) 動画像信号処理装置
KR20100137022A (ko) 압축 화상 노이즈 제거 장치와 재생 장치
JP2008544621A (ja) ビデオエラー隠蔽を向上させる符号化及び復号の方法及び装置
US20090046783A1 (en) Method and Related Device for Decoding Video Streams
Yang et al. Joint resolution enhancement and artifact reduction for MPEG-2 encoded digital video
KR20070018590A (ko) 비디오 전송 시스템 및 디블로킹 제어 방법
Boroczky et al. Post-processing of compressed video using a unified metric for digital video processing
KR20050079690A (ko) 필터링 방법

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20080513