JP4113114B2 - Golomb−riceコーディングを使用するdct圧縮 - Google Patents

Golomb−riceコーディングを使用するdct圧縮 Download PDF

Info

Publication number
JP4113114B2
JP4113114B2 JP2003509776A JP2003509776A JP4113114B2 JP 4113114 B2 JP4113114 B2 JP 4113114B2 JP 2003509776 A JP2003509776 A JP 2003509776A JP 2003509776 A JP2003509776 A JP 2003509776A JP 4113114 B2 JP4113114 B2 JP 4113114B2
Authority
JP
Japan
Prior art keywords
zero
data
block
run length
zero data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2003509776A
Other languages
English (en)
Other versions
JP2004531995A5 (ja
JP2004531995A (ja
Inventor
スヤガラジャン、カダヤム
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of JP2004531995A publication Critical patent/JP2004531995A/ja
Publication of JP2004531995A5 publication Critical patent/JP2004531995A5/ja
Application granted granted Critical
Publication of JP4113114B2 publication Critical patent/JP4113114B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/007Transform coding, e.g. discrete cosine transform
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/93Run-length coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Image Processing (AREA)

Description

本発明は画像処理及び圧縮に関する。さらに具体的には、本発明はGolomb−Riceを使用するDCT係数のコーディングに関する。
デジタル画像処理は、デジタル信号処理の一般的な学科において傑出した位置を占めている。人間の視覚の重要性はデジタル画像処理の技術と科学における強大な関心と進展を促してきた。フィルムまたは映画を映写するために使用される信号などのビデオ信号の送信と受信の分野では、画像圧縮技法に対して多様な改善が加えられている。最新の提案されているビデオシステムの多くはデジタル符号化技法を利用している。この分野の態様は画像データ圧縮、画像復元、及び画像特徴選択を含む。画像データ圧縮は、同時に一定の範囲内に歪みを維持する一方で、必要とされる帯域幅を最小限に抑えるために可能な限り少ないビットを利用し、効率的にデジタル通信チャネルの映像を送信しようとする試みを表している。画像復元はオブジェクトの真の画像を回復する努力を表している。通信チャネル上を送信されているデータ圧縮された画像は多様な要因によって歪められた可能性がある。劣化の原因はオブジェクトから画像を作成する際に最初に発生した可能性がある。特徴選択は映像の特定の属性を選択することを指す。このような属性はさらに広い文脈での認識、分類及び決定において必要とされる場合がある。
デジタル映画における符号化のようなビデオのデジタル符号化は、画像圧縮技法の改善から恩恵を受ける分野である。一般的には、デジタル画像圧縮は無損失方法と損失のある方法の2つのカテゴリに分類されてよい。無損失画像は、情報を損失せずに回復される。損失のある方法は、圧縮率、圧縮アルゴリズムの質、及びアルゴリズムの実施に応じてなんらかの情報の回復し難い損失を含んでいる。通常、損失のある圧縮アプローチは、費用効率が高いデジタル映画アプローチに所望される圧縮率を取得するために考えられている。デジタル映画品質レベルを達成するためには、圧縮アプローチは視覚的に無損失レベルの性能を実現する必要がある。したがって、圧縮プロセスの結果数学的な情報の損失はあったとしても、この損失により引き起こされる画像の歪みは、通常の表示条件下での視聴者にとっては感知不能でなければならない。
既存のデジタル画像圧縮技術は他の用途、つまりテレビシステムのために開発されてきた。このような技術は意図された用途に適切な設計上の譲歩を行ってきたが、映画の提示に必要とされる品質要件を満たしていない。
デジタル映画圧縮技術は、映画ファンが過去に経験した視覚的な品質を実現しなければならない。理想的にはデジタル映画の視角品質は、高品質の公開版フィルムの視角品質を上回ろうと試みる必要がある。同時に、圧縮技法は実際的であるために高いコーディング効率を有さなければならない。ここに定義されるように、コーディング効率は一定の定性的なレベルを満たすために圧縮された画像品質に必要とされるビット転送速度を指している。さらに、システム及びコーディング技法は様々なフォーマットに対処するために内蔵された柔軟性を備え、費用効率が高くなくてはならない。すなわち小型且つ効率的なデコーダまたはエンコーダプロセスである。
使用可能な多くの圧縮技法はかなりのレベルの圧縮を提供しているが、ビデオ信号の品質の劣化を生じさせる。通常、圧縮済みの情報を転送する技法は、圧縮済みの情報が一定のビット転送速度で転送されることを必要とする。
ビデオ信号にとって所望されるレベルの品質を保ちながらも、かなりのレベルの圧縮を提供することができるある圧縮技法は、符号化された離散コサイン変換(DCT)係数データの適応自在にサイズ設定されるブロックとサブブロックを活用する。この技法はこれ以降、適応ブロックサイズ離散コサイン変換(ABSDCT)法と呼ばれるだろう。この技法は本発明の譲受人に与えられ、参照してここに組み込まれる「適応ブロックサイズ画像圧縮方法及びシステム(Adaptive Block Size Image Compression Method And System)」と題される米国特許第5,021,891号に開示されている。DCT技法は、本発明の譲受人に与えられ、参照してここに組み込まれる「適応ブロックサイズ画像圧縮方法及びシステム(Adaptive Block Size Image Compression Method And System)」と題される米国特許第5,107,345号にも開示されている。さらに、ABSDCT技法を微分4分木変換(Differential Quadtree Transform)技法と組み合わせて使用することは、やはり本発明の譲受人に与えられ、参照してここに組み込まれる「適応ブロックサイズ画像圧縮方法及びシステム(Adaptive Block Size Image Compression Method And System)」と題される米国特許第5,4525,104号に説明されている。これらの特許に開示されているシステムは、画像データの各フレームが他のフレームのコンテンツに関係なく符号化される「フレーム内」符号化と呼ばれているものを活用している。ABSDCT技法を使用すると、達成可能なデータ転送速度は、画像品質に認識できる劣化を与えずに毎秒約15億ビットから毎秒約5000万ビットに削減できる。
ABSDCT技法は白黒画像またはカラー画像のどちらかを圧縮するために使用されてよい。カラー入力信号はYIQフォーマットでよく、Yはルミナンス、つまり輝度のサンプルであり、IとQは4:4:4ごと、つまり代わりのフォーマットのクロミナンス、つまりカラーサンプルである。YUVフォーマット、YCフォーマットまたはRGBフォーマットなどの他の既知のフォーマットも使用してよい。目の色に対する低い空間感度のために、大部分の研究は、水平方向と垂直方向における4という係数によるカラー成分のサブサンプルが妥当であることを示している。したがって、ビデオ信号は4つのルミナンス成分と2つのクロミナンス成分によって表現されてよい。
ABSDCTを使用すると、ビデオ信号は、通常処理のためにピクセルのブロックに分割される。ブロックごとに、ルミナンス成分とクロミナンス成分がブロックインタリーバに渡される。画像サンプルを各16×16ブロックの中で並べる、あるいは編成し、離散コサイン変換(DCT)分析のためのデータのブロックと複合サブブロックを生成するブロックインタリーバには、例えば16×16(ピクセル)ブロックが提示されてよい。DCT演算子は時間と空間サンプリング信号を同信号の周波数表記に変換する1つの方法である。量子化装置は画像の周波数分布特性を利用するように設計できるため、周波数表記に変換することによって、DCT技法は非常に高いレベルの圧縮に対処することが示されている。好適実施形態においては、1つの16×16DCTが第1の秩序化に適用され、4つの8×8DCTが第2の秩序化に適用され、16の4×4DCTが第3の秩序化に適用され、64の2×2DCTが第4の秩序化に適用される。
DCT演算はビデオソースに固有の空間冗長性を削減する。DCTが実行された後、ビデオ信号エネルギーの大部分は数個のDCT係数に凝縮される傾向がある。追加の変換、つまり微分4分木変換(DQT)は、DCT係数の間の冗長性を削減するために使用してよい。
16×16のブロック及び各サブブロックについて、DCT係数値と(DQTが使用されている場合)DQT値が分析され、該ブロックまたはサブブロックを符号化するために必要とされるビット数を求める。次に、画像セグメントを表現するために、符号化するのに最も少ないビット数を必要とするブロックまたはサブブロックの組み合わせが選ばれる。画像セグメントを表現するためには、例えば2つの8×8サブブロック、6つの4×4サブブロック、および8つの2×2サブブロックが選ばれてよい。
次に選ばれたブロックまたはサブブロックの組み合わせは、16×16ブロックに整然と適切に配列される。それからDCT/DQT係数値は、送信に備えて周波数加重、量子化、及び(可変長符号化などの)符号化を受けてよい。前述されたABSDCT技法は著しくうまくいくが、それは計算機的に集約的である。したがって、技法のコンパクトなハードウェアの実施は困難である可能性がある。
可変長符号化はランレングス及びサイズという形で達成されてきた。ジェイペグ(Joint Photographic Experts Group)(JPEG)またはエムペグ(Moving Picture Experts Group)(MPEG−2)などの他の圧縮方法は、処理済みの全体のブロックサイズに優る標準的なジグザグ走査方法を使用する。しかしながら、ABSDCTを使用すると、異なるブロックサイズが、データのブロックの中の平方偏差に基づいて生成される。ハフマン符号などのいくつかのコーディング方法は、非ゼロ係数が後に続くゼロのランから成り立っている。しかしながら、ハフマン符号は、ソース記号の確率が2の負の累乗であるときにより最適である。ただし、ランレングス/サイズの対の場合、記号の確率はめったに2の負の累乗にはならない。
さらに、ハフマンコーディングは事前に計算された符号語のコードブックを記憶することを必要とする。コードブックのサイズは法外に大きいことがある。また、最長のコードワードは法外に長い可能性がある。したがって、ランレングス/サイズ対記号にハフマンコーディングを使用することはまったく効率的ではない。
圧縮を達成するために無損失で量子化されたDCT係数のランレングス及び振幅を符号化するための装置及び方法が説明されている。具体的には、量子化の後にDCT係数のゼロランと非ゼロ振幅の両方を符号化するためにGolomb−Riceコーディングが使用される。Golombo−Riceコーディングなどのデータの指数分布を利用する方法を使用すると、代わりの方式よりさらに高いコーディング効率が可能になることが判明している。
本発明は、離散コサイン変換係数データ及び品質ベースの量子化スケールファクタの適応自在にサイズ設定されるブロック及びサブブロックを活用する画像圧縮の品質ベースのシステム及び方法である。ピクセルデータのブロックがエンコーダに入力される。エンコーダは処理のためにピクセルの入力ブロックを分割するブロックサイズ割り当て(block size assignment)(BSA)要素を備える。ブロックサイズ割り当ては、入力ブロック及び追加の細分化されたブロックの平方偏差に基づいている。一般的には、ブロックとサブブロックの平均値が異なる所定の範囲に該当するという条件で、より大きな平方偏差のある領域がより小さなブロックに細分化され、より小さな平方偏差のある領域は細分化されない。したがって、最初に、ブロックの平方偏差閾値がその平均値に応じてその名目値から修正されてから、ブロックの平方偏差が閾値と比較され、平方偏差が閾値より大きい場合にブロックは細分化される。
ブロックサイズ割り当ては、ピクセルデータを周波数ドメインデータに変換する変換要素に提供される。変換は、ブロックサイズ割り当てを通して選択されるブロックとサブブロック上だけで実行される。変換データは、次に量子化及びシリアライゼーションを通してスケーリングを受ける。変換データの量子化は、コントラスト、係数カウント、速度ひずみ、ブロックサイズ割り当ての密度、及び/または過去のスケールファクタに関して調整するスケールファクタなどの画像品質測定基準に基づいて量子化される。ジグザグ走査などのシリアライゼーションは、同値の考えられる最長のランレングスを生成することに基づいている。それから、データのストリームが伝送に備えて可変長コーダによってコーディングされる。Golomb−Rice符号化などの指数分布に基づいたコーディングが活用される。具体的には、ゼロ表現データの場合、ゼロランレングスが求められる。ゴロンブパラメータはゼロランレングスの関数として求められる。商はゼロランレングスとゴロンブパラメータの関数として符号化される。剰余は、ゼロランレングス、ゴロンブパラメータ及び商の関数として符号化される。コーディングされた商とコーディングされた剰余は連結される。非ゼロ表現データの場合、非ゼロデータは、非ゼロデータ値と非ゼロデータ値の符号の関数として符号化される。符号化されたデータは伝送チャネルを通して、ピクセルデータが表示に備えて再構築されるデコーダに送信される。
したがって、推測的なコード生成を必要としないことが実施形態の1つの態様である。
記憶される広範囲なコードブックの使用を必要としないことが、実施形態の別の態様である。
ハードウェアインプリメンテーションに必要とされるサイズを縮小することが、実施形態の別の態様である。
高いコーディング効率を達成することが、実施形態の別の態様である。
DCTデータの指数分布を利用することが、実施形態の別の態様である。
本発明の特徴及び優位点は、類似した参照文字が完全に相応して識別する図面に関して解釈されるときに後述される詳細な説明からさらに明らかになるだろう。
発明を実施するための最長の形態
デジタル信号のデジタル伝送を容易にし、対応する利点を享受するためには、一般的にはなんらかの形式の信号圧縮を利用することが必要である。結果として生じる画像において高い圧縮を達成するためには、画像の高品質を維持することも重要である。さらに、多くの用途で重要であるコンパクトなハードウェア実施には計算機による効率が所望される。
本発明のある実施形態を詳細に説明する前に、本発明がその用途において以下の説明に述べられる、あるいは図面に描かれる構成要素の構造及び配置の詳細に制限されないことが理解されるべきである。本発明は他の実施形態も可能にし、多様な方法で実施される。また、ここに使用される表現及び用語は説明のためであり、制限的と見なされるべきではないことが理解される。
ある実施形態の1つの態様で利用される画像圧縮は、本発明の譲受人に与えられ、参照してここに組み込まれる1999年11月8日に提出された出願番号第09/436,085号、同時係属の米国特許出願「コントラスト感応平方偏差に基づく適応ブロックサイズDCT画像圧縮(Contrast Sensitive Variance Based Adaptive Block Size DCT Image Compression)」に開示されている技法などの離散コサイン変換(DCT)技法に基づいている。DCTを活用する画像圧縮及び解凍システムは、本発明の譲受人に与えられ、参照してここに組み込まれる2000年1月28日に提出された出願番号第09/494,192号、同時係属の米国特許出願「品質に基づく画像圧縮(Quality Based Image Compression)」に説明されている。一般的には、デジタルドメインで処理される画像は、サイズがN×Nの非重複ブロックのアレイに分割されるピクセルデータから構成される。二次元DCTは各ブロックで実行されてよい。二次元DCTは、以下の関係によって定義される。
Figure 0004113114
式中、kが0なら、α(k),β(k)=1であり、kが0でないならばα(k)、β(k)=
Figure 0004113114
であり、
x(m,n)はN×Mブロックの中のロケーション(m,n)にあるピクセルであり、
X(k,l)は対応するDCT係数である。
ピクセル値は非負であるため、DCT成分X(0,0)はつねに正であり、通常最も多くのエネルギーを有する。実際に、典型的な画像の場合、変換エネルギーの大部分は成分X(0,0)の回りに集中している。このエネルギー圧密特性が、DCT技法をこのように魅力的な圧縮方法にするのである。
画像圧縮技法は、追加のビット転送速度削減を達成するためにコントラスト適応コーディングを活用する。大部分の天然の画像が相対的にゆっくりと変化する平坦な領域、及びオブジェクト境界及び高コントラストテクスチャなどのビジーな領域から構成されていることが観察されている。コントラスト適応コーディング方式は、ビジー領域にさらに多くのビットを、あまりビジーではない領域に少ないビットを割り当てることによってこのファクタを利用している。
コントラスト適応方法は、フレーム間コーディング(空間−時間処理)の代わりにフレーム内コーディング(空間処理)を活用する。フレーム間コーディングは、本質的に、より複雑な処理回路に加えて複数のフレームバッファを必要とする。多くの用途では実際の実施のために複雑さの削減が必要とされる。フレーム内コーディングは、空間−時間コーディング方式を失敗させ、成績を悪くすることがある状況でも有効である。機械的なシャッターのために積分時間が非常に短いため、例えば、毎秒24コマの映画がこのカテゴリに該当する。短い積分時間は、時間エイリアシングのより高い度合いを可能にする。フレーム対フレーム相関の仮定が、それがガタガタ動くにつれて素早い動作のために破綻する。フレーム間コーディングは、50Hzと60Hz両方の電力系統周波数が関係するときにも標準化するのがより容易である。現在、テレビは50Hzまたは60Hzのどちらかで信号を送信している。デジタルアプローチであるフレーム内方式を使用すると、50Hzと60Hzの両方の動作に、あるいはフレームレート対空間解像度を引き換えにすることによって毎秒24コマの映画にも適応できるようになる。
画像処理のために、DCT演算は、非重複ブロックのアレイに分割されるピクセルデータに対して実行される。ここではブロックサイズがサイズN×Nであると説明されているが、多様なブロックサイズが使用されてよいと想定されていることに注意する。例えば、NとMの両方とも整数であり、MがNより大きいか、N未満であるかのどちらかのN×Mブロックサイズを活用してよい。別の重要な態様とは、ブロックが、iとjが整数であるN/ixN/I、N/ixN/j、N/ixM/j等の少なくとも1つのレベルのサブブロックに分割可能であるという点である。さらに、ここで説明されているような例示的なブロックサイズは、DCT係数の対応するブロックとサブブロックを含んだ16×16ピクセルブロックである。さらに、例えば9×9などの偶数整数値または奇数整数値の両方ともなどの他の整数が使用されてよいことが想定される。
図1と図2は、構成可能な並直列変換器の概念を組み込んだ画像処理システム100を描いている。該画像処理システム100は、受信したビデオ信号を圧縮するエンコーダ104を備える。圧縮された信号は伝送チャネルまたは物理媒体108を使用して送信され、デコーダ112によって受信される。デコーダ112は受信された符号化済みのデータを、次に示されてよい画像サンプルに復号する。
一般的には、1つの画像は処理のためにピクセルの複数のブロックに分割される。カラー信号は、Yがルミナンス、つまり輝度成分であり、CとCがクロミナンス、つまりカラー成分であるRGB/YC変換器116を使用してRGB空間からYC空間に変換されてよい。目の色に対する低い空間感度のため、多くのシステムは水平方向と垂直方向で4という係数でC1成分とC2成分を二段抽出する(sub−sample)。しかしながら、二段抽出は不必要である。4:4:4フォーマットとして知られている完全解像度画像は、「デジタル映画」をカバーすると呼ばれている用途などのいくつかの用途では非常に有効であるか、または必要であるかのどちらかである可能性がある。2つの考えられるYC表現はYIQ表現とYUV表現であり、両方とも技術では周知である。YCbCrとして知られているYUV表現の変形物を利用することも可能である。これは、さらに奇数成分と偶数成分に分割されてよい。したがって、ある実施形態では、表現Y偶数、Y奇数、Cb偶数、Cb奇数、Cr偶数、Cr奇数が使用される。
好適実施形態において、偶数と奇数のY成分、Cb成分及びCr成分のそれぞれは二段抽出を行わずに処理される。したがって、ピクセルの16×16ブロックの6個の成分のそれぞれの入力がエンコーダ104に提供される。説明の目的で、Y偶数成分のためのエンコーダ104が描かれている。類似したエンコーダはY奇数成分、偶数Cb成分と奇数Cb成分、偶数Cr成分と奇数Cr成分に使用される。エンコーダ104は、ビデオ圧縮に備えてブロックサイズ割り当てを実行するブロックサイズ割り当て要素120を備える。ブロックサイズ割り当て要素120は、ブロックの中の画像の知覚による特性に基づき16×16ブロックのブロック分解を決定する。ブロックサイズ割り当ては、16×16ブロックの中の活動に応じて、それぞれの16×16ブロックを、4分木様式で8×8、4×4、及び2×2などのさらに小さなブロックに細分化する。ブロックサイズ割り当て要素120は、長さが1ビットと21ビットの間であるPQRデータと呼ばれる4分木データを生成する。したがって、ブロックサイズ割り当てが、16×16ブロックが分割されなければならないと判断すると、PQRデータのRビットが設定され、4個の分割された8×8ブロックに対応するQデータの4個の追加ビットが後に続く。ブロックサイズ割り当てが、8×8ブロックのどれかが細分化されなければならないと判断すると、8×8ブロックごとにPデータの4個の追加ビットが追加される。
ここで図3を参照すると、ブロックサイズ割り当て要素120の演算の詳細を示すフロー図が示されている。ブロックの平方偏差は、ブロックを細分化するという決定における測定基準として使用される。ステップ102で開始し、ピクセルの16×16ブロックが読み取られる。ステップ204では、16×16ブロックの平方偏差v16が計算される。平方偏差は、以下のように計算され、
Figure 0004113114
式中、N=16であり、xijはN×Nブロックの中のi番目の行、j番目の列の中のピクセルである。ステップ206では、ブロックの平均値が2個の所定の値の間にある場合、最初に平方偏差閾値T16が修正され、新しい閾値T’16を提供し、次にブロック平方偏差が新しい閾値T’16と比較される。
平方偏差v16が閾値T16以下の場合には、ステップ208で16×16ブロックの開始アドレスが一時記憶装置に書き込まれ、PQRデータのRビットが0に設定され、16×16ブロックが細分化されていないことを示す。それからアルゴリズムは、次のピクセルの16×16のブロックを読み取る。平方偏差v16が閾値T16より大きい場合には、ステップ210で、PQRデータのRビットが1に設定され、16×16ブロックが4個の8×8ブロックに細分化されなければならないことを示す。
4個の8×8ブロック、i=1:4は、ステップ212に図示されるように、追加細分化のために連続して考えられる。8×8ブロックごとに、ステップ214で平方偏差v8が計算される。ステップ216では、ブロックの平均値が2個の所定の値の間にある場合、最初に平方偏差閾値T8が修正され、新しい閾値T’8を提供し、次にブロック平方偏差がこの新しい閾値に比較される。
平方偏差v8が閾値T8以下の場合には、ステップ218で8×8ブロックの開始アドレスが一時記憶に書き込まれ、対応するQビット、Qが0に設定される。それから、次の8×8ブロックが処理される。平方偏差v8が閾値T8より大きい場合には、ステップ220で、対応するQビットQiが1に設定され、8×8ブロックが4個の4×4ブロックに細分化されなければならないことを示す。
4個の4×4ブロック、j=1:4は、ステップ222に図示されるように、追加細分化のために連続して考えられる。4×4ブロックごとに、ステップ24で平方偏差v4ijが計算される。ステップ226では、ブロックの平均値が2個の所定の値の間にある場合、最初に平方偏差閾値T4が修正され、新しい閾値T’4を提供し、次にブロック平方偏差がこの新しい閾値に比較される。
平方偏差v4ijが閾値T4以下の場合には、ステップ228で4×4ブロックのアドレスが書き込まれ、対応するPビットPijが0に設定される。それから次の4×4ブロックが処理される。平方偏差v4ijが閾値T4より大きい場合には、ステップ230で対応するPビットPijが一に設定され、4×4ブロックが2×2ブロックに細分化されなければならないことを示す。さらに、4個の2×2ブロックのアドレスが一時記憶装置に書き込まれる。
閾値T16、T8及びT4は所定の定数であってよい。これは厳しい決断として知られている。代わりに、適応的意思決定または軟判定が実現されてよい。例えば、軟判定は、Nが8、4または2である場合に2N×2Nブロックの平均ピクセル値に応じて平方偏差のための閾値を変える。このようにして平均ピクセル値の関数は閾値として使用されてよい。
説明のために、以下の例を考える。Y成分の所定の平均偏差閾値が、それぞれ16×16、8×8、4×4のブロックの場合50、1100及び800であるとする。言い換えると、T16=50、T8=100、及びT4=880である。平均値の範囲を80と100とする。16×16ブロックの計算された平方偏差が60であると仮定する。60はT16より大きく、平均値90は80と100の間であるため、16×16ブロックは4個の8×8サブブロックに細分化される。8×8ブロックの計算された平方偏差が1180、935、980及び1210であると仮定する。8×8ブロックの内の2つはT8を上回る平方偏差を有しているため、これらの2個のブロックはさらに細分化され、合計8個の4×4サブブロックを生成する。最後に、8個の4×4ブロックの平方偏差が620、630、670、610、590、525、930及び690であり、対応する平均値が90、120、110、115であると仮定する。最初の4×4ブロックの平均値が範囲(80、100)に該当するため、その閾値は880未満であるT’4=200に引き下げられる。したがって、7番目の4×4ブロックだけではなくこの4×4ブロックも細分化される。
ルミナンス成分Y奇数とカラー成分Cb−even、Cb−odd、Cr−even及びCr−oddのブロックサイズを割り当てるために類似する手順が使用されることに注意する。カラー成分は水平に、垂直に、あるいは両方で間引きされ(decimated)てよい。
さらに、ブロックサイズ割り当ては、最大のブロック(この例では16×16)が最初に評価される下降型アプローチと説明されてきたが、ボトムアップアプローチを代わりに使用してよいことに注意する。ボトムアップアプローチは最初に最小のブロック(本発明では2×2)を評価するだろう。
図1を参照し直すと、選択されたブロックのアドレスとともにPQRデータがDCT要素124に提供される。DCT要素124は選択されたブロックで適切なサイズの離散コサイン変換を実行するためにPQRデータを使用する。選択されたブロックだけがDCT処理を受ける必要がある。
画像処理システム100は、DCTのDC係数の間の冗長性を削減するためにDQT要素128も備える。DC係数には各DCTブロックの左上角で遭遇する。一般的には、DC係数はAC係数に比較して大きい。サイズの不一致により、効率的な可変長コーダを設計するのが困難になる。したがって、DC係数の間で冗長性を削減することが有利である。
DCT要素128は、一度に2×2取られるDC係数で2−D DCTを実行する。4×4ブロックの中の2×2ブロックで開始し、2−D DCTが4つのDC係数で実行される。この2×2 DCTが4つのDC係数の微分4分木変換、つまりDQTと呼ばれる。次に8×8ブロックの中の3つの隣接するDC係数とともにDQTのDC係数が次のレベルのDQTを計算するために使用される。最後に、1つの16×16ブロックの中の4個の8×8ブロックのDC係数がDQTを計算するために使用される。このようにして、1つの16×16のブロックでは、1個の真のDC係数があり、残りはDCTとDQTに対応するAC係数である。
変換係数(DCTとDQTの両方)は、量子化のために量子化装置に提供される。好適実施形態においては、DCT係数は周波数加重マスク(frequency weighting masks)(FWM)と量子化スケールファクタを使用して量子化される。FWMは入力DCT係数のブロックと同じ寸法の周波数重みのテーブルである。周波数重みは様々な重みを様々なDCT係数に適用する。重みは、人間の視覚系または光学系がより敏感である周波数コンテンツを有する入力サンプルを強調し、視覚系または光学系がより敏感ではない周波数コンテンツを有するサンプルの重視をやめるように作られている。重みは、視距離などのファクタに基づいて設計されてもよい。
重みは実験によって得られるデータに基づいて選択される。8×8DCT係数のための加重マスクを設計する方法は、参照してここに組み込まれるISO/IEC JTC1 CD 10981「連続階調静止画像のデジタル圧縮及び符号化−第1部:要件及び指針(Digital compression and encoding of continuous-tone still images - part 1: Requirements and guidelines)」、国際標準化機構、1994に開示されている。一般的には、1つはルミナンス成分のため、1つはクロミナンス成分のための2つのFWMが設計される。ブロックサイズ2×2、4×4のFWMテーブルは間引き(decimation)によって取得され、16×16は8×8ブロックのための間引きの補間によって取得される。スケールファクタは量子化された係数の品質及びビット転送速度を制御する。
したがって、各DCT係数は、以下の関係に従って量子化され、
Figure 0004113114
式中、DCT(i,j)は入力DCT係数であり、fwm(i,j)は周波数加重マスクであり、qはスケールファクタであり、DCTq(i,j)は量子化された係数である。DCT係数の符号によっては、角括弧の内側の第1項が切り上げられる、または切り下げられることに注意する。DQT係数は適切な加重マスクを使用しても量子化される。ただし、複数のテーブルまたはマスクを使用することができ、Y成分、Cb成分及びCr成分のそれぞれに適用できる。
次にピクセルデータのブロック及び周波数加重マスクは、量子化装置130、つまりスケールファクタ要素によって倍数をかけられる。DCT係数の量子化は、それらの大多数を、圧縮を生じさせるゼロに削減する。好適実施形態においては、平均ビット転送速度に対応する32のスケールファクタがある。MPEG2などの他の圧縮方法とは異なり、平均ビット転送速度は、ターゲットビット転送速度とバッファステータスの代わりに処理された画像の品質に基づいて制御される。
さらに圧縮を強化するために、量子化された係数が走査並直列変換器134に提供される。該並直列変換器134は量子化された係数のブロックを走査し、量子化された係数の直列化されたストリームを生成する。ジグザグ走査、列走査、または行走査が利用されてよい。ジグザグ以外の多くの異なったジグザグ走査パターンも選んでよい。好適技法はジグザグ走査に8×8ブロックサイズを利用する。量子化された係数のジグザグ走査はゼロ値の大きなランに遭遇する確率を高める。このゼロランは本質的に減少する確率を有し、ハフマンコードを使用して効率的に符号化されてよい。
直列化され、量子化された係数のストリームは可変長コーダ138に提供される。ランレングスコーダは、非ゼロ係数から、ゼロの間の量子化された係数を分離し、図6に関して詳細に説明される。ある実施形態においては、Golomb−Riceコーディングが活用される。Golomb−Rice符号化は、指数分布のある非負整数をコーディングする際に効率的である。ゴロンブコードを使用することは、指数分布された変数にさらに短い長さの符号を提供するという点で圧縮により最適である。
ランレングスをゴロンブ符号化する際には、ゴロンブコードは非負整数mでパラメータ化される。例えば、パラメータmを考慮すると、正の整数nのゴロンブコーディングは、剰余が2[log2m]−m未満である場合には長さ[logm]ビットであり、それ以外の場合長さ[logm]ビットである修正されたバイナリコードによって表現される剰余が後に続く単項コードの中のn/mという商によって表現される。Golomb−Riceコーディングは、パラメータmがm=2として表現されるGolombコーディングの特殊なケースである。このようなケースでは、n/mの商は整数nのバイナリ表現をkビット分右にシフトすることによって取得され、n/mの剰余はnの最小kビットで表現される。このようにして、Glomb−Riceコードは2つの連結である。Golomb−Riceコーディングは、以下によって示されるように、正の整数と負の整数の両方を2辺の幾何(指数)文法で符号化するために使用できる。
Figure 0004113114
(1)では、αはxの確率の減少を特徴付けるパラメータであり、cは正規化定数である。pα(x)は単調であるため、整数値のシーケンスが以下を満たす必要があることが分かる。
Figure 0004113114
図4a、図4b、図4c、及び図5a、図5b、図5cに描かれているように、量子化されたDCT係数行列の中のゼロランと振幅の両方とも指数分布を有する。これらの図に描かれている分布は実像からのデータに基づいている。図4aはゼロランレングス対相対周波数のY成分分布400を描いている。同様に、図4bと図4cは、それぞれゼロランレングス対相対周波数410と420のCb成分とCr成分の分布を描いている。図5aは振幅サイズ対相対周波数のY成分分布500を描いている。同様に、図5bと図5cはそれぞれ振幅サイズ対相対周波数510と520のCb成分とCr成分の分布を描いている。図5a、図5b及び図5cでは、プロットがDCT係数のサイズの分布を表現していることに注意する。各サイズは係数値の範囲を表現している。例えば、4というサイズ値は範囲{−15,−14,…−8,8,…14,15}、合計16個の値を有している。同様に10というサイズ値は、範囲{−1023,−1022,…,−512,512,…1022,1023}、合計1024の値を有している。図4a、図4b、図4c、図5a、図5b、及び図5cから、ランレングスと振幅サイズの両方ともが指数分布を有していることが分かる。振幅の実際の分布は以下の等式(3)に適合するように示すことができる。
Figure 0004113114
(3)では、Xk,lは、それぞれ垂直面と水平面の周波数kとlに対応するDCT係数、及び平均
Figure 0004113114
平方絵偏差
Figure 0004113114
を表している。したがって、説明されたようにGolomb−Riceコーディングを使用することはDCTでデータを処理する上でより最適である。
以下は画像データの圧縮に関して説明されているが、実施形態は音声データを圧縮する実施形態に等しく適用できる。画像データを圧縮する際には、画像信号またはビデオ信号は、例えば、線形または対数符号化ピクセル値を含むRGB成分またはYIQ成分、あるいはYUV成分あるいはY成分、Cb成分、Cr成分であってよい。
図6はゼロ係数及び非ゼロ係数を符号化するプロセス600を描いている。DCT行列が走査されるにつれて、ゼロ係数と非ゼロ係数は別々に処理され、分離される604。ゼロデータの場合、ゼロランの長さが求められる608。ランレングスは正の整数であることに注意する。例えば、ランレングスがnであることが判明すると、ゴロンブパラメータmが求められる612。ある実施形態においては、ゴロンブパラメータはランレングスの関数として求められる。別の実施形態においては、ゴロンブパラメータ(m)は以下の等式(4)で求められる。
Figure 0004113114
任意に、ランレングスの長さと関連するゴロンブパラメータはカウンタまたはレジスタによってカウントされる616。ゼロのランレングスnを符号化するためには、商が符号化される620。ある実施形態においては、商はゼロのランレングスとゴロンブパラメータの関数として求められる。別の実施形態においては、商(Q)は以下の等式(5)によって求められる。
Figure 0004113114
ある実施形態においては、商QはQ+1ビットを必要とする単項コードで符号化される。次に剰余が符号化される624。ある実施形態においては、剰余はランレングスと商の関数として符号化される。別の実施形態においては、剰余(R)は以下の等式(6)を使用して求められる。
Figure 0004113114
ある実施形態においては、剰余Rはmビットバイナリコードで符号化される。商Qと剰余Rが求められた後、QとRのコードが連結され628、ゼロのランレングスnの全体的なコードを表す。
非ゼロ係数もGolomb−Riceを使用して符号化される。係数振幅は正または負である場合があるため、符号ビットを使用し、指定された振幅の絶対値を符号化することが必要である。非ゼロ係数の振幅がxであることを考慮すると、振幅は振幅と符号の絶対値の関数として表現されてよい。したがって、振幅は以下の等式(7)を使用してyとして表現されてよい。
Figure 0004113114
したがって、非ゼロ係数の値は任意にカウンタまたはレジスタによってカウントされる632。次に、振幅がゼロ以上であるのかが判断される636。ゼロ以上である場合、値は指定された値の2倍として符号化される640。以上ではない場合、値は絶対値の2倍未満の値として符号化される644。他のマッピング方式も利用されてよいことが考慮される。カギは、値の符号を区別するための余分なビットが必要とされないという点である。
振幅を等式(7)によって表現されるように符号化すると、偶数の整数であるxの正の値が生じ、負の値は奇数の整数になる。さらに、このマッピングは(2)におけるようにxの確率割り当てを維持する。等式(7)で描かれているような符号化の優位点によって、人は符号ビットを使用して正の数と負の数を表現するのを回避できるようになる。マッピングが行われた後、yはゼロランについて行われたのと同様に符号化される。該手順は、すべての係数が現在のブロックの中で走査されるまで続行される。
本発明の実施形態は係数の値とランレングスを等式(1)〜(7)の関数として求めるが、正確な等式(1)〜(7)が使用される必要はないことを認識することは重要である。画像及び音声データのより効率的な圧縮を可能にするのは、Golomb−Rice符号化及びDCT係数の指数分布を利用することである。
符号化の後のゼロランは非ゼロ振幅から区別できないため、第1のゼロランの発生を記すために固定長の特殊な接頭辞コードを使用することが必要になる場合がある。非ゼロ振幅に遭遇した後にブロックの中のすべてのゼロに遭遇することは普通である。このようなケースでは、Golomb−Riceコードよりむしろブロック終結(EOB)コードを参照するコードを使用する方がより効率的である可能性がある。再び任意に、EOBコードは特殊固定長コードである。
等式(1)または(3)に従って、DCT係数行列の中の振幅またはランレングスの確率分布はαまたはλによってパラメータ化される。特定のDCT係数ブロックが生じるコンテキストにおいて、コーディング効率は高められる可能性があるという意味合いである。その結果、所定の量を符号化するためのGolomb−Riceパラメータが使用されてよい。ある実施形態においては、カウンタまたはレジスタはそれぞれの累積値及びこのような値が発生する対応する回数を計算するためにランレングスと振幅サイズごとに使用される。例えば、累積値及び蓄積される要素数を記憶するためのレジスタがそれぞれRrlとNrlである場合、以下の等式(6)がランレングスを符号化するためにRice−Golombパラメータとして使用されてよい。
Figure 0004113114
類似した手順が振幅について使用されてよい。
図1を参照し直すと、エンコーダ104によって生成される圧縮された画像信号は一時的にバッファ142を使用して記憶され、次に伝送チャネル108を使用してデコーダ112に送信されてよい。伝送チャネル108は、磁気デバイスまたは光記憶デバイス、あるいはワイヤレス伝達プロセスまたは装置、あるいはワイヤレス伝達プロセスまたは装置などの物理的な媒体であってよい。ブロックサイズ割り当て情報を含むPQRデータもデコーダ112に提供される(図2)。デコーダ112はバッファ164及びランレングス値及び非ゼロ値を復号する可変長デコーダ168を備える。可変長デコーダ168は、図6に説明される方法と類似するが反対の方法で動作する。
可変長デコーダ168の出力は、利用される走査方式に従って係数を並べる逆並直列変換器172に提供される。例えば、ジグザグ走査、垂直走査、及び水平走査の混合物が使用される場合、逆並直列変換器172は利用される走査の種別を知っていることで係数を適切に並べ替えるだろう。逆並直列変換器172はPQRデータを受信し、係数の1つの複合係数ブロックへの適切な配列を補助する。
該複合ブロックは、量子化装置スケールファクタ及び周波数加重マスクの使用のための処理を元に戻すために、逆量子化装置174に提供される。
係数ブロックは次に、微分4分木変換が適用された場合には、IDCT要素190が後に続くIDQT要素186に提供される。それ以外の場合、係数ブロックはIDCT要素190に直接提供される。IDQT要素186とIDCT要素190は係数を逆変換し、ピクセルデータのブロックを生成する。該ピクセルデータは次に補間され、RGB形式に変換され、将来の表示のために記憶されなければならない。
図7は、Golomb−Rice符号化700用の装置を描いている。図7の装置は、好ましくは図6に関して説明されるようなプロセスを実現する。意思決定装置(determiner)704はランレングス(n)とゴロンブパラメータ(m)を決定する。任意に、カウンタまたはレジスタ708が、それぞれの累積値及びこのような値が発生する対応する回数を計算するために、各ランレングスと振幅サイズ値ごとに使用される。エンコーダ712はランレングスとゴロンブパラメータの関数として商(Q)を符号化する。また、エンコーダ712はランレングス、ゴロンブパラメータ及び商の関数として剰余(R)を符号化する。代替実施形態においては、エンコーダ712は非ゼロデータ値と非ゼロデータ値の符号の関数として非ゼロデータも符号化する。連結装置(concatenator)716は、Q値とR値を連結するために使用される。
例として、ここに開示されている実施形態に関連して説明された多様な例示的な論理ブロック、フローチャート及びステップが、特定用途向け集積回路(ASIC)、プログラマブルロジックデバイス、離散ゲートまたはトランジスタロジック、例えばレジスタとFIFOなどの離散ハードウェア構成要素、一式のファームウェア命令として実行するプロセッサ、任意の従来のプログラム可能ソフトウェア、及びプロセッサ、あるいはその組み合わせをもって、ハードウェアまたはソフトウェアの中で実現または実行されてよい。プロセッサは、有利にはマイクロプロセッサであってよいが、代替例ではプロセッサは任意の従来のプロセッサ、コントローラ、マイクロコントローラ、または状態機械であってよい。ソフトウェアはRAMメモリ、フラッシュメモリ、ROMメモリ、レジスタ、ハードディスク、取り外し可能ディスク、CD−ROM、DVD−ROM、または技術で既知である任意の他の形の記憶媒体に常駐する場合がある。
好適実施形態の前記説明は、当業者が本発明を作るあるいは使用できるようにするために提供される。これらの実施形態に対する多様な変型は、容易に当業者に明らかになり、ここに定義される一般的な原則は本発明の機能を使用しなくとも他の実施形態に適用されてよい。したがって、本発明はここに示されている実施形態に制限されるのではなく、ここに開示されている原則及び新規特徴と一貫する最も広い範囲を与えられることを目的とする。
本発明の他の特徴及び優位点は以下のクレームに述べられる。
図1は、画像圧縮及び処理システムのエンコーダ部分のブロック図である。 図2は、画像圧縮及び処理システムのデコーダ部分のブロック図である。 図3は、平方偏差に基づいたブロックサイズ割り当てで必要とされる処理工程を描くフロー図である。 図4Aは、DCT係数行列の中のゼロランレングスのY成分の指数分布を描く。 図4Bは、DCT係数行列の中のゼロランレングスのC成分の指数分布を描く。 図4Cは、DCT係数行列の中のゼロランレングスのC成分の指数分布を描く。 図5Aは、DCT係数行列の中の振幅サイズのY成分の指数分布を描く。 図5Bは、DCT係数行列の中の振幅サイズのC成分の指数分布を描く。 図5Cは、DCT係数行列の中の振幅サイズのC成分の指数分布を描く。 図6は、Golomb−Rice符号化プロセスを描く。 図7は、Golomb−Rice符号化の装置を描く。

Claims (14)

  1. 下記を具備する、量子化された周波数表示されたデータであってゼロデータおよび非ゼロデータを具備するデータを符号化する方法:
    ゼロデータの場合:
    ゼロランレングス(n)を決定する;
    ゼロランレングスの関数としてゴロンブ(Golomb)パラメータを決定する、ゴロンブパラメータ(m)は式m=[log2n]を用いて決定される;
    前記ゼロランレングスおよび前記ゴロンブパラメータの関数として商(Q)を符号化する;
    前記ゼロランレングス、前記ゴロンブパラメータ、および前記商の関数として剰余(R)を符号化する;
    および
    前記符号化された商および符号化された剰余を連結する;
    および非ゼロデータの場合:
    前記ノンゼロデータおよび前記ノンゼロデータの符号の関数として前記ノンゼロデータを符号化する。
  2. 前記商(Q)は、式Q=|n/2m|を用いて決定される、請求項1に記載の方法。
  3. 前記剰余(R)は式R=n−2mQを用いて決定される請求項1に記載の方法。
  4. 前記ノンゼロデータの符号化は、式
    Figure 0004113114
    (但し、xは符号化される前記ノンゼロデータの振幅である)用いてyの値であるように決定される、請求項1に記載の方法。
  5. 下記を具備する、量子化された周波数表示されたデータであって、ゼロデータと非ゼロデータを具備するデータを符号化するための装置:
    ゼロデータの場合;
    ゼロランレングス(n)を決定する手段;
    前記ゼロランレングスの関数としてゴロンブ(Golomb)パラメータ(m)を決定する手段、前記ゴロンブパラメータ(m)は、式m=[log2n]を用いて決定される;
    前記ゼロランレングスおよび前記ゴロンブパラメータの関数として商(Q)を符号化する手段;
    前記ゼロランレングス、前記ゴロンブパラメータ、および前記商の関数として剰余(R)を符号化する手段;
    および
    前記符号化された商と符号化された剰余を連結する手段;
    および非ゼロデータの場合:
    前記非ゼロデータの値および前記非ゼロデータの符号の関数として前記非ゼロデータを符号化する手段。
  6. 前記商(Q)は、式Q=|n/2m|を用いて決定される、請求項5に記載の装置。
  7. 前記剰余(R)は、式R=n−2mQを用いて決定される、請求項5に記載の装置。
  8. 前記非ゼロデータの符号化は、式
    Figure 0004113114
    (但し、xは前記符号化される非ゼロデータの振幅である)
    を用いてyの値であるように決定される、請求項5に記載の装置。
  9. 前記ゼロランレングスおよび非ゼロランレングス振幅値およびそのような値が生じる対応する回数をカウントする手段をさらに具備する、請求項5に記載の装置。
  10. 下記を具備する、量子化された周波数表示されたデータであって、ゼロデータと非ゼロデータを具備するデータを符号化するための装置:
    ゼロデータの場合;
    ゼロランレングス(n)を決定するように構成された第1決定器;
    前記ゼロランレングスの関数としてゴロンブ(Golomb)パラメータ(m)を決定するように構成された第2決定器、前記ゴロンブパラメータは、式m=[log2n]を用いて決定される;
    前記ランレングスおよび前記ゴロンブパラメータの関数として商(Q)を符号化するように構成され、および前記ゼロランレングス、前記ゴロンブパラメータおよび前記商の関数として剰余(R)を符号化するように構成され、非ゼロデータの場合、前記非ゼロデータと前記非ゼロデータの符号の値の関数として前記非ゼロデータを符号化するエンコーダ;
    および
    前記符号化された商および符号化された剰余を連結するように構成された連結器。
  11. 前記商(Q)は、式Q=[n/2m]を用いて決定される、請求項10に記載の装置。
  12. 前記剰余は、式R=n−2mQを用いて決定される、請求項10に記載の装置。
  13. 前記非ゼロデータの符号化は、式
    Figure 0004113114
    (但し、xは符号化される前記非ゼロデータの振幅である)を用いてyの値であるように決定される、請求項10に記載の装置。
  14. 前記ゼロランレングスおよび非ゼロ振幅値およびそのような値が生じる対応する回数をカウントするように構成されたカウンタをさらに具備する、請求項10に記載の装置。
JP2003509776A 2001-06-29 2002-06-17 Golomb−riceコーディングを使用するdct圧縮 Expired - Lifetime JP4113114B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/895,618 US6735254B2 (en) 2001-06-29 2001-06-29 DCT compression using Golomb-Rice coding
PCT/US2002/019407 WO2003003738A2 (en) 2001-06-29 2002-06-17 Dct compression using golomb-rice coding

Publications (3)

Publication Number Publication Date
JP2004531995A JP2004531995A (ja) 2004-10-14
JP2004531995A5 JP2004531995A5 (ja) 2006-01-05
JP4113114B2 true JP4113114B2 (ja) 2008-07-09

Family

ID=25404771

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003509776A Expired - Lifetime JP4113114B2 (ja) 2001-06-29 2002-06-17 Golomb−riceコーディングを使用するdct圧縮

Country Status (11)

Country Link
US (5) US6735254B2 (ja)
EP (2) EP1407603B1 (ja)
JP (1) JP4113114B2 (ja)
KR (2) KR100944282B1 (ja)
CN (3) CN100518326C (ja)
BR (1) BR0210582A (ja)
CA (1) CA2451604C (ja)
HK (2) HK1095003A1 (ja)
MX (1) MXPA03012053A (ja)
SG (2) SG170613A1 (ja)
WO (1) WO2003003738A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0648928U (ja) * 1992-12-09 1994-07-05 アイワ株式会社 成形装置

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6735254B2 (en) * 2001-06-29 2004-05-11 Qualcomm, Inc. DCT compression using Golomb-Rice coding
US7251372B2 (en) * 2004-01-14 2007-07-31 Nec Solutions (America) Inc. Method and system for compressing digitized fingerprint images by a uniform degree of compression
KR100561869B1 (ko) * 2004-03-10 2006-03-17 삼성전자주식회사 무손실 오디오 부호화/복호화 방법 및 장치
KR20060051157A (ko) * 2004-10-29 2006-05-19 마이크로소프트 코포레이션 정수 데이터의 무손실 적응 인코딩 및 디코딩을 위한시스템 및 방법
US6987468B1 (en) * 2004-10-29 2006-01-17 Microsoft Corporation Lossless adaptive encoding and decoding of integer data
US7580585B2 (en) 2004-10-29 2009-08-25 Microsoft Corporation Lossless adaptive Golomb/Rice encoding and decoding of integer data using backward-adaptive rules
US7015837B1 (en) * 2004-10-29 2006-03-21 Microsoft Corporation Lossless adaptive encoding and decoding of integer data
KR100586026B1 (ko) * 2005-03-25 2006-06-02 한국전자통신연구원 디지털 홀로그램 부호화 또는/및 복호화 장치 및 그 방법
KR101088375B1 (ko) * 2005-07-21 2011-12-01 삼성전자주식회사 가변 블록 변환 장치 및 방법 및 이를 이용한 영상부호화/복호화 장치 및 방법
JP4732203B2 (ja) * 2006-03-17 2011-07-27 キヤノン株式会社 画像符号化装置及び復号装置及びそれらの制御方法、並びに、コンピュータプログラム及びコンピュータ可読記憶媒体
EP2036360B1 (en) * 2006-06-30 2019-11-13 Telecom Italia S.p.A. Method, apparatus and system for robust video transmission with auxiliary information channel
US8116378B2 (en) * 2006-12-15 2012-02-14 Arcsoft, Inc. Variable length decoding method
US20100166053A1 (en) * 2007-01-31 2010-07-01 Sony Corporation Information processing device and method
KR101539240B1 (ko) * 2007-06-14 2015-07-30 삼성전자주식회사 영상 데이터의 엔트로피 부호화, 복호화 방법 및 장치
US20090238259A1 (en) * 2008-03-19 2009-09-24 Sung-Hung Yeh Method of rate control for video frame compression and encoder thereof
US7733245B2 (en) * 2008-06-25 2010-06-08 Aclara Power-Line Systems Inc. Compression scheme for interval data
EP2141815A1 (en) * 2008-07-01 2010-01-06 Deutsche Thomson OHG Method for a hybrid Golomb-Elias gamma coding
JP5236005B2 (ja) * 2008-10-10 2013-07-17 日本電信電話株式会社 符号化方法、符号化装置、復号方法、復号装置、プログラム及び記録媒体
US8761268B2 (en) * 2009-04-06 2014-06-24 Intel Corporation Selective local adaptive wiener filter for video coding and decoding
CN101729900B (zh) * 2009-11-17 2014-03-26 北京中星微电子有限公司 离散余弦变换系数的量化控制方法和量化装置
JP5741076B2 (ja) 2010-12-09 2015-07-01 ソニー株式会社 画像処理装置及び画像処理方法
CA2836161C (en) 2011-08-23 2017-12-19 Mediatek Singapore Pte. Ltd. Method and system of transform block processing according to quantization matrix in video coding
US9503750B2 (en) * 2011-11-04 2016-11-22 Futurewei Technologies, Inc. Binarization of prediction residuals for lossless video coding
KR20130050149A (ko) 2011-11-07 2013-05-15 오수미 인터 모드에서의 예측 블록 생성 방법
RU2634214C1 (ru) 2012-04-13 2017-10-24 Кэнон Кабусики Кайся Способ, устройство и система для кодирования и декодирования поднабора единиц преобразования кодированных видеоданных
EP3637621B1 (en) 2012-04-15 2023-06-07 Samsung Electronics Co., Ltd. Video decoding method using parameter update for de-binarization of entropy coded transformation coefficient, encoding apparatus using same for binarization
US10021419B2 (en) * 2013-07-12 2018-07-10 Qualcomm Incorported Rice parameter initialization for coefficient level coding in video coding process
CN103731155A (zh) * 2013-12-31 2014-04-16 成都华日通讯技术有限公司 无线电频谱信号的时域压缩方法
CA2880458A1 (en) 2014-01-29 2015-07-29 Ecole De Technologie Superieure Method and system for rate-constrained search ordering
US10142636B2 (en) * 2014-06-09 2018-11-27 Sony Corporation Communication system with coding mechanism and method of operation thereof
WO2016119046A1 (en) 2015-01-29 2016-08-04 Ecole De Technologie Superieure Methods and systems for determining motion vectors in a motion estimation process of a video encoder
US10432972B2 (en) * 2016-10-19 2019-10-01 Google Llc Guided offset correction for loop restoration in video coding
US10595033B2 (en) 2017-02-15 2020-03-17 Sony Corporation Variable length coding of header data for image compression
US10950251B2 (en) * 2018-03-05 2021-03-16 Dts, Inc. Coding of harmonic signals in transform-based audio codecs
DE102018122295A1 (de) * 2018-09-12 2020-03-12 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Verfahren zur Kompression von Bilddaten
FI3874492T3 (fi) * 2018-10-31 2024-01-08 Nokia Technologies Oy Spatiaalisten äänten parametrikoodauksen ja siihen liittyvän dekoodauksen määrittäminen
GB2582749A (en) * 2019-03-28 2020-10-07 Nokia Technologies Oy Determination of the significance of spatial audio parameters and associated encoding
KR20210136476A (ko) 2020-05-07 2021-11-17 삼성전자주식회사 쿼드 트리 방법의 파라미터들을 이용하여 압축하는 장치 및 방법
CN113143284B (zh) * 2021-04-13 2022-10-21 浙江大学 基于小波变换和双模预测的心电信号压缩方法
CN117411947B (zh) * 2023-12-15 2024-02-23 安徽中科大国祯信息科技有限责任公司 基于云边协同的水务数据快速传输方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5036457A (en) 1987-09-24 1991-07-30 Nucleus International Corporation Bit string compressor with boolean operation processing capability
US5532694A (en) 1989-01-13 1996-07-02 Stac Electronics, Inc. Data compression apparatus and method using matching string searching and Huffman encoding
US5021891A (en) 1990-02-27 1991-06-04 Qualcomm, Inc. Adaptive block size image compression method and system
US5107345A (en) 1990-02-27 1992-04-21 Qualcomm Incorporated Adaptive block size image compression method and system
US5079621A (en) * 1990-06-29 1992-01-07 Eastman Kodak Company Dct transform compression, transmission and recovery of digital color using virtual filtering mechanism
ATE159396T1 (de) 1991-06-04 1997-11-15 Qualcomm Inc System zur adaptiven kompression der blockgrössen eines bildes
US5784631A (en) 1992-06-30 1998-07-21 Discovision Associates Huffman decoder
US5379070A (en) * 1992-10-02 1995-01-03 Zoran Corporation Parallel encoding/decoding of DCT compression/decompression algorithms
US5583500A (en) * 1993-02-10 1996-12-10 Ricoh Corporation Method and apparatus for parallel encoding and decoding of data
US5764374A (en) * 1996-02-05 1998-06-09 Hewlett-Packard Company System and method for lossless image compression having improved sequential determination of golomb parameter
US5832135A (en) * 1996-03-06 1998-11-03 Hewlett-Packard Company Fast method and apparatus for filtering compressed images in the DCT domain
US6111991A (en) * 1998-01-16 2000-08-29 Sharp Laboratories Of America Method and apparatus for optimizing quantizer values in an image encoder
US6101281A (en) * 1997-06-09 2000-08-08 At&T Corp. Method for improving data encoding and decoding efficiency
EP0940994B1 (en) * 1998-03-06 2014-04-16 Canon Kabushiki Kaisha Image processing apparatus and method and storage medium storing steps realizing such method
EP0986026A1 (en) * 1998-09-07 2000-03-15 STMicroelectronics S.r.l. Fractal coding of data in the DCT domain
JP2000115782A (ja) * 1998-10-06 2000-04-21 Canon Inc 符号化装置及び方法及び記憶媒体
KR100317279B1 (ko) * 1998-11-04 2002-01-15 구자홍 무손실부호화방법및장치
US6529634B1 (en) * 1999-11-08 2003-03-04 Qualcomm, Inc. Contrast sensitive variance based adaptive block size DCT image compression
US6600836B1 (en) * 2000-01-28 2003-07-29 Qualcomm, Incorporated Quality based image compression
US6735254B2 (en) * 2001-06-29 2004-05-11 Qualcomm, Inc. DCT compression using Golomb-Rice coding

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0648928U (ja) * 1992-12-09 1994-07-05 アイワ株式会社 成形装置

Also Published As

Publication number Publication date
WO2003003738A3 (en) 2003-04-03
HK1095003A1 (en) 2007-04-20
MXPA03012053A (es) 2004-06-03
US6735254B2 (en) 2004-05-11
KR100944282B1 (ko) 2010-02-24
HK1068200A1 (en) 2005-04-22
US20130170748A1 (en) 2013-07-04
CN100518295C (zh) 2009-07-22
BR0210582A (pt) 2004-10-05
CN100518326C (zh) 2009-07-22
US20060171465A1 (en) 2006-08-03
CN1550104A (zh) 2004-11-24
SG157954A1 (en) 2010-01-29
US7031390B2 (en) 2006-04-18
EP1407603B1 (en) 2013-01-09
SG170613A1 (en) 2011-05-30
EP2509308A1 (en) 2012-10-10
CN101588502B (zh) 2013-04-24
CA2451604C (en) 2012-01-03
CN101588502A (zh) 2009-11-25
CA2451604A1 (en) 2003-01-09
WO2003003738A2 (en) 2003-01-09
JP2004531995A (ja) 2004-10-14
KR20090042872A (ko) 2009-04-30
KR20040018400A (ko) 2004-03-03
US20100322307A1 (en) 2010-12-23
US20040184545A1 (en) 2004-09-23
EP1407603A2 (en) 2004-04-14
US20030026335A1 (en) 2003-02-06
US7782960B2 (en) 2010-08-24
CN1893659A (zh) 2007-01-10
KR100926381B1 (ko) 2009-11-11
EP1407603A4 (en) 2010-06-02

Similar Documents

Publication Publication Date Title
JP4113114B2 (ja) Golomb−riceコーディングを使用するdct圧縮
JP4927888B2 (ja) ゴロム・ライスを使用する無損失フレーム内符号化
JP4800571B2 (ja) 損失の無い方法でディジタル画像を符号化するための装置および方法
JP2004531995A5 (ja)
US7630563B2 (en) System and method for decoding digital image and audio data in a lossless manner
AU2002316546A1 (en) Lossless intraframe encoding using golomb-rice
AU2002318196A1 (en) An apparatus and method for encoding digital image data in a lossless manner

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050525

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050525

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080229

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080311

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080410

R150 Certificate of patent or registration of utility model

Ref document number: 4113114

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110418

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120418

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130418

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130418

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140418

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term