JP5536231B2 - 量子化コードを利用した画質評価方法及び装置 - Google Patents

量子化コードを利用した画質評価方法及び装置 Download PDF

Info

Publication number
JP5536231B2
JP5536231B2 JP2012547972A JP2012547972A JP5536231B2 JP 5536231 B2 JP5536231 B2 JP 5536231B2 JP 2012547972 A JP2012547972 A JP 2012547972A JP 2012547972 A JP2012547972 A JP 2012547972A JP 5536231 B2 JP5536231 B2 JP 5536231B2
Authority
JP
Japan
Prior art keywords
quantization code
image quality
image
quality evaluation
phase
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2012547972A
Other languages
English (en)
Other versions
JP2013516890A (ja
Inventor
キム・ドンオ
パク・レホン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industry University Cooperation Foundation of Sogang University
Original Assignee
Industry University Cooperation Foundation of Sogang University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industry University Cooperation Foundation of Sogang University filed Critical Industry University Cooperation Foundation of Sogang University
Publication of JP2013516890A publication Critical patent/JP2013516890A/ja
Application granted granted Critical
Publication of JP5536231B2 publication Critical patent/JP5536231B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Image Processing (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Description

本発明は、量子化コードを利用した画質評価方法に係り、より詳細には、原映像と劣化映像との画素値を量子化された複素平面にマッピングした後、二進コード演算を行って、画質評価ハードウェア具現を容易にし、画質評価性能に優れる量子化コードを利用した画質評価方法及び装置に関する。
画質の評価に、PSNR(Peak Signal−to−Noise Ratio)やMSE(Mean Squared Error)が、客観的な画質評価指数として多く使われた。しかし、このような画質評価指数は、人間が感じる主観的な画質をよく反映することができなかったために、多様な画質評価指数が開発されている。UQI(Universal Quality Index)、SSIM(Structural Similarity)、MSSSIM(Multi−Scale SSIM)、及びMSVDのような画質評価指数が開発されたが、このような画質評価指数は、画質評価時に浮動小数点を使っているために、ハードウェアの具現が難しいだけではなく、大きなメモリサイズが必要である。したがって、効率的にハードウェアを具現することができる画質評価技術が必要である。
本発明が解決しようとする第1の課題は、画質評価ハードウェア具現を容易にしながら、画質評価性能に優れる量子化コードを利用した画質評価方法を提供するところにある。
本発明が解決しようとする第2の課題は、画質評価ハードウェア具現を容易にしながら、画質評価性能に優れる量子化コードを利用した画質評価装置を提供するところにある。
本発明は、前記第1の課題を解決するために、原映像と劣化映像とをフィルタリングする段階と、前記フィルタリング結果から位相量子化コードを生成させる段階と、前記原映像の位相量子化コードと前記劣化映像の位相量子化コードとの差を算出する段階と、前記算出された差を用いて、前記劣化映像の画質を評価する段階と、を含む量子化コードを利用した画質評価方法であって、前記フィルタリング段階は、前記原映像と前記劣化映像との画素値を複素平面の実数部と虚数部とにマッピング可能に変換する段階であり、前記位相量子化コードを生成させる段階は、前記フィルタリング結果を複素平面にマッピングすることにより位相に対して量子化して位相量子化コードを生成する段階であることを特徴とする量子化コードを利用した画質評価方法を提供する。
本発明の一実施形態によれば、前記差を算出する段階は、前記原映像の位相量子化コードと前記劣化映像の位相量子化コードとのハミング距離を算出する段階であり、前記劣化映像の画質を評価する段階は、前記算出されたハミング距離を用いて、前記劣化映像の画質を評価する段階であり得る。
また、前記フィルタリング段階は、前記原映像と前記劣化映像との画素値を複素平面の実数部と虚数部とにマッピング可能に変換する段階であり得る。
また、前記位相量子化コードを生成させる段階は、前記フィルタリング結果からサイズ量子化コードを生成させる段階をさらに含み、前記ハミング距離を算出する段階は、前記原映像と前記劣化映像のそれぞれに対応するサイズ量子化コードと位相量子化コードで構成された二進コードとのハミング距離を算出する段階であり得る。
また、前記画素値は、輝度値であることが望ましい。
本発明の他の実施形態によれば、前記フィルタリング段階は、前記原映像と前記劣化映像との各画素別x方向グラジエントとy方向グラジエントとを算出する段階であり得る。
また、前記フィルタリング段階で使われるフィルターは、ガボール(Gabor)フィルターまたは複素ウェーブレット変換フィルターであることが望ましい。
本発明のさらに他の実施形態によれば、前記劣化映像の画質を評価する段階は、前記算出されたハミング距離を用いて画質評価指数を算出し、前記画質評価指数をDMOSと比較できるように変換した後、前記変換された画質評価指数とDMOSとの類似程度によって、前記劣化映像の画質を評価することができる。
本発明は、前記第2の課題を解決するために、原映像と劣化映像とをフィルタリングするフィルター部と、前記フィルター部の出力から位相量子化コードを生成させる量子化コード部と、前記原映像の位相量子化コードと前記劣化映像の位相量子化コードとの差を算出する量子化コード差算出部と、前記算出された差を用いて、前記劣化映像の画質を評価する画質評価部と、を含む量子化コードを利用した画質評価装置であって、前記フィルター部は、前記原映像と前記劣化映像との画素値を複素平面の実数部と虚数部とにマッピング可能に変換し、前記量子化コード部は、前記フィルタリング結果を複素平面にマッピングすることにより位相に対して量子化して位相量子化コードを生成することを特徴とする量子化コードを利用した画質評価装置を提供する。
本発明によれば、原映像と劣化映像との画素値を量子化された複素平面にマッピングした後、二進コード演算を行うので、画質評価ハードウェア具現を容易にし、画質評価性能に優れる。また、本発明によれば、フィルター出力が、1つの画素値に対応する複素値または一対の値を出力する場合に、フィルター特性によって新たな画質評価指数を生成することができる。
本発明の一実施形態による量子化コードを利用した画質評価装置のブロック図である。 K個のサイズレベルとL個の位相レベルとで量子化された複素平面量子化の概念図を示す。 ビルイメージの8×8ブロック位相量子化コードを生成させる過程の例を示す。 原映像と劣化映像とのハミング距離マップと輝度値差の絶対値を示す。 本発明の一実施形態による量子化コードを利用した画質評価方法のフローチャートである。 原映像と劣化映像及び本発明の一実施形態による位相量子化コードによって得られたハミング距離マップを示す。 DMOS値と5種の画質評価指数をフィッティングしたグラフを示す。
本発明に関する具体的な内容の説明に先立って、理解の便宜上、本発明が解決しようとする課題の解決方案の概要あるいは技術的思想の核心を先に提示する。
本発明の一実施形態による量子化コードを利用した画質評価方法は、原映像と劣化映像とをフィルタリングした後、該フィルタリング結果から位相量子化コードを生成させ、原映像の位相量子化コードと劣化映像の位相量子化コードとの差を算出する。以後、算出された差を用いて劣化映像の画質を評価することを特徴とする。
以下、望ましい実施形態を挙げて本発明をさらに詳細に説明する。しかし、これら実施形態は、本発明をより具体的に説明するためのものであって、本発明の範囲が、これに制限されるものではないということは当業者に自明である。同時に、本発明と関連した公知機能あるいは構成についての具体的な説明、そして、それ以外の諸般の事項が、本発明の要旨を不明にする恐れがあると判断される場合、その詳細な説明を省略する。
図1は、本発明の一実施形態による量子化コードを利用した画質評価装置のブロック図である。
図1を参照すると、本発明の一実施形態による量子化コードを利用した画質評価装置は、輝度値変換部110、フィルター部120、量子化コード部130、量子化コード差算出部140、及び画質評価部150で構成される。
輝度値変換部110は、映像のRGB値を輝度値(luminance、Y)に変換する。輝度値への変換は、RGB−YCbCr変換を利用できる。輝度値変換部110は、原映像と劣化映像とを受信し、原映像と劣化映像画素のRGB値から輝度値を生成させることが望ましい。
フィルター部120は、輝度値変換部110が出力した各画素別輝度値を入力として、各画素に対応する2つの値を生成させる。フィルター部120は、グラジエントフィルター、特に、ソーベル演算子を利用し、ガボールフィルターまたは複素ウェーブレット変換フィルターを利用することも可能である。フィルター部120がグラジエントフィルターである場合、フィルター部120が生成する2つの値は、x方向グラジエントとy方向グラジエントとになり、フィルター部120がガボールフィルターである場合、コサイン(cosine)関数によって特定される実数部とサイン(sine)関数によって特定される虚数部が、輝度値に対応する2つの値になりうるが、これに限定されるものではない。したがって、本発明の一実施形態によるフィルター部120は、各画素別輝度値を変換して複素平面に表現できるように、2つの値を生成させるフィルターをいずれも含むことが望ましい。以下、特に、フィルター部120が、グラジエントフィルターのうち、ソーベル演算子である場合を詳しく説明する。
Iが、イメージを表わすとするとき、イメージのx軸とy軸とによるグラジエント値であるIとIとが、次の数式1のように定義される。
Figure 0005536231
量子化コード部130は、フィルター部120が出力した2つの値を複素平面上にマッピングし、該マッピング結果から量子化コードを生成させる。この際、複素平面は、サイズと位相とに対して量子化されていることが望ましい。量子化コード部130は、量子化されている複素平面にフィルター部120が出力した値をマッピングし、サイズと位相とに対してコード化する。量子化コード部130については、図2と図3とを参照してより詳細に説明する。
量子化コード差算出部140は、原映像と劣化映像のそれぞれに対する量子化コードを比較して、コード間の差を算出する。コード間の差は、ハミング距離を算出することによって、計算することができるが、これに限定されるものではない。
画質評価部150は、算出された差に基づいて画質評価指数を生成させる。
本発明は、映像の構造的歪曲が映像の位相変化を発生させるという事実に基づく。したがって、映像の位相変化を測定することによって、構造的歪曲を測定することができる。但し、位相のみを利用するときよりは、サイズと位相とを利用するとき、優れた性能を表わす。
図2は、K個のサイズレベルとL個の位相レベルとで量子化された複素平面量子化の概念図を示す。
図2の(a)は、K=4、L=8である場合に、サイズ、位相量子化を示し、図2の(b)は、K=1、L=4である場合に、サイズ、位相量子化を示す。
図2の(a)を参照すると、サイズと位相との量子化コード(Amplitude/Phase Quantization Code、APQC)を表現するために、サイズを4個に、位相を8個に量子化したものを示す。K=4であれば、コード化するのに2ビットが必要であり、L=8であれば、3ビットが必要であるので、量子コード化するのに総5ビットが必要である。
図2の(b)を参照すると、サイズは量子化せず、位相のみ4個に量子化したものを示す。位相のみ4個に量子化した場合を、特に、位相量子化コード(Phase Quantization Code、PQC)であると称する。以下、グラジエントフィルターを例として説明するが、他のフィルターの場合にも、同様に適用可能である。
グラジエントフィルターで、IとIは、それぞれ複素平面での実数部と虚数部とに対応する。図2の(b)を参照すると、もし、グラジエントフィルターの出力値Iが正の値、Iが負の値を有すれば、位相量子化コードは、[10]の2ビットコードになる。すなわち、フィルター部120の出力値が有する実数部と虚数部との符号のみを用いても、容易に位相量子化コードを計算することができる。また、もし、フィルター部120の出力値が有する実数部と虚数部が、2つとも正の値であれば、位相量子化コードは、[11]であることを確認することができる。
このように、位相量子化コードは、イメージ内に存在するピクセル別に計算されうるので、何れか1つのイメージの位相量子化コードは、2×Nビットサイズの2ビットコードシーケンスと表現される。ここで、Nは、イメージピクセルの総個数を表わす。位相量子化コードを利用すれば、何れか1つのイメージを2ビットコードシーケンスと表現することができるので、イメージ間の二進算術演算を計算することが容易である。また、位相量子化コードに必要なメモリサイズがピクセル当たり2ビットである一方、浮動小数点数(floating−point number)と表現される特徴値間の差を測定する従来の一般的な画質評価指数のメモリサイズがピクセル当たり1バイトであるので、位相量子化コードに必要なメモリサイズが、ピクセル当たりさらに少なく必要であるということが分かる。
図3は、ビルイメージの8×8ブロック位相量子化コードを生成させる過程の例を示す。
図3の(a)は、拡大された8×8ブロックの原映像と、これによる輝度値を示し、図3の(b)は、拡大された8×8ブロックの白色ノイズで歪曲されたイメージと、これによる輝度値を示す。図3の(c)と図3の(d)は、図3の(a)と図3の(b)とに拡大されたブロックに対するグラジエント値I(左側)とI(右側)とをそれぞれ示す。図3の(e)と図3の(f)は、図3の(c)と図3の(d)との位相量子化コード(PQC)をそれぞれ示す。図3を参照すると、原映像と劣化映像のそれぞれの映像に対して位相量子化コードを生成させる過程が分かる。すなわち、フィルター出力の符号をコード化した結果である原映像と劣化映像との二進コードが、図3の(e)と図3の(f)とに示されており、生成された二進コードは、映像の画質の評価に使われる。
以下、量子化コード差算出部140についてより詳しく説明する。
一般的に、画質を評価するほとんどの評価指標は、原映像と劣化映像とを表わす特徴値間の差を測定する。しかし、実質的には、目に見える差が画質評価において、特徴値間の差程度ほどに重要である。このような点から見るとき、位相量子化コードは、2つの比較対象イメージが異なるとき、2つのイメージ特徴値の符号の差をよく分かることができる。したがって、原映像と劣化映像が、フィルターを通じて出力された値の位相量子化コード間の差を計算することは、2つの映像間の画質を評価することと類似した結果を有する。
原映像と劣化映像との位相量子化コードを画質を評価するために比較するに当たって、本発明の一実施形態では、ハミング距離を利用する。ハミング距離は、2つの量子化コード間にどれほど異なるビットがあるかを表わす尺度である。もし、画質が劣化されれば、映像の位相量子化コードは変化する。したがって、原映像と劣化映像とのフィルター出力の位相量子化コード間のハミング距離は、映像の劣化程度をよく反映することができる。原映像と劣化映像との位相量子化コードのn番目のビットでのハミング距離HD(n)は、次の数式2のように定義されうる。
Figure 0005536231
ここで、cとcは、それぞれ原映像と劣化映像との位相量子化コードを表わし、
Figure 0005536231
は、排他的論理積(Exclusive−OR)を意味する。位相量子化コードの代わりに、サイズ及び位相量子化コードを利用する場合にも、同様にハミング距離を算出することができる。
以下、画質評価部150についてより詳しく説明する。
本発明の一実施形態による量子化コードを利用した画質評価装置が利用する位相量子化コード基盤の画質評価指数(Image Quality Measurement、IQM)は、次のように計算されうる。
Figure 0005536231
ここで、2Nは、位相量子化コードの全体ビット数を意味する。数式3によって生成された画質評価指数は、ロジスティック回帰分析(logistic regression)を用いてDMOSと比較することができる画質評価指数に変換される。
図4は、原映像と劣化映像とのハミング距離マップと輝度値差の絶対値を示す。
図4の(a)は、原映像と劣化映像とに対するグラジエントフィルター出力の位相量子化コードを示す。図4の(b)は、図4の(a)に示された2つの位相量子化コード間のハミング距離マップを示す。図4の(c)は、図3の(a)と図3の(b)とに示された拡大された8×8ブロック間の輝度値差の絶対値を示す。図4の(c)で、より明るい陰影は、ハミング距離HDが1であり、より暗い陰影は、ハミング距離HDが2である画素に対応する。
もし、ある劣化映像のハミング距離マップが多い白い領域を含む場合には、原映像と劣化映像との差がないということを意味するので、その劣化映像は、優れた画質であると判断することができる。
図4の(b)と図4の(c)とに示したように、ハミング距離マップは、絶対差値映像と正確に同じではないが、類似している。したがって、映像の変化が位相量子化コードの変化を生成させるという点で、位相量子化コードは、画質をよく反映しているということが分かる。
図5は、本発明の一実施形態による量子化コードを利用した画質評価方法のフローチャートである。
図5を参照すると、本発明の一実施形態による量子化コードを利用した画質評価方法は、図1に示された量子化コードを利用した画質評価装置で時系列的に処理される段階で構成される。したがって、以下、省略された内容であるとしても、図1に示された量子化コードを利用した画質評価装置に関して、前述された内容は、本実施形態による画質評価方法にも適用される。
S510段階で、画質評価装置は、原映像と劣化映像とのRGB値を輝度値(Y)に変換する。
S520段階で、画質評価装置は、S510段階で変換された各画素別輝度値を入力として、各画素に対応する2つの値を生成させるフィルタリングを行う。この際、フィルタリングは、グラジエントフィルター、特に、ソーベル演算子を利用し、ガボールフィルターまたは複素ウェーブレット変換フィルターを利用することも可能である。グラジエントフィルターである場合、フィルタリングを行って生成する2つの値は、x方向グラジエントとy方向グラジエントとになり、ガボールフィルターである場合、コサイン関数によって特定される実数部とサイン関数によって特定される虚数部が、輝度値に対応する2つの値になりうる。したがって、本発明の一実施形態によるフィルタリングは、各画素別輝度値を変換して複素平面に表現させるフィルターをいずれも含むことが望ましい。
S530段階で、画質評価装置は、S520段階でフィルタリングされた2つの値を複素平面上にマッピングし、該マッピング結果から量子化コードを生成させる。この際、複素平面は、サイズと位相とに対して量子化されていることが望ましい。
S540段階で、画質評価装置は、原映像と劣化映像のそれぞれに対する量子化コードを比較して、差を算出する。
S550段階で、画質評価装置は、算出された差に基づいて画質評価指数を生成させ、画質を評価する。
図6は、原映像と劣化映像及び本発明の一実施形態による位相量子化コードによって得られたハミング距離マップを示す。
図6の(a)は、原映像を示し、図6の(b)と図6の(c)は、標準偏差がそれぞれ1.708と4.916とであるガウスブラーで劣化された映像を示す。図6の(d)と図6の(e)は、それぞれ本発明の一実施形態による位相量子化コードによって生成された図6の(b)と図6の(c)とのハミング距離マップを示す。図6の(d)と図6の(e)で、白い領域、灰色領域、及び黒い領域は、それぞれ0、1、2の値を有するハミング距離値を示す。
したがって、もし、劣化映像のハミング距離マップが、多い白い領域を有するならば、映像は優れた画質を有することを意味する。図6の(c)に示された劣化映像は、図6の(b)に示された劣化映像よりさらに劣化された映像である。図6の(d)と図6の(e)とを説明すると、図6の(e)のハミング距離マップが、図6の(d)のハミング距離マップよりさらに多い黒い領域があるということが分かるので、図6の(c)が、図6の(b)よりさらに劣化されたということが分かる。このような結果から本発明の一実施形態による量子化コードを利用した画質評価方法が、視覚的な劣化をよく反映しているということが分かる。
本発明の一実施形態による量子化コードを利用した画質評価方法の性能を評価するために、LIVE(Laboratory for Image&Video Engineering)データセットを利用する。LIVEデータセットは、29個の原映像、982個の劣化映像、及びDMOS(Differential Mean OpinionScore)値が含まれている。一般的に、768×512イメージサイズを有する劣化映像は、JPEG、JPEG2000、白色ノイズ、ガウスブラー、及びJPEG2000ビットストリームでの伝送エラーなどによって劣化されている。
数式3によって算出された本発明の一実施形態による位相量子化コード基盤の画質評価指数(IQM)は、画質の評価に直ちに使うことができない。すなわち、ほとんどの画質評価指数は、主観的な画質評価指数であるDMOSと関連されることが必要である。なぜならば、画質評価の目的は、映像の主観的な画質を量的に表現することであるためである。
このために、ロジスティック回帰分析を用いてDMOSと比較するDMOS対比画質評価指数を生成しなければならず、次の数式4のように表現される。
Figure 0005536231
ここで、a、a、a、a、及びaは、ロジスティック回帰分析後に得られる定数を表わす。
ロジスティック回帰分析方法によって画質評価指数をフィッティング(fitting)した後に得られたDMOS対比画質評価指数の性能を評価するために、ロジスティック回帰分析方法によってフィッティングされた結果と主観的な画質評価指数であるDMOSとを比較する。このような性能比較は、ピアソン相関係数(Pearson correlation coefficient)、RMSE(Root Mean SquaredError)、SROCC(Spearman rank order CC)を利用できる。
図7は、DMOS値と5種の画質評価指数をフィッティングしたグラフを示す。もし、ある画質評価指数が対角線に近ければ、その画質評価指数は、DMOSと類似していることを意味する。したがって、図7に示したように、グラジエントフィルターを利用した位相量子化コード(Gradient−PQC)基盤画質評価指数が、他の画質評価指数よりさらにDMOSと類似していることが分かる。
表1は、ピアソン相関係数を用いてLIVEデータセットに対する画質評価指数の性能評価を表わす。表1を参照すると、Gradient−PQCが、最も大きなピアスン係数を有することが分かり、ピアスン係数が大きいほど、DMOSと類似しているということを意味する。
Figure 0005536231
表2は、RMSEを用いてLIVEデータセットに対する画質評価指数の性能評価を表わす。表2を参照すると、Gradient−PQCが、他の画質評価指数と比較するとき、小さなRMSEを有することが分かり、RMSEが小さいほど、DMOSと類似しているということを意味する。
Figure 0005536231
表3は、SROCCを用いてLIVEデータセットに対する画質評価指数の性能評価を表わす。表3を参照すると、Gradient−PQCが、他の画質評価指数と比較するとき、全体的には大きなSROCCを有する。特に、ガウスブーラとfast fading distortionとに対しては、Gradient−PQCが最も優れた性能を表わしている。しかし、JPEG2000と白色ノイズ劣化に対しては、MSVDが最も優れた性能を表わし、JPEGに対しては、SSIMが最も優れる。
Figure 0005536231
表4は、グラジエントフィルターを利用する場合に、図2で説明したサイズと位相の量子化コード(APQC)及び位相量子化コード(PQC)との性能比較を表わす。GPQCは、グラジエントフィルターを利用したPQCを意味し、GAPQCは、グラジエントフィルターを利用したAPQCを意味する。また、Kは、サイズを量子化した個数を表わし、Thは、臨界サイズを表わす。グラジエントフィルターでサイズは、x軸とy軸とによるグラジエント値であるIとIとをそれぞれ二乗して加算した値から二乗根を求めた値に定める。
表4を参照すると、位相のみを量子化して使うPQCよりも、サイズと位相いずれもを量子化して使ったAPQCの性能がさらに優れることが分かり、また、サイズ量子化レベルを多く区分するほど、性能がさらに優れることが分かる。
PQCは、位相を4個に量子化して一画素を二進コードで表現する場合、図2の(b)で説明したように、2ビットが必要となる。また、APQCの場合には、サイズを2個に量子化し、位相を4個に量子化する場合、3ビットが必要となり、サイズを4個に量子化し、位相を4個に量子化すると、4ビットが必要となる。
Figure 0005536231
本発明の実施形態は、多様なコンピュータ手段を通じて行われうるプログラム命令形態で具現されてコンピュータ判読可能な媒体に記録されうる。前記コンピュータ判読可能な媒体は、プログラム命令、データファイル、データ構造などを単独または組み合わせて含みうる。前記媒体に記録されるプログラム命令は、本発明のために特別に設計されて構成されたものなどであるか、コンピュータソフトウェア当業者に公知されて使用可能なものでもあり得る。コンピュータ判読可能な記録媒体の例には、ハードディスク、フロッピー(登録商標)ディスク、及び磁気テープのような磁気媒体(magnetic media)、CD−ROM、DVDのような光記録媒体(optical media)、フロプティカルディスク(floptical disk)のような磁気−光媒体(magneto−opticalmedia)、及びROM、RAM、フラッシュメモリのようなプログラム命令を保存して行うように特別に構成されたハードウェア装置が含まれる。プログラム命令の例には、コンパイラによって作られるもののような機械語コードだけではなく、インタプリタなどを使って、コンピュータによって実行可能な高級言語コードを含む。前記したハードウェア装置は、本発明の動作を行うために、1つ以上のソフトウェアモジュールとして作動するように構成され、その逆も同様である。
以上、本発明では、具体的な構成要素のような特定事項と限定された実施形態及び図面とによって説明されたが、これは、本発明のより全般的な理解を助けるために提供されたものあり、本発明は、前記の実施形態に限定されるものではなく、当業者ならば、このような記載から多様な修正及び変形が可能である。したがって、本発明の思想は、説明された実施形態に限って定められてはならず、後述する特許請求の範囲だけではなく、本特許請求の範囲と均等であるか、等価的変形があるあらゆるものは、本発明の思想の範疇に属する。
本発明は、量子化コードを利用した画質評価方法及び装置に関連する技術分野に適用可能である。

Claims (15)

  1. 原映像と劣化映像とをフィルタリングする段階と、
    前記フィルタリング結果から位相量子化コードを生成させる段階と、
    前記原映像の位相量子化コードと前記劣化映像の位相量子化コードとの差を算出する段階と、
    前記算出された差を用いて、前記劣化映像の画質を評価する段階と、
    を含む量子化コードを利用した画質評価方法であって、
    前記フィルタリング段階は、前記原映像と前記劣化映像との画素値を複素平面の実数部と虚数部とにマッピング可能に変換する段階であり、
    前記位相量子化コードを生成させる段階は、前記フィルタリング結果を複素平面にマッピングすることにより位相に対して量子化して位相量子化コードを生成する段階であることを特徴とする量子化コードを利用した画質評価方法。
  2. 前記差を算出する段階は、
    前記原映像の位相量子化コードと前記劣化映像の位相量子化コードとのハミング距離を算出する段階であり、
    前記劣化映像の画質を評価する段階は、
    前記算出されたハミング距離を用いて、前記劣化映像の画質を評価する段階であることを特徴とする請求項1に記載の量子化コードを利用した画質評価方法。
  3. 前記位相量子化コードを生成させる段階は、
    前記フィルタリング結果からサイズ量子化コードを生成させる段階をさらに含み、
    前記ハミング距離を算出する段階は、
    前記原映像と前記劣化映像のそれぞれに対応するサイズ量子化コードと位相量子化コードで構成された二進コードとのハミング距離を算出する段階であることを特徴とする請求項2に記載の量子化コードを利用した画質評価方法。
  4. 前記画素値は、輝度値であることを特徴とする請求項2に記載の量子化コードを利用した画質評価方法。
  5. 前記フィルタリング段階は、
    前記原映像と前記劣化映像との各画素別x方向グラジエントとy方向グラジエントとを算出する段階であることを特徴とする請求項1に記載の量子化コードを利用した画質評価方法。
  6. 前記フィルタリング段階で使われるフィルターは、ガボール(Gabor)フィルターまたは複素ウェーブレット変換フィルターであることを特徴とする請求項1に記載の量子化コードを利用した画質評価方法。
  7. 前記劣化映像の画質を評価する段階は、
    前記算出されたハミング距離を用いて画質評価指数を算出し、前記画質評価指数をDMOSと比較できるように変換した後、前記変換された画質評価指数とDMOSとの類似程度によって、前記劣化映像の画質を評価することを特徴とする請求項2に記載の量子化コードを利用した画質評価方法。
  8. 原映像と劣化映像とをフィルタリングするフィルター部と、
    前記フィルター部の出力から位相量子化コードを生成させる量子化コード部と、
    前記原映像の位相量子化コードと前記劣化映像の位相量子化コードとの差を算出する量子化コード差算出部と、
    前記算出された差を用いて、前記劣化映像の画質を評価する画質評価部と、
    を含む量子化コードを利用した画質評価装置であって、
    前記フィルター部は、前記原映像と前記劣化映像との画素値を複素平面の実数部と虚数部とにマッピング可能に変換し、
    前記量子化コード部は、前記フィルタリング結果を複素平面にマッピングすることにより位相に対して量子化して位相量子化コードを生成することを特徴とする量子化コードを利用した画質評価装置。
  9. 前記量子化コード差算出部は、前記原映像の位相量子化コードと前記劣化映像の位相量子化コードとのハミング距離を算出し、
    前記画質評価部は、前記算出されたハミング距離を用いて、前記劣化映像の画質を評価することを特徴とする請求項8に記載の量子化コードを利用した画質評価装置。
  10. 前記量子化コード部は、
    前記フィルター部の出力からサイズ量子化コードをさらに生成させ、
    前記量子化コード差算出部は、
    前記原映像と前記劣化映像のそれぞれに対応するサイズ量子化コードと位相量子化コードで構成された二進コードとのハミング距離を算出することを特徴とする請求項9に記載の量子化コードを利用した画質評価装置。
  11. 前記画素値は、輝度値であることを特徴とする請求項8に記載の量子化コードを利用した画質評価装置。
  12. 前記フィルター部は、
    前記原映像と前記劣化映像との各画素別x方向グラジエントとy方向グラジエントとを算出することを特徴とする請求項8に記載の量子化コードを利用した画質評価装置。
  13. 前記フィルター部は、ガボールフィルターまたは複素ウェーブレット変換フィルターであることを特徴とする請求項8に記載の量子化コードを利用した画質評価装置。
  14. 前記画質評価部は、
    前記算出されたハミング距離を用いて画質評価指数を算出し、前記画質評価指数をDMOSと比較できるように変換した後、前記変換された画質評価指数とDMOSとの類似程度によって、前記劣化映像の画質を評価することを特徴とする請求項9に記載の量子化コードを利用した画質評価装置。
  15. 請求項1ないし請求項7のうち何れか一項に記載の方法をコンピュータで実行させるためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
JP2012547972A 2010-01-12 2011-01-11 量子化コードを利用した画質評価方法及び装置 Expired - Fee Related JP5536231B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20100002890A KR101092650B1 (ko) 2010-01-12 2010-01-12 양자화 코드를 이용한 화질 평가 방법 및 장치
KR10-2010-0002890 2010-01-12
PCT/KR2011/000177 WO2011087251A2 (ko) 2010-01-12 2011-01-11 양자화 코드를 이용한 화질 평가 방법 및 장치

Publications (2)

Publication Number Publication Date
JP2013516890A JP2013516890A (ja) 2013-05-13
JP5536231B2 true JP5536231B2 (ja) 2014-07-02

Family

ID=44304789

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012547972A Expired - Fee Related JP5536231B2 (ja) 2010-01-12 2011-01-11 量子化コードを利用した画質評価方法及び装置

Country Status (6)

Country Link
US (1) US8948521B2 (ja)
EP (1) EP2528038A4 (ja)
JP (1) JP5536231B2 (ja)
KR (1) KR101092650B1 (ja)
CN (1) CN102713977B (ja)
WO (1) WO2011087251A2 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012057582A1 (en) 2010-10-28 2012-05-03 Lg Electronics Inc. Display apparatus
WO2015188339A1 (en) * 2014-06-12 2015-12-17 Nokia Technologies Oy Method, apparatus, computer program product and system for reputation generation
CN104394405B (zh) * 2014-11-19 2017-01-04 同济大学 一种基于全参考图像的客观质量评价方法
US9741107B2 (en) * 2015-06-05 2017-08-22 Sony Corporation Full reference image quality assessment based on convolutional neural network
JP7129326B2 (ja) * 2018-12-14 2022-09-01 キヤノン株式会社 撮像装置及びその制御方法及びプログラム
CN110070519B (zh) * 2019-03-13 2023-07-14 西安电子科技大学 基于相位一致性的拼接图像质量测定方法、图像拼接系统
CN110070282B (zh) * 2019-04-17 2023-06-20 国网安徽省电力公司 一种基于综合关联度的低压台区线损影响因素分析方法
CN114445386B (zh) * 2022-01-29 2023-02-24 泗阳三江橡塑有限公司 一种基于人工智能的pvc管件质量检测评估方法及系统

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5974159A (en) * 1996-03-29 1999-10-26 Sarnoff Corporation Method and apparatus for assessing the visibility of differences between two image sequences
JP4519323B2 (ja) * 1999-02-11 2010-08-04 ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー ビデオ信号品質の解析
JP2005045523A (ja) * 2003-07-22 2005-02-17 Matsushita Electric Ind Co Ltd デジタルビデオデータ検査装置および方法
EP1727088A1 (en) * 2005-05-25 2006-11-29 Thomson Licensing Method for assessing image quality
KR100731358B1 (ko) * 2005-11-09 2007-06-21 삼성전자주식회사 화질 평가 방법 및 시스템
KR20080031548A (ko) * 2006-10-04 2008-04-10 광운대학교 산학협력단 실시간 화질 평가 방법 및 장치
JP2009260940A (ja) * 2008-03-21 2009-11-05 Nippon Telegr & Teleph Corp <Ntt> 映像品質客観評価方法、映像品質客観評価装置、およびプログラム
EP2112833B1 (en) * 2008-04-24 2014-12-17 Psytechnics Ltd Method and apparatus for measuring blockiness in video images
CN101441768A (zh) * 2008-11-28 2009-05-27 武汉大学 基于结构失真和图像清晰度的图像质量评价方法
US8515182B2 (en) * 2009-02-11 2013-08-20 Ecole De Technologie Superieure Method and system for determining a quality measure for an image using multi-level decomposition of images
WO2010093745A1 (en) * 2009-02-12 2010-08-19 Dolby Laboratories Licensing Corporation Quality evaluation of sequences of images
CN102405644B (zh) * 2009-04-21 2014-09-10 马维尔国际贸易有限公司 基于因特网视频内容的经估算质量对视频后处理器的自动调节

Also Published As

Publication number Publication date
CN102713977B (zh) 2015-01-07
EP2528038A2 (en) 2012-11-28
KR101092650B1 (ko) 2011-12-13
WO2011087251A2 (ko) 2011-07-21
EP2528038A4 (en) 2016-04-13
KR20110082942A (ko) 2011-07-20
CN102713977A (zh) 2012-10-03
US8948521B2 (en) 2015-02-03
WO2011087251A3 (ko) 2011-12-01
US20120308145A1 (en) 2012-12-06
JP2013516890A (ja) 2013-05-13

Similar Documents

Publication Publication Date Title
JP5536231B2 (ja) 量子化コードを利用した画質評価方法及び装置
Li et al. Revealing the trace of high-quality JPEG compression through quantization noise analysis
Attar et al. Image quality assessment using edge based features
US20100189369A1 (en) Decoding apparatus, dequantizing method, distribution determining method, and program thereof
JP6320115B2 (ja) 画像処理装置、画像処理方法、およびプログラム
IT201600122898A1 (it) Metodi e apparati per codificare e decodificare immagini o flussi video digitali
CN100505895C (zh) 一种视频质量评估方法
Liang et al. A no-reference perceptual blur metric using histogram of gradient profile sharpness
CN113038129A (zh) 一种用于机器学习的数据样本获取的方法及设备
JP5846357B2 (ja) 画像処理装置及び画像処理プログラム
Zhang et al. Robust primary quantization step estimation on resized and double JPEG compressed images
CN117830137A (zh) 一种基于特征混合的单向解码降噪方法、设备及介质
JP4645948B2 (ja) 復号化装置及びプログラム
CN104952052A (zh) 一种对emccd图像进行增强的方法
Zhang et al. Local binary pattern statistics feature for reduced reference image quality assessment
CN102742271A (zh) 在使用离散余弦变换的图像压缩中检测量化噪声的伪影
Wen et al. TransIm: Transfer image local statistics across EOTFs for HDR image applications
CN104902277B (zh) 一种基于单演二进制编码的无参考图像质量评价方法
Wu et al. Total variation based perceptual image quality assessment modeling
Gore et al. Local standard deviation based image quality metrics for jpeg compressed images
Jeong et al. No-reference image-quality metric based on blur radius and visual blockiness
CN102724494B (zh) 一种嵌入可逆水印的方法、提取方法以及装置和系统
Kim et al. Image quality measure using the phase quantization code
CN106412583A (zh) 一种图像压缩方法和装置
CN117078564B (zh) 视频会议画面的智能生成方法及其系统

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130823

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130827

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20131125

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20131202

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20131225

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140108

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140124

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140131

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140325

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140423

R150 Certificate of patent or registration of utility model

Ref document number: 5536231

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees