JP2000036971A - 画質評価装置 - Google Patents
画質評価装置Info
- Publication number
- JP2000036971A JP2000036971A JP20474198A JP20474198A JP2000036971A JP 2000036971 A JP2000036971 A JP 2000036971A JP 20474198 A JP20474198 A JP 20474198A JP 20474198 A JP20474198 A JP 20474198A JP 2000036971 A JP2000036971 A JP 2000036971A
- Authority
- JP
- Japan
- Prior art keywords
- output
- frequency filter
- signal
- image
- image quality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
(57)【要約】
【課題】 画像処理に伴う画質劣化を評価する際、評価
結果を人間の行う主観評価値に精度良く一致させる。 【解決手段】 差分演算部１が画像処理を行う前と行っ
た後との両画像信号間で差分演算を行い、時空間演算部
２では、この差分演算出力を２分して、レベル依存制御
回路１６の制御により、それぞれ画像信号のレベルに応
じて特性を変えた可変の時間周波数フィルタ１３と、可
変の空間周波数フィルタ１４とから画像信号のレベルに
応じた最適な特性のフィルタがそれぞれ選択されてフィ
ルタ演算が施される。フィルタ演算後の出力は、乗算器
１７，１８を介し積分され、その積分出力と、差分演算
部１の出力とが、重み付け加算部２２で重み付け加算さ
れて評価値として出力される。
結果を人間の行う主観評価値に精度良く一致させる。 【解決手段】 差分演算部１が画像処理を行う前と行っ
た後との両画像信号間で差分演算を行い、時空間演算部
２では、この差分演算出力を２分して、レベル依存制御
回路１６の制御により、それぞれ画像信号のレベルに応
じて特性を変えた可変の時間周波数フィルタ１３と、可
変の空間周波数フィルタ１４とから画像信号のレベルに
応じた最適な特性のフィルタがそれぞれ選択されてフィ
ルタ演算が施される。フィルタ演算後の出力は、乗算器
１７，１８を介し積分され、その積分出力と、差分演算
部１の出力とが、重み付け加算部２２で重み付け加算さ
れて評価値として出力される。
Description
【０００１】
【発明の属する技術分野】本発明は、デジタル圧縮、伸
張などのディジタル画像処理に伴う画質劣化を自動的に
測定し、人問の主観評価に近い評価値を出力することを
可能とする、画像処理に伴なう画質劣化を評価するため
の画質評価装置に関するものである。
張などのディジタル画像処理に伴う画質劣化を自動的に
測定し、人問の主観評価に近い評価値を出力することを
可能とする、画像処理に伴なう画質劣化を評価するため
の画質評価装置に関するものである。
【０００２】
【従来の技術】画像信号のデジタル圧縮・伸張やコンポ
ーネントーコンポジット変換あるいはアナログ処理で
は、程度の差はあっても画質劣化を伴う。これら画質劣
化の程度を人間の主観評価に近い評価値で測定する目的
で、例えば、ブロック内での視覚特性を考慮した重み付
けをするなど空間的な処理に工夫を加えた圧縮画像評価
システム（テレビジョン学会技術報告ＩＴＥ Ｔｅｃｈ
ｎｉｃａｌ ＲｅｐｏｒｔＶｏ１．２０，Ｎｏ．３５
「ディジタル圧縮画像評価システムの開発」平成８年６
月２０日発表）がある。
ーネントーコンポジット変換あるいはアナログ処理で
は、程度の差はあっても画質劣化を伴う。これら画質劣
化の程度を人間の主観評価に近い評価値で測定する目的
で、例えば、ブロック内での視覚特性を考慮した重み付
けをするなど空間的な処理に工夫を加えた圧縮画像評価
システム（テレビジョン学会技術報告ＩＴＥ Ｔｅｃｈ
ｎｉｃａｌ ＲｅｐｏｒｔＶｏ１．２０，Ｎｏ．３５
「ディジタル圧縮画像評価システムの開発」平成８年６
月２０日発表）がある。
【０００３】
【発明が解決しようとする課題】しかし、デジタル圧縮
・伸張した符号化画像は、圧縮・伸張前の画像に対して
様々な信号処理が行われているため、それら処理による
信号の歪みは空間内や時間方向に一定ではなく、画像の
種類、複雑さ及びエッジ近傍など様々な要素で変化し、
上述した測定方法や装置などによるこれまでの手法では
測定結果を人間の主観評価値に近づけることが因難であ
った。
・伸張した符号化画像は、圧縮・伸張前の画像に対して
様々な信号処理が行われているため、それら処理による
信号の歪みは空間内や時間方向に一定ではなく、画像の
種類、複雑さ及びエッジ近傍など様々な要素で変化し、
上述した測定方法や装置などによるこれまでの手法では
測定結果を人間の主観評価値に近づけることが因難であ
った。
【０００４】また、デジタル圧縮・伸張に伴う信号の歪
みの評価を、画像の複雑さやエッジ近傍であるか否かな
どにより評価値に重み付けを行う方法によって、ある程
度主観評価値に近づけることができることが、論文（Ｎ
ＨＫ技研Ｒ＆Ｄ Ｎ０．３６「放送用ディジタル符号化
画像の客観的評価尺度の検討」平成７年５月１５日発
行）等で示されているが、これにおいても、信号の歪み
評価値を未だ十分に人間の主観評価値に近づけることが
できないでいた。
みの評価を、画像の複雑さやエッジ近傍であるか否かな
どにより評価値に重み付けを行う方法によって、ある程
度主観評価値に近づけることができることが、論文（Ｎ
ＨＫ技研Ｒ＆Ｄ Ｎ０．３６「放送用ディジタル符号化
画像の客観的評価尺度の検討」平成７年５月１５日発
行）等で示されているが、これにおいても、信号の歪み
評価値を未だ十分に人間の主観評価値に近づけることが
できないでいた。
【０００５】本発明の目的は、前記従来の画質評価装置
の評価値が十分に人間の主観評価値に近づいていないと
いう問題点を解決するため、その評価結果が人間の行う
主観評価値に精度良く一致する結果の得られる画像処理
に伴う画質劣化を評価するための画質評価装置を提供す
ることにある。
の評価値が十分に人間の主観評価値に近づいていないと
いう問題点を解決するため、その評価結果が人間の行う
主観評価値に精度良く一致する結果の得られる画像処理
に伴う画質劣化を評価するための画質評価装置を提供す
ることにある。
【０００６】
【課題を解決するための手段】人間の視覚特性の中に
は、明るさ依存性という特性が存在する。これは、テレ
ビジョン信号などの画像中で信号レベルが高く明るい部
分と、信号レベルが低く暗い部分とでは、同じ量の歪み
が存在しても、人間の視覚上、異なった量の歪みとして
認識されるという特性である。これを視覚の明るさ依存
性と呼ぶ。本発明では、この性質に注目して、画像信号
の明るさをパラメータとして持つ時間フィルタ、空間フ
ィルタを適用した画質評価装置を構成することにより、
より人間の主観評価値に近い結果の得られる画質評価装
置を構成するものである。
は、明るさ依存性という特性が存在する。これは、テレ
ビジョン信号などの画像中で信号レベルが高く明るい部
分と、信号レベルが低く暗い部分とでは、同じ量の歪み
が存在しても、人間の視覚上、異なった量の歪みとして
認識されるという特性である。これを視覚の明るさ依存
性と呼ぶ。本発明では、この性質に注目して、画像信号
の明るさをパラメータとして持つ時間フィルタ、空間フ
ィルタを適用した画質評価装置を構成することにより、
より人間の主観評価値に近い結果の得られる画質評価装
置を構成するものである。
【０００７】上記のように、請求項１記載の発明による
画像処理に伴う画質劣化を評価するための画質評価装置
では、画像処理を行う前と行った後との両画像信号間で
差分演算を行う差分演算部と、該差分演算部からの出力
信号を２分してそれぞれに対してフィルタ処理を行う可
変の時間周波数フィルタと可変の空間周波数フィルタと
を含み、それら可変の時間周波数フィルタと可変の空間
周波数フィルタの周波数特性が前記画像処理を行う前ま
たは行った後のいずれかの画像信号レベルに基づいて選
択されるように構成された時空間演算部と、該時空間演
算部から出力される可変の時間周波数フィルタを施した
信号および可変の空間周波数フィルタを施した信号、さ
らに前記差分演算部からの出力信号に対してそれぞれ積
分を施した後に重み付け加算を行って評価値として出力
する時空間積分部と、を備えたことを特徴とするもので
ある。
画像処理に伴う画質劣化を評価するための画質評価装置
では、画像処理を行う前と行った後との両画像信号間で
差分演算を行う差分演算部と、該差分演算部からの出力
信号を２分してそれぞれに対してフィルタ処理を行う可
変の時間周波数フィルタと可変の空間周波数フィルタと
を含み、それら可変の時間周波数フィルタと可変の空間
周波数フィルタの周波数特性が前記画像処理を行う前ま
たは行った後のいずれかの画像信号レベルに基づいて選
択されるように構成された時空間演算部と、該時空間演
算部から出力される可変の時間周波数フィルタを施した
信号および可変の空間周波数フィルタを施した信号、さ
らに前記差分演算部からの出力信号に対してそれぞれ積
分を施した後に重み付け加算を行って評価値として出力
する時空間積分部と、を備えたことを特徴とするもので
ある。
【０００８】また、請求項２記載の発明では、画像処理
を行う前と行った後との両画像信号間で差分演算を行う
差分演算部と、該差分演算部からの出力信号を２分して
それぞれに対してフィルタ処理を行う可変の時間周波数
フィルタと可変の空間周波数フィルタとを含み、それら
可変の時間周波数フィルタと可変の空間周波数フィルタ
の周波数特性が前記画像処理を行う前または行った後の
いずれかの画像信号レベルに基づいて選択されるように
構成された時空間演算部と、該時空間演算部から出力さ
れる可変の時間周波数フィルタを施した信号および可変
の空間周波数フィルタを施した信号、さらに両信号の電
力和を演算することにより生成される信号に対してそれ
ぞれ積分を施した後に重み付け加算を行って評価値とし
て出力する時空間積分部と、を備えたことを特徴とする
ことを特徴とするものである。
を行う前と行った後との両画像信号間で差分演算を行う
差分演算部と、該差分演算部からの出力信号を２分して
それぞれに対してフィルタ処理を行う可変の時間周波数
フィルタと可変の空間周波数フィルタとを含み、それら
可変の時間周波数フィルタと可変の空間周波数フィルタ
の周波数特性が前記画像処理を行う前または行った後の
いずれかの画像信号レベルに基づいて選択されるように
構成された時空間演算部と、該時空間演算部から出力さ
れる可変の時間周波数フィルタを施した信号および可変
の空間周波数フィルタを施した信号、さらに両信号の電
力和を演算することにより生成される信号に対してそれ
ぞれ積分を施した後に重み付け加算を行って評価値とし
て出力する時空間積分部と、を備えたことを特徴とする
ことを特徴とするものである。
【０００９】また、請求項３記載の発明では、請求項１
または請求項２記載の画質評価装置において、前記時空
間積分部は、時空間演算部から出力される可変の時間周
波数フィルタを施した信号および可変の空間周波数フィ
ルタを施した信号、さらに前記差分演算部からの出力信
号あるいは前記フィルタ出力の両信号の電力和を演算す
ることにより生成される信号に対してそれぞれしきい値
処理を行って、しきい値に満たない信号については前記
積分の対象から除外するかまたは値をゼロとし、積分を
施した後に重み付け加算を行って評価値として出力する
ことを特徴とするものである。
または請求項２記載の画質評価装置において、前記時空
間積分部は、時空間演算部から出力される可変の時間周
波数フィルタを施した信号および可変の空間周波数フィ
ルタを施した信号、さらに前記差分演算部からの出力信
号あるいは前記フィルタ出力の両信号の電力和を演算す
ることにより生成される信号に対してそれぞれしきい値
処理を行って、しきい値に満たない信号については前記
積分の対象から除外するかまたは値をゼロとし、積分を
施した後に重み付け加算を行って評価値として出力する
ことを特徴とするものである。
【００１０】また、請求項４記載の発明では、請求項１
〜請求項３記載のいずれかの画質評価装置において、前
記時空間積分部は、画像処理を行う前と行った後との両
画像信号間の差分を複数入力し、出力される評価値が前
記画像処理を行った後の主観評価結果に整合するよう
に、重み付け加算の際の重み付け係数が校正されている
ことを特徴とするものである。
〜請求項３記載のいずれかの画質評価装置において、前
記時空間積分部は、画像処理を行う前と行った後との両
画像信号間の差分を複数入力し、出力される評価値が前
記画像処理を行った後の主観評価結果に整合するよう
に、重み付け加算の際の重み付け係数が校正されている
ことを特徴とするものである。
【００１１】また、請求項５記載の発明では、請求項１
〜請求項４記載のいずれかの画質評価装置において、前
記時空間演算部の可変の時間周波数フィルタおよび空間
周波数フィルタのゲイン特性は、空間方向２次元の帯域
制限を行った白色雑音を入力してフィルタ処理し、前記
時空間積分部の評価値出力として視覚特性の検知限を示
す特性が出力されるように設定されていることを特徴と
するものである。
〜請求項４記載のいずれかの画質評価装置において、前
記時空間演算部の可変の時間周波数フィルタおよび空間
周波数フィルタのゲイン特性は、空間方向２次元の帯域
制限を行った白色雑音を入力してフィルタ処理し、前記
時空間積分部の評価値出力として視覚特性の検知限を示
す特性が出力されるように設定されていることを特徴と
するものである。
【００１２】また、請求項６記載の発明では、請求項１
〜請求項５記載のいずれかの画質評価装置において、さ
らに、前記時空間積分部の評価値出力を蓄積する内部も
しくは外部の蓄積媒体を備えたことを特徴とするもので
ある。
〜請求項５記載のいずれかの画質評価装置において、さ
らに、前記時空間積分部の評価値出力を蓄積する内部も
しくは外部の蓄積媒体を備えたことを特徴とするもので
ある。
【００１３】また、請求項７記載の発明では、請求項１
〜請求項６記載のいずれかの画質評価装置において、さ
らに、前記時空間積分部の評価値出力を表示可能な値域
に変換して表示する内部または外部の表示装置を備えた
ことを特徴とするものである。
〜請求項６記載のいずれかの画質評価装置において、さ
らに、前記時空間積分部の評価値出力を表示可能な値域
に変換して表示する内部または外部の表示装置を備えた
ことを特徴とするものである。
【００１４】
【発明の実施の形態】実施の形態１．以下に本発明の実
施の形態１を、図に基づいて詳細に説明する。図１は、
テレビジョン画像情報工学ハンドブックの３８頁の“図
１・６２ 測定パターンの提示条件による視覚のＭＴ
Ｆ”の（ａ）に示される画像の平均輝度と視覚の感度と
の関係を示す図である。同じ空間周波数でも、明るさが
異なると、線種が異なるグラフから分かるように、感度
が異なっている。
施の形態１を、図に基づいて詳細に説明する。図１は、
テレビジョン画像情報工学ハンドブックの３８頁の“図
１・６２ 測定パターンの提示条件による視覚のＭＴ
Ｆ”の（ａ）に示される画像の平均輝度と視覚の感度と
の関係を示す図である。同じ空間周波数でも、明るさが
異なると、線種が異なるグラフから分かるように、感度
が異なっている。
【００１５】次に、図２は、同様にテレビジョン画像情
報工学ハンドブックの４０頁の“図１・６４ 正弦波変
調された明るさに対する弁別閾感度特性，視野の大きさ
６５°，人工瞳孔使用”に示される時間周波数に対する
視覚の特性を明るさをパラメータとして示したものであ
る。この図からも、時間周波数の変化により視覚の感度
が大きく変化する様と、その変化のレベルが明るさによ
り大きく異なることが明白である。図１から、空間周波
数に対する視覚の特性も読み取ることが可能で、ここで
も、空間周波数の変化による視覚の感度が変化する様
と、その変化のレベルが明るさにより異なることが読み
取れる。
報工学ハンドブックの４０頁の“図１・６４ 正弦波変
調された明るさに対する弁別閾感度特性，視野の大きさ
６５°，人工瞳孔使用”に示される時間周波数に対する
視覚の特性を明るさをパラメータとして示したものであ
る。この図からも、時間周波数の変化により視覚の感度
が大きく変化する様と、その変化のレベルが明るさによ
り大きく異なることが明白である。図１から、空間周波
数に対する視覚の特性も読み取ることが可能で、ここで
も、空間周波数の変化による視覚の感度が変化する様
と、その変化のレベルが明るさにより異なることが読み
取れる。
【００１６】本発明による画像処理に伴う画質劣化を評
価するための画質評価装置は、これら図２および図１に
それぞれ示される時間周波数特性と空間周波数特性と
を、適応的な可変の特性をもつ時空間フィルタにより実
現し、時空間フィルタ演算を行い、フィルタ出力を積分
し、重み付け加算することにより、人間の主観評価値に
近い評価結果を得ることが出来るようにしたことを特徴
とするものである。
価するための画質評価装置は、これら図２および図１に
それぞれ示される時間周波数特性と空間周波数特性と
を、適応的な可変の特性をもつ時空間フィルタにより実
現し、時空間フィルタ演算を行い、フィルタ出力を積分
し、重み付け加算することにより、人間の主観評価値に
近い評価結果を得ることが出来るようにしたことを特徴
とするものである。
【００１７】図３は、本発明による画質評価装置の原理
的構成をブロック図で示している。図において、１は差
分演算部、２は時空間演算部、３は時空間積分部、１１
は差分器、１２は固定の空間周波数フィルタ、１３は可
変の時間周波数フィルタ、１４は可変の空間周波数フィ
ルタ、１５は固定の時間周波数フィルタ、１６はレベル
依存制御回路、１７，１８は乗算器、１９，２０，２１
はそれぞれ積分器、２２は重み付け加算器である。な
お、フィルタ１２，１３，１４，１５は、それぞれ、図
上に大まかに描かれた特性を有する固定もしくは可変の
時間周波数フィルタあるいは空間周波数フィルタであ
る。
的構成をブロック図で示している。図において、１は差
分演算部、２は時空間演算部、３は時空間積分部、１１
は差分器、１２は固定の空間周波数フィルタ、１３は可
変の時間周波数フィルタ、１４は可変の空間周波数フィ
ルタ、１５は固定の時間周波数フィルタ、１６はレベル
依存制御回路、１７，１８は乗算器、１９，２０，２１
はそれぞれ積分器、２２は重み付け加算器である。な
お、フィルタ１２，１３，１４，１５は、それぞれ、図
上に大まかに描かれた特性を有する固定もしくは可変の
時間周波数フィルタあるいは空間周波数フィルタであ
る。
【００１８】次に動作を説明する。図３において、い
ま、画像処理を行う前のデジタル画像と、行った後のデ
ジタル画像とが差分演算部１の差分器１１の被減算入力
端子（＋）と減算入力端子（−）とにそれぞれ供給され
るものとする。その結果、差分器１１の出力端子から
は、例えば、圧縮・伸張による歪み分が出力され、これ
が次段の時空間演算部２に供給される。
ま、画像処理を行う前のデジタル画像と、行った後のデ
ジタル画像とが差分演算部１の差分器１１の被減算入力
端子（＋）と減算入力端子（−）とにそれぞれ供給され
るものとする。その結果、差分器１１の出力端子から
は、例えば、圧縮・伸張による歪み分が出力され、これ
が次段の時空間演算部２に供給される。
【００１９】時空間演算部２は、４個の時空間周波数フ
ィルタ１２，１３，１４，１５を含み、このうち可変の
時間周波数フィルタ１３と、可変の空間周波数フィルタ
１４とがフィルタ特性に関し制御可能となっている。差
分演算部１からの出力は、時空間演算部２に入力されて
まず２分岐され、特性が曲線ａで示される固定の空間周
波数フィルタ１２と、特性が曲線Ｃ−１〜Ｃ−４で示さ
れる可変の空間周波数フィルタ１４とにそれぞれ供給さ
れる。
ィルタ１２，１３，１４，１５を含み、このうち可変の
時間周波数フィルタ１３と、可変の空間周波数フィルタ
１４とがフィルタ特性に関し制御可能となっている。差
分演算部１からの出力は、時空間演算部２に入力されて
まず２分岐され、特性が曲線ａで示される固定の空間周
波数フィルタ１２と、特性が曲線Ｃ−１〜Ｃ−４で示さ
れる可変の空間周波数フィルタ１４とにそれぞれ供給さ
れる。
【００２０】そして、固定の空間周波数フィルタ１２の
出力はそれに縦続接続される特性が曲線ｂ−１〜ｂ−４
で示される可変の時間周波数フィルタ１３に、可変の空
間周波数フィルタ１４の出力はそれに縦続接続される特
性が曲線ｄで示される固定の時間周波数フィルタ１５に
それぞれ供給され、それぞれのフィルタ１３，１５から
濾波出力が得られる。
出力はそれに縦続接続される特性が曲線ｂ−１〜ｂ−４
で示される可変の時間周波数フィルタ１３に、可変の空
間周波数フィルタ１４の出力はそれに縦続接続される特
性が曲線ｄで示される固定の時間周波数フィルタ１５に
それぞれ供給され、それぞれのフィルタ１３，１５から
濾波出力が得られる。
【００２１】ここで、可変の時間周波数フィルタ１３お
よび可変の空間周波数フィルタ１４の特性は、それぞれ
図２および図１で示す特性になっている。図２および図
１から分かるように、フィルタの特性を選択するための
パラメータは画像信号のレベルに相当する画像の明るさ
であり、可変の時間周波数フィルタ１３の場合は曲線ｂ
−１、ｂ−２、ｂ−３およびｂ−４の中から、また、可
変の空間周波数フィルタ１４の場合は曲線ｃ−１、ｃ−
２，ｃ−３およびｃ−４の中から、それぞれ画像信号の
レベル（明るさ）に応じて特定の曲線を切り替えて使用
する。
よび可変の空間周波数フィルタ１４の特性は、それぞれ
図２および図１で示す特性になっている。図２および図
１から分かるように、フィルタの特性を選択するための
パラメータは画像信号のレベルに相当する画像の明るさ
であり、可変の時間周波数フィルタ１３の場合は曲線ｂ
−１、ｂ−２、ｂ−３およびｂ−４の中から、また、可
変の空間周波数フィルタ１４の場合は曲線ｃ−１、ｃ−
２，ｃ−３およびｃ−４の中から、それぞれ画像信号の
レベル（明るさ）に応じて特定の曲線を切り替えて使用
する。
【００２２】このため、図３に示す例では、時空間演算
部２はレベル依存制御回路１６を備え、そこに供給され
る処理前または処理後の画像信号（本例では、処理後の
画像信号を使用している。）のレベルによって可変の時
空間フィルタ１３，１４の曲線選択を制御している。
部２はレベル依存制御回路１６を備え、そこに供給され
る処理前または処理後の画像信号（本例では、処理後の
画像信号を使用している。）のレベルによって可変の時
空間フィルタ１３，１４の曲線選択を制御している。
【００２３】ここで、可変の時空間フィルタ１３，１４
のゲイン特性は、空間方向２次元の帯域制限を行った白
色雑音を、時空間演算部２のフィルタ１３，１４に入力
して、評価値出力として視覚特性の検知限を示す特性が
出力されるように設定されている。
のゲイン特性は、空間方向２次元の帯域制限を行った白
色雑音を、時空間演算部２のフィルタ１３，１４に入力
して、評価値出力として視覚特性の検知限を示す特性が
出力されるように設定されている。
【００２４】なお、ここでは、可変のフィルタ１３，１
４の曲線は，４種類のものを示したが、本発明では、こ
れに限定されず、ともに少なくとも３種類程度あれば本
発明による画質評価装置を構成するのに十分である。ま
た、人間の視覚特性をより忠実に再現するために曲線の
種類を増やしてもいいことは言うまでもない。
４の曲線は，４種類のものを示したが、本発明では、こ
れに限定されず、ともに少なくとも３種類程度あれば本
発明による画質評価装置を構成するのに十分である。ま
た、人間の視覚特性をより忠実に再現するために曲線の
種類を増やしてもいいことは言うまでもない。
【００２５】また、この実施の形態１の説明では、固定
のフィルタ１２，１５のフィルタ特性は、固定の空間周
波数フィルタおよび固定の時間周波数フィルタを適用し
ているが、これらについても画像信号のレベルに応じた
可変の空間周波数フィルタおよび可変の時間周波数フィ
ルタを適用してもよいことはいうまでもない。
のフィルタ１２，１５のフィルタ特性は、固定の空間周
波数フィルタおよび固定の時間周波数フィルタを適用し
ているが、これらについても画像信号のレベルに応じた
可変の空間周波数フィルタおよび可変の時間周波数フィ
ルタを適用してもよいことはいうまでもない。
【００２６】また、この実施の形態１の説明では、レベ
ル依存制御回路１６を制御するための入力として、画像
処理を行った後の画像を使用しているが、画像処理を行
う前の画像を使用してもよい。
ル依存制御回路１６を制御するための入力として、画像
処理を行った後の画像を使用しているが、画像処理を行
う前の画像を使用してもよい。
【００２７】次に、次段の時空間積分部３においては、
まず、時空間演算部２からのそれぞれ可変の時間周波数
フィルタ１３および固定の時間周波数フィルタ１５の出
力が、乗算器１７，１８にそれぞれ供給され、この乗算
器１７，１８では、時空間演算部２中のレベル依存制御
回路１６からの制御信号によって可変および固定の各時
間周波数フィルタ１３，１５の出力信号に乗算すべき係
数を制御して、その係数を乗算する。
まず、時空間演算部２からのそれぞれ可変の時間周波数
フィルタ１３および固定の時間周波数フィルタ１５の出
力が、乗算器１７，１８にそれぞれ供給され、この乗算
器１７，１８では、時空間演算部２中のレベル依存制御
回路１６からの制御信号によって可変および固定の各時
間周波数フィルタ１３，１５の出力信号に乗算すべき係
数を制御して、その係数を乗算する。
【００２８】例えば、乗算器１７，１８の乗算係数を、
画像処理を行った後の画像信号レベルに依存して変化さ
せることにより、可変および固定の各時間周波数フィル
タ１３，１５の出力を視覚感度特性に合わせることがで
きる。この可変精度は１６レベル程度の精度で可変また
は切り替えをすることにより、視覚の特性に近い充分な
精度が得られる。もちろん、これ以上の精度のレベルを
もって切り替えることになんらの問題もない。
画像処理を行った後の画像信号レベルに依存して変化さ
せることにより、可変および固定の各時間周波数フィル
タ１３，１５の出力を視覚感度特性に合わせることがで
きる。この可変精度は１６レベル程度の精度で可変また
は切り替えをすることにより、視覚の特性に近い充分な
精度が得られる。もちろん、これ以上の精度のレベルを
もって切り替えることになんらの問題もない。
【００２９】次に、時空間積分部３の積分器１９，２０
は、これに、例えば、ＲＭＳＥ（Root Mean Square
Error）値を用いた積分を行うことにより、視覚的な刺
激値に比例した信号出力を得ることができるとともに、
フィルタの位相特性が可変の時間周波数フィルタ１３
と、固定の時間周波数フィルタ１５とで異なる場合で
も、加算器２２で互いに相殺することなく加算すること
ができる。また、加算器２２には、差分演算部１の出力
を積分器２１で積分した結果も入力されており、重み付
け加算器２２は、積分器１９，２０，２１の積分出力に
対し重み付け加算を行って、その重み付け加算値を評価
値として出力するようにする。
は、これに、例えば、ＲＭＳＥ（Root Mean Square
Error）値を用いた積分を行うことにより、視覚的な刺
激値に比例した信号出力を得ることができるとともに、
フィルタの位相特性が可変の時間周波数フィルタ１３
と、固定の時間周波数フィルタ１５とで異なる場合で
も、加算器２２で互いに相殺することなく加算すること
ができる。また、加算器２２には、差分演算部１の出力
を積分器２１で積分した結果も入力されており、重み付
け加算器２２は、積分器１９，２０，２１の積分出力に
対し重み付け加算を行って、その重み付け加算値を評価
値として出力するようにする。
【００３０】ここで、重み付け加算器２２において使用
される重み付け係数は、複数種類の画像を入力して得ら
れる重み付け加算器２２に入力される信号と、前記複数
種類の入力画像に対する主観評価値とが整合するような
重み係数になるよう校正されている。
される重み付け係数は、複数種類の画像を入力して得ら
れる重み付け加算器２２に入力される信号と、前記複数
種類の入力画像に対する主観評価値とが整合するような
重み係数になるよう校正されている。
【００３１】従って、この実施の形態１の画質評価装置
によれば、画像処理を行う前と行った後との両画像信号
間で差分演算を行い、この差分演算出力を２分して、そ
れぞれ可変の時間周波数フィルタと可変の空間周波数フ
ィルタとから画像信号のレベルに応じた最適な特性のフ
ィルタをそれぞれ選択してフィルタ演算を施し、前記差
分演算出力と、前記２分したフィルタ演算の出力を各々
積分演算を施した出力とを重み付け加算した結果を評価
値としているので、人間の主観評価値に精度良く一致し
た評価値を、装置の出力として得ることが可能である。
なお、この実施の形態１の説明では、時空間積分部３に
おいて、時空間演算部２から出力される信号に対して乗
算器１７，１８で制御した係数をかけ、その後、積分器
１９，２０により積分するように説明したが、本発明で
は、乗算器１７，１８を省略した構成をとることも可能
である。この場合、乗算器１７，１８で行っていた処理
は、レベル依存制御回路１６により制御する時空間フィ
ルタ１３，１４のゲイン特性において代用させることが
できる。また、これは、以下の他の実施の形態でも同様
である。
によれば、画像処理を行う前と行った後との両画像信号
間で差分演算を行い、この差分演算出力を２分して、そ
れぞれ可変の時間周波数フィルタと可変の空間周波数フ
ィルタとから画像信号のレベルに応じた最適な特性のフ
ィルタをそれぞれ選択してフィルタ演算を施し、前記差
分演算出力と、前記２分したフィルタ演算の出力を各々
積分演算を施した出力とを重み付け加算した結果を評価
値としているので、人間の主観評価値に精度良く一致し
た評価値を、装置の出力として得ることが可能である。
なお、この実施の形態１の説明では、時空間積分部３に
おいて、時空間演算部２から出力される信号に対して乗
算器１７，１８で制御した係数をかけ、その後、積分器
１９，２０により積分するように説明したが、本発明で
は、乗算器１７，１８を省略した構成をとることも可能
である。この場合、乗算器１７，１８で行っていた処理
は、レベル依存制御回路１６により制御する時空間フィ
ルタ１３，１４のゲイン特性において代用させることが
できる。また、これは、以下の他の実施の形態でも同様
である。
【００３２】実施の形態２．この実施の形態２は、時空
間積分部３の構成を、図３に示す実施の形態１の時空間
積分部３の構成とは変えたことを特徴とするものであ
る。
間積分部３の構成を、図３に示す実施の形態１の時空間
積分部３の構成とは変えたことを特徴とするものであ
る。
【００３３】図４は、時空間積分部３に図３に示す実施
の形態１のものとは別構成を用いた実施の形態２の画質
評価装置の構成を示している。図中、差分演算部１と時
空間演算部２は、図３の構成と同一であるため、それら
の説明は省略し、時空間積分部３の構成を説明すると、
１７，１８は乗算器、１９，２０，２４は積分器、２２
は重み付け加算器、２３は電力和演算器である。
の形態１のものとは別構成を用いた実施の形態２の画質
評価装置の構成を示している。図中、差分演算部１と時
空間演算部２は、図３の構成と同一であるため、それら
の説明は省略し、時空間積分部３の構成を説明すると、
１７，１８は乗算器、１９，２０，２４は積分器、２２
は重み付け加算器、２３は電力和演算器である。
【００３４】次に動作を説明する。時空間積分部３にお
いては、時空間演算部２からの可変の時間周波数フィル
タ１３および固定の時間周波数フィルタ１５の出力が、
乗算器１７，１８に供給される。
いては、時空間演算部２からの可変の時間周波数フィル
タ１３および固定の時間周波数フィルタ１５の出力が、
乗算器１７，１８に供給される。
【００３５】乗算器１７，１８では、上記実施の形態１
の場合と同様に、時空間演算部２中のレベル依存制御回
路１６からの制御信号に基づいて、画像処理を行った後
の画像信号のレベル（明るさ）に依存して変化させ、各
フィルタ１３，１５の出力信号に乗算すべき係数を制御
する。
の場合と同様に、時空間演算部２中のレベル依存制御回
路１６からの制御信号に基づいて、画像処理を行った後
の画像信号のレベル（明るさ）に依存して変化させ、各
フィルタ１３，１５の出力信号に乗算すべき係数を制御
する。
【００３６】積分器１９，２０では、図３の同番号で示
される積分器１９，２０と同様の動作、たとえばＲＭＳ
Ｅを用いた積分を行い、各々視覚特性に比例した信号出
力を得る。
される積分器１９，２０と同様の動作、たとえばＲＭＳ
Ｅを用いた積分を行い、各々視覚特性に比例した信号出
力を得る。
【００３７】また、電力和演算器２３には、乗算器１
７，１８の両出力が接続され、両フィルタ１３，１５の
両出力の電力和に相当する信号出力が得られる。電力和
の演算方法としては、例えば、両出力をＸ，Ｙとおいた
ときに、Ｘ2＋Ｙ2の電力加算や、｜Ｘ｜＋｜Ｙ｜の絶対
値加算、（（Ｘ2＋Ｙ2）／２）1/2等の演算が考えられ
る。そして、この電力和演算器２３の出力は、積分器２
４において積分され、前記１９，２０の積分器の出力と
ともに、重み付け加算器２２に出力される。重み付け加
算器２２では、積分器１９，２０の出力と、積分器２４
の出力とを重み付け加算して、その演算された結果が評
価値として出力される。
７，１８の両出力が接続され、両フィルタ１３，１５の
両出力の電力和に相当する信号出力が得られる。電力和
の演算方法としては、例えば、両出力をＸ，Ｙとおいた
ときに、Ｘ2＋Ｙ2の電力加算や、｜Ｘ｜＋｜Ｙ｜の絶対
値加算、（（Ｘ2＋Ｙ2）／２）1/2等の演算が考えられ
る。そして、この電力和演算器２３の出力は、積分器２
４において積分され、前記１９，２０の積分器の出力と
ともに、重み付け加算器２２に出力される。重み付け加
算器２２では、積分器１９，２０の出力と、積分器２４
の出力とを重み付け加算して、その演算された結果が評
価値として出力される。
【００３８】従って、この実施の形態２の画質評価装置
によれば、上記実施の形態１と同様に、画像処理を行う
前と行った後との両画像信号間で差分演算を行い、この
差分演算出力を２分して、それぞれ可変の時間周波数フ
ィルタと可変の空間周波数フィルタとから画像信号のレ
ベルに応じた最適な特性のフィルタをそれぞれ選択しフ
ィルタ演算を施して評価値を求めているので、人間の主
観評価値に精度良く一致した評価値を、装置の出力とし
て得ることが可能である。
によれば、上記実施の形態１と同様に、画像処理を行う
前と行った後との両画像信号間で差分演算を行い、この
差分演算出力を２分して、それぞれ可変の時間周波数フ
ィルタと可変の空間周波数フィルタとから画像信号のレ
ベルに応じた最適な特性のフィルタをそれぞれ選択しフ
ィルタ演算を施して評価値を求めているので、人間の主
観評価値に精度良く一致した評価値を、装置の出力とし
て得ることが可能である。
【００３９】また、この実施の形態２では、差分演算部
１の出力の代わりに、乗算器１７，１８において各フィ
ルタ１３，１５の出力を画像処理を行った後の画像信号
レベルに依存して変化させた乗算係数により乗算して加
算し、その加算結果を積分器２４で積分した値を用い
て、その値と、積分器１９，２０の出力との重み付け加
算をとるようにしたので、実施の形態１の場合よりも、
より人間の主観評価値に精度良く一致した評価値を得る
ことが可能である。
１の出力の代わりに、乗算器１７，１８において各フィ
ルタ１３，１５の出力を画像処理を行った後の画像信号
レベルに依存して変化させた乗算係数により乗算して加
算し、その加算結果を積分器２４で積分した値を用い
て、その値と、積分器１９，２０の出力との重み付け加
算をとるようにしたので、実施の形態１の場合よりも、
より人間の主観評価値に精度良く一致した評価値を得る
ことが可能である。
【００４０】実施の形態３．この実施の形態３は、上記
実施の形態２の場合と同様に、時空間積分部３の構成
を、図３に示す実施の形態１の時空間積分部３の構成と
は変えたことを特徴とするものである。
実施の形態２の場合と同様に、時空間積分部３の構成
を、図３に示す実施の形態１の時空間積分部３の構成と
は変えたことを特徴とするものである。
【００４１】図５は、本実施の形態３の時空間積分部３
の構成を示したものである。図において、１７，１８は
乗算器、１９，２０，２１は積分器、２２は重み付け加
算器、２５，２６，２７は足切り器である。つまり、こ
の実施の形態３の時空間積分部３は、図３に示す実施の
形態１の時空間積分部３に対し、各積分器１９，２０，
２１の前段に、足切り器２５，２６，２７を設けたこと
を特徴とするものである。
の構成を示したものである。図において、１７，１８は
乗算器、１９，２０，２１は積分器、２２は重み付け加
算器、２５，２６，２７は足切り器である。つまり、こ
の実施の形態３の時空間積分部３は、図３に示す実施の
形態１の時空間積分部３に対し、各積分器１９，２０，
２１の前段に、足切り器２５，２６，２７を設けたこと
を特徴とするものである。
【００４２】次に動作を説明する。時空間演算部２から
の可変の時間周波数フィルタ１３および固定の時間周波
数フィルタ１５の出力、および差分演算部１の出力が、
それぞれ、足切り器２５，２６，２７に入力され、足切
り器２５，２６，２７では、所定のしきい値に満たない
信号成分をゼロとし、各々出力を、積分器１９，２０，
２１に接続する。
の可変の時間周波数フィルタ１３および固定の時間周波
数フィルタ１５の出力、および差分演算部１の出力が、
それぞれ、足切り器２５，２６，２７に入力され、足切
り器２５，２６，２７では、所定のしきい値に満たない
信号成分をゼロとし、各々出力を、積分器１９，２０，
２１に接続する。
【００４３】積分器１９，２０，２１では、図３に示す
実施の形態１の積分動作と同様の積分を行い、各々の出
力を重み付け加算器２２において加算し、演算結果を評
価値として出力する。
実施の形態１の積分動作と同様の積分を行い、各々の出
力を重み付け加算器２２において加算し、演算結果を評
価値として出力する。
【００４４】従って、この実施の形態３の画質評価装置
によれば、上記実施の形態１，２と同様に、画像処理を
行う前と行った後との両画像信号間で差分演算を行い、
この差分演算出力を２分して、それぞれ可変の時間周波
数フィルタと可変の空間周波数フィルタとから画像信号
のレベルに応じた最適な特性のフィルタをそれぞれ選択
しフィルタ演算を施して評価値を求めているので、人間
の主観評価値に精度良く一致した評価値を、装置の出力
として得ることが可能になると共に、積分器１９，２
０，２１の前段にそれぞれ足切り器２５，２６，２７を
設けているので、所定のしきい値に満たない信号成分の
足切りにより積分演算の負担を小さくでき、迅速に評価
値出力を得ることができる。
によれば、上記実施の形態１，２と同様に、画像処理を
行う前と行った後との両画像信号間で差分演算を行い、
この差分演算出力を２分して、それぞれ可変の時間周波
数フィルタと可変の空間周波数フィルタとから画像信号
のレベルに応じた最適な特性のフィルタをそれぞれ選択
しフィルタ演算を施して評価値を求めているので、人間
の主観評価値に精度良く一致した評価値を、装置の出力
として得ることが可能になると共に、積分器１９，２
０，２１の前段にそれぞれ足切り器２５，２６，２７を
設けているので、所定のしきい値に満たない信号成分の
足切りにより積分演算の負担を小さくでき、迅速に評価
値出力を得ることができる。
【００４５】なお、上記実施の形態３の説明では、足切
り器２５，２６，２７は、図３に示す実施の形態１の時
空間積分部３について適用しているが、本発明では、こ
れに限らず、図４に示す実施の形態２の時空間積分部３
の積分器１９，２０，２４の直前に足切り器２５，２
６，２８を適用することで、例えば図６で示すような時
空間積分部３を構成することも可能である。
り器２５，２６，２７は、図３に示す実施の形態１の時
空間積分部３について適用しているが、本発明では、こ
れに限らず、図４に示す実施の形態２の時空間積分部３
の積分器１９，２０，２４の直前に足切り器２５，２
６，２８を適用することで、例えば図６で示すような時
空間積分部３を構成することも可能である。
【００４６】また、足切り器２５，２６，２７におい
て、しきい値に満たないと判断された信号を次段の積分
器での積分対象から除外することによっても、上記と同
様の効果を得ることが可能である。
て、しきい値に満たないと判断された信号を次段の積分
器での積分対象から除外することによっても、上記と同
様の効果を得ることが可能である。
【００４７】実施の形態４．この実施の形態４は、上記
実施の形態１〜３において、さらに評価値出力を記憶す
ることができるようにしたことを特徴とするものであ
る。
実施の形態１〜３において、さらに評価値出力を記憶す
ることができるようにしたことを特徴とするものであ
る。
【００４８】図７は、評価値出力を記憶することができ
るようにした実施の形態４の画質評価装置の構成を示し
たものである。図において、３０はタイマ、３１は蓄積
媒体である。尚、図中、１，２，３は、それぞれ、上記
実施の形態１〜３の差分演算部、時空間演算部、時空間
積分部である。
るようにした実施の形態４の画質評価装置の構成を示し
たものである。図において、３０はタイマ、３１は蓄積
媒体である。尚、図中、１，２，３は、それぞれ、上記
実施の形態１〜３の差分演算部、時空間演算部、時空間
積分部である。
【００４９】次に動作を説明する。差分演算部１、時空
間演算部２、時空間積分部３の動作は、上記実施の形態
１〜３と同様であり、この実施の形態４では、時空間積
分部３の評価値出力が記憶媒体３１に接続される。
間演算部２、時空間積分部３の動作は、上記実施の形態
１〜３と同様であり、この実施の形態４では、時空間積
分部３の評価値出力が記憶媒体３１に接続される。
【００５０】ここで、記憶媒体３１と、時空間積分部３
を構成する各積分器（実施の形態１，３であれば、積分
器１９，２０，２１、実施の形態２であれば、積分器１
９，２０，２４である。）とには、タイマ３０から一定
の時間間隔で信号が入力し、各積分器は、タイマ３０か
らの入力信号に基づき積分結果を出力し、記憶媒体３１
は、この信号によりその時の重み付け加算器２２による
各積分器出力の重み付け加算値を評価値として記録す
る。尚、積分器は積分値を出力した後は、リセットして
再度積分動作を行う。
を構成する各積分器（実施の形態１，３であれば、積分
器１９，２０，２１、実施の形態２であれば、積分器１
９，２０，２４である。）とには、タイマ３０から一定
の時間間隔で信号が入力し、各積分器は、タイマ３０か
らの入力信号に基づき積分結果を出力し、記憶媒体３１
は、この信号によりその時の重み付け加算器２２による
各積分器出力の重み付け加算値を評価値として記録す
る。尚、積分器は積分値を出力した後は、リセットして
再度積分動作を行う。
【００５１】従って、この実施の形態４の画質評価装置
によれば、上記実施の形態１〜３と同様の効果が得られ
ると共に、タイマ３０により所定の時間間隔で各積分器
が積分動作を行い、記録媒体３１がその積分結果の重み
付け加算値を評価値として記録するようにしたので、評
価を連続的に行うことができ、長時間にわたる評価デー
タを蓄積することが可能となる。
によれば、上記実施の形態１〜３と同様の効果が得られ
ると共に、タイマ３０により所定の時間間隔で各積分器
が積分動作を行い、記録媒体３１がその積分結果の重み
付け加算値を評価値として記録するようにしたので、評
価を連続的に行うことができ、長時間にわたる評価デー
タを蓄積することが可能となる。
【００５２】なお、この実施の形態４では、タイマ３０
はタイマ信号を一定時間間隔で出力するものとして説明
したが、本発明では、タイマ信号の出力は一定時間間隔
である必要はない。
はタイマ信号を一定時間間隔で出力するものとして説明
したが、本発明では、タイマ信号の出力は一定時間間隔
である必要はない。
【００５３】実施の形態５．この実施の形態５は、上記
実施の形態１〜３において、さらに評価値出力を表示で
きるようにしたことを特徴とするものである。
実施の形態１〜３において、さらに評価値出力を表示で
きるようにしたことを特徴とするものである。
【００５４】図８は、時空間積分部３の出力である評価
値を表示するように構成した実施の形態５の画質評価装
置の構成を示すものである。図において、３２は評価値
変換器、３３は表示装置である。尚、図中、１，２，３
は、それぞれ、上記実施の形態１〜３の差分演算部、時
空間演算部、時空間積分部である。
値を表示するように構成した実施の形態５の画質評価装
置の構成を示すものである。図において、３２は評価値
変換器、３３は表示装置である。尚、図中、１，２，３
は、それぞれ、上記実施の形態１〜３の差分演算部、時
空間演算部、時空間積分部である。
【００５５】次に動作を説明する。差分演算部１、時空
間演算部２、時空間積分部３の動作は、上記実施の形態
１〜３と同様であり、この実施の形態５では、時空間積
分部３の評価値出力が、評価値変換器３２に入力する。
間演算部２、時空間積分部３の動作は、上記実施の形態
１〜３と同様であり、この実施の形態５では、時空間積
分部３の評価値出力が、評価値変換器３２に入力する。
【００５６】評価値変換器３２では、時空間積分部３の
評価値出力を、表示装置３３上に表示可能な形式の表示
信号に変換し、表示装置３３へ出力する。表示装置３３
では、評価値変換器３２からの表示信号に基づいて、時
空間積分部３の評価値出力を表示する。
評価値出力を、表示装置３３上に表示可能な形式の表示
信号に変換し、表示装置３３へ出力する。表示装置３３
では、評価値変換器３２からの表示信号に基づいて、時
空間積分部３の評価値出力を表示する。
【００５７】従って、この実施の形態５の画質評価装置
によれば、上記実施の形態１〜３と同様の効果が得られ
ると共に、表示装置３３で時空間積分部３の評価値出力
を表示するようにしたので、画質評価を容易に行うこと
ができる。
によれば、上記実施の形態１〜３と同様の効果が得られ
ると共に、表示装置３３で時空間積分部３の評価値出力
を表示するようにしたので、画質評価を容易に行うこと
ができる。
【００５８】なお、上記実施の形態５の説明では、上記
実施の形態１〜３に適用して説明したが、これに限ら
ず、図７に示す実施の形態４の構成に図８に示す評価値
変換器３２や表示装置３３を追加するようにしても勿論
よい。
実施の形態１〜３に適用して説明したが、これに限ら
ず、図７に示す実施の形態４の構成に図８に示す評価値
変換器３２や表示装置３３を追加するようにしても勿論
よい。
【００５９】また、上記実施の形態１〜５の説明では、
差分演算部１、時空間演算部２、時空間積分部３の各々
において、輝度信号成分と、複数の色信号成分とを分け
ないで演算するように説明したが、本発明では、これに
限らず、差分演算部１、時空間演算部２、時空間積分部
３の各々において、輝度信号成分と、複数の色信号成分
とを各々個別に演算するように構成することも可能であ
る。
差分演算部１、時空間演算部２、時空間積分部３の各々
において、輝度信号成分と、複数の色信号成分とを分け
ないで演算するように説明したが、本発明では、これに
限らず、差分演算部１、時空間演算部２、時空間積分部
３の各々において、輝度信号成分と、複数の色信号成分
とを各々個別に演算するように構成することも可能であ
る。
【００６０】また、本実施の形態１〜５の画質評価装置
では、画像処理を行う前の画像と画像処理を行った後の
画像とを入力してその評価を出力するように説明した
が、この画質評価装置の使用方法として、例えば、評価
に使用する画像を、画像処理を行う前の画像として本装
置に内蔵しておき、本装置のある場所とは離れた場所か
ら同じ画像を使って伝送された画像を、画像処理を行っ
た後の画像として、これら両画像の差分を取るように構
成すれば、遠方からの伝送時に発生する歪みなどの画質
劣化についても容易、かつ、人間の主観評価値に精度良
く一致させて評価することができる。
では、画像処理を行う前の画像と画像処理を行った後の
画像とを入力してその評価を出力するように説明した
が、この画質評価装置の使用方法として、例えば、評価
に使用する画像を、画像処理を行う前の画像として本装
置に内蔵しておき、本装置のある場所とは離れた場所か
ら同じ画像を使って伝送された画像を、画像処理を行っ
た後の画像として、これら両画像の差分を取るように構
成すれば、遠方からの伝送時に発生する歪みなどの画質
劣化についても容易、かつ、人間の主観評価値に精度良
く一致させて評価することができる。
【００６１】
【発明の効果】以上、説明してきたように、本発明で
は、画像処理を行う前と行った後との両画像信号間で差
分演算を行い、この差分演算出力を２分して、それぞれ
可変の時間周波数フィルタと可変の空間周波数フィルタ
とから画像信号のレベルに応じた最適な特性のフィルタ
をそれぞれ選択しフィルタ演算を施して評価値を求める
ようにしたので、人間の主観評価値に精度良く一致した
評価値を、装置の出力として得ることが可能である。
は、画像処理を行う前と行った後との両画像信号間で差
分演算を行い、この差分演算出力を２分して、それぞれ
可変の時間周波数フィルタと可変の空間周波数フィルタ
とから画像信号のレベルに応じた最適な特性のフィルタ
をそれぞれ選択しフィルタ演算を施して評価値を求める
ようにしたので、人間の主観評価値に精度良く一致した
評価値を、装置の出力として得ることが可能である。
【図１】 視覚感度の信号レベル依存性と視覚の空間周
波数特性の明るさ依存性を示す図。
波数特性の明るさ依存性を示す図。
【図２】 視覚の時間周波数特性の明るさ依存性を示す
図。
図。
【図３】 本発明による画質評価装置の実施の形態１の
構成例を示すブロック図。
構成例を示すブロック図。
【図４】 本発明による画質評価装置の実施の形態２の
構成例を示すブロック図。
構成例を示すブロック図。
【図５】 実施の形態３の時空間積分部３の構成例を示
すブロック図。
すブロック図。
【図６】 実施の形態３の時空間積分部３の他の構成例
を示すブロック図。
を示すブロック図。
【図７】 本発明による画質評価装置の実施の形態４の
構成例を示すブロック図。
構成例を示すブロック図。
【図８】 本発明による画質評価装置の実施の形態５の
構成例を示すブロック図。
構成例を示すブロック図。
１ 差分演算部、２ 時空間演算部、３ 時空間積分
部、１１ 差分器、１２固定の空間周波数フィルタ、１
３ 可変の時間周波数フィルタ、１４ 可変の空間周波
数フィルタ、１５ 固定の時間周波数フィルタ、１６
レベル依存制御回路、１７，１８ 乗算器、１９，２
０，２１ 積分器、２２ 重み付け加算器、２３ 電力
和演算器、２４ 積分器、２５，２６，２７，２８ 足
切り器、３０ タイマ、３１ 蓄積媒体、３２ 評価値
変換器、３３ 表示装置。
部、１１ 差分器、１２固定の空間周波数フィルタ、１
３ 可変の時間周波数フィルタ、１４ 可変の空間周波
数フィルタ、１５ 固定の時間周波数フィルタ、１６
レベル依存制御回路、１７，１８ 乗算器、１９，２
０，２１ 積分器、２２ 重み付け加算器、２３ 電力
和演算器、２４ 積分器、２５，２６，２７，２８ 足
切り器、３０ タイマ、３１ 蓄積媒体、３２ 評価値
変換器、３３ 表示装置。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 合志 清一 東京都渋谷区神南二丁目２番１号 日本放 送協会 放送センター内 (72)発明者 浅井 光太郎 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 西川 博文 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 黒田 慎一 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 ジェームズ チャオ 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 Ｆターム(参考） 5B057 CE06 CH09 CH18 DA20 DC32 5C061 BB07 CC09
Claims (7)
- 【請求項１】 画像処理を行う前と行った後との両画像
信号間で差分演算を行う差分演算部と、 該差分演算部からの出力信号を２分してそれぞれに対し
てフィルタ処理を行う可変の時間周波数フィルタと可変
の空間周波数フィルタとを含み、それら可変の時間周波
数フィルタと可変の空間周波数フィルタの周波数特性が
前記画像処理を行う前または行った後のいずれかの画像
信号レベルに基づいて選択されるように構成された時空
間演算部と、 該時空間演算部から出力される可変の時間周波数フィル
タを施した信号および可変の空間周波数フィルタを施し
た信号、さらに前記差分演算部からの出力信号に対して
それぞれ積分を施した後に重み付け加算を行って評価値
として出力する時空間積分部と、 を備えたことを特徴とする画質評価装置。 - 【請求項２】 画像処理を行う前と行った後との両画像
信号間で差分演算を行う差分演算部と、 該差分演算部からの出力信号を２分してそれぞれに対し
てフィルタ処理を行う可変の時間周波数フィルタと可変
の空間周波数フィルタとを含み、それら可変の時間周波
数フィルタと可変の空間周波数フィルタの周波数特性が
前記画像処理を行う前または行った後のいずれかの画像
信号レベルに基づいて選択されるように構成された時空
間演算部と、 該時空間演算部から出力される可変の時間周波数フィル
タを施した信号および可変の空間周波数フィルタを施し
た信号、さらに両信号の電力和を演算することにより生
成される信号に対してそれぞれ積分を施した後に重み付
け加算を行って評価値として出力する時空間積分部と、 を備えたことを特徴とする画質評価装置。 - 【請求項３】 請求項１または請求項２記載の画質評価
装置において、 前記時空間積分部は、時空間演算部から出力される可変
の時間周波数フィルタを施した信号および可変の空間周
波数フィルタを施した信号、さらに前記差分演算部から
の出力信号あるいは前記フィルタ出力の両信号の電力和
を演算することにより生成される信号に対してそれぞれ
しきい値処理を行って、しきい値に満たない信号につい
ては前記積分の対象から除外するかまたは値をゼロと
し、積分を施した後に重み付け加算を行って評価値とし
て出力することを特徴とする画質評価装置。 - 【請求項４】 請求項１〜請求項３記載のいずれかの画
質評価装置において、 前記時空間積分部は、画像処理を行う前と行った後との
両画像信号間の差分を複数入力し、出力される評価値が
前記画像処理を行った後の主観評価結果に整合するよう
に、重み付け加算の際の重み付け係数が校正されている
ことを特徴とする画質評価装置。 - 【請求項５】 請求項１〜請求項４記載のいずれかの画
質評価装置において、 前記時空間演算部の可変の時間周波数フィルタおよび空
間周波数フィルタのゲイン特性は、空間方向２次元の帯
域制限を行った白色雑音を入力してフィルタ処理し、前
記時空間積分部の評価値出力として視覚特性の検知限を
示す特性が出力されるように設定されていることを特徴
とする画質評価装置。 - 【請求項６】 請求項１〜請求項５記載のいずれかの画
質評価装置において、さらに、 前記時空間積分部の評価値出力を蓄積する内部もしくは
外部の蓄積媒体を備えたことを特徴とする画質評価装
置。 - 【請求項７】 請求項１〜請求項６記載のいずれかの画
質評価装置において、さらに、 前記時空間積分部の評価値出力を表示可能な値域に変換
して表示する内部または外部の表示装置を備えたことを
特徴とする画質評価装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP20474198A JP3501954B2 (ja) | 1998-07-21 | 1998-07-21 | 画質評価装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP20474198A JP3501954B2 (ja) | 1998-07-21 | 1998-07-21 | 画質評価装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000036971A true JP2000036971A (ja) | 2000-02-02 |
| JP3501954B2 JP3501954B2 (ja) | 2004-03-02 |
Family
ID=16495563
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP20474198A Expired - Fee Related JP3501954B2 (ja) | 1998-07-21 | 1998-07-21 | 画質評価装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3501954B2 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006527948A (ja) * | 2003-06-18 | 2006-12-07 | ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー | ビデオ品質評価におけるエッジ解析 |
| JP2008005107A (ja) * | 2006-06-21 | 2008-01-10 | Nippon Telegr & Teleph Corp <Ntt> | 映像整合方法 |
| US7705881B2 (en) | 2003-08-22 | 2010-04-27 | Nippon Telegraph And Telepone Corporation | Video quality assessing apparatus, video quality assessing method, and video quality assessing program |
| JP2013146052A (ja) * | 2011-12-15 | 2013-07-25 | Canon Inc | 画質評価装置及びその制御方法、プログラム |
-
1998
- 1998-07-21 JP JP20474198A patent/JP3501954B2/ja not_active Expired - Fee Related
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006527948A (ja) * | 2003-06-18 | 2006-12-07 | ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー | ビデオ品質評価におけるエッジ解析 |
| US7705881B2 (en) | 2003-08-22 | 2010-04-27 | Nippon Telegraph And Telepone Corporation | Video quality assessing apparatus, video quality assessing method, and video quality assessing program |
| US8253803B2 (en) | 2003-08-22 | 2012-08-28 | Nippon Telegraph And Telephone Corporation | Video quality assessing apparatus |
| JP2008005107A (ja) * | 2006-06-21 | 2008-01-10 | Nippon Telegr & Teleph Corp <Ntt> | 映像整合方法 |
| JP2013146052A (ja) * | 2011-12-15 | 2013-07-25 | Canon Inc | 画質評価装置及びその制御方法、プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3501954B2 (ja) | 2004-03-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3993017B2 (ja) | 適応時空フィルタ及びろ波方法 | |
| US6128415A (en) | Device profiles for use in a digital image processing system | |
| US6965416B2 (en) | Image processing circuit and method for processing image | |
| JP4946795B2 (ja) | 画像処理装置及び画像処理方法 | |
| US8164662B2 (en) | Image-processing device for color image data and method for the image processing of color image data | |
| US20140321769A1 (en) | Image processing apparatus having a plurality of image processing blocks that are capable of real-time processing of an image signal | |
| US7920183B2 (en) | Image processing device and digital camera | |
| US20050226526A1 (en) | Image processing device and method | |
| JPH05505084A (ja) | シングル・センサ画像システム用のカラー内挿処理を伴う画像圧縮 | |
| JPH04501494A (ja) | 水平及び垂直細部成分の一様な処理を与えるための細部処理方法及び装置 | |
| US6690839B1 (en) | Efficient predictor of subjective video quality rating measures | |
| US20160140696A1 (en) | Image processing device, image processing method, and image processing program | |
| US7561189B2 (en) | Method and apparatus of image dynamic response re-mapping and digital camera using the same | |
| KR20020087951A (ko) | 영상 센서를 위한 그린 재생 | |
| JP2000102041A (ja) | 画像品質測定方法 | |
| US7009662B2 (en) | Electronic circuit and method for enhancing an image | |
| JP3501954B2 (ja) | 画質評価装置 | |
| KR20050085033A (ko) | 이미지 변환을 위한 유닛 및 그 방법 | |
| KR101598555B1 (ko) | 컬러 이미지 개선 | |
| JPH04196675A (ja) | 色推定方法 | |
| JP2002041000A (ja) | 液晶表示装置およびその色補正方法 | |
| JP3618998B2 (ja) | 画像処理に伴う画質劣化を評価するための画質評価装置 | |
| CN116324869A (zh) | 亮色度校正的方法和装置 | |
| Seybold | Noise Characteristics and Noise Perception | |
| JP3531585B2 (ja) | 映像表示装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20031202 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20031203 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071212 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081212 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091212 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091212 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101212 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111212 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111212 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121212 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121212 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131212 Year of fee payment: 10 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |