JP3527145B2 - ディジタル伝送画像の客観品質評価装置 - Google Patents
ディジタル伝送画像の客観品質評価装置Info
- Publication number
- JP3527145B2 JP3527145B2 JP25755499A JP25755499A JP3527145B2 JP 3527145 B2 JP3527145 B2 JP 3527145B2 JP 25755499 A JP25755499 A JP 25755499A JP 25755499 A JP25755499 A JP 25755499A JP 3527145 B2 JP3527145 B2 JP 3527145B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- images
- quality evaluation
- correspondence table
- variance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
像の客観品質評価装置に関し、特に、複数の経路で映像
を圧縮符号化伝送することにより伝送の信頼性を高める
ようにしたシステムに用いると好適なディジタル伝送画
像の客観品質評価装置に関する。
質測定(客観画質評価)の研究、開発がなされ、種々の
提案がなされている。該客観画質評価には、人間による
主観評価にならい、原画との比較に基づいて評価する方
法と、受信画像のみから評価する方法とがある。
合は、精度の高い方法が開発されている。この方法に関
しては、例えば次の文献に詳細に説明されている。T.Ha
mada,et al:"Picture quality assessment system by t
hree-layered bottom-up noise weighting considering
human visual perception",SMPTE Journal,Vol 108,N
o.1,pp.20-26 (Jan.1999).しかしながら、ディジタル圧
縮画像を実際に伝送している間に、受信画像の品質を評
価しようとすると、この場合には、原画を使用すること
ができないため、前記の文献に記された方法を使用する
ことができない。
画像の伝送中に、受信画像の品質を評価しようとする
と、原画が使用不可能なため、受信画像のみからその品
質を評価する必要があるが、従来は該評価に関して格別
の提案がなされていない。
みてなされたものであり、複数経路による画像の多重化
圧縮符号化伝送において、受信画像だけを用いて、該受
信画像の客観画質評価を高精度に行えるディジタル伝送
画像の客観品質評価装置を提供することにある。
ために、本発明は、複数系統で伝送されるディジタル伝
送画像の客観品質評価装置において、前記複数系統のう
ちの一系統の受信画像の分散値を測定する手段と、前記
一系統と他の一系統の受信画像との差分信号の分散値を
測定する手段と、前記二つの分散値と、原画と受信画像
のSN比との対応テーブルを保持する手段とを具備し、
前記二つの分散値を基に前記対応テーブルを参照するこ
とにより、受信画像のみから、該受信画像の原画に対す
る品質を評価するようにした点に第1の特徴がある。ま
た、原画と受信画像に視覚特性を表すフィルタをかけ
て、前記と同様にして、該受信画像の原画に対する品質
を評価するようにした点に第2の特徴がある。
受信画像信号のみから、それらと原画とのSN比、およ
び視覚特性重み付きSN比を推定することができるよう
になる。
を詳細に説明する。まず、図1を参照して、本発明の原
理を説明する。図1は、該原理を説明するための概略の
システム構成図であり、2伝送経路が示されている。
1の伝送路2、第1の復号化部3から構成され、第2の
伝送経路は、第2の符号化部4、第2の伝送路5、第2
の復号化部6から構成されている。前記第1の符号化部
1と第2の符号化部4は、原画xをそれぞれ独立に符号
化する。また、前記第1の復号化部3と第2の復号化部
6は受信した信号を復号化し、それぞれ第1の復号画x
1 と第2の復号画x2を出力する。減算器7は、第1の
復号画x1 から第2の復号画x2 を減算し、差分信号y
(=x1 −x2)を出力する。また、第1の分散測定部1
1は第1の復号画x1 の分散を測定し、第2の分散測定
部12は前記差分信号yの分散を測定する。
統の復号信号をx1 、x2 とし、前記第1、第2の符号
化部1、4の符号化ノイズをそれぞれd1 、d2 とす
る。また、sを原画信号xの信号分散、nを前記符号化
ノイズd1 、d2 のパワーとし、原画信号xと符号化ノ
イズd1 の相関関係をρxd1 、符号化ノイズd1 、
d2 の相関関係をρd1d2とすると、復号信号x1 の
分散は図2の(1) 式のようになり、前記差分信号y(=
x1 −x2)の分散は同図の(2) 式のようになる。
によらず、次の定性的性質(1) 、(2) をもつということ
ができる。 (1) 伝送ビットが非常に小さくなると、すなわちほぼs
/n=1になると、量子化ステップサイズが非常に大き
くなるため、量子化後のレベルが0、すなわち、ほぼd
1 =d2 =−xとなり、両系統のノイズは同一に近くな
る。したがって、原画信号xと符号化ノイズd1 の相関
関係ρxd1 は−1に、また符号化ノイズd1 、d2
の相関関係ρd1d2は1に近付く。
れ、すなわちs/nが大きくなるにつれ、両系統の符号
化ノイズは独立に近付いていく。すなわち、前記ρ
d1d2は0に近くなっていく。また、前記ρxd1
は0に近付く。
1 の相関関係ρxd1 と符号化ノイズd1 、d2 の相
関関係ρd1d2を、それぞれs/nの関数ρxd1
(s/n) 、ρd1d2(s/n) で表すと、前記(1) 式と(2)
式より、図2の(3) 式の関係式、すなわち、s/nと、
σ2 (x1)、σ2 (x1−x2) との関係式が得られる。
n) 、ρd1d2(s/n) が画像によらないとすると、次
のようにして、2系統の復号画像だけから、受信画像の
原画に対するs/nの推定が可能になる。
は実際に使用するシステムを用いて予備実験をする。具
体的には、種々な画像、例えば“チアリーダ”、“フラ
ミンゴ”,“グリーンリーブス”などのテスト画像を、
様々なビットレートで符号化し、前記第1の分散測定部
11と第2の分散測定部12により、それぞれσ2(x1)
とσ2 (x1−x2) を求める。
いて、原画xと第1または第2の復号化部3、6で復号
された復号画とから、s/nを求める。
2 (x1−x2)/σ2 (x1) とs/nの関係をテーブル
化する。
に、前記2系統の復号画像からσ2(x1−x2)/σ2 (x
1)を測定し、前記テーブルを参照することにより、受信
画像のs/nを推定する。
用いて、それらの差分信号の分散値といずれかの信号の
分散値とを測定し、これらの値と、受信画像と原画との
SN比との対応テーブルを参照することにより、そのS
N比を推定するようにするのが本発明の原理である。
して説明する。この実施形態は、MPEG−2符号化部
21、24、MPEG−2復号化部23、26を用いた
ものであり、他の符号は図1と同一または同等物を示
す。
σ2 (x1−x2) とs/nの関係を表す対応テーブルを
作成する方法について説明する。最初に、さまざまな種
類のテスト画像、例えば“チアリーダ”、“フラミン
ゴ”,“グリーンリーブス”などの画像を用意する。次
いで、各画像について、MPEG−2符号化部21で種
々のビットレートで符号化して伝送する。次に、該符号
化された画像をMPEG−2復号化部23で復号化し、
原画xと復号画x1 とのSN(RSNR)を測定する。
この時、原画信号xの信号分散sとしては、16×16
のブロック毎に平均値分離した後の信号分散を使用す
る。
グをずらしてMPEG−2符号化した他の系統、すなわ
ちMPEG−2符号化部24、MPEG−2復号化部2
6の系統の復号画x2 と前記第1系統の復号画x1 とか
ら、σ2 (x1−x2)/σ2(x1)を測定する。そして、該
σ2 (x1−x2)/σ2 (x1)を横軸、前記SN(RSN
R)を縦軸にして、前記測定結果をプロットする。
ブルの一例を示すグラフであり、横軸にσ2 (x1−x2)
/σ2 (x1)がとられ、縦軸にRSNRがとられてい
る。図示の例では、前記“チアリーダ”、“フラミン
ゴ”,“グリーンリーブス”などの6種類のテスト画像
を用いて予備実験し、σ2 (x1−x2)/σ2 (x1)に対
するRSNRを前記グラフ上にプロットした。該グラフ
から明らかなように、図中の各点、すなわち6種のテス
ト画像を様々なビットレートで符号化して測定した点
は、破線aで示した回帰曲線または近似曲線に、±1d
B以内の誤差で当てはまることが分かる。この回帰曲線
が、SN比の対応テーブルに相当する。
観品質評価装置の構成および動作について図5を参照し
て説明する。図5は受信側の要部の構成を示すブロック
図であり、13はσ2 (x1−x2)/σ2 (x1)演算部、
14は対応テーブル、15はスイッチ手段を示し、他の
符号は図3と同一または同等物を示す。
して求めた図4の破線aのテーブルが格納される。ディ
ジタル画像の伝送は複数系統、例えば2系統で行われ、
それぞれ独立に符号化されたディジタル画像が第1、第
2のMPEG−2復号化部23、26で受信され、復号
化される。第1のMPEG−2復号化部23の復号画は
分散測定部11でσ2 (x1)が測定され、第1、第2の
MPEG−2復号化部23、26の各復号画の差の信号
は分散測定部12でσ2 (x1−x2) が測定される。該
分散値σ2 (x1)とσ2 (x1−x2) は、σ2 (x1−x
2)/σ2 (x1)演算部13に入力し、σ2 (x1−x2)/
σ2 (x1)が求められる。該σ2 (x1−x2)/σ2 (x
1)は対応テーブル14に送られ、該対応テーブルから該
σ2 (x1−x2)/σ2 (x1)に対するRSNR値、つま
りSN値が求められる。一方、スイッチ15からは、該
スイッチ15によって選択された系統の復号画が出力さ
れる。
の画像の伝送中に、原画を使用することなく、受信画像
の品質を評価することができるようになる。
照して説明する。図6において、31、32、33は、
それぞれ、視覚特性を表すフィルタであり、他の符号は
図1と同一または同等物を示す。なお、該視覚特性を表
すフィルタ31〜33の各々の一例としては、本発明者
等による特許出願である特開平7−307925号公報
の第1図に示されている構成要素1〜5からなる2次元
の帯域フィルタを用いることができる。
表すフィルタをかけた後に、前記σ 2 (x1−x2)/σ
2 (x1)を求め、視覚特性を表すフィルタをかけて求め
られた対応テーブルを参照することにより、視覚特性で
重み付けされたSN比を推定するようにしたものであ
る。
に、原画にフィルタ31をかけたものと、2系統の復号
画のそれぞれにフィルタ32、33をかけたものを用い
ることにより、第1実施形態と同様の方法により求める
ことができる。図7は、このようにして求めた対応テー
ブルの一例を示し、横軸はσ2 (x1*−x2*)/σ2 (x
1*)、縦軸はWSNR(重み付きSN比)を表し、回帰
曲線bがSN比の対応テーブルに相当する。ここに、*
はフィルタをかけた後であることを意味する。
ジタル伝送画像の客観品質評価装置の構成を示すブロッ
ク図である。図8の図5と同一の符号は、同一または同
等物を示す。
化部23で復号された復号画にフィルタ32をかけた画
像の分散σ2 (x1*)を測定する。一方、分散測定部1
2は、第1、第2のMPEG−2復号化部23、26で
復号された各復号画にフィルタ32、33をかけた画像
の差の分散σ2 (x1*−x2*) を測定する。該分散測
定部11、12で測定された分散σ2 (x1*)とσ2
(x1*−x2*) は、σ 2 (x1*−x2*)/σ2 (x1*)
演算部13に入力され、該σ2 (x1*−x2*)/σ2
(x1*)が演算される。次いで、該演算値を下に、前記対
応テーブルがアクセスされ、該演算値に対応するWSN
Rが求められる。このWSNRが、実際の伝送中の画像
の推定視覚特性重み付きSN比である。
様に、実際の画像の伝送中に、原画を使用することな
く、受信画像の品質を評価することができるようにな
る。
によれば、複数経路による画像の多重化圧縮符号化伝送
において、2系統の受信画像だけを用いて、それらと原
画とのSN比、または視覚特性重み付きSN比を推定す
ることができるようになる。また、2系統の受信画像だ
けを用いて、受信画像の客観画質評価を高精度に行うこ
とができるようになる。
する手段を示すブロック図である。
成を示すブロック図である。
する手段を示すブロック図である。
構成を示すブロック図である。
部、7…減算器、11、12…分散測定部、13…σ
2 (x1−x2)/σ2 (x1)演算部、14…対応テーブ
ル、21、24…MPEG−2符号化部、23、26…
MPEG−2復号化部、31、32、33…フィルタ。
Claims (2)
- 【請求項1】 複数系統で伝送されるディジタル伝送画
像の客観品質評価装置において、 前記複数系統のうちの一系統の受信画像の分散値を測定
する手段と、 前記一系統と他の一系統の受信画像との差分信号の分散
値を測定する手段と、 前記二つの分散値と、原画と受信画像のSN比との対応
テーブルを保持する手段とを具備し、 前記二つの分散値を基に前記対応テーブルを参照するこ
とにより、該受信画像の原画に対する品質を評価するよ
うにしたことを特徴とするディジタル伝送画像の客観品
質評価装置。 - 【請求項2】 複数系統で伝送されるディジタル伝送画
像の客観品質評価装置において、 受信画像に視覚特性を表すフィルタをかけた、前記複数
系統のうちの一系統の画像の分散値を測定する手段と、 前記一系統と他の一系統の画像にそれぞれ前記フィルタ
をかけた画像同士の差分信号の分散値を測定する手段
と、 前記二つの分散値と、視覚特性を表すフィルタをかけた
原画と前記フィルタ後の画像のSN比との対応テーブル
を保持する手段とを具備し、 前記二つの分散値を基に前記対応テーブルを参照するこ
とにより、該受信画像の原画に対する品質を評価するよ
うにしたことを特徴とするディジタル伝送画像の客観品
質評価装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP25755499A JP3527145B2 (ja) | 1999-09-10 | 1999-09-10 | ディジタル伝送画像の客観品質評価装置 |
US09/653,332 US6603505B1 (en) | 1999-09-10 | 2000-08-31 | Device for objectively evaluating the quality of a digital transmitted picture |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP25755499A JP3527145B2 (ja) | 1999-09-10 | 1999-09-10 | ディジタル伝送画像の客観品質評価装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001086534A JP2001086534A (ja) | 2001-03-30 |
JP3527145B2 true JP3527145B2 (ja) | 2004-05-17 |
Family
ID=17307906
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP25755499A Expired - Fee Related JP3527145B2 (ja) | 1999-09-10 | 1999-09-10 | ディジタル伝送画像の客観品質評価装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US6603505B1 (ja) |
JP (1) | JP3527145B2 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3527137B2 (ja) * | 1999-06-03 | 2004-05-17 | Kddi株式会社 | 冗長2重化伝送における画像障害検出装置 |
JP3622840B2 (ja) * | 2000-08-25 | 2005-02-23 | Kddi株式会社 | 伝送画質評価装置および伝送画質遠隔監視装置 |
US6943827B2 (en) * | 2001-04-16 | 2005-09-13 | Kddi Corporation | Apparatus for monitoring quality of picture in transmission |
JP4194029B2 (ja) * | 2003-02-26 | 2008-12-10 | Kddi株式会社 | 画像劣化自動検出装置 |
JP5093364B2 (ja) * | 2008-12-26 | 2012-12-12 | 富士通株式会社 | 画像処理システム、画像処理装置及び画像処理方法 |
US8294772B2 (en) * | 2009-01-29 | 2012-10-23 | Pelco, Inc. | System and method for monitoring connections within an analog video system |
US8351768B2 (en) * | 2009-07-23 | 2013-01-08 | Microsoft Corporation | Media processing comparison system and techniques |
US20170249521A1 (en) * | 2014-05-15 | 2017-08-31 | Arris Enterprises, Inc. | Automatic video comparison of the output of a video decoder |
US11064204B2 (en) | 2014-05-15 | 2021-07-13 | Arris Enterprises Llc | Automatic video comparison of the output of a video decoder |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5134633A (en) * | 1990-11-30 | 1992-07-28 | At&T Bell Laboratories | Digital communications synchronization scheme |
US5530483A (en) * | 1994-10-11 | 1996-06-25 | Pixel Instruments Corp. | Delay detector apparatus and method for plural image sequences |
US6330033B1 (en) * | 1995-12-07 | 2001-12-11 | James Carl Cooper | Pulse detector for ascertaining the processing delay of a signal |
US6400400B1 (en) * | 1997-07-30 | 2002-06-04 | Sarnoff Corporation | Method and apparatus for automated testing of a video decoder |
-
1999
- 1999-09-10 JP JP25755499A patent/JP3527145B2/ja not_active Expired - Fee Related
-
2000
- 2000-08-31 US US09/653,332 patent/US6603505B1/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JP2001086534A (ja) | 2001-03-30 |
US6603505B1 (en) | 2003-08-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8902990B2 (en) | Block error compensating apparatus of image frame and method thereof | |
US20030112333A1 (en) | Method and system for estimating objective quality of compressed video data | |
JP3527145B2 (ja) | ディジタル伝送画像の客観品質評価装置 | |
JP2005527159A (ja) | 圧縮された映像データの客観的な品質を見積もる方法およびシステム | |
EP1841236A2 (en) | Temporal in-the-loop filtering to improve the reference picture for motion compensated prediction | |
Nasrabadi et al. | Investigating the PSNR calculation methods for video sequences with source and channel distortions | |
KR20050105630A (ko) | 동영상 화질 평가시스템 및 방법 | |
US20090060027A1 (en) | Compressed Signal Subjective Quality Ratings Prediction | |
KR20010061979A (ko) | 비디오 신호 장애의 고조파 측정 방법 | |
JP3583658B2 (ja) | 圧縮伝送画像の品質評価装置およびそれに用いる送信装置および受信装置 | |
US6755531B2 (en) | Motion picture code evaluator and billing system | |
Sugimoto et al. | Objective measurement scheme for perceived picture quality degradation caused by MPEG encoding without any reference pictures | |
US6750942B2 (en) | Motion picture code evaluation apparatus and system | |
JP2005124145A (ja) | デジタル映像データの復号化方法 | |
US6778254B2 (en) | Motion picture code evaluator and related systems | |
US11653003B2 (en) | System and method for processing a stream of images | |
JP4309703B2 (ja) | 符号化誤差推定装置 | |
JPH11275590A (ja) | 画像間圧縮符号化装置および符号化方法 | |
Alvarez et al. | A flexible QoE framework for video streaming services | |
Rau | Automated test system for digital TV receivers | |
JP4733071B2 (ja) | 映像品質推定方法および装置 | |
US6975774B2 (en) | Quantifying perceptual information and entropy | |
KR101557164B1 (ko) | 영상화질 평가 장치 및 방법 | |
KR100986765B1 (ko) | 압축 복원된 영상에 대한 정량적 품질 평가 방법 및 장치 | |
KR101015253B1 (ko) | 압축/복원된 영상에 대한 주관적 화질 평가 방법 및 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040116 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040210 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040218 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100227 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130227 Year of fee payment: 9 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160227 Year of fee payment: 12 |
|
LAPS | Cancellation because of no payment of annual fees |