JP2012004840A - 映像品質客観評価装置及び方法及びプログラム - Google Patents
映像品質客観評価装置及び方法及びプログラム Download PDFInfo
- Publication number
- JP2012004840A JP2012004840A JP2010137758A JP2010137758A JP2012004840A JP 2012004840 A JP2012004840 A JP 2012004840A JP 2010137758 A JP2010137758 A JP 2010137758A JP 2010137758 A JP2010137758 A JP 2010137758A JP 2012004840 A JP2012004840 A JP 2012004840A
- Authority
- JP
- Japan
- Prior art keywords
- video
- image
- deterioration
- feature amount
- video quality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
【解決手段】 本発明は、基準映像と劣化映像の画素値を直接比較するのではなく、入力された基準映像と劣化映像の前後フレームの映像劣化量の違いを抽出する相対劣化特徴量抽出部と、相対劣化特徴量抽出部から出力される特徴量に基づいて、映像品質評価値を導出する映像品質推定部とを設けることにより、解像度やフォーマットが異なる場合でも映像品質を推定することを可能にする。
【選択図】 図1
Description
基準映像の前後のフレームの映像劣化量と劣化映像の前後フレームの映像劣化量の違いを抽出する相対劣化特徴量抽出手段と、
前記相対劣化特徴量抽出手段から抽出された特徴量と評価対象映像の定常品質値から映像品質評価値を導出する映像品質推定手段と、
を有することを特徴とする。
前記基準映像及び前記劣化映像のそれぞれの前後フレームの劣化特徴量における両者の変化が共に大きくなるタイミングを用いて該基準映像と該劣化映像の同期を合わせる第1の劣化特徴量比較手段、
または、
前記基準映像と前記劣化映像の画像の解像度が異なる場合に、対応フレーム毎の変化量を比較する第2の劣化特徴量比較手段、
または、
前記基準映像と前記劣化映像の表示フレームレートが異なる場合に単位時間当たりの変化量を比較する第3の劣化特徴量比較手段、
または、
前記基準映像と前記劣化映像の前後フレームの劣化特徴量として、前後フレーム画素値の差分量、前後フレームの画素の比、前後フレームのPSNR(画素差分量を基準映像の画素値で均一化した値)、あるいはそれらの分散値など統計処理した値を利用する第4の劣化特徴量比較手段、
のいずれかを有する。
前記基準映像の前後のフレームの劣化特徴量を導出する基準映像特徴量抽出手段と、
前記劣化映像の前後のフレームの劣化特徴量を導出する劣化映像特徴量抽出手段と、を含み、
前記基準映像特徴量抽出手段及び前記劣化映像特徴量抽出手段は、
前記基準映像と前記劣化映像の前後のフレームの劣化特徴量を導出する際に、差分フレーム間の全てではなく、画素間間引きあるいは特定領域の情報を利用する。
入力された基準映像に対してエンコーダ処理した映像を新たな基準映像として出力するエンコード処理手段を有する。
前記定常品質値として、
予め抽出しておいた評価対象映像の定常品質値を格納した定常品質値記憶手段から読み込む、または、前記基準映像と前記劣化映像間の画素情報を直接比較することにより得られた情報を用いる。
基準映像の前後のフレームの映像劣化量と劣化映像の前後フレームの映像劣化量の違いを抽出する相対劣化特徴量抽出ステップと、
前記相対劣化特徴量抽出手段から抽出された特徴量と評価対象映像の定常品質値から映像品質評価値を導出する映像品質推定ステップと、を行うことを特徴とする。
前記基準映像及び前記劣化映像のそれぞれの前後フレームの劣化特徴量における両者の変化が共に大きくなるタイミングを用いて該基準映像と該劣化映像の同期を合わせる第1の劣化特徴量比較ステップ、
または、
前記基準映像と前記劣化映像の画像の解像度が異なる場合に、対応フレーム毎の変化量を比較する第2の劣化特徴量比較ステップ、
または、
前記基準映像と前記劣化映像の表示フレームレートが異なる場合に単位時間当たりの変化量を比較する第3の劣化特徴量比較ステップ、
または、
前記基準映像と前記劣化映像の前後フレームの劣化特徴量として、前後フレーム画素値の差分量、前後フレームの画素の比、前後フレームのPSNR(画素差分量を基準映像の画素値で均一化した値)、あるいはそれらの分散値など統計処理した値を利用する第4の劣化特徴量比較ステップ、のいずれかを行う。
前記基準映像の前後のフレームの劣化特徴量を導出する基準映像特徴量抽出ステップと、
前記劣化映像の前後のフレームの劣化特徴量を導出する劣化映像特徴量抽出ステップと、を行い、
前記基準映像特徴量抽出ステップ及び前記劣化映像特徴量抽出ステップにおいて、
前記基準映像と前記劣化映像の前後のフレームの劣化特徴量を導出する際に、差分フレーム間の全てではなく、画素間間引きあるいは特定領域の情報を利用する。
入力された基準映像に対してエンコーダ処理した映像を新たな基準映像として出力するステップを行う。
前記定常品質値として、
予め抽出しておいた評価対象映像の定常品質値を格納した定常品質値記憶手段から読み込む、または、前記基準映像と前記劣化映像間の画素情報を直接比較することにより得られた情報を用いる。
本発明の実施の形態に係る映像品質客観評価装置は、図1に示すように、基準映像信号10と劣化映像信号20を利用して映像品質評価値60を導出するフルレファレンス型の映像品質客観評価装置を実現するものである。
以下、図面を用いて第2の実施の形態を説明する。
20 劣化映像信号
12 エンコード処理基準映像信号
15 基準フレーム間差分特徴量
25 劣化フレーム間差分特徴量
30 相対劣化特徴量
40 定常品質データ要求
50 定常品質データ
60 映像品質評価値
100A,100B 相対劣化特徴量抽出部
105 エンコード処理部
110 基準映像特徴量抽出部
120 劣化映像特徴量抽出部
130 劣化特徴量比較部
200 品質推定部
300 定常品質DB
400 定常品質抽出部
Claims (11)
- 映像品質を客観的に評価するための映像品質客観評価装置であって、
基準映像の前後のフレームの映像劣化量と劣化映像の前後フレームの映像劣化量の違いを抽出する相対劣化特徴量抽出手段と、
前記相対劣化特徴量抽出手段から抽出された特徴量と評価対象映像の定常品質値から映像品質評価値を導出する映像品質推定手段と、
を有することを特徴とする映像品質客観評価装置。 - 前記相対劣化特徴量抽出手段は、
前記基準映像及び前記劣化映像のそれぞれの前後フレームの劣化特徴量における両者の変化が共に大きくなるタイミングを用いて該基準映像と該劣化映像の同期を合わせる第1の劣化特徴量比較手段、
または、
前記基準映像と前記劣化映像の画像の解像度が異なる場合に、対応フレーム毎の変化量を比較する第2の劣化特徴量比較手段、
または、
前記基準映像と前記劣化映像の表示フレームレートが異なる場合に単位時間当たりの変化量を比較する第3の劣化特徴量比較手段、
または、
前記基準映像と前記劣化映像の前後フレームの劣化特徴量として、前後フレーム画素値の差分量、前後フレームの画素の比、前後フレームのPSNR(画素差分量を基準映像の画素値で均一化した値)、あるいはそれらの分散値など統計処理した値を利用する第4の劣化特徴量比較手段、
のいずれかを有する請求項1記載の映像品質客観評価装置。 - 前記相対劣化特徴量抽出手段は、
前記基準映像の前後のフレームの劣化特徴量を導出する基準映像特徴量抽出手段と、
前記劣化映像の前後のフレームの劣化特徴量を導出する劣化映像特徴量抽出手段と、を含み、
前記基準映像特徴量抽出手段及び前記劣化映像特徴量抽出手段は、
前記基準映像と前記劣化映像の前後のフレームの劣化特徴量を導出する際に、差分フレーム間の全てではなく、画素間間引きあるいは特定領域の情報を利用する
請求項1記載の映像品質客観評価装置。 - 前記相対劣化特徴量抽出手段は、
入力された基準映像に対してエンコーダ処理した映像を新たな基準映像として出力するエンコード処理手段を有する
請求項1記載の映像品質客観評価装置。 - 前記映像品質推定手段は、
前記定常品質値として、
予め抽出しておいた評価対象映像の定常品質値を格納した定常品質値記憶手段から読み込む、または、前記基準映像と前記劣化映像間の画素情報を直接比較することにより得られた情報を用いる
請求項1記載の映像品質客観評価装置。 - 映像品質を客観的に評価するための映像品質客観評価方法であって、
基準映像の前後のフレームの映像劣化量と劣化映像の前後フレームの映像劣化量の違いを抽出する相対劣化特徴量抽出ステップと、
前記相対劣化特徴量抽出手段から抽出された特徴量と評価対象映像の定常品質値から映像品質評価値を導出する映像品質推定ステップと、
を行うことを特徴とする映像品質客観評価方法。 - 前記相対劣化特徴量抽出ステップにおいて、
前記基準映像及び前記劣化映像のそれぞれの前後フレームの劣化特徴量における両者の変化が共に大きくなるタイミングを用いて該基準映像と該劣化映像の同期を合わせる第1の劣化特徴量比較ステップ、
または、
前記基準映像と前記劣化映像の画像の解像度が異なる場合に、対応フレーム毎の変化量を比較する第2の劣化特徴量比較ステップ、
または、
前記基準映像と前記劣化映像の表示フレームレートが異なる場合に単位時間当たりの変化量を比較する第3の劣化特徴量比較ステップ、
または、
前記基準映像と前記劣化映像の前後フレームの劣化特徴量として、前後フレーム画素値の差分量、前後フレームの画素の比、前後フレームのPSNR(画素差分量を基準映像の画素値で均一化した値)、あるいはそれらの分散値など統計処理した値を利用する第4の劣化特徴量比較ステップ、
のいずれかを行う請求項6記載の映像品質客観評価方法。 - 前記相対劣化特徴量抽出ステップにおいて、
前記基準映像の前後のフレームの劣化特徴量を導出する基準映像特徴量抽出ステップと、
前記劣化映像の前後のフレームの劣化特徴量を導出する劣化映像特徴量抽出ステップと、を行い、
前記基準映像特徴量抽出ステップ及び前記劣化映像特徴量抽出ステップにおいて、
前記基準映像と前記劣化映像の前後のフレームの劣化特徴量を導出する際に、差分フレーム間の全てではなく、画素間間引きあるいは特定領域の情報を利用する
請求項6記載の映像品質客観評価方法。 - 前記相対劣化特徴量抽出ステップにおいて、
入力された基準映像に対してエンコーダ処理した映像を新たな基準映像として出力するステップを行う
請求項6記載の映像品質客観評価方法。 - 前記映像品質推定ステップにおいて、
前記定常品質値として、
予め抽出しておいた評価対象映像の定常品質値を格納した定常品質値記憶手段から読み込む、または、前記基準映像と前記劣化映像間の画素情報を直接比較することにより得られた情報を用いる
請求項6記載の映像品質客観評価方法。 - 請求項1乃至5のいずれか1項に記載の映像品質客観評価装置を構成する各手段としてコンピュータを機能させるための映像品質客観評価プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010137758A JP5450279B2 (ja) | 2010-06-16 | 2010-06-16 | 映像品質客観評価装置及び方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010137758A JP5450279B2 (ja) | 2010-06-16 | 2010-06-16 | 映像品質客観評価装置及び方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012004840A true JP2012004840A (ja) | 2012-01-05 |
JP5450279B2 JP5450279B2 (ja) | 2014-03-26 |
Family
ID=45536324
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010137758A Expired - Fee Related JP5450279B2 (ja) | 2010-06-16 | 2010-06-16 | 映像品質客観評価装置及び方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5450279B2 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015005877A (ja) * | 2013-06-20 | 2015-01-08 | 富士通株式会社 | 評価装置、評価方法および評価プログラム |
JP2015026879A (ja) * | 2013-07-24 | 2015-02-05 | 日本電信電話株式会社 | 映像品質推定装置、映像品質推定方法及びプログラム |
JP2016005111A (ja) * | 2014-06-17 | 2016-01-12 | 日本電信電話株式会社 | 評価映像分析装置及び方法及びプログラム |
JP2017017524A (ja) * | 2015-07-01 | 2017-01-19 | 日本電信電話株式会社 | 映像整合装置、映像整合方法、及びプログラム |
CN110751649A (zh) * | 2019-10-29 | 2020-02-04 | 腾讯科技(深圳)有限公司 | 视频质量评估方法、装置、电子设备及存储介质 |
CN111127437A (zh) * | 2019-12-25 | 2020-05-08 | 浙江传媒学院 | 一种基于色彩空间分解的全参考图像质量评价方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007110189A (ja) * | 2005-10-11 | 2007-04-26 | Shinano Kenshi Co Ltd | 画質評価装置および画質評価方法 |
WO2007129422A1 (ja) * | 2006-05-09 | 2007-11-15 | Nippon Telegraph And Telephone Corporation | 映像品質推定装置、方法、およびプログラム |
JP2008533937A (ja) * | 2005-03-25 | 2008-08-21 | アルゴリス インコーポレイテッド | Dctコード化されたビデオの品質を、オリジナルビデオシーケンスを用いて、もしくは用いずに客観評価する装置及び方法 |
JP2009095046A (ja) * | 2003-08-22 | 2009-04-30 | Nippon Telegr & Teleph Corp <Ntt> | 映像品質評価装置、映像品質評価方法及び映像品質評価プログラム |
WO2009133879A1 (ja) * | 2008-04-30 | 2009-11-05 | 日本電気株式会社 | 画像評価方法、画像評価システム及びプログラム |
JP2010081157A (ja) * | 2008-09-25 | 2010-04-08 | Nippon Telegr & Teleph Corp <Ntt> | 映像品質推定装置、方法、およびプログラム |
-
2010
- 2010-06-16 JP JP2010137758A patent/JP5450279B2/ja not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009095046A (ja) * | 2003-08-22 | 2009-04-30 | Nippon Telegr & Teleph Corp <Ntt> | 映像品質評価装置、映像品質評価方法及び映像品質評価プログラム |
JP2008533937A (ja) * | 2005-03-25 | 2008-08-21 | アルゴリス インコーポレイテッド | Dctコード化されたビデオの品質を、オリジナルビデオシーケンスを用いて、もしくは用いずに客観評価する装置及び方法 |
JP2007110189A (ja) * | 2005-10-11 | 2007-04-26 | Shinano Kenshi Co Ltd | 画質評価装置および画質評価方法 |
WO2007129422A1 (ja) * | 2006-05-09 | 2007-11-15 | Nippon Telegraph And Telephone Corporation | 映像品質推定装置、方法、およびプログラム |
WO2009133879A1 (ja) * | 2008-04-30 | 2009-11-05 | 日本電気株式会社 | 画像評価方法、画像評価システム及びプログラム |
JP2010081157A (ja) * | 2008-09-25 | 2010-04-08 | Nippon Telegr & Teleph Corp <Ntt> | 映像品質推定装置、方法、およびプログラム |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015005877A (ja) * | 2013-06-20 | 2015-01-08 | 富士通株式会社 | 評価装置、評価方法および評価プログラム |
JP2015026879A (ja) * | 2013-07-24 | 2015-02-05 | 日本電信電話株式会社 | 映像品質推定装置、映像品質推定方法及びプログラム |
JP2016005111A (ja) * | 2014-06-17 | 2016-01-12 | 日本電信電話株式会社 | 評価映像分析装置及び方法及びプログラム |
JP2017017524A (ja) * | 2015-07-01 | 2017-01-19 | 日本電信電話株式会社 | 映像整合装置、映像整合方法、及びプログラム |
CN110751649A (zh) * | 2019-10-29 | 2020-02-04 | 腾讯科技(深圳)有限公司 | 视频质量评估方法、装置、电子设备及存储介质 |
CN110751649B (zh) * | 2019-10-29 | 2021-11-02 | 腾讯科技(深圳)有限公司 | 视频质量评估方法、装置、电子设备及存储介质 |
CN111127437A (zh) * | 2019-12-25 | 2020-05-08 | 浙江传媒学院 | 一种基于色彩空间分解的全参考图像质量评价方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5450279B2 (ja) | 2014-03-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Kuipers et al. | Techniques for measuring quality of experience | |
US9906782B2 (en) | Source agnostic audio/visual analysis framework | |
JP6190525B2 (ja) | 品質対ビットレートが変動するメディアデータストリームの品質を決定するための概念 | |
US7873727B2 (en) | System and method for evaluating streaming multimedia quality | |
JP5450279B2 (ja) | 映像品質客観評価装置及び方法及びプログラム | |
Zinner et al. | Towards QoE management for scalable video streaming | |
Leszczuk et al. | Recent developments in visual quality monitoring by key performance indicators | |
KR101783071B1 (ko) | 비디오 신호의 인코딩 또는 압축 중에 비디오 신호의 품질을 평가하는 방법 및 장치 | |
US20130293774A1 (en) | System and method for enhanced remote transcoding using content profiling | |
US9609179B2 (en) | Methods for processing multimedia flows and corresponding devices | |
WO2021048065A1 (en) | Signal delay measurement | |
Leszczuk et al. | Assessing quality of experience for high definition video streaming under diverse packet loss patterns | |
US9007525B2 (en) | Audio and video communications apparatus and communications method thereof | |
Leszczuk et al. | Key indicators for monitoring of audiovisual quality | |
Huynh-Thu et al. | No-reference temporal quality metric for video impaired by frame freezing artefacts | |
JP5221459B2 (ja) | 映像品質推定装置、システム、方法およびプログラム | |
KR20100071820A (ko) | 영상 품질 측정 방법 및 그 장치 | |
EP4111697A1 (en) | Real-time latency measurement of video streams | |
Rahim et al. | Comparing H. 265/HEVC and VP9: Impact of high frame rates on the perceptual quality of compressed videos | |
US20210352341A1 (en) | Scene cut-based time alignment of video streams | |
JP4740967B2 (ja) | 映像品質推定装置、方法、およびプログラム | |
JP5237226B2 (ja) | 映像品質推定装置、方法、およびプログラム | |
Jonnalagadda et al. | Evaluation of video quality of experience using evalvid | |
JP5467030B2 (ja) | 映像品質客観評価装置及びプログラム | |
Zhang et al. | Overview of full-reference video quality metrics and their performance evaluations for videoconferencing application |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20121005 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130426 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130521 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130709 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130924 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20131004 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131108 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20131217 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131225 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5450279 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |