JP4787210B2 - 映像品質推定方法、装置、およびプログラム - Google Patents
映像品質推定方法、装置、およびプログラム Download PDFInfo
- Publication number
- JP4787210B2 JP4787210B2 JP2007143114A JP2007143114A JP4787210B2 JP 4787210 B2 JP4787210 B2 JP 4787210B2 JP 2007143114 A JP2007143114 A JP 2007143114A JP 2007143114 A JP2007143114 A JP 2007143114A JP 4787210 B2 JP4787210 B2 JP 4787210B2
- Authority
- JP
- Japan
- Prior art keywords
- block
- deterioration
- video
- unit
- concealment index
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
本発明は、映像通信技術に関し、特に複数のフレームに符号化した映像データを端末で受信再生した際に視聴者が実感する主観映像品質を推定する映像品質推定技術に関する。
近年、インターネットアクセス回線の高速・広帯域化に伴い、音声及び映像データなどを用いた映像通信サービスが期待されている。インターネットは必ずしも通信品質が保証されていないネットワークであるため、音声及び映像データなどを用いて通信を行う場合、ユーザ間のネットワークの回線帯域が狭かったり、回線が輻輳したりすると、音声や映像データなどに対してユーザが知覚する品質（主観品質）が劣化してしまう。
具体的には、音声に品質劣化が加わると、途切れ・雑音などとして知覚され、映像に品質劣化が加わると、ぼけ・にじみ・モザイク状の歪・ぎくしゃく感などとして知覚される。
上記サービスを品質良く提供するためには、サービス提供に先立った品質設計やサービス開始後の品質管理が重要となり、このためには、ユーザが享受する品質を適切に表現でき、しかも簡便かつ効率的な品質評価技術が必要となる。
上記サービスを品質良く提供するためには、サービス提供に先立った品質設計やサービス開始後の品質管理が重要となり、このためには、ユーザが享受する品質を適切に表現でき、しかも簡便かつ効率的な品質評価技術が必要となる。
従来、音声品質を推定する技術については、非特許文献１において音声品質客観評価法ＰＥＳＱ（Perceptual Evaluation of Speech Quality）が規定され、映像品質を推定する技術についても、非特許文献２において映像品質客観評価法が記載されている。また、非特許文献３において、ＶｏＩＰ（Voice over IP ）のネットワークプランニングを行うための品質推定法が記載されている。これらの客観評価技術は、ある一定の条件下で主観品質の統計的曖昧さと同程度の推定誤差で主観品質を推定可能である。
国際標準化機関ＩＴＵ−Ｔ（International Telecommunication Union Telecommunication Standardization Sector）勧告Ｐ．８６２．
ＩＴＵ−Ｔ勧告Ｊ．１４４．
ＩＴＵ−Ｔ勧告Ｇ．１０７．
しかしながら、このような従来技術では、映像通信サービスの映像品質値を容易に推定できないという問題点があった。
例えば、従来の映像や音声のメディア情報を用いる品質推定方法によれば、メディアを復号処理する手間がかかり、大規模ネットワークにおける品質の実態把握や品質管理には向かない。
例えば、従来の映像や音声のメディア情報を用いる品質推定方法によれば、メディアを復号処理する手間がかかり、大規模ネットワークにおける品質の実態把握や品質管理には向かない。
また、従来の映像や音声の品質に影響を与える品質パラメータから品質を推定する方法によれば、パケット損失、遅延時間などの音声品質にかかわる品質パラメータから、符号化歪みやパケット損失劣化を考慮し、ＴＶ電話やＩＰ電話の会話品質を推定することができる。しかし、コンテンツ毎の品質を推定するのに不可欠な情報、例えば、動きベクトル、量子化ステップ幅などの情報を用いていないため、コンテンツ毎の品質を正確に推定することはできない。
本発明はこのような課題を解決するためのものであり、映像や音声のメディア情報を処理することなく映像通信サービスの映像品質値を容易に推定できる映像品質推定方法、装置、およびプログラムを提供することを目的としている。
このような目的を達成するために、本発明にかかる映像品質推定方法は、映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、演算処理部と記憶部を備えて映像通信の品質を推定する映像品質推定装置で用いられる映像品質推定方法であって、演算処理部により、通信網から取得した映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析ステップと、演算処理部により、品質パラメータに基づいて映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定ステップと、演算処理部により、品質パラメータに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定する劣化伝搬ブロック判定ステップと、演算処理部により、品質パラメータに基づいてパケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定する重複劣化判定ステップと、演算処理部により、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックのうち、重複劣化判定ステップで劣化ブロックと判定されたブロックの数を劣化ブロック数として集計する劣化ブロック集計ステップと、記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶する記憶ステップと、演算処理部により、記憶部から映像品質推定モデルを読み出して、劣化ブロック数に対応する映像品質値を算出する映像品質推定ステップとを備えている。
この際、記憶ステップで、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを記憶部により予め記憶し、演算処理部により、品質パラメータに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部から劣化隠蔽指標算出モデルを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出ステップをさらに備え、パケット損失ブロック判定ステップで、パケット損失ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出ステップから取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、劣化ブロック集計ステップで、パケット損失ブロックの重み付け劣化個数を劣化ブロック数として集計するようにしてもよい。
また、記憶ステップで、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを記憶部により予め記憶し、演算処理部により、品質パラメータに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部から劣化隠蔽指標算出モデルを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出ステップをさらに備え、パケット損失ブロック判定ステップで、パケット損失ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出ステップから取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、劣化伝搬ブロック判定ステップで、劣化伝搬ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出ステップから取得し、劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、劣化ブロック集計ステップで、パケット損失ブロックと劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数として集計するようにしてもよい。
また、本発明にかかる他の映像品質推定方法は、映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、演算処理部と記憶部を備えて映像通信の品質を推定する映像品質推定装置で用いられる映像品質推定方法であって、演算処理部により、通信網から取得した映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析ステップと、演算処理部により、品質パラメータに基づいて映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定ステップと、演算処理部により、品質パラメータに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定する劣化伝搬ブロック判定ステップと、記憶部により、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶する記憶ステップと、演算処理部により、品質パラメータに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部から劣化隠蔽指標算出モデルを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出ステップとを備え、パケット損失ブロック判定ステップは、パケット損失ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出ステップから取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、劣化伝搬ブロック判定ステップは、劣化伝搬ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出ステップから取得し、劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、演算処理部により、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数として集計する劣化ブロック集計ステップをさらに備え、記憶ステップは、記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、演算処理部により、記憶部から映像品質推定モデルを読み出して、劣化ブロック数に対応する映像品質値を算出する映像品質推定ステップをさらに備えている。
この際、演算処理部により、品質パラメータに基づいてパケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定する重複劣化判定ステップをさらに備え、劣化ブロック集計ステップで、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックのうち、重複劣化判定ステップで劣化ブロックと判定されたブロックの重み付け劣化個数を劣化ブロック数として集計するようにしてもよい。
また、本発明にかかる他の映像品質推定方法は、映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、演算処理部と記憶部を備えて映像通信の品質を推定する映像品質推定装置で用いられる映像品質推定方法であって、演算処理部により、通信網から取得した映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析ステップと、演算処理部により、品質パラメータに基づいて映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定ステップと、記憶部により、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶する記憶ステップと、演算処理部により、品質パラメータに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部から劣化隠蔽指標算出モデルを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出ステップとを備え、パケット損失ブロック判定ステップは、パケット損失ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出ステップから取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、演算処理部により、所定期間内に発生したパケット損失ブロックの重み付け劣化個数を劣化ブロック数として集計する劣化ブロック集計ステップをさらに備え、記憶ステップは、記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、演算処理部により、記憶部から映像品質推定モデルを読み出して、劣化ブロック数に対応する映像品質値を算出する映像品質推定ステップをさらに備えている。
また、演算処理部により、当該ブロックに隣接するブロックの動きベクトルを平均化することにより当該ブロックの動きベクトルを推定出力する動きベクトル推定ステップをさらに備え、劣化隠蔽指標算出ステップで、動きベクトル推定ステップで得られた動きベクトルの大きさに対応する劣化隠蔽指標を算出するようにしてもよい。
また、本発明にかかる映像品質推定装置は、映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、当該映像通信の品質を推定する映像品質推定装置であって、通信網から取得した映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析部と、品質パラメータに基づいて映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定部と、品質パラメータに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定する劣化伝搬ブロック判定部と、品質パラメータに基づいてパケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定する重複劣化判定部と、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックのうち、重複劣化判定部で劣化ブロックと判定されたブロックの数を劣化ブロック数として集計する劣化ブロック集計部と、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶する記憶部と、記憶部から映像品質推定モデルを読み出して、劣化ブロック数に対応する映像品質値を算出する映像品質推定部とを備えている。
この際、記憶部で、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶し、品質パラメータに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部から劣化隠蔽指標算出モデルを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出部をさらに備え、パケット損失ブロック判定部で、パケット損失ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出部から取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、劣化ブロック集計部は、パケット損失ブロックの重み付け劣化個数を劣化ブロック数として集計するようにしてもよい。
また、記憶部で、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを記憶し、品質パラメータに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部から劣化隠蔽指標算出モデルを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出部をさらに備え、パケット損失ブロック判定部で、パケット損失ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出部から取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、劣化伝搬ブロック判定部で、劣化伝搬ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出部から取得し、劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、劣化ブロック集計部で、パケット損失ブロックと劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数として集計するようにしてもよい。
また、本発明にかかる他の映像品質推定装置は、映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、当該映像通信の品質を推定する映像品質推定装置であって、通信網から取得した映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析部と、品質パラメータに基づいて映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定部と、品質パラメータに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定する劣化伝搬ブロック判定部と、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶する記憶部と、品質パラメータに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部から劣化隠蔽指標算出モデルを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出部とを備え、パケット損失ブロック判定部は、パケット損失ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出部から取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、劣化伝搬ブロック判定部は、劣化伝搬ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出部から取得し、劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数として集計する劣化ブロック集計部をさらに備え、記憶部は、記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、演算処理部により、記憶部から映像品質推定モデルを読み出して、劣化ブロック数に対応する映像品質値を算出する映像品質推定部をさらに備えている。
この際、品質パラメータに基づいてパケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定する重複劣化判定部をさらに備え、劣化ブロック集計部で、パケット損失ブロックと劣化伝搬ブロックのうち、重複劣化判定部で劣化ブロックと判定されたブロックの重み付け劣化個数を劣化ブロック数として集計するようにしてもよい。
また、本発明にかかる他の映像品質推定装置は、映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、当該映像通信の品質を推定する映像品質推定装置であって、演算処理部により、通信網から取得した映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析部と、演算処理部により、品質パラメータに基づいて映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定部と、記憶部により、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶する記憶部と、演算処理部により、品質パラメータに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部から劣化隠蔽指標算出モデルを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出部とを備え、パケット損失ブロック判定部は、パケット損失ブロックに対応する劣化隠蔽指標を劣化隠蔽指標算出部から取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、所定期間内に発生したパケット損失ブロックの重み付け劣化個数を劣化ブロック数として集計する劣化ブロック集計部をさらに備え、記憶部は、記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、演算処理部により、記憶部から映像品質推定モデルを読み出して、劣化ブロック数に対応する映像品質値を算出する映像品質推定部をさらに備えている。
また、当該ブロックに隣接するブロックの動きベクトルを平均化することにより当該ブロックの動きベクトルを推定出力する動きベクトル推定部をさらに備え、劣化隠蔽指標算出部は、動きベクトル推定部で得られた動きベクトルの大きさに対応する劣化隠蔽指標を算出するようにしてもよい。
また、本発明のプログラムは、映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、当該映像通信の品質を推定する映像品質推定装置のコンピュータに、上記映像品質推定方法の各ステップを実行させるためのものである。
本発明によれば、映像パケットに含まれる品質パラメータから映像品質を推定することが可能となる。
これにより、従来のように映像や音声のメディア情報を復号処理することなく、映像通信サービスの映像品質値を容易に推定できる。
これにより、従来のように映像や音声のメディア情報を復号処理することなく、映像通信サービスの映像品質値を容易に推定できる。
次に、本発明の実施の形態について図面を参照して説明する。
［第１の実施の形態］
まず、図１を参照して、本発明の第１の実施の形態にかかる映像品質推定装置について説明する。図１は、本発明の第１の実施の形態にかかる映像品質推定装置の構成を示すブロック図である。
［第１の実施の形態］
まず、図１を参照して、本発明の第１の実施の形態にかかる映像品質推定装置について説明する。図１は、本発明の第１の実施の形態にかかる映像品質推定装置の構成を示すブロック図である。
この映像品質推定装置１Ａは、全体としてサーバ装置やパーソナルコンピュータ、さらには映像通信端末などのコンピュータを用いた情報処理装置からなり、主な機能部として、演算処理部１０、記憶部２０、操作入力部２１、画面表示部２２、および通信インターフェース部（以下、通信Ｉ／Ｆ部という）２３が設けられている。また、演算処理部１０には、主な機能処理部として、パケット解析部１１、損失ブロック判定部１２、劣化ブロック集計部１３、および映像品質推定部１４が設けられている。
本実施の形態は、パケット解析部１１により、通信網から取得した映像パケット２を解析して映像通信品質を左右する各種品質パラメータを抽出し、パケット損失ブロック判定部１２により、品質パラメータに基づいて映像パケットの損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、劣化ブロック集計部１３により、所定期間内に発生したパケット損失ブロックの数を劣化ブロック数として集計し、記憶部２０により、所定期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、映像品質推定部１４により、記憶部２０から映像品質推定モデルを読み出して、劣化ブロック数に対応する映像品質値を算出するようにしたものである。
［映像品質推定装置］
次に、図１を参照して、本発明の第１の実施の形態にかかる映像品質推定装置の構成について説明する。
演算処理部１０は、専用の演算処理回路で実現してもよいが、ＣＰＵなどのマイクロプロセッサとその周辺回路を設け、予め記憶部２０に保存されているプログラム２０Ｐを読み込んでマイクロプロセッサで実行することにより、上記ハードウェアとプログラム２０Ｐを協働させることにより上記機能部を実現してもよい。
次に、図１を参照して、本発明の第１の実施の形態にかかる映像品質推定装置の構成について説明する。
演算処理部１０は、専用の演算処理回路で実現してもよいが、ＣＰＵなどのマイクロプロセッサとその周辺回路を設け、予め記憶部２０に保存されているプログラム２０Ｐを読み込んでマイクロプロセッサで実行することにより、上記ハードウェアとプログラム２０Ｐを協働させることにより上記機能部を実現してもよい。
記憶部２０は、メモリやハードディスクなどの記憶装置からなり、演算処理部１０での映像品質推定処理に用いる映像品質推定モデル２０Ｑなどの各種処理情報やプログラム２０Ｐを記憶する機能を有している。
操作入力部２１は、キーボードやマウスなどの操作入力装置からなり、オペレータの操作を検出して演算処理部１０へ出力する機能を有している。
画面表示部２２は、ＬＣＤやＰＤＰなどの画面表示装置からなり、演算処理部１０からの指示に応じて操作メニューや映像品質推定値３などを画面表示する機能を有している。
操作入力部２１は、キーボードやマウスなどの操作入力装置からなり、オペレータの操作を検出して演算処理部１０へ出力する機能を有している。
画面表示部２２は、ＬＣＤやＰＤＰなどの画面表示装置からなり、演算処理部１０からの指示に応じて操作メニューや映像品質推定値３などを画面表示する機能を有している。
通信Ｉ／Ｆ部２３は、専用の通信回路からなり、通信回線を介して外部装置とデータ通信を行うことにより各種データをやり取りする機能を有している。演算処理部１０は、映像品質推定処理に用いる映像品質推定モデル２０Ｑなどの各種処理情報やプログラム２０Ｐを外部装置から通信Ｉ／Ｆ部２３を介して読み込んで記憶部２０へ格納してもよく、外部装置で通信網からキャプチャした映像パケット２を通信Ｉ／Ｆ部２３を介してパケット解析部１１へ取り込んでもよい。また、演算処理部１０は、映像品質推定値３などの各種処理情報を通信Ｉ／Ｆ部２３を介して外部装置へ出力するようにしてもよい。
［演算処理部］
次に、図１を参照して、本発明の第１の実施の形態にかかる映像品質推定装置の演算処理部について詳細に説明する。
演算処理部１０には、主な機能処理部として、パケット解析部１１、損失ブロック判定部１２、劣化ブロック集計部１３、および映像品質推定部１４が設けられている。
次に、図１を参照して、本発明の第１の実施の形態にかかる映像品質推定装置の演算処理部について詳細に説明する。
演算処理部１０には、主な機能処理部として、パケット解析部１１、損失ブロック判定部１２、劣化ブロック集計部１３、および映像品質推定部１４が設けられている。
パケット解析部１１は、外部装置で通信網からキャプチャした映像パケット２を取得する機能と、当該映像パケット２を解析して映像通信品質を左右する各種品質パラメータ１１Ｓを出力する機能とを有している。
図２は、映像パケットの構成を示す説明図である。映像通信で転送する映像データは、連続する複数のフレームから構成されている。送信側装置では、ＭＰＥＧ（Moving Picture Experts Group）やＩＴＵ−Ｔ勧告Ｈ．２６４などの動画符号化規格に基づいて、これらフレームを複数のブロックＢｍに分割して圧縮符号化し、圧縮符号化されたブロックデータに、受信側装置での復号化に必要な各種復号化パラメータを付加して、ビデオパケットを生成する。そして、このビデオパケットを、ＲＴＰ（Real-time Transport Protocol）などの映像通信プロトコル用パケットにＲＴＰデータとして格納し、さらに、ＵＤＰ（User Datagram Protocol）パケットやＩＰパケットへ階層的に格納して映像パケットを生成し、通信網へ送信する。
図２は、映像パケットの構成を示す説明図である。映像通信で転送する映像データは、連続する複数のフレームから構成されている。送信側装置では、ＭＰＥＧ（Moving Picture Experts Group）やＩＴＵ−Ｔ勧告Ｈ．２６４などの動画符号化規格に基づいて、これらフレームを複数のブロックＢｍに分割して圧縮符号化し、圧縮符号化されたブロックデータに、受信側装置での復号化に必要な各種復号化パラメータを付加して、ビデオパケットを生成する。そして、このビデオパケットを、ＲＴＰ（Real-time Transport Protocol）などの映像通信プロトコル用パケットにＲＴＰデータとして格納し、さらに、ＵＤＰ（User Datagram Protocol）パケットやＩＰパケットへ階層的に格納して映像パケットを生成し、通信網へ送信する。
したがって、ビデオパケットの復号化パラメータには、符号化方式、映像フォーマット、符号化ビットレート、フレーム情報（フレームレート，ＧＯＰ（Group of Picture）構成，フレーム番号，ブロック番号）、動きベクトル、および量子化ステップ幅などの各種品質パラメータが含まれている。
また、ＲＴＰ，ＵＤＰ，ＩＰなどの各パケットのヘッダには、それぞれのパケットの転送制御に関する通信パラメータが記述されており、これら通信パラメータには、パケット損失率、パケット損失パターン、パケット遅延時間、パケットの順序性を示すシーケンス番号やタイムスタンプなどの各種品質パラメータが含まれている。
また、ＲＴＰ，ＵＤＰ，ＩＰなどの各パケットのヘッダには、それぞれのパケットの転送制御に関する通信パラメータが記述されており、これら通信パラメータには、パケット損失率、パケット損失パターン、パケット遅延時間、パケットの順序性を示すシーケンス番号やタイムスタンプなどの各種品質パラメータが含まれている。
損失ブロック判定部１２は、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケット２の損失を確認する機能と、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、その判定結果をパケット損失ブロック情報１２Ｓとして出力する機能とを有している。映像パケット２の損失有無は、例えば品質パラメータ１１Ｓのうち前後の映像パケットのシーケンス番号やタイムスタンプを比較することにより確認することができる。
劣化ブロック集計部１３は、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓに基づいて、所定期間内に発生したパケット損失ブロックの数を集計し、劣化ブロック数１３Ｓとして出力する機能を有している。損失ブロック判定部１２により映像パケット２の損失が確認され、当該映像パケット２に格納されていた当該ブロックがパケット損失ブロックと判定された場合、劣化ブロック数の個数が「１」だけ加算され、当該ブロックがパケット損失ブロックでないと判定された場合、劣化ブロック数は変化しない。
図３は、劣化ブロックの集計を示す説明図である。前述したように、映像データを構成する個々のフレームは複数のブロックにそれぞれ分割されて圧縮符号化され、映像パケットに格納されて送信される。したがって、通信網においていずれかの映像パケットが損失した場合、図３に示すように、その映像パケットに格納されているブロックが損失して劣化するため、いずれかのフレームで復号できない部分が発生し、映像品質の劣化となる。劣化ブロック集計部１３では、このような劣化ブロックを所定期間Ｔにわたり集計し、その劣化ブロック数１３Ｓを出力する。
映像品質推定部１４は、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出する機能と、得られた映像品質値を外部装置あるいは画面表示部２２へ出力する機能とを有している。これにより、映像通信のうち所定期間における映像品質推定値３が推定される。
図４は、映像品質推定モデルを示す説明図である。映像通信でやり取りされるブロックの劣化ブロック数と当該映像通信の品質値は、劣化ブロック数が増加するに連れて映像品質値が単調減少する特性がある。本実施の形態では、このような劣化ブロック数と映像通信品質値との関係を予め試験やシミュレーションを行うことにより回帰分析し、得られた回帰直線あるいは回帰曲線の関数を劣化ブロック数と映像通信品質値との関係を示す映像品質推定モデルとして求め、記憶部２０に格納している。
映像品質推定モデル２０Ｑとして線形関数を用いる場合、所定単位期間ｔ内に発生した劣化ブロック数をＢとし、ａ，ｂを係数とし場合、そのときの映像品質値Ｑは、Ｑ＝ａ・Ｂ＋ｂで表すことができる。また、映像品質推定モデル２０Ｑ（ＭＯＳ値）として指数関数を用いる場合、ｃ，ｄ，ｅを係数とした場合、Ｑ＝ｃ・ｅｘｐ（Ｂ／ｄ）＋ｅで表すことができる。この際、映像品質の推定対象となる所定期間Ｔと映像品質推定モデル２０Ｑの基準となる単位時間ｔとが異なる場合、劣化ブロック数１３Ｓをｔ／Ｔで補正することにより、映像品質推定モデル２０Ｑの入力として用いる劣化ブロック数Ｂを算出すればよい。
［第１の実施の形態の動作］
次に、図５を参照して、本発明の第１の実施の形態にかかる映像品質推定装置の動作について説明する。図５は、本発明の第１の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートである。
映像品質推定装置１Ａの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図５の映像品質推定処理を開始する。
次に、図５を参照して、本発明の第１の実施の形態にかかる映像品質推定装置の動作について説明する。図５は、本発明の第１の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートである。
映像品質推定装置１Ａの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図５の映像品質推定処理を開始する。
まず、演算処理部１０は、パケット解析部１１により、順次入力される映像パケット２を解析して映像通信品質を左右する各種品質パラメータ１１Ｓを抽出する（ステップ１００）。
次に、演算処理部１０は、損失ブロック判定部１２により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケット２の損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、その判定結果をパケット損失ブロック情報１２Ｓとして出力する（ステップ１０１）。
次に、演算処理部１０は、損失ブロック判定部１２により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケット２の損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、その判定結果をパケット損失ブロック情報１２Ｓとして出力する（ステップ１０１）。
一方、演算処理部１０は、劣化ブロック集計部１３により、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓに基づいて、所定期間内に発生したパケット損失ブロックの数を劣化ブロック数１３Ｓとして集計する（ステップ１０２）。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
［第１の実施の形態の効果］
このように、本実施の形態は、パケット解析部１１により、通信網から取得した映像パケット２を解析して映像通信品質を左右する各種品質パラメータを抽出し、パケット損失ブロック判定部１２により、品質パラメータに基づいて映像パケットの損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、劣化ブロック集計部１３により、所定期間内に発生したパケット損失ブロックの数を劣化ブロック数として集計するようにしたものである。
このように、本実施の形態は、パケット解析部１１により、通信網から取得した映像パケット２を解析して映像通信品質を左右する各種品質パラメータを抽出し、パケット損失ブロック判定部１２により、品質パラメータに基づいて映像パケットの損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、劣化ブロック集計部１３により、所定期間内に発生したパケット損失ブロックの数を劣化ブロック数として集計するようにしたものである。
これに加え、記憶部２０により、所定期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、映像品質推定部１４により、記憶部２０から映像品質推定モデルを読み出して、劣化ブロック数に対応する映像品質値を算出するようにしたので、映像パケットに含まれる品質パラメータから映像品質を推定することが可能となる。
これにより、従来のように映像や音声のメディア情報を復号処理することなく、映像通信サービスの映像品質値を容易に推定できる。
これにより、従来のように映像や音声のメディア情報を復号処理することなく、映像通信サービスの映像品質値を容易に推定できる。
［第２の実施の形態］
次に、図６を参照して、本発明の第２の実施の形態にかかる映像品質推定装置について説明する。図６は、本発明の第２の実施の形態にかかる映像品質推定装置の構成を示すブロック図であり、前述した図１と同じまたは同等部分には同一符号を付してある。
次に、図６を参照して、本発明の第２の実施の形態にかかる映像品質推定装置について説明する。図６は、本発明の第２の実施の形態にかかる映像品質推定装置の構成を示すブロック図であり、前述した図１と同じまたは同等部分には同一符号を付してある。
第１の実施の形態では、劣化ブロックとして、通信網における映像パケット２の損失に起因して劣化したブロック、すなわちパケット損失ブロックのみを劣化ブロックとして集計した場合について説明した。本実施の形態では、パケット損失ブロックに加え、復号処理時に劣化ブロックから画像劣化が伝搬したブロック、すなわち劣化伝搬ブロックについても劣化ブロックとして集計する場合について説明する。
第１の実施の形態と比較して、本実施の形態にかかる映像品質推定装置１Ｂには、演算処理部１０に劣化伝搬ブロック判定部１５が追加されている。
劣化伝搬ブロック判定部１５は、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて、映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認する機能と、当該画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定し、その判定結果を劣化伝搬ブロック情報１５Ｓとして出力する機能とを有している。
劣化伝搬ブロック判定部１５は、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて、映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認する機能と、当該画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定し、その判定結果を劣化伝搬ブロック情報１５Ｓとして出力する機能とを有している。
図７は、劣化ブロックから他のブロックに対する画像劣化の伝搬を示す説明図である。映像通信において動き補償機能を用いた場合、図７に示すように、フレームｎ＋１では、先行フレームｎのブロックａに対する動きベクトルに基づきブロックａの動きを推定し、推定後のブロックａの周囲のブロックを復号する。この際、先行フレームｎのブロックａが劣化した場合、次のフレームｎ＋１では、ブロックａが新たな位置へ移動するため、移動後のブロックａを含む周囲のブロック、図７では４つのブロックが劣化したブロックａを用いて復号することになる。
また、その次のフレームｎ＋２では、フレームｎ＋１の４つの劣化ブロックがさらに移動した場合、より広い範囲に劣化の影響が伝搬することになる。このようにして、先行フレームの劣化ブロックの影響は、後続フレームのブロックへ伝搬することになり、復号処理時に他のフレームを参照しない独立したフレームにより、イントラリフレッシュが行われるまで、劣化の伝搬が継続する。
劣化伝搬ブロック判定部１５では、品質パラメータ１１Ｓのフレーム情報から得た劣化ブロックに関する位置や動きベクトルから、当該劣化ブロックの動き補償後の新たな位置を求め、後続フレームの各ブロックのうち新たな位置の劣化ブロックを用いて復号するブロックを検査すれば、画像劣化の伝搬の有無を確認できる。
劣化ブロック集計部１３は、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓと、劣化伝搬ブロック判定部１５からの劣化伝搬ブロック情報１５Ｓとに基づいて、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの数を劣化ブロック数として集計する機能を有している。
映像品質推定装置１Ｂにおける他の構成については、第１の実施の形態と同様であり、ここでの説明は省略する。
映像品質推定装置１Ｂにおける他の構成については、第１の実施の形態と同様であり、ここでの説明は省略する。
［第２の実施の形態の動作］
次に、図８を参照して、本発明の第２の実施の形態にかかる映像品質推定装置の動作について説明する。図８は、本発明の第２の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートであり、前述した図５と同じまたは同等部分には同一符号を付してある。
映像品質推定装置１Ｂの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図８の映像品質推定処理を開始する。
次に、図８を参照して、本発明の第２の実施の形態にかかる映像品質推定装置の動作について説明する。図８は、本発明の第２の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートであり、前述した図５と同じまたは同等部分には同一符号を付してある。
映像品質推定装置１Ｂの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図８の映像品質推定処理を開始する。
まず、演算処理部１０は、パケット解析部１１により、順次入力される映像パケット２を解析して映像通信品質を左右する各種品質パラメータ１１Ｓを抽出する（ステップ１００）。
次に、演算処理部１０は、損失ブロック判定部１２により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケット２の損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、その判定結果をパケット損失ブロック情報１２Ｓとして出力する（ステップ１０１）。
次に、演算処理部１０は、損失ブロック判定部１２により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケット２の損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、その判定結果をパケット損失ブロック情報１２Ｓとして出力する（ステップ１０１）。
これと並行して、演算処理部１０は、劣化伝搬ブロック判定部１５により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、当該画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定し、その判定結果を劣化伝搬ブロック情報１５Ｓとして出力する（ステップ１１０）。
演算処理部１０は、劣化ブロック集計部１３により、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓと、劣化伝搬ブロック判定部１５からの劣化伝搬ブロック情報１５Ｓとに基づいて、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの数を劣化ブロック数１３Ｓとして集計する（ステップ１０２）。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
［第２の実施の形態の効果］
このように、本実施の形態は、劣化伝搬ブロック判定部１５により、品質パラメータ１１Ｓに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定し、劣化ブロック集計部１３により、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの数を劣化ブロック数１３Ｓとして集計するようにしたので、第１の実施の形態より正確に劣化ブロックを集計でき、映像品質を高い精度で推定できる。
このように、本実施の形態は、劣化伝搬ブロック判定部１５により、品質パラメータ１１Ｓに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定し、劣化ブロック集計部１３により、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの数を劣化ブロック数１３Ｓとして集計するようにしたので、第１の実施の形態より正確に劣化ブロックを集計でき、映像品質を高い精度で推定できる。
［第３の実施の形態］
次に、図９を参照して、本発明の第３の実施の形態にかかる映像品質推定装置について説明する。図９は、本発明の第３の実施の形態にかかる映像品質推定装置の構成を示す説明図であり、前述した図６と同じまたは同等部分には同一符号を付してある。
次に、図９を参照して、本発明の第３の実施の形態にかかる映像品質推定装置について説明する。図９は、本発明の第３の実施の形態にかかる映像品質推定装置の構成を示す説明図であり、前述した図６と同じまたは同等部分には同一符号を付してある。
第２の実施の形態では、パケット損失ブロックに加え、復号処理時に劣化ブロックから画像劣化が伝搬したブロック、すなわち劣化伝搬ブロックについても劣化ブロックとして集計する場合について説明した。本実施の形態では、パケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化の場合には、パケット損失ブロックのみを劣化ブロックと判定する場合について説明する。
第２の実施の形態と比較して、本実施の形態にかかる映像品質推定装置１Ｃには、演算処理部１０に重複劣化判定部１６が追加されている。
重複劣化判定部１６は、パケット解析部１１で抽出された品質パラメータ１１Ｓと、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓと、劣化伝搬ブロック判定部１５からの劣化伝搬ブロック情報１５Ｓとに基づいて、パケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否か確認する機能と、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定する機能と、重複劣化でない場合にはパケット損失ブロック情報１２Ｓに対応するパケット損失ブロックと劣化伝搬ブロック情報１５Ｓに対応する劣化伝搬ブロックをそれぞれ個別に劣化ブロックと判定する機能と、これら判定結果を劣化ブロック情報１６Ｓとして出力する機能とを有している。
重複劣化判定部１６は、パケット解析部１１で抽出された品質パラメータ１１Ｓと、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓと、劣化伝搬ブロック判定部１５からの劣化伝搬ブロック情報１５Ｓとに基づいて、パケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否か確認する機能と、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定する機能と、重複劣化でない場合にはパケット損失ブロック情報１２Ｓに対応するパケット損失ブロックと劣化伝搬ブロック情報１５Ｓに対応する劣化伝搬ブロックをそれぞれ個別に劣化ブロックと判定する機能と、これら判定結果を劣化ブロック情報１６Ｓとして出力する機能とを有している。
図１０は、重複劣化を示す説明図である。映像通信において、映像パケットの損失に起因して発生するパケット損失ブロックと、他のブロックからの画像劣化の伝搬に起因して発生する劣化伝搬ブロックは、互いに独立して発生するため、同一ブロックについてパケット損失ブロックと劣化伝搬ブロックの双方の判定が重複する場合がある。
図１０に示すように、フレームｎのブロックｂにおいて劣化が発生し、次のフレームｎ＋１において、ブロックｂの劣化の影響が４つのブロックｃ〜ｆに伝搬した場合、これらブロックは、劣化伝搬ブロックと判定される。
図１０に示すように、フレームｎのブロックｂにおいて劣化が発生し、次のフレームｎ＋１において、ブロックｂの劣化の影響が４つのブロックｃ〜ｆに伝搬した場合、これらブロックは、劣化伝搬ブロックと判定される。
このような状態で、ブロックｄが映像パケットの損失に起因してパケット損失ブロックと判定された場合、劣化ブロック集計部１３では、劣化伝搬ブロック判定部１５による、ブロックｄに対する劣化伝搬ブロックの判定と、パケット損失ブロック判定部１２による、ブロックｄに対するパケット損失ブロックの判定の両方について、劣化ブロックとして計数することになる。
重複劣化判定部１６では、このような重複劣化が発生し場合、パケット損失ブロックのみを劣化ブロックと判定し、その判定結果を劣化ブロック情報１６Ｓとして出力する。
重複劣化判定部１６では、このような重複劣化が発生し場合、パケット損失ブロックのみを劣化ブロックと判定し、その判定結果を劣化ブロック情報１６Ｓとして出力する。
劣化ブロック集計部１３は、重複劣化判定部１６からの劣化ブロック情報１６Ｓに基づいて、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの数を劣化ブロック数として集計する機能を有している。
映像品質推定装置１Ｃにおける他の構成については、第１の実施の形態と同様であり、ここでの説明は省略する。
映像品質推定装置１Ｃにおける他の構成については、第１の実施の形態と同様であり、ここでの説明は省略する。
［第３の実施の形態の動作］
次に、図１１を参照して、本発明の第３の実施の形態にかかる映像品質推定装置の動作について説明する。図１１は、本発明の第３の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートであり、前述した図８と同じまたは同等部分には同一符号を付してある。
映像品質推定装置１Ｃの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図１１の映像品質推定処理を開始する。
次に、図１１を参照して、本発明の第３の実施の形態にかかる映像品質推定装置の動作について説明する。図１１は、本発明の第３の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートであり、前述した図８と同じまたは同等部分には同一符号を付してある。
映像品質推定装置１Ｃの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図１１の映像品質推定処理を開始する。
まず、演算処理部１０は、パケット解析部１１により、順次入力される映像パケット２を解析して映像通信品質を左右する各種品質パラメータ１１Ｓを抽出する（ステップ１００）。
次に、演算処理部１０は、損失ブロック判定部１２により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケット２の損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、その判定結果をパケット損失ブロック情報１２Ｓとして出力する（ステップ１０１）。
次に、演算処理部１０は、損失ブロック判定部１２により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケット２の損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、その判定結果をパケット損失ブロック情報１２Ｓとして出力する（ステップ１０１）。
これと並行して、演算処理部１０は、劣化伝搬ブロック判定部１５により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、当該画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定し、その判定結果を劣化伝搬ブロック情報１５Ｓとして出力する（ステップ１１０）。
続いて、演算処理部１０は、重複劣化判定部１６により、パケット解析部１１で抽出された品質パラメータ１１Ｓと、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓと、劣化伝搬ブロック判定部１５からの劣化伝搬ブロック情報１５Ｓとに基づいて、パケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否か確認し、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定し、重複劣化でない場合にはパケット損失ブロック情報１２Ｓに対応するパケット損失ブロックと劣化伝搬ブロック情報１５Ｓに対する劣化伝搬ブロックをそれぞれ個別に劣化ブロックと判定し、これら判定結果を劣化ブロック情報１６Ｓとして出力する（ステップ１２０）。
演算処理部１０は、劣化ブロック集計部１３により、重複劣化判定部１６からの劣化ブロック情報１６Ｓに基づいて、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの数を劣化ブロック数１３Ｓとして集計する（ステップ１０２）。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
［第３の実施の形態の効果］
このように、本実施の形態は、重複劣化判定部１６により、品質パラメータ１１Ｓに基づいてパケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定し、劣化ブロック集計部１３により、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックのうち、重複劣化判定部１６で劣化ブロックと判定されたブロックの数を劣化ブロック数１３Ｓとして集計するようにしたので、第２の実施の形態より正確に劣化ブロックを集計でき、映像品質を高い精度で推定できる。
このように、本実施の形態は、重複劣化判定部１６により、品質パラメータ１１Ｓに基づいてパケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定し、劣化ブロック集計部１３により、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックのうち、重複劣化判定部１６で劣化ブロックと判定されたブロックの数を劣化ブロック数１３Ｓとして集計するようにしたので、第２の実施の形態より正確に劣化ブロックを集計でき、映像品質を高い精度で推定できる。
［第４の実施の形態］
次に、図１２を参照して、本発明の第４の実施の形態にかかる映像品質推定装置について説明する。図１２は、本発明の第４の実施の形態にかかる映像品質推定装置の構成を示すブロック図であり、前述した図９と同じまたは同等部分には同一符号を付してある。
次に、図１２を参照して、本発明の第４の実施の形態にかかる映像品質推定装置について説明する。図１２は、本発明の第４の実施の形態にかかる映像品質推定装置の構成を示すブロック図であり、前述した図９と同じまたは同等部分には同一符号を付してある。
第１〜３の実施の形態では、任意のブロックがパケット損失ブロックまたは劣化伝搬ブロックと判定された場合、そのときの劣化ブロックの個数を「１」と計数する場合を例として説明した。本実施の形態では、当該ブロックの動きベクトルの大きさから生成した劣化隠蔽指標に基づいて、劣化ブロックの個数を重み付けすることにより、劣化個数を補正する場合について説明する。
第３の実施の形態と比較して、本実施の形態にかかる映像品質推定装置１Ｄには、演算処理部１０に劣化隠蔽指標算出部１７とが追加されている。
劣化隠蔽指標算出部１７は、品質パラメータ１１Ｓに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出する機能と、記憶部２０から劣化隠蔽指標算出モデル２０Ｉを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標１７Ｓを算出する機能とを有している。
劣化隠蔽指標算出部１７は、品質パラメータ１１Ｓに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出する機能と、記憶部２０から劣化隠蔽指標算出モデル２０Ｉを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標１７Ｓを算出する機能とを有している。
図１３は、劣化隠蔽指標算出モデルを示す説明図である。映像通信においてブロックごとに動き補償機能を用いた場合、劣化したブロックに対して、先行フレームの同位置のブロックを貼り付ける処理が行われる。この場合、先行フレームのブロックと現フレームのブロックに動きが生じず、画素変化もない場合、劣化を完全に隠蔽（補償）することができる。ただし、映像に動きが生じ、画素変化が大きい場合は、劣化が顕著になる場合が多い。
本実施の形態では、このような映像の動きの増加に伴って、画像の劣化が単調増加するという特性を利用して、劣化の度合いを示す劣化隠蔽指標算出モデル２０Ｉを導出する。この際、映像の動きの大小については動きベクトルの大きさを用い、動きベクトルの水平方向成分と垂直方向成分の絶対値で算出する。
劣化隠蔽指標算出モデル２０Ｉとして線形関数を用いる場合、動きベクトルの水平方向成分をＨとし、動きベクトルの垂直方向成分をＶとした場合、動くベクトルの大きさＬは、Ｌ＝ｓｑｒｔ（Ｈ2＋Ｖ2）で表すことができ、ｆ，ｇを係数とし場合、そのときの劣化隠蔽指標Ｉは、Ｉ＝ｆ・Ｌ＋ｇで表すことができる。また、劣化隠蔽指標算出モデル２０Ｉとして指数関数を用いる場合、ｈ，ｉ，ｊを係数とした場合、Ｉ＝ｈ・ｅｘｐ（Ｌ／ｉ）＋ｊで表すことができる。なお、劣化隠蔽指標Ｉを「０」から「１」の範囲の値とすることにより、劣化隠蔽指標Ｉをそのまま劣化ブロック数として用いることができる。
損失ブロック判定部１２は、パケット損失ブロックの判定結果を出力する際、劣化隠蔽指標算出部１７から劣化隠蔽指標１７Ｓを取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標１７Ｓで重み付けした重み付け劣化個数を含むパケット損失ブロック情報１２Ｓを出力する機能を有している。
劣化伝搬ブロック判定部１５は、劣化伝搬ブロックの判定結果を出力する際、劣化隠蔽指標算出部１７から劣化隠蔽指標１７Ｓを取得し、劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標１７Ｓで重み付けした重み付け劣化個数を含む劣化伝搬ブロック情報１５Ｓを出力する機能を有している。
劣化伝搬ブロック判定部１５は、劣化伝搬ブロックの判定結果を出力する際、劣化隠蔽指標算出部１７から劣化隠蔽指標１７Ｓを取得し、劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標１７Ｓで重み付けした重み付け劣化個数を含む劣化伝搬ブロック情報１５Ｓを出力する機能を有している。
劣化ブロック集計部１３は、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓと、劣化伝搬ブロック判定部１５からの劣化伝搬ブロック情報１５Ｓとに基づいて、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数として集計する機能を有している。
［第４の実施の形態の動作］
次に、図１４を参照して、本発明の第４の実施の形態にかかる映像品質推定装置の動作について説明する。図１４は、本発明の第４の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートであり、前述した図１１と同じまたは同等部分には同一符号を付してある。
映像品質推定装置１Ｄの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図１４の映像品質推定処理を開始する。
次に、図１４を参照して、本発明の第４の実施の形態にかかる映像品質推定装置の動作について説明する。図１４は、本発明の第４の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートであり、前述した図１１と同じまたは同等部分には同一符号を付してある。
映像品質推定装置１Ｄの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図１４の映像品質推定処理を開始する。
まず、演算処理部１０は、パケット解析部１１により、順次入力される映像パケット２を解析して映像通信品質を左右する各種品質パラメータ１１Ｓを抽出する（ステップ１００）。
続いて、演算処理部１０は、劣化隠蔽指標算出部１７により、品質パラメータ１１Ｓに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部２０から劣化隠蔽指標算出モデル２０Ｉを読み出して、当該動きベクトルの大きさに対応する劣化隠蔽指標１７Ｓを算出する（ステップ１３０）。
続いて、演算処理部１０は、劣化隠蔽指標算出部１７により、品質パラメータ１１Ｓに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部２０から劣化隠蔽指標算出モデル２０Ｉを読み出して、当該動きベクトルの大きさに対応する劣化隠蔽指標１７Ｓを算出する（ステップ１３０）。
次に、演算処理部１０は、損失ブロック判定部１２により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケット２の損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、その判定結果をパケット損失ブロック情報１２Ｓとして出力する（ステップ１０１）。この際、損失ブロック判定部１２は、劣化隠蔽指標算出部１７から劣化隠蔽指標１７Ｓを取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力する。
これと並行して、演算処理部１０は、劣化伝搬ブロック判定部１５により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、当該画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定し、その判定結果を劣化伝搬ブロック情報１５Ｓとして出力する（ステップ１１０）。この際、劣化伝搬ブロック判定部１５２は、劣化隠蔽指標算出部１７から劣化隠蔽指標１７Ｓを取得し、劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力する。
続いて、演算処理部１０は、重複劣化判定部１６により、パケット解析部１１で抽出された品質パラメータ１１Ｓと、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓと、劣化伝搬ブロック判定部１５からの劣化伝搬ブロック情報１５Ｓとに基づいて、パケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否か確認し、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定し、これら判定結果を劣化ブロック情報１６Ｓとして出力する（ステップ１２０）。
演算処理部１０は、劣化ブロック集計部１３により、重複劣化判定部１６からの劣化ブロック情報１６Ｓに基づいて、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数１３Ｓとして集計する（ステップ１０２）。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
［第４の実施の形態の効果］
このように、本実施の形態では、記憶部２０により、任意のブロックに対する動きベクトルの大きさと当該ブロックに対する劣化隠蔽度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデル２０Ｉを予め記憶し、劣化隠蔽指標算出部１７により、品質パラメータ１１Ｓに基づいてブロックごとに当該ブロックに対する動きベクトルの垂直成分と水平成分から当該動きベクトルの大きさを算出し、記憶部２０から劣化隠蔽指標算出モデル２０Ｉを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標１７Ｓを算出するようにしたものである。
このように、本実施の形態では、記憶部２０により、任意のブロックに対する動きベクトルの大きさと当該ブロックに対する劣化隠蔽度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデル２０Ｉを予め記憶し、劣化隠蔽指標算出部１７により、品質パラメータ１１Ｓに基づいてブロックごとに当該ブロックに対する動きベクトルの垂直成分と水平成分から当該動きベクトルの大きさを算出し、記憶部２０から劣化隠蔽指標算出モデル２０Ｉを読み出して、動きベクトルの大きさに対応する劣化隠蔽指標１７Ｓを算出するようにしたものである。
これに加え、パケット損失ブロック判定部１２により、パケット損失ブロックの劣化個数として当該劣化隠蔽指標１７Ｓで重み付けした重み付け劣化個数を出力し、劣化伝搬ブロック判定部１５により、劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標１７Ｓで重み付けした重み付け劣化個数を出力し、劣化ブロック集計部１３は、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数１３Ｓとして集計するようにしたので、劣化ブロックにおける劣化度合いを動きベクトルの大きさで補正することができ、より正確に劣化ブロックを集計でき、映像品質を高い精度で推定できる。
また、本実施の形態では、第３の実施の形態に本実施の形態を適用した場合を例として説明したが、これに限定されるものではなく、第１または第２の実施の形態に対しても前述と同様にして本実施の形態を適用でき、同様の作用効果が得られる。
また、本実施の形態では、ブロックごとに劣化隠蔽処理を用いた場合を例として説明したが、これに限定されるものではなく、フレームごとに劣化隠蔽処理を用いる場合についても、前述と同様にして本実施の形態を適用でき、同様の作用効果が得られる。
映像通信においてフレームごとに劣化隠蔽処理を用いた場合、劣化したフレームに対して、先行フレームをそのまま現フレームに貼り付ける処理が行われる。この場合、先行フレームと現フレームに動きが生じず、画素変化もない場合、劣化を完全に隠蔽（補償）することができる。ただし、映像に動きが生じ、画素変化が大きい場合は、劣化が顕著になる場合が多い。
映像通信においてフレームごとに劣化隠蔽処理を用いた場合、劣化したフレームに対して、先行フレームをそのまま現フレームに貼り付ける処理が行われる。この場合、先行フレームと現フレームに動きが生じず、画素変化もない場合、劣化を完全に隠蔽（補償）することができる。ただし、映像に動きが生じ、画素変化が大きい場合は、劣化が顕著になる場合が多い。
したがって、フレームごとに劣化隠蔽処理を用いる場合でも、前述と同様に、このような映像の動きの増加に伴って、画像の劣化が単調増加するという特性を利用して、劣化の度合いを示す劣化隠蔽指標算出モデル２０Ｉを導出する。この際、映像の動きの大小については動きベクトルの大きさを用い、動きベクトルの水平方向成分と垂直方向成分から算出する。なお、劣化隠蔽指標算出モデル２０Ｉについては、フレームごとに劣化隠蔽処理を用いる場合でも、ブロックごとに劣化隠蔽処理を用いる場合と同等であり、ここでの詳細な説明は省略する。
［第５の実施の形態］
次に、図１５を参照して、本発明の第５の実施の形態にかかる映像品質推定装置について説明する。図１５は、本発明の第５の実施の形態にかかる映像品質推定装置の構成を示すブロック図であり、前述した図１２と同じまたは同等部分には同一符号を付してある。
次に、図１５を参照して、本発明の第５の実施の形態にかかる映像品質推定装置について説明する。図１５は、本発明の第５の実施の形態にかかる映像品質推定装置の構成を示すブロック図であり、前述した図１２と同じまたは同等部分には同一符号を付してある。
第４の実施の形態では、劣化隠蔽指標算出部１７において、パケット解析部１１からの品質パラメータ１１Ｓに含まれる動きベクトルを用いる場合について説明した。本実施の形態では、映像パケット２の損失により動きベクトルが得られない場合、周囲のブロックの動きベクトルから当該ブロックの動きベクトルを推定する場合について説明する。
第４の実施の形態と比較して、本実施の形態にかかる映像品質推定装置１Ｅには、演算処理部１０に動きベクトル推定部１８が追加されている。
動きベクトル推定部１８は、パケット解析部１１からの品質パラメータ１１Ｓに基づいて、当該ブロックに隣接するブロックの動きベクトルについて、水平および垂直成分の大きさを平均化し、水平および垂直成分の平均値を当該ブロックの動きベクトルの水平および垂直成分と見なし、これらを動きベクトル情報１８Ｓとして推定出力する機能を有している。
動きベクトル推定部１８は、パケット解析部１１からの品質パラメータ１１Ｓに基づいて、当該ブロックに隣接するブロックの動きベクトルについて、水平および垂直成分の大きさを平均化し、水平および垂直成分の平均値を当該ブロックの動きベクトルの水平および垂直成分と見なし、これらを動きベクトル情報１８Ｓとして推定出力する機能を有している。
［第５の実施の形態の動作］
次に、図１６を参照して、本発明の第５の実施の形態にかかる映像品質推定装置の動作について説明する。図１６は、本発明の第５の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートであり、前述した図１４と同じまたは同等部分には同一符号を付してある。
映像品質推定装置１Ｅの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図１６の映像品質推定処理を開始する。
次に、図１６を参照して、本発明の第５の実施の形態にかかる映像品質推定装置の動作について説明する。図１６は、本発明の第５の実施の形態にかかる映像品質推定装置の映像品質推定処理を示すフローチャートであり、前述した図１４と同じまたは同等部分には同一符号を付してある。
映像品質推定装置１Ｅの演算処理部１０は、操作入力部２１で検出されたオペレータの映像品質推定開始操作や映像パケット２の入力に応じて、図１６の映像品質推定処理を開始する。
まず、演算処理部１０は、パケット解析部１１により、順次入力される映像パケット２を解析して映像通信品質を左右する各種品質パラメータ１１Ｓを抽出する（ステップ１００）。
次に、演算処理部１０は、映像パケット２の損失により所定のブロックの動きベクトルが得られない場合、動きベクトル推定部１８により、パケット解析部１１からの品質パラメータ１１Ｓに基づいて、当該ブロックに隣接するブロックの動きベクトルの大きさの平均値を求め、この平均値を当該ブロックの動きベクトル情報１８Ｓとして推定出力する（ステップ１４０）。
次に、演算処理部１０は、映像パケット２の損失により所定のブロックの動きベクトルが得られない場合、動きベクトル推定部１８により、パケット解析部１１からの品質パラメータ１１Ｓに基づいて、当該ブロックに隣接するブロックの動きベクトルの大きさの平均値を求め、この平均値を当該ブロックの動きベクトル情報１８Ｓとして推定出力する（ステップ１４０）。
続いて、演算処理部１０は、劣化隠蔽指標算出部１７により、品質パラメータ１１Ｓに基づいてブロックごとに当該ブロックの動きベクトルの大きさを算出し、記憶部２０から劣化隠蔽指標算出モデル２０Ｉを読み出して、当該動きベクトルの大きさに対応する劣化隠蔽指標１７Ｓを算出する（ステップ１３０）。この際、映像パケット２の損失により所定のブロックの動きベクトルが得られない場合には、動きベクトル推定部１８からの動きベクトル情報１８Ｓに含まれる動きベクトルを当該ブロックのものとして用いる。
次に、演算処理部１０は、損失ブロック判定部１２により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケット２の損失を確認し、損失した映像パケット２に格納されていたブロックをパケット損失ブロックと判定し、その判定結果をパケット損失ブロック情報１２Ｓとして出力する（ステップ１０１）。この際、損失ブロック判定部１２は、劣化隠蔽指標算出部１７から劣化隠蔽指標１７Ｓを取得し、パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力する。
これと並行して、演算処理部１０は、劣化伝搬ブロック判定部１５により、パケット解析部１１で抽出された品質パラメータ１１Ｓに基づいて映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、当該画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定し、その判定結果を劣化伝搬ブロック情報１５Ｓとして出力する（ステップ１１０）。この際、劣化伝搬ブロック判定部１５２は、劣化隠蔽指標算出部１７から劣化隠蔽指標１７Ｓを取得し、劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力する。
続いて、演算処理部１０は、重複劣化判定部１６により、パケット解析部１１で抽出された品質パラメータ１１Ｓと、損失ブロック判定部１２からのパケット損失ブロック情報１２Ｓと、劣化伝搬ブロック判定部１５からの劣化伝搬ブロック情報１５Ｓとに基づいて、パケット損失ブロックが劣化伝搬ブロックと同一のブロックに発生する重複劣化か否か確認し、重複劣化の場合にはパケット損失ブロックのみを劣化ブロックと判定し、これら判定結果を劣化ブロック情報１６Ｓとして出力する（ステップ１２０）。
演算処理部１０は、劣化ブロック集計部１３により、重複劣化判定部１６からの劣化ブロック情報１６Ｓに基づいて、所定期間内に発生したパケット損失ブロックと劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数１３Ｓとして集計する（ステップ１０２）。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
続いて、演算処理部１０は、映像品質推定部１４により、記憶部２０から映像品質推定モデル２０Ｑを読み出して、劣化ブロック集計部１３で集計された劣化ブロック数１３Ｓに対応する映像品質値を算出することにより映像品質推定値３を推定する（ステップ１０３）。そして、得られた映像品質推定値３を外部装置あるいは画面表示部２２へ出力し、一連の映像品質推定処理を終了する。
［第５の実施の形態の効果］
このように、本実施の形態では、動きベクトル推定部１８により、当該ブロックに隣接するブロックの動きベクトルを平均化して得られた動きベクトルを当該ブロックの動きベクトル情報１８Ｓとして推定出力し、劣化隠蔽指標算出部１７により、動きベクトル推定部１８で得られた動きベクトル情報１８Ｓに基づき劣化隠蔽指標１７Ｓを算出するようにしたので、映像パケット２の損失により所定のブロックの動きベクトルが得られない場合でも、劣化隠蔽指標１７Ｓを算出することができる。これにより、映像パケット２の損失発生時でも、劣化ブロックにおける劣化度合いを動きベクトルの大きさで重み付けすることができ、より正確に劣化ブロックを集計でき、映像品質を高い精度で推定できる。
このように、本実施の形態では、動きベクトル推定部１８により、当該ブロックに隣接するブロックの動きベクトルを平均化して得られた動きベクトルを当該ブロックの動きベクトル情報１８Ｓとして推定出力し、劣化隠蔽指標算出部１７により、動きベクトル推定部１８で得られた動きベクトル情報１８Ｓに基づき劣化隠蔽指標１７Ｓを算出するようにしたので、映像パケット２の損失により所定のブロックの動きベクトルが得られない場合でも、劣化隠蔽指標１７Ｓを算出することができる。これにより、映像パケット２の損失発生時でも、劣化ブロックにおける劣化度合いを動きベクトルの大きさで重み付けすることができ、より正確に劣化ブロックを集計でき、映像品質を高い精度で推定できる。
また、本実施の形態では、動きベクトル推定部１８で得られた動きベクトル情報１８Ｓを劣化隠蔽指標算出部１７で用いる場合について説明したが、この動きベクトル情報１８Ｓを劣化伝搬ブロック判定部１５で用いるようにしてもよい。これにより、映像パケット２の損失発生時でも、任意のブロックに対する他のブロックからの画像劣化の伝搬の有無を正確に確認することが可能となる。もちろん動きベクトル推定部１８と劣化伝搬ブロック判定部１５の両方で用いてもよい。
また、本実施の形態では、映像パケット２が損失して動きベクトルが取得できない際に、動きベクトル推定部１８で動きベクトルを推定する場合を例として説明したが、イントラブロックが挿入された場合も、同様の手法で動きベクトルを推定することにより、劣化隠蔽指標算出部１７で所望の劣化隠蔽指標１７Ｓを算出できる。
［実施の形態の拡張］
以上の各実施の形態では、パケット解析部１１での品質パラメータ１１Ｓの抽出（ステップ１００）から、劣化ブロック集計部１３での劣化ブロック数の集計（ステップ１０２）までの処理を、通信網から所定期間内に抽出された映像パケット２が入力されるごとに各機能部で同期して実行してもよく、所定期間内に映像パケット２をまとめて各機能部で非同期で実行してもよい。特に、非同期で実行する場合には、品質パラメータ１１Ｓ、パケット損失ブロック情報１２Ｓ、劣化伝搬ブロック情報１５Ｓ、劣化ブロック情報１６Ｓ、劣化隠蔽指数１７Ａ、および動きベクトル情報１８Ｓについて、それぞれの情報がどのフレームのどのブロックに対応する情報であるかを識別するための位置情報を付加して識別すればよい。
以上の各実施の形態では、パケット解析部１１での品質パラメータ１１Ｓの抽出（ステップ１００）から、劣化ブロック集計部１３での劣化ブロック数の集計（ステップ１０２）までの処理を、通信網から所定期間内に抽出された映像パケット２が入力されるごとに各機能部で同期して実行してもよく、所定期間内に映像パケット２をまとめて各機能部で非同期で実行してもよい。特に、非同期で実行する場合には、品質パラメータ１１Ｓ、パケット損失ブロック情報１２Ｓ、劣化伝搬ブロック情報１５Ｓ、劣化ブロック情報１６Ｓ、劣化隠蔽指数１７Ａ、および動きベクトル情報１８Ｓについて、それぞれの情報がどのフレームのどのブロックに対応する情報であるかを識別するための位置情報を付加して識別すればよい。
また、第２〜第５の実施の形態では、劣化伝搬ブロック判定部１５や動きベクトル推定部１８では、他のブロックに関する品質パラメータが必要となるため、これら他の品質パラメータをそれぞれの機能処理部で蓄積しておいてもよく、記憶部２０に蓄積して各機能処理部で共用してもよい。
また、映像通信によっては、劣化隠蔽処理を用いない場合、ブロック単位で劣化隠蔽処理を用いる場合、フレーム単位で劣化隠蔽処理を用いる場合など、各種のバリエーションが存在する。したがって、これら通信種別に関する設定情報を操作入力部２１などで予め入力しておき、この設定情報の内容に基づいて劣化伝搬ブロック判定部１５、劣化隠蔽指標算出部１７、および動きベクトル推定部１８の処理内容を選択するようにしてもよい。
１Ａ，１Ｂ，１Ｃ，１Ｄ，１Ｅ…映像品質推定装置、１０…演算処理部、１１…パケット解析部、１１Ｓ…品質パラメータ、１２…パケット損失ブロック判定部、１２Ｓ…パケット損失ブロック情報、１３…劣化ブロック集計部、１３Ｓ…劣化ブロック数、１４…映像品質推定部、１５…劣化伝搬ブロック判定部、１５Ｓ…劣化伝搬ブロック情報、１６…重複劣化判定部、１６Ｓ…劣化ブロック情報、１７…劣化隠蔽指標算出部、１７Ｓ…劣化隠蔽指標、１８…動きベクトル推定部、１８Ｓ…動きベクトル情報、２０…記憶部、２０Ｉ…劣化隠蔽指標算出モデル、２０Ｐ…プログラム、２０Ｑ…映像品質推定モデル、２１…操作入力部、２２…画面表示部、２３…通信Ｉ／Ｆ部、２…映像パケット、３…映像品質推定値。
Claims (15)
- 映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、演算処理部と記憶部を備えて前記映像通信の品質を推定する映像品質推定装置で用いられる映像品質推定方法であって、
前記演算処理部により、前記通信網から取得した前記映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析ステップと、
前記演算処理部により、前記品質パラメータに基づいて前記映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定ステップと、
前記演算処理部により、前記品質パラメータに基づいて前記映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定する劣化伝搬ブロック判定ステップと、
前記演算処理部により、前記品質パラメータに基づいて前記パケット損失ブロックが前記劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合には前記パケット損失ブロックのみを劣化ブロックと判定する重複劣化判定ステップと、
前記演算処理部により、前記所定期間内に発生した前記パケット損失ブロックと前記劣化伝搬ブロックのうち、前記重複劣化判定ステップで劣化ブロックと判定されたブロックの数を劣化ブロック数として集計する劣化ブロック集計ステップと、
前記記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶する記憶ステップと、
前記演算処理部により、前記記憶部から前記映像品質推定モデルを読み出して、前記劣化ブロック数に対応する映像品質値を算出する映像品質推定ステップと
を備えることを特徴とする映像品質推定方法。 - 請求項１に記載の映像品質推定方法において、
前記記憶ステップは、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを前記記憶部により予め記憶し、
前記演算処理部により、前記品質パラメータに基づいて前記ブロックごとに当該ブロックの動きベクトルの大きさを算出し、前記記憶部から前記劣化隠蔽指標算出モデルを読み出して、前記動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出ステップをさらに備え、
前記パケット損失ブロック判定ステップは、前記パケット損失ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出ステップから取得し、前記パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記劣化ブロック集計ステップは、前記パケット損失ブロックの重み付け劣化個数を劣化ブロック数として集計する
ことを特徴とする映像品質推定方法。 - 請求項１に記載の映像品質推定方法において、
前記記憶ステップは、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを前記記憶部により予め記憶し、
前記演算処理部により、前記品質パラメータに基づいて前記ブロックごとに当該ブロックの動きベクトルの大きさを算出し、前記記憶部から前記劣化隠蔽指標算出モデルを読み出して、前記動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出ステップをさらに備え、
前記パケット損失ブロック判定ステップは、前記パケット損失ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出ステップから取得し、前記パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記劣化伝搬ブロック判定ステップは、前記劣化伝搬ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出ステップから取得し、前記劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記劣化ブロック集計ステップは、前記パケット損失ブロックと前記劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数として集計する
ことを特徴とする映像品質推定方法。 - 映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、演算処理部と記憶部を備えて前記映像通信の品質を推定する映像品質推定装置で用いられる映像品質推定方法であって、
前記演算処理部により、前記通信網から取得した前記映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析ステップと、
前記演算処理部により、前記品質パラメータに基づいて前記映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定ステップと、
前記演算処理部により、前記品質パラメータに基づいて前記映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定する劣化伝搬ブロック判定ステップと、
前記記憶部により、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶する記憶ステップと、
前記演算処理部により、前記品質パラメータに基づいて前記ブロックごとに当該ブロックの動きベクトルの大きさを算出し、前記記憶部から前記劣化隠蔽指標算出モデルを読み出して、前記動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出ステップと
を備え、
前記パケット損失ブロック判定ステップは、前記パケット損失ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出ステップから取得し、前記パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記劣化伝搬ブロック判定ステップは、前記劣化伝搬ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出ステップから取得し、前記劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記演算処理部により、所定期間内に発生した前記パケット損失ブロックと前記劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数として集計する劣化ブロック集計ステップをさらに備え、
前記記憶ステップは、前記記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、
前記演算処理部により、前記記憶部から前記映像品質推定モデルを読み出して、前記劣化ブロック数に対応する映像品質値を算出する映像品質推定ステップをさらに備える
ことを特徴とする映像品質推定方法。 - 請求項３または４に記載の映像品質推定方法において、
前記演算処理部により、前記品質パラメータに基づいて前記パケット損失ブロックが前記劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合には前記パケット損失ブロックのみを劣化ブロックと判定する重複劣化判定ステップをさらに備え、
前記劣化ブロック集計ステップは、前記所定期間内に発生した前記パケット損失ブロックと前記劣化伝搬ブロックのうち、前記重複劣化判定ステップで劣化ブロックと判定されたブロックの重み付け劣化個数を劣化ブロック数として集計する
ことを特徴とする映像品質推定方法。 - 映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、演算処理部と記憶部を備えて前記映像通信の品質を推定する映像品質推定装置で用いられる映像品質推定方法であって、
前記演算処理部により、前記通信網から取得した前記映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析ステップと、
前記演算処理部により、前記品質パラメータに基づいて前記映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定ステップと、
前記記憶部により、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶する記憶ステップと、
前記演算処理部により、前記品質パラメータに基づいて前記ブロックごとに当該ブロックの動きベクトルの大きさを算出し、前記記憶部から前記劣化隠蔽指標算出モデルを読み出して、前記動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出ステップとを備え、
前記パケット損失ブロック判定ステップは、前記パケット損失ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出ステップから取得し、前記パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記演算処理部により、所定期間内に発生した前記パケット損失ブロックの重み付け劣化個数を劣化ブロック数として集計する劣化ブロック集計ステップをさらに備え、
前記記憶ステップは、前記記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、
前記演算処理部により、前記記憶部から前記映像品質推定モデルを読み出して、前記劣化ブロック数に対応する映像品質値を算出する映像品質推定ステップをさらに備える
ことを特徴とする映像品質推定方法。 - 請求項２〜４または６のいずれか１つに記載の映像品質推定方法において、
前記演算処理部により、当該ブロックに隣接するブロックの動きベクトルを平均化することにより当該ブロックの動きベクトルを推定出力する動きベクトル推定ステップをさらに備え、
前記劣化隠蔽指標算出ステップは、前記動きベクトル推定ステップで得られた動きベクトルの大きさに対応する劣化隠蔽指標を算出する
ことを特徴とする映像品質推定方法。 - 映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、当該映像通信の品質を推定する映像品質推定装置であって、
前記通信網から取得した前記映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析部と、
前記品質パラメータに基づいて前記映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定部と、
前記品質パラメータに基づいて前記映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定する劣化伝搬ブロック判定部と、
前記品質パラメータに基づいて前記パケット損失ブロックが前記劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合には前記パケット損失ブロックのみを劣化ブロックと判定する重複劣化判定部と、
所定期間内に発生した前記パケット損失ブロックと前記劣化伝搬ブロックのうち、前記重複劣化判定部で劣化ブロックと判定されたブロックの数を劣化ブロック数として集計する劣化ブロック集計部と、
単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶する記憶部と、
前記記憶部から前記映像品質推定モデルを読み出して、前記劣化ブロック数に対応する映像品質値を算出する映像品質推定部と
を備えることを特徴とする映像品質推定装置。 - 請求項８に記載の映像品質推定装置において、
前記記憶部は、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶し、
前記品質パラメータに基づいて前記ブロックごとに当該ブロックの動きベクトルの大きさを算出し、前記記憶部から前記劣化隠蔽指標算出モデルを読み出して、前記動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出部をさらに備え、
前記パケット損失ブロック判定部は、前記パケット損失ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出部から取得し、前記パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記劣化ブロック集計部は、前記パケット損失ブロックの重み付け劣化個数を劣化ブロック数として集計する
ことを特徴とする映像品質推定装置。 - 請求項８に記載の映像品質推定装置において、
前記記憶部は、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを記憶し、
前記品質パラメータに基づいて前記ブロックごとに当該ブロックの動きベクトルの大きさを算出し、前記記憶部から前記劣化隠蔽指標算出モデルを読み出して、前記動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出部をさらに備え、
前記パケット損失ブロック判定部は、前記パケット損失ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出部から取得し、前記パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記劣化伝搬ブロック判定部は、前記劣化伝搬ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出部から取得し、前記劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記劣化ブロック集計部は、前記パケット損失ブロックと前記劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数として集計する
ことを特徴とする映像品質推定装置。 - 映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、当該映像通信の品質を推定する映像品質推定装置であって、
前記通信網から取得した前記映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析部と、
前記品質パラメータに基づいて前記映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定部と、
前記品質パラメータに基づいて前記映像パケットに格納されているブロックに対する他のブロックからの画像劣化の伝搬の有無を確認し、画像劣化の伝搬が確認されたブロックを劣化伝搬ブロックと判定する劣化伝搬ブロック判定部と、
復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶する記憶部と、
前記品質パラメータに基づいて前記ブロックごとに当該ブロックの動きベクトルの大きさを算出し、前記記憶部から前記劣化隠蔽指標算出モデルを読み出して、前記動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出部と
を備え、
前記パケット損失ブロック判定部は、前記パケット損失ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出部から取得し、前記パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
前記劣化伝搬ブロック判定部は、前記劣化伝搬ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出部から取得し、前記劣化伝搬ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
所定期間内に発生した前記パケット損失ブロックと前記劣化伝搬ブロックの重み付け劣化個数を劣化ブロック数として集計する劣化ブロック集計部をさらに備え、
前記記憶部は、前記記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、
前記演算処理部により、前記記憶部から前記映像品質推定モデルを読み出して、前記劣化ブロック数に対応する映像品質値を算出する映像品質推定部をさらに備える
ことを特徴とする映像品質推定装置。 - 請求項１０または１１に記載の映像品質推定装置において、
前記品質パラメータに基づいて前記パケット損失ブロックが前記劣化伝搬ブロックと同一のブロックに発生する重複劣化か否かを確認し、重複劣化の場合には前記パケット損失ブロックのみを劣化ブロックと判定する重複劣化判定部をさらに備え、
前記劣化ブロック集計部は、前記パケット損失ブロックと前記劣化伝搬ブロックのうち、前記重複劣化判定部で劣化ブロックと判定されたブロックの重み付け劣化個数を劣化ブロック数として集計する
ことを特徴とする映像品質推定装置。 - 映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、当該映像通信の品質を推定する映像品質推定装置であって、
前記演算処理部により、前記通信網から取得した前記映像パケットを解析して映像通信品質を左右する各種品質パラメータを抽出するパケット解析部と、
前記演算処理部により、前記品質パラメータに基づいて前記映像パケットの損失を確認し、損失した映像パケットに格納されていたブロックをパケット損失ブロックと判定するパケット損失ブロック判定部と、
前記記憶部により、復号処理時における任意のブロックの動きベクトルの大きさと当該ブロックでの画像劣化の度合いを示す劣化隠蔽指標との対応関係を示す劣化隠蔽指標算出モデルを予め記憶する記憶部と、
前記演算処理部により、前記品質パラメータに基づいて前記ブロックごとに当該ブロックの動きベクトルの大きさを算出し、前記記憶部から前記劣化隠蔽指標算出モデルを読み出して、前記動きベクトルの大きさに対応する劣化隠蔽指標を算出する劣化隠蔽指標算出部とを備え、
前記パケット損失ブロック判定部は、前記パケット損失ブロックに対応する劣化隠蔽指標を前記劣化隠蔽指標算出部から取得し、前記パケット損失ブロックの劣化個数として当該劣化隠蔽指標で重み付けした重み付け劣化個数を出力し、
所定期間内に発生した前記パケット損失ブロックの重み付け劣化個数を劣化ブロック数として集計する劣化ブロック集計部をさらに備え、
前記記憶部は、前記記憶部により、単位期間内に発生した劣化ブロック数と映像品質値との対応関係を示す映像品質推定モデルを予め記憶し、
前記演算処理部により、前記記憶部から前記映像品質推定モデルを読み出して、前記劣化ブロック数に対応する映像品質値を算出する映像品質推定部をさらに備える
ことを特徴とする映像品質推定装置。 - 請求項９〜１１または１３のいずれか１つに記載の映像品質推定装置において、
当該ブロックに隣接するブロックの動きベクトルを平均化することにより当該ブロックの動きベクトルを推定出力する動きベクトル推定部をさらに備え、
前記劣化隠蔽指標算出部は、前記動きベクトル推定部で得られた動きベクトルの大きさに対応する劣化隠蔽指標を算出する
ことを特徴とする映像品質推定装置。 - 映像データを構成する個々のフレームを複数のブロックにそれぞれ分割して圧縮符号化した後、映像パケットに格納して送信装置から受信装置へ通信網を介して転送する映像通信について、当該映像通信の品質を推定する映像品質推定装置のコンピュータに、請求項１〜７に記載した映像品質推定方法の各ステップを実行させるためのプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007143114A JP4787210B2 (ja) | 2007-05-30 | 2007-05-30 | 映像品質推定方法、装置、およびプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007143114A JP4787210B2 (ja) | 2007-05-30 | 2007-05-30 | 映像品質推定方法、装置、およびプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2008301026A JP2008301026A (ja) | 2008-12-11 |
| JP4787210B2 true JP4787210B2 (ja) | 2011-10-05 |
Family
ID=40174146
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007143114A Expired - Fee Related JP4787210B2 (ja) | 2007-05-30 | 2007-05-30 | 映像品質推定方法、装置、およびプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4787210B2 (ja) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5390369B2 (ja) * | 2009-12-17 | 2014-01-15 | 日本電信電話株式会社 | 映像品質推定装置および方法、符号化ビットレート推定装置および方法、並びにプログラム |
| HUE039252T2 (hu) * | 2010-12-10 | 2018-12-28 | Deutsche Telekom Ag | Eljárás és berendezés videojel minõségének megállapítására a videojel kódolása és átvitele folyamán |
| EP2649801B1 (en) * | 2010-12-10 | 2015-04-15 | Deutsche Telekom AG | Method and apparatus for objective video quality assessment based on continuous estimates of packet loss visibility |
| CN102740108B (zh) * | 2011-04-11 | 2015-07-08 | 华为技术有限公司 | 一种视频数据质量评估方法和装置 |
| US9769501B2 (en) | 2012-07-17 | 2017-09-19 | Thomson Licensing | Video quality assessment at a bitstream level |
| CN103634594B (zh) | 2012-08-21 | 2015-04-29 | 华为技术有限公司 | 一种获得视频编码压缩质量的方法及装置 |
| JP6841097B2 (ja) | 2017-03-09 | 2021-03-10 | 富士通株式会社 | 動き量算出プログラム、動き量算出方法、動き量算出装置及び業務支援システム |
| CN114257858B (zh) * | 2022-03-02 | 2022-07-19 | 浙江宇视科技有限公司 | 一种基于情感计算的内容同步方法和装置 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2000341688A (ja) * | 1999-05-31 | 2000-12-08 | Ando Electric Co Ltd | 動画通信品質判定装置 |
| JP4317540B2 (ja) * | 2005-08-30 | 2009-08-19 | 日本電信電話株式会社 | 映像品質推定装置、方法およびプログラム |
-
2007
- 2007-05-30 JP JP2007143114A patent/JP4787210B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2008301026A (ja) | 2008-12-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4787210B2 (ja) | 映像品質推定方法、装置、およびプログラム | |
| JP5970724B2 (ja) | ビデオ符号化圧縮品質を取得するための方法および装置 | |
| US9723329B2 (en) | Method and system for determining a quality value of a video stream | |
| US8154602B2 (en) | Video quality estimation apparatus, method, and program | |
| JP5172440B2 (ja) | 映像品質推定装置、方法およびプログラム | |
| KR100933509B1 (ko) | 비디오 품질 추정 장치, 방법 및 프로그램을 기록한 컴퓨터 판독가능한 기록매체 | |
| US7965203B2 (en) | Video quality estimation apparatus, method, and program | |
| JP4802209B2 (ja) | 映像品質推定方法、装置およびプログラム | |
| JP4914400B2 (ja) | 品質推定方法、品質推定システム、ユーザ端末、品質管理端末およびプログラム | |
| JP4861371B2 (ja) | 映像品質推定装置、方法、およびプログラム | |
| JP4787303B2 (ja) | 映像品質推定装置、方法、およびプログラム | |
| JP4802200B2 (ja) | 映像品質推定装置、方法、およびプログラム | |
| JP2007306108A (ja) | 映像品質推定装置、方法、およびプログラム | |
| JP4740967B2 (ja) | 映像品質推定装置、方法、およびプログラム | |
| JP5405915B2 (ja) | 映像品質推定装置、映像品質推定方法および映像品質推定装置の制御プログラム | |
| JP2007306109A (ja) | 映像品質パラメータ推定装置、方法、およびプログラム | |
| JP5237226B2 (ja) | 映像品質推定装置、方法、およびプログラム | |
| JP6061778B2 (ja) | 映像品質評価装置、映像品質評価方法及びプログラム | |
| JP2011254434A (ja) | 映像フレーム種別推定用調整係数算出方法、装置、およびプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090713 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110408 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110419 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110620 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110712 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110714 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140722 Year of fee payment: 3 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |