JP4837909B2 - 画像処理システムの損失ブロック特性判断装置及びその方法 - Google Patents

Description

本発明は、動画像処理技術に関するもので、詳しくは、デジタル動画像処理において、伝送時に損失されたブロックの特性を自動に判断する画像処理システムの損失ブロック特性判断装置及びその方法に関するものである。

最近、マルチメディアコンテンツサービスに対する関心が増加するにつれて、通信媒体を通して伝送される多様な動画像信号をエラーなしに復元するための動画像処理技術の重要性が次第に大きくなっている。

前記動画像は、場面の特性及び動きの程度が相互に異なる複数枚のフレームから構成され、該フレームは、画像符号化の単位となる１６×１６ピクセルのサイズを有する複数のマクロブロックから構成される。

前記動画像は、ＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ）、可変長さ符号化技法及び動き補償符号化技法などを利用して圧縮して伝送されるが、前記符号化過程または伝送チャネルを通して伝送される過程で発生したエラーにより動画像ブロックが損失される場合は、復元された画像の画質が低下されるという問題点があった。

受信側で前記損失ブロックを補完して元の画像に近く復旧するために多様なエラー隠匿（ｅｒｒｏｒ ｃｏｎｃｅａｌｍｅｎｔ）技法が適用されているが、各動画像ブロックに最適なエラー隠匿技法を選択するためには、該当の損失ブロックの特性を正確に把握しなければならない。即ち、前記損失ブロックの特性は、前記受信側の復号器で各動画像ブロック別に適用可能な最適のエラー隠匿技法を選択する重要な基準として活用することができる。

そこで、本発明は、受信側で伝送時に損失された動画像ブロックの特性を自動に判断して、損失ブロックを復旧するための情報として提供し得る画像処理システムの損失ブロック特性判断装置及びその方法を提供することを目的とする。

このような目的を達成するために、本発明に係る画像処理システムの損失ブロック特性判断装置は、伝送された動画像ブロック中に損失ブロックが存在するかを判断する損失ブロック検出部と、前記損失ブロックが発生した現在のフレームと以前のフレームとで、隣接ピクセル間の時間的差値ｃｏｓｔ_１を算出するピクセル差算出部と、前記損失ブロックに対する周辺ブロックのモーションベクトル分散値ｃｏｓｔ_２を算出する分散値算出部と、前記時間的差値ｃｏｓｔ_１及びモーションベクトル分散値ｃｏｓｔ_２を既設定された臨界値と比較して損失ブロックの特性を判断するブロック特性決定部と、から構成されることを特徴とする。

そして、本発明に係る画像処理システムの損失ブロック特性判断方法は、通信網を通して伝送される動画像信号を受信して画像処理する過程において、損失された動画像ブロックに対する費用関数を算出する段階と、前記費用関数を既設定された臨界値と比較して損失ブロックの特性を判断する段階と、を有することを特徴とする。

また、本発明に係る画像処理システムの損失ブロック特性判断方法は、伝送された動画像ブロックで損失ブロックの存在有無を確認する段階と、現在のフレームと以前のフレームとに対し、前記損失ブロックに隣接したピクセル間の時間的差値ｃｏｓｔ_１を算出する段階と、損失された動画像ブロックに対する周辺ブロックのモーションベクトル分散値ｃｏｓｔ_２を算出する段階と、前記隣接ピクセル間の時間的差値ｃｏｓｔ_１及びモーションベクトル分散値ｃｏｓｔ_２を既設定された臨界値と比較する段階と、比較結果によって前記損失ブロックの特性を決定する段階と、を有することを他の特徴とする。

上記目的を達成するために、本発明は、例えば、以下の手段を提供する。

項目．１
伝送された動画像ブロック中に損失ブロックが存在するかを判断する損失ブロック検出部と、
前記損失ブロックが発生した現在のフレームと以前のフレームとで、隣接ピクセル間の時間的差値（ｃｏｓｔ_１）を算出するピクセル差算出部と、
前記損失ブロックに対する周辺ブロックのモーションベクトル分散値（ｃｏｓｔ_２）を算出する分散値算出部と、
前記時間的差値（ｃｏｓｔ_１）及びモーションベクトル分散値（ｃｏｓｔ_２）を既設定された臨界値と比較して損失ブロックの特性を判断するブロック特性決定部と、
から構成されることを特徴とする画像処理システムの損失ブロック特性判断装置。

項目．２
前記損失ブロックは、１６×１６ピクセルのマクロブロックであることを特徴とする請求項１に記載の画像処理システムの損失ブロック特性判断装置。

項目．３
前記ピクセル差算出部は、下記式により隣接ピクセル間の時間的差値（ｃｏｓｔ_１）を算出することを特徴とする請求項１に記載の画像処理システムの損失ブロック特性判断装置。

項目．４
前記分散値算出部は、下記式によりモーションベクトル分散値（ｃｏｓｔ_２）を算出することを特徴とする請求項１に記載の画像処理システムの損失ブロック特性判断装置。

項目．５
通信網を通して伝送される動画像信号を受信して画像処理する過程において、
損失された動画像ブロックに対する費用関数を算出する段階と、
前記費用関数を既設定された臨界値と比較して損失ブロックの特性を判断する段階と、
を有することを特徴とする画像処理システムの損失ブロック特性判断方法。

項目．６
前記費用関数を算出する段階は、
現在のフレームと以前のフレームとに対し、前記損失ブロックに隣接したピクセル間の時間的差値（ｃｏｓｔ_１）を算出する段階と、
損失された動画像ブロックに対する周辺ブロックのモーションベクトル分散値（ｃｏｓｔ_２）を算出する段階と、
を含むことを特徴とする請求項５に記載の画像処理システムの損失ブロック特性判断方法。

項目．７
前記損失ブロックは、１６×１６ピクセルのマクロブロックであることを特徴とする請求項５に記載の画像処理システムの損失ブロック特性判断方法。

項目．８
前記隣接したピクセル間の時間的差値（ｃｏｓｔ_１）は、下記式により計算されることを特徴とする請求項６に記載の画像処理システムの損失ブロック特性判断方法。

項目．９
前記モーションベクトル分散値（ｃｏｓｔ_２）は、下記式により算出されることを特徴とする請求項６に記載の画像処理システムの損失ブロック特性判断方法。

項目．１０
前記損失ブロックの特性を判断する段階は、
隣接ピクセル間の時間的差値（ｃｏｓｔ_１）及びモーションベクトル分散値（ｃｏｓｔ_２）が第１臨界値（Ｔ１）以下であると、停止（ｎｏ ｍｏｖｅｍｅｎｔ）ブロックと判断する段階と、
隣接ピクセル間の時間的差値（ｃｏｓｔ_１）が第２臨界値（Ｔ２）以上で、モーションベクトル分散値（ｃｏｓｔ_２）が第３臨界値（Ｔ３）以下であると、カメラ移動（ｃａｍｅｒａ ｍｏｖｉｎｇ）ブロックと判断する段階と、
隣接ピクセル間の時間的差値（ｃｏｓｔ_１）が第４臨界値（Ｔ４）以上であると、場面転換（ｓｃｅｎｅ ｃｈａｎｇｅ）ブロックと判断する段階と、
隣接ピクセル間の時間的差値（ｃｏｓｔ_１）が第２臨界値（Ｔ２）以上で、モーションベクトル分散値（ｃｏｓｔ_２）が第５臨界値（Ｔ５）以上であると、対象移動（ｏｂｊｅｃｔ ｍｏｖｉｎｇ）ブロックと判断する段階と、
を含むことを特徴とする請求項５に記載の画像処理システムの損失ブロック特性判断方法。（Ｔ１＜Ｔ２＜Ｔ３＜Ｔ４＜Ｔ５）
項目．１１
伝送された動画像ブロックで損失ブロックの存在有無を確認する段階と、
現在のフレームと以前のフレームとに対し、前記損失ブロックに隣接したピクセル間の時間的差値（ｃｏｓｔ_１）を算出する段階と、
損失された動画像ブロックに対する周辺ブロックのモーションベクトル分散値（ｃｏｓｔ_２）を算出する段階と、
前記隣接ピクセル間の時間的差値（ｃｏｓｔ_１）及びモーションベクトル分散値（ｃｏｓｔ_２）を既設定された臨界値と比較する段階と、
比較結果によって前記損失ブロックの特性を決定する段階と、
を有することを特徴とする画像処理システムの損失ブロック特性判断方法。

項目．１２
前記決定された損失ブロックの特性を参照して該当の損失ブロックを復旧する段階をさらに有することを特徴とする請求項１１に記載の画像処理システムの損失ブロック特性判断方法。

項目．１３
前記損失ブロックは、１６×１６ピクセルのマクロブロックであることを特徴とする請求項１１に記載の画像処理システムの損失ブロック特性判断方法。

項目．１４
前記隣接したピクセル間の時間的差値（ｃｏｓｔ_１）は、下記式により計算されることを特徴とする請求項１１に記載の画像処理システムの損失ブロック特性判断方法。

項目．１５
前記モーションベクトル分散値（ｃｏｓｔ_２）は、下記式により算出されることを特徴とする請求項１１に記載の画像処理システムの損失ブロック特性判断方法。

項目．１６
前記損失ブロックの特性を決定する段階は、
隣接ピクセル間の時間的差値（ｃｏｓｔ_１）及びモーションベクトル分散値（ｃｏｓｔ_２）が第１臨界値（Ｔ１）以下であると、停止ブロックと判断する段階と、
隣接ピクセル間の時間的差値（ｃｏｓｔ_１）が第２臨界値（Ｔ２）以上で、モーションベクトル分散値（ｃｏｓｔ_２）が第３臨界値（Ｔ３）以下であると、カメラ移動ブロックと判断する段階と、
隣接ピクセル間の時間的差値（ｃｏｓｔ_１）が第４臨界値（Ｔ４）以上であると、場面転換ブロックと判断する段階と、
隣接ピクセル間の時間的差値（ｃｏｓｔ_１）が第２臨界値（Ｔ２）以上で、モーションベクトル分散値（ｃｏｓｔ_２）が第５臨界値（Ｔ５）以上であると、対象移動ブロックと判断する段階と、
を含むことを特徴とする請求項１１に記載の画像処理システムの損失ブロック特性判断方法。（Ｔ１＜Ｔ２＜Ｔ３＜Ｔ４＜Ｔ５）

本発明に係る画像処理システムの損失ブロック特性判断装置及びその方法においては、チャネルエラーが頻繁な通信網で損失されたブロックの画面特性を自動に判断して、損失されたブロックを復旧するための情報として活用することで、より元の画像に近い復元画像を再生し得るという効果がある。

また、損失されたブロックに関する情報を自動に判断することで、該当情報を前記損失ブロックの情報を必要とする画像処理過程に適用し得るという効果がある。

以下、本発明に係る画像処理システムの損失ブロック特性判断装置及びその方法を実施するための最良の形態について図面を参照して説明する。

図１は、本発明に係る画像処理システムの損失ブロック特性判断装置の構成を示すブロック図で、図に示すように、送信側から伝送された動画像ブロック中に損失されたブロックが存在するかを判断する損失ブロック検出部１０と、該損失ブロック検出部１０により損失ブロックが検出されると、現在のフレームと以前のフレームとで、隣接ピクセル間の時間的差値ｃｏｓｔ_１を算出するピクセル差算出部２０と、前記損失ブロック検出部１０により損失ブロックが検出されると、該損失ブロックに対する周辺ブロックのモーションベクトル分散値ｃｏｓｔ_２を算出する分散値算出部３０と、前記時間的差値ｃｏｓｔ_１及びモーションベクトル分散値ｃｏｓｔ_２を既設定された臨界値と比較して損失ブロックの特性を判断するブロック特性決定部４０と、から構成されている。

前記ブロック特性決定部４０により判断された損失ブロックの特性を参照して、該当の損失ブロックに適合したエラー隠匿技法により動画像を復元することができる。

図２は、本発明に係る画像処理システムの損失ブロック特性判断方法を示すフローチャートで、以下、画像処理システムの損失ブロック特性判断装置の動作について図を参照して説明する。

まず、送信側（図示せず）から画像フレームが伝送されると（ステップＳ１１）、前記損失ブロック検出部１０は、画像フレームに損失ブロックが存在するかを判断する（ステップＳ１２）。

ここで、前記画像フレームから損失ブロックが検出されると、現在の画像フレームで損失ブロックの周囲に隣接するピクセルと、以前の画像フレームで同一位置に存在するピクセル間の時間的差値ｃｏｓｔ_１を算出する（ステップＳ１３）。

そして、前記損失ブロックが検出された画像フレームから損失ブロックに対する周辺ブロックのモーションベクトル分散値ｃｏｓｔ_２を算出し（ステップＳ１４）、前記ピクセル間の時間的差値ｃｏｓｔ_１及びモーションベクトル分散値ｃｏｓｔ_２を既設定された臨界値と比較する（ステップＳ１５）。

その後、前記算出値ｃｏｓｔ_１、ｃｏｓｔ_２と臨界値との比較を通して前記損失ブロックの特性を決定し（ステップＳ１６）、該損失ブロックの特性を参照して該当の損失ブロックを復旧する（ステップＳ１７）。

前述したように、本発明においては、損失ブロックの特性を把握するために、隣接ピクセル間の時間的差（ｔｅｍｐｏｒａｌ ｄｉｆｆｅｒｅｎｃｅ）及びモーションベクトルを使用する。

以下、本発明により隣接ピクセル間の時間的差値ｃｏｓｔ_１及びモーションベクトル分散値ｃｏｓｔ_２を算出する方法について、図３〜図１５を参照して詳しく説明する。

本発明の実施例においては、前記損失ブロックの特性を、大きく「場面転換（ｓｃｅｎｅ ｃｈａｎｇｅ）」、「対象移動（ｏｂｊｅｃｔ ｍｏｖｉｎｇ）」、「停止（ｎｏ ｍｏｖｅｍｅｎｔ）」、「カメラ移動（ｃａｍｅｒａ ｍｏｖｉｎｇ）」及び「その他（ｏｔｈｅｒｗｉｓｅ）」に分類することができる。

前記「場面転換」は、画面（フレーム）間の場面転換が行われたブロックで、前記「対象移動」は、一定の方向性なしに動く対象のあるブロックで、前記「停止」は、停止したカメラ画像の背景のように殆ど動きのないブロックで、前記「カメラ移動」は、カメラ自体が動いて画像が全体的に同じような動きを有するブロックで、前記「その他」は、以上の四つの分類に属しないブロックをいう。

まず、前記損失ブロックの隣接ピクセル間の時間的差を利用して費用関数ｃｏｓｔ_１を算出する過程を説明する。

図３は、損失されたブロックの周囲に隣接するピクセルと、以前のフレームの同一位置に存在するピクセルとの時間的差を示すもので、斜線部分は、現在のフレームの損失ブロック及び以前のフレームで同一位置にあるブロックの隣接ピクセルをそれぞれ示すものである。

一般に、１６×１６サイズのマクロブロックは、周囲に６４（１６×４）個の隣接ピクセルが存在するが、前記以前のフレームとの時間的差が所定の臨界値を超える隣接ピクセルの数を費用関数として定義する。

前記費用関数ｃｏｓｔ_１は、式１及び式２で示すことができる。

前記費用関数ｃｏｓｔ_１の値が小さい場合は、前記損失ブロックが以前のフレームの同一位置にあるブロックから大きく変化していないことを意味する。即ち、前記損失ブロックの動きが大きくないことを意味する。しかしながら、前記費用関数ｃｏｓｔ_１の値が大きい場合、即ち、以前のフレームとの時間的差が大きい場合は、前記損失ブロックの動きが大きいか、または場面転換が行われたと仮定することができる。

従って、前記費用関数ｃｏｓｔ_１の値は、所定の臨界値との比較を通して前記損失ブロックの性質を決定する根拠となる。即ち、前記費用関数ｃｏｓｔ_１が臨界値よりも小さいと、現在のフレームと以前のフレームとの差が大きくなく、動きが小さいと判断し、前記費用関数ｃｏｓｔ_１が臨界値以上であると、動きが大きいか、または場面転換が行われたと判断する。

以下、前記損失ブロックに対する周辺ブロックのモーションベクトルを利用して、費用関数ｃｏｓｔ_２を算出する過程を説明する。

図４は、損失ブロック及びその周辺ブロックのモーションベクトルを示す例示図で、前記損失ブロックの動きは、周辺ブロックの動きと密接な相関性を有するため、周辺ブロックのモーションベクトルを利用して前記損失ブロックの特性を判断することができる。

即ち、前記周辺ブロックのモーションベクトルの大きさが殆ど一定であると、全体的に各ブロックの動き方向が一定で、且つ、前記損失ブロックも同一方向の動きを有すると判断することができる。しかしながら、前記周辺ブロックのモーションベクトルの大きさが一定でないと、前記損失ブロックの動きを予測することは難しい。

従って、前記周辺ブロックのモーションベクトルの分散を利用して、費用関数ｃｏｓｔ_２を式３及び式４で示すことができる。

前記費用関数ｃｏｓｔ_２の値が小さい場合は、周囲の７個のモーションベクトル

が同じような値を有することを意味し、前記費用関数ｃｏｓｔ_２の値が大きい場合は、モーションベクトルが広く分布して周辺ブロックの動きが一定でないことを意味する。

従って、前記費用関数ｃｏｓｔ_２の値と所定の臨界値との比較を通して、前記損失ブロックの特性を判断することができる。

前記臨界値は、実験を通して最適の値を求めるが、前記臨界値を求めるためには、四つのブロックの特性及び費用関数との関係を把握する。

図５の（Ａ）及び（Ｂ）は、「場面転換」特性を有するブロックの費用関数の分布図で、図６は、各費用関数間の相関性を示すグラフである。

図５（Ａ）は、隣接ピクセル間の時間的差値による費用関数ｃｏｓｔ_１の分布を示すグラフで、費用関数ｃｏｓｔ_１の大部分が６０を超える。

図５（Ｂ）は、前記損失ブロックに隣接したモーションベクトルの分散値である費用関数ｃｏｓｔ_２の分布を示すグラフで、特定の値に偏重されることなく全体的に均一な分布を有する。

図６から分かるように、前記「場面転換」特性のブロックは、隣接ピクセル間の時間的差値による費用関数ｃｏｓｔ_１に依存する。

表１は、時間的差値による費用関数ｃｏｓｔ_１及び分散値による費用関数ｃｏｓｔ_２の平均値及び標準偏差を示すもので、時間的差値による費用関数ｃｏｓｔ_１は、小さい標準偏差を示して平均である６１．５３付近に偏重され、分散値による費用関数ｃｏｓｔ_２は、大きい標準偏差を有することで均一な分布を示す。

従って、前記損失ブロックを「場面転換」特性を有するブロックと判断する基準は、前記隣接したピクセル間の時間的差値による費用関数ｃｏｓｔ_１のみを使用し、該当臨界値が６０であることで決める。即ち、前記「場面転換」特性を有するブロックの判断は式５を利用する。

図７の（Ａ）及び（Ｂ）は、「カメラ移動」特性を有するブロックの費用関数の分布図で、図８は、各費用関数間の相関性を示すグラフである。

図７（Ａ）に示された隣接ピクセル間の時間的差値による費用関数ｃｏｓｔ_１は、前記「場面転換」特性を有するブロックよりは広く分布するが、大部分３０以上の値を有し、図７（Ｂ）に示された分散値による費用関数ｃｏｓｔ_２は、大部分５０以下の値を有する。

前記「カメラ移動」特性を有するブロックの場合は、フレーム全体の動きが一定であるため、周辺ブロックのモーションベクトルが殆ど同じような値を有し、前記の費用関数ｃｏｓｔ_２を有する。

図８に示された両費用関数ｃｏｓｔ_１、ｃｏｓｔ_２の相関図をみると、前記時間的差値による費用関数ｃｏｓｔ_１は、大きい値にデータが偏重され、前記分散値による費用関数ｃｏｓｔ_２は、小さい値にデータが偏重されていることがわかる。

前記「カメラ移動」特性を有するブロックに対する判断は式６を利用する。

図９の（Ａ）及び（Ｂ）は、「対象移動」特性を有するブロックの費用関数の分布図で、図１０は、各費用関数間の相関性を示すグラフである。

両費用関数ｃｏｓｔ_１、ｃｏｓｔ_２の分布は、全体的に広く広がっている。前記時間的差値による費用関数ｃｏｓｔ_１は、３０以上の大きい値を有し、前記分散値による費用関数ｃｏｓｔ_２は、１００付近に多くのデータが分布している。図から分かるように、特定の値に偏重されることはないが、動く物体の特性上、モーションベクトルの分布が大きいことで予想される。

図１０から分かるように、両費用関数ｃｏｓｔ_１、ｃｏｓｔ_２は、大部分大きい値にデータが偏重されている。

従って、前記「対象移動」特性を有するブロックの判断基準は式７のようである。

図１１の（Ａ）及び（Ｂ）は、「停止」特性を有するブロックの費用関数の分布図で、図１２は、各費用関数間の相関性を示すグラフである。

両費用関数ｃｏｓｔ_１、ｃｏｓｔ_２の分布は、全体的に小さい値に偏重されて広がっている。前記時間的差値による費用関数ｃｏｓｔ_１は、２５以下に大部分が含まれるが、これは、現在のフレームと以前のフレームとの差が殆どないことを意味する。且つ、前記分散値による費用関数ｃｏｓｔ_２も、２５以下付近に多くのデータが偏重されている。

図１２において、前記両費用関数ｃｏｓｔ_１、ｃｏｓｔ_２は、両方とも小さい値を有しているが、前記「停止」特性を有するブロックの判断基準は式８のようである。

表２は、このような過程を通して算出されたブロックの特性判断基準を示すもので、前記損失ブロックの特性は、各費用関数の値が該当費用関数の値の範囲と一致するかを判断して決定する。

即ち、前記損失ブロックに隣接したピクセル間の時間的差値による費用関数ｃｏｓｔ_１が６１で、分散値による費用関数ｃｏｓｔ_２が５０であると、該当の損失ブロックは、「場面転換」特性を有するマクロブロックと判断し、前記隣接したピクセル間の時間的差値による費用関数ｃｏｓｔ_１が２０で、分散値による費用関数ｃｏｓｔ_２が１５であると、前記損失ブロックは、「停止」特性を有するマクロブロックと判断する。且つ、前記時間的差値による費用関数ｃｏｓｔ_１が２０で、前記分散値による費用関数ｃｏｓｔ_２が３０であると、前記損失ブロックは、「その他」特性を有するマクロブロックと判断する。

また、前記損失ブロックに隣接したピクセル間の時間的差値による費用関数ｃｏｓｔ_１が４０で、分散値による費用関数ｃｏｓｔ_２が２０であると、該当の損失ブロックは、「カメラ移動」特性を有するマクロブロックと判断し、前記時間的差値による費用関数ｃｏｓｔ_１が４０で、前記分散値による費用関数ｃｏｓｔ_２が１８０であると、該当の損失ブロックは、「対象移動」特性を有するマクロブロックと判断する。

図１３は、前記表２で定義した各ブロックの特性別分布を示すもので、動きが小さいか、または現在のフレームと以前のフレームとの差が小さいブロックは左側下方に分布し、逆に、動きが大きいか、または画面間の時間的差が大きいブロックは右側上方に分布することが分かる。

以上のように、本発明の好ましい実施形態を用いて本発明を例示してきたが、本発明は、この実施形態に限定して解釈されるべきものではない。本発明は、特許請求の範囲によってのみその範囲が解釈されるべきであることが理解される。当業者は、本発明の具体的な好ましい実施形態の記載から、本発明の記載および技術常識に基づいて等価な範囲を実施することができることが理解される。

受信側で伝送時に損失された動画像ブロックの特性を自動に判断して、損失ブロックを復旧するための情報として提供し得る画像処理システムの損失ブロック特性判断装置及びその方法を提供する。

本発明に係る画像処理システムの損失ブロック特性判断方法は、伝送された動画像ブロックで損失ブロックの存在有無を確認する段階と、現在のフレームと以前のフレームとに対し、前記損失ブロックに隣接したピクセル間の時間的差値（ｃｏｓｔ_１）を算出する段階と、損失された動画像ブロックに対する周辺ブロックのモーションベクトル分散値（ｃｏｓｔ_２）を算出する段階と、前記隣接ピクセル間の時間的差値（ｃｏｓｔ_１）及びモーションベクトル分散値（ｃｏｓｔ_２）を既設定された臨界値と比較する段階と、比較結果によって前記損失ブロックの特性を決定する段階とを有する。

本発明に係る画像処理システムの損失ブロック特性判断装置の構成を示すブロック図である。 本発明に係る画像処理システムの損失ブロック特性判断方法を示すフローチャートである。 現在のフレームと以前のフレーム間のピクセルの時間的差を示す例示図である。 損失ブロック及びその周辺ブロックのモーションベクトルを示す例示図である。 （Ａ）及び（Ｂ）は、「場面転換」特性を有するブロックの費用関数の分布図である。 図５の（Ａ）及び（Ｂ）の費用関数間の相関性を示すグラフである。 （Ａ）及び（Ｂ）は、「カメラ移動」特性を有するブロックの費用関数の分布図である。 図７の（Ａ）及び（Ｂ）の費用関数間の相関性を示すグラフである。 （Ａ）及び（Ｂ）は、「対象移動」特性を有するブロックの費用関数の分布図である。 図９の（Ａ）及び（Ｂ）の費用関数間の相関性を示すグラフである。 （Ａ）及び（Ｂ）は、「停止」特性を有するブロックの費用関数の分布図である。 図１１の（Ａ）及び（Ｂ）の費用関数間の相関性を示すグラフである。 本発明により定義された各ブロックの特性別分布を示す分布図である。

Claims (8)

1. 伝送された動画像ブロック中に損失ブロックが存在するかを判断する損失ブロック検出部と、
   前記損失ブロックが発生した現在のフレームと以前のフレームとで、隣接ピクセル間の時間的差値（ｃｏｓｔ _１ ）を算出するピクセル差算出部と、
   前記損失ブロックに対する周辺ブロックのモーションベクトル分散値（ｃｏｓｔ _２ ）を算出する分散値算出部と、
   前記時間的差値（ｃｏｓｔ _１ ）及びモーションベクトル分散値（ｃｏｓｔ _２ ）を既設定された臨界値と比較して損失ブロックの特性を判断するブロック特性決定部と、
   を含み、
   前記ピクセル差算出部は、下記式により隣接ピクセル間の時間的差値（ｃｏｓｔ_１）を算出する、画像処理システムの損失ブロック特性判断装置，
   
2. 伝送された動画像ブロック中に損失ブロックが存在するかを判断する損失ブロック検出部と、
   前記損失ブロックが発生した現在のフレームと以前のフレームとで、隣接ピクセル間の時間的差値（ｃｏｓｔ _１ ）を算出するピクセル差算出部と、
   前記損失ブロックに対する周辺ブロックのモーションベクトル分散値（ｃｏｓｔ _２ ）を算出する分散値算出部と、
   前記時間的差値（ｃｏｓｔ _１ ）及びモーションベクトル分散値（ｃｏｓｔ _２ ）を既設定された臨界値と比較して損失ブロックの特性を判断するブロック特性決定部と、
   を含み、
   前記分散値算出部は、下記式により前記損失ブロックに対する周辺ブロックのモーションベクトル分散値（ｃｏｓｔ_２）を算出する、画像処理システムの損失ブロック特性判断装置，
   
3. 前記損失ブロックは、１６×１６ピクセルのマクロブロックである、請求項１または２に記載の画像処理システムの損失ブロック特性判断装置。
4. 伝送された動画像ブロックで損失ブロックの存在有無を確認する段階と、
   現在のフレームと以前のフレームとに対し、前記損失ブロックに隣接したピクセル間の時間的差値（ｃｏｓｔ _１ ）を算出する段階と、
   損失された動画像ブロックに対する周辺ブロックのモーションベクトル分散値（ｃｏｓｔ _２ ）を算出する段階と、
   前記時間的差値（ｃｏｓｔ _１ ）及びモーションベクトル分散値（ｃｏｓｔ _２ ）を既設定された臨界値と比較する段階と、
   比較結果によって前記損失ブロックの特性を決定する段階と、
   を含み、
   前記隣接したピクセル間の時間的差値（ｃｏｓｔ_１）は、下記式により計算される、画像処理システムの損失ブロック特性判断方法，
   
5. 伝送された動画像ブロックで損失ブロックの存在有無を確認する段階と、
   現在のフレームと以前のフレームとに対し、前記損失ブロックに隣接したピクセル間の時間的差値（ｃｏｓｔ _１ ）を算出する段階と、
   損失された動画像ブロックに対する周辺ブロックのモーションベクトル分散値（ｃｏｓｔ _２ ）を算出する段階と、
   前記時間的差値（ｃｏｓｔ _１ ）及びモーションベクトル分散値（ｃｏｓｔ _２ ）を既設定された臨界値と比較する段階と、
   比較結果によって前記損失ブロックの特性を決定する段階と、
   を含み、
   前記モーションベクトル分散値（ｃｏｓｔ_２）は、下記式により算出される、画像処理システムの損失ブロック特性判断方法，
   
6. 前記損失ブロックの特性を参照して該当の損失ブロックを復旧する段階をさらに含む、請求項４または５に記載の画像処理システムの損失ブロック特性判断方法。
7. 前記損失ブロックは、１６×１６ピクセルのマクロブロックである、請求項４〜６のいずれか１項に記載の画像処理システムの損失ブロック特性判断方法。
8. 前記損失ブロックの特性を決定する段階は、
   前記ｃｏｓｔ _１ 及び前記ｃｏｓｔ _２ が第１臨界値（Ｔ１）以下であると、前記損失ブロックを停止ブロックと判断する段階と、
   前記ｃｏｓｔ _１ が第２臨界値（Ｔ２）以上で、前記ｃｏｓｔ _２ が第３臨界値（Ｔ３）以下であると、前記損失ブロックをカメラ移動ブロックと判断する段階と、
   前記ｃｏｓｔ _１ が第４臨界値（Ｔ４）以上であると、前記損失ブロックを場面転換ブロックと判断する段階と、
   前記ｃｏｓｔ _１ が前記第２臨界値（Ｔ２）以上で、前記ｃｏｓｔ _２ が第５臨界値（Ｔ５）以上であると、前記損失ブロックを対象移動ブロックと判断する段階と、
   を含む、請求項４〜７のいずれか１項に記載の画像処理システムの損失ブロック特性判断方法，（Ｔ１＜Ｔ２＜Ｔ３＜Ｔ４＜Ｔ５）。