JP4462551B2 - 移動通信システムの画像ブロックエラー隠匿装置及びその方法 - Google Patents

Description

本発明は、マルチメディアサービスを提供する移動通信システムに係るもので、詳しくは、移動通信システムの画像ブロックエラー隠匿装置及びその方法に関するものである。

現在、移動通信は、新しい主要通信メディアとして世界的に需要が急増している。移動通信の発展は、確実に“通信の個人化”を加速させ、全ての使用者にサービスの携帯性を提供し得る個人移動通信社会を実現する。更に、通信の個人化は、音声通信の領域だけでなく、データ及び画像情報をも統合的に取扱うマルチメディア無線アクセス携帯端末機の需要を加速させている。

従って、移動通信端末機を通して映画、音楽、アニメーション及びゲームなどのマルチメディアコンテンツの伝送が可能になり、移動通信システムは、マルチメディアサービスを提供するようになってきている。

図７は従来の移動通信システムの画像復号装置を示したブロック図である。図に示すように、従来の移動通信システムの画像復号装置は、画像フレームをデコーディングするビデオコーデックデコーダ１０と、デコーディングされた画像フレームをディスプレイフォーマットに変換するディスプレイインターフェース部２０と、ディスプレイインターフェース部２０から出力される画像フレームをディスプレイするディスプレイ部３０とを有して構成されている。

以下、従来の移動通信システムの画像復号装置の動作を説明すると、ビデオコーデックデコーダ１０は画像フレームをデコーディングし、ディスプレイインターフェース部２０はデコーディングされた画像フレームをディスプレイフォーマットに変換し、ディスプレイ部３０は変換された画像フレームをディスプレイすることで、移動通信端末機のＬＣＤに画像がディスプレイされる（例えば、特許文献１、２、３、４参照）。

韓国特許第０３４９０５８号明細書 韓国特許第０３５７０９３号明細書 特開２０００−０４１２５２号公報 米国特許第６０７８６１６号明細書

しかしながら、従来の移動通信システムの画像復号装置においては、マルチメディアをサービスするとき、画像フレームのブロックエラーが発生すると、画質の劣化が発生することで、小さなブロックエラーによっても使用者の視覚に敏感に反応するため、サービスの品質の信頼性を弱化させるという問題点があった。

つまり、移動通信システムに容易に適用されるように、エラー補正演算処理量を減少することで、実時間に処理し、且つ画質を改善し得る画像フレームのブロックエラー補正方法が要求されている。

そこで、本発明は上記従来の移動通信システムの画像ブロックエラー隠匿装置及びその方法における問題点に鑑みてなされたものであって、本発明の目的は、移動通信システムの画像フレームのエラーを隠匿するとき、演算処理量を減少することで、実時間に処理し得る移動通信システムの画像ブロックエラー隠匿装置及びその方法を提供することにある。

又、本発明の他の目的は、動き推定及び動き補償を利用することで、エラー隠匿次元を越えて画像フレームのブロックエラーを補正し、エラー補正された値と垂直方向に隣接する各値との差値によって可変的に適応加重和フィルタリングを行い、自然なイメージに作ることで、画質を改善し得る移動通信システムの画像ブロックエラー隠匿装置及びその方法を提供することにある。

上記目的を達成するためになされた本発明による移動通信システムの画像ブロックエラー隠匿装置は、エラーの発生した画素を、高速動き推定方法により以前及び次のフレームを検索することでエラー補正するエラー隠匿（ｃｏｎｃｅａｌｉｎｇ）部と、前記エラー隠匿部によりエラー補正された画素と垂直方向に隣接した各画素の平均値との差を計算し、前記差が前記平均値より小さくて人間の目に敏感に作用する差がある場合は、前記エラー補正された画素と前記垂直方向に隣接した画素に異なる加重値を乗算し、前記差が前記平均値より小さくなくて人間の目に敏感に作用する差がない場合は、前記エラー補正された画素と前記垂直方向に隣接した画素に同じ加重値を乗算する適応加重和フィルタリング（ａｄａｐｔｉｖｅ ｗｅｉｇｈｔ ｓｕｍ ｆｉｌｔｅｒｉｎｇ）を実行することで、前記エラー補正された画素を再補正するエラー再補正部とを有して構成され、前記エラー隠匿部は、以前のフレームを格納するための第１フレーム遅延部と、次のフレームを格納するための第２フレーム遅延部と、前記第１フレーム遅延部及び第２フレーム遅延部に対する高速動き推定を行って、エラー補正に利用される画素の動きベクトルを生成する動き推定部と、前記動きベクトルにより動き補償された画素を利用して、前記エラーの発生した画素を復元する画素復元部と、前記画素復元部で復元された画素又はバイパス路により伝送された正常な画素を前記エラー再補正部にスイッチングする第１ソフトスイッチとを有して構成され、前記動き推定部は、前記以前のフレームに対して先に動き推定を行い、前記以前のフレームからエラー補正に利用される画素が検索されない場合、前記次のフレームに対して動き推定を行うことを特徴とする。

上記目的を達成するためになされた本発明による移動通信システムの画像ブロックエラー隠匿方法は、デコーディングされたフレームからエラーの発生した画素を検出する段階と、エラーの発生した画素が検出された場合、以前及び次のフレームを高速動き推定することでエラー補正に利用される画素の動きベクトルを生成する段階と、前記動きベクトルにより動き補償された画素を利用して、前記エラーの発生した画素を復元する段階と、
前記エラーの発生した画素を復元する段階で復元された画素と垂直方向に隣接した各画素の平均値との差を計算し、前記差が前記平均値より小さくて人間の目に敏感に作用する差がある場合は、前記復元された画素と前記垂直方向に隣接した画素に異なる加重値を乗算し、前記差が前記平均値より小さくなくて人間の目に敏感に作用する差がない場合は、前記復元された画素と前記垂直方向に隣接した画素に同じ加重値を乗算する適応加重和フィルタリングを行うことで、前記復元された画素を再補正する段階とを有し、前記高速動き推定は、前記以前のフレームに対して先に行われ、前記以前のフレームからエラー補正に利用される画素が検索されない場合、前記次のフレームに対して行われることを特徴とする。

本発明に係る移動通信システムの画像ブロックエラー隠匿装置及びその方法によれば、エラーの発生した画素を、動き推定及び動き補償を利用してエラー補正するとき、以前及び次のフレームを同時に検索せずに以前のフレームを検索し、以前のフレームから所望の画素を探し得なかった場合、次のフレームを検索し、且つ、全体検索（ｆｕｌｌ ｓｅａｒｃｈｉｎｇ）方法でなく、３−ステップ又は５−ステップ動き推定方法により検索することで、演算処理量を減少して実時間に処理し得るという効果がある。

又、動き推定及び動き補償を利用することで、画素のエラーの隠匿次元を越えて補正し得るという効果がある。
又、エラー補正された画素の値と、垂直方向に隣接する各画素値間の差値によって可変的に適応加重和フィルタリングを行って、前記エラー補正された画素を再補正することで、元の画像に近い自然な画像を復元し得るという効果がある。

次に、本発明に係る移動通信システムの画像ブロックエラー隠匿装置及びその方法を実施するための最良の形態の具体例を図面を参照しながら説明する。

図１は本発明に係る移動通信システムの画像ブロックエラー隠匿装置を示したブロック図である。
図に示すように、本発明に係る移動通信システムの画像ブロックエラー隠匿装置は、画像フレームをデコーディングするビデオコーデックデコーダ１０と、デコーディングされた画像フレームからエラーの発生した画素を検出するエラー検出部１００と、検出された画素にエラーがあるか否かを再確認するエラー確認部１１０と、確認情報によって、エラー確認部１１０から出力される画素をエラー補正経路及びバイパス経路中何れか一方に出力する第１ソフトスイッチ１２０と、エラー補正経路１２４を通して伝送される画素を、以前及び次のフレームの順次検索により、動き推定及び動き補正を利用してエラー補正し、バイパス経路１２２を通して伝送される画素及びエラー補正された画素にフレームを復元するエラー隠匿部１３０と、エラー補正された画素と垂直方向に隣接した画素間の差値によって可変的に適応加重和フィルタリングを行って、自然なイメージを作るエラー再補正部１４０と、エラー再補正部１４０から出力される画像フレームをディスプレイフォーマットに変換するディスプレイインターフェース部２０と、変換された画像フレームをディスプレイするディスプレイ部３０とを含んで構成されている。

又、エラー隠匿部１３０は、以前のフレームを格納するための第１フレーム遅延部１３１と、次のフレームを格納するための第２フレーム遅延部１３２と、それら第１フレーム遅延部１３１及び第２フレーム遅延部１３２に対する動き推定を順次行って、エラー補正に利用される画素の動きベクトルを生成する動き推定部１３３と、動きベクトルにより動き補償された画素を利用して、エラーの発生した画素を復元する画素復元部１３４と、画素復元部１３４で復元された画素及びバイパス経路１２２を通して伝送される画素を利用してフレームを復元する第２ソフトスイッチ１３５とから構成される。

以下、上記のように構成された本発明に係る移動通信システムの画像ブロックエラー隠匿装置の動作を図１、図２、及び図３を参照して説明する。

図２は、本発明に係る移動通信システムの画像ブロックエラー隠匿方法を示したフローチャートである。
図に示すように、本発明に係る移動通信システムの画像ブロックエラー隠匿方法は、デコーディングされた画像フレームからエラーの発生した画素を検出し（ステップＳ１０）、検出された画素にエラーがあるか否かを再確認し（ステップＳ２０）、エラーの発生した画素である場合、以前及び次のフレームを順次３−ステップ動き推定することで動きベクトルを生成し（ステップＳ３０）、動き補償された画素を利用して、エラーの発生した画素を復元し（ステップＳ４０）、復元された画素と、垂直方向に隣接した各画素の平均値との差値によって、適応加重和フィルタリングを行う（ステップＳ５０）。

例えば、移動通信端末機の画像フレームのブロックエラー隠匿方法を説明すると、まず、移動通信端末機のエラー検出部１００は、ビデオコーデックデコーダ１０からデコーディングされた画像フレーム中、エラーの発生した画素を検出する。ここで、エラーの発生した画素を復元する場合を説明すると、エラーの発生した画素は“２５５”の値を有して黒色にディスプレイされ、エラー検出部１００は“２５５”の値を有する画素を検出する（ステップＳ１０）。

次いで、エラー確認部１１０は、検出された画素が実際にエラーの発生された画素であるか否かを確認する（ステップＳ２０）。

図３は、検出された画素のエラー再確認方法を示したフローチャートで、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））に隣接した各画素の平均値（Ｐｓ（ｘ，ｙ））を以下の式のように計算する（ステップＳ２１）。

（数４）
Ｐｓ（ｘ，ｙ）＝［｛Ｐ（ｘ−１，ｙ−１）＋Ｐ（ｘ，ｙ−１）＋Ｐ（ｘ＋１，ｙ−１）｝／３＋｛Ｐ（ｘ−１，ｙ）＋Ｐ（ｘ＋１，ｙ）｝／２＋｛Ｐ（ｘ−１，ｙ＋１）＋Ｐ（ｘ，ｙ＋１）＋Ｐ（ｘ＋１，ｙ＋１）｝／３］／３

その後、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））と平均値（Ｐｓ（ｘ，ｙ））との差値の絶対値（ａｂｓ［Ｐ（ｘ，ｙ）−Ｐｓ（ｘ，ｙ）］）を計算し、正常な画素であると判断するためのしきい値と絶対値（ａｂｓ［Ｐ（ｘ，ｙ）−Ｐｓ（ｘ，ｙ）］）とを比較する（ステップＳ２２）。

上記比較の結果、絶対値（ａｂｓ［Ｐ（ｘ，ｙ）−Ｐｓ（ｘ，ｙ）］）がしきい値より小さいと（ステップＳ２３）、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））の右側の画素（Ｐ（ｘ＋１，ｙ））の値をチェックする（ステップＳ２４）。ここで、右側の画素（Ｐ（ｘ＋１，ｙ））の値がエラー値でない場合、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））を正常な画素であると判断する（ステップＳ２５）。

しかし、ステップＳ２３で絶対値（ａｂｓ［Ｐ（ｘ，ｙ）−Ｐｓ（ｘ，ｙ）］）がしきい値より小さくないか、又は、ステップＳ２４で右側の画素（Ｐ（ｘ＋１，ｙ））の値がエラー値である場合、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））はエラーの発生した画素であると判断する（ステップＳ２６）。

次に、第１ソフトスイッチ１２０は、エラー確認部１１０の確認情報によって、エラーの発生した画素を動き推定部１３３に伝送し、正常な画素をバイパスする。このように正常な画素は、エラー補正経路を経ずにバイパスするため、本発明は、エラー補正性能（ｔｈｒｏｕｇｈｐｕｔ）を向上することができる。

エラー隠匿部１３０の動き推定部１３３は、まず、現在のフレームに対して以前のフレームが格納された第１フレーム遅延部１３１を３−ステップ動き推定により検索する。このとき、全体検索を利用すると、演算処理量が多くなるだけでなく、実時間に処理することが困難であるため、動き推定部１３３は、通常、ブロックマッチングの高速検索動き推定アルゴリズムに用いられる、３−ステップ又は５−ステップ動き推定を利用する。

図４は、動き推定方法を示した図であり、以前のフレーム（ｉ―１）から現在のフレーム（ｉ）のエラー補正されるブロックと同様なブロックが検索されると、動き推定部１３３は、検索されたブロック（又は画素）の動きベクトルを生成する。図４では、現在のフレーム（ｉ）のエラー補正されるブロックが左側画面上の左側中央に移され、検出ブロックが右下にあるので、動きベクトルは、左上から右下に向かう矢印付きベクトルで表されている。しかし、以前のフレームから同様なブロックが検索されないと、動き推定部１３３は、現在のフレーム（ｉ）に対して次のフレーム（ｉ＋１）が格納された第２フレーム遅延部１３２の検索を開始し、次のフレーム（ｉ＋１）からエラー補正されたブロックと同様なブロックを検索する。この場合においても、検出ブロックは右下部分にあるので、動きベクトルはやはり左上から右下に向かう矢印付きのベクトルとなる。このように、第１フレーム遅延部１３１及び第２フレーム遅延部１３２を同時に検索せずに、第１フレーム遅延部１３１を検索した後、所望のブロックの画素を検索し得ない場合、第２フレーム遅延部１３２を検索するため、本発明は、エラーを補正するための演算処理量及び所要時間を減少し、且つ、実時間に処理することができる（ステップＳ３０）。

次いで、動き推定部１３３により動きベクトルが生成されると、画素復元部１３４は、動きベクトルを利用して動き補償されたブロックの画素値を求め、求められた画素値を利用してエラー画素を復元する（ステップＳ４０）。
次いで、第２ソフトスイッチ１３５は、復元された画素及びバイパス経路１２２を通して伝送された正常な画素を利用してフレームを復元する。
次いで、エラー再補正部１４０は、第２ソフトスイッチ１３５から出力されるフレーム中、復元された該当の画素に対し適応加重和フィルタリングすることで、自然な画像フレームを生成する（ステップＳ５０）。

図５は、エラー再補正部１４０の適応加重和フィルタリング方法を示したフローチャートであり、エラー再補正部１４０は、エラー隠匿部１３０でエラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））の垂直方向に隣接した所定個数の画素の平均値（Ｐａｖ（ｉ，ｊ））を以下の式のように計算する。

（数５）
Ｐａｖ（ｉ，ｊ）＝｛ＳＵＭ（Ｐ（ｉ，ｊ＋ｋ）（ｆｒｏｍ ｋ＝−ｎ ｔｏ ｎ，ｅｘｃｅｐｔ ０））｝１／２ｎ

例えば、適応加重和フィルタが９タップである場合、ｎは４になる。又、平均値（Ｐａｖ（ｉ，ｊ））は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））を除いた２ｎ個の画素の平均値である。
その後、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））と平均値（Ｐａｖ（ｉ，ｊ））との差（Ｐｐｉｘｅｌ＿ｄｉｆｆ）を以下の式のように計算する（ステップＳ５１）。

（数６）
Ｐｐｉｘｅｌ＿ｄｉｆｆ＝Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ）−Ｐａｖ（ｉ，ｊ）

次いで、エラー再補正部１４０は、差（Ｐｐｉｘｅｌ＿ｄｉｆｆ）と平均値（Ｐａｖ（ｉ，ｊ））とを比較し（ステップＳ５２）、このとき、差（Ｐｐｉｘｅｌ＿ｄｉｆｆ）が平均値（Ｐａｖ（ｉ，ｊ））より小さいと、人間の目に敏感に作用する差があるので、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））の値を、以下の式のような適応加重和メディアンフィルタリングにより増加させる。

（数７）
Ｐｐｉｘｅｌ＿ｒｅｆｉｎｅ＝［｛２＾（ｎ−１）×Ｐ（ｉ，ｊ）｝＋
｛［２＾（ｎ−２）×Ｐ（ｉ，ｊ−１）］＋［２＾（ｎ−２）×Ｐ（ｉ，ｊ＋１）］｝＋
｛［２＾（ｎ−３）×Ｐ（ｉ，ｊ−２）］＋［２＾（ｎ−３）×Ｐ（ｉ，ｊ＋２）］｝＋
｛［２＾（ｎ−４）×Ｐ（ｉ，ｊ−３）］＋［２＾（ｎ−４）×Ｐ（ｉ，ｊ＋３）］｝＋
・・・（ｕｎｔｉｌ ｎ−ｋ＝−１）］×１／（２ｎ＋１）

即ち、図６の（ａ）に示すように、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））との垂直方向の隣接程度に相応する加重値を隣接した各画素に割り当てる。即ち、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））に最も大きい加重値を乗算し、垂直方向に直に隣接した２個の画素（Ｐ（ｉ，ｊ−１），Ｐ（ｉ，ｊ＋１））にその次に大きい加重値を乗算する方式により、適応加重和フィルタリングを行う。

図６の（ａ）は、適応加重和９タップフィルタ（Ａｄａｐｔｉｖｅ Ｗｅｉｇｈｔ Ｓｕｍ ９−ｔａｐ Ｆｉｌｔｅｒ）を例示した図であり、このとき、（数７）の式のｎは４になる。次いで、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））を、適応加重和フィルタリングにより生成された画素（Ｐｐｉｘｅｄ＿ｒｅｆｉｎｅ）の値を利用して再補正する（ステップＳ５３）。

ただし、ステップＳ５２で、差（Ｐｐｉｘｅｌ＿ｄｉｆｆ）が平均値（Ｐａｖ（ｉ，ｊ））より小さくない場合、人間の目に敏感に作用する差がないので、エラー再補正部１４０は、以下の式のような平均和メディアンフィルタリングによりエラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））を再補正する。

（数８）
Ｐｐｉｘｅｌ＿ｒｅｆｉｎｅ＝｛ＳＵＭ（Ｐ（ｉ，ｊ＋ｋ）（ｆｒｏｍ ｋ＝−ｎ ｔｏ ｎ））｝×１／（２ｎ＋１）

即ち、図６の（ｂ）に示すように、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））及び垂直方向に隣接された各画素に同様な加重値を乗算することで、平均和フィルタリングを行う。次いで、エラー再補正部１４０は、平均和フィルタリングにより生成された画素（Ｐｐｉｘｅｌ＿ｒｅｆｉｎｅ）の値を利用して、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））を再補正する（ステップＳ５４）。

上述したように、本発明は、動き推定及び動き補償によりエラー補正された画素と、垂直方向に隣接された各画素の平均値との差を計算し、その差が平均値より小さくて人間の目に敏感に作用する差がある場合は、エラー補正された画素と垂直方向に隣接した画素に異なる加重値を乗算し、適応加重和メディアンフィルタリングを行うことで、エラー補正された画素を再補正し、元の画像に近い自然なイメージを復元することができる。

尚、本発明は、上述の実施例に限られるものではない。本発明の技術的範囲から逸脱しない範囲内で多様に変更実施することが可能である。

本発明に係る移動通信システムの画像ブロックエラー隠匿装置を示したブロック図である。 本発明に係る移動通信システムの画像ブロックエラー隠匿方法を示したフローチャートである。 エラー状態であるとして検出された画素のエラーを再確認する方法を示したフローチャートである。 動き推定方法を示した図である。 適応加重和フィルタリングを利用して、エラー補正された画素を再補正する方法を示したフローチャートである。 （ａ）は加重和を利用したフィルタリングを例示した図であり、（ｂ）は平均和を利用したフィルタリングを例示した図である。 従来の移動通信システムの画像復号装置を示したブロック図である。

符号の説明

１０ ビデオコーデックデコーダ
２０ ディスプレイインターフェース部
３０ ディスプレイ部
１００ エラー検出部
１１０ エラー確認部
１２０ 第１ソフトスイッチ
１２２ バイパス経路
１２４ エラー補正経路
１３０ エラー隠匿部
１３１ 第１フレーム遅延部
１３２ 第２フレーム遅延部
１３３ 動き推定部
１３４ 画素復元部
１３５ 第２ソフトスイッチ
１４０ エラー再補正部

Claims (13)

1. エラーの発生した画素を、高速動き推定方法により以前及び次のフレームを検索することでエラー補正するエラー隠匿（ｃｏｎｃｅａｌｉｎｇ）部と、
   前記エラー隠匿部によりエラー補正された画素と垂直方向に隣接した各画素の平均値との差を計算し、前記差が前記平均値より小さくて人間の目に敏感に作用する差がある場合は、前記エラー補正された画素と前記垂直方向に隣接した画素に異なる加重値を乗算し、前記差が前記平均値より小さくなくて人間の目に敏感に作用する差がない場合は、前記エラー補正された画素と前記垂直方向に隣接した画素に同じ加重値を乗算する適応加重和フィルタリング（ａｄａｐｔｉｖｅ ｗｅｉｇｈｔ ｓｕｍ ｆｉｌｔｅｒｉｎｇ）を実行することで、前記エラー補正された画素を再補正するエラー再補正部とを有して構成され、
   前記エラー隠匿部は、
   以前のフレームを格納するための第１フレーム遅延部と、
   次のフレームを格納するための第２フレーム遅延部と、
   前記第１フレーム遅延部及び第２フレーム遅延部に対する高速動き推定を行って、エラー補正に利用される画素の動きベクトルを生成する動き推定部と、
   前記動きベクトルにより動き補償された画素を利用して、前記エラーの発生した画素を復元する画素復元部と、
   前記画素復元部で復元された画素又はバイパス路により伝送された正常な画素を前記エラー再補正部にスイッチングする第１ソフトスイッチとを有して構成され、
   前記動き推定部は、前記以前のフレームに対して先に動き推定を行い、前記以前のフレームからエラー補正に利用される画素が検索されない場合、前記次のフレームに対して動き推定を行うことを特徴とする移動通信システムの画像ブロックエラー隠匿装置。
2. 前記高速動き推定は、３−ステップ動き推定方法及び５−ステップ動き推定方法中の何れか一つであることを特徴とする請求項１に記載の移動通信システムの画像ブロックエラー隠匿装置。
3. 前記人間の目に敏感に作用する差は、前記エラー補正された画素値と、前記エラー補正された画素に垂直方向に隣接した画素のうち前記エラー補正された画素を含まない画素の平均値の大きさとの差を計算し、前記差が前記平均値の大きさより小さい場合に判断されることを特徴とする請求項１記載の移動通信システムの画像ブロックエラー隠匿装置。
4. 前記人間の目に敏感に作用する差の値が前記平均値より小さい場合、前記エラー再補正部は、適応加重和フィルタリングを行い、前記差の値が前記平均値より小さくない場合、前記エラー再補正部は、平均和フィルタリング（ａｖｅｒａｇｅ ｓｕｍ ｆｉｌｔｅｒｉｎｇ）を行うことを特徴とする請求項３記載の移動通信システムの画像ブロックエラー隠匿装置。
5. 前記適応加重和フィルタリングの加重値は、前記エラー補正された画素に最も大きい加重値が割り当てられ、垂直方向の隣接程度に相応して隣接した各画素に割り当てられる加重値の大きさが決定されることを特徴とする請求項４記載の移動通信システムの画像ブロックエラー隠匿装置。
6. 前記適応加重和フィルタリングは、下記の式の方法により行われることを特徴とする請求項４記載の移動通信システムの画像ブロックエラー隠匿装置。
   （数１）
   ［｛２＾（ｎ−１）×Ｐ（ｉ，ｊ）｝＋
   ｛［２＾（ｎ−２）×Ｐ（ｉ，ｊ−１）］＋［２＾（ｎ−２）×Ｐ（ｉ，ｊ＋１）］｝＋
   ｛［２＾（ｎ−３）×Ｐ（ｉ，ｊ−２）］＋［２＾（ｎ−３）×Ｐ（ｉ，ｊ＋２）］｝＋
   ｛［２＾（ｎ−４）×Ｐ（ｉ，ｊ−３）］＋［２＾（ｎ−４）×Ｐ（ｉ，ｊ＋３）］｝＋
   ・・・（ｕｎｔｉｌ ｎ−ｋ＝−１）］×１／（２ｎ＋１）
   式中、Ｐ（ｉ，ｊ）は、前記エラー隠匿部によりエラー補正された画素を示す。
7. 前記平均和フィルタリングは、前記エラー補正された画素を含んだ垂直方向に隣接した全ての画素に同じ加重値を加えた後、平均和フィルタリングを行うことを特徴とする請求項４記載の移動通信システムの画像ブロックエラー隠匿装置。
8. デコーディングされたフレームからエラーの発生した画素を検出する段階と、
   エラーの発生した画素が検出された場合、以前及び次のフレームを高速動き推定することでエラー補正に利用される画素の動きベクトルを生成する段階と、
   前記動きベクトルにより動き補償された画素を利用して、前記エラーの発生した画素を復元する段階と、
   前記エラーの発生した画素を復元する段階で復元された画素と垂直方向に隣接した各画素の平均値との差を計算し、前記差が前記平均値より小さくて人間の目に敏感に作用する差がある場合は、前記復元された画素と前記垂直方向に隣接した画素に異なる加重値を乗算し、前記差が前記平均値より小さくなくて人間の目に敏感に作用する差がない場合は、前記復元された画素と前記垂直方向に隣接した画素に同じ加重値を乗算する適応加重和フィルタリングを行うことで、前記復元された画素を再補正する段階とを有し、
   前記高速動き推定は、前記以前のフレームに対して先に行われ、前記以前のフレームからエラー補正に利用される画素が検索されない場合、前記次のフレームに対して行われることを特徴とする移動通信システムの画像ブロックエラー隠匿方法。
9. 前記動きベクトルを生成する段階は、以前のフレームに対して高速動き推定を行う段階と、
   以前のフレームから所望の画素が検索されないとき、次のフレームに対して高速動き推定を行う段階とを有することを特徴とする請求項８記載の移動通信システムの画像ブロックエラー隠匿方法。
10. 前記高速動き推定は、３−ステップ動き推定及び５−ステップ動き推定中の何れか一つであることを特徴とする請求項９記載の移動通信システムの画像ブロックエラー隠匿方法。
11. 前記復元された画素を再補正する段階は、前記復元された画素値と、前記復元された画素に垂直方向に隣接した各画素のうち前記エラー補正された画素を含まない画素の平均値との差が、前記平均値より小さい場合、適応加重和フィルタリングを行う段階と、
    前記適応加重和フィルタリングにより得られた値を利用して再補正を行う段階と、
    前記差が前記平均値より小さくない場合、平均和フィルタリングを行う段階と、
    前記平均和フィルタリングにより得られた値を利用して再補正を行う段階とを有することを特徴とする請求項８記載の移動通信システムの画像ブロックエラー隠匿方法。
12. 前記適応加重和フィルタリングは、下記の式により行われることを特徴とする請求項１１記載の移動通信システムの画像ブロックエラー隠匿方法。
    （数３）
    ［｛２＾（ｎ−１）×Ｐ（ｉ，ｊ）｝＋
    ｛［２＾（ｎ−２）×Ｐ（ｉ，ｊ−１）］＋［２＾（ｎ−２）×Ｐ（ｉ，ｊ＋１）］｝＋
    ｛［２＾（ｎ−３）×Ｐ（ｉ，ｊ−２）］＋［２＾（ｎ−３）×Ｐ（ｉ，ｊ＋２）］｝＋
    ｛［２＾（ｎ−４）×Ｐ（ｉ，ｊ−３）］＋［２＾（ｎ−４）×Ｐ（ｉ，ｊ＋３）］｝＋
    ・・・（ｕｎｔｉｌ ｎ−ｋ＝−１）］×１／（２ｎ＋１）
    式中、ｎは、垂直方向に隣接した各画素の個数の１／２値を示す。
13. 前記平均和フィルタリングは、フィルタのタップ係数の全てに同じ加重値を割り当てることを特徴とする請求項１１記載の移動通信システムの画像ブロックエラー隠匿方法。
    

Images