JP2000174631A - 圧縮ビデオ・デ―タ復号化方法及び装置 - Google Patents
圧縮ビデオ・デ―タ復号化方法及び装置Info
- Publication number
- JP2000174631A JP2000174631A JP11315041A JP31504199A JP2000174631A JP 2000174631 A JP2000174631 A JP 2000174631A JP 11315041 A JP11315041 A JP 11315041A JP 31504199 A JP31504199 A JP 31504199A JP 2000174631 A JP2000174631 A JP 2000174631A
- Authority
- JP
- Japan
- Prior art keywords
- block
- reference value
- value
- threshold value
- macroblock
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/527—Global motion vector estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
(57)【要約】
【課題】 低ビット・レートのビデオ・データ伝送の誤
り弾力性を向上させるための、可変長コードを使った圧
縮ビデオ・データ復号化方法及び装置の実現。 【解決手段】 圧縮ビデオ・データ復号化方法は、変換
の前に、ブロック内の空間周波数分布に関する情報の変
化の唐突さを表す第１の基準値（Xref）を生成し、変換
の後に、ブロックと、前に変換された少なくとも１つの
ビデオ・データ・ブロックとの間の一定の情報の変化の
唐突さを表す第２の基準値（Δ）を生成し、第１の基準
値（Xref）を一定の第１のスレショルド値（TH１）と比
較し、第２の基準値（Δ）を一定の第２のスレショルド
値（TH２）と比較し、第１の基準値（Xref）及び第２の
基準値（Δ）のいずれかがそれぞれ第１のスレショルド
値（TH１）及び第２のスレショルド値（TH２）より大き
いことに対する応答として、ブロックにおける誤りを検
出する。
り弾力性を向上させるための、可変長コードを使った圧
縮ビデオ・データ復号化方法及び装置の実現。 【解決手段】 圧縮ビデオ・データ復号化方法は、変換
の前に、ブロック内の空間周波数分布に関する情報の変
化の唐突さを表す第１の基準値（Xref）を生成し、変換
の後に、ブロックと、前に変換された少なくとも１つの
ビデオ・データ・ブロックとの間の一定の情報の変化の
唐突さを表す第２の基準値（Δ）を生成し、第１の基準
値（Xref）を一定の第１のスレショルド値（TH１）と比
較し、第２の基準値（Δ）を一定の第２のスレショルド
値（TH２）と比較し、第１の基準値（Xref）及び第２の
基準値（Δ）のいずれかがそれぞれ第１のスレショルド
値（TH１）及び第２のスレショルド値（TH２）より大き
いことに対する応答として、ブロックにおける誤りを検
出する。
Description
【０００１】
【発明の属する技術分野】本発明は、ビデオ伝送に関
し、特に、圧縮されているビデオ・データを復号化する
方法及び装置に関し、この方法及び装置ではビデオ・デ
ータ・ブロックの空間周波数分布がピクセル値に変換さ
れる。
し、特に、圧縮されているビデオ・データを復号化する
方法及び装置に関し、この方法及び装置ではビデオ・デ
ータ・ブロックの空間周波数分布がピクセル値に変換さ
れる。
【０００２】
【従来の技術】電気通信の１つの目標は、ビデオ、オー
ディオ及びデータ・サービスの良質のリアルタイム伝送
を利用できるシステムを提供することである。一般的に
知られているように、動画を転送するのに必要なデータ
の量は他の多くの媒体に比べて大量であり、低ビット・
レート端末でのビデオの利用は、これまでは、ごく僅か
であった。いずれにせよ、ディジタル形式のデータの伝
送は、伝送チャネルにおける信号対雑音比を高め、情報
容量を増やすのに役立つ。近い将来に、高度ディジタル
移動電気通信システムも伝送ビット・レートを強化する
サービスを導入しようとしており、このことは低ビット
・レート移動チャネル経由のビデオの伝送の可能性もい
っそう高まるということを意味する。
ディオ及びデータ・サービスの良質のリアルタイム伝送
を利用できるシステムを提供することである。一般的に
知られているように、動画を転送するのに必要なデータ
の量は他の多くの媒体に比べて大量であり、低ビット・
レート端末でのビデオの利用は、これまでは、ごく僅か
であった。いずれにせよ、ディジタル形式のデータの伝
送は、伝送チャネルにおける信号対雑音比を高め、情報
容量を増やすのに役立つ。近い将来に、高度ディジタル
移動電気通信システムも伝送ビット・レートを強化する
サービスを導入しようとしており、このことは低ビット
・レート移動チャネル経由のビデオの伝送の可能性もい
っそう高まるということを意味する。
【０００３】チャネル容量の利用を最適化するために、
信号は、一般に、伝送される前に圧縮される。このこと
は、伝送されるべきデータ量が多いビデオ伝送では特に
重要である。圧縮されたビデオの情報内容は、一般に可
変長コードで符号化されていることが主な原因となっ
て、伝送誤りによる悪影響を受けやすい。ビット誤りに
よりコードワードが長さの異なる別のコードワードに変
わるとき、復号器は同期を失って、次の同期化コードを
受け取るまで、連続する誤りのないブロックを、間違っ
て復号化する。
信号は、一般に、伝送される前に圧縮される。このこと
は、伝送されるべきデータ量が多いビデオ伝送では特に
重要である。圧縮されたビデオの情報内容は、一般に可
変長コードで符号化されていることが主な原因となっ
て、伝送誤りによる悪影響を受けやすい。ビット誤りに
よりコードワードが長さの異なる別のコードワードに変
わるとき、復号器は同期を失って、次の同期化コードを
受け取るまで、連続する誤りのないブロックを、間違っ
て復号化する。
【０００４】伝送誤りに起因する画像の劣化を制限する
ために、誤り検出及び／又は誤り訂正方法を適用するこ
とができ、再送を使用することができ、及び／又は、受
信された不正なデータからの影響を隠蔽（conceal)する
ことができる。普通は、再送はデータ・ストリームを誤
りから保護する合理的な方法であるが、ビット・レート
が低くて誤り率が中くらいかあるいは高い伝送には長い
往復遅延が伴うために、特にリアルタイムテレビ電話ア
プリケーションに再送を使用することは実際上不可能で
ある。誤り検出及び訂正の方法は普通は、ある程度の冗
長性をデータに付加するので、大きなオーバーヘッドを
必要とする。従って、低ビット・レートアプリケーショ
ンでは、誤り隠蔽は画像を伝送誤りから保護し復元する
ための良い方法であると考えることができる。
ために、誤り検出及び／又は誤り訂正方法を適用するこ
とができ、再送を使用することができ、及び／又は、受
信された不正なデータからの影響を隠蔽（conceal)する
ことができる。普通は、再送はデータ・ストリームを誤
りから保護する合理的な方法であるが、ビット・レート
が低くて誤り率が中くらいかあるいは高い伝送には長い
往復遅延が伴うために、特にリアルタイムテレビ電話ア
プリケーションに再送を使用することは実際上不可能で
ある。誤り検出及び訂正の方法は普通は、ある程度の冗
長性をデータに付加するので、大きなオーバーヘッドを
必要とする。従って、低ビット・レートアプリケーショ
ンでは、誤り隠蔽は画像を伝送誤りから保護し復元する
ための良い方法であると考えることができる。
【０００５】伝送誤りを隠蔽するためには、それを検出
し、その場所を突き止めなければならない。誤りの種類
及び場所が良く分かるほど、隠蔽方法を問題に対して良
く集中させることができ、従ってより良質の画像を得る
ことができるようになる。特に人の目により容易に発見
されるような誤りを検出することのできる方法を見いだ
すことも重要である。
し、その場所を突き止めなければならない。誤りの種類
及び場所が良く分かるほど、隠蔽方法を問題に対して良
く集中させることができ、従ってより良質の画像を得る
ことができるようになる。特に人の目により容易に発見
されるような誤りを検出することのできる方法を見いだ
すことも重要である。
【０００６】近頃、誤りに対して弾力性のある（error-
resilient)ディジタル・ビデオ伝送に大きな関心が寄せ
られているが、研究は主としてＭＰＥＧ−２を使用する
ディジタルＴＶ伝送に集中している。そこでは、主とし
て、巡回冗長検査（ＣＲＣ）を伴う短いパケットを使っ
て独特の同期コードをビット・ストリームに頻繁に付加
し、ＣＲＣが誤りを指摘しているパケットの全部を捨て
ることによって、問題が解決される。ビット・レートが
毎秒数メガバイトであるときには、データ・ストリーム
全体の中での、頻繁に発生する同期コード又はＣＲＣフ
ィールドの割合は普通は容認できる。しかし、低ビット
・レートの伝送では状況は全く違っていて、２０〜３０
ｋｂｐｓのビット・レートではオーバーヘッドの最適化
が極めて重要となる。更に、画像のサイズが例えば７０
４* ５７６ピクセルであるとすると、１つの１６* １６
ピクセル・マクロブロックは画像全体の約０．０６１％
を占めるが、低ビット・レートのＱＣＩＦ（Quarter Co
mmon Intermediate Format）１７６* １４４ピクセル画
像では、１つのマクロブロックは画像全体の１％以上を
占める。従って、マクロブロックの紛失は、低ビット・
レートのテレビ電話画像ではテレビ画像の場合よりも有
害である。
resilient)ディジタル・ビデオ伝送に大きな関心が寄せ
られているが、研究は主としてＭＰＥＧ−２を使用する
ディジタルＴＶ伝送に集中している。そこでは、主とし
て、巡回冗長検査（ＣＲＣ）を伴う短いパケットを使っ
て独特の同期コードをビット・ストリームに頻繁に付加
し、ＣＲＣが誤りを指摘しているパケットの全部を捨て
ることによって、問題が解決される。ビット・レートが
毎秒数メガバイトであるときには、データ・ストリーム
全体の中での、頻繁に発生する同期コード又はＣＲＣフ
ィールドの割合は普通は容認できる。しかし、低ビット
・レートの伝送では状況は全く違っていて、２０〜３０
ｋｂｐｓのビット・レートではオーバーヘッドの最適化
が極めて重要となる。更に、画像のサイズが例えば７０
４* ５７６ピクセルであるとすると、１つの１６* １６
ピクセル・マクロブロックは画像全体の約０．０６１％
を占めるが、低ビット・レートのＱＣＩＦ（Quarter Co
mmon Intermediate Format）１７６* １４４ピクセル画
像では、１つのマクロブロックは画像全体の１％以上を
占める。従って、マクロブロックの紛失は、低ビット・
レートのテレビ電話画像ではテレビ画像の場合よりも有
害である。
【０００７】
【発明が解決しようとする課題】低ビット・レートビデ
オ符号化を標準化する組織における主な関心事は、イン
タ符号化されたフレーム（inter coded frames）の誤り
弾力性を改善することである。提示されているほとんど
の方法は、ビット・ストリーム・シンタックス及び符号
化アルゴリズムの変更を提案しており、ユーザのテレビ
電話端末によってそれらが広く支援される場合に限っ
て、それらは適切に利用され得る。一般に、２つの誤り
検出方法が、即ち、不正な可変長符号化（variable len
gth coding：VLC ）コードワードの検出と、離散コサイ
ン変換（DCT ）マトリクスの紛失している終端ブロック
・コードの検出とが提唱されている。実際には、これら
の方法は、非常に多数のＶＬＣ誤りを検出し損ない、ま
たイントラ符号化されているブロック（intra coded bl
ocks）の固定長符号化されたＤＣ成分の誤りをしばしば
全く検出しないので、特にイントラ符号化されているブ
ロックに対しては不十分であることが分かっている。更
に、崩れている数個のブロックが復号化された後に、余
りに遅く誤りが検出されるのが普通である。
オ符号化を標準化する組織における主な関心事は、イン
タ符号化されたフレーム（inter coded frames）の誤り
弾力性を改善することである。提示されているほとんど
の方法は、ビット・ストリーム・シンタックス及び符号
化アルゴリズムの変更を提案しており、ユーザのテレビ
電話端末によってそれらが広く支援される場合に限っ
て、それらは適切に利用され得る。一般に、２つの誤り
検出方法が、即ち、不正な可変長符号化（variable len
gth coding：VLC ）コードワードの検出と、離散コサイ
ン変換（DCT ）マトリクスの紛失している終端ブロック
・コードの検出とが提唱されている。実際には、これら
の方法は、非常に多数のＶＬＣ誤りを検出し損ない、ま
たイントラ符号化されているブロック（intra coded bl
ocks）の固定長符号化されたＤＣ成分の誤りをしばしば
全く検出しないので、特にイントラ符号化されているブ
ロックに対しては不十分であることが分かっている。更
に、崩れている数個のブロックが復号化された後に、余
りに遅く誤りが検出されるのが普通である。
【０００８】１９９５年５月の画像処理に関するＩＥＥ
Ｅトランザクション第４巻、第５号、５３３〜５４２ペ
ージの中の、Wai-Man Lam 及びAmy R. Reibmanの論文
「チャネル誤りにさらされる画像のための誤り隠蔽アル
ゴリズム（An error Concealment Algorithm for Image
s Subject to Channel Errors ）」は、ＤＣＴ及びピク
セル・ドメイン誤り検出アルゴリズムを提示している。
しかし、それらのアルゴリズムは、特に量子化ＤＣＴマ
トリクスの種々の特徴についてＤＣＴドメイン・アルゴ
リズムを適用し得ないために、低ビット・レート及び低
解像度に対しては充分に適用され得ない。
Ｅトランザクション第４巻、第５号、５３３〜５４２ペ
ージの中の、Wai-Man Lam 及びAmy R. Reibmanの論文
「チャネル誤りにさらされる画像のための誤り隠蔽アル
ゴリズム（An error Concealment Algorithm for Image
s Subject to Channel Errors ）」は、ＤＣＴ及びピク
セル・ドメイン誤り検出アルゴリズムを提示している。
しかし、それらのアルゴリズムは、特に量子化ＤＣＴマ
トリクスの種々の特徴についてＤＣＴドメイン・アルゴ
リズムを適用し得ないために、低ビット・レート及び低
解像度に対しては充分に適用され得ない。
【０００９】Aki Hietala の１９９７年度Oulu大学電気
技術学部科学修士論文である次の出版物：Aki Hietala,
「Virhesietoinen videodekoodaus 」, Master of Scie
nceThesis, Oulu University, Department of Electric
al Techniques, 1997、はビデオ・ビット・ストリーム
におけるいくつかの誤り検出方法を提示し、分析してい
る。それらの方法は、隣接するピクセル同士の残留相関
（空間的相関）を利用し、ブロック同士の境界の異常を
検出することにより、崩れたブロックを探す。しかし、
それらの方法は、どちらかと言えば複雑であり、達成さ
れる効果は未だ充分ではない。
技術学部科学修士論文である次の出版物：Aki Hietala,
「Virhesietoinen videodekoodaus 」, Master of Scie
nceThesis, Oulu University, Department of Electric
al Techniques, 1997、はビデオ・ビット・ストリーム
におけるいくつかの誤り検出方法を提示し、分析してい
る。それらの方法は、隣接するピクセル同士の残留相関
（空間的相関）を利用し、ブロック同士の境界の異常を
検出することにより、崩れたブロックを探す。しかし、
それらの方法は、どちらかと言えば複雑であり、達成さ
れる効果は未だ充分ではない。
【００１０】M. R. Pickering 、M. R. Frater、J. F.
Arnold及びM. W. Grigg の出版物「空間周波数領域にお
ける誤り隠蔽方法」（M. R. Pickering, M. R. Frater,
J.F. Arnold, and M. W. Grigg, "An Error Concealme
nt Technique in the Spatial Frequency Domain" Sign
al Processing, no. 54, Elsevier 1996, pp. 185-18
9）は、単一のＤＣＴ基底関数に見かけが似ている画像
中のブロックによって引き起こされる誤りを隠蔽する方
法を提示している。その方法では係数の８* ８ブロック
中の異常に大きなＤＣＴ係数が検出されてゼロに低減さ
れる。この方法は、特定のタイプの伝送誤りには良く効
果を発揮するけれども、単一の検出手段として発揮でき
る効果は限られている。
Arnold及びM. W. Grigg の出版物「空間周波数領域にお
ける誤り隠蔽方法」（M. R. Pickering, M. R. Frater,
J.F. Arnold, and M. W. Grigg, "An Error Concealme
nt Technique in the Spatial Frequency Domain" Sign
al Processing, no. 54, Elsevier 1996, pp. 185-18
9）は、単一のＤＣＴ基底関数に見かけが似ている画像
中のブロックによって引き起こされる誤りを隠蔽する方
法を提示している。その方法では係数の８* ８ブロック
中の異常に大きなＤＣＴ係数が検出されてゼロに低減さ
れる。この方法は、特定のタイプの伝送誤りには良く効
果を発揮するけれども、単一の検出手段として発揮でき
る効果は限られている。
【００１１】
【課題を解決するための手段】可変長コードを使ってビ
デオ・データ・ブロックを復号化する新しい方法が発明
されており、それで上記の欠点を軽減することができ
る。本発明の方法は、変換の前に、ブロック内の空間周
波数分布に関する情報の変化を表す第１の基準値を生成
し、変換の後に、このブロックと、前に変換された少な
くとも１つのビデオ・データ・ブロックとの間の一定の
情報の変化の唐突さを表す第２の基準値を生成し、第１
の基準値を一定の第１のスレショルド値と比較すると共
に第２の基準値を一定の第２のスレショルド値と比較
し、第１及び第２の基準値のいずれかがそれぞれ第１及
び第２のスレショルド値より大きいことに対する応答と
して、ブロックにおける誤りを検出することを特徴とす
る。
デオ・データ・ブロックを復号化する新しい方法が発明
されており、それで上記の欠点を軽減することができ
る。本発明の方法は、変換の前に、ブロック内の空間周
波数分布に関する情報の変化を表す第１の基準値を生成
し、変換の後に、このブロックと、前に変換された少な
くとも１つのビデオ・データ・ブロックとの間の一定の
情報の変化の唐突さを表す第２の基準値を生成し、第１
の基準値を一定の第１のスレショルド値と比較すると共
に第２の基準値を一定の第２のスレショルド値と比較
し、第１及び第２の基準値のいずれかがそれぞれ第１及
び第２のスレショルド値より大きいことに対する応答と
して、ブロックにおける誤りを検出することを特徴とす
る。
【００１２】本発明の目的は、イントラ符号化されてい
るビデオ・データ・ブロックを復号化する種々のステッ
プと組み合わされるべき改良された誤り検出エレメント
の集合を提供することである。復号化プロセスの種々の
形及び／又は段階における情報を利用する本発明の誤り
検出エレメントのうちの少なくとも２つを用いれば、誤
り検出の精度が向上するが、復号化プロセスの複雑さが
不当に増大することはない。本発明の誤り検出を用いれ
ば、誤り隠蔽プロセスを改良し、これにより低ビット・
レートのビデオ・データ伝送の誤り弾力性を向上させる
ことができる。
るビデオ・データ・ブロックを復号化する種々のステッ
プと組み合わされるべき改良された誤り検出エレメント
の集合を提供することである。復号化プロセスの種々の
形及び／又は段階における情報を利用する本発明の誤り
検出エレメントのうちの少なくとも２つを用いれば、誤
り検出の精度が向上するが、復号化プロセスの複雑さが
不当に増大することはない。本発明の誤り検出を用いれ
ば、誤り隠蔽プロセスを改良し、これにより低ビット・
レートのビデオ・データ伝送の誤り弾力性を向上させる
ことができる。
【００１３】本発明の方法は、隣接するブロック間に比
較的大きな相関があると仮定することにより、自然の画
像においては情報がゆっくりと変化する性質を利用す
る。本質的にあまりありそうもないような形状のブロッ
クを慎重に調べることができる。この方法では、隣り合
うブロック間に比較的高い相関が予期され、ビット・ス
トリームにおける非常に唐突な変化を報知するための手
段が提示される。ビデオ・シーケンスにおける不意の異
常は、怪しいあるいは崩れたブロック、又は数個のブロ
ック（マクロブロック）を表すものと解釈される。
較的大きな相関があると仮定することにより、自然の画
像においては情報がゆっくりと変化する性質を利用す
る。本質的にあまりありそうもないような形状のブロッ
クを慎重に調べることができる。この方法では、隣り合
うブロック間に比較的高い相関が予期され、ビット・ス
トリームにおける非常に唐突な変化を報知するための手
段が提示される。ビデオ・シーケンスにおける不意の異
常は、怪しいあるいは崩れたブロック、又は数個のブロ
ック（マクロブロック）を表すものと解釈される。
【００１４】更に、ビデオ・データを復号化するための
装置が提示される。その装置はビデオ・データ・ブロッ
クの空間周波数分布に関する情報をピクセル値に変換す
るための手段を備え、この装置は、変換の前に、ブロッ
ク内の空間周波数分布に関する情報の変化を表す第１の
基準値を生成するための手段と、変換の後に、ブロック
と、前に変換された少なくとも１つのビデオ・データ・
ブロックとの間の一定の情報の変化の唐突さを表す第２
の基準値を生成するための手段と、第１の基準値を一定
の第１のスレショルド値と比較すると共に第２の基準値
を一定の第２のスレショルド値と比較するための手段
と、第１及び第２の基準値のいずれかがそれぞれ第１及
び第２のスレショルド値より大きいことに対する応答と
して、ブロックにおける誤りを検出するための手段とを
特徴とする。
装置が提示される。その装置はビデオ・データ・ブロッ
クの空間周波数分布に関する情報をピクセル値に変換す
るための手段を備え、この装置は、変換の前に、ブロッ
ク内の空間周波数分布に関する情報の変化を表す第１の
基準値を生成するための手段と、変換の後に、ブロック
と、前に変換された少なくとも１つのビデオ・データ・
ブロックとの間の一定の情報の変化の唐突さを表す第２
の基準値を生成するための手段と、第１の基準値を一定
の第１のスレショルド値と比較すると共に第２の基準値
を一定の第２のスレショルド値と比較するための手段
と、第１及び第２の基準値のいずれかがそれぞれ第１及
び第２のスレショルド値より大きいことに対する応答と
して、ブロックにおける誤りを検出するための手段とを
特徴とする。
【００１５】
【発明の実施の形態】次に、添付図面を参照して、例を
挙げて本発明を説明する。
挙げて本発明を説明する。
【００１６】アナログ画像情報をサンプリングして量子
化し、その様にして作られたデータをビットの連続的ス
トリームに変換することによってディジタル画像が形成
される。ディジタル化された信号は、高度ディジタル信
号処理ツールの使用を可能にし、これはデータ転送をよ
り高速にかつより効率よく行うことを可能にする。ディ
ジタル画像表示に必要なビット数を減らすと共に、それ
に対応してディジタル画像の伝送に必要なビット・レー
トを減少させるために、近頃、いくつかの画像符号化ア
ルゴリズムが開発されている。ＪＰＥＧ（Joint Photog
raphic ExpertsGroup）は静止画像のための広く使われ
ているアルゴリズムである。ＣＣＩＴＴ（ITU Telecomm
unication Standardisation Sector、ＩＴＵ電気通信標
準化部門）勧告Ｈ．２６１はテレビ会議のために開発さ
れている。Ｈ．２６３はテレビ電話のために、ＭＰＥＧ
（Moving Picture Expert Group ）は動画を転送したり
蓄積したりするために開発されている。図１のブロック
図は、これらの規格に使用されている、当業者に周知さ
れているビデオ・エンコード及び復号化の基本段階を示
している。ディジタル画像データは、一定数のピクセル
（例えば１ブロックは８×８ピクセルを包含する）から
成る小さなブロックに分割１１される。各ブロックのデ
ータは、離散コサイン変換（ＤＣＴ）１２を用いること
により空間周波数領域に変換される。得られたＤＣＴマ
トリクスは量子化１３され、量子化された信号は、可変
長コードワード（ＶＬＣ）のテーブル１４を用いること
により符号化される。符号化された信号は受信機に送ら
れる。受信端では、逆のプロセス１５，１６及び１７を
逆の順序で実行して画像を再構成する。
化し、その様にして作られたデータをビットの連続的ス
トリームに変換することによってディジタル画像が形成
される。ディジタル化された信号は、高度ディジタル信
号処理ツールの使用を可能にし、これはデータ転送をよ
り高速にかつより効率よく行うことを可能にする。ディ
ジタル画像表示に必要なビット数を減らすと共に、それ
に対応してディジタル画像の伝送に必要なビット・レー
トを減少させるために、近頃、いくつかの画像符号化ア
ルゴリズムが開発されている。ＪＰＥＧ（Joint Photog
raphic ExpertsGroup）は静止画像のための広く使われ
ているアルゴリズムである。ＣＣＩＴＴ（ITU Telecomm
unication Standardisation Sector、ＩＴＵ電気通信標
準化部門）勧告Ｈ．２６１はテレビ会議のために開発さ
れている。Ｈ．２６３はテレビ電話のために、ＭＰＥＧ
（Moving Picture Expert Group ）は動画を転送したり
蓄積したりするために開発されている。図１のブロック
図は、これらの規格に使用されている、当業者に周知さ
れているビデオ・エンコード及び復号化の基本段階を示
している。ディジタル画像データは、一定数のピクセル
（例えば１ブロックは８×８ピクセルを包含する）から
成る小さなブロックに分割１１される。各ブロックのデ
ータは、離散コサイン変換（ＤＣＴ）１２を用いること
により空間周波数領域に変換される。得られたＤＣＴマ
トリクスは量子化１３され、量子化された信号は、可変
長コードワード（ＶＬＣ）のテーブル１４を用いること
により符号化される。符号化された信号は受信機に送ら
れる。受信端では、逆のプロセス１５，１６及び１７を
逆の順序で実行して画像を再構成する。
【００１７】ディジタル画像の解像度は、画像マトリク
ス中のピクセルの個数により定義される。１つの輝度成
分（Ｙ）及び２つのクロミナンス成分（Ｕ，Ｖ）の各々
について８ビットでサンプリングすると、２24 〜１６０
０万色が利用可能となる。人間の視覚系統はクロミナン
ス成分よりも輝度成分に対していっそう敏感であるの
で、一般に画像のクロミナンス成分は空間的に標準以下
にサンプリングされる。例えば、ＩＴＵ−Ｔ Ｈ．２６
１勧告では、４個の輝度ブロックの各々について２個の
クロミナンス・ブロックが使われる。図２に示されてい
るように、４個の輝度ブロックと２個のクロミナンス・
ブロックとがマクロブロック２１を形成し、Ｈ．２６１
画像２３は、３×１１のマクロブロックにより形成され
る、１２個のブロック・グループ２２から成っている。
他の符号化規格では、対応する構造グループ化方式が使
用される。
ス中のピクセルの個数により定義される。１つの輝度成
分（Ｙ）及び２つのクロミナンス成分（Ｕ，Ｖ）の各々
について８ビットでサンプリングすると、２24 〜１６０
０万色が利用可能となる。人間の視覚系統はクロミナン
ス成分よりも輝度成分に対していっそう敏感であるの
で、一般に画像のクロミナンス成分は空間的に標準以下
にサンプリングされる。例えば、ＩＴＵ−Ｔ Ｈ．２６
１勧告では、４個の輝度ブロックの各々について２個の
クロミナンス・ブロックが使われる。図２に示されてい
るように、４個の輝度ブロックと２個のクロミナンス・
ブロックとがマクロブロック２１を形成し、Ｈ．２６１
画像２３は、３×１１のマクロブロックにより形成され
る、１２個のブロック・グループ２２から成っている。
他の符号化規格では、対応する構造グループ化方式が使
用される。
【００１８】図３のフローチャートは、マクロブロック
を復号化するステップと関連する本発明の方法のエレメ
ントを例示している。本発明の基礎をなす思想は、ブロ
ックとは情報を分割する人工的方法であるので、低ビッ
ト・レート・ビデオ・シーケンスではブロック間での自
然な画像の変化はゆっくりと及び／又は一定の範囲内で
予測可能な手法で生じるはずであるという思想である。
この方法は個別の３つの検出エレメントから成ってお
り、そのうちの少なくとも２つは可変長復号化３１，逆
量子化３２及び逆ＤＣＴ３３と組み合わされる。その検
出エレメントは、復号化の種々のレベルで利用可能な情
報を利用して伝送誤りを検出する。第１の検出エレメン
ト３４は、ブロック・レベルのＤＣＴ成分を検査するス
テップを実行し、それは逆量子化の前でも後でも実行さ
れ得る。第２及び第３の検出エレメントの目的のため
に、現在のマクロブロックのＤＣＴ成分は例えば復号器
の揮発性メモリに一時的に記憶される。第２の検出エレ
メント３５はブロック・レベルの空間比較のためのステ
ップを実行し、第３の検出エレメント３６はマクロブロ
ック・レベルでの比較を実行する。検出のために、対応
する成分同士だけが（即ち、Ｙ−、Ｕ−、及びＶ−成分
が個別に）比較される。１成分だけを調べた結果に基づ
いて、また、もっと多くの成分を調べた結果に基づいて
も、検出の解釈を実行することができる。次に、図３の
検出エレメントをもっと詳しく検討する。
を復号化するステップと関連する本発明の方法のエレメ
ントを例示している。本発明の基礎をなす思想は、ブロ
ックとは情報を分割する人工的方法であるので、低ビッ
ト・レート・ビデオ・シーケンスではブロック間での自
然な画像の変化はゆっくりと及び／又は一定の範囲内で
予測可能な手法で生じるはずであるという思想である。
この方法は個別の３つの検出エレメントから成ってお
り、そのうちの少なくとも２つは可変長復号化３１，逆
量子化３２及び逆ＤＣＴ３３と組み合わされる。その検
出エレメントは、復号化の種々のレベルで利用可能な情
報を利用して伝送誤りを検出する。第１の検出エレメン
ト３４は、ブロック・レベルのＤＣＴ成分を検査するス
テップを実行し、それは逆量子化の前でも後でも実行さ
れ得る。第２及び第３の検出エレメントの目的のため
に、現在のマクロブロックのＤＣＴ成分は例えば復号器
の揮発性メモリに一時的に記憶される。第２の検出エレ
メント３５はブロック・レベルの空間比較のためのステ
ップを実行し、第３の検出エレメント３６はマクロブロ
ック・レベルでの比較を実行する。検出のために、対応
する成分同士だけが（即ち、Ｙ−、Ｕ−、及びＶ−成分
が個別に）比較される。１成分だけを調べた結果に基づ
いて、また、もっと多くの成分を調べた結果に基づいて
も、検出の解釈を実行することができる。次に、図３の
検出エレメントをもっと詳しく検討する。
【００１９】１．第１の検出ブロック（３４） 離散コサイン変換後、ＤＣ係数と、図４（ａ）に示され
ているように低い周波数係数から高い周波数係数へとジ
グザグに走査される複数のＡＣ係数と、から成るＤＣＴ
マトリクスとしてピクセル・ブロックを表示することが
できる。実際には、低解像度画像では高周波数ＡＣ成分
に大きな振幅があることはほとんどありそうもない。し
かし、大きな振幅が生じる可能性はあるので、本発明の
方法では、それらを単にフィルタリングして除去するの
ではなくて、高周波数ＡＣ成分は低周波数ＡＣ係数より
小さな絶対値を有するはずであるという事実を評価し
て、誤りを検出するためにそれらを使う。
ているように低い周波数係数から高い周波数係数へとジ
グザグに走査される複数のＡＣ係数と、から成るＤＣＴ
マトリクスとしてピクセル・ブロックを表示することが
できる。実際には、低解像度画像では高周波数ＡＣ成分
に大きな振幅があることはほとんどありそうもない。し
かし、大きな振幅が生じる可能性はあるので、本発明の
方法では、それらを単にフィルタリングして除去するの
ではなくて、高周波数ＡＣ成分は低周波数ＡＣ係数より
小さな絶対値を有するはずであるという事実を評価し
て、誤りを検出するためにそれらを使う。
【００２０】図５のフローチャートは、ＤＣＴマトリク
スの妥当性を検査する簡単化された方法での第１の検出
エレメントの原理を例示する図である。ステップ５１０
において、ＤＣＴマトリクスのＡＣ成分は少なくとも２
つのグループに分けられ、一定の高い周波数の成分ＡＣ
３６〜ＡＣ６３（図４（ａ）を参照）は第１のグループ
を形成し、第２のグループは、残りのＡＣ成分（以降
は、低周波数成分と称する）の選択されたグループであ
る。低周波数における活動を表す、少なくとも１つの第
１のスレショルド値ＴＨ１が第２のグループのＡＣ成分
から計算される（ステップ５２０）。更に、少なくとも
１つの基準値Ｘｒｅｆがステップ５３０で計算される。
この基準値は、例えば第１のグループのＡＣ成分又は第
２のグループのＡＣ成分の、非ゼロ係数の大きさを表
す。基準値Ｘｒｅｆは、導出された第１のスレショルド
値ＴＨ１と比較され（ステップ５４０）、もし基準値が
スレショルド値より大きければ（ステップ５６０）、そ
れは誤りが検出されたことを意味する。
スの妥当性を検査する簡単化された方法での第１の検出
エレメントの原理を例示する図である。ステップ５１０
において、ＤＣＴマトリクスのＡＣ成分は少なくとも２
つのグループに分けられ、一定の高い周波数の成分ＡＣ
３６〜ＡＣ６３（図４（ａ）を参照）は第１のグループ
を形成し、第２のグループは、残りのＡＣ成分（以降
は、低周波数成分と称する）の選択されたグループであ
る。低周波数における活動を表す、少なくとも１つの第
１のスレショルド値ＴＨ１が第２のグループのＡＣ成分
から計算される（ステップ５２０）。更に、少なくとも
１つの基準値Ｘｒｅｆがステップ５３０で計算される。
この基準値は、例えば第１のグループのＡＣ成分又は第
２のグループのＡＣ成分の、非ゼロ係数の大きさを表
す。基準値Ｘｒｅｆは、導出された第１のスレショルド
値ＴＨ１と比較され（ステップ５４０）、もし基準値が
スレショルド値より大きければ（ステップ５６０）、そ
れは誤りが検出されたことを意味する。
【００２１】図６のフローチャートは図５の方法の実施
例を例示しており、この実施例では、実際には２つの第
１の基準値と、対応する第１のスレショルド値とが生成
される。ステップ５１１において、ＤＣＴマトリクスは
水平バンド、垂直バンド、対角バンド及び高周波数バン
ドに分割される。模範的な水平バンド、垂直バンド及び
対角バンド（まとめて低周波数バンドと称する）がそれ
ぞれ図４（ｂ）、４（ｃ）、及び４（ｄ）に示されてい
る。これらの低周波数バンド間にある程度の部分的重な
りがあっても良い。ステップ５１２において、第１の低
周波数バンドｋが選択される。係数の絶対総和ａｂｓｕ
ｍk と、最大の絶対係数値ＡＣmax, kと、ａｂｓｕｍk
の非ゼロ因数の個数ｎk とがステップ５１３で計算され
る。ステップ５１４において、低周波数バンドｋにおけ
る非ゼロ係数の個数が調べられ、このバンドに非ゼロ係
数が２つ以上あれば、最大の絶対値ＡＣmax, kを有する
係数が他の非ゼロ係数の絶対総和ａｂｓｕｍk から差し
引かれ、総和が所定の係数値Ｃ1 に加算される。得られ
た総和は補助第１スレショルドＴＨ１ａとして定義５２
１される。非ゼロ係数が１つだけ存在するか又は全く存
在しなければ、補助第１スレショルド値ＴＨ１ａは所定
の定数値Ｃ１であると定義５２２される。ステップ５４
１において、最大の絶対係数値ＡＣmax, k（第１の基準
値）が第１のスレショルド値ＴＨ１ａと比較され、もし
第１の基準値ＡＣmax, kが第１のスレショルド値ＴＨ１
ａより大きいか又は等しければ、誤りが検出５６０され
る。もし第１の基準値ＡＣmax, kが第１のスレショルド
値ＴＨ１ａより小さければ、全ての低周波数バンドが既
に調べられたか否かがチェック５４２される。もし否で
あれば、次のが選択される（ステップ５４３）。
例を例示しており、この実施例では、実際には２つの第
１の基準値と、対応する第１のスレショルド値とが生成
される。ステップ５１１において、ＤＣＴマトリクスは
水平バンド、垂直バンド、対角バンド及び高周波数バン
ドに分割される。模範的な水平バンド、垂直バンド及び
対角バンド（まとめて低周波数バンドと称する）がそれ
ぞれ図４（ｂ）、４（ｃ）、及び４（ｄ）に示されてい
る。これらの低周波数バンド間にある程度の部分的重な
りがあっても良い。ステップ５１２において、第１の低
周波数バンドｋが選択される。係数の絶対総和ａｂｓｕ
ｍk と、最大の絶対係数値ＡＣmax, kと、ａｂｓｕｍk
の非ゼロ因数の個数ｎk とがステップ５１３で計算され
る。ステップ５１４において、低周波数バンドｋにおけ
る非ゼロ係数の個数が調べられ、このバンドに非ゼロ係
数が２つ以上あれば、最大の絶対値ＡＣmax, kを有する
係数が他の非ゼロ係数の絶対総和ａｂｓｕｍk から差し
引かれ、総和が所定の係数値Ｃ1 に加算される。得られ
た総和は補助第１スレショルドＴＨ１ａとして定義５２
１される。非ゼロ係数が１つだけ存在するか又は全く存
在しなければ、補助第１スレショルド値ＴＨ１ａは所定
の定数値Ｃ１であると定義５２２される。ステップ５４
１において、最大の絶対係数値ＡＣmax, k（第１の基準
値）が第１のスレショルド値ＴＨ１ａと比較され、もし
第１の基準値ＡＣmax, kが第１のスレショルド値ＴＨ１
ａより大きいか又は等しければ、誤りが検出５６０され
る。もし第１の基準値ＡＣmax, kが第１のスレショルド
値ＴＨ１ａより小さければ、全ての低周波数バンドが既
に調べられたか否かがチェック５４２される。もし否で
あれば、次のが選択される（ステップ５４３）。
【００２２】全ての低周波数バンドが調べられると、高
周波数バンドも調べられる。ステップ５４４において、
ＴＨ１ｂ＝ｍａｘ（Ｃ１、ＡＣmax, k；ｋ＝１・・・
Ｋ）を選択することにより、２番目の第１のスレショル
ドが低周波数バンドにおける係数の絶対値から導出され
る。この後、高周波数バンドの第１の係数ｊが調べられ
る（ステップ５４５）。第１の基準値Ｘｒｅｆは、選択
された高周波数係数の絶対値であり、もしＸｒｅｆがス
レショルドＴＨ１ｂより大きければ（ステップ５４
６）、誤りが検出されている（ステップ５６０）。高周
波数バンドの係数が全て調べられるまで、ループ（ステ
ップ５４６〜５４８）が反復される。プロセスでスレシ
ョルドＴＨ１ａ及びＴＨ１ｂのいずれをも上回らなけれ
ば、本方法はこの段階ではこのブロックに誤りは全く検
出されていないということを示す（ステップ５５０）。
周波数バンドも調べられる。ステップ５４４において、
ＴＨ１ｂ＝ｍａｘ（Ｃ１、ＡＣmax, k；ｋ＝１・・・
Ｋ）を選択することにより、２番目の第１のスレショル
ドが低周波数バンドにおける係数の絶対値から導出され
る。この後、高周波数バンドの第１の係数ｊが調べられ
る（ステップ５４５）。第１の基準値Ｘｒｅｆは、選択
された高周波数係数の絶対値であり、もしＸｒｅｆがス
レショルドＴＨ１ｂより大きければ（ステップ５４
６）、誤りが検出されている（ステップ５６０）。高周
波数バンドの係数が全て調べられるまで、ループ（ステ
ップ５４６〜５４８）が反復される。プロセスでスレシ
ョルドＴＨ１ａ及びＴＨ１ｂのいずれをも上回らなけれ
ば、本方法はこの段階ではこのブロックに誤りは全く検
出されていないということを示す（ステップ５５０）。
【００２３】２．第２の検出エレメント（３５） 既に述べたように、自然な画像においては隣り合うブロ
ック間の変化は割合に滑らかに進行しがちである。従っ
て、第２の検出エレメントの動作は、隣り合うブロック
同士の相関を監視する動作に基づいている。優先的に、
第２の検出エレメントは、逆離散コサイン変換後の復号
化に包含される。第２及び第３の検出エレメントの目的
のために、現在のマクロブロックのＤＣＴ成分は例えば
復号器の揮発性メモリに一時的に記憶される。図７のフ
ローチャートは、本発明による第２の検出エレメントの
原理を例示している。
ック間の変化は割合に滑らかに進行しがちである。従っ
て、第２の検出エレメントの動作は、隣り合うブロック
同士の相関を監視する動作に基づいている。優先的に、
第２の検出エレメントは、逆離散コサイン変換後の復号
化に包含される。第２及び第３の検出エレメントの目的
のために、現在のマクロブロックのＤＣＴ成分は例えば
復号器の揮発性メモリに一時的に記憶される。図７のフ
ローチャートは、本発明による第２の検出エレメントの
原理を例示している。
【００２４】ステップ６１０において、現在のブロック
の情報から基準値Ｘｃｕｒｒが導出される。基準値Ｘｃ
ｕｒｒは、ブロック同士の境界をおそらく越えて続くで
あろう特徴を表し、後述するように、それを何通りかの
方法で導出することができる。ステップ６２０におい
て、少なくとも１つの隣り合うブロックの情報から、対
応する基準値Ｘｎｅｉｇｈが導出される。ステップ６３
０において、ブロックからブロックへと移行するとき、
調べられている特徴の変化Δを表す差値を導出するため
に、基準値同士が比較される。その変化が第２のスレシ
ョルド値ＴＨ２より大きければ（ステップ６４０）、誤
りが検出されている（ステップ６６０）。もしその変化
が第２のスレショルドＴＨ２を上回らなければ、誤りは
検出されていない（ステップ６５０）。第２のスレショ
ルドＴＨ２は、例えば所定の定数である。
の情報から基準値Ｘｃｕｒｒが導出される。基準値Ｘｃ
ｕｒｒは、ブロック同士の境界をおそらく越えて続くで
あろう特徴を表し、後述するように、それを何通りかの
方法で導出することができる。ステップ６２０におい
て、少なくとも１つの隣り合うブロックの情報から、対
応する基準値Ｘｎｅｉｇｈが導出される。ステップ６３
０において、ブロックからブロックへと移行するとき、
調べられている特徴の変化Δを表す差値を導出するため
に、基準値同士が比較される。その変化が第２のスレシ
ョルド値ＴＨ２より大きければ（ステップ６４０）、誤
りが検出されている（ステップ６６０）。もしその変化
が第２のスレショルドＴＨ２を上回らなければ、誤りは
検出されていない（ステップ６５０）。第２のスレショ
ルドＴＨ２は、例えば所定の定数である。
【００２５】本発明のある実施例では、基準値Ｘｃｕｒ
ｒはブロックのＤＣ成分である。前に復号化されたブロ
ックだけが比較のために利用可能である。復号化中に誤
り検査方法が使用されるならば、左、上、左上及び右上
のブロックのＤＣ成分を比較に利用することができる。
フレーム全体が復号化された後にはじめて検査が行われ
るのであれば、いくつかのブロックに隣り合うブロック
も現在のブロックの下の行の中に見いだされる可能性が
ある。もし現在のブロックと、利用できる全ての隣り合
うブロックとの差が一定のスレショルドより大きけれ
ば、現在のブロックに誤りが検出されている。実際に
は、低解像度画像では隣接する２つのブロックの内容が
非常に異なっていることがあるので、そのスレショルド
は高い方がよい。いずれにせよ、このチェックはわずか
数個の比較とＤＣ成分の記憶とを必要とするに過ぎない
ので、復号化プロセスをあまり複雑にはしない。
ｒはブロックのＤＣ成分である。前に復号化されたブロ
ックだけが比較のために利用可能である。復号化中に誤
り検査方法が使用されるならば、左、上、左上及び右上
のブロックのＤＣ成分を比較に利用することができる。
フレーム全体が復号化された後にはじめて検査が行われ
るのであれば、いくつかのブロックに隣り合うブロック
も現在のブロックの下の行の中に見いだされる可能性が
ある。もし現在のブロックと、利用できる全ての隣り合
うブロックとの差が一定のスレショルドより大きけれ
ば、現在のブロックに誤りが検出されている。実際に
は、低解像度画像では隣接する２つのブロックの内容が
非常に異なっていることがあるので、そのスレショルド
は高い方がよい。いずれにせよ、このチェックはわずか
数個の比較とＤＣ成分の記憶とを必要とするに過ぎない
ので、復号化プロセスをあまり複雑にはしない。
【００２６】本発明の他の実施例では、調べられるブロ
ックは数個のサブブロックに分割される（例えば、８*
８ブロックは４つの４* ４サブブロックに分割され
る）。各サブブロックについてピクセル値の平均値が計
算され、その計算された値は、そのサブブロックについ
ての基準値Ｘｃｕｒｒとして使われる。隣り合うブロッ
クの基準値Ｘｎｅｉｇｈとして、左、上、左上及び右上
方向の隣接サブブロックの平均されたピクセル値が使わ
れる。変差Δは、基準値Ｘｃｕｒｒと、調べられる隣り
合うサブブロックの各々の平均画素値Ｘｎｅｉｇｈとの
差である。サブブロックと、その隣の調べられるサブブ
ロックのいずれかとについてのこの差Δが所定の第２の
スレショルドＴＨ２より大きければ、誤りが検出されて
いる。いずれにせよ、この場合のその様な解釈が大胆す
ぎると思われるならば、そのブロックには怪しいという
印を付けることができ、他の何らかのチェックを行うこ
とで当該チェックを補うことができる。
ックは数個のサブブロックに分割される（例えば、８*
８ブロックは４つの４* ４サブブロックに分割され
る）。各サブブロックについてピクセル値の平均値が計
算され、その計算された値は、そのサブブロックについ
ての基準値Ｘｃｕｒｒとして使われる。隣り合うブロッ
クの基準値Ｘｎｅｉｇｈとして、左、上、左上及び右上
方向の隣接サブブロックの平均されたピクセル値が使わ
れる。変差Δは、基準値Ｘｃｕｒｒと、調べられる隣り
合うサブブロックの各々の平均画素値Ｘｎｅｉｇｈとの
差である。サブブロックと、その隣の調べられるサブブ
ロックのいずれかとについてのこの差Δが所定の第２の
スレショルドＴＨ２より大きければ、誤りが検出されて
いる。いずれにせよ、この場合のその様な解釈が大胆す
ぎると思われるならば、そのブロックには怪しいという
印を付けることができ、他の何らかのチェックを行うこ
とで当該チェックを補うことができる。
【００２７】本発明の方法のもう１つの実施例では、ブ
ロックの境界のピクセルは、画像の連続性を調べるため
に使われる。従来技術の解決策では、ブロックの境界上
に直に存在しているピクセルだけが調べられるが、実際
には、それで充分だとは判明していない。強化された方
法では、境界に近いピクセル値の変化の勾配も考慮され
る。第２の検出ブロックのこの様な実施例の原理が図８
に例示されている。
ロックの境界のピクセルは、画像の連続性を調べるため
に使われる。従来技術の解決策では、ブロックの境界上
に直に存在しているピクセルだけが調べられるが、実際
には、それで充分だとは判明していない。強化された方
法では、境界に近いピクセル値の変化の勾配も考慮され
る。第２の検出ブロックのこの様な実施例の原理が図８
に例示されている。
【００２８】図８の８ａでは、隣り合う２つのブロック
７１及び７２の間の境界７０が示されている。点７３
は、境界７０に最も近い第１のブロック７１のピクセル
の選択された成分（例えば輝度）の値を表している。点
７４は第２のブロック７２の、境界に最も近くてかつ点
７３のピクセルと同じ行の中にあるピクセルについての
同じ成分の値を表している。点７５は、第１のブロック
７１の、境界ピクセル７３の隣に境界７０から更に離れ
て位置しているピクセルについての同じ成分の値を表し
ている。点７６は、第２のブロック７２の、境界ピクセ
ル７４の隣に境界７０から更に離れて位置しているピク
セルについての同じ成分の値を表している。始めに、境
界ピクセル７３及び７４の値の差ｄ１が導出される。次
に、点７３／７５及び７４／７６の値からそれぞれ値７
７及び７８が外挿法により推定される。外挿された値同
士の差ｄ２が計算され、差ｄ１及びｄ２が互いに比較さ
れる。それらのうちの小さい方ｍｉｎ（ｄ１，ｄ２）
が、ブロック７１の境界７０について計算される累積和
Δに加算される。総和Δは所定の第２のスレショルドＴ
Ｈ２と比較され、もし和ΔがＴＨ２より大きければ、他
方の境界が同様に検査される。全ての境界の和がＴＨ２
を上回っていれば、誤りが検出されている。この例で
は、輝度成分が計算のために使われるが、一般に輝度成
分及びクロミナンス成分（Ｙ，Ｕ，Ｖ）のいずれを使っ
ても良く、及び／又は各成分についてチェックを別々に
実行しても良い。１つ／２つ／３つの境界の和がＴＨ２
を上回る値を示したならば誤りを指摘するように基準を
修正することもできる。図８の８ｂでは、図８の８ａと
同じ配列が、異なるピクセル値及び異なる変化方向で示
されている。外挿法で、当該ブロックの妥当性／非妥当
性に関する不必要に早まった結論を回避することができ
る。
７１及び７２の間の境界７０が示されている。点７３
は、境界７０に最も近い第１のブロック７１のピクセル
の選択された成分（例えば輝度）の値を表している。点
７４は第２のブロック７２の、境界に最も近くてかつ点
７３のピクセルと同じ行の中にあるピクセルについての
同じ成分の値を表している。点７５は、第１のブロック
７１の、境界ピクセル７３の隣に境界７０から更に離れ
て位置しているピクセルについての同じ成分の値を表し
ている。点７６は、第２のブロック７２の、境界ピクセ
ル７４の隣に境界７０から更に離れて位置しているピク
セルについての同じ成分の値を表している。始めに、境
界ピクセル７３及び７４の値の差ｄ１が導出される。次
に、点７３／７５及び７４／７６の値からそれぞれ値７
７及び７８が外挿法により推定される。外挿された値同
士の差ｄ２が計算され、差ｄ１及びｄ２が互いに比較さ
れる。それらのうちの小さい方ｍｉｎ（ｄ１，ｄ２）
が、ブロック７１の境界７０について計算される累積和
Δに加算される。総和Δは所定の第２のスレショルドＴ
Ｈ２と比較され、もし和ΔがＴＨ２より大きければ、他
方の境界が同様に検査される。全ての境界の和がＴＨ２
を上回っていれば、誤りが検出されている。この例で
は、輝度成分が計算のために使われるが、一般に輝度成
分及びクロミナンス成分（Ｙ，Ｕ，Ｖ）のいずれを使っ
ても良く、及び／又は各成分についてチェックを別々に
実行しても良い。１つ／２つ／３つの境界の和がＴＨ２
を上回る値を示したならば誤りを指摘するように基準を
修正することもできる。図８の８ｂでは、図８の８ａと
同じ配列が、異なるピクセル値及び異なる変化方向で示
されている。外挿法で、当該ブロックの妥当性／非妥当
性に関する不必要に早まった結論を回避することができ
る。
【００２９】従来技術文献にブロック境界のためのエッ
ジ検出器が提示されている。ここで示されている実施例
を、例えばコンパス勾配オペレータ（compass gradient
operators）などの、その様なエッジ検出器を用いるこ
とで補うことができる。
ジ検出器が提示されている。ここで示されている実施例
を、例えばコンパス勾配オペレータ（compass gradient
operators）などの、その様なエッジ検出器を用いるこ
とで補うことができる。
【００３０】３．第３の検出エレメント（３６） マクロブロック・レベルで、複数のブロックに関する情
報を調べることができると共に、ブロック同士の偏差を
いっそう詳しく調べることができる。マクロブロック・
チェックの目的のために、マクロブロックのＤＣＴ成分
の全部又は選択された集合がデコーダの揮発性メモリに
蓄積される。図９のフローチャートは、マクロブロック
・レベルでの検出方法の原理を例示している。ステップ
８１０及び８２０において、第１のブロックＢｊが受け
取られて、当該マクロブロック全体にわたってその変化
が調べられることになる特徴を表す一定のマクロブロッ
ク・レベル・パラメータｑｊがメモリに記憶される８３
０。カウンタｊが値Ｊに達するまで、ループ８１０〜８
５０の進行に伴って情報が集められるが（ステップ８３
０）、それはマクロブロック中のブロックの個数に等し
い。マクロブロック全体が受け取られて、全てのブロッ
クについてのパラメータｑｊが記憶されると、基準値Ｑ
ｃｕｒｒ又は基準値の集合がパラメータｑｊから導出さ
れる８６０。Ｑｃｕｒｒは、一定の所定基準を満たすた
めにＱｃｕｒｒについて設定されている限界を表す第３
のスレショルドＴＨ３と照合される８７０。もし基準値
Ｑｃｕｒｒが第３のスレショルドＴＨ３より小さけれ
ば、誤りは検出されていない（ステップ８９０）。基準
値がＴＨ３を上回るならば、誤りが検出されている（ス
テップ８９５）。
報を調べることができると共に、ブロック同士の偏差を
いっそう詳しく調べることができる。マクロブロック・
チェックの目的のために、マクロブロックのＤＣＴ成分
の全部又は選択された集合がデコーダの揮発性メモリに
蓄積される。図９のフローチャートは、マクロブロック
・レベルでの検出方法の原理を例示している。ステップ
８１０及び８２０において、第１のブロックＢｊが受け
取られて、当該マクロブロック全体にわたってその変化
が調べられることになる特徴を表す一定のマクロブロッ
ク・レベル・パラメータｑｊがメモリに記憶される８３
０。カウンタｊが値Ｊに達するまで、ループ８１０〜８
５０の進行に伴って情報が集められるが（ステップ８３
０）、それはマクロブロック中のブロックの個数に等し
い。マクロブロック全体が受け取られて、全てのブロッ
クについてのパラメータｑｊが記憶されると、基準値Ｑ
ｃｕｒｒ又は基準値の集合がパラメータｑｊから導出さ
れる８６０。Ｑｃｕｒｒは、一定の所定基準を満たすた
めにＱｃｕｒｒについて設定されている限界を表す第３
のスレショルドＴＨ３と照合される８７０。もし基準値
Ｑｃｕｒｒが第３のスレショルドＴＨ３より小さけれ
ば、誤りは検出されていない（ステップ８９０）。基準
値がＴＨ３を上回るならば、誤りが検出されている（ス
テップ８９５）。
【００３１】図９に示されている方法の実施例では、基
準値及びチェック基準は、局所スペクトル相関に基づい
ている。実際にはフレームの視認可能な形状情報のほと
んどを輝度成分で発見することができる。従って、輝度
ブロックに小さな変化があれば、マクロブロックのクロ
ミナンス・ブロックで生じる変化も多くはないはずであ
る。画像が例えば４：２：０フォーマット（即ち４個の
Ｙブロックが１個のＵブロック及び１個のＶブロックを
伴うフォーマット）を用いることによってサンプリング
される場合には、特にそういうことが言える。図１０の
フローチャートは、本発明の方法のその様な実施例を例
示している。
準値及びチェック基準は、局所スペクトル相関に基づい
ている。実際にはフレームの視認可能な形状情報のほと
んどを輝度成分で発見することができる。従って、輝度
ブロックに小さな変化があれば、マクロブロックのクロ
ミナンス・ブロックで生じる変化も多くはないはずであ
る。画像が例えば４：２：０フォーマット（即ち４個の
Ｙブロックが１個のＵブロック及び１個のＶブロックを
伴うフォーマット）を用いることによってサンプリング
される場合には、特にそういうことが言える。図１０の
フローチャートは、本発明の方法のその様な実施例を例
示している。
【００３２】ステップ８１０〜８５０は、ステップ８３
１においてパラメータｑm がマクロブロックのＵ，Ｖ，
及びＹブロック（ＡＣu, m、ＡＣv, m、ＡＣy, m）にお
けるＡＣ係数の値の変化を表していることを除いて、図
９で示されているプロセスに従う。ステップ８６１にお
いて、Ｕ及びＶブロックのＡＣ成分の変化量を表す値Ａ
ＣU, M及びＡＣV, Mが導出され、処理されて第３のスレ
ショルドを表す値ＴＨ３となる。ステップ８６２におい
て、輝度（Ｙ）ブロックのＡＣ成分の変化を表す対応す
る基準値ＡＣY, Jが導出され、処理されて第３の基準値
Ｑｃｕｒｒとなる。ブロック８７１において、基準値Ｑ
ｃｕｒｒとスレショルド値ＴＨ３とが比較され、クロミ
ナンス成分（Ｕ及びＶ）の変化に基づくスレショルドが
輝度（Ｙ）成分の変化に基づく基準数より遙かに大きい
ならば（ステップ８８０）、そのマクロブロックは崩れ
ていると考えられる（ステップ８９５）。さもなけれ
ば、マクロブロック・レベルでは誤りは検出されていな
い（ステップ８９０）。もう一つの可能性は、例えばＵ
ブロック及びＶブロックのＤＣ成分の変化を、先に復号
化されたマクロブロックと比較してＹ成分の変化と照合
して調べることである。もし例えばＵブロック及びＶブ
ロックのＤＣ成分の変化が１つの補助第３スレショルド
を上回っていてかつＹブロックＤＣ成分の変化が他の補
助第３スレショルドを上回っていなければ、誤りが検出
されている。
１においてパラメータｑm がマクロブロックのＵ，Ｖ，
及びＹブロック（ＡＣu, m、ＡＣv, m、ＡＣy, m）にお
けるＡＣ係数の値の変化を表していることを除いて、図
９で示されているプロセスに従う。ステップ８６１にお
いて、Ｕ及びＶブロックのＡＣ成分の変化量を表す値Ａ
ＣU, M及びＡＣV, Mが導出され、処理されて第３のスレ
ショルドを表す値ＴＨ３となる。ステップ８６２におい
て、輝度（Ｙ）ブロックのＡＣ成分の変化を表す対応す
る基準値ＡＣY, Jが導出され、処理されて第３の基準値
Ｑｃｕｒｒとなる。ブロック８７１において、基準値Ｑ
ｃｕｒｒとスレショルド値ＴＨ３とが比較され、クロミ
ナンス成分（Ｕ及びＶ）の変化に基づくスレショルドが
輝度（Ｙ）成分の変化に基づく基準数より遙かに大きい
ならば（ステップ８８０）、そのマクロブロックは崩れ
ていると考えられる（ステップ８９５）。さもなけれ
ば、マクロブロック・レベルでは誤りは検出されていな
い（ステップ８９０）。もう一つの可能性は、例えばＵ
ブロック及びＶブロックのＤＣ成分の変化を、先に復号
化されたマクロブロックと比較してＹ成分の変化と照合
して調べることである。もし例えばＵブロック及びＶブ
ロックのＤＣ成分の変化が１つの補助第３スレショルド
を上回っていてかつＹブロックＤＣ成分の変化が他の補
助第３スレショルドを上回っていなければ、誤りが検出
されている。
【００３３】図１１のフローチャートは、本発明の方法
の他の実施例を例示している。受け取りループのステッ
プ８３２で蓄積するパラメータは、マクロブロックのＤ
Ｃ成分と、マクロブロックのＡＣ成分の絶対総和とであ
る。ステップ８６３において、マクロブロック全体にわ
たるＤＣ成分の変化の大きさが計算され、ＤＣ成分の変
化を生じさせるのに必要なＡＣ成分の絶対総和が推定さ
れる。推定された総和は第３のスレショルド値ＴＨ３と
して使われ、ＤＣ成分の実際の変化は第３の基準値とし
て使われる。もしＤＣ成分が顕著に変化していてかつＡ
Ｃ係数がその変化を滑らかにするのに充分でなければ、
係数の適合性は疑わしい（ステップ８７２）。基準値Ｑ
ｃｕｒｒをスレショルド値ＴＨ３と比較することにより
（ステップ８８０）、マクロブロックが崩れている（ス
テップ８９５）、あるいは崩れてはいない（ステップ８
９０）と解釈することができる。
の他の実施例を例示している。受け取りループのステッ
プ８３２で蓄積するパラメータは、マクロブロックのＤ
Ｃ成分と、マクロブロックのＡＣ成分の絶対総和とであ
る。ステップ８６３において、マクロブロック全体にわ
たるＤＣ成分の変化の大きさが計算され、ＤＣ成分の変
化を生じさせるのに必要なＡＣ成分の絶対総和が推定さ
れる。推定された総和は第３のスレショルド値ＴＨ３と
して使われ、ＤＣ成分の実際の変化は第３の基準値とし
て使われる。もしＤＣ成分が顕著に変化していてかつＡ
Ｃ係数がその変化を滑らかにするのに充分でなければ、
係数の適合性は疑わしい（ステップ８７２）。基準値Ｑ
ｃｕｒｒをスレショルド値ＴＨ３と比較することにより
（ステップ８８０）、マクロブロックが崩れている（ス
テップ８９５）、あるいは崩れてはいない（ステップ８
９０）と解釈することができる。
【００３４】ここではこの方法をマクロブロック・レベ
ルで説明したが、マクロブロックを行でチェックするこ
ともできる。ビデオ・フレームの最初の行では、比較の
ために利用することのできる隣り合うブロック又はマク
ロブロックは多くない。その第１行に急な変化が無くて
値が典型的な範囲内に属するならば、それは崩れていな
いと考えることができる。もし疑わしければ、第１行の
値を第２行と一緒にチェックするべきである。もし第１
行の値が第２行の値とは非常に違っていて、第２行の値
が急な変化を含んでいなければ、第１行はおそらく崩れ
ている。
ルで説明したが、マクロブロックを行でチェックするこ
ともできる。ビデオ・フレームの最初の行では、比較の
ために利用することのできる隣り合うブロック又はマク
ロブロックは多くない。その第１行に急な変化が無くて
値が典型的な範囲内に属するならば、それは崩れていな
いと考えることができる。もし疑わしければ、第１行の
値を第２行と一緒にチェックするべきである。もし第１
行の値が第２行の値とは非常に違っていて、第２行の値
が急な変化を含んでいなければ、第１行はおそらく崩れ
ている。
【００３５】図１２のフローチャートは、本発明の実施
例の機能構成を例示しており、この構成では、前述した
３つのエレメントの全てが復号化プロセスに含まれてい
る。始めに、ブロック内のＤＣＴ成分をチェックする方
法９０が実行され、崩れているブロックがこれで除去さ
れる。ＤＣＴチェックに合格するブロックについてもブ
ロック・チェック９１が実行される。ここでも、崩れて
いるブロックが除去され、疑わしいブロック（即ち、誤
りを検出しないけれども疑わしいブロックに印を付ける
検出方法に落第したブロック）はマクロブロック・チェ
ック９２を受けるべく転送される。ＤＣＴチェック及び
ブロック・チェック及び／又はマクロブロック・チェッ
クに合格するブロックは正常に転送され９３、それらの
いずれかのチェックで不合格になるブロックは、誤り隠
蔽方法を開始させる誤り表示と共に転送される。
例の機能構成を例示しており、この構成では、前述した
３つのエレメントの全てが復号化プロセスに含まれてい
る。始めに、ブロック内のＤＣＴ成分をチェックする方
法９０が実行され、崩れているブロックがこれで除去さ
れる。ＤＣＴチェックに合格するブロックについてもブ
ロック・チェック９１が実行される。ここでも、崩れて
いるブロックが除去され、疑わしいブロック（即ち、誤
りを検出しないけれども疑わしいブロックに印を付ける
検出方法に落第したブロック）はマクロブロック・チェ
ック９２を受けるべく転送される。ＤＣＴチェック及び
ブロック・チェック及び／又はマクロブロック・チェッ
クに合格するブロックは正常に転送され９３、それらの
いずれかのチェックで不合格になるブロックは、誤り隠
蔽方法を開始させる誤り表示と共に転送される。
【００３６】図１３のブロック図は、本発明のビデオ画
像復号器１００の実施例を例示している。この復号器
は、可変長コードの形のビデオ画像情報を受け取るため
の入力ポート１０１と、処理済みのビデオ画像情報を出
力するための出力ポート１０２とを備える。復号器は、
更に、図１に示されている復号化のステップを実行する
少なくとも１つのプロセッサ１０３を備える。本発明の
復号器のプロセッサは、更に、復号化プロセスの前記の
３つの検出ブロックのうちの少なくとも２つを包含して
いて、容認されたならば検出された誤りの表示を出力ビ
デオ画像情報に付加するように構成されている。このプ
ロセッサはまた、復号化されたブロック又はマクロブロ
ックに誤りが検出されると所定の誤り隠蔽プロセスを開
始するようにも構成されている。メモリ１０４は、少な
くとも、復号化プロセス中にデータを保存しておくため
の揮発性メモリを含んでいる。
像復号器１００の実施例を例示している。この復号器
は、可変長コードの形のビデオ画像情報を受け取るため
の入力ポート１０１と、処理済みのビデオ画像情報を出
力するための出力ポート１０２とを備える。復号器は、
更に、図１に示されている復号化のステップを実行する
少なくとも１つのプロセッサ１０３を備える。本発明の
復号器のプロセッサは、更に、復号化プロセスの前記の
３つの検出ブロックのうちの少なくとも２つを包含して
いて、容認されたならば検出された誤りの表示を出力ビ
デオ画像情報に付加するように構成されている。このプ
ロセッサはまた、復号化されたブロック又はマクロブロ
ックに誤りが検出されると所定の誤り隠蔽プロセスを開
始するようにも構成されている。メモリ１０４は、少な
くとも、復号化プロセス中にデータを保存しておくため
の揮発性メモリを含んでいる。
【００３７】図１４の機能ブロック図は、本発明の一般
的な移動マルチメディア・テレビ電話端末を示してい
る。この端末は、一般的に送信手段（例えば、チャネル
符号化、インターリーブ、暗号化、変調及び無線送信）
及び受信手段（無線受信、復調、暗号解読、及びチャネ
ル復号化）を備える無線周波数ユニット１１０と、双方
向フィルタと、アンテナとを備える。受信された同期ビ
ット・ストリームは、端末の多重化／多重分離プロトコ
ル・ユニット１１１に送られる。多重化プロトコルは、
送信されるビデオ・ストリーム、オーディオ・ストリー
ム、データ・ストリーム、及び制御ストリームを単一の
ビット・ストリームに多重化し、受信されたビット・ス
トリームを種々のマルチメディア・ストリームに多重分
離する。更に、それは、各メディア・タイプに適切な、
論理フレーミング、一連番号付け、誤り検出及び誤り訂
正を実行する。システム制御１１３の制御プロトコル１
１２は、マルチメディア端末の動作のための終端間シグ
ナリングを提供すると共に、他の全ての終端間システム
機能にシグナリングする。それは、能力交換、コマンド
及び指示のシグナリング、並びに論理チャネルの内容を
開いて完全に記述するためのメッセージを提供する。デ
ータ・プロトコル１１４は、電子ホワイトボード、静止
画像転送、ファイル交換、データベース・アクセス、オ
ーディオグラフィックス会議、遠隔装置制御、ネットワ
ーク・プロトコルなどのデータ・アプリケーションを支
援する。オーディオ・コーデック１１６は、オーディオ
Ｉ／Ｏ装置１１７からのオーディオ信号を送信するため
に符号化すると共に、符号化されているオーディオ・ス
トリームを復号化する。復号化されたオーディオ信号
は、オーディオＩ／Ｏ装置１１７を用いることにより再
生される。ビデオ・コーデック１１８はビデオ符号器１
１９及びビデオ復号器１００を備え、ビデオＩ／Ｏ装置
１２０とやりとりするビデオ・ストリームの冗長性低減
符号化及び復号化を実行する。本発明の端末は、図１３
との関連で前述したビデオ復号器１００を備える。
的な移動マルチメディア・テレビ電話端末を示してい
る。この端末は、一般的に送信手段（例えば、チャネル
符号化、インターリーブ、暗号化、変調及び無線送信）
及び受信手段（無線受信、復調、暗号解読、及びチャネ
ル復号化）を備える無線周波数ユニット１１０と、双方
向フィルタと、アンテナとを備える。受信された同期ビ
ット・ストリームは、端末の多重化／多重分離プロトコ
ル・ユニット１１１に送られる。多重化プロトコルは、
送信されるビデオ・ストリーム、オーディオ・ストリー
ム、データ・ストリーム、及び制御ストリームを単一の
ビット・ストリームに多重化し、受信されたビット・ス
トリームを種々のマルチメディア・ストリームに多重分
離する。更に、それは、各メディア・タイプに適切な、
論理フレーミング、一連番号付け、誤り検出及び誤り訂
正を実行する。システム制御１１３の制御プロトコル１
１２は、マルチメディア端末の動作のための終端間シグ
ナリングを提供すると共に、他の全ての終端間システム
機能にシグナリングする。それは、能力交換、コマンド
及び指示のシグナリング、並びに論理チャネルの内容を
開いて完全に記述するためのメッセージを提供する。デ
ータ・プロトコル１１４は、電子ホワイトボード、静止
画像転送、ファイル交換、データベース・アクセス、オ
ーディオグラフィックス会議、遠隔装置制御、ネットワ
ーク・プロトコルなどのデータ・アプリケーションを支
援する。オーディオ・コーデック１１６は、オーディオ
Ｉ／Ｏ装置１１７からのオーディオ信号を送信するため
に符号化すると共に、符号化されているオーディオ・ス
トリームを復号化する。復号化されたオーディオ信号
は、オーディオＩ／Ｏ装置１１７を用いることにより再
生される。ビデオ・コーデック１１８はビデオ符号器１
１９及びビデオ復号器１００を備え、ビデオＩ／Ｏ装置
１２０とやりとりするビデオ・ストリームの冗長性低減
符号化及び復号化を実行する。本発明の端末は、図１３
との関連で前述したビデオ復号器１００を備える。
【００３８】以上の解説は、本発明の実施例を例示して
説明している。本発明は上記の実施例の詳細に限定され
るものではなくて、本発明の特徴から逸脱せずに本発明
を他の実施例で実施し得ることは当業者にとっては自明
のことである。特に、検出される誤りの決定と、スレシ
ョルドの選択とを、用途に応じて多様に調整することが
できる。従って、提示されている実施例は、説明をする
ものであって、限定をするものではないと解されるべき
である。従って、本発明を実施し使用する可能性は添付
の請求項のみにより限定される。
説明している。本発明は上記の実施例の詳細に限定され
るものではなくて、本発明の特徴から逸脱せずに本発明
を他の実施例で実施し得ることは当業者にとっては自明
のことである。特に、検出される誤りの決定と、スレシ
ョルドの選択とを、用途に応じて多様に調整することが
できる。従って、提示されている実施例は、説明をする
ものであって、限定をするものではないと解されるべき
である。従って、本発明を実施し使用する可能性は添付
の請求項のみにより限定される。
【図１】イントラ符号化されているビデオ画像を符号化
及び復号化する段階を例示する図である。
及び復号化する段階を例示する図である。
【図２】Ｈ．２６１規格によるビデオ画像の構成を例示
する図である。
する図である。
【図３】本発明の方法のエレメントを例示する図であ
る。
る。
【図４】ＤＣＴマトリクスの構成及びＤＣＴマトリクス
を分割する種々の方法を例示する図である。
を分割する種々の方法を例示する図である。
【図５】本発明の第１の検出エレメントの原理を示すフ
ローチャートである。
ローチャートである。
【図６】図５の方法の実施例を示すフローチャートであ
る。
る。
【図７】本発明による第２の検出ブロックの原理を例示
する図である。
する図である。
【図８】第２の検出ブロックの実施例の原理を例示する
図である。
図である。
【図９】本発明による第３の検出ブロックの原理を例示
する図である。
する図である。
【図１０】本発明による第３の検出ブロックの実施例を
例示する図である。
例示する図である。
【図１１】本発明の方法の他の実施例を例示する図であ
る。
る。
【図１２】本発明の実施例の機能構成を例示する図であ
る。
る。
【図１３】本発明のビデオ画像復号器の実施例を例示す
る図である。
る図である。
【図１４】本発明の移動端末の実施例を例示する図であ
る。
る。
１００…ビデオ復号器 １０３…プロセッサ １０４…メモリ １１９…ビデオ符号器
Claims (18)
- 【請求項１】 圧縮ビデオ・データ復号化方法であっ
て、 ビデオ・データ・ブロックの空間周波数分布に関する情
報をピクセル値に変換するステップを備える圧縮ビデオ
・データ復号化方法において、 前記変換の前に、前記ブロック内の空間周波数分布に関
する情報の変化を表す第１の基準値（Ｘｒｅｆ）を生成
し、 前記変換の後に、前記ブロックと、前に変換された少な
くとも１つのビデオ・データ・ブロックとの間の一定の
情報の変化の唐突さを表す第２の基準値（Δ）を生成
し、 前記第１の基準値（Ｘｒｅｆ）を一定の第１のスレショ
ルド値（ＴＨ１）と比較すると共に前記第２の基準値
（Δ）を一定の第２のスレショルド値（ＴＨ２）と比較
し、 前記第１の基準値（Ｘｒｅｆ）及び前記第２の基準値
（Δ）のいずれかがそれぞれ前記第１のスレショルド値
（ＴＨ１）及び前記第２のスレショルド値（ＴＨ２）よ
り大きいことに対する応答として、前記ブロックにおけ
る誤りを検出することを特徴とする圧縮ビデオ・データ
復号化方法。 - 【請求項２】 マクロブロックを形成する数個のブロッ
クを復号化した後に、前記マクロブロック内の一定の情
報の変化の唐突さを表す第３の基準値（Ｑｃｕｒｒ）を
生成し、 前記第３の基準値（Ｘｒｅｆ）を一定の第３のスレショ
ルド値（ＴＨ３）と比較し、 前記第３の基準値が前記第３のスレショルド値より大き
いことに対する応答として、前記マクロブロックに誤り
を検出することを特徴とする請求項１に記載の方法。 - 【請求項３】 マクロブロックを形成する数個のブロッ
クを復号化した後に、前記マクロブロックと少なくとも
１つの前に復号化されたマクロブロックとの間での一定
の情報の変化の唐突さを表す第３の基準値（Ｑｃｕｒ
ｒ）を生成し、 前記第３の基準値（Ｘｒｅｆ）を一定の第３のスレショ
ルド値（ＴＨ３）と比較し、 前記第３の基準値が前記第３のスレショルド値より大き
いことに対する応答として、前記マクロブロックに誤り
を検出することを特徴とする請求項１又は２に記載の方
法。 - 【請求項４】 検出された前記誤りに対する応答とし
て、誤り隠蔽プロセスを開始することを特徴とする請求
項１〜３のいずれか一項に記載の方法。 - 【請求項５】 前記変換は前記ブロックの逆ＤＣＴ変換
であり、前記方法は、 第１の部分の係数は第２の部分の係数より高い周波数と
関連する、少なくとも２つの部分に前記ブロックのＤＣ
Ｔ係数を分割し、 前記第１の部分の係数（ＡＣｊ）から第１の基準値（Ｘ
ｒｅｆ）を生成し、 前記第１の部分に属していない係数の集合の中の係数か
ら第１のスレショルド値（ＴＨ１ｂ）を生成することを
更に備えることを特徴とする請求項１に記載の方法。 - 【請求項６】 前記第１部分に属していない係数からＤ
ＣＴ係数の少なくとも２つの集合を形成し、 ＤＣＴ係数の形成された集合の各々について第１の基準
値（ＡＣmax, k）を生成し、 ＤＣＴ係数の形成された集合の各々について対応する第
１のスレショルド値（ＴＨ１ａ）を生成し、 前記集合の各々について、前記集合の前記第１の基準値
（ＡＣmax, k）を前記集合の前記第１のスレショルド値
（ＴＨ１ａ）と比較し、 前記集合の前記第１の基準値（ＡＣmax, k）のいずれか
が前記集合の対応する前記第１のスレショルド値（ＴＨ
１ａ）より大きいことに対する応答として、前記ブロッ
クに誤りを検出することを備えることを特徴とする請求
項５に記載の方法。 - 【請求項７】 前記第１の基準値はＤＣＴ係数の集合の
最大の絶対係数値（ＡＣmax, k）であり、前記第１のス
レショルド値は、非ゼロ係数値の個数が１より大きいこ
とに対する応答として、前記最大絶対係数値（ＡＣ
max, k）を除いた係数値の絶対総和（ａｂｓｕｍk ）に
加算される所定の定数値（Ｃ１）を含むことを特徴とす
る請求項６に記載の方法。 - 【請求項８】 現在のブロック（Ｘｃｕｒｒ）のＤＣ成
分と、少なくとも１つの前に変換されたブロック（Ｘｎ
ｅｉｇｈ）のＤＣ成分との差から第２の基準値（Δ）を
生成することを特徴とする請求項１又は２に記載の方
法。 - 【請求項９】 前記第２の基準値の生成は、 各ブロックを一定数のサブブロックに分割し、 前記サブブロックについてのピクセル値の平均値を計算
し、 現在のサブブロック及び少なくとも１つの他の隣接する
サブブロックの平均されたピクセル値の差から第２の基
準値（Δ）を生成することを備えることを特徴とする請
求項１に記載の方法。 - 【請求項１０】 各ビデオ・データ・ブロックは行をな
すように配列された数個のピクセルを備え、境界ピクセ
ル（７３，７４）は２つのブロック間の境界（７０）に
最も近いピクセルであり、前記第２の基準値の生成は、
ブロックの境界（７０）については、 前記境界ピクセル（７３）のピクセル値と、隣接するブ
ロックの同じ行の中の最も近い前記境界ピクセル（７
４）のピクセル値との差を表す第１の差値（ｄ１）を計
算し、 各前記境界ピクセル（７３，７４）と、同じブロック
（７５，７６）の同じ行の中の最も近いピクセルとから
外挿された境界ピクセル値（７７，７８）を計算し、 その外挿された境界ピクセル値（７７，７８）同士の差
から成る第２の差値（ｄ２）を計算し、 前記第１の差値（ｄ１）と前記第２の差値（ｄ２）とを
比較し、 前記第１及び第２の差値のうちの小さい方を、前記ブロ
ックの境界（７０）の全てのピクセルについて同様に計
算された差の総和に加算し、 各ブロックの境界について、前記境界の全てのピクセル
の差の前記総和から第２の基準値（Δ）を生成すること
を備えることを特徴とする請求項１に記載の方法。 - 【請求項１１】 前記マクロブロックのＡＣ係数を少な
くともＵブロック、Ｖブロック及びＹブロックの値のグ
ループ（ＡＣU, j、ＡＣV, j、ＡＣY, j）に分割し、 前記マクロブロックの中のＵブロック、Ｖブロック、及
びＹブロックのＡＣ値の変化を表す値の集合（Ａ
ＣU, j、ＡＣV, j、ＡＣY, j）を生成し、 Ｕ成分及びＶ成分（ＡＣU, j、ＡＣV, j）の変化の大き
さから第３の基準値（Ｑｃｕｒｒ）を生成し、 対応するＹ成分（ＡＣY, j）の変化の大きさから第３の
スレショルド値（ＴＨ３）を生成することを特徴とする
請求項２に記載の方法。 - 【請求項１２】 前記マクロブロックと、少なくとも１
つの前に復号化されたマクロブロックとのＵブロック及
びＶブロックのＤＣ値同士の差から前記第３の基準値
（Ｑｃｕｒｒ）を生成し、 前記マクロブロックと、少なくとも１つの前に復号化さ
れたマクロブロックとのＹブロックのＤＣ値同士の差か
ら第３のスレショルド値（ＴＨ３）を生成することを特
徴とする請求項３に記載の方法。 - 【請求項１３】 マクロブロック内の数個のブロックに
おけるＡＣ係数の値の絶対総和から前記第３の基準値を
生成し、 前記数個のブロックにおけるＤＣ係数の変化を生じさせ
るのに必要なＡＣ係数の値の推定された総和から前記第
３のスレショルド値（ＴＨ３）を生成することを特徴と
する請求項２に記載の方法。 - 【請求項１４】 前記第１の基準値及び前記第２の基準
値のいずれかがそれぞれ前記第１のスレショルド値及び
前記第２のスレショルド値より大きいことに対する応答
として、前記ブロックに疑わしいという印を付け、 疑わしいという印が付けられている少なくとも１つのブ
ロックを含むマクロブロックについて更に検出を開始す
ることを特徴とする請求項２又は３に記載の方法。 - 【請求項１５】 圧縮ビデオ・データ復号化装置（１０
０）であって、 ビデオ・データ・ブロックの空間周波数分布に関する情
報をピクセル値に変換するための手段（１０３）を備え
る圧縮ビデオ・データ復号化装置において、 前記変換の前に、前記ブロック内の空間周波数分布に関
する情報の変化を表す第１の基準値（Ｘｒｅｆ）を生成
するための手段（１０３）と、 前記変換の後に、前記ブロックと、前に変換された少な
くとも１つのビデオ・データ・ブロックとの間の一定の
情報の変化の唐突さを表す第２の基準値（Δ）を生成す
るための手段（１０３）と、 前記第１の基準値（Ｘｒｅｆ）を一定の第１のスレショ
ルド値（ＴＨ１）と比較すると共に前記第２の基準値
（Δ）を一定の第２のスレショルド値（ＴＨ２）と比較
するための手段（１０３）と、 前記第１の基準値（Ｘｒｅｆ）及び前記第２の基準値
（Δ）のいずれかがそれぞれ前記第１のスレショルド値
（ＴＨ１）及び前記第２のスレショルド値（ＴＨ２）よ
り大きいことに対する応答として、前記ブロックにおけ
る誤りを検出するための手段（１０３）とを特徴とする
圧縮ビデオ・データ復号化装置。 - 【請求項１６】 マクロブロックを形成する数個のブロ
ックを復号化した後に、前記マクロブロック内での一定
の情報の変化の唐突さを表す第３の基準値（Ｑｃｕｒ
ｒ）を作るための手段（１０３）と、 前記第３の基準値（Ｘｒｅｆ）を一定の第３のスレショ
ルド値（ＴＨ３）と比較するための手段（１０３）と、 前記第３の基準値が前記第３のスレショルド値より大き
いことに対する応答として、前記マクロブロックに誤り
を検出するための手段（１０３）とを更に備えることを
特徴とする請求項１５に記載の装置。 - 【請求項１７】 検出された前記誤りに対する応答とし
て、誤り隠蔽プロセスを開始するための手段（１０３）
を更に備えることを特徴とする請求項１５又は１６に記
載の装置。 - 【請求項１８】 前記装置は移動端末（ＭＴ）であるこ
とを特徴とする請求項１５〜１７のいずれか一項に記載
の装置。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FI982402 | 1998-11-05 | ||
| FI982402A FI107108B (fi) | 1998-11-05 | 1998-11-05 | Virheen ilmaiseminen alhaisen bittinopeuden videolähetyksessä |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000174631A true JP2000174631A (ja) | 2000-06-23 |
| JP4440392B2 JP4440392B2 (ja) | 2010-03-24 |
Family
ID=8552855
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP31504199A Expired - Fee Related JP4440392B2 (ja) | 1998-11-05 | 1999-11-05 | 圧縮ビデオ・データ復号化方法及び装置 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US7408991B2 (ja) |
| EP (1) | EP0999709B1 (ja) |
| JP (1) | JP4440392B2 (ja) |
| DE (1) | DE69930574T2 (ja) |
| FI (1) | FI107108B (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012503930A (ja) * | 2008-09-26 | 2012-02-09 | トムソン ライセンシング | 少数派結託攻撃に対するデジタル・コンテンツの保護方法 |
Families Citing this family (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| FI107108B (fi) * | 1998-11-05 | 2001-05-31 | Nokia Mobile Phones Ltd | Virheen ilmaiseminen alhaisen bittinopeuden videolähetyksessä |
| US6983078B2 (en) | 2001-05-01 | 2006-01-03 | Hewlett-Packard Development Company, L.P. | System and method for improving image quality in processed images |
| DE60220047T2 (de) * | 2001-05-29 | 2008-01-10 | Koninklijke Philips Electronics N.V. | Verfahren und einrichtung zum verbergen von fehlern |
| FR2848768B1 (fr) * | 2002-12-17 | 2005-04-15 | France Telecom | Procede de filtrage des artefacts causes par des erreurs de bits dans un flux video code a base de bloc |
| KR20050015723A (ko) * | 2003-08-07 | 2005-02-21 | 삼성전자주식회사 | 동영상 화면 재생시 발생하는 불량 요소 검출 장치 및검출 방법 |
| JP2005117196A (ja) * | 2003-10-03 | 2005-04-28 | Matsushita Electric Ind Co Ltd | 映像符号化方法 |
| KR101108681B1 (ko) * | 2005-01-19 | 2012-01-25 | 삼성전자주식회사 | 동영상 코덱에서의 주파수 변환 계수 예측 방법 및 장치,이를 구비한 부호화 및 복호화 장치와 방법 |
| KR101221913B1 (ko) * | 2006-12-20 | 2013-01-15 | 엘지전자 주식회사 | 디지털 방송 시스템 및 데이터 처리 방법 |
| JP5317223B2 (ja) | 2007-05-16 | 2013-10-16 | トムソン ライセンシング | 信号を符号化および復号する方法および装置 |
| US9078034B2 (en) | 2007-10-15 | 2015-07-07 | Thomson Licensing | Apparatus and method for communicating burst mode activity |
| EP2201777A2 (en) | 2007-10-15 | 2010-06-30 | Thomson Licensing | Apparatus and method for encoding and decoding signals |
| US9848209B2 (en) * | 2008-04-02 | 2017-12-19 | Microsoft Technology Licensing, Llc | Adaptive error detection for MPEG-2 error concealment |
| US9924184B2 (en) * | 2008-06-30 | 2018-03-20 | Microsoft Technology Licensing, Llc | Error detection, protection and recovery for video decoding |
| US9788018B2 (en) * | 2008-06-30 | 2017-10-10 | Microsoft Technology Licensing, Llc | Error concealment techniques in video decoding |
| US9131241B2 (en) * | 2008-11-25 | 2015-09-08 | Microsoft Technology Licensing, Llc | Adjusting hardware acceleration for video playback based on error detection |
| US8582645B2 (en) * | 2009-06-11 | 2013-11-12 | Texas Instruments Incorporated | Reducing flicker in the display of video streams |
| US8340510B2 (en) | 2009-07-17 | 2012-12-25 | Microsoft Corporation | Implementing channel start and file seek for decoder |
| KR101345098B1 (ko) * | 2009-12-18 | 2013-12-26 | 한국전자통신연구원 | 실시간 영상품질 측정 장치 및 방법 |
| US9681141B2 (en) * | 2011-02-08 | 2017-06-13 | Texas Instruments Incorporated | Error detection on variable length code decoder |
| US9591304B2 (en) * | 2011-11-08 | 2017-03-07 | Tektronix, Inc. | Evaluation of perceptual visual quality |
| US11553211B2 (en) * | 2013-01-03 | 2023-01-10 | Disney Enterprises, Inc. | Heuristic detection of potential digital media artifacts and defects in digital media assets |
| US9998750B2 (en) * | 2013-03-15 | 2018-06-12 | Cisco Technology, Inc. | Systems and methods for guided conversion of video from a first to a second compression format |
| WO2015059782A1 (ja) * | 2013-10-23 | 2015-04-30 | 株式会社Ｋ－Ｗｉｌｌ | 映像検査方法及び音声検査方法 |
| US11871036B2 (en) * | 2020-09-24 | 2024-01-09 | Korea University Research And Business Foundation | Apparatus and method for compressing JPEG images |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04320160A (ja) * | 1991-04-19 | 1992-11-10 | Matsushita Electric Ind Co Ltd | 画像信号圧縮伸長装置および領域識別処理装置 |
| JPH04358486A (ja) * | 1991-06-04 | 1992-12-11 | Toshiba Corp | 高能率符号化信号処理装置 |
| US5517327A (en) * | 1993-06-30 | 1996-05-14 | Minolta Camera Kabushiki Kaisha | Data processor for image data using orthogonal transformation |
| WO1995003674A1 (en) * | 1993-07-19 | 1995-02-02 | British Telecommunications Public Limited Company | Detecting errors in video images |
| US5598514A (en) * | 1993-08-09 | 1997-01-28 | C-Cube Microsystems | Structure and method for a multistandard video encoder/decoder |
| US5621467A (en) * | 1995-02-16 | 1997-04-15 | Thomson Multimedia S.A. | Temporal-spatial error concealment apparatus and method for video signal processors |
| US5708732A (en) * | 1996-03-06 | 1998-01-13 | Hewlett-Packard Company | Fast DCT domain downsampling and inverse motion compensation |
| FI107108B (fi) * | 1998-11-05 | 2001-05-31 | Nokia Mobile Phones Ltd | Virheen ilmaiseminen alhaisen bittinopeuden videolähetyksessä |
-
1998
- 1998-11-05 FI FI982402A patent/FI107108B/fi active
-
1999
- 1999-10-14 EP EP99120462A patent/EP0999709B1/en not_active Expired - Lifetime
- 1999-10-14 DE DE69930574T patent/DE69930574T2/de not_active Expired - Lifetime
- 1999-11-05 JP JP31504199A patent/JP4440392B2/ja not_active Expired - Fee Related
-
2003
- 2003-10-28 US US10/695,722 patent/US7408991B2/en not_active Expired - Lifetime
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012503930A (ja) * | 2008-09-26 | 2012-02-09 | トムソン ライセンシング | 少数派結託攻撃に対するデジタル・コンテンツの保護方法 |
| US8995706B2 (en) | 2008-09-26 | 2015-03-31 | Thomson Licensing | Method for protecting digital content against minority collusion attacks |
Also Published As
| Publication number | Publication date |
|---|---|
| EP0999709B1 (en) | 2006-03-29 |
| EP0999709A2 (en) | 2000-05-10 |
| FI107108B (fi) | 2001-05-31 |
| JP4440392B2 (ja) | 2010-03-24 |
| EP0999709A3 (en) | 2001-03-28 |
| US20040101055A1 (en) | 2004-05-27 |
| DE69930574T2 (de) | 2007-02-01 |
| DE69930574D1 (de) | 2006-05-18 |
| US7408991B2 (en) | 2008-08-05 |
| FI982402A0 (fi) | 1998-11-05 |
| FI982402A (fi) | 2000-05-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4440392B2 (ja) | 圧縮ビデオ・データ復号化方法及び装置 | |
| Ngan et al. | Video coding for wireless communication systems | |
| US6725372B1 (en) | Digital watermarking | |
| US7532808B2 (en) | Method for coding motion in a video sequence | |
| RU2302707C2 (ru) | Кодирующие динамические фильтры | |
| RU2291586C2 (ru) | Система и способ маскирования ошибок видеосигнала | |
| DE60020243T2 (de) | Videokodierung | |
| Han et al. | Detection and correction of transmission errors in JPEG images | |
| US6744924B1 (en) | Error concealment in a video signal | |
| US20040021592A1 (en) | Adaptive variable length coding of digital video | |
| WO2003036808A1 (en) | System and method for transcoding | |
| US6983016B2 (en) | Method for detecting errors in video information | |
| KR100312421B1 (ko) | 영상시스템에서의압축동영상변환장치및그방법 | |
| JPH0795566A (ja) | 画像符号化方法および装置 | |
| JPH08149470A (ja) | 変換符号化された画像データの復号化時に生じるブロック歪の低減方法及び変換符号化された画像データの復号化装置 | |
| Jordan | Software-embedded data retrieval and error concealment scheme for MPEG-2 video sequences | |
| Lee et al. | Bit-plane error recovery via cross subband for image transmission in JPEG2000 | |
| Suh et al. | Recovery of motion vectors for error concealment | |
| KR20000067180A (ko) | 영상 복원 장치 및 이를 이루기 위한 오류 은닉 방법 | |
| JPH08191444A (ja) | ビデオ信号復号化装置 | |
| KR100212544B1 (ko) | 에이치. 263 영상 비트 스트림에서의 에러 검출 방법 | |
| KR0178243B1 (ko) | 에이치.263 영상 비트 스트림에서의 에러 검출방법 | |
| KR100203711B1 (ko) | 에이치. 263 영상 비트 스트림에서의 에러 검출방법 | |
| KR100213288B1 (ko) | 에이치. 263 영상 비트 스트림에서의 에러 검출방법 | |
| KR100669621B1 (ko) | 동영상 디코더의 참조 영상 변경 제어방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061101 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061101 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090427 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090519 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20090818 |
|
| A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20090821 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091119 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091208 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100107 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130115 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130115 Year of fee payment: 3 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130115 Year of fee payment: 3 |
|
| R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130115 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130115 Year of fee payment: 3 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130115 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130115 Year of fee payment: 3 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |