JP2001169282A - 動画像復号化方法、動画像復号化装置、及びプログラム記録媒体 - Google Patents
動画像復号化方法、動画像復号化装置、及びプログラム記録媒体Info
- Publication number
- JP2001169282A JP2001169282A JP2000291381A JP2000291381A JP2001169282A JP 2001169282 A JP2001169282 A JP 2001169282A JP 2000291381 A JP2000291381 A JP 2000291381A JP 2000291381 A JP2000291381 A JP 2000291381A JP 2001169282 A JP2001169282 A JP 2001169282A
- Authority
- JP
- Japan
- Prior art keywords
- error
- bit stream
- image data
- unit
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
(57)【要約】
【課題】 復号画像データの修整処理による大きな画質
劣化を招くことなく、該修復処理によりエラーに起因す
る画質劣化を排除して、復号画像の画質を向上する。 【解決手段】 入力ストリームをマクロブロック毎に復
号化して復号画像データを生成する復号化器１と、入力
ストリームの伝送エラーを検出する伝送エラー検出器３
と、入力ストリームのストリームエラーを検出するスト
リームエラー検出器６とを備え、伝送エラーが検出され
たとき、復号画像データをマクロブロック単位で修整
し、ストリームエラーが検出されたとき、復号画像デー
タをビデオパケット単位で修整するようにした。
劣化を招くことなく、該修復処理によりエラーに起因す
る画質劣化を排除して、復号画像の画質を向上する。 【解決手段】 入力ストリームをマクロブロック毎に復
号化して復号画像データを生成する復号化器１と、入力
ストリームの伝送エラーを検出する伝送エラー検出器３
と、入力ストリームのストリームエラーを検出するスト
リームエラー検出器６とを備え、伝送エラーが検出され
たとき、復号画像データをマクロブロック単位で修整
し、ストリームエラーが検出されたとき、復号画像デー
タをビデオパケット単位で修整するようにした。
Description
【０００１】
【発明の属する技術分野】本発明は、動画像復号化方
法、動画像復号化装置、及びプログラムを記録した記録
媒体に関し、特に、エラーを含むビットストリームの復
号化により得られる復号画像データを、復号画像が視覚
的に好ましい画像となるよう修整する処理に関するもの
である。
法、動画像復号化装置、及びプログラムを記録した記録
媒体に関し、特に、エラーを含むビットストリームの復
号化により得られる復号画像データを、復号画像が視覚
的に好ましい画像となるよう修整する処理に関するもの
である。
【０００２】
【従来の技術】近年、音声，画像，その他の表現メディ
アを統合的に扱うマルチメディア時代を迎え、従来から
の情報メディア，つまり新聞，雑誌，テレビ，ラジオ，
電話等の情報を人に伝達する手段がマルチメディアの対
象として取り上げられるようになってきた。一般に、マ
ルチメディアとは、文字だけでなく、図形、音声、特に
画像等を同時に関連づけて表すことをいうが、上記従来
の情報メディアをマルチメディアの対象とするには、そ
の情報をディジタル形式により表すことが必須条件とな
る。
アを統合的に扱うマルチメディア時代を迎え、従来から
の情報メディア，つまり新聞，雑誌，テレビ，ラジオ，
電話等の情報を人に伝達する手段がマルチメディアの対
象として取り上げられるようになってきた。一般に、マ
ルチメディアとは、文字だけでなく、図形、音声、特に
画像等を同時に関連づけて表すことをいうが、上記従来
の情報メディアをマルチメディアの対象とするには、そ
の情報をディジタル形式により表すことが必須条件とな
る。
【０００３】ところが、上記各情報メディアの持つ情報
量をディジタル情報量として見積もってみると、文字の
情報量（１文字当たり）は１〜２バイトであるのに対
し、電話品質の音声については１秒当たり６４Ｋbits、
さらに現行テレビ受信品質の動画については１秒当たり
１００Ｍbits以上の情報量が必要となり、上記電話やテ
レビなどの情報メディアではディジタル形式の膨大な情
報をそのまま扱うことは現実的ではない。例えば、テレ
ビ電話は、６４kbps〜１．５Mbpsの伝送速度を持つサー
ビス総合ディジタル網（ＩＳＤＮ:Integrated Services
Digital Network）によってすでに実用化されている
が、テレビカメラにより得られる映像情報をデジタルデ
ータとしてそのままＩＳＤＮで送ることは不可能であ
る。
量をディジタル情報量として見積もってみると、文字の
情報量（１文字当たり）は１〜２バイトであるのに対
し、電話品質の音声については１秒当たり６４Ｋbits、
さらに現行テレビ受信品質の動画については１秒当たり
１００Ｍbits以上の情報量が必要となり、上記電話やテ
レビなどの情報メディアではディジタル形式の膨大な情
報をそのまま扱うことは現実的ではない。例えば、テレ
ビ電話は、６４kbps〜１．５Mbpsの伝送速度を持つサー
ビス総合ディジタル網（ＩＳＤＮ:Integrated Services
Digital Network）によってすでに実用化されている
が、テレビカメラにより得られる映像情報をデジタルデ
ータとしてそのままＩＳＤＮで送ることは不可能であ
る。
【０００４】そこで、必要となってくるのが情報の圧縮
技術であり、例えば、テレビ電話の場合、ＩＴＵ−Ｔ
（国際電気通信連合 電気通信標準化部門）で国際標準
化されたＨ．２６１やＨ．２６３規格の動画圧縮技術が
用いられている。また、ＭＰＥＧ−１規格の情報圧縮技
術によると、通常の音楽用ＣＤ（コンパクト・ディス
ク）に音声情報とともに画像情報を格納することも可能
となる。
技術であり、例えば、テレビ電話の場合、ＩＴＵ−Ｔ
（国際電気通信連合 電気通信標準化部門）で国際標準
化されたＨ．２６１やＨ．２６３規格の動画圧縮技術が
用いられている。また、ＭＰＥＧ−１規格の情報圧縮技
術によると、通常の音楽用ＣＤ（コンパクト・ディス
ク）に音声情報とともに画像情報を格納することも可能
となる。
【０００５】ここで、ＭＰＥＧ（Moving Picture Exper
ts Group)とは、動画データの圧縮処理に関する国際規
格であり、ＭＰＥＧ−１は、動画データを１．５Ｍbps
まで、つまりテレビ信号の情報を約１００分の１にまで
圧縮する規格である。また、ＭＰＥＧ−１規格を対象と
する伝送速度が主として約１．５Ｍbpsに制限されてい
ることから、さらなる高画質化の要求をみたすべく規格
化されたＭＰＥＧ−２では、動画データが２〜１５Ｍbp
sに圧縮される。
ts Group)とは、動画データの圧縮処理に関する国際規
格であり、ＭＰＥＧ−１は、動画データを１．５Ｍbps
まで、つまりテレビ信号の情報を約１００分の１にまで
圧縮する規格である。また、ＭＰＥＧ−１規格を対象と
する伝送速度が主として約１．５Ｍbpsに制限されてい
ることから、さらなる高画質化の要求をみたすべく規格
化されたＭＰＥＧ−２では、動画データが２〜１５Ｍbp
sに圧縮される。
【０００６】さらに現状では、ＭＰＥＧ−１，ＭＰＥＧ
−２と動画データの圧縮処理の標準化を進めてきた作業
グループ（ISO/IEC JTC1/SC29/WG11) によって、物体単
位での画像データの符号化及び画像データの操作を可能
とし、マルチメディア時代に必要な新しい機能を実現す
るＭＰＥＧ−４が規格化されつつある。ＭＰＥＧ−４で
は、当初、低ビットレートの符号化処理の標準化を目指
してきたが、現在では、標準化の対象が、インタレース
画像に対応した高ビットレートのより汎用的な符号化処
理に拡張されている。
−２と動画データの圧縮処理の標準化を進めてきた作業
グループ（ISO/IEC JTC1/SC29/WG11) によって、物体単
位での画像データの符号化及び画像データの操作を可能
とし、マルチメディア時代に必要な新しい機能を実現す
るＭＰＥＧ−４が規格化されつつある。ＭＰＥＧ−４で
は、当初、低ビットレートの符号化処理の標準化を目指
してきたが、現在では、標準化の対象が、インタレース
画像に対応した高ビットレートのより汎用的な符号化処
理に拡張されている。
【０００７】ところで、ＭＰＥＧ−４の特徴の１つに、
複数の画像系列（つまり複数の動画像）に対応する画像
データを同時に符号化して伝送する仕組みがある。この
仕組みは、複数の画像の合成によって１つのシーンを構
成可能にするものである。なお、ここで、画像は、画像
系列（動画像）の各画面の画像（静止画）であり、１シ
ーンは、複数の画像を含む合成画像である。
複数の画像系列（つまり複数の動画像）に対応する画像
データを同時に符号化して伝送する仕組みがある。この
仕組みは、複数の画像の合成によって１つのシーンを構
成可能にするものである。なお、ここで、画像は、画像
系列（動画像）の各画面の画像（静止画）であり、１シ
ーンは、複数の画像を含む合成画像である。
【０００８】例えば、ＭＰＥＧ−４では、１つのシーン
を構成する前景と背景を別の画像系列の画像（物体）と
して分離し、各画像系列毎に独立してフレーム周波数，
画質，ビットレートなどを変更することが可能である。
また、ＭＰＥＧ−４では、複数の画像系列の画像をマル
チ画面のように水平もしくは垂直方向に並べて、ユーザ
が所望の画像系列の画像のみを抽出したり拡大表示した
りすることができる。
を構成する前景と背景を別の画像系列の画像（物体）と
して分離し、各画像系列毎に独立してフレーム周波数，
画質，ビットレートなどを変更することが可能である。
また、ＭＰＥＧ−４では、複数の画像系列の画像をマル
チ画面のように水平もしくは垂直方向に並べて、ユーザ
が所望の画像系列の画像のみを抽出したり拡大表示した
りすることができる。
【０００９】背景については、ＭＰＥＧ−２と同様に輝
度及び色合いを示す画素値信号（テキスチャー信号）の
みに対する符号化処理が一般的であるが、前景について
は、物体の輝度及び色合いを示す画素値信号のみでな
く、物体の形状を示す形状信号も同時に符号化する処理
が行われる。一般に、この前景に対する符号化処理は物
体単位の符号化処理として知られている。
度及び色合いを示す画素値信号（テキスチャー信号）の
みに対する符号化処理が一般的であるが、前景について
は、物体の輝度及び色合いを示す画素値信号のみでな
く、物体の形状を示す形状信号も同時に符号化する処理
が行われる。一般に、この前景に対する符号化処理は物
体単位の符号化処理として知られている。
【００１０】なお、このＭＰＥＧ−４では、表示される
画像全体（合成画像）は、複数の画像系列の画像（物
体）により構成されることから、各画像系列の、各表示
時刻における画面をＶＯＰ(Video Object Plane)と呼
び、ＭＰＥＧ−１，２におけるフレームと区別してい
る。なお、表示画像の全体が1つの画像系列の画像によ
り構成される場合には、ＶＯＰとフレームは一致するこ
ととなる。
画像全体（合成画像）は、複数の画像系列の画像（物
体）により構成されることから、各画像系列の、各表示
時刻における画面をＶＯＰ(Video Object Plane)と呼
び、ＭＰＥＧ−１，２におけるフレームと区別してい
る。なお、表示画像の全体が1つの画像系列の画像によ
り構成される場合には、ＶＯＰとフレームは一致するこ
ととなる。
【００１１】図８はＭＰＥＧ−４における物体単位の符
号化処理を説明するための模式図である。ＭＰＥＧ−４
にて規定されている画像信号は、物体（ＶＯＰ）の形状
Ｓob（図８(a)）を表す形状信号と、物体（ＶＯＰ）の
絵柄Ｔob（図８(b)）を表す、輝度信号と色差信号から
なる画素値信号（テキスチャー信号）から構成されてい
る。
号化処理を説明するための模式図である。ＭＰＥＧ−４
にて規定されている画像信号は、物体（ＶＯＰ）の形状
Ｓob（図８(a)）を表す形状信号と、物体（ＶＯＰ）の
絵柄Ｔob（図８(b)）を表す、輝度信号と色差信号から
なる画素値信号（テキスチャー信号）から構成されてい
る。
【００１２】上記物体単位の符号化処理では、物体の形
と物体の位置を、画像表示のための基準の座標系に対し
て定める必要があり、このため、物体Ｏｂを包含する、
複数のマクロブロックにより構成される矩形領域（バウ
ンディングボックス）Ｂox（図８(c)）が上記基準座標
系にて設定される。なお、マクロブロックは符号化処理
の単位となる画像空間であり、１６×１６画素から構成
されている。また、上記矩形領域Ｂoxは複数のマクロブ
ロックにより構成されるため、該矩形領域の水平方向及
び垂直方向の画素数は１６の倍数となっている。
と物体の位置を、画像表示のための基準の座標系に対し
て定める必要があり、このため、物体Ｏｂを包含する、
複数のマクロブロックにより構成される矩形領域（バウ
ンディングボックス）Ｂox（図８(c)）が上記基準座標
系にて設定される。なお、マクロブロックは符号化処理
の単位となる画像空間であり、１６×１６画素から構成
されている。また、上記矩形領域Ｂoxは複数のマクロブ
ロックにより構成されるため、該矩形領域の水平方向及
び垂直方向の画素数は１６の倍数となっている。
【００１３】そして、１つの画像系列の個々の矩形領域
Ｂoxに対して、画像信号をマクロブロック毎に符号化す
る符号化処理が施される。例えば、図８(c)では、上記
矩形領域Ｂoxは５×４個のマクロブロックから構成され
ており、マクロブロックＭＢ１，ＭＢ２は物体Ｏｂの外
側に位置する物体外マクロブロック、マクロブロックＭ
Ｂ３は物体Ｏｂの境界上に位置する境界マクロブロッ
ク、マクロブロックＭＢ１３は物体Ｏｂの内側に位置す
る物体内マクロブロックである。ＭＰＥＧ−４では物体
外の画素は復号化後には表示されないため、復号化後に
表示される物体内の画素を含むマクロブロック，つまり
境界マクロブロック及び物体内マクロブロックに対して
のみ符号化処理が行われる。
Ｂoxに対して、画像信号をマクロブロック毎に符号化す
る符号化処理が施される。例えば、図８(c)では、上記
矩形領域Ｂoxは５×４個のマクロブロックから構成され
ており、マクロブロックＭＢ１，ＭＢ２は物体Ｏｂの外
側に位置する物体外マクロブロック、マクロブロックＭ
Ｂ３は物体Ｏｂの境界上に位置する境界マクロブロッ
ク、マクロブロックＭＢ１３は物体Ｏｂの内側に位置す
る物体内マクロブロックである。ＭＰＥＧ−４では物体
外の画素は復号化後には表示されないため、復号化後に
表示される物体内の画素を含むマクロブロック，つまり
境界マクロブロック及び物体内マクロブロックに対して
のみ符号化処理が行われる。
【００１４】図９はＭＰＥＧ−４対応のビットストリー
ムにおける種々の処理単位について説明するための模式
図である。なお、物体（ＶＯＰ）を含む矩形領域（バウ
ンディングボックス）Ｂoxは、該物体と一対一に対応す
るため、以下の説明では、矩形領域（バウンディングボ
ックス）Ｂoxと物体（ＶＯＰ）とを区別せずに、これら
をＶＯＰとして説明する。
ムにおける種々の処理単位について説明するための模式
図である。なお、物体（ＶＯＰ）を含む矩形領域（バウ
ンディングボックス）Ｂoxは、該物体と一対一に対応す
るため、以下の説明では、矩形領域（バウンディングボ
ックス）Ｂoxと物体（ＶＯＰ）とを区別せずに、これら
をＶＯＰとして説明する。
【００１５】一般に、可変長符号により構成される符号
列（ビットストリーム）では、その復号時のエラー伝播
を阻止するため、特定のビットパターンにより構成され
る固定長符号が配置されている。ＭＰＥＧ−４ではこの
固定長符号はResync Marker（以下単にマーカと略記す
る。）と呼ばれており、１つの同期信号となっている。
そして、このマーカとこれに続く可変長符号により構成
される符号列は、ビデオパケットと呼ばれる１つの符号
化単位となっている。
列（ビットストリーム）では、その復号時のエラー伝播
を阻止するため、特定のビットパターンにより構成され
る固定長符号が配置されている。ＭＰＥＧ−４ではこの
固定長符号はResync Marker（以下単にマーカと略記す
る。）と呼ばれており、１つの同期信号となっている。
そして、このマーカとこれに続く可変長符号により構成
される符号列は、ビデオパケットと呼ばれる１つの符号
化単位となっている。
【００１６】ＭＰＥＧ−４では、図９(a)に示すよう
に、１つのＶＯＰ１０に対応する符号列（ＶＯＰビット
ストリーム）Ｓvopは、複数のビデオパケットから構成
可能であり、ここでは、ＶＯＰビットストリームＳvop
は４つのビデオパケットＳvp１〜Ｓvp４から構成されて
いる。ここで、各ビデオパケットＳvp１〜Ｓvp４には、
ＶＯＰ１０における各領域Ｒvp１〜Ｒvp４に対応する符
号化データが格納されている。また、上記各ビデオパケ
ットＳvp１〜Ｓvp４には、複数のマクロブロックに対応
する符号化データを格納可能である。
に、１つのＶＯＰ１０に対応する符号列（ＶＯＰビット
ストリーム）Ｓvopは、複数のビデオパケットから構成
可能であり、ここでは、ＶＯＰビットストリームＳvop
は４つのビデオパケットＳvp１〜Ｓvp４から構成されて
いる。ここで、各ビデオパケットＳvp１〜Ｓvp４には、
ＶＯＰ１０における各領域Ｒvp１〜Ｒvp４に対応する符
号化データが格納されている。また、上記各ビデオパケ
ットＳvp１〜Ｓvp４には、複数のマクロブロックに対応
する符号化データを格納可能である。
【００１７】なお、ここでは上記ビデオパケットＳvp１
に対応する領域Ｒvp１は、図９(b)に示すように５つの
マクロブロックＭＢ１〜ＭＢ５から構成されており、他
のビデオパケットＳvp２〜Ｓvp４に対応する領域Ｒvp２
〜Ｒvp４も、上記ビデオパケットＳvp１に対応する領域
Ｒvp１と同様、５つのマクロブロックから構成されてい
る。また、上記各マクロブロックは、上述したように１
６画素×１６画素からなる画像空間であり、４つのブロ
ックから構成されている。各ブロックは８画素×８画素
からなる画像空間である。例えば、マクロブロックＭＢ
１は、図９(c)に示すように、ブロックＢ１〜Ｂ４から
なり、また、ブロックＢ１は、図９(d)に示すように、
８画素×８画素からなる。
に対応する領域Ｒvp１は、図９(b)に示すように５つの
マクロブロックＭＢ１〜ＭＢ５から構成されており、他
のビデオパケットＳvp２〜Ｓvp４に対応する領域Ｒvp２
〜Ｒvp４も、上記ビデオパケットＳvp１に対応する領域
Ｒvp１と同様、５つのマクロブロックから構成されてい
る。また、上記各マクロブロックは、上述したように１
６画素×１６画素からなる画像空間であり、４つのブロ
ックから構成されている。各ブロックは８画素×８画素
からなる画像空間である。例えば、マクロブロックＭＢ
１は、図９(c)に示すように、ブロックＢ１〜Ｂ４から
なり、また、ブロックＢ１は、図９(d)に示すように、
８画素×８画素からなる。
【００１８】また、１つのマクロブロックに対応する符
号化データ（以下マクロブロック情報ともいう。）に
は、１つのマクロブロックを構成する４つのブロックに
対応する輝度情報（Ｙ），及び１つのマクロブロックに
対応する色差情報（Ｕ），（Ｖ）が含まれている。さら
に、物体が形状を有する場合には、１つのマクロブロッ
クに対応する符号化データには、上記輝度情報（Ｙ）及
び色差情報（Ｕ），（Ｖ）とともに、１つのマクロブロ
ックに対応する形状情報が含まれることとなる。
号化データ（以下マクロブロック情報ともいう。）に
は、１つのマクロブロックを構成する４つのブロックに
対応する輝度情報（Ｙ），及び１つのマクロブロックに
対応する色差情報（Ｕ），（Ｖ）が含まれている。さら
に、物体が形状を有する場合には、１つのマクロブロッ
クに対応する符号化データには、上記輝度情報（Ｙ）及
び色差情報（Ｕ），（Ｖ）とともに、１つのマクロブロ
ックに対応する形状情報が含まれることとなる。
【００１９】ここで、１つのマクロブロックの輝度情報
（Ｙ）は、１つのマクロブロックを構成する４つのブロ
ックの画素値信号を符号化してなるもの、１つのマクロ
ブロックの色差情報（Ｕ）及び色差情報（Ｖ）はそれぞ
れ、１マクロブロックを構成する８×８画素の色差信号
（Ｕ），（Ｖ）を符号化してなるもの、１つのマクロブ
ロックの形状情報は、１マクロブロックを構成する１６
×１６画素の形状信号を符号化してなるものである。
（Ｙ）は、１つのマクロブロックを構成する４つのブロ
ックの画素値信号を符号化してなるもの、１つのマクロ
ブロックの色差情報（Ｕ）及び色差情報（Ｖ）はそれぞ
れ、１マクロブロックを構成する８×８画素の色差信号
（Ｕ），（Ｖ）を符号化してなるもの、１つのマクロブ
ロックの形状情報は、１マクロブロックを構成する１６
×１６画素の形状信号を符号化してなるものである。
【００２０】なお、上記ＶＯＰ１０におけるビデオパケ
ット対応領域を構成するマクロブロックの数は、図９
(a)に示すように一定である必要はなく、例えば、図９
(e)に示すように、ＶＯＰビットストリームＳvopaにお
ける各ビデオパケットＳvp1a〜Ｓvp5aの符号量が一定と
なるよう、ＶＯＰ１０ａにおけるビデオパケット対応領
域Ｒvp1a〜Ｒvp5aを構成するマクロブロックの数を決定
してもよい。この場合は、各ビデオパケット対応領域Ｒ
vp1a〜Ｒvp5aに含まれるマクロブロックの数は一定には
ならない。
ット対応領域を構成するマクロブロックの数は、図９
(a)に示すように一定である必要はなく、例えば、図９
(e)に示すように、ＶＯＰビットストリームＳvopaにお
ける各ビデオパケットＳvp1a〜Ｓvp5aの符号量が一定と
なるよう、ＶＯＰ１０ａにおけるビデオパケット対応領
域Ｒvp1a〜Ｒvp5aを構成するマクロブロックの数を決定
してもよい。この場合は、各ビデオパケット対応領域Ｒ
vp1a〜Ｒvp5aに含まれるマクロブロックの数は一定には
ならない。
【００２１】図１０はＭＰＥＧ−４における物体単位の
符号化処理を説明するための模式図であり、図８に示す
形状を有する物体（ＶＯＰ）に対応する画像信号の符号
化処理を示している。
符号化処理を説明するための模式図であり、図８に示す
形状を有する物体（ＶＯＰ）に対応する画像信号の符号
化処理を示している。
【００２２】ここで、物体ＯｂとしてのＶＯＰ１０（厳
密には物体を含むＢＢＯＸ）は、それぞれ５つのマクロ
ブロックからなる、４つのビデオパケット領域Ｒvp１〜
Ｒvp４から構成されている。例えば、上記ビデオパケッ
ト領域Ｒvp１は、マクロブロックＭＢ１〜ＭＢ５により
構成されている。
密には物体を含むＢＢＯＸ）は、それぞれ５つのマクロ
ブロックからなる、４つのビデオパケット領域Ｒvp１〜
Ｒvp４から構成されている。例えば、上記ビデオパケッ
ト領域Ｒvp１は、マクロブロックＭＢ１〜ＭＢ５により
構成されている。
【００２３】上記マクロブロックＭＢ１及びＭＢ２は物
体外に位置しているから、これらのマクロブロックＭＢ
１，ＭＢ２に対しては、形状信号の符号化処理として、
該マクロブロックが物体外に位置していることを示す形
状信号を符号化する処理が行われ、画素値信号の符号化
処理は省略される。また、マクロブロックＭＢ３に対し
ては、このマクロブロックは物体内の画素を含むマクロ
ブロックであるから、形状信号に対する符号化処理と画
素値信号の符号化処理が行われる。
体外に位置しているから、これらのマクロブロックＭＢ
１，ＭＢ２に対しては、形状信号の符号化処理として、
該マクロブロックが物体外に位置していることを示す形
状信号を符号化する処理が行われ、画素値信号の符号化
処理は省略される。また、マクロブロックＭＢ３に対し
ては、このマクロブロックは物体内の画素を含むマクロ
ブロックであるから、形状信号に対する符号化処理と画
素値信号の符号化処理が行われる。
【００２４】一般に、形状を有する前景としての物体に
は、背景としての物体とは異なり、時々刻々とその形や
大きさが変化するものが多い。また、ＭＰＥＧ−４で
は、形状信号や画素値信号の符号化アルゴリズムが符号
化処理の対象となる画像の形状に大きく依存する。例え
ば、物体が形状を有する場合、形状信号により物体外に
位置することが示される部分（マクロブロック）につい
ては、画素値信号の符号化処理が省略されるため、１つ
の画像系列の１画面（ＶＯＰ）に対応する、画素値信号
の符号化処理が施されたマクロブロックの数が変わる場
合がある。このため、ＭＰＥＧ−４対応の復号化処理
は、ＭＰＥＧ−２のように形や大きさが変化しない画像
の符号化処理に対する復号化処理と比べて、ビットスト
リームの伝送誤りに弱く、さらに、この復号化処理で
は、画面間の相関を利用した画像修復や画像処理などの
画像修整も困難である。この結果、ＭＰＥＧ−４対応の
復号システムでは、伝送誤りが発生すると、復号画像に
おける画質が大きく劣化することとなる。
は、背景としての物体とは異なり、時々刻々とその形や
大きさが変化するものが多い。また、ＭＰＥＧ−４で
は、形状信号や画素値信号の符号化アルゴリズムが符号
化処理の対象となる画像の形状に大きく依存する。例え
ば、物体が形状を有する場合、形状信号により物体外に
位置することが示される部分（マクロブロック）につい
ては、画素値信号の符号化処理が省略されるため、１つ
の画像系列の１画面（ＶＯＰ）に対応する、画素値信号
の符号化処理が施されたマクロブロックの数が変わる場
合がある。このため、ＭＰＥＧ−４対応の復号化処理
は、ＭＰＥＧ−２のように形や大きさが変化しない画像
の符号化処理に対する復号化処理と比べて、ビットスト
リームの伝送誤りに弱く、さらに、この復号化処理で
は、画面間の相関を利用した画像修復や画像処理などの
画像修整も困難である。この結果、ＭＰＥＧ−４対応の
復号システムでは、伝送誤りが発生すると、復号画像に
おける画質が大きく劣化することとなる。
【００２５】図１１(a)ないし(c)は、ＭＰＥＧ−４対応
のビットストリームの構成を詳しく説明するための模式
図である。ＶＯＰビットストリームＳvopは、図１０に
示す、物体ＯｂとしてのＶＯＰ１０に対応する符号化デ
ータを含むものであり、このＶＯＰビットストリームＳ
vopの先頭には、ＶＯＰ全体に関連する重要なデータで
あるＶＯＰヘッダＳvophが配置され、該ＶＯＰヘッダＳ
vophに続いてビデオパケットＳvp１〜Ｓvp４が配置され
ている（図１１(a)参照)。
のビットストリームの構成を詳しく説明するための模式
図である。ＶＯＰビットストリームＳvopは、図１０に
示す、物体ＯｂとしてのＶＯＰ１０に対応する符号化デ
ータを含むものであり、このＶＯＰビットストリームＳ
vopの先頭には、ＶＯＰ全体に関連する重要なデータで
あるＶＯＰヘッダＳvophが配置され、該ＶＯＰヘッダＳ
vophに続いてビデオパケットＳvp１〜Ｓvp４が配置され
ている（図１１(a)参照)。
【００２６】また、上記ビデオパケットＳvp１では、そ
の先頭にビデオパケット全体に関連する重要なデータで
あるビデオパケットヘッダＳvphが配置され、該ビデオ
パケットヘッダＳvphに続いて、マクロブロックＭＢ１
〜ＭＢ５に対応する符号化データ（マクロブロック情
報）Ｓmb１〜Ｓmb５が配置されている（図１１(b)参
照)。
の先頭にビデオパケット全体に関連する重要なデータで
あるビデオパケットヘッダＳvphが配置され、該ビデオ
パケットヘッダＳvphに続いて、マクロブロックＭＢ１
〜ＭＢ５に対応する符号化データ（マクロブロック情
報）Ｓmb１〜Ｓmb５が配置されている（図１１(b)参
照)。
【００２７】さらに、上記マクロブロック情報Ｓmb１の
先頭には、マクロブロック全体に関連する重要なデータ
であるマクロブロックヘッダＳmbhが配置されており、
該マクロブロックヘッダＳmbhに続いて、対応するマク
ロブロックの形状情報Ｓsb、対応するマクロブロックを
構成する４つのブロックの輝度情報Ｓpb１〜Ｓpb４、及
び対応するマクロブロックの色差情報（Ｕ）Ｓpbu，色
差情報（Ｖ）Ｓpbvが配置されている（図１１(c)参
照)。
先頭には、マクロブロック全体に関連する重要なデータ
であるマクロブロックヘッダＳmbhが配置されており、
該マクロブロックヘッダＳmbhに続いて、対応するマク
ロブロックの形状情報Ｓsb、対応するマクロブロックを
構成する４つのブロックの輝度情報Ｓpb１〜Ｓpb４、及
び対応するマクロブロックの色差情報（Ｕ）Ｓpbu，色
差情報（Ｖ）Ｓpbvが配置されている（図１１(c)参
照)。
【００２８】このようにＶＯＰビットストリームＳvop
では、符号化単位としてのマクロブロックに相当するマ
クロブロック情報が第１の処理単位となり、さらに複数
のマクロブロック情報からなるビデオパケットが第２の
処理単位となっており、ＶＯＰビットストリームは、こ
れに含まれる符号化データが第１及び第２の処理単位に
より区分された２階層のデータ構造を有している。
では、符号化単位としてのマクロブロックに相当するマ
クロブロック情報が第１の処理単位となり、さらに複数
のマクロブロック情報からなるビデオパケットが第２の
処理単位となっており、ＶＯＰビットストリームは、こ
れに含まれる符号化データが第１及び第２の処理単位に
より区分された２階層のデータ構造を有している。
【００２９】ここで，上記ＶＯＰヘッダＳvoph及びビデ
オパケットヘッダＳvphにはビットストリームの復号化
処理の同期をとるための同期信号が含まれている。この
ため、ビットストリームのエラービットによりビットス
トリームの復号化処理が中断した場合は、ＶＯＰヘッダ
ＳvophもしくはビデオパケットヘッダＳvphから復号化
処理を再開することができる。一方、マクロブロックヘ
ッダＳmbhには復号化処理における同期をとるための同
期信号は含まれていない。なお、ビデオパケットヘッダ
Ｓvphにおける同期信号は上記固定長符号（Resync Mark
er）である。
オパケットヘッダＳvphにはビットストリームの復号化
処理の同期をとるための同期信号が含まれている。この
ため、ビットストリームのエラービットによりビットス
トリームの復号化処理が中断した場合は、ＶＯＰヘッダ
ＳvophもしくはビデオパケットヘッダＳvphから復号化
処理を再開することができる。一方、マクロブロックヘ
ッダＳmbhには復号化処理における同期をとるための同
期信号は含まれていない。なお、ビデオパケットヘッダ
Ｓvphにおける同期信号は上記固定長符号（Resync Mark
er）である。
【００３０】ところで、一般に、動画像復号化処理にお
けるビットストリームのエラーには、ストリームエラー
と伝送エラーの２種類がある。このストリームエラー
は、ストリームに文法上正しくない符号が含まるエラー
（シンタックスエラー）、使用可能な値の範囲を越えた
不正な値の符号が含まれるエラー（セマンティックエラ
ー）などである。また、伝送エラーは、記録媒体からビ
ットストリームを読み出す際もしくは通信媒体を介して
ビットストリームを伝送する際にデータ欠落等によりビ
ットストリームが破損するエラーである。
けるビットストリームのエラーには、ストリームエラー
と伝送エラーの２種類がある。このストリームエラー
は、ストリームに文法上正しくない符号が含まるエラー
（シンタックスエラー）、使用可能な値の範囲を越えた
不正な値の符号が含まれるエラー（セマンティックエラ
ー）などである。また、伝送エラーは、記録媒体からビ
ットストリームを読み出す際もしくは通信媒体を介して
ビットストリームを伝送する際にデータ欠落等によりビ
ットストリームが破損するエラーである。
【００３１】通常、各ＶＯＰに対応する符号化された画
像データは、ヘッダ情報を有する伝送パケットに格納し
て伝送パケット単位でＶＯＰビットストリームとして伝
送されるため、パケットの欠落等の伝送エラーが発生し
た場合には、受信側では、ビットストリームにおける伝
送パケットの欠落位置が検出可能である。このため、伝
送エラーについては、ビットストリームにおける復号化
処理が破綻した位置（エラー発生位置）もほとんど特定
することができる。
像データは、ヘッダ情報を有する伝送パケットに格納し
て伝送パケット単位でＶＯＰビットストリームとして伝
送されるため、パケットの欠落等の伝送エラーが発生し
た場合には、受信側では、ビットストリームにおける伝
送パケットの欠落位置が検出可能である。このため、伝
送エラーについては、ビットストリームにおける復号化
処理が破綻した位置（エラー発生位置）もほとんど特定
することができる。
【００３２】なお、復号化処理におけるエラー発生位置
を特定するための具体的な方法として、ビットストリー
ムにおけるパケットの欠落を検出して、ビットストリー
ムの、パケットの欠落位置にパケット欠落を示すマーク
（マーカ符号）を付加する方法が考えられる。
を特定するための具体的な方法として、ビットストリー
ムにおけるパケットの欠落を検出して、ビットストリー
ムの、パケットの欠落位置にパケット欠落を示すマーク
（マーカ符号）を付加する方法が考えられる。
【００３３】このような伝送エラーに対し、ストリーム
エラーは、例えば、可変長符号化の際に発生するシンタ
ックスエラー等に起因するものであるため、可変長復号
化処理等の復号化過程が破綻した時点で初めて復号エラ
ーとして検出できるものである。言いかえると、ストリ
ームエラーは、本質的に、ビットストリーム（符号化デ
ータ）の復号化過程が破綻しない限り、これを検出する
ことはできないものである。
エラーは、例えば、可変長符号化の際に発生するシンタ
ックスエラー等に起因するものであるため、可変長復号
化処理等の復号化過程が破綻した時点で初めて復号エラ
ーとして検出できるものである。言いかえると、ストリ
ームエラーは、本質的に、ビットストリーム（符号化デ
ータ）の復号化過程が破綻しない限り、これを検出する
ことはできないものである。
【００３４】但し、１つのビデオパケットの先頭には同
期信号が配置されており、またこのビデオパケット直後
には、後続のビデオパケットの同期信号が配置されてい
るため、これら２つの同期信号の間に位置するビットス
トリームの構造および内容を厳密に復号化過程で検査す
れば、ビットストリームの復号化過程の破綻によらず
に、ストリームエラーを含むビデオパケットのみを検出
できる。このようにビットストリームの構造および内容
を厳密に復号化過程で検査する場合、ビットストリーム
の復号化過程の破綻を検出する場合に比べて、ストリー
ムエラーを検出できる可能性は非常に高くなる。
期信号が配置されており、またこのビデオパケット直後
には、後続のビデオパケットの同期信号が配置されてい
るため、これら２つの同期信号の間に位置するビットス
トリームの構造および内容を厳密に復号化過程で検査す
れば、ビットストリームの復号化過程の破綻によらず
に、ストリームエラーを含むビデオパケットのみを検出
できる。このようにビットストリームの構造および内容
を厳密に復号化過程で検査する場合、ビットストリーム
の復号化過程の破綻を検出する場合に比べて、ストリー
ムエラーを検出できる可能性は非常に高くなる。
【００３５】以下、従来の動画像復号化装置について具
体的に説明する。図１２は従来の一般的な動画像復号化
装置を説明するためのブロック図である。この動画像復
号化装置１００は、記録媒体から読み出されたビットス
トリームあるいは伝送媒体を介して送信されてきたビッ
トストリームを入力ストリームＶinとして受信し、該入
力ストリームＶinに対する復号化処理を行うものであ
る。ここで、上記ビットストリームは、動画像の画像信
号に対して該動画像を構成する複数の画像系列毎に別々
に符号化処理を施して得られる画像符号化データを含む
ものである。また、上記１つの画像系列の画像信号に対
する符号化処理は、該画像系列の１画面（ＶＯＰ）毎に
行われ、かつ各ＶＯＰに対応する画像信号は該ＶＯＰを
構成するマクロブロックを単位として符号化される。ま
た、形状を有しない物体の画像信号は輝度信号及び色差
信号のみを含み、形状を有する物体の画像信号は、上記
輝度情報及び色差情報とともに形状信号を含んでいるこ
とは言うまでもない。
体的に説明する。図１２は従来の一般的な動画像復号化
装置を説明するためのブロック図である。この動画像復
号化装置１００は、記録媒体から読み出されたビットス
トリームあるいは伝送媒体を介して送信されてきたビッ
トストリームを入力ストリームＶinとして受信し、該入
力ストリームＶinに対する復号化処理を行うものであ
る。ここで、上記ビットストリームは、動画像の画像信
号に対して該動画像を構成する複数の画像系列毎に別々
に符号化処理を施して得られる画像符号化データを含む
ものである。また、上記１つの画像系列の画像信号に対
する符号化処理は、該画像系列の１画面（ＶＯＰ）毎に
行われ、かつ各ＶＯＰに対応する画像信号は該ＶＯＰを
構成するマクロブロックを単位として符号化される。ま
た、形状を有しない物体の画像信号は輝度信号及び色差
信号のみを含み、形状を有する物体の画像信号は、上記
輝度情報及び色差情報とともに形状信号を含んでいるこ
とは言うまでもない。
【００３６】なお、上記動画像に対応するビットストリ
ームには、通常、各物体に対応する画像符号化データが
多重化されて含まれているが、以下の説明では、該ビッ
トストリームは、画像情報として１つの物体に対応する
画像符号化データのみ含むものとする。
ームには、通常、各物体に対応する画像符号化データが
多重化されて含まれているが、以下の説明では、該ビッ
トストリームは、画像情報として１つの物体に対応する
画像符号化データのみ含むものとする。
【００３７】以下詳述すると、上記動画像復号化装置１
００は、処理対象となる被処理ＶＯＰに対応する入力ス
トリームＶinの復号化処理を、復号化処理が完了した処
理済ＶＯＰにおける参照領域の復号画像データ（参照画
像データ）Ｖrefを参照してマクロブロック毎に行っ
て、復号画像データＶｄを出力する復号化器１０１と、
上記参照画像データＶrefを、被処理ＶＯＰにおける処
理対象となるマクロブロック（対象マクロブロック）に
対する復号化処理と同期させて出力するとともに、処理
済ＶＯＰに対する相対位置が、被処理ＶＯＰに対する対
象マクロブロックの相対位置と等しい処理済ＶＯＰのマ
クロブロックに対応する復号画像データ（置換画像デー
タ）Ｖrepを上記対象マクロブロックに対する復号化処
理と同期させて出力するメモリ１０２とを有している。
００は、処理対象となる被処理ＶＯＰに対応する入力ス
トリームＶinの復号化処理を、復号化処理が完了した処
理済ＶＯＰにおける参照領域の復号画像データ（参照画
像データ）Ｖrefを参照してマクロブロック毎に行っ
て、復号画像データＶｄを出力する復号化器１０１と、
上記参照画像データＶrefを、被処理ＶＯＰにおける処
理対象となるマクロブロック（対象マクロブロック）に
対する復号化処理と同期させて出力するとともに、処理
済ＶＯＰに対する相対位置が、被処理ＶＯＰに対する対
象マクロブロックの相対位置と等しい処理済ＶＯＰのマ
クロブロックに対応する復号画像データ（置換画像デー
タ）Ｖrepを上記対象マクロブロックに対する復号化処
理と同期させて出力するメモリ１０２とを有している。
【００３８】また、上記動画像復号化装置１００は、上
記入力ストリームＶinに基づいて、該入力ストリームＶ
inのエラー及びその位置を検出してエラー通知信号Ｔer
rを出力するエラー検出器１２０と、上記対象マクロブ
ロックに対応する復号画像データＶｄと置換画像データ
Ｖrepの一方を、制御信号Ｃmbに基づいて選択し、選択
された画像データ（ＭＢ選択画像データ）Ｅmbを対象マ
クロブロックの再生画像データＶoutとして出力する選
択スイッチ１０５と、上記エラー通知信号Ｔerrに基づ
いて上記選択スイッチ１０５に対する制御信号Ｃmbを発
生するマクロブロック単位修整器１０４とを有してい
る。
記入力ストリームＶinに基づいて、該入力ストリームＶ
inのエラー及びその位置を検出してエラー通知信号Ｔer
rを出力するエラー検出器１２０と、上記対象マクロブ
ロックに対応する復号画像データＶｄと置換画像データ
Ｖrepの一方を、制御信号Ｃmbに基づいて選択し、選択
された画像データ（ＭＢ選択画像データ）Ｅmbを対象マ
クロブロックの再生画像データＶoutとして出力する選
択スイッチ１０５と、上記エラー通知信号Ｔerrに基づ
いて上記選択スイッチ１０５に対する制御信号Ｃmbを発
生するマクロブロック単位修整器１０４とを有してい
る。
【００３９】ここで、上記エラー検出器１２０は、上記
入力ストリームＶinのエラーの検出を、入力ストリーム
Ｖinのアナログ信号としてのレベルや入力ストリームに
含まれる誤り訂正符号により行う構成となっている。従
って、このエラー検出器１２０では、伝送エラーの検出
が行われるようになっている。
入力ストリームＶinのエラーの検出を、入力ストリーム
Ｖinのアナログ信号としてのレベルや入力ストリームに
含まれる誤り訂正符号により行う構成となっている。従
って、このエラー検出器１２０では、伝送エラーの検出
が行われるようになっている。
【００４０】また、上記マクロブロック単位修整器１０
４は、上記エラー通知信号Ｔerrに基づいて、上記入力
ストリームＶinのエラー部分を含むマクロブロック情報
からその後の同期信号までの間のマクロブロック情報を
復号化して得られる復号画像データＶｄに代えて、この
復号画像データに対応する処理済ＶＯＰの復号画像デー
タ（置換画像データ）Ｖrepが再生画像データＶoutとし
て出力されるよう、上記選択スイッチ１０５を制御する
構成となっている。
４は、上記エラー通知信号Ｔerrに基づいて、上記入力
ストリームＶinのエラー部分を含むマクロブロック情報
からその後の同期信号までの間のマクロブロック情報を
復号化して得られる復号画像データＶｄに代えて、この
復号画像データに対応する処理済ＶＯＰの復号画像デー
タ（置換画像データ）Ｖrepが再生画像データＶoutとし
て出力されるよう、上記選択スイッチ１０５を制御する
構成となっている。
【００４１】次に動作について説明する。記録媒体から
読み出されたビットストリームあるいは伝送媒体を介し
て送信されてきたビットストリームが入力ストリームＶ
inとして、この動画像復号化装置１００に入力される
と、この動画像復号化装置１００では、該入力ストリー
ムに対する復号化処理がマクロブロックを単位として、
各ＶＯＰ毎に行われる。なお、この動画像復号化装置１
００では、復号化処理の際、上記復号化器１０１，メモ
リ１０２，及びマクロブロック単位修整器１０４は、こ
れらの間で、各マクロブロックに対する処理が同期して
行われるよう、本装置１００の制御部（図示せず）によ
り制御される。
読み出されたビットストリームあるいは伝送媒体を介し
て送信されてきたビットストリームが入力ストリームＶ
inとして、この動画像復号化装置１００に入力される
と、この動画像復号化装置１００では、該入力ストリー
ムに対する復号化処理がマクロブロックを単位として、
各ＶＯＰ毎に行われる。なお、この動画像復号化装置１
００では、復号化処理の際、上記復号化器１０１，メモ
リ１０２，及びマクロブロック単位修整器１０４は、こ
れらの間で、各マクロブロックに対する処理が同期して
行われるよう、本装置１００の制御部（図示せず）によ
り制御される。
【００４２】すなわち、上記復号化器１０１では、被処
理ＶＯＰにおける対象マクロブロックの符号化データに
対して、該対象マクロブロックに対応する参照画像デー
タＶrefを参照する復号化処理が施され、対象マクロブ
ロックの復号画像データＶｄが出力される。なお、入力
ストリームＶinにエラーが含まれている場合は、上記復
号化器１０１からは、符号化データの復号化が可能なマ
クロブロックに対応する復号画像データＶｄのみが出力
される。
理ＶＯＰにおける対象マクロブロックの符号化データに
対して、該対象マクロブロックに対応する参照画像デー
タＶrefを参照する復号化処理が施され、対象マクロブ
ロックの復号画像データＶｄが出力される。なお、入力
ストリームＶinにエラーが含まれている場合は、上記復
号化器１０１からは、符号化データの復号化が可能なマ
クロブロックに対応する復号画像データＶｄのみが出力
される。
【００４３】またこのとき、メモリ１０２からは、対象
マクロブロックに対応する参照画像データＶrefととも
に、対象マクロブロックに対応する置換画像データＶre
pが出力される。
マクロブロックに対応する参照画像データＶrefととも
に、対象マクロブロックに対応する置換画像データＶre
pが出力される。
【００４４】また、エラー検出器１２０では、入力スト
リームＶinに基づいて伝送エラーを検出するエラー検出
処理が行われる。そして、入力ストリームのエラーが検
出されたとき、該エラー検出器１２０からは、該入力ス
トリームのエラー部分の位置として、該エラー部分を含
むマクロブロック情報を示すエラー通知信号Ｔerrがマ
クロブロック単位修整器１０４に出力される。
リームＶinに基づいて伝送エラーを検出するエラー検出
処理が行われる。そして、入力ストリームのエラーが検
出されたとき、該エラー検出器１２０からは、該入力ス
トリームのエラー部分の位置として、該エラー部分を含
むマクロブロック情報を示すエラー通知信号Ｔerrがマ
クロブロック単位修整器１０４に出力される。
【００４５】すると、マクロブロック単位修整器１０４
では、エラー通知信号Ｔerrに基づいて、上記対象マク
ロブロックの復号画像データＶｄと該対象マクロブロッ
クに対応する置換画像データＶrepの一方を選択する選
択スイッチ１０５にその制御信号Ｃmbが出力される。つ
まり該選択スイッチ１０５は、上記エラー通知信号Ｔer
rにより示されるマクロブロック情報からその後の同期
信号までの間の各マクロブロック情報に対応するマクロ
ブロックに対しては、復号化器１０１からの復号画像デ
ータＶｄに代えて、メモリ１０２からの置換画像データ
Ｖrepが選択され、その他のマクロブロックに対して
は、復号化器１０１から出力される復号画像データＶｄ
が選択されるよう制御される。
では、エラー通知信号Ｔerrに基づいて、上記対象マク
ロブロックの復号画像データＶｄと該対象マクロブロッ
クに対応する置換画像データＶrepの一方を選択する選
択スイッチ１０５にその制御信号Ｃmbが出力される。つ
まり該選択スイッチ１０５は、上記エラー通知信号Ｔer
rにより示されるマクロブロック情報からその後の同期
信号までの間の各マクロブロック情報に対応するマクロ
ブロックに対しては、復号化器１０１からの復号画像デ
ータＶｄに代えて、メモリ１０２からの置換画像データ
Ｖrepが選択され、その他のマクロブロックに対して
は、復号化器１０１から出力される復号画像データＶｄ
が選択されるよう制御される。
【００４６】そして、上記選択スイッチ１０５により選
択された選択画像データＥmbが、被処理ＶＯＰの対象マ
クロブロックに対応する再生画像データＶoutとして出
力される。また、上記選択画像データＥmbは、該被処理
ＶＯＰの次のＶＯＰに対する参照画像データとして上記
メモリ１０２に記録される。
択された選択画像データＥmbが、被処理ＶＯＰの対象マ
クロブロックに対応する再生画像データＶoutとして出
力される。また、上記選択画像データＥmbは、該被処理
ＶＯＰの次のＶＯＰに対する参照画像データとして上記
メモリ１０２に記録される。
【００４７】このとき、エラーマクロブロック（マクロ
ブロック情報がビットストリームのエラー部分を含むマ
クロブロック）の復号画像データだけでなく、ビデオパ
ケット内の該エラーマクロブロック以降の全てのマクロ
ブロックの復号画像データＶｄを、処理済ＶＯＰにおけ
る対応するマクロブロックの復号画像データ（置換画像
データ）Ｖrepと置き換えるようにしているのは、入力
ストリームが、画像データの可変長符号化処理により得
られたものであるためである。つまり、入力ストリーム
の可変長復号化処理では、入力ストリームにエラーが含
まれる場合、エラーの影響が、入力ストリームにおける
エラー発生位置から同期信号までの間の全てのマクロブ
ロック情報に対する復号化処理に及ぶためである。
ブロック情報がビットストリームのエラー部分を含むマ
クロブロック）の復号画像データだけでなく、ビデオパ
ケット内の該エラーマクロブロック以降の全てのマクロ
ブロックの復号画像データＶｄを、処理済ＶＯＰにおけ
る対応するマクロブロックの復号画像データ（置換画像
データ）Ｖrepと置き換えるようにしているのは、入力
ストリームが、画像データの可変長符号化処理により得
られたものであるためである。つまり、入力ストリーム
の可変長復号化処理では、入力ストリームにエラーが含
まれる場合、エラーの影響が、入力ストリームにおける
エラー発生位置から同期信号までの間の全てのマクロブ
ロック情報に対する復号化処理に及ぶためである。
【００４８】図１３は従来のその他の動画像復号化装置
を説明するためのブロック図である。この動画像復号化
装置１１０は、エラーを含む入力ストリームの復号化処
理により得られる復号画像データを、上記動画像復号化
装置１００のようにマクロブロック単位で修整するので
はなく、ビデオパケット単位で修整するようにしたもの
である。
を説明するためのブロック図である。この動画像復号化
装置１１０は、エラーを含む入力ストリームの復号化処
理により得られる復号画像データを、上記動画像復号化
装置１００のようにマクロブロック単位で修整するので
はなく、ビデオパケット単位で修整するようにしたもの
である。
【００４９】すなわち、この動画像復号化装置１１０
は、図１２に示す動画像復号化装置１００と同様、被処
理ＶＯＰに対応する入力ストリームＶinの復号化処理を
参照画像データＶrefを参照して行って、各マクロブロ
ックに対応する復号画像データＶｄを出力する復号化器
１０１と、対象マクロブロックに対する参照画像データ
Ｖref及び置換画像データＶrepを、対象マクロブロック
の復号化処理と同期させて出力するメモリ１０２とを有
している。
は、図１２に示す動画像復号化装置１００と同様、被処
理ＶＯＰに対応する入力ストリームＶinの復号化処理を
参照画像データＶrefを参照して行って、各マクロブロ
ックに対応する復号画像データＶｄを出力する復号化器
１０１と、対象マクロブロックに対する参照画像データ
Ｖref及び置換画像データＶrepを、対象マクロブロック
の復号化処理と同期させて出力するメモリ１０２とを有
している。
【００５０】そして、この動画像復号化装置１１０は、
上記動画像復号化装置１００における選択スイッチ１０
５に代えて、復号画像データＶｄを、処理対象となって
いるビデオパケットの復号化処理に要する時間だけ遅延
する第１の遅延回路１０３と、メモリ１０２から各マク
ロブロックの復号化処理に同期して出力される置換画像
データＶrepを、処理対象となっているビデオパケット
の復号化処理に要する時間だけ遅延する第２の遅延回路
１０４と、該第１の遅延回路１０３の出力（遅延復号デ
ータ）ＤＶｄ及び第２の遅延回路１０４の出力（遅延置
換データ）ＤＶrepの一方を制御信号Ｃvpに基づいて選
択する選択スイッチ１０８とを有している。
上記動画像復号化装置１００における選択スイッチ１０
５に代えて、復号画像データＶｄを、処理対象となって
いるビデオパケットの復号化処理に要する時間だけ遅延
する第１の遅延回路１０３と、メモリ１０２から各マク
ロブロックの復号化処理に同期して出力される置換画像
データＶrepを、処理対象となっているビデオパケット
の復号化処理に要する時間だけ遅延する第２の遅延回路
１０４と、該第１の遅延回路１０３の出力（遅延復号デ
ータ）ＤＶｄ及び第２の遅延回路１０４の出力（遅延置
換データ）ＤＶrepの一方を制御信号Ｃvpに基づいて選
択する選択スイッチ１０８とを有している。
【００５１】また、この動画像復号化装置１１０は、上
記動画像復号化装置１００におけるエラー検出器１２０
に代えて、復号化器１０１の内部信号Ｓｉに基づいて、
該復号化器での正常な復号化処理が破綻したことを検出
し、エラー検出を示すエラー通知信号Ｎerrを出力する
エラー検出器１２１を有している。なお、このエラー検
出器１２１は、正常な復号化処理の破綻を検出する処理
に代えて、ビデオパケット内のビットストリームの構造
及び内容を厳密に検査する処理によって、ビットストリ
ームの異常を検出し、エラー検出を示すエラー通知信号
Ｎerrを出力する構成としてもよい。
記動画像復号化装置１００におけるエラー検出器１２０
に代えて、復号化器１０１の内部信号Ｓｉに基づいて、
該復号化器での正常な復号化処理が破綻したことを検出
し、エラー検出を示すエラー通知信号Ｎerrを出力する
エラー検出器１２１を有している。なお、このエラー検
出器１２１は、正常な復号化処理の破綻を検出する処理
に代えて、ビデオパケット内のビットストリームの構造
及び内容を厳密に検査する処理によって、ビットストリ
ームの異常を検出し、エラー検出を示すエラー通知信号
Ｎerrを出力する構成としてもよい。
【００５２】さらに、この動画像復号化装置１１０は、
上記動画像復号化装置１００におけるマクロブロック単
位修整器１０４に代えて、上記選択スイッチ１０８を、
これが第１の遅延回路１０３からの遅延復号データＤＶ
ｄと第２の遅延回路１０４からの遅延置換データＤＶre
pの一方を各マクロブロック毎に選択するよう、エラー
通知信号Ｎerrに基づいて制御するビデオパケット単位
修整器１０７を備えている。
上記動画像復号化装置１００におけるマクロブロック単
位修整器１０４に代えて、上記選択スイッチ１０８を、
これが第１の遅延回路１０３からの遅延復号データＤＶ
ｄと第２の遅延回路１０４からの遅延置換データＤＶre
pの一方を各マクロブロック毎に選択するよう、エラー
通知信号Ｎerrに基づいて制御するビデオパケット単位
修整器１０７を備えている。
【００５３】このビデオパケット単位修整器１０７は、
具体的には、上記エラー通知信号Ｎerrに基づいて、上
記復号化器１０１での復号化処理が破綻したビデオパケ
ット（エラービデオパケット）に対応する遅延復号デー
タＤＶｄに代えて、該エラービデオパケットに対応する
処理済ＶＯＰのビデオパケットの遅延置換データＤＶre
pが再生画像データＶoutとして出力されるよう、上記選
択スイッチ１０８を制御する構成となっている。
具体的には、上記エラー通知信号Ｎerrに基づいて、上
記復号化器１０１での復号化処理が破綻したビデオパケ
ット（エラービデオパケット）に対応する遅延復号デー
タＤＶｄに代えて、該エラービデオパケットに対応する
処理済ＶＯＰのビデオパケットの遅延置換データＤＶre
pが再生画像データＶoutとして出力されるよう、上記選
択スイッチ１０８を制御する構成となっている。
【００５４】なお、図１３に示す動画像復号化装置１１
０における復号化器１０１及びメモリ１０２は、図１２
に示す動画像復号化装置１００における復号化器１０１
及びメモリ１０２と同一の構成となっている。
０における復号化器１０１及びメモリ１０２は、図１２
に示す動画像復号化装置１００における復号化器１０１
及びメモリ１０２と同一の構成となっている。
【００５５】次に動作について説明する。この動画像復
号化装置１１０では、復号化器１０１における入力スト
リームＶinの復号化処理、及びメモリ１０２からの参照
画像データＶref，置換画像データＶrepの出力は、上記
動画像復号化装置１００と同様に行われる。
号化装置１１０では、復号化器１０１における入力スト
リームＶinの復号化処理、及びメモリ１０２からの参照
画像データＶref，置換画像データＶrepの出力は、上記
動画像復号化装置１００と同様に行われる。
【００５６】そして、この動画像復号化装置１１０で
は、復号化器１０１からの復号画像データＶｄが第１の
遅延回路１０３にて、復号化処理の対象となる対象ビデ
オパケットに対する復号化処理に要する時間だけ遅延さ
れ、またメモリ１０２からの置換画像データＶrepが第
２の遅延回路１０４にて、上記対象ビデオパケットに対
する復号化処理に要する時間だけ遅延される。
は、復号化器１０１からの復号画像データＶｄが第１の
遅延回路１０３にて、復号化処理の対象となる対象ビデ
オパケットに対する復号化処理に要する時間だけ遅延さ
れ、またメモリ１０２からの置換画像データＶrepが第
２の遅延回路１０４にて、上記対象ビデオパケットに対
する復号化処理に要する時間だけ遅延される。
【００５７】また、エラー検出器１２１では、復号化器
１０１における内部信号Ｓｉに基づいて、入力ストリー
ムに対する復号化処理の破綻を検出する処理が行われ、
復号化処理の破綻が検出されたとき、該エラーの検出を
示すエラー通知信号Ｎerrがビデオパケット単位修整器
１０７に出力される。このビデオパケット単位修整器１
０７では該エラー通知信号Ｎerrに応じて上記選択スイ
ッチ１０８へ制御信号Ｃvpが出力される。該選択スイッ
チ１０８では、この制御信号Ｃvpに基づいて、上記第１
の遅延回路１０３からの遅延復号データＤＶｄと第２の
遅延回路１０４からの遅延置換データＤＶrepの一方が
選択され、選択されたデータ（ＶＰ単位選択データ）Ｅ
vpが再生画像データＶoutとして出力される。
１０１における内部信号Ｓｉに基づいて、入力ストリー
ムに対する復号化処理の破綻を検出する処理が行われ、
復号化処理の破綻が検出されたとき、該エラーの検出を
示すエラー通知信号Ｎerrがビデオパケット単位修整器
１０７に出力される。このビデオパケット単位修整器１
０７では該エラー通知信号Ｎerrに応じて上記選択スイ
ッチ１０８へ制御信号Ｃvpが出力される。該選択スイッ
チ１０８では、この制御信号Ｃvpに基づいて、上記第１
の遅延回路１０３からの遅延復号データＤＶｄと第２の
遅延回路１０４からの遅延置換データＤＶrepの一方が
選択され、選択されたデータ（ＶＰ単位選択データ）Ｅ
vpが再生画像データＶoutとして出力される。
【００５８】具体的には、上記選択スイッチ１０８は、
エラーが検出されたビデオパケット（エラービデオパケ
ット）に対応する遅延復号データＤＶｄに代えて、該エ
ラービデオパケットに対応する処理済ＶＯＰのビデオパ
ケットの遅延置換データＤＶrepが再生画像データＶout
として出力されるよう、上記ビデオパケット単位修整器
１０７により制御される。そして、上記被処理ＶＯＰの
再生画像データＶoutは、該被処理ＶＯＰの次のＶＯＰ
に対する参照画像データとして上記メモリ１０２に記録
される。
エラーが検出されたビデオパケット（エラービデオパケ
ット）に対応する遅延復号データＤＶｄに代えて、該エ
ラービデオパケットに対応する処理済ＶＯＰのビデオパ
ケットの遅延置換データＤＶrepが再生画像データＶout
として出力されるよう、上記ビデオパケット単位修整器
１０７により制御される。そして、上記被処理ＶＯＰの
再生画像データＶoutは、該被処理ＶＯＰの次のＶＯＰ
に対する参照画像データとして上記メモリ１０２に記録
される。
【００５９】このような構成の動画像復号化装置１１０
では、復号化処理の破綻を検出し、復号化処理が破綻し
たビデオパケットの復号画像データＶｄを処理済ＶＯＰ
における対応するビデオパケットの復号画像データに置
き換えるので、上記復号化処理が通常入力ストリームに
エラーが含まれていれば破綻するものであることから、
伝送エラーあるいはストリームエラーを含むビットスト
リームが入力されたときには、復号画像データの修整が
行われることとなる。
では、復号化処理の破綻を検出し、復号化処理が破綻し
たビデオパケットの復号画像データＶｄを処理済ＶＯＰ
における対応するビデオパケットの復号画像データに置
き換えるので、上記復号化処理が通常入力ストリームに
エラーが含まれていれば破綻するものであることから、
伝送エラーあるいはストリームエラーを含むビットスト
リームが入力されたときには、復号画像データの修整が
行われることとなる。
【００６０】
【発明が解決しようとする課題】ところが、上述した従
来の動画像復号化装置、つまり復号画像データをマクロ
ブロック単位で修整する従来の動画像復号化装置１００
（図１２参照）、及び復号画像データをビデオパケット
単位で修整する従来の画像復号化装置１１０（図１３参
照）では、それぞれ以下のような問題があった。
来の動画像復号化装置、つまり復号画像データをマクロ
ブロック単位で修整する従来の動画像復号化装置１００
（図１２参照）、及び復号画像データをビデオパケット
単位で修整する従来の画像復号化装置１１０（図１３参
照）では、それぞれ以下のような問題があった。
【００６１】すなわち、図１２に示す動画像復号化装置
１００では、エラーを、入力ストリームのアナログ信号
レベルや誤り訂正符号により検出し、復号画像データを
マクロブロック単位で修整するので、復号画像データの
修整をきめこまかく行うことができるが、入力ストリー
ムのアナログ信号レベルや誤り訂正符号によってストリ
ームエラーの検出を行うことはできず、このためストリ
ームエラーに起因する復号画像の画質劣化を改善するこ
とができなかった。
１００では、エラーを、入力ストリームのアナログ信号
レベルや誤り訂正符号により検出し、復号画像データを
マクロブロック単位で修整するので、復号画像データの
修整をきめこまかく行うことができるが、入力ストリー
ムのアナログ信号レベルや誤り訂正符号によってストリ
ームエラーの検出を行うことはできず、このためストリ
ームエラーに起因する復号画像の画質劣化を改善するこ
とができなかった。
【００６２】また、図１３に示す動画像復号化装置１１
０では、エラーを、復号化処理における破綻の発生によ
り検出し、復号画像データをビデオパケット単位で修整
するので、エラーマクロブロック以前の、エラー部分を
含まない正常なマクロブロック情報に対応する復号画像
データも、処理済ＶＯＰの復号画像データと置き換えら
れてしまうこととなる。このため、復号画像データの修
整に起因する復号画像の画質劣化が顕著になり、伝送エ
ラーやストリームエラーに対する復号画像の修整を効果
的に行うことができないという問題点があった。
０では、エラーを、復号化処理における破綻の発生によ
り検出し、復号画像データをビデオパケット単位で修整
するので、エラーマクロブロック以前の、エラー部分を
含まない正常なマクロブロック情報に対応する復号画像
データも、処理済ＶＯＰの復号画像データと置き換えら
れてしまうこととなる。このため、復号画像データの修
整に起因する復号画像の画質劣化が顕著になり、伝送エ
ラーやストリームエラーに対する復号画像の修整を効果
的に行うことができないという問題点があった。
【００６３】従って、従来は、用途に応じて、図１２に
示すマクロブロック単位で復号画像の修整を行う動画像
復号化装置と、図１３に示すビデオパケット単位で復号
画像の修整を行う動画像復号化装置を使い分けるように
していた。
示すマクロブロック単位で復号画像の修整を行う動画像
復号化装置と、図１３に示すビデオパケット単位で復号
画像の修整を行う動画像復号化装置を使い分けるように
していた。
【００６４】また、上述した従来の動画像復号化装置は
いずれも、復号画像の修整処理を、入力ストリームが形
状情報を有する場合と、入力ストリームが形状情報を有
しない場合とで区別せずに行う構成となっているため、
入力ストリームが形状情報を有する場合には、画像修整
を行っても良好な画質が得られないという問題点があっ
た。
いずれも、復号画像の修整処理を、入力ストリームが形
状情報を有する場合と、入力ストリームが形状情報を有
しない場合とで区別せずに行う構成となっているため、
入力ストリームが形状情報を有する場合には、画像修整
を行っても良好な画質が得られないという問題点があっ
た。
【００６５】つまり、物体単位の符号化処理の対象とな
る物体は、その形状が時々刻々と大幅に変化する場合が
多いものであるため、被処理ＶＯＰの一部の画像を、処
理済ＶＯＰ内の画像を利用して修整すると、被処理ＶＯ
Ｐにおける修整された部分と、修整されていない部分と
の間で、該被処理ＶＯＰ内での形状の連続性が損われる
ことが多い。このように形状の連続性が損なわれると、
修整部分が目立つこととなって、大幅な画質劣化を招く
こととなる。
る物体は、その形状が時々刻々と大幅に変化する場合が
多いものであるため、被処理ＶＯＰの一部の画像を、処
理済ＶＯＰ内の画像を利用して修整すると、被処理ＶＯ
Ｐにおける修整された部分と、修整されていない部分と
の間で、該被処理ＶＯＰ内での形状の連続性が損われる
ことが多い。このように形状の連続性が損なわれると、
修整部分が目立つこととなって、大幅な画質劣化を招く
こととなる。
【００６６】本発明は、上記のような問題点を解消する
ためになされたものであり、入力ストリームの復号化処
理により得られる復号画像における、伝送エラーやスト
リームエラーに起因する画質劣化を、復号画像の修整処
理により効果的に改善することができる動画像復号化方
法及び動画像復号化装置、並びに該動画像復号化方法を
ソフトウエアにより実現するための動画像復号化プログ
ラムを記録した記録媒体を提供することを目的とする。
ためになされたものであり、入力ストリームの復号化処
理により得られる復号画像における、伝送エラーやスト
リームエラーに起因する画質劣化を、復号画像の修整処
理により効果的に改善することができる動画像復号化方
法及び動画像復号化装置、並びに該動画像復号化方法を
ソフトウエアにより実現するための動画像復号化プログ
ラムを記録した記録媒体を提供することを目的とする。
【００６７】
【課題を解決するための手段】この発明（請求項１）に
係る動画像復号化方法は、動画像に対応する画像データ
を第１の処理単位毎に順次符号化してなる符号化データ
と、上記第１の処理単位を複数含む第２の処理単位毎に
上記符号化データに付与された同期信号とを含むビット
ストリームに対して、該符号化データを上記第１の処理
単位毎に復号化して復号画像データを生成する復号化処
理を施す動画像復号化方法であって、上記ビットストリ
ームの伝送時に発生した第１のエラーと、該第１のエラ
ー以外の第２のエラーとを区別して検出するエラー検出
処理と、上記第１のエラーが検出されたとき、上記復号
画像データの修整を上記第１の処理単位を修整単位とし
て行い、上記第２のエラーが検出されたとき、上記復号
画像データの修整を上記第２の処理単位を修整単位とし
て行う修整処理とを含むものである。
係る動画像復号化方法は、動画像に対応する画像データ
を第１の処理単位毎に順次符号化してなる符号化データ
と、上記第１の処理単位を複数含む第２の処理単位毎に
上記符号化データに付与された同期信号とを含むビット
ストリームに対して、該符号化データを上記第１の処理
単位毎に復号化して復号画像データを生成する復号化処
理を施す動画像復号化方法であって、上記ビットストリ
ームの伝送時に発生した第１のエラーと、該第１のエラ
ー以外の第２のエラーとを区別して検出するエラー検出
処理と、上記第１のエラーが検出されたとき、上記復号
画像データの修整を上記第１の処理単位を修整単位とし
て行い、上記第２のエラーが検出されたとき、上記復号
画像データの修整を上記第２の処理単位を修整単位とし
て行う修整処理とを含むものである。
【００６８】この発明（請求項２）に係る動画像復号化
方法は、動画像に対応する画像データを該動画像の１画
面を構成する単位領域毎に順次符号化してなる符号化デ
ータを含むビットストリームに対して、該符号化データ
を上記単位領域毎に復号化して復号画像データを生成す
る復号化処理を施す動画像復号化方法であって、上記ビ
ットストリームのエラーを検出するエラー検出処理と、
上記ビットストリームが、上記動画像の形状を示す形状
情報を有するか否かを判定する形状有無判定処理と、上
記ビットストリームのエラーが検出され、かつ上記ビッ
トストリームが形状情報を有すると判定されたとき、上
記復号画像データの修整を、上記動画像の１画面を修整
単位として行い、上記ビットストリームのエラーが検出
され、かつ上記ビットストリームが形状情報を有してい
ないと判定されたとき、上記復号画像データの修整を、
上記単位領域を１以上含む、上記画面より小さい処理領
域を修整単位として行う修整処理とを含むものである。
方法は、動画像に対応する画像データを該動画像の１画
面を構成する単位領域毎に順次符号化してなる符号化デ
ータを含むビットストリームに対して、該符号化データ
を上記単位領域毎に復号化して復号画像データを生成す
る復号化処理を施す動画像復号化方法であって、上記ビ
ットストリームのエラーを検出するエラー検出処理と、
上記ビットストリームが、上記動画像の形状を示す形状
情報を有するか否かを判定する形状有無判定処理と、上
記ビットストリームのエラーが検出され、かつ上記ビッ
トストリームが形状情報を有すると判定されたとき、上
記復号画像データの修整を、上記動画像の１画面を修整
単位として行い、上記ビットストリームのエラーが検出
され、かつ上記ビットストリームが形状情報を有してい
ないと判定されたとき、上記復号画像データの修整を、
上記単位領域を１以上含む、上記画面より小さい処理領
域を修整単位として行う修整処理とを含むものである。
【００６９】この発明（請求項３）は、請求項２記載の
動画像復号化方法において、上記ビットストリームを、
上記単位領域に対応する第１の処理単位を複数含む第２
の処理単位毎に上記符号化データに付与された同期信号
を含む構成とし、上記エラー検出処理を、上記ストリー
ムの伝送時に発生した第１のエラーと、該第１のエラー
以外の第２のエラーとを区別して検出する処理とし、上
記修整処理を、上記形状情報を有していないストリーム
の第１のエラーが検出されたとき、上記復号画像データ
の修整を、上記第１の処理単位を修整単位として行い、
上記形状情報を有していないストリームの第２のエラー
が検出されたとき、上記復号画像データの修整を、上記
第２の処理単位を修整単位として行う処理としたもので
ある。
動画像復号化方法において、上記ビットストリームを、
上記単位領域に対応する第１の処理単位を複数含む第２
の処理単位毎に上記符号化データに付与された同期信号
を含む構成とし、上記エラー検出処理を、上記ストリー
ムの伝送時に発生した第１のエラーと、該第１のエラー
以外の第２のエラーとを区別して検出する処理とし、上
記修整処理を、上記形状情報を有していないストリーム
の第１のエラーが検出されたとき、上記復号画像データ
の修整を、上記第１の処理単位を修整単位として行い、
上記形状情報を有していないストリームの第２のエラー
が検出されたとき、上記復号画像データの修整を、上記
第２の処理単位を修整単位として行う処理としたもので
ある。
【００７０】この発明（請求項４）に係る動画像復号化
装置は、動画像に対応する画像データを第１の処理単位
毎に順次符号化してなる符号化データと、上記第１の処
理単位を複数含む第２の処理単位毎に上記符号化データ
に付与された同期信号とを含むビットストリームに対し
て復号化処理を施す動画像復号化装置であって、上記ビ
ットストリームに符号化データを上記第１の処理単位毎
に復号化して復号画像データを生成する復号化器と、上
記ビットストリームの伝送時に発生した第１のエラーを
検出する第１のエラー検出器と、上記第１のエラー以外
の第２のエラーを検出する第２のエラー検出器と、上記
第１のエラーが検出されたとき、上記復号画像データの
修整を上記第１の処理単位を修整単位として行う第１の
修整部と、上記第２のエラーが検出されたとき、上記復
号画像データの修整を上記第２の処理単位を修整単位と
して行う第２の修整部とを備えたものである。
装置は、動画像に対応する画像データを第１の処理単位
毎に順次符号化してなる符号化データと、上記第１の処
理単位を複数含む第２の処理単位毎に上記符号化データ
に付与された同期信号とを含むビットストリームに対し
て復号化処理を施す動画像復号化装置であって、上記ビ
ットストリームに符号化データを上記第１の処理単位毎
に復号化して復号画像データを生成する復号化器と、上
記ビットストリームの伝送時に発生した第１のエラーを
検出する第１のエラー検出器と、上記第１のエラー以外
の第２のエラーを検出する第２のエラー検出器と、上記
第１のエラーが検出されたとき、上記復号画像データの
修整を上記第１の処理単位を修整単位として行う第１の
修整部と、上記第２のエラーが検出されたとき、上記復
号画像データの修整を上記第２の処理単位を修整単位と
して行う第２の修整部とを備えたものである。
【００７１】この発明（請求項５）に係る動画像復号化
装置は、動画像に対応する画像データを該動画像の１画
面を構成する単位領域毎に順次符号化してなる符号化デ
ータを含むビットストリームに対して復号化処理を施す
動画像復号化装置であって、上記ビットストリームに含
まれる符号化データを上記単位領域毎に復号化して復号
画像データを生成する復号化器と、上記ビットストリー
ムのエラーを検出するエラー検出部と、上記ビットスト
リームが、上記動画像の形状を示す形状情報を有するか
否かを判定する形状有無判定部と、上記ビットストリー
ムのエラーが検出され、かつ上記ビットストリームが形
状情報を有すると判定されたとき、上記復号画像データ
の修整を、上記動画像の１画面を修整単位として行い、
上記ビットストリームのエラーが検出され、かつ上記ビ
ットストリームが形状情報を有していないと判定された
とき、上記復号画像データの修整を、上記単位領域を１
つ以上含む、上記画面より小さい処理領域を修整単位と
して行う復号画像修整部とを備えたものである。
装置は、動画像に対応する画像データを該動画像の１画
面を構成する単位領域毎に順次符号化してなる符号化デ
ータを含むビットストリームに対して復号化処理を施す
動画像復号化装置であって、上記ビットストリームに含
まれる符号化データを上記単位領域毎に復号化して復号
画像データを生成する復号化器と、上記ビットストリー
ムのエラーを検出するエラー検出部と、上記ビットスト
リームが、上記動画像の形状を示す形状情報を有するか
否かを判定する形状有無判定部と、上記ビットストリー
ムのエラーが検出され、かつ上記ビットストリームが形
状情報を有すると判定されたとき、上記復号画像データ
の修整を、上記動画像の１画面を修整単位として行い、
上記ビットストリームのエラーが検出され、かつ上記ビ
ットストリームが形状情報を有していないと判定された
とき、上記復号画像データの修整を、上記単位領域を１
つ以上含む、上記画面より小さい処理領域を修整単位と
して行う復号画像修整部とを備えたものである。
【００７２】この発明（請求項６）は、請求項５記載の
動画像復号化装置において、上記ビットストリームを、
上記単位領域に対応する第１の処理単位を複数含む第２
の処理単位毎に上記符号化データに付与された同期信号
を含む構成とし、上記エラー検出部を、上記ビットスト
リームの伝送時に発生した第１のエラーを検出する第１
のエラー検出器と、該第１のエラー以外の第２のエラー
を検出する第２のエラー検出器とを有する構成とし、上
記復号画像修整部を、上記形状情報を有していないスト
リームの第１のエラーが検出されたとき、上記復号画像
データの修整を、上記第１の処理単位を修整単位として
行う第１の修整器と、上記形状情報を有していないスト
リームの第２のエラーが検出されたとき、上記復号画像
データの修整を、上記第２の処理単位を修整単位として
行う第２の修整器と、上記形状情報を有するビットスト
リームの第１のエラーあるいは第２のエラーが検出され
たとき、上記復号画像データの修整を、上記動画像の１
画面を修整単位として行う第３の修整器とを有する構成
としたものである。
動画像復号化装置において、上記ビットストリームを、
上記単位領域に対応する第１の処理単位を複数含む第２
の処理単位毎に上記符号化データに付与された同期信号
を含む構成とし、上記エラー検出部を、上記ビットスト
リームの伝送時に発生した第１のエラーを検出する第１
のエラー検出器と、該第１のエラー以外の第２のエラー
を検出する第２のエラー検出器とを有する構成とし、上
記復号画像修整部を、上記形状情報を有していないスト
リームの第１のエラーが検出されたとき、上記復号画像
データの修整を、上記第１の処理単位を修整単位として
行う第１の修整器と、上記形状情報を有していないスト
リームの第２のエラーが検出されたとき、上記復号画像
データの修整を、上記第２の処理単位を修整単位として
行う第２の修整器と、上記形状情報を有するビットスト
リームの第１のエラーあるいは第２のエラーが検出され
たとき、上記復号画像データの修整を、上記動画像の１
画面を修整単位として行う第３の修整器とを有する構成
としたものである。
【００７３】この発明（請求項７）に係るプログラム記
録媒体は、動画像に対応する画像データを第１の処理単
位毎に順次符号化してなる符号化データと、上記第１の
処理単位を複数含む第２の処理単位毎に上記符号化デー
タに付与された同期信号とを含むビットストリームに対
するデータ処理をコンピュータにより行うためのプログ
ラムを格納したプログラム記録媒体であって、上記デー
タ処理を、上記ビットストリームに含まれる符号化デー
タを上記第１の処理単位毎に復号化して復号画像データ
を生成する復号化処理と、上記ビットストリームの伝送
時に発生した第１のエラーと、該第１のエラー以外の第
２のエラーとを区別して検出するエラー検出処理と、上
記第１のエラーが検出されたとき、上記復号画像データ
の修整を上記第１の処理単位を修整単位として行い、上
記第２のエラーが検出されたとき、上記復号画像データ
の修整を上記第２の処理単位を修整単位として行う修整
処理とを処理としたものである。
録媒体は、動画像に対応する画像データを第１の処理単
位毎に順次符号化してなる符号化データと、上記第１の
処理単位を複数含む第２の処理単位毎に上記符号化デー
タに付与された同期信号とを含むビットストリームに対
するデータ処理をコンピュータにより行うためのプログ
ラムを格納したプログラム記録媒体であって、上記デー
タ処理を、上記ビットストリームに含まれる符号化デー
タを上記第１の処理単位毎に復号化して復号画像データ
を生成する復号化処理と、上記ビットストリームの伝送
時に発生した第１のエラーと、該第１のエラー以外の第
２のエラーとを区別して検出するエラー検出処理と、上
記第１のエラーが検出されたとき、上記復号画像データ
の修整を上記第１の処理単位を修整単位として行い、上
記第２のエラーが検出されたとき、上記復号画像データ
の修整を上記第２の処理単位を修整単位として行う修整
処理とを処理としたものである。
【００７４】この発明（請求項８）に係るプログラム記
録媒体は、動画像に対応する画像データを該動画像の１
画面を構成する単位領域毎に順次符号化してなる符号化
データを含むビットストリームに対するデータ処理をコ
ンピュータにより行うためのプログラムを格納したプロ
グラム記録媒体であって、上記データ処理を、上記ビッ
トストリームに含まれる符号化データを上記単位領域毎
に復号化して復号画像データを生成する復号化処理と、
上記ビットストリームのエラーを検出するエラー検出処
理と、上記ビットストリームが、上記動画像の形状を示
す形状情報を有するか否かを判定する形状有無判定処理
と、上記ビットストリームのエラーが検出され、かつ上
記ビットストリームが形状情報を有すると判定されたと
き、上記復号画像データの修整を、上記動画像の１画面
を修整単位として行い、上記ビットストリームのエラー
が検出され、かつ上記ビットストリームが形状情報を有
していないと判定されたとき、上記復号画像データの修
整を、上記単位領域を１つ以上含む、上記画面より小さ
い処理領域を修整単位として行う修整処理とを含む処理
としたものである。
録媒体は、動画像に対応する画像データを該動画像の１
画面を構成する単位領域毎に順次符号化してなる符号化
データを含むビットストリームに対するデータ処理をコ
ンピュータにより行うためのプログラムを格納したプロ
グラム記録媒体であって、上記データ処理を、上記ビッ
トストリームに含まれる符号化データを上記単位領域毎
に復号化して復号画像データを生成する復号化処理と、
上記ビットストリームのエラーを検出するエラー検出処
理と、上記ビットストリームが、上記動画像の形状を示
す形状情報を有するか否かを判定する形状有無判定処理
と、上記ビットストリームのエラーが検出され、かつ上
記ビットストリームが形状情報を有すると判定されたと
き、上記復号画像データの修整を、上記動画像の１画面
を修整単位として行い、上記ビットストリームのエラー
が検出され、かつ上記ビットストリームが形状情報を有
していないと判定されたとき、上記復号画像データの修
整を、上記単位領域を１つ以上含む、上記画面より小さ
い処理領域を修整単位として行う修整処理とを含む処理
としたものである。
【００７５】
【発明の実施の形態】以下、本発明の実施の形態につい
て説明する。 実施の形態1．図１は本発明の実施の形態１による動画
像復号化装置を説明するための図であり、図１(a)は該
動画像復号化装置の構成を示し、図１(b)は該動画像復
号化装置に入力されるＶＯＰビットストリームのデータ
構造を示している。
て説明する。 実施の形態1．図１は本発明の実施の形態１による動画
像復号化装置を説明するための図であり、図１(a)は該
動画像復号化装置の構成を示し、図１(b)は該動画像復
号化装置に入力されるＶＯＰビットストリームのデータ
構造を示している。
【００７６】この実施の形態１の動画像復号化装置１０
０ａは、画像符号化情報として入力されたビットストリ
ームを復号化して復号画像データを生成する復号化処理
を行い、該復号化処理では、伝送エラーを検出したとき
上記復号画像データをマクロブロック単位で修整し、伝
送エラー以外のストリームエラーを検出したとき上記復
号画像データをビデオパケット単位で修整するものであ
る。
０ａは、画像符号化情報として入力されたビットストリ
ームを復号化して復号画像データを生成する復号化処理
を行い、該復号化処理では、伝送エラーを検出したとき
上記復号画像データをマクロブロック単位で修整し、伝
送エラー以外のストリームエラーを検出したとき上記復
号画像データをビデオパケット単位で修整するものであ
る。
【００７７】ここで、上記ビットストリームを構成す
る、１つの画像系列の各ＶＯＰに対応するＶＯＰビット
ストリームは、同期信号としての特定ビットパターンの
固定長符号（マーカ符号）とこれに続く符号化情報とか
らなる複数のデータ単位（ビデオパケット）に区分され
ており、各ビデオパケットの符号化情報には、マクロブ
ロックに対応するデータ単位であるマクロブロック情報
が複数含まれている。このようにＶＯＰビットストリー
ムは、ビデオパケットに対応するデータ処理単位（第２
の処理単位）、及びマクロブロックに対応するデータ処
理単位（第１の処理単位）により区分された、２階層の
データ構造を有している。
る、１つの画像系列の各ＶＯＰに対応するＶＯＰビット
ストリームは、同期信号としての特定ビットパターンの
固定長符号（マーカ符号）とこれに続く符号化情報とか
らなる複数のデータ単位（ビデオパケット）に区分され
ており、各ビデオパケットの符号化情報には、マクロブ
ロックに対応するデータ単位であるマクロブロック情報
が複数含まれている。このようにＶＯＰビットストリー
ムは、ビデオパケットに対応するデータ処理単位（第２
の処理単位）、及びマクロブロックに対応するデータ処
理単位（第１の処理単位）により区分された、２階層の
データ構造を有している。
【００７８】以下、詳述すると、この実施の形態１の動
画像復号化装置１００ａは、画像符号化情報として入力
されたビットストリーム（以下入力ストリームとい
う。）Ｖinを構成するＶＯＰビットストリームに対し
て、可変長復号化処理を含む復号化処理を施す復号化器
１と、復号化処理が完了した処理済ＶＯＰに対応する復
号画像データＶoutを一時的に格納し、該格納された復
号画像データの一部を、上記復号化処理の際に参照され
る参照画像データＶref及び修整処理に用いられる置換
画像データＶrepとして出力するメモリ２とを有してい
る。ここで、上記復号化器１及びメモリ２は、従来の動
画像復号化装置１００及び１１０における復号化器１０
１及びメモリ１０２と全く同一の構成となっている。
画像復号化装置１００ａは、画像符号化情報として入力
されたビットストリーム（以下入力ストリームとい
う。）Ｖinを構成するＶＯＰビットストリームに対し
て、可変長復号化処理を含む復号化処理を施す復号化器
１と、復号化処理が完了した処理済ＶＯＰに対応する復
号画像データＶoutを一時的に格納し、該格納された復
号画像データの一部を、上記復号化処理の際に参照され
る参照画像データＶref及び修整処理に用いられる置換
画像データＶrepとして出力するメモリ２とを有してい
る。ここで、上記復号化器１及びメモリ２は、従来の動
画像復号化装置１００及び１１０における復号化器１０
１及びメモリ１０２と全く同一の構成となっている。
【００７９】また、この動画像復号化装置１００ａは、
上記復号化器１からの復号画像データＶｄと、上記メモ
リ２からの置換画像データVrepの一方をＭＢ選択制御信
号Ｃmbに基づいて選択し、該選択した画像データをＭＢ
選択画像データＥmbとして出力するＭＢ選択スイッチ５
と、該ＭＢ選択画像データＥmbを、処理対象となってい
るビデオパケットの復号化処理に要する時間だけ遅延す
る第１のＶＰ遅延回路１ａと、メモリ２から各マクロブ
ロックの復号化処理に同期して出力される置換画像デー
タＶrepを、処理対象となっているビデオパケットの復
号化処理に要する時間だけ遅延する第２のＶＰ遅延回路
２ａと、該第１の遅延回路１ａの出力（ＭＢ遅延選択デ
ータ）ＤＥmb及び第２の遅延回路２ａの出力（遅延置換
データ）ＤＶrepの一方をＶＰ選択制御信号Ｃvpに基づ
いて選択し、選択した画像データをＶＰ選択画像データ
Ｅvpとして出力するＶＰ選択スイッチ８とを有してい
る。
上記復号化器１からの復号画像データＶｄと、上記メモ
リ２からの置換画像データVrepの一方をＭＢ選択制御信
号Ｃmbに基づいて選択し、該選択した画像データをＭＢ
選択画像データＥmbとして出力するＭＢ選択スイッチ５
と、該ＭＢ選択画像データＥmbを、処理対象となってい
るビデオパケットの復号化処理に要する時間だけ遅延す
る第１のＶＰ遅延回路１ａと、メモリ２から各マクロブ
ロックの復号化処理に同期して出力される置換画像デー
タＶrepを、処理対象となっているビデオパケットの復
号化処理に要する時間だけ遅延する第２のＶＰ遅延回路
２ａと、該第１の遅延回路１ａの出力（ＭＢ遅延選択デ
ータ）ＤＥmb及び第２の遅延回路２ａの出力（遅延置換
データ）ＤＶrepの一方をＶＰ選択制御信号Ｃvpに基づ
いて選択し、選択した画像データをＶＰ選択画像データ
Ｅvpとして出力するＶＰ選択スイッチ８とを有してい
る。
【００８０】ここで、上記ＭＢ選択スイッチ５は、上記
復号化器１からの復号画像データＶｄが供給される第１
入力端子５ａと、上記メモリ２からの置換画像データＶ
repが供給される第２入力端子５ｂと、上記ＭＢ選択画
像データＥmbを出力するための出力端子５ｃとを有して
おり、上記ＭＢ選択制御信号Ｃmbにより、上記第１入力
端子５ａが出力端子５ｃに接続された状態と、上記第２
入力端子５ｂが出力端子５ｃに接続された状態とが切り
替えられるようになっている。また、上記ＶＰ選択スイ
ッチ８は、上記第１のＶＰ遅延回路１ａからのＭＢ遅延
選択データＤＥmbが供給される第１入力端子８ａと、上
記第２のＶＰ遅延回路２ａからの遅延置換データＤＶre
pが供給される第２入力端子８ｂと、上記ＶＰ選択画像
データＥvpを出力するための出力端子８ｃとを有してお
り、上記ＶＰ選択制御信号Ｃvpにより、上記第１入力端
子８ａが出力端子８ｃに接続された状態と、上記第２入
力端子８ｂが出力端子８ｃに接続された状態とが切り替
えられるようになっている。
復号化器１からの復号画像データＶｄが供給される第１
入力端子５ａと、上記メモリ２からの置換画像データＶ
repが供給される第２入力端子５ｂと、上記ＭＢ選択画
像データＥmbを出力するための出力端子５ｃとを有して
おり、上記ＭＢ選択制御信号Ｃmbにより、上記第１入力
端子５ａが出力端子５ｃに接続された状態と、上記第２
入力端子５ｂが出力端子５ｃに接続された状態とが切り
替えられるようになっている。また、上記ＶＰ選択スイ
ッチ８は、上記第１のＶＰ遅延回路１ａからのＭＢ遅延
選択データＤＥmbが供給される第１入力端子８ａと、上
記第２のＶＰ遅延回路２ａからの遅延置換データＤＶre
pが供給される第２入力端子８ｂと、上記ＶＰ選択画像
データＥvpを出力するための出力端子８ｃとを有してお
り、上記ＶＰ選択制御信号Ｃvpにより、上記第１入力端
子８ａが出力端子８ｃに接続された状態と、上記第２入
力端子８ｂが出力端子８ｃに接続された状態とが切り替
えられるようになっている。
【００８１】また、この動画像復号化装置１００ａは、
入力ストリームＶinの伝送エラーを検出して伝送エラー
通知信号Ｔerrを出力する伝送エラー検出器３と、上記
伝送エラー検出器３からの伝送エラー通知信号Ｔerr及
び上記復号化器１の内部信号Ｓｉに基づいて、入力スト
リームＶinのストリームエラーを検出し、ストリームエ
ラー通知信号Ｓerrを出力するストリームエラー検出器
６とを有している。
入力ストリームＶinの伝送エラーを検出して伝送エラー
通知信号Ｔerrを出力する伝送エラー検出器３と、上記
伝送エラー検出器３からの伝送エラー通知信号Ｔerr及
び上記復号化器１の内部信号Ｓｉに基づいて、入力スト
リームＶinのストリームエラーを検出し、ストリームエ
ラー通知信号Ｓerrを出力するストリームエラー検出器
６とを有している。
【００８２】ここで、上記伝送エラー検出器３は、従来
の動画像復号化装置１００におけるエラー検出器１２０
と同様、入力ストリームＶinにおけるパケット欠落を示
すマーカ符号に基づいて、伝送エラーを検出する構成と
なっている。なお、上記マーカ符号は、この動画像復号
化装置１００ａ前段に設けられたエラーチェック部（図
示せず）により入力ストリームに挿入されたものであ
る。このエラーチェック部は、入力ストリームのアナロ
グ信号レベルやエラー訂正符号に基づいて、入力ストリ
ームにおける伝送エラーに起因する欠陥個所を特定し、
この欠陥個所に上記マーカ符号を挿入するものである。
の動画像復号化装置１００におけるエラー検出器１２０
と同様、入力ストリームＶinにおけるパケット欠落を示
すマーカ符号に基づいて、伝送エラーを検出する構成と
なっている。なお、上記マーカ符号は、この動画像復号
化装置１００ａ前段に設けられたエラーチェック部（図
示せず）により入力ストリームに挿入されたものであ
る。このエラーチェック部は、入力ストリームのアナロ
グ信号レベルやエラー訂正符号に基づいて、入力ストリ
ームにおける伝送エラーに起因する欠陥個所を特定し、
この欠陥個所に上記マーカ符号を挿入するものである。
【００８３】また、上記ストリームエラー検出器６は、
具体的には、上記復号化器１の内部信号Ｓｉに基づい
て、入力ストリームＶinに対する復号化処理の破綻を検
出し、かつ伝送エラー通知信号Ｔerrにより伝送エラー
が発生していないことを検出したときのみ、上記ストリ
ームエラー通知信号Ｓerrを、ストリームエラーを検出
したことを示す信号として出力する構成となっている。
なお、ストリームエラー検出器６は、上記復号化処理の
破綻に代えて、ビデオパケット内のビットストリームの
構造及び内容を厳密に検査し、ビットストリームの異常
が検出され、かつ伝送エラーが発生していないことを検
出したときのみ、ストリームエラー通知信号Ｓerrを出
力する構成としてもよい。
具体的には、上記復号化器１の内部信号Ｓｉに基づい
て、入力ストリームＶinに対する復号化処理の破綻を検
出し、かつ伝送エラー通知信号Ｔerrにより伝送エラー
が発生していないことを検出したときのみ、上記ストリ
ームエラー通知信号Ｓerrを、ストリームエラーを検出
したことを示す信号として出力する構成となっている。
なお、ストリームエラー検出器６は、上記復号化処理の
破綻に代えて、ビデオパケット内のビットストリームの
構造及び内容を厳密に検査し、ビットストリームの異常
が検出され、かつ伝送エラーが発生していないことを検
出したときのみ、ストリームエラー通知信号Ｓerrを出
力する構成としてもよい。
【００８４】さらに、上記動画像復号化装置１００ａ
は、上記伝送エラー通知信号Ｔerrに基づいて、上記Ｍ
Ｂ選択スイッチ５をＭＢ選択制御信号Ｃmbにより制御し
て、被処理ＶＯＰの復号画像データＶｄにおける伝送エ
ラーの影響を受けている部分を、マクロブロック単位
で、処理済ＶＯＰの復号画像データ（置換画像データ）
Ｖrepと置き換えるマクロブロック単位修整器４と、上
記ストリームエラー通知信号Ｓerrに基づいて、上記Ｖ
Ｐ選択スイッチ８をＶＰ選択制御信号Ｃvpにより制御し
て、被処理ＶＯＰの遅延画像データＤＶｄにおけるスト
リームエラーの影響を受けている部分を、ビデオパケッ
ト単位で、処理済ＶＯＰの遅延置換データＤＶrepと置
き換えるビデオパケット単位修整器７とを有している。
は、上記伝送エラー通知信号Ｔerrに基づいて、上記Ｍ
Ｂ選択スイッチ５をＭＢ選択制御信号Ｃmbにより制御し
て、被処理ＶＯＰの復号画像データＶｄにおける伝送エ
ラーの影響を受けている部分を、マクロブロック単位
で、処理済ＶＯＰの復号画像データ（置換画像データ）
Ｖrepと置き換えるマクロブロック単位修整器４と、上
記ストリームエラー通知信号Ｓerrに基づいて、上記Ｖ
Ｐ選択スイッチ８をＶＰ選択制御信号Ｃvpにより制御し
て、被処理ＶＯＰの遅延画像データＤＶｄにおけるスト
リームエラーの影響を受けている部分を、ビデオパケッ
ト単位で、処理済ＶＯＰの遅延置換データＤＶrepと置
き換えるビデオパケット単位修整器７とを有している。
【００８５】なお、上記マクロブロック単位修整器４
は、図１２に示す従来の動画像復号化装置１００におけ
るマクロブロック単位修整器１０４と同一の構成となっ
ている。
は、図１２に示す従来の動画像復号化装置１００におけ
るマクロブロック単位修整器１０４と同一の構成となっ
ている。
【００８６】次に動作について説明する。まず本実施の
形態１の動画像復号化装置による復号化処理の概略を説
明する。図２は上記実施の形態１の動画像復号化装置に
よる復号化処理のフローを示す図である。この実施の形
態１の動画像復号化装置１００ａに画像信号の符号化情
報としてビットストリーム（入力ストリーム）Ｖinが入
力されると、被処理ＶＯＰのストリームに対して、処理
済ＶＯＰの復号画像データＶrefを参照する復号化処理
がマクロブロック毎に施されて、各マクロブロックに対
応する復号画像データＶｄが生成される（ステップＳ１
ａ）。
形態１の動画像復号化装置による復号化処理の概略を説
明する。図２は上記実施の形態１の動画像復号化装置に
よる復号化処理のフローを示す図である。この実施の形
態１の動画像復号化装置１００ａに画像信号の符号化情
報としてビットストリーム（入力ストリーム）Ｖinが入
力されると、被処理ＶＯＰのストリームに対して、処理
済ＶＯＰの復号画像データＶrefを参照する復号化処理
がマクロブロック毎に施されて、各マクロブロックに対
応する復号画像データＶｄが生成される（ステップＳ１
ａ）。
【００８７】次に入力ストリームＶinの伝送エラーを検
出する処理が行われる（ステップＳ２ａ）。この伝送エ
ラー検出処理により伝送エラーが検出された場合、復号
画像データの修整処理がマクロブロック単位に行われる
（ステップＳ３ａ）。つまり、伝送エラーを含むマクロ
ブロック情報から得られるエラーマクロブロックの復号
画像データは、処理済ＶＯＰにおける、該エラーマクロ
ブロックに対応するマクロブロックの復号画像データＶ
repと置き換えられる。一方、上記エラー検出処理の結
果、伝送エラーが検出されない場合、入力ストリームＶ
inのストリームエラーを検出する処理が行われる（ステ
ップＳ４ａ）。
出する処理が行われる（ステップＳ２ａ）。この伝送エ
ラー検出処理により伝送エラーが検出された場合、復号
画像データの修整処理がマクロブロック単位に行われる
（ステップＳ３ａ）。つまり、伝送エラーを含むマクロ
ブロック情報から得られるエラーマクロブロックの復号
画像データは、処理済ＶＯＰにおける、該エラーマクロ
ブロックに対応するマクロブロックの復号画像データＶ
repと置き換えられる。一方、上記エラー検出処理の結
果、伝送エラーが検出されない場合、入力ストリームＶ
inのストリームエラーを検出する処理が行われる（ステ
ップＳ４ａ）。
【００８８】このストリームエラー検出処理により、ス
トリームエラーが検出された場合のみ、復号画像データ
の修整処理がビデオパケット単位で行われる。つまり、
ストリームエラーを含むエラービデオパケットに対応す
る遅延復号データＤＶｄが、該エラービデオパケットに
対応する遅延置換データＤＶrepと置き換えられる（ス
テップＳ５ａ）。
トリームエラーが検出された場合のみ、復号画像データ
の修整処理がビデオパケット単位で行われる。つまり、
ストリームエラーを含むエラービデオパケットに対応す
る遅延復号データＤＶｄが、該エラービデオパケットに
対応する遅延置換データＤＶrepと置き換えられる（ス
テップＳ５ａ）。
【００８９】以下、動作について詳しく説明する。記録
媒体から読み出されたビットストリームあるいは伝送媒
体を介して送信されてきたビットストリームが入力スト
リームＶinとして、この動画像復号化装置１００ａに入
力されると、この動画像復号化装置１００ａでは、復号
化器１により入力ストリームＶinの復号化処理が、メモ
リ２からの処理済ＶＯＰの復号画像データＶrefを参照
して行われる。このとき、伝送エラー検出器３では、入
力ストリームＶinに基づいて伝送エラーの検出が行わ
れ、入力ストリームにおけるマーカ符号が検出されたと
き、伝送エラー通知信号Ｔerrがマクロブロック単位修
整器４及びストリームエラー検出器６に出力される。
媒体から読み出されたビットストリームあるいは伝送媒
体を介して送信されてきたビットストリームが入力スト
リームＶinとして、この動画像復号化装置１００ａに入
力されると、この動画像復号化装置１００ａでは、復号
化器１により入力ストリームＶinの復号化処理が、メモ
リ２からの処理済ＶＯＰの復号画像データＶrefを参照
して行われる。このとき、伝送エラー検出器３では、入
力ストリームＶinに基づいて伝送エラーの検出が行わ
れ、入力ストリームにおけるマーカ符号が検出されたと
き、伝送エラー通知信号Ｔerrがマクロブロック単位修
整器４及びストリームエラー検出器６に出力される。
【００９０】上記マクロブロック単位修整器４では、伝
送エラー通知信号Ｔerrに基づいて上記ＭＢ選択スイッ
チ５にＭＢ選択制御信号Ｃmbが出力される。これにより
該ＭＢ選択スイッチ５では、復号化器１からの被処理Ｖ
ＯＰの復号画像データＶｄとメモリ２からの処理済ＶＯ
Ｐの復号画像データＶrepの一方がマクロブロック毎に
選択され、該選択された画像データがＭＢ選択画像デー
タＥmbとして出力される。
送エラー通知信号Ｔerrに基づいて上記ＭＢ選択スイッ
チ５にＭＢ選択制御信号Ｃmbが出力される。これにより
該ＭＢ選択スイッチ５では、復号化器１からの被処理Ｖ
ＯＰの復号画像データＶｄとメモリ２からの処理済ＶＯ
Ｐの復号画像データＶrepの一方がマクロブロック毎に
選択され、該選択された画像データがＭＢ選択画像デー
タＥmbとして出力される。
【００９１】具体的には、上記伝送エラーが検出された
ときは、ＶＯＰビットストリームにおける先頭のマクロ
ブロック情報から、上記マーカ符号を含むエラーマクロ
ブロック情報直前のマクロブロック情報までのマクロブ
ロック情報に対応する復号画像データＶｄは、上記ＭＢ
選択スイッチ５により選択され、ＭＢ選択画像データＥ
mbとして出力される。そして、上記エラーマクロブロッ
ク情報から次の同期信号の手前までのマクロブロック情
報に対応する復号画像データＶｄは、上記ＭＢ選択スイ
ッチ５では選択されず、該復号画像データＶｄに対応す
る処理済ＶＯＰの復号画像データＶrepが置換画像デー
タとして上記ＭＢ選択スイッチ５にて選択されて、選択
されたデータが上記ＭＢ選択画像データＥmbとして出力
される。
ときは、ＶＯＰビットストリームにおける先頭のマクロ
ブロック情報から、上記マーカ符号を含むエラーマクロ
ブロック情報直前のマクロブロック情報までのマクロブ
ロック情報に対応する復号画像データＶｄは、上記ＭＢ
選択スイッチ５により選択され、ＭＢ選択画像データＥ
mbとして出力される。そして、上記エラーマクロブロッ
ク情報から次の同期信号の手前までのマクロブロック情
報に対応する復号画像データＶｄは、上記ＭＢ選択スイ
ッチ５では選択されず、該復号画像データＶｄに対応す
る処理済ＶＯＰの復号画像データＶrepが置換画像デー
タとして上記ＭＢ選択スイッチ５にて選択されて、選択
されたデータが上記ＭＢ選択画像データＥmbとして出力
される。
【００９２】以下図１(b)を用いて、上記ＭＢ選択スイ
ッチ５の動作をさらに具体的に説明する。ここでは、入
力されたＶＯＰビットストリームＳvopのｋ番目のビデ
オパケットＳvp(k)におけるｉ番目のマクロブロック情
報Ｓmb(i)にマーカ符号Ｃｍが含まれている場合、つま
りビデオパケットＳvp(k)におけるマクロブロック情報
Ｓmb(i)に伝送エラーによる欠陥がある場合について説
明する。
ッチ５の動作をさらに具体的に説明する。ここでは、入
力されたＶＯＰビットストリームＳvopのｋ番目のビデ
オパケットＳvp(k)におけるｉ番目のマクロブロック情
報Ｓmb(i)にマーカ符号Ｃｍが含まれている場合、つま
りビデオパケットＳvp(k)におけるマクロブロック情報
Ｓmb(i)に伝送エラーによる欠陥がある場合について説
明する。
【００９３】この場合、ｋ番目のビデオパケットＳvp
(k)の第１番目のマクロブロック情報Ｓmb(1)から第（ｉ
−１）番目のマクロブロック情報Ｓmb(i-1)までの各マ
クロブロック情報に対応する復号画像データは、上記Ｍ
Ｂ選択スイッチ５にて選択される。第ｋ番目のビデオパ
ケットＳvp(k)の第ｉ番目のマクロブロック情報Ｓmb(i)
以降のマクロブロック情報に対応する復号画像データ
は、上記ＭＢ選択スイッチ５にて選択されず、該ＭＢ選
択スイッチ５では、これらのマクロブロックの復号画像
データＶｄに対応する、処理済ＶＯＰにおけるマクロブ
ロックの復号画像データＶrepが置換画像データとして
選択される。ここで、第ｋ番目のビデオパケットＳvp
(k)の第（ｉ＋１）番目のマクロブロック情報は、伝送
エラーのために欠落している。また、第ｋ番目のビデオ
パケットＳvp(k)の第（ｉ＋２）番目，第（ｉ＋３）番
目，・・・，第（ｎ）番目のマクロブロック情報Ｓmb(i
+2)，Ｓmb(i+3)，・・・，Ｓmb(n)は、第ｋ番目のビデ
オパケットＳvp(k)の第（ｉ＋２）番目，第（ｉ＋３）
番目，・・・，第（ｎ）番目のマクロブロック情報であ
り、ここでは、これらのマクロブロック情報Ｓmb(i+2)
〜Ｓmb(n)は、伝送エラーなく受信できたものとなって
いる。但し、第（ｉ＋１）番目のマクロブロック情報が
正しく復号化できなければ、第（ｉ＋２）番目，第（ｉ
＋３）番目，・・・，第（ｎ）番目のマクロブロック情
報も正しく復号化できないため、第（ｉ＋１）番目から
第（ｎ）番目までの全てのマクロブロック情報に対応す
る復号画像データＶrepが置換画像データにより置き換
えられる。
(k)の第１番目のマクロブロック情報Ｓmb(1)から第（ｉ
−１）番目のマクロブロック情報Ｓmb(i-1)までの各マ
クロブロック情報に対応する復号画像データは、上記Ｍ
Ｂ選択スイッチ５にて選択される。第ｋ番目のビデオパ
ケットＳvp(k)の第ｉ番目のマクロブロック情報Ｓmb(i)
以降のマクロブロック情報に対応する復号画像データ
は、上記ＭＢ選択スイッチ５にて選択されず、該ＭＢ選
択スイッチ５では、これらのマクロブロックの復号画像
データＶｄに対応する、処理済ＶＯＰにおけるマクロブ
ロックの復号画像データＶrepが置換画像データとして
選択される。ここで、第ｋ番目のビデオパケットＳvp
(k)の第（ｉ＋１）番目のマクロブロック情報は、伝送
エラーのために欠落している。また、第ｋ番目のビデオ
パケットＳvp(k)の第（ｉ＋２）番目，第（ｉ＋３）番
目，・・・，第（ｎ）番目のマクロブロック情報Ｓmb(i
+2)，Ｓmb(i+3)，・・・，Ｓmb(n)は、第ｋ番目のビデ
オパケットＳvp(k)の第（ｉ＋２）番目，第（ｉ＋３）
番目，・・・，第（ｎ）番目のマクロブロック情報であ
り、ここでは、これらのマクロブロック情報Ｓmb(i+2)
〜Ｓmb(n)は、伝送エラーなく受信できたものとなって
いる。但し、第（ｉ＋１）番目のマクロブロック情報が
正しく復号化できなければ、第（ｉ＋２）番目，第（ｉ
＋３）番目，・・・，第（ｎ）番目のマクロブロック情
報も正しく復号化できないため、第（ｉ＋１）番目から
第（ｎ）番目までの全てのマクロブロック情報に対応す
る復号画像データＶrepが置換画像データにより置き換
えられる。
【００９４】なお、図１(b)中、ＳvophはＶＯＰビット
ストリームのヘッダで同期信号が含まれている。また、
Ｓvp(1)，Ｓvp(k+1)，Ｓvp(m)はそれぞれ、ＶＯＰビッ
トストリームＳvophを構成する、第１番目，第（ｋ＋
１）番目，最後のビデオパケットであり、Ｓvph(1)，Ｓ
vph(k)，Ｓvph(k+1)，Ｓvph(m)は、各ビデオパケットＳ
vp(1)，Ｓvp(k)，Ｓvp(k+1)，Ｓvp(m)のヘッダである。
ストリームのヘッダで同期信号が含まれている。また、
Ｓvp(1)，Ｓvp(k+1)，Ｓvp(m)はそれぞれ、ＶＯＰビッ
トストリームＳvophを構成する、第１番目，第（ｋ＋
１）番目，最後のビデオパケットであり、Ｓvph(1)，Ｓ
vph(k)，Ｓvph(k+1)，Ｓvph(m)は、各ビデオパケットＳ
vp(1)，Ｓvp(k)，Ｓvp(k+1)，Ｓvp(m)のヘッダである。
【００９５】また、ストリームエラー検出器６では、上
記伝送エラー検出器３からの伝送エラー通知信号Ｔerr
に基づいて、入力ストリームに伝送エラーが含まれてい
るか否かの判定が行われ、復号化器１の内部信号Ｓｉに
より入力ストリームに対する復号化処理が破綻したか否
かが判定される。そして、これらの判定に基づいて、入
力ストリームＶinのストリームエラーを検出する処理が
行われる。
記伝送エラー検出器３からの伝送エラー通知信号Ｔerr
に基づいて、入力ストリームに伝送エラーが含まれてい
るか否かの判定が行われ、復号化器１の内部信号Ｓｉに
より入力ストリームに対する復号化処理が破綻したか否
かが判定される。そして、これらの判定に基づいて、入
力ストリームＶinのストリームエラーを検出する処理が
行われる。
【００９６】例えば、入力ストリームに対する復号化処
理が破綻した場合、上記ストリームエラー検出器６で
は、上記復号化処理の破綻が復号化器１の内部信号Ｓｉ
により検出される。そしてこのとき、伝送エラー通知信
号Ｔerrにより伝送エラーの検出が通知されておれば、
復号化処理の破綻は伝送エラーに起因するものである。
従って、この場合は、ストリームエラー通知信号Ｓerr
は出力されない。一方、伝送エラー通知信号Ｔerrによ
る伝送エラーの発生の通知がなければ、復号化処理の破
綻はストリームエラーに起因するものである。従って、
この場合には、ストリームエラーが入力ストリームに含
まれていると判定され、ストリームエラー通知信号Ｓer
rがビデオパケット単位修整器７に出力される。
理が破綻した場合、上記ストリームエラー検出器６で
は、上記復号化処理の破綻が復号化器１の内部信号Ｓｉ
により検出される。そしてこのとき、伝送エラー通知信
号Ｔerrにより伝送エラーの検出が通知されておれば、
復号化処理の破綻は伝送エラーに起因するものである。
従って、この場合は、ストリームエラー通知信号Ｓerr
は出力されない。一方、伝送エラー通知信号Ｔerrによ
る伝送エラーの発生の通知がなければ、復号化処理の破
綻はストリームエラーに起因するものである。従って、
この場合には、ストリームエラーが入力ストリームに含
まれていると判定され、ストリームエラー通知信号Ｓer
rがビデオパケット単位修整器７に出力される。
【００９７】なお、ストリームエラー検出器６では、伝
送エラー検出器３が伝送エラーを検出した状態では、伝
送エラーを含むビデオパケットに対してはストリームエ
ラーの検出処理は行わないようにしてもよい。
送エラー検出器３が伝送エラーを検出した状態では、伝
送エラーを含むビデオパケットに対してはストリームエ
ラーの検出処理は行わないようにしてもよい。
【００９８】そして、上記ビデオパケット単位修整器７
では、ストリームエラー通知信号Ｓerrに基づいて上記
ＶＰ選択スイッチ８にＶＰ選択制御信号Ｃvpが出力され
る。これによりＶＰ選択スイッチ８では、第１のＶＰ遅
延回路１ａからの被処理ＶＯＰの遅延選択データＤＥｍ
ｂと、第２のＶＰ遅延回路２ａからの処理済ＶＯＰの遅
延置換データＤＶrepの一方がビデオパケット毎に選択
され、該ＶＰ選択スイッチ８からは、ＶＰ選択画像デー
タＥvpが再生画像データＶoutとして出力される。
では、ストリームエラー通知信号Ｓerrに基づいて上記
ＶＰ選択スイッチ８にＶＰ選択制御信号Ｃvpが出力され
る。これによりＶＰ選択スイッチ８では、第１のＶＰ遅
延回路１ａからの被処理ＶＯＰの遅延選択データＤＥｍ
ｂと、第２のＶＰ遅延回路２ａからの処理済ＶＯＰの遅
延置換データＤＶrepの一方がビデオパケット毎に選択
され、該ＶＰ選択スイッチ８からは、ＶＰ選択画像デー
タＥvpが再生画像データＶoutとして出力される。
【００９９】具体的には、入力ストリームＶinにストリ
ームエラーが含まれている場合、ＶＯＰビットストリー
ムにおける復号化処理が破綻したエラービデオパケット
に対応する遅延復号データＤＶｄは、上記ＶＰ選択スイ
ッチ８により選択されず、該遅延復号データＤＶｄに対
応する遅延置換データ（処理済ＶＯＰのビデオパケット
の復号画像データ）ＤＶrepが上記ＶＰ選択スイッチ８
にて選択され、選択された画像データが上記ＶＰ選択画
像データＥvpとして出力される。一方、ＶＯＰストリー
ムにおける、復号化処理が破綻したビデオパケット以外
のビデオパケットに対応する遅延復号データＤＶｄは、
上記ＶＰ選択スイッチ８により選択され、選択された画
像データがＶＰ選択画像データＥvpとして出力される。
ームエラーが含まれている場合、ＶＯＰビットストリー
ムにおける復号化処理が破綻したエラービデオパケット
に対応する遅延復号データＤＶｄは、上記ＶＰ選択スイ
ッチ８により選択されず、該遅延復号データＤＶｄに対
応する遅延置換データ（処理済ＶＯＰのビデオパケット
の復号画像データ）ＤＶrepが上記ＶＰ選択スイッチ８
にて選択され、選択された画像データが上記ＶＰ選択画
像データＥvpとして出力される。一方、ＶＯＰストリー
ムにおける、復号化処理が破綻したビデオパケット以外
のビデオパケットに対応する遅延復号データＤＶｄは、
上記ＶＰ選択スイッチ８により選択され、選択された画
像データがＶＰ選択画像データＥvpとして出力される。
【０１００】そして、このＶＰ選択画像データＥvpは、
再生画像データＶoutとして出力されるとともに、被処
理ＶＯＰに続く後続ＶＯＰに対する参照画像データとし
て上記メモリ２に格納される。
再生画像データＶoutとして出力されるとともに、被処
理ＶＯＰに続く後続ＶＯＰに対する参照画像データとし
て上記メモリ２に格納される。
【０１０１】このように本実施の形態１では、入力スト
リームをマクロブロック毎に復号化して復号画像データ
を生成する復号化器１と、入力ストリームに含まれる伝
送エラーを検出する伝送エラー検出器３と、入力ストリ
ームに含まれるストリームエラーを検出するストリーム
エラー検出器６とを備え、伝送エラーの影響を受けるマ
クロブロックの復号画像データを、処理済ＶＯＰの対応
するマクロブロックの復号画像データと置き換え、スト
リームエラーを含むビデオパケットに対応する復号画像
データを、処理済ＶＯＰにおける対応するビデオパケッ
トの復号画像データと置き換えるようにしたので、伝送
エラーに対する復号画像データの修整がマクロブロック
単位で行われ、ストリームエラーに対する復号画像デー
タの修整がビデオパケット単位で行われることとなる。
リームをマクロブロック毎に復号化して復号画像データ
を生成する復号化器１と、入力ストリームに含まれる伝
送エラーを検出する伝送エラー検出器３と、入力ストリ
ームに含まれるストリームエラーを検出するストリーム
エラー検出器６とを備え、伝送エラーの影響を受けるマ
クロブロックの復号画像データを、処理済ＶＯＰの対応
するマクロブロックの復号画像データと置き換え、スト
リームエラーを含むビデオパケットに対応する復号画像
データを、処理済ＶＯＰにおける対応するビデオパケッ
トの復号画像データと置き換えるようにしたので、伝送
エラーに対する復号画像データの修整がマクロブロック
単位で行われ、ストリームエラーに対する復号画像デー
タの修整がビデオパケット単位で行われることとなる。
【０１０２】これにより、伝送エラーが発生した場合に
は、伝送エラーの影響を受けるマクロブロックの復号画
像データのみが修整されることとなり、伝送エラーの影
響を受けていないマクロブロックの復号画像データを修
整することによる復号画像の画質劣化を回避できる。ま
た、ストリームエラーが発生した場合には、ストリーム
エラーが含まれるビデオパケットに対応するすべてのマ
クロブロックの復号画像データが修整されることとな
り、ストリームエラーの影響を受けているマクロブロッ
クの復号画像データが出力されることによる復号画像の
画質劣化を防止することができる。この結果、入力スト
リームに含まれるエラーに対する復号画像データの修整
処理を効果的に行って、復号画像の画質を向上すること
ができる
は、伝送エラーの影響を受けるマクロブロックの復号画
像データのみが修整されることとなり、伝送エラーの影
響を受けていないマクロブロックの復号画像データを修
整することによる復号画像の画質劣化を回避できる。ま
た、ストリームエラーが発生した場合には、ストリーム
エラーが含まれるビデオパケットに対応するすべてのマ
クロブロックの復号画像データが修整されることとな
り、ストリームエラーの影響を受けているマクロブロッ
クの復号画像データが出力されることによる復号画像の
画質劣化を防止することができる。この結果、入力スト
リームに含まれるエラーに対する復号画像データの修整
処理を効果的に行って、復号画像の画質を向上すること
ができる
【０１０３】なお、上記実施の形態１では、入力ストリ
ームが２階層のデータ構造を有する場合、つまり入力ス
トリームを構成するＶＯＰビットストリームがビデオパ
ケット単位で区分され、さらにビデオパケットが符号化
処理の単位であるマクロブロックを単位として区分され
ている場合について説明したが、入力ストリームの２階
層データ構造は上記実施の形態１のものに限らない。
ームが２階層のデータ構造を有する場合、つまり入力ス
トリームを構成するＶＯＰビットストリームがビデオパ
ケット単位で区分され、さらにビデオパケットが符号化
処理の単位であるマクロブロックを単位として区分され
ている場合について説明したが、入力ストリームの２階
層データ構造は上記実施の形態１のものに限らない。
【０１０４】例えば、上記入力ストリームは、ＶＯＰビ
ットストリームがビデオパケットを単位として区分さ
れ、さらにビデオパケットが、上記マクロブロックでは
なく、符号化処理の最小単位であるブロック（８×８画
素）を単位として区分されているデータ構造を有するも
のであってもよい。この場合、伝送エラーに対する復号
画像データの修整は、ブロック単位で行うことにより、
上記実施の形態１と同様な効果が得られる。
ットストリームがビデオパケットを単位として区分さ
れ、さらにビデオパケットが、上記マクロブロックでは
なく、符号化処理の最小単位であるブロック（８×８画
素）を単位として区分されているデータ構造を有するも
のであってもよい。この場合、伝送エラーに対する復号
画像データの修整は、ブロック単位で行うことにより、
上記実施の形態１と同様な効果が得られる。
【０１０５】このように、上記入力ストリームの２階層
データ構造は、画像系列の１画面（ＶＯＰ）に対応する
ＶＯＰビットストリームが、同期信号とこれに続く符号
化情報からなるデータ単位毎に区分され、このデータ単
位が、ＶＯＰを区画する、符号化処理の単位となる領域
に対応するよう区分されたデータ構造であれば、どのよ
うな２階層のデータ構造であってもよい。この場合、伝
送エラーに対する復号画像データの修整を、符号化処理
の単位に相当するデータ単位（第１の処理単位）で行
い、ストリームエラーに対する復号画像データの修整
を、上記同期信号を含むデータ単位（第２の処理単位）
で行うことにより、上記実施の形態１と同様の効果が得
られる。
データ構造は、画像系列の１画面（ＶＯＰ）に対応する
ＶＯＰビットストリームが、同期信号とこれに続く符号
化情報からなるデータ単位毎に区分され、このデータ単
位が、ＶＯＰを区画する、符号化処理の単位となる領域
に対応するよう区分されたデータ構造であれば、どのよ
うな２階層のデータ構造であってもよい。この場合、伝
送エラーに対する復号画像データの修整を、符号化処理
の単位に相当するデータ単位（第１の処理単位）で行
い、ストリームエラーに対する復号画像データの修整
を、上記同期信号を含むデータ単位（第２の処理単位）
で行うことにより、上記実施の形態１と同様の効果が得
られる。
【０１０６】さらに、上記実施の形態１では、入力スト
リームとして２階層のデータ構造を有するものを示した
が、入力ストリームにおけるデータの階層構造は、３階
層以上のデータ構造であってもよく、入力ストリーム
が、同期信号とこれに続く符号化情報からなるデータ単
位（第２の処理単位）毎に区分され、このデータ単位
が、符号化処理の単位に相当するデータ単位（第１の処
理単位）に対応するよう区分されているものであれば、
どのような多階層のデータ構造を有するものでもよい。
リームとして２階層のデータ構造を有するものを示した
が、入力ストリームにおけるデータの階層構造は、３階
層以上のデータ構造であってもよく、入力ストリーム
が、同期信号とこれに続く符号化情報からなるデータ単
位（第２の処理単位）毎に区分され、このデータ単位
が、符号化処理の単位に相当するデータ単位（第１の処
理単位）に対応するよう区分されているものであれば、
どのような多階層のデータ構造を有するものでもよい。
【０１０７】また、上記実施の形態１では、ビデオパケ
ットを区分するデータ単位（第１の処理単位）に相当す
るマクロブロックを１６×１６画素からなる画像空間と
して説明したが、マクロブロックを構成する水平方向及
び垂直方向の画素数は動画像の符号化方法に応じて変更
してもよい。
ットを区分するデータ単位（第１の処理単位）に相当す
るマクロブロックを１６×１６画素からなる画像空間と
して説明したが、マクロブロックを構成する水平方向及
び垂直方向の画素数は動画像の符号化方法に応じて変更
してもよい。
【０１０８】実施の形態２．図３は本発明の実施の形態
２による動画像復号化装置を説明するためのブロック図
である。この実施の形態２の動画像復号化装置１００ｂ
は、形状を有しない物体に対応するビットストリームの
復号化処理では、上記実施の形態１と同様、伝送エラー
を検出したとき復号画像データの修整をマクロブロック
単位で行い、またストリームエラーを検出したとき復号
画像データの修整をビデオパケット単位で行い、形状を
有する物体に対応するビットストリームの復号化処理で
は、エラーを検出したときには、復号画像データをＶＯ
Ｐ単位で修整するようにしたものである。
２による動画像復号化装置を説明するためのブロック図
である。この実施の形態２の動画像復号化装置１００ｂ
は、形状を有しない物体に対応するビットストリームの
復号化処理では、上記実施の形態１と同様、伝送エラー
を検出したとき復号画像データの修整をマクロブロック
単位で行い、またストリームエラーを検出したとき復号
画像データの修整をビデオパケット単位で行い、形状を
有する物体に対応するビットストリームの復号化処理で
は、エラーを検出したときには、復号画像データをＶＯ
Ｐ単位で修整するようにしたものである。
【０１０９】この実施の形態２の動画像復号化装置１０
０ｂは、上記実施の形態１の動画像復号化装置１００ａ
の構成に加えて、上記ＶＯＰ単位での復号画像データの
修整を行うための回路構成を備えたものである。
０ｂは、上記実施の形態１の動画像復号化装置１００ａ
の構成に加えて、上記ＶＯＰ単位での復号画像データの
修整を行うための回路構成を備えたものである。
【０１１０】以下詳述すると、この実施の形態２の動画
像復号化装置１００ｂは、上記実施の形態１と同様、上
記復号化器１，メモリ２，検出器３及び６，修整器４及
び７，選択スイッチ５及び８，遅延回路１ａ及び２ａを
有している。そして、この実施の形態２の動画像復号化
装置１００ｂは、上記伝送エラー検出器３からの伝送エ
ラー通知信号Ｔerrとストリームエラー検出器６からの
ストリームエラー通知信号Ｓerrとの論理和演算によ
り、入力ストリームに伝送エラーあるいはストリームエ
ラーが含まれていることを示すエラー検出信号ＴＳerr
を出力する論理和回路９と、入力ストリームＶinに基づ
いて、該入力ストリームが形状情報を有するか否かを判
定し、この判定結果に応じて形状有無通知信号Ｓdetを
出力する形状有無検出器１０とを有している。
像復号化装置１００ｂは、上記実施の形態１と同様、上
記復号化器１，メモリ２，検出器３及び６，修整器４及
び７，選択スイッチ５及び８，遅延回路１ａ及び２ａを
有している。そして、この実施の形態２の動画像復号化
装置１００ｂは、上記伝送エラー検出器３からの伝送エ
ラー通知信号Ｔerrとストリームエラー検出器６からの
ストリームエラー通知信号Ｓerrとの論理和演算によ
り、入力ストリームに伝送エラーあるいはストリームエ
ラーが含まれていることを示すエラー検出信号ＴＳerr
を出力する論理和回路９と、入力ストリームＶinに基づ
いて、該入力ストリームが形状情報を有するか否かを判
定し、この判定結果に応じて形状有無通知信号Ｓdetを
出力する形状有無検出器１０とを有している。
【０１１１】また、この動画像復号化装置１００ｂは、
上記ＶＰ選択スイッチ８から出力されるＶＰ選択画像デ
ータＥvpを、処理対象となっている被処理ＶＯＰの復号
化処理に要する時間だけ遅延してＶＯＰ遅延選択データ
ＤＥvpを出力する第１のＶＯＰ遅延回路１ｂと、上記第
２のＶＰ遅延回路２ａから出力されたＶＰ遅延置換デー
タ（第１の遅延置換データ）ＤＶrep1を、１ＶＯＰの復
号化処理に要する時間だけ遅延してＶＯＰ遅延置換デー
タ（第２の遅延置換データ）ＤＶrep2を出力する第２の
ＶＯＰ遅延回路２ｂとを有している。
上記ＶＰ選択スイッチ８から出力されるＶＰ選択画像デ
ータＥvpを、処理対象となっている被処理ＶＯＰの復号
化処理に要する時間だけ遅延してＶＯＰ遅延選択データ
ＤＥvpを出力する第１のＶＯＰ遅延回路１ｂと、上記第
２のＶＰ遅延回路２ａから出力されたＶＰ遅延置換デー
タ（第１の遅延置換データ）ＤＶrep1を、１ＶＯＰの復
号化処理に要する時間だけ遅延してＶＯＰ遅延置換デー
タ（第２の遅延置換データ）ＤＶrep2を出力する第２の
ＶＯＰ遅延回路２ｂとを有している。
【０１１２】さらに、この動画像復号化装置１００ｂ
は、上記第１のＶＯＰ遅延回路１ｂからのＶＯＰ遅延選
択データＤＥvpと、第２のＶＯＰ遅延回路２ｂからのＶ
ＯＰ遅延置換データＤＶrep2の一方を、ＶＯＰ選択制御
信号Ｃvopに基づいて選択し、選択した画像データをＶ
ＯＰ選択画像データＥvopとして出力するＶＯＰ選択ス
イッチ１３と、上記エラー検出信号ＴＳerrと形状有無
通知信号Ｓdetとの論理積演算により、形状情報を有す
る入力ストリームにエラーが含まれていることを示すス
トリーム情報Ｉstrを出力する論理積回路１１と、該ス
トリーム情報Ｉstrに基づいて、形状情報を有する入力
ストリームに含まれるエラーが検出されたとき、上記第
１のＶＯＰ遅延回路１ｂからのＶＯＰ遅延選択データＤ
Ｅvpが、ＶＯＰ単位で修整されるよう、上記ＶＯＰ選択
スイッチ１３を制御するＶＯＰ単位修整器１２とを有し
ている。
は、上記第１のＶＯＰ遅延回路１ｂからのＶＯＰ遅延選
択データＤＥvpと、第２のＶＯＰ遅延回路２ｂからのＶ
ＯＰ遅延置換データＤＶrep2の一方を、ＶＯＰ選択制御
信号Ｃvopに基づいて選択し、選択した画像データをＶ
ＯＰ選択画像データＥvopとして出力するＶＯＰ選択ス
イッチ１３と、上記エラー検出信号ＴＳerrと形状有無
通知信号Ｓdetとの論理積演算により、形状情報を有す
る入力ストリームにエラーが含まれていることを示すス
トリーム情報Ｉstrを出力する論理積回路１１と、該ス
トリーム情報Ｉstrに基づいて、形状情報を有する入力
ストリームに含まれるエラーが検出されたとき、上記第
１のＶＯＰ遅延回路１ｂからのＶＯＰ遅延選択データＤ
Ｅvpが、ＶＯＰ単位で修整されるよう、上記ＶＯＰ選択
スイッチ１３を制御するＶＯＰ単位修整器１２とを有し
ている。
【０１１３】ここで、上記ＶＯＰ選択スイッチ１３は、
上記第１のＶＯＰ遅延回路１ｂからのＶＯＰ遅延選択デ
ータＤＥvpが供給される第１入力端子１３ａと、上記第
２のＶＯＰ遅延回路２ｂからのＶＯＰ遅延置換データＤ
Ｖrep2が供給される第２入力端子１３ｂと、上記ＶＯＰ
選択画像データＥvopを出力するための出力端子１３ｃ
とを有しており、上記ＶＯＰ選択制御信号Ｃvopによ
り、上記第１入力端子１３ａが出力端子１３ｃに接続さ
れた状態と、上記第２入力端子１３ｂが出力端子１３ｃ
に接続された状態とが切り替えられるようになってい
る。
上記第１のＶＯＰ遅延回路１ｂからのＶＯＰ遅延選択デ
ータＤＥvpが供給される第１入力端子１３ａと、上記第
２のＶＯＰ遅延回路２ｂからのＶＯＰ遅延置換データＤ
Ｖrep2が供給される第２入力端子１３ｂと、上記ＶＯＰ
選択画像データＥvopを出力するための出力端子１３ｃ
とを有しており、上記ＶＯＰ選択制御信号Ｃvopによ
り、上記第１入力端子１３ａが出力端子１３ｃに接続さ
れた状態と、上記第２入力端子１３ｂが出力端子１３ｃ
に接続された状態とが切り替えられるようになってい
る。
【０１１４】次に作用効果について説明する。まず、本
発明の実施の形態２の基本原理について説明する。通
常、物体の形状情報を有する復号画像データを、マクロ
ブロック単位あるいはビデオパケット単位で修整する
と、画面内における物体形状の連続性が損われる。この
ため、ビットストリームが形状情報を有する場合には、
エラーを含むビットストリームに対応する復号画像デー
タを、マクロブロック単位あるいはビデオパケット単位
で修整するよりも、ＶＯＰ単位で修整する方が、視覚的
に好ましい復号画像が得られる場合が多い。
発明の実施の形態２の基本原理について説明する。通
常、物体の形状情報を有する復号画像データを、マクロ
ブロック単位あるいはビデオパケット単位で修整する
と、画面内における物体形状の連続性が損われる。この
ため、ビットストリームが形状情報を有する場合には、
エラーを含むビットストリームに対応する復号画像デー
タを、マクロブロック単位あるいはビデオパケット単位
で修整するよりも、ＶＯＰ単位で修整する方が、視覚的
に好ましい復号画像が得られる場合が多い。
【０１１５】一方、形状情報を有しない画像では、形状
の時間的な変化が少なくしかも画素値の画面間相関が強
い場合が多いので、復号画像データの修整を、処理済Ｖ
ＯＰの復号画像データを用いて、マクロブロック単位も
しくはビデオパケット単位で行うことが好ましい。
の時間的な変化が少なくしかも画素値の画面間相関が強
い場合が多いので、復号画像データの修整を、処理済Ｖ
ＯＰの復号画像データを用いて、マクロブロック単位も
しくはビデオパケット単位で行うことが好ましい。
【０１１６】そこで、本実施の形態２では、入力ストリ
ームＶinに基づいて、入力ストリームが形状情報を有す
るか否かを判定し、入力ストリームが形状情報を有する
場合は、その復号画像データに対してＶＯＰ単位の修整
処理を施し、入力ストリームが形状情報を有しない場合
は、その復号画像データに対しては、マクロブロック単
位もしくはビデオパケット単位で修整処理を施すように
している。
ームＶinに基づいて、入力ストリームが形状情報を有す
るか否かを判定し、入力ストリームが形状情報を有する
場合は、その復号画像データに対してＶＯＰ単位の修整
処理を施し、入力ストリームが形状情報を有しない場合
は、その復号画像データに対しては、マクロブロック単
位もしくはビデオパケット単位で修整処理を施すように
している。
【０１１７】まず、本実施の形態２に係る動画像復号化
装置による復号化処理の概略を説明する。図４はこの本
実施の形態２の動画像復号化装置による復号化処理の流
れを示す図である。この実施の形態２の動画像復号化装
置１００ｂに、動画像に対応する符号化情報を含むビッ
トストリームが入力ストリームＶinとして入力される
と、復号化器１では、入力ストリームにおける被処理Ｖ
ＯＰに対応する符号化情報（被処理ＶＯＰビットストリ
ーム）をマクロブロック毎に復号化する処理が順次行わ
れる（ステップＳ１ｂ）。
装置による復号化処理の概略を説明する。図４はこの本
実施の形態２の動画像復号化装置による復号化処理の流
れを示す図である。この実施の形態２の動画像復号化装
置１００ｂに、動画像に対応する符号化情報を含むビッ
トストリームが入力ストリームＶinとして入力される
と、復号化器１では、入力ストリームにおける被処理Ｖ
ＯＰに対応する符号化情報（被処理ＶＯＰビットストリ
ーム）をマクロブロック毎に復号化する処理が順次行わ
れる（ステップＳ１ｂ）。
【０１１８】次に、上記入力ストリームＶinが形状信号
を含むものであるか否かが形状有無検出器１０にて判定
される（ステップＳ２ｂ）。この判定の結果、上記入力
ストリームＶinが形状情報を含まないビットストリーム
である場合は、上記実施の形態１におけるステップＳ２
ａないしＳ５ａの処理と同様の処理が、それぞれ対応す
るステップＳ３ｂないしＳ６ｂにて行われる。一方、上
記入力ストリームが形状情報を含むビットストリームで
ある場合、入力ストリームＶinに伝送エラーが含まれて
いるか否かの判定（ステップＳ７ｂ）及び入力ストリー
ムＶinにストリームエラーが含まれているか否かの判定
（ステップＳ８ｂ）が行われる。
を含むものであるか否かが形状有無検出器１０にて判定
される（ステップＳ２ｂ）。この判定の結果、上記入力
ストリームＶinが形状情報を含まないビットストリーム
である場合は、上記実施の形態１におけるステップＳ２
ａないしＳ５ａの処理と同様の処理が、それぞれ対応す
るステップＳ３ｂないしＳ６ｂにて行われる。一方、上
記入力ストリームが形状情報を含むビットストリームで
ある場合、入力ストリームＶinに伝送エラーが含まれて
いるか否かの判定（ステップＳ７ｂ）及び入力ストリー
ムＶinにストリームエラーが含まれているか否かの判定
（ステップＳ８ｂ）が行われる。
【０１１９】そして、上記入力ストリームＶinに伝送エ
ラーとストリームエラーのいずれかが含まれている場合
には、入力ストリームＶinの復号化処理により得られる
復号画像データをＶＯＰ単位で修整する処理が行われる
（ステップＳ９ｂ）。
ラーとストリームエラーのいずれかが含まれている場合
には、入力ストリームＶinの復号化処理により得られる
復号画像データをＶＯＰ単位で修整する処理が行われる
（ステップＳ９ｂ）。
【０１２０】具体的には、この被処理ＶＯＰビットスト
リームにエラーが含まれている場合には、この被処理Ｖ
ＯＰビットストリームの復号化処理により得られる復号
画像データＤＥvpが、処理済ＶＯＰに対応する復号画像
データＤＶrep2と置き換えられ、復号画像データＤＶre
p2が再生画像データＶoutとしてこの動画像復号化装置
１００ｂから出力される。
リームにエラーが含まれている場合には、この被処理Ｖ
ＯＰビットストリームの復号化処理により得られる復号
画像データＤＥvpが、処理済ＶＯＰに対応する復号画像
データＤＶrep2と置き換えられ、復号画像データＤＶre
p2が再生画像データＶoutとしてこの動画像復号化装置
１００ｂから出力される。
【０１２１】一方、ステップＳ７ｂ及びステップＳ８ｂ
での判定の結果、入力ストリームＶinのエラーが検出さ
れない場合には、この被処理ＶＯＰビットストリームの
復号化処理により得られる復号画像データＶｄが、再生
画像データＶoutとしてこの動画像復号化装置１００ｂ
から出力される。
での判定の結果、入力ストリームＶinのエラーが検出さ
れない場合には、この被処理ＶＯＰビットストリームの
復号化処理により得られる復号画像データＶｄが、再生
画像データＶoutとしてこの動画像復号化装置１００ｂ
から出力される。
【０１２２】以下、動作について詳しく説明する。上記
実施の形態１の動画像復号化装置１００ａと同様の入力
ストリームＶinが、この実施の形態２の動画像復号化装
置１００ｂに入力されると、この動画像復号化装置１０
０ｂでは、復号化器１により入力ストリームＶinの復号
化処理、エラー検出器３による伝送エラーの検出、及び
エラー検出器６によるストリームエラーの検出が行われ
る。
実施の形態１の動画像復号化装置１００ａと同様の入力
ストリームＶinが、この実施の形態２の動画像復号化装
置１００ｂに入力されると、この動画像復号化装置１０
０ｂでは、復号化器１により入力ストリームＶinの復号
化処理、エラー検出器３による伝送エラーの検出、及び
エラー検出器６によるストリームエラーの検出が行われ
る。
【０１２３】このとき、復号化器１では、入力ストリー
ムＶinに対する復号化処理がマクロブロック毎に行わ
れ、復号画像データＶｄがマクロブロック毎に出力され
る。また、メモリ２からは、復号化器１にて処理対象と
なる被処理ＶＯＰにおけるマクロブロックに対応する、
処理済ＶＯＰにおけるマクロブロックの復号画像データ
（置換画像データ）Ｖrepが、上記被処理ＶＯＰの各マ
クロブロックの復号画像データＶｄと同期して出力され
る。さらに、マクロブロック単位修整器４には上記エラ
ー検出器３からの伝送エラー通知信号Ｔerrが、ビデオ
パケット単位修整器６には上記エラー検出器６からのス
トリームエラー通知信号Ｓerrが出力され、論理和回路
９には、上記伝送エラー通知信号Ｔerr及びストリーム
エラー通知信号Ｓerrが出力される。
ムＶinに対する復号化処理がマクロブロック毎に行わ
れ、復号画像データＶｄがマクロブロック毎に出力され
る。また、メモリ２からは、復号化器１にて処理対象と
なる被処理ＶＯＰにおけるマクロブロックに対応する、
処理済ＶＯＰにおけるマクロブロックの復号画像データ
（置換画像データ）Ｖrepが、上記被処理ＶＯＰの各マ
クロブロックの復号画像データＶｄと同期して出力され
る。さらに、マクロブロック単位修整器４には上記エラ
ー検出器３からの伝送エラー通知信号Ｔerrが、ビデオ
パケット単位修整器６には上記エラー検出器６からのス
トリームエラー通知信号Ｓerrが出力され、論理和回路
９には、上記伝送エラー通知信号Ｔerr及びストリーム
エラー通知信号Ｓerrが出力される。
【０１２４】また、形状有無検出器１０では、上記入力
ストリームＶinに基づいて、該入力ストリームＶinに形
状情報が含まれているか否かが判定され、判定結果を示
す形状有無通知信号Ｓdetが論理積回路１１に出力され
る。
ストリームＶinに基づいて、該入力ストリームＶinに形
状情報が含まれているか否かが判定され、判定結果を示
す形状有無通知信号Ｓdetが論理積回路１１に出力され
る。
【０１２５】通常、形状情報を含むＶＯＰビットストリ
ームでは、そのシーケンスヘッダ等に形状情報を含むこ
とを示すフラグ情報等が付加されているため、このフラ
グ情報に基づいて形状情報が含まれるか否かの判定が行
われる。
ームでは、そのシーケンスヘッダ等に形状情報を含むこ
とを示すフラグ情報等が付加されているため、このフラ
グ情報に基づいて形状情報が含まれるか否かの判定が行
われる。
【０１２６】すると、ＭＢ選択スイッチ５の開閉制御が
マクロブロック単位修整器４により行われ、ＶＰ選択ス
イッチ８の開閉制御がビデオパケット単位修整器６によ
り行われる。また、論理和回路９では、伝送エラー通知
信号Ｔerr及びストリームエラー通知信号Ｓerrの論理和
演算により、入力ストリームに伝送エラー及びストリー
ムエラーのいずれかが含まれていることを示すエラー通
知信号ＴＳerrが上記論理積回路１１に出力される。
マクロブロック単位修整器４により行われ、ＶＰ選択ス
イッチ８の開閉制御がビデオパケット単位修整器６によ
り行われる。また、論理和回路９では、伝送エラー通知
信号Ｔerr及びストリームエラー通知信号Ｓerrの論理和
演算により、入力ストリームに伝送エラー及びストリー
ムエラーのいずれかが含まれていることを示すエラー通
知信号ＴＳerrが上記論理積回路１１に出力される。
【０１２７】この論理積回路１１では、エラー通知信号
ＴＳerr及び上記形状有無通知信号Ｓdetの論理積演算に
より、入力ストリームが形状情報を有するビットストリ
ームであってエラーを含んでいることを示すストリーム
情報ＩstrがＶＯＰ単位修整器１２に出力される。
ＴＳerr及び上記形状有無通知信号Ｓdetの論理積演算に
より、入力ストリームが形状情報を有するビットストリ
ームであってエラーを含んでいることを示すストリーム
情報ＩstrがＶＯＰ単位修整器１２に出力される。
【０１２８】そして、ＭＢ選択スイッチ５では、マクロ
ブロック単位修整器４からのＭＢ選択制御信号Ｃmbに基
づいて、上記復号画像データＶｄと置換画像データＶre
pの一方が選択され、選択された画像データがＭＢ選択
画像データＥmbとして出力される。
ブロック単位修整器４からのＭＢ選択制御信号Ｃmbに基
づいて、上記復号画像データＶｄと置換画像データＶre
pの一方が選択され、選択された画像データがＭＢ選択
画像データＥmbとして出力される。
【０１２９】上記ＭＢ選択スイッチ５からのＭＢ選択画
像データＥmb及びメモリ２からの置換画像データＶrep
はそれぞれ、第１，第２のＶＰ遅延回路１ａ，２ａに
て、被処理ビデオパケットに対応する復号化処理時間だ
け遅延され、ＶＰ遅延選択データＤＥmb，ＶＰ遅延置換
データ（第１の遅延置換データ）ＤＶref1として出力さ
れる。
像データＥmb及びメモリ２からの置換画像データＶrep
はそれぞれ、第１，第２のＶＰ遅延回路１ａ，２ａに
て、被処理ビデオパケットに対応する復号化処理時間だ
け遅延され、ＶＰ遅延選択データＤＥmb，ＶＰ遅延置換
データ（第１の遅延置換データ）ＤＶref1として出力さ
れる。
【０１３０】さらに、ＶＰ選択スイッチ８では、ビデオ
パケット単位修整器７からのＶＰ選択制御信号Ｃvpに基
づいて、上記ＶＰ遅延選択データＤＥmbとＶＰ遅延置換
データＤＶrep1の一方が選択され、選択された遅延デー
タがＶＰ選択画像データＥvpとして出力される。
パケット単位修整器７からのＶＰ選択制御信号Ｃvpに基
づいて、上記ＶＰ遅延選択データＤＥmbとＶＰ遅延置換
データＤＶrep1の一方が選択され、選択された遅延デー
タがＶＰ選択画像データＥvpとして出力される。
【０１３１】上記ＶＰ選択スイッチ８からのＶＰ選択画
像データＥvp及び第２のＶＰ遅延回路２ａからのＶＰ遅
延置換データＤＶrep1はそれぞれ、第１，第２のＶＯＰ
単位遅延回路１ｂ，２ｂにて、被処理ＶＯＰに対応する
復号化処理時間だけ遅延され、ＶＯＰ遅延選択データＤ
Ｅvp，ＶＯＰ遅延置換データ（第２の遅延置換データ）
ＤＶrep2として出力される。
像データＥvp及び第２のＶＰ遅延回路２ａからのＶＰ遅
延置換データＤＶrep1はそれぞれ、第１，第２のＶＯＰ
単位遅延回路１ｂ，２ｂにて、被処理ＶＯＰに対応する
復号化処理時間だけ遅延され、ＶＯＰ遅延選択データＤ
Ｅvp，ＶＯＰ遅延置換データ（第２の遅延置換データ）
ＤＶrep2として出力される。
【０１３２】そして、ＶＯＰ選択スイッチ１３では、Ｖ
ＯＰ単位修整器１２からのＶＯＰ選択制御信号Ｃvopに
基づいて、上記ＶＯＰ遅延選択データＤＥvpとＶＯＰ遅
延置換データＤＶrep2の一方が選択され、選択された遅
延データがＶＯＰ選択画像データＥvopとして出力され
る。このＶＯＰ選択画像データＥvopは、上記メモリ２
に格納されるとともに、再生画像データＶoutとして出
力される。
ＯＰ単位修整器１２からのＶＯＰ選択制御信号Ｃvopに
基づいて、上記ＶＯＰ遅延選択データＤＥvpとＶＯＰ遅
延置換データＤＶrep2の一方が選択され、選択された遅
延データがＶＯＰ選択画像データＥvopとして出力され
る。このＶＯＰ選択画像データＥvopは、上記メモリ２
に格納されるとともに、再生画像データＶoutとして出
力される。
【０１３３】具体的には、上記ＶＯＰ選択スイッチ１３
は、入力ストリームが形状情報を含まないものである場
合、もしくは入力ストリームにエラーが含まれていない
場合には、第１のＶＯＰ遅延回路１ｂからのＶＰ遅延選
択データＥvpがそのまま出力され、入力ストリームが形
状情報を有し、かつエラーが含まれている場合には、第
１のＶＯＰ遅延回路１ｂからのＶＰ遅延選択データＥvp
が、第２のＶＯＰ遅延回路２ｂからのＶＯＰ遅延置換デ
ータＤＶrep2により置き換えられるよう、ＶＯＰ単位修
整器１２により制御される。
は、入力ストリームが形状情報を含まないものである場
合、もしくは入力ストリームにエラーが含まれていない
場合には、第１のＶＯＰ遅延回路１ｂからのＶＰ遅延選
択データＥvpがそのまま出力され、入力ストリームが形
状情報を有し、かつエラーが含まれている場合には、第
１のＶＯＰ遅延回路１ｂからのＶＰ遅延選択データＥvp
が、第２のＶＯＰ遅延回路２ｂからのＶＯＰ遅延置換デ
ータＤＶrep2により置き換えられるよう、ＶＯＰ単位修
整器１２により制御される。
【０１３４】このように本実施の形態２では、上記実施
の形態１の構成に加えて、入力ストリームＶinが形状情
報を有するものであるか否かを判定する形状有無検出器
１０を備え、入力ストリームＶinが形状情報を有する場
合には、入力ストリームＶinに伝送エラーあるいはスト
リームエラーが含まれているとき、該入力ストリームＶ
inの復号化処理により得られた復号画像データを、ＶＯ
Ｐ単位で修整し、一方、上記入力ストリームＶinが形状
情報を有していないときには、上記実施の形態１と同様
に入力ストリームＶinに含まれるエラーの種類に応じ
て、マクロブロック単位もしくはビデオパケット単位で
復号画像データの修整を行うようにしたので、上記実施
の形態１の効果だけでなく、形状情報を有する入力スト
リームＶinから得られる復号画像における、エラーに起
因する画質劣化を、復号画像データの修整に伴う画質劣
化を抑えつつ排除することができる効果が得られる。
の形態１の構成に加えて、入力ストリームＶinが形状情
報を有するものであるか否かを判定する形状有無検出器
１０を備え、入力ストリームＶinが形状情報を有する場
合には、入力ストリームＶinに伝送エラーあるいはスト
リームエラーが含まれているとき、該入力ストリームＶ
inの復号化処理により得られた復号画像データを、ＶＯ
Ｐ単位で修整し、一方、上記入力ストリームＶinが形状
情報を有していないときには、上記実施の形態１と同様
に入力ストリームＶinに含まれるエラーの種類に応じ
て、マクロブロック単位もしくはビデオパケット単位で
復号画像データの修整を行うようにしたので、上記実施
の形態１の効果だけでなく、形状情報を有する入力スト
リームＶinから得られる復号画像における、エラーに起
因する画質劣化を、復号画像データの修整に伴う画質劣
化を抑えつつ排除することができる効果が得られる。
【０１３５】なお、上記実施の形態１及び２では、伝送
エラー検出器３として、ビットストリームに挿入されて
いるパケット欠落を示すマーク（マーカ符号）を検出す
ることにより伝送エラーを検出する構成のものを示した
が、上記伝送エラー検出器は、伝送システムから別の方
法で、入力ストリームにおける伝送エラー発生位置に関
する情報を取得して、伝送エラー通知信号Ｔｅｒｒを出
力する構成のものでもよい。
エラー検出器３として、ビットストリームに挿入されて
いるパケット欠落を示すマーク（マーカ符号）を検出す
ることにより伝送エラーを検出する構成のものを示した
が、上記伝送エラー検出器は、伝送システムから別の方
法で、入力ストリームにおける伝送エラー発生位置に関
する情報を取得して、伝送エラー通知信号Ｔｅｒｒを出
力する構成のものでもよい。
【０１３６】実施の形態３．図５は本発明の実施の形態
３による動画像復号化装置を説明するためのブロック図
である。この実施の形態３の動画像復号化装置１００ｃ
は、形状を有しない物体に対応するビットストリームの
復号化処理では、入力ストリームのエラーを検出したと
き、復号画像データをビデオパケット単位で修整し、形
状を有する物体に対応するビットストリームの復号化処
理では、入力ストリームのエラーを検出したとき、復号
画像データをＶＯＰ単位で修整するようにしたものであ
る。
３による動画像復号化装置を説明するためのブロック図
である。この実施の形態３の動画像復号化装置１００ｃ
は、形状を有しない物体に対応するビットストリームの
復号化処理では、入力ストリームのエラーを検出したと
き、復号画像データをビデオパケット単位で修整し、形
状を有する物体に対応するビットストリームの復号化処
理では、入力ストリームのエラーを検出したとき、復号
画像データをＶＯＰ単位で修整するようにしたものであ
る。
【０１３７】この実施の形態３の動画像復号化装置１０
０ｃは、上記実施の形態２の動画像復号化装置１００ｂ
と同様、上記復号化器１と、メモリ２と、修整器７及び
１２と、遅延回路１ａ，２ａ，１ｂ，２ｂと、選択スイ
ッチ８及び１３と、論理積回路１１と、形状有無検出器
１０とを有している。
０ｃは、上記実施の形態２の動画像復号化装置１００ｂ
と同様、上記復号化器１と、メモリ２と、修整器７及び
１２と、遅延回路１ａ，２ａ，１ｂ，２ｂと、選択スイ
ッチ８及び１３と、論理積回路１１と、形状有無検出器
１０とを有している。
【０１３８】そして、この動画像復号化装置１００ｃ
は、上記実施の形態２の動画像復号化装置１００ｂにお
ける伝送エラー検出器３，ストリームエラー検出器６，
論理和回路９に代えて、入力ストリームＶｉｎ及び復号
化器１の内部信号Ｓｉに基づいて伝送エラー及びストリ
ームエラーを検出する処理を行い、いずれかのエラーが
検出されたときエラー通知信号Ａerrを出力するエラー
検出器１８を備えている。
は、上記実施の形態２の動画像復号化装置１００ｂにお
ける伝送エラー検出器３，ストリームエラー検出器６，
論理和回路９に代えて、入力ストリームＶｉｎ及び復号
化器１の内部信号Ｓｉに基づいて伝送エラー及びストリ
ームエラーを検出する処理を行い、いずれかのエラーが
検出されたときエラー通知信号Ａerrを出力するエラー
検出器１８を備えている。
【０１３９】また、この動画像復号化装置１００ｃで
は、上記ビデオパケット単位修整器７には該エラー通知
信号Ａerrが入力され、上記論理積回路１１には該エラ
ー通知信号Ａerrが上記形状有無検出器１０からの形状
有無通知信号Ｓdetとともに入力されるようになってい
る。
は、上記ビデオパケット単位修整器７には該エラー通知
信号Ａerrが入力され、上記論理積回路１１には該エラ
ー通知信号Ａerrが上記形状有無検出器１０からの形状
有無通知信号Ｓdetとともに入力されるようになってい
る。
【０１４０】さらに、この動画像復号化装置１００ｃで
は、上記実施の形態２の動画像復号化装置１００ｂにお
けるマクロブロック単位修整器４及びＭＢ選択スイッチ
５が省略されており、上記復号化器１の出力Ｖｄが直接
第１のＶＰ遅延回路１ａに入力されるようになってい
る。
は、上記実施の形態２の動画像復号化装置１００ｂにお
けるマクロブロック単位修整器４及びＭＢ選択スイッチ
５が省略されており、上記復号化器１の出力Ｖｄが直接
第１のＶＰ遅延回路１ａに入力されるようになってい
る。
【０１４１】次に作用効果について説明する。上記実施
の形態２では、形状を有しない物体に対応するビットス
トリームの復号化処理では、伝送エラーが検出されたと
きの修整処理をマクロブロック単位で行い、ストリーム
エラーが検出されたときの修整処理をビデオパケット単
位で行うようにしているが、ビデオパケットに対応する
マクロブロック数が少ない場合、つまりビデオパケット
に含まれるマクロブロック情報の個数が少ない場合に
は、形状情報を有していない復号画像データに対する修
整処理を常にビデオパケット単位で行うようにしても、
復号画像における修整処理に伴う画質の劣化が少ない。
の形態２では、形状を有しない物体に対応するビットス
トリームの復号化処理では、伝送エラーが検出されたと
きの修整処理をマクロブロック単位で行い、ストリーム
エラーが検出されたときの修整処理をビデオパケット単
位で行うようにしているが、ビデオパケットに対応する
マクロブロック数が少ない場合、つまりビデオパケット
に含まれるマクロブロック情報の個数が少ない場合に
は、形状情報を有していない復号画像データに対する修
整処理を常にビデオパケット単位で行うようにしても、
復号画像における修整処理に伴う画質の劣化が少ない。
【０１４２】また、復号画像データに対するマクロブロ
ック単位の修整処理を省略することにより、修整処理を
簡単化することができる。そこで、本実施の形態３で
は、上記実施の形態２とは異なり、入力ストリームが形
状情報を有していない場合には、入力ストリームのエラ
ーとして伝送エラーとストリームエラーのいずれのエラ
ーが検出されたときでも、復号画像に対する修整処理を
ビデオパケット単位で行うようにしている。
ック単位の修整処理を省略することにより、修整処理を
簡単化することができる。そこで、本実施の形態３で
は、上記実施の形態２とは異なり、入力ストリームが形
状情報を有していない場合には、入力ストリームのエラ
ーとして伝送エラーとストリームエラーのいずれのエラ
ーが検出されたときでも、復号画像に対する修整処理を
ビデオパケット単位で行うようにしている。
【０１４３】まず、本実施の形態３の動画像復号化装置
による復号化処理の概略を説明する。図６はこの本実施
の形態３の動画像復号化装置による復号化処理の流れを
示す図である。動画像に対応する符号化情報を含むビッ
トストリームがこの動画像復号化装置１００ｃに入力ス
トリームＶinとして入力されると、復号化器１では、入
力ストリームにおける被処理ＶＯＰに対応する部分（被
処理ＶＯＰビットストリーム）をマクロブロック毎に復
号化する処理が順次行われる（ステップＳ１ｃ）。
による復号化処理の概略を説明する。図６はこの本実施
の形態３の動画像復号化装置による復号化処理の流れを
示す図である。動画像に対応する符号化情報を含むビッ
トストリームがこの動画像復号化装置１００ｃに入力ス
トリームＶinとして入力されると、復号化器１では、入
力ストリームにおける被処理ＶＯＰに対応する部分（被
処理ＶＯＰビットストリーム）をマクロブロック毎に復
号化する処理が順次行われる（ステップＳ１ｃ）。
【０１４４】次に、上記入力ストリームＶinが形状信号
を含むものであるか否かが形状有無検出器１０にて判定
される（ステップＳ２ｃ）。この判定の結果、上記入力
ストリームＶinが形状情報を含まないビットストリーム
である場合は、入力ストリームＶinのエラーを検出する
処理が、エラー検出器１８にて行われる（ステップＳ３
ｃ）。そして、上記入力ストリームＶinのエラーが検出
されたときには、入力ストリームＶinの復号化処理によ
り得られる復号画像データをビデオパケット単位で修整
する処理が行われる（ステップＳ４ｃ）。
を含むものであるか否かが形状有無検出器１０にて判定
される（ステップＳ２ｃ）。この判定の結果、上記入力
ストリームＶinが形状情報を含まないビットストリーム
である場合は、入力ストリームＶinのエラーを検出する
処理が、エラー検出器１８にて行われる（ステップＳ３
ｃ）。そして、上記入力ストリームＶinのエラーが検出
されたときには、入力ストリームＶinの復号化処理によ
り得られる復号画像データをビデオパケット単位で修整
する処理が行われる（ステップＳ４ｃ）。
【０１４５】一方、上記ステップＳ２ｃでの判定の結
果、上記入力ストリームが形状情報を含むビットストリ
ームである場合、入力ストリームＶinの伝送エラーを検
出する処理が上記エラー検出器１８にて行われる（ステ
ップＳ５ｃ）。そして、上記入力ストリームＶinのエラ
ーが検出されたときには、入力ストリームＶinの復号化
処理により得られる復号画像データをＶＯＰ単位で修整
する処理が行われる（ステップＳ６ｃ）。
果、上記入力ストリームが形状情報を含むビットストリ
ームである場合、入力ストリームＶinの伝送エラーを検
出する処理が上記エラー検出器１８にて行われる（ステ
ップＳ５ｃ）。そして、上記入力ストリームＶinのエラ
ーが検出されたときには、入力ストリームＶinの復号化
処理により得られる復号画像データをＶＯＰ単位で修整
する処理が行われる（ステップＳ６ｃ）。
【０１４６】上記ステップＳ３ｃ及びステップＳ６ｃで
の判定の結果、入力ストリームＶinのエラーが検出され
ない場合には、被処理ＶＯＰストリームの復号化処理に
より得られた復号画像データＶｄが、再生画像データＶ
outとしてこの動画像復号化装置１００ｃから出力され
る。
の判定の結果、入力ストリームＶinのエラーが検出され
ない場合には、被処理ＶＯＰストリームの復号化処理に
より得られた復号画像データＶｄが、再生画像データＶ
outとしてこの動画像復号化装置１００ｃから出力され
る。
【０１４７】以下、動作について詳しく説明する。上記
実施の形態１の動画像復号化装置１００ａと同様の入力
ストリームＶinが、この実施の形態３の動画像復号化装
置１００ｃに入力されると、この動画像復号化装置１０
０ｃでは、形状有無検出器１０により実施の形態２と同
様、入力ストリームＶｉｎが形状情報を含むか否かを検
出する処理が行われ、形状有無通知信号Ｓdetが出力さ
れる。また、この動画像復号化装置１００ｃの復号化器
１では、実施の形態２と同様に、入力ストリームＶinの
復号化処理が行われ、被処理ＶＯＰに対応する復号画像
データが各マクロブロック毎に出力される。このとき、
メモリ２からは、復号化器１にて処理対象となる被処理
ＶＯＰにおけるマクロブロックに対応する、処理済ＶＯ
Ｐにおけるマクロブロックの復号画像データ（置換画像
データ）Ｖrepが、上記被処理ＶＯＰの各マクロブロッ
クの復号画像データＶｄと同期して出力される。
実施の形態１の動画像復号化装置１００ａと同様の入力
ストリームＶinが、この実施の形態３の動画像復号化装
置１００ｃに入力されると、この動画像復号化装置１０
０ｃでは、形状有無検出器１０により実施の形態２と同
様、入力ストリームＶｉｎが形状情報を含むか否かを検
出する処理が行われ、形状有無通知信号Ｓdetが出力さ
れる。また、この動画像復号化装置１００ｃの復号化器
１では、実施の形態２と同様に、入力ストリームＶinの
復号化処理が行われ、被処理ＶＯＰに対応する復号画像
データが各マクロブロック毎に出力される。このとき、
メモリ２からは、復号化器１にて処理対象となる被処理
ＶＯＰにおけるマクロブロックに対応する、処理済ＶＯ
Ｐにおけるマクロブロックの復号画像データ（置換画像
データ）Ｖrepが、上記被処理ＶＯＰの各マクロブロッ
クの復号画像データＶｄと同期して出力される。
【０１４８】そして、この実施の形態３のエラー検出器
１８では、上記入力ストリームＶin及び復号化器１の内
部信号Ｓｉに基づいて、入力ストリームＶinのエラーを
検出する処理が行われ、エラーが検出されたときエラー
通知信号Ａerrがビデオパケット単位修整器７及び論理
積回路１１に出力される。この論理積回路１１では、エ
ラー通知信号Ａerr及び上記形状有無通知信号Ｓdetの論
理積演算が行われれ、入力ストリームが形状情報を有す
るビットストリームであってエラーを含んでいることを
示すストリーム情報ＩstrがＶＯＰ単位修整器１２に出
力される。
１８では、上記入力ストリームＶin及び復号化器１の内
部信号Ｓｉに基づいて、入力ストリームＶinのエラーを
検出する処理が行われ、エラーが検出されたときエラー
通知信号Ａerrがビデオパケット単位修整器７及び論理
積回路１１に出力される。この論理積回路１１では、エ
ラー通知信号Ａerr及び上記形状有無通知信号Ｓdetの論
理積演算が行われれ、入力ストリームが形状情報を有す
るビットストリームであってエラーを含んでいることを
示すストリーム情報ＩstrがＶＯＰ単位修整器１２に出
力される。
【０１４９】また、上記復号化器１からの復号画像デー
タＶｄ及びメモリ２からの置換画像データＶrepはそれ
ぞれ、第１，第２のＶＰ単位遅延回路１ａ，２ａにて、
被処理ビデオパケットに対応する復号化処理時間だけ遅
延され、ＶＰ遅延復号データＤＶｄ，ＶＰ遅延置換デー
タＤＶrep1として出力される。
タＶｄ及びメモリ２からの置換画像データＶrepはそれ
ぞれ、第１，第２のＶＰ単位遅延回路１ａ，２ａにて、
被処理ビデオパケットに対応する復号化処理時間だけ遅
延され、ＶＰ遅延復号データＤＶｄ，ＶＰ遅延置換デー
タＤＶrep1として出力される。
【０１５０】上記ＶＰ選択スイッチ８では、ビデオパケ
ット単位修整器７からのＶＰ選択制御信号Ｃvpに基づい
て、上記ＶＰ遅延復号データＤＶｄとＶＰ遅延置換デー
タＤＶrep1の一方が選択され、選択された遅延データが
ＶＰ選択画像データＥvpとして出力される。
ット単位修整器７からのＶＰ選択制御信号Ｃvpに基づい
て、上記ＶＰ遅延復号データＤＶｄとＶＰ遅延置換デー
タＤＶrep1の一方が選択され、選択された遅延データが
ＶＰ選択画像データＥvpとして出力される。
【０１５１】さらに、上記ＶＰ選択スイッチ８からのＶ
Ｐ選択画像データＥvp及び第２のＶＰ遅延回路２ａから
のＶＰ遅延置換データＶrep1はそれぞれ、第１，第２の
ＶＯＰ遅延回路１ｂ，２ｂにて、被処理ＶＯＰに対応す
る復号化処理時間だけ遅延され、ＶＯＰ遅延選択データ
ＤＥvp，ＶＯＰ遅延置換データＤＶrep2として出力され
る。
Ｐ選択画像データＥvp及び第２のＶＰ遅延回路２ａから
のＶＰ遅延置換データＶrep1はそれぞれ、第１，第２の
ＶＯＰ遅延回路１ｂ，２ｂにて、被処理ＶＯＰに対応す
る復号化処理時間だけ遅延され、ＶＯＰ遅延選択データ
ＤＥvp，ＶＯＰ遅延置換データＤＶrep2として出力され
る。
【０１５２】そして、ＶＯＰ選択スイッチ１３では、Ｖ
ＯＰ単位修整器１２からのＶＯＰ選択制御信号Ｃvopに
基づいて、上記ＶＯＰ遅延選択データＤＥvpとＶＯＰ遅
延置換データＤＶrep2の一方が選択され、選択された遅
延データがＶＯＰ遅延選択データＥvopとして出力され
る。このＶＯＰ遅延選択データＥvopは、上記メモリ２
に格納されるとともに、再生画像データＶoutとして出
力される。
ＯＰ単位修整器１２からのＶＯＰ選択制御信号Ｃvopに
基づいて、上記ＶＯＰ遅延選択データＤＥvpとＶＯＰ遅
延置換データＤＶrep2の一方が選択され、選択された遅
延データがＶＯＰ遅延選択データＥvopとして出力され
る。このＶＯＰ遅延選択データＥvopは、上記メモリ２
に格納されるとともに、再生画像データＶoutとして出
力される。
【０１５３】ここで、上記ＶＯＰ選択スイッチ１３は、
入力ストリームが形状情報を含まないものと判定された
とき、もしくは入力ストリームのエラーが検出されない
ときには、第１のＶＯＰ遅延回路１ｂからのＶＯＰ遅延
選択データＤＥvpがそのまま出力され、入力ストリーム
が形状情報を有するものと判定され、かつ入力ストリー
ムのエラーが検出されたときには、第１のＶＯＰ遅延回
路１ｂからのＶＯＰ遅延選択データＤＥvpが、第２のＶ
ＯＰ遅延回路２ｂからのＶＯＰ遅延置換データＤＶrep2
により置き換えられるよう、ＶＯＰ単位修整器１２によ
り制御される。
入力ストリームが形状情報を含まないものと判定された
とき、もしくは入力ストリームのエラーが検出されない
ときには、第１のＶＯＰ遅延回路１ｂからのＶＯＰ遅延
選択データＤＥvpがそのまま出力され、入力ストリーム
が形状情報を有するものと判定され、かつ入力ストリー
ムのエラーが検出されたときには、第１のＶＯＰ遅延回
路１ｂからのＶＯＰ遅延選択データＤＥvpが、第２のＶ
ＯＰ遅延回路２ｂからのＶＯＰ遅延置換データＤＶrep2
により置き換えられるよう、ＶＯＰ単位修整器１２によ
り制御される。
【０１５４】このように本実施の形態３では、形状情報
を含む入力ストリームＶｉｎの復号化処理により得られ
る復号画像データに対してはＶＯＰ単位で復号画像の修
整処理を施し、形状情報を含まない入力ストリームＶｉ
ｎの復号化処理により得られる復号画像データに対して
は、ビデオパケット単位で復号画像の修整処理を施すよ
うにしたので、入力ストリームＶｉｎが形状情報を含む
場合には、復号画像の修整処理による大きな画質劣化を
招くことなく、エラーに起因する画質劣化を排除するこ
とができ、しかも、入力ストリームＶｉｎが形状情報を
含まない場合には簡単な修整処理によりエラーに起因す
る画質劣化を排除することができる。
を含む入力ストリームＶｉｎの復号化処理により得られ
る復号画像データに対してはＶＯＰ単位で復号画像の修
整処理を施し、形状情報を含まない入力ストリームＶｉ
ｎの復号化処理により得られる復号画像データに対して
は、ビデオパケット単位で復号画像の修整処理を施すよ
うにしたので、入力ストリームＶｉｎが形状情報を含む
場合には、復号画像の修整処理による大きな画質劣化を
招くことなく、エラーに起因する画質劣化を排除するこ
とができ、しかも、入力ストリームＶｉｎが形状情報を
含まない場合には簡単な修整処理によりエラーに起因す
る画質劣化を排除することができる。
【０１５５】なお、上記実施の形態３では、入力ストリ
ームＶｉｎが形状情報を含まない場合、ビデオパケット
単位で復号画像の修整を行うようにしたものについて説
明したが、入力ストリームＶｉｎが形状情報を含まない
場合の復号画像の修整処理は、マクロブロック単位で行
うようにしてもよい。
ームＶｉｎが形状情報を含まない場合、ビデオパケット
単位で復号画像の修整を行うようにしたものについて説
明したが、入力ストリームＶｉｎが形状情報を含まない
場合の復号画像の修整処理は、マクロブロック単位で行
うようにしてもよい。
【０１５６】また、上記実施の形態３では、エラー検出
器１８を、伝送エラーとストリームエラーの両方を検出
する構成としているが、上記エラー検出器は、伝送エラ
ーとストリームエラのいずれか一方のみを検出する構成
としてもよい。
器１８を、伝送エラーとストリームエラーの両方を検出
する構成としているが、上記エラー検出器は、伝送エラ
ーとストリームエラのいずれか一方のみを検出する構成
としてもよい。
【０１５７】また、上記実施の形態２及び３では、マク
ロブロック単位の画像修整やビデオパケット単位の画像
修整を行った後にＶＯＰ単位の画像修整を行うようにし
ているが、ＶＯＰ単位の画像修整をマクロブロック単位
の画像修整やビデオパケット単位の画像修整よりも先に
行うようにしてもよい。
ロブロック単位の画像修整やビデオパケット単位の画像
修整を行った後にＶＯＰ単位の画像修整を行うようにし
ているが、ＶＯＰ単位の画像修整をマクロブロック単位
の画像修整やビデオパケット単位の画像修整よりも先に
行うようにしてもよい。
【０１５８】さらに、上記各実施の形態では、復号画像
の具体的な修整処理として、復号化処理の対象となる被
処理ＶＯＰに対応する復号画像データを、該被処理ＶＯ
Ｐより以前に復号化処理が完了した処理済ＶＯＰの復号
画像データにより置換する処理を示したが、復号画像の
修整処理は上記各実施の形態におけるものに限らない。
の具体的な修整処理として、復号化処理の対象となる被
処理ＶＯＰに対応する復号画像データを、該被処理ＶＯ
Ｐより以前に復号化処理が完了した処理済ＶＯＰの復号
画像データにより置換する処理を示したが、復号画像の
修整処理は上記各実施の形態におけるものに限らない。
【０１５９】例えば、上記復号画像の修整処理は、上記
のように被処理ＶＯＰの復号画像データを、処理済ＶＯ
Ｐの復号画像データに動き補償処理を施して得られる参
照画像データにより置き換えることにより行ってもよ
い。また、上記復号画像の修整処理は、被処理ＶＯＰの
復号画像データに対して画面内の内挿補間処理を施すこ
とにより行ってもよい。
のように被処理ＶＯＰの復号画像データを、処理済ＶＯ
Ｐの復号画像データに動き補償処理を施して得られる参
照画像データにより置き換えることにより行ってもよ
い。また、上記復号画像の修整処理は、被処理ＶＯＰの
復号画像データに対して画面内の内挿補間処理を施すこ
とにより行ってもよい。
【０１６０】また、上記各実施の形態では、符号化処理
及び復号化処理としてＭＰＥＧ−４規格対応のものを示
したが、上記符号化処理及び復号化処理は、ＭＰＥＧ−
４規格対応以外のものであってもよい。
及び復号化処理としてＭＰＥＧ−４規格対応のものを示
したが、上記符号化処理及び復号化処理は、ＭＰＥＧ−
４規格対応以外のものであってもよい。
【０１６１】またさらに、上記各実施の形態の動画像復
号化処理をコンピュータにより行うための動画像復号化
プログラムを、フロッピー（登録商標）ディスク等のデ
ータ記憶媒体に記録するようにすることにより、上記各
実施の形態の動画像復号化処理を、独立したコンピュー
タシステムにおいて簡単に行うすることが可能となる。
号化処理をコンピュータにより行うための動画像復号化
プログラムを、フロッピー（登録商標）ディスク等のデ
ータ記憶媒体に記録するようにすることにより、上記各
実施の形態の動画像復号化処理を、独立したコンピュー
タシステムにおいて簡単に行うすることが可能となる。
【０１６２】図７は、上記各実施の形態における動画像
復号化処理を、上記動画像復号化プログラムを格納した
フロッピーディスクを用いて、コンピュータシステムに
より実施する場合を説明するための図である。
復号化処理を、上記動画像復号化プログラムを格納した
フロッピーディスクを用いて、コンピュータシステムに
より実施する場合を説明するための図である。
【０１６３】図７(a)は、フロッピーディスクの正面か
らみた外観、断面構造、及びフロッピーディスク本体を
示し、図７(b)は、該フロッピーディスク本体の物理フ
ォーマットの例を示している。
らみた外観、断面構造、及びフロッピーディスク本体を
示し、図７(b)は、該フロッピーディスク本体の物理フ
ォーマットの例を示している。
【０１６４】上記フロッピーディスクＦＤは、上記フロ
ッピーディスク本体ＤをフロッピーディスクケースＦＣ
内に収容した構造となっており、該フロッピーディスク
本体Ｄの表面には、同心円状に外周からは内周に向かっ
て複数のトラックＴｒが形成され、各トラックＴｒは角
度方向に１６のセクタＳｅに分割されている。従って、
上記プログラムを格納したフロッピーディスクＦＤで
は、上記フロッピーディスク本体Ｄは、その上に割り当
てられた領域（セクタ）Ｓｅに、上記プログラムとして
のデータが記録されたものとなっている。
ッピーディスク本体ＤをフロッピーディスクケースＦＣ
内に収容した構造となっており、該フロッピーディスク
本体Ｄの表面には、同心円状に外周からは内周に向かっ
て複数のトラックＴｒが形成され、各トラックＴｒは角
度方向に１６のセクタＳｅに分割されている。従って、
上記プログラムを格納したフロッピーディスクＦＤで
は、上記フロッピーディスク本体Ｄは、その上に割り当
てられた領域（セクタ）Ｓｅに、上記プログラムとして
のデータが記録されたものとなっている。
【０１６５】また、図７(c)は、フロッピーディスクＦ
Ｄに対する上記動画像復号化プログラムの記録、及びフ
ロッピーディスクＦＤに格納した動画像復号化プログラ
ムを用いたソフトウエアによる動画像復号化処理を行う
ためのシステム構成を示している。
Ｄに対する上記動画像復号化プログラムの記録、及びフ
ロッピーディスクＦＤに格納した動画像復号化プログラ
ムを用いたソフトウエアによる動画像復号化処理を行う
ためのシステム構成を示している。
【０１６６】上記動画像復号化プログラムをフロッピー
ディスクＦＤに記録する場合は、コンピュータシステム
Ｃｓから上記動画像復号化プログラムとしてのデータ
を、フロッピーディスクドライブＦDDを介してフロッピ
ーディスクＦＤに書き込む。また、フロッピーディスク
ＦＤに記録されたプログラムにより、上記動画像復号化
装置をコンピュータシステムＣｓ中に構築する場合は、
フロッピーディスクドライブＦDDによりプログラムをフ
ロッピーディスクＦＤから読み出し、コンピュータシス
テムＣｓにロードする。
ディスクＦＤに記録する場合は、コンピュータシステム
Ｃｓから上記動画像復号化プログラムとしてのデータ
を、フロッピーディスクドライブＦDDを介してフロッピ
ーディスクＦＤに書き込む。また、フロッピーディスク
ＦＤに記録されたプログラムにより、上記動画像復号化
装置をコンピュータシステムＣｓ中に構築する場合は、
フロッピーディスクドライブＦDDによりプログラムをフ
ロッピーディスクＦＤから読み出し、コンピュータシス
テムＣｓにロードする。
【０１６７】なお、上記図７では、プログラムの記憶媒
体としてフロッピーディスクを示したが、プログラムの
記録媒体として光ディスクを用いてもよく、この場合も
上記フロッピーディスクの場合と同様にソフトウェアに
よる動画像復号化処理を行うことができる。さらに、上
記プログラム記憶媒体は上記光ディスクやフロッピーデ
ィスクに限るものではなく、ＩＣカード、ＲＯＭカセッ
ト等、プログラムを記録できるものであればどのような
ものでもよく、これらのデータ記録媒体を用いる場合で
も、上記フロッピーディスク等を用いる場合と同様にソ
フトウェアによる各実施の形態の動画像復号化処理を実
施することができる。
体としてフロッピーディスクを示したが、プログラムの
記録媒体として光ディスクを用いてもよく、この場合も
上記フロッピーディスクの場合と同様にソフトウェアに
よる動画像復号化処理を行うことができる。さらに、上
記プログラム記憶媒体は上記光ディスクやフロッピーデ
ィスクに限るものではなく、ＩＣカード、ＲＯＭカセッ
ト等、プログラムを記録できるものであればどのような
ものでもよく、これらのデータ記録媒体を用いる場合で
も、上記フロッピーディスク等を用いる場合と同様にソ
フトウェアによる各実施の形態の動画像復号化処理を実
施することができる。
【０１６８】
【発明の効果】以上のように本発明（請求項１）に係る
動画像復号化方法によれば、動画像に対応する符号化デ
ータを含むビットストリームに対する復号化処理を行う
際、上記ビットストリームの伝送時に発生した第１のエ
ラーと、該第１のエラー以外の第２のエラーとを区別し
て検出し、上記第１のエラーが検出されたとき、上記復
号化処理により得られた復号画像データを、符号化処理
単位である第１の処理単位で修整し、上記第２のエラー
が検出されたとき、上記復号画像データを、１つの同期
信号が付与された、上記第１の処理単位を複数含む第２
の処理単位で修整するので、伝送エラーとストリームエ
ラーのいずれのエラーに対しても復号画像データの修整
を行うことが可能となる。
動画像復号化方法によれば、動画像に対応する符号化デ
ータを含むビットストリームに対する復号化処理を行う
際、上記ビットストリームの伝送時に発生した第１のエ
ラーと、該第１のエラー以外の第２のエラーとを区別し
て検出し、上記第１のエラーが検出されたとき、上記復
号化処理により得られた復号画像データを、符号化処理
単位である第１の処理単位で修整し、上記第２のエラー
が検出されたとき、上記復号画像データを、１つの同期
信号が付与された、上記第１の処理単位を複数含む第２
の処理単位で修整するので、伝送エラーとストリームエ
ラーのいずれのエラーに対しても復号画像データの修整
を行うことが可能となる。
【０１６９】また、伝送エラーが発生した場合には、伝
送エラーの影響を受ける第１の処理単位に対応する復号
画像データのみが修整されることとなり、伝送エラーの
影響を受けていない第１の処理単位に対応する復号画像
データを修整することによる復号画像の画質劣化を回避
できる。また、伝送エラー以外のストリームエラーが発
生した場合には、１つの同期信号が付与された第２の処
理単位に対応する復号画像データが修整されることとな
り、ストリームエラーの影響を受けている第１の処理単
位に対応する復号画像データが出力されることによる復
号画像の画質劣化を防止することができる。
送エラーの影響を受ける第１の処理単位に対応する復号
画像データのみが修整されることとなり、伝送エラーの
影響を受けていない第１の処理単位に対応する復号画像
データを修整することによる復号画像の画質劣化を回避
できる。また、伝送エラー以外のストリームエラーが発
生した場合には、１つの同期信号が付与された第２の処
理単位に対応する復号画像データが修整されることとな
り、ストリームエラーの影響を受けている第１の処理単
位に対応する復号画像データが出力されることによる復
号画像の画質劣化を防止することができる。
【０１７０】この結果、入力ビットストリームのエラー
を検出した場合には、復号画像データの修整処理を効果
的に行って復号画像の画質劣化を大きく低減することが
できる効果が得られる。
を検出した場合には、復号画像データの修整処理を効果
的に行って復号画像の画質劣化を大きく低減することが
できる効果が得られる。
【０１７１】この発明（請求項２）に係る動画像復号化
方法によれば、動画像に対応する符号化データを含むビ
ットストリームに対する復号化処理を行う際、上記ビッ
トストリームのエラーを検出するとともに、上記ビット
ストリームが、上記動画像の形状を示す形状情報を有す
るか否かを判定し、上記エラーが検出され、かつ上記ビ
ットストリームが形状情報を有していないと判定された
とき、上記復号画像データの修整を、符号化処理の単位
領域を修整単位として行い、上記エラーが検出され、か
つ上記ストリームが形状情報を有するとき、上記復号画
像データの修整を、上記動画像を構成する画面を修整単
位として行うので、上記ビットストリームが形状情報を
含む場合には、復号画像の修整処理による大きな画質劣
化を招くことなく、エラーに起因する画質劣化を排除す
ることができ、しかも、上記ストリームが形状情報を含
まない場合には簡単な修整処理によりエラーに起因する
画質劣化を排除することができる。
方法によれば、動画像に対応する符号化データを含むビ
ットストリームに対する復号化処理を行う際、上記ビッ
トストリームのエラーを検出するとともに、上記ビット
ストリームが、上記動画像の形状を示す形状情報を有す
るか否かを判定し、上記エラーが検出され、かつ上記ビ
ットストリームが形状情報を有していないと判定された
とき、上記復号画像データの修整を、符号化処理の単位
領域を修整単位として行い、上記エラーが検出され、か
つ上記ストリームが形状情報を有するとき、上記復号画
像データの修整を、上記動画像を構成する画面を修整単
位として行うので、上記ビットストリームが形状情報を
含む場合には、復号画像の修整処理による大きな画質劣
化を招くことなく、エラーに起因する画質劣化を排除す
ることができ、しかも、上記ストリームが形状情報を含
まない場合には簡単な修整処理によりエラーに起因する
画質劣化を排除することができる。
【０１７２】この発明（請求項３）によれば、請求項２
記載の動画像復号化方法において、上記ビットストリー
ムの伝送時に発生した第１のエラーと、該第１の伝送エ
ラー以外の第２のエラーとを区別して検出し、上記形状
情報を有していないビットストリームの第１のエラーが
検出されたとき、上記復号画像データを、符号化処理の
単位領域に対応する第１の処理単位で修整し、上記形状
情報を有していないビットストリームの第２のエラーが
検出されたとき、上記復号画像データを、１つの同期信
号が付与された、上記第１の処理単位を複数含む第２の
処理単位で修整するので、形状情報を有するストリーム
の復号化処理により得られる復号画像における、伝送エ
ラーあるいはストリームエラーに起因する画質劣化を、
復号画像データの修整に伴う画質劣化を抑えつつ排除す
ることができる効果に加えて、ビットストリームが形状
情報を有しない場合には、エラーに対する復号画像デー
タの修整処理を、エラーの種類に応じて効果的に行っ
て、復号画像の画質を向上することができる効果が得ら
れる。
記載の動画像復号化方法において、上記ビットストリー
ムの伝送時に発生した第１のエラーと、該第１の伝送エ
ラー以外の第２のエラーとを区別して検出し、上記形状
情報を有していないビットストリームの第１のエラーが
検出されたとき、上記復号画像データを、符号化処理の
単位領域に対応する第１の処理単位で修整し、上記形状
情報を有していないビットストリームの第２のエラーが
検出されたとき、上記復号画像データを、１つの同期信
号が付与された、上記第１の処理単位を複数含む第２の
処理単位で修整するので、形状情報を有するストリーム
の復号化処理により得られる復号画像における、伝送エ
ラーあるいはストリームエラーに起因する画質劣化を、
復号画像データの修整に伴う画質劣化を抑えつつ排除す
ることができる効果に加えて、ビットストリームが形状
情報を有しない場合には、エラーに対する復号画像デー
タの修整処理を、エラーの種類に応じて効果的に行っ
て、復号画像の画質を向上することができる効果が得ら
れる。
【０１７３】この発明（請求項４）に係る動画像復号化
装置によれば、動画像に対応する符号化データと、同期
信号とを含むビットストリームに対する復号化処理によ
り復号画像データを生成する復号化器と、上記ビットス
トリームの伝送時に発生した第１のエラーを検出する第
１のエラー検出器と、上記第１の伝送エラー以外の第２
のエラーを検出する第２のエラー検出器とを備え、上記
第１のエラーが検出されたとき、上記復号画像データ
を、符号化処理の単位である第１の処理単位で修整し、
上記第２のエラーが検出されたとき、上記復号画像デー
タを、１つの同期信号が付与された、上記第１の処理単
位を複数含む第２の処理単位で修整するので、請求項１
の動画像復号化方法と同様、エラーが伝送エラーである
かストリームエラーであるかに応じて、復号画像データ
の修整を適切な処理単位で行うことが可能となり、入力
ビットストリームのエラーを検出したときには復号画像
データの修整処理を効果的に行って復号画像の画質劣化
を大きく低減することができる効果が得られる。
装置によれば、動画像に対応する符号化データと、同期
信号とを含むビットストリームに対する復号化処理によ
り復号画像データを生成する復号化器と、上記ビットス
トリームの伝送時に発生した第１のエラーを検出する第
１のエラー検出器と、上記第１の伝送エラー以外の第２
のエラーを検出する第２のエラー検出器とを備え、上記
第１のエラーが検出されたとき、上記復号画像データ
を、符号化処理の単位である第１の処理単位で修整し、
上記第２のエラーが検出されたとき、上記復号画像デー
タを、１つの同期信号が付与された、上記第１の処理単
位を複数含む第２の処理単位で修整するので、請求項１
の動画像復号化方法と同様、エラーが伝送エラーである
かストリームエラーであるかに応じて、復号画像データ
の修整を適切な処理単位で行うことが可能となり、入力
ビットストリームのエラーを検出したときには復号画像
データの修整処理を効果的に行って復号画像の画質劣化
を大きく低減することができる効果が得られる。
【０１７４】この発明（請求項５）に係る動画像復号化
装置によれば、動画像に対応する符号化データと、同期
信号とを含むビットストリームに対する復号化処理によ
り復号画像データを生成する復号化器と、上記ビットス
トリームに含まれるエラーを検出するエラー検出部と、
上記ビットストリームが、上記動画像の形状を示す形状
情報を有するか否かを判定する形状有無判定部とを備
え、上記ビットストリームのエラーが検出され、かつ上
記ビットストリームが形状情報を有すると判定されたと
き、上記復号画像データの修整を、上記動画像を構成す
る画面を修整単位として行い、上記ビットストリームの
エラーが検出され、かつ上記ビットストリームが形状情
報を有していないと判定されたとき、上記復号画像デー
タの修整を、符号化処理の単位領域を１つ以上含む処理
領域を修整単位として行うようにしたので、上記請求項
２の動画像復号化方法と同様、上記ストリームが形状情
報を含む場合には、復号画像の修整処理による大きな画
質劣化を招くことなく、エラーに起因する画質劣化を排
除することができ、しかも、上記ストリームが形状情報
を含まない場合には簡単な修整処理によりエラーに起因
する画質劣化を排除することができる。
装置によれば、動画像に対応する符号化データと、同期
信号とを含むビットストリームに対する復号化処理によ
り復号画像データを生成する復号化器と、上記ビットス
トリームに含まれるエラーを検出するエラー検出部と、
上記ビットストリームが、上記動画像の形状を示す形状
情報を有するか否かを判定する形状有無判定部とを備
え、上記ビットストリームのエラーが検出され、かつ上
記ビットストリームが形状情報を有すると判定されたと
き、上記復号画像データの修整を、上記動画像を構成す
る画面を修整単位として行い、上記ビットストリームの
エラーが検出され、かつ上記ビットストリームが形状情
報を有していないと判定されたとき、上記復号画像デー
タの修整を、符号化処理の単位領域を１つ以上含む処理
領域を修整単位として行うようにしたので、上記請求項
２の動画像復号化方法と同様、上記ストリームが形状情
報を含む場合には、復号画像の修整処理による大きな画
質劣化を招くことなく、エラーに起因する画質劣化を排
除することができ、しかも、上記ストリームが形状情報
を含まない場合には簡単な修整処理によりエラーに起因
する画質劣化を排除することができる。
【０１７５】この発明（請求項６）によれば、請求項５
記載の動画像復号化装置において、上記エラー検出部で
は、上記ビットストリームの伝送時に発生した第１のエ
ラーと、該第１のエラー以外の第２のエラーとを区別し
て検出し、上記復号画像修整部では、上記第１のエラー
が検出され、かつ上記ビットストリームが形状情報を有
していないと判定されたとき、上記復号画像データを、
符号化処理の単位領域に対応する第１の処理単位で修整
し、上記第２のエラーが検出され、かつ上記ビットスト
リームが形状情報を有していないと判定されたとき、上
記復号画像データを、１つの同期信号が付与された、上
記第１の処理単位を複数含む第２の処理単位で修整する
ので、上記請求項３の動画像復号化方法と同様、形状を
有する復号画像における、伝送エラーあるいはストリー
ムエラーに起因する画質劣化を、復号画像データの修整
に伴う画質劣化を抑えつつ排除することができる効果に
加えて、ビットストリームが形状情報を有しない場合に
は、エラーに対する復号画像データの修整処理を、エラ
ーの種類に応じて効果的に行って、復号画像の画質を向
上することができる効果が得られる。
記載の動画像復号化装置において、上記エラー検出部で
は、上記ビットストリームの伝送時に発生した第１のエ
ラーと、該第１のエラー以外の第２のエラーとを区別し
て検出し、上記復号画像修整部では、上記第１のエラー
が検出され、かつ上記ビットストリームが形状情報を有
していないと判定されたとき、上記復号画像データを、
符号化処理の単位領域に対応する第１の処理単位で修整
し、上記第２のエラーが検出され、かつ上記ビットスト
リームが形状情報を有していないと判定されたとき、上
記復号画像データを、１つの同期信号が付与された、上
記第１の処理単位を複数含む第２の処理単位で修整する
ので、上記請求項３の動画像復号化方法と同様、形状を
有する復号画像における、伝送エラーあるいはストリー
ムエラーに起因する画質劣化を、復号画像データの修整
に伴う画質劣化を抑えつつ排除することができる効果に
加えて、ビットストリームが形状情報を有しない場合に
は、エラーに対する復号画像データの修整処理を、エラ
ーの種類に応じて効果的に行って、復号画像の画質を向
上することができる効果が得られる。
【０１７６】この発明（請求項７）に係るプログラム記
録媒体によれば、動画像に対応する符号化データと、同
期信号とを含むビットストリームに対する処理をコンピ
ュータにより行うためのプログラムとして、上記ビット
ストリームの復号化処理の際、上記ビットストリームの
伝送時に発生した第１のエラーと、該第１のエラー以外
の第２のエラーとを区別して検出し、上記第１のエラー
が検出されたとき、上記復号画像データを、符号化処理
単位である第１の処理単位で修整し、上記第２のエラー
が検出されたとき、上記復号画像データを、１つの同期
信号が付与された、上記第１の処理単位を複数含む第２
の処理単位で修整するプログラムを格納したので、エラ
ーが伝送エラーであるかストリームエラーであるかに応
じて復号画像データの修整処理を効果的に行って、復号
画像の画質を向上することができる動画像復号化方法
を、ソフトウエアにより実現できる。
録媒体によれば、動画像に対応する符号化データと、同
期信号とを含むビットストリームに対する処理をコンピ
ュータにより行うためのプログラムとして、上記ビット
ストリームの復号化処理の際、上記ビットストリームの
伝送時に発生した第１のエラーと、該第１のエラー以外
の第２のエラーとを区別して検出し、上記第１のエラー
が検出されたとき、上記復号画像データを、符号化処理
単位である第１の処理単位で修整し、上記第２のエラー
が検出されたとき、上記復号画像データを、１つの同期
信号が付与された、上記第１の処理単位を複数含む第２
の処理単位で修整するプログラムを格納したので、エラ
ーが伝送エラーであるかストリームエラーであるかに応
じて復号画像データの修整処理を効果的に行って、復号
画像の画質を向上することができる動画像復号化方法
を、ソフトウエアにより実現できる。
【０１７７】この発明（請求項８）に係るプログラム記
録媒体によれば、動画像に対応する符号化データと、同
期信号とを含むビットストリームに対する処理をコンピ
ュータにより行うためのプログラムとして、上記ビット
ストリームの復号化処理の際、上記ストリームのエラー
を検出するとともに、上記ビットストリームが、上記動
画像の形状を示す形状情報を有するか否かを判定し、上
記ビットストリームのエラーが検出され、かつ上記ビッ
トストリームが形状情報を有すると判定されたとき、上
記復号画像データの修整を、上記動画像を構成する画面
を修整単位として行い、上記ビットストリームのエラー
が検出され、かつ上記ビットストリームが形状情報を有
していないと判定されたとき、上記復号画像データの修
整を、符号化処理の単位領域を１つ以上含む処理領域を
修整単位として行うプログラムを格納したので、上記ビ
ットストリームが形状情報を含む場合には、復号画像の
修整処理による大きな画質劣化を招くことなく、エラー
に起因する画質劣化を排除することができ、しかも、上
記ビットストリームが形状情報を含まない場合には簡単
な修整処理によりエラーに起因する画質劣化を排除する
ことができる動画像復号化方法を、ソフトウエアにより
実現できる。
録媒体によれば、動画像に対応する符号化データと、同
期信号とを含むビットストリームに対する処理をコンピ
ュータにより行うためのプログラムとして、上記ビット
ストリームの復号化処理の際、上記ストリームのエラー
を検出するとともに、上記ビットストリームが、上記動
画像の形状を示す形状情報を有するか否かを判定し、上
記ビットストリームのエラーが検出され、かつ上記ビッ
トストリームが形状情報を有すると判定されたとき、上
記復号画像データの修整を、上記動画像を構成する画面
を修整単位として行い、上記ビットストリームのエラー
が検出され、かつ上記ビットストリームが形状情報を有
していないと判定されたとき、上記復号画像データの修
整を、符号化処理の単位領域を１つ以上含む処理領域を
修整単位として行うプログラムを格納したので、上記ビ
ットストリームが形状情報を含む場合には、復号画像の
修整処理による大きな画質劣化を招くことなく、エラー
に起因する画質劣化を排除することができ、しかも、上
記ビットストリームが形状情報を含まない場合には簡単
な修整処理によりエラーに起因する画質劣化を排除する
ことができる動画像復号化方法を、ソフトウエアにより
実現できる。
【図１】本発明の実施の形態１による動画像復号化装置
を説明するための図であり、該動画像復号化装置の構成
（図(a)）及び該動画像復号化装置に入力されるＶＯＰ
ビットストリームのデータ構造（図(b)）を示してい
る。
を説明するための図であり、該動画像復号化装置の構成
（図(a)）及び該動画像復号化装置に入力されるＶＯＰ
ビットストリームのデータ構造（図(b)）を示してい
る。
【図２】上記実施の形態１の動画像復号化装置により入
力ストリームを復号化する処理のフローを示す図であ
る。
力ストリームを復号化する処理のフローを示す図であ
る。
【図３】本発明の実施の形態２による動画像復号化装置
を説明するためのブロック図である。
を説明するためのブロック図である。
【図４】上記実施の形態２の動画像復号化装置による復
号化処理の流れを示す図である。
号化処理の流れを示す図である。
【図５】本発明の実施の形態３による動画像復号化装置
を説明するためのブロック図である。
を説明するためのブロック図である。
【図６】上記実施の形態３の動画像復号化装置による復
号化処理の流れを示す図である。
号化処理の流れを示す図である。
【図７】上記各実施の形態における動画像復号処理を、
動画像復号プログラムを格納したフロッピーディスク
（図(a)，図(b)）を用いて、コンピュータシステム（図
(c)）により実施する場合を説明するための図である。
動画像復号プログラムを格納したフロッピーディスク
（図(a)，図(b)）を用いて、コンピュータシステム（図
(c)）により実施する場合を説明するための図である。
【図８】上記ＭＰＥＧ−４対応の符号化処理における種
々の処理単位について説明するための模式図であり、物
体の形状（図(a)），物体の絵柄（図(b)），及び物体を
包含する矩形領域（図(c)）を示している。
々の処理単位について説明するための模式図であり、物
体の形状（図(a)），物体の絵柄（図(b)），及び物体を
包含する矩形領域（図(c)）を示している。
【図９】ＭＰＥＧ−４対応のビットストリームにおける
種々の処理単位を説明するための模式図であり、ビデオ
パケット（図(a)），ＶＯＰにおけるビデオパケット対
応領域（図(b)），マクロブロック（図(c)），ブロック
（図(d)），及びビデオパケットの変形例（図(e)）を示
している。
種々の処理単位を説明するための模式図であり、ビデオ
パケット（図(a)），ＶＯＰにおけるビデオパケット対
応領域（図(b)），マクロブロック（図(c)），ブロック
（図(d)），及びビデオパケットの変形例（図(e)）を示
している。
【図１０】ＭＰＥＧ−４における物体単位の符号化処理
を説明するための模式図である。
を説明するための模式図である。
【図１１】ＭＰＥＧ４におけるビットストリームの構成
を詳しく説明するための模式図であり、ＶＯＰストリー
ム（図(a)），ビデオパケット（図(b)），及びマクロブ
ロック情報（図(c)）を示している。
を詳しく説明するための模式図であり、ＶＯＰストリー
ム（図(a)），ビデオパケット（図(b)），及びマクロブ
ロック情報（図(c)）を示している。
【図１２】従来の一般的な動画像復号化装置を説明する
ためのブロック図である。
ためのブロック図である。
【図１３】従来のその他の動画像復号化装置を説明する
ためのブロック図である。
ためのブロック図である。
１ 復号化器 １ａ，２ａ 第１，第２のＶＰ遅延回路 １ｂ，２ｂ 第１，第２のＶＯＰ遅延回路 ２ メモリ ３ 伝送エラー検出器 ４ マクロブロック単位修整器 ５ ＭＢ選択スイッチ ６ ストリームエラー検出器 ７ ビデオパケット単位修整器 ８ ＶＰ選択スイッチ ９ 論理和回路 １０ 形状有無検出器 １１ 論理積回路 １２ ＶＯＰ単位修整器 １３ ＶＯＰ選択スイッチ １８ エラー検出器 １００ａ，１００ｂ，１００ｃ 動画像復号化装置 Ａerr，ＴＳerr エラー通知信号 Ｃｍ マーカ符号 Ｃmb ＭＢ単位置換制御信号 Ｃｓ コンピュータシステム Ｃvp ＶＰ単位置換制御信号 Ｃvop ＶＯＰ単位置換制御信号 Ｄ フロッピーディスク本体 ＤＥmb ＶＰ遅延選択データ ＤＶｄ ＶＰ遅延復号データ ＤＶref1 ＶＰ遅延置換データ ＤＥvp ＶＯＰ遅延選択データ ＤＶref2 ＶＯＰ遅延置換データ Ｅmb ＭＢ単位選択画像データ Ｅvp ＶＰ単位選択画像データ Ｅvop ＶＯＰ単位選択画像データ ＦＣ フロッピーディスクケース ＦＤ フロッピーディスク ＦDD フロッピーディスクドライブ Ｓｅ セクタ Ｓerr ストリームエラー通知信号 Ｓmb(1)，Ｓmb(i-1)，Ｓmb(i)，Ｓvp(i+1)，Ｓvp(m)
ビデオパケット Ｓvop ＶＯＰビットストリーム Ｓvp(1)，Ｓvp(k)，Ｓvp(k+1)，Ｓvp(m) ＶＯＰビット
ストリーム Ｓvph(1)，Ｓvph(k)，Ｓvph(k+1)，Ｓvph(m) ＶＯＰヘ
ッダ Ｔerr 伝送エラー通知信号 Ｔｒ トラック Ｖｄ 復号画像データ Ｖin 入力ストリーム Ｖref 参照画像データ Ｖrep 置換画像データ
ビデオパケット Ｓvop ＶＯＰビットストリーム Ｓvp(1)，Ｓvp(k)，Ｓvp(k+1)，Ｓvp(m) ＶＯＰビット
ストリーム Ｓvph(1)，Ｓvph(k)，Ｓvph(k+1)，Ｓvph(m) ＶＯＰヘ
ッダ Ｔerr 伝送エラー通知信号 Ｔｒ トラック Ｖｄ 復号画像データ Ｖin 入力ストリーム Ｖref 参照画像データ Ｖrep 置換画像データ
Claims (8)
- 【請求項１】 動画像に対応する画像データを第１の処
理単位毎に順次符号化してなる符号化データと、上記第
１の処理単位を複数含む第２の処理単位毎に上記符号化
データに付与された同期信号とを含むビットストリーム
に対して、該符号化データを上記第１の処理単位毎に復
号化して復号画像データを生成する復号化処理を施す動
画像復号化方法であって、 上記ビットストリームの伝送時に発生した第１のエラー
と、該第１のエラー以外の第２のエラーとを区別して検
出するエラー検出処理と、 上記第１のエラーが検出されたとき、上記復号画像デー
タの修整を上記第１の処理単位を修整単位として行い、
上記第２のエラーが検出されたとき、上記復号画像デー
タの修整を上記第２の処理単位を修整単位として行う修
整処理とを含むことを特徴とする動画像復号化方法。 - 【請求項２】 動画像に対応する画像データを該動画像
の１画面を構成する単位領域毎に順次符号化してなる符
号化データを含むビットストリームに対して、該符号化
データを上記単位領域毎に復号化して復号画像データを
生成する復号化処理を施す動画像復号化方法であって、 上記ビットストリームのエラーを検出するエラー検出処
理と、 上記ビットストリームが、上記動画像の形状を示す形状
情報を有するか否かを判定する形状有無判定処理と、 上記ビットストリームのエラーが検出され、かつ上記ビ
ットストリームが形状情報を有すると判定されたとき、
上記復号画像データの修整を、上記動画像の１画面を修
整単位として行い、上記ビットストリームのエラーが検
出され、かつ上記ビットストリームが形状情報を有して
いないと判定されたとき、上記復号画像データの修整
を、上記単位領域を１以上含む、上記画面より小さい処
理領域を修整単位として行う修整処理とを含むことを特
徴とする動画像復号化方法。 - 【請求項３】 請求項２記載の動画像復号化方法におい
て、 上記ビットストリームは、上記単位領域に対応する第１
の処理単位を複数含む第２の処理単位毎に上記符号化デ
ータに付与された同期信号を含むものであり、 上記エラー検出処理は、上記ストリームの伝送時に発生
した第１のエラーと、該第１のエラー以外の第２のエラ
ーとを区別して検出するものであり、 上記修整処理は、上記形状情報を有していないストリー
ムの第１のエラーが検出されたとき、上記復号画像デー
タの修整を、上記第１の処理単位を修整単位として行
い、上記形状情報を有していないストリームの第２のエ
ラーが検出されたとき、上記復号画像データの修整を、
上記第２の処理単位を修整単位として行うものであるこ
とを特徴とする画像復号化方法。 - 【請求項４】 動画像に対応する画像データを第１の処
理単位毎に順次符号化してなる符号化データと、上記第
１の処理単位を複数含む第２の処理単位毎に上記符号化
データに付与された同期信号とを含むビットストリーム
に対して復号化処理を施す動画像復号化装置であって、 上記ビットストリームに含まれる符号化データを上記第
１の処理単位毎に復号化して復号画像データを生成する
復号化器と、 上記ビットストリームの伝送時に発生した第１のエラー
を検出する第１のエラー検出器と、 上記第１のエラー以外の第２のエラーを検出する第２の
エラー検出器と、 上記第１のエラーが検出されたとき、上記復号画像デー
タの修整を上記第１の処理単位を修整単位として行う第
１の修整部と、 上記第２のエラーが検出されたとき、上記復号画像デー
タの修整を上記第２の処理単位を修整単位として行う第
２の修整部とを備えたことを特徴とする動画像復号化装
置。 - 【請求項５】 動画像に対応する画像データを該動画像
の１画面を構成する単位領域毎に順次符号化してなる符
号化データを含むビットストリームに対して復号化処理
を施す動画像復号化装置であって、 上記ビットストリームに含まれる符号化データを上記単
位領域毎に復号化して復号画像データを生成する復号化
器と、 上記ビットストリームのエラーを検出するエラー検出部
と、 上記ビットストリームが、上記動画像の形状を示す形状
情報を有するか否かを判定する形状有無判定部と、 上記ビットストリームのエラーが検出され、かつ上記ビ
ットストリームが形状情報を有すると判定されたとき、
上記復号画像データの修整を、上記動画像の１画面を修
整単位として行い、上記ビットストリームのエラーが検
出され、かつ上記ビットストリームが形状情報を有して
いないと判定されたとき、上記復号画像データの修整
を、上記単位領域を１つ以上含む、上記画面より小さい
処理領域を修整単位として行う復号画像修整部とを備え
たことを特徴とする動画像復号化装置。 - 【請求項６】 請求項５記載の動画像復号化装置におい
て、 上記ビットストリームは、上記単位領域に対応する第１
の処理単位を複数含む第２の処理単位毎に上記符号化デ
ータに付与された同期信号を含むものであり、 上記エラー検出部は、 上記ビットストリームの伝送時に発生した第１のエラー
を検出する第１のエラー検出器と、 該第１のエラー以外の第２のエラーを検出する第２のエ
ラー検出器とを有するものであり、 上記復号画像修整部は、 上記形状情報を有していないストリームの第１のエラー
が検出されたとき、上記復号画像データの修整を、上記
第１の処理単位を修整単位として行う第１の修整器と、 上記形状情報を有していないストリームの第２のエラー
が検出されたとき、上記復号画像データの修整を、上記
第２の処理単位を修整単位として行う第２の修整器と、 上記形状情報を有するビットストリームの第１のエラー
あるいは第２のエラーが検出されたとき、上記復号画像
データの修整を、上記動画像の１画面を修整単位として
行う第３の修整器とを有するものであることを特徴とす
る動画像復号化装置。 - 【請求項７】 動画像に対応する画像データを第１の処
理単位毎に順次符号化してなる符号化データと、上記第
１の処理単位を複数含む第２の処理単位毎に上記符号化
データに付与された同期信号とを含むビットストリーム
に対するデータ処理をコンピュータにより行うためのプ
ログラムを格納したプログラム記録媒体であって、 上記データ処理は、 上記ビットストリームに含まれる符号化データを上記第
１の処理単位毎に復号化して復号画像データを生成する
復号化処理と、 上記ビットストリームの伝送時に発生した第１のエラー
と、該第１のエラー以外の第２のエラーとを区別して検
出するエラー検出処理と、 上記第１のエラーが検出されたとき、上記復号画像デー
タの修整を上記第１の処理単位を修整単位として行い、
上記第２のエラーが検出されたとき、上記復号画像デー
タの修整を上記第２の処理単位を修整単位として行う修
整処理とを含むことを特徴とする動画像復号化方法。 - 【請求項８】 動画像に対応する画像データを該動画像
の１画面を構成する単位領域毎に順次符号化してなる符
号化データを含むビットストリームに対するデータ処理
をコンピュータにより行うためのプログラムを格納した
プログラム記録媒体であって、 上記データ処理は、 上記ビットストリームに含まれる符号化データを上記単
位領域毎に復号化して復号画像データを生成する復号化
処理と、 上記ビットストリームに含まれるエラーを検出するエラ
ー検出処理と、 上記ビットストリームが、上記動画像の形状を示す形状
情報を有するか否かを判定する形状有無判定処理と、 上記ビットストリームのエラーが検出され、かつ上記ビ
ットストリームが形状情報を有すると判定されたとき、
上記復号画像データの修整を、上記動画像の１画面を修
整単位として行い、上記ビットストリームのエラーが検
出され、かつ上記ビットストリームが形状情報を有して
いないと判定されたとき、上記復号画像データの修整
を、上記単位領域を１つ以上含む、上記画面より小さい
処理領域を修整単位として行う修整処理とを含むことを
特徴とするプログラム記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000291381A JP3898885B2 (ja) | 1999-09-30 | 2000-09-26 | 動画像復号化方法、動画像復号化装置、及びプログラム記録媒体 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11-280183 | 1999-09-30 | ||
| JP28018399 | 1999-09-30 | ||
| JP2000291381A JP3898885B2 (ja) | 1999-09-30 | 2000-09-26 | 動画像復号化方法、動画像復号化装置、及びプログラム記録媒体 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004302968A Division JP2005051816A (ja) | 1999-09-30 | 2004-10-18 | 動画像復号化方法、動画像復号化装置、及びプログラム記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001169282A true JP2001169282A (ja) | 2001-06-22 |
| JP3898885B2 JP3898885B2 (ja) | 2007-03-28 |
Family
ID=26553670
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000291381A Expired - Fee Related JP3898885B2 (ja) | 1999-09-30 | 2000-09-26 | 動画像復号化方法、動画像復号化装置、及びプログラム記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3898885B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008546230A (ja) * | 2005-05-13 | 2008-12-18 | クゥアルコム・インコーポレイテッド | インバンド誤りパターンを使用する誤り回復のための装置と方法 |
| WO2010122620A1 (ja) * | 2009-04-22 | 2010-10-28 | パナソニック株式会社 | 画像再生装置及び画像再生方法 |
| JP2011055219A (ja) * | 2009-09-01 | 2011-03-17 | Sony Corp | 画像送信装置、画像受信装置、画像送信方法及び画像受信方法 |
-
2000
- 2000-09-26 JP JP2000291381A patent/JP3898885B2/ja not_active Expired - Fee Related
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008546230A (ja) * | 2005-05-13 | 2008-12-18 | クゥアルコム・インコーポレイテッド | インバンド誤りパターンを使用する誤り回復のための装置と方法 |
| WO2010122620A1 (ja) * | 2009-04-22 | 2010-10-28 | パナソニック株式会社 | 画像再生装置及び画像再生方法 |
| US8666187B2 (en) | 2009-04-22 | 2014-03-04 | Panasonic Corporation | Image reproduction apparatus and image reproduction method |
| JP2011055219A (ja) * | 2009-09-01 | 2011-03-17 | Sony Corp | 画像送信装置、画像受信装置、画像送信方法及び画像受信方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3898885B2 (ja) | 2007-03-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7817899B2 (en) | Moving picture decoding apparatus using replacement image data | |
| USRE42621E1 (en) | Moving-picture signal coding and/or decoding system resistant to transmission error | |
| US20060140281A1 (en) | Video coding apparatus and video decoding apparatus | |
| US6229930B1 (en) | Image processing apparatus, image processing method, image data structure, and data storage media | |
| US7124429B2 (en) | Video coding apparatus and video decoding apparatus | |
| JP3898885B2 (ja) | 動画像復号化方法、動画像復号化装置、及びプログラム記録媒体 | |
| JP2005051816A (ja) | 動画像復号化方法、動画像復号化装置、及びプログラム記録媒体 | |
| JPH1132337A (ja) | 画像伝送用データ構造，符号化方法及び復号化方法 | |
| JP2000324491A (ja) | 動画像符号化装置および動画像復号化装置 | |
| JP2003078916A (ja) | 画像符号化方法および画像復号化方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040817 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041018 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041116 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050117 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20051129 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060127 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060822 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061020 |
|
| A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20061108 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20061205 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20061222 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110105 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120105 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130105 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130105 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |