JP3139791B2 - 動画像パケット通信方式 - Google Patents
動画像パケット通信方式Info
- Publication number
- JP3139791B2 JP3139791B2 JP28156491A JP28156491A JP3139791B2 JP 3139791 B2 JP3139791 B2 JP 3139791B2 JP 28156491 A JP28156491 A JP 28156491A JP 28156491 A JP28156491 A JP 28156491A JP 3139791 B2 JP3139791 B2 JP 3139791B2
- Authority
- JP
- Japan
- Prior art keywords
- block
- image
- frame
- interpolation
- decoder
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Description
【０００１】
【産業上の利用分野】本発明は動画像のパケット通信方
式、とくに動画像パケット通信のセル廃棄における画像
品質劣化の軽減に関する。
式、とくに動画像パケット通信のセル廃棄における画像
品質劣化の軽減に関する。
【０００２】
【従来の技術】非同期転送モード網（ＡＴＭ網）を利用
した、動画像パケット通信方式が近年注目を集めてい
る。このパケット通信方式は、符号化された音声・画像
をパケット（セル）にまとめ、行き先及び内容の種別を
示したヘッダを付与して、ＡＴＭ網上でセルの送受信を
行うことにより大容量の通信を行うものである。すなわ
ちＡＴＭ網は、大容量・非同期の特徴を生かして、画像
符号化を可変レートで行うことにより、高品質の画像通
信を実現するものである。
した、動画像パケット通信方式が近年注目を集めてい
る。このパケット通信方式は、符号化された音声・画像
をパケット（セル）にまとめ、行き先及び内容の種別を
示したヘッダを付与して、ＡＴＭ網上でセルの送受信を
行うことにより大容量の通信を行うものである。すなわ
ちＡＴＭ網は、大容量・非同期の特徴を生かして、画像
符号化を可変レートで行うことにより、高品質の画像通
信を実現するものである。
【０００３】しかしながら、ＡＴＭ通信では、セルの総
数がＡＴＭ網の処理能力を上回ると、あふれたセルを廃
棄する。このため、たとえば和田、滝島らによる「選択
訂正型ビデオパケット紛失補償におけるコンシールメン
ト画質と符号化効率」、１９８９年テレビジョン学会全
国大会、第４７３〜４７４頁には、このセル廃棄による
画像品質劣化を受信側で軽減する方法について記載され
ている。
数がＡＴＭ網の処理能力を上回ると、あふれたセルを廃
棄する。このため、たとえば和田、滝島らによる「選択
訂正型ビデオパケット紛失補償におけるコンシールメン
ト画質と符号化効率」、１９８９年テレビジョン学会全
国大会、第４７３〜４７４頁には、このセル廃棄による
画像品質劣化を受信側で軽減する方法について記載され
ている。
【０００４】この従来技術では、ＡＴＭ網でセル廃棄が
起きた場合、セル分解回路は、セル廃棄が起きたことを
送信側、受信側に通知する。この通知を受けると、送信
側は、セル廃棄によって受信側で劣化した部分をフレー
ム間予測符号化に用いないようにする。数フレーム後
に、受信側の劣化した部分をフレーム内符号化し、送信
側／受信側の同期回復を図る。受信側では、一つ前のフ
レームから劣化した部分を補間し、フレーム内符号化が
行われるまでの画像信号劣化を軽減する。従来技術では
このようにして画像信号の劣化を軽減するものであっ
た。
起きた場合、セル分解回路は、セル廃棄が起きたことを
送信側、受信側に通知する。この通知を受けると、送信
側は、セル廃棄によって受信側で劣化した部分をフレー
ム間予測符号化に用いないようにする。数フレーム後
に、受信側の劣化した部分をフレーム内符号化し、送信
側／受信側の同期回復を図る。受信側では、一つ前のフ
レームから劣化した部分を補間し、フレーム内符号化が
行われるまでの画像信号劣化を軽減する。従来技術では
このようにして画像信号の劣化を軽減するものであっ
た。
【０００５】
【発明が解決しようとする課題】しかしながらこのよう
な従来技術では、補間を行う際に、劣化部分のまわりの
動きベクトルの線形和を用いるが、必ずしも劣化を軽減
するのに適切な動きベクトルになるとは限らなかった。
また、廃棄を送信側に通知しなければならず、この通知
を受けた送信側も、廃棄された部分を予測符号化に使わ
ないように制御する回路を設ける必要があり、装置が複
雑化するという問題があった。さらに、送信側と受信側
でのミスマッチを解決するために、フレーム内符号化を
行なわなければならないという問題もあった。
な従来技術では、補間を行う際に、劣化部分のまわりの
動きベクトルの線形和を用いるが、必ずしも劣化を軽減
するのに適切な動きベクトルになるとは限らなかった。
また、廃棄を送信側に通知しなければならず、この通知
を受けた送信側も、廃棄された部分を予測符号化に使わ
ないように制御する回路を設ける必要があり、装置が複
雑化するという問題があった。さらに、送信側と受信側
でのミスマッチを解決するために、フレーム内符号化を
行なわなければならないという問題もあった。
【０００６】本発明はこのような従来技術の欠点を解消
し、セル廃棄が起きても画像品質の劣化が目立たない動
画像パケット符号化方式を提供することを目的とする。
し、セル廃棄が起きても画像品質の劣化が目立たない動
画像パケット符号化方式を提供することを目的とする。
【０００７】
【課題を解決するための手段および作用】本発明は上述
の課題を解決するために、画像信号をパケット符号化伝
送する動画像パケット通信方式は、符号化器及び復号化
器を、フレームを複数のブロックに分割し、このブロッ
ク単位でセル化するフレーム内符号化復号化器で構成
し、動画像信号の復号化を行う復号化器は、再生画像を
記憶する補間用フレームメモリと、セル廃棄により画像
品質劣化を受けたブロックに対してブロックマッチング
を行う補間手段とを有し、補間手段は、セル廃棄時にセ
ル廃棄通知に基づいて再生画像の劣化部分をその周辺部
を含んで劣化ブロックとして切り出し、この切り出した
ブロックに対応する画像信号を過去の再生画像が記憶さ
れている補間用フレームメモリから複数の再生ブロック
を切り出し、この劣化ブロックの周辺部と、複数の再生
ブロックの対応する部分との間でブロックマッチングを
行い、劣化ブロックと複数の再生ブロックのブロックの
間でブロックマッチングを行い、最小誤差の再生ブロッ
クを再生画像の劣化部分に補間する。
の課題を解決するために、画像信号をパケット符号化伝
送する動画像パケット通信方式は、符号化器及び復号化
器を、フレームを複数のブロックに分割し、このブロッ
ク単位でセル化するフレーム内符号化復号化器で構成
し、動画像信号の復号化を行う復号化器は、再生画像を
記憶する補間用フレームメモリと、セル廃棄により画像
品質劣化を受けたブロックに対してブロックマッチング
を行う補間手段とを有し、補間手段は、セル廃棄時にセ
ル廃棄通知に基づいて再生画像の劣化部分をその周辺部
を含んで劣化ブロックとして切り出し、この切り出した
ブロックに対応する画像信号を過去の再生画像が記憶さ
れている補間用フレームメモリから複数の再生ブロック
を切り出し、この劣化ブロックの周辺部と、複数の再生
ブロックの対応する部分との間でブロックマッチングを
行い、劣化ブロックと複数の再生ブロックのブロックの
間でブロックマッチングを行い、最小誤差の再生ブロッ
クを再生画像の劣化部分に補間する。
【０００８】本発明によればまた、画像信号をパケット
符号化伝送する動画像パケット通信方式は、符号化器及
び復号化器を、フレームを複数のブロックに分割し、こ
のブロック単位でセル化するフレーム間符号化復号化器
で構成し、パケット符号化を行う符号化器はフレーム間
予測のためのフレームメモリにリーケージが設けられ、
動画像信号の復号化を行う復号化器は、リーケージが設
けられているフレーム間予測のためのフレームメモリ
と、補間用のフレームメモリブロックマッチングを行う
補間手段とを有し、補間手段は、セル廃棄時にセル廃棄
通知に基づいて再生画像の劣化部分をその周辺部を含ん
でブロックとして切り出し、この切り出したブロックに
対応する画像信号を過去の再生画像が記憶されている前
記補間用フレームメモリから複数の再生ブロックを切り
出し、この劣化ブロックの周辺部と、複数の再生ブロッ
クの対応する部分との間でブロックマッチングを行い、
最小誤差の再生ブロックを再生画像の劣化部分に補間す
る。
符号化伝送する動画像パケット通信方式は、符号化器及
び復号化器を、フレームを複数のブロックに分割し、こ
のブロック単位でセル化するフレーム間符号化復号化器
で構成し、パケット符号化を行う符号化器はフレーム間
予測のためのフレームメモリにリーケージが設けられ、
動画像信号の復号化を行う復号化器は、リーケージが設
けられているフレーム間予測のためのフレームメモリ
と、補間用のフレームメモリブロックマッチングを行う
補間手段とを有し、補間手段は、セル廃棄時にセル廃棄
通知に基づいて再生画像の劣化部分をその周辺部を含ん
でブロックとして切り出し、この切り出したブロックに
対応する画像信号を過去の再生画像が記憶されている前
記補間用フレームメモリから複数の再生ブロックを切り
出し、この劣化ブロックの周辺部と、複数の再生ブロッ
クの対応する部分との間でブロックマッチングを行い、
最小誤差の再生ブロックを再生画像の劣化部分に補間す
る。
【０００９】
【実施例】次に添付図面を参照して本発明による動画像
パケット通信方式の実施例を詳細に説明する。
パケット通信方式の実施例を詳細に説明する。
【００１０】図１を参照すると、本発明による動画像パ
ケット通信方式を適用した画像パケット符号化装置と画
像パケット復号化装置をＡＴＭ通信網を介して接続した
システムの実施例が示されている。
ケット通信方式を適用した画像パケット符号化装置と画
像パケット復号化装置をＡＴＭ通信網を介して接続した
システムの実施例が示されている。
【００１１】図１において、入力原画像はまずＴＶカメ
ラ１０１の撮像管の走査によって、光の濃淡分布を示す
電気信号に変換され、Ａ／Ｄ変換器（Ａ／Ｄ）１０２に
よって、画素として８ビット量子化、標本化され、ディ
ジタル画像信号に変換される。このディジタル画像信号
は、符号化器（ｃｏｄｅｒ）１０３によって符号化さ
れ、セル組立回路（ＣＡＤ）１０４によってセル化され
て、ＡＴＭ網１０５へ送り出される。以上が符号化器側
の動作である。ここで符号化器１０３は、ＤＣＴフレー
ム内符号化器で構成されているものとする。
ラ１０１の撮像管の走査によって、光の濃淡分布を示す
電気信号に変換され、Ａ／Ｄ変換器（Ａ／Ｄ）１０２に
よって、画素として８ビット量子化、標本化され、ディ
ジタル画像信号に変換される。このディジタル画像信号
は、符号化器（ｃｏｄｅｒ）１０３によって符号化さ
れ、セル組立回路（ＣＡＤ）１０４によってセル化され
て、ＡＴＭ網１０５へ送り出される。以上が符号化器側
の動作である。ここで符号化器１０３は、ＤＣＴフレー
ム内符号化器で構成されているものとする。
【００１２】次に復号化器側の動作を説明する。図１に
おいて、ＡＴＭ網１０５から送られてきたセルは、セル
分解回路（ＣＡＤ）１０６によって符号化データに分離
され、復号化器（ｄｅｃｏｄｅｒ）１０７に入力され
る。復号化器１０７は画像信号を再生する。Ｄ／Ａ変換
器（Ｄ／Ａ）１０８は画像信号をディジタル／アナログ
変換し、得られた再生画像はＴＶモニタ１０９に出力さ
れる。ここで復号化器１０７は、ＤＣＴフレーム内復号
化器で構成されているものとする。
おいて、ＡＴＭ網１０５から送られてきたセルは、セル
分解回路（ＣＡＤ）１０６によって符号化データに分離
され、復号化器（ｄｅｃｏｄｅｒ）１０７に入力され
る。復号化器１０７は画像信号を再生する。Ｄ／Ａ変換
器（Ｄ／Ａ）１０８は画像信号をディジタル／アナログ
変換し、得られた再生画像はＴＶモニタ１０９に出力さ
れる。ここで復号化器１０７は、ＤＣＴフレーム内復号
化器で構成されているものとする。
【００１３】次に、符号化器１０３、復号化器１０７の
詳細について説明する。符号化、復号化、セル化は１６
×１６画素あるいは８×８画素ごとに行われる。
詳細について説明する。符号化、復号化、セル化は１６
×１６画素あるいは８×８画素ごとに行われる。
【００１４】図２には、符号化器１０３をフレーム内Ｄ
ＣＴ符号化器で構成したときの機能ブロック図が示され
ている。
ＣＴ符号化器で構成したときの機能ブロック図が示され
ている。
【００１５】図３には、復号化器１０７をフレーム内Ｄ
ＣＴ復号化器で構成したときの機能ブロック図が示され
ている。
ＣＴ復号化器で構成したときの機能ブロック図が示され
ている。
【００１６】図２において、まず画像信号入力端子２０
０からの入力画像信号は、平均値算出器（ＡＶ）２０１
によって、ブロックごとの平均値が算出される。次に算
出された平均値は、平均値量子化器（ＡＱ）２０２によ
って量子化され、平均値逆量子化器（ＡＱ-1）２０３に
よって逆量子化される。逆量子化値は加算器２０４でブ
ロックから差し引かれ残差信号となる。この残差信号
は、ＤＣＴ変換器（ＤＣＴ）２０５によってＤＣＴ変換
される。ＤＣＴ係数は、量子化器（Ｑ）２０６、逆量子
化器（Ｑ-1）２０７によって量子化、逆量子化されると
ともに、可変長符号化器（ＶＬＣ）２１１で可変長符号
化される。逆量子化器２０７の出力変換係数は、逆ＤＣ
Ｔ変換器（ＤＣＴ-1）２０８によってＤＣＴ逆変換さ
れ、加算器２０９で先に差し引いた平均値を加えられ、
フレームメモリ（ＦＭ）２１０に局部再生画像信号とし
て記憶される。また、係数の符号、平均値は符号出力端
子２１２から出力される。
０からの入力画像信号は、平均値算出器（ＡＶ）２０１
によって、ブロックごとの平均値が算出される。次に算
出された平均値は、平均値量子化器（ＡＱ）２０２によ
って量子化され、平均値逆量子化器（ＡＱ-1）２０３に
よって逆量子化される。逆量子化値は加算器２０４でブ
ロックから差し引かれ残差信号となる。この残差信号
は、ＤＣＴ変換器（ＤＣＴ）２０５によってＤＣＴ変換
される。ＤＣＴ係数は、量子化器（Ｑ）２０６、逆量子
化器（Ｑ-1）２０７によって量子化、逆量子化されると
ともに、可変長符号化器（ＶＬＣ）２１１で可変長符号
化される。逆量子化器２０７の出力変換係数は、逆ＤＣ
Ｔ変換器（ＤＣＴ-1）２０８によってＤＣＴ逆変換さ
れ、加算器２０９で先に差し引いた平均値を加えられ、
フレームメモリ（ＦＭ）２１０に局部再生画像信号とし
て記憶される。また、係数の符号、平均値は符号出力端
子２１２から出力される。
【００１７】図２の符号化を行った画像信号を復号化す
るのが、図３のフレーム内ＤＣＴ復号化器である。符号
入力端子３００からの符号は、可変長復号化器（ＶＬ
Ｄ）３０１で復号化される。次に平均値逆量子化器（Ａ
Ｑ-1）３０４、逆量子化器（Ｑ-1）３０２で逆量子化さ
れる。逆量子化器３０２の出力変換係数は、逆ＤＣＴ変
換器（ＤＣＴ-1）３０３によって、ＤＣＴ逆変換され、
加算器３０５で平均値が加えられる。得られた再生画像
信号は、補間回路（Ｃ）３０６を通って画像出力端子３
０８から出力される。また、再生画像信号は補間用フレ
ームメモリ（ＦＭ）３０７にも入力される。
るのが、図３のフレーム内ＤＣＴ復号化器である。符号
入力端子３００からの符号は、可変長復号化器（ＶＬ
Ｄ）３０１で復号化される。次に平均値逆量子化器（Ａ
Ｑ-1）３０４、逆量子化器（Ｑ-1）３０２で逆量子化さ
れる。逆量子化器３０２の出力変換係数は、逆ＤＣＴ変
換器（ＤＣＴ-1）３０３によって、ＤＣＴ逆変換され、
加算器３０５で平均値が加えられる。得られた再生画像
信号は、補間回路（Ｃ）３０６を通って画像出力端子３
０８から出力される。また、再生画像信号は補間用フレ
ームメモリ（ＦＭ）３０７にも入力される。
【００１８】ここで、補間回路３０６の動作を詳細に説
明する。補間回路３０６は、セル分解回路１０６（図
１）からのセル廃棄通知に基づき、セル廃棄により画像
品質劣化を受けた劣化ブロックに対して、補間用フレー
ムメモリ３０７の１フレーム前の画像とブロックマッチ
ングを行い、２乗誤差の最も小さくなるブロックを補間
用フレームメモリから切り出して、再生画像の劣化部分
にはめこみ、補間を行う（ブロックマッチング）、以下
にその手順を示す。
明する。補間回路３０６は、セル分解回路１０６（図
１）からのセル廃棄通知に基づき、セル廃棄により画像
品質劣化を受けた劣化ブロックに対して、補間用フレー
ムメモリ３０７の１フレーム前の画像とブロックマッチ
ングを行い、２乗誤差の最も小さくなるブロックを補間
用フレームメモリから切り出して、再生画像の劣化部分
にはめこみ、補間を行う（ブロックマッチング）、以下
にその手順を示す。
【００１９】たとえば図４の（ａ）のように再生画像
の１６×１６ブロックがセル廃棄により劣化している場
合、この１６×１６のブロックより一回り大きい１８×
１８ブロックＸを再生画像から切り出す（ｂ）。
の１６×１６ブロックがセル廃棄により劣化している場
合、この１６×１６のブロックより一回り大きい１８×
１８ブロックＸを再生画像から切り出す（ｂ）。
【００２０】再生画像の劣化部分位置に対応する１８
×１８ブロックＹiを（Ｃ）に示したフレームメモリ３
０７から切り出す（ｄ）。
×１８ブロックＹiを（Ｃ）に示したフレームメモリ３
０７から切り出す（ｄ）。
【００２１】２つのブロックの白枠の部分は、劣化の
ない画素であるので、この部分の差をとり２乗誤差Ｅi
を求める。
ない画素であるので、この部分の差をとり２乗誤差Ｅi
を求める。
【００２２】で位置をずらして切り出し
（Ｙi+1 ）、を繰り返しＥi+1 を求める。
（Ｙi+1 ）、を繰り返しＥi+1 を求める。
【００２３】〜によりＮ点で２乗誤差を計算し、
最小値Ｅmin を与えるブロックＹmin の１６×１６の部
分を再生ブロックとして劣化部分にはめ込む。
最小値Ｅmin を与えるブロックＹmin の１６×１６の部
分を再生ブロックとして劣化部分にはめ込む。
【００２４】このように、ブロックXとブロックYiの白
枠の部分同士の間でブロックマッチングを行ない、選択
されたブロックYmiを用いて劣化部分の補間を行うこと
により、セル廃棄が起きても、視覚上気にならない程度
の補間が行える。
枠の部分同士の間でブロックマッチングを行ない、選択
されたブロックYmiを用いて劣化部分の補間を行うこと
により、セル廃棄が起きても、視覚上気にならない程度
の補間が行える。
【００２５】また、図５、図６には符号化器１０３、復
号化器１０７の他の実施例を示す機能ブロック図が示さ
れている。
号化器１０７の他の実施例を示す機能ブロック図が示さ
れている。
【００２６】次に、図５および図６を用いて符号化器１
０３および復号化器１０７の他の実施例を詳細に説明す
る。この場合でも符号化、復号化、セル化は、１６×１
６画素あるいは８×８画素ごとに行われる。図５におい
て、まず画像信号入力端子２５０からの入力画像信号
は、動きベクトル検出器（ＭＶ）２５１によって、フレ
ームメモリ（ＦＭ）２５２の１フレーム前の画像信号と
マッチングが取られて動きベクトルが検出され、加算器
２５３で動きベクトルを加味した予測信号を差し引かれ
て残差信号となる。この残差信号は、ＤＣＴ変換器（Ｄ
ＣＴ）２５４によってＤＣＴ変換される。ＤＣＴ係数
は、量子化器（Ｑ）２５５、逆量子化器（Ｑ-1）２５６
によって量子化、逆量子化され、可変長符号化器（ＶＬ
Ｃ）２５９で可変長符号化される。逆量子化器２５６の
出力変換係数は、逆ＤＣＴ変換器（ＤＣＴ-1）２５７に
よって、ＤＣＴ逆変換され、加算器２５８で先に差し引
いた予測信号を加えられ、リーケージ回路（Ｌ）２６１
でリーケージを付加されて、フレーム間予測のためのフ
レームメモリ２５２に次のフレームの予測信号として記
憶される。係数の符号、動きベクトルは符号出力端子２
６０から出力される。
０３および復号化器１０７の他の実施例を詳細に説明す
る。この場合でも符号化、復号化、セル化は、１６×１
６画素あるいは８×８画素ごとに行われる。図５におい
て、まず画像信号入力端子２５０からの入力画像信号
は、動きベクトル検出器（ＭＶ）２５１によって、フレ
ームメモリ（ＦＭ）２５２の１フレーム前の画像信号と
マッチングが取られて動きベクトルが検出され、加算器
２５３で動きベクトルを加味した予測信号を差し引かれ
て残差信号となる。この残差信号は、ＤＣＴ変換器（Ｄ
ＣＴ）２５４によってＤＣＴ変換される。ＤＣＴ係数
は、量子化器（Ｑ）２５５、逆量子化器（Ｑ-1）２５６
によって量子化、逆量子化され、可変長符号化器（ＶＬ
Ｃ）２５９で可変長符号化される。逆量子化器２５６の
出力変換係数は、逆ＤＣＴ変換器（ＤＣＴ-1）２５７に
よって、ＤＣＴ逆変換され、加算器２５８で先に差し引
いた予測信号を加えられ、リーケージ回路（Ｌ）２６１
でリーケージを付加されて、フレーム間予測のためのフ
レームメモリ２５２に次のフレームの予測信号として記
憶される。係数の符号、動きベクトルは符号出力端子２
６０から出力される。
【００２７】図５の符号化を行った画像信号を復号化す
るのが、図６の動き補償フレーム間予測復号化器であ
る。符号入力端子３５０からの符号は、動きベクトルを
分離されて、可変長復号化器（ＶＬＤ）３５１で可変長
復号化される。次に量子化パラメータに基づいて、逆量
子化器（Ｑ-1）３５２で逆量子化される。逆量子化器３
５２の出力変換係数は、逆ＤＣＴ変換器（ＤＣＴ-1）３
５３によって、ＤＣＴ逆変換され、加算器３５４で動き
ベクトルを加味した予測信号を加えられ、補間回路
（Ｃ）３５８を通り、最終的な再生画像として出力端子
３５６より出力される。また補間用フレームメモリ（Ｆ
Ｍ）３５９、リーケージ回路（Ｌ）３５７にも出力され
る。リーケージを付加された再生画像信号はフレームメ
モリ（ＦＭ）３５５に、次のフレームの予測信号として
記憶される。
るのが、図６の動き補償フレーム間予測復号化器であ
る。符号入力端子３５０からの符号は、動きベクトルを
分離されて、可変長復号化器（ＶＬＤ）３５１で可変長
復号化される。次に量子化パラメータに基づいて、逆量
子化器（Ｑ-1）３５２で逆量子化される。逆量子化器３
５２の出力変換係数は、逆ＤＣＴ変換器（ＤＣＴ-1）３
５３によって、ＤＣＴ逆変換され、加算器３５４で動き
ベクトルを加味した予測信号を加えられ、補間回路
（Ｃ）３５８を通り、最終的な再生画像として出力端子
３５６より出力される。また補間用フレームメモリ（Ｆ
Ｍ）３５９、リーケージ回路（Ｌ）３５７にも出力され
る。リーケージを付加された再生画像信号はフレームメ
モリ（ＦＭ）３５５に、次のフレームの予測信号として
記憶される。
【００２８】ここで、補間回路３５８の動作を詳細に説
明する。補間回路３５８は、セル分解回路１０６（図
１）からのセル廃棄通知に基づき、セル廃棄により画像
品質劣化を受けた劣化ブロックに対して、フレームメモ
リ３５９の１フレーム前の画像とブロックマッチングを
行い、２乗誤差の最も小さくなるブロックをフレームメ
モリ３５９からきり出して、再生画像の劣化部分にはめ
こみ、補間を行う（ブロックマッチング）。以下にこの
手順を示す。なお、この実施例の場合にもその手順は前
述の実施例と同じなので図４を用いる。
明する。補間回路３５８は、セル分解回路１０６（図
１）からのセル廃棄通知に基づき、セル廃棄により画像
品質劣化を受けた劣化ブロックに対して、フレームメモ
リ３５９の１フレーム前の画像とブロックマッチングを
行い、２乗誤差の最も小さくなるブロックをフレームメ
モリ３５９からきり出して、再生画像の劣化部分にはめ
こみ、補間を行う（ブロックマッチング）。以下にこの
手順を示す。なお、この実施例の場合にもその手順は前
述の実施例と同じなので図４を用いる。
【００２９】たとえば図４の（ａ）のように再生画像
の１６×１６ブロックがセル廃棄により劣化している場
合、この１６×１６のブロックより一回り大きい１８×
１８ブロックＸを再生画像から切り出す（ｄ）。
の１６×１６ブロックがセル廃棄により劣化している場
合、この１６×１６のブロックより一回り大きい１８×
１８ブロックＸを再生画像から切り出す（ｄ）。
【００３０】再生画像の劣化部分位置に対応する１８
×１８ブロックＹiを（Ｃ）に示したフレームメモリ３
５９から切り出す（ｄ）。
×１８ブロックＹiを（Ｃ）に示したフレームメモリ３
５９から切り出す（ｄ）。
【００３１】２つのブロックの白枠の部分は、劣化の
ない画素であるので、この部分で差をとり２乗誤差Ｅi
を求める。
ない画素であるので、この部分で差をとり２乗誤差Ｅi
を求める。
【００３２】で位置をずらして切り出し
（Ｙi+1 ）、を繰り返しＥi+1 を求める。
（Ｙi+1 ）、を繰り返しＥi+1 を求める。
【００３３】〜によりＮ点で２乗誤差を計算し、
最小値Ｅmin を与えるブロックＹmin の１６×１６の部
分を再生ブロックとして劣化部分にはめ込む。
最小値Ｅmin を与えるブロックＹmin の１６×１６の部
分を再生ブロックとして劣化部分にはめ込む。
【００３４】このように、ブロックXとブロックYiの白
枠の部分同士の間でブロックマッチングを行ない、選択
されたブロックYmiを用いて劣化部分の補間を行うこと
により、セル廃棄が起きても、視覚上気にならない程度
の補間が行える。
枠の部分同士の間でブロックマッチングを行ない、選択
されたブロックYmiを用いて劣化部分の補間を行うこと
により、セル廃棄が起きても、視覚上気にならない程度
の補間が行える。
【００３５】
【発明の効果】このように本発明の動画像パケット通信
方式によれば、以下の効果が期待できる。
方式によれば、以下の効果が期待できる。
【００３６】（１）ブロックの境界部分が最も似通った
ブロックをブロックマッチングで求め、補間を行ってい
る。従って画像劣化を軽減できる。
ブロックをブロックマッチングで求め、補間を行ってい
る。従って画像劣化を軽減できる。
【００３７】（２）フレーム内符号化を用いているた
め、セル廃棄は時間的に伝搬しない。このため、１つ前
のフレームは劣化のないフレームであることがほとんで
あるので、シーンチェンジなどがないかぎり視覚上問題
のない補間が行える。
め、セル廃棄は時間的に伝搬しない。このため、１つ前
のフレームは劣化のないフレームであることがほとんで
あるので、シーンチェンジなどがないかぎり視覚上問題
のない補間が行える。
【００３８】（３）送信側にセル廃棄を通知する必要が
ない。
ない。
【００３９】本発明による他の実施例によれば、上述の
（２）の代わりに以下に示す効果が期待できる。
（２）の代わりに以下に示す効果が期待できる。
【００４０】フレームメモリにリーケージをもたせたフ
レーム間符号化を用いているため、セル廃棄の影響が時
間とともに軽減される。廃棄の起きた瞬間には、補間が
行われて大きな視覚上の劣化を防ぐことができる。補間
用のフレームメモリの画像は劣化が小さく、シーンチェ
ンジなどがないかぎり視覚上問題のない補間が行える。
レーム間符号化を用いているため、セル廃棄の影響が時
間とともに軽減される。廃棄の起きた瞬間には、補間が
行われて大きな視覚上の劣化を防ぐことができる。補間
用のフレームメモリの画像は劣化が小さく、シーンチェ
ンジなどがないかぎり視覚上問題のない補間が行える。
【図１】本発明による動画像パケット通信方式の実施例
を示すシステム構成図、
を示すシステム構成図、
【図２】符号化器の一実施例を示す機能ブロック図、
【図３】復号化器の一実施例を示す機能ブロック図、
【図４】補間動作の一例を示す説明図、
【図５】符号化器の他の実施例を示す機能ブロック図、
【図６】復号化器の他の実施例を示す機能ブロック図で
ある。
ある。
１０１ ＴＶカメラ １０２ Ａ／Ｄ変換器 １０３ 符号化器 １０４ セル組立回路 １０５ ＡＴＭ網 １０６ セル分解回路 １０７ 復号化器 １０８ Ｄ／Ａ変換器 １０９ ＴＶモニタ ２０１ 平均値算出器 ２０２ 平均値量子化器 ２０３ 平均値逆量子化器 ２０４, ２０９，２５３, ２５８, ３０５，３５４加算
器 ２０５, ２５４ ＤＣＴ変換器 ２０６, ２５５ 量子化器 ２０７, ３０２, ２５６, ３５２ 逆量子化器 ２０８, ３０３, ２５７, ３５３ ＤＣＴ逆変換器 ２１０, ２５２, ３５５ フレームメモリ ２１１, ２５９ 可変長符号化器 ３０４ 平均値逆量子化器 ３０６, ３５８ 補間回路 ３０７, ３５９ 補間用フレームメ
モリ ２５１ 動きベクトル検出
器 ２６１, ３５７ リーケージ回路
器 ２０５, ２５４ ＤＣＴ変換器 ２０６, ２５５ 量子化器 ２０７, ３０２, ２５６, ３５２ 逆量子化器 ２０８, ３０３, ２５７, ３５３ ＤＣＴ逆変換器 ２１０, ２５２, ３５５ フレームメモリ ２１１, ２５９ 可変長符号化器 ３０４ 平均値逆量子化器 ３０６, ３５８ 補間回路 ３０７, ３５９ 補間用フレームメ
モリ ２５１ 動きベクトル検出
器 ２６１, ３５７ リーケージ回路
───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平２−162887（ＪＰ，Ａ) 特開 平２−58938（ＪＰ，Ａ) (58)調査した分野(Int.Cl.7，ＤＢ名) H04N 7/24 - 7/68 ＪＩＣＳＴファイル（ＪＯＩＳ)
Claims (2)
- 【請求項１】 画像信号をパケット符号化伝送する動画
像パケット通信方式において、 符号化器及び復号化器を、フレームを複数のブロックに
分割し、このブロック単位でセル化するフレーム内符号
化復号化器で構成し、 前記動画像信号の復号化を行う復号化器は、再生画像を
記憶する補間用フレームメモリと、セル廃棄により画像
品質劣化を受けたブロックに対してブロックマッチング
を行う補間手段とを有し、 前記補間手段は、セル廃棄時にセル廃棄通知に基づいて
再生画像の劣化部分をその周辺部を含んで劣化ブロック
として切り出し、この切り出したブロックに対応する画
像信号を過去の再生画像が記憶されている前記補間用フ
レームメモリから複数の再生ブロックを切り出し、前記劣化ブロックの周辺部と、前記複数の再生ブロック
の前記周辺部に対応する部分との間でブロックマッチン
グを行い、 最小誤差の再生ブロックを再生画像の劣化部
分に補間することを特徴とする動画像パケット通信方
式。 - 【請求項２】 画像信号をパケット符号化伝送する動画
像パケット通信方式において、 符号化器及び復号化器を、フレームを複数のブロックに
分割し、このブロック単位でセル化するフレーム間符号
化復号化器で構成し、 前記パケット符号化を行う符号化器はフレーム間予測の
ためのフレームメモリにリーケージが設けられ、 前記動画像信号の復号化を行う復号化器は、リーケージ
が設けられているフレーム間予測のためのフレームメモ
リと、補間用のフレームメモリブロックマッチングを行
う補間手段とを有し、 前記補間手段は、セル廃棄時にセル廃棄通知に基づいて
再生画像の劣化部分をその周辺部を含んでブロックとし
て切り出し、この切り出したブロックに対応する画像信
号を過去の再生画像が記憶されている前記補間用フレー
ムメモリから複数の再生ブロックを切り出し、前記劣化ブロックの周辺部と、前記複数の再生ブロック
の前記周辺部に対応す る部分との間でブロックマッチン
グを行い、 最小誤差の再生ブロックを再生画像の劣化部
分に補間することを特徴とする動画像パケット通信方
式。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28156491A JP3139791B2 (ja) | 1991-10-28 | 1991-10-28 | 動画像パケット通信方式 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28156491A JP3139791B2 (ja) | 1991-10-28 | 1991-10-28 | 動画像パケット通信方式 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH05122680A JPH05122680A (ja) | 1993-05-18 |
| JP3139791B2 true JP3139791B2 (ja) | 2001-03-05 |
Family
ID=17640946
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP28156491A Expired - Fee Related JP3139791B2 (ja) | 1991-10-28 | 1991-10-28 | 動画像パケット通信方式 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3139791B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6061168B1 (ja) * | 2016-08-01 | 2017-01-18 | 沖縄子育て良品株式会社 | 授乳用クッション |
-
1991
- 1991-10-28 JP JP28156491A patent/JP3139791B2/ja not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6061168B1 (ja) * | 2016-08-01 | 2017-01-18 | 沖縄子育て良品株式会社 | 授乳用クッション |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH05122680A (ja) | 1993-05-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100317412B1 (ko) | 잡음감소를이용한비디오신호압축장치 | |
| JP3093458B2 (ja) | 可変レート符・復号化装置 | |
| JPH07322269A (ja) | ビデオデータを有するビットストリームを符号変換する方法および装置 | |
| JP2000059790A (ja) | 動画像符号列変換装置及びその方法 | |
| WO1995013682A1 (en) | Animation encoding method, animation decoding method, animation recording medium and animation encoder | |
| JPH0818979A (ja) | 画像処理装置 | |
| KR100312421B1 (ko) | 영상시스템에서의압축동영상변환장치및그방법 | |
| JP4114210B2 (ja) | 映像データ圧縮装置およびその方法 | |
| KR100364748B1 (ko) | 영상 변환 부호화 장치 | |
| JP3139791B2 (ja) | 動画像パケット通信方式 | |
| JP3166501B2 (ja) | 画像再圧縮方法及び画像再圧縮装置 | |
| JP3703088B2 (ja) | 拡張画像符号化装置及び拡張画像復号化装置 | |
| JP3797208B2 (ja) | カラー動画像符号化装置、復号化装置、符号化方法、復号化方法及びカラー動画像符号列伝送方法 | |
| JP4320509B2 (ja) | 映像再符号化装置および方法 | |
| JP4193252B2 (ja) | 信号処理装置及び方法、信号復号装置、並びに信号符号化装置 | |
| JP4909592B2 (ja) | 動画像再生方法及び装置並びにプログラム | |
| JP3197868B2 (ja) | 画像符号化方法、イントラ符号化制御方法及びデータ記録媒体 | |
| JPH07222048A (ja) | 撮像装置 | |
| JPH0723395A (ja) | 画像処理装置 | |
| JP3166835B2 (ja) | 動画像の高能率符号化方法及び装置 | |
| JP2002016924A (ja) | トランスコーダ装置およびトランスコード方法 | |
| JP2630022B2 (ja) | 動き補償フレーム間符号化装置 | |
| JP2869164B2 (ja) | 画像符号化及び復号化装置 | |
| KR0123083B1 (ko) | 패킷 동영상 부호기 및 복호기에 있어서의 패킷 데이터 구조 | |
| JP2604058B2 (ja) | 画像符号化及び復号化装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20001128 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081215 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |