JPH05122680A - 動画像パケツト通信方式 - Google Patents
動画像パケツト通信方式Info
- Publication number
- JPH05122680A JPH05122680A JP28156491A JP28156491A JPH05122680A JP H05122680 A JPH05122680 A JP H05122680A JP 28156491 A JP28156491 A JP 28156491A JP 28156491 A JP28156491 A JP 28156491A JP H05122680 A JPH05122680 A JP H05122680A
- Authority
- JP
- Japan
- Prior art keywords
- block
- image
- frame
- decoder
- frame memory
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
(57)【要約】
【目的】 セル廃棄が起きても画像品質の劣化が目立た
ない動画像パケット符号化方式を提供すること。 【構成】 動画像信号のパケット符号化をフレーム内符
号化方式により行う符号化器と、符号化された動画像信
号の復号化をフレーム内復号化方式により行う復号化器
により構成され、復号化器は、再生画像を記憶するフレ
ームメモリ(307)、セル廃棄により画像品質劣化を受け
たブロックに対してブロックマッチングを行う補間手段
(306) とを有する。本発明によればまた、パケット符号
化を行う符号化器はフレーム間予測のためのフレームメ
モリ(252) にリーケージ(261) が設けられ、動画像信号
の復号化を行う復号化器は、リーケージ(357) が設けら
れたフレーム間予測のためのフレームメモリ(359) と、
ブロックマッチングを行う補間手段(358) とを有する。
ない動画像パケット符号化方式を提供すること。 【構成】 動画像信号のパケット符号化をフレーム内符
号化方式により行う符号化器と、符号化された動画像信
号の復号化をフレーム内復号化方式により行う復号化器
により構成され、復号化器は、再生画像を記憶するフレ
ームメモリ(307)、セル廃棄により画像品質劣化を受け
たブロックに対してブロックマッチングを行う補間手段
(306) とを有する。本発明によればまた、パケット符号
化を行う符号化器はフレーム間予測のためのフレームメ
モリ(252) にリーケージ(261) が設けられ、動画像信号
の復号化を行う復号化器は、リーケージ(357) が設けら
れたフレーム間予測のためのフレームメモリ(359) と、
ブロックマッチングを行う補間手段(358) とを有する。
Description
【０００１】
【産業上の利用分野】本発明は動画像のパケット通信方
式、とくに動画像パケット通信のセル廃棄における画像
品質劣化の軽減に関する。
式、とくに動画像パケット通信のセル廃棄における画像
品質劣化の軽減に関する。
【０００２】
【従来の技術】非同期転送モード網（ＡＴＭ網）を利用
した、動画像パケット通信方式が近年注目を集めてい
る。このパケット通信方式は、符号化された音声・画像
をパケット（セル）にまとめ、行き先及び内容の種別を
示したヘッダを付与して、ＡＴＭ網上でセルの送受信を
行うことにより大容量の通信を行うものである。すなわ
ちＡＴＭ網は、大容量・非同期の特徴を生かして、画像
符号化を可変レートで行うことにより、高品質の画像通
信を実現するものである。
した、動画像パケット通信方式が近年注目を集めてい
る。このパケット通信方式は、符号化された音声・画像
をパケット（セル）にまとめ、行き先及び内容の種別を
示したヘッダを付与して、ＡＴＭ網上でセルの送受信を
行うことにより大容量の通信を行うものである。すなわ
ちＡＴＭ網は、大容量・非同期の特徴を生かして、画像
符号化を可変レートで行うことにより、高品質の画像通
信を実現するものである。
【０００３】しかしながら、ＡＴＭ通信では、セルの総
数がＡＴＭ網の処理能力を上回ると、あふれたセルを廃
棄する。このため、たとえば和田、滝島らによる「選択
訂正型ビデオパケット紛失補償におけるコンシールメン
ト画質と符号化効率」、１９８９年テレビジョン学会全
国大会、第４７３〜４７４頁には、このセル廃棄による
画像品質劣化を受信側で軽減する方法について記載され
ている。
数がＡＴＭ網の処理能力を上回ると、あふれたセルを廃
棄する。このため、たとえば和田、滝島らによる「選択
訂正型ビデオパケット紛失補償におけるコンシールメン
ト画質と符号化効率」、１９８９年テレビジョン学会全
国大会、第４７３〜４７４頁には、このセル廃棄による
画像品質劣化を受信側で軽減する方法について記載され
ている。
【０００４】この従来技術では、ＡＴＭ網でセル廃棄が
起きた場合、セル分解回路は、セル廃棄が起きたことを
送信側、受信側に通知する。この通知を受けると、送信
側は、セル廃棄によって受信側で劣化した部分をフレー
ム間予測符号化に用いないようにする。数フレーム後
に、受信側の劣化した部分をフレーム内符号化し、送信
側／受信側の同期回復を図る。受信側では、一つ前のフ
レームから劣化した部分を補間し、フレーム内符号化が
行われるまでの画像信号劣化を軽減する。従来技術では
このようにして画像信号の劣化を軽減するものであっ
た。
起きた場合、セル分解回路は、セル廃棄が起きたことを
送信側、受信側に通知する。この通知を受けると、送信
側は、セル廃棄によって受信側で劣化した部分をフレー
ム間予測符号化に用いないようにする。数フレーム後
に、受信側の劣化した部分をフレーム内符号化し、送信
側／受信側の同期回復を図る。受信側では、一つ前のフ
レームから劣化した部分を補間し、フレーム内符号化が
行われるまでの画像信号劣化を軽減する。従来技術では
このようにして画像信号の劣化を軽減するものであっ
た。
【０００５】
【発明が解決しようとする課題】しかしながらこのよう
な従来技術では、補間を行う際に、劣化部分のまわりの
動きベクトルの線形和を用いるが、必ずしも劣化を軽減
するのに適切な動きベクトルになるとは限らなかった。
また、廃棄を送信側に通知しなければならず、この通知
を受けた送信側も、廃棄された部分を予測符号化に使わ
ないように制御する回路を設ける必要があり、装置が複
雑化するという問題があった。さらに、送信側と受信側
でのミスマッチを解決するために、フレーム内符号化を
行なわなければならないという問題もあった。
な従来技術では、補間を行う際に、劣化部分のまわりの
動きベクトルの線形和を用いるが、必ずしも劣化を軽減
するのに適切な動きベクトルになるとは限らなかった。
また、廃棄を送信側に通知しなければならず、この通知
を受けた送信側も、廃棄された部分を予測符号化に使わ
ないように制御する回路を設ける必要があり、装置が複
雑化するという問題があった。さらに、送信側と受信側
でのミスマッチを解決するために、フレーム内符号化を
行なわなければならないという問題もあった。
【０００６】本発明はこのような従来技術の欠点を解消
し、セル廃棄が起きても画像品質の劣化が目立たない動
画像パケット符号化方式を提供することを目的とする。
し、セル廃棄が起きても画像品質の劣化が目立たない動
画像パケット符号化方式を提供することを目的とする。
【０００７】
【課題を解決するための手段および作用】本発明は上述
の課題を解決するために、画像信号をパケット符号化伝
送する動画像パケット通信方式は、符号化器、復号化器
をフレーム内符号化復号化器で構成し、動画像信号の復
号化を行う復号化器は、再生画像を記憶するフレームメ
モリと、セル廃棄により画像品質劣化を受けたブロック
に対してブロックマッチングを行う補間手段とを有し、
補間手段は、セル廃棄時にセル廃棄通知に基づいて再生
画像の劣化部分をその周辺部を含んで劣化ブロックとし
て切り出し、この切り出したブロックに対応する画像信
号を過去の再生画像が記憶されているフレームメモリか
ら再生ブロックとして少なくとも１つ切り出し、劣化ブ
ロックと再生ブロックの２つのブロックの間でブロック
マッチングを行い、最小誤差のブロックを再生画像の劣
化部分に補間する。
の課題を解決するために、画像信号をパケット符号化伝
送する動画像パケット通信方式は、符号化器、復号化器
をフレーム内符号化復号化器で構成し、動画像信号の復
号化を行う復号化器は、再生画像を記憶するフレームメ
モリと、セル廃棄により画像品質劣化を受けたブロック
に対してブロックマッチングを行う補間手段とを有し、
補間手段は、セル廃棄時にセル廃棄通知に基づいて再生
画像の劣化部分をその周辺部を含んで劣化ブロックとし
て切り出し、この切り出したブロックに対応する画像信
号を過去の再生画像が記憶されているフレームメモリか
ら再生ブロックとして少なくとも１つ切り出し、劣化ブ
ロックと再生ブロックの２つのブロックの間でブロック
マッチングを行い、最小誤差のブロックを再生画像の劣
化部分に補間する。
【０００８】本発明によればまた、画像信号をパケット
符号化伝送する動画像パケット通信方式は、符号化器、
復号化器をフレーム間符号化復号化器で構成し、パケッ
ト符号化を行う符号化器はフレーム間予測のためのフレ
ームメモリにリーケージが設けられ、動画像信号の復号
化を行う復号化器は、リーケージが設けられたフレーム
間予測のためのフレームメモリと、ブロックマッチング
を行う補間手段とを有し、補間手段は、セル廃棄時にセ
ル廃棄通知に基づいて、再生画像の劣化部分をその周辺
部を含んでブロックとして切り出し、この切り出したブ
ロックに対応する画像信号を過去の再生画像が記憶され
ているフレームメモリからブロックとして少なくとも１
つ切り出し、劣化ブロックと再生ブロックの２つのブロ
ックの間でブロックマッチングを行い、最小誤差のブロ
ックを再生画像の劣化部分に補間する。
符号化伝送する動画像パケット通信方式は、符号化器、
復号化器をフレーム間符号化復号化器で構成し、パケッ
ト符号化を行う符号化器はフレーム間予測のためのフレ
ームメモリにリーケージが設けられ、動画像信号の復号
化を行う復号化器は、リーケージが設けられたフレーム
間予測のためのフレームメモリと、ブロックマッチング
を行う補間手段とを有し、補間手段は、セル廃棄時にセ
ル廃棄通知に基づいて、再生画像の劣化部分をその周辺
部を含んでブロックとして切り出し、この切り出したブ
ロックに対応する画像信号を過去の再生画像が記憶され
ているフレームメモリからブロックとして少なくとも１
つ切り出し、劣化ブロックと再生ブロックの２つのブロ
ックの間でブロックマッチングを行い、最小誤差のブロ
ックを再生画像の劣化部分に補間する。
【０００９】
【実施例】次に添付図面を参照して本発明による動画像
パケット通信方式の実施例を詳細に説明する。
パケット通信方式の実施例を詳細に説明する。
【００１０】図１を参照すると、本発明による動画像パ
ケット通信方式を適用した画像パケット符号化装置と画
像パケット復号化装置をＡＴＭ通信網を介して接続した
システムの実施例が示されている。
ケット通信方式を適用した画像パケット符号化装置と画
像パケット復号化装置をＡＴＭ通信網を介して接続した
システムの実施例が示されている。
【００１１】図１において、入力原画像はまずＴＶカメ
ラ１０１の撮像管の走査によって、光の濃淡分布を示す
電気信号に変換され、Ａ／Ｄ変換器（Ａ／Ｄ）１０２に
よって、画素として８ビット量子化、標本化され、ディ
ジタル画像信号に変換される。このディジタル画像信号
は、符号化器（ｃｏｄｅｒ）１０３によって符号化さ
れ、セル組立回路（ＣＡＤ）１０４によってセル化され
て、ＡＴＭ網１０５へ送り出される。以上が符号化器側
の動作である。ここで符号化器１０３は、ＤＣＴフレー
ム内符号化器で構成されているものとする。
ラ１０１の撮像管の走査によって、光の濃淡分布を示す
電気信号に変換され、Ａ／Ｄ変換器（Ａ／Ｄ）１０２に
よって、画素として８ビット量子化、標本化され、ディ
ジタル画像信号に変換される。このディジタル画像信号
は、符号化器（ｃｏｄｅｒ）１０３によって符号化さ
れ、セル組立回路（ＣＡＤ）１０４によってセル化され
て、ＡＴＭ網１０５へ送り出される。以上が符号化器側
の動作である。ここで符号化器１０３は、ＤＣＴフレー
ム内符号化器で構成されているものとする。
【００１２】次に復号化器側の動作を説明する。図１に
おいて、ＡＴＭ網１０５から送られてきたセルは、セル
分解回路（ＣＡＤ）１０６によって符号化データに分離
され、復号化器（ｄｅｃｏｄｅｒ）１０７に入力され
る。復号化器１０７は画像信号を再生する。Ｄ／Ａ変換
器（Ｄ／Ａ）１０８は画像信号をディジタル／アナログ
変換し、得られた再生画像はＴＶモニタ１０９に出力さ
れる。ここで復号化器１０７は、ＤＣＴフレーム内復号
化器で構成されているものとする。
おいて、ＡＴＭ網１０５から送られてきたセルは、セル
分解回路（ＣＡＤ）１０６によって符号化データに分離
され、復号化器（ｄｅｃｏｄｅｒ）１０７に入力され
る。復号化器１０７は画像信号を再生する。Ｄ／Ａ変換
器（Ｄ／Ａ）１０８は画像信号をディジタル／アナログ
変換し、得られた再生画像はＴＶモニタ１０９に出力さ
れる。ここで復号化器１０７は、ＤＣＴフレーム内復号
化器で構成されているものとする。
【００１３】次に、符号化器１０３、復号化器１０７の
詳細について説明する。符号化、復号化、セル化は１６
×１６画素あるいは８×８画素ごとに行われる。
詳細について説明する。符号化、復号化、セル化は１６
×１６画素あるいは８×８画素ごとに行われる。
【００１４】図２には、符号化器１０３をフレーム内Ｄ
ＣＴ符号化器で構成したときの機能ブロック図が示され
ている。
ＣＴ符号化器で構成したときの機能ブロック図が示され
ている。
【００１５】図３には、復号化器１０７をフレーム内Ｄ
ＣＴ復号化器で構成したときの機能ブロック図が示され
ている。
ＣＴ復号化器で構成したときの機能ブロック図が示され
ている。
【００１６】図２において、まず画像信号入力端子２０
０からの入力画像信号は、平均値算出器（ＡＶ）２０１
によって、ブロックごとの平均値が算出される。次に算
出された平均値は、平均値量子化器（ＡＱ）２０２によ
って量子化され、平均値逆量子化器（ＡＱ-1）２０３に
よって逆量子化される。逆量子化値は加算器２０４でブ
ロックから差し引かれ残差信号となる。この残差信号
は、ＤＣＴ変換器（ＤＣＴ）２０５によってＤＣＴ変換
される。ＤＣＴ係数は、量子化器（Ｑ）２０６、逆量子
化器（Ｑ-1）２０７によって量子化、逆量子化されると
ともに、可変長符号化器（ＶＬＣ）２１１で可変長符号
化される。逆量子化器２０７の出力変換係数は、逆ＤＣ
Ｔ変換器（ＤＣＴ-1）２０８によってＤＣＴ逆変換さ
れ、加算器２０９で先に差し引いた平均値を加えられ、
フレームメモリ（ＦＭ）２１０に局部再生画像信号とし
て記憶される。また、係数の符号、平均値は符号出力端
子２１２から出力される。
０からの入力画像信号は、平均値算出器（ＡＶ）２０１
によって、ブロックごとの平均値が算出される。次に算
出された平均値は、平均値量子化器（ＡＱ）２０２によ
って量子化され、平均値逆量子化器（ＡＱ-1）２０３に
よって逆量子化される。逆量子化値は加算器２０４でブ
ロックから差し引かれ残差信号となる。この残差信号
は、ＤＣＴ変換器（ＤＣＴ）２０５によってＤＣＴ変換
される。ＤＣＴ係数は、量子化器（Ｑ）２０６、逆量子
化器（Ｑ-1）２０７によって量子化、逆量子化されると
ともに、可変長符号化器（ＶＬＣ）２１１で可変長符号
化される。逆量子化器２０７の出力変換係数は、逆ＤＣ
Ｔ変換器（ＤＣＴ-1）２０８によってＤＣＴ逆変換さ
れ、加算器２０９で先に差し引いた平均値を加えられ、
フレームメモリ（ＦＭ）２１０に局部再生画像信号とし
て記憶される。また、係数の符号、平均値は符号出力端
子２１２から出力される。
【００１７】図２の符号化を行った画像信号を復号化す
るのが、図３のフレーム内ＤＣＴ復号化器である。符号
入力端子３００からの符号は、可変長復号化器（ＶＬ
Ｄ）３０１で復号化される。次に平均値逆量子化器（Ａ
Ｑ-1）３０４、逆量子化器（Ｑ-1）３０２で逆量子化さ
れる。逆量子化器３０２の出力変換係数は、逆ＤＣＴ変
換器（ＤＣＴ-1）３０３によって、ＤＣＴ逆変換され、
加算器３０５で平均値が加えられる。得られた再生画像
信号は、補間回路（Ｃ）３０６を通って画像出力端子３
０８から出力される。また、再生画像信号は補間用フレ
ームメモリ（ＦＭ）３０７にも入力される。
るのが、図３のフレーム内ＤＣＴ復号化器である。符号
入力端子３００からの符号は、可変長復号化器（ＶＬ
Ｄ）３０１で復号化される。次に平均値逆量子化器（Ａ
Ｑ-1）３０４、逆量子化器（Ｑ-1）３０２で逆量子化さ
れる。逆量子化器３０２の出力変換係数は、逆ＤＣＴ変
換器（ＤＣＴ-1）３０３によって、ＤＣＴ逆変換され、
加算器３０５で平均値が加えられる。得られた再生画像
信号は、補間回路（Ｃ）３０６を通って画像出力端子３
０８から出力される。また、再生画像信号は補間用フレ
ームメモリ（ＦＭ）３０７にも入力される。
【００１８】ここで、補間回路３０６の動作を詳細に説
明する。補間回路３０６は、セル分解回路１０６（図
１）からのセル廃棄通知に基づき、セル廃棄により画像
品質劣化を受けた劣化ブロックに対して、フレームメモ
リ３０７の１フレーム前の画像とブロックマッチングを
行い、２乗誤差の最も小さくなるブロックをフレームメ
モリから切り出して、再生画像の劣化部分にはめこみ、
補間を行う（ブロックマッチング）、以下にその手順を
示す。
明する。補間回路３０６は、セル分解回路１０６（図
１）からのセル廃棄通知に基づき、セル廃棄により画像
品質劣化を受けた劣化ブロックに対して、フレームメモ
リ３０７の１フレーム前の画像とブロックマッチングを
行い、２乗誤差の最も小さくなるブロックをフレームメ
モリから切り出して、再生画像の劣化部分にはめこみ、
補間を行う（ブロックマッチング）、以下にその手順を
示す。
【００１９】たとえば図４の（ａ）のように再生画像
の１６×１６ブロックがセル廃棄により劣化している場
合、この１６×１６のブロックより一回り大きい１８×
１８ブロックＸを再生画像から切り出す（ｂ）。
の１６×１６ブロックがセル廃棄により劣化している場
合、この１６×１６のブロックより一回り大きい１８×
１８ブロックＸを再生画像から切り出す（ｂ）。
【００２０】再生画像の劣化部分位置に対応する１８
×１８ブロックＹiを（Ｃ）に示したフレームメモリ３
０７から切り出す（ｄ）。
×１８ブロックＹiを（Ｃ）に示したフレームメモリ３
０７から切り出す（ｄ）。
【００２１】２つのブロックの白枠の部分は、劣化の
ない画素であるので、この部分の差をとり２乗誤差Ｅi
を求める。
ない画素であるので、この部分の差をとり２乗誤差Ｅi
を求める。
【００２２】で位置をずらして切り出し
（Ｙi+1 ）、を繰り返しＥi+1 を求める。
（Ｙi+1 ）、を繰り返しＥi+1 を求める。
【００２３】〜によりＮ点で２乗誤差を計算し、
最小値Ｅmin を与えるブロックＹmin の１６×１６の部
分を再生ブロックとして劣化部分にはめ込む。
最小値Ｅmin を与えるブロックＹmin の１６×１６の部
分を再生ブロックとして劣化部分にはめ込む。
【００２４】このような補間を行うことにより、セル廃
棄が起きても、視覚上気にならない程度の補間が行え
る。
棄が起きても、視覚上気にならない程度の補間が行え
る。
【００２５】また、図５、図６には符号化器１０３、復
号化器１０７の他の実施例を示す機能ブロック図が示さ
れている。
号化器１０７の他の実施例を示す機能ブロック図が示さ
れている。
【００２６】次に、図５および図６を用いて符号化器１
０３および復号化器１０７の他の実施例を詳細に説明す
る。この場合でも符号化、復号化、セル化は、１６×１
６画素あるいは８×８画素ごとに行われる。図５におい
て、まず画像信号入力端子２５０からの入力画像信号
は、動きベクトル検出器（ＭＶ）２５１によって、フレ
ームメモリ（ＦＭ）２５２の１フレーム前の画像信号と
マッチングが取られて動きベクトルが検出され、加算器
２５３で動きベクトルを加味した予測信号を差し引かれ
て残差信号となる。この残差信号は、ＤＣＴ変換器（Ｄ
ＣＴ）２５４によってＤＣＴ変換される。ＤＣＴ係数
は、量子化器（Ｑ）２５５、逆量子化器（Ｑ-1）２５６
によって量子化、逆量子化され、可変長符号化器（ＶＬ
Ｃ）２５９で可変長符号化される。逆量子化器２５６の
出力変換係数は、逆ＤＣＴ変換器（ＤＣＴ-1）２５７に
よって、ＤＣＴ逆変換され、加算器２５８で先に差し引
いた予測信号を加えられ、リーケージ回路（Ｌ）２６１
でリーケージを付加されて、フレーム間予測のためのフ
レームメモリ２５２に次のフレームの予測信号として記
憶される。係数の符号、動きベクトルは符号出力端子２
６０から出力される。
０３および復号化器１０７の他の実施例を詳細に説明す
る。この場合でも符号化、復号化、セル化は、１６×１
６画素あるいは８×８画素ごとに行われる。図５におい
て、まず画像信号入力端子２５０からの入力画像信号
は、動きベクトル検出器（ＭＶ）２５１によって、フレ
ームメモリ（ＦＭ）２５２の１フレーム前の画像信号と
マッチングが取られて動きベクトルが検出され、加算器
２５３で動きベクトルを加味した予測信号を差し引かれ
て残差信号となる。この残差信号は、ＤＣＴ変換器（Ｄ
ＣＴ）２５４によってＤＣＴ変換される。ＤＣＴ係数
は、量子化器（Ｑ）２５５、逆量子化器（Ｑ-1）２５６
によって量子化、逆量子化され、可変長符号化器（ＶＬ
Ｃ）２５９で可変長符号化される。逆量子化器２５６の
出力変換係数は、逆ＤＣＴ変換器（ＤＣＴ-1）２５７に
よって、ＤＣＴ逆変換され、加算器２５８で先に差し引
いた予測信号を加えられ、リーケージ回路（Ｌ）２６１
でリーケージを付加されて、フレーム間予測のためのフ
レームメモリ２５２に次のフレームの予測信号として記
憶される。係数の符号、動きベクトルは符号出力端子２
６０から出力される。
【００２７】図５の符号化を行った画像信号を復号化す
るのが、図６の動き補償フレーム間予測復号化器であ
る。符号入力端子３５０からの符号は、動きベクトルを
分離されて、可変長復号化器（ＶＬＤ）３５１で可変長
復号化される。次に量子化パラメータに基づいて、逆量
子化器（Ｑ-1）３５２で逆量子化される。逆量子化器３
５２の出力変換係数は、逆ＤＣＴ変換器（ＤＣＴ-1）３
５３によって、ＤＣＴ逆変換され、加算器３５４で動き
ベクトルを加味した予測信号を加えられ、補間回路
（Ｃ）３５８を通り、最終的な再生画像として出力端子
３５６より出力される。またフレーム間予測のための補
間用フレームメモリ（ＦＭ）３５９、リーケージ回路
（Ｌ）３５７にも出力される。リーケージを付加された
再生画像信号はフレームメモリ（ＦＭ）３５５に、次の
フレームの予測信号として記憶される。
るのが、図６の動き補償フレーム間予測復号化器であ
る。符号入力端子３５０からの符号は、動きベクトルを
分離されて、可変長復号化器（ＶＬＤ）３５１で可変長
復号化される。次に量子化パラメータに基づいて、逆量
子化器（Ｑ-1）３５２で逆量子化される。逆量子化器３
５２の出力変換係数は、逆ＤＣＴ変換器（ＤＣＴ-1）３
５３によって、ＤＣＴ逆変換され、加算器３５４で動き
ベクトルを加味した予測信号を加えられ、補間回路
（Ｃ）３５８を通り、最終的な再生画像として出力端子
３５６より出力される。またフレーム間予測のための補
間用フレームメモリ（ＦＭ）３５９、リーケージ回路
（Ｌ）３５７にも出力される。リーケージを付加された
再生画像信号はフレームメモリ（ＦＭ）３５５に、次の
フレームの予測信号として記憶される。
【００２８】ここで、補間回路３５８の動作を詳細に説
明する。補間回路３５８は、セル分解回路１０６（図
１）からのセル廃棄通知に基づき、セル廃棄により画像
品質劣化を受けた劣化ブロックに対して、フレームメモ
リ３５９の１フレーム前の画像とブロックマッチングを
行い、２乗誤差の最も小さくなるブロックをフレームメ
モリ３５９からきり出して、再生画像の劣化部分にはめ
こみ、補間を行う（ブロックマッチング）。以下にこの
手順を示す。なお、この実施例の場合にもその手順は前
述の実施例と同じなので図４を用いる。
明する。補間回路３５８は、セル分解回路１０６（図
１）からのセル廃棄通知に基づき、セル廃棄により画像
品質劣化を受けた劣化ブロックに対して、フレームメモ
リ３５９の１フレーム前の画像とブロックマッチングを
行い、２乗誤差の最も小さくなるブロックをフレームメ
モリ３５９からきり出して、再生画像の劣化部分にはめ
こみ、補間を行う（ブロックマッチング）。以下にこの
手順を示す。なお、この実施例の場合にもその手順は前
述の実施例と同じなので図４を用いる。
【００２９】たとえば図４の（ａ）のように再生画像
の１６×１６ブロックがセル廃棄により劣化している場
合、この１６×１６のブロックより一回り大きい１８×
１８ブロックＸを再生画像から切り出す（ｄ）。
の１６×１６ブロックがセル廃棄により劣化している場
合、この１６×１６のブロックより一回り大きい１８×
１８ブロックＸを再生画像から切り出す（ｄ）。
【００３０】再生画像の劣化部分位置に対応する１８
×１８ブロックＹiを（Ｃ）に示したフレームメモリ３
５９から切り出す（ｄ）。
×１８ブロックＹiを（Ｃ）に示したフレームメモリ３
５９から切り出す（ｄ）。
【００３１】２つのブロックの白枠の部分は、劣化の
ない画素であるので、この部分で差をとり２乗誤差Ｅi
を求める。
ない画素であるので、この部分で差をとり２乗誤差Ｅi
を求める。
【００３２】で位置をずらして切り出し
（Ｙi+1 ）、を繰り返しＥi+1 を求める。
（Ｙi+1 ）、を繰り返しＥi+1 を求める。
【００３３】〜によりＮ点で２乗誤差を計算し、
最小値Ｅmin を与えるブロックＹmin の１６×１６の部
分を再生ブロックとして劣化部分にはめ込む。
最小値Ｅmin を与えるブロックＹmin の１６×１６の部
分を再生ブロックとして劣化部分にはめ込む。
【００３４】このような補間を行うことにより、セル廃
棄が起きても、視覚上気にならない程度の補間が行え
る。
棄が起きても、視覚上気にならない程度の補間が行え
る。
【００３５】
【発明の効果】このように本発明の動画像パケット通信
方式によれば、以下の効果が期待できる。
方式によれば、以下の効果が期待できる。
【００３６】（１）ブロックの境界部分が最も似通った
ブロックをブロックマッチングで求め、補間を行ってい
る。従って画像劣化を軽減できる。
ブロックをブロックマッチングで求め、補間を行ってい
る。従って画像劣化を軽減できる。
【００３７】（２）フレーム内符号化を用いているた
め、セル廃棄は時間的に伝搬しない。このため、１つ前
のフレームは劣化のないフレームであることがほとんで
あるので、シーンチェンジなどがないかぎり視覚上問題
のない補間が行える。
め、セル廃棄は時間的に伝搬しない。このため、１つ前
のフレームは劣化のないフレームであることがほとんで
あるので、シーンチェンジなどがないかぎり視覚上問題
のない補間が行える。
【００３８】（３）送信側にセル廃棄を通知する必要が
ない。
ない。
【００３９】本発明による他の実施例によれば、上述の
（２）の代わりに以下に示す効果が期待できる。
（２）の代わりに以下に示す効果が期待できる。
【００４０】フレームメモリにリーケージをもたせたフ
レーム間符号化を用いているため、セル廃棄の影響が時
間とともに軽減される。廃棄の起きた瞬間には、補間が
行われて大きな視覚上の劣化を防ぐことができる。補間
用のフレームメモリの画像は劣化が小さく、シーンチェ
ンジなどがないかぎり視覚上問題のない補間が行える。
レーム間符号化を用いているため、セル廃棄の影響が時
間とともに軽減される。廃棄の起きた瞬間には、補間が
行われて大きな視覚上の劣化を防ぐことができる。補間
用のフレームメモリの画像は劣化が小さく、シーンチェ
ンジなどがないかぎり視覚上問題のない補間が行える。
【図１】本発明による動画像パケット通信方式の実施例
を示すシステム構成図、
を示すシステム構成図、
【図２】符号化器の一実施例を示す機能ブロック図、
【図３】復号化器の一実施例を示す機能ブロック図、
【図４】補間動作の一例を示す説明図、
【図５】符号化器の他の実施例を示す機能ブロック図、
【図６】復号化器の他の実施例を示す機能ブロック図で
ある。
ある。
１０１ ＴＶカメラ １０２ Ａ／Ｄ変換器 １０３ 符号化器 １０４ セル組立回路 １０５ ＡＴＭ網 １０６ セル分解回路 １０７ 復号化器 １０８ Ｄ／Ａ変換器 １０９ ＴＶモニタ ２０１ 平均値算出器 ２０２ 平均値量子化器 ２０３ 平均値逆量子化器 ２０４, ２０９，２５３, ２５８, ３０５，３５４加算
器 ２０５, ２５４ ＤＣＴ変換器 ２０６, ２５５ 量子化器 ２０７, ３０２, ２５６, ３５２ 逆量子化器 ２０８, ３０３, ２５７, ３５３ ＤＣＴ逆変換器 ２１０, ２５２, ３５５ フレームメモリ ２１１, ２５９ 可変長符号化器 ３０４ 平均値逆量子化器 ３０６, ３５８ 補間回路 ３０７, ３５９ 補間用フレームメ
モリ ２５１ 動きベクトル検出
器 ２６１, ３５７ リーケージ回路
器 ２０５, ２５４ ＤＣＴ変換器 ２０６, ２５５ 量子化器 ２０７, ３０２, ２５６, ３５２ 逆量子化器 ２０８, ３０３, ２５７, ３５３ ＤＣＴ逆変換器 ２１０, ２５２, ３５５ フレームメモリ ２１１, ２５９ 可変長符号化器 ３０４ 平均値逆量子化器 ３０６, ３５８ 補間回路 ３０７, ３５９ 補間用フレームメ
モリ ２５１ 動きベクトル検出
器 ２６１, ３５７ リーケージ回路
Claims (2)
- 【請求項１】 画像信号をパケット符号化伝送する動画
像パケット通信方式において、 符号化器、復号化器をフレーム内符号化復号化器で構成
し、 前記動画像信号の復号化を行う復号化器は、再生画像を
記憶するフレームメモリと、セル廃棄により画像品質劣
化を受けたブロックに対してブロックマッチングを行う
補間手段とを有し、 前記補間手段は、セル廃棄時にセル廃棄通知に基づいて
再生画像の劣化部分をその周辺部を含んで劣化ブロック
として切り出し、この切り出したブロックに対応する画
像信号を過去の再生画像が記憶されている前記フレーム
メモリから再生ブロックとして少なくとも１つ切り出
し、 前記劣化ブロックと再生ブロックの２つのブロックの間
でブロックマッチングを行い、最小誤差のブロックを再
生画像の劣化部分に補間することを特徴とする動画像パ
ケット通信方式。 - 【請求項２】 画像信号をパケット符号化伝送する動画
像パケット通信方式において、 符号化器、復号化器をフレーム間符号化復号化器で構成
し、 前記パケット符号化を行う符号化器はフレーム間予測の
ためのフレームメモリにリーケージが設けられ、 前記動画像信号の復号化を行う復号化器は、リーケージ
が設けられたフレーム間予測のためのフレームメモリ
と、ブロックマッチングを行う補間手段とを有し、 前記補間手段は、セル廃棄時にセル廃棄通知に基づい
て、再生画像の劣化部分をその周辺部を含んでブロック
として切り出し、この切り出したブロックに対応する画
像信号を過去の再生画像が記憶されている前記フレーム
メモリからブロックとして少なくとも１つ切り出し、 前記劣化ブロックと再生ブロックの２つのブロックの間
でブロックマッチングを行い、最小誤差のブロックを再
生画像の劣化部分に補間することを特徴とする動画像パ
ケット通信方式。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28156491A JP3139791B2 (ja) | 1991-10-28 | 1991-10-28 | 動画像パケット通信方式 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28156491A JP3139791B2 (ja) | 1991-10-28 | 1991-10-28 | 動画像パケット通信方式 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH05122680A true JPH05122680A (ja) | 1993-05-18 |
| JP3139791B2 JP3139791B2 (ja) | 2001-03-05 |
Family
ID=17640946
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP28156491A Expired - Fee Related JP3139791B2 (ja) | 1991-10-28 | 1991-10-28 | 動画像パケット通信方式 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3139791B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6061168B1 (ja) * | 2016-08-01 | 2017-01-18 | 沖縄子育て良品株式会社 | 授乳用クッション |
-
1991
- 1991-10-28 JP JP28156491A patent/JP3139791B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP3139791B2 (ja) | 2001-03-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP1010330B1 (en) | Transcoding | |
| JP3358835B2 (ja) | 画像符号化方法及び装置 | |
| EP0691054B1 (en) | Efficient transcoding device and method | |
| US6614845B1 (en) | Method and apparatus for differential macroblock coding for intra-frame data in video conferencing systems | |
| JPH07322269A (ja) | ビデオデータを有するビットストリームを符号変換する方法および装置 | |
| JP2008113463A (ja) | 多圧縮モードのビデオ信号圧縮装置 | |
| WO2007109993A1 (en) | Error control system, method, encoder and decoder for video coding | |
| JP2000059790A (ja) | 動画像符号列変換装置及びその方法 | |
| JP2004350263A (ja) | 画像処理装置及び画像処理方法 | |
| JPH0818979A (ja) | 画像処理装置 | |
| JPH10126780A (ja) | 復号化映像補償装置 | |
| JP4426689B2 (ja) | 動画像符号化方式の変換方法及びその装置 | |
| JP3599942B2 (ja) | 動画像符号化方法、及び動画像符号化装置 | |
| JPH01228384A (ja) | 領域分割を用いた動画像符号化方式 | |
| JPH11243548A (ja) | 画像シーケンスを符号化及び復号化する方法並びに装置 | |
| JP3153390B2 (ja) | 動画像復号化装置 | |
| JP3139791B2 (ja) | 動画像パケット通信方式 | |
| JP3797208B2 (ja) | カラー動画像符号化装置、復号化装置、符号化方法、復号化方法及びカラー動画像符号列伝送方法 | |
| JPH09214977A (ja) | ビデオ符号化方法およびビデオ符号化装置 | |
| JP3738511B2 (ja) | 動画像符号化方式 | |
| JP3660513B2 (ja) | 画像通信装置およびローカルデコード処理方法 | |
| JP3356413B2 (ja) | 画像復号化方法及び装置 | |
| JP3197868B2 (ja) | 画像符号化方法、イントラ符号化制御方法及びデータ記録媒体 | |
| KR0123083B1 (ko) | 패킷 동영상 부호기 및 복호기에 있어서의 패킷 데이터 구조 | |
| JP3166835B2 (ja) | 動画像の高能率符号化方法及び装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20001128 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081215 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |