JPH02131697A - 高能率ステレオ動画像符号化方式 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 （発明の属する技術分野） 本発明は、ステレオ動画像において，視差補償予ｄ１ｑ
および動き補償フレーム間予測を行なう場合の高能率ス
テレオ動画像符号化方式に関する。

（従来の技術） 従来のステレオ動画像符号化方式では，左，右の符号化
画像間の視差補償予測と動き補償フレーム間予測のどち
らか一方を切り替えて使用する方法として，文献（Ｓ　
．　Ｗｉｌｌｉａｍ＋香川，安田，“ステレオ動画像デ
ータ圧縮の一方式″，昭和６３年度画像電子学会全国大
会予稿５　，　ｐｐ．１７−２０．）が提案されている
。これは切り替えに必要な情報量の評価がなされていな
いばかりでなく、動き補償フレーム間予測が常に行なわ
れていないため、符号化効率が低いという欠点があった
。

また、フレーム内符号化の後に視差補償予ｉ１＋１１を
行ないＤＰＣＭ符号化を行なう手法として、文献（Ｍ，
Ｅ．　Ｌｕｋａｓ：“Ｐｒｅｄｉｃｔｉｖｅ　Ｃｏｄｉ
ｎｇｏｆ　Ｍｕｌｔｅ−Ｖｉｅｗｐｏｉｎｔ　　Ｉｍａ
ｇｅ　　Ｓｅｔｓ　　”，　　ＩＥＥＥ　　丁ＣＡＳＳ
Ｐ８６，　　ＴＯＫＹＯ（Ｍａｒ．　１９８６）．）が
提案されている。これはフレームメモリを持たない符号
化器を構成することを目的としているため動画像の高能
率符号化にとって必要な動き補償フレーム間予？ｌｌｌ
ｌを用いることができなかった。

（発明の目的） 本発明の目的は、ステレオ動画像の高能率符号化の要素
技術である動き補償フレーム間予測に用いられる動きベ
クトル情報を、左，右の画像間の視差ベクトル情報（左
，右の画像間のずれを表すベクトル情報）を利用して、
効率よく符号化することにある。

（発明の構成） （発明の特徴と従来技術との差異） 本発明は、ステレオ動画像の持つ時間的冗長性を除去す
るために動き補償フレーム間予測を行うとともに、左，
右の画像間の冗長性を除去するために動き補償フレーム
間差分信号に視差補償予測を適用している点、および動
き補償フレーム間差分信号と視差補償予謂誤差信号に対
して符号化効率の高いブロック符号化あるいは画素単位
の符号化を用いている点に最も主要な特徴を有する。従
来の技術とは、動き補償フレーム間予測を常に用いる点
と、動き補償フレーム間差分信号間に視差補償予測が行
なわれている点とブロック符号化が導入されている点で
異なる． （実施例） 第１図は本発明の基本的な一実施例によるブロック構成
図を示し，図において、１，２は夫々右，左カメラより
入力された右，左入力画像、３，４は夫々右，左の動き
補償予測回路（ＭＣ）、５，６は動き補償右，左フレー
ム間差分信号、７は視差補償回路（ＤＣ）で，前記、動
き補償右，左フレーム間差分信号５，６が入力され、視
差補償予測誤差信号８を出力する。９，１０は夫々右，
左の画像情報源符号化回路（ＳＣ）で、夫々右，左画像
符号化情報１１．　１２を出力する。

上記構成において、上部は右カメラより入力された画像
の処理系を表わし、下部は左カメラより入力された画像
の処理系を表わすものとしているが、左，右が入れ替わ
っても信号処理に問題はない。また，カメラからの入力
信号は離散化され、坪度および色差信号（あるいはＲＧ
Ｂ信号）に分解されているものとする．この処理系は左
，右の画像間の空間的相関が保存されていれば、輝度信
号，色差信号，ＲＧＢ信号のいずれにも適用することが
できる。

次に動作原理を説明すると、右入力画像１および左入力
画像２は、それぞれ右画像動き補償フレーム間予測回路
３および左画像動き補償フレーム間予測回路４において
、動き補償右フレーム間差分信号５および動き補償左フ
レーム間差分信号６が計算される。そして，これらの動
き補償右フレーム間差分信号５および動き補償左フレー
ム間差分信号６は視差補償回路７に入力される。

視差補償回路７では、これらの差分信号からあるいは直
接に入力画像から抽出された視差ベクトル（すなわち、
二つの画面間の被写体の結像位置のずれを示すベクトル
）だけ、動き補償左フレーム間差分信号６をシフトさせ
て、動き補償右フレーム間差分信号５から引き、その信
号を視差補償予測誤差信号８として出力する。

符号化すべき信号は，動き補償右フレーム間差分イコ号
５および視差補償予測誤差信号８であり、これらの信号
はそれぞれ、右画像情報源符号化回路９および左画像情
報源符号化回路１０において符号化され、右画像符号化
情報１１および左画像符号化情報ｌ２が出力される。

本実施例では、上述したように入力された左右の両像１
，２はそれぞれ動き補償フレーム間予測回路３，４で、
動き補償フレーム間予測を行ない，左右の画像内の動き
のある部分のみの情報が抽出される。

例えば、被写体として静止している背景中の人物が動い
た場合には、人物の周囲あるいは内部が動き補償フレー
ム間差分信号５，６として抽出される。したがって、視
差補償予測は動きのあった領域にのみ適用すればよいこ
とになり符号化すへき情報が削減される。

この効果は単純なフレーム間予測のみでも得られるが、
動き補償予測の導入により動画像情報の持つ冗長性をさ
らに削減することができる。したがって、本発明の実施
例のように動き補償フレーム間予測と視差補償予測を組
み合わせれば、従来方式に比べて符号化すべき情報を大
幅に削減することができる． もし、動きのある被写体を含んだステレオ動画像を従来
方式のようなフレーム内符号化と視差補償予測を用いて
符号化しようとすれば、被写体だけでなく背景の情報も
視差補償予測する必要が生じる．これは左，右のカメラ
から被写体までの距離と背景までの距離が異なれば，視
差ベクトルの大きさが異なることが原因である．ここで
視差ベクトルとは、同一被写体の左右の画像間での位置
座標の変化を表わすベクトルである． また，視差補償予測は、右（あるいは左）の画像を視差
ベクトル分だけシフトして左（あるいは右）の画像の予
測画像を計算し、その差分信号を符号化することにより
、符号化すべき情報の冗長性を削減する技術であり、ス
テレオ画像の符号化情報量の圧縮に有効な手法である． 次に第２図は第１図の具体例を示す実施例のブロック構
成図である。これは動き補償フレーム間差分信号の符号
化にはブロック単位の条件付き画素補充規則とＤ　Ｃ　
Ｔ　（Ｄｉｃｒｅｔｅ　Ｃｏｓｉｎｅ　Ｔｒａｎｓｆｏ
ｒｍｔ離散コサイン変換）などの直交変換符号化あるい
はベクトル量子化などのブロック符号化を用いる．また
、視差補償予測誤差信号の符号化には、ブロック単位の
条件付き画素補充規則とブロック符号化あるいはＰＣＭ
符号化あるいはＤＰＣＭ符号化あるいはこれらの併用を
適用する。

そしてステレオ動画像の１画面の伝送に際しては、２画
面分の動きベクトル情報と２画面分の有効／無効ブロッ
ク情報と，１画面分のブロック符号化情報と、１画面分
のブロック符号化あるいはＰＣＭ符号化あるいはＤＰＣ
Ｍ符号化あるいはこれらの併用情報と視差ベクトル情報
を符号化伝送するものである。

第２図において、第１図と同様に上部は右カメラより入
力される画像の処理系、下部は左カメラより入力される
画像の処理系を夫々構成する。図において１０２，　１
２２は右，左（以下、同じ）動き補償回路（ＭＣ）．　
１０４，　１２４は画像フレームメモリ（ＦＭ）、１０
７，　１３１はフレーム有効／無効ブロック判定回路（
ｓ．Ｂ、１０８はブロック符号化回路（Ｂ　Ｃ）、１０
９はブロック復号化回路（Ｂ　Ｄ）、１２７は視差補償
回路（Ｄ　Ｃ）、１３２はブロック符号化あるいはＰＣ
Ｍ，ＤＰＣＭ符号化、あるいはそれらの複合符号化回路
（ＢＣ／ＰＣ）、１３３はブロック復号化あるいはＰＣ
：Ｍ，ＤＰＣＭ復号化あるいはそれらの複合復号化回路
（ＢＤ／ＰＤ）である． 次に動作を説明すると、右入力画像１０１は右画像フレ
ームメモリ１０４に蓄えられている既符号化右画像１０
３を用いて動き補償回路１０２において動き補償される
．動き補償回路１０２では右フレーム動きベクトル情報
１１１が検出されるとともに予測画像として動き補償右
画像１０５が生成される．右入力画像１０１と動き補償
右画像ｌＯ５との差分信号である動き補償右フレーム間
差分信号１０６は右フレーム有効／無効ブロック判定回
路１０７に入力され、右フレーム有効／無効ブロック情
報１１２が検出される。

動き補償右フレーム間差分信号１０６のうち、有効ブロ
ック信号は、ブロック符号化回路１０８においてブロッ
ク単位に離散コサイン変換（ＤＣＴ）などの直交変換符
号化あるいはベクトル量子化され、量子化係数あるいは
ベクトルインデクスが出力される． このブロック符号化回路１０８の出力が動き補償右フレ
ーム間差分信号符号化情報１１３であり、フレーム間符
号化方式の構成に必須な局所復号信号を得るために、ブ
ロック復号化回路１０９に入力される． ブロック復号化回路１０９において再び量子化係数がＤ
ＣＴ逆変換されるか，あるいはベクトル量子化インデク
スが復号され量子化動き補償右フレーム間差分信号１１
０が出力される。この量子化動き補償右フレーム間差分
信号１１０に前記動き補償右画像１０５が加算され、次
の入力画像の動き補償のための右画像フレームメモリ１
０４に蓄えられる。

量子化動き補償右フレーム間差分信号１１０は視差補償
回路１２７にも入力される。

一方、左入力画像１２１は左画像フレームメモリ１２４
に蓄えられている既符号化左画像１２３を用いて動き補
償回路１２２において動き補償される。動き補償回路１
２２では左フレーム動きベクトル情報１３６が検出され
るとともに予測画像として動き補償左画像１２５が生成
される． 左入力両像１２１と動き補償左画像１２５との差分信号
である動き補償左フレーム間差分信号１２６は視差補償
回路１２７に入力される。視差補償回路１２７では前記
量子化動き補償右フレーム間差分信号１１０と動き補償
左フレーム間差分信号１２６を用いてこれらの画像上の
被写体の位置ずれを表わす視差ベクトル情報１２８が求
められる。ここで，被写体の位置ずれとは右カメラと左
カメラの視点の相違による被写体の結像位置の相違を意
味するものとする。

さらに視差補償回路１２７において、視差ベクトル情報
１２８を用いて量子化動き補償右フレーム間差分信号１
１０から視差補償動き補償左フレーム間差分信号１２９
が作られる． この視差補償動き補償左フレーム間差分信号１２９が動
き補償左フレーム間差分信号１２６から差し引かれ，視
差補償予測誤差信号１３０が求められる．視差補償予測
誤差信号１３０は左フレーム有効／無効ブロック判定回
路１３１に入力され、ブロック単位での条件付き画素補
充のための有効ブロックの検出が行なわれ、左フレーム
有効／無効ブロック情報１３７が出力される。

また有効ブロック内の信号は，ブロック符号化あるいは
ＰＣＭ符号化あるいはＤＰＣＭ符号化あるいは複合符号
化回路１３２において符号化され、左フレーム視差補償
予測誤差信号符号化情報１３５が出力される． この情報はブロック復号化あるいはＰＣＭ復号化あるい
はＤＰＣＭ復号化あるいはそれらの複合復号化回路１３
３において復号され、さらに前記視差補償動き補償左フ
レーム間差分信号１２９が加算されて、斌子化動き補償
左フレーム間差分信号１３４が得られる． 量子化動き補償左フレーム間差分信号１３４に動き補償
左画像１２５が加算され、次の入力画像の動き補償のた
めに左画像フレームメモリ１２４に蓄えられる． 以一Ｈの例では、符号化伝送すべき情報は、破線矢印で
示す右フレーム動きベクトル情報１１１，左フレーム動
きベクトル情報１３６，右フレーム有効／無効ブロック
情報１１２，左フレーム有効／無効ブロック情報ｌ３７
，動き補償右フレーム間差分信号符号化情報１１３，左
フレーム視差補償予測誤差信号符号化情報１３５，およ
び視差ベクトル情報１２８である。

ところで、伝送ビットレート３８４　ｋ　ｂｉｔ／ｓｅ
ｅや６４ｋ　ｂｉｔ／ｓｅｅの高圧縮ビデオ符号化では
、高い符号化効率を得るために動き補償フレーム間予測
と条件付き画素補充規則を伴ったＤＣＴやベクトル量子
化などのブロック符号化を組み合せる方式が主流である
。

そこで、ステレオ動画像の高能率符号化においても、動
き補償フレーム間予謂と視差補償予測と条件付き画素補
充規則を伴ったブロック符号化を組み合わせる符号化方
式が符号化情報の圧縮という観点から有効である。

本実施例では、動き補償フレーム間予測にょり得られる
左右の動き補償フレーム間差分信号１０６，１２６のう
ち、どちらか片方がまずブロック毎に符号化伝送すべき
有効ブロックであるか否かの判定が有効／無効ブロック
判定回路１０７、または１３１でなされたのちブロック
符号化される．もう一方の動き補償フレーム間差分信号
は，視差補償回路１２７でブロック符号化された信号と
比較され、視差ベクトルが計算される。

次に、ブロック符号化された信号がこの視差ベクトル分
だけシフトされて，視差補償されたもう一方の動き補償
フレーム間差分信号が作られる（本実施例では、視差補
償動き補償左フレーム間差分信号１２９）。この視差補
償された信号１２９と、視差補償の目標となった動き補
償フレーム間差分信号１２６との差分信号である視差補
償予測誤差信号１３０を符号化すればよいことになる。

ここで、該視差補償予測誤差信号１３０の符号化には、
ブロック符号化が最適であるとは限らない。

ブロックｍ位の符号化が効果的であるのは、画素間の相
関がある値以上の場合であることが知られている。

視差補償予測誤差信号１３０は動き補償フレーム間差分
信号がシフトされた差分信号であるから、画素間の相関
は比較的小さな値になる．従って、入力信号の統計的性
質によっては、視差補償予測誤差信号１３０はブロック
符号化するよりも画素単位に符号化した方が符号化効率
が高い場合がある．画素単位の符号化方式としては最も
単純なｐｃＭ符号化あるはＤＰＣＭ号符化を用いること
ができる。またブロック符号化とこれらの画素単位の符
号化を組み合わせたり、適応的に切り替える符号化法を
用いることもできる。ただし、視差補償予測誤差信号１
３０に対しても有効ブロックを判定しておく必要がある
。

第３図は第２図で画像単位の符号化および復号化する際
の実施例のブロック構成図を示す、これは動き補償フレ
ーム間差分信号１０６，　１２６の符号化には、ブロッ
ク単位の条件付き画素補充規則とＯＣＴなどの直交変換
符号化あるいはベクトル量子化などのブロック符号化を
用いる．また，視差補償予測誤差信号１３０の符号化に
は、ＰＣＭ符号化あるいはＤＰＣＭ符号化などの画素単
位の符号化法あるいはこれらの併用を適用する．そして
ステレオ動画像の１両面の伝送に際しては、２画面分の
動きベクトル情報と１画面分の有効／無効ブロック情報
と１画面分のブロック符号化情報と１画面分のＰＣＭ符
号化あるいはＤＰＣＭ符号化あるいはこれらの併用情報
およびと視差ベクトル情報を符号化伝送するものである
。

第３図において左画像の符号化の一部が異なる以外は、
第２図の実施例と同じである．即ち，画素単位の符号化
回路２０１（ＰＣ）、画素単位の復号化回路２０２（Ｐ
　Ｄ）、左フレーム視差補償予測誤差信号符号化情報２
０３、以外は第２図と同じである。

次に動作をのべると、視差補償予測誤差信号１３０は、
有効／無効ブロック判定をされずに画素単位の符号化回
路２０１に入力される。ここでは，ＰＣＭあるいはＤＰ
ＣＭなとの画素単位の符号化が行われ、左フレーム視差
補償予測誤差信号符号化情報２０３として出力される。

この符号化情報は、局部復号信号を作るために画素単位
の復号化回路２０２を入力される。画素単位の符号化が
一画面全体に適用される場合には、第２図に示した有効
／無効ブロック識別回路１３１、有効／無効ブロック情
報１３７は必要なく、無効画素は量子化値ゼロのランレ
ングスとして符号化される。

左フレームの視差補償予測誤差信号１３０をブロック符
号化するか画素単位に符号化するかは、画素間の相関の
程度によって決めることができる。

一般に画素間の相関が弱い場合には画素単位の符号化を
行った方が符号化効率の点から有利である。

上記の第２図および第３図の実施例の中で、有効ブロッ
ク情報と有効画素情報あるいは、２画面分の有効ブロッ
ク情報間には何らかの相関が存在する場合には，それぞ
れ独立に符号化するのではなくまとめて符号化してもよ
い。

また、視差ベクトルは、フレーム単位あるいは動き補償
ブロック単位あるいは特定の領域を決めてその領域毎に
検出してもよい。ブロック量子化の例としてＤＣＴを挙
げたが、アダマール変換やサイン変換を用いることもで
きる。２画面分の動きベクトル情報は、左，右独立に符
号化することもできるが、相関を利用して２両面分をま
とめて符号化することもできる。視差ベクトルは動き補
償フレーム間差分信号から検出するほかに、直接に入力
画像から検出することもできる。

また、上記第２図および第３図の実施例では、ブロック
単位の画素補充規則に用いられる有効／無効ブロック判
定は，ブロック符号化あるいは画素単位の符号化に先だ
って実行される。

例えば、第２図では、右フレーム有効／無効ブロック判
定回路１０７はブロック符号化回路１０８の直前に置か
れ，左フレーム有効／無効ブロック判定回路１３１はブ
ロック符号化あるいはＰ　Ｃ　Ｍ符号化あるいはＤＰＣ
Ｍ符号化あるいは複合符号化回路１３２の直前に置かれ
ている。

しかし、ブロック符号化は有効／無効ブロック判定に先
だって行うこともできる．すなわち、直交変換符号化に
おける直交変換係数やベクトル量子化におけるコードベ
クトル化などの量子化を実行した時点で量子化値がブロ
ック内ですべてＯあるいはしきい値以下であれば無効ブ
ロックと判定すればよい。

第４図は前記第２図に示す実施例の右フレーム有効／無
効ブロック情報１１２および左フレーム有効／無効ブロ
ック情報１３７を独立に符号化する実施例のブロック構
成図を示し、第２図と同一番号は同一回路、同一信号を
示す（以下、第５図ないし第ｌＯ図も同様）。このブロ
ック符号化回路１０８，１３２での符号化には可変長符
号を用いることができ、また、いくつかの有効／無効ブ
ロック情報をまとめてその状態数に対応する可変長符号
を用いて符号化することにより、符号化効率を向上させ
ることもできる。無効ブロックが多く連続する場合には
ランレングス符号化を組み合わせて符号化効率を改善す
ることもできる． この実施例では、動き補償フレーム間差分信号１０６の
符号化にはブロック単位の条件付き画素補充規則とＤ　
Ｃ　Ｔ　（Ｄｉｃｒｅｔｅ　Ｃｏｓｉｎｅ　Ｔｒａｎｓ
ｆｏｒｗ＋，離散コサイン変換）などの直交変換符号化
あるいはベクトル量子化などのブロック符号化を用いる
．また、視差補償予測誤差信号１３０の符号化にはブロ
ック単位の条件付き画素補充規則とブロック符号化ある
いはＰＣＭ符号化あるいはＤＰＣＭ符号化あるいはこれ
らの併用を適用し、ステレオ動画像の１画面の伝送に際
して、２画面分の動きベクトル情報と２画面分の有効／
無効ブロック情報と１画面分のブロック符号化情報と１
画面分のブロック符号化あるいはＰＣＭ符号化あるいは
ＤＰＣＭ符号化あるいはこれらの併用情報およびと視差
ベクトル情報を符号化伝送する。

第５図は画素単位に符号化するため左フレーム有効／無
効ブロック判定回路１３１を用いない実施例のブロック
構成図を示す．この実施例では、視差補償予測誤差信号
１３０は直接に画素単位の符号化回路２０１に入力され
、画素単位の符号化情報２０４が出力される。視差補償
予測誤差信号１３０に対しては、ブロック単位の符号化
ではなく画素単位に符号化されるため、第４図のような
左フレーム有効／無効ブロック判定回路１３１がないの
で、有効／無効ブロック識別が行われない。

画素単位の符号化にＰＣＭあるいはＤＰＣＭを用いたと
すれば、符号化すべき信号レベルがＯであれば、事象Ｏ
に対して短い符号が割り当てられた可変長符号化を行う
か、あるいはランレングス符号化を用いればよい。した
がって、この実施例のように画素単位の符号化を行えば
有効／無効画素の情報は画素の符号化情報に包含される
ため、別の有効／無効画素の情報を符号化伝送する必要
がない。

第６図は左，右の両面を代表する有効／無効ブロック情
報２０５を選択する実施例のブロック構成図を示す．即
ち、動き補償右フレーム間差分信号１０６および視差補
償予測誤差信号１３０の両者に対してブロック符号化が
適用されている。右フレーム有効／無効ブロック情報１
１２および左フレーム有効／無効ブロック情報１３７の
うちどちらか片方がスイッチにより左右の画面を代表す
る有効／無効ブロック情報２０５として符号化伝送され
る。左，右のブロック符号化回路１３２，　１０８では
この有効／無効ブロック情報２０５に従って有効ブロッ
クの信号が符号化される。この符号化方式は、左，右の
有効／無カブロックの位置が近い場合に、情報量削減に
効果がある。

第７図は論理演算により共通の有効／無効ブロック情報
２０７を出力する実施例のブロック構成図を示す．即ち
、動き補償右フレーム間差分信号１０６および視差補償
予測誤差信号１３０の両者に対してブロック符号化が適
用されている。右フレーム有効／無効ブロック情報１１
２および左フレーム有効／無効ブロック情報１３７は論
理演算回路２０６に入力され、ＡＮＤやＯＲなどの論理
演算により有効ブロック位置が決定され、共通の有効／
無効ブロック情報２０７が出力される。

左，右のブロック符号化回路１３２，　１０８ではこの
有効／無効ブロック情報２０７に従って有効ブロックの
信号が符号化される。この符号化方式は，左，右の有効
／無カブロックを共通の有効／無効ブロック情報で代表
させることにより、情報量を削減できる。

第８図は動き補償右フレーム間差分信号１０６および視
差補償予測誤差信号１３０の両者に対してブロック符号
化が適用される実施例のブロック構成図である．これは
右フレーム有効／無効ブロック情報１１２から左フレー
ム有効／無効ブロック情報１３７が引かれ、その差分有
効／無効ブロック情報２０８と右フ゛レーム有効／無効
ブロック情報１１２が符号化伝送される。この符号化方
式は、左，右の有効／無効ブロックの位置が近い場合に
、情報量削減に効果がある．すなわち、差分有効／無効
ブロック情報２０８がほとんどＯに近い場合には、差分
情報はわずかな情報量で符号化できるからである．第９
図は視差補償予測誤差信号１３０に対する左フレーム有
効／無効ブロック判定回路１３１では実際に判定を行う
のではなく、右フレーム有効／無効ブロック情報１１２
を代表として用いる場合の実施例のブロック構成図を示
す．即ち視差補償予測誤差信号１３０はブロック単位の
符号化ではなく、有効ブロック内の信号に対してのみＰ
ＣＭ符号化あるいはＤＰＣＭ符号化などの画素単位の符
号化が複合符号化回路１３２が行われる。この符号化方
式は，左，右の有効ブロックがほとんど同じ位置に出現
することを前提としている．画素単位の符号化は有効ブ
ロック内だけに適用されるので、Ｏレベルの量子化値が
連続して出現することがなく、ランレングス符号化を組
み込む必要がない．第１０図は右，左フレーム有効／無
効ブロック情報１１２，　１３７を差分回路２０９に入
力し差分有効ブロック情報２１０を求める実施例のブロ
ック構成図である．即ち，右フレーム有効／無効ブロッ
ク情報１１２および左フレーム有効／無効ブロック情報
１３７は差分回路２０９に入力され差分有効ブロック情
報２１０が計算される。符号化伝送される有効／無効ブ
ロック情報は、右フレーム有効／無効ブロック情報１１
２および差分有効ブロック情報２１０である。

視差補償予測誤差信号１３０はブロック単位に画素補充
されるが、符号化方式は画素単位のＰＣＭあるいはＤＰ
ＣＭである。画素単位の符号化は有効ブロック内だけに
適用されるので，Ｏレベルの量子化値が連続して出現す
ることがなく、ランレングス符号化を組み込む必要がな
い． 以上説明した本発明の実施例では，その基本となるステ
レオ動画像符号化方式の実施例において、ブロック単位
の画素補充規則に用いられる有効／無効ブロック判定が
ブロック符号化あるいは画素単位の符号化に先だって実
行されている．例えば、第２図では、右フレーム有効／
無効ブロック判定回路１０７はブロック符号化回路１０
８の直前に置かれ、左フレーム有効／？！Ａ効ブロック
判定回路１３１はブロック符号化あるいはＰＣＭ符号化
あるいはＤＰＣＭ符号化あるいは複合符号化回路１３２
の直前に置かれている． しかし、ブロック符号化は有効／無効ブロック判定に先
だって行うこともできる。すなわち、直交変換符号化に
おける直交変換係数やベクトル量子化におけるコードベ
クトル化などの量子化を実行した時点で量子化値がブロ
ック内ですべてＯあるいはしきい値以下であれば無効ブ
ロックと判定すればよい． また、有効／無効ブロック判定が量子化後に行われる場
合には、第４図の実施例では右フレームブロック符号化
回路１０８と右フレーム有効／無効ブロック判定回路１
０７の位置，および左フレームブロック符号化回路１３
２と左フレーム有効／條効″） ブロック判定回路１３１の位置が逆になる。

同様に、第５図ないし第１０図においても，図中の機能
ブロックのうち１０７と１０８，　１３１と１３２を逆
にすることができる。ただし、第６図ないし第１０図で
はすべてのブロックから符号化情報が抽出されて有効／
無効ブロック判定が行われるが、符号化情報は有効ブロ
ックに含まれる部分のみに制限されて出力されなければ
ならない。

（発明の効果） 以上説明したように本発明は入力された左，右の画像は
、それぞれ動き補償フレーム間予測回路で予測され、左
，右の画像内の動きのある部分のみの情報が抽出される
。即ち、被写体として静止している背景中の人物が動い
た場合には，人物の周囲あるいは内部が、動き補償フレ
ーム間差分信号として抽出されるので、視差補償は動き
のあった領域のみ適用すればよく、符号化すべき情報が
削減され、効率良く符号化することができる。

また，従来技術と異なり２画像分の有効／無効ブロック
識別情報間の相関を利用することにより、ステレオ動画
像の動き補償フレーム間差分信号符号化における条件付
き画素補充に必要な有効／無効ブロック情報あるいは有
効／無効画素情報の符号化効率を改善することができる
．

【図面の簡単な説明】

第１図は本発明の基本的な一実施例によるブロック構成
図、第２図は第１図の具体例を示す実施例のブロック構
成図、第３図は第２図で画素単位の符号化および復号化
する実施例のブロック構成図、第４図は第２図で右フレ
ーム有効／無効ブロック情報１１２および左フレーム有
効／無効ブロック情報１３７を独立に符号化する実施例
のブロック構成図、第５図は画素単位に符号化するため
左フレーム有効／無効ブロック判定回路１３１を用いな
い実施例のブロック構成図、第６図は左，右の画面を代
表する有効／無効ブロック情報２０５を選択する実施例
のブロック構成図、第７図は論理演算により共通の有効
／無効ブロック情報２０７を出力する実施例のブロック
構成図，第８図は動き補償右フレーム間差分信号１０６
および視差補償予測誤差信号１３０の両者に対してブロ
ック符号化が適用される実施例のブロック梼成図、第９
図は視差補償予測誤差信号１３０に対する左フレーム有
効／無効ブロック判定回路１３１で行わず、右フレーム
有効／無効ブロック情報を代表として用いる場合の実施
例のブロック構成図、第１０図は右，左フレーム有効／
無効ブロック情報１１２，　１３７を差分回路２０９に
入力し差分有効ブロック情報２１０を求める実施例のブ
ロック構成図である。 １，１０１・・・右入力画像、　２，１２１・・・左入
力画像、　３　・・・右画像動き補償フレーム間予測回
路、　４・・・左画像動き補償フレーム間予測回路、　
５，１０６・・・動き補償右フレーム間差分信号、　６
，１２６・・・動き補償左フレーム間差分信号、 ７，１２７・・・視差補償回路、　８，１３０・・・視
差補償予測誤差信号、　９　・・・右画像情報源符号化
回路、１０・・・左画像情報源符号化回路、１１・・・
右画像符号化情報、１２・・・左画像符号化情報、１０
２，　１２２・・・動き補償回路、１０３・・・既符号
化右画像、１０４・・・右画像フレームメモリ、　１０
５・・・動き補償右画像、　１０７・・・右フレーム有
効／無効ブロック判定回路、１０ｇ・・・ブロック符号
化回路、１０９・・・ブロック復号化回路、１１０・・
・量子化動き補償右フレー８間差分信号、１１１・・・
右フレーム動きベクトル情報、　１１２・・・右フレー
ム有効／無効ブロック情報、１１３・・・動き補償右フ
レーム間差分信号符号化情報、１２３・・・既符号化左
画像、１２４・・・左画像フレームメモリ、１２５・・
・動き補償左画像，ｌ２８・・・視差ベクトル情報、１
２９・・・視差補償動き補償左フレーム間差分信号、１
３１・・・左フレーム有効／無効ブロック判定回路、１
３２・・・ブロック符号化あるいはＰＣＭ符号化あるい
はＤＰＣＭ符号化あるいはそれらに複合符号化回路、 １３３・・・ブロック復号化あるいはＰＣＭ復号化ある
いはＤＰＣＭ復号化あるいはそれらに複合復号化回路、
１３４・・・量子化動き補償左フレーム間差分信号、 １３５・・・左フレーム視差補償予測誤差信号符号化情
報，１３６・・・左フレーム動きベクトル情報，１３７
・・・左フレーム有効／無効ブロック情報、２０１・・
・画素単位の符号化回路、２０２・・・画素単位の復号
化回路、２０３・・・左フレーム視差補償予測誤差信号
符号化情報、２０４・・・画素単位の符号化情報、２０
５・・・代表有効／無効ブロック情報、２０６・・・論
理演算回路、２０７・・・共通有効／無効ブロック情報
、２０８・・・差分有効／無効ブロック情報、２０９・
・・差分回路、２１０・・・差分有効ブロック情報。 第 図 行ろ化Ｗ帳 第 図 箪 図 第 ス ３ｌ 第 図 第 図 第 図 第 図

Claims (1)

【特許請求の範囲】
1. 離散化されたステレオ動画像の左、右夫々の画像に対し
   動き補償フレーム間予測を行ない、左、右の動き補償フ
   レーム間差分信号を得、該差分信号間の左、右の画像の
   ずれを表わす視差ベクトルを検出し、かつ、前記左、右
   の動き補償フレーム間差分信号に対する視差ベクトルを
   用いた視差補償予測誤差信号を得て、前記、左、右の画
   像のうち何れか一方の画像の動き補償フレーム間差分信
   号と前記視差補償予測誤差信号とを符号化することを特
   徴とする高能率ステレオ動画像符号化方式。