JPH08149517A - ２次元映像から３次元映像を生成する方法 - Google Patents

Abstract

(57)【要約】 【目的】 元になる２次元映像における被写体と背景等
の映出体の前後関係が逆転することなく、正確な３次元
映像を生成することが出来る２次元映像から３次元映像
を生成する方法を提供する。 【構成】 元になる２次元映像を一方の目用の映像と
し、前記元になる２次元映像を所定フィールド遅延させ
た映像を他方の目用の映像とすることにより、２次元映
像から３次元映像を生成する方法であって、ＣＰＵ８
は、前記元になる２次元映像において左右方向に隣接す
る動きベクトル検出領域で検出された２つの左右方向の
動きベクトルを比較することにより、大きい方の動きベ
クトルの映出体が小さい方の動きベクトルの映出体より
も前方に位置するか、後方に位置するかを判定し、該判
定結果により左右どちらの目の映像を遅延させた映像に
するかを決定することを特徴とする。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明はＶＴＲやビデオカメラ等
から出力されたり、ＣＡＴＶやＴＶ放送によって伝送さ
れる２次元映像を３次元映像に変換する２次元映像から
３次元映像を生成する方法、及び２次元映像に映ってい
る映出体の前後関係を判定する映像の前後判定方法に関
する。

【０００２】

【従来の技術】最近話題になっている３次元映像表示シ
ステムに使用される映像ソフトは、その大半が３次元映
像表示用に特別に作成されたものである。このような３
次元映像表示用の映像ソフトは、一般には２台のカメラ
を用いて左目用映像と右目用映像を撮像し、記録したも
のである。そして、この３次元映像ソフトに記録された
左右の映像は、略同時にディスプレイに表示され、この
２重に映し出された左目用映像及び右目用映像を観察者
の左右の目に夫々入射させることにより、観察者に３次
元映像を認識される。

【０００３】しかしながら、世の中には２次元映像で作
成された映像ソフトが多数存在するが、３次元用の映像
ソフトは非常に少ないため、３次元映像を表示するため
には、新たに３次元用の映像ソフトを制作する必要があ
り、手間がかかり、コスト高になるという問題がある。

【０００４】このため、２次元映像を３次元映像に変換
する方法、例えば記録された２次元映像のフィールド遅
延により変換する方法が提案されている。これは、例え
ば左から右に移動する映出体が映っている２次元の映像
の場合、この元の２次元の映像を左目用映像とし、この
左目用映像に対して数フィールド前の映像（この映像は
フィールド遅延により得ることが可能）を右目用映像と
することにより、前記左目用映像と右目用映像との間に
は視差が生じるので、この両映像を略同時に画面上に表
示することにより、前記移動する映出体を背景に対して
前方に浮き出させる方法である。

【０００５】しかしながら、通常の映像では、図４に示
すように、背景（ある映出体）が不動状態（動いていな
い状態）であり、その前方を被写体（別の映出体）が移
動する場合と、図５に示すように、被写体が不動状態で
あり、その後方を背景が移動する場合とがある。

【０００６】上述のようなフィールド遅延により２次元
映像から３次元映像に変換する方法では、図４に示すよ
うな場合においては、左から右へ移動する被写体を検出
して、左目用映像に対して数フィールド前の映像を右目
用映像とすることにより、被写体を背景に対して前方に
浮き出させることが出来る。ところが、図５に示すよう
な背景が移動している場合においては、左から右へ移動
する背景を検出して、前述と同様に、左目用映像に対し
て数フィールド前の映像を右目用映像とすると、逆に背
景が被写体に対して前方に浮き出てくるという問題が生
じる。

【０００７】

【発明が解決しようとする課題】本発明は上記従来例の
欠点に鑑み為されたものであり、元になる２次元映像が
被写体は不動状態であり、その後方を背景が移動してい
る場合であっても、背景が被写体に対して前方に浮き出
ることなく、正確に被写体が背景に対して前方に浮き出
るように変換することが出来る２次元映像から３次元映
像を生成する方法を提供することを目的とするものであ
る。

【０００８】また、本発明は２次元映像に映し出されて
いる複数の映出体の前後関係を判定することが出来る映
像の前後判定方法を提供することを目的とするものであ
る。

【０００９】

【課題を解決するための手段】本発明の第１の３次元映
像生成方法は、元になる２次元映像を一方の目用の映像
とし、前記元になる２次元映像を所定フィールド遅延さ
せた映像を他方の目用の映像とすることにより、２次元
映像から３次元映像を生成する方法であって、前記元に
なる２次元映像において左右方向の移動量の大きい映出
体が左右方向の移動量の小さい映出体よりも前方に位置
するか、後方に位置するかを判定し、該判定結果により
左右どちらの目の映像を遅延させた映像にするかを決定
することを特徴とする。

【００１０】更に、本発明の第１の３次元映像生成方法
は、前記元になる２次元映像における映出体の左右方向
の移動量を検出する検出領域を前記２次元映像を構成す
る画面内に複数個所設け、そのうち隣接する検出領域で
検出された２つの移動量を比較することにより、前記左
右方向の移動量の大きい方の映出体が移動量の小さい方
の映出体よりも前方に位置するか、後方に位置するかを
判定することを特徴とする。

【００１１】更に、本発明の第１の３次元映像生成方法
は、前記２つの移動量の大きさが異なり、移動量の大き
い方の映出体が移動量の小さい方の映出体に向かって移
動し、且つ小さい方の移動量を検出した検出領域で所定
時間経過後に検出される移動量が前記移動量の大きい方
の映出体の影響を受ける場合、前記移動量の大きい方の
映出体が前記移動量の小さい方の映出体よりも前方に位
置し、前記移動量の大きい方の映出体の移動方向側の目
の映像を遅延させるべきであると判定することを特徴と
する。

【００１２】また、本発明の第１の３次元映像生成方法
は、前記２つの移動量の大きさが異なり、移動量の大き
い方の映出体が移動量の小さい方の映出体に向かって移
動し、且つ小さい方の移動量を検出した検出領域で所定
時間経過後に検出される移動量が前記移動量の大きい方
の映出体の影響を受けない場合、前記移動量の大きい方
の映出体が前記移動量の小さい方の映出体よりも後方に
位置し、前記移動量の大きい方の映出体の移動方向と反
対側の目の映像を遅延させるべきであると判定すること
を特徴とする。

【００１３】また、本発明の第１の３次元映像生成方法
は、前記２つの移動量の大きさが異なり、移動量の大き
い方の映出体が移動量の小さい方の映出体に向かって移
動しておらず、且つ大きい方の移動量を検出した検出領
域で所定時間経過後に検出される移動量が前記移動量の
小さい方の映出体の影響を受ける場合、前記移動量の大
きい方の映出体が前記移動量の小さい方の映出体よりも
前方に位置し、前記移動量の大きい方の映出体の移動方
向側の目の映像を遅延させるべきであると判定すること
を特徴とする。

【００１４】また、本発明の第１の３次元映像生成方法
は、前記２つの移動量の大きさが異なり、移動量の大き
い方の映出体が移動量の小さい方の映出体に向かって移
動しておらず、且つ大きい方の移動量を検出した検出領
域で所定時間経過後に検出される移動量が前記移動量の
小さい方の映出体の影響を受けない場合、前記移動量の
大きい方の映出体が前記移動量の小さい方の映出体より
も後方に位置し、前記移動量の大きい方の映出体の移動
方向と反対側の目の映像を遅延させるべきであると判定
することを特徴とする。

【００１５】また、本発明の第１の３次元映像生成方法
は、前記映出体の移動量を動きベクトルにより求めるこ
とを特徴とする。また、本発明の第１の３次元映像生成
方法は、左目用映像信号を出力する左目用出力端子と、
右目用映像信号を出力する右目用出力端子と、前記遅延
された映像信号を前記左目用映像端子、前記右目用映像
端子のどちらから出力するかを切り換える映像切換手段
とを備え、前記映像切換手段の切り換え制御を前記判定
結果に従って行うことを特徴とする。

【００１６】更に、本発明の第１の３次元映像生成方法
は、前記判定結果が１フィールド期間内において全て同
じである場合に、前記映像切換手段の切り換え制御を行
うことを特徴とする。

【００１７】次に、本発明の第１の前後判定方法は、前
記元になる２次元映像における映出体の左右方向の移動
量を検出する検出領域を前記２次元映像を構成する画面
内に複数個所設け、そのうち隣接する検出領域で検出さ
れた２つの移動量を比較することにより、前記左右方向
の移動量の大きい方の映出体が移動量の小さい方の映出
体よりも前方に位置するか、後方に位置するかを判定す
ることを特徴とする。

【００１８】次に、本発明の第２の前後判定方法の１つ
である第１の判別は、前記元になる２次元映像における
映出体の左右方向の移動量を検出する検出領域を前記２
次元映像を構成する画面内に多数個所設け、そのうち画
面の端に位置する検出領域での左右方向の移動量の大き
い映出体を検出する領域数と移動量の小さい映出体を検
出する領域数とを比較し、領域数の多い方の映出体の検
出領域を後方に位置する後方領域であると判別すること
を特徴とする。

【００１９】また、本発明の第２の前後判定方法の１つ
である第２の判別は、前記元になる２次元映像における
映出体の左右方向の移動量を検出する検出領域を前記２
次元映像を構成する画面内に多数個所設け、そのうち画
面の中央に位置する検出領域での左右方向の移動量の大
きい映出体を検出する領域数と移動量の小さい映出体を
検出する領域数とを比較し、領域数の多い方の映出体の
検出領域を前方に位置する前方領域であると判別するこ
とを特徴とする。

【００２０】また、本発明の第２の前後判定方法の１つ
である第３の判別は、前記元になる２次元映像における
映出体の左右方向の移動量を検出する検出領域を前記２
次元映像を構成する画面全域に多数個所設け、該多数個
所の検出領域での左右方向の移動量の大きい映出体を検
出する領域数と移動量の小さい映出体を検出する領域数
とを比較し、領域数の少ない方の映出体の検出領域に注
目し、該注目された検出領域の（画面の端での領域数）
／（画面全域での領域数）が所定値以上の時、前記注目
された領域を画面の後方に位置する後方領域であると判
別することを特徴とする。

【００２１】また、本発明の第２の前後判定方法は、前
記第１の判別と前記第２の判別との両方を行い、前記第
１の判別により後方領域であると判別された領域と、前
記第２の判別により前方領域であると判別された領域と
が異なる領域である場合、前記第１、第２の判別結果を
最終の判別結果とすることを特徴とする。

【００２２】また、本発明の第２の前後判定方法は、前
記第１の判別と前記第２の発明との両方を行い、前記第
１の判別により後方領域であると判別された領域と、前
記第２の判別により前方領域であると判別された領域と
が同じ領域である場合、前記第３の判別を行うことを特
徴とする。

【００２３】更に、本発明の第２の前後判定方法は、前
記映出体の移動量を動きベクトルにより求めることを特
徴とする。また、本発明の第２の前後判定方法は、前記
映出体の移動量を数フィールド期間の動きベクトルの累
積和により求めることを特徴とする。

【００２４】また、本発明の第２の前後判定方法は、前
記多数個所の検出領域のうち、信頼性の低い動きベクト
ルが検出された領域、または映像中の映出体の動きに関
与していない動きベクトルが検出された領域を誤り領域
として判別し、誤り領域では無いと判別された領域を有
効な検出領域として用いることを特徴とする。

【００２５】次に、本発明の第２の３次元映像生成方法
は、元になる２次元映像を一方の目用の映像とし、前記
元になる２次元映像を所定フィールド遅延させた映像を
他方の目用の映像とすることにより、２次元映像から３
次元映像を生成する方法において、前述の第２の映像の
前後判定方法によって得られた結果により左右どちらの
目の映像を遅延させた映像にするかを決定することを特
徴とする。

【００２６】更に、本発明の第２の３次元映像生成方法
は、移動量の大きい映出体の移動量の第１の絶対値と、
移動量の小さい映出体の移動量の第２の絶対値とを比較
し、該第１、第２の絶対値のうち値の大きい方の映出体
の移動量により前記遅延された映像の遅延量を定めるこ
とを特徴とする。

【００２７】

【作用】上記方法によれば、移動量の大きい方の映出体
が移動量の小さい方の映出体よりも前方に位置するか、
後方に位置するかを判定し、この判定結果に基づいて左
右どちらの映像を遅延された映像にするかを決定するた
め、生成された３次元映像において、映出体の前後関係
が逆転することは減少、若しくは無くなる。

【００２８】また、元になる２次元映像に映し出されて
いる映出体の前後関係は、前記２次元映像を構成する画
面内において、左右に隣接する２つの検出領域で検出さ
れた２つの移動量が異なる部分を見つけ出し、前記２つ
の移動量に基づいて容易に判定することが出来る。

【００２９】具体的には、移動量の大きい方の映出体が
移動量の小さい方の映出体に向かって移動し、且つ小さ
い方の移動量を検出した検出領域で所定時間経過後に検
出される移動量が前記移動量の大きい方の映出体の影響
を受ける場合は、移動量の大きい方の映出体が移動量の
小さい方の映出体の前方を通過した時であると考えら
れ、前記移動量の大きい方の映出体が前記移動量の小さ
い方の映出体よりも前方に位置すると判定することが出
来る。

【００３０】また、移動量の大きい方の映出体が移動量
の小さい方の映出体に向かって移動し、且つ小さい方の
移動量を検出した検出領域で所定時間経過後に検出され
る移動量が前記移動量の大きい方の映出体の影響を受け
ない場合は、移動量の大きい方の映出体が移動量の小さ
い方の映出体の後方を通過した時であると考えられ、前
記移動量の大きい方の映出体が前記移動量の小さい方の
映出体よりも後方に位置すると判定することが出来る。

【００３１】また、移動量の大きい方の映出体が移動量
の小さい方の映出体に向かって移動しておらず、且つ大
きい方の移動量を検出した検出領域で所定時間経過後に
検出される移動量が前記移動量の小さい方の映出体の影
響を受ける場合、移動量の大きい映出体が移動量の小さ
い映出体の前方を去った時であると考えられ、前記移動
量の大きい方の映出体が前記移動量の小さい方の映出体
よりも前方に位置すると判定することが出来る。

【００３２】また、移動量の大きい方の映出体が移動量
の小さい方の映出体に向かって移動しておらず、且つ大
きい方の移動量を検出した検出領域で所定時間経過後に
検出される移動量が前記移動量の小さい方の映出体の影
響を受けない場合は、移動量の大きい方の映出体が移動
量の小さい方の映出体の後方より新たに連続して現れた
時であると考えられ、前記移動量の大きい映出体が前記
移動量の小さい映出体よりも後方に位置すると判定する
ことが出来る。

【００３３】また、前記映出体の移動量は、動きベクト
ルにより容易に且つ正確に求めることが出来る。また、
前記判定結果に従って映像切換回路を切り換え制御する
ことにより、映出体の前後関係が正確な立体映像を実際
に表示することが可能になる。

【００３４】また、前記判定結果が１フィールド期間内
において全て同じである場合に、前記映像切換手段の切
り換え制御を行うことにより、映出体の移動状態が複雑
であったり、誤った移動量の検出が原因で、映出体の前
後関係を間違って判定することを防止する。

【００３５】また、第１の前後判定方法によれば、映像
に映し出されている映出体の前後関係は、前記２次元映
像を構成する画面内において、左右に隣接する２つの検
出領域で検出された２つの移動量が異なる部分を見つけ
出し、前記２つの移動量に基づいて容易に判定すること
が出来る。

【００３６】また、第２の前後判定方法の第１の判別に
よれば、画面端の多くの部分に、後方に位置する映出体
が映っている通常の映像に対しては後方領域を判別する
ことが出来る。

【００３７】また、第２の前後判定方法の第２の判別に
よれば、画面中央の多くの部分に、前方に位置する映出
体が映っている通常の映像に対しては、第２の判別を行
うことにより前方領域を判別することが出来る。

【００３８】また、第２の前後判定方法の第３の判別
は、前方に位置する映出体が大きい場合には、画面全体
においては後方領域の方が少なくなるが、その後方領域
のうち画面の端の部分を占める割合は所定値より大きく
なり、また、前方に位置する映出体が小さい場合には、
画面全体においては前方領域の方が少なく、しかもその
前方領域のうち画面の端の部分を占める割合は所定値よ
りも小さくなるという考えに基づいている。また、この
第３の判別の考えは前方に位置する映出体が画面の端に
位置する場合においても成り立つ。このため、第３の判
別を行うことにより、前方に位置する映出体が画面のど
の位置に映っていても、後方領域であるか前方領域であ
るかを判別することが出来る。

【００３９】また、第１の判別と第２の判別との両方を
行い、第１の判別で後方領域であると判別された検出領
域と、第２の判別で前方領域であると判別された領域と
が異なる場合は、第１の判別の判別結果と第２の判別の
判別結果とが一致した場合であり、この第１、第２の判
別の判別結果は正しいと考えられる。

【００４０】また、第１の判別と第２の判別との両方を
行い、第１の判別で後方領域であると判別された検出領
域と、第２の判別で前方領域であると判別された領域と
が同じである場合は、第１の判別の判別結果と第２の判
別の判別結果とが不一致の場合であり、この第１、第２
の判別の判別結果はどちらか一方が間違いの場合であ
る。これは前方に位置する映出体が画面の中央の部分以
外にも映っている場合が多く、このような場合は第３の
判別を行うことにより正しい判別を行うことが出来る。

【００４１】また、前記映出体の移動量は、動きベクト
ルにより容易に且つ正確に求めることが出来る。また、
前記映出体の移動量は、数フィールド期間の動きベクト
ルの累積和により求めることにより、映画フィルムをテ
レビジョン信号に変換した映像に対しても正確な移動量
を求めることが出来る。

【００４２】また、第２の３次元映像生成方法によれ
ば、前述の第２の前後判定方法により、前方に位置する
前方領域と後方に位置する後方領域とを判定し、この判
定結果に基づいて遅延方向、即ち左右どちらの目の映像
を遅延された映像にするかを決定するため、生成された
３次元映像において、背景が被写体の前方に位置するよ
うな映出体の前後関係が逆転する映像は減少、若しくは
無くなる。

【００４３】更に、前記遅延された映像の遅延量を、前
方領域、後方領域のうち移動量の絶対値が大きい一方の
領域の映出体の移動量に基づいて求めるので、絶対値が
小さい異なる領域の映出体の移動量の影響を受けること
無く、所望の遅延量を正確に求めることが出来る。

【００４４】

【実施例】以下、図面を参照しつつ本発明の第１実施例
について詳細に説明する。図１は２次元映像から３次元
映像を生成する第１実施例の３次元映像ソフト変換シス
テムの要部概略ブロック図である。

【００４５】本実施例の３次元映像ソフト変換システム
では、入力端子１に２次元映像を表示するための通常の
２次元映像信号が入力される。前記入力端子１より入力
された２次元映像信号は映像切換回路２及びフィールド
メモリ５に供給される。

【００４６】前記フィールドメモリ５は入力された２次
元映像信号を所定フィールドだけ遅延して出力し、前記
映像切換回路２に供給する。前記フィールドメモリ５の
遅延量はメモリ制御回路６により１フィールド単位で可
変制御される。また、この可変制御は１フィールド以下
の小さい単位でも構わない。

【００４７】前記映像切換回路２の出力側は左目用映像
信号Ｌを出力する出力端子３及び右目用映像信号Ｒを出
力する出力端子４に出力されており、被写体の動きの方
向に応じて出力状態が切り換わるように制御される。

【００４８】また、前記入力端子１より入力した２次元
映像信号は、動きベクトル検出回路７に供給され、フィ
ールド間の動き、即ち前記２次元映像信号に映し出され
ている映出体の移動量（移動速度）に応じた動きベクト
ルが検出された後、ＣＰＵ８に供給される。

【００４９】尚、動きベクトルとは、ある映像領域にお
いて、前フィールドの代表点の画像信号と現フィールド
の画像信号との相関を取ることにより、前フィールドの
代表点が現フィールドのどこに動いたかを表すベクトル
である。このような動きベクトルの検出方法を代表点マ
ッチング法という。

【００５０】前記ＣＰＵ８は前述の検出した動きベクト
ルのうち左右方向である水平成分（以後、この水平成分
を単に動きベクトルという）を抽出し、これに応じてメ
モリ制御回路６を制御する。即ち、被写体の動きが大き
く、動きベクトルが大きい場合、フィールドメモリ５の
遅延量が少なくなるように制御し、被写体の動きが小さ
いか、あるいはスローモーション再生時のように動きベ
クトルが小さい場合、遅延量が多くなるように制御す
る。

【００５１】更に、前記ＣＰＵ８は動きベクトルの方向
が左から右の場合、その動きベクトルの映出体が背景の
前方に位置する被写体であると判断すると、遅延された
映像信号を右目用映像信号とし、また、前記動きベクト
ルの映出体が被写体の後方に位置する背景であると判断
すると、遅延された映像信号を左目用映像信号とする。
また、前記ＣＰＵ８は動きベクトルの方向が右から左の
場合、その動きベクトルの映出体が背景の前方に位置す
る被写体であると判断すると、遅延された映像信号を左
目用映像信号とし、また、前記動きベクトルの映出体が
被写体の後方に位置する背景であると判断すると、遅延
された映像信号を右目用映像信号とするように映像切換
回路２を制御する。

【００５２】従って、２次元映像信号において被写体、
あるいは背景が左右方向に移動するようなシーンについ
ては動きの速さに応じた視差が発生する。そして、出力
端子３、４からの左右の映像信号をレンチキュラ方式等
の立体映像表示ディスプレイに供給することにより、観
察者は立体感のある３次元映像を観賞することが出来
る。

【００５３】図２は前記ＣＰＵ８の動作のうち、動きベ
クトルの映出体が背景の前方に位置する被写体である
か、あるいは被写体の後方に位置する背景であるかを判
定する動作のフローチャートを示す図である。

【００５４】先ず、ステップＳ１において、画面上に複
数存在する動きベクトルの検出領域で検出された動きベ
クトルのうち、左右に隣接する検出領域により検出され
た２つの動きベクトルを比較し、その２つの動きベクト
ルが同じ（大きさ及び向きの両方が同じ）であるか否か
を判別する。

【００５５】そして、このステップＳ１において、前記
動きベクトルが同じであると判断した場合（Ｙ）、ステ
ップＳ２において、前記ステップＳ１で行った動きベク
トルの比較が動きベクトルの検出を行った１フィールド
の画面のうち最後の動きベクトルの比較であるか否かを
判別する。

【００５６】本実施例では、動きベクトル検出回路７
は、図３に示すように、１フィールドを構成する画面の
うち、上下方向を４分割、左右方向を４分割してなる１
６個の検出領域Ａ１、Ｂ１、Ｃ１、Ｄ１、Ａ２、Ｂ２、
Ｃ２、Ｄ２、Ａ３、Ｂ３、Ｃ３、Ｄ３、Ａ４、Ｂ４、Ｃ
４、Ｄ４で動きベクトルを検出している。そして、１フ
ィールド期間での前記１６個の検出領域で検出された動
きベクトルの比較動作は、上から第１行目の左から右
へ、次に上から第２行目の左から右へ、次に上から第３
行目の左から右へ、次に上から第４行目の左から右へと
順番に進む。即ち、検出領域Ａ１で検出された動きベク
トルと検出領域Ｂ１で検出された動きベクトルとの比
較、次に検出領域Ｂ１で検出された動きベクトルと検出
領域Ｃ１で検出された動きベクトルとの比較、次に検出
領域Ｃ１で検出された動きベクトルと検出領域Ｄ１で検
出された動きベクトルとの比較、次に検出領域Ａ２で検
出された動きベクトルと検出領域Ｂ２で検出された動き
ベクトルとの比較、次に検出領域Ｂ２で検出された動き
ベクトルと検出領域Ｃ２で検出された動きベクトルとの
比較、次に検出領域Ｃ２で検出された動きベクトルと検
出領域Ｄ２で検出された動きベクトルとの比較、次に検
出領域Ａ３で検出された動きベクトルと検出領域Ｂ３で
検出された動きベクトルとの比較、次に検出領域Ｂ３で
検出された動きベクトルと検出領域Ｃ３で検出された動
きベクトルとの比較、次に検出領域Ｃ３で検出された動
きベクトルと検出領域Ｄ３で検出された動きベクトルと
の比較、次に検出領域Ａ４で検出された動きベクトルと
検出領域Ｂ４で検出された動きベクトルとの比較、次に
検出領域Ｂ４で検出された動きベクトルと検出領域Ｃ４
で検出された動きベクトルとの比較、次に検出領域Ｃ４
で検出された動きベクトルと検出領域Ｄ４で検出された
動きベクトルとの比較の順で進む。

【００５７】従って、ステップＳ２において、直前のス
テップＳ１での動きベクトルの比較動作が検出領域Ｃ４
で検出された動きベクトルと検出領域Ｄ４で検出された
動きベクトルとの比較であるか否かを判別する。そし
て、ステップＳ１で、検出領域Ｃ４で検出された動きベ
クトルと検出領域Ｄ４で検出された動きベクトルとの比
較であると判別した場合（Ｙ）、ステップＳ１１に進
み、また、検出領域Ｃ４で検出された動きベクトルと検
出領域Ｄ４で検出された動きベクトルとの比較でないと
判別した場合（Ｎ）、ステップＳ３に進む。

【００５８】ステップＳ３では、次の動きベクトル検出
領域での動きベクトルの比較動作に移行して前記ステッ
プＳ１に戻り、ステップＳ１の動作を再度行う。また、
前記ステップＳ１において、前記動きベクトルが同じで
ないと判断した場合（Ｎ）、次のステップＳ４に進む。

【００５９】ステップＳ４では、前記ステップＳ１で比
較した２つの動きベクトルのうち大きい方の動きベクト
ルの向いている方向が、小さい方の動きベクトルの検出
領域を向いているか否かを判定する。尚、この時、動き
ベクトルの大小関係は、動きベクトルの絶対値で判定す
る。そして、ステップＳ３において、大きい方の動きベ
クトルの向いてる方向が小さい方の動きベクトルの検出
領域を向いていると判定した場合（Ｙ）、ステップＳ５
に進み、また、大きい方の動きベクトルの向いている方
向が小さい方の動きベクトルの検出領域を向いていない
と判定した場合（Ｎ）、ステップＳ６に進む。

【００６０】ステップＳ５では、所定時間経過後に、前
記２つの動きベクトルのうち小さい方の動きベクトルの
検出領域で検出された動きベクトルが、前記大きい方の
動きベクトルの影響を受けるか否かを判定する。そし
て、このステップＳ５において、影響を受けると判定し
た場合（Ｙ）、ステップＳ７に進む。

【００６１】ステップＳ７では、前記大きい方の動きベ
クトルの映出体が背景の前方を移動する被写体であると
判断し、前記大きい方の動きベクトルが向いている方向
の側の目の映像信号を遅延された映像信号とすべきであ
ると判定する。

【００６２】また、ステップＳ５において、影響を受け
ないと判定した場合（Ｎ）、ステップＳ８に進む。ステ
ップＳ８では、前記大きい方の動きベクトルの映出体が
被写体の後方を移動する背景であると判断し、前記大き
い方の動きベクトルが向いている方向と反対側の目の映
像信号を遅延された映像信号とすべきであると判定す
る。

【００６３】次に、前述のステップＳ４において、大き
い方の動きベクトルの向いている方向が小さい方の動き
ベクトルの検出領域を向いていないと判定して（Ｎ）ス
テップＳ６に進んだ場合、該ステップＳ６では、所定時
間経過後に前記２つの動きベクトルのうち大きい方の動
きベクトルの検出領域で検出された動きベクトルが小さ
い方の動きベクトルの影響を受けるか否かを判定する。
そして、このステップＳ６において、影響を受けると判
定した場合（Ｙ）、ステップＳ９に進む。

【００６４】ステップＳ９では、前記大きい方の動きベ
クトルの映出体が背景の前方を移動する被写体であると
判断し、前記大きい方の動きベクトルの向いている方向
の目の映像信号を遅延された映像信号とすべきであると
判定する。

【００６５】また、ステップＳ６において、影響を受け
ないと判定した場合（Ｎ）、ステップＳ１０に進む。ス
テップＳ１０では、前記大きい方の動きベクトルの映出
体が被写体の後方を移動する背景であると判断し、前記
大きい方の動きベクトルが向いている方向と逆方向の目
の映像信号を遅延された映像信号とすべきであると判定
する。

【００６６】尚、前記ステップＳ５での所定時間とは、
大きい方の動きベクトルの映出体が、その動きベクトル
の絶対値から換算して隣の動きベクトル検出領域に移動
することが予測される時間のことである。また、前記ス
テップＳ６での所定時間とは、小さい方の動きベクトル
の物体が、その動きベクトルの絶対値から換算して隣の
動きベクトル検出領域に移動することが予測される時間
のことである。従って、前記ステップＳ５、ステップＳ
６の所定時間は共に、前述の換算の元になる動きベクト
ルの絶対値が大きい程、短くなる。

【００６７】また、前記ステップＳ５での影響を受ける
とは、小さい方の動きベクトルが前記所定時間経過後に
大きい方の動きベクトルの値と同じになる、あるいは大
きい方の動きベクトルに近付くことである。また、前記
ステップＳ６での影響とは、大きい方の動きベクトルが
前記所定時間経過後に小さい方の動きベクトルの値と同
じになる、あるいは小さい方の動きベクトルに近付くこ
とである。前記ステップＳ７、ステップＳ８、ステップ
Ｓ９あるいはステップＳ１０の動作が終了すると、ステ
ップＳ２に戻る。ステップＳ２では、１フィールド期間
の最後の動きベクトルの比較、即ち、検出領域Ｃ４で検
出された動きベクトルと検出領域Ｄ４で検出された動き
ベクトルとの比較動作が終了するまで、最後の動きベク
トル比較ではないと判断し（Ｎ）、ステップＳ１に戻
り、以上の動作を繰り返す。そして最後に、検出領域Ｃ
４で検出された動きベクトルと検出領域Ｄ４で検出され
た動きベクトルとの比較動作が終了すると、最後の動き
ベクトル比較である（Ｙ）と判断し、ステップＳ１１に
進む。

【００６８】ステップＳ１１では、前記ステップＳ７、
ステップＳ８、ステップＳ９及びステップＳ１０で得ら
れた判定結果を比較し、全ての判定結果が同じであるか
否かを判定する。そして、ステップＳ１１において、全
ての判定結果が同じであると判定した場合（Ｙ）、ステ
ップＳ１２に進み、また、全ての判定結果が同じではな
い（判定結果が異なるものが少なくとも１つはある）と
判定した場合（Ｎ）、動作を終了する。尚、ここでいう
判定結果とは、左右どちらの目の映像信号を遅延された
映像信号とすべきであるかということである。即ち、全
ての判定結果が右目用の映像信号を遅延された映像信号
とすべきである場合、あるいは全ての判定結果が左目用
の映像信号を遅延された映像信号とすべきである場合
に、全ての判定結果が同じであると判定して（Ｙ）ステ
ップＳ１２に進み、それ以外の場合は、全ての判定結果
が同じではないと判定して（Ｎ）動作を終了する。

【００６９】ステップＳ１２では、前記ステップＳ７、
ステップＳ８、ステップＳ９及びステップＳ１０で得ら
れた判定結果に従って、映像切換回路２を切り換えるよ
うに制御する。

【００７０】次に、入力端子１に入力される元になる２
次元映像が図４に示す第１のシーンの映像である場合
と、図５に示す第２のシーンの映像である場合の夫々に
ついて、ＣＰＵ８の動作を図２に示すフローチャートに
従って説明する。

【００７１】図４は（ａ）、（ｂ）、（ｃ）の順で経過
する第１のシーンの３個のフィールドの映像、及びその
映像における動きベクトルの大きさ及び向きを模式的に
示す図である。この図４の映像は不動状態である山の前
方を鳥が左から右に向かって飛んでいる映像である。即
ち、背景である山の前方を被写体である鳥が左から右に
向かって飛んでいる。尚、（ｂ）は（ａ）の数フィール
ド後（所定時間経過後）の映像、（ｃ）は（ｂ）の数フ
ィールド後（所定時間経過後）の映像である。

【００７２】図５は（ａ）、（ｂ）、（ｃ）の順で経過
する第１のシーンの３個のフィールドの映像、及びその
映像における動きベクトルの大きさ及び向きを模式的に
示す図である。この図５の映像はバスが左から右に向か
って走っている映像であるが、バスを中心に撮影した映
像であるため、画面上においては不動状態であるバスの
後方を家が左から右に向かって移動している。即ち、被
写体であるバスの後方を背景である家が移動している。
尚、（ｂ）は（ａ）の数フィールド後（所定時間経過
後）の映像、（ｃ）は（ｂ）の数フィールド後（所定時
間経過後）の映像である。

【００７３】先ず、図４に示す第１のシーンの映像にお
いて、現フィールドが図４（ａ）の映像である場合、第
１行目、第２行目の動きベクトル検出領域Ａ１、Ｂ１、
Ｃ１、Ｄ１、Ａ２、Ｂ２、Ｃ２、Ｄ２では背景の山を検
出するため、動きベクトルａ１、ｂ１、ｃ１、ｄ１、ａ
２、ｂ２、ｃ２、ｄ２は全て０となる。従って、この動
きベクトル検出領域では、左右に隣接する検出領域で検
出された動きベクトルは全てにおいて大きさが等しく、
ＣＰＵ８はステップＳ１、ステップＳ２、ステップＳ３
の動作を繰り返す。

【００７４】そして、第３行目の動きベクトル検出領域
では、左から１番目、３番目、４番目の検出領域Ａ３、
Ｃ３、Ｄ３では背景の山を検出するため、動きベクトル
ａ３、ｃ３、ｄ３は０となり、左から２番目の検出領域
Ｂ３では左から右へ飛ぶ鳥を検出するため、動きベクト
ルｂ３は左から右へ向いているベクトルとなる。

【００７５】従って、ステップＳ１では、左右に隣接す
る動きベクトル検出領域Ａ３と動きベクトル検出領域Ｂ
３とで検出された動きベクトルａ３と動きベクトルｂ３
とは同じでないと判断し（Ｎ）、ステップＳ４に進む。

【００７６】ステップＳ４では、動きベクトルａ３と動
きベクトルｂ３のうち、大きい方の動きベクトルｂ３が
小さい方の動きベクトルａ３を向いているか否かを判定
する。ここでは、動きベクトルｂ３が動きベクトルａ３
の方を向いていないため、ステップＳ６に進む。

【００７７】ステップＳ６では、所定時間経過後に大き
い方の動きベクトルｂ３が小さい方の動きベクトルａ３
の影響を受けるか否かを判定する。ここでは、所定時間
経過後に、図４（ｂ）に示すように、動きベクトルｂ
３’が０になり、前記小さい方の動きベクトルａ３の値
と等しくなるため、大きい方の動きベクトルｂ３は小さ
い方の動きベクトルａ３の影響を受けると判定し
（Ｙ）、ステップＳ９に進む。

【００７８】従って、ステップＳ９において、大きい方
の動きベクトルｂ３の映出体が小さい方の動きベクトル
ａ３の映出体よりも前方に位置すると判断し、大きい方
の動きベクトルｂ３が向いている右方向の側の目、即ち
右目用の映像信号を遅延された映像信号とするべきであ
ると判定する。

【００７９】そして、ステップＳ２において、１画面の
全ての動きベクトル比較が終了していないと判断し
（Ｎ）、ステップＳ３で次の動きベクトルの検出領域に
移行し、ステップＳ１に戻る。

【００８０】ステップＳ１では、第３行目の左から２番
目の動きベクトルｂ３と左から３番目の動きベクトルｃ
３とを比較し、動きベクトルｂ３と動きベクトルｃ３と
は同じではないと判断し（Ｎ）、ステップＳ４に進む。

【００８１】ステップＳ４では、動きベクトルｂ３と動
きベクトルｃ３のうち、大きい方の動きベクトルｂ３が
小さい方の動きベクトルａ３を向いているか否かを判定
する。ここでは、動きベクトルｂ３が動きベクトルａ３
の方を向いるため、ステップＳ５に進む。

【００８２】ステップＳ５では、所定時間経過後に小さ
い方の動きベクトルｃ３が大きい方の動きベクトルｂ３
の影響を受けるかを判定する。ここでは、所定時間経過
後に、図４（ｂ）に示すように、動きベクトルｃ３’が
前記大きい方の動きベクトルｂ３と同じ値になるため、
小さい方の動きベクトルｃ３は大きい方の動きベクトル
ｂ３の影響を受けると判定し（Ｙ）、ステップＳ７に進
む。

【００８３】従って、ステップＳ７において、大きい方
の動きベクトルｂ３の映出体が小さい方の動きベクトル
ｃ３の映出体よりも前方に位置すると判断し、大きい方
の動きベクトルｂ３が向いている右方向の側の目、即ち
右目用の映像信号を遅延された映像信号とするべきであ
ると判定する。

【００８４】そして、ステップＳ２において、最後の動
きベクトル比較ではないと判断し（Ｎ）、ステップＳ３
で次の動きベクトルの検出領域に移行し、ステップＳ１
に戻る。

【００８５】ステップＳ１では、第３行目の左から３番
目の動きベクトルｃ３と左から４番目の動きベクトルｄ
３とを比較し、動きベクトルｃ３と動きベクトルｄ３と
は同じであると判断し（Ｙ）、ステップＳ１に戻る。

【００８６】そして、ステップＳ１では、第４行目の動
きベクトル検出領域についての動作を行う。第４行目の
動きベクトル検出領域では、第３行目の動きベクトル検
出領域と同様に、左から１番目、３番目、４番目の検出
領域Ａ４、Ｃ４、Ｄ４では背景の山を検出するため、動
きベクトルａ４、ｃ４、ｄ４は０であり、左から２番目
の検出領域Ｂ４では左から右へ飛ぶ鳥を検出するため、
左から右へ向いている動きベクトルｂ３を検出する。

【００８７】従って、ＣＰＵ８は第３行目に対する動作
と同じ動作をし、動きベクトルａ４と動きベクトルｂ４
との比較では、動きベクトルｂ４の映出体が動きベクト
ルａ４の映出体よりも前方に位置すると判断し、右目用
の映像信号を遅延された映像信号とすべきであると判定
する。

【００８８】また、動きベクトルｂ４と動きベクトルｃ
４との比較では、動きベクトルｂ４の映出体が動きベク
トルｃ４の映出体よりも前方に位置すると判断し、右目
用の映像信号を遅延された映像信号とすべきであると判
定する。

【００８９】そして、動きベクトルｃ４と動きベクトル
ｄ４との比較を終えた後、ステップＳ２において、１画
面の全ての動きベクトル比較が終了したと判断し
（Ｙ）、ステップＳ１１に進む。

【００９０】ステップＳ１１では、前述の動作で得られ
た４個の判定結果を比較する。ここでは、４個の判定結
果が全て、右目用の映像信号を遅延された映像信号とす
べきであると判定しているため、全ての判定結果が同じ
であると判定して（Ｙ）ステップＳ１２に進む。

【００９１】ステップＳ１２では、前記判定結果に従っ
て、右目用信号が遅延された映像信号となるように映像
切換回路２を切り換え制御する。これにより、観察者は
動きベクトルｂ３の映出体である鳥（被写体）を動きベ
クトルａ３、ｃ３の映出体である山（背景）よりも前方
に浮き出た状態で観察することが出来る。

【００９２】次に、現フィールドが図４（ｂ）の映像の
時も、具体的な説明は省略するが、ＣＰＵ８は前述の現
フィールドが図４（ａ）の映像の時と同様の動作を行
い、ステップＳ７あるいはステップＳ９において、動き
ベクトルｃ３’の映出体が動きベクトルｂ３’、ｄ３’
の映出体よりも前に位置すると判断し、右目用の映像信
号を遅延された映像信号とすべきであると判定し、ま
た、動きベクトルｃ４’の映出体が動きベクトルｂ
４’、ｄ４’の映出体よりも前に位置すると判断し、右
目用の映像信号を遅延された映像信号とすべきであると
判定する。

【００９３】そして、ステップＳ１１において、４個の
判定結果が全て、右目用の映像信号を遅延された映像信
号とすべきであると判定しているため、ステップＳ１２
において、右目用映像信号が遅延された映像信号となる
ように映像切換回路２を切り換え制御する。

【００９４】これにより、観察者は動きベクトルｃ３’
の映出体である鳥（被写体）を動きベクトルｂ３’、ｄ
３’の映出体である山（背景）よりも前方に浮き出た状
態で観察することが出来る。

【００９５】次に、図５に示す第２のシーンの映像にお
いて、現フィールドが図５（ａ）の映像である場合、第
１行目、第２行目の全ての動きベクトル検出領域Ａ１、
Ｂ１、Ｃ１、Ｄ１、Ａ２、Ｂ２、Ｃ２、Ｄ２では画面
上、右方向に移動する家等の背景を検出するため、その
動きベクトルａ１、ｂ１、ｃ１、ｄ１、ａ２、ｂ２、ｃ
２、ｄ２は全て同じ大きさの右方向のベクトルとなる。
従って、この動きベクトル検出領域では、左右に隣接す
る検出領域で検出された動きベクトルは全てにおいて大
きさが等しく、ＣＰＵ８はステップＳ１、ステップＳ
２、ステップＳ３の動作を繰り返す。

【００９６】そして、第３行目の動きベクトル検出領域
では、左から１番目、３番目、４番目の検出領域Ａ３、
Ｃ３、Ｄ３では家等の背景を検出するため、動きベクト
ルａ３、ｃ３、ｄ３は同じ大きさの右方向のベクトルと
なり、左から２番目の検出領域Ｂ３では画面上、不動状
態であるバスを検出するため、動きベクトルｂ３は０と
なる。

【００９７】従って、ステップＳ１では、左右に隣接す
る動きベクトル検出領域で検出された動きベクトルａ３
と動きベクトルｂ３とは同じでないと判断し（Ｎ）、ス
テップＳ４に進む。

【００９８】ステップＳ４では、動きベクトルａ３と動
きベクトルｂ３のうち、大きい方の動きベクトルａ３が
小さい方の動きベクトルｂ３を向いているか否かを判定
する。ここでは、動きベクトルａ３が動きベクトルｂ３
の方を向いているため、ステップＳ５に進む。

【００９９】ステップＳ５では、所定時間経過後に小さ
い方の動きベクトルｂ３が大きい方の動きベクトルａ３
の影響を受けるかを判定する。ここでは、所定時間経過
後に、図５（ｂ）に示すように、動きベクトルｂ３’は
０のまま変化しないため、小さい方の動きベクトルｂ３
は大きい方の動きベクトルａ３の影響を受けないと判定
し（Ｎ）、ステップＳ８に進む。

【０１００】従って、ステップＳ８において、大きい方
の動きベクトルａ３の映出体が小さい方の動きベクトル
ｂ３の映出体よりも後方に位置すると判断し、大きい方
の動きベクトルｂ３が向いている右方向とは反対側の
目、即ち左目用の映像信号を遅延された映像信号とする
べきであると判定し、ステップＳ２に進む。

【０１０１】ステップＳ２では、１画面の全ての動きベ
クトル比較が終了していないと判断し（Ｎ）、ステップ
Ｓ３で次の動きベクトルの検出領域に移行し、ステップ
Ｓ１に戻る。

【０１０２】ステップＳ１では、第３行目の左から２番
目の動きベクトルｂ３と左から３番目の動きベクトルｃ
３とを比較し、動きベクトルｂ３と動きベクトルｃ３と
は同じではないと判断し（Ｎ）、ステップＳ４に進む。

【０１０３】ステップＳ４では、動きベクトルｂ３と動
きベクトルｃ３のうち、大きい方の動きベクトルｃ３が
小さい方の動きベクトルｂ３を向いているか否かを判定
する。ここでは、動きベクトルｃ３が動きベクトルｂ３
の方を向いていないため、ステップＳ６に進む。

【０１０４】ステップＳ６では、所定時間経過後に大き
い方の動きベクトルｃ３が小さい方の動きベクトルｂ３
の影響を受けるかを判定する。ここでは、所定時間経過
後に、図５（ｂ）に示すように、動きベクトルｃ３’が
動きベクトルｃ３のまま変化していないため、大きい方
の動きベクトルｃ３は小さい方の動きベクトルｂ３の影
響を受けないと判定し（Ｎ）、ステップＳ１０に進む。

【０１０５】従って、ステップＳ１０において、大きい
方の動きベクトルｃ３の映出体が大きい方の動きベクト
ルｂ３の映出体よりも後方に位置すると判断し、大きい
方の動きベクトルｂ３が向いている右方向と反対側の
目、即ち左目用の映像信号を遅延された映像信号とする
べきであると判定する。

【０１０６】そして、ステップＳ２において、最後の動
きベクトル比較ではないと判断し（Ｎ）、ステップＳ３
で次の動きベクトルの検出領域に移行し、ステップＳ１
に戻る。

【０１０７】ステップＳ１では、第３行目の左から３番
目の動きベクトルｃ３と左から４番目の動きベクトルｄ
３とを比較し、動きベクトルｃ３と動きベクトルｄ３と
は同じであると判断し（Ｙ）、ステップＳ１に戻る。

【０１０８】そして、ステップＳ１では、第４行目の動
きベクトル検出領域についての動作を行う。第４行目の
動きベクトル検出領域では、第３行目の動きベクトル検
出領域と同様に、左から１番目、３番目、４番目の検出
領域Ａ４、Ｃ４、Ｄ４では画面上、左方向に移動する家
等の背景を検出するため、動きベクトルａ４、ｃ４、ｄ
４は同じ大きさの右方向のベクトルとなり、また、右か
ら２番目の検出領域Ｂ４では画面上、不動状態であるバ
スを検出するため、動きベクトルｂ４は０となる。

【０１０９】従って、ＣＰＵ８は第３行目に対する動作
と同じ動作をし、動きベクトルａ４と動きベクトルｂ４
との比較では、動きベクトルａ４の映出体が動きベクト
ルｂ４の映出体よりも後方に位置すると判断し、左目用
映像信号を遅延された映像信号とすべきであると判定す
る。

【０１１０】また、動きベクトルｂ４と動きベクトルｃ
４との比較では、動きベクトルｃ４の映出体が動きベク
トルｂ４の映出体よりも後方に位置すると判断し、左目
用映像信号を遅延された映像信号とすべきであると判定
する。

【０１１１】そして、動きベクトルｃ４と動きベクトル
ｄ４との比較を終えた後、ステップＳ２において、１画
面の全ての動きベクトル比較が終了したと判断し
（Ｙ）、ステップＳ１１に進む。

【０１１２】ステップＳ１１では、前述の動作で得られ
た４個の判定結果を比較する。ここでは、４個の判定結
果が全て、左目用映像信号を遅延された映像信号とすべ
きであると判定しているため、全ての判定結果が同じで
あると判定して（Ｙ）ステップＳ１２に進む。

【０１１３】ステップＳ１２では、前記判定結果に従っ
て、左目用映像信号が遅延された映像信号となるように
映像切換回路２を切り換え制御する。これにより、観察
者は動きベクトルａ３、ｃ３、ａ４、ｃ４の映出体であ
る家等（背景）が動きベクトルｂ３、ｂ４の映出体であ
るバス（被写体）よりも後方に位置するように観察する
ことが出来る。

【０１１４】次に、現フィールドが図５（ｂ）の映像の
場合も、具体的な説明は省略するが、ＣＰＵ８は前述の
現フィールドが図５（ａ）の映像の場合と同様の動作を
行い、ステップＳ８あるいはステップＳ１０において、
動きベクトルａ３’、ｃ３’の映出体が動きベクトルｂ
３’の映出体よりも後方に位置すると判断し、左目用映
像信号を遅延された映像信号とすべきであると判定し、
また、動きベクトルａ４’、ｃ４’の映出体が動きベク
トルｂ４’の映出体よりも後方に位置すると判断し、左
目用映像信号を遅延された映像信号とすべきであると判
定する。

【０１１５】そして、ステップＳ１１において、４個の
判定結果が全て、左目用映像信号を遅延された映像信号
とすべきであると判定しているため、ステップＳ１２に
おいて、左目用映像信号が遅延された映像信号となるよ
うに映像切換回路２を切り換え制御する。

【０１１６】これにより、観察者は動きベクトルａ
３’、ｃ３’、ａ４’、ｃ４’の映出体である家等（背
景）が動きベクトルｂ３’、ｂ４’の映出体であるバス
（被写体）よりも後方に位置するように観察することが
出来る。

【０１１７】尚、上述の図４及び図５の例では、ステッ
プＳ７、ステップＳ８、ステップＳ９及びステップＳ１
０で得られた判定結果が全て同じであるため、ステップ
Ｓ１２に進んだが、元になる２次元映像の被写体の動き
が複雑であったり、動きベクトルの検出に誤動作が生じ
た場合、ステップＳ７、ステップＳ８、ステップＳ９及
びステップＳ１０で得られた判定結果の中には異なる結
果がある場合がある。この場合、ステップＳ１１では、
判定結果が全て同じではないと判定して（Ｎ）動作を終
了する。

【０１１８】従って、ステップＳ７、ステップＳ８、ス
テップＳ９及びステップＳ１０で得られた判定結果の中
に異なる結果があるフィールドにおいては、ＣＰＵ８は
映像切換回路２を切り換え制御せず、現在の切り換え状
態を保持する。

【０１１９】また、上述の実施例では、１フィールドの
映像毎に動きベクトルを検出しているが、１フレームの
映像、あるいは数フィールドの映像毎に動きベクトルを
検出しても良い。尚、本発明の広い意味では、これら１
フレーム、数フィールドのことを含めて１フィールドと
表現している。

【０１２０】次に、本発明の第２実施例について詳細に
説明する。図６は第２実施例の３次元映像ソフト変換シ
ステムの要部概略ブロック図であり、第１実施例の図１
と同一部分には同一符号を付し、その説明は割愛する。

【０１２１】図６に示すように、第２実施例の３次元映
像ソフト変換システムの回路構成は第１実施例と略同一
であり、動きベクトル検出回路７’及びＣＰＵ８’の動
作において第１実施例とは異なる。

【０１２２】動きベクトル検出回路７’は、図７に示す
ように、１フィールドを構成する画面のうち、上下方向
を５分割、左右方向を８分割してなる４０個の検出領域
Ａ１、Ｂ１、Ｃ１・・・Ｈ１、Ａ２、Ｂ２、Ｃ２・・・
Ｈ２、Ａ３、Ｂ３、Ｃ３・・・Ｈ３、Ａ４、Ｂ４、Ｃ４
・・・Ｈ４、Ａ５、Ｂ５、Ｃ５・・・Ｈ５で代表点マッ
チング法により動きベクトルを検出している。

【０１２３】ＣＰＵ８’は前記動きベクトル検出回路
７’により検出された動きベクトルより水平成分（以
後、単に動きベクトルという）を抽出し、この抽出され
た動きベクトルに基づいて図８に示す第１段階〜第７段
階の動作を行い、元の２次元映像において動いている対
象物（映出体）が被写体であるか、背景であるかを判定
し、この判定結果に基づいて映像切換回路２及びメモリ
制御回路６の制御を行う。

【０１２４】図９は入力した２次元映像信号の時間の流
れを模式的に示す図、図１０及び図１１図はＣＰＵ８’
のフィールド周期の動作を示すフローチャートである。
以下、図１０、図１１に従って、図９に示した第１段階
〜第７段階の動作について説明する。

【０１２５】［第１段階］先ず、ステップＳ１におい
て、入力した元の２次元映像にシーンの変化（シーンチ
ェンジ）があるか否かを検出する。ステップＳ１におい
て、シーンの変化があると判定されると（Ｙ）、ステッ
プＳ１６において、フィールドメモリ５の遅延量及び遅
延量の目標値を０に設定し、更に、ステップＳ１７にお
いて、ＣＰＵ８’にうち被写体／背景の判定に使用する
構造体の変数を初期化する。尚、遅延量の目標値とは、
判定後、すぐにメモリ制御回路６を制御するのではな
く、数フィールドの検出を行い、安定した判定結果が得
られてからメモリ制御回路６を制御するためのものであ
る。

【０１２６】次に、ステップＳ１において、シーンの変
化が無いと判定されると（Ｎ）、ステップＳ２におい
て、テレシネモードの判定、安定化を行う。テレシネモ
ードの判定とは、元の２次元映像信号に映画フィルムを
テレビジョン信号に変換（テレシネ変換）することによ
って作成された信号があるか否かを判定することであ
る。また、テレシネモードの安定化とは、上記テレシネ
モードの判定によりテレシネ変換された信号があると確
認された場合、その確認されたフィールドより６０フィ
ールドの期間はテレシネ変換された信号の期間、即ちテ
レシネモードであるとする動作である。尚、後述するス
テップＳ１５において、遅延量の目標値を算出する際、
テレシネモードであるか否かによって算出方法が異な
り、テレシネモードの判定結果が頻繁に変化すると、遅
延量の目標値も頻繁に変化するため、それを避けるため
テレシネモードの安定化を行っている。

【０１２７】以上が第１段階の動作である。次に、第２
段階以降の動作を説明する前に、ステップＳ３〜ステッ
プＳ９の動作について簡単に説明する。ステップＳ３は
現フィールドが１フィールド目であるか否かを、ステッ
プＳ４は現フィールドが２フィールド目であるか否か
を、ステップＳ５は現フィールドが３フィールド目であ
るか否かを、ステップＳ６は現フィールドが４フィール
ド目であるか否かを、ステップＳ７は現フィールドが５
フィールド目であるか否かを、ステップＳ８は現フィー
ルドが６フィールド目であるか否かを、ステップＳ９は
現フィールドが７〜９フィールド目であるか否かを夫々
判定するステップであるが、フィールドのカウント数
は、ステップＳ１でシーンの変化があると判定され、ス
テップＳ１７で構造体の変数の初期化が行われる時点を
基準に１０フィールド経過毎にリセットされるように設
定されている。

【０１２８】従って、図８に示すように、シーンの変化
が起こってから１０フィールド毎にフィールド数のカウ
ント数がリセットされる。即ち、ステップＳ３における
１フィールド目とは、実質的にはシーンの変化が起こっ
たフィールドから（１０ｎ＋１）フィールド目を意味
し、同様に、ステップＳ４〜Ｓ９における２フィールド
目はシーンの変化が起こったフィールドから（１０ｎ＋
２）フィールド目を、３フィールド目はシーンの変化が
起こったフィールドから（１０ｎ＋３）フィールド目
を、・・・９フィールド目はシーンの変化が起こったフ
ィールドから（１０ｎ＋９）フィールド目を夫々意味す
る。但し、ｎは０を含む自然数である。

【０１２９】但し、シーンの変化が起こったフィールド
から１〜２０フィールド目の間では、図９に示すよう
に、ステップＳ１８、ステップＳ１９により遅延量の目
標値が必ず０に設定される。

【０１３０】第２段階以降の動作について説明する。ス
テップＳ２の動作が終了し、ステップＳ３において、現
フィールドが１フィールド目であると判定されると
（Ｙ）、第２段階の動作であるステップＳ１０に移行す
る。

【０１３１】［第２段階］ステップＳ１０では、直前の
１０フィールド期間において検出された動きベクトルの
累積和、及び相関値（ＡＶＥ、ＭＩＮ）の累積和を取り
込む。尚、直前の１０フィールド期間とは、現フィール
ドがシーンの変化が起こったフィールドから２１フィー
ルド目の時には１１フィールド目から２０フィールド目
までの１０フィールド期間のことである。尚、相関値と
は、各検出領域における代表点の前フィールドと現フィ
ールドでの輝度レベルの差であり、その平均値をＡＶ
Ｅ、最小値をＭＩＮとする。

【０１３２】また、累積和を１０フィールドとした理由
は、（１）テレシネパターンには、２−２、２−３プル
ダウン方式等の通常のパターンとは異なるものがある。
例えば、２−２プルダウン方式とは、２フィールドに１
回映像が変化することを意味する。つまり、２フィール
ドの間は同じ映像が流れ、その時の動きベクトルは０で
ある。このように動きベクトルが０になるフィールドが
あるため、数フィールドの累積和を使用する必要があ
る。（２）上記のテレシネパターンに対応するために、
２と５（２−３プルダウン方式は５フィールド周期であ
る）の最小公倍数で１０フィールドとする。

【０１３３】次に、ステップＳ１８において、現フィー
ルドがステップＳ１でシーンの変化があると判定してか
ら２０フィールド以内であるか否かを判定する。現フィ
ールドが１フィールド目あるいは１１フィールド目であ
る場合は、２０フィールド以内であると判定され
（Ｙ）、ステップＳ１９において遅延量の目標値を０に
設定し、現フィールドでの動作を終了する。また、現フ
ィールドが２１フィールド目、３１フィールド目、４１
フィールド目・・・の時には、ステップＳ１８におい
て、２０フィールド以内で無いと判定され（Ｎ）、直に
現フィールドでの動作を終了する。

【０１３４】以上が第２段階の動作であり、次のフィー
ルドになると、ステップＳ３において、現フィールドが
１フィールド目でないと判定され（Ｎ）、ステップＳ４
において、現フィールドが２フィールド目であると判定
され（Ｙ）、第３段階の動作であるステップＳ１１に移
行する。

【０１３５】［第３段階］ステップＳ１１では、ステッ
プＳ１０で取り込まれた１０フィールド期間の動きベク
トルの累積和について、各検出領域毎にＮＧ領域（誤り
領域）の判別を行う。ＮＧ領域とは、検出領域で得られ
た動きベクトルの信頼性が低い、または映像の動きに関
与していない動きベクトルを持つ領域のことである。

【０１３６】このＮＧ領域の判別方法としては、以下の
（１）、（２）、（３）に示す方法を行っている。 （１）検出領域の相関値の平均値ＡＶＥが相対的に低
く、１０フィールド期間で累積された４０個の検出領域
の相関値の平均値ＡＶＥの１／５以下の領域をＮＧ領域
とする。

【０１３７】（２）検出領域の相関値の平均値ＡＶＥが
低く、累積和が２００以下の領域をＮＧ領域とする。 （３）最下段の検出領域Ａ５、Ｂ５、Ｃ５・・・Ｈ５
で、動きベクトルの累積和の大きさが０であるとき、字
幕の可能性があるため、その領域をＮＧ領域とする。

【０１３８】尚、（１）の定数１／５はシミュレーショ
ンにより決定した値である。また、（２）の定数２００
はブルーバックと一般の映像での相関値の値を比較し、
ブルーバックのときだけは、ほとんど領域をＮＧ領域と
するための値である。

【０１３９】ステップＳ１１でＮＧ領域の判別が行われ
ると、ステップＳ１８において、現フィールドが２フィ
ールド目あるいは１２フィールド目である場合は、２０
フィールド以内であると判定され（Ｙ）、ステップＳ１
９において遅延量の目標値を０に設定し、現フィールド
での動作を終了する。また、現フィールドが２２フィー
ルド目、３２フィールド目、４２フィールド目・・・の
時には、ステップＳ１８において、２０フィールド以内
で無いと判定され（Ｎ）、直に現フィールドでの動作を
終了する。

【０１４０】以上が第３段階の動作であり、次のフィー
ルドになると、ステップＳ４において、現フィールドが
２フィールド目でないと判定され（Ｎ）、ステップＳ５
において、現フィールドが３フィールド目であると判定
され（Ｙ）、第４段階及び第５段階の動作であるステッ
プＳ１２に移行する。

【０１４１】［第４段階］ステップＳ１２では、ステッ
プＳ１１でＮＧ領域では無いと判定された有効な検出領
域に関して、動きベクトルの最大値と最小値との差を８
分割し、この８分割された夫々の範囲における検出領域
の数を求め、図１２に示すような動きベクトルの大きさ
のヒストグラムを作成する。尚、ここで云う動きベクト
ルの大小関係は、左から右に向いている動きベクトルを
正の動きベクトル、右から左に向いている動きベクトル
を負の動きベクトルとして定めている。そして、このヒ
ストグラムにおいて、８分割された範囲のうち検出領域
数が１個であり、且つ大小どちらか一方の隣に検出領域
数が０である範囲が存在する範囲の領域は、疑わしい検
出領域としてヒストグラムから取り除く。図１２におい
ては、γの部分が取り除かれる。

【０１４２】以上が第４段階の動作であり、ステップＳ
１２では、引き続き第５段階の動作を行う。 ［第５段階］第４段階で作成されたヒストグラムにおい
て、図１２に示すように、最小値αと最大値βとの平均
値（α＋β）／２を分割レベルとし、この分割レベルよ
りも小さい動きベクトルが検出された検出領域をＬブロ
ックと、分割レベルよりも大きい動きベクトルが検出さ
れた検出領域をＨブロックと夫々定義する。

【０１４３】以上でステップＳ１２での動作が終了し、
ステップＳ１８において、現フィールドが３フィールド
目あるいは１３フィールド目である場合は、２０フィー
ルド以内であると判定され（Ｙ）、ステップＳ１９にお
いて遅延量の目標値を０に設定し、現フィールドでの動
作を終了する。また、現フィールドが２３フィールド
目、３３フィールド目、４３フィールド目・・・の時に
は、ステップＳ１８において、２０フィールド以内で無
いと判定され（Ｎ）、直に現フィールドでの動作を終了
する。

【０１４４】以上が第５段階の動作であり、次のフィー
ルドになると、ステップＳ５において、現フィールドが
３フィールド目でないと判定され（Ｎ）、ステップＳ６
において、現フィールドが４フィールド目であると判定
され（Ｙ）、第６段階の前半の動作である判別Ａを行う
ステップＳ１３に移行する。

【０１４５】［第６段階］ステップＳ１３では判別Ａと
いう第１の被写体／背景判別を行う。判別Ａでは、動き
ベクトルの検出領域のうち、図１３の斜線領域である上
端、左端、右端の１６個の検出領域Ａ１、Ｂ１、Ｃ１、
Ｄ１、Ｅ１、Ｆ１、Ｇ１、Ｈ１、Ａ２、Ａ３、Ａ４、Ａ
５、Ｈ２、Ｈ３、Ｈ４、Ｈ５を第１の領域として注目す
る。

【０１４６】通常の映像では、背景は画面の端の部分に
映っている場合が多い。従って、画面の端である前記第
１の領域において、前述のＬブロックの領域数とＨブロ
ックの領域数とをカウントして比較し、その数が多い方
のブロックの領域を４０個の検出領域全体において背景
領域（後方領域）と判別する。また、背景領域以外の検
出領域を被写体領域（前方領域）と判別する。

【０１４７】即ち、例えば、第１の領域において、Ｌブ
ロックの領域数の方がＨブロックの領域数よりも多い場
合は、４０個の検出領域全体においてＬブロックの検出
領域を背景領域と判別し、Ｈブロックの検出領域を被写
体領域と判別する。

【０１４８】尚、第１の領域において、Ｌブロックの領
域数とＨブロックの領域数とが等しい場合は、判別Ａで
の第１の被写体／背景判別は行わない。以上がステップ
Ｓ１３で行う判別Ａの動作であり、このステップＳ１３
が終了すると、ステップＳ１８において、現フィールド
が４フィールド目あるいは１４フィールド目である場合
は、２０フィールド以内であると判定され（Ｙ）、ステ
ップＳ１９において遅延量の目標値を０に設定し、現フ
ィールドでの動作を終了する。また、現フィールドが２
４フィールド目、３４フィールド目、４４フィールド目
・・・の時には、ステップＳ１８において、２０フィー
ルド以内で無いと判定され（Ｎ）、直に現フィールドで
の動作を終了する。

【０１４９】次のフィールドになると、ステップＳ６に
おいて、現フィールドが４フィールド目でないと判定さ
れ（Ｎ）、ステップＳ７において、現フィールドが５フ
ィールド目であると判定され（Ｙ）、第６段階の後半の
動作である判別Ｂ、判別Ｃを行うステップＳ１４に移行
する。

【０１５０】ステップＳ１４では判別Ｂという第２の被
写体／背景判別と、判別Ｃという第３の被写体／背景判
別と、判別Ａ、Ｂ、Ｃより得られた判別結果から最終的
な被写体／背景判別を行う。

【０１５１】判別Ｂでは、動きベクトルの検出領域のう
ち、図１４の斜線領域である中央の４個の検出領域Ｄ
３、Ｅ３、Ｄ４、Ｅ４を第２の領域として注目する。通
常の映像では、被写体は画面の中央の部分に映っている
場合が多い。従って、画面の中央である前記第２の領域
において、前述のＬブロックの領域数とＨブロックの領
域数とをカウントして比較し、その数が多い方のブロッ
クの領域を４０個の検出領域全体において被写体領域
（前方領域）と判別する。また、被写体領域以外の検出
領域を背景領域（後方領域）と判別する。

【０１５２】即ち、例えば、第２の領域において、Ｈブ
ロックの領域数の方がＬブロックの領域数よりも多い場
合は、４０個の検出領域全体においてＨブロックの検出
領域を被写体領域と判別し、Ｌブロックの検出領域を背
景領域と判別する。

【０１５３】尚、第２の領域において、Ｌブロックの領
域数とＨブロックの領域数とが等しい場合は、判別Ｂで
の第２の被写体／背景判別は行わない。以上が判別Ｂの
動作であり、この判別Ｂの動作が終了すると、判別Ａ、
判別Ｂの判別結果を比較し、両者の判別結果が等しい場
合は、その結果を最終的な被写体／背景判別の結果と
し、以上でステップＳ１４の動作を終了する。また、両
者の判別結果が異なる場合は、次の判別Ｃを行う。

【０１５４】即ち、例えば、判別Ａ、Ｂの両方で、Ｌブ
ロックの領域が背景領域であり、Ｈブロックの領域が被
写体領域であると判別された場合、Ｌブロックの領域が
背景領域、Ｈブロックの領域が背景領域を最終的な被写
体／背景判別の結果とし、ステップＳ１４の動作を終了
する。

【０１５５】また、例えば、判別ＡではＬブロックの領
域が背景領域であり、Ｈブロックの領域が被写体領域で
あると判別され、判別Ｂでは判別Ａとは逆にＬブロック
の領域が被写体領域であり、Ｈブロックの領域が背景領
域であると判別された場合は、次の判別Ｃを行う。

【０１５６】また、第１、第２の検出領域のどちらか一
方において、Ｌブロックの領域数とＨブロックの領域数
が等しく、判別Ａまたは判別Ｂのどちらか一方しか行わ
れない場合は、行われた一方の判別の結果を最終的な被
写体／背景判別の結果とする。

【０１５７】また、第１、第２の検出領域の両方におい
て、Ｌブロックの領域数とＨブロックの領域数とが等し
く、判別Ａ、判別Ｂの両方とも行われない場合は、次の
判別Ｃを行う。

【０１５８】判別Ｃでは、先ず、４０個全ての検出領域
において、Ｌブロックの領域数とＨブロックの領域数と
を比較し、領域数の少ない方のブロックを検出する。次
に、この領域数の少ない方のブロックに注目し、この注
目されたブロックの４０個の検出領域全体にある領域数
に対して第１の検出領域にある領域数の割合、即ち（第
１の検出領域での注目ブロックの領域数）／（４０個の
検出領域での注目ブロックの領域数）を求め、その割合
がが所定値以上の場合は、そのブロックの領域を背景領
域（後方領域）と判別する。また、それ以外の場合は、
前記領域数の少ない方のブロックの領域を被写体領域
（前方領域）とする。そして、この判別Ｃによる判別結
果を最終的な被写体／背景判別の判別結果とする。

【０１５９】本実施例では前記所定値を０．４５として
おり、この値は多数の様々の映像に対して実験を行うこ
とにより得られた値である。尚、判別Ａと判別Ｂとで異
なる判別結果が得られるのは、被写体が画面の端に位置
する場合が多く、判別Ｃは、大きい被写体が画面の端に
映っている場合には、背景領域は画面全体においては領
域数が少ないが、そのうち画面の端を占める割合が所定
値以上になるという考えに基づいていおり、また、小さ
い被写体が画面の端に映っている場合には、被写体領域
は画面全体においては領域数が少なく、そのうち画面の
端を占める割合も所定値より小さくなるという考えに基
づいている。

【０１６０】以上がステップＳ１４で行う判別Ｂ、判別
Ｃの動作であり、このステップＳ１４が終了すると、ス
テップＳ１８において、現フィールドが５フィールド目
あるいは１５フィールド目である場合は、２０フィール
ド以内であると判定され（Ｙ）、ステップＳ１９におい
て遅延量の目標値を０に設定し、現フィールドでの動作
を終了する。また、現フィールドが２５フィールド目、
３５フィールド目、４５フィールド目・・・の時には、
ステップＳ１８において、２０フィールド以内で無いと
判定され（Ｎ）、直に現フィールドでの動作を終了す
る。

【０１６１】次のフィールドになると、ステップＳ７に
おいて、現フィールドが５フィールド目でないと判定さ
れ（Ｎ）、ステップＳ８において、現フィールドが６フ
ィールド目であると判定され（Ｙ）、第７段階の動作を
行うステップＳ１５に移行する。

【０１６２】［第７段階］ステップＳ１５では、前述の
第５段階の最終的な被写体／背景判別によって被写体領
域である判別されたブロックにおける１０フィールド期
間の動きベクトルの累積和を求め、この累積和を前記被
写体領域のブロック数で除算することにより累積和の平
均値ＨＩを求める。また、背景領域であると判別された
ブロックにおいても１０フィールド期間の動きベクトル
の累積和を求め、この累積和を前記背景領域のブロック
数で除算することにより累積和の平均値ＨＡを求める。

【０１６３】尚、元になる２次元映像がテレシネ変換さ
れた映像である場合、動きベクトルのあるフィールドと
動きベクトルの無いフィールドが存在するため、前記平
均値ＨＩ、ＨＡを求める際には、前述の計算によって得
られた平均値を２倍（２−２プルダウン方式の場合）あ
るいは２．５倍（２−３プルダウン方式の場合）する必
要がある。

【０１６４】次に、被写体領域のブロックの動きベクト
ルの平均値ＨＩの絶対値と、背景領域のブロックの動き
ベクトルの平均値ＨＡの絶対値とを比較し、

【０１６５】

【数１】

【０１６６】の場合は、被写体領域のブロックの平均値
ＨＩの絶対値に基づいてフィールドメモリ５の遅延量の
目標値の絶対値を算出する。そして、前記平均値ＨＩが
正の値の時は、遅延量の目標値も正とし、前記平均値Ｈ
Ｉが負の値の時は、遅延量の目標値も負とする。

【０１６７】また、

【０１６８】

【数２】

【０１６９】の場合は、背景領域のブロックの平均値Ｈ
Ａの絶対値に基づいてフィールドメモリ５の遅延量の目
標値の絶対値を算出する。そして、前記平均値ＨＡが正
の値の時は、遅延量の目標値は負とし、前記平均値ＨＩ
が負の値の時は、遅延量の目標値は正とする。尚、元に
なる２次元映像の種類としては横流れ映像がある。この
横流れ映像とは、被写体、背景ともに明らかに同一方向
に動いている映像である。例えば、車窓から風景などを
撮影した際に、遠くの風景はゆっくりと、近くにあるも
のは早く流れていく映像である。元になる２次元映像が
このような横流れの映像である時には、前述の方法で求
められた遅延量の目標値をそのまま使用せずに以下の方
法で求められた値を使用する。

【０１７０】元になる２次元映像が右流れの映像である
時には、遅延量の目標値は大きさが前述の方法で求めら
れた遅延量の目標値の絶対値であり、符号は正とする。
また、元になる２次元映像が左流れの映像である時に
は、遅延量の目標値は大きさが前述の方法で求められた
遅延量の目標値の絶対値であり、符号は負である。

【０１７１】以上でステップＳ１５での動作が終了し、
ステップＳ１８において、現フィールドが６フィールド
目あるいは１６フィールド目である場合は、２０フィー
ルド以内であると判定され（Ｙ）、ステップＳ１９にお
いて遅延量の目標値を０に設定し、現フィールドでの動
作を終了する。また、現フィールドが２６フィールド
目、３６フィールド目、４６フィールド目・・・の時に
は、ステップＳ１８において、２０フィールド以内で無
いと判定され（Ｎ）、直に現フィールドでの動作を終了
する。

【０１７２】以上が第７段階の動作であり、次の３フィ
ールドの期間は、ステップＳ９において、現フィールド
が７〜９フィールド目であると判定され（Ｙ）、ステッ
プＳ１８に移行する。ステップＳ１８では、現フィール
ドが７〜９フィールド目あるいは１７〜１９フィールド
目である場合は、２０フィールド以内であると判定され
（Ｙ）、ステップＳ１９において遅延量の目標値を０に
設定し、現フィールドの動作を終了する。また、現フィ
ールドが２７〜２９フィールド目、３７〜３９フィール
ド目、４７〜４９フィールド目・・・の時には、ステッ
プＳ１８において、２０フィールド以内で無いと判定さ
れ（Ｎ）、直に現フィールドでの動作を終了する。

【０１７３】そして、次の１０フィールド目では、ステ
ップＳ９において、現フィールドが現フィールドが７〜
９フィールド目でないと判定され（Ｎ）、ステップＳ２
０においてフィールドカウンタをリセットする。このス
テップＳ２０の動作により、前述したように、フィール
ドのカウント数は、ステップＳ１でシーンの変化がある
と判定され、ステップＳ１７で構造体の変数の初期化が
行われる時点を基準に１０フィールド経過毎にリセット
される。

【０１７４】以上が図８に示した第１段階〜第７段階の
動作であり、１０フィールド周期で繰り返し行われる。
図１５及び図１６は第５段階〜第７段階の動作における
判別Ａ、判別Ｂ、判別Ｃ、及び遅延量決定の流れを示す
図である。

【０１７５】ステップＳ２１は判別Ａの動作を行うステ
ップであり、図１３に示した第１の領域におけるＨブロ
ックの領域数とＬブロックの領域数とを比較し、Ｈブロ
ックの領域数の方が多い場合はステップＳ２２に進み、
両者の領域数が等しい場合はステップＳ２３に進み、Ｌ
ブロックの領域数の方が多い場合はステップＳ２４に進
む。 ステップＳ２２、Ｓ２３、Ｓ２４は判別Ｂの動作
を行うステップであり、図１４に示した第２の領域にお
けるＨブロックの領域数とＬブロックの領域数とを比較
するステップである。ステップＳ２２において、Ｈブロ
ックの領域数の方が多い場合はステップＳ２５に進み、
両者の領域数が等しい場合あるいはＬブロックの領域数
の方が多い場合は、Ｈブロックの領域が背景領域、Ｌブ
ロックの領域が被写体領域であるを最後の被写体／背景
判別の判別結果（ｅ）（ｆ）とする。

【０１７６】また、ステップＳ２３において、Ｈブロッ
クの領域数の方が多い場合は、Ｈブロックの領域が被写
体領域、Ｌブロックの領域が背景領域であるを最後の被
写体／背景判別の判別結果（ｇ）とし、両者の領域数が
等しい場合はステップＳ２６に進み、Ｌブロックの領域
数の方が多い場合は、Ｈブロックの領域が背景領域、Ｌ
ブロックの領域が被写体領域であるを最後の被写体／背
景判別の判別結果（ｌ）とする。 また、ステップＳ２
４において、Ｈブロックの領域数の方が多い場合あるい
は両者の領域数が等しい場合は、Ｈブロックの領域が被
写体領域、Ｌブロックの領域が背景領域であるを最後の
被写体／背景判別の判別結果（ｍ）（ｎ）とし、Ｌブロ
ックの領域数の方が多い場合はステップＳ２７に進む。

【０１７７】次に、ステップＳ２５、Ｓ２６、Ｓ２７
は、判別Ｃの前半の動作を行うステップであり、４０個
の検出領域全体においてＨブロックの領域数とＬブロッ
クの領域数とを比較し、領域数の少ない方のブロックを
判別する。ステップＳ２５、Ｓ２６、Ｓ２７において、
Ｈブロックの領域数の方が少ない場合は夫々、ステップ
Ｓ２８、Ｓ３０、Ｓ３２に進み、Ｌブロックの領域数の
方が少ない場合は夫々、ステップＳ２９、Ｓ３１、Ｓ３
３に進む。

【０１７８】ステップＳ２８〜Ｓ３３は判別Ｃの後半の
動作を行うステップであり、領域数の少ない方のブロッ
クに注目し、４０個の検出領域全体内にある領域数のう
ち第１の領域にある領域数の割合が０．４５以上である
か否かを判別するステップである。ステップＳ２８、Ｓ
３０、Ｓ３２において、領域数の少ないＨブロックの前
記割合が０．４５以上である場合、あるいはステップＳ
２９、Ｓ３１、Ｓ３３において、領域数の少ないＬブロ
ックの第１の領域に占める割合が０．４５より小さい場
合は、Ｈブロックの領域が背景領域、Ｌブロックの領域
が被写体ブロックであると判定し、これを最後の被写体
／背景判別の判別結果（ａ）（ｈ）（ｏ）（ｄ）（ｋ）
（ｒ）とする。

【０１７９】また、ステップＳ２８、Ｓ３０、Ｓ３２に
おいて、領域数の少ないＨブロックの第１の領域に占め
る割合が０．４５より小さい場合、あるいはステップＳ
２９、Ｓ３１、Ｓ３３において、領域数の少ないＬブロ
ックの第１の領域に占める割合が０．４５以上である場
合は、Ｈブロックの領域が被写体領域、Ｌブロックの領
域が背景領域であると判定し、これを最後の被写体／背
景判別の判別結果（ｂ）（ｉ）（ｐ）（ｃ）（ｊ）
（ｑ）とする。

【０１８０】図１６におけるステップＳ３４〜Ｓ５１は
夫々、遅延量の決定を行うステップであり、Ｈブロック
の検出領域における動きベクトルの平均値（平均動きベ
クトル）の絶対値とＬブロックの検出領域における動き
ベクトルの平均値（平均動きベクトル）の絶対値とを比
較するステップである。

【０１８１】具体的には、Ｈブロックの検出領域が被写
体領域、Ｌブロックの検出領域が背景領域である判別結
果（ｂ）（ｃ）（ｇ）（ｉ）（ｊ）（ｍ）（ｎ）（ｐ）
（ｑ）である場合、Ｈブロックの検出領域における平均
動きベクトルの絶対値の方が大きい場合は、遅延量は被
写体領域であるＨブロックの検出領域における平均動き
ベクトルの絶対値により決定され、遅延の向きは前記平
均動きベクトルが向いている方の目の映像信号を遅延さ
せる（Ｉ）。また、Ｌブロックの検出領域における平均
動きベクトルの絶対値の方が大きい場合は、遅延量は背
景領域であるＬブロックの検出領域における平均動きベ
クトルの絶対値により決定され、遅延の向きは前記平均
動きベクトルが向いている方と逆の方の目の映像信号を
遅延させる（II）。

【０１８２】また、Ｈブロックの検出領域が背景領域、
Ｌブロックの検出領域が被写体領域である判別結果
（ａ）（ｄ）（ｅ）（ｆ）（ｈ）（ｋ）（ｌ）（ｏ）
（ｒ）である場合、Ｌブロックの検出領域における平均
動きベクトルの絶対値の方が大きい場合は、遅延量は被
写体領域であるＬブロックの検出領域における平均動き
ベクトルの絶対値により決定され、遅延の向きは前記平
均動きベクトルが向いている方の目の映像信号を遅延さ
せる（III）。また、Ｈブロックの検出領域における平
均動きベクトルの絶対値の方が大きい場合は、遅延量は
背景領域であるＨブロックの検出領域における平均動き
ベクトルの絶対値により決定され、遅延の向きは前記平
均動きベクトルが向いている方と逆の方の目の映像信号
を遅延させる（IV）。

【０１８３】次に、図１７〜図３０に示す具体的な映像
について第３段階〜第７段階の動作を図１５、図１６の
流れ従い説明する。図１７（ａ）（ｂ）は被写体である
自動車が画面上において左から右に進む場合の１フィー
ルド目の映像と１０フィールド目の映像を示す図であ
る。このような映像の場合、動きベクトルの各検出領域
は、図１７（ｃ）に示すように、第３段階でＮＧ領域が
判定され、第４段階でＨブロックの検出領域とＬのブロ
ックの検出領域とに分割される。

【０１８４】このような映像の場合、図１８（ｂ）に示
すように、第１の領域におけるＨブロックの検出領域は
１個、Ｌブロックの検出領域は９個である。従って、図
１５のステップＳ２１の判別Ａにおいては、Ｌブロック
の検出領域の方が多いと判定され、ステップＳ２４に進
む。即ち、この時の判別Ａの判別結果は、Ｈブロックの
検出領域が被写体領域、Ｌブロックの検出領域が背景領
域である。

【０１８５】次に、図１８（ｃ）に示すように、第２領
域におけるＨブロックの検出領域は４個、Ｌブロックの
検出領域は０個である。従って、図１５のステップＳ２
４の判別Ｂにおいては、Ｈブロックの検出領域の方が多
いと判定され、最終の被写体／背景判別結果（ｍ）に進
む。即ち、この場合は、判別Ｂにおいても、判別Ａと同
様にＨブロックの検出領域が被写体領域、Ｌブロックの
検出領域が背景領域であると判別されるため、この判別
結果を最終的な判別結果としている。

【０１８６】次に、Ｈブロックの検出領域における平均
動きベクトルの絶対値と、Ｌブロックの検出領域におけ
る平均動きベクトルの絶対値とを比較した場合、Ｈブロ
ックの平均動きベクトルの方が大きいので、図１６のス
テップＳ４６において遅延量決定（Ｉ）に進む。即ち、
遅延量は被写体領域であるＨブロックの平均動きベクト
ルの絶対値により決定され、遅延の向きはＨブロックの
平均動きベクトルが向いている方側の目、即ち右目用の
映像信号を遅延させた映像信号とする。

【０１８７】これにより、図１７（ａ）（ｂ）の画面に
おいて、自動車の進んでいる方の目、即ち右目用の映像
が遅延された数フィールド前の映像となり、自動車が手
前側に位置する立体映像を表示することが出来る。

【０１８８】図１９（ａ）（ｂ）は背景である家が画面
上において左から右に移動する場合の１フィールド目の
映像と１０フィールド目の映像を示す図である。このよ
うな映像の場合、動きベクトルの各検出領域は、図１９
（ｃ）に示すように、第３段階でＮＧ領域が判定され、
第４段階でＨブロックの検出領域とＬのブロックの検出
領域とに分割される。

【０１８９】このような映像の場合、図２０（ｂ）に示
すように、第１の領域におけるＨブロックの検出領域は
１２個、Ｌブロックの検出領域は１個である。従って、
図１５のステップＳ２１の判別Ａにおいては、Ｈブロッ
クの検出領域の方が多いと判定され、ステップＳ２２に
進む。即ち、この時の判別Ａの判別結果は、Ｈブロック
の検出領域が背景領域、Ｌブロックの検出領域が被写体
領域である。

【０１９０】次に、図２０（ｃ）に示すように、第２の
領域におけるＨブロックの検出領域は０個、Ｌブロック
の検出領域は４個である。従って、図１５のステップＳ
２２の判別Ｂにおいては、Ｈブロックの検出領域の方が
多いと判定され、最終の被写体／背景判別結果（ｆ）に
進む。即ち、この場合は、判別Ｂにおいても、判別Ａと
同様にＨブロックの検出領域が背景領域、Ｌブロックの
検出領域が被写体領域であると判別されるため、この判
別結果を最終的な判別結果としている。

【０１９１】次に、Ｈブロックの検出領域における平均
動きベクトルの絶対値と、Ｌブロックの検出領域におけ
る平均動きベクトルの絶対値とを比較した場合、Ｈブロ
ックの平均動きベクトルの方が大きいので、図１６のス
テップＳ３９において遅延量決定（IV）に進む。即ち、
遅延量は背景領域であるＨブロックの平均動きベクトル
の絶対値により決定され、遅延の向きはＨブロックの平
均動きベクトルが向いている右側とは逆の左側の目、即
ち左目用の映像信号を遅延させた映像信号とする。

【０１９２】これにより、図１９（ａ）（ｂ）の画面に
おいて、家が移動している方とは逆の方の目、即ち左目
用の映像が遅延された数フィールド前の映像となり、家
が奥側に位置する立体映像を表示することが出来る。

【０１９３】以上が判別Ａと判別Ｂとの判別結果が等し
い場合の例である。次に、判別Ａと判別Ｂとの判別結果
が異なり、判別Ｃを行う例について説明する。

【０１９４】図２１（ａ）（ｂ）は被写体である小鳥が
画面上において左から右端に飛んでいる場合の１フィー
ルド目の映像と１０フィールド目の映像を示す図であ
る。このような映像の場合、動きベクトルの各検出領域
は、図２１（ｃ）に示すように、第３段階でＮＧ領域が
判定され、第４段階でＨブロックの検出領域とＬのブロ
ックの検出領域とに区別される。

【０１９５】このような映像の場合、図２２（ｂ）に示
すように、第１の領域におけるＨブロックの検出領域は
２個、Ｌブロックの検出領域は１１個である。従って、
図１５のステップＳ２１の判別Ａにおいては、Ｌブロッ
クの検出領域の方が多いと判定され、ステップＳ２４に
進む。即ち、この時の判別Ａの判別結果は、Ｈブロック
の検出領域が被写体領域、Ｌブロックの検出領域が背景
領域である。

【０１９６】次に、図２２（ｃ）に示すように、第２領
域におけるＨブロックの検出領域は１個、Ｌブロックの
検出領域は３個である。従って、図１５のステップＳ２
４の判別Ｂにおいては、Ｌブロックの検出領域の方が多
いと判定され、ステップＳ２７に進む。即ち、この時の
判別Ｂの判別結果は、Ｈブロックの検出領域が背景領
域、Ｌブロックの検出領域が被写体領域であり、判別Ａ
の結果とは逆の結果である。従って、ステップＳ２７の
判別Ｃに進む。

【０１９７】ステップＳ２７では、Ｈブロック、Ｌブロ
ックのうち４０個の検出領域全体における検出領域の少
ない方のブロックを検出する。即ち、Ｈブロックの領域
数は７個、Ｌブロックの領域数は２８個であるため、Ｈ
ブロックの方が少なく、ステップＳ３２に進む。

【０１９８】ステップＳ３２では、全体の領域数が少な
いＨブロックに注目し、図２２（ｂ）に示す第１の領域
にあるＨブロックの割合を求める。即ち、４０個の検出
領域全体におけるＨブロックの領域数は７個、第１の領
域におけるＨブロックの領域数は２個であるため、第１
領域にあるＨブロックの割合は２／７＝０．２８・・・
となり、０．４５よりも小さいため、最終の被写体／背
景判別結果（ｐ）に進む。即ち、Ｈブロックの検出領域
が被写体領域、Ｌブロックの検出領域が背景領域である
と判別されるため、この判別結果を最終的な判別結果と
している。

【０１９９】次に、Ｈブロックの検出領域における平均
動きベクトルの絶対値と、Ｌブロックの検出領域におけ
る平均動きベクトルの絶対値とを比較した場合、Ｈブロ
ックの平均動きベクトルの方が大きいので、図１６のス
テップＳ４９において遅延量決定（Ｉ）に進む。即ち、
遅延量は被写体領域であるＨブロックの平均動きベクト
ルの絶対値により決定され、遅延の向きはＨブロックの
平均動きベクトルが向いている右側の目、即ち右目用の
映像信号を遅延させた映像信号とする。

【０２００】これにより、図２１（ａ）（ｂ）の画面に
おいて、小鳥が飛んでいる方の目、即ち右目用の映像が
遅延された数フィールド前の映像となり、小鳥が手前側
に位置する立体映像を表示することが出来る。

【０２０１】図２３（ａ）（ｂ）は被写体であるバスが
画面上において右端から左に進んでいる場合の１フィー
ルド目の映像と１０フィールド目の映像を示す図であ
る。このような映像の場合、動きベクトルの各検出領域
は、図２３（ｃ）に示すように、第３段階でＮＧ領域が
判定され、第４段階でＨブロックの検出領域とＬのブロ
ックの検出領域とに分割される。

【０２０２】このような映像の場合、図２４（ｂ）に示
すように、第１の領域におけるＨブロックの検出領域は
４個、Ｌブロックの検出領域は９個である。従って、図
１６のステップＳ２１の判別Ａにおいては、Ｌブロック
の検出領域の方が多いと判定され、ステップＳ２４に進
む。即ち、この時の判別Ａの判別結果は、Ｈブロックの
検出領域が被写体領域、Ｌブロックの検出領域が背景領
域である。

【０２０３】次に、図２４（ｃ）に示すように、第２の
領域におけるＨブロックの検出領域は０個、Ｌブロック
の検出領域は４個である。従って、図１６のステップＳ
２４の判別Ｂにおいては、Ｌブロックの検出領域の方が
多いと判定され、ステップＳ２７に進む。即ち、この時
の判別Ｂの判別結果は、Ｈブロックの検出領域が背景領
域、Ｌブロックの検出領域が被写体領域であり、判別Ａ
の結果とは逆の結果である。従って、ステップＳ２７の
判別Ｃに進む。

【０２０４】ステップＳ２７では、Ｈブロック、Ｌブロ
ックのうち４０個の検出領域全体における検出領域の少
ない方のブロックを検出する。即ち、Ｈブロックの領域
数は８個、Ｌブロックの領域数は２６個であるため、Ｈ
ブロックの方が少なく、ステップＳ３２に進む。

【０２０５】ステップＳ３２では、全体の領域数が少な
いＨブロックに注目し、図２４（ａ）に示す第１の領域
にあるＨブロックの割合を求める。即ち、４０個の検出
領域全体におけるＨブロックの領域数は８個、第１の領
域におけるＨブロックの領域数は４個であるため、第１
領域にあるＨブロックの割合は４／８＝０．５となり、
０．４５よりも大きいため、最終の被写体／背景判別結
果（ｏ）に進む。即ち、Ｈブロックの検出領域が背景領
域、Ｌブロックの検出領域が被写体領域であると判別さ
れるため、この判別結果を最終的な判別結果としてい
る。

【０２０６】次に、Ｈブロックの検出領域における平均
動きベクトルの絶対値と、Ｌブロックの検出領域におけ
る平均動きベクトルの絶対値とを比較した場合、Ｌブロ
ックの平均動きベクトルの方が大きいので、図１６のス
テップＳ４８において遅延量決定（III）に進む。即
ち、遅延量は被写体領域であるＬブロックの平均動きベ
クトルの絶対値により決定され、遅延の向きはＬブロッ
クの平均動きベクトルが向いている左側の目、即ち左目
用の映像信号を遅延させた映像信号とする。

【０２０７】これにより、図２３（ａ）（ｂ）の画面に
おいて、バスが進んでいる方の目、即ち左目用の映像が
遅延された数フィールド前の映像となり、バスが手前側
に位置する立体映像を表示することが出来る。

【０２０８】図２５（ａ）（ｂ）は被写体であるバスが
画面上において左から右端に移動する場合の１フィール
ド目の映像と１０フィールド目の映像を示す図である。
このような映像の場合、動きベクトルの各検出領域は、
図２５（ｃ）に示すように、第３段階でＮＧ領域が判定
され、第４段階でＨブロックの検出領域とＬのブロック
の検出領域とに分割される。

【０２０９】このような映像の場合、図２６（ｂ）に示
すように、第１の領域におけるＨブロックの検出領域は
８個、Ｌブロックの検出領域は５個である。従って、図
１５のステップＳ２１の判別Ａにおいては、Ｈブロック
の検出領域の方が多いと判定され、ステップＳ２２に進
む。即ち、この時の判別Ａの判別結果は、Ｈブロックの
検出領域が背景領域、Ｌブロックの検出領域が被写体領
域である。

【０２１０】次に、図２６（ｃ）に示すように、第２領
域におけるＨブロックの検出領域は４個、Ｌブロックの
検出領域は０個である。従って、図１５のステップＳ２
２の判別Ｂにおいては、Ｈブロックの検出領域の方が多
いと判定され、ステップＳ２５に進む。即ち、この時の
判別Ｂの判別結果は、Ｈブロックの検出領域が被写体領
域、Ｌブロックの検出領域が背景領域であり、判別Ａの
結果とは逆の結果である。従って、ステップＳ２５の判
別Ｃに進む。

【０２１１】ステップＳ２５では、Ｈブロック、Ｌブロ
ックのうち４０個の検出領域全体における検出領域の少
ない方のブロックを検出する。即ち、Ｈブロックの領域
数は２６個、Ｌブロックの領域数は８個であるため、Ｌ
ブロックの方が少なく、ステップＳ２９に進む。

【０２１２】ステップＳ２９では、全体の領域数が少な
いＬブロックに注目し、図２６（ｂ）に示す第１の領域
にあるＬブロックの割合を求める。即ち、４０個の検出
領域全体におけるＬブロックの領域数は８個、第１の領
域におけるＨブロックの領域数は５個であるため、第１
領域にあるＨブロックの割合は５／８＝０．６２５とな
り、０．４５よりも大きいため、最終の被写体／背景判
別結果（ｃ）に進む。即ち、Ｈブロックの検出領域が被
写体領域、Ｌブロックの検出領域が背景領域であると判
別されるため、この判別結果を最終的な判別結果として
いる。

【０２１３】次に、Ｈブロックの検出領域における平均
動きベクトルの絶対値と、Ｌブロックの検出領域におけ
る平均動きベクトルの絶対値とを比較した場合、Ｈブロ
ックの平均動きベクトルの方が大きいので、図１６のス
テップＳ３６において遅延量決定（Ｉ）に進む。即ち、
遅延量は被写体領域であるＨブロックの平均動きベクト
ルの絶対値により決定され、遅延の向きはＨブロックの
平均動きベクトルが向いている右側の目、即ち右目用の
映像信号を遅延させた映像信号とする。

【０２１４】これにより、図２５（ａ）（ｂ）の画面に
おいて、バスが進んでいる方の目、即ち右目用の映像が
遅延された数フィールド前の映像となり、バスが手前側
に位置する立体映像を表示することが出来る。

【０２１５】図２７（ａ）（ｂ）は被写体であるヘリコ
プタが画面上において右端から左に飛んでいる場合の１
フィールド目の映像と１０フィールド目の映像を示す図
である。このような映像の場合、動きベクトルの各検出
領域は、図２７（ｃ）に示すように、第３段階でＮＧ領
域が判定され、第４段階でＨブロックの検出領域とＬの
ブロックの検出領域とに分割される。

【０２１６】このような映像の場合、図２８（ｂ）に示
すように、第１の領域におけるＨブロックの検出領域は
１１個、Ｌブロックの検出領域は１個である。従って、
図１５のステップＳ２１の判別Ａにおいては、Ｈブロッ
クの検出領域の方が多いと判定され、ステップＳ２２に
進む。即ち、この時の判別Ａの判別結果は、Ｈブロック
の検出領域が背景領域、Ｌブロックの検出領域が被写体
領域である。

【０２１７】次に、図２８（ｃ）に示すように、第２領
域におけるＨブロックの検出領域は３個、Ｌブロックの
検出領域は１個である。従って、図１５のステップＳ２
２の判別Ｂにおいては、Ｈブロックの検出領域の方が多
いと判定され、ステップＳ２５に進む。即ち、この時の
判別Ｂの判別結果は、Ｈブロックの検出領域が被写体領
域、Ｌブロックの検出領域が背景領域であり、判別Ａの
結果とは逆の結果である。従って、ステップＳ２５の判
別Ｃに進む。

【０２１８】ステップＳ２５では、Ｈブロック、Ｌブロ
ックのうち４０個の検出領域全体における検出領域の少
ない方のブロックを検出する。即ち、Ｈブロックの領域
数は２６個、Ｌブロックの領域数は７個であるため、Ｌ
ブロックの方が少なく、ステップＳ２９に進む。

【０２１９】ステップＳ２９では、全体の領域数が少な
いＬブロックに注目し、図２８（ｂ）に示す第１の領域
にあるＬブロックの割合を求める。即ち、４０個の検出
領域全体におけるＬブロックの領域数は７個、第１の領
域におけるＨブロックの領域数は１個であるため、第１
領域にあるＨブロックの割合は１／７＝０．１４・・・
となり、０．４５よりも小さいため、最終の被写体／背
景判別結果（ｄ）に進む。即ち、Ｈブロックの検出領域
が背景領域、Ｌブロックの検出領域が被写体領域である
と判別されるため、この判別結果を最終的な判別結果と
している。

【０２２０】次に、Ｈブロックの検出領域における平均
動きベクトルの絶対値と、Ｌブロックの検出領域におけ
る平均動きベクトルの絶対値とを比較した場合、Ｌブロ
ックの平均動きベクトルの方が大きいので、図１６のス
テップＳ３７において遅延量決定（III）に進む。即
ち、遅延量は被写体領域であるＬブロックの平均動きベ
クトルの絶対値により決定され、遅延の向きはＬブロッ
クの平均動きベクトルが向いている左側の目、即ち左目
用の映像信号を遅延させた映像信号とする。

【０２２１】これにより、図２７（ａ）（ｂ）の画面に
おいて、ヘリコプタが飛んでいる方の目、即ち左目用の
映像が遅延された数フィールド前の映像となり、ヘリコ
プタが手前側に位置する立体映像を表示することが出来
る。

【０２２２】図２９（ａ）（ｂ）は背景である樹木が画
面上において左端から右に移動する場合の１フィールド
目の映像と１０フィールド目の映像を示す図である。こ
のような映像の場合、動きベクトルの各検出領域は、図
２９（ｃ）に示すように、第３段階でＮＧ領域が判定さ
れ、第４段階でＨブロックの検出領域とＬのブロックの
検出領域とに分割される。

【０２２３】このような映像の場合、図３０（ｂ）に示
すように、第１の領域におけるＨブロックの検出領域は
６個、Ｌブロックの検出領域は６個である。従って、図
１５のステップＳ２１の判別Ａにおいては、Ｈブロック
の検出領域の数とＬブロックの検出領域の数とは等し
く、ステップＳ２３に進む。即ち、この時の判別Ａでは
被写体／背景の判別を行わない。

【０２２４】次に、図３０（ｃ）に示すように、第２領
域におけるＨブロックの検出領域は２個、Ｌブロックの
検出領域の数とＨブロックの検出領域の数とは等しく、
ステップＳ２６に進む。即ち、この時の判別Ｂは被写体
／背景判別を行わなわず、ステップＳ２６の判別Ｃに進
む。

【０２２５】ステップＳ２６では、Ｈブロック、Ｌブロ
ックのうち４０個の検出領域全体における検出領域の少
ない方のブロックを検出する。即ち、Ｈブロックの領域
数は１９個、Ｌブロックの領域数は１６個であるため、
Ｌブロックの方が少なく、ステップＳ３１に進む。

【０２２６】ステップＳ３１では、全体の領域数が少な
いＬブロックに注目し、図３０（ｂ）に示す第１の領域
にあるＬブロックの割合を求める。即ち、４０個の検出
領域全体におけるＬブロックの領域数は１６個、第１の
領域におけるＨブロックの領域数は６個であるため、第
１領域にあるＨブロックの割合は６／１６＝０．３７５
となり、０．４５よりも小さいため、最終の被写体／背
景判別結果（ｋ）に進む。即ち、Ｈブロックの検出領域
が背景領域、Ｌブロックの検出領域が被写体領域である
と判別されるため、この判別結果を最終的な判別結果と
している。

【０２２７】次に、Ｈブロックの検出領域における平均
動きベクトルの絶対値と、Ｌブロックの検出領域におけ
る平均動きベクトルの絶対値とを比較した場合、Ｈブロ
ックの平均動きベクトルの方が大きいので、図１７のス
テップＳ４４において遅延量決定（IV）に進む。即ち、
遅延量は背景領域であるＨブロックの平均動きベクトル
の絶対値により決定され、遅延の向きはＨブロックの平
均動きベクトルが向いている右側とは逆の左側の目、即
ち左目用の映像信号を遅延させた映像信号とする。

【０２２８】これにより、図２９（ａ）（ｂ）の画面に
おいて、樹木が移動している方とは逆の方の目、即ち左
目用の映像が遅延された数フィールド前の映像となり、
樹木が奥側に位置する立体映像を表示することが出来
る。

【０２２９】尚、例えば、ステップＳ２５、Ｓ２６、Ｓ
２７において、Ｈブロックの領域数とＬブロックの領域
数が等しい場合は、現在の１０フィールド期間では被写
体／背景判別を行わず、前の１０フィールド期間の判別
結果を用いる、あるいは遅延量の目標値を０にする。

【０２３０】

【発明の効果】本発明によれば、元になる２次元映像に
映し出されている複数の映出体の前後関係に応じて、左
右のどちらの目の映像を遅延された映像にするかを決め
ているため、映出体の前後関係が逆転した状態で３次元
映像に変換することは減少、若しくは無くなり、観察者
が違和感なく観賞することが出来る良好な３次元映像を
生成するようにした第１の３次元映像生成方法を提供し
得る。

【０２３１】具体的には、移動量の大きい映出体が移動
量の小さい映出体の前方を通過したことを検出し、この
場合においては、移動量の大きい映出体が移動量の小さ
い映出体よりも前方に位置する３次元映像を生成するこ
とが出来る。

【０２３２】また、移動量の大きい映出体が移動量の小
さい映出体の後方を通過したことを検出し、この場合に
おいては、移動量の大きい映出体が移動量の小さい映出
体よりも後方に位置する３次元映像を生成することが出
来る。

【０２３３】また、移動量の大きい映出体が移動量の小
さい映出体の前方を去ったことを検出し、この場合にお
いては、移動量の大きい映出体が移動量の小さい映出体
よりも前方に位置する３次元映像を生成することが出来
る。

【０２３４】また、移動量の大きい映出体が移動量の小
さい映出体の後方より新たに連続して現れたことを検出
し、この場合においては、移動量の大きい映出体が移動
量の小さい映出体よりも後方に位置する３次元映像を生
成することが出来る。

【０２３５】また、本発明によれば、元になる２次元映
像に映し出されている映出体の前後関係の判定が困難な
時は、その時の情報を無視することにより、却って、映
出体の前後関係の間違った３次元映像を生成することを
防止した２次元映像から３次元映像を生成する方法を提
供し得る。

【０２３６】また、本発明によれば、平面映像である２
次元映像において、隣接する２つの映出体の前後関係を
判定することが出来る第１の前後判定方法を提供し得
る。また、本発明によれば、平面映像である２次元映像
において、映出体が後方に位置する後方領域、あるいは
／及び映出体が前方に位置する前方領域を判別すること
が出来る第２の前後判定方法を提供し得る。

【０２３７】更に、本発明の第２の前後判定方法によれ
ば、映出体の移動量の誤って検出した場合は、その検出
を除去するため、正確な前後判定を行うことが出来る。
更に、本発明の第２の前後判定方法によれば、テレシネ
変換等により同じ映像が連続する２次元映像に対して
も、後方領域あるいは／及び前方領域を判別することが
出来る。

【０２３８】また、本発明によれば、映出体が後方に位
置する後方領域、あるいは／及び映出体が前方に位置す
る前方領域を判別し、この判別結果に応じて、左右のど
ちらの目の映像を遅延された映像にするかを決めている
ため、映出体の前後関係が逆転した状態で３次元映像に
変換することは減少、若しくは無くなり、観察者が違和
感なく観賞することが出来る良好な３次元映像を生成す
るようにした第２の３次元映像生成方法を提供し得る。

【図面の簡単な説明】

【図１】本発明を用いた第１実施例の３次元映像ソフト
変換システムの概略構成を示すブロック図である。

【図２】ＣＰＵが２次元映像における映出体の前後関係
を判定する動作を説明するフローチャートを示す図であ
る。

【図３】２次元映像の動きベクトルの検出領域を示す図
である。

【図４】元になる２次元映像の第１のシーンを示す図で
ある。

【図５】元になる２次元映像の第２のシーンを示す図で
ある。

【図６】本発明を用いた第２実施例の３次元映像ソフト
変換システムの概略構成を示すブロック図である。

【図７】２次元映像の動きベクトルの検出領域を示す図
である。

【図８】ＣＰＵが２次元映像における映出体の前後関係
を判定する動作を説明するフローチャートを示す図であ
る。

【図９】ＣＰＵが２次元映像における映出体の前後関係
を判定する際の時間的な流れを示す図である。

【図１０】ＣＰＵが２次元映像における映出体の前後関
係を判定する動作を説明するフローチャートを示す図で
ある。

【図１１】ＣＰＵが２次元映像における映出体の前後関
係を判定する動作を説明するフローチャートを示す図で
ある。

【図１２】動きベクトルの検出領域をＨブロックとＬブ
ロックとに分割するヒストグラムを示す図である。

【図１３】動きベクトルの検出領域の第１の領域を示す
図である。

【図１４】動きベクトルの検出領域の第２の領域を示す
図である。

【図１５】ＣＰＵが２次元映像における映出体の前後関
係を判定する動作を説明するフローチャートを示す図で
ある。

【図１６】ＣＰＵが２次元映像における映出体の前後関
係を判定する動作を説明するフローチャートを示す図で
ある。

【図１７】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図１８】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図１９】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２０】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２１】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２２】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２３】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２４】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２５】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２６】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２７】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２８】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図２９】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【図３０】ＣＰＵの具体的な動作を模式的に示す図であ
る。

【符合の説明】

２ 映像切換回路 ５ フィールドメモリ ６ メモリ制御回路 ７、７’ 動きベクトル検出回路 ８、８’ ＣＰＵ

───────────────────────────────────────────────────── フロントページの続き (72)発明者 棚瀬 晋 大阪府守口市京阪本通２丁目５番５号 三 洋電機株式会社内 (72)発明者 飯沼 俊哉 大阪府守口市京阪本通２丁目５番５号 三 洋電機株式会社内 (72)発明者 内田 秀和 大阪府守口市京阪本通２丁目５番５号 三 洋電機ソフトウエア株式会社内

Claims (20)

【特許請求の範囲】
1. 【請求項１】 元になる２次元映像を一方の目用の映像
   とし、前記元になる２次元映像を所定フィールド遅延さ
   せた映像を他方の目用の映像とすることにより、２次元
   映像から３次元映像を生成する方法であって、前記元に
   なる２次元映像において左右方向の移動量の大きい映出
   体の左右方向の移動量の小さい映出体よりも前方に位置
   するか、後方に位置するかを判定し、該判定結果により
   左右どちらの目の映像を遅延させた映像にするかを決定
   することを特徴とする２次元映像から３次元映像を生成
   する方法。
2. 【請求項２】 前記元になる２次元映像における映出体
   の左右方向の移動量を検出する検出領域を前記２次元映
   像を構成する画面内に複数個所設け、そのうち隣接する
   検出領域で検出された２つの移動量を比較することによ
   り、前記左右方向の移動量の大きい映出体が移動量の小
   さい映出体よりも前方に位置するか、後方に位置するか
   を判定することを特徴とする請求項１記載の２次元映像
   から３次元映像を生成する方法。
3. 【請求項３】 前記２つの移動量の大きさが異なり、移
   動量の大きい方の映出体が移動量の小さい方の映出体に
   向かって移動し、且つ小さい方の移動量を検出した検出
   領域で所定時間経過後に検出される移動量が前記移動量
   の大きい方の映出体の影響を受ける場合、前記移動量の
   大きい方の映出体が前記移動量の小さい方の映出体より
   も前方に位置し、前記移動量の大きい方の映出体の移動
   方向側の目の映像を遅延させるべきであると判定するこ
   とを特徴とする請求項２記載の２次元映像から３次元映
   像を生成する方法。
4. 【請求項４】 前記２つの移動量の大きさが異なり、移
   動量の大きい方の映出体が移動量の小さい方の映出体に
   向かって移動し、且つ小さい方の移動量を検出した検出
   領域で所定時間経過後に検出される移動量が前記移動量
   の大きい方の映出体の影響を受けない場合、前記移動量
   の大きい方の映出体が前記移動量の小さい方の映出体よ
   りも後方に位置し、前記移動量の大きい方の映出体の移
   動方向と反対側の目の映像を遅延させるべきであると判
   定することを特徴とする請求項２記載の２次元映像から
   ３次元映像を生成する方法。
5. 【請求項５】 前記２つの移動量の大きさが異なり、移
   動量の大きい方の映出体が移動量の小さい方の映出体に
   向かって移動しておらず、且つ大きい方の移動量を検出
   した検出領域で所定時間経過後に検出される移動量が前
   記移動量の小さい方の映出体の影響を受ける場合、前記
   移動量の大きい方の映出体が前記移動量の小さい方の映
   出体よりも前方に位置し、前記移動量の大きい方の映出
   体の移動方向側の目の映像を遅延させるべきであると判
   定することを特徴とする請求項２記載の２次元映像から
   ３次元映像を生成する方法。
6. 【請求項６】 前記２つの移動量の大きさが異なり、移
   動量の大きい方の映出体が移動量の小さい方の映出体に
   向かって移動しておらず、且つ大きい方の移動量を検出
   した検出領域で所定時間経過後に検出される移動量が前
   記移動量の小さい方の映出体の影響を受けない場合、前
   記移動量の大きい方の映出体が前記移動量の小さい方の
   映出体よりも後方に位置し、前記移動量の大きい方の映
   出体の移動方向と反対側の目の映像を遅延させるべきで
   あると判定することを特徴とする請求項２記載の２次元
   映像から３次元映像を生成する方法。
7. 【請求項７】 前記映出体の移動量を動きベクトルによ
   り求めることを特徴とする請求項１、２、３、４、５ま
   たは６記載の２次元映像から３次元映像を生成する方
   法。
8. 【請求項８】 左目用映像信号を出力する左目用出力端
   子と、右目用映像信号を出力する右目用出力端子と、前
   記遅延された映像信号を前記左目用映像端子、前記右目
   用映像端子のどちらから出力するかを切り換える映像切
   換手段とを備え、前記映像切換手段の切り換え制御を前
   記判定結果に従って行うことを特徴とする請求項１、
   ２、３、４、５、６または７記載の２次元映像から３次
   元映像を生成する方法。
9. 【請求項９】 前記判定結果が１フィールド期間内にお
   いて全て同じである場合に、前記映像切換手段の切り換
   え制御を行うことを特徴とする請求項８記載の２次元映
   像から３次元映像を生成する方法。
10. 【請求項１０】 ２次元映像における映出体の左右方向
    の移動量を検出する検出領域を前記２次元映像を構成す
    る画面内に複数個所設け、そのうち隣接する検出領域で
    検出された２つの移動量を比較することにより、前記左
    右方向の移動量の大きい映出体が移動量の小さい映出体
    よりも前方に位置するか、後方に位置するかを判定する
    ことを特徴とする映像の前後判定方法。
11. 【請求項１１】 前記元になる２次元映像における映出
    体の左右方向の移動量を検出する検出領域を前記２次元
    映像を構成する画面内に多数個所設け、そのうち画面の
    端に位置する検出領域での左右方向の移動量の大きい映
    出体を検出する領域数と移動量の小さい映出体を検出す
    る領域数とを比較し、領域数の多い方の映出体の検出領
    域を後方に位置する後方領域であると判別することを特
    徴とする映像の前後判定方法。
12. 【請求項１２】 ２次元映像における映出体の左右方向
    の移動量を検出する検出領域を前記２次元映像を構成す
    る画面内に多数個所設け、そのうち画面の中央に位置す
    る検出領域での左右方向の移動量の大きい映出体を検出
    する領域数と移動量の小さい映出体を検出する領域数と
    を比較し、領域数の多い方の映出体の検出領域を前方に
    位置する前方領域であると判別することを特徴とする映
    像の前後判定方法。
13. 【請求項１３】 ２次元映像における映出体の左右方向
    の移動量を検出する検出領域を前記２次元映像を構成す
    る画面全域に多数個所設け、該多数個所の検出領域での
    左右方向の移動量の大きい映出体を検出する領域数と移
    動量の小さい映出体を検出する領域数とを比較し、領域
    数の少ない方の映出体の検出領域に注目し、該注目され
    た検出領域の（画面の端での領域数）／（画面全域での
    領域数）が所定値以上の時、前記注目された領域を画面
    の後方に位置する後方領域であると判別することを特徴
    とする映像の前後判定方法。
14. 【請求項１４】 前記元になる２次元映像における映出
    体の左右方向の移動量を検出する検出領域を前記２次元
    映像を構成する画面内に多数個所設け、そのうち画面の
    端に位置する検出領域での左右方向の移動量の大きい映
    出体を検出する領域数と移動量の小さい映出体を検出す
    る領域数とを比較し、領域数の多い方の映出体の検出領
    域を後方に位置する後方領域であるとする第１の判別
    と、前記多数個所の検出領域のうち画面の中央に位置す
    る検出領域での左右方向の移動量の大きい映出体を検出
    する領域数と移動量の小さい映出体を検出する領域数と
    を比較し、領域数の多い方の映出体の検出領域を前方に
    位置する前方領域であるとする第２の判別とを行い、前
    記第１の判別により後方領域であると判別された領域
    と、前記第２の判別により前方領域であると判別された
    領域とが異なる領域である場合、前記第１、第２の判別
    結果を最終の判別結果とすることを映像の前後判別方
    法。
15. 【請求項１５】 前記元になる２次元映像における映出
    体の左右方向の移動量を検出する検出領域を前記２次元
    映像を構成する画面内に多数個所設け、そのうち画面の
    端に位置する検出領域での左右方向の移動量の大きい映
    出体を検出する領域数と移動量の小さい映出体を検出す
    る領域数とを比較し、領域数の多い方の映出体の検出領
    域を後方に位置する後方領域であるとする第１の判別
    と、前記多数個所の検出領域のうち画面の中央に位置す
    る検出領域での左右方向の移動量の大きい映出体を検出
    する領域数と移動量の小さい映出体を検出する領域数と
    を比較し、領域数の多い方の映出体の検出領域を前方に
    位置する前方領域であるとする第２の判別とを行い、前
    記第１の判別により後方領域であると判別された領域
    と、前記第２の判別により前方領域であると判別された
    領域とが同じ領域である場合、前記多数個所の検出領域
    での左右方向の移動量の大きい映出体を検出する領域数
    と移動量の小さい映出体を検出する領域数とを比較し、
    領域数の少ない方の映出体の検出領域に注目し、該注目
    された検出領域の（画面の端での領域数）／（画面全域
    での領域数）が所定値以上の時、前記注目された領域を
    画面の後方に位置する後方領域であると判別することを
    特徴とする映像の前後判定方法。
16. 【請求項１６】 前記映出体の移動量を動きベクトルに
    より求めることを特徴とする請求項１１、１２、１３、
    １４または１５記載の映像の前後判定方法。
17. 【請求項１７】 前記映出体の移動量を数フィールド期
    間の動きベクトルの累積和により求めることを特徴とす
    る請求項１１、１２、１３、１４または１５記載の映像
    の前後判定方法。
18. 【請求項１８】 前記多数個所の検出領域のうち、信頼
    性の低い動きベクトルが検出された領域、または前記映
    出体の動きに関与していない動きベクトルが検出された
    領域を誤り領域として判別し、誤り領域では無いと判別
    された領域を有効な検出領域として用いることを特徴と
    する請求項１１、１２、１３、１４、１５、１６または
    １７記載の映像の前後判定方法。
19. 【請求項１９】 元になる２次元映像を一方の目用の映
    像とし、前記元になる２次元映像を所定フィールド遅延
    させた映像を他方の目用の映像とすることにより、２次
    元映像から３次元映像を生成する方法において、請求項
    １１、１２、１３、１４、１５、１６、１７または１８
    記載の映像の前後判定方法によって得られた結果により
    左右どちらの目の映像を遅延させた映像にするかを決定
    することを特徴とする２次元映像から３次元映像を生成
    する方法。
20. 【請求項２０】 移動量の大きい映出体の移動量の第１
    の絶対値と、移動量の小さい映出体の移動量の第２の絶
    対値とを比較し、該第１、第２の絶対値のうち値の大き
    い方の映出体の移動量により前記遅延された映像の遅延
    量を定めることを特徴とする請求項１９記載の２次元映
    像から３次元映像を生成する方法。