JPH1169382A - 2次元映像を3次元映像に変換する方法 - Google Patents

2次元映像を3次元映像に変換する方法

Info

Publication number
JPH1169382A
JPH1169382A JP9230615A JP23061597A JPH1169382A JP H1169382 A JPH1169382 A JP H1169382A JP 9230615 A JP9230615 A JP 9230615A JP 23061597 A JP23061597 A JP 23061597A JP H1169382 A JPH1169382 A JP H1169382A
Authority
JP
Japan
Prior art keywords
motion vector
image
vector detection
dimensional
video signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP9230615A
Other languages
English (en)
Inventor
Haruhiko Murata
治彦 村田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP9230615A priority Critical patent/JPH1169382A/ja
Publication of JPH1169382A publication Critical patent/JPH1169382A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

(57)【要約】 【目的】 この発明は、入力映像に黒帯が存在している
場合においても、移動物体の正確な動き速度および方向
が求めることができる2次元映像を3次元映像に変換す
る方法を提供することを目的とする。 【構成】 主映像に黒帯領域が存在するか否かを判別
し、主映像に黒帯領域が存在すると判別された場合に
は、全ての動きベクトル検出領域のうち、黒帯領域に属
する動きベクトル検出領域以外の動きベクトル検出領域
で検出された動きベクトルに基づいて、主映像の水平方
向の動きに関する情報を生成する。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】この発明は、VTR、ビデオカメ
ラ等から出力されたり、CATV放送、TV放送等によ
って伝送されてきたりする2次元映像を3次元映像に変
換する方法に関する。
【0002】
【従来の技術】最近話題になっている3次元映像表示シ
ステムに使用される3次元映像ソフトは、その大半が3
次元映像表示システム用に特別に作成されたものであ
る。このような3次元映像ソフトは、一般には2台のカ
メラを用いて左目用映像と右目用映像とを撮像して記録
されたものである。3次元映像ソフトに記録された左右
の映像は、ほぼ同時に表示装置に重ね合わされて表示さ
れる。そして、重ね合わされて表示される左目用映像と
右目用映像とを、観察者の左右の目にそれぞれ別々に入
射させることによって、観察者に3次元映像が認識され
る。
【0003】ところで、現在、2次元映像ソフトが多数
存在している。したがって、これらの2次元映像ソフト
から3次元映像を生成することができれば、既存の2次
元映像ソフトと同じ内容の3次元映像ソフトを最初から
作り直すといった手間が省ける。
【0004】このようなことから、2次元映像を3次元
映像に変換する方法が既に提案されている。2次元映像
を3次元映像に変換する従来方法として、次のようなも
のが挙げられる。すなわち、左から右方向に移動する物
体が映っている2次元映像の場合、この元の2次元映像
を左目用映像とし、この左目用映像に対して数フレーム
前の映像を右目用映像とする方法である。このようにす
ると、左目用映像と右目用映像との間に視差が生じるの
で、この両映像をほぼ同時に画面上に表示することによ
り、移動する物体が背景に対して前方に浮き出される。
【0005】なお、左目用映像に対して数フレーム前の
映像は、元の2次元映像をフィールドメモリに記憶さ
せ、所定フィールド数分、遅延して読み出すことにより
得られる。以上のような、従来方法をフィールド遅延方
式ということにする。
【0006】
【発明が解決しようとする課題】上記従来方法において
は、左目用映像および右目用映像の一方に対する他方の
遅延量を一定にした場合には、移動物体の動きが速くな
るほど視差が大きくなるため、立体感が変化し3次元映
像がみにくくなる。そこで、本出願人は、移動物体の動
きが速い場合には遅延量が小さくなるように、移動物体
の動きが遅い場合には遅延量が大きくなるように、遅延
量を制御する方法を開発している。
【0007】移動物体の動きの速度および方向は、元と
なる2次元映像の各フィールドの映像エリア内に設定さ
れている複数の動きベクトル検出領域毎に検出された動
きベクトルに基づいて求められている。
【0008】ところで、2次元映像には、映画等のよう
に映像エリア内の上下に黒帯が存在している映像があ
る。このような場合においても、従来は全ての動きベク
トル検出領域毎に検出された動きベクトルに基づいて移
動物体の動きの速度および方向が求められている。
【0009】しかしながら、映像エリア内の上下に黒帯
が存在している映像において、黒帯にその大部分または
全部が覆われている動きベクトル検出領域からは、移動
物体の動きの速度および方向に関する有効な情報は得ら
れないので、これらの動きベクトル検出領域から得られ
た情報をも加味して移動物体の動きの速度および方向を
求めると、移動物体の正確な動き速度および方向が求め
られないという問題がある。
【0010】この発明は、入力映像に黒帯が存在してい
る場合においても、移動物体の正確な動き速度および方
向が求めることができる2次元映像を3次元映像に変換
する方法を提供することを目的とする。
【0011】
【課題を解決するための手段】この発明による第1の2
次元映像を3次元映像に変換する方法は、2次元映像信
号から、主映像信号と、主映像信号に対して遅延された
副映像信号とを生成することにより、2次元映像を3次
元映像に変換する方法であって、主映像信号に対する副
映像信号の遅延量が、原則的には、映像エリア内に設定
された複数の動きベクトル検出領域毎に検出された動き
ベクトルに基づいて生成された主映像の水平方向の動き
に関する情報に応じて変化せしめられる2次元映像を3
次元映像に変換する方法において、主映像に黒帯領域が
存在するか否かを判別し、主映像に黒帯領域が存在する
と判別された場合には、全ての動きベクトル検出領域の
うち、黒帯領域に属する動きベクトル検出領域以外の動
きベクトル検出領域で検出された動きベクトルに基づい
て、主映像の水平方向の動きに関する情報を生成するこ
とを特徴とする。
【0012】この発明による第2の2次元映像を3次元
映像に変換する方法は、2次元映像信号から、主映像信
号と、主映像信号に対して遅延された副映像信号とを生
成することにより、2次元映像を3次元映像に変換する
方法であって、主映像信号に対する副映像信号の遅延量
が、原則的には、映像エリア内に設定された複数の動き
ベクトル検出領域毎に検出された動きベクトルに基づい
て生成された主映像の水平方向の動きに関する情報に応
じて変化せしめられる2次元映像を3次元映像に変換す
る方法において、主映像の上下部に黒帯領域が存在する
か否かを判別し、主映像の上下部に黒帯領域が存在する
と判別された場合には、最上段の動きベクトル検出領域
が、上部の黒帯領域の下側に位置するように、全動きベ
クトル検出領域を下方にシフトさせ、シフト後の全動き
ベクトル検出領域のうち、上下部の黒帯領域の間に存在
する動きベクトル検出領域で検出された動きベクトルに
基づいて、主映像の水平方向の動きに関する情報を生成
することを特徴とする2次元映像を3次元映像に変換す
る方法。
【0013】
【実施例】以下、図面を参照して、この発明の実施例に
ついて説明する。
【0014】図1は、2次元映像を3次元映像に変換す
るための2D/3D変換装置の構成を示している。
【0015】この2D/3D変換装置は、フィールド遅
延方式によって左目用映像と右目用映像とを生成するこ
とにより視差を発生させ、生成された左目用映像と右目
用映像の両方または一方に位相ずらしを施すことによ
り、被写体と基準スクリーン面との位置関係を変化させ
る。
【0016】入力端子1には、2次元映像信号aが入力
される。この2次元映像信号aは、動きベクトル検出回
路16、複数のフィールドメモリ11および映像切換回
路13にそれぞれ送られる。
【0017】動きベクトル検出回路16は、よく知られ
ているように、代表点マッチング法に基づいて、動きベ
クトルを検出するためのデータを生成するものである。
動きベクトル検出回路16によって生成されたデータ
は、CPU20に送られる。
【0018】代表点マッチング法について、簡単に説明
する。図2に示すように、各フィールドの映像エリア1
00内に複数の動きベクトル検出領域A0〜E7が設定
されている。各動きベクトル検出領域A0〜E7の大き
さは同じである。また、各動きベクトル検出領域A0〜
E7は、図3に示すように、さらに複数の小領域eに分
割されている。そして、図4に示すように、各小領域e
それぞれに、複数のサンプリング点Sと1つの代表点R
とが設定されている。
【0019】現フィールドにおける各小領域e内のサン
プリング点Sの映像信号レベルと、前フィールドにおけ
る対応する小領域eの代表点Rの映像信号レベルとの差
(各サンプリング点における相関値)が、各動きベクト
ル検出領域A0〜E7ごとに求められる。そして、各動
きベクトル検出領域A0〜E7ごとに、動きベクトル検
出領域内の全ての小領域間において、代表点Rに対する
偏位が同じサンプリング点どうしの相関値が累積加算さ
れる。したがって、各動きベクトル検出領域A0〜E7
ごとに、1つの小領域e内のサンプリング点の数に応じ
た数の相関累積値が求められる。
【0020】各動きベクトル検出領域A0〜E7内にお
いて、相関累積値が最小となる点の偏位、すなわち相関
性が最も高い点の偏位が、当該動きベクトル検出領域A
0〜E7の動きベクトル(被写体の動き)として抽出さ
れる。
【0021】フィールドメモリ11は、2次元映像信号
aをフィールド単位で遅延させて出力させるために設け
られている。遅延量は、メモリ制御回路24により、所
定範囲内において、フィールド単位で可変制御される。
【0022】フィールドメモリ11の出力b(遅延され
た2次元映像信号)は、映像切換回路13および補間回
路12にそれぞれ送られる。補間回路12は、入力信号
bに対して、垂直方向の補間信号を生成するものであ
る。補間回路12の出力c(遅延された2次元映像信号
の垂直方向補間信号)は、映像切換回路13に送られ
る。
【0023】したがって、映像切換回路13には、入力
された2次元映像信号a、遅延された2次元映像信号b
および遅延された2次元映像信号bの垂直方向補間信号
cが入力する。映像切換回路13は、左映像用位相制御
回路14と右映像用位相制御回路15とに対し、信号b
および信号cのうちの一方の信号(副映像信号)と、信
号a(主映像信号)とを、被写体の動き方向に応じて切
り換えて出力する。ただし、遅延量が0の場合には、左
映像用位相制御回路14と右映像用位相制御回路15と
の両方に、信号aが送られる。
【0024】信号bおよび信号cのうちから1方の選択
は、2次元映像信号aが奇数フィールドか偶数フィール
ドかに基づいて行なわれる。すなわち、信号bおよび信
号cのうち、2次元映像信号aのフィールド種類(奇数
フィールドか偶数フィールド)に対応するものが選択さ
れる。映像切換回路13による映像の切り換えは、CP
U20によって制御される。
【0025】各位相制御回路14、15は、入力される
映像信号の位相をずらすことにより、入力される映像の
表示位置を水平方向に移動させるために設けられてい
る。位相のずらし量およびずらし方向は、メモリ制御回
路24によって制御される。左映像用位相制御回路14
の出力は、左映像出力端子2に送られる。また、右映像
用位相制御回路15の出力は、右映像出力端子3に送ら
れる。
【0026】CPU20は、メモリ制御回路24および
映像切換回路13を制御する。CPU20は、そのプロ
グラム等を記憶するROM21および必要なデータを記
憶するRAM22を備えている。CPU20には、動き
ベクトル検出回路16から動きベクトル検出に必要なデ
ータが送られてくる。また、CPU20には、各種入力
手段および表示器を備えた操作・表示部23が接続され
ている。
【0027】CPU20は、動きベクトルに基づいて、
フィールドメモリ11による遅延フィールド数(遅延
量)を算出する。つまり、原則的には、動きベクトルが
大きい場合には、遅延量が小さくなるように、動きベク
トルが小さい場合には、遅延量が大きくなるように、遅
延量を決定する。
【0028】また、CPU20は、動きベクトルの方向
に基づいて、映像切換回路13を制御する。つまり、動
きベクトルの方向が左から右の場合には、入力された2
次元映像信号aを左目用位相制御回路14に、遅延され
た2次元映像信号bまたはcを右目用位相制御回路15
に送る。動きベクトルの方向が右から左の場合には、入
力された2次元映像信号aを右目用位相制御回路15
に、遅延された2次元映像信号bまたはcを左目用位相
制御回路14に送る。
【0029】この2D/3D変換装置では、フィールド
遅延方式によって左目用映像と右目用映像とを生成する
ことにより視差を発生させ、生成された左目用映像と右
目用映像の両方または一方に位相ずらしを施すことによ
り、被写体と基準スクリーン面との位置関係を変化させ
ている。
【0030】図5は、CPUによる2D/3D変換処理
手順を示している。
【0031】CPUによる2D/3D変換処理は、入力
映像信号aのフィールドの切り換えタイミングがくるご
とに行なわれる。
【0032】(1)ステップ1では、複数のフィールド
メモリ11のうち、今回のフィールドに対する2次元映
像信号を書き込むべきメモリ(書込みメモリ)および既
に記憶されている2次元映像信号を読み出すべきメモリ
(読み出しメモリ)をそれぞれ示すデータがメモリ制御
回路24に出力される。また、各位相制御回路14、1
5による位相ずれ量および向きを示すデータがメモリ制
御回路24に出力される。さらに、映像切換回路13に
映像切り換え制御信号が出力される。
【0033】読み出しメモリは、前回の2D/3D変換
処理において決定された遅延量に基づいて決定される。
また、各位相制御回路14、15による位相ずれ量およ
び向きは、2D/3D変換処理のステップ2で既に取り
込まれて記憶されているデータに基づいて決定される。
【0034】また、遅延された2次元映像信号bおよび
cのうちの一方の選択は、フィールドメモリ11から読
み出されるべき2次元映像信号bのフィールド種類と、
2次元映像信号aのフィールド種類とに基づいて決定さ
れる。さらに、選択された信号bまたはcと、信号aと
の切り換えは、前回の2D/3D変換処理で求められた
水平方向の動きベクトルの方向に基づいて決定される。
つまり、選択された信号bまたはcと、信号aとの切り
換え方向は、遅延量の符号によって表される。
【0035】(2)ステップ2では、操作・表示部23
からの各種入力信号が取り込まれて記憶される。各種入
力信号には、位相ずれ量および向きを設定する信号、遅
延量を自動で算出するか(自動モード)、手動設定する
か(手動モード)を示す自動・手動モード設定信号、自
動モードが設定されるときに行なわれる遅延量倍率設定
信号、手動モードが設定されるときに行なわれる遅延量
設定信号等がある。
【0036】(3)ステップ3では、前回の2D/3D
変換処理のステップ10で求められた各動きベクトル検
出領域ごとの動きベクトルに対する信頼性結果に基づい
て、信頼性のある動きベクトルのみが抽出される。な
お、前回の2D/3D変換処理のステップ11で黒帯領
域が検出され、その黒帯領域に属する動きベクトル検出
領域が特定されている場合には、黒帯領域に属する動き
ベクトル検出領域に対する動きベクトルも信頼性のない
動きベクトルとして除去される。
【0037】(4)ステップ4では、ステップ3で抽出
された信頼性のある動きベクトルのうち、垂直方向成分
が所定値より小さいもののみが抽出される。
【0038】(5)ステップ5では、ステップ4で抽出
された信頼性のある動きベクトルの水平方向成分(有効
水平方向動きベクトル)の平均値が算出される。
【0039】(6)ステップ6では、ステップ5で算出
された有効水平方向動きベクトルの平均値に基づく、遅
延量算出処理が行なわれる。この遅延量算出処理の詳細
については、後述する。
【0040】(7)ステップ7では、ステップ2で取り
込まれて記憶されているデータに基づいて、自動モード
か手動モードかが判別される。
【0041】(8)ステップ7で手動モードが設定され
ていると判別された場合には、遅延量が、ステップ2で
取り込まれた設定値に固定される(ステップ8)。
【0042】(9)ステップ7で自動モードが設定され
ていると判別された場合には、ステップ6の遅延量算出
処理で用いられる履歴データが更新される(ステップ
9)。
【0043】(10)ステップ10では、動きベクトル
検出回路16から動きベクトル検出に必要なデータが取
り込まれ、各動きベクトル検出領域に対する動きベクト
ルが算出される。また、各動きベクトル検出領域ごとの
相関累積値の平均値および最小値に基づいて、各動きベ
クトル検出領域ごとに動きベクトルの信頼性が判別され
る。そして、算出された動きベクトルおよび信頼性判別
結果がRAM22に記憶される。
【0044】(11)ステップ11では、黒帯付き映像
検出・制御処理が行われる。黒帯付き映像検出・制御処
理の詳細については後述する。
【0045】図6は、図5のステップ6の遅延量算出処
理の詳細な手順を示している。
【0046】まず、第1遅延量d1が求められる(ステ
ップ21)。第1遅延量d1は、上記ステップ2で設定
されて記憶されている遅延量倍率設定値および上記ステ
ップ5で求められた有効水平方向動きベクトルの平均値
v(以下、動きベクトル平均値という)に基づいて求め
られる。
【0047】図7は、動きベクトル平均値と、遅延量と
の関係を示している。図7に示すような関係が遅延量テ
ーブルとしてROM21に記憶されている。そして、ま
ず、動きベクトル平均値に対応する遅延量が、遅延量テ
ーブルから求められる。
【0048】ところで、同じ3次元映像信号であって
も、立体表示装置(モニタ)の条件、すなわち、モニタ
の種類およびモニタを見る条件によって、視差が異な
る。そこで、モニタの条件にかかわらず、同じような立
体感を得るために、あるいは観察者の好みに合うよう
に、上記ステップ2で設定されて記憶されている遅延量
倍率設定値を、遅延量テーブルから求められた遅延量に
積算することにより、第1遅延量d1が求められる。
【0049】第1遅延量d1が求められると、遅延量履
歴データに基づいて、今回から過去9回までの10フィ
ールド分の遅延量の平均値、前回からその過去9回まで
の10フィールド分の遅延量の平均値、前前回からその
過去9回までの10フィールド分の遅延量の平均値がそ
れぞれ算出される(ステップ22)。
【0050】ステップ22で用いられた遅延量履歴デー
タは、過去において、ステップ21で得られた第1遅延
量d1である。
【0051】次に、3組の平均値のうち、2つ以上が同
じ値であれば、その値(多数値)が第2遅延量d2とし
て選択され、すべてが異なる値であればその中間値が第
2遅延量d2として選択される(ステップ23)。
【0052】次に、ステップ23で選択された第2遅延
量d2と、12〜18フィールド前の第2遅延量d2の
いずれか(たとえば、15フィールド前の第2遅延量d
2)と、30フィールド前の第2遅延量d2との3つの
第2遅延量d2が比較される(ステップ24)。ステッ
プ24で用いられた遅延量履歴データは、過去におい
て、ステップ23で得られた第2遅延量d2である。
【0053】全ての第2遅延量d2が一致する場合には
(ステップ25でYES)、目標遅延量Pdがステップ
23で選択された第2遅延量に変更された後(Pd=d
2)(ステップ26)、ステップ30に進む。したがっ
て、図8に示すように、3つの第2遅延量d2(過去の
ものから順にd2−1、d2−2、d2−3で表す)が
変化し、全ての第2遅延量d2が一致すると、目標遅延
量Pdが第2遅延量(d2−3)に変更される。
【0054】全ての第2遅延量d2が一致しない場合に
は(ステップ25でNO)、全ての第2遅延量d2が現
在の目標遅延量Pdより大きいか、全ての第2遅延量d
2が現在の目標遅延量Pdより小さいか、またはそれら
の条件に該当しないかが判別される(ステップ27)。
【0055】全ての第2遅延量d2が現在の目標遅延量
Pdより大きいときには、目標遅延量Pdが+1された
後(Pd=Pd+1)(ステップ28)、ステップ30
に進む。たとえば、図9に示すように、3つの第2遅延
量d2(過去のものから順にd2−1、d2−2、d2
−3で表す)が変化し、全ての第2遅延量d2が現在の
目標遅延量Pdより大きいときには、目標遅延量Pdが
+1される。
【0056】全ての第2遅延量d2が現在の目標遅延量
Pdより小さいときには、目標遅延量Pdが−1された
後(Pd=Pd−1)(ステップ29)、ステップ30
に進む。全ての第2遅延量d2が現在の目標遅延量Pd
より大きくなくかつ全ての第2遅延量d2が現在の目標
遅延量dより小さくないときには、ステップ30に進
む。
【0057】ステップ30では、目標遅延量Pdと現在
実際に設定されている遅延量(設定遅延量d3)とが一
致するか否かが判別される。目標遅延量Pdと設定遅延
量d3とが一致していない場合には、現在の設定遅延量
d3が既に4フィールド継続しているか否かが判別され
る(ステップ31)。現在の設定遅延量d3が既に4フ
ィールド継続している場合には、設定遅延量d3が目標
遅延量Pdに近づく方向に1だけ変更される(d3=d
3±1)(ステップ32)。そして、図5のステップ7
に移行する。
【0058】上記ステップ30で、目標遅延量と現在の
設定遅延量とが一致している場合または、上記ステップ
31で現在の設定遅延量が既に4フィールド継続してい
ない場合には、遅延量を変更することなく、図5のステ
ップ7に移行する。
【0059】つまり、この例では、設定遅延量d3は4
フィールド周期単位でかつ1フィールド分ずつ目標遅延
量Pdに近づくように制御される。
【0060】なお、電源投入後において、ステップ21
において、初めて第1遅延量d1が算出されたときに
は、第2遅延量d2、目標遅延量Pdおよび設定遅延量
d3はd1と等しくなる。
【0061】図6の処理において、ステップ22におい
て、今回から過去9回までの10フィールド分の遅延量
の平均値のみを算出し、これを目標遅延量とし、ステッ
プ23、24、25、26、27、28、29の処理を
省略してもよい。
【0062】また、ステップ22において、今回から過
去9回の10フィールド分の遅延量の平均値のみを算出
し、これを第2遅延量とし、ステップ23の処理を省略
してもよい。
【0063】また、ステップ23で求められた第2遅延
量を目標遅延量とし、ステップ24、25、26、2
7、28、29の処理を省略してもよい。
【0064】また、ステップ22および23の処理を省
略してもよい。この場合には、ステップ24で用いられ
る第2遅延量として、ステップ21で求められた第1遅
延量d1が用いられる。
【0065】図10は、図5のステップ11の黒帯付き
映像検出・制御処理の詳細を示している。
【0066】まず、黒帯領域の検出処理が行われる(ス
テップ41)。この検出処理は、たとえば次のようにし
て行われる。現フィールドの映像エリアの各水平ライン
毎に射影演算が行われる。そして、各水平ライン毎の射
影演算結果に基づいて、各水平ラインごとにほとんどの
画素が黒であるか否かを判別し、この判別結果に基づい
て黒帯領域が特定される。黒帯領域の検出処理の結果、
黒帯領域が存在しないと判別された場合には(ステップ
42でNO)、今回の黒帯有無判別・制御処理は終了す
る。
【0067】黒帯領域の検出処理の結果、黒帯領域が存
在すると判別された場合には(ステップ42でYE
S)、黒帯領域に属する動きベクトル検出領域の特定処
理が行われる(ステップ43)。つまり、各動きベクト
ル検出領域のうち、その所定パーセント以上、たとえば
70%以上が黒帯領域に含まれている検出領域が、黒帯
領域に属する動きベクトル検出領域であると判別され
る。そして、今回の黒帯有無判別・制御処理は終了す
る。
【0068】たとえば、図11のように、映像エリア内
の上下に黒帯領域BLが存在する場合には、全動きベク
トル検出領域A0〜E7のうち、領域A0〜A7と、領
域E0〜E7が、黒帯領域に属する動きベクトル検出領
域であると判別される。
【0069】この場合には、次フィールドの2D/3D
変換処理のステップ3において、黒帯領域に属する動き
ベクトル検出領域A0〜A7、E0〜E7に対する動き
ベクトルが除去される。したがって、ステップ6の遅延
量算出処理においては、黒帯領域に属する動きベクトル
検出領域に対する動きベクトルが用いられなくなるの
で、正確な被写体の動きおよび方向に基づいて遅延量が
算出されるようになる。
【0070】なお、黒帯領域が検出され、黒帯領域に属
する動きベクトル検出領域が特定されたときには、その
次のフィールドにおいて、黒帯領域に属する動きベクト
ル検出領域に対する動きベクトル検出回路16の動作を
停止させるようにしてもよい。
【0071】また、図11に示すように、映像エリア内
の上下に黒帯領域が存在することが検出された場合に
は、最上段の動きベクトル検出領域A0〜A7が上部の
黒帯領域の下側に位置するように、全動きベクトル検出
領域A0〜E7を下方にシフトさせ、次フィールドに対
する2D/3D変換処理のステップ10においては、シ
フト後の全動きベクトル検出領域A0〜E7のうち、上
下部の黒帯領域の間に存在する動きベクトル検出領域で
検出された情報のみを取り込むようにしてもよい。
【0072】
【発明の効果】この発明によれば、入力映像に黒帯領域
が存在している場合においても、移動物体の正確な動き
速度および方向を求めることができるようになる。この
結果、好適な2次元映像を3次元映像に変換する方法が
得られる。
【図面の簡単な説明】
【図1】2D/3D変換装置の構成を示すブロック図で
ある。
【図2】各フィールドの映像エリア内に設定される複数
の動きベクトル検出領域A0〜E7を示す模式図であ
る。
【図3】各動きベクトル検出領域内に設定されている複
数の小領域eを示す模式図である。
【図4】各小領域e内に設定されている複数のサンプリ
ング点Sと1つの代表点Rとを示す模式図である。
【図5】CPUによる2D/3D変換処理の全体的な手
順を示すフローチャートである。
【図6】図5のステップ6の遅延量算出処理の詳細な手
順をフローチャートである。
【図7】動きベクトル平均値と、第1遅延量との関係を
示すグラフである。
【図8】3つの第2遅延量が全て一致した場合に、目標
遅延量が変更される様子を示すタイムチャートである。
【図9】3つの第2遅延量の全てが現在の目標遅延量よ
り大きくなったときに、目標遅延量が変更される様子を
示すタイムチャートである。
【図10】図5のステップ11の黒帯付映像検出・制御
処理の詳細な手順を示すフローチャートである。
【図11】映像エリア内の上下に黒帯領域BLが存在す
る例を示す模式図である。
【符号の説明】
11 フィールドメモリ 12 補間回路 13 映像切換回路 14、15 位相制御回路 20 CPU 21 ROM 22 RAM 23 操作・表示部 24 メモリ制御回路

Claims (2)

    【特許請求の範囲】
  1. 【請求項1】 2次元映像信号から、主映像信号と、主
    映像信号に対して遅延された副映像信号とを生成するこ
    とにより、2次元映像を3次元映像に変換する方法であ
    って、主映像信号に対する副映像信号の遅延量が、原則
    的には、映像エリア内に設定された複数の動きベクトル
    検出領域毎に検出された動きベクトルに基づいて生成さ
    れた主映像の水平方向の動きに関する情報に応じて変化
    せしめられる2次元映像を3次元映像に変換する方法に
    おいて、 主映像に黒帯領域が存在するか否かを判別し、主映像に
    黒帯領域が存在すると判別された場合には、全ての動き
    ベクトル検出領域のうち、黒帯領域に属する動きベクト
    ル検出領域以外の動きベクトル検出領域で検出された動
    きベクトルに基づいて、主映像の水平方向の動きに関す
    る情報を生成することを特徴とする2次元映像を3次元
    映像に変換する方法。
  2. 【請求項2】 2次元映像信号から、主映像信号と、主
    映像信号に対して遅延された副映像信号とを生成するこ
    とにより、2次元映像を3次元映像に変換する方法であ
    って、主映像信号に対する副映像信号の遅延量が、原則
    的には、映像エリア内に設定された複数の動きベクトル
    検出領域毎に検出された動きベクトルに基づいて生成さ
    れた主映像の水平方向の動きに関する情報に応じて変化
    せしめられる2次元映像を3次元映像に変換する方法に
    おいて、 主映像の上下部に黒帯領域が存在するか否かを判別し、
    主映像の上下部に黒帯領域が存在すると判別された場合
    には、最上段の動きベクトル検出領域が、上部の黒帯領
    域の下側に位置するように、全動きベクトル検出領域を
    下方にシフトさせ、シフト後の全動きベクトル検出領域
    のうち、上下部の黒帯領域の間に存在する動きベクトル
    検出領域で検出された動きベクトルに基づいて、主映像
    の水平方向の動きに関する情報を生成することを特徴と
    する2次元映像を3次元映像に変換する方法。
JP9230615A 1997-08-27 1997-08-27 2次元映像を3次元映像に変換する方法 Pending JPH1169382A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP9230615A JPH1169382A (ja) 1997-08-27 1997-08-27 2次元映像を3次元映像に変換する方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP9230615A JPH1169382A (ja) 1997-08-27 1997-08-27 2次元映像を3次元映像に変換する方法

Publications (1)

Publication Number Publication Date
JPH1169382A true JPH1169382A (ja) 1999-03-09

Family

ID=16910549

Family Applications (1)

Application Number Title Priority Date Filing Date
JP9230615A Pending JPH1169382A (ja) 1997-08-27 1997-08-27 2次元映像を3次元映像に変換する方法

Country Status (1)

Country Link
JP (1) JPH1169382A (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008288779A (ja) * 2007-05-16 2008-11-27 Sony Corp 画像処理装置および画像処理方法、並びにプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008288779A (ja) * 2007-05-16 2008-11-27 Sony Corp 画像処理装置および画像処理方法、並びにプログラム
US8600195B2 (en) 2007-05-16 2013-12-03 Sony Corporation Image processing device, method and program

Similar Documents

Publication Publication Date Title
JP2846830B2 (ja) 2次元映像を3次元映像に変換する方法
KR100381348B1 (ko) 2차원 영상을 3차원 영상으로 변환하는 방법
EP0703716B1 (en) Method of converting two-dimensional images into three-dimensional images
US8773509B2 (en) Imaging device, imaging method and recording medium for adjusting imaging conditions of optical systems based on viewpoint images
US8687041B2 (en) Stereoscopic panorama image creating apparatus, stereoscopic panorama image creating method, stereoscopic panorama image reproducing apparatus, stereoscopic panorama image reproducing method, and recording medium
US6553184B1 (en) Method of converting two dimensional images into three-dimensional images
KR20090093817A (ko) 패닝화상을 촬상하기 위한 패닝모드를 구비한 촬상장치
EP2051504B1 (en) Camera and method of recording an image
JP2983844B2 (ja) 3次元画像変換方法
JP3096612B2 (ja) 時分割方式立体映像信号検出方法、時分割方式立体映像信号検出装置および立体映像表示装置
JP2005020606A (ja) デジタルカメラ
JP3128467B2 (ja) 2次元映像を3次元映像に変換する方法
JPH10108220A (ja) 2次元映像を3次元映像に変換する装置
JP3249335B2 (ja) 3次元映像変換方法
JPH1169382A (ja) 2次元映像を3次元映像に変換する方法
JP3392627B2 (ja) 2次元映像を3次元映像に変換する方法
JP2846843B2 (ja) 2次元映像を3次元映像に変換する方法
JP2846836B2 (ja) 2次元映像を3次元映像に変換する方法
JP3234412B2 (ja) 動きベクトル検出装置
JP3152556B2 (ja) 2次元画像を3次元画像に変換する方法
JP3108287B2 (ja) 2次元映像を3次元映像に変換する方法
JPH1175222A (ja) 2次元映像を3次元映像に変換する方法
JP2846834B2 (ja) 2次元映像を3次元映像に変換する方法
JP3096622B2 (ja) 2次元映像を3次元映像に変換する方法
JPH1175221A (ja) 2次元映像を3次元映像に変換する方法