JPH0329473A - 映像合成装置 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 ＝産業上の利用分野： この発明は、映像合成装置に関する。

〔発明の概要〕

この発明は、映像合成装置において、合成すべき主映像
を撮影したビデオカメラのカメラワークやレンズ動作等
の情報を記録しておき、映像合成時に、主映像内の被写
体の動きならびに記録されたカメラワークやレンズ動作
等の情報に基づいて、合戊すべき他の映像を変化させ．
るようにすることによって、自由度が高く、より高度な
合戊映像を得ることができるようにしたものである。

〔従来の技術〕

別々の映像を合成する方法として、例えばクロマキー技
法がある。これは、２台のビデオカメラで異なる被写体
を撮影し合戊する技法であり、１台のカメラで例えば主
映像となる人物を撮影し、他のｌ台のカメラで背景を撮
影して、これらを合成するものである。

また、カメラからの主映像と、静止画ファイルやＶＴＲ
Ｉ置等からの他の映像とを合成するものや、ＶＴＲ装置
等に記録された映像どうしを合戊する装置もある。

〔発明が解決しようとする課題〕

ところで、従来の映像合戊装置においては、合底すべき
主映像に、パン・チルト等のカメラワークやズーミング
、フォーカシング等のレンズ動作が行なわれていると、
合成すべき他の映像とのバランスが取れず、良好な合成
映像を得ることはできない。

したがって、従来の映像合成装置により合戊された映像
は、カメラワークやレンズ動作を伴うことのないもので
あり、自由度が少ないものであった。

〔課題を解決するための手段〕

そこで、この発明は、合戊すべき主映像のみならず、こ
の主映像を撮影したビデオカメラのカメラワークやレン
ズ動作等の情報をも記録するようにしておき、記録され
た主映像内の被写体の動きならびに記録されたカメラワ
ークやレンズ動作等の情報に基づいて、合威すべき他の
映像を変化させ、主映像と他の映像とを合成するように
したものである。

〔作用〕

自由度が高く、より高度な合戊映像を得ることができる
。

〔実施例〕

第１図は、この発明の一実施例のブロック図である。

同図八において、（１）はビデオカメラであり、このビ
デオカメラ（１）からはビデオ信号Ｓｖ　の他に、カメ
ラ（１）のレンズの種類（広角、望遠等）を示すレンズ
データＤｌや、ガンマ特性（ＧＡＭＭＡ，　ＫＮＥＥ，
ＳＬＯＰＥ等〉を示す映像データＤｖを含む信号ＳがＣ
ＣＵ（カメラコントロールユニット）　（２）　ニ供給
される。そして、このＣ　Ｃ　Ｕ　（２）からビデオ信
号Ｓｖ　が映像記録装＠（３）に供給され記録される。

そして、この映像記録装置（３）からタイムコードＴＣ
が、例えばフロッピーディスク等を用いる撮影データ記
録装置（４）に供給される。また、Ｃ　Ｃ　Ｕ　（２）
からの映像データＤｖ、レンズデータＤＡが撮影データ
記録装置（４）に供給され記録されるとともに、ビデオ
カメラ（１）の撮像ＩＩ（１３）からのズーミング、フ
ォーカシング、絞り等の情報を示す撮像信号がこれらを
検出する検出装置（ｌ２）に供給され、この検出装！（
１２）から撮像データＤｉ　　として、撮影データ記録
装置（４）に供給され記録される。

そして、第１図Ｂは上述のようにして映像記録装置（３
）に供給された映像と、例えば静止画ファイル（６）に
記録された映像との合戒を行なう装置を示すものである
。

つまり、映像記録装置（３）から、ビデオ信号ＳＶが映
像合成装置（５）に供給されるとともに、タイムコード
ＴＣが撮影データ記録装置（４）に供給される。

すると、撮影データ記録装置（４）から、映像データＤ
ν、レンズデータＤｌ、撮像データＤｌ　が映像合成装
置（５）に供給される。また、映像記録装置（３）から
のビデオ信号ＳＶ　は、動き検出装＠（７）に供給され
る。そして、この動き検出装置（７）から、ビデオ信号
Ｓνの映像内の被写体の動きを示す動きべクトルデータ
Ｄｍが映像合成装置（５）に供給される。

そして、静止画ファイル（６）からのビデオ信号Ｓｖ，
が映像合戊装置（５）に供給され、映像データＤｖのガ
ンマ特性に従って、ガンマ補正されるとともに、レンズ
データＤＩｌ，撮像データＤｌ、動きベクトルデータＤ
ｍ　に従って、後述するように、ビデオ信号Ｓｖ，の映
像が変化されて、ビデオ信号ＳｖとＳＶ，とが合成され
る。そして、合成された映像信号Ｓｖ２が映像合成装置
（５）から映像記録装置（１１）に供給され、記録され
る。

次に、上述した第１図例の装置によって、合成される映
像について説明する。

第２図は、ビデオ信号Ｓｖの映像内の被写体がズーミン
グされた場合の説明図である。

そして、同図Ａはビデオ信号Ｓｖの映像であり、主映像
である被写体（８）が撮影されたものである。

また、同図Ｂはビデオ信号ＳＶ，の映像であり他の映像
である被写体（９）が撮影されたものである。そして、
映像データＤｖ、レンズデータＤβに従って、映像合成
装置（５）によって映像ＡとＢとが合成されると、同図
Ｃに示すような合成映像が得られる。そして、映像Ａ内
の被写体〔８）がズームアップされると、被写体（８）
が拡大される。ここで、映像Ｂ内の被写体（９）に何の
処理もせずに、そのまま合成すると、同図Ｃに示すよう
に、拡大された被写ｊ＊　（８）と拡大されない被写体
（９）との不自然な合成映像となってしまう。しかし、
第１図例の装置の場合は、撮像データＤ１　　に従って
、映像合成装置（５）が、ビデオ信号Ｓｖ，の映像の被
写体（９）を第２図Ｅに矢印で示すように放射方向に移
動させ、拡大し、自然な合成映像を得ることができる。

なお、第２図においては、被写体（８）がズームアップ
され拡大された例を示したが、被写体（８）が縮小され
る場合は、それに合わせて、被写体（９）が縮小される
ものである。

第３図は、撮像データＤｉ　　のフォーカシング情報に
従って、合戒映像内の各被写体のフォーカシング処理を
行なう場合の説明図である。

そして、同図Ａはビデオ信号３ｖの映像であり主映像で
ある被写体（８）が撮影されたもので、同図Ｂ及びＣは
静止画ファイル（６）からの他の映像であり、それぞれ
被写体は（１０）及び（９）となっている。

そして、主映像Ａならびに他の映像Ｂ，Ｃが映像データ
Ｄｉ　　　レンズデータＤｌに従って、映像合成装置（
５）によって合成されると、同図Ｄに示すような合戊映
像が得られる。そしてこの合戊映像Ｄにおいては、被写
体（８）がビデオカメラから最も近い位置であり、被写
体（９）が次に近い位置、被写体く１０〉が最も遠い位
置にあるようにされるものである。この場合、フォーカ
シング情報が被写体（８）の位置に焦点が合っているこ
とを示すとすると、この同図Ｄに太い実線で示すように
、被写体（８）にピントが合っているようにし、被写体
（９）に多少のボカシ処理を加え、被写体くＩＯ）には
被写体（９）よりも多くボカシ処理を加えるものである
。

そして、フォーカシング情報が被写体（９）の位置に焦
点が合っていることを示すと、同図Ｅに太い実線で示す
ように、被写体（９）にピントが合っているようにし、
被写体（８）及び（１０）には多少のボカシ処理を加え
るものである。

また、フォーカシング情報が被写体くＩＯ）の位置に焦
点が合っていることを示すと、同図Ｆに太い実線で示す
ように、被写体くＩＯ〉にピントが合っているようにし
、被写体（９）には多少のボカシ処理を加え、被写体（
８）には被写体（９）よりも多くボカシ処理を加えるも
のである。

第４図は、ビデオカメラ〔１）によりパン又はチルトが
行なわれた場合の説明図である。

そして、同図Ａはビデオ信号Ｓｖの主映像であり、同図
Ｂはビデオ信号３ｖ，の他の映像である。

そして、これらの映像Ａ及びＢが映像データＤｖレンズ
データＤｉに従って合戊されると、同図Ｃに示すような
合戊映像が得られる。そして、ビデオカメラ（１）がパ
ンされて被写体（８）が映像中の左端に移動したとする
。ここで、被写体（９）に何の処理もせずに、そのまま
合成すると、同図Ｄに示すように、被写体（８）と（９
）との間隔が大きなものとなってしまい、不自然な合成
映像となってしまう。しかし第１図例のご置の場合は、
被写体（８）の動きを示す動きベクトルデータＤｍ　に
従って、映像合成装置（５）が、ビデオ信号ＳＶ，の映
像の被写体（９）を第４図Ｅの矢印で示すように、移動
させ、自然な合成映像を得ることができる。

また、ビデオカメラ（１）がチルトされて被写体（８）
が映像内の上側に位置した状態となったとする。

ここで、被写体（９）に何の処理もせずに、そのまま合
成すると、同１！ＩＦに示すように、被写体（８）のみ
が上側に位置した不自然な合成映像となってしまう。し
かし、第１図例の装置の場合は、動きベクトルデータＤ
ｍ　に従って、映像合成装置（５）が被写体（９）を第
４図Ｇの矢印で示すように移動させ、自然な合成映像を
得ることができる。

また、ビデオカメラ（１）の絞りが変化して、合戊映像
中の被写体（８）に変化が生じたとする。この場合、合
成映像中の被写体（９）に何の処理も行なわなかったと
すると不自然な合戊映像となってしまう。

そこで、撮像データＤ１　の絞り情報に従って、映像合
戊装置（５）が被写体（９）を変化させ自然な合戊映像
を得るようにするものである。

第５図は、この発明の他の実施例のブロック図であり、
第１図例と同様なものには同一の符号を付してある。

そして、この第５図例の場合は、ビデオカメラ（１）で
被写体（８）を撮影するとともに、この被写体（８）の
映像と静止画ファイル（６）からの映像とを合戊するも
のである。

つまり、Ｃ　Ｃ　Ｕ　（２）から映像データＤｖ、レン
ズデータＩＭ、ビデオ信号Ｓｖ　が映像合成装置（５）
に供給される。そして、ビデオ信号Ｓｖ　は動き検出装
置（７）に供給され、この動き検出装置（７）から動き
ベクトルＤｒｒＩ　が映像合成装置に供給される。また
、撮像部（１３）から信号が検出装置（１２）に供給さ
れ、この検出装置（１２）から撮像データＤｉ　が映像
合成装置（５）に供給される。

そして、静止画フィルム（６）からのビデオ信号３ｖ，
が映像合成装置（５）に供給され、映像データＤｖレン
ズデータＤ１、撮像データＤ＋　、動きベクトルデータ
ＤＩＴｌ　に従って、ビデオ信号Ｓｖ，の映像内の被写
体に変化が加えられて、ビデオ信号Ｓｖ　の映像と合戊
される。そして、映像合威されたビデオ信号Ｓｖ２が映
像合成装置（５）から映像記録装置（Ｉ１）に供給され
、記録される。

なお、第５図例の装置の映像の合成方法については上述
した第１図例と同様なものであるので説明は省略する。

なお、上述した例においては、ビデオ信号ＳＶの発生源
を静止画ファイルとしたが、これにＩＩＩ　９ず例えば
ＶＴＲ装置であってもよい。

さらに、映像合成装置（５）は映像の合戊を行なうとと
もに編集をも行ない得るものである。

また、上述した例においては、バン、チルトの検知を映
像内の被写体の動きから検知するようイニしたが、ビデ
オカメラ（１）とこのビデオカメラ（１）の三脚等乙の
相対的な位置の変動から検知するようにしてもよい。

そして、さらに上述した例においては、撮ｆｉ　．１％
（１３）からの信号を検出装置（１２）を介して、撮像
データＤｉ　を得るようにしたが、ビデオカメラ（１）
からの信号Ｓ１　　に撮像データＤ１　を含むようにし
てもよい。

〔発明の効果〕

こうして、この発明によれば、映像合戒装置において、
合成すべき主映像のみならず、この主映像を撮影したビ
デオカメラのカメラワークやレンズ動作等の情報を記録
しておき、記録された主映像内の被写体の動きならびに
記録されたカメラワークやレンズ動作等の情報に基づい
て、合戊すべき他の映像を変化させ、主映像と他の映像
とを合成するようにしたので、自由度が高く、より高度
な合成映像を得ることができる。

【図面の簡単な説明】

第１図はこの発明の一実施例のブロック図、第２図〜第
４図は説明図、第５図はこの発明の他の実施例のブロッ
ク図である。 （１）はビデオカメラ、（２）はＣＣＵ．（３）は映像
記録装置、（４）は撮影データ記録装置、（５）は映像
合成装置、（６）は静止画ファイルである。 ヌ゜゛−４の１茫明序ク 第２図 Ａ 第 ３ 図 ３ 一賞珀刑 第１図 ノぐソチル１　０　級　日Ｆ４　　口 第 ４ 図

Claims (1)

1. 【特許請求の範囲】 主映像を記録する第１の映像記録手段と、 上記主映像を撮影したビデオカメラのカメラワークやレ
   ンズ動作等の撮影情報を記録する手段と、上記主映像と
   は異なる他の映像を記録する第２の映像記録手段と、 上記第１の映像記録手段からの上記主映像と、上記撮影
   情報記録手段からの撮影情報と、上記第２の映像記録手
   段からの上記他の映像とを受け取り、上記撮影情報に基
   づいて、上記他の映像を変化させ、変化させた上記他の
   映像と上記主映像とを合成する映像合成手段と、 を備えた映像合成装置。