JPH05346778A - 画像合成方法および画像合成装置 - Google Patents

Abstract

(57)【要約】 【目的】 立体視のための出力画像を合成する画像合成
方法および装置を提供する。 【構成】 制御装置５は、入力装置３によつて背景画像
データと合成用画像データを入力し、データ入力装置１
１を介して入力された画像データの位置情報などに基づ
いて、演算装置７に背景画像データと合成用画像データ
との合成位置を演算させ、該演算結果に基づいて、演算
装置７に該画像を合成させ、出力装置ａ８に該合成画像
を出力させる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は画像合成方法および画像
合成装置に関し、例えば、立体視のための出力画像を合
成する画像合成方法および画像合成装置に関するもので
ある。

【０００２】

【従来の技術】画像合成処理は、背景画像に対して複数
の画像を合成して、１つの出力画像を得るものである。
従来の画像合成装置においては、マスクのデータを用い
て合成用画像の一部分を合成する合成方法、および、合
成用画像のデータと、その画像が合成される背景画像の
データとを考慮して、合成画像を「透かし」のように合
成する方法などがあつた。

【０００３】

【発明が解決しようとする課題】しかし、上記従来例に
おいては、次のような問題点があつた。すなわち、従来
の画像処理装置で得られた合成画像は、該合成画像の鑑
賞者にとつて、平面的なイメージにしか見えないという
欠点があつた。また、従来の立体視を考慮した画像合成
処理においては、もともと左右２つの背景画像上に撮影
されている被写体については、まつたく無視されてい
て、画像合成後の２枚の画像を、偏光投影方式などの立
体写真鑑賞方法をもつて鑑賞したとしても、背景画像内
に存在する被写体と、合成された物体との間の、位置関
係に矛盾が生じる（立体視用語で「視野闘争が起き
る」）という欠点があつた。

【０００４】

【課題を解決するための手段】本発明は、前記の課題を
解決することを目的としたもので、前記の課題を解決す
る一手段として、以下の構成を備える。すなわち、第１
の画像データと第２の画像データとを合成する画像合成
方法であつて、前記第１の画像データへ前記第２の画像
データを合成する際に前記第２の画像データの合成位置
をずらして合成して、２つ以上の出力画像を得る画像合
成方法とする。

【０００５】また、第１の画像データと第２の画像デー
タとを入力する入力手段と、前記第１の画像データと前
記第２の画像データとの位置情報を指示する指示手段
と、前記指示手段によつて指示された位置情報に基づい
て前記第１の画像データと前記第２の画像データとの合
成情報を演算する演算手段と、前記演算手段によつて演
算された合成情報に基づいて前記第１の画像データと前
記第２の画像データとを合成する合成手段とを備え、前
記合成手段は前記第１の画像データへ前記第２の画像デ
ータを合成する際に前記第２の画像データの合成位置を
ずらして合成して２つ以上の出力画像データを得る画像
合成装置とする。

【０００６】

【作用】以上の構成によれば、第１の画像データへ第２
の画像データを合成して、第２の画像データの合成位置
をずらした２つ以上の出力画像を得られる画像合成方法
および画像合成装置を提供することができる。例えば、
以上の構成によつて、立体視のための２つの出力画像が
得られ、該出力画像を然るべき方法で鑑賞することによ
り、ユーザの指定した位置にあたかも遠近感をもつて配
置されているように見える、今までにはないクリエイテ
イブなイメージを表現できる画像合成方法および画像合
成装置を提供することができる。

【０００７】例えば、さらに、以上の構成によつて、背
景画像上の被写体と、合成される複数個の合成用画像と
の間に、位置的な矛盾がない、すなわち視野闘争の無い
立体イメージを鑑賞することができる画像合成方法およ
び画像合成装置を提供することができる。

【０００８】

【実施例】まず、本実施例の特徴を明確にするため、一
般的な立体視の性質について説明する。人間の両眼の瞳
孔は、平均６３.５mm離れているため、人間がものを視
る時には、両眼の網膜には、お互いに僅かに異なつた角
度から視た像が映つている。つまり、人間がものを視た
時の立体感は、このような左右の違いを心理的に判断し
た結果生まれると考えられている。

【０００９】したがつて、カメラのレンズを人間の眼の
間隔だけ離して、同一の被写体を撮影した２枚の写真画
像は、それぞれのシーンに相当するものと考えられ、こ
の２枚の画像の、左側で撮影したものを左目で、右側で
撮影したものを右目で、それぞれ独立して観察すれば、
直接被写体を見たときと同様な立体感が再現される。図
１は立体写真の一撮影方法を示す図である。

【００１０】図１では、同機種の２台のカメラに同じ焦
点距離のレンズを取付け、この２つのレンズの光軸間隔
が、瞳孔間距離の平均値６３.５mmになるように並べ
て、同時撮影する方法を示している。図２は左右２枚の
写真画像の例を示す図で、図１に示した撮影方法で撮影
されたものである。

【００１１】図２に示す２枚の画像は、例えば偏光投影
方式によつて、手前から球，立方体，円錐の順で、遠近
感をもつて配置されているイメージとして鑑賞すること
ができる。ここでいう偏光投影方式とは、左右２枚のポ
ジ画像を、９０度位相の異なつた２枚の偏光フイルタを
取付けた２台のプロジエクタを使用して、鏡面反射性の
スクリーンへ投影し、鑑賞者は、プロジエクタに取付け
られた２枚の偏光フイルタの位相に合わせて作られた偏
光眼鏡を通して、スクリーン上の画像を鑑賞するもので
ある。

【００１２】その他、２枚の画像をプリントして、鑑賞
者がステレオビユーアを用いる方法によつても、同様の
イメージを鑑賞することができる。さて、本発明は、左
右２つの画像における個々の物体の見え方の違いではな
く、左右それぞれの画像に映つている個々の物体の位置
に着目するものであるが、本発明を説明する前に、さら
に、写真レンズの一般的特性について説明する。

【００１３】一般に使用されているカメラは、レンズ交
換の可能な小型カメラであり、この場合、撮影にあたつ
て、まずレンズの選択が必要である。写真レンズには、
固有の焦点距離をもつたレンズと、焦点距離の変化する
ズームレンズとがある。また、画面上に写し込まれる被
写体の撮影範囲によつて、レンズを区別すると、広角レ
ンズ，標準レンズおよび望遠レンズに分類される。

【００１４】撮影範囲を角度で示したものが画角であ
り、撮影画面の対角線の長さをＤ、レンズの焦点距離を
ｆとすると、レンズの画角Ｌは次式で与えられる。 tan（Ｌ/２）＝Ｄ/（２ｆ） ・・・（１） しかし実際の撮影における画角は、画面の縦と横の長さ
が対角線の長さよりも短いので、画面の水平方向を占め
る範囲の角度を水平視角、また、画面の垂直方向を占め
る範囲の角度を垂直視角という。例えば、３５mmサイズ
カメラの５０mmのレンズの画角は、一般的に４６度であ
るが、撮影画面の横長をａ、撮影画面の縦長をｂとすれ
ば、該レンズの水平視角Ｌ'aおよび垂直視角Ｌ'bは次式
で与えられる。

【００１５】 tan（Ｌ'a/２）＝ａ/（２ｆ） ・・・（２） tan（Ｌ'b/２）＝ｂ/（２ｆ） ・・・（３） また、例えば、３５mmサイズカメラの画面の大きさは、
横３６mm×縦２４mmであることから、上式より水平視角
Ｌ'aは、 tan（Ｌ'a/２）＝３６/（２×５０）＝０.３６ ∴ Ｌ'a≒４０度 また垂直視角Ｌ'bは、 tan（Ｌ'b/２）＝２４/（２×５０）＝０.２４ ∴ Ｌ'b≒２７度 となる。

【００１６】図３は２台のカメラによつて物体を撮影す
る状態例を示す斜視図である。同図は、同機種・同レン
ズの２台のカメラを、左カメラのレンズ光軸λLと、右
カメラのレンズ光軸λRとが平行に、かつ両光軸の間隔
がｄとなるように設置し、カメラの正面方向に存在す
る、例えば青色の背景中の人物（位置は点Ｐで表現す
る）を撮影する状態を示している。

【００１７】左右のカメラのレンズの焦点距離をｆ、水
平視角をＬ'a、垂直視角をＬ'bとする。また、左右のカ
メラの内部には、それぞれ同じ大きさのフイルムがセツ
トしてあり、フイルムの横，縦の長さをそれぞれａ，ｂ
とする。ここで、Ｌ'a，Ｌ'b，ａ，ｂ，ｆの関係は、次
式で表される。 tan（Ｌ'a/２）＝ａ/２ｆ ・・・（３Ａ） tan（Ｌ'b/２）＝ｂ/２ｆ ・・・（３Ｂ） ここで、光軸λL，λRに垂直な平面の中で、点Ｐが存在
する平面ｇを考え、２台のカメラから平面ｇまでの距離
をｔとする。

【００１８】また、面ＡＢＣＤおよび面ＥＦＧＨは、平
面ｇの一部分であり、それぞれ、左カメラのフイルム面
Ａ'Ｂ'Ｃ'Ｄ'に、右カメラのフイルム面Ｅ'Ｆ'Ｇ'Ｈ'に
写る範囲を示している。左右２つのレンズの中心をそれ
ぞれＯL，ＯR、光軸λL，λRと面ＡＢＧＨとの交点をそ
れぞれＭL，ＭRとする。

【００１９】さらに、交点ＭLと交点ＭRを結ぶ線分の中
点をＭとして、平面ＡＢＧＨ上で、中点Ｍから上下垂直
に伸ばした直線と線分ＡＨ，ＢＧとの交点をそれぞれＭ
H，ＭBとする。さらに、交点ＭL，ＭRを通る直線と線分
ＡＢ，ＨＧとの交点をそれぞれＩ，Ｌとする。

【００２０】ここで、点Ｐと線分ＭHＭBの距離をｗ、ま
た、点Ｐと線分ＩＬの距離をｈとする。また、点Ｐより
線分ＡＨ，ＡＢに垂線を引いた時の交点をそれぞれＰ
x，Ｐyとし、点Ｐの面ＡＢＣＤ上での座標をＰVL（ＸV
L，ＹVL）、点Ｐの面ＥＦＧＨ上での座標をＰVR（ＸV
R，ＹVR）とする。ただし、ＸVL，ＹVL，ＸVR，ＹVR
は、それぞれ以下のものであるとする。

【００２１】ＸVL：線分ＡＰのｘ軸成分の長さ ＸVR：線分ＥＰのｘ軸成分の長さ ＹVL＝ＹVR：線分ＡＰのｙ軸成分の長さ そして、面ＡＢＣＤに対応する左側のフイルム面Ａ'Ｂ'
Ｃ'Ｄ'上の座標をＰfL（ＸfL，ＹfL）、面ＥＦＧＨに対
応する右側のフイルム面Ｅ'Ｆ'Ｇ'Ｈ'上の座標をＰfR
（ＸfR，ＹfR）とする。

【００２２】また、図４は図３の平面図であり、図４に
示す符号は図３における線分ＩＬ上のものである。図４
において、角ＩＯLＪは、左カメラのレンズの水平視角
Ｌ'aを表し、線分ＯLＭLは角ＩＯLＪを二等分する。し
たがつて、式（３Ａ）から、 （線分ＩＭLの長さ）＝（線分ＪＭLの長さ） ＝ｔ・tan（Ｌ'a/２） ＝ｔａ/２ｆ である。

【００２３】また、右カメラで撮影する部分も同様であ
り、 （線分ＫＭRの長さ）＝（線分ＬＭRの長さ） ＝ｔ・tan（Ｌ'a/２） ＝ｔａ/２ｆ である。

【００２４】さらに、図５は図３の側面図であり、図５
に示す符号は図３における線分ＭHＭB上のものである。
図５において、角ＭHＯLＭLは、左カメラのレンズの垂
直視角Ｌ'bを表し、線分ＯLＭは垂直視角Ｌ'bを二等分
する。したがつて、式（３Ｂ）から、 （線分ＭＭHの長さ）＝（線分ＭＭLの長さ） ＝ｔ・tan（Ｌ'b/２） ＝ｔｂ／２ｆ である。

【００２５】図６は左右のカメラの撮影範囲を示す図
で、図７は左右のフイルム上に写つた画像を示す図であ
る。さて、物体が線分ＭHＭBより左側にある場合はｗ＜
０、また線分ＭHＭBより右側にある場合はｗ≧０とする
と、座標値ＸVL，ＸVRは次式で与えられる。 ＸVL＝ｔ・tan（Ｌ'a/２）+ｗ+ｄ/２ ＝（ｔａ/２ｆ）+ｗ+ｄ/２ ・・・（４） ＸVR＝ｔ・tan（Ｌ'a/２）+ｗ-ｄ/２ ＝（ｔａ/２ｆ）+ｗ-ｄ/２ ・・・（５） また、物体が線分ＩＬ（水平線）より上側にある場合は
ｈ＜０、また線分ＩＬより下側にある場合はｈ≧０とす
ると、座標値ＹVL，ＹVRは次式で与えられる。

【００２６】 ＹVL＝ＹVR＝ｔ・tan（Ｌ'b/２）+ｈ ＝（ｔｂ/２ｆ）+ｈ ・・・（６） ここで、物体が左右どちらのフイルムにも写るために
は、面ＥＦＣＤに存在することが必要であり、この条件
は次式で与えられる。 -ｔ・tan(Ｌ'a/２)+ｄ/２<ｗ<ｔ・tan(Ｌ'a/２)-ｄ/２ ∴ -(ｔａ/２ｆ)+ｄ/２<ｗ<(ｔａ/２ｆ)-ｄ/２ ・・・（７） -ｔ・tan(Ｌ'b/２)<ｈ<ｔ・tan(Ｌ'b/２) ∴ -(ｔｂ/２ｆ)<ｈ<(ｔｂ/２ｆ) ・・・（８） また、三角形の相似の性質により、 三角形ＩＯLＰdと三角形Ｉ'ＯLＰdLは相似 三角形ＫＯRＰdと三角形Ｋ'ＯRＰdRは相似 であり、その相似比は、 ＰdＯL：ＰdLＯL＝ＰdＯR：ＰdRＯR＝ｔ：ｆ であり、左右のフイルム上の位置はそれぞれ次式で与え
られる。

【００２７】ＸfL＝ｆ/ｔ・ＸVL ＝ｆ/ｔ・｛ｔ・tan(Ｌ'a/２)+ｗ+ｄ/２｝ ＝ｆ/ｔ・｛(ｔａ/２ｆ)+ｗ+ｄ/２｝ ＝ａ/２+(ｆ/ｔ)(ｗ+ｄ/２) ・・・（９） ＸfR＝ｆ/ｔ・ＸVR ＝ｆ/ｔ・｛ｔ・tan(Ｌ'a/２)+ｗ-ｄ/２｝ ＝ｆ/ｔ・｛(ｔａ/２ｆ)+ｗ-ｄ/２｝ ＝ａ/２+(ｆ／ｔ)(ｗ-ｄ/２) ・・・（１０） ＹfL＝ＹfR＝ｆ/ｔ・ＸVL ＝ｆ/ｔ・｛ｔ・tan(Ｌ'b/２)+ｈ｝ ＝ｆ/ｔ・｛(ｔｂ/２ｆ)+ｈ｝ ＝ｂ/２+ｆｈ/ｔ ・・・（１１） 前記のような撮影条件にある物体を撮影した場合の、左
右のフイルム上のずれ量を△Ｄfとすれば、上記のＸfL
とＸfRより、 △Ｄf＝ＸfL-ＸfR＝ｄｆ/ｔ ・・・（１２） が得られる。

【００２８】この結果、以下の内容が判断できる。 （１）左右のフイルム上の物体のずれは、距離ｗ（点Ｐ
と線分ＭHＭBの距離）に依存しないため、物体が面ＡＢ
ＧＨのどの位置に存在する場合でも、その量は同じであ
る。 （２）左右のフイルム上の物体画像の位置は、左フイル
ム上の位置を基準とすると、右フイルムでは左方向にず
れる。

【００２９】（３）左右のフイルム上のずれ量ΔＤf
は、レンズの画角Ｌ，水平視角Ｌ'aおよび垂直視角Ｌ'b
には依存しない。 （４）距離ｔ（カメラから物体までの距離）とずれ量Δ
Ｄfは反比例する。例えば、以下の撮影条件で、左右の
フイルム上のずれ量ΔＤfを計算すると、次のようにな
る。

【００３０】撮影条件： ・撮影機 ３５mmカメラ ・レンズの焦点距離 ｆ＝５０[mm] ・光軸間隔 ｄ＝６３.５[mm] ・物体までの距離 ｔ＝５,０００[mm] ・物体から中心までの距離 ｍ＝１,０００[mm] ずれ量： ΔＤf＝ｄ・ｆ/ｔ＝６３.５×５０/５,０００ ＝０.６３５[mm] 従つて、左フイルムの物体画像の位置は、右フイルムの
同位置に比べて、右へ０.６３５mmずれる。

【００３１】上述のずれを考慮して、背景画像に存在す
る被写体の位置を計算して、予め計算しておいた被写体
のマスク画像を用いて、複数個の画像を合成して、偏光
投影方式などの方法で鑑賞すれば、背景画像に対して個
々の合成用画像が、ユーザが指定した見掛けの位置に、
遠近感をもつて配置されているように見え、さらに、被
写体と合成画像の間に位置的な矛盾が無いように見える
イメージを形成することができる。

【００３２】以下、図面を参照して本発明に係る一実施
例を詳細に説明する。図８は本発明に係る画像合成シス
テムの構成例を示すブロツク図である。図８において、
１は被写体で、撮影の対象となる人物・風景などであ
る。２は撮影装置で、被写体１を撮影するものであり、
例えば写真機などである。３は入力装置で、撮影機２に
よつて撮影された画像などを入力するものであり、例え
ばドラムスキヤナなどである。

【００３３】１０はコマンド入力装置で、制御装置５へ
の指示などを入力するものであり、例えばキーボードな
どを用いる。１１はデータ入力装置で、座標値データな
どを入力するものであり、例えばマウスなどを用いる。
４は表示装置で、入力コマンド，入力画像および合成処
理後の画像などを表示するものであり、例えばＣＲＴな
どを用いる。

【００３４】６はフアイル装置で、背景画像，合成用画
像群，ユーザから入力されたデータ，出力画像などを格
納するものである。７は演算装置で、画像合成などの演
算処理を行うものである。８は出力装置ａで、ハードコ
ピーなどを得るものであり、例えばデイジタルフイルム
レコーダなどを用いる。

【００３５】９は出力装置ｂで、合成済み画像の立体効
果を確認するためのハードコピーなどを得るもので、例
えばカラー画像プリンタなどの簡易出力装置を用いる。
５は制御装置で、入力装置３，コマンド入力装置１０，
データ入力装置１１，表示装置４，フアイル装置６，演
算装置７，出力装置ａ８などを制御する。以上のように
構成された画像合成システムについて、以下、データの
流れに従つて、その動作の概要を説明する。

【００３６】制御装置５によつて、入力装置３は、撮影
装置２によつて撮影された左右２つの背景画像、例えば
青色の背景で撮影した人物の画像と、その人物画像に合
成するための複数の合成用画像、例えば人物や建物の撮
影画像とを読取り、さらに、入力装置３は、読取つた画
像をアナログデイジタル変換（以下「Ａ/Ｄ変換」とい
う）した画像データを出力する。

【００３７】次に、制御装置５によつて、入力装置３が
出力した画像データは、フアイル装置６へ送られ、フア
イル装置６は該画像データを格納する。以下の説明で
は、便宜上、デイジタル画像の各画素を構成する赤，
青，緑のデータを、それぞれＲ，Ｇ，Ｂで表す。また、
以下では、１画素は、ＲＧＢ各８ビツト、すなわち２５
６階調（最高輝度は２５５，最低輝度は０）で構成され
る一例を説明するが、本実施例はこれに限定されるもの
ではない。

【００３８】なお、本実施例は、この画像入力の際に、
制御装置５によつて指定された画像の読取ピツチによつ
て、画像データの縦横の画素数が決定する。ここで、本
実施例は、左右２つの入力画像のそれぞれについて、全
体画像から被写体部分を区別するためのマスクデータが
作成して、フアイル装置６に格納する。そして、演算装
置７は、フアイル装置６に記憶されたマスクデータを用
いて、左右の画像上の被写体のずれを計算して、該計算
結果によつて、撮影時の被写体のカメラからの距離が計
算される。なお、該マスクデータは、後述の画像合成処
理の際も使用される。

【００３９】次に、データ入力装置１１を介して、ユー
ザによつて入力された、左右の背景画像の撮影条件と、
左右の背景画像に合成する個々の合成用画像の見掛けの
距離，位置とが、制御装置５によつて、フアイル装置６
へ格納される。次に、制御装置５によつて、演算装置７
は、フアイル装置６に格納された左右の背景画像の撮影
条件と、左右の背景画像に合成する個々の合成用画像の
見掛けの距離，位置とから、適切な合成用画像のずらし
画素数を計算し、計算結果に従つて、フアイル装置６に
格納された、左右の背景画像と個々の合成用画像を合成
して、左画像と右画像の２つの合成画像を出力する。こ
の際、演算装置７は、フアイル装置６に記憶されたマス
クデータが用いることで、距離関係に矛盾のない合成を
実現する。

【００４０】次に、制御装置５によつて、演算装置７か
ら出力された２つの合成画像は、フアイル装置６に格納
され、出力装置ｂ９で簡易出力される。次に、本実施例
の画像位置の指定方法について説明する。図９は画像位
置の指定方法を説明する図である。本実施例において、
図９に示す画像上の任意画素Ｐの座標は、画像の左上の
画素を原点として、画素Ｐが原点から右方向に何画素離
れているかを例えばｘとし、画素Ｐが原点から下方向に
何画素離れているかを例えばｙとして、Ｐ（ｘ，ｙ）の
ように表す。なお、ｘの値は、０からＸ−１の間の整
数、また、ｙの値は、０からＹ−１の間の整数になる。

【００４１】次に、本実施例の通常の画像合成処理につ
いて説明する。図１０は通常の画像合成処理の一例を示
す図である。同図において、１０１は背景画像、１０２
は合成用画像、１０３は合成後の画像である。本実施例
の通常の画像合成処理においては、例えば、林檎状の物
体１０１ａが写つた背景画像１０１上の任意位置Ｐ
（ｘ，ｙ）へ、背景画像１０１よりも充分小さい合成用
画像１０２を合成する場合、例えば、背景画像１０１の
位置Ｐへ、合成用画像１０２の原点（例えば左上の画
素）を合わせて、合成用画像１０２が重なる背景画像１
０１の画素を、合成用画像１０２の画素に置換える。従
つて、本実施例の通常の画像合成処理においては、合成
用画像１０２と林檎状の物体１０１ａとが重なる部分
は、合成用画像１０２が上に合成されるので、合成後の
画像は１０３のようになる。

【００４２】次に、本実施例のマスクデータを用いた画
像合成処理について説明する。図１１はマスクデータを
用いた画像合成処理の一例を示す図である。同図におい
て、１０４は背景画像、１０５はマスクデータ、１０６
は合成用画像、１０７は合成後の画像である。マスクデ
ータ１０５は、背景画像１０４上において、合成の許可
／禁止を区別するためのデータであり、例えばビツトマ
ツプデータを用る。

【００４３】本実施例のマスクデータを用いた画像合成
処理においては、例えば、林檎状の物体１０４ａが写つ
た背景画像１０４上の任意位置Ｐ（ｘ，ｙ）へ、背景画
像１０４よりも充分小さい合成用画像１０６を合成する
場合、例えば、林檎状のマスクデータ１０５ａの領域は
合成禁止として、背景画像１０４の位置Ｐへ、合成用画
像１０６の原点（例えば左上の画素）を合わせて、合成
用画像１０６が重なる背景画像１０４の画素を、合成用
画像１０６の画素に置換える。従つて、本実施例の通常
の画像合成処理においては、合成用画像１０６と林檎状
の物体１０４ａとが重なる部分は、合成が禁止されるの
で、合成後の画像は１０７のようになる。

【００４４】次に、本実施例のずらし画素数の算出方法
について説明する。さて、背景画像に用いる撮影画面の
横サイズをａ[mm]、同縦サイズをｂ[mm]、読取ピツチを
ｐ[画素/mm]とすると、量子化された背景画像の横サイ
ズＸと縦サイズＹは、次式で与えられる。 Ｘ＝ａ・ｐ [画素] ・・・（１３） Ｙ＝ｂ・ｐ [画素] ・・・（１４） 図１２は左右の背景画像データの一例を示す図である。

【００４５】同図において、ある合成用画像が、図３に
示す（線分ＯＭの長さ）＝ｔである面ＡＢＧＨの、（線
分ＭＰdの長さ）＝ｗ，（線分ＰＰdの長さ）＝ｈの点Ｐ
に見えるような、左背景画像の座標ＰmL（ｘmL，ｙm
L），右背景画像の座標ＰmR（ｘmR，ｙmR）および左右
のずらし画素数△Ｄmは、次のように与えられる。すな
わち、左右フイルム上の画像の位置（ＸfL,ＹfL,ＸfR,
ＹfR）を与える式（９）〜式（１１）、および、左右の
フイルム上の画像のずれ量△Ｄfを与える式（１２）か
ら、 ｘmL＝Ｘ/ａ・ＸfL ＝１/ｐ・｛ａ/２+(ｆ/ｔ)(ｗ+ｄ/２)｝ ＝ａ/２ｐ+(ｆ/ｐｔ)(ｗ+ｄ/２) ・・・（１５） ｘmR＝Ｘ/ａ・ＸfR ＝１/ｐ・｛ａ/２+(ｆ/ｔ)(ｗ-ｄ/２)｝ ＝ａ/２ｐ+(ｆ/ｐｔ)(ｗ-ｄ/２) ・・・（１６） ｙmL＝ｙmR＝Ｙ/ｂ・ＹfL ＝１/ｐ・(ｂ/２+ｆｈ/ｔ) ＝ｂ/２ｐ+ｆｈ/ｐｔ ・・・（１７） △Ｄm＝(Ｘ/ａ)・△Ｄf ＝ｄｆ/ｐｔ ・・・（１８） ただし、 ａ：背景画像の撮影画面横サイズ[mm] ｂ：背景画像の撮影画面縦サイズ[mm] ｄ：光軸間隔[mm] ｆ：レンズの焦点距離[mm] ｐ：読取ピツチ[画素/mm] ｔ：物体までの距離[mm] ｗ：点Ｐと中点Ｍの水平距離[mm] ｈ：点Ｐと中点Ｍの垂直距離[mm] Ｘ：量子化された背景画像の横サイズ[画素] Ｙ：量子化された背景画像の縦サイズ[画素] なお、中点Ｍは、光軸λL，λRと面ＡＢＧＨとの交点を
それぞれＭL，ＭRとしたとき、交点ＭLと交点ＭRを結ぶ
線分の中点 図３に示す（線分ＯＭの長さ）＝ｔである面ＡＢＧＨ
の、（線分ＭＰdの長さ）＝ｗ，（線分ＰＰdの長さ）＝
ｈの点Ｐに見えるように、任意の画像を合成したいなら
ば、左背景画像ではＰmL（ｘmL，ｙmL）の位置へ、右背
景画像ではＰmR（ｘmR，ｙmR）の位置へ、該画像を合成
する。

【００４６】これによつて、本実施例において、左背景
画像における合成位置と、右背景画像における合成位置
とが、相対的に△Ｄm画素だけずれて、ポジフイルムな
どに出力された左右２つの画像における合成用画像のず
れ量△Ｄfを得ることができる。そして、本実施例によ
つて得られた２つの画像を、偏光投影方式などの方法で
鑑賞すれば、図３におけるカメラからの距離がｔである
面ＡＢＧＨの点Ｐの位置に、合成された画像が存在して
いるように見える。

【００４７】次に、本実施例の背景画像のマスクデータ
の作成方法について説明する。図１３はマスクデータの
作成方法の一例を説明する図である。図１３において、
同図（ａ）は左背景画像、同図（ｂ）は右背景画像で、
例えば、それぞれ青色の背景に１個の林檎状の物体１３
１と１３２が写つている。この場合、物体１３１と１３
２のマスクデータは、それぞれ同図（ｃ）と（ｄ）のよ
うなビツトマツプデータになる。

【００４８】同図（ｃ）と（ｄ）に示すビツトマツプデ
ータは、１３３と１３４で示す物体１３１と１３２に対
応する領域のビツトは‘１’に、物体１３１と１３２以
外に対応するビツトは‘０’になる。図１４はマスクデ
ータ作成処理の一例を示すフローチヤートである。本実
施例は、左右の背景画像に対して、略同様の処理によつ
て、マスクデータを作成するので、以下の説明および図
１４においては、背景画像の左右は記さない。

【００４９】図１４において、本実施例は、ステツプＳ
１において、ユーザの指示に従つて、ＲＧＢ各色の閾値
を、例えば、 Ｒの閾値：Ｒth＝３０ Ｇの閾値：Ｇth＝３０ Ｂの閾値：Ｂth＝２００ のように設定する。

【００５０】続いて、本実施例は、ステツプＳ２で、フ
アイル装置６に、背景画像の画素数と同じビツト数のマ
スクデータ用のビツトマツプフアイルＢi(i=0,1,…,画
素数-1)を作成する。続いて、本実施例は、ステツプＳ
３で作成したビツトマツプフアイルの全ビツトを‘０’
に初期化し、ステツプＳ４で変数ｉへ０を設定する。

【００５１】続いて、本実施例は、ステツプＳ５で背景
画像のｉ番目の画素データを抽出し、ステツプＳ６で、
抽出した画素データとＲＧＢ各色の閾値をそれぞれ比較
して、例えば、 Ｒi＞Ｒth かつ Ｇi＞Ｇth かつ Ｂi＞Ｂth の条件を満足しているか否かを判定する。本実施例は、
ステツプＳ６で、前記条件が、満足されると判定した場
合はステツプＳ７へ進み、満足されないと判定した場合
はステツプＳ８へジヤンプする。

【００５２】前記条件が満足されると判定した場合、本
実施例は、ステツプＳ７で、ビツトマツプフアイルのｉ
番目のビツトＢiを‘１’にする。続いて、本実施例
は、ステツプＳ８で変数ｉをインクリメントし、ステツ
プＳ９で変数ｉと背景画像の画素数を比較して、ｉ＜画
素数ならばステツプＳ５へ戻り、ｉ≧画素数ならば処理
を終了する。

【００５３】なお、以上のマスクデータ作成処理は、後
述する本実施例の画像合成処理の中で実行される。次
に、本実施例の左右のマスクデータを用いた撮影時の被
写体距離の算出方法について説明する。図１５は撮影時
の被写体距離の算出方法の一例を説明する図である。

【００５４】撮影時の被写体距離の算出は、図１５
（ａ），（ｂ）に一例を示す、マスクデータから抽出し
た長方形領域の比較によつて行う。そのため、便宜上、
任意のマスクデータにおいて、左上の点（ｘ,ｙ）を頂
点とした横の画素数がＸ，縦の画素数がＹの長方形領域
を、 REC(マスクデータ識別子,ｘ,ｙ,Ｘ,Ｙ) で表すことにする。なお、この場合、マスクデータ識別
子は、ＬまたはＲである。

【００５５】本実施例は、左マスクデータの領域１５１
を内接する長方形領域１５１ａを抽出する。なお、領域
１５１ａは、 REC(Ｌ,ｘqL,ｙqL,Ｘq,Ｙq) と表される。続いて、本実施例は、右マスクデータにお
いて選択可能な、以下の２条件を満たす、すべての長方
形領域を考える。

【００５６】・条件１：長方形領域１５１ａと同形状，
同サイズ ・条件２：頂点のｙ座標がｙqLに等しい長方形領域 この場合、前記２条件を満たす長方形領域は、図１５
（ｄ）に示すように、全部で（Ｘ−Ｘq＋１）個存在す
る。本実施例は、長方形領域１５２ａ〜１５２ｎの各ビ
ツトと、長方形領域１５１ａの各ビツトとを比較して、
両領域の対応するビツトが同値であるビツトをカウント
して、各カウント値を変数Ｓi（i=0,1,…,X-Xq）へ記憶
する。本実施例は、すべての領域のカウントが終了する
と、カウント値が最大の変数Ｓiに対応する長方形領域
の頂点座標（ｘqR,ｙqR）から、次式によつて、左右の
被写体のずれ画素数ΔＤqを算出する。

【００５７】△Ｄq＝ｘqL−ｘqR ・・・（１９） ここで、被写体とカメラとの距離をＴとすると、式（１
８）が成り立つので、 △Ｄq＝ｄｆ／ｐＴ ・・・（２０） 従つて、式（１９）と式（２０）から、撮影時の被写体
距離Ｔは、次式で表される。

【００５８】Ｔ＝ｄｆ／ｐ△Ｄ ＝ｄｆ／{ｐ(ｘqL-ｘqR)} ・・・（２１） 図１６は撮影時の被写体距離の算出処理の一例を示すフ
ローチヤートである。図１６において、本実施例は、ス
テツプＳ１１で左マスクデータの領域を内接する長方形
領域ＲＥＣLを抽出し、ステツプＳ１２で変数ｉへ０を
設定する。

【００５９】続いて、本実施例は、ステツプＳ１３で変
数Ｓiへ０を設定し、ステツプＳ１４で右マスクデータ
のｉ番目の長方形領域ＲＥＣRiを抽出する。続いて、本
実施例は、ステツプＳ１５で変数ｊへ０を設定し、スツ
プＳ１６でＲＥＣLのｊ番目のビツトＢLjとＲＥＣRiの
ｊ番目のビツトＢRjを比較して、ＢLj＝ＢRJの場合は、
ステツプＳ１７で変数Ｓiをインクリメントした後、ス
テツプＳ１８へ進み、また、ＢLj≠ＢRJの場合は、ステ
ツプＳ１８へジヤンプする。

【００６０】続いて、本実施例は、ステツプＳ１８で変
数ｊをインクリメントし、ステツプＳ１９で、変数ｊと
ＲＥＣLの画素数を比較して、ｊ＜画素数ならばステツ
プＳ１６へ戻り、ｊ≧画素数ならばステツプＳ２０へ進
む。ｊ≧画素数であつた場合、本実施例は、ステツプＳ
２０で変数ｉをインクリメントし、ステツプＳ２１で、
変数ｉとＲＥＣRの個数を比較する。すなわち、本実施
例は、ステツプＳ２１で、ｉ≦Ｘ−Ｘqならばステツプ
Ｓ３へ戻り、ｉ＞Ｘ−ＸqならばステツプＳ２２へ進
む。

【００６１】ｉ＞Ｘ−Ｘqであつた場合、本実施例は、
ステツプＳ２２でカウント値が最大の変数Ｓiを選択し
て、ステツプＳ２３で、ＲＥＣLの頂点座標（ｘqL,ｙq
L）と、変数Ｓiに対応するＲＥＣRiの頂点座標（ｘqR,
ｙqR）とから、式（１９）によつて、左右の背景画像に
おける被写体のずれ画素数△Ｄqを計算する。続いて、
本実施例は、ステツプＳ２４で、式（２１）によつて、
撮影時の被写体距離Ｔを計算した後、処理を終了する。

【００６２】なお、以上の撮影時の被写体距離の算出
は、後述する本実施例の画像合成処理の中で実行され
る。次に、本実施例の画像合成処理について説明する。
図１７は本実施例における画像合成処理の一例を示すフ
ローチヤートである。 ［ステツプＳ３１］例えばユーザは、撮影装置１で撮影
された左右２つの背景画像と、１つ以上（以下「ｎ個」
とする）の合成用画像とを、入力装置３の例えばドラム
スキヤナのドラム上に貼付け、コマンド入力装置１０か
ら処理開始の情報を制御装置５へ送る。

【００６３】制御装置５は、処理開始の情報を受取る
と、入力装置３にスキヤン開始の命令を送る。入力装置
３は、スキヤン開始の命令を受取ると、ドラム上に貼付
けられた画像をスキヤンして、該画像の例えば８ビツト
量子化ＲＧＢデータを出力する。制御装置５は、入力装
置３が出力した画像データを、背景画像および合成用画
像の原画像データとして、各画像毎にフアイル装置６へ
格納する。

【００６４】［ステツプＳ３２］制御装置５は、フアイ
ル装置６に格納された左右２つの背景画像を、表示装置
４上に表示する。 ［ステツプＳ３３］ユーザは、データ入力装置１１を介
して、背景画像の読取ピツチｐと背景画像の撮影条件
（レンズの焦点距離ｆ，撮影画面の横の長さａ，撮影画
面の縦の長さｂ，左右のカメラの光軸間隔ｄ）とを入力
する。

【００６５】制御装置５は、入力されたデータをフアイ
ル装置６へ格納する。 ［ステツプＳ３４］制御装置５は、演算装置７に量子化
された背景画像の横縦の画素数Ｘ，Ｙを計算させ、計算
結果をフアイル装置６へ格納する。なお、画素数Ｘ，Ｙ
の計算には、式（１３），（１４）を用いる。

【００６６】［ステツプＳ３５］ユーザは、データ入力
装置３を介して、個々の合成画像を配置する距離ｔi（i
=1,2,3,…,n）を入力する。なお、距離ｔiは、図３に示
した線分ＯＭの長さである。制御装置５は、入力された
距離ｔiをフアイル装置６へ格納する。

【００６７】［ステツプＳ３６］次にユーザは、データ
入力装置３を介して、図３に示した中点Ｍと個々の合成
画像との横方向の距離ｗi（i=1,2,3,…,n）を入力す
る。制御装置５は、入力された距離ｗiを演算装置７へ
送り、演算装置７は、入力された距離ｗiが条件式
（７）を満すか否かを計算して、結果を出力する。

【００６８】［ステツプＳ３７］制御装置５は、演算装
置７の出力が、「条件を満たす」の場合ステツプＳ３８
へ進み、「条件を満たさない」の場合ステツプＳ３６へ
戻つて、ユーザに再入力を促す。 ［ステツプＳ３８］制御装置５は、ステツプＳ３６で入
力された距離ｗiをフアイル装置６へ格納する。

【００６９】［ステツプＳ３９］ユーザは、データ入力
装置３を介して、図３に示した中点Ｍと個々の合成画像
との縦方向の距離ｈi（i=1,2,3,…,n）を入力する。制
御装置５は、入力された距離ｈiを演算装置７へ送り、
演算装置７は、入力された距離ｈiが条件式（８）を満
すか否かを計算して、結果を出力する。

【００７０】［ステツプＳ４０］制御装置５は、演算装
置７の出力が、「条件を満たす」の場合ステツプＳ４１
へ進み、「条件を満たさない」の場合ステツプＳ３９へ
戻つて、ユーザに再入力を促す。 ［ステツプＳ４１］制御装置５は、ステツプＳ３９で入
力された距離ｈiをフアイル装置６へ格納する。

【００７１】［ステツプＳ４２］制御装置５は、フアイ
ル装置６に格納された距離ｗi，ｈiなどのデータを演算
装置７へ送り、演算装置７は、左背景画像への個々の画
像の合成位置を、式（１５），（１７）を用いて計算し
て、計算結果ＰimL（ｘimL，ｙimL）を出力する。

【００７２】制御装置５は、演算装置７から出力された
計算結果をフアイル装置６へ格納する。 ［ステツプＳ４３］制御装置５は、フアイル装置６に格
納された距離ｗi，ｈiなどのデータを演算装置７へ送
り、演算装置７は、右背景画像への個々の画像の合成位
置を、式（１６），（１７）を用いて計算して、計算結
果ＰimR（ｘimR，ｙimR）を出力する。

【００７３】制御装置５は、演算装置７から出力された
計算結果をフアイル装置６へ格納する。 ［ステツプＳ４４］制御装置５は、前述および図１４で
説明した方法によつて、左背景画像のマスクデータを作
成する。

【００７４】［ステツプＳ４５］制御装置５は、前述お
よび図１４で説明した方法によつて、右背景画像のマス
クデータを作成する。 ［ステツプＳ４６］制御装置５は、前述および図１６で
説明した方法によつて、撮影時の被写体距離Ｔを算出す
る。

【００７５】［ステツプＳ４７］制御装置５は、その詳
細を後述する画像合成処理を実行する。 ［ステツプＳ４８］制御装置５は、フアイル装置６に格
納された左右出力画像データを出力装置ｂ９へ送り、出
力装置ｂ９は、入力された左右出力画像データを、それ
ぞれプリント出力する。

【００７６】［ステツプＳ４９］制御装置５は、コマン
ド入力待ち状態となり、コマンド入力装置１０などを介
したユーザの指示を待つ。ユーザは、例えばステレオビ
ユーアなどを用いて、出力装置ｂ９から出力された画像
の立体効果を確認し、例えば、コマンド入力装置１０な
どから、期待した効果が得られていると判断したら「Ｏ
Ｋ」を、期待した効果が得られていないと判断したら
「ＮＧ」を入力する。

【００７７】制御装置５は、ユーザからの入力が、「Ｏ
Ｋ」ならばステツプＳ５０へ進み、「ＮＧ」ならばステ
ツプＳ３２へ戻る。 ［ステツプＳ５０］制御装置５は、フアイル装置６に格
納された左右出力画像データを出力装置ａ８へ送り、出
力装置ａ８は、入力された左右出力画像データを、例え
ばポジフイルム上に出力した後、処理を終了する。

【００７８】図１８はステツプＳ４７の画像合成処理の
一例を示すフローチヤートである。 ［ステツプＳ５１］制御装置５は、距離ｔiがステツプ
Ｓ４６で算出した被写体距離Ｔよりも大（ｔi＞Ｔ）の
合成用画像は、図１１に示した要領で、ステツプＳ４４
で作成した左マスクデータを用いて、距離ｔiが大きい
画像から順番に、左背景画像のＰimL（ｘimL,ｙimL）の
位置へ合成して、左中間画像を形成する。

【００７９】［ステツプＳ５２］制御装置５は、距離ｔ
iが被写体距離Ｔ以下（ｔi≦Ｔ）の合成用画像は、図１
０に示した要領で、距離ｔiが大きい画像から順番に、
左中間画像のＰimL（ｘimL,ｙimL）の位置へ合成して、
左出力画像を形成する。なお、該左出力画像は、フアイ
ル装置６へ格納する。

【００８０】［ステツプＳ５３］制御装置５は、距離ｔ
iが被写体距離Ｔよりも大（ｔi＞Ｔ）の合成用画像は、
図１１に示した要領で、ステツプＳ４５で作成した左マ
スクデータを用いて、距離ｔiが大きい画像から順番
に、右背景画像のＰimR（ｘimR,ｙimR）の位置へ合成し
て、右中間画像を形成する。

【００８１】［ステツプＳ５４］制御装置５は、距離ｔ
iが被写体距離Ｔ以下（ｔi≦Ｔ）の合成用画像は、図１
０に示した要領で、距離ｔiが大きい画像から順番に、
左中間画像のＰimR（ｘimR,ｙimR）の位置へ合成して、
左出力画像を形成する。なお、該左出力画像は、フアイ
ル装置６へ格納した後、処理を終了する。

【００８２】なお、前述の説明および図１０，図１１に
おいて、背景画像上に合成用画像の全体をそのまま置換
える合成方法を説明したが、本実施例はこれに限定され
るものではなく、例えば、マスクのデータを用いて合成
用画像の一部分を合成したり、合成用画像を合成する際
に背景画像上の部分が透けるように合成したり、あるい
は合成用画像を縮小または拡大してから合成することも
でき、このように合成した場合も同様の効果を得ること
ができる。

【００８３】また、前述の説明および図において、入力
装置３で写真撮影したポジフイルムなどから画像を入力
する例を説明したが、本実施例はこれに限定されるもの
ではなく、例えば、写真プリントや印刷物から入力する
こともできるし、さらに、例えば、入力装置３にＴＶカ
メラなどを用いて、直接、３次元の被写体を画像入力す
ることもでき、このようにして入力された画像を合成し
ても同様の効果を得ることができる。

【００８４】また、前述の説明および図において、合成
用画像として被写体を撮影した画像を用いる例を説明し
たが、本実施例はこれに限定されるものではなく、例え
ば、コンピユータ上で描いたＣＧ画像を用いることもで
き、この場合、制御装置５は、イメージスキヤナなどの
入力装置を介することなく、コンピユータ上のＣＧ画像
データを、直接、フアイル装置６へ格納することもでき
る。

【００８５】また、前述の説明および図１７において、
ユーザが入力したデータｔ，ｗ，ｈから合成位置を、演
算装置７によつて計算して求める方法を説明したが、本
実施例はこれに限定されるものではなく、例えば、ユー
ザはデータｔだけを入力して、表示装置４に表示された
背景画像の位置をマウスなどで指定することによつて、
他のデータを入力することもできる。

【００８６】また、前述の説明および図１４において
は、ユーザが設定したＲＧＢ各色の閾値に基づいて、背
景画像のマスクデータを作成する例を説明したが、本実
施例はこれに限定されるものではなく、例えば、背景画
像を表示装置４に表示して、ユーザがデータ入力装置１
１によつて、合成を許可する部分（または許可しない部
分）を指示することもできる。

【００８７】また、前述の説明においては、左右の背景
画像上に撮影されている同一の被写体のずれ画素数ΔＤ
qを、予め作成された左右のマスクデータから計算する
例を説明したが、本実施例はこれに限定されるものでは
なく、例えば、背景画像を表示装置４に表示して、ユー
ザがデータ入力装置１１によつて、左右の被写体の対応
する代表的点を指定することによつて求めることもでき
る。例えば、被写体が人物の顔である場合、左背景画像
上の左目の中心と、右背景画像上の左目の中心とを指定
して、指定された２座標値のｘ座標の差分を、左右の被
写体のずれ画素数ΔＤqとする。

【００８８】以上説明したように、本実施例によれば、
左右２つの背景画像へ、個々の合成画像を、それぞれ合
成位置をずらして合成した出力画像を２つ形成し、前述
した偏光投影方式やステレオビユーアなどの方法で、該
２つの出力画像を鑑賞することによつて、ユーザが指定
した位置に、合成画像が遠近感をもつて配置されている
ように見えるイメージを鑑賞することができる。

【００８９】さらに、本実施例によれば、被写体と、合
成される複数個の合成用画像との間に、位置的な矛盾が
ない、すなわち視野闘争の無い立体イメージを鑑賞する
ことができる。また、本実施例によれば、その見掛けの
位置が被写体の後方である合成用画像の合成の際は、予
め作成した被写体のマスクデータを使用し、その見掛け
の位置が被写体の前方である合成用画像の合成の際は、
そのまま合成するという操作をすることで、合成処理を
高速化することができる。

【００９０】なお、本発明は、複数の機器から構成され
るシステムに適用しても、１つの機器からなる装置に適
用してもよい。また、本発明は、システムあるいは装置
にプログラムを供給することによつて達成される場合に
も適用できることはいうまでもない。

【００９１】

【発明の効果】以上、本発明によれば、第１の画像デー
タへ第２の画像データを合成して、第２の画像データの
合成位置をずらした２つ以上の出力画像を得られる画像
合成方法および画像合成装置を提供することができる。

【図面の簡単な説明】

【図１】一般的な立体写真の一撮影方法を示す図であ
る。

【図２】一般的な左右２枚の写真画像の例を示す図であ
る。

【図３】一般的な２台のカメラによつて物体を撮影する
状態例を示す斜視図である。

【図４】図３の平面図である。

【図５】図３の側面図である。

【図６】一般的な左右のカメラの撮影範囲を示す図であ
る。

【図７】一般的な左右のフイルム上に写つた画像を示す
図である。

【図８】本発明に係る画像合成システムの構成例を示す
ブロツク図である。

【図９】本実施例の画像における位置の指定方法を説明
する図である。

【図１０】本実施例の通常の画像合成処理の一例を示す
図である。

【図１１】本実施例のマスクデータを用いた画像合成処
理の一例を示す図である。

【図１２】本実施例の左右の背景画像データの一例を示
す図である。

【図１３】本実施例のマスクデータの作成方法の一例を
説明する図である。

【図１４】本実施例のマスクデータ作成処理の一例を示
すフローチヤートである。

【図１５】本実施例の撮影時の被写体距離の算出方法の
一例を説明する図である。

【図１６】本実施例の撮影時の被写体距離の算出処理の
一例を示すフローチヤートである。

【図１７】本実施例の画像合成処理の一例を示すフロー
チヤートである。

【図１８】本実施例の画像合成処理の一例を示すフロー
チヤートである。

【符号の説明】

１ 被写体 ２ 撮影装置 ３ 入力装置 ４ 表示装置 ５ 制御装置 ６ フアイル装置 ７ 演算装置 ８ 出力装置ａ ９ 出力装置ｂ １０ コマンド入力装置 １１ データ入力装置

Claims (6)

【特許請求の範囲】
1. 【請求項１】 第１の画像データと第２の画像データと
   を合成する画像合成方法であつて、 前記第１の画像データへ前記第２の画像データを合成す
   る際に前記第２の画像データの合成位置をずらして合成
   して、 ２つ以上の出力画像を得ることを特徴とする画像合成方
   法。
2. 【請求項２】 前記第１の画像データは左用画像データ
   と右用画像データとを含み、 前記左用画像データと前記右用画像データはそれぞれ左
   右の背景画像を表すことを特徴とする請求項１記載の画
   像合成方法。
3. 【請求項３】 前記左用画像データに含まれる被写体の
   画像情報と前記右用画像データに含まれる前記被写体の
   画像情報とから求めた前記被写体の撮影距離に応じて前
   記第１の画像データへ前記第２の画像データを合成する
   ことを特徴とする請求項２記載の画像合成方法。
4. 【請求項４】 第１の画像データと第２の画像データと
   を入力する入力手段と、 前記第１の画像データと前記第２の画像データとの位置
   情報を指示する指示手段と、 前記指示手段によつて指示された位置情報に基づいて前
   記第１の画像データと前記第２の画像データとの合成情
   報を演算する演算手段と、 前記演算手段によつて演算された合成情報に基づいて前
   記第１の画像データと前記第２の画像データとを合成す
   る合成手段とを備え、 前記合成手段は前記第１の画像データへ前記第２の画像
   データを合成する際に前記第２の画像データの合成位置
   をずらして合成して２つ以上の出力画像データを得るこ
   とを特徴とする画像合成装置。
5. 【請求項５】 前記第１の画像データは左用画像データ
   と右用画像データとを含み、 前記左用画像データと前記右用画像データはそれぞれ左
   右の背景画像を表すことを特徴とする請求項４記載の画
   像合成装置。
6. 【請求項６】 請求項５記載の画像合成装置において、 さらに前記左用画像データに含まれる被写体の画像情報
   と前記右用画像データに含まれる前記被写体の画像情報
   とから前記被写体の撮影距離を算出する算出手段を備
   え、 前記合成手段は前記演算手段によつて演算された合成情
   報と前記算出手段によつて算出された撮影距離とに基づ
   いて前記第１の画像データへ前記第２の画像データを合
   成することを特徴とする画像合成装置。