JP2006005452A - 画像合成装置及び画像合成システム - Google Patents

Abstract

【課題】 被写体の動きの軌跡や運動フォームの移行等を容易に把握できるマルチモーション合成画像を提供することができる画像合成システムを提供すること。
【解決手段】 画像合成システム１０は、被写体を撮影するデジタルスチルカメラ２０と、画像を合成する画像合成装置３０と、合成された画像を表示する画像表示装置４０とを有し、画像合成装置３０は、第１画像サイズの画像から被写体画像及び背景画像を切り出す画像切出手段３１と、被写体画像を抽出する被写体画像抽出手段３２と、被写体画像データを記憶する被写体メモリ３３と、背景画像データを記憶する背景メモリ３４と、被写体画像と背景画像とを合成する画像合成手段３５と、合成された合成画像のデータを記憶する合成画像メモリ３６と、合成画像のデータを出力する画像出力手段３７とを備える。
【選択図】 図１

Description

本発明は、例えばテレビジョン放送のスポーツ中継番組において選手の動きをわかりやすく表現する画像合成装置及び画像合成システムに関する。

従来、例えばテレビジョン放送のスポーツ中継番組において、スポーツ選手の動きをわかりやすく表現するため、スローモーション再生技術が多用されている。スローモーション再生は、スポーツ選手の速い動きを把握する場合に適しているが、選手の動く速度が遅くなるので、選手が動いた軌跡や運動フォームの移行が捉えにくいという問題があった。

この問題を解決するため、所定の時間間隔で撮影された選手の画像と背景画像とを合成し、選手の動きをストロボ写真のように表現するマルチモーション技術が日本放送協会によって開発され、既に番組制作において使用されている。マルチモーション技術によれば、選手の動きの軌跡を連続的に一つの画面に重ね合わせて合成表示するので、選手の動きの推移を視聴者に対し非常に把握しやすく表現することができる（例えば、非特許文献１及び２参照。）。
李、八木、野口：「体操選手のフォーム・軌跡表示システム」、映像情報メディア学会誌、Ｖｏｌ．５１、ＮＯ．１１、ｐｐ．１８８１〜１８８７（１９９７） 加藤、増田、瀬川、玉木：「スーパーマルチモーション」、映像情報メディア学会誌、Ｖｏｌ．５７、ＮＯ．８、ｐｐ．９３６〜９３８（２００３）

しかしながら、従来のマルチモーション技術では、静止画像を重ね合わせて合成表示するためテレビカメラを固定して選手を撮影する必要があるので、選手の動く範囲が広い競技、例えば陸上競技の走り幅跳びや三段跳び等の競技を撮影する際には選手を広角で撮影しなければならず、その結果、撮影された選手の画像の大きさがテレビ画面に対して小さくなり、選手の動きをわかりやすく表現できない場合があった。

本発明は、従来のマルチモーション技術をさらに改善するためになされたものであり、被写体の動く範囲が広範囲の場合でも、被写体の動きの軌跡や運動フォームの移行等を容易に把握できるマルチモーション合成画像を提供することができる画像合成装置及び画像合成システムを提供するものである。

本発明の画像合成装置は、被写体画像を含む第１画像サイズの第１画像のデータを入力し、前記第１画像から前記第１画像サイズよりも小さい第２画像サイズで前記被写体画像を含む第２画像を前記第１画像毎に切り出す画像切出手段と、切り出された前記第２画像から前記被写体画像を前記第２画像毎に抽出する被写体画像抽出手段と、前記第２画像毎に抽出された前記被写体画像を前記第２画像サイズの所定の背景画像に予め定められた順序で順次重ね合わせて合成する画像合成手段とを備えたことを特徴とする構成を有している。

この構成により、本発明の画像合成装置は、画像切出手段が、広角で撮影された第１画像サイズの第１画像から第１画像サイズよりも小さい第２画像サイズで被写体画像を含む第２画像を第１画像毎に切り出し、画像合成手段が、第２画像毎に抽出された被写体画像を第２画像サイズの所定の背景画像に予め定められた順序で順次重ね合わせて合成するので、被写体の動きの軌跡や運動フォームの移行等を容易に把握できるマルチモーション合成画像を提供することができる。

また、本発明の画像合成装置は、前記画像切出手段が、前記第１画像に対する前記第２画像の切り出し位置を時間に応じて変化させることを特徴とする構成を有している。

この構成により、本発明の画像合成装置は、時間に応じた被写体の動きの軌跡や運動フォームの移行等を容易に把握できるマルチモーション合成画像を提供することができる。

さらに、本発明の画像合成装置は、前記画像切出手段が、前記第１画像に複数の前記被写体画像が含まれているとき、少なくとも一つの画像サイズで前記被写体画像を含む複数の画像を切り出すことを特徴とする構成を有している。

この構成により、本発明の画像合成装置は、画像切出手段が、第１画像に複数の被写体画像が含まれているとき、同一の画像サイズ又は異なる画像サイズで被写体画像を含む複数の画像を切り出すので、複数の被写体の相対的な動きの軌跡や運動フォームの移行等を容易に把握できるマルチモーション合成画像を提供することができる。

さらに、本発明の画像合成装置は、被写体画像を含む第１画像サイズの第１画像のデータを入力し、前記被写体画像を前記第１画像毎に抽出する被写体画像抽出手段と、前記第１画像毎に抽出された前記被写体画像を前記第１画像サイズの所定の背景画像に予め定められた順序で順次重ね合わせて合成する画像合成手段と、前記画像合成手段によって合成された画像から前記被写体画像を含む第２画像を前記第１画像サイズよりも小さい第２画像サイズで切り出す合成画像切出手段とを備えたことを特徴とする構成を有している。

この構成により、本発明の画像合成装置は、画像合成手段が、広角で撮影された第１画像サイズの第１画像から抽出された被写体画像を第１画像サイズの所定の背景画像に予め定められた順序で順次重ね合わせて合成し、画像切出手段が、第１画像サイズの合成画像から第１画像サイズよりも小さい第２画像サイズで被写体画像を含む第２画像を切り出すので、被写体の動く範囲が広範囲の場合でも、被写体の動きの軌跡や運動フォームの移行等を容易に把握できるマルチモーション合成画像を提供することができる。

さらに、本発明の画像合成装置は、前記第２画像サイズは、テレビジョン受信機の一画面分の画像サイズとほぼ一致する画像サイズであることを特徴とする構成を有している。

この構成により、本発明の画像合成装置は、被写体画像と背景画像とが合成された第２画像サイズの合成画像を生成することができるので、テレビジョン受信機の画面一杯に合成画像をわかりやすく表示することができる。

さらに、本発明の画像合成システムは、画像合成装置と、被写体を撮影して前記第１画像サイズの画像のデータを前記画像合成装置に出力する撮影装置と、前記画像合成装置によって合成された画像を表示する画像表示装置とを備えたことを特徴とする構成を有している。

この構成により、本発明の画像合成システムは、画像切出手段が、広角で撮影された第１画像サイズの第１画像から第１画像サイズよりも小さい第２画像サイズで被写体画像を含む第２画像を第１画像毎に切り出し、画像合成手段が、切り出された第２画像から抽出された被写体画像と第２画像サイズの所定の背景画像とを合成し、画像表示装置が、合成された合成画像を表示するので、被写体の動く範囲が広範囲の場合でも、被写体の動きの軌跡や運動フォームの移行等を容易に把握できるマルチモーション合成画像を提供することができる。

本発明は、被写体の動きの軌跡や運動フォームの移行等を容易に把握できるマルチモーション合成画像を提供することができるという効果を有する画像合成装置を提供することができるものである。

以下、本発明の実施の形態について図面を用いて説明する。

（第１の実施の形態）
まず、本実施の形態の画像合成システムの構成について説明する。

図１に示すように、本実施の形態の画像合成システム１０は、被写体を撮影する撮影装置としてのデジタルスチルカメラ２０と、画像を合成する画像合成装置３０と、合成された画像を表示する画像表示装置４０とを備えている。

デジタルスチルカメラ２０は、被写体を撮影するカメラユニット２１と、撮影された被写体の画像データを記憶する撮影画像メモリ２２とを備えている。カメラユニット２１は、レンズ、ＣＣＤ、画角調整機構、信号処理回路、液晶モニタ等で構成され、画像表示装置４０の表示画素数よりも大きい画素数で被写体を撮影するようになっている。

例えば、デジタルスチルカメラ２０は、横方向の画素数４５００個と縦方向の画素数３０００個とで構成されるサイズ（以下「第１画像サイズ」という。）で被写体を撮影するようになっている。一方、画像表示装置４０は、例えば、横方向の画素数１９２０個と縦方向の画素数１０８０個とで構成されるサイズ（以下「第２画像サイズ」という。）の画像を表示するようになっている。

撮影画像メモリ２２は、カメラユニット２１によって撮影された被写体の画像データを撮影毎に第１画像サイズで記憶するようになっている。なお、以下の記載において、撮影画像メモリ２２は、第１メモリから第８メモリまでの８個のメモリで構成されているものとして説明する。

画像合成装置３０は、第１画像サイズの画像から被写体画像及び背景画像を切り出す画像切出手段３１と、被写体画像を抽出する被写体画像抽出手段３２と、被写体画像データを記憶する被写体メモリ３３と、背景画像データを記憶する背景メモリ３４と、被写体画像と背景画像とを合成する画像合成手段３５と、合成された合成画像のデータを記憶する合成画像メモリ３６と、合成画像のデータを出力する画像出力手段３７とを備えている。

画像切出手段３１、被写体画像抽出手段３２、画像合成手段３５及び画像出力手段３７は、例えばＣＰＵ、ＲＡＭ、ＲＯＭ等で構成されている。

画像切出手段３１は、撮影画像メモリ２２によって記憶された第１画像サイズの画像データを順次読み出し、第１画像サイズの画像から被写体画像を含む第２画像サイズの画像を切り出すようになっている。

被写体画像抽出手段３２は、画像切出手段３１によって切り出された第２画像サイズの画像から被写体画像を抽出し、抽出した被写体画像のデータを被写体メモリ３３に記憶するようになっている。

背景メモリ３４は、画像切出手段３１によって切り出された第２画像サイズの背景画像のデータを記憶するようになっている。

画像合成手段３５は、被写体メモリ３３及び背景メモリ３４からそれぞれ被写体画像のデータ及び背景画像のデータを読み出して被写体画像と背景画像とを合成し、合成画像メモリ３６に順次記憶するようになっている。なお、以下の記載において、合成画像メモリ３６は、第１メモリから第８メモリまでの８個のメモリで構成されているものとして説明する。

画像出力手段３７は、合成画像メモリ３６から合成画像データを順次読み出し、合成画像データを例えばＮＴＳＣ（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｔａｎｄａｒｄｓ Ｃｏｍｍｉｔｔｅｅ）方式に準拠した映像信号に変換して画像表示装置４０に出力するようになっている。

画像表示装置４０は、例えば、横方向及び縦方向の画素数がそれぞれ１９２０個及び１０８０個の液晶画面を備えたテレビモニタで構成されている。

次に、本実施の形態の画像合成システム１０の動作について、走り幅跳びの選手を被写体として撮影する例を挙げ、図１〜図３を用いて説明する。図２は、画像合成システム１０の各ステップのフローチャートを示し、図３は、走り幅跳びの選手が連写された撮影画像を処理する過程を示している。

まず、デジタルスチルカメラ２０によって、走り幅跳びの選手が跳躍する範囲全体が撮影できるよう画角が広角に設定されて、選手が所定の時間間隔で連写して撮影され（ステップＳ１１）、撮影された画像データが撮影画像メモリ２２に順次記憶される。具体的には、例えば図３（ａ）〜（ｈ）に示すように、跳躍開始時の選手画像６１を含む第１画像５１から着地時の選手画像６８を含む第８画像５８までの第１画像サイズの８画像のデータが、撮影画像メモリ２２の第１メモリから第８メモリまでに順次記憶される。

次いで、画像切出手段３１によって、撮影画像メモリ２２の第１メモリから第１画像５１のデータが読み出された後、第１画像５１から第２画像サイズの切出範囲７１で選手画像６１を含む画像が背景画像として切り出され（ステップＳ１２）、この背景画像のデータが背景メモリ３４に出力されて記憶される（ステップＳ１３）。なお、切出範囲７１の右端は、第１画像５１の右端と一致するよう設定されている。また、画像切出手段３１によって切り出される画像の画像サイズは、第２画像サイズと完全に一致しているもののみを意味するものではなく、第２画像サイズとほぼ一致していればよい。

さらに、被写体画像抽出手段３２によって、切出範囲７１の画像から選手画像６１が抽出され（ステップＳ１４）、選手画像６１のデータが被写体メモリ３３に記憶される（ステップＳ１５）。ここで、抽出方法としては、例えば、使用者がマウスやタブレット等を使用して選手画像６１の輪郭を指定して抽出する方法や、選手画像６１が含まれていない画像を予め撮影しておき、この画像に対して差分法又は動きベクトル等の手法を用いて選手画像６１を自動的に抽出する方法がある。

続いて、画像合成手段３５によって、背景メモリ３４に記憶された背景画像と選手画像６１とが合成され（ステップＳ１６）、合成された合成画像８１のデータが合成画像メモリ３６の第１メモリに記憶される（ステップＳ１７）。なお、本実施の形態においては、第１画像５１を背景画像としているので、ステップＳ１４〜Ｓ１７を省略し、背景画像を合成画像８１として合成画像メモリ３６の第１メモリに記憶する構成としてもよい。

次いで、画像切出手段３１によって、第１画像５１から第８画像５８までの第１画像サイズの画像から第２画像サイズの画像の切り出しが終了したか否かが判断され（ステップＳ１８）、画像の切り出しが終了したと判断されなかった場合は、選手の移動に応じて切出範囲を移動しながらステップＳ１２〜Ｓ１７を繰り返す。

例えば、図３（ｂ）においては、まず、画像切出手段３１によって、切出範囲７２の位置に相当する背景画像が第１画像５１から切り出されて背景メモリ３４に記憶される。ここで、切出範囲７２は、切出範囲７１に対して図３（ａ）に示された寸法Ａに相当する画素数の１／７だけ跳躍方向に移動したものである。

次いで、画像切出手段３１によって、切出範囲７２の画像が第２画像５２から切り出された後、被写体画像抽出手段３２によって、切出範囲７２の画像から選手画像６２が抽出され、選手画像６２のデータが被写体メモリ３３に記憶される。そして、画像合成手段３５によって、合成画像メモリ３６の第１メモリから合成画像８１のデータが読み出され、合成画像８１に含まれる選手画像６１と、選手画像６２と、背景メモリ３４に記憶された背景画像とが合成され、合成された合成画像８２が合成画像メモリ３６の第２メモリに記憶される。

同様に図３（ｈ）においては、画像切出手段３１によって、切出範囲７８の位置に相当する背景画像が第１画像５１から切り出されて背景メモリ３４に記憶され、被写体画像抽出手段３２によって、切出範囲７８の画像から選手画像６８が抽出される。そして、画像合成手段３５によって、合成画像メモリ３６の第７メモリから合成画像８７のデータが読み出され、合成画像８７に含まれる複数の選手画像と、選手画像６８と、背景画像とが合成された合成画像８８が合成画像メモリ３６の第８メモリに記憶される。

ステップＳ１８において、画像の切り出しが終了したと判断された場合は、画像出力手段３７によって、合成画像メモリ３６の第１メモリ〜第８メモリにそれぞれ記憶された合成画像８１〜８８が、例えばＮＴＳＣ方式の映像信号に変換されて画像表示装置４０に順次出力される（ステップＳ１９）。

そして、画像表示装置４０によって、合成画像８１〜８８が順次表示され（ステップＳ２０）、ストロボ撮影で得られるようなマルチモーション合成画像が画面上でスクロール表示される。

なお、本実施の形態において、画像切出手段３１が選手の移動に応じて切出範囲を移動させる例について説明したが、本発明はこれに限定されるものではなく、例えば図４に示すように切出範囲を設定してもよい。

図４（ａ）〜（ｅ）においては、予め固定された切出範囲９１が設定されており、この切出範囲９１に基づいて切り出された選手画像と背景画像とが合成され、合成画像１０１〜１０５が得られる。図４（ｅ）に示すように、選手画像が切出範囲９１内に収まらなくなるおそれが生じた場合に、以降の図４（ｆ）〜（ｈ）において、時間に応じて移動された切出範囲９２〜９４に基づいて切り出された選手画像６６〜６８と背景画像とが合成され、合成画像１０６〜１０８が得られる。

この構成によれば、予め設定された切出範囲から選手画像が収まらなくなるおそれが生じた場合に切出範囲を移動すればよいので、選手画像及び背景画像の抽出を簡略化することができる。

また、本実施の形態において、画像切出手段３１は、画像表示装置４０の画面サイズと同じサイズの第２画像サイズで画像を１つ切り出す例について説明したが、本発明はこれに限定されるものではない。

例えば、図５（ａ）に示すように、複数の選手、例えば第１の選手と第２の選手とが撮影された第１画像サイズの画像１１０から第１の選手の動作範囲の画像１１１と、第２の選手の動作範囲の画像１１２とを、画像切出手段３１によって第２画像サイズの横幅と第２画像サイズの半分の縦幅とで切り出し、図５（ｂ）に示すように、第１の選手と背景画像とを合成したマルチモーション合成画像１１３と、第２の選手と背景画像とを合成したマルチモーション合成画像１１４とを画像表示装置４０の画面４１の全面に表示するようにしてもよい。

また、図５（ｃ）に示すように、マルチモーション合成画像１１３及び１１４を縮小して画面４１の一部に表示するようにしてもよい。また、マルチモーション合成画像１１３とマルチモーション合成画像１１４とを異なる画像サイズとしてもよい。

この構成によれば、複数の選手の動きを広角で同時に撮影した選手毎の合成画像を取得することができるので、選手間の関連動作をマルチモーション合成画像で画像表示装置４０の画面４１に表示することができる。

以上のように、本実施の形態の画像合成システム１０によれば、画像切出手段３１は、デジタルスチルカメラ２０によって撮影された第１画像サイズの画像から選手画像を含む第２画像サイズの画像を切り出し、画像合成手段３５は、選手画像と背景画像とを合成した第２画像サイズの合成画像を生成する構成としたので、選手の動く範囲が広範囲の場合でも、選手の動きの軌跡や運動フォームの移行等を容易に把握することができる。

なお、本実施の形態において、デジタルスチルカメラ２０で被写体を撮影する例を挙げて説明したが、本発明はこれに限定されるものではなく、画像表示装置４０の表示画素数よりも多い画素数で被写体を撮影することができるデジタルビデオカメラを使用する構成としても同様の効果を得ることができる。

また、本実施の形態において、被写体として走り幅跳びの選手を例に挙げて説明したが、本発明はこれに限定されるものではなく、他のスポーツ競技の選手や、スポーツ競技以外の人物、物体等を被写体としても同様の効果を得ることができる。

また、本実施の形態において、画像切出手段３１によって切り出された背景画像を使用する例を挙げて説明したが、本発明はこれに限定されるものではなく、例えば予め用意された背景画像のデータを背景メモリ３４に記憶させておいて使用する構成としても同様の効果を得ることができる。

また、本実施の形態において、画像切出手段３１は、画像表示装置４０の表示画素数である第２画像サイズで第１画像サイズの画像を切り出す例を挙げて説明したが、本発明はこれに限定されるものではなく、画像切出手段３１が第１画像サイズより小さく第２画像サイズよりも大きい画像サイズで第１画像サイズの画像を切り出し、この画像から被写体画像抽出手段３２が被写体画像を抽出し、画像合成手段３５が第２画像サイズの背景画像と被写体画像とを合成する構成としても同様の効果を得ることができる。

（第２の実施の形態）
まず、本発明の第２の実施の形態の画像合成システムの構成について説明する。ただし、本発明の第１の実施の形態の画像合成システム１０と同様な構成については、同一の符号を付して詳細な説明を省略する。

図６に示すように、本実施の形態の画像合成システム１２０は、被写体を撮影する撮影装置としてのデジタルスチルカメラ２０と、画像を合成する画像合成装置１３０と、合成された画像を表示する画像表示装置４０とを備えている。

画像合成装置１３０は、被写体画像を抽出する被写体画像抽出手段１３１と、被写体画像データを記憶する被写体メモリ３３と、被写体画像と背景画像とを合成する画像合成手段１３２と、合成された合成画像のデータを記憶する合成画像メモリ１３３と、合成画像から被写体画像を含む画像を切り出す画像切出手段１３４と、切り出された画像のデータを出力する画像出力手段３７とを備えている。

被写体画像抽出手段１３１、画像合成手段１３２及び画像切出手段１３４は、例えばＣＰＵ、ＲＡＭ、ＲＯＭ等で構成されている。

被写体画像抽出手段１３１は、撮影画像メモリ２２から読み出した第１画像サイズの画像から被写体画像を抽出し、抽出した被写体画像のデータを被写体メモリ３３に記憶するようになっている。

画像合成手段１３２は、撮影画像メモリ２２から読み出した第１画像サイズの背景画像と被写体画像抽出手段１３１によって抽出された被写体画像とを合成し、合成された第１画像サイズの合成画像のデータを合成画像メモリ１３３に記憶するようになっている。また、画像合成手段１３２は、新たな被写体画像を追加して合成するとき、合成画像メモリ１３３から合成画像データを読み出して新たな被写体画像を合成し、合成画像メモリ１３３に記憶するようになっている。

画像切出手段１３４は、合成画像メモリ１３３によって記憶された第１画像サイズの合成画像データを読み出し、この画像から被写体画像を含む第２画像サイズの画像を切り出すようになっている。

次に、本実施の形態の画像合成システム１２０の動作について、図３、図６〜図８を用いて説明する。ただし、本発明の第１の実施の形態の画像合成システム１０と同様な動作については詳細な説明を省略する。

まず、デジタルスチルカメラ２０によって選手が連写して撮影され（ステップＳ１１）、図３に示された第１画像５１〜第８画像５８までの第１サイズの画像データが撮影画像メモリ２２に記憶される。

次いで、画像合成手段１３２によって、撮像画像メモリ２２から第１画像５１のデータが背景画像のデータとして読み出され、合成画像メモリ１３３に合成画像データとして記憶される（ステップＳ２１）。

さらに、被写体画像抽出手段１３１によって、第１画像５１から選手画像６１が抽出され（ステップＳ２２）、選手画像６１のデータが被写体メモリ３３に記憶される（ステップＳ２３）。

引き続き、画像合成手段１３２によって、合成画像メモリ１３３に記憶された合成画像データが読み出され、この画像と選手画像６１とが合成され（ステップＳ２４）、再び合成画像メモリ１３３に記憶される（ステップＳ２５）。

次いで、画像合成手段１３２によって、第１画像５１から第８画像５８までの画像から抽出された選手画像と背景画像との合成が終了したか否かが判断され（ステップＳ２６）、画像の合成が終了したと判断されなかった場合は、ステップＳ２２〜Ｓ２５を繰り返す。その結果、図８（ａ）に示すような第１画像サイズの合成画像１４０が得られる。

一方、ステップＳ２６において、画像の合成が終了したと判断された場合は、画像切出手段１３４によって、図８（ｂ）に示すように、第１画像サイズの合成画像１４０から第２画像サイズの画像１４１〜１４８が順次切り出され（ステップＳ２７）、これらの画像データは画像出力手段３７によって画像表示装置４０に出力され（ステップＳ１９）、画像表示装置４０によって、マルチモーション合成画像が横方向にスクロールして表示される（ステップＳ２０）。なお、図８（ｂ）において、マルチモーション合成画像１４１及び１４８以外の画像の図示を省略している。

以上のように、本実施の形態の画像合成システム１２０によれば、画像合成手段１３２は、被写体画像抽出手段１３１によって抽出された選手画像と第１画像サイズの背景画像とを合成した第１画像サイズの合成画像を生成し、画像切出手段１３４は、第１画像サイズの合成画像から選手画像を含む第２画像サイズの画像を切り出す構成としたので、選手の動く範囲が広範囲の場合でも、選手の動きの軌跡や運動フォームの移行等を容易に把握することができる。

なお、本実施の形態において、被写体として走り幅跳びの選手を例に挙げて説明したが、本発明はこれに限定されるものではなく、他のスポーツ競技の選手や、スポーツ競技以外の人物、物体等を被写体としても同様の効果を得ることができる。

また、本実施の形態において、撮影画像メモリ２２に記憶された第１画像サイズの背景画像を使用する例に挙げて説明したが、本発明はこれに限定されるものではなく、例えば予め用意されたメモリに第１画像サイズの背景画像のデータを記憶させておき、この背景画像を使用する構成としても同様の効果を得ることができる。

本発明の第１の実施の形態の画像合成システムのブロック図 本発明の第１の実施の形態の画像合成システムの各ステップのフローチャート 本発明の第１の実施の形態の画像合成システムに係る画像合成処理を走り幅跳びの選手の撮影画像で例示した説明図 本発明の第１の実施の形態の画像合成システムに係る画像合成処理を走り幅跳びの選手の撮影画像で例示した説明図 （ａ）本発明の第１の実施の形態の画像合成システムに係る画像切出手段が、複数の選手が含まれる第１画像サイズの画像を処理する場合の切り出し例を示す図 （ｂ）本発明の第１の実施の形態の画像合成システムに係る複数のマルチモーション合成画像を画像表示装置の画面に表示した一例を示す図 （ｃ）本発明の第１の実施の形態の画像合成システムに係る複数のマルチモーション合成画像を画像表示装置の画面に表示した一例を示す図 本発明の第２の実施の形態の画像合成システムのブロック図 本発明の第２の実施の形態の画像合成システムの各ステップのフローチャート （ａ）本発明の第２の実施の形態の画像合成システムに係る画像合成手段が合成したマルチモーション合成画像の一例を示す図 （ｂ）本発明の第２の実施の形態の画像合成システムに係る画像切出手段が切り出すマルチモーション合成画像の一例を示す図

符号の説明

１０、１２０ 画像合成システム
１１０ 第１画像サイズの画像
１１１ 第１の選手の動作範囲の画像
１１２ 第２の選手の動作範囲の画像
１１３、１１４、１４１、１４８ マルチモーション合成画像
２０ デジタルスチルカメラ
２１ カメラユニット
２２ 撮影画像メモリ
３０、１３０ 画像合成装置
３１、１３４ 画像切出手段
３２、１３１ 被写体画像抽出手段
３３ 被写体メモリ
３４ 背景メモリ
３５、１３２ 画像合成手段
３６、１３３ 合成画像メモリ
３７ 画像出力手段
４０ 画像表示装置
４１ 画面
６１〜６８ 選手画像
７１、７２、７８、９１〜９４ 切出範囲
８１〜８８、１０１〜１０８、１４０ 合成画像

Claims (6)

1. 被写体画像を含む第１画像サイズの第１画像のデータを入力し、前記第１画像から前記第１画像サイズよりも小さい第２画像サイズで前記被写体画像を含む第２画像を前記第１画像毎に切り出す画像切出手段と、切り出された前記第２画像から前記被写体画像を前記第２画像毎に抽出する被写体画像抽出手段と、前記第２画像毎に抽出された前記被写体画像を前記第２画像サイズの所定の背景画像に予め定められた順序で順次重ね合わせて合成する画像合成手段とを備えたことを特徴とする画像合成装置。
2. 前記画像切出手段は、前記第１画像に対する前記第２画像の切り出し位置を時間に応じて変化させることを特徴とする請求項１に記載の画像合成装置。
3. 前記画像切出手段は、前記第１画像に複数の前記被写体画像が含まれているとき、少なくとも一つの画像サイズで前記被写体画像を含む複数の画像を切り出すことを特徴とする請求項１又は請求項２に記載の画像合成装置。
4. 被写体画像を含む第１画像サイズの第１画像のデータを入力し、前記被写体画像を前記第１画像毎に抽出する被写体画像抽出手段と、前記第１画像毎に抽出された前記被写体画像を前記第１画像サイズの所定の背景画像に予め定められた順序で順次重ね合わせて合成する画像合成手段と、前記画像合成手段によって合成された画像から前記被写体画像を含む第２画像を前記第１画像サイズよりも小さい第２画像サイズで切り出す合成画像切出手段とを備えたことを特徴とする画像合成装置。
5. 前記第２画像サイズは、テレビジョン受信機の一画面分の画像サイズとほぼ一致する画像サイズであることを特徴とする請求項１から請求項４までのいずれか１項に記載の画像合成装置。
6. 請求項１から請求項５までの何れか１項に記載の画像合成装置と、被写体を撮影して前記第１画像サイズの画像のデータを前記画像合成装置に出力する撮影装置と、前記画像合成装置によって合成された画像を表示する画像表示装置とを備えたことを特徴とする画像合成システム。

Images