JP2004080417A - 画像合成機能付きデジタルカメラ - Google Patents

Abstract

【課題】撮影現場で合成画像の確認ができ、手軽に合成画像を撮影することを可能とする。
【解決手段】撮像部２と、撮像部２で撮像される動画像と合成用動画像とを合成して表示する表示部２２と、レリーズされたときに得られる前記動画像の構成静止画像と前記合成用動画像の構成静止画像とを関連付けて外部メモリに保存する保存手段１とを備える。合成用動画像は、例えばメモリカード２５等に予め格納されており、ユーザはレリーズするだけで、合成画像を撮影可能となる。
【選択図】　図１

Description

【０００１】
【発明の属する技術分野】
本発明は、撮像部から得られる動画の撮像画像（以下、スルー画像ともいう。）にメモリ等から読み出した別の動画像を合成して保存することができる画像合成機能付きデジタルカメラに関する。
【０００２】
【従来の技術】
カメラで撮像した画像データに別の画像データを貼り付けて合成画像を生成する技術として、例えば、特開２００２―８４４５７号公報記載のものが知られている。この従来技術では、カメラで撮像した静止画像に、動画を構成する連続静止画を次々と合成し、様々なパターンの合成画像を生成する様になっている。
【０００３】
【発明が解決しようとする課題】
上述した従来技術に係る画像合成技術は、カメラで撮像した画像データをカメラから取り出してパーソナルコンピュータに読み込ませ、画像合成アプリケーションソフトによって所望の別の画像データと合成するものであり、合成画像を得るのに手間がかかってしまうという問題がある。
【０００４】
また、カメラで撮像した後に家などに帰ってからコンピュータ上で画像合成するため、どのような合成画像が得られるかを撮影現場で確認して撮影シーンを選ぶということができず、カメラ撮影の面白さに欠けるという問題もある。
【０００５】
本発明の目的は、撮影現場で合成画像の確認ができ、手軽に合成画像を撮影することが可能な画像合成機能付きデジタルカメラを提供することにある。
【０００６】
【課題を解決するための手段】
上記目的を達成する画像合成機能付きデジタルカメラは、撮像部と、前記撮像部で撮像される動画像と合成用動画像とを合成して表示する表示部と、レリーズされたときに得られる前記動画像の構成静止画像と前記合成用動画像の構成静止画像とを関連付けてメモリに保存する保存手段とを備えることを特徴とする。
【０００７】
この構成により、電子ファインダやファインダ代わりの表示部で合成画像のプレビュー画像を確認でき、ユーザはレリーズを押すだけで簡単に合成画像が撮影可能となる。
【０００８】
好適には、前記合成用動画像は、装着自在の外部メモリカードに格納されていることを特徴とし、あるいは、前記合成用動画像は、前記撮像部で撮像された画像から切り出された画像であることを特徴とし、また、前記合成用動画像は、外部の画像配信サーバから無線送信されてくることを特徴とし、更に、外部の画像配信サーバからリアルタイムにストリーム動画として配信されてくることを特徴とする。この構成により、ユーザが予め自身で合成用動画像を用意する必要はなく、面倒な操作なく合成画像の動画を撮影可能となる。
【０００９】
更に好適には、前記表示部に表示する前記合成用動画像は低解像度の画像とし、前記関連付けを行う前記合成用動画像は高解像度の画像とすることを特徴とする。この構成により、合成画像を表示部にプレビュー表示するときの処理負荷が軽減する。
【００１０】
更に好適には、前記撮像部から得られる前記動画像の構成静止画像と該構成静止画像に対応する前記合成用動画像の構成静止画像とを１枚の静止画像に合成することで前記関連付けを行うことを特徴とする。この構成により、関連付けが単純となり、メモリに保存された合成画像の読み出しが容易となる。
【００１１】
【発明の実施の形態】
以下、本発明の一実施形態を図面を参照して説明する。
【００１２】
図１は、本発明の第１実施形態に係る画像合成機能付きデジタルカメラのブロック構成図である。本実施形態に係る画像合成機能付きデジタルカメラは、静止画の他に動画も撮像可能に構成されており、この例では、撮像した動画に対し、外部メモリ等に予め格納されている別の動画を読み込んで合成し、合成動画像データをメモリ等に保存する様になっている。
【００１３】
このデジタルカメラ３０は、カメラ全体の制御を司るＣＰＵ１と、ＣＣＤ等の固体撮像素子及びレンズ系でなる撮像部２と、撮像部２からの映像信号を受信して信号処理を行う信号処理部３と、信号処理された映像信号をデジタル信号に変換するＡ／Ｄ変換器４と、フラッシュ制御部５と、システムメモリ６と、制御プログラム等を格納した不揮発性メモリ７と、タイマ８と、時計９と、入出力インタフェース１０と、撮像画像をＪＰＥＧ等の圧縮画像にしたり圧縮画像を伸張する圧縮／伸張部１１と、フレームメモリ１２と、カードインタフェース１３と、オンスクリーンディスプレイ制御部１４と、動画再生エンジン１５と、画像合成エンジン１６と、これらを相互に接続するバス１７とを備える。
【００１４】
デジタルカメラ３０は更に、フラッシュ制御部５によって点灯制御されるフラッシュ発光部２１と、カメラ背面等に搭載されファインダ代わりとなる液晶表示部（ＬＣＤ）２２と、オンスクリーンディスプレイ制御部（ＯＳＤ）１４の制御信号によって制御されると共にフレームメモリ１２に格納されている画像信号を取り込んで液晶表示部２２に画像を表示制御するＬＣＤ制御部２３と、入出力インタフェース１０に接続されカメラ操作や情報表示を行うスイッチ，ＬＥＤ等２４と、カードインタフェース１３に接続され外部メモリカード２５を装着するメモリカードスロット２６と、上述した各デバイスに電力供給を行うバッテリ２７とを備える。
【００１５】
動画再生エンジン１５は、撮像部２から取り込まれたスルー画像、例えば１秒３０フレームの静止画を動画像として再生し、フレームメモリ１２に書き込んで液晶表示部２２にプレビュー表示する。また、動画再生エンジン１５は、メモリカード２５内に格納されている合成用動画像データを読み込んで動画像として再生し、フレームメモリ１２に書き込み液晶表示部２２に表示する。
【００１６】
画像合成エンジン１６は、スイッチ２４から合成指示入力があったとき、この例では、スルー画像の動画に、合成用動画像データを重ねて合成し、液晶表示部２２にプレビュー表示する。
【００１７】
合成用動画像データとして複数種類の動画像データが用意されており、その中からスルー画像に適した動画像データをユーザが選択し、デジタルカメラ３０のレリーズボタン２４が本押しされて撮影が開始されたときは、スルー画像に、選択された動画像データが合成された状態で、あるいは両者間で関連付けが行われた状態で、メモリカード２５、あるいは別のメモリカードに格納される。
【００１８】
尚、合成画像を液晶表示部２２にプレビュー表示するときの合成用動画像データは、プレビュー用として用意された低解像度画像データを用い、レリーズし高解像度で撮影する場合には高解像度の画像データを用いる構成としてもよい。
【００１９】
メモリカード２５に格納された合成用動画像データは、例えば、人気のあるキャラクタの動画データであり、このメモリカード２５は、例えばテーマパーク側が入場者に貸与し、入場者だけが入場中にそのキャラクタの動画と合成した動画を現場で撮影することができるものとする。
【００２０】
図２は、メモリカード２５に格納された合成用動画像データの一例を示す図であり、実動画データ（図２（ａ））と、この実動画データと対をなすマスク動画データ（図２（ｂ））と、動画データに関する付加情報（画像サイズ，フレームレート，フレーム数など）と、画像合成に関する付加情報（合成位置指定情報，合成レイヤ指定情報など）とから構成される。
【００２１】
図３は、撮像部２を通して得られたスルー画像の一例である。テーマパークのお城を背景に肩車した親子の実動画像を撮像した画像であるが、これだけでは面白みが欠ける。そこで、画像合成エンジン１６は、スルー画像に、ユーザ指定の図２（ｂ）のマスク動画データを重ねて取り込み、このマスク動画データの部分に図２（ａ）の実動画データを填め込むことで、図４に示す様に、架空のキャラクタ画像が重ね合わされた動画像を撮像可能となる。
【００２２】
また、どの様なキャラクタを選択したときどの様に映るのかを事前にユーザが知ることができる様に、液晶表示部２２に図４の動画像をプレビュー表示させ、ユーザの参考にする。
【００２３】
図５は、メモリカード２５内のファイル構造図である。画像記録用のＤＣＦフォーマットに加え、合成用動画データファイルを格納する特定のフォルダ（図示する例では、「ＣＬＩＰ」）が用意され、そのフォルダ内に、合成用のマスク動画データ付きの動画ファイル（実動画データや付加情報など）「ＤＳＣＦ００１．ＭＣＰ」が格納されている。
【００２４】
図６は、本実施形態に係るデジタルカメラの動作手順を示すフローチャートである。先ず、ユーザのスイッチ２４から指定入力に基づいてデジタルカメラ３０を動画合成モードとする（ステップＳ１）。これにより、ＣＰＵ１はメモリカード２５を検索して合成用動画データ（／ＣＬＩＰ／＊．ＭＣＦ）があるか否かを判定する（ステップＳ２）。合成用動画データがメモリカード２５内に存在し無い場合にはエラー表示（ステップＳ３）した後、動画合成モードを終了する。
【００２５】
ステップＳ２で合成用動画データがメモリカード２５内に存在する場合にはステップＳ４に進み、撮像部２から得られたスルー画像（図３参照）と、メモリカード２５内の動画データ（図２参照）とを、動画データの各コマと関連付けられたマスクパターンを利用して低解像度（サムネイルサイズ）で合成し、液晶表示部２２にプレビュー表示（図４参照）する。
【００２６】
プレビュー画像の合成を行う場合、動画データファイル内に合成位置の指定があるときはスルー画像と合成用動画との合成位置は指定に従う。合成レイヤ指定情報として合成用動画を主要被写体の背後に配置する指定がある場合には、スルー画像から所定閾値以上にピントの合った輪郭部分を求めて主要被写体領域を切り出し、マスクパターンと主要被写体領域との排他的論理和領域や論理積領域から新たなマスクパターンを求め、この新たなマスクパターンを利用して画像合成を行う。
【００２７】
次のステップＳ５でデジタルカメラ３０のレリーズ釦が押下されると、レリーズ時のスルー画像の動画の各コマと合成用動画の各コマとを予め設定された解像度で再合成し、メモリカードに保存し（ステップＳ６）、この動画合成モードを終了する。
【００２８】
図７は、本発明の第２実施形態に係るデジタルカメラのブロック構成図である。第１実施形態では、メモリカード２５にて配布された合成用動画像データを用いたが、この実施形態のデジタルカメラ３１では、テーマパーク内という限られた範囲内でのみ受信できる合成用動画配信サーバから合成用動画像データを無線にて取得し、画像合成を行う様になっている。
【００２９】
このため、このデジタルカメラ３１は、図１の構成に加えて通信インタフェース１８がバス１７に接続され、この通信インタフェース１８に通信用アンテナ１９が接続されている。このアンテナ１９を介して取り込まれた合成用動画像データはシステムメモリ６内のワークエリアに一時保存され、画像合成に使用される。
【００３０】
図８は、第２実施形態に係るデジタルカメラの動作手順を示すフローチャートである。デジタルカメラ３１の所定スイッチ２４が投入されて動画合成モードになると（ステップＳ１１）、ＣＰＵ１はアンテナ１９の受信信号を調べ、合成用動画配信サーバが存在するか否かを判定する（ステップＳ１２）。合成用動画配信サーバが存在しない場合にはエラー表示（ステップＳ１３）した後、動画合成モードを終了する。
【００３１】
次のステップＳ１４では、ＣＰＵ１は合成用動画配信サーバに対して低解像度の合成用動画の配信を要求し、この低解像度動画データを取得する。そして、この低解像度の合成用動画をスルー画像に合成し、液晶表示部２２にプレビュー表示する（ステップＳ１５）。
【００３２】
次にステップＳ１６でレリーズ釦が押下されると、ＣＰＵ１は、指定コマの高解像度の合成用動画データを合成用動画配信サーバに要求して高解像度の動画データを取得し（ステップＳ１７）、この高解像度の動画をスルー画像に合成してメモリカードに保存し（ステップＳ１８）、動画合成モードを終了する。
【００３３】
この第２実施形態では、合成用動画配信サーバはデジタルカメラからの要求に従って合成用動画データを配信したが、合成用動画配信サーバがプレビュー表示用の合成用動画データをストリームで配信している場合がある。図９は、合成用動画配信サーバがプレビュー表示用の合成用動画データをストリームで配信しているときのデジタルカメラの動作手順を示すフローチャートである。
【００３４】
デジタルカメラ３１の所定スイッチ２４が投入されて動画合成モードになると（ステップＳ２１）、ＣＰＵ１はアンテナ１９の受信信号を調べ、合成用動画ストリームサーバが存在するか否かを判定する（ステップＳ２２）。合成用動画ストリームサーバが存在しない場合にはエラー表示（ステップＳ２３）した後、動画合成モードを終了する。
【００３５】
次のステップＳ２４では、受信したプレビュー表示用の動画データを取得し、この低解像度の合成用動画をスルー画像に合成し、液晶表示部２２にプレビュー表示する。
【００３６】
次にステップＳ２５でレリーズ釦が押下されると、ＣＰＵ１は、指定コマの高解像度の合成用動画データを合成用動画ストリームサーバに要求して高解像度の動画データを取得し（ステップＳ２６）、この高解像度の動画をスルー画像に合成してメモリカードに保存し（ステップＳ２７）、動画合成モードを終了する。
【００３７】
この様に、本実施形態によれば、動画データを無線配信されるため、合成用動画データの保存のためのメモリが不要となり、メモリの有効利用が可能となる。また、ユーザの選んだ合成用動画が撮影動画に合成されるため、合成画像の無駄な部分がなくなり、デジタルカメラの使い勝手が向上する。
【００３８】
尚、上述した各実施形態では、合成画像の合成位置が指定された場合について説明したが、合成位置についての指定がない場合には、レリーズのタイミングによって合成用動画のコマとスルー画像のコマとの位置関係が決定されるため、レリーズを押して合成結果を見るまでは合成画像がどの様な配置になるのか分からず、却ってエンターテインメント性が向上するという効果がある。
【００３９】
また、上述した各実施形態では、合成画像のプレビュー表示をカメラ背面の液晶表示部で行ったが、電子ファインダ内の表示部でプレビュー表示させる構成でもよいことはいうまでもない。
【００４０】
更にまた、上述した各実施形態では、撮像画像（スルー画像）に合成用動画を一体に合成した合成画像をメモリに保存する方式を採用したが、スルー画像と合成用動画とを関連付けしてメモリに別々に保存することでもよい。また、合成用動画像データは、キャラクタ画像等ではなく、撮像部２を通して得たスルー画像から切り出した画像とすることでもよい。
【００４１】
【発明の効果】
本発明によれば、使い勝手が優れ、面白みのある動画を容易に撮影することが可能なデジタルカメラを提供することができる。
【図面の簡単な説明】
【図１】本発明の第１実施形態に係るデジタルカメラのブロック構成図である。
【図２】図１のデジタルカメラで撮像された動画に合成する合成用動画データの一例を示す図である。
【図３】図１のデジタルカメラで撮像されたスルー画像の一例を示す図である。
【図４】図１のデジタルカメラで合成された合成画像の一例を示す図である。
【図５】図１に示すメモリカードのファイル構造の一例を示す図である。
【図６】図１に示すデジタルカメラの動作手順を示すフローチャートである。
【図７】本発明の第２実施形態に係るデジタルカメラのブロック構成図である。
【図８】図２に示すデジタルカメラの動作手順を示すフローチャートである。
【図９】図２に示すデジタルカメラの別の動作手順を示すフローチャートである。
【符号の説明】
１　ＣＰＵ
２　撮像部
１５　動画再生エンジン
１６　画像合成エンジン
２５　メモリカード
３０，３１　デジタルカメラ
１９　通信用アンテナ

Claims (7)

1. 撮像部と、前記撮像部で撮像される動画像と合成用動画像とを合成して表示する表示部と、レリーズされたときに得られる前記動画像の構成静止画像と前記合成用動画像の構成静止画像とを関連付けてメモリに保存する保存手段とを備えることを特徴とする画像合成機能付きデジタルカメラ。
2. 前記合成用動画像は、装着自在の外部メモリカードに格納されていることを特徴とする請求項１に記載の画像合成機能付きデジタルカメラ。
3. 前記合成用動画像は、前記撮像部で撮像された画像から切り出された画像であることを特徴とする請求項１に記載の画像合成機能付きデジタルカメラ。
4. 前記合成用動画像は、外部の画像配信サーバから無線送信されてくることを特徴とする請求項１に記載の画像合成機能付きデジタルカメラ。
5. 前記合成用動画像は、外部の画像配信サーバからリアルタイムにストリーム動画として配信されてくることを特徴とする請求項４に記載の画像合成機能付きデジタルカメラ。
6. 前記表示部に表示する前記合成用動画像は低解像度の画像とし、前記関連付けを行う前記合成用動画像は高解像度の画像とすることを特徴とする請求項１乃至請求項５のいずれかに記載の画像合成機能付きデジタルカメラ。
7. 前記撮像部から得られる前記動画像の構成静止画像と該構成静止画像に対応する前記合成用動画像の構成静止画像とを１枚の静止画像に合成することで前記関連付けを行うことを特徴とする請求項１乃至請求項６のいずれかに記載の画像合成機能付きデジタルカメラ。

Images