JP2006157433A - 画像処理装置 - Google Patents

Abstract

【解決課題】 動画像データを動画がなめらかに表示されるインターレース方式のビデオ信号に変換する。
【解決手段】 メモリカード１５は動画像データを予め記憶し、画像合成回路６４は記憶された動画像データにおける時系列順に連続する２つのフレーム画像データを合成して合成画像データを生成し、フレーム画像変換部６８は合成画像データにより示される画像を２つのフィールド画像データに分割し、ビデオ信号変換部７０は時系列順に次に連続するフィールド画像データが時系列順に次のフレーム画像を示すフィールド画像データについては分割された合成画像データの対応するフィールド画像データを前記ビデオ信号に変換し、時系列順に次に連続するフィールド画像データが同一のフレーム画像を示すフィールド画像データについては当該フィールド画像データを前記ビデオ信号に変換する。
【選択図】 図２

Description

本発明は、所定周期毎に撮像された複数のフレーム画像データを含む動画像データをインターレース方式のビデオ信号に変換する画像処理装置に関するものである。

近年のデジタル電子スチールカメラ（以下、「ＤＳＣ」という。）には、静止画像の撮影の他、動画像の撮影が行えるものが多数製品化されている。この種のＤＳＣでは、動画像の撮影を行う場合、所定周期（例えば、１／３０秒）毎にＣＣＤ（Charge-Coupled Devices）等の撮像素子によって被写体像を撮像し、これによって得られたフレーム画像データによって構成される動画像データを記憶している。

一方、テレビジョン受像機（以下、ＴＶという。）等では、画像の表示方式としてインターレース方式（所謂、飛び越し走査方式）を採用しており、１／６０秒毎に１画面の偶数番目の走査線と奇数番目の走査線とを順次走査して１枚のフレーム画像を表示している。

このため、ＤＳＣによる撮影によって得られた動画像データをＴＶで表示するには、動画像データにおける各フレーム画像データをインターレース方式のビデオ信号に変換する必要があった。

そこで、上記動画像データをインターレース方式のビデオ信号に変換する従来の技術として、特許文献１には、動画像データに含まれる各フレーム画像を偶数番目の走査線のフィールド画像と奇数番目の走査線のフィールド画像の２枚のフィールド画像に分割し、１／６０秒毎に１枚ずつフィールド画像の画像データをビデオ信号として出力してテープに記録することが記載されている。

特許文献１の技術を用いることにより、動画像データをインターレース方式のビデオ信号に変換できるため、ＤＳＣによる撮影によって得られた動画像データをＴＶで表示することができるようになる。
特開平９−１０７５２０号公報

しかしながら、移動する物体を被写体として撮影して得られた動画像データを特許文献１の技術を用いてＴＶに表示する場合、１枚のフレーム画像を２枚のフィールド画像に分割して１／６０秒毎に順次表示し、１／３０秒毎に１枚のフレーム画像を表示しているため、フィールド画像は１／６０秒毎に表示されているにも関わらず、１／３０秒毎でしか物体が移動した状態とならない。このため、通常のインターレース方式の１／６０秒毎に動きが変化する表示画像と比べて動画像をなめらかに表示できない、という問題点があった。

本発明は上記問題点を解決するためになされたものであり、動画像データを、動画像がなめらかに表示されるインターレース方式のビデオ信号に変換することができる画像処理装置を提供することを目的とする。

上記目的を達成するために、請求項１に記載の発明は、所定周期毎の連続的な撮像によって得られた複数のフレーム画像データにより構成される動画像データにおいて、各々当該複数のフレーム画像データにより示される各画像を偶数番目のライン群と奇数番目のライン群の２つのフィールド画像データに分割してインターレース方式のビデオ信号に変換する画像処理装置であって、前記動画像データを予め記憶するための記憶手段と、前記記憶手段に記憶された前記動画像データにおける時系列順に連続する２つのフレーム画像データを合成して合成画像データを生成する合成手段と、前記合成画像データにより示される画像を前記２つのフィールド画像データに分割する分割手段と、時系列順に次に連続するフィールド画像データが時系列順に次のフレーム画像を示すフィールド画像データについては前記分割手段により分割された前記合成画像データの対応するフィールド画像データを前記ビデオ信号に変換し、時系列順に次に連続するフィールド画像データが同一のフレーム画像を示すフィールド画像データについては当該フィールド画像データを前記ビデオ信号に変換する変換手段と、を備えている。

請求項１に記載の発明によれば、記憶手段によって動画像データが予め記憶され、合成手段によって前記記憶手段に記憶された前記動画像データにおける時系列順に連続する２つのフレーム画像データが合成され、分割手段によって前記合成画像データにより示される画像が前記２つのフィールド画像データに分割され、変換手段によって時系列順に次に連続するフィールド画像データが時系列順に次のフレーム画像を示すフィールド画像データについては前記分割手段により分割された前記合成画像データの対応するフィールド画像データが前記ビデオ信号に変換され、時系列順に次に連続するフィールド画像データが同一のフレーム画像を示すフィールド画像データについては当該フィールド画像データが前記ビデオ信号に変換される。

このように、請求項１に記載の発明によれば、記憶手段に記憶された前記動画像データにおける時系列順に連続する２つのフレーム画像データを合成して合成画像データを生成し、前記合成画像データにより示される画像を前記２つのフィールド画像データに分割し、時系列順に次に連続するフィールド画像データが時系列順に次のフレーム画像を示すフィールド画像データについては前記分割手段により分割された前記合成画像データの対応するフィールド画像データを前記ビデオ信号に変換し、時系列順に次に連続するフィールド画像データが同一のフレーム画像を示すフィールド画像データについては当該フィールド画像データを前記ビデオ信号に変換しているので、動画像データを、動画像がなめらかに表示されるインターレース方式のビデオ信号に変換することができる。

また、請求項１記載の発明は、請求項２記載の発明のように、前記合成手段は、前記連続する２つのフレーム画像データによってそれぞれ示される２つの画像の各画素の濃度値を比較し、濃度値が一定以上の変化している領域の画像を合成してもよい。

また、請求項１又は請求項２記載の発明は、請求項３記載の発明のように、前記合成手段は、合成する領域では前記連続する２つのフレーム画像データによってそれぞれ示される２つの画像の各画素の濃度値を画素単位で平均してもよい。

また、請求項１記載の発明は、請求項４記載の発明のように、前記記憶手段に記憶された前記動画像データにおける時系列順に連続する２つのフレーム画像データによって示される２つの画像から被写体像の輪郭部分をそれぞれ抽出する輪郭抽出手段と、前記２つの画像の被写体像における前記輪郭抽出手段により抽出された輪郭部分の各画素の濃度値及び周囲の画素との濃度値の変化量を当該２つの画像の間で比較して当該輪郭部分の画素毎の動きベクトルを導出する動きベクトル導出手段と、をさらに備え、前記合成手段は、合成する領域として前記動きベクトルから前記輪郭部分の画素毎の移動経路を求め、前記当該移動経路毎に前記２つの画像における当該移動経路上の各画素の濃度値に基づいて当該移動経路の合成画像データを生成してもよい。

さらに、請求項３又は請求項４記載の発明は、請求項５記載の発明のように、前記合成手段は、合成する領域以外では前記２つの画像の何れか一方を用いて合成画像データを生成することが好ましい。

以上説明したように、前記記憶手段に記憶された動画像データにおける連続する２つのフレーム画像データを合成し、合成された合成画像データにより示される画像を２つのフィールド画像データに分割し、次に変換するフィールド画像データの分割元であるフレーム画像データが切り替る場合に、分割された前記合成画像データのフィールド画像データをインターレース方式のビデオ信号に変換し、次に変換するフィールド画像データの分割元であるフレーム画像データが同一の場合に、当該フレーム画像データのフィールド画像データをインターレース方式のビデオ信号に変換しているので、動画像データを、動画像がなめらかに表示されるインターレース方式のビデオ信号に変換することができる、という優れた効果を有する。

（第１の実施の形態）
以下、図面を参照して、本発明の第１の実施の形態について詳細に説明する。なお、ここでは、本発明を動画像が撮影可能なデジタル電子スチールカメラ（ＤＳＣ）に適用した場合について説明する。

まず、図１を参照して、第１の実施の形態に係るＤＳＣ１０の外観上の構成を説明する。

ＤＳＣ１０の正面には、被写体像を結像させるためのレンズ２１と、撮影する被写体の構図を決定するために用いられるファインダ２０と、が備えられている。また、ＤＳＣ１０の上面には、撮影を実行する際に押圧操作されるレリーズボタン（所謂シャッター）５６Ａと、電源スイッチ５６Ｂと、が備えられている。

なお、第１の実施の形態に係るＤＳＣ１０のレリーズボタン５６Ａは、中間位置まで押下される状態（以下、「半押し状態」という。）と、当該中間位置を超えた最終押下位置まで押下される状態（以下、「全押し状態」という。）と、の２段階の押圧操作が検出可能に構成されている。

そして、ＤＳＣ１０では、レリーズボタン５６Ａを半押し状態にすることによりＡＥ（Automatic Exposure、自動露出）機能が働いて露出状態（シャッタースピード、絞りの状態）が設定された後、ＡＦ（Auto Focus、自動合焦）機能が働いて合焦制御され、その後、引き続き全押し状態にすると露光（撮影）が行われる。

一方、ＤＳＣ１０の背面には、前述のファインダ２０の接眼部と、撮影された被写体像やメニュー画面等を表示するための液晶ディスプレイ（以下、「ＬＣＤ」という。）３８と、静止画像の撮影を行うモードである静止画撮影モード、動画像の撮影を行うモードである動画撮影モード及び撮影した静止画像や動画像をＬＣＤ３８に再生するモードである再生モードの何れかのモードに設定する際にスライド操作されるモード切替スイッチ５６Ｃと、十字カーソルボタン５６Ｄと、が備えられている。

なお、十字カーソルボタン５６Ｄは、ＬＣＤ３８の表示領域における上・下・左・右の４方向の移動方向等を示す４つの矢印キーを含んで構成されている。

また、図示しないＤＳＣ１０の側面には、撮影した動画像を所定の方式（ここでは、ＮＴＳＣ（National Television Standards Committee）方式）のコンポジット・ビデオ信号として出力する出力コネクタ５８（図２参照。）が設けられている。

次に、図２を参照して、第１の実施の形態に係るＤＳＣ１０の電気系の主要構成を説明する。

ＤＳＣ１０は、前述のレンズ２１を含んで構成された光学ユニット２２と、レンズ２１の光軸後方に配設された電荷結合素子（以下、「ＣＣＤ」という。）２４と、入力されたアナログ信号に対して各種のアナログ信号処理を行うアナログ信号処理部２６と、入力されたアナログ信号をデジタルデータに変換するアナログ／デジタル変換器（以下、「ＡＤＣ」という。）２８と、入力されたデジタルデータに対して各種のデジタル信号処理を行うデジタル信号処理部３０と、を含んで構成されている。

なお、デジタル信号処理部３０は、所定容量のラインバッファを内蔵し、入力されたデジタルデータを後述するメモリ４８の所定領域に直接記憶させる制御も行う。

ＣＣＤ２４の出力端はアナログ信号処理部２６の入力端に、アナログ信号処理部２６の出力端はＡＤＣ２８の入力端に、ＡＤＣ２８の出力端はデジタル信号処理部３０の入力端に、各々接続されている。従って、ＣＣＤ２４から出力された被写体像を示すアナログ信号はアナログ信号処理部２６によって所定のアナログ信号処理が施され、ＡＤＣ２８によってデジタル画像データに変換された後にデジタル信号処理部３０に入力される。

一方、ＤＳＣ１０は、被写体像やメニュー画面等をＬＣＤ３８に表示させるための信号を生成してＬＣＤ３８に供給するＬＣＤインタフェース３６と、ＤＳＣ１０全体の動作を司るＣＰＵ（中央処理装置）４０と、撮影により得られたデジタル画像データを記憶するメモリ４８と、後述するビデオ信号変換処理を行うビデオ信号変換処理プログラムを含む各種プログラムや各種パラメータ等が予め記憶されたＲＯＭ４９と、メモリ４８及びＲＯＭ４９に対するアクセスの制御を行うメモリインタフェース部４６と、を含んで構成されている。

更に、ＤＳＣ１０は、可搬型のメモリカード１５をＤＳＣ１０でアクセス可能とするためのメディアインタフェース回路５０と、撮影されたデジタル画像データに対して圧縮処理及び伸張処理を行う圧縮・伸張回路５４と、を含んで構成されている。

なお、第１の実施の形態に係るＤＳＣ１０では、メモリ４８としてＳＤＲＡＭ（Synchronous ＤＲＡＭ）が用いられ、メモリカード１５としてスマートメディア（Smart Media(登録商標)）が用いられている。

また、圧縮・伸張回路５４は、静止画像の撮影によって得られたデジタル画像データに対して所定の静止画像圧縮方式（第１の実施の形態では、ＪＰＥＧ（Joint Photographic Coding Expert Group）方式）での圧縮処理及び伸張処理を行う一方、動画像の撮影によって得られたデジタル画像データに対して所定の動画像圧縮方式（第１の実施の形態では、ＭＰＥＧ（Moving Picture Expert Group）−２方式）での圧縮処理及び伸張処理を行う。

デジタル信号処理部３０、ＬＣＤインタフェース３６、ＣＰＵ４０、メモリインタフェース部４６、メディアインタフェース回路５０、及び圧縮・伸張回路５４はシステムバスＢＵＳを介して相互に接続されている。従って、ＣＰＵ４０は、デジタル信号処理部３０及び圧縮・伸張回路５４の作動の制御、ＬＣＤ３８に対するＬＣＤインタフェース３６を介した各種情報の表示、メモリ４８、ＲＯＭ４９及びメモリカード１５へのメモリインタフェース部４６ないしメディアインタフェース回路５０を介したアクセスを各々行うことができる。よって、ＣＰＵ４０は、メモリカード１５の残記憶容量（書込み可能容量）も検出することが可能となっている。

一方、第１の実施の形態のＤＳＣ１０には、動画像の撮影により得られた動画像データをインターレース方式のコンポジット・ビデオ信号に変換する動画像データ変換部６０がさらに備えられており、動画像データ変換部６０は、動画像データを構成するフレーム画像データを記憶する２つのフレームメモリ６２Ａ、６２Ｂと、フレーム画像データを合成して合成画像データを生成する画像合成回路６４と、フレーム画像データ及び合成画像データの出力タイミングを制御する画像出力周期制御部６６と、フレーム画像データ及び合成画像データを各々奇数番目のライン群及び偶数番目のライン群により構成されるフィールド画像データに変換するフィールド画像変換部６８と、フィールド画像変換部６８で変換されたフィールド画像データを順次コンポジット・ビデオ信号に変換するビデオ信号変換部７０と、を含んで構成されている。

フレームメモリ６２Ａは、システムバスＢＵＳ、フレームメモリ６２Ｂ、画像合成回路６４、及び画像出力周期制御部６６と接続されており、動画像データをインターレース方式のコンポジット・ビデオ信号に変換する際に当該動画像データにおけるフレーム画像データが時系列順に一時的に記憶され、画像出力周期制御部６６からフレーム画像データの出力指示信号を受信すると、その時点で記憶されているフレーム画像データがフレームメモリ６２Ｂへ出力される。

フレームメモリ６２Ｂは、画像合成回路６４、画像出力周期制御部６６及びフィールド画像変換部６８と接続されており、フレームメモリ６２Ａから出力されたフレーム画像データを順次記憶し、画像出力周期制御部６６からフレーム画像データの出力指示信号を受信すると、その時点で記憶されているフレーム画像データがフィールド画像変換部６８へ出力される。

画像合成回路６４は、画像出力周期制御部６６及びフィールド画像変換部６８と接続されており、画像出力周期制御部６６から画像合成指示信号を受信すると、フレームメモリ６２Ａ、６２Ｂに記憶されているフレーム画像データをそれぞれ読み出し、各フレーム画像データにより示される画像内で同一の位置となる画素毎に各色の濃度値（階調値）を加算平均して合成画像データを生成し、フィールド画像変換部６８へ出力する。

画像出力周期制御部６６は、システムバスＢＵＳと接続されており、ＣＰＵ４０による制御に応じてフレームメモリ６２Ａ、６２Ｂに対して上記出力指示信号を送信すると共に、画像合成回路６４に対して上記画像合成信号を送信する。

フィールド画像変換部６８は、ビデオ信号変換部７０と接続されており、フレームメモリ６２Ｂから出力されたフレーム画像データ及び画像合成回路６４から出力された合成画像データを偶数番目のライン群によって構成されるフィールド画像データ（以下、「偶数フィールド画像データ」という。）と奇数番目のライン群によって構成されるフィールド画像データ（以下。「奇数フィールド画像データ」という。）とに分割してビデオ信号変換部７０に出力する。

ビデオ信号変換部７０は、出力コネクタ５８と接続されており、所定周期毎（ここでは、１／６０秒毎）に、フィールド画像変換部６８より入力された偶数フィールド画像データと奇数フィールド画像データを交互にインターレース方式のコンポジット・ビデオ信号（ここでは、ＮＴＳＣ信号）に変換して出力コネクタ５８に出力する。

一方、第１の実施の形態のＤＳＣ１０には、主としてＣＣＤ２４を駆動させるためのタイミング信号を生成してＣＣＤ２４に供給するタイミングジェネレータ３２が備えられており、ＣＣＤ２４の駆動はＣＰＵ４０によりタイミングジェネレータ３２を介して制御される。

更に、ＤＳＣ１０にはＡＥ／ＡＦ制御部３４が備えられており、光学ユニット２２に備えられた図示しない焦点調整モータ、ズームモータ及び絞り駆動モータの駆動もＣＰＵ４０によりＡＥ／ＡＦ制御部３４を介して制御される。

すなわち、第１の実施の形態に係るレンズ２１は複数枚のレンズを有し、焦点距離の変更（変倍）が可能なズームレンズとして構成されており、図示しないレンズ駆動機構を備えている。このレンズ駆動機構に上記焦点調整モータ、ズームモータ及び絞り駆動モータは含まれるものであり、これらのモータは各々ＣＰＵ４０の制御によりＡＥ／ＡＦ制御部３４から供給された駆動信号によって駆動される。

更に、前述のレリーズボタン５６Ａ、電源スイッチ５６Ｂ、モード切替スイッチ５６Ｃ、及び十字カーソルボタン５６Ｄ（同図では、「操作部５６」と総称。）は、ＣＰＵ４０に接続されており、ＣＰＵ４０は、これらの操作部５６に対する操作状態を常時把握できる。

次に、第１の実施の形態に係るＤＳＣ１０の撮影時における全体的な動作について簡単に説明する。

第１の実施の形態に係るＤＳＣ１０では、前述したように、モード切替スイッチ５６Ｃを静止画撮影モードに設定することによって静止画像の撮影を、動画撮影モードに設定することによって動画像の撮影を、各々行うことができる。

モード切替スイッチ５６Ｃを静止画撮影モードあるいは動画撮影モードに設定すると、ＣＣＤ２４は、光学ユニット２２を介した撮像を行い、被写体像を示すＲ（赤）、Ｇ（緑）、Ｂ（青）毎のアナログ信号をアナログ信号処理部２６に順次出力する。アナログ信号処理部２６は、ＣＣＤ２４から入力されたアナログ信号に対して相関二重サンプリング処理等のアナログ信号処理を施した後にＡＤＣ２８に順次出力する。

ＡＤＣ２８は、アナログ信号処理部２６から入力されたＲ、Ｇ、Ｂ毎のアナログ信号を各々１２ビットのＲ、Ｇ、Ｂの信号（デジタル画像データ）に変換してデジタル信号処理部３０に順次出力する。デジタル信号処理部３０は、内蔵しているラインバッファにＡＤＣ２８から順次入力されるデジタル画像データを蓄積して一旦メモリ４８の所定領域に直接格納する。

メモリ４８の所定領域に格納されたデジタル画像データは、ＣＰＵ４０による制御に応じてデジタル信号処理部３０により読み出され、所定の物理量に応じたデジタルゲインをかけることでホワイトバランス調整を行うと共に、ガンマ処理及びシャープネス処理を行って８ビットのデジタル画像データを生成する。

そして、デジタル信号処理部３０は、生成した８ビットのデジタル画像データに対しＹＣ信号処理を施して輝度信号Ｙとクロマ信号Ｃｒ、Ｃｂ（以下、「ＹＣ信号」という。）を生成し、ＹＣ信号をメモリ４８の上記所定領域とは異なる領域に格納する。

なお、ＬＣＤ３８は、ＣＣＤ２４による連続的な撮像によって得られた動画像（スルー画像）を表示してファインダとして使用することができるものとして構成されており、ＬＣＤ３８をファインダとして使用する場合には、生成したＹＣ信号を、ＬＣＤインタフェース３６を介して順次ＬＣＤ３８に出力する。これによってＬＣＤ３８にスルー画像が表示されることになる。

ここで、レリーズボタン５６Ａが半押し状態とされると、前述のようにＡＥ機能が働いて露出状態が設定された後、ＡＦ機能が働いて合焦制御され、全押し状態とされることにより撮影が行われる。その際、モード切替スイッチ５６Ｃが静止画撮影モードに設定されている場合は、１枚の被写体像（フレーム画像）の撮影が行われ、動画撮影モードに設定されている場合には、次にレリーズボタン５６Ａが全押し状態とされるまでの間、動画像の撮影が行われる。

すなわち、モード切替スイッチ５６Ｃが静止画撮影モードに設定された状態でレリーズボタン５６Ａが全押し状態とされると、ＣＰＵ４０は、レリーズボタン５６Ａが全押し状態とされた時点でメモリ４８に格納されているＹＣ信号のフレーム画像データを圧縮・伸張回路５４へ出力し、圧縮・伸張回路５４によって所定の静止画像圧縮方式（第１の実施の形態では、ＪＰＥＧ方式）での圧縮処理を行わせ、メディアインタフェース回路５０を介してメモリカード１５に静止画像データとして記憶させる。

一方、モード切替スイッチ５６Ｃが動画撮影モードに設定されていると、ＣＰＵ４０は、シャッタスピード及び絞り値等を１秒間に所定数（例えば、３０フレーム分）のフレーム画像データが得られように設定し、レリーズボタン５６Ａが全押し状態とされた時点にメモリ４８に時系列に格納されるＹＣ信号のフレーム画像データを圧縮・伸張回路５４へ順次出力し、圧縮・伸張回路５４によって、入力されたフレーム画像データに対して動き補償予測、符号化及び離散コサイン変換等の処理を伴なう所定の動画像圧縮方式（第１の実施の形態では、ＭＰＥＧ−２方式）での圧縮処理を連続的に行わせ、メディアインタフェース回路５０を介してメモリカード１５に動画像データとして記憶させることを開始する。そして、再度レリーズボタン５６Ａが全押し状態とされた時点、又は、メモリカード１５の残記憶容量が所定量以下となったことを検出した時点で圧縮・伸張回路５４による圧縮処理を停止して当該動画像データの記憶を停止する。

一方、第１の実施の形態に係るＤＳＣ１０では、モード切替スイッチ５６Ｃによって再生モードが設定されると、メモリカード１５に記憶されている動画像データのうち、最も先の撮影によって得られた画像データ及び静止画像データにより示される被写体像をＬＣＤ３８に表示（再生）する。

そして、ユーザは、所定ボタン（ここでは、十字カーソルボタン５６Ｄ）の操作により、ＬＣＤ３８による再生画像を他の画像データによって示される被写体像に切り替えることができる。なお、このとき、表示対象とする画像データが動画像データである場合には、当該動画像データを構成するフレーム画像データのうちの先頭のフレーム画像データによって示される被写体像を表示するようにしている。

そして、ＬＣＤ３８に動画像データによる被写体像が表示されている際に所定ボタン（ここでは、レリーズボタン５６Ａ）が操作されると、当該動画像データによって示される動画像をＬＣＤ３８に表示させると共に、当該動画像を示すコンポジット・ビデオ信号を出力コネクタ５８に出力させるビデオ信号変換処理を実行する。

次に、図３を参照して、ビデオ信号変換処理を実行している際のＤＳＣ１０の作用を説明する。なお、図３は、当該ビデオ信号変換処理の流れを示すフローチャートである。

同図のステップ１００では、メモリカード１５に記憶されている動画像データを圧縮・伸張処理回路５４へ出力し、圧縮・伸張処理回路５４によって動画像データを構成するフレーム画像データを伸張処理してメモリ４８に展開して記憶させる。

次のステップ１０１では、動画像データを構成するフレーム画像データのうち、最も先の撮影によって得られたフレーム画像データをフレームメモリ６２Ａへ出力してフレームメモリ６２Ａに記憶させる。

次のステップ１０２では、フレームメモリ６２Ａに記憶させたフレーム画像データが最も先の撮影によって得られたフレーム画像データであるかを否かを判定しており、肯定判定の場合はステップ１０８へ移行し、否定判定の場合はステップ１０４へ移行する。

これは、コンポジット・ビデオ信号を出力する際の初期処理を行うための判定であり、最も先のフレーム画像データは、後述するステップ１０８でフレームメモリ６２Ｂへ出力され、後述するステップ１１８でコンポジット・ビデオ信号に変換されて出力される。

よって、次のステップ１０４及びステップ１０６の判定が行われるのは、２番目以降のフレーム画像データとなる。

ステップ１０４では、前回のフィールド画像データをコンポジット・ビデオ信号へ変換（後述するステップ１１８の処理。）してから１／６０秒以上経過したか否かを判定しており、肯定判定の場合は、ステップ１０６へ移行し、否定判定の場合は再度ステップ１０４へ移行する。

これは、１／６０秒毎にフィールド画像データを変換し、コンポジット・ビデオ信号を出力するためである。

ステップ１０６では、前回フレームメモリ６２Ａにフレーム画像データを記憶させてから所定周期（例えば、１／３０秒。）以上経過したか否かを判定しており、肯定判定の場合はステップ１０８へ移行し、否定判定の場合はステップ１１４へ移行する。

なお、動画像データとしてフレーム画像データを１秒間に所定数３０フレーム分記憶させたため、所定周期は１／３０（フレーム）秒となっている。

ここで、第１の実施の形態のＤＳＣ１０では、所定周期毎に被写体像を撮影したフレーム画像データを動画像データとして記憶しているため、インターレス方式よりもフレームレートが小さいなっている。そこで、所定周期毎には、フレームメモリ６２Ｂに記憶されたフレーム画像データに基づいたコンポジット・ビデオ信号を出力し、所定周期の間となる１／６０秒毎には、画像合成回路６４により合成した合成画像データに基づいたコンポジット・ビデオ信号を出力するようにタイミングを制御している。

ステップ１０８では、画像出力周期制御部６６に対してフレームメモリ６２Ａへ出力指示信号を出力するように制御を行い、フレームメモリ６２Ａに記憶されたフレーム画像データをフレームメモリ６２Ｂへ出力させてフレームメモリ６２Ｂに記憶させる。次のステップ１１０では、画像出力周期制御部６６に対してフレームメモリ６２Ｂへ出力指示信号を出力するように制御を行い、フレームメモリ６２Ｂに記憶されたフレーム画像データをフィールド画像変換部６８へ出力させる。次のステップ１１２では、メモリ４８に展開された動画像データから時系列順に次のフレーム画像データをフレームメモリ６２Ａへ出力してフレームメモリ６２Ａに記憶させる。なお、次のフレーム画像データが無い場合はフレームメモリ６２Ａの記憶領域を初期化してフレーム画像データが記憶されていない状態とする。

一方、ステップ１１４では、ステップ１０６において前記所定周期を経過していないと判定されたため、画像出力周期制御部６６に対して画像合成回路６４へ画像合成指示信号を出力するように制御を行い、画像合成回路６４によってフレームメモリ６２Ａ及びフレームメモリ６２Ｂに記憶されている２つのフレーム画像データの読み込ませて合成画像データを生成させる。次のステップ１１６では、画像合成回路６４によって合成された合成画像データがフィールド画像変換部６８へ出力される。

ステップ１１８では、フィールド画像変換部６８によってステップ１１０で出力されたフレーム画像データ、あるいはステップ１１６で出力された合成画像データが偶数フィールド画像データと奇数フィールド画像データとに分割されてビデオ信号変換部７０へ出力される。

次のステップ１２０では、ビデオ信号変換部７０によって偶数フィールド画像データ又は奇数フィールド画像データの何れか１方をコンポジット・ビデオ信号に変換して出力コネクタ５８へ出力する。なお、ビデオ信号変換部７０は、インターレース方式のコンポジット・ビデオ信号を出力するため、偶数フィールド画像データと奇数フィールド画像データを交互にコンポジット・ビデオ信号へ変換している。これにより、フレーム画像データを分割したフィールド画像データと合成画像データを分割したフィールド画像データとが交互にコンポジット・ビデオ信号に変換される。

次のステップ１２２では、フレームメモリ６２Ａにフレーム画像データが記憶されているか否かを判定しており、否定判定の場合は終了へ移行し、肯定判定の場合はステップ１０２へ移行する。

これは、ステップ１１２において、次の読み込むフレーム画像データがない場合、フレームメモリ６２Ａの記憶領域を初期化しているため、フレーム画像データが記憶されていないことから動画像データを全て読み込んだと判定することができるためである。

ここで、図４に、例えば、ビデオカメラ等によって通常のインターレース方式による１／６０秒毎に撮影を行ったコンポジット・ビデオ信号による画像（図４（Ａ）〜（Ｅ））、動画像データとして所定周期（１／３０秒）毎に記憶されたフレーム画像データによる画像（図４（Ｆ）〜（Ｈ））、前記動画像データとして所定周期（１／３０秒）毎に記憶されたフレーム画像データを従来の技術（特許文献１の技術）によりインターレース方式のビデオ信号に変換した場合の画像（図４（Ｉ）〜（Ｍ））、及び、第１の実施の形態のビデオ信号変換処理により出力されたインターレース方式のコンポジット・ビデオ信号による画像（図４（Ｎ）〜（Ｒ））を示す。

通常のインターレース方式によるコンポジット・ビデオ信号では、図４（Ａ）〜（Ｄ）に示されるように、１／６０秒毎の物体の位置が変化するため、画像表示装置で各画像を表示した場合に移動する物体（図４（Ａ）〜（Ｒ）では、車両）の動きをなめらかに表示することができる。

一方、動画像データは、コンポジット・ビデオ信号としてそのまま出力できないため、図４（Ｆ）〜（Ｈ）に示される画像を画像表示装置によって表示することはできない（ＬＣＤ３８には表示される。）。

動画像データとして記憶されたフレーム画像データを従来の技術（特許文献１の技術）により変換したコンポジット・ビデオ信号では、画像表示装置によって図４（Ｉ）〜（Ｍ）に示される各画像を表示することができる。しかし、従来の技術では、図４（Ｉ）と（Ｊ）、図４（Ｋ）と（Ｌ）は同じ画像となり、前記所定周期（１／３０秒）毎でしか車両が移動しないため、不連続な動きに見える。

一方、第１の実施の形態のビデオ信号変換処理より出力されたコンポジット・ビデオ信号では、フレーム画像データを分割したフィールド画像データにより示される画像と合成画像データを分割したフィールド画像データにより示される画像とが交互に画像表示装置に表示される。

すなわち、第１の実施の形態のビデオ信号変換処理によれば、例えば、奇数フィールド画像データ、偶数フィールド画像データ、の順に１つのフレーム画像をコンポジット・ビデオ信号に変換しているとした場合、所定周期（１／３０秒）毎の奇数フィールド画像データの変換では、当該奇数フィールド画像データと時系列順に次に連続する偶数フィールド画像データとが同一のフレーム画像を示すフィールド画像データであるため、ビデオ信号変換部７０は当該奇数フィールド画像データをコンポジット・ビデオ信号に変換している。一方、前記所定周期の間となる１／６０秒毎の偶数フィールド画像データの変換では、偶数フィールド画像データの時系列順に次に連続する奇数フィールド画像データが時系列順に次のフレーム画像を示すフィールド画像データであるため、ビデオ信号変換部７０は合成画像データを分割した偶数フィールド画像データを変換している。よって、フレーム画像データを分割した奇数フィールド画像データに基づく画像（図４（Ｎ）、（Ｐ）、（Ｒ））と、合成画像データを分割した奇数フィールド画像データに基づく画像（図４（Ｏ）、（Ｑ））が交互に画像表示装置に表示される。このように、合成画像データを分割したフィールド画像データが交互に表示されることにより、人間の目では残像効果によって連続したなめらかな動画像として捉えることができる。

以上のように第１の実施の形態によれば、所定周期毎の連続的な撮像によって得られた複数のフレーム画像データにより構成される動画像データにおいて、各々当該複数のフレーム画像データにより示される各画像を偶数番目のライン群と奇数番目のライン群の２つのフィールド画像データに分割してインターレース方式のビデオ信号に変換する画像処理装置（ここでは、ＤＳＣ１０）であって、記憶手段（ここでは、メモリカード１５）は前記動画像データを予め記憶し、合成手段（ここでは、画像合成回路６４）は前記記憶手段に記憶された前記動画像データにおける時系列順に連続する２つのフレーム画像データを合成して合成画像データを生成し、分割手段（ここでは、フレーム画像変換部６８）は前記合成画像データにより示される画像を前記２つのフィールド画像データに分割し、変換手段（ここでは、ビデオ信号変換部７０）は時系列順に次に連続するフィールド画像データが時系列順に次のフレーム画像を示すフィールド画像データについては前記分割手段により分割された前記合成画像データの対応するフィールド画像データを前記ビデオ信号に変換し、時系列順に次に連続するフィールド画像データが同一のフレーム画像を示すフィールド画像データについては当該フィールド画像データを前記ビデオ信号に変換しているので、動画像データを、動画像がなめらかに表示されるインターレース方式のビデオ信号に変換することができる。

さらに、前記合成手段は、合成する領域では前記連続する２つのフレーム画像データによってそれぞれ示される２つの画像の各画素の濃度値を画素単位で平均しているので、合成画像データによって示される画像が２つの画像を含むこととなり、動画像として表示した際に動きをなめらかに表示することができる。

（変形例）
次に、変形例について説明する。

第１の実施の形態では、フレーム画像データの全ての画像領域で合成を行ったが、変形例では、画像合成回路６４において２つのフレーム画像データによって示される２つの画像の間で位置が対応する画素毎に濃度値を比較し、濃度値が一定以上の変化している領域を動きが大きい領域とみなして、動きが大きい領域について位置が対応している画素と濃度値を加算平均し、動きが少ない領域（濃度値の変化一定未満の領域）では２つのフレーム画像データの何れか一方の画素の濃度値を用いて合成画像データを生成する。これにより、一定以上の動きが大きい領域では、２つの画像が合成されるため、動画像として表示した際に動きをなめらかに表示することができる。また、動きが少ない領域では、合成が行われないため、画像を精細に表示することができる。

なお、画像合成回路６４において、２つのフレーム画像データによって示される２つの画像をそれぞれ所定の大きさ（例えば、８×８（縦×横）画素）毎にブロック化し、２つの画像の間で各ブロックの濃度値をそれぞれ比較することにより動き補償予測を行ってブロック毎に動きが大きい領域を検出してもよい。前記所定のブロック毎に動きがあるか否かを算出することにより、画素毎に算出を行うよりも計算時間を短くすることができる。

以上のように変形例によれば、前記合成手段は、前記連続する２つのフレーム画像データによってそれぞれ示される２つの画像の各画素の濃度値を比較し、濃度値が一定以上の変化している領域の画像を合成しているので、動画像として表示した際に、動きが少ない領域（静止している領域を含む）を精細に表示でき、また、動いている領域をなめらかに表示することができる。

さらに、前記合成手段は、合成する領域以外では前記２つの画像の何れか一方を用いて合成画像データを生成しているので、合成する領域以外で濃度値を演算処理する必要がないため合成手段での合成処理の負荷を軽減できる。

なお、第１の実施の形態及び変形例では、画素の２つの画像の各画素の濃度値の加算平均により合成を行ったが、何れかの画像の画素の重み付けを設けて加重平均を求めてもよい。

（第２の実施の形態）
次に、第２の実施の形態について説明する。第２の実施の形態の特徴は、時系列順に記憶されたフレーム画像データによって示される連続した２つの画像をそれぞれ比較して動きベクトルを求め、動きベクトルに基づいて動き方向の画素と合成した合成画像データを生成する点にある。

第２の実施の形態に係るＤＳＣ１０の外観上の構成は、第１の実施の形態の図１と同様であるため説明を省略する。

図５には、第２の実施の形態に係るＤＳＣ１０の電気系の主要構成が示されている。なお、第１の実施の形態の図２と同一符号箇所は、同様の構成であるため説明を省略し、異なる部分についてのみ新しく符号を付して説明する。

輪郭抽出部１５０は、フレームメモリ６２Ａ、６２Ｂ、及び動きベクトル導出部１５１と接続されている。輪郭抽出部１５０は、フレームメモリ６２Ａ、６２Ｂにそれぞれ記憶されている２つのフレーム画像データを読み出して、フレームメモリ６２Ｂに記憶されているフレーム画像データによって示される画像（以下、移動前画像という。）と、フレームメモリ６２Ａに記憶されているフレーム画像データによって示される画像（以下、移動後画像という。）と、に対してエッジ抽出フィルタを用いて各画素の周囲の画素との濃度値の変化の大きい部分を被写体の輪郭部分として抽出し、抽出した移動前画像及び移動後画像の輪郭部分の位置情報を動きベクトル導出部１５１へ送信する。

動きベクトル導出部１５１は、フレームメモリ６２Ａ、６２Ｂ、輪郭抽出部１５０及び画像合成回路１５２と接続されている。動きベクトル導出部１５１は、フレームメモリ６２Ａ、６２Ｂにそれぞれ記憶されている２つのフレーム画像データを読み出し、受信した輪郭部分の位置情報に基づいて移動前画像と移動後画像の間で被写体の輪郭部分の各画素の濃度値及び各画素の周囲の画素との濃度値の変化量をそれぞれ比較して移動前画像から移動後画像へ画素が移動した位置を求めて画素毎の動きベクトルを導出し、動きベクトル情報を画像合成回路１５２へ送信する。

すなわち、動きベクトル導出部１５１は、図７、８に示されるように移動前画像における被写体Ａが移動後画像において被写体Ｂへと位置が移動した場合、輪郭部分の画素毎に移動ベクトルを導出する。なお、図７、８では１マスが１画素を示している。図８は、図７の破線部分を拡大した拡大図である。

画像合成回路１５２は、受信した動きベクトル情報から移動距離が一定以上である輪郭部分の画素を特定し、特定した画素毎に動きベクトルから移動経路を求め、移動経路上の各画素をその移動経路上の各画素の濃度値を合成して、移動経路の合成画像データを生成する。

ここで、移動前画像をＦ１、移動後画像をＦ２とし、図８に示されるように画像の画素のＸ方向の座標をａ、ｂ、ｃ、Ｙ方向の座標を１、２、３として、移動前画像Ｆ１の座標（Ｘ，Ｙ）の画素の濃度値を、Ｆ１ＸＹ、移動後画像Ｆ２の座標（Ｘ，Ｙ）の画素の濃度値を、Ｆ２ＸＹと表す。例えば、移動前画像Ｆ１の座標（ａ，１）の画素の濃度値をＦ１ａ１、移動後画像Ｆ２の座標（ｃ，３）の画素の濃度値をＦ２ｃ３と表す。

例えば、図８に示されるように、移動後画像の座標（ａ，１）の画素は、移動後画像の（ｃ，３）へと移動しており、動きベクトルから移動経路が（ａ，１）、（ｂ，２）、（ｃ，３）として定まるため、移動経路上の各画素の濃度値から合成画像の濃度値を以下の演算により算出して、合成画像データを生成する。

合成画像の座標（ａ，１）の濃度値＝０．７５×Ｆ１ａ１＋０．２５Ｆ２ａ１
合成画像の座標（ｂ，２）の濃度値＝０．１２５×Ｆ１ａ１＋０．２５×Ｆ１ｂ２＋０．１２５Ｆ１ｃ３＋０．１２５×Ｆ２ａ１＋０．２５×Ｆ２ｂ２＋０．１２５Ｆ２ｃ３
合成画像の座標（ｃ，３）の濃度値＝１×Ｆ１ｃ１
なお、図８では、動きベクトルにより３画素分移動しているため上記のように各式の係数を定めたが、各式は移動経路に存在する画素数に応じて適宜変更すればよい。また、１つの式の中で係数を合計した値は１となることが好ましい。

次に、第２の実施の形態の作用を説明する。

図６には、第２の実施の形態のビデオ信号変換処理の流れを示すフローチャートが示されている。なお、図６に示されるビデオ信号変換処理において、第１の実施の形態の図３と同一符号箇所は同様であるため説明を省略し、異なる部分についてのみ新しく符号を付して説明する。

図６のステップ１０２では、フレームメモリ６２Ａに記憶させたフレーム画像データが最も先の撮影によって得られたフレーム画像データであるかを否かを判定しており、肯定判定の場合はステップ１０８へ移行し、否定判定の場合はステップ２００へ移行する。

ステップ２００では、輪郭抽出部１５０においてフレームメモリ６２Ａ、６２Ｂにそれぞれ記憶されているフレーム画像データが読み出され、エッジ抽出フィルタによってフレームメモリ６２Ｂに記憶されているフレーム画像データによって示される移動前画像と、フレームメモリ６２Ａに記憶されているフレーム画像データによって示される移動後画像の被写体像の輪郭部分の画素が抽出され、移動前画像及び移動後画像の輪郭部分の位置情報が動きベクトル導出部１５１へ出力される。

次のステップ２０２では、動きベクトル導出部１５１においてフレームメモリ６２Ａ、６２Ｂにそれぞれ記憶されているフレーム画像データが読み出され、移動前画像及び移動後画像の輪郭部分の位置情報に基づいて移動前画像と移動後画像の間で輪郭部分の画素の濃度値及び濃度値の変化量がそれぞれ比較されて輪郭部分の画素毎の動きベクトルが導出され、動きベクトル情報が画像合成回路６４へ出力される。動きベクトル情報を出力されるとステップ１０４へ移行する。

また、ステップ１０６では、前回フレームメモリ６２Ａにフレーム画像データを記憶させてから所定周期（例えば、１／３０秒。）以上経過したか否かを判定しており、肯定判定の場合はステップ１０８へ移行し、否定判定の場合はステップ２０４へ移行する。

ステップ２０４では、画像出力周期制御部６６に対して画像合成回路６４へ画像合成指示信号を出力するように制御を行い、画像合成回路６４において、フレームメモリ６２Ａ及びフレームメモリ６２Ｂに記憶されている２つのフレーム画像データの読み込ませ、動きベクトル情報から移動距離が一定以上である輪郭部分の画素を特定し、特定した画素毎に動きベクトルから移動経路を求め、移動経路上の各画素の濃度値を合成することにより移動経路の合成画像データを生成する。

これにより、合成画像データにより示される画像は、移動前画像と移動後画像とが動き方向へ流れるように合成されるため、動画像として表示した際に動きをなめらかに表示することができる。

ここで、図９（Ａ）には第１の実施の形態に係るビデオ信号変換処理により、画像表示装置に表示された画像が示されており、図９（Ｂ）には、第２の実施の形態に係るビデオ信号変換処理により、画像表示装置に表示された画像が示されている。

図９（Ｂ）に示されるように、第２の実施の形態に係るビデオ信号変換処理によれば、被写体像が動き方向へぶれる（ほやける）ため、動画像として見た場合により自然な画像として捉えられる。

以上のように第２の実施の形態によれば、輪郭抽出手段（ここでは、輪郭抽出部１５０）は、前記記憶手段に記憶された前記動画像データにおける時系列順に連続する２つのフレーム画像データによって示される２つの画像から被写体像の輪郭部分をそれぞれ抽出し、動きベクトル導出手段（ここでは、動きベクトル導出部１５１）は、前記２つの画像の被写体像における前記輪郭抽出手段により抽出された輪郭部分の各画素の濃度値及び周囲の画素との濃度値の変化量を当該２つの画像の間で比較して当該輪郭部分の画素毎の動きベクトルを導出し、合成手段（ここでは、画像合成回路１５２）は、合成する領域として前記動きベクトルから前記輪郭部分の画素毎の移動経路を求め、前記当該移動経路毎に前記２つの画像における当該移動経路上の各画素の濃度値に基づいて当該移動経路の合成画像データを生成しているので、動画像として生成された合成画像データを表示した際に動画像がなめらかに表示される。

なお、第２の実施の形態では、画像合成回路１５２において移動前画像と移動後画像の移動経路上の画素を合成したが、移動前画像の移動経路上の画素のみにより合成画像データを生成してもよい。

すなわち、図８に示されるように、移動後画像の座標（ａ，１）の画素は、移動後画像の（ｃ，３）へと移動している場合、移動前画像（Ｆ１）の各画素の濃度値から以下の演算により算出して合成画像データを生成してもよい。

合成画像の座標（ａ，１）の濃度値＝０．７５×Ｆ１ａ１＋０．２５Ｆ１ｂ２
合成画像の座標（ｂ，２）の濃度値＝０．２５×Ｆ１ａ１＋０．５×Ｆ１ｂ２＋０．２５×Ｆ１ｃ３
合成画像の座標（ｃ，３）の濃度値＝１×Ｆ１ｃ１
また、移動後画像（Ｆ２）の各画素の濃度値から以下の演算により算出して合成画像データを生成してもよい。

合成画像の座標（ａ，１）の濃度値＝１×Ｆ２ａ１
合成画像の座標（ｂ，２）の濃度値＝０．２５×Ｆ２ａ１＋０．５×Ｆ２ｂ２＋０．２５×Ｆ２ｃ３
合成画像の座標（ｃ，３）の濃度値＝０．２５×Ｆ２ｂ２＋０．７５Ｆ２ｃ３
さらに、第１の実施の形態及び第２の実施の形態では、所定周期毎にフレームメモリ６２Ｂに記憶されたフレーム画像データを偶数フィールド画像データと奇数フィールド画像データとに分割し、何れか１方をコンポジット・ビデオ信号に変換して出力しているが、所定周期毎に画像合成回路１５２において、フレームメモリ６２Ｂに記憶されたフレーム画像データを読み込み、読み込んだフレーム画像データと動きベクトルとに基づいて合成画像データを生成し、フィールド画像変換部６８において生成した合成画像データを偶数フィールド画像データと奇数フィールド画像データとに分割して、何れか１方をコンポジット・ビデオ信号として出力するようにしてもよい。これにより、動画像データを、動画像がよりなめらかに表示されるインターレース方式のビデオ信号に変換することができる
また、第１の実施の形態及び第２の実施の形態では、動画像データをＮＴＳＣ方式のビデオ信号へ変換したが、ＰＡＬ（Phase Alternation by Line）方式のビデオ信号へ変換してもよく、他のフレームレートが異なるビデオ信号に変換してもよい。この場合も、同様の効果を奏することができる。

また、第１の実施の形態及び第２の実施の形態では、２つのフレームメモリ６２Ａ、６２Ｂを用いたが、１つのフレームメモリで２つ以上のフレーム画像データを記憶させるようにしてもよい。この場合も、同様の効果を奏することができる。

その他、第１の実施の形態及び第２の実施の形態で説明したＤＳＣ１０の構成（図１〜図２参照。）は、一例であり、本発明の主旨を逸脱しない範囲内において適宜変更可能であることは言うまでもない。

また、第１の実施の形態及び第２の実施の形態で説明したビデオ信号変換処理プログラムの処理の流れ（図３及び図６参照。）も一例であり、本発明の主旨を逸脱しない範囲内において適宜変更可能であることは言うまでもない。

第１の実施の形態に係るデジタル電子スチールカメラの外観上の構成を示す図である。 第１の実施の形態に係るデジタル電子スチールカメラの電気系の主要構成示す図である。 第１の実施の形態に係るビデオ信号変換処理プログラムの処理の流れを示すフローチャートである。 第１の実施の形態に係る通常のインターレース方式により１／６０秒毎に撮影を行った画像、１／３０秒毎に記憶された記憶されたフレーム画像、１／３０秒毎に記憶されたフレーム画像をインターレース方式に変換した画像、及び１／３０秒毎に記憶されたフレーム画像をビデオ信号変換処理プログラムにより変換した画像、それぞれの表示状態を示す概略図である。 第２の実施の形態に係るデジタル電子スチールカメラの電気系の主要構成示す図である。 第２の実施の形態に係るビデオ信号変換処理プログラムの処理の流れを示すフローチャートである。 第２の実施の形態に係る移動前画像及び移動後画像の各被写体像の輪郭部分を示す図である。 第２の実施の形態に係る図７の破線部分の拡大図である。 （Ａ）第１の実施の形態に係るビデオ信号変換処理により変換されたビデオ信号に基づき表示された画像、（Ｂ）第２の実施の形態に係るビデオ信号変換処理により変換されたビデオ信号に基づき表示された画像を示す図である。

符号の説明

１０ ＤＳＣ
１５ メモリカード
６４ 画像合成回路
６６ 画像出力周期制御部
７０ ビデオ信号変換部
１５０ 輪郭抽出部
１５１ 動きベクトル導出部
１５２ 画像合成回路

Claims (5)

1. 所定周期毎の連続的な撮像によって得られた複数のフレーム画像データにより構成される動画像データにおいて、各々当該複数のフレーム画像データにより示される各画像を偶数番目のライン群と奇数番目のライン群の２つのフィールド画像データに分割してインターレース方式のビデオ信号に変換する画像処理装置であって、
   前記動画像データを予め記憶するための記憶手段と、
   前記記憶手段に記憶された前記動画像データにおける時系列順に連続する２つのフレーム画像データを合成して合成画像データを生成する合成手段と、
   前記合成画像データにより示される画像を前記２つのフィールド画像データに分割する分割手段と、
   時系列順に次に連続するフィールド画像データが時系列順に次のフレーム画像を示すフィールド画像データについては前記分割手段により分割された前記合成画像データの対応するフィールド画像データを前記ビデオ信号に変換し、時系列順に次に連続するフィールド画像データが同一のフレーム画像を示すフィールド画像データについては当該フィールド画像データを前記ビデオ信号に変換する変換手段と、
   を備えたことを特徴とする画像処理装置。
2. 前記合成手段は、前記連続する２つのフレーム画像データによってそれぞれ示される２つの画像の各画素の濃度値を比較し、濃度値が一定以上の変化している領域の画像を合成することを特徴とする請求項１記載の画像処理装置。
3. 前記合成手段は、合成する領域では前記連続する２つのフレーム画像データによってそれぞれ示される２つの画像の各画素の濃度値を画素単位で平均することを特徴とする請求項１又は請求項２記載の画像処理装置。
4. 前記記憶手段に記憶された前記動画像データにおける時系列順に連続する２つのフレーム画像データによって示される２つの画像から被写体像の輪郭部分をそれぞれ抽出する輪郭抽出手段と、
   前記２つの画像の被写体像における前記輪郭抽出手段により抽出された輪郭部分の各画素の濃度値及び周囲の画素との濃度値の変化量を当該２つの画像の間で比較して当該輪郭部分の画素毎の動きベクトルを導出する動きベクトル導出手段と、をさらに備え、
   前記合成手段は、合成する領域として前記動きベクトルから前記輪郭部分の画素毎の移動経路を求め、前記当該移動経路毎に前記２つの画像における当該移動経路上の各画素の濃度値に基づいて当該移動経路の合成画像データを生成することを特徴とする請求項１記載の画像処理装置。
5. 前記合成手段は、合成する領域以外では前記２つの画像の何れか一方を用いて合成画像データを生成することを特徴とする請求項３又は請求項４記載の画像処理装置。

Images