JP2002290831A

JP2002290831A - 画像処理装置、表示装置、プログラムおよび記憶媒体

Info

Publication number: JP2002290831A
Application number: JP2001087827A
Authority: JP
Inventors: Kazumutsu Sato; 一睦佐藤; Noriyuki Nobuyuki; 宣之沖須; Katsuhito Shinkawa; 勝仁新川
Original assignee: Minolta Co Ltd
Current assignee: Minolta Co Ltd
Priority date: 2001-03-26
Filing date: 2001-03-26
Publication date: 2002-10-04
Anticipated expiration: 2021-03-26
Also published as: JP3678160B2

Abstract

(57)【要約】【課題】少数の静止画像から、徐々に合焦位置が変化
する映像効果を有する動画像の画像ファイルを作成する
ことができる画像処理装置を提供する。【解決手段】デジタルカメラ１の合焦位置を変化させ
て２枚の静止画像を撮影し、近景合焦画像及び遠景合焦
画像を取得する。パーソナルコンピュータ６０等で構成
される画像処理装置５０において合焦変化動画作成プロ
グラムを実行させて、取得された近景合焦画像及び遠景
合焦画像のぼけ味調整処理を行い、任意の合焦位置のぼ
け味調整画像を作成する。合焦位置がそれぞれ異なる複
数のぼけ味調整画像作成し、それらを各フレームとして
連結して動画像の画像ファイルを作成する。これによ
り、徐々に合焦位置が変化する映像効果を有する動画像
の画像ファイルを作成することができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、複数の静止画像か
ら映像効果を有する動画像を生成する画像処理技術に関
する。

【０００２】

【従来の技術】従来より、デジタルカメラ等で撮影され
た静止画像から、様々な映像効果を有する動画像の画像
ファイルを作成することが行われている。このような動
画像の画像ファイルは、それぞれが１フレームにあたる
複数の静止画像が連結されて構成される。これらの複数
の静止画像はそれぞれの画像データ（図柄）が相対的に
微少に相違しており、所定の時間間隔毎に連続的に表示
されることによって、様々な映像効果が表現されること
となる。

【０００３】

【発明が解決しようとする課題】ところで、このような
動画像の画像ファイルで表現される映像効果として、遠
景から近景に至って、あるいは、近景から遠景に至って
徐々に合焦位置が変化するようなものが求められてい
る。このような映像効果を有する動画像の画像ファイル
を生成するには、同一の被写体に対して撮影され、か
つ、合焦位置が相対的に微小変化した複数の静止画像
を、動画像の画像ファイルを構成するフレーム数だけ用
意する必要がある。つまり、表示される全ての合焦位置
の静止画像がそれぞれ必要である。

【０００４】しかしながら、従来、上記の複数の静止画
像を取得するためには、撮影を行うデジタルカメラ等に
おいて必要なフレーム数と同回数撮影レンズの焦点位置
を変化させて撮影を行わなければならなかった。

【０００５】本発明は、上記課題に鑑みてなされたもの
であり、少数の静止画像から、徐々に合焦位置が変化す
る映像効果を有する動画像の画像ファイルを作成するこ
とができる画像処理装置を提供することを目的とする。

【０００６】

【課題を解決するための手段】上記課題を解決するた
め、請求項１の発明は、画像処理装置において、同一被
写体に対して第１の合焦位置で撮影された第１静止画像
と、第２の合焦位置で撮影された第２静止画像とから、
前記第１の合焦位置および前記第２の合焦位置とは別の
第３の合焦位置で撮影された静止画像に相当する第３静
止画像を生成する第１の画像生成手段と、前記第３静止
画像を含む静止画像群を時系列的に順番に表示可能な画
像ファイルを生成する第２の画像生成手段と、を備えて
いる。

【０００７】また、請求項２の発明は、請求項１の発明
に係る画像処理装置において、静止画像を撮影する撮像
手段、をさらに備え、前記撮像手段は、操作ボタンの操
作に応答して前記第１静止画像と前記第２静止画像を時
間的に連続して撮影することを特徴とする。

【０００８】また、請求項３の発明は、請求項１または
２の発明に係る画像処理装置において、前記第１の画像
生成手段は、前記第３静止画像のぼけ具合のパラメータ
を可変に設定するぼけパラメータ設定手段、を備えてい
る。

【０００９】また、請求項４の発明は、請求項１ないし
３のいずれかの発明に係る画像処理装置において、前記
第２の画像生成手段は、前記画像ファイルを構成する前
記静止画像群の画像数を可変に設定する画像数設定手
段、を備えている。

【００１０】また、請求項５の発明は、請求項１ないし
４のいずれかの発明に係る画像処理装置において、前記
第２の画像生成手段は、前記画像ファイルに含まれる前
記静止画像群の表示速度を可変に設定する表示速度設定
手段、を備えている。

【００１１】また、請求項６の発明は、表示装置におい
て、同一被写体に対して第１の合焦位置で撮影された第
１静止画像と、第２の合焦位置で撮影された第２静止画
像とから、前記第１の合焦位置および前記第２の合焦位
置とは別の第３の合焦位置で撮影された静止画像に相当
する第３静止画像を生成する画像生成手段と、前記第３
静止画像を含む静止画像群を時系列的に順番に出力して
表示させる出力手段と、を備えている。

【００１２】また、請求項７の発明は、請求項６の発明
に係る表示装置において、静止画像を撮影する撮像手
段、をさらに備え、前記撮像手段は、操作ボタンの操作
に応答して前記第１静止画像と前記第２静止画像を時間
的に連続して撮影することを特徴とする。

【００１３】また、請求項８の発明は、プログラムにお
いて、画像処理装置に含まれるコンピュータによって実
行されることにより、前記画像処理装置を請求項１ない
し５のいずれかに記載の画像処理装置として機能させる
ことを特徴とする。

【００１４】また、請求項９の発明は、記録媒体におい
て、請求項８に記載のプログラムを記録してあることを
特徴とする。

【００１５】

【発明の実施の形態】以下、図面を参照しつつ本発明の
実施の形態について詳細に説明する。

【００１６】＜１．静止画像撮影＞まず、動画像の生成
に使用する静止画像を撮影する撮像手段を備えた画像処
理装置であるデジタルカメラについて説明を行う。

【００１７】図１〜図３は、デジタルカメラ１の要部構
成を示す図であり、図１は平面図、図２は図１のII−II
位置から見た断面図、図３は背面図に相当する。これら
の図は必ずしも三角図法に則っているものではなく、デ
ジタルカメラ１の要部構成を概念的に例示することを主
眼としている。

【００１８】これらの図に示すように、デジタルカメラ
１は、略直方体状のカメラ本体部２と、撮像部３とに大
別される構造である。カメラ本体部２には、撮影画像を
記録するメモリカード８が脱着可能に収納される。ま
た、デジタルカメラ１は、４本の単三形乾電池Ｅ１〜Ｅ
４を直列接続してなる電源電池Ｅを駆動源としている。

【００１９】撮像部３は、撮影レンズであるマクロ機能
付きレンズ群３０の後方位置の適所にＣＣＤカラーエリ
アセンサ３０３を有する撮像回路３０２が設けられてい
る。また、このレンズ群３０は、ズームレンズ３００と
合焦レンズ３０１とを備えている。

【００２０】一方、カメラ本体部２の内部には、ズーム
レンズ３００のズーム比の変更と収容位置、撮影位置間
のレンズ移動を行うためのズームモータＭ１、および合
焦レンズ３０１を駆動して焦点位置の変更を行うための
フォーカスモータＭ２とが設けられている。

【００２１】カメラ本体部２の前面には、グリップ部Ｇ
が設けられ、カメラ本体部２上端部の適所にポップアッ
プ形式の内蔵フラッシュ５が設けられている。なお、フ
ラッシュ５は手動でポップアップしたり、収納したりで
きるものとなっている。また、カメラ本体部２の上面に
はシャッタボタン９が設けられている。

【００２２】一方、図３に示すように、カメラ本体部２
の背面には、撮影画像のライブビュー表示及び記録画像
を電子的に表示可能な液晶ディスプレイ（ＬＣＤ）１０
と、電子ビューファインダ（ＥＶＦ）２０とが設けられ
ている。ＥＶＦ２０は、接眼レンズを介して電子的に撮
影画像の表示が可能となっているとともに、ＬＣＤ１０
は、ＥＶＦ２０より大きな表示画面に電子的に撮影画像
の表示が可能となっている。

【００２３】カメラ本体部２の背面には、「記録モー
ド」と「再生モード」とを切換設定する記録／再生モー
ド設定ボタン１４が設けられている。記録モードは、写
真撮影を行ないメモリカード８に撮影画像を記録するモ
ードであり、再生モードは、メモリカード８に記録され
た撮影画像をＬＣＤ１０に再生表示するモードである。

【００２４】デジタルカメラ１の背面右方には、４連ボ
タン３５が設けられており、ボタンＬ、Ｒを押すことに
より、ズームモータＭ１が駆動しズーミングを行い、そ
の他、ボタンＵ、Ｄ、Ｌ、Ｒで各種操作を行う。

【００２５】また、カメラ本体部２の背面には、取消ボ
タン３３、確定ボタン３２、メニューボタン３４及びＬ
ＣＤボタン３１が設けられている。メニューボタン３４
は、ＬＣＤ１０にメニュー画面を表示するためのもので
ある。このメニュー画面においては、４連ボタン３５な
どでユーザの操作入力によりデジタルカメラ１の機能に
関するメニューの設定が行える。取消ボタン３３は、こ
のメニュー画面で選択された内容を取り消すためのボタ
ンであり、確定ボタン３２は、メニュー画面で選択され
た内容を確定するためのボタンである。また、ＬＣＤボ
タン３１は、ＬＣＤ１０表示のオフオフ切り替えのため
のボタンである。

【００２６】ユーザは、メニュー画面において記録モー
ドにおける撮影モードを選択することが可能である。デ
ジタルカメラ１の撮影モードには、通常の一枚毎の撮影
を行う通常撮影モードと、ぼけ味調整モードとが含まれ
る。ぼけ味調整モードとは、１回のシャッタ操作で撮影
レンズの焦点位置を変化させて連続して２回の撮影動作
を行うことにより、近景に焦点を合わせた撮影画像と遠
景に焦点を合わせた撮影画像とを取得するモードであ
る。ぼけ味調整モードにおいて撮影された撮影画像は、
後述する画像処理装置において、任意の合焦位置の静止
画像を得るために使用される。

【００２７】次に、デジタルカメラ１の内部構成につい
て説明する。図５は、デジタルカメラ１の内部構成を示
す概略ブロック図である。同図において、ＣＣＤ３０３
は、レンズ群３０により結像された被写体の光像を、Ｒ
（赤），Ｇ（緑），Ｂ（青）の色成分の画像信号（各画
素で受光された画素信号の信号列からなる信号）に光電
変換して出力する。タイミングジェネレータ３１４は、
ＣＣＤ３０３の駆動を制御するための各種のタイミング
パルスを生成するものである。

【００２８】撮像部３における露出制御は、絞り制御ド
ライバ３０６によるレンズ群３０の絞りと、ＣＣＤ３０
３の露光量、すなわち、シャッタスピードに相当するＣ
ＣＤ３０３の電荷蓄積時間を調節して行なわれる。被写
体輝度が低輝度時に適切なシャッタスピードが設定でき
ない場合は、ＣＣＤ３０３から出力される画像信号のレ
ベル調整を行なうことにより露光不足による不適正露出
が補正される。すなわち、低輝度時は、シャッタスピー
ドとゲイン調整とを組み合わせて露出制御が行なわれ
る。画像信号のレベル調整は、信号処理回路３１３内の
ＡＧＣ回路のゲイン調整において行なわれる。

【００２９】タイミングジェネレータ３１４は、タイミ
ング制御回路２０２から送信される基準クロック基づき
ＣＣＤ３０３の駆動制御信号を生成するものである。タ
イミングジェネレータ３１４は、例えば積分開始／終了
（露出開始／終了）のタイミング信号、各画素の受光信
号の読出制御信号（水平同期信号，垂直同期信号，転送
信号等）等のクロック信号を生成し、ＣＣＤ３０３に出
力する。

【００３０】信号処理回路３１３は、ＣＣＤ３０３から
出力される画像信号（アナログ信号）に所定のアナログ
信号処理を施すものである。信号処理回路３１３は、Ｃ
ＤＳ（相関二重サンプリング）回路とＡＧＣ（オートゲ
インコントロール）回路とを有し、ＣＤＳ回路により画
像信号のノイズの低減を行ない、ＡＧＣ回路のゲインを
調整することにより画像信号のレベル調整を行なう。

【００３１】調光回路３０４は、フラッシュ撮影におけ
る内蔵フラッシュ５の発光量を全体制御部２５０により
設定された所定の発光量に制御するものである。フラッ
シュ撮影においては、露出開始と同時に被写体からのフ
ラッシュ光の反射光が調光センサにより受光され、この
受光量が所定の発光量に達すると、調光回路３０４から
発光停止信号が出力され、この発光停止信号に応答して
内蔵フラッシュ５の発光を強制的に停止し、これにより
内蔵フラッシュ５の発光量が所定の発光量に制御され
る。

【００３２】Ａ／Ｄ変換回路２０５は、画像信号の各画
素信号を１０ビットのデジタル信号に変換するものであ
る。Ａ／Ｄ変換回路２０５は、タイミング発生回路から
入力されるＡ／Ｄ変換用のクロックに基づいて各画素信
号（アナログ信号）を１０ビットのデジタル信号に変換
する。

【００３３】タイミングジェネレータ３１４には、Ａ／
Ｄ変換回路２０５に対するクロックを生成するタイミン
グ制御回路２０２が設けられている。タイミング制御回
路２０２は、全体制御部２５０内の基準クロックにより
制御される。

【００３４】黒レベル補正回路２０６は、Ａ／Ｄ変換さ
れた画素信号の黒レベルを基準の黒レベルに補正するも
のである。また、ＷＢ（ホワイトバランス）回路２０７
は、Ｒ，Ｇ，Ｂの各色成分の画素データのレベル変換を
行なうものである。ＷＢ回路２０７は、全体制御部２５
０から入力されるレベル変換テーブルを用いてＲ，Ｇ，
Ｂの各色成分の画素データのレベルを変換する。なお、
レベル変換テーブルの各色成分のパラメータ（特性の傾
き）は全体制御部２５０により、オートまたはマニュア
ルで、撮影画像毎に設定される。γ補正回路２０８は、
画素データの階調を補正するものである。

【００３５】画像メモリ２０９は、信号処理の終了した
画像データを一時記憶するメモリである。画像メモリ２
０９は、少なくとも２フレーム分の画像データを記憶し
得る容量を有している。これは、ぼけ味調整モードでは
１回のシャッタ操作で２フレーム分の画像データが取り
込まれるため、これらをそれぞれ記憶するためである。
なお、１フレーム分の記憶容量は、ＣＣＤ３０３の画素
数に対応する１６００×１２００画素分の画素データを
記憶し得る容量である。

【００３６】また、ぼけ味調整モードにおいては、全体
制御部２５０の制御により、Ａ／Ｄ変換された画像デー
タは上記黒レベル補正回路２０６、ＷＢ回路２０７及び
γ補正回路２０８による所定の処理は行われずに画像メ
モリ２０９に記憶される。つまり、画像メモリ２０９に
は、Ａ／Ｄ変換されただけのＣＣＤ−ＲＡＷ形式の画像
データが２フレーム分記憶されることとなる。これは、
その後の画像処理（ぼけ味調整処理）に利用するため、
画質の低下要因となり得る処理をできるだけ行わないよ
うにするためである。

【００３７】ＬＣＤＶＲＡＭ２１０は、ＬＣＤ１０に表
示される画像データのバッファメモリである。ＬＣＤＶ
ＲＡＭ２１０は、ＬＣＤ１０の画素数４００×３００に
対応した画像データの記憶容量を有している。ＥＶＦＶ
ＲＡＭ２２０は、ＥＶＦ２０に表示される画像データの
バッファメモリである。ＥＶＦＶＲＡＭ２２０は、ＥＶ
Ｆ２０の画素数６４０×４８０に対応した画像データの
記憶容量を有している。

【００３８】また、撮影待機状態においては、撮像部３
により１／３０（秒）毎に撮像された画像の各画素デー
タがＡ／Ｄ変換回路２０５〜γ補正回路２０８により所
定の信号処理を施された後、画像メモリ２０９に一時記
憶されるとともに、全体制御部２５０を介してＬＣＤＶ
ＲＡＭ２１０、ＥＶＦＶＲＡＭ２２０に転送され、ＬＣ
Ｄ１０やＥＶＦ２０に表示される（ライブビュー表
示）。

【００３９】これによって、ユーザは被写体像を視認す
ることができる。また、再生モードにおいては、メモリ
カード８から読み出された画像が全体制御部２５０で所
定の信号処理が施された後、ＬＣＤＶＲＡＭ２１０に転
送され、ＬＣＤ１０に再生表示される。ＥＶＦ２０でも
同様の表示が行われる。

【００４０】カードＩ／Ｆ２１２は、メモリカード８へ
の画像データの書込み及び画像データの読出しを行なう
ためのインターフィースである。また、通信用Ｉ／Ｆ２
２４は、パーソナルコンピュータ２２５を通信可能に外
部接続するための、例えばＵＳＢ規格に準拠したインタ
ーフェースである。このカードＩ／Ｆ２１２、通信用Ｉ
／Ｆ２２４を介して、メモリカード８やＣＤ−ＲＯＭ等
の記録媒体２２６に記録している制御プログラムを、全
体制御部２５０のＲＯＭ２５１内に取り込むことができ
る。

【００４１】ＲＴＣ２１９は、撮影日時を管理するする
ための時計回路である。図示しない別の電源で駆動され
る。

【００４２】操作部２１１は、上述したシャッタボタン
９、ＬＣＤボタン３１、確定ボタン３２などの各種ボタ
ン、ボタンなどで構成されている。

【００４３】シャッタボタン９は、銀塩カメラで採用さ
れているような半押し状態（Ｓ１）と押し込んだ状態
（Ｓ２）とが検出可能な２段階ボタンになっている。待
機状態でシャッタボタン９をＳ１状態にすると、ＡＦの
ためのレンズ駆動を開始し、全体制御部２５０によって
画像メモリ２０９内における画像のコントラストを評価
しながら、コントラストがもっとも高くなるようにモー
タＭ１、Ｍ２により、レンズを駆動し停止させる。Ｓ１
状態時の画像メモリ内の画像データのレベルを判定する
ことで、シャッタースピード（ＳＳ）と絞り値を決定す
る。さらにホワイトバランスの補正値を決定する。

【００４４】ズーム制御回路３０７はズームモータＭ１
の駆動を制御するものである。全体制御部２５０から入
力されるズーム制御信号に基づいてズームモータＭ１を
駆動し、ズームレンズ３００をユーザによって指定され
た方向に移動させる。フォーカス制御回路３０８はフォ
ーカスモータＭ２の駆動を制御するものである。全体制
御部２５０から入力されるＡＦ制御信号に基づいてフォ
ーカスモータＭ２の駆動量を制御し、合焦レンズ３０１
を焦点位置に設定する。

【００４５】全体制御部２５０は、マイクロコンピュー
タからなり、撮影機能及び再生機能を集中制御するもの
である。全体制御部２５０は、デジタルカメラ１の上述
した各部材の駆動を制御したり取得された画像データを
処理する制御プログラムが記憶されたＲＯＭ２５１と、
制御プログラムに従って数々の演算作業を行うための作
業領域となるＲＡＭ２５２を備えている。

【００４６】図４において、露出設定部２５３、表示制
御部２５４、記録制御部２５５、再生制御部２５６及び
特殊撮影制御部２５７は、ＲＯＭ２５１に記憶された制
御プログラムに従って全体制御部２５０のＣＰＵ等によ
って演算処理されることにより実現される機能を機能ブ
ロックとして表したものである。

【００４７】露出設定部２５３は、露出制御処理を行う
もので、ライブビュー画像のＧの色成分の画像データを
用いて被写体の輝度を判定し、その判定結果に基づいて
露出制御値（シャッタスピード（ＳＳ）と絞り値）を設
定する。

【００４８】表示制御部２５４は、画像表示処理を行う
もので、画像メモリ２０９に一時記憶されている画像デ
ータを読み出し、必要に応じて画像サイズを表示先の画
像サイズに調整した後、ＶＲＡＭ２１０，２２０に転送
する動作を行う。

【００４９】記録制御部２５５は、記録処理を行うもの
である。通常撮影モードにおいて、記録制御部２５５
は、撮影指示後に画像メモリ２０９に一時記憶された画
像データをＲＡＭ２５２に読み出し、２次元ＤＴＣ変
換、ハフマン符号化等のＪＰＥＧ方式による所定の圧縮
処理を行って記録用の撮影画像データとして作成する。
また、画像メモリ２０９から縦横両方向でそれぞれ８画
素毎に画素データをＲＡＭ２５２に読み出すことで、サ
ムネイル画像を作成する。さらに、これらの記録用デー
タに付随して記録される撮影画像データに関するタグ情
報を作成する。そして、記録制御部２５５は、圧縮され
た高解像度の撮影画像データ及びサムネイル画像にタグ
情報を添付した静止画像ファイルを作成し、メモリカー
ド８に記録する。

【００５０】一方、ぼけ味調整モードにおいては、記録
制御部２５５は、画像メモリ２０９に一時記憶された画
像データ（Ａ／Ｄ変換されただけのＣＣＤ−ＲＡＷ形式
データ）に対して、圧縮処理は行わず、そのまま記録用
の撮影画像データとする。これは、上記ＪＰＥＧ方式に
よる圧縮処理は、非可逆圧縮のため元画像の情報を損な
うこととなり、処理後の画質が低下するためである。サ
ムネイル画像及びタグ情報は通常撮影モードと同様に作
成され、さらに、非圧縮のＣＣＤ−ＲＡＷ形式の撮影画
像データ及びサムネイル画像にタグ情報を添付した静止
画像ファイルが作成され、メモリカード８に記録され
る。ぼけ味調整モードにおいては、２枚の撮影画像デー
タが生じるのでそれぞれの撮影画像データに対して静止
画像ファイルが作成されてメモリカード８に記録され
る。

【００５１】図５は、メモリカード８に記憶された静止
画像ファイルの構成例を示すものである。図５におい
て、「Ｐ０００００１．ＪＰＧ」「Ｐ０００００２．Ｊ
ＰＧ」等は、静止画像ファイル名を示している。同図の
例においては静止画像ファイル名を「ＰＬ．Ｍ」で表記
しており、「ＰＬ．Ｍ」の「Ｌ」は静止画像ファイルが
作成された順番を示す６桁の番号であり、「Ｍ」は撮影
画像データのデータ形式を示す拡張子である。「Ｍ」に
おいて「ＪＰＧ」はＪＰＥＧ形式で圧縮されて記録され
た撮影画像データであり、「ＲＡＷ」はＣＣＤ−ＲＡＷ
形式で記録された撮影画像データである。通常撮影モー
ドで撮影された撮影画像データは拡張子「ＪＰＧ」とな
っており、ぼけ味調整モードにおいて撮影された撮影画
像データは拡張子「ＲＡＷ」となっている。

【００５２】また、「１ｂ」，「２ｂ」は、ぼけ味調整
モードで撮影された静止画像ファイルのフォルダ名を示
している。ぼけ味調整モードでは、１回のシャッタ操作
で２つの静止画像ファイルが作成されるため、両静止画
像ファイルを１つのフォルダにまとめてメモリカード８
に記録するようになっている。図５の例においては、フ
ォルダ名は「Ｎｂ」で表記しており、「Ｎ」はぼけ味調
整モードにおける撮影順を示す番号を示している。従っ
て、「１ｂ」は、ぼけ味調整モードで最初に撮影された
静止画像ファイルの組み合わせが格納されたフォルダで
あることを示している。

【００５３】図６は、メモリカード８への静止画像ファ
イルの記録方法を示す図である。メモリカード８の先頭
の記憶領域には、フォルダ情報と各フォルダに属する静
止画像ファイルの情報とを記憶するインデックス領域が
設けられ、その後の領域に各静止画像ファイルが撮影さ
れた順に記憶されている。メモリカード８における各静
止画像ファイルの記憶領域は３つの領域からなり、上か
ら順にタグ情報、撮影画像データ及びサムネイル画像が
記憶される。図に示すように、タグ情報には、カメラ名
称、レンズ名称、撮影時の焦点距離、撮影時のＦ値、撮
影モード、焦点位置、ファイル名、被写体輝度、ホワイ
トバランス調整値等の情報が含まれる。ここで撮影モー
ドは、通常撮影モードで撮影されたものであるか、ぼけ
味調整モードで撮影されたものであるかの情報を示すこ
ととなる。

【００５４】再生制御部２５６は、メモリカード８に記
録された撮影画像のＬＣＤ１０への再生処理を行うもの
である。再生制御部２５６は、記録／再生モード設定ボ
タン１４により再生モードが設定されると、メモリカー
ド８に記録された各静止画像ファイルからサムネイル画
像を読み出し、順次所定のインデックスフォーマットに
従ってＬＣＤＶＲＡＭ２１０に記憶する。これにより、
サムネイル画像がＬＣＤ１０にインデックス表示され
る。

【００５５】インデックス表示されたサムネイル画像に
対して再生すべきコマのサムネイル画像が４連ボタン３
５等の操作によって指定されると、再生制御部２５６
は、そのコマに対応する静止画像ファイルから撮影画像
データを読み出す。読み出したコマが、通常撮影モード
で撮影されたものである場合は、圧縮された撮影画像デ
ータに所定の伸長処理を行い、画像メモリ２０９に記憶
する。一方、ぼけ味調整モードで撮影されたものである
場合は、圧縮されていないので撮影画像データをそのま
ま画像メモリ２０９に記憶する。画像メモリ２０９に記
憶された撮影画像データは、表示制御部２５４によって
画像サイズが調整された後に、ＬＣＤＶＲＡＭ２１０に
転送され、ＬＣＤ１０に表示されることとなる。

【００５６】特殊撮影制御部２５７は、撮影モードがぼ
け味調整モードに設定されている場合の、デジタルカメ
ラ１の各部材の駆動を制御するものである。特殊撮影制
御部２５７は、シャッタボタン９がＳ２状態となると、
ぼけ味調整用の２枚の画像データを取り込むため、それ
ぞれフォーカスモータを駆動して焦点位置を変化させ
て、所定間隔でＣＣＤ３０３の露光動作を２回繰り返す
ように制御を行う。さらに、黒レベル補正回路２０６、
ＷＢ回路２０７及びγ補正回路２０８に対して所定の処
理を行わないように制御を行う。

【００５７】次に、上記のように構成されたデジタルカ
メラ１のぼけ味調整モードにおける撮影動作について説
明する。図７は、ぼけ味調整モードでの静止画像の撮影
手順を示すフローチャートである。

【００５８】ステップＳ１１において、シャッタボタン
９が半押し（Ｓ１状態）されるとデジタルカメラ１は静
止画像の撮影のための準備を行う。まず、絞りの絞り値
を開放絞り値（例えばＦ＝２．８）に設定する（ステッ
プＳ１２）。ここで、絞り値を開放絞り値に設定するの
は、被写界深度を浅くして合焦する対象距離以外の被写
体をぼかすためである。

【００５９】続いて、撮影レンズの焦点が無限大になる
ように制御される。さらに、シャッタスピードに相当す
るＣＣＤ３０３の露光時間が設定され、ホワイトバラン
ス調整値が設定される（ステップＳ１３）。

【００６０】この状態でステップＳ１４において、シャ
ッタボタン９が全押し（Ｓ２状態）されると、ＣＣＤ３
０３によって設定された露光時間だけ露光して被写体の
静止画像が取り込まれる。露光の後、ＣＣＤ３０３から
出力される画像信号は、信号処理回路３１３で所定のア
ナログ信号処理が施され、Ａ／Ｄ変換回路２０５におい
て１０ビットの画素データに変換され、そのままＣＣＤ
−ＲＡＷ形式で画像メモリ２０９に記憶される（ステッ
プＳ１５）。この静止画像は、撮影レンズの焦点が無限
大で撮影されたものであるため、背景等の遠景にピント
が合っており近景はピンボケ状態となっている。

【００６１】続いて、全体制御部２５０の記録制御部２
５５によって、タグ情報及びサムネイル画像が作成さ
れ、これらと画像メモリ２０９に記憶されたＣＣＤ−Ｒ
ＡＷ形式の画像データから静止画像ファイルが作成され
る。そして、ぼけ味調整モードの撮影画像を格納するフ
ォルダをメモリカード８に作成し、当該フォルダに生成
された静止画像ファイルが記録される（ステップＳ１
６）。この静止画像ファイルのタグ情報の撮影モードに
は、「ぼけ味調整モード１／２」のように、ぼけ味調整
モードにおいて１回目に撮影されたものである情報が付
与される。また、タグ情報の焦点位置には「無限大」と
いう情報が付与される。

【００６２】次に、撮影レンズの焦点が、近景の所定距
離例えば１ｍ先の被写体が合焦するように制御される
（ステップＳ１７）。なお、ＣＣＤ３０３の露光時間及
びホワイトバランス調整値は、１枚目の撮影時から変更
されず、そのままの設定が用いられる。

【００６３】そして、ＣＣＤ３０３によって設定された
露光時間だけ露光して被写体の静止画像が取り込まれ
る。露光の後、１枚目の撮影時と同様に、信号処理回路
３１３及びＡ／Ｄ変換回路２０５で所定の処理が行わ
れ、画像メモリ２０９に記憶される（ステップＳ１
８）。この静止画像は、撮影レンズの焦点が１ｍ先に制
御されているので、人物等の近景にピントがほぼ合って
おり、遠景はピンボケ状態である。

【００６４】続いて、全体制御部２５０の記録制御部２
５５によって、タグ情報及びサムネイル画像が作成さ
れ、これらと画像メモリ２０９に記憶されたＣＣＤ−Ｒ
ＡＷ形式の画像データから静止画像ファイルが作成され
る。そして、１枚目の静止画像ファイルが格納されたフ
ォルダと同一のフォルダに、生成された静止画像ファイ
ルが記録される（ステップＳ１９）。この静止画像ファ
イルのタグ情報の撮影モードには、「ぼけ味調整モード
２／２」のように、ぼけ味調整モードにおいて２回目に
撮影されたものである情報が付与される。また、タグ情
報の焦点位置には「１ｍ」という情報が付与される。

【００６５】なお、本実施の形態においては、１回目に
遠景側に焦点を合わせた静止画像（遠景合焦画像）を撮
影し、２回目に近景側に焦点を合わせた静止画像（近景
合焦画像）を撮影しているが、撮影の順番はこの逆であ
ってもよい。

【００６６】＜２．ぼけ味調整処理＞ここで、上記のよ
うに撮影レンズの焦点位置を変更して撮影された２枚の
静止画像を用いて任意の合焦位置の静止画像（以下、
「ぼけ味調整画像」）を取得するぼけ味調整処理につい
て簡単に説明する。なお、ここでは映像情報メディア学
会誌Vol.51,No.12,pp.2072〜2081「反復法に基づく複数
画像からの任意焦点画像の生成」に示されている手法を
適用するものとする。

【００６７】図８は、ぼけ味調整処理に用いる２枚の静
止画像を示したモデル図である。この説明においては、
図８に示す２枚の画像Ｉｒ，Ｉｆを用いてぼけ味調整画
像Ｉの作成を行うものとする。図８（ａ）は近景に合焦
した近景合焦画像Ｉｒを示しており、図８（ｂ）は遠景
に合焦した遠景合焦画像Ｉｆを示している。また、円形
状のものは近景の被写体、六角形状のものは遠景の被写
体を表し、それぞれ実線は合焦状態、波線はぼけ状態を
表している。

【００６８】ぼけ味調整処理は、基本的に、（１）２枚の静止画像Ｉｒ，Ｉｆ間での位置合わせ処理（２）所定の演算処理である画像合成処理によるぼけ味
調整画像の作成という２つの工程で行われる。以下、それぞれについて
説明する。

【００６９】位置合わせ処理は、使用する２枚の静止画
像の同一の図柄を正確に合成するために、両静止画像の
位置を合わせるものである。これは、２枚の静止画像間
には、撮影タイミングの違いよって微少な位置的相違が
発生するためである。この位置合わせ処理は、画像全体
の位置合わせ処理と、局所的な位置合わせ処理の２段階
で行われる。

【００７０】画像全体の位置合わせ処理では、例えば近
景合焦画像Ｉｒを基準として、遠景合焦画像Ｉｆにおけ
る拡大率、平行移動量、回転角等のパラメータを変更さ
せながら、両画像Ｉｒ，Ｉｆを比較して、両画像Ｉｒ，
Ｉｆが最も一致するパラメータの組み合わせを算出す
る。より具体的には、両画像の対応する各画素レベル差
の２乗平均値ΔＵを算出し、これらの総和ΣΔＵを指標
として、この総和ΣΔＵが最小となるように最適な拡大
率、平行移動量及び回転角等のパラメータの組み合わせ
を算出する。なお、近景合焦画像Ｉｒと遠景合焦画像Ｉ
ｆでは撮影時の焦点位置が異なることから、両画像Ｉ
ｒ，Ｉｆを直接比較すると誤差が生じる可能性がある。
このため、最適なパラメータの組み合わせを求めるの
に、階層化マッチング法を用いて算出する。算出された
パラメータで遠景合焦画像Ｉｆを変換すると、近景合焦
画像Ｉｒに対して画像全体の位置合わせの行われた遠景
合焦画像Ｉｆが得られる。

【００７１】局所的な位置合わせ処理では、近景合焦画
像Ｉｒと画像全体の位置合わせ処理を行った遠景合焦画
像Ｉｆとの間で画素毎に位置ずれの補正を行う。この補
正は近景合焦画像Ｉｒの画素位置（ｘ，ｙ）と、画像全
体の位置合わせ処理を行った遠景合焦画像Ｉｆの画素位
置（ｘ＋ｍ，ｙ＋ｎ）を中心に、ｒ×ｒ画素内の両画像
の対応する画素レベル差の２乗平均値を算出し、さらに
ｒ×ｒ個の総和が最小となるパラメータ（ｍ，ｎ）を算
出することによって行う。全ての画素に対してパラメー
タ（ｍ，ｎ）を算出し、このパラメータ（ｍ，ｎ）を用
いて遠景合焦画像Ｉｆを補正すると、最終的に近景合焦
画像Ｉｒに対して位置合わせの行われた遠景合焦画像Ｉ
ｆが得られる。

【００７２】画像合成処理としては種々の方法が知られ
ているが、本実施の形態では反復法を採用するため以下
の説明では反復法について説明する。

【００７３】図８に示すように、近景合焦画像Ｉｒの合
焦している近景領域を表す関数をｆ１(x,y)、遠景合焦
画像Ｉｆの合焦している遠景領域を表す関数をｆ２(x,
y)とし、遠景合焦画像Ｉｆの合焦していない近景領域の
ぼけ具合を表す関数をｈ１(x,y)、近景合焦画像Ｉｒの
合焦していない遠景領域のぼけ具合を表す関数をｈ２
(x,y)とすると、近景合焦画像Ｉｒを表す関数ｇ1(x,y)
は g1(x,y)=f1(x,y)+h2(x,y)*ｆ2(x,y) …(1) で表され、遠景合焦画像Ｉｆを表す関数ｇ２(x,y)は g2(x,y)=h1(x,y)*f1(x,y)+ｆ2(x,y) …(2) で表される。なお、これらの式において＊はコンボリュ
ーションであり、以下の式においても同様である。

【００７４】一方、ぼけ味調整画像Ｉは近景合焦画像Ｉ
ｒの近景領域をぼけ関数ｈａ(x,y)でぼかした画像と、
遠景合焦画像Ｉｆの遠景領域をぼけ関数ｈｂ(x,y)でぼ
かした画像とを合成して作成されるとすると、ぼけ味調
整画像Ｉを表す関数ｆ(x,y)は、 f(x,y)＝ha(x,y)*f1(x,y)+hb(x,y)*f2(x,y) …(3) で表される。

【００７５】ここで、元画像Ｉｒ，Ｉｆのぼけ関数ｈ
１，ｈ２及びぼけ味調整画像Ｉのぼけ関数ｈａ，ｈｂ
は、 h(x,y)＝(1/πR²)・exp(-(x²＋y²)/R²) …(4) R；ぼけ量（ぼけ半径）の二次元ガウス関数において、ぼけ関数ｈ１，ｈ２に対
するぼけ量Ｒ１，Ｒ２をＲに代入して得られる撮影画像
の場合、ぼけ量Ｒ１，Ｒ２は撮影時の撮影レンズの焦点
位置によって規定される値となる。このため本実施の形
態では、撮影時の情報を示す静止画像ファイルのタグ情
報から、撮影レンズの種類と撮影レンズの焦点位置の情
報を得て、予め設定されたテーブルを参照することによ
り、ぼけ関数ｈ１，ｈ２を取得するようにしている。ま
た、ぼけ関数ｈａ，ｈｂに対するぼけ量をそれぞれＲ
ａ，Ｒｂとすると、ぼけ量Ｒａ，Ｒｂの設定値は、処理
後に生成されるぼけ味調整画像Ｉのぼけ具合、すなわ
ち、合焦位置を決定するものとなる。

【００７６】(1)〜(3)式からｆ１(x,y)、ｆ２(x,y)を消
去すると、近景合焦画像Ｉｒの関数ｇ１(x,y)、遠景合
焦画像Ｉｆの関数ｇ２(x,y)、ぼけ味調整画像Ｉの関数
ｆ(x,y)の関係式 (ha-hb*h1)*g1+(hb-ha*h2)*g2=(δ-h1*h2)*f …(5) が得られる。なお、(5)式でδはディラックのデルタ関
数である。また、(5)式では便宜上、関数表記の変数(x,
y)部分を省略している。

【００７７】よって、(5)式を解くことによりぼけ味調
整画像Ｉを示す関数ｆを得ることができる。反復法にお
いては、(5)式において、左辺を g=(ha-hb*h1)*g1+(hb-ha*h2)*g2 …(6) とおき、ｆについてｋ回反復したものをｆ^(k)とし、 f^(k+1)=g+(h1*h2)*f^(k) …(7) に示すように反復演算すると、ｋ→∞でｆ⁽ ^∞ ⁾は式(5)
を満足するｆに収束することから、この反復演算を繰り
返すことにより、任意の合焦位置のぼけ味調整画像Ｉが
算出されることとなる。なおここで、初期値ｆ⁽⁰⁾は、
ｇ１，ｇ２，（ｇ１＋ｇ２）／２等でよい。

【００７８】図９から図１５は、ぼけ味調整処理におい
て、上記ぼけ量Ｒａ，Ｒｂを変更することにより取得さ
れたぼけ味調整画像Ｉの例を示す図である。図９は合焦
位置が無限大、図１０は合焦位置が２０ｍ、図１１は合
焦位置が１０ｍ、図１２は合焦位置が５ｍ、図１３は合
焦位置が２ｍ、図１４は合焦位置が１ｍ、図１５は合焦
位置が０．５ｍにそれぞれ相当するぼけ味調整画像Ｉを
示している。なお、これらの図のぼけ味調整画像Ｉにお
いて、遠景の被写体である家屋Ａ１は撮影距離が２０ｍ
であり、中景の被写体である自動車Ａ２は撮影距離が５
ｍであり、近景の被写体である人物Ａ３は撮影距離が１
ｍである。

【００７９】例えば、図１０（合焦位置２０ｍ）におい
ては、撮影距離が２０ｍの被写体である家屋Ａ１に対し
て合焦状態となっているが、他の被写体に対してはピン
ボケ状態である。また、図１２（合焦位置５ｍ）におい
ては、撮影距離が５ｍの被写体である自動車Ａ２に対し
て合焦状態になっているが、他の被写体に対してはピン
ボケ状態である。また、図１４（合焦位置１ｍ）におい
ては、撮影距離が１ｍの被写体である人物Ａ３に対して
合焦状態となっているが、他の被写体に対してはピンボ
ケ状態である。

【００８０】また、図９から図１５のぼけ味調整画像Ｉ
をこの順に比較すると、徐々に、遠景の被写体、中景の
被写体、近景の被写体と合焦していくこととなる。つま
り、遠景から近景に至って徐々に合焦位置が変化する動
画像の画像ファイル（以下、「合焦変化動画」）は、図
９から図１５の例に示したようなぼけ味調整画像Ｉを連
結することにより作成することが可能となる。なおここ
では、説明のため７枚のぼけ味調整画像Ｉを例示した
が、例示していない合焦位置のぼけ味調整画像Ｉを取得
することも可能であることは言うまでもない。

【００８１】＜３．動画像作成＞次に、前述したデジタ
ルカメラ１のぼけ味調整モードにおいて撮影された２枚
の静止画像（近景合焦画像及び遠景合焦画像）を用いて
ぼけ味調整処理を行い、合焦変化動画を作成する画像処
理装置について説明する。

【００８２】図１６は、合焦変化動画を作成する画像処
理装置の構成を示す外観図である。図１６に示すよう
に、画像処理装置５０は、パーソナルコンピュータ６０
とその出力装置であるプリンタ７０とを備えている。

【００８３】パーソナルコンピュータ６０は、コンピュ
ータ本体６１と、各種情報の表示を行うディスプレイ６
２と、ユーザからの入力を受け付けるキーボード６３及
びマウス６４を備えている。また、コンピュータ本体６
１は、ＣＤ−ＲＯＭ等の記録媒体９０から各種データの
読み取りを行う読取装置６１ａ，６１ｃ及びデジタルカ
メラ等のメモリカードの読み取りを行うメモリカードリ
ーダ６１ｂを備えている。

【００８４】また、パーソナルコンピュータ６０は、コ
ンピュータ本体６１内部の所定の記憶装置に、ぼけ味調
整モードで撮影された２枚の静止画像から合焦変化動画
を作成することが可能な処理プログラム（以下、「合焦
変化動画作成プログラム」）を記憶している。パーソナ
ルコンピュータ６０は、所定の記憶装置からこの合焦変
化動画作成プログラム読み出して実行することにより画
像処理装置として機能することとなる。この動画作成プ
ログラムは、当該プログラムが記録されたＣＤ−ＲＯＭ
等の記録媒体９０から読取装置６１ａまたは６１ｂを介
してコンピュータ本体６１に予めインストールされてい
る。なお、この合焦変化動画作成プログラムは、所定の
サーバー記憶装置からインターネット等の通信回線を介
してダウンロードされた後、インストールされるように
なっていてもよい。

【００８５】図１７は、パーソナルコンピュータ６０に
おいて、合焦変化動画作成プログラムを実行した場合に
おけるディスプレイ６２に表示される作業ウィンドウの
一例を示す図である。作業ウィンドウ１００には合焦変
化動画の作成処理に関係する画像データ等を表示する３
つの表示領域１０１〜１０３と、処理内容や処理条件等
を指示するためのコマンドボタン１０４〜１０８が表示
される。

【００８６】表示領域１０１及び表示領域１０２は画面
上部に配置され、表示領域１０１には近景合焦画像のサ
ムネイル画像が表示され、表示領域１０２には遠景合焦
画像のサムネイル画像が表示される。また、表示領域１
０３は表示領域１０１の下部に配置され、後述するぼけ
味調整処理における処理結果が表示される。コマンドボ
タン１０４〜１０７は、表示領域１０２の下部に縦配列
されて表示され、コマンドボタン１０８は表示領域１０
１の下部に表示される。

【００８７】「ファイル」の表記されたコマンドボタン
（以下、「ファイルボタン」）１０４は、合焦変化動画
を作成する元となる２枚の静止画像ファイルを指定する
ためのものである。このファイルボタン２０４をクリッ
クすることにより、フォルダ指定ウィンドウが開き、メ
モリカードリーダ６１ｂに装着されたメモリカード等の
ぼけ味調整モードで撮影された静止画像ファイルが格納
されたフォルダが表示される。ぼけ味調整モードで撮影
された近景合焦画像及び遠景合焦画像は、同一フォルダ
「Ｎｂ」内に含まれているため、フォルダの指定のみで
両静止画像ファイルを指定することが可能である。

【００８８】このフォルダ指定ウィンドウにおいてユー
ザにより開くべきフォルダが指定されると、指定された
フォルダ内に含まれる両静止画像ファイルのタグ情報を
参照し、ぼけ味調整モードで撮影されたものであるか否
かを判別するようになっている。ぼけ味調整モードで撮
影された静止画像ファイルにおいては、タグ情報の撮影
モードに「ぼけ味調整モード１／２」もしくは「ぼけ味
調整モード２／２」という情報が含まれているため、こ
の情報を参照することでぼけ味調整モードで撮影された
ものであるということが判別される。ぼけ味調整モード
で撮影されたもので無い場合はその後の処理を行うこと
ができないため、所定のエラーメッセージの表示を行い
再度ユーザに開くべきフォルダの指定をさせるようにな
っている。

【００８９】「設定」と表記されたコマンドボタン（以
下、「設定ボタン」）１０５は、作成する合焦変化動画
の各種パラメータ設定を行うものである。設定ボタン１
０５をクリックすると図１８の如き設定ウィンドウ１１
０がディスプレイ６２に表示される。図１８に示すよう
に、設定ウィンドウ１１０では、作成する合焦変化動画
のぼけ具合、フレーム数、再生時間、表示速度の各パラ
メータを設定可能な設定フォーム１１１〜１１４が表示
される。

【００９０】ここで、本実施の形態で作成する合焦変化
動画について簡単に説明する。図２３は、作成する合焦
変化動画の構成を示す図である。図に示すように、合焦
変化動画はｎ枚（ｎ＞１）のフレームが連結された構成
となっており、フレームのそれぞれは１枚の静止画像デ
ータ（ぼけ味調整画像）に対応する。合焦変化動画の再
生を行うと、これらの静止画像データが１枚目のフレー
ムＦ１から順にｎ枚目のフレームＦｎまで表示される。

【００９１】本実施の形態では、遠景から近景に徐々に
合焦位置が変化する動画像を作成するため、１枚目のフ
レームＦ１は遠景に合焦した状態であり、近景は全ての
フレーム中で最もぼけた状態となる。一方、ｎ枚目のフ
レームＦｎは近景に合焦した状態であり、遠景は全ての
フレーム中で最もぼけた状態となる。

【００９２】また、本実施の形態で作成される合焦変化
動画は、再生時において各フレームを一定の時間Ｔ１秒
毎に表示する。従って、合焦変化動画の再生時間Ｔ２秒
はＴ２＝Ｔ１×ｎの関係にあり、１秒間あたりに表示す
るフレーム数（ｆｐｓ）すなわち表示速度Ｖは、Ｖ＝ｎ
／Ｔ２の関係にある。また、各フレームの表示時間Ｔ１
は、表示速度Ｖの逆数になる。

【００９３】図１８に戻り、設定フォーム１１１は、合
焦変化動画のぼけ具体を決定するパラメータとなる近景
最大ぼけ量ｒａと遠景最大ぼけ量ｒｂを設定するための
ものである。これは、作成する１枚目のフレームＦ１の
近景領域のぼけ量（前述Ｒａに相当）を近景最大ぼけ量
ｒａとして、ｎ枚目のフレームＦｎの遠景領域のぼけ量
（前述Ｒｂに相当）を遠景最大ぼけ量ｒｂとして設定す
ることとなる。

【００９４】図１８に示すように、設定フォーム１１１
は、２つのオプションボタン１１５，１１６と、２つの
数値入力ボックス１１６ａ，１１６ｂとを備えている。
「自動」と表記されたオプションボタン１１５が選択さ
れた場合は、近景最大ぼけ量ｒａ及び遠景最大ぼけ量ｒ
ｂはそれぞれ予め設定されているデフォルト値、例えば
「５」ピクセルと設定される。一方、「手動」と表記さ
れたオプションボタン１１６が選択された場合は、数値
入力ボックス１１６ａに入力された値が近景最大ぼけ量
ｒａとして、数値入力ボックス１１６ｂに入力された値
が遠景最大ぼけ量ｒｂとしてそれぞれ設定される。

【００９５】設定フォーム１１２は合焦変化動画のフレ
ーム数ｎ、設定フォーム１１３は合焦変化動画の再生時
間Ｔ２、設定フォーム１１４は合焦変化動画の表示速度
Ｖのそれぞれのパラメータを設定するためのものであ
る。これらのパラメータは、設定フォーム１１２〜１１
４のそれぞれに備えられた数値入力ボックスに値が入力
されることにより可変に設定される。なお、前述したよ
うに、Ｖ＝ｎ／Ｔ２の関係にあるため、設定フォーム１
１２〜１１４のうち２つの数値入力ボックスに値が入力
されれば、残りの１つは演算されて自動的に数値入力ボ
ックスに表示されるようになっている。

【００９６】また、設定ウィンドウ１１０は、ＯＫボタ
ン１１７とキャンセルボタン１１８をさらに備えてい
る。ＯＫボタン１１７がクリックされた場合は、上記設
定フォーム１１１〜１１７において入力された各パラメ
ータが更新設定され、コンピュータ本体６１内部の所定
の記憶装置に記憶される。一方、キャンセルボタン１１
８がクリックされた場合は、各パラメータの更新は行わ
れない。

【００９７】図１７に戻り、「実行」と表示されたコマ
ンドボタン（以下、「実行ボタン」）１０６は、ぼけ味
調整モードで撮影された２枚の画像を用いて実際に合焦
変化動画の作成処理を実行するためのものである。この
合焦変化動画の作成処理の詳細については後述する。

【００９８】「終了」と表示されたコマンドボタン（以
下、「終了ボタン」）１０７は、合焦変化動画作成プロ
グラムの実行を終了させるためのものである。この終了
ボタン１０７がクリックされると、作業ウィンドウ１０
０がクローズし全ての処理が終了する。

【００９９】「中止」と表示されたコマンドボタン（以
下、「中止ボタン」）１０８は、合焦変化動画の作成処
理を途中で中止させるためのものである。合焦変化動画
の作成処理の処理時間は長時間となるため、何らかの理
由によりユーザが強制的に処理を中止したい場合は、こ
の中止ボタンをクリックすることにより中止することが
できる。

【０１００】次に、図１９に示すフローチャートに従っ
て、合焦変化動画の作成処理について説明する。

【０１０１】まず、ユーザによりファイルボタン１０４
がクリックされ、合焦変化動画の作成に使用する２枚の
静止画像ファイルが格納されたフォルダの指定が行われ
る。開くべきフォルダが指定されると、指定されたフォ
ルダに格納された２枚の静止画像ファイルからサムネイ
ル画像がそれぞれ読み出され、作業ウィンドウ１００の
表示領域１０１，１０２に表示される（ステップＳ２
１，Ｓ２２）。

【０１０２】次に、ユーザにより設定ボタン１０５がク
リックされ、作成する合焦変化動画の各種パラメータ設
定が行われる。すなわち、近景最大ぼけ量ｒａ、遠景最
大ぼけ量ｒｂ、フレーム数ｎ、再生時間Ｔ２及び再生速
度Ｖのパラメータが設定される（ステップＳ２３）。

【０１０３】続いて、実行ボタン１０６が操作されたか
否かが判別される（ステップＳ２４）。ここで、実行ボ
タン１０６の操作がなければ、サムネイル画像が２枚表
示された状態で、待機状態となる。この状態において
は、ステップＳ２３に戻り合焦変化動画の各種パラメー
タ設定を再度行うことが可能である。

【０１０４】実行ボタン１０６が操作されると、二枚の
指定された静止画像ファイルからそれぞれ撮影画像デー
タ（近景合焦画像及び遠景合焦画像）が読み出される
（ステップＳ２５）。

【０１０５】さらに、二枚の静止画像ファイルからタグ
情報が読み出され、タグ情報に含まれる撮影レンズの撮
影レンズの種類と撮影レンズの焦点位置の情報が取得さ
れる。取得された情報に基づいて、予め所定の記憶装置
に記憶されたテーブルを参照し、読み出された遠景合焦
画像における近景領域のぼけ量Ｒ１及び近景合焦画像に
おける遠景領域のぼけ量Ｒ２が設定される（ステップＳ
２６）。

【０１０６】続いて、まず、１枚目のフレームＦ１を作
成するため、現在の作成しているフレーム番号を示すカ
ウント値ｉ（ｉ＝１，２，３，・・・・，ｎ）が「１」
にセットされる（ステップＳ２７）。

【０１０７】続いて、近景合焦画像と遠景合焦画像とを
用いてぼけ味調整処理を行い合焦変化動画のフレームと
なるぼけ味調整画像が作成される（ステップＳ２８）。
このフレーム作成処理は、作成するフレーム数ｎと同回
数繰り返されることとなる。以下の説明においては、ｉ
枚目のフレームＦｉを作成するものとして説明する。

【０１０８】図２８は、このフレーム作成処理の流れを
示すフローチャートである。まず、近景合焦画像と遠景
合焦画像との前述した位置合わせ処理が行われ、最終的
に近景合焦画像に対して位置合わせの行われた遠景合焦
画像が得られる（ステップＳ４１）。なお、この位置合
わせ処理においては処理速度を向上させるため、近景合
焦画像を基準とした遠景合焦画像の平行移動のみで行わ
れてもよい。また、２枚目以降のフレーム作成時（ｉ＞
１）においては、１枚目のフレーム作成時（ｉ＝１）に
位置合わせ処理が行われているためこの処理は省略され
るようになっていてもよい。

【０１０９】続いて、作成するｉ枚目のフレームにおけ
る近景領域のぼけ量Ｒａと遠景領域のぼけ量Ｒｂが設定
される（ステップＳ４２）。具体的には、ぼけ量Ｒａ，
Ｒｂはそれぞれ、設定されたパラメータである最大ぼけ
量ｒａ，ｒｂに基づく段階的な変化を規定する演算式Ｒａ＝ｒａ・（ｎ−ｉ）／（ｎ−１）Ｒｂ＝ｒｂ・（ｉ−１）／（ｎー１）で算出されて設定される。

【０１１０】例えば、ｉ＝１（１枚目のフレームＦ１）
の場合は、Ｒａ＝ｒａ，Ｒｂ＝０となる。つまり、近景
領域のぼけ量Ｒａは近景最大ぼけ量ｒａとなり、遠景領
域のぼけ量Ｒｂは「０」となるため、遠景に合焦し近景
は最もぼけた状態となるように設定される。一方、ｉ＝
ｎ（ｎ枚目のフレームＦｎ）の場合は、Ｒａ＝０，Ｒｂ
＝ｒｂとなる。つまり、近景領域のぼけ量Ｒａは「０」
となり、遠景領域のぼけ量Ｒｂは遠景最大ぼけ量ｒｂと
なるため、近景に合焦し遠景は最もぼけた状態となるよ
うに設定される。また、１＜ｉ＜ｎの場合は、フレーム
Ｆ１とフレームＦｎの中間的なぼけ状態となるようにそ
れぞれ設定が行われることとなる。

【０１１１】続いて、反復法によりぼけ味調整画像を算
出する際の反復演算回数をカウントするカウンタのカウ
ント値ｊが「０」にセットされる（ステップＳ４３）。
続いて、前述したぼけ味調整処理の反復法における１回
目の演算が行われ（ステップＳ４４）、その演算結果の
ぼけ味調整画像が表示領域１０３に表示される（ステッ
プＳ４５）。

【０１１２】続いて、中止ボタン１０８による処理の中
止が指示されているか否かが判別され（ステップＳ４
６）、処理の中止が指示されている場合は、強制的に処
理を中止し図１９のステップＳ２１に戻る。

【０１１３】ステップＳ４６において処理の中止が指示
されていない場合は、反復演算結果が収束しているか否
か（ステップＳ４７）、反復演算回数のカウント値ｊが
予め設定されている所定回数に達しているか否か（ステ
ップＳ４８）が順次判別される。反復演算結果が収束し
ておらず、反復演算回数のカウント値ｊが所定回数に達
していなければ、カウント値ｊが１だけインクリメント
されて（ステップＳ４９）、ステップＳ４４に戻り、次
のぼけ味調整演算が行われる。

【０１１４】一方、反復演算結果が収束した場合、また
は、反復演算回数のカウント値ｊが所定回数に達した場
合は、演算結果であるぼけ味調整画像をフレームＦｉと
して、フレーム作成処理を終了する。

【０１１５】フレームＦｉの作成処理が終了すると、図
１９のステップＳ２９において、作成中の動画像データ
にフレームＦｉが連結される。つまり、フレームが作成
される毎に動画像データに連結され、順次、合焦変化動
画が作成されていくこととなる。また、このとき同時
に、再生速度Ｖの逆数が、フレームＦｉの再生すべきタ
イミング情報として付加される。なお、ｉ＝１の場合は
連結する動画像データが無いためこの処理が行われるこ
とはない。

【０１１６】続いて、現在作成しているフレーム番号の
カウント値ｉがフレーム数ｎに達したか否かが判別され
（ステップＳ３０）、フレーム数ｎに達していなけれ
ば、カウント値ｉが１だけインクリメントされて（ステ
ップＳ３１）、ステップＳ２８に戻り、次のフレームが
作成されることとなる。

【０１１７】図２１は、合焦変化動画を作成中の作業ウ
ィンドウ１００の状態を示す図である。合焦変化動画の
作成中においては、作業ウィンドウ１００の下部に作成
処理の進行状況を示すプログレスバー１０９ａの表示と
ともに、合焦変化動画を作成中である旨のステイタス表
示１０９ｂがなされる。ユーザは、この表示によって、
作成処理の進行状況を認識することができる。なお、こ
の作業ウィンドウ１００に表示される中止ボタン１０８
をクリックすれば強制的にこの処理を中止することとな
る。

【０１１８】以下、同様の処理で順次フレームが作成さ
れ、作成されたフレームは作成中の動画像データに連結
されていく。中止ボタン１０８による処理の中止が指示
されなければ、ステップＳ３０においてフレーム番号の
カウント値ｉがフレーム数ｎに達した時点で、合焦変化
動画の作成が終了する。

【０１１９】合焦変化動画が作成されると、図２２に示
すようにディスプレイ６２に動画再生ウィンドウ１２０
を表示させ、その表示領域１２１に作成された合焦変化
動画が再生表示される（図１９ステップＳ３２）。動画
再生ウィンドウ１２０の下部には、再生の進行状況を示
すプログレスバー１２２ａと再生中である旨のステイタ
ス表示１２２ｂがなされる。ユーザは、この動画再生ウ
ィンドウ１２０により作成された合焦変化動画を確認す
ることが可能である。つまり、画像処理装置５０は、合
焦変化動画を表示する表示装置としても機能することと
なる。

【０１２０】続いて、合焦変化動画の再生が終了する
と、当該合焦変化動画を保存するか否かを問い合わせる
確認ダイアログが表示され、ユーザにより保存すると選
択された場合は、当該合焦変化動画は所定の記憶手段に
保存されることとなる（図１９ステップＳ３３，３
４）。

【０１２１】＜４．変形例＞以上、本発明の実施の形態
について説明したが、この発明は上記実施の形態に限定
されるものではない。

【０１２２】上記実施の形態においては、合焦変化動画
の作成をパーソナルコンピュータ６０において合焦変化
動画作成プログラムを実行させた画像処理装置５０を利
用していたが、上述した撮像手段を備えた画像処理装置
であるデジタルカメラ１のＲＯＭ２５１に合焦変化動画
作成プログラムを記憶させ、デジタルカメラ１において
当該プログラムを実行させて、合焦変化動画の作成を行
うようにしてもよい。このような場合、作成された合焦
変化動画がＬＣＤ１０に表示されることによりデジタル
カメラ１は表示装置としても機能することとなる。

【０１２３】また、上記実施の形態における合焦変化動
画は、遠景から近景に至って徐々に合焦位置が変化する
ものであったが、逆に、近景から遠景に至って徐々に合
焦位置が変化するようなものであってもよい。このよう
な場合、図２０のステップＳ４２におけるぼけ量Ｒａ，
Ｒｂを算出する演算式を逆にすれば簡単に実現可能であ
る。また、「遠景から近景」または「近景から遠景」と
いう合焦方向をユーザにより設定できるようになってい
てもよい。

【０１２４】また、上記実施の形態においては、合焦変
化動画の各フレームは、全てぼけ味調整処理の演算結果
であるぼけ味調整画像によって構成されていたが、元の
撮影画像データを含むようにしてもよい。例えば、１枚
目のフレームＦ１に撮影画像データである遠景合焦画像
を利用し、ｎ枚目のフレームＦｎに撮影画像データであ
る近景合焦画像を利用し、これらの中間にあたるフレー
ムのみをぼけ味調整処理によって作成するようにしても
よい。合焦変化動画作成の処理時間は長時間となるが、
このようにすれば、比較的処理時間を短くすることが可
能である。

【０１２５】

【発明の効果】以上、説明したように、請求項１ないし
請求項５、請求項８および請求項９の発明によれば、そ
れぞれ異なる合焦位置で撮影された２枚の静止画像か
ら、徐々に合焦位置が変化する映像効果を有する動画像
の画像ファイルを作成することができる。

【０１２６】また、特に請求項２の発明によれば、操作
ボタンの操作に応答して合焦位置を変化させ時間的に連
続して撮影することができるため、異なる合焦位置の２
枚の静止画像を簡易に取得することができる。

【０１２７】また、特に請求項３の発明によれば、動画
像の画像ファイルに含まれる静止画像のぼけ具合のパラ
メータを可変に設定することができるため、動画像の画
像ファイルの映像効果におけるぼけ具合を可変に設定す
ることができる。

【０１２８】また、特に請求項４の発明によれば、動画
像の画像ファイルを構成する静止画像群の画像数を可変
に設定することができるため、動画像の画像ファイルの
映像効果の段階を可変に設定することができる。

【０１２９】また、特に請求項５の発明によれば、動画
像の画像ファイルを構成する静止画像群の表示速度を可
変に設定することができるため、動画像の画像ファイル
の映像効果の表示速度を可変に設定することができる。

【０１３０】また、請求項６および請求項７の発明によ
れば、それぞれ異なる合焦位置で撮影された２枚の静止
画像から、徐々に合焦位置が変化する映像効果を表示す
ることができる。

【０１３１】また、特に請求項７の発明によれば、操作
ボタンの操作に応答して合焦位置を変化させ時間的に連
続して撮影することができるため、異なる合焦位置の２
枚の静止画像を簡易に取得することができる。

【図面の簡単な説明】

【図１】静止画像を撮影するデジタルカメラの平面図で
ある。

【図２】静止画像を撮影するデジタルカメラの断面図で
ある。

【図３】静止画像を撮影するデジタルカメラの背面図で
ある。

【図４】デジタルカメラの機能構成を示すブロック図で
ある。

【図５】メモリカードへの静止画像ファイルの記録方法
を示す図である。

【図６】メモリカードに記憶された静止画像ファイルの
構成例を示す図である。

【図７】デジタルカメラのぼけ味調整モードにおける撮
影手順を示す図である。

【図８】ぼけ味調整処理に使用される２枚の画像を示す
モデル図である。

【図９】合焦位置無限大に相当するぼけ味調整画像の例
を示す図である。

【図１０】合焦位置２０ｍに相当するぼけ味調整画像の
例を示す図である。

【図１１】合焦位置１０ｍに相当するぼけ味調整画像の
例を示す図である。

【図１２】合焦位置５ｍに相当するぼけ味調整画像の例
を示す図である。

【図１３】合焦位置２ｍに相当するぼけ味調整画像の例
を示す図である。

【図１４】合焦位置１ｍに相当するぼけ味調整画像の例
を示す図である。

【図１５】合焦位置０．５ｍに相当する取得されたぼけ
味調整画像の例を示す図である。

【図１６】本発明の実施の形態に係る画像処理装置の構
成を示す外観図である。

【図１７】画像処理装置のディスプレイに表示された作
業ウィンドウの一例を示す図である。

【図１８】画像処理装置のディスプレイに表示された設
定ウィンドウの一例を示す図である。

【図１９】動画像の画像ファイルを作成する処理の手順
を示す図である。

【図２０】動画像を構成する各フレームを作成する処理
の手順を示す図である。

【図２１】動画像の画像ファイルを作成中の作業ウィン
ドウの状態を示す図である。

【図２２】画像処理装置のディスプレイに表示された動
画再生ウィンドウの一例を示す図である。

【図２３】動画像の画像ファイルの構成を示す図であ
る。

【符号の説明】

１デジタルカメラ８メモリカード９シャッタボタン５０画像処理装置６０パーソナルコンピュータ６１コンピュータ本体６２ディスプレイ７０プリンタ９０記録媒体１００作業ウィンドウ１１０設定ウィンドウ１２０動画再生ウィンドウ

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｈ０４Ｎ 5/225 Ｈ０４Ｎ 5/225 Ｆ // Ｈ０４Ｎ 101:00 101:00 (72)発明者新川勝仁大阪府大阪市中央区安土町二丁目３番13号大阪国際ビルミノルタ株式会社内Ｆターム(参考） 2H044 DA01 DA02 DC02 DE01 DE08 5B050 AA09 BA06 BA08 BA10 BA11 BA15 DA07 EA16 EA24 FA02 FA12 FA13 5C022 AA13 AB21 AC18 AC32 AC42 AC69 CA00 5C023 AA06 AA32 CA01 DA02 DA04 DA08 EA05 EA06

Claims

【特許請求の範囲】

【請求項１】画像処理装置であって、同一被写体に対して第１の合焦位置で撮影された第１静
止画像と、第２の合焦位置で撮影された第２静止画像と
から、前記第１の合焦位置および前記第２の合焦位置とは別の
第３の合焦位置で撮影された静止画像に相当する第３静
止画像を生成する第１の画像生成手段と、前記第３静止画像を含む静止画像群を時系列的に順番に
表示可能な画像ファイルを生成する第２の画像生成手段
と、を備えることを特徴とする画像処理装置。
【請求項２】請求項１に記載の画像処理装置におい
て、静止画像を撮影する撮像手段、をさらに備え、前記撮像手段は、操作ボタンの操作に応答して前記第１
静止画像と前記第２静止画像を時間的に連続して撮影す
ることを特徴とする画像処理装置。
【請求項３】請求項１または２に記載の画像処理装置
において、前記第１の画像生成手段は、前記第３静止画像のぼけ具
合のパラメータを可変に設定するぼけパラメータ設定手
段、を備えていることを特徴とする画像処理装置。
【請求項４】請求項１ないし３のいずれかに記載の画
像処理装置において、前記第２の画像生成手段は、前記画像ファイルを構成す
る前記静止画像群の画像数を可変に設定する画像数設定
手段、を備えていることを特徴とする画像処理装置。
【請求項５】請求項１ないし４のいずれかに記載の画
像処理装置において、前記第２の画像生成手段は、前記画像ファイルに含まれ
る前記静止画像群の表示速度を可変に設定する表示速度
設定手段、を備えていることを特徴とする画像処理装
置。
【請求項６】表示装置であって、同一被写体に対して第１の合焦位置で撮影された第１静
止画像と、第２の合焦位置で撮影された第２静止画像と
から、前記第１の合焦位置および前記第２の合焦位置とは別の
第３の合焦位置で撮影された静止画像に相当する第３静
止画像を生成する画像生成手段と、前記第３静止画像を含む静止画像群を時系列的に順番に
出力して表示させる出力手段と、を備えることを特徴と
する表示装置。
【請求項７】請求項６に記載の表示装置において、静止画像を撮影する撮像手段、をさらに備え、前記撮像手段は、操作ボタンの操作に応答して前記第１
静止画像と前記第２静止画像を時間的に連続して撮影す
ることを特徴とする表示装置。
【請求項８】画像処理装置に含まれるコンピュータに
よって実行されることにより、前記画像処理装置を請求
項１ないし５のいずれかに記載の画像処理装置として機
能させることを特徴とするプログラム。
【請求項９】請求項８に記載のプログラムを記録して
あることを特徴とするコンピュータ読み取り可能な記録
媒体。