JP2011160306A - 画像処理装置、画像処理プログラム及び画像処理方法 - Google Patents

Abstract

【課題】撮影者からの遠近に応じて、異なる画像変換処理を施すことを可能とする。
【解決手段】測定距離が１番目に短い被写体画像の輪郭を太い線図に変換し（ステップＳ２０１）、測定距離が２番目に短い被写体画像の輪郭を普通の太い線図（１番目よりは細いが３番目よりは太い線図）に変換し（ステップＳ２０２）、測定距離が３番目に短い被写体画像の輪郭を細い線図（２番目よりは細いが４番目よりは太い線図）に変換する（ステップＳ２０３）。以下同様にして、被写体画像の測定距離が大きくなるほど、輪郭を細い線図に変換する。そして、このように変換された輪郭を有する全ての被写体画像のみを絵画風被写体画像に変換したあとに、各絵画風被写体画像を合成する（ステップＳ２０４）。これにより、より一層、遠近感のある絵画風画像を得る。
【選択図】図５

Description

本発明は、撮影された画像を絵画風の画像に変換する画像処理装置、画像処理プログラム及び画像処理方法に関するものである。

従来のデジタルカメラにあっては、複数の測距点の中から所望の測距点を選択することで目的の被写体に焦点を合わせることができ、よって、目的の被写体に焦点を合わせた画像を撮影することができる。

一方、画家の描いた絵画に見られる特徴を擬似的に再現した絵画風画像を作成する変換技術が提案されるに至っている（例えば下記特許文献１参照）。したがって、前記デジタルカメラで撮影した画像を、前記変換技術を用いて絵画風画像に変換することも可能となる。

特開２００４−２１２５９８号公報

しかしながら、前記変換技術にあっては、画像全体に対して、特定の画家の描いた絵画に見られる特徴を擬似的に再現する。したがって、画像中に撮影者からの距離が異なる複数の被写体が存在する場合であっても、各被写体は同一の特徴で画像変換がなされてしまう。したがって、画像中に撮影距離の異なる複数の被写体が存在する場合、各被写体が撮影距離に応じた異なる態様で画像変換された画像を得ることはできない。

本発明は、このような問題点に着目してなされたものであり、撮影者からの遠近に応じて、異なる画像変換処理を施すことが可能な画像処理装置、画像処理プログラム及び画像処理方法を提供することを目的とする。

前記課題を解決するため、請求項１記載の発明に係る画像処理装置にあっては、 複数の被写体を含む画像を撮影する撮影手段と、この撮影手段により撮影された画像を全体画像として記憶する第１の記憶手段と、前記撮影手段により撮影された画像に含まれている複数の被写体を被写体画像としてそれぞれ記憶する第２の記憶手段と、前記撮影手段により撮影される画像に含まれている複数の被写体までの距離を被写体毎に測定する測距手段と、この測距手段により測定された複数の被写体毎の距離と前記第２の記憶手段に記憶された複数の被写体画像とをそれぞれ対応づけて記憶する第３の記憶手段と、前記第２の記憶手段に対応付けて記憶されている複数の被写体画像に対し、前記第３の記憶手段に記憶されている複数の被写体画像毎の距離に応じて、予め定められている絵画変換処理を行う絵画変換処理手段と、この絵画変換処理手段により絵画変換処理された複数の絵画風被写体画像を、前記第１の記憶手段に記憶されている全体画像における複数の被写体の対応する位置に各々配置して、合成する絵画合成処理手段とを備えたことを特徴とする。

また、請求項２記載の発明に係る画像処理装置にあっては、 前記第２の記憶手段に記憶された複数の被写体画像毎の輪郭を抽出する輪郭抽出手段を更に備え、前記絵画変換処理手段は、前記第３の記憶手段に記憶された複数の被写体毎の距離に応じて、前記輪郭抽出手段により抽出された複数の被写体画像の輪郭を異なる形態の線図に変換する線図変換処理手段を有していることを特徴とする。

また、請求項３記載の発明に係る画像処理装置にあっては、 前記線図変換処理手段は、前記被写体の距離が遠いほど、前記被写体画像の輪郭を細い線図に変換し、前記被写体の距離が近いほど、前記被写体画像の輪郭を太い線図に変換することを特徴とする。

また、請求項４記載の発明に係る画像処理装置にあっては、 前記線図変換処理手段は、前記被写体の距離が遠いほど、前記被写体画像の輪郭の上部を細い線図に変換し、前記被写体の距離が近いほど、前記被写体画像の輪郭の上部を太い線図に変換するとともに、前記被写体画像の輪郭の下部を前記変換された太さの線図よりも細い線図に変換することを特徴とする。

また、請求項５記載の発明に係る画像処理装置にあっては、 前記線図変換処理手段は、前記被写体の距離が遠いほど、前記被写体画像の輪郭を薄い色の線図に変換し、前記被写体の距離が近いほど、前記被写体画像の輪郭を濃い色の線図に変換することを特徴とする。

また、請求項６記載の発明に係る画像処理装置にあっては、 前記線図変換処理手段は、前記被写体の距離が遠いほど、前記被写体画像の輪郭を細い線図であって薄い色の線図に変換し、前記被写体の距離が近いほど、前記被写体画像の輪郭を太い線図であって濃い色の線図に変換することを特徴とする。

また、請求項７記載の発明に係る画像処理装置にあっては、前記線図変換処理手段は、前記輪郭抽出手段により抽出された複数の被写体画像の輪郭を異なる形態の線図に変換するとともに、前記被写体画像の輪郭以外の部分を消去することを特徴とする。

また、請求項８記載の発明に係る画像処理装置にあっては、 前記絵画変換処理手段は、前記第３の記憶手段に記憶された複数の被写体毎の距離に応じて、前記輪郭抽出手段により抽出された複数の被写体画像を異なる作風または画家風の絵画風画像に変換することを特徴とする。

また、請求項９記載の発明に係る画像処理装置にあっては、前記絵画合成処理手段により合成された絵画風画像を表示する表示手段を備えることを特徴とする。

また、請求項１０記載の発明に係る画像処理装置にあっては、前記絵画合成処理手段により合成された絵画風画像を記憶する第４の記憶手段を備えることを特徴とする。

また、請求項１１記載の発明に係る画像処理プログラムにあっては、 複数の被写体を含む画像を撮影する撮影手段を備える装置が有するコンピュータを、前記撮影手段により撮影された画像を全体画像として記憶する第１の記憶手段と、前記撮影手段により撮影された画像に含まれている複数の被写体を被写体画像としてそれぞれ記憶する第２の記憶手段と、前記撮影手段により撮影される画像に含まれている複数の被写体までの距離を被写体毎に測定する測距手段と、この測距手段により測定された複数の被写体毎の距離と前記第２の記憶手段に記憶された複数の被写体画像とをそれぞれ対応づけて記憶する第３の記憶手段と、前記第２の記憶手段に対応付けて記憶されている複数の被写体画像に対し、前記第３の記憶手段に記憶されている複数の被写体画像毎の距離に応じて、予め定められている絵画変換処理を行う絵画変換処理手段と、この絵画変換処理手段により絵画変換処理された複数の絵画風被写体画像を、前記第１の記憶手段に記憶されている全体画像における複数の被写体の対応する位置に各々配置して、合成する絵画合成処理手段として機能させることを特徴とする。

また、請求項１２記載の発明に係る画像処理方法にあっては、 複数の被写体を含む画像を撮影する撮影手段を備える装置における画像処理方法であって、前記撮影手段により撮影された画像を全体画像として記憶する第１の記憶ステップと、前記撮影手段により撮影された画像に含まれている複数の被写体を被写体画像としてそれぞれ記憶する第２の記憶ステップと、前記撮影手段により撮影される画像に含まれている複数の被写体までの距離を被写体毎に測定する測距ステップと、この測距ステップにより測定された複数の被写体毎の距離と前記第２の記憶ステップで記憶された複数の被写体画像とをそれぞれ対応づけて記憶する第３の記憶ステップと、前記第２の記憶ステップで対応付けて記憶されている複数の被写体画像に対し、前記第３の記憶ステップで記憶されている複数の被写体画像毎の距離に応じて、予め定められている絵画変換処理を行う絵画変換処理ステップと、この絵画変換処理ステップにより絵画変換処理された複数の絵画風被写体画像を、前記第１の記憶ステップで記憶されている全体画像における複数の被写体の対応する位置に各々配置して、合成する絵画合成処理ステップとを含むことを特徴とする。

また、請求項１３記載の発明に係る画像処理装置にあっては、 複数の被写体を撮影する撮影手段と、この撮影手段により撮影された撮影画像に含まれている複数の被写体までの距離を被写体毎に測定する測距手段と、この測距手段により測定された複数の被写体毎の距離に応じて、当該複数の被写体画像を異なる作風または画家風の絵画風被写体画像に変換処理を行う絵画変換処理手段と、この絵画変換処理手段により変換処理された複数の絵画風被写体画像を合成し、この合成された複数の絵画風被写体画像から絵画風画像を作成する絵画合成処理手段と、を備えたことを特徴とする。

また、請求項１４記載の発明に係る画像処理装置にあっては、 前記絵画変換処理手段は、前記複数の被写体画像のうちの第１の被写体画像を第１の作風または画家風の絵画風画像に変換し、前記複数の被写体画像のうちの第２の被写体画像を第２の作風または画家風の絵画風画像に変換することを特徴とする。

本発明によれば、複数の被写体画像に対する、撮影者からの遠近に応じて、異なる画像変換処理、つまり異なるアート変換処理を自動的にかつ容易に施すことができる。

本発明の一実施の形態に係るデジタルカメラの外観を示す背面図である。 同デジタルカメラの電気的構成の概略を示すブロック構成図である。 ＲＡＭのメモリ構成図である。 本発明の一実施の形態における処理手順を示すフローチャートである。 絵画風変換処理の手順を示すフローチャートである。 全体画像の一例を示す図である。 全体画像の輪郭線Ｌ及びこれに囲まれた部分を示す図である。 絵画風画像の一例を示す図である。 変形例２における絵画風変換処理の手順を示すフローチャートである。 変形例２による絵画風画像の一例を示す図である。 変形例３における絵画風変換処理の手順を示すフローチャートである。 変形例３による絵画風画像の一例を示す図である。 変形例５による絵画風画像の一例を示す図である。

以下、本発明の実施形態について説明する。図１は、本発明の一実施の形態に係るデジタルカメラ１の外観を示す背面図である。

このデジタルカメラ１の背面には、メニューキー２、モードダイアル３、液晶モニタ４、カーソルキー５、ＳＥＴキー６等が設けられている。また、上面にはシャッターキー８、電源ボタン９が設けられている。なお、側部には図示されていないが、パーソナルコンピュータ（以下、パソコン）やモデム等の外部装置とＵＳＢケーブルに接続する場合に用いるＵＳＢ端子接続部が設けられ、正面側に後述する撮像レンズ１２が設けられている。

図２は、デジタルカメラ１の電気的構成の概略を示すブロック構成図である。

デジタルカメラ１は、撮像手段であるＣＣＤ１０を備えるとともに、ＣＣＤ１０により撮像した画像を圧縮・伸張し、所定フォーマット、例えば統一規格ＤＣＦ（Design rule for Camera File system）やＪＰＥＧ（Joint Photographic Expert Group）に合致するフォーマットの画像ファイルを生成・再生する画像処理機能を備えたＣＰＵ１１を中心に構成されている。

ＣＣＤ１０の受光面には、撮像レンズ１２、フォーカスレンズ１３、絞り１４を通過して被写体の光学像が結像される。フォーカスレンズ１３はＡＦモータ等からなる駆動機構１５に保持されており、ＣＰＵ１１からの制御信号によりＡＦドライバー１６が出力する駆動信号が駆動機構１５に供給されることにより光軸上を前後に移動する合焦動作を行う。絞り１４は、ＣＰＵ１１からの制御信号に基づき絞り駆動部１７が発生する駆動信号により駆動しＣＣＤ１０に入射する被写体像の光量を調整する。

また、ＣＰＵ１１には、タイミング信号を発生するＴＧ（Timing Generator）１８が接続されており、ＴＧ１８が発生したタイミング信号に基づきＶドライバー１９（垂直方向ドライバー）がＣＣＤ１０を駆動し、それに伴いＣＣＤ１０により被写体像の輝度に応じたアナログの撮像信号が出力されユニット回路２０へ送られる。

ユニット回路２０は、ＣＣＤ１０から出力された撮像信号を保持するＣＤＳと、ＣＤＳから撮像信号を供給されるアナログアンプであるゲイン調整アンプ（ＡＧＣ）と、ゲイン調整アンプで増幅され調整されたアナログの撮像信号をデジタル信号に変換するＡ／Ｄ変換器（ＡＤ）とからなり、ＣＣＤ１０の出力信号は、ここで黒レベルを合わせてサンプリングされデジタル信号としてＣＰＵ１１に送られる。ゲイン調整アンプ（ＡＧＣ）は、後述するＩＳＯ感度に応じた増幅率で、ＣＤＳから供給される撮像信号を増幅する。

ＣＰＵ１１には、シャッターキー８を含む前記キー群をからなる操作キー部２１、前記液晶モニタ４、ＲＡＭ２２、ＲＯＭ２３、フラッシュメモリ２４が接続されている。

ＲＡＭ２２は作業用のメモリであり、フラッシュメモリ２４は画像記録用のメモリである。ＣＣＤ１０からＣＰＵ１１に送られたデジタル信号（撮像信号）は、ＲＡＭ２２に一時保存されるとともに、ＣＰＵ１１によって各種の画像処理が施された後、最終的には圧縮された画像データとしてフラッシュメモリ２４に記録される。なお、フラッシュメモリ２４はカメラ本体に着脱自在なカード型のものであってもよい。

フラッシュメモリ２４に記録された画像データは、必要に応じてＣＰＵ１１に読み出され、伸長処理、輝度信号及び色信号の付加等の処理を経てデジタルビデオ信号やアナログビデオ信号に変換され、液晶モニタ４によって表示される。また液晶モニタ４には、記録モードにおいて周期的に撮像された画像がスルー画像として表示される。

ＲＯＭ２３は、ＣＰＵ１１における各部の制御及びデータ処理に必要な各種の動作プログラムが記録されたプログラムＲＯＭである。すなわち、ＲＯＭ２３には、前記プログラムとともに、撮影時の適正な露出値に対応するＩＳＯ感度とシャッタースピードとの組み合わせを示すプログラム線図等の各種データが格納されている。

ＣＰＵ１１は、前記プログラム線図に従い、シャッタースピードである前記ＣＣＤ１０の電荷蓄積時間や、前記絞り１４の開放度、前記ユニット回路２０のゲイン調整アンプ（ＡＧＣ）のゲインの制御によるＡＥ制御を行うとともに、所定のプログラムに従い前記フォーカスレンズ１３を駆動するＡＦ（オートフォーカス）制御、ＡＷＢ（オートホワイトバランス）制御を行う。また、フラッシュメモリ２４は、撮影された画像データ等が記録される。

また、ＲＯＭ２３には、フォーカス設定テーブルが格納されている。当該デジタルカメラ１から被写体までの距離である被写体距離を取得するに際しては、周知のコントラストＡＦ方式によりフォーカスレンズ１３のフォーカス制御を行う。そして、そのときの撮像レンズ１２のズーム比とフォーカスレンズ１３の位置とから、ＲＯＭ２３に予め記憶してあるフォーカス設定テーブルを使用して被写体距離を取得する。

ＲＡＭ２２内には、図３に示す絵画風変換データエリア２２１が設けられている。この絵画風変換データエリア２２１には、第１記憶部２２２、第２記憶部２２３、第３記憶部２２４、及び第４記憶部２２７が設けられている。第２記憶部２２３は、被写体画像記憶部２２５と座標記憶部２２６とに区分されている。

第１記憶部２２２には、後述する絵画風画像変化モードで撮影された撮影画像が全体画像として記憶される。第２記憶部２２３の被写体画像記憶部２２５には、全体画像から抽出された被写体の画像である被写体画像が記憶され、座標記憶部２２６には、当該被写体画像の全体画像中における位置を示す位置座標が記憶される。また、第３記憶部２２４には、前記被写体画像のデジタルカメラ１からの距離がメートル単位［ｍ］で記憶されるとともに、複数の被写体画像中で距離が近い（短い）順に（１番目）、（２番目）・・・のように、距離順位も記憶される。第４記憶部２２７は、最終的な絵画風画像を生成する際に使用される記憶領域である。

なお、座標記憶部２２６に被写体画像の全体画像中における位置を示す位置座標は、当該被写体画像の全域内の全てのドットの座標、輪郭のみの座標、その他複数点の座標等、当該被写体画像の全体画像中における位置を特定できる複数の座標であれば、どのような座標であってもよい。

以上の構成に係る本実施の形態において、デジタルカメラ１はＣＰＵ１１がＲＯＭ２３に格納されているプログラムに従って処理を実行することにより、図４のフローチャートに示す絵画風変換表示処理を実行する。

すなわち、ユーザーがこのデジタルカメラ１を携帯し、例えば図６に示す被写体「Ａ山」、「Ｂ山」、「Ｃ山」が存在するシーンでシャッターキー８を押下すると、ＣＰＵ１１は撮影処理を開始する（ステップＳ１０１）。そして、これら被写体「Ａ山」、「Ｂ山」、「Ｃ山」別の距離を測定して、ＲＡＭ２２の絵画風変換データエリア２２１における第３記憶部２２４に記憶する（ステップＳ１０２）。

この被写体別の距離の測定に際しては、前述のように周知のコントラストＡＦ方式によりフォーカスレンズ１３のフォーカス制御を行い、順次「Ａ山」、「Ｂ山」、「Ｃ山」を合焦させ、そのときの撮像レンズ１２のズーム比とフォーカスレンズ１３の位置とから、ＲＯＭ２３に予め記憶してあるフォーカス設定テーブルを使用して被写体距離を取得する。したがって、このステップＳ１０２での処理により、図３に示したように、「Ａ山」の測定距離「ａ」、「Ｂ山」の測定距離「ｂ」、「Ｃ山」の測定距離「ｃ」がメートル単位［ｍ］でＲＡＭ２２の絵画風変換データエリア２２１における第３記憶部２２４に記憶される。

このとき、この第３記憶部２２４への測定距離の記憶は、前述のように複数の被写体画像中で距離が近い（短い）順に（１番目）、（２番目）・・・のように、距離順位も記憶する。

なお、本実施の形態においては、距離と距離順位との双方を記憶するようにしたが、距離のみ、あるいは距離順位のみであってもよい。距離順位のみを記憶するようにした場合には、被写体の相対的な距離関係が検出できればよいことから、精度よく被写体までの距離を検出する必要がなく、低い検出精度で処理を行うことができる。

しかる後に、ＣＰＵ１１は、ＣＣＤ１０上に結像された被写体画像を取り込んで全体画像とし、ＲＡＭ２２の絵画風変換データエリア２２１における第１記憶部２２２に記憶する（ステップＳ１０３）。これにより、絵画風変換データエリア２２１の第１記憶部２２２は、図６に示した「Ａ山」、「Ｂ山」、「Ｃ山」を有する画像が全体画像Ｚとして記憶される。

次に、ＣＰＵ１１は、撮影画像表示処理を実行して、液晶モニタ４に撮影した画像を表示させる（ステップＳ１０４）。これにより、液晶モニタ４には、図６に示した全体画像Ｚが表示される。

引き続き、ＣＰＵ１１は、全体画像Ｚにおいて被写体別の輪郭を抽出する（ステップＳ１０５）。この被写体別の輪郭抽出に際しては、図７に示すように、全体画像Ｚの画像データの輝度信号及び色差信号から、近い輝度又は色差信号別に、同系色の色相別等に領域を分割し、さらに、領域の境界線となる輪郭線Ｌを抽出し、この輪郭線Ｌで囲まれた部分を一つの抽出領域として検出する。

さらに、この抽出した被写体別の画像を被写体画像として、絵画風変換データエリア２２１における第２記憶部２２３の被写体画像記憶部２２５に記憶するとともに、各被写体画像の全体画像Ｚ内における位置座標を第２記憶部２２３の座標記憶部２２６に記憶する（ステップＳ１０６）。これにより、図３に示すように、絵画風変換データエリア２２１における第２記憶部２２３の被写体画像記憶部２２５には、「Ａ山」、「Ｂ山」、「Ｃ山」の被写体画像が記憶され、座標記憶部２２６には、「Ａ山」の位置座標（ｘ１，ｙ１）・・・、「Ｂ山」の位置座標（ｘ２，ｙ２）・・・、「Ｃ山」の位置座標（ｘ３，ｙ３）・・・が記憶される。

次に、ＣＰＵ１１は、絵画風変換処理を実行する（ステップＳ１０７）。

図５は、第１の実施の形態における絵画風変換処理（ステップＳ１０７）の処理手順を示すフローチャートである。

まず、測定距離が１番目に短い被写体画像の輪郭を太い線図に変換し、かつ、この太い線図に変換した輪郭内の画像部分を消去する（ステップＳ２０１）。これにより、図８に示すように、輪郭のみが太い線３１で描かれた「Ａ山」の絵画風被写体画像３２が生成される。

次に、測定距離が２番目に短い被写体画像の輪郭を普通の太い線図（１番目よりは細いが３番目よりは太い線図）に変換し、かつ、この普通の太い線図に変換した輪郭内の画像部分を消去する（ステップＳ２０２）。これにより、図８に示すように、輪郭のみが普通の太い線３３で描かれた「Ｂ山」の絵画風被写体画像３４が生成される。

さらに、測定距離が３番目に短い被写体画像の輪郭を細い線図（２番目よりは細いが４番目よりは太い線図）に変換し、かつ、この細い線図に変換した輪郭内の画像部分を消去する（ステップＳ２０３）。これにより、図８に示すように、輪郭のみが細い線３５で描かれた「Ｃ山」の絵画風被写体画像３６が生成される。

以下同様にして、被写体画像の測定距離が大きくなるほど、輪郭を細い線図に変換し、かつ、変換した輪郭内の画像部分を消去する。

そして、全ての被写体画像を輪郭のみの絵画風被写体画像に変換したならば、各絵画風被写体画像３２、３４、３６・・・を合成する（ステップＳ２０４）。

すなわち、図３に示すように、絵画風変換データエリア２２１における第２記憶部２２３の座標記憶部２２６には、「Ａ山」の位置座標（ｘ１，ｙ１）・・・、「Ｂ山」の位置座標（ｘ２，ｙ２）・・・、「Ｃ山」の位置座標（ｘ３，ｙ３）・・・が記憶されている。したがって、ＣＰＵ１１は、第４記憶部２２７にて、「Ａ山」の位置座標（ｘ１，ｙ１）・・・が示す位置に、「Ａ山」の絵画風被写体画像３２を配置する。また、「Ｂ山」の位置座標（ｘ２，ｙ２）・・・が示す位置に、「Ｂ山」の絵画風被写体画像３４を配置し、「Ｃ山」の位置座標（ｘ３，ｙ３）・・・が示す位置に、「Ｃ山」の絵画風被写体画像３６を配置して合成する。

これにより、第４記憶部２２７には、図８に示すように、「Ａ山」の絵画風被写体画像３２と、「Ｂ山」の絵画風被写体画像３４及び「Ｃ山」の絵画風被写体画像３６を、図６に示す全体画像Ｚにおける「Ａ山」、「Ｂ山」、「Ｃ山」に対応した位置に配置した絵画風画像Ｐ１が生成される。

そして、図４のフローチャートにおいて、ステップＳ１０７に続くステップＳ１０８にて、絵画風画像の表示処理を実行し、生成した絵画風画像を液晶モニタ４に表示させる。これにより、液晶モニタ４には、図８に示した絵画風画像Ｐ１が表示されることとなる。

この表示される絵画風画像Ｐ１にあっては、被写体までの距離に応じて、各被写体がそれぞれ異なる太さの線３１、３３、３５のみで描かれた、水墨画的な画像である。したがって、本実施の形態によれば、撮影者からの遠近に応じて、異なる太さの線図変換処理、いわば墨絵的なアート変換処理を自動的にかつ容易に施した絵画風画像を生成して、液晶モニタ４に表示させてくれるので、遠近感がより強調された絵画風画像を迅速かつ容易に観賞することができる。

しかる後に、この表示させた絵画風画像をフラッシュメモリ２４に記憶する（ステップＳ１０９）。これにより、墨絵的なアート処理が施された絵画風画像を、後日、フラッシュメモリ２４から読み出して、液晶モニタ４に表示させて観賞することもできる。

（１）変形例１
本実施の形態においては、図５のステップＳ２０１〜Ｓ２０３において、輪郭内の画像部分を消去して、輪郭のみの線図による絵画風被写体画像を生成するようにした。しかし、輪郭内の画像部分は消去することなく、輪郭を被写体までの距離に応じた太さの線に変換するようにしてもよい。

これにより、輪郭のみを距離の近い順に強調し、かつ輪郭以外の部分は全体画像Ｚと同様にカラーが施されている絵画風画像、つまり前記実施の形態とは異なり墨絵的ではなく、カラー部分を有する異なるアート処理が施された絵画風画像を得ることができる。

（２）変形例２
図９は、変形例２における絵画風変換処理（ステップＳ１０７）の処理手順を示すフローチャートである。

まず、測定距離が１番目に短い被写体画像の輪郭のうち、上部を濃く太い線図３１１aに変換し、下部を濃く細い線図３１１ｂに変換し、さらに、それらの中間部を上部から下部に向かうに従って、太い線図から細い線図に徐々に濃く細くなる中間線図３１１ｃに変換し、かつ、この輪郭内の画像部分を消去する（ステップＳ３０１）。これにより、図１０に示すように、輪郭のみが、上部が濃く太い線図３１１a、下部が濃く細い線図３１１ｂ、それらの中間部が太い線図から細い線図に徐々に濃く細くなる中間線図３１１ｃで描画された「Ａ山」の絵画風被写体画像３２が生成される。

次に、同様に、測定距離が２番目に短い被写体画像の輪郭のうち、上部をやや薄い太い線図（１番目よりは細いが３番目よりは太い線図）３３１aに変換し、下部をやや薄い細い線図３３１ｂに変換し、さらに、それらの中間部を上部から下部に向かうに従って、太い線図から細い線図に徐々にやや薄く細くなる中間線図３３１ｃに変換し、かつ、この輪郭内の画像部分を消去する（ステップＳ３０２）。これにより、図１０に示すように、輪郭のみが、上部がやや薄い太い線図３１１a、下部がやや薄い細い線図３１１ｂ、それらの中間部が太い線図から細い線図に徐々にやや薄く細くなる中間線図３１１ｃで描画された「Ｂ山」の絵画風被写体画像３４が生成される。

さらに、同様に、測定距離が３番目に短い被写体画像の輪郭のうち、上部を薄く細い線図（２番目よりは細いが４番目よりは太い線図）３５１aに変換し、下部を薄く細い線図３５１ｂに変換し、さらに、それらの中間部を上部から下部に向かうに従って、太い線図から細い線図に徐々に薄く細くなる中間線図３５１ｃに変換し、かつ、この輪郭内の画像部分を消去する（ステップＳ３０３）。これにより、図１０に示すように、輪郭のみが、上部が薄い太い線図３１１a、下部が薄い細い線図３１１ｂ、それらの中間部が太い線図から細い線図に徐々に薄く細くなる中間線図３１１ｃで描画された「Ｃ山」の絵画風被写体画像３６が生成される。

以下同様にして、被写体画像の測定距離が大きくなるほど、輪郭を細い線図に変換して下部を薄く描画し、かつ、変換した輪郭内の画像部分を消去する。

そして、全ての被写体画像を輪郭のみの絵画風被写体画像に変換したならば、各絵画風被写体画像３２、３４、３６・・・を合成する（ステップＳ３０４）。

これにより、第４記憶部２２７には、図１０に示すように、「Ａ山」の絵画風被写体画像３２と、「Ｂ山」の絵画風被写体画像３４及び「Ｃ山」の絵画風被写体画像３６を、図６に示す全体画像Ｚにおける「Ａ山」、「Ｂ山」、「Ｃ山」に対応した位置に配置した絵画風画像Ｐ２が生成される。

この表示される絵画風画像Ｐ２にあっては、各被写体までの距離に応じて各被写体の輪郭が異なる太さで、かつ、濃淡の線図のみで描かれ、しかも被写体画像の下部が薄く、上部が濃く描画された絵画風画像である。したがって、被写体画像である「Ａ山」、「Ｂ山」、「Ｃ山」の下部が薄く、上部が濃く描画されていることにより、より水墨画的な画風となる絵画風画像を生成して、観賞することができる。

（３）変形例３
図１１は、変形例２における絵画風変換処理（ステップＳ１０７）の処理手順を示すフローチャートである。

まず、測定距離が１番目に短い被写体画像の輪郭を、深い青色（濃い青色）であって太い線図４１に変換し、かつ、この深い青色（濃い青色）であって太い線図４１に変換した輪郭内の画像部分を消去する（ステップＳ４０１）。これにより、図１２に示すように、輪郭のみが深い青色（濃い青色）であって太い線４１で描かれた「Ａ山」の絵画風被写体画像３２が生成される。

次に、測定距離が２番目に短い被写体画像の輪郭を、やや深い青色（１番目よりは濃いが３番目よりは薄い青色）であって普通の太い線図（１番目よりは細いが３番目よりは太い線図）４３に変換し、かつ、このやや深い青色であって普通の太い線図４３に変換した輪郭内の画像部分を消去する（ステップＳ４０２）。これにより、図１２に示すように、輪郭のみが普通のやや深い青色であて太い線４３で描かれた「Ｂ山」の絵画風被写体画像３４が生成される。

さらに、測定距離が３番目に短い被写体画像の輪郭を、薄い青色（２番目よりは濃いが４番目よりは薄い青色）であって細い線図（２番目よりは細いが４番目よりは太い線図）４５に変換し、かつ、この薄い青色であって細い線図４５に変換した輪郭内の画像部分を消去する（ステップＳ４０３）。これにより、図１２に示すように、輪郭のみが薄い青色であって細い線４５で描かれた「Ｃ山」の絵画風被写体画像３６が生成される。

以下同様にして、被写体画像の測定距離が大きくなるほど、輪郭を薄い青色であって細い線図に変換し、かつ、変換した輪郭内の画像部分を消去する。

そして、全ての被写体画像を輪郭のみの絵画風被写体画像に変換したならば、各絵画風被写体画像３２、３４、３６・・・を合成する（ステップＳ４０４）。

これにより、第４記憶部２２７には、図１２に示すように、「Ａ山」の絵画風被写体画像３２と、「Ｂ山」の絵画風被写体画像３４及び「Ｃ山」の絵画風被写体画像３６を、図６に示す全体画像Ｚにおける「Ａ山」、「Ｂ山」、「Ｃ山」に対応した位置に配置した絵画風画像Ｐ３が生成される。

この表示される絵画風画像Ｐ３にあっては、各輪郭のうち、近い輪郭は深い青色であって太線で、遠い輪郭に向かうに従って薄くかつ細い青色になるように描画されている。したがって、遠近感のある洋画的な画風となる絵画風画像を生成して、観賞することができる。

なお、この変形例においては、線図の色として青色を用いるようにしたが、用いる色はこれに限ることなく、被写体画像の色を考慮して適宜選択すればよい。また、線図における線の太さは変化させることなく、色の濃さのみを変化させるようにしてもよい。

（４）変形例４
変形例３においては、図１１のステップＳ４０１〜Ｓ４０３において、輪郭内の画像部分を消去して、輪郭のみの線図による絵画風被写体画像を生成するようにした。しかし、輪郭内の画像部分は消去することなく、輪郭を被写体までの距離に応じた濃さの青色であって太さの線に変換するようにしてもよい。

これにより、輪郭のみを距離の近い順に強調し、かつ輪郭以外の部分は全体画像Ｚと同様にカラーが施されている洋画風の絵画風画像を得ることができる。

（５）変形例５
前記実施の形態及び変形例１〜４においては、各被写体画像を線図に変換するようにしたが、各被写体画像を異なる第１および第２の作風または画家風の絵画風画像に変換するようにしてもよい。

例えば、被写体距離が最も短い被写体画像は日本画風またはゴッホ風の絵画風画像、これより遠い被写体画像は洋画風またはモネ風の絵画風画像、更に遠い被写体画像は水墨画風またはマチス風の絵画風画像に変換する。

または、図１３に示すように、被写体距離が最も短い人物の被写体画像Ｙは日本画風またはゴッホ風の絵画風画像、これより遠い山々の被写体画像３１，３３、３５は水墨画風またはマチス風の絵画風画像に変換する。

これら被写体画像の画家風画像への変換は、例えば、特開２００４−２１３５９８号に開示されている技術を採用することにより、予めＲＯＭ２３にゴッホ、モネ、マチスの画像である画家画像の色彩や筆触を抽出して、それを被写体画像に付与し、絵画風画像に変換する。絵画風画像への変換は、被写体画像を画家画像の色彩に疑似させる手順と、画家画像から、その筆触特徴を抽出する手順と、色彩を疑似させた画像からテクスチャの方向や強さを解析する手順と、解析結果に基づいて抽出した筆触を配置する手順と、を含む。

色彩を疑似させる手順は、画家画像から代表的な色の集合を作成し、また被写体画像からも代表的な色の集合を作成する。前記色の集合の作成とは、色彩情報を色空間上にプロットし、画像に使用されているすべての色の中から多く使用されているものを選択し取り出すことである。被写体画像の色集合と、画家画像の色集合を比較し、疑似化して再彩色を行う事で、被写体画像を、色彩を模した絵画風画像に変換する。しかる後に、絵画風画像に変換した絵画風被写体画像を前述のように合成すればよい。

この変形例５によれば、１枚の絵画に複数の作風、画風または画家の特徴が盛り込まれた斬新な絵画風画像を得ることができる。

なお、本実施の形態においては、本発明をデジタルカメラに適用した場合を示したが、デジタルカメラに限らず、撮影手段を備えるものであれば携帯電話等の他の機器に適用するようにしてもよい。

１ デジタルカメラ
４ 液晶モニタ
８ シャッターキー
１０ ＣＣＤ
１１ ＣＰＵ
１２ 撮像レンズ
１３ フォーカスレンズ
１５ 駆動機構
１６ ＡＦドライバー
１７ 駆動部
１８ ＴＧ
１９ Ｖドライバー
２０ ユニット回路
２１ 操作キー部
２２ ＲＡＭ
２３ ＲＯＭ
２４ フラッシュメモリ

Claims (14)

1. 複数の被写体を含む画像を撮影する撮影手段と、
   この撮影手段により撮影された画像を全体画像として記憶する第１の記憶手段と、
   前記撮影手段により撮影された画像に含まれている複数の被写体を被写体画像としてそれぞれ記憶する第２の記憶手段と、
   前記撮影手段により撮影される画像に含まれている複数の被写体までの距離を被写体毎に測定する測距手段と、
   この測距手段により測定された複数の被写体毎の距離と前記第２の記憶手段に記憶された複数の被写体画像とをそれぞれ対応づけて記憶する第３の記憶手段と、
   前記第２の記憶手段に対応付けて記憶されている複数の被写体画像に対し、前記第３の記憶手段に記憶されている複数の被写体画像毎の距離に応じて、予め定められている絵画変換処理を行う絵画変換処理手段と、
   この絵画変換処理手段により絵画変換処理された複数の絵画風被写体画像を、前記第１の記憶手段に記憶されている全体画像における複数の被写体の対応する位置に各々配置して、合成する絵画合成処理手段と
   を備えたことを特徴とする画像処理装置。
2. 前記第２の記憶手段に記憶された複数の被写体画像毎の輪郭を抽出する輪郭抽出手段を更に備え、
   前記絵画変換処理手段は、前記第３の記憶手段に記憶された複数の被写体毎の距離に応じて、前記輪郭抽出手段により抽出された複数の被写体画像の輪郭を異なる形態の線図に変換する線図変換処理手段を有していることを特徴とする請求項１記載の画像処理装置。
3. 前記線図変換処理手段は、前記被写体の距離が遠いほど、前記被写体画像の輪郭を細い線図に変換し、前記被写体の距離が近いほど、前記被写体画像の輪郭を太い線図に変換することを特徴とする請求項２記載の画像処理装置。
4. 前記線図変換処理手段は、前記被写体の距離が遠いほど、前記被写体画像の輪郭の上部を細い線図に変換し、前記被写体の距離が近いほど、前記被写体画像の輪郭の上部を太い線図に変換するとともに、前記被写体画像の輪郭の下部を前記変換された太さの線図よりも細い線図に変換することを特徴とする請求項２記載の画像処理装置。
5. 前記線図変換処理手段は、前記被写体の距離が遠いほど、前記被写体画像の輪郭を薄い色の線図に変換し、前記被写体の距離が近いほど、前記被写体画像の輪郭を濃い色の線図に変換することを特徴とする請求項２記載の画像処理装置。
6. 前記線図変換処理手段は、前記被写体の距離が遠いほど、前記被写体画像の輪郭を細い線図であって薄い色の線図に変換し、前記被写体の距離が近いほど、前記被写体画像の輪郭を太い線図であって濃い色の線図に変換することを特徴とする請求項２記載の画像処理装置。
7. 前記線図変換処理手段は、前記輪郭抽出手段により抽出された複数の被写体画像の輪郭を異なる形態の線図に変換するとともに、前記被写体画像の輪郭以外の部分を消去することを特徴とする請求項２から６にいずれか記載の画像処理装置。
8. 前記絵画変換処理手段は、前記第３の記憶手段に記憶された複数の被写体毎の距離に応じて、前記輪郭抽出手段により抽出された複数の被写体画像を異なる作風または画家風の絵画風画像に変換することを特徴とする請求項１記載の画像処理装置。
9. 前記絵画合成処理手段により合成された絵画風画像を表示する表示手段を備えることを特徴とする請求項１から８にいずれか記載の画像処理装置。
10. 前記絵画合成処理手段により合成された絵画風画像を記憶する第４の記憶手段を備えることを特徴とする請求項１から９にいずれか記載の画像処理装置。
11. 複数の被写体を含む画像を撮影する撮影手段を備える装置が有するコンピュータを、
    前記撮影手段により撮影された画像を全体画像として記憶する第１の記憶手段と、
    前記撮影手段により撮影された画像に含まれている複数の被写体を被写体画像としてそれぞれ記憶する第２の記憶手段と、
    前記撮影手段により撮影される画像に含まれている複数の被写体までの距離を被写体毎に測定する測距手段と、
    この測距手段により測定された複数の被写体毎の距離と前記第２の記憶手段に記憶された複数の被写体画像とをそれぞれ対応づけて記憶する第３の記憶手段と、
    前記第２の記憶手段に対応付けて記憶されている複数の被写体画像に対し、前記第３の記憶手段に記憶されている複数の被写体画像毎の距離に応じて、予め定められている絵画変換処理を行う絵画変換処理手段と、
    この絵画変換処理手段により絵画変換処理された複数の絵画風被写体画像を、前記第１の記憶手段に記憶されている全体画像における複数の被写体の対応する位置に各々配置して、合成する絵画合成処理手段と
    して機能させることを特徴とする画像処理プログラム。
12. 複数の被写体を含む画像を撮影する撮影手段を備える装置における画像処理方法であって、
    前記撮影手段により撮影された画像を全体画像として記憶する第１の記憶ステップと、
    前記撮影手段により撮影された画像に含まれている複数の被写体を被写体画像としてそれぞれ記憶する第２の記憶ステップと、
    前記撮影手段により撮影される画像に含まれている複数の被写体までの距離を被写体毎に測定する測距ステップと、
    この測距ステップにより測定された複数の被写体毎の距離と前記第２の記憶ステップで記憶された複数の被写体画像とをそれぞれ対応づけて記憶する第３の記憶ステップと、
    前記第２の記憶ステップで対応付けて記憶されている複数の被写体画像に対し、前記第３の記憶ステップで記憶されている複数の被写体画像毎の距離に応じて、予め定められている絵画変換処理を行う絵画変換処理ステップと、
    この絵画変換処理ステップにより絵画変換処理された複数の絵画風被写体画像を、前記第１の記憶ステップで記憶されている全体画像における複数の被写体の対応する位置に各々配置して、合成する絵画合成処理ステップと
    を含むことを特徴とする画像処理方法。
13. 複数の被写体を撮影する撮影手段と、
    この撮影手段により撮影された撮影画像に含まれている複数の被写体までの距離を被写体毎に測定する測距手段と、
    この測距手段により測定された複数の被写体毎の距離に応じて、当該複数の被写体画像を異なる作風または画家風の絵画風被写体画像に変換処理を行う絵画変換処理手段と、
    この絵画変換処理手段により変換処理された複数の絵画風被写体画像を合成し、この合成された複数の絵画風被写体画像から絵画風画像を作成する絵画合成処理手段と、
    を備えたことを特徴とする画像処理装置。
14. 前記絵画変換処理手段は、前記複数の被写体画像のうちの第１の被写体画像を第１の作風または画家風の絵画風画像に変換し、前記複数の被写体画像のうちの第２の被写体画像を第２の作風または画家風の絵画風画像に変換することを特徴とする請求項１３記載の画像処理装置。