JP2005303991A - 撮像装置、撮像方法、及び撮像プログラム - Google Patents

Abstract

【課題】記録媒体における限られたメモリ量を有効に利用しつつ、より多くの画像を保存する。
【解決手段】撮像装置であって、画像を撮像する撮像部と、撮像部により撮像された画像を予め定められた基準により評価し、評価した結果を評価値として算出する評価値算出部と、評価値算出部により算出された評価値に基づいて、撮像部により撮像された画像に対して画像処理を行う画像処理部と、画像処理部により画像処理が行われた画像を、評価値算出部により算出された評価値に対応付けて保存する保存部とを備える撮像装置を提供する。
【選択図】図１

Description

本発明は、撮像装置、撮像方法、及び撮像プログラムに関する。特に本発明は、撮像した画像に対して画像処理を行う撮像装置、撮像方法、及び撮像装置を機能させる撮像プログラムに関する。

近年、デジタルカメラが急速に普及している。デジタルカメラは、銀塩カメラの様に、フィルムを感光させることによって画像を保存するのではなく、半導体メモリ等の記録媒体を用いて、電気的に画像データを保存する。ここで、デジタルカメラにおいて用いられる半導体メモリ等の記録媒体は、画像データの保存や削除を繰り返し行うことができる反面、一般的なフィルムに比べて高価である。

近年、デジタルカメラにおいて用いることのできる記録媒体のメモリ量は増加しているが、デジタルカメラが有するＣＣＤの画素数の増加などにより、画像データのサイズも大きくなっており、多くの利用者は、記録媒体における残りのメモリ量に配慮しながら、デジタルカメラを利用している。

また、デジタルカメラにおいて、被写体が人物である場合に、被写体の表情を認識することにより、撮像された画像のうち、例えば、被写体が笑っている表情の画像のみを記録媒体に保存する技術が公開されている（例えば、特許文献１参照。）。この技術を用いることで、記録媒体のメモリ量に空きが無くなることにより、撮像した画像を保存できなくなる、という問題を低減させることができる。
特開２００２−２４２２９

被写体が笑っている等の条件を満たさない画像のすべてが、利用者にとって価値の無い画像であるとは限らないので、利用者が当該画像を利用したいと考えることは十分にあり得るが、記録媒体に保存されていない場合、その画像を利用することはできず、利便性が低下していた。

そこで本発明は、上記の課題を解決することができる撮像装置、撮像方法、及び撮像プログラムを提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。

上記課題を解決するために、本発明の第１の形態においては、撮像装置であって、画像を撮像する撮像部と、撮像部により撮像された画像を予め定められた基準により評価し、評価した結果を評価値として算出する評価値算出部と、評価値算出部により算出された評価値に基づいて、撮像部により撮像された画像に対して画像処理を行う画像処理部とを備える。当該撮像装置は、画像処理部により画像処理が行われた画像を、評価値算出部により算出された評価値に対応付けて保存する保存部を更に備えてもよい。

当該撮像装置は、保存部によって利用可能なメモリ量が、予め定められた基準値より少ないか否かを検出するメモリ量検出部を更に備え、画像処理部は、更に、保存部によって利用可能なメモリ量が予め定められた基準値より少ないと検出された場合に、保存部によって保存されている画像に対応付けられた評価値に基づいて、当該画像に対する画像処理を行ってもよい。画像処理部は、評価値算出部により算出された評価値に基づいて決定した圧縮率を用いて、撮像部により撮像された画像に対して画像圧縮処理を行ってもよい。画像処理部は、撮像部により撮像された画像の階調数を、評価値算出部により算出された評価値に基づいて決定した階調数に変更してもよい。画像処理部は、撮像部により撮像された画像の解像度を、評価値算出部により算出された評価値に基づいて決定した解像度に変更してもよい。

撮像部は、動画像を撮像し、評価値算出部は、動画像における少なくとも一部のフレーム画像のそれぞれを予め定められた基準により評価して、当該フレーム画像における評価値を算出し、画像処理部は、算出された評価値に基づいて、動画像に対して画像処理を行ってもよい。画像処理部は、算出された評価値がより高いフレーム画像を、より高い優先度でキーフレームとして用いて、動画像の圧縮処理を行ってもよい。

また、本発明の第２の形態においては、撮像方法であって、画像を撮像する撮像段階と、撮像段階において撮像された画像を予め定められた基準により評価し、評価した結果を評価値として算出する評価値算出段階と、評価値算出段階において算出された評価値に基づいて、撮像段階において撮像された画像に対して画像処理を行う画像処理段階とを備える。当該撮像方法は、画像処理段階において画像処理が行われた画像を、評価値算出段階において算出された評価値に対応付けて保存する保存段階を更に備えてもよい。

また、本発明の第３の形態においては、撮像装置を機能させる撮像プログラムであって、当該撮像装置を、画像を撮像する撮像部と、撮像部により撮像された画像を予め定められた基準により評価し、評価した結果を評価値として算出する評価値算出部と、評価値算出部により算出された評価値に基づいて、撮像部により撮像された画像に対して画像処理を行う画像処理部として機能させる。当該撮像装置は、画像処理部により画像処理が行われた画像を、評価値算出部により算出された評価値に対応付けて保存する保存部を更に備えてもよい。

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。

本発明によれば、記録媒体における限られたメモリ量を有効に利用しつつ、より多くの画像を保存することができる。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

図１は、本発明の実施形態に係るデジタルカメラ１０の構成の一例を示すブロック図である。デジタルカメラ１０は、本発明における撮像装置の一例であり、被写体の画像を撮像する。デジタルカメラ１０は、撮像部１００、１次メモリ１１０、撮像制御部１２０、評価値算出部１３０、画像処理部１４０、表示部１５０、２次メモリ１６０、及びメモリ量検出部１７０を備える。なお、デジタルカメラ１０は、静止画像及び動画像の何れを撮像してもよい。但し、以降の説明においては、主に、デジタルカメラ１０が、静止画像を撮像する例を用いる。

本発明の実施形態に係るデジタルカメラ１０は、撮像した画像を予め定められた基準により評価し、評価の低い画像、即ち、利用者にとって重要度が低いと判断された画像に対して、例えば、他の画像より高い圧縮率を用いて画像圧縮処理を行うことにより、当該画像のデータ量をより小さくして、多くの画像を２次メモリ１６０に保存できるようにすることを目的とする。

撮像部１００は、光学系１０２、ＣＣＤ１０４、及び撮像信号処理部１０６を有し、被写体の画像を撮像する。光学系１０２は、例えばフォーカスレンズやズームレンズ等を含み、被写体像をＣＣＤ１０４の受光面上に結像する。ＣＣＤ１０４は、複数の受光素子を含み、光学系１０２により受光面に結像された被写体の光学像によって各受光素子に蓄積された電荷を、アナログの電圧信号として撮像信号処理部１０６に出力する。

撮像信号処理部１０６は、ＣＣＤ１０４から受け取った、被写体像を示すアナログの電圧信号を、Ｒ、Ｇ、及びＢの各成分に分解する。そして、撮像信号処理部１０６は、Ｒ，Ｇ、及びＢの各成分に分解されたアナログ信号をＡ／Ｄ変換し、その結果得られた被写体像を示すデジタルの画像データを１次メモリ１１０に出力する。１次メモリ１１０は、例えばＤＲＡＭ等の揮発性メモリであり、撮像信号処理部１０６が出力したデジタルの画像データを格納する。撮像制御部１２０は、撮像部１００に含まれる機構部材を駆動することにより、被写体を示す画像の撮像を制御する。例えば、撮像制御部１２０は、露出度、ホワイトバランス、ズーム動作、及び絞り動作等を制御する。

評価値算出部１３０は、１次メモリ１１０に格納されたデジタルの画像データを、予め定められた基準により評価し、評価した結果を評価値として算出する。ここで、評価値とは、デジタルカメラ１０の利用者にとって、その画像がどの程度重要であると判断されたかを示す指標であり、例えば、より高い評価値を示す画像は、利用者にとって、より重要であると判断されたことを示す。また、予め定められた基準とは、具体的には、主要被写体である人の表情等であり、より具体的には、主要被写体である人が笑っている表情の画像は、怒っている表情の画像よりも高い評価値を示す、といったものである。そして、評価値算出部１３０は、算出した評価値を画像処理部１４０に出力する。

画像処理部１４０は、１次メモリ１１０に格納された画像データに対して画像処理を行う。ここで、画像処理とは、例えば、ＹＣ変換処理、ＪＰＥＧ（ＪｏｉｎｔＰｈｏｔｏｇｒａｐｈｉｃＣｏｄｉｎｇＥｘｐｅｒｔｓＧｒｏｕｐ）等のデータ圧縮処理、及びＮＴＳＣやＰＡＬ等のビデオ信号への変換処理である。また、画像処理部１４０は、当該画像データについて評価値算出部１３０により算出された評価値に基づいて画像処理を行う。具体的には、画像処理部１４０は、算出された評価値が低い画像に対して、当該画像のデータ量を削減するべく、画像処理を行う。そして、画像処理部１４０は、画像処理を行った画像データを表示部１５０に出力する。また、画像処理部１４０は、画像処理を行った画像データと当該画像データにおける評価値とを対応付けて、２次メモリ１６０に出力する。

表示部１５０は、例えば液晶パネルを用いた電子ビューファインダー等の表示装置であり、画像処理部１４０から受け取った画像データを表示して、利用者に提供する。２次メモリ１６０は、例えばフラッシュメモリ等の不揮発性メモリであり、画像処理部１４０により画像処理が行われた画像データを、評価値算出部１３０により算出された評価値に対応付けて保存する。２次メモリ１６０は、本発明における保存部の一例である。メモリ量検出部１７０は、２次メモリ１６０によって利用可能なメモリ量を２次メモリ１６０から取得することにより、利用可能なメモリ量が予め定められた基準値より少ないか否かを検出し、検出結果を画像処理部１４０に出力する。

本実施形態に係るデジタルカメラ１０によれば、撮像部１００により撮像された画像のうち、利用者にとっての重要度が低いと判断された画像におけるデータ量を削減するべく画像処理を行うことにより、２次メモリ１６０における限られたメモリ量を有効に利用して、より多くの画像を保存することができる。
また、本実施形態に係るデジタルカメラ１０によれば、算出された評価値が低い画像であっても、削除するのではなく、データ量を小さくして保存しておくことにより、後に利用者がその画像を必要とした場合に利用することができ、利便性が向上する。

図２は、本発明の実施形態に係る評価値算出部１３０により算出された評価値の一例を示す。また、図３は、本発明の実施形態に係る評価値算出部１３０により算出された評価値の他の例を示す。評価値算出部１３０は、撮像部１００により撮像された画像における評価値を算出する場合に、多様な算出基準又は算出方法を用いることができる。評価値算出部１３０は、撮像された画像に対して画像処理を行った結果に基づいて、評価値を算出する。ここで、評価値算出部１３０は、撮像された画像から精度の高い評価値、即ち、利用者にとっての当該画像に対する重要度をより正確に反映した評価値を算出するために、撮像された画像における主要被写体を正確に検出し、その結果に基づいて評価値の算出基準や算出方法を決定することが望ましい。

例えば、評価値算出部１３０は、撮像された画像に対してエッジ抽出処理を行うことにより、画像内に存在する複数の被写体のそれぞれを示す領域を検出する。そして、評価値算出部１３０は、それぞれの被写体を示す領域に対してパターンマッチングを行うか、又は撮像された画像におけるそれぞれの被写体を示す領域の色分布において肌色が含まれている割合に基づいて、人物である被写体を検出する。そして、評価値算出部１３０は、検出された被写体を示す領域の大きさが予め定められた基準値以上である場合に、当該被写体を主要被写体として検出する。ここで、複数の被写体が主要被写体として検出された場合、評価値算出部１３０は、例えば、被写体を示す領域が最も大きい、つまりデジタルカメラ１０に最も近い位置に存在している被写体のみを主要被写体として検出してもよい。

また、例えば、評価値算出部１３０は、利用者の指示に基づいて、主要被写体を検出してもよい。具体的には、利用者が、電子ビューファインダー等の画面に表示された画像を見ながら、画面内の何れの位置に主要被写体が存在するかをデジタルカメラ１０に設けられた指示手段を用いて指示した場合に、評価値算出部１３０は、指示された内容に基づいて、撮像された画像に含まれる複数の被写体のうち、何れの被写体が主要被写体であるかを検出してよい。

また、例えば、評価値算出部１３０は、デジタルカメラ１０の動作モードに基づいて、主要被写体を検出してもよい。具体的には、評価値算出部１３０は、デジタルカメラ１０の動作モードがポートレイトモードである場合には、撮像された画像の中央付近に存在する被写体を主要被写体として検出してよい。
以下、評価値算出部１３０における評価値の算出基準及び算出方法について、例を挙げて説明する。

そして、評価値算出部１３０は、主要被写体が人物である場合に、主要被写体の表情に基づいて評価値を算出する。具体的には、評価値算出部１３０は、主要被写体の画像から、パターンマッチング等の方法を用いて、顔部分の画像を抽出する。そして、評価値算出部１３０は、抽出した顔部分の画像において、目や口等の部位毎に、表情の異なる複数のパターンデータを用いてパターンマッチングを行うことにより、主要被写体がどういった表情で撮像されているかを認識する。ここで、評価値算出部１３０は、公知の顔認識技術を用いて顔部分の画像を解析するか、又は、図示しない入力手段を用いて利用者に入力させることにより、主要被写体が何れの人物であるかを認識し、当該人物の目や口等の部位毎に予め作成された、表情の異なるパターンデータを用いることにより、パターンマッチングを行ってもよい。このように、人物毎のパターンデータを用いることにより、より精度の高い表情の認識を行うことができる。そして、評価値算出部１３０は、例えば、怒った表情の画像２１０に対して、笑った表情の画像２００より低い評価値を算出する。また、評価値算出部１３０は、例えば、目を閉じた表情の画像２２０に対して、目の開いた表情の画像２００及び画像２１０より低い評価値を算出する。

また、評価値算出部１３０は、主要被写体が人物である場合に、主要被写体と背景画像に含まれる被写体との位置関係に基づいて、評価値を算出してもよい。具体的には、評価値算出部１３０は、背景画像に含まれる被写体の輪郭形状又は線分を検出し、検出した輪郭形状又は線分と主要被写体との位置関係に基づいて、評価値を算出する。例えば、評価値算出部１３０は、画像２３０の様に、背景画像に含まれる被写体２３５が主要被写体を縦に貫くように位置している、所謂「串刺し」とされる構図である画像に対して、画像２００等の他の画像より低い評価値を算出する。また、例えば、評価値算出部１３０は、画像２４０の様に、水平線等の線分２４５が主要被写体の首の部分を横に貫くように位置している、所謂「首切り」とされる構図である画像に対して、画像２００等の他の画像より低い評価値を算出する。

また、評価値算出部１３０は、画像全体の構図を、例えば三分割法等の基準により評価した結果に基づいて、評価値を算出してもよい。例えば、評価値算出部１３０は、利用者の指示等に基づいて認識した主要被写体であるヨット２５５が、三分割法において好適とされる位置に配置されている、つまり、画像を縦横それぞれに三等分した場合の分割線の交点付近に主要被写体が配置されている画像２５０に対して、主要被写体であるヨット２６５が中央に配置されている画像２６０より高い評価値を算出する。

また、評価値算出部１３０は、撮像された画像においてフォーカスが合っているか否かに基づいて、評価値を算出してもよい。具体的には、評価値算出部１３０は、撮像された画像を示す画像信号を高速フーリエ変換等の方法を用いて複数の周波数成分に分解する。そして、評価値算出部１３０は、複数の周波数成分における高周波成分のレベルがより低い画像に対して、より低い評価値を算出する。

また、評価値算出部１３０は、主要被写体が人物である場合に、赤目が発生しているか否かに基づいて、評価値を算出してもよい。具体的には、評価値算出部１３０は、パターンマッチング等の方法を用いることにより、主要被写体の画像から顔部分の画像を抽出すると共に、顔部分の画像における目を示す領域を検出する。そして、評価値算出部１３０は、撮像された画像における目の部分の色分布に基づいて赤目が発生しているか否かを検出し、赤目が発生している場合には、当該画像に対して低い評価値を算出する。

また、評価値算出部１３０は、主要被写体が人物である場合に、視線方向に基づいて、評価値を算出してもよい。具体的には、評価値算出部１３０は、パターンマッチング等の方法を用いることにより、主要被写体の画像から顔部分の画像を抽出すると共に、顔部分の画像における目を示す領域を検出する。そして、評価値算出部１３０は、撮像された画像における目の部分の画像から、瞳孔中心の位置を検出することにより、主要被写体の視線方向を検出する。そして、評価値算出部１３０は、例えば、主要被写体の視線方向がカメラとは異なる方向を向いている画像について、カメラの方向を向いている画像より低い評価値を算出する。

また、評価値算出部１３０は、撮像された画像の輝度に基づいて、評価値を算出してもよい。具体的には、評価値算出部１３０は、撮像された画像に含まれる画素における輝度の平均値または輝度の分布におけるピーク値等の輝度代表値が、標準的な輝度の範囲として利用者等によって予め定められた範囲から外れている画像に対して、輝度代表値が予め定められた範囲に含まれている画像より低い評価値を算出する。これにより、評価値算出部１３０は、露出オーバーや露出アンダーである画像について、適正な露出である画像より低い評価値を算出することができる。

また、評価値算出部１３０は、主要被写体の輝度に基づいて、評価値を算出してもよい。具体的には、評価値算出部１３０は、撮像された画像のうち、主要被写体である部分に含まれる画素における輝度の平均値等の輝度代表値と、他の部分における輝度代表値との差がより大きい画像に対して、より低い評価値を算出してよい。これにより、逆光で撮像したことによって、主要被写体が背景に比べて非常に暗くなっている画像に対して、巡航で撮像された画像より低い評価値を算出することができる。

また、具体的には、評価値算出部１３０は、撮像された画像のうち、主要被写体である部分に含まれる画像における輝度の分布の大きさに基づいて、評価値を算出してもよい。より具体的には、評価値算出部１３０は、主要被写体である部分に含まれる画像における輝度の標準偏差がより小さい画像に対して、より低い評価値を算出してよい。これにより、撮像時に用いたフラッシュが強すぎることにより、主要被写体の陰影が目立たなくなっている画像に対して、適正な強度のフラッシュを用いて撮像した画像より低い評価値を算出することができる。

また、評価値算出部１３０は、撮像された画像の色バランスに基づいて、評価値を算出してもよい。例えば、評価値算出部１３０は、撮像された画像における画素値の分布が、利用者が好む色バランス等として予め定められた分布により近い画像に対して、より高い評価値を算出してよい。

また、評価値算出部１３０は、主要被写体の種類に基づいて、評価値を算出してもよい。具体的には、利用者等によって被写体の種類毎の重みが予め定められている場合に、評価値算出部１３０は、より大きな重みを示す主要被写体を含む画像に対して、より高い評価値を算出してよい。なお、評価値算出部１３０は、主要被写体を示す画像を、被写体の種類毎に予め定められたパターン画像と比較することにより、当該主要被写体の種類を検出してよい。このようにして、評価値算出部１３０は、被写体の種類についての、利用者の好みに基づいて評価値を算出することができる。

また、評価値算出部１３０は、主要被写体とは異なる他の被写体に基づいて、評価値を算出してもよい。例えば、評価値算出部１３０は、主要被写体が人物である場合に、撮像された画像において検出した人物である被写体のうち、主要被写体とは異なる他の人物である被写体の数がより多い画像に対して、より低い評価値を算出してよい。また、例えば、評価値算出部１３０は、主要被写体が人物である場合に、撮像された画像における、主要被写体とは異なる他の人物である被写体を示す部分がより大きい画像に対して、より低い評価値を算出してよい。以上により、評価値算出部１３０は、主要被写体とは異なる他の人物等の、利用者が余計であると感じる被写体がより目立たない画像に対して、より高い評価値を算出することができる。

以上、評価値算出部１３０における評価値の算出基準及び算出方法について説明したが、評価値の算出基準及び算出方法は、上記内容に限定されず、他の算出基準及び算出方法を用いてもよい。例えば、本例において、評価値算出部１３０は、主要被写体が怒った表情の画像２１０に対して、笑った表情の画像２００より低い評価値を算出したが、これに代えて、画像２００に対して、画像２１０より低い評価値を算出してもよい。また、評価値算出部１３０は、画像２００及び画像２１０の何れに対してより高い評価値を算出するかを、利用者からの指示に基づいて、切り替え可能に制御してもよい。また、本例において、評価値算出部１３０は、評価値を数値として算出したが、これに代えて、Ａ、Ｂ、Ｃ等の、それぞれが評価結果に関して所定の幅を有する、複数の段階の何れかとして評価値を算出してもよい。

一方、画像処理部１４０は、評価値算出部１３０により算出された評価値が低い画像におけるデータ量を削減すべく、多様な方法を用いて画像処理を行うことができる。以下、画像処理部１４０における画像処理方法について、例を挙げて説明する。
画像処理部１４０は、算出された評価値に基づいて決定した圧縮率を用いて、撮像された画像に対して画像圧縮処理を行う。具体的には、画像処理部１４０は、評価値が予め定められた基準値より低い画像に対して、より高い評価値を有する他の画像より高い圧縮率を用いて画像圧縮処理を行うことにより、評価値の低い画像におけるデータ量を削減する。

また、画像処理部１４０は、撮像された画像の階調数を、算出された評価値に基づいて決定した階調数に変更する。具体的には、画像処理部１４０は、評価値が予め定められた基準値より低い画像におけるＲ、Ｇ、及びＢそれぞれの階調数を、例えば８ｂｉｔから５ｂｉｔ又は６ｂｉｔに低下させる処理を行うことにより、当該画像のデータ量を削減する。また、画像処理部１４０は、撮像された画像の解像度を、算出された評価値に基づいて決定した解像度に変更する。具体的には、画像処理部１４０は、評価値が予め定められた基準値より低い画像に対して、例えば画像縮小処理やトリミング処理を行うことにより、当該画像の解像度を低下させて、データ量を削減する。

以上、画像処理部１４０における、評価値の低い画像における画像データ量の削減方法について説明したが、算出された評価値と、画像の圧縮率、階調数、解像度等との対応付けは多様であってよい。例えば、上記の説明においては、画像処理部１４０は、画像における評価値が予め定められた基準値より低い場合に限って、当該画像のデータ量を削減すべく画像処理を行ったが、これに代えて、評価値の値に関わらず画像処理を行ってもよい。この場合、画像処理部１４０は、評価値毎に圧縮率、階調数、解像度等が対応付けて格納されているデータベースを参照することにより、圧縮率等を決定してもよい。

また、画像処理部１４０は、評価値だけでなく、メモリ量検出部１７０により取得された２次メモリ１６０における利用可能なメモリ量に更に基づいて、画像の圧縮率、階調数、解像度等を決定してもよい。具体的には、画像処理部１４０は、算出された評価値が同じ画像であっても、２次メモリ１６０において利用可能なメモリ量が多い場合には、利用可能なメモリ量が少ない場合に比べて、例えば圧縮率を低く設定することにより、画像データの削減量を抑えてもよい。これにより、２次メモリ１６０において多くのメモリが使用できる場合には、より多くの画像を、より高い画質で保存しておくことができる。

また、画像処理部１４０は、算出された評価値に基づいてタグ情報を作成し、２次メモリ１６０において画像データに対応付けて保存させてもよい。例えば、画像処理部１４０は、評価値をタグ情報として用いてよい。これにより、利用者は、画像に対応付けて保存される評価値を参照して、撮像した画像を効率よく管理することができる。また、例えば、画像処理部１４０は、当該画像データをインターネット等のネットワークを介して公開するか否かを、評価値に基づいて決定し、その結果をタグ情報として用いてもよい。利用者がインターネット等において電子アルバム等を公開している場合に、主要被写体である人物の表情や構図が好適な画像のみを公開することにより、品質の高い電子アルバムを容易に作成することができる。

本実施形態に係るデジタルカメラ１０によれば、評価値算出部１３０により算出された評価値に基づいて、画像の圧縮率、階調数、解像度等を決定することにより、利用者にとって重要度が低いと判断された画像に対して、後にその画像を利用できるようにしながら、当該画像のデータ量を効率的に削減することができる。

図４は、本発明の実施形態に係るデジタルカメラ１０における処理の流れの一例を示すフローチャートである。まず、撮像部１００は、被写体の画像を撮像し、画像データを１次メモリ１１０に格納する（Ｓ１０００）。続いて、評価値算出部１３０は、１次メモリに格納されている画像データを予め定められた基準により評価し、評価値を算出する（Ｓ１０１０）。続いて、画像処理部１４０は、算出された評価値に基づいて、撮像された画像に対して画像処理を行う（Ｓ１０２０）。続いて、表示部１５０は、画像処理部１４０により画像処理が行われた画像を表示する（Ｓ１０３０）。ここで、表示部１５０が表示する画像は、画像処理部１４０によって評価値に基づいた画像処理が行われた画像であってよく、また、評価値に基づいた画像処理が行われる前の画像であってもよい。

一方、メモリ量検出部１７０は、２次メモリ１６０によって利用可能なメモリ量が、予め定められた基準値より少ないか否かを検出する（Ｓ１０４０）。ここで、予め定められた基準値とは、２次メモリ１６０における最大利用可能メモリ量のうち、例えば１０％等の予め定められた割合のメモリ量であってよく、また、標準的なサイズ及び画質の画像データを、例えば５枚等の予め定められた枚数だけ保存可能なメモリ量であってもよい。

メモリ量検出部により、２次メモリ１６０によって利用可能なメモリ量が、予め定められた基準値より少ないと検出された場合（Ｓ１０４０：Ｙｅｓ）、画像処理部１４０は、以前に撮像されて２次メモリ１６０により保存されている画像、及び当該画像に対応付けられた評価値を２次メモリ１６０から読み込み、１次メモリ１１０に格納する（Ｓ１０５０）。続いて、画像処理部１４０は、読み込んだ画像に対応付けられた評価値に基づいて、当該画像に対する画像処理を行い、当該画像のデータ量を削減する（Ｓ１０６０）。続いて、画像処理部１４０は、画像処理を行ってデータ量を削減した画像を、２次メモリ１６０に保存されている、対応する画像に差し替えて保存する（Ｓ１０７０）。そして、メモリ量検出部１７０は、２次メモリ１６０により利用可能なメモリ量が基準値より少ないか否かを再度検出する（Ｓ１０４０）。

一方、メモリ量検出部により、２次メモリ１６０によって利用可能なメモリ量が、予め定められた基準値以上であると検出された場合（Ｓ１０４０：Ｎｏ）、２次メモリ１６０は、画像処理部１４０により画像処理が行われた画像を、評価値算出部１３０により算出された評価値に対応付けて保存する（Ｓ１０８０）。

本実施形態に係るデジタルカメラ１０によれば、２次メモリ１６０によって利用可能なメモリ量が少なくなった場合に、保存済みの画像を、当該画像の評価値に基づいて画像処理してデータ量を削減することにより、より多くの画像を撮像して保存しておくことができるので、利用者にとっての利便性が向上する。
また、本実施形態に係るデジタルカメラ１０によれば、撮像された画像を２次メモリ１６０に保存する場合に、当該画像について算出された評価値を当該画像に対応付けて保存することにより、保存した画像に対して評価値に基づく画像処理を行う場合等に、再度評価値の算出処理を行う必要がなく、処理時間を短縮することができる。これにより、デジタルカメラ１０のレスポンスが向上し、利用者にとって利便性が向上する。

以上の説明において、デジタルカメラ１０は静止画像を撮像しているとしたが、これに代えて、デジタルカメラ１０は、動画像を撮像してもよい。この場合、評価値算出部１３０は、撮像された動画像における少なくとも一部のフレーム画像のそれぞれを、図１から図４にかけての説明と同様に、予め定められた基準により評価して、当該フレーム画像における評価値を算出してよい。そして、画像処理部１４０は、評価値算出部１３０によって算出された評価値に基づいて、撮像された動画像に対して画像処理を行ってよい。例えば、画像処理部１４０は、算出された評価値がより高いフレーム画像を含む動画像に対してより低い圧縮率を用いて、動画像の圧縮処理を行ってよい。また、例えば、画像処理部１４０は、２次メモリ１６０に保存する動画像のデータ量を削減するべく、動画像に含まれるフレーム画像のそれぞれを縮小する場合に、算出された評価値がより低いフレーム画像を含む動画像に対してより低い縮小率を用いて、縮小処理を行ってよい。

また、例えば、画像処理部１４０は、撮像された動画像に含まれるフレーム画像のうち、算出された評価値がより高いフレーム画像を、より高い優先度でキーフレームとして用いて、動画像の圧縮処理を行ってよい。これにより、利用者にとって重要度の高いフレーム画像における画質の劣化を最小限に抑えて、品質の高い動画像を記録することができる。

以上のように、デジタルカメラ１０が動画像を撮像する場合であっても、動画像または動画像に含まれるフレーム画像に対する利用者にとっての重要度に基づいて、動画像に対する画像処理を行うことにより、２次メモリ１６０のメモリ量をより有効に利用したり、保存する動画像の品質を向上させたりすることができる。

図５は、本発明の実施形態に係るコンピュータシステム１５００の構成の一例を示すブロック図である。コンピュータシステム１５００は、デジタルカメラ１０に接続されて、デジタルカメラ１０にプログラムやデータをインストールしたり、デジタルカメラ１０から画像データや音声データを取得したりする。コンピュータシステム１５００は、ＣＰＵ１５１０と、ＲＯＭ１５２０と、ＲＡＭ１５３０と、通信インタフェース１５４０と、ハードディスクドライブ１５５０と、フレキシブルディスクドライブ１５６０と、ＣＤ−ＲＯＭドライブ１５７０とを備える。ＣＰＵ１５１０は、ＲＯＭ１５２０及びＲＡＭ１５３０に格納されたプログラムに基づいて動作する。通信インタフェース１５４０は、ネットワークを介してデジタルカメラ１０と通信する。ハードディスクドライブ１５５０は、ＣＰＵ１５１０を動作するプログラムを格納する。

フレキシブルディスクドライブ１５６０は、フレキシブルディスク１６００からデータ又はプログラムを読み取り、ＣＰＵ１５１０及び通信インタフェース１５４０に提供する。ＣＤ−ＲＯＭドライブ１５７０は、ＣＤ−ＲＯＭ１６１０からデータ又はプログラムを読み取り、ＣＰＵ１５１０及び通信インタフェース１５４０に提供する。通信インタフェース１５４０は、フレキシブルディスクドライブ１５６０又はＣＤ−ＲＯＭドライブ１５７０から提供されたデータまたはプログラムをデジタルカメラ１０に送信する。

ＣＰＵ１５１０が実行するプログラム、及びデジタルカメラ１０に提供されるプログラムは、フレキシブルディスク１６００やＣＤ−ＲＯＭ１６１０等の記録媒体に格納されて利用者に提供される。ＣＰＵ１５１０が実行するプログラムは、記録媒体からハードディスクドライブ１５５０にインストールされ、ＲＡＭ１５３０に読み出されてＣＰＵ１５００により実行される。これに代えて、当該プログラムは、記録媒体から直接ＲＡＭ１５３０に読み出されて実行されてもよい。

また、デジタルカメラ１０に提供されるプログラムは、記録媒体から読み出され、通信インタフェース１５４０を介してデジタルカメラ１０にインストールされて、デジタルカメラ１０において実行される。デジタルカメラ１０にインストールされて実行されるプログラムは、デジタルカメラ１０に働きかけて、図１から図４において説明したデジタルカメラ１０の機能を実行させる。

記録媒体としては、フレキシブルディスク及びＣＤ−ＲＯＭの他にも、ＤＶＤ、ＰＤ等の光学記録媒体、ＭＤ等の光磁気記録媒体、テープ媒体、磁気記録媒体、ＩＣカードやミニチュアーカードといった半導体メモリ等を用いることができる。又、専用通信ネットワークやインターネットに接続されたサーバシステムに設けたハードディスクまたはＲＡＭ等の格納装置を記録媒体として使用し、通信網を介して、プログラムをデジタルカメラ１０に提供してもよい。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

本発明の実施形態に係るデジタルカメラ１０の構成の一例を示すブロック図である。 本発明の実施形態に係る評価値算出部１３０により算出された評価値の一例を示す図である。 本発明の実施形態に係る評価値算出部１３０により算出された評価値の他の例を示す図である。 本発明の実施形態に係るデジタルカメラ１０における処理の流れの一例を示すフローチャートである。 本発明の実施形態に係るコンピュータシステム１５００の構成の一例を示すブロック図である。

符号の説明

１０ デジタルカメラ、１００ 撮像部、１１０ １次メモリ、１２０ 撮像制御部、１３０ 評価値算出部、１４０ 画像処理部、１５０ 表示部、１６０ ２次メモリ、１７０ メモリ量検出部

Claims (12)

1. 画像を撮像する撮像部と、
   前記撮像部により撮像された前記画像を予め定められた基準により評価し、評価した結果を評価値として算出する評価値算出部と、
   前記評価値算出部により算出された前記評価値に基づいて、前記撮像部により撮像された前記画像に対して画像処理を行う画像処理部と
   を備える撮像装置。
2. 前記画像処理部により前記画像処理が行われた前記画像を、前記評価値算出部により算出された前記評価値に対応付けて保存する保存部を更に備える請求項１に記載の撮像装置。
3. 前記保存部によって利用可能なメモリ量が、予め定められた基準値より少ないか否かを検出するメモリ量検出部
   を更に備え、
   前記画像処理部は、更に、前記保存部によって利用可能な前記メモリ量が予め定められた前記基準値より少ないと検出された場合に、前記保存部によって保存されている前記画像に対応付けられた前記評価値に基づいて、当該画像に対する画像処理を行う
   請求項２に記載の撮像装置。
4. 前記画像処理部は、前記評価値算出部により算出された前記評価値に基づいて決定した圧縮率を用いて、前記撮像部により撮像された前記画像に対して画像圧縮処理を行う請求項１に記載の撮像装置。
5. 前記画像処理部は、前記撮像部により撮像された前記画像の階調数を、前記評価値算出部により算出された前記評価値に基づいて決定した階調数に変更する請求項１に記載の撮像装置。
6. 前記画像処理部は、前記撮像部により撮像された前記画像の解像度を、前記評価値算出部により算出された前記評価値に基づいて決定した解像度に変更する請求項１に記載の撮像装置。
7. 前記撮像部は、動画像を撮像し、
   前記評価値算出部は、前記動画像における少なくとも一部のフレーム画像のそれぞれを前記予め定められた基準により評価して、当該フレーム画像における前記評価値を算出し、
   前記画像処理部は、算出された前記評価値に基づいて、前記動画像に対して画像処理を行う
   請求項１に記載の撮像装置。
8. 前記画像処理部は、算出された前記評価値がより高い前記フレーム画像を、より高い優先度でキーフレームとして用いて、前記動画像の圧縮処理を行う
   請求項７に記載の撮像装置。
9. 画像を撮像する撮像段階と、
   前記撮像段階において撮像された前記画像を予め定められた基準により評価し、評価した結果を評価値として算出する評価値算出段階と、
   前記評価値算出段階において算出された前記評価値に基づいて、前記撮像段階において撮像された前記画像に対して画像処理を行う画像処理段階と
   を備える撮像方法。
10. 前記画像処理段階において前記画像処理が行われた前記画像を、前記評価値算出段階において算出された前記評価値に対応付けて保存する保存段階を更に備える請求項９に記載の撮像方法。
11. 撮像装置を機能させる撮像プログラムであって、
    当該撮像装置を、
    画像を撮像する撮像部と、
    前記撮像部により撮像された前記画像を予め定められた基準により評価し、評価した結果を評価値として算出する評価値算出部と、
    前記評価値算出部により算出された前記評価値に基づいて、前記撮像部により撮像された前記画像に対して画像処理を行う画像処理部と
    を備えた撮像装置として機能させる撮像プログラム。
12. 当該撮像装置は、前記画像処理部により前記画像処理が行われた前記画像を、前記評価値算出部により算出された前記評価値に対応付けて保存する保存部を更に備えることを特徴とする請求項１１に記載の撮像プログラム。

Images