JP6027745B2 - 画像処理装置 - Google Patents

Description

本発明は、複数の画像データの要不要を自動的に判定する技術に関する。

近年、撮像装置の高解像度化や高速化、フラッシュメモリの大容量化、及び撮像装置内の画像処理回路の高速化や低電力化が進み、高解像度による長時間動画撮影や長時間動画再生が可能になってきている。

しかしながら、撮影時にユーザが意図をもって撮影していない場合や、とりあえず撮り逃しの無いように長時間、動画の撮影を行っている場合などでは、撮影後の複数の画像データに不要な画像データが多く含まれてしまう。すると、後工程としての編集作業や再生作業に大きな負荷がかかり、編集作業や再生作業の効率を下げてしまうおそれがある。例えば、動画像ファイルに不要な動画像フレームが多く含まれていると、目的の動画像フレームを探すために多くの手間や時間がかかったり、動画像ファイルを編集用プログラムや再生用プログラムにロードする際に多くの時間がかかったりしてしまう。

そこで、例えば、編集時や再生時において、複数の画像データのうち、階調変化が少ない画像データを不要な画像データであると判定して、その画像データを自動的に削除する技術がある（例えば、特許文献１〜３参照）。

特開２００８−１８２５４４号公報 特開２００５−２９５２８５号公報 特開２０００−２０９４８３号公報

上述のように、編集時や再生時において、複数の画像データのうち、階調変化が少ない画像データを不要な画像データであると判定して、その画像データを自動的に削除する技術は、画像データの要不要を判定する際にユーザにかかる負荷を軽減することができるが、その画像データ自動削除機能を含む編集用プログラムや再生用プログラムに複数の画像データをロードする必要がやはりあるため、その複数の画像データに不要な画像データが多いと、編集作業や再生作業の効率を低下させてしまう。

そこで、本発明は、複数の画像データの編集作業や再生作業の効率を向上させることを目的とする。

本発明の画像処理装置は、評価方針を生成する評価方針生成部と、当該画像処理装置の電源種別及び電源状態の少なくとも１つを検知する電源状態検知部と、前記評価方針及び前記電源状態検知部の検知結果に基づいて基準特徴データを生成する基準特徴データ生成部と、画像データに対応した特徴データを取得する特徴データ取得部と、前記基準特徴データを保存する基準特徴データ保存部と、前記基準特徴データに基づいて前記特徴データの評価を行う特徴データ評価部と、前記特徴データ評価部によって行われた前記評価に基づいて前記特徴データに対応した画像データの要不要の判定を行なう要不要判定部と、前記要不要の判定に基づいて制御を行なう制御処理部とを備える。

本発明によれば、複数の画像データの編集作業や再生作業の効率を向上させることができる。

本発明の第１実施形態の画像処理装置を示す図である。 第１実施形態の制御処理部の動作の一例を示すフローチャートである。 基準特徴データ保存部に保存されるデータの一例を示す図である。 画像処理装置の周辺装置の一例を示す図である。 画像処理装置の周辺装置の一例を示す図である。 画像処理装置の周辺装置の一例を示す図である。 本発明の第２実施形態の画像処理装置を示す図である。 第２実施形態の基準特徴データ生成部の動作の一例を示すフローチャートである。 基準特徴データ保存部に保存されるデータの一例を示す図である。 第２実施形態の制御処理部の動作の一例を示すフローチャートである。 本発明の第３実施形態の画像処理装置を示す図である。 第２実施形態の基準特徴データ生成部の動作の一例を示すフローチャートである。 基準特徴データ保存部に保存されるデータの一例を示す図である。 本発明の第４実施形態の画像処理装置を示す図である。 第４実施形態の制御処理部の動作の一例を示すフローチャートである。 本発明の第５実施形態の画像処理装置の一例を示す図である。 第５実施形態の基準特徴データ生成部の動作の一例を示すフローチャートである。 基準特徴データ保存部に保存されるデータの一例を示す図である。 基準特徴データ保存部に保存されるデータの一例を示す図である。 本発明の第６実施形態の画像処理装置を示す図である。 要不要判定された画像データの一例を示す図である。 要不要判定された画像データの一例を示す図である。 本発明の第７実施形態の画像処理装置を示す図である。

＜第１実施形態＞

図１は、本発明の第１実施形態の画像処理装置を示す図である。

図１に示す画像処理装置１０は、入力部１１と、処理部１２と、出力部１３と、特徴データ取得部１４と、基準特徴データ保存部１５と、特徴データ評価部１６と、制御処理部１７とを備える。なお、入力部１１と特徴データ取得部１４とを一体に構成してもよい。また、本願における画像処理装置とは、画像データの処理に限定されず、画像の特徴データを用いた画像処理に用いる画像の評価や要不要判定など、画像に関連するデータの処理を意味するものとする。

入力部１１は、画像データ（例えば、動画や複数の静止画）を外部（例えば、外部サーバや撮像装置など）から取得する。

処理部１２は、入力部１１により取得される画像データのうち、制御処理部１７により要判定された画像データに対して、例えば、シャープネス補正、コントラスト補正、輝度・色差信号生成、ホワイトバランス補正、メタデータ付与、トリミング処理などの各種画像処理（制御）を行う。

出力部１３は、処理部１２により各種画像処理された画像データを外部（例えば、表示装置や記録装置など）に出力する。

特徴データ取得部１４は、画像データに対応する特徴データ（例えば、時系列に並ぶ複数の静止画にそれぞれ対応するメタデータ、動画のヘッダデータ、又は、タイムコードで動画のフレームやパケットに対応するデータ）を外部から取得する。

基準特徴データ保存部１５は、基準特徴データを保存する。なお、基準特徴データ保存部１５は、例えば、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、不揮発性メモリ、又はフラッシュメモリなどにより構成され、ハードディスクなど画像処理装置１０に内蔵される記憶媒体であってもよいし、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）、メモリカード、又はＵＳＢメモリなど画像処理装置１０に着脱可能な記憶媒体であってもよい。

特徴データ評価部１６は、基準特徴データに基づいて特徴データの評価を行う。なお、基準特徴データは、例えば、画像データに対するユーザの満足度又は不満度を示すような評価項目によって評価した値とする。例えば、基準特徴データは、特徴データに対応する画像データのボケ、ブレ、暗明、色合い、鮮明度、画角ずれ、非対称、被写体のかぶりなどの評価項目によって評価した値とする。また、画像データに示される被写体が人や動物である場合、基準特徴データは、被写体の眼の開閉、顔の表情、顔の向き、眼の色（ストロボ撮影時の赤目など）などの評価項目によって評価した値とする。例えば、特徴データ評価部１６は、特徴データに対応する画像データ内の輪郭線や焦点の状態により、ブレやボケ、鮮明度などを評価する。また、画像処理装置１０に角速度センサや振動センサなどを備えている場合、シャッタタイミングにおけるそれらセンサの出力値を保存しておき、ブレの評価に用いることができる。また、例えば、特徴データ評価部１６は、画像データ全体の輝度を演算することにより、特徴データに対応する画像データの暗明の評価を行う。また、例えば、特徴データ評価部１６は、画像データ全体の色の傾向を解析することにより、特徴データに対応する画像データの色合いの評価を行う。また、例えば、特徴データ評価部１６は、特徴データに対応する画像データ内のある範囲で極端な焦点ボケの発生を検知することにより、指やストラップなどが撮像レンズにかぶるなどの被写体のかぶりの評価を行う。また、例えば、特徴データ評価部１６は、特徴データに対応する画像データ内の建造物、自然物、人などの垂直性や水平性を解析することにより、画角ずれの評価を行う。また、例えば、特徴データ評価部１６は、特徴データに対応する画像データ内の眼の部分の解析により、眼の開閉の評価を行う。また、例えば、特徴データ評価部１６は、特徴データに対応する画像データと各種表情パターンとの比較を行ったり、眼や口の形状の推定を行うことにより、顔の表情の評価を行う。また、例えば、特徴データ評価部１６は、特徴データに対応する画像データにおいて眼、鼻、口、耳の互いの位置関係や顔の輪郭線などの推定を行うことにより、顔の向きの評価を行う。また、例えば、特徴データ評価部１６は、特徴データと複数の基準特徴データとを比較して、その特徴データを段階的に分類して評価してもよい。また、例えば、特徴データ評価部１６は、特徴データを点数化して評価してもよい。また、例えば、特徴データ評価部１６は、特徴データと各項目にそれぞれ対応する基準特徴データとを比較して、特徴データの評価を各項目毎に行い、それら各項目毎の評価結果に基づいて、特徴データの総合的な評価を行うようにしてもよい。

制御処理部１７は、入力部１１、処理部１２、出力部１３、特徴データ取得部１４、基準特徴データ保存部１５、及び特徴データ評価部１６のそれぞれの動作を制御する。また、制御処理部１７は、要不要判定部１７−１を備える。要不要判定部１７−１は、特徴データ評価部１６の評価結果に基づいて特徴データに対応する画像データの要不要判定を行なう。なお、特徴データ取得部１４、要不要判定部１７−１、及び処理部１２は、例えば、コンピュータとしてのＤＳＰ（Digital Signal Processor）が記録媒体に記録されるプログラムを実行することにより実現されてもよいし、コンピュータとしてのＦＰＧＡ（Field Programmable Gate Array）やＡＳＩＣ（Application Specific Integrated Circuit）などに組み込まれるプログラムが実行されることにより実現されてもよい。また、上記記録媒体は、非一過性の記録媒体であってもよい。その非一過性の記録媒体は、特に限定されないが、例えば ＣＤ−ＲＯＭ等とする。

図２は、第１実施形態の制御処理部１７の動作の一例を示すフローチャートである。

まず、制御処理部１７は、特徴データ取得部１４により複数の画像データのうちの最初の画像データに対応する特徴データを取得させると（Ｓ２１がＹｅｓ）、基準特徴データ保存部１５から基準特徴データを取り出し（Ｓ２２）、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行なわせる（Ｓ２３）。

次に、制御処理部１７の要不要判定部１７−１は、特徴データ評価部１６の評価結果に基づいて取得した特徴データに対応する画像データの要不要判定を行う（Ｓ２４）。

不要判定の場合（Ｓ２４がＮｏ）、制御処理部１７は、特徴データ取得部１４により次の画像データに対応する特徴データを取得させ（Ｓ２５）、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行なわせる（Ｓ２３）。

一方、要判定の場合（Ｓ２４がＹｅｓ）、制御処理部１７は、入力部１１により特徴データに対応する画像データを取得させた後（Ｓ２６）、処理部１２により要判定の画像データに対して各種画像処理を行なわせて（Ｓ２７）、出力部１３によりその画像処理後の画像データを出力させる（Ｓ８）。

そして、Ｓ２３で評価した特徴データに対応する画像データが複数の画像データのうちの最後の画像データでないと判断した場合（Ｓ２９がＮｏ）、制御処理部１７は、特徴データ取得部１４により次の画像データに対応する特徴データを取得させて（Ｓ２５）、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行なわせる（Ｓ２３）。

一方、Ｓ２３で評価した特徴データに対応する画像データが複数の画像データのうちの最後の画像データであると判断した場合（Ｓ２９がＹｅｓ）、制御処理部１７は、複数の画像データに対する画像処理を終了する。

例えば、制御処理部１７は、特徴データ取得部１４により取得された特徴データに示される特徴種別が「輝度ヒストグラム」である場合、図３に示す基準特徴データ保存部１５に保存されるデータテーブルから「輝度ヒストグラム」に対応する基準特徴データとして「ピーク位置範囲１０〜２４５」を取り出す。このとき、特徴データ評価部１６において輝度のピーク位置が「ピーク位置範囲１０〜２４５」よりも小さいという評価結果が出力されたとき、要不要判定部１７−１は、その画像データが暗すぎて必要ない画像データであると判断して、その画像データが不要判定である旨の制御データを入力部１１に送る。また、特徴データ評価部１６において輝度のピーク位置が「ピーク位置範囲１０〜２４５」よりも大きいという評価結果が出力されたとき、要不要判定部１７−１は、その画像データが明るすぎて必要ない画像データであると判断して、その画像データが不要判定である旨の制御データを入力部１１に送る。一方、特徴データ評価部１６において輝度のピーク位置が「ピーク位置範囲１０〜２４５」内にあるという評価結果が出力されたとき、要不要判定部１７−１は、その画像データが明るすぎず暗すぎない所望な画像データであると判断して、その画像データが要判定である旨の制御データを入力部１１に送る。

また、例えば、制御処理部１７は、特徴データ取得部１４により取得された特徴データに示される特徴種別が「顔検出数」である場合、図３に示す基準特徴データ保存部１５に保存されるデータテーブルから「顔検出数」に対応する基準特徴データとして「１以上」を取り出す。このとき、特徴データ評価部１６において顔検出数が「１以上」でないと評価結果が出力されたとき、要不要判定部１７−１は、その画像データが不要判定である旨の制御データを入力部１１に送る。一方、特徴データ評価部１６において顔検出数が「１以上」であると評価結果が出力されたとき、要不要判定部１７−１は、その画像データが要判定である旨の制御データを入力部１１に送る。

これにより、入力部１１は、要判定の画像データのみを取得するため、処理部１２や出力部１３の出力先の負荷を低減することができる。なお、第１実施形態や後述する第２〜第７実施形態では画像処理装置１０等を構成する処理部１２により編集作業や再生作業を行わせているが、画像処理装置１０等の外部の画像処理装置の処理部を用いて編集作業や再生作業を行なわせてもよい。

このように第１実施形態の画像処理装置１０によれば、複数の画像データのうち、特徴データ評価部１６の評価結果に基づく画像データのみに対して各種画像処理を行い外部に出力する構成であるため、出力先の編集作業や再生作業の負荷を低減することができ、それら編集作業や再生作業の効率を向上させることができる。

また、第１実施形態の画像処理装置１０によれば、複数の画像データのうち、特徴データ評価部１６の評価結果に基づく画像データのみに対して各種画像処理を行う構成であるため、処理部１２の負荷を低減することができる。

なお、画像処理装置１０は、図４Ａに示すように、通信装置４１、４２を介して撮像装置４３（撮像部）から特徴データを取得してもよい。なお、通信装置４２及び撮像装置４３は、通信機能付きデジタルカメラ、カメラ付き携帯電話、スマートフォン、又は通信機能を有するアダプタを介した撮像装置などにより構成される。この場合、画像処理装置１０は、その特徴データに基づいて、その特徴データに対応する画像データの要不要判定を行い、要判定であった場合、その画像データを撮像装置４３に要求する。そして、画像処理装置１０は、要求した画像データを受信すると、その画像データ対して各種画像処理を行い、画像処理後の画像データを表示装置４４に送る。すなわち、要不要判定部１７−１は、要判定となった画像データを外部装置である撮像装置４３に要求する。なお、要不要判定部１７−１は、要判定となった画像データを他の外部装置から外部装置である撮像装置４３に画像データを要求させるようにしてもよい。

また、図４Ｂに示すように、撮像装置４３がネットワーク４５に接続されていてもよい。この場合、画像処理装置１０は、通信装置４２及びネットワーク４５を介して撮像装置４３のデータの送受信を行う。

また、図４Ｃに示すように、画像処理装置１０は、撮像装置４６（撮像部）を備えてもよい。この場合、画像処理装置１０は、撮像装置４６から送られてくる特徴データに基づいて、その特徴データに対応する画像データの要不要判定を行い、要判定であった場合、その画像データを撮像装置４６に要求する。そして、画像処理装置１０は、要求した画像データを受信すると、その画像データ対して各種画像処理を行い、画像処理後の画像データを表示装置４４に送る。また、この場合、特徴データ評価部１６は、外部の状況によって基準特徴データ保存部１５から取り出すべき基準特徴データの見直しを行なってもよい。
＜第２実施形態＞

図５は、本発明の第２実施形態の画像処理装置を示す図である。なお、図１に示す構成と同じ構成には同じ符号を付しその説明を省略する。

図５に示す第２実施形態の画像処理装置５０において、図１に示す第１実施形態の画像処理装置１０と異なる点は、電源状態検知部５１（状態検知部）と、評価方針生成部５２と、基準特徴データ生成部５３と、送信部５４と、受信部５５とをさらに備えている点である。

電源状態検知部５１は、画像処理装置５０の電源種別や電源状態を逐次検知する。例えば、電源状態検知部５１は、画像処理装置５０の電源種別として「ＡＣ電源」又は「ＤＣ電源」を検知したり、電源状態として「ＤＣ電源の残容量」を検知したりする。なお、電源状態検知部５１は、ＤＣ電源の予想残時間、電流、電圧値などの電源状態について、瞬間値、過去の一定期間内の平均値として検知する。又は、過去の電源状態すべてをタイムスタンプとともに検知してもよい。ＡＣ電源は商用電源などの供給量に制限が無い電源であり、ＤＣ電源はバッテリー（蓄電池）などの残量や使用量に制限のある電源などを示す。

評価方針生成部５２は、電源状態検知部５１が動作していることを検知すると、電源に関する評価方針を生成する。例えば、評価方針生成部５２は、画像処理装置５０の電源種別が「ＤＣ電源」であり、電源状態が「ＤＣ電源の残容量：２０％未満」である場合、「解像度がＶＧＡ（６４０×４８０）以下の画像を取得する」という評価方針を生成する。また、例えば、評価方針生成部５２は、画像処理装置５０の電源種別が「ＤＣ電源」であり、電源状態が「ＤＣ電源の残容量：２０％未満」である場合、「Ｘ方向、Ｙ方向の解像度に関わらず、画像領域内の総ピクセル数が６４０×４８０以下となる画像を選択する」という評価方針を生成してもよい。

基準特徴データ生成部５３は、評価方針生成部５２により生成された評価方針及び電源状態検知部５１の検知結果に基づいて基準特徴データを生成する。

第２実施形態の要不要判定部１７−１は、特徴データに対応する画像データの要不要判定結果や画像データの識別情報を含む画像取得要求を送信部５４に送る。送信部５４は、要不要判定部１７−１から送られてくる画像取得要求をネットワークを介してサーバ５６に送信する。なお、ネットワークは、例えば、インターネット、ＬＡＮ、オンチップネットワークのほか、ＵＳＢやＰＣＩなどのインタフェースでもよい。すなわち、要不要判定部１７−１は、要判定となった画像データを外部装置であるサーバ５６に要求する。なお、要不要判定部１７−１は、要判定となった画像データを他の外部装置からサーバ５６に画像データを要求させるようにしてもよい。

サーバ５６は、受信部５７と、選択部５８と、保存部５９と、送信部６０とを備える。

受信部５７は、画像処理装置５０から送信される画像取得要求を受信する。

選択部５８は、受信した画像取得要求に示される識別情報に対応する画像データを保存部５９に保存される複数の画像データの中から取り出す。

送信部６０は、選択部５８により取り出された画像データをネットワークを介して画像処理装置５０に送信する。

画像処理装置５０の受信部５５は、サーバ５６から送信される画像データを受信する。

第２実施形態の入力部１１は、受信部５５により受信される画像データを処理部１２に送る。

図６は、基準特徴データ生成部５３の動作の一例を示すフローチャートである。

基準特徴データ生成部５３は、評価方針生成部５２により生成された評価方針及び電源状態検知部５１の検知結果に基づいて、基準特徴データを生成した後（Ｓ６１）、その生成した基準特徴データを基準特徴データ保存部１５に保存する（Ｓ６２）。

例えば、評価方針生成部５２などにより生成される評価方針として、図７に示すデータテーブルを不図示の記憶部に予め記憶しておく。基準特徴データ生成部５３は、電源状態検知部５１により検知された画像処理装置５０の電源種別が「ＤＣ電源」であり、電源状態が「ＤＣ電源の残容量：１８％」である場合、図７に示すデータテーブルから電源種別が「ＤＣ電源」、電源状態が「ＤＣ電源の残容量：２０％以下」に対応する基準特徴データとして「解像度：６４０×４８０以下」を取り出し基準特徴データ保存部１５に保存する。また、基準特徴データ生成部５３は、電源状態検知部５１により検知された画像処理装置５０の電源種別が「ＤＣ電源」であり、電源状態が「ＤＣ電源の残容量：３４％」である場合、図７に示すデータテーブルから電源種別が「ＤＣ電源」、電源状態が「ＤＣ電源の残容量：２０％以上」に対応する基準特徴データとして「解像度：１２８０×９６０以下」を取り出し基準特徴データ保存部１５に保存する。また、基準特徴データ生成部５３は、電源状態検知部５１により検知された画像処理装置５０の電源種別が「ＡＣ電源」である場合、図６に示すデータテーブルから電源種別が「ＡＣ電源」に対応する基準特徴データとして「解像度：無制限」を取り出し基準特徴データ保存部１５に保存する。すなわち、基準特徴データ生成部５３は、使用可能な電源容量が規定値以下である低エネルギー状態であるとき、非低エネルギー状態と比較して、取得する画像データのデータ量が少なくなるように、基準特徴データを生成する。

図８は、第２実施形態の制御処理部１７の動作の一例を示すフローチャートである。

まず、制御処理部１７は、特徴データ取得部１４により複数の画像データのうちの最初の画像データに対応する特徴データを取得させると（Ｓ８１）、基準特徴データ保存部１５から基準特徴データを取り出し（Ｓ８２）、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行なわせる（Ｓ８３）。

次に、制御処理部１７の要不要判定部１７−１は、特徴データ評価部１６の評価結果に基づいて取得した特徴データに対応する画像データの要不要判定を行う（Ｓ８４）。

不要判定の場合（Ｓ８４がＮｏ）、制御処理部１７は、特徴データ取得部１４により次の画像データに対応する特徴データを取得させて（Ｓ８５）、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行なわせる（Ｓ８３）。

一方、要判定の場合（Ｓ８４がＹｅｓ）、制御処理部１７は、送信部５４により画像取得要求をサーバ５６に送信させるとともに（Ｓ８６）、受信部５５により画像取得要求に対応する画像データを受信させた後（Ｓ８７）、処理部１２によりその画像データに対して各種画像処理を行なわせて（Ｓ８８）、出力部１３によりその画像処理後の画像データを出力させる（Ｓ８９）。

そして、Ｓ８３で評価した特徴データに対応する画像データが複数の画像データのうちの最後の画像データでないと判断した場合（Ｓ９０がＮｏ）、制御処理部１７は、特徴データ取得部１４により次の画像データに対応する特徴データを取得させて（Ｓ８５）、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行なわせる（Ｓ８３）。

一方、Ｓ８３で評価した特徴データに対応する画像データが複数の画像データのうちの最後の画像データであると判断した場合（Ｓ９０がＹｅｓ）、制御処理部１７は、複数の画像データに対する画像処理を終了する。

例えば、制御処理部１７は、電源状態検知部５１により検知された画像処理装置５０の電源種別が「ＤＣ電源」であり、電源状態が「ＤＣ電源の残容量：１８％」である場合、基準特徴データ保存部１５から基準特徴データとして「解像度：６４０×４８０以下」を取り出す。このとき、特徴データ評価部１６において特徴データに対応する画像データの解像度が「６４０×４８０」以下であるという評価結果が出力されると、要不要判定部１７−１は、その画像データを要判定とする。

一方、特徴データ評価部１６において特徴データに対応する画像データの解像度が「６４０×４８０」よりも大きいという評価結果が出力されたとき、要不要判定部１７−１は、その画像データを不要判定とする。

これにより、複数の画像データのうち、特徴データ評価部１６の評価結果に基づく画像データのみを処理部１２や出力部１３の出力先に送ることができるため、処理部１２や出力部１３の出力先の負荷を低減することができる。
＜第３実施形態＞

図９は、本発明の第３実施形態の画像処理装置を示す図である。なお、図４に示す構成と同じ構成には同じ符号を付しその説明を省略する。

図９に示す第３実施形態の画像処理装置９０において、図５に示す第２実施形態の画像処理装置５０と異なる点は、電源状態検知部５１の代わりに接続状態判定部９１（状態検知部）を備えている点である。

接続状態判定部９１は、画像処理装置９０の送信部５４や受信部５５から、ネットワークへの接続状態（接続又切断など）、ネットワークの種別（有線又は無線など)、ネットワークの規格（IEEE802.3abやIEEE802.11nなど）、ネットワークトラフィックに関する情報などをネットワーク情報として取得し、評価方針生成部５２及び基準特徴データ生成部５３にそれぞれ出力する。

第３実施形態の評価方針生成部５２は、接続状態判定部９１が動作していることを検知すると、ネットワーク情報に関する評価方針を生成する。例えば、第３実施形態の評価方針生成部５２は、ネットワーク種別が「有線」であり、ネットワーク占有率（ネットワークトラフィック量の上限に対する現在のネットワークトラフィック量の割合）が「５０％以上」である場合、「解像度がＶＧＡ（６４０×４８０）以下の画像を取得する」という評価方針を生成する。また、評価方針生成部５２は、複数の基準特徴データを組み合わせてもよい。すなわち、例えば、評価方針生成部５２は、ネットワーク種別が「無線」であり、ネットワーク占有率が「８０％以上」である場合、「解像度がＶＧＡ（６４０×４８０）以下で、かつ、データサイズが２０ＫＢ以下の画像を取得する」という評価方針を生成してもよい。また、評価方針生成部５２は、基準特徴データを組み合わせる際、評価式を用いてもよい。

図１０は、第３実施形態の基準特徴データ生成部５３の動作の一例を示すフローチャートである。

基準特徴データ生成部５３は、評価方針生成部５２により生成された評価方針及び接続状態判定部９１の判定結果（ネットワーク情報）に基づいて、基準特徴データを生成した後（Ｓ１０１）、その生成した基準特徴データを基準特徴データ保存部１５に保存する（Ｓ１０２）。

例えば、評価方針生成部５２などにより生成される評価方針として、図１１に示すデータテーブルを不図示の記憶部に予め記憶しておく。このような場合において、ネットワークの種別が「無線」であり、ネットワークスループットの上限「５０Ｍｂｐｓ」に対する現在のネットワークスループットが「４３．２Ｍｂｐｓ」である場合、接続状態判定部９１は、ネットワークの種別が「無線」であること、及び、ネットワーク占有率が「８６．４％」であることを示すネットワーク情報を出力する。基準特徴データ生成部５３は、接続状態判定部９１から出力されるネットワーク情報が示すネットワークの種別が「無線」であり、ネットワーク占有率が「８６．４％」である場合、図１１に示すデータテーブルからネットワークの種別が「無線」であって、ネットワーク占有率が「８０％以上」に対応する評価式として「２×３」を取り出し、特徴ＩＤ「２」に対応する基準特徴データとして「解像度：６４０×４８０以下」を取り出すとともに、特徴ＩＤ「３」に対応する基準特徴データとして「画像サイズ：２０ＫＢ以下」を取り出し、それら基準特徴データと評価式を基準特徴データ保存部１５に保存する。すなわち、基準特徴データ生成部５３は、使用可能なネットワークの単位時間あたりのデータ転送量が規定値以下である低速状態であるとき、非低速状態と比較して、取得する画像データの総データ量が少なくなるように、基準特徴データを生成する。

例えば、第３実施形態の要不要判定部１７−１は、接続状態判定部９１により判定されたネットワークの種別が「無線」であり、ネットワーク占有率が「８６．４％」である場合、評価式「２×３」と、基準特徴データ保存部１５から特徴ＩＤ「２」と「３」に対応した基準特徴データとして「解像度：６４０×４８０以下」及び「画像サイズ：２０ＫＢ以下」を取り出す。このとき、特徴データ評価部１６において特徴データに対応する画像データの解像度が「６４０×４８０」以下であり、かつ、その画像データの画像サイズが「２０ＫＢ」以下であるという評価結果が出力されると、要不要判定部１７−１は、その画像データが要判定である旨の画像取得要求を送信部５４によりサーバ５６に送る。すなわち、要不要判定部１７−１は、要判定となった画像データを外部装置であるサーバ５６に要求する。なお、要不要判定部１７−１は、要判定となった画像データを他の外部装置からサーバ５６に画像データを要求させるようにしてもよい。

一方、特徴データ評価部１６において、特徴データに対応する画像データの解像度が「６４０×４８０」よりも大きい、あるいは、その画像データの画像サイズが「２０ＫＢ」よりも大きい、という２つの評価結果の少なくとも１つが出力されたとき、要不要判定部１７−１は、その画像データが不要判定である旨の画像取得要求を送信部５４によりサーバ５６に送る。

これにより、複数の画像データのうち、特徴データ評価部１６の評価結果に基づく画像データのみを処理部１２や出力部１３の出力先に送ることができるため、処理部１２や出力部１３の出力先の負荷を低減することができる。なお、第３実施形態で用いられる評価式は、予め記憶された評価方針によって定められているものとしたが、後述する表示部１４１から評価方針や評価式自体を入力することによって定めても良いし、接続状態判定部９１（状態検知部）が検知した結果によって評価式または評価方針を変更したり、所定のものに定めたりしても良い。また、第２実施形態では電源状態検知部５１によって検知された電源容量に関する基準特徴データにより特徴データが評価され、第３実施形態では接続状態判定部９１によって判定されたネットワークとの接続状態に関する基準特徴データにより特徴データが評価される構成であるが、これら基準特徴データなど複数種類の基準特徴データが組み合わされた基準特徴データにより特徴データが評価されるように構成してもよい。このように、複数種類の基準特徴データを組み合わせて特徴データを評価することによって、編集作業や再生作業に用いられる機器やネットワークの状況に合わせて、より必要なデータの判別が適切に行なうことができる。
＜第４実施形態＞

図１２は、本発明の第４実施形態の画像処理装置を示す図である。なお、図９に示す構成と同じ構成には同じ符号を付しその説明を省略する。

図１２に示す第４実施形態の画像処理装置１２０において、図９に示す第２実施形態の画像処理装置９０と異なる点は、内部サーバ１２１と、分配切替部１２２とをさらに備えている点である。

内部サーバ１２１は、サーバ５６と同様の構成をとり、サーバ５６から取得される画像データのキャッシュとして機能する。例えば、サーバ５６から画像処理装置１２０の受信部５５に送信される画像データを保存する。内部サーバ１２１内の画像データの更新は、画像データの入力時、定期的、又は特定のイベント発生時などに行ってもよい。また、内部サーバ１２１は、サーバ５６より容量が小さい場合、アクセス頻度の高い画像データや直前のアクセス時刻が現在時刻に近い画像データを優先的に保存するなどして保存する画像データを決定する。

分配切替部１２２は、接続状態判定部９１から出力されるネットワーク情報に応じて、画像取得要求の送信先を画像処理装置１２０の送信部５４か内部サーバ１２１の何れか一方に切り替える。すなわち、例えば、画像処理装置１２０がネットワークに接続されていれば、分配切替部１２２は、画像取得要求をネットワークを介してサーバ５６に送信し複数の画像データから所望な画像データを抽出する作業を画像処理装置１２０の外部に行わせる。一方、画像処理装置１２０がネットワークに接続されていなければ、分配切替部１２２は、画像取得要求を内部サーバ１２１に送り複数の画像データから所望な画像データを抽出する作業を画像処理装置１２０の内部に行わせる。また、例えば、画像処理装置１２０がネットワークに接続されていても、ネットワーク占有率が閾値よりも高い場合、分配切替部１２２は、画像取得要求を内部サーバ１２１に送るように構成してもよい。

図１３は、第４実施形態の制御処理部１７の動作の一例を示すフローチャートである。

まず、制御処理部１７は、特徴データ取得部１４により複数の画像データのうちの最初の画像データに対応する特徴データを取得させると（Ｓ１３１がＹｅｓ）、基準特徴データ保存部１５から基準特徴データを取り出し（Ｓ１３２）、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行なわせる（Ｓ１３３）。

次に、制御処理部１７の要不要判定部１７−１は、特徴データ評価部１６の評価結果に基づいて取得した特徴データに対応する画像データの要不要判定を行う（Ｓ１３４）。

不要判定の場合（Ｓ１３４がＮｏ）、制御処理部１７は、特徴データ取得部１４により次の画像データに対応する特徴データを取得させて（Ｓ１３５）、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行なわせる（Ｓ１３３）。

一方、要判定の場合（Ｓ１３４がＹｅｓ）、制御処理部１７は、画像取得要求を生成し（Ｓ１３６）、分配切替部１２２により画像取得要求の送信先として外部のサーバ５６及び内部サーバ１２１のどちらか一方に切り替える（Ｓ１３７）。

画像取得要求の送信先として外部のサーバ５６に切り替えた場合（Ｓ１３７がＮｏ）、制御処理部１７は、送信部５４により画像取得要求をサーバ５６に送信させるとともに（Ｓ１３８）、受信部５５により画像取得要求に対応する画像データを受信させる（Ｓ１３９）。すなわち、制御処理部１７は、要判定となった画像データを外部装置であるサーバ５６に要求する。なお、制御処理部１７は、要判定となった画像データを他の外部装置からサーバ５６に画像データを要求させるようにしてもよい。

一方、画像取得要求の送信先として内部サーバ１２１に切り替えた場合（Ｓ１３７がＹｅｓ）、制御処理部１７は、画像取得要求を内部サーバ１２１に送り（Ｓ１４０）、内部サーバ１２１から送られてくる画像取得要求に対応する画像データを入力部１１により受け取る（Ｓ１４１）。例えば、内部サーバ１２１は、画像取得要求を受け取ると、その画像取得要求に示される識別情報に対応する画像データを、不図示の保存部に記憶される複数の画像データの中から取り出し、その取り出した画像データを入力部１１へ送る。

次に、制御処理部１７は、処理部１２により画像データに対して各種画像処理を行なわせて（Ｓ１４２）、出力部１３によりその画像処理後の画像データを出力させる（Ｓ１４３）。

そして、Ｓ１３３で評価した特徴データに対応する画像データが複数の画像データのうちの最後の画像データでないと判断した場合（Ｓ１４４がＮｏ）、制御処理部１７は、特徴データ取得部１４により次の画像データに対応する特徴データを取得させて（Ｓ１３５）、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行なわせる（Ｓ１３３）。

一方、Ｓ１３３で評価した特徴データに対応する画像データが複数の画像データのうちの最後の画像データであると判断した場合（Ｓ１４４がＹｅｓ）、制御処理部１７は、複数の画像データに対する画像処理を終了する。

なお、画像取得要求をサーバ５６に送信した場合、制御処理部１７は、受信した画像データを処理部１２に送るとともに、内部サーバ１２１にキャッシュするように構成してもよい。また、画像取得要求を内部サーバ１２１に送った場合、制御処理部１７は、内部サーバ１２１から入力部１１へ送られる画像データを処理部１２に送ってもよい。
＜第５実施形態＞

図１４は、本発明の第５実施形態の画像処理装置を示す図である。なお、図５に示す構成と同じ構成には同じ符号を付しその説明を省略する。

図１４に示す第５実施形態の画像処理装置１４０において、図５に示す第２実施形態の画像処理装置５０と異なる点は、電源状態検知部５１の代わりに表示部１４１を備えている点である。

表示部１４１は、例えば、タッチパネルディスプレイなどのユーザインタフェースであって、ユーザの操作により評価方針に関するユーザ意図が入力される。入力されたユーザ意図は、基準特徴データ生成部５３へ送られる。

また、第５実施形態の評価方針生成部５２は、入力されるユーザ意図に基づいて、複数の評価方針に優先順位をつけた後、それら評価方針を基準特徴データ生成部５３に送るように構成してもよい。この場合、基準特徴データ生成部５３は、優先順位に従って評価方針を使用する。このときのユーザ意図は、例えば、画像データの表示速度、解像度、データ量の少なくとも何れかを優先して評価する方針を示す。

図１５は、第５実施形態の基準特徴データ生成部５３の動作の一例を示すフローチャートである。

基準特徴データ生成部５３は、評価方針生成部５２により生成された評価方針及び表示部１４１により入力されたユーザ意図に基づいて、基準特徴データを生成した後（Ｓ１５１）、その生成した基準特徴データを基準特徴データ保存部１５に保存する（Ｓ１５２）。

例えば、表示部１４１は、背景優先モードボタン及び被写体優先モードボタンを備え、ユーザによりどちらか一方のボタンが押されると、その押されたボタンに対応するモードをユーザ意図として基準特徴データ生成部５３へ送る。背景優先モードボタンが押された場合、基準特徴データ生成部５３は、背景を楽しめるように、不図示のカメラの加速度や速度の上限値を低めに設定する。例えば、基準特徴データ生成部５３は、図１６Ａに示すように、基準特徴データとしてのカメラ加速度の上限値を「背景優先モード」に対応する「１Ｇ以下」に設定するとともに、基準特徴データとしてのカメラ速度の上限値を「背景優先モード」に対応する「１ｃｍ／ｓ以下」に設定する。一方、被写体優先モードボタンが押された場合、基準特徴データ生成部５３は、被写体の動きを楽しめるように、不図示のカメラの加速度や速度の上限値を高めに設定する。例えば、基準特徴データ生成部５３、図１６Ａに示すように、基準特徴データとしてのカメラ加速度の上限値を「被写体優先モード」に対応する「５Ｇ以下」に設定するとともに、基準特徴データとしてのカメラ速度の上限値を「被写体優先モード」に対応する「５ｃｍ／ｓ以下」に設定する。これらの組み合わせは、予め評価方針生成部５２に保存されていてもよいし、ユーザが編集できるようなユーザインタフェースを備えてもよい。また、設定するパラメータの種類は限定されない。また、モードの選択は、上記のようなボタンによる二者択一ではなく、スライドバーによるアナログな設定でもよい。

また、例えば、表示部１４１は、プロモードボタン及びアマチュアモードボタンを備え、ユーザによりどちらか一方のボタンが押されると、その押されたボタンに対応するモードをユーザ意図として基準特徴データ生成部５３へ送る。プロモードボタンが押された場合、基準特徴データ生成部５３は、編集のバリエーションが豊かになるように、被写体が検出された画像データからさらに前後５枚の画像データを抽出基準としたり、不図示のカメラの加速度・速度の上限値を高めに設定する。例えば、基準特徴データ生成部５３は、図１６Ｂに示すように、基準特徴データとしての画像抽出基準を「プロモード」に対応する「被写体検出フレームの前後５フレーム」に、基準特徴データとしてのカメラ加速度の上限値を「プロモード」に対応する「５Ｇ以下」に、基準特徴データとしてのカメラ速度の上限値を「プロモード」に対応する「５ｃｍ／ｓ以下」に設定する。一方、アマチュアモードボタンが押された場合、基準特徴データ生成部５３は、手間いらずの編集を実現するために、被写体が検出された画像データのみを抽出基準としたり、不図示のカメラの加速度・速度の上限値を低めに設定する。例えば、基準特徴データ生成部５３は、図１６Ｂに示すように、基準特徴データとしての画像抽出基準を「アマチュアモード」に対応する「被写体検出フレームのみ」に、基準特徴データとしてのカメラ加速度の上限値を「アマチュアモード」に対応する「１Ｇ以下」に、基準特徴データとしてのカメラ速度の上限値を「アマチュアモード」に対応する「１ｃｍ／ｓ以下」に設定する。これらの組み合わせは、予め評価方針生成部５２に保存されていてもよいし、ユーザが編集できるようなユーザインタフェースを備えてもよい。また、設定するパラメータの種類は限定されない。また、モードの選択は、上記のようなボタンによる二者択一ではなく、スライドバーによるアナログな設定でもよい。

なお、これらのユーザ意図、評価方針の種類は、上述の構成に限定されない。また、モードの切り替えのタイミングは、例えば、その日の目的に合わせて撮影前に設定してもよいし、毎回画像データのプレビュー前に設定してもよい。さらに、表示部１４１に、優先度認識部を備え、不図示のカメラの撮像画像に映り込んだサイン（ユーザの手で形作られたチョキや握った手の親指を上の方向に立てたものなど）、不図示のカメラを振る、あるいは予めユーザによって撮影時に付与されたレーティング情報をもとに、シーンごとにユーザが意図的に優先度を上げてもよい。

次に、第５実施形態における制御処理部１７の動作の一例を説明する。
まず、制御処理部１７は、特徴データ取得部１４により複数の画像データのうちの最初の画像データに対応する特徴データを取得させると、基準特徴データ保存部１５から基準特徴データを取り出し、 特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行わせる。

次に、制御処理部１７の要不要判定部１７−１は、特徴データ評価部１６の評価結果に基づいて特徴データに対応する画像データの要不要判定を行う。

不要判定の場合、制御処理部１７は、特徴データ取得部１４により次の画像データに対応する特徴データを取得させて、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行わせる。

一方、要判定の場合、制御処理部１７は、送信部５４により画像取得要求をサーバ５６に送信させるとともに、受信部５５により画像取得要求に対応する画像データを受信させた後、処理部１２によりその画像データに対して各種画像処理を行わせて、出力部１３によりその画像処理後の画像データを出力させる。

そして、特徴データ評価部１６で評価した特徴データに対応する画像データが複数の画像データのうちの最後の画像データでないと判断した場合、制御処理部１７は、特徴データ取得部１４により次の画像データに対応する特徴データを取得させて、特徴データ評価部１６により基準特徴データに基づいて特徴データの評価を行わせる。

一方、特徴データ評価部１６で評価した特徴データに対応する画像データが複数の画像データのうちの最後の画像データであると判断した場合、制御処理部１７は、複数の画像データに対する画像処理を終了する。

例えば、制御処理部１７は、表示部１４１においてユーザによりプロモードボタンが押された場合、基準特徴データ保存部１５から画像抽出基準として「被写体検出フレームの前後５フレーム」、カメラ加速度の上限値として「５Ｇ以下」、及びカメラ速度の上限値として「５ｃｍ／ｓ以下」を取り出す。このとき、特徴データ評価部１６において特徴データに対応する画像データが「被写体検出フレームの前後５フレーム」以内であるという評価結果、特徴データに対応する画像データの撮影時のカメラ加速度が「５Ｇ」以下であるという評価結果、及び特徴データに対応する画像データの撮影時のカメラ速度が「５ｃｍ／ｓ」以下であるという評価結果が出力されると、要不要判定部１７−１は、その画像データを要判定とする。

一方、特徴データ評価部１６において特徴データに対応する画像データが「被写体検出フレームの前後５フレーム」以内でない、特徴データに対応する画像データのカメラ加速度が「５Ｇ」以下でない、及び特徴データに対応する画像データのカメラ速度の上限値が「５ｃｍ／ｓ」以下でないという評価結果のうち少なくとも１つの評価結果が出力されると、要不要判定部１７−１は、その画像データを不要判定とする。

これにより、複数の画像データのうち、特徴データ評価部１６の評価結果に基づく画像データのみを処理部１２や出力部１３の出力先に送ることができるため、処理部１２や出力部１３の出力先の負荷を低減することができる。
＜第６実施形態＞

図１７は、本発明の第６実施形態の画像処理装置を示す図である。なお、図１に示す構成と同じ構成には同じ符号を付しその説明を省略する。

図１７に示す第６実施形態の画像処理装置１７０において、図１に示す第１実施形態の画像処理装置１０と異なる点は、特徴データ抽出部１７１をさらに備えている点である。

特徴データ抽出部１７１は、入力部１１により取得される画像データから特徴データを抽出する。このとき抽出される特徴データは、例えば、人物の顔や体、自動車、花、動物、空、山、海、道路、建物などのオブジェクト、マーカー、又は、色や輝度などを特定被写体とする。

例えば、特徴データ抽出部１７１は、被写体検出部を備え、その被写体検出部により画像データから「被写体の位置」及び「被写体のサイズ」を抽出する。この場合、第６実施形態の特徴データ評価部１６は、基準特徴データとしての「画像データのＸ方向の幅及びＹ方向の幅」や「所定サイズ」を基準特徴データ保存部１５から取り出し、「被写体が検出されていない」、「被写体のサイズが所定サイズよりも小さい」、「被写体の位置が画像データの左端より外側に外れている」、「被写体の位置が画像データの右端より外側に外れている」、「被写体の位置が画像データの上端より外側に外れている」、及び「被写体の位置が画像データの下端より外側に外れている」の少なくとも１つを判断すると、その判断結果を要不要判定部１７−１に送る。要不要判定部１７−１は、特徴データ評価部１６から送られてくる判断結果に基づいて、入力部１１により取得される画像データの要不要判定を行う。例えば、要不要判定部１７−１は、図１８に示すように、複数の画像データＰ１〜Ｐ６からなる動画のうち、画像データＰ１の「被写体のサイズが所定サイズよりも小さい」と判断されると、その画像データＰ１を不要であると判定する。また、要不要判定部１７−１は、画像データＰ６の「被写体の位置が画像データの左端より外側に外れている」と判断されると、その画像データＰ６を不要な画像データと判定する。そして、要不要判定部１７−１は、画像データＰ６を入力部１１から処理部１２へ出力されないように入力部１１の動作を制御する。これにより、処理部１２の負荷を低減することができる。

また、特徴データ抽出部１７１は、画像データの構図を抽出する。この場合、第６実施形態の特徴データ評価部１６は、基準特徴データとしての「所定値」や「所定数」を基準特徴データ保存部１５から取り出し、「連続する２枚の画像データの構図の差異が所定値以下になる画像データが所定数以上連続する」を判断すると、その判断結果を要不要判定部１７−１に送る。

要不要判定部１７−１は、特徴データ評価部１６から送られてくる判断結果に基づいて、入力部１１により取得される画像データの要不要判定を行う。例えば、要不要判定部１７−１は、図１９に示すように、複数の画像データＰ７〜Ｐ１１からなる動画のうち、「画像データＰ７、Ｐ８の構図の差異が所定値以下になる画像データが２以上連続する」と判断されると、それらの画像データＰ７、Ｐ８以降の画像データＰ９〜Ｐ１１を不要な画像データと判定する。そして、要不要判定部１７−１は、画像データＰ９〜Ｐ１１を入力部１１から処理部１２へ出力されないように入力部１１の動作を制御する。これにより、処理部１２の負荷を低減することができる。

また、特徴データ抽出部１７１は、入力部１１により取得される、サムネイル画像（画像データの縮小画像）、低解像度化（画像データよりも解像度が低い画像）、部分画像化した画像データ（画像データの一部）から特徴データを抽出するように構成してもよい。
＜第７実施形態＞

図２０は、本発明の第７実施形態の画像処理装置を示す図である。なお、図１に示す構成と同じ構成には同じ符号を付しその説明を省略する。

図２０に示す第７実施形態の画像処理装置２００において、図１に示す第１実施形態の画像処理装置１０と異なる点は、特徴データ保存部２０１をさらに備えている点である。

第７実施形態の特徴データ取得部１４は、外部から定期的に特徴データを取得して特徴データ保存部２０１に保存する。

第７実施形態の画像処理装置２００によれば、画像処理装置２００から撮像装置が取り外されたり、ネットワークが切断されたり、ネットワーク占有率が高かったりして、外部から定期的に特徴データを取得できなくなっても、特徴データ保存部２０１に保存されている特徴データを用いて画像データの要不要判定を継続して行うことができる。そのときに要不要判定が行われた画像データは、画像処理装置２００に撮像装置が取り付けられたり、ネットワークの接続が回復した際などに取得することができる。このように、オフラインでの要不要判定も実現することができる。

なお、特徴データ保存部２０１は、画像処理装置２００の外部（例えば、ネットワーク上やリムーバブルメモリ上など）に設けられてもよい。

１０ 画像処理装置
１１ 入力部
１２ 処理部
１３ 出力部
１４ 特徴データ取得部
１５ 基準特徴データ保存部
１６ 特徴データ評価部
１７ 制御処理部
１７−１ 要不要判定部

Claims (20)

1. 評価方針を生成する評価方針生成部と、
   当該画像処理装置の電源種別及び電源状態の少なくとも１つを検知する電源状態検知部と、
   前記評価方針及び前記電源状態検知部の検知結果に基づいて基準特徴データを生成する基準特徴データ生成部と、
   画像データに対応した特徴データを取得する特徴データ取得部と、
   前記基準特徴データを保存する基準特徴データ保存部と、
   前記基準特徴データに基づいて前記特徴データの評価を行う特徴データ評価部と、
   前記特徴データ評価部によって行われた前記評価に基づいて前記特徴データに対応した画像データの要不要の判定を行なう要不要判定部と、
   前記要不要の判定に基づいて制御を行なう制御処理部と、
   を備える画像処理装置。
2. 前記電源状態検知部の検知結果が、使用可能な電源容量が規定値以下である低エネルギー状態であるとき、
   前記基準特徴データ生成部は、前記検知結果と前記評価方針から、非低エネルギー状態と比較して、取得する画像のデータ量が少なくなるように、前記基準特徴データを生成する
   ことを特徴とする請求項１に記載の画像処理装置。
3. 評価方針を生成する評価方針生成部と、
   ネットワークとの接続状態を判定する接続状態判定部と、
   前記評価方針及び前記接続状態判定部の判定結果に基づいて基準特徴データを生成する基準特徴データ生成部と、
   画像データに対応した特徴データを取得する特徴データ取得部と、
   前記基準特徴データを保存する基準特徴データ保存部と、
   前記基準特徴データに基づいて前記特徴データの評価を行う特徴データ評価部と、
   前記特徴データ評価部によって行われた前記評価に基づいて前記特徴データに対応した画像データの要不要の判定を行なう要不要判定部と、
   前記要不要の判定に基づいて制御を行なう制御処理部と、
   を備える画像処理装置。
4. 前記特徴データ評価部は、複数種類の前記基準特徴データを組み合わせて評価する
   ことを特徴とする請求項１〜３のいずれか１項に記載の画像処理装置。
5. 前記接続状態判定部の判定結果が、使用可能なネットワークの単位時間あたりのデータ転送量が規定値以下である低速状態であるとき、前記基準特徴データ生成部は、前記接続状態判定部の判定結果と前記評価方針から、非低速状態と比較して、取得する画像の総データ量が少なくなるように、前記基準特徴データを生成する
   ことを特徴とする請求項３に記載の画像処理装置。
6. 画像データに対応した特徴データを取得する特徴データ取得部と、
   評価方針を生成する評価方針生成部と、
   前記評価方針に基づいて前記特徴データの基準となる基準特徴データを生成する基準特徴データ生成部と、
   前記基準特徴データを保存する基準特徴データ保存部と、
   前記基準特徴データに基づいて前記特徴データの評価を行う特徴データ評価部と、
   前記特徴データ評価部によって行われた前記評価に基づいて前記特徴データに対応した画像データの要不要の判定を行なう要不要判定部と、
   前記要不要の判定に基づいて制御を行なう制御処理部と、
   前記画像データの表示速度、解像度、及びデータ量の少なくとも何れかを優先して評価する方針を示す評価方針を入力する表示部と、
   を備え、
   前記基準特徴データ生成部は、前記表示部に入力された前記評価方針に基づいて前記基準特徴データを生成する
   ことを特徴とする画像処理装置。
7. 前記画像データから前記特徴データを抽出する特徴データ抽出部をさらに備える
   ことを特徴とする請求項１〜６の何れか１項に記載の画像処理装置。
8. 前記特徴データ抽出部は、前記特徴データとして前記画像データ内の被写体の位置及びサイズの少なくとも一方を抽出し、
   前記要不要判定部は、前記特徴データ抽出部により抽出された前記画像データ内の被写体の位置及びサイズの少なくとも一方が前記基準特徴データとしての閾値以下であるか否かを判断し、該判断結果に基づいて前記画像データの要不要を判定する
   ことを特徴とする請求項７に記載の画像処理装置。
9. 前記要不要判定部は、前記特徴データ抽出部により抽出された前記画像データ内の被写体の位置及びサイズの少なくとも一方が前記閾値以下であると、前記画像データに対して不要の判定を行う
   ことを特徴とする請求項８に記載の画像処理装置。
10. 前記特徴データ抽出部は、前記特徴データとして連続する複数の前記画像データの構図を抽出し、
    前記要不要判定部は、前記特徴データ抽出部により抽出された複数の画像データの構図の変化量が前記基準特徴データとしての閾値以下であるか否かを判断し、該判断結果に基づいて前記画像データの要不要を判定する
    ことを特徴とする請求項７に記載の画像処理装置。
11. 前記要不要判定部は、前記複数の画像データの構図の変化量が前記閾値以下であると、前記複数の画像データに対して不要の判定を行う
    ことを特徴とする請求項１０に記載の画像処理装置。
12. 前記要不要判定部は、多段階に分類して、又は、数値化して前記特徴データの評価を行う
    ことを特徴とする請求項１〜１１の何れか１項に記載の画像処理装置。
13. 前記要不要判定部は、前記特徴データに対応する画像データのボケ具合、ブレ具合、明暗、色合い、鮮明度、画角ずれ、非対称、被写体のかぶりのうちの少なくとも１つについて評価を行う
    ことを特徴とする請求項１〜１２の何れか１項に記載の画像処理装置。
14. 前記特徴データ抽出部は、前記画像データの縮小画像、前記画像データよりも解像度が低い画像、又は前記画像データの一部である前記特徴データから特徴データを抽出する
    ことを特徴とする請求項７に記載の画像処理装置。
15. 前記特徴データを保存する特徴データ保存部をさらに備え、
    前記要不要判定部は、前記基準特徴データに基づいて前記特徴データ保存部により保存される特徴データの評価を行う
    ことを特徴とする請求項１〜１４に記載の画像処理装置。
16. 外部装置と前記特徴データまたは前記画像データの通信を行う通信部をさらに備え、
    前記要不要判定部は、要判定となった画像データを前記外部装置に要求するまたは他の外部装置から前記外部装置に前記画像データを要求させる
    ことを特徴とする請求項１〜１５の何れか１項に記載の画像処理装置。
17. 撮像部と、
    前記要不要判定部により要判定された画像データを前記撮像部から取得する入力部と、
    を備えることを特徴とする請求項１〜１５の何れか１項に記載の画像処理装置。
18. 画像データを処理する処理部をさらに備え、
    前記処理部は、前記要不要判定部により要判定された画像データに対して処理を行なう
    ことを特徴とする請求項１〜１７のいずれか1項に記載の画像処理装置。
19. コンピュータを、
    評価方針を生成する評価方針生成部、
    当該画像処理装置の電源種別及び電源状態の少なくとも１つを検知する電源状態検知部、
    前記評価方針及び前記電源状態検知部の検知結果に基づいて基準特徴データを生成する基準特徴データ生成部、
    画像データに対応した特徴データを取得する特徴データ取得部、
    基準特徴データ保存部に保存される前記基準特徴データに基づいて前記特徴データの評価を行う特徴データ評価部、
    前記特徴データ評価部によって行われた前記評価に基づいて前記特徴データに対応した画像データの要不要の判定を行なう要不要判定部、
    前記要不要の判定に基づいて制御を行なう制御処理部、
    として機能させるプログラム。
20. 評価方針生成部により、評価方針を生成し、
    電源状態検知部により、当該画像処理装置の電源種別及び電源状態の少なくとも１つを検知し、
    前記評価方針及び前記電源状態検知部の検知結果に基づいて基準特徴データを生成し、
    特徴データ取得部により、画像データに対応した特徴データを取得し、
    特徴データ評価部により、基準特徴データ保存部に保存される前記基準特徴データに基づいて前記特徴データの評価を行ない、
    要不要判定部により、該評価に基づいて前記特徴データに対応した画像データの要不要の判定を行ない、
    制御処理部により、前記要不要の判定に基づいて制御を行なう、
    ことを特徴とする画像処理方法。