JP2008311821A - 画像入力処理装置、操作処理方法およびプログラム - Google Patents

Abstract

【課題】撮影操作時に電源操作が誤って行われた場合に、撮影チャンスを逃すなどの不都合を回避する。
【解決手段】撮影操作部（撮影ボタン１２６）と、電源操作部（電源ボタン１２５）と、情報発生部（例えばジャイロセンサ１５）と、制御部（μＣＯＭ１４）とを有する。ジャイロセンサ１５は、撮影準備時と非撮影準備時で異なる情報を発生する。μＣＯＭ１４は、電源ボタン１２５が操作されたときに前記情報から撮影準備時と判断される場合は、撮影意図が有るとみなして、当該電源ボタン１２５の操作を、撮影ボタン１２６が操作されたときと同様な撮影開始の契機とする。
【選択図】図２

Description

本発明は、撮影操作部（シャッタボタン等）と電源操作部（電源オン／オフボタン等）とを有する、カメラ装置やカメラの機能を備える電子機器等の画像入力処理装置に関する。また、本発明は、シャッタ操作ミスで電源オフ操作がされた場合の操作処理方法と、そのための手順をコンピュータに実行させるためのプログラムとに関する。

デジタルやアナログのスチルカメラあるいはビデオカメラ、または、撮影機能付携帯機器（たとえば携帯電話機やＰＤＡなど）の小型化が進んでいる。
たとえばデジタルスチルカメラは、小型でかつ薄型のカメラ本体を有し（特許文献１参照）、カメラ本体の限られた面積の外面に各種ボタン等の操作部を配置する必要がある。

特許文献１の図１４〜図１７にカメラの概観図が示されているが、特に図１７に示されるようにカメラ本体の上面は、薄型のためボタン等の配置スペースが小さい。

図１は、当該特許文献１の図１７に示されるカメラ本体の上面図である。
図解されているデジタルスチルカメラ１のカメラ本体１０１の上面には、電源をオン・オフさせる「電源操作部」としての電源ボタン１２５、撮影の開始や停止の実行指示を行う「撮影操作部」としての撮影ボタン１２６、および、手振れが生じたとき手振れ補正を機能させる手振れ設定ボタン１２７等が設けられている。これらの操作部（ここでは各種ボタン）は、片手撮影を考慮して一方の側面側（ここでは右手撮影時の右手ホールド側）に集約されている。このため、薄型のため限られたカメラ本体１０１の上面の、片手撮影が可能なさらに限られた配置スペースに、必要な操作部（ボタン）を配置する必要がある。図１では、カメラ本体１０１の上面の片側に形成されたカット面（スイッチホルダ面１２４）に、本体中央寄りから順に電源ボタン１２５、撮影ボタン１２６および手振れ設定ボタン１２７が横一列に互いに近接して配置されている。
特開２００６−３５０１２７号公報（図１４〜図１７およびその説明箇所）

例えば特許文献１に記載されているように、電源ボタン１２５等の「電源操作部」と、撮影ボタン１２６等の「撮影操作部」は互いに近接して配置されることが多い。本体配置スペースに違いがあるが、この操作部の配置は、デジタルスチルカメラに限らず、デジタルビデオカメラ、その他のデジタルカメラを搭載したデジタル機器、あるいは、アナログカメラ等にあっても共通することがある。

このためユーザは、シャッタを押す、あるいは、動画撮影開始を行おうとして、「撮影操作部」を操作したつもりが誤って「電源操作部」を操作して、電源をオフする可能性がある。このとき、ユーザは大切なシャッタチャンス（あるいは動画撮影開始タイミング）を逃してしまうことがある。
また、電源操作部と撮影操作部の位置が遠くにあったとしても、不慣れなユーザが操作ミスをしてしまうことがある。

本発明に係る第１観点の画像入力処理装置は、撮影操作部と、電源操作部と、情報発生部と、制御部とを有する。
前記情報発生部は、撮影準備時と非撮影準備時で異なる情報を発生する。情報発生部は、例えば、撮影準備のために構図を構えたときは静止状態に近いことを示す情報を前記制御部に出力するセンサであってよい。あるいは情報発生部は、例えば、撮影準備で操作されて情報を前記制御部に出力する撮影準備操作部（例えば、ズーム、ピント、撮影モードに関する設定部等）であってよい。また情報発生部は、加速度センサ、撮影準備操作部の双方を含んで構成されてよい。
前記制御部は、前記電源操作部が操作されたときに前記情報から撮影準備時と判断される場合は、撮影意図が有るとみなして、当該電源操作部の操作を、前記撮影操作部が操作されたときと同様な撮影開始の契機とする。

本発明で、以後電源オフを行うか否かは任意である。また、電源オフを行う場合でも、どのような制御により（例えば、どのような追加の操作があった場合に）電源オフを行うかは、任意である。
ただし、本発明で好ましくは、撮像後に自動的に電源オフする。この場合、本発明に係る第１観点の画像入力処理装置は、前記制御部からの前記撮影開始の契機に応じて撮像を行う撮像部と、電源部と、をさらに有し、前記制御部は、前記撮像部により画像が撮像された後に、前記電源部を制御して電源をオフする。
あるいは、本発明では好適に、前記制御部からの前記撮影開始の契機に応じて撮像を行う撮像部と、画像を記憶する記憶部と、をさらに有し、前記制御部は、前記撮像部により撮像された画像の画質を評価し、画質が所定の基準以上であれば、前記撮像された画像を前記記憶部に保存し、画質が基準未満であれば、前記撮像された画像を廃棄する。

本発明に係る第２観点の画像入力処理装置は、撮像部と、記憶部と、撮影操作部と、電源操作部と、制御部とを有する。
前記制御部は、前記電源操作部が操作されたときは当該電源操作部の操作を、前記撮影操作部が操作されたときと同様な撮影開始の契機として前記撮像部に撮像を指示するとともに、撮像により得られた画像の画質を評価し、画質が所定の基準以上であれば、撮影意図が有ったとみなして、前記撮像された画像を前記記憶部に保存し、画質が基準未満であれば、前記撮像された画像を廃棄する。

以上の構成を有する第１および第２観点の画像入力処理装置によれば、電源操作部の操作があったときに、ある条件を満たせば、当該画像入力装置は、撮影操作部を操作することを契機とする通常の撮影動作と同じように動作する。

ある条件とは、第１観点では「情報発生部」で発生した情報が「撮影準備時」を示すことである。
「情報発生部」が、例えば加速度センサの場合、撮影準備のために構図を構えたときは静止状態に近いことを示す情報が加速度センサから出力され、この情報を基に制御部によって「ほぼ静止状態」と判断されると、「撮影準備時」とみなされて、制御部によって撮影開始が指示される。また、「情報発生部」が「撮影準備操作部」の場合、撮影に先立ってズーム、ピント合わせ、撮影モード設定などの操作があれば、その操作情報が、ここで言う「情報」として制御部に送られる。制御部は、送られてきた情報を基に「撮影準備時」と判断できれば、撮影開始を指示する。さらに、「情報発生部」が「加速度センサ」と「撮影準備操作部」の双方を含む場合、双方から得られた２つの情報を総合的に判断して、「撮影準備時」であるか否かを制御部が決めてよい。
第１観点では、情報が「非撮影準備時」を示す場合は、撮影を行わない。

これに対し、本発明の第２観点では、「電源操作部」の操作があれば、一旦撮影は行い、その撮影された画像の画質で「撮影準備時」に撮られた画像であるかどうかを判断する。つまり、撮影された画像の画質が所定の基準以上であることが、第２観点では満たすべき条件となる。
撮影された画像の画質が所定の基準以上であれば、これを保存し、基準未満であれば廃棄する。これにより記憶部のメモリ容量が無駄に消費されない。
ここで画質を評価するパラメータは任意であり、例えば、ピント（合焦の程度）、画像のぶれ具合などを例示できる。また、輝度や色から一般的に被写体とされるものが撮られているかどうかを判定可能である。例えば輝度が画面全体で高く真っ白な画面なら太陽や電球に向けた画像であり、一般的な被写体とは考え難いため「撮影意図なし」と判断する。また、画面が真っ黒の場合は手でレンズを押さえているなどの状況が考えられ、この場合も「撮影意図なし」と判断する。また、色が画面全体で均一な場合、床や壁など通常は被写体と考え難いものに向けて撮影が行われたと想定して、この場合も「撮影意図なし」と判断する。ピント（合焦の程度）、画像のぶれ具合、一般的被写体の有無などから、複数の画質パラメータを組み合わせて総合的に判断してよい。

本発明に係る第１観点の操作処理方法は、シャッタ操作ミスで電源オフ操作がされた場合の操作処理方法であって、前記電源オフ操作がされたときに、撮影準備時と非撮影準備時で異なる情報を検出するステップと、前記電源オフ操作がされたときに前記情報から撮影準備時と判断される場合は、撮影意図が有るとみなして、当該電源オフ操作を契機として撮影を行うステップと、を含む。
本発明に係る第２観点の操作処理方法は、シャッタ操作ミスで電源オフ操作がされた場合の操作処理方法であって、前記電源オフ操作がされたときは、当該電源オフ操作をシャッタ操作と同様な撮影開始の契機として、撮像を行うステップと、前記撮像により得られた画像の画質を評価するステップと、前記画質が所定の基準以上であれば、撮影意図が有ったとみなして、前記撮像された画像を保存し、画質が基準未満であれば、前記撮像された画像を廃棄するステップと、を含む。

本発明に係る第１観点のプログラムは、コンピュータに、電源オフ操作がされたときに、撮影準備時と非撮影準備時で異なる情報を検出するステップと、前記電源オフ操作がされたときに前記情報から撮影準備時と判断される場合は、撮影意図が有るとみなして、当該電源オフ操作を契機として撮影を行うステップと、を実行させるためのプログラムである。
本発明に係る第２観点のプログラムは、コンピュータに、電源オフ操作がされたときは、当該電源オフ操作をシャッタ操作と同様な撮影開始の契機として、撮像を行うステップと、前記撮像により得られた画像の画質を評価するステップと、前記画質が所定の基準以上であれば、撮影意図が有ったとみなして、前記撮像された画像を保存し、画質が基準未満であれば、前記撮像された画像を廃棄するステップと、を実行させるためのプログラムである。

本発明によれば、シャッタなどの撮影操作部を操作しようとして誤って電源操作部が操作された場合でも、撮影意図を判断して、撮影意図がある場合に撮影操作を有効にすることができる。そのため、ユーザは、大切なシャッタチャンス（あるいは動画撮影開始タイミング）を逃してしまうことがないという利益を得ることができる。

以下、本発明の実施形態を、デジタルスチルカメラ装置を例として図面を参照して説明する。なお、本発明はデジタルスチルカメラに限らず、デジタルまたはアナログのビデオカメラ、当該スチルカメラまたはビデオカメラの機能を搭載した携帯機器（例えば携帯電話機やＰＤＡ）に広く適用できる。

図２は、本発明の実施形態に関わるデジタルスチルカメラ装置（以下、カメラ装置という）のブロック図である。当該カメラ装置が、本発明の「画像入力処理装置」の一態様に該当する。
図解するカメラ装置１は、光学部品２、撮像デバイス４、撮像デバイス４を駆動し制御する撮像ドライバ（ＤＲＶ）５、アナログの画素信号を処理するアナログ・フロント・エンド（ＡＦＥ）回路６、アナログの画素信号をデジタル信号にＡ／Ｄ変換し、デジタルの映像信号として各種信号処理部に出力するＡＤコンバータ（ＡＤＣ）７、信号処理回路（ＳＰＣ）８、画像メモリ（Ｍ１）９、画像メモリ９のメモリ制御回路（ＭＣ１）１０、画像圧縮回路（ＣＯＭ.）１１、記録メモリ（Ｍ２）１２、および、記録メモリ１２のメモリ制御回路（ＭＣ２）１３を有する。

上記符号２〜１３により示す各種部品や各種回路を制御するために、マイクロコンピュータ（μＣＯＭ）１４が設けられている。なお、図２ではμＣＯＭ１４に対し光学部品２、撮像ドライバ５、メモリ制御回路１０と１３が接続されているが、この他にも、例えばＡＦＥ回路６、ＡＤコンバータ７、信号処理回路８および画像圧縮回路１１等もμＣＯＭ１４に接続され制御される。これらの接続は、通常バス構成で実現されている。

光学部品２は、レンズ３、絞り等をレンズ筐体に収納させている部品である。光学部品２は焦点制御、および、露光量制御のための絞り制御が可能であり、露光制御のための絞り駆動部、自動フォーカスのための駆動部、それらの制御回路も光学部品２内に含まれる。これらの制御回路はμＣＯＭ１４からの制御を受けて動作する。

撮像デバイス４は、ＣＣＤセンサまたはＣＭＯＳイメージセンサである。撮像デバイス４は、光学部品２を通して入射された被写体からの光（像）Ｌを、自身が持つ撮像面に結像可能にカメラ装置本体内に固定されている。また、撮像デバイス４は、光センサの画素をマトリックス状に多数配置させた画素アレイを有する。また撮像デバイス４は、必要に応じて、当該画素アレイの撮像面の光入射側に、隣接した数個の光センサの集合（画素ユニット）で一定の配列となるように形成されたオンチップ・フィルタ（不図示）、さらには、オンチップ・レンズ等を有している。オンチップ・フィルタは色フィルタのほかに、ＩＲカットフィルタの機能を備えてよい。

撮像デバイス４がＣＣＤセンサの場合、特に図示しないが、撮像デバイス４にタイミングジェネレータ（ＴＧ）が接続される。撮像デバイス４は、ＴＧからのクロック信号、垂直同期信号、水平同期信号が入力可能になっている。撮像デバイス４がＣＣＤの場合、垂直同期信号や水平同期信号と同期した転送パルスも、ＴＧから供給される。
ＴＧは、これらのタイミング制御のための信号を、μＣＯＭ１４の制御を受けて、不図示のシステムクロック信号から発生する回路である。撮像デバイス４は、これらのタイミング制御のための信号によって、転送動作やシャッタスピード変更等の各種動作が制御される。
なお、撮像デバイス４がＣＭＯＳセンサの場合、ＴＧの機能は撮像デバイス４内に持たせることができる。

撮像デバイス４からの画素信号（アナログ信号）が入力されるＡＦＥ回路６は、アナログ信号に対して行うべき処理、例えば相関２重サンプリングによるリセットノイズの除去（ＣＣＤの場合）、その他のノイズ除去、増幅等を行う回路である。

ＡＤＣ７は、処理後のアナログ信号を所定ビット、例えば８、１０ビット等のデジタル信号に変換する。このデジタル信号は、画素ごとに上記所定ビットの階調値を有する画素信号列が含まれる。

信号処理回路８は、通常、Ｙ／Ｃ分離、輝度信号処理、色信号処理、処理後の輝度信号と色信号の混合処理等を担う幾つかのブロックから構成される。信号処理回路８は、ＡＤコンバータ７から入力されるデジタル映像信号に対し各種信号処理を行う。各種信号処理としては、Ｙ／Ｃ分離や混合処理の他に、信号増幅、ノイズ低減（ＮＲ）処理、輝度信号と色信号の分離、輝度信号処理、色信号処理等が例示できる。

信号処理回路８で処理後のデジタル信号をそのまま、あるいは、アナログ信号に変換した後にライン出力することもできるし、メモリ保存も可能である。図２では、メモリ保存のための構成を示している。
図２に示すカメラ装置１は、メモリ保存のための構成として、画像メモリ９、メモリ制御回路１０、画像圧縮回路１１、記録メモリ１２、メモリ制御回路１３を備える。

本例における画像メモリ９は書き換え可能な内蔵型メモリＩＣであり、μＣＯＭ１４の指令により動作するメモリ制御回路１０によって制御される。画像メモリ９は、保存の可否が決まっていない撮影直後の画像を一時的に保存するメモリであるが、信号処理回路８の処理時にフレームメモリとして用いてよい。

一方、記録メモリ１２は、例えば、ユーザ意図などによって保存すべきことが確認された画像を比較的多量に記憶するメモリであり、μＣＯＭ１４の指令により動作するメモリ制御回路１３により制御される。記録メモリ１２は、例えば、画像メモリ９より大規模な書き換え可能な内蔵型メモリＩＣで実現される。記録メモリ１２は、メモリＩＣに限定されず、着脱可能な携帯型メモリ（カード型メモリ、光磁気ディスクなど）あるいはハードディスク等であってよい。

画像圧縮回路１１は、画像データを記録メモリ１２に記録保存する際に画像データをＢＭＰ、ＪＰＥＧ、ＴＩＦなどの予め定められた記録形式に圧縮処理を行う処理回路である。

本実施形態に関わるカメラ装置１は、「撮影準備のために構図を構えたときは静止状態に近いことを示す情報を出力可能なセンサ」として、ジャイロセンサ１５がμＣＯＭ１４に接続されている。ジャイロセンサ１５は角速度センサの一種であり、例えば回転コマ式、音叉形圧電素子を用いた振動式などがある。
同じように振動を検出するセンサとしては加速度センサがあり、「上記情報を出力可能なセンサ」として加速度センサを用いてよい。加速度サンサは、振動を検出し、その機械的振動を電気信号に変換するデバイスである。加速度センサとしては、ピエゾ抵抗効果を利用したもの、封入ガスの対流を用いたＭＥＭＳ（Micro Electronics Mechanical System）技術によるものなどがある。
本実施形態などの小型の機器（カメラ装置１）に対しては、小型化が可能なＭＥＭＳ技術による２軸または３軸加速度センサあるいは振動式ジャイロセンサが望ましい。図示例では、手振れ補正のために、ジャイロセンサ１５が設けられており、そのジャイロセンサ１５を、手振れ補正時のみならず、「撮影準備のために構図を構えたときは静止状態に近いことを示す情報を出力可能なセンサ」としても用いる。

またμＣＯＭ１４に対し、カメラ本体の外面に露出しユーザ操作が可能な各種操作部が接続されている。
各種操作部は、「撮影操作部」しての撮影ボタン１２６、「電源操作部」としての電源ボタン１２５、機能モード（静止画、動画、再生等）を選択するモード選択ツマミ１１５、ズーム操作を行うためのズームボタン１１６、各種メニューを選択するメニューボタン１１８、メニュー選択や項目選択のためにカーソルを移動する方向キー１１９、決定ボタン１２０を含む。
電源ボタン１２５および撮影ボタン１２６の配置は図１に示し、既に説明した。図２では電源ボタン１２５を「POWER」と表記し、撮影ボタン１２６を「SHUTTER」と表記している。

図３は、カメラ装置１のリアフェイスの概観図である。
カメラ装置１のフロント側には光学部品２のレンズが露出するが、リア側は、図３に示すような部品配置となっている。
リアフェイスに大きな占有率で液晶表示部１０２が設けられ、液晶表示部１０２の上方にスライド式スイッチのモード選択ツマミ（「MODE.SEL」と表記）１１５が配置されている。ズームボタン（「ZOOM」と表記）１１６、方向キー（「DIRE.」と表記）１１９および決定ボタン（「DECI.」と表記）１２０は、符号を付していない他のボタン類とともに、図３に示すように、液晶表示部１０２の右側（右手ホールド側）に配置されている。

本実施形態に関わるカメラ装置１の特徴は、「撮影操作部（撮影ボタン１２６）と、電源操作部（電源ボタン１２５）と、撮影準備時と非撮影準備時で異なる情報を発生する情報発生部と、制御部とを有し、制御部が、電源操作部が操作されたときに、前記情報から撮影準備時と判断される場合は、撮影意図が有るとみなして、当該電源操作部の操作を、撮影操作部が操作されたときと同様な撮影開始の契機とする制御を行う」ことである。

本実施形態で、図２のジャイロセンサ１５が「情報発生部」の一態様に該当し、μＣＯＭ１４が「制御部」の一態様に該当する。ジャイロセンサ１５からの出力（情報）がμＣＯＭ１４に入力され、μＣＯＭ１４は、その情報から「撮影準備時」と「非撮影準備時」との判定を行う。例えば、ジャイロセンサ１５が振動を検出したときに、その振動の大きさが、撮影準備時にカメラを構えたときの略静止状態で想定される振動の大きさ程度以下ならば、μＣＯＭ１４は「撮影準備時」と判定し、ジャイロセンサ１５が検出した振動が、略静止状態で想定される振動の大きさ程度より明らかに大きければ、「非撮影準備時」と判定する。なお、振動の大きさから「撮影準備時」か「非撮影準備時」が明確に判定できない場合、「迷ったら撮影」との原則の下、「撮影準備時」と判断してよい。大事なシャッタチャンスを逃すより、メモリの無駄な消費がユーザにとっては、より小さな不利益と考えられるためである。

このような機能は、図２に示すμＣＯＭ１４がカメラ装置全体を制御する際に実行するプログラム、あるいは、ユーザインターフェースを制御する際に実行する（サブ）プログラムに対し、修正を加えることでインプリメント可能である。つまり所定のプログラムに対し、ユーザが電源ボタン１２５をオフにした場合、その処理の前に、シャッタ押下時の処理を行い、その後電源オフ処理を実行するような処理ルーチンを追加するとよい。
当該処理ルーチンを含むプログラムが、本実施形態に関わる、「（電源）操作処理手順をコンピュータに実行させるためのプログラム」の一態様に該当する。

以下、フロー図を用いて、さらに詳細に当該処理を説明する。
図４は、（電源）操作処理のフロー図であり、本実施形態に関わる（電源）操作処理方法の手順の一例を示すものである。

図４のステップＳＴ１でカメラの電源オフ操作がある（具体例としては電源オンの状態で図２の電源ボタン１２５が押される）と、処理の次のステップＳＴ２に進む。
ステップＳＴ２では、図２のジャイロセンサ１５からの出力からμＣＯＭ１４が振動の大きさを検出し、当該振動の大きさから「ひどい手振れがあるか」を判定する。μＣＯＭ１４は、ひどい手振れがある場合は「非撮影準備時」と判断し、手振れがない、あるいは、手振れの程度がひどくない場合は「撮影準備時」と判断する。ひどい手振れがあるため非撮影準備時と推定されると（ＳＴ２「ＹＥＳ」）、撮影を行うことなくステップＳＴ７の通常の電源オフ処理を実行する。

一方、ひどい手ぶれがなく撮影準備時と判断できるときは（ＳＴ２の判断が「ＮＯ」）、次のステップＳＴ３にて撮影を行う。
より詳細には、図２を参照すると、μＣＯＭ１４が撮像ドライバ（ＤＲＶ）５に「撮像」の指令を与える。すると、撮像デバイス４が光学部品２を通して入射される光（像）Ｌを撮像し、撮像信号を出力する。撮像信号はＡＦＥ回路６にてアナログ処理がされた後、ＡＤコンバータ７にてデジタルに変換され、信号処理回路８にて所定の処理が施されることで、１枚の画像を表すデータ信号となる。この画像（データ信号）は、μＣＯＭ１４の制御を受けたメモリ制御回路１０の動作によって画像メモリ９の所定のアドレスに一時的に蓄積される。
このように「撮影」という言葉は、撮像デバイス４による撮像から画像メモリ９によるデータ蓄積までの一連の動作を指す。

次に、図４のステップＳＴ４にて、撮影した画像の画質から「正しく撮影されているか」を調べる。
より詳細には、図２を参照すると、μＣＯＭ１４がメモリ制御回路１０を介して画像メモリ９内を探索し、撮影した画像のデータを読み出し、当該データの画像の画質が所定の基準を満たしているかを評価する。

画質評価は、例えば以下の５つの項目を単独で、あるいは、任意に複数組み合わせて行う。
５つの項目とは、
（１）ピントが合っているか、
（２）ぶれ画像になっていないか、
（３）ホワイトバランスが正しいか、
（４）撮影されている画像が真っ黒または真っ白でないか、
（５）ある特定の色でないか、
である。

例えばμＣＯＭ１４は、上記５つの項目のそれぞれを表す画質パラメータ（合焦値、画像ぶれ値、ＷＢ値、輝度値、色分布などの画質を表す数値等）のうち単一の、あるいは、任意の画質パラメータの組を用いて、撮像した画像の画質を評価する。

そして、画質の点から正しく撮影されている場合は、ステップＳＴ５で画像の保存を行い、正しく撮像されていない場合はステップＳＴ６で画像を消去する。
ステップＳＴ５の画像の保存は、具体的に図２において、メモリ制御回路１０を介したμＣＯＭ１４の制御により画像メモリ９から正しく撮像されている画像のデータを読み出し、画像圧縮回路１１で所定の規格に則したデータ圧縮を行う。そして、メモリ制御回路１３を介したμＣＯＭ１４の制御により、画像圧縮回路１１からの圧縮後の画像データを記録メモリ１２の所定のアドレスに書き込む。
一方、ステップＳＴ６の画像の消去では、メモリ制御回路１０を介したμＣＯＭ１４の制御により画像メモリ９から、正しく撮像されていいない画像のデータを消去する。

つぎに、上記ステップＳＴ４で用いる５つの項目について、その評価方法の具体例とともにさらに詳細に説明する。

上記「（１）ピントが合っているか」に関しては、撮影された静止画像に含まれている被写体部分を解析して撮影状態（ピント状態）を認識するとよい。被写体部分の検出は、例えば、被写体が人物の場合には、画像全体を解析しながら顔部分が含まれているかを認識するが、その際、顔の輪郭、目、口、鼻などの形あるいはそれらの位置関係を総合的に判断して顔部分を認識した後、例えば目の部分を特定する。そして、目の部分を解析しながらそのエッジ状態を認識し、このエッジの鋭さ度合いからピント状態（合焦度）を判定する。合焦度が、ある基準以上の場合「ピントが合っている」と判断し、未満の場合「ピントが合っていない」と判断できる。

なお、ピント状態を認識する上記方法はあくまで一例であり、エッジの鋭さ度合いに限らず、エッジの長さなどを認識してよい。ピントがぼけた画像は認識可能な全エッジ長が極端に短くなるため、エッジの長さが「ピントが合っているか」の評価パラメータとなり得る。また、類似した画像（被写体が同じもの）が複数ある場合は、空間周波数特性のヒストグラムを作成し、高い周波数成分が多い画像ほどピントが合っているという判断もできる。さらに、赤外線によって測定された被写体までの距離あるいは画像コントラストなどを参照してよい。
このように本実施形態で、ピント状態を認識する手法は任意である。ピントがずれている画像データは保存の価値がないとして消去される。

前述した「（２）ぶれ画像になっていないか」に関しても、様々なぶれ画像検出方法が採用できる。
例えば、図２のジャイロセンサ１５など、機械的な振動検出からぶれ画像であると推定してもよいし、また、撮像により得られた画像データからぶれ画像を電気的に検出してよい。
電気的検出では、撮像により得られた画像データから手振れを検出する。例えば、複数のフレーム画像を取得（撮像して）そのベクトル（データ変位量と変化の向きの）解析により手振れを検出してよい。また、画像輝度成分の離散コサイン変換（ＤＣＴ）処理により手振れ判定してよい。なお、このＤＣＴを用いた方法の詳細は、例えば特開２００６−１９０２５９号公報に詳しい。
手振れ画像データは保存の価値がないとして消去される。

前述した「（３）ホワイトバランスが正しいか」に関して、通常、オートではホワイトバランスは正しく設定されるが、例えばマニュアルによるホワイトバランスの場合、ホワイトバランスがずれていることがある。このようなホワイトバランスがずれた画像は保存の必要がないと判断する。

ホワイトバランスの検出手法については、例えば、色ごとの画像データの積分値を色座標に変換し、色温度推定する方法が採用できる。より詳細にホワイトバランスを求める方法としては、例えば、積分値データを（Ｒ−Ｂ）／Ｇと（Ｒ＋Ｂ−２Ｇ）／Ｇを軸にとった色座標の積分値データに変換し、かつ、変換後の座標点（色差データ）を黒体放射カーブ上に所定の規則に従って移動させ、そこを光源の色温度と推定して起点とし、引き込みを行う方法がある。ここで「引き込む」とは、推定した色温度を所定の目標値に移動したときに得られる各色成分の変化量から色バランス調整量（ゲイン比）を抽出する動作をいう。このようなホワイトバランス検出は、例えば、図２の信号処理回路８内等に設けられている色ごとの積分器（ＯＰＤ：Optical Detector）からの積分値をμＣＯＭ１４が入力して、当該μＣＯＭ１４が所定のプログラムのルーチンに従って演算処理を行うことで実行できる。

前述した「（４）撮影されている画像が真っ黒または真っ白でないか」については、例えば、図２の信号処理回路８内で発生した輝度信号を上記積分器等で１画面（１フレーム）分積算し、その積算値が異常に低い真っ黒な画像、異常に高い真っ白な画像を検出する方法が採用できる。これにより通常被写体と考えられない太陽や光源を撮影したという状況、あるいは、レンズを手で覆っていたなどの状況で撮影された画像が検出され、そのような画像は保存の価値なしとして廃棄される。

同様に「（５）ある特定の色でないか」については、例えば、色ごとの積分値を１画面分求め、その積分値から、特定の色（単色または混色）が画面全体に映し出されているかどうかを調べるとよい。このような特定の色で画面全体がほぼ占められている場合、通常被写体を映しているとは考えにくいため、そのような画像は保存の価値なしとして廃棄される。

なお、上記５つの項目ごとに、画質パラメータの判定基準を設け、撮影画像の画質パラメータが、その判定基準より優れた値（または判定基準以上）を示す場合は撮影画像の保存を選択し（ＳＴ５）、判定基準以下（または判定基準未満）の場合は撮影画像の廃棄を選択してよい（ＳＴ６）。

あるいは別の方法として、画質パラメータの判定基準を予め用意するのではなく、その時点で、例えば図２の記録メモリ１２に保存されている類似画像から適応的に求めてよい。
デジタルスチルカメラでは、通常、撮影画像を保存するか廃棄するかは、ユーザがメモリ内の画像を閲覧する間に適宜判断されるため、メモリに保存されている画像の画質が、ユーザが求める画質またはユーザの撮影技能に適合した画質であり、この画質レベルをクリアしたものがユーザにとって保存の価値がある画質と判断されているものと推定できる。そして、この画質レベルは被写体によって異なると考えられる。
よって、本実施形態では、記録メモリ１２内に既に記憶されている類似画像を求め、この類似画像（被写体がほぼ同じと考えられる範囲）内で評価基準を決めるとよい。具体的な決め方は、類似画像の平均的な画質を基準としてもよいし、極端に悪い画質の類似画像を除く範囲で、最低の画質レベルを基準としてもよい。後者のやり方で極端に悪い画質の類似画像を除く理由は、ユーザが求める画質レベルの分布から外れるものも誤ってメモリされている可能性があることを考慮し、これを排除するためである。
このように、類似画像の画質パラメータを評価基準とする場合に、その具体的な基準のとり方は任意である。

類似画像の検索方法も任意であるが、例えば特開２００６−１９０２５９号公報に記載されている特徴抽出手法が採用できる。

《第２実施形態》
図５に、第２実施形態に関わる（電源）操作処理のフロー図を示す。
図５に示す処理方法が図４に示す処理方法と異なるのは、図４のステップＳＴ３の「撮影」と、ステップＳＴ４の「画質判定」の間に、「撮影準備操作の有無判断」を行うステップＳＴ８を挿入させている点である。他のステップは第１実施形態と共通するため、ここでの説明を省略する。

「撮影準備操作の有無判断」は、撮影の準備に入っていることが検出できるものであれば、どのような操作情報を基にして行ってもよい。具体例を挙げるならば、以下の操作が「撮影準備操作」に該当する。
すなわち、
（Ａ）ズームボタン１１６（図２）の操作がされた、
（Ｂ）モード選択ツマミ１１５（図２）が操作され、機能モードが再生などから「静止画」、「動画」などの撮影モードに入った、
（Ｃ）方向キー１１９および決定ボタン１２０（図２）の操作により、撮影モード内のプログラム撮影モード（露出、シャッタ速度などの撮影環境に合わせた撮影条件の自動設定）の切り替えが行われた、
（Ｄ）マニュアルのフォーカスレバー（不図示）が操作された、
（Ｅ）自動撮影とマニュアル撮影の切り替えが行われた、
（Ｆ）露出、シャッタ速度などの手動による撮影条件の変更が行われた。
これらの操作（または動作）が単独で、あるいは、任意の組み合わせ（および順序）で検出された場合、撮影意図があったと推定できる。つまり、これらの操作部などからの操作情報がμＣＯＭ１４（制御部）に入力されると、μＣＯＭ１４は「撮影意図あり」と判断してよい。

ただし、特に大きなボタンやレバーなどは、撮影意図がないのに誤って操作されることがある。また、これらの撮影準備操作と、電源オフ操作（ユーザはシャッタ操作を意図）とが余りに時間的にかけ離れている場合は、撮影意図の有無推定は無理がある。よって、図５のステップＳＴ１から時間的に遡って、例えば数十秒〜数秒などの所定の長さを有する期間内に、上記（Ａ）〜（Ｆ）などに例示した所定の操作があれば、この操作を「撮影準備操作」と判断するなど時間的制約を設けてよい。

ステップＳＴ８の判断が「ＹＥＳ」の場合は、撮影準備操作があったので、ステップＳＴ５に移行して必ず画像保存を行う。一方、撮影準備操作がない場合は、ステップＳＴ４で画質を判定してから、画像を保存するか廃棄するかを決める。

この処理フローでは、画質判定の意味合いが第１実施形態と異なる。
つまり、第１実施形態では「画質の良いものを残し、悪いものを廃棄する」という単純な考えで画質判定を行う。このとき撮影意図がなく撮られた画像は画質が悪いので当然廃棄される。
これに対し、第２実施形態では、撮影意図があれば画質が良かろうと悪かろうと画像を保存し、その後のユーザによる閲覧でのマニュアル選別等に委ねる。撮影意図がない場合のみ、第１実施形態と同様に画質判定を行う。第２実施形態の画質判定は、「撮影意図がなくても高画質データは保存してユーザ閲覧による選別に委ね、撮影意図がなく且つ悪い画質の場合のみ画像データを廃棄する」ためにある。

このようなステップＳＴ８の追加は、以下の理由に拠る。
ユーザの撮影意図の有無判断は、上記（Ａ）〜（Ｆ）などの操作に基づく、あくまでも推定の域を出ないため、実際には撮影意図があっても撮影意図なしと判断される可能性が皆無ではない。よって、撮影意図なしと判断されても比較的きれいな画像は残しておいて最終的にはユーザの判断に委ねる方が、大事な画像を消すという重大なミスを犯さなくて済む。一方、撮影意図があれば画質が悪いものでも保存したいユーザが居るかもしれないし（シャッタチャンスが稀有な場合など）、その一方で、撮影意図がなければ非常に画質が悪いと画像として価値を失うと考えられ、このような画像をユーザは保存しない。よって、撮影意図なしと判断された場合に画質が悪い画像だけ消去すれば、ユーザに不利益を与える可能性は最小限にまで低減できる。
このような理由から本実施形態ではステップＳＴ８を設けている。

撮影開始の契機とする情報は手振れ情報のみに限定されない。以下の第３および第４実施形態は、そのことを示すものである。

《第３実施形態》
図６は、第３実施形態に関わる（電源）操作処理のフロー図である。
図６に示す処理方法が図４に示す処理方法と異なるのは、図４のステップＳＴ３の「撮影」を行うかどうかを判断するステップ、すなわちステップＳＴ１とＳＴ３の間のステップが、ひどい手ぶれを検出するステップＳＴ２から、撮影準備操作の有無判断を行うステップＳＴ８に変更されている点である。他のステップは第１実施形態と共通するため、ここでの説明を省略する。また、ステップＳＴ８自体の説明は第２実施形態で既に説明したので、ここでの詳しい説明を省略する。

ステップＳＴ１で電源オフの操作がされると、例えば、当該電源オフの操作から時間的に遡って所定の期間に、撮影準備操作が行われたかをμＣＯＭ１４が、入力した制御信号の履歴等から判断する。撮影準備操作の具体例は、第２実施形態で示した（Ａ）〜（Ｆ）であるが、ここでは撮影開始を決める大事な判断なので、「撮影準備操作なし」で撮影意図がないと判断する場合に、より慎重に条件を設定してよい。つまり、撮影意図があるかどうか疑わしい場合は、この判断を「ＹＥＳ」として、とりあえず撮影を行うとよい。また、上記（Ａ）〜（Ｆ）のいずれの操作も行われていない場合でも、ステップＳＴ８の判断を直ぐに「ＮＯ」とせずに、付加的な条件、例えば「前回の撮影からかなり時間が経過している」などを条件として、当該条件を満たせば処理フローをステップＳＴ７にジャンプさせるようにしてよい。

《第４実施形態》
図７は、第４実施形態に関わる（電源）操作処理のフロー図である。
図７に示す処理方法が図４に示す処理方法と異なるのは、図４のひどい手ぶれを検出するステップＳＴ２と、撮影のステップＳＴ３との間に、撮影準備操作の有無判断を行うステップＳＴ８を追加し、撮影準備操作がなかったと判断されステップＳＴ８が「ＮＯ」となると処理フローがステップＳＴ７にジャンプする点である。他のステップは第１実施形態と共通するため、ここでの説明を省略する。また、ステップＳＴ８自体の説明は第２実施形態で既に説明したので、ここでの詳しい説明を省略する。

このようにひどい手振れがなく、かつ、撮影操作準備があったことを条件に撮影開始を行ってよい。

《第５実施形態》
図８は、第５実施形態に関わる（電源）操作処理のフロー図である。
図８に示す処理方法が図４に示す処理方法と異なるのは、図４のひどい手ぶれを検出するステップＳＴ２と、撮影のステップＳＴ３との処理順序が入れ替わっていることである。このためステップＳＴ２でひどい手振れがある場合、既に撮影がされているため、処理が、ステップＳＴ６の画像の廃棄を経てステップＳＴ７に進む。
他のステップは第１実施形態と共通するため、ここでの説明を省略する。

上記第５実施形態は、第１実施形態に対し、電源オフ後直ぐに撮影をとりあえず行うという変形を示すものであるが、この変形は、第２〜第４実施形態（図５〜図７）に対しても同様に可能である。
特に図示しないが、図５のステップＳＴ２とステップＳＴ３が処理手順として入れ替わり、ステップＳＴ２の判断が「ＹＥＳ」の場合、処理がステップＳＴ６を経てステップＳＴ７に進む。
特に図示しないが、図６のステップＳＴ３とステップＳＴ８が処理手順として入れ替わり、ステップＳＴ８の判断が「ＮＯ」の場合、処理がステップＳＴ６を経てステップＳＴ７に進む。
特に図示しないが、図７のステップＳＴ３が、ステップＳＴ２より前に処理手順として入る。この場合、ステップＳＴ２の判断が「ＹＥＳ」の場合、ステップＳＴ８の判断が「ＮＯ」の場合、共に処理がステップＳＴ６を経てステップＳＴ７に進む。

なお、以上述べてきた第１〜第５実施形態では、種々の変形が可能である。
以上の説明では電源オフの操作をユーザが行えば、後はユーザが何ら操作をしなくても電源オフの処理（ステップＳＴ７）が自動的に実行されるようなシーケンスであった。このシーケンスは、撮影→電源オフの一連の処理がユーザの１操作で済むため、その点で好ましい。
ただし、ユーザは最後の撮影にしたいとは限らない場合がある。その場合、電源が１枚の撮影後に直ぐに切られると、ユーザは再び電源投入しなければならない。

この不利益を回避するには以下のようなシーケンスとしてよい。
撮影のためにシャッタ等が切られた場合、音などでユーザに認知できるようにして、その場合、もう一度電源オフ操作（または電源ボタン１２５の長押し等）をしないと実際の電源オフ処理が実行されないなど、何らかの操作をユーザに求めるようにしてよい。
あるいは、ステップＳＴ５やＳＴ６の処理が終了しても、しばらく（例えば１分程度）はステップＳＴ７を実行しないようにして、その間、再び電源ボタン１２５や撮影ボタン１２６が操作されると、その操作による撮影を受け付け（短い周期であれば何回も繰り返し撮影可能とし）、最後の撮影による画像の保存または廃棄が終了してから所定時間（上記例では１分）を経て実際の電源オフを行うようにしてよい。

また、撮影済みの画像消去について、図４〜図７のステップＳＴ６の前に画像を消して良いかをユーザに確認するステップを挿入するか、または、消去する画像は一時的なバッファにためておき、次に電源投入するときなど、所定のタイミングでユーザに本当に消去してよいかを確認してよい。これにより消去画像を復活できる。

以上述べてきた第１〜第５実施形態に関わる画像入力処理装置は、以下の利点がある。
ユーザがシャッタを押す、あるいは、動画撮影開始を行おうとして、「撮影操作部」を操作したつもりが誤って「電源操作部」を操作した場合でも、本実施形態に関わる画像入力処理装置は、撮影意図があったかどうかを判断して、撮影意図があった場合に、撮影操作部を操作することを契機とする通常の撮影動作と同じ用に動作する。
電源操作部の操作により撮影意図を、「ひどい手振れがあるか」「撮影準備動作があったか」の一方または双方に基づいて判断し、撮影意図があった場合に撮影を行う場合（第１〜第４実施形態）と、電源操作部の操作により撮影意図を判断せずに直ぐに撮影を行い、撮影を終えてから画質により撮影意図を判断する場合（第５実施形態等）がある。
いずれの場合でも、ユーザは大切なシャッタチャンス（あるいは動画撮影開始タイミング）を逃してしまうという不利益を受けない、あるいは、ほとんど受けなくなる。

ユーザにとっては、撮影と電源オフを一度の操作により実行可能である。これは、操作ミスではなく、ユーザの意図的な操作を許容して操作性を上げることにも貢献する。つまり、ユーザは、電源を切る前に最後の１枚を撮影したいときは撮影ボタン１２６ではなく、意識的に電源ボタン１２５を操作することで、１操作による撮影および電源オフの軽快な動作が可能となる。
一方、もう一度電源操作するなど何らかのアクションで直ぐに電源オフしない選択も可能である。

本発明の実施形態および背景技術の説明に用いたカメラ本体の上面図である。 実施形態に関わるカメラ装置のブロック図である。 実施形態に関わるカメラ装置の背面図（リアフェイスの概観図）である。 第１実施形態に関わる操作処理方法の手順を示すフロー図である。 第２実施形態に関わる操作処理方法の手順を示すフロー図である。 第３実施形態に関わる操作処理方法の手順を示すフロー図である。 第４実施形態に関わる操作処理方法の手順を示すフロー図である。 第５実施形態に関わる操作処理方法の手順を示すフロー図である。

符号の説明

１…カメラ装置、２…光学部品、３…レンズ、４…撮像デバイス、５…撮像ドライバ、６…ＡＦＥ回路、７…ＡＤコンバータ、８…信号処理回路、９…画像メモリ、１０…メモリ制御回路、１１…画像圧縮回路、１２…記録メモリ、１３…メモリ制御回路、１４…μＣＯＭ、１５…ジャイロセンサ、１０１…カメラ本体、１０２…液晶表示部、１１５…モード選択ツマミ、１１６…ズームボタン、１１９…方向キー、１２０…決定ボタン、１２４…スイッチホルダ面、１２５…電源ボタン、１２６…撮影ボタン、１２７…手振れ設定ボタン

Claims (14)

1. 撮影操作部と、
   電源操作部と、
   撮影準備時と非撮影準備時で異なる情報を発生する情報発生部と、
   前記電源操作部が操作されたときに前記情報から撮影準備時と判断される場合は、撮影意図が有るとみなして、当該電源操作部の操作を、前記撮影操作部が操作されたときと同様な撮影開始の契機とする制御部と、
   を有する画像入力処理装置。
2. 前記制御部からの前記撮影開始の契機に応じて撮像を行う撮像部と、
   電源部と、をさらに有し、
   前記制御部は、前記撮像部により画像が撮像された後に、前記電源部を制御して電源をオフする
   請求項１に記載の画像入力処理装置。
3. 前記制御部からの前記撮影開始の契機に応じて撮像を行う撮像部と、
   画像を記憶する記憶部と、をさらに有し、
   前記制御部は、前記撮像部により撮像された画像の画質を評価し、画質が所定の基準以上であれば、前記撮像された画像を前記記憶部に保存し、画質が基準未満であれば、前記撮像された画像を廃棄する
   請求項１に記載の画像入力処理装置。
4. 前記制御部は、前記撮像された画像と類似する画像を前記記憶部内で検索し、類似画像が検出された場合、検出された類似画像の画質パラメータを前記撮像された画像の画質の評価基準とし、類似画像が検出されない場合は、予め決められた画質パラメータを前記撮像された画像の画質の評価基準とする
   請求項３に記載の画像入力処理装置。
5. 前記情報発生部は、撮影準備のために構図を構えたときは静止状態に近いことを示す情報を前記制御部に出力するセンサ、撮影準備で操作されて情報を前記制御部に出力する撮影準備操作部の少なくとも一方を含んで構成され、
   前記制御部は、前記センサからの情報、あるいは、前記撮影準備操作部からの情報に基づいて、または、前記センサからの情報と前記撮影準備操作部からの情報に基づいて、前記撮影準備時または前記非撮影準備時を判断する
   請求項１に記載の画像入力処理装置。
6. 前記制御部は、前記撮影準備操作部からの情報を用いる場合、前記電源操作部が操作されたときより所定時間だけ前までの期間内にあった前記撮影準備操作部の操作に基づいて、前記撮影準備時と前記非撮影準備時の何れであるかを判断する
   請求項５に記載の画像入力処理装置。
7. 撮像部と、
   記憶部と、
   撮影操作部と、
   電源操作部と、
   前記電源操作部が操作されたときは当該電源操作部の操作を、前記撮影操作部が操作されたときと同様な撮影開始の契機として前記撮像部に撮像を指示するとともに、撮像により得られた画像の画質を評価し、画質が所定の基準以上であれば、撮影意図が有ったとみなして、前記撮像された画像を前記記憶部に保存し、画質が基準未満であれば、前記撮像された画像を廃棄する制御部と、
   を有する画像入力処理装置。
8. 前記制御部は、前記撮像された画像と類似する画像を前記記憶部内で検索し、類似画像が検出された場合、検出された類似画像の画質パラメータを前記撮像された画像の画質の評価基準とし、類似画像が検出されない場合は、予め決められた画質パラメータを前記撮像された画像の画質の評価基準とする
   請求項７に記載の画像入力処理装置。
9. シャッタ操作ミスで電源オフ操作がされた場合の操作処理方法であって、
   前記電源オフ操作がされたときに、撮影準備時と非撮影準備時で異なる情報を検出するステップと、
   前記電源オフ操作がされたときに前記情報から撮影準備時と判断される場合は、撮影意図が有るとみなして、当該電源オフ操作を契機として撮影を行うステップと、
   を含む操作処理方法。
10. 撮像準備時と判断された場合は、前記撮影により画像が得られた後に電源オフを実行し、非撮像準備時と判断された場合は、撮像を行うことなく電源オフを実行するステップを、
    さらに含む請求項９に記載の操作処理方法。
11. シャッタ操作ミスで電源オフ操作がされた場合の操作処理方法であって、
    前記電源オフ操作がされたときは、当該電源オフ操作をシャッタ操作と同様な撮影開始の契機として、撮像を行うステップと、
    前記撮像により得られた画像の画質を評価するステップと、
    前記画質が所定の基準以上であれば、撮影意図が有ったとみなして、前記撮像された画像を保存し、画質が基準未満であれば、前記撮像された画像を廃棄するステップと、
    を含む操作処理方法。
12. コンピュータに、
    電源オフ操作がされたときに、撮影準備時と非撮影準備時で異なる情報を検出するステップと、
    前記電源オフ操作がされたときに前記情報から撮影準備時と判断される場合は、撮影意図が有るとみなして、当該電源オフ操作を契機として撮影を行うステップと、
    を実行させるためのプログラム。
13. 撮像準備時と判断された場合は、前記撮影により画像が得られた後に電源オフを実行し、非撮像準備時と判断された場合は、撮像を行うことなく電源オフを実行するステップを、
    前記コンピュータに実行させる手順としてさらに含む
    請求項１２に記載のプログラム。
14. コンピュータに、
    電源オフ操作がされたときは、当該電源オフ操作をシャッタ操作と同様な撮影開始の契機として、撮像を行うステップと、
    前記撮像により得られた画像の画質を評価するステップと、
    前記画質が所定の基準以上であれば、撮影意図が有ったとみなして、前記撮像された画像を保存し、画質が基準未満であれば、前記撮像された画像を廃棄するステップと、
    を実行させるためのプログラム。

Images