JP2010226623A - 撮像装置、撮像方法及び撮像プログラム - Google Patents

Abstract

【課題】被写体を撮影する際の撮影者の体調または気分に応じて異なる風情の写真を撮ることができることを目的とする。
【解決手段】本発明に係る撮像装置は、被写体画像を撮像処理部３６ｃに記憶しておき、センサ部４４で測定した生体情報に基づいて撮影者の体調または気分を情報処理部３６で分析し、分析した撮影者の体調または気分状態に応じて被写体画像に施す画像処理のパラメータを情報処理部３６で変更し、撮像処理部３６ｃで被写体画像に画像処理を施すことで、被写体を撮影する際の撮影者の体調または気分に応じて異なる風情の写真を撮ることができる。
【選択図】図１

Description

本発明は、例えばデジタルカメラ等の撮像装置に関し、例えば、被写体を撮影する際の撮影者の体調または気分に応じて異なる風情の写真を撮ることができる撮像装置、撮像方法及び撮像プログラムに関するものである。

従来、一眼レフカメラは、マニュアルモードでは、撮影者がその時々や場所に応じて適切と考える撮影条件を随時設定して、撮影者が設定した撮影条件で撮影を行なえるようになっている。この結果、撮影者の微妙な個性が撮影した画像に反映されるので、撮影をより一層楽しむことができる。ところが、マニュアルモードの操作は、カメラの撮影知識や経験の少ない撮影者にとっては個性を表現する以前に操作自体が非常に分かり難い。

一方、フルオートカメラは、撮影者の知識や経験とは無関係に、安定した撮影条件を自動で設定できることを目的に設計されている。このため、フルオートカメラの場合、被写体や構図以外に個性的な表現を表すことは困難であり、撮影された画像に個性は現れにくく、面白味に欠けることもある。

例えば、特許文献１には、ユーザ（被写体）の心拍数が所定数まで低下した時にユーザが落ちついたと判断をしてシャッターを切るという撮影装置が開示されている。この撮影装置はパスポートや免許証等の証明書類に用いる写真の撮影に適している。

さらに、特許文献２には、外界から驚愕するような巨大な音響や、閃光等を受けた際の撮影者の五感感覚による心拍数の変化を測定しておき、この測定値に基づいて、銀塩カメラ、スチルビデオカメラおよびビデオカメラ等の各種カメラの露光量もしくは映像信号レベルを増減するように制御する制御装置が開示されている。

特開２００３−１６７２９２号公報 特開平９−５４３４９号公報

しかしながら、特許文献１に開示された撮影装置は、ユーザの心拍数が所定数まで低下した時にシャッターを切るものであり、撮影を行う状況が限定されている。特許文献２に開示された制御装置は、驚愕時の急激な心拍数変化に応じて映像信号を増減させるので、撮影者のその時々の微妙な体調または気分の変化を反映した繊細な風情の写真が撮れなかった。

そこで、撮影者のその時々の体調または気分に応じて異なる風情の写真が撮れるカメラが要望されている。

本発明は、かかる従来の課題に鑑みてなされたものであり、例えば、被写体を撮影する際の撮影者の体調または気分に応じて異なる風情の写真を撮ることができる撮像装置、撮像方法及び撮像プログラムを提供することを目的とする。

前記課題を解決するため請求項１記載の発明に係る撮像装置にあっては、被写体画像を撮像する撮像手段と、撮影者の生体情報を測定する測定手段と、前記測定手段により測定された生体情報に基づいて撮影者の体調または気分を分析する分析手段と、前記分析手段により分析した撮影者の体調または気分状態に応じて被写体画像に施す画像処理のパラメータを変更し、被写体画像に画像処理を施す画像処理手段とを備えることを特徴とする。

また、請求項２記載の発明に係る撮像装置にあっては、前記生体情報は、撮影者の体温、脈拍、握力の少なくとも１つであることを特徴とする。

また、請求項３記載の発明に係る撮像装置にあっては、前記測定手段は、シャッター釦に設けられた脈拍センサ、把持部に設けられた温度センサ、把持部に設けられた握力センサ、把持部に設けられた発汗センサ、装置本体に設けられたジャイロセンサ、装置本体に設けられた角速度センサの少なくとも１つのであることを特徴とする。

また、請求項４記載の発明に係る撮像装置にあっては、前記画像処理手段は、前記分析手段により分析された撮影者の体調または気分状態に応じて、被写体画像に明暗処理、色調処理、濃淡処理、エッジ強調の少なくとも１つを施すことを特徴とする。

また、請求項５記載の発明に係る撮像装置にあっては、前記分析手段により分析された撮影者の体調または気分状態に応じて、キャラクタ、マーク、文字列の情報内容を変更する変更手段を備え、前記画像処理手段は、キャラクタ、マーク、文字列のいずれか１つを被写体画像に重畳付加することを特徴とする。

また、請求項６記載の発明に係る撮像方法にあっては、撮像部に被写体画像を撮像させる撮像ステップと、撮影者の生体情報をセンサ部に測定させる測定ステップと、前記測定ステップにより測定された生体情報に基づいて撮影者の体調または気分を分析する分析ステップと、前記分析ステップにより分析した撮影者の体調または気分状態に応じて被写体画像に施す画像処理のパラメータを変更し、被写体画像に画像処理を施す画像処理ステップと、を含むことを特徴とする。

また、請求項７記載の発明に係る撮像プログラムにあっては、撮像装置が有するコンピュータを、撮像部に被写体画像を撮像させる撮像手段、撮影者の生体情報をセンサ部に測定させる測定手段、前記測定手段により測定された生体情報に基づいて撮影者の体調または気分を分析する分析手段、前記分析手段により分析した撮影者の体調または気分状態に応じて被写体画像に施す画像処理のパラメータを変更し、被写体画像に画像処理を施す画像処理手段、として機能させることを特徴とする。

本発明によれば、被写体を撮影する際の撮影者の体調または気分に応じて異なる風情の写真を撮ることができる。

本発明の第１の実施の形態の撮像装置であるデジタルカメラの電気的構成を示すブロック図である。 図１の撮像装置が用いる、撮影者のバイオリズムや生体情報に関する分析結果を示す分析結果テーブルＴＢ１である。 図１の撮像装置において、指標１，２と平常状態値とから撮影者の現在の気分状態を判定するために用いる画像処理指標テーブルＴＢ２である。 図１の撮像装置が用いる、気分状態方向１〜４のそれぞれに対応する画像処理項目を記載した画像処理項目テーブルＴＢ３である。 図１の撮像装置が実行する、フィーリング撮影モード処理の処理手順を示すフローチャートである。 図１の撮像装置が、フィーリング撮影モードが設定された場合に情報処理部の制御の下で実行する記録用画像撮影処理の処理手順を示すフローチャートである。 図１の撮像装置が、フィーリング撮影モードが設定された場合に情報処理部の制御の下で実行するセンサ出力分析処理の処理手順を示すフローチャートである。 図１の撮像装置が、フィーリング撮影モードが設定された場合に情報処理部の制御の下で実行する画像処理の処理手順を示すフローチャートである。 図１の撮像装置が表示する、撮影者の気分状態方向１〜４に対応する画像の表示内容を示す図である。 本発明の第２の実施の形態の撮像装置が用いる、気分状態方向１〜４に対応するキャラクタ名および表示内容を記載したキャラクタ項目テーブルＴＢ４である。 本発明の第２の実施の形態の撮像装置が、フィーリング撮影モードが設定された場合に情報処理部の制御の下で実行される画像処理の処理手順を示すフローチャートである。 本発明の第２の実施の形態の撮像装置が表示する、撮影者の気分状態方向に対応する画像の表示内容を示す図である。

１ デジタルカメラ
３５ 撮像部
３６ 情報処理部
３８ メイン表示部
４４ センサ部

［第１の実施の形態］
図１は、本発明の第１の実施の形態の撮像装置であるデジタルカメラ１の電気的構成を示すブロック図である。

このデジタルカメラ１は、基本モードである撮像モードにおいて、ズームレンズ３１を移動させて光学ズーム動作を行わせるズーム駆動部３２、フォーカスレンズ３３を移動させて合焦動作を行わせるＡＦ駆動部３４、とから構成される撮像光学系と、撮像素子であるＣＣＤ，タイミング発生器（ＴＧ），垂直ドライバ，サンプルホールド回路（Ｓ／Ｈ），Ａ／Ｄ変換器，カラープロセス回路等を含む撮像部３５と、制御部３６ａ，画像圧縮部３６ｂ，撮像処理部３６ｃ等を含む情報処理部３６と、メイン表示制御部３７と、メイン表示部３８と、メインタッチパネル３９と、キー入力部４０と、記憶領域４１と、音声処理部４２と、スピーカ４３と、センサ部４４とを備える。

撮像モードでのモニタリング状態においては、ズーム駆動部３２は、光学ズーム指示があると制御部３６ａからの制御信号に基づいて図示しないズームレンズ駆動モータを駆動してズームレンズ３１を光軸に沿って前後に移動させることによりＣＣＤに結像させる画像の倍率そのものを変化させる。また、ＡＦ駆動部３４は図示しないフォーカスレンズ駆動モータを駆動してフォーカスレンズ３３を移動させる。そして、撮像光学系の撮像光軸後方に配置された撮像部３５に設けられた撮像素子であるＣＣＤが、タイミング発生器（ＴＧ），垂直ドライバによって走査駆動され、一定周期毎に結像した光像に対応する光電変換出力を１フレーム分出力する。

撮像部３５のＣＣＤは被写体の二次元画像を撮像する固体撮像デバイスであり、典型的には毎秒数十フレームの画像を撮像する。なお、撮像素子はＣＣＤに限定されずＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などの固体撮像デバイスでもよい。この光電変換出力は、アナログ値の信号の状態でＲＧＢの各原色成分毎に適宜ゲイン調整された後に、サンプルホールド回路（Ｓ／Ｈ）でサンプルホールドされ、Ａ／Ｄ変換器でデジタルデータ（画素）に変換され、カラープロセス回路で画像補間処理及びＹ補正処理を含むカラープロセス処理が行われて、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒが生成される。その後、カラープロセス回路の出力する輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒを、同じくカラープロセス回路からの複合（ｃｏｍｐｏｓｉｔｅ）同期信号、メモリ書き込みイネーブル信号、及びクロック信号を用いてバッファメモリとして使用される揮発性の一時記録装置４１ｄにＤＭＡ転送する。

情報処理部３６は、このデジタルカメラ全体の制御動作を司るものであり、ＣＰＵ若しくはＭＰＵ等の制御部３６ａと、１フレーム分の輝度及び色差信号をＹ、Ｃｂ、Ｃｒの各コンポーネント毎に縦８画素×横８画素の基本ブロックと呼称される単位で読み出してＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈ ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）回路に書込み、このＪＰＥＧ回路でＡＤＣＴ（Ａｄａｐｔｉｖｅ Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ：適応離散コサイン変換）、エントロピー符号化方式であるハフマン符号化等の処理によりデータ圧縮する画像圧縮部３６ｂと、撮像部３５によって撮像された画像データを処理する撮像処理部３６ｃと、各センサによる検出値の履歴を記憶するテーブルと、各センサからの検出値の分析結果を記憶する分析結果テーブルＴＢ１と、分析結果を指標化して撮影者の気分状態方向を分析するための画像処理指標テーブルＴＢ２と、気分状態方向に対応する画像処理項目を記憶する画像処理項目テーブルＴＢ３とを含む分析テーブル部３６ｄを有する。なお、情報処理部３６は、本発明の撮像手段、画像処理手段、分析手段に相当する。

また、制御部３６ａは、キー入力部４０からの状態信号に対応してフラッシュメモリ等のプログラム格納用メモリに格納されている各モードに対応の処理プログラムやメニューデータを取り出して、デジタルカメラ１の各機能の実行制御や、光学ズーム時のズームレンズの動作制御や、電子ズームや、ライブビュー表示、自動合焦、撮像、記憶、及び記憶した画像の再生・表示等の実行制御等を行う。

また、制御部３６ａは合焦指示に応じてその時点でＣＣＤから取込んでいる１フレーム分の輝度及び色差信号のＤＭＡ転送の終了後、直ちにＣＣＤからの経路を停止して記憶保存の状態に遷移する。そして、得た符号データを１画像のデータファイルとしてＪＰＥＧ回路から読出し、保存記録装置４１ｃや外部記憶装置４１ｂに記憶保存する。また、１フレーム分の輝度及び色差信号の圧縮処理及び保存記録装置４１ｃへの全圧縮データの書込み終了に伴って、制御部３６ａはＣＣＤから一時記録装置４１ｄへの経路を再び起動する。

メイン表示制御部３７は、撮影画像の表示制御や機能選択時の操作用画像の表示制御、設定画面の表示制御等を行うものであり、メイン表示部３８に対する表示制御を行う。メイン表示制御部３７は、上記輝度及び色差信号を一時記録装置４１ｄから定期的に読み出し、これらのデータを基にビデオ信号を生成してメイン表示部３８に出力する。メイン表示部３８は、上述したように撮像モード時にはモニタ表示部（電子ファインダ）として機能するもので、ビデオ信号に基づいた表示を行うことで、その時点で取込んでいる画像情報に基づく画像をリアルタイムに表示することになる。
メインタッチパネル３９は、メイン表示部３８に設けられたタッチパネル機能を制御する入力制御部である。

記憶領域４１は、外部記憶装着部４１ａに装着可能な外部記憶装置４１ｂや、不揮発性の保存記録装置４１ｃや、揮発性の一時記録装置４１ｄを含むものである。保存記録装置４１ｃは制御部３６ａで実行される動作プログラム等を記憶したプログラム格納メモリとして、一時記録装置４１ｄは上記輝度及び色差信号をＤＭＡ転送されるメモリとして機能する。
この記憶領域４１に属する記録装置又は記憶装置は、本実施例においては４１ａ〜４１ｄの形態をとっているが、これに限らず、別の組み合わせであっても良い。たとえば、一時記録装置４１ｄと保存記録装置４１ｃは、一つの不揮発性の記録装置で代替されても構わない。

また、基本モードである再生モード時には、制御部３６ａが保存記録装置４１ｃ又は外部記憶装置４１ｂに記憶されている画像データを選択的に読出し、ＪＰＥＧ回路で撮像モード時にデータ圧縮した手順とまったく逆の手順で圧縮されている画像データを伸張し、伸張した画像データをメイン表示制御部３７を介して展開して記憶させた上で、このメイン表示制御部３７から定期的に読出し、これらの画像データを元にビデオ信号を生成してメイン表示部３８で再生出力させる。

上記ＪＰＥＧ回路は複数の圧縮率に対応しており、圧縮率に対応させて記憶するモードには圧縮率の低い高解像度（一般に、高精細、ファイン、ノーマルなどと呼ばれる）に対応するモードと圧縮率の高い低解像度（一般にエコノミーなどと呼ばれる）モードがある。また、高画素数から低画素数にも対応している。例えば、ＳＸＧＡ（１６００×１２００）、ＸＧＡ（１０２４×７８６）、ＳＶＧＡ（８００×６００）、ＶＧＡ（６４０×４８０）、ＱＶＧＡ（３２０×２４０）等と呼ばれる記憶画素サイズがある。

保存記録装置４１ｃは、内蔵メモリ（フラッシュメモリ）やハードディスク等、外部記憶装置４１ｂは、着脱可能なメモリカード等の記憶媒体からなり画像データや撮像情報等を保存記憶する。

キー入力部４０は、シャッター釦３、電源釦４、モード釦５等を有し、それらのキーが操作されると操作されたキーの操作信号を生成して情報処理部３６に送出するキー処理部（図示せず）等から構成されている。モード釦５は撮像モードや再生モードの選択を行うものである。ユーザはモード釦５を操作して、（静止画）通常撮像モード、マクロ撮像モード、連写モード、速写モード、・・、動画撮像モード、フィーリング撮影モード等の撮像モードを選択することができる。シャッター釦３は、撮像時にレリーズ操作を行うもので、２段階のストロークを有しており、１段目の操作（半押し状態）でオートフォーカス（ＡＦ）と自動露出（ＡＥ）を行わせるための前準備指示信号を発生し、２段目の操作（全押し状態）で撮像処理を行うための撮像指示信号を発生する。

音声処理部４２は、制御部３６ａからの指示によってスピーカ４３で発生させる音声信号を処理するものであり、一例として、制御部３６ａによって処理可能なズーム処理範囲を超えている場合に、予め設定された音声信号を保存記録装置４１ｃから読み出してスピーカ４３で再生する。なお、報知は音声のみならず、ランプ等の光やメイン表示部３８による表示内容によっても行うことができる。
センサ部４４は、カメラ本体に配置されＸＹＺの３軸に対応する角速度を検出するジャイロセンサ４４ａと、カメラ本体の表面に配置され撮影者の例えば指の温度を検出する温度センサ４４ｂと、カメラ本体の表面のグリップ部に配置され撮影者の例えば指の発汗による結露の度合いを検出する発汗センサ４４ｃと、カメラ本体の表面のグリップ部に配置され撮影者の例えば指による握力を検出する握力センサ４４ｄと、カメラ本体のシャッター釦３の表面に配置され赤外線で撮影者の指先の血流量変化を測り脈波が指先に到達した時点を検出する脈拍センサ４４ｅと、カメラ本体に配置され撮影者による振動を検出する角速度センサ４４ｆと、を有する。なお、角速度センサ４４ｆは手振れ補正に用いるセンサを流用してもよい。なお、センサ部４４は、測定手段に相当する。

次に、本発明の撮像装置の第１の実施の形態であるデジタルカメラ１において、フィーリング撮影モードが設定された場合の動作について、図２〜図９を参照して説明する。図２は、撮影者のバイオリズムや生体情報に関する分析結果を示す分析結果テーブルＴＢ１、図３は、指標１，２と平常状態値とから撮影者の現在の気分状態を判定するために用いる画像処理指標テーブルＴＢ２、図４は、気分状態方向１〜４のそれぞれに対応する画像処理項目を記載した画像処理項目テーブルＴＢ３である。図５は、フィーリング撮影モード処理の処理手順を示すフローチャート、図６は、フィーリング撮影モードが設定された場合に情報処理部の制御の下で実行される記録用画像撮影処理の処理手順を示すフローチャート、図７は、フィーリング撮影モードが設定された場合に情報処理部の制御の下で実行されるセンサ出力分析処理の処理手順を示すフローチャート、図８は、フィーリング撮影モードが設定された場合に情報処理部の制御の下で実行される画像処理の処理手順を示すフローチャートである。図９は、撮影者の気分状態方向１〜４に対応する画像の表示内容を示す図である。

図５は、撮影モードにフィーリング撮影モードが設定された場合における制御部３６ａの処理手順を示すフローチャートである。

まず、制御部３６ａによりフィーリング撮影モードの設定読み出しを行う（ステップＳＡ１）。この設定読み出しは、フィーリング撮影モードの撮影に必要な各種パラメータの初期値を保存記録装置４１ｃ又は一時記録装置４１ｄから読み出す処理である。

次に、図示しないメニュー釦によってメニュー表示が指示されたか否かを判断する（ステップＳＡ２）。メニュー表示が指示されたと判断した場合は、メニュー処理を行う（ステップＳＡ３）。

ステップＳＡ２においてメニュー表示が指示されていないと判断した場合又はステップＳＡ３のメニュー処理が実行された場合は、センサ部４４に設けられた各種センサからの検出値に基づいてセンサ測定を行う（ステップＳＡ４）。ステップＳＡ４においては、センサ部４４に設けられた各種センサ４４ａ〜４４ｆから出力される検出値をセンサデータとして制御部３６ａに読み込む。次いで、制御部３６ａはそれぞれのセンサデータに時刻データを付加してセンサ履歴とし、一時記録装置４１ｄに記憶する（ステップＳＡ５）。

次いで、ライブビュー画像の撮影処理を行う（ステップＳＡ６）。ステップＳＡ６においては、ＡＷＢ（オートホワイトバランス）を実行する。

次いで、ライブビュー画像表示設定の設定処理を行う（ステップＳＡ７）。すなわち、ライブビュー画像で表示するガイド表示の内容を設定する処理であり、例えばフォーカス枠の決定等を行う。

次いで、メイン表示部３８を制御するメイン表示制御部３７にライブビュー画像表示のための処理を行い、メイン表示部３８にライブビュー画像を表示する（ステップＳＡ８）。

次いで、シャッター釦３が既に半押しされていて半押しフラグがオンしているか否かを判断する（ステップＳＡ９）。半押しフラグがオンしていないと判断した場合は、ユーザがシャッター釦３を半押ししたか否かを検出し（ステップＳＡ１０）、シャッター釦３の半押しを検出した場合は半押しフラグをオンする（ステップＳＡ１１）。ステップＳＡ１０において、シャッター釦３の半押しを検出しなかった場合は、ステップＳＡ１３に進む。ステップＳＡ１１の処理の後、基本撮影条件の設定処理を実行する（ステップＳＡ１２）。これは、ＩＳＯ感度やシャッター速度等の決定を行う設定処理である。ステップＳＡ１２の処理の後、フィーリング撮影モードを終了するか否かを判断し（ステップＳＡ１３）、終了すると判断した場合は本ルーチンを終了する。

一方、ステップＳＡ１３において、フィーリング撮影モードを終了しないと判断した場合は、処理をステップＳＡ２に戻して処理を続行する。以降、ステップＳＡ９において半押しフラグがオンされていると判断された場合について記載する。

ステップＳＡ９において半押しフラグがオンされていると判断された場合は、シャッター釦３で半押しが維持されているか否かを判断する（ステップＳＡ１４）。シャッター釦３で半押しが維持されていないと判断した場合は、半押しフラグをオフにする（ステップＳＡ１５）。

一方、シャッター釦３で半押しが維持されていると判断した場合は、シャッター釦３で全押しを検出したか否かを判断する（ステップＳＡ１６）。ここで、シャッター釦３の全押しを検出しないと判断した場合は、処理をステップＳＡ１３に進める。

一方、ステップＳＡ１６においてシャッター釦３の全押しを検出したと判断した場合は、記録画像の撮像処理を実行する（ステップＳＡ１７）。

次いで、外部記憶装置４１ｂに記録画像を記録し（ステップＳＡ１８）、記録画像をメイン表示制御部３７に出力し、メイン表示部３８を制御するメイン表示制御部３７にて表示制御し、メイン表示部３８に表示する（ステップＳＡ１９）。その後、処理をステップＳＡ１３に進める。

次に、図６を参照して、設定された撮影条件下で、情報処理部３６の制御の下で実行される記録用画像撮影処理について説明する。

まず、記録用画像の撮影処理を行う（ステップＳＡ３１）。ここで、撮像部３５によって撮像された画像データは撮像処理部３６ｃに取得される。

次いで、シャッター全押し時から過去数秒間の各種センサが検出したセンサ履歴を分析テーブル部３６ｄに設けられたテーブルから読み出して取得する（ステップＳＡ３２）。その後、後述するサブルーチンにてセンサ出力分析処理を行い（ステップＳＡ３３）、次いで、後述するサブルーチンにて画像処理を行って（ステップＳA３４）、本サブルーチンを終了する。

図７を参照して、情報処理部３６の制御の下で実行されるセンサ出力分析処理について説明する。

まず、分析テーブル部３６ｄから取得した脈拍センサ４４ｅの履歴である数秒間の検出値に基づいて撮影者の脈拍数を算出して指標１として取得する（ステップＳＡ４１）。次いで、保存記録装置４１ｃから予め記憶されている撮影者の生年月日を取得しておき、周知の手法により撮影者の生年月日に基づいて身体、感情、知性の３要素からなるバイオリズム波形を算出する（ステップＳＡ４２）。

次いで、分析テーブル部３６ｄから取得したジャイロセンサ４４ａの履歴である数秒間の検出値に基づいて振幅値の積算値を算出する（ステップＳＡ４３）。次いで、分析テーブル部３６ｄから取得した温度センサ４４ｂの履歴である数秒間の検出値に基づいて検出値の平均値を算出する（ステップＳＡ４４）。次いで、分析テーブル部３６ｄから取得した発汗センサ４４ｃの履歴である数秒間の検出値に基づいて検出値の平均値を算出する（ステップＳＡ４５）。次いで、分析テーブル部３６ｄから取得した握力センサ４４ｄの履歴である数秒間の検出値に基づいて検出値の平均値を算出する（ステップＳＡ４６）。

次いで、各センサの算出値をクラス分けしておき、どのクラスかを示すフラグを１に設定してセンサ毎に分析テーブル部３６ｄの分析結果テーブルＴＢ１に記憶する（ステップＳＡ４７）。すなわち、バイオリズム波形は所定の振幅を有する身体、感情、知性の３要素からなっているので、それぞれの振幅値を５段階のクラスのいずれかに分類しておく。次いで、ジャイロセンサ４４ａ、温度センサ４４ｂ、発汗センサ４４ｃ、握力センサ４４ｄ等から取得した積算値や平均値を５段階のクラスのいずれかに分類しておき、分類されたクラスを示すフラグを１に設定してバイオリズムの３要素やセンサ毎に分析テーブル部３６ｄの分析結果テーブルＴＢ１に記憶する。この結果、図２に示すように、撮影者のバイオリズムの３要素やセンサ毎にクラス分けされたフラグが分析結果テーブルＴＢ１に記憶される。

次いで、分析結果テーブルＴＢ１を参照して各クラスのフラグの合計値をそれぞれ算出し、それぞれの合計値を分析結果テーブルＴＢ１に記憶する（ステップＳＡ４８）。この結果、図２に示すように、各クラスのフラグの合計値が分析結果テーブルＴＢ１に記憶される。次いで、分析結果テーブルＴＢ１に記憶されている各クラスのフラグの合計値のうち最も多い合計値を有するクラスを指標２とする（ステップＳＡ４９）。なお、指標２の算出手法としては、各センサに対して重要なセンサほど重み付け係数を大きく乗算しておいてから合計値を算出するようにしてもよい。

次いで、指標１，２および平常状態値から撮影者の現在の気分状態を判定する（ステップＳＡ５０）。この結果、撮影者の現在の気分状態が判定され、気分状態方向１〜４のいずれか１つが設定される。一般に、人間の安静時の脈拍数は、朝の起床時の平均値として６０〜８０拍／分程度であることが知られている。そこで、撮影者の平常状態値の指標１成分を、６０〜８０拍／分の中央値７０として予め決定しておく。また、平常状態値の指標２成分はクラス１〜５の中央値３として予め決定しておく。

ここで、図３に示す画像処理指標テーブルＴＢ２を参照して、指標１，２と平常状態値とから撮影者の現在の気分状態を判定する処理について詳しく説明する。

脈拍数からなる指標１の範囲を５段階に分割して縦列とし、クラスからなる指標２を横行とした表が図３に示す画像処理指標テーブルＴＢ２であり、上記取得された指標（指標１，指標２）および予め決定された平常状態値（７０，３）を画像処理指標テーブルＴＢ２にプロットして当てはめる。図３に示す複数のマークは上述したプロット点の例を示すものであり、撮影者の気分状態が表される。

図３に示す「◎」は平常状態のプロット点（７０，３）であり、平常心の気分状態を示す。「☆」は緊張している状態、「□」は静かな状態、「△」は喜怒哀楽が激しい状態、「×」はリラックスしている状態、「▽」は落ち込んでいる状態、「○」は悲しんだり、喜んだりしている状態の例を示す。

次いで、２つのプロット点がなす傾き、すなわち、平常状態値のプロット点（７０，３）から上記取得された指標のプロット点（指標１，指標２）に至る方向を求める。簡単化すれば、上記取得された指標のプロット点（指標１，指標２）が（８０以下，クラス１〜３）の範囲にある場合に気分状態方向１として決定する。また、上記取得された指標のプロット点（指標１，指標２）が（８０以下，クラス４〜５）の範囲にある場合に気分状態方向２として決定する。また、上記取得された指標のプロット点（指標１，指標２）が（１８０〜８０，クラス１〜３）の範囲にある場合に気分状態方向３として決定する。さらに、上記取得された指標のプロット点（指標１，指標２）が（１８０〜８０，クラス４〜５）の範囲にある場合に気分状態方向４として決定する。

なお、図３は代表的な気分状態方向１〜４の決定方法の一例であり、気分状態方向の分割数を５よりも大きい数に設定することで、撮影者の気分状態をより細かな範囲に制限することもできる。従って、気分状態方向１は静かな状態又は落ち込んでいる状態、気分状態方向２はリラックスしている状態、気分状態方向３は緊張している状態、気分状態方向４は悲しんだり、喜んだりしている状態又は喜怒哀楽が激しい状態を示し、撮影者の気分状態方向として判定される。

図４は上述した気分状態方向１〜４のそれぞれに対応する画像処理項目を記載した画像処理項目テーブルＴＢ３である。気分状態方向１の場合には、静かな状態又は落ち込んでいる状態を示しているので、ホワイトバランスＷＢ、コントラスト強調、エッジ強調、Ｂγ補正は、フルオートマチックで設定される標準値よりもすべて低い値に設定する。

気分状態方向２の場合には、リラックスしている状態を示しているので、ホワイトバランスＷＢ、コントラスト強調、エッジ強調、Ｇγ補正は、フルオートマチックで設定される標準値よりもそれぞれ低い値、高い値、低い値、高い値に設定する。気分状態方向３の場合には、緊張している状態を示しているので、ホワイトバランスＷＢ、コントラスト強調、エッジ強調、Ｒγ補正は、フルオートマチックで設定される標準値よりもそれぞれ高い値、低い値、高い値、高い値に設定する。気分状態方向４の場合には、悲しんだり、喜んだりしている状態又は喜怒哀楽が激しい状態を示しているので、ホワイトバランスＷＢ、コントラスト強調、エッジ強調、Ｇγ補正は、フルオートマチックで設定される標準値よりもそれぞれ高い値、高い値、高い値、低い値に設定する。

次に、図８を参照して、情報処理部３６の制御の下で実行される画像処理について説明する。

まず、上述したようにステップＳＡ３１において、設定された撮影条件下で記録用画像の撮影処理が行われたので、撮像部３５によって撮像された画像データは撮像処理部３６ｃに取得されている。一方、上述したように、撮影者の現在の気分状態が判定された結果、気分状態方向１〜４のいずれか１つが設定されている。そこで、撮影者の気分状態方向に対応する画像処理項目を画像処理項目テーブルＴＢ３から読み出して参照する（ステップＳＡ６１）。

一般に、ホワイトバランスＷＢは、色温度が異なる光源状態でも、白色を正確に白く映し出すように補正する機能である。そこで、撮像処理部３６ｃは、ホワイトバランスＷＢの画像処理項目に応じて撮影画像のホワイトバランスＷＢを調整する（ステップＳＡ６２）。すなわち、ホワイトバランスＷＢの画像処理項目が高い値に設定されている場合には、フルオートマチックで設定されるホワイトバランスＷＢの標準値よりも例えば１０〜２０％高い値にパラメータを設定し、撮像処理部３６ｃに記憶されている画像データのホワイトバランスＷＢを調整する。一方、ホワイトバランスＷＢの画像処理項目が低い値に設定されている場合には、フルオートマチックで設定されるホワイトバランスＷＢの標準値よりも例えば１０〜２０％低い値にパラメータを設定し、撮像処理部３６ｃに記憶されている画像データのホワイトバランスＷＢを調整する。

一般に、コントラスト強調は、画像の黒い部分から白い部分までの許容量を示しており、コントラストが高くなるにつれて、白い部分はより白く、黒い部分はより黒く表現されるが、色の階調は失われる。コントラストを低くすると暗い部分から明るい部分までの幅が広くなり、黒から白までの滑らかなトーン表現ができるが、下げすぎるとぼやけた画像になってしまう。そこで、撮像処理部３６ｃは、コントラスト強調の画像処理項目に応じて撮影画像のコントラストを調整する（ステップＳＡ６３）。すなわち、コントラスト強調の画像処理項目が高い値に設定されている場合には、フルオートマチックで設定されるコントラスト強調の標準値よりも例えば１０〜２０％高い値にパラメータを設定し、撮像処理部３６ｃに記憶されている画像データのコントラストを調整する。一方、コントラスト強調の画像処理項目が低い値に設定されている場合には、フルオートマチックで設定されるコントラスト強調の標準値よりも例えば１０〜２０％低い値にパラメータを設定し、撮像処理部３６ｃに記憶されている画像データのコントラストを調整する。

一般に、エッジ強調は、シャープネス処理の一手法であり、被写体の輪郭に細い縁どりを施して、シャープに見える描写に仕上げる輪郭強調であり、標準レベルの輪郭強調を行うと輪郭の仕上がり視認し易くなるが、過度な輪郭強調を施すと被写体に縁どりが生じて目立ようになる。画質調整パラメータを調整できるデジタルカメラ１にあっては、輪郭強調の度合いを調整することができる。そこで、撮像処理部３６ｃは、エッジ強調の画像処理項目に応じて撮影画像のエッジを調整する（ステップＳＡ６４）。すなわち、エッジ強調の画像処理項目が高い値に設定されている場合には、フルオートマチックで設定されるエッジ強調の標準値よりも例えば１０〜２０％高い値にパラメータを設定し、撮像処理部３６ｃに記憶されている画像データのエッジを調整する。一方、エッジ強調の画像処理項目が低い値に設定されている場合には、フルオートマチックで設定されるエッジ強調の標準値よりも例えば１０〜２０％低い値にパラメータを設定し、撮像処理部３６ｃに記憶されている画像データのエッジを調整する。

一般に、γ(ガンマ)値は、画像の明るさの変化に対する電圧換算値の変化の比で、これが1に近づくのが理想的である。γ補正は、ディスプレイに表示される画像などの彩度や明るさを修正するための処理である。γ補正は、ＲＧＢの三原色を有するディスプレイに出力される際のＲ信号・Ｇ信号・Ｂ信号の相対関係と色データを調節することによって、自然に近い表示を行う。そこで、撮像処理部３６ｃは、γ補正の画像処理項目に応じて撮影画像のうち一色に対応してγ補正を行う（ステップＳＡ６５）。すなわち、γ補正の画像処理項目のうちＧγ補正またはＲγ補正が高い値に設定されている場合には、フルオートマチックで設定されるＧγ補正またはＲγ補正の標準値よりも例えば１０〜２０％高い値にパラメータを設定し、撮像処理部３６ｃに記憶されている画像データのＧγ補正またはＲγ補正を行う。一方、γ補正の画像処理項目のうちＢγ補正またはＧγ補正が低い値に設定されている場合には、フルオートマチックで設定されるＢγ補正またはＧγ補正の標準値よりも例えば１０〜２０％低い値にパラメータを設定し、撮像処理部３６ｃに記憶されている画像データのＢγ補正またはＧγ補正を行う。以上の処理を行い、本サブルーチンを終了する。

次に、メイン表示部３８に表示される表示内容について説明する。図９は、撮影者の気分状態方向１〜４に対応する画像処理を実行した結果、メイン表示部３８に表示された画像の表示内容を示す図である。

図９に示す画像Ｇ１は、気分状態方向１の場合に対しており、静かな状態又は落ち込んでいる状態を示しているので、ホワイトバランスＷＢ、コントラスト強調、エッジ強調、Ｂγ補正は、フルオートマチックで設定される標準値よりもすべて低い値に設定されている画像を表示することができる。

画像Ｇ２は、気分状態方向２の場合に対しており、リラックスしている状態を示しているので、ホワイトバランスＷＢ、コントラスト強調、エッジ強調、Ｇγ補正は、フルオートマチックで設定される標準値よりもそれぞれ低い値、高い値、低い値、高い値に設定されている画像を表示することができる。

画像Ｇ３は、気分状態方向３の場合に対しており、緊張している状態を示しているので、ホワイトバランスＷＢ、コントラスト強調、エッジ強調、Ｒγ補正は、フルオートマチックで設定される標準値よりもそれぞれ高い値、低い値、高い値、高い値に設定されている画像を表示することができる。

画像Ｇ４は、気分状態方向４の場合に対しており、悲しんだり、喜んだりしている状態又は喜怒哀楽が激しい状態を示しているので、ホワイトバランスＷＢ、コントラスト強調、エッジ強調、Ｇγ補正は、フルオートマチックで設定される標準値よりもそれぞれ高い値、高い値、高い値、低い値に設定されている画像を表示することができる。

なお、本発明の第１の実施の形態においては、ステップＳＡ３１で画像取込を実行し、次いで、ステップＳＡ３２でセンサの検出値の履歴を取得し、次いで、ステップＳＡ３３でセンサ出力分析処理を実行するという順序で処理を実行した。しかし、本発明の撮像装置はこのような順序に限定するものではなく、例えば、センサの検出値の履歴を取得し、次いで、センサ出力分析処理を実行した後に、画像取込を実行するという順序で処理を実行してもよく、この場合、センサ出力分析処理の結果として得られる撮影者の気分状態方向に応じてオートフォーカス処理等のパラメータを変更してから撮影処理を実行することができるので、被写体を撮影する際の撮影者の体調または気分に応じて異なる風情の写真を撮ることができる。

このように、本発明の第１の実施の形態によれば、被写体画像を撮像しておき、測定した生体情報に基づいて撮影者の体調または気分を分析し、分析した撮影者の体調または気分状態に応じて被写体画像に施す画像処理のパラメータを変更し、被写体画像に画像処理を施すことで、被写体を撮影する際の撮影者の体調または気分に応じて異なる風情の写真を撮ることができる。また、生体情報として撮影者の体温、脈拍、握力の少なくとも１つを分析することで、撮影者の体調、気分を分析することができる。さらに、シャッター釦に設けられた脈拍センサ、把持部に設けられた温度センサ、把持部に設けられた握力センサ、把持部に設けられた発汗センサ、装置本体に設けられたジャイロセンサ、装置本体に設けられた角速度センサの少なくとも１つを用いて生体情報を測定するので、撮影者の体調または気分を分析するための情報を抽出することができる。また、撮影者の体調または気分状態に応じて、被写体画像に明暗処理、色調処理、濃淡処理、エッジ強調の少なくとも１つを施すことで、撮影者の体調または気分に応じて異なる風情の写真を撮ることができる。

［第２の実施の形態］
次に、本発明の撮像装置の第２の実施の形態であるデジタルカメラ１において、フィーリング撮影モードが設定された場合の動作について、図１０〜図１２を参照して説明する。図１０は、気分状態方向１〜４に対応するキャラクタ名および表示内容を記載したキャラクタ項目テーブルＴＢ４、図１１は、フィーリング撮影モードが設定された場合に情報処理部３６の制御の下で実行される画像処理の処理手順を示すフローチャート、図１２は、撮影者の気分状態方向に対応する画像の表示内容を示す図である。

本発明の第２の実施の形態の撮像装置であるデジタルカメラ１の電気的構成を示すブロック図は、図１に示す第１の実施の形態の撮像装置であるデジタルカメラ１の電気的構成を示すブロック図と同様であるので、その詳細の説明を省略する。

図１０は、気分状態方向１〜４のそれぞれに対応するキャラクタ名（コード）および表示内容を記載したキャラクタ項目テーブルＴＢ４である。気分状態方向１は、撮影者が静かな状態又は落ち込んでいる状態であるので、キャラクタ名ＣＮ１の表示内容を例えば雲マークとする。気分状態方向２は、リラックスしている状態であるので、キャラクタ名ＣＮ２の表示内容を例えば天使キャラクタとする。気分状態方向３は、緊張している状態であるので、キャラクタ名ＣＮ３の表示内容を例えば汗マークとする。気分状態方向４は、悲しんだり、喜んだりしている状態又は喜怒哀楽が激しい状態であるので、キャラクタ名ＣＮ４の表示内容を例えば太陽キャラクタとする。

次に、図１１を参照して、情報処理部３６の制御の下で実行される画像処理について説明する。

まず、上述したようにステップＳＡ３１において、設定された撮影条件下で記録用画像の撮影処理が行われたので、撮像部３５によって撮像された画像データは撮像処理部３６ｃに取得されている。一方、第１の実施の形態において説明したように、ステップＳＡ５０において、撮影者の現在の気分状態が判定された結果、気分状態方向１〜４のいずれか１つが設定されている。そこで、撮影者の気分状態方向に対応するキャラクタ名コードをキャラクタ項目テーブルＴＢ４から読み出して参照する（ステップＳＡ７１）。

次いで、撮像処理部３６ｃは、キャラクタ項目テーブルＴＢ４から読み出したキャラクタ名コードを撮像処理部３６ｃに記憶されている画像データに付加して合成する（ステップＳＡ７２）。以上の処理を行い、本サブルーチンを終了する。

次に、メイン表示部３８に表示される表示内容について説明する。図１２は、撮影者の気分状態方向に対応する画像処理を実行した結果、メイン表示部３８に表示された画像の表示内容の例を示す図である。

図１２に示す画像Ｇ１１は、他との比較のため標準画像を表示したものである。画像Ｇ１２は、気分状態方向２の場合に対しており、リラックスしている状態を示しているので、天使キャラクタの画像を表示することができる。画像Ｇ１３は、気分状態方向４の場合に対しており、悲しんだり、喜んだりしている状態又は喜怒哀楽が激しい状態を示しているので、太陽キャラクタの画像を表示することができる。

なお、第２の実施の形態においては、撮影者の気分状態方向に対応してキャラクタやマークを撮影画像に合成したが、本発明はこのような場合に限定されるものではない。すなわち、撮影者の気分状態方向に対応して文字列を重畳付加して撮影画像に合成してもよく、例えば、気分状態方向３の場合には緊張している状態であるのでこの緊張を解すために「Ｒｅｌａｘ！」と表示してもよく、また、撮影者の脈拍数が所定値よりも低い場合や体温が所定値よりも高い場合には病気の可能性もあるので「Ｅｍｅｒｇｅｎｃｙ！！」表示してもよい。

このように、本発明の第２の実施の形態によれば、撮影者の体調または気分状態に応じて、キャラクタ、マーク、文字列の情報内容を変更し、キャラクタ、マーク、文字列のいずれか１つを被写体画像に重畳付加することで、撮影者の体調または気分に応じて異なる風情の写真を撮ることができる。

Claims (7)

1. 被写体画像を撮像する撮像手段と、
   撮影者の生体情報を測定する測定手段と、
   前記測定手段により測定された生体情報に基づいて撮影者の体調または気分を分析する分析手段と、
   前記分析手段により分析した撮影者の体調または気分状態に応じて被写体画像に施す画像処理のパラメータを変更し、前記被写体画像に画像処理を施す画像処理手段と、
   を備えることを特徴とする撮像装置。
2. 前記生体情報は、撮影者の体温、脈拍、握力の少なくとも１つであることを特徴とする請求項１記載の撮像装置。
3. 前記測定手段は、シャッター釦に設けられた脈拍センサ、把持部に設けられた温度センサ、把持部に設けられた握力センサ、把持部に設けられた発汗センサ、装置本体に設けられたジャイロセンサ、装置本体に設けられた角速度センサの少なくとも１つのであることを特徴とする請求項１記載の撮像装置。
4. 前記画像処理手段は、前記分析手段により分析された撮影者の体調または気分状態に応じて、被写体画像に明暗処理、色調処理、濃淡処理、エッジ強調の少なくとも１つを施すことを特徴とする請求項１記載の撮像装置。
5. 前記分析手段により分析された撮影者の体調または気分状態に応じて、キャラクタ、マーク、文字列の情報内容を変更する変更手段を備え、
   前記画像処理手段は、キャラクタ、マーク、文字列のいずれか１つを被写体画像に重畳付加することを特徴とする請求項１記載の撮像装置。
6. 撮像部に被写体画像を撮像させる撮像ステップと、
   撮影者の生体情報をセンサ部に測定させる測定ステップと、
   前記測定ステップにより測定された生体情報に基づいて撮影者の体調または気分を分析する分析ステップと、
   前記分析ステップにより分析した撮影者の体調または気分状態に応じて被写体画像に施す画像処理のパラメータを変更し、被写体画像に画像処理を施す画像処理ステップと、
   を含むことを特徴とする撮像方法。
7. 撮像装置が有するコンピュータを、
   撮像部に被写体画像を撮像させる撮像手段、
   撮影者の生体情報をセンサ部に測定させる測定手段、
   前記測定手段により測定された生体情報に基づいて撮影者の体調または気分を分析する分析手段、
   前記分析手段により分析した撮影者の体調または気分状態に応じて被写体画像に施す画像処理のパラメータを変更し、被写体画像に画像処理を施す画像処理手段、
   として機能させることを特徴とする撮像プログラム。

Images