JP2005102154A - 画像処理装置および方法並びにプログラム - Google Patents

Abstract

【課題】 撮影時にユーザが誤った撮影モードを設定してしまった場合でも、画像処理機能を有するデジタルカメラにおいて得られた、すでに画像処理が施された画像データに対して適切に画像処理を施すようにする。
【解決手段】 デジタルカメラ１において得られる画像データＳ１はすでに画像処理が施され、設定された撮影モードを表す情報を含む画像処理情報が含まれたタグ情報Ｇが画像データＳ１に付与される。画像出力装置２は、画像処理情報にポートレートモードを表す情報が含まれる場合に、画像データＳ１により表される画像から顔領域を抽出し、その画像Ｓ１に対する比が１／１０以上か否かを判定してユーザが意図してポートレートモードを設定したか否かを判定する。判定が肯定されると階調補正処理を行わないよう、判定が否定されると階調補正処理を含む通常の処理を行うよう出力画像処理手段２２を設定する。
【選択図】 図１

Description

本発明は画像データに対して画像処理を施す機能を有するデジタルカメラ等の撮像装置により取得された、すでに画像処理が施されているとともに、施された画像処理に関する画像処理情報が付与された画像データに対して、さらに画像処理を施す画像処理装置および方法並びに画像処理方法をコンピュータに実行させるためのプログラムに関するものである。

デジタルカメラにおいては、撮影により取得した画像をデジタル画像データとしてデジタルカメラ内部に設けられた内部メモリやＩＣカード等の記録媒体に記録し、記録されたデジタル画像データに基づいて、撮影により取得した画像をプリンタやモニタに再生することができる。このように、デジタルカメラにより取得した画像を再生する場合においては、ネガフイルムからプリントされた写真と同様の高品位な画質を有するものとすることが期待されている。

ここで、上記プリントを得る際には、画像データに対して露出補正処理、ホワイトバランス調整処理、階調補正処理、色補正処理、シャープネス処理等の種々の画像処理を必要に応じて施すことにより、プリントの画質を向上させることができる。この際、より高画質のプリントを得るために、デジタルカメラにおいて得られた画像データに、撮影時のストロボの有無、照明の種類等の撮像情報を付与して出力し、画像処理を行う際には画像データに付与されている撮影情報を参照して、画像データに対してより適切な画像処理を施す方法が提案されている（特許文献１参照）。

一方、撮影により取得した画像データに対して、自動または手動により画像処理を施して画像処理済みの画像データを出力することが可能なデジタルカメラも提案されている。このような画像処理機能を有するデジタルカメラにおいては、撮影シーンや撮影条件に応じた最適な画質が得られるように、画像データに対して画像処理が施される。また、撮影者の意図に応じて画像データに対して施す画像処理の種類や画像処理に関連する種々の機能を選択することもできる。例えば、画像処理の種類として、オートホワイトバランス調整処理、光源種固定モードによるホワイトバランス調整処理、画質の変更処理（階調、シャープネス、彩度）、および再現画像の好み（モノクロ、セピア、美肌等）を選択することができる。また、画像処理に関連する機能として、撮影モード（ポートレートモード、風景／遠景モード、マクロ／クローズアップモード、夜景／花火モード、海中写真モード、ユーザ露光補正モード等）、オートブラケット機能、光学フィルタを用いた撮影、ソフトフォーカス撮影、インターバル撮影、連写、多重露光、テンプレートとの合成およびフレーム合成等の種々の機能を選択することができる。そして、選択された画像処理の種類や機能に応じて撮影者の意図を反映させた最適な画像処理を行うことができる。

ところで、このような画像処理機能を有するデジタルカメラにおいて得られた画像データをプリンタやモニタにおいて再生する場合、画像データに対してさらに画像処理が施される。しかしながら、すでに画像処理が施されている画像データに対してさらに画像処理を施すと、デジタルカメラにおいて想定した画質あるいは再生装置において想定した画質を有する再生画像が得られなくなるおそれがある。このため、画像データ付与された撮影モード等の画像処理情報に基づいて、その画像処理情報に関連して画像データにすでに施されている画像処理を未処理とするまたは処理量を小さくする方法が提案されている（特許文献２参照）。この方法によれば、画像データにすでに施されている画像処理は施されないかまたは処理量が小さくされるため、適切な画像処理が施された処理済み画像データを得ることができる。
特開平１０−１９１２４６号公報 特願２００３−３８１６４号

しかしながら、デジタルカメラのユーザが撮影モードを誤って設定してしまった場合には、ユーザが意図しない画像処理が画像データに対して施されているにも拘わらず、その意図しない画像処理は未処理または処理量が小さくされるため、ユーザが想定する画質を有する画像を再生可能なように適切な画像処理が施された処理済み画像データが得られなくなってしまう。

本発明は上記事情に鑑みなされたものであり、撮影時に設定した撮影モードが誤っているか否かを確認できるようにすることを第１の目的とする。

また本発明は、撮影時にユーザが誤った撮影モードを設定してしまった場合でも、画像処理機能を有するデジタルカメラにおいて得られた、すでに画像処理が施された画像データに対して、適切に画像処理を施すようにすることを第２の目的とする。

本発明による画像処理装置は、画像処理が施され、該画像処理に関する画像処理情報を含む付帯情報が付与された画像データを読み出す読出手段と、
前記画像データにより表される画像が、前記画像データに付与された前記付帯情報に含まれる前記画像処理情報に応じて該画像に現れるべき特徴を有するか否かを判定する特徴判定手段とを備えたことを特徴とするものである。

「画像処理に関する画像処理情報」とは、画像データに対して施された画像処理の内容を表す情報、または画像データに対して施された画像処理の内容を推定可能な情報をいう。画像処理の内容を表す情報としては、例えば、オートホワイトバランス調整処理、光源種に応じたホワイトバランス調整処理、階調補正処理、濃度補正処理、色補正処理、シャープネス処理、モノクロ処理、セピア処理等の必要に応じて画像データに対して施した画像処理の種類を表す情報が挙げられる。画像処理の内容を推定可能な情報としては、例えばデジタルカメラにおいて設定した撮影モード（ポートレートモード、風景／遠景モード、マクロ／クローズアップモード、夜景／花火モード、海中写真モード、ユーザ露光補正モード等）、オートブラケット機能、光学フィルタを用いた撮影、ソフトフォーカス撮影、インターバル撮影、連写、多重露光、テンプレートとの合成およびフレーム合成等、直接施された画像処理の種類は分からないが、どのような画像処理が施されたかを推定することが可能な情報が挙げられる。

ここで、画像データのフォーマットはＪＥＩＤＡ（日本電子工業振興協会）のＥｘｉｆ（Exchangeable image file format）により規定されている。Ｅｘｉｆ形式のファイルはそのタグ情報として種々の情報を含めることができる。したがって、タグ情報を付帯情報とすることにより、画像データに付帯情報を付与することができる。

「画像処理情報に応じて画像に現れるべき特徴」とは、色、階調、濃度、鮮鋭度、画像に含まれる顔等の特定の被写体の種類、全画像に占める特定被写体の割合等、画像に現れるその画像処理情報に関する画像処理を施すこととなった要因を表す特徴を意味する。具体的には、デジタルカメラにおいてポートレートモードを設定して撮影を行った場合は階調変換処理が施された画像データが得られるが、この場合、画像データにより表される画像においては、人物の顔領域が画像全領域の１／１０以上を占めるものである。この場合、「画像処理情報の種類に応じて画像に現れるべき特徴」は、画像の全領域に対する顔領域の比となり、特徴判定手段は、この比が例えば１／１０以上であるか否かを判定することにより、画像データに付与された画像処理情報に応じて画像に現れるべき特徴を有するか否かを判定する。

ここで、本発明の画像処理装置は、単一の装置のみならず、例えばデジタルカメラおよびプリンタをケーブルにより接続した場合のように、複数の装置を接続することにより一体に構成される装置をも含むものである。

なお、本発明による画像処理装置においては、前記特徴判定手段による判定結果を表示する表示手段をさらに備えるようにしてもよい。

また、本発明による画像処理装置においては、前記画像データに対して、少なくとも１種類のさらなる画像処理を施して処理済み画像データを得る処理手段と、
前記特徴判定手段による判定が肯定された場合、前記さらなる画像処理のうち、前記画像データに施されている処理済み画像処理を未処理とするまたは処理量を小さくして前記画像データに対して前記さらなる画像処理を施し、前記特徴判定手段による判定が否定された場合、前記画像データに対して前記処理済み画像処理を含む前記さらなる画像処理を施すよう前記処理手段を制御する制御手段とをさらに備えるようにしてもよい。

「処理済み画像処理」とは、複数種類のさらなる画像処理を画像データに施す場合において、複数種類のさらなる画像処理のなかのすでに画像データに施されている特定の画像処理を意味する。なお、処理済み画像処理は複数種類の画像処理全てであってもよい。なお、１種類のみのさらなる画像処理を画像データに施す場合において、そのさらなる画像処理と画像データに施されている画像処理とが一致する場合には、そのさらなる画像処理が処理済み画像処理となる。

「処理済み画像処理を未処理とする」とは、処理済み画像処理を施さないことを意味する。

また、本発明による画像処理装置においては、前記特徴判定手段による判定結果を表示する表示手段と、
前記判定結果に応じてオペレータによる処理の続行の指示を受け付ける入力手段とをさらに備えるものとし、
前記制御手段を、前記入力手段から前記処理の続行の指示が入力された場合にのみ、前記画像データに対して前記判定結果に応じた前記さらなる画像処理を施すよう前記処理手段を制御する手段としてもよい。

また、本発明による画像処理装置においては、前記処理済み画像データをプリント出力するプリント出力手段と、
前記特徴判定手段による判定結果および／または施された前記さらなる画像処理の内容を表す情報を、プリントの裏面に印字する、プリントの表面の目立たない位置に印字する等により、前記処理済み画像データのプリントに付与するよう前記プリント出力手段を制御するプリント制御手段とをさらに備えるものとしてもよい。

また、本発明による画像処理装置においては、前記画像処理情報が、前記画像データを取得した撮像装置において設定されたポートレートモードを表す情報であり、
前記処理済み画像処理が階調補正処理であってもよい。

本発明による第１の画像処理方法は、画像処理が施され、該画像処理に関する画像処理情報を含む付帯情報が付与された画像データを読み出し、
前記画像データにより表される画像が、前記画像データに付与された前記付帯情報に含まれる前記画像処理情報に応じて該画像に現れるべき特徴を有するか否かを判定することを特徴とするものである。

本発明による第２の画像処理方法は、画像処理が施され、該画像処理に関する画像処理情報を含む付帯情報が付与された画像データに対して、少なくとも１種類のさらなる画像処理を施して処理済み画像データを得る画像処理方法において、
前記画像データにより表される画像が、前記画像データに付与された前記付帯情報に含まれる前記画像処理情報に応じて該画像に現れるべき特徴を有するか否かを判定し、
該判定が肯定された場合、前記さらなる画像処理のうち、前記画像データに施されている処理済み画像処理を未処理とするまたは処理量を小さくして前記画像データに対して前記さらなる画像処理を施し、前記判定が否定された場合、前記画像データに対して前記処理済み画像処理を含む前記さらなる画像処理を施すことを特徴とするものである。

なお、本発明による第１および第２の画像処理方法をコンピュータに実行させるためのプログラムとして提供してもよい。

本発明によれば、画像データにより表される画像が、画像データに付与された付帯情報に含まれる画像処理情報の種類に応じて画像に現れるべき特徴を有するか否かが判定される。したがって、判定結果を参照することにより、撮影時に設定した撮影モードが誤っているか否かを確認することができる。

とくに判定結果を表示することにより、撮影時に設定した撮影モードが誤っているか否かを容易に確認することができる。

また、本発明によれば、上記判定が肯定された場合、画像データにすでに施されている処理済み画像処理が未処理とされるまたは処理量が小さくされてさらなる画像処理が画像データに対して施され、上記判定が否定された場合、画像データに対して処理済み画像処理を含むさらなる画像処理が施される。このため、デジタルカメラ等の撮像装置によりユーザが画像データを取得する際に、撮影モード等の設定を誤ってしまった場合でも、すでに画像処理が施された画像処理に対して、適切に画像処理を施すことができる。

また、特徴判定手段による判定結果を表示し、オペレータにより処理の続行の指示が入力された場合にのみ、画像データに対して判定結果に応じたさらなる画像処理を施すことにより、オペレータの意志を反映させてさらなる画像処理を画像データに対して施すことができる。

また、処理済み画像データをプリント出力するに際し、特徴判定手段による判定結果および施されたさらなる画像処理の内容を表す情報をプリントに付与することにより、プリントを受け取ったユーザはそのプリントに対してどのような判定がなされてどのようなさらなる画像処理が施されたかを知ることができる。

ここで、撮像装置においてポートレートモードが設定されると、階調補正処理が施された画像データが得られる。このため、画像処理情報をポートレートモードとし、処理済み画像処理を階調補正処理とすることにより、ポートレートモードを誤って設定してしまった場合に、画像データに対して階調補正処理が施されないで階調がつぶれた画像となってしまうことを防止することができる。

以下図面を参照して本発明の実施形態について説明する。図１は本発明の第１の実施形態による画像処理装置を適用した画像出力システムの構成を示す概略ブロック図である。図１に示すように、第１の実施形態による画像出力システムは、デジタルカメラ１および画像出力装置２からなり、デジタルカメラ１において取得された画像データＳ１を画像出力装置２においてプリントＰとしてプリント出力するものである。

デジタルカメラ１は、レンズ、シャッタ、ＣＣＤ等からなる撮像手段１１、撮像手段１１において取得された画像データＳ０に対して画像処理を施して出力用の画像データＳ１を得るＤＳＣ画像処理手段１２、画像データＳ１をメモリカード１４に記録する記録手段１３、およびＤＳＣ画像処理手段１２に対して種々の設定を行うセレクトダイヤルや設定ボタン等の入力手段１５を備える。

撮影者であるユーザは、撮影により取得した画像データＳ０に対して施す画像処理の種類を、入力手段１５を用いて設定することができる。ここで、画像処理としては、オートホワイトバランス調整処理、光源種に応じたホワイトバランス調整処理、階調補正処理、濃度補正処理、色補正処理、シャープネス処理、モノクロ処理、セピア処理等が挙げられる。また、ポートレートモード、風景／遠景モード、マクロ／クローズアップモード、夜景／花火モード、海中写真モード、ユーザ露光補正モード等のように撮影モードを設定することにより、撮影モードに応じた種類の画像処理を画像データＳ０に施すことも可能である。ここで、ユーザ露光補正モードはユーザがマニュアル操作で露光条件を補正するモードである。また、オートブラケット機能、光学フィルタを用いた撮影、ソフトフォーカス撮影、インターバル撮影、連写、多重露光、テンプレートとの合成、フレーム合成等の設定を行うことも可能である。

ＤＳＣ画像処理手段１２は、撮影者であるユーザにより設定された画像処理の種類に応じて、画像データＳ０に対して画像処理を施して出力用の画像データＳ１を得る。また、撮影モードが設定された場合には、ＤＳＣ画像処理手段１２は設定された撮影モードに応じた画像処理を画像データＳ０に対して施して出力用の画像データＳ１を得る。例えば、夜景モードが設定された場合には、画像データＳ０に対して露出補正処理を施して出力用の画像データＳ１を得る。また、ポートレートモードが設定された場合には、画像データＳ０に対して階調補正処理を施して出力用の画像データＳ１を得る。

なお、出力用の画像データＳ１はＥｘｉｆ形式の画像データであり、そのタグ情報Ｇに画像データＳ１に施されている画像処理の種類や撮影モード等を表す画像処理情報が含められる。なお、タグ情報Ｇには、画像データＳ１の撮影日時を表す撮影日時情報が含まれる。

記録手段１３は、タグ情報Ｇが付与された画像データＳ１をメモリカード１４に記録する。

このようなデジタルカメラ１においては、撮像手段１１が画像データＳ０を取得し、ＤＳＣ画像処理手段１２が、入力手段１５から入力された画像処理の種類や撮影モードに基づいて、画像データＳ０に対して画像処理を施して出力用の画像データＳ１を得る。また、出力用の画像データＳ１には、画像処理の種類や撮影モードが画像処理情報としてタグ情報Ｇに含められ、記録手段１３が画像データＳ１をメモリカード１４に記録する。

画像出力装置２は、メモリカード１４から画像データＳ１を読み出すカードスロット等の読出手段２１、画像データＳ１に対して画像処理を施して処理済み画像データＳ２を得る出力画像処理手段２２、画像データＳ１を取得した際の撮影モードがデジタルカメラ１のユーザの意図により設定されたものであるか否かを判定するモード判定手段２３、モード判定手段２３における判定結果に応じて、出力画像処理手段２２に対して画像データＳ１に施す画像処理の処理内容を設定する設定手段２４、処理済み画像データＳ２をプリント出力するプリント出力手段２５、各種表示を行うモニタ２６およびオペレータによる各種入力を受け付けるキーボード、マウス等の入力手段２７を備える。

図２は、出力画像処理手段２２が行う処理を示す概略ブロック図である。図２に示すように、出力画像処理手段２２は、画像データＳ１を縮小し、縮小した画像データＳ１に基づいて画像処理条件Ｊを算出し、算出した画像処理条件Ｊに基づいて、露出補正処理、ホワイトバランス調整処理、階調補正処理、色補正処理、サイズを合わせるための拡大処理およびシャープネス処理の少なくとも１つを必要に応じて画像データＳ１に対して施して処理済み画像データＳ２を得る。そして、この出力画像処理手段２２が行う画像処理の処理内容を設定手段２４が設定する。

モード判定手段２３は、画像データＳ１のタグ情報Ｇに含まれる画像処理情報に撮影モードとしてポートレートモードを表す情報が含まれているか否かを判定し（第１の判定）、ポートレートモードを表す情報が含まれている場合に、画像データＳ１により表される画像（以下画像についても参照符号Ｓ１を用いる）から顔領域を抽出し、画像Ｓ１の全領域に対する顔領域の比率が所定のしきい値Ｔｈ１（例えば１／１０）以上であるか否かを判定する（第２の判定）。

第１の判定が否定された場合、モード判定手段２３はその旨の情報を設定手段２４に出力する。第１の判定が肯定されかつ第２の判定が肯定された場合は、ポートレートモードがデジタルカメラ１のユーザの意図により設定されているため、モード判定手段２３は階調補正処理を行わない旨の表示をモニタ２６に行う。図３（ａ）は、第１の判定が肯定されかつ第２の判定が肯定された場合のモニタ２６の表示内容を示す図である。図３（ａ）に示すように、モニタ２６には「ポートレートモードがユーザの意図により設定されているため、階調補正処理を行いません。続行しますか？」の表示と、続行する場合にクリックされるＹＥＳボタン２６ａおよび続行しない場合にクリックされるＮＯボタン２６ｂが表示される。モード判定手段２３は、ＹＥＳボタン２６ａがクリックされると、判定結果を設定手段２４に出力する。なお、ＮＯボタン２６ｂがクリックされると、モード判定手段２３は、画像データＳ１に対する画像処理およびプリント出力を中止するよう設定手段２４およびプリント出力手段２５のそれぞれに指示を行う。

一方、第１の判定が肯定されかつ第２の判定が否定された場合は、ポートレートモードが設定されているがそれはユーザの意図に基づくものではないため、階調補正処理を含む通常の処理を行う旨の表示をモニタ２６に行う。なお、通常の処理とは、露出補正処理、ホワイトバランス調整処理、階調補正処理、色補正処理、サイズを合わせるための拡大処理およびシャープネス処理の少なくとも１つを必要に応じて行う処理である。図３（ｂ）は、第１の判定が肯定されかつ第２の判定が否定された場合のモニタ２６の表示内容を示す図である。図３（ｂ）に示すように、モニタ２６には「ポートレートモードがユーザの意図により設定されていないため、通常の処理を行います。続行しますか？」の表示と、続行する場合にクリックされるＹＥＳボタン２６ａおよび続行しない場合にクリックされるＮＯボタン２６ｂが表示される。モード判定手段２３は、ＹＥＳボタン２６ａがクリックされると、判定結果を設定手段２４に出力する。なお、ＮＯボタン２６ｂがクリックされると、モード判定手段２３は、画像データＳ１に対する画像処理およびプリント出力を中止するよう設定手段２４およびプリント出力手段２５のそれぞれに指示を行う。

設定手段２４は、モード判定手段２３が出力した判定結果に応じて出力画像処理手段２２が行う画像処理の内容を設定する。すなわち、第１の判定が否定された場合、および第１の判定が肯定されかつ第２の判定が否定された場合は通常の処理を行い、第１の判定が肯定されかつ第２の判定が肯定された場合は、画像処理条件Ｊに基づく画像処理に階調補正処理が含まれている場合であっても階調補正処理を行わないよう、出力画像処理手段２２の設定を行う。

なお、モード判定手段２３が画像データＳ１に対する画像処理を中止する指示を設定手段２４に行った場合には、設定手段２４は画像処理を中止するよう出力画像処理手段２２の設定を行う。この場合、画像処理が中止された旨をモニタ２６に表示することが好ましい。

次いで、第１の実施形態における画像出力装置２の動作について説明する。図４は第１の実施形態における画像出力装置２の動作を示すフローチャートである。まず、読出手段２１がメモリカード１４から画像データＳ１を読み出し（ステップＳ１）、読み出した画像データＳ１に付与されているタグ情報Ｇをモード判定手段２３に入力する。モード判定手段２３は、タグ情報Ｇに含まれる画像処理情報にポートレートモードを表す情報が含まれているか否かを判定する（ステップＳ２）。ステップＳ２が肯定されると、画像Ｓ１から人物の顔領域を抽出する（ステップＳ３）。そして、画像Ｓ１の全領域に対する抽出した顔領域の比が１／１０以上であるか否かを判定する（ステップＳ４）。

なお、顔領域を抽出する方法としては、例えば特開平９−１０１５７９号公報および同９−１３８４７０号公報に記載された方法を用いることができる。特開平９−１０１５７９号に記載された方法は、画像から肌色の領域およびエッジを検出し、さらに画像をエッジ部分および非エッジ部分に分類し、肌色領域内に位置しており非エッジ部分と分類した画素からなり、かつエッジ部分と分類された画素で囲まれた領域を顔領域として抽出する方法である。また、特開平９−１３８４７０号公報に記載された方法は、予め多数のサンプル画像を用いて顔領域抽出性能を評価し、評価結果に応じて重み係数が各々定められてなる、互いに異なるｎ種類の抽出方式のいずれかにより、画像から人物の顔に相当すると推定される顔候補領域を抽出し、抽出された顔候補領域を抽出方式に応じた重み係数により各々重み付けし、重み付けした結果に基づいて人物の顔に相当する領域である確度の高い領域を顔領域として抽出する方法である。

ステップＳ４が肯定されると、ポートレートモードがユーザの意図により設定されているため、図３（ａ）に示すように、階調補正処理を行わない旨の表示をモニタ２６に行う（ステップＳ５）。そして、オペレータによりＹＥＳボタン２６ａがクリックされたか否かを判定し（ステップＳ６）、ステップＳ６が肯定されると判定結果を設定手段２４に出力する。設定手段２４は、画像処理条件Ｊに基づく画像処理に階調補正処理が含まれている場合であっても階調補正処理を行わないよう出力画像処理手段２２を設定する（ステップＳ７）。ステップＳ６が否定されると、モード判定手段２３は画像処理およびプリント出力を中止する指示を設定手段２４およびプリント出力手段２５のそれぞれに行い、設定手段２４が出力画像処理手段２２に画像処理を中止する設定を行うことにより、画像データＳ１に対する処理を終了する。

一方、ステップＳ４が否定されると、モード判定手段２３は、ポートレートモードが設定されているがそれはユーザの意図に基づくものではないため、図３（ｂ）に示すように、階調補正処理を含めた通常の処理を行う旨の表示をモニタ２６に行う（ステップＳ８）。そして、オペレータによりＹＥＳボタン２６ａがクリックされたか否かを判定し（ステップＳ９）、ステップＳ９が肯定されると判定結果を設定手段２４に出力する。設定手段２４は、通常の処理を行うよう出力画像処理手段２２を設定する（ステップＳ１０）。ステップＳ９が否定されると、モード判定手段２３は画像処理およびプリント出力を中止する指示を設定手段２４およびプリント出力手段２５のそれぞれに行い、設定手段２４が出力画像処理手段２２に画像処理を中止する設定を行うことにより、画像データＳ１に対する処理を終了する。

なお、ステップＳ２が否定された場合は、モード判定手段２３はポートレートモードが設定されていないとして判定結果を設定手段２４に出力する。設定手段２４は、通常の処理を行うよう出力画像処理手段２２を設定する（ステップＳ１０）。

このように、画像処理の内容が設定された後、出力画像処理手段２２が画像データＳ１に対して画像処理を施して処理済み画像データＳ２を得る（ステップＳ１１）。処理済み画像データＳ２はプリント出力手段２５においてプリントＰとしてプリント出力され（ステップＳ１２）、処理を終了する。

なお、モード判定手段２３の判定結果および画像データＳ１に施した画像処理の内容を表す情報をプリントＰの裏面等にプリントすることが好ましい。例えば、「ポートレートモードがユーザの意図により設定されていたため、階調補正処理を行いませんでした。」のようにプリントを行えばよい。この場合、文字に代えて判定結果および画像処理の内容を表す情報を特定できるイラストをプリントしてもよい。

このように、第１の実施形態においては、画像処理情報にポートレートモードを表す情報が含まれているか否かを判定し、ポートレートモードを表す情報が含まれている場合に、画像Ｓ１から顔領域を抽出し、顔領域が画像Ｓ１の全領域の１／１０以上であるか否かを判定し、顔領域が１／１０未満である場合には階調補正処理を含む通常の処理を行い、顔領域が１／１０以上である場合には画像処理条件Ｊに基づく画像処理に階調補正処理が含まれている場合であっても階調補正処理を行わないようにしたため、ユーザがデジタルカメラ１を用いての撮影時にポートレートモードを誤って設定してしまった場合でも、画像データＳ１に対して適切に画像処理を施して処理済み画像データＳ２を得ることができる。

また、モード判定手段２３における判定結果をモニタ２６に表示し、その結果に応じて処理を続行するか否かをオペレータに選択させているため、オペレータの意志を反映させて画像データＳ１に対して画像処理を施すことができる。

また、モード判定手段２３における判定結果を表す情報をプリントＰの裏面にプリントすることにより、そのプリントＰを見たユーザは、撮影時にデジタルカメラ１においてどのような画像処理をそのプリントＰを得た画像データＳ１に対して施したかを容易に認識することができる。

また、上記第1の実施形態においては、ポートレートモードが設定された場合に画像Ｓ１に含まれる顔領域の画像Ｓ１の全領域に対する比が１／１０以上であるか否かを判定することにより、ポートレートモードがユーザが意図して設定したものであるか否かを判定しているが、デジタルカメラ１においては、上述したように風景／遠景モード、マクロモード、海中写真モード等、各種撮影モードを設定可能であるため、色、階調、濃度、鮮鋭度、画像に含まれる顔等の特定の被写体の種類、全画像に占める特定被写体の割合等、画像Ｓ１を解析することにより得られる情報に基づいて任意の撮影モードがユーザが意図して設定したものであるか否かを判定することが可能である。例えば、海中写真モードが設定されている場合に、画像Ｓ１に含まれる色情報を解析して画像が青みを帯びているか否かを判定し、青みを帯びている場合には海中写真モードがユーザが意図したものであると判定し、青みを帯びていない場合には海中写真モードがユーザが意図しないで設定したものであると判定することができる。

次いで、本発明の第２の実施形態について説明する。図５は、本発明の第２の実施形態による画像処理装置を適用した画像出力システムの構成を示す概略ブロック図である。なお、第２の実施形態において第１の実施形態と同一の構成については同一の参照番号を付し、ここでは詳細な説明は省略する。第２の実施形態においては、画像出力装置２に代えて、読出手段２１、出力画像処理手段２２、モード判定手段２３、設定手段２４、モニタ２６および入力手段２７にそれぞれ対応する読出手段３１、出力画像処理手段３２、モード判定手段３３、設定手段３４、モニタ３６および入力手段３７並びに画像記憶手段３５を有する画像記憶装置３を備え、処理済み画像データＳ２をプリント出力するのに代えて、画像記憶手段３５において記憶媒体に記憶するようにした点が第１の実施形態と異なる。

画像記憶手段３５は、ハードディスク、ＣＤ−Ｒ、メモリカード等の記憶媒体に処理済み画像データＳ２を電気的、光学的または磁気的に記録することが可能な任意の手段を用いることができる。

そして、第２の実施形態においては、上記第１の実施形態と同様に第１および第２の判定を行い、第１の判定が肯定されかつ第２の判定が肯定された場合は、ポートレートモードがデジタルカメラ１のユーザの意図により設定されているため、モード判定手段３３が図３（ａ）に示すように階調補正処理を行わない旨の表示をモニタ３６に行い、ＹＥＳボタン２６ａがクリックされると、画像処理条件Ｊに基づく画像処理に階調補正処理が含まれている場合であっても、設定手段３４が階調補正処理を行わない旨の設定を出力画像処理手段３２に対して行う。一方、第１の判定が肯定されかつ第２の判定が否定された場合は、ポートレートモードが設定されているがそれはユーザの意図に基づくものではないため、モード判定手段３３が図３（ｂ）に示すように階調補正処理を含む通常の処理を行う旨の表示をモニタ２６に行う。ＹＥＳボタン２６ａがクリックされると、設定手段３４が階調補正処理を含む通常の処理を行う旨の設定を出力画像処理手段３２に対して行う。

そして、出力画像処理手段３２が画像データＳ１に対して画像処理を施して処理済み画像データＳ２を得、画像記憶手段３５が処理済み画像データＳ２を記憶媒体に記憶する。なお、図３（ａ）、（ｂ）に示す表示においてＮＯボタン２６ｂがクリックされると、モード判定手段３３が画像処理および画像データの記憶を中止する指示を設定手段３４および画像記憶手段３５のそれぞれに行う。

次いで、本発明の第３の実施形態について説明する。図６は、本発明の第３の実施形態による画像処理装置を適用した画像出力システムの構成を示す概略ブロック図である。なお、第３の実施形態において第１の実施形態と同一の構成については同一の参照番号を付し、ここでは詳細な説明は省略する。第３の実施形態においては、デジタルカメラ１に読出手段２１およびモード判定手段２３にそれぞれ対応する読出手段１６およびモード判定手段１７を設けるとともに、各種表示を行う液晶モニタ等の表示手段１８を設け、画像出力装置２において、モード判定手段２３、モニタ２６および入力手段２７を省略し、デジタルカメラ１と画像出力装置２とを不図示のケーブルにより接続して、デジタルカメラ１からの操作により画像出力装置２において処理済み画像データＳ２をプリント出力するようにした点が第１の実施形態と異なる。

第３の実施形態においては、まずデジタルカメラ１において、ユーザが入力手段１５を操作することにより、読出手段１６がプリント出力する画像データＳ１をメモリカード１４から読み出して、確認のために表示手段１８に表示する。この際、モード判定手段１７が画像データＳ１のタグ情報Ｇに含まれる画像処理情報に、ユーザが撮影モードとしてポートレートモードを設定することにより、ポートレートモードを表す情報が含まれているか否かを判定する（第１の判定）。そして、ポートレートモードを表す情報が含まれている場合において、画像データＳ１により表される画像Ｓ１から顔領域を抽出し、画像Ｓ１の全領域に対する顔領域の比率が所定のしきい値Ｔｈ１以上であるか否かを判定する（第２の判定）。

第１の判定が否定されると、読出手段１６が画像データＳ１を、モード判定手段１７が通常の処理を行う旨の指示を画像出力装置２にそれぞれ送信する。

モード判定手段１７は、第１の判定が肯定されかつ第２の判定が肯定された場合は、ポートレートモードがデジタルカメラ１のユーザの意図により設定されているため、図７（ａ）に示すように画像データＳ１により表される画像とともに、階調補正処理を行わない旨の表示を表示手段１８に行う。そして、ＹＥＳボタン１８ａがクリックされると、読出手段１６が画像データＳ１を、モード判定手段１７が階調補正処理を行わない旨の指示を画像出力装置２に送信する。なお、ＮＯボタン１８ｂがクリックされると、デジタルカメラ１から画像出力装置２へ何ら指示を行うことなく、処理を終了する。

一方、第１の判定が肯定されかつ第２の判定が否定された場合は、ポートレートモードが設定されているがそれはユーザの意図に基づくものではないため、モード判定手段１７は図７（ｂ）に示すように画像データＳ１により表される画像とともに階調補正処理を含む通常の処理を行う旨の表示を表示手段１８に行い、ＹＥＳボタン１８ａがクリックされると、読出手段１６が画像データＳ１を、モード判定手段１７が通常の処理を行う旨の指示を画像出力装置２に送信する。なお、ＮＯボタン１８ｂがクリックされると、デジタルカメラ１から画像出力装置２へ何ら指示を行うことなく、処理を終了する。

画像出力装置２においては、読出手段２１が画像データＳ１およびモード判定手段１７の指示を受信する。そして設定手段２４が、モード判定手段１７が送信した指示内容に応じて出力画像処理手段２２が行う画像処理の処理内容を設定する。すなわち、第１の判定が否定された場合、および第１の判定が肯定されかつ第２の判定が否定された場合は通常の処理を行い、第１の判定が肯定されかつ第２の判定が肯定された場合は、画像処理条件Ｊに基づく画像処理に階調補正処理が含まれている場合であっても、階調補正処理を行わないよう、出力画像処理手段２２の設定を行う。

出力画像処理手段２２は、設定された処理内容の画像処理を画像データＳ１に対して施して処理済み画像データＳ２を得る。そして、プリント出力手段２５が処理済み画像データＳ２をプリント出力し、処理を終了する。

なお、上記第１から第３の実施形態においては、画像データＳ１に対して施す処理内容をモニタ２６または表示手段１８に表示してオペレータまたはユーザに処理を続行するか否かを指示させるようにしているが、オペレータまたはユーザに指示をさせることなく、直ちにモード判定手段２３，１７の判定結果に応じた画像処理を画像データＳ１に対して施すようにしてもよい。

また、上記第１から第３の実施形態においては、ポートレートモードがユーザが意図して設定したものであると判定された場合に、階調補正処理を行わないようにしているが、処理量を小さくして階調補正処理を行うようにしてもよい。

次いで、本発明の第４の実施形態について説明する。図８は、本発明の第４の実施形態による画像処理装置を適用したデジタルカメラの構成を示す概略ブロック図である。なお、第４の実施形態において第１の実施形態と同一の構成については同一の参照番号を付し、ここでは詳細な説明は省略する。第４の実施形態においては、デジタルカメラ１に読出手段２１およびモード判定手段２３にそれぞれ対応する読出手段１６およびモード判定手段１７を設けるとともに、各種表示を行う液晶モニタ等の表示手段１８を設けるようにした点が第１の実施形態と異なる。

第４の実施形態においては、ユーザが撮影により取得した画像の確認を行うために、メモリカード１４に記録した画像データＳ１を読出手段１６が読み出して表示手段１８に表示する際に、モード判定手段１７が第１の判定を行う。そして、第１の判定が肯定されると、第２の判定を行う。

モード判定手段１７は、第１の判定が肯定されかつ第２の判定が否定された場合は、ポートレートモードが設定されているがそれはユーザの意図に基づくものではないため、画像データＳ１とともに警告メッセージを表示手段１８に表示する。

図９は、第１の判定が肯定されかつ第２の判定が否定された場合の表示手段１８の表示内容を示す図である。図８に示すように、表示手段１８には、画像データＳ１により表される画像とともに「本当にポートレートモードでよいですか？」の警告メッセージ１８ｃが表示される。

このように、第４の実施形態においては、第１の判定が肯定されかつ第２の判定が否定された場合に表示手段１８に警告メッセージ１８ｃを表示するようにしたため、デジタルカメラ１のユーザは、警告メッセージ１８ｃを見ることにより、デジタルカメラ１を用いての撮影時にポートレートモードを誤って設定してしまったことを知ることができる。したがって、必要であれば撮影モードを正しく設定して改めて撮影を行うことができる。

なお、上記第４の実施形態においては、メモリカード１４に記録された画像データＳ１を表示手段１８に表示する際に、第１の判定および第２の判定を行うようにしているが、デジタルカメラ１において、撮影直後に撮影により取得された画像データＳ１を表示手段１８に表示する、いわゆるプレビューモードを設定している場合がある。また、撮影により取得された画像データＳ１を表示手段１８に表示し、ユーザに確認させて記録の指示がなされた場合にのみ、画像データＳ１をメモリカード１４に記録するモードを設定している場合がある。このような場合には、撮影直後に第１および第２の判定を行い、第１および第２の判定が否定された場合に、警告メッセージ１８ｃを表示手段１８に表示するようにしてもよい。これにより、ユーザは必要であれば直ちに撮影モードを正しく設定して撮影をやり直すことができる。

また、デジタルカメラ１において撮影時には、シャッタボタンを半押しすることによりオートフォーカスがなされるが、オートフォーカス時に画像データを一時的に取得して第１および第２の判定を行い、第１および第２の判定が否定された場合に、警告メッセージ１８ｃを表示手段１８に表示するようにしてもよい。これにより、ユーザは撮影を行う前に撮影モードを正しく設定することができる。

なお、上記第４の実施形態においては、警告メッセージ１８ｃとともに、撮影時刻、画像データＳ１のファイル名等の他の情報を表示するようにしてもよい。

また、上記第４の実施形態においては、第１および第２の判定を行うか否かをユーザにより設定可能としてもよい。

本発明の第１の実施形態による画像出力装置を適用した画像出力システムの構成を示す概略ブロック図 出力画像処理手段において行われる処理を示す概略ブロック図 モニタの表示内容を示す図 画像出力装置の動作を示すフローチャート 本発明の第２の実施形態による画像出力装置を適用した画像出力システムの構成を示す概略ブロック図 本発明の第３の実施形態による画像出力装置を適用した画像出力システムの構成を示す概略ブロック図 第３の実施形態における表示手段の表示内容を示す図 本発明の第４の実施形態による画像出力装置を適用したデジタルカメラの構成を示す概略ブロック図 第４の実施形態における表示手段の表示内容を示す図

符号の説明

１ デジタルカメラ
２ 画像出力装置
３ 画像記憶装置
１１ 撮像手段
１２ ＤＳＣ画像処理手段
１３ 記録手段
１４ メモリカード
１５ 入力手段
１６，２１，３１ 読出手段
１７，２３，３３ モード判定手段
１８ 表示手段
２２，３２ 出力画像処理手段
２４，３４ 設定手段
２５ プリント出力手段
２６，３６ モニタ
２７，３７ 入力手段
３５ 画像記憶手段

Claims (10)

1. 画像処理が施され、該画像処理に関する画像処理情報を含む付帯情報が付与された画像データを読み出す読出手段と、
   前記画像データにより表される画像が、前記画像データに付与された前記付帯情報に含まれる前記画像処理情報に応じて該画像に現れるべき特徴を有するか否かを判定する特徴判定手段とを備えたことを特徴とする画像処理装置。
2. 前記特徴判定手段による判定結果を表示する表示手段をさらに備えたことを特徴とする請求項１記載の画像処理装置。
3. 前記画像データに対して、少なくとも１種類のさらなる画像処理を施して処理済み画像データを得る処理手段と、
   前記特徴判定手段による判定が肯定された場合、前記さらなる画像処理のうち、前記画像データに施されている処理済み画像処理を未処理とするまたは処理量を小さくして前記画像データに対して前記さらなる画像処理を施し、前記特徴判定手段による判定が否定された場合、前記画像データに対して前記処理済み画像処理を含む前記さらなる画像処理を施すよう前記処理手段を制御する制御手段とをさらに備えたことを特徴とする請求項１記載の画像処理装置。
4. 前記特徴判定手段による判定結果を表示する表示手段と、
   前記判定結果に応じてオペレータによる処理の続行の指示を受け付ける入力手段とをさらに備え、
   前記制御手段は、前記入力手段から前記処理の続行の指示が入力された場合にのみ、前記画像データに対して前記判定結果に応じた前記さらなる画像処理を施すよう前記処理手段を制御する手段であることを特徴とする請求項３記載の画像処理装置。
5. 前記処理済み画像データをプリント出力するとともに、前記特徴判定手段による判定結果および／または施された前記さらなる画像処理の内容を表す情報を前記処理済み画像データのプリントに付与するプリント出力手段をさらに備えたことを特徴とする請求項３または４記載の画像処理装置。
6. 前記画像処理情報が、前記画像データを取得した撮像装置において設定されたポートレートモードを表す情報であり、
   前記処理済み画像処理が階調補正処理であることを特徴とする請求項３から５のいずれか１項記載の画像処理装置。
7. 画像処理が施され、該画像処理に関する画像処理情報を含む付帯情報が付与された画像データを読み出し、
   前記画像データにより表される画像が、前記画像データに付与された前記付帯情報に含まれる前記画像処理情報に応じて該画像に現れるべき特徴を有するか否かを判定することを特徴とする画像処理方法。
8. 画像処理が施され、該画像処理に関する画像処理情報を含む付帯情報が付与された画像データを読み出す手順と、
   前記画像データにより表される画像が、前記画像データに付与された前記付帯情報に含まれる前記画像処理情報に応じて該画像に現れるべき特徴を有するか否かを判定する手順とを有することを特徴とする画像処理方法をコンピュータに実行させるためのプログラム。
9. 画像処理が施され、該画像処理に関する画像処理情報を含む付帯情報が付与された画像データに対して、少なくとも１種類のさらなる画像処理を施して処理済み画像データを得る画像処理方法において、
   前記画像データにより表される画像が、前記画像データに付与された前記付帯情報に含まれる前記画像処理情報に応じて該画像に現れるべき特徴を有するか否かを判定し、
   該判定が肯定された場合、前記さらなる画像処理のうち、前記画像データに施されている処理済み画像処理を未処理とするまたは処理量を小さくして前記画像データに対して前記さらなる画像処理を施し、前記判定が否定された場合、前記画像データに対して前記処理済み画像処理を含む前記さらなる画像処理を施すことを特徴とする画像処理方法。
10. 画像処理が施され、該画像処理に関する画像処理情報を含む付帯情報が付与された画像データに対して、少なくとも１種類のさらなる画像処理を施して処理済み画像データを得る画像処理方法をコンピュータに実行させるためのプログラムにおいて、
    前記画像データにより表される画像が、前記画像データに付与された前記付帯情報に含まれる前記画像処理情報に応じて該画像に現れるべき特徴を有するか否かを判定する手順と、
    該判定が肯定された場合、前記さらなる画像処理のうち、前記画像データに施されている処理済み画像処理を未処理とするまたは処理量を小さくして前記画像データに対して前記さらなる画像処理を施し、前記判定が否定された場合、前記画像データに対して前記処理済み画像処理を含む前記さらなる画像処理を施す手順とを有することを特徴とするプログラム。

Images