JP2014207659A - 画像処理装置及び画像処理方法及び撮像装置 - Google Patents

Abstract

【課題】よりユーザの意図に近い色変換処理を行うことを目的とする。
【解決手段】画像内において顔と判断される顔領域を検出する顔検出部２４Ａと、ユーザの操作により画像内の特定の位置を指定する位置指定部２４Ｂと、位置指定部で指定された位置が前記顔領域に含まれない場合、色相の中心値である評価値を算出する範囲を第１の範囲として、指定された位置の色相を設定し、位置指定部で指定された位置が前記顔領域を含む場合、色相の中心値である評価値を算出する範囲を第１の範囲より狭い第２の範囲として、指定された位置の色相を設定する範囲指定部２４Ｃと、範囲指定部で設定された色相の範囲に含まれる色情報に基づき、画像変換の処理を行う画像処理部２２とを備えた。
【選択図】図３

Description

本技術は、画像データに対する色変換処理により様々な効果を得ることが可能な画像処理装置及び画像処理方法及び撮像装置に関する。

撮像装置においては、撮影した画像に対し、ユーザの好みに応じた画像処理を行う画像処理装置が使用されている。例えば、タッチパネル機能付の表示装置に表示されるスルー画像（ライブビュー画像）において、ユーザが指定する領域の色（残す色）以外の色を無彩色に変換する色変換処理（以下、ワンポイントカラー処理とも呼称する）を行う画像処理装置が知られている（例えば、特許文献１参照）。

特開２０１２−２４４３３７号公報

本技術は、よりユーザの意図に近い色変換処理を行うことが可能な画像処理装置及び撮像装置を提供することを目的とする。

本技術による撮像装置は、画像内において顔と判断される顔領域を検出するように構成した顔検出部と、ユーザの操作により画像内の特定の位置を指定するように構成した位置指定部と、前記位置指定部で指定された位置が前記顔領域に含まれない場合、色相の中心値である評価値を算出する範囲を第１の範囲として、指定された位置の色相の範囲を設定し、前記位置指定部で指定された位置が前記顔領域を含む場合、色相の中心値である評価値を算出する範囲を前記第１の範囲より狭い第２の範囲として、指定された位置の色相の範囲を設定するように構成した範囲指定部と、前記範囲指定部で設定された色相の範囲に含まれる色情報に基づき、画像変換の処理を行うように構成した画像処理部とを備えた。

また、本技術による撮像装置は、被写体像を撮像する撮像部と、前記撮像部で撮像した被写体像に基づき生成された画像データを記録するデータ記録部と、前記データ記録部に記録された画像データによる画像を表示する表示装置と、前記表示装置に表示された画像に対して画像処理を行うように構成した画像処理装置とを備えた撮像装置であって、前記画像処理装置は、ユーザの操作により指定された画像内の特定の位置が画像内の顔領域に含まれない場合は、色相の中心値である評価値を算出する範囲を第１の範囲として、指定された位置の色相の範囲を設定し、ユーザの操作により指定された画像内の特定の位置が前記顔領域を含む場合、色相の中心値である評価値を算出する範囲を前記第１の範囲より狭い第２の範囲として、指定された位置の色相の範囲を設定するように構成したコントローラ部と、前記コントローラ部で設定された色相の範囲に含まれる色情報に基づき、画像変換の処理を行うように構成した画像処理部とを備えた。

また、本技術による画像処理方法は、画像内において顔と判断される顔領域を検出する顔検出ステップと、ユーザの操作により画像内の特定の位置を指定する位置指定ステップと、前記位置指定ステップで指定された位置が前記顔領域に含まれない場合、色相の中心値である評価値を算出する範囲を第１の範囲として、指定された位置の色相の範囲を設定し、前記位置指定ステップで指定された位置が前記顔領域を含む場合、色相の中心値である評価値を算出する範囲を前記第１の範囲より狭い第２の範囲として、指定された位置の色相の範囲を設定する範囲指定ステップと、前記範囲指定ステップで指定された色相の範囲に含まれる色情報に基づき、画像変換の処理を行う画像処理ステップとを備えた。

本技術によれば、よりユーザの意図に近い色変換処理を行うことが可能な画像処理装置及び画像処理方法及び撮像装置を提供することができる。

本技術の一実施の形態による画像処理装置を備えた撮像装置の一例として、デジタルカメラの前面側の外観を示す平面図である。 デジタルカメラの背面側の外観を示す平面図である。 本技術の一実施の形態による画像処理装置を備えた撮像装置の一例として、デジタルカメラの全体構成を示すブロック図である。 デジタルカメラの撮影モード時の制御を説明するためのフローチャートである。 本技術によるデジタルカメラの画像処理装置において、ワンポイントカラー処理を行うモード時の液晶モニタにおける表示状態の一例を説明するための説明図である。 図５において、ユーザが残したい色の位置として、画像の顔領域以外を指定した場合に色相を算出する範囲と、顔領域を指定した場合に色相を算出する範囲を説明するための説明図である。 図５において、ユーザが残したい色の位置として、画像の顔領域を指定した場合に色相を算出する範囲を説明するための説明図である。 図６Ａに対応する色相の範囲の処理を説明するための説明図である。 図６Ｂに対応する色相の範囲の処理を説明するための説明図である。 本技術の一実施の形態によるデジタルカメラの画像処理装置において、ワンポイントカラーモード時のワンポイントカラー処理の制御の一例を説明するためのフローチャートである。

以下、本技術による画像処理装置及び画像処理方法及び撮像装置について、図面を参照しながら、実施の形態を説明する。ただし、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。

なお、出願人は、当業者が本技術を十分に理解するために添付図面及び以下の説明を提供するのであって、これらによって特許請求の範囲に記載の主題を限定することを意図するものではない。

〔１．構成〕
図１は、本技術の一実施の形態による画像処理装置を備えた撮像装置の一例として、デジタルカメラの前面側の外観を示す平面図である。図２は、デジタルカメラの背面側の外観を示す平面図である。

デジタルカメラは、筐体の前面側に、光学系１を収容した鏡筒と、フラッシュ２とを配置している。筐体の上部には、静止画レリーズ釦３、ズームレバー４、及び電源釦５などを含む操作部が配置されている。また、筐体の背面側には、被写体のスルー画像や撮影した画像を表示するためのタッチパネル機能付の表示装置である液晶モニタ６が配置されている。さらに、中央釦７、十字釦８、動画レリーズ釦９、及びモード切替スイッチ１０などを含む操作部が配置されている。

図３は、本技術の一実施の形態による画像処理装置を備えた撮像装置の一例として、デジタルカメラの全体構成を示すブロック図である。

図３に示すように、デジタルカメラは、光学系１を介して形成された被写体像を撮像部であるＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅｓ）イメージセンサ２０で撮像する。ＣＣＤイメージセンサ２０は、撮像した被写体像に基づいて、画像データを生成する。ＣＣＤイメージセンサ２０で生成された画像データは、アナログ信号を調整する信号調整回路としてのＡＦＥ（Ａｎａｌｏｇ Ｆｒｏｎｔ Ｅｎｄ）２１を通して、画像変換などの処理を行う画像処理部２２に送られ、各種の画像処理が施される。生成された画像データは、内蔵された記録媒体、または着脱可能に外付けされる記録媒体などのデータ記録部に記録される。なお、記録媒体の例としては、フラッシュメモリ及びメモリカードなどがあるが、本実施の形態においては、記録媒体がメモリカードの場合を例にとって説明する。

ＣＣＤイメージセンサ２０は、光学系１を通して形成された被写体像を撮像して、画像データを生成する。ＣＣＤイメージセンサ２０は、デジタルカメラが撮影モードにあるとき、一定時間ごとに新しいフレームの画像データを生成することができる。

ＡＦＥ２１では、ＣＣＤイメージセンサ２０から読み出された画像データに対して、相関二重サンプリングによる雑音抑圧、アナログゲインコントローラ部によるＡ／Ｄコンバータの入力レンジ幅への増幅、Ａ／ＤコンバータによるＡ／Ｄ変換が施される。その後、ＡＦＥ２１は、画像データを画像処理部２２に出力する。

画像処理部２２は、ＡＦＥ２１から出力された画像データに対して、各種の画像処理を施す。各種の画像処理としては、スミア補正、ホワイトバランス補正、ガンマ補正、ＹＣ変換処理、電子ズーム処理、圧縮処理、伸張処理などが含まれる。なお、画像処理は、これらに限定されるものではない。画像処理部２２は、各種の画像処理を施した画像情報を一旦、バッファメモリ２３に記憶する。画像処理部２２は、バッファメモリ２３に記憶されている画像データに対して、ワンポイントカラー処理などの色変換処理を行う。色変換処理後の画像データは、バッファメモリ２３に記憶される。このワンポイントカラー処理の詳細については後述する。なお、バッファメモリ２３は、画像処理部２２やコントローラ部２４のワークメモリとして機能する記憶手段であり、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などで実現できる。

コントローラ部２４は、デジタルカメラ全体の動作を制御するもので、プログラムを格納するＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、及びプログラムを実行することにより各種の情報を処理するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などを有するマイクロコンピュータにより構成される。ＲＯＭは、ファイル制御、オートフォーカス制御（ＡＦ制御）、自動露出制御（ＡＥ制御）、及びフラッシュ２の発光制御などを含め、デジタルカメラ全体の動作を統括して制御するためのプログラムを格納している。また、コントローラ部２４は、ＲＯＭに格納されたプログラムを実行することにより、顔検出部２４Ａ、位置指定部２４Ｂ及び範囲指定部２４Ｃとして動作する。

顔検出部２４Ａは、バッファメモリ２３に記憶された画像データから人物の顔であると判定される領域を検出して顔領域とし、その顔領域の情報をバッファメモリ２３に記憶する。画像データから人物の顔である領域を検出する方法については、様々な公知の手法を用いることができる。

位置指定部２４Ｂは、ユーザによる操作に基づいて、画像内の位置または領域を特定して、「残したい色」の位置または領域としてバッファメモリ２３に記憶する。

範囲指定部２４Ｃは、位置指定部２４Ｂが特定した「残したい色」の位置または領域と、顔検出部２４Ａによる顔検出結果に基づいて、評価値を算出する範囲と色相の幅を決定する。そして、範囲指定部２４Ｃは、評価値を算出する範囲と色相の幅とから、残したい色の範囲を色相の範囲として決定する。評価値を算出する範囲、及び色相の幅の詳細な説明は後述する。

画像データが記録されるメモリカード２５は、コントローラ部２４に接続されたカードスロット２６にユーザによって着脱可能であり、これによりメモリカード２５は、コントローラ部２４に電気的かつ機械的に接続される。なお、カードスロット２６は、メモリカード２５を制御する機能を備えた構成であってもよい。メモリカード２５は、内部にフラッシュメモリなどの記録部を備えた外部メモリである。メモリカード２５は、画像処理部２２で処理される画像データなどのデータを記録する。このメモリカード２５に記録される高画素の画像データは、ユーザによるレリーズ釦の操作を受け付けた後に、ＣＣＤイメージセンサ２０が生成した画像データに基づいて、画像処理部２２により生成される。コントローラ部２４は、画像処理部２２で処理された後、バッファメモリ２３に記憶された画像データをメモリカード２５に記録する。また、メモリカード２５に記録された画像データは、ユーザによる操作に基づいて、液晶モニタ６上に表示される。

コントローラ部２４に接続されたフラッシュメモリ２７は、画像データ及びデジタルカメラの設定情報などを記録するための内部メモリとして機能するものである。なお、図３においては、フラッシュメモリ２７は、コントローラ部２４の外部に配置した状態で図示しているが、勿論、フラッシュメモリ２７はコントローラ部２４の内部に配置してもよい。

また、光学系１は、フォーカスレンズ１１やズームレンズ１２、絞り１３、シャッター１４などにより構成される。フォーカスレンズ１１は、被写体のフォーカス状態の調節に用いられる。ズームレンズ１２は、被写体の画角の調節に用いられる。絞り１３は、ＣＣＤイメージセンサ２０に入射する光量の調節に用いられる。シャッター１４は、ＣＣＤイメージセンサ２０に入射する光の露出時間を調節する。フォーカスレンズ１１、ズームレンズ１２、絞り１３、及びシャッター１４は、それぞれに対応したＤＣモータやステッピングモータなどの駆動手段により、コントローラ部２４から送られる制御信号に従って駆動される。なお、図示していないが、光学系１は、光学式手ぶれ補正（ＯＩＳ：Ｏｐｔｉｃａｌ Ｉｍａｇｅ Ｓｔａｂｉｌｉｚｅｒ）レンズを含んでいてもよい。また、光学系１を構成する各種レンズは、複数枚のレンズや複数のレンズ群から構成することができる。

液晶モニタ６は、画像処理部２２にて処理された画像データに基づいて、画像を表示する。液晶モニタ６が表示する画像は、スルー画像及び記録画像を含んでいる。ここで、スルー画像は、ＣＣＤイメージセンサ２０により一定時間ごとに生成される新しいフレームの画像データを連続して表示する画像である。通常は、デジタルカメラが撮影モードにあるときに、画像処理部２２がＣＣＤイメージセンサ２０の生成した画像データに基づいて、スルー画像を生成する。ユーザは、液晶モニタ６に表示されるスルー画像を参照することにより、被写体の構図を確認しながら撮影できる。また、記録画像は、デジタルカメラが再生モードにあるときに、メモリカード２５に記録された高画素の画像データを低画素に縮小した画像である。

また、コントローラ部２４に接続された操作部２８は、図１、図２において説明したデジタルカメラの操作釦やスイッチ、及び液晶モニタ６に設置されたタッチパネルの総称であり、ユーザによる操作を受け付けるものである。操作部２８は、ユーザによる操作を受け付けると、コントローラ部２４に種々の動作を指示する信号を送る。以下、操作部２８による動作の一例を説明する。

静止画レリーズ釦３は、半押しの操作と全押しの操作が可能な二段階の押下げタイプの釦である。静止画レリーズ釦３がユーザにより半押しされると、コントローラ部２４は、ＡＦ（Ａｕｔｏ Ｆｏｃｕｓ）制御やＡＥ（Ａｕｔｏ Ｅｘｐｏｓｕｒｅ）制御を実行し、撮影条件を決定する。続いて、静止画レリーズ釦３が、ユーザにより全押しされると、コントローラ部２４は、撮影処理を行う。コントローラ部２４は、全押しのタイミングに撮像された画像データを、静止画としてメモリカード２５などに記録する。以下、特別に説明しない限り、「静止画レリーズ釦３を押下げる」という記載は、「全押しする」に対応する記載とする。

動画レリーズ釦９は、動画記録の開始及び終了を指示するための押下げタイプの釦である。動画レリーズ釦９がユーザによって押下げられると、コントローラ部２４は、ＣＣＤイメージセンサ２０が生成した画像データに基づいて、画像処理部２２により生成された画像データを、動画として、順次、メモリカード２５などの記録媒体に記録する。再度、動画レリーズ釦９が押下げられると、動画の記録が終了する。

ズームレバー４は、広角位置の端と望遠位置の端との間で画角を調節するためのものである。このズームレバー４には、中央位置に自己復帰するタイプのレバーが用いられる。ズームレバー４は、ユーザにより操作されると、コントローラ部２４にズームレンズ１２を駆動するための信号を送る。すわなち、ズームレバー４が広角位置の端に操作されると、コントローラ部２４は、被写体を広角で捉えられるようにズームレンズ１２を駆動する。同様に、ズームレバー４が望遠位置の端に操作されると、コントローラ部２４は、被写体を望遠で捉えられるようにズームレンズ１２を駆動する。

電源釦５は、デジタルカメラを構成する各部への電力供給をユーザが指示するための押下げタイプの釦である。電源オフ時に、電源釦５がユーザにより押下げられると、コントローラ部２４は、デジタルカメラを構成する各部に電力を供給し、起動させる。また、電源オン時に、電源釦５がユーザにより押下げされると、コントローラ部２４は、各部への電力供給を停止するように動作する。

中央釦７は、押下げタイプの釦である。デジタルカメラが撮影モードまたは再生モードにあるとき、中央釦７がユーザにより押下げられると、コントローラ部２４は、メニュー画面を液晶モニタ６に表示する。メニュー画面は、撮影／再生のための各種条件を設定するための画面である。メニュー画面で設定された情報は、フラッシュメモリ２７に記録される。各種条件の設定項目が選択された状態で、中央釦７が押下げられた場合、中央釦７は条件設定を決定するための釦として機能する。

十字釦８は、上下左右方向に押下げ可能な押下げタイプの釦である。ユーザは、十字釦８をいずれかの方向に押下げることにより、液晶モニタ６に表示される各種条件項目を選択することができる。

モード切替スイッチ１０は、上下方向に押下げ可能な押下げタイプの釦である。ユーザはモード切替スイッチ１０をいずれかの方向に押下げることにより、デジタルカメラの状態を、撮影モードまたは再生モードに切り替えることができる。

なお、画像処理部２２及びコントローラ部２４は、ハードワイヤードな電子回路で構成してもよいし、プログラムを用いたマイクロコンピュータなどで構成してもよい。また、画像処理部２２とコントローラ部２４は、１つの半導体で構成してもよい。また、ＲＯＭは、コントローラ部２４の内部に設ける必要はなく、コントローラ部２４の外部に外部メモリとして設けてもよい。

また、撮像部を構成する撮像素子としては、ＣＣＤイメージセンサに限定されなく、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ−Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサなどを用いてもよい。さらに、光学系とイメージセンサなどから構成される撮像部は、レンズ、ＣＭＯＳイメージセンサ、信号処理回路部の一部などが一体にモジュール化されたカメラモジュールを用いて構成してもよい。

〔２．動作〕
以下、本技術の実施の形態による画像処理装置の動作を含め、デジタルカメラの動作を説明する。

本実施の形態のデジタルカメラの画像処理装置は、撮影した画像データに対して、ワンポイントカラー処理を行うことが可能である。デジタルカメラは、画像データを表示し、ユーザに指定された残したい色の位置と、顔検出結果とに基づいて、評価値を算出する範囲と、色相の幅を決定する。そして、デジタルカメラは、決定した評価値を算出する範囲と、色相の幅に基づいて、残す色を決定し、残す色以外の色を無彩色にする色変換処理を行うことができる。

〔２−１．デジタルカメラの撮影時の動作〕
まず、デジタルカメラの撮影時の動作について説明する。図４は、デジタルカメラの撮影モード時の制御を説明するためのフローチャートである。デジタルカメラは、撮影モードにおいて、動画及び静止画の撮影を行う。ここでは、静止画の撮影について説明する。

デジタルカメラがユーザのモード切替スイッチ１０の操作により撮影モードに移行したとき、コントローラ部２４は静止画記録に必要な初期化処理のための初期化ステップＳ４０１を行う。

次に、モード判定ステップＳ４０２において、コントローラ部２４は、モード切替スイッチ１０の操作の状態を確認し、撮影モードである（Ｙ）と判定した場合、設定されている設定値に応じて、液晶モニタ６にスルー画像を表示する表示ステップＳ４０３の表示処理を実行する。続いて、コントローラ部２４は、レリーズ釦動作判定ステップＳ４０４において、静止画レリーズ釦３の操作の状態を確認し、静止画レリーズ釦３が押下げられ、撮影動作を行う（Ｙ）と判定した場合、静止画撮影を行う撮影ステップＳ４０５の処理を実行する。具体的には、コントローラ部２４は、静止画レリーズ釦３が押下げられたタイミングで、ＣＣＤイメージセンサ２０が生成した画像データに基づいて、画像処理部２２により生成される静止画の画像データをメモリカード２５などの記録媒体に記録する。

また、静止画撮影動作の撮影ステップＳ４０５の処理を実行した後、コントローラ部２４は、モード判定ステップＳ４０２からの処理を繰り返し、実行する。

一方、モード判定ステップＳ４０２において、コントローラ部２４が、モード切替スイッチ１０の状態が撮影モードでない（Ｎ）と判定した場合、次の表示ステップＳ４０３の動作は行わず、処理を終了する。また、レリーズ釦動作判定ステップＳ４０４において、コントローラ部２４が静止画レリーズ釦３の押下げを検知しなかったとき、すなわち撮影動作を行わない（Ｎ）と判定した場合、コントローラ部２４は、モード判定ステップＳ４０２からの処理を繰り返し、実行する。

〔２−２．ワンポイントカラー処理の動作〕
次に、本技術によるデジタルカメラの画像処理装置において、ワンポイントカラー処理の動作について説明する。

図５は、本技術によるデジタルカメラの画像処理装置において、ワンポイントカラー処理を行うモード時の液晶モニタにおける表示状態の一例を説明するための説明図である。図６Ａは、図５において、ユーザが残したい色の位置として、画像の顔領域以外を指定した場合に色相を算出する範囲を説明するための説明図、図６Ｂは、図５において、ユーザが残したい色の位置として、画像の顔領域を指定した場合に色相を算出する範囲を説明するための説明図である。図７Ａは、図６Ａに対応する色相の範囲の処理を説明するための説明図、図７Ｂは、図６Ｂに対応する色相の範囲の処理を説明するための説明図である。

本技術によるデジタルカメラの画像処理装置においては、図５に示すように、コントローラ部２４の顔検出部２４Ａは、画像内において顔と判断される顔領域６ａを検出する。そして、位置指定部２４Ｂは、ユーザによる操作に基づいて、画像内の特定の位置、例えば残したい色が存在する特定の位置を指定する。

範囲指定部２４Ｃは、位置指定部２４Ｂで指定された位置６ｂが顔領域６ａに含まれないと判断したとき、色相の中心値である評価値を算出する範囲は、図６Ａに示すように、初期設定された標準の第１の範囲とする。この第１の範囲は、幅Ｘ０×高さＹ０の範囲の画素数を有する範囲である。

一方、範囲指定部２４Ｃは、位置指定部２４Ｂで指定された位置６ｃが顔領域６ａに含まれていると判断したとき、色相の中心値である評価値を算出する範囲は、図６Ｂに示すように、第１の範囲より狭い範囲の第２の範囲とする。この第２の範囲は、幅Ｘ１×高さＹ１の範囲で、第１の範囲の画素数より少ない画素数を有する範囲である。

これにより、位置指定部２４Ｂで指定された位置６ｂが顔領域６ａに含まれない場合は、図７Ａに示すように、第１の範囲（幅Ｘ０×高さＹ０）の画素に基づき算出される評価値が示す色相Ｈ１を中心とし、色相の幅を示すΔｈを加算した色相の範囲（Ｈ１±Δｈ）が残したい色の色相の範囲として設定される。また、位置指定部２４Ｂで指定された位置６ｂが顔領域６ａに含まれる場合は、図７Ｂに示すように、第１の範囲より狭い範囲である第２の範囲（幅Ｘ１×高さＹ１）の画素に基づき算出される評価値が示す色相Ｈ２を中心とし、色相の範囲（Ｈ２±Δｈ）が残したい色の色相の範囲として設定される。この場合、図７Ｂに示す色相の範囲（Ｈ２±Δｈ）が肌色に近い色相である。

なお、図６Ａ、図６Ｂ、図７Ａ、図７Ｂの説明においては、第１の範囲（幅Ｘ０×高さＹ０）を初期設定の範囲として説明しているが、勿論、第２の範囲（幅Ｘ１×高さＹ１）を初期設定の範囲としてもよい。また、第１の範囲と第２の範囲は、第２の範囲が第１の範囲より画素数の少ない狭い領域を持つ関係であればよく、あらかじめ同様な関係を持つ第１の範囲と第２の範囲を複数対設定しておき、ユーザが複数対の設定値から選択する構成としてもよい。

さらに、色相の範囲は、位置指定部２４Ｂで指定された位置の色相Ｈ１、Ｈ２を中心にして、同じ色相の幅Δｈを加算した範囲とする必要はなく、指定された位置の色相Ｈ１、Ｈ２を含む範囲であればよい。例えば、図７Ａ、図７Ｂにおいて、色相Ｈ１、Ｈ２に、異なる幅の＋Δｈｘと−Δｈｙを加算した範囲としてもよい。

そして、画像処理部２２は、範囲指定部２４Ｃで指定された色相の範囲（Ｈ１±Δｈ）、または色相の範囲（Ｈ２±Δｈ）に含まれる色情報に基づき、画像変換の処理を行う。

このように、本技術によるデジタルカメラの画像処理装置においては、残したい色の位置が顔領域に含まれる場合に、残す色の位置を中心とした第２の範囲は、含まれない場合に残す色の位置を中心とした第１の範囲よりも狭く指定する。これにより、ユーザが人物の顔の色を残したいと考えて人物の顔を指定した場合に、画素数が少ない狭い範囲全体が人物の顔に含まれる可能性を高めることができる。その結果、第２の範囲内の画素の色相の平均値を評価値として取得するときに、肌色以外の画素が混入する可能性が低くなり、よりユーザの意図に近いワンポイントカラー処理を行うことが可能となる。

図８は、本技術の一実施の形態によるデジタルカメラの画像処理装置において、ワンポイントカラーモード時のワンポイントカラー処理の制御の一例を説明するためのフローチャートである。

図８に示すように、まずコントローラ部２４は、モード判定ステップＳ５０１において、現在のモードがワンポイントカラーモードであるか否かの判定を行い、ワンポイントカラーモードである（Ｙ）と判定された場合、画像選択を行う次の画像選択ステップＳ５０２に進む。なお、モード判定ステップＳ５０１において、現在のモードが、ワンポイントカラーモードでない（Ｎ）と判定された場合、ワンポイントカラーモードの処理を終了する。

画像選択ステップＳ５０２において、コントローラ部２４は、ワンポイントカラー処理の対象となる画像データをユーザに選択させる。具体的には、コントローラ部２４は、メモリカード２５に記録されている画像データの一覧を液晶モニタ６に表示させる。そしてコントローラ部２４は、ユーザによる操作部２８の操作に応じて、このうちひとつの画像データを選択する。

次に、顔検出ステップＳ５０３において、顔検出部２４Ａは、選択した画像データに対して顔領域の検出を行う。ここで、画像データ内に人物の顔と判断できる領域が存在する場合、その領域を、領域の中心位置と縦横のサイズの組としてバッファメモリ２３に記憶する。その後、コントローラ部２４は、この画像データに基づく画像を、液晶モニタ６に表示する表示ステップＳ５０４を実行する。このとき、液晶モニタ６に表示された画像上に、図５に示すように、顔領域６ａを示す枠を重ねて表示する。なお、顔領域６ａを示す枠の形状は、図５に示す角形状に限定されなく、さらには枠を表示しなくてもよい。

続いて、位置指定部２４Ｂは、ユーザが画像内の残したい色を決定するために、ユーザに画像内の位置を選択させる位置指定ステップＳ５０５を実行する。具体的には、液晶モニタ６に画像が表示されている状態で、ユーザが十字釦８などを操作すると、位置指定部２４Ｂはこの操作に基づいて画像上のカーソルを移動させる。カーソルが所望の位置に来たときにユーザが中央釦７を押すと、位置指定部２４Ｂは、その時点でのカーソルの位置を、残したい色の位置としてバッファメモリ２３に記憶する。また、他の例として、液晶モニタ６にタッチパネル機能を付加し、ユーザが液晶モニタ６の画面を直接触れることにより、位置を選択する構成としてもよい。

次に、範囲指定部２４Ｃは、位置指定ステップＳ５０５で取得した残したい色の位置が、顔検出ステップステップＳ５０３で検出した顔領域内にあるかどうかを判定する顔領域判定ステップＳ５０６を行う。範囲指定部２４Ｃは、位置指定ステップＳ５０５で取得した残したい色の位置が顔領域内にある（Ｙ）と判断した場合、範囲指定ステップＳ５０７において、上述したように、評価値を算出する範囲を初期値（標準）の第１の範囲より狭い第２の範囲に設定する。

また、範囲指定部２４Ｃは、範囲指定ステップＳ５０８において、色相の範囲を初期設定の範囲より広く設定する。具体的には、残したい色の色相をＨ２とし、標準の色相の幅をΔＨ０とすると、位置指定ステップＳ５０５で選択された残したい色の位置が顔領域内にあると判断した場合は、ΔＨ１＞ΔＨ０となる色相の幅ΔＨ１を設定する。この結果、色相の範囲は、Ｈ２±ΔＨ１の範囲となる。

一方、範囲指定部２４Ｃは、位置指定ステップＳ５０５で取得した残したい色の位置が顔領域内にない（Ｎ）と判断した場合、範囲指定ステップＳ５０９において、上述したように、評価値を算出する範囲を初期値（標準）の第１の範囲に設定する。

また、範囲指定部２４Ｃは、範囲指定ステップＳ５１０において、残したい色の色相の範囲を初期設定の範囲に設定する。具体的には、残したい色の色相をＨ１とし、標準の色相の幅をΔＨ０とすると、位置指定ステップＳ５０５で選択された残したい色の位置が顔領域内にないと判断した場合は、色相の幅ΔＨ０を設定し、色相の範囲は、Ｈ１±ΔＨ０の範囲となる。

ここで、評価値を算出する範囲について説明する。最終的に残したい色の色相範囲を決定するにあたり、その色相範囲の中心（中央値）となる色相を評価値として決定する。その評価値は、ユーザが指定した位置を中心とした特定領域内における周辺画素の色相の平均値として求めることができる。このときの特定領域が評価値を算出する範囲である。具体的には、評価値を算出する範囲が矩形の場合、初期設定された標準の評価値を算出する範囲の幅及び高さをＸ０、Ｙ０とし、残したい色の位置が顔領域内にあると判断した場合の範囲の幅及び高さをＸ１、Ｙ１とすると、Ｘ１＜Ｘ０、Ｙ１＜Ｙ０の式が成り立つように、評価値を算出する範囲を設定する。また、色相の範囲とは、この評価値が示す色相を中心として、どの範囲の色相を持つ色を残すかを、評価値からの範囲として示したものである。

次に、範囲指定部２４Ｃは、評価値算出ステップＳ５１１において、色相の中心値となる評価値を算出する。具体的には、位置指定ステップＳ５０５で選択された残したい色の位置を中心として、範囲指定ステップＳ５０７またはＳ５０９で設定された評価値を算出する範囲内の画素の色相の平均値を求めて評価値とする。

次に、範囲指定部２４Ｃは、色相範囲設定ステップＳ５１２において、上述のように色相の範囲を決定する。

次に、コントローラ部２４は、画像処理ステップＳ５１３において、色変換処理を実行する。具体的には、コントローラ部２４が画像処理部２２を制御することにより行われる。画像処理部２２は、位置指定部２４Ｂで指定された位置の色相の範囲（色相範囲設定ステップＳ５１２で決定された色相の範囲）に含まれる色情報を基準の色情報とし、基準の色情報に含まれない色情報を持つ画像の特定の領域の色情報を変化させる画像変換の処理を行う。ワンポイントカラー処理の場合、基準の色情報に含まれない色情報を持つ画像の特定の領域を無彩色にする画像変換の処理を行う。

なお、色相の範囲内の色相を持つ画素については、色変換処理は実行しない。そして、画像処理ステップＳ５１３で色変換処理が施された画像を液晶モニタ６に表示する表示ステップＳ５１４を行う。最後に、このワンポイントカラー処理後の画像データをフラッシュメモリ２７に記録する記録ステップＳ５１５を実行する。

ここで、上記実施の形態においては、基準の色情報に含まれない色情報を持つ画像の特定の領域の色情報を変化させる画像変換の例として、画像の特定の領域を無彩色にするワンポイントカラー処理の例を説明したが、セピア色などの有彩色に色情報を変換する処理を行ってもよい。また、位置指定部２４Ｂで指定された位置についても、画像の明るさやコントラストの変更の画像変換を行ってもよい。さらに、基準の色情報と異なる色情報を持つ特定の領域に対して、色情報を変化させる際に、その特定の領域と同じ色以外であれば、位置指定部２４Ｂで指定された位置についても、色情報を変換する処理を行ってもよい。

〔３．まとめ〕
本技術による画像処理装置を備えたデジタルカメラは、被写体像を撮像する撮像部と、撮像部で撮像した被写体像に基づき生成された画像データを記録するデータ記録部と、データ記録部に記録された画像データによる画像を表示する表示装置と、表示装置に表示された画像に対して画像処理を行うように構成した画像処理装置とを備える。

画像処理装置は、ユーザの操作により指定された画像内の特定の位置が画像内の顔領域に含まれない場合は、色相の中心値である評価値を算出する範囲を第１の範囲として、指定された位置の色相の範囲を設定し、ユーザの操作により指定された画像内の特定の位置が顔領域を含む場合、色相の中心値である評価値を算出する範囲を第１の範囲より狭い第２の範囲として、指定された位置の色相の範囲を設定するように構成したコントローラ部２４を有する。

コントローラ部２４は、画像内において顔と判断される顔領域を検出するように構成した顔検出部２４Ａと、ユーザの操作により画像内の特定の位置を指定するように構成した位置指定部２４Ｂと、位置指定部２４Ｂで指定された位置が顔領域に含まれない場合、色相の中心値である評価値を算出する範囲を第１の範囲として、指定された位置の色相の範囲を設定し、位置指定部２４Ｂで指定された位置が顔領域を含む場合、色相の中心値である評価値を算出する範囲を第１の範囲より狭い第２の範囲として、指定された位置の色相の範囲を設定するように構成した範囲指定部２４Ｃとを備える。画像処理装置の画像処理部２２は、コントローラ部２４の範囲指定部２４Ｃで設定された色相の範囲に含まれる色情報に基づき、画像変換の処理を行う。

この構成により、残したい色の位置が顔領域に含まれる場合に、残す色の位置を中心とした第２の範囲は、含まれない場合に残す色の位置を中心とした第１の範囲よりも狭く指定する。これにより、ユーザが人物の顔の色を残したいと考えて人物の顔を指定した場合に、画素数が少ない狭い範囲全体が人物の顔に含まれる可能性を高めることができる。その結果、第２の範囲内の画素の色相の平均値を評価値として取得するときに、肌色以外の画素が混入する可能性が低くなり、よりユーザの意図に近いワンポイントカラー処理を行うことが可能となる。

〔４．他の実施の形態〕
本技術は、上記実施の形態に限定されない。以下、本技術の他の実施の形態について記載する。

図８に示す実施の形態では、範囲指定部２４Ｃは、残したい色の位置が顔領域に含まれるか否かに基づいて、評価値を算出する範囲及び色相の幅の両方を設定し、これらに基づいて残したい色の色相の範囲を設定するように構成した。しかし、色相の範囲は、残したい色の位置が顔領域に含まれるか否かに関係なく、ユーザまたは装置により初期設定された固定の範囲とするようにしてもよい。

また、図８に示す実施の形態では、ユーザが指定した位置が顔領域に含まれるか否かの判断を行い、その判断結果に基づき、範囲指定部２４Ｃは、評価値を算出する範囲を設定して残したい色の色相の範囲の中央値を決定するとともに、色相の幅を設定して残したい色の色相の範囲を決定するように構成した。しかし、あらかじめ色相の中心値である評価値を算出したテーブルを準備し、そのテーブルから選択するように構成してもよい。テーブルのデータは、ＲＧＢの色空間で表された色として持つようにしてもよい。

以上のように、添付図面及び詳細な説明によって、実施の形態を提供した。これらは、特定の実施の形態を参照することにより、当業者に対して、請求の範囲に記載の主題を例証するために提供されるものである。したがって、添付図面及び詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、それ以外の構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されているからといって、直ちにそれらの必須ではない構成要素が必須であるとの認定を受けるべきではない。また、請求の範囲またはその均などの範囲において、上述の実施の形態に対して、種々の変更、置き換え、付加、省略などを行うことができる。

本技術によれば、よりユーザの意図に近い色変換処理を行うことが可能となるため、デジタルスチルカメラ、デジタルビデオカメラ、携帯電話、スマートフォン、モバイルＰＣなどにも適用できる。

１ 光学系
２ フラッシュ
３ 静止画レリーズ釦
４ ズームレバー
５ 電源釦
６ 液晶モニタ
７ 中央釦
８ 十字釦
９ 動画レリーズ釦
１０ モード切替スイッチ
１１ フォーカスレンズ
１２ ズームレンズ
１３ 絞り
１４ シャッター
２０ ＣＣＤイメージセンサ
２１ ＡＦＥ
２２ 画像処理部
２３ バッファメモリ
２４ コントローラ部
２４Ａ 顔検出部
２４Ｂ 位置指定部
２４Ｃ 範囲指定部
２５ メモリカード
２６ カードスロット
２７ フラッシュメモリ
２８ 操作部

Claims (9)

1. 画像内において顔と判断される顔領域を検出するように構成した顔検出部と、
   ユーザの操作により画像内の特定の位置を指定するように構成した位置指定部と、
   前記位置指定部で指定された位置が前記顔領域に含まれない場合、色相の中心値である評価値を算出する範囲を第１の範囲として、指定された位置の色相の範囲を設定し、前記位置指定部で指定された位置が前記顔領域を含む場合、色相の中心値である評価値を算出する範囲を前記第１の範囲より狭い第２の範囲として、指定された位置の色相の範囲を設定するように構成した範囲指定部と、
   前記範囲指定部で設定された色相の範囲に含まれる色情報に基づき、画像変換の処理を行うように構成した画像処理部とを備えた
   画像処理装置。
2. 前記画像処理部は、位置指定部で指定された位置の色相の範囲に含まれる色情報を基準の色情報とし、前記基準の色情報に含まれない色情報を持つ画像の特定の領域の色情報を変化させる画像変換の処理を行うように構成した請求項１に記載の画像処理装置。
3. 前記画像処理部は、位置指定部で指定された位置の色相の範囲に含まれる色情報を基準の色情報とし、前記基準の色情報に含まれない色情報を持つ画像の特定の領域を無彩色にする画像変換の処理を行うように構成した請求項１に記載の画像処理装置。
4. 画像内において顔と判断される顔領域を検出する顔検出ステップと、
   ユーザの操作により画像内の特定の位置を指定する位置指定ステップと、
   前記位置指定ステップで指定された位置が前記顔領域に含まれない場合、色相の中心値である評価値を算出する範囲を第１の範囲として、指定された位置の色相の範囲を設定し、前記位置指定ステップで指定された位置が前記顔領域を含む場合、色相の中心値である評価値を算出する範囲を前記第１の範囲より狭い第２の範囲として、指定された位置の色相の範囲を設定する範囲指定ステップと、
   前記範囲指定ステップで指定された色相の範囲に含まれる色情報に基づき、画像変換の処理を行う画像処理ステップとを備えた
   画像処理方法。
5. 前記画像処理ステップは、位置指定ステップで指定された位置の色相の範囲に含まれる色情報を基準の色情報とし、前記基準の色情報に含まれない色情報を持つ画像の特定の領域の色情報を変化させる画像変換の処理を行う請求項４に記載の画像処理方法。
6. 前記画像処理ステップは、位置指定ステップで指定された位置の色相の範囲に含まれる色情報を基準の色情報とし、前記基準の色情報に含まれない色情報を持つ画像の特定の領域を無彩色にする画像変換の処理を行う請求項４に記載の画像処理方法。
7. 被写体像を撮像する撮像部と、
   前記撮像部で撮像した被写体像に基づき生成された画像データを記録するデータ記録部と、
   前記データ記録部に記録された画像データによる画像を表示する表示装置と、
   前記表示装置に表示された画像に対して画像処理を行うように構成した画像処理装置とを備えた撮像装置であって、
   前記画像処理装置は、ユーザの操作により指定された画像内の特定の位置が画像内の顔領域に含まれない場合は、色相の中心値である評価値を算出する範囲を第１の範囲として、指定された位置の色相の範囲を設定し、ユーザの操作により指定された画像内の特定の位置が前記顔領域を含む場合、色相の中心値である評価値を算出する範囲を前記第１の範囲より狭い第２の範囲として、指定された位置の色相の範囲を設定するように構成したコントローラ部と、
   前記コントローラ部で設定された色相の範囲に含まれる色情報に基づき、画像変換の処理を行うように構成した画像処理部とを備えた
   撮像装置。
8. 前記画像処理部は、ユーザにより指定された位置の色相の範囲に含まれる色情報を基準の色情報とし、前記基準の色情報に含まれない色情報を持つ画像の特定の領域の色情報を変化させる画像変換の処理を行うように構成した請求項７に記載の撮像装置。
9. 前記画像処理部は、位置指定部で指定された位置の色相の範囲に含まれる色情報を基準の色情報とし、前記基準の色情報に含まれない色情報を持つ画像の特定の領域を無彩色にする画像変換の処理を行うように構成した請求項７に記載の撮像装置。

Images