JP2014103450A - 画像処理装置、方法及びプログラム - Google Patents

Abstract

【課題】例えば映像の色傾向を変更する映像効果の信号処理を行うときに、ユーザが輪郭色の設定変更を行わなくても、輪郭を視認しやすい状態にできるようにする。
【解決手段】ユーザの操作をアシストするために、映像の輪郭成分を強調して表示する。このとき、自動色選択部１１８は、フィルタ選択ＵＩ部１１７でユーザが映像の色傾向を変更するフィルタを選択しているか否かを判定し、映像の色傾向を変更するフィルタが選択されている場合、輪郭色をフィルタ効果で施す色傾向の補色とする。例えばアンバー傾向に変更するフィルタである場合は輪郭色をアンバーの補色である青色へと変更する。これにより、ユーザが適時設定変更をしなくとも視認しやすい輪郭色を保つことが可能となる。
【選択図】図１

Description

本発明は、表示手段に表示する映像に、ユーザの操作をアシストするアシスト表示を重畳する画像処理装置、方法及びプログラムに関する。

デジタルビデオカメラ等の撮像装置において、小さなＬＣＤパネルでは焦点合わせを手動で行う際に焦点位置を把握しにくいことから、映像の輪郭成分を強調して表示する機能を持つものがある。また、輪郭をより判りやすくするために、輪郭色を変更してより認識しやすくすることも提案されている。輪郭色を変更するのは、撮影している被写体の色と同系色では輪郭が分かりにくくなるためであり、従来の撮像装置では、被写体とは異なる色に変更するようにユーザが選択できるような構成となっている。
例えば特許文献１には、入力映像信号の輝度信号に含まれる高域成分を抽出して、前記抽出した高域成分の大きさに応じたレベルの輪郭強調信号を生成する輪郭成分抽出部と、前記輪郭成分抽出部で生成された輪郭強調信号を所定のクロック周期毎にサンプリングして出力する周波数低減部と、前記周波数低減部から出力された輪郭強調信号を、前記入力映像信号を構成する色差信号に加算する加算器とを備えた映像信号処理装置が開示されている。

一方で、撮影時の映像効果として、信号処理により映像の色傾向を変更、例えば映画調の映像に変更するフィルタ効果を与える撮像装置が提案されている（映像フィルタ）。映像フィルタの中には色味を変える効果を持つものがある。例えば全体をセピア調（アンバー色）に変えるフィルタや、青みがかった色に変えるフィルタ等が代表的である。

特開２０１０−１３５８６５号公報

しかしながら、映像の色傾向を変更するフィルタ効果を与えると、その色味と同系色の輪郭色に設定している場合に、輪郭が視認しにくい状態となる。そのため、ユーザがその都度色選択する必要があり、フィルタ効果で色味を変えると、輪郭色も変更する必要があるという問題があった。

本発明は上記のような点に鑑みてなされたものであり、例えば映像の色傾向を変更する映像効果の信号処理を行うときに、ユーザが輪郭色の設定変更を行わなくても、輪郭を視認しやすい状態にできるようにすることを目的とする。

本発明の画像処理装置は、映像の色傾向を変更する映像効果の信号処理を行う処理手段と、前記処理手段による映像効果をユーザが選択するための映像効果選択手段と、表示手段に表示する映像に、ユーザの操作をアシストするアシスト表示を重畳するアシスト表示重畳手段と、前記映像効果選択手段でユーザが選択した映像効果に応じて、前記アシスト表示の色を決定する表示色決定手段とを備えたことを特徴とする。

本発明によれば、例えば映像の色傾向を変更する映像効果の信号処理を行うときに、ユーザが輪郭色の設定変更を行わなくても、輪郭を視認しやすい状態にすることができる。

第１の実施形態に係るデジタルビデオカメラの概略構成図である。 輪郭色変換部の構成を示すブロック図である。 自動色選択部が輪郭色を選択、決定する処理を示すフローチャートである。 第２の実施形態に係るデジタルビデオカメラの概略構成図である。

以下、添付図面を参照して、本発明の好適な実施形態について説明する。
＜第１の実施形態＞
図１は、本発明を適用した画像処理装置として機能する第１の実施形態に係るデジタルビデオカメラの概略構成図である。
図１において、１０１は被写体からの入射光を結像させるレンズ部であり、フォーカスレンズ群も具備している。
１０２はイメージセンサ部であり、結像した光学像を電気信号に変換するＣＣＤ（Charged Coupled Device）素子やＣＭＯＳ（Complementary Metal Oxide Semiconductor）素子等で構成される。
１０３はＣＤＳ／ＡＧＣ部であり、アナログ画像信号のノイズを相関二重サンプリング（Correlated Double Sampling）により削減し、自動利得制御（Auto Gain Controller）によりその信号レベルを自動制御する。
１０４はカメラ信号処理部であり、画像信号にガンマ処理、輪郭処理、色処理等を行う。
１０５はフィルタ信号処理部であり、予め設定されているフィルタ効果に応じて、画像信号に信号処理を行う。１０６は色変換部であり、画像信号に色処理を施す。１０７は輝度変換部であり、画像信号にガンマ処理等の輝度系信号処理を施す。１０８はグレイン処理部であり、フィルム撮影時のような粒子感を画像信号に付加する処理（グレイン処理）を施す。
１０９は記録部であり、画像信号を記録処理して記録媒体に記録する。
１１０は輪郭抽出部であり、画像信号の中から輪郭部分を抽出する。
１１１は輪郭色変換部であり、詳細は後述するが、輪郭色を変換し、画像信号に重畳する。
１１２はユーザが輪郭色を選択するための色選択手段である表示色選択ユーザインタフェース（ＵＩ）部である。
１１３は映像を表示する表示手段である液晶パネル等の表示装置部である。
１１４はフォーカス操作部である。
１１５はレンズ制御部である。
１１６はレンズ駆動部であり、レンズ部１０１に含まれるフォーカスレンズを駆動する。
１１７はユーザがフィルタ効果を選択するための映像効果選択手段であるフィルタ選択ＵＩ部である。
１１８は表示色決定手段である自動色選択部であり、フィルタ選択ＵＩ部１１７でユーザが選択したフィルタ効果に応じて、輪郭色を自動的に選択、決定する。

次に、第１の実施形態に係るデジタルビデオカメラの動作を説明する。
レンズ部１０１によって結像される被写体像は、イメージセンサ部１０２で光学像を電気信号に変換される。イメージセンサ部１０２は、電荷蓄積時間を調整可能であり、これにより電子シャッター機能を実現することができる。続いてＣＤＳ／ＡＧＣ部１０３では、イメージセンサ部１０２からのアナログ画像信号のノイズを相関二重サンプリングにより削減し、自動利得制御によりその信号レベルを自動制御した上でカメラ信号処理部１０４に供給する。カメラ信号処理部１０４は、ビデオカメラに必要なガンマ処理、輪郭処理、色処理等のカメラ信号処理を実行する。

ユーザは、フォーカス操作部１１４によりフォーカスレンズを駆動するようレンズ制御部１１５に指示することができる。レンズ部１０１を収容するレンズ鏡筒の外周に、ユーザが回転操作可能なフォーカスリングが装備され、このフォーカスリングをユーザが回転操作することで、フォーカス位置をレンズ制御部１１５に指示する。電子的な機構又は機械的な回転検知機構が、フォーカスリングの回転方向と回転角を検出し、レンズ制御部１１５に通知する。このような電子的又は機械的な回転検知機構は周知である。レンズ駆動部１１６は、レンズ制御部１１５の制御信号に従ってフォーカスレンズを移動させる。

ここで、フィルタ効果を与えるための動作について説明する。ユーザはフィルタ選択ＵＩ部１１７により、予め設定されている、映像の色傾向を変更する映像効果を含む複数の特殊フィルタの中から任意のフィルタを選択することができる。フィルタ選択ＵＩ部１１７でユーザが選択したフィルタ情報は、フィルタ信号処理部１０５に送られる。また、フィルタ選択ＵＩ部１１７でユーザが選択したフィルタ情報は、自動色選択部１１８にも送られ、輪郭色を決定する際に利用される。
フィルタ信号処理部１０５では、カメラ信号処理部１０４から出力された画像信号に対して、フィルタ選択ＵＩ部１１７で選択されたフィルタに応じて、画像信号に信号処理を行う。色変換部１０６では予め設定されている色処理が施され、輝度変換部１０７では予め設定されたガンマ等の輝度系情報の変換が施され、グレイン処理部１０８では予め設定されているグレイン処理が施される。例えば色味をセピア調（アンバー色傾向）に変更するフィルタが選択された場合、色変換部１０６で赤の色相方向へ画像信号の色信号を変換し、カメラ信号処理部１０４より出力された画像信号がアンバー色の傾向になるよう補正が施される。フィルタが選択されていない場合、カメラ信号処理部１０４の出力が、そのままフィルタ信号処理部１０５より出力される。

フィルタ信号処理部１０５より出力された信号処理の施された画像信号は、記録部１０９に送られる。記録部１０９では、画像信号を記録処理して記録媒体に記録する。記録媒体の例としては、ＳＤカードや光ディスク又はハードディスク等がある。

次に、輪郭色変更の動作について説明する。
フィルタ信号処理部１０５より出力された信号処理の施された画像信号は、輪郭抽出部１１０に送られる。輪郭抽出部１１０は、輪郭補正回路、ピーキング回路又はエンハンサ等とも称される周知の回路で構成されており、画像信号の周波数成分より輪郭成分を抽出する。輪郭成分として抽出された輪郭信号は輪郭色変換部１１１に送られる。

図２を参照して、輪郭色変換部１１１について説明する。図２において、輪郭色変換部１１１には、フィルタ信号処理部１０５より出力された信号処理の施された画像信号が入力される。また、輪郭色変換部１１１内部にある輪郭領域色変換部２０１には、輪郭抽出部１１０で輪郭成分として抽出された輪郭信号、及び自動色選択部１１８より決定された輪郭色の色情報が送られている。
輪郭領域色変換部２０１では、輪郭信号を自動色選択部１１８で輪郭色として選択された色情報に一律変換を行う。輪郭色変換部１１１では、フィルタ信号処理部１０５より出力された信号処理の施された画像信号に、輪郭領域色変換部２０１で所定の色に変換された輪郭信号を重畳して出力する。輪郭色変換部１１１より出力された画像信号は表示装置部１１３に送られ、ユーザが画像信号及び色変換された輪郭部を視認できる構成となっている。上記構成により、マニュアルフォーカス時のピント合わせが容易になる。

図３は、フィルタ選択ＵＩ部１１７でユーザが選択したフィルタ効果に応じて、自動色選択部１１８が輪郭色を選択、決定する処理を示すフローチャートである。本実施形態では、映像の色傾向を変更する映像効果として、アンバー傾向に変更するフィルタ効果（フィルタＡ）、青傾向に変更するフィルタ効果（フィルタＢ）、マゼンタ傾向に変更するフィルタ効果（フィルタＣ）の３種と、色傾向を変更しないフィルタ効果（フィルタＤ）がある場合を例として説明を行う。
自動色選択部１１８には、表示色選択ＵＩ部１１２でユーザが選択した輪郭色と、フィルタ選択ＵＩ部１１７でユーザが選択したフィルタ情報とが送られている。

ステップＳ３０１で、映像フィルタが選択されているか否かを判断する。映像フィルタが選択されている場合はステップＳ３０２へと進み、映像フィルタが選択されていない場合は輪郭色をユーザが選択した輪郭色とする。
ステップＳ３０２で、映像の色傾向を変更するフィルタ、すなわちフィルタＡ、Ｂ、Ｃであるか否かを判定する。映像の色傾向を変更するフィルタである場合はステップＳ３０３へと進み、映像の色傾向を変更するフィルタでない場合は輪郭色をユーザが選択した色とする。
ステップＳ３０３で、アンバー傾向に変更するフィルタＡであるか否かを判定する。アンバー傾向に変更するフィルタＡである場合は輪郭色をアンバーの補色である青色へと変更する。アンバー傾向に変更するフィルタＡでない場合はステップＳ３０４へと進む。
ステップＳ３０４で、青傾向に変更するフィルタＢであるか否かを判定する。青傾向に変更するフィルタＢである場合は輪郭色を青の補色である赤色へと変更する。青傾向に変更するフィルタＢでない場合、言い換えればマゼンタ傾向に変更するフィルタＣである場合は輪郭色をマゼンタの補色である緑色へと変更する。
このように映像の色傾向を変更するフィルタ効果に応じて、輪郭色をフィルタ効果で施す色傾向の補色とすることで、ユーザが適時設定変更をしなくとも視認しやすい輪郭色を保つことが可能となる。

なお、本実施形態ではアシスト表示として輪郭強調を例とし、輪郭色を変更することについて述べたが、それに限定されるものではない。例えば輝度が一定レベルを越えた部分に縞状のパターンを表示させるゼブラパターンについて表示色を変更するようにしてもよい。また、輪郭強調及びゼブラパターンの両方同時に表示色を変更するようにしてもよい。

＜第２の実施形態＞
第１の実施形態では、映像の色傾向を変更するフィルタ効果に応じてアシスト表示の色を変更する例を説明した。第２の実施形態では、被写体の色情報を検出し、被写体の色情報に応じてアシスト表示の色を変更する例を説明する。
図４は、本発明を適用した画像処理装置として機能する第２の実施形態に係るデジタルビデオカメラの概略構成図である。図４において、４０１〜４０４は図１の１０１〜１０４に相当する。また、４０９〜４１６及び４１８は図１の１０９〜１１６及び１１８に相当する。
４１９は被写体の色情報を抽出する被写体色抽出部である。第１の実施形態では、図１のフィルタ選択ＵＩ部１１７でユーザが選択したフィルタ情報が自動色選択部１１８に伝達される構成としたが、第２の実施形態では、被写体色抽出部４１９で抽出された被写体の色情報が自動色選択部４１８に伝達される構成となる。第２の実施形態では、フィルタ情報によらないため、フィルタ選択ＵＩ部１１７及びフィルタ信号処理部１０５は省いた構成となっている。

ここで、例えば画像データ全体の平均色を算出し、それを被写体の色情報として抽出してもよい。また、主被写体が画角中心に位置することが多いことから、画像データの中心付近の色情報を収集し、その平均色を被写体の色情報として抽出してもよい。
被写体色抽出部４１９で抽出された被写体の色情報は、自動色選択部４１８に送られる。自動色選択部４１８には、表示色選択ＵＩ部４１２でユーザが選択した表示色の情報も送られている。自動色選択部４１８は、表示色選択ＵＩ部４１２でユーザがアシスト表示の色を選択している場合、ユーザ設定色に設定する。それに対して、ユーザがアシスト表示の色を選択していない場合、被写体色抽出部４１９で抽出された被写体の色情報の補色を設定する。例えば被写体の色情報がアンバー色であった場合、アシスト表示の色をアンバー色の補色である青色へと変更する。

以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。
（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

本発明は、ビデオカメラ、電子スチルカメラ等に適用されて好適な画像処理装置、方法及びプログラムに関し、特にピーキングやゼブラ等アシスト信号の色を変更し、アシスト信号を視認しやすくする手段を備えた装置のアシスト信号色の制御に関するものである。

１０１、４０１：レンズ部
１０２、４０２：イメージセンサ部
１０３、４０３：ＣＤＳ／ＡＧＣ部
１０４、４０４：カメラ信号処理部
１０５：フィルタ信号処理部
１０６：色変換部
１０７：輝度変換部
１０８：グレイン処理部
１０９、４０９：記録部
１１０：輪郭抽出部
１１１、４１１：輪郭色変換部
１１２、４１２：表示色選択ＵＩ部
１１３、４１３：表示装置部
１１４、４１４：フォーカス操作部
１１５、４１５：レンズ制御部
１１６、４１６：レンズ駆動部
１１７：フィルタ選択ＵＩ部
１１８、４１８：自動色選択部
２０１：輪郭領域色変換部
４１９：被写体色抽出部

Claims (13)

1. 映像の色傾向を変更する映像効果の信号処理を行う処理手段と、
   前記処理手段による映像効果をユーザが選択するための映像効果選択手段と、
   表示手段に表示する映像に、ユーザの操作をアシストするアシスト表示を重畳するアシスト表示重畳手段と、
   前記映像効果選択手段でユーザが選択した映像効果に応じて、前記アシスト表示の色を決定する表示色決定手段とを備えたことを特徴とする画像処理装置。
2. 前記表示色決定手段は、前記アシスト表示の色を、前記映像効果選択手段でユーザが選択した映像効果による色傾向の補色とすることを特徴とする請求項１に記載の画像処理装置。
3. 前記アシスト表示は、映像の輪郭強調であることを特徴とする請求項１又は２に記載の画像処理装置。
4. 前記アシスト表示は、輝度が一定レベルを越えた部分に縞状のパターンを表示させるゼブラパターンであることを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
5. 前記アシスト表示の色をユーザが選択するための色選択手段を備え、
   前記表示色決定手段は、前記映像効果選択手段でユーザが映像の色傾向を変更する映像効果を選択していない場合、前記アシスト表示の色を前記色選択手段でユーザが選択した色とすることを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
6. 被写体の色情報を抽出する抽出手段と、
   表示手段に表示する映像に、ユーザの操作をアシストするアシスト表示を重畳するアシスト表示重畳手段と、
   前記抽出手段で抽出した被写体の色情報に応じて、前記アシスト表示の色を決定する表示色決定手段とを備えたことを特徴とする画像処理装置。
7. 前記表示色決定手段は、前記アシスト表示の色を、前記抽出手段で抽出した被写体の色情報の補色とすることを特徴とする請求項６に記載の画像処理装置。
8. 前記アシスト表示は、映像の輪郭強調であることを特徴とする請求項６又は７に記載の画像処理装置。
9. 前記アシスト表示は、輝度が一定レベルを越えた部分に縞状のパターンを表示させるゼブラパターンであることを特徴とする請求項６乃至８のいずれか１項に記載の画像処理装置。
10. 映像の色傾向を変更する映像効果の信号処理を行うステップと、
    表示手段に表示する映像に、ユーザの操作をアシストするアシスト表示を重畳するステップと、
    ユーザが選択した映像効果に応じて、前記アシスト表示の色を決定するステップとを有することを特徴とする画像処理方法。
11. 被写体の色情報を抽出するステップと、
    表示手段に表示する映像に、ユーザの操作をアシストするアシスト表示を重畳するステップと、
    前記抽出した被写体の色情報に応じて、前記アシスト表示の色を決定するステップとを有することを特徴とする画像処理方法。
12. 映像の色傾向を変更する映像効果の信号処理を行う処理と、
    表示手段に表示する映像に、ユーザの操作をアシストするアシスト表示を重畳する処理と、
    ユーザが選択した映像効果に応じて、前記アシスト表示の色を決定する処理とをコンピュータに実行させるためのプログラム。
13. 被写体の色情報を抽出する処理と、
    表示手段に表示する映像に、ユーザの操作をアシストするアシスト表示を重畳する処理と、
    前記抽出した被写体の色情報に応じて、前記アシスト表示の色を決定する処理とをコンピュータに実行させるためのプログラム。

Images