JP2023121532A - 撮像装置及びその制御方法及びプログラム - Google Patents

Abstract

【課題】 ルックアップテーブルによる画像処理において、単一のＬＵＴ処理回路のみで３Ｄ－ＬＵＴの適用度合いを変えて、ユーザの好みの画質に補正した画像を得る。【解決手段】撮像装置は、画像データを変換するため第１のルックアップテーブルを取得する取得部と、該取得部で取得した第１のルックアップテーブルの適用の度合いを設定する設定部と、該設定部で設定した適用の度合いに基づいて、第１のルックアップテーブルから、第２のルックアップテーブルを生成する生成部とを有し、生成部で生成された第２のルックアップテーブルを用いて、撮像部で得た画像データを変換する。【選択図】 図４

Description

本発明は、撮像装置及びその制御方法及びプログラムに関するものである。

画像の色やコントラストを補正する手段として一般的に３次元ルックアップテーブル（以下、３Ｄ－ＬＵＴ）が用いられている。撮像装置においても撮像装置に内蔵されている３Ｄ－ＬＵＴに基づいて画像を変換することや、外部アプリケーションなどで作成した３Ｄ－ＬＵＴを撮像装置に取り込んで画像を変換することができるものが多くなっている。

また、シネマ風の画に変換する３Ｄ－ＬＵＴや、特殊な効果を狙った３Ｄ－ＬＵＴなど、有償無償問わずＷｅｂ上などで提供されていことも多く、ユーザは好みの３Ｄ－ＬＵＴを入手して画像を変換することができるようになっている。

しかしながら、Ｗｅｂ上などで提供されている３Ｄ－ＬＵＴは、その作成者が良いと考えた画に変換する３Ｄ－ＬＵＴであり、万人がその画を良いと感じるわけではない。人によっては効果を弱めて変換したいと考える場合もある。その際には、一旦その３Ｄ－ＬＵＴによる変換をせずに画を撮影してから、ポストプロダクションで撮影したままの画と３Ｄ－ＬＵＴによって変換した画とを合成するような処理が必要となるため、大きな手間が発生する。

３Ｄ－ＬＵＴによる画の変化の程度を変える手段として、例えば特許文献１には、シーン検出を行い、候補となった複数シーンの信頼度に応じて各シーン用の補正テーブルを合成する、という技術が記載されている。

特開２０１２－１６５１４７号公報

上記従来例では判定されたシーンによって補正テーブルが変化するが、補正の程度はカメラとして適切と認識しているレベルであり、それがユーザの好みに合致するとは限らない。また、ユーザの好みと異なっていたとしても、ユーザが好みに合わせて変えることは難しい。

この課題を解決するため、例えば本発明の撮像装置は以下の構成を備える。すなわち、
撮像手段を有する撮像装置であって、
画像データを変換するため第１のルックアップテーブルを取得する取得手段と、
該取得手段で取得した第１のルックアップテーブルの適用の度合いを設定する設定手段と、
該設定手段で設定した適用の度合いに基づいて、前記第１のルックアップテーブルから、第２のルックアップテーブルを生成する生成手段とを有し、
前記生成手段で生成された第２のルックアップテーブルを用いて、前記撮像手段で得た画像データを変換することを特徴とする。

本発明によれば、ルックアップテーブルによる画像処理において、単一のＬＵＴ処理回路のみで３Ｄ－ＬＵＴの適用度合いを変えて、ユーザの好みの画質に補正した画像を得ることができる。

実施形態に係る撮像装置の内部構成を示すブロック図。 第１の実施形態に係るポストプロダクションの処理の流れを示す図。 第１の実施形態に係る撮像装置の画像処理ブロックの処理の流れを示す図。 第１の実施形態に係る画像変換の処理を示すフローチャート。 第１の実施形態に係る３Ｄ－ＬＵＴデータの一部を示す図。 第１の実施形態に係る３Ｄ－ＬＵＴデータの一部を示す図。 第１の実施形態に係る３Ｄ－ＬＵＴデータの一部を示す図。 第２の実施形態に係る表示の例を示す図。 第３の実施形態に係る撮像装置の３Ｄ－ＬＵＴデータ生成方法の処理の流れを示す図。 第４の実施形態に係る３Ｄ－ＬＵＴに基づいた画像変換の処理を示すフローチャート。 第４の実施形態に係る３Ｄ－ＬＵＴファイルの例を示す図。 第４の実施形態に係る表示の例を示す図。

以下、添付図面を参照して実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る発明を限定するものでない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。また、実施形態では、ルックアップテーブルの構成要素を３次元として説明しているが、３次元以外のルックアップテーブルでも良い。

［第１の実施形態］
図１は、第１の実施形態の撮像装置１００の内部構成を示すブロック図である。図１において、撮像レンズ１０３はズームレンズ、フォーカスレンズ、シフトレンズを含むレンズ群であり、被写体の光学像を撮像部２２の撮像面上に結像させる。絞り１０１は光量調整に使用する絞りであり、ＮＤ１０４は減光するＮＤ（Neutral Density）フィルタである。撮像部２２は、自身の撮像面に結像した光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等で構成される撮像素子を有する。また、撮像部２２には電子シャッタによる蓄積の制御や、アナログゲインの変更、読み出し速度の変更などの機能も備える。Ａ／Ｄ変換器２３は、撮像部２２から出力されるアナログ信号をデジタル信号に変換するために用いられる。

画像処理部２４は、システム制御部５０の制御の下で、Ａ／Ｄ変換器２３からのデジタル画像データ（以降、単に画像データ）、又は、メモリ制御部１５からのデータに対し所定の画素補間処理、縮小処理といったリサイズ処理や、輝度情報、色情報、特徴的な被写体等の検出処理、色変換処理、ガンマ補正処理、デジタルゲインの付加処理等の処理を行う。画像処理の方法として、専用の演算回路による画像処理や、３Ｄ－ＬＵＴ処理回路による画像処理などが含まれる。また、画像処理部２４は、撮像して得た画像データを用いて所定の演算処理を行い、演算結果をシステム制御部５０に送信する。送信された演算結果に基づいて、システム制御部５０は、露出制御、測距制御、ホワイトバランス制御等を行う。これにより、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理等が行われる。また、ジャイロ４０で検出した手振れなどによる撮像装置１００の動きや姿勢変化に対して、システム制御部５０は、撮像レンズ１０３のシフトレンズを動作させるか、もしくは画像処理部２４で画像をずらすことで像振れ補正を行う。

Ａ／Ｄ変換器２３からの画像データは、画像処理部２４及びメモリ制御部１５を介して、或いは、メモリ制御部１５を介してメモリ３２に直接書き込まれる。メモリ３２は、撮像部２２によって撮像されＡ／Ｄ変換器２３によりデジタルデータに変換された画像データや、表示部２８に表示するための画像データを格納する。また、このメモリ３２は、画像処理部２４で画像処理された画像を一時的に記憶し、再度画像処理部２４に戻して別の画像処理を適用する、といった使い方もされる。メモリ３２は、所定時間の動画像および音声を格納するのに十分な記憶容量を備えている。また、メモリ３２は、画像表示用のメモリ（ビデオメモリ）を兼ねている。

Ｄ／Ａ変換器１３は、メモリ３２に格納されている画像表示用のデータをアナログ信号に変換して表示部２８に供給する。こうして、メモリ３２に書き込まれた表示用の画像データはＤ／Ａ変換器１３を介して表示部２８により表示される。表示部２８は、ＬＣＤ等の表示器上に、Ｄ／Ａ変換器１３からのアナログ信号に応じた表示を行う。Ａ／Ｄ変換器２３によって一度Ａ／Ｄ変換されメモリ３２に蓄積されたデジタル信号をＤ／Ａ変換器１３においてアナログ変換し、表示部２８に逐次転送して表示することで、電子ビューファインダが実現され、スルー画像表示を行うことができる。

不揮発性メモリ５６は、電気的に消去・記録可能なメモリであり、例えばＥＥＰＲＯＭが用いられる。不揮発性メモリ５６には、システム制御部５０が実行するプログラム、並びに、各種パラメータや処理用の定数が記憶される。ここでいう、プログラムとは、後述する各種フローチャートを実行するためのプログラムのことである。

システム制御部５０は、ＣＰＵで構成され、撮像装置１００全体を制御する。前述した不揮発性メモリ５６に記録されたプログラムを実行することにより、後述する本実施形態の各処理を実行する。システムメモリ５２には、ＲＡＭが用いられ、システム制御部５０の動作用の定数、変数、不揮発性メモリ５６から読み出したプログラム等を展開する。また、システム制御部５０はメモリ３２、Ｄ／Ａ変換器１３、表示部２８等を制御することにより表示制御も行う。

システムタイマー５３は各種制御に用いる時間や、内蔵された時計の時間を計測する計時部である。モード切替スイッチ６０、録画スイッチ６１、操作部７０は、システム制御部５０に、ユーザからの各種の動作指示を入力するための操作手段である。

モード切替スイッチ６０は、システム制御部５０の動作モードを、動画記録モード、静止画記録モード、再生モード等のいずれかに切り替える。動画記録モードや静止画記録モードに含まれるモードとして、オート撮影モード、オートシーン判定モード、マニュアルモード、撮影シーン別の撮影設定となる各種シーンモード、プログラムＡＥモード、カスタムモード等がある。モード切替スイッチ６０を操作することにより、動画撮影モードに含まれるこれらのモードのいずれかに直接切り替えることができる。あるいは、モード切替スイッチ６０で動画撮影モードに一旦切り替えた後に、動画撮影モードに含まれるこれらのモードのいずれかに、他の操作部材を用いて切り替えるようにしてもよい。録画スイッチ６１は撮影待機状態と撮影状態を切り替える。システム制御部５０は、録画スイッチ６１がＯＮされると、撮像部２２からの信号読み出しから外部記録媒体１５０への動画データの書込みまでの一連の動作を開始する。

操作部７０の各操作部材は、表示部２８に表示される種々の機能アイコンを選択操作することなどにより、場面ごとに適宜機能が割り当てられ、各種機能ボタンとして動作する。機能ボタンとしては、例えば終了ボタン、戻るボタン、画像送りボタン、ジャンプボタン、絞り込みボタン、属性変更ボタン等がある。例えば、メニューボタンが押されると各種の設定可能なメニュー画面が表示部２８に表示される。ユーザは、表示部２８に表示されたメニュー画面と、上下左右４方向の十字キーやＳＥＴボタンを用いて直感的に各種設定を行うことができる。

電源制御部８０は、電池検出回路、ＤＣ－ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成され、電池の装着の有無、電池の種類、電池残量の検出を行う。また、電源制御部８０は、その検出結果及びシステム制御部５０の指示に基づいてＤＣ－ＤＣコンバータを制御し、必要な電圧を必要な期間、外部記録媒体１５０を含む各部へ供給する。

電源部３０は、アルカリ電池やリチウム電池などの一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉイオン電池などの二次電池、ＡＣアダプター等からなる。Ｉ／Ｆ１８は、メモリカードやハードディスク等の外部記録媒体１５０や、外部表示装置１６０とのインターフェースである。外部記録媒体１５０は、撮影された画像の記録や外部とのデータのやりとりをするためのメモリカード等の記録媒体であり、半導体メモリなどが用いられる。

本実施形態では、ＰＣやタブレット等に代表される情報処理装置上で動作する外部アプリケーションで作成された３Ｄ－ＬＵＴを、撮像装置１００が取り込み、画像を変換する場合の動作について説明する。そのため、ユーザは、自身が所有する情報処理装置上で動作するアプリケーションで作成した、３Ｄ－ＬＵＴを外部記録媒体１５０にファイルとして格納しておくものとする。

まず、ユーザは、３Ｄ－ＬＵＴファイルを保存した外部記録媒体１５０を、撮像装置１００の不図示のスロットに挿入（接続）する。そして、ユーザは、操作部７０を操作し、３Ｄ－ＬＵＴの取り込み操作を入力する。この操作を受けたシステム制御部５０は、Ｉ／Ｆ１８を介して取得した３Ｄ－ＬＵＴファイルに記述されている文字列をシステムメモリ５２に一旦記憶し、文字列の解析を行う。システム制御部５０は、文字列から数値へと変換し、画像処理部２４で扱えるデータ形式の３Ｄ－ＬＵＴデータを生成し、システムメモリ５２もしくは不揮発性メモリ５６に記録する。その後、生成した３Ｄ－ＬＵＴデータを画像処理部２４の３Ｄ－ＬＵＴ処理部で画像を変換することで目的の画像を得ることができる。なお、本実施形態では３Ｄ－ＬＵＴファイルに、文字列で３Ｄ－ＬＵＴデータが記述されている前提で説明しているが、バイナリ形式や他の形式でも良い。なお、上記例では、３Ｄ－ＬＵＴファイルを保存した外部記録媒体１５０を、撮像装置１００に接続するものとしたが、例えば撮像装置１００と情報処理装置とをＩ／Ｆ１８を介してダイレクトに接続して、撮像装置１００が情報処理装置から３Ｄ－ＬＵＴをダウンロードするようにしても良い。

次に図２を用いて、３Ｄ－ＬＵＴの適用度合いを変える場合に、ポストプロダクションで行う一般的な処理の流れの一例を説明する。ポストプロダクションにおいてよく使われるアプリケーションでは、３Ｄ－ＬＵＴに基づいて画像を変換する機能が搭載されているが、３Ｄ－ＬＵＴの適用度合いを変える場合には工夫が必要となる。

まず入力画像２０１に対し、各種画像処理２０２を適用する。これは適用度合いを変えたい３Ｄ－ＬＵＴを除く画像処理であり、階調や色の補正など多くの処理が含まれる。この例では入力画像２０１に対し処理を行っているが、後述する画像合成後に行ってもよいし、無くてもよい。次に処理を分岐させ片方にのみ３Ｄ－ＬＵＴ処理２０３により画像を変換する。その後、３Ｄ－ＬＵＴ処理２０３から出力した画像と分岐させたもう片方の画像を画像合成処理２０４で合成して出力画像２０５を得る。適用度合いに基づいて合成比率を変えることで３Ｄ－ＬＵＴの適用度合いを調整することが可能となる。図２の例では適用度合いを８０％としている。

図２で説明したポストプロダクションの処理を撮像装置１００で行う場合には、画像処理部２４が図３（ａ）に示すような処理ブロックの構成となるであろう。まず入力画像３０１に対し、３Ｄ－ＬＵＴ処理の前の画像処理を画像処理部３０２で実施し、ＲＡＭ３０３に一旦記録する。次にＲＡＭ３０３から読み出した画像に対し、３Ｄ－ＬＵＴ処理部３０４で３Ｄ－ＬＵＴに基づいて画像を変換し、ＲＡＭ３０５に記録する。その後、ＲＡＭ３０３とＲＡＭ３０５に記録された画像を画像合成処理部３０６に入力し、ここで操作部７０によりメニューで設定された適用度合い３０７に基づいた比率で画像合成を行い、出力画像３０８として出力する。なお、ここでは画像処理部３０２で画像処理してから画像合成処理部３０６で画像合成を行っているが、画像合成後に画像処理部３０２出の画像処理を行ってもよいし、画像処理部３０２で何も処理しなくてもよい。また、ここではＲＡＭ３０３とＲＡＭ３０５を別のＲＡＭとして表現しているが、同一のＲＡＭの別領域でも良い。

本実施形態では、図３（ａ）の参照符号３０３～３０６のブロックで行っている処理を、１つの３Ｄ－ＬＵＴとしてデータを生成し、処理ブロックの単純化を行うことを特徴とする。この場合の適用度合いを考慮した３Ｄ－ＬＵＴデータの生成方法は後述する。

図３（ｂ）に、本実施形態における画像処理部２４のブロック図を示す。まず入力画像３１１に対し３Ｄ－ＬＵＴ処理の前の画像処理を画像処理部３１２で実施する。その後、３Ｄ－ＬＵＴ処理部３１４で、適用度合い３１７を考慮して生成した３Ｄ－ＬＵＴ３１９に基づいて画像を変換し、出力画像３１８を生成する。

図４に、本実施形態におけるシステム制御部５０の処理の流れを表したフローチャートを示す。

まず、Ｓ４０１にて、システム制御部５０は、３Ｄ－ＬＵＴデータを取得する。次に、Ｓ４０２にて、システム制御部５０は、メニューを介した、ユーザによる操作部７０からの操作によって設定された適用度合いを取得する。その後、Ｓ４０３にて、システム制御部５０は、Ｓ４０１で取得した３Ｄ－ＬＵＴデータに対し、Ｓ４０２で取得した適用度合いに基づいて３Ｄ－ＬＵＴを構成するデータの補正を行い、適用度合いを考慮した３Ｄ－ＬＵＴデータを生成する。なお、適用度合いを考慮した３Ｄ－ＬＵＴデータの生成方法については後述する。最後に、Ｓ４０４にて、システム制御部５０は、生成した３Ｄ－ＬＵＴを、画像処理部２４に設定し、画像データの変換を行わせる。これにより、好適な画質効果を施した画像を取得することができる。

次に、適用度合いを考慮した３Ｄ－ＬＵＴデータの生成方法を説明する。

本実施形態では、画質効果を狙った３Ｄ－ＬＵＴに基づいて画像を変換することで得られる画像では効果が強すぎるため、ユーザが操作部７０を介して３Ｄ－ＬＵＴの適用度を８０％に抑制する指示入力を行った場合を説明する。

まず、外部アプリケーションで作成して撮像装置１００に取り込まれた３Ｄ－ＬＵＴ（以下、画質効果ＬＵＴとも言う）データの一部を図５Ａに示す。ここではＲＧＢ信号に対する１７Ｇｒｉｄの３Ｄ－ＬＵＴで、Ｒ成分からインクリメントされるＬＵＴを例としているが、ＲＧＢ以外の信号に対するＬＵＴでも良いし、データの並びが異なっていても良い。また実施形態では各ＲＧＢの値は、０～１（小数点）として表している。

システム制御部５０は、３Ｄ－ＬＵＴに基づいた変換をした場合の画像と、３Ｄ－ＬＵＴを利用しない画像とを８０：２０の割合で合成した状態を１つの３Ｄ－ＬＵＴで再現させるため、入力＝出力となる３Ｄ－ＬＵＴ（以下、スルールックアップテーブルorスルーＬＵＴ）を用意する。このスルーＬＵＴは、入力＝出力の関係にあるので、容易に作成できる。スルーＬＵＴデータの一部を図５Ｂに示す。そして、システム制御部５０は、これらの画質効果ＬＵＴとスルーＬＵＴを構成する各データを、次式（１）で示す数式で演算することで、８０：２０の割合で合成し、合成ＬＵＴを生成する。
合成ＬＵＴ＝（画質効果ＬＵＴデータ）×０．８＋（スルーＬＵＴデータ）×０．２ …（１）
例えば１７Ｇｒｉｄの３Ｄ－ＬＵＴの場合、１７×１７×１７×３＝１４７３９個のデータに対して数式（１）の演算を施すことで８０：２０の割合で合成された合成ＬＵＴを生成することができる。システム制御部５０が生成した合成ＬＵＴの例を図５（ｃ）に示す。なお、実施形態ではグリッド間は、例えば線形補間処理で補うものとする。

システム制御部５０は、上記のようにして生成した合成ＬＵＴを画像処理部２４に設定する。この結果、画像処理部２４は、図３（ｂ）の３Ｄ－ＬＵＴ処理部３１４に相当する画像変換を行うことが可能となり、図３（ａ）で示したブロックで画像処理と等価の結果を、図３（ｂ）のようなより単純なブロックで実現することが可能となる。

本実施形態では外部アプリケーションで作成された３Ｄ－ＬＵＴを撮像装置１００に取り込み、適用度合いに基づいて３Ｄ－ＬＵＴによる画質効果を補正したうえで画像を変換する場合の動作について説明したが、撮像装置１００に、予め記録されている３Ｄ－ＬＵＴに対して適用度合いによる補正を行っても良い。また、一旦適用度合いによる補正を施した後の３Ｄ－ＬＵＴに対して再度適用度合いによる補正を行っても良い。その場合は、適用度合いの表現を１段階目の補正の適用度合いを考慮した表現にしても良いし、１段階目の補正後の状態を１００％として表現しても良い。

また、本実施形態では適用度合いをパーセントで表現しているが、ユーザに対して大中小などの抽象的な表現で選択させても良い。

［第２の実施形態］
上記第１の実施形態では、ユーザが指定した適用度合いに基づいて３Ｄ－ＬＵＴデータを生成する方法について説明したが、元の画質効果ＬＵＴに基づいて変換した画像から適用度合いをどの程度にすれば自分の好みの画質になるかを推測するのは困難である。そこで、本実施形態では適用度合いを決めるのに有効なユーザインターフェースについて説明する。本実施形態の撮像装置の構成は、第１の実施形態（図１）と同等のため、その説明は割愛する。

ユーザは表示部２８もしくは外部表示装置１６０に表示された撮像画像を見ながら、操作部７０を操作し、メニューから適用度合いの値を設定する。ここでは表示部２８に表示する場合について説明する。

メニューで設定された適用度合いに基づいてシステム制御部５０が合成ＬＵＴを生成し、画像処理部２４に設定する。そして、画像処理部２４が、その合成ＬＵＴで変換した画像を表示部２８に表示する。そして、ユーザは、変換で得た画像を見ながら、操作部７０を操作し、合成比率（適用度合い）を自身の好みで調整する。以降、ユーザが望む画像が表示されるまで、これを繰り返す。

しかし、補正後の画像のみで適用度合いを判断するよりも、３Ｄ－ＬＵＴに基づいて変換する前の画像や適用度１００％の画像と比較した方がより適切な適用度合いを決定することができる。

そこで、本実施形態では、図６に示すように表示部２８に表示する撮影画像の領域を３分割し、それぞれの領域に３Ｄ－ＬＵＴによる変換をしていない画像６０１、３Ｄ－ＬＵＴに基づいて変換した画像６０２、適用度合いに基づいた補正を行った３Ｄ－ＬＵＴに基づいて変換した画像６０３を表示することで、ユーザはどの程度の適用度合いにすることで最適な画質効果にすることができるのかを容易に判断することが可能となる。図６の場合、画面右上の適用度合いを設定するウインドウを、操作部７０により操作で上下にスクロールすることで、ユーザは、自由に適用度合いを設定できる。システム制御部５０は、ユーザから適用度合いが変更される度に、適用度合いに基づいて３Ｄ－ＬＵＴを生成して、画像処理部２４に設定して、撮像画像を変換させる。そして、システム制御部５０は、その変換で得た画像データを、画像６０３として表示する（画像６０３を更新する）。なお、画像を表示する領域を３つとするのではなく、２つの領域に画像６０２と画像６０３を表示するようにしても良い。

３Ｄ－ＬＵＴによる変換状態が異なる複数の画像を同時に生成するためには、図３（ａ）のブロック図で得た各画像をＲＡＭに保持しておき、それらを１画面に合成する必要がある。しかし、それぞれの画像のフレームレートを低下させることで、複数の画像を時分割で生成して合成することで、図３（ｂ）に示すより簡易な処理ブロックでも実現が可能となる。その際、適用度合いに基づいた画像以外のフレームレートを落とすなどしても良い。また、３Ｄ－ＬＵＴによる変換をしていない画像および３Ｄ－ＬＵＴに基づいて変換した画像を画角全体ではなく一部分をトリミングした画像としても良い。

また、別の手段として３Ｄ－ＬＵＴによる変換をしていない画像、３Ｄ－ＬＵＴに基づいて変換した画像、適用度合いに基づいた補正を行った３Ｄ－ＬＵＴに基づいて変換した画像を時分割で切り替えて表示しても良いし、ユーザが指示したときのみ３Ｄ－ＬＵＴによる変換をしていない画像や３Ｄ－ＬＵＴに基づいて変換した画像を表示しても良い。また、ユーザの指示に基づいて、自動で１秒間隔など所定の期間ごとに適用度合いを変更しながら複数枚の静止画もしくは連続した動画として記録を行い、記録されたコンテンツから最適な適用度合いを探れるようにしても良い。

これらにより、ユーザは３Ｄ－ＬＵＴによる画質効果を比較し、最適な適用度合いを決定することが可能となる。

［第３の実施形態］
第１の実施形態ではユーザが指定した適用度合いに基づいて数式（１）で演算することにより、３Ｄ－ＬＵＴデータを生成する方法について説明した。しかし、３Ｄ－ＬＵＴで扱う色空間の各成分を同一の適用度合いで演算すると、必ずしもユーザの好みの画になるとは限らない。そこで、本第３の実施形態では、より自由度が高い適用度合いの設定方法と３Ｄ－ＬＵＴデータ生成方法について説明する。本第３の実施形態の撮像装置の構成は第１の実施形態と同等であるものとし、その説明は割愛する。

以下、本実施形態における３Ｄ－ＬＵＴデータ生成方法について、図７に例示するブロック図を用いて説明する。なお、同図に示す各構成要素は、システム制御部５０が画像処理部２４に対して設定したものであると理解されたい。

先ず、システム制御部５０は、スルーＬＵＴ７０１をＲＧＢ―ＹＵＶ変換ブロック７０３によって変換して、１つの輝度（Ｙ)、２つの色差（Ｕ，Ｖ）で表されるＹＵＶ色空間用のスルーＬＵＴ７０１’を生成する。同様に、システム制御部５０は、画質効果ＬＵＴ７０２を、ＲＧＢ―ＹＵＶ変換ブロック７０４によって変換して、１つの輝度（Ｙ)、２つの色差（Ｕ，Ｖ）のＹＵＶ色空間用の画質効果ＬＵＴデータ７０２’を生成する。

そして、システム制御部５０は、これらスルーＬＵＴデータ７０１’、及び、画質効果ＬＵＴデータ７０２’を、ユーザにより輝度、色差それぞれに独立して設定された適用度合いに応じて合成することで、ＹＵＶ色空間用の３Ｄ－ＬＵＴデータ７０６を生成する。そして、システム制御部５０は、生成されたＹＵＶ色空間用の３Ｄ－ＬＵＴデータ７０６を、ＹＵＶ－ＲＧＢ変換ブロック７０７で変換することで、ＲＧＢ空間用の３Ｄ－ＬＵＴデータ３１４を生成し、それを画像処理部２４に設定する。

以下、ＹＵＶ信号の成分ごとに調整できる適用度合いを考慮した３Ｄ－ＬＵＴデータの生成方法の具体例を説明する。本実施形態では、輝度成分Ｙの信号については、画質効果を狙った３Ｄ－ＬＵＴを１００％活用して変換して得られる画像とする。そして、色差成分Ｕ、Ｖの信号については、３Ｄ－ＬＵＴの適用度合いをそれぞれ８０％、５０％に抑制する場合を例として説明する。

スルーＬＵＴ７０１’と画質効果ＬＵＴ７０２’を構成する各データを、次式（２）乃至（４）で示す数式で演算することで、ＹＵＶ色空間用の３Ｄ－ＬＵＴ７０６を生成する。
［輝度成分Ｙ］
合成ＬＵＴ＝（画質効果ＬＵＴデータ７０２’）×１．０＋（スルーＬＵＴデータ７０１’）×０．０ …（１）
［色差成分Ｕ］
合成ＬＵＴ＝（画質効果ＬＵＴデータ７０２’）×０．８＋（スルーＬＵＴデータ７０１’）×０．２ …（２）
［色差成分Ｖ］
合成ＬＵＴ＝（画質効果ＬＵＴデータ７０２’）×０．５＋（スルーＬＵＴデータ７０１’）×０．５ …（３）
このように輝度成分と色差成分に分解して成分ごとに適用度合いを調整することで、ユーザ好みの画に微調整する３Ｄ－ＬＵＴ７０６を生成できる。ただし、生成された３Ｄ－ＬＵＴは、ＹＵＶ色空間用である。それ故、システム制御部５０は、３Ｄ－ＬＵＴ７０６をＹＵＶ－ＲＧＢ変換ブロックで変換することで、ＲＧＢ色空間用の３Ｄ－ＬＵＴ３１４を生成する。

本実施形態ではＲＧＢ信号からＹＵＶ信号に変換し、成分ごとに適用度合いを調整する場合について説明したが、変換を行わずＲＧＢ信号の成分ごとに適用度合いを調整するようにしても良い。また、ＹＵＶ信号への変換に限定する必要はなく、他の色空間、例えばＬ＊ａ＊ｂ＊空間やＩＣｔＣｐ空間等でも同様に各処理を行うことも可能である。

［第４の実施形態］
第１乃至第３の実施形態ではユーザが３Ｄ－ＬＵＴの適用度合いを自由に設定する方法について説明した。しかし、画質効果としての３Ｄ－ＬＵＴではなく色空間の変換としての３Ｄ－ＬＵＴの場合はフォーマット変換としての側面が強いため、適用度合いをユーザが自由に設定できることが望ましくない場合がある。また、ＬＵＴ作成者の意図として適用度合いを変更してほしくない場合もある。さらに、適用度合いを強める方向に変更する余地を持たせるために、適用度合いの初期値としては１００％よりも小さい値を設定したい場合がある。そこで、本第４の実施形態では、３Ｄ－ＬＵＴに含まれる適用度合い変更の可否、非推奨の情報や適用度合いの初期値を読み取り、それに応じた動作をさせる方法について図８のフローチャートを参照しながら説明する。なお、３Ｄ－ＬＵＴに含まれる適用度合い変更の可否、非推奨の情報や適用度合いの初期値に関する情報は、３Ｄ－ＬＵＴファイルのファイルヘッダ等、メインの３Ｄ－ＬＵＴデータに付随して記述されていれば良い。

Ｓ８０１にて、システム制御部５０は、第１の実施形態と同様に外部記録媒体１５０から３Ｄ－ＬＵＴファイルの読み込みを行い、システムメモリ５２に格納する。その際、図９（ａ）や図９（ｂ）の「＃」から始まる行のように適用度合いの変更に関する情報や適用度合いの初期値に関する情報を含む３Ｄ－ＬＵＴを読み込む場合には、それらの情報も併せて読み込む。

Ｓ８０２にて、システム制御部５０は、Ｓ８０１で読み込んだ情報の中に適用度合い初期値の情報が含まれているかどうかを判定する。図９（ａ）は適用度合い初期値の情報を含まない３Ｄ－ＬＵＴであり、同図（ｂ）は適用度合い初期値の情報を含む３Ｄ－ＬＵＴを示している。システム制御部５０は、適用度合い初期値の情報が含まれないと判定した場合は処理をＳ８０３に進め、含まれると判定した場合は処理をＳ８０４に進める。なお、本実施形態では、３Ｄ－ＬＵＴが文字列によって表現されている例を示しているが、バイナリ形式やその他の形式で３Ｄ－ＬＵＴの数値データと適用度合い変更の情報が表現されていてもよい。

Ｓ８０３にて、システム制御部５０は、Ｓ８０２において適用度合い初期値を含まない３Ｄ－ＬＵＴであると判断されたため、適用度合い３１７を１００％に設定する。

Ｓ８０４にて、システム制御部５０は、適用度合い３１７をＳ８０１で読み込んだ適用度合いに設定する。

Ｓ８０５にて、システム制御部５０は、Ｓ８０１で読み込んだ情報の中に適用度合い変更の可不可または非推奨の情報が存在するかどうかを判定する。図９（ａ）は適用度合い変更不可の情報を含む３Ｄ－ＬＵＴファイルを示し、同図（ｂ）は適用度合い変更非推奨の情報を含む３Ｄ－ＬＵＴファイルを示している。システム制御部５０は、３Ｄ－ＬＵＴファイルを解析して、適用度合いに関する情報を抽出することを試みる。そして、システム制御部５０は、抽出した情報に適用度合い変更や非推奨の情報が含まれると判定した場合は処理をＳ８０６に、適用度合い変更不可の情報が含まれると判定した場合は処理をＳ８０７に進める。また、システム制御部５０は、これらの情報が含まれない、もしくは、適用度合い変更可の情報が含まれると判定した場合は処理をＳ８０８に進める。なお、本実施形態においては３Ｄ－ＬＵＴが文字列によって表現されている例を示しているが、バイナリ形式やその他の形式で３Ｄ－ＬＵＴの数値データと適用度合い変更の情報が表現されていてもよい。

Ｓ８０６にて、システム制御部５０は、ユーザがユーザインターフェースを通じて適用度合いを変更する場合に図１０の警告１００２のような警告を表示するモードにユーザインターフェースを変更する。警告１００２は、ユーザが推奨値とは異なる適用度合いに設定した場合に表示される。例えば、適用度合いの推奨値が５０％であったところ、ユーザが６０％の適用度合いを設定しようとした場合、システム制御部５０は、「ＬＵＴ適用度合いの推奨値は５０％です」と表示する。適用度合い変更のためのユーザインターフェースに入った時点で警告を表示してもよい。また、警告１００２とは別に推奨値表示１００１のような推奨値を示す情報を表示してもよい。

Ｓ８０７にて、システム制御部５０は、適用度合いの変更を行うユーザインターフェースをロックし、ユーザが適用度合いを変更できないようにする。これ以外としては、例えば、適用度合い変更のユーザインターフェースに入ることができないようにする、異なる適用度合いを選択しようとしても、それを無効とし、元の適用度合いに戻るようにする、等で良い。

Ｓ８０８にて、システム制御部５０は、第１の実施形態と同様に、３Ｄ－ＬＵＴ処理部３０４に適用度合い３１７を考慮して生成した３Ｄ－ＬＵＴ３１９を設定する。その際、適用度合い３１７は、Ｓ８０３またはＳ８０４で設定した適用度合いである。

本実施形態では、３Ｄ－ＬＵＴから読みとった適用度合いの初期値や適用度合い変更の可否、非推奨に関する情報を読み取り、適用度合い３１７とユーザインターフェースへの反映を行う方法について説明した。本実施形態によれば、適用度合いの変更が望ましくない３Ｄ－ＬＵＴにおいて、適用度合いの変更を禁止したり、変更が非推奨である旨をユーザに通知することが可能になる。また、適用度合いを強める余地を持たせるために適用度合いの初期値を１００％（最大値）よりも下げた値に設定することが可能となる。

なお、本実施形態においては適用度合い変更の可否、非推奨のパターンを説明したが、条件を満たしたユーザに対してのみ変更を可能とするということも考えられる。例えば、基本的には適用度合いは固定で使用させるが、ライセンスを取得したユーザは適用度合いの変更を可能とするような形態が考えられる。

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

発明は上記実施形態に制限されるものではなく、発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、発明の範囲を公にするために請求項を添付する。

１００…撮像装置、２２…撮像部、２３…Ａ／Ｄ変換器、２４…画像処理部、５０…システム制御部、５２…システムメモリ

Claims (8)

1. 撮像手段を有する撮像装置であって、
   画像データを変換するため第１のルックアップテーブルを取得する取得手段と、
   該取得手段で取得した第１のルックアップテーブルの適用の度合いを設定する設定手段と、
   該設定手段で設定した適用の度合いに基づいて、前記第１のルックアップテーブルから、第２のルックアップテーブルを生成する生成手段とを有し、
   前記生成手段で生成された第２のルックアップテーブルを用いて、前記撮像手段で得た画像データを変換することを特徴とする撮像装置。
2. 前記取得手段は、撮像装置が有する所定のメモリより前記第１のルックアップテーブルを取得することを特徴とする請求項１に記載の撮像装置。
3. 前記取得手段は、撮像装置の外部から前記第１のルックアップテーブルを取得することを特徴とする請求項１に記載の撮像装置。
4. 前記撮像手段で得た第１の画像、当該第１の撮像画像を前記第１のルックアップテーブルで変換して得た第２の画像、及び、前記第１の撮像画像を前記第２のルックアップテーブルで変換して得た第３の画像を並べて表示する表示手段を更に有し、
   前記設定手段により、適用の度合いが変更される度に、前記生成手段による前記第２のルックアップテーブルを再生させ、
   前記表示手段は、適用の度合いが変更される度に生成された前記第２のルックアップテーブルによる変換で得た第３の画像を、前記第１の画像、前記第２の画像と並べて表示する
   ことを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
5. ＲＧＢ色空間用のルックアップテーブルを、１つの輝度成分、２つの色差成分を持つ色空間用のルックアップテーブルに変換する第１の変換手段と、
   １つの輝度成分、２つの色差成分を持つ色空間用のルックアップテーブルを、ＲＧＢ色空間用のルックアップテーブルに変換する第２の変換手段とを有し、
   前記設定手段は、前記輝度成分、前記２つの色差成分それぞれに対する適用度合いを設定し、
   前記生成手段は、
   入力＝出力の関係を有するＲＧＢ色空間用のスルールックアップテーブル、及び、前記取得手段で取得したＲＧＢ色空間用の第１のルックアップテーブルそれぞれを、前記第１の変換手段で変換し、
   当該変換で得た２つのルックアップテーブルの輝度成分、色差成分を、それぞれの成分の適用度合いに応じて合成することで、合成後の輝度成分、２つの色差成分のデータを持つルックアップテーブルを生成し、
   当該生成されたルックアップテーブルを、前記第２の変換手段で変換することで、前記第２のルックアップテーブルを生成する
   ことを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。
6. 前記取得手段が取得した第１のルックアップテーブルに付随する情報を抽出し、当該抽出で得た情報に、適用度の変更の可不可を示す情報、適用度の初期値に関する情報があるか否かを判定する判定手段を更に有し、
   前記生成手段は、
   前記判定手段による判定の結果が、適用度の初期値が設定されていることを示す場合は、前記初期値に従って前記第２のルックアップテーブルを生成し、
   前記判定手段による判定の結果が、適用度の初期値が設定されていないと判定した場合は適用度が最大となっているものとして、前記第２のルックアップテーブルを生成し、
   前記判定手段の判定の結果が、適用度の変更が不可となっていると判定した場合は、前記設定手段による適用度の設定を無効にし、
   前記判定手段の判定の結果が、適用度の変更が可となっていると判定した場合は、前記設定手段による適用度の設定に従って、前記第２のルックアップテーブルを生成する
   ことを特徴とする請求項１乃至５のいずれか１項に記載の撮像装置。
7. 撮像手段を有する撮像装置の制御方法であって、
   画像データを変換するため第１のルックアップテーブルを取得する取得工程と、
   該取得工程で取得した第１のルックアップテーブルの適用の度合いを設定する設定工程と、
   該設定工程で設定した適用の度合いに基づいて、前記第１のルックアップテーブルから、第２のルックアップテーブルを生成する生成工程とを有し、
   前記生成工程で生成された第２のルックアップテーブルを用いて、撮像手段で得た画像データを変換することを特徴とする撮像装置の制御方法。
8. コンピュータが読み込み実行することで、前記コンピュータに、請求項７に記載の方法が有する各工程を実行させるためのプログラム。

Images