JP7156302B2 - 画像処理装置、画像処理方法、プログラム - Google Patents
画像処理装置、画像処理方法、プログラム Download PDFInfo
- Publication number
- JP7156302B2 JP7156302B2 JP2019549891A JP2019549891A JP7156302B2 JP 7156302 B2 JP7156302 B2 JP 7156302B2 JP 2019549891 A JP2019549891 A JP 2019549891A JP 2019549891 A JP2019549891 A JP 2019549891A JP 7156302 B2 JP7156302 B2 JP 7156302B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- white balance
- control value
- image processing
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 560
- 238000003672 processing method Methods 0.000 title claims description 9
- 238000004364 calculation method Methods 0.000 claims description 79
- 238000000034 method Methods 0.000 claims description 75
- 230000008569 process Effects 0.000 claims description 58
- 238000010191 image analysis Methods 0.000 claims description 34
- 238000011161 development Methods 0.000 claims description 24
- 238000004458 analytical method Methods 0.000 claims description 10
- 238000003384 imaging method Methods 0.000 description 45
- 239000011159 matrix material Substances 0.000 description 43
- 238000012937 correction Methods 0.000 description 30
- 238000005516 engineering process Methods 0.000 description 28
- 238000004891 communication Methods 0.000 description 25
- 230000018109 developmental process Effects 0.000 description 23
- 230000006870 function Effects 0.000 description 22
- 230000000875 corresponding effect Effects 0.000 description 18
- 238000007639 printing Methods 0.000 description 18
- 238000006243 chemical reaction Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 14
- 238000001514 detection method Methods 0.000 description 13
- 230000003287 optical effect Effects 0.000 description 13
- 230000008859 change Effects 0.000 description 12
- 239000003086 colorant Substances 0.000 description 8
- 238000007906 compression Methods 0.000 description 6
- 230000006835 compression Effects 0.000 description 6
- 230000009467 reduction Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000003247 decreasing effect Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000014759 maintenance of location Effects 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 238000005401 electroluminescence Methods 0.000 description 3
- 230000000873 masking effect Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000010438 heat treatment Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000007935 neutral effect Effects 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 201000005569 Gout Diseases 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/643—Hue control means, e.g. flesh tone control
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Description
特許文献1には複数の輝度範囲に応じて色再現パラメータを変調する技術が開示されている。
特許文献2には輝度とカメラ姿勢からシーン推定を行い、色再現パラメータを変調する技術が開示されている。
特許文献3にはGPS(Global Positioning System)により得た位置情報に応じて色再現パラメータを変調する技術が開示されている。
特許文献4には画像生成履歴と被写体の明るさ情報に応じて色再現パラメータを変調する技術が開示されている。
そこで本技術はホワイトバランス調整の状態(ホワイトバランスゲイン)に応じて画像処理のパラメータを変調する技術を提供する。
撮像の際の様々な光源色に対して画像の色合いを補正するホワイトバランス制御に用いるホワイトバランスゲインとしては、基本的には光源の色を打ち消すようにホワイトバランスゲインが設定されるが、異なるホワイトバランスゲインを設定することでより多様な色合いの調整を行うことができる。上記構成では2種類のホワイトバランスゲインを用いて制御値を算出し、その制御値を用いて、画像処理過程で用いる何らかのパラメータを変調する。
第1のホワイトバランスゲインは、固定の値であってもよいし、記憶された、いくつかの値の一つなどとされても良いが、例えば処理対象の画像を光源が所定の色温度である状態のように調整するためのホワイトバランスゲインを、処理対象の画像から算出する。
第2のホワイトバランスゲインも固定の値であってもよいし、記憶された、いくつかの値の一つなどとされても良いが、例えば処理対象の画像を光源が所定の色温度である状態のように調整するためのホワイトバランスゲイン(第1のホワイトバランスゲインとは異なる値)を、処理対象の画像から算出する。
第1のホワイトバランスゲインは、例えば光源の色味を完全に打ち消す、或いは大幅に打ち消すなどのホワイトバランス調整のための値としたとき、第2のホワイトバランスゲインは、ある程度光源の色味を残すようなホワイトバランス調整のための値などとする。この場合、第2のホワイトバランスゲインでホワイトバランス調整を行った場合の色味残し量を反映した制御値を第1,第2のホワイトバランスゲインから求めることができる。
画像データに対する処理内容としては、画像データの色、輝度、コントラスト、シャープネスなど多様に想定される。またここで画像データに対する処理とは、その目的が例えば画像の現像、記憶、再生、送信、印刷、表示等の多様な目的の処理が想定される。
このような各種の画像データ処理で用いられる画像処理パラメータが、ホワイトバランスゲインを用いて生成された制御値により変調される。画像信号処理部は変調された画像処理パラメータにより所定の画像処理を行う。
例えば処理対象の画像データに用いることのできる画像処理パラメータとして記憶する。画像処理パラメータは、画像データとともに、或いは対応づけて記憶することが想定される。
例えば処理対象の画像データに用いることのできる画像処理パラメータとして外部機器に送信する。画像処理パラメータは、画像データとともに、或いは対応づけて送信することが想定される。
例えば第2のホワイトバランスゲインはユーザが操作により設定した値とするなど、ユーザの意思を反映した値とする。
例えば画像解析により顔検出を行うなどし、処理対象の画像に顔が検出された場合に、その画像の処理に用いる画像処理パラメータの変調が行われるようにする。
例えば画像解析により顔検出を行うなどし、処理対象の画像に顔が検出された場合に、その顔画像の領域についての信号処理において、変調された画像処理パラメータが用いられるようにする。
例えば撮像時に発光装置の発光が行われた場合は、その撮像画像の処理に用いる画像処理パラメータの変調が行われるようにする。
例えば通常のホワイトバランスモードとは異なるホワイトバランスモードが選択されている場合に制御値の算出が行われる。
色処理として、色相や彩度の調整などのためのパラメータを、ホワイトバランスゲインに応じて変調する。
上記した本技術に係る画像処理装置においては、前記制御値を用いて変調する画像処理パラメータは、画像データの特定の色相の変調を行う処理に用いるパラメータであることが考えられる。
或る特定の色相領域の画素データを特定の色相にシフトさせたり、その彩度を調整したりする処理に用いるパラメータを、ホワイトバランスゲインに応じて変調する。
例えばコントラスト(ガンマ補正)、明るさ、シャープネス、トーンカーブなど、色以外の現像処理パラメータ(例えば輝度処理用のパラメータ)をホワイトバランスゲインに応じて変調する。
これによりホワイトバランスゲインに応じた画像処理が実行されるようにする。
本技術に係るプログラムは、以上の処理を演算処理装置に実行させるプログラムである。
なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
<1.撮像装置の構成>
<2.色味残し量に応じたパラメータ変調>
<3.適用処理例>
<4.印刷装置への適用例>
<5.まとめ及び変形例>
以下では第1の実施の形態として本技術の画像処理装置を搭載した撮像装置の構成を説明する。図1は撮像装置1のブロック図である。なおこの例では図1の画像処理装置20が請求項にいう画像処理装置に相当することになる。
イメージセンサ12における各受光画素は、例えばベイヤー配列のカラーフィルタにより、R(赤)、G(緑)、B(青)の受光画素とされる。なおもちろん、R、G、B画素配列はベイヤー配列以外の配列でもよい。
また三板式として、R、G、Bのそれぞれに対応した3つのイメージセンサが設けられ、R、G、Bそれぞれの撮像信号を並列に出力するものとされてもよい。
イメージセンサ12から読み出される信号は被写体の撮像信号として画像処理装置20に供給される。
イメージセンサ12における信号転送動作、電子シャッタ速度は制御部30により制御される。
例えば画像処理装置20は、イメージセンサ12での光電変換で得た電気信号について、CDS(Correlated Double Sampling)処理、AGC(Automatic Gain Control)処理などを実行し、さらにA/D(Analog/Digital)変換処理を行う。
また画像処理装置20はデジタルデータ化した撮像信号(画像データ)を、逐次バッファリングしながら各種の処理を行う。例えば画像処理装置20は画像データに対してノイズ除去処理、Y/C処理、色補正処理、輪郭強調処理、解像度変換処理、記憶用のフォーマティングやデータ圧縮としてのコーデック処理等を行う。
なお、イメージセンサ12がA/D変換までの処理を行い、画像処理装置20がデジタルデータ化された撮像信号(画像データ)を受信する構成とされる場合もある。
記憶媒体15aとしては、メモリカードや光ディスク、磁気テープ等のように着脱可能であってもよく、固定タイプのHDD(Hard Disk Drive)や半導体メモリモジュール等であってもよい。
これにより撮像装置1は図示しない外部機器に画像データ等を出力し、外部機器において撮像した画像データの再生や編集ができるようにしている。
この通信部16は、無線通信としては、例えばWi-Fi(登録商標)やブルートゥース(登録商標)等の無線通信規格等の通信方式による通信を行うことが考えられる。
また通信部16は例えばUSB(Universal Serial Bus)ケーブル等のコネクタケーブルを用いた有線通信を行うものとすることができる。さらに通信部16は、ネットワーク通信部として、例えばインターネット、ホームネットワーク、LAN(Local Area Network)等の各種のネットワークによる通信を行い、ネットワーク上のサーバ、端末等との間で各種データ送受信を行うようにしてもよい。
操作部18によって得られる操作情報は制御部30に供給される。制御部30は操作情報に応じて必要な制御を行う。
また電子ビューファインダ19も、LCDや有機ELディスプレイ等を用いて形成され、表示部17と相補的にユーザに対する画像や情報提示を行う。
表示部17や電子ビューファインダ19には、画像処理装置20から表示用に解像度変換された撮像画像の画像データが供給される。表示部17や電子ビューファインダ19では、当該撮像画像の画像データの表示を行う。これによりユーザはいわゆるスルー画(記憶スタンバイ中の被写体のモニタリング画像)を確認できる。
また表示部17や電子ビューファインダ19には、画像処理装置20を介して記憶部15で再生された画像データが供給されるようにすることもでき、これが表示されることで、ユーザは撮像記憶した画像の再生画像を確認することができる。
また表示部17や電子ビューファインダ19は、制御部30の指示に基づいて、各種操作メニュー、アイコン、メッセージ等、即ちGUI(Graphical User Interface)としての表示を画面上に実行させる。
なお撮像装置1には、電子ビューファインダ19に代えて光学ファインダが設けられる場合もある。例えば撮像装置1がいわゆる一眼レフカメラとされる場合などである。
センサ部14の各種センサは、それぞれ検出信号を制御部30に伝達する。制御部30は、センサ部14で検出された情報を用いて各種制御を行うことができる。
CPUがROMやフラッシュメモリ等に記憶されたプログラムを実行することで、この撮像装置1全体を統括的に制御する。
RAMは、CPUの各種データ処理の際の作業領域として、データやプログラム等の一時的な格納に用いられる。
ROMやフラッシュメモリ(不揮発性メモリ)は、CPUが各部を制御するためのOS(Operating System)や、画像ファイル等のコンテンツファイルの他、各種動作のためのアプリケーションプログラムや、ファームウエア等の記憶に用いられる。
なお、発光装置31はフラッシュ発光ではなく継続的な発光(照明)を行う装置とされてもよい。
また発光装置31は撮像装置1に内蔵されたものでもよいし、撮像装置1とは別体で、撮像装置1に装着されて使用されるものでもよい。
例えばDSPあるいはマイクロコンピュータで形成される画像処理装置20は、例えばソフトウエアによって図2のような処理機能を実行するように構成される。なお、以下説明する機能の全部又は一部がハードウエアにより構成されていてもよい。
画像信号処理部21はイメージセンサ12からの撮像信号を入力し、主に現像処理を行う。例えばロウ(RAW)画像処理、Y/C処理、RGBデータ処理等として各種の色処理や輝度処理を行う。
具体的にはイメージセンサ12から光電変換された信号を読み出してデジタルデータ化し、ロウ(RAW)画像としての画像データを生成する。
またロウ画像データに対して、例えばノイズ除去処理、ホワイトバランス調整、ガンマ処理、Y/C処理、色補正処理、輪郭強調処理、解像度変換処理等の必要な信号処理を行い現像された画像データを生成する。
また出力処理部22は、通信出力のための圧縮処理、付加情報を含めた通信フォーマット処理、通信部16への転送処理等を行う。
更に出力処理部22は、表示部17や電子ビューファインダ19での表示のための処理、例えば記憶部15からの読み出し、解像度変換、表示用のキャラクタ画像合成等を行って表示画像データを生成し、表示部17や電子ビューファインダ19に転送する。
第2ホワイトバランスゲインは、撮像時の光源の色味を、第1のホワイトバランスゲインよりは残す方向に調整するためのホワイトバランスゲインである。光源の色味を残すような画像表現に用いるゲイン値である。
そして制御値は、例えば色味残し量を反映した値である。
制御値算出部23及びパラメータ変調部24の処理例については詳しくは後述する。
画像解析結果は、画像信号処理部21、制御値算出部23、パラメータ変調部24で参照され、処理に用いられる場合がある。
画像処理装置20の機能としては図2に示した以外にも設けられることもあり、また必ずしも図2の機能が全て設けられていなくてもよい。
図3Aは単板式のイメージセンサ12の場合、図3Bは三板式のイメージセンサ12の場合で示している。
なお、ここで示す、入力される画像データSiは、イメージセンサ12側もしくは画像信号処理部21において既にデジタルデータ化された画像データ(ロウ画像データ)であるとする。
デモザイク処理で得られたR、G、Bの情報に対しては、リニアマトリクス処理部55やアパーチャーコントロール(アパコン)処理部56での処理が施される。
なお色分離の一例としてデモザイク処理を示したが、デモザイク処理を行うのは、例えばベイヤー配列などのモザイクカラーフィルタを用いる場合となる。例えばストライプカラーフィルタ等を値いる場合は他の色分離処理が行われる。
リニアマトリクス処理部55で処理された画像データ(R、G、B)は、ホワイトバランス処理部57でホワイトバランス調整処理、即ち画素毎の色データを所定の光源の色温度に応じた値に補正する処理が施される。具体的にはホワイトバランス処理部57ではホワイトバランスゲインの乗算が行われる。
アパコン処理部56では、画像データ、即ちデモザイク処理で得られたR、G、Bの情報に対して、高周波成分を強調することで輪郭を強調させる処理を行う。
ガンマ補正部56は、画像データを、図示しない表示装置等の再生表示系の階調特性に応じて階調補正を行う。
ガンマ補正された画像データはY合成部60、C合成/色差マトリクス部61に供給される。Y合成部60ではY(輝度)信号を合成し、後段の輝度信号処理系に出力する。C合成/色差マトリクス部61は色差信号(R-Y信号、B-Y信号)を生成し、後段の色差信号処理系に出力する。
以下、上述の撮像装置1(画像処理装置20)で行われる色味残し量に応じたパラメータ変調について説明する。
図示するように、ホワイトバランスのモード、オートホワイトバランス(AWB)時の優先設定などが選択可能とされる。
オートホワイトバランス時の優先設定としては、ユーザは、「標準」「雰囲気優先」「白色優先」の各モードを選択できる。
「白色優先」は、正確なホワイトを実現するホワイトバランス調整を行うモードである。即ち光源の色味を打ち消すようなホワイトバランス調整を指定するモードである。
「雰囲気優先」は、光源の色調を残すことで、その場の雰囲気を表現するような画像を得るためのホワイトバランス調整を指定するモードである。温かい雰囲気を演出したいときに適している。例えばこの雰囲気優先モードは電球色を残すモードである。
「標準」は、上記の白色優先と雰囲気優先の中間的なホワイトバランス調整を指示するモードである。
また図4A、図4Bはモード設定のためのユーザインターフェースの一例であり他の例も想定される。例えばオートホワイトバランスが選ばれたときに「標準」「雰囲気優先」「白色優先」が選択できるようにするのではなく、直接各モードが選択できるようにしてもよい。例えば「オートホワイトバランス(標準)」「オートホワイトバランス(雰囲気優先)」「オートホワイトバランス(白色優先)」「太陽光」「日陰」「曇天」「蛍光灯(温白色/白色/昼白色/昼光色)」「フラッシュ」「水中」などを直接選択できるようにするユーザインターフェースである。
例えば、低色温度光源下(2500Kなど)で撮像されたロウ画像を現像する場合に、ホワイトバランスが意図的に光源の温かみのあるオレンジ色の光源色を残す場合には、人物の肌はオレンジ色になり過ぎない方が、印象が良い。そこで肌色の彩度を下げるなど、色味残し量に応じた色処理をおこなうと、より好印象な画像を得ることができる。
本実施の形態では例えばこのような考え方から、色味残し量を反映した制御値を生成し、その制御値によって画像処理のパラメータを変調することを行う。
なお、この場合の色味残し量とは、現像には使用しない光源の色味を打ち消すホワイトバランスゲインと、現像に使用する光源の色味を残したホワイトバランスゲインの差分(比率)と考えることができる。
ステップS102で画像処理装置20は、第2のホワイトバランスゲイン(R2,B2)を計算する処理を行う。「R2」はR信号に対するゲイン、「B2」はB信号に対するゲインである。これは撮像された画像データの色味を残す場合にR信号、B信号に与えるゲインの値であり、例えば上記の雰囲気優先の場合に用いるホワイトバランスゲインとされる。
なお実施の形態としての一例の説明では、R信号に対するゲインとB信号に対するゲインをホワイトバランスゲインとし、このようなホワイトバランスゲインでホワイトバランス調整を行うものとするが、例えばCb信号、Cr信号に対するゲインをホワイトバランスゲインとするなど、他のホワイトバランス調整手法を用いてもよいことは言うまでもない。
撮像した処理対象の画像データから、画像処理装置20が第1のホワイトバランスを図6の×印(WB1)の地点(約2500K)と計算したとする。なお図6は公知のCIE1931xy色度図において、×印(WB1)、×印(WB2)を示している。
第2のホワイトバランスは、図6の黒体軌跡に沿って、高色温度側に一定量シフトさせたものとすることができる。シフトさせた分だけ、オレンジの光源の色味を残した第2のホワイトバランスとなる。その第2のホワイトバランスを×印(WB2)として示している。
また第1のホワイトバランスが黒体軌跡上に乗っていない場合にも、黒体軌跡から垂直方向のズレを保ったまま高色温度側(又は低色温度側)にシフトさせることで第2のホワイトバランスを決めることができる。
・光源の色味を打ち消す第1のホワイトバランスゲイン(R,B)=(R1,B1)
・光源の色味を残す第2のホワイトバランスゲイン(R,B)=(R2,B2)
・ホワイトバランスゲイン(R,B)を、色温度Kと色温度に垂直方向の差分Dに変換する関数=f1(r,b)
・色温度Kと色温度に垂直方向の差分Dを、ホワイトバランスゲイン(R,B)に変換する関数=f2(k,d)
・シフト量Sを、色温度Kから求める関数=f3(K)
とするとき、下記の計算で第1のホワイトバランスゲイン(R1,B1)から、第2のホワイトバランスゲイン(R2,B2)を求めることができる。
S=f3(K1)
K2=K1+S
(R2,B2)=f2(K2,D1)
例えば色味残し量Aは、次の(数1)により求める。
変調前の色再現パラメータ=CR
変調後の色再現パラメータ=CR’
とするとき、例えば、
CR’=CR×2A
としてパラメータの変調を行う。
なお変調するパラメータCRは、ロウ画像データの現像処理段階でのパラメータに限らず、輝度処理で用いるパラメータ、色差信号処理で用いるパラメータ、RGBデータに対する処理に用いるパラメータなどが想定される。
このような処理を行うために画像処理装置20としては図2の機能(特に画像信号処理部21、制御値算出部23、パラメータ変調部24)を実行するためのソフトウエアを備えることになる。
当該ソフトウエアは、光源の色味を打ち消すような第1のホワイトバランスゲインの推定制御を行うことができる。
また当該ソフトウエアは、光源の色味を残すような第2のホワイトバランスゲインによるホワイトバランス調整処理を行うことができる。
また当該ソフトウエアは、第1のホワイトバランスゲインと第2のホワイトバランスゲインを用いて制御値(例えば色味残し量A)を算出できる。
また当該ソフトウエアは、制御値(例えば色味残し量A)を用いて所定の画像処理に用いるパラメータCRを変調し、変調したパラメータCR’を生成できる。
また当該ソフトウエアは、変調したパラメータCR’を用いて所定の画像処理を行うことができる。
図7は第2のホワイトバランスゲイン(R1,B1)を、ユーザ入力情報を用いて設定する例である。
ステップS102で画像処理装置20は第2のホワイトバランスゲインを設定するが、この場合、第2のホワイトバランスゲイン(R2’B2’)は、操作部18を用いてユーザが指定した値とする。
ステップS103Aで画像処理装置20は、第1のホワイトバランスゲイン(R1,B1)と、ユーザが指定した第2のホワイトバランスゲイン(R2’B2’)を用いて制御値(例えば色味残し量A)を算出する。
そして画像処理装置20はステップS104で制御値(例えば色味残し量A)を用いてパラメータCRをパラメータCR’に変調し、ステップS105Aでは、ユーザ指定の第2のホワイトバランスゲイン(R2’,B2’)と、変調したパラメータCR’を用いて例えばロウ画像データの現像等の画像処理を行う。
例えば第2のホワイトバランスゲイン(R2’B2’)を用いてホワイトバランス調整を行うとともに、色再現パラメータCR’を用いたリニアマトリクス処理、或いはアパコン処理、或いはガンマ補正処理等を行う。
例えばユーザがマニュアル操作であえて色味が残るようにホワイトバランスゲイン設定を行う場合である。
その場合も、ユーザの所望する色味残しに応じて画像処理用のパラメータを変調することで、ユーザの望むホワイトバランスに適応した画像処理が可能になる。
図8AにおけるステップS101~S104は図5と同様である。
画像処理装置20はステップS104までの処理で変調したパラメータCR’を生成したら、ステップS110で、その変調したパラメータCR’を画像データに対応づけて記憶するための処理を行う。即ち変調したパラメータCR’を記憶する情報として記憶部15に出力する。例えば画像データをデータファイル化して記憶部15により記憶媒体15aに記憶させる場合、その画像データに対応する付加情報としてパラメータCR’を含めるようにすることで画像データとともに記憶媒体15aに記憶させる。
このようにすることで、記憶媒体15aから画像データファイルを読み出した場合に、撮像装置1もしくは他の機器において、変調したパラメータCR’を用いた画像処理を行うことができる。特に画像データファイルとしてロウ画像データを含む場合、現像処理などにおいても変調したパラメータCR’を用いることができる。
画像処理装置20はステップS103までの処理で例えば色味残し量Aなどの制御値を算出したら、ステップS111で、その制御値を画像データに対応づけて記憶するための処理を行う。即ち制御値を記憶する情報として記憶部15に出力する。例えば画像データをデータファイル化して記憶部15により記憶媒体15aに記憶させる場合、その画像データの付加情報として制御値を含めるようにする。
このようにすることで、記憶媒体15aからロウ画像データを含む画像データファイルを読み出した場合に、撮像装置1もしくは他の機器において、制御値を用いて画像処理に用いるパラメータCRを変調してパラメータCR’を生成し、パラメータCR’を用いた画像処理を行うことができる。
図9AにおけるステップS101~S104は図5と同様である。
画像処理装置20はステップS104までの処理で変調したパラメータCR’を生成したら、ステップS120で、その変調したパラメータCR’を送信するための処理を行う。即ち変調したパラメータCR’を送信する情報として通信部16に出力する。例えば画像データに対応づけて通信部16から外部機器に送信させるようにする。例えばロウ画像データをデータファイル化して送信する場合、そのロウ画像データに対応する付加情報としてパラメータCR’を含めるようにする。
このようにすることで、撮像装置1以外の機器で現像処理や画像編集処理等を行う場合に、変調したパラメータCR’を用いることができる。
画像処理装置20はステップS103までの処理で例えば色味残し量Aなどの制御値を算出したら、ステップS121で、その制御値を送信するための処理を行う。即ち制御値を送信する情報として通信部16に出力する。例えば画像データに対応づけて通信部16から外部機器に送信させるようにする。例えばロウ画像データをデータファイル化して送信する場合に、そのロウ画像データの付加情報として制御値を含めるようにする。
このようにすることで、撮像装置1以外の機器において、制御値を用いて画像処理に用いるパラメータCRを変調してパラメータCR’を生成し、パラメータCR’を用いた現像処理や画像編集処理等を行うことができる。
以下では、上述のように変調したパラメータCR’を用いることができる画像処理例を挙げていく。
まず図3のリニアマトリクス処理部55での処理例を説明する。
リニアマトリクス処理では、行列計算により色再現処理を行うが、ここでは行列計算に色味残し量Aを組み合わせて、色再現を変調する計算方法の一例について記述する。
また、ホワイトバランスゲインが高色温度光源の色味を残すように設定される場合には、色再現で寒色系の彩度を上げることで、更にその場の雰囲気を強調することができるようにもする。
行列2は行列1に比べて暖色系の色相の彩度を上げる行列である。
行列3は行列1に比べて寒色系の色相の彩度を上げる行列である。
ここでは、色味残し量Aを比率に変換した色味残し係数A’を用いる例とする。
色味残し量Aが、低色温度方向に色味を残す場合は、色味残し係数A’は、0より大きく、1以下の値をとる。値が大きいほど低色温度光源の色味を残す係数となる。
また色味残し量Aが、高色温度方向に色味を残す場合は、色味残し係数A’は0より小さく、-1以上の値をとる。値が小さいほど高色温度光源の色味を残す係数となる。
色味残し量Aが100K以下では、色味残し係数A’は0とする。
色味残し量Aが500Kと100Kの間の場合、色味残し係数A’は線形補間で求める。
また、高色温度方向に300Kほど色味を残すというケースでは、色味残し係数A’=-0.5となる。
・色味残し係数A’=0の場合
色再現用の行列=行列1
・色味残し係数A’>0の場合
色再現用の行列=A’×行列2+(1-A’)×行列1
・色味残し係数A’<0の場合
色再現用の行列=A’×行列3+(1+A’)×行列1
このような色再現パラメータCR’として求められた行列を用いてリニアマトリクス処理を行うことで、色味残し量Aを反映した色再現処理が実現される。
例えば色差信号(R-Y、B-Y、又はCr,Cb)に対する色処理として、特定の色相だけ色再現を変える処理を行うこともある。そこで、特定の色相だけ色再現を変える処理と色味残し量の組み合わせで、色再現を変調してもよい。
なお、以下ではLab色空間を用いて特定の色相だけ色再現を変える処理の例を示していくが、説明する各例の処理はCrCb空間やその他の色空間でも表現できる。ひいては、例えば色差信号(R-Y、B-Y、又はCr,Cb)やRGB信号に対する色処理として、特定の色相だけ色再現を変える処理のパラメータの具体例は各種考えられる。
図10AはLab色空間を示しており、図10Bは図10Aの第1象限を示している。
図10Bでは、光源の色味を打ち消すホワイトバランスゲインで現像した無彩色被写体H1の色相、低色温度光源の色味を残したホワイトバランスゲインで現像した無彩色被写体H2の色相を示しているが、その差分が色味残し量Aとなる。
第1象限内の角度範囲としての領域AR1は肌色の色相の領域である。矢印C1は、肌色色相の彩度を変調させることを示している。領域AR1内の色相について矢印C1の方向性で無彩色に近づけるように変化させることで肌色の彩度を落とすことになる。
つまり肌色領域の画素データについての色補正処理として、彩度抑制のための矢印C1方向のシフト(圧縮)を行うためのパラメータCRを、色味残し量Aに応じて変調する。そして変調したパラメータCR’を用いて、肌色の色情報を矢印C1方向にシフト(彩度圧縮)させる。
例えば、低色温度光源下(2500Kなど)で撮像されたロウ画像を現像する場合に、ホワイトバランス処理において、意図的に光源の温かみのあるオレンジ色の光源色を残す場合には、人物の肌はオレンジ色になり過ぎる場合がある。人物の肌はオレンジ色になり過ぎない方が、印象が良い。そこで上記のように色味残し量Aに応じて肌色の彩度を下げるようにする。これにより、より好印象な画像を現像することができる。
図11Bでは、光源の色味を打ち消すホワイトバランスゲインで現像した無彩色被写体H1の色相、高色温度光源の色味を残したホワイトバランスゲインで現像した無彩色被写体H3の色相を示しており、その差分が色味残し量Aとなる。領域AR1は図10と同じく肌色の領域である。矢印C10は、肌色の色相を黄色方向にシフトさせることを示している。
つまり肌色領域の画素データについての色補正処理として矢印C10方向のシフト(色相変化)を行うためのパラメータCRを、色味残し量Aに応じて変調する。そして変調したパラメータCR’を用いて、肌色の色情報を矢印C10方向にシフト(色相変化)させる。
例えば高色温度光源下(8000Kなど)で撮像されたロウ画像を現像する場合に、ホワイトバランス処理において、意図的に光源のクールな印象のある青色の光源色を残す場合には、人物の肌が青白くなりすぎる場合がある。人物の肌は青色になり過ぎない方が印象が良い。そこで上記のように肌色の色相を黄色方向に回すようにする。これにより、より好印象な画像を現像することができる。
図12Aにおける第3象限から第4象限にかけての角度範囲としての領域AR2は青色の領域、第3象限内の角度範囲としての領域AR3は緑色の領域である。
領域AR2の色相の画素データについて、色情報を矢印C2にシフトさせることで、彩度を上げることができる。従って、例えば色味残し量Aに応じて矢印C2方向のシフト量又はシフト係数としてのパラメータCRを変調し、変調したパラメータCR’を用いて当該シフト処理(青色の彩度上昇)を行うことが考えられる。
領域AR3の色相の画素データについても、色情報を矢印C3にシフトさせることで、彩度を上げることができる。従って、例えば色味残し量Aに応じて矢印C3方向のシフト量又はシフト係数としてのパラメータCRを変調し、変調したパラメータCR’を用いて当該シフト処理(緑色の彩度上昇)を行うことが考えられる。
このような処理により、ホワイトバランス調整での色味残し量A等を反映して、特定の色についての彩度上昇が可能となる。
例えばホワイトバランス調整で高色温度方向に色味を残す場合に、図12Aのように青や緑の彩度を上げることによって、青空や植物の色が濃くなり、風景写真をより印象的にすることができる。
なお領域AR2、AR3の角度範囲を決めるパラメータを、制御値を用いて変調してもよい。これにより、ホワイトバランス調整での色味残し量に応じて彩度上昇を行う色の範囲の設定を行うということが実現できる。
領域AR41は理想的な夕焼けの赤色より黄色寄りの領域、領域AR42は理想的な夕焼けの赤色よりさらに赤寄りの領域としている。
なお、領域AR4が変調対象とする色相の範囲であるが、この変調範囲としての領域AR4は、原点からオフセットOofで示す量だけずらした例としている。もちろんオフセットを設けないで原点からの扇状の領域とする場合もある。
同様に、色相補正のための矢印C42方向のシフト(色相変化)を行うためのパラメータCR2を、色味残し量Aに応じて変調する。そして変調したパラメータCR2’としての係数を用いて、領域AR42の色情報を矢印C42方向にシフト(色相変化)させる。
これにより、赤色から黄色の領域の画素の色相を、理想的な夕焼けの赤色肌色に近づけるような画像処理ができ、しかも、ホワイトバランス調整を反映して矢印C41方向又はC42方向のシフト量が制御されることになる。
例えばホワイトバランス調整で低色温度方向に色味を残す場合に、図12Bのように理想的な夕焼けの赤の色相に向かって、その周りの色相の色を回すことによって、日の出/日の色の写真をより印象的な画像とすることができる。
原点からのオフセットOofは、色を変化させる範囲を限定する目的で設定することができる。
なお、オフセットOofや、領域AR41、AR42の角度範囲を決めるパラメータを、制御値を用いて変調してもよい。これにより、ホワイトバランス調整での色味残し量に応じた変調範囲設定が実現できる。
各矢印C5は、青色や水色の色相の彩度を低下させることを示している。このような場合に、色味残し量Aに応じて矢印C5方向のシフトのための係数を変調することで、変調されたパラメータCR’を用いた処理が行われる。
例えばホワイトバランス調整で高色温度方向に色味を残す場合に、図12Cのように青色や水色の彩度を落とすことによって、水族館や水中の写真で、ほとんどモノクロだが、魚やサンゴといった青色以外のものだけ色が残っているような印象的な撮像画像を得ることができる。またその場合に、青色や水色の彩度の落とし具合がホワイトバランス調整に応じて可変されることになり、適度な色バランスの画像とすることもできる。
なお、もちろん領域AR5以外を完全な白黒(無彩色)とし、領域AR5に含まれる色相の画素データについて、彩度の上昇又は低下を行うようにしてもよい。その場合、彩度変換のためのパラメータCRを色味残し量Aを用いて変調し、変調したパラメータCR’を用いて領域AR5に含まれる色相の画素データについて彩度補正を行うようにすることが考えられる。
また領域AR5の角度範囲を決めるパラメータを、制御値を用いて変調してもよい。これにより、ホワイトバランス調整での色味残し量に応じて、色彩を残す範囲の可変設定が実現できる。
続いて、画像解析を用いる例を説明する。ここでは撮像した画像データについて人物の顔が含まれているか否かを画像解析部25で判定し、それに応じて制御値算出部23、パラメータ変調部24が機能する例を挙げる。
ステップS201で画像処理装置20は、現在のホワイトバランスのモードがオートホワイトバランスモードであるか否かで処理を分岐する。
オートホワイトバランスモードの場合は、画像処理装置20はステップS202で、白色優先モードであるか否かで処理を分岐する。
白色優先モードでない場合、例えば雰囲気優先モード又は標準モードであって、色味残しが行われる場合は、画像処理装置20はステップS203に進み、画像内に人物の顔が含まれているか否かを、画像解析結果として取得し、処理を分岐する。
一方、ステップS203で画像内に顔が含まれていることが確認された場合は、ステップS204に進んでパラメータの変調処理を行う。例えばステップS204で画像処理装置20は、図5のステップS101,S102,S103,S104の処理を行って制御値によって変調されたパラメータCR’を得る。
そしてステップS205で画像処理装置20は、パラメータCR’を用いて処理対象の画像の現像処理を行う。
また図13はオートホワイトバランスモードの場合に適用する処理としたが、これはオートホワイトバランスモードでの色味残し量Aに対応する例としているためであり、特定の被写体検出に応じて変調したパラメータCR’を用いる処理は、オートホワイトバランスモードでない場合にも適用することもできる。
同じく画像解析を用いる例を説明する。ここでは撮像した画像データについて人物の顔が含まれているか否かを画像解析部25で判定し、顔が含まれている場合、その顔の領域を対象として変調されたパラメータCR’を用いた処理が行われる例を説明する。
ステップS211で画像処理装置20は、現在のホワイトバランスのモードがオートホワイトバランスモードであるか否かで処理を分岐する。
オートホワイトバランスモードの場合は、画像処理装置20はステップS212で、白色優先モードであるか否かで処理を分岐する。
白色優先モードでない場合、例えば雰囲気優先モード又は標準モードであって、色味残しが行われる場合は、画像処理装置20はステップS213に進み、画像内に人物の顔が含まれているか否かを、画像解析結果として取得し、処理を分岐する。
一方、ステップS213で画像内に顔が含まれていることが確認された場合は、画像処理装置20はステップS214で処理対象の画像内での顔画像の領域を判定する。図14Cには人物の顔を含む画像を示しているが、破線の範囲内が顔領域ARfとして判定されることになる。
そしてステップS216で画像処理装置20は、パラメータCR、及びパラメータCR’を用いて処理対象の画像の現像処理を行う。即ち、画像内の顔領域ARf内の画素については変調されたパラメータCR’を用いた画像処理を行い、顔領域ARf以外の画素については、パラメータCRを用いた画像処理を行う。
また図15はオートホワイトバランスモードの場合に適用する処理としたが、これはオートホワイトバランスモードでの色味残し量Aに対応する例としているためであり、特定の画像の領域のみ変調したパラメータCR’を用いる処理はオートホワイトバランスモードでない場合にも適用することもできる。
次に、発光装置31での発光状況と組み合わせた例を説明する。
図16は図2の機能により行われる画像処理装置20の処理例を示している。例えば撮像された或る画像データが処理対象となった際に図16の処理が行われる。
ステップS220で画像処理装置20は、現在処理対象としている画像データが撮像時に発光装置31によりフラッシュ発光されたものであるか否かにより処理を分岐する。フラッシュ発光の有無は例えば制御部30からの通知で検出できるようにすればよい。
フラッシュ発光されていた場合は、画像処理装置20はステップS221で、現在のホワイトバランスのモードがオートホワイトバランスモードであるか否かで処理を分岐する。
オートホワイトバランスモードの場合は、画像処理装置20はステップS212で、白色優先モードであるか否かで処理を分岐する。
そしてステップS224で画像処理装置20は、パラメータCR’を用いて処理対象の画像の現像処理を行う。
なお、逆にフラッシュ発光が行われなかった場合に、変調されたパラメータCR’を用いた画像処理が行われるようにする例も考えられる。
またこのような発光に応じた処理例も、オートホワイトバランスモード以外の場合にも適用できる。
3D-LUTと色味残し量Aの組み合わせで色再現パラメータCRを変調してもよい。
例えば色補正処理として3D-LUTを用いることは公知である。例えば入力R、G、B値によって3D-LUTを参照し、出力R、G、B値を得ることで各種の色補正が実現される。
この場合、3D-LUTの選択、又は出力値に対する係数などとしてのパラメータCRを色味残し量Aに応じて変調し、3D-LUTを用いた色補正処理の際に、変調されたパラメータCR’を用いることが考えられる。
次に、色処理以外のパラメータを変調する場合、例えば輝度処理などに用いるパラメータCRを変調する例を説明する。ここではコントラスト調整、シャープネス調整や、トーンカーブを用いたコントラスト/明るさ調整について述べる。
なお、コントラスト調整は図3のガンマ補正部59、シャープネス調整はアパコン処理部56で行われる。
例えば、高色温度光源下(日陰など)で建物など人工物を撮像するときに、あえてホワイトバランスで光源の青色を残す場合には、コントラストを高くし、シャープネスを強めることで人工物のクールな印象を更に強めることができる。
従って、コントラスト調整用のパラメータCRc、シャープネス調整用のパラメータCRsをそれぞれ色味残し量Aに応じて変調してパラメータCRc’、CRs’を求め、これらを用いてガンマ補正部59でのコントラスト調整や、アパコン処理部56でのシャープネス調整が行われるようにする。
そこで例えば図4Bのようにホワイトバランスの優先設定として、「低色温度光源でのAWB時の優先設定」と、新たに「高色温度光源でのAWB時の優先設定」を用意する。
この「低色温度光源でのAWB時の優先設定」とは、低色温度側を残すような設定として「標準」「雰囲気優先」「白色優先」を選択可能とし、また「高色温度光源でのAWB時の優先設定」とは、高色温度側を残すような設定として「標準」「雰囲気優先」「白色優先」を選択可能とする。
このようにモードを用意することで、低色温度光源下で光源のオレンジ色を残す設定と、光源の高色温度光源下で光源の青色を残す設定がそれぞれ独立して選択可能となる。
また低色温度光源でのAWB時の優先設定は、電球光源の室内の撮像画像に効果的である。一方、高色温度光源でのAWB時の優先設定は、晴れた日の日陰などでの撮像画像に効果的である。
色味残し量Aに応じた変調は、トーンカーブに対しておこなってもよい。
例えば、低色温度光源下(電球など)で人物を撮像するときに、あえてホワイトバランスで光源のオレンジ色を残す場合がある。このような場合、トーンカーブにより画像の明るさを押さえることで、光源の雰囲気を残した印象を更に強めることができる。
図17Aでは、破線(TC0)はγ=1として入力と出力が変わらない特性である。
実線のトーンカーブTC1は、表示装置の入出力特性を打ち消すガンマカーブ(γ=2.2)である。
一点鎖線のトーンカーブTC2は、トーンカーブTC1としてのガンマカーブに、図17Dの明るさを上げるカーブを掛け合わせたものである。即ちガンマ補正と明るさ上げを同時に行うカーブである。
点線のトーンカーブTC3は、トーンカーブTC1としてのガンマカーブに、図17Cのコントラストを下げるカーブを掛け合わせたものである。即ちガンマ補正とコントラスト下げを同時に行うカーブである。
以下では第2の実施の形態として本技術の画像処理装置を搭載した印刷装置の構成を説明する。
図18は印刷装置80のブロック図である。この例では図1の画像処理装置90が請求項にいう画像処理装置に相当することになる。
印刷装置80は、画像メモリ81、ディジタル信号処理部82、パラメータ設定部85、ガンマ変換部86、画質補正部87、ヘッド制御部88、プリンタヘッド89で構成されている。
なお、プリンタヘッド89としては各種考えられ、印刷装置80はヘッドタイプによってサーマルプリンタ、インクジェットプリンタ、レーザープリンタ等が想定される。
ディジタル信号処理部82は、色調整演算部83とマスキング演算部84で構成される。
このうち色調整演算部83は、HSV色空間(色相、彩度、明度からなる色空間)上での色調整を実行する。この色調整演算部83で実行される演算処理は、RGBデータをHSVデータに変換する処理、データ変換後のHSVデータに対する色調整処理、色調整後のHSVデータをRGBデータに変換する処理で構成される。
色調整処理をディジタル信号処理部82の演算処理で実現する方法は、処理デバイス(マイクロプロセッサ)の演算スピードさえ十分であれば、高い演算精度を期待できる。
なお、パラメータは、色相、彩度、明度、指定された位相範囲内における変化の度合いの4種類である。
本実施の形態の場合、パラメータ設定部85は、図2に示した制御値算出部23,パラメータ変調部24としての機能を備える。また画像解析部25としての機能を備えても良い。
画質補正部87は、輪郭補正、シャープネスその他の画質を改善する既知の補正処理を実行する処理デバイスである。
プリンタヘッド89は印刷用紙に対して印刷動作を行う。例えばサーマルヘッドの場合、印刷幅に亘って発熱体が配列されたデバイスとされる。カラー画像の印刷には、昇華性材料をフィルムに塗布したインクフィルムを使用する。
これにより、ホワイトバランスゲインを反映させた、より高度な画像処理が実現される。
なお、以上の画像処理装置90で行う処理を、コンピュータ装置にインストールされたプリンタドライバで行うようにしても良い。
例えばプリンタドライバが、第1,第2のホワイトバランスゲインを用いて制御値を算出する処理を行うようにする。
或いはプリンタドライバが、制御値を算出する処理と、制御値に応じて画像処理のためのパラメータCRを変調する処理を行うようにする。
或いはプリンタドライバが、制御値を算出する処理と、制御値に応じて画像処理のためのパラメータCRを変調する処理と、変調したパラメータCR’を用いた画像処理を行うようにする。
このようにプリンタドライバというソフトウエアで、印刷画像に適用する本技術の画像処理装置を実現することも考えられる。
以上のように実施の形態の撮像装置1や印刷装置80には画像処理装置20、90が搭載されている。そして実施の形態の画像処理装置(20、90)は、第1のホワイトバランスゲインと第2のホワイトバランスゲインを用いて制御値を算出する制御値算出部23と、制御値算出部23で算出した制御値(例えば色味残し量A)を用いて画像処理パラメータCRを変調するパラメータ変調部24を備えている。
このように第1,第2のホワイトバランスゲインを用いて制御値を算出し、その制御値を用いて、画像処理過程の何らかのパラメータCRを変調することで、ホワイトバランスゲインに応じた撮像画像の画像処理(画像調整、画像エフェクト等)という、これまでに無い画像処理手法を提供できる。これにより、より高品質な画像を生成し得る画像処理が可能となる。
実施の形態では、第1のホワイトバランスゲインと第2のホワイトバランスゲインを用いて色味残し量Aを反映した制御値を求めるようにしたが、制御値は正確な色味残し量Aを反映した値とすることに限定されない。
例えば第1のホワイトバランスゲインを基準とし、実際にホワイトバランス制御を行うゲインを第2のホワイトバランスゲインとした場合においては、基準(第1のホワイトバランスゲイン)をどのように設定するかは多様に考えられる。つまり第1のホワイトバランスゲインを、撮像時の光源の色味を完全に打ち消すホワイトバランスゲインとすることに限られない。従って第1のホワイトバランスゲインは或る量の色温度シフトを意図する値であったり、ユーザ設定による値であったりしてもよい。
また制御値は、第1のホワイトバランスゲインと第2のホワイトバランスゲインの差分のような色味残し量Aのみでなく、第1,第2のホワイトバランスゲインの乗算値、除算値、加算値、平均値などを反映した値とする多様な例が想定される。
これにより処理対象の画像に応じた第1のホワイトバランスゲインが求められ、算出される制御値は処理対象の画像内容に応じたパラメータ変調のための値とすることができる。
なお第1のホワイトバランスゲインは、固定の値であってもよい。また記憶された、いくつかの値から一つが選択されるようにしてもよい。
これにより処理対象の画像に応じた第2のホワイトバランスゲインが求められ、算出される制御値は処理対象の画像内容に応じたパラメータ変調のための値とすることができる。
なお第2のホワイトバランスゲインも固定の値であってもよい。また記憶された、いくつかの値の一つから選択されるようにしてもよい。
これにより制御値は処理対象の画像内容の色味残し量に応じたものとなり、これを画像処理等のパラメータ変調のための値とすることで、ホワイトバランス調整での色味残し量に応じた画像処理ということが実現できることになる。
なお、実施の形態ではオートホワイトバランスモードにおいて、光源の色味を打ち消す第1のホワイトバランスゲインと、光源の色味を残す第2のホワイトバランスゲインから色味残し量Aを求めたが、オートホワイトバランスモード以外でも実施の形態の技術は適用できる。
例えば先に説明したようにホワイトバランスモードとしては説明したように、「太陽光」「日陰」「曇天」「蛍光灯(温白色/白色/昼白色/昼光色)」「フラッシュ」「水中」などを選択できる。それらのモードにおいて、更にユーザがホワイトバランスゲインを調整できるようにした場合、それらのモードにおけるホワイトバランスゲイン設定を第1のホワイトバランスゲインとし、ユーザが調整したホワイトバランスゲインを第2のホワイトバランスゲインとすれば、各モードにおける色味差分を反映した制御値が算出でき、それによりパラメータ変調を行うことで、高度な画像処理が実現できる。
画像データに対する処理内容としては、画像データの色、輝度、コントラスト、シャープネスなど多様に想定される。また画像データに対する処理としては、例えば画像の現像処理、記憶のための処理、再生表示のための処理、送信のための処理、印刷のための処理などが想定される。
このような各種の画像データ処理で用いられる画像処理パラメータCRが、ホワイトバランスゲインを用いて生成された制御値により変調され、画像信号処理部21等は変調された画像処理パラメータCR’により所定の画像処理を行う。
従ってホワイトバランスゲインに応じた(例えば色味残し量を反映した)画像データ処理が実行され、撮像時の光源色に適した処理が可能となる。
このようにすることで画像データに対応する変調されたパラメータCR’を任意の時点で取得できる。従って後の時点で、例えば記憶媒体15aから読み出したり、或いは何らかの手法で入力された画像データに対して、パラメータCR’を用いた画像データ処理を行うことができる。換言すれば、パラメータ変調機能を持たない機器でも、ホワイトバランスゲインから求めた制御値を反映して変調されたパラメータCR’を用いた処理が可能となる。
なお、図8Bのように制御値を記憶するようにすることで、制御値に用いて後の時点でパラメータ変調を行い、変調されたパラメータCR’を利用することもできる。
このようにすることで、外部機器において画像データに対応する変調されたパラメータCR’を取得できる。従って外部機器側で画像データに対してパラメータCR’を用いて、ホワイトバランスゲインに応じた画像処理を行うことができる。
なお、図9Bのように制御値を送信することで、外部機器において制御値に用いてパラメータ変調を行い、変調されたパラメータCR’を利用することもできる。
これにより例えば制御値は、第1のホワイトバランスゲイン(例えば本来のホワイトバランス調整のためのゲイン)と、ユーザが望むホワイトバランス調整のためホワイトバランスゲインの差分などを反映した値とすることができる。
従って制御値は処理対象の画像に対するユーザのホワイトバランス調整意思に応じたパラメータ変調のための値とすることができ、ユーザの望むホワイトバランスに適応した画像処理が可能になる。
画像解析部25により、特定の画像条件(例えば顔の有無)を判定し、それに応じて、画像処理パラメータの変調を行うか否かが決定される。従って特定の画像条件のみ画像処理パラメータを変調することで、特定の画像条件に応じた適切な画像処理を実行できる。例えば顔検出に応じて、顔の色合いを好ましい色合いにするように画像処理パラメータを変調できる。従ってより高品質な画像をユーザに提供できる。
また特にユーザの顔画像の色制御を目的とした画像処理についてのみ本技術を適用するような場合、制御値の算出及び画像処理パラメータの変調という処理が無駄に行われなくなるため、処理負担の削減につながる。
なお、画像解析による画像条件としては、顔や特定の被写体の有無だけでなく、さらに被写体の個々人の別、被写体の大きさ、画像の明るさ、ぼけ具合、雰囲気等を判定し、それに応じて、画像処理パラメータの変調を行うか否かが決定されるようにすることも考えられる。
画像解析部25により、特定の画像領域(例えば人物の顔、人物、動物、空、海などが写されている領域)を判定し、その領域について変調された画像処理パラメータCR’が用いられる。従って特定の被写体について他の被写体と異なる適切な画像処理を実行できる。例えば顔検出に応じて、顔の範囲のみ、色合いを顔として好ましい色合いにし、背景等にはその色調整を加えないような高度な画像処理が可能になる。
また目的の被写体が存在しない場合は制御値の算出及び画像処理パラメータの変調が行われないことで処理負担の削減につながる。
例えば撮像時に発光が行われた場合に変調した画像処理パラメータCR’を用いて画像処理を行うようにすることで、発光に応じた画像処理が可能となる。
なお逆に撮像時に発光が行われなかった場合に変調した画像処理パラメータCR’を用いて画像処理を行うようにすることも考えられる。いずれにしても発光状況に応じた画像処理が可能となる。
また発光装置31を備えた撮像装置1に限らずにこのような処理は可能である。例えば画像データに撮像時の情報としてフラッシュ発光の有無の情報を付加しておく。画像処理の際には、その情報を参照して、画像処理パラメータの変調を行うか否かを決めればよい。これにより撮像装置1以外の装置、或いは撮像時以外の処理であっても、発光状態に応じた画像処理が可能となる。
具体的には第1のホワイトバランスゲインは、通常のホワイトバランス処理、即ち光源の色味を打ち消すホワイトバランス調整のためのホワイトバランスゲインである。例えば白色優先モードのホワイトバランスゲインが第1のホワイトバランスゲインとなる。
一方、撮像装置1では雰囲気優先モードや標準モードが用意されており、雰囲気優先モード(或いは標準モード)のホワイトバランスゲインが第2のホワイトバランスゲインとなる。図13や図15の処理では、このように第2のホワイトバランスゲインが用いられるモードが選択されているときに制御値の算出や制御値によるパラメータ変調が行われる例を示した。
このように通常の(第1の)ホワイトバランスゲインとは異なる第2のホワイトバランスゲインによりホワイトバランス調整が行われる画像に対して、制御値を用いたパラメータ変調を行うことで、その第2のホワイトバランスモードで得られる画像に適応させた画像処理が可能となる。これにより画像品質を向上させることができる。
これにより、実行するホワイトバランス調整と親和性の高い色処理など、より高度な色処理が可能となる。
例えば或る特定の色相領域の画素データを特定の色相にシフトさせたり、その彩度を調整したりする処理に用いるパラメータを、ホワイトバランスゲインに応じて変調する。
これにより、実行するホワイトバランス調整と親和性の高い色処理、例えばホワイトバランス調整に関わらず残したい色の領域の色を補正したり変化させたりする処理など、より高度な色処理が可能となる。特に特定の色相領域を好ましい色状態に調整できる。
例えばコントラスト(ガンマ補正)、明るさ、シャープネス、トーンカーブを用いた処理など、色以外の現像処理パラメータ(例えば輝度処理用のパラメータ)をホワイトバランスゲインに応じて変調する。
これにより、実行するホワイトバランス調整と親和性の高いコントラスト調整、シャープネス調整など、より高度な画像処理が可能となる。
即ち図5、図7、図8A,図8B、図9A、図9B等の処理を演算処理装置に実行させるプログラムである。
そしてこのようなプログラムはコンピュータ装置等の機器に内蔵されている記憶媒体や、CPUを有するマイクロコンピュータ内のROM等に予め記憶しておくことができる。あるいはまた、半導体メモリ、メモリカード、光ディスク、光磁気ディスク、磁気ディスクなどのリムーバブル記憶媒体に、一時的あるいは永続的に格納(記憶)しておくことができる。またこのようなリムーバブル記憶媒体は、いわゆるパッケージソフトウェアとして提供することができる。
また、このようなプログラムは、リムーバブル記憶媒体からパーソナルコンピュータ等にインストールする他、ダウンロードサイトから、LAN、インターネットなどのネットワークを介してダウンロードすることもできる。
(1)
第1のホワイトバランスゲインと第2のホワイトバランスゲインを用いて制御値を算出する制御値算出部と、
前記制御値算出部で算出した制御値を用いて画像処理パラメータを変調するパラメータ変調部と、を備えた
画像処理装置。
(2)
前記制御値算出部は、処理対象の画像に応じた前記第1のホワイトバランスゲインを算出する処理も行う
上記(1)に記載の画像処理装置。
(3)
前記制御値算出部は、処理対象の画像に応じた前記第2のホワイトバランスゲインを算出する処理も行う
上記(1)又は(2)に記載の画像処理装置。
(4)
前記第1のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を打ち消す方向に調整するためのホワイトバランスゲインで、
前記第2のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を、前記第1のホワイトバランスゲインよりは残す方向に調整するためのホワイトバランスゲインであり、
前記制御値算出部が算出する前記制御値は光源の色味残し量を反映した制御値である
上記(1)乃至(3)のいずれかに記載の画像処理装置。
(5)
前記制御値を用いて変調された画像処理パラメータを用いて画像データに対する処理を行う画像信号処理部を備えた
上記(1)乃至(4)のいずれかに記載の画像処理装置。
(6)
前記制御値を用いて変調された画像処理パラメータを記憶媒体に記憶する情報として出力する処理を行う出力処理部を備えた
上記(1)乃至(5)のいずれかに記載の画像処理装置。
(7)
前記制御値を用いて変調された画像処理パラメータを外部機器に送信する情報として出力する処理を行う出力処理部を備えた
上記(1)乃至(6)のいずれかに記載の画像処理装置。
(8)
前記制御値算出部は、前記第2のホワイトバランスゲインを、ユーザ入力情報を用いて設定する
上記(1)(2)(4)(5)(6)(7)のいずれかに記載の画像処理装置。
(9)
画像解析部を備え、
前記制御値算出部による前記制御値の算出、及び前記パラメータ変調部による画像処理パラメータの変調は、前記画像解析部の解析結果に応じて実行する
上記(1)乃至(8)のいずれかに記載の画像処理装置。
(10)
画像解析部を備え、
前記画像信号処理部は、処理対象の画像内の、前記画像解析部の解析結果により特定される領域の信号処理について、前記パラメータ変調部で変調された画像処理パラメータを用いる
上記(5)に記載の画像処理装置。
(11)
前記制御値算出部による前記制御値の算出、及び前記パラメータ変調部による画像処理パラメータの変調は、処理対象の画像の撮像時の発光装置の動作状況に応じて実行される
上記(1)乃至(10)のいずれかに記載の画像処理装置。
(12)
前記第1のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を打ち消す第1のホワイトバランスモードで用いるホワイトバランスゲインで、
前記第2のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を残す第2のホワイトバランスモードで用いるホワイトバランスゲインであり、
ホワイトバランス調整について前記第2のホワイトバランスモードが選択された画像が処理対象である場合に、前記制御値算出部による前記制御値の算出が行われる
上記(1)乃至(11)のいずれかに記載の画像処理装置。
(13)
前記制御値を用いて変調する画像処理パラメータは、画像データの色処理に用いるパラメータである
上記(1)乃至(12)のいずれかに記載の画像処理装置。
(14)
前記制御値を用いて変調する画像処理パラメータは、画像データの特定の色相の変調を行う処理に用いるパラメータである
上記(1)乃至(13)のいずれかに記載の画像処理装置。
(15)
前記制御値を用いて変調する画像処理パラメータは、色処理以外の現像処理に用いるパラメータである
上記(1)乃至(14)のいずれかに記載の画像処理装置。
(16)
演算処理装置が実行する画像処理方法として、
第1のホワイトバランスゲインと第2のホワイトバランスゲインを用いて制御値を算出する制御値算出手順と、
前記制御値算出手順で算出した制御値を用いて画像処理パラメータを変調するパラメータ変調手順と、を行う
画像処理方法。
(17)
第1のホワイトバランスゲインと第2のホワイトバランスゲインを用いて制御値を算出する制御値算出ステップと、
前記制御値算出ステップで算出した制御値を用いて画像処理パラメータを変調するパラメータ変調ステップと、
を演算処理装置に実行させるプログラム。
(18)
前記制御値算出ステップでは、処理対象の画像に応じた前記第1のホワイトバランスゲインを算出する処理も演算処理装置に実行させる
上記(17)に記載のプログラム。
(19)
前記制御値算出ステップでは、処理対象の画像に応じた前記第2のホワイトバランスゲインを算出する処理も演算処理装置に実行させる
上記(17)又は(18)に記載のプログラム。
(20)
前記第1のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を打ち消す方向に調整するためのホワイトバランスゲインで、
前記第2のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を、前記第1のホワイトバランスゲインよりは残す方向に調整するためのホワイトバランスゲインであり、
前記制御値算出ステップで算出する前記制御値は光源の色味残し量を反映した制御値である
上記(17)乃至(19)のいずれかに記載のプログラム。
Claims (20)
- 第1のホワイトバランスゲインと第2のホワイトバランスゲインを用いて制御値を算出する制御値算出部と、
前記制御値算出部で算出した制御値を用いて画像処理パラメータを変調するパラメータ変調部と、を備え、
前記第1のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を打ち消す方向に調整するためのホワイトバランスゲインで、
前記第2のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を、前記第1のホワイトバランスゲインよりは残す方向に調整するためのホワイトバランスゲインであり、
前記制御値算出部が算出する制御値は光源の色味残し量を反映した制御値である
画像処理装置。 - 第1のホワイトバランスゲインと第2のホワイトバランスゲインを用いて制御値を算出する制御値算出部と、
前記制御値算出部で算出した制御値を用いて画像処理パラメータを変調するパラメータ変調部と、を備え、
前記第1のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を打ち消す第1のホワイトバランスモードで用いるホワイトバランスゲインで、
前記第2のホワイトバランスゲインは、処理対象の画像の撮像時の光源の色味を残す第2のホワイトバランスモードで用いるホワイトバランスゲインであり、
ホワイトバランス調整について前記第2のホワイトバランスモードが選択された画像が処理対象である場合に、前記制御値算出部による制御値の算出が行われる
画像処理装置。 - 前記制御値算出部は、処理対象の画像に応じた前記第1のホワイトバランスゲインを算出する処理も行う
請求項1又は請求項2に記載の画像処理装置。 - 前記制御値算出部は、処理対象の画像に応じた前記第2のホワイトバランスゲインを算出する処理も行う
請求項1又は請求項2に記載の画像処理装置。 - 前記制御値を用いて変調された画像処理パラメータを用いて画像データに対する処理を行う画像信号処理部を備えた
請求項1又は請求項2に記載の画像処理装置。 - 前記制御値を用いて変調された画像処理パラメータを記憶媒体に記憶する情報として出力する処理を行う出力処理部を備えた
請求項1又は請求項2に記載の画像処理装置。 - 前記制御値を用いて変調された画像処理パラメータを外部機器に送信する情報として出力する処理を行う出力処理部を備えた
請求項1又は請求項2に記載の画像処理装置。 - 前記制御値算出部は、前記第2のホワイトバランスゲインを、ユーザ入力情報を用いて設定する
請求項1又は請求項2に記載の画像処理装置。 - 画像解析部を備え、
前記制御値算出部による前記制御値の算出、及び前記パラメータ変調部による画像処理パラメータの変調は、前記画像解析部の解析結果に応じて実行する
請求項1又は請求項2に記載の画像処理装置。 - 画像解析部を備え、
前記画像信号処理部は、処理対象の画像内の、前記画像解析部の解析結果により特定される領域の信号処理について、前記パラメータ変調部で変調された画像処理パラメータを用いる
請求項5に記載の画像処理装置。 - 前記制御値算出部による前記制御値の算出、及び前記パラメータ変調部による画像処理パラメータの変調は、処理対象の画像の撮像時の発光装置の動作状況に応じて実行される
請求項1又は請求項2に記載の画像処理装置。 - 前記制御値を用いて変調する画像処理パラメータは、画像データの色処理に用いるパラメータである
請求項1又は請求項2に記載の画像処理装置。 - 前記制御値を用いて変調する画像処理パラメータは、画像データの特定の色相の変調を行う処理に用いるパラメータである
請求項1又は請求項2に記載の画像処理装置。 - 前記制御値を用いて変調する画像処理パラメータは、色処理以外の現像処理に用いるパラメータである
請求項1又は請求項2に記載の画像処理装置。 - 演算処理装置が実行する画像処理方法として、
処理対象の画像の撮像時の光源の色味を打ち消す方向に調整するための第1のホワイトバランスゲインと、処理対象の画像の撮像時の光源の色味を前記第1のホワイトバランスゲインよりは残す方向に調整するための第2のホワイトバランスゲインを用いて光源の色味残し量を反映した制御値を算出する制御値算出手順と、
前記制御値算出手順で算出した制御値を用いて画像処理パラメータを変調するパラメータ変調手順と、を行う
画像処理方法。 - 演算処理装置が実行する画像処理方法として、
処理対象の画像の撮像時の光源の色味を打ち消す第1のホワイトバランスモードで用いる第1のホワイトバランスゲインと、処理対象の画像の撮像時の光源の色味を残す第2のホワイトバランスモードで用いる第2のホワイトバランスゲインを用いて制御値を算出する処理を、ホワイトバランス調整について前記第2のホワイトバランスモードが選択された画像が処理対象である場合に行う制御値算出手順と、
前記制御値算出手順で算出した制御値を用いて画像処理パラメータを変調するパラメータ変調手順と、を行う
画像処理方法。 - 処理対象の画像の撮像時の光源の色味を打ち消す方向に調整するための第1のホワイトバランスゲインと、処理対象の画像の撮像時の光源の色味を前記第1のホワイトバランスゲインよりは残す方向に調整するための第2のホワイトバランスゲインを用いて光源の色味残し量を反映した制御値を算出する制御値算出ステップと、
前記制御値算出ステップで算出した制御値を用いて画像処理パラメータを変調するパラメータ変調ステップと、
を演算処理装置に実行させるプログラム。 - 処理対象の画像の撮像時の光源の色味を打ち消す第1のホワイトバランスモードで用いる第1のホワイトバランスゲインと、処理対象の画像の撮像時の光源の色味を残す第2のホワイトバランスモードで用いる第2のホワイトバランスゲインを用いて制御値を算出する処理を、ホワイトバランス調整について前記第2のホワイトバランスモードが選択された画像が処理対象である場合に行う制御値算出ステップと、
前記制御値算出ステップで算出した制御値を用いて画像処理パラメータを変調するパラメータ変調ステップと、
を演算処理装置に実行させるプログラム。 - 前記制御値算出ステップでは、処理対象の画像に応じた前記第1のホワイトバランスゲインを算出する処理も演算処理装置に実行させる
請求項17又は請求項18に記載のプログラム。 - 前記制御値算出ステップでは、処理対象の画像に応じた前記第2のホワイトバランスゲインを算出する処理も演算処理装置に実行させる
請求項17又は請求項18に記載のプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017212790 | 2017-11-02 | ||
JP2017212790 | 2017-11-02 | ||
PCT/JP2018/031736 WO2019087547A1 (ja) | 2017-11-02 | 2018-08-28 | 画像処理装置、画像処理方法、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019087547A1 JPWO2019087547A1 (ja) | 2020-11-12 |
JP7156302B2 true JP7156302B2 (ja) | 2022-10-19 |
Family
ID=66333459
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019549891A Active JP7156302B2 (ja) | 2017-11-02 | 2018-08-28 | 画像処理装置、画像処理方法、プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11190745B2 (ja) |
JP (1) | JP7156302B2 (ja) |
WO (1) | WO2019087547A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7408408B2 (ja) | 2020-01-22 | 2024-01-05 | アルパイン株式会社 | 表示システム |
US11917272B2 (en) * | 2020-10-28 | 2024-02-27 | Semiconductor Components Industries, Llc | Imaging systems for multi-spectral imaging |
JP2022135677A (ja) * | 2021-03-05 | 2022-09-15 | キヤノン株式会社 | 画像処理装置、その制御方法及びプログラム |
CN115103172A (zh) * | 2022-05-07 | 2022-09-23 | 浙江大华技术股份有限公司 | 一种图像色彩矫正方法、设备及计算机可读存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011078137A (ja) | 2011-01-12 | 2011-04-14 | Fujifilm Corp | 画像処理装置および方法並びにプログラム |
JP2012085043A (ja) | 2010-10-08 | 2012-04-26 | Olympus Imaging Corp | 画像処理装置、画像処理方法、および撮像装置 |
JP2014014044A (ja) | 2012-07-05 | 2014-01-23 | Sony Corp | 画像処理装置、画像処理方法、および、プログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4668956B2 (ja) * | 2007-06-29 | 2011-04-13 | 富士フイルム株式会社 | 画像処理装置および方法並びにプログラム |
JP4724170B2 (ja) | 2007-11-05 | 2011-07-13 | セイコーエプソン株式会社 | 画像処理装置、出力装置、画像処理方法、出力方法、画像処理プログラム及び出力プログラム |
JP2011166607A (ja) | 2010-02-12 | 2011-08-25 | Casio Computer Co Ltd | 画像処理装置、画像処理方法及び画像処理プログラム |
JP5706705B2 (ja) | 2011-02-04 | 2015-04-22 | キヤノン株式会社 | 画像処理装置およびその制御方法、ならびに撮像装置 |
JP5821214B2 (ja) | 2011-02-28 | 2015-11-24 | ソニー株式会社 | 画像処理装置と画像処理方法およびプログラム |
JP2014168120A (ja) | 2013-02-28 | 2014-09-11 | Nikon Corp | 画像処理装置および画像処理プログラム並びに電子カメラ |
-
2018
- 2018-08-28 WO PCT/JP2018/031736 patent/WO2019087547A1/ja active Application Filing
- 2018-08-28 JP JP2019549891A patent/JP7156302B2/ja active Active
- 2018-08-28 US US16/758,734 patent/US11190745B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012085043A (ja) | 2010-10-08 | 2012-04-26 | Olympus Imaging Corp | 画像処理装置、画像処理方法、および撮像装置 |
JP2011078137A (ja) | 2011-01-12 | 2011-04-14 | Fujifilm Corp | 画像処理装置および方法並びにプログラム |
JP2014014044A (ja) | 2012-07-05 | 2014-01-23 | Sony Corp | 画像処理装置、画像処理方法、および、プログラム |
Also Published As
Publication number | Publication date |
---|---|
US11190745B2 (en) | 2021-11-30 |
US20200374501A1 (en) | 2020-11-26 |
JPWO2019087547A1 (ja) | 2020-11-12 |
WO2019087547A1 (ja) | 2019-05-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10412296B2 (en) | Camera using preview image to select exposure | |
JP7156302B2 (ja) | 画像処理装置、画像処理方法、プログラム | |
CN101527860B (zh) | 白平衡控制设备及其控制方法和摄像设备 | |
JP4434073B2 (ja) | 画像処理装置および撮像装置 | |
US7522191B2 (en) | Optical image capturing device | |
EP2426927B1 (en) | Image processing apparatus, image processing method and computer program | |
US8164648B2 (en) | Image processing apparatus and image processing apparatus control method | |
JP5253000B2 (ja) | 撮像装置 | |
KR102158844B1 (ko) | 영상 처리 장치, 영상 처리 방법, 및 컴퓨터 판독가능 기록매체 | |
CN101019416A (zh) | 成像设备 | |
JP2007259344A (ja) | 撮像装置および画像処理方法 | |
US8810681B2 (en) | Image processing apparatus and image processing method | |
US8687091B2 (en) | Image capturing systems and methods utilizing customizable look management | |
Brown | Color processing for digital cameras | |
JP2010091596A (ja) | 表示装置、撮像装置およびプロジェクタ | |
JP2005051298A (ja) | ディジタルカメラ及びテンプレートデータ構造 | |
JP4752434B2 (ja) | 色補正処理プログラムおよび電子カメラ | |
JP2005109999A (ja) | ホワイトバランス調整方法およびカメラ | |
JP2009239323A (ja) | 映像信号処理装置 | |
JP5975705B2 (ja) | 撮像装置およびその制御方法、画像処理装置および画像処理のための方法 | |
JP2015233338A (ja) | 表示装置、撮像装置およびプロジェクタ | |
JP2012010238A (ja) | 撮像装置 | |
JP2019035988A (ja) | 表示装置および撮像装置 | |
JP2017182074A (ja) | 表示装置、撮像装置およびプロジェクタ | |
JP2011009894A (ja) | 画像処理装置及び電子カメラ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210726 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220712 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220826 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20220826 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220906 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220919 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7156302 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |