JP2013187596A - 撮像装置、画像処理方法及びプログラム - Google Patents
撮像装置、画像処理方法及びプログラム Download PDFInfo
- Publication number
- JP2013187596A JP2013187596A JP2012048921A JP2012048921A JP2013187596A JP 2013187596 A JP2013187596 A JP 2013187596A JP 2012048921 A JP2012048921 A JP 2012048921A JP 2012048921 A JP2012048921 A JP 2012048921A JP 2013187596 A JP2013187596 A JP 2013187596A
- Authority
- JP
- Japan
- Prior art keywords
- hue
- image data
- white balance
- image
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Color Television Image Signal Generators (AREA)
Abstract
【解決手段】撮像装置100であって、外部光源としてのタングステン光下での撮像であるか否かを判定する判定部5aと、タングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及びストロボを発光して撮像した画像の画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定するホワイトバランス調整部5hと、を備えている。
【選択図】図1
Description
ストロボを発光して撮像した画像の画像データを取得する画像取得手段と、外部光源としてのタングステン光下での撮像であるか否かを判定する判定手段と、前記判定手段によりタングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び前記画像取得手段により取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定するホワイトバランス調整手段と、を備えたことを特徴としている。
撮像装置を用いた画像処理方法であって、ストロボを発光して撮像した画像の画像データを取得する処理と、外部光源としてのタングステン光下での撮像であるか否かを判定する処理と、タングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定する処理と、を含むことを特徴としている。
撮像装置のコンピュータを、ストロボを発光して撮像した画像の画像データを取得する画像取得手段、外部光源としてのタングステン光下での撮像であるか否かを判定する判定手段、前記判定手段によりタングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び前記画像取得手段により取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定するホワイトバランス調整手段、として機能させることを特徴としている。
図1は、本発明を適用した一実施形態の撮像装置100の概略構成を示すブロック図である。
即ち、ユニット回路部4は、入力された画像のRGB成分のゲイン量を調整するゲイン調整部4aを具備しており、このゲイン調整部4aにより調整されたRGBの各色成分毎のゲイン量(ホワイトバランス調整値)に基づいて撮像画像P1のホワイトバランスを調整する。
具体的には、ゲイン調整部4aは、所定の撮像モードに対応したグレー画素推定条件に基づいて撮像画像P1に含まれるグレー成分を特定して、当該グレー成分の画素のRGBの各色成分のうち、R成分及びB成分の平均値がG成分の平均値と略等しくなるようにR成分及びB成分のゲイン量を調整する。そして、ユニット回路部4は、ゲイン調整部4aにより調整されたRGBの各色成分毎のゲイン量に基づいて、RGB画像データを増幅することで撮像画像P1のホワイトバランスを調整する。
なお、図3〜図6(後述)の各図における被写体の顔に相当する部分には、「顔」と表記して模式的に表している。
また、例えば、タングステン光撮像モードが設定されている状態では、ストロボ光画像P2のYUV画像データの生成に加えて、ゲイン調整部4aは、RGB画像データのRGBの各色成分毎のゲイン量をタングステン光に対応した第2ホワイトバランス調整値に調整する。ユニット回路部4は、第2ホワイトバランス調整値でRGB画像データを増幅するホワイトバランス調整を行って、YUV色空間に対応するタングステン光画像P3(図5(a)参照)のYUV画像データを生成する。
なお、ユニット回路部4により生成された各画像データ、例えば、ストロボ光画像P2やタングステン光画像P3のYUV画像データ等は、メモリ6に出力されて、当該メモリ6に一時的に記憶される。
即ち、判定部(判定手段)5aは、ストロボを発光して行われた撮像が外部光源としてのタングステン光下での撮像であるか否かを判定する。具体的には、判定部5aは、例えば、ユーザによる操作入力部10の所定操作に基づいて選択指示されたタングステン光撮像モードが撮像モードとして設定されているか否かに応じて、外部光源としてのタングステン光下での撮像であるか否かを判定する。
即ち、第1画像取得部(第1取得手段)5bは、撮像画像P1のRGB画像データに対してストロボ発光に対応した第1ホワイトバランス調整値でホワイトバランス調整されたストロボ光画像P2のYUV画像データを取得する。具体的には、撮像モードとしてタングステン光撮像モードが設定されている状態で、第1画像取得部5bは、ユニット回路部4により生成されたストロボ光画像P2のYUV画像データをメモリ6から取得する。
以下の説明では、ストロボ光画像P2の輝度Y及び色差U、Vは、例えば、それぞれ階調が8bit[0〜255]のデータとする。
即ち、第2画像取得部(第2取得手段)5cは、撮像画像P1のRGB画像データに対してタングステン光に対応した第2ホワイトバランス調整値でホワイトバランス調整されたタングステン光画像P3のYUV画像データを取得する。具体的には、撮像モードとしてタングステン光撮像モードが設定されている状態で、第2画像取得部5cは、ユニット回路部4により生成されたタングステン光画像P3のYUV画像データをメモリ6から取得する。
以下の説明では、タングステン光画像P3の輝度Y及び色差U、Vは、例えば、それぞれ階調が8bit[0〜255]のデータとする。
即ち、ストロボ光色相差情報算出部5dは、第1画像取得部5bにより取得されたストロボ光画像P2のYUV画像データをHSV色空間に対応する画像データ(HSV画像データ)に変換して、各画素(x, y)の色相H[0〜359]、彩度S[0〜255]及び明度V[0〜255]を算出する。ここで、ストロボ光画像P2のYUV画像データは、撮像画像P1のRGB画像データをストロボ発光に対応した第1ホワイトバランス調整値でホワイトバランス調整した画像データである。従って、ストロボ光画像P2のYUV画像データから変換されたHSV画像データの各画素の色相H[0〜359](図4(b)参照)は、撮像画像P1のRGB画像データの各画素についてのストロボ光に対応する色相(第1色相情報)との差分に相当し、また、ストロボ光画像P2のHSV画像データの各画素の彩度S[0〜255]及び明度V[0〜255]も撮像画像P1のRGB画像データの各画素に対して上記と同様の相関関係を有する。
そして、ストロボ光色相差情報算出部5dは、例えば、ストロボ光画像P2のHSV画像データの各画素の彩度成分Cs(x, y)及び明度成分Cv(x, y)を、第1色相差情報として取得する。
例えば、図4(b)に模式的に示すストロボ光画像P2のHSV画像データの各画素の色相Hについて説明すると、ストロボ光が当たっている人肌部分(破線2aで囲んだ領域)の色相Hは[40]、背景部分(破線2bで囲んだ領域)の色相Hは[30]であり、ほぼ等しくなる。
このように、ストロボ光色相差情報算出部5dは、ストロボ光に対応する色相に係る第1色相情報とRGB画像データの各画素の色相との間の第1色相差情報を算出する第1算出手段を構成している。
即ち、タングステン光色相差情報算出部5eは、第2画像取得部5cにより取得されたタングステン光画像P3のYUV画像データをHSV色空間に対応する画像データ(HSV画像データ)に変換して、各画素(x, y)の色相H[0〜359]、彩度S[0〜255]及び明度V[0〜255]を算出する。つまり、タングステン光画像P3のYUV画像データは、撮像画像P1のRGB画像データをタングステン光に対応した第2ホワイトバランス調整値でホワイトバランス調整した画像データである。従って、タングステン光画像P3のYUV画像データから変換されたHSV画像データの各画素の色相H[0〜359](図5(b)参照)は、撮像画像P1のRGB画像データの各画素についてのタングステン光に対応する色相(第3色相情報)との差分に相当し、また、タングステン光画像P3のHSV画像データの各画素の彩度S[0〜255]及び明度V[0〜255]も撮像画像P1のRGB画像データの各画素の画素値に対して上記と同様の相関関係を有する。
そして、タングステン光色相差情報算出部5eは、例えば、タングステン光画像P3のHSV画像データの各画素の彩度成分Ds(x, y)を、第3色相差情報として取得する。
例えば、図5(b)に模式的に示すタングステン光画像P3のHSV画像データの各画素の色相Hについて説明すると、ストロボ光が当たっている人肌部分(破線3aで囲んだ領域)の色相Hは[220]、背景部分(破線3bで囲んだ領域)の色相Hは[30]であり、互いに異なる。
このように、タングステン光色相差情報算出部5eは、タングステン光に対応する色相に係る第3色相情報とRGB画像データの各画素の色相との間の第3色相差情報を算出する第3算出手段を構成している。
即ち、人肌色相差情報算出部5fは、タングステン光色相差情報算出部5eにより生成されたタングステン光画像P3のHSV画像データの各画素の色相Dh(x, y)に基づいて、下記式(1)に従ってストロボ光が当たった人肌部分に対応する色相に近い度合いを示す人肌色相特定マップEy_MAP(x, y)を生成する(図6(a)参照)。つまり、ストロボを発光させた撮像の場合、ストロボ光が当たった人肌部分は青みがかった色相となることから、タングステン光画像P3のYUV画像データから変換されたHSV画像データの各画素の色相H(図5(b)参照)と青に対応する色相H(例えば、「240」程度)との差分は、RGB画像データの各画素についての人肌に対応する色相(第2色相情報)との差分に相当する。
なお、〜MAP(x, y)との表記は、2次元画像内の全ての画素(x, y)に対応するデータが記憶された2次元配列データであることを表している。また、以下の記載では、各画素(x, y)に対応するデータが8bit[0〜255]の値で示されていることを、〜MAP(x, y)[0〜255]と表す。
即ち、前景尤度値算出部5gは、第1尤度値S及び第2尤度値R(何れも詳細後述)に基づいて、各画素の前景尤度Fy(x, y)が8bit[0〜255]の輝度データで表された前景尤度マップFy_MAP(x, y)を算出する(図6(b)参照)。
ここで、前景尤度マップFy_MAP(x, y)は、ストロボ光画像P2のYUV画像データとタングステン光画像P3のYUV画像データとをアルファブレンドする割合を規定するアルファマップを構成している。
具体的には、ホワイトバランス調整部5hは、判定部5aによりタングステン光下での撮像であると判定された場合に、前景尤度値算出部5gにより算出された前景尤度マップFy_MAP(x, y)を用いて、撮像画像P1の各画素についてホワイトバランス調整値を決定する。
即ち、ホワイトバランス調整部5hは、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報及びタングステン光に対応する色相に係る第3色相情報を基準として、ストロボ発光に対応した第1ホワイトバランス調整値及びタングステン光に対応した第2ホワイトバランス調整値のうち、少なくとも何れか一方をホワイトバランス調整に用いて、撮像画像P1の画像データの各画素に対するホワイトバランス調整値を決定する。つまり、ホワイトバランス調整部5hは、前景尤度値算出部5gにより算出された前景尤度マップFy_MAP(x, y)に基づいて、撮像画像P1の各画素について、第1ホワイトバランス調整値を用いるべきか、第2ホワイトバランス調整値を用いるべきかを判断して、ホワイトバランス調整値を決定する。
前景尤度値Fy(x, y)は、「0」〜「255」の値をとるデータであり、例えば、前景尤度値Fy(x, y)が「0」の画素はタングステン光画像P3のYUV画像データの色差U、Vの割合が100%となり、また、「255」の画素はストロボ光画像P2のYUV画像データの色差U、Vの割合が100%となる。また、前景尤度値Fy(x, y)が「1」〜「254」の画素は、「0」に近い画素ほどタングステン光画像P3のYUV画像データの色差U、Vの重みが相対的に大きくなり、また、「255」に近い画素ほどストロボ光画像P2のYUV画像データの色差U、Vの重みが相対的に大きくなる。
つまり、ホワイトバランス調整部5hは、撮像画像P1の各画素について、ストロボ光画像P2のYUV画像データとタングステン光画像P3のYUV画像データとの混合する割合を調整(詳細後述)することにより、結果として、各画素に対するホワイトバランス調整値を決定する。
即ち、画像生成部5iは、ストロボ光画像P2のYUV画像データとタングステン光画像P3のYUV画像データとをアルファブレンドしてホワイトバランス調整画像P4のYUV画像データを生成する。具体的には、画像生成部5iは、前景尤度マップFy_MAP(x, y)の各画素毎に規定されている前景尤度値Fy(x, y)に従って、ストロボ光画像P2のYUV画像データの色差U、Vとタングステン光画像P3のYUV画像データの色差U、Vとをアルファブレンド(混合)することで、ホワイトバランス調整画像P4(図6(c)参照)のYUV画像データを生成する。
なお、ホワイトバランス調整画像P4の輝度Yは、例えば、撮像画像P1のRGB画像データから変換された輝度Yを用いても良いし、ストロボ光画像P2の輝度Yを用いても良いし、タングステン光画像P3の輝度Yを用いても良い。
具体的には、表示制御部7は、VRAM、VRAMコントローラ、デジタルビデオエンコーダなどを備えている(何れも図示略)。そして、デジタルビデオエンコーダは、中央制御部11の制御下にてメモリ6から読み出されてVRAMに記録されている輝度信号Y及び色差信号Cb,Crを、VRAMコントローラを介してVRAMから定期的に読み出して、これらのデータを元にビデオ信号を発生して表示部8に出力する。
図2は、画像生成処理に係る動作の一例を示すフローチャートである。
ここで、「タングステン光撮像モード」が設定されていると判定された場合(ステップS1;YES)、外部光源としてのタングステン光下で、ストロボ発光部3によりストロボを発光してレンズ部1及び電子撮像部2により被写体の撮像が行われた後(ステップS2)、ユニット回路部4は、電子撮像部2から被写体の光学像に応じたRGB画像データを取得する(ステップS3;図3参照)。
なお、ステップS1にて、「タングステン光撮像モード」が設定されていないと判定された場合には(ステップS1;NO)、画像処理部5は、図示しない他の撮影モードでの撮影処理を実行する。他のいずれの撮影モードも設定されていない場合には、処理をステップS1に戻し、上記の判定処理を所定のタイミングで繰り返し実行する(ステップS1)。
続けて、ユニット回路部4は、撮像画像P1のRGB画像データのRGBの各色成分毎のゲイン量をタングステン光に対応した第2ホワイトバランス調整値として、当該RGB画像データのホワイトバランス調整を行って、タングステン光画像P3(図5(a)参照)のYUV画像データを生成する(ステップS5)。なお、タングステン光画像P3のYUV画像データは、メモリ6に出力されて、当該メモリ6に一時的に記憶される。
そして、ストロボ光色相差情報算出部5dは、ストロボ光画像P2のHSV画像データの各画素の彩度成分Cs(x, y)及び明度成分Cv(x, y)を取得する(ステップS7)。
そして、タングステン光色相差情報算出部5eは、タングステン光画像P3のHSV画像データの各画素の彩度成分Ds(x, y)を取得する(ステップS9)。
これにより、図6(c)に示すように、ストロボが当たっている被写体の人肌部分(破線4aで囲んだ領域)の色味を残したまま、タングステン光(外部光源)が当たっている背景部分(破線4bで囲んだ領域)の赤みを低減したホワイトバランス調整画像P4を生成することができる。
従って、タングステン光下でストロボを発光して撮像を行っても、人肌に対応する領域のホワイトバランス調整を適正に行って、ホワイトバランス調整画像P4を生成することができる。
特に、ストロボ光画像P2のHSV画像データの各画素の彩度成分Cs(x, y)と、色相尤度マップH_MAP(x, y)と、タングステン光画像P3のHSV画像データの各画素の彩度成分Ds(x, y)とに基づいて算出された前景尤度マップFy_MAP(x, y)を利用することで、前景尤度値Fy(x, y)が大きいほど第1ホワイトバランス調整値の割合が大きく、一方、前景尤度値Fy(x, y)が小さいほど第2ホワイトバランス調整値の割合が大きくなるようにして、撮像画像P1の各画素に対するホワイトバランス調整値を適正に決定することができる。具体的には、前景尤度値Fy(x, y)の算出に係る第1尤度値Sは、ストロボ光画像P2のHSV画像データの各画素の彩度成分Cs(x, y)の値が大きいほど、及び/又は、色相尤度H(x, y)の値が大きいほど、大きい値となるので、当該第1尤度値Sを用いてストロボ光が届いていない背景に近い度合いを適正に規定することができる。また、前景尤度値Fy(x, y)の算出に係る第2尤度値Rは、タングステン光画像P3のHSV画像データの各画素の彩度成分Ds(x, y)の値が大きいほど、及び/又は、色相尤度H(x, y)の値が小さいほど、大きい値となるので、当該第2尤度値Rを用いてストロボ光が届いている被写体(前景)に近い度合いを適正に規定することができる。
例えば、上記実施形態では、ホワイトバランス調整画像P4のYUV画像データの生成の際に、ストロボ光画像P2のYUV画像データとタングステン光画像P3のYUV画像データとを混合するようにしたが、必ずしもストロボ光画像P2のYUV画像データとタングステン光画像P3のYUV画像データを混合する必要はない。即ち、ストロボ光画像P2のHSV画像データの各画素の彩度成分Cs(x, y)と、色相尤度マップH_MAP(x, y)と、タングステン光画像P3のHSV画像データの各画素の彩度成分Ds(x, y)とに基づいて、撮像画像P1のRGB画像データの各画素に対するホワイトバランス調整値を決定可能な構成であれば如何なる構成であっても良い。
即ち、プログラムを記憶するプログラムメモリ(図示略)に、画像取得処理ルーチン、判定処理ルーチン、特定処理ルーチンを含むプログラムを記憶しておく。そして、画像取得処理ルーチンにより中央制御部11のCPUを、ストロボを発光して撮像した画像の画像データを取得する画像取得手段として機能させるようにしても良い。また、判定処理ルーチンにより中央制御部11のCPUを、外部光源としてのタングステン光下での撮像であるか否かを判定する判定手段として機能させるようにしても良い。また、特定処理ルーチンにより中央制御部11のCPUを、判定手段によりタングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び画像取得手段により取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定するホワイトバランス調整手段として機能させるようにしても良い。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。
〔付記〕
<請求項1>
ストロボを発光して撮像した画像の画像データを取得する画像取得手段と、
外部光源としてのタングステン光下での撮像であるか否かを判定する判定手段と、
前記判定手段によりタングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び前記画像取得手段により取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定するホワイトバランス調整手段と、
を備えたことを特徴とする撮像装置。
<請求項2>
前記ホワイトバランス調整手段は、更に、
前記第1色相情報、前記第2色相情報、前記第3色相情報及び前記画像データの各画素値に基づいて、前記ストロボ発光に対応した第1ホワイトバランス調整値及び前記タングステン光に対応した第2ホワイトバランス調整値のうち、少なくとも何れか一方を用いて、前記画像データの各画素に対するホワイトバランス調整値を決定することを特徴とする請求項1に記載の撮像装置。
<請求項3>
前記第1色相情報と前記画像データの各画素の色相との間の第1色相差情報を算出する第1算出手段と、
前記第2色相情報と前記画像データの各画素の色相との間の第2色相差情報を算出する第2算出手段と、
前記第3色相情報と前記画像データの各画素の色相との間の第3色相差情報を算出する第3算出手段と、を更に備え、
前記ホワイトバランス調整手段は、
前記第1色相差情報、前記第2色相差情報及び前記第3色相差情報に基づいて、前記画像データの各画素について、前記第1ホワイトバランス調整値を用いるべきか、前記第2ホワイトバランス調整値を用いるべきかを判断してホワイトバランス調整値を決定することを特徴とする請求項2に記載の撮像装置。
<請求項4>
前記第1色相差情報及び前記第2色相差情報に基づいて算出された第1尤度値と、前記第2色相差情報及び前記第3色相差情報に基づいて算出された第2尤度値とに基づいて、ホワイトバランス調整される各画素の前景らしさに係る前景尤度値を算出する第4算出手段を更に備え、
前記ホワイトバランス調整手段は、
前記前景尤度値が大きいほど前記第1ホワイトバランス調整値の割合が大きく、一方、前記前景尤度値が小さいほど前記第2ホワイトバランス調整値の割合が大きくなるようにして、前記画像データの各画素に対するホワイトバランス調整値を決定することを特徴とする請求項3に記載の撮像装置。
<請求項5>
前記第1色相差情報に規定される色相差が大きいほど、及び/又は、前記第2色相差情報に規定される色相差が大きいほど、前記第1尤度値は大きい値となり、
前記第3色相差情報に規定される色相差が大きいほど、及び/又は、前記第2色相差情報に規定される色相差が小さいほど、前記第2尤度値は大きい値となることを特徴とする請求項4に記載の撮像装置。
<請求項6>
前記画像データに対して前記第1ホワイトバランス調整値でホワイトバランス調整されたストロボ光画像の画像データを取得する第1取得手段と、
前記画像データに対して前記第2ホワイトバランス調整値でホワイトバランス調整されたタングステン光画像の画像データを取得する第2取得手段と、
前記ホワイトバランス調整手段により決定された各画素のホワイトバランス調整値に基づいて、前記ストロボ光画像の画像データと前記タングステン光画像の画像データとを混合してホワイトバランス調整後の画像データを生成する生成手段と、を更に備えることを特徴とする請求項2〜5の何れか一項に記載の撮像装置。
<請求項7>
前記第2色相情報は、ストロボ光が当たった人肌の色相に係る情報を含むことを特徴とする請求項1〜6の何れか一項に記載の撮像装置。
<請求項8>
撮像装置を用いた画像処理方法であって、
ストロボを発光して撮像した画像の画像データを取得する処理と、
外部光源としてのタングステン光下での撮像であるか否かを判定する処理と、
タングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定する処理と、
を含むことを特徴とする画像処理方法。
<請求項9>
撮像装置のコンピュータを、
ストロボを発光して撮像した画像の画像データを取得する画像取得手段、
外部光源としてのタングステン光下での撮像であるか否かを判定する判定手段、
前記判定手段によりタングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び前記画像取得手段により取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定するホワイトバランス調整手段、
として機能させることを特徴とするプログラム。
2 撮像部
3 ストロボ発光部
4 ユニット回路部
4a ゲイン調整部
5 画像処理部
5a 判定部
5b 第1画像取得部
5c 第2画像取得部
5d ストロボ光色相差情報算出部
5e タングステン光色相差情報算出部
5f 人肌色相差情報算出部
5g 前景尤度値算出部
5h 画素値特定部
11 中央制御部
Claims (9)
- ストロボを発光して撮像した画像の画像データを取得する画像取得手段と、
外部光源としてのタングステン光下での撮像であるか否かを判定する判定手段と、
前記判定手段によりタングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び前記画像取得手段により取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定するホワイトバランス調整手段と、
を備えたことを特徴とする撮像装置。 - 前記ホワイトバランス調整手段は、更に、
前記第1色相情報、前記第2色相情報、前記第3色相情報及び前記画像データの各画素値に基づいて、前記ストロボ発光に対応した第1ホワイトバランス調整値及び前記タングステン光に対応した第2ホワイトバランス調整値のうち、少なくとも何れか一方を用いて、前記画像データの各画素に対するホワイトバランス調整値を決定することを特徴とする請求項1に記載の撮像装置。 - 前記第1色相情報と前記画像データの各画素の色相との間の第1色相差情報を算出する第1算出手段と、
前記第2色相情報と前記画像データの各画素の色相との間の第2色相差情報を算出する第2算出手段と、
前記第3色相情報と前記画像データの各画素の色相との間の第3色相差情報を算出する第3算出手段と、を更に備え、
前記ホワイトバランス調整手段は、
前記第1色相差情報、前記第2色相差情報及び前記第3色相差情報に基づいて、前記画像データの各画素について、前記第1ホワイトバランス調整値を用いるべきか、前記第2ホワイトバランス調整値を用いるべきかを判断してホワイトバランス調整値を決定することを特徴とする請求項2に記載の撮像装置。 - 前記第1色相差情報及び前記第2色相差情報に基づいて算出された第1尤度値と、前記第2色相差情報及び前記第3色相差情報に基づいて算出された第2尤度値とに基づいて、ホワイトバランス調整される各画素の前景らしさに係る前景尤度値を算出する第4算出手段を更に備え、
前記ホワイトバランス調整手段は、
前記前景尤度値が大きいほど前記第1ホワイトバランス調整値の割合が大きく、一方、前記前景尤度値が小さいほど前記第2ホワイトバランス調整値の割合が大きくなるようにして、前記画像データの各画素に対するホワイトバランス調整値を決定することを特徴とする請求項3に記載の撮像装置。 - 前記第1色相差情報に規定される色相差が大きいほど、及び/又は、前記第2色相差情報に規定される色相差が大きいほど、前記第1尤度値は大きい値となり、
前記第3色相差情報に規定される色相差が大きいほど、及び/又は、前記第2色相差情報に規定される色相差が小さいほど、前記第2尤度値は大きい値となることを特徴とする請求項4に記載の撮像装置。 - 前記画像データに対して前記第1ホワイトバランス調整値でホワイトバランス調整されたストロボ光画像の画像データを取得する第1取得手段と、
前記画像データに対して前記第2ホワイトバランス調整値でホワイトバランス調整されたタングステン光画像の画像データを取得する第2取得手段と、
前記ホワイトバランス調整手段により決定された各画素のホワイトバランス調整値に基づいて、前記ストロボ光画像の画像データと前記タングステン光画像の画像データとを混合してホワイトバランス調整後の画像データを生成する生成手段と、を更に備えることを特徴とする請求項2〜5の何れか一項に記載の撮像装置。 - 前記第2色相情報は、ストロボ光が当たった人肌の色相に係る情報を含むことを特徴とする請求項1〜6の何れか一項に記載の撮像装置。
- 撮像装置を用いた画像処理方法であって、
ストロボを発光して撮像した画像の画像データを取得する処理と、
外部光源としてのタングステン光下での撮像であるか否かを判定する処理と、
タングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定する処理と、
を含むことを特徴とする画像処理方法。 - 撮像装置のコンピュータを、
ストロボを発光して撮像した画像の画像データを取得する画像取得手段、
外部光源としてのタングステン光下での撮像であるか否かを判定する判定手段、
前記判定手段によりタングステン光下での撮像であると判定された場合に、ストロボ光に対応する色相に係る第1色相情報、人肌に対応する色相に係る第2色相情報、タングステン光に対応する色相に係る第3色相情報及び前記画像取得手段により取得された画像データの各画素値に基づいて、該画像データの各画素に対するホワイトバランス調整値を各々決定するホワイトバランス調整手段、
として機能させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012048921A JP5962076B2 (ja) | 2012-03-06 | 2012-03-06 | 撮像装置、画像処理方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012048921A JP5962076B2 (ja) | 2012-03-06 | 2012-03-06 | 撮像装置、画像処理方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013187596A true JP2013187596A (ja) | 2013-09-19 |
JP5962076B2 JP5962076B2 (ja) | 2016-08-03 |
Family
ID=49388707
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012048921A Expired - Fee Related JP5962076B2 (ja) | 2012-03-06 | 2012-03-06 | 撮像装置、画像処理方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5962076B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106357988A (zh) * | 2016-11-09 | 2017-01-25 | 广东欧珀移动通信有限公司 | 白平衡调整方法、装置和终端设备 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001358986A (ja) * | 2000-06-13 | 2001-12-26 | Sony Corp | 画像処理装置および画像処理方法、並びに記録媒体 |
JP2004186879A (ja) * | 2002-12-02 | 2004-07-02 | Fuji Film Microdevices Co Ltd | 固体撮像装置及びデジタルカメラ |
JP2007180629A (ja) * | 2005-12-27 | 2007-07-12 | Samsung Techwin Co Ltd | カメラ |
JP2008052428A (ja) * | 2006-08-23 | 2008-03-06 | Nikon Corp | 画像処理方法、画像処理装置、画像処理プログラム、撮像装置 |
JP2009010814A (ja) * | 2007-06-29 | 2009-01-15 | Fujifilm Corp | 画像処理装置および方法並びにプログラム、撮像装置および方法並びにプログラム |
JP2010187204A (ja) * | 2009-02-12 | 2010-08-26 | Olympus Corp | 画像撮像装置、画像処理方法、および画像処理プログラム |
JP2011155422A (ja) * | 2010-01-27 | 2011-08-11 | Casio Computer Co Ltd | 撮像装置、画像処理方法及びプログラム |
JP2013058859A (ja) * | 2011-09-07 | 2013-03-28 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
-
2012
- 2012-03-06 JP JP2012048921A patent/JP5962076B2/ja not_active Expired - Fee Related
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001358986A (ja) * | 2000-06-13 | 2001-12-26 | Sony Corp | 画像処理装置および画像処理方法、並びに記録媒体 |
JP2004186879A (ja) * | 2002-12-02 | 2004-07-02 | Fuji Film Microdevices Co Ltd | 固体撮像装置及びデジタルカメラ |
JP2007180629A (ja) * | 2005-12-27 | 2007-07-12 | Samsung Techwin Co Ltd | カメラ |
JP2008052428A (ja) * | 2006-08-23 | 2008-03-06 | Nikon Corp | 画像処理方法、画像処理装置、画像処理プログラム、撮像装置 |
JP2009010814A (ja) * | 2007-06-29 | 2009-01-15 | Fujifilm Corp | 画像処理装置および方法並びにプログラム、撮像装置および方法並びにプログラム |
JP2010187204A (ja) * | 2009-02-12 | 2010-08-26 | Olympus Corp | 画像撮像装置、画像処理方法、および画像処理プログラム |
JP2011155422A (ja) * | 2010-01-27 | 2011-08-11 | Casio Computer Co Ltd | 撮像装置、画像処理方法及びプログラム |
JP2013058859A (ja) * | 2011-09-07 | 2013-03-28 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106357988A (zh) * | 2016-11-09 | 2017-01-25 | 广东欧珀移动通信有限公司 | 白平衡调整方法、装置和终端设备 |
CN106357988B (zh) * | 2016-11-09 | 2020-03-06 | Oppo广东移动通信有限公司 | 白平衡调整方法、装置和终端设备 |
Also Published As
Publication number | Publication date |
---|---|
JP5962076B2 (ja) | 2016-08-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10397486B2 (en) | Image capture apparatus and method executed by image capture apparatus | |
US9443323B2 (en) | Image processing apparatus, image processing method and recording medium | |
JP5761946B2 (ja) | 画像処理装置、画像処理方法及び記憶媒体 | |
JP5917258B2 (ja) | 画像処理装置及び画像処理方法 | |
WO2020057199A1 (zh) | 成像方法、装置和电子设备 | |
US8493458B2 (en) | Image capture apparatus and image capturing method | |
WO2020034701A1 (zh) | 成像控制方法、装置、电子设备以及可读存储介质 | |
JP6045896B2 (ja) | 評価値算出装置および評価値算出方法 | |
KR20150081153A (ko) | 영상 처리 장치, 영상 처리 방법, 및 컴퓨터 판독가능 기록매체 | |
US11272095B2 (en) | Detection apparatus for detecting portion satisfying predetermined condition from image, image processing apparatus for applying predetermined image processing on image, detection method, and image processing method | |
JP2013058858A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2013058859A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2018205883A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2006080942A (ja) | 画像処理装置、画像処理プログラム、画像処理方法及び撮像装置 | |
JP5962076B2 (ja) | 撮像装置、画像処理方法及びプログラム | |
JP5765599B2 (ja) | 撮像装置、画像処理方法及びプログラム | |
JP2006333113A (ja) | 撮像装置 | |
JP6606981B2 (ja) | 出力制御装置、出力制御方法及びプログラム | |
JP5471510B2 (ja) | 撮像装置、画像処理方法及びプログラム | |
JP2015023514A (ja) | 情報処理装置、撮像装置、制御方法、及びプログラム | |
JP2012044560A (ja) | 画像処理装置、画像処理方法及び撮像装置 | |
JP2016220031A (ja) | 画像処理装置及び画像処理方法 | |
JP5627252B2 (ja) | 撮像装置及びその制御方法 | |
JP6021885B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2004158917A (ja) | 画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150220 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160307 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160531 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160613 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5962076 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |