JP2023538781A - ホワイトバランス補正方法、装置及び電子機器 - Google Patents

ホワイトバランス補正方法、装置及び電子機器 Download PDF

Info

Publication number
JP2023538781A
JP2023538781A JP2023513442A JP2023513442A JP2023538781A JP 2023538781 A JP2023538781 A JP 2023538781A JP 2023513442 A JP2023513442 A JP 2023513442A JP 2023513442 A JP2023513442 A JP 2023513442A JP 2023538781 A JP2023538781 A JP 2023538781A
Authority
JP
Japan
Prior art keywords
color
value
region
color information
white balance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023513442A
Other languages
English (en)
Inventor
有攀 ▲ライ▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Publication of JP2023538781A publication Critical patent/JP2023538781A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/6077Colour balance, e.g. colour cast correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/13Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation

Abstract

本出願は、ホワイトバランス補正方法、装置及び電子機器を開示する。この方法は、スペクトルセンサによって収集された画像である第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得することと、ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行い、且つホワイトバランス補正後の第二の画像に含まれるM個の第二の領域のうちの各第二の領域の色情報を取得することであって、一つの第二の領域が一つの第一の領域に対応することと、i番目の第二の領域について、第一の色情報と第二の色情報が予め設定される条件を満たす場合、第一の色情報と第二の色情報に基づき、i番目の第二の領域に対してホワイトバランス補正を行うことであって、第一の色情報がi番目の第二の領域の色情報であり、第二の色情報がi番目の第二の領域に対応する一つの第一の領域の色情報であることとを含む。【選択図】 図1

Description

(関連出願の相互参照)
本出願は、2020年8月26日に国家知的財産権局で提出された、出願番号が202010870987.8であり、出願名称が「ホワイトバランス補正方法、装置及び電子機器」である中国特許出願の優先権を主張しており、同出願の内容の全ては、ここに参照として取り込まれる。
本出願は、通信技術分野に属し、具体的に、ホワイトバランス補正方法、装置及び電子機器に関する。
異なる光線で、センサによって収集された画像は、異なる色を呈し、例えば、蛍光灯の部屋で撮影された画像は、緑っぽく見え、タングステンランプの光で撮影された画像は、黄っぽく見える。これに対し、ホワイトバランス(AWB)技術を採用して画面全体のすべてのピクセルのRGB(赤、緑、青という三つの色)成分に対してAWB利得補正を行うことにより、光源がセンサによって収集された画像に与える影響を除去することができる。
現在、様々な光源が混合されている時、一般的には二つのAWB補正方案が存在する。一つの方案は、様々な光源の占有率に基づき、加重後に中間値に近い一つの色温度値を得、且つこの色温度値に対応するAWB補正利得を計算することであるが、この色温度値が様々な光源の間にあることにより、高色温度光源領域は、青っぽく呈し、低色温度光源領域は、黄っぽく呈し、別の方案は、経験値に基づいて様々な光源の主光源を判断し、且つ主光源に対して対応するAWB補正利得を行うことであるが、この方案は、主光源の色ずれ問題を解決することしかできず、他の光源の領域にはより深刻な色ずれ現象が発生することがある。そのため、様々な光源が混合されている時、従来の技術のAWB補正後の色復元効果が低い。
本出願の実施例の目的は、様々な光源が混合されている時、従来の技術のAWB補正後の色復元効果が低いという問題を解決できるホワイトバランス補正方法、装置及び電子機器を提供することである。
上記技術課題を解決するために、本出願は、以下のように実現される。
第一の態様によれば、本出願の実施例は、ホワイトバランス補正方法を提供する。この方法は、スペクトルセンサによって収集された画像である第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得することと、ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行い、且つホワイトバランス補正後の第二の画像に含まれるM個の第二の領域のうちの各第二の領域の色情報を取得することであって、一つの第二の領域が一つの第一の領域に対応することと、i番目の第二の領域について、第一の色情報と第二の色情報が予め設定される条件を満たす場合、この第一の色情報とこの第二の色情報に基づき、このi番目の第二の領域に対してホワイトバランス補正を行うことであって、この第一の色情報がこのi番目の第二の領域の色情報であり、この第二の色情報がこのi番目の第二の領域に対応する一つの第一の領域の色情報であることとを含み、ここで、Mは、1よりも大きい整数であり、iは、M以下の正の整数である。
第二の態様によれば、本出願の実施例は、ホワイトバランス補正装置を提供する。このホワイトバランス補正装置は、取得モジュールと処理モジュールとを含む。取得モジュールは、スペクトルセンサによって収集された画像である第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得するために用いられ、処理モジュールは、ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行うために用いられ、取得モジュールはさらに、ホワイトバランス補正後の第二の画像に含まれるM個の第二の領域のうちの各第二の領域の色情報を取得するために用いられ、一つの第二の領域は、一つの第一の領域に対応し、処理モジュールはさらに、i番目の第二の領域について、第一の色情報と第二の色情報が予め設定される条件を満たす場合、この第一の色情報とこの第二の色情報に基づき、このi番目の第二の領域に対してホワイトバランス補正を行うために用いられ、この第一の色情報は、このi番目の第二の領域の色情報であり、この第二の色情報は、このi番目の第二の領域に対応する一つの第一の領域の色情報であり、ここで、Mは、1よりも大きい整数であり、iは、M以下の正の整数である。
第三の態様によれば、本出願の実施例は、電子機器を提供し、この電子機器は、プロセッサと、メモリと、このメモリに記憶され、且つプロセッサ上で運行できるプログラム又は命令とを含み、このプログラム又は命令がこのプロセッサにより実行される時、第一の態様による方法のステップを実現する。
第四の態様によれば、本出願の実施例は、可読記憶媒体を提供し、この可読記憶媒体上にはプログラム又は命令が記憶されており、このプログラム又は命令がプロセッサにより実行される時、第一の態様による方法のステップを実現する。
第五の態様によれば、本出願の実施例は、チップを提供し、このチップは、プロセッサと通信インターフェースとを含み、この通信インターフェースは、このプロセッサと結合され、このプロセッサは、プログラム又は命令を運行し、第一の態様による方法を実現するために用いられる。
本出願の実施例では、スペクトルセンサによって収集された画像である第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得すること、ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行い、且つホワイトバランス補正後の第二の画像に含まれるM個の第二の領域のうちの各第二の領域の色情報を取得することであって、一つの第二の領域が一つの第一の領域に対応すること、i番目の第二の領域について、第一の色情報と第二の色情報が予め設定される条件を満たす場合、この第一の色情報とこの第二の色情報に基づき、このi番目の第二の領域に対してホワイトバランス補正を行うことであって、この第一の色情報がこのi番目の第二の領域の色情報であり、この第二の色情報がこのi番目の第二の領域に対応する一つの第一の領域の色情報であることが可能である。この方案によれば、スペクトルセンサと色センサの特性が異なり、且つスペクトルセンサによって収集された第一の画像における各第一の領域が色センサによって収集されたホワイトバランス補正後の第二の画像の各第二の領域に一対一に対応するため、一つの第一の領域の色情報と一つの第二の領域の色情報が予め設定される条件を満たす時、この一つの第一の領域の色情報を採用してこの一つの第二の領域の色情報に対してAWB補正を行うことができ、それによって撮影された画面の色復元効果を向上させる。
本出願の実施例によるホワイトバランス補正方法の概略図のその一である。 本出願の実施例による画像に対する領域区分の概略図である。 本出願の実施例による波長域に対する領域区分の概略図である。 本出願の実施例によるホワイトバランス補正装置の構造概略図である。 本出願の実施例による電子機器のハードウェア概略図のその一である。 本出願の実施例による電子機器のハードウェア概略図のその二である。
以下は、本出願の実施例における図面を結び付けながら、本出願の実施例における技術案を明瞭且つ完全に記述し、明らかに、記述された実施例は、本出願の一部の実施例であり、すべての実施例ではない。本出願における実施例に基づき、当業者が創造的な労力を払わない前提で得られたすべての他の実施例は、いずれも本出願の保護範囲に属する。
本出願の明細書と特許請求の範囲における用語である「第一」、「第二」などは、類似している対象を区別するものであり、特定の順序又は前後手順を記述するためのものではない。理解すべきこととして、このように使用される用語は、適切な場合に交換可能であり、それにより本出願の実施例は、ここで図示又は記述されたもの以外の順序で実施されることが可能であり、且つ「第一」、「第二」などによって区別される対象は、一般的には同一種類であり、対象の個数を限定せず、例えば第一の対象は、一つであってもよく、複数であってもよい。なお、明細書及び請求項における「及び/又は」は、接続される対象のうちの少なくとも一つを表し、文字である「/」は、一般的には前後関連対象が「又は」の関係であることを表す。
以下では、本発明の実施例に係るいくつかの用語/名詞を解釈して説明する。
色温度(color temperature、CT)は、光線に含まれている色成分を表すための一つの計量単位である。理論的に言えば、絶対黒体が絶対零度(-273℃)から加温された後に呈する色は、一定の色温度に対応する。黒体は、熱を受けた後、徐々に黒から赤になり、黄に変わり、白っぽくなり、最後に青色光を発する。一定の温度に加熱されると、黒体の発する光に含まれるスペクトル成分は、この温度での色温度と称され、計量単位は、ケルビン「K」である。
スペクトル(spectrum)は、複合光が色分散システム(例えば、プリズム、ラスタ)により分光された後、色分散された単色光が波長又は周波数の大きさに従って順に並んでいる図案であり、完全な名称は、光学周波数スペクトルである。スペクトルのうちの一部の可視スペクトルは、電磁波スペクトルのうちの人の目に見える一部であり、この波長範囲内の電磁放射は、可視光と称され、可視光の波長範囲は、380 nm~780 nm(ナノメートル)である。
現在、ディスプレイスクリーンは、一般的にはRGB色空間を採用して画像の色を表現し、RGB色空間は、最もよく使われる色情報表現方式であり、赤(R)、緑(G)、青(B)の三原色の強度値(例えば、輝度値)を使用して色を定量的に表し、RGB三色光を互いに重ねることによって混色を実現する方式である。三つの色が占有する割合は、異なり、得られた色も異なる。三つの色の混合割合を変えることにより、様々な混合効果を得ることができる。RGB色空間は、三次元直角座標系における一つの単位立方体と見なされてもよい。いずれか一つの色は、RGB色空間においていずれも三次元空間における一点で表されてもよい。RGB色空間で、いずれかの色の光Fは、いずれもRGBの三つの色の異なる成分を加算して混合することにより構成することができ、F=r[R]+g[G]+b[B]である。RGB色空間の上で、数学方法を採用し、実際の三原色の代わりに三つの理想的な原色を選択し、RGBシステムにおけるスペクトル三刺激値と色度座標r、g、bをいずれも正値に変えることにより、XYZ色空間を得ることができる。
本出願の実施例は、スペクトルセンサと色センサという二つの画像センサ(sensor)に関する。ここで、スペクトルセンサは、光学部分と表示部分とを含み、センサのハウジング上の入射開口の後ろの放射経路内で、光学部分が入射ビームを分割することにより、分割されたビームは、複数個の光フィルタに入り、これらの光フィルタは、それぞれ異なるスペクトル透過範囲を有し、それによっていくつかの波長域に対して結像を行うことができ、色センサは、従来のRGBアレイの画像センサであり、RGBセンサと略称されてもよく、例えば、RGBセンサは、bayer sensorであってもよく、それは、色検知素子によってR色チャンネルの色値、G色チャンネルの色値、B色チャンネルの色値を測定し、この三つの色成分を重ねた後に結像を実現することができる。この二つの画像センサに対する具体的な記述は、従来の技術を参照すればよく、ここで詳細に説明しない。理解できるように、この二つの画像センサの結像原理が異なるため、特性も異なり、スペクトルセンサは、色性能が高いが、感光性能が低いという特性を備え、色センサは、感光性能が高いが、色性能が低いという特性を備える。
様々な光源が混合されているシーンに対し、本出願の実施例は、この二つの画像センサのそれぞれの特性を利用し、ホワイトバランス補正方法を提供し、スペクトルセンサによって収集された第一の画像における各第一の領域が色センサによって収集されたホワイトバランス補正後の第二の画像の各第二の領域に一対一に対応するため、一つの第一の領域の色情報と一つの第二の領域の色情報が予め設定される条件を満たす時、この一つの第一の領域の色情報を採用してこの一つの第二の領域の色情報に対してAWB補正を行うことができ、それにより撮影された画面の色復元効果を向上させる。
以下では、図面を結び付けながら、具体的な実施例及びその応用シーンによって本出願の実施例によるホワイトバランス補正方法、装置及び電子機器を詳細に説明する。
図1に示すように、本出願の実施例は、ホワイトバランス補正方法を提供する。このホワイトバランス補正方法は、下記のS101からS103を含んでもよい。以下では、実行本体がホワイトバランス補正装置であることを例にしてこのホワイトバランス補正方法を例示的に説明する。
S101、ホワイトバランス補正装置は、第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得する。
ここで、第一の画像は、スペクトルセンサによって収集された画像である。M個の第一の領域のうちの各第一の領域の色情報は、各第一の領域の色を指示するために用いられてもよい。Mは、1よりも大きい整数である。
本出願の実施例では、ホワイトバランス補正装置は、スペクトルセンサによって第一の画像を収集してから、この第一の画像をM個の第一の領域に区分し、その後にこのM個の第一の領域のうちの各第一の領域の色情報を取得してもよい。
選択的に、M個の第一の領域のうちの各第一の領域は、N個のピクセルポイントからなってもよく、Nは、1よりも大きい整数である。具体的には、各行にP個のピクセルポイントがあり、各列にP個のピクセルポイントがあることに従い、P*Pを一グループとする一つの第一の領域を得る。例えば、図2に示すように、第一の画像は、11*8個の第一の領域に区分され、各第一の領域は、25個のピクセルポイントを含む。
選択的に、M個の第一の領域のうちの各第一の領域について、一つの第一の領域の色情報は、一つの色値で表されてもよく、且つこの一つの色値は、この一つの第一の領域のR色チャンネルの強度値と、この一つの第一の領域のG色チャンネルの強度値と、この一つの第一の領域のB色チャンネルの強度値と、この一つの第一の領域の色温度値とのうちの少なくとも一つを含んでもよい。これらの強度値は、以下の式を参照して取得してもよく、ここで詳細に説明しない。
選択的に、上記の、M個の第一の領域のうちの各第一の領域の色情報を取得することは、各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得することを含んでもよい。ここで、各第一の領域のスペクトル曲線は、各第一の領域の感光値に基づいて決定されてもよい。
以下では、各第一の領域がN個のピクセルポイントからなることを例にし、各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得する具体的な実現方式を例示的に説明する。
(1)可視波長範囲をN個の波長域範囲に分け、N個のピクセルポイントのうちの一つのピクセルポイントは、このN個の波長域範囲のうちの一つの波長域範囲に対応する。
選択的に、可視波長範囲は、380 nm~780 nmであり、一つの第一の領域は、N=P*P個の波長域範囲に対応し、各波長域範囲の長さは、(780-380)/(P*P)nmである。例示的に、図3に示すように、P=5であることを例にすると、一つの第一の領域は、25個の波長域範囲に対応し、この一つの第一の領域におけるピクセルポイント1の波長域範囲は、380 nm~396 nmであり、ピクセルポイント2の波長域範囲は、396 nm~412 nmであり、ピクセルポイント3の波長域範囲は、412 nm~428 nmであり、ピクセルポイント4の波長域範囲は、428 nm~444 nmであり、ピクセルポイント5の波長域範囲は、444 nm~460 nmであり、ピクセルポイント6の波長域範囲は、460 nm~476 nmであり……ピクセルポイント25の波長域範囲は、764 nm~780 nmである。
(2)各ピクセルポイントに対応する波長域範囲内で、各ピクセルポイントの感光値を取得する。
スペクトルセンサのハウジング上の入射開口の後ろの放射経路内で、入射ビームは、分割されることにより、異なる第一の領域に入る。各第一の領域における各ピクセルポイントは、それぞれ異なるスペクトル透過範囲(即ち波長域範囲)を有し、それによって各第一の領域における各ピクセルポイントの感光値(感光強度と称されてもよく、それは、光線の強度を表すために用いられてもよい)を取得することができる。
(3)N個のピクセルポイントの感光値に基づき、各第一の領域のスペクトル曲線を取得する。
選択的に、ピクセルポイントiの応答値がQiであるとすると、一つの第一の領域のN個のピクセルポイントの応答値Q1、Q2、Q3、……、QNを取得した後、これらの応答値を正規化処理し、その後に各応答値に対応する曲線を接続して一本の滑らかな曲線を得てもよく、この滑らかな曲線は、この一番目の第一の領域のスペクトル曲線としてもよい。
(4)各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得する。
選択的に、M個の第一の領域のうちの各第一の領域について、一つの第一の領域の色情報は、一つの色値で表されてもよく、且つこの一つの色値は、この一つの第一の領域のR色チャンネルの強度値と、この一つの第一の領域のG色チャンネルの強度値と、この一つの第一の領域のB色チャンネルの強度値と、この一つの第一の領域の色温度値とのうちの少なくとも一つを含んでもよい。
一つの第一の領域のR色チャンネルの強度値は、下記式1
によって取得できる。
一つの第一の領域のG色チャンネルの強度値は、下記式2
によって取得できる。
一つの第一の領域のB色チャンネルの強度値は、下記式3
によって取得できる。
ここで、I(λ)は、第一の領域におけるピクセルポイントに対応するスペクトル曲線であり、ピクセルポイントの感光値を表すために用いられてもよく、R(λ)は、第一の予め設定される式であり、G(λ)は、第二の予め設定される式であり、B(λ)は、第三の予め設定される式であり、この三つの予め設定される式は、R色チャンネル、G色チャンネル、B色チャンネルの強度をそれぞれ表すために用いられてもよく、λは、精度値であり、この精度値は、一つの予め設定される値、例えば、0.001mm(ミリメートル)であってもよい。
以上の(1)から(4)を結び付けながら、各第一の領域の色情報が少なくとも各第一の領域の色温度値を含む場合に、各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得することは、具体的に下記方式によって実現することができる。
A1、各第一の領域のスペクトル曲線を、第一の予め設定される式、第二の予め設定される式、第三の予め設定される式とそれぞれ積分演算し、各第一の領域のR色チャンネルの強度値、各第一の領域のG色チャンネルの強度値、各第一の領域のB色チャンネルの強度値を得る。
A2、各第一の領域のR色チャンネルの強度値、各第一の領域のG色チャンネルの強度値、各第一の領域のB色チャンネルの強度値を、X色空間の強度値、Y色空間の強度値、Z色空間の強度値にそれぞれ変換する。
A3、X色空間の強度値、Y色空間の強度値とZ色空間の強度値に基づき、各第一の領域の色温度値を取得する。
RGB色空間をYUV色空間に変換する具体的な実現方式は、関連技術の標準色変換式を参照すればよく、YUV色空間に基づいて色温度値を取得する具体的な実現方式は、関連技術の色温度取得式を参照すればよい。本出願の実施例は、いずれも具体的に限定しない。
S102、ホワイトバランス補正装置は、ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行い、且つホワイトバランス補正後の第二の画像に含まれるM個の第二の領域のうちの各第二の領域の色情報を取得する。
ここで、M個の第二の領域のうちの各第二の領域の色情報は、各第二の領域の色を指示するために用いられてもよく、M個の第二の領域のうちの一つの第二の領域は、M個の第一の領域のうちの一つの第一の領域に対応する。
本出願の実施例では、ホワイトバランス補正装置は、色センサによって第二の画像を収集してから、ターゲット数値を採用してこの第二の画像に対してホワイトバランス補正を行い、その後にホワイトバランス補正後の第二の画像をM個の第二の領域に区分し、続いてM個の第二の領域のうちの各第二の領域の色情報を取得してもよい。
ターゲット数値は、関連技術のホワイトバランスアルゴリズムで計算して得られた一つの推定値である。例えば、一つの自動ホワイトバランスアルゴリズムは、様々な光源の占有率に基づき、加重後に中間値に近い一つの色温度値を得、その後に、この色温度値に対応するAWB補正利得を計算し、且つこのAWB補正利得をターゲット数値とすることであり、別の方案は、様々な光源の主光源を判断し、且つ主光源に対して対応するAWB補正利得を計算し、且つこのAWB補正利得をターゲット数値とすることである。本出願の背景技術を結び付けながら、従来の技術のホワイトバランスアルゴリズムを採用すれば、画面全体のすべてのピクセルのRGB成分に対して初歩的なAWB利得補正を行うことしかできないため、様々な光源が混合されている時、このようなAWB補正後の色復元効果が低い。
説明すべきこととして、本出願の実施例では、第一の画像と第二の画像は、スペクトルセンサと色センサをそれぞれ採用して同一の撮影対象を撮影して取得した同じ撮影内容の画像である。しかしながら、スペクトルセンサと色センサの特性が異なるため、二枚の画像の撮影効果も異なる。第一の画像と第二の画像を比較するために、本出願の実施例は、ホワイトバランス補正が行われていない第一の画像をM個の第二の領域に区分し、また、ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行ってから、第一の画像と同じ領域区分方式を採用し、ホワイトバランス補正後の第二の画像をM個の第二の領域に区分する。このように、各第一の領域と各第一の領域の第二の領域との差異に基づき、それぞれ各第一の領域の第二の領域に対してより正確なホワイトバランス補正を行うかどうかを決定することができる。
例示的に、依然として図2を例にすると、第一の画像とホワイトバランス補正後の第二の画像は、それぞれ11*8個の領域に区分され、且つ各領域は、25個のピクセルポイントを含む。例えば、第一の画像の4行目8列目の一つの第一の領域がA1で表され、ホワイトバランス補正後の第二の画像の4行目8列目の一つの第二の領域がA2で表されるとすると、第一の領域A1は、第二の領域A2に対応し、且つ第一の領域A1と第二の領域A2に含まれる撮影内容は、同じであるが、第一の領域A1の色性能が高く、第二の領域A2の感光性能が高い。
選択的に、M個の第二の領域のうちの各第二の領域について、一つの第二の領域の色情報は、一つの色値で表されてもよく、且つこの一つの色値は、この一つの第二の領域のR色チャンネルの強度値と、この一つの第二の領域のG色チャンネルの強度値と、この一つの第二の領域のB色チャンネルの強度値と、この一つの第二の領域の色温度値とのうちの少なくとも一つを含んでもよい。
具体的には、本出願の実施例では、第一の色値と第二の色値は、同じ特徴量に対応する。即ち、第一の色値と第二の色値は、(A)-(D)のうちの少なくとも一つを満たす。
(A)第一の色値は、i番目の第二の領域のR色チャンネルの強度値を含む。そして、第二の色値は、i番目の第二の領域に対応する一つの第一の領域のR色チャンネルの強度値を含む。
(B)第一の色値は、i番目の第二の領域のG色チャンネルの強度値を含む。そして、第二の色値は、i番目の第二の領域に対応する一つの第一の領域のG色チャンネルの強度値を含む。
(C)第一の色値は、i番目の第二の領域のB色チャンネルの強度値を含む。そして、第二の色値は、i番目の第二の領域に対応する一つの第一の領域のB色チャンネルの強度値を含む。
(D)第一の色値は、i番目の第二の領域の色温度値を含む。そして、第二の色値は、i番目の第二の領域に対応する一つの第一の領域の色温度値を含む。
選択的に、色センサが従来のRGBアレイの画像センサであるため、第二の画像に対してホワイトバランス補正を行った後、従来の式を参照しながら、各第二の領域のR色チャンネルの強度値、各第二の領域のG色チャンネルの強度値、各第二の領域のB色チャンネルの強度値を取得してもよい。
さらに、各第二の領域のR色チャンネルの強度値、各第二の領域のG色チャンネルの強度値、各第二の領域のB色チャンネルの強度値を取得した後、上記S101におけるA1からA3を採用して各第二の領域の色温度値を取得してもよい。
S103、i番目の第二の領域について、第一の色情報と第二の色情報が予め設定される条件を満たす場合、ホワイトバランス補正装置は、この第一の色情報とこの第二の色情報に基づき、i番目の第二の領域に対してホワイトバランス補正を行う。
ここで、上記第一の色情報は、i番目の第二の領域の色情報であってもよく、上記第二の色情報は、i番目の第二の領域に対応する一つの第一の領域の色情報であってもよい。iは、M以下の正の整数である。
選択的に、第一の色情報は、第一の色値であり、第二の色情報は、第二の色値であり、予め設定される条件は、第一の色値と第二の色値との差分値の絶対値が予め設定される色値以上であることである。
さらに、第一の色値は、i番目の第二の領域のR色チャンネルの強度値と、i番目の第二の領域のG色チャンネルの強度値と、i番目の第二の領域のB色チャンネルの強度値と、i番目の第二の領域の色温度値とのうちの少なくとも一つを含んでもよい。
さらに、第二の色値は、i番目の第二の領域に対応する一つの第一の領域のR色チャンネルの強度値と、i番目の第二の領域に対応する一つの第一の領域のG色チャンネルの強度値と、i番目の第二の領域に対応する一つの第一の領域のB色チャンネルの強度値と、i番目の第二の領域に対応する一つの第一の領域の色温度値とのうちの少なくとも一つを含んでもよい。
以下では、各色値が予め設定される条件を満たすことをそれぞれ例示的に説明する。
第一の色値がi番目の第二の領域のR色チャンネルの強度値を含み、第二の色値がi番目の第二の領域に対応する一つの第一の領域のR色チャンネルの強度値を含む場合、第一の色情報と第二の色情報が予め設定される条件を満たすことは、i番目の第二の領域のR色チャンネルの強度値と、i番目の第二の領域に対応する一つの第一の領域のR色チャンネルの強度値との差分値の絶対値が第一の数値以上であることを指す。
第一の色値がi番目の第二の領域のG色チャンネルの強度値を含み、第二の色値がi番目の第二の領域に対応する一つの第一の領域のG色チャンネルの強度値を含む場合、第一の色情報と第二の色情報が予め設定される条件を満たすことは、i番目の第二の領域のG色チャンネルの強度値と、i番目の第二の領域に対応する一つの第一の領域のG色チャンネルの強度値との差分値の絶対値が第二の数値以上であることを指す。
第一の色値がi番目の第二の領域のB色チャンネルの強度値を含み、第二の色値がi番目の第二の領域に対応する一つの第一の領域のB色チャンネルの強度値を含む場合、第一の色情報と第二の色情報が予め設定される条件を満たすことは、i番目の第二の領域のB色チャンネルの強度値と、i番目の第二の領域に対応する一つの第一の領域のB色チャンネルの強度値との差分値の絶対値が第三の数値以上であることを指す。
第一の色値がi番目の第二の領域の色温度値を含み、第二の色値がi番目の第二の領域に対応する一つの第一の領域の色温度値を含む場合、第一の色情報と第二の色情報が予め設定される条件を満たすことは、i番目の第二の領域の色温度値と、i番目の第二の領域に対応する一つの第一の領域の色温度値との差分値の絶対値が第四の数値以上であることを指す。
説明すべきこととして、上記第一の数値、第二の数値、第三の数値と第四の数値の大きさは、同じであってもよく、異なってもよく、実際の使用需要に応じて決定されてもよく、本出願の実施例は、これに対して限定しない。
選択的に、第一の色情報と第二の色情報に基づき、i番目の第二の領域に対してホワイトバランス補正を行うことは、下記方式によって実現することができる。
(a)第一の色値と第一の予め設定される割合との積を第一の補正値とする。
(b)第二の色値と第二の予め設定される割合との積を第二の補正値とする。
(c)第一の補正値と第二の補正値との和をターゲット補正値とする。
(d)ターゲット補正値に基づき、i番目の第二の領域に対してホワイトバランス補正を行う。
選択的に、第一の予め設定される割合と第二の予め設定される割合との和は、1である。例示的に、第一の予め設定される割合がratioで表され、第二の予め設定される割合が(1-ratio)で表されるとすると、この場合に、i番目の第二の領域のホワイトバランス補正値=ratio*第一の色値+(1-ratio)*第二の色値である。
理解できるように、M個の第二の領域について、予め設定される条件を満たす一部の第二の領域は、ホワイトバランス補正を行う必要があり、予め設定される条件を満たさない一部の第二の領域は、ホワイトバランス補正を行う必要がない。ホワイトバランス補正を行う必要がある各第二の領域について、スペクトルセンサが色性能が高いが、感光性能が低いという特性を備え、色センサが感光性能が高いが、色性能が低いという特性を備えるため、スペクトルセンサによって取得された第一の色値と色センサによって取得された第二の色値が予め設定される条件を満たす時、第一の色値と第二の色値に対して予め設定される割合に従って和を求めることによって、二つのセンサの利点を互いに中和し、より正確なターゲット補正値を取得することができ、さらにターゲット補正値によって第二の領域に対してホワイトバランス補正を行い、撮影された画面の色復元効果をよりよく向上させることができる。
また、ホワイトバランス補正を行う必要がある複数の第二の領域について、各第二の領域の色値が異なる可能性があり、また各第二の領域に対応する第一の領域の色値が異なる可能性があるため、各第二の領域のホワイトバランス補正値が異なる可能性もある。このように、ホワイトバランス補正後の第二の画像における各第二の領域に対し、各領域の補正ポリシーがそれぞれ異なるため、各領域の色情報を正確に修正し、撮影画面に対する色復元をさらに正確にすることができる。
本出願は、ホワイトバランス補正方法を提供し、スペクトルセンサと色センサの特性が異なり、且つスペクトルセンサによって収集された第一の画像における各第一の領域が色センサによって収集されたホワイトバランス補正後の第二の画像の各第二の領域に一対一に対応するため、一つの第一の領域の色情報と一つの第二の領域の色情報が予め設定される条件を満たす時、この一つの第一の領域の色情報を採用してこの一つの第二の領域の色情報に対してAWB補正を行うことができ、それによって撮影された画面の色復元効果を向上させる。
説明すべきこととして、本出願の実施例によるホワイトバランス補正方法について、実行本体は、ホワイトバランス補正装置、又はこのホワイトバランス補正装置におけるホワイトバランス補正方法を実行するための制御モジュールであってもよい。本出願の実施例では、ホワイトバランス補正装置がホワイトバランス補正方法を実行することを例にし、本出願の実施例によるホワイトバランス補正装置を説明する。
図4に示すように、本出願の実施例は、ホワイトバランス補正装置400を提供する。このホワイトバランス補正装置400は、取得モジュール401と処理モジュール402とを含む。取得モジュール401は、スペクトルセンサによって収集された画像である第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得するために用いられてもよい。処理モジュール402は、ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行うために用いられてもよい。取得モジュール401はさらに、ホワイトバランス補正後の第二の画像に含まれるM個の第二の領域のうちの各第二の領域の色情報を取得するために用いられてもよく、一つの第二の領域は、一つの第一の領域に対応する。処理モジュール402はさらに、i番目の第二の領域について、第一の色情報と第二の色情報が予め設定される条件を満たす場合、この第一の色情報とこの第二の色情報に基づき、このi番目の第二の領域に対してホワイトバランス補正を行うために用いられてもよく、この第一の色情報は、このi番目の第二の領域の色情報であり、この第二の色情報は、このi番目の第二の領域に対応する一つの第一の領域の色情報である。ここで、Mは、1よりも大きい整数であり、iは、M以下の正の整数である。
選択的に、第一の色情報は、第一の色値であり、第二の色情報は、第二の色値であり、予め設定される条件は、第一の色値と第二の色値との差分値の絶対値が予め設定される色値以上であることである。
ここで、第一の色値と第二の色値は、
第一の色値がi番目の第二の領域のR色チャンネルの強度値を含み、第二の色値がi番目の第二の領域に対応する一つの第一の領域のR色チャンネルの強度値を含むことと、
第一の色値がi番目の第二の領域のG色チャンネルの強度値を含み、第二の色値がi番目の第二の領域に対応する一つの第一の領域のG色チャンネルの強度値を含むことと、
第一の色値がi番目の第二の領域のB色チャンネルの強度値を含み、第二の色値がi番目の第二の領域に対応する一つの第一の領域のB色チャンネルの強度値を含むことと、
第一の色値がi番目の第二の領域の色温度値を含み、第二の色値がi番目の第二の領域に対応する一つの第一の領域の色温度値を含むこととのうちの少なくとも一つを満たす。
選択的に、処理モジュール402は、具体的に、
第一の色値と第一の予め設定される割合との積を第一の補正値とし、
第二の色値と第二の予め設定される割合との積を第二の補正値とし、
第一の補正値と第二の補正値との和をターゲット補正値とし、
ターゲット補正値に基づき、i番目の第二の領域に対してホワイトバランス補正を行うために用いられてもよい。
選択的に、取得モジュール401は、具体的に、各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得するために用いられてもよい。
選択的に、各第一の領域の色情報は、少なくとも各第一の領域の色温度値を含む。取得モジュール401は、具体的に、
各第一の領域のスペクトル曲線を、第一の予め設定される式、第二の予め設定される式、第三の予め設定される式とそれぞれ積分演算し、各第一の領域のR色チャンネルの強度値、各第一の領域のG色チャンネルの強度値、各第一の領域のB色チャンネルの強度値を得、
各第一の領域のR色チャンネルの強度値、各第一の領域のG色チャンネルの強度値、各第一の領域のB色チャンネルの強度値を、X色空間の強度値、Y色空間の強度値、Z色空間の強度値にそれぞれ変換し、
X色空間の強度値、Y色空間の強度値とZ色空間の強度値に基づき、各第一の領域の色温度値を取得するために用いられてもよい。
選択的に、各第一の領域は、N個のピクセルポイントを含み、Nは、1よりも大きい整数である。処理モジュール402はさらに、取得モジュール401が各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得する前に、可視波長範囲をN個の波長域範囲に分けるために用いられてもよく、N個のピクセルポイントのうちの一つのピクセルポイントは、N個の波長域範囲のうちの一つの波長域範囲に対応する。取得モジュール401はさらに、各ピクセルポイントに対応する波長域範囲内で、各ピクセルポイントの感光値を取得し、且つN個のピクセルポイントの感光値に基づき、各第一の領域のスペクトル曲線を取得するために用いられてもよい。
本出願は、ホワイトバランス補正装置を提供し、スペクトルセンサと色センサの特性が異なり、且つスペクトルセンサによって収集された第一の画像における各第一の領域が色センサによって収集されたホワイトバランス補正後の第二の画像の各第二の領域に一対一に対応するため、一つの第一の領域の色情報と一つの第二の領域の色情報が予め設定される条件を満たす時、ホワイトバランス補正装置は、この一つの第一の領域の色情報を採用してこの一つの第二の領域の色情報に対してAWB補正を行うことができ、それによって撮影された画面の色復元効果を向上させる。
本出願の実施例におけるホワイトバランス補正装置は、装置であってもよく、端末における部材、集積回路、又はチップであってもよい。この装置は、移動電子機器であってもよく、非移動電子機器であってもよい。例示的に、移動電子機器は、携帯電話、タブレットパソコン、ノートパソコン、パームトップコンピュータ、車載電子機器、ウェアラブルデバイス、ウルトラモバイルパーソナルコンピュータ(ultra-mobile personal computer、UMPC)、ネットブック又はパーソナルデジタルアシスタント(personal digital assistant、PDA)などであってもよく、非移動電子機器は、ネットワーク接続型ストレージ(network attached storage、NAS)、パーソナルコンピュータ(personal computer、PC)、テレビ(television、TV)、預入支払機又はセルフサービス機などであってもよく、本出願の実施例は、具体的に限定しない。
本出願の実施例におけるホワイトバランス補正装置は、オペレーティングシステムを有する装置であってもよい。このオペレーティングシステムは、アンドロイド(登録商標)(Android(登録商標))オペレーティングシステムであってもよく、iOSオペレーティングシステムであってもよく、他の可能なオペレーティングシステムであってもよく、本出願の実施例は、具体的に限定しない。
本出願の実施例によるホワイトバランス補正装置は、図1から図3の方法の実施例により実現される各プロセスを実現することができ、説明の繰り返しを回避するために、ここでこれ以上説明しない。
選択的に、図5に示すように、本出願の実施例は、電子機器500をさらに提供し、プロセッサ501と、メモリ502と、メモリ502に記憶されており、且つプロセッサ501上で運行できるプログラム又は命令とを含み、このプログラム又は命令がプロセッサ501により実行される時、上記ホワイトバランス補正方法の実施例の各プロセスを実現し、且つ同じ技術的効果を達成することができる。説明の繰り返しを回避するために、ここでこれ以上説明しない。
説明すべきこととして、本出願の実施例における電子機器は、上記の移動電子機器と非移動電子機器とを含む。
図6は、本出願の実施例を実現する電子機器のハードウェア構造概略図である。
この電子機器600は、無線周波数ユニット601、ネットワークモジュール602、オーディオ出力ユニット603、入力ユニット604、センサ605、表示ユニット606、ユーザ入力ユニット607、インターフェースユニット608、メモリ609、及びプロセッサ610などの部材を含むが、それらに限らない。
当業者であれば理解できるように、電子機器600は、各部材に給電する電源(例えば、電池)をさらに含んでもよく、電源は、電源管理システムによってプロセッサ610にロジック的に接続されてもよく、それにより電源管理システムによって充放電管理及び消費電力管理などの機能を実現することができる。図6に示す電子機器の構造は、電子機器に対する限定を構成せず、電子機器は、図示された部材の数よりも多く又は少ない部材、又はいくつかの部材の組み合わせ、又は異なる部材の配置を含んでもよく、ここでこれ以上説明しない。
ここで、プロセッサ610は、スペクトルセンサによって収集された画像である第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得するために用いられる。プロセッサ610はさらに、ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行い、且つホワイトバランス補正後の第二の画像に含まれるM個の第二の領域のうちの各第二の領域の色情報を取得するために用いられ、一つの第二の領域は、一つの第一の領域に対応する。プロセッサ610はさらに、i番目の第二の領域について、第一の色情報と第二の色情報が予め設定される条件を満たす場合、この第一の色情報とこの第二の色情報に基づき、このi番目の第二の領域に対してホワイトバランス補正を行うために用いられ、この第一の色情報は、このi番目の第二の領域の色情報であり、この第二の色情報は、このi番目の第二の領域に対応する一つの第一の領域の色情報である。ここで、Mは、1よりも大きい整数であり、iは、M以下の正の整数である。
選択的に、プロセッサ610は、具体的に、第一の色値と第一の予め設定される割合との積を第一の補正値とし、第二の色値と第二の予め設定される割合との積を第二の補正値とし、第一の補正値と第二の補正値との和をターゲット補正値とし、ターゲット補正値に基づき、i番目の第二の領域に対してホワイトバランス補正を行うために用いられてもよい。
選択的に、プロセッサ610は、具体的に、各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得するために用いられてもよい。
選択的に、各第一の領域の色情報は、少なくとも各第一の領域の色温度値を含む。プロセッサ610は、具体的に、
各第一の領域のスペクトル曲線を、第一の予め設定される式、第二の予め設定される式、第三の予め設定される式とそれぞれ積分演算し、各第一の領域のR色チャンネルの強度値、各第一の領域のG色チャンネルの強度値、各第一の領域のB色チャンネルの強度値を得、
各第一の領域のR色チャンネルの強度値、各第一の領域のG色チャンネルの強度値、各第一の領域のB色チャンネルの強度値を、X色空間の強度値、Y色空間の強度値、Z色空間の強度値にそれぞれ変換し、
X色空間の強度値、Y色空間の強度値とZ色空間の強度値に基づき、各第一の領域の色温度値を取得するために用いられてもよい。
選択的に、各第一の領域は、N個のピクセルポイントを含み、Nは、1よりも大きい整数である。プロセッサ610はさらに、各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得する前に、可視波長範囲をN個の波長域範囲に分けるために用いられてもよく、N個のピクセルポイントのうちの一つのピクセルポイントは、N個の波長域範囲のうちの一つの波長域範囲に対応する。プロセッサ610はさらに、各ピクセルポイントに対応する波長域範囲内で、各ピクセルポイントの感光値を取得し、且つN個のピクセルポイントの感光値に基づき、各第一の領域のスペクトル曲線を取得するために用いられてもよい。
本出願は、電子機器を提供し、電子機器におけるスペクトルセンサと色センサの特性が異なり、且つスペクトルセンサによって収集された第一の画像における各第一の領域が色センサによって収集されたホワイトバランス補正後の第二の画像の各第二の領域に一対一に対応するため、一つの第一の領域の色情報と一つの第二の領域の色情報が予め設定される条件を満たす時、電子機器は、この一つの第一の領域の色情報を採用してこの一つの第二の領域の色情報に対してAWB補正を行うことができ、それによって撮影された画面の色復元効果を向上させる。
理解すべきこととして、本出願の実施例では、入力ユニット604は、グラフィックスプロセッサ(graphics processing unit、GPU)6041とマイクロホン6042を含んでもよく、グラフィックスプロセッサ6041は、ビデオキャプチャモード又は画像キャプチャモードにおいて画像キャプチャ装置(例えば、カメラ)によって得られた静止画像又はビデオの画像データを処理する。表示ユニット606は、表示パネル6061を含んでもよく、液晶ディスプレイ、有機発光ダイオードなどの形式で表示パネル6061が配置されてもよい。ユーザ入力ユニット607は、タッチパネル6071及び他の入力機器6072を含む。タッチパネル6071は、タッチスクリーンとも呼ばれる。タッチパネル6071は、タッチ検出装置とタッチコントローラという二つの部分を含んでもよい。他の入力機器6072は、物理的キーボード、機能キー(例えば、音量制御ボタン、スイッチボタンなど)、トラックボール、マウス、操作レバーを含んでもよいが、それらに限らず、ここでこれ以上説明しない。メモリ609は、ソフトウェアプログラム及び様々なデータを記憶するために用いられてもよく、アプリケーションプログラムとオペレーティングシステムとを含むが、それらに限らない。プロセッサ610は、アプリケーションプロセッサとモデムプロセッサを統合してもよい。ここで、アプリケーションプロセッサは、主にオペレーティングシステム、ユーザインタフェース及びアプリケーションプログラムなどを処理するためのものであり、モデムプロセッサは、主に無線通信を処理するためのものである。理解できるように、上記モデムプロセッサは、プロセッサ610に統合されなくてもよい。
本出願の実施例は、可読記憶媒体をさらに提供し、この可読記憶媒体上にはプログラム又は命令が記憶されており、このプログラム又は命令がプロセッサにより実行される時、上記ホワイトバランス補正方法の実施例の各プロセスを実現し、且つ同じ技術的効果を達成することができる。説明の繰り返しを回避するために、ここでこれ以上説明しない。
ここで、プロセッサは、上記実施例における電子機器におけるプロセッサである。可読記憶媒体は、コンピュータ可読記憶媒体、例えばコンピュータリードオンリーメモリ(read-only memory、ROM)、ランダムアクセスメモリ(random access memory、RAM)、磁気ディスク又は光ディスクなどを含む。
本出願の実施例は、チップをさらに提供し、このチップは、プロセッサと通信インターフェースを含み、この通信インターフェースは、このプロセッサと結合され、このプロセッサは、プログラム又は命令を運行し、上記ホワイトバランス補正方法の実施例の各プロセスを実現するために用いられ、且つ同じ技術的効果を達成することができる。説明の繰り返しを回避するために、ここでこれ以上説明しない。
理解すべきこととして、本出願の実施例に言及されたチップは、システムレベルチップ、システムチップ、チップシステム又はシステムオンチップなどと呼ばれてもよい。
説明すべきこととして、本明細書では、用語である「含む」、「包含」又はその他の任意の変形は、非排他的な「含む」を意図的にカバーするものであり、それによって一連の要素を含むプロセス、方法、物品又は装置は、それらの要素を含むだけではなく、明確にリストアップされていない他の要素も含み、又はこのようなプロセス、方法、物品又は装置に固有の要素も含む。それ以上の制限がない場合に、「……を1つ含む」という文章で限定された要素について、この要素を含むプロセス、方法、物品又は装置には他の同じ要素も存在することが排除されるものではない。なお、指摘すべきこととして、本出願の実施の形態における方法と装置の範囲は、図示又は討論された順序で機能を実行することに限らず、関わる機能に基づいて基本的に同時である方式又は逆の順序で機能を実行することを含んでもよく、例えば記述されたものとは異なる手順で記述された方法を実行することができるとともに、様々なステップを追加、省略又は組み合わせることができる。また、いくつかの例を参照して記述された特徴は、他の例で組み合わせられることができる。
以上の実施の形態の記述によって、当業者であればはっきりと分かるように、上記実施例の方法は、ソフトウェアと必要な汎用ハードウェアプラットフォームの形態によって実現されることができる。無論、ハードウェアによって実現されてもよいが、多くの場合、前者は、より好適な実施の形態である。このような理解を踏まえて、本出願の技術案は、実質には又は従来の技術に寄与した部分がソフトウェア製品の形式によって具現化されてもよい。このコンピュータソフトウェア製品は、一つの記憶媒体(例えばROM/RAM、磁気ディスク、光ディスク)に記憶され、一台の端末(携帯電話、コンピュータ、サーバ、エアコン、又はネットワーク機器などであってもよい)に本出願の各実施例の方法を実行させるための若干の命令を含む。
以上は、図面を結び付けながら、本出願の実施例を記述したが、本出願は、上記の具体的な実施の形態に限らない。上記の具体的な実施の形態は、例示的なものに過ぎず、制限性のあるものではない。当業者は、本出願の示唆のもとで、本出願の趣旨と請求項が保護する範囲から逸脱しない限り、多くの形式を行うこともでき、それらは、いずれも本出願の保護範囲に属する。

Claims (17)

  1. ホワイトバランス補正方法であって、
    スペクトルセンサによって収集された画像である第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得することと、
    ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行い、且つホワイトバランス補正後の第二の画像に含まれるM個の第二の領域のうちの各第二の領域の色情報を取得することであって、一つの第二の領域が一つの第一の領域に対応することと、
    i番目の第二の領域について、第一の色情報と第二の色情報が予め設定される条件を満たす場合、前記第一の色情報と前記第二の色情報に基づき、前記i番目の第二の領域に対してホワイトバランス補正を行うことであって、前記第一の色情報が前記i番目の第二の領域の色情報であり、前記第二の色情報が前記i番目の第二の領域に対応する一つの第一の領域の色情報であることとを含み、
    ここで、Mは、1よりも大きい整数であり、iは、M以下の正の整数である、ホワイトバランス補正方法。
  2. 前記第一の色情報は、第一の色値であり、前記第二の色情報は、第二の色値であり、前記予め設定される条件は、前記第一の色値と前記第二の色値との差分値の絶対値が予め設定される色値以上であることであり、ここで、
    前記第一の色値と前記第二の色値は、
    前記第一の色値が前記i番目の第二の領域のR色チャンネルの強度値を含み、前記第二の色値が前記i番目の第二の領域に対応する一つの第一の領域のR色チャンネルの強度値を含むことと、
    前記第一の色値が前記i番目の第二の領域のG色チャンネルの強度値を含み、前記第二の色値が前記i番目の第二の領域に対応する一つの第一の領域のG色チャンネルの強度値を含むことと、
    前記第一の色値が前記i番目の第二の領域のB色チャンネルの強度値を含み、前記第二の色値が前記i番目の第二の領域に対応する一つの第一の領域のB色チャンネルの強度値を含むことと、
    前記第一の色値が前記i番目の第二の領域の色温度値を含み、前記第二の色値が前記i番目の第二の領域に対応する一つの第一の領域の色温度値を含むこととのうちの少なくとも一つを満たす、請求項1に記載の方法。
  3. 前記の、前記第一の色情報と前記第二の色情報に基づき、前記i番目の第二の領域に対してホワイトバランス補正を行うことは、
    前記第一の色値と第一の予め設定される割合との積を第一の補正値とすることと、
    前記第二の色値と第二の予め設定される割合との積を第二の補正値とすることと、
    前記第一の補正値と前記第二の補正値との和をターゲット補正値とすることと、
    前記ターゲット補正値に基づき、前記i番目の第二の領域に対してホワイトバランス補正を行うこととを含む、請求項2に記載の方法。
  4. 前記の、第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得することは、
    前記各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得することを含む、請求項1から3のいずれか1項に記載の方法。
  5. 前記各第一の領域の色情報は、少なくとも前記各第一の領域の色温度値を含み、前記の、前記各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得することは、
    前記各第一の領域のスペクトル曲線を、第一の予め設定される式、第二の予め設定される式、第三の予め設定される式とそれぞれ積分演算し、前記各第一の領域のR色チャンネルの強度値、前記各第一の領域のG色チャンネルの強度値、前記各第一の領域のB色チャンネルの強度値を得ることと、
    前記各第一の領域のR色チャンネルの強度値、前記各第一の領域のG色チャンネルの強度値、前記各第一の領域のB色チャンネルの強度値を、X色空間の強度値、Y色空間の強度値、Z色空間の強度値にそれぞれ変換することと、
    前記X色空間の強度値、前記Y色空間の強度値と前記Z色空間の強度値に基づき、前記各第一の領域の色温度値を取得することとを含む、請求項4に記載の方法。
  6. 前記各第一の領域は、N個のピクセルポイントを含み、Nは、1よりも大きい整数であり、前記の、前記各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得する前に、前記方法は、
    可視波長範囲をN個の波長域範囲に分けることであって、前記N個のピクセルポイントのうちの一つのピクセルポイントが前記N個の波長域範囲のうちの一つの波長域範囲に対応することと、
    各ピクセルポイントに対応する波長域範囲内で、前記各ピクセルポイントの感光値を取得することと、
    前記N個のピクセルポイントの感光値に基づき、前記各第一の領域のスペクトル曲線を取得することとをさらに含む、請求項4に記載の方法。
  7. ホワイトバランス補正装置であって、
    取得モジュールと処理モジュールとを含み、
    前記取得モジュールは、スペクトルセンサによって収集された画像である第一の画像に含まれるM個の第一の領域のうちの各第一の領域の色情報を取得するために用いられ、
    前記処理モジュールは、ターゲット数値を採用して色センサによって収集された第二の画像に対してホワイトバランス補正を行うために用いられ、
    前記取得モジュールはさらに、ホワイトバランス補正後の第二の画像に含まれるM個の第二の領域のうちの各第二の領域の色情報を取得するために用いられ、一つの第二の領域は、一つの第一の領域に対応し、
    前記処理モジュールはさらに、i番目の第二の領域について、第一の色情報と第二の色情報が予め設定される条件を満たす場合、前記第一の色情報と前記第二の色情報に基づき、前記i番目の第二の領域に対してホワイトバランス補正を行うために用いられ、前記第一の色情報は、前記i番目の第二の領域の色情報であり、前記第二の色情報は、前記i番目の第二の領域に対応する一つの第一の領域の色情報であり、
    ここで、Mは、1よりも大きい整数であり、iは、M以下の正の整数である、ホワイトバランス補正装置。
  8. 前記第一の色情報は、第一の色値であり、前記第二の色情報は、第二の色値であり、前記予め設定される条件は、前記第一の色値と前記第二の色値との差分値の絶対値が予め設定される色値以上であることであり、ここで、
    前記第一の色値と前記第二の色値は、
    前記第一の色値が前記i番目の第二の領域のR色チャンネルの強度値を含み、前記第二の色値が前記i番目の第二の領域に対応する一つの第一の領域のR色チャンネルの強度値を含むことと、
    前記第一の色値が前記i番目の第二の領域のG色チャンネルの強度値を含み、前記第二の色値が前記i番目の第二の領域に対応する一つの第一の領域のG色チャンネルの強度値を含むことと、
    前記第一の色値が前記i番目の第二の領域のB色チャンネルの強度値を含み、前記第二の色値が前記i番目の第二の領域に対応する一つの第一の領域のB色チャンネルの強度値を含むことと、
    前記第一の色値が前記i番目の第二の領域の色温度値を含み、前記第二の色値が前記i番目の第二の領域に対応する一つの第一の領域の色温度値を含むこととのうちの少なくとも一つを満たす、請求項7に記載のホワイトバランス補正装置。
  9. 前記処理モジュールは、具体的に、
    前記第一の色値と第一の予め設定される割合との積を第一の補正値とし、
    前記第二の色値と第二の予め設定される割合との積を第二の補正値とし、
    前記第一の補正値と前記第二の補正値との和をターゲット補正値とし、
    前記ターゲット補正値に基づき、前記i番目の第二の領域に対してホワイトバランス補正を行うために用いられる、請求項8に記載のホワイトバランス補正装置。
  10. 前記取得モジュールは、具体的に、前記各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得するために用いられる、請求項7から9のいずれか1項に記載のホワイトバランス補正装置。
  11. 前記各第一の領域の色情報は、少なくとも前記各第一の領域の色温度値を含み、
    前記取得モジュールは、具体的に、
    前記各第一の領域のスペクトル曲線を、第一の予め設定される式、第二の予め設定される式、第三の予め設定される式とそれぞれ積分演算し、前記各第一の領域のR色チャンネルの強度値、前記各第一の領域のG色チャンネルの強度値、前記各第一の領域のB色チャンネルの強度値を得、
    前記各第一の領域のR色チャンネルの強度値、前記各第一の領域のG色チャンネルの強度値、前記各第一の領域のB色チャンネルの強度値を、X色空間の強度値、Y色空間の強度値、Z色空間の強度値にそれぞれ変換し、
    前記X色空間の強度値、前記Y色空間の強度値と前記Z色空間の強度値に基づき、前記各第一の領域の色温度値を取得するために用いられる、請求項10に記載のホワイトバランス補正装置。
  12. 前記各第一の領域は、N個のピクセルポイントを含み、Nは、1よりも大きい整数であり、
    前記処理モジュールはさらに、前記取得モジュールが前記各第一の領域のスペクトル曲線に基づき、各第一の領域の色情報を取得する前に、可視波長範囲をN個の波長域範囲に分けるために用いられ、前記N個のピクセルポイントのうちの一つのピクセルポイントは、前記N個の波長域範囲のうちの一つの波長域範囲に対応し、
    前記取得モジュールはさらに、各ピクセルポイントに対応する波長域範囲内で、前記各ピクセルポイントの感光値を取得し、且つ前記N個のピクセルポイントの感光値に基づき、前記各第一の領域のスペクトル曲線を取得するために用いられる、請求項10に記載のホワイトバランス補正装置。
  13. プロセッサと、メモリと、前記メモリに記憶され、且つ前記プロセッサ上で運行できるプログラム又は命令とを含み、前記プログラム又は命令が前記プロセッサにより実行される時、請求項1から6のいずれか1項に記載のホワイトバランス補正方法のステップを実現する、電子機器。
  14. プログラム又は命令が記憶されており、前記プログラム又は命令がプロセッサにより実行される時、請求項1から6のいずれか1項に記載のホワイトバランス補正方法のステップを実現する、可読記憶媒体。
  15. プロセッサと通信インターフェースとを含み、前記通信インターフェースは、前記プロセッサと結合され、前記プロセッサは、プログラム又は命令を運行し、請求項1から6のいずれか1項に記載のホワイトバランス補正方法のステップを実現するために用いられる、チップ。
  16. 非揮発性の記憶媒体に記憶されており、少なくとも一つのプロセッサにより実行されて、請求項1から6のいずれか1項に記載のホワイトバランス補正方法のステップを実現する、コンピュータプログラム製品。
  17. 請求項1から6のいずれか1項に記載のホワイトバランス補正方法のステップを実行するように構成される、電子機器。
JP2023513442A 2020-08-26 2021-08-23 ホワイトバランス補正方法、装置及び電子機器 Pending JP2023538781A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202010870987.8 2020-08-26
CN202010870987.8A CN111953955B (zh) 2020-08-26 2020-08-26 白平衡补偿方法、装置及电子设备
PCT/CN2021/114147 WO2022042501A1 (zh) 2020-08-26 2021-08-23 白平衡补偿方法、装置及电子设备

Publications (1)

Publication Number Publication Date
JP2023538781A true JP2023538781A (ja) 2023-09-11

Family

ID=73366439

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023513442A Pending JP2023538781A (ja) 2020-08-26 2021-08-23 ホワイトバランス補正方法、装置及び電子機器

Country Status (6)

Country Link
US (1) US20230199331A1 (ja)
EP (1) EP4207754A4 (ja)
JP (1) JP2023538781A (ja)
KR (1) KR20230056734A (ja)
CN (1) CN111953955B (ja)
WO (1) WO2022042501A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111953955B (zh) * 2020-08-26 2022-01-04 维沃移动通信有限公司 白平衡补偿方法、装置及电子设备
CN113676717B (zh) * 2021-08-27 2024-02-06 浙江大华技术股份有限公司 一种滤片纠正方法、装置、设备和介质
CN114143447B (zh) * 2021-11-08 2024-03-05 维沃移动通信有限公司 图像处理方法、装置及电子设备
CN116156139A (zh) * 2021-11-18 2023-05-23 北京与光科技有限公司 图像的白平衡优化方法、装置和电子设备
CN114554170A (zh) * 2022-03-08 2022-05-27 三星半导体(中国)研究开发有限公司 多传感器白平衡同步的方法和使用该方法的电子装置

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58151793A (ja) * 1982-03-05 1983-09-09 Toshiba Corp オ−トホワイトバランスtvカラ−カメラ装置
US4739393A (en) * 1985-11-05 1988-04-19 Sanyo Electric Co., Ltd. Circuit for performing white balance correction using two color temperature sensors
US5283632A (en) * 1990-04-09 1994-02-01 Canon Kabushiki Kaisha Image pickup apparatus
US7474339B2 (en) * 2002-12-18 2009-01-06 Nikon Corporation Image-processing device with a first image sensor and a second image sensor
JP4800591B2 (ja) * 2004-05-26 2011-10-26 オリンパス株式会社 撮影システム
JP5116389B2 (ja) * 2007-07-25 2013-01-09 キヤノン株式会社 撮像装置及び制御方法
JP2009260411A (ja) * 2008-04-11 2009-11-05 Olympus Corp 撮像装置
EP2279612B1 (en) * 2008-05-22 2013-03-20 Hewlett-Packard Development Company, L.P. Camera sensor correction
JP5253000B2 (ja) * 2008-06-03 2013-07-31 オリンパス株式会社 撮像装置
US8068147B2 (en) * 2008-12-18 2011-11-29 Motorola Mobility, Inc. Setting the white balance of a video frame
US8547450B2 (en) * 2010-02-22 2013-10-01 Texas Instruments Incorporated Methods and systems for automatic white balance
JP5808142B2 (ja) * 2011-05-02 2015-11-10 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP5990004B2 (ja) * 2012-02-08 2016-09-07 キヤノン株式会社 撮像装置
CN103327345B (zh) * 2012-03-19 2015-03-11 华晶科技股份有限公司 白平衡处理方法及其处理装置
WO2014057354A1 (en) * 2012-10-02 2014-04-17 Marvell World Trade Ltd. Systems and methods for camera image correction and white balancing
US9025047B2 (en) * 2012-12-13 2015-05-05 Samsung Electronics Co., Ltd. Photographing apparatus and method
JP6234191B2 (ja) * 2013-11-28 2017-11-22 オリンパス株式会社 マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
JP6274931B2 (ja) * 2014-03-19 2018-02-07 オリンパス株式会社 マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
JP6063093B2 (ja) * 2014-03-31 2017-01-18 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及びプログラム
JP6494181B2 (ja) * 2014-05-30 2019-04-03 キヤノン株式会社 撮像装置、その制御方法、および制御プログラム
CN105981379B (zh) * 2014-09-17 2018-09-25 深圳市大疆创新科技有限公司 自动白平衡系统及方法
US20160227100A1 (en) * 2015-01-29 2016-08-04 Qualcomm Incorporated Dual camera systems and methods for rapid 3a convergence and high dynamic range exposure metering
CN104661003B (zh) * 2015-02-04 2016-09-07 苏州佳世达电通有限公司 电子装置及其色彩校正方法
CN106454081B (zh) * 2016-09-29 2019-03-22 宇龙计算机通信科技(深圳)有限公司 拍照方法及装置
CN107454345B (zh) * 2017-07-12 2019-10-22 Oppo广东移动通信有限公司 图像的白平衡处理方法、装置和终端设备
CN108063891B (zh) * 2017-12-07 2020-04-24 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
CN107920236A (zh) * 2017-12-18 2018-04-17 广东欧珀移动通信有限公司 图像白平衡处理方法和装置、存储介质和电子设备
CN108600725B (zh) * 2018-05-10 2024-03-19 浙江芯劢微电子股份有限公司 一种基于rgb-ir图像数据的白平衡校正装置及方法
CN208353496U (zh) * 2018-05-10 2019-01-08 杭州雄迈集成电路技术有限公司 一种基于rgb-ir图像数据的白平衡校正装置
CN109561291A (zh) * 2018-10-23 2019-04-02 Oppo广东移动通信有限公司 色温补偿方法、装置、存储介质及移动终端
CN110740307A (zh) * 2019-11-18 2020-01-31 重庆金山医疗技术研究院有限公司 自动白平衡的内窥镜及白平衡参数调节方法
CN111586300B (zh) * 2020-05-09 2022-02-08 展讯通信(上海)有限公司 颜色校正方法、装置及可读存储介质
CN111551266B (zh) * 2020-05-25 2021-01-22 吉林求是光谱数据科技有限公司 一种基于多光谱图像探测技术的环境色温测试方法及系统
CN111953955B (zh) * 2020-08-26 2022-01-04 维沃移动通信有限公司 白平衡补偿方法、装置及电子设备

Also Published As

Publication number Publication date
CN111953955A (zh) 2020-11-17
CN111953955B (zh) 2022-01-04
EP4207754A1 (en) 2023-07-05
EP4207754A4 (en) 2024-02-07
WO2022042501A1 (zh) 2022-03-03
KR20230056734A (ko) 2023-04-27
US20230199331A1 (en) 2023-06-22

Similar Documents

Publication Publication Date Title
JP2023538781A (ja) ホワイトバランス補正方法、装置及び電子機器
CN111508450B (zh) 屏幕颜色转换方法、装置、存储介质和电子设备
Akyüz et al. Color appearance in high-dynamic-range imaging
CN111586300B (zh) 颜色校正方法、装置及可读存储介质
US9049407B2 (en) Color correction of images
CN110139088B (zh) 色温补偿方法、电子设备及计算机可读存储介质
CN105245863A (zh) 进行白平衡控制的图像处理装置及其控制方法和摄像设备
WO2023016320A1 (zh) 图像处理方法、装置、设备及介质
CN113676639B (zh) 图像处理方法、处理装置、电子设备及介质
EP4187901A1 (en) Image sensor, signal processing method, and related device
CN105577982A (zh) 一种图像处理的方法及终端
WO2005036114A1 (ja) 画像表示装置及び画像表示方法
CN115209118A (zh) 图像颜色校正系统和方法
JP2010217645A (ja) 画像表示装置の補正値作成方法、画像表示装置の補正値作成装置、及び画像表示装置の補正値作成プログラム
CN114245025A (zh) 补光方法、装置、设备、存储介质和计算机产品
US8654210B2 (en) Adaptive color imaging
CN113676715A (zh) 图像处理方法及装置
CN111918047A (zh) 拍照控制方法及装置、存储介质和电子设备
JP2010217644A (ja) 画像表示装置の補正値作成方法、画像表示装置の補正値作成装置、及び画像表示装置の補正値作成プログラム
WO2022262848A1 (zh) 图像处理方法、装置和电子设备
JP2013085074A (ja) 画像処理装置、撮像装置、画像処理方法および画像処理プログラム
Lee et al. A camera-based color calibration of tiled display systems under various illumination environments
Zhu et al. Impact of color temperature on the color gamut volume of a six-primary-laser display system
CN114143447B (zh) 图像处理方法、装置及电子设备
US20240071275A1 (en) Calibration system for display apparatus and operating method thereof

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230224

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230224

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240308