JPWO2015083562A1 - 画像処理装置、画像処理方法、電子機器、並びにプログラム - Google Patents
画像処理装置、画像処理方法、電子機器、並びにプログラム Download PDFInfo
- Publication number
- JPWO2015083562A1 JPWO2015083562A1 JP2015551464A JP2015551464A JPWO2015083562A1 JP WO2015083562 A1 JPWO2015083562 A1 JP WO2015083562A1 JP 2015551464 A JP2015551464 A JP 2015551464A JP 2015551464 A JP2015551464 A JP 2015551464A JP WO2015083562 A1 JPWO2015083562 A1 JP WO2015083562A1
- Authority
- JP
- Japan
- Prior art keywords
- image
- pixel
- exposure
- flicker
- noise component
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 117
- 238000003672 processing method Methods 0.000 title abstract description 6
- 238000004364 calculation method Methods 0.000 claims abstract description 96
- 230000000737 periodic effect Effects 0.000 claims abstract description 38
- 239000011159 matrix material Substances 0.000 claims description 87
- 238000012937 correction Methods 0.000 claims description 61
- 230000014509 gene expression Effects 0.000 claims description 40
- 238000000034 method Methods 0.000 claims description 35
- 230000008569 process Effects 0.000 claims description 25
- 230000010354 integration Effects 0.000 claims description 22
- 229920006395 saturated elastomer Polymers 0.000 claims description 16
- 230000001131 transforming effect Effects 0.000 claims description 8
- 238000005516 engineering process Methods 0.000 abstract description 38
- 238000003384 imaging method Methods 0.000 description 35
- 238000006243 chemical reaction Methods 0.000 description 33
- 230000006870 function Effects 0.000 description 22
- 230000035945 sensitivity Effects 0.000 description 22
- 238000010586 diagram Methods 0.000 description 18
- 238000005286 illumination Methods 0.000 description 17
- 239000000203 mixture Substances 0.000 description 13
- 230000002194 synthesizing effect Effects 0.000 description 10
- 230000015572 biosynthetic process Effects 0.000 description 6
- ORQBXQOJMQIAOY-UHFFFAOYSA-N nobelium Chemical compound [No] ORQBXQOJMQIAOY-UHFFFAOYSA-N 0.000 description 6
- 238000003786 synthesis reaction Methods 0.000 description 6
- 230000003595 spectral effect Effects 0.000 description 5
- 230000001629 suppression Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000002156 mixing Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000012447 hatching Effects 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/745—Detection of flicker frequency or suppression of flicker wherein the flicker is caused by illumination, e.g. due to fluorescent tube illumination or pulsed LED illumination
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
- H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
- H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
- H01L27/144—Devices controlled by radiation
- H01L27/146—Imager structures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/743—Bracketing, i.e. taking a series of images with varying exposure conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/133—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/62—Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels
- H04N25/628—Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels for reducing horizontal stripes caused by saturated regions of CMOS sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2209/00—Details of colour television systems
- H04N2209/04—Picture signal generators
- H04N2209/041—Picture signal generators using solid-state devices
- H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
- H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Power Engineering (AREA)
- Condensed Matter Physics & Semiconductors (AREA)
- General Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Computer Hardware Design (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
Description
1.フリッカ発生原理と補正原理について
2.撮像装置の構成
3.画像処理部の構成について
4.フリッカ補正部の構成について
5.フリッカ比の算出について
6.フリッカ抑制の第1の実施の形態
7.フリッカ抑制の第2の実施の形態
8.フリッカ抑制の第3の実施の形態
9.記録媒体について
まず、図1以下を参照してフリッカ発生原理と補正原理について説明する。図1のAは、カメラで画像撮影を行う環境下の照明輝度の時間変化を表す。一般に商用電源は50Hz、あるいは60Hzの交流電源であるため、蛍光灯の光などの照明光は、100Hz、あるいは120Hzの周波数で揺らぎやすい。
f(t)=fD+fA(t) ・・・(1)
FD(t,E)=fD×E ・・・(4)
gy(t,y,E)=gt(t+y,E) ・・・(6)
図3のA:フリッカ成分の含まれる画像(=図2のA)
図3のB:フリッカ補正係数(=図2のBの逆数)
図3のC:フリッカ補正画像(=図3のA×図3のB)
本技術が適用される画像処理装置は、例えば広ダイナミックレンジ画像を生成するために、異なる露光時間に設定した複数の撮影画像を入力して、フリッカ成分を除去または低減した補正画像を生成して出力する。本技術が適用される画像処理装置は、例えば、異なる露光時間に設定した複数の撮影画像を合成して、低輝度部分から高輝度部分まで、より正確な画素値の設定された広ダイナミックレンジ画像を生成して出力する。
次に、図4に示した撮像装置100の画像処理部103の詳細について説明する。まず、図14を参照して画像処理部103の実行する処理について説明する。画像処理部103は、図14に示すように、感度別補間部311、フリッカ補正部312、HDR合成部(広ダイナミックレンジ画像合成部)313を有する。
H=(1−α)×S+α×L
図17は、フリッカ補正部312の内部構成例を示す図である。フリッカ補正部312は、補正に係わる演算により、複数の実施の形態があり、以下に第1乃至第3の実施の形態を例に挙げて説明するが、第1乃至第3の実施の形態において共通する構成について、図17を参照して説明する。
ここで、図19を参照し、フリッカ比について説明する。図19のAは、第1露光画像141と第2露光画像142を表し、フリッカの影響で、画像上に縞模様が載っている画像となっている例を示している。
I(x,y,t,E)=I0(x,y)×E×gt(t+y,E)
・・・(7)
式(7)において、I0(x,y)は、単位露光時間でのフリッカの影響のない真の画像の値である。
第1の露光条件:露光時間がE1、一番上の行の露光終了時刻をt1
第2の露光条件:露光時間がE2、一番上の行の露光終了時刻をt2
とする。またE1≦E2である。
I1(x,y)=I(x,y,t1,E1)
I2(x,y)=I(x,y,t2,E2) ・・・(8)
r12(y)×gt(y+t2,E2)=g1(y+t1,E1)
・・・(10)
第1の実施の形態として、実空間での解法で、フリッカ成分を求める場合について説明する。図20は、第1の実施の形態におけるフリッカ補正部312内のフリッカ推定部371の推定演算部404の内部構成例を示す図である。
g2=tg1 ・・・(12)
g2=tg1
rg2=g1 ・・・(14)
rtg1=g1 ・・・(15)
次に第2の実施の形態として、複素空間での解法で、フリッカ成分を求める場合について説明する。図21は、第2の実施の形態におけるフリッカ補正部312内のフリッカ推定部371の推定演算部404’の内部構成例を示す図である。なおここでは、図20に示した第1の実施の形態における推定演算部404と区別を付けるために、第2の実施の形態における推定演算部404’には、ダッシュを付して説明する。
r12(y)×gt(y+t2,E2)=g1(y+t1,E1)
・・・(10)
RTG1=G1 ・・・(21)
G1(0)=1
となり、既知となるため、一意に解を求めることができる。
第1の実施の形態と第2の実施の形態においては、第1の露光条件で露光されて撮影された画像のフリッカ成分と、第2の露光条件で露光されて撮影された画像のフリッカ成分とのフリッカ比を用いて、第1フリッカ成分381と第2フリッカ成分382を算出し、フリッカ成分を抑制する場合を例に挙げて説明した。
I1(x,y)=I0(x,y)×E1×gt(t1+y,E1)
I2(x,y)=I0(x,y)×E2×gt(t2+y,E2)
・・・(28)
I1(x,y)×E2×gt(t2+y,E2)
―I2(x,y)×E1×gt(t1+y,E1)=0
・・・(29)
E2J1S2P2F’−E1J2S1P1F’=0
(E2J1S2P2−E1J2S1P1)F’=0 ・・・(32)
QF’=0
Q=E2J1S2P2−E1J2S1P1 ・・・(37)
上述した一連の処理は、ハードウエアにより実行することもできるし、ソフトウエアにより実行することもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
異なる露光条件で撮影された画像に、それぞれ含まれる周期的なノイズの成分を、画像毎に推定する推定部を備え、
前記推定部は、前記露光条件の前記ノイズの成分の相互関係を利用した演算から、前記画像毎の周期的なノイズの成分を推定する
画像処理装置。
(2)
前記周期的なノイズとは、フリッカである
前記(1)に記載の画像処理装置。
(3)
前記ノイズの成分の相互関係は、周波数空間での前記露光条件のシャッター関数で表される
前記(1)または前記(2)に記載の画像処理装置。
(4)
前記推定部は、前記画像を積分し、所定の窓関数をかけ、フーリエ級数展開することで得られる値を用いて、前記ノイズの成分を推定する
前記(1)乃至(3)のいずれかに記載の画像処理装置。
(5)
前記積分は、前記画像のいずれにおいても飽和していない非飽和部を水平方向に行う
前記(4)に記載の画像処理装置。
(6)
前記推定部は、光源の揺らぎ成分をFとしたとき、QF=0となる行列Qを求め、前記成分Fを求めることで、周波数空間での前記ノイズの成分を求め、
前記周波数空間での前記ノイズの成分をフーリエ級数逆変換することで、前記画像毎にノイズの成分を推定する
前記(1)乃至(5)のいずれかに記載の画像処理装置。
(7)
前記ノイズの成分の相互関係は、前記画像を積分し、前記画像の行毎に除算した比で表される
前記(1)に記載の画像処理装置。
(8)
前記積分は、前記画像のいずれにおいても飽和していない非飽和部を水平方向に行う
前記(7)に記載の画像処理装置。
(9)
前記推定部は、前記比をフーリエ級数展開した行列をR、前記露光条件から求まる行列をTとしたとき、行列RTの固有値1の固有ベクトルを求め、前記固有ベクトルを、前記画像の前記ノイズの成分をフーリエ級数展開した値とする
前記(7)に記載の画像処理装置。
(10)
前記固有ベクトルを、フーリエ級数逆変換することで、前記画像の前記ノイズの成分を算出する
前記(9)に記載の画像処理装置。
(11)
前記固有ベクトルに、前記露光条件から求められる係数を乗算することで、前記ノイズの成分が算出された画像とは異なる画像の前記ノイズの成分をフーリエ級数展開した値を算出し、
前記フーリエ級数展開した値をフーリエ級数逆変換することで、前記画像の前記ノイズの成分を算出する
前記(10)に記載の画像処理装置。
(12)
前記推定部は、前記比をR、前記露光条件から求まる係数をT、前記画像のノイズの成分をGとしたとき、以下の式における行列RTを生成し、前記画像のノイズの成分を求める
(13)
前記推定部は、前記比を行列r、前記露光条件から求められる行列を行列tとしたとき、行列rtの固有値1の固有ベクトルを求め、前記固有値ベクトルを、前記画像のノイズの成分であると推定する
前記(7)に記載の画像処理装置。
(14)
前記推定されたノイズの成分の線形和により、前記ノイズの成分が算出された画像とは異なる画像の前記ノイズの成分を算出する
前記(13)に記載の画像処理装置。
(15)
前記推定部は、前記比をr、前記露光条件から求められる値をt、前記画像の画素値をI、および前記ノイズの成分をgとしたとき、以下の式を満たすg1,g2を最小二乗推定で求めることで、前記画像毎のノイズの成分を求める
(16)
異なる露光条件で撮影された画像に、それぞれ含まれる周期的なノイズの成分を、画像毎に推定する推定ステップを含み、
前記推定ステップは、前記露光条件の前記ノイズの成分の相互関係を利用した演算から、前記画像毎の周期的なノイズの成分を推定する処理を含む
画像処理方法。
(17)
異なる露光条件で撮影された画像に、それぞれ含まれる周期的なノイズの成分を、画像毎に推定する推定ステップを含み、
前記推定ステップは、前記露光条件の前記ノイズの成分の相互関係を利用した演算から、前記画像毎の周期的なノイズの成分を推定する処理を含む
処理をコンピュータに実行させるためのプログラム。
(18)
撮像素子から出力される画素信号に対して信号処理を行う信号処理部を備え、
前記信号処理部は、
異なる露光条件で撮影された画像に、それぞれ含まれる周期的なノイズの成分を、画像毎に推定する推定部と、
前記推定部で推定されたノイズの成分を用いて、前記画像からノイズを除去する補正を行う補正部と
を備え、
前記推定部は、前記露光条件の前記ノイズの成分の相互関係を利用した演算から、前記画像毎の周期的なノイズの成分を推定する
電子機器。
Claims (18)
- 異なる露光条件で撮影された画像に、それぞれ含まれる周期的なノイズの成分を、画像毎に推定する推定部を備え、
前記推定部は、前記露光条件の前記ノイズの成分の相互関係を利用した演算から、前記画像毎の周期的なノイズの成分を推定する
画像処理装置。 - 前記周期的なノイズとは、フリッカである
請求項1に記載の画像処理装置。 - 前記ノイズの成分の相互関係は、周波数空間での前記露光条件のシャッター関数で表される
請求項1に記載の画像処理装置。 - 前記推定部は、前記画像を積分し、所定の窓関数をかけ、フーリエ級数展開することで得られる値を用いて、前記ノイズの成分を推定する
請求項1に記載の画像処理装置。 - 前記積分は、前記画像のいずれにおいても飽和していない非飽和部を水平方向に行う
請求項4に記載の画像処理装置。 - 前記推定部は、光源の揺らぎ成分をFとしたとき、QF=0となる行列Qを求め、前記成分Fを求めることで、周波数空間での前記ノイズの成分を求め、
前記周波数空間での前記ノイズの成分をフーリエ級数逆変換することで、前記画像毎にノイズの成分を推定する
請求項1に記載の画像処理装置。 - 前記ノイズの成分の相互関係は、前記画像を積分し、前記画像の行毎に除算した比で表される
請求項1に記載の画像処理装置。 - 前記積分は、前記画像のいずれにおいても飽和していない非飽和部を水平方向に行う
請求項7に記載の画像処理装置。 - 前記推定部は、前記比をフーリエ級数展開した行列をR、前記露光条件から求まる行列をTとしたとき、行列RTの固有値1の固有ベクトルを求め、前記固有ベクトルを、前記画像の前記ノイズの成分をフーリエ級数展開した値とする
請求項7に記載の画像処理装置。 - 前記固有ベクトルを、フーリエ級数逆変換することで、前記画像の前記ノイズの成分を算出する
請求項9に記載の画像処理装置。 - 前記固有ベクトルに、前記露光条件から求められる係数を乗算することで、前記ノイズの成分が算出された画像とは異なる画像の前記ノイズの成分をフーリエ級数展開した値を算出し、
前記フーリエ級数展開した値をフーリエ級数逆変換することで、前記画像の前記ノイズの成分を算出する
請求項10に記載の画像処理装置。 - 前記推定部は、前記比を行列r、前記露光条件から求められる行列を行列tとしたとき、行列rtの固有値1の固有ベクトルを求め、前記固有値ベクトルを、前記画像のノイズの成分であると推定する
請求項7に記載の画像処理装置。 - 前記推定されたノイズの成分の線形和により、前記ノイズの成分が算出された画像とは異なる画像の前記ノイズの成分を算出する
請求項13に記載の画像処理装置。 - 異なる露光条件で撮影された画像に、それぞれ含まれる周期的なノイズの成分を、画像毎に推定する推定ステップを含み、
前記推定ステップは、前記露光条件の前記ノイズの成分の相互関係を利用した演算から、前記画像毎の周期的なノイズの成分を推定する処理を含む
画像処理方法。 - 異なる露光条件で撮影された画像に、それぞれ含まれる周期的なノイズの成分を、画像毎に推定する推定ステップを含み、
前記推定ステップは、前記露光条件の前記ノイズの成分の相互関係を利用した演算から、前記画像毎の周期的なノイズの成分を推定する処理を含む
処理をコンピュータに実行させるためのプログラム。 - 撮像素子から出力される画素信号に対して信号処理を行う信号処理部を備え、
前記信号処理部は、
異なる露光条件で撮影された画像に、それぞれ含まれる周期的なノイズの成分を、画像毎に推定する推定部と、
前記推定部で推定されたノイズの成分を用いて、前記画像からノイズを除去する補正を行う補正部と
を備え、
前記推定部は、前記露光条件の前記ノイズの成分の相互関係を利用した演算から、前記画像毎の周期的なノイズの成分を推定する
電子機器。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013251164 | 2013-12-04 | ||
JP2013251164 | 2013-12-04 | ||
PCT/JP2014/080866 WO2015083562A1 (ja) | 2013-12-04 | 2014-11-21 | 画像処理装置、画像処理方法、電子機器、並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2015083562A1 true JPWO2015083562A1 (ja) | 2017-03-16 |
JP6437450B2 JP6437450B2 (ja) | 2018-12-12 |
Family
ID=53273329
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015551464A Expired - Fee Related JP6437450B2 (ja) | 2013-12-04 | 2014-11-21 | 画像処理装置、画像処理方法、電子機器、並びにプログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US9979896B2 (ja) |
EP (1) | EP3079353B1 (ja) |
JP (1) | JP6437450B2 (ja) |
KR (1) | KR102254994B1 (ja) |
CN (1) | CN105659583B (ja) |
WO (1) | WO2015083562A1 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150109177A (ko) * | 2014-03-19 | 2015-10-01 | 삼성전자주식회사 | 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체 |
CN107431771B (zh) | 2015-03-06 | 2020-12-04 | 菲力尔系统公司 | 用于异常像素检测的系统和方法 |
US9521351B1 (en) * | 2015-09-21 | 2016-12-13 | Rambus Inc. | Fractional-readout oversampled image sensor |
WO2017090300A1 (ja) * | 2015-11-24 | 2017-06-01 | ソニー株式会社 | 画像処理装置、および画像処理方法、ならびにプログラム |
JP2017112409A (ja) * | 2015-12-14 | 2017-06-22 | ソニー株式会社 | 撮像装置および方法 |
CN105472266A (zh) * | 2015-12-18 | 2016-04-06 | 广东欧珀移动通信有限公司 | 高动态范围图像的生成方法、拍照装置和终端 |
US20170264831A1 (en) * | 2016-03-14 | 2017-09-14 | Kabushiki Kaisha Toshiba | Image processor and image processing method |
US10244182B2 (en) * | 2016-06-23 | 2019-03-26 | Semiconductor Components Industries, Llc | Methods and apparatus for reducing spatial flicker artifacts |
JP7064444B2 (ja) * | 2016-12-08 | 2022-05-10 | ヌヴォトンテクノロジージャパン株式会社 | 固体撮像装置、及びそれを用いる撮像装置 |
JP7157529B2 (ja) * | 2017-12-25 | 2022-10-20 | キヤノン株式会社 | 撮像装置、撮像システム、および撮像装置の駆動方法 |
CN109218621B (zh) * | 2018-10-23 | 2021-03-12 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及移动终端 |
JP2020076619A (ja) * | 2018-11-07 | 2020-05-21 | ソニーセミコンダクタソリューションズ株式会社 | 投光制御装置、投光制御方法 |
KR102648747B1 (ko) * | 2019-01-18 | 2024-03-20 | 삼성전자주식회사 | Hdr 이미지를 생성하기 위한 이미징 시스템 및 그것의 동작 방법 |
CN111131718B (zh) * | 2019-07-16 | 2021-05-14 | 深圳市艾为智能有限公司 | 一种具有led闪烁补偿功能的多重曝光图像融合方法和系统 |
US10855931B1 (en) * | 2019-11-07 | 2020-12-01 | Novatek Microelectronics Corp. | High dynamic range image sensing method for image sensing device |
CN111491111B (zh) * | 2020-04-20 | 2021-03-26 | Oppo广东移动通信有限公司 | 高动态范围图像处理系统及方法、电子设备和可读存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1175109A (ja) * | 1997-06-27 | 1999-03-16 | Matsushita Electric Ind Co Ltd | 固体撮像装置 |
JP2001061105A (ja) * | 1999-08-20 | 2001-03-06 | Matsushita Electric Ind Co Ltd | 撮像装置 |
JP2013219708A (ja) * | 2012-04-12 | 2013-10-24 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
JP2014110621A (ja) * | 2012-12-04 | 2014-06-12 | Samsung Techwin Co Ltd | 評価値算出装置および評価値算出方法 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100473119C (zh) * | 2006-11-07 | 2009-03-25 | 北京中星微电子有限公司 | 消除曝光闪烁的方法及装置 |
CN101567977B (zh) * | 2009-06-09 | 2013-09-18 | 北京中星微电子有限公司 | 一种闪烁检测方法及其装置 |
JP5625371B2 (ja) * | 2010-01-29 | 2014-11-19 | ソニー株式会社 | 画像処理装置、および信号処理方法、並びにプログラム |
JP2012010105A (ja) | 2010-06-24 | 2012-01-12 | Sony Corp | 画像処理装置、撮像装置、画像処理方法、およびプログラム |
JP2012090897A (ja) | 2010-10-28 | 2012-05-17 | Sophia Co Ltd | 遊技機 |
JP2012098097A (ja) | 2010-10-29 | 2012-05-24 | L Haf Co Ltd | 蛍光x線分析による生体内金属元素検査方法 |
US9462194B2 (en) * | 2012-12-04 | 2016-10-04 | Hanwha Techwin Co., Ltd. | Apparatus and method for calculating flicker-evaluation value |
JP6116299B2 (ja) * | 2013-03-15 | 2017-04-19 | キヤノン株式会社 | 撮像装置及びその制御方法 |
US9363446B2 (en) * | 2013-04-15 | 2016-06-07 | Htc Corporation | Automatic exposure control for sequential images |
FR3005543A1 (fr) * | 2013-10-14 | 2014-11-14 | St Microelectronics Grenoble 2 | Procede de compensation de scintillement utilisant deux images |
-
2014
- 2014-11-21 WO PCT/JP2014/080866 patent/WO2015083562A1/ja active Application Filing
- 2014-11-21 JP JP2015551464A patent/JP6437450B2/ja not_active Expired - Fee Related
- 2014-11-21 US US15/039,807 patent/US9979896B2/en active Active
- 2014-11-21 CN CN201480056345.7A patent/CN105659583B/zh active Active
- 2014-11-21 KR KR1020167014238A patent/KR102254994B1/ko active IP Right Grant
- 2014-11-21 EP EP14868620.7A patent/EP3079353B1/en not_active Not-in-force
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1175109A (ja) * | 1997-06-27 | 1999-03-16 | Matsushita Electric Ind Co Ltd | 固体撮像装置 |
JP2001061105A (ja) * | 1999-08-20 | 2001-03-06 | Matsushita Electric Ind Co Ltd | 撮像装置 |
JP2013219708A (ja) * | 2012-04-12 | 2013-10-24 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
JP2014110621A (ja) * | 2012-12-04 | 2014-06-12 | Samsung Techwin Co Ltd | 評価値算出装置および評価値算出方法 |
Also Published As
Publication number | Publication date |
---|---|
CN105659583B (zh) | 2019-11-19 |
EP3079353B1 (en) | 2021-03-03 |
CN105659583A (zh) | 2016-06-08 |
KR20160093004A (ko) | 2016-08-05 |
WO2015083562A1 (ja) | 2015-06-11 |
KR102254994B1 (ko) | 2021-05-24 |
US20170013183A1 (en) | 2017-01-12 |
JP6437450B2 (ja) | 2018-12-12 |
EP3079353A1 (en) | 2016-10-12 |
US9979896B2 (en) | 2018-05-22 |
EP3079353A4 (en) | 2017-08-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6437450B2 (ja) | 画像処理装置、画像処理方法、電子機器、並びにプログラム | |
JP6434963B2 (ja) | 画像処理装置、画像処理方法、電子機器、並びにプログラム | |
US9036050B2 (en) | Image processing device, image processing method, and program | |
US9560290B2 (en) | Image processing including image correction | |
JP5625371B2 (ja) | 画像処理装置、および信号処理方法、並びにプログラム | |
WO2017090300A1 (ja) | 画像処理装置、および画像処理方法、ならびにプログラム | |
WO2016017450A1 (ja) | 画像処理装置、画像処理方法、プログラム、およびイメージセンサ | |
JP2013121099A (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
JP2012257193A (ja) | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム | |
JP2012235332A (ja) | 撮像装置、および撮像装置制御方法、並びにプログラム | |
WO2014020970A1 (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
WO2014027511A1 (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
JP2011113182A (ja) | 画像処理装置 | |
JP2015142342A (ja) | 撮像装置、画像生成方法及び画像生成プログラム | |
JP5980618B2 (ja) | 画像処理装置及び画像処理方法 | |
WO2016009837A1 (ja) | 画像処理装置および画像処理方法 | |
US10104305B2 (en) | Imaging device which generates a high-dynamic-range image using an imaging element in which pixel groups are controlled to have different exposure periods | |
KR101301069B1 (ko) | Hdr 영상 시스템에서 영상 간의 전역 움직임을 추정하기 위한 장치 및 그 방법 | |
JP6497822B2 (ja) | 撮像装置 | |
JP2013223211A (ja) | 撮像処理装置、撮像処理方法、およびプログラム | |
JP2015027038A (ja) | 色情報補完装置およびそのプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171107 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180925 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180928 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181018 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181114 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6437450 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |