JP6731626B2 - 撮像装置、カメラ、及び撮像方法 - Google Patents

撮像装置、カメラ、及び撮像方法 Download PDF

Info

Publication number
JP6731626B2
JP6731626B2 JP2018559512A JP2018559512A JP6731626B2 JP 6731626 B2 JP6731626 B2 JP 6731626B2 JP 2018559512 A JP2018559512 A JP 2018559512A JP 2018559512 A JP2018559512 A JP 2018559512A JP 6731626 B2 JP6731626 B2 JP 6731626B2
Authority
JP
Japan
Prior art keywords
image
light
frame image
pixel
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018559512A
Other languages
English (en)
Other versions
JPWO2018124055A1 (ja
Inventor
弘明 関東
弘明 関東
典巧 吉田
典巧 吉田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of JPWO2018124055A1 publication Critical patent/JPWO2018124055A1/ja
Application granted granted Critical
Publication of JP6731626B2 publication Critical patent/JP6731626B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • H01L27/14601Structural or functional details thereof
    • H01L27/14638Structures specially adapted for transferring the charges across the imager perpendicular to the imaging plane
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/02Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components specially adapted for rectifying, oscillating, amplifying or switching and having potential barriers; including integrated passive circuit elements having potential barriers
    • H01L27/04Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components specially adapted for rectifying, oscillating, amplifying or switching and having potential barriers; including integrated passive circuit elements having potential barriers the substrate being a semiconductor body
    • H01L27/10Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components specially adapted for rectifying, oscillating, amplifying or switching and having potential barriers; including integrated passive circuit elements having potential barriers the substrate being a semiconductor body including a plurality of individual components in a repetitive configuration
    • H01L27/118Masterslice integrated circuits
    • H01L27/11803Masterslice integrated circuits using field effect technology
    • H01L27/11807CMOS gate arrays
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/142Energy conversion devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/55Optical parts specially adapted for electronic image sensors; Mounting thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01LSEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144Devices controlled by radiation
    • H01L27/146Imager structures
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02EREDUCTION OF GREENHOUSE GAS [GHG] EMISSIONS, RELATED TO ENERGY GENERATION, TRANSMISSION OR DISTRIBUTION
    • Y02E10/00Energy generation through renewable energy sources
    • Y02E10/50Photovoltaic [PV] energy

Landscapes

  • Engineering & Computer Science (AREA)
  • Power Engineering (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • General Physics & Mathematics (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Electromagnetism (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Sustainable Energy (AREA)
  • Sustainable Development (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Description

画像を撮像する撮像装置、カメラ、及び撮像方法に関する。
従来、撮像素子を用いて、複数の連続するフレーム画像からなる映像を撮像する撮像装置が知られている。
この種の撮像装置において、フレーム画像に含まれる暗電流信号成分を低減する技術が提案されている。
例えば、特許文献1には、レンズ絞りを絞って遮光状態として、遮光状態における暗電流信号成分を取得して記憶し、記憶する暗電流信号成分を用いて、撮像したフレーム画像に含まれる暗電流信号成分を低減するように補正する撮像装置について記載されている。
特許第4292751号公報
上記従来の撮像装置では、連続するフレームを撮像するためには、その撮像期間中、レンズ絞りを開いた状態とする必要がある。これに対して、この撮像装置では、遮光状態における暗電流信号成分を取得するためには、一定期間、レンズ絞りを絞って遮光状態とする必要がある。すなわち、この撮像装置では、連続するフレーム画像の撮像期間中において、遮光状態における暗電流信号成分を取得することができない。
このため、この撮像装置では、連続するフレーム画像の撮像期間中に取得された、遮光状態における暗電流信号成分に基づいて、その撮像期間中に撮像されたフレーム画像に含まれる暗電流信号成分を低減するように補正ことができない。
そこで、本開示は、連続するフレーム画像の撮像期間中に取得された、遮光状態における暗電流信号成分に基づいて、その撮像期間中に撮像されたフレーム画像に含まれる暗電流信号成分を低減するように補正することが可能となる撮像装置、カメラ、及び撮像方法を提供することを目的とする。
本開示の一態様に係る撮像装置は、第1所定範囲の電圧が印加された状態において受光することで内部光電効果による電荷を生成し、第2所定範囲の電圧が印加された状態において受光しても内部光電効果による電荷を生成しない光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路とを含み、前記複数の画素回路に蓄積される電荷量に基づくフレーム画像を出力する撮像素子と、前記光電変換部材に印加される電圧を制御する電圧制御部と、前記撮像素子から出力された1以上のフレーム画像のうちの少なくとも一部に対して、暗電流信号成分を低減するように補正する補正部とを備え、前記電圧制御部は、所定のフレーム周期のうちの一部の露光期間に、前記光電変換部材に前記第1所定範囲の電圧が印加され、前記フレーム周期のうちの、前記露光期間以外の遮光期間に、前記光電変換部材に前記第2所定範囲の電圧が印加されるように前記制御を行い、前記撮像素子は、前記フレーム周期毎に、前記露光期間において前記複数の画素回路に蓄積される電荷量に基づく信号フレーム画像と、前記遮光期間において前記複数の画素回路に蓄積される電荷量に基づく遮光フレーム画像とを出力し、前記補正部は、前記撮像素子から出力された信号フレーム画像に対して、前記撮像素子から出力された遮光フレーム画像を用いて、前記補正を行う。
本開示の一態様に係るカメラは、上記撮像装置と、前記撮像素子に外部の光を集光するレンズとを備える。
本開示の一態様に係る撮像方法は、撮像素子と電圧制御部と補正部とを含む撮像装置が行う撮像方法であって、前記撮像素子は、第1所定範囲の電圧が印加された状態において受光することで内部光電効果による電荷を生成し、第2所定範囲の電圧が印加された状態において受光しても内部光電効果による電荷を生成しない光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路とを含み、前記撮像素子が、前記複数の画素回路に蓄積される電荷量に基づくフレーム画像を出力する撮像ステップと前記電圧制御部が、前記光電変換部材に印加される電圧を制御する電圧制御ステップと、前記補正部が、前記撮像素子から出力された1以上のフレーム画像のうちの少なくとも一部に対して、暗電流信号成分を低減するように補正する補正ステップとを含み、前記電圧制御ステップでは、前記電圧制御部が、所定のフレーム周期のうちの一部の露光期間に、前記光電変換部材に前記第1所定範囲の電圧が印加され、前記フレーム周期のうちの、前記露光期間以外の遮光期間に、前記光電変換部材に前記第2所定範囲の電圧が印加されるように前記制御を行い、前記撮像ステップでは、前記撮像素子が、前記フレーム周期毎に、前記露光期間において前記複数の画素回路に蓄積される電荷量に基づく信号フレーム画像と、前記遮光期間において前記複数の画素回路に蓄積される電荷量に基づく遮光フレーム画像とを出力し、前記補正ステップでは、前記補正部が、前記撮像素子から出力された信号フレーム画像に対して、前記撮像素子から出力された遮光フレーム画像を用いて、前記補正を行う。
上記本開示に係る撮像装置、カメラ、及び撮像方法によると、連続するフレーム画像の撮像期間中に取得された、遮光状態における暗電流信号成分に基づいて、その撮像期間中に撮像されたフレーム画像に含まれる暗電流信号成分を低減するように補正ことが可能となる。
図1は、実施の形態に係るカメラの構成を示すブロック図である。 図2は、撮像素子の構成を示すブロック図である。 図3Aは、光電変換素子の平面図である。 図3Bは、光電変換素子の側面図である。 図4は、画素回路の構成を示すブロック図である。 図5Aは、電圧制御部の動作を示すタイミングチャートである。 図5Bは、撮像素子の動作を示すタイミングチャートである。 図6は、補正部が行う補正の様子を示す模式図である。 図7は、第1フレーム画像出力処理のフローチャートである。 図8は、第1補正処理のフローチャートである。 図9は、変形例1に係るカメラの構成を示すブロック図である。 図10Aは、電圧制御部の動作を示すタイミングチャートである。 図10Bは、撮像素子の動作を示すタイミングチャートである。 図11は、補正部が行う補正の様子を示す模式図である。 図12は、第2フレーム画像出力処理のフローチャートである。 図13は、第2補正処理のフローチャートである。 図14は、変形例2に係る撮像装置の構成を示すブロック図である。 図15は、加算画像生成部が行う加算遮光フレーム画像の生成の様子を示す模式図である。 図16は、補正部が行う補正の様子を示す模式図である。 図17は、第3補正処理のフローチャートである。 図18は、変形例3に係るカメラの構成を示すブロック図である。 図19は、加算平均画像生成部が行う加算平均遮光フレーム画像の生成の様子を示す模式図である。 図20は、補正部が行う補正の様子を示す模式図である。 図21は、第4補正処理のフローチャートである。 図22は、変形例4に係るカメラの構成を示すブロック図である。 図23Aは、電圧制御部の動作を示すタイミングチャートである。 図23Bは、撮像素子の動作を示すタイミングチャートである。 図24は、補正部が行う補正の様子を示す模式図である。 図25は、第3フレーム画像出力処理のフローチャートである。 図26は、第5補正処理のフローチャートである。 図27Aは、変形例に係るデジタルスチルカメラの斜視図である。 図27Bは、変形例に係るビデオカメラの斜視図である。
以下、実施の形態について詳細に説明する。なお、以下で説明する実施の形態は、いずれも本開示の好ましい一具体例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本開示を限定する主旨ではない。本開示は、請求の範囲だけによって限定される。よって、以下の実施の形態における構成要素のうち、本開示の独立請求項に記載されていない構成要素については、本開示の課題を達成するのに必ずしも必要ではないが、より好ましい形態を構成するものとして説明される。
(実施の形態)
ここでは、画像を撮像する撮像装置1について、図面を参照しながら説明する。
[1−1.構成]
図1は、実施の形態に係るカメラ200の構成を示すブロック図である。
カメラ200は、レンズ鏡筒230と、撮像装置1とを備えている。そして、レンズ鏡筒230は、光学系210と、レンズ駆動部220とを備えている。
光学系210は、撮像装置1の撮像素子10に外部の光を集光する1以上のレンズから構成されている。具体的には、光学系210は、ズームレンズ211、手振れ補正レンズ212、フォーカスレンズ213、絞り214により構成される。ズームレンズ211を光軸210Aに沿って移動させることにより、被写体像の拡大、縮小をすることができる。また、フォーカスレンズ213を光軸210Aに沿って移動させることにより被写体像のフォーカスを調整することができる。また、手振れ補正レンズ212は、光学系210の光軸210Aに垂直な面内で移動可能である。カメラ200のブレを打ち消す方向に手振れ補正レンズ212を移動することで、カメラ200のブレが撮像画像に与える影響を低減できる。また、絞り214は光軸210A上に位置する開口部214Aを有し、使用者の設定に応じて若しくは自動で開口部214Aの大きさを調整し、透過する光の量を調整する。
レンズ駆動部220は、ズームレンズ211を駆動するズームアクチュエータや、手振れ補正レンズ212を駆動する手ブレ補正アクチュエータや、フォーカスレンズ213を駆動するフォーカスアクチュエータや、絞り214を駆動する絞りアクチュエータを含む。そして、レンズ駆動部220は、上記のズームアクチュエータや、フォーカスアクチュエータや、手ブレ補正アクチュエータや、絞りアクチュエータを制御する。
撮像装置1は、撮像素子10と、補正部15と、電圧制御部20と、制御部50と、A/Dコンバータ250と、画像処理部260と、メモリ270と、カードスロット290と、内部メモリ340と、操作部材310と、表示モニタ320とを含んで構成される。
撮像素子10は、所定のフレーム周期T1(例えば、1/60秒)で、信号フレーム画像(後述)と、遮光フレーム画像(後述)とを出力する。
A/Dコンバータ250は、撮像素子10で生成されたアナログ画像データに対してアナログゲインアップを行い、デジタル信号であるデジタル画像データに変換する。
補正部15は、撮像素子10から出力された1以上のフレーム画像(ここでは、A/Dコンバータ250によって変換されたデジタル画像データ)のうちの少なくとも一部に対して暗電流信号成分を低減するように補正する。補正部15は、一例として、メモリ(図示されず。)に記憶されるプログラムをプロセッサ(図示されず。)が実行することによって実現される。
電圧制御部20は、撮像素子10に含まれる光電変換部材111(後述)に印加される電圧を制御する。電圧制御部20は、一例として、メモリ(図示されず。)に記憶されるプログラムをプロセッサ(図示されず。)が実行することによって実現される。
画像処理部260は、撮像素子10で生成された画像データ(ここでは、補正部15によって補正されたフレーム画像)に対して各種処理を施し、表示モニタ320に表示するための画像データを生成したり、メモリカード300に格納するための画像データを生成したりする。例えば、画像処理部260は、撮像素子10で生成された画像データに対して、ガンマ補正、ホワイトバランス補正などの各種処理を行う。また、画像処理部260は、撮像素子10で生成された画像データを、H.264規格やMPEG2規格に準拠した圧縮形式等により圧縮する。画像処理部260は、一例として、メモリ(図示されず。)に記憶されるプログラムをプロセッサ(図示されず。)が実行することによって実現される。
制御部50は、カメラ200全体を制御する。制御部50は、一例として、内部メモリ340に記録されたプログラムを、一時的な記憶を行うメモリ270に展開し、制御部50内のプロセッサ(図示されず。)が実行することによって実現される。
メモリ270は、画像処理部360及び制御部50のワークメモリとしても機能する。メモリ270は、例えば、DRAM、SRAMなどで実現できる。
カードスロット390はメモリカード300を着脱可能に保持する。カードスロット290は機械的及び電気的にメモリカード300と接続可能である。メモリカード300は不揮発性フラッシュメモリや強誘電体メモリなどを内部に含み、画像処理部260で生成された画像ファイル等のデータを格納できる。
内部メモリ340は、不揮発性フラッシュメモリや強誘電体メモリなどで構成される。内部メモリ340は、カメラ200全体を制御するための制御プログラム等を記憶する。
操作部材310は使用者からの操作を受け付けるユーザーインターフェースの総称である。操作部材310は、例えば、使用者からの操作を受け付ける十字キーや決定釦等を含む。
表示モニタ320は、撮像素子10で生成された画像データが示す画像や、メモリカード300から読み出された画像データが示す画像を表示できる画面320Aを有する。また、表示モニタ320は、カメラ200の各種設定を行うための各種メニュー画面等も画面320Aに表示できる。表示モニタ320の画面320A上にはタッチパネル320Bが配置されている。タッチパネル320Bはユーザによりタッチされて各種タッチ操作を受け付けることができる。タッチパネル320Bに対するタッチ操作が示す指示は制御部50に通知され各種処理が行われる。
以下、撮像装置1を構成する上記構成要素のうち、撮像素子10と、補正部15と、電圧制御部20とについて、図面を参照しながら、さらに詳細に説明する。
図2は、撮像素子10の構成を示すブロック図である。
同図に示されるように、撮像素子10は、光電変換素子110と、画素回路アレイ120と、読み出し回路130と、出力回路140と、行走査回路150と、タイミング制御回路160と、電圧印加回路170とを含んで構成される。
図3Aは、光電変換素子110の平面図であり、図3Bは、光電変換素子110の側面図である。
図3A、図3Bに示されるように、光電変換素子110は、薄膜状の光電変換部材111と、光電変換部材111の上面に密着する上部透明電極112と、光電変換部材111の下面に密着する、N行M列(N、Mは、1以上の整数。)の二次元アレイ状に配置されたN×M枚の下部画素電極113とを含んで構成される。
光電変換部材111は、0Vを含まない第1所定範囲の電圧が印加された状態において受光することで内部光電効果による電荷を生成し、0Vを含む第2所定範囲の電圧が印加された状態において受光しても内部光電効果による電荷を生成しない。
ここでは、光電変換部材111が、上記特性を有する有機薄膜であるとして説明する。すなわち、この実施の形態においては、撮像素子10が、有機薄膜を光電変換部材とする有機CMOSイメージセンサである場合の例となっている。
上部透明電極112は、光電変換部材111の上面の全体に、下面に対して0を含む電位差を生じさせる電圧を印加する、透明な電極である。
下部画素電極113は、光電変換部材111の下面の全体を覆うように、N行M列の二次元アレイ状に配置された電極である。
下部画素電極113は、光電変換部材111の上面に、下面に対して正の電位差を生じさせる電圧が印加されている場合において、光電変換部材111で電荷が生成されるときに、自身の近傍において生成される電荷のうち、正の電荷を集電する。
上記構成の光電変換素子110は、光電変換部材111の上面に、下面に対して、内部光電効果が生ずる範囲の正の電位差を生じさせる電圧が印加されている条件下では、受光による内部光電効果によって生成される正の電荷を、下部画素電極113のそれぞれが集電する。すなわち、光電変換素子110は、この条件下において、露光状態となる。これに対して、光電変換部材111の上面が、下面と略同電位である条件下では、受光しても、内部光電効果による電荷が生成されず、従って、下部画素電極113のそれぞれが電荷を集電することはない。すなわち、光電変換素子110は、この条件下において、遮光状態となる。
以下、光電変換部材111の上面に、下面に対して、内部光電効果が生ずる範囲の正の電位差を生じさせる電圧が印加されている期間のことを露光期間と呼び、光電変換部材111の上面に、下面に対して、内部光電効果が生じない範囲の電圧(ここでは、下面と略同電位の電圧)が印加されている期間のことを遮光期間と呼ぶ。
再び、図2に戻って、撮像素子10の説明を続ける。
画素回路アレイ120は、N×M個の画素回路21が、N行M列の二次元アレイ状に配置されてなる半導体デバイスであって、光電変換素子110の下面側に、光電変換素子110に重ね合わされて配置される。
画素回路アレイ120において、各画素回路21は、撮像素子10を平面視した場合において、画素回路21それぞれの位置が、下部画素電極113それぞれの位置と、一対一に対応付けられて重なるように配置されている。
図4は、画素回路21の構成を示すブロック図である。
同図に示されるように、画素回路21は、リセットトランジスタ22と、増幅トランジスタ23と、選択トランジスタ24と、電荷蓄積ノード25とを含んで構成される。
電荷蓄積ノード25は、自身の属する画素回路21に対応する下部画素電極113と、リセットトランジスタ22のソースと、増幅トランジスタ23のゲートとに接続され、接続される下部画素電極113によって集電された正の電荷を蓄積する。
リセットトランジスタ22は、ゲートにリセット信号線51が接続され、ドレインにリセット電圧VRSTが供給され、ソースに電荷蓄積ノード25が接続される。
リセットトランジスタ22は、行走査回路150(後述)からリセット信号線51を介して配送されるリセット信号によってオンにされることで、電荷蓄積ノード25に蓄積された電荷の量をリセット(初期化)する。
増幅トランジスタ23は、ゲートに電荷蓄積ノード25が接続され、ドレインに電源電圧VDDが供給され、ソースに選択トランジスタ24のドレインが接続される。
増幅トランジスタ23のゲートには、電荷蓄積ノード25に蓄積される電荷に応じた電圧が印加される。
このため、増幅トランジスタ23は、選択トランジスタ24がオン状態の場合に、電荷蓄積ノード25に蓄積された電荷に応じた電流を流す電流源として機能する。
選択トランジスタ24は、ゲートに選択信号線52が接続され、ドレインに増幅トランジスタ23のソースが接続され、ソースに垂直信号線32が接続される。
選択トランジスタ24は、行走査回路150(後述)から選択信号線52を介して配送される選択信号によってオンにされることで、増幅トランジスタ23に流れる電流を垂直信号線32に出力する。
後述するように、垂直信号線32に出力される電流の電流量が、列読み出し回路31(後述)によって検知されることで、選択信号によってオンされた選択トランジスタ24を含む画素回路21の電荷蓄積ノード25に蓄積された電荷の量が読み出される。
画素回路21は、上記構成により、光電変換部材111によって生成された電荷を電荷蓄積ノード25に画素単位で蓄積する。そして、電荷蓄積ノード25に蓄積された電荷の量が非破壊で読み出される。
再び、図2に戻って、撮像素子10の説明を続ける。
行走査回路150は、下記蓄積電荷量リセット機能と下記読み出し画素回路選択機能とを有する。
蓄積電荷量リセット機能とは、画素回路アレイ120において、読み出し回路130に最も遠い側の行(第1行)から、読み出し回路130に最も近い側の行(第N行)へと1行ずつ順に、該当行に属する画素回路21それぞれにおける電荷蓄積ノード25に蓄積された正の電荷をリセットするためのリセット信号を、該当行に属する画素回路21それぞれに接続されるリセット信号線51を介して配送する機能である。
これにより、画素回路アレイ120に含まれる全ての画素回路21の電荷蓄積ノード25に蓄積された電荷のリセットは、第1行目から第N行目まで行単位で順に実行される。
読み出し画素回路選択機能とは、画素回路アレイ120において、第1行から第N行へと1行ずつ順に、該当行に属する画素回路21それぞれにおける選択トランジスタ24をオンにするための選択信号を、該当行に属する画素回路21それぞれに接続される選択信号線52を介して配送する機能である。
これにより、画素回路アレイ120に含まれる全ての画素回路21の電荷蓄積ノード25に蓄積された電荷量の読み出しは、第1行目から第N行目まで行単位で順に実行される。
読み出し回路130は、画素回路アレイ120を構成する画素回路21のそれぞれに蓄積されている電荷の量を読み出す。
読み出し回路130は、画素回路アレイ120のM個の列それぞれに対応するM個の列読み出し回路31を含んで構成される。
列読み出し回路31は、対応する列に属する画素回路21それぞれに接続される垂直信号線32を介して、選択信号によってオンとなっている選択トランジスタ24を含む画素回路21(この画素回路21のことを、「読み出し対象の画素回路21」とも呼ぶ。)の増幅トランジスタ23に流れる電流量を検知することで、読み出し対象の画素回路21の電荷蓄積ノード25に蓄積されている電荷の量を読み出して、読み出した電荷の量を示すKビット(Kは、正の整数、例えば8)のデジタル信号を、読み出し対象の画素回路21の画素値として出力する。
出力回路140は、列読み出し回路31から出力された画素値からなるフレーム画像を外部に出力する。
出力回路140が出力するフレーム画像には、光電変換素子110が露光状態である期間において、各画素回路21の電荷蓄積ノード25に蓄積された電荷量に基づく信号フレーム画像と、光電変換素子110が遮光状態である期間において、各画素回路21の電荷蓄積ノード25に蓄積された電荷量に基づく遮光フレーム画像とがある。
光電変換素子110が遮光状態である期間において、各画素回路21の電荷蓄積ノード25に蓄積される電荷は、各画素回路21の暗電流成分である。このため、遮光フレーム画像は、各画素回路21の暗電流成分からなるフレーム画像となる。
電圧印加回路170は、光電変換部材111に電圧を印加する。より具体的には、電圧印加回路170は、上部透明電極112に印加する電圧を制御して、光電変換部材111の上面に、(1)下面に対して、内部光電効果が生ずる正の電位差を生じさせる、第1所定範囲の第1電圧を印加することで、その印加状態の期間、光電変換素子110を露光期間とし、(2)下面に対して、内部光電効果が生ずる正の電位差を生じさせない電位差(ここでは、下面と同電位)を生じさせる、第2所定範囲の第2電圧を印加することで、その印加状態の期間、光電変換素子110を遮光期間とする。
タイミング制御回路160は、行走査回路150の動作タイミングと、読み出し回路130の動作タイミングと、電圧印加回路170の動作タイミングと、出力回路140の動作タイミングとを制御する。すなわち、タイミング制御回路160は、行走査回路150による、蓄積電荷量リセット機能を実行するタイミングと、読み出し画素回路選択機能を実行するタイミングとを制御し、読み出し回路130による、選択信号によって選択された画素回路21の電荷蓄積ノード25に蓄積されている電荷の量を読み出すタイミングを制御し、電圧印加回路170による、光電変換素子110を露光期間とするタイミングと、光電変換素子110を遮光期間とするタイミングとを制御し、出力回路140による、フレーム画像を出力するタイミングとを制御する。
より具体的には、タイミング制御回路160は、電圧制御部20から、フレーム開始信号(後述)を受け取ると、行走査回路150と、読み出し回路130と、電圧印加回路170と、出力回路140との動作タイミングを制御して、(1)画素回路アレイ120に含まれる全ての画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出させて、(2)読み出された電荷量に基づくフレーム画像を遮光フレーム画像として外部に出力させて、(3)画素回路アレイ120に含まれる全ての画素回路21の電荷蓄積ノード25に蓄積された電荷量をリセットさせて、(4)光電変換部材111への第1電圧の印加を開始させる。
また、タイミング制御回路160は、電圧制御部20から、露光遮光切替信号(後述)を受け取ると、行走査回路150と、読み出し回路130と、電圧印加回路170と、出力回路140との動作タイミングを制御して、(1)画素回路アレイ120に含まれる全ての画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出させて、(2)読み出された電荷量に基づくフレーム画像を信号フレーム画像として外部に出力させて、(3)画素回路アレイ120に含まれる全ての画素回路21の電荷蓄積ノード25に蓄積された電荷量をリセットさせて、(4)光電変換部材111への第2電圧の印加を開始させる。再び、図1に戻って、撮像装置1の説明を続ける。
電圧制御部20は、所定のフレーム周期T1毎に、フレーム周期T1のうちの一部の露光期間に、光電変換部材111に第1所定範囲の第1電圧が印加され、フレーム周期T1のうちの、上記露光期間を含まない遮光期間に、光電変換部材111に第2所定範囲の第2電圧が印加されるように、光電変換部材111へ印加する電圧を制御する。より具体的には、撮像素子10に対して、フレーム周期T1で、新たなフレーム周期を開始する旨のフレーム開始信号を出力し、さらに、フレーム開始信号出力から所定期間T2だけ遅延する位相となるフレーム周期T1で、光電変換部材111に印加される電圧を第1電圧から第2電圧へと切り替える旨の露光遮光切替信号を出力することで、光電変換部材111へ印加される電圧の制御を行う。
図5Aは、電圧制御部20によって出力されるフレーム開始信号及び露光遮光切替信号のタイミングチャートである。そして、図5Bは、電圧制御部20から、フレーム開始信号及び露光遮光切替信号を受け取った場合における、撮像素子10の動作を示すタイミングチャートである。
図5Aに示されるように、電圧制御部20は、撮像素子10に対して、フレーム周期T1毎に、フレーム開始信号と露光遮光切替信号とを、露光遮光切替信号がフレーム開始信号よりも所定期間T2(T2<T1)だけ遅延するタイミングとなるように出力する。
図5Bに示されるように、撮像素子10は、電圧制御部20から、フレーム周期T1毎に出力される、フレーム開始信号及び露光遮光切替信号をと受け取ると、フレーム開始信号を受け取ってから、次に露光遮光切替信号を受け取るまでの期間、光電変換部材111へ第1電圧を印加し、露光遮光切替信号を受け取ってから、次にフレーム開始信号を受け取るまでの期間、光電変換部材111へ第2電圧を印加する。
このため、光電変換素子110は、フレーム開始信号を受け取ってから、次に露光遮光切替信号を受け取るまでの期間、露光状態となり、露光遮光切替信号を受け取ってから、次にフレーム開始信号を受け取るまでの期間、遮光状態となる。
そして、撮像素子10は、光電変換素子110が露光状態である露光期間において、各画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出して、読み出した電荷量に基づく信号フレーム画像を出力し、光電変換素子110が遮光状態である遮光期間において、各画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出して、読み出した電荷量に基づく遮光フレーム画像を出力する。
再び、図1に戻って、撮像装置1の説明を続ける。
補正部15は、撮像素子10から出力された信号フレーム画像に対して、撮像素子10から出力された遮光フレーム画像を用いて、暗電流信号成分を低減するように補正する。
ここでは、補正部15は、補正対象とする信号フレーム画像(以下、「補正対象信号フレーム画像」と呼ぶ。)に対して、その補正対象信号フレーム画像が出力されたフレーム周期と同じフレーム周期において出力された遮光フレーム画像(以下、「補正用遮光フレーム画像」と呼ぶ。)を用いて補正する。
図6は、補正部15が行う補正の様子を示す模式図である。
図6において、補正対象信号フレーム画像と、補正用遮光フレーム画像とに含まれている白い点は、該当する画素における暗電流信号成分を模式的に表現するものである。一例として、いわゆる「白キズ」と呼ばれる暗電流信号成分が、フレーム画像上の白い点として現れることがある。
一般に、補正対象信号フレーム画像は、被写体の画像に暗電流信号成分が重畳された画像となり、補正用遮光フレーム画像は、暗電流信号成分からなる画像となる。
まず、補正部15は、補正用遮光フレーム画像に対して、正規化処理を行って、正規化された遮光フレーム画像を生成する。ここで、この正規化処理とは、補正用遮光フレーム画像おける遮光状態の期間(遮光期間Ts)を、補正対象信号フレーム画像における露光状態の期間(露光期間Tr)で正規化する処理のことを言う。より具体的には、補正部15は、補正用遮光フレーム画像の各画素値に対して、(露光期間Tr/遮光期間Ts)の値を乗算することで、正規化された遮光フレーム画像を生成する。これにより、正規化された遮光フレーム画像における暗電流信号成分は、補正用遮光フレーム画像における暗電流信号成分の(Tr/Ts)倍となる。実施の形態1では、図5Bに例示されるように、Tr>Tsとなる場合の例となっている。このため、図6に例示されるように、正規化された遮光フレーム画像におけるいわゆる「白キズ」の輝度は、補正用遮光フレーム画像におけるいわゆる「白キズ」の輝度よりも大きくなる。
そして、補正部15は、補正対象信号フレーム画像の各画素の画素値に対して、対応する、正規化された遮光フレーム画像の各画素の画素値を減算することで、補正後の信号フレーム画像を生成する。
補正部15は、上記処理を行うことで、補正対象信号フレーム画像から、暗電流信号成分が低減された補正後信号フレーム画像を生成する。
上記構成の撮像装置1が行う動作について、以下、図面を参照しながら説明する。
[1−2.動作]
撮像装置1は、その特徴的な動作として、第1フレーム画像出力処理と、第1補正処理とを行う。
以下、これらの処理について、順に説明する。
[1−2−1.第1フレーム画像出力処理]
第1フレーム画像出力処理は、撮像素子10が、所定のフレーム周期T1で、信号フレーム画像と、遮光フレーム画像とを交互に出力する処理である。以下では、第1フレーム画像出力処理が開始されるより前の初期状態において、光電変換部材111への印加電圧が第2電圧(ここでは、例えば0V)であるとして説明する。
この第1フレーム画像出力処理は、撮像装置1を利用するユーザによって、動画の撮像を開始する旨の操作が受け付けられたことで開始される。
図7は、第1フレーム画像出力処理のフローチャートである。
第1フレーム画像出力処理が開始されると、電圧制御部20は、撮像素子10に対して、フレーム開始信号を出力する(ステップS5)。
撮像素子10は、電圧制御部20から出力されたフレーム開始信号を受け取ると、画素回路アレイ120に含まれる各画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出して(ステップS10)、読み出した電荷量に基づく遮光フレーム画像を出力する(ステップS15)。
そして、撮像素子10は、光電変換部材111への印加電圧を、第2電圧から第1電圧(ここでは、例えば10V)へ変更する(ステップS20)。
すると、光電変換素子110の状態が、遮光状態から露光状態へと切り替えられる(ステップS25)。
そして、撮像素子10は、画素回路アレイ120に含まれる各画素回路21の電荷蓄積ノード25に蓄積された電荷量をリセットする(ステップS30)。
一方、電圧制御部20は、前回フレーム開始信号を出力してから、所定期間T2経過すると(ステップS35:Noを繰り返した後ステップS35:Yes)、撮像素子10に対して、露光遮光切替信号を出力する(ステップS40)。
撮像素子10は、電圧制御部20から出力された露光遮光切替信号を受け取ると、画素回路アレイ120に含まれる各画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出して(ステップS45)、読み出した電荷量に基づく露光フレーム画像を出力する(ステップS50)。
そして、撮像素子10は、光電変換部材111への印加電圧を、第1電圧から第2電圧へ変更する(ステップS55)。
すると、光電変換素子110の状態が、露光状態から遮光状態へと切り替えられる(ステップS60)。
そして、撮像素子10は、画素回路アレイ120に含まれる各画素回路21の電荷蓄積ノード25に蓄積された電荷量をリセットする(ステップS65)。
一方、前回フレーム開始信号を出力してから、所定時間T1経過すると(ステップS70:Noを繰り返した後ステップS70:Yes)、撮像素子10は、ステップS5の処理に進んで、以降の処理を繰り返す。
[1−2−2.第1補正処理]
第1補正処理は、補正部15が、撮像素子10から出力された信号フレーム画像に対して、撮像素子10から出力された遮光フレーム画像を用いて、対象と暗電流信号成分を低減するように補正する処理である。
この第1補正処理は、上述の第1フレーム画像出力処理において、撮像素子10から、最初の遮光フレーム画像が出力されることで開始される。
図8は、第1補正処理のフローチャートである。
第1補正処理が開始されると、補正部15は、撮像素子10から、信号フレーム画像が出力されるまで待機する。そして、補正部15は、信号フレーム画像の出力の待機中において、信号フレーム画像が出力されると(ステップS100:Noを繰り返した後ステップS100:Yes)、その信号フレーム画像を取得する(ステップS110)。
信号フレーム画像が取得されると、補正部15は、撮像素子10から、遮光フレーム画像が出力されるまで待機する。そして、補正部15は、遮光フレーム画像の出力の待機中において、遮光フレーム画像が出力されると(ステップS120:Noを繰り返した後ステップS120:Yes)、その遮光フレーム画像を取得する(ステップS130)。
そして、補正部15は、取得した遮光フレーム画像に対して、正規化処理を行って、正規化された遮光フレーム画像を生成する(ステップS140)。すなわち、補正部15は、取得した遮光フレーム画像の各画素値に対して、(Tr/Ts)の値を乗算することで、正規化された遮光フレーム画像を生成する。
正規化された遮光フレーム画像が生成されると、補正部15は、取得した信号フレーム画像の各画素の画素値に対して、対応する、正規化された遮光フレーム画像の各画素の画素値を減算する(ステップS150)ことで、補正後の信号フレーム画像を生成する(ステップS160)。
ステップS160の処理が終わると、補正部15は、ステップS100の処理に進んで、以降の処理を繰り返す。
[1−3.効果等]
上述したように、撮像装置1は、撮像素子10から所定のフレーム周期T1で出力される信号フレーム画像に対して、同じフレーム周期において撮像素子10から出力される遮光フレーム画像を用いて、暗電流信号成分を低減する補正を行う。
一般に、暗電流信号成分は、撮像素子の温度等により変化する。このため、連続するフレーム画像の撮像期間中に撮像素子の温度等が変化すると、暗電流信号成分が変化する。従って、本実施の形態に係る撮像装置1によると、連続する信号フレーム画像の撮像期間中における暗電流信号成分を取得することができない従来の撮像措置よりも、より精度良く、その撮像期間中に撮像されたフレーム画像に含まれる暗電流信号成分を低減することができるようになる。
(変形例1)
ここでは、実施の形態に係る撮像装置1から、その一部の機能が変更された変形例1に係る撮像装置について、図面を参照しながら説明する。
実施の形態に係る撮像装置1は、補正部15が、補正用遮光フレーム画像の各画素値に対して、(露光期間Tr)/(遮光期間Ts)の値を乗算することで、正規化された遮光フレーム画像を生成し、補正対象信号フレーム画像の各画素値に対して、対応する正規化された遮光フレーム画像の各画素の画素値を減算することで、補正後の信号フレーム画像を生成する構成の例であった。
これに対して、変形例1に係る撮像装置は、露光期間Trと遮光期間Tsとが等しく設定されており、補正部が、補正対象信号フレーム画像の各画素値に対して、対応する補正用遮光フレーム画像の各画素をそのまま減算することで、補正後の信号フレーム画像を生成する構成の例となっている。
以下、変形例1に係る撮像装置について、実施の形態に係る撮像装置1からの変更点を中心に、図面を参照しながら説明する。
[2−1.構成]
図9は、変形例1に係るカメラ900の構成を示すブロック図である。
同図に示されるように、カメラ900は、実施の形態に係るカメラ200から、撮像装置1が撮像装置2に変更されるように変形されている。そして、撮像装置2は、実施の形態に係る撮像装置1から、補正部15が補正部915に変更され、電圧制御部20が電圧制御部920に変更されるように変形されている。
電圧制御部920は、実施の形態に係る電圧制御部20から、その機能の一部が変更されるように変形されている。
実施の形態に係る電圧制御部20は、撮像素子10に対して、フレーム周期T1でフレーム開始信号を出力し、さらに、フレーム開始信号出力から所定期間T2だけ遅延する位相となるフレーム周期T1で露光遮光切替信号を出力することで、光電変換部材111へ印加される電圧の制御を行う構成の例であった。
これに対して、電圧制御部920は、撮像素子10に対して、フレーム周期T1でフレーム開始信号を出力し、さらに、フレーム開始信号出力からT1/2だけ遅延する位相となるフレーム周期T1で露光遮光切替信号を出力することで、光電変換部材111へ印加される電圧の制御を行う構成の例となっている。
図10Aは、電圧制御部920によって出力されるフレーム開始信号及び露光遮光切替信号のタイミングチャートである。そして、図10Bは、電圧制御部920から、フレーム開始信号及び露光遮光切替信号を受け取った場合における、撮像素子10の動作を示すタイミングチャートである。
図10Aに示されるように、電圧制御部920は、撮像素子10に対して、フレーム周期T1毎に、フレーム開始信号と露光遮光切替信号とを、露光遮光切替信号がフレーム開始信号よりもT1/2だけ遅延するタイミングとなるように出力する。
図10Bに示されるように、撮像素子10は、電圧制御部920から、フレーム周期T1毎に出力される、フレーム開始信号及び露光遮光切替信号を受け取ると、フレーム開始信号を受け取ってから、次に露光遮光切替信号を受け取るまでの期間、光電変換部材111へ第1電圧を印加し、露光遮光切替信号を受け取ってから、次にフレーム開始信号を受け取るまでの期間、光電変換部材111へ第2電圧を印加する。
このため、光電変換素子110は、フレーム開始信号を受け取ってから、T1/2経過するまでの期間、露光状態となり、T1/2経過してから、次にフレーム開始信号を受け取るまでの期間、遮光状態となる。
そして、撮像素子10は、光電変換素子110が露光状態である露光期間において、各画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出して、読み出した電荷量に基づく信号フレーム画像を出力し、光電変換素子110が遮光状態である遮光期間において、各画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出して、読み出した電荷量に基づく信号フレーム画像を出力する。
再び図9に戻って、撮像装置2の説明を続ける。
補正部915は、実施の形態に係る補正部15から、その機能の一部が変更されるように変形されている。
実施の形態に係る補正部15は、補正用遮光フレーム画像の各画素値に対して、(露光期間Tr)/(遮光期間Ts)の値を乗算することで、正規化された遮光フレーム画像を生成し、補正対象信号フレーム画像の各画素値に対して、対応する正規化された遮光フレーム画像の各画素の画素値を減算することで、補正後の信号フレーム画像を生成する構成の例であった。
これに対して補正部915は、補正対象信号フレーム画像の各画素に対して、対応する補正用遮光フレーム画像の各画素をそのまま減算することで、補正後の信号フレーム画像を生成する構成の例となっている。
図11は、補正部915が行う補正の様子を示す模式図である。
同図に示されるように、補正部915は、補正対象信号フレームの画素の各画素値に対して、対応する補正用遮光フレーム画像の画素値を減算することで、補正後の信号フレーム画像を生成する。
撮像装置2において、露光期間Trと遮光期間Tsとが等しく設定されている。このため、補正部915は、実施の形態に係る補正部15のように、補正用遮光フレーム画像に対して、各フレーム周期における、遮光期間Tsを露光期間Trで初期化する初期化処理を行う必要がない。
上記構成の撮像装置2が行う動作について、以下、図面を参照しながら説明する。
[2−2.動作]
撮像装置2は、その特徴的な動作として、第2フレーム画像出力処理と、第2補正処理とを行う。
以下、これらの処理について、順に説明する。
[2−2−1.第2フレーム画像出力処理]
第2フレーム画像出力処理は、撮像素子10が、所定のフレーム周期T1で、信号フレーム画像と、遮光フレーム画像とを、互いにT1/2ずれた位相で、交互に出力する処理である。
この第2フレーム画像出力処理は、実施の形態に係る第1フレーム画像出力処理から、その処理の一部が変更された処理となっている。
図12は、第2フレーム画像出力処理のフローチャートである。
同図において、ステップS1205の処理〜ステップS1230の処理、及び、ステップS1240の処理〜ステップS1270の処理は、それぞれ、実施の形態に係る第1フレーム画像出力処理(図7参照)における、ステップS5の処理〜ステップS30の処理、及び、ステップS40の処理〜ステップS79の処理に対して、電圧制御部20を電圧制御部920へと読み替えた処理となっている。
従って、ここでは、ステップS1205の処理〜ステップS1230の処理、及び、ステップS1240の処理〜ステップS1270の処理については説明済みであるとして、ステップS1235の処理、及び、その前後の処理について説明する。
ステップS1230の処理が終了した後において、電圧制御部920は、前回フレーム開始信号を出力してから、T1/2経過すると(ステップS1235:Noを繰り返した後ステップS1235:Yes)、撮像素子10に対して、露光切替信号を出力する(ステップS1240)。
[2−2−2.第2補正処理]
第2補正処理は、補正部915が、撮像素子10から出力された信号フレーム画像の各画素に対して、対応する遮光フレーム画像の各画素をそのまま減算することで、対象とする信号フレーム画像に対して、暗電流成分を低減するように補正する処理である。
この第2補正処理は、実施の形態に係る第1補正処理から、その処理の一部の処理が変更された処理となっている。
図13は、第2補正処理のフローチャートである。
同図において、ステップS1300の処理〜ステップS1330の処理、及び、ステップS1360の処理は、それぞれ、実施の形態に係る第1補正処理(図8参照)における、ステップS100の処理〜ステップS130の処理に対して、補正部15を補正部915へと読み替えた処理となっている。
また、第2補正処理では、実施の形態に係る第1補正処理におけるステップS140に該当する処理が削除されている。
従って、ここでは、ステップS1300の処理〜ステップS1330の処理、及び、ステップS1360の処理は説明済みであるとして、ステップS1350の処理、及び、その前後の処理について説明する。
ステップS1330の処理において、遮光フレーム画像が取得されると、補正部915は、取得した信号フレーム画像の各画素の画素値に対して、対応する、遮光フレーム画像の画素値を減算する(ステップS1350)ことで、補正後の信号フレーム画像を生成する(ステップS1360)。
[2−3.効果等]
上述したように、撮像装置2において、補正部915は、補正対象信号フレーム画像の各画素値に対して、対応する補正用遮光フレーム画像の各画素値をそのまま減算することで、補正後の信号フレーム画像を生成する。
このため、本変形例1に係る撮像装置2によると、実施の形態に係る撮像装置1よりも少ない演算量で、信号フレーム画像の補正を実現することができる。
(変形例2)
ここでは、実施の形態に係る撮像装置1から、その一部の機能が変更された変形例2に係る撮像装置について、図面を参照しながら説明する。
実施の形態に係る撮像装置1は、補正対象信号フレームが出力されたフレーム周期と同じフレーム周期において出力された遮光フレーム画像を用いて、その補正対象信号フレームを補正する構成の例であった。
これに対して、変形例2に係る撮像装置は、補正対象信号フレームが出力されたフレーム周期を含む複数のフレーム周期において出力された遮光フレーム画像を用いて、その補正対象信号フレームを補正する構成の例となっている。
以下、変形例2に係る撮像装置について、実施の形態に係る撮像装置1からの変更点を中心に、図面を参照しながら説明する。
[3−1.構成]
図14は、変形例2に係るカメラ1400の構成を示すブロック図である。
同図に示されるように、カメラ1400は、実施の形態に係るカメラ200から、撮像装置1が撮像装置3に変更されるように変形されている。そして、撮像装置3は、実施の形態に係る撮像装置1から、補正部15が補正部1415に変更され、加算画像生成部1417が追加されるように変形されている。
加算画像生成部1417は、撮像素子10から出力される複数の遮光フレーム画像に対して、各遮光フレーム画像において互いに対応する画素の画素値を加算することで加算遮光フレーム画像を生成する。
図15は、加算画像生成部1417が行う加算遮光フレーム画像の生成の様子を示す模式図である。
同図に示されるように、加算画像生成部1417は、撮像素子10から、新たに遮光フレーム画像が出力されると、その新たに出力された遮光フレーム画像を含む、撮像素子10から出力された、時系列における最新のn(nは2以上の整数)枚の遮光フレーム画像に対して、各遮光フレーム画像において互いに対応する画素の画素値を加算することで加算遮光フレーム画像を生成する。これにより、n枚の遮光フレーム画像において、同じ位置(すなわち、同じ画素)の暗電流信号成分は、加算遮光フレーム画像において、該当する位置(すなわち、該当する画素)の暗電流信号成分として加算される。このため、図15に例示されるように、n枚の遮光フレーム画像において、同じ位置に現れるいわゆる「白キズ」は、加算遮光フレーム画像において、該当する位置に、各遮光フレーム画像における白キズの輝度が加算された輝度の白キズとして現れる。
一方で、n枚の遮光フレーム画像において、異なる位置(すなわち、異なる画素)に生じるランダムノイズ(「ランダム成分」)は、加算遮光フレーム画像において1枚分しか加算されない。したがって、n回加算された「白キズ」よりも十分低い輝度として現れ、ほとんど目立たない。すなわち、加算遮光フレーム画像において、「白キズ」に比べて、「ランダム成分」は低減されている。仮に、ランダムノイズがn枚の遮光フレーム画像のうち、複数枚の遮光フレーム画像において、同じ位置に発生したとしても、「白キズ」が発生する枚数に比べて少ないため、問題とはならない。
再び図14に戻って、撮像装置3の説明を続ける。
補正部1415は、実施の形態に係る補正部15から、その機能の一部が変更されるように変形されている。
実施の形態に係る補正部15は、補正対象信号フレームが出力されたフレーム周期と同じフレーム周期において出力された遮光フレーム画像を用いて、その補正対象信号フレームを補正する構成の例であった。
これに対して、補正部1415は、補正対象信号フレームが出力されたフレーム周期と同じフレーム周期において出力された遮光フレーム画像を加算対象として含む、加算画像生成部1417から出力された加算遮光フレーム画像を用いて、その補正対象信号フレームを補正する構成の例となっている。
図16は、補正部1415が行う補正の様子を示す模式図である。
まず、補正部1415は、加算遮光フレーム画像に対して、正規化処理を行って、正規化された加算遮光フレーム画像を生成する。ここで、この正規化処理とは、加算遮光フレーム画像における、遮光期間の総和(n×Ts)を、補正対象信号フレーム画像における露光期間(Tr)で正規化する処理のことを言う。より具体的には、補正部1415は、加算遮光フレーム画像の各画素値に対して、(Tr/(n×Ts))の値を乗算することで、正規化された加算遮光フレーム画像を生成する。これにより、正規化された加算遮光フレーム画像における暗電流信号成分は、加算遮光フレーム画像における暗電流信号成分の(Tr/(n×Ts))倍となる。変形例2では、Tr<(n×Ts)となる場合の例となっている。このため、図16に例示されるように、正規化された加算遮光フレーム画像におけるいわゆる「白キズ」、及び「ランダム成分」の輝度は、加算遮光フレーム画像におけるいわゆる「白キズ」、及び「ランダム成分」の輝度よりも小さくなる。ここで、「ランダム成分」の輝度は「白キズ」よりも十分低い輝度であるので、正規化により絶対値を小さくできる。また、例えば正規化処理を行う輝度レベルに「ランダム成分」が含まれないような閾値を設け、閾値以下の輝度を0とすれば、さらに「ランダム成分」は低減できる。
そして、補正部1415は、補正対象信号フレーム画像の各画素の画素値に対して、対応する、正規化された加算遮光フレームの各画素の画素値を減算することで、補正後の信号フレーム画像を生成する。
上記構成の撮像装置3が行う動作について、以下、図面を参照しながら説明する。
[3−2.動作]
撮像装置3は、その特徴的な動作として、第1フレーム画像出力処理と、第3補正処理とを行う。
第1フレーム画像出力処理は、既に、実施の形態において説明済みである。このため、ここでは、第3補正処理について説明する。
[3−2−1.第3補正処理]
第3補正処理は、補正部1415が、撮像素子10から出力された信号フレーム画像に対して、加算画像生成部1417から出力された加算遮光フレーム画像を用いて、暗電流信号成分を低減するように補正する処理である。
この第3補正処理は、前述の第1フレーム画像出力処理において、撮像素子10から、n−1回目の遮光フレーム画像が出力されることで開始される。
図17は、第3補正処理のフローチャートである。
第3補正処理が開始されると、補正部1415は、撮像素子10から、信号フレーム画像が出力されるまで待機する。そして、補正部1415は、信号フレーム画像の出力の待機中において、信号フレーム画像が出力されると(ステップS1700:Noを繰り返した後ステップS1700:Yes)、その信号フレーム画像を取得する(ステップS1710)。
信号フレーム画像が取得されると、補正部1415は、加算画像生成部1417から、加算遮光フレーム画像が出力されるまで待機する。そして、補正部1415は、加算遮光フレーム画像の出力の待機中において、加算遮光フレーム画像が出力されると(ステップS1720:Noを繰り返した後ステップS1720:Yes)、その加算遮光フレーム画像を取得する(ステップS1730)。
そして、補正部1415は、取得した加算遮光フレーム画像に対して、正規化処理を行って、正規化された加算遮光フレーム画像を生成する(ステップS1740)。すなわち、補正部15は、取得した加算遮光フレーム画像の各画素値に対して、(Tr/(n×Ts))の値を乗算することで、正規化された加算遮光フレーム画像を生成する。
正規化された加算遮光フレーム画像が生成されると、補正部1415は、取得した信号フレーム画像の各画素の画素値に対して、対応する、正規化された加算遮光フレーム画像の各画素の画素値を減算する(ステップS1750)ことで、補正後の信号フレーム画像を生成する(ステップS1760)。
ステップS1760の処理が終わると、補正部1415は、ステップS1700の処理に進んで、以降の処理を繰り返す。
[3−3.効果等]
上述したように、撮像装置3において、加算画像生成部1417によって生成される加算遮光フレーム画像は、n枚の遮光フレーム画像のそれぞれにおける暗電流成分のランダム成分が、平均化されることで低減された画像となる。
このため、本変形例2に係る撮像装置3によると、実施の形態に係る撮像装置1よりも精度良く、信号フレーム画像の補正を実現することができる。
(変形例3)
ここでは、変形例1に係る撮像装置2から、その一部の機能が変更された変形例3に係る撮像装置について、図面を参照しながら説明する。
変形例1に係る撮像装置2は、露光期間Trと遮光期間Tsとが等しく設定されており、補正対象信号フレーム画像の各画素に対して、補正対象信号フレームが出力されたフレーム周期と同じフレーム周期において出力された遮光フレーム画像の各画素の画素値をそのまま減算することで、補正後の信号フレーム画像を生成する構成の例であった。
これに対して、変形例3に係る撮像装置は、露光期間Trと遮光期間Tsとが等しく設定されている点は同じであるが、補正対象信号フレームからの減算対象となる遮光フレーム画像が、補正対象信号フレームが出力されたフレーム周期を含む複数のフレーム周期において出力された遮光フレーム画像の各画素に対して、加算平均することで得られる加算遮平均光フレーム画像へと変更されるように変形される構成の例となっている。
以下、変形例3に係る撮像装置について、変形例1に係る撮像装置2からの変更点を中心に、図面を参照しながら説明する。
[4−1.構成]
図18は、変形例3に係るカメラ1800の構成を示すブロック図である。
同図に示されるように、カメラ1800は、変形例1に係るカメラ900から、撮像装置2が撮像装置4に変更されるように変形されている。そして、撮像装置4は、変形例1に係る撮像装置2から、補正部915が補正部1815に変更され、加算平均画像生成部1817が追加されるように変形されている。
加算平均画像生成部1817は、撮像素子10から出力される複数の遮光フレーム画像に対して、各遮光フレーム画像において互いに対応する画素の画素値を加算平均することで加算平均遮光フレーム画像を生成する。
図19は、加算平均画像生成部1817が行う加算平均遮光フレーム画像の生成の様子を示す模式図である。
同図に示されるように、加算平均画像生成部1817は、撮像素子10から、新たに遮光フレーム画像が出力されると、その新たに出力された遮光フレーム画像を含む、撮像素子10から出力された、時系列における最新のn(nは2以上の整数)枚の遮光フレーム画像に対して、各遮光フレーム画像において互いに対応する画素の画素値を加算平均することで加算平均遮光フレーム画像を生成する。これにより、n枚の遮光フレーム画像において、同じ位置(すなわち、同じ画素)の暗電流信号成分は、加算平均遮光フレーム画像において、該当する位置(すなわち、該当する画素)の暗電流信号成分として加算平均される。このため、図19に例示されるように、n枚の遮光フレーム画像において、同じ位置に現れるいわゆる「白キズ」は、加算平均遮光フレーム画像において、該当する位置に、各遮光フレーム画像における白キズの輝度が加算平均された輝度の「白キズ」として現れる。一方で、n枚の遮光フレーム画像において、異なる位置(すなわち、異なる画素)に生じるランダムノイズ(「ランダム成分」)は、加算平均遮光フレーム画像において1枚分しか加算されず、さらに平均化により1/n倍にされる。したがって、n回加算された「白キズ」よりも十分低い輝度として現れ、ほとんど目立たない。また、例えば加算平均処理を行う輝度レベルに「ランダム成分」が含まれないような閾値を設け、閾値以下の輝度を0とすれば、さらに「ランダム成分」は低減できる。このように、加算平均処理によって生成される加算遮光フレーム画像は、n枚の遮光フレーム画像のそれぞれにおける暗電流成分のランダム成分が低減された画像となる。
このように、加算平均画像生成部1817によって生成される加算平均遮光フレーム画像は、n枚の遮光フレーム画像のそれぞれにおける暗電流成分のランダム成分が、平均化されることで低減された画像となっている。
再び図18に戻って、撮像装置4の説明を続ける。
補正部1815は、変形例1に係る補正部915から、その機能の一部が変更されるように変形されている。
変形例1に係る補正部915は、補正対象信号フレーム画像の各画素に対して、補正対象信号フレームが出力されたフレーム周期と同じフレーム周期において出力された遮光フレーム画像の各画素の画素値をそのまま減算することで、補正後の信号フレーム画像を生成する構成の例であった。
これに対して補正部1815は、補正対象信号フレームからの減算対象となる遮光フレーム画像が、補正対象信号フレームが出力されたフレーム周期と同じフレーム周期において出力された遮光フレーム画像を加算平均対象として含む、加算平均画像生成部1817から出力された加算平均遮光フレーム画像へと変更されるように変形される構成の例となっている。
図20は、補正部1815が行う補正の様子を示す模式図である。
同図に示されるように、補正部1815は、補正対象信号フレームの画素の各画素値に対して、対応する加算平均遮光フレーム画像の画素値を減算することで、補正後の信号フレーム画像を生成する。
上記構成の撮像装置4が行う動作について、以下、図面を参照しながら説明する。
[4−2.動作]
撮像装置4は、その特徴的な動作として、第2フレーム画像出力処理と、第4補正処理とを行う。
第2フレーム画像出力処理は、既に、変形例1において説明済みである。このため、ここでは、第4補正処理について説明する。
[4−2−1.第4補正処理]
第4補正処理は、補正部1815が、撮像素子10から出力された信号フレーム画像を構成する各画素の画素値から、加算平均画像生成部1817によって生成された加算平均遮光フレーム画像を構成する画素の画素値を減算することで、対象とする信号フレーム画像に対して、暗電流信号成分を低減するように補正する処理である。
この第4補正処理は、前述の第1フレーム画像出力処理において、撮像素子10から、n−1回目の遮光フレーム画像が出力されることで開始される。
図21は、第4補正処理のフローチャートである。
第4補正処理が開始されると、補正部1815は、撮像素子10から、信号フレーム画像が出力されるまで待機する。そして、補正部1815は、信号フレーム画像の出力の待機中において、信号フレーム画像が出力されると(ステップS2100:Noを繰り返した後ステップS2100:Yes)、その信号フレーム画像を取得する(ステップS2110)。
信号フレーム画像が取得されると、補正部1815は、加算平均画像生成部1817から、加算平均遮光フレーム画像が出力されるまで待機する。そして、補正部1815は、加算平均遮光フレーム画像の出力の待機中において、加算平均遮光フレーム画像が出力されると(ステップS2120:Noを繰り返した後ステップS2120:Yes)、その加算平均遮光フレーム画像を取得する(ステップS2130)。
そして、補正部1815は、取得した信号フレーム画像の各画素の画素値に対して、対応する、取得した加算平均遮光フレーム画像の各画素の画素値を減算する(ステップS2150)ことで、補正後の信号フレーム画像を生成する(ステップS2160)。
ステップS2160の処理が終わると、補正部1815は、ステップS2100の処理に進んで、以降の処理を繰り返す。
[4−3.効果等]
上述したように、撮像装置4において、加算平均画像生成部1817によって生成される加算平均遮光フレーム画像は、n枚の遮光フレーム画像それぞれにおける暗電流成分のランダム成分が、平均化されることで低減された画像となる。
このため、本変形例3に係る撮像装置4によると、変形例1に係る撮像装置2よりも、精度良く、信号フレーム画像の補正を実現することができる。
(変形例4)
ここでは、変形例2に係る撮像装置3から、その一部の機能が変更された変形例4に係る撮像装置について、図面を参照しながら説明する。
変形例2に係る撮像装置3は、補正部1415が、n枚の遮光フレーム画像の加算によって得られる加算遮光フレーム画像の各画素値に対して、(露光期間Tr)/(n×(遮光期間Ts))の値を乗算することで、正規化された加算遮光フレーム画像を生成し、補正対象信号フレーム画像の各画素値に対して、対応する正規化された加算遮光フレーム画像の各画素の画素値を減算することで、補正後の信号フレーム画像を生成する構成の例であった。
これに対して、変形例4に係る撮像装置は、露光期間Trが、遮光期間Tsのn倍となるように設定されており、補正部が、補正対象信号フレーム画像の各画素値に対して、対応する加算遮光フレーム画像の各画素値をそのまま減算することで、補正後の信号フレーム画像を生成する構成の例となっている。
以下、変形例4に係る撮像装置について変形例2に係る撮像装置3からの変更点を中心に、図面を参照しながら説明する。
[5−1.構成]
図22は、変形例4に係るカメラ2200の構成を示すブロック図である。
同図に示されるように、カメラ2200は、変形例2に係るカメラ1400から、撮像装置3が撮像装置5に変更されるように変形されている。そして、撮像装置5は、変形例2に係る撮像装置3から、補正部1415が補正部2215に変形され、電圧制御部20が電圧制御部2220に変更されるように変形されている。
電圧制御部2220は、変形例2に係る電圧制御部20から、その機能の一部が変更されるように変形されている。
変形例2に係る電圧制御部20は、撮像素子10に対して、フレーム周期T1でフレーム開始信号を出力し、さらに、フレーム開始信号から所定期間T2だけ遅延する位相となるフレーム周期T1で、露光遮光切替信号を出力することで、光電変換部材111へ印加される電圧の制御を行う構成の例であった。
これに対して、電圧制御部2220は、撮像素子10に対して、フレーム周期T1でフレーム開始信号を出力し、さらに、フレーム開始信号出力から(n/(n+1))×T1だけ遅延する位相となるフレーム周期T1で露光遮光切替信号を出力することで、光電変換部材111へ印加される電圧の制御を行う構成の例となっている。
図23Aは、電圧制御部2220によって出力されるフレーム開始信号及び露光遮光切替信号のタイミングチャートである。そして、図23Bは、電圧制御部2220から、フレーム開始信号及び露光遮光切替信号を受け取った場合における、撮像素子10の動作を示すタイミングチャートである。
図23Aに示されるように、電圧制御部2220は、撮像素子10に対して、フレーム周期T1毎に、フレーム開始信号と露光遮光切替信号とを、露光遮光切替信号がフレーム開始信号よりも(n/(n+1))×T1だけ遅延するタイミングとなるように出力する。
図23Bに示されるように、撮像素子10は、電圧制御部2220から、フレーム周期T1毎に出力される、フレーム開始信号及び露光遮光切替信号を受け取ると、フレーム開始信号を受け取ってから、次に露光遮光切替信号を受け取るまでの期間、光電変換部材111へ第1電圧を印加し、露光遮光切替信号を受け取ってから、次にフレーム開始信号を受け取るまでの期間、光電変換部材111へ第2電圧を印加する。
このため、光電変換素子110は、フレーム開始信号を受け取ってから、(n/(n+1))×T1経過するまでの期間、露光状態となり、(n/(n+1))×T1経過してから、次にフレーム開始信号を受け取るまでの期間、遮光状態となる。
そして、撮像素子10は、光電変換素子110が露光状態である露光期間において、各画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出して、読み出した電荷量に基づく信号フレーム画像を出力し、光電変換素子110が遮光状態である遮光期間において、各画素回路21の電荷蓄積ノード25に蓄積された電荷量を読み出して、読み出した電荷量に基づく信号フレーム画像を出力する。
再び図22に戻って、撮像装置5の説明を続ける。
補正部2215は、変形例2に係る補正部1415から、その機能の一部が変更されるように変形されている。
変形例2に係る補正部1415は、加算遮光フレーム画像の各画素値に対して、(Tr/(n×Ts))の値を乗算することで、正規化された加算遮光フレーム画像を生成し、補正対象信号フレーム画像の各画素値に対して、対応する正規化された加算遮光フレーム画像の各画素の画素値を減算することで、補正後の信号フレーム画像を生成する構成の例であった。
これに対して補正部2215は、補正対象信号フレーム画像の各画素に対して、対応する加算遮光フレーム画像の各画素をそのまま減算することで、補正後の信号フレーム画像を生成する構成の例となっている。
図24は、補正部2215が行う補正の様子を示す模式図である。
同図に示されるように、補正部2215は、補正対象信号フレームの画素の各画素値に対して、対応する加算遮光フレーム画像の画素値を減算することで、補正後の信号フレーム画像を生成する。
撮像装置5において、露光期間Trが、遮光期間Tsのn倍となるように設定されている。このため、補正部2215は、変形例2に係る補正部1415のように、加算遮光フレーム画像に対して、遮光状態の期間の総和(n×Ts)を、補正対象信号フレーム画像における露光状態の期間(Tr)で正規化する正規化処理を行う必要がない。
上記構成の撮像装置5が行う動作について、以下、図面を参照しながら説明する。
[5−2.動作]
撮像装置5は、その特徴的な動作として、第3フレーム画像出力処理と、第5補正処理とを行う。
以下、これらの処理について、順位説明する。
[5−2−1.第3フレーム画像出力処理]
第3フレーム画像出力処理は、撮像素子10が、所定のフレーム周期T1で、信号フレーム画像と、遮光フレーム画像とを、遮光フレーム画像が、信号フレーム画像に対して、(n/(n+1))×T1だけ遅延するタイミングで、交互に出力する処理である。
この第3フレーム画像出力処理は、実施の形態に係る第1フレーム画像出力処理から、その処理の一部が変更された処理となっている。
図25は、第3フレーム画像出力処理のフローチャートである。
同図において、ステップS2505の処理〜ステップS2530の処理、及び、ステップS2540の処理〜ステップS2570の処理は、それぞれ、実施の形態に係る第1フレーム画像出力処理(図7参照)における、ステップS5の処理〜ステップS30の処理、及び、ステップS40の処理〜ステップS79の処理に対して、電圧制御部20を電圧制御部920へと読み替えた処理となっている。
従って、ここでは、ステップS2505の処理〜ステップS2530の処理、及び、ステップS2540の処理〜ステップS2570の処理については説明済みであるとして、ステップS2535の処理、及び、その前後の処理について説明する。
ステップS2530の処理が終了した後において、電圧制御部2220は、前回フレーム開始信号を出力してから、(n/(n+1))×T1経過すると(ステップS2535:Noを繰り返した後ステップS2535:Yes)、撮像素子10に対して、露光切替信号を出力する(ステップS2540)。
[5−2−2.第2補正処理]
第5補正処理は、補正部2215が、撮像素子10から出力された信号フレーム画像の各画素に対して、対応する加算遮光フレーム画像の各画素をそのまま減算することで、補正対象信号フレーム画像に対して、暗電流信号成分を低減するように補正する処理である。
この第4補正処理は、変形例2に係る第3補正処理から、その一部の処理が変更された処理となっている。
図26は、第5補正処理のフローチャートである。
同図において、ステップS2600の処理〜ステップS2630の処理、及び、ステップS2660の処理は、それぞれ、変形例2に係る第3補正処理(図17参照)における、ステップS1700の処理〜ステップS1730の処理に対して、補正部915を補正部2215へと読み替えた処理となっている。
また、第5補正処理では、変形例2に係る第3補正処理におけるステップS1740に該当する処理が削除されている。
従って、ここでは、ステップS2600の処理〜ステップS2630の処理、及び、ステップS2660の処理は説明済みであるとして、ステップS2650の処理、及び、その前後の処理について説明する。
ステップS2630の処理において、加算遮光フレーム画像が取得されると、補正部2215は、取得した信号フレーム画像の各画素の画素値に対して、対応する、加算遮光フレーム画像の画素値を減算する(ステップS2650)ことで、補正後の信号フレーム画像を生成する(ステップS2660)。
[5−3.効果等]
上述したように、撮像装置5において、補正部2215は、補正対象信号フレーム画像の各画素値に対して、対応する加算遮光フレーム画像の各画素値をそのまま減算することで、補正後の信号フレーム画像を生成する。
このため、本変形例4に係る撮像装置5によると、変形例2に係る撮像装置3よりも少ない演算量で、信号フレーム画像の補正を実現することができる。
(補足)
以上のように、本出願において開示する技術の例示として、実施の形態、変形例1〜変形例4について説明した。しかしながら、本開示における技術は、これらに限定されず、適宜、変更、置き換え、付加、省略等を行った実施の形態にも適用可能である。
(1)実施の形態において、撮像装置1は、光電変換部材111が、第1所定範囲の電圧が印加された状態において受光することで内部光電効果による電荷を生成し、第2所定範囲の電圧が印加された状態において受光しても内部光電効果による電荷を生成しない機能を有する有機薄膜であるとして説明した。
しかしながら、光電変換部材111は、内部光電効果による電荷の生成の有無を、印加電圧によって制御することができる部材であれば、必ずしも上記有機薄膜に限定される必要はない。一例として、撮像装置1は、光電変換部材111が、PN接合面を有するダイオードである例等が考えられる。
(2)実施の形態において、撮像装置1は、フレーム周期T1が、例えば1/60秒であるとして説明した。
しかしながら、フレーム周期T1は、必ずしも1/60秒に限定される必要はない。
一例として、撮像装置1は、フレーム周期T1が、1/50秒である例、フレーム周期T1が、撮像装置1を利用するユーザによって設定される例等が考えらえる。
(3)変形例2において、撮像装置3は、加算画像生成部1417が、撮像素子10から、新たに遮光フレーム画像が出力されると、その新たに出力された遮光フレーム画像を含む、撮像素子10から出力された、時系列における最新のn枚の遮光フレーム画像を対象として、各遮光フレーム画像において互いに対応する画素の画素値を加算することで加算遮光フレーム画像を生成するとして説明した。
しかしながら、加算遮光フレーム画像の生成方法は、必ずしも、上記方法に限定される必要はない。
一例として、既に加算遮光フレーム画像が生成された後において、新たな遮光フレーム画像が出力されると、既に生成されている加算遮光フレーム画像に、新たな遮光フレーム画像を、加算平均、又はIIR(Infinite Impulse Response)などの演算処理で取り込むことで、加算遮光フレーム画像を更新する例等も考えられる。
また、別の一例として、時系列において、より新しい遮光フレーム画像の方が、より大きな重み付けされるように、n枚の遮光フレーム画像を対象として、各遮光フレーム画像において互いに対応する画素の画素値を重み付け加算することで加算遮光フレーム画像を生成する例等も考えられる。このようにすることで、より最近出力された遮光フレーム画像を、より多く暗電流信号成分の低減に反映させることができるようになる。
(4)本開示には、実施の形態における撮像装置1が内蔵された電子機器も含まれるのは言うまでもない。
このような電子機器は、例えば、図27Aに示されるデジタルスチルカメラや、図27Bに示されるビデオカメラとして実現される。
(5)実施の形態において、図1に示されるように、撮像装置1は、光学系210とは別体となる構成であるとして説明した。しかしながら、撮像装置1は、必ずしも光学系210と別体となる構成に限定されない。例えば、撮像装置1は、光学系210とレンズ駆動部220とを含む、レンズ付きカメラであっても構わない。
(6)撮像装置1〜撮像装置5における各構成要素(機能ブロック)は、IC(Integrated Circuit)、LSI(Large Scale Integration)等の半導体装置により個別に1チップ化されてもよいし、一部又は全部を含むように1チップ化されてもよい。また、集積回路化の手法はLSIに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。LSI製造後に、プログラムすることが可能なFPGA(Field Programmable Gate Array)や、LSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。更には、半導体技術の進歩又は派生する別技術によりLSIに置き換わる集積回路化の技術が登場すれば、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてあり得る。
また、上記各種処理の全部又は一部は、電子回路等のハードウェアにより実現されても、ソフトウェアを用いて実現されてもよい。なお、ソフトウェアによる処理は、撮像装置1に含まれるプロセッサがメモリに記憶されたプログラムを実行することにより実現されるものである。また、そのプログラムを記録媒体に記録して頒布や流通させてもよい。例えば、頒布されたプログラムを、他のプロセッサを有する装置にインストールして、そのプログラムをそのプロセッサに実行させることで、その装置に、上記各処理を行わせることが可能となる。
また、上述した実施の形態で示した構成要素及び機能を任意に組み合わせることで実現される形態も本開示の範囲に含まれる。
(7)本開示の一態様に係る撮像装置1は、第1所定範囲の電圧が印加された状態において受光することで内部光電効果による電荷を生成し、第2所定範囲の電圧が印加された状態において受光しても内部光電効果による電荷を生成しない光電変換部材111と、光電変換部材111によって生成された電荷を画素単位で蓄積する複数の画素回路21とを含み、複数の画素回路21に蓄積される電荷量に基づくフレーム画像を出力する撮像素子10と、光電変換部材111に印加される電圧を制御する電圧制御部20と、撮像素子10から出力された1以上のフレーム画像のうちの少なくとも一部に対して、暗電流信号成分を低減するように補正する補正部15とを備え、電圧制御部20は、所定のフレーム周期のうちの一部の露光期間に、光電変換部材111に前記第1所定範囲の電圧が印加され、前記フレーム周期のうちの、前記露光期間以外の遮光期間に、光電変換部材111に前記第2所定範囲の電圧が印加されるように前記制御を行い、撮像素子10は、前記フレーム周期毎に、前記露光期間において複数の画素回路21に蓄積される電荷量に基づく信号フレーム画像と、前記遮光期間において複数の画素回路21に蓄積される電荷量に基づく遮光フレーム画像とを出力し、補正部15は、撮像素子10から出力された信号フレーム画像に対して、撮像素子10から出力された遮光フレーム画像を用いて、前記補正を行う。
この撮像装置1では、遮光状態における暗電流成分は、遮光期間において画素回路21に電荷として蓄積される。そして、撮像素子10は、連続する信号フレーム画像の撮像期間中において、遮光期間において画素回路21に蓄積された電荷量に基づく遮光フレーム画像を出力する。一方で、補正部15は、その遮光フレームに基づいて、信号フレーム画像に対して、暗電流信号成分を低減するように補正する。
このため、この撮像装置1によると、連続するフレーム画像の撮像期間中に取得された、遮光状態における暗電流信号成分に基づいて、その撮像期間中に撮像されたフレーム画像に含まれる暗電流信号成分を低減するように補正することが可能となる。
一般に、暗電流信号成分は、撮像素子10の温度等により変化する。このため、連続するフレーム画像の撮像期間中に撮像素子10の温度等が変化すると、暗電流信号成分が変化する。従って、この撮像装置1によると、連続する信号フレーム画像の撮像期間中における暗電流信号成分を取得することができない従来の撮像装置よりも、より精度良く、その撮像期間中に撮像されたフレーム画像に含まれる暗電流信号成分を低減することができるようになる。
また、例えば、撮像素子10は、有機薄膜を光電変換部材111とする有機CMOSイメージセンサであるとしてもよい。
これにより、撮像素子10の高集積化を実現することが可能となる。
また、例えば、前記露光期間と前記遮光期間とが等しく、補正部15は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、当該信号フレーム画像と同じフレーム周期において撮像素子10から出力された遮光フレーム画像を構成する画素の画素値を減算することで、前記補正を行うとしてもよい。
これにより、補正部15による補正を、比較的処理量の少ない演算によって実現することができるようになる。
また、例えば、補正部15は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、当該信号フレーム画像と同じフレーム周期において撮像素子10から出力された遮光フレーム画像を構成する画素の画素値に対して、前記遮光期間に対する前記露光期間の比率を乗ずることで得られる値を減算することで、前記補正を行うとしてもよい。
これにより、補正部15は、露光期間と遮光期間とが等しく無い場合であっても、補正することができるようになる。
また、例えば、前記露光期間と前記遮光期間とが等しく、さらに、複数の遮光フレーム画像に対して、各遮光フレーム画像において互いに対応する画素の画素値を加算平均することで加算平均遮光フレーム画像を生成する加算平均画像生成部1817を備え、補正部15は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、加算平均画像生成部1817によって生成された加算平均遮光フレーム画像を構成する画素の画素値を減算することで、前記補正を行うとしてもよい。
これにより、暗電流信号成分に含まれるランダム成分を低減することができるようになる。
また、例えば、さらに、複数の遮光フレーム画像に対して、各遮光フレーム画像において互いに対応する画素の画素値を加算することで加算遮光フレーム画像を生成する加算画像生成部1417を備え、補正部15は、加算画像生成部14117によって生成された加算遮光フレーム画像に基づいて、前記補正を行うとしてもよい。
これにより、暗電流信号成分に含まれるランダム成分を低減することができるようになる。
また、例えば、前記露光期間と前記遮光期間との比率は、n(nは2以上の整数)対1であり、加算画像生成部1417は、撮像素子10から出力されたn枚の遮光フレーム画像を対象として前記加算画像の生成を行い、補正部15は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、加算画像生成部1417によって生成された加算画像を構成する画素の画素値を減算することで、前記補正を行うとしてもよい。
これにより、補正部15による、ランダム成分が低減された暗電流信号成分を用い行う補正を、比較的処理量の少ない演算によって実現することができるようになる。
また、例えば、加算画像生成部1417は、時系列において連続するn枚の遮光フレーム画像を対象とする加算画像が逐次生成されるように、前記加算画像の生成を行い、補正部15は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、当該信号フレーム画像と同じフレーム周期において撮像素子10から出力された遮光フレーム画像を含む連続するn枚の遮光フレーム画像を対象として加算画像生成部1417によって生成された加算画像を構成する画素の画素値を減算することで、前記補正を行うとしてもよい。
これにより、撮像時間差が最も小さくなる遮光フレーム画像群を用いて、ランダム成分が低減された暗電流信号成分を用い行う補正を実現することができるようになる。
本開示の一態様に係るカメラ200は、撮像装置1と、撮像素子10に外部の光を集光するレンズとを備える。
このカメラ200では、遮光状態における暗電流成分は、遮光期間において画素回路21に電荷として蓄積される。そして、撮像素子10は、連続する信号フレーム画像の撮像期間中において、遮光期間において画素回路21に蓄積された電荷量に基づく遮光フレーム画像を出力する。一方で、補正部15は、その遮光フレームに基づいて、信号フレーム画像に対して、暗電流信号成分が低減されるように補正する。
このため、このカメラ200によると、連続するフレーム画像の撮像期間中に取得された、遮光状態における暗電流信号成分に基づいて、その撮像期間中に撮像されたフレーム画像に含まれる暗電流信号成分を低減するように補正することが可能となる。
本開示の一態様に係る撮像方法は、撮像素子10と電圧制御部20と補正部15とを含む撮像装置1が行う撮像方法であって、撮像素子10は、第1所定範囲の電圧が印加された状態において受光することで内部光電効果による電荷を生成し、第2所定範囲の電圧が印加された状態において受光しても内部光電効果による電荷を生成しない光電変換部材111と、光電変換部材111によって生成された電荷を画素単位で蓄積する複数の画素回路21とを含み、撮像素子10が、複数の画素回路21に蓄積される電荷量に基づくフレーム画像を出力する撮像ステップと電圧制御部20が、光電変換部材111に印加される電圧を制御する電圧制御ステップと、補正部15が、撮像素子10から出力された1以上のフレーム画像のうちの少なくとも一部に対して、暗電流信号成分を低減するように補正する補正ステップとを含み、前記電圧制御ステップでは、電圧制御部20が、所定のフレーム周期のうちの一部の露光期間に、光電変換部材111に前記第1所定範囲の電圧が印加され、前記フレーム周期のうちの、前記露光期間以外の遮光期間に、光電変換部材111に前記第2所定範囲の電圧が印加されるように前記制御を行い、前記撮像ステップでは、撮像素子10が、前記フレーム周期毎に、前記露光期間において前記複数の画素回路21に蓄積される電荷量に基づく信号フレーム画像と、前記遮光期間において複数の画素回路21に蓄積される電荷量に基づく遮光フレーム画像とを出力し、前記補正ステップでは、補正部15が、撮像素子10から出力された信号フレーム画像に対して、撮像素子10から出力された遮光フレーム画像を用いて、前記補正を行う。
この撮像方法では、遮光状態における暗電流成分は、遮光期間において画素回路21に電荷として蓄積される。そして、撮像素子10は、連続する信号フレーム画像の撮像期間中において、遮光期間において画素回路21に蓄積された電荷量に基づく遮光フレーム画像を出力する。一方で、補正部15は、その遮光フレームに基づいて、信号フレーム画像に対して、暗電流信号成分を低減するように補正する。
このため、この撮像方法によると、連続するフレーム画像の撮像期間中に取得された、遮光状態における暗電流信号成分に基づいて、その撮像期間中に撮像されたフレーム画像に含まれる暗電流信号成分を低減するように補正することが可能となる。
本開示は、画像を撮像する撮像装置に広く利用可能である。
1、2、3、4、5 撮像装置
10 撮像素子
15、915、1415、1815、2215 補正部
20、920、2220 電圧制御部
21 画素回路
30 インターフェース部
110 光電変換素子
111 光電変換部材
112 上部透明電極
113 下部画素電極
120 画素回路アレイ
130 読み出し回路
140 出力回路
150 行走査回路
160 タイミング制御回路
170 電圧印加回路
200、900、1400、1800、2200 カメラ
211 ズームレンズ
212 手振れ補正レンズ
213 フォーカスレンズ
1417 加算画像生成部
1817 加算平均画像生成部

Claims (10)

  1. 第1所定範囲の電圧が印加された状態において受光することで内部光電効果による電荷を生成し、第2所定範囲の電圧が印加された状態において受光しても内部光電効果による電荷を生成しない光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路とを含み、前記複数の画素回路に蓄積される電荷量に基づくフレーム画像を出力する撮像素子と、
    前記光電変換部材に印加される電圧を制御する電圧制御部と、
    前記撮像素子から出力された1以上のフレーム画像のうちの少なくとも一部に対して、暗電流信号成分を低減するように補正する補正部とを備え、
    前記電圧制御部は、所定のフレーム周期のうちの一部の露光期間に、前記光電変換部材に前記第1所定範囲の電圧が印加され、前記フレーム周期のうちの、前記露光期間以外の遮光期間に、前記光電変換部材に前記第2所定範囲の電圧が印加されるように前記制御を行い、
    前記撮像素子は、前記フレーム周期毎に、前記露光期間において前記複数の画素回路に蓄積される電荷量に基づく信号フレーム画像と、前記遮光期間において前記複数の画素回路に蓄積される電荷量に基づく遮光フレーム画像とを出力し、
    前記補正部は、前記撮像素子から出力された信号フレーム画像に対して、前記撮像素子から出力された遮光フレーム画像を用いて、前記補正を行う
    撮像装置。
  2. 前記撮像素子は、有機薄膜を前記光電変換部材とする有機CMOSイメージセンサである
    請求項1に記載の撮像装置。
  3. 前記露光期間と前記遮光期間とが等しく、
    前記補正部は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、当該信号フレーム画像と同じフレーム周期において前記撮像素子から出力された遮光フレーム画像を構成する画素の画素値を減算することで、前記補正を行う
    請求項1又は2に記載の撮像装置。
  4. 前記補正部は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、当該信号フレーム画像と同じフレーム周期において前記撮像素子から出力された遮光フレーム画像を構成する画素の画素値に対して、前記遮光期間に対する前記露光期間の比率を乗ずることで得られる値を減算することで、前記補正を行う
    請求項1又は2に記載の撮像装置。
  5. 前記露光期間と前記遮光期間とが等しく、
    さらに、複数の遮光フレーム画像に対して、各遮光フレーム画像において互いに対応する画素の画素値を加算平均することで加算平均遮光フレーム画像を生成する加算平均画像生成部を備え、
    前記補正部は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、前記加算平均画像生成部によって生成された加算平均遮光フレーム画像を構成する画素の画素値を減算することで、前記補正を行う
    請求項1又は2に記載の撮像装置。
  6. さらに、複数の遮光フレーム画像に対して、各遮光フレーム画像において互いに対応する画素の画素値を加算することで加算遮光フレーム画像を生成する加算画像生成部を備え、
    前記補正部は、前記加算画像生成部によって生成された加算遮光フレーム画像に基づいて、前記補正を行う
    請求項1又は2に記載の撮像装置。
  7. 前記露光期間と前記遮光期間との比率は、n(nは2以上の整数)対1であり、
    前記加算画像生成部は、前記撮像素子から出力されたn枚の遮光フレーム画像を対象として前記加算画像の生成を行い、
    前記補正部は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、前記加算画像生成部によって生成された加算画像を構成する画素の画素値を減算することで、前記補正を行う
    請求項6に記載の撮像装置。
  8. 前記加算画像生成部は、時系列において連続するn枚の遮光フレーム画像を対象とする加算画像が逐次生成されるように、前記加算画像の生成を行い、
    前記補正部は、補正対象とする信号フレーム画像を構成する各画素の画素値から、当該画素に対応する、当該信号フレーム画像と同じフレーム周期において前記撮像素子から出力された遮光フレーム画像を含む連続するn枚の遮光フレーム画像を対象として前記加算画像生成部によって生成された加算画像を構成する画素の画素値を減算することで、前記補正を行う
    請求項6又は7に記載の撮像装置。
  9. 請求項1〜8のいずれか1項に記載の撮像装置と、
    前記撮像素子に外部の光を集光するレンズとを備える
    カメラ。
  10. 撮像素子と電圧制御部と補正部とを含む撮像装置が行う撮像方法であって、
    前記撮像素子は、第1所定範囲の電圧が印加された状態において受光することで内部光電効果による電荷を生成し、第2所定範囲の電圧が印加された状態において受光しても内部光電効果による電荷を生成しない光電変換部材と、前記光電変換部材によって生成された電荷を画素単位で蓄積する複数の画素回路とを含み、
    前記撮像素子が、前記複数の画素回路に蓄積される電荷量に基づくフレーム画像を出力する撮像ステップと、
    前記電圧制御部が、前記光電変換部材に印加される電圧を制御する電圧制御ステップと、
    前記補正部が、前記撮像素子から出力された1以上のフレーム画像のうちの少なくとも一部に対して、暗電流信号成分を低減するように補正する補正ステップとを含み、
    前記電圧制御ステップでは、前記電圧制御部が、所定のフレーム周期のうちの一部の露光期間に、前記光電変換部材に前記第1所定範囲の電圧が印加され、前記フレーム周期のうちの、前記露光期間以外の遮光期間に、前記光電変換部材に前記第2所定範囲の電圧が印加されるように前記制御を行い、
    前記撮像ステップでは、前記撮像素子が、前記フレーム周期毎に、前記露光期間において前記複数の画素回路に蓄積される電荷量に基づく信号フレーム画像と、前記遮光期間において前記複数の画素回路に蓄積される電荷量に基づく遮光フレーム画像とを出力し、
    前記補正ステップでは、前記補正部が、前記撮像素子から出力された信号フレーム画像に対して、前記撮像素子から出力された遮光フレーム画像を用いて、前記補正を行う
    撮像方法。
JP2018559512A 2016-12-27 2017-12-26 撮像装置、カメラ、及び撮像方法 Active JP6731626B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016254499 2016-12-27
JP2016254499 2016-12-27
PCT/JP2017/046599 WO2018124055A1 (ja) 2016-12-27 2017-12-26 撮像装置、カメラ、及び撮像方法

Publications (2)

Publication Number Publication Date
JPWO2018124055A1 JPWO2018124055A1 (ja) 2019-07-25
JP6731626B2 true JP6731626B2 (ja) 2020-07-29

Family

ID=62707599

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018559512A Active JP6731626B2 (ja) 2016-12-27 2017-12-26 撮像装置、カメラ、及び撮像方法

Country Status (5)

Country Link
US (1) US10573681B2 (ja)
EP (1) EP3565238B1 (ja)
JP (1) JP6731626B2 (ja)
CN (1) CN109997352B (ja)
WO (1) WO2018124055A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2021044771A1 (ja) * 2019-09-06 2021-03-11
JP7295329B2 (ja) * 2020-02-21 2023-06-20 株式会社日立国際電気 撮像システム、画像処理プログラム、および画像処理方法
CN112367475B (zh) * 2021-01-15 2021-03-30 上海闪马智能科技有限公司 一种交通事件检测方法、系统及电子设备
US11696049B2 (en) * 2021-05-28 2023-07-04 Microsoft Technology Licensing, Llc Systems and methods for dark current compensation in single photon avalanche diode imagery
US11711628B2 (en) 2021-05-28 2023-07-25 Microsoft Technology Licensing, Llc Systems and methods for obtaining color imagery using single photon avalanche diodes

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02164184A (ja) * 1988-12-19 1990-06-25 Toshiba Corp X線診断装置
AU8783998A (en) * 1997-08-15 1999-03-08 Uniax Corporation Organic diodes with switchable photosensitivity
JP4292751B2 (ja) 2002-05-30 2009-07-08 日本ビクター株式会社 撮像装置
KR20060038681A (ko) * 2004-11-01 2006-05-04 삼성테크윈 주식회사 디지털 카메라에서 고정 패턴 노이즈 제거 장치 및 방법
US20070041063A1 (en) 2005-08-18 2007-02-22 Matsushita Electric Industrial Co., Ltd. Image sensor
JP2007067194A (ja) * 2005-08-31 2007-03-15 Fujifilm Corp 有機光電変換素子、および積層型光電変換素子
JP2008042180A (ja) * 2006-07-13 2008-02-21 Matsushita Electric Ind Co Ltd イメージセンサ
JP4252078B2 (ja) * 2006-09-28 2009-04-08 三洋電機株式会社 光検出装置
JP5020840B2 (ja) * 2007-06-26 2012-09-05 富士フイルム株式会社 画像検出装置および画像検出器の駆動方法
JP2009105246A (ja) * 2007-10-24 2009-05-14 Seiko Epson Corp 光電変換素子、固体撮像装置、および電子機器
JP5335271B2 (ja) * 2008-04-09 2013-11-06 キヤノン株式会社 光電変換装置及びそれを用いた撮像システム
JP2011055351A (ja) * 2009-09-03 2011-03-17 Fujifilm Corp 撮影装置及びその制御方法
JP2011250249A (ja) * 2010-05-28 2011-12-08 Panasonic Corp 映像信号処理装置および映像信号処理方法
US8916947B2 (en) * 2010-06-08 2014-12-23 Invisage Technologies, Inc. Photodetector comprising a pinned photodiode that is formed by an optically sensitive layer and a silicon diode
JP5847413B2 (ja) * 2011-03-24 2016-01-20 キヤノン株式会社 撮像装置及び撮像システム、それらの制御方法
GB2497571A (en) * 2011-12-15 2013-06-19 St Microelectronics Res & Dev An imaging array with high dynamic range
US9325913B2 (en) * 2011-12-28 2016-04-26 General Electric Company Radiation detector for use in sequential image acquisition
FR3018653B1 (fr) * 2014-03-11 2016-03-04 E2V Semiconductors Procede de capture d'image avec reduction de courant d'obscurite et faible consommation
JP6223881B2 (ja) * 2014-03-18 2017-11-01 株式会社東芝 光検出器
JP2017152669A (ja) * 2016-02-25 2017-08-31 パナソニックIpマネジメント株式会社 撮像装置
JP6904730B2 (ja) * 2016-03-08 2021-07-21 株式会社半導体エネルギー研究所 撮像装置

Also Published As

Publication number Publication date
US20190280037A1 (en) 2019-09-12
EP3565238B1 (en) 2023-07-19
CN109997352A (zh) 2019-07-09
WO2018124055A1 (ja) 2018-07-05
EP3565238A4 (en) 2020-01-22
US10573681B2 (en) 2020-02-25
JPWO2018124055A1 (ja) 2019-07-25
EP3565238A1 (en) 2019-11-06
CN109997352B (zh) 2021-06-01

Similar Documents

Publication Publication Date Title
JP6731626B2 (ja) 撮像装置、カメラ、及び撮像方法
JP5959834B2 (ja) 撮像装置
JP5013811B2 (ja) 撮像装置及び補正方法
JP5013812B2 (ja) 撮像装置及び補正方法
JP2010068049A (ja) 撮像装置
JP5701942B2 (ja) 撮像装置、カメラシステム及び画像処理方法
JP5147652B2 (ja) 撮像装置及びその制御方法及びプログラム
JP7271131B2 (ja) 撮像装置および撮像装置の制御方法
JP2014107739A (ja) 撮像装置及びその制御方法
JP2013118474A (ja) 撮像装置及び撮像装置の制御方法
JP6463159B2 (ja) 撮像装置およびその制御方法、プログラム、並びに記憶媒体
JP6748979B2 (ja) 撮像装置及びその制御方法
JP6664121B2 (ja) 撮像装置、および、カメラ
JP6706850B2 (ja) 撮像装置、カメラ、及び撮像方法
JP4847281B2 (ja) 撮像装置及びその制御方法並びに撮像システム
JP2008072512A (ja) 撮像装置及びその制御方法、撮像システム
JP2007081453A (ja) 撮像装置及び信号処理方法並びにプログラム
JP6706783B2 (ja) 撮像素子、撮像装置、カメラ、及び撮像方法
JP2014057196A (ja) 撮像装置
JP2010166479A (ja) 撮像装置及び撮像画像の補正方法
JP2018093301A (ja) 撮像素子及び撮像素子の制御方法
WO2018124048A1 (ja) 撮像装置、カメラ、及び撮像方法
JP6470589B2 (ja) 撮像装置およびその制御方法、プログラム、並びに記憶媒体
JP5664010B2 (ja) 撮像装置
JP2018107733A (ja) 撮像装置及びその制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190401

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200609

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200618

R151 Written notification of patent or utility model registration

Ref document number: 6731626

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151