JP5655137B2 - Ｃｍｏｓ画像センサーの露光方法 - Google Patents

Ｃｍｏｓ画像センサーの露光方法 Download PDF

Info

Publication number
JP5655137B2
JP5655137B2 JP2013512719A JP2013512719A JP5655137B2 JP 5655137 B2 JP5655137 B2 JP 5655137B2 JP 2013512719 A JP2013512719 A JP 2013512719A JP 2013512719 A JP2013512719 A JP 2013512719A JP 5655137 B2 JP5655137 B2 JP 5655137B2
Authority
JP
Japan
Prior art keywords
exposure
array
pixel row
pixel
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013512719A
Other languages
English (en)
Other versions
JP2013531420A (ja
Inventor
師丹▲い▼
周▲こん▼
迪 ▲うー▼
迪 ▲うー▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Taishan Online Tech Co Ltd
Original Assignee
Shenzhen Taishan Online Tech Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Taishan Online Tech Co Ltd filed Critical Shenzhen Taishan Online Tech Co Ltd
Publication of JP2013531420A publication Critical patent/JP2013531420A/ja
Application granted granted Critical
Publication of JP5655137B2 publication Critical patent/JP5655137B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/14601—Structural or functional details thereof
    • H01L27/14609—Pixel-elements with integrated switching, control, storage or amplification elements
    • H01L27/14612—Pixel-elements with integrated switching, control, storage or amplification elements involving a transistor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/53—Control of the integration time

Description

本発明は、画像センサー分野に関し、より詳しくは、リアルタイムの目標検出システムに適用できるCMOS画像センサー及びそのタイミング制御方法並びに露光方法に関する。
主動光源の照明を使用して目標の検出を行なうことは、常用の技術である。図1を参照して、図1は従来の目標検出方法の過程の模式図である。図1に示すように、一般的に光源、画像センサー、同期機制及び画像処理器等のいくつの主なモジュールが備えられる。これらのモジュールによりリアルタイムに目標物体の位置、形状、速度、色、テックス等の特徴を検出することができる。その動作原理は、光源が光線を射出し、目標物体に照射することである。同時に、同期機制の制御で、画像センサーは、シーン全体の画像を撮影する。シーンの画像は目標物体と後方の背景物体を含む。目標物体は普通の乱反射表面を有する物体であってもよく、予め製造する特殊物体（その表面は、光線に対する反射が方向性を有し、光源が射出する光線を画像センサーに反射できる）であってもよい。目標物体は光源から近い、或いは特殊反射表面を有するため、画像において目標物体の輝度が背景の輝度よりも遥かに高い。画像処理器は、画像を受信して画像分割を行い、輝度がある閾値より高い部分は目標物体と見られ、輝度が閾値より低い部分は背景と見られる。それにより、目標領域の区画に従って後続の演算、例えば位置情報の抽出を行なう。
従来採用されている前記検出方法の欠点は、目標の抽出が環境光の干渉を受けやすいことにある。環境光の照射は、背景におけるある領域が目標物体輝度よりも高くなると、前記方法は失効になります。
従来の技術において、環境光の干渉に対して、普通の解決方法は、光源を特定の波長λ(目の観察に影響を与えないため、普通、可視光波長範囲の外を選択する)に変調し、出力パワーを増大し、画像センサーと目標物体との間に相応する波長λのバンドパスフィルターを取り付け、波長λの光線の通過しか許さない。この方法は、ある程度で環境光の影響を抑え、目標物体と背景のコントラストを向上させる。しかし、環境光は通常全波長(例えば、日光及び白熱灯)であり、そのλ波長での光照強度は光源が放射する光線より遥かに大きい可能性があるため、特定した波長を選択して使用する方法は失効する可能性もある。
現在、前記問題を解決できる新しい方法が提案されている。該方法は、普通のCMOS(Complementary Metal Oxide Semiconductor,相補型金属酸化物半導体)画像センサーを使用し、同一シーン中に連続して2フレームの画像I1とI2(全過程において、目標物体と背景物体の位置はほとんど変化しないことを想定する)を撮影する。その中、I1の撮影の時に、光源は発光するが、I2の撮影の時に、光源は、発光しない。目標物体は、光源から近い、或いは特殊反射表面を有するため、I1画像における目標物体の輝度をI2画像における目標物体の輝度より遥かに高くさせ、背景物体が光源から遠くて特殊反射表面を有していなく、I1画像とI2画像における背景物体の輝度の差はあまり大きくない。画像処理器は、画像I1とI2を受信して差値演算し、その結果、画像Iとなる。Iにおける目標物体の輝度は、背景物体の輝度より遥かに大きい。Iに対して画像分割を行い、輝度がある閾値より高い部分は目標物体と見られ、輝度が閾値より低い部分は背景と見られる。従って、目標領域の区画に従って後続の演算、例えば位置情報の抽出等を行う。
この新規方法は、環境光照の問題を解決し、その欠点はシステム全体のリアルタイム性と光源のエネルギーの利用効率にある。これはCMOS画像センサーの動作モードに関わる。
図2は従来のCMOS画像センサーの動作模式図である。多数のCMOS画像センサーにとって、その各行の露光時間が同時ではない。図2における横軸は時間軸である。図2に示すように、第一行L1は露光し始めてからある期間を経た後、第二行L2は露光し始め、その後、順に各行の露光を始める。露光終了時間も順に終了する。
この露光方式で、各行が受信した光源から放射された光線の量を等しくするには、選択可能な光源フラッシュ時間は、図2における「フラッシュ1」と「フラッシュ2」の2種類しかない。フラッシュ1の案は最後の1行の露光の開始時刻にフラッシュを始め、第1行の露光終了の時刻にフラッシュを終了する。フラッシュ2の案は第1行露光の開始時刻にフラッシュを始め、最後の1行の露光終了の時刻にフラッシュを終了する。この2種の案はいずれも時間と效率の最適化に達していない。フラッシュ1の案において、光源のフラッシュ時間はCMOS画像センサーの露光時間より小さく、露光時間を十分に利用して目標物体の輝度を向上させていない。フラッシュ2の案において、光源のフラッシュ時間がCMOS画像センサーの露光時間より大きく、光源のエネルギーを十分に利用していない。
また、露光時間を増大すると、フラッシュ時間と露光時間との差が露光時間全体に占める割合はしだいに小さくなる。極限の場合、フラッシュ時間は露光時間にほぼ等しい。しかし、これも好ましくない。該案はリアルタイムの目標検出システムに応用されるため、目標は一定の移動速度を有する。前に提出した新方法の理論は「連続して撮影した2フレーム画像において目標位置はほとんど移動しない」の想定の上に構成される。露光時間を増大すれば、このような想定が成立できなくなり、それによりこの案を失効させる。
従って、各行の露光を同時に行なうことを保証できると、前記問題を解決することができる。図3を参照して、図3は各画素行の露光時間が同期である場合のCMOS画像センサーの動作模式図である。フラッシュ時間が露光時間と同期になるように設置することにより、各行が受信した光源から放射された光線の量を等しくすることができる。
ところが、従来のCMOS画像センサーは各行の露光同期を実現することは難しい。以下、具体的にCMOSセンサーにおける画像セルの回路の動作原理を参照して説明する。図4は従来のCMOSセンサーの画像セルの回路原理図である。CMOSセンサーは若干のこのような画像セルからなるアレイである。図4に示すように、画像セルは光電池B、リセットトランジスタR、電荷オーバーフロートランジスタT、ソースフォロアーFD及び行選択トランジスタXを備える。また、各列画像セルが共通に一対の信号出力トランジスタ、即ち、第一信号出力トランジスタSH1と第二信号出力トランジスタSH2に接続する。その中、リセットトランジスタR、電荷オーバーフロートランジスタT及び光電池Bは順に主動電源とグランドとの間に直列連結する。ソースフォロアーFDは、一端が主動電源に接続し、他端が行選択トランジスタXに接続し、且つ前記ソースフォロアーFDのゲート電極はリセットトランジスタRと電荷オーバーフロートランジスタTとの間のノードに接続する。電荷オーバーフロートランジスタTの他端はそれぞれ該画像セルの所在する画素列の第一信号出力トランジスタSH1と第二信号出力トランジスタSH2の一端に接続する。
図5は従来のCMOS画像センサーにおける画像セルの制御タイミング図である。 図5に示すように、各行画素の露光開始の前、リセットトランジスタRと電荷オーバーフロートランジスタTをオンすることによって、ソースフォロアーFDと光電池Bにおける電荷を取り除く。その後、リセットトランジスタRと電荷オーバーフロートランジスタTをオフし、露光が開始する。光電池Bは電荷を蓄積し始める。露光時間T1が終了する前に、行選択トランジスタXと第一信号出力トランジスタSH1をオンし、ソースフォロアーFDの基準レベルをサンプリングし、その後、直ちにオフする。露光終了の際、電荷オーバーフロートランジスタTはオンされ、光電池Bの電荷をソースフォロアーFDに移し、その後、電荷オーバーフロートランジスタTは直ちにオフされる。行選択トランジスタXと第二信号出力トランジスタSH2はオンされて、ソースフォロアーFDの信号レベルをサンプリングする。なお、第二信号出力トランジスタSH2と第一信号出力トランジスタSH1からの信号は、比較を経てデジタル信号に転換する。ただし、これはCMOS画像センサーにおけるある画像セルに含まれる回路の露光制御タイミングにすぎず、CMOS図像センサーはデータを直列に出力する必要があるため、CMOS画像センサー全体において、同一行の画像セルの露光制御タイミングは同期であり、異なる行の間の画像セルの露光制御タイミングは、各行データ出力の時間が衝突しないように時間の順番で順に実行される。
図2〜図5を参照して、露光時間が終了する前に、行選択トランジスタXはレベルのサンプリングを始め、即ち、該行のデータの出力を始めることが分かる。従って、従来の技術において、このタイミング制御方法は露光の直後にデータを出力しなければならない。しかしながら、CMOS画像センサーはデータをシリアル出力する必要があるため、各行を順に露光し始めさせなければ、各行が露光終了の際に順にデータを出力することができない。各行の露光時間を同期にする時、各行データ出力の時間も同期であり、画像データを正常に出力することができなくなる。
本発明が解決しようとする問題は、従来のCMOS画像センサーの各画素行が露光した後必ず直ちにデータを出力して同期に露光できないという欠点に対して、画素行が露光した後、所定時間を待ってデータを出力することができるCMOS画像センサー及びそのタイミング制御方法を提供し、それにより該CMOS画像センサーの任意の2行が同期に露光可能にすることである。
本発明が解決しようとする他の問題は、従来の目標検出システムにおいて画像センサーの異なる画素行が順次露光しかできず、光源エネルギーの利用効率が低く、画像サンプリングのリアルタイム性が悪いという欠点に対して、前記各行が所定時間を待ってデータを出力することができるCMOS画像センサーを利用して、2種類のCMOS画像センサーの露光方法を提供し、それにより異なる画素行が同時に露光可能で効率的に目標画像を撮影して目標検出を行なうことである。
従って、本発明がその技術問題を解決するには採用する技術案は、若干の画素行からなる画素アレイと、前記画素アレイを制御するための制御チップとを備えたCMOS画像センサーにおいて、前記制御チップは、各画素行の1つの露光期間内に、前記画素行を露光時間内に露光させるように制御し、その後、前記画素行に露光時間の後所定待ち時間を待たせてデータを出力するように制御する。
本発明の前記CMOS画像センサーにおいて、前記若干画素行における各行は、数が同じな画像セルを備え、且つ各画像セルは光電池とリセットトランジスタと電荷オーバーフロートランジスタと行選択トランジスタとソースフォロアーとを備え、且つ、各画像セルは、データを出力するように所在する画素列の第一信号出力トランジスタと第二信号出力トランジスタに接続され、前記制御チップは、各画素行の1つの露光期間内に下記Ｓ１−Ｓ５の制御信号を送信するように、それぞれ前記画素行における各画像セルの対応素子を制御する。
ただし、S1、露光時間開始の際に、それぞれ高レベルパルスを送信してリセットトランジスタと電荷オーバーフロートランジスタをオンし、
S2、露光時間終了の際に、高レベルパルスを送信して電荷オーバーフロートランジスタをオンし、
S3、露光時間終了後、所定待ち時間が終了した際に、それぞれ高レベルパルスを送信して行選択トランジスタと該画像セルの所在する画素列の第一信号出力トランジスタをオンして、信号レベルをサンプリングし、
S4、高レベルパルスを送信してリセットトランジスタをオンし、
S5、それぞれ高レベルパルスを送信して行選択トランジスタと該画像セルの所在する画素列の第二信号出力トランジスタをオンして、基準レベルをサンプリングする。
本発明の前記CMOS画像センサーにおいて、前記制御チップは、さらに前記画素アレイにおける少なくとも2つの画素行の露光時間を同期させるように制御し、その後、前記制御チップは、前記少なくとも2つの画素行に露光終了後異なる所定待ち時間をそれぞれ待たせてデータの出力を始めるように制御し、前記少なくとも2つの画素行の所定待ち時間の差値は単一画素行がデータを出力することに必要な時間の以上である。
本発明の前記CMOS画像センサーにおいて、前記制御チップは、さらに前記画素アレイにおけるすべての画素行の露光時間を同期させるように制御し、その後、前記制御チップは、すべての画素行に露光終了後異なる所定待ち時間をそれぞれ待たせてからデータの出力を始めるように制御し、且つ前記画素アレイにおける各画素行の所定待ち時間は順に逓増であり、逓増の差値は単一の画素行がデータを出力することに必要な時間の以上である。
本発明は、更に、若干の画素行からなる画素アレイと前記画素アレイを制御するための制御チップとを備えたCMOS画像センサーのタイミング制御方法を提供し、前記タイミング制御方法は、各画素行の1つの露光期間内に、
前記制御チップによって前記画素行を露光時間内に露光させるように制御する露光ステップと、
前記制御チップによって前記画素行に露光時間の後所定待ち時間を待たせてから、データを出力するデータ出力ステップとを実行することを含む。
本発明はさらに、第一光源状態と第二光源状態でそれぞれ目標画像を撮影して第一フレームバッファーと第二フレームバッファーに出力して目標検出を行なうためのCMOS画像センサーの露光方法を提供し、前記CMOS画像センサーは上記のCMOS画像センサーであり、前記露光方法は、
A0、前記CMOS画像センサーを数が同じである画素行からなる若干のサブアレイに区画するステップと、
A1、第一サブアレイを現在の露光サブアレイとするステップと、
A2、それぞれ第一光源状態と第二光源状態で、現在の露光サブアレイにおける各画素行が同期に露光してデータを出力するように制御するステップと、
A3、現在の露光サブアレイが最後のサブアレイであるかどうかを判定し、判定結果が肯定であると終了し、否定であるとステップA4に移行するステップと、
A4、現在の露光サブアレイの次のサブアレイを現在の露光サブアレイとしてステップA2に移行するステップとを含む。
本発明はさらに第一光源状態と第二光源状態でそれぞれ目標画像を撮影して第一フレームバッファーと第二フレームバッファーに出力して目標検出を行なうためのCMOS画像センサー他の露光方法を提供し、前記CMOS画像センサーは上記のCMOS画像センサーであり、前記露光方法は、
B0、前記CMOS画像センサーを数が同じである画素行からなる若干のサブアレイに区画するステップと、
B1、第一サブアレイを現在の露光サブアレイとするステップと、
B2、第一光源状態で、現在の露光サブアレイにおける各画素行が第一回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける下半分の画素行のデータを第一フレームバッファーに出力し、現在の露光サブアレイにおける上半分の画素行のデータを第一フレームバッファーに出力するステップと、
B3、前記現在の露光サブアレイにおける下半分の画素行のデータの出力が完了した際に、現在の露光サブアレイが最後のサブアレイであるかどうかを判定し、判定結果が肯定であると終了し、否定でないと現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ下方へ移動するステップと、
B4、第二光源状態で、現在の露光サブアレイにおける各画素行が第二回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける下半分の画素行のデータを第二フレームバッファーに出力し、現在の露光サブアレイにおける上半分の画素行のデータを第二フレームバッファーに出力するステップと、
B5、前記現在の露光サブアレイにおける下半分の画素行のデータの出力が完了した際に、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ下方へ移動し、ステップB2に移行するステップとを含む。
本発明は、さらに第一光源状態と第二光源状態でそれぞれ目標画像を撮影して第一フレームバッファーと第二フレームバッファーに出力して目標検出を行なうためのCMOS画像センサー他の露光方法を提供し、前記CMOS画像センサーは前に記載のCMOS画像センサーであり、前記露光方法は、
B'0、前記CMOS画像センサーを数が同じである画素行からなる若干のサブアレイに区画するステップと、
B'1、最後のサブアレイを現在の露光サブアレイとするステップと、
B'2、第一光源状態で、現在の露光サブアレイにおける各画素行が第一回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける上半分の画素行のデータを第一フレームバッファーに出力し、次に現在の露光サブアレイにおける下半分の画素行のデータを第一フレームバッファーに出力するステップと、
B'3、前記現在の露光サブアレイにおける上半分の画素行のデータの出力が完了した際、現在の露光サブアレイが第一のサブアレイであるかどうかを判定し、判定結果が肯定であると終了し、否定であると現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ上方へ移動するステップと、
B'4、第二光源状態で、現在の露光サブアレイにおける各画素行が第二回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける上半分の画素行のデータを第二フレームバッファーに出力し、次に現在の露光サブアレイにおける下半分の画素行のデータを第二フレームバッファーに出力するステップと、
B'5、前記現在の露光サブアレイにおける上半分の画素行のデータの出力が完了した際に、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ上方へ移動し、ステップB'2に移行するステップとを含む。
本発明のCMOS画像センサー及びそのタイミング制御方法によれば、本発明は制御チップにより各画素行の露光期間内に前記画素行の露光を制御し、その後、該画素行が露光時間の後所定待ち時間を待ってからデータの出力を始めるように制御し、それにより、CMOS画像センサーの露光時間と出力データ時間を分離させ、従って柔軟にCMOS画像センサーにおける各画素行の動作モードを制御でき、該CMOS画像センサーの各形式の露光を便利にし、例えば少なくとも2つの画素行の露光時間を同期させるよう制御し、或いは、すべての画素行の露光時間を同期させるよう制御するという有益な效果を奏している。
さらに、本発明のCMOS画像センサーを使用して実施するCMOS画像センサーの露光方法によれば、本発明による露光方法によりCMOS画像センサーを若干のサブアレイに区画し、且つ各サブアレイ中における各画素行を同期に露光させるように制御することにより、光源のフラッシュ時間が単一のサブアレイの露光時間と等しく、光源エネルギーの利用効率を向上にし、且つ同一のサブアレイの第一光源状態と第二光源状態での露光時間の間隔を減少させ、効率的に目標画像を撮影して目標検出を便利にするという有益な效果を奏している。
図面及び実施例を参照して本発明をさらに説明する。
図1は従来の目標検出方法の過程模式図である。 図2は従来のCMOS画像センサーの動作模式図である。 図3は各画素行が同期に露光する場合のCMOS画像センサーの動作模式図である。 図4は従来のCMOS画像センサーにおける画像セルの回路原理図である。 図5は従来のCMOS画像センサーにおける画像セルの制御タイミング図である。 図6は本発明の好適な実施例におけるCMOS画像センサーの画像セルの制御タイミング図である。 図7は本発明の好適な実施例におけるCMOS画像センサーの動作模式図である。 図8は本発明のCMOS画像センサーの露光方法の第一実施例のフロチャートである。 図9は本発明のCMOS画像センサーの露光方法の第一実施例の過程模式図である。 図10は本発明のCMOS画像センサーの露光方法の第一実施例における第一サブアレイの動作模式図である。 図11は本発明のCMOS画像センサーの露光方法の第二実施例のフロチャートである。 図12は本発明のCMOS画像センサーの露光方法の第二実施例の過程模式図である。 図13は本発明のCMOS画像センサーの露光方法の第三実施例のフロチャートである。 図14は本発明のCMOS画像センサーの露光方法の第三実施例の過程模式図である。 図15は本発明のCMOS画像センサーの露光方法の第三実施例の動作模式図である。 図16は本発明のCMOS画像センサーの露光方法の第四実施例のフロチャートである。 図17は本発明のCMOS画像センサーの露光方法の第四実施例の過程模式図である。
本発明の目的、技術案及びメリットをより明確にするために、以下、図面及び実施例を参照して、本発明をさらに詳しく説明する。
本発明は、画素アレイと制御チップを備えたCMOS画像センサーを提供する。その内、前記画素アレイは若干の画素行からなり、制御チップは、前記若干の画素行が露光してデータを出力するように制御するためのものである。
本発明の特徴は、前記制御チップは、各画素行の1つの露光期間内に、前記画素行を露光時間T1内に露光させ、その後、前記画素行に露光時間T1の後所定待ち時間T2を待たせてからデータを出力し始めるように制御することである。該所定待ち時間T2は0以上であってもよい。
図6は、本発明の好適な実施例におけるCMOS画像センサーの画像セルの制御タイミング図である。本発明の各画像セルは、光電池BとリセットトランジスタRと電荷オーバーフロートランジスタTと行選択トランジスタXとソースフォロアーFDとを備え、且つ、各画素列の画像セルは共通に使用される信号出力トランジスタに接続し、例えば各画像セルに接続する、所在する画素列の第一信号出力トランジスタSH1と第二信号出力トランジスタSH2に接続してデータを出力する。前記素子の接続関係は、図5における回路の接続関係と同じであり、区別する点は、本発明は制御チップが制御信号を送信するタイミングを変えることにより、異なる露光過程を実現することだけにある。
図6に示すように、本発明の制御チップは各画素行の1つの露光期間内に以下の制御信号を送信してそれぞれ前記画素行における各画像セルの対応素子を制御する。
まず、ステップS1において、露光時間T1開始の際に、それぞれ高レベルパルスを送信してリセットトランジスタRと電荷オーバーフロートランジスタTをオンする。これにより、光電池BとソースフォロアーFDにおける電荷を取り除く。その後、リセットトランジスタRと電荷オーバーフロートランジスタTをオフし、該画素行は露光し始める。
次に、ステップS2において、該画素行の露光時間T1終了の際に、高レベルパルスを送信して電荷オーバーフロートランジスタTをオンし、光電池Bの電荷をソースフォロアーFDに移し、その後、電荷オーバーフロートランジスタTをオフする。
次に、ステップS3において、該画素行の露光時間（T1）終了の後、所定待ち時間（T2）が終了した際に、それぞれ高レベルパルスを送信して行選択トランジスタ（X）と該画像セルの所在する画素列の第一信号出力トランジスタ(SH1)をオンし、信号レベルをサンプリングする。その後、行選択トランジスタXと該画像セルの所在する画素列の第一信号出力トランジスタSH1がオフする。
次に、ステップS4において、高レベルパルスを送信してリセットトランジスタ（R）をオンし、ソースフォロアーFDにおける電荷を取り除く。その後、リセットトランジスタRがオフする。
次に、ステップS5において、それぞれ高レベルパルスを送信して行選択トランジスタ(X)と該画像セルの所在する画素列の第二信号出力トランジスタ（SH2）をオンし、基準レベルをサンプリングする。該画像セルの所在する画素列の第一信号出力トランジスタSH1と第二信号出力トランジスタSH2からの信号は比較を経てデジタル信号出力に変換する。
前記タイミング制御方法により、各画素行に露光時間T1の後所定待ち時間T2を待たせてからデータの出力を始めるように制御でき、これにより、CMOS画像センサーの露光時間とデータ出力時間を分離させ、従って柔軟にCMOS画像センサーにおける各画素行の動作モードを制御でき、該CMOS画像センサーの各種類形式の露光を便利にする。
本発明が提供するさらなる実施例において、前記CMOS画像センサーに対して、さらに前記制御チップは前記画素アレイにおける少なくとも2つの画素行の露光時間T1を同期させるように制御し、その後、前記制御チップは、前記少なくとも2つの画素行にそれぞれ露光終了後異なる所定待ち時間T2を待たせてからデータの出力を始めるよう制御することを実現することができる。以下、該実施例の制御過程を具体的に説明する。前記少なくとも2つの画素行がL1とL2を含むこととすると、2つの画素行の所定待ち時間は異なり、それぞれT2-1とT2-2である。且つ両者の差値は、単一の画素行がデータを出力することに必要な時間の以上であり、これにより、シリアルに出力することができる。画素行L1と画素行L2の露光時間T1が同期であるため、相応する制御過程は以下の通りである。
まず、制御チップは同時に高レベルパルスを送信してL1とL2におけるすべての画像セルのリセットトランジスタRと電荷オーバーフロートランジスタTをオンし、その後、リセットトランジスタRと電荷オーバーフロートランジスタTがオフし、露光を始める。
次に、露光時間T1終了の際に、制御チップは同時に高レベルパルスを送信してL1とL2におけるすべての画像セルの電荷オーバーフロートランジスタTをオンし、光電池Bの電荷をソースフォロアーFDに移し、その後、電荷オーバーフロートランジスタTをオフする。
次に、制御チップは、それぞれ露光時間T1終了の後における所定待ち時間T2-1と所定待ち時間T2-2の終了の際に、制御信号を送信して画素行L1と画素行L2にデータを出力させる。
例えば、制御チップは、露光時間T1の終了後、画素行L1の所定待ち時間T2-1が終了した際に、それぞれ高レベルパルスを送信して画素行L1におけるすべての画像セルの行選択トランジスタXと該画像セルの所在する画素列の第一信号出力トランジスタSH1をオンして、信号レベルをサンプリングする。その後、画素行L1におけるすべての画像セルの行選択トランジスタXと該画像セルの所在する画素列の第一信号出力トランジスタSH1がオフする。次に、制御チップは、高レベルパルスを送信して画素行L1におけるすべての画像セルのリセットトランジスタRをオンして、ソースフォロアーFDにおける電荷を取り除く。その後、リセットトランジスタRをオフする。制御チップはそれぞれ高レベルパルスを送信し、画素行L1におけるすべての画像セルの行選択トランジスタXと該画像セルの所在する画素列の第二信号出力トランジスタSH2をオンして、基準レベルをサンプリングする。画素行L1におけるすべての画像セルにそれぞれ対応する第一信号出力トランジスタSH1と第二信号出力トランジスタSH2からの信号は比較を経てデジタル信号に転換し、画素行L1のデータとして出力される。
同様に、制御チップは、露光時間T1終了の後、画素行L2の所定待ち時間T2-2が終了した際に、それぞれ高レベルパルスを送信して、画素行L1におけるすべての画像セルの行選択トランジスタXと該画像セルの所在する画素列の第一信号出力トランジスタSH1をオンして、信号レベルをサンプリングする。その後、画素行L2におけるすべての画像セルの行選択トランジスタXと該画像セルの所在する画素列の第一信号出力トランジスタSH1がオフする。その後、制御チップは、高レベルパルスを送信して、画素行L2におけるすべての画像セルのリセットトランジスタRをオンして、ソースフォロアーFDにおける電荷を取り除く。その後、リセットトランジスタRがオフする。制御チップは、それぞれ高レベルパルスを送信して、画素行L2におけるすべての画像セルの行選択トランジスタXと該画像セルの所在する画素列の第二信号出力トランジスタSH2をオンし、基準レベルをサンプリングする。画素行L2におけるすべての画像セルにそれぞれ対応する第一信号出力トランジスタSH1と第二信号出力トランジスタSH2からの信号は比較を経てデジタル信号に変換し、画素行L2のデータとして出力される。
本発明のさらなる実施例において、図7を参照し、前記CMOS画像センサーにおけるすべての画素行の露光時間T1が同期である。露光時間T1終了の後、前記制御チップはすべての画素行にそれぞれ露光終了後異なる所定待ち時間T2を待たせてからデータを出力し始めるように制御し、且つ前記画素アレイにおける各画素行の所定待ち時間は逓増であり、逓増の差値は単一の画素行がデータを出力する時間の以上になる時間である。例えば、画素行L1は、露光時間T1の後、直ちにデータを出力でき、即ち、画素行L1の所定待ち時間はT2-1=0であってもよく、画素行L2は露光時間T2の後、画素行L1のデータの出力が完了するまでに待っており、画素行L1のデータの出力が完了してからデータの出力を始めることができ、従って、待ち時間T2-2を予め定め、該T2- 2とT2-1の差値は画素行L1がデータを出力する時間の以上であるべきであり、同理に、画素行L3の所定待ち時間T2-3とT2-2の差値は画素行L2がデータを出力する時間の以上であるべきであり、このように類推すると、画素行Lnの所定待ち時間T2-nと画素行Ln-1の所定待ち時間T2- n -1との差値は画素行Ln-1のデータの出力の時間より大きい。ここで、同一画像センサーにおいて、単一の画素行がデータを出力する時間は等しくてもよい。本実施例が提供する画像センサーが目標検出分野に適用されると、各画素行は同期に露光するため、フラッシュ時間は露光時間と等しくてもよく、従って光源エネルギーの利用効率を向上させる。
本発明は相応して前記CMOS画像センサーのタイミング制御方法を提供し、前記タイミング制御方法は各画素行の1つの露光期間内に露光ステップとデータ出力ステップとを実行することを含む。
その中、露光ステップは、前記制御チップによって前記画素行を露光時間T1内に露光させるように制御することである。データ出力ステップは、前記制御チップによって前記画素行に露光時間T1の後、所定待ち時間T2を待たせてからデータの出力を始めることである。
より具体的な方法ステップは以下の通りである。その中、露光ステップは、前記制御チップにより以下の制御信号を送信してそれぞれ前記画素行における各画像セルの対応素子を制御することが含まれている。
まず、ステップS1において、露光時間T1開始の際に、それぞれ高レベルパルスを送信してリセットトランジスタRと電荷オーバーフロートランジスタTをオンする。
次に、ステップS2において、露光時間T1が終了した際に、高レベルパルスを送信して電荷オーバーフロートランジスタTをオンする。
データ出力ステップは、前記制御チップにより以下の制御信号を送信してそれぞれ前記画素行における各画像セルの対応素子を制御することが含まれている。
まず、ステップS3において、露光時間T1が終了した後における所定待ち時間T2が終了した際に、それぞれ高レベルパルスを送信し、行選択トランジスタXと該画像セルの所在する画素列の第一信号出力トランジスタSH1をオンして、信号レベルをサンプリングする。
次に、ステップS4において、高レベルパルスを送信してリセットトランジスタRをオンする。
最後に、ステップS5において、それぞれ高レベルパルスを送信して行選択トランジスタXと該画像セルの所在する画素列の第一信号出力トランジスタSH2をオンして基準レベルをサンプリングする。
本発明は、目標検出システムの必要に応じて、前記露光後、時間を待ってデータを出力できるCMOS画像センサーに基づく露光方法をさらに提供し、該露光方法は、第一光源状態と第二光源状態でそれぞれ目標画像を撮影して第一フレームバッファーと第二フレームバッファーに出力して目標検出を行なうのに用いられ。前記第一光源状態と第二光源状態はそれぞれ目標検出中において、使用される光源フラッシュが必要な状態と必要がない状態を代表してもよく、目標検出の実際の必要に応じて2種類の異なる光源状態を提供することもできる。本発明が提供する前記CMOS画像センサーの長所は、CMOS画像センサーのある行或いはすべての行の露光を同時に開始、終了できることにある。従って、本発明が提供する露光方法において、露光すると同時に光源をフラッシュさせることができ、従ってフラッシュ時間と露光時間を等しくする。このようにして露光時間を十分に利用して目標物体の輝度を向上させるとともに、光源の能量を十分に利用することもできる。
本発明が提供する露光方法において、まず、CMOS画像センサーを若干個のサブアレイに区画して、一定の規則に従って露光処理することを便利にし、これらのサブアレイは、通常に数が同じである画素行を有する。目標検出システムがリアルタイム性を有するため、連続して同一のシーンを二回撮影する過程において、目標物体も背景物体もあまり大き過ぎの変位を有さずに、そのため、この2回の撮影時間の間隔をできるだけ小さくすることを要求する。従って、本発明は、CMOS画像センサーの画像セル全体からなるアレイを行に応じてサブアレイに区画する。行数の減少のため、サブアレイの撮影時間は画素アレイ全体より小さく、連続撮影の2つのフレームの間隔時間もそれにつれて減少する。
図8は本発明のCMOS画像センサーの露光方法の第一実施例のフロチャートである。図8に示すように、本実施例の露光方法は以下のステップを含む。
まず、ステップAOにおいて、前記CMOS画像センサーを数が等しい画素行からなる若干のサブアレイに区画する。
次に、ステップA1において、第一サブアレイを現在の露光サブアレイとする。
次に、ステップA2において、それぞれ第一光源状態と第二光源状態で、現在の露光サブアレイにおける各画素行が同期に露光してデータを出力するように制御する。本発明の実施例中において、ステップA2はさらに、第一光源状態で、現在の露光サブアレイにおける各画素行が第一回同期露光を行なうように制御し、且つ現在の露光サブアレイにおけるすべての画素行のデータの出力が完了するまでに、前記各画素行が順にデータを第一フレームバッファーに出力するように制御するステップとA21、第二光源状態で、現在の露光サブアレイにおける各画素行が第二回の同期露光を行なうように制御し、且つ現在の露光サブアレイにおけるすべての画素行のデータの出力が完了するまでに、前記各画素行が順にデータを第二フレームバッファーに出力するように制御するステップ A22とを含む。
次に、ステップA3において、現在の露光サブアレイが最後のサブアレイであるかどうかを判定し、判定結果が肯定であるとステップA5に移行し、否定であるとステップA4に移行する。
次に、ステップA4において、現在の露光サブアレイの次のサブアレイを現在の露光サブアレイとしてステップA2に移行する。
最後に、ステップA5において終了する。
以下、図面を参照して第一実施例の露光過程を具体的に説明する。
図9は本発明のCMOS画像センサーの露光方法の第一実施例の過程模式図である。まず、該CMOS画像センサーは、K個のサブアレイに区画され、それぞれはM1、M2、M3……Mkである。その中、各サブアレイに含められる画素行は等しい。例えば、連続する16行あたりを1つのサブアレイとする。それぞれ第一光源状態と第二光源状態での目標画像を撮影するために、ここで毎回同一のサブアレイを使用して、連続して二回撮影し、その内の一回は第一光源状態、即ち光源がフラッシュすることであり、他の一回は第二光源状態、即ち光源がフラッシュしないことである。その後、次のサブアレイで連続して二回撮影し、画素アレイの撮影が完了するまでに行います。例えば、第一時刻t1の期間に、第一サブアレイM1は現在の露光サブアレイであり、第一光源の状態で露光し、その後、各行は順にデータを第一フレームバッファーに出力し、第二時刻t2の期間に、第一サブアレイM1は依然として現在の露光サブアレイであり、第二光源状態で露光し、その後、各行は順にデータを第二フレームバッファーに出力し、第一サブアレイが最後のサブアレイであるかどうかを判定し、従って、現在の露光サブアレイの次のサブアレイである第二サブアレイを現在の露光サブアレイとし、第三時刻t3の期間に、第二サブアレイM2は現在の露光サブアレイであり、第一光源状態で露光し、その後、各行は順にデータを第一フレームバッファーに出力し、第四時刻t4の期間に、第二サブアレイM2は依然として現在の露光サブアレイであり、第二光源状態で露光し、その後、各行は順にデータを第二フレームバッファーに出力し、……第2k-1時刻t2k-1の期間に、第kサブアレイMkは現在の露光サブアレイであり、第一光源状態で露光し、その後、各行は順にデータを第一フレームバッファーに出力し、第2k時刻t2kの期間に、第kサブアレイMkは依然として現在の露光サブアレイであり、第二光源状態で露光し、その後、各行は順にデータを第二フレームバッファーに出力し、第kサブアレイMkが最後のサブアレイであると判定し、従って露光過程は終了する。
図10は、本発明のCMOS画像センサーの露光方法の第一実施例における第一サブアレイの動作模式図である。図10に示すように、第一サブアレイM1は第一時刻t1の期間と第二時刻t2の期間にそれぞれ一回の同期露光を行った。例えば第一サブアレイM1の画素行L1〜L16はまず第一光源状態で第一回同期露光を行い、即ち露光時間はT1である。その後、画素行L1〜画素行L16は順にデータを出力する。これは各画素行に対して異なる所定待ち時間を設定することにより、即ち画素行L1の所定待ち時間T2-1が0であってもよく、画素行L2の所定待ち時間T2-2とT2-1との差値が画素行L1がデータを出力する時間の以上であり…このように類推すると、画素行の所定待ち時間は逓増しており、且つ前の画素行との差値は単一の画素行がデータを出力する時間の以上である。画素行L16がデータを出力し完了した後、第二光源状態で第二回同期露光を行い始める。本発明において、前記第一光源状態と第二光源状態は互いに交換してもよく、即ち、先に光源がフラッシュする場合で画像を撮影してもよく、先に光源はフラッシュしない場合で画像を撮影してもよく、両者の順番はさらなる目標検出の結果に影響しない。
このようにしてCMOS画像センサーの各画像セルがいずれも二回露光され、その内、一回は光源がフラッシュし、他の一回は光源がフラッシュしない。且つ2回サンプリングした画像の間の時間差は約、単一サブアレイがデータを出力する時間であり、効率的に時間間隔を減少し、画像サンプリングのリアルタイムを保証する。画像処理器はさらに2個のフレームバッファーに記憶している結果を減算し、ある閾値で目標領域と背景領域を区画し、更に目標物体の特徴を計算する。
ただし、本発明が提供するCMOS画像センサーの露光方法の第一実施例において、上から下への方式でサブアレイを露光し、ここで、交替原則に従って下から上への方式でサブアレイを露光してもよい。
図11は本発明のCMOS画像センサーの露光方法の第二実施例の過程模式図である。まず、ステップA'Oにおいて、前記CMOS画像センサーを数が同じである画素行からなる若干のサブアレイに区画する。
その後ステップA'1において、最後のサブアレイを現在の露光サブアレイとする。
次に、ステップA'2において、それぞれ第一光源状態と第二光源状態で、現在の露光サブアレイにおける各画素行が同期に露光してデータを出力するように制御する。第三実施例において、ステップA'2はさらに、第一光源状態で、現在の露光サブアレイにおける各画素行が第一回同期露光を行なうように制御し、且つ現在の露光サブアレイにおけるすべての画素行のデータの出力が完了するまでに、前記各画素行が順にデータを第一フレームバッファーに出力するように制御するステップA21と、第二光源状態で、現在の露光サブアレイにおける各画素行が第二回の同期露光を行なうように制御し、且つ現在の露光サブアレイにおけるすべての画素行のデータの出力が完了するまで、前記各画素行が順にデータを第二フレームバッファーに出力するように制御するステップA22とを含む。
次に、ステップA'3において、現在の露光サブアレイが第一サブアレイであるかどうかを判定し、判定結果が肯定であると、ステップA'5に移行し、否定であると、ステップA'4に移行する。
次に、ステップA'4において、現在の露光サブアレイの前のサブアレイを現在の露光サブアレイとしてステップA'2に移行する。
最後に、ステップA'5において終了する。
第二実施例の具体的な実現過程は図12に示す。第二実施例中において、第一時刻t1の期間に、第kサブアレイMkは現在の露光サブアレイであり、第一光源状態で露光し、その後、各行は順にデータを第一フレームバッファーに出力し、上から下へ、下から上へデータを出力することができ、第二時刻t2の期間に、第kサブアレイMkは依然として現在の露光サブアレイであり、第二光源状態で露光し、その後、各行は順にデータを第二フレームバッファーに出力し、第kサブアレイMkが第一サブアレイではないと判定し、従って、現在の露光サブアレイの前のサブアレイ第k-1サブアレイMk-1を現在の露光サブアレイとし、…第2k-1時刻t2k-1の期間に、第一サブアレイM1は現在の露光サブアレイであり、第一光源状態で露光し、その後、各行は順にデータを第一フレームバッファーに出力し、第2k時刻t2kの期間に、第一サブアレイM1は依然として現在の露光サブアレイであり、第二光源状態で露光し、その後、各行は順にデータを第二フレームバッファーに出力し、第一サブアレイM1が第一サブアレイであると判定し、従って、露光全過程は終了する。
図13は本発明のCMOS画像センサーの露光方法の第三実施例のフロチャートである。該方法は同様にCMOS画像センサーを若干のサブアレイに区画して露光する。図13に示すように、本実施例の露光方法は以下のステップを含む。
まず、ステップB0において、前記CMOS画像センサーを数が同じである画素行からなる若干のサブアレイに区画する。
次に、ステップB1において、第一サブアレイを現在の露光サブアレイとする。
次に、ステップB2を実行し、具体的には、図13におけるステップB21とステップB22を含む。ステップB21において、第一光源状態で、現在の露光サブアレイにおける各画素行が第一回同期露光を行なうように制御し、その後、まず、現在の露光サブアレイにおける下半分の画素行のデータを第一フレームバッファーに出力する。ステップB22において、現在の露光サブアレイにおける上半分の画素行のデータを第一フレームバッファーに出力する。
次に、ステップB3を実行し、具体的には図13におけるステップB31とステップB32を含む。ステップB31において、前記現在の露光サブアレイにおける下半分の画素行のデータの出力が完了した際に、現在の露光サブアレイが最後のサブアレイであるかどうかを判定し、判断結果が肯定であるとステップB6に移行し、否定であるとステップB32に移行する。ステップB32において、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ下方移動する。
次に、ステップB4を実行し、具体的に図13におけるステップB41とステップB42を含む。ステップB41において、第二光源状態で、現在の露光サブアレイにおける各画素行が第二回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける下半分の画素行のデータを第二フレームバッファーに出力する。ステップB42において、現在の露光サブアレイにおける上半分の画素行のデータを第二フレームバッファーに出力する。
次に、ステップB5において、前記現在の露光サブアレイにおける下半分の画素行のデータの出力が完了した際に、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ下方へ移動し、ステップB2に移行する。
なお、前記過程において、ステップB21の後、並列にステップB22とステップB31を実行し、即ち、上半分の画素行のデータを出力する同時に、データの出力が完了した下半分の画素行を次回の露光に移行し、2回露光の間の時間差を節約する。同理にステップB41の後、ステップB42とステップB5を並列に実行する。
本発明のさらなる実施例において、ステップB2において、第一回同期露光を行なった後、下から上への順で順に現在の露光サブアレイにおける各画素行のデータを第一フレームバッファーに出力する。ステップB4において、第二回の同期露光を行なった後、下から上へ順に現在の露光サブアレイにおける各画素行のデータを第二フレームバッファーに出力する。
図14は本発明のCMOS画像センサーの露光方法の第三実施例の過程模式図である。まず、該CMOS画像センサーはK個のサブアレイに区画され、それぞれM1、M2、M3……Mkである。第一時刻t1の期間に、第一サブアレイM1は現在の露光サブアレイであり、第一光源の状態で露光し、その後、各行は下から上へ順にデータを第一フレームバッファーに出力し、即ち、下半分の画素行MD1のデータの出力が先に完了され、上半分の画素行MU1のデータの出力が後に完了され、第二時刻t2の期間に、即ち、第一サブアレイM1の下半分の画素行MD1のデータの出力が完了された時、第一サブアレイM1が最後のサブアレイではないと判定し、従って、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ下方へ移動し、即ち、第一サブアレイM1の下半分の画素行MD1と第二サブアレイM2の上半分の画素行MU2で新しい現在の露光サブアレイを構成し、それにより、第二光源状態で新しい現在の露光サブアレイにおける各画素行が第二回の同期露光を行なうように制御し……第2k-1時刻t2k-1の期間に、第kサブアレイMkは現在の露光サブアレイであり、第一光源状態で露光し、その後、各行は下から上へ順にデータを第一フレームバッファーに出力し、第kサブアレイMkが最後のサブアレイであると判定し、従って、露光過程が終了する。
32行あたりを1つのサブアレイとすることを例として説明する。毎回、1つのサブアレイを使用して一回撮影し、出力順番は第32行から第1行まで順に出力する。その後、アレイを16行下方へ移動し、1つの新しいサブアレイを形成し、再び一回撮影する。画素アレイの撮影が完了するまで、サイクルする。その中、第奇数回撮影する時、光源は第一発光状態であり、第偶数回撮影する時、光源は第二発光状態であり、即ち、それぞれ光源がフラッシュすることとフラッシュいしないことである。より具体的に、第一回は第1〜32行を1つのサブアレイとし、撮影する時、光源が発光し、第二回は第17行〜48行を1つのサブアレイとし、撮影する時、光源が発光せず、第三回は第33行〜64行を1つのサブアレイとし、撮影する時、光源が発光し、このように、CMOSセンサーの全部撮影が完了するまで続く。この時、CMOS画像センサーは、第一サブアレイの上半分の画素行16行と最後のサブアレイの下半分の画素行16行の以外、各画像セルが2回露光され、そのうち、一回は、光源が発光し、他の一回は、光源が発光しない。CMOS画像処理器の制御チップはさらに2回の結果を減算し、且つある閾値で目標区域と背景区域を区画し、その上、目標物体の特徴を計算する。
図15は本発明のCMOS画像センサーの露光方法の第三実施例における第一サブアレイの動作模式図である。図15に示すように、まず、第一サブアレイM1の画素行L1〜画素行L32は第一時刻t1の期間に、まず、第一光源状態で第一回同期露光を行い、即ち、露光時間はT1である。その後、画素行L32〜画素行L1は順にデータを出力する。これは、各画素行に対して異なる所定待ち時間を設けることにより、即ち、画素行L32の所定待ち時間T2-32は0であってもよく、画素行L31の所定待ち時間T2-31とT2-32との差値は画素行L32がデータを出力する時間より大きく……このように類推すると、下から上へ画素行の所定待ち時間は段々逓増であり、且つ、前の画素行との差値は前の画素行がデータを出力する時間より大きい。画素行L17がデータを出力し完了した後、画素行L17〜L48に対して第二光源状態で第二回の同期露光を始める。且つ前記過程を繰り返す。この方法はCMOS画像センサーの最初の16行と最後の16行を利用できないが、32行のサブアレイにおける16行の出力が完了された後直ちに次のサブアレイの露光を始めることができ、次のサブアレイの露光時間と前のサブアレイの後の16行の出力時間とを重畳させ、時間を節約し、システム全体のフレームレートを向上させ、リアルタイムの目標検出システムの構成に大きな役割を果たす。
同理に、本発明が提供するCMOS画像センサーの露光方法の第三実施例においても、上から下への方式でサブアレイを露光し、ここで、交替原則に従って下から上への方式でサブアレイを露光してもよい。
図16は本発明のCMOS画像センサーの露光方法の第四実施例の過程模式図。第四実施例において、まず、ステップB'0において、前記CMOS画像センサーを数が同じである画素行からなる若干のサブアレイに区画する。
次に、ステップB'1において、最後のサブアレイを現在の露光サブアレイとする。
次に、ステップB'2を実行し、具体的にはステップB'21とステップB'22を含む。ステップB'21において、第一光源状態で、現在の露光サブアレイにおける各画素行が第一回同期露光を行なうように制御し、その後、まず、現在の露光サブアレイにおける上半分の画素行のデータを第一フレームバッファーに出力する。ステップB'22において、現在の露光サブアレイにおける下半分の画素行のデータを第一フレームバッファーに出力する。
次に、ステップB'3を実行し、具体的には、ステップB'31とステップB'32を含む。ステップB'31において、前記現在の露光サブアレイにおける上半分の画素行のデータの出力が完了された際に、現在の露光サブアレイが第一のサブアレイであるかどうかを判定し、判定結果が肯定であるとステップB'6に移行し、否定であるとステップB'32に移行する。ステップB'32において、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ上方へ移動する。
次に、ステップB'4を実行し、具体的にはステップB'41とステップB'42を含む。ステップB'41において、第二光源状態で、現在の露光サブアレイにおける各画素行が第二回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける上半分の画素行のデータを第二フレームバッファーに出力する。ステップB'42において、現在の露光サブアレイにおける下半分の画素行のデータを第二フレームバッファーに出力する。
次に、ステップB'5において、前記現在の露光サブアレイにおける上半分の画素行のデータの出力が完了した際に、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ上方へ移動し、ステップB'2に移行する。
なお、前記過程において、同様にステップB'21の後、ステップB'22とステップB'31を並列に実行し、即ち、下半分の画素行的データを出力する同時に、データの出力が完了された上半分の画素行を次の露光に移行し、２回の露光の間の時間差を倹約する。同様の理由で、ステップB'41の後、ステップB'42とステップB'5を並列に実行する。
本発明のさらなる実施例において、ステップB'2において、第一回同期露光を行なった後、上から下への順で順に現在の露光サブアレイにおける各画素行のデータを第一フレームバッファーに出力する。ステップB'4において、第二次の同期露光を行なった後、上から下へ順に現在の露光サブアレイにおける各画素行のデータを第二フレームバッファーに出力する。
図17は第四実施例の具体的な実現過程を示す図である。まず、該CMOS画像センサーはK個のサブアレイに区画され、それぞれはM1、M2、M3……Mkである。第一時刻t1の期間に、第kサブアレイMkは現在の露光サブアレイであり、第一光源状態で露光する。その後、各行は上から下へ順にデータを第一フレームバッファーに出力し、即ち、上半分の画素行MUkのデータの出力は先に完了され、下半分の画素行MDkのデータの出力は後に完了され、第二時刻t2の期間に、即ち、第kサブアレイMkの上半分の画素行MUkのデータの出力が完了された時、第kサブアレイMkが第一サブアレイではないと判定し、従って、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ上方へ移動し、即ち、第kサブアレイMkの上半分の画素行MUkと第k-1サブアレイMk-1の下半分の画素行MDk-1から新しい現在の露光サブアレイを構成し、それにより、第二光源状態で新しい現在の露光サブアレイにおける各画素行が第二回の同期露光を行なうように制御し……第2k-1時刻t2k-1の期間に、第一サブアレイM1は現在の露光サブアレイであり、第一光源状態で露光し、その後、各行は上から下へ順にデータを第一フレームバッファーに出力し、第一サブアレイM1が第一サブアレイであると判定し、従って、露光全過程は終了する。
本発明は特定の実施例に基づいて説明したが、当業者は、勿論、本発明範囲から脱逸しない場合、各種の修正、同等な変換を実施出来ることがわかる。また、本発明技術の特定したシーンと材料に適応するため、その保護範囲から脱逸しない条件で、本発明に対して様々な変更を行なうことができる。従って、本発明はここに開示された特定の実施例に限らず、請求項の保護範囲に入られたすべての実施例を含む。

Claims (6)

  1. 第一光源状態と第二光源状態でそれぞれ目標画像を撮影して第一フレームバッファーと第二フレームバッファーに出力して目標検出を行なうための、CMOS画像センサーの露光方法であって、
    前記CMOS画像センサーは、
    複数の画素行からなる画素アレイと、前記画素アレイを制御するための制御チップとを備え、
    前記制御チップは、各画素行の1つの露光期間内に、前記画素行を露光時間（T1）内に露光させるように制御し、その後、前記画素行に露光時間（T1）後の所定待ち時間（T2）を待たせてデータを出力するように制御し、
    前記制御チップは、前記画素アレイにおけるすべての画素行の露光時間（T1）を同期させるよう制御し、その後、前記制御チップは、すべての画素行に露光終了後異なる所定待ち時間（T2）をそれぞれ待たせてデータの出力を始めるように制御し、且つ前記画素アレイにおける各画素行の所定待ち時間は順に逓増であり、逓増の差値は単一の画素行がデータを出力することに必要な時間以上であることを特徴とし、
    A0、前記CMOS画像センサーを数が同じである画素行からなる複数のサブアレイに区画するステップと、
    A1、第一サブアレイを現在の露光サブアレイとするステップと、
    A2、それぞれ第一光源状態と第二光源状態で、現在の露光サブアレイにおける各画素行が同期に露光してデータを出力するように制御するステップと、
    A3、現在の露光サブアレイが最後のサブアレイであるかどうかを判定し、判定結果が肯定であると終了し、否定であるとステップA4に移行するステップと、
    A4、現在の露光サブアレイの次のサブアレイを現在の露光サブアレイとしてステップA2に移行するステップとを含み、
    前記ステップA2は、さらに以下の順で実行する、
    A21、第一光源状態で、現在の露光サブアレイにおける各画素行が第一回同期露光を行なうように制御し、且つ、現在の露光サブアレイにおけるすべての画素行のデータの出力が完了するまでに、前記各画素行が順にデータを第一フレームバッファーに出力するように制御するステップと、
    A22、第二光源状態で、現在の露光サブアレイにおける各画素行が第二回同期露光を行なうように制御し、且つ現在の露光サブアレイにおけるすべての画素行のデータの出力が完了するまでに、前記各画素行が順にデータを第二フレームバッファーに出力するように制御するステップとを含むことを特徴とする、CMOS画像センサーの露光方法。
  2. 第一光源状態と第二光源状態でそれぞれ目標画像を撮影して第一フレームバッファーと第二フレームバッファーに出力して目標検出を行なうためのCMOS画像センサーの露光方法であって、
    前記CMOS画像センサーは、
    複数の画素行からなる画素アレイと、前記画素アレイを制御するための制御チップとを備え、
    前記制御チップは、各画素行の1つの露光期間内に、前記画素行を露光時間（T1）内に露光させるように制御し、その後、前記画素行に露光時間（T1）後の所定待ち時間（T2）を待たせてデータを出力するように制御し、
    前記制御チップは、前記画素アレイにおけるすべての画素行の露光時間（T1）を同期させるよう制御し、その後、前記制御チップは、すべての画素行に露光終了後異なる所定待ち時間（T2）をそれぞれ待たせてデータの出力を始めるように制御し、且つ前記画素アレイにおける各画素行の所定待ち時間は順に逓増であり、逓増の差値は単一の画素行がデータを出力することに必要な時間以上であることを特徴とし、
    B0、前記CMOS画像センサーを数が同じである画素行からなる複数のサブアレイに区画するステップと、
    B1、第一サブアレイを現在の露光サブアレイとするステップと、
    B2、第一光源状態で、現在の露光サブアレイにおける各画素行が第一回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける下半分の画素行のデータを第一フレームバッファーに出力し、次に、現在の露光サブアレイにおける上半分の画素行のデータを第一フレームバッファーに出力するステップと、
    B3、前記現在の露光サブアレイにおける下半分の画素行のデータの出力が完了した際に、現在の露光サブアレイが最後のサブアレイであるかどうかを判定し、判定結果が肯定であると終了し、否定であると現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ下方へ移動するステップと、
    B4、第二光源状態で、現在の露光サブアレイにおける各画素行が第二回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける下半分の画素行のデータを第二フレームバッファーに出力し、次に、現在の露光サブアレイにおける上半分の画素行のデータを第二フレームバッファーに出力するステップと、
    B5、前記現在の露光サブアレイにおける下半分の画素行のデータの出力が完了した際に、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ下方へ移動し、ステップB2に移行するステップとを含むことを特徴とするCMOS画像センサーの露光方法。
  3. 前記ステップB2は、第一回同期露光を行なった後、下から上へ順に現在の露光サブアレイにおける各画素行のデータを第一フレームバッファーに出力することを含み、
    前記ステップB4は、第二次同期露光を行なった後、下から上へ順に現在の露光サブアレイにおける各画素行のデータを第二フレームバッファーに出力することを含むことを特徴とする請求項２に記載のCMOS画像センサーの露光方法。
  4. 第一光源状態と第二光源状態でそれぞれ目標画像を撮影して第一フレームバッファーと第二フレームバッファーに出力して目標検出を行なうための、CMOS画像センサーの露光方法であって、
    前記CMOS画像センサーは、
    複数の画素行からなる画素アレイと、前記画素アレイを制御するための制御チップとを備え、
    前記制御チップは、各画素行の1つの露光期間内に、前記画素行を露光時間（T1）内に露光させるように制御し、その後、前記画素行に露光時間（T1）後の所定待ち時間（T2）を待たせてデータを出力するように制御し、
    前記制御チップは、前記画素アレイにおけるすべての画素行の露光時間（T1）を同期させるよう制御し、その後、前記制御チップは、すべての画素行に露光終了後異なる所定待ち時間（T2）をそれぞれ待たせてデータの出力を始めるように制御し、且つ前記画素アレイにおける各画素行の所定待ち時間は順に逓増であり、逓増の差値は単一の画素行がデータを出力することに必要な時間以上であることを特徴とし、
    B'0、前記CMOS画像センサーを数が同じである画素行からなる複数のサブアレイに区画するステップと、
    B'1、最後のサブアレイを現在の露光サブアレイとするステップと、
    B'2、第一光源状態で、現在の露光サブアレイにおける各画素行が第一回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける上半分の画素行のデータを第一フレームバッファーに出力し、次に現在の露光サブアレイにおける下半分の画素行のデータを第一フレームバッファーに出力するステップと、
    B'3、前記現在の露光サブアレイにおける上半分の画素行のデータの出力が完了した際に、現在の露光サブアレイが第一のサブアレイであるかどうかを判定し、判定結果は肯定であると終了し、否定であると現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ上方へ移動するステップと、
    B'4、第二光源状態で、現在の露光サブアレイにおける各画素行が第二回同期露光を行なうように制御し、その後、まず現在の露光サブアレイにおける上半分の画素行のデータを第二フレームバッファーに出力し、次に現在の露光サブアレイにおける下半分の画素行のデータを第二フレームバッファーに出力するステップと、
    B'5、前記現在の露光サブアレイにおける上半分の画素行のデータの出力が完了した際に、現在の露光サブアレイを半分のサブアレイの位置に相当する距離だけ上方へ移動し、ステップB'2に移行するステップとを含むことを特徴とするCMOS画像センサーの露光方法。
  5. 前記ステップB'2は、第一回同期露光を行なった後、上から下へ順に現在の露光サブアレイにおける各画素行のデータを第一フレームバッファーに出力することを含み、
    前記ステップB'4は、第二次同期露光を行なった後、上から下へ順に現在の露光サブアレイにおける各画素行のデータを第二フレームバッファーに出力することを含むことを特徴とする請求項４に記載のCMOS画像センサーの露光方法。
  6. 前記複数の画素行における各行は、数が同じな画像セルを備え、且つ各画像セルは光電池（B）とリセットトランジスタ（R）と電荷オーバーフロートランジスタ（T）と行選択トランジスタ（X）とソースフォロアー(FD)とを備え、且つ、各画像セルは、データを出力するように所在する画素列の第一信号出力トランジスタ(SH1)と第二信号出力トランジスタ(SH2)に接続され、前記制御チップは、各画素行の1つの露光期間内に下記Ｓ１−Ｓ５の制御信号を送信して、それぞれ前記画素行における各画像セルの対応素子を制御することを特徴とする請求項１乃至５のいずれか一項に記載のCMOS画像センサーの露光方法。ただし、
    S1、露光時間（T1）開始の際に、それぞれ高レベルパルスを送信してリセットトランジスタ（R）と電荷オーバーフロートランジスタ（T）をオンし、
    S2、露光時間（T1）終了の際に、高レベルパルスを送信して電荷オーバーフロートランジスタ（T）をオンし、
    S3、露光時間（T1）終了後、所定待ち時間（T2）が終了した際に、それぞれ高レベルパルスを送信して行選択トランジスタ（X）と該画像セルの所在する画素列の第一信号出力トランジスタ(SH1)をオンし、信号レベルをサンプリングし、
    S4、高レベルパルスを送信してリセットトランジスタ（R）をオンし、
    S5、それぞれ高レベルパルスを送信して行選択トランジスタ(X)と該画像セルの所在する画素列の第二信号出力トランジスタ（SH2）をオンして、基準レベルをサンプリングする。
JP2013512719A 2010-06-04 2010-06-04 Ｃｍｏｓ画像センサーの露光方法 Active JP5655137B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2010/073543 WO2011150574A1 (zh) 2010-06-04 2010-06-04 Cmos图像传感器及其时序控制方法和曝光方法

Publications (2)

Publication Number Publication Date
JP2013531420A JP2013531420A (ja) 2013-08-01
JP5655137B2 true JP5655137B2 (ja) 2015-01-14

Family

ID=45066132

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013512719A Active JP5655137B2 (ja) 2010-06-04 2010-06-04 Ｃｍｏｓ画像センサーの露光方法

Country Status (6)

Country Link
US (1) US8964083B2 (ja)
EP (1) EP2579567A4 (ja)
JP (1) JP5655137B2 (ja)
CN (1) CN102907084B (ja)
AU (1) AU2010354500B2 (ja)
WO (1) WO2011150574A1 (ja)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104135908B (zh) * 2012-03-28 2016-07-06 富士胶片株式会社 摄像装置以及具备其的内窥镜装置
DE102012020242A1 (de) * 2012-10-12 2014-04-17 Carl Zeiss Microscopy Gmbh Bildaufnahmevorrichtung und Verfahren zur Aufnahme einer Bildersequenz
JP6402438B2 (ja) * 2013-09-27 2018-10-10 株式会社ニコン 撮像装置
IN2013CH05374A (ja) * 2013-11-21 2015-05-29 Nokia Corp
CN105657284A (zh) * 2014-11-19 2016-06-08 力钜电子股份有限公司 控制外挂闪光灯闪光时间的方法
TWI563845B (en) * 2014-11-19 2016-12-21 Method for taking photo with extension flash module of mobile device
DE102015109645B3 (de) * 2015-06-17 2016-09-08 Carl Zeiss Microscopy Gmbh Verfahren zur Multiliniendetektion
CN109561264B (zh) * 2017-09-26 2020-12-22 普里露尼库斯股份有限公司 固体摄像装置、固体摄像装置的驱动方法以及电子设备
CN109040622B (zh) * 2018-08-22 2020-07-31 中国电子科技集团公司第四十四研究所 Cmos图像传感器曝光时序控制方法
CN109040623B (zh) * 2018-08-22 2020-07-31 中国电子科技集团公司第四十四研究所 Cmos图像传感器曝光时序控制装置
CN110493535B (zh) * 2019-05-31 2021-09-28 杭州海康威视数字技术股份有限公司 图像采集装置和图像采集的方法
CN112014318A (zh) * 2020-08-25 2020-12-01 深圳大学 一种随机光学重建显微成像系统
CN113286092B (zh) * 2021-04-16 2023-05-02 维沃移动通信（杭州）有限公司 像素处理电路、方法、装置及电子设备

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6855937B2 (en) * 2001-05-18 2005-02-15 Canon Kabushiki Kaisha Image pickup apparatus
FI111417B (fi) * 2001-06-01 2003-07-15 Nokia Corp Digitaalikameran salamavalon ohjaus
CN1169352C (zh) 2001-12-28 2004-09-29 富士胶片株式会社 固体电子图像感应装置及其控制方法
US7800675B2 (en) * 2004-08-25 2010-09-21 Aptina Imaging Corporation Method of operating a storage gate pixel
JP4325557B2 (ja) * 2005-01-04 2009-09-02 ソニー株式会社 撮像装置および撮像方法
JP2007028337A (ja) * 2005-07-19 2007-02-01 Canon Inc 撮像装置及びその制御方法及びプログラム及び記憶媒体
JP4695541B2 (ja) * 2006-04-28 2011-06-08 三星電子株式会社 撮像装置
WO2008152647A2 (en) 2007-06-15 2008-12-18 Ben Gurion University Of The Negev Research And Development Authority Three-dimensional imaging method and apparatus
JP2009081808A (ja) * 2007-09-27 2009-04-16 Fujifilm Corp 撮影制御装置、撮影制御方法、撮影制御プログラム、および撮影装置
JP2009100381A (ja) * 2007-10-18 2009-05-07 Sony Corp 固体撮像素子およびその駆動方法、並びにカメラシステム
JP5058840B2 (ja) * 2008-02-05 2012-10-24 オリンパスイメージング株式会社 撮像装置
JP5144451B2 (ja) * 2008-09-30 2013-02-13 富士フイルム株式会社 撮像装置およびフラッシュの制御方法
CN201440274U (zh) * 2009-07-22 2010-04-21 深圳泰山在线科技有限公司 一种目标检测设备及其使用的图像采集装置

Also Published As

Publication number Publication date
CN102907084A (zh) 2013-01-30
US20130076952A1 (en) 2013-03-28
AU2010354500A1 (en) 2013-01-10
WO2011150574A1 (zh) 2011-12-08
EP2579567A1 (en) 2013-04-10
CN102907084B (zh) 2015-09-23
US8964083B2 (en) 2015-02-24
EP2579567A4 (en) 2013-12-04
AU2010354500B2 (en) 2014-07-03
JP2013531420A (ja) 2013-08-01

Similar Documents

Publication Publication Date Title
JP5655137B2 (ja) Ｃｍｏｓ画像センサーの露光方法
US9204056B2 (en) Image pickup apparatus, image pickup apparatus control method, and program
JP4998232B2 (ja) 撮像装置及び映像記録装置
JP4574185B2 (ja) 撮像装置及び閃光装置の制御方法
JP4377013B2 (ja) 固体撮像装置及び固体撮像素子
CN103916575B (zh) 摄像元件、摄像设备及其控制方法
CN108419032B (zh) 支持多种曝光模式的hdr图像传感器像素结构及成像系统
CN111602386B (zh) 缓解运动图片的led频闪
KR20100079831A (ko) 디지털 카메라 및 그 제어방법
JP3542312B2 (ja) 電子的撮像装置
CN108495065A (zh) 一种帧转移型面阵ccd的驱动时序控制方法
US11412168B2 (en) Imaging element and method of controlling the same, and imaging device
TWI835535B (zh) 影像感測裝置
CN105791792A (zh) 一种基于模拟退火算法的相机自动白平衡方法
TW202348012A (zh) 影像感測裝置
TWI835536B (zh) 影像感測裝置及其影像感測方法
CN114040132B (zh) 图像传感器及其曝光时序控制方法、系统及介质
CN113784062B (zh) 非连续成像cmos图像传感器稳定图像控制系统及方法
TW202315385A (zh) 影像信號處理器、影像感測裝置以及用於感測影像的方法
JP2022178952A (ja) 撮像装置、およびその制御方法
JP2552500B2 (ja) 撮像装置
CN111193882A (zh) 单帧高动态范围图像传感器的实现方法
JP2009141417A (ja) 撮像素子及び該素子の信号読み出し方法
CN105791791A (zh) 一种基于模拟退火算法的相机自动白平衡方法
CN105676882A (zh) 仿螳螂虾复眼的图像信息采集系统

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131210

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140307

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140314

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140410

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140507

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140908

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141003

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20141014

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141111

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141121

R150 Certificate of patent or registration of utility model

Ref document number: 5655137

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250