TW201523843A - 具有單光子崩潰二極體、光子計數器及鬼影減量之低功率成像系統 - Google Patents

具有單光子崩潰二極體、光子計數器及鬼影減量之低功率成像系統 Download PDF

Info

Publication number
TW201523843A
TW201523843A TW103126075A TW103126075A TW201523843A TW 201523843 A TW201523843 A TW 201523843A TW 103126075 A TW103126075 A TW 103126075A TW 103126075 A TW103126075 A TW 103126075A TW 201523843 A TW201523843 A TW 201523843A
Authority
TW
Taiwan
Prior art keywords
pixel
photon
exposure time
count
pixel array
Prior art date
Application number
TW103126075A
Other languages
English (en)
Other versions
TWI541985B (zh
Inventor
Tie-Jun Dai
Rui Wang
Original Assignee
Omnivision Tech Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omnivision Tech Inc filed Critical Omnivision Tech Inc
Publication of TW201523843A publication Critical patent/TW201523843A/zh
Application granted granted Critical
Publication of TWI541985B publication Critical patent/TWI541985B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75Circuitry for providing, modifying or processing image signals from the pixel array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time
    • H04N25/533Control of the integration time by using differing integration times for different sensor regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/581Control of the dynamic range involving two or more exposures acquired simultaneously
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/581Control of the dynamic range involving two or more exposures acquired simultaneously
    • H04N25/583Control of the dynamic range involving two or more exposures acquired simultaneously with different integration times
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/587Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H04N25/772Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising A/D, V/T, V/F, I/T or I/F converters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Photometry And Measurement Of Optical Pulse Characteristics (AREA)

Abstract

本發明揭示一種包含一像素陣列之成像系統,該像素陣列包含複數個像素。該等像素中之每一者包含經耦合以回應於入射光而偵測光子之一單光子崩潰二極體(SPAD)。包含於讀出電路中之一光子計數器經耦合至每一像素,以對由每一像素偵測之光子之一數目進行計數。該光子計數器經耦合以在針對每一像素達到一臨限光子計數時停止對每一像素中之光子進行計數。控制電路經耦合至該像素陣列以控制該像素陣列之操作。該控制電路包含經耦合以對在每一像素偵測到該臨限光子計數之前逝去之曝光時間之一數目進行計數之一曝光時間計數器。針對該像素陣列之每一像素,組合各別曝光時間計數與光子計數。

Description

具有單光子崩潰二極體、光子計數器及鬼影減量之低功率成像系統
本發明一般而言係關於光電偵測器,且更具體而言,本發明針對於包含光子計數器之成像系統。
一矽光電倍增器(SiPM)係能夠偵測一低強度單一者(低至一單一光子)之一種類型之光電偵測器。一SiPM裝置可使用一數位計數器來對入射光子進行計數直至達到入射光子之一臨限值計數為止。SiPM係由蓋格(Geiger)模式光子偵測單元(諸如製作於一矽基板中之單光子崩潰二極體(SPAD))之一陣列構成之半導體光敏裝置。蓋格模式光子偵測單元具有經偏置超出其擊穿電壓使得每一電子-電洞對可觸發轉變為一離散電脈衝之一崩潰倍增程序之一p-n接面。一單一光子或多個光子將不改變來自一光子偵測單元之所得脈衝之振幅,此乃因觸發一崩潰倍增程序僅需要一單一光子。主動地或被動地使崩潰猝滅,此重設光子偵測單元,使得其可偵測進一步之入射光子。
數位計數器之位元計數之一增加將增加入射光子之準確度及/或計數,然而,此亦將增加由SiPM需要之矽面積及功率消耗。需要一大矽面積之一計數器可阻止電路至一量測裝置中之一實施。
100A‧‧‧像素/像素單元
100N‧‧‧像素/像素單元
102‧‧‧單光子崩潰二極體
104‧‧‧淬滅元件
106‧‧‧輸出信號
108‧‧‧第一晶片/晶片
110‧‧‧第二晶片
116‧‧‧讀出電路
150‧‧‧光子計數器
206‧‧‧輸出信號
212‧‧‧成像系統
214‧‧‧像素陣列
216‧‧‧讀出電路
218‧‧‧控制電路
220‧‧‧功能邏輯
248‧‧‧曝光時間計數器
250‧‧‧光子計數器
252‧‧‧曝光時間/曝光時間計數
254‧‧‧光子計數
256‧‧‧像素圖框值/像素子圖框值
hv‧‧‧光子
MQ‧‧‧淬滅元件
VOUT‧‧‧輸出信號
R1-Ry‧‧‧列
C1-Cx‧‧‧行
P1-Pn‧‧‧像素/像素單元
參考以下各圖闡述本發明之非限制性及非詳盡實施例,其中在所有各視圖中相似參考編號指代相似部件,除非另有規定。
圖1係展示根據本發明之教示包含耦合至光子計數器之單光子崩潰二極體(SPAD)之實例性像素之一示意圖。
圖2係展示根據本發明之教示包含具有耦合至曝光時間計數器及光子計數器之SPAD之一實例性像素陣列之一實例性成像系統之一圖式。
圖3係圖解說明根據本發明之教示用以操作包含具有耦合至曝光時間計數器及光子計數器之SPAD之一像素陣列之一成像系統之一項實例之處理之一實例性流程圖。
圖4係圖解說明根據本發明之教示用以操作包含具有耦合至曝光時間計數器及光子計數器之SPAD之一像素陣列之一成像系統之一項實例之處理之另一實例性流程圖。
在圖式之所有數個視圖中,對應參考字符指示對應組件。熟習此項技術者將瞭解,圖中之元件係為簡單及清晰起見而圖解說明的,且未必按比例繪製。舉例而言,為了有助於改良對本發明之各種實施例之理解,圖中之元件中之某些元件之尺寸可能相對於其他元件放大。此外,通常未繪示在一商業上可行之實施例中有用或必需之常見而眾所周知之元件以便促進對本發明之此等各種實施例之一較不受阻擋之觀察。
在以下闡述中,陳述眾多特定細節以便提供對本發明之一透徹理解。然而,熟習此項技術者將明瞭,不需要採用該特定細節來實踐本發明。在其他實例中,未詳細闡述眾所周知之材料或方法,以避免模糊本發明。
在本說明書通篇中,對「一項實施例」、「一實施例」、「一項實例」或「一實例」之提及意指結合該實施例或實例所闡述之一特定特徵、結構或特性係包含於本發明之至少一項實施例中。因此,在本說明書通篇之各個位置中,片語「在一項實施例中」、「在一實施例中」、「一項實例」或「一實例」之出現未必全部指代同一實施例或實例。此外,在一或多項實施例或實例中,可以任何適合組合及/或子組合之形式來組合特定特徵、結構或特性。特定特徵、結構或特性可包含於一積體電路、一電子電路、一組合邏輯電路,或提供所闡述之功能性的其他適合組件中。另外,應瞭解,隨本文提供之各圖係用於向熟習此項技術者解釋之目的且圖式未必按比例繪製。
根據本發明之教示的實例闡述一種包含具有帶有光子計數器之單光子崩潰二極體(SPAD)之一像素陣列的低功率成像系統。如將論述,利用具有根據本發明之教示之光子計數器之SPAD之一成像系統使得可同時進行一全域快門及高動態範圍(HDR)成像兩者。在一項實例中,可堆疊包含於成像系統中之晶片,以使得大量生產更可行。在各種實例中,與利用SPAD光子計數器之其他HDR應用相比,實質上減少了功率消耗。
為了圖解說明,假定一SPAD輸出負載電容器具有10fF之一電容及3V之一輸出擺幅。對於藉助一20位元計數器及60MHz之一最大計數器速率實現之60fps速度,對應電流將係1.8μA。進一步假定一SPAD以20V操作,則最大功率將係每像素36μW。因此,對於一1百萬像素影像感測器,對應功率消耗將係36W,此對於大量生產而言大得不可接受,且亦將耗散過量之熱以致為不實際的且實質上使SPAD效能降級。
圖1係展示根據本發明之教示可用於提供一低功率成像系統之耦合至光子計數器之實例性像素之一示意圖。特定而言,圖1中所繪示 之實例展示包含於一像素陣列中之複數個像素P1 100A至Pn 100N。在一項實例中,像素P1 100A至Pn 100N彼此實質上類似。如所繪示之實例中所展示,像素P1 100A包含耦合至一猝滅元件MQ 104之一SPAD 102。在該實例中,一輸出信號VOUT 106指示何時偵測到來自入射光之一光子hv。藉助讀出電路116讀出輸出信號VOUT 106,在所圖解說明之實例中,讀出電路116包含可對由每一像素P1 100A至Pn 100N偵測之光子之數目進行計數之光子計數器150。
圖1中所展示之實例中,應瞭解,包含複數個像素P1 100A至Pn 100N之像素陣列包含於一第一晶片108中,且包含光子計數器150之讀出電路116包含於一第二晶片110中。在該實例中,第一晶片108與第二晶片110堆疊至一起。應瞭解,根據本發明之教示,藉由將複數個像素P1 100A至Pn 100N包含於與第二晶片110中之讀出電路分離之一晶片108上,包含複數個像素P1 100A至Pn 100N及讀出電路116之光子計數器150之一成像系統之大量生產係較實際的。
圖2係展示根據本發明之教示包含具有耦合至曝光時間計數器及光子計數器之SPAD之一實例性像素陣列之一成像系統212之一圖式。特定而言,如所繪示之實例中所展示,成像系統212包含耦合至控制電路218及讀出電路216之像素陣列214,讀出電路216包含耦合至功能邏輯220之光子計數器250。在一項實例中,像素陣列214係影像感測器像素(例如,像素P1、P2、P3、…、Pn)之一個二維(2D)陣列。應注意,圖2之像素陣列214中之像素P1、P2、…Pn可係圖1之像素單元P1 100A至Pn 100N之實例,且圖2之讀出電路216及光子計數器250可係圖1之讀出電路116及光子計數器150之實例,且下文所提及之類似命名及編號之元件類似於如上文所闡述而耦合及發揮作用。如所圖解說明,像素P1…Pn經配置成複數個列(例如,列R1至Ry)及複數個行(例如,行C1至Cx)以獲取一人、地點、物件等之影像資料,然後可使用 該影像資料再現該人、地點、物件等之一2D影像。
在一項實例中,在光子計數器250已對已由每一像素單元P1、P2、P3、…、Pn偵測之光子進行計數之後,可然後將由讀出電路216透過輸出信號206讀出之光子計數影像資料傳送至功能邏輯220。功能邏輯220可簡單地儲存該影像資料或甚至藉由應用影像後效應(例如,剪裁、旋轉、移除紅眼、調整亮度、調整對比度或其他)來操縱該影像資料。在一項實例中,控制電路218耦合至像素陣列214以控制像素陣列214之操作特性。在一項實例中,控制電路218經耦合以產生用於控制每一像素單元之光子計數及影像獲取之一全域快門信號。在該實例中,該全域快門信號同時啟用像素陣列214內之所有像素P1、P2、P3、…Pn以使像素陣列214中之所有像素能夠同時開始對在一單一圖框期間偵測之入射光子之數目進行計數。
如所繪示之實例中所展示,根據本發明之教示,控制電路218亦包含曝光時間計數器248,如下文將進一步詳細地闡述,曝光時間計數器248用於對光子計數器250經啟用以對在像素陣列214之一圖框或子圖框期間在像素陣列214中之每一像素P1、P2、P3、…Pn中偵測之光子進行計數之曝光時間進行計數。在一項實例中,根據本發明之教示,在已針對像素陣列214之每一像素P1、P2、P3、…Pn對光子進行計數之後,組合像素P1、P2、P3、…Pn之各別曝光時間252及光子計數254以形成一像素圖框值256或在另一實例中形成一像素子圖框值。
為了圖解說明,圖3係圖解說明根據本發明之教示經執行以操作一成像系統之一項實例(例如圖2之成像系統212,其包含具有帶有耦合至曝光時間計數器248及光子計數器250之SPAD之像素之像素陣列214)之處理之一實例性流程圖322。
圖3之實例中所展示,處理在程序方塊324處開始,其中將光子計數器初始化為0且將曝光時間計數器初始化為1。在程序方塊326 處,將像素曝光於入射光達一單位時間×2(T-1)。在一項實例中,在判定像素圖框值時的單位時間可係(舉例而言)16μs。在決策方塊328處,判定像素P1、P2、P3、…Pn之各別光子計數器中之任一者是否已達到一臨限光子計數。在一項實例中,於判定像素圖框值時的臨限光子計數可係(舉例而言)512個光子。若光子計數器尚未達到臨限光子計數(例如,512個光子),則處理繼續至決策方塊334。然而,若一像素之一各別光子計數器已達到臨限光子計數(例如,512個光子),則程序方塊330展示停止或停用對彼像素之計數,且程序方塊332展示接著保存已達到臨限光子計數(例如,512個光子)之彼像素的逝去曝光時間計數。
決策方塊334展示接下來判定一曝光時間計數器T是否已達到一臨限曝光時間計數。在一項實例中,針對像素陣列之圖框,臨限曝光時間計數係T=11,在該實例中,其對應於總共高達16ms(即,16μs×2(11-1))之曝光時間。若曝光時間計數器T尚未達到臨限值曝光時間(例如,T=11),則處理繼續至程序方塊336,其中針對尚未達到臨限光子計數(例如,512個光子)之像素,使曝光時間計數器遞增。一旦在程序方塊336中使曝光時間計數器T遞增,處理便接著迴圈回至程序方塊326,其中將像素進一步曝光於入射光達額外曝光時間。在所圖解說明之實例中,每一額外曝光將針對彼像素逝去的總曝光時間增加至2倍。
在每一曝光時間期間,對光子之計數繼續如上文所闡述而循環直至在決策方塊334中判定曝光時間計數器已達到臨限曝光時間計數(例如,T=11)為止。一旦已達到臨限曝光時間計數(例如,T=11),程序方塊338便展示針對尚未達到臨限光子計數(例如,512固光子)之每一像素保存臨限曝光時間計數T(例如,T=11)。程序方塊340展示針對每一像素,組合各別曝光時間計數T與光子計數。如圖2中之實例中 所展示,根據本發明之教示,組合各別曝光時間計數T(1…n)252與各別光子計數(1…n)254以形成一圖框之每一像素之一像素圖框值(1…n)256。
可如下圖解說明執行流程圖322之處理步驟之一實例。假定最初將像素曝光於入射光達16μs(即,16μs×2(1-1))之單位時間,則若某一像素計數器在此曝光時間期間計數至512個光子之臨限光子計數,則停止彼像素中之計數且針對彼像素保存T=1(4位元二進制0001)之曝光時間計數。其他像素中之計數將繼續。
假定曝光時間計數器花費32μs(即,16μs×2(2-1))遞增至T=2,則若一像素計數器計數至512個光子之臨限光子計數,則停止彼像素中之計數且針對彼像素保存T=2(4位元二進制0010)之曝光時間計數。其他像素中之計數將繼續。
假定曝光時間計數器花費64μs(即,16μs×2(3-1))遞增至T=3,則若一像素計數器計數至512個光子之臨限光子計數,則停止彼像素中之計數且針對彼像素保存T=3(4位元二進制0011)之曝光時間計數。其他像素中之計數將繼續。
繼續該實例,假定曝光時間計數器花費8ms(即,16μs×2(10-1))遞增至T=10,則若一像素計數器計數至512個光子之臨限光子計數,則停止彼像素中之計數且針對彼像素保存T=10(4位元二進制1010)之曝光時間計數。其他像素中之計數將繼續。
當16ms(即,16μs×2(11-1))已逝去時,停止計數且針對彼像素保存T=11(4位元二進制1011)之曝光時間計數。
最終,針對每一像素組合各別曝光時間計數T與光子計數。在一項實例中,組合各別曝光時間計數T與光子計數以形成像素陣列之每一像素之對應像素圖框值。
應瞭解,在上文所闡述之實例中,在4位元二進制曝光時間計數 器T值0000至1011之情形下,在該實例中利用總共11個曝光時間值來將動態範圍增加10個位元。另外,一10位元計數器亦用於對光子進行計數最高達512之臨限光子計數,此提供一10位元計數器動態範圍。因此,根據本發明之教示,針對像素圖框值組合曝光時間計數器之4個位元與光子計數器之10個位元藉助僅14個位元提供一20位元範圍。
與先前所論述之具有60MHz之一最大計數器速率且為了操作消耗36W之1百萬像素實例相比,目前所闡述之實例仍可提供具有20位元動態範圍之一60fps影像感測器,但消耗36mW之實質上較少功率而非36W,此乃因根據本發明之教示之光子計數器計數最高達10位元值且因此僅需要60KHz之一最大計數器速率。因此,根據本發明之教示,功率消耗減少至1/210或1/1000。
在其他實例中,應瞭解,可在計數器之末端處添加一額外鎖存器以防止計數器溢位。在又一實例中,應瞭解,一12位元計數器可用於光子計數器以提供額外動態餘量。
圖4係圖解說明根據本發明之教示用以操作包含耦合至曝光時間計數器及光子計數器之SPAD之一像素陣列之一項實例之處理之另一實例性流程圖422。應瞭解,圖4之流程圖422與圖3之流程圖322共用諸多相似性,且類似編號之元件及處理方塊可執行類似功能。圖4之實例性流程圖422圖解說明根據本發明之教示可由一成像系統(例如圖2之成像系統212,其包含具有帶有耦合至曝光時間計數器248及光子計數器250之SPAD之像素之像素陣列214)執行以減少重影之處理。
特定而言,可在一物件快速移動時發生一不期望之鬼影,但曝光時間針對像素陣列中之不同像素而不同。舉例而言,如在上文於圖3中所論述之實例中所闡述,像素陣列之每一像素可具有一不同曝光時間。此可導致快速移動之物件之一鬼影。在於圖4之流程圖422中所闡述之實例中,將每一圖框之曝光劃分成複數個子圖框。舉例而言, 在圖4中所闡述之實例中,將每一圖框劃分成16個像素子圖框值。藉由將曝光劃分成16個部分或子圖框,總體曝光時間可較短且因此跨越整個圖框較均勻地分佈。根據本發明之教示,可然後藉由對所有16個子圖框求平均以判定像素陣列中之像素中之每一者之平均像素圖框值來構造最終影像。
為了圖解說明,如圖4之實例中所展示,處理在程序方塊424處開始,其中將光子計數器初始化為0,將曝光時間計數器初始化為1,且將子圖框計數器初始化為1。在程序方塊426處,將像素曝光於入射光達一單位時間×2(T-1)。在一項實例中,在判定像素子圖框值時之單位時間可係(舉例而言)1μs。在決策方塊428處,判定像素P1、P2、P3、…Pn之各別光子計數器中之任一者是否已達到一臨限光子計數。在一項實例中,在判定像素子圖框值時之子圖框臨限光子計數可係(舉例而言)32個光子。若光子計數器尚未達到子圖框臨限光子計數(例如,32個光子),則處理繼續至決策方塊434。然而,若一像素之一各別光子計數器已達到子圖框臨限光子計數(例如,32個光子),則程序方塊430展示停止或停用針對彼像素之計數,且程序方塊432展示然後保存已達到子圖框臨限光子計數(例如,32個光子)之彼像素之逝去曝光時間計數。
決策方塊434展示接下來判定一曝光時間計數器T已達到一子圖框臨限曝光時間計數。在一項實例中,子圖框臨限曝光時間計數針對像素陣列之子圖框係T=11,在該實例中,其對應於總共1ms(即,1μs×2(11-1))之曝光時間。若曝光時間計數器T尚未達到子圖框臨限值曝光時間(例如,T=11),則處理繼續至程序方塊436,其中針對尚未達到子圖框臨限光子計數(例如,32個光子)之像素使曝光時間計數器遞增。一旦在程序方塊436中使曝光時間計數器T遞增,處理便然後迴圈回至程序方塊426,其中將像素進一步曝光於入射光達額外曝光時 間。在所圖解說明之實例中,每一額外曝光將針對彼像素逝去之總曝光時間增加至2倍。
在每一曝光時間期間對光子之計數繼續如上文所闡述而循環直至在決策方塊434中判定曝光時間計數器已達到臨限曝光時間計數(例如,T=11)為止。一旦已達到子圖框臨限曝光時間計數(例如,T=11),程序方塊438便展示針對尚未達到子圖框臨限光子計數(例如,32個光子)之每一像素保存臨限曝光時間計數T(例如,T=11)。程序方塊440展示針對每一像素組合各別曝光時間計數T與光子計數。類似於圖2中所闡述之實例,根據本發明之教示,組合各別曝光時間計數T(1…n)252與各別光子計數(1…n)254以形成一子圖框之每一像素之一像素子圖框值(1…n)256。
決策方塊442展示判定圖框中是否存在任何更多待處理之子圖框。若否,則程序方塊444展示使子圖框值遞增且然後處理迴圈回至程序方塊426。然而,若已處理所有子圖框,則程序方塊446展示然後對圖框之所有像素子圖框值求平均以判定像素陣列之一平均像素圖框值。在一項實例中,可將所有子圖框一起求和以獲得像素陣列之一經求和像素圖框值。
可如下圖解說明執行流程圖422之處理步驟之一實例。假定最初將像素曝光於入射光達1μs(即,1μs×2(1-1))之單位時間,則若某一像素計數器在此曝光時間期間計數至32個光子之臨限光子計數,則停止彼像素中之計數且針對彼像素保存T=1(4位元二進制0001)之曝光時間計數。其他像素中之計數將繼續。
假定曝光時間計數器花費2μs(即,1μs×2(2-1))遞增至T=2,則若一像素計數器計數至32個光子之臨限光子計數,則停止彼像素中之計數且針對彼像素保存T=2(4位元二進制0010)之曝光時間計數。其他像素中之計數將繼續。
假定曝光時間計數器花費4μs(即,1μs×2(3-1))遞增至T=3,則若一像素計數器計數至32個光子之臨限光子計數,則停止彼像素中之計數且針對彼像素保存T=3(4位元二進制0011)之曝光時間計數。其他像素中之計數將繼續。
繼續該實例,假定曝光時間計數器花費512μs(即,1μs×2(10-1))遞增至T=10,則若一像素計數器計數至32個光子之臨限光子計數,則停止彼像素中之計數且針對彼像素保存T=10(4位元二進制1010)之曝光時間計數。其他像素中之計數將繼續。
當1ms(即,1μs×2(11-1))已逝去時,停止計數且針對彼像素保存T=11(4位元二進制1011)之曝光時間計數。
最終,針對每一像素組合各別曝光時間計數T與光子計數。在一項實例中,組合各別曝光時間計數T與光子計數以形成像素陣列之每一像素之對應像素子圖框值。根據本發明之教示,在已處理圖框之所有16個子圖框之後,對所有16個像素子圖框值求平均以判定圖框之一平均像素圖框值。如先前所提及,根據本發明之教示,平均或經求和像素圖框值將減少鬼影。
包含發明摘要中所闡述內容之本發明之所圖解說明實例之以上闡述並非意欲為窮盡性或限制於所揭示之精確形式。儘管出於說明性目的而在本文中闡述本發明之特定實施例及實例,但可在不背離本發明之較寬廣精神及範疇之情況下做出各種等效修改。
可根據以上詳細闡述對本發明之實例做出此等修改。隨附申請專利範圍中所使用之術語不應理解為將本發明限制於說明書及申請專利範圍中所揭示之特定實施例。相反,範圍將完全由申請專利範圍來判定,該等申請專利範圍將根據所創建之請求項解釋原則來加以理解。因此,應將本說明書及圖視為說明性而非限制性。
206‧‧‧輸出信號
212‧‧‧成像系統
214‧‧‧像素陣列
216‧‧‧讀出電路
218‧‧‧控制電路
220‧‧‧功能邏輯
248‧‧‧曝光時間計數器
250‧‧‧光子計數器
252‧‧‧曝光時間/曝光時間計數
254‧‧‧光子計數
256‧‧‧像素圖框值/像素子圖框值
R1-Ry‧‧‧列
C1-Cx‧‧‧行
P1-Pn‧‧‧像素/像素單元

Claims (18)

  1. 一種成像系統,其包括:一像素陣列,其包含複數個像素,其中該等像素中之每一者包含經耦合以回應於入射光而偵測光子之一單光子崩潰二極體(SPAD);一光子計數器,其包含於讀出電路中,經耦合至每一像素以對由每一像素偵測之光子之一數目進行計數,其中該光子計數器經耦合以在針對每一像素達到一臨限光子計數時,停止對每一像素中之光子進行計數;控制電路,其經耦合至該像素陣列以控制該像素陣列之操作,該控制電路包含經耦合以對在每一像素偵測到該臨限光子計數之前逝去之一曝光時間進行計數之一曝光時間計數器,其中針對該像素陣列之每一像素,組合各別曝光時間計數與光子計數。
  2. 如請求項1之成像系統,進一步包括經耦合至該讀出電路以儲存自該複數個像素讀出之影像資料的功能邏輯。
  3. 如請求項1之成像系統,其中每一像素進一步包含經耦合至每一SPAD之一猝滅元件。
  4. 如請求項1之成像系統,該像素陣列中之該複數個像素經配置成複數個列及複數個行。
  5. 如請求項1之成像系統,其中該像素陣列係包含於一第一晶片中,且其中該讀出電路係包含於一第二晶片中,其中該等第一及第二晶片堆疊在一起。
  6. 如請求項1之成像系統,其中針對該像素陣列之每一像素,組合該等各別曝光時間計數與光子計數以判定該像素陣列之每一像 素之像素圖框值。
  7. 如請求項1之成像系統,其中針對該像素陣列之每一像素,組合該等各別曝光時間計數與光子計數以判定該像素陣列之每一像素之像素子圖框值。
  8. 如請求項7之成像系統,其中一平均像素圖框值係該像素陣列之每一像素之一圖框之所有像素子圖框值之一平均值。
  9. 如請求項1之成像系統,其中每次使該曝光時間計數器遞增時,逝去之該曝光時間增加至2倍。
  10. 一種操作一像素陣列之方法,其包括:將一像素陣列之像素曝光於入射光;對由每一像素偵測之光子進行計數;停止對達到一臨限光子計數之像素中之光子的計數;保存已達到該臨限光子計數之像素之一逝去曝光時間計數;保存在一曝光時間計數器已達到一臨限曝光時間計數之後尚未達到該臨限光子計數之像素之該臨限曝光時間計數;及針對該像素陣列之每一像素,組合各別曝光時間計數與光子計數。
  11. 如請求項10之方法,進一步包括在尚未達到該臨限光子計數之像素的每一曝光之後,使該曝光時間計數器遞增直至該曝光時間計數器達到該臨限曝光時間計數為止。
  12. 如請求項11之方法,其中每次使該逝去曝光時間計數遞增時,逝去之一曝光時間增加至2倍。
  13. 如請求項10之方法,進一步包括在對該等光子進行計數之前初始化光子計數器。
  14. 如請求項10之方法,進一步包括在對該等光子進行計數之前初始化曝光時間計數器。
  15. 如請求項10之方法,其中針對該像素陣列之每一像素,組合該等各別曝光時間計數與光子計數,以判定該像素陣列之每一像素之像素圖框值。
  16. 如請求項10之方法,進一步包括在對該等光子進行計數之前初始化一子圖框計數器。
  17. 如請求項10之方法,其中針對該像素陣列之每一像素,組合該等各別曝光時間計數與光子計數,以判定該像素陣列之每一像素之像素子圖框值。
  18. 如請求項17之方法,進一步包括對該像素陣列之每一像素之一圖框之所有像素子圖框值求平均,以判定該像素陣列之每一像素之一平均像素圖框值。
TW103126075A 2013-12-09 2014-07-30 具有單光子崩潰二極體、光子計數器及鬼影減量之低功率成像系統 TWI541985B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US14/100,941 US9210350B2 (en) 2013-12-09 2013-12-09 Low power imaging system with single photon avalanche diode photon counters and ghost image reduction

Publications (2)

Publication Number Publication Date
TW201523843A true TW201523843A (zh) 2015-06-16
TWI541985B TWI541985B (zh) 2016-07-11

Family

ID=53272418

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103126075A TWI541985B (zh) 2013-12-09 2014-07-30 具有單光子崩潰二極體、光子計數器及鬼影減量之低功率成像系統

Country Status (4)

Country Link
US (1) US9210350B2 (zh)
CN (1) CN104702861B (zh)
HK (1) HK1207224A1 (zh)
TW (1) TWI541985B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11330202B2 (en) 2018-02-02 2022-05-10 Sony Semiconductor Solutions Corporation Solid-state image sensor, imaging device, and method of controlling solid-state image sensor
TWI774106B (zh) * 2015-11-12 2022-08-11 美商艾馬克科技公司 半導體封裝及其製造方法

Families Citing this family (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9819144B2 (en) 2015-05-14 2017-11-14 Apple Inc. High-efficiency vertical emitters with improved heat sinking
US10034375B2 (en) 2015-05-21 2018-07-24 Apple Inc. Circuit substrate with embedded heat sink
US9735539B2 (en) 2015-07-20 2017-08-15 Apple Inc. VCSEL structure with embedded heat sink
US10620300B2 (en) 2015-08-20 2020-04-14 Apple Inc. SPAD array with gated histogram construction
CN105100654B (zh) * 2015-09-18 2018-02-23 中国科学院高能物理研究所 一种像素单元电路及像素读出芯片
CN105450948B (zh) * 2015-12-15 2018-06-26 中国科学院西安光学精密机械研究所 一种电子轰击固态光电倍增管式微光数字图像传感器
US10324171B2 (en) 2015-12-20 2019-06-18 Apple Inc. Light detection and ranging sensor
US9997551B2 (en) 2015-12-20 2018-06-12 Apple Inc. Spad array with pixel-level bias control
CN105634619A (zh) * 2016-01-25 2016-06-01 中国人民解放军信息工程大学 一种水下通信的接收端设备及系统
CN105929437B (zh) * 2016-06-18 2018-12-04 武汉京邦科技有限公司 一种硅光电倍增器的片上读出系统
JP2018191230A (ja) * 2017-05-11 2018-11-29 ソニーセミコンダクタソリューションズ株式会社 撮像素子及びその駆動方法、並びに、電子機器
US10830879B2 (en) 2017-06-29 2020-11-10 Apple Inc. Time-of-flight depth mapping with parallax compensation
CN107449516B (zh) * 2017-07-06 2019-07-23 东南大学 一种自适应探测模式的光子计数线阵读出电路及方法
US10677899B2 (en) 2017-08-07 2020-06-09 Waymo Llc Aggregating non-imaging SPAD architecture for full digital monolithic, frame averaging receivers
CN107422392B (zh) * 2017-08-08 2019-03-08 中国科学院西安光学精密机械研究所 一种基于单光子探测的绕角定位与追踪系统及方法
US10581521B2 (en) 2017-08-30 2020-03-03 Massachusetts Institute Of Technology Dual-mode imaging receiver
US10955552B2 (en) 2017-09-27 2021-03-23 Apple Inc. Waveform design for a LiDAR system with closely-spaced pulses
JP7132799B2 (ja) * 2017-12-07 2022-09-07 キヤノン株式会社 撮像素子、撮像装置及び撮像方法
JP7062430B2 (ja) 2017-12-15 2022-05-06 キヤノン株式会社 撮像素子、撮像装置および画像処理方法
EP3704510B1 (en) 2017-12-18 2022-10-05 Apple Inc. Time-of-flight sensing using an addressable array of emitters
US11622086B2 (en) * 2018-02-02 2023-04-04 Sony Semiconductor Solutions Corporation Solid-state image sensor, imaging device, and method of controlling solid-state image sensor
US10616512B2 (en) 2018-07-27 2020-04-07 Wisconsin Alumni Research Foundation Systems, methods, and media for high dynamic range imaging using dead-time-limited single photon detectors
JP7117535B2 (ja) * 2018-09-06 2022-08-15 パナソニックIpマネジメント株式会社 固体撮像素子及び撮像システム
CN108871596B (zh) * 2018-09-10 2023-09-15 湖北京邦科技有限公司 成像装置和包括该成像装置的成像系统
EP3881098A4 (en) * 2019-01-04 2022-08-31 Sense Photonics, Inc. HIGH DYNAMIC RANGE DIRECT TIME OF FLIGHT SENSOR WITH EFFECTIVE SIGNAL DEPENDENT READ RATE
CN113330328A (zh) 2019-02-11 2021-08-31 苹果公司 使用脉冲束稀疏阵列的深度感测
JP7374174B2 (ja) 2019-03-07 2023-11-06 ソニーセミコンダクタソリューションズ株式会社 受光装置
US11500094B2 (en) 2019-06-10 2022-11-15 Apple Inc. Selection of pulse repetition intervals for sensing time of flight
US10881028B1 (en) 2019-07-03 2020-12-29 Apple Inc. Efficient heat removal from electronic modules
US11555900B1 (en) 2019-07-17 2023-01-17 Apple Inc. LiDAR system with enhanced area coverage
JP7379000B2 (ja) 2019-07-29 2023-11-14 キヤノン株式会社 光電変換装置、光電変換システム、および移動体
US20220264047A1 (en) 2019-08-01 2022-08-18 Ecole Polytechnique Federale De Lausanne (Epfl) Low-power image sensor system with single-photon avalanche diode photodetectors
CN110632639A (zh) * 2019-09-18 2019-12-31 北京格物时代科技发展有限公司 探头、探测器及多像素光子计数器总计数修正方法
CN110943714B (zh) * 2019-11-21 2023-03-31 电子科技大学 带时钟门控的数据读出接口电路
US11733359B2 (en) 2019-12-03 2023-08-22 Apple Inc. Configurable array of single-photon detectors
US11710945B2 (en) 2020-05-25 2023-07-25 Apple Inc. Projection of patterned and flood illumination
US11699715B1 (en) 2020-09-06 2023-07-11 Apple Inc. Flip-chip mounting of optoelectronic chips
EP3989535A1 (en) 2020-10-20 2022-04-27 Canon Kabushiki Kaisha Photoelectric conversion device, method of controlling photoelectric conversion device, and information processing apparatus
CN112558097A (zh) * 2020-11-23 2021-03-26 Oppo(重庆)智能科技有限公司 电子装置、电子装置的控制方法、及计算机可读存储介质
US11563908B2 (en) * 2021-02-22 2023-01-24 Microsoft Technology Licensing, Llc Image acquisition techniques with reduced noise using single photon avalanche diodes
CN113538217B (zh) * 2021-06-21 2022-09-16 天津大学 应用于单比特量子图像传感器的最佳阈值图像重构方法
JP2023004679A (ja) * 2021-06-28 2023-01-17 キヤノン株式会社 撮像装置
US11681028B2 (en) 2021-07-18 2023-06-20 Apple Inc. Close-range measurement of time of flight using parallax shift
JP2023028992A (ja) 2021-08-20 2023-03-03 キヤノン株式会社 撮像装置およびその制御方法
JP2023032283A (ja) 2021-08-26 2023-03-09 キヤノン株式会社 光電変換装置、撮像装置、制御方法、及びコンピュータプログラム
JP2023032298A (ja) 2021-08-26 2023-03-09 キヤノン株式会社 光電変換装置、撮像装置、制御方法、及びコンピュータプログラム
US11539895B1 (en) * 2021-09-27 2022-12-27 Wisconsin Alumni Research Foundation Systems, methods, and media for motion adaptive imaging using single-photon image sensor data
WO2023069165A1 (en) * 2021-10-19 2023-04-27 Microsoft Technology Licensing, Llc. Systems and methods for selectively modifying gating rate in single photon avalanche diodes
KR20230061032A (ko) * 2021-10-28 2023-05-08 삼성전자주식회사 이미지 센서, 영상 획득 장치 및 이를 포함하는 전자 장치
JP2023099398A (ja) * 2022-01-01 2023-07-13 キヤノン株式会社 光電変換装置、撮像システム、光検出システム、および移動体
JP2023118323A (ja) * 2022-02-15 2023-08-25 キヤノン株式会社 固体撮像素子、固体撮像素子の制御方法、プログラム、記憶媒体、及び撮像装置
WO2024078721A1 (en) 2022-10-13 2024-04-18 Ecole Polytechnique Federale De Lausanne (Epfl) Imaging sensor device using an array of single-photon avalanche diode photodetectors

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4748311B2 (ja) * 2005-10-31 2011-08-17 日本電気株式会社 微弱光の光パワー測定方法および装置、それを用いた光通信システム
KR101616056B1 (ko) * 2009-08-19 2016-04-28 삼성전자주식회사 광자 계수 장치 및 방법
TWI559763B (zh) * 2009-10-01 2016-11-21 索尼半導體解決方案公司 影像取得裝置及照相機系統

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI774106B (zh) * 2015-11-12 2022-08-11 美商艾馬克科技公司 半導體封裝及其製造方法
US11330202B2 (en) 2018-02-02 2022-05-10 Sony Semiconductor Solutions Corporation Solid-state image sensor, imaging device, and method of controlling solid-state image sensor

Also Published As

Publication number Publication date
US9210350B2 (en) 2015-12-08
HK1207224A1 (zh) 2016-01-22
CN104702861A (zh) 2015-06-10
US20150163429A1 (en) 2015-06-11
CN104702861B (zh) 2018-02-09
TWI541985B (zh) 2016-07-11

Similar Documents

Publication Publication Date Title
TWI541985B (zh) 具有單光子崩潰二極體、光子計數器及鬼影減量之低功率成像系統
US20200217714A1 (en) Detecting high intensity light in photo sensor
US8716643B2 (en) Single photon counting image sensor and method
US10165209B2 (en) Low-noise, high dynamic-range image sensor
TWI703340B (zh) 適用於遠程飛行時間應用的雙模堆疊式光倍增器
US8859944B2 (en) Coordinated in-pixel light detection method and apparatus
TWI745678B (zh) 相關的飛行時間感測器
TW201735333A (zh) 具有像素級偏壓控制之單光子崩潰二極體陣列
US20130248689A1 (en) Time-delay integration imaging method and apparatus using a high-speed in-pixel analog photon counter
US20120057152A1 (en) High-speed analog photon counter and method
US11159738B2 (en) Imaging devices with single-photon avalanche diodes having sub-exposures for high dynamic range
US9086324B2 (en) Digital photomultiplier detector cell
RU2017117565A (ru) Количественное детектирование вторичных электронов
Berkovich et al. A scalable 20× 20 fully asynchronous SPAD-based imaging sensor with AER readout
Gyongy et al. 256× 256, 100kfps, 61% Fill-factor time-resolved SPAD image sensor for microscopy applications
Vilella et al. Low-noise pixel detectors based on gated Geiger mode avalanche photodiodes
WO2023186513A1 (en) Photon counting detector and photon counting method
Vornicu et al. A CMOS 8× 8 SPAD array for Time-of-Flight measurement and light-spot statistics
Yang et al. A spad array sensor based on breakdown pixel extraction architecture with background readout for scintillation detector
US20230095243A1 (en) Photoelectric conversion device, imaging device, control method, and storage medium
Pozas-Flores et al. Design of a smart SiPM based on focal-plane processing elements for improved spatial resolution in PET
US20230098566A1 (en) Photoelectric conversion device having signal in response to incidence of photon, imaging device, control method, and storage medium
US20220264047A1 (en) Low-power image sensor system with single-photon avalanche diode photodetectors
US10623670B1 (en) Simultaneous multiple well size integration
EP3445040A1 (en) Detecting high intensity light in photo sensor