TWI838375B - 固體攝像元件、攝像裝置及固體攝像元件之控制方法 - Google Patents

固體攝像元件、攝像裝置及固體攝像元件之控制方法 Download PDF

Info

Publication number
TWI838375B
TWI838375B TW108119435A TW108119435A TWI838375B TW I838375 B TWI838375 B TW I838375B TW 108119435 A TW108119435 A TW 108119435A TW 108119435 A TW108119435 A TW 108119435A TW I838375 B TWI838375 B TW I838375B
Authority
TW
Taiwan
Prior art keywords
pixel signal
pixel
unit
solid
circuit
Prior art date
Application number
TW108119435A
Other languages
English (en)
Other versions
TW202001841A (zh
Inventor
北野伸
Original Assignee
日商索尼半導體解決方案公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商索尼半導體解決方案公司 filed Critical 日商索尼半導體解決方案公司
Publication of TW202001841A publication Critical patent/TW202001841A/zh
Application granted granted Critical
Publication of TWI838375B publication Critical patent/TWI838375B/zh

Links

Abstract

本發明之目的在於，於檢測位址事件之固體攝像元件中，提高圖像資料之畫質。 本發明之固體攝像元件係具備光電二極體、像素信號產生部及檢測部。該固體攝像元件中，光電二極體藉由光電轉換產生電子及電洞。像素信號產生部產生對應於電子及電洞之一者之量之電壓的像素信號。檢測部檢測電子及電洞之另一者之變化量是否超過特定之閾值並輸出檢測信號。

Description

固體攝像元件、攝像裝置及固體攝像元件之控制方法
本技術係關於一種固體攝像元件、攝像裝置及固體攝像元件之控制方法。詳細而言，關於檢測亮度之變化量是否超過閾值之固體攝像元件、攝像裝置及固體攝像元件之控制方法。
先前以來，於攝像裝置等中使用與垂直同步信號等同步信號同步拍攝圖像資料之同步型固體攝像元件。該一般之同步型固體攝像元件中，僅可按照同步信號之週期(例如，1/60秒)取得圖像資料。因此，於交通或機器人等相關領域中，難以對應要求更高速之處理之情形。因此，提出按照像素陣列，將該像素之亮度變化量是否超過特定閾值作為位址事件實時檢測的非同步型固體攝像元件(例如，參照專利文獻1)。如此，於每個像素檢測位址事件之固體攝像元件被稱為DVS(Dynamic Vision Sensor：動態視覺感測器)。 [先前技術文獻] [專利文獻]
[專利文獻1]日本專利特表2016-533140號公報
[發明所欲解決之問題]
上述之非同步型固體攝像元件(即DVS)中，可以遠高於同步型固體攝像元件之速度產生圖像資料並輸出。又，該非同步型DVS中，進而追加與非同步型電路共用光電二極體之同步型固體攝像元件內之像素電路，亦可進而產生較同步型更高畫質之圖像資料。然而，於設置有共用光電二極體之非同步型及同步型電路之固體攝像元件中，有難以提高圖像資料之畫質之問題。其原因在於，光電二極體產生電子並傳送之情形時，該電子之一部分傳送至非同步型電路，剩餘者傳送至同步型電路，與僅設置該等電路之一者之情形相比，向各電路傳送之電子之量減少。若擴大光電二極體之面積，則可使電荷量增大而提高畫質，但因安裝面積增大，故而不佳。
本技術係鑒於此種狀況而完成者，其目的在於，於檢測位址事件之固體攝像元件中，提高圖像資料之畫質。 [解決問題之技術手段]
本技術係為消除上述問題點而完成者，其第1態樣係一種固體攝像元件及其控制方法，具備：光電二極體，其藉由光電轉換產生電子及電洞；像素信號產生部，其產生對應於上述電子及上述電洞之一者之量之電壓的像素信號；及檢測部，其檢測上述電子及上述電洞之另一者之變化量是否超過特定之閾值並輸出檢測信號。藉此，具備自電子及電洞之一者產生像素信號，自另一者檢測位址事件之作用。
又，於該第1態樣，亦可為，上述像素信號產生部產生對應於上述電子之量之電壓的上述像素信號，上述檢測部檢測上述電洞之變化量是否超過上述閾值。藉此，具備自電子產生像素信號，自電洞檢測位址事件之作用。
又，於該第1態樣，亦可為，上述光電二極體與上述像素信號產生部之一部分配置於特定之受光晶片，上述像素信號產生部之剩餘者與上述檢測部配置於特定之電路晶片。藉此，具備削減受光晶片及電路晶片各者之電路規模之作用。
又，於該第1態樣，亦可為，上述像素信號產生部具備：像素電路，其產生上述像素信號；及比較電路，其比較上述像素信號與特定之參照信號；上述光電二極體、上述像素電路、及上述比較電路之一部分配置於上述受光晶片，上述比較電路之剩餘者與上述檢測部配置於上述電路晶片。藉此，具備削減受光晶片及電路晶片各者之電路規模之作用。
又，於該第1態樣，上述像素信號產生部可具備：像素電路，其產生上述像素信號；及比較電路，其比較上述像素信號與特定之參照信號；上述光電二極體及上述像素電路配置於上述受光晶片，上述比較電路及上述檢測部配置於上述電路晶片。藉此，具備削減受光晶片及電路晶片各者之電路規模之作用。
又，於該第1態樣，亦可進而具備：驅動部，其於藉由上述檢測部檢測出上述變化量超過上述閾值之主旨之情形時，驅動上述像素信號產生部而產生上述像素信號。藉此，具備僅讀出發生位址事件之像素之像素信號之作用。
又，於該第1態樣，亦可具備：行處理部，其對上述像素信號進行特定之信號處理並輸出；及控制電路，其於特定之曝光期間內，檢測出上述變化量超過上述閾值之主旨之情形時，控制上述行處理部並輸出上述像素信號。藉此，具備於曝光期間內僅輸出發生位址事件之像素之像素信號之作用。
又，於該第1態樣，亦可為，上述光電二極體、上述像素信號產生部及上述檢測部配置於複數個像素之各者，上述像素信號產生部具備：像素電路，其產生類比之上述像素信號；及類比數位轉換器，其將上述像素信號轉換成數位信號並輸出。藉此，具備於每個像素將像素信號轉換成數位信號之作用。
又，於該第1態樣，亦可為，進而具備：類比數位轉換器，其將類比之上述像素信號轉換成數位信號；上述光電二極體、上述像素信號產生部及上述檢測部配置於複數個像素之各者，上述像素信號產生部產生類比之上述像素信號並向上述類比數位轉換器輸出。藉此，具備於像素之外部將像素信號轉換成數位信號之作用。
又，於該第1態樣，亦可為，上述像素信號產生部具備：電荷蓄積部，其蓄積上述電子及上述電洞之一者之電荷；浮動擴散層，其蓄積上述電荷並轉換成對應於該電荷量之上述電壓；第1傳送電晶體，其自上述光電二極體向電荷蓄積部傳送上述電荷；及第2傳送電晶體，其自上述電荷蓄積部向上述浮動擴散層傳送電荷。藉此，具備依序進行向電荷蓄積部傳送電荷及向浮動擴散層傳送電荷之作用。
又，於該第1態樣，亦可為，上述檢測部具備：轉換部，其將包含上述電子及上述電洞之另一者之光電流轉換成電壓；減法器，其藉由減法求出上述電壓之變化量；及比較器，其比較上述變化量與上述閾值，並將該比較結果輸出為上述檢測信號。藉此，具備將光電流轉換成電壓，並藉由比較其之變化量與閾值而檢測位址事件之作用。
又，於該第1態樣，亦可為，上述檢測部進而具備：緩衝器，其將來自上述轉換部之上述電壓之信號輸出至上述減法器。藉此，具備提高緩衝器後段之電路之驅動能力的作用。
又，於該第1態樣，亦可為，上述轉換部具備複數段之環狀電路，上述複數段之環狀電路各自為包含連接成環狀之一對電晶體者。藉此，具備提高轉換部之轉換增益之作用。
又，於該第1態樣，亦可為，上述轉換部具備：一對電晶體，其連接成環狀；及電容，其連接於上述一對電晶體各者之閘極。藉此，具備提高轉換部之穩定性之作用。
又，本技術之第2態樣係一種攝像裝置，其具備：光電二極體，其藉由光電轉換產生電子及電洞；像素信號產生部，其產生對應於上述電子及上述電洞之一者之量之電壓的像素信號；檢測部，其檢測上述電子及上述電洞之另一者之變化量是否超過特定之閾值並輸出檢測信號；及數位信號處理部，其對上述檢測信號及上述像素信號進行特定之處理。藉此，具備處理自電子產生之像素信號與自電洞產生之檢測信號之作用。 [發明之效果]
根據本技術，於檢測位址事件之固體攝像元件中，可取得能提高圖像資料之畫質之優異之效果。另，此處記載之效果並非限定性者，亦可為本揭示中記載之任一效果。
以下，對用以實施本技術之形態(以下稱為實施形態)進行說明。說明按照以下之順序進行。 1.第1實施形態(自電子產生像素信號，自電洞產生檢測信號之例) 2.第2實施形態(積層構造之固體攝像元件中，自電子產生像素信號，自電洞產生檢測信號之例) 3.第3實施形態(自電洞產生檢測信號之像素中自電子產生像素信號之例) 4.第4實施形態(將電子傳送至類比記憶體並產生像素信號，自電洞差生檢測信號之例) 5.第5實施形態(設置緩衝器，自電子產生像素信號，自電洞產生檢測信號之例) 6.第6實施形態(設置2段環狀電路，自電子產生像素信號，自電洞產生檢測信號之例) 7.第7實施形態(追加電容，自電子產生像素信號，自電洞產生檢測信號之例) 8.對移動體之應用例
＜1.第1實施形態＞ [攝像裝置之構成例] 圖1係顯示本技術之第1實施形態中之攝像裝置100之一構成例的方塊圖。該攝像裝置100係用以拍攝圖像資料之裝置，且具備光學部110、固體攝像元件200及DSP(Digital Signal Processing：數位信號處理)電路120。再者，攝像裝置100具備顯示部130、操作部140、匯流排150、訊框記憶體160、記憶部170及電源部180。作為攝像裝置100例如除數位靜態相機等數位相機外，亦設想具備攝像功能之智慧型手機或個人電腦、車載相機等。
光學部110為將來自被攝體之光聚光並引導至固體攝像元件200者。固體攝像元件200為與垂直同步信號VSYNC同步，藉由光電轉換產生圖像資料者。此處，垂直同步信號VSYNC為顯示攝像之時序之特定頻率之週期信號。固體攝像元件200將產生之圖像資料經由信號線209供給至DSP電路120。
DSP電路120為對來自固體攝像元件200之圖像資料執行特定之信號處理者。該DSP電路120將處理後之圖像資料經由匯流排150輸出至訊框記憶體160等。另，DSP電路120為專利申請範圍記載之數位信號處理部之一例。
顯示部130為顯示圖像資料者。作為顯示部130例如設想液晶面板或有機EL(Electro Luminescence：電致發光)面板。操作部140為根據使用者之操作產生操作信號者。
匯流排150為光學部110、固體攝像元件200、DSP電路120、顯示部130、操作部140、訊框記憶體160、記憶部170及電源部180相互交換資料共用之路徑。
訊框記憶體160為保持圖像資料者。記憶部170為記憶圖像資料等各種資料者。電源部180為將電源供給至固體攝像元件200、DSP電路120或顯示部130等者。
[固體攝像元件之構成例] 圖2係顯示本技術之第1實施形態中之固體攝像元件200之一構成例的方塊圖。該固體攝像元件200具備：DAC(Digital to Analog Converter：數位轉類比轉換器)211、驅動電路212、X仲裁器213、時刻編碼產生部230、像素陣列部240、行處理部250、控制電路215、Y仲裁器216。該等電路例如配置於單一之半導體晶片。又，於像素陣列部240，二維格柵狀地排列有複數個像素。以下，將像素陣列部240中沿特定方向排列之像素之集合稱為「列」，將沿垂直於列之方向排列之像素之集合稱為「行」。
DAC211係藉由DA(Digital to Analog)轉換產生斜坡狀變化之類比參照信號者。該DAC211將參照信號供給至像素陣列部240。
驅動電路212係與垂直同步信號VSYNC同步驅動像素陣列部240內之像素者。
像素陣列部240內之像素之各者產生像素信號。又，像素除像素信號外亦產生位址事件之檢測信號。此處，位址事件包含接通事件及斷開事件，檢測信號包含1位元之接通事件之檢測結果與1位元之斷開事件之檢測結果。接通事件意指亮度之變動量超過特定之上限閾值之主旨。另一方面，斷開事件意指亮度之變化量低於特定之下限閾值之主旨。另，像素檢測接通事件及斷開事件之兩者，亦可僅檢測一者。
像素將像素信號供給至行處理部250。又，於檢測位址事件時，為了對位址事件之檢測信號進行外部輸出，像素與Y仲裁器216間進行請求及應答之收發送(以下稱為「信號交換」)。接著，像素與X仲裁器213間進行信號交換。
X仲裁器213係調停來自各行之請求，並基於調停結果，將回應送回至對應之行者。
時刻編碼產生部230係產生時刻編碼者。該時刻編碼顯示參照信號斜坡狀變化之期間內之時刻。時刻編碼產生部230將產生之時刻編碼供給至像素陣列部240。
行處理部250係對像素信號進行相關雙重取樣(CDS：Correlated Double Sampling)處理等之信號處理，並將處理後之像素信號向DSP電路120供給者。
Y仲裁器216係調停來自各列之請求，並基於調停結果，將回應送回至對應之列者。
控制電路215係基於請求之調停結果，將位址事件之檢測信號輸出至DSP電路120者。藉由將每個像素之位址事件之檢測信號二維格柵狀地排列，而產生圖像資料。
以下，將包含自行處理部250輸出之像素信號之圖像資料稱為「普通圖像資料」，將包含位址事件之檢測信號之圖像資料稱為「AER圖像資料」。像素信號之資料尺寸大於檢測信號，例如為15位元。因此，普通圖像資料之畫質高於AER圖像資料。
普通圖像資料及AER圖像資料用於各種用途。例如，若攝像裝置100為車載相機，則普通圖像資料顯示於監視器等以供駕駛者視認。另一方面，AER圖像資料於ADAS(Advanced Driver Assistance System：先進駕駛輔助系統)等中用於檢測人或障礙物。
另，固體攝像元件200輸出普通圖像資料之所有像素信號，但如稍後所述，亦可僅輸出發生位址事件之像素之像素信號。
[像素陣列部之構成例] 圖3係顯示本技術之第1實施形態中之像素陣列部240之一構成例的方塊圖。該像素陣列部240具備複數個時刻編碼傳送部241、與複數個像素300。時刻編碼傳送部241依時刻編碼產生部230配置。又，像素300二維格柵狀排列。
時刻編碼傳送部241係傳送來自對應之時刻編碼產生部230之時刻編碼者。該時刻編碼傳送部241向像素300傳送來自對應之時刻編碼產生部230之時刻編碼，又，將來自像素300之時刻編碼作為數位像素信號傳送至行處理部250。
[像素之構成例] 圖4係顯示本技術之第1實施形態中之像素300之一構成例的方塊圖。該像素300具備光電二極體305、像素信號產生部310及位址事件檢測部400。又，光電二極體305之陽極及陰極之一者連接於像素信號產生部310，另一者連接於位址事件檢測部400。例如，光電二極體305之陰極連接於像素信號產生部310，陽極連接於位址事件檢測部400。
像素信號產生部310係產生對應於來自光電二極體305之電荷量之電壓的像素信號者。該像素信號產生部310將類比之像素信號轉換為數位信號(即，時刻編碼)並供給至時刻編碼傳送部241。
位址事件檢測部400係檢測來自光電二極體305之電荷之變化量是否超過特定閾值(即，是否發生位址事件)並產生檢測信號者。該位址事件檢測部400於檢測位址事件時與X仲裁器213及Y仲裁器216間進行信號交換。另，位址事件檢測部400係專利申請範圍記載之檢測部之一例。
圖5係本技術之第1實施形態與比較例中之光電二極體305之剖視圖之一例。同圖中之a係第1實施形態中之光電二極體305之剖視圖之一例，同圖中之b係比較例中之光電二極體305之剖視圖之一例。
如同圖中之a所例示，光電二極體305例如包含N層306及P層307，N層306經由陰極電極連接於像素信號產生部310。另一方面，P層307經由陽極電極連接於位址事件檢測部400。
光電二極體305藉由光電轉換產生電子及電洞。亮度越高產生之電子數越多。又，產生之電洞之個數與電子數相同。同圖中之｢e- ｣表示電子，｢h+ ｣表示電洞。該等電荷中之電子輸出至像素信號產生部310，電洞輸出至位址事件檢測部400。
另一方面，如同圖中之b所例示，比較例中，設為將像素信號產生部310及位址事件檢測部400之兩者連接於陰極，且陽極接地。於該比較例中，電子之一部分輸出至像素信號產生部310，剩餘者輸出至位址事件檢測部400。又，電洞排出至接地端子。如此，於該比較例之構成中，電子及電洞中，僅電子用於像素信號之產生與位址事件之檢測，電洞未用於該等而排出。
相對於此，第1實施形態之像素300中，電子用於像素信號之產生，電洞用於位址事件之檢測。因此，與僅使用電子之比較例相比，同一亮度下像素信號之位準提高，位址事件之檢測精度提高。藉此，普通圖像資料及AER圖像資料各者之畫質提高。尤其，可提高亮度較低之暗處之畫質。
又，一般，自電子產生之像素信號或檢測信號與自電洞產生之情形相比，雜訊量減少。因此，光電二極體305將電子供給至像素信號產生部310，藉此，可使像素信號之信號品質提高。另一方面，由於對位址事件檢測部400供給電洞，故檢測信號之雜訊量增多，但位址事件之檢測信號係每個像素不超過2位元，故雜訊量增大之影響少於像素信號。
另，將光電二極體305之陰極連接於像素信號產生部310，將陽極連接於位址事件檢測部400，亦可相反地將陰極連接於位址事件檢測部400，將陽極連接於像素信號產生部310。
[像素信號產生部之構成例] 圖6係顯示本技術之第1實施形態中之像素信號產生部310之一構成例的方塊圖。該像素信號產生部310具備ADC(Analog-to-Digital Converter：類比轉數位轉換器)320及像素電路330。又，ADC320具備比較電路321及資料記憶部370。且，比較電路321具備差動輸入電路340、電壓轉換電路350及正反饋電路360。
像素電路330係根據驅動電路212之控制產生像素信號SIG作為重設位準或信號位準者。此處，重設位準為曝光開始時之後將浮動擴散層初始化時之電壓，信號位準為對應於曝光結束時之曝光量之電壓。像素電路330將重設位準及信號位準依序供給至差動輸入電路340。
ADC320係將像素信號SIG(重設位準或信號位準)AD(Analog-to-Digital：類比轉數位)轉換成數位信號者。以下將對重設位準進行AD轉換後之資料稱為「P相資料」。又，以下將對信號位準進行AD轉換後之資料稱為「D相位準」。
ADC320內之差動輸入電路340係比較來自DAC211之參照信號REF、與來自像素電路330之像素信號SIG者。該差動輸入電路340將顯示比較結果之比較結果信號供給至電壓轉換電路350。
電壓轉換電路350係轉換來自差動輸入電路340之比較結果信號之電壓並輸出至正反饋電路360者。
正反饋電路360係將輸出之一部分與輸入(比較結果信號)相加，並作為輸出信號VCO輸出至資料記憶部370者。
資料記憶部370係保持輸出信號VCO反轉時之時刻編碼者。該資料記憶部370根據驅動電路212之控制將對應於重設位準之時刻編碼輸出為P相資料，且將對應於信號位準之時刻編碼輸出為D相資料。
[位址事件檢測部之構成例] 圖7係顯示本技術之第1實施形態中之位址事件檢測部400之一構成例的方塊圖。該位址事件檢測部400具備對數轉換部410、減法器420、比較器430及AER邏輯電路440。
對數轉換部410係將包含由光電二極體305產生之電荷(電洞等)之光電流對數性地轉換成電壓者。該對數轉換部410將轉換後之電壓信號供給至減法器420。另，對數轉換部410為專利申請範圍記載之轉換部之一例。
減法器420係藉由減法動作求出電壓信號之變化量者。該減法器420將顯示變化量之微分信號供給至比較器430。又，微分信號根據重設信號xrst而初始化。
比較器430係對來自減法器420之微分信號、與上限閾值Vbon及下限閾值Vboff之各者進行比較者。該比較器430將微分信號與上限閾值Vbon之比較結果作為位址事件之檢測結果VCH輸出至AER邏輯電路440。又，比較器430將微分信號與下限閾值Vboff之比較結果作為位址事件之檢測結果VCL輸出至AER邏輯電路440。
AER邏輯電路440係基於包含檢測結果VCH及VCL之檢測信號進行信號交換者。該AER邏輯電路440於位址事件發生之情形時與Y仲裁器216間進行信號交換。接著，AER邏輯電路440與X仲裁器213間進行信號交換，並於接收到回應後根據重設信號xrst重設減法器420。
圖8係顯示本技術之第1實施形態中之像素300之一構成例的電路圖。像素信號產生部310具備像素電路330、負載MOS電路311、比較電路321及資料記憶部370。又，像素電路330具備排出電晶體331、傳送電晶體332、重設電晶體333、浮動擴散層334、放大電晶體335、及選擇電晶體336。作為排出電晶體331、傳送電晶體332、重設電晶體333、放大電晶體335及選擇電晶體336，例如，使用NMOS(N-type Metal Oxide Semiconductor：N型金屬氧化物半導體)電晶體。又，排出電晶體331及傳送電晶體332連接於光電二極體305之陰極。
排出電晶體331係根據來自驅動電路212之驅動信號OFG，排出光電二極體305之電荷(電子等)者。
傳送電晶體332係根據來自驅動電路212之傳送信號TRG，自光電二極體305將電荷傳送至浮動擴散層334者。
重設電晶體333係根據來自驅動電路212之重設信號RST將浮動擴散層334之電荷量初始化者。
浮動擴散層334係蓄積傳送之電荷，並產生對應於該電荷量之電壓者。放大電晶體335係將浮動擴散層334之電壓放大者。
選擇電晶體336係根據來自驅動電路212之選擇信號SEL，將放大之電壓之信號作為像素信號SIG供給至比較電路321者。
負載MOS電路311插入至選擇電晶體336之源極與接地端子間。
驅動電路212與垂直同步信號VSYNC同步，對於所有像素，於曝光開始時，根據重設信號RST將浮動擴散層334初始化，於曝光結束時根據傳送信號TRG傳送電荷。換言之，使用全域快門方式。又，驅動電路212根據選擇信號SEL依序選擇列並輸出像素信號。
又，位址事件檢測部400具備對數轉換部410、減法器420、比較器430及AER邏輯電路440。對數轉換部410具備PMOS(P-type Metal Oxide Semiconductor：p型金屬氧化物半導體)電晶體411及412與NMOS電晶體413。減法器420具備電容421及423、放大器422及開關424。
對數轉換部410中，PMOS電晶體411之源極連接於光電二極體305之陽極，汲極接地。又，PMOS電晶體412及NMOS電晶體413於電源端子與接地端子間串聯連接，PMOS電晶體412之閘極連接於光電二極體305之陽極。又，PMOS電晶體411之閘極連接於PMOS電晶體412及NMOS電晶體413之連接點，NMOS電晶體413之閘極連接於電源端子。藉由該等環狀連接之PMOS電晶體411及412，來自光電二極體305之光電流對數性地轉換成電壓信號，並自PMOS電晶體412及NMOS電晶體413之連接點輸出。
減法器420中，電容421之一端連接於對數轉換部410之輸出端子，另一端連接於放大器422之輸入端子。電容423與放大器422並聯連接。開關424係根據重設信號xrst開閉連接電容423之兩端之路徑者。
放大器422係將經由電容421輸入之電壓信號放大者。該放大器422將放大後之信號輸出至比較器430。
接通開關424時，對電容421之對數轉換部410側輸入電壓信號Vinit ，其相反側成為假想接地端子。方便起見，將該假想接地端子之電位設為零。此時，若將電容421之電容設為C1，則蓄積於電容421之電位Qinit 藉由下式表示。另一方面，由於電容423之兩端短路，故其之蓄積電荷成為零。 Qinit =C1×Vinit ……式1
接著，當考慮開關424斷開，電容421之輸入側之電壓變化而變為Vafter 之情形時，蓄積於電容421之電荷Qafter 由下式表示。 Qafter =C1×Vafter ……式2
另一方面，當將輸出電壓設為Vout 時，蓄積於電容423之電荷Q2由下式表示。 Q2=-C2×Vout ……式3
此時，由於電容421及423之總電荷量不變，故下式成立。 Qinit =Qafter +Q2……式4
當將式1至式3代入至式4時，可獲得下式。 Vout=-(C1/C2)×(Vafter -Vinit )……式5
式5表示電壓信號之減法動作，減法結果之增益為C1/C2。通常，期望將增益最大化，故較佳設計成擴大C1，減小C2。另一方面，當C2過小時，kTC雜訊增大，而有雜訊特性惡化之虞，因而C2之電容削減被限制在能允許雜訊之範圍內。又，由於對每個像素搭載包含減法器420之位址事件檢測部400，故對於電容C1或C2存在面積上之制約。考慮到該等，例如將C1值設定為20至200毫微微法拉(fF)之值，C2設定為1至20毫微微法拉(fF)之值。
[固體攝像元件之動作例] 圖9係顯示本技術之第1實施形態中之攝像處理之一例的流程圖。該攝像處理例如於執行用以拍攝普通圖像資料之應用程式時開始。
固體攝像元件200判斷是否為VSYNC之上升時序(步驟S911)。於為VSYNC之上升時序之情形時(步驟S911：是(Yes))，固體攝像元件200內之像素之各者於曝光結束前，將重設位準轉換成P相資料(步驟S912)。接著，像素於曝光結束時將電荷傳送至FD(步驟S913)，且將信號位準轉換成D相資料(步驟S914)。接著，固體攝像元件200執行CDS處理(步驟S915)。於VSYNC之上升時序前之情形時(步驟S911：否(No))、或步驟S915後，固體攝像元件200重複執行步驟S911以後之步驟。
圖10係顯示本技術之第1實施形態中之AER處理之一例的流程圖。該AER處理例如於執行用於AER之應用程式時開始。
固體攝像元件200內之像素300判斷亮度之變化量是否超過上限閾值(步驟S921)。於變化量為上限閾值以下之情形時(步驟S921：否)，像素300判斷亮度之變化量是否低於下限閾值(步驟S922)。於變化量未達下限閾值之情形時(步驟S922：是)，像素300檢測斷開事件(步驟S923)。另一方面，於變化量超過上限閾值之情形時(步驟S921：是)，像素300檢測接通事件(步驟S924)。
於步驟S923或S924後，像素300藉由信號交換而傳送位址事件之檢測結果(步驟S925)，並重複執行步驟S921以後之步驟。又，於變化量為下限閾值以上之情形時(步驟S922：否)，像素300重複執行步驟S921以後之步驟。
如此，根據本技術之第1實施形態，由於像素信號產生部310根據電子產生像素信號，位址事件檢測部400根據電洞檢測位址事件，故與僅使用電子之情形相比，可使圖像資料之畫質提高。
＜2.第2實施形態＞ 上述第1實施形態中，於單一之半導體晶片配置像素300，有像素數越多，半導體晶片之電路規模越增大之虞。該第2實施形態之固體攝像元件200與第1實施形態之不同點在於，於積層之複數個晶片，分散配置像素300內之電路。
圖11係顯示本技術之第1實施形態中之固體攝像元件200之積層構造之一例的圖。該固體攝像元件200具備電路晶片202、及積層於該電路晶片202之受光晶片201。該等晶片經由通孔等連接部電性連接。另，除通孔外，亦可藉由Cu-Cu接合或突塊連接。
圖12係顯示本技術之第2實施形態中之像素300之一構成例的電路圖。該第2實施形態之像素300中，像素電路330不具備放大電晶體335及選擇電晶體336，而將浮動擴散層334之電壓信號作為像素信號SIG直接輸入至比較電路321內之差動輸入電路340。
又，差動輸入電路340具備PMOS電晶體341及342、與NMOS電晶體343至345。
PMOS電晶體341及NMOS電晶體343於電源端子與NMOS電晶體345之汲極間串聯連接。PMOS電晶體342及NMOS電晶體344於電源端子與NMOS電晶體345之汲極間串聯連接。
又，PMOS電晶體342之閘極連接於PMOS電晶體341之閘極與PMOS電晶體342自身之汲極。對NMOS電晶體343之閘極，輸入來自像素電路330之像素信號SIG，對NMOS電晶體344之閘極輸入來自DAC211之參照信號REF。又，PMOS電晶體341及NMOS電晶體343之連接點連接於電壓轉換電路350。
上述之電路構成中，像素電路330、差動輸入電路340內之NMOS電晶體343至345配置於受光晶片201。又，差動輸入電路340內之PMOS電晶體341及342、其後段之電路、及位址事件檢測部400配置於電路晶片202。固體攝像元件200內之DAC211、驅動電路212、X仲裁器213、時刻編碼產生部230、行處理部250、控制電路215及Y仲裁器216配置於電路晶片202。
另，將固體攝像元件200內之電路或元件分散排至於2個晶片(受光晶片201及電路晶片202)，亦可分散配置於積層之3個以上之晶片。
如此，於本技術之第2實施形態中，由於將固體攝像元件200內之電路分散配置於受光晶片201及電路晶片202，故與配置於單一晶片之情形相比，可削減各個晶片之電路規模。
[變化例] 上述之第2實施形態中，將像素電路330、比較電路321內之NMOS電晶體343至345配置於受光晶片201，有像素數越多，受光晶片201之電路規模越增大之虞。該第2實施形態之變化例之固體攝像元件200與第2實施形態之不同點在於，將像素電路330配置於受光晶片201，將比較電路321之全體配置於電路晶片202。
圖13係顯示本技術之第2實施形態之變化例中之像素300之一構成例的電路圖。第2實施形態之變化例中，像素電路330與第1實施形態同樣地具備放大電晶體335及選擇電晶體336。
又，像素電路330及負載MOS電路311配置於受光晶片201，該等以外之比較電路321等配置於電路晶片202。
如此，於本技術之第2實施形態之變化例中，由於像素電路330配置於受光晶片201，比較電路321之全體配置於電路晶片202，故與第2實施形態相比，可削減受光晶片201之電路規模。
＜3.第3實施形態＞ 上述之第1實施形態中，與垂直同步信號VSYNC同步讀出所有像素之像素信號，但隨著像素數之增大，電路規模亦增大，而有消耗電力變大之虞。該第3實施形態之固體攝像元件200與第1實施形態之不同點在於僅讀出發生位址事件之像素之像素信號。
圖14係顯示本技術之第3實施形態中之像素300之驅動方法之一例的時序圖。控制電路215將位址事件之檢測信號供給至驅動電路212。不對固體攝像元件200輸入垂直同步信號VSYNC。又，驅動電路212僅驅動所有像素中發生位址事件之像素，並產生像素信號。且，僅讀出發生位址事件之像素之像素信號。
例如，於時序T1，藉由控制電路215輸出某像素300之檢測信號。驅動電路212將重設信號RST供給至該像素300，並開始曝光。接著，於曝光結束前之時序T2，自比較電路321對輸出信號VCO進行輸出，並開始重設位準之AD轉換(換言之，讀出)。
驅動電路212於曝光結束時之時序T3供給傳送信號TRG，並於其後之時序T4，自比較電路321對輸出信號VCO進行輸出，並開始信號位準之AD轉換(讀出)。
另，固體攝像元件200於位址事件發生時，讀出1個像素之像素信號，亦可讀出複數個像素之各者之像素信號。例如，將像素陣列部240分割為各自包含複數個像素之特定尺寸之像素區塊，當某像素區塊發生位址事件時，只要讀出該區塊內之複數個像素信號即可。
如此，根據本技術之第3實施形態，固體攝像元件200僅讀出所有像素中發生位址事件之像素之像素信號，故與讀出所有像素之情形相比，可減少固體攝像元件200之消耗電力。又，與讀出所有像素之情形相比，可加快讀出速度。
[第1變化例] 上述第3實施形態中，僅曝光並讀出所有像素中發生位址事件之像素，若每個像素之曝光時序不同，則導致像素信號之輸出時序因每個像素而異。該第3實施形態之第1變化例之固體攝像元件200與第3實施形態之不同點在於，將所有像素曝光，且僅輸出發生位址事件之像素之像素信號。
圖15係顯示本技術之第3實施形態之第1變化例中之像素300之驅動方法之一例的時序圖。驅動電路212與垂直同步信號VSYNC同步且同時曝光所有像素。換言之，使用全域快門方式。
例如，驅動電路212於曝光開始之時序T10，對所有像素供給RST1、RST2及RST3等重設信號RSTn。RSTn(n為整數)向像素Pn供給。且，於曝光結束之時序T20，驅動電路212將傳送信號TRGn供給至所有像素。藉此，所有像素同時曝光。
接著，於時序T10至T20之曝光期間內，對檢測出位址事件之像素，驅動電路212控制行處理部250並輸出像素信號。
例如，於時序T11及T12，藉由控制電路215輸出像素P1及P2之檢測信號，而不輸出像素P3之檢測信號。於該情形時，驅動電路212於曝光結束後之時序T21，使像素P1及P2之像素信號輸出至行處理部250。藉此，可使像素P1及P2之輸出時序和與垂直同步信號VSYNC同步之時序一致。
如此，根據本技術之第3實施形態之第1變化例，由於驅動電路212曝光所有像素且僅輸出發生位址事件之像素之像素信號，故可使該等像素之像素信號之輸出時序一致。
[第2變化例] 上述之第3實施形態中，於每個像素設置ADC320，且僅對發生位址事件之像素之像素信號進行AD轉換(換言之，讀出)，但於每個像素配置ADC320之構成會導致像素300之電路規模增大。該第3實施形態之第2變化例中之固體攝像元件200與第3實施形態之不同點在於，逐行配置ADC。
圖16係顯示本技術之第3實施形態之第2變化例中之固體攝像元件200之一構成例的方塊圖。該第3實施形態之第2變化例之固體攝像元件200與第3實施形態之不同點在於，具備行ADC260以代替行處理部250。於該行ADC260，逐行地設置ADC。
又，第3實施形態之第2變化例中之控制電路215控制行ADC260且僅對來自檢測出位址事件之行之像素信號進行AD轉換。
圖17係顯示本技術之第3實施形態之第2變化例中之像素300之一構成例的方塊圖。該第3實施形態之第2變化例之像素300與第3實施形態之不同點在於，未設置ADC320。像素電路330經由逐行配線之垂直信號線VSL將類比之像素信號供給至行ADC260。
如此，於本技術之第3實施形態之第2變化例中，由於逐行地配置ADC，故與於每個像素配置ADC之情形相比，可削減像素300之電路規模。
＜4.第4實施形態＞ 上述之第1實施形態中，於像素300曝光結束後，對像素信號進行AD轉換，但因光電二極體305之初始化產生雜訊，因而於該AD轉換中無法開始後續之曝光。該第4實施形態之像素300與第1實施形態之不同點在於，追加類比記憶體及傳送電晶體並可於AD轉換中開始曝光。
圖18係顯示本技術之第4實施形態中之像素300之一構成例的電路圖。該第4實施形態之像素300與第1實施形態之不同點在於，進而具備傳送電晶體337及類比記憶體338。作為傳送電晶體337，例如使用NMOS電晶體。
傳送電晶體337係根據來自驅動電路212之傳送信號TRX自光電二極體305向類比記憶體338傳送電荷者。另，傳送電晶體337為專利申請範圍記載之第1傳送電晶體之一例，傳送電晶體332係專利申請範圍記載之第2傳送電晶體之一例。
類比記憶體338係蓄積電荷者。類比記憶體338原理上亦為配線電容，但因可向浮動擴散層334傳送電荷，故期望使用嵌入型之可完全耗盡之電容。另，類比記憶體338為專利申請範圍記載之電荷蓄積部之一例。
驅動電路212於曝光期間結束後，根據傳送信號TRX，自光電二極體305向類比記憶體338傳送電荷，並根據重設信號RST使浮動擴散層334初始化。ADC320開始重設位準之AD轉換。
又，驅動電路212於重設位準之AD轉換結束後，根據傳送信號TRG，自類比記憶體338向浮動擴散層334傳送電荷。ADC320開始信號位準之AD轉換。
如上所述，於AD轉換前，向類比記憶體338傳送光電二極體305之電荷，因而驅動電路212可於AD轉換中根據驅動信號OFG開始後續之曝光。
如此，根據本技術之第4實施形態，於曝光期間結束後，傳送電晶體337自光電二極體305向類比記憶體338傳送電荷，因而可與AD轉換中開始後續之曝光。
＜5.第5實施形態＞ 上述之第1實施形態中，對數轉換部410將電壓信號供給至減法器420，於該構成中，有減法器420之後之電路之驅動力不足之虞。該第5實施形態之位址事件檢測部400與第1實施形態之不同點在於，配置緩衝器450而提高驅動力。
圖19係顯示本技術之第5實施形態中之位址事件檢測部400之一構成例的電路圖。該第5實施形態之位址事件檢測部400與第1實施形態之不同點在於，進而具備緩衝器450。
緩衝器450係將來自對數轉換部410之電壓信號輸出至減法器420者。該緩衝器450具備NMOS電晶體451及452。該等電晶體串聯連接於電源端子與接地端子間。又，NMOS電晶體451之閘極連接於對數轉換部410，NMOS電晶體451及452之連接點連接於減法器420。NMOS電晶體452之閘極連接於電源端子。
藉由緩衝器450可提高驅動減法器420後之後段之驅動力。又，藉由緩衝器450，可確保伴隨後段之開關動作之雜訊之隔離。
如此，於本技術之第5實施形態中，由於在減法器420之前段配置緩衝器450，故可提高減法器420之後之電路之驅動力。
＜6.第6實施形態＞ 上述之第1實施形態中，於對數轉換部410僅配置有1段包含PMOS電晶體411及412之環狀電路，但僅1段環狀電路之情形，有將電流轉換成電壓時之轉換增益不足之虞。該第6實施形態之對數轉換部410與第1實施形態之不同點在於設置有2段環狀電路。
圖20係顯示本技術之第6實施形態中之對數轉換部410之一構成例的電路圖。該第6實施形態之對數轉換部410與第1實施形態之不同點在於進而設置有PMOS電晶體414及415。
PMOS電晶體411及414串聯連接於光電二極體305與接地端子間，PMOS電晶體412及415與NMOS電晶體413串聯連接於電源端子與接地端子間。又，PMOS電晶體411之閘極連接於PMOS電晶體412及415之連接點，PMOS電晶體414之閘極連接於PMOS電晶體415及NMOS電晶體413之連接點。
另一方面，PMOS電晶體412之閘極連接於光電二極體305及PMOS電晶體411之連接點。PMOS電晶體415之閘極連接於PMOS電晶體411及414之連接點。又，PMOS電晶體415及NMOS電晶體413之連接點連接於減法器420。
如上所述，由於包含PMOS電晶體411及412之環狀電路與包含PMOS電晶體414及415之環狀電路2段地連接，故與僅1段環狀電路之情形相比，轉換增益成為2倍。
如此，於本技術之第6實施實施形態中，由於將2段環狀電路設置於對數轉換部410，故與僅1段之情形相比，可增大轉換增益。
＜7.第7實施形態＞ 上述之第1實施形態中，對數轉換部410內，將PMOS電晶體411及412連接成環狀，但該環狀之電路成為負反饋電路，有於一定之條件下發生電壓信號振盪之虞。該第7實施形態之對數轉換部410與第1實施形態之不同點在於藉由追加電容而提高穩定性。
圖21係顯示本技術之第7實施形態中之對數轉換部410之一構成例的電路圖。該第7實施形態之對數轉換部410與第1實施形態之不同點在於進而具備電容416。
電容416之一端連接於PMOS電晶體412之閘極，另一端連接於PMOS電晶體411之閘極。可藉由該電容416補償電壓信號之相位遲滯。例如，除電容器外，亦可使用配線間電容或電晶體等之電容元件作為電容416。
此處，藉由下式表示不設置電容416時之包含PMOS電晶體411及412之環狀電路之傳送函數。 [數1]……式6 上式中，gm 為PMOS電晶體411之互導，Gm 為PMOS電晶體412之互導。R0 為環狀電路之輸出電阻，s為複數。Cpd 為PMOS電晶體411之源極側之電容，C0 為PMOS電晶體411之閘極電容。互導之單位為例如西門子(S)，電阻之單位為例如歐姆(Ω)。又，電容之單位為例如法拉(F)。
相對於此，考慮到設置有電容416之環狀電路之開環增益之傳送函數係假定其電容之電容值CC 小於附於輸出端子之寄生電容，並藉由下式表示。 [數2]……式7
又，CC 與C0 間，以下之關係式成立。該關係在設計上為適當之過程。 CC ＜＜C0 ……式8
根據式7，可知藉由追加電容，能於gm /CC 之位置實現零點。該零點之位置與gm 成比例，且依存於照度。因此，考慮到與對應之照度依存之極(即，gm /Cpd +CC 之極)之關係，而將CC 設計成電容值CC 與Cpd +CC 未大 幅背離之值，藉此，可於所有照度條件下確保穩定性。另，電容值CC 較佳設為Cpd /3至Cpd /2之範圍內。
如此，本技術之第7實施形態中，由於在環狀電路中追加電容416，故可補償電壓信號之相位遲滯。藉此，可提高對數轉換部410之穩定性。
＜8.對移動體之應用例＞ 本發明之技術(本技術)可應用於各種製品。例如，本發明之技術亦可作為搭載於汽車、電動汽車、油電混合汽車、機車、腳踏車、個人行動車、飛機、無人機、船舶、機器人等任一種類之移動體之裝置實現。
圖22係顯示可應用本揭示之技術之移動體控制系統之一例即車輛控制系統之概略構成例的方塊圖。
車輛控制系統12000具備經由通信網路12001連接之複數個電子控制單元。於圖22所示之例中，車輛控制系統12000具備驅動系統控制單元12010、車體系統控制單元12020、車外資訊檢測單元12030、車內資訊檢測單元12040、及綜合控制單元12050。又，作為綜合控制單元12050之功能構成，圖示有微電腦12051、聲音圖像輸出部12052、及車載網路I/F(interface：介面)12053。
驅動系統控制單元12010根據各種程式控制與車輛之驅動系統關聯之裝置之動作。例如，驅動系統控制單元12010作為內燃機或驅動用馬達等用以產生車輛之驅動力之驅動力產生裝置、用以將驅動力傳遞至車輪之驅動力傳遞機構、調節車輛舵角之轉向機構、及產生車輛之制動力之制動裝置等控制裝置發揮功能。
車體系統控制單元12020根據各種程式控制車體所裝備之各種裝置之動作。例如，車體系統控制單元12020作為無鑰匙門禁系統、智慧型鑰匙系統、電動窗裝置、或頭燈、尾燈、剎車燈、方向燈或霧燈等各種燈之控制裝置發揮功能。於該情形時，可對車體系統控制單元12020輸入自代替鑰匙之可攜帶式機器發送之電波或各種開關之信號。車體系統控制單元12020受理該等電波或信號之輸入，並控制車輛之門鎖裝置、電動窗裝置、燈等。
車外資訊檢測單元12030檢測搭載有車輛控制系統12000之車輛外部之資訊。例如，於車外資訊檢測單元12030連接有攝像部12031。車外資訊檢測單元12030以攝像部12031拍攝車外之圖像，且接收拍攝後之圖像。車外資訊檢測單元12030亦可基於接收到之圖像，進行人、車、障礙物、標識或路面上之文字等物體檢測處理或距離檢測處理。
攝像部12031係接受光並輸出對應於該光之受光量之電氣信號的光感測器。攝像部12031可將電氣信號作為圖像輸出，亦可作為測距之資訊輸出。又，攝像部12031接受之光可為可見光，亦可為紅外線等非可見光。
車內資訊檢測單元12040檢測車內之資訊。於車內資訊檢測單元12040例如連接有檢測駕駛者之狀態之駕駛者狀態檢測部12041。駕駛者狀態檢測部12041包含例如拍攝駕駛者之相機，車內資訊檢測單元12040亦可基於自駕駛者狀態檢測部12041輸入之檢測資訊，算出駕駛者之疲勞程度或注意力集中程度，又可判斷駕駛者是否在打瞌睡。
微電腦12051可基於由車外資訊檢測單元12030或車內資訊檢測單元12040取得之車內外之資訊，運算驅動力產生裝置、轉向機構或制動裝置之控制目標值，對驅動系統控制單元12010輸出控制指令。例如，微電腦12051可進行以實現包含避免車輛碰撞或緩和衝擊、基於車輛距離之追隨行駛、車速維持行駛、車輛之碰撞警告、或車輛之車道偏離警告等之ADAS(Advanced Driver Assistance System)之功能為目的之協調控制。
又，微電腦12051可藉由基於由車外資訊檢測單元12030或車內資訊檢測單元12040取得之車輛周圍之資訊，控制驅動力產生裝置、轉向機構或制動裝置等，而進行以不拘於駕駛者之操作而自動行駛之自動駕駛為目的之協調控制。
又，微電腦12051可基於由車外資訊檢測單元12030取得之車外之資訊，對車體系統控制單元12020輸出控制指令。例如，微電腦12051可根據由車外資訊檢測單元12030檢測出之前方車輛或對向車輛之位置控制頭燈，進行以謀求將遠光切換成近光等防眩為目的之協調控制。
聲音圖像輸出部12052對車輛之搭乘者或車外，向可視覺性或聽覺性通知資訊之輸出裝置發送聲音及圖像中之至少一者之輸出信號。於圖22之例中，作為輸出裝置，例示有擴音器12061、顯示部12062及儀表板12063。顯示部12062例如亦可包含車載顯示器及抬頭顯示器之至少一者。
圖23係顯示攝像部12031之設置位置之例之圖。
於圖23中，作為攝像部12031，具有攝像部12101、12102、12103、12104、12105。
攝像部12101、12102、12103、12104、12105例如設置於車輛12100之前鼻、側視鏡、後保險桿、後門及車廂內之擋風玻璃之上部等位置。前鼻所具備之攝像部12101及車廂內之擋風玻璃之上部所具備之攝像部12105主要取得車輛12100前方之圖像。側視鏡所具備之攝像部12102、12103主要取得車輛12100側方之圖像。後保險桿或後門所具備之攝像部12104主要取得車輛12100後方之圖像。車廂內之擋風玻璃之上部所具備之攝像部12105主要用於前方車輛或行人、障礙物、信號機、交通標識或車道線等之檢測。
另，於圖23顯示攝像部12101至12104之攝像範圍之一例。攝像範圍12111顯示設置於前鼻之攝像部12101之攝像範圍，攝像範圍12112、12113分別顯示設置於側視鏡之攝像部12102、12103之攝像範圍，攝像範圍12114顯示設置於後保險桿或後門之攝像部12104之攝像範圍。例如，藉由使攝像部12101至12104所拍攝之圖像資料重疊，而獲得自上方觀察車輛12100之俯瞰圖像。
攝像部12101至12104之至少一者亦可具有取得距離資訊之功能。例如，攝像部12101至12104之至少一者亦可為包含複數個攝像元件之攝影機，又可為具有相位差檢測用像素之攝像元件。
例如，微電腦12051基於自攝像部12101至12104取得之距離資訊，求得攝像範圍12111至12114內之至各立體物之距離，與該距離之時間變化(相對於車輛12100之相對速度)，藉此可特別對車輛12100之行進路線上某最近之立體物、且與車輛12100大致同方向以特定速度(例如為0 km/h以上)行駛之立體物加以提取並作為前方車輛。進而，微電腦12051可設定前方車輛之近前應預先確保之車間距離，進行自動剎車控制(亦包含追隨停止控制)或自動加速控制(亦包含追隨起動控制)等。可如此地進行以不拘於駕駛者之操作而自動行駛之自動駕駛等為目的之協調控制。
例如，微電腦12051基於自攝像部12101至12104獲得之距離資訊，將立體物相關之立體物資料分類成二輪車、普通車輛、大型車輛、行人、電線桿等其他立體物並提取，用於障礙物之自動避開。例如，微電腦12051可將車輛12100周邊之障礙物識別為車輛12100之駕駛員可視認之障礙物與難以視認之障礙物。且，微電腦12051對顯示與各障礙物碰撞之危險度之碰撞危險性加以判斷，於碰撞危險性為設定值以上而有可能碰撞之狀況時，經由擴音器12061或顯示部12062對駕駛員輸出警報，或經由驅動系統控制單元12010進行強制減速或避開轉向，藉此可進行用以避免碰撞之駕駛支援。
攝像部12101至12104之至少一者亦可為檢測紅外線之紅外線相機。例如，微電腦12051可藉由判定攝像部12101至12104之攝像圖像中是否存在行人而識別行人。該行人之識別係根據例如提取作為紅外線相機之攝像部12101至12104之攝像圖像之特徵點之順序、及對顯示物體輪廓之一連串特徵點進行圖案匹配處理而判別是否為行人之順序進行。若微電腦12051判斷攝像部12101至12104之攝像圖像中存在行人，且識別行人，則聲音圖像輸出部12052以對該識別之行人重疊顯示用以強調之方形輪廓線之方式，控制顯示部12062。又，聲音圖像輸出部12052亦可以將顯示行人之圖標等顯示於期望之位置之方式控制顯示部12062。
以上，對可應用本揭示之技術之車輛控制系統之一例進行說明。本揭示之技術可應用於以上說明之構成中之攝像部12031。具體而言，攝像裝置100可應用於攝像部12031。由於可藉由將本揭示之技術應用於攝像部12031而提高畫質，獲得更易於觀察之攝影圖像，故可減輕駕駛者之疲勞。
另，上述之實施形態係顯示用以將本技術具體化之一例者，實施形態中之事項、與專利申請範圍中之發明特定事項分別具有對應關係。同樣，專利申請範圍中之發明特定事項、及與其標註同一名稱之本技術之實施形態中之事項分別具有對應關係。然而，本技術並非限定於實施形態者，可藉由於不脫離其主旨之範圍內對實施形態施加各種變化而具體化。
又，上述實施形態中說明之處理程序亦可視為具有該等一連串之程序之方法，又可將該等一連串之程序視為用以使電腦執行之程式乃至記憶該程式之記錄媒體。作為該記錄媒體，例如可使用CD(Compact Disc：光碟)、MD(MiniDisc：迷你光碟)、DVD(Digital Versatile Disc：多功能數位光碟)、記憶卡、藍光光碟(Blu-ray(註冊商標))等。
另，本說明書中記載之效果僅為例示，並非限定性者，又可為其他之效果。
另，本技術亦可採用如下之構成。 (1)一種固體攝像元件，其具備： 光電二極體，其藉由光電轉換產生電子及電洞； 像素信號產生部，其產生對應於上述電子及上述電洞之一者之量之電壓的像素信號；及 檢測部，其檢測上述電子及上述電洞之另一者之變化量是否超過特定之閾值並輸出檢測信號。 (2)如上述(1)記載之固體攝像元件，其中 上述像素信號產生部產生對應於上述電子之量之電壓的上述像素信號；且 上述檢測部檢測上述電洞之變化量是否超過上述閾值。 (3)如上述(1)或(2)記載之固體攝像元件，其中 上述光電二極體與上述像素信號產生部之一部分配置於特定之受光晶片；且 上述像素信號產生部之剩餘者與上述檢測部配置於特定之電路晶片。 (4)如上述(3)記載之固體攝像元件，其中 上述像素信號產生部具備： 像素電路，其產生上述像素信號；及 比較電路，其比較上述像素信號與特定之參照信號；且 上述光電二極體、上述像素電路及上述比較電路之一部分配置於上述受光晶片； 上述比較電路之剩餘者與上述檢測部配置於上述電路晶片。 (5)如上述(3)記載之固體攝像元件，其中 上述像素信號產生部具備： 像素電路，其產生上述像素信號；及 比較電路，其比較上述像素信號與特定之參照信號；且 上述光電二極體及上述像素電路配置於上述受光晶片； 上述比較電路及上述檢測部配置於上述電路晶片。 (6)如上述(1)至(5)中任一項記載之固體攝像元件，其進而具備： 驅動部，其於藉由上述檢測部檢測出上述變化量超過上述閾值之主旨之情形時，驅動上述像素信號產生部而產生上述像素信號。 (7)如上述(1)至(5)中任一項記載之固體攝像元件，其具備： 行處理部，其對上述像素信號進行特定之信號處理並輸出；及 控制電路，其於特定之曝光期間內，檢測出上述變化量超過上述閾值之主旨之情形時，控制上述行處理部並輸出上述像素信號。 (8)如上述(1)至(7)中任一項記載之固體攝像元件，其中 上述光電二極體、上述像素信號產生部及上述檢測部配置於複數個像素之各者；且 上述像素信號產生部具備： 像素電路，其產生類比之上述像素信號；及 類比數位轉換器，其將上述像素信號轉換成數位信號並輸出。 (9)如上述(1)至(7)中任一項記載之固體攝像元件，其進而具備： 類比數位轉換器，其將類比之上述像素信號轉換成數位信號； 上述光電二極體、上述像素信號產生部及上述檢測部配置於複數個像素之各者； 上述像素信號產生部產生類比之上述像素信號並向上述類比數位轉換器輸出。 (10)如上述(1)至(9)中任一項記載之固體攝像元件，其中 上述像素信號產生部具備： 電荷蓄積部，其蓄積上述電子及上述電洞之一者之電荷； 浮動擴散層，其蓄積上述電荷並轉換成對應於該電荷量之上述電壓； 第1傳送電晶體，其自上述光電二極體向電荷蓄積部傳送上述電荷；及 第2傳送電晶體，其自上述電荷蓄積部向上述浮動擴散層傳送上述電荷。 (11)如上述(1)至(10)中任一項記載之固體攝像元件，其中 上述檢測部具備： 轉換部，其將包含上述電子及上述電洞之另一者之光電流轉換成電壓； 減法器，其藉由減法求出上述電壓之變化量；及 比較器，其比較上述變化量與上述閾值，並將該比較結果輸出為上述檢測信號。 (12)如上述(11)記載之固體攝像元件，其中 上述檢測部進而具備：緩衝器，其將來自上述轉換部之上述電壓之信號輸出至上述減法器。 (13)如上述(11)或(12)記載之固體攝像元件，其中 上述轉換部具備複數段之環狀電路；且 上述複數段之環狀電路各自包含連接成環狀之一對電晶體。 (14)如上述(11)或(12)記載之固體攝像元件，其中 上述轉換部具備： 一對電晶體，其連接成環狀；及 電容，其連接於上述一對電晶體各者之閘極。 (15)一種攝像裝置，其具備： 光電二極體，其藉由光電轉換產生電子及電洞； 像素信號產生部，其產生對應於上述電子及上述電洞之一者之量之電壓的像素信號； 檢測部，其檢測上述電子及上述電洞之另一者之變化量是否超過特定之閾值並輸出檢測信號；及 數位信號處理部，其對上述檢測信號及上述像素信號進行特定之處理。 (16)一種固體攝像元件之控制方法，其具備： 像素信號產生程序，其產生對應於藉由光電轉換產生之電子及電洞之一者之量之電壓的像素信號；及 檢測程序，其檢測上述電子及上述電洞之另一者之變化量是否超過特定之閾值並輸出檢測信號。
100‧‧‧攝像裝置 110‧‧‧光學部 120‧‧‧DSP電路 130‧‧‧顯示部 140‧‧‧操作部 150‧‧‧匯流排 160‧‧‧訊框記憶體 170‧‧‧記憶部 180‧‧‧電源部 200‧‧‧固體攝像元件 201‧‧‧受光晶片 202‧‧‧電路晶片 209‧‧‧信號線 211‧‧‧DAC 212‧‧‧驅動電路 213‧‧‧X仲裁器 215‧‧‧控制電路 216‧‧‧Y仲裁器 230‧‧‧時刻編碼產生部 240‧‧‧像素陣列部 241‧‧‧時刻編碼傳送部 250‧‧‧行處理部 260‧‧‧行ADC 300‧‧‧像素 305‧‧‧光電二極體 306‧‧‧N層 307‧‧‧P層 310‧‧‧像素信號產生部 311‧‧‧負載MOS電路 320‧‧‧ADC 321‧‧‧比較電路 330‧‧‧像素電路 331‧‧‧排出電晶體 332‧‧‧傳送電晶體 333‧‧‧重設電晶體 334‧‧‧浮動擴散層 335‧‧‧放大電晶體 336‧‧‧選擇電晶體 337‧‧‧傳送電晶體 338‧‧‧類比電晶體 340‧‧‧差動輸入電路 341‧‧‧PMOS電晶體 342‧‧‧PMOS電晶體 343～345‧‧‧NMOS電晶體 350‧‧‧電壓轉換電路 360‧‧‧正反饋電路 370‧‧‧資料記憶部 400‧‧‧位址事件檢測部 410‧‧‧對數轉換部 411‧‧‧PMOS電晶體 412‧‧‧PMOS電晶體 413‧‧‧NMOS電晶體 414‧‧‧PMOS電晶體 415‧‧‧PMOS電晶體 416‧‧‧電容 420‧‧‧減法器 421‧‧‧電容 422‧‧‧放大器 423‧‧‧電容 424‧‧‧開關 430‧‧‧比較器 440‧‧‧AER邏輯電路 450‧‧‧緩衝器 451‧‧‧NMOS電晶體 452‧‧‧NMOS電晶體 12000‧‧‧車輛控制系統 12001‧‧‧通信網路 12010‧‧‧驅動系統控制單元 12020‧‧‧車體系統控制單元 12030‧‧‧車外資訊檢測單元 12031‧‧‧攝像部 12040‧‧‧車內資訊檢測單元 12041‧‧‧駕駛者狀態檢測部 12050‧‧‧綜合控制單元 12051‧‧‧微電腦 12052‧‧‧聲音圖像輸出部 12053‧‧‧車載網路I/F 12061‧‧‧擴音器 12062‧‧‧顯示部 12063‧‧‧儀表板 12100‧‧‧車輛 12101‧‧‧攝像部 12102‧‧‧攝像部 12103‧‧‧攝像部 12104‧‧‧攝像部 12105‧‧‧攝像部 12111‧‧‧攝像範圍 12112‧‧‧攝像範圍 12113‧‧‧攝像範圍 12114‧‧‧攝像範圍 e-‧‧‧電子 h+‧‧‧電洞 OFG‧‧‧驅動信號 P1～Pn‧‧‧像素 REF‧‧‧參照信號 RST‧‧‧重設信號 RST1～RSTn‧‧‧重設信號 S911～S915‧‧‧步驟 S921～S925‧‧‧步驟 SEL‧‧‧選擇信號 SIG‧‧‧像素信號 T1～T4‧‧‧時序 T10～T12‧‧‧時序 T20‧‧‧時序 T21‧‧‧時序 TRG‧‧‧傳送信號 Vboff‧‧‧下限閾值 Vbon‧‧‧上限閾值 VCO‧‧‧輸出信號 VCH‧‧‧檢測結果 VCL‧‧‧檢測結果 VSL‧‧‧垂直信號線 VSYNC‧‧‧垂直同步信號 xrst‧‧‧重設信號
圖1係顯示本技術之第1實施形態中之攝像裝置之一構成例的方塊圖。 圖2係顯示本技術之第1實施形態中之固體攝像元件之一構成例的方塊圖。 圖3係顯示本技術之第1實施形態中之像素陣列部之一構成例的方塊圖。 圖4係顯示本技術之第1實施形態中之像素之一構成例的方塊圖。 圖5a、b係本技術之第1實施形態與比較例中之光電二極體之剖視圖之一例。 圖6係顯示本技術之第1實施形態中之像素信號產生部之一構成例的方塊圖。 圖7係顯示本技術之第1實施形態中之位址事件檢測部之一構成例的方塊圖。 圖8係顯示本技術之第1實施形態中之像素之一構成例之電路圖。 圖9係顯示本技術之第1實施形態中之攝像處理之一例的流程圖。 圖10係顯示本技術之第1實施形態中之AER(Address Event Representation：位址事件表現)處理之一例的流程圖。 圖11係顯示本技術之第2實施形態中之積層構造之一例的圖。 圖12係顯示本技術之第2實施形態中之像素之一構成例的電路圖。 圖13係顯示本技術之第2實施形態之變化例中之像素之一構成例的電路圖。 圖14係顯示本技術之第3實施形態中之像素之驅動方法之一例的時序圖。 圖15係顯示本技術之第3實施形態之第1變化例中之像素之驅動方法之一例的時序圖。 圖16係顯示本技術之第3實施形態之第2變化例中之固體攝像元件之一構成例的方塊圖。 圖17係顯示本技術之第3實施形態之第2變化例中之像素之一構成例的方塊圖。 圖18係顯示本技術之第4實施形態中之像素之一構成例的電路圖。 圖19係顯示本技術之第5實施形態中之位址事件檢測部之一構成例的電路圖。 圖20係顯示本技術之第6實施形態中之對數轉換部之一構成例的電路圖。 圖21係顯示本技術之第7實施形態中之對數轉換部之一構成例的電路圖。 圖22係顯示車輛控制系統之概略構成之一例的方塊圖。 圖23係顯示車外資訊檢測部及攝像部之設置位置之一例的說明圖。
100‧‧‧攝像裝置
110‧‧‧光學部
120‧‧‧DSP電路
130‧‧‧顯示部
140‧‧‧操作部
150‧‧‧匯流排
160‧‧‧訊框記憶體
170‧‧‧記憶部
180‧‧‧電源部
200‧‧‧固體攝像元件
209‧‧‧信號線
VSYNC‧‧‧垂直同步信號

Claims (16)

  1. 一種固體攝像元件，其具備：光電二極體，其藉由光電轉換產生電子及電洞；檢測部，其檢測上述電子及上述電洞之一者之變化量是否超過特定之閾值並輸出檢測信號；及像素信號產生部，其基於檢測出上述電子及上述電洞之一者之上述變化量超過上述特定之閾值而產生電壓的像素信號，其中上述電壓的上述像素信號對應於上述電子及上述電洞之一者之量而產生。
  2. 如請求項1之固體攝像元件，其中上述像素信號產生部產生對應於上述電子之量之電壓的上述像素信號；且上述檢測部檢測上述電洞之變化量是否超過上述特定之閾值。
  3. 如請求項1之固體攝像元件，其中上述光電二極體與上述像素信號產生部之一部分配置於特定之受光晶片；且上述像素信號產生部之剩餘者與上述檢測部配置於特定之電路晶片。
  4. 如請求項3之固體攝像元件，其中上述像素信號產生部具備： 像素電路，其產生上述像素信號；及比較電路，其比較上述像素信號與特定之參照信號；且其中上述光電二極體、上述像素電路及上述比較電路之一部分配置於上述特定之受光晶片；其中上述比較電路之剩餘者與上述檢測部配置於上述特定之電路晶片。
  5. 如請求項3之固體攝像元件，其中上述像素信號產生部具備：像素電路，其產生上述像素信號；及比較電路，其比較上述像素信號與特定之參照信號；且其中上述光電二極體及上述像素電路配置於上述特定之受光晶片；其中上述比較電路及上述檢測部配置於上述特定之電路晶片。
  6. 如請求項1之固體攝像元件，其中進而具備：驅動部，其驅動上述像素信號產生部而產生上述像素信號。
  7. 如請求項1之固體攝像元件，其中具備：行處理部，其對上述像素信號進行特定之信號處理並輸出；及控制電路，其於特定之曝光期間內，檢測出上述變化量超過上述特定之閾值之主旨之情形時，控制上述行處理部並輸出上述像素信號。
  8. 如請求項1之固體攝像元件，其中 上述光電二極體、上述像素信號產生部及上述檢測部配置於複數個像素之各者；且上述像素信號產生部具備：像素電路，其產生上述像素信號；及類比數位轉換器，其將上述像素信號轉換成數位信號並輸出。
  9. 如請求項1之固體攝像元件，其中進而具備：類比數位轉換器，其將上述像素信號轉換成數位信號；上述光電二極體、上述像素信號產生部及上述檢測部配置於複數個像素之各者；上述像素信號產生部產生上述像素信號作為類比像素信號並向上述類比數位轉換器輸出上述類比像素信號。
  10. 如請求項1之固體攝像元件，其中上述像素信號產生部具備：電荷蓄積部，其蓄積上述電子及上述電洞之一者之電荷；浮動擴散層，其蓄積上述電荷並轉換成對應於該電荷量之上述電壓；第1傳送電晶體，其自上述光電二極體向電荷蓄積部傳送上述電荷；及第2傳送電晶體，其自上述電荷蓄積部向上述浮動擴散層傳送上述電荷。
  11. 如請求項1之固體攝像元件，其中 上述檢測部具備：轉換部，其將包含上述電子及上述電洞之一者之光電流轉換成上述電壓；減法器，其藉由減法求出上述電壓之上述變化量；及比較器，其比較上述變化量與上述特定之閾值，並將該比較結果作為上述檢測信號而輸出。
  12. 如請求項11之固體攝像元件，其中上述檢測部進而具備：緩衝器，其將來自上述轉換部之上述電壓之信號輸出至上述減法器。
  13. 如請求項11之固體攝像元件，其中上述轉換部具備複數段之環狀電路；且上述複數段之上述環狀電路各自包含連接成環狀之一對電晶體。
  14. 如請求項11之固體攝像元件，其中上述轉換部具備：一對電晶體，其連接成環狀；及電容，其連接於上述一對電晶體各者之閘極。
  15. 一種攝像裝置，其具備：光電二極體，其藉由光電轉換產生電子及電洞；像素信號產生部，其產生對應於上述電子及上述電洞之一者之量之 電壓的像素信號；檢測部，其檢測上述電子及上述電洞之一者之變化量是否超過特定之閾值並輸出檢測信號；數位信號處理部，其對上述檢測信號及上述像素信號進行特定之處理；特定之受光晶片，其具有配置於其上之上述光電二極體及上述像素信號產生部之一部份；及特定之電路晶片，其具有配置於其上之上述像素信號產生部之剩餘者及上述檢測部。
  16. 一種固體攝像元件之控制方法，其具備：檢測藉由光電轉換產生之電子及電洞之一者之變化量是否超過特定之閾值；及基於檢測出上述電子及上述電洞之一者之上述變化量超過上述特定之閾值而產生電壓的像素信號，其中上述電壓的上述像素信號對應於藉由上述光電轉換產生之上述電子及上述電洞之一者之量而產生。
TW108119435A 2018-06-12 2019-06-05 固體攝像元件、攝像裝置及固體攝像元件之控制方法 TWI838375B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-111505 2018-06-12
JP2018111505 2018-06-12

Publications (2)

Publication Number Publication Date
TW202001841A TW202001841A (zh) 2020-01-01
TWI838375B true TWI838375B (zh) 2024-04-11

Family

ID=

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170323912A1 (en) 2015-03-23 2017-11-09 Tower Semiconductor Ltd. Image Sensor Pixel With Memory Node Having Buried Channel And Diode Portions Formed On N-Type Substrate

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170323912A1 (en) 2015-03-23 2017-11-09 Tower Semiconductor Ltd. Image Sensor Pixel With Memory Node Having Buried Channel And Diode Portions Formed On N-Type Substrate

Similar Documents

Publication Publication Date Title
TWI820078B (zh) 固體攝像元件
JP7307725B2 (ja) 固体撮像素子、撮像装置、および、固体撮像素子の制御方法
US11832013B2 (en) Solid-state image sensor, imaging device, and method of controlling solid-state image sensor
CN112913224B (zh) 固态成像元件和成像装置
JP7181868B2 (ja) アナログデジタル変換器、固体撮像素子、および、アナログデジタル変換器の制御方法
JP2022028982A (ja) 固体撮像装置、信号処理チップ、および、電子機器
WO2020158583A1 (ja) 固体撮像装置及び撮像装置
JP2019195135A (ja) 固体撮像素子および撮像装置
WO2020105313A1 (ja) 固体撮像素子、および、撮像装置
TWI788818B (zh) 攝像裝置及攝像方法
JP2020161993A (ja) 撮像システム及び物体認識システム
JP2020127186A (ja) 固体撮像装置及び撮像装置
JP2020099015A (ja) センサ及び制御方法
WO2020195822A1 (ja) 撮像システム
TWI838375B (zh) 固體攝像元件、攝像裝置及固體攝像元件之控制方法
WO2021153428A1 (ja) 撮像装置、電子機器及び撮像方法
US11356656B2 (en) Signal processing device, signal processing method, and signal processing system
JP2021197649A (ja) 固体撮像素子、および、撮像装置
JP7129983B2 (ja) 撮像装置
KR102673021B1 (ko) 고체 촬상 소자, 촬상 장치 및 고체 촬상 소자의 제어 방법
WO2022065032A1 (ja) 撮像装置及び撮像方法
TW202205645A (zh) 固態攝像裝置