TWI820863B - 一種evs圖元工作方法及相關裝置 - Google Patents
一種evs圖元工作方法及相關裝置 Download PDFInfo
- Publication number
- TWI820863B TWI820863B TW111130781A TW111130781A TWI820863B TW I820863 B TWI820863 B TW I820863B TW 111130781 A TW111130781 A TW 111130781A TW 111130781 A TW111130781 A TW 111130781A TW I820863 B TWI820863 B TW I820863B
- Authority
- TW
- Taiwan
- Prior art keywords
- voltage
- evs
- change value
- output
- moment
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 230000008859 change Effects 0.000 claims abstract description 79
- 230000010354 integration Effects 0.000 claims abstract description 51
- 230000004044 response Effects 0.000 claims abstract description 15
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 20
- 238000005070 sampling Methods 0.000 claims description 17
- 238000004364 calculation method Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 12
- 230000009467 reduction Effects 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 9
- 239000003990 capacitor Substances 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000003199 nucleic acid amplification method Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/749—Circuitry for compensating brightness variation in the scene by influencing the pick-up tube voltages
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Electrical Discharge Machining, Electrochemical Machining, And Combined Machining (AREA)
- Manufacturing Of Printed Wiring (AREA)
- Studio Devices (AREA)
- Facsimile Scanning Arrangements (AREA)
Abstract
本發明提供了一種EVS圖元工作方法及相關裝置,該方法包括:在第一時刻對EVS圖元回應於入射光強度生成的輸出電壓進行記錄,得到第一電壓;以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值;將電壓變化值與預設電壓閾值範圍進行比較,並在電壓變化值超出電壓閾值範圍時輸出事件信號。通過本發明方案的實施,在一定時長內對EVS圖元回應於光強變化所產生的電壓變化值進行積分,以對電壓變化值進行放大處理,能夠更清楚的表示電壓變化是正向增加還是反向減小,有效保證了EVS圖像感測器輸出事件信號的準確性。
Description
本發明屬於感測器技術領域,尤其關於一種EVS圖元工作方法及相關裝置。
隨著科學技術的不斷發展,電腦視覺技術也越來越成熟。事件型圖像感測器(EVS,Event-based Vision Sensor)的出現,在視覺領域引來了越來越多的關注。它模擬人類的視網膜,響應由於運動產生的亮度變化的圖元點脈衝,因此它能夠以極高的幀率捕獲場景的亮度變化,記錄特定時間點和圖像中特定位置的事件,形成事件流而不是幀流,從而解決了傳統相機資訊冗餘、大量資料存儲和即時處理等問題。然而,目前的EVS圖像感測器出於電路之間存在雜訊、失調等因素會導致電壓變化量的精度較為有限,進而可能導致事件信號輸出錯誤。
本發明實施例提供了一種EVS圖元工作方法及相關裝置,至少能夠解決相關技術所提供的EVS圖像感測器輸出事件信號的準確性較差的問題。
本發明實施例第一方面提供了一種EVS圖元工作方法,應用於EVS圖元,該EVS圖元工作方法包括:
在第一時刻對該EVS圖元回應於入射光強度生成的輸出電壓進行記錄,得到第一電壓;以該第一電壓為參考電壓,在該第一時刻之後的預設積分時長內對該輸出電壓進行積分,得到電壓變化值;將該電壓變化值與預設電壓閾值範圍進行比較,並在該電壓變化值超出該電壓閾值範圍時輸出事件信號。
本發明實施例第二方面提供了一種EVS圖元,包括:輸入單元、採樣單元、積分單元、比較單元以及輸出單元;其中,該輸入單元用於回應於入射光強度生成輸出電壓;該採樣單元用於將第一時刻的該輸出電壓記錄為第一電壓;該積分單元用於以該第一電壓為參考電壓,在該第一時刻之後的預設積分時長內對該輸出電壓進行積分,得到電壓變化值;該比較單元用於將該電壓變化值與預設電壓閾值範圍進行比較;該輸出單元用於在該電壓變化值超出該電壓閾值範圍時輸出事件信號。
本發明實施例第三方面提供了一種終端設備,包括:記憶體及處理器,其中,處理器用於執行存儲在記憶體上的電腦程式,處理器執行電腦程式時,實現上述本發明實施例第一方面提供的EVS圖元工作方法中的各步驟。
本發明實施例第四方面提供了一種電腦可讀存儲介質,其上存儲有電腦程式,電腦程式被處理器執行時,實現上述本發明實施例第一方面提供的EVS圖元工作方法中的各步驟。
由上可見,根據本發明方案所提供的EVS圖元工作方法及相關裝置,在第一時刻對EVS圖元回應於入射光強度生成的輸出電壓進行記錄,得到第
一電壓;以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值;將電壓變化值與預設電壓閾值範圍進行比較,並在電壓變化值超出電壓閾值範圍時輸出事件信號。通過本發明方案的實施,在一定時長內對EVS圖元回應於光強變化所產生的電壓變化值進行積分,以對電壓變化值進行放大處理,能夠更清楚的表示電壓變化是正向增加還是反向減小,有效保證了EVS圖像感測器輸出事件信號的準確性。
101-103:步驟
30:EVS圖元
31:輸入單元
32:採樣單元
33:積分單元
34:比較單元
35:輸出單元
36:第一開關
37:第二開關
331:回饋電容
332:運算放大器
501:記憶體
502:處理器
503:電腦程式
圖1為本發明第一實施例提供的一種EVS圖元工作方法的基礎流程示意圖;圖2為本發明第一實施例提供的一種階躍信號的示意圖;圖3為本發明第二實施例提供的一種EVS圖元的結構示意圖;圖4為本發明第二實施例提供的一種信號變化示意圖;圖5為本發明第三實施例提供的終端設備的結構示意圖。
為利 貴審查委員瞭解本發明之技術特徵、內容與優點及其所能達到之功效,茲將本發明配合附圖及附件,並以實施例之表達形式詳細說明如下,而其中所使用之圖式,其主旨僅為示意及輔助說明書之用,未必為本發明實施後之真實比例與精準配置,故不應就所附之圖式的比例與配置關係解讀、侷限本發明於實際實施上的申請範圍,合先敘明。
在本發明實施例的描述中,需要理解的是,術語“長度”、“寬度”、“上”、“下”、“前”、“後”、“左”、“右”、“豎直”、“水準”、“頂”、“底”“內”、“外”等指示的方位或位置關係為基於附圖所示的方位或位置關係,僅是為了便於描述本發明實施例和簡化描述,而不是指示或暗示所指的裝置或元件必須具有特定的方位、以特定的方位構造和操作,因此不能理解為對本發明的限制。
此外,術語“第一”、“第二”僅用於描述目的,而不能理解為指示或暗示相對重要性或者隱含指明所指示的技術特徵的數量。由此,限定有“第一”、“第二”的特徵可以明示或者隱含地包括一個或者更多個所述特徵。在本發明實施例的描述中,“多個”的含義是兩個或兩個以上,除非另有明確具體的限定。
在本發明實施例中,除非另有明確的規定和限定,術語“安裝”、“相連”、“連接”、“固定”等術語應做廣義理解,例如,可以是固定連接,也可以是可拆卸連接,或成一體;可以是機械連接,也可以是電連接;可以是直接相連,也可以通過中間媒介間接相連,可以是兩個元件內部的連通或兩個元件的相互作用關係。對於本領域的具通常知識者而言,可以根據具體情況理解上述術語在本發明實施例中的具體含義。
以上所述僅為本發明的較佳實施例而已,並不用以限制本發明,凡在本發明的精神和原則之內所作的任何修改、等同替換和改進等,均應包含在本發明的保護範圍之內。
為瞭解決相關技術中所提供的EVS圖像感測器輸出事件信號的準確性較差的問題,本發明第一實施例提供了一種EVS圖元工作方法,應用於EVS
圖元,EVS圖像感測器包括多個EVS圖元組成的圖元陣列,如圖1為本實施例提供的EVS圖元工作方法的基礎流程示意圖,該EVS圖元工作方法包括以下的步驟:
步驟101:在第一時刻對EVS圖元回應於入射光強度生成的輸出電壓進行記錄,得到第一電壓。
具體的,在本實施例中,EVS圖元陣列中每個EVS圖元均為積體電路,在該積體電路中,光電二極體可與集聚電荷的電容器集成,其回應於入射光強度而由光電二極體生成電信號,該電信號包括電流信號或電壓信號,若為電流信號,則進一步由電流/電壓轉換單元將光電流轉換為對數電壓,也即實現電流信號至電壓信號的轉換。
步驟102:以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值。
具體的,在相關技術中,通常是將下一時刻的電壓直接與前一時刻所採樣的電壓直接進行作差而得到電壓變化值,該電壓變化值的數值精度通常較為有限,由此,本實施例採用積分方式來獲取放大後的電壓變化值,以提高電壓變化值的數值精度。
在本實施例一種可選實施方式中,上述以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值的步驟之前,還包括:獲取EVS圖像感測器的圖像品質需求指標;基於圖像品質需求指標設定積分時長。
具體的,本實施例的積分時長可視實際使用需求而定,上述圖像品質需求指標包括以下至少一種:圖像輸出幀率、圖像解析度等。在實際應用中,
積分時長越長意味著輸出單幀事件圖像的耗時越長,從而圖像輸出幀率越低,與此同時,所得事件圖像的圖像細節愈發豐富,也即解析度越高,由此可見,積分時長與圖像輸出幀率負相關,且積分時長與圖像解析度正相關。本實施例通過靈活設定積分時長,可有效保證不同圖像品質需求以及回應速度需求。
在本實施例一種可選實施方式中,上述以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值的步驟,包括:採用預設第一積分計算公式,以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值。
應當說明的是,執行積分操作的積分單元中設置有運算放大器,當運算放大器輸入端與輸出端電流相等時,滿足如下公式:
進一步地,可以根據上式推理得到第一積分計算公式:
其中,V out 表示電壓變化值,V A (t)表示t時刻的輸出電壓,V 1 表示第一電壓,t1表示第一時刻,t2表示自第一時刻經過積分時長之後到達的第二時刻,R、C為時間常數。
本實施例另一種可選實施方式中,上述以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值的步驟,包括:若第一電壓為第二電壓的階躍信號,則採用預設第二積分計算公式,以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積
分,得到電壓變化值;如圖2所示為本實施例提供的一種階躍信號的示意圖,表示在第一時刻的輸出電壓是幅度為V 2 的階躍信號。
具體的,第二積分計算公式表示為:V out =V 1 -(V 2 -V 1 )△t/RC,其中,V out 表示電壓變化值,V 1 表示第一電壓,V 2 表示t2時刻的第二電壓,t1表示第一時刻,t2表示自第一時刻經過積分時長之後到達的第二時刻,R、C為時間常數,△t表示積分時長,△t=t2-t1。
進一步地,本實施例一種可選實施方式中,該EVS圖元工作方法還包括:對EVS圖元在當前時刻之前單位時長內的事件信號產生率進行統計;根據事件信號產生率超出預設產生率閾值範圍,則根據事件信號產生率對時間常數進行相應調整。
具體的,本實施例的事件信號產生率也即EVS圖元在特定時長內輸出的事件量的水準,在本實施例中,考慮到積分參數設置不合理可能導致電壓變化量放大倍數不夠或放大倍數過大,而導致事件信號輸出的準確性依舊得不到保證,基於此,即時對歷史事件信號輸出水準進行評估,以確定事件信號輸出行為是否正常,若否,則通過調整上述積分模型的時間常數R和/或C,以對積分操作進行修正,以保證事件信號準確輸出。
步驟103:將電壓變化值與預設電壓閾值範圍進行比較,並在電壓變化值超出電壓閾值範圍時輸出事件信號。
具體的,在本實施例中,每個EVS圖元的事件信號均為一個二值向量(即2bit向量),該2bit向量用於表徵入射光是變強還是變弱。應當說明的是,本實施例的電壓閾值範圍由第一電壓閾值和第二電壓閾值限定,第一電壓閾
值大於0,第二電壓閾值小於0,優選的,第一電壓閾值與第二電壓閾值可以互為相反數,例如第一電壓閾值的取值為0.1V,那麼第二電壓閾值的取值則為-0.1V,兩者所限定的電壓閾值範圍為[-0.1,0.1]。在實際應用中,電壓變化值超出電壓閾值範圍的情況包括一下兩種:當上述電壓變化值大於第一電壓閾值時,表明圖像感測器檢測到光強變強,輸出2bit向量[1,0],也即UP事件信號;當上述電壓變化值小於第二電壓閾值時,表明圖像感測器檢測到光強變弱,輸出2bit向量[0,1],也即DN事件信號。
在本實施例一種可選實施方式中,上述將電壓變化值與預設電壓閾值範圍進行比較的步驟之後,還包括:若電壓變化值未超出電壓閾值範圍,則對EVS圖元在當前時刻之前單位時長內的事件信號產生率進行統計;當事件信號產生率低於預設第一產生率閾值時,對參考電壓進行更新。
具體的,在實際應用中,若在第一時刻經過積分時長後所到達的第二時刻輸出事件信號,則需要對參考電壓進行更新,例如將參考電壓更新為第二時刻的輸出電壓,也即將記錄的第一電壓更新為第二電壓,若在第二時刻未輸出事件信號,則可以選擇不更新參考電壓。然而,若在實際應用場景下EVS圖元可能存在長時間無法生成事件信號的情況,無法保證事件圖像正常輸出,在這種場景下,本實施例可以在根據事件信號產生率統計結果確定長時無事件信號生成時,主動選擇更新參考電壓,以在後續感測器工作過程中調整進行閾值比較的電壓變化值,動態調高EVS圖元對光強變化的敏感度,以提高事件信號產生率。另外,還應當說明的是,在實際應用中,除了採用前述更新參考電壓的方式,本實施例還可以採用更新電壓閾值範圍的方式以提高事件信號產生率,本實施例對此不做唯一限定。
在本實施例另一種可選實施方式中,上述在電壓變化值超出電壓閾值範圍時輸出事件信號的步驟之後,還包括:對EVS圖元在當前時刻之前單位時長內的事件信號產生率進行統計;當事件信號產生率高於預設第二產生率閾值時,對參考電壓進行更新。
具體的,在實際應用中,EVS圖像感測器產生的資料是一種非同步事件流,而不是傳統圖像的幀流,事件流雖然有著高時間解析度的優點,但也可能由於事件流資料傳輸出現錯誤或資料超載,導致事件相機讀出緩慢甚至錯誤,從而在一種解決方案中,當歷史時長內事件產生率較大而可能出現資料超載時,也可以對參考電壓進行更新,動態調低EVS圖元對光強變化的敏感度,以過濾低頻信號,限制後續單位時間內事件的產生率,達到控制頻寬的效果。
基於上述本發明實施例的技術方案,在第一時刻對EVS圖元回應於入射光強度生成的輸出電壓進行記錄,得到第一電壓;以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值;將電壓變化值與預設電壓閾值範圍進行比較,並在電壓變化值超出電壓閾值範圍時輸出事件信號。通過本發明方案的實施,在一定時長內對EVS圖元回應於光強變化所產生的電壓變化值進行積分,以對電壓變化值進行放大處理,能夠更清楚的表示電壓變化是正向增加還是反向減小,有效保證了EVS圖像感測器輸出事件信號的準確性。
圖3為本發明第二實施例提供的一種EVS圖元的結構示意圖。該EVS圖元可用於實現前述實施例中的EVS圖元工作方法。如圖3所示,該EVS圖元30主要包括:輸入單元31、採樣單元32、積分單元33、比較單元34以及輸出單元35;其中,
輸入單元31用於回應於入射光強度生成輸出電壓;採樣單元32用於將第一時刻的輸出電壓記錄為第一電壓;積分單元33用於以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值;比較單元34用於將電壓變化值與預設電壓閾值範圍進行比較;輸出單元35用於在電壓變化值超出電壓閾值範圍時輸出事件信號。
具體的,在本實施例中,輸入單元包括光電轉換器件,其可以為光電二極體、光電電晶體、鉗位光電二極體或任何其他類似器件,輸入單元還可以包括電流/電壓轉換單元,其被配置為將入射光對應的光電流轉換成對數電壓。採樣單元內設置有採樣電容,採樣單元對輸入單元上一時刻生成的輸出電壓進行採樣並存儲在採樣電容中。另外,EVS圖元還可以包括電壓緩衝器,其分別與輸入單元和積分單元連接,被配置為將輸入單元的電壓傳輸至積分單元。
請再次參閱圖3,在本實施例的一種可選實施方式中,輸入單元31與採樣單元32之間設置有第一開關36,積分單元33包括回饋電容331以及運算放大器332,運算放大器包括第一輸入端、第二輸入端以及輸出端,第一輸入端與輸入單元31連接,第二輸入端與採樣單元32連接,輸出端與比較單元34連接,第一輸入端與輸出端之間設置有第二開關37,比較單元34與輸出單元35連接;其中,在第一時刻之前,第一開關36以及第二開關37均處於閉合狀態;在第一時刻,第一開關36進入斷開狀態;在第一時刻之後,第二開關37進入斷開狀態,以及在積分時長到達時,第二開關37進入閉合狀態。
具體的,假設在t1時刻之前,第一開關和第二開關都閉合,回饋電容被短路,積分單元處於重定模式;在t1時刻,圖元進行採樣,假設對入射光
進行光電轉換在A點形成電壓為V 1 ,即V A =V 1 ,第一開關斷開,電壓V 1 被存入採樣單元中;第二開關隨即被斷開,積分單元開始對V A 積分,運算放大器332放大倍數足夠大導致輸入端虛短,滿足B點和C點的電壓為V 1 ;t2時刻,入射光對應的電壓為V 2 ,即V A =V 2 ,第二開關閉合,積分單元停止積分並將其重定,積分單元將積分所得電壓V out 與預設電壓閾值範圍進行比較,根據比較結果輸出事件。傳統的EVS圖像感測器通常將該比較結果直接與設定的閾值進行比較,從而輸出事件信號(即,UP事件或DN事件),這種方法會由於比較結果的數值精度不夠造成輸出事件的精度不夠。而在本實施例中,將通過第二開關對原始比較結果進行積分,積分時間可以根據需求設置,由於積分能夠將該比較結果進行放大,從而可以提高輸出事件的精度。
在本實施例中,根據運算放大器332左右兩端的電流相等,可滿足下列公式:
進一步地,可以根據上式推理得到第一積分計算公式:
若在第一時刻的輸出電壓是幅度為V 2 的階躍信號,則上述第一積分計算公式可以轉換為第二積分計算公式:V out =V 1 -(V 2 -V 1 )△t/RC,
其中,V out 表示電壓變化值,V A (t)表示t時刻的輸出電壓,V 1 表示第一電壓,V 2 表示t2時刻的第二電壓,t1表示第一時刻,t2表示自第一時刻經過積分時長之後到達的第二時刻,R、C為時間常數,△t表示積分時長,△t=t2-t1。
如圖4所示為本實施例提供的一種信號變化示意圖,t1時刻,EVS圖元進行採樣,假設入射光對應的電壓為V 1 ,輸出單元的輸出電壓記為V A ,V A =V 1 ,第一開關斷開,電壓V 1 被存入採樣單元中;第二開關隨即被斷開,積分單元開始對V A 積分,運算放大器放大倍數足夠大導致輸入端虛短,滿足V +=V -=V 1 (即,B點和C點的電壓為V 1 );t2時刻,入射光對應的電壓為V 2 ,且V A =V 2 ,第二開關閉合,積分單元停止積分並將其復位,積分時間為t(即,t2-t1),根據第一積分計算公式輸出V out ,將V out 與預先設定的閾值通過比較器進行比較,並根據比較結果輸出相應的事件信號,若V A (t)>V 1 ,即V out <V 1 ,則輸出UP事件;若V A (t)<V 1 ,V out >V 1 ,則輸出DN事件。根據第二積分計算公式可以知道,當V 2 >V 1 時,V out <V 1 ,輸出UP事件;而當V 2 <V 1 時,V out >V 1 ,輸出DN事件。可以理解的是,積分時間t後,第二開關閉合,重定回饋電容的電壓,再繼續對下一時刻的電壓變化量進行積分,每次積分的時間可以根據需求設定。
應當說明的是,第一實施例中的EVS圖元工作方法均可基於本實施例提供的EVS圖元實現,所屬領域的具通常知識者可以清楚的瞭解到,為描述的方便和簡潔,本實施例中所描述的EVS圖元的具體工作過程,可以參考前述方法實施例中的對應過程,在此不再贅述。
根據本實施例所提供的EVS圖元,在第一時刻對EVS圖元回應於入射光強度生成的輸出電壓進行記錄,得到第一電壓;以第一電壓為參考電壓,在第一時刻之後的預設積分時長內對輸出電壓進行積分,得到電壓變化值;將電
壓變化值與預設電壓閾值範圍進行比較,並在電壓變化值超出電壓閾值範圍時輸出事件信號。通過本發明方案的實施,在一定時長內對EVS圖元回應於光強變化所產生的電壓變化值進行積分,以對電壓變化值進行放大處理,能夠更清楚的表示電壓變化是正向增加還是反向減小,有效保證了EVS圖像感測器輸出事件信號的準確性。
圖5為本發明第三實施例提供的一種終端設備。該終端設備可用於實現前述實施例中的EVS圖元工作方法,主要包括:記憶體501、處理器502及存儲在記憶體501上並可在處理器502上運行的電腦程式503,記憶體501和處理器502通過通信連接。處理器502執行該電腦程式503時,實現前述實施例一中的方法。其中,處理器的數量可以是一個或多個。
記憶體501可以是高速隨機存取記憶體(RAM,Random Access Memory)記憶體,也可為非不穩定的記憶體(non-volatile memory),例如磁碟記憶體。記憶體501用於存儲可執行程式碼,處理器502與記憶體501耦合。
進一步的,本發明實施例還提供了一種電腦可讀存儲介質,該電腦可讀存儲介質可以是設置於上述各實施例中的電子裝置中,該電腦可讀存儲介質可以是前述圖5所示實施例中的記憶體。
該電腦可讀存儲介質上存儲有電腦程式,該程式被處理器執行時實現前述實施例中的EVS圖元工作方法。進一步的,該電腦可存儲介質還可以是USB碟、行動硬碟、唯讀記憶體(ROM,Read-Only Memory)、RAM、磁碟或者光碟等各種可以存儲程式碼的介質。
在本發明所提供的幾個實施例中,應該理解到,所揭露的裝置和方法,可以通過其它的方式實現。例如,以上所描述的裝置實施例僅僅是示意性
的,例如,模組的劃分,僅僅為一種邏輯功能劃分,實際實現時可以有另外的劃分方式,例如多個模組或元件可以結合或者可以集成到另一個系統,或一些特徵可以忽略,或不執行。另一點,所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些介面,裝置或模組的間接耦合或通信連接,可以是電性,機械或其它的形式。
作為分離部件說明的模組可以是或者也可以不是實體上分開的,作為模組顯示的部件可以是或者也可以不是實體模組,即可以位於一個地方,或者也可以分佈到多個網路模組上。可以根據實際的需要選擇其中的部分或者全部模組來實現本實施例方案的目的。
另外,在本發明各個實施例中的各功能模組可以集成在一個處理模組中,也可以是各個模組單獨實體存在,也可以兩個或兩個以上模組集成在一個模組中。上述集成的模組既可以採用硬體的形式實現,也可以採用軟體功能模組的形式實現。
集成的模組如果以軟體功能模組的形式實現並作為獨立的產品銷售或使用時,可以存儲在一個電腦可讀取存儲介質中。基於這樣的理解,本發明的技術方案本質上或者說對現有技術做出貢獻的部分或者所述技術方案的全部或部分可以以軟體產品的形式體現出來,該電腦軟體產品存儲在一個可讀存儲介質中,包括若干指令用以使得一台電腦設備(可以是個人電腦,伺服器,或者網路設備等)執行本發明各個實施例方法的全部或部分步驟。而前述的可讀存儲介質包括:USB碟、行動硬碟、ROM、RAM、磁碟或者光碟等各種可以存儲程式碼的介質。
需要說明的是,對於前述的各方法實施例,為了簡便描述,故將其都表述為一系列的動作組合,但是本領域具通常知識者應所述知悉,本發明並不受所描述的動作順序的限制,因為依據本發明,某些步驟可以採用其它順序或者同時進行。其次,本領域具通常知識者也應所述知悉,說明書中所描述的實施例均屬於優選實施例,所涉及的動作和模組並不一定都是本發明所必須的。
在上述實施例中,對各個實施例的描述都各有側重,某個實施例中沒有詳述的部分,可以參見其它實施例的相關描述。
以上為對本發明所提供的EVS圖元工作方法及相關裝置的描述,對於本領域的具通常知識者,依據本發明實施例的思想,在具體實施方式及應用範圍上均會有改變之處,綜上,本說明書內容不應理解為對本發明的限制。
以上僅為本發明之較佳實施例,並非用來限定本發明之實施範圍,如果不脫離本發明之精神和範圍,對本發明進行修改或者等同替換,均應涵蓋在本發明申請專利範圍的保護範圍當中。
101-103:步驟
Claims (10)
- 一種EVS圖元工作方法,應用於EVS圖元,其特徵在於,該EVS圖元工作方法包括:在第一時刻對該EVS圖元回應於入射光強度生成的輸出電壓進行記錄,得到第一電壓;以該第一電壓為參考電壓,在該第一時刻之後的預設積分時長內對該輸出電壓進行積分,得到電壓變化值;將該電壓變化值與預設電壓閾值範圍進行比較,並在該電壓變化值超出該電壓閾值範圍時輸出事件信號;其中,該將該電壓變化值與預設電壓閾值範圍進行比較的步驟之後,還包括:若該電壓變化值未超出該電壓閾值範圍,則對該EVS圖元在當前時刻之前單位時長內的事件信號產生率進行統計;當該事件信號產生率低於預設第一產生率閾值時,對該參考電壓進行更新。
- 如請求項1所述之EVS圖元工作方法,其中,該以該第一電壓為參考電壓,在該第一時刻之後的預設積分時長內對該輸出電壓進行積分,得到電壓變化值的步驟,包括:若該第一電壓為第二電壓的階躍信號,則採用預設第二積分計算公式,以該第一電壓為參考電壓,在該第一時刻之後的預設積分時長內對該輸出電壓進行積分,得到電壓變化值;該第二積分計算公式表示為:V out =V 1 -(V 2 -V 1 )△t/RC,其中,V out 表示該電壓變化值,V 1 表示該第一電壓,V 2表示t2時刻的該第二電壓,t1表示該第一時刻,t2表示自該第一時刻經過該積分時長之後到達的第二時刻,R、C為時間常數,△t表示該積分時長。
- 如請求項1所述之EVS圖元工作方法,其中,該以該第一電壓為參考電壓,在該第一時刻之後的預設積分時長內對該輸出電壓進行積分,得到電壓變化值的步驟之前,還包括:獲取該EVS圖像感測器的圖像品質需求指標;基於該圖像品質需求指標設定該積分時長。
- 如請求項2或3所述之EVS圖元工作方法,其中,還包括: 對該EVS圖元在當前時刻之前單位時長內的事件信號產生率進行統計;根據該事件信號產生率超出預設產生率閾值範圍,則根據該事件信號產生率對該時間常數進行相應調整。
- 如請求項1至4項中任一項所述之EVS圖元工作方法,其中,該在該電壓變化值超出該電壓閾值範圍時輸出事件信號的步驟之後,還包括:對該EVS圖元在當前時刻之前單位時長內的事件信號產生率進行統計;當該事件信號產生率高於預設第二產生率閾值時,對該參考電壓進行更新。
- 一種EVS圖元,其特徵在於,包括:輸入單元、採樣單元、積分單元、比較單元以及輸出單元;其中,該輸入單元用於回應於入射光強度生成輸出電壓;該採樣單元用於將第一時刻的該輸出電壓記錄為第一電壓;該積分單元用於以該第一電壓為參考電壓,在該第一時刻之後的預設積分時長內對該輸出電壓進行積分,得到電壓變化值;該比較單元用於將該電壓變化值與預設電壓閾值範圍進行比較;該輸出單元用於若該電壓變化值未超出該電壓閾值範圍,則對該EVS圖元在當前時刻之前單位時長內的事件信號產生率進行統計;當該事件信號產生率低於預設第一產生率閾值時,對該參考電壓進行更新;以及在該電壓變化值超出該電壓閾值範圍時輸出 事件信號。
- 如請求項7所述之EVS圖元,其中,該輸入單元與該採樣單元之間設置有第一開關,該積分單元包括第一輸入端、第二輸入端以及輸出端,該第一輸入端與該輸入單元連接,該第二輸入端與該採樣單元連接,該輸出端與該比較單元連接,該第一輸入端與該輸出端之間設置有第二開關,該比較單元與該輸出單元連接;其中,在該第一時刻之前,該第一開關以及該第二開關均處於閉合狀態;在該第一時刻,該第一開關進入斷開狀態;在該第一時刻之後,該第二開關進入斷開狀態,以及在該積分時長到達時,該第二開關進入閉合狀態。
- 一種終端設備,其特徵在於,包括記憶體及處理器,其中:該處理器用於執行存儲在該記憶體上的電腦程式;該處理器執行該電腦程式時,實現如請求項1至6項中任一項所述之EVS圖元工作方法中的步驟。
- 一種電腦可讀存儲介質,其上存儲有電腦程式,其特徵在於,該電腦程式被處理器執行時,實現如請求項1至6項中任一項所述之EVS圖元工作方法中的步驟。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210401678.5 | 2022-04-18 | ||
CN202210401678.5A CN114500868B (zh) | 2022-04-18 | 2022-04-18 | 一种evs像素工作方法及相关装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW202344039A TW202344039A (zh) | 2023-11-01 |
TWI820863B true TWI820863B (zh) | 2023-11-01 |
Family
ID=81489522
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW111130781A TWI820863B (zh) | 2022-04-18 | 2022-08-16 | 一種evs圖元工作方法及相關裝置 |
Country Status (3)
Country | Link |
---|---|
CN (1) | CN114500868B (zh) |
TW (1) | TWI820863B (zh) |
WO (1) | WO2023201907A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114500868B (zh) * | 2022-04-18 | 2022-07-12 | 深圳锐视智芯科技有限公司 | 一种evs像素工作方法及相关装置 |
CN115022621A (zh) * | 2022-06-27 | 2022-09-06 | 深圳锐视智芯科技有限公司 | 一种事件相机测试方法、装置、设备及可读存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030032894A1 (en) * | 2001-08-07 | 2003-02-13 | Diopsys, Inc. | System and method for vision examination utilizing fault detection |
US20180295298A1 (en) * | 2017-04-06 | 2018-10-11 | Samsung Electronics Co., Ltd. | Intensity image acquisition from dynamic vision sensors |
WO2020128430A1 (en) * | 2018-12-18 | 2020-06-25 | The University Of Bristol | Improvements in or relating to tactile sensing |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7474345B2 (en) * | 2001-10-24 | 2009-01-06 | Texas Instruments Incorporated | System and method to facilitate time domain sampling for solid state imager |
AT504582B1 (de) * | 2006-11-23 | 2008-12-15 | Arc Austrian Res Centers Gmbh | Verfahren zur generierung eines bildes in elektronischer form, bildelement für einen bildsensor zur generierung eines bildes sowie bildsensor |
CN111713101B (zh) * | 2017-12-11 | 2022-05-13 | 普罗菲西公司 | 基于事件的图像传感器及其操作方法 |
CN110971792B (zh) * | 2018-09-29 | 2021-08-13 | 华为技术有限公司 | 一种动态视觉传感器 |
JP7449663B2 (ja) * | 2018-10-30 | 2024-03-14 | ソニーセミコンダクタソリューションズ株式会社 | 固体撮像素子、撮像装置、および、固体撮像素子の制御方法 |
EP3967028B1 (en) * | 2019-05-10 | 2023-11-01 | Sony Advanced Visual Sensing AG | Event-based vision sensor using on/off event and grayscale detection ramps |
CN112399032B (zh) * | 2019-08-13 | 2022-05-31 | 天津大学青岛海洋技术研究院 | 一种基于检测器的脉冲式图像传感器的光流获取方法 |
CN111510651B (zh) * | 2020-04-26 | 2022-09-06 | Oppo广东移动通信有限公司 | 一种图像传感电路、图像传感器及终端设备 |
CN111770245B (zh) * | 2020-07-29 | 2021-05-25 | 中国科学院长春光学精密机械与物理研究所 | 一种类视网膜图像传感器的像素结构 |
CN114500868B (zh) * | 2022-04-18 | 2022-07-12 | 深圳锐视智芯科技有限公司 | 一种evs像素工作方法及相关装置 |
-
2022
- 2022-04-18 CN CN202210401678.5A patent/CN114500868B/zh active Active
- 2022-07-11 WO PCT/CN2022/104983 patent/WO2023201907A1/zh unknown
- 2022-08-16 TW TW111130781A patent/TWI820863B/zh active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030032894A1 (en) * | 2001-08-07 | 2003-02-13 | Diopsys, Inc. | System and method for vision examination utilizing fault detection |
US20180295298A1 (en) * | 2017-04-06 | 2018-10-11 | Samsung Electronics Co., Ltd. | Intensity image acquisition from dynamic vision sensors |
WO2020128430A1 (en) * | 2018-12-18 | 2020-06-25 | The University Of Bristol | Improvements in or relating to tactile sensing |
Also Published As
Publication number | Publication date |
---|---|
CN114500868A (zh) | 2022-05-13 |
TW202344039A (zh) | 2023-11-01 |
CN114500868B (zh) | 2022-07-12 |
WO2023201907A1 (zh) | 2023-10-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI820863B (zh) | 一種evs圖元工作方法及相關裝置 | |
CN104272723B (zh) | 特别用于将时变图像数据的取样亮度感测和异步检测相结合的光电阵列 | |
JP2001285721A (ja) | 広いダイナミックレンジを達成するための時間インデックス付け方法を用いた多サンプリング方法 | |
JP5114493B2 (ja) | 電子形式の画像を生成する方法、画像生成用画像センサのための画像素子ならびに画像センサ | |
US6563540B2 (en) | Light sensor with increased dynamic range | |
WO2021017766A1 (zh) | 一种像素采集电路、动态视觉传感器以及图像采集设备 | |
WO2020063332A1 (zh) | 一种动态视觉传感器 | |
KR20210003118A (ko) | 비동기식 시간 기반 이미지 감지를 위한 시스템 및 방법 | |
US11503223B2 (en) | Method for image-processing and electronic device | |
US9674471B1 (en) | Digital unit cell with bidirectional ripple counter | |
US20190014281A1 (en) | Solid-state image sensor, image capturing apparatus and image capturing method | |
JP2020150377A (ja) | 情報処理装置、撮像素子、撮像装置、及び情報処理方法 | |
CN115967864B (zh) | 图像传感器中光信号的采集方法、电路、设备和介质 | |
US6963368B1 (en) | Digital camera and image capturing control apparatus including a delay device | |
CN115988348A (zh) | 一种图像传感器及其图像输出方法、光电设备 | |
JPH0767042A (ja) | 固体撮像素子 | |
CN114339089A (zh) | 一种事件图像输出方法、装置、设备及可读存储介质 | |
US7659931B2 (en) | Apparatus for imaging objects of changing luminance | |
JPH0356036B2 (zh) | ||
WO2021142587A1 (zh) | 电子前帘定时控制装置及方法、图像采集装置 | |
JP7256661B2 (ja) | 撮像デバイス、撮像手段の制御方法、プログラム及び記憶媒体 | |
WO2021138838A1 (zh) | 一种图像读取电路、图像传感器以及终端设备 | |
WO2024093240A1 (zh) | 亮度变化检测装置及方法、电子设备 | |
CN112738357B (zh) | 视杆图像信号处理器和图像传感器 | |
TW202339486A (zh) | 一種圖像輸出方法、圖像感測器及其應用 |