CN113518159B - 同步读出的大阵列动态视觉传感器及读出方法 - Google Patents

同步读出的大阵列动态视觉传感器及读出方法 Download PDF

Info

Publication number
CN113518159B
CN113518159B CN202110636309.XA CN202110636309A CN113518159B CN 113518159 B CN113518159 B CN 113518159B CN 202110636309 A CN202110636309 A CN 202110636309A CN 113518159 B CN113518159 B CN 113518159B
Authority
CN
China
Prior art keywords
source
drain
capacitor
voltage
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110636309.XA
Other languages
English (en)
Other versions
CN113518159A (zh
Inventor
徐江涛
杨政绪
高志远
石晓佩
聂凯明
王秀宇
高静
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin University
Original Assignee
Tianjin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University filed Critical Tianjin University
Priority to CN202110636309.XA priority Critical patent/CN113518159B/zh
Publication of CN113518159A publication Critical patent/CN113518159A/zh
Application granted granted Critical
Publication of CN113518159B publication Critical patent/CN113518159B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75Circuitry for providing, modifying or processing image signals from the pixel array

Abstract

本发明涉及仿生CMOS图像传感器领域,为提出应用于仿生CMOS图像传感器的同步读出架构,缓解DVS传感器像素面积大的问题以及采用异步输出时由于引入仲裁机制而造成的事件冲突和延迟的问题。为此,本发明采取的技术方案为:同步读出的大阵列动态视觉传感器及读出方法,首先所有像素同时进行曝光,曝光结束后,将当前帧的光强信号转化为电压信号并储存于像素内的电容中,然后将储存的电压信号通过列总线逐行传输至列级读出电路,由读出电路计算出相邻帧之间的电压变化量并与触发阈值相比较,最终同步读出2bit的表示光强变化量的编码信息。本发明主要应用于仿生CMOS图像传感器设计制造场合。

Description

同步读出的大阵列动态视觉传感器及读出方法
技术领域
本发明涉及仿生CMOS图像传感器领域,具体涉及同步读出的大阵列动态视觉传感器。
背景技术
近年来,互补金属氧化物半导体(Complementary Metal Oxide Semiconductor,CMOS)图 像传感器发展日益迅猛,在汽车电子、智能制造、工业监控、军事侦察等领域的应用越来越 广泛,但在高分辨率和高帧频的条件下,普通的图像传感器产生巨量数据使得芯片功耗迅速 上升,同时也大幅提高了芯片系统在传输带宽、数据计算能力方面的要求。而动态视觉传感 器(Dynamic Vision Sensor,DVS)通过像素异步感知,仅输出光强的变化量,减少静态冗余 信息,从而大大减少数据量,提高传感器的传输速率,对于捕捉、识别高速物体具有很大的 优势。
然而动态视觉传感器由于需要像素异步感知并输出,因此需要在像素内集成比较器、运 算放大器以及完成地址事件表示功能所需要的逻辑电路,使得DVS的像素难以做到小尺寸; 除此之外,像素的异步输出需要引入仲裁机制。在复杂环境中,可能同时产生大量的触发事 件,仲裁机制会引入输出延迟,甚至使得事件无法有效输出,从而导致图像信息丢失。
发明内容
为克服现有技术的不足,本发明旨在提出应用于仿生CMOS图像传感器的同步读出架构, 缓解DVS传感器像素面积大的问题以及采用异步输出时由于引入仲裁机制而造成的事件冲 突和延迟的问题。为此,本发明采取的技术方案为:同步读出的大阵列动态视觉传感器读出 方法,首先所有像素同时进行曝光,曝光结束后,将当前帧的光强信号转化为电压信号并储 存于像素内的电容中,然后将储存的电压信号通过列总线逐行传输至列级读出电路,由读出 电路计算出相邻帧之间的电压变化量并与触发阈值相比较,最终同步读出2bit的表示光强变 化量的编码信息。
同步读出的大阵列动态视觉传感器,其像素结构如下:包括一个光电二极管PD、两个源 极跟随器M3和M5、一个像素内电流源M7、六个开关M1,M2,M4,M6,M8,M9、三个电容 Cfd,C1,C2;其中,Cfd为浮空扩散区的寄生电容,M1用于将PD中的电子转移到Cfd,M2用 于对Cfd复位,M6用于选择是否将像素信息缓冲至列总线,M4,M8,M9用于电压信号采样 和存储的开关控制,C1,C2用于储存电压信号;M1~M9均为NMOS器件,M1源极接光电 二极管的阴极、漏极接M3的栅极、栅极接控制信号TX,M2源极接M3的栅极、漏极接电 源、栅极接控制信号Rst,M3源极接M4的源极、漏极接电源、栅极接M1的漏极,M4源极 接M3的源极、漏极接像素内电流源M7的漏极、栅极接控制信号Sample,M5的漏极接电源、 源极接M6的漏极、栅极接M4的漏极,M6的源极接列总线、漏极接电源、栅极接控制信号 SEL,像素内电流源M7的源极接地、漏极接M4的漏极、栅极接控制信号PC,M8的漏极接 M4的漏极、源极接电容C1的一端、栅极接控制信号S1,M9的漏极接M4的漏极、源极接C2的一端、栅极接控制信号S2,C1的一端接M8的源极、另一端接地,C2的一端接M9的 源极、另一端接地;
读出处理电路的结构:包括六个开关S3~S8、四个电容C3~C6、一个运算放大器OPA (Operational Amplifier)、一个比较器以及一个锁存器;其中C3为运放的采样电容,电容C3 大小可编程控制,C4为运放的保持电容,C5和C6为比较器的采样电容。列总线通过串列电 容C3连接到运放的负输入端,运放的正输入端接参考电压Vref,电容C4和开关S3并联,一 同跨接在运放的负输入端与输出端之间,
Figure BDA0003105857020000021
为开关S3的控制信号,运放的输出端通过串联电 容C5连接到比较器的一个输入端,开关S4~S6的一端分别接阈值电压Vcomp、地电位和2Vcomp, 开关S4~S6的另一端连接在一起,共同通过串联电容C6连接到比较器的另一个输入端,复 位开关S7与S8跨接在比较器的输入与输出端,比较器的输出连接到锁存器,Vfeature为最终 输出的事件信息,
Figure BDA0003105857020000022
为控制开关S4~S8的时序,C3,C4,S3和OPA共同组成 一个可编程增益运算放大器PGA(Programmable Gain Amplifier),完成双采样做差运算,输 出相邻帧之间的电压差,C5,C6,S4~S8以及比较器共同完成电压变化量的判定,生成事件信 息,随后将生成的事件信息暂存在锁存器中。
本发明中像素部分的相关时序:所有像素在每一帧的最开始同时执行全局操作,其中奇 数帧和偶数帧的区别仅在于像素将当前帧的信号分别存储在C1和C2上,其中奇数帧操作的 工作方式为:首先是PC信号置高,将工作电流镜像到像素内电流源M7中,然后Sample信 号置高,M4导通,第一级源随器工作,接着M2断开,M1导通,将PD积累的光生电子转 移到Cfd中,并转化成电压信号,随后S1控制M8导通,该电压信号经过第一级源随器M3后,M3将其输出电压储存在电容C1中,开关M9在奇数帧中一直断开,电容C2保持原有 电压不变,偶数帧的全局操作时序与奇数帧同理,区别仅在于将当前帧的信号储存于C2中, 对于奇数帧而言,当前帧的信号储存在C1中,上一帧即偶数帧的信号储存于C2中;对于偶 数帧而言,当前帧的信号储存在C2中,上一帧即奇数帧的信号储存于C1中。
奇数帧与偶数帧逐行读出期间的读出电路的相关时序:奇数帧与偶数帧的区别仅在于S1 与S2的时序是相反的,奇数帧读出电路的工作方式为:SEL信号置高后行选管M6导通,表 示选中该行像素进行读出处理,在奇数帧中,当前帧的信号储存在C1中,上一帧的信号储 存于C2中,在D1阶段,S1控制M8导通,S2控制M9断开,电容C1上储存的当前帧的电 压信号经过第二级源随器M5和列总线后,被采样到电容C3下极板,
Figure BDA0003105857020000023
控制S3导通,PGA 处于复位状态,PGA的输出Vo为:
Vo=Vref+Vos (1)
其中,Vos为运放的失调电压,
Figure BDA0003105857020000027
导通,比较器处于复位状态,C6下极板电压为为Vcomp
Figure BDA0003105857020000024
先于
Figure BDA0003105857020000025
置低,
Figure BDA0003105857020000026
先于S1置低;
在D2阶段,该阶段进行两帧之间的光强由暗到亮的判定,判定过程如下:S1控制M8断开,S2控制M9导通,电容C2上储存的上一帧的电压信号经过第二级源随器M5和列总 线后,被采样到电容C3下极板,根据运放负输入节点电荷守恒可以得到PGA的输出Vo
(Vref+Vos-V当前帧)C3=(Vref+Vos-V上一帧)C3+(Vref+Vos-Vo)C4
Vo=Vref+Vos+A(V当前帧-V上一帧) (2)
其中,A=C3/C4,为PGA的增益,根据式(1)式(2)得,电容C5上极板为 A(V当前帧-V上一帧)+VCM,VCM为比较器共模电压,运放的失调电压Vos通过做差运算消除了,由 于
Figure BDA0003105857020000032
控制S5导通,电容C6上极板变为-Vcomp+VCM,因此若两帧之间的信号差值 A(V当前帧-V上一帧)低于-Vcomp,则比较器输出Vfeature为低电平,反之为高电平;
在D3阶段,阶段进行两帧之间的光强由亮到暗的判定,判定过程如下:电容C5上极板 保持不变,为A(V当前帧-V上一帧)+VCM,此时
Figure BDA0003105857020000033
控制S5断开,
Figure BDA0003105857020000034
控制S6导通,电容C6上 极板变为Vcomp+VCM,因此若两帧之间的信号差值A(V当前帧-V上一帧)高于Vcomp,则比较器输出Vfeature为高电平,反之为低电平,锁存器分别在D2和D3阶段结束前将判定的Vfeature码值进 行锁存,随后顺序扫描读出。
本发明的特点及有益效果是:
本发明在保持DVS传感器对光强变化量进行探测的基本工作原理的基础上,将像素内的 比较器、运算放大器以及逻辑处理电路设计成列级读出电路,减少像素内的晶体管数量,有 效降低了像素尺寸,从而可以拓展到高分辨率大阵列的动态视觉传感器。相比于常规DVS的 异步读出方式,本架构采用的同步读出方式可以避免由于引入仲裁机制而导致的事件冲突与 延迟问题,与此同时,基于帧的读出方式与传统图像处理算法相兼容,增大了算法的可选择 性。
附图说明:
图1像素结构示意图。
图2读出电路结构示意图。
图3像素的全局操作时序示意图。
图4逐行读出处理时序示意图。
具体实施方式
本发明提出的架构包括像素和与之配套的读出电路,整体功能如下:首先所有像素同时 进行曝光,曝光结束后,将当前帧的光强信号转化为电压信号并储存于像素内的电容中,然 后将储存的电压信号通过列总线逐行传输至列级读出电路,由读出电路计算出相邻帧之间的 电压变化量并与触发阈值相比较,最终输出2bit的表示光强变化量的信息。
图1给出了本架构中的像素结构示意图:包括一个光电二极管PD、两个源极跟随器M3 和M5、一个像素内电流源M7、六个开关M1,M2,M4,M6,M8,M9、三个电容Cfd,C1,C2。 其中,Cfd为浮空扩散区的寄生电容,M1用于将PD中的电子转移到Cfd,M2用于对Cfd复位, M6用于选择是否将像素信息缓冲至列总线,M4,M8,M9用于电压信号采样和存储的开关控 制,C1,C2用于储存电压信号。M1~M9均为NMOS器件,M1源极接光电二极管的阴极、 漏极接M3的栅极、栅极接控制信号TX,M2源极接M3的栅极、漏极接电源、栅极接控制 信号Rst,M3源极接M4的源极、漏极接电源、栅极接M1的漏极,M4源极接M3的源极、 漏极接像素内电流源M7的漏极、栅极接控制信号Sample,M5的漏极接电源、源极接M6 的漏极、栅极接M4的漏极,M6的源极接列总线、漏极接电源、栅极接控制信号SEL,像素 内电流源M7的源极接地、漏极接M4的漏极、栅极接控制信号PC,M8的漏极接M4的漏 极、源极接电容C1的一端、栅极接控制信号S1,M9的漏极接M4的漏极、源极接C2的一 端、栅极接控制信号S2,C1的一端接M8的源极、另一端接地,C2的一端接M9的源极、 另一端接地。
所有像素在每一帧的最开始同时执行全局操作,奇数帧和偶数帧的全局操作的时序在图 3给出,其中奇数帧和偶数帧的区别仅在于像素将当前帧的信号分别存储在C1和C2上。下 面以奇数帧为例对全局操作的工作方式进行说明:首先是PC信号置高,将工作电流镜像到 像素内电流源M7中,然后Sample信号置高,M4导通,第一级源随器工作,接着M2断开, M1导通,将PD积累的光生电子转移到Cfd中,并转化成电压信号(对应图1中的虚线a处),随后S1控制M8导通,该电压信号经过第一级源随器M3后,M3将其输出电压储存在电容 C1中(对应图1中的虚线b处)。开关M9在奇数帧中一直断开,电容C2保持原有电压不变 (即上一帧电压)。偶数帧的全局操作时序与奇数帧同理,区别仅在于将当前帧的信号储存于 C2中。因此,对于奇数帧而言,当前帧的信号储存在C1中,上一帧(偶数帧)的信号储存 于C2中;对于偶数帧而言,当前帧的信号储存在C2中,上一帧(奇数帧)的信号储存于 C1中。
全局操作结束后,PD开始下一个曝光周期,读出电路开始对像素进行逐行处理。本架构 提出的读出处理电路的结构在图2中给出:包括六个开关S3~S8、四个电容C3~C6、一个运 算放大器(Operational Amplifier,OPA)、一个比较器以及一个锁存器。其中C3为运放的采样 电容(电容大小可编程控制),C4为运放的保持电容,C5和C6为比较器的采样电容。列总 线通过串列电容C3连接到运放的负输入端,运放的正输入端接参考电压Vref,电容C4和开 关S3并联,一同跨接在运放的负输入端与输出端之间,
Figure BDA0003105857020000041
为开关S3的控制信号,运放的输 出端通过串联电容C5连接到比较器的一个输入端,开关S4~S6的一端分别接阈值电压Vcomp、 地电位和2Vcomp,开关S4~S6的另一端连接在一起,共同通过串联电容C6连接到比较器的 另一个输入端,复位开关S7与S8跨接在比较器的输入与输出端,比较器的输出连接到锁存 器,Vfeature为最终输出的事件信息,
Figure BDA0003105857020000042
为控制开关S4~S8的时序。C3,C4,S3 和OPA共同组成一个可编程增益运算放大器(Programmable Gain Amplifier,PGA),可完成双 采样做差运算,输出相邻帧之间的电压差。C5,C6,S4~S8以及比较器共同完成电压变化量的 判定,生成事件信息,随后将生成的事件信息暂存在锁存器中。
奇数帧与偶数帧逐行读出期间的读出电路的相关时序在图4中给出,奇数帧与偶数帧的 区别仅在于S1与S2的时序是相反的,下面以奇数帧为例对读出电路的工作方式进行说明: SEL信号置高后行选管M6导通,表示选中该行像素进行读出处理。根据上文的分析,在奇 数帧中,当前帧的信号储存在C1中,上一帧(偶数帧)的信号储存于C2中。在图4中的 D1阶段,S1控制M8导通,S2控制M9断开,电容C1上储存的当前帧的电压信号经过第二 级源随器M5和列总线后,被采样到电容C3下极板(图2中C3左端),
Figure BDA0003105857020000043
控制S3导通,PGA 处于复位状态,PGA的输出Vo(即a点电压)为:
Vo=Vref+Vos (1)
其中,Vos为运放的失调电压。
Figure BDA0003105857020000051
导通,比较器处于复位状态,C6下极板电压为(d点)为Vcomp
Figure BDA0003105857020000052
先于
Figure BDA0003105857020000053
置低,
Figure BDA0003105857020000054
先于S1置低。
在图4中的D2阶段,该阶段进行两帧之间的光强由暗到亮的判定,判定过程如下:S1 控制M8断开,S2控制M9导通,电容C2上储存的上一帧的电压信号经过第二级源随器M5和列总线后,被采样到电容C3下极板(图2中C3左端),根据运放负输入节点电荷守恒可 以得到PGA的输出Vo(即a点电压):
(Vref+Vos-V当前帧)C3=(Vref+Vos-V上一帧)C3+(Vref+Vos-Vo)C4
Vo=Vref+Vos+A(V当前帧-V上一帧) (2)
其中,A=C3/C4,为PGA的增益。根据式(1)式(2)可得,电容C5上极板(b点电 压)为A(V当前帧-V上一帧)+VCM,VCM为比较器共模电压,运放的失调电压Vos通过做差运算消除 了。由于
Figure BDA0003105857020000056
控制S5导通,电容C6上极板(c点电压)变为-Vcomp+VCM,因此若两帧之间 的信号差值A(V当前帧-V上一帧)低于-Vcomp,则比较器输出Vfeature为低电平,反之为高电平。
在图4中的D3阶段,该阶段进行两帧之间的光强由亮到暗的判定,判定过程如下:电 容C5上极板(b点电压)保持不变,为A(V当前帧-V上一帧)+VCM,此时
Figure BDA0003105857020000057
控制S5断开,
Figure BDA0003105857020000058
控制S6导通,电容C6上极板(c点电压)变为Vcomp+VCM,因此若两帧之间的信号差值 A(V当前帧-V上一帧)高于Vcomp,则比较器输出Vfeature为高电平,反之为低电平。锁存器分别在 D2和D3阶段结束前将判定的Vfeature码值进行锁存,随后顺序扫描读出。
表1 2bit数据
码值 事件 说明
11 OFF 光强由亮变暗
10 无事件 光强近似不变
00 ON 光强由暗变亮
采用所发明的架构构成1280*720的像素阵列,像素尺寸≤9um×9um,行选通电路每次 选中一行,将该行的信号通过列并行总线一次传输到列级读出电路中。行处理时间为5.5us, 整个DVS传感器的帧频约为240fps。考虑到图2中的运放的输出摆幅,将Vref设置为1.65V (电源电压为3.3V),判定阈值电压Vcomp设置为可编程控制。通过与阈值电压相比较,检测 光强的变化量,如果相邻帧之间的光强变化为由亮变暗,则触发OFF事件,输出11;如果相 邻帧之间的光强变化为由暗变亮,则触发ON事件,输出00;如果相邻帧之间的光强变化近 似不变(绝对值小于阈值电压),则输出10。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉 本技术领域的技术人员在本发明披露的技术范围内,可轻易想到的变化或替换,都应涵盖在 本发明的保护范围之内。

Claims (4)

1.一种同步读出的大阵列动态视觉传感器读出方法,其特征是,首先所有像素同时进行曝光,曝光结束后,将当前帧的光强信号转化为电压信号并储存于像素内的电容中,然后将储存的电压信号通过列总线逐行传输至列级读出电路,由读出电路计算出相邻帧之间的电压变化量并与触发阈值相比较,最终同步读出2bit的表示光强变化量的编码信息;
像素结构如下:包括一个光电二极管PD、两个源极跟随器M3和M5、一个像素内电流源M7、六个开关M1,M2,M4,M6,M8,M9、三个电容Cfd,C1,C2;其中,Cfd为浮空扩散区的寄生电容,M1用于将PD中的电子转移到Cfd,M2用于对Cfd复位,M6用于选择是否将像素信息缓冲至列总线,M4,M8,M9用于电压信号采样和存储的开关控制,C1,C2用于储存电压信号;M1~M9均为NMOS器件,M1源极接光电二极管的阴极、漏极接M3的栅极、栅极接控制信号TX,M2源极接M3的栅极、漏极接电源、栅极接控制信号Rst,M3源极接M4的源极、漏极接电源、栅极接M1的漏极,M4源极接M3的源极、漏极接像素内电流源M7的漏极、栅极接控制信号Sample,M5的漏极接电源、源极接M6的漏极、栅极接M4的漏极,M6的源极接列总线、漏极接电源、栅极接控制信号SEL,像素内电流源M7的源极接地、漏极接M4的漏极、栅极接控制信号PC,M8的漏极接M4的漏极、源极接电容C1的一端、栅极接控制信号S1,M9的漏极接M4的漏极、源极接C2的一端、栅极接控制信号S2,C1的一端接M8的源极、另一端接地,C2的一端接M9的源极、另一端接地;
读出处理电路的结构:包括六个开关S3~S8、四个电容C3~C6、一个运算放大器OPA(Operational Amplifier)、一个比较器以及一个锁存器;其中C3为运放的采样电容,电容C3大小可编程控制,C4为运放的保持电容,C5和C6为比较器的采样电容,列总线通过串列电容C3连接到运放的负输入端,运放的正输入端接参考电压Vref,电容C4和开关S3并联,一同跨接在运放的负输入端与输出端之间,
Figure FDA0003815019330000011
为开关S3的控制信号,运放的输出端通过串联电容C5连接到比较器的一个输入端,开关S4~S6的一端分别接阈值电压Vcomp、地电位和2Vcomp,开关S4~S6的另一端连接在一起,共同通过串联电容C6连接到比较器的另一个输入端,复位开关S7与S8跨接在比较器的输入与输出端,比较器的输出连接到锁存器,Vfeature为最终输出的事件信息,
Figure FDA0003815019330000012
为控制开关S4~S8的时序,C3,C4,S3和OPA共同组成一个可编程增益运算放大器PGA(Programmable Gain Amplifier),完成双采样做差运算,输出相邻帧之间的电压差,C5,C6,S4~S8以及比较器共同完成电压变化量的判定,生成事件信息,随后将生成的事件信息暂存在锁存器中;
工作时序如下:首先所有像素同时进行曝光,曝光结束后,将当前帧的光强信号转化为电压信号并储存于像素内的电容中,然后将储存的电压信号通过列总线逐行传输至列级读出电路,由读出电路计算出相邻帧之间的电压变化量并与触发阈值相比较,最终输出2bit的表示光强变化量的信息。
2.一种同步读出的大阵列动态视觉传感器,其特征是,像素结构如下:包括一个光电二极管PD、两个源极跟随器M3和M5、一个像素内电流源M7、六个开关M1,M2,M4,M6,M8,M9、三个电容Cfd,C1,C2;其中,Cfd为浮空扩散区的寄生电容,M1用于将PD中的电子转移到Cfd,M2用于对Cfd复位,M6用于选择是否将像素信息缓冲至列总线,M4,M8,M9用于电压信号采样和存储的开关控制,C1,C2用于储存电压信号;M1~M9均为NMOS器件,M1源极接光电二极管的阴极、漏极接M3的栅极、栅极接控制信号TX,M2源极接M3的栅极、漏极接电源、栅极接控制信号Rst,M3源极接M4的源极、漏极接电源、栅极接M1的漏极,M4源极接M3的源极、漏极接像素内电流源M7的漏极、栅极接控制信号Sample,M5的漏极接电源、源极接M6的漏极、栅极接M4的漏极,M6的源极接列总线、漏极接电源、栅极接控制信号SEL,像素内电流源M7的源极接地、漏极接M4的漏极、栅极接控制信号PC,M8的漏极接M4的漏极、源极接电容C1的一端、栅极接控制信号S1,M9的漏极接M4的漏极、源极接C2的一端、栅极接控制信号S2,C1的一端接M8的源极、另一端接地,C2的一端接M9的源极、另一端接地;
读出处理电路的结构:包括六个开关S3~S8、四个电容C3~C6、一个运算放大器OPA(Operational Amplifier)、一个比较器以及一个锁存器;其中C3为运放的采样电容,电容C3大小可编程控制,C4为运放的保持电容,C5和C6为比较器的采样电容,列总线通过串列电容C3连接到运放的负输入端,运放的正输入端接参考电压Vref,电容C4和开关S3并联,一同跨接在运放的负输入端与输出端之间,
Figure FDA0003815019330000021
为开关S3的控制信号,运放的输出端通过串联电容C5连接到比较器的一个输入端,开关S4~S6的一端分别接阈值电压Vcomp、地电位和2Vcomp,开关S4~S6的另一端连接在一起,共同通过串联电容C6连接到比较器的另一个输入端,复位开关S7与S8跨接在比较器的输入与输出端,比较器的输出连接到锁存器,Vfeature为最终输出的事件信息,
Figure FDA0003815019330000022
为控制开关S4~S8的时序,C3,C4,S3和OPA共同组成一个可编程增益运算放大器PGA(Programmable Gain Amplifier),完成双采样做差运算,输出相邻帧之间的电压差,C5,C6,S4~S8以及比较器共同完成电压变化量的判定,生成事件信息,随后将生成的事件信息暂存在锁存器中;
工作时序如下:首先所有像素同时进行曝光,曝光结束后,将当前帧的光强信号转化为电压信号并储存于像素内的电容中,然后将储存的电压信号通过列总线逐行传输至列级读出电路,由读出电路计算出相邻帧之间的电压变化量并与触发阈值相比较,最终输出2bit的表示光强变化量的信息。
3.如权利要求2所述的同步读出的大阵列动态视觉传感器,其特征是,像素部分的相关时序:所有像素在每一帧的最开始同时执行全局操作,其中奇数帧和偶数帧的区别仅在于像素将当前帧的信号分别存储在C1和C2上,其中奇数帧操作的工作方式为:首先是PC信号置高,将工作电流镜像到像素内电流源M7中,然后Sample信号置高,M4导通,第一级源随器工作,接着M2断开,M1导通,将PD积累的光生电子转移到Cfd中,并转化成电压信号,随后S1控制M8导通,该电压信号经过第一级源随器M3后,M3将其输出电压储存在电容C1中,开关M9在奇数帧中一直断开,电容C2保持原有电压不变,偶数帧的全局操作时序与奇数帧同理,区别仅在于将当前帧的信号储存于C2中,对于奇数帧而言,当前帧的信号储存在C1中,上一帧即偶数帧的信号储存于C2中;对于偶数帧而言,当前帧的信号储存在C2中,上一帧即奇数帧的信号储存于C1中。
4.如权利要求2所述的同步读出的大阵列动态视觉传感器,其特征是,奇数帧与偶数帧逐行读出期间的读出电路的相关时序:奇数帧与偶数帧的区别仅在于S1与S2的时序是相反的,奇数帧读出电路的工作方式为:SEL信号置高后行选管M6导通,表示选中该行像素进行读出处理,在奇数帧中,当前帧的信号储存在C1中,上一帧的信号储存于C2中,在D1阶段,S1控制M8导通,S2控制M9断开,电容C1上储存的当前帧的电压信号经过第二级源随器M5和列总线后,被采样到电容C3下极板,
Figure FDA0003815019330000031
控制S3导通,PGA处于复位状态,PGA的输出Vo为:
Vo=Vref+Vos (1)
其中,Vos为运放的失调电压,
Figure FDA0003815019330000032
导通,比较器处于复位状态,C6下极板电压为为Vcomp
Figure FDA0003815019330000033
先于
Figure FDA0003815019330000034
置低,
Figure FDA0003815019330000035
先于S1置低;
在D2阶段,该阶段进行两帧之间的光强由暗到亮的判定,判定过程如下:S1控制M8断开,S2控制M9导通,电容C2上储存的上一帧的电压信号经过第二级源随器M5和列总线后,被采样到电容C3下极板,根据运放负输入节点电荷守恒可以得到PGA的输出Vo
(Vref+Vos-V当前帧)C3=(Vref+Vos-V上一帧)C3+(Vref+Vos-Vo)C4
Vo=Vref+Vos+A(V当前帧-V上一帧) (2)
其中,A=C3/C4,为PGA的增益,根据式(1)式(2)得,电容C5上极板为A(V当前帧-V上一帧)+VCM,VCM为比较器共模电压,运放的失调电压Vos通过做差运算消除了,由于
Figure FDA0003815019330000036
控制S5导通,电容C6上极板变为-Vcomp+VCM,因此若两帧之间的信号差值A(V当前帧-V上一帧)低于-Vcomp,则比较器输出Vfeature为低电平,反之为高电平;
在D3阶段,阶段进行两帧之间的光强由亮到暗的判定,判定过程如下:电容C5上极板保持不变,为A(V当前帧-V上一帧)+VCM,此时
Figure FDA0003815019330000037
控制S5断开,
Figure FDA0003815019330000038
控制S6导通,电容C6上极板变为Vcomp+VCM,因此若两帧之间的信号差值A(V当前帧-V上一帧)高于Vcomp,则比较器输出Vfeature为高电平,反之为低电平,锁存器分别在D2和D3阶段结束前将判定的Vfeature码值进行锁存,随后顺序扫描读出。
CN202110636309.XA 2021-06-08 2021-06-08 同步读出的大阵列动态视觉传感器及读出方法 Active CN113518159B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110636309.XA CN113518159B (zh) 2021-06-08 2021-06-08 同步读出的大阵列动态视觉传感器及读出方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110636309.XA CN113518159B (zh) 2021-06-08 2021-06-08 同步读出的大阵列动态视觉传感器及读出方法

Publications (2)

Publication Number Publication Date
CN113518159A CN113518159A (zh) 2021-10-19
CN113518159B true CN113518159B (zh) 2022-11-01

Family

ID=78065525

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110636309.XA Active CN113518159B (zh) 2021-06-08 2021-06-08 同步读出的大阵列动态视觉传感器及读出方法

Country Status (1)

Country Link
CN (1) CN113518159B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103533265A (zh) * 2013-09-29 2014-01-22 长春长光辰芯光电技术有限公司 高速全局快门图像传感器像素及其信号转移控制方法
CN103945148A (zh) * 2014-04-02 2014-07-23 长春长光辰芯光电技术有限公司 高速全局快门图像传感器像素及其像素信号采集方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102009165B1 (ko) * 2013-01-24 2019-10-21 삼성전자 주식회사 이미지 센서, 멀티 칩 패키지, 및 전자 장치
KR102373088B1 (ko) * 2016-03-03 2022-03-11 소니 어드밴스드 비주얼 센싱 아게 이벤트 기반의 비전 센서
WO2018118016A1 (en) * 2016-12-19 2018-06-28 BAE Systems Imaging Solutions Inc. Global shutter scheme that reduces the effects of dark current
EP3869791A1 (en) * 2016-12-30 2021-08-25 Sony Advanced Visual Sensing AG Data rate control for event-based vision sensor
CN109005329B (zh) * 2018-09-19 2020-08-11 广东工业大学 一种像素单元、图像传感器以及相机
CN112399099B (zh) * 2019-08-12 2023-04-18 天津大学青岛海洋技术研究院 一种电荷域采样低噪声像素结构
CN111770245B (zh) * 2020-07-29 2021-05-25 中国科学院长春光学精密机械与物理研究所 一种类视网膜图像传感器的像素结构

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103533265A (zh) * 2013-09-29 2014-01-22 长春长光辰芯光电技术有限公司 高速全局快门图像传感器像素及其信号转移控制方法
CN103945148A (zh) * 2014-04-02 2014-07-23 长春长光辰芯光电技术有限公司 高速全局快门图像传感器像素及其像素信号采集方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
5T结构全局曝光CMOS图像传感器的研究与设计;姚洪涛等;《现代计算机(专业版)》;20181105(第31期);全文 *
Design of an RGBW Color VGA Rolling and Global Shutter Dynamic and Active-Pixel Vision Sensor;Chenghan Li;《2015 IEEE International Symposium on Circuits and Systems (ISCAS)》;20150730;全文 *

Also Published As

Publication number Publication date
CN113518159A (zh) 2021-10-19

Similar Documents

Publication Publication Date Title
JP7374242B2 (ja) 動的ビジョンセンサアーキテクチャ
US10075662B2 (en) Solid-state image pickup device with plurality of converters
KR100399954B1 (ko) 아날로그 상호 연관된 이중 샘플링 기능을 수행하는씨모스 이미지 센서용 비교 장치
CN109005329B (zh) 一种像素单元、图像传感器以及相机
CN103856730A (zh) 基于像素级模数转换的紫外焦平面读出电路及其读出方法
CN111770245B (zh) 一种类视网膜图像传感器的像素结构
EP3967028B1 (en) Event-based vision sensor using on/off event and grayscale detection ramps
EP3967027B1 (en) Dynamic vision sensor with in-pixel digital change detection
US9848154B2 (en) Comparator with correlated double sampling scheme and operating method thereof
KR20130112276A (ko) 이미지 센싱 장치
CN109040633A (zh) 具有增益补偿的hdr图像传感器、读出电路及方法
CN107613230A (zh) 高分辨率大动态范围数字化读出装置及其读出方法
CN111491119A (zh) 一种支持全局曝光和卷帘曝光的像元结构
CN113518159B (zh) 同步读出的大阵列动态视觉传感器及读出方法
CN102833494A (zh) 基于预测编码的cmos数字像素传感器噪声消除装置
JPH08204562A (ja) 半導体装置、及びそれを用いた半導体回路、相関演算装置、a/d変換器、d/a変換器及び信号処理システム
CN105554421B (zh) 一种全局像元非线性补偿结构
CN101931737B (zh) 黑电平补偿电路
CN114025114B (zh) 读出电路、图像传感器及控制方法
CN111263088A (zh) 一种用于8t像元的高速采样电路及其控制方法
CN109862289B (zh) 像素信息采集相关双采样读取电路
KR101178861B1 (ko) 이미지 센서
Niu et al. High-Speed Trace Detection DROIC for 15μm-Pitch Cryogenic Infrared FPAs
CN115209075A (zh) 一种像素单元电路、图像传感器及其时序控制方法
CN115379138A (zh) 一种图像传感器读出方法和图像传感器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant