CN206136102U - 高速灵活采样图像传感器 - Google Patents

高速灵活采样图像传感器 Download PDF

Info

Publication number
CN206136102U
CN206136102U CN201621060473.1U CN201621060473U CN206136102U CN 206136102 U CN206136102 U CN 206136102U CN 201621060473 U CN201621060473 U CN 201621060473U CN 206136102 U CN206136102 U CN 206136102U
Authority
CN
China
Prior art keywords
row
logic unit
column
decoder
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201621060473.1U
Other languages
English (en)
Inventor
王欣洋
周春平
宫辉力
李小娟
马成
周泉
武大猷
郭姣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Capital Normal University
Original Assignee
Capital Normal University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Capital Normal University filed Critical Capital Normal University
Priority to CN201621060473.1U priority Critical patent/CN206136102U/zh
Application granted granted Critical
Publication of CN206136102U publication Critical patent/CN206136102U/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

本实用新型涉及一种高速灵活采样图像传感器,该传感器的图像反馈单元接收读取电路输出的图像数据并定位需要次采样或者开窗的行或列像素,把选择数据指令传递给编码逻辑单元;编码逻辑单元根据选择指令进行编码;行选译码器、列选译码器分别对编码逻辑单元输出的行编码信号和列编码信号进行译码,在开窗模式或者次采样模式下,行选译码器根据译码结果控制驱动控制电路,选择相应行像素进行扫描,同时列选译码器控制读取电路选择相应列像素数据进行读取。本实用新型有效数据读取速度高,操控性强,开窗效率高,同时不额外增加传感器体积。

Description

高速灵活采样图像传感器
技术领域
本实用新型属于图像传感器技术领域,具体涉及一种可以选择特定像素区域工作的高速灵活采样图像传感器。
背景技术
CMOS图像传感器是一种被广泛应用于机器视觉、目标侦察、安防监控和医疗检测的光电成像器件,由于具有成本低,集成度高的优势,图像传感器芯片能够集成更多相机系统功能,从而减少相机的外围电路,实现了相机体积微型化和功能多样化。
工业检测中,为了实现快速成像和重点目标监视,相机先进行次采样模式,其原理如图1所示,待传感器发现目标后进入开窗扫描模式,只对特殊区域所有像素扫描,其原理如图2所示。次采样模式为图像传感器按照预置程序,只对像元中固定的行、列像素进行扫描,捕获物景粗率信息图像;开窗扫描模式是发现观测目标后,图像传感器只对开窗区域内的所有像素进行扫描,捕获物景部分精确的图像。由于这两种扫描模式下,传感器只对部分像素进行信号采集和处理,因此合理分配像素的驱动和读出,可以有效提高图像传感器的帧率。
为实现上述功能,一般都在相机外围电路中添加功能模块,从系统的附加功能实现开窗功能,开窗方式包括对传感器某连续行像素开窗,如只对图像传感器上半部分像素数据进行读取,实现传感器半开窗,这些控制方法存在对传感器像素操控性不强,开窗效率差等缺点,同时额外的外围电路使相机体积增大而不利于携带。
发明内容
本实用新型要解决的技术问题是提供一种操控性强,开窗效率高,同时不额外增加传感器体积的高速灵活采样图像传感器。
为了解决上述技术问题,本实用新型的高速灵活采样图像传感器包括集成于图像传感器芯片上的像素阵列、驱动控制电路,读取电路;其特征在于还包括集成在图像传感器芯片上的行选译码器、列选译码器、图像反馈单元和编码逻辑单元;其中图像反馈单元和编码逻辑单元由可编程逻辑电路组成,图像反馈单元接收读取电路输出的图像数据并定位需要次采样或者开窗的行或列像素,把选择数据指令传递给编码逻辑单元;编码逻辑单元根据选择指令进行编码;行选译码器、列选译码器分别对编码逻辑单元输出的行编码信号和列编码信号进行译码,在开窗模式或者次采样模式下,行选译码器根据译码结果控制驱动控制电路,选择相应行像素进行扫描,同时列选译码器控制读取电路选择相应列像素数据进行读取.
上述高速灵活采样图像传感器的采样控制方法,包括下述步骤:
步骤一、图像反馈单元接收读取电路输出的图像数据并进行处理,根据处理结果定位次采样区域的行、列像素,并把选择数据指令传递给编码逻辑单元;编码逻辑单元根据选择指令进行编码,得到次采样模式下的行编码信号和列编码信号;
步骤二、行选译码器对编码逻辑单元输出的行编码信号进行译码,得到次采样模式下各帧所要扫描的像素行号;列选译码器对编码逻辑单元输出的列编码信号进行译码,得到次采样模式下各帧所要读取的像素列号;
步骤三、行选译码器根据步骤二译码得到的各帧所要扫描的像素行号控制驱动控制电路中的行选开关,在各帧只对相应行的像素进行曝光;同时根据步骤二译码得到的各帧所要读取的像素列号控制读取电路列选开关,在各帧只对相应列的像素数据进行读取;
步骤四、图像反馈单元接收次采样模式下读取电路输出的图像数据并进行处理,根据处理结果定位开窗区域,并把选择数据指令传递给编码逻辑单元;编码逻辑单元根据选择指令进行编码,得到开窗模式下的行编码信号和列编码信号;
步骤五、行选译码器、列选译码器分别对编码逻辑单元输出的开窗区域像素的行编码信号和列编码信号进行译码,并根据译码结果控制驱动控制电路,对开窗区域所有行像素进行扫描,同时控制读取电路选择开窗区域的所有列像素进行数据读取。
所述步骤三中,在第一帧只对次采样区域奇数行像素进行曝光,对次采样区域奇数列像素数据进行读取;在第二帧只对次采样区域偶数行像素进行曝光,对次采样区域偶数列像素数据进行读取。
所述步骤三中,还可以在第一帧只对次采样区域偶数行像素进行曝光,对次采样区域偶数列像素数据进行读取;在第二帧只对次采样区域奇数行像素进行曝光,对次采样区域奇数列像素数据进行读取。
所述步骤三中,还可以在第一帧只对次采样区域奇数行像素进行曝光,对次采样区域偶数列像素数据进行读取;在第二帧只对次采样区域偶数行像素进行曝光,对次采样区域奇数列像素数据进行读取。
所述步骤三中,还可以在第一帧只对次采样区域第3n+1行像素进行曝光,对次采样区域第3n+1列像素数据进行读取;在第二帧只对次采样区域第3n+2行像素进行曝光,对次采样区域第3n+2列像素数据进行读取;在第三帧只对次采样区域第3n+3行像素进行曝光,对次采样区域第3n+3列像素数据进行读取,其中n=0、1、2……。
所述步骤四中,开窗区域为一个或多个包含目标区域的矩形。
本实用新型结合CMOS图像传感器集成度高的特点,将次扫描功能和开窗功能同时集成到CMOS图像传感器芯片上,通过次采样模式可以灵活选择要扫描的行、列,从而得到物体所成像的粗略数据信息;发现目标后,在开窗扫描模式下读取开窗区域所有行和列的数据信息,从而得到物体所成像的精确数据信息,从而使相机兼备高速灵活扫描功能和体积微型化两种特性。本实用新型能够实现图像传感器图像采集的高帧率和对感兴趣区域的精确扫描,有效数据读取速度高,操控性强,开窗效率高,同时不额外增加传感器体积。
附图说明
下面结合附图和具体实施方式对本实用新型作进一步详细说明。
图1是现有技术快速次采样模式示意图。
图2是现有技术局部开窗模式示意图。
图3是本实用新型的高速灵活采样图像传感器结构示意图。图4是本实用新型的高速灵活采样图像传感器局部电路结构示意图。
图5a是正常行选信号示意图,图5b是本实用新型实施例1经行选译码器干预后的行选信号示意图。
图6是本实用新型实施例1的奇偶行列交换采样示意图。
图7是开窗方法1示意图。
图8a、图8b、图8c是开窗方法2示意图。
图9是开窗方法3示意图。
具体实施方式
如图2、3所示,图像传感器芯片上一般集成有像素阵列、时钟电路PLL,时序产生电路、驱动控制电路、串行外设接口SPI、读取电路等。本实用新型的高速灵活采样图像传感器将行选译码器、列选译码器、编码逻辑单元和图像反馈单元集成于图像传感器芯片上;图像反馈单元的输入通过数据通道与读取电路连接,输出与编码逻辑单元的输入连接,编码逻辑单元的输出与行选译码器和列选译码器的输入连接;行选译码器和列选译码器的输出分别与驱动控制电路和读取电路连接。
实施例1
本实用新型的高速灵活采样图像传感器的采样控制方法具体如下:
如图5b、图6所示,在次采样模式下,图像反馈单元接收读取电路输出的图像数据并进行处理,根据处理结果定位次采样区域的行或列像素,并把选择数据指令传递给编码逻辑单元;编码逻辑单元根据选择指令进行编码,得到次采样模式下的行编码信号和列编码信号。
行选译码器对编码逻辑单元输出的行编码信号进行译码,根据译码结果控制驱动控制电路中的行选开关,在第一帧只接通次采样区域奇数行行选开关,对奇数行像素进行曝光;同时列选译码器对编码逻辑单元输出的列编码信号进行译码,根据译码结果只接通读取电路中次采样区域的奇数列列选开关,读取奇数行偶数列像素数据。由于采用奇数/偶数点像素采样这种方式,每帧只需采集次采样区域原来像素的四分之一,因此图像传感器的帧率可以提高四倍。为了保证有效数据不被遗漏,在第二帧只读取偶数行偶数列像素数据。通过前后两帧图像的处理,确定对像素阵列中感兴趣区域(开窗区域)。
本实施例中,还可以在第一帧读取次采样区域偶数行奇数列像素数据,在第二帧读取次采样区域奇数行偶数列像素数据,或者第一帧读取次采样区域奇数行偶数列像素数据,在第二帧读取次采样区域偶数行奇数列像素数据,或者第一帧读取次采样区域偶数行偶数列像素数据,在第二帧读取次采样区域奇数行奇数列像素数据。
次采样区域可以是整个像素矩阵,也可以是部分像素矩阵。
实施例2
本实用新型的高速灵活采样图像传感器的采样控制方法具体如下:
如图5b、图6所示,在次采样模式下,图像反馈单元接收读取电路输出的图像数据并进行处理,根据处理结果定位次采样区域的行或列像素,并把选择数据指令传递给编码逻辑单元;编码逻辑单元根据选择指令进行编码,得到次采样模式下的行编码信号和列编码信号。
行选译码器对编码逻辑单元输出的行编码信号进行译码,根据译码结果控制驱动控制电路中的行选开关,在第一帧只接通次采样区域第3n+1行行选开关,对次采样区域第3n+1行像素进行曝光;同时列选译码器对编码逻辑单元输出的列编码信号进行译码,根据译码结果只接通读取电路中次采样区域的第3n+1列列选开关,读取次采样区域第3n+1列像素数据,在第二帧只对次采样区域第3n+2行像素进行曝光,对次采样区域第3n+2列像素数据进行读取;在第三帧只对次采样区域第3n+3行像素进行曝光,对次采样区域第3n+3列像素数据进行读取,其中n=0、1、2……。由于采用这种方式,每帧只需采集次采样区域原来像素的九分之一,因此图像传感器的帧率可以提高九倍。通过前后三帧图像的处理,确定对像素阵列中感兴趣区域(开窗区域)。
确定开窗区域的方法具体如下。
开窗方法1:如图7所示,根据次采样模式采集的图像数据,图像反馈单元选中包含目标的方形区域作为开窗区域
开窗方法2:如图8a、8b、8c所示,对多个物体开多个窗口。根据次采样模式采集的图像数据,图像反馈单元选中包含目标的方形区域作为开窗区域。
由于多个目标所占行或列像素存在不连续,传感器可以对处于不同行像素或列像素的多个目标物体开多个对应的窗口。
开窗方法3:如图9所示,多个交叠物体开最大窗口:根据次采样模式采集的图像数据,图像反馈单元选中包含多个目标的矩形区域作为开窗区域。

Claims (1)

1.一种高速灵活采样图像传感器,包括集成于图像传感器芯片上的像素阵列、驱动控制电路,读取电路;其特征在于还包括集成在图像传感器芯片上的行选译码器、列选译码器、图像反馈单元和编码逻辑单元;其中图像反馈单元和编码逻辑单元由可编程逻辑电路组成,图像反馈单元接收读取电路输出的图像数据并定位需要次采样或者开窗的行或列像素,把选择数据指令传递给编码逻辑单元;编码逻辑单元根据选择指令进行编码;行选译码器、列选译码器分别对编码逻辑单元输出的行编码信号和列编码信号进行译码,在开窗模式或者次采样模式下,行选译码器根据译码结果控制驱动控制电路,选择相应行像素进行扫描,同时列选译码器控制读取电路选择相应列像素数据进行读取。
CN201621060473.1U 2016-09-18 2016-09-18 高速灵活采样图像传感器 Expired - Fee Related CN206136102U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201621060473.1U CN206136102U (zh) 2016-09-18 2016-09-18 高速灵活采样图像传感器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201621060473.1U CN206136102U (zh) 2016-09-18 2016-09-18 高速灵活采样图像传感器

Publications (1)

Publication Number Publication Date
CN206136102U true CN206136102U (zh) 2017-04-26

Family

ID=58569390

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201621060473.1U Expired - Fee Related CN206136102U (zh) 2016-09-18 2016-09-18 高速灵活采样图像传感器

Country Status (1)

Country Link
CN (1) CN206136102U (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106375689A (zh) * 2016-09-18 2017-02-01 首都师范大学 高速灵活采样图像传感器及其采样控制方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106375689A (zh) * 2016-09-18 2017-02-01 首都师范大学 高速灵活采样图像传感器及其采样控制方法
CN106375689B (zh) * 2016-09-18 2019-08-09 首都师范大学 高速灵活采样图像传感器及其采样控制方法

Similar Documents

Publication Publication Date Title
US11272127B2 (en) Semi-global shutter imager
CN108462844B (zh) 用于像素合并和读出的方法和装置
US11962920B2 (en) Imaging device, method of driving imaging device, and electronic equipment
US6069351A (en) Focal plane processor for scaling information from image sensors
US10095941B2 (en) Vision recognition apparatus and method
WO2007029443A1 (ja) 画像処理方法、画像記録方法、画像処理装置および画像ファイルフォーマット
CN106375689B (zh) 高速灵活采样图像传感器及其采样控制方法
CN104333720A (zh) 高帧率全局像元cmos图像传感器及其信号传输方法
US11438504B2 (en) Imaging element, imaging apparatus, operation method of imaging element, and program
CN102457666A (zh) 基于fpga的自动聚焦装置
CN106664377B (zh) 固体摄像装置、x射线摄像系统及固体摄像装置驱动方法
CN206136102U (zh) 高速灵活采样图像传感器
US20040227829A1 (en) Method and apparatus for a simultaneous multiple field of view imager using digital sub-sampling and sub-window selection
WO2021124736A1 (ja) 撮像装置
JP7320024B2 (ja) 撮像素子、撮像装置、画像データ処理方法、及びプログラム
CN114830626B (zh) 摄像装置、摄像装置的工作方法、存储介质及摄像系统
JP4458864B2 (ja) 撮像装置及びその制御方法及びプログラム及び記憶媒体
CN104580952B (zh) 一种全局像元cmos图像传感器系统架构及其信号传输方法
JP2007235387A (ja) 撮像装置、及びそれを用いたカメラ
CN104270586B (zh) 逐行/隔行读出可选的焦平面读出电路
KR20240045243A (ko) 메타렌즈들을 통합한 다채널 고해상도 촬상 디바이스들
JP2008160438A (ja) 固体撮像装置
JP5398610B2 (ja) 固体電子撮像装置およびその動作制御方法
WO2008067768A1 (en) Image singal sampling circuit and method
RU2812334C1 (ru) Устройство компьютерной системы панорамного телевизионного наблюдения

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170426

Termination date: 20190918