CN113141476B - 一种高低频串行图像数据的训练方法 - Google Patents

一种高低频串行图像数据的训练方法 Download PDF

Info

Publication number
CN113141476B
CN113141476B CN202110427323.9A CN202110427323A CN113141476B CN 113141476 B CN113141476 B CN 113141476B CN 202110427323 A CN202110427323 A CN 202110427323A CN 113141476 B CN113141476 B CN 113141476B
Authority
CN
China
Prior art keywords
data
frequency
serial
parallel
clock
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110427323.9A
Other languages
English (en)
Other versions
CN113141476A (zh
Inventor
余达
刘金国
徐东
梅贵
苗健宇
赵莹
乔冠宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Original Assignee
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun Institute of Optics Fine Mechanics and Physics of CAS filed Critical Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority to CN202110427323.9A priority Critical patent/CN113141476B/zh
Publication of CN113141476A publication Critical patent/CN113141476A/zh
Application granted granted Critical
Publication of CN113141476B publication Critical patent/CN113141476B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Abstract

一种高低频串行图像数据的训练方法,涉及CMOS图像数据训练方法,解决现有串行图像的数据率低于200Mbps时,存在检测不到串行图像数据的跳变沿;对于高频时钟,串并转换采用Iserdes可能遇到并行数据偏差半个字的情况的问题,针对低频应用,使用IDDR的双沿采样,拓宽采样时钟对串行图像数据的采样范围,获取最佳的采样位置,有利于避免温度漂移的影响。本发明中,针对高频应用,使用Iserdes进行串并转换,高频时钟仅驱动io资源,可在更高的频率下应用。在低频的并行时钟域,采用不同延时相位的并行字段数据组合,克服随温度漂移而出现的并行数偏差半个字(word),保证训练的稳定可靠。

Description

一种高低频串行图像数据的训练方法
技术领域
本发明涉及一种CMOS图像数据的训练方法,具体涉及一种分别针对低频和高频应用的串行CMOS图像数据训练方法。
背景技术
CMOS探测器通常输出串行模式的图像数据,为进行串行图像数据的位校正,寻找最佳采样位置,通常会使用输入输出延迟单元(IODELAY)元件。IODELAY元件的参考时钟分为两种,200MHz和300MHz;当串行图像的数据率高于200MHz,则进行数据跳变沿位置检测时必然能检测到两个跳变沿位置;而当串行图像的数据率低于200Mbps时,则可能存在检测不到串行图像数据的跳变沿。对于高频时钟,串并转换采用可控的串并转换器(Ierdes)可能遇到并行数据偏差半个字的情况。
发明内容
本发明为解决现有串行图像的数据率低于200Mbps时,存在检测不到串行图像数据的跳变沿;对于高频时钟,串并转换采用Iserdes可能遇到并行数据偏差半个字的情况的问题,提供一种高低频串行图像数据的训练方法。
一种高低频串行图像数据的训练方法,该方法基于CMOS成像系统实现,所述CMOS的成像系统包括电源转换电路、成像探测器、驱动和控制电路、成像控制器、数传接口电路、存储器和控制接口电路;
所述电源转换电路为各部分提供供电电源;外部输入的控制通信信号经控制接口电路送入成像控制器,所述成像控制器产生的驱动和控制信号经驱动和控制电路后,送入成像探测器;所述存储器存储非均匀校正系数;成像探测器输出的数字图像数据,经成像控制器处理后,经数传接口电路输出;
在低频CMOS数据训练中,所述成像控制器内部还包含输入双沿采样触发器IDDR、双路复用器MUX、p位移位寄存器p bit shifter和数据缓冲器data_buffer;
串行图像数据经成像控制器内的差分转单端的转换器转换后输入至IODELAY,所述IODELAY输出延迟后的串行信号传送至IDDR;
设定IDDR的采样时钟serial_clk的时钟频率为串行图像数据的频率,所述IDDR输出两路采样信号至MUX,所述MUX根据上升或下降沿的控制信号IDDR_sel选择采样信号,经复用选择的采样信号传送到p bit shifter,所述p bit shifter输出p位并行数据,送入data_buffer;
所述data_buffer输出跨时钟域后的并行数据,然后送入可控并行移位寄存器,所述可控并行移位寄存器输出进行通道训练后的并行数据;
在高频CMOS数据训练中,所述成像控制器包括MUX和data_buffer和三个D触发器;
串行图像数据经成像控制器内的差分转单端的转换器转换后输入至IODELAY,所述IODELAY输出延迟后的串行信号送入Iserdes转换为p/2位宽的并行数据;
p/2位宽的并行数据经三个D触发器进行延迟后,输入至MUX,所述MUX根据串行图像数据是最低位LSB在前还是最高位MSB在前进行数p位并行数据的组合,同时受字校正控制信号Mux_sel的控制;每次字校正需要训练的次数为2p,当次数达到p时字校正控制信号Mux_sel的电平值取反;
将p位数据的组合送入data_buffer,所述data_buffer输出跨时钟域后的并行数据,并送入可控并行移位寄存器,所述可控并行移位寄存器输出进行通道训练后的并行数据。
本发明的有益效果:
1、本发明所述的训练方法中,针对低频应用,使用IDDR的双沿采样,拓宽采样时钟对串行图像数据的采样范围,获取最佳的采样位置,有利于避免温度漂移的影响。
2、本发明所述的训练方法中,针对高频应用,使用Iserdes进行串并转换,高频时钟仅驱动io资源,可在更高的频率下应用。在低频的并行时钟域,采用不同延时相位的并行字段数据组合,克服随温度漂移而出现的并行数偏差半个字(word),保证训练的稳定可靠。
附图说明
图1为CMOS成像系统结构框图;
图2为本发明所述的一种高低频串行图像数据的训练方法中低频CMOS数据训练系统框图;
图3为本发明所述的一种高低频串行图像数据的训练方法中高频CMOS数据训练系统框图。
具体实施方式
结合图1至图3说明本实施方式,一种高低频串行图像数据的训练方法,该方法基于CMOS成像系统实现,CMOS的成像系统如图1所示,主要包括电源转换电路、成像探测器、驱动和控制电路、成像控制器、数传接口电路、存储器和控制接口电路。电源转换电路为各部分提供供电电源;外部输入的控制通信信号经控制接口电路,送入成像控制器;成像控制器产生的驱动和控制信号,经驱动和控制电路后,送入成像探测器;存储器存储非均匀校正系数;成像探测器输出的数字图像数据,经成像控制器处理后,经数传接口电路输出。
结合图2说明本实施方式,本实施方式中,对于低频CMOS数据训练应用,成像控制器内部除常规元件外,还包含有输入双沿采样触发器IDDR、双路复用器MUX、p位移位寄存器p bit shifter和数据缓冲器data_buffer;
串行图像数据经成像控制器内的差分转单端的转换器转换后输入至IODELAY,所述IODELAY输出延迟后的串行信号传送至IDDR;
设定IDDR的采样时钟serial_clk的时钟频率为串行图像数据的频率,所述IDDR输出两路采样信号至MUX,所述MUX根据上升或下降沿的控制信号IDDR_sel选择采样信号,经复用选择的采样信号传送到p bit shifter,所述p bit shifter输出p位并行数据,送入data_buffer;
所述data_buffer输出跨时钟域后的并行数据,然后送入可控并行移位寄存器,所述可控并行移位寄存器输出进行通道训练后的并行数据;
本实施方式中,所述IDDR的采样时钟serial_clk的时钟频率为串行图像数据的频率,而非串行图像数据的频率的一半。IDDR输出的两路采样数据,并非同时使用,而是根据上升或下降沿的控制信号IDDR_sel进行选择。采样时钟serial_clk的时钟频率fserial_clk大于IODELAY的参考时钟频率fIODELAY的一半。
Figure BDA0003030039360000031
所述IODELAY元件的tap个数为2n,n为大于1的正整数;则本实施方式中可用的tap个数为2n+1。上升或下降沿输出的选择信号IDDR_sel的电平值为系统tap数的最高位。
本实施方式中,所述p bit shifter输出数据的有效信号所对应的计数器,以串行时钟频率进行p个计数值循环;p为并行数据的位宽。字校正的两种方法:(1)在恒定的p bitshifter计数位置输出并行数据;在每次字校正调整时p bit shifter的计数值保持一次;非字校正时p bit shifter计数值在serial_clk的同步下进行p个计数值的循环变化;(2)每次字校正时输出有效数据的位置移动一次,p bit shifter计数值在serial_clk的同步下进行p个计数值的循环变化。
本实施方式中,所述data_buffer跨时钟域的方案为:写入时钟为采样时钟serial_clk;写使能为数据有效信号,占空比为1/p;写操作地址在数据有效信号的上升沿位置递增。读时钟为并行时钟,频率为serial_clk的1/p;读操作为恒定使能;读操作地址在并行时钟同步下递增。
每次上电或重新训练,都需要对data_buffer的初始读写地址进行初始化;读地址和写地址二者初始化地址差值大于2;
结合图3说明本实施方式,对于高频CMOS数据训练应用:成像控制器内部除常规元件外,还包含有三个D触发器(第一D触发器,第二D触发器和第三D触发器)、一个MUX和一个data_buffer。
串行图像数据经成像控制器内的差分转单端的转换器转换后输入至IODELAY,所述IODELAY输出延迟后的串行信号送入Iserdes转换为p/2位宽的并行数据;
p/2位宽的并行数据经三个D触发器进行延迟后,输入至MUX,所述MUX根据串行图像数据是最低位LSB在前还是最高位MSB在前进行数p位并行数据的组合,同时受字校正控制信号Mux_sel的控制;每次字校正需要训练的次数为2p,当次数达到p时字校正控制信号Mux_sel的电平值取反;
将p位数据的组合Data_out_bbuf送入data_buffer,所述data_buffer输出跨时钟域后的并行数据,并送入可控并行移位寄存器,所述可控并行移位寄存器输出进行通道训练后的并行数据。
本实施方式中,可控的串并转换器Iserdes进行的位宽变换为p/2,系统包含串行时钟域、2倍并行时钟域和并行时钟域;
在MUX内根据串行图像数据是最低位LSB在前还是最高位MSB在前进行数p位并行数据的组合,同时受字校正控制信号Mux_sel的控制;每次字校正需要训练的次数为2p,当次数达到p时Mux_sel的电平值取反。
输出并行数据p_data的组合为:
Figure BDA0003030039360000051
式中,符号&为并置运算符,data_t1为经第一D触发器的延迟值,data_t2为经第二D触发器的延迟值,data_t3为经第三D触发器的延迟值。
本实施方式中,电源转换电路采用510的DCDC模块;成像探测器使用长光辰芯公司的TDICMOS探测器;驱动和控制电路主要基于电平转换芯片164245;成像控制器主要采用上海复旦微电子公司的FPGA和刷新芯片;数传接口电路采用TLK2711芯片,控制接口电路主要采用54AC14、DS26LV31和DS26LV32;存储器采用3D PLUS公司的MRAM。

Claims (6)

1.一种高低频串行图像数据的训练方法,该方法基于CMOS成像系统实现,所述CMOS的成像系统包括电源转换电路、成像探测器、驱动和控制电路、成像控制器、数传接口电路、存储器和控制接口电路;
所述电源转换电路为各部分提供供电电源;外部输入的控制通信信号经控制接口电路送入成像控制器,所述成像控制器产生的驱动和控制信号经驱动和控制电路后,送入成像探测器;所述存储器存储非均匀校正系数;成像探测器输出的数字图像数据,经成像控制器处理后,经数传接口电路输出;
其特征是:
在低频CMOS数据训练中,所述成像控制器内部还包含双沿采样触发器IDDR、双路复用器MUX、p位移位寄存器p bit shifter和数据缓冲器data_buffer;
串行图像数据经成像控制器内的差分转单端的转换器转换后输入至输入输出延迟单元IODELAY,所述输入输出延迟单元IODELAY输出延迟后的串行信号传送至双沿采样触发器IDDR;
设定双沿采样触发器IDDR的采样时钟serial_clk的时钟频率为串行图像数据的频率,所述双沿采样触发器IDDR输出两路采样信号至双路复用器MUX,所述双路复用器MUX根据上升或下降沿的控制信号IDDR_sel选择采样信号,经复用选择的采样信号传送到p位移位寄存器p bit shifter,所述p位移位寄存器p bit shifter输出p位并行数据,送入数据缓冲器data_buffer;
所述数据缓冲器data_buffer输出跨时钟域后的并行数据,然后送入可控并行移位寄存器,所述可控并行移位寄存器输出进行通道训练后的并行数据;
在高频CMOS数据训练中,所述成像控制器包括双路复用器MUX和数据缓冲器data_buffer和三个D触发器;
串行图像数据经成像控制器内的差分转单端的转换器转换后输入至输入输出延迟单元IODELAY,所述输入输出延迟单元IODELAY输出延迟后的串行信号送入可控的串并转换器Iserdes转换为p/2位宽的并行数据;
p/2位宽的并行数据经三个D触发器进行延迟后,输入至双路复用器MUX,所述双路复用器MUX根据串行图像数据是最低位LSB在前还是最高位MSB在前进行p位并行数据的组合,同时受字校正控制信号Mux_sel的控制;每次字校正需要训练的次数为2p,当次数达到p时字校正控制信号Mux_sel的电平值取反;
将p位数据的组合送入数据缓冲器data_buffer,所述数据缓冲器data_buffer输出跨时钟域后的并行数据,并送入可控并行移位寄存器,所述可控并行移位寄存器输出进行通道训练后的并行数据;
所述输入输出延迟单元IODELAY的tap个数为2n,n为大于1的正整数;则本系统可用的tap个数为2n+1,上升或下降沿的控制信号IDDR_sel的电平值为系统tap数的最高位。
2.根据权利要求1所述的一种高低频串行图像数据的训练方法,其特征在于:采样时钟serial_clk的时钟频率fserial_clk大于输入输出延迟单元IODELAY的参考时钟频率fIODELAY的一半;
Figure FDA0003583896390000021
3.根据权利要求1所述的一种高低频串行图像数据的训练方法,其特征在于:p位移位寄存器p bit shifter输出数据的有效信号所对应的计数器,以串行时钟频率进行p个计数值循环变化;p为并行数据的位宽;
字校正的两种方法:(1)在恒定的计数位置输出并行数据;在每次字校正调整时,计数值在一个时钟周期保持不变;非字校正时,计数值在采样时钟serial_clk的同步下进行p个计数值的循环变化;
(2)每次字校正时输出有效数据的位置移动一次,计数值在采样时钟serial_clk的同步下进行p个计数值的循环变化。
4.根据权利要求1所述的一种高低频串行图像数据的训练方法,其特征在于:数据缓冲器data_buffer跨时钟域的方法为:写入时钟为采样时钟serial_clk;写使能为数据有效信号,占空比为1/p;写操作地址在数据有效信号的上升沿位置递增;
读操作的时钟频率为并行数据的时钟频率,频率为采样时钟serial_clk频率的1/p;读操作为恒定使能,读操作地址在并行时钟同步下递增。
5.根据权利要求4所述的一种高低频串行图像数据的训练方法,其特征在于:每次上电或重新训练,需要对数据缓冲器data_buffer的初始读写地址进行初始化;读地址和写地址初始化地址差值大于2。
6.根据权利要求1所述的一种高低频串行图像数据的训练方法,其特征在于:
输出并行数据p_data的组合为:
Figure FDA0003583896390000031
式中,符号&为并置运算符,data_t1为经第一D触发器的延迟值,data_t2为经第二D触发器的延迟值,data_t3为经第三D触发器的延迟值。
CN202110427323.9A 2021-04-21 2021-04-21 一种高低频串行图像数据的训练方法 Active CN113141476B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110427323.9A CN113141476B (zh) 2021-04-21 2021-04-21 一种高低频串行图像数据的训练方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110427323.9A CN113141476B (zh) 2021-04-21 2021-04-21 一种高低频串行图像数据的训练方法

Publications (2)

Publication Number Publication Date
CN113141476A CN113141476A (zh) 2021-07-20
CN113141476B true CN113141476B (zh) 2022-05-17

Family

ID=76813060

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110427323.9A Active CN113141476B (zh) 2021-04-21 2021-04-21 一种高低频串行图像数据的训练方法

Country Status (1)

Country Link
CN (1) CN113141476B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024044867A1 (zh) * 2022-08-27 2024-03-07 华为技术有限公司 数据重排序训练方法和裸片

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104363021A (zh) * 2014-10-08 2015-02-18 南京大学 基于fpga精细延迟单元的时间数字转换方法及装置
CN108810431A (zh) * 2018-06-22 2018-11-13 中国科学院长春光学精密机械与物理研究所 多通道低频cmos串行图像数据的训练方法
CN110035244A (zh) * 2019-04-19 2019-07-19 中国科学院长春光学精密机械与物理研究所 多通道低频cmos串行图像数据的训练方法
CN110830738A (zh) * 2019-11-18 2020-02-21 中国科学院长春光学精密机械与物理研究所 Cmos图像传感器的串行图像数据训练系统及仿真系统
CN111586325A (zh) * 2020-05-25 2020-08-25 中国科学院长春光学精密机械与物理研究所 基于交替变换脉冲的cmos图像数据的改进训练方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104363021A (zh) * 2014-10-08 2015-02-18 南京大学 基于fpga精细延迟单元的时间数字转换方法及装置
CN108810431A (zh) * 2018-06-22 2018-11-13 中国科学院长春光学精密机械与物理研究所 多通道低频cmos串行图像数据的训练方法
CN110035244A (zh) * 2019-04-19 2019-07-19 中国科学院长春光学精密机械与物理研究所 多通道低频cmos串行图像数据的训练方法
CN110830738A (zh) * 2019-11-18 2020-02-21 中国科学院长春光学精密机械与物理研究所 Cmos图像传感器的串行图像数据训练系统及仿真系统
CN111586325A (zh) * 2020-05-25 2020-08-25 中国科学院长春光学精密机械与物理研究所 基于交替变换脉冲的cmos图像数据的改进训练方法

Also Published As

Publication number Publication date
CN113141476A (zh) 2021-07-20

Similar Documents

Publication Publication Date Title
JP4063392B2 (ja) 信号伝送システム
US20090128207A1 (en) Clock Circuitry for Generating Multiple Clocks with Time-Multiplexed Duty Cycle Adjustment
US7840831B2 (en) Methods of reducing skew between multiphase signals and related phase correction circuits
US9184909B1 (en) Apparatus and methods for clock and data recovery
US9509531B2 (en) Decision feedback equalizer
US8391347B2 (en) Decision feedback equalizer (DFE) circuits for use in a semiconductor memory device and initializing method thereof
CN109586692B (zh) 一种应用于ad源同步数据接收的fpga动态相位调整方法
US8634503B2 (en) Fast lock clock-data recovery for phase steps
CN113364450B (zh) 校准电路与其相关的校准方法
JP2009077188A (ja) 半導体装置
US9154291B2 (en) Differential signal skew adjustment method and transmission circuit
WO2012147258A1 (ja) チャネル間スキュー調整回路
US9214200B2 (en) Methods and apparatus for transmitting data in a phase modulated signal derived from early and late timing signals
CN113141476B (zh) 一种高低频串行图像数据的训练方法
CN103888147A (zh) 一种串行转并行转换电路和转换器以及转换系统
KR101172270B1 (ko) 지연고정루프에서의 듀티 사이클 보정
KR100884589B1 (ko) 멀티 위상 클럭 생성장치와 멀티 위상 클럭 생성 방법
JP4448076B2 (ja) データ送受信回路のタイミング調整回路、lsi及びデータ送受信システム
JP4481326B2 (ja) 信号伝送システム
CN110034768B (zh) 具有适应性时移的延时缓冲电路
JP5364518B2 (ja) 信号処理回路
CN110545093A (zh) 半导体装置以及半导体测试设备
US8139697B2 (en) Sampling method and data recovery circuit using the same
JP2008199156A (ja) シリアル通信用インタフェース回路
US7660364B2 (en) Method of transmitting serial bit-stream and electronic transmitter for transmitting a serial bit-stream

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant