CN118037879A - 时序信号处理及图像重建方法和装置、设备及介质 - Google Patents
时序信号处理及图像重建方法和装置、设备及介质 Download PDFInfo
- Publication number
- CN118037879A CN118037879A CN202211362681.7A CN202211362681A CN118037879A CN 118037879 A CN118037879 A CN 118037879A CN 202211362681 A CN202211362681 A CN 202211362681A CN 118037879 A CN118037879 A CN 118037879A
- Authority
- CN
- China
- Prior art keywords
- signal
- sequence
- sampling
- module
- time sequence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 207
- 238000000034 method Methods 0.000 title claims abstract description 56
- 238000005070 sampling Methods 0.000 claims abstract description 279
- 230000010354 integration Effects 0.000 claims abstract description 69
- 230000008859 change Effects 0.000 claims abstract description 20
- 238000013139 quantization Methods 0.000 claims description 157
- 238000004458 analytical method Methods 0.000 claims description 148
- 108091026890 Coding region Proteins 0.000 claims description 88
- 238000003672 processing method Methods 0.000 claims description 46
- 230000006835 compression Effects 0.000 claims description 35
- 238000007906 compression Methods 0.000 claims description 35
- 230000015654 memory Effects 0.000 claims description 25
- 238000004364 calculation method Methods 0.000 claims description 22
- 238000012544 monitoring process Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 12
- 239000003550 marker Substances 0.000 claims description 11
- 238000001514 detection method Methods 0.000 claims description 10
- 238000004891 communication Methods 0.000 claims description 3
- 230000035945 sensitivity Effects 0.000 abstract description 6
- 230000008569 process Effects 0.000 description 21
- 230000003287 optical effect Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 16
- 230000000875 corresponding effect Effects 0.000 description 15
- 230000006870 function Effects 0.000 description 14
- 230000001276 controlling effect Effects 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 7
- 230000004044 response Effects 0.000 description 6
- 230000008878 coupling Effects 0.000 description 5
- 238000010168 coupling process Methods 0.000 description 5
- 238000005859 coupling reaction Methods 0.000 description 5
- 230000009286 beneficial effect Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000005693 optoelectronics Effects 0.000 description 4
- 238000013527 convolutional neural network Methods 0.000 description 3
- 230000002596 correlated effect Effects 0.000 description 3
- 230000005291 magnetic effect Effects 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000006399 behavior Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 239000011093 chipboard Substances 0.000 description 1
- 230000005294 ferromagnetic effect Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
- G06T11/206—Drawing of charts or graphs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/049—Temporal neural networks, e.g. delay elements, oscillating neurons or pulsed inputs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
- G06T9/002—Image coding using neural networks
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Computing Systems (AREA)
- Computational Linguistics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本公开提供一种时序信号处理及图像重建方法和装置、设备及介质,涉及信号处理技术领域,其中的方法包括工作时序相互独立的积分处理操作和采样处理操作;在积分处理操作中,接收光电时序信号,并对光电时序信号进行积分得到积分值;响应于积分值达到预设阈值时复位并更新状态标识;在采样处理操作中,按照预设采样频率分别对积分值和状态标识进行采样,并控制状态标识复位;基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列。本公开可以连续记录时序信号的变化,从而提高光电传感器对信号采集和处理的精度和敏感度。
Description
技术领域
本公开涉及信号处理技术,尤其涉及一种时序信号处理及图像重建方法和装置、设备及介质。
背景技术
目前,以数字形式表达图像已经成为例如视频这类动态影像进行图像表达的优选方法,其原因在于数字形式表示的图像更便于处理、传输和存储。要获得以数字形式表达的图像数据或可以重建出图像的数字信号,就需要先通过摄像机采集时空信号(如光信号)并形成以模拟信号形式存在的模拟信号,再将该模拟信号转换为数字信号,该过程称为图像信息数字化的过程。在图像信息数字化的过程中,通常包括信号积分、采样和量化等步骤。在实现本公开的过程中,本发明人通过研究发现,相关技术中,信号积分与采样步骤按照一定的工作时序工作,信号积分与采样步骤的工作时序之间相互依赖、耦合度高,对时序信号的采集存在无法连续记录时序信号变化的问题。
发明内容
本公开提供一种时序信号处理及图像重建方法和装置、设备及介质,用以解决相关技术中对时序信号的采集存在无法连续记录时序信号变化的问题。
本公开实施的一个方面,提供一种时序信号处理方法,所述时序信号处理方法包括工作时序相互独立的积分处理操作和采样处理操作;其中:
在所述积分处理操作中,接收光电时序信号,并对所述光电时序信号进行积分,得到积分值;响应于所述积分值达到预设阈值复位时并更新状态标识,所述状态标识用于表示所述积分值达到预设阈值的次数;
在所述采样处理操作中,按照预设采样频率分别对所述积分值和所述状态标识进行采样,并控制所述状态标识复位;基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列,所述积分值序列和所述状态标识序列用于进行信号分析或被处理后用于输出图像。
可选地,在本公开任一实施例的时序信号处理方法中,所述积分处理操作包括:
利用积分器接收光电时序信号,对所述光电时序信号进行积分,得到积分值;
利用标识器监测所述积分器得到的积分值,响应于所述积分值达到预设阈值时更新所述标识器的状态标识,并生成积分复位信号控制所述积分器复位。
可选地,在本公开任一实施例的时序信号处理方法中,所述控制所述状态标识复位包括:
生成标识复位信号以控制所述标识器的状态标识复位。
可选地,在本公开任一实施例的时序信号处理方法中,所述时序信号处理方法还包括量化处理操作;
在所述量化处理操作中,分别对所述状态标识序列和所述积分值序列进行量化编码,以生成时序状态编码序列和时序信号编码序列。
可选地,在本公开任一实施例的时序信号处理方法中,所述时序信号处理方法还包括以下至少一项图像重构操作;
基于所述时序状态编码序列和所述时序信号编码序列进行图像重构计算,以重构输出图像;
基于所述积分值序列和所述状态标识序列进行图像重构计算,以重构输出图像。
可选地,在本公开任一实施例的时序信号处理方法中,所述时序信号处理方法还包括以下至少一项控制处理操作:
根据所述时序状态编码序列和/或所述时序信号编码序列生成阈值控制信号,以利用所述阈值控制信号调整所述积分处理操作中的预设阈值;
根据所述积分值序列和/或所述状态标识序列生成阈值控制信号,以利用所述阈值控制信号调整所述积分处理操作中的预设阈值;
对所述时序状态编码序列和/或所述时序信号编码序列在时域上的变化率进行分析,并根据得到的第一分析结果生成采样控制信号,以利用所述采样控制信号调整所述采样处理操作中的采样频率;
对所述积分值序列和/或所述状态标识序列在时域上的变化率进行分析,并根据得到的第二分析结果生成采样控制信号,以利用所述采样控制信号调整所述采样处理操作中的采样频率;
对所述时序状态编码序列和/或所述时序信号编码序列进行纹理特征分析,并根据得到的第三分析结果生成量化控制信号,以利用所述量化控制信号调整所述量化处理操作中的量化位宽;
对所述积分值序列和/或所述状态标识序列进行纹理特征分析,并根据得到的第四分析结果生成量化控制信号,以利用所述量化控制信号调整所述量化处理操作中的量化位宽。
可选地,在本公开任一实施例的时序信号处理方法中,所述时序信号处理方法还包括以下至少一项存储处理操作:
存储预设时长内的所述时序状态编码序列和所述时序信号编码序列;
存储预设时长内的所述积分值序列和所述状态标识序列。
可选地,在本公开任一实施例的时序信号处理方法中,所述时序信号处理方法还包括以下至少一项编码压缩操作:
对所述时序状态编码序列和所述时序信号编码序列进行压缩,并将压缩后的所述时序状态编码序列和所述时序信号编码序列进行存储处理或输出;
对所述积分值序列和所述状态标识序列进行压缩,并将压缩后的所述积分值序列和所述状态标识序列进行存储处理或输出;
对所述图像进行压缩后输出;
对所述信号分析得到的结果进行压缩后输出。
本公开实施的另一个方面,提供一种图像重建方法,包括:
获取光电时序信号;
采用本公开任一实施例所述的时序信号处理方法对所述光电时序信号进行处理,得到重建的图像;
控制显示器显示所述数字图像或基于所述数字图像进行应用处理。
本公开实施的又一个方面,提供一种时序信号处理装置,所述时序信号处理装置包括工作时序相互独立的信号积分模块和信号采样模块;所述信号积分模块包括积分器与标识器;
所述积分器,用于接收光电时序信号,并对所述光电时序信号进行积分,得到积分值,响应于所述积分值达到预设阈值时复位;
所述标识器,用于响应于所述积分值达到所述预设阈值时更新所述标识器的状态标识,所述状态标识用于表示所述积分值达到预设阈值的次数;
所述信号采样模块,用于按照预设采样频率分别对所述积分值和所述状态标识进行采样,并控制所述标识器的状态标识复位;基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列,所述积分值序列和所述状态标识序列用于进行信号分析或被处理后用于输出图像。
可选地,在本公开任一实施例的时序信号处理装置中,所述标识器,具体用于监测所述积分器得到的积分值,响应于所述积分值达到预设阈值时更新所述标识器的状态标识,并生成积分复位信号控制所述积分器复位。
可选地,在本公开任一实施例的时序信号处理装置中,所述信号积分模块包括M个积分器和M个标识器,所述M个积分器与所述M个标识器一一对应连接,M个积分器相互独立运行,M为大于零的整数。
可选地,在本公开任一实施例的时序信号处理装置中,所述时序信号处理装置还包括:
量化模块,用于分别对所述状态标识序列和所述积分值序列进行量化编码,以生成时序状态编码序列和时序信号编码序列。可选地,在本公开任一实施例的时序信号处理装置中,所述时序信号处理装置还包括图像重构模块、分析模块和存储模块中的至少一个;其中:
所述图像重构模块,用于基于所述时序状态编码序列和所述时序信号编码序列进行图像重构计算,或者基于所述积分值序列和所述状态标识序列进行图像重构计算,以重构输出图像;
所述分析模块,用于执行以下至少一项控制处理操作:根据所述时序状态编码序列和/或所述时序信号编码序列生成阈值控制信号,并向所述积分器输出阈值控制信号以调整所述预设阈值;根据所述积分值序列和/或所述状态标识序列生成阈值控制信号,并向所述积分器输出阈值控制信号以调整所述预设阈值;对所述时序状态编码序列和/或所述时序信号编码序列在时域上的变化率进行分析,并根据得到的第一分析结果生成采样控制信号,向所述信号采样模块输出所述采样控制信号以调整所述信号采样模块的采样频率;对所述积分值序列和/或所述状态标识序列在时域上的变化率进行分析,并根据得到的第二分析结果生成采样控制信号,向所述信号采样模块输出所述采样控制信号以调整所述信号采样模块的采样频率;对所述时序状态编码序列和/或所述时序信号编码序列进行纹理特征分析,并根据得到的第三分析结果生成量化控制信号,向所述量化模块输出所述量化控制信号以调整所述量化模块的量化位宽;对所述积分值序列和/或所述状态标识序列进行纹理特征分析,并根据得到的第四分析结果生成量化控制信号,向所述量化模块输出所述量化控制信号以调整所述量化模块的量化位宽;
所述存储模块,用于存储预设时长内的所述时序状态编码序列和所述时序信号编码序列、或者预设时长内的所述积分值序列和所述状态标识序列。
可选地,在本公开任一实施例的时序信号处理装置中,所述时序信号处理装置还包括编码压缩模块;
所述编码压缩模块,用于执行以下至少一项编码压缩操作:
对所述时序状态编码序列和时序信号编码序列进行压缩,并将压缩后的所述时序状态编码序列和时序信号编码序列发送至所述存储模块存储或输出;
对所述积分值序列和所述状态标识序列进行压缩,并将压缩后的所述积分值序列和所述状态标识序列发送至存储模块存储或输出;
对图像重构模块输出的图像进行压缩后输出;
对分析模块得到的结果进行压缩后输出。
可选地,在本公开任一实施例的时序信号处理装置中,所述信号采样模块,还用于分别对所述状态标识序列和所述积分值序列进行模数转换,以生成时序状态编码序列和时序信号编码序列。
可选地,在本公开任一实施例的时序信号处理装置中,所述时序信号处理装置还包括图像重构模块、分析模块、存储模块和编码压缩模块中的至少一个;其中:
所述图像重构模块,用于基于所述时序状态编码序列和所述时序信号编码序列进行图像重构计算,或者基于所述积分值序列和所述状态标识序列进行图像重构计算,以重构输出数字图像;
所述分析模块,用于执行以下至少一项控制处理操作:根据所述时序状态编码序列和/或所述时序信号编码序列生成阈值控制信号,并向所述积分器输出阈值控制信号以调整所述预设阈值;根据所述积分值序列和/或所述状态标识序列生成阈值控制信号,并向所述积分器输出阈值控制信号以调整所述预设阈值;对所述时序状态编码序列和/或所述时序信号编码序列在时域上的变化率进行分析,并根据得到的第一分析结果生成采样控制信号,向所述信号采样模块输出所述采样控制信号以调整所述信号采样模块的采样频率;对所述积分值序列和/或所述状态标识序列在时域上的变化率进行分析,并根据得到的第二分析结果生成采样控制信号,向所述信号采样模块输出所述采样控制信号以调整所述信号采样模块的采样频率;对所述时序状态编码序列和/或所述时序信号编码序列进行纹理特征分析,并根据得到的第三分析结果生成量化控制信号,向所述量化模块输出所述量化控制信号以调整所述量化模块的量化位宽;对所述积分值序列和/或所述状态标识序列进行纹理特征分析,并根据得到的第四分析结果生成量化控制信号,向所述量化模块输出所述量化控制信号以调整所述量化模块的量化位宽;
所述存储模块,用于存储预设时长内的所述时序状态编码序列和所述时序信号编码序列、或者预设时长内的所述积分值序列和所述状态标识序列;
所述编码压缩模块,用于执行以下至少一项编码压缩操作:对所述时序状态编码序列和时序信号编码序列进行压缩,并将压缩后的所述时序状态编码序列和时序信号编码序列发送至所述存储模块存储或输出;对所述积分值序列和所述状态标识序列进行压缩,并将压缩后的所述积分值序列和所述状态标识序列发送至存储模块存储或输出。
本公开实施的又一个方面,提供一种图像重建设备,包括获取模块、控制模块和本公开任一实施例所述的时序信号处理装置;
所述获取模块,用于获取光电时序信号;
所述时序信号处理装置,用于对所述光电时序信号进行处理,得到重建的数字图像;
所述控制模块,用于控制显示器显示所述数字图像或基于所述数字图像进行应用处理。
可选地,在本公开任一实施例的设备中,所述电子设备包括以下任意一项:集成电路、传感器。
可选地,在本公开任一实施例的设备中,所述电子设备包括以下任意一项:脉冲相机、高速相机、视觉相机、音频播放器、视频播放器、导航设备、固定位置终端、娱乐单元、智能手机、通信设备、移动设备、机动交通工具中的设备、车载摄像头、手机摄像头、运动或可穿戴式相机、交通摄像头、工业检测相机、安装在可飞行物体上的摄像头、医疗摄像头、安防摄像头、家用电器摄像头。
本公开实施的又一个方面,提供一种电子设备,包括:处理器,以及与所述处理器通信连接的存储器,还包括本公开任一实施例所述的时序信号处理装置;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以控制所述时序信号处理装置实现本公开任一实施例所述的时序信号处理方法。
本公开实施的再一个方面,本公开提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当所述指令被执行时,使得计算机执行本公开任一实施例所述的时序信号处理方法。
本公开实施的再一个方面,本公开提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现本公开任一实施例所述的时序信号处理方法。
基于本公开的实施例提供的时序信号处理及图像重建方法和装置、设备及介质中,对光电时序信号的处理包括工作时序相互独立的积分处理操作和采样处理操作,其中,在积分处理操作中,通过接收光电时序信号并对光电时序信号进行积分,得到积分值,响应于积分值达到预设阈值复位并更新状态标识;在采样处理操作中,按照预设采样频率分别对积分值和状态标识进行采样,并控制状态标识复位,基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列,以便基于该积分值序列和状态标识序列进行信号分析或进行处理后输出数字图像。由于积分处理操作和采样处理操作在工作时序上相互独立,且对光电时序信号的积分和复位与状态标识的更新与复位相互独立,实现了积分处理和采样处理之间解耦合,解除了积分处理和采样处理之间的相互依赖和耦合关系,通过持续接收光电时序信号并进行积分、每当积分值达到预设阈值时复位,就可以连续记录时序信号的变化,从而提高了光电传感器对光电时序信号采集和处理的精度、敏感度,有助于精确还原监测场景。
下面通过附图和实施例,对本公开的技术方案做进一步的详细描述。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围,而是通过参考特定实施例为本领域技术人员说明本公开的概念。
图1为本公开的一个实施例提供的时序信号处理方法的流程图。
图2为本公开的一个实施例提供的图像重建方法的流程图。
图3为本公开的一个实施例提供的时序信号处理装置的结构示意图。
图4为本公开的另一个实施例提供的时序信号处理装置的结构示意图。
图5为本公开的又一个实施例提供的时序信号处理装置的结构示意图。
图6为本公开的一个实施例提供的图像重建设备的结构示意图。
图7为本公开的一个实施例提供的电子设备的结构示意图。
具体实施方式
现在将参照附图来详细描述本公开的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开的范围。
本领域技术人员可以理解,本公开实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等,既不代表任何特定技术含义,也不表示它们之间的必然逻辑顺序。
还应理解,在本公开实施例中,“多个”可以指两个或两个以上,“至少一个”可以指一个、两个或两个以上。
还应理解,对于本公开实施例中提及的任一部件、数据或结构,在没有明确限定或者在前后文给出相反启示的情况下,一般可以理解为一个或多个。
另外,本公开中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本公开中字符“/”,一般表示前后关联对象是一种“或”的关系。
还应理解,本公开对各个实施例的描述着重强调各个实施例之间的不同之处,其相同或相似之处可以相互参考,为了简洁,不再一一赘述。
同时,应当明白,为了便于描述,附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本公开及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。基于此,本公开实施例提供一种时序信号处理方法和装置、设备,使积分处理操作和采样处理操作在工作时序上相互独立,且对光电时序信号的积分和状态标识的更新与复位相互独立,实现了积分处理和采样处理之间解耦合,解除了积分处理和采样处理之间的相互依赖和耦合关系,通过持续接收光电时序信号并进行积分、每当积分值达到预设阈值时复位,就可以连续记录时序信号的变化,从而提高了光电传感器对光电时序信号采集和处理的精度、敏感度,有助于精确还原监测场景。
图1为本公开的一个实施例提供的时序信号处理方法的流程图。本公开实施例的时序信号处理方法包括工作时序相互独立的积分处理操作和采样处理操作。其中的积分处理操作包括操作110和120,采样处理操作包括操作130和140。如图1所示。
110,接收光电时序信号,并对该光电时序信号进行积分,得到积分值。
其中的光电时序信号可以来源于信号采集器,该信号采集器例如可以是摄像机中的光敏器件,该信号采集器的功能是实现光信号采集和光电转换,即采集光信号并将采集到的光信号转换为电信号(例如电流信号、电压信号等)。本公开实施例中,信号采集器所采集的光信号例如可以包括但不限于激光、红外光或可见光等。电信号具有信号强度,对应的,上述对光电时序信号即时序电信号,对光电时序信号进行积分即累积时序电信号的信号强度,积分值表示累积得到的累积信号强度。信号采集器输出的光电时序信号的信号强度与采集的光强正相关。
其中,每个信号采集器可以对监测场景中指定的局部空间位置的时空信号(例如光信号)进行时域采样,由多个信号采集器排列形成的采集器阵列互相配合,覆盖整个监测场景的区域,从而可以实现对整个监测场景中的时空信号的采样。
120,响应于积分得到的积分值达到预设阈值时复位并更新状态标识,该状态标识用于表示在一个采样周期内积分值达到预设阈值的次数,也可以理解为在一个采样周期内积分值复位的次数。
130,按照预设采样频率分别对积分值和状态标识进行采样,并在每次采样后控制上述状态标识复位。
其中,状态标识复位后进入下一个采样周期。
140,基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列,该积分值序列和状态标识序列可用于进行信号分析或被处理后用于输出图像。
例如,根据具体的应用需求,在不需要输出数字图像时,可以对上述积分值序列和状态标识序列进行信号分析,并根据信号分析结果进行信号采集决策或实际应用中的具体行为决策等,例如,根据信号分析结果调整积分处理操作中的预设阈值、采样处理操作中的采样频率;或者在无人驾驶场景中基于信号分析结果决策行驶方案等等。
基于本实施例,由于积分处理操作和采样处理操作在工作时序上相互独立,且对光电时序信号的积分和状态标识的更新与复位相互独立,实现了积分处理和采样处理之间解耦合,解除了积分处理和采样处理之间的相互依赖和耦合关系,通过持续接收光电时序信号并进行积分、每当积分值达到预设阈值时复位,就可以连续记录时序信号的变化,从而提高了光电传感器对光电时序信号采集和处理的精度、敏感度,有助于精确还原监测场景。
可选地,在其中一些实现方式中,操作110和120中的积分处理操作可以包括:利用积分器,例如设置于信号积分模块中的积分器,接收光电时序信号,对光电时序信号进行积分,得到积分值;利用标识器,例如设置于上述信号积分模块中的标识器,监测积分器得到的积分值,响应于积分值达到预设阈值时更新该标识器的状态标识,并生成积分复位信号控制积分器复位。
其中,一个该信号采集器可以与一个或多个积分器连接,通过连接的一个或多个积分器分别对该信号采集器采集得到的光电时序信号进行积分。
其中,标识器通过状态标识记录积分器的积分值达到预设阈值的次数,即积分器复位了多少次,是计数的过程。标识器通常具有最大计数能力,需要复位,该复位可以是自行复位,也可以由外界控制信号控制复位。例如每次采样处理操作即可触发标识器的状态标识复位,也可以是在每次采样处理操作后生成标识复位信号,通过标识复位信号控制状态标识复位。
在具体实现中,标识器的状态标识可以由一位或多位数字表示,更新标识器的状态标识,可以是将标识器的状态标识增加1。例如状态标识是001,增加1后是002。或者,状态标识也可以是用二进制1进行状态标记,通过这种方式,该积分器所记录的局部空间位置的信号被转化为一个1间歇式出现的二进制序列,二进制序列中的两个1之间的时间间隔,表示积分器积分得到两个1中的后一个1所需要的时间,全1的二进制序列表示对应局部空间位置的信号一直处于高强度状态。
可选地,在其中一些实现方式中,操作130和140中的采样处理操作可以包括:例如利用信号采样模块,按照预设采样频率分别对积分值和状态标识进行采样,并在每次采样后生成标识复位信号发送给标识器以控制该标识器的状态标识复位;基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列。
其中,当信号采样模块连接多个该信号积分模块时,该信号采样模块可以生成多个信号积分模块对应的积分值序列和状态标识序列。其中的预设采样频率可以根据实际需要设置,以实现按照不同的时间间隔进行信号采样。
其中,信号采样模块与信号积分模块的工作时序相互独立,即信号采样模块进行采样处理的过程与信号积分模块接收光电时序信号进行积分处理的过程互不影响。每个独立的信号积分模块可分别完整的记录接收到的光电时序信号的变化过程。
本公开实施例中,积分器的复位和标识器的复位是相互独立的,且信号采样模块和信号积分模块之间相互独立,信号采样模块不会控制积分器的复位。如此,只要积分值达到该预设阈值,积分器就会复位,由此,积分器通过不断的接收光电时序信号并进行积分、积分值达到预设阈值即复位,实现了连续记录时序信号变化的目的,提高了光电传感器对时序信号采集和处理的精度、敏感度。
可选地,本公开实施例的时序信号处理方法还可以包括如下量化处理操作:分别对上述状态标识序列和积分值序列进行量化编码,以生成时序状态编码序列和时序信号编码序列。
其中,量化,是对各信号采集器对应的图像颜色或其它物理量进行离散化的过程,即将图像颜色或其它物理量从连续数值转换为某个最小单位的整数倍,得到量化结果(即量化值),每个信号采集器对应的图像颜色或其它物理量的量化值形成图像的一个像素,所有像素按照行列形式排列成数字图像;编码,即将量化结果用代码的形式(例如二进制)表示出来。可选地,在其中一些实施例中,上述量化处理操作可以通过一个单独的量化模块实现,或者,也可以通过上述信号采样模块实现,本公开实施例对此不做限制。
可选地,在其中一些实施例中,可以采用预设量化方式分别对上述状态标识序列和积分值序列进行量化编码,其中的预设量化方式可以理解为预设的量化编码方式,可以预先设置在用于实现上述量化处理操作的量化模块中或者信号采样模块中。
可选地,本公开实施例的时序信号处理方法还可以包括如下图像重构操作:例如利用图像重构模块,基于上述时序状态编码序列和时序信号编码序列进行图像重构计算,或者基于上述积分值序列和状态标识序列进行图像重构计算,以重构输出数字图像。即,本实施例中,可以采用数字信号形式的时序状态编码序列和时序信号编码序列重构出数字图像,也可以直接利用模拟信号形式的积分值序列和状态标识序列重构出数字图像,本公开实施例对此不做限制。
可选地,本公开实施例的时序信号处理方法还可以包括控制处理操作,在该控制处理操作中,例如可以利用分析模块,对量化模块或者信号采样模块输出的时序状态编码序列和时序信号编码序列进行分析计算,或者对信号采样模块输出的积分值序列和/或状态标识序列进行分析计算,其中的分析计算例如动态范围分析、亮度分析、目标检测识别跟踪等,输出有效信息分析结果、用于对积分处理操作中的预设阈值进行调整的阈值控制信号(包括调整后的具体预设阈值)、对采样处理操作中的预设采样频率进行调整的采样控制信号(包括调整后的具体采样频率)、以及对量化处理操作中的量化位宽进行调整的量化控制信号(包括调整后的具体位宽)。
其中,上述控制处理操作,例如可以包括以下至少一项:
根据上述时序状态编码序列和/或时序信号编码序列生成阈值控制信号,可以将该阈值控制信号输出给信号积分模块,以利用该阈值控制信号调整积分处理操作中的预设阈值;和/或,
根据上述积分值序列和/或状态标识序列生成阈值控制信号,可以将该阈值控制信号输出给信号积分模块,以利用该阈值控制信号调整积分处理操作中的预设阈值;和/或,
对上述时序状态编码序列和/或时序信号编码序列在时域上的变化率进行分析,并根据得到的第一分析结果生成采样控制信号,可以将该采样控制信号输出给信号采样模块,以利用该采样控制信号调整采样处理操作中的采样频率;和/或,
对上述积分值序列和/或状态标识序列在时域上的变化率进行分析,并根据得到的第二分析结果生成采样控制信号,可以将该采样控制信号输出给信号采样模块,以利用该采样控制信号调整采样处理操作中的采样频率;和/或,
对上述时序状态编码序列和/或时序信号编码序列进行纹理特征分析,并根据得到的第三分析结果生成量化控制信号,可以将该量化控制信号输出给实现上述量化处理操作的量化模块或者信号采样模块,以调整量化处理操作中的量化位宽(也称为量化位数);和/或,
对上述积分值序列和/或状态标识序列进行纹理特征分析,并根据得到的第四分析结果生成量化控制信号,可以将该量化控制信号输出给实现上述量化处理操作的量化模块或者信号采样模块,以调整量化处理操作中的量化位宽。
可选地,本公开实施例的时序信号处理方法还可以包括如下至少一项存储处理操作:例如利用存储模块,存储最近一段预设时长内(例如最近5秒内)的时序状态编码序列和时序信号编码序列,存储最近一段预设时长内(例如最近5秒内)的积分值序列和状态标识序列,例如,可以按照先入先出(FIFO)的方式存储最近一段预设时长内的时序状态编码序列和时序信号编码序列、积分值序列和状态标识序列。
可选地,本公开实施例的时序信号处理方法还可以包括如下以下至少一项编码压缩操作:
例如利用编码压缩模块,对上述时序状态编码序列和时序信号编码序列进行压缩,以降低数据大小,提升输出速率,并将压缩后的时序状态编码序列和时序信号编码序列发送至该存储模块进行存储处理或者进行输出;对上述积分值序列和状态标识序列进行压缩,并将压缩后的积分值序列和状态标识序列进行存储处理或输出;对重构得到的数字图像进行压缩后输出;对信号分析得到的结果,例如上述有效信息分析结果、第一分析结果、第二分析结果等,进行压缩后输出。
本公开任一实施例的时序信号处理方法中,用于实现量化处理操作的量化模块、用于实现图像重构操作的图像重构模块、用于实现控制处理操作的分析模块、用于实现存储处理操作的存储模块、用于实现编码压缩操作的编码压缩模块,与用于实现积分处理操作的信号积分模块和用于实现采样处理操作的信号采样模块,可以采用如图4所示实施例以串行排列方式进行连接;或者,用于实现量化处理操作的量化模块、用于实现图像重构操作的图像重构模块、用于实现控制处理操作的分析模块、用于实现存储处理操作的存储模块、用于实现编码压缩操作的编码压缩模块,还可以采用如图5所示实施例的方式,分别与用于实现积分处理操作的信号积分模块和用于实现采样处理操作的信号采样模块以并行排列方式进行连接;或者,信号积分模块和信号采样模块与量化模块、分析模块、图像重构模块、存储模块、编码压缩模块之间,还可以以串、并行混合排列方式进行连接,等等,本公开实施例对此不做限制。
图2为本公开的一个实施例提供的图像重建方法的流程图。如图2所示,本实施例的图像重建方法包括:
210,获取光电时序信号。
其中的光电时序信号可以来源于信号采集器,该信号采集器例如可以是摄像机中的光敏器件,该信号采集器的功能是实现光信号采集和光电转换,即采集光信号并将采集到的光信号转换为电信号(例如电流信号、电压信号等)。本公开实施例中,信号采集器所采集的光信号例如可以包括但不限于激光、红外光或可见光等。电信号具有信号强度,对应的,上述对光电时序信号即时序电信号,对光电时序信号进行积分即累积时序电信号的信号强度,积分值表示累积得到的累积信号强度。信号采集器输出的光电时序信号的信号强度与采集的光强正相关。
其中,每个信号采集器可以对监测场景中指定的局部空间位置的时空信号(例如光信号)进行时域采样,由多个信号采集器排列形成的采集器阵列互相配合,覆盖整个监测场景的区域,从而可以实现对整个监测场景中的时空信号的采样。
220,采用本公开任一实施例所述的时序信号处理方法对获取到的光电时序信号进行处理,得到重建的数字图像。
例如,通过积分处理操作,接收光电时序信号,并对光电时序信号进行积分,得到积分值,响应于积分值达到预设阈值时复位并更新状态标识;通过与积分处理操作工作时序相互独立的采样处理操作,按照预设采样频率分别对积分值和状态标识进行采样,并控制状态标识复位,基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列;通过量化处理操作,分别对状态标识序列和积分值序列进行量化编码,生成时序状态编码序列和时序信号编码序列;通过图像重构操作,基于时序状态编码序列和时序信号编码序列进行解码和图像重构计算,重构形成数字图像。
230,控制显示器显示上述数字图像或基于上述数字图像进行应用处理。
其中,基于上述数字图像进行应用处理,例如可以是,根据具体的应用需求,对上述数字图像进行目标检测、目标跟踪、目标状态检测等等,本公开实施例对具体的应用需求和对应的应用处理操作不做限制。
可选地,在该操作230之前,还可以对数字图像进行压缩,再由显示器显示压缩后的数字图像。
本公开上述实施例提供的时序信号处理方法和图像重建方法可以应用在拍摄设备的控制芯片上。
本公开上述实施例的时序信号处理方法可以通过本公开实施例的时序信号处理装置实现,以下结合时序信号处理装置实施例对本公开上述实施例的时序信号处理方法进行进一步详细说明,其中,时序信号处理方法实施例和时序信号处理装置实施例的对应内容可以相互补充和参考。
图3为本公开的一个实施例提供的时序信号处理装置的结构示意图。如图3所示,本公开实施例的时序信号处理装置包括工作时序相互独立的信号积分模块310和信号采样模块320,该信号积分模块310包括积分器311和标识器312。
其中,积分器311,用于接收光电时序信号,并对接收到的光电时序信号进行积分,得到积分值。
标识器312,用于响应于积分器311得到的积分值达到预设阈值时更新该标识器312的状态标识,该状态标识用于表示在一个采样周期内积分值达到预设阈值的次数,也可以理解为在一个采样周期内积分值复位的次数。其中,标识器312通过状态标识记录积分器311的积分值达到预设阈值的次数,即积分器311复位了多少次,是计数的过程。标识器312通常具有最大计数能力,需要复位,该复位可以是自行复位,也可以由外界控制信号控制复位。
信号采样模块320,用于按照预设采样频率分别对积分器311得到的积分值和标识器312的状态标识进行采样,并在每次采样后控制标识器312的状态标识复位,例如可以通过每次采样的操作触发标识器312的状态标识复位,也可以是在每次采样后生成标识复位信号,通过该标识复位信号控制标识器312的状态标识复位,状态标识复位后进入下一个采样周期;基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列,该积分值序列和状态标识序列可用于进行信号分析或被处理后用于输出数字图像。例如,根据具体的应用需求,在不需要输出数字图像时,可以对上述积分值序列和状态标识序进行信号分析,并根据信号分析结果进行信号采集决策或实际应用中的具体行为决策等,例如,根据信号分析结果调整积分处理操作中的预设阈值、采样处理操作中的采样频率;或者在无人驾驶场景中基于信号分析结果决策行驶方案等等。
可选地,在其中一些实现方式中,时序信号处理装置可以包括N个信号积分模块310,N为大于零的整数。每个信号积分模块310可以包括M个积分器和M个标识器,M个积分器和M个标识器一一对应连接,即一个积分器连接一个标识器,M为大于零的整数。可选的,M个积分器311可以是以组成阵列的形式进行工作,在积分器阵列中,M个积分器311可以相互独立运行。时序信号处理装置可以包括N个信号积分模块310和N个信号采样模块320,N个信号积分模块310形成的信号积分模块阵列可以覆盖整个监测区域。N个信号积分模块310和N个信号采样模块320一一对应连接,每个信号积分模块310中的M个积分器311可以共享一个该信号积分模块310连接的信号采样模块320,N为大于零的整数。
可选地,积分器311接收的光电时序信号可以来源于信号采集器,该信号采集器例如可以是摄像机中的光敏器件,该信号采集器的功能是实现光信号采集和光电转换,其中的光电转换即将采集到的光信号转换为电信号(例如电流信号、电压信号等)。本公开所采集的光信号例如可以包括但不限于激光、红外光或可见光等。电信号具有信号强度,对应的,上述对光电时序信号即时序电信号,对光电时序信号进行积分即累积时序电信号的信号强度,积分值表示累积得到的累积信号强度。信号采集器输出的光电时序信号的信号强度与采集的光强正相关。
该信号采集器的采样包括对指定的局部空间位置的时空信号(例如光信号)进行时域采样,由信号采集器形成的采集器阵列对整个监控区域的时空信号进行空域采样。在对整个监控区域的时空信号进行空域采样时,多个信号采集器排列成阵列互相配合,覆盖整个监测区域。
一个信号采集器可以和一个或多个积分器311连接。
可选地,在其中一些实现方式中,标识器312具体用于监测器连接的积分器311得到的积分值,响应于该积分器311得到的积分值达到预设阈值时,更新该标识器312的状态标识,并生成积分复位信号控制该积分器311复位。
在具体实现中,标识器的状态标识可以由一位或多位数字表示,更新标识器的状态标识,可以是将标识器的状态标识增加1。例如状态标识是001,增加1后是002。或者,状态标识也可以是用二进制1进行状态标记,通过这种方式,该积分器所记录的局部空间位置的信号被转化为一个1间歇式出现的二进制序列,二进制序列中的两个1之间的时间间隔,表示积分器积分得到两个1中的后一个1所需要的时间,全1的二进制序列表示对应局部空间位置的信号一直处于高强度状态。
信号采样模块320分别与积分器311、标识器312连接,信号采样模块320与信号积分模块310可以布置于一芯片板卡内。信号采样模块320可以在每次采样后或者在状态标识序列中的状态标识更新时(如增加1或设为1时),生成标识复位信号,并将该标识复位信号发送至标识器312,以控制标识器312进行复位。
在具体实现中,信号采样模块320连接多个信号积分模块310时,可以生成该多个信号积分模块310对应的积分值序列和状态标识序列。其中的预设采样频率可以根据实际需要设置,以实现按照不同的时间间隔进行信号采样。该信号采样模块320中,用于进行积分值采样和状态标识采样的器件可以称为采样器。则每个信号积分模块310中的M个积分器311可以共享一个该信号积分模块310连接的信号采样模块320中的采样器。
其中,标识器312通过状态标识记录积分器积分值达到预设阈值的次数,即积分器复位了多少次,是计数的过程。该标识器312通常具有最大计数能力,需要复位,复位可以是自行复位,也可以是由信号采样模块320控制复位。
其中,信号采样模块320与信号积分模块310或由多个信号积分模块310形成的信号积分模块阵列的工作时序相互独立,即信号采样模块320进行采样处理的过程与信号积分模块310接收光电时序信号进行积分处理的过程互不影响,且积分器311对光电时序信号的积分和复位与标识器312状态标识的更新与复位相互独立,每个独立的信号积分模块310可分别完整的记录接收到的光电时序信号的变化过程,由此,实现了积分处理和采样处理之间解耦合,解除了积分处理和采样处理之间的相互依赖和耦合关系,通过信号积分模块310持续接收光电时序信号并进行积分、每当积分值达到预设阈值时复位,就可以连续记录时序信号的变化,从而提高了光电传感器对光电时序信号采集和处理的精度、敏感度,有助于精确还原监测场景。
可选地,在本公开实施例的时序信号处理装置中,还可以包括量化模块、图像重构模块、分析模块、存储模块和编码压缩模块中的至少一个。在本公开实施例的时序信号处理装置中,信号积分模块、信号采样模块与时序信号处理装置中的其他各模块可以以串行排列的方式进行连接以串行执行本公开实施的时序信号处理流程。或者,本公开实施例的时序信号处理装置中的各模块也可以以并行排列连接的方式进行连接以并行执行本公开实施的时序信号处理流程。或者,本公开实施例的时序信号处理装置中的各模块还可以以串并行混合排列的方式进行连接以按照预设顺序执行本公开实施的时序信号处理流程。其中,量化模块、图像重构模块、分析模块、存储模块、编码压缩模块中任意一个或多个模块可以根据实际需要进行删减、功能或连接关系调整,也可以根据实际需要进一步在时序信号处理装置中增加其他功能模块。
图4为本公开的另一个实施例提供的时序信号处理装置的结构示意图。图4中,以信号积分模块310和信号采样模块320与量化模块330、图像重构模块340、分析模块350、存储模块360、编码压缩模块370以串行排列方式进行连接以执行时序信号处理流程为例进行描述。
参见图4,在其中一些实现方式中,本公开实施例的时序信号处理装置还包括量化模块330,与信号采样模块320连接,用于分别对信号采样模块320得到的状态标识序列和积分值序列进行量化编码,以相应生成时序状态编码序列和时序信号编码序列,例如将电流值、电压值或其他模拟信号转换为脉冲信号等数字信号。在一个可选的实施例中,该量化模块330可以按照预设量化方式分别对状态标识序列和积分值序列进行量化编码,该预设量化方式可以理解为预设的编码要求,可以预先设置在量化模块330中。在具体实现中,该量化模块330中,用于对状态标识序列和积分值序列进行量化编码的器件可以称为量化器。与信号采样模块320中的采样器类似地,每个信号积分模块310对应一个量化模块330,信号积分模块310中的M个积分器311可以共享一个该信号积分模块310对应的量化模块330中的量化器。
可选的,再参见图4,本公开实施例的时序信号处理装置还可以包括图像重构模块340,与量化模块330连接,用于基于量化模块330得到的时序状态编码序列和时序信号编码序列进行图像重构计算,或者基于信号采样模块320得到的积分值序列和状态标识序列进行图像重构计算,以重构输出数字图像。在一个可选的实施例中,图像重构模块340可以对量化模块330得到的时序状态编码序列和时序信号编码序列进行解码,并采用预设图像重构算法,例如可以是基于峰电位间距(ISI)的脉冲重构算法(TFI)、基于固定窗口滑动的脉冲重构算法(TFP)、基于卷积神经网络(convolutional neural network,CNN)的脉冲重构算法脉冲重构算法等,对解码结果进行图像重构计算,以输出任意采样时刻的n比特图像数据序列,通过该图像数据序列构建形成数字图像。
可选的,再参见图4,本公开实施例的时序信号处理装置还包括分析模块350,与信号积分模块310、信号采样模块320和量化模块330连接,该分析模块350具有对信号采样模块320输出的积分值序列和/或状态标识序列、或者量化模块330输出的时序状态编码序列和/或时序信号编码序列的分析计算功能,以及对信号积分模块310、信号采样模块320和量化模块330的控制功能。其中的分析计算例如动态范围分析、亮度分析、目标检测识别跟踪等,通过分析计算可以得到动态范围分析、亮度分析、目标检测识别跟踪等的有效信息分析结果,以及可以得到用于对积分处理操作中的预设阈值进行调整的阈值控制信号(包括调整后的具体预设阈值)、对采样处理操作中的预设采样频率进行调整的采样控制信号(包括调整后的具体采样频率)、以及对量化处理操作中的量化位宽进行调整的量化控制信号(包括调整后的具体量化位宽)。
具体的,在一些实现方式中,分析模块350,用于根据量化模块330得到的时序状态编码序列和/或时序信号编码序列生成阈值控制信号,或者根据信号采样模块320输出的积分值序列和/或状态标识序列生成阈值控制信号,其中的阈值控制信号包括调整后的预设阈值,并向该积分器311输出该阈值控制信号,以调整积分处理操作中的预设阈值。例如,在一些实现方式中,分析模块350可以在根据量化模块330得到的时序状态编码序列和/或时序信号编码序列确定指定状态标识所占比例小于预设比例时,按照阈值调整规则调整积分器311当前的预设阈值,生成的阈值控制信号用于控制调整后的预设阈值小于调整当前的预设阈值。分析模块350可以在根据量化模块330得到的时序状态编码序列和/或时序信号编码序列确定指定状态标识所占比例大于预设比例时,按照阈值调整规则调整积分器311当前的预设阈值,生成的阈值控制信号用于控制调整后的预设阈值大于调整前的预设阈值。分析模块350可以在根据量化模块330得到的时序状态编码序列和/或时序信号编码序列确定指定状态标识所占比例等于预设比例时,不生成阈值控制信号,即无需调整积分处理操作中的预设阈值。其中的指定状态标识例如为1,如果状态标识序列中1的所占比例过低,则可以通过阈值控制信号下调积分处理操作中的预设阈值,以使得该积分器311更快触发标识器312中脉冲信号1的生成速率和发送速度。如果状态标识序列中1的所占比例过高,则可以通过阈值控制信号上调积分处理操作中的预设阈值,以延缓标识器312中脉冲信号1的生成速率和发送速度。
在一些实现方式中,分析模块350,用于对量化模块330得到的时序状态编码序列和/或时序信号编码序列在时域上的变化率进行分析,得到第一分析结果,并根据该第一分析结果生成采样控制信号,向信号采样模块320输出该采样控制信号,以调整信号采样模块320的采样频率;或者,对信号采样模块320得到的积分值序列和/或状态标识序列在时域上的变化率进行分析,得到第二分析结果,并根据该第二分析结果生成采样控制信号,向信号采样模块320输出该采样控制信号,以调整信号采样模块320的采样频率。例如,当第一分析结果或第二分析结果表征运动物体速度高于预设速度时,则按照采样调整规则调整信号采样模块320当前的采样频率,使调整后的采样频率高于调整前的采样频率。当第一分析结果或第二分析结果表征运动物体速度低于预设速度时,可以调低采样频率。其中的该采样调整规则可以预先设定在分析模块350中。
例如,量化模块330在对积分值序列进行量化编码时,可以将信号采样模块320本次采样的积分值序列与相邻上次采样的积分值序列进行比较,输出二者之间的差值。两次采样的积分序列值可以先做差再量化,或者也可以先量化再作差。其中的差值为量化模块330对相邻上次采样的图像像素量化值和本次采样的图像像素量化值之间的差值结果。例如对于监测场景中存在闪点(如高频率闪烁的信号灯、LED指示牌等)的情况,二者之间的差值较为规律,可以由分析模块350根据差值的特征分析出来积分值序列在时域上的变化率,进而得到第二分析结果以调整信号采样模块320的采样频率。
例如,分析模块350可以根据时序状态编码序列和/或该时序信号编码序列解析出任意一个像素的连续一段时间周期的状态标识序列,在根据该任意一个像素的连续一段时间周期的状态标识序列判断物体运动过快时,可以通过采样控制信号控制提高该信号采样模块320的采样频率,反之,在根据该任意一个像素的连续一段时间周期的状态标识序列判断物体运动过慢时,可以通过采样控制信号控制降低该信号采样模块320的采样频率。
在一些实现方式中,分析模块350,用于对量化模块330得到的时序状态编码序列和时序信号编码序列进行纹理特征分析,得到第三分析结果,并根据该第三分析结果生成量化控制信号,向量化模块330输出该量化控制信号以调整量化模块330的量化位宽;或者,对信号采样模块320得到的积分值序列和/或状态标识序列进行纹理特征分析,得到第四分析结果,并根据该第四分析结果生成量化控制信号,向量化模块330输出该量化控制信号以调整量化模块330的量化位宽。具体的,该量化控制信号,可以由分析模块350对对应的量化模块330得到的时序状态编码序列进行纹理特征分析得到的第三分析结果中的图像纹理信息生成。例如,该分析模块350可以对空间维度的脉冲信号进行空间特征分析,根据得到的第三分析结果中的图像纹理信息输出量化控制信号,以调整量化模块330的量化位宽。该空间维度的脉冲信号即每个时刻像平面中多个标识器312输出的状态标识序列。在根据空间特征判断出监测场景中的细节(即图像纹理)较多时,可以提高量化位宽;在细节较少时则可以降低量化位宽。
本公开实施中,可以根据传输带宽和监测场景灵活设置相应的量化位宽和量化位宽的调整策略。增大量化位宽可以提高量化模块330记录时序信号的精细程度,同时会增加输出的数据速率,从而增加所需输出带宽。减小量化位宽会降低记录的时序信号的精细程度,同时可以降低输出的数据速率,从而降低所需输出带宽。在具体应用中,可以针对静止监测场景的动态影像捕捉,采用减小量化位宽的方式来进行时序信号的采集和记录。量化位宽中的高位a比特(即高比特位a)和低位b比特(即低比特位b)可以根据采样内容的变化,采用不同速率进行输出。
可选的,分析模块350可以与外部控制设备(例如计算机)通信,由外部控制设备设定好预设阈值、预设采样频率、量化位宽和量化程序后输入至该分析模块350中。该分析模块350具体根据接收到的预设阈值生成阈值控制信号,根据接收到的预设采样频率生成采样控制信号,根据接收到的量化位宽和量化程序生成量化控制信号。
可选的,再参见图4,本公开实施例的时序信号处理装置还可以包括存储模块360,用于存储最近一段预设时长内(例如最近5秒内)由量化模块330得到的时序状态编码序列和时序信号编码序列,或者预设时长内由信号采样模块320得到的积分值序列和状态标识序列。具体的,该存储模块360可以按照先入先出的方式,对量化模块330最近一段预设时长内输出的时序状态编码序列和时序信号编码序列、信号采样模块320得到的积分值序列和状态标识序列进行存储,以便分析模块350和图像重构模块340使用。其中的预设时长可以根据具体需求设置。
可选地,在其中一些实现方式中,上述图像重构模块340、分析模块350和存储模块360可以独立设置,也可以设置在同一个模块中,例如,图像重构模块340、分析模块350和存储模块360可以设置于一个计算模块380中。本公开实施例对图像重构模块340、分析模块350和存储模块360的设置形式不做限制。
可选的,再参见图4,本公开实施例的时序信号处理装置还可以包括编码压缩模块370,用于对量化模块330得到的时序状态编码序列和时序信号编码序列进行压缩,并对将压缩后的时序状态编码序列和时序信号编码序列进行存储或者传输,或者对信号采样模块320得到的积分值序列和状态标识序列进行压缩,并将压缩后的积分值序列和状态标识序列进行存储或者传输。可选地,该编码压缩模块370可以分别与分析模块350、存储模块360连接,将压缩后的时序状态编码序列和时序信号编码序列发送至存储模块360,由该存储模块360存储压缩后的时序状态编码序列和时序信号编码序列,以及将压缩后的积分值序列和状态标识序列发送至存储模块360,由该存储模块360存储压缩后的积分值序列和状态标识序列,对分析模块350得到的结果,例如有效信息分析结果、第一分析结果、第二分析结果、第三分析结果和/或第四分析结果进行压缩后输出。具体实现中,该编码压缩模块370可以采用预设压缩编码方式,对量化模块330得到的时序状态编码序列和该时序信号编码序列、或者信号采样模块320得到的积分值序列和状态标识序列进行压缩编码,得到时序信号编码码流,以降低数据传输速率,再输出时序信号编码码流以存储或对外传输。
可选的,该编码压缩模块370还可以与该图像重构模块340连接,用于对图像重构模块340得到的数字图像进行压缩后传输。因为有的电子设备在进行数字图像显示时不能以数字图像原有的尺寸显示,编码压缩模块370对数字图像进行压缩后输出给电子设备,可以使得电子设备对数字图像的显示效果更佳。
图5为本公开的又一个实施例提供的时序信号处理装置的结构示意图。参见图5,该实施例中,信号积分模块410与图3、图4实施例中的作用和结构相同,积分器411用于接收光电时序信号,并对接收到的光电时序信号进行积分,得到积分值。标识器412用于响应于积分器411得到的积分值达到预设阈值时更新该标识器412的状态标识。另外,该时序信号处理装置还包括量化模块430、图像重构模块440、分析模块450、存储模块460和编码压缩模块470中的至少一个。其中:不同于图4所示实施例,该图5所示实施例中,以量化模块430、图像重构模块440、分析模块450、存储模块460、编码压缩模块470分别以并行排列方式与信号采样模块420进行连接以执行信号处理流程为例进行描述。值得一提的是,在该实施例中,信号采样模块420还可以用于在得到积分值序列和状态标识序列之后,对该状态标识序列和积分值序列分别进行模数转换,例如将状态标识序列和积分值序列表示的电流值、电压值或其他模拟信号转换为脉冲信号等数字信号,得到时序状态编码序列和时序信号编码序列,此时,信号采样模块420可以实现量化模块430的功能,输出时序状态编码序列和时序信号编码序列时,则可以不再设置量化模块430。
参见图5,图像重构模块440与信号采样模块420连接,用于基于信号采样模块420得到的积分值序列和状态标识序列、或者时序状态编码序列和时序信号编码序列,进行图像重构计算,以输出任意采样时刻的n比特图像数据序列,通过该图像数据序列构建形成数字图像。该图像重构模块440的具体实现可以参考图4所示实施例中图像重构模块340的相关记载,此处不再赘述。
可选的,再参见图5,本公开实施例的时序信号处理装置还可以包括分析模块450,该分析模块450分别与信号积分模块410和信号采样模块420连接,具有对信号采样模块420输出的积分值序列和/或状态标识序列、或者时序状态编码序列和/或时序信号编码序列的分析计算功能,以及对信号积分模块410和信号采样模块420的控制功能。其中的分析计算例如动态范围分析、亮度分析、目标检测识别跟踪等,通过分析计算可以得到动态范围分析、亮度分析、目标检测识别跟踪等的有效信息分析结果,以及可以得到用于对积分处理操作中的预设阈值进行调整的阈值控制信号(包括调整后的具体预设阈值)、对采样处理操作中的预设采样频率进行调整的采样控制信号(包括调整后的具体采样频率)、以及对量化处理操作中的量化位宽进行调整的量化控制信号(包括调整后的具体量化位宽)。
具体的,在一些实现方式中,分析模块450用于根据信号采样模块420得到的积分值序列和/或状态标识序列、或者时序状态编码序列和/或时序信号编码序列,生成阈值控制信号、采样控制信号和量化控制信号。该分析模块450可以对信号采样模块420得到的积分值序列和/或状态标识序列、或者时序状态编码序列和/或时序信号编码序列进行分析计算,例如动态范围分析、亮度分析、目标检测识别跟踪等,输出有效信息分析结果、以及对信号积分模块410的阈值控制信号(包括调整后的具体预设阈值)、对信号采样模块420的采样控制信号(包括调整后的具体采样频率)和量化控制信号(包括调整后的量化位宽)。
具体的,分析模块450根据信号采样模块420得到的积分值序列和/或状态标识序列、或者时序状态编码序列和/或时序信号编码序列,生成阈值控制信号、采样控制信号和量化控制信号,具体实现可以参考图4所示实施例中串行连接时分析模块350的相关记载,此处不再赘述。同样,分析模块450可以与外部控制设备(例如计算机)通信,由外部控制设备设定好预设阈值、预设采样频率、量化位宽和量化程序后输入至该分析模块450中。该分析模块450具体根据接收到的预设阈值生成阈值控制信号,根据接收到的预设采样频率生成采样控制信号,根据接收到的量化位宽和量化程序生成量化控制信号。
可选的,再参见图5,本公开实施例的时序信号处理装置还可以包括存储模块460,该存储模块460与信号采样模块420连接,用于存储最近一段预设时长内(例如最近5秒内)信号采样模块420得到的时序状态编码序列和时序信号编码序列、和/或时序状态编码序列和时序信号编码序列。具体的,该存储模块460可以按照先入先出的方式,对信号采样模块420最近一段预设时长内输出的时序状态编码序列和时序信号编码序列、和/或时序状态编码序列和时序信号编码序列进行存储,以便分析模块450、图像重构模块440根据需求使用。其中的预设时长可以根据具体需求设置。
可选的,再参见图5,本公开实施例的该时序信号处理装置还可以包括编码压缩模块470,用于对信号采样模块420得到的积分值序列和状态标识序列、和/或时序状态编码序列和时序信号编码序列进行压缩,对相应得到的压缩后的积分值序列和状态标识序列、和/或压缩后的时序状态编码序列和时序信号编码序列进行存储或者传输。具体的,该编码压缩模块470采用预设压缩编码方式,对信号采样模块420得到的积分值序列和状态标识序列、和/或时序状态编码序列和该时序信号编码序列进行压缩编码,得到时序信号编码码流,以降低数据传输速率,再输出时序信号编码码流以存储或对外传输。
在本公开一种示例性实施方式中,信号积分模块和信号采样模块与量化模块、分析模块、图像重构模块、存储模块、编码压缩模块之间,还可以以串、并行混合排列方式进行连接(附图未示出)。例如,编码压缩模块在与存储模块、图像重构模块并行排列的同时,还可以同时与存储模块连接,并将压缩后的时序状态编码序列和时序信号编码序列发送至该存储模块,由该存储模块存储压缩后的时序状态编码序列和时序信号编码序列;可选的,该编码压缩模块还可以与该图像重构模块连接,用于对图像重构模块得到的数字图像进行压缩后输出。因为有的电子设备在进行数字图像显示时不能以数字图像原有的尺寸显示,编码压缩模块对数字图像进行压缩后输出给电子设备,可以使得电子设备对数字图像的显示效果更佳。本公开实施例中,串、并行混合排列进行连接的具体方式可以根据实际应用需要进行设置,不再一一列举。
本公开上述实施例的图像方法可以通过本公开实施例的图像重建设备实现,以下结合图像重建设备实施例对本公开上述实施例的图像重建方法进行进一步详细说明,其中,图像重建方法实施例和图像重建设备实施例的对应内容可以相互补充和参考。
图6为本公开的一个实施例提供的图像重建设备的结构示意图。如图6所示,本公开其中一个实施例提供一种图像重建设备包括:获取模块510、控制模块520和本公开上述任一实施例所述的时序信号处理装置530。其中:
获取模块510,用于获取光电时序信号,并将该光电时序信号输入至时序信号处理装置530。
时序信号处理装置530,用于对接收到的光电时序信号进行处理,得到重建的数字图像。
控制模块520,用于控制显示器显示该数字图像或基于该数字图像进行应用处理。
可选地,在其中一些实现方式中,上述图像重建设备例如可以包括但不限于以下任意一项:集成电路、传感器等等。
可选地,在其中一些实现方式中,上述图像重建设备例如可以包括但不限于以下至少一项:脉冲相机、高速相机、视觉相机、音频播放器、视频播放器、导航设备、固定位置终端、娱乐单元、智能手机、通信设备、移动设备、机动交通工具中的设备、车载摄像头、手机摄像头、运动或可穿戴式相机、交通摄像头、工业检测相机、安装在可飞行物体上的摄像头、医疗摄像头、安防摄像头、家用电器摄像头等等。
图7为本公开的一个实施例提供的电子设备的结构示意图。如图7所示,本公开其中一个实施例提供的电子设备包括处理器610,以及与该处理器610通信连接的存储器620,还包括如本公开上述任一实施例的时序信号处理装置630。该存储器620存储计算机执行指令,该处理器610执行该存储器存储的计算机执行指令,以控制时序信号处理装置630实现本公开上述任一实施例提供的时序信号处理方法。
本公开还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机执行指令,当该指令被执行时,使得计算机执行指令被处理器执行时本公开上述任一实施例提供的该时序信号处理方法。
本公开还提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现本公开上述任一实施例提供的该时序信号处理方法。
需要说明的是,上述计算机可读存储介质可以是只读存储器(Read Only Memory,ROM)、可编程只读存储器(Programmable Read-Only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)、电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,EEPROM)、磁性随机存取存储器(Ferromagnetic Random Access Memory,FRAM)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(Compact Disc Read-Only Memory,CD-ROM)等存储器。也可以是包括上述存储器之一或任意组合的各种电子设备,如移动电话、计算机、平板设备、个人数字助理等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本公开实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本公开各个实施例所描述的方法。
本公开是参照根据本公开实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上仅为本公开的优选实施例,并非因此限制本公开的专利范围,凡是利用本公开说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本公开的专利保护范围内。
Claims (15)
1.一种时序信号处理方法,其特征在于,所述时序信号处理方法包括工作时序相互独立的积分处理操作和采样处理操作;其中:
在所述积分处理操作中,接收光电时序信号,并对所述光电时序信号进行积分,得到积分值;响应于所述积分值达到预设阈值时复位并更新状态标识,所述状态标识用于表示所述积分值达到预设阈值的次数;
在所述采样处理操作中,按照预设采样频率分别对所述积分值和所述状态标识进行采样,并控制所述状态标识复位;基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列,所述积分值序列和所述状态标识序列用于进行信号分析或被处理后用于输出图像。
2.根据权利要求1所述的方法,其特征在于,所述积分处理操作包括:
利用积分器接收光电时序信号,对所述光电时序信号进行积分,得到积分值;
利用标识器监测所述积分器得到的积分值,响应于所述积分值达到预设阈值时更新所述标识器的状态标识,并生成积分复位信号控制所述积分器复位。
3.根据权利要求1所述的方法,其特征在于,所述控制所述状态标识复位包括:
生成标识复位信号以控制所述标识器的状态标识复位。
4.根据权利要求3所述的方法,其特征在于,所述时序信号处理方法还包括量化处理操作;
在所述量化处理操作中,分别对所述状态标识序列和所述积分值序列进行量化编码,以生成时序状态编码序列和时序信号编码序列。
5.根据权利要求4所述的方法,其特征在于,所述时序信号处理方法还包括以下至少一项图像重构操作;
基于所述时序状态编码序列和所述时序信号编码序列进行图像重构计算,以重构输出图像;和/或,
基于所述积分值序列和所述状态标识序列进行图像重构计算,以重构输出图像。
6.根据权利要求4所述的方法,其特征在于,所述时序信号处理方法还包括以下至少一项控制处理操作:
根据所述时序状态编码序列和/或所述时序信号编码序列生成阈值控制信号,以利用所述阈值控制信号调整所述积分处理操作中的预设阈值;和/或,
根据所述积分值序列和/或所述状态标识序列生成阈值控制信号,以利用所述阈值控制信号调整所述积分处理操作中的预设阈值;和/或,
对所述时序状态编码序列和/或所述时序信号编码序列在时域上的变化率进行分析,并根据得到的第一分析结果生成采样控制信号,以利用所述采样控制信号调整所述采样处理操作中的采样频率;和/或,
对所述积分值序列和/或所述状态标识序列在时域上的变化率进行分析,并根据得到的第二分析结果生成采样控制信号,以利用所述采样控制信号调整所述采样处理操作中的采样频率;和/或
对所述时序状态编码序列和/或所述时序信号编码序列进行纹理特征分析,并根据得到的第三分析结果生成量化控制信号,以利用所述量化控制信号调整所述量化处理操作中的量化位宽;和/或,
对所述积分值序列和/或所述状态标识序列进行纹理特征分析,并根据得到的第四分析结果生成量化控制信号,以利用所述量化控制信号调整所述量化处理操作中的量化位宽。
7.根据权利要求4所述的方法,其特征在于,所述时序信号处理方法还包括以下至少一项存储处理操作:
存储预设时长内的所述时序状态编码序列和所述时序信号编码序列;和/或,
存储预设时长内的所述积分值序列和所述状态标识序列。
8.根据权利要求4所述的方法,其特征在于,所述时序信号处理方法还包括以下至少一项编码压缩操作:
对所述时序状态编码序列和所述时序信号编码序列进行压缩,并将压缩后的所述时序状态编码序列和所述时序信号编码序列进行存储处理或输出;和/或,
对所述积分值序列和所述状态标识序列进行压缩,并将压缩后的所述积分值序列和所述状态标识序列进行存储处理或输出;和/或,
对所述图像进行压缩后输出;和/或,
对所述信号分析得到的结果进行压缩后输出。
9.一种图像重建方法,其特征在于,包括:
获取光电时序信号;
采用权利要求1-8任一所述的时序信号处理方法对所述光电时序信号进行处理,得到重建图像;
控制显示器显示所述图像或基于所述图像进行应用处理。
10.一种时序信号处理装置,其特征在于,所述时序信号处理装置包括工作时序相互独立的信号积分模块和信号采样模块;所述信号积分模块包括积分器与标识器;
所述积分器,用于接收光电时序信号,并对所述光电时序信号进行积分,得到积分值,响应于所述积分值达到预设阈值时复位;
所述标识器,用于响应于所述积分值达到所述预设阈值时更新所述标识器的状态标识,所述状态标识用于表示所述积分值达到预设阈值的次数;
所述信号采样模块,用于按照预设采样频率分别对所述积分值和所述状态标识进行采样,并控制所述标识器的状态标识复位;基于采样时序及采样得到的积分值得到积分值序列,基于采样时序及采样得到的状态标识得到状态标识序列,所述积分值序列和所述状态标识序列用于进行信号分析或被处理后用于输出图像。
11.一种图像重建设备,其特征在于,包括获取模块、控制模块和权利要求10所述的时序信号处理装置;
所述获取模块,用于获取光电时序信号;
所述时序信号处理装置,用于对所述光电时序信号进行处理,得到重建的图像;
所述控制模块,用于控制显示器显示所述图像或基于所述图像进行应用处理。
12.根据权利要求10所述的设备,其特征在于,所述电子设备包括以下任意一项:脉冲相机、高速相机、视觉相机、音频播放器、视频播放器、导航设备、固定位置终端、娱乐单元、智能手机、通信设备、移动设备、机动交通工具中的设备、车载摄像头、手机摄像头、运动或可穿戴式相机、交通摄像头、工业检测相机、安装在可飞行物体上的摄像头、医疗摄像头、安防摄像头、或家用电器摄像头。
13.一种电子设备,其特征在于,包括:处理器,以及与所述处理器通信连接的存储器,还包括权利要求10所述的时序信号处理装置;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以控制所述时序信号处理装置实现权利要求1-8任一所述的时序信号处理方法。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当所述指令被执行时,使得计算机执行权利要求1-8任一所述的时序信号处理方法。
15.一种计算机程序产品,包括计算机程序,其中,所述计算机程序在被处理器执行时实现权利要求1-8中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211362681.7A CN118037879A (zh) | 2022-11-02 | 2022-11-02 | 时序信号处理及图像重建方法和装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211362681.7A CN118037879A (zh) | 2022-11-02 | 2022-11-02 | 时序信号处理及图像重建方法和装置、设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118037879A true CN118037879A (zh) | 2024-05-14 |
Family
ID=90984472
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211362681.7A Pending CN118037879A (zh) | 2022-11-02 | 2022-11-02 | 时序信号处理及图像重建方法和装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN118037879A (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105720988A (zh) * | 2016-01-18 | 2016-06-29 | 清华大学 | 一种用于压缩采样模数转换器的采样量化电路 |
US20180136298A1 (en) * | 2015-05-12 | 2018-05-17 | Eidgenossische Technische Hochschule | A method of determining a gradient impulse response function during execution of a magnetic resonance imaging or spectroscopy sequence |
CN115048954A (zh) * | 2022-05-23 | 2022-09-13 | 北京大学 | 一种仿视网膜的目标检测方法、装置、存储介质及终端 |
CN115225898A (zh) * | 2021-04-21 | 2022-10-21 | 北京大学 | 时序信号的编码方法、解码方法及装置 |
-
2022
- 2022-11-02 CN CN202211362681.7A patent/CN118037879A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180136298A1 (en) * | 2015-05-12 | 2018-05-17 | Eidgenossische Technische Hochschule | A method of determining a gradient impulse response function during execution of a magnetic resonance imaging or spectroscopy sequence |
CN105720988A (zh) * | 2016-01-18 | 2016-06-29 | 清华大学 | 一种用于压缩采样模数转换器的采样量化电路 |
CN115225898A (zh) * | 2021-04-21 | 2022-10-21 | 北京大学 | 时序信号的编码方法、解码方法及装置 |
CN115048954A (zh) * | 2022-05-23 | 2022-09-13 | 北京大学 | 一种仿视网膜的目标检测方法、装置、存储介质及终端 |
Non-Patent Citations (1)
Title |
---|
陆尧;姚素英;徐江涛;高静;: "基于双积分模拟重构大动态范围CIS系统研究", 光电子.激光, no. 09, 15 September 2007 (2007-09-15) * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108073890B (zh) | 用于由相机所捕获的视频序列中的动作识别的方法和系统 | |
TWI417813B (zh) | 可串接式相機竄改偵測收發器模組 | |
CN110782433B (zh) | 基于时序的动态信息暴力抛物检测方法、装置及存储介质 | |
EP2608529A1 (en) | Camera and method for optimizing the exposure of an image frame in a sequence of image frames capturing a scene based on level of motion in the scene | |
CN102801957A (zh) | 监视系统 | |
CN102752574A (zh) | 一种视频监控系统及方法 | |
Hung et al. | Speed up temporal median filter for background subtraction | |
JP7201887B2 (ja) | 情報を出力するための方法及び装置 | |
CN113160106B (zh) | 红外目标检测方法及装置、电子设备、存储介质 | |
CN112511821A (zh) | 视频卡顿检测方法、装置和存储介质 | |
CN104185078A (zh) | 视频监控处理方法、装置及系统 | |
WO2013096029A2 (en) | Integrated video quantization | |
KR102386804B1 (ko) | 이벤트들을 검출하기 위한 방법 및 장치 | |
CN115311591A (zh) | 异常行为的预警方法、装置及智能摄像头 | |
CN114466187B (zh) | 时空信号的采样方法、重构方法及其装置 | |
CN112148769A (zh) | 数据的同步方法、装置、存储介质以及电子装置 | |
JPWO2018037665A1 (ja) | 情報処理装置、情報処理システム、制御方法、及びプログラム | |
CN118037879A (zh) | 时序信号处理及图像重建方法和装置、设备及介质 | |
Wang et al. | Feature representation and compression methods for event-based data | |
CN221886620U (zh) | 光电传感器和电子设备 | |
CN109698932B (zh) | 数据传输方法及摄像机、电子设备 | |
CN116248861A (zh) | 一种智能视频检测方法、系统及装置 | |
CN104462422A (zh) | 对象的处理方法及装置 | |
CN114677719A (zh) | 图像信号处理的方法、装置和计算机可读存储介质 | |
CN102339394B (zh) | 侦测装置及侦测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |