CN112995515B - 数据处理方法及装置、存储介质、电子装置 - Google Patents

数据处理方法及装置、存储介质、电子装置 Download PDF

Info

Publication number
CN112995515B
CN112995515B CN202110246070.5A CN202110246070A CN112995515B CN 112995515 B CN112995515 B CN 112995515B CN 202110246070 A CN202110246070 A CN 202110246070A CN 112995515 B CN112995515 B CN 112995515B
Authority
CN
China
Prior art keywords
sensor
code information
image data
synchronous code
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110246070.5A
Other languages
English (en)
Other versions
CN112995515A (zh
Inventor
郝李鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202110246070.5A priority Critical patent/CN112995515B/zh
Publication of CN112995515A publication Critical patent/CN112995515A/zh
Application granted granted Critical
Publication of CN112995515B publication Critical patent/CN112995515B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明实施例提供了一种数据处理方法及装置、存储介质、电子装置,该方法包括:接收传感器获取的数据信息,其中,数据信息中包括图像数据以及图像数据的同步码信息,同步码信息包括协处理器实时配置至传感器的用于获取图像数据的参数信息;按照同步码信息对图像数据进行处理。通过本发明,解决了相关技术中对图像数据处理的问题,达到减轻CPU性能开销的效果。

Description

数据处理方法及装置、存储介质、电子装置
技术领域
本发明实施例涉及数据处理领域,具体而言,涉及一种数据处理方法及装置、存储介质、电子装置。
背景技术
在智能交通领域,目前普遍采用的抓拍方案叫双快门或三快门。协处理器(一般是现场可编程门阵列(Field Programmable Gate Array,简称为FPGA))采集到图像传感器Sensor输出的图像数据,在设定位置添加当前图像快门模式信息以及抓拍信息,输出给中央处理器(Central Processing Unit,简称为CPU),CPU采集到带有附加信息的图像后根据信息分类进行相应的处理。
随着Sensor输出图像的分辨率和帧率不断提高,这就对选用的FPGA的运行频率、逻辑单元数目、管脚数量等核心参数有很高的要求,也意味着当前方案下FPGA的选型局限性很大。
针对上述技术中存在的对图像数据的处理问题,相关技术尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种数据处理方法及装置、存储介质、电子装置,以至少解决相关技术中对图像数据的处理问题。
根据本发明的一个实施例,提供了一种数据处理方法,包括:接收传感器获取的数据信息,其中,上述数据信息中包括图像数据以及上述图像数据的同步码信息,上述同步码信息包括协处理器实时配置至上述传感器的用于获取上述图像数据的参数信息;按照上述同步码信息对上述图像数据进行处理。
根据本发明的另一个实施例,提供了一种数据处理方法,包括:确定同步码信息,其中,上述同步码信息包括拍摄图像数据的参数信息;将上述同步码信息通过低速通信接口实时配置至传感器,以指示上述传感器利用上述参数信息获取上述图像数据。
根据本发明的另一个实施例,提供了一种数据处理装置,包括:第一接收模块,用于接收传感器获取的数据信息,其中,上述数据信息中包括图像数据以及上述图像数据的同步码信息,上述同步码信息包括协处理器实时配置至上述传感器的用于获取上述图像数据的参数信息;第一处理模块,用于按照上述同步码信息对上述图像数据进行处理。
在一个示例性实施例中,上述第一接收模块,包括:第一确定单元,用于确定与上述传感器之间的高速信号接口;第一接收单元,用于通过上述高速信号接口在预设位置处实时接收上述传感器获取的上述数据信息。
在一个示例性实施例中,上述第一处理模块,包括:第二确定单元,用于按照上述同步码信息的字段值确定上述同步码信息对应的上述传感器拍摄上述图像数据的曝光模式;第一分类单元,用于基于上述曝光模式对上述图像数据进行分类;第一发送单元,用于将上述分类后的图像数据发送至视频处理器,以指示上述视频处理器按照上述图像数据所在的类别对上述图像数据进行处理。
在一个示例性实施例中,上述装置还包括:第二确定模块,用于确定与上述协处理器之间的第一低速信号接口;第一传输模块,用于通过上述第一低速信号接口与上述协处理器之间传输协议数据。
根据本发明的另一个实施例,提供了一种数据处理装置,包括:第一确定模块,用于确定同步码信息,其中,上述同步码信息包括拍摄图像数据的参数信息;第一配置模块,用于将上述同步码信息通过低速通信接口实时配置至传感器,以指示上述传感器利用上述参数信息获取上述图像数据。
在一个示例性实施例中,上述第一确定模块,包括:第三确定单元,用于确定上述传感器拍摄上述图像数据的N个曝光模式,其中,上述N是大于1的自然数,上述N个曝光模式中的每个曝光模式对应的曝光值均不相同;第一配置单元,用于配置上述N个曝光模式的N个像素位宽;第四确定单元,用于将上述N个像素位宽和上述每个曝光模式对应的曝光值集成在数据信息中的第M个字段中,得到上述同步码信息,其中,上述M是大于或等于1的自然数。
在一个示例性实施例中,上述第一确定模块,包括:第二配置单元,用于配置上述传感器拍摄上述图像数据的N个曝光模式中的每个曝光模式对应的数据类型;第五确定单元,用于将上述每个曝光模式对应的数据类型确定为上述同步码信息。
根据本发明的又一个实施例,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例,还提供了一种电子装置,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明,通过接收传感器获取的数据信息,其中,数据信息中包括图像数据以及图像数据的同步码信息,同步码信息包括协处理器实时配置至传感器的用于获取图像数据的参数信息;按照同步码信息对图像数据进行处理。实现了通过传感器发送至CPU的同步码信息对图像进行分类的目的。无需FPGA向CPU传递带有图像快门模式信息的数据,CPU不需要专门的处理模块对这一路的数据进行存储、处理,减轻了CPU的性能开销。因此,可以解决相关技术中对图像数据处理的问题,达到减轻CPU性能开销的效果。
附图说明
图1是本发明实施例的一种数据处理方法的移动终端的硬件结构框图;
图2是根据本发明实施例的数据处理方法的流程图(一);
图3是根据本发明实施例的数据处理方法的流程图(二);
图4是根据本发明实施例的同步码格式的示意图;
图5是根据本发明实施例的有效区域像素的示意图(一);
图6是根据本发明实施例的有效区域像素的示意图(二);
图7是根据本发明实施例的有效区域像素的MIPI长数据包结构示意图;
图8是根据本发明实施例的有效区域像素的MIPI短数据包结构示意图;
图9是根据本发明实施例的不同数据类型的示意图;
图10是根据本发明实施例的整体结构示意图;
图11是根据本发明实施例的对图像模式进行分类的示意图;
图12是根据本发明实施例的数据处理装置的结构框图(一);
图13是根据本发明实施例的数据处理装置的结构框图(二)。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明的实施例。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
本申请实施例中所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例,图1是本发明实施例的一种数据处理方法的移动终端的硬件结构框图。如图1所示,移动终端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104,其中,上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述移动终端的结构造成限定。例如,移动终端还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。
存储器104可用于存储计算机程序,例如,应用软件的软件程序以及模块,如本发明实施例中的数据处理方法对应的计算机程序,处理器102通过运行存储在存储器104内的计算机程序,从而执行各种功能应用以及数据处理,即实现上述的方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于处理器102远程设置的存储器,这些远程存储器可以通过网络连接至移动终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括移动终端的通信供应商提供的无线网络。在一个实例中,传输装置106包括一个网络适配器(Network Interface Controller,简称为NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输装置106可以为射频(Radio Frequency,简称为RF)模块,其用于通过无线方式与互联网进行通讯。
在本实施例中提供了一种数据处理方法,图2是根据本发明实施例的数据处理方法的流程图(一),如图2所示,该流程包括如下步骤:
步骤S202,接收传感器获取的数据信息,其中,数据信息中包括图像数据以及图像数据的同步码信息,同步码信息包括协处理器实时配置至传感器的用于获取图像数据的参数信息;
步骤S204,按照同步码信息对图像数据进行处理。
其中,上述步骤的执行主体可以为CPU等,但不限于此。
本实施例包括但不限于应用于对图像数据进行分类的场景中,例如,对视频帧、图片帧、抓拍帧图像的分类。
在本实施例中,传感器包括但不限于是处理器或协处理器。
在本实施例中,每帧图像的同步码信息是存在差异的。
通过上述步骤,通过接收传感器获取的数据信息,其中,数据信息中包括图像数据以及图像数据的同步码信息,同步码信息包括协处理器实时配置至传感器的用于获取图像数据的参数信息;按照同步码信息对图像数据进行处理。实现了通过传感器发送至CPU的同步码信息对图像进行分类的目的。无需FPGA向CPU传递带有图像快门模式信息的数据,CPU不需要专门的处理模块对这一路的数据进行存储、处理,减轻了CPU的性能开销。因此,可以解决相关技术中对图像数据处理的问题,达到减轻CPU性能开销的效果。
在一个示例性实施例中,接收传感器获取的数据信息,包括:
S1,确定与所述传感器之间的高速信号接口;
S2,通过所述高速信号接口在预设位置处实时接收所述传感器获取的所述数据信息。
在一个示例性实施例中,CPU与传感器之间利用高速信号接口(例如,MIPI、LVDS、SLVS或SLVS-EC等)传输数据信息,可以将实时的图像数据直接传递给CPU。
在一个示例性实施例中,按照所述同步码信息对所述图像数据进行处理,包括:
S1,按照所述同步码信息的字段值确定所述同步码信息对应的所述传感器拍摄所述图像数据的曝光模式;
S2,基于所述曝光模式对所述图像数据进行分类;
S3,将所述分类后的图像数据发送至视频处理器,以指示所述视频处理器按照所述图像数据所在的类别对所述图像数据进行处理。
在本实施例中,CPU获取到的视频帧、图片帧、抓拍帧图像像素位宽可以不同。降低了图片帧模式的像素位宽,可以减少CPU内智能算法模块获取图像的冗余信息,减少智能算法模块计算性能的开销以及降低协处理器与中央处理器间的传输带宽的好处。可以提高抓拍帧的像素位宽,可以优化了取证图片的图像效果。
在一个示例性实施例中,所述方法还包括:
S1,确定与所述协处理器之间的第一低速信号接口;
S2,通过所述第一低速信号接口与所述协处理器之间传输协议数据。
在本实施例中,传感器FPGA与CPU之间通过低速通信接口(例如,SPI、IIC或UART等低速通信接口)完成协议数据的相互传递;对FPGA的性能要求不高。
在本实施例中提供了一种数据处理方法,图3是根据本发明实施例的数据处理方法的流程图(二),如图3所示,该流程包括如下步骤:
步骤S302,确定同步码信息,其中,同步码信息包括拍摄图像数据的参数信息;
步骤S304,将同步码信息通过低速通信接口实时配置至传感器,以指示传感器利用参数信息获取图像数据。
其中,上述步骤的执行主体可以为FPGA等,但不限于此。
本实施例包括但不限于应用于对图像数据进行分类的场景中,例如,对视频帧、图片帧、抓拍帧图像的分类。
在本实施例中,传感器包括但不限于是FPGA。
在本实施例中,每帧图像的同步码信息是存在差异的。
通过上述步骤,通过确定同步码信息,其中,同步码信息包括拍摄图像数据的参数信息;将同步码信息通过低速通信接口实时配置至传感器,以指示传感器利用参数信息获取图像数据。实现了通过传感器发送至CPU的同步码信息对图像进行分类的目的。无需FPGA向CPU传递带有图像快门模式信息的数据,CPU不需要专门的处理模块对这一路的数据进行存储、处理,减轻了CPU的性能开销。因此,可以解决相关技术中对图像数据处理的问题,达到减轻CPU性能开销的效果。
在一个示例性实施例中,确定同步码信息,包括:
S1,确定传感器拍摄图像数据的N个曝光模式,其中,N是大于1的自然数,N个曝光模式中的每个曝光模式对应的曝光值均不相同;
S2,配置N个曝光模式的N个像素位宽;
S3,将N个像素位宽和每个曝光模式对应的曝光值集成在数据信息中的第M个字段中,得到同步码信息,其中,M是大于或等于1的自然数。
在本实施例中,包括两种方式:(1)N个曝光模式下输出的像素位宽一致,例如,集成在数据流中的行场同步信号第四个字段[SOL/EOL/SOF/EOF或SAV(Invalid)/EAV(Invalid)/SAV(Valid)/EAV(Valid)]在不同的快门模式下配置为不同的值。当CPU在采集到集成在数据流中的同步码流时,利用第四个字段同步码信息的不同,可以区分当前数据帧属于视频、抓拍还是图片模式。该种模式CPU可通过同步码的差异对多快门模式数据进行区分,但是无法达到降低图片帧冗余信息,优化抓拍帧图像效果的目的。(2)N种曝光模式下输出的像素位宽不一致,集成在数据流中的行场同步信号四字段[SOL/EOL/SOF/EOF或SAV(Invalid)/EAV(Invalid)/SAV(Valid)/EAV(Valid)]在不同的快门模式下配置为不同的值,例如视频帧配置为Bayer RAW10,图片帧配置为Bayer RAW8,抓拍帧配置为BayerRAW12。当CPU在采集到集成在数据流中的同步码流时,利用采集到同步码信息的不同,可以区分当前数据帧属于视频、抓拍还是图片模式。
在一个示例性实施例中,确定同步码信息,包括:
S1,配置传感器拍摄图像数据的N个曝光模式中的每个曝光模式对应的数据类型;
S2,将每个曝光模式对应的数据类型确定为同步码信息。
在本实施例中,N个曝光模式例如可以对应于视频帧、图片帧、抓拍帧图像。CPU获取到的视频帧、图片帧、抓拍帧图像像素位宽可以不同。降低了图片帧模式的像素位宽,可以减少CPU内智能算法模块获取图像的冗余信息,减少智能算法模块计算性能的开销以及降低协处理器与中央处理器间的传输带宽的好处。可以提高抓拍帧的像素位宽,可以优化了取证图片的图像效果。
下面结合具体实施例对本发明进行说明:
在本实施例中,VF用于表示Video Frame;
S用于表示视频快门模式数据,主要用作视频监控;
T用于表示图片快门模式数据,提供给智能算法模块,用作目标跟踪与识别;
TM用于表示抓拍快门模式数据,提供给抓拍模块,用作图片取证;
S_i用于表示携带视频快门模式指示信息的Sensor数据;
T_i用于表示携带图片快门模式指示信息的Sensor数据;
TM_i用于表示携带抓拍快门模式指示信息的Sensor数据。
目前越来越多的图像传感器Sensor支持同一类型数据多种数据位宽的视频输出,比如支持Bayer序列的RAW8、RAW10、RAW12、RAW14或RAW16等类型中的三种或更多的数据位宽。利用Sensor输出时集成在数据流中的视频同步码信息不同,且该差异可以被后端CPU获取并识别的特点,完成对图像数据的分类。
目前Sensor传感器支持的输出接口类型主要包括LVDS、SLVS以及MIPI三种。
(1)LVDS/SLVS接口:当Sensor传感器输出接口配置为LVDS或SLVS接口时,行场同步信号集成在数据流中,在数据流中的特殊码型SOF和EOF分辨表示帧的起始和结束,SOL与EOL分别表示行的起始与结束。在数据流内SOF/EOF/SOL/EOL由四个字段构成,每个字段的位宽与像素位宽保持一致,前三个字段为固定的基准码字,根据第四个字段来区分帧/行的起始与结束。LVDS/SLVS同步码格式如图4所示,
其中,第四个字段举例如表1所示:
表1:
Figure BDA0002964118050000101
以Sensor典型输出-线性模式为例,LVDS/SLVS有两种同步模式,其中一种用SAV(Invalid)和EAV(Invalid)标示消隐区的无效数据,使用SAV(Valid)与EAV(Valid)标示有效区域像素,如图5所示。
线性模式下,LVDS/SLVS另外一种同步方式用SOF标示有效区第一行起始,用EOF标示有效区最后一行的结束,其他有效区分别用SOL和EOL作为起始和结束,如图6所示。
基于LVDS/SLVS应用方式:当配置给Sensor三种不同曝光模式的同步码不同时,这种不同主要体现为两种形式。
第一种将Sensor的工作模式配置为:三种不同曝光模式下输出的像素位宽一致,集成在数据流中的行场同步信号第四个字段[SOL/EOL/SOF/EOF或SAV(Invalid)/EAV(Invalid)/SAV(Valid)/EAV(Valid)]在不同的快门模式下配置为不同的值。当CPU在采集到集成在数据流中的同步码流时,利用第四个字段同步码信息的不同,可以区分当前数据帧属于视频、抓拍还是图片模式。该种模式CPU可通过同步码的差异对多快门模式数据进行区分,但是无法达到降低图片帧冗余信息,优化抓拍帧图像效果的目的。
第二种将Sensor的工作模式配置为:三种不同曝光模式下输出的像素位宽不一致,集成在数据流中的行场同步信号四字段[SOL/EOL/SOF/EOF或SAV(Invalid)/EAV(Invalid)/SAV(Valid)/EAV(Valid)]在不同的快门模式下配置为不同的值,例如视频帧配置为Bayer RAW10,图片帧配置为Bayer RAW8,抓拍帧配置为Bayer RAW12。当CPU在采集到集成在数据流中的同步码流时,利用采集到同步码信息的不同,可以区分当前数据帧属于视频、抓拍还是图片模式。
2、移动行业处理器接口(Mobile Industry Processor Interface,简称为,MIPI)接口:MIPI是MIPI联盟发起的为移动应用处理器制定的开放标准。MIPI CSI-2协议是MIPI联盟协议的子协议,专门针对摄像头芯片的接口而设计,由于其高速、低功耗的特点,MIPICSI-2协议极大的支持了高清摄像头领域的发展。MIPI CSI-2接口应用非常广泛,逐步成为Sensor传感器的通用输出接口标准。
DI、DT:MIPI CSI-2接口以数据包格式传递,按数据包的长度分长数据包和短数据包,如图7、图8所示展示了MIPI长、短数据包结构示意图,其中数据标识DI(DataIdentifier,Data ID)用来区分不同的数据包类型。DI包含两部分,分别是虚拟通道(VC)和数据类型(Data Type,DT),DI长度为1个字节,其中VC占字节的高2bit,DT占字节低6bit。其中LPS是Low Power State的简写;SOT是Start of Transmission的简写;EOT是End ofTransmission的简写。
如图9所示,CSI-2接口通过不同的数据类型标志不同的数据流,MIPI CSI-2数据标识(DI)数据类型(DT)占6个bit,在MIPI CSI-2协议内6位数据类型允许8类64种数据类型,当Sensor利用MIPI CSI-2接口传递Bayer RAW数据时,数据类型包括0x28-0x2F。当DT为0x2A时表示RAW8,DT为2B时表示RAW10,DT为2C时表示RAW12。类似LVDS/SLVS定义方式,将数据类型(DT)为0x2A时表示图片帧,数据类型(DT)为0x2B时表为视频帧,数据类型(DT)为0x2C时表为抓拍帧。
在本实施例中,协处理器采用FPGA方案,实时的控制Sensor的驱动与曝光、增益控制以及外围组件(比如外同步信号、频爆闪灯)的处理。
CPU实现采用嵌入式SoC方案,可完成视频数据的采集、分发与处理。
数据分析与分配中心(Data Analyze Distribute Center,简称为DADC),CPU内部实现的功能模块,DADC将获取到的视频数据按照配套的同步码信息进行快门模式分类和图像视频处理,进而将处理好的视频数据送给CPU下一级模块。
如图10所示,针对VF_x_i,CPU在“端口1”采集到Sensor生成的VF_x_i(该处的S\T\TM对应的参数是作用在Sensor上的,尤其包括曝光、增益以及黑电平参数);
协处理器在实时配置Sensor每帧图像数据的曝光、增益参数的同时,实时的配置Sensor每帧图像的同步码信息相关的寄存器,比如当Sensor工作为LVDS/SLVS输出接口时,实时配置每帧同步码相关参数寄存器(考虑上述LVDS/SLVS的两种工作模式)、当Sensor工作为MIPI-CSI2输出接口时,实时配置每帧的数据类型(DT)相关参数寄存器。
当配置给Sensor三种不同曝光模式同步码信息存在差异时,可以利用这个差异能被视频处理器Video-Processor获取的特点,对图片的模式进行分类。
数据帧分类完成后,DADC将分类后的视频数据送给CPU后续数字视频处理模块(ISP)处理。比如最终VF_S送给编码显示模块,VF_T送给智能算法模块,VF_TM送给取证上图模块,如图11所示。
综上所述,本实施例摒弃了FPGA与CPU之间的高速数据接口,不仅减少了FPGA的管脚使用也减少了逻辑资源的消耗,降低了FPGA的性能要求。在FPGA内部只用实时的控制Sensor的驱动与曝光、增益控制以及外围组件(比如外同步信号、频爆闪灯)的处理,这样的要求一般普通的国产FPGA甚至CPLD均能胜任。
Sensor输出的图像数据本身就带有分类信息,无需FPGA向CPU传递带有图像快门模式信息数据,意味着后续CPU不需要专门的处理模块对这一路的数据进行存储、处理,减轻了CPU的性能开销。由于Sensor输出的图像数据本身就带有分类信息,因此该方案也解决了当控制器软件调度出现异常时,控制器获取到的抓拍帧快门模式数据并不是实际触发SENSOR抓拍的图像数据的问题。
相比当前抓拍方案,该方案的CPU器件拥有更多的高速接口用来处理更多通路的视频图像。
相比当前多快门方案,该方案降低图片帧像素位宽,提高抓拍帧的像素位宽,不仅减少了处理器内部智能算法模块对图片帧计算的性能开销,也提高了取证上图的图像效果。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
在本实施例中还提供了一种数据处理装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图12是根据本发明实施例的数据处理装置的结构框图(一),如图12所示,该装置包括:
第一接收模块1202,用于接收传感器获取的数据信息,其中,数据信息中包括图像数据以及图像数据的同步码信息,同步码信息包括协处理器实时配置至传感器的用于获取图像数据的参数信息;
第一处理模块1204,用于按照同步码信息对图像数据进行处理。
在一个示例性实施例中,上述第一接收模块,包括:
第一确定单元,用于确定与上述传感器之间的高速信号接口;
第一接收单元,用于通过上述高速信号接口在预设位置处实时接收上述传感器获取的上述数据信息。
在一个示例性实施例中,上述第一处理模块,包括:
第二确定单元,用于按照上述同步码信息的字段值确定上述同步码信息对应的上述传感器拍摄上述图像数据的曝光模式;
第一分类单元,用于基于上述曝光模式对上述图像数据进行分类;
第一发送单元,用于将上述分类后的图像数据发送至视频处理器,以指示上述视频处理器按照上述图像数据所在的类别对上述图像数据进行处理。
在一个示例性实施例中,上述装置还包括:
第二确定模块,用于确定与上述协处理器之间的第一低速信号接口;
第一传输模块,用于通过上述第一低速信号接口与上述协处理器之间传输协议数据。
图13是根据本发明实施例的数据处理装置的结构框图(二),如图13所示,该装置包括:
第一确定模块1302,用于确定同步码信息,其中,同步码信息包括拍摄图像数据的参数信息;
第一配置模块1304,用于将同步码信息通过低速通信接口实时配置至传感器,以指示传感器利用参数信息获取图像数据。
在一个示例性实施例中,上述第一确定模块,包括:
第三确定单元,用于确定上述传感器拍摄上述图像数据的N个曝光模式,其中,上述N是大于1的自然数,上述N个曝光模式中的每个曝光模式对应的曝光值均不相同;
第一配置单元,用于配置上述N个曝光模式的N个像素位宽;
第四确定单元,用于将上述N个像素位宽和上述每个曝光模式对应的曝光值集成在数据信息中的第M个字段中,得到上述同步码信息,其中,上述M是大于或等于1的自然数。
在一个示例性实施例中,上述第一确定模块,包括:
第二配置单元,用于配置上述传感器拍摄上述图像数据的N个曝光模式中的每个曝光模式对应的数据类型;
第五确定单元,用于将上述每个曝光模式对应的数据类型确定为上述同步码信息。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,对于后者,可以通过以下方式实现,但不限于此:上述模块均位于同一处理器中;或者,上述各个模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
在本实施例中,上述计算机可读存储介质可以被设置为存储用于执行以下步骤的计算机程序:
S1,接收传感器获取的数据信息,其中,数据信息中包括图像数据以及图像数据的同步码信息,同步码信息包括协处理器实时配置至传感器的用于获取图像数据的参数信息;
S2,按照同步码信息对图像数据进行处理。
在一个示例性实施例中,上述计算机可读存储介质可以包括但不限于:U盘、只读存储器(Read-Only Memory,简称为ROM)、随机存取存储器(Random Access Memory,简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
在一个示例性实施例中,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
在一个示例性实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,接收传感器获取的数据信息,其中,数据信息中包括图像数据以及图像数据的同步码信息,同步码信息包括协处理器实时配置至传感器的用于获取图像数据的参数信息;
S2,按照同步码信息对图像数据进行处理。
本实施例中的具体示例可以参考上述实施例及示例性实施方式中所描述的示例,本实施例在此不再赘述。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种数据处理方法,其特征在于,包括:
接收传感器获取的数据信息,其中,所述数据信息中包括图像数据以及所述图像数据的同步码信息,所述同步码信息包括协处理器通过低速通信接口实时配置至所述传感器的用于获取所述图像数据的参数信息,所述协处理器还用于在实时的将所述参数信息配置至所述传感器时,实时的配置与所述同步码信息对应的寄存器,以按照所述传感器的输出接口将所述同步码信息分类存储至对应的所述寄存器中;
其中,接收传感器获取的数据信息,包括:确定与所述传感器之间的高速信号接口;通过所述高速信号接口在预设位置处实时接收所述传感器获取的所述数据信息;
按照所述同步码信息对所述图像数据进行处理。
2.根据权利要求1所述的方法,其特征在于,按照所述同步码信息对所述图像数据进行处理,包括:
按照所述同步码信息的字段值确定所述同步码信息对应的所述传感器拍摄所述图像数据的曝光模式;
基于所述曝光模式对所述图像数据进行分类;
将分类后的图像数据发送至视频处理器,以指示所述视频处理器按照所述图像数据所在的类别对所述图像数据进行处理。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定与所述协处理器之间的第一低速信号接口;
通过所述第一低速信号接口与所述协处理器之间传输协议数据。
4.一种数据处理方法,其特征在于,包括:
确定同步码信息,其中,所述同步码信息包括协处理器通过低速通信接口实时配置至传感器的用于拍摄图像数据的参数信息;
将所述同步码信息通过低速通信接口实时配置至传感器,以指示所述传感器利用所述参数信息获取所述图像数据,其中,所述传感器还用于通过高速信号接口将所述同步码信息发送至所述协处理器,其中,所述协处理器还用于在实时的将所述参数信息配置至所述传感器时,实时的配置与所述同步码信息对应的寄存器,以按照所述传感器的输出接口将所述同步码信息分类存储至对应的所述寄存器中。
5.根据权利要求4所述的方法,其特征在于,确定同步码信息,包括:
确定所述传感器拍摄所述图像数据的N个曝光模式,其中,所述N是大于1的自然数,所述N个曝光模式中的每个曝光模式对应的曝光值均不相同;
配置所述N个曝光模式的N个像素位宽;
将所述N个像素位宽和所述每个曝光模式对应的曝光值集成在数据信息中的第M个字段中,得到所述同步码信息,其中,所述M是大于或等于1的自然数。
6.根据权利要求4所述的方法,其特征在于,确定同步码信息,包括:
配置所述传感器拍摄所述图像数据的N个曝光模式中的每个曝光模式对应的数据类型;
将所述每个曝光模式对应的数据类型确定为所述同步码信息。
7.一种数据处理装置,其特征在于,包括:
第一接收模块,用于接收传感器获取的数据信息,其中,所述数据信息中包括图像数据以及所述图像数据的同步码信息,所述同步码信息包括协处理器通过低速通信接口实时配置至所述传感器的用于获取所述图像数据的参数信息,所述协处理器还用于在实时的将所述参数信息配置至所述传感器时,实时的配置与所述同步码信息对应的寄存器,以按照所述传感器的输出接口将所述同步码信息分类存储至对应的所述寄存器中;
其中,所述第一接收模块还用于确定与所述传感器之间的高速信号接口;通过所述高速信号接口在预设位置处实时接收所述传感器获取的所述数据信息;
第一处理模块,用于按照所述同步码信息对所述图像数据进行处理。
8.一种数据处理装置,其特征在于,包括:
第一确定模块,用于确定同步码信息,其中,所述同步码信息包括协处理器通过低速通信接口实时配置至传感器的用于拍摄图像数据的参数信息;
第一配置模块,用于将所述同步码信息通过低速通信接口实时配置至传感器,以指示所述传感器利用所述参数信息获取所述图像数据,其中,所述传感器还用于通过高速信号接口将所述同步码信息发送至所述协处理器,其中,所述协处理器还用于在实时的将所述参数信息配置至所述传感器时,实时的配置与所述同步码信息对应的寄存器,以按照所述传感器的输出接口将所述同步码信息分类存储至对应的所述寄存器中。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行所述权利要求1至3任一项中所述的方法,或者执行权利要求4-6任一项中所述的方法。
10.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行所述权利要求1至3任一项中所述的方法,或者执行权利要求4-6任一项中所述的方法。
CN202110246070.5A 2021-03-05 2021-03-05 数据处理方法及装置、存储介质、电子装置 Active CN112995515B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110246070.5A CN112995515B (zh) 2021-03-05 2021-03-05 数据处理方法及装置、存储介质、电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110246070.5A CN112995515B (zh) 2021-03-05 2021-03-05 数据处理方法及装置、存储介质、电子装置

Publications (2)

Publication Number Publication Date
CN112995515A CN112995515A (zh) 2021-06-18
CN112995515B true CN112995515B (zh) 2023-04-07

Family

ID=76353089

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110246070.5A Active CN112995515B (zh) 2021-03-05 2021-03-05 数据处理方法及装置、存储介质、电子装置

Country Status (1)

Country Link
CN (1) CN112995515B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113689707B (zh) * 2021-07-20 2022-09-06 浙江大华技术股份有限公司 视频数据处理方法、装置以及计算机可读存储介质
CN113489913A (zh) * 2021-09-06 2021-10-08 杭州惠航科技有限公司 一种抓拍识别方法、装置、系统及计算机存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8736700B2 (en) * 2010-09-30 2014-05-27 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
CN104270570B (zh) * 2014-10-17 2018-05-11 北京明泰智软件技术发展有限公司 双目摄像机及其图像处理方法
JP7013677B2 (ja) * 2017-05-01 2022-02-01 ソニーグループ株式会社 医用画像処理装置、医用画像処理装置の作動方法、及び、内視鏡システム
CN108174093A (zh) * 2017-12-28 2018-06-15 努比亚技术有限公司 拍摄瞬间图像的方法、设备及计算机可存储介质
CN110557527B (zh) * 2018-06-04 2021-03-23 杭州海康威视数字技术股份有限公司 一种摄像机及抓拍图片融合方法
CN112019760B (zh) * 2019-05-30 2021-09-03 杭州海康威视数字技术股份有限公司 曝光调节方法和装置以及摄像控制装置和监控摄像机
CN112735141B (zh) * 2020-12-09 2022-08-02 浙江大华技术股份有限公司 视频数据处理方法和装置

Also Published As

Publication number Publication date
CN112995515A (zh) 2021-06-18

Similar Documents

Publication Publication Date Title
CN112735141B (zh) 视频数据处理方法和装置
CN112995515B (zh) 数据处理方法及装置、存储介质、电子装置
US10223796B2 (en) Adaptive video streaming
CN104978929B (zh) Led显示装置逐点校正方法、校正用系统架构和控制器
WO2021208875A1 (zh) 视觉检测方法和视觉检测装置
CN111314710B (zh) 一种无人机机载多传感器多处理器的视频压缩处理方法和装置
CN111447409B (zh) 一种无人机机载多传感器单处理器视频压缩处理方法和装置
CN113329174B (zh) 多目摄像机的控制方法、装置、系统和电子装置
CN109167923A (zh) 图像传输方法、装置、电子设备和存储介质
WO2020005899A1 (en) Exchanging an hdr-combined stream and associated exposures between a camera sensor module and a vision processing system
CN112291477A (zh) 多媒体信息处理方法、装置、存储介质及电子装置
CN106713804A (zh) 一种三通道图像传输接口转换装置及方法
CN113099133A (zh) 串行解串器链路传输高带宽相机数据的方法
CN106686323B (zh) 一种高速cmos相机成像方法及系统
CN110930932A (zh) 显示屏校正方法及系统
CN115567443B (zh) 业务数据的传输方法、装置、网关设备及存储介质
CN114245010B (zh) 图像的调整方法、装置、存储介质及电子装置
JPWO2020039992A1 (ja) 画像処理装置、および画像処理システム
US20210037208A1 (en) Compositing video signals and stripping composite video signal
CN113315935B (zh) 一种基于fpga的cmos图像传感器数据采集装置及方法
CN110012205A (zh) 一种低功耗视频成像方法、处理器及装置
CN109309788A (zh) 多镜头图像拼接装置及方法
CN104683768A (zh) 一种嵌入式智能视频分析系统
US11128798B2 (en) Display device and control method thereof
WO2020200077A1 (zh) 图像摄取模组及电子终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant