CN110876054B - 一种目标算法的测试方法、装置和系统 - Google Patents

一种目标算法的测试方法、装置和系统 Download PDF

Info

Publication number
CN110876054B
CN110876054B CN201810998177.3A CN201810998177A CN110876054B CN 110876054 B CN110876054 B CN 110876054B CN 201810998177 A CN201810998177 A CN 201810998177A CN 110876054 B CN110876054 B CN 110876054B
Authority
CN
China
Prior art keywords
image data
current frame
frame image
decoding
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810998177.3A
Other languages
English (en)
Other versions
CN110876054A (zh
Inventor
倪晶静
谢春宁
刘有文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201810998177.3A priority Critical patent/CN110876054B/zh
Publication of CN110876054A publication Critical patent/CN110876054A/zh
Application granted granted Critical
Publication of CN110876054B publication Critical patent/CN110876054B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Studio Devices (AREA)

Abstract

本发明实施例提供了一种目标算法的测试方法、装置和系统。所述方法包括:摄像设备向解码设备发送摄像设备采集的原始数据,原始数据包括摄像设备录制的视频流或摄像设备采集的第一格式的图像数据;解码设备与摄像设备通过以太网接口实现通信连接;摄像设备接收解码设备发送的当前帧图像数据,当前帧图像数据是解码设备对原始数据进行解码后得到的第二格式的单帧图像数据;摄像设备对当前帧图像数据进行预处理;摄像设备将预处理后的数据作为目标算法的测试数据,并执行目标算法的测试流程,得到当前帧图像数据对应的测试结果。应用本发明实施例提供的方案可以测试目标算法在实际应用时的运行效果。

Description

一种目标算法的测试方法、装置和系统
技术领域
本发明涉及测试技术领域,特别是涉及一种目标算法的测试方法、装置和系统。
背景技术
视频监控领域中所涉及的算法用于对视频中的目标以及目标的行为进行识别和分析。
由于在摄像设备以外的其他设备上实现算法的开发过程,因此,为了验证算法的有效性,在算法开发完毕后,需要测试算法应用在摄像设备时的运行效果。那么,如何快速有效地测试算法在应用时的运行效果,是一个亟待解决的问题。
发明内容
本发明实施例的目的在于提供一种目标算法的测试方法、装置、系统、摄像设备、解码设备及计算机可读取存储介质,以测试算法在实际应用时的运行效果。具体技术方案如下:
第一方面,本发明实施例提供了一种目标算法的测试方法,所述方法包括:
摄像设备向解码设备发送所述摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流或所述摄像设备采集的第一格式的图像数据;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
所述摄像设备接收所述解码设备发送的当前帧图像数据,所述当前帧图像数据是所述解码设备对所述原始数据进行解码后得到的第二格式的单帧图像数据;
所述摄像设备对所述当前帧图像数据进行预处理;
所述摄像设备将预处理后的数据作为目标算法的测试数据,并执行所述目标算法的测试流程,得到所述当前帧图像数据对应的测试结果。
第二方面,本发明实施例还提供了一种目标算法的测试方法,所述方法包括:
解码设备接收摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流或所述摄像设备采集的第一格式的图像数据;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
所述解码设备对所述原始数据进行解码,得到当前帧图像数据,所述当前帧图像数据为第二格式的单帧图像数据;
所述解码设备向所述摄像设备发送当前帧图像数据。
第三方面,本发明实施例还提供了一种目标算法的测试装置,所述测试装置位于摄像设备中,所述装置包括:
原始数据发送模块,用于向解码设备发送所述摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流或所述摄像设备采集的第一格式的图像数据;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
图像数据接收模块,用于接收所述解码设备发送的当前帧图像数据,所述当前帧图像数据是所述解码设备对所述原始数据进行解码后得到的第二格式的单帧图像数据;
图像数据处理模块,用于所述摄像设备对所述当前帧图像数据进行预处理;
算法测试模块,用于将预处理后的数据作为目标算法的测试数据,并执行所述目标算法的测试流程,得到所述当前帧图像数据对应的测试结果。
第四方面,本发明实施例还提供了一种目标算法的测试装置,所述测试装置位于解码设备中,所述装置包括:
原始数据接收模块,用于接收摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流或所述摄像设备采集的第一格式的图像数据;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
原始数据解码模块,用于对所述原始数据进行解码,得到当前帧图像数据,所述当前帧图像数据为第二格式的单帧图像数据;
图像数据发送模块,用于向所述摄像设备发送当前帧图像数据。
第五方面,本发明实施例还提供了一种目标算法的测试系统,包括:摄像设备和解码设备;
所述摄像设备,用于向解码设备发送所述摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流或所述摄像设备采集的第一格式的图像数据;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
所述解码设备,用于接收摄像设备采集的原始数据;对所述原始数据进行解码,得到当前帧图像数据;向所述摄像设备发送当前帧图像数据;所述当前帧图像数据为第二格式的单帧图像数据;
所述摄像设备,还用于接收所述解码设备发送的当前帧图像数据;对所述当前帧图像数据进行预处理;将预处理后的数据作为目标算法的测试数据,并执行所述目标算法的测试流程,得到所述当前帧图像数据对应的测试结果。
第六方面,本发明实施例还提供了一种摄像设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现第一方面所述的目标算法的测试方法。
第七方面,本发明实施例还提供了一种解码设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现第二方面所述的目标算法的测试方法。
第八方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现第一方面所述的目标算法的测试方法。
第九方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现第二方面所述的目标算法的测试方法。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种解码设备与摄像设备的连接示意图;
图2为本发明实施例提供的另一种解码设备与摄像设备的的连接示意图;
图3为本发明实施例提供的一种解码设备与摄像设备的主处理器的数据交互示意图;
图4为本发明实施例提供的一种应用于摄像设备的目标算法的测试方法的流程示意图;
图5为本发明实施例提供的解码设备与摄像设备的交互示意图;
图6为本发明实施例提供的一种环形缓冲器的示意图;
图7为本发明实施例提供的一种主处理器的各个子线程,以及协处理器的子线程的数据流向示意图;
图8为本发明实施例提供的一种图像数据管理线程工作时的流程示意图;
图9为本发明实施例提供的一种图像数据发送线程工作时的流程示意图;
图10为本发明实施例提供的一种协处理器算法应用线程工作时的流程示意图;
图11为本发明实施例提供的一种协处理器处理结果接收线程工作时的流程示意图;
图12为本发明实施例提供的一种协处理器处理结果后处理线程工作时的流程示意图;
图13为本发明实施例提供的一种应用于解码设备的目标算法的测试方法的流程示意图;
图14为本发明实施例提供的一种解码设备工作时的流程示意图;
图15为本发明实施例提供的一种应用于摄像设备的目标算法的测试装置的结构示意图;
图16为本发明实施例提供的一种应用于解码设备的目标算法的测试装置的结构示意图;
图17为本发明实施例提供的一种摄像设备的结构示意图;
图18为本发明实施例提供的一种解码设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
通常情况下,摄像设备中的算法的开发环境为windows环境;而在实际产品中,摄像设备中的算法通常运行于嵌入式设备的处理器上,这些处理器通常是linux环境。因此,需要测试算法在摄像设备中的运行效果与算法在开发环境中的运行效果是否一致或者接近。也就是说,如何快速有效地测试算法在实际应用时的运行效果,是一个亟待解决的问题。
为测试目标算法在实际应用时的运行效果,本发明实施例提供了一种目标算法的测试方法、装置、系统、摄像设备、解码设备及计算机可读取存储介质。
为了方案描述清楚,第一方面,首先对本发明实施例提供的一种目标算法的测试系统进行详细阐述。
如图1所示,本发明实施例提供的目标算法的测试系统,可以包括解码设备110和摄像设备120,其中,摄像设备可以包括主处理器121和协处理器122。通常情况下,摄像设备为带有ISP图像捕获模块的摄像类设备。
解码设备110与摄像设备120可以通过以太网口实现硬件连接;主处理器121与协处理器122通过内部硬件连接,从而主处理器121与协处理器122可以进行数据传输。可以理解的是,主处理器121和协处理器122可以通过PCI-E总线、USB总线等进行连接,当然,本发明实施例对主处理器与协处理器的连接方式不做具体限定。
其中,解码设备的运行环境为linux环境;主处理器和协处理器均位于摄像设备,主处理器和协处理器的运行环境也为linux环境。本发明实施例可以适用于以ARM平台为主处理器架构并在ARM上带有linux系统环境的摄像设备。
需要说明的是,目标算法可以包括一个或多个算法,可以将目标算法拆分为两类算法,分别为:第一子算法和第二子算法;其中,第一子算法可以预先封装到协处理器对应的算法库中,这样,第一子算法能够在协处理器上运行;第二子算法可以预先封装到主处理器对应的算法库中,这样,第二子算法能够在主处理器上运行。
下面将对解码设备与摄像设备的交互过程进行详细描述。
在实际应用中,摄像设备拍摄图像的流程可以为:图像传感器产生图像数据流;ISP模块对图像数据流进行图像信号处理,得到图像信号处理后的图像数据流;将图像信号处理后的图像数据流输入到预先封装在摄像设备中的目标算法中,目标算法对该图像信号处理后的图像数据进行图像处理,得到处理结果,并将处理结果满足触发抓拍规则的图像单帧上传给上层应用。
在本发明实施例中,摄像设备采集到原始数据后,可以将所采集的原始数据发送至解码设备,其中,该原始数据可以为摄像设备录制的视频流或摄像设备采集的图像数据。解码设备接收到摄像设备发送的原始数据后,对该原始数据进行解码,得到一帧帧单帧图像数据,即产生了图像数据流,从而可以将图像数据流发送至摄像设备的主处理器。也就是说,解码设备在功能上可以代替图像传感器和ISP模块。如图2所示,由图2可以看出,解码设备210在功能上可以代替图2虚线框中所示的图像传感器220和ISP模块220,解码设备210可以将图像数据流发送至摄像设备的主处理器。
解码设备得到单帧图像数据后,可以将单帧图像数据发送至摄像设备的主处理器。或者,在一种实施方式中,如图3所示,解码设备310与摄像设备320可以建立Socket编程接口通信连接。由于解码设备与摄像设备的运行环境均为linux环境,因此,解码设备在解码得到单帧图像数据之后,可以将单帧图像数据写入到共享目录对应的存储区域中,并可以向摄像设备发送Socket指示信息,摄像设备在Socket指示信息后,摄像设备的主处理器321可以从挂载的共享目录中获取单帧图像数据。
解码设备的主处理器获取到该单帧图像数据后,可以对该单帧图像数据进行预处理,并将预处理后的单帧图像数据发送至协处理器,其中,预处理可以为图像缩放、格式转换、感兴趣区域的抠图操作等。在一种实施方式中,解码设备的主处理器在获取到一帧单帧图像数据后,可以从该帧单帧图像数据中读取图像数据,并将图像数据缓存于第一环形缓存器中,或者,从当前帧图像数据中读取图像数据和图像参数,将图像数据缓存在所述第一环形缓冲器,将图像参数缓存在第二环形缓冲器,并向解码设备发送Socket指示信息的应答信息,解码设备接收到Socket指示信息的应答信息后,解码设备接收到Socket指示信息的应答信息后,可以向共享文件中写入下一帧单帧图像数据。在该实施例中,摄像设备的主处理器在对单帧图像数据进行预处理时,可以从第一环形缓冲器中获取单帧图像数据的图像数据,并可以从第二环形缓冲器中获取单帧图像数据的图像参数,并获取目标算法的算法参数;根据算法参数、当前帧图像数据的图像参数和感兴趣区域的图像数据,生成预处理后的数据。
协处理器接收到预处理后的单帧图像数据后,可以将预处理后的当前帧图像数据作为第一子算法的测试数据,并执行第一子算法的测试流程,得到该单帧图像数据对应的测试结果,并将该测试结果发送给主处理器;
主处理器接收到协处理器发送的测试结果后,可以将来自协处理器的测试结果直接输出;或者,将来自协处理器的测试结果作为第二子算法的测试数据,并执行第二子算法的测试流程,得到第二子算法的测试结果,并输出该测试结果。
可见,通过本方案实施例提供的技术方案,可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
第二方面,本发明实施例提供的一种应用于摄像设备的目标算法的测试方法。
本发明实施例所提供的一种目标算法的测试方法可以应用于摄像设备。在具体应用中,该摄像设备可以为:带有图像传感器和ISP(Image Signal Processing,图像信号处理)模块的摄像机类设备,当然并不局限于此。可以理解的是,摄像设备拍摄图像的流程可以为:图像传感器产生图像数据;ISP模块对该图像数据进行图像信号处理,得到图像信号处理后的图像数据;将图像信号处理后的图像数据输入到预先封装在摄像设备中的目标算法中,目标算法对该图像信号处理后的图像数据进行图像处理,得到处理结果,并将处理结果满足触发抓拍规则的图像单帧上传给上层应用。
为了测试目标算法的运行效果,在本发明实施例中,该摄像设备可以与解码设备通信连接,例如,该摄像设备与解码设备可以通过以太网口实现硬件连接,当然并不局限于此。本发明实施例中的解码设备可以以摄像设备采集的图像数据作为输入,将图像数据解码为单帧图像数据,并将解码得到的各帧图像数据发送给摄像设备进行处理,摄像设备接收到各帧图像数据后,对各帧图像数据进行预处理,得到预处理后的数据,并将预处理后的数据作为目标算法的测试数据,执行目标算法的测试流程,从而实现了对目标算法的测试。
并且,摄像设备所采集的图像数据可以是视频流,即摄像设备录制的视频文件,还可以是jpeg、raw等格式的图像文件;因此,解码设备不仅可以对视频文件进行解码,还可以对jpeg、raw等格式的图像文件进行解码,还可以对包含视频文件或者图像文件的目录中的每一文件进行解码。
例如,一个目录包含若干视频文件,解码设备能够遍历该目录下的每一需要解码的视频文件,并对每一需要解码的视频文件进行解码;再例如,一个目录包含若干jpeg格式的图像文件,解码设备能够遍历该目录下的每一需要解码的jpeg图像文件,并对每一需要解码的jpeg图像文件进行解码。
而且,解码设备对摄像设备所采集的图像数据进行解码后,所得到的单帧图像数据的格式通常为YUV格式。
下面将对本发明实施例提供的一种应用于摄像设备的目标算法的测试方法进行详细阐述。
如图4所示,本发明实施例提供的一种应用于摄像设备的目标算法的测试方法,包括如下步骤:
S410,摄像设备向解码设备发送摄像设备采集的原始数据,该原始数据包括摄像设备录制的视频流或摄像设备采集的第一格式的图像数据;解码设备与摄像设备通过以太网接口实现通信连接。
摄像设备具有采集原始数据的功能。该原始数据可以是视频流,即摄像设备录制的视频文件,还可以是第一格式的图像数据。该第一格式可以为jpeg、raw等,本发明实施例对第一格式不作具体限定。
摄像设备采集到原始数据之后,可以将该原始数据发送至解码设备,以使得解码设备将该原始数据解码为单帧图像数据。可以理解的是,摄像设备与解码设备通信连接。解码设备与摄像设备可以通过以太网接口实现通信连接。
S420,摄像设备接收解码设备发送的当前帧图像数据,该当前帧图像数据是解码设备对原始数据进行解码后得到的第二格式的单帧图像数据。
解码设备将原始数据解码为单帧图像数据后,将单帧图像数据发送至摄像设备,从而摄像设备接收到一帧帧的图像数据。可以理解的是,摄像设备接收到的任一帧图像数据均可以是当前帧图像数据。该当前帧图像数据的格式可以为YUV格式。本发明实施例对当前帧图像数据的格式不做具体限定。
S430,摄像设备对当前帧图像数据进行预处理。
摄像设备接收到当前帧图像数据后,可以对当前帧图像数据进行预处理。举例而言,摄像设备接收到当前帧图像数据后,可以对当前帧图像数据执行图像缩放、格式转换、裁剪出感兴趣区域等预处理操作。可见,预处理可以是图像缩放、格式转化、裁剪等,本发明实施例对预处理不做具体限定。
S440,摄像设备将预处理后的数据作为目标算法的测试数据,并执行目标算法的测试流程,得到当前帧图像数据对应的测试结果。
摄像设备对当前帧图像数据进行预处理之后,可以得到预处理后的数据。此时,摄像设备可以执行目标算法的测试流程。具体的,摄像设备调用目标算法,对该预处理后的数据进行处理,得到该预处理后的数据对应的处理结果。
目标算法可以为:图像处理算法、图像分类算法、图像识别算法等。不同的目标算法,对预处理后的数据进行处理后所输出的处理结果不同。例如,当目标算法为图像识别算法时,所输出的处理结果为图像识别结果;当目标算法为图像压缩算法时,所输出的处理结果为图像压缩结果。
当然,预处理后的数据对应的处理结果不仅可以为:对预处理后的数据进行图像处理后,所得到的图像处理结果;预处理后的数据对应的处理结果还可以为:目标算法在处理该预处理后的数据的过程中,目标算法的性能参数,例如,预处理后的数据对应的处理结果可以为:处理该预处理后的数据的过程中,所消耗的时间、所占用的内存等用于评价目标算法性能的参数。
并且,在得到该预处理后的数据对应的处理结果后,可以以文件的形式输出该预处理后的数据对应的处理结果,通过该文件可以得到表征目标算法运行效果的处理结果,从而得到当前帧图像数据对应的测试结果。
例如,当目标算法为人脸识别算法时,预处理后的数据对应的处理结果可以包括图像中所识别出的人脸的特征信息,如年龄、性别等,根据所得到的特征信息与实际的特征信息进行对比可以确定目标算法的准确性,从而实现了测试目标算法的运行效果。
又如,当目标算法为人脸识别算法时,预处理后的数据对应的处理结果还可以包括识别出图像中的人脸的特征信息所用的时间,该时间可以用来评价目标算法的运算速率,从而实现了测试目标算法的运行效果。
可以理解的是,目标算法可以预先封装在动态算法库中,动态算法库可以保存在摄像设备中,也可以保存在其它设备中,只要摄像设备能够实现调用该动态算法库即可,本发明实施例对此不做限定。
对于具有主处理器和协处理器双重处理器架构的摄像设备而言,为了减小摄像设备主处理器进行图像处理时的计算量,在一种实现方式中,摄像设备可以包括主处理器和至少一个协处理器,目标算法至少包括第一子算法和第二子算法;
主处理器用于:接收解码设备发送的当前帧图像数据,对当前帧图像数据进行预处理后发送给协处理器;
协处理器用于:将预处理后的当前帧图像数据作为第一子算法的测试数据,并执行第一子算法的测试流程,得到当前帧图像数据对应的测试结果,并将测试结果发送给主处理器;
主处理器还用于:将来自协处理器的测试结果输出;或者,将来自协处理器的测试结果作为第二子算法的测试数据,并执行第二子算法的测试流程,得到第二子算法的测试结果。
可以理解的是,协处理器是一种协助主处理器完成其无法执行或执行效率、效果低下的处理工作而开发和应用的处理器。
在该实施方式中,目标算法可以包括一个或多个算法,可以将目标算法拆分为两类算法,分别为:第一子算法和第二子算法;其中,第一子算法可以预先封装到协处理器对应的算法库中,这样,第一子算法能够在协处理器上运行;第二子算法可以预先封装到主处理器对应的算法库中,这样,第二子算法能够在主处理器上运行。
需要说明的是,协处理器侧通常处理的是一帧小尺寸的图像,或者是包含某个感兴趣区域的固定尺寸大小的图像,因此,图像缩放、格式转换、感兴趣区域的抠图操作等预处理操作将在主处理器侧进行。也就是说,主处理器在接收到解码设备发送的当前帧图像数据之后,可以先对当前帧图像数据进行预处理,然后将预处理后的当前帧图像数据发送至协处理器。
协处理器接收到主处理器发送的预处理后的当前帧图像数据后,调用第一子算法,将预处理后的当前帧图像数据作为第一子算法的测试数据,第一子算法对预处理后的当前帧图像数据进行图像处理,即执行第一子算法的测试流程,得到来自协处理器的测试结果,并将测试结果发送至主处理器;主处理器在接收到来自协处理器的测试结果后,可以直接将协处理器的测试结果输出;还可以对来自协处理器的测试结果进行进一步处理。
主处理器对来自协处理器的测试结果进行后处理的具体过程可以为:调用第二子算法,将来自协处理器的测试结果作为第二子算法的输入,利用第二子算法对来自协处理器的测试结果进行进一步处理,即执行第二子算法的测试流程,从而得到当前帧图像数据的测试结果。举例而言,来自协处理器的测试结果为图像中存在的目标;主处理器接收到协处理器发送的目标后,可以对所接收到的目标进行跟踪。
由上述描述可知,可以将目标算法中与对来自协处理器的测试结果进行进一步处理相关的算法作为第二子算法;将目标算法中除第二子算法之外的算法作为第一类算法。
本发明实施例提供的方案,摄像设备采集到原始数据后,向解码设备发送该原始数据;解码设备接收到该原始数据后,对该原始数据进行解码,得到单帧图像数据,并向摄像设备发送单帧图像数据;摄像设备接收到解码设备发送的当前帧图像数据后,对当前帧图像数据进行预处理,并将预处理后的数据作为目标算法的测试数据,执行目标算法的测试流程,得到当前帧图像数据对应的测试结果。因此,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
在图4所示实施例的基础上,在一种实施方式中,在摄像设备接收解码设备发送的当前帧图像数据的步骤之前,目标算法的测试方法还可以包括:
摄像设备与解码设备建立Socket编程接口通信连接;
摄像设备接收解码设备发送的当前帧图像数据的步骤,可以包括:
摄像设备接收解码设备发送的Socket指示信息,Socket指示信息用于指示摄像设备根据挂载的共享目录读取当前帧图像数据;Socket指示信息是解码设备在得到当前帧图像数据并将当前帧图像数据写入到共享目录对应的存储区域之后发送的。
可以理解的,在解码设备和摄像设备为同一运行环境时,可以将解码设备上的目录预先挂载到摄像设备上,这样,预先挂载到摄像设备的目录成为共享目录,从而解码设备与摄像设备可以实现图像数据的共享。具体的,在共享目录确定后,解码设备可以将解码得到的每帧图像数据写入共享目录,摄像设备可以从共享目录中读取各帧图像数据,从而实现图像数据的共享。
在该实施方式中,解码设备在向摄像摄像设备发送当前帧图像数据之前,摄像设备与解码设备可以建立Socket编程接口通信连接。这样,解码设备对原始数据进行解码,得到当前帧视频数据后,可以将当前帧图像数据写入到共享目录对应的存储区域中;并向摄像设备发送Socket指示信息;摄像设备接收到该Socket指示信息后,解析该Socket指示信息,得到解析结果,可以理解的是,该解析结果可以为:从根据挂载的共享目录中读取当前帧图像数据,从而摄像设备可以执行从挂载的共享目录中读取当前帧图像数据的步骤。
下面将结合示意图对上述过程进行详细阐述。如图5所示,解码设备与摄像设备通过Socket编程接口1与Socket编程接口2通信连接。上述过程主要可以分为S1-S5这5个步骤,具体的:
S1,解码设备得到当前帧图像数据后,将当前帧图像数据写入共享目录中;
S2,解码设备向摄像设备发送Socket指示信息;
S3,摄像设备解析该Socket指示信息;
S4,摄像设备从共享目录中读取当前帧图像数据;
S5,摄像设备向解码设备发送应答消息,解码设备接收到该应答消息后,可以得知摄像设备已经成功接收到了该应答消息,并从共享文件中读取了当前帧图像数据。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段;并且,摄像设备与解码设备建立Socket编程接口通信连接,可以使得摄像设备与解码设备实现图像数据共享,便于实现目标算法的测试。
可以理解的是,摄像设备可以从解码设备获取多帧图像数据,摄像设备对获取的多帧图像数据进行图像处理时,通常需要按照获取各帧图像数据的先后顺序进行处理,举例而言,摄像设备先后从解码设备获取两帧图像数据,分别为第一帧图像数据和第二帧图像数据,那么,摄像设备先处理第一帧图像数据,再处理第二帧图像数据。
为了保证摄像设备能够按照获取各帧图像数据的先后顺序,来对各帧图像数据进行处理,在一种实施方式中,在摄像设备对当前帧图像数据进行预处理的步骤之前,目标算法的测试方法还可以包括:
摄像设备从当前帧图像数据中读取图像数据,将图像数据缓存在第一环形缓冲器;或者,从当前帧图像数据中读取图像数据和图像参数,将图像数据缓存在第一环形缓冲器,将图像参数缓存在第二环形缓冲器;以及
向解码设备发送Socket指示信息的应答信息,该应答信息用于指示解码设备向摄像设备发送下一帧图像数据。
在该实施方式中,摄像设备在接收到当前帧图像数据后,可以将从当前帧图像数据中,读取图像数据,并将所读取的图像数据缓存在环形缓冲器中。可以理解的是,环形缓冲器是一个先进先出的循环缓冲器,可以保证摄像设备按照缓存时的先后顺序从环形缓冲器中读取图像数据。
另外,在一些应用场景中,解码设备将当前帧图像数据的图像数据发送给解码设备的同时,还可以将与该当前帧图像数据的图像数据相关的图像参数发送给解码设备,以使摄像设备根据该当前帧图像数据的图像数据和图像参数进行图像处理。例如,在检测车牌的应用场景中,当前帧图像数据的图像数据可以为车牌,当前帧图像数据的图像参数可以为车牌所在的区域信息。在这些应用场景中,图像数据和图像参数可以分别采用不同的环形缓冲器进行缓存,即可以将图像数据缓存在第一环形缓冲器,图像参数可以缓存在第二环形缓存器中,并且,为了保证将当前帧图像数据的图像数据缓存于第一环形缓冲器的同时,可以将当前帧图像数据的图像参数缓存于第二环形缓存器中;以及,从第一环形缓冲器读取当前帧图像数据的图像数据的同时,可以从第二环形缓冲器读取当前帧图像数据的图像参数,可以通过同一组读写索引来管理第一环形缓冲器及第二环形缓冲器。这样,对于图像数据和图像参数分别使用独立的环形缓冲器进行缓存,不仅可以提高数据读取速度,同时也增强了扩展性。
并且,摄像设备从当前帧图像数据中读取图像数据,将图像数据缓存在第一环形缓冲器;或者,从当前帧图像数据中读取图像数据和图像参数,将图像数据缓存在第一环形缓冲器,将图像参数缓存在第二环形缓冲器后,可以向解码设备发送Socket指示信息的应答信息,该应答信息用于指示解码设备向摄像设备发送下一帧图像数据,即解码设备接收到该应答信息后,可以将下一帧图像数据发送至解码设备。
相应的,摄像设备对当前帧图像数据进行预处理的步骤,可以包括:
从第一环形缓冲器中获取当前帧图像数据的图像数据,对图像数据进行压缩、裁剪或格式转换中的至少一种,得到感兴趣区域的图像数据;
从第二环形缓冲器中获取当前帧图像数据的图像参数;
获取目标算法的算法参数;
根据算法参数、当前帧图像数据的图像参数和感兴趣区域的图像数据,生成预处理后的数据。
具体的,由于当前帧图像数据的图像数据缓冲在第一环形缓冲器,当前帧图像数据的图像参数缓冲在第二环形缓冲器。因此,摄像设备可以从第一环形缓冲器中获取当前图像数据的图像数据,并可以从第二环形缓冲器中获取当前图像数据的图像参数。并且,摄像设备从第一环形缓冲器中获取当前帧图像数据的图像数据后,可以对获取的图像数据进行预处理,例如,对获取的图像数据进行压缩、裁剪或格式转换等,以得到感兴趣的图像数据。
如图6所示,为环形缓冲器的示意图。从图中可以看出,该环形缓冲器有8个缓冲区域,编号分别为:1、2、3、4、5、6、7和8。每个缓冲区域均可以存放图像数据或者图像参数。
而且,不同的当前帧图像数据,对应的目标算法可能不同,不同的目标算法对应的算法参数也可能不同。因此,摄像设备生成预处理的数据时,还可以获取目标算法的算法参数,并可以将目标算法的算法参数、当前帧图像数据的图像参数和感兴趣区域的图像数据进行封装,得到预处理后的数据,这样,有利于后续步骤中,对与预处理后的数据对应的目标算法的测试。
可见,本实施方式中,通过将图像数据缓存在环形缓冲器中,可以保证摄像设备按照缓存时的先后顺序从环形缓冲器中读取图像数据;并且,通过将对于图像数据和图像参数分别使用独立的环形缓冲器进行缓存,不仅可以提高数据读取速度,同时也增强了扩展性。
另外,对于具有主处理器和协处理器双重处理器架构的摄像设备而言,摄像设备的主处理器710的功能可以划分为一个主线程和四个子线程来实现,如图7所示,四个子线程分别为:图像数据管理线程711、图像数据发送线程712、协处理器处理结果接收线程713、协处理器处理结果后处理线程714。图像数据管理线程与其他三个子线程是可以是并行关系,其他三个子线程之间是串行关系。协处理器720的功能可以划分为一个主线程和一个子线程,其中,该主线程可以用于:协处理器底层初始化和该子线程的启动,该子线程为:协处理器算法应用线程721,需要说明的是,为了更好地显示主处理器的四个子线程,以及协处理器的一个子线程的连接关系,在图7中,没有画出主处理器的主线程与协处理器的主线程。
其中,主处理器的主线程可以用于:完成主处理器自身的初始化,启动协处理器,并协助协处理器完成初始化。
图像数据管理线程可以用于执行如下步骤,如图8所示。
S810,判断第一环形缓冲器中是否存在空闲的图像数据缓冲区;若判断第一环形缓冲器中存在空闲的图像数据缓冲区,执行S820;
S820,将当前帧图像数据的图像数据缓存在第一环形缓冲器;
S830,判断是否需要读取当前帧图像数据的图像参数;若判断需要读取当前帧图像数据的图像参数,执行S840;否则,执行直接执行S850;
S840,将当前帧图像数据的图像参数缓存在第二环形缓冲器;
S850,向解码设备发送Socket指示信息的应答信息。
其中,第一环形缓冲器以及第二环形缓冲器的写指针由该图像数据管理线程自身来维护;而第一环形缓冲器以及第二环形缓冲器的读指针由图像数据发送线程来维护。
图像数据发送线程可以用于执行如下步骤,如图9所示。
S910,从配置文件中读取目标算法的算法参数;
S920,判断第一环形缓冲器中是否存储有当前帧图像数据的图像数据;以及第二环形缓冲器中是否存储有当前帧图像数据的图像参数;若S920的判断结果为是,执行S930;
S930,从第一环形缓冲器中读取当前帧图像数据的图像数据,从第二环形缓冲器中读取当前帧图像数据的图像数据相关的图像参数;
S940,对第一环形缓冲器中读取的图像数据进行图像缩放、格式转换、裁剪等,得到感兴趣的图像数据;
S950,将目标算法的算法参数、当前帧图像数据的图像参数和感兴趣区域的图像数据进行封装,得到预处理后的数据;
S960,将所得到的预处理后的数据发送至协处理器算法应用线程。
协处理器算法应用线程可以用于执行如下步骤,如图10所示。
S1010,接收图像数据发送线程发送的预处理后的数据;
S1020,将预处理后的数据作为第一子算法的测试数据,第一子算法对预处理后的数据进行图像处理,得到协处理器处理结果
S1030,将协处理器处理结果封装后,发送至协处理器处理结果接收线程。
协处理器处理结果接收线程可以用于执行如下步骤,如图11所示。
S1110,接收协处理器算法应用线程发送的协处理器处理结果;
S1120,解析协处理器处理结果,得到解析结果;
S1130,判断解析结构是否正确;若为是,执行步骤S1140;
S1140,将协处理器处理结果发送至协处理器处理结果后处理线程。
协处理器处理结果后处理线程可以用于执行如下步骤,如图12所示。
S1210,接收协处理器处理结果接收线程发送的协处理器处理结果;
S1220,判断是否输出协处理器处理结果;若为是,执行S1230;若为否,执行S1240;
S1230,输出协处理器处理结果;
S1240,将协处理器处理结果作为第二子算法的测试数据,第二类子算法对协处理器处理结果进行后处理,得到当前帧图像数据对应的测试结果。
另外,在一种实现方式中,图像数据发送线程与协处理器处理结果后处理线程可以是带阻塞的线程,即当协处理器处理结果后处理线程处理完成一帧图像数据后,图像数据发送线程再发送下一帧图像数据给协处理器算法应用线程。阻塞的目的是使主处理器处理的图像数据能够与协处理器处理结果一一对应。并且,在协处理器处理结果后处理线程处理完当前帧图像数据后,主处理器会回到图像数据发送线程中去执行统计耗时、文件形式输出结果等后续操作。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。另外,摄像设备具有主处理器和协处理器双重处理器架构,有利于减小主处理器的计算量,提高目标算法的测试效率。
第三方面,本发明实施例提供的一种应用于解码设备的目标算法的测试方法。
本发明实施例所提供的一种目标算法的测试方法可以应用于解码设备。为了测试目标算法的运行效果,在本发明实施例中,该解码设备可以与摄像设备通信连接,例如,该解码设备与摄像设备可以通过以太网口实现硬件连接,当然并不局限于此。本发明实施例中的解码设备可以以摄像设备采集的图像数据作为输入,将图像数据解码为单帧图像数据,并将解码得到的各帧图像数据发送给摄像设备进行处理,摄像设备接收到各帧图像数据后,对各帧图像数据进行预处理,得到预处理后的数据,并将预处理后的数据作为目标算法的测试数据,执行目标算法的测试流程,从而实现了对目标算法的测试。
并且,摄像设备所采集的图像数据可以是视频流,即摄像设备录制的视频文件,还可以是jpeg、raw等格式的图像文件;因此,解码设备不仅可以对视频文件进行解码,还可以对jpeg、raw等格式的图像文件进行解码,还可以对包含视频文件或者图像文件的目录中的每一文件进行解码。
例如,一个目录包含若干视频文件,解码设备能够遍历该目录下的每一需要解码的视频文件,并对每一需要解码的视频文件进行解码;再例如,一个目录包含若干jpeg格式的图像文件,解码设备能够遍历该目录下的每一需要解码的jpeg图像文件,并对每一需要解码的jpeg图像文件进行解码。
而且,解码设备对摄像设备所采集的图像数据进行解码后,所得到的单帧图像数据的格式通常为YUV格式。
下面将对本发明实施例提供的一种应用于解码设备的目标算法的测试方法进行详细阐述。
如图13所示,本发明实施例提供的一种应用于解码设备的目标算法的测试方法,包括如下步骤:
S1310,解码设备接收摄像设备采集的原始数据,原始数据包括摄像设备录制的视频流或摄像设备采集的第一格式的图像数据;解码设备与摄像设备通过以太网接口实现通信连接。
摄像设备具有采集原始数据的功能。具体的,摄像设备的图像传感器产生图像数据;ISP模块对该图像数据进行图像信号处理,即可以得到原始数据。
并且,该原始数据可以是视频流,即摄像设备录制的视频文件,还可以是第一格式的图像数据。该第一格式可以为jpeg、raw等,本发明实施例对第一格式不作具体限定。
摄像设备采集到原始数据之后,可以将该原始数据发送至解码设备,解码设备即可接收到摄像设备采集的原始数据。可以理解的是,摄像设备与解码设备通信连接。解码设备与摄像设备可以通过以太网接口实现通信连接。
S1320,解码设备对原始数据进行解码,得到当前帧图像数据,当前帧图像数据为第二格式的单帧图像数据。
解码设备接收到原始数据后,对原始数据进行解码,得到单帧图像数据;可以理解的是,任一帧图像数据均可以是当前帧图像数据。该当前帧图像数据的格式可以为YUV格式。本发明实施例对当前帧图像数据的格式不做具体限定。
S1330,解码设备向摄像设备发送当前帧图像数据。
解码设备得到单帧图像数据后,可以将单帧图像数据发送至摄像设备,从而摄像设备接收到一帧帧的图像数据。摄像设备所接收到的任一帧图像数据均可以是当前帧图像数据。摄像设备接收到当前帧图像数据后,即可执行第一方面所述的目标算法的测试方法。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
在图13所示实施例的基础上,在一种实施方式中,在解码设备向摄像设备发送当前帧图像数据的步骤之前,目标算法的测试方法还可以包括:
解码设备与摄像设备建立Socket编程接口通信连接;
解码设备向摄像设备发送当前帧图像数据的步骤,包括:
解码设备在解码得到当前帧图像数据之后,将当前帧图像数据写入到共享目录对应的存储区域;
并向摄像设备发送Socket指示信息,Socket指示信息用于指示摄像设备根据挂载的共享目录读取当前帧图像数据。
可以理解的,在解码设备和摄像设备为同一运行环境时,可以将解码设备上的目录预先挂载到摄像设备上,这样,预先挂载到摄像设备的目录成为共享目录,从而解码设备与摄像设备可以实现图像数据的共享。具体的,在共享目录确定后,解码设备可以将解码得到的每帧图像数据写入共享目录,摄像设备可以从共享目录中读取各帧图像数据,从而实现图像数据的共享。
在该实施方式中,解码设备在向摄像摄像设备发送当前帧图像数据之前,摄像设备与解码设备可以建立Socket编程接口通信连接。这样,解码设备对原始数据进行解码,得到当前帧视频数据后,可以将当前帧图像数据写入到共享目录对应的存储区域中;并向摄像设备发送Socket指示信息;摄像设备接收到该Socket指示信息后,解析该Socket指示信息,得到解析结果,可以理解的是,该解析结果可以为:从根据挂载的共享目录中读取当前帧图像数据,从而摄像设备可以执行从挂载的共享目录中读取当前帧图像数据的步骤。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段;并且,摄像设备与解码设备建立Socket编程接口通信连接,可以使得摄像设备与解码设备实现图像数据共享,便于实现目标算法的测试。
在一种实施方式中,在解码设备向摄像设备发送当前帧图像数据的步骤之后,目标算法的测试方法还可以包括:
解码设备接收摄像设备所发送的Socket指示信息的应答信息,应答信息是摄像设备从当前帧图像数据中读取图像数据,并将图像数据缓存在第一环形缓冲器之后发送的;或者,应答信息是摄像设备从当前帧图像数据中读取图像数据和图像参数,并将图像数据缓存在第一环形缓冲器,将图像参数缓存在第二环形缓冲器之后发送的;
解码设备根据应答信息,向摄像设备发送下一帧图像数据。
可以理解的是,摄像设备可以从解码设备获取多帧图像数据,摄像设备对获取的多帧图像数据进行图像处理时,通常需要按照获取各帧图像数据的先后顺序进行处理,举例而言,摄像设备先后从解码设备获取两帧图像数据,分别为第一帧图像数据和第二帧图像数据,那么,摄像设备先处理第一帧图像数据,再处理第二帧图像数据。
为了保证摄像设备能够按照获取各帧图像数据的先后顺序,来对各帧图像数据进行处理,摄像设备从当前帧图像数据中读取图像数据,将图像数据缓存在第一环形缓冲器;或者,从当前帧图像数据中读取图像数据和图像参数,将图像数据缓存在第一环形缓冲器,将图像参数缓存在第二环形缓冲器;摄像设备在接收到当前帧图像数据后,可以将从当前帧图像数据中,读取图像数据,并将所读取的图像数据缓存在环形缓冲器中。可以理解的是,环形缓冲器是一个先进先出的循环缓冲器,可以保证摄像设备按照缓存时的先后顺序从环形缓冲器中读取图像数据。
另外,在一些应用场景中,解码设备将当前帧图像数据的图像数据发送给解码设备的同时,还可以将与该当前帧图像数据的图像数据相关的图像参数发送给解码设备,以使摄像设备根据该当前帧图像数据的图像数据和图像参数进行图像处理。例如,在检测车牌的应用场景中,当前帧图像数据的图像数据可以为车牌,当前帧图像数据的图像参数可以为车牌所在的区域信息。在这些应用场景中,图像数据和图像参数可以分别采用不同的环形缓冲器进行缓存,即可以将图像数据缓存在第一环形缓冲器,图像参数可以缓存在第二环形缓存器中,并且,为了保证将当前帧图像数据的图像数据缓存于第一环形缓冲器的同时,可以将当前帧图像数据的图像参数缓存于第二环形缓存器中;以及,从第一环形缓冲器读取当前帧图像数据的图像数据的同时,可以从第二环形缓冲器读取当前帧图像数据的图像参数,可以通过同一组读写索引来管理第一环形缓冲器及第二环形缓冲器。
并且,摄像设备从当前帧图像数据中读取图像数据,将图像数据缓存在第一环形缓冲器;或者,从当前帧图像数据中读取图像数据和图像参数,将图像数据缓存在第一环形缓冲器,将图像参数缓存在第二环形缓冲器后,可以向解码设备发送Socket指示信息的应答信息,该应答信息用于指示解码设备向摄像设备发送下一帧图像数据,即解码设备接收到该应答信息后,可以将下一帧图像数据发送至摄像设备。
可见,本实施方式中,通过将图像数据缓存在环形缓冲器中,可以保证摄像设备按照缓存时的先后顺序从环形缓冲器中读取图像数据;并且,通过将对于图像数据和图像参数分别使用独立的环形缓冲器进行缓存,不仅可以提高数据读取速度,同时也增强了扩展性。
为了更加清楚地描述解码设备的工作流程,下面对解码设备的工作流程进行详细阐述。如图14所示。
S1410,解码设备与摄像设备建立Socket编程接口通信连接;
S1420,解码设备接收摄像设备发送的摄像设备所采集的原始数据;
S1430,解码设备判断所接收到的原始数据是否为包含视频文件或者图像文件的目录,若为是,执行步骤S1440;否则,直接执行步骤S1450;
S1440,遍历目录中的每一视频文件或者图像文件;
S1450,解码视频文件或者图像文件,得到一帧帧单帧图像数据;
S1460,将当前帧图像数据写入共享目录中,并向摄像设备发送Socket指示信息,Socket指示信息用于指示摄像设备从共享目录中读取单帧图像数据;
S1470,解码设备判断是否接收到Socket指示信息的应答信息,若为是,返回执行S1460,否则,继续判断是否接收到Socket指示信息的应答信息。
第四方面,本发明实施例提供了一种目标算法的测试装置,所述测试装置位于摄像设备中,如图15所示,所述装置包括:
原始数据发送模块1510,用于向解码设备发送所述摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流或所述摄像设备采集的第一格式的图像数据;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
图像数据接收模块1520,用于接收所述解码设备发送的当前帧图像数据,所述当前帧图像数据是所述解码设备对所述原始数据进行解码后得到的第二格式的单帧图像数据;
图像数据处理模块1530,用于所述摄像设备对所述当前帧图像数据进行预处理;
算法测试模块1540,用于将预处理后的数据作为目标算法的测试数据,并执行所述目标算法的测试流程,得到所述当前帧图像数据对应的测试结果。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
可选的,所述装置还可以包括:
第一通信建立模块,用于在所述摄像设备的图像数据接收模块接收所述解码设备发送的当前帧图像数据之前,与所述解码设备建立Socket编程接口通信连接;
所述图像数据接收模块,具体用于:
接收所述解码设备发送的Socket指示信息,所述Socket指示信息用于指示所述摄像设备根据挂载的共享目录读取所述当前帧图像数据;所述Socket指示信息是所述解码设备在得到所述当前帧图像数据并将所述当前帧图像数据写入到所述共享目录对应的存储区域之后发送的。
可选的,所述摄像设备包括主处理器和至少一个协处理器,所述目标算法至少包括第一子算法和第二子算法;
所述主处理器用于:接收所述解码设备发送的当前帧图像数据,对所述当前帧图像数据进行预处理后发送给协处理器;
所述协处理器用于:将预处理后的当前帧图像数据作为第一子算法的测试数据,并执行所述第一子算法的测试流程,得到所述当前帧图像数据对应的测试结果,并将所述测试结果发送给主处理器;
所述主处理器还用于:将来自所述协处理器的测试结果输出;或者,将来自所述协处理器的测试结果作为第二子算法的测试数据,并执行所述第二子算法的测试流程,得到所述第二子算法的测试结果。
可选的,所述装置还可以包括:
图像数据读取模块,用于在所述图像数据处理模块对所述当前帧图像数据进行预处理之前,从所述当前帧图像数据中读取图像数据,将所述图像数据缓存在第一环形缓冲器;或者,从所述当前帧图像数据中读取图像数据和图像参数,将所述图像数据缓存在所述第一环形缓冲器,将所述图像参数缓存在第二环形缓冲器;以及
应答信息发送模块,用于向所述解码设备发送所述Socket指示信息的应答信息,所述应答信息用于指示所述解码设备向所述摄像设备发送下一帧图像数据。
可选的,所述图像数据处理模块,具体用于:
从所述第一环形缓冲器中获取所述当前帧图像数据的图像数据,对所述图像数据进行压缩、裁剪或格式转换中的至少一种,得到感兴趣区域的图像数据;
从所述第二环形缓冲器中获取所述当前帧图像数据的图像参数;
获取所述目标算法的算法参数;
根据所述算法参数、所述当前帧图像数据的图像参数和所述感兴趣区域的图像数据,生成预处理后的数据。
可选的,所述目标算法为图像处理算法、图像分类算法和图像识别算法中的至少一种,所述目标算法包括一个或多个子算法。
第五方面,本发明实施例提供了一种目标算法的测试装置,所述测试装置位于解码设备中,如图16所示,所述装置包括:
原始数据接收模块1610,用于接收摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流或所述摄像设备采集的第一格式的图像数据;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
原始数据解码模块1620,用于对所述原始数据进行解码,得到当前帧图像数据,所述当前帧图像数据为第二格式的单帧图像数据;
图像数据发送模块1630,用于向所述摄像设备发送当前帧图像数据。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
可选的,所述装置还可以包括:
第二通信建立模块,用于在所述图像数据发送模块向所述摄像设备发送当前帧图像数据之前,与所述摄像设备建立Socket编程接口通信连接;
所述图像数据发送模块,具体用于:
在所述原始数据解码模块解码得到所述当前帧图像数据之后,将所述当前帧图像数据写入到共享目录对应的存储区域;并
向所述摄像设备发送Socket指示信息,所述Socket指示信息用于指示所述摄像设备根据挂载的所述共享目录读取所述当前帧图像数据。
可选的,所述装置还包括:
应答信息接收模块,用于在所述图像数据发送模块向所述摄像设备发送当前帧图像数据之后,接收所述摄像设备所发送的Socket指示信息的应答信息,所述应答信息是所述摄像设备从所述当前帧图像数据中读取图像数据,并将所述图像数据缓存在第一环形缓冲器之后发送的;或者,所述应答信息是所述摄像设备从所述当前帧图像数据中读取图像数据和图像参数,并将所述图像数据缓存在所述第一环形缓冲器,将所述图像参数缓存在第二环形缓冲器之后发送的;
根据所述应答信息,向所述摄像设备发送下一帧图像数据。
第六方面,本发明实施例还提供了一种摄像设备,如图17所示,包括处理器1701、通信接口1702、存储器1703和通信总线1704,其中,处理器1701,通信接口1702,存储器1703通过通信总线1704完成相互间的通信,
存储器1703,用于存放计算机程序;
处理器1701,用于执行存储器1703上所存放的程序时,实现第一方面所述的目标算法的测试方法。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
上述摄像设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述摄像设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
第七方面,本发明实施例还提供了一种解码设备,如图18所示,包括处理器1801、通信接口1802、存储器1803和通信总线1804,其中,处理器1801,通信接口1802,存储器1803通过通信总线1804完成相互间的通信,
存储器1803,用于存放计算机程序;
处理器1801,用于执行存储器1803上所存放的程序时,实现第二方面所述的目标算法的测试方法。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
上述解码设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述解码设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
第八方面,在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上第一方面所述的目标算法的测试方法。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
第九方面,在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上第二方面所述的目标算法的测试方法。
可见,通过本方案可以实现测试目标算法在实际应用时的运行效果的目的。而且,本发明实施例提供的方案以摄像设备为硬件进行测试,不需要单独设计和搭建硬件环境,属于软件层面上的测试手段,便于实现目标算法的测试。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、系统、摄像设备、解码设备以及计算机可读存储介质实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (12)

1.一种目标算法的测试方法,其特征在于,所述方法包括:
摄像设备向解码设备发送所述摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
所述摄像设备接收所述解码设备发送的当前帧图像数据,所述当前帧图像数据是所述解码设备对所述原始数据进行解码后得到的第二格式的单帧图像数据;
所述摄像设备对所述当前帧图像数据进行预处理;
所述摄像设备将预处理后的数据作为目标算法的测试数据,并执行所述目标算法的测试流程,得到所述当前帧图像数据对应的测试结果;
在所述摄像设备接收所述解码设备发送的当前帧图像数据的步骤之前,所述方法还包括:
所述摄像设备与所述解码设备建立Socket编程接口通信连接;
所述摄像设备接收所述解码设备发送的当前帧图像数据的步骤,包括:
所述摄像设备接收所述解码设备发送的Socket指示信息,所述Socket指示信息用于指示所述摄像设备根据挂载的共享目录读取所述当前帧图像数据;所述Socket指示信息是所述解码设备在得到所述当前帧图像数据并将所述当前帧图像数据写入到所述共享目录对应的存储区域之后发送的;
在所述摄像设备对所述当前帧图像数据进行预处理的步骤之前,所述方法还包括:
所述摄像设备从所述当前帧图像数据中读取图像数据,将所述图像数据缓存在第一环形缓冲器;或者,从所述当前帧图像数据中读取图像数据和图像参数,将所述图像数据缓存在所述第一环形缓冲器,将所述图像参数缓存在第二环形缓冲器;以及
向所述解码设备发送所述Socket指示信息的应答信息,所述应答信息用于指示所述解码设备向所述摄像设备发送下一帧图像数据。
2.根据权利要求1所述的方法,其特征在于,所述摄像设备包括主处理器和至少一个协处理器,所述目标算法至少包括第一子算法和第二子算法;
所述主处理器用于:接收所述解码设备发送的当前帧图像数据,对所述当前帧图像数据进行预处理后发送给协处理器;
所述协处理器用于:将预处理后的当前帧图像数据作为第一子算法的测试数据,并执行所述第一子算法的测试流程,得到所述当前帧图像数据对应的测试结果,并将所述测试结果发送给主处理器;
所述主处理器还用于:将来自所述协处理器的测试结果输出;或者,将来自所述协处理器的测试结果作为第二子算法的测试数据,并执行所述第二子算法的测试流程,得到所述第二子算法的测试结果。
3.根据权利要求1所述的方法,其特征在于,所述摄像设备对所述当前帧图像数据进行预处理的步骤,包括:
从所述第一环形缓冲器中获取所述当前帧图像数据的图像数据,对所述图像数据进行压缩、裁剪或格式转换中的至少一种,得到感兴趣区域的图像数据;
从所述第二环形缓冲器中获取所述当前帧图像数据的图像参数;
获取所述目标算法的算法参数;
根据所述算法参数、所述当前帧图像数据的图像参数和所述感兴趣区域的图像数据,生成预处理后的数据。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述目标算法为图像处理算法、图像分类算法和图像识别算法中的至少一种,所述目标算法包括一个或多个子算法。
5.一种目标算法的测试方法,其特征在于,所述方法包括:
解码设备接收摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
所述解码设备对所述原始数据进行解码,得到当前帧图像数据,所述当前帧图像数据为第二格式的单帧图像数据;
所述解码设备向所述摄像设备发送当前帧图像数据,以使得所述摄像设备对所述当前帧图像数据进行预处理,并使得所述摄像设备将预处理后的数据作为目标算法的测试数据,并执行所述目标算法的测试流程,得到所述当前帧图像数据对应的测试结果;
在所述解码设备向所述摄像设备发送当前帧图像数据的步骤之前,所述方法还包括:
所述解码设备与所述摄像设备建立Socket编程接口通信连接;
所述解码设备向所述摄像设备发送当前帧图像数据的步骤,包括:
所述解码设备在解码得到所述当前帧图像数据之后,将所述当前帧图像数据写入到共享目录对应的存储区域;并
向所述摄像设备发送Socket指示信息,所述Socket指示信息用于指示所述摄像设备根据挂载的所述共享目录读取所述当前帧图像数据;
在所述解码设备向所述摄像设备发送当前帧图像数据的步骤之后,所述方法还包括:
所述解码设备接收所述摄像设备所发送的Socket指示信息的应答信息,所述应答信息是所述摄像设备从所述当前帧图像数据中读取图像数据,并将所述图像数据缓存在第一环形缓冲器之后发送的;或者,所述应答信息是所述摄像设备从所述当前帧图像数据中读取图像数据和图像参数,并将所述图像数据缓存在所述第一环形缓冲器,将所述图像参数缓存在第二环形缓冲器之后发送的;
所述解码设备根据所述应答信息,向所述摄像设备发送下一帧图像数据。
6.一种目标算法的测试装置,其特征在于,所述测试装置位于摄像设备中,所述装置包括:
原始数据发送模块,用于向解码设备发送所述摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
图像数据接收模块,用于接收所述解码设备发送的当前帧图像数据,所述当前帧图像数据是所述解码设备对所述原始数据进行解码后得到的第二格式的单帧图像数据;
图像数据处理模块,用于所述摄像设备对所述当前帧图像数据进行预处理;
算法测试模块,用于将预处理后的数据作为目标算法的测试数据,并执行所述目标算法的测试流程,得到所述当前帧图像数据对应的测试结果;
在所述图像数据接收模块,用于接收所述解码设备发送的当前帧图像数据的步骤之前,所述图像数据接收模块还包括:
所述摄像设备与所述解码设备建立Socket编程接口通信连接;
所述摄像设备接收所述解码设备发送的当前帧图像数据的步骤,包括:
所述摄像设备接收所述解码设备发送的Socket指示信息,所述Socket指示信息用于指示所述摄像设备根据挂载的共享目录读取所述当前帧图像数据;所述Socket指示信息是所述解码设备在得到所述当前帧图像数据并将所述当前帧图像数据写入到所述共享目录对应的存储区域之后发送的;
在所述图像接收模块,用于所述摄像设备对所述当前帧图像数据进行预处理的步骤之前,还包括:
所述摄像设备从所述当前帧图像数据中读取图像数据,将所述图像数据缓存在第一环形缓冲器;或者,从所述当前帧图像数据中读取图像数据和图像参数,将所述图像数据缓存在所述第一环形缓冲器,将所述图像参数缓存在第二环形缓冲器;以及
向所述解码设备发送所述Socket指示信息的应答信息,所述应答信息用于指示所述解码设备向所述摄像设备发送下一帧图像数据。
7.一种目标算法的测试装置,其特征在于,所述测试装置位于解码设备中,所述装置包括:
原始数据接收模块,用于接收摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流或所述摄像设备采集的第一格式的图像数据;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
原始数据解码模块,用于对所述原始数据进行解码,得到当前帧图像数据,所述当前帧图像数据为第二格式的单帧图像数据;
图像数据发送模块,用于向所述摄像设备发送当前帧图像数据,以使得所述摄像设备对所述当前帧图像数据进行预处理,并使得所述摄像设备将预处理后的数据作为目标算法的测试数据,并执行所述目标算法的测试流程,得到所述当前帧图像数据对应的测试结果;
在所述图像数据发送模块,用于向所述摄像设备发送当前帧图像数据的步骤之前,所述图像数据发送模块还包括:
所述解码设备与所述摄像设备建立Socket编程接口通信连接;
所述解码设备向所述摄像设备发送当前帧图像数据的步骤,包括:
所述解码设备在解码得到所述当前帧图像数据之后,将所述当前帧图像数据写入到共享目录对应的存储区域;并
向所述摄像设备发送Socket指示信息,所述Socket指示信息用于指示所述摄像设备根据挂载的所述共享目录读取所述当前帧图像数据;
在所述图像数据发送模块,用于向所述摄像设备发送当前帧图像数据的步骤之后,所述图像数据发送模块还包括:
所述解码设备接收所述摄像设备所发送的Socket指示信息的应答信息,所述应答信息是所述摄像设备从所述当前帧图像数据中读取图像数据,并将所述图像数据缓存在第一环形缓冲器之后发送的;或者,所述应答信息是所述摄像设备从所述当前帧图像数据中读取图像数据和图像参数,并将所述图像数据缓存在所述第一环形缓冲器,将所述图像参数缓存在第二环形缓冲器之后发送的;
所述解码设备根据所述应答信息,向所述摄像设备发送下一帧图像数据。
8.一种目标算法的测试系统,其特征在于,包括:摄像设备和解码设备;
所述摄像设备,用于向解码设备发送所述摄像设备采集的原始数据,所述原始数据包括所述摄像设备录制的视频流;所述解码设备与所述摄像设备通过以太网接口实现通信连接;
所述解码设备,用于接收摄像设备采集的原始数据;对所述原始数据进行解码,得到当前帧图像数据;向所述摄像设备发送当前帧图像数据;所述当前帧图像数据为第二格式的单帧图像数据;
所述摄像设备,还用于接收所述解码设备发送的当前帧图像数据;对所述当前帧图像数据进行预处理;将预处理后的数据作为目标算法的测试数据,并执行所述目标算法的测试流程,得到所述当前帧图像数据对应的测试结果;
在所述解码设备向所述摄像设备发送当前帧图像数据的步骤之前,还包括:
所述解码设备与所述摄像设备建立Socket编程接口通信连接;
所述解码设备向所述摄像设备发送当前帧图像数据的步骤,包括:
所述解码设备在解码得到所述当前帧图像数据之后,将所述当前帧图像数据写入到共享目录对应的存储区域;并
向所述摄像设备发送Socket指示信息,所述Socket指示信息用于指示所述摄像设备根据挂载的所述共享目录读取所述当前帧图像数据;
在所述解码设备向所述摄像设备发送当前帧图像数据的步骤之后,所述方法还包括:
所述解码设备接收所述摄像设备所发送的Socket指示信息的应答信息,所述应答信息是所述摄像设备从所述当前帧图像数据中读取图像数据,并将所述图像数据缓存在第一环形缓冲器之后发送的;或者,所述应答信息是所述摄像设备从所述当前帧图像数据中读取图像数据和图像参数,并将所述图像数据缓存在所述第一环形缓冲器,将所述图像参数缓存在第二环形缓冲器之后发送的;
所述解码设备根据所述应答信息,向所述摄像设备发送下一帧图像数据。
9.一种摄像设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-4任一所述的方法步骤。
10.一种解码设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求5所述的方法步骤。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-4任一所述的方法步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求5所述的方法步骤。
CN201810998177.3A 2018-08-29 2018-08-29 一种目标算法的测试方法、装置和系统 Active CN110876054B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810998177.3A CN110876054B (zh) 2018-08-29 2018-08-29 一种目标算法的测试方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810998177.3A CN110876054B (zh) 2018-08-29 2018-08-29 一种目标算法的测试方法、装置和系统

Publications (2)

Publication Number Publication Date
CN110876054A CN110876054A (zh) 2020-03-10
CN110876054B true CN110876054B (zh) 2022-03-04

Family

ID=69714868

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810998177.3A Active CN110876054B (zh) 2018-08-29 2018-08-29 一种目标算法的测试方法、装置和系统

Country Status (1)

Country Link
CN (1) CN110876054B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112364761B (zh) * 2020-11-10 2024-06-14 广东电网有限责任公司清远供电局 一种基于视频图像识别算法的测试方法、装置及测试终端

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8780210B1 (en) * 2013-02-01 2014-07-15 Videoq, Inc. Video quality analyzer
CN104063313A (zh) * 2014-04-15 2014-09-24 深圳英飞拓科技股份有限公司 一种智能分析算法的测试系统及方法
CN106534839A (zh) * 2016-10-11 2017-03-22 武汉精测电子技术股份有限公司 一种高清摄像头视频处理系统及方法
CN106791415A (zh) * 2016-12-29 2017-05-31 中国科学院长春光学精密机械与物理研究所 一种智能图像处理装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010033321A (ja) * 2008-07-29 2010-02-12 Mitsubishi Heavy Ind Ltd 画像処理アルゴリズムの評価システム
CN102413320A (zh) * 2011-12-21 2012-04-11 上海大学 一种无线网络智能视频监控系统的实现方法
CN106506937A (zh) * 2016-10-11 2017-03-15 芜湖哈特机器人产业技术研究院有限公司 一种可供二次开发的智能相机
CN107197238A (zh) * 2017-07-06 2017-09-22 杭州柴滕自动化科技有限公司 一种基于fpga双摄图像采集测试装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8780210B1 (en) * 2013-02-01 2014-07-15 Videoq, Inc. Video quality analyzer
CN104063313A (zh) * 2014-04-15 2014-09-24 深圳英飞拓科技股份有限公司 一种智能分析算法的测试系统及方法
CN106534839A (zh) * 2016-10-11 2017-03-22 武汉精测电子技术股份有限公司 一种高清摄像头视频处理系统及方法
CN106791415A (zh) * 2016-12-29 2017-05-31 中国科学院长春光学精密机械与物理研究所 一种智能图像处理装置

Also Published As

Publication number Publication date
CN110876054A (zh) 2020-03-10

Similar Documents

Publication Publication Date Title
KR101899530B1 (ko) 분산 광학 문자 인식 및 분산 기계 언어번역을 위한 기법들
US11847816B2 (en) Resource optimization based on video frame analysis
KR101856119B1 (ko) 분산 광학 문자 인식 및 분산 기계 언어번역을 위한 기법들
US10878272B2 (en) Information processing apparatus, information processing system, control method, and program
WO2023124428A1 (zh) 芯片、加速卡以及电子设备、数据处理方法
US20110069146A1 (en) System and method for processing images
EP3963507A1 (en) Object tracking and redaction
CN110876054B (zh) 一种目标算法的测试方法、装置和系统
CN113506298A (zh) 图像检测与渲染方法及装置、设备、存储介质
US10083720B2 (en) Method and system for video data stream storage
US10832369B2 (en) Method and apparatus for determining the capture mode following capture of the content
CN116129316A (zh) 图像处理方法、装置、计算机设备和存储介质
US11430488B2 (en) System and method for generating a compression invariant motion timeline
US20220180102A1 (en) Reducing false negatives and finding new classes in object detectors
WO2022061319A1 (en) Generic action start detection
CN113992493A (zh) 视频处理方法、系统、设备及存储介质
CN112380938A (zh) 一种人脸识别及测温方法、装置、设备及介质
US20190348061A1 (en) System and method for processing sound beams associated with visual elements
Dosimont et al. A trace macroscopic description based on time aggregation
WO2020095398A1 (ja) 情報解析装置及び情報解析方法
CN110795215A (zh) 一种数据处理方法、计算机设备、存储介质
CN112631733B (zh) 数据采集方法及装置
CN116993620B (zh) 一种去模糊方法和电子设备
JP6247062B2 (ja) 画像管理装置及び画像管理方法及びプログラム
CN113992978A (zh) 视频防御系统的评估方法、装置、存储介质及处理器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant