CN115118984A - 一种用于安防监控领域的视频分析处理中间件管理平台 - Google Patents

Abstract

本发明公开了一种用于安防监控领域的视频分析处理中间件管理平台，属于安防监控领域，解决了监控视频数据源不能统一管理、分配以及处理，待分析处理的视频数据不能合理向算法厂家进行分发处理的的技术问题；视频流采集模块从前端视频设备和监控存储设备获取待解码视频流，视频解码模块对待解码视频流解码后生成源视频数据，视频分发器将源视频数据分发至视频编码器；视频编码模块对源视频数据根据业务的使用需求编码后输出至业务场景；视频分析策略配置模块获取数据源管理模块设备信息，配置合理的视频分析策略；视频质量分析模块根据视频分析策略对视频数据进行质量分析；视频结构化解析模块根据视频分析策略对视频数据进行目标结构化处理。

Description

一种用于安防监控领域的视频分析处理中间件管理平台

技术领域

本发明属于安防监控领域，涉及视频处理技术，具体是一种用于安防监控领域的视频分析处理中间件管理平台。

背景技术

随着城市化进程的推进和处理突发性事件的需要，视频监控技术得到了快速地发展，并广泛应用于安防领域。随着人工智能技术全面爆发、生物特征识别技术广泛应用、深度学习算法增强，视频监控领域也逐步开始智能化迭代。

然而，在安防视频智能化建设中，监控视频数据源不能统一管理、分配、处理，待分析处理的视频信息也不能合理的向算法厂家进行分发处理。给用户的网络、存储、计算资源、应用环境造成了极大的资源浪费。主要体现在：1、当下各视频监控设备硬件厂家提供的视频流协议及视频存储格式不尽相同，常见环境下用户大多采用多套安防监控方案进行组合，监控数据采集层提供的是异源异构数据环境，用户无法直接使用；2、视频算法层对采集来的监控数据也有更高的要求：首先是格式要求，算法厂家的解析要求不同，无法解析异源异构的数据；其次是是质量要求，若画面存在干扰、模糊等问题则无法正常分析处理；最后是内容要求，无内容的视频流处理给用户造成了计算资源的极大浪费；3、当下旧的监控设备仅能发挥视频监控画面信息采集的作用，若需要算法厂家对进行智慧赋能，现有方案计算资源需要实时的分析处理监控设备获取的监控画面，智慧应用的计算资源对摄像头都是一对多的绑定关系，监控视频的调用分析逻辑不灵活。

为此，本发明提出了一种用于安防监控领域的视频分析处理中间件管理平台，能够很好的解决上述问题。

发明内容

本发明旨在至少解决现有技术中存在的技术问题之一。为此，本发明提出一种用于安防监控领域的视频分析处理中间件管理平台，该种用于安防监控领域的视频分析处理中间件管理平台解决了监控视频数据源不能统一管理、分配以及处理，待分析处理的视频数据不能合理向算法厂家进行分发处理的的技术问题。

为实现上述目的，根据本发明的第一方面的实施例提出一种用于安防监控领域的视频分析处理中间件管理平台，包括：数据源管理模块、视频流采集模块、视频解码模块、视频分发器、视频编码模块、视频分析策略配置模块、视频质量分析模块以及视频结构化解析模块；

所述数据源管理模块用于获取特定区域内所有前端视频监控设备和监控存储设备的设备信息，并对设备信息进行存储；

所述视频流采集模块用于从前端视频设备和监控存储设备获取待解码视频流，并发送至所述视频解码模块；

所述视频解码模块用于对接收到的待解码视频流进行解码，生成源视频数据，并发送至视频分发器；

所述视频分发器用于将获取的源视频数据分发至视频编码模块中已创建成功的视频编码器；

所述视频编码模块包括若干个视频编码器，所述视频编码器用于对接收到的源视频数据根据业务的实际使用需求进行编码，并输出至业务场景；

所述视频分析策略配置模块获取数据源管理模块设备信息，并根据设备信息配置合理的视频分析策略；

所述视频质量分析模块包括若干个视频质量分析组件，所述视频质量分析组件用于根据视频分析策略对视频数据进行质量分析，根据视频数据的质量正常与否，对视频数据进行派发或告警；

所述视频结构化解析模块包括若干个结构化目标组件以及目标视频结构化存储单元，所述结构化目标组件用于根据视频分析策略对接收到的视频数据进行目标结构化处理，所述目标视频结构化存储单元用于对目标结构化处理结果进行存储。

进一步地，业务场景包括移动端视频播放、大屏端视频播放、视频质量分析以及视频结构化解析。

进一步地，所述视频编码器的处理过程如下：

步骤S01：从视频分发器获取已解码的源视频数据；

步骤S02：采用视频压缩编码标准对源视频数据中的图像RGB进行压缩，其中视频压缩编码标准包括h.264、h.265、vp8、vp9、av1、svac等；将源视频数据中的原始音频数据PCM压缩为音频数据AAC；

步骤S03：对压缩后的图像数据和压缩后的音频数据进行封装，生成视频数据，通过流媒体协议传输至业务场景。

进一步地，视频压缩编码标准包括h.264、h.265、vp8、vp9、av1以及svac。

进一步地，质量故障包括亮度过亮、亮度过暗、对比度异常、偏色异常、清晰度异常、噪声异常、条纹异常、冻结异常、信号丢失异常、抖动异常、遮挡物异常、黑白图像异常以及场景变更异常。

进一步地，若视频数据存在质量异常，则视频数据不满足视频结构化处理需求，所述视频质量分析模块发送视频数据质量异常的提示信息至所述告警模块；若视频数据质量正常，则视频质量分析模块将经过质量分析后的视频数据发送至视频结构化解析模块。

进一步地，若视频数据无识别目标，则结构化目标组件将视频数据进行释放；若视频数据存在识别目标，则目标视频结构化存储单元对目标结构化解析结果进行存储，供智慧应用对经过目标结构化解析后的视频数据进行二次结构化解析。

进一步地，智慧应用为不同算法厂家对视频数据进行智慧赋能的应用程序。

进一步地，所述告警模块用于对视频质量分析模块发送的视频数据质量异常信息进行视频运维告警，对智慧应用发送的二次结构化解析异常信息进行视频分析告警，以及将告警信息同步至视频播放终端。

与现有技术相比，本发明的有益效果是：

1、本发明通过在前端视频设备和监控存储设备与智慧应用的视频算法厂家之间提供一种用于安防监控领域的视频分析处理中间件管理平台，即视频转码设备和视频分析设备，解决了因监控数据采集层提供的是异源异构数据环境，用户无法直接使用的问题，使用中间件能够大幅度降低用户使用成本，提升智慧应用业务可用性，扩大对监控视频智慧赋能的覆盖范围。

2、本发明中视频分析策略配置模块对视频质量分析模块以及对视频结构化解析模块进行管理，根据视频所在的实际场景，进行视频分析算法调用策略的配置；视频质量分析模块根据视频分析策略对视频数据进行质量分析，根据视频数据的质量正常与否，对视频数据进行派发或告警，确保了发往智慧应用的视频质量的正常和数据的稳定可用；视频结构化解析模块根据视频分析策略对接收到的视频数据进行目标结构化处理，根据目标结构化的解析结果对视频数据是否存在可识别目标进行判断能否发送智慧应用进行二次目标结构化解析，高效挖掘异源异构数据的价值，从而避免了给用户的网络、存储、计算资源以及应用环境造成了极大的资源浪费。

附图说明

图1为本发明的一种用于安防监控领域的视频分析处理中间件管理平台模块结构示意图；

图2为本发明的一种用于安防监控领域的视频分析处理中间件管理平台的视频处理方法步骤示意图。

具体实施方式

下面将结合实施例对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

如图1所示，一种用于安防监控领域的视频分析处理中间件管理平台，包括：数据源管理模块、视频流采集模块、视频解码模块、视频分发器、视频编码模块、视频分析策略配置模块、视频质量分析模块以及视频结构化解析模块；

在本申请中，所述数据源管理模块用于获取特定区域内所有前端视频监控设备和监控存储设备的设备信息，并对设备信息进行存储；

在本申请中，所述视频流采集模块用于从前端视频设备和监控存储设备获取待解码视频流，并发送至所述视频解码模块；

在本申请中，所述视频解码模块用于对接收到的待解码视频流进行解码，生成源视频数据，并发送至视频分发器；

在本申请中，所述视频分发器用于将获取的源视频数据分发至视频编码模块中已创建成功的视频编码器；

在本申请中，所述视频编码模块包括若干个视频编码器，其中，视频编码器创建的数量根据用户的在线视频播放需求、视频质量分析需求以及视频内容分析需求来决定；所述视频编码器用于对接收到的源视频数据根据业务的实际使用需求进行编码，并输出至业务场景；需要说明的是，业务场景包括移动端视频播放、大屏端视频播放、视频质量分析以及视频结构化解析；所述视频编码模块包括若干个视频编码器；

所述视频编码器的处理过程如下：

步骤S01：从视频分发器获取已解码的源视频数据；

步骤S02：采用视频压缩编码标准对源视频数据中的图像RGB进行压缩，其中视频压缩编码标准包括h.264、h.265、vp8、vp9、av1、svac等；将源视频数据中的原始音频数据PCM压缩为音频数据AAC；

步骤S03：对压缩后的图像数据和压缩后的音频数据进行封装，生成视频数据，通过流媒体协议传输至业务场景；

在本申请中，所述视频分析策略配置模块获取数据源管理模块设备信息，并根据设备信息配置合理的视频分析策略；具体地，所述视频分析策略配置模块对视频质量分析模块以及对视频结构化解析模块进行管理；即根据视频所在的实际场景，进行视频分析算法调用策略的配置，如学校门口设置陌生人闯入监测、学校周界设置翻墙监测以及重点区域设置火灾监测；

在本申请中，所述视频质量分析模块包括若干个视频质量分析组件；所述视频质量分析组件用于根据视频分析策略对视频数据进行质量分析，质量故障包括亮度过亮、亮度过暗、对比度异常、偏色异常、清晰度异常、噪声异常、条纹异常、冻结异常、信号丢失异常、抖动异常、遮挡物异常、黑白图像异常以及场景变更异常；视频质量分析组件根据视频数据的质量正常与否，对视频数据进行派发或告警；若视频数据存在质量异常，则视频数据不满足视频结构化处理需求，所述视频质量分析模块发送视频数据质量异常的提示信息至所述告警模块；若视频数据质量正常，则视频质量分析模块将经过质量分析后的视频数据发送至视频结构化解析模块；

在本申请中，所述视频结构化解析模块包括若干个结构化目标组件以及目标视频结构化存储单元；所述结构化目标组件用于根据视频分析策略对接收到的视频数据进行目标结构化处理，包括人结构化、汽车结构化以及骑车结构化；所述目标视频结构化存储单元用于对目标结构化处理结果进行存储；所述结构化目标组件根据目标结构化的解析结果对视频数据是否存在可识别目标进行判断能否发送智慧应用进行二次目标结构化解析；若视频数据无可识别目标，则结构化目标组件将视频数据进行释放；若视频数据存在可识别目标，则目标视频结构化存储单元对目标结构化解析结果进行存储，供智慧应用对经过目标结构化解析后的视频数据进行二次结构化解析；从而避免了给用户的网络、存储、计算资源以及应用环境造成了极大的资源浪费；

需要说明的是，告警模块用于对视频质量分析模块发送的视频数据质量异常信息进行视频运维告警，对智慧应用发送的二次结构化解析异常信息进行视频分析告警，以及将告警信息同步至视频播放终端；从而及时发现视频处理问题，并及时从数据源管理模块存储的设备信息中找出有问题的前端视频监控设备和监控存储设备进行维护，以及判断视频解析问题是在第一次目标结构化解析中出现还是在第二次目标结构化解析中出现，为后期解决视频分析问题提供依据；

需要说明的是，视频播放终端包括智能手机应用程序客户端、浏览器等；智慧应用为不同算法厂家对视频数据进行智慧赋能的应用程序；

在实际应用时，所述数据源管理模块、视频流采集模块、视频解码模块、视频分发器以及视频编码模块可集成于视频转码设备中，所述视频分析策略配置模块、视频质量分析模块、视频结构化解析模块以及告警模块可集成于视频分析设备中。

如图2所述，在本发明的一个实施例中，所述一种用于安防监控领域的视频分析处理中间件管理平台对视频进行处理的过程如下：

步骤一：视频采集模块从前端视频设备和监控存储设备获取待解码视频流，并发送至所述视频解码模块；

步骤二：视频解码模块对接收到的待解码视频流进行解码，生成源视频数据，并发送至视频分发器；

步骤三：视频分发器将获取的源视频数据分发至已创建成功的视频编码器，视频编码器对接收到的源视频数据根据业务的实际使用需求进行编码生成视频数据，并输出至视频播放终端和视频质量分析组件；

步骤四：视频质量分析组件根据视频分析策略对视频数据进行质量分析；若视频数据存在质量异常，则视频数据不满足视频结构化处理需求，视频质量分析组件发送视频质量异常的提示信息至告警模块；若视频质量正常，则视频质量分析组件将经过质量分析后的视频数据发送至结构化目标组件；

步骤五：结构化目标组件根据视频分析策略对接收到的视频数据进行结构化处理；若视频数据无可识别目标，则结构化目标组件将视频数据进行释放；若视频数据存在可识别目标，则目标视频结构化存储单元对目标结构化解析结果进行存储。

需要说明的是，本发明可应用到安防智能化领域下的多个场景，如平安城市、智慧城市，另外也可用于有视频监控和智能分析的交通场景、数据中心场景、工业场景、制造业场景、公共事业场景和能源场景。

以上实施例仅用以说明本发明的技术方法而非限制，尽管参照较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方法进行修改或等同替换，而不脱离本发明技术方法的精神和范围。

Claims (9)

1.一种用于安防监控领域的视频分析处理中间件管理平台，其特征在于，包括：数据源管理模块、视频流采集模块、视频解码模块、视频分发器、视频编码模块、视频分析策略配置模块、视频质量分析模块以及视频结构化解析模块；

所述数据源管理模块用于获取特定区域内所有前端视频监控设备和监控存储设备的设备信息，并对设备信息进行存储；

所述视频流采集模块用于从前端视频设备和监控存储设备获取待解码视频流，并发送至所述视频解码模块；

所述视频解码模块用于对接收到的待解码视频流进行解码，生成源视频数据，并发送至视频分发器；

所述视频分发器用于将获取的源视频数据分发至视频编码模块中已创建成功的视频编码器；

所述视频编码模块包括若干个视频编码器，所述视频编码器用于对接收到的源视频数据根据业务的实际使用需求进行编码，并输出至业务场景；

所述视频分析策略配置模块获取数据源管理模块设备信息，并根据设备信息配置合理的视频分析策略；

所述视频质量分析模块包括若干个视频质量分析组件，所述视频质量分析组件用于根据视频分析策略对视频数据进行质量分析，根据视频数据的质量正常与否，对视频数据进行派发或告警；

所述视频结构化解析模块包括若干个结构化目标组件以及目标视频结构化存储单元，所述结构化目标组件用于根据视频分析策略对接收到的视频数据进行目标结构化处理，所述目标视频结构化存储单元用于对目标结构化处理结果进行存储。

2.根据权利要求1所述的一种用于安防监控领域的视频分析处理中间件管理平台，其特征在于，业务场景包括移动端视频播放、大屏端视频播放、视频质量分析以及视频结构化解析。

3.根据权利要求1所述的一种用于安防监控领域的视频分析处理中间件管理平台，其特征在于，所述视频编码器的处理过程如下：

步骤S01：从视频分发器获取已解码的源视频数据；

步骤S02：采用视频压缩编码标准对源视频数据中的图像RGB进行压缩，其中视频压缩编码标准包括h.264、h.265、vp8、vp9、av1、svac等；将源视频数据中的原始音频数据PCM压缩为音频数据AAC；

步骤S03：对压缩后的图像数据和压缩后的音频数据进行封装，生成视频数据，通过流媒体协议传输至业务场景。

4.根据权利要求3所述的一种用于安防监控领域的视频分析处理中间件管理平台，其特征在于，视频压缩编码标准包括h.264、h.265、vp8、vp9、av1以及svac。

5.根据权利要求1所述的一种用于安防监控领域的视频分析处理中间件管理平台，其特征在于，质量故障包括亮度过亮、亮度过暗、对比度异常、偏色异常、清晰度异常、噪声异常、条纹异常、冻结异常、信号丢失异常、抖动异常、遮挡物异常、黑白图像异常以及场景变更异常。

6.根据权利要求1所述的一种用于安防监控领域的视频分析处理中间件管理平台，其特征在于，若视频数据存在质量异常，则视频数据不满足视频结构化处理需求，所述视频质量分析模块发送视频数据质量异常的提示信息至所述告警模块；若视频数据质量正常，则视频质量分析模块将经过质量分析后的视频数据发送至视频结构化解析模块。

7.根据权利要求1所述的一种用于安防监控领域的视频分析处理中间件管理平台，其特征在于，若视频数据无识别目标，则结构化目标组件将视频数据进行释放；若视频数据存在识别目标，则目标视频结构化存储单元对目标结构化解析结果进行存储，供智慧应用对经过目标结构化解析后的视频数据进行二次结构化解析。

8.根据权利要求1所述的一种用于安防监控领域的视频分析处理中间件管理平台，其特征在于，智慧应用为不同算法厂家对视频数据进行智慧赋能的应用程序。

9.根据权利要求6所述的一种用于安防监控领域的视频分析处理中间件管理平台，其特征在于，所述告警模块用于对视频质量分析模块发送的视频数据质量异常信息进行视频运维告警，对智慧应用发送的二次结构化解析异常信息进行视频分析告警，以及将告警信息同步至视频播放终端。

Images