CN116866503B - 一种无线4g安防网关数据高效存储方法 - Google Patents

一种无线4g安防网关数据高效存储方法 Download PDF

Info

Publication number
CN116866503B
CN116866503B CN202311126756.6A CN202311126756A CN116866503B CN 116866503 B CN116866503 B CN 116866503B CN 202311126756 A CN202311126756 A CN 202311126756A CN 116866503 B CN116866503 B CN 116866503B
Authority
CN
China
Prior art keywords
monitoring
frame
data
monitoring frame
frames
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202311126756.6A
Other languages
English (en)
Other versions
CN116866503A (zh
Inventor
何宏涛
钟有约
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dongguan Huafu Industrial Co ltd
Original Assignee
Dongguan Huafu Industrial Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dongguan Huafu Industrial Co ltd filed Critical Dongguan Huafu Industrial Co ltd
Priority to CN202311126756.6A priority Critical patent/CN116866503B/zh
Publication of CN116866503A publication Critical patent/CN116866503A/zh
Application granted granted Critical
Publication of CN116866503B publication Critical patent/CN116866503B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04Protocols for data compression, e.g. ROHC
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/16Gateway arrangements
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明涉及用于数据处理技术领域,具体涉及一种无线4G安防网关数据高效存储方法,包括:根据监控帧的加权信息差异量和监控帧内每个像素点的增量的信息熵,确定监控帧的骤变程度,由此将待存储的监控数据划分为若干个监控数据段,根据监控数据段内每个坐标值对应的像素点的修正后的灰度均值,结合监控帧内每个像素点的灰度值,确定监控帧的整体特征,进而区分强特征数据的监控帧和强异常数据的监控帧,将强特征数据的监控帧存入归档数据库,将强异常数据的监控帧存入容灾数据库和归档数据库。本发明将每个监控帧作为存储单元,通过构建归档策略,将每个监控帧作为存储单元,以达到降低存储冗余、优化存储空间的目的。

Description

一种无线4G安防网关数据高效存储方法
技术领域
本发明涉及数据处理技术领域,具体涉及一种无线4G安防网关数据高效存储方法。
背景技术
无线4G安防网关是一种通过无线4G连接到互联网的安防设备,实现远程监控和控制功能,通过互联网传输和接受物联网设备采集的监控数据,实现对安防的监控。监控数据包括视频监控、图像监控、传感器数据等,以200万像素、H.265+编码的视频监控数据为例,计算可得录像一天所需的存储空间为10G左右,而安防系统通常存在多个摄像头,长时间的视频监控对安防系统的存储带来巨大压力,因此需要对监控数据进行归档、备份和删除,实现合规性、效率和隐私的保护。
现有的问题:监控数据往往是庞大且持续生成的,受限于存储空间大小,需要进行定期的数据归档和清理以保持系统的性能和存储空间,而现有归档和清除数据通常是设置一个数据的保留周期,或以地点、设备等对数据分类、层次化管理决定归档或删除,并不考虑数据本身的重要性,使得在对隐私数据备份和容灾保存时,造成重要数据的丢失或备份了冗余的数据。
发明内容
本发明提供一种无线4G安防网关数据高效存储方法,以解决现有的问题。
本发明的一种无线4G安防网关数据高效存储方法采用如下技术方案:
本发明一个实施例提供了一种无线4G安防网关数据高效存储方法,该方法包括以下步骤:
获取待存储的监控数据中的每个监控帧,根据监控帧与其它监控帧之间的差异,确定监控帧内每个像素点的增量;根据监控帧内每个像素点的增量和监控帧内所有像素点的增量均值,确定监控帧的信息差异量;
根据监控帧的信息差异量和监控帧之间的帧数差值,确定监控帧的加权信息差异量;根据监控帧的加权信息差异量和监控帧内所有像素点的增量,确定监控帧的骤变程度;
根据每个监控帧的骤变程度和监控帧之间的帧数差值,将待存储的监控数据划分为若干个监控数据段;
根据监控数据段内监控帧之间的差异,确定监控数据段内每个坐标值对应的像素点的修正后的灰度均值;
根据监控帧内每个像素点的修正后的灰度均值和监控帧内每个像素点的灰度值,确定监控帧的整体特征;根据监控帧的整体特征,区分强特征数据的监控帧和强异常数据的监控帧以及无效监控帧;
根据强特征数据的监控帧和强异常数据的监控帧以及无效监控帧,对待存储的监控数据进行高效存储。
进一步地,所述确定监控帧内每个像素点的增量,包括的具体步骤如下:
根据所述监控帧内每个像素点灰度值减去与其它监控帧内相同坐标值上的像素点灰度值的差值,记为监控帧内每个像素点的增量。
进一步地,所述确定监控帧的信息差异量,包括的具体步骤如下:
将所述其它监控帧内每个像素点灰度值与监控帧内所有像素点的增量均值之和,记为所述监控帧内每个像素点对应的消除光照影响后的增量;
将所述监控帧内每个像素点灰度值减去所述监控帧内每个像素点对应的消除光照影响后的增量的差值,记为监控帧内每个像素点的信息差异量;将监控帧内每个像素点的信息差异量的和,记为所述监控帧的信息差异量。
进一步地,所述确定监控帧的骤变程度对应的具体计算公式为:
其中为第i个监控帧的骤变程度,H为预设的时间范围大小,q的取值范围为[-H,H],且/>0,/>为第i个监控帧到第/>个监控帧中所有坐标值对应像素点的增量的信息熵,/>为第i个监控帧到第/>个监控帧的信息差异量,/>为第i个监控帧到第/>个监控帧之间的帧数差值,/>为绝对值函数,/>为线性归一化函数。
进一步地,所述根据每个监控帧的骤变程度和监控帧之间的帧数差值,将待存储的监控数据划分为若干个监控数据段,包括的具体步骤如下:
记待存储的监控数据中第一个监控帧为起始监控帧,按照时间顺序逐个监控帧遍历,获得第一个骤变程度大于预设的骤变阈值,且与起始监控帧之间的帧数差值大于预设的帧数差值阈值的监控帧,记为分段监控帧;
令所述分段监控帧为新的起始监控帧,按照时间顺序逐个监控帧遍历,获得第一个骤变程度大于预设的骤变阈值,且与新的起始监控帧之间的帧数差值大于预设的帧数差值阈值的监控帧,记为分段监控帧,依次类推,获取待存储的监控数据内所有的分段监控帧;
根据待存储的监控数据内所有的分段监控帧,将待存储的监控数据划分为若干个监控数据段。
进一步地,所述根据监控数据段内监控帧之间的差异,确定监控数据段内每个坐标值对应的像素点的修正后的灰度均值,包括的具体步骤如下:
根据所述监控数据段内每个监控帧中相同坐标值上像素点灰度值的均值和标准差,确定所述监控数据段内每个监控帧中相同坐标值上像素点对应的标准灰度值的取值范围;
将所述监控数据段内每个监控帧中相同坐标值上像素点灰度值属于对应的标准灰度值的取值范围内的像素点灰度值记为标准灰度值,将所述监控数据段内每个监控帧中相同坐标值上像素点灰度值中标准灰度值的均值,记为监控数据段内每个坐标值对应的像素点的修正后的灰度均值。
进一步地,所述确定监控帧的整体特征对应的具体计算公式为:
其中为第j个监控数据段中第z个监控帧的整体特征,X和Y分别表示监控帧的横向长度和纵向长度,/>为绝对值函数,/>为第j个监控数据段中第z个监控帧中坐标为/>的像素点灰度值,/>为第j个监控数据段内坐标为/>的像素点的修正后的灰度均值,/>为以自然常数为底的指数函数。
进一步地,所述根据强特征数据的监控帧和强异常数据的监控帧以及无效监控帧,对待存储的监控数据进行高效存储,包括的具体步骤如下:
获得预设的容灾数据库和归档数据库,在待存储的监控数据中,将强特征数据的监控帧存入归档数据库,将强异常数据的监控帧存入容灾数据库和归档数据库,将无效监控帧删除。
本发明的技术方案的有益效果是:
本发明实施例中,先计算监控帧内每个像素点的增量,考虑到光照的影响,结合监控帧的增量均值,确定监控帧的信息差异量;根据监控帧的信息差异量和监控帧之间的帧数差值,确定监控帧的加权信息差异量;根据监控帧的加权信息差异量和监控帧内每个像素点的增量的信息熵,确定监控帧的骤变程度;根据每个监控帧的骤变程度和监控帧之间的帧数差值,将待存储的监控数据划分为若干个监控数据段;根据监控数据段内监控帧之间的差异,考虑到监控帧中可能存在极端像素点,选取标准灰度值,获得监控数据段内每个坐标值对应的像素点的修正后的灰度均值;根据监控帧内每个像素点的修正后的灰度均值和监控帧内每个像素点的灰度值,确定监控帧的整体特征;根据监控帧的整体特征,区分强特征数据的监控帧和强异常数据的监控帧以及无效监控帧;将强特征数据的监控帧存入归档数据库,将强异常数据的监控帧存入容灾数据库和归档数据库,通过冗余存储达到保存重要数据的目的,将无效监控帧删除,以达到优化存储空间的目的,有利于无线4G安防网关数据的存储管理。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一种无线4G安防网关数据高效存储方法的步骤流程图。
具体实施方式
为了更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的一种无线4G安防网关数据高效存储方法,其具体实施方式、结构、特征及其功效,详细说明如下。在下述说明中,不同的“一个实施例”或“另一个实施例”指的不一定是同一实施例。此外,一或多个实施例中的特定特征、结构或特点可由任何合适形式组合。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。
下面结合附图具体的说明本发明所提供的一种无线4G安防网关数据高效存储方法的具体方案。
请参阅图1,其示出了本发明一个实施例提供的一种无线4G安防网关数据高效存储方法的步骤流程图,该方法包括以下步骤:
步骤S001:获取待存储的监控数据中的每个监控帧,根据监控帧与其它监控帧之间的差异,确定监控帧内每个像素点的增量;根据监控帧内每个像素点的增量和监控帧内所有像素点的增量均值,确定监控帧的信息差异量。
无线4G安防系统的数据存储过程中,需要先采集待存储的监控数据,本实施例以安防系统中的监控数据为例,通过物联网摄像头采集监控数据,获得待存储的监控数据A,其中监控数据A中数据的采集频次为每秒24个监控帧。
由于监控摄像头所监测位置不变时所采集获得的监控数据信息仅会受到光照影响,在监控摄像头所监测位置发生改变时,相较于前一个不变位置,在切换过程中存在监控数据信息骤变现象,因此本实施例通过摄像头监控过程中监控帧的信息差异量,获得每个监控帧的骤变程度,对待存储的监控数据进行分段处理。
取待存储的监控数据A中第i个监控帧为例,由于监控摄像头在不改变监控目标的时候,正常监测获得的数据在监控帧之间差异较小,而当监测目标改变时,监测的数据在监控帧之间差异较大;监测目标的转换使得监控数据从稳态经过骤变后达到另一个稳态,因此可根据监控数据的信息随时间的变化,将待存储的监控数据划分为若干个监控数据段,每个监控数据段内监控数据稳定。
再取待存储的监控数据A中第i个监控帧中坐标为(x,y)的像素点为例,在正常监测过程中该像素点灰度值不会存在较大改变,仅受到光照影响,而光照对于监控帧的影响是整体变化且均匀的。
0024设定的时间范围为[-H,H],本实施例设定H的取值为720,其它实施方式中可设置为其它值,本实施例不进行限定。取第i个监控帧到第个监控帧为例,其中q的取值在[-H,H]范围内,且/>0。则第i个监控帧到第/>个监控帧中坐标为(x,y)的像素点的增量的计算公式为:
其中为第i个监控帧到第/>个监控帧中坐标为(x,y)的像素点的增量,/>和/>分别表示第i个监控帧和第/>个监控帧中坐标为(x,y)的像素点的灰度值。
按照上述方式,获取第i个监控帧到第个监控帧中所有坐标值对应像素点的增量,计算这些增量的信息熵为/>。再按照上述方式,获取第i个监控帧到其设定的时间范围内其它监控帧中所有坐标值对应像素点的增量的信息熵。
0026为了消除光照变化对监控数据信息的影响,计算第i个监控帧到第个监控帧中所有坐标值对应像素点的增量均值,计算公式如下:
其中为第i个监控帧到第/>个监控帧中所有坐标值对应像素点的增量均值,/>为第i个监控帧到第/>个监控帧中坐标为(x,y)的像素点的增量,X和Y分别表示监控帧的横向长度和纵向长度,增量均值表示第i个监控帧到第/>个监控帧的光照影响变化,光照强度影响越大,增量均值越大,则可通过增量均值消除整体光照变化的影响。
则第i个监控帧到第个监控帧的信息差异量的计算公式为:
其中为第i个监控帧到第/>个监控帧的信息差异量,/>和/>分别表示第i个监控帧和第/>个监控帧中坐标为(x,y)的像素点的灰度值,/>为第i个监控帧到第/>个监控帧中所有坐标值对应像素点的增量均值,X和Y分别表示监控帧的横向长度和纵向长度。
所需说明的是:如果监控目标在第i个监控帧到第个监控帧中的差异仅存在于光照变化,而实际监控目标并未移动,则可以通过增量均值/>消除光照影响后,即表示第i个监控帧和第/>个监控帧中坐标为(x,y)的像素点对应的消除光照影响后的增量,取其均值表示第i个监控帧到第/>个监控帧的信息差异量,其不受光照影响。故当存在监控目标移动、场景变化时,信息差异量/>越大。
按照上述方式,获取第i个监控帧到其设定的时间范围内其它监控帧的信息差异量。
步骤S002:根据监控帧的信息差异量和监控帧之间的帧数差值,确定监控帧的加权信息差异量;根据监控帧的加权信息差异量和监控帧内所有像素点的增量,确定监控帧的骤变程度。
待存储的监控数据A中第i个监控帧的骤变程度的计算公式为:
其中为第i个监控帧的骤变程度,H为设定的时间范围大小,q的取值范围为[-H,H],且/>0,/>为第i个监控帧到第/>个监控帧中所有坐标值对应像素点的增量的信息熵,/>为第i个监控帧到第/>个监控帧的信息差异量,/>为第i个监控帧到第/>个监控帧之间的帧数差值,/>为绝对值函数,/>为线性归一化函数,将数据值归一化至[0,1]区间内。
所需说明的是:当第i个监控帧相较于第个监控帧中各像素点的差异越紊乱时,说明是目标信息的改变而非受到光照影响,此时增量的信息熵/>越大,则越可能是骤变监控帧。/>为消除光照影响的信息差异量,其值越大,表明第i个监控帧与第/>个监控帧内包含的信息越不相同。/>为信息差异量的权重,由于现实目标变化的过程相较于每秒采集24个监控帧的摄像头变化过于庞大,因此使用监控帧之间的帧数差值为权重,对信息差异量加权,避免当第/>个监控帧到第/>个监控帧之间的帧数差值较小,导致监控帧之间数据变化过小,从而影响骤变程度的求取。由此获取加权信息差异量/>,则/>与/>的乘积表示第i个监控帧到第/>个监控帧的骤变程度,对其进行加和归一化,获取第i个监控帧的骤变程度。
按照上述方式,获得待存储的监控数据A中每个监控帧的骤变程度。
步骤S003:根据每个监控帧的骤变程度和监控帧之间的帧数差值,将待存储的监控数据划分为若干个监控数据段。
已知骤变程度越大则越可能为分段监控帧,本实施例设定骤变阈值T和帧数差值阈值,其中T的的取值为/>,/>的取值为1440,其它实施方式中可设置为其它值,本实施例不进行限定。
记待存储的监控数据A中第一个监控帧为起始监控帧,按照时间顺序逐个监控帧遍历,获得第一个骤变程度大于设定的骤变阈值,且与起始监控帧之间的帧数差值大于设定的帧数差值阈值/>的监控帧,记为分段监控帧,令该分段监控帧为新的起始监控帧,按照时间顺序逐个监控帧遍历,获得第一个骤变程度大于设定的骤变阈值/>,且与新的起始监控帧之间的帧数差值大于设定的帧数差值阈值/>的监控帧,记为分段监控帧,依次类推,获取待存储的监控数据A内所有的分段监控帧,根据待存储的监控数据A内所有的分段监控帧,将待存储的监控数据划分为若干个监控数据段。
步骤S004:根据监控数据段内监控帧之间的差异,确定监控数据段内每个坐标值对应的像素点的修正后的灰度均值。
0038已知每个监控数据段内各监控帧之间的数据近似,即监测目标相同。当监控内信息发生改变时,会造成某一监控帧相较于监控数据段内其它正常的监控帧数据存在较大差异,即为强异常数据的监控帧,当到达保留期限需要将数据归档存储时强异常数据的监控帧应归档存储用来保留重要信息;为了与强异常数据的监控帧形成归档后的对比,还需要能代表监控数据段内主要特征的监控帧作为强特征数据的监控帧,其与监控数据段内大部分监控帧的数据近似。
取第j个监控数据段为例,分析该监控数据段内监控帧中各像素点的整体趋势,通常以像素点灰度均值作为整体趋势值,但均值会受到灰度值突变较大的像素点的干扰,造成均值向极端点偏移,因此需要选取像素点的修正后的灰度均值,作为计算标准。具体为,计算第个监控数据段内坐标为/>的像素点灰度值均值/>和标准差/>,根据正态分布理论,本实施例设定坐标为/>的像素点的标准灰度值的取值范围为,将属于该范围内的像素点灰度值记为标准灰度值。由此可知第j个监控数据段内坐标为/>的像素点的修正后的灰度均值的计算公式为:
其中为第j个监控数据段内坐标为/>的像素点的修正后的灰度均值,为第j个监控数据段内坐标为/>的像素点中第k个标准灰度值,/>为第j个监控数据段内坐标为/>的像素点中标准灰度值的数量。
按照上述方式,获取第j个监控数据段内每个坐标值对应的像素点的修正后的灰度均值。
步骤S005:根据监控帧内每个像素点的修正后的灰度均值和监控帧内每个像素点的灰度值,确定监控帧的整体特征;根据监控帧的整体特征,区分强特征数据的监控帧和强异常数据的监控帧以及无效监控帧。
取第j个监控数据段中第z个监控帧为例,根据第j个监控数据段内每个坐标值对应的像素点的修正后的灰度均值,可知第j个监控数据段中第z个监控帧的整体特征的计算公式为:
其中为第j个监控数据段中第z个监控帧的整体特征,X和Y分别表示监控帧的横向长度和纵向长度,/>为绝对值函数,/>为第j个监控数据段中第z个监控帧中坐标为/>的像素点灰度值,/>为第j个监控数据段内坐标为/>的像素点的修正后的灰度均值,/>为以自然常数为底的指数函数。
所需说明的是:通过监控帧中各像素点的灰度值与对应的修正后的灰度均值的差异,即,取其和值的归一化反比表示该监控帧在其所处监控数据段内的整体特征,即整体特征越大,表示第j个监控数据段中第z个监控帧在第j个监控数据段内整体趋势差异越小,说明第j个监控数据段中第z个监控帧能表明第j个监控数据段内的主要特征,即越可能为强特征数据的监控帧。当整体特征越小,表示第j个监控数据段中第z个监控帧在第j个监控数据段内整体趋势差异越大,即越可能为强异常数据的监控帧。
按照上述方式,获取第j个监控数据段内每个监控帧的整体特征。
0045根据整体特征设定强特征数据阈值和强异常数据阈值/>,本实施例设定/>的取值为/>,/>的取值为/>,其它实施方式中可设置为其它值,本实施例不进行限定。在第j个监控数据段内,将整体特征大于等于强特征数据阈值/>的监控帧划分为强特征数据的监控帧,将整体特征小于等于强异常数据阈值/>的监控帧划分为强异常数据的监控帧,将整体特征大于强异常数据阈值/>,且小于强特征数据阈值/>的监控帧划分为无效监控帧。
按照上述方式,将待存储的监控数据A中每个监控帧划分为强特征数据的监控帧和强异常数据的监控帧以及无效监控帧。
步骤S006:根据强特征数据的监控帧和强异常数据的监控帧以及无效监控帧,对待存储的监控数据进行高效存储。
现有的将待存储的监控数据存储到时间数据库中,需要设置保留期限,保留期限与存储硬盘的容量与监控编码格式有关,通常为取硬盘存储量达到90%所需的时间作为保留期限,当数据达到保留期限时,将数据根据数据种类制定归档策略。
本实施例根据监控帧的整体特征设置归档策略,设置容灾数据库和归档数据库,在待存储的监控数据A中,当监控帧为强特征数据的监控帧时,将该监控帧存入归档数据库,监控帧为强异常数据的监控帧时,将该监控帧存入容灾数据库和归档数据库,通过冗余存储达到保存重要数据的目的。当监控帧为无效监控帧时,将该监控帧删除以达到优化存储空间的目的。由此根据归档策略对待存储的监控数据A进行高效存储,得到容灾数据库和归档数据库。
至此,本发明完成。
综上所述,在本发明实施例中,根据监控帧的加权信息差异量和监控帧内每个像素点的增量的信息熵,确定监控帧的骤变程度;根据每个监控帧的骤变程度和监控帧之间的帧数差值,将待存储的监控数据划分为若干个监控数据段;根据监控数据段内监控帧之间的差异,确定监控数据段内每个坐标值对应的像素点的修正后的灰度均值;根据监控帧内每个像素点的修正后的灰度均值和监控帧内每个像素点的灰度值,确定监控帧的整体特征;根据监控帧的整体特征,区分强特征数据的监控帧和强异常数据的监控帧;将强特征数据的监控帧存入归档数据库,将强异常数据的监控帧存入容灾数据库和归档数据库,通过冗余存储达到保存重要数据的目的,将其它监控帧删除,以达到优化存储空间的目的,有利于无线4G安防网关数据的存储管理。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (6)

1.一种无线4G安防网关数据高效存储方法,其特征在于,该方法包括以下步骤:
获取待存储的监控数据中的每个监控帧,根据监控帧与其它监控帧之间的差异,确定监控帧内每个像素点的增量;根据监控帧内每个像素点的增量和监控帧内所有像素点的增量均值,确定监控帧的信息差异量;
根据监控帧的信息差异量和监控帧之间的帧数差值,确定监控帧的加权信息差异量;根据监控帧的加权信息差异量和监控帧内所有像素点的增量,确定监控帧的骤变程度;
根据每个监控帧的骤变程度和监控帧之间的帧数差值,将待存储的监控数据划分为若干个监控数据段;
根据监控数据段内监控帧之间的差异,确定监控数据段内每个坐标值对应的像素点的修正后的灰度均值;
根据监控帧内每个像素点的修正后的灰度均值和监控帧内每个像素点的灰度值,确定监控帧的整体特征;根据监控帧的整体特征,区分强特征数据的监控帧和强异常数据的监控帧以及无效监控帧;
根据强特征数据的监控帧和强异常数据的监控帧以及无效监控帧,对待存储的监控数据进行高效存储;
所述确定监控帧的骤变程度对应的具体计算公式为:
其中为第i个监控帧的骤变程度,H为预设的时间范围大小,q的取值范围为[-H,H],且0,/>为第i个监控帧到第/>个监控帧中所有坐标值对应像素点的增量的信息熵,为第i个监控帧到第/>个监控帧的信息差异量,/>为第i个监控帧到第/>个监控帧之间的帧数差值,/>为绝对值函数,/>为线性归一化函数;
所述根据每个监控帧的骤变程度和监控帧之间的帧数差值,将待存储的监控数据划分为若干个监控数据段,包括的具体步骤如下:
记待存储的监控数据中第一个监控帧为起始监控帧,按照时间顺序逐个监控帧遍历,获得第一个骤变程度大于预设的骤变阈值,且与起始监控帧之间的帧数差值大于预设的帧数差值阈值的监控帧,记为分段监控帧;
令所述分段监控帧为新的起始监控帧,按照时间顺序逐个监控帧遍历,获得第一个骤变程度大于预设的骤变阈值,且与新的起始监控帧之间的帧数差值大于预设的帧数差值阈值的监控帧,记为分段监控帧,依次类推,获取待存储的监控数据内所有的分段监控帧;
根据待存储的监控数据内所有的分段监控帧,将待存储的监控数据划分为若干个监控数据段;
区分强特征数据的监控帧和强异常数据的监控帧以及无效监控帧的方法,包括:
设定强特征数据阈值和强异常数据阈值,将整体特征大于等于强特征数据阈值的监控帧划分为强特征数据的监控帧,将整体特征小于等于强异常数据阈值的监控帧划分为强异常数据的监控帧,将整体特征大于强异常数据阈值,且小于强特征数据阈值的监控帧划分为无效监控帧。
2.根据权利要求1所述一种无线4G安防网关数据高效存储方法,其特征在于,所述确定监控帧内每个像素点的增量,包括的具体步骤如下:
根据所述监控帧内每个像素点灰度值减去与其它监控帧内相同坐标值上的像素点灰度值的差值,记为监控帧内每个像素点的增量。
3.根据权利要求1所述一种无线4G安防网关数据高效存储方法,其特征在于,所述确定监控帧的信息差异量,包括的具体步骤如下:
将所述其它监控帧内每个像素点灰度值与监控帧内所有像素点的增量均值之和,记为所述监控帧内每个像素点对应的消除光照影响后的增量;
将所述监控帧内每个像素点灰度值减去所述监控帧内每个像素点对应的消除光照影响后的增量的差值,记为监控帧内每个像素点的信息差异量;将监控帧内每个像素点的信息差异量的和,记为所述监控帧的信息差异量。
4.根据权利要求1所述一种无线4G安防网关数据高效存储方法,其特征在于,所述根据监控数据段内监控帧之间的差异,确定监控数据段内每个坐标值对应的像素点的修正后的灰度均值,包括的具体步骤如下:
根据所述监控数据段内每个监控帧中相同坐标值上像素点灰度值的均值和标准差,确定所述监控数据段内每个监控帧中相同坐标值上像素点对应的标准灰度值的取值范围;
将所述监控数据段内每个监控帧中相同坐标值上像素点灰度值属于对应的标准灰度值的取值范围内的像素点灰度值记为标准灰度值,将所述监控数据段内每个监控帧中相同坐标值上像素点灰度值中标准灰度值的均值,记为监控数据段内每个坐标值对应的像素点的修正后的灰度均值。
5.根据权利要求1所述一种无线4G安防网关数据高效存储方法,其特征在于,所述确定监控帧的整体特征对应的具体计算公式为:
其中为第j个监控数据段中第z个监控帧的整体特征,X和Y分别表示监控帧的横向长度和纵向长度,/>为绝对值函数,/>为第j个监控数据段中第z个监控帧中坐标为的像素点灰度值,/>为第j个监控数据段内坐标为/>的像素点的修正后的灰度均值,/>为以自然常数为底的指数函数。
6.根据权利要求1所述一种无线4G安防网关数据高效存储方法,其特征在于,所述根据强特征数据的监控帧和强异常数据的监控帧以及无效监控帧,对待存储的监控数据进行高效存储,包括的具体步骤如下:
获得预设的容灾数据库和归档数据库,在待存储的监控数据中,将强特征数据的监控帧存入归档数据库,将强异常数据的监控帧存入容灾数据库和归档数据库,将无效监控帧删除。
CN202311126756.6A 2023-09-04 2023-09-04 一种无线4g安防网关数据高效存储方法 Active CN116866503B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311126756.6A CN116866503B (zh) 2023-09-04 2023-09-04 一种无线4g安防网关数据高效存储方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311126756.6A CN116866503B (zh) 2023-09-04 2023-09-04 一种无线4g安防网关数据高效存储方法

Publications (2)

Publication Number Publication Date
CN116866503A CN116866503A (zh) 2023-10-10
CN116866503B true CN116866503B (zh) 2023-11-14

Family

ID=88234518

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311126756.6A Active CN116866503B (zh) 2023-09-04 2023-09-04 一种无线4g安防网关数据高效存储方法

Country Status (1)

Country Link
CN (1) CN116866503B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110021133A (zh) * 2019-05-17 2019-07-16 重庆消防安全技术研究服务有限责任公司 全天候消防火灾巡逻预警监控系统及火灾图像检测方法
CN115190311A (zh) * 2022-09-08 2022-10-14 湖北工业大学 一种安防监控视频压缩存储方法
CN115297289A (zh) * 2022-10-08 2022-11-04 南通第二世界网络科技有限公司 一种监控视频高效存储方法
CN116437099A (zh) * 2023-04-28 2023-07-14 深圳星火半导体科技有限公司 基于数据属性的压缩存储系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10412420B2 (en) * 2014-03-07 2019-09-10 Eagle Eye Networks, Inc. Content-driven surveillance image storage optimization apparatus and method of operation

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110021133A (zh) * 2019-05-17 2019-07-16 重庆消防安全技术研究服务有限责任公司 全天候消防火灾巡逻预警监控系统及火灾图像检测方法
CN115190311A (zh) * 2022-09-08 2022-10-14 湖北工业大学 一种安防监控视频压缩存储方法
CN115297289A (zh) * 2022-10-08 2022-11-04 南通第二世界网络科技有限公司 一种监控视频高效存储方法
CN116437099A (zh) * 2023-04-28 2023-07-14 深圳星火半导体科技有限公司 基于数据属性的压缩存储系统

Also Published As

Publication number Publication date
CN116866503A (zh) 2023-10-10

Similar Documents

Publication Publication Date Title
US8817094B1 (en) Video storage optimization
WO2019127136A1 (zh) 码率控制的方法与编码装置
CN110198444B (zh) 视频帧编码方法、视频帧编码设备及具有存储功能的装置
CN116600132B (zh) 一种煤矿视频数据自适应压缩方法
CN116155298B (zh) 一种基于互联网数据的船闸远程管理系统
CN116455941B (zh) 基于物联网的室内环境多源数据传输方法及系统
CN110662044A (zh) 一种视频编码方法、视频编码装置及计算机存储介质
CN102437856A (zh) 基于特征点提取的地铁综合监控系统三级数据压缩方法
JP2012239085A (ja) 画像処理装置、画像処理方法
CN117375630B (zh) 一种针对带电作业预警系统的监控数据压缩方法
CN101842811B (zh) 用于预测经过通过缩放以及质量控制参数的改变而转换的图像的文件大小的系统和方法
CN116700630B (zh) 基于物联网的有机无机复混肥料生产数据优化存储方法
CN108737827A (zh) 用于控制视频编码器的输出比特率的方法和比特率控制器
CN116866503B (zh) 一种无线4g安防网关数据高效存储方法
CN117540238A (zh) 一种工业数字化信息采集装置用数据安全管理方法
CN116975503B (zh) 一种土壤侵蚀信息管理方法及系统
CN115964347B (zh) 一种市场监管监测中心数据的智能存储方法
KR20000028450A (ko) 감시 영상 생성 시스템 및 그 생성 방법
CN114710674B (zh) 一种建筑施工监控数据存储方法
US20040096198A1 (en) Adaptive digital video recorder and method of controlling the same
US11256422B2 (en) Storage system and compressed sensor data recording method for sensors grouped based on parameters
CN1367613A (zh) 图像压缩装置和方法
EP3672231B1 (en) Adaptive storage between multiple cameras in a video recording system
CN117896482B (zh) 一种车辆行车记录仪的数据智能存储方法
CN111263163A (zh) 一种基于手机平台的深度视频压缩框架的实现方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant