CN117950591A - 网关的存储管理方法及装置、电子设备、存储介质 - Google Patents
网关的存储管理方法及装置、电子设备、存储介质 Download PDFInfo
- Publication number
- CN117950591A CN117950591A CN202410070233.2A CN202410070233A CN117950591A CN 117950591 A CN117950591 A CN 117950591A CN 202410070233 A CN202410070233 A CN 202410070233A CN 117950591 A CN117950591 A CN 117950591A
- Authority
- CN
- China
- Prior art keywords
- data
- target database
- storage
- gateway
- equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title claims abstract description 54
- 238000013500 data storage Methods 0.000 claims abstract description 62
- 238000000034 method Methods 0.000 claims abstract description 46
- 238000012360 testing method Methods 0.000 claims abstract description 23
- 238000012423 maintenance Methods 0.000 claims abstract description 20
- 230000008859 change Effects 0.000 claims description 27
- 230000004044 response Effects 0.000 claims description 15
- 238000004891 communication Methods 0.000 claims description 13
- 230000007246 mechanism Effects 0.000 claims description 13
- 238000004458 analytical method Methods 0.000 claims description 8
- 238000004590 computer program Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 230000008569 process Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000001934 delay Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000011084 recovery Methods 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001010 compromised effect Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000004146 energy storage Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000013024 troubleshooting Methods 0.000 description 1
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本申请的实施例揭示了一种网关的存储管理方法、装置、设备及存储介质。该方法包括:在网关的维护模式下,获取所述网关中的设备对应的数据存储需求;基于所述数据存储需求确定所述设备对应的目标数据库,并对所述目标数据库进行连通性测试;若所述目标数据库处于连通状态,则获取与所述目标数据库相匹配的数据存储策略;基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置,所述数据点为所述设备中采集数据的时间节点和/或触发事件的触发节点,本申请的实施例能够实现对数据库对数据的存储的有效管理,并且保障网关中所产生的数据存储的智能性,有效对网关中的数据存储进行高效管理。
Description
技术领域
本申请涉及数据存储技术领域,具体涉及一种网关的存储管理方法及装置、电子设备、以及计算机可读存储介质。
背景技术
随着工业技术的发展,工业互联网技术的应用越来越广泛。工业互联网架构通常由工业设备、网关、边缘计算装置及云平台组成,网关用于采集工业设备的现场数据及接收边缘计算装置的反馈信息,因此会产生大量的数据,这些数据通常存储在网关的本地数据库或上传至云端,而未对网关的数据存储进行管理,由于本地数据库的存储空间较小,容易给本地数据库造成较大的存储压力,上传至云端则可能导致大量重复且无用的数据占用云端存储资源,从而影响存储效率。
发明内容
为解决上述技术问题,本申请的实施例提供了一种网关的存储管理方法及装置、电子设备、以及计算机可读存储介质。
根据本申请实施例的一个方面,提供了一种网关存储管理方法,包括:在网关的维护模式下,获取所述网关中的设备对应的数据存储需求;基于所述数据存储需求确定所述设备对应的目标数据库,并对所述目标数据库进行连通性测试;若所述目标数据库处于连通状态,则获取与所述目标数据库相匹配的数据存储策略;基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置,所述数据点为所述设备中采集数据的时间节点和/或触发事件的触发节点。
根据本申请实施例的一个方面,所述基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置,包括:解析所述数据存储策略,基于解析结果确定多个不同的数据点;选择所述多个不同数据点的存储类型以及存储机制;基于所述多个不同数据点的存储类型以及存储机制调整所述目标数据库对应的多个不同数据点的配置。
根据本申请实施例的一个方面,所述存储机制包括数据点的存储变化幅度;所述方法还包括:若检测到所述数据点上的数据变化幅度达到预设存储变化幅度,则将所述数据点上对应的数据进行更新并存储。
根据本申请实施例的一个方面,所述对所述目标数据库进行连通性测试,包括:按照预设频率向所述目标数据库发送数据请求报文数据请求报文,并记录每次发送所述数据请求报文对应的第一时间戳和统计发送所述数据请求报文的数量;接收所述目标数据库返回的响应所述数据请求报文的回复报文,并记录每次接收所述回复报文对应的第二时间戳和统计接收所述回复报文的数量;根据所述第一时间戳和所述第二时间戳计算所述目标数据库的时延,并根据所述数据请求报文数量和所述回复报文数量计算所述目标数据库的丢包率;根据所述目标数据库的时延和所述目标数据库的丢包率确定所述目标数据库的连通性。
根据本申请实施例的一个方面,所述方法还包括:在网关运行状态下,接收用户发送的数据查询请求;解析所述数据查询请求,基于解析结果生成对应的数据配置请求发送给所述目标数据库;以基于所述目标数据库返回与所述数据查询请求对应的数据。
根据本申请实施例的一个方面,所述数据查询请求包括用户身份标识;所述基于所述目标数据库返回与所述数据查询请求对应的数据,包括:若基于所述用户身份标识确定所述用户存在浏览权限,则基于所述数据配置请求中的查询范围生成对应的目标响应数据;其中,所述查询范围包括:查询时间范围和查询数据点;基于目标响应数据生成对应的数据文件包发送给所述用户。
根据本申请实施例的一个方面,所述方法还包括:基于数据库对应的设备属性信息设置关键数据点;若检测到所述关键数据点信息满足预设报警信息,则生成报警提示信息推送给相应的终端设备。
根据本申请实施例的一个方面,提供了一种网关的存储管理装置,所述装置包括:第一获取模块,用于在网关的维护模式下,获取所述网关中的设备对应的数据存储需求;确定模块,用于基于所述数据存储需求确定所述设备对应的目标数据库,并对所述目标数据库进行连通性测试;第二获取模块,用于若所述目标数据库处于连通状态,则获取与所述目标数据库相匹配的数据存储策略;配置模块,用于基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置,所述数据点为所述设备中采集数据的时间节点和/或触发事件的触发节点。
根据本申请实施例的一个方面,提供了一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述电子设备实现如前所述的网关的存储管理方法。
根据本申请实施例的一个方面,提供了一种计算机可读存储介质,其上存储有计算机可读指令,当所述计算机可读指令被计算机的处理器执行时,使计算机执行如上所述的网关的存储管理方法。
在本申请的实施例所提供的技术方案中,在网关的维护模式下,获取网关中的数据库对应的数据库类型,以基于数据库类型确定对应的数据库服务器,进而对数据库服务器进行连通性测试,若是在数据库服务器处于连通状态时,获取数据库服务器中配置的数据库存储策略,进而根据存储策略调整数据库的数据点配置,实现对数据库存储的有效管理,并且保障网关中所产生的数据存储的智能性,有效对网关中的数据存储进行高效管理。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术者来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1是本申请的一示例性实施例示出的网关的存储管理的实施环境示意图;
图2是本申请的一示例性实施例示出的网关的存储管理方法的流程图;
图3是本申请的另一示例性实施例示出的一种网关的存储管理方法的流程图;
图4是本申请的另一示例性实施例示出的一种网关的存储管理方法的流程图;
图5是本申请的另一示例性实施例示出的一种网关的存储管理方法的流程图;
图6是本申请的另一示例性实施例示出的一种网关的存储管理方法的流程图;
图7是本申请的另一示例性实施例示出的一种网关的存储管理方法的流程图;
图8是本申请的一示例性实施例示出的网关的存储管理装置的框图;
图9示出了适于用来实现本申请实施例的电子设备的计算机系统的结构示意图。
具体实施方式
这里将详细地对示例性实施例执行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
附图中所示的方框图仅仅是功能实体,不一定必须与物理上独立的实体相对应。即,可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
附图中所示的流程图仅是示例性说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解,而有的操作/步骤可以合并或部分合并,因此实际执行的顺序有可能根据实际情况改变。
在本申请中提及的“多个”是指两个或者两个以上。“和/或”描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
首先需要说明的是,网关的数据存储主要涉及以下几个方面:存储能力:网关需要具备足够的存储能力,以存储来自各种设备的数据。根据不同的应用场景,网关的存储容量需求会有所不同;数据安全:在数据存储过程中,网关需要采取一系列安全措施,以确保数据不被非法访问或泄露。这包括对数据进行加密、设置访问权限、定期备份数据等;数据备份与恢复:为了防止数据丢失,网关需要具备数据备份和恢复功能。这样,一旦出现意外情况,可以通过备份数据快速恢复到正常状态;数据格式与协议:网关存储的数据需要遵循一定的格式和协议,以便于数据的处理和传输。例如,常见的数据格式包括CSV、JSON、XML等,而协议则包括HTTP、FTP、SFTP等;数据生命周期管理:随着时间的推移,网关中存储的数据可能会失去时效性或不再需要。因此,网关需要具备数据生命周期管理能力,定期清理和删除过时或无用的数据;数据存储管理接口:为了方便管理和维护,网关需要提供数据存储管理接口。这些接口可以用于查看存储状态、调整存储配置、上传和下载数据等。
总之,网关的数据存储需要考虑到安全性、可靠性、可扩展性等多个方面。同时,随着物联网技术的不断发展,对网关的数据存储能力的要求也在不断提高。因此,在选择和设计网关时,需要根据实际需求进行综合考虑。
网关与设备之间的关系是:网关是连接设备端和平台的转换器,负责将设备端的数据格式转换为平台可以理解的格式,并将命令从平台转发到设备端。设备端是指实际运行在物理设备上的程序或硬件,通过网关连接到平台,平台通过服务端提供功能和服务来管理和控制设备端的操作。此外,物联网网关是将控制器、传感器和其他智能设备连接到云的硬件或软件组件。它可以管理子设备、维持与子设备的拓扑关系,并将该拓扑关系同步到云端。同时,物联网网关是一个翻译器,用于在不同通信协议、数据格式或语言的系统之间进行转换。
图1是本申请的一示例性实施例示出的对网关的存储管理的实施环境示意图。如图1所示,在网关的维护模式下,网关120获取设备110对应的数据存储需求,并基于设备110的数据存储需求确定对应的目标数据库,并对该目标数据库进行连通性测试,在目标数据库连通性测试通过后,网关120获取与该目标数据库相匹配的数据存储策略;基于数据存储策略调整所述与目标数据库相对应的数据点配置,其中,该数据点可以为设备110中采集数据的时间节点和/或触发事件的触发节点。
工业互联网架构通常由工业设备、网关、边缘计算装置及云平台组成,网关用于采集工业设备的现场数据及接收边缘计算装置的反馈信息,因此会产生大量的数据,这些数据通常存储在网关的本地数据库或上传至云端,而未对网关的数据存储进行管理,由于本地数据库的存储空间较小,容易给本地数据库造成较大的存储压力,上传至云端则可能导致大量重复且无用的数据占用云端存储资源,从而影响存储效率。
以上所指出的问题在通用的网关场景具有普遍适用性,为解决这些问题,本申请的实施例分别提出一种网关的存储管理方法、一种网关的存储装置、一种电子设备、一种计算机可读存储介质以及一种计算机程序产品,以下将对这些实施例进行详细描述。
请参阅图2,图2是本申请的一示例性的实施例示出的一种网关的存储方法的流程图。该方法可以应用于图1所示的实施环境,并由该实施环境中的服务器具体执行。应理解的是,该方法也可以适用于其它的示例性实施环境,并由其它实施环境中的设备具体执行,本实施例不对该方法所适用的实施环境进行限制。
如图2所示,在一示例性的实施例中,网关的存储管理方法的具体实现过程至少包括步骤S210至步骤S240,详细介绍如下:
步骤S210,在网关的维护模式下,获取所述网关中的设备对应的数据存储需求。
需要说明的是,网关的维护模式是一种暂停某些功能以进行维护或处理特定问题的模式。根据不同的网关类型和功能,维护模式可能具有不同的特点和作用。
一般来说,网关的维护模式可以暂停一些警报处理和自动服务请求创建功能。这有助于在维护期间避免不必要的警报干扰,使维护工作更加集中和高效。同时,维护模式还可以为设备提供更安全的环境,以便进行必要的维护和故障排除操作。
在步骤S210中,在网关中进入维护模式,找到对应的数据库,进入数据库配置页面,首先选择数据库的类型,网关中内置的里MySQL数据库,还可以使用外部数据库,目前支持三种数据库MySQL、sqlserver、PostgreSQL,在本实施例中以MySQL为例。
可以得到如下所示的内容,数据库类型:MySQL;数据库名称:自定义;数据库服务器:填写数据库服务器的IP地址,这里以填写本地IP为例,IP后面的按钮是测试ping链接的;端口号:数据库服务器的端口号;用户名,密码,存储天数,数据是否覆盖,数据未读取时是否存等,其中,数据是否覆盖可以为当存储达到存储天数或存储空间满时,是否覆盖以前的数据,勾选表示覆盖,不勾选表示达到上述条件时停止存储。
步骤S220,基于所述数据存储需求确定所述设备对应的目标数据库,并对所述目标数据库进行连通性测试。
承接上述数据库配置实施例所言,可以通过所填写的数据库服务器的IP地址确定与该数据存储需求相对应的目标数据库并对该目标数据库进行连通性测试,其中,对目标数据库的连通性测试内容包括:检测与目标数据库是否网络连接正常,检测目标数据库是否在正常运行,使用数据库管理工具连接到数据库,并尝试执行一些简单的查询语句,以测试数据库的连通性;可以使用命令行工具(如MySQL命令行客户端)连接到数据库,并执行一些简单的查询语句,以测试数据库的连通性;确保防火墙设置不会阻止对数据库服务器的连接请求;检查应用程序或脚本中使用的数据库连接参数(如主机名、端口号、用户名、密码等)是否正确;可以使用第三方测试工具(如SQL Server Profiler、MySQL EnterpriseMonitor等)来测试和监控数据库的连通性和性能等方式均可用于测试数据库的连通性,并确保应用程序或脚本可以成功连接到数据库并执行查询语句。
步骤S230,若所述目标数据库处于连通状态,则获取与所述目标数据库相匹配的数据存储策略。
若是经过测试,与设备对应的目标数据库处于连通状态,则可以获取与该目标数据库相匹配的数据存储策略,其中,数据存储策略包括有:数据点的全称,自动生成、存储类型:Int、Float、String;变化存储:勾选时表示数据发生变化机存储;变化幅度:即变化的百分比,如填写‘5’表示变化‘5%’就存储;循环存储:勾选时表示按周期存储;周期(ms):以此毫秒数为周期存储数据;配置完上述参数,生成数据存储策略。
其中,点名是记录的唯一标识,数据采集侧点名发生变化时,可以通过手动更新;变化存储和循环存储可以同时选择。
步骤S240,基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置,所述数据点为所述设备中采集数据的时间节点和/或触发事件的触发节点。
具体的,可以根据上述生成的数据存储策略调整与目标数据库相匹配的数据点的配置,其中,数据点可以为采集设备中数据的时间点,或者设备中触发事件的触发节点。示例性的,勾选要存储的数据点即可,点名:数据点的全称,自动生成;存储类型:Int、Float、String;变化存储:勾选时表示数据发生变化机存储;变化幅度:即变化的百分比,如填写‘5’表示变化‘5%’就存储;循环存储:勾选时表示按周期存储;周期(ms):以此毫秒数为周期存储数据。
在本实施例中,获取网关中的数据库对应的数据库类型,以基于数据库类型确定对应的数据库服务器,进而对数据库服务器进行连通性测试,若是在数据库服务器处于连通状态时,获取数据库服务器中配置的数据库存储策略,进而根据存储策略调整数据库的数据点配置,实现对数据库存储的有效管理,并且保障网关中所产生的数据存储的智能性,有效对网关中的数据存储进行高效管理。
进一步的,请参照图3,在本申请所提供的其中一个示例性的实施例中,上述基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置的具体实现过程还可以包括步骤S310至步骤S330,详细介绍如下:
步骤S310,解析所述数据存储策略,基于解析结果确定多个不同的数据点;
步骤S320,选择所述多个不同数据点的存储类型以及存储机制;
步骤S330,基于所述多个不同数据点的存储类型以及存储机制调整所述目标数据库对应的多个不同数据点的配置。
具体的,可以对步骤S230中所生成的数据存储策略进行解析,ClientID:根据实际情况选择是否配置客户端ID,如配置直接填写即可;Username:MQTT服务器用户名;Password:MQTT服务器密码;hostName:MQTT服务器地址;Port:MQTT服务器的服务端口号;Version:版本,无特殊要求,默认即可;QOSsubscribe:QOSsubscribe,无特殊要求,默认即可;QOSpublished:QOSpublished,无特殊要求,默认即可;KeepAlive(s):心跳周期,单位为秒;cleanSession:是否清楚会话,false为否,true为是;pKey(供应商产品系列编号*):根据实际情况填写,会包含在topic中;sn(物联网关编号*):根据实际情况填写,会包含在topic中;compld(厂家ID):根据实际情况填写,可以为空;encr(加密方式):根据实际情况填写;ConnType(设备通讯方式):报文中通讯方式表示,可自定义;(MAC地址):设备MAC地址,可为空;seriaNum(网关可用串口数量):根据实际情况填写,可为空;ethNum(网关可用网口数量):根据实际情况填写,可为空;反馈超时时间(ms):无响应通讯中断时间,单位毫秒;单个离线文件占用存储空间:单位字节以及所有离线文件占用存储空间:单位字节等。
进而根据解析结果确定该设备中的多个不同的数据点以及数据点对应的存储类型和存储机制,进而根据设备上的多个不同数据点的存储类型以及存储机制调整目标数据库对应的多个不同数据点的配置,进而实现设备在网关中的数据存储的配置,保证在设备正常运行过程中,网关能够合理有效的对设备运行所产生的数据进行存储,进而保证对网关中数据存储的管理。
进一步的,基于上述实施例,在本申请所提供的其中一个示例性的实施例中,上述存储机制包括数据点的存储变化幅度;上述网关的存储管理方法的具体实现过程还可以包括如下步骤,详细介绍如下:
若检测到所述数据点上的数据变化幅度达到预设存储变化幅度,则将所述数据点上对应的数据进行更新并存储。
承接上述实施例所言,若是监测到上述设置的数据点上的数据变化幅度达到该数据点配置时所对应的预设变化幅度时,则将该数据点上对应的数据在目标数据库中进行更新并存储。示例性的,在对目标数据库对应的多个不同数据点上所产生的数据进行监测,若是监测到数据点上的数据与上一个周期采集到的数据进行比较,当比较结果表征该数据点上的数据的变化幅度达到该数据点的预设变化幅度时,则将监测到的数据对应该数据点在目标数据库中进行更新并存储;在一些可实现的实施例中,若是监测到数据点上的数据与预设的数据进行比较,当比较结果表征该数据点上的数据的变化幅度达到该数据点的预设变化幅度时,则将监测到的数据对应该数据点在目标数据库中进行更新并存储。
在本实施例中,有效的对网关中设备所产生的数据进行更新,提高网关的存储管理的智能性和有效性。
进一步的,基于上述实施例,请参照图4,在本申请所提供的其中一个示例性的实施例中,上述对所述目标数据库进行连通性测试的具体实现过程还可以包括步骤S410至步骤S440,详细介绍如下:
步骤S410,按照预设频率向所述目标数据库发送数据请求报文,并记录每次发送所述数据请求报文对应的第一时间戳和统计发送所述数据请求报文的数量;
步骤S420,接收所述目标数据库返回的响应所述数据请求报文的回复报文,并记录每次接收所述回复报文对应的第二时间戳和统计接收所述回复报文的数量。
具体的,在预设的周期内,可以按照预先设定的频率向目标数据库发送传输数据的数据请求报文,其中,数据请求报文可以为不包含数据或者包含少量数据的探测包,并在一个周期内按照预先设定的频率向目标数据库多次发送数据请求报文,并记录下向目标数据库发送的数据请求报文对应的时间戳,记作第一时间戳,并记录在该预设周期内向目标数据库发送的数据请求报文的数量。
另一方面,在预设周期内,接收来自目标数据库针对上述数据请求报文响应的回复报文,并记录在预设的周期内接收到的回复报文的数量,以及接收到的回复报文对应的时间戳,记作第二时间戳。
步骤S430,根据所述第一时间戳和所述第二时间戳计算所述目标数据库的时延,并根据所述数据请求报文数量和所述回复报文数量计算所述目标数据库的丢包率;
步骤S440,根据所述目标数据库的时延和所述目标数据库的丢包率确定所述目标数据库的连通性。
示例性的,在同一周期时长内,通过记录的向目标数据库发送数据请求报文的第一时间戳和接收到该数据请求报文对应的回复报文的第二时间戳,确定该目标数据库对应的时延,若是在同一周期内向该目标数据库发送了多条数据请求报文,则可以根据多条数据请求报文对应的平均时延,或者时延中位数,时延众数等来确定该目标数据库对应的时延。另一方面,通过预设周期内向目标数据库发送的数据请求报文的数量与接收到的回复报文的数量确定该目标数据库对应的丢包率。
进而可以根据目标数据库在预设周期内针对数据请求报文的时延和丢包率确定该目标数据库的连通性。示例性的,若在预设周期内该目标数据库的时延未达到预设时延阈值以上,则确定该目标数据库处于连通状态;或,在预设周期内该目标数据库的丢包率未达到预设预设丢包率阈值以上,则确定该目标数据库处于连通状态;或,若在预设周期内该目标数据库的时延未达到预设时延阈值以上,且,丢包率未达到预设丢包率阈值以上,则确定确定该目标数据库处于连通状态。
在本实施例中,通过目标数据的丢包率和时延来确定该目标数据库的连通性,以使得所测试得到的结果的精确性,进一步方便对网关上的数据的存储的有效性和智能性。
进一步的,基于上述实施例,请参照图5,在本申请所提供的其中一个示例性的实施例中,上述网关的存储管理方法的具体实现过程还可以包括步骤S510至步骤S530,详细介绍如下:
步骤S510,在网关运行状态下,接收用户发送的数据查询请求;
步骤S520,解析所述数据查询请求,基于解析结果生成对应的数据配置请求发送给所述目标数据库;
步骤S530,以基于所述目标数据库返回与所述数据查询请求对应的数据。
具体的,承接上述实施例所言,在确定目数据库为连通状态下时,可以开启该网关的运行状态,并接收用户发送的数据查询请求,其中,数据查询请求是针对网关中的设备发起的,也可以是针对网关自身发起的。可以通过解析该数据查询请求,进而根据数据查询请求对应的数据配置请求发送给目标数据库,进而通过目标数据库返回与数据查询请求对应的数据。
示例性的,在网关从维护状态切换为运行状态下时,可以获取目标数据库处于连通状态的设备的运行数据或实时通讯报文,其中,还可以获取该设备的离线报文等,并同目标数据库将所需查询的数据生成对应的报文返回给用户,其中,返回的查询数据可以用折线图和列表的方式呈现,折线图支持缩放,用鼠标选中即可放大局部数据。
在本实施例中,通过对用户发起的数据访问请求的解析,使得返回的目标响应数据更准确,并通过折线图和列表的方式呈现,方便了数据结果的直观性和可观赏性,提高用户的使用体验。
进一步地,基于上述实施例,请参阅图6,在本申请所提供的其中一个示例性的实施例中,所述数据查询请求包括用户身份标识;所述基于所述目标数据库返回与所述数据查询请求对应的数据的具体实现过程还可以包括如下步骤S610和步骤S620,详细介绍如下:
步骤S610,若基于所述用户身份标识确定所述用户存在浏览权限,则基于所述数据配置请求中的查询范围生成对应的目标响应数据;其中,所述查询范围包括:查询时间范围和查询数据点;
步骤S620,基于目标响应数据生成对应的数据文件包发送给所述用户。
具体的,在用户发送的数据查询请求中携带有发送该数据查询请求对应的客户端的身份标识,其中,该客户端的身份标识可以是用户账号,账户ID,客户端设备编号,MAC地址,IP地址,SN码值等,进而可以根据身份标识确定该用户对应的浏览权限,其中,浏览权限是中该用户账号对应的访问权限,以确定该用户是否具备查询与其发起的数据查询请求对应的浏览权限。
若是确定该用户对应的身份标识确定该用户存在对应的浏览权限,则可以根据该数据配置请求中的查询范围生成对应的目标响应数据,其中,数据的查询范围包括该数据查询的时间范围以及对应需要查询的数据点,生成与用户发起的数据查询请求对应的目标响应数据。
示例性的,以该数据查询请求中对应的查询内容为“查找2023年11月01日至2023年11月30日时间范围内,设备A的运行数据”则可以基于设备A对应的目标数据库中查询出该数据查询请求对应的响应数据返回给用户。
在本实施例中,通过对用户的身份标识的认证,保证了目标数据库中存储的数据的安全性,提高了网关数据存储的智能性。
进一步的,基于上述实施例,请参照图7,在本申请所提供的其中一个示例性的实施例中,上述网关的存储管理方法的具体实现过程还可以包括步骤S710和步骤S720,详细介绍如下:
步骤S710,基于数据库对应的设备属性信息设置关键数据点;
步骤S720,若检测到所述关键数据点信息满足预设报警信息,则生成报警提示信息推送给相应的终端设备。
具体的,可以根据网关中的设备所对应的属性信息,为该网关设定不同的关键数据点,其中,该关键数据点还可以作为报警数据点,也就是说,对该关键数据点所产生的数据进行监测,具体的,在网关的组态模式下,设置目标设备的告警节点,其中,目标设备的性质不同、功能不同以及运行模式等的不同,所设置的告警节点也不同,因此,并且该告警节点为目标设备的通讯信息中对应的变量,并设置告警节点对应的告警阈值信息,在监控到目标设备的运行信息达到该告警阈值信息以上后,则生成对应的告警信息发送给对应的终端。
示例性的,根据目标设备的性质确定目标设备的告警节点,并设置告警节点对应的变量的告警阈值信息,以使得在预警节点上的变量达到对应的告警阈值以上时,则生成对应的告警信息发送给对应的终端。
需要说明的是,网关的组态模式是指通过特定的软件或工具对网关进行配置、管理和优化的方式。根据不同的需求和场景,网关的组态模式可以分为以下几种:命令行界面(CLI):通过命令行方式输入指令对网关进行配置和管理,这种方式需要具备一定的技术背景和经验;图形化界面(GUI):通过图形化界面进行配置和管理,这种方式相对容易操作,适合不具备技术背景的用户使用;远程管理界面(Remote Management Interface):通过远程方式对网关进行管理和配置,这种方式可以方便地实现远程管理和监控;API接口:通过API接口对网关进行编程和配置,这种方式适合具备一定技术能力的用户使用;在实际应用中,需要根据具体的需求和场景选择合适的组态模式,以实现高效、稳定、安全的网络通信和数据处理。同时,还需要注意网关的安全性和稳定性,确保网关能够抵御网络攻击和意外情况,保证数据的安全和完整性。
示例性的,在网关的组态模式下,对目标设备的运行状态进行监控,并在监控到目标设备发生预设告警运行状态时,生成对应的报警信息,并将该报警信息发送给对应的终端,并在该终端上以网页提示,邮件提示以及个人账户推送的方式进行提示,以使得相关人员能够及时对发生故障的目标设备处理,提高故障处理能力,保障能够正常使用。
在本实施例中,通过设置告警节点和告警阈值信息,可以高效快捷在设备故障时生成告警信息,并且通过设置告警阈值可以保证网关对不同设备的告警提示的灵活性和适应性,提高网关的智能性。
图8是本申请的一示例性实施例示出的网关的存储管理装置的框图。该装置可以应用于图1所示的实施环境,并具体配置在网关120中。该装置也可以适用于其它的示例性实施环境,并具体配置在其它设备中,本实施例不对该装置所适用的实施环境进行限制。
如图8所示,该示例性的网关的存储管理装置包括:第一获取模块810,用于在网关的维护模式下,获取所述网关中的设备对应的数据存储需求;确定模块820,用于基于所述数据存储需求确定所述设备对应的目标数据库,并对所述目标数据库进行连通性测试;第二获取模块830,用于若所述目标数据库处于连通状态,则获取与所述目标数据库相匹配的数据存储策略;配置模块840,用于基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置,所述数据点为所述设备中采集数据的时间节点和/或触发事件的触发节点。
根据本申请实施例的一个方面,上述配置模块840还具体包括:解析单元,用于解析所述数据存储策略,基于解析结果确定多个不同的数据点;选择单元,用于选择所述多个不同数据点的存储类型以及存储机制;调整单元,用于基于所述多个不同数据点的存储类型以及存储机制调整所述目标数据库对应的多个不同数据点的配置。
根据本申请实施例的一个方面,上述网关的存储管理装置还包括:更新模块,用于若检测到所述数据点上的数据变化幅度达到预设存储变化幅度,则将所述数据点上对应的数据进行更新并存储。
根据本申请实施例的一个方面,上述网关的存储管理装置还包括:第一发送模块,用于按照预设频率向所述目标数据库发送数据请求报文数据请求报文,并记录每次发送所述数据请求报文对应的第一时间戳和统计发送所述数据请求报文的数量;第一接收模块,用于接收所述目标数据库返回的响应所述数据请求报文的回复报文,并记录每次接收所述回复报文对应的第二时间戳和统计接收所述回复报文的数量;计算模块,用于根据所述第一时间戳和所述第二时间戳计算所述目标数据库的时延,并根据所述数据请求报文数量和所述回复报文数量计算所述目标数据库的丢包率;连通性确定模块,用于根据所述目标数据库的时延和所述目标数据库的丢包率确定所述目标数据库的连通性。
根据本申请实施例的一个方面,上述网关的存储管理装置还包括:第二接收模块,用于在网关运行状态下,接收用户发送的数据查询请求;生成模块,用于解析所述数据查询请求,基于解析结果生成对应的数据配置请求发送给所述目标数据库;返回模块,用于以基于所述目标数据库返回与所述数据查询请求对应的数据。
根据本申请实施例的一个方面,上述返回模块还具体包括:生成单元,用于若基于所述用户身份标识确定所述用户存在浏览权限,则基于所述数据配置请求中的查询范围生成对应的目标响应数据;其中,所述查询范围包括:查询时间范围和查询数据点;第二发送模块,用于基于目标响应数据生成对应的数据文件包发送给所述用户。
根据本申请实施例的一个方面,上述网关的存储管理装置还包括:设置模块,用于基于数据库对应的设备属性信息设置关键数据点;报警模块,用于若检测到所述关键数据点信息满足预设报警信息,则生成报警提示信息推送给相应的终端设备。
需要说明的是,上述实施例所提供的网关的存储管理装置与上述实施例所提供的网关的存储管理方法属于同一构思,其中各个模块和单元执行操作的具体方式已经在方法实施例中进行了详细描述,此处不再赘述。上述实施例所提供的网关的存储管理装置在实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能,本处也不对此进行限制。
本申请的实施例还提供了一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述电子设备实现上述各个实施例中提供的网关的存储管理方法。
图9示出了适于用来实现本申请实施例的电子设备的计算机系统的结构示意图。需要说明的是,图9示出的电子设备的计算机系统900仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图9所示,计算机系统900包括中央处理单元(Central Processing Unit,CPU)901,其可以根据存储在只读存储器(Read-Only Memory,ROM)902中的程序或者从储存部分908加载到随机访问存储器(Random Access Memory,RAM)903中的程序而执行各种适当的动作和处理,例如执行上述实施例中所述的方法。在RAM 903中,还存储有系统操作所需的各种程序和数据。CPU 901、ROM 902以及RAM 903通过总线904彼此相连。输入/输出(Input/Output,I/O)接口905也连接至总线904。
以下部件连接至I/O接口905:包括键盘、鼠标等的输入部分906;包括诸如阴极射线管(Cathode Ray Tube,CRT)、液晶显示器(Liquid Crystal Display,LCD)等以及扬声器等的输出部分907;包括硬盘等的储存部分908;以及包括诸如LAN(Local Area Network,局域网)卡、调制解调器等的网络接口卡的通信部分909。通信部分909经由诸如因特网的网络执行通信处理。驱动器910也根据需要连接至I/O接口905。可拆卸介质911,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器910上,以便于从其上读出的计算机程序根据需要被安装入储存部分908。
特别地,根据本申请的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本申请的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的计算机程序。在这样的实施例中,该计算机程序可以通过通信部分909从网络上被下载和安装,和/或从可拆卸介质911被安装。在该计算机程序被中央处理单元(CPU)901执行时,执行本申请的系统中限定的各种功能。
需要说明的是,本申请实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、闪存、光纤、便携式紧凑磁盘只读存储器(Compact Disc Read-Only Memory,CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的计算机程序。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的计算机程序可以用任何适当的介质传输,包括但不限于:无线、有线等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。其中,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现,所描述的单元也可以设置在处理器中。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定。
本申请的另一方面还提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如前所述的网关的存储管理方法。该计算机可读存储介质可以是上述实施例中描述的电子设备中所包含的,也可以是单独存在,而未装配入该电子设备中。
本申请的另一方面还提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述各个实施例中提供的网关的存储管理方法。
上述内容,仅为本申请的较佳示例性实施例,并非用于限制本申请的实施方案,本领域普通技术人员根据本申请的主要构思和精神,可以十分方便地进行相应的变通或修改,故本申请的保护范围应以权利要求书所要求的保护范围为准。
Claims (10)
1.一种网关的存储管理方法,其特征在于,包括:
在网关的维护模式下,获取所述网关中的设备对应的数据存储需求;
基于所述数据存储需求确定所述设备对应的目标数据库,并对所述目标数据库进行连通性测试;
若所述目标数据库处于连通状态,则获取与所述目标数据库相匹配的数据存储策略;
基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置,所述数据点为所述设备中采集数据的时间节点和/或触发事件的触发节点。
2.如权利要求1所述的方法,其特征在于,所述基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置,包括:
解析所述数据存储策略,基于解析结果确定多个不同的数据点;
选择所述多个不同数据点的存储类型以及存储机制;
基于所述多个不同数据点的存储类型以及存储机制调整所述目标数据库对应的多个不同数据点的配置。
3.如权利要求2所述的方法,其特征在于,所述存储机制包括数据点的存储变化幅度;所述方法还包括:
若检测到所述数据点上的数据变化幅度达到预设存储变化幅度,则将所述数据点上对应的数据进行更新并存储。
4.如权利要求1所述的方法,其特征在于,所述对所述目标数据库进行连通性测试,包括:
按照预设频率向所述目标数据库发送数据请求报文数据请求报文,并记录每次发送所述数据请求报文对应的第一时间戳和统计发送所述数据请求报文的数量;
接收所述目标数据库返回的响应所述数据请求报文的回复报文,并记录每次接收所述回复报文对应的第二时间戳和统计接收所述回复报文的数量;
根据所述第一时间戳和所述第二时间戳计算所述目标数据库的时延,并根据所述数据请求报文数量和所述回复报文数量计算所述目标数据库的丢包率;
根据所述目标数据库的时延和所述目标数据库的丢包率确定所述目标数据库的连通性。
5.如权利要求1所述的方法,其特征在于,所述方法还包括:
在网关运行状态下,接收用户发送的数据查询请求;
解析所述数据查询请求,基于解析结果生成对应的数据配置请求发送给所述目标数据库;
以基于所述目标数据库返回与所述数据查询请求对应的数据。
6.如权利要求5所述的方法,其特征在于,所述数据查询请求包括用户身份标识;所述基于所述目标数据库返回与所述数据查询请求对应的数据,包括:
若基于所述用户身份标识确定所述用户存在浏览权限,则基于所述数据配置请求中的查询范围生成对应的目标响应数据;其中,所述查询范围包括:查询时间范围和查询数据点;
基于目标响应数据生成对应的数据文件包发送给所述用户。
7.如权利要求1所述的方法,其特征在于,所述方法还包括:
基于数据库对应的设备属性信息设置关键数据点;
若检测到所述关键数据点信息满足预设报警信息,则生成报警提示信息推送给相应的终端设备。
8.一种网关的存储管理装置,其特征在于,所述装置包括:
第一获取模块,用于在网关的维护模式下,获取所述网关中的设备对应的数据存储需求;
确定模块,用于基于所述数据存储需求确定所述设备对应的目标数据库,并对所述目标数据库进行连通性测试;
第二获取模块,用于若所述目标数据库处于连通状态,则获取与所述目标数据库相匹配的数据存储策略;
配置模块,用于基于所述数据存储策略调整所述与所述目标数据库相对应的数据点配置,所述数据点为所述设备中采集数据的时间节点和/或触发事件的触发节点。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述电子设备实现如权利要求1至7中任一项所述的网关的存储管理方法。
10.一种计算机可读存储介质,其特征在于,其上存储有计算机可读指令,当所述计算机可读指令被计算机的处理器执行时,使计算机执行权利要求1至7中任一项所述的网关的存储管理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410070233.2A CN117950591A (zh) | 2024-01-18 | 2024-01-18 | 网关的存储管理方法及装置、电子设备、存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410070233.2A CN117950591A (zh) | 2024-01-18 | 2024-01-18 | 网关的存储管理方法及装置、电子设备、存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117950591A true CN117950591A (zh) | 2024-04-30 |
Family
ID=90792892
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410070233.2A Pending CN117950591A (zh) | 2024-01-18 | 2024-01-18 | 网关的存储管理方法及装置、电子设备、存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117950591A (zh) |
-
2024
- 2024-01-18 CN CN202410070233.2A patent/CN117950591A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11277320B2 (en) | Automatic provisioning of monitoring for containerized microservices | |
CN108768791B (zh) | 一种信息采集配置管理系统及方法 | |
CN110971614A (zh) | 物联网适配方法、系统、计算机设备及存储介质 | |
CN107241229B (zh) | 一种基于接口测试工具的业务监控方法及装置 | |
US20220050902A1 (en) | Opentelemetry security extensions | |
CN112988485A (zh) | 电力物联网设备模拟测试方法及装置 | |
WO2018010176A1 (zh) | 获取故障信息的方法及设备 | |
US20230214229A1 (en) | Multi-tenant java agent instrumentation system | |
US20230267326A1 (en) | Machine Learning Model Management Method and Apparatus, and System | |
US11962666B2 (en) | User-configurable end user monitoring (EUM) | |
CN116048467A (zh) | 微服务开发平台及业务系统开发方法 | |
US20180324063A1 (en) | Cloud-based system for device monitoring and control | |
KR20200007912A (ko) | 데이터 트래픽을 모니터링하기 위한 방법, 장치 및 시스템 | |
WO2016091141A1 (zh) | 信息采集方法及装置 | |
WO2004017199A1 (en) | Method for monitoring and managing an information system | |
CN111182066A (zh) | 基于token认证的日志级别动态调整方法 | |
CN103457771B (zh) | 一种ha的虚拟机集群的管理方法和设备 | |
CN117950591A (zh) | 网关的存储管理方法及装置、电子设备、存储介质 | |
CN109167826B (zh) | Web应用的上架方法、装置及系统 | |
KR101702583B1 (ko) | XMPP(Extensible Messaging and Presence Protocol)를 이용한 네트워크 성능 모니터링 시스템 및 그 모니터링 방법 | |
US20240073234A1 (en) | Opentelemetry Security Systems and Methods | |
US20230376632A1 (en) | Protecting confidential information in online applications | |
CN107645415B (zh) | 一种保持OpenStack服务端与设备端数据一致的方法及装置 | |
KR20010058741A (ko) | 이동통신 단말기의 관리제어장치 | |
CN115409205A (zh) | 设备报障方法、装置、系统、设备和计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |