CN105512567A - 一种易扩展的规则定制化数据监测方法 - Google Patents
一种易扩展的规则定制化数据监测方法 Download PDFInfo
- Publication number
- CN105512567A CN105512567A CN201510889130.XA CN201510889130A CN105512567A CN 105512567 A CN105512567 A CN 105512567A CN 201510889130 A CN201510889130 A CN 201510889130A CN 105512567 A CN105512567 A CN 105512567A
- Authority
- CN
- China
- Prior art keywords
- monitoring
- data monitoring
- rules
- data
- rule
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Storage Device Security (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种易扩展的规则定制化数据监测方法,该方法包括以下步骤:数据监测服务器初始化数据监测规则;数据监测服务器将规则推送至数据库服务器;设置数据监测规则调度机制;数据库服务器根据设定的调度机制定时执行监测规则,规则执行成功后,监测结果以密文方式存储;数据监测服务器从数据库服务器抽取监测结果,并根据密钥将监测结果解密;根据监测规则进行汇总统计。本发明对周期性数据监测且监测规则不固化的监测需求有强大的适应性、扩展性,加强了数据监测的安全性、灵活性,提升了数据监测的便利性。<!-- 2 -->
Description
技术领域
本发明涉及数据监测方法的技术领域,具体讲涉及一种易扩展的规则定制化数据监测方法。
背景技术
随着在线数据监测技术的发展,数据监测手段日益增多,各种不同类型的数据监测方法的数据表达要求均不同。随着兼容的数据监测类型越来越多,在线数据监测系统程序内部的设计越来越复杂,影响程序运行效率。
数据库中对需要防篡改的数据所在列表中增加一个数据列,该列用来加密hash值,该值由防篡改数据通过特定加密算法MD5、AES、DES、SHA、HMAC等生成。在对防篡改数据进行增、删、改、查等操作时,由应用程序校验原始数据是否篡改。如发现被篡改,采取记录日志、报警等措施,同时恢复相关数据。
当前,在国网计量生产调度平台中,需要监测各省级供电单位的计量生产数据,根据历史监测结果及当前业务重点制定的监测规则,每次都有不同程度的变更。随着时间推移,业务功能不断扩展,积累的规则越来越多,目前已达500个之上,将来仍会继续增长。
出于业务需要,每次执行时都需要重新编制或逐个筛选如此多的监测规则,工作效率低;因性能需要,各省级供电单位的计量生产数据独立存储在本单位的数据库服务器上,监测规则的调度执行、结果存储也都存储在本单位的数据库服务器上,国网总部及各省级供电单位相关人员都分配有数据库服务器的可操作权限。监测工作开始时,需要工作人员设置每个服务器的调度机制,而直接存储在数据库中的数据监测规则和执行结果存在被篡改的可能性,妨碍数据监测的真实性、公正性。不利于通过数据监测达成完善各省级计量生产调度平台业务功能、监督各省级供电单位计量生产业务执行标准化等目标的实现,不利于国网总部对各省级供电单位计量生产工作的监测及指导。
为解决在国网计量生产调度平台中监测工作效率低,过程复杂,不能保证数据监测真实性和公正性的问题,需要提供一种易扩展的规则定制化数据监测方法。
发明内容
为克服现有工作方式中的的不足,本发明提供一种易扩展的规则定制化数据监测方法,在国网计量生产调度平台中使用。从历史监测规则集中选取一个与当前监测要求近似的规则集合进行规则初始化工作,可有效的降低监测规则筛选的工作量及复杂度。监测规则及执行结果加密存储的方式能够防止数据被篡改,保证了监测结果的真实性。
本发明提供一种易扩展的规则定制化数据监测方法,其改进之处在于,所述方法包括以下步骤:
(1)初始化数据监测规则;
(2)将规则发送至数据库服务器;
(3)设置数据监测规则调度机制;
(4)定时执行监测规则,并将规则执行成功后的监测结果以密文方式存储;
(5)抽取监测结果,并将监测结果解密;
(6)根据监测规则进行汇总统计。
其中,所述步骤(1)中,用具有初始化功能的数据监测服务器根据历史监测规则进行初始化,并根据监测要求对数据监测规则进行调整。
其中,所述步骤(2)中,数据监测服务器用Oracle数据库的加密方法将加密的数据监测规则通过数据库的DatabaseLink方式发送至数据库服务器。
其中,所述步骤(3)中,具有监测规则调度功能的数据监测服务器设置数据监测规则调度机制,并将该调度机制通知数据库服务器,设置OracleJob的执行时间。
其中,所述步骤(4)中,数据库服务器定时且成功执行监测规则得到的执行记录和监测结果用Oracle数据库的加密方式加密,数据库服务器的OracleJob定时调用存储过程,将加密数据以密文方式存储在指定数据表中。
其中,所述步骤(5)中,对监测结果的解密过程如下:
(a)、实时监控所有监测规则是否执行完成;
(b)、若执行完成,则抽取本次监测结果和规则执行信息;
(c)、抽取完成后利用Oracle数据库的解密方法解密。
其中,根据执行记录判断是否存在执行失败的情况;若存在,则重新设置相关规则的调度机制并通知数据库服务器,重新执行步骤(3)至步骤(5)。
其中,所述步骤(6)中,按照用户要求对数据监测结果进行汇总统计,以报表形式展现给用户
与最接近的现有技术比,本发明提供的技术方案具有以下优异效果:
1、本发明提供的技术方案通过每次监测自动将参与监测的规则进行归集,相对于之前分散的、独立的规则管理方式,大大方便了后续相似监测需求的规则初始化工作,提升了数据监测规则初始化的便利性。
2、本发明提供的技术方案在数据监测服务器统一设置调度机制,然后推送至各省级供电单位数据库服务器上,大大降低了调度机制设置的复杂度,提升了调度执行的灵活性、一致性。
3、本发明提供的技术方案以密文方式存储监测规则和监测结果数据,防止篡改数据,提升了数据安全性,保证了监测结果的真实性。
4、本发明提供的技术方案对周期性数据监测且监测规则不固化的监测需求有强大的适应性、扩展性,加强了数据监测的安全性、灵活性,提升了数据监测的便利性。
附图说明
图1为一种易扩展的规则定制化数据监测方法的结构图。
图2为一种易扩展的规则定制化数据监测方法的流程图。
具体实施方式
下面结合附图对本发明的具体实施方式作进一步的详细说明。
本实施例提供的一种易扩展的规则自制化数据监测方法,其整体系统示意图如图1所示,包括:数据监测服务器、数据库服务器和数据库。
针对国网计量生产调度平台,数据监测服务器主要提供数据监测规则初始化、监测规则调度机制设置、推送监测规则及调度机制、抽取执行记录及监测结果、解密执行记录及监测结果和汇总统计监测结果等功能;
数据库服务器主要提供接口对接服务及运行数据库等功能;数据库采用Oracle10gR2版本,主要用途为提供数据存储服务及规则执行。
本实施例中数据库服务器采用SQL语句、存储过程及Job结合的方式进行规则的调度执行,数据监测规则作为SQL脚本存储在指定的数据表中,由存储过程进行调用执行,并将结果存储在指定的数据表,存储过程的执行由OracleJob根据调度机制定时发起。
存储过程、数据监测规则SQL以及监测结果都利用Oracle数据库提供的加密方法进行加密,防止被篡改。
国网计量生产调度平台采用图2所示的易扩展的规则定制化数据监测方法实现对国网公司各省级供电单位的计量生产数据进行数据质量管控,包括如下步骤:
(1)、数据监测服务器初始化数据监测规则:
具有监测规则初始化功能的数据监测服务器根据历史监测规则进行初始化,并根据本次监测的要求进行响应调整。
(2)、数据监测服务器将监测规则推送至数据库服务器:
数据监测服务器将定制的监测规则推送至数据库服务器,利用Oracle数据库提供的加密方法,将监测规则加密后通过Oracle数据库的DatabaseLink方式推送至各省级供电单位数据库中;
(3)、数据监测服务器设置数据监测规则调度机制:
利用数据监测服务器的数据监测规则调度功能,设置数据监测规则调度机制,并将调度机制推送至各省级供电单位数据库服务器,设置OracleJob的执行时间;
(4)、数据库服务器根据设定的调度机制定时执行监测规则,成功执行后,以密文方式存储数据监测规则执行信息和数据监测结果。
OracleJob根据设定的时间,定时发起对存储过程的调用,存储过程执行数据监测规则SQL语句,将执行记录和监测结果利用Oracle数据库提供的加密方法以密文方式存储在指定数据表;
(5)、数据监测服务器从数据库服务器抽取监测结果,并根据密钥将监测结果解密。
数据监测服务器从监测规则执行完毕的省级供电单位数据库抽取执行记录和监测结果,利用Oracle数据库提供的解密方法进行解密;
根据执行记录判断是否存在执行失败的数据监测规则,如果存在,对执行失败的规则重新设置调度机制并通知目标单位数据库重新执行;
(6)根据监测规则进行汇总统计,对数据监测结果按照用户要求进行汇总统计,通过报表方式展现给用户。
本实施例中,通过国网计量生产调度平台业务库将数据监测规则及调度机制下发给27个省级供电单位中间库数据库服务器,由这27个中间库数据库服务器负责调度执行数据监测规则,国网计量生产调度平台负责实时监视各中间库数据监测规则执行进度,将执行完成的执行记录和监测结果抽取到国网计量生产调度平台的业务库中,解密后进行汇总统计并展示给用户。
最后应当说明的是:以上实施例仅用以说明本申请的技术方案而非对其保护范围的限制,尽管参照上述实施例对本申请进行了详细的说明,所属领域的普通技术人员应当理解:本领域技术人员阅读本申请后依然可以对申请的具体实施方式进行种种变更、修改或者等同替换,但这些变更、修改或者等同替换,均在申请待批的权利要求保护范围之内。
Claims (8)
1.一种易扩展的规则定制化数据监测方法,其特征在于,所述方法包括以下步骤:
(1)初始化数据监测规则;
(2)将规则发送至数据库服务器;
(3)设置数据监测规则调度机制;
(4)定时执行监测规则,并将规则执行成功后的监测结果以密文方式存储;
(5)抽取监测结果,并将监测结果解密;
(6)根据监测规则进行汇总统计。
2.如权利要求1所述的一种易扩展的规则定制化数据监测方法,其特征在于,所述步骤(1)中,用具有初始化功能的数据监测服务器根据历史监测规则进行初始化,并根据监测要求对数据监测规则进行调整。
3.如权利要求1所述的一种易扩展的规则定制化数据监测方法,其特征在于,所述步骤(2)中,数据监测服务器用Oracle数据库的加密方法将加密的数据监测规则通过数据库的DatabaseLink方式发送至数据库服务器。
4.如权利要求1所述的一种易扩展的规则定制化数据监测方法,其特征在于,所述步骤(3)中,具有数据监测规则调度功能的数据监测服务器设置数据监测规则调度机制,并将该调度机制通知数据库服务器,设置OracleJob的执行时间。
5.如权利要求1所述的一种易扩展的规则定制化数据监测方法,其特征在于,所述步骤(4)中,数据库服务器定时且成功执行监测规则的执行记录和监测结果用Oracle数据库的加密方式加密,数据库服务器的OracleJob定时调用存储过程,将加密数据以密文方式存储在指定数据表中。
6.如权利要求1所述的一种易扩展的规则定制化数据监测方法,其特征在于,所述步骤(5)中,对监测结果的解密过程如下:
(a)、实时监控所有监测规则是否执行完成;
(b)、若执行完成,则抽取本次监测结果和规则执行信息;
(c)、抽取完成后利用Oracle数据库的解密方法解密。
7.如权利要求6所述的一种易扩展的规则定制化数据监测方法,其特征在于,根据执行记录判断是否存在执行失败的情况;若存在,则重新设置相关规则的调度机制并通知数据库服务器,重新执行步骤(3)至步骤(5)。
8.如权利要求1所述的一种易扩展的规则定制化数据监测方法,其特征在于,所述步骤(6)中,按照用户要求对数据监测结果进行汇总统计,以报表形式展现给用户。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510889130.XA CN105512567B (zh) | 2015-12-07 | 2015-12-07 | 一种易扩展的规则定制化数据监测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510889130.XA CN105512567B (zh) | 2015-12-07 | 2015-12-07 | 一种易扩展的规则定制化数据监测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105512567A true CN105512567A (zh) | 2016-04-20 |
CN105512567B CN105512567B (zh) | 2020-08-28 |
Family
ID=55720540
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510889130.XA Active CN105512567B (zh) | 2015-12-07 | 2015-12-07 | 一种易扩展的规则定制化数据监测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105512567B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6738757B1 (en) * | 1999-06-02 | 2004-05-18 | Workwise, Inc. | System for database monitoring and agent implementation |
CN101930585A (zh) * | 2010-09-01 | 2010-12-29 | 中国建设银行股份有限公司 | 一种授信业务风险监测系统及其方法 |
CN102298378A (zh) * | 2011-07-29 | 2011-12-28 | 深圳市科陆电子科技股份有限公司 | 一种工业园区有序用电管理系统及方法 |
CN102855319A (zh) * | 2012-09-05 | 2013-01-02 | 国家电网公司 | Oracle数据库操作监控系统 |
CN103108028A (zh) * | 2012-12-10 | 2013-05-15 | 江苏乐买到网络科技有限公司 | 一种具有安全架构的云计算处理系统 |
CN104536809A (zh) * | 2014-11-26 | 2015-04-22 | 上海瀚之友信息技术服务有限公司 | 一种基于客户端、服务器系统的分布式定时任务调度系统 |
CN104615617A (zh) * | 2014-05-13 | 2015-05-13 | 国家电网公司 | 一种变电站设备调度监控信息处理系统 |
-
2015
- 2015-12-07 CN CN201510889130.XA patent/CN105512567B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6738757B1 (en) * | 1999-06-02 | 2004-05-18 | Workwise, Inc. | System for database monitoring and agent implementation |
CN101930585A (zh) * | 2010-09-01 | 2010-12-29 | 中国建设银行股份有限公司 | 一种授信业务风险监测系统及其方法 |
CN102298378A (zh) * | 2011-07-29 | 2011-12-28 | 深圳市科陆电子科技股份有限公司 | 一种工业园区有序用电管理系统及方法 |
CN102855319A (zh) * | 2012-09-05 | 2013-01-02 | 国家电网公司 | Oracle数据库操作监控系统 |
CN103108028A (zh) * | 2012-12-10 | 2013-05-15 | 江苏乐买到网络科技有限公司 | 一种具有安全架构的云计算处理系统 |
CN104615617A (zh) * | 2014-05-13 | 2015-05-13 | 国家电网公司 | 一种变电站设备调度监控信息处理系统 |
CN104536809A (zh) * | 2014-11-26 | 2015-04-22 | 上海瀚之友信息技术服务有限公司 | 一种基于客户端、服务器系统的分布式定时任务调度系统 |
Also Published As
Publication number | Publication date |
---|---|
CN105512567B (zh) | 2020-08-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109040090B (zh) | 一种数据加密方法及装置 | |
CN102138300B (zh) | 消息认证码预计算在安全存储器中的应用 | |
CN100380274C (zh) | 用于对上下文加密密钥进行备份和恢复的方法和系统 | |
CN103927357B (zh) | 一种用于数据库的数据加密及检索方法 | |
CN102696045A (zh) | 用于执行设备的顺序化的系统和方法 | |
CN104506504B (zh) | 一种无卡终端涉密信息的存储方法及安全装置 | |
CN102625939A (zh) | 用于管理电子资产的系统和方法 | |
CN101593389A (zh) | 一种用于pos终端的密钥管理方法和系统 | |
CN102648471A (zh) | 用于基于硬件的安全的系统和方法 | |
US20170124329A1 (en) | Dynamic pre-boot storage encryption key | |
CN109034796A (zh) | 基于联盟链的交易监管方法、电子装置及可读存储介质 | |
CN104134022A (zh) | 一种基于图片的信息隐藏与保护方法 | |
CN102509034A (zh) | 一种软件许可控制装置及其方法 | |
CN103378971A (zh) | 一种数据加密系统及方法 | |
CN102111753A (zh) | 一种手机软件加密方法 | |
CN108537537A (zh) | 一种安全可信的数字货币钱包系统 | |
CN105678173A (zh) | 基于硬件事务内存的vTPM安全保护方法 | |
JP2023063430A5 (zh) | ||
CN100428262C (zh) | 一种基于改进的一次一密乱码本的软件保护方法 | |
CN105989482A (zh) | 一种数据加密方法 | |
CN104866738A (zh) | 一种程序代码保护方法及装置 | |
CN105512567A (zh) | 一种易扩展的规则定制化数据监测方法 | |
CN103577771A (zh) | 一种基于磁盘加密的虚拟桌面数据防泄漏保护技术 | |
Dong et al. | Food traceability system based on blockchain | |
CN1716850B (zh) | 对机顶盒芯片进行安全验证的方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |