CN111339063A - 假设数据智能管理方法、装置及计算机可读存储介 - Google Patents
假设数据智能管理方法、装置及计算机可读存储介 Download PDFInfo
- Publication number
- CN111339063A CN111339063A CN202010137669.0A CN202010137669A CN111339063A CN 111339063 A CN111339063 A CN 111339063A CN 202010137669 A CN202010137669 A CN 202010137669A CN 111339063 A CN111339063 A CN 111339063A
- Authority
- CN
- China
- Prior art keywords
- hypothesis
- information data
- log
- data set
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Mathematical Physics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种智能技术,揭露了一种假设数据智能管理方法,包括:获取原始信息数据集,对所述原始信息数据集执行假设计算并存储到预先建立的假设数据库中,利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,并生成所述目标信息数据集的查询日志和所述假设数据库的性能日志,提取所述查询日志和所述性能日志内的关键字得到日志关键字集,对所述日志关键字集进行异常判断得到日志判断结果并输出所述日志判断结果,根据所述日志判断结果,对所述目标信息数据集内的数据内容进行异常监控。本发明还提出一种假设数据智能管理装置、电子设备以及一种计算机可读存储介质。本发明可以解决数据的生成方法复杂并占用计算资源的问题。
Description
技术领域
本发明涉及人工智能技术领域,尤其涉及一种假设数据智能管理方法、装置、电子设备及计算机可读存储介质。
背景技术
随着大数据及人工智能的兴起,对于庞大的实际数据需求也越来越多,但因为实际数据需求庞大,导致有时无法及时获取实际数据,因此需要构建假设数据并对假设数据进行管理。
目前多数假设数据的生成方法复杂并占用计算资源,且假设数据在生成过程中,缺少对假设数据及存储假设数据的数据库的异常判断,进而导致很大可能影响到后续利用假设数据进行评估、计算等过程。
发明内容
本发明提供一种假设数据智能管理方法、装置、电子设备及计算机可读存储介质,其主要目的在于解决数据的生成方法复杂并占用计算资源的问题。
为实现上述目的,本发明提供的一种假设数据智能管理方法,包括:
获取原始信息数据集,根据预先构建的假设计算方法,对所述原始信息数据集执行假设计算得到假设信息数据集;
将所述假设信息数据集存储到预先建立的假设数据库中;
利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,并生成所述目标信息数据集的查询日志和所述假设数据库的性能日志;
提取所述查询日志和所述性能日志内的关键字得到日志关键字集,对所述日志关键字集进行异常判断得到日志判断结果并输出所述日志判断结果;
根据所述日志判断结果,对所述目标信息数据集内的数据内容进行异常监控。
可选地,所述预先构建的假设计算方法包括:
可选地,所述对所述原始信息数据集执行假设计算得到假设信息数据集,包括:
步骤A:预先设定所述假设计算的计算次数阈值;
步骤B:随机初始化预设系数,从所述原始信息数据集中提取原始信息数据;
步骤C:将随机初始化的所述预设系数和提取的所述原始信息数据作为所述假设计算方法的参数,并计算得到假设信息数据;
步骤D:统计计算得到所述假设信息数据的计算次数,判断所述计算次数是否大于所述计算次数阈值,若所述计算次数小于所述计算次数阈值,返回步骤B;
步骤E:若所述计算次数大于或等于所述计算次数阈值,汇集所有的假设信息数据得到所述假设信息数据集。
可选地,所述利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,包括:
在所述假设数据库划分出备份存储空间;
将所述假设信息数据集备份至所述备份存储空间;
运行所述目标查询语句,从所述备份存储空间中查询得到所述目标信息数据集。
可选地,所述提取所述查询日志和所述性能日志内的关键字得到日志关键字集,包括:
将所述目标信息数据集的查询日志和所述假设数据库的性能日志进行关键字对比遍历,得到日志遍历结果;
将所述日志遍历结果与预先建立的关键字集进行对比检索,对检索过程中所述日志遍历结果出现与预先建立的关键字集重合的部分进行提取,得到所述日志关键字集。
可选地,所述将假设信息数据集存储到预先建立的假设数据库包括:
将所述假设信息数据集进行镜像复制,得到镜像假设信息数据集;
将所述假设信息数据集存储至预先建立的假设数据库所在的本地端,将所述镜像假设信息数据集存储至所述假设数据库的服务器所在的异地端。
可选地,所述从所述假设数据库中查询得到目标信息数据集,包括:
运行所述目标查询语句,当所述目标查询语句运行成功时,从所述预先建立的假设数据库所在的本地端查询得到目标信息数据集;
当所述目标查询语句运行报错时,从所述预先建立的假设数据库所在的异地端查询得到目标信息数据集。
为了解决上述问题,本发明还提供一种假设数据智能管理装置,所述装置包括:
假设信息计算模块,用于获取原始信息数据集,根据预先构建的假设计算方法,对所述原始信息数据集执行假设计算得到假设信息数据集。
日志生成模块,用于将所述假设信息数据集存储到预先建立的假设数据库中,利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,并生成所述目标信息数据集的查询日志和所述假设数据库的性能日志。
日志内容判断模块,用于提取所述查询日志和所述性能日志内的关键字得到日志关键字集,对所述日志关键字集进行异常判断得到日志判断结果并输出所述日志判断结果。
数据管理模块,用于根据所述日志判断结果,对所述目标信息数据集内的数据内容进行异常监控。
为了解决上述问题,本发明还提供一种电子设备,所述电子设备包括:
存储器,存储至少一个指令;及
处理器,执行所述存储器中存储的指令以实现上述中任意一项所述的假设数据智能管理方法。
为了解决上述问题,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一个指令,所述至少一个指令被电子设备中的处理器执行以实现上述中任意一项所述的假设数据智能管理方法。
本发明较佳实施例获取原始信息数据集并根据预先构建的假设计算方法对原始信息数据集执行假设计算得到假设信息数据集,所述假设计算方法采用较简单的计算流程,因此假设数据的生成过程简单并少量占用计算资源;同时,利用预设的目标查询语句在存储假设信息数据集的数据库中进行查询,生成查询日志和性能日志,并对查询日志和性能日志进行异常判断,确保了假设数据及存储假设数据的数据库的安全性,为后续利用假设数据进行评估、计算等过程提供了保障。因此本发明提出的假设数据智能管理方法、装置及计算机可读存储介质,可以实现对存储系统的优化。
附图说明
图1为本发明一实施例提供的假设数据智能管理方法的流程示意图;
图2为本发明一实施例提供的假设数据智能管理方法的模块示意图
图3为本发明一实施例提供的假设数据智能管理方法的电子设备的内部结构示意图;
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供一种假设数据智能管理方法。参照图1所示,为本发明一实施例提供的假设数据智能管理方法的流程示意图。该方法可以由一个装置执行,该装置可以由软件和/或硬件实现。
在本实施例中,假设数据智能管理方法包括:
S1、获取原始信息数据集,根据预先构建的假设计算方法,对所述原始信息数据集执行假设计算得到假设信息数据集。
在本案的较佳实施例中,如某保险公司需要根据用户个人信息生成假设信息数据集,则所述用户个人信息即为所述原始信息数据集,所述用户个人信息可包含,但不限定于下述的四组数据集:投保人年龄(43,34,54,76),收入(5000,6000,10000,24560),受益人年龄(23,64,14,26),V为寿险产品类型(1,2,3,1)。
所述预先构建的假设计算方法包括:
如上述用户个人信息中,则f为所述投保人年龄,k为所述收入,C为所述受益人年龄,V为所述寿险产品类型。
详细地,所述对所述原始信息数据集执行假设计算得到假设信息数据集,包括:
步骤A:预先设定所述假设计算的计算次数阈值;
步骤B:随机初始化所述预设系数,从所述原始信息数据集中提取原始信息数据;
步骤C:将随机初始化的所述预设系数和提取的所述原始信息数据作为所述假设计算方法的参数,并计算得到假设信息数据;
步骤D:统计计算得到所述假设信息数据的计算次数,判断所述计算次数是否大于所述计算次数阈值,若所述计算次数小于所述计算次数阈值,返回步骤B;
步骤E:若所述计算次数大于或等于所述计算次数阈值,汇集所有的假设信息数据得到假设信息数据集。
如上实施例中,预先设定计算次数阈值为4,随机初始化所述预设系数λ=1,对上述用户原始信息数据集进行假设计算,统计假设计算得到所述假设信息数据的计算次数,判断所述计算次数是否大于所述计算次数阈值4,若所述计算次数小于所述计算次数阈值,则继续计算,若所述计算次数大于或等于所述计算次数阈值,则得到的保险类假设信息数据集X分别
S2、将所述假设信息数据集存储到预先建立的假设数据库。
所述假设数据库可采用当前已知的mysql、oracle、sqlserver、sqlite等。
详细地,所述S2包括:
将所述假设信息数据集进行镜像复制,得到镜像假设信息数据集;
将所述假设信息数据集存储至预先建立的假设数据库所在的本地端,将所述镜像假设信息数据集存储至所述假设数据库的服务器所在的异地端。
如上述保险类假设信息数据集X存储到假设数据库之前,先将保险类假设信息数据集X复制一份得到镜像保险类假设信息数据集X,将保险类假设信息数据集X存储到假设数据库内,通过寻址方法找到假设数据库的远端服务器,将镜像保险类假设信息数据集X存储到假设数据库的远端服务器,所述假设数据库的远端服务器即称为异地端。
S3、利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,并生成所述目标信息数据集的查询日志和所述假设数据库的性能日志。
详细地,所述利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,包括:
在所述假设数据库划分出备份存储空间,将所述假设信息数据集备份至所述备份存储空间,运行所述目标查询语句,从所述备份存储空间中查询得到所述目标信息数据集。
详细地,所述预设目标查询语句指的是用于查询假设数据库中假设信息数据集的查询编码规则,可以但不限于是一段程序语句。
如保险类假设信息数据集X中含有100组假设信息数据,将所述100组假设信息数据进行编号1-100,当用户所需查询的目标信息数据集为2-8时,执行预设的目标查询语句,将所述保险类假设信息数据集X中的2-8组假设信息数据查询出来,所述2-8组假设信息数据即为所述目标信息数据集。
较佳地,所述查询日志指的是运行目标查询语句时对所述目标信息数据集的类型、时间、发生位置等要素做标记记录的日志。
所述假设数据库的性能日志指的是对假设数据库运行的各个节点做性能上的标记记录的日志。
S4、提取所述查询日志和所述性能日志内的关键字得到日志关键字集,对所述日志关键字集进行异常判断得到日志判断结果并输出所述日志判断结果。
详细地,所述日志关键字集可以包括Time(时间)、Status(状态)、Details(描述信息)、Severity(警告级别)和Component(组件)等关键字;
所述对所述日志关键字集进行异常判断得到日志判断结果,指的是通过分析所述日志关键字集的Status(状态)、Details(描述信息)等属性找出查询日志某属性状态;
优选地,在本案的较佳实施例中,如查询日志目标属性为Time(时间)时,假设查询Time=0002423s时刻对应的查询日志的具体内容;
将Time=0002420s至Time=0002520s时间段,对应的查询日志内容为目标信息数据集A,提取所述目标信息数据集A中所述查询日志和所述性能日志内的关键字得到所述日志关键字集。
S5、根据所述日志判断结果,对所述目标信息数据集内的数据内容进行异常监控。
详细地,根据所述日志判断结果,对所述目标信息数据集内可能出现错误,报警的内容进行跟踪,修改。
如图2所示,是本发明假设数据智能管理装置的功能模块图。
本发明所述假设数据智能管理100可以安装于电子设备中。根据实现的功能,所述假设数据智能管理装置可以包括假设信息计算模块101、日志生成模块102、日志内容判断模块103和数据管理模块104。本发所述模块也可以称之为单元,是指一种能够被电子设备处理器所执行,并且能够完成固定功能的一系列计算机程序段,其存储在电子设备的存储器中。
在本实施例中,关于各模块/单元的功能如下:
假设信息计算模块101,用于获取原始信息数据集,根据预先构建的假设计算方法,对所述原始信息数据集执行假设计算得到假设信息数据集;
日志生成模块102,用于将所述假设信息数据集存储到预先建立的假设数据库中,利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,并生成所述目标信息数据集的查询日志和所述假设数据库的性能日志;
日志内容判断模块103,用于提取所述查询日志和所述性能日志内的关键字得到日志关键字集,对所述日志关键字集进行异常判断得到日志判断结果并输出所述日志判断结果;
数据管理模块104,用于根据所述日志判断结果,对所述目标信息数据集内的数据内容进行异常监控。
详细地,所述假设数据智能管理装置各模块的具体实施步骤如下:
所述假设信息计算模块101获取原始信息数据集,根据预先构建的假设计算方法,对所述原始信息数据集执行假设计算得到假设信息数据集。
在本案的较佳实施例中,如某保险公司需要根据用户个人信息生成假设信息数据集,则所述用户个人信息即为所述原始信息数据集,所述用户个人信息可包含,但不限定于下述的四组数据集:投保人年龄(43,34,54,76),收入(5000,6000,10000,24560),受益人年龄(23,64,14,26),V为寿险产品类型(1,2,3,1)。
所述预先构建的假设计算方法包括:
如上述用户个人信息中,则f为所述投保人年龄,k为所述收入,C为所述受益人年龄,V为所述寿险产品类型。
详细地,所述对所述原始信息数据集执行假设计算得到假设信息数据集,包括:
步骤A:预先设定所述假设计算的计算次数阈值;
步骤B:随机初始化所述预设系数,从所述原始信息数据集中提取原始信息数据;
步骤C:将随机初始化的所述预设系数和提取的所述原始信息数据作为所述假设计算方法的参数,并计算得到假设信息数据;
步骤D:统计计算得到所述假设信息数据的计算次数,判断所述计算次数是否大于所述计算次数阈值,若所述计算次数小于所述计算次数阈值,返回步骤B;
步骤E:若所述计算次数大于或等于所述计算次数阈值,汇集所有的假设信息数据得到假设信息数据集。
如上实施例中,预先设定计算次数阈值为4,随机初始化所述预设系数λ=1,对上述用户原始信息数据集进行假设计算,统计假设计算得到所述假设信息数据的计算次数,判断所述计算次数是否大于所述计算次数阈值4,若所述计算次数小于所述计算次数阈值,则继续计算,若所述计算次数大于或等于所述计算次数阈值,则得到的保险类假设信息数据集X分别
所述日志生成模块102将所述假设信息数据集存储到预先建立的假设数据库中,利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,并生成所述目标信息数据集的查询日志和所述假设数据库的性能日志。
所述假设数据库可采用当前已知的mysql、oracle、sqlserver、sqlite等。
详细地,所述将所述假设信息数据集存储到预先建立的假设数据库中包括:
将所述假设信息数据集进行镜像复制,得到镜像假设信息数据集;
将所述假设信息数据集存储至预先建立的假设数据库所在的本地端,将所述镜像假设信息数据集存储至所述假设数据库的服务器所在的异地端。
如上述保险类假设信息数据集X存储到假设数据库之前,先将保险类假设信息数据集X复制一份得到镜像保险类假设信息数据集X,将保险类假设信息数据集X存储到假设数据库内,通过寻址方法找到假设数据库的远端服务器,将镜像保险类假设信息数据集X存储到假设数据库的远端服务器,所述假设数据库的远端服务器即称为异地端。
所述利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,包括:
在所述假设数据库划分出备份存储空间,将所述假设信息数据集备份至所述备份存储空间,运行所述目标查询语句,从所述备份存储空间中查询得到所述目标信息数据集。
详细地,所述预设目标查询语句指的是用于查询假设数据库中假设信息数据集的查询编码规则,可以但不限于是一段程序语句。
如保险类假设信息数据集X中含有100组假设信息数据,将所述100组假设信息数据进行编号1-100,当用户所需查询的目标信息数据集为2-8时,执行预设的目标查询语句,将所述保险类假设信息数据集X中的2-8组假设信息数据查询出来,所述2-8组假设信息数据即为所述目标信息数据集。
较佳地,所述查询日志指的是运行目标查询语句时对所述目标信息数据集的类型、时间、发生位置等要素做标记记录的日志。
所述假设数据库的性能日志指的是对假设数据库运行的各个节点做性能上的标记记录的日志。
所述日志内容判断模块103提取所述查询日志和所述性能日志内的关键字得到日志关键字集,对所述日志关键字集进行异常判断得到日志判断结果并输出所述日志判断结果。
详细地,所述日志关键字集可以包括Time(时间)、Status(状态)、Details(描述信息)、Severity(警告级别)和Component(组件)等关键字;
所述对所述日志关键字集进行异常判断得到日志判断结果,指的是通过分析所述日志关键字集的Status(状态)、Details(描述信息)等属性找出查询日志某属性状态。
优选地,在本案的较佳实施例中,如查询日志目标属性为Time(时间)时,假设查询Time=0002423s时刻对应的查询日志的具体内容;
将Time=0002420s至Time=0002520s时间段,对应的查询日志内容为目标信息数据集A,提取所述目标信息数据集A中所述查询日志和所述性能日志内的关键字得到所述日志关键字集。
所述数据管理模块104根据所述日志判断结果,对所述目标信息数据集内的数据内容进行异常监控。
详细地,根据所述日志判断结果,对所述目标信息数据集内可能出现错误,报警的内容进行跟踪,修改。
如图3所示,是本发明实现假设数据智能管理方法的电子设备的结构示意图。
所述电子设备1可以包括处理器10、存储器11和总线,还可以包括存储在所述存储器11中并可在所述处理器10上运行的计算机程序,如本发明实施例中的假设数据智能管理程序12。
其中,所述存储器11至少包括一种类型的可读存储介质,所述可读存储介质包括闪存、移动硬盘、多媒体卡、卡型存储器(例如:SD或DX存储器等)、磁性存储器、磁盘、光盘等。所述存储器11在一些实施例中可以是电子设备1的内部存储单元,例如该电子设备1的移动硬盘。所述存储器11在另一些实施例中也可以是电子设备1的外部存储设备,例如电子设备1上配备的插接式移动硬盘、智能存储卡(Smart Media Card,SMC)、安全数字(SecureDigital,SD)卡、闪存卡(Flash Card)等。进一步地,所述存储器11还可以既包括电子设备1的内部存储单元也包括外部存储设备。所述存储器11不仅可以用于存储安装于电子设备1的应用软件及各类数据,例如假设数据智能管理程序12的代码等,还可以用于暂时地存储已经输出或者将要输出的数据。
所述处理器10在一些实施例中可以由集成电路组成,例如可以由单个封装的集成电路所组成,也可以是由多个相同功能或不同功能封装的集成电路所组成,包括一个或者多个中央处理器(Central Processing unit,CPU)、微处理器、数字处理芯片、图形处理器及各种控制芯片的组合等。所述处理器10是所述电子设备的控制核心(Control Unit),利用各种接口和线路连接整个电子设备的各个部件,通过运行或执行存储在所述存储器11内的程序或者模块(例如执行假设数据智能管理程序等),以及调用存储在所述存储器11内的数据,以执行电子设备1的各种功能和处理数据。
所述总线可以是外设部件互连标准(peripheral component interconnect,简称PCI)总线或扩展工业标准结构(extended industry standard architecture,简称EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。所述总线被设置为实现所述存储器11以及至少一个处理器10等之间的连接通信。
图3仅示出了具有部件的电子设备,本领域技术人员可以理解的是,图3示出的结构并不构成对所述电子设备1的限定,可以包括比图示更少或者更多的部件,或者组合某些部件,或者不同的部件布置。
例如,尽管未示出,所述电子设备1还可以包括给各个部件供电的电源(比如电池),优选地,电源可以通过电源管理装置与所述至少一个处理器10逻辑相连,从而通过电源管理装置实现充电管理、放电管理、以及功耗管理等功能。电源还可以包括一个或一个以上的直流或交流电源、再充电装置、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。所述电子设备1还可以包括多种传感器、蓝牙模块、Wi-Fi模块等,在此不再赘述。
进一步地,所述电子设备1还可以包括网络接口,可选地,所述网络接口可以包括有线接口和/或无线接口(如WI-FI接口、蓝牙接口等),通常用于在该电子设备1与其他电子设备之间建立通信连接。
可选地,该电子设备1还可以包括用户接口,用户接口可以是显示器(Display)、输入单元(比如键盘(Keyboard)),可选地,用户接口还可以是标准的有线接口、无线接口。可选地,在一些实施例中,显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-Emitting Diode,有机发光二极管)触摸器等。其中,显示器也可以适当的称为显示屏或显示单元,用于显示在电子设备1中处理的信息以及用于显示可视化的用户界面。
应该了解,所述实施例仅为说明之用,在专利申请范围上并不受此结构的限制。
所述电子设备1中的所述存储器11存储的假设数据智能管理程序12是多个指令的组合,在所述处理器10中运行时,可以实现:
获取原始信息数据集,根据预先构建的假设计算方法,对所述原始信息数据集执行假设计算得到假设信息数据集。
将所述假设信息数据集存储到预先建立的假设数据库中。
利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,并生成所述目标信息数据集的查询日志和所述假设数据库的性能日志。
提取所述查询日志和所述性能日志内的关键字得到日志关键字集,对所述日志关键字集进行异常判断得到日志判断结果并输出所述日志判断结果。
根据所述日志判断结果,对所述目标信息数据集内的数据内容进行异常监控。
具体地,所述处理器10对上述指令的具体实现方法可参考图2对应实施例中相关步骤的描述,在此不赘述。
进一步地,所述电子设备1集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)。
在本发明所提供的几个实施例中,应该理解到,所揭露的设备,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能模块的形式实现。
对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其他的具体形式实现本发明。
因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附关联图标记视为限制所涉及的权利要求。
此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。系统权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第二等词语用来表示名称,而并不表示任何特定的顺序。
最后应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神和范围。
Claims (10)
1.一种假设数据智能管理方法,其特征在于,所述方法包括:
获取原始信息数据集,根据预先构建的假设计算方法,对所述原始信息数据集执行假设计算得到假设信息数据集;
将所述假设信息数据集存储到预先建立的假设数据库中;
利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,并生成所述目标信息数据集的查询日志和所述假设数据库的性能日志;
提取所述查询日志和所述性能日志内的关键字得到日志关键字集,对所述日志关键字集进行异常判断得到日志判断结果并输出所述日志判断结果;
根据所述日志判断结果,对所述目标信息数据集内的数据内容进行异常监控。
3.如权利要求2所述的假设数据智能管理方法,其特征在于,所述对所述原始信息数据集执行假设计算得到假设信息数据集,包括:
步骤A:预先设定所述假设计算的计算次数阈值;
步骤B:随机初始化预设系数,从所述原始信息数据集中提取原始信息数据;
步骤C:将随机初始化的所述预设系数和提取的所述原始信息数据作为所述假设计算方法的参数,并计算得到假设信息数据;
步骤D:统计计算得到所述假设信息数据的计算次数,判断所述计算次数是否大于所述计算次数阈值,若所述计算次数小于所述计算次数阈值,返回步骤B;
步骤E:若所述计算次数大于或等于所述计算次数阈值,汇集所有的假设信息数据得到所述假设信息数据集。
4.如权利要求1所述的假设数据智能管理方法,其特征在于,所述利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,包括:
在所述假设数据库划分出备份存储空间;
将所述假设信息数据集备份至所述备份存储空间;
运行所述目标查询语句,从所述备份存储空间中查询得到所述目标信息数据集。
5.如权利要求1所述的假设数据智能管理方法,其特征在于,所述提取所述查询日志和所述性能日志内的关键字得到日志关键字集,包括:
将所述目标信息数据集的查询日志和所述假设数据库的性能日志进行关键字对比遍历,得到日志遍历结果;
将所述日志遍历结果与预先建立的关键字集进行对比检索,对检索过程中所述日志遍历结果出现与预先建立的关键字集重合的部分进行提取,得到所述日志关键字集。
6.如权利要求1所述的假设数据智能管理方法,其特征在于,所述将假设信息数据集存储到预先建立的假设数据库包括:
将所述假设信息数据集进行镜像复制,得到镜像假设信息数据集;
将所述假设信息数据集存储至预先建立的假设数据库所在的本地端,将所述镜像假设信息数据集存储至所述假设数据库的服务器所在的异地端。
7.如权利要求6所述的假设数据智能管理方法,其特征在于,所述从所述假设数据库中查询得到目标信息数据集,包括:
运行所述目标查询语句,当所述目标查询语句运行成功时,从所述预先建立的假设数据库所在的本地端查询得到目标信息数据集;
当所述目标查询语句运行报错时,从所述预先建立的假设数据库所在的异地端查询得到目标信息数据集。
8.一种假设数据智能管理装置,其特征在于,所述装置包括:
假设信息计算模块,用于获取原始信息数据集,根据预先构建的假设计算方法,对所述原始信息数据集执行假设计算得到假设信息数据集;
日志生成模块,用于将所述假设信息数据集存储到预先建立的假设数据库中,利用预设的目标查询语句,从所述假设数据库中查询得到目标信息数据集,并生成所述目标信息数据集的查询日志和所述假设数据库的性能日志;
日志内容判断模块,用于提取所述查询日志和所述性能日志内的关键字得到日志关键字集,对所述日志关键字集进行异常判断得到日志判断结果并输出所述日志判断结果;
数据管理模块,用于根据所述日志判断结果,对所述目标信息数据集内的数据内容进行异常监控。
9.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如权利要求1至7中任一所述的假设数据智能管理方法。
10.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7中任一所述的假设数据智能管理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010137669.0A CN111339063A (zh) | 2020-03-02 | 2020-03-02 | 假设数据智能管理方法、装置及计算机可读存储介 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010137669.0A CN111339063A (zh) | 2020-03-02 | 2020-03-02 | 假设数据智能管理方法、装置及计算机可读存储介 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111339063A true CN111339063A (zh) | 2020-06-26 |
Family
ID=71184418
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010137669.0A Pending CN111339063A (zh) | 2020-03-02 | 2020-03-02 | 假设数据智能管理方法、装置及计算机可读存储介 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111339063A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112783900A (zh) * | 2021-02-25 | 2021-05-11 | 百果园技术(新加坡)有限公司 | 数据库管理方法、装置、设备及存储介质 |
-
2020
- 2020-03-02 CN CN202010137669.0A patent/CN111339063A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112783900A (zh) * | 2021-02-25 | 2021-05-11 | 百果园技术(新加坡)有限公司 | 数据库管理方法、装置、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112541338A (zh) | 相似文本匹配方法、装置、电子设备及计算机存储介质 | |
CN111930962A (zh) | 文献数据价值评估方法、装置、电子设备及存储介质 | |
CN113918361A (zh) | 基于物联网规则引擎的终端控制方法、装置、设备及介质 | |
CN114138784A (zh) | 基于存储库的信息溯源方法、装置、电子设备及介质 | |
CN115543198A (zh) | 非结构化数据入湖方法、装置、电子设备及存储介质 | |
CN111339072A (zh) | 基于用户行为的变化值分析方法、装置、电子设备及介质 | |
CN115203435A (zh) | 基于知识图谱的实体关系生成方法及数据查询方法 | |
CN113434542A (zh) | 数据关系识别方法、装置、电子设备及存储介质 | |
CN113869456A (zh) | 采样监测方法、装置、电子设备及存储介质 | |
CN111339063A (zh) | 假设数据智能管理方法、装置及计算机可读存储介 | |
CN111858604B (zh) | 数据存储方法、装置、电子设备及存储介质 | |
CN112948380A (zh) | 基于大数据的数据存储方法、装置、电子设备及存储介质 | |
CN112464619A (zh) | 大数据处理方法、装置、设备及计算机可读存储介质 | |
CN111950707A (zh) | 基于行为共现网络的行为预测方法、装置、设备及介质 | |
CN111429085A (zh) | 合同数据生成方法、装置、电子设备及存储介质 | |
CN114816371B (zh) | 消息处理方法、装置、设备及介质 | |
CN115062023A (zh) | 宽表优化方法、装置、电子设备及计算机可读存储介质 | |
CN114490137A (zh) | 业务数据实时统计方法、装置、电子设备及可读存储介质 | |
CN113419718A (zh) | 数据报送方法、装置、设备及介质 | |
CN113204962A (zh) | 基于图扩展结构的词义消歧方法、装置、设备及介质 | |
CN112506931A (zh) | 数据查询方法、装置、电子设备及存储介质 | |
CN111930961A (zh) | 竞争性关系分析方法、装置、电子设备及存储介质 | |
CN111652741A (zh) | 用户偏好分析方法、装置及可读存储介质 | |
CN113434365B (zh) | 数据特征监控方法、装置、电子设备及存储介质 | |
CN112328960B (zh) | 数据运算的优化方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |