CN117056343B - 一种电网领域多源数据管理方法、系统和电子设备 - Google Patents
一种电网领域多源数据管理方法、系统和电子设备 Download PDFInfo
- Publication number
- CN117056343B CN117056343B CN202311307854.XA CN202311307854A CN117056343B CN 117056343 B CN117056343 B CN 117056343B CN 202311307854 A CN202311307854 A CN 202311307854A CN 117056343 B CN117056343 B CN 117056343B
- Authority
- CN
- China
- Prior art keywords
- grid domain
- domain data
- target
- power grid
- data table
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 238000013523 data management Methods 0.000 title claims description 30
- 150000001875 compounds Chemical class 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 10
- 238000004590 computer program Methods 0.000 description 7
- 230000010354 integration Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Economics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Water Supply & Treatment (AREA)
- Marketing (AREA)
- Software Systems (AREA)
- Public Health (AREA)
- Mathematical Physics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Computational Linguistics (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本公开提供了一种电网领域多源数据管理方法、系统和电子设备,其中该方法包括:确定目标主电网领域数据表和至少一个目标附电网领域数据表;根据目标主电网领域数据表的数据结构和全部目标附电网领域数据表的数据结构,生成虚拟电网领域数据池的数据规则描述文件;根据数据规则描述文件生成与虚拟电网领域数据池相对应的目标SQL查询模板,目标SQL查询模板包括:SELECT语句部分、FROM语句部分和WHERE语句部分,且SELECT语句部分内指定的查询字段为空,FROM语句部分内指定的查询数据表为目标主电网领域数据表和目标附电网领域数据表,WHERE语句部分内指定目标主电网领域数据表的主索引键与目标附电网领域数据表中的相关键建立关联。
Description
技术领域
本公开涉及计算机技术领域,特别涉及一种电网领域多源数据管理方法、系统和电子设备。
背景技术
电网领域数据具有多数据源的特点,其中针对不同数据源的数据分别建立有对应的数据表来进行数据存储。在一些特定应用场景中,需要将不同数据源的数据进行整合以便于用户的访问和后续操作;目前一般所采用的数据整合方法是将需要进行整合的至少两个数据表中的数据全部拷贝到同一个预设整合数据表中,以实现数据整合。然而,这种数据整合方案会存在如下问题:1)引用新的整合数据表,会导致成本增加;2)在进行数据拷贝过程中,数据的安全性和隐私存在风险。
发明内容
本公开旨在至少解决现有技术中存在的技术问题之一,提出了一种电网领域多源数据管理方法、系统和电子设备。
第一方面,本公开实施例提供了一种电网领域多源数据管理方法,包括:
根据用户的选择操作,确定目标主电网领域数据表和至少一个目标附电网领域数据表,所述目标主电网领域数据表和全部所述目标附电网领域数据表所包含的全部电网领域数据形成虚拟电网领域数据池;
根据所述目标主电网领域数据表的数据结构和全部所述目标附电网领域数据表的数据结构,生成所述虚拟电网领域数据池的数据规则描述文件,所述数据规则描述文件中记载有所述目标主电网领域数据表的表名、所述目标主电网领域数据表的主索引键、所述目标主电网领域数据表中的条件字段、所述目标附电网领域数据表的表名、所述目标附电网领域数据表中能够与所述主索引键进行关联的相关键、所述目标附电网领域数据表中的条件字段;
根据所述数据规则描述文件生成与所述虚拟电网领域数据池相对应的目标SQL查询模板,以供用户基于所述目标SQL查询模板对所述虚拟电网领域数据池进行数据查询,所述目标SQL查询模板包括:SELECT语句部分、FROM语句部分和WHERE语句部分,且在所述SQL查询模板中SELECT语句部分内指定的查询字段为空,FROM语句部分内指定的查询数据表为目标主电网领域数据表和所述目标附电网领域数据表,WHERE语句部分内指定所述目标主电网领域数据表的主索引键与所述目标附电网领域数据表中的相关键建立关联。
在一些实施例中,所述目标SQL查询模板还包括:AND语句部分,且在所述SQL查询模板中所述AND语句部分内指定的复合查询条件为空。
在一些实施例中,根据用户的选择操作,确定目标主电网领域数据表和至少一个目标附电网领域数据表的步骤包括:
提供主电网领域数据表列表;
响应于用户对主电网领域数据表列表的选择操作,确定用户所选择的一个目标主电网领域数据表;
根据所述目标主电网领域数据表生成对应的附电网领域数据表列表,所述附电网领域数据表列表包括能够与所述目标主电网领域数据表中的主索引键进行关联的至少一个附电网领域数据表;
响应于用户对附电网领域数据表列表的选择操作,确定用户所选择的至少一个目标附电网领域数据表。
在一些实施例中,在根据所述数据规则描述文件生成与所述虚拟电网领域数据池相对应的目标SQL查询模板的步骤之后,还包括:
将所述目标SQL查询模板存储至预设SQL模板库内。
在一些实施例中,在根据所述数据规则描述文件生成与所述虚拟电网领域数据池相对应的目标SQL查询模板的步骤之后,还包括:
响应于用户调用所述目标SQL查询模板,根据所述目标SQL查询模板中的FROM语句部分所指定的查询数据表为目标主电网领域数据表和所述目标附电网领域数据表,生成所述目标SQL查询模板所对应的可查询字段列表,所述目标SQL查询模板所对应的可查询字段列表包括所述目标主电网领域数据表和所述目标附电网领域数据表中的所有条件字段以及所述目标主电网领域数据表中主索引键。
响应于用户对所可查询字段列表的选择操作,将用户所选择的目标查询字段添加至所述目标SQL查询模板的SELECT语句部分内;
根据添加有所述目标查询字段的所述目标SQL查询模板生成可执行的目标SQL语句;
执行所述目标SQL语句以对所述虚拟电网领域数据池进行数据查询;
将查询结果进行展示。
在一些实施例中,在执行所述目标SQL语句以对所述虚拟电网领域数据池进行数据查询的步骤之后,还包括:
将查询结果以CSV格式或JSON格式进行导出。
在一些实施例中,还包括:
从不同电网领域数据源处接收电网领域数据记录,并将各所述电网领域数据记录分别存储至预设的电网领域数据表库内对应的电网领域数据表中,所述电网领域数据表库包括多个电网领域数据表,所述多个电网领域数据表包括:多个主电网领域数据表和多个附电网领域数据表。
在一些实施例中,在将目标电网领域数据记录写入至对应的附电网领域数据表中时,检测所述目标电网领域数据记录在所写入的附电网领域数据表内对应于各相关键的值是否为空;
若检测出所述目标电网领域数据记录在所写入的附电网领域数据表内对应于至少一个相关键的值为空,则在所写入的附电网领域数据表内为所述目标电网领域数据对应于相关键为空的部分添加数据。
第二方面,本公开实施例还提供了一种电网领域多源数据管理系统,可用于实现如第一方面中所提供的所述电网领域多源数据管理方法,所述电网领域多源数据管理系统包括:
确定模块,用于根据用户的选择操作,确定目标主电网领域数据表和至少一个目标附电网领域数据表,所述目标主电网领域数据表和全部所述目标附电网领域数据表所包含的全部电网领域数据形成虚拟电网领域数据池;
描述文件生成模块,用于根据所述目标主电网领域数据表的数据结构和全部所述目标附电网领域数据表的数据结构,生成所述虚拟电网领域数据池的数据规则描述文件,所述数据规则描述文件中记载有所述目标主电网领域数据表的表名、所述目标主电网领域数据表的主索引键、所述目标主电网领域数据表中的条件字段、所述目标附电网领域数据表的表名、所述目标附电网领域数据表中能够与所述主索引键进行关联的相关键、所述目标附电网领域数据表中的条件字段;
模板生成模块,用于根据所述数据规则描述文件生成与所述虚拟电网领域数据池相对应的目标SQL查询模板,以供用户基于所述目标SQL查询模板对所述虚拟电网领域数据池进行数据查询,所述目标SQL查询模板包括:SELECT语句部分、FROM语句部分和WHERE语句部分,且在所述SQL查询模板中SELECT语句部分内指定的查询字段为空,FROM语句部分内指定的查询数据表为目标主电网领域数据表和所述目标附电网领域数据表,WHERE语句部分内指定所述目标主电网领域数据表的主索引键与所述目标附电网领域数据表中的相关键建立关联。
第三方面,本公开实施例还提供了一种电子设备,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如第一方面提供的所述电网领域多源数据管理方法。
附图说明
图1为本公开实施例提供的电网领域多源数据管理方法的一种流程图;
图2为本公开实施例提供的电网领域多源数据管理方法的另一种流程图;
图3为本公开所提供的电网领域多源数据管理方法的一种示例图;
图4为本公开实施例提供的电网领域多源数据管理系统的一种结构框图;
图5为本公开实施例的一种电子设备的结构示意图。
具体实施方式
为使本领域技术人员更好地理解本公开的技术方案,下面结合附图和具体实施方式对本公开作进一步详细描述。
除非另外定义,本公开使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。本公开中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性,而只是用来区分不同的组成部分。同样,“一个”、“一”或者“该”等类似词语也不表示数量限制,而是表示存在至少一个。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同,而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电性的连接,不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系,当被描述目标的绝对位置改变后,则该相对位置关系也可能相应地改变。
图1为本公开实施例提供的电网领域多源数据管理方法的一种流程图。如图1所示,该电网领域多源数据管理方法包括:
步骤S1、根据用户的选择操作,确定目标主电网领域数据表和至少一个目标附电网领域数据表。
其中,目标主电网领域数据表和全部目标附电网领域数据表所包含的全部电网领域数据形成虚拟电网领域数据池。需要说明的是,虚拟电网领域数据池并不是一个真实存在的数据池,其仅表示目标主电网领域数据表和全部目标附电网领域数据表中包包含数据的集合,故本公开的技术方案中并不存在数据拷贝过程。
步骤S2、根据目标主电网领域数据表的数据结构和全部目标附电网领域数据表的数据结构,生成虚拟电网领域数据池的数据规则描述文件。
其中,数据规则描述文件中记载有目标主电网领域数据表的表名、目标主电网领域数据表的主索引键、目标主电网领域数据表中的条件字段、目标附电网领域数据表的表名、目标附电网领域数据表中能够与主索引键进行关联的相关键、目标附电网领域数据表中的条件字段。
步骤S3、根据数据规则描述文件生成与虚拟电网领域数据池相对应的目标SQL查询模板,以供用户基于目标SQL查询模板对虚拟电网领域数据池进行数据查询。
其中,目标SQL查询模板包括:SELECT语句部分、FROM语句部分和WHERE语句部分,且在SQL查询模板中SELECT语句部分内指定的查询字段为空,FROM语句部分内指定的查询数据表为目标主电网领域数据表和目标附电网领域数据表,WHERE语句部分内指定目标主电网领域数据表的主索引键与目标附电网领域数据表中的相关键建立关联。
本公开的技术方案可应用于电网领域多源数据管理系统(后文简称为“系统”),该系统内设置有电网领域数据表库表,系统可以从不同数据源处获取相应的电网领域数据并存储到相应的数据表中。例如,用于存储电网领域科技项目信息的项目信息数据表、用于存储电网领域科技成果信息的成果信息数据表、用于存储电网领域知识产权信息的知识产权信息数据表、用于存储电网领域科技奖励信息的奖励信息数据表等,此处不一一举例。
在本公开实施例中,根据实际需要将系统中的某些电网领域数据表定义为主电网领域数据表(一般地,会将记录有电网领域基础信息的数据表设计为主电网领域数据表),每个主电网领域数据表配置有对应的至少一个附电网领域数据表。主电网领域数据表中配置有唯一的主索引键(index key,也称为主键或主索引字段),该主电网领域数据表所对应的各附电网领域数据表中配置有能够与所对应的主电网领域数据表的主索引建建立联系的相关键(relevant key)。
需要说明的是,每个附电网领域数据表可以对应1个或多个主电网领域数据表,故每个附电网领域数据表中的相关键的数量可以为1个或多个相关键。
在本公开中,通过根据用户所选择的目标主电网领域数据表与目标附电网领域数据表的数据结构,生成对应的数据规则描述文件,然后根据数据规则描述文件生成对应的目标SQL查询模板,该目标SQL查询模板中的FROM语句部分已指定了数据查询范围为目标主电网领域数据表和目标附电网领域数据表,WHERE语句部分将目标主电网领域数据表的主索引键与目标附电网领域数据表中的相关键建立关联,基于该目标SQL查询模板,可在不拷贝数据的情况下,实现对虚拟电网领域数据池的数据查询。
基于上述内容可见,本公开中所生成的SQL查询模板,其在一定程度上实现了将目标主电网领域数据表与目标附电网领域数据表的数据整合,且数据整合过程无需进行数据拷贝,能够在一定程度上保证数据的安全性和隐私性。
在一些实施例中,目标SQL查询模板还包括:AND语句部分,且在SQL查询模板中AND语句部分内指定的复合查询条件为空。在目标SQL查询模板设置AND语句部分,可以实现对虚拟电网领域数据池的复合查询。
图2为本公开实施例提供的电网领域多源数据管理方法的另一种流程图。如图2所示,该电网领域多源数据管理方法为基于图1所示方法的一种具体化可选实施方案,包括:
步骤S101、提供主电网领域数据表列表。
其中,主电网领域数据表列表中包括在系统中预先设定的多个主电网领域数据表。
步骤S102、响应于用户对主电网领域数据表列表的选择操作,确定用户所选择的一个目标主电网领域数据表。
用户可根据实际需要,从主电网领域数据表列表中选择一个主电网领域数据表作为目标主电网领域数据表。
步骤S103、根据目标主电网领域数据表生成对应的附电网领域数据表列表,附电网领域数据表列表包括能够与目标主电网领域数据表中的主索引键进行关联的至少一个附电网领域数据表。
系统根据用户所选择目标主电网领域数据表,以及预先存储主-副对应关系表中确定出与目标主电网领域数据表相对应的各附电网领域数据表,然后以附电网领域数据表列表进行展示。
主-副对应关系表中记载有不同主电网领域数据表及其所对应的附电网领域数据表的关联信息,其中关联信息中记载有主电网领域数据表的表名、主索引键以及与该主电网领域数据表所对应的各附电网领域数据表的表名、能够与主索引键进行关联的相关键。
步骤S104、响应于用户对附电网领域数据表列表的选择操作,确定用户所选择的至少一个目标附电网领域数据表。
用户可根据实际需要,从附电网领域数据表列表中选择一个或多个附电网领域数据表作为目标主电网领域数据表。
步骤S2、根据目标主电网领域数据表的数据结构和全部目标附电网领域数据表的数据结构,生成虚拟电网领域数据池的数据规则描述文件。
数据规则描述文件中记载有目标主电网领域数据表的表名、目标主电网领域数据表的主索引键、目标主电网领域数据表中的条件字段、目标附电网领域数据表的表名、目标附电网领域数据表中能够与主索引键进行关联的相关键、目标附电网领域数据表中的条件字段。
其中,所谓的条件字段是指数据表中可供用户进行筛选操作的字段。其中,可以将数据表中的部分字段作为条件字段,或者将数据表中的每一个字段均作为条件字段,具体可根据需要进行预先设定。
步骤S3、根据数据规则描述文件生成与虚拟电网领域数据池相对应的目标SQL查询模板。
步骤S4、将目标SQL查询模板存储至预设SQL模板库内。
也就是说,特定的应用场景,用户可以选择相应的主电网领域数据表和所对应的至少一个附电网领域数据表进行组合“数据整合”,并得到对应的SQL查询模板;后续在面对相同的应用场景时,仅需从预设SQL模板库调取相应SQL查询模板进行使用即可,无需再重复前述生成SQL查询模板的过程。
步骤S5、响应于用户调用目标SQL查询模板,根据目标SQL查询模板中的FROM语句部分所指定的查询数据表为目标主电网领域数据表和目标附电网领域数据表,生成目标SQL查询模板所对应的可查询字段列表。
其中,目标SQL查询模板所对应的可查询字段列表包括目标主电网领域数据表和目标附电网领域数据表中的所有条件字段以及目标主电网领域数据表中主索引键。
步骤S6、响应于用户对所可查询字段列表的选择操作,将用户所选择的目标查询字段添加至目标SQL查询模板的SELECT语句部分内。
步骤S7、根据添加有目标查询字段的目标SQL查询模板生成可执行的目标SQL语句。
需要说明的是,当目标SQL查询模板还包括AND语句部分时,在步骤S6结束后且在步骤S7之前,向用户提供输入复合查询条件的输入口,以供用户输入复合查询条件,并将用户所输入的复合查询条件添加至AND语句部分内。
步骤S8、执行目标SQL语句以对虚拟电网领域数据池进行数据查询。
步骤S9、将查询结果进行展示。
在一些实施例中,在步骤S9之后,还包括:步骤S10。
步骤S10、将查询结果以CSV格式或JSON格式进行导出。
通过将查询结果导出,可便于用户基于查询结果作后续操作,例如基于查询结果进行数据统计分析操作或者作进一步数据筛选操作等。
在一些实施例中,该电网领域多源数据管理方法不但包括前面实施例中的步骤(不但可以包括前面实施例中的步骤S1~步骤S3,还可以包括前面实施例中的步骤S4~S11中的至少部分步骤),且还包括如下步骤:
S01、从不同电网领域数据源处接收电网领域数据记录,并将各电网领域数据记录分别存储至预设的电网领域数据表库内对应的电网领域数据表中。
其中,电网领域数据表库包括多个电网领域数据表,多个电网领域数据表包括:多个主电网领域数据表和多个附电网领域数据表。具体内容可参见前面描述。
在一些实施例中,在将目标电网领域数据记录写入至对应的附电网领域数据表中时,检测目标电网领域数据记录在所写入的附电网领域数据表内对应于各相关键的值是否为空。
若检测出目标电网领域数据记录在所写入的附电网领域数据表内对应于至少一个相关键的值为空,则在所写入的附电网领域数据表内为目标电网领域数据对应于相关键为空的部分添加数据;其中,可以由人工或系统自动来添加相应数据。
若检测出目标电网领域数据记录在所写入的附电网领域数据表内对应的所有相关键的值不为空,则表明该目标电网领域数据完整,无需进行数据添加。
上述步骤可以有效保证主电网领域数据表与其所对应附电网领域数据表进行数据整合过程的稳定性。
为便于更好的理解本公开的技术方案,下面将结合一个具体示例作详细描述。图3为本公开所提供的电网领域多源数据管理方法的一种示例图。如图3所示,大致过程如下:
首先,系统提供主电网领域数据表列表,用户根据自身需要从主电网领域数据表列表中选择了“项目信息”数据表。
然后,系统根据用户的选择,生成对应的附电网领域数据表列表,用户根据自身需要从附电网领域数据表列表中选择了“知识产权信息”数据表。
此后,系统根据用户所选择的“项目信息”数据表(目标主电网领域数据表)和“知识产权信息”数据表(目标附电网领域数据表),生成对应的数据规则描述文件,该数据规则描述文件中记载有数据规则描述文件中记载有项目信息数据表的相关信息:表名(“t_project_info”)、主索引键(“id”)、条件字段(“project_responsible_department”“project_year”“project_type”);数据规则描述文件中还记载有知识产权信息数据表的相关信息:表名(t_project_info)、与项目信息数据表的主索引键能够建立联系的相关键(project_id)、条件字段(“ip_ownner”“ip_granded_year”“ip_type”);
接着,系统根据数据规则描述文件生成对应的SQL查询模板,命名为tmplate_1。其中,SQL查询模板中的SELECT语句部分内指定的查询字段为空、FROM语句部分内指定的查询数据表为“项目信息”数据表(定义为t1)和“知识产权信息”数据表(定位为t2),WHERE语句部分内指定“项目信息”数据表中的主索引键(t1.id)与“知识产权信息”数据表中的相关键(t2.project_id)建立关联,即t1.id=t2.project_id; AND语句部分内指定的复合查询条件为空。
接着,将SQL查询模板tmplate_1存储至预设SQL模板库内。
后续,在用户调用SQL查询模板tmplate_1时,系统根据SQL查询模板tmplate_1中的FROM语句部分生成对应的可查询字段列表,供用户进行选择。也可以,在用户选择完查询字段后,给用户提供复合查询条件的输入口,以供用户输入复合查询条件。
再接着,根据SQL查询模版以及用户所选择的查询字段(也可以包含用户输入复合查询条件),生成可执行的SQL语句。
最后,执行SQL语句以进行数据查询,并将结果展示。如有需要,可将结构以指定格式导出。
基于同一发明构思,本公开实施例提供了一种电网领域多源数据管理系统。图4为本公开实施例提供的电网领域多源数据管理系统的一种结构框图。如图4所示,该电网领域多源数据管理系统可用于实现前面实施例提供的电网领域多源数据管理方法,该电网领域多源数据管理系统包括:确定模块1、描述文件生成模块2和模板生成模块3。
其中,确定模块1用于根据用户的选择操作,确定目标主电网领域数据表和至少一个目标附电网领域数据表,目标主电网领域数据表和全部目标附电网领域数据表所包含的全部电网领域数据形成虚拟电网领域数据池。
描述文件生成模块2用于根据目标主电网领域数据表的数据结构和全部目标附电网领域数据表的数据结构,生成虚拟电网领域数据池的数据规则描述文件,数据规则描述文件中记载有目标主电网领域数据表的表名、目标主电网领域数据表的主索引键、目标主电网领域数据表中的条件字段、目标附电网领域数据表的表名、目标附电网领域数据表中能够与主索引键进行关联的相关键、目标附电网领域数据表中的条件字段。
模板生成模块3用于根据数据规则描述文件生成与虚拟电网领域数据池相对应的目标SQL查询模板,以供用户基于目标SQL查询模板对虚拟电网领域数据池进行数据查询,目标SQL查询模板包括:SELECT语句部分、FROM语句部分和WHERE语句部分,且在SQL查询模板中SELECT语句部分内指定的查询字段为空,FROM语句部分内指定的查询数据表为目标主电网领域数据表和目标附电网领域数据表,WHERE语句部分内指定目标主电网领域数据表的主索引键与目标附电网领域数据表中的相关键建立关联。
基于同一发明构思,本公开实施例还提供了一种电子设备。图5为本公开实施例的一种电子设备的结构示意图,如图5所示,本公开实施例提供一种电子设备包括:一个或多个处理器101、存储器102、一个或多个I/O接口103。存储器102上存储有一个或多个程序,当该一个或多个程序被该一个或多个处理器执行,使得该一个或多个处理器实现如上述实施例中任一的电网领域多源数据管理方法;一个或多个I/O接口103连接在处理器与存储器之间,配置为实现处理器与存储器的信息交互。
其中,处理器101为具有数据处理能力的器件,包括但不限于中央处理器(CPU)等;存储器102为具有数据存储能力的器件,包括但不限于随机存取存储器(RAM,更具体如SDRAM、DDR等)、只读存储器(ROM)、带电可擦可编程只读存储器(EEPROM)、闪存(FLASH);I/O接口(读写接口)103连接在处理器101与存储器102间,能实现处理器101与存储器102的信息交互,包括但不限于数据总线(Bus)等。
在一些实施例中,处理器101、存储器102和I/O接口103通过总线104相互连接,进而与计算设备的其它组件连接。
在一些实施例中,该一个或多个处理器101包括现场可编程门阵列。
根据本公开的实施例,还提供一种计算机可读介质。该计算机可读介质上存储有计算机程序,其中,该程序被处理器执行时实现如上述实施例中任一的电网领域多源数据管理方法中的步骤。
特别地,根据本公开实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,包括承载在机器可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分从网络上被下载和安装,和/或从可拆卸介质被安装。在该计算机程序被中央处理单元(CPU)执行时,执行本公开的系统中限定的上述功能。
需要说明的是,本公开所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,前述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的电路或子电路可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的电路或子电路也可以设置在处理器中,例如,可以描述为:一种处理器,包括:接收电路和处理电路,该处理模块包括写入子电路和读取子电路。其中,这些电路或子电路的名称在某种情况下并不构成对该电路或子电路本身的限定,例如,接收电路还可以被描述为“接收视频信号”。
可以理解的是,以上实施方式仅仅是为了说明本公开的原理而采用的示例性实施方式,然而本公开并不局限于此。对于本领域内的普通技术人员而言,在不脱离本公开的精神和实质的情况下,可以做出各种变型和改进,这些变型和改进也视为本公开的保护范围。
Claims (9)
1.一种电网领域多源数据管理方法,其特征在于,包括:
根据用户的选择操作,确定目标主电网领域数据表和至少一个目标附电网领域数据表,所述目标主电网领域数据表和全部所述目标附电网领域数据表所包含的全部电网领域数据形成虚拟电网领域数据池;
根据所述目标主电网领域数据表的数据结构和全部所述目标附电网领域数据表的数据结构,生成所述虚拟电网领域数据池的数据规则描述文件,所述数据规则描述文件中记载有所述目标主电网领域数据表的表名、所述目标主电网领域数据表的主索引键、所述目标主电网领域数据表中的条件字段、所述目标附电网领域数据表的表名、所述目标附电网领域数据表中能够与所述主索引键进行关联的相关键、所述目标附电网领域数据表中的条件字段;
根据所述数据规则描述文件生成与所述虚拟电网领域数据池相对应的目标SQL查询模板,以供用户基于所述目标SQL查询模板对所述虚拟电网领域数据池进行数据查询,所述目标SQL查询模板包括:SELECT语句部分、FROM语句部分和WHERE语句部分,且在所述SQL查询模板中SELECT语句部分内指定的查询字段为空,FROM语句部分内指定的查询数据表为目标主电网领域数据表和所述目标附电网领域数据表,WHERE语句部分内指定所述目标主电网领域数据表的主索引键与所述目标附电网领域数据表中的相关键建立关联;
响应于用户调用所述目标SQL查询模板,根据所述目标SQL查询模板中的FROM语句部分所指定的查询数据表为目标主电网领域数据表和所述目标附电网领域数据表,生成所述目标SQL查询模板所对应的可查询字段列表,所述目标SQL查询模板所对应的可查询字段列表包括所述目标主电网领域数据表和所述目标附电网领域数据表中的所有条件字段以及所述目标主电网领域数据表中主索引键;
响应于用户对所可查询字段列表的选择操作,将用户所选择的目标查询字段添加至所述目标SQL查询模板的SELECT语句部分内;
根据添加有所述目标查询字段的所述目标SQL查询模板生成可执行的目标SQL语句;
执行所述目标SQL语句以对所述虚拟电网领域数据池进行数据查询;
将查询结果进行展示。
2.根据权利要求1所述的电网领域多源数据管理方法,其特征在于,所述目标SQL查询模板还包括:AND语句部分,且在所述SQL查询模板中所述AND语句部分内指定的复合查询条件为空。
3.根据权利要求1所述的电网领域多源数据管理方法,其特征在于,根据用户的选择操作,确定目标主电网领域数据表和至少一个目标附电网领域数据表的步骤包括:
提供主电网领域数据表列表;
响应于用户对主电网领域数据表列表的选择操作,确定用户所选择的一个目标主电网领域数据表;
根据所述目标主电网领域数据表生成对应的附电网领域数据表列表,所述附电网领域数据表列表包括能够与所述目标主电网领域数据表中的主索引键进行关联的至少一个附电网领域数据表;
响应于用户对附电网领域数据表列表的选择操作,确定用户所选择的至少一个目标附电网领域数据表。
4.根据权利要求1所述的电网领域多源数据管理方法,其特征在于,在根据所述数据规则描述文件生成与所述虚拟电网领域数据池相对应的目标SQL查询模板的步骤之后,还包括:
将所述目标SQL查询模板存储至预设SQL模板库内。
5.根据权利要求1所述的电网领域多源数据管理方法,其特征在于,在执行所述目标SQL语句以对所述虚拟电网领域数据池进行数据查询的步骤之后,还包括:
将查询结果以CSV格式或JSON格式进行导出。
6.根据权利要求1所述的电网领域多源数据管理方法,其特征在于,还包括:
从不同电网领域数据源处接收电网领域数据记录,并将各所述电网领域数据记录分别存储至预设的电网领域数据表库内对应的电网领域数据表中,所述电网领域数据表库包括多个电网领域数据表,所述多个电网领域数据表包括:多个主电网领域数据表和多个附电网领域数据表。
7.根据权利要求6所述的电网领域多源数据管理方法,其特征在于,在将目标电网领域数据记录写入至对应的附电网领域数据表中时,检测所述目标电网领域数据记录在所写入的附电网领域数据表内对应于各相关键的值是否为空;
若检测出所述目标电网领域数据记录在所写入的附电网领域数据表内对应于至少一个相关键的值为空,则在所写入的附电网领域数据表内为所述目标电网领域数据对应于相关键为空的部分添加数据。
8.一种电网领域多源数据管理系统,其特征在于,用于实现如权利要求1至7中任一所述电网领域多源数据管理方法,所述电网领域多源数据管理系统包括:
确定模块,用于根据用户的选择操作,确定目标主电网领域数据表和至少一个目标附电网领域数据表,所述目标主电网领域数据表和全部所述目标附电网领域数据表所包含的全部电网领域数据形成虚拟电网领域数据池;
描述文件生成模块,用于根据所述目标主电网领域数据表的数据结构和全部所述目标附电网领域数据表的数据结构,生成所述虚拟电网领域数据池的数据规则描述文件,所述数据规则描述文件中记载有所述目标主电网领域数据表的表名、所述目标主电网领域数据表的主索引键、所述目标主电网领域数据表中的条件字段、所述目标附电网领域数据表的表名、所述目标附电网领域数据表中能够与所述主索引键进行关联的相关键、所述目标附电网领域数据表中的条件字段;
模板生成模块,用于根据所述数据规则描述文件生成与所述虚拟电网领域数据池相对应的目标SQL查询模板,以供用户基于所述目标SQL查询模板对所述虚拟电网领域数据池进行数据查询,所述目标SQL查询模板包括:SELECT语句部分、FROM语句部分和WHERE语句部分,且在所述SQL查询模板中SELECT语句部分内指定的查询字段为空,FROM语句部分内指定的查询数据表为目标主电网领域数据表和所述目标附电网领域数据表,WHERE语句部分内指定所述目标主电网领域数据表的主索引键与所述目标附电网领域数据表中的相关键建立关联;
所述电网领域多源数据管理系统还配置为,响应于用户调用所述目标SQL查询模板,根据所述目标SQL查询模板中的FROM语句部分所指定的查询数据表为目标主电网领域数据表和所述目标附电网领域数据表,生成所述目标SQL查询模板所对应的可查询字段列表,所述目标SQL查询模板所对应的可查询字段列表包括所述目标主电网领域数据表和所述目标附电网领域数据表中的所有条件字段以及所述目标主电网领域数据表中主索引键;响应于用户对所可查询字段列表的选择操作,将用户所选择的目标查询字段添加至所述目标SQL查询模板的SELECT语句部分内;根据添加有所述目标查询字段的所述目标SQL查询模板生成可执行的目标SQL语句;执行所述目标SQL语句以对所述虚拟电网领域数据池进行数据查询;以及,将查询结果进行展示。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1至7中任一所述电网领域多源数据管理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311307854.XA CN117056343B (zh) | 2023-10-11 | 2023-10-11 | 一种电网领域多源数据管理方法、系统和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311307854.XA CN117056343B (zh) | 2023-10-11 | 2023-10-11 | 一种电网领域多源数据管理方法、系统和电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117056343A CN117056343A (zh) | 2023-11-14 |
CN117056343B true CN117056343B (zh) | 2024-01-23 |
Family
ID=88666620
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311307854.XA Active CN117056343B (zh) | 2023-10-11 | 2023-10-11 | 一种电网领域多源数据管理方法、系统和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117056343B (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012098878A (ja) * | 2010-11-01 | 2012-05-24 | Hitachi Information Systems Ltd | 帳票作成処理システムと帳票作成処理方法およびプログラム |
KR101505858B1 (ko) * | 2014-04-10 | 2015-03-26 | (주)비아이매트릭스 | 대용량 데이터를 용이하게 분석하기 위하여 테이블 관계 및 참조의 템플릿을 검색하여 제공하는 템플릿 기반 온라인 분석보고서 작성 지원 시스템 |
CN113032420A (zh) * | 2021-04-23 | 2021-06-25 | 中国建设银行股份有限公司 | 数据查询方法、装置和服务器 |
CN114090653A (zh) * | 2021-11-17 | 2022-02-25 | 中通服软件科技有限公司 | 一种资源数据统计方法、装置、元平台设备及存储介质 |
WO2022100067A1 (zh) * | 2020-11-16 | 2022-05-19 | 平安科技(深圳)有限公司 | 数据库数据查询方法、装置、电子设备及存储介质 |
CN114860753A (zh) * | 2022-03-31 | 2022-08-05 | 中国建设银行股份有限公司 | 一种sql语句生成方法、装置、设备、介质及产品 |
CN116204189A (zh) * | 2022-12-29 | 2023-06-02 | 中国邮政储蓄银行股份有限公司 | 基于sql的数据处理方法、服务器和电子设备 |
CN116226166A (zh) * | 2023-02-16 | 2023-06-06 | 平安科技(深圳)有限公司 | 基于数据源的数据查询方法及系统 |
CN116303622A (zh) * | 2023-04-25 | 2023-06-23 | 中国建设银行股份有限公司 | 一种数据库查询方法、装置、设备及存储介质 |
CN116414814A (zh) * | 2023-02-28 | 2023-07-11 | 中国建设银行股份有限公司 | 数据检核方法、装置、设备、存储介质和程序产品 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100005077A1 (en) * | 2008-07-07 | 2010-01-07 | Kickfire, Inc. | Methods and systems for generating query plans that are compatible for execution in hardware |
-
2023
- 2023-10-11 CN CN202311307854.XA patent/CN117056343B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012098878A (ja) * | 2010-11-01 | 2012-05-24 | Hitachi Information Systems Ltd | 帳票作成処理システムと帳票作成処理方法およびプログラム |
KR101505858B1 (ko) * | 2014-04-10 | 2015-03-26 | (주)비아이매트릭스 | 대용량 데이터를 용이하게 분석하기 위하여 테이블 관계 및 참조의 템플릿을 검색하여 제공하는 템플릿 기반 온라인 분석보고서 작성 지원 시스템 |
WO2022100067A1 (zh) * | 2020-11-16 | 2022-05-19 | 平安科技(深圳)有限公司 | 数据库数据查询方法、装置、电子设备及存储介质 |
CN113032420A (zh) * | 2021-04-23 | 2021-06-25 | 中国建设银行股份有限公司 | 数据查询方法、装置和服务器 |
CN114090653A (zh) * | 2021-11-17 | 2022-02-25 | 中通服软件科技有限公司 | 一种资源数据统计方法、装置、元平台设备及存储介质 |
CN114860753A (zh) * | 2022-03-31 | 2022-08-05 | 中国建设银行股份有限公司 | 一种sql语句生成方法、装置、设备、介质及产品 |
CN116204189A (zh) * | 2022-12-29 | 2023-06-02 | 中国邮政储蓄银行股份有限公司 | 基于sql的数据处理方法、服务器和电子设备 |
CN116226166A (zh) * | 2023-02-16 | 2023-06-06 | 平安科技(深圳)有限公司 | 基于数据源的数据查询方法及系统 |
CN116414814A (zh) * | 2023-02-28 | 2023-07-11 | 中国建设银行股份有限公司 | 数据检核方法、装置、设备、存储介质和程序产品 |
CN116303622A (zh) * | 2023-04-25 | 2023-06-23 | 中国建设银行股份有限公司 | 一种数据库查询方法、装置、设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
利用问句语义结构构建旅游领域数据库查询;王凤林;余正涛;毛存礼;郭剑毅;;广西师范大学学报(自然科学版)(第01期);全文 * |
综述地质灾害数据库网络发布机制;孙莹;刘红星;;青海国土经略(第06期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN117056343A (zh) | 2023-11-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107644286B (zh) | 工作流处理方法及装置 | |
US11005850B2 (en) | Access control for database | |
CN112036736A (zh) | 一种工作流创建方法及装置 | |
CN109634587B (zh) | 一种生成入库脚本以及数据入库的方法和设备 | |
US10423416B2 (en) | Automatic creation of macro-services | |
EP4343569A2 (en) | System for data aggregation and analysis of data from a plurality of data sources | |
CN111813804A (zh) | 一种数据查询方法、装置、电子设备及存储介质 | |
CN109766139B (zh) | 配置文件的配置方法及装置 | |
CN113971037A (zh) | 应用处理方法、装置、电子设备及存储介质 | |
CN114358742A (zh) | 一种工作流执行方法、装置、设备及存储介质 | |
CN109033456B (zh) | 一种条件查询方法、装置、电子设备和存储介质 | |
CN112785248B (zh) | 人力资源数据跨组织交互方法、装置、设备和存储介质 | |
CN114153473A (zh) | 模块集成方法、装置、存储介质及电子设备 | |
CN113190576A (zh) | 数据处理方法、装置、计算机设备和可读存储介质 | |
CN117056343B (zh) | 一种电网领域多源数据管理方法、系统和电子设备 | |
CN109299613B (zh) | 数据库分区权限的设置方法和终端设备 | |
CN113485686B (zh) | 信息系统程序的生成方法、装置、电子设备及存储介质 | |
CN115543428A (zh) | 一种基于策略模板的模拟数据生成方法和装置 | |
US20190073436A1 (en) | Dynamic preview generation in a product lifecycle management environment | |
US20140244539A1 (en) | Business process management, configuration and execution | |
US8775936B2 (en) | Displaying dynamic and shareable help data for images a distance from a pointed-to location | |
CN112181407A (zh) | 业务实现处理方法及装置、系统、电子设备和存储介质 | |
US10061801B2 (en) | Customize column sequence in projection list of select queries | |
CN115357604B (zh) | 一种数据查询方法和装置 | |
CN108984992B (zh) | 一种电路板设计方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |