CN108073635B - 一种电力信息系统数据场景加载的系统及其加载方法 - Google Patents
一种电力信息系统数据场景加载的系统及其加载方法 Download PDFInfo
- Publication number
- CN108073635B CN108073635B CN201611014330.1A CN201611014330A CN108073635B CN 108073635 B CN108073635 B CN 108073635B CN 201611014330 A CN201611014330 A CN 201611014330A CN 108073635 B CN108073635 B CN 108073635B
- Authority
- CN
- China
- Prior art keywords
- data
- scene
- scenes
- loading
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000011068 loading method Methods 0.000 title claims abstract description 55
- 238000013500 data storage Methods 0.000 claims abstract description 12
- 238000000034 method Methods 0.000 claims abstract description 10
- 238000002474 experimental method Methods 0.000 claims description 26
- 238000004458 analytical method Methods 0.000 claims description 17
- 230000010076 replication Effects 0.000 claims description 10
- 238000007726 management method Methods 0.000 claims description 6
- 230000003993 interaction Effects 0.000 claims description 5
- 238000012360 testing method Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000004088 simulation Methods 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003362 replicative effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Human Resources & Organizations (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Economics (AREA)
- Strategic Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Development Economics (AREA)
- Public Health (AREA)
- Primary Health Care (AREA)
- Computational Linguistics (AREA)
- Water Supply & Treatment (AREA)
- Educational Administration (AREA)
- General Health & Medical Sciences (AREA)
- Game Theory and Decision Science (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Storage Device Security (AREA)
Abstract
本发明涉及一种电力信息系统数据场景加载的系统及其加载方法。加载系统包括多场景数据存储模块,数据场景接入模块,数据场景加载模块和数据场景回存模块;加载方法包括:多数据存储;数据场景接入;数据场景加载;数据场景回存。本发明的突出特点在于不同场景的数据动态加载,通过外部的数据场景接入和数据的场景间复制实现数据场景的动态切换。数据的接入和复制都通过外部服务的方式实现,对于系统的各项应用不产生任何影响。由于数据分场景存储,避免了不同场景之间的数据干扰并能提升数据处理效率,通过数据复制方式进行场景的切换,也避免了由于直接访问造成的多个数据源同时部署并动态切换的问题。
Description
技术领域
本发明涉及电力自动化领域,具体涉及一种电力信息系统数据场景加载的系统及其加载方法。
背景技术
随着电力市场化改革的不断推进,为支撑我国电力市场改革的模式推演与验证评估,有必要构建一个电力市场实验验证平台,通过对多种模式多种场景的电力市场运行模拟和分析,为我国电力市场建设提供决策支持。在进行电力市场实验验证时,往往需要研究不同运行场景下市场的运行变化情况,因此,电力市场实验验证平台有必要对多个场景下的市场数据进行管理,并在研究过程中根据需要进行数据场景的切换。
发明内容
本发明的目的是提供一种电力信息系统数据场景加载的系统及其加载方法,即通过数据的分场景存储和后台的场景数据复制,满足电力信息系统中的研究场景的数据管理和在线切换需求。
本发明的目的是采用下述技术方案实现的:
本发明提供一种电力信息系统数据场景加载的系统,其改进之处在于,所述系统包括多场景数据存储模块,数据场景接入模块,数据场景加载模块和数据场景回存模块。
进一步地,所述多场景数据存储模块按照应用场景不同,用于将数据存储在同一数据库的不同用户下,场景之间数据相互独立;所述多数据存储模块选择oracle作为数据库管理单元,采用基于不同数据库用户的分场景存储方式,即在同一个数据库中创建多个用户,其中包括一个公用数据用户,存储系统的公用参数,其他每个用户存储各场景的数据。
进一步地,所述数据场景接入模块用于从外部系统接入可用的数据场景,以分场景的方式存入数据库,实现场景数据从外部系统向实验平台的接入;所述数据场景接入模块采用基于文件方式的离线交互,外部系统的数据通过数据文件提供,实验平台的文件解析服务根据解析配置信息对数据文件进行解析后将数据存入数据库;
由于数据分场景存储,各类数据文件对应的配置信息为公共参数,都存储在公用场景中;文件解析服务在在解析数据文件之前,需要先设定将要存入的场景,从公用场景中检索出各类数据文件对应的配置信息,根据配置信息对数据文件进行解析并将数据接入至指定的场景用户下。
进一步地,所述数据场景加载模块根据选定的数据场景信息,将数据场景加载到当前运行环境中,通过外部的数据场景接入和数据的场景间复制实现数据场景的动态切换,即采用数据复制工具进行数据场景加载时,定义各场景中相关的数据表,并确保包括公用场景的各场景中数据表的结构、设置均完全相同;进行指定的数据场景加载时,用指定的场景数据替换掉公用场景中原有数据即可。
进一步地,所述数据场景回存模块用于将当前运行环境中的数据场景回存至数据库的指定场景,利用数据复制工具将公用场景的数据返回至源场景用户中,如仅用于当次试验不需要回存的话可选择不回存,直接将当前的数据场景从系统的公用场景中丢弃;
根据设定的信息进行数据场景回存或丢弃之后,系统的公用场景按照需要加载其他场景的数据,之前回存的数据场景用于下一次的加载。
本发明还提供一种电力信息系统数据场景加载的系统的加载方法,其改进之处在于,所述方法包括下述步骤:
(1)多场景数据存储;
(2)数据场景接入;
(3)数据场景加载;
(4)数据场景回存。
进一步地,所述步骤(1)包括:多场景数据存储按照应用场景不同,将数据存储在同一数据库的不同用户下,场景之间数据相互独立;进行所述多数据存储时选择oracle作为数据库管理单元,采用基于不同数据库用户的分场景存储方式,即在同一个数据库中创建多个用户,其中包括一个公用数据用户,存储系统的公用参数,其他每个用户存储各场景的数据。
进一步地,所述步骤(2)包括:数据场景接入从外部系统接入可用的数据场景,以分场景的方式存入数据库,实现场景数据从外部系统向实验平台的接入;
所述数据场景接入采用基于文件方式的离线交互,外部系统的数据通过数据文件提供,实验平台的文件解析服务根据解析配置信息对数据文件进行解析后将数据存入数据库;
由于数据分场景存储,各类数据文件对应的配置信息为公共参数,都存储在公用场景中;文件解析服务在在解析数据文件之前,需要先设定将要存入的场景,从公用场景中检索出各类数据文件对应的配置信息,根据配置信息对数据文件进行解析并将数据接入至指定的场景用户下。
进一步地,所述步骤(3)包括:数据场景加载根据选定的数据场景信息,将数据场景加载到当前运行环境中,通过外部的数据场景接入和数据的场景间复制实现数据场景的动态切换,即采用数据复制工具进行数据场景加载时,定义各场景中相关的数据表,并确保包括公用场景的各场景中数据表的结构、设置均完全相同;进行指定的数据场景加载时,用指定的场景中数据替换掉公用场景中原有数据即可。
进一步地,所述步骤(4)包括:数据场景回存将当前运行环境中的数据场景回存至数据库的指定场景,利用数据复制工具将公用场景的数据返回至源场景用户中,如仅用于当次试验不需要回存的话可选择不回存,直接将当前的数据场景从系统的公用场景中丢弃;
根据设定的信息进行数据场景回存或丢弃之后,系统的公用场景按照需要加载其他场景的数据,之前回存的数据场景用于下一次的加载。
为了对披露的实施例的一些方面有一个基本的理解,下面给出了简单的概括。该概括部分不是泛泛评述,也不是要确定关键/重要组成元素或描绘这些实施例的保护范围。其唯一目的是用简单的形式呈现一些概念,以此作为后面的详细说明的序言。
与最接近的现有技术相比,本发明提供的技术方案具有的优异效果是:
本发明涉及一种电力系统的数据场景加载方法,为便于多种运行场景的切换,设计了数据的多场景分开存储方式和基于文件方式的数据场景接入,通过场景间的数据复制实现数据场景的动态切换。
本发明的突出特点在于不同场景的数据动态加载,通过外部的数据场景接入和数据的场景间复制实现数据场景的动态切换。数据的接入和复制都通过外部服务的方式实现,对于系统的各项应用不产生任何影响。由于数据分场景存储,避免了不同场景之间的数据干扰并能提升数据处理效率,通过数据复制方式进行场景的切换,也避免了由于直接访问造成的多个数据源同时部署及动态切换的问题。
基于数据复制方式的数据场景加载方式只要开发实现特定的数据复制服务完成数据从指定场景用户向公用场景用户的复制,即只要在数据复制工具中需要考虑面向不同场景用户进行数据的检索与存储,各应用的业务处理均只面向公用场景用户进行。也就是说,数据复制服务通过将目标场景的数据复制到系统公用场景中,实现了数据访问的场景切换与系统的数据访问服务的解耦,在数据复制完成后,实验平台仅只面向系统的公用场景用户运行,避免实验平台的多数据源访问对系统造成的不稳定故障。
为了上述以及相关的目的,一个或多个实施例包括后面将详细说明并在权利要求中特别指出的特征。下面的说明以及附图详细说明某些示例性方面,并且其指示的仅仅是各个实施例的原则可以利用的各种方式中的一些方式。其它的益处和新颖性特征将随着下面的详细说明结合附图考虑而变得明显,所公开的实施例是要包括所有这些方面以及它们的等同。
附图说明
图1是本发明提供的数据分场景存储示意图;
图2是本发明提供的数据场景接入流程图;
图3是本发明提供的数据场景加载示意图。
具体实施方式
下面结合附图对本发明的具体实施方式作进一步的详细说明。
以下描述和附图充分地示出本发明的具体实施方案,以使本领域的技术人员能够实践它们。其他实施方案可以包括结构的、逻辑的、电气的、过程的以及其他的改变。实施例仅代表可能的变化。除非明确要求,否则单独的组件和功能是可选的,并且操作的顺序可以变化。一些实施方案的部分和特征可以被包括在或替换其他实施方案的部分和特征。本发明的实施方案的范围包括权利要求书的整个范围,以及权利要求书的所有可获得的等同物。在本文中,本发明的这些实施方案可以被单独地或总地用术语“发明”来表示,这仅仅是为了方便,并且如果事实上公开了超过一个的发明,不是要自动地限制该应用的范围为任何单个发明或发明构思。
本发明提供一种电力信息系统数据场景加载的系统,包括多场景数据存储模块,数据场景接入模块,数据场景加载模块和数据场景回存模块。
(1)多场景数据存储模块,按照应用场景不同,将数据存储在同一数据库的不同用户下,场景之间数据相互独立;多场景数据在数据库中的存储模式直接决定了场景数据的加载方式,因此在分析数据场景加载之前首先对各场景数据的数据库存储方式进行分析。本发明中选择oracle作为数据库管理软件,因此以下分析中涉及的库、用户等概念均针对oracle而言。
本发明采用基于不同数据库用户的分场景存储方式,即在同一个数据库中创建多个用户,其中包括一个公用数据用户,存储系统的公用参数,其他每个用户存储各实验场景的数据和运行数据,如江苏、安徽、浙江等每个场景对应数据库中的一个用户,每个用户下数据表结构完全相同。数据分场景存储示意图如图1所示。数据按照场景在数据库中用不同的用户分开存储,避免了不同场景之间的数据干扰并能提升数据处理效率。
(2)数据场景接入模块,即根据接入数据文件的配置信息和接入的目标场景设置,对外部传入的数据文件进行解析,并将得到的数据存入相应的数据场景下;数据场景接入实现场景数据从外部其他系统向实验平台的接入。由于实验平台与外部的系统之间存在设计方式以及开发平台等多种差异,且双方因为网络设置原因往往不能直接相连,因此本发明中采用基于文件方式的离线交互。外部系统的数据通过数据文件提供,实验平台的文件解析服务根据解析配置信息对数据文件进行解析后将数据存入数据库。
由于数据分场景存储,各类数据文件对应的配置信息为公共参数,都存储在公用场景中。文件解析服务在在解析数据文件之前,需要先设定将要存入的场景,从公用场景中检索出各类数据文件对应的配置信息,根据配置信息对数据文件进行解析并将数据接入至指定的场景用户下。本发明提供的数据场景接入流程图如图2所示,首先外部系统按照约定的文件格式将数据以文件的形式写出并传送至文件中转区,实验平台对传送来的文件进行正确性和合理性校验,校验通过则按照实验平台运行环境中数据文件配置信息对数据文件进行解析,然后调用场景数据访问服务将数据存入指定的场景中,校验不通过则给出提示并退出。
(3)数据场景加载模块,即根据选定的场景信数据表的配置信息,将相应场景下的数据复制到公用场景中以供各应用访问;数据的加载即从各个场景对应的用户中将数据传给各业务应用的过程。为减少系统部署和数据访问难度,本发明中通过开发数据复制工具将待研究场景的数据复制到公用场景中,这样,实验平台的应用功能在访问数据时,直接从公用场景的数据表中访问,而不用考虑应该到指定的那个场景用户下去访问。
采用数据复制工具进行数据场景加载时,首先要定义各场景中相关的数据表,并确保各场景(包括公用场景)中这些数据表的结构、设置都完全相同。这样,进行指定的数据场景加载时,只要用该场景中数据替换掉公用场景中原有数据即可。数据复制到公用场景之后,管理应用仍然直接访问公用场景中的数据,数据访问接口可以沿用原有的方式,不需要进行任何修改。基于数据复制方式将指定场景的数据加载到公用场景用户下,实验平台仅面向系统的公用场景用户运行,实现了数据访问的场景切换与系统的数据访问服务的解耦。本发明提供的数据场景加载示意图如图3所示,首先根据需要设置需要加载的数据场景,如江苏或安徽等,根据公用场景中每个场景对应的数据库地址设置、需加载的数据表清单到相应的数据库中检索到相应的数据记录,然后再逐次将数据写入公用场景对应的数据表中(写入之前先将表中数据清空再写入)。写入公用场景后,由于实验平台的数据访问服务仅面向运行环境,因此实验平台的模型管理、交易模拟等各项应用最终使用的也是加载到公用场景中的数据。
(4)数据场景回存模块,即在实验模拟结束后,将当前公用场景下的数据回存至相应的场景下,即数据场景加载的反向操作。
加载到实验平台中的数据在运行过程中可能会被修改或补充,如果希望这些修改被保存下来,则可以利用数据复制工具将公用场景的数据返回至源场景用户中,当然,如仅用于当次试验不需要回存的话也可以选择不回存,直接将当前的数据场景从系统的公用场景中丢弃。
根据设定的信息进行数据场景回存或丢弃之后,系统的公用场景就可以按照需要加载其他场景的数据了,之前回存的数据场景也可以用于下一次的加载。
实施例
假设实验平台当前的多个场景中已经建立了江苏、安徽两个可选的数据场景,则整个实验平台的数据库包括公用场景、江苏、安徽三个数据库用户,实验平台基于公用场景用户运行。另外实验平台还有数据场景接入功能和数据场景回存功能,这两项功能可以通过配置文件的方式动态切换数据的存储场景,即可以根据需要将数据存储至江苏或安徽场景。
这时如需要从实际在浙江电力交易中心在线运行的电力交易运营技术支持系统中接入浙江数据场景,则需要进行以下几步操作:
1、浙江的电力交易运营技术支持系统按照实验平台要求的数据内容和格式输出相应的数据文件,手工将文件拷贝至指定的文件中转区;
2、创建浙江场景对应的数据库用户并设置相应的权限参数,部署实验平台的场景数据访问服务,使其访问地址指向新创建的浙江数据场景;
3、实验平台的数据场景接入功能对传入的数据文件进行解析,调用场景数据访问服务将数据存入浙江数据场景中;
4、配置实验平台的场景切换地址信息,在原有的江苏、安徽场景的基础上增加安徽场景,并设置相应的数据库地址、用户名、密码等信息。
浙江场景接入实验平台后,就可以在场景切换时选择浙江场景,并将浙江场景的数据加载到实验平台的运行环境中了。浙江场景数据加载需要进行以下几步操作:
1、选择需加载的源场景为浙江场景,到公用场景的参数设置表中查询到浙江场景对应的数据库地址、用户名、密码信息;
2、到公用场景的参数设置表中查询场景加载对应的数据表清单,依次到浙江数据场景中读取需加载的各张表的数据;
3、在公用场景中遍历场景加载对应的数据表,先将表中的数据清空,再将读取到的浙江数据存储到对应表中。
完成浙江数据场景加载后,公用场景中存储的就是浙江场景数据了,这样实验平台由于面向的是公用场景,因而访问到的也是浙江场景数据了。在进行了一定的实验操作之后,如需要将当前公用场景下的数据存储下来供下一次继续实验,可以进行数据场景的回存,数据场景的回存需要进行一下几步操作:
1、选择数据场景的回存方式,如回存至现有的某个数据场景中,则首先在已有的江苏、安徽、浙江三个场景中选择一个;如回存至一个新的数据场景,则需要先在数据库中创建该场景对应的用户并设置权限,并配置实验平台的场景切换地址信息,在原有的江苏、安徽、浙江场景的基础上增加新的场景,并设置相应的数据库地址、用户名、密码等信息,然后再已有的四个场景中选择一个。
2、在公用场景的参数设置表中查询场景加载对应的数据表清单,依次到浙公用数据场景中读取需回存的各张表的数据;
3、在选择回存的场景中遍历场景加载对应的数据表,先将表中的数据清空,再将读取到的公用场景数据存储到对应表中。
最后应当说明的是:以上实施例仅用以说明本发明的技术方案而非对其限制,尽管参照上述实施例对本发明进行了详细的说明,所属领域的普通技术人员依然可以对本发明的具体实施方式进行修改或者等同替换,这些未脱离本发明精神和范围的任何修改或者等同替换,均在申请待批的本发明的权利要求保护范围之内。
Claims (7)
1.一种电力信息系统数据场景加载的系统,其特征在于,所述系统包括多场景数据存储模块,数据场景接入模块,数据场景加载模块和数据场景回存模块;
所述数据场景接入模块用于从外部系统接入可用的数据场景,以分场景的方式存入数据库,实现场景数据从外部系统向实验平台的接入;
所述数据场景接入模块采用基于文件方式的离线交互,外部系统的数据通过数据文件提供,实验平台中的文件解析服务根据解析配置信息对数据文件进行解析后将数据存入数据库;由于数据分场景存储,各类数据文件对应的配置信息为公共参数,都存储在公用场景中;
文件解析服务在在解析数据文件之前,需要先设定将要存入的场景,从公用场景中检索出各类数据文件对应的配置信息,根据配置信息对数据文件进行解析并将数据接入至指定的场景用户下;
所述数据场景回存模块用于将当前运行环境中的数据场景回存至数据库的指定场景,利用数据复制工具将公用场景的数据返回至源场景用户中,如仅用于当次试验不需要回存的话选择不回存,直接将当前的数据场景从系统的公用场景中丢弃;根据设定的信息进行数据场景回存或丢弃之后,系统的公用场景按照需要加载其他场景的数据,之前回存的数据场景用于下一次的加载;
所述数据场景的回存包括以下操作步骤:
步骤1、选择数据场景的回存方式,包括回存至现有数据场景中的一个数据场景,从已有的场景中选择一个场景;或回存至新的数据场景的一个数据场景,则在数据库中创建与该场景对应的用户并设置权限后,再在配置的实验平台的场景切换地址信息,在原有的场景基础上增加新的场景,并设置相应的数据库地址、用户名、密码信息后,再于已有的场景中选择一个场景;
步骤2、在公用场景的参数设置表中查询场景加载对应的数据表清单,依次到所述数据场景中读取需回存的各张表的数据;
步骤3、在选择回存的场景中遍历场景加载对应的数据表,清空表中的数据后,再将读取到的所述数据场景存储到对应表中。
2.如权利要求1所述的电力信息系统数据场景加载的系统,其特征在于,所述多场景数据存储模块按照应用场景不同,将多个场景的数据存储在同一数据库的不同用户下,场景之间数据相互独立;所述多场景数据存储模块选择oracle作为数据库管理单元,采用基于不同数据库用户的分场景存储方式,即在同一个数据库中创建多个用户,其中包括一个公用数据用户,存储系统的公用参数,其他每个用户存储对应场景的数据。
3.如权利要求1所述的电力信息系统数据场景加载的系统,其特征在于,所述数据场景加载模块根据选定的数据场景信息,将数据场景加载到当前运行环境中,通过外部的数据场景接入和数据的场景间复制实现数据场景的动态切换,即采用数据复制工具进行数据场景加载时,定义各场景中相关的数据表,并确保包括公用场景的各场景中数据表的结构、设置均完全相同;进行指定的数据场景加载时,用指定场景中的数据替换掉公用场景中原有数据即可。
4.一种如权利要求1-3中任一项所述的电力信息系统数据场景加载的系统的加载方法,其特征在于,所述方法包括下述步骤:
(1)多场景数据存储;
(2)数据场景接入;
(3)数据场景加载;
(4)数据场景回存;
所述步骤(2)包括:数据场景接入从外部系统接入可用的数据场景,以分场景的方式存入数据库,实现场景数据从外部系统向实验平台的接入;
所述数据场景接入采用基于文件方式的离线交互,外部系统的数据通过数据文件提供,实验平台的文件解析服务根据解析配置信息对数据文件进行解析后将数据存入数据库;
由于数据分场景存储,各类数据文件对应的配置信息为公共参数,都存储在公用场景中;文件解析服务在解析数据文件之前,需要先设定将要存入的场景,从公用场景中检索出各类数据文件对应的配置信息,根据配置信息对数据文件进行解析并将数据存入至指定的场景用户下。
5.如权利要求4所述的加载方法,其特征在于,所述步骤(1)包括:多场景数据存储按照应用场景的不同,将数据存储在同一数据库的不同用户下,场景之间数据相互独立;进行所述多场景数据存储时选择oracle作为数据库管理单元,采用基于不同数据库用户的分场景存储方式,即在同一个数据库中创建多个用户,其中包括一个公用数据用户,存储系统的公用参数,其他每个用户存储各场景的数据和运行数据。
6.如权利要求4所述的加载方法,其特征在于,所述步骤(3)包括:数据场景加载根据选定的数据场景信息,将数据场景加载到当前运行环境中,通过数据的场景间复制实现数据场景的动态切换,即采用数据复制工具进行数据场景加载时,定义各场景中相关的数据表,并确保包括公用场景的各场景中数据表的结构、设置均完全相同;进行指定的数据场景加载时,用指定的场景中数据替换掉公用场景中原有数据即可。
7.如权利要求4所述的加载方法,其特征在于,所述步骤(4)包括:数据场景回存将当前运行环境中的数据场景回存至数据库的指定场景,利用数据复制工具将公用场景的数据返回至指定场景用户中,如仅用于当次试验不需要回存的话可选择不回存,直接将当前的数据场景从系统的公用场景中丢弃;
根据设定的信息进行数据场景回存或丢弃之后,系统的公用场景按照需要加载其他场景的数据,之前回存的数据场景用于下一次的加载。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611014330.1A CN108073635B (zh) | 2016-11-18 | 2016-11-18 | 一种电力信息系统数据场景加载的系统及其加载方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611014330.1A CN108073635B (zh) | 2016-11-18 | 2016-11-18 | 一种电力信息系统数据场景加载的系统及其加载方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108073635A CN108073635A (zh) | 2018-05-25 |
CN108073635B true CN108073635B (zh) | 2021-08-27 |
Family
ID=62159997
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611014330.1A Active CN108073635B (zh) | 2016-11-18 | 2016-11-18 | 一种电力信息系统数据场景加载的系统及其加载方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108073635B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102073767A (zh) * | 2011-01-12 | 2011-05-25 | 南京南瑞继保电气有限公司 | 电力信息系统群虚拟数据仓库元数据管理方法 |
CN102594889A (zh) * | 2012-02-17 | 2012-07-18 | 广东电网公司电力科学研究院 | 一种基于数据召测的数据同步与分析系统 |
CN103902554A (zh) * | 2012-12-25 | 2014-07-02 | 阿里巴巴集团控股有限公司 | 数据访问方法与装置 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101877002B (zh) * | 2009-11-30 | 2012-02-01 | 许继集团有限公司 | 基于统一接口的内存数据库分布式访问方法及系统 |
CN102289460B (zh) * | 2011-07-13 | 2013-03-27 | 中国工商银行股份有限公司 | 一种向测试环境进行报表元数据同步的方法及系统 |
CN103051478B (zh) * | 2012-12-24 | 2015-10-21 | 中兴通讯股份有限公司 | 一种大容量电信网管系统及其设置和应用方法 |
US9654532B2 (en) * | 2013-09-23 | 2017-05-16 | Spotify Ab | System and method for sharing file portions between peers with different capabilities |
CN103853827A (zh) * | 2014-03-07 | 2014-06-11 | 浪潮电子信息产业股份有限公司 | 一种保证数据一致性的数据库备份方法 |
US10037204B2 (en) * | 2014-04-22 | 2018-07-31 | Delphix Corp. | Version control of applications |
CN104754045B (zh) * | 2015-03-23 | 2018-04-27 | 国网辽宁省电力有限公司信息通信分公司 | 数据中心服务与应用接口管理平台 |
CN105488610B (zh) * | 2015-11-23 | 2017-05-10 | 国网山东省电力公司信息通信公司 | 一种电力应用系统故障实时分析诊断方法 |
CN105912691B (zh) * | 2016-04-21 | 2019-08-16 | 国电南瑞科技股份有限公司 | 基于分布式存储的电网模型多版本多租户管理系统和方法 |
-
2016
- 2016-11-18 CN CN201611014330.1A patent/CN108073635B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102073767A (zh) * | 2011-01-12 | 2011-05-25 | 南京南瑞继保电气有限公司 | 电力信息系统群虚拟数据仓库元数据管理方法 |
CN102594889A (zh) * | 2012-02-17 | 2012-07-18 | 广东电网公司电力科学研究院 | 一种基于数据召测的数据同步与分析系统 |
CN103902554A (zh) * | 2012-12-25 | 2014-07-02 | 阿里巴巴集团控股有限公司 | 数据访问方法与装置 |
Non-Patent Citations (2)
Title |
---|
"参与式感知平台数据采集关键技术研究与实现";朱致远;《中国优秀硕士学位论文全文数据库 信息科技辑》;20150815(第08期);第I140-315页 * |
"讨论MySQL丢失数据的几种情况";woqutech;《https://searchdatabase.techtarget.com.cn/7-21493》;20130410;第1-6页 * |
Also Published As
Publication number | Publication date |
---|---|
CN108073635A (zh) | 2018-05-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8321384B2 (en) | Storage device, and program and method for controlling storage device | |
US9031910B2 (en) | System and method for maintaining a cluster setup | |
EP2288975B1 (en) | Method for optimizing cleaning of maps in flashcopy cascades containing incremental maps | |
US20190095284A1 (en) | Enhanced application write performance | |
US20100299447A1 (en) | Data Replication | |
CN106446159B (zh) | 一种存储文件的方法、第一虚拟机及名称节点 | |
US10628298B1 (en) | Resumable garbage collection | |
US11175846B2 (en) | Data co-location in a hierarchical storage management (HSM) system | |
CN108427728A (zh) | 元数据的管理方法、设备及计算机可读介质 | |
Liu et al. | An improved hadoop data load balancing algorithm | |
CN109739691A (zh) | 数据库备份和恢复方法、装置、终端设备及存储介质 | |
JP2012008854A (ja) | ストレージ仮想化装置 | |
JPWO2007099636A1 (ja) | ファイルシステム移行方法、ファイルシステム移行プログラム及びファイルシステム移行装置 | |
GB2602704A (en) | Tracking change data capture log history | |
CN109445988A (zh) | 异构容灾方法、装置、系统、服务器和容灾平台 | |
CN108073635B (zh) | 一种电力信息系统数据场景加载的系统及其加载方法 | |
CN111813346A (zh) | 基于云平台搭建Ceph分布式存储的方法、系统、设备及介质 | |
CN110471906A (zh) | 数据库切换方法、装置及设备 | |
Rao | Data duplication using Amazon Web Services cloud storage | |
US20190391743A1 (en) | Tape drive data reclamation | |
AU2021268828B2 (en) | Secure data replication in distributed data storage environments | |
JP2020013307A (ja) | ファイル移行方法およびファイル移行システム | |
US20190205055A1 (en) | Optimized sequential writes on mirrored disks | |
US11645333B1 (en) | Garbage collection integrated with physical file verification | |
US10712959B2 (en) | Method, device and computer program product for storing data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: Nan Shui Road Gulou District of Nanjing city of Jiangsu Province, No. 8 210003 Applicant after: CHINA ELECTRIC POWER RESEARCH INSTITUTE Co.,Ltd. Applicant after: STATE GRID CORPORATION OF CHINA Address before: Nan Shui Road Gulou District of Nanjing city of Jiangsu Province, No. 8 210003 Applicant before: China Electric Power Research Institute Applicant before: State Grid Corporation of China |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |