CN105302921A - 图谱类数据存储方法和系统 - Google Patents

图谱类数据存储方法和系统 Download PDF

Info

Publication number
CN105302921A
CN105302921A CN201510823694.3A CN201510823694A CN105302921A CN 105302921 A CN105302921 A CN 105302921A CN 201510823694 A CN201510823694 A CN 201510823694A CN 105302921 A CN105302921 A CN 105302921A
Authority
CN
China
Prior art keywords
data
collection
illustrative plates
plates class
uniform resource
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510823694.3A
Other languages
English (en)
Other versions
CN105302921B (zh
Inventor
佘俊
张文瀚
高鹏
莫国柱
朱珠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southern Power Grid Energy Storage Co ltd Information And Communication Branch
Original Assignee
Peak and Frequency Regulation Power Generation Co of China Southern Power Grid Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Peak and Frequency Regulation Power Generation Co of China Southern Power Grid Co Ltd filed Critical Peak and Frequency Regulation Power Generation Co of China Southern Power Grid Co Ltd
Priority to CN201510823694.3A priority Critical patent/CN105302921B/zh
Publication of CN105302921A publication Critical patent/CN105302921A/zh
Application granted granted Critical
Publication of CN105302921B publication Critical patent/CN105302921B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/14Details of searching files based on file metadata
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems

Abstract

本发明涉及一种图谱类数据存储方法和系统,其方法包括:根据接收的图谱类数据获取对应的电力系统资源的统一资源标识、量测值ID和数据信息量值;根据预设的电网模型库、电力系统资源的统一资源标识、量测值ID和数据信息量值获取图谱类数据的数据特征信息;获取图谱类数据的统一资源标识,将图谱类数据的统一资源标识和数据特征信息进行组合存为逻辑中心点文件并存储于分布式文件系统的命名节点;将图谱类数据存储于分布式文件系统中的数据节点。用户访问图谱类数据时,根据数据特征信息或图谱类数据的统一资源标识查询命名节点的资源列表,并快速检索出对应的图谱类数据,无需解析,也能支持单独对图谱数据的快速检索,提高了数据访问的效率。

Description

图谱类数据存储方法和系统
技术领域
本发明涉及数据处理技术领域,特别是涉及一种图谱类数据存储方法和系统。
背景技术
数据进行存储时,通常需要根据数据的类型进行分类存储。例如,电网数据的数据类型包括电网模型数据、运行数据、操作数据等,电网大数据平台的数据中心系统以关系数据库存储电网模型等缓变的结构化数据、以时序数据库存储量测实时、历史值数据、以分布式文件系统存储图谱等二进制形式的非结构化数据。存储于关系数据库和时序数据库的数据可由数据库提供粗、细粒度的数据查询服务,但图谱类数据本身需要由专门软件解析,而文件名中能包含的特征信息较少,客户端访问图谱类数据的速度慢。
为提高客户端访问图谱类数据的效率,传统的对图谱类数据进行存储的方法是:将图谱类数据汇集后,按地域、图谱类数据发生时间存储;建立数据访问服务或FTP(FileTranferProtocol,文件传输协议)服务器,管理的文件、图谱文件所属电网资源(如变电站、间隔、设备等)信息存储于关系数据库中。客户端通过查询关系数据库访问电网资源信息,并获得与之相关的文件定位信息(文件在FTP服务器上的位置),即可通过浏览目录、读取文件。
然而,传统的图谱类数据存储方法无法直接支持图谱类数据的查询,只能根据文件的时间判断图谱数据产生时间确定需要处理的图谱数据范围,进一步的信息需要通过专用软件解析文件后才能获得,因此,客户端访问图谱类数据的效率低。
发明内容
基于此,有必要针对上述问题,提供一种提高客户端数据访问效率的图谱类数据存储方法和系统。
一种图谱类数据存储方法,包括以下步骤:
根据接收的图谱类数据获取对应所属电力系统资源的统一资源标识、量测值ID和数据信息量值;
根据预设的电网模型库、所述电力系统资源的统一资源标识、所述量测值ID和所述数据信息量值获取所述图谱类数据的数据特征信息;
获取图谱类数据的统一资源标识,将所述图谱类数据的统一资源标识和所述数据特征信息进行组合存为逻辑中心点文件,将所述逻辑中心点文件存储于分布式文件系统的命名节点;
将所述图谱类数据存储于所述分布式文件系统中的数据节点。
一种图谱类数据存储系统,包括:
第一数据获取模块,用于根据接收的图谱类数据获取对应所属电力系统资源的统一资源标识、量测值ID和数据信息量值;
第二数据获取模块,用于根据预设的电网模型库、所述电力系统资源的统一资源标识、所述量测值ID和所述数据信息量值获取所述图谱类数据的数据特征信息;
命名节点存储模块,用于获取图谱类数据的统一资源标识,将所述图谱类数据的统一资源标识和所述数据特征信息进行组合存为逻辑中心点文件,将所述逻辑中心点文件存储于分布式文件系统的命名节点;
数据节点存储模块,用于将所述图谱类数据存储于所述分布式文件系统中的数据节点。
上述图谱类数据存储方法和系统,根据图谱类数据获取对应所属电力系统资源的统一资源标识、量测值ID和数据信息量值,根据预设的电网模型库、电力系统资源的统一资源标识、量测值ID和数据信息量值获取图谱类数据的数据特征信息,可以即时解析图谱类数据,提取关键信息;通过将数据特征信息和图谱类数据的统一资源标识进行组合存为逻辑中心点文件并将逻辑中心点文件存储于分布式文件系统的命名节点,将图谱类数据存储于分布式文件系统的数据节点,使得用户访问图谱类数据时,能够根据数据特征信息或图谱类数据的统一资源标识查询分布式文件系统中命名节点资源列表,并快速检索出关联数据节点中存储的图谱类数据,不需要解析,同时也能支持单独对图谱数据的快速检索,提高了数据访问的效率。
附图说明
图1为一实施例中本发明图谱类数据存储方法的流程图;
图2为一应用例中构建数据特征信息的示意图;
图3为一实施例中根据预设的电网模型库、电力系统资源的统一资源标识、量测值ID和数据信息量值获取图谱类数据的数据特征信息的具体步骤图;
图4为另一应用例中本发明图谱类数据存储方法的流程图;
图5为一应用例中分布式文件系统的结构框图;
图6为一应用例中的图谱类数据存储管理示意图;
图7为一实施例中本发明图谱类数据存储系统的模块图;
图8为一实施例中第二数据获取模块的单元图;
图9为另一实施例中本发明图谱类数据存储系统的模块图。
具体实施方式
参考图1,本发明一实施例中的图谱类数据存储方法,包括如下步骤。
S110:根据接收的图谱类数据获取对应所属电力系统资源的统一资源标识、量测值ID和数据信息量值。
图谱类数据可以是图谱文件或者是二进制形式等非结构形式的数据。电力系统的统一资源标识表征图谱类数据对应的电力系统及设备编号,量测值ID表征图谱类数据对应的测量指标,数据信息量值为对应测量指标的数量值,用来衡量测量指标的优劣。
具体地,本实施例中,步骤S110可以是根据图谱文件的元数据获取该图谱文件对应所属电力系统资源的统一标识和数量信息量值,针对图谱文件,量测值ID可以根据波形异动情况由图谱对应分析算法确定。
例如,参考图2,一应用例中,变压器红外监测程序产生一个变压器红外图谱文件,文件名称为:TransFormerInfraredFile_001。红外图谱文件中的信息表征了变压器的健康状态。该红外图谱文件的元数据信息如下:
电力系统资源的统一资源标识:Transformer_001,表示监测的变压器的统一资源标识。
量测值ID:Meas_Health,表示该红外图谱文件对应的变压器健康状态。
数据信息量值:85,表示变压器健康数值。
S130:根据预设的电网模型库、电力系统资源的统一资源标识、量测值ID和数据信息量值获取图谱类数据的数据特征信息。通过获取数据特征信息,即可即时解析图谱类数据,提取关键信息。
在其中一实施例中,参考图3,步骤S130包括步骤S131至步骤S133。
S131:根据电力系统资源的统一资源标识查询预设的电网模型库,获取对应的地理区域和容器信息。
预设的电网模型库存储管理了电网公司所有地理区域、线路、变电站、设备信息以及量测信息。查询预设的电网模型库中与电力系统资源的统一资源标识对应的数据,即可得到图谱类数据对应所属电力系统的所在地理区域和容器信息。容器信息包括厂站或线路等信息。
例如,一应用例中,参考图2,根据红外图谱文件的元数据以及预设的电网模型库,抽取出红外图谱的数据特征信息如下:
根据红外图谱文件的元数据中的“电力系统资源的统一资源标识:Transformer_001”,从电网模型库中查找到对应的地理区域为“广东电网”,容器为“天河站”,监测的设备为“1#主变”。
S132:根据量测值ID和数据信息量值获取当前状态评级值。
当前状态评级值指与图谱类数据对应的容器所处的当前状态信息,可以是根据数据信息量值分析量测值ID对应的状态等级。例如,将获取的数据信息量值与预设的范围值进行比较,判断数据信息量值属于哪个等级的范围值,则判定量测值ID为对应范围的等级。
例如,根据红外图谱文件的元数据中的“量测值ID:Meas_Health”、“数据信息量值:85”分析出“电力系统资源的统一资源标识:Transformer_001”对应的“广东电网、天河站、1#主变”的健康状况为“良好”。
S133:根据地理区域、容器信息和当前状态评级值获取数据特征信息。
将地理区域、容器信息和当前状态评级值联合构成数据特征信息,可整体概括图谱类数据所表征的对象以及对象的状态。
在其中一实施例中,参考图4,步骤S130之前,还包括步骤S120。
S120:获取图谱类数据的采集时间。例如,参考图2,一应用例中,红外图谱文件的采集时间为2015-10-01。具体地,步骤S120可以是在步骤S110之后,也可以是在步骤S110之前。
对应地,步骤S130为,根据预设的电网模型库、图谱类数据的采集时间、电力系统资源的统一资源标识、量测值ID和数据信息量值获取图谱类数据的数据特征信息。因此数据特征信息还包括图谱类数据的采集时间,提高了数据特征信息的完整性和丰富性。
对应地,步骤S133具体为:根据地理区域、容器信息、当前状态评级值和图谱类数据的采集时间获取数据特征信息。
S150:获取图谱类数据的统一资源标识,将图谱类数据的统一资源标识和数据特征信息进行组合存为逻辑中心点文件,将逻辑中心点文件存储于分布式文件系统的命名节点。
本实施例中,图谱类数据的统一资源标识包含图谱类数据的访问地址和文件名。逻辑中心点文件包含了图谱类数据的数据特征信息和对应的统一资源标识,存储于分布式文件系统的命名节点,用户可以根据数据特征信息和图谱类数据的统一资源标识查找数据节点,提高数据访问的便利性。
S170:将图谱类数据存储于分布式文件系统中的数据节点。
图谱类数据存储于数据节点,图谱类数据的统一资源标识和数据特征信息存储于命名节点,用户访问图谱类数据时,能够根据数据特征信息或图谱类数据的统一资源标识查询分布式文件系统中命名节点的资源列表,并快速检索出数据节点中存储的图谱类数据,同时也能支持单独对图谱数据的快速检索,提高了数据访问的效率。
图谱类数据存储于分布式文件系统的数据节点,多个数据节点对应关联一个命名节点,该命名节点存储有一个逻辑中心点文件,该逻辑中心点文件包含有多个图谱类数据的统一资源标识和数据特征信息。每一个图谱类数据的统一资源标识对应唯一的一个图谱类数据例如(一个图谱文件)。一应用例中,将红外图谱文件存储于数据节点,将数据特征信息及红外图谱文件的统一资源标识存为逻辑中心点文件存储于命名节点,得到如图5所示的分布式文件系统。
在其中一实施例中,参考图4,步骤S170之后,还包括步骤S190。
S190:根据接收的访问指令查询得到命名节点中对应的图谱类数据的统一资源标识,根据查询到的图谱类数据的统一资源标识和对应数据特征信息获取对应数据节点存储的图谱类数据并输出。
访问指令具体可以是对应数据特征信息的过滤条件。通过使用数据特征信息过滤,可以快速定位到指定的图谱类数据,提高用户的数据访问效率。
数据的访问可以通过建立通用数据访问服务实现。其中,通用数据访问服务可与命名节点交互,用于对数据特征信息及图谱类数据的统一资源标识进行各类查询的支持。
例如,参考图6,一应用例中,用户想查看一下“天河站”所有的主变红外图谱文件。用户通过客户端输入过滤条件:“图谱类数据的同一资源标识=Substation_TianHe”,客户端通过通用数据访问服务查询命名节点中数据特征信息与统一资源标识,根据该命名节点中的统一资源标识结合过滤条件查找对应的数据节点存储的图谱文件,从而获得天河站所有主变的图谱数据文件。
在其中一实施例中,参考图4,步骤S170之后,还包括步骤S210。
S210:根据数据中心系统的管理页面接收的历史数据整理指令查询得到命名节点中对应的图谱类数据的统一资源标识,根据查询到的图谱类数据的统一资源标识和对应数据特征信息获取对应数据节点存储的图谱类数据并进行数据的添加或删除。
历史数据整理指令由管理员通过数据中心系统的管理页面进行执行,具体可以是时间范围条件。在无需解析图谱类数据的情况下,根据时间范围条件结合命名节点中统一资源标识和数据特征信息查询出需要整理的图谱类数据,例如可以是通过通用数据访问服务进行查找,然后对查找到的图谱类数据执行整理操作。因此,能有效移除过期低价值图谱类数据,节省存储空间和投资,实现图谱数据存储空间的有效管理。
数据的整理操作可以通过建立图谱数据存储管理命令实现,在通过通用数据访问服务查找到对应的图谱类数据后,图谱数据存储管理命令可以对查找到的数据进行添加或删除。可以理解,在其他实施例中,图谱数据存储管理命令还可以执行其他类型的数据管理操作。
例如,参考图6,管理员希望删除2015年10月5日之前的图谱文件。管理员在数据中心系统的管理页面,录入时间查询条件:“dateTime<2015年10月5日”,通用数据访问服务返回对应该时间的图谱文件列表。管理员确定执行删除操作后,图谱数据存储管理命令接受图谱文件统一资源标识列表,通过分布式文件系统的命名节点执行删除图谱文件操作。
通用数据访问服务和图谱数据存储管理命令作为图谱数据管理服务。具体地,建立数据访问服务和图谱数据存储管理命令之后,还可以将命名节点的地址和图谱数据管理服务的访问方式发布于数据中心系统的信息页面上。
上述图谱类数据存储方法,根据图谱类数据获取对应所属电力系统资源的统一资源标识、量测值ID和数据信息量值,根据预设的电网模型库、电力系统资源的统一资源标识、量测值ID和数据信息量值获取图谱类数据的数据特征信息,可以即时解析图谱类数据,提取关键信息;通过将数据特征信息和图谱类数据的统一资源标识进行组合存为逻辑中心点文件并将逻辑中心点文件存储于分布式文件系统的命名节点,将图谱类数据存储于分布式文件系统的数据节点,使得用户访问图谱类数据时,能够根据数据特征信息或图谱类数据的统一资源标识快速查询分布式文件系统中命名节点资源列表,并快速检索出关联数据节点中存储的图谱类数据,不需要解析,同时也能支持单独对图谱数据的快速检索,提高了数据访问的效率。
参考图7,本发明一实施例中的图谱类数据存储系统,包括第一数据获取模块110、第二数据获取模块130、命名节点存储模块150和数据节点存储模块170。
第一数据获取模块110用于根据接收的图谱类数据获取对应所属电力系统资源的统一资源标识、量测值ID和数据信息量值。
图谱类数据可以是图谱文件或者是二进制形式等非结构形式的数据。电力系统的统一资源标识表征图谱类数据对应的电力系统及设备编号,量测值ID表征图谱类数据对应的测量指标,数据信息量值为对应测量指标的数量值,用来衡量测量指标的优劣。
具体地,本实施例中,第一数据获取模块110可以是图谱文件的根据元数据获取对应该图谱文件对应所属电力系统资源的统一标识和数量信息量值,针对图谱文件,量测值ID可以根据波形异动情况由图谱对应分析算法确定。
例如,参考图2,一应用例中,变压器红外监测程序产生一个变压器红外图谱文件,文件名称为:TransFormerInfraredFile_001。红外图谱文件中的信息表征了变压器的健康状态。该红外图谱文件的元数据信息如下:
电力系统资源的统一资源标识:Transformer_001,表示监测的变压器的统一资源标识。
量测值ID:Meas_Health,表示该红外图谱文件对应的变压器健康状态。
数据信息量值:85,表示变压器健康数值。
第二数据获取模块130用于根据预设的电网模型库、电力系统资源的统一资源标识、量测值ID和数据信息量值获取图谱类数据的数据特征信息。通过获取数据特征信息,即可即时解析图谱类数据,提取关键信息。
在其中一实施例中,参考图8,第二数据获取模块130包括数据查询单元131、数据分析单元132和数据特征信息获取单元133。
数据查询单元131用于根据电力系统资源的统一资源标识查询预设的电网模型库,获取对应的地理区域和容器信息。
预设的电网模型库存储管理了电网公司所有地理区域、线路、变电站、设备信息以及量测信息。查询预设的电网模型库中与电力系统资源的统一资源标识对应的数据,即可得到图谱类数据对应所属电力系统的所在地理区域和容器信息。容器信息包括厂站或线路等信息。
例如,一应用例中,参考图2,根据红外图谱文件的元数据以及预设的电网模型库,抽取出红外图谱的数据特征信息如下:
根据红外图谱文件的元数据中的“电力系统资源的统一资源标识:Transformer_001”,从电网模型库中查找到对应的地理区域为“广东电网”,容器为“天河站”,监测的设备为“1#主变”。
数据分析单元132用于根据量测值ID和数据信息量值获取当前状态评级值。
当前状态评级值指与图谱类数据对应的容器所处的当前状态信息,可以是根据数据信息量值分析量测值ID对应的状态等级。例如,将获取的数据信息量值与预设的范围值进行比较,判断数据信息量值属于哪个等级的范围值,则判定量测值ID为对应范围的等级。
例如,根据红外图谱文件的元数据中的“量测值ID:Meas_Health”、“数据信息量值:85”分析出“电力系统资源的统一资源标识:Transformer_001”对应的“广东电网、天河站、1#主变”的健康状况为“良好”。
数据特征信息获取单元133用于根据地理区域、容器信息和当前状态评级值获取数据特征信息。
将地理区域、容器信息和当前状态评级值联合构成数据特征信息,可整体概括图谱类数据所表征的对象以及对象的状态。
命名节点存储模块150用于获取图谱类数据的统一资源标识,将图谱类数据的统一资源标识和数据特征信息进行组合存为逻辑中心点文件,将逻辑中心点文件存储于分布式文件系统的命名节点。
本实施例中,图谱类数据的统一资源标识包含图谱类数据的访问地址。逻辑中心点文件包含了图谱类数据的数据特征信息和对应的统一资源标识,存储于分布式文件系统的命名节点,用户可以根据数据特征信息和图谱类数据的统一资源标识查找数据节点,提高数据访问的便利性。
数据节点存储模块170用于将图谱类数据存储于分布式文件系统中的数据节点。
图谱类数据存储于数据节点,图谱类数据的统一资源标识和数据特征信息存储于命名节点,用户访问图谱类数据时,能够根据数据特征信息或图谱类数据的统一资源标识查询分布式文件系统中命名节点的资源列表,并快速检索出数据节点中存储的图谱类数据,同时也能支持单独对图谱数据的快速检索,提高了数据访问的效率。
图谱类数据存储于分布式文件系统的数据节点,多个数据节点对应关联一个命名节点,该命名节点存储有一个逻辑中心点文件,该逻辑中心点文件包含有多个图谱类数据的统一资源标识和数据特征信息。每一个图谱类数据的统一资源标识对应唯一的一个图谱类数据例如(一个图谱文件)。一应用例中,将红外图谱文件存储于数据节点,将数据特征信息及红外图谱文件的统一资源标识存为逻辑中心点文件存储于命名节点,得到如图5所示的分布式文件系统。
在其中一实施例中,参考图9,图谱类数据存储系统还包括采集时间获取模块120,用于获取图谱类数据的采集时间。例如,参考图2,一应用例中,红外图谱文件的采集时间为2015-10-01。
对应地,第二数据获取模块130根据预设的电网模型库、图谱类数据的采集时间、电力系统资源的统一资源标识、量测值ID和数据信息量值获取图谱类数据的数据特征信息,提高了数据特征信息的完整性和丰富性。对应地,数据特征信息获取单元133根据地理区域、容器信息、当前状态评级值和图谱类数据的采集时间获取数据特征信息。
在其中一实施例中,参考图9,图谱类数据存储系统还包括访问查询模块190,用于根据接收的访问指令查询得到命名节点中对应的图谱类数据的统一资源标识,根据查询到的图谱类数据的统一资源标识和对应数据特征信息获取对应数据节点存储的图谱类数据并输出。
访问指令具体可以是对应数据特征信息的过滤条件。通过使用数据特征信息过滤,可以快速定位到指定的图谱类数据,提高用户的数据访问效率。
数据的访问可以通过建立通用数据访问服务实现。其中,通用数据访问服务可与命名节点交互,用于对数据特征信息及图谱类数据的统一资源标识进行各类查询的支持。
例如,参考图6,一应用例中,用户想查看一下“天河站”所有的主变红外图谱文件。用户通过客户端程序输入过滤条件:“图谱类和数据的同一资源标识=Substation_TianHe”,客户端程序通过数据管理服务的通用数据访问服务查询命名节点中数据特征信息和统一资源标识,根据该命名节点统一资源标识结合过滤条件查找对应的数据节点存储的图谱文件,从而获得天河站所有主变的图谱数据文件。
在其中一实施例中,参考图9,图谱类数据存储系统还包括数据管理模块210,用于根据数据中心系统的管理页面接收的历史数据整理指令查询得到命名节点中对应的图谱类数据的统一资源标识,根据查询到的图谱类数据的统一资源标识和对应数据特征信息获取对应数据节点存储的图谱类数据并进行数据的添加或删除。
历史数据整理指令由管理员通过数据中心系统的管理页面进行执行,具体可以是时间范围条件。在无需解析图谱类数据的情况下,根据时间范围条件结合命名节点中统一资源标识和数据特征信息查询出需要整理的图谱类数据,例如可以是通过通用数据访问服务进行查找,然后对查找到的图谱类数据执行整理操作。因此,能有效移除过期低价值图谱类数据,节省存储空间和投资,实现图谱数据存储空间的有效管理。
数据的整理操作可以通过建立图谱数据存储管理命令实现,在通过通用数据访问服务查找到对应历史数据整理指令的图谱类数据后,图谱数据存储管理命令可以对查找到的数据进行添加或删除。可以理解,在其他实施例中,图谱数据存储管理命令还可以执行其他类型的数据管理操作。
例如,参考图6,管理员希望删除2015年10月5日之前的图谱文件。管理员在数据中心系统的管理页面,录入时间查询条件:“dateTime<2015年10月5日”,通用数据访问服务返回对应时间的图谱文件列表。管理员确定执行删除操作后,图谱数据存储管理命令接受图谱文件统一资源标识列表,通过分布式文件系统的命名节点执行删除图谱文件操作。
通用数据访问服务和图谱数据存储管理命令作为图谱数据管理服务。具体地,建立数据访问服务和图谱数据存储管理命令之后,还可以将命名节点的地址和图谱数据管理服务的访问方式发布于数据中心系统的信息页面上。
上述图谱类数据存储系统,第一数据获取模块110根据图谱类数据获取对应所属电力系统资源的统一资源标识、量测值ID和数据信息量值;第二数据获取模块130根据预设的电网模型库、电力系统资源的统一资源标识、量测值ID和数据信息量值获取图谱类数据的数据特征信息,可以即时解析图谱类数据,提取关键信息;命名节点存储模块150将数据特征信息和图谱类数据的统一资源标识进行组合存为逻辑中心点文件并将逻辑中心点文件存储于分布式文件系统的命名节点,数据节点存储模块170将图谱类数据存储于分布式文件系统的数据节点。因此,用户访问图谱类数据时,能够根据数据特征信息或图谱类数据的统一资源标识查询分布式文件系统中对应的命名节点资源列表,并快速检索出关联数据节点中存储的图谱类数据,不需要解析,同时也能支持单独对图谱数据的快速检索,提高了数据访问的效率。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种图谱类数据存储方法,其特征在于,包括以下步骤:
根据接收的图谱类数据获取对应所属电力系统资源的统一资源标识、量测值ID和数据信息量值;
根据预设的电网模型库、所述电力系统资源的统一资源标识、所述量测值ID和所述数据信息量值获取所述图谱类数据的数据特征信息;
获取图谱类数据的统一资源标识,将所述图谱类数据的统一资源标识和所述数据特征信息进行组合存为逻辑中心点文件,将所述逻辑中心点文件存储于分布式文件系统的命名节点;
将所述图谱类数据存储于所述分布式文件系统中的数据节点。
2.根据权利要求1所述的图谱类数据存储方法,其特征在于,所述根据预设的电网模型库、所述电力系统资源的统一资源标识、所述量测值ID和所述数据信息量值获取所述图谱类数据的数据特征信息之前,还包括:
获取所述图谱类数据的采集时间;
所述根据预设的电网模型库、所述电力系统资源的统一资源标识、所述量测值ID和所述数据信息量值获取所述图谱类数据的数据特征信息的步骤包括:
根据预设的电网模型库、所述图谱类数据的采集时间、所述电力系统资源的统一资源标识、所述量测值ID和所述数据信息量值获取所述图谱类数据的数据特征信息。
3.根据权利要求1所述的图谱类数据存储方法,其特征在于,所述根据预设的电网模型库、所述电力系统资源的统一资源标识、所述量测值ID和所述数据信息量值获取所述图谱类数据的数据特征信息,包括:
根据所述电力系统资源的统一资源标识查询所述预设的电网模型库,获取对应的地理区域和容器信息;
根据所述量测值ID和所述数据信息量值获取当前状态评级值;
根据所述地理区域、所述容器信息和所述当前状态评级值获取所述数据特征信息。
4.根据权利要求1所述的图谱类数据存储方法,其特征在于,所述将所述图谱类数据存储于所述分布式文件系统中的数据节点之后,还包括:
根据接收的访问指令查询得到所述命名节点中对应的图谱类数据的统一资源标识,根据查询到的图谱类数据的统一资源标识和对应数据特征信息获取对应数据节点存储的图谱类数据并输出。
5.根据权利要求1所述的图谱类数据存储方法,其特征在于,所述将所述图谱类数据存储于所述分布式文件系统中的数据节点之后,还包括:
根据数据中心系统的管理页面接收的历史数据整理指令查询得到所述命名节点中对应的图谱类数据的统一资源标识,根据查询到的图谱类数据的统一资源标识和对应数据特征信息获取对应数据节点存储的图谱类数据并进行数据添加或删除。
6.一种图谱类数据存储系统,其特征在于,包括:
第一数据获取模块,用于根据接收的图谱类数据获取对应所属电力系统资源的统一资源标识、量测值ID和数据信息量值;
第二数据获取模块,用于根据预设的电网模型库、所述电力系统资源的统一资源标识、所述量测值ID和所述数据信息量值获取所述图谱类数据的数据特征信息;
命名节点存储模块,用于获取图谱类数据的统一资源标识,将所述图谱类数据的统一资源标识和所述数据特征信息进行组合存为逻辑中心点文件,将所述逻辑中心点文件存储于分布式系统的命名节点;
数据节点存储模块,用于将所述图谱类数据存储于所述分布式文件系统中的数据节点。
7.根据权利要求6所述的图谱类数据存储系统,其特征在于,还包括采集时间获取模块,用于获取所述图谱类数据的采集时间,所述第二数据获取模块根据预设的电网模型库、所述图谱类数据的采集时间、所述电力系统资源的统一资源标识、所述量测值ID和所述数据信息量值获取所述图谱类数据的数据特征信息。
8.根据权利要求6所述的图谱类数据存储系统,其特征在于,所述第二数据获取模块包括:
数据查询单元,用于根据所述电力系统资源的统一资源标识查询所述预设的电网模型库,获取对应的地理区域和容器信息;
数据分析单元,用于根据所述量测值ID和所述数据信息量值获取当前状态评级值;
数据特征信息获取单元,用于根据所述地理区域、所述容器信息和所述当前状态评级值获取所述数据特征信息。
9.根据权利要求6所述的图谱类数据存储系统,其特征在于,还包括:
访问查询模块,用于根据接收的访问指令查询得到所述命名节点中对应的图谱类数据的统一资源标识,根据查询到的图谱类数据的统一资源标识和对应数据特征信息获取对应数据节点存储的图谱类数据并输出。
10.根据权利要求6所述的图谱类数据存储系统,其特征在于,还包括数据管理模块,用于根据数据中心系统的管理页面接收的历史数据整理指令查询得到所述命名节点中对应的图谱类数据的统一资源标识,根据查询到的图谱类数据的统一资源标识和对应数据特征信息获取对应数据节点存储的图谱类数据并进行数据的添加或删除。
CN201510823694.3A 2015-11-23 2015-11-23 图谱类数据存储方法和系统 Active CN105302921B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510823694.3A CN105302921B (zh) 2015-11-23 2015-11-23 图谱类数据存储方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510823694.3A CN105302921B (zh) 2015-11-23 2015-11-23 图谱类数据存储方法和系统

Publications (2)

Publication Number Publication Date
CN105302921A true CN105302921A (zh) 2016-02-03
CN105302921B CN105302921B (zh) 2018-12-11

Family

ID=55200190

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510823694.3A Active CN105302921B (zh) 2015-11-23 2015-11-23 图谱类数据存储方法和系统

Country Status (1)

Country Link
CN (1) CN105302921B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110968556A (zh) * 2018-09-28 2020-04-07 计算系统有限公司 波形数据的历史回放

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030088576A1 (en) * 1997-10-22 2003-05-08 Masakazu Hattori Object-oriented data storage and retrieval system using index table
CN101370030A (zh) * 2008-09-24 2009-02-18 东南大学 基于内容复制的资源负载平衡方法
CN103279564A (zh) * 2013-06-14 2013-09-04 江苏瀚远科技股份有限公司 基于html的图表数据输出方法及装置
CN103399857A (zh) * 2013-07-01 2013-11-20 北京航空航天大学 一种通用文档结构信息抽取方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030088576A1 (en) * 1997-10-22 2003-05-08 Masakazu Hattori Object-oriented data storage and retrieval system using index table
CN101370030A (zh) * 2008-09-24 2009-02-18 东南大学 基于内容复制的资源负载平衡方法
CN103279564A (zh) * 2013-06-14 2013-09-04 江苏瀚远科技股份有限公司 基于html的图表数据输出方法及装置
CN103399857A (zh) * 2013-07-01 2013-11-20 北京航空航天大学 一种通用文档结构信息抽取方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
鲁轶奇: "知识图谱的数据清理和应用探索", 《中国优秀硕士学位论文全文数据库·信息科技辑》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110968556A (zh) * 2018-09-28 2020-04-07 计算系统有限公司 波形数据的历史回放
CN110968556B (zh) * 2018-09-28 2023-08-29 计算系统有限公司 波形数据的历史回放

Also Published As

Publication number Publication date
CN105302921B (zh) 2018-12-11

Similar Documents

Publication Publication Date Title
CN106980071B (zh) 基于电网gis可视化抢修系统及其工作方法
CN107657019B (zh) 电网系统的网络拓扑结构获取方法和系统
CN108090165B (zh) 一种基于嵌入式图数据库的图谱变化差异的获取方法
CN109299157B (zh) 一种分布式大单表的数据导出方法及装置
CN107943831B (zh) 一种基于HBase的电网历史数据集中存储方法
CN108595523B (zh) 设备数据检索模型构建方法、装置及计算机设备
CN207473028U (zh) 配电网故障定位系统
CN116500385B (zh) 输电网监测校验方法、装置、设备和介质
CN107798062A (zh) 一种变电站历史数据统一存储方法和系统
CN111415107A (zh) 配电网台区画像生成方法、装置、计算机设备和存储介质
CN113723810A (zh) 基于图数据库的电网建模方法
CN103198157B (zh) 一种大地电场数据的压缩存储处理方法
CN110555619A (zh) 一种基于智能配电网的供电能力评估方法
CN107862459B (zh) 一种基于大数据的计量设备状态评估方法及系统
CN105302921A (zh) 图谱类数据存储方法和系统
CN105260401A (zh) 电力数据查询存储方法及装置
CN112148893A (zh) 能源分析知识图谱构建方法与能源分析可视化方法
CN111813773A (zh) 一种电网抄表数据存储方法、上传方法、装置和存储装置
CN103955519A (zh) 一种台账查询记录系统及其查询记录方法
CN116826709A (zh) 可调节负荷资源与调度主站模型的自动匹配方法、装置、存储介质
CN112445796B (zh) 一种新能源场站报表生成方法
CA2884384C (en) System data compression system and method thereof
CN114254906A (zh) 一种电力调度报表查询方法
CN114996535A (zh) 电网中电力设备的数据检索方法、系统及电子设备
CN108959581B (zh) 一种面向时空融合分析的电力设备状态数据处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20200422

Address after: Room 208, No. 100 Dongxing Road, Donghuan Street, Panyu District, Guangzhou City, Guangdong Province

Patentee after: SOUTHERN POWER GRID PEAK LOAD AND FREQUENCY REGULATION POWER GENERATION Co.,Ltd.

Address before: 510635 No. 32 Longkou East Road, Guangzhou, Guangdong, Tianhe District

Patentee before: China Southern Power Grid Tiaofeng Frequency Modulation Power Generation Company

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20230830

Address after: Room 1503, No. 858, Lianhua Avenue West, Donghuan Street, Panyu District, Guangzhou, Guangdong 510000

Patentee after: Southern Power Grid Energy Storage Co.,Ltd. Information and Communication Branch

Address before: 510000 room 208, 100 Dongxing Road, Donghuan street, Panyu District, Guangzhou City, Guangdong Province

Patentee before: SOUTHERN POWER GRID PEAK LOAD AND FREQUENCY REGULATION POWER GENERATION Co.,Ltd.