CN107341198A - 一种基于主题实例的电力海量数据存储和查询方法 - Google Patents

一种基于主题实例的电力海量数据存储和查询方法 Download PDF

Info

Publication number
CN107341198A
CN107341198A CN201710466965.3A CN201710466965A CN107341198A CN 107341198 A CN107341198 A CN 107341198A CN 201710466965 A CN201710466965 A CN 201710466965A CN 107341198 A CN107341198 A CN 107341198A
Authority
CN
China
Prior art keywords
data
row
subject example
filter
monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710466965.3A
Other languages
English (en)
Other versions
CN107341198B (zh
Inventor
张新阳
赵志宇
马文
张莉娜
徐敏
牛斌
王艳涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Information Center of Yunnan Power Grid Co Ltd
Original Assignee
Information Center of Yunnan Power Grid Co Ltd
Kunming Enersun Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Information Center of Yunnan Power Grid Co Ltd, Kunming Enersun Technology Co Ltd filed Critical Information Center of Yunnan Power Grid Co Ltd
Priority to CN201710466965.3A priority Critical patent/CN107341198B/zh
Publication of CN107341198A publication Critical patent/CN107341198A/zh
Application granted granted Critical
Publication of CN107341198B publication Critical patent/CN107341198B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/221—Column-oriented storage; Management thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2453—Query optimisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471—Distributed queries

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种基于主题实例的电力海量数据存储与查询方法，将电力海量数据分成静态数据和电网运行数据，将电网设备台账、设备技术参数、监测终端信息以及终端监测属性等静态数据以结构化的方式建立主题实例模型；将电网运行数据基于列式存储方案存储在HBase列式数据库中；本发明的有益效果是：提供统一的模型对电网设备状态监测进行高效、可靠地存储，并快速访问和分析，降低开发成本，提高开发效率。

Description

一种基于主题实例的电力海量数据存储和查询方法
技术领域
本发明涉及电力海量数据存储查询领域，具体为一种基于主题实例的电力海量数据存储和查询方法。
背景技术
目前大部分电网企业用企业级关系数据库进行数据的集中存储。关系型数据库以及所采用的按行存储模式，能够进行多条件的查询，但支持的数据量规模较小，不能满足电网状态监测数据的海量存储需求；当存储的数据量较大时，查询性能下降明显，不能很好的适应状态监测大数据的准实时处理应用需求。
Hadoop提供了一个分布式的数据库系统HBase，HBase的目标是存储并处理海量数据，是建立在HDFS之上，提供高可靠性、高性能、列存储、可伸缩、实时读写的数据库系统，能够对海量数据提供随机、实时的读写访问。但是HBase介于nosql和RDBMS之间，仅能通过主键(RowKey)和主键的range来检索数据，仅支持单行事务。用户在使用电网设备状态监测系统时，通常需要利用多个条件对监测数据进行综合查询。因此如何采用统一的模型对电网海量数据进行高效、可靠地存储，并快速访问和分析，需要对HBase逻辑存储模式和查询方法进行有效的设计。
发明内容
本发明针对电力海量监测数据的存储查询需求，基于Oracle和HBase提出了一种新的基于主题实例的统一模型的电力海量数据的存储和查询方法，以支持电力海量监测数据的可靠存储和快速的多条件查询分析。
本发明的技术方案是：
一种基于主题实例的电力海量数据存储与查询方法，将电力海量数据分成静态数据和电网运行数据，将电网设备台账、设备技术参数、监测终端信息以及终端监测属性等静态数据以结构化的方式建立主题实例模型；将电网运行数据基于列式存储方案存储在HBase列式数据库中；
存储方法包括以下步骤：
步骤S200：先根据设备类型及其监测终端需要监测的属性建立属性基础标准库，主题类型库，主题类型与监测属性关联表，主题属性与终端项关联表，并固化到Oracle中；
步骤S201：接收监测终端传感器数据，数据包中包含了设备ID，监测终端ID，主题类型ID，监测属性ID和监测值；
步骤S202：实例化一个主题实例，将主题实例与电网设备台账关系维护到主题实例模型中，同时将主题实例与监测终端关系也维护到主题实例模型中；
步骤S203：通过MD5加密设备ID取前两位+主题实例ID+(Long.Max_Value-timestamp)作为HBase存储数据的行健RowKey；
步骤S204：建立一个列族f,以电网运行时的监测属性作为列，将电网运行时的监测数据存储在HBase列式数据表中；
查询方法的数据查询中包括过滤查询字段，过滤器生成规则，并根据所述过滤查询字段以及所述过滤器生成规则生成对应的过滤器；从所述行键查询范围中获得预设返回条数的行键对应的数据；利用所述过滤器从所述行键查询范围内的行键中过滤出与所述行键过滤字段匹配的行键；包括利用所述过滤器对所述行键查询范围内的数据进行过滤，得到过滤数据；从所述过滤数据中提取预设返回条数的数据；
查询方法包括以下步骤：
步骤S300：提取查询参数，根据所述主题实例ID，监测属性ID以及HBase行健生成规则生成行健查询范围，以及列族，版本号和列信息；
步骤S301：根据所述过滤查询字段及其所述过滤器生成规则生成对应的过滤器；
步骤S302：调用HBase的数据访问接口，从与所述表名对应的表内查找所述行健查询范围或者行健以及监测属性ID，利用所述过滤器对应的行健查询范围内的数据进行过滤，并从所述行健查询范围中获取预设返回的条数的行健及其列族，列名对应的数据；
步骤S303：将所述预设返回条数的行健对应的数据映射为预设的格式，并将映射后的数据发送至客户端。
本发明存储方法中所述HBase包括行健、时间戳和列族，列族包括监测主题对应的所有监测属性。
本发明查询方法中，当用户使用设备ID或者终端设备编号和监测属性ID等条件进行数据查询时，主题实例模型提取查询参数，根据设备ID或者终端设备编号和监测属性ID找到该终端或者该设备对应的主题实例ID，根据所述主题实例ID，监测属性ID以及HBase行健生成规则生成行健查询范围，以及列族，版本号和列信息。
本发明在查询方法中，根据所述过滤查询字段以及所述过滤器生成规则生成对应的过滤器之前，对所述过滤查询字段进行处理，以使所述过滤查询字段满足所述过滤器的生成要求。
本发明存储方法中，调用HBase的数据访问接口，从与所述列式数据表表名对应的表内查找所述行健查询范围或者行健以及监测属性ID，并从所述行健查询范围中获取预设返回的条数的行健及其列族，列名对应的数据。
本发明将所述预设返回条数的行健对应的数据映射为预设的格式，并将映射后的数据发送至客户端。
本发明基于电网结构化的静态数据创建主题实例模型，并将结构化静态数据固化到Oracle中，基于统一主题实例模型构建HBase实时监测数据存储方案，可以对海量的历史数据进行完整高效的查询和统计分析。
本发明的有益效果是，提供统一的模型对电网设备状态监测进行高效、可靠地存储，并快速访问和分析，降低开发成本，提高开发效率。
附图说明
图1为本发明系统提供的基于主题实例的电网海量数据存储流程图；
图2为本发明系统提供的基于主题实例的电网海量数据查询流程图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1，一种基于主题实例的电力海量数据存储与查询方法，将电力海量数据分成静态数据和电网运行数据，将电网设备台账、设备技术参数、监测终端信息以及终端监测属性等静态数据以结构化的方式建立主题实例模型；将电网运行数据基于列式存储方案存储在HBase列式数据库中；
存储方法包括以下步骤：
步骤S200：先根据设备类型及其监测终端需要监测的属性建立属性基础标准库，主题类型库，主题类型与监测属性关联表，主题属性与终端项关联表，并固化到Oracle中；
步骤S201：接收监测终端传感器数据，数据包中包含了设备ID，监测终端ID，主题类型ID，监测属性ID和监测值；
步骤S202：实例化一个主题实例，将主题实例与电网设备台账关系维护到主题实例模型中，同时将主题实例与监测终端关系也维护到主题实例模型中；
步骤S203：通过MD5加密设备ID取前两位+主题实例ID+(Long.Max_Value-timestamp)作为HBase存储数据的行健RowKey；
步骤S204：建立一个列族f,以电网运行时的监测属性作为列，将电网运行时的监测数据存储在HBase列式数据表中；
查询方法的数据查询中包括过滤查询字段，过滤器生成规则，并根据所述过滤查询字段以及所述过滤器生成规则生成对应的过滤器；从所述行键查询范围中获得预设返回条数的行键对应的数据；利用所述过滤器从所述行键查询范围内的行键中过滤出与所述行键过滤字段匹配的行键；包括利用所述过滤器对所述行键查询范围内的数据进行过滤，得到过滤数据；从所述过滤数据中提取预设返回条数的数据；
查询方法包括以下步骤：
步骤S300：提取查询参数，根据所述主题实例ID，监测属性ID以及HBase行健生成规则生成行健查询范围，以及列族，版本号和列信息；
步骤S301：根据所述过滤查询字段及其所述过滤器生成规则生成对应的过滤器；
步骤S302：调用HBase的数据访问接口，从与所述表名对应的表内查找所述行健查询范围或者行健以及监测属性ID，利用所述过滤器对应的行健查询范围内的数据进行过滤，并从所述行健查询范围中获取预设返回的条数的行健及其列族，列名对应的数据；
步骤S303：将所述预设返回条数的行健对应的数据映射为预设的格式，并将映射后的数据发送至客户端。
本发明存储方法中所述HBase包括行健、时间戳和列族，列族包括监测主题对应的所有监测属性。
本发明查询方法中，当用户使用设备ID或者终端设备编号和监测属性ID等条件进行数据查询时，主题实例模型提取查询参数，根据设备ID或者终端设备编号和监测属性ID找到该终端或者该设备对应的主题实例ID，根据所述主题实例ID，监测属性ID以及HBase行健生成规则生成行健查询范围，以及列族，版本号和列信息。
本发明在查询方法中，根据所述过滤查询字段以及所述过滤器生成规则生成对应的过滤器之前，对所述过滤查询字段进行处理，以使所述过滤查询字段满足所述过滤器的生成要求。
本发明存储方法中，调用HBase的数据访问接口，从与所述列式数据表表名对应的表内查找所述行健查询范围或者行健以及监测属性ID，并从所述行健查询范围中获取预设返回的条数的行健及其列族，列名对应的数据。
本发明将所述预设返回条数的行健对应的数据映射为预设的格式，并将映射后的数据发送至客户端。
电网监测数据在HBase数据库中以表的形式存储数据，行健，列族，列，时间戳。行健(RowKey)是用来检索一行记录的主键，是行的唯一标识，在HBase内部，RowKey保存为字节数组，存储时，数据按照RowKey的字典顺序排序存储。时间戳，默认由系统指定，用户也可以显示设置。不同的时间戳用来区分不同的版本，时间戳一般按照版本从新到旧的顺序进行排列，在数据读取的时候优先读取最新版本。
举例而言，表1为一个可视化的HBase表。
其中，f2101101144578984543和c7101101144576514530为两个行键，行健f2101101144578984543包含列co2,co,h2,c2h4等；行健c7101101144576514530包含co2，co,这里只是举例，所以没有一一列出所有行健，列族，列及其时间戳。

Claims (6)

1.一种基于主题实例的电力海量数据存储与查询方法，其特征在于，将电力海量数据分成静态数据和电网运行数据，将电网设备台账、设备技术参数、监测终端信息以及终端监测属性等静态数据以结构化的方式建立主题实例模型；将电网运行数据基于列式存储方案存储在HBase列式数据库中；
存储方法包括以下步骤：
步骤S200：先根据设备类型及其监测终端需要监测的属性建立属性基础标准库，主题类型库，主题类型与监测属性关联表，主题属性与终端项关联表，并固化到Oracle中；
步骤S201：接收监测终端传感器数据，数据包中包含了设备ID，监测终端ID，主题类型ID，监测属性ID和监测值；
步骤S202：实例化一个主题实例，将主题实例与电网设备台账关系维护到主题实例模型中，同时将主题实例与监测终端关系也维护到主题实例模型中；
步骤S203：通过MD5加密设备ID取前两位+主题实例ID+(Long.Max_Value-timestamp)作为HBase存储数据的行健RowKey；
步骤S204：建立一个列族f,以电网运行时的监测属性作为列，将电网运行时的监测数据存储在HBase列式数据表中；
查询方法的数据查询中包括过滤查询字段，过滤器生成规则，并根据所述过滤查询字段以及所述过滤器生成规则生成对应的过滤器；从所述行键查询范围中获得预设返回条数的行键对应的数据；利用所述过滤器从所述行键查询范围内的行键中过滤出与所述行键过滤字段匹配的行键；包括利用所述过滤器对所述行键查询范围内的数据进行过滤，得到过滤数据；从所述过滤数据中提取预设返回条数的数据；
查询方法包括以下步骤：
步骤S300：提取查询参数，根据所述主题实例ID，监测属性ID以及HBase行健生成规则生成行健查询范围，以及列族，版本号和列信息；
步骤S301：根据所述过滤查询字段及其所述过滤器生成规则生成对应的过滤器；
步骤S302：调用HBase的数据访问接口，从与所述表名对应的表内查找所述行健查询范围或者行健以及监测属性ID，利用所述过滤器对应的行健查询范围内的数据进行过滤，并从所述行健查询范围中获取预设返回的条数的行健及其列族，列名对应的数据；
步骤S303：将所述预设返回条数的行健对应的数据映射为预设的格式，并将映射后的数据发送至客户端。
2.根据权利要求1所述的一种基于主题实例的电力海量数据存储与查询方法，其特征在于，存储方法中所述HBase包括行健、时间戳和列族，列族包括监测主题对应的所有监测属性。
3.根据权利要求1所述的一种基于主题实例的电力海量数据存储与查询方法，其特征在于，查询方法中，当用户使用设备ID或者终端设备编号和监测属性ID等条件进行数据查询时，主题实例模型提取查询参数，根据设备ID或者终端设备编号和监测属性ID找到该终端或者该设备对应的主题实例ID，根据所述主题实例ID，监测属性ID以及HBase行健生成规则生成行健查询范围，以及列族，版本号和列信息。
4.根据权利要求1所述的一种基于主题实例的电力海量数据查询方法，其特征在于，在查询方法中，根据所述过滤查询字段以及所述过滤器生成规则生成对应的过滤器之前，对所述过滤查询字段进行处理，以使所述过滤查询字段满足所述过滤器的生成要求。
5.根据权利要求1或2所述的一种基于主题实例的电力海量数据存储和查询方法，其特征在于，存储方法中，调用HBase的数据访问接口，从与所述列式数据表表名对应的表内查找所述行健查询范围或者行健以及监测属性ID，并从所述行健查询范围中获取预设返回的条数的行健及其列族，列名对应的数据。
6.根据权利要求5所述的一种基于主题实例的电力海量数据存储和查询方法，其特征在于，将所述预设返回条数的行健对应的数据映射为预设的格式，并将映射后的数据发送至客户端。
CN201710466965.3A 2017-06-16 2017-06-16 一种基于主题实例的电力海量数据存储和查询方法 Active CN107341198B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710466965.3A CN107341198B (zh) 2017-06-16 2017-06-16 一种基于主题实例的电力海量数据存储和查询方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710466965.3A CN107341198B (zh) 2017-06-16 2017-06-16 一种基于主题实例的电力海量数据存储和查询方法

Publications (2)

Publication Number Publication Date
CN107341198A true CN107341198A (zh) 2017-11-10
CN107341198B CN107341198B (zh) 2020-05-12

Family

ID=60220689

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710466965.3A Active CN107341198B (zh) 2017-06-16 2017-06-16 一种基于主题实例的电力海量数据存储和查询方法

Country Status (1)

Country Link
CN (1) CN107341198B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107885878A (zh) * 2017-11-29 2018-04-06 广东电网有限责任公司电力科学研究院 一种电网cim模型数据查询方法、客户端、服务器及系统
CN109150283A (zh) * 2018-07-23 2019-01-04 千寻位置网络有限公司 观测数据的传输方法及终端、代理服务器及数据播发系统
CN110347343A (zh) * 2019-07-16 2019-10-18 珠海格力电器股份有限公司 数据管理方法和装置

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105354251A (zh) * 2015-10-19 2016-02-24 国家电网公司 电力系统中基于Hadoop的电力云数据管理索引方法
US20160162550A1 (en) * 2014-12-05 2016-06-09 Etu Corporation Method, apparatus, and application system for real-time processing the data streams
CN106055678A (zh) * 2016-06-07 2016-10-26 国网河南省电力公司电力科学研究院 一种基于hadoop的全景大数据分布式存储方法
CN106326361A (zh) * 2016-08-10 2017-01-11 中国农业银行股份有限公司 一种基于HBase数据库的数据查询方法及装置
CN106503243A (zh) * 2016-11-08 2017-03-15 国网山东省电力公司电力科学研究院 基于HBase二级索引的电力大数据查询方法及系统
CN106528786A (zh) * 2016-11-08 2017-03-22 国网山东省电力公司电力科学研究院 快速迁移多源异构电网大数据到HBase的方法及系统
CN106534291A (zh) * 2016-11-04 2017-03-22 广东电网有限责任公司电力科学研究院 基于大数据处理的电压监测方法
CN106557542A (zh) * 2016-10-14 2017-04-05 广西电网有限责任公司电力科学研究院 一种大数据异源异构数据的联合访问与快速互转系统
CN106682147A (zh) * 2016-12-22 2017-05-17 北京锐安科技有限公司 一种基于海量数据的查询方法及装置
CN106815338A (zh) * 2016-12-25 2017-06-09 北京中海投资管理有限公司 一种大数据的实时存储、处理和查询系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160162550A1 (en) * 2014-12-05 2016-06-09 Etu Corporation Method, apparatus, and application system for real-time processing the data streams
CN105354251A (zh) * 2015-10-19 2016-02-24 国家电网公司 电力系统中基于Hadoop的电力云数据管理索引方法
CN106055678A (zh) * 2016-06-07 2016-10-26 国网河南省电力公司电力科学研究院 一种基于hadoop的全景大数据分布式存储方法
CN106326361A (zh) * 2016-08-10 2017-01-11 中国农业银行股份有限公司 一种基于HBase数据库的数据查询方法及装置
CN106557542A (zh) * 2016-10-14 2017-04-05 广西电网有限责任公司电力科学研究院 一种大数据异源异构数据的联合访问与快速互转系统
CN106534291A (zh) * 2016-11-04 2017-03-22 广东电网有限责任公司电力科学研究院 基于大数据处理的电压监测方法
CN106503243A (zh) * 2016-11-08 2017-03-15 国网山东省电力公司电力科学研究院 基于HBase二级索引的电力大数据查询方法及系统
CN106528786A (zh) * 2016-11-08 2017-03-22 国网山东省电力公司电力科学研究院 快速迁移多源异构电网大数据到HBase的方法及系统
CN106682147A (zh) * 2016-12-22 2017-05-17 北京锐安科技有限公司 一种基于海量数据的查询方法及装置
CN106815338A (zh) * 2016-12-25 2017-06-09 北京中海投资管理有限公司 一种大数据的实时存储、处理和查询系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107885878A (zh) * 2017-11-29 2018-04-06 广东电网有限责任公司电力科学研究院 一种电网cim模型数据查询方法、客户端、服务器及系统
CN109150283A (zh) * 2018-07-23 2019-01-04 千寻位置网络有限公司 观测数据的传输方法及终端、代理服务器及数据播发系统
CN110347343A (zh) * 2019-07-16 2019-10-18 珠海格力电器股份有限公司 数据管理方法和装置

Also Published As

Publication number Publication date
CN107341198B (zh) 2020-05-12

Similar Documents

Publication Publication Date Title
CN107315776B (zh) 一种基于云计算的数据管理系统
CN105357311B (zh) 一种云计算技术的二次设备大数据存储与处理方法
US11347740B2 (en) Managed query execution platform, and methods thereof
US20170004185A1 (en) Method and system for implementing collection-wise processing in a log analytics system
CN106980699B (zh) 一种数据处理平台和系统
CN107330017A (zh) 一种基于主题实例的电力海量数据存储和查询统计分析方法及其系统
CN106778253A (zh) 基于大数据的威胁情景感知信息安全主动防御模型
CN109656958B (zh) 数据查询方法以及系统
CN104933112A (zh) 分布式互联网交易信息存储处理方法
CN102722584B (zh) 数据存储系统及方法
CN111221791A (zh) 一种多源异构数据导入数据湖的方法
CN104036365A (zh) 一种企业级数据服务平台建设方法
CN107341198A (zh) 一种基于主题实例的电力海量数据存储和查询方法
CN114328688A (zh) 一种针对电力能源大数据的管控平台
JP2020057416A (ja) 分散データベースにおけるデータブロックを処理する方法およびデバイス
CN107895046A (zh) 一种异构数据集成平台
CN112181960A (zh) 一种基于AIOps的智能运维框架系统
Huang et al. R-HBase: A multi-dimensional indexing framework for cloud computing environment
CN108133043A (zh) 一种基于大数据的服务器运行日志结构化存储方法
CN107273462A (zh) 一种构建HBase集群全文索引方法，数据读取方法以及数据写入方法
CN109165262A (zh) 一种关系型大表的分片集群系统及其分片方法
CN110245037B (zh) 一种基于日志的Hive用户操作行为还原方法
CN111414355A (zh) 一种海上风电场数据监测存储系统及方法、装置
CN116501725A (zh) 一种基于云计算的大数据处理方法
CN116680315A (zh) 数据离线处理方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220210

Address after: 650034 No. 73, Tuodong Road, Kunming, Yunnan

Patentee after: INFORMATION CENTER OF YUNNAN GRID POWER Co.,Ltd.

Address before: 650206 information center of Yunnan Power Grid Co., Ltd., No. 105, Yunda West Road, Kunming Economic and Technological Development Zone, Yunnan Province

Patentee before: INFORMATION CENTER OF YUNNAN GRID POWER Co.,Ltd.

Patentee before: Kunming Nengxun Technology Co., Ltd