CN105550163A - 一种适用于云平台资源监控的数据转换器实现方法 - Google Patents

一种适用于云平台资源监控的数据转换器实现方法 Download PDF

Info

Publication number
CN105550163A
CN105550163A CN201510909714.9A CN201510909714A CN105550163A CN 105550163 A CN105550163 A CN 105550163A CN 201510909714 A CN201510909714 A CN 201510909714A CN 105550163 A CN105550163 A CN 105550163A
Authority
CN
China
Prior art keywords
data
rule
conversion
unit
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510909714.9A
Other languages
English (en)
Inventor
马桂成
杨松
季统凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
G Cloud Technology Co Ltd
Original Assignee
G Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by G Cloud Technology Co Ltd filed Critical G Cloud Technology Co Ltd
Priority to CN201510909714.9A priority Critical patent/CN105550163A/zh
Publication of CN105550163A publication Critical patent/CN105550163A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/12—Use of codes for handling textual entities
    • G06F40/151—Transformation
    • G06F40/154—Tree transformation for tree-structured or markup documents, e.g. XSLT, XSL-FO or stylesheets

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及云平台资源监控技术领域，特别是一种适用于云平台资源监控的数据转换器实现方法。本发明首先加载数据转换器规则；接着收集监控原始数据集合；然后寻找原始数据集合对应的规则，若能找到对应的规则，原始数据集合匹配规则上的名称、单位，并完成数据转换。本发明提供一种适用于云平台资源监控的数据转换器实现方法，具有高可扩展性，可以减少重复开发的成本，为数据统一处理提供的前提条件；可应用于云计算的资源监控领域上。

Description

一种适用于云平台资源监控的数据转换器实现方法
技术领域
本发明涉及云平台资源监控技术领域，特别是一种适用于云平台资源监控的数据转换器实现方法。
背景技术
云计算资源种类众多，而云平台肩负对各种资源进行监控。而面临要各种使用场景的时候，需要花费大量的人力和物力来开发云平台业务功能来支撑监控流程相似，但种类和细节不同的云平台资源，无法快速响应用户的需求，带来以下问题：
一是重复开发的成本和时间投入，为了监控不同的资源类型，需要根据具体的资源进行开发。
二是资源监控数据不能需要适应各种使用场景。
三是二次开发效率低，数据格式不能统一，要花大量的人力资源去把数据整合成统一的形态。
五是大量逻辑类似上的数据，却要大量的时间去开发。
六是一个原始数据不能转换成多个用户需要的数据，需要采集多种数据才能满足需求。
为了以较少的成本投入即收集各种各样的数据，需要有一种适用于云平台资源监控数据转换器的方法，运维人员可以自定义转换器规则，对所有规则进行统一管理，一个数据集合通过一个或者多个转换器规则就能转换成用户想要的数据。
发明内容
本发明解决的技术问题在于提供一种适用于云平台资源监控的数据转换器实现方法，解决重复开发类似数据的成本和时间问题、数据不能统一格式的问题、地域性文化差异导致数据展示不一样等问题。
本发明解决上述技术问题的技术方案是：
所述的方法包括如下步骤：
步骤1：加载数据转换器规则；
步骤2：收集监控原始数据集合；
步骤3：寻找原始数据集合对应的规则，若找到对应规则则执行步骤4，否则执行步骤9；
步骤4：名称匹配是否成功，若是则执行步骤5，否则执行步骤9；
步骤5：单位匹配是否成功，若是则执行步骤6，否则执行步骤9；
步骤6：名称转换；
步骤7：单位转换；
步骤8：值转换，执行步骤10；
步骤9：不需要进行数据转换；
步骤10：完成。
所述的数据转换器规则，每条规则由规则名称、名称转换前的正则表达式、单位转换前的正则表达式、替换名称的正则表达式、替换单位的正则表达式、值替换的公式等组成；
所述的监控原始数据集合，每个数据集合都有零个或者多个的转换器规则名称；每个数据集合由一项或多项原始数据组成，每项原始数据包括数据项的名称、单位、值等信息。
根据原始数据集合的转换器规则名称来查找这些规则是否存在，若存在则分别执行这些规则的数据转换过程，这样同一个数据集合可能执行多个规则的数据转换，产生多个不同的数据集合；若不存在则不需要进行数据转换。
原始数据的数据项名称通过规则上的名称转换前正则表达式进行匹配，若匹配成功则继续执行数据转换流程，否则不需要进行数据转换；
所述的名称转换是原始数据的数据项名称通过规则上的替换名称正则表达式，进行名称替换。
原始数据的数据项单位通过规则上的单位转换前正则表达式进行匹配，若匹配成功则继续执行数据转换流程，否则不需要进行数据转换；
所述的单位转换是原始数据的数据项单位通过规则上的替换单位正则表达式，进行单位替换。
所述的值转换是原始数据的数据项值通过规则上的值转换公式，进行转换，可可以是：新值＝1-原值，完成数据转换的流程。
本发明的方法，以较少的成本投入来就收集各种云平台数据，减少重复开发逻辑相同但数据项不同的成本投入，尤其是适用于对各种数据归一整理，有效解决地域性文化差异导致数据展示不一样的问题。本发明是一种软件技术，只需要常规的服务器上安装操作系统就能支持，区域一般的数据转换器需要特定硬件支持；本发明是一种技术框架，适用于云平台各种监控数据，区别于一般的存储设备的监控数据转换方法及转换器；本发明除了可以由程序预定义的规则，还可以由运维人员自定义，具有高灵活性，区别于一般的数据转换器；本发明利用正则表达式，可以满足各种各样的数据转换，区别于一般的数据转换器只能转换特定领域的数据。
附图说明
下面结合附图对本发明进一步说明：
图1为流程图；
图2为本发明的规则结构图。
具体实施方式
本发明的实施方式有多种，这里以共有云平台为例说明其中一种实现方法，如图1、2所示，具体实施过程如下：
1、加载数据转换器规则；
/**
*加载数据转换器规则.
*paramname数据转换器配置文件名称
*return无返回值
*/
publicvoidload(Stringname){
Transfer.load(name)；
}
2、收集监控原始数据集合；
/**
*收集监控原始数据集合.
*return无返回值
*/
publicvoidcollect(){
ollector.collect()；
}
3、寻找原始数据集合对应的规则；
/**
*寻找原始数据集合对应的规则.
*paramst一个数据集合
*returnList<TransferRule>规则列表
*/
publicvoidfind(DataSetst){
returnTransfers.find(st.getNames())；
}
4、名称匹配；
/**
*名称匹配是否成功.
*paramname数据项的名称
*returnboolean匹配结果的布尔类型
*/
publicbooleanmatchByName(Stringname){
returnTransferRule.matchByName(name)；
}
5、单位匹配；
/**
*单位匹配是否成功.
*paramunit数据项的单位
*returnboolean匹配结果的布尔类型
*/
publicbooleanmatchByUnit(Stringunit){
returnTransferRule.matchByUnit(unit)；
}
6、名称转换；
/**
*名称转换.
*paramname数据项名称
*returnString转换后的数据项名称
*/
publicStringname_transfer(Stringname){
returnTransferRule.name_transfer(name)；
}
7、单位转换；
/**
*单位转换.
*paramunit数据项单位
*returnString转换后的数据项单位
*/
publicStringunit_transfer(Stringunit){
returnTransferRule.unit_transfer(unit)；
}
8、值转换，数据转换完成；
/**
*值转换.
*paramvalue数据项值
*returnObject转换后的数据项值对象
*/
publicObjectvalue_transfer(Objectvalue){
returnTransferRule.value_transfer(value)；
}
9、数据转换结束。

Claims (10)

1.一种适用于云平台资源监控的数据转换器实现方法，其特征在于：所述的方法包括如下步骤：
步骤1：加载数据转换器规则；
步骤2：收集监控原始数据集合；
步骤3：寻找原始数据集合对应的规则，若找到对应规则则执行步骤4，否则执行步骤9；
步骤4：名称匹配是否成功，若是则执行步骤5，否则执行步骤9；
步骤5：单位匹配是否成功，若是则执行步骤6，否则执行步骤9；
步骤6：名称转换；
步骤7：单位转换；
步骤8：值转换，执行步骤10；
步骤9：不需要进行数据转换；
步骤10：完成。
2.根据权利要求1所述的数据转换器实现方法，其特征在于：所述的数据转换器规则，每条规则由规则名称、名称转换前的正则表达式、单位转换前的正则表达式、替换名称的正则表达式、替换单位的正则表达式、值替换的公式等组成；
所述的监控原始数据集合，每个数据集合都有零个或者多个的转换器规则名称；每个数据集合由一项或多项原始数据组成，每项原始数据包括数据项的名称、单位、值等信息。
3.根据权利要求1所述的数据转换器实现方法，其特征在于：根据原始数据集合的转换器规则名称来查找这些规则是否存在，若存在则分别执行这些规则的数据转换过程，这样同一个数据集合可能执行多个规则的数据转换，产生多个不同的数据集合；若不存在则不需要进行数据转换。
4.根据权利要求2所述的数据转换器实现方法，其特征在于：根据原始数据集合的转换器规则名称来查找这些规则是否存在，若存在则分别执行这些规则的数据转换过程，这样同一个数据集合可能执行多个规则的数据转换，产生多个不同的数据集合；若不存在则不需要进行数据转换。
5.根据权利要求1至4任一项所述的数据转换器实现方法，其特征在于：原始数据的数据项名称通过规则上的名称转换前正则表达式进行匹配，若匹配成功则继续执行数据转换流程，否则不需要进行数据转换；
所述的名称转换是原始数据的数据项名称通过规则上的替换名称正则表达式，进行名称替换。
6.根据权利要求1至4任一项所述的数据转换器实现方法，其特征在于：原始数据的数据项单位通过规则上的单位转换前正则表达式进行匹配，若匹配成功则继续执行数据转换流程，否则不需要进行数据转换；
所述的单位转换是原始数据的数据项单位通过规则上的替换单位正则表达式，进行单位替换。
7.根据权利要求5所述的数据转换器实现方法，其特征在于：原始数据的数据项单位通过规则上的单位转换前正则表达式进行匹配，若匹配成功则继续执行数据转换流程，否则不需要进行数据转换；
所述的单位转换是原始数据的数据项单位通过规则上的替换单位正则表达式，进行单位替换。
8.根据权利要求1至4任一项所述的数据转换器实现方法，其特征在于：所述的值转换是原始数据的数据项值通过规则上的值转换公式，进行转换，可可以是：新值＝1-原值，完成数据转换的流程。
9.根据权利要求5所述的数据转换器实现方法，其特征在于：所述的值转换是原始数据的数据项值通过规则上的值转换公式，进行转换，可可以是：新值＝1-原值，完成数据转换的流程。
10.根据权利要求6所述的数据转换器实现方法，其特征在于：所述的值转换是原始数据的数据项值通过规则上的值转换公式，进行转换，可可以是：新值＝1-原值，完成数据转换的流程。
CN201510909714.9A 2015-12-10 2015-12-10 一种适用于云平台资源监控的数据转换器实现方法 Pending CN105550163A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510909714.9A CN105550163A (zh) 2015-12-10 2015-12-10 一种适用于云平台资源监控的数据转换器实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510909714.9A CN105550163A (zh) 2015-12-10 2015-12-10 一种适用于云平台资源监控的数据转换器实现方法

Publications (1)

Publication Number Publication Date
CN105550163A true CN105550163A (zh) 2016-05-04

Family

ID=55829352

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510909714.9A Pending CN105550163A (zh) 2015-12-10 2015-12-10 一种适用于云平台资源监控的数据转换器实现方法

Country Status (1)

Country Link
CN (1) CN105550163A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007072833A (ja) * 2005-09-08 2007-03-22 Yamatake Corp データ変換方法、データ変換を行うコンピュータ・プログラム及びデータ変換装置
US7475051B1 (en) * 2004-09-22 2009-01-06 International Business Machines Corporation System and method for the cascading definition and enforcement of EDI rules
CN101814072A (zh) * 2009-02-19 2010-08-25 上海众恒信息产业股份有限公司 一种实现数据加载的系统及方法
CN101957865A (zh) * 2010-10-27 2011-01-26 杭州新中大软件股份有限公司 一种异构系统间数据交换与共享技术
CN102446197A (zh) * 2010-09-30 2012-05-09 国际商业机器公司 一种数据转换方法和数据转换器
CN105069142A (zh) * 2015-08-18 2015-11-18 山大地纬软件股份有限公司 数据增量抽取转换与分发系统及方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7475051B1 (en) * 2004-09-22 2009-01-06 International Business Machines Corporation System and method for the cascading definition and enforcement of EDI rules
JP2007072833A (ja) * 2005-09-08 2007-03-22 Yamatake Corp データ変換方法、データ変換を行うコンピュータ・プログラム及びデータ変換装置
CN101814072A (zh) * 2009-02-19 2010-08-25 上海众恒信息产业股份有限公司 一种实现数据加载的系统及方法
CN102446197A (zh) * 2010-09-30 2012-05-09 国际商业机器公司 一种数据转换方法和数据转换器
CN101957865A (zh) * 2010-10-27 2011-01-26 杭州新中大软件股份有限公司 一种异构系统间数据交换与共享技术
CN105069142A (zh) * 2015-08-18 2015-11-18 山大地纬软件股份有限公司 数据增量抽取转换与分发系统及方法

Similar Documents

Publication Publication Date Title
Bahga et al. Analyzing massive machine maintenance data in a computing cloud
CN110990391A (zh) 多源异构数据的整合方法、系统、计算机设备及存储介质
CN102685221A (zh) 一种状态监测数据的分布式存储与并行挖掘方法
CN107003935A (zh) 优化数据库去重
CN106126601A (zh) 一种社保大数据分布式预处理方法及系统
CN105204458A (zh) 一种智能组态方法
CN103984726A (zh) 一种数据库执行计划的局部修正方法
CN108446396A (zh) 一种基于改进型cim模型的电力数据处理方法
EP2897401B1 (en) Method and device for guaranteeing consistency of planning data
CN103914307A (zh) 一种基于可复用库的交互界面快速实现方法
CN104361031A (zh) 一种政务大数据预处理系统及处理方法
CN107766570A (zh) 一种档案同源核查方法
CN112884452A (zh) 一种智能运维多源数据采集可视化分析系统
Lv et al. A data fusion and data cleaning system for smart grids big data
CN113612306A (zh) 一种分布式配电柜及其控制系统
JP2013206368A (ja) 仮想環境運用支援システム
CN106651226A (zh) 基于大数据技术的智能配电网用户接入方案辅助分析方法
CN102193859B (zh) 一种代码分析方法及系统
CN105550163A (zh) 一种适用于云平台资源监控的数据转换器实现方法
CN108881345A (zh) 消息推送方法及路由设备
CN105046561A (zh) 一种可适应多种银行交易报文格式的方法
CN101788816A (zh) 一种服装生产流水线管理系统
Liew et al. Performance database: capturing data for optimizing distributed streaming workflows
CN111427930A (zh) 一种低压光伏储能微网设备监测管理系统、方法及设备
CN102609513A (zh) 输变电设备状态监测多数据源数据库系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20160504

RJ01 Rejection of invention patent application after publication