CN117742975B - 资源数据处理方法、装置、存储介质及电子设备 - Google Patents
资源数据处理方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN117742975B CN117742975B CN202410186548.3A CN202410186548A CN117742975B CN 117742975 B CN117742975 B CN 117742975B CN 202410186548 A CN202410186548 A CN 202410186548A CN 117742975 B CN117742975 B CN 117742975B
- Authority
- CN
- China
- Prior art keywords
- resource
- data
- service
- consumption
- dimension
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000000034 method Methods 0.000 claims abstract description 51
- 238000012545 processing Methods 0.000 claims abstract description 35
- 238000004364 calculation method Methods 0.000 claims description 39
- 230000002159 abnormal effect Effects 0.000 claims description 9
- 230000002776 aggregation Effects 0.000 claims description 6
- 238000004220 aggregation Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 description 20
- 238000010586 diagram Methods 0.000 description 7
- 230000009471 action Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000000750 progressive effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013079 data visualisation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供了一种资源数据处理方法、装置、存储介质及电子设备,该方法包括:响应于资源数据处理指令,获取预设时间内各个服务资源对应的资源用量指标数据;根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据;确定每一所述资源用量数据对应的资源成本数据;根据每个所述服务资源的归属信息、每一所述资源用量数据以及每一所述资源用量数据对应的资源成本数据,生成资源账单明细数据;输出所述资源账单明细数据。能够根据各资源用量指标数据获得准确的资源用量数据,从而可以基于资源用量数据准确的得到云计算资源使用成本。
Description
技术领域
本发明涉及计算机技术领域,特别涉及一种资源数据处理方法、装置、存储介质及电子设备。
背景技术
随着云计算技术的发展,云计算已成为了支撑网络业务运行的关键基础设施;然而,云计算的便利性和灵活性也带来了一系列云成本管理挑战。
现有的云计算平台中,将云计算资源提供给各使用对象使用时,由于缺少统一的云计算资源使用情况的衡量方式,导致无法快速准确地统计云计算资源的具体用量情况,从而无法得到准确的云计算资源使用成本。
发明内容
本发明所要解决的技术问题是提供一种资源数据处理方法、装置、存储介质及电子设备,能够准确的得到云计算资源使用成本。具体方案如下:
一种资源数据处理方法,包括:
响应于资源数据处理指令,获取预设时间内各个服务资源对应的资源用量指标数据;
根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据;
确定每一所述资源用量数据对应的资源成本数据;
根据每个所述服务资源的归属信息、每一所述资源用量数据、每一所述资源用量数据对应的资源成本数据,生成资源账单明细数据;
输出所述资源账单明细数据。
上述的方法,可选的,所述根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据,包括:
确定每个所述服务资源所属的资源对象;
基于每个所述服务资源所属的资源对象,以及所述预设时间内的各个所述资源用量指标数据,确定出每个所述服务资源在预设维度上对应的资源用量数据;所述预设维度包含资源对象维度以及时间维度。
上述的方法,可选的,所述生成资源账单明细数据之后,还包括:
根据所述资源账单明细数据,生成各个所述资源对象在所述预设时间内的资源用量趋势数据;所述资源用量趋势数据包含所属资源对象在所述预设时间内的每个采集点的资源用量信息;
对于每个所述资源用量趋势数据,若检测到所述资源用量趋势数据中,存在任意两个相邻采集点的资源用量信息之间的差值大于预设差异阈值,则输出提示信息,所述提示信息用于提示资源用量异常波动。
上述的方法,可选的,所述生成资源账单明细数据之后,还包括:
根据所述资源账单明细数据,按照预设的出账周期,以及所述归属信息进行聚合操作,获得汇总数据;
根据所述汇总数据生成预设查询维度的资源排行数据;所述资源排行数据包含资源用量排行数据以及资源成本排行数据中的至少一种;
输出所述资源排行数据。
上述的方法,可选的,所述确定每一所述资源用量数据对应的资源成本数据,包括:
根据每个所述服务资源的归属信息确定每个所述服务资源的资源类型;所述资源类型为共享类型和非共享类型中的一种;
基于每一所述资源用量数据所属的服务资源的资源类型,确定每一所述资源用量数据对应的成本计算策略;
根据每一所述资源用量数据,以及每一所述资源用量数据对应的成本计算策略,计算出每一所述资源用量数据对应的资源成本数据。
一种资源数据处理装置,包括:
获取单元,用于响应于资源数据处理指令,获取预设时间内各个服务资源对应的资源用量指标数据;
执行单元,用于根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据;
确定单元,用于确定每一所述资源用量数据对应的资源成本数据;
第一生成单元,用于根据每个所述服务资源的归属信息、每一所述资源用量数据、每一所述资源用量数据对应的资源成本数据,生成资源账单明细数据;
输出单元,用于输出所述资源账单明细数据。
上述的装置,可选的,所述执行单元,包括:
第一确定子单元,用于确定每个所述服务资源所属的资源对象;
第二确定子单元,用于基于每个所述服务资源所属的资源对象,以及所述预设时间内的各个所述资源用量指标数据,确定出每个所述服务资源在预设维度上对应的资源用量数据;所述预设维度包含资源对象维度以及时间维度。
上述的装置,可选的,还包括:
第二生成单元,用于根据所述资源账单明细数据,生成各个所述资源对象在所述预设时间内的资源用量趋势数据;所述资源用量趋势数据包含所属资源对象在所述预设时间内的各个采集点的资源用量信息;
提示单元,用于对于每个所述资源用量趋势数据,若检测到所述资源用量趋势数据中,存在任意两个相邻采集点的资源用量信息之间的差值大于预设差异阈值,则输出提示信息,所述提示信息用于提示资源用量异常波动。
一种存储介质,所述存储介质包括存储的指令,其中,在所述指令运行时控制所述存储介质所在的设备执行如上述的资源数据处理方法。
一种电子设备,包括存储器,以及一个或者一个以上的指令,其中一个或一个以上指令存储于存储器中,且经配置以由一个或者一个以上处理器执行如上述的资源数据处理方法。
基于上述本发明实施提供的一种资源数据处理方法及装置、存储介质及电子设备,该方法包括:响应于资源数据处理指令,获取预设时间内各个服务资源对应的资源用量指标数据;根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据;确定每一所述资源用量数据对应的资源成本数据;根据每个所述服务资源的归属信息、每一所述资源用量数据以及每一所述资源用量数据对应的资源成本数据,生成资源账单明细数据;输出所述资源账单明细数据。应用本发明实施例提供的方法,能够根据各资源用量指标数据获得准确的资源用量数据,从而可以基于资源用量数据准确的得到云计算资源使用成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明提供的一种资源数据处理方法的方法流程图;
图2为本发明提供的一种确定资源用量数据对应的资源成本数据的过程的流程图;
图3为本发明提供的一种资源数据处理系统的架构示例图;
图4为本发明提供的一种资源数据处理过程的流程图;
图5为本发明提供的又一种资源数据处理过程的流程图;
图6为本发明提供的一种资源数据处理装置的结构示意图;
图7为本发明提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本申请中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本发明实施例提供了一种资源数据处理方法,该方法可以应用于电子设备,所述方法的方法流程图如图1所示,具体包括:
S101:响应于资源数据处理指令,获取预设时间内各个服务资源对应的资源用量指标数据。
在本实施例中,资源数据处理指令可以接收到用户在预设界面中的查询操作而生成的指令,也可以是应用程序周期性触发的指令。
在本实施例中,服务资源可以是硬件服务资源和软件服务资源中的至少一种;硬件服务资源可以包括处理器、内存、存储和网络等物理资源;软件服务资源可以是通过各类服务软件提供服务的资源。
可选的,可以通过预设的数据传输队列获得各个预设的服务模块上报的资源用量指标数据,该数据传输队列可以是Kafka队列;服务模块可以包括大数据模块、数据库模块、对象存储模块、索引模块等等。
在本实施例中,资源用量指标数据可以包括资源规格、资源使用量等数据。
S102:根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据。
在本实施例中,预设维度可以为一种或多种,例如,可以包括资源对象维度、时间维度等,资源对象维度可以是业务线维度、服务模块维度、产品维度、产品实例维度和单元资源维度等其中一种或多种。
可选的,可以根据各资源用量数据得到资源用量明细数据。
在本实施例中,预设维度上的资源用量数据可以表征该维度上的资源用量情况,例如,可以表征在预设时间内的各个采集时间点上,不同业务线、服务模块、产品、产品实例、单元资源等维度上的资源用量情况。
S103:确定每一所述资源用量数据对应的资源成本数据。
可选的,获取预设配置的成本计算策略,然后通过成本计算策略计算出每一所述资源用量对应的资源成本数据。
S104:根据每个所述服务资源的归属信息、每一所述资源用量数据以及每一所述资源用量数据对应的资源成本数据,生成资源账单明细数据。
在本实施例中,可以先确定每一服务资源的归属信息,归属信息可以通过预设的划分规则进行划分得到,也可以通过归属配置文件得到;每一服务资源的归属信息可以包含使用所述服务资源的不同组织架构层级维度的资源使用对象的对象标识。
在本实施例中,资源账单明细数据可以包括各预设维度的资源用量数据以及对应的资源成本数据。
可选的,可以通过预设的Flink作业以流式计算的方式,根据每一资源用量数据、服务资源资源基础属性、服务资源所属资源对象以及每一资源用量数据对应的资源成本数据等数据,生成资源账单明细数据。
S105:输出所述资源账单明细数据。
在本实施例中,可以将资源账单明细数据在预设的显示界面上进行输出显示,也可以将资源账单明细数据输出到用户终端。
应用本发明实施例提供的方法,能够根据各资源用量指标数据获得准确的资源用量数据,从而可以基于资源用量数据准确的得到云计算资源使用成本。
在一些实施例中,在生成资源用量明细数据、资源账单明细时,以进度百分比、计算速度、计算账单的数量的方式实时输出到用户界面中显示,使得用户可以通过用户界面观测到账单计算的过程,对计算所花费的时间、效率有所预期。
在一些实施例中,生成资源用量明细、资源数据账单的过程中,用户可以通过点击用户界面中的预设控件,以终止计算,从而节约计算的成本。终止计算通常是由于已知计算已经开始但前提条件发生变化时需要放弃计算。
在一些实施例中,当输出的数据发生异常情况时,还可以根据用户给定的时间范围、资源对象以及用户选择的某个计算过程,再次进行计算账单明细数据,计算出新的账单明细数据后,可以利用新的账单明细数据替换旧的数据。
在本发明提供的一实施例中,基于上述的实施过程,可选的,所述根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据,包括:
确定每个所述服务资源所属的资源对象;
基于每个所述服务资源所属的资源对象,以及所述预设时间内的各个所述资源用量指标数据,确定出每个所述服务资源在预设维度上对应的资源用量数据;所述预设维度包含资源对象维度以及时间维度。
可选的,各个服务资源所属的资源对象可以是业务线、服务模块、产品、产品实例等提供资源服务的对象,其中,每个业务线可以包含多个服务模块,每个服务模块包括一个或多个产品,每个产品包含至少一个产品示例。
在本实施例中,根据根据每个服务资源所属的资源对象,以及各个资源用量指标数据,确定每个服务资源在业务线维度、服务模块维度、产品维度和时间维度等维度上的资源用量数据,资源用量数据可以表征资源的使用量情况。
可选的,资源对象维度包含资源对象本身的一种或者几种具体度量指标;资源用量数据还需要换算成统一的、精度损失小的数量单位;
在一些实施例中,还可以基于每个所述服务资源所属的资源对象的用量,以及划分好的服务资源的归属信息,确定每个资源用量指标数据对应的资源对象使用、消耗的归属;归属信息记录了不同组织架构层级维度的使用对象标识。
在本发明提供的一实施例中,基于上述的实施过程,可选的,所述生成资源账单明细数据之后,还包括:
根据所述资源账单明细数据,生成各个所述资源对象在所述预设时间内的资源用量趋势数据;所述资源用量趋势数据包含所属资源对象在所述预设时间内的各个采集点的资源用量信息;
对于每个所述资源用量趋势数据,若检测到所述资源用量趋势数据中,存在任意两个相邻采集点的资源用量信息之间的差值大于预设差异阈值,则输出提示信息,所述提示信息用于提示资源用量异常波动。
在本实施例中,采集点也即预先设定的采集时间点,通过将相邻两个采集点的资源用量信息之间的差值与预设的差异阈值进行比较,即可确定是否存在资源用量异常波动,若两个相邻采集点的资源用量信息之间的差值大于预设差异阈值,则可以输出提示信息,使得用户排查资源用量异常波动的原因,能够保障云计算平台的运行稳定性。
在本发明提供的一实施例中,基于上述的实施过程,可选的,所述生成资源账单明细数据之后,还包括:
根据所述资源账单明细数据,按照预设的出账周期,以及所述每个所述服务资源的归属信息进行聚合操作,获得汇总数据;
根据所述汇总数据生成预设查询维度的资源排行数据;所述资源排行数据包含资源用量排行数据以及资源成本排行数据中的至少一种;
输出所述资源排行数据。
在本实施例中,可以根据资源账单明细数据、按出账周期以及每个服务资源的归属信息中包含的各个组织架构层级维度的资源使用对象的对象标识,计算出服务资源、服务资源的资源对象、服务资源的资源使用对象的多种层级相结合的汇总数据,从而降低维度个数,减少数据规模,从而提高数据查询、导出的效率,减少重复计算。
在本实施例中,资源用量排行数据包括每个服务资源所属的资源对象的资源用量的排行情况;资源成本排行数据包括每个服务资源所属的资源对象的资源成本排行情况。
可选的,资源排行数据具备多种维度的设定,例如,按照递进关系划分得到的资源对象具体指标维度、资源对象维度、资源对象上层的服务等维度;还可以包含资源申请或者使用对象、及其所在的组织架构层级等维度。
在本发明提供的一实施例中,基于上述的实施过程,可选的,所述确定每一所述资源用量数据对应的资源成本数据的过程,如图2所示,包括:
S201:根据每个所述服务资源的归属信息确定每个所述服务资源的资源类型;所述资源类型为共享类型和非共享类型中的一种。
S202:基于每一所述资源用量数据所属的服务资源的资源使用类型,确定每一所述资源用量数据对应的成本计算策略。
在本实施例中,成本计算策略可以变更,可以设置计划生效的时间,即,接收到计算策略变更指令时,根据计算策略变更指令中的变更信息对成本计算策略进行变更,并确定变更后的成本计算策略的生效时间,在到达该生效时间后,基于变更后的成本计算策略计算出资源成本数据。
S203:根据每一所述资源用量数据对应的成本计算策略,计算出每一所述资源用量数据对应的资源成本数据。
在本实施例中,根据每一所述资源用量数据对应的成本计算策略,以及费用主体的划分,计算出每一所述资源用量数据对应的资源成本数据。
在本发明提供的一实施例中,还提供了一种资源数据处理系统的架构示例图,如图3所示,包括数据上报层、数据接入层、数仓逻辑层,数据加工层,数据输出层、系统服务层,各个层级的功能如下:
数据上报层,用于对各类基础软硬服务,按照资源类别,资源媒介,和资源使用方式等维度进行详细统计和归类后,设计出相符合的数据结构,并使得各服务之间的数据互相独立,分别存储,边界清晰,互不影响。各模块对数据进行上报后逐渐形成基础的指标数据。且数据上报层可部署为单独的应用,松散灵活。
数据接入层,用于将对应指标进行解析和入库。
数据字典层包含元数据,数据字典,数据标记,从属,人员部门,业务线等信息。
数仓逻辑层,用于对数据进行处理,包含用量总计分析,针对不同资源又分为差值计算、峰值计算等多种计算方法。给定用量和成本可以计算出账单,账单再根据业务线使用情况,分别计算共享和非共享类型的资源的消耗情况,共享类型的资源需要按量进行分摊。
数据加工层,用于对于数仓逻辑层计算的数据,进行业务线的合并,对于数据的映射和偏移,按给定的比率进行再次拆分、设定一些处理规则等等。
数据输出层,用于通过低代码技术,将数据同步到预设的查询引擎。
系统服务层,用于提供用户操作入口,用户可以通过系统服务层发起查询,配置管理等界面。
如图4所示,为本发明实施例提供的一种资源数据处理过程的流程图,系统按照数据流向的各个部分工作流程如下:
分布式调度系统XXL-JOB向基础组件服务发起定时调度。
基础组件服务上报指标数据到Kafka队列,或者主动抓取外部业务系统数据,数据包括模块和指标;数据以JSON格式表示。
计费系统服务启动后,自动开始订阅Kafka队列;将Kafka指标数据提取出来(数据消费),写入数据库。
计费系统可以通过XXL-JOB上的定时调度配置周期性计算用量数据。例如具体特定模块的前一天24小时内的指标数据,也可以通过应用程序接口API指定模块,以及时间范围进行计算。
在本实施例中,可以通过FlinkSQL开发的Flink作业,直接以流式计算的方式,将用量数据、资源基础属性、所属用户信息、部门等可作为聚合指标的数据,再加上价格配置进行关联,最终生成统一的流式表结构形式的数据。
Flink将账单源源不断地落入查询引擎,例如ElasticSearch,Apache Druid,Apache Doris等查询引擎。
计费系统的用户界面,可以对基本的账单单元,发起分析查询。
其中,指标存储和用量计算的步骤中,可以使用数仓逻辑对数据进行分层。主要用到了数据引入层ODS、数据明细层DWD、数据服务层DWS、数据应用层ADS等。数据指标写入数据接入层ODS。统一后的度量即用量数据写入数据明细DWD。在数据明细层DWD到数据服务层DWS的计算过程中拆分用量,计算费用和百分比。数据可视化服务由数据应用层ADS完成。
在本实施例中,分层的好处是,数据进行了有效的冗余,方便进行问题的调查以及错误修正和回顾,同时极大地提高了数据重跑的计算速度。数据链路变得更加清晰,对后续持续接入更多的模块提供了可扩展性的便利。
参见图5,为本发明实施例提供的又一种资源数据处理流程图;包括了数据采集、平台配置成本、数据仓库处理、定时生成账单以及将资源用量数据以及账单数据输出到查询引擎的流程;其中,数据采集过程可以是对各类基础软硬服务,按照资源类别,资源媒介,和资源使用方式等维度进行详细统计和归类后,设计出相符合的数据结构,并使得各服务之间的数据互相独立,分别存储,边界清晰,互不影响。各模块对数据进行上报后逐渐形成基础的指标数据。平台配置成本的过程可以是将服务器批量采购成本,机房租金,按照使用年限等因素,加上一定的人工成本计算出机房维度的成本,按照资源用量进行划分。可以根据资源的使用类型,配置不同的成本计算策略,例如,对于非共享类型的服务资源,可以使用单价*数量的计算方式计算出资源成本数据;对于共享类型的服务资源,可以通过预设的费用分摊算法计算出资源成本数据。数据仓库处理、定时生成账单的过程,可以包括对各个服务模块上报的指标进行解析、分析和计算后,存入关系型数据库中;根据据设定周期性地执行分析、汇总、拆分、转换等过程,得到账单明细数据。还可以对明细数据进行进一步计算,例如针对具体的可视化图表的不同类型(例如曲线图,排行榜),计算出可快速响应的图表数据,输出数据应用层。将资源用量数据以及账单数据输出到查询引擎的过程可以是,将处理好的资源用量数据、账单数据等输出到查询引擎,还可以进一步合并一些附属的数据进行加工展示,能使得账单数据的内容更加丰富和准确。在此基础上还能计算出各部门,各业务线的环比,同比等数据,供财务人员,业务线人员进行分析,助力降本增效。
与图1所述的方法相对应,本发明实施例还提供了一种资源数据处理装置,用于对图1中方法的具体实现,其结构示意图如图6所示,具体包括:
获取单元601,用于响应于资源数据处理指令,获取预设时间内各个服务资源对应的资源用量指标数据;
执行单元602,用于根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据;
确定单元603,用于确定每一所述资源用量数据对应的资源成本数据;
第一生成单元604,用于根据每个所述服务资源的归属信息、每一所述资源用量数据、每一所述资源用量数据对应的资源成本数据,生成资源账单明细数据;
输出单元605,用于输出所述资源账单明细数据。
在本发明提供的一实施例中,基于上述的方案,可选的,所述执行单元,包括:
第一确定子单元,用于确定每个所述服务资源所属的资源对象;
第二确定子单元,用于基于每个所述服务资源所属的资源对象,以及所述预设时间内的各个所述资源用量指标数据,确定出每个所述服务资源在预设维度上对应的资源用量数据;所述预设维度包含资源对象维度以及时间维度。
在本发明提供的一实施例中,基于上述的方案,可选的,资源数据处理装置还包括:
第二生成单元,用于根据所述资源账单明细数据,生成各个所述资源对象在所述预设时间内的资源用量趋势数据;所述资源用量趋势数据包含所属资源对象在所述预设时间内的各个采集点的资源用量信息;
提示单元,用于对于每个所述资源用量趋势数据,若检测到所述资源用量趋势数据中,存在任意两个相邻采集点的资源用量信息之间的差值大于预设差异阈值,则输出提示信息,所述提示信息用于提示资源用量异常波动。
在本发明提供的一实施例中,基于上述的方案,可选的,资源数据处理装置还包括:
聚合单元,用于根据所述资源账单明细数据,按照预设的出账周期,以及所述归属信息进行聚合操作,获得汇总数据;
第三生成单元,用于根据所述汇总数据生成预设查询维度的资源排行数据;所述资源排行数据包含资源用量排行数据以及资源成本排行数据中的至少一种;
处理单元,用于输出所述资源排行数据。
在本发明提供的一实施例中,基于上述的方案,可选的,所述确定单元,包括:
第三确定子单元,用于根据每个所述服务资源的归属信息确定每个所述服务资源的资源类型;所述资源类型为共享类型和非共享类型中的一种;
第四确定子单元,用于基于每一所述资源用量数据所属的服务资源的资源类型,确定每一所述资源用量数据对应的成本计算策略;
计算子单元,用于根据每一所述资源用量数据,以及每一所述资源用量数据对应的成本计算策略,计算出每一所述资源用量数据对应的资源成本数据。
上述本发明实施例公开的资源数据处理装置中的各个单元和模块具体的原理和执行过程,与上述本发明实施例公开的资源数据处理方法相同,可参见上述本发明实施例提供的资源数据处理方法中相应的部分,这里不再进行赘述。
本发明实施例还提供了一种存储介质,所述存储介质包括存储的指令,其中,在所述指令运行时控制所述存储介质所在的设备执行上述资源数据处理方法。
本发明实施例还提供了一种电子设备,其结构示意图如图7所示,具体包括存储器701,以及一个或者一个以上的指令702,其中一个或者一个以上指令702存储于存储器701中,且经配置以由一个或者一个以上处理器703执行所述一个或者一个以上指令702进行以下操作:
响应于资源数据处理指令,获取预设时间内各个服务资源对应的资源用量指标数据;
根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据;
确定每一所述资源用量数据对应的资源成本数据;
根据每个所述服务资源的归属信息、每一所述资源用量数据、每一所述资源用量数据对应的资源成本数据,生成资源账单明细数据;
输出所述资源账单明细数据。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本发明时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
以上对本发明所提供的一种资源数据处理方法进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种资源数据处理方法,其特征在于,包括:
响应于资源数据处理指令,获取预设时间内各个服务资源对应的资源用量指标数据;所述服务资源包括硬件服务资源和软件服务资源;
根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据;所述预设维度包括资源对象维度和时间维度;所述资源对象维度包括业务线维度、服务模块维度、产品维度、产品实例维度和单元资源维度中的一种或多种;
确定每一所述资源用量数据对应的资源成本数据;其中,所述资源成本数据包括按照资源用量进行划分的服务器批量采购成本、机房租金成本以及人工成本;
根据每个所述服务资源的归属信息、每一所述资源用量数据以及每一所述资源用量数据对应的资源成本数据,生成资源账单明细数据;
输出所述资源账单明细数据。
2.根据权利要求1所述的方法,其特征在于,所述根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据,包括:
确定每个所述服务资源所属的资源对象;
基于每个所述服务资源所属的资源对象,以及所述预设时间内的各个所述资源用量指标数据,确定出每个所述服务资源在预设维度上对应的资源用量数据。
3.根据权利要求2所述的方法,其特征在于,所述生成资源账单明细数据之后,还包括:
根据所述资源账单明细数据,生成各个所述资源对象在所述预设时间内的资源用量趋势数据;所述资源用量趋势数据包含所属资源对象在所述预设时间内的每个采集点的资源用量信息;
对于每个所述资源用量趋势数据,若检测到所述资源用量趋势数据中,存在任意两个相邻采集点的资源用量信息之间的差值大于预设差异阈值,则输出提示信息,所述提示信息用于提示资源用量异常波动。
4.根据权利要求1所述的方法,其特征在于,所述生成资源账单明细数据之后,还包括:
根据所述资源账单明细数据,按照预设的出账周期,以及每个所述服务资源的归属信息进行聚合操作,获得汇总数据;
根据所述汇总数据生成预设查询维度的资源排行数据;所述资源排行数据包含资源用量排行数据以及资源成本排行数据中的至少一种;
输出所述资源排行数据。
5.根据权利要求1所述的方法,其特征在于,所述确定每一所述资源用量数据对应的资源成本数据,包括:
根据每个所述服务资源的归属信息确定每个所述服务资源的资源类型;所述资源类型为共享类型和非共享类型中的一种;
基于每一所述资源用量数据所属的服务资源的资源类型,确定每一所述资源用量数据对应的成本计算策略;
根据每一所述资源用量数据,以及每一所述资源用量数据对应的成本计算策略,计算出每一所述资源用量数据对应的资源成本数据。
6.一种资源数据处理装置,其特征在于,包括:
获取单元,用于响应于资源数据处理指令,获取预设时间内各个服务资源对应的资源用量指标数据;所述服务资源包括硬件服务资源和软件服务资源;
执行单元,用于根据预设时间内各个服务资源对应的资源用量指标数据,获得每个所述服务资源在预设维度上对应的资源用量数据;所述预设维度包括资源对象维度和时间维度;所述资源对象维度包括业务线维度、服务模块维度、产品维度、产品实例维度和单元资源维度中的一种或多种;
确定单元,用于确定每一所述资源用量数据对应的资源成本数据;其中,所述资源成本数据包括按照资源用量进行划分的服务器批量采购成本、机房租金成本以及人工成本;
第一生成单元,用于根据每个所述服务资源的归属信息、每一所述资源用量数据、每一所述资源用量数据对应的资源成本数据,生成资源账单明细数据;
输出单元,用于输出所述资源账单明细数据。
7.根据权利要求6所述的装置,其特征在于,所述执行单元,包括:
第一确定子单元,用于确定每个所述服务资源所属的资源对象;
第二确定子单元,用于基于每个所述服务资源所属的资源对象,以及所述预设时间内的各个所述资源用量指标数据,确定出每个所述服务资源在预设维度上对应的资源用量数据。
8.根据权利要求7所述的装置,其特征在于,还包括:
第二生成单元,用于根据所述资源账单明细数据,生成各个所述资源对象在所述预设时间内的资源用量趋势数据;所述资源用量趋势数据包含所属资源对象在所述预设时间内的各个采集点的资源用量信息;
提示单元,用于对于每个所述资源用量趋势数据,若检测到所述资源用量趋势数据中,存在任意两个相邻采集点的资源用量信息之间的差值大于预设差异阈值,则输出提示信息,所述提示信息用于提示资源用量异常波动。
9.一种存储介质,其特征在于,所述存储介质包括存储的指令,其中,在所述指令运行时控制所述存储介质所在的设备执行如权利要求1~5任意一项所述的资源数据处理方法。
10.一种电子设备,其特征在于,包括存储器,以及一个或者一个以上的指令,其中一个或一个以上指令存储于存储器中,且经配置以由一个或者一个以上处理器执行如权利要求1~5任意一项所述的资源数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410186548.3A CN117742975B (zh) | 2024-02-20 | 2024-02-20 | 资源数据处理方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410186548.3A CN117742975B (zh) | 2024-02-20 | 2024-02-20 | 资源数据处理方法、装置、存储介质及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117742975A CN117742975A (zh) | 2024-03-22 |
CN117742975B true CN117742975B (zh) | 2024-06-04 |
Family
ID=90261267
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410186548.3A Active CN117742975B (zh) | 2024-02-20 | 2024-02-20 | 资源数据处理方法、装置、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117742975B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104104521A (zh) * | 2014-08-08 | 2014-10-15 | 成都致云科技有限公司 | 一种基于实际用量的云计算服务弹性计费方法 |
CN104333456A (zh) * | 2014-10-22 | 2015-02-04 | 浪潮(北京)电子信息产业有限公司 | 一种云计算环境下服务计费的方法及系统 |
CN105550209A (zh) * | 2015-12-02 | 2016-05-04 | 新浪网技术(中国)有限公司 | 一种资源处理方法及装置 |
CN107360006A (zh) * | 2017-06-12 | 2017-11-17 | 北京三快在线科技有限公司 | 一种资源计费方法和装置 |
CN112085535A (zh) * | 2020-09-15 | 2020-12-15 | 北京凌云雀科技有限公司 | 资源计量计费方法、装置、集群及存储介质 |
CN113688004A (zh) * | 2021-07-30 | 2021-11-23 | 济南浪潮数据技术有限公司 | 云平台时序监控数据管理方法、装置、设备及存储介质 |
CN114153687A (zh) * | 2021-11-12 | 2022-03-08 | 郑州云海信息技术有限公司 | 一种云平台资源的成本计算方法、系统及相关装置 |
CN114298813A (zh) * | 2021-12-31 | 2022-04-08 | 江苏赞奇科技股份有限公司 | 一种基于资源消耗的企业用户管理方法及系统 |
CN116820767A (zh) * | 2023-06-28 | 2023-09-29 | 联通智网科技股份有限公司 | 一种云资源管理方法、装置、电子设备及存储介质 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10147110B2 (en) * | 2015-06-29 | 2018-12-04 | Vmware, Inc. | Methods and systems to evaluate cost driver and virtual data center costs |
US20180374110A1 (en) * | 2017-06-21 | 2018-12-27 | Vmware, Inc. | Cost-driven approach to determine inventory layout in cloud computing environments |
-
2024
- 2024-02-20 CN CN202410186548.3A patent/CN117742975B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104104521A (zh) * | 2014-08-08 | 2014-10-15 | 成都致云科技有限公司 | 一种基于实际用量的云计算服务弹性计费方法 |
CN104333456A (zh) * | 2014-10-22 | 2015-02-04 | 浪潮(北京)电子信息产业有限公司 | 一种云计算环境下服务计费的方法及系统 |
CN105550209A (zh) * | 2015-12-02 | 2016-05-04 | 新浪网技术(中国)有限公司 | 一种资源处理方法及装置 |
CN107360006A (zh) * | 2017-06-12 | 2017-11-17 | 北京三快在线科技有限公司 | 一种资源计费方法和装置 |
CN112085535A (zh) * | 2020-09-15 | 2020-12-15 | 北京凌云雀科技有限公司 | 资源计量计费方法、装置、集群及存储介质 |
CN113688004A (zh) * | 2021-07-30 | 2021-11-23 | 济南浪潮数据技术有限公司 | 云平台时序监控数据管理方法、装置、设备及存储介质 |
CN114153687A (zh) * | 2021-11-12 | 2022-03-08 | 郑州云海信息技术有限公司 | 一种云平台资源的成本计算方法、系统及相关装置 |
CN114298813A (zh) * | 2021-12-31 | 2022-04-08 | 江苏赞奇科技股份有限公司 | 一种基于资源消耗的企业用户管理方法及系统 |
CN116820767A (zh) * | 2023-06-28 | 2023-09-29 | 联通智网科技股份有限公司 | 一种云资源管理方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN117742975A (zh) | 2024-03-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111177111A (zh) | 基于用户指定分段执行查询时归因建模 | |
CN112100219B (zh) | 基于数据库查询处理的报表生成方法、装置、设备和介质 | |
AU2022204116A1 (en) | Verification method for electrical grid measurement data | |
CN108415964A (zh) | 数据表查询方法、装置、终端设备及存储介质 | |
CN111127105A (zh) | 用户分层模型构建方法及系统、运营分析方法及系统 | |
CN112579273B (zh) | 任务调度方法及装置、计算机可读存储介质 | |
CN107895017A (zh) | 一种基于大数据技术的电能质量监测系统构建方法 | |
CN111737325A (zh) | 一种基于大数据技术的电力数据分析方法和装置 | |
CN113361980A (zh) | 一种大数据资产价值评估的系统和方法 | |
CN111984677B (zh) | 资源数据核对方法、装置、计算机设备和存储介质 | |
CN109583773A (zh) | 一种纳税信用积分确定的方法、系统及相关装置 | |
CN117742975B (zh) | 资源数据处理方法、装置、存储介质及电子设备 | |
CN111178676A (zh) | 一种配电网项目投资评估方法及系统 | |
WO2024065776A1 (en) | Method for data processing, apparatus for data processing, electronic device, and storage medium | |
CN115617670A (zh) | 软件测试管理方法、存储介质及系统 | |
CN116090702A (zh) | 一种基于物联网的erp数据智能监管系统及方法 | |
CN114970928A (zh) | 一种电力数据能耗分析预测方法 | |
CN114039878A (zh) | 一种网络请求的处理方法、装置、电子设备及存储介质 | |
CN203930952U (zh) | 基于神经网络的电厂厂用电率计算系统 | |
CN114816770B (zh) | 一种衡量计算机服务压力状态的通用系统及实现方法 | |
CN112148491B (zh) | 数据处理方法及装置 | |
CN107908476A (zh) | 基于分布式集群的数据处理方法与装置 | |
CN117764455B (zh) | 一种数据的通用指标管理方法及系统 | |
Zhang et al. | A research of adoption process of mobile app based on massive log data | |
CN111428459A (zh) | 一种员工交易量的统计方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |