CN112764675A - 一种云资源的实时计费管理方法和系统 - Google Patents

一种云资源的实时计费管理方法和系统 Download PDF

Info

Publication number
CN112764675A
CN112764675A CN202011605932.0A CN202011605932A CN112764675A CN 112764675 A CN112764675 A CN 112764675A CN 202011605932 A CN202011605932 A CN 202011605932A CN 112764675 A CN112764675 A CN 112764675A
Authority
CN
China
Prior art keywords
charging
cloud
data
mode
ticket
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011605932.0A
Other languages
English (en)
Inventor
王婷
李幸
陈安迪
陶礼亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Data Center of China Life Insurance Co Ltd
Original Assignee
Shanghai Data Center of China Life Insurance Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Data Center of China Life Insurance Co Ltd filed Critical Shanghai Data Center of China Life Insurance Co Ltd
Priority to CN202011605932.0A priority Critical patent/CN112764675A/zh
Publication of CN112764675A publication Critical patent/CN112764675A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/14—Payment architectures specially adapted for billing systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0645—Rental transactions; Leasing transactions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • General Engineering & Computer Science (AREA)
  • General Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明涉及一种云资源的实时计费管理方法和系统，方法包括数据采集清洗步骤、话单上传步骤、分布式统计步骤、数据存入步骤和计费展示步骤，话单上传步骤包括根据清洗后的云资源使用数据，生成话单；分布式统计步骤包括对话单进行存储，并对话单进行计费数据提取，计费数据划分有钥匙单元和取值单元，钥匙单元包括云服务器所属租户UUID、云服务类型和云资源类型，取值单元包括虚拟CPU数目、虚拟内存数目、磁盘类型、磁盘大小和使用时长；根据计费数据分布式选取钥匙单元相同的计费数据，进行计算，获取计费结果。与现有技术相比，本发明具有实现多维度定制化的统计分析与计量计费、能应对云资源庞大的日志信息量的处理、提升了计费效率等优点。

Description

一种云资源的实时计费管理方法和系统
技术领域
本发明涉及云资源计费领域，尤其是涉及一种云资源的实时计费管理方法和系统。
背景技术
随着混合云平台的盛行，各类型云资源服务激增，如何对这些在线购买的云资源进行实时准确迅速的计量计费显得尤为重要。目前收集计费数据时，会产生大量的原始使用数据，这些原始数据如何能够快速实时准确多维度的对各类型云服务资源进行计费是关键问题，由于云平台用户量大，使用行为复杂，使用一些传统计量计费方式难免低效，也无法满足进一步多维度定制化的统计分析与计量计费。同时云服务使用行为日志信息量很大，需要对关键的资源信息进行多维度提取，以满足服务提供商定制化的计费需求。
授权公告号为CN111224791B的发明公开了一种云资源计费方法、装置、电子设备及存储介质，该方法包括：根据接收的计费指令确定云资源使用方部署的按使用量计费的服务项、服务项的计费时段和初始单价；根据服务项的部署时长，确定服务项在计费时段内的至少一个折扣系数，并根据折扣系数将计费时段划分为至少一个第一子时段；基于服务项的分时计费规则，将各第一子时段划分为至少两类第二子时段，并确定各第一子时段内各类第二子时段的时段系数和使用量；根据服务项的初始单价、至少一个第一子时段的折扣系数，以及各第一子时段内各类第二子时段的时段系数和使用量，确定按使用量计费的服务项的费用。通过根据折扣系数和时段系数来进行计费，提高了云资源计费的灵活性。
该云资源计费方法虽然加入了折扣系数，增加了计费方式的灵活性，但仍无法实现多维度定制化的统计分析与计量计费，且难以应对云资源庞大的日志信息量的处理，无法提高计费效率。
发明内容
本发明的目的就是为了克服上述现有技术存在无法实现多维度定制化的统计分析与计量计费，且难以应对云资源庞大的日志信息量的处理，无法提高计费效率的缺陷而提供一种云资源的实时计费管理方法和系统。
本发明的目的可以通过以下技术方案来实现：
一种云资源的实时计费管理方法，包括以下步骤：
数据采集清洗步骤：从云服务器中获取云资源使用数据，并对该云资源使用数据进行数据清洗；
话单上传步骤：根据清洗后的云资源使用数据，生成话单，所述话单的消息内容包括云服务器所属租户UUID、云服务类型、云资源类型、统计时间段开始时间、统计时间段结束时间、虚拟CPU数目、虚拟内存数目、磁盘类型和磁盘大小；
分布式统计步骤：对所述话单进行存储，并对所述话单进行计费数据提取，所述计费数据划分有钥匙单元和取值单元，所述钥匙单元包括云服务器所属租户UUID、云服务类型和云资源类型，所述取值单元包括虚拟CPU数目、虚拟内存数目、磁盘类型、磁盘大小和使用时长；
根据所述计费数据分布式计算计费结果，该分布式计算中每个计算过程包括选取钥匙单元相同的所述计费数据，采用预设的计费模式进行计算，获取计费结果；
数据存入步骤：按照所述云服务器所属租户UUID存储所述计费结果；
计费展示步骤：获取搜索条件，查询并展示所述计费结果。
进一步地，所述计费模式包括使用时长计费子模式和自定义计费子模式；
所述使用时长计费子模式根据使用时长进行云资源计费；
所述自定义计费子模式基于云服务器的磁盘类型、虚拟CPU数目和虚拟内存数目对应的使用价格，根据对应的使用时长进行云资源计费。
进一步地，所述计费模式还包括组合计费子模式，该组合计费子模式将所述使用时长计费子模式和自定义计费子模式的计费结果相加，作为云资源最终的计费结果。
进一步地，所述数据清洗包括过滤出状态错误的数据。
进一步地，所述话单的消息内容还包括计量类型编号、话单日期、资源所属区域、云资源所属可用域、云服务器Flavor类型、云服务器UUID、duration、时间差、2,display_name:云服务器名称,vcpus:虚拟CPU数目,ram:虚拟内存数目。
进一步地，所述搜索条件包括云服务器所属租户UUID、云服务类型、云资源类型、统计时间段开始时间和/或统计时间段结束时间。
本发明还提供一种云资源的实时计费管理系统，包括：
数据采集清洗单元：从云服务器中获取云资源使用数据，并对该云资源使用数据进行数据清洗；
话单上传单元：根据清洗后的云资源使用数据，生成话单，所述话单的消息内容包括云服务器所属租户UUID、云服务类型、云资源类型、统计时间段开始时间、统计时间段结束时间、虚拟CPU数目、虚拟内存数目、磁盘类型和磁盘大小；
分布式统计单元：对所述话单进行存储，并对所述话单进行计费数据提取，所述计费数据划分有钥匙单元和取值单元，所述钥匙单元包括云服务器所属租户UUID、云服务类型和云资源类型，所述取值单元包括虚拟CPU数目、虚拟内存数目、磁盘类型、磁盘大小和使用时长；
根据所述计费数据分布式计算计费结果，该分布式计算中每个计算过程包括选取钥匙单元相同的所述计费数据，采用预设的计费模式进行计算，获取计费结果；
数据存入单元：按照所述云服务器所属租户UUID存储所述计费结果；
计费展示单元：获取搜索条件，查询并展示所述计费结果。
进一步地，所述数据采集清洗单元通过openstack平台API接口获取云资源使用数据；
所述话单上传单元按照SLA模式的话单规格生成所述话单；
所述分布式统计单元采用Hadoop大数据平台对所述话单进行存储，采用HDFS分布式文件系统和MapReduce框架进行所述分布式结算；
所述数据存入单元通过Mysql数据库存储所述计费结果；
所述计费展示单元采用SpringBoot框架与TinyUI进行前后端结合，展示所述计费结果。
进一步地，所述数据采集清洗单元的数据处理过程具体为，获取所有租户的云服务器详情，根据预设的不活跃状态，进行云服务器的过滤，得到过滤后的云服务器的云资源使用数据；所述不活跃状态包括虚拟机仅仅在数据库创建，但是还没真正开始创建；从配额和计费角度看，虚拟机已经不存在，最终虚拟机和磁盘被销毁；虚拟机发生无法恢复的错误，唯一的可执行的操作就是删除虚拟机。
进一步地，所述计费模式包括使用时长计费子模式、自定义计费子模式和组合计费子模式，
所述使用时长计费子模式根据使用时长进行云资源计费；
所述自定义计费子模式基于云服务器的磁盘类型、虚拟CPU数目和虚拟内存数目对应的使用价格，根据对应的使用时长进行云资源计费；
所述组合计费子模式将所述使用时长计费子模式和自定义计费子模式的计费结果相加，作为云资源最终的计费结果。
与现有技术相比，本发明具有以下优点：
(1)本发明提供三种计费模式，可根据使用时长、云服务器的磁盘类型、虚拟CPU数目和虚拟内存数目实现多种计费方式，实现多维度定制化的统计分析与计量计费；
对云资源的话单数据进行针对性的提取与划分，减小系统的数据处理量，能应对云资源庞大的日志信息量的处理；
将计费数据划分为计费数据划分有钥匙单元和取值单元，有利于实现分布式计算，提升计费效率。
(2)引入基于Hadoop平台的HDFS分布式文件存储与HBase分布式列数据库，解决实时计费产品海量源数据存储问题；
(3)引入基于Hadoop平台的MapReduce分布式计算框架，对实时海量源数据快速多维度统计计算；
(4)针对市场上百花齐放的云服务，提出了三种类型的计费方式，由简入繁，可满足市场上大部分的云服务传统与多维度个性化定制相结合的计费模式；
(5)实时生成个性化定制的话单，多不同类型的云资源多维度的计量计费；
(6)引入实时计量计费的思想，租户侧可以实时高效的获取自己的费用数据，掌握各个云资源的使用情况；
(7)引入轻量级前端框架TinyUI，进行多维度多准类图标全方位展示。
附图说明
图1为本发明实施例中云资源的实时计费管理系统的整体架构示意图；
图2为本发明实施例中云资源的实时计费管理系统的处理流程示意图；
图3为本发明实施例中分布式统计单元的处理流程示意图。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
实施例1
本实施例提供一种云资源的实时计费管理方法，包括以下步骤：
数据采集清洗步骤：从云服务器中获取云资源使用数据，并对该云资源使用数据进行数据清洗；
话单上传步骤：根据清洗后的云资源使用数据，生成话单，话单的消息内容包括云服务器所属租户UUID、云服务类型、云资源类型、统计时间段开始时间、统计时间段结束时间、虚拟CPU数目、虚拟内存数目、磁盘类型和磁盘大小；
分布式统计步骤：对话单进行存储，并对话单进行计费数据提取，计费数据划分有钥匙单元和取值单元，钥匙单元包括云服务器所属租户UUID、云服务类型和云资源类型，取值单元包括虚拟CPU数目、虚拟内存数目、磁盘类型、磁盘大小和使用时长；
根据计费数据分布式计算计费结果，该分布式计算中每个计算过程包括选取钥匙单元相同的计费数据，采用预设的计费模式进行计算，获取计费结果；
数据存入步骤：按照云服务器所属租户UUID存储计费结果；
计费展示步骤：获取搜索条件，查询并展示计费结果。
作为一种优选的实施方式，计费模式包括使用时长计费子模式和自定义计费子模式；
使用时长计费子模式根据使用时长进行云资源计费；
自定义计费子模式基于云服务器的磁盘类型、虚拟CPU数目和虚拟内存数目对应的使用价格，根据对应的使用时长进行云资源计费。
作为一种优选的实施方式，计费模式还包括组合计费子模式，该组合计费子模式将使用时长计费子模式和自定义计费子模式的计费结果相加，作为云资源最终的计费结果。
作为一种优选的实施方式，数据清洗包括过滤出状态错误的数据。
作为一种优选的实施方式，话单的消息内容还包括计量类型编号、话单日期、资源所属区域、云资源所属可用域、云服务器Flavor类型、云服务器UUID、duration、时间差、2,display_name:云服务器名称,vcpus:虚拟CPU数目,ram:虚拟内存数目。
作为一种优选的实施方式，搜索条件包括云服务器所属租户UUID、云服务类型、云资源类型、统计时间段开始时间和/或统计时间段结束时间。
本实施例还提供一种云资源的实时计费管理系统，包括：
数据采集清洗单元：从云服务器中获取云资源使用数据，并对该云资源使用数据进行数据清洗；
话单上传单元：根据清洗后的云资源使用数据，生成话单，话单的消息内容包括云服务器所属租户UUID、云服务类型、云资源类型、统计时间段开始时间、统计时间段结束时间、虚拟CPU数目、虚拟内存数目、磁盘类型和磁盘大小；
分布式统计单元：对话单进行存储，并对话单进行计费数据提取，计费数据划分有钥匙单元和取值单元，钥匙单元包括云服务器所属租户UUID、云服务类型和云资源类型，取值单元包括虚拟CPU数目、虚拟内存数目、磁盘类型、磁盘大小和使用时长；
根据计费数据分布式计算计费结果，该分布式计算中每个计算过程包括选取钥匙单元相同的计费数据，采用预设的计费模式进行计算，获取计费结果；
数据存入单元：按照云服务器所属租户UUID存储计费结果；
计费展示单元：获取搜索条件，查询并展示计费结果。
作为一种优选的实施方式，数据采集清洗单元通过openstack平台API接口获取云资源使用数据；
话单上传单元按照SLA模式的话单规格生成话单；
分布式统计单元采用Hadoop大数据平台对话单进行存储，采用HDFS分布式文件系统和MapReduce框架进行分布式结算；
数据存入单元通过Mysql数据库存储计费结果；
计费展示单元采用SpringBoot框架与TinyUI进行前后端结合，展示计费结果。
作为一种优选的实施方式，数据采集清洗单元的数据处理过程具体为，获取所有租户的云服务器详情，根据预设的不活跃状态，进行云服务器的过滤，得到过滤后的云服务器的云资源使用数据；不活跃状态包括虚拟机仅仅在数据库创建，但是还没真正开始创建；从配额和计费角度看，虚拟机已经不存在，最终虚拟机和磁盘被销毁；虚拟机发生无法恢复的错误，唯一的可执行的操作就是删除虚拟机。
作为一种优选的实施方式，计费模式包括使用时长计费子模式、自定义计费子模式和组合计费子模式，
使用时长计费子模式根据使用时长进行云资源计费；
自定义计费子模式基于云服务器的磁盘类型、虚拟CPU数目和虚拟内存数目对应的使用价格，根据对应的使用时长进行云资源计费；
组合计费子模式将使用时长计费子模式和自定义计费子模式的计费结果相加，作为云资源最终的计费结果。
将上述优选的实施方式进行组合可以得到一种最优的实施方式，下面对该最优的实施方式的具体实施过程进行描述。
如图1和图2所示，一种云资源的实时计费管理系统包括如下单元：
数据采集清洗单元：本实验平台基于开源Openstack环境，对openstack平台上的弹性云服务器进行计费。因此数据来源通过调用openstack开源API接口，获取平台上的云服务器信息，并对数据进行清洗；
话单上报单元：根据数据清洗单元获得的数据，按照SLA模式的话单规格获取需要的个性化定制属性，并生成话单，上传到Hadoop分布式统计平台上，进行话单上报；
分布式统计单元：本单元采用Hadoop大数据平台，对上传到平台的话单存入Hbase列数据库，对源数据进行保留存储。同时利用HDFS分布式文件系统和MapReduce框架对每小时上报到平台上的海量话单进行分布式计算；
数据存入单元：对分布式统计单元计算出的按租户维度的计费数据存入Mysql数据库，以便展示模块调取展示；
计费展示单元：计费展示单元采用了SpringBoot框架与TinyUI进行前后端结合，构建了一套实时展示云资源计费信息的展示平台。
本实施例中，根据不同云资源使用属性，灵活提供了三种类型的计费模式，并将通过这三种类型计费模式抽取到的计费数据利用基于Hadoop的MapReduce框架进行海量计算，迅速得出计费结果：
三种类型计费模式包括：
Atom：默认计费方式，按照云资源使用时长计费；
Flavor：自定义计费方式，可根据资源自由特性进行个性化定制计费模式；
Sla：组合计费方式，一种按时长计费与个性化定制计费方案综合的计费方式。
Atom计费方式主要每小时统计资源的使用情况，并与定义的单价相乘，单个云资源计费公式如下：
某云资源单位时长内产生的实际费用
＝(单位时长内该资源的实际使用时长/单位时长)×单位时长定价费用
Flavor计费则需要设置定时任务，每小时统计一次，生成话单。话单内容根据自定义的计费类型获取云资源的相关属性，以弹性云服务器为例，一般计费按照云服务器的CPU、内存配置、挂载的硬盘类型、挂载的硬盘大小分别进行定价，根据生成的话单，使用Hadoop大数据平台进行分布式计算，抽取话单中关键数据vcpu和ram的大小，算出整个平台云资源的费用情况，存入数据库。单个云资源计费公式如下：
某个弹性云服务器单位时间产生的费用
＝vCPU个数×单位时间单个vCPU使用价格+ram大小(GB)
×单位时间1GB内存使用价格+磁盘1
×单位时间该磁盘类型的云硬盘1GB使用价格+...磁盘n
×单位时间该磁盘类型的云硬盘1GB使用价格
Sla计费综合了Atom和Flavor两种计费模式，既对云资源使用时长进行计费，同时会对资源里面包含的个性化定制属性计费，以云服务器为例，单个云服务器计费公式如下：
某个弹性云服务器单位时间产生的费用
＝弹性云服务器单位时间内使用实际时长×单位时长内定价费用+vCPU个数×单位时间单个vCPU使用价格+ram大小(GB)
×单位时间1GB内存使用价格+磁盘1
×单位时间该磁盘类型的云硬盘1GB使用价格+...磁盘n
×单位时间该磁盘类型的云硬盘1GB使用价格
下面主要以SLA综合计费模式为例，对云资源的实时计费管理系统的各单元进行详细描述。
1、数据采集清洗单元
通过开源Openstack平台提供的API接口，获取该平台上所有资源池的信息，并查出每个资源池下所有租户的弹性云服务器详情，对一些状态错误的服务器进行过滤，数据清洗。如表1所示的三种状态的弹性云服务器将被清洗过滤掉，因为它们已经不属于活跃的资源：
表1
Figure BDA0002870375890000091
2、话单上报单元
话单上报单元结合Flavor计费的维度进行数据抽取与上报，主要如下几个步骤：
步骤S201：根据步骤S1清洗出的每个云服务器详情数据，获取云服务的CPU、内存、磁盘类型与大小，按照如下格式生成话单：
计量类型编号|话单日期|云服务器所属租户UUID|资源所属区域|云资源所属可用域|云服务类型|云资源类型|云服务器Flavor类型|云服务器UUID||统计时间段开始时间|统计时间段结束时间|duration|时间差|2,display_name:云服务器名称,vcpus:虚拟CPU数目,ram:虚拟内存数目|磁盘类型1：磁盘大小，磁盘类型2：磁盘大小，…磁盘类型3：磁盘大小|
示例话单如下所示：
20|20191008070000|6c4218b6ceff4bff86aba08b75a66120|bj-kjy-2|虚拟机可用域_04|service.type.openec2|resource.type.openvm|8C16G200|8f4fd6ef-d7f3-483d-ac38-bab3c2a7d192||20191008060000|20191008070000|duration|3600|2,display_name:ccp_test,vcpus:8,ram:16384|高速云盘：300G,标准云盘：200G|
步骤S202：对生成的话单进行上报，上传至分布式统计单元；
3、分布式统计单元
如图3所示，分布式统计单元主要对openstack平台上生成的海量计费数据进行存储、计算，具体包括：
步骤S301：使用Hbase分布式列存储数据库存储上报的话单数据；
步骤S302：生成费用统计计算所需的HDFS输入文件；
步骤S303：利用公式3为原理，结合MapReduce框架进行计算并生成以租户为单位的HDFS输出文件。
其中，Map函数的输入文件是示例话单中内容，Map函数输出Key为“租户ID_云服务类型_云资源类型”，Value为vcpu、ram、硬盘数据以及使用时长，其示例格式如下所示：
1a4312fg840eadd7qwtr0012wqe_service.type.openec2_resource.type.openvm
3600|2,display_name:ccp_test,vcpus:8,ram:16384|高速云盘：300G,标准云盘：200G
Reduce函数的输入即是Map函数的输出，Reduce的输出即是将Key相同的资源类型按照预设的计费模式进行计算，其中Key相同即同一个租户下同一种云资源，计算之后输出的Value即该租户该资源类型该时长之内产生的费用，Reduce输出示例格式如下所示：
1a4312fg840eadd7qwtr0012wqe_service.type.openec2_resource.type.openvm120
4、数据存入单元
数据存入单元主要是将步骤S3的HDFS结果文件存入Mysql数据库，具体包括：
步骤S401：将Hadoop平台上HDFS结果文件下载至本地；
步骤S402：读取文件中数据存入数据库。
5、计费展示单元
计费展示单元主要使用MVC框架，后台利用SpringBoot实现接口，前台通过TinyUI结合图表进行展示。具体包括：
步骤S501：用户可选择要查看的云服务资源类型，任意时间段某个租户产生的费用；
步骤S502：用户可选择同一时间段多种类型的云服务资源产生的费用进行对比展示；
步骤S503：用户可选择多个租户同一时间段同一种云服务资源产生的费用进行对比展示。
以上详细描述了本发明的较佳具体实施例。应当理解，本领域的普通技术人员无需创造性劳动就可以根据本发明的构思做出诸多修改和变化。因此，凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的实验可以得到的技术方案，皆应在由权利要求书所确定的保护范围内。

Claims (10)

1.一种云资源的实时计费管理方法，其特征在于，包括以下步骤：
数据采集清洗步骤：从云服务器中获取云资源使用数据，并对该云资源使用数据进行数据清洗；
话单上传步骤：根据清洗后的云资源使用数据，生成话单，所述话单的消息内容包括云服务器所属租户UUID、云服务类型、云资源类型、统计时间段开始时间、统计时间段结束时间、虚拟CPU数目、虚拟内存数目、磁盘类型和磁盘大小；
分布式统计步骤：对所述话单进行存储，并对所述话单进行计费数据提取，所述计费数据划分有钥匙单元和取值单元，所述钥匙单元包括云服务器所属租户UUID、云服务类型和云资源类型，所述取值单元包括虚拟CPU数目、虚拟内存数目、磁盘类型、磁盘大小和使用时长；
根据所述计费数据分布式计算计费结果，该分布式计算中每个计算过程包括选取钥匙单元相同的所述计费数据，采用预设的计费模式进行计算，获取计费结果；
数据存入步骤：按照所述云服务器所属租户UUID存储所述计费结果；
计费展示步骤：获取搜索条件，查询并展示所述计费结果。
2.根据权利要求1所述的一种云资源的实时计费管理方法，其特征在于，所述计费模式包括使用时长计费子模式和自定义计费子模式；
所述使用时长计费子模式根据使用时长进行云资源计费；
所述自定义计费子模式基于云服务器的磁盘类型、虚拟CPU数目和虚拟内存数目对应的使用价格，根据对应的使用时长进行云资源计费。
3.根据权利要求2所述的一种云资源的实时计费管理方法，其特征在于，所述计费模式还包括组合计费子模式，该组合计费子模式将所述使用时长计费子模式和自定义计费子模式的计费结果相加，作为云资源最终的计费结果。
4.根据权利要求1所述的一种云资源的实时计费管理方法，其特征在于，所述数据清洗包括过滤出状态错误的数据。
5.根据权利要求1所述的一种云资源的实时计费管理方法，其特征在于，所述话单的消息内容还包括计量类型编号、话单日期、资源所属区域、云资源所属可用域、云服务器Flavor类型、云服务器UUID、duration、时间差、2,display_name:云服务器名称,vcpus:虚拟CPU数目,ram:虚拟内存数目。
6.根据权利要求1所述的一种云资源的实时计费管理方法，其特征在于，所述搜索条件包括云服务器所属租户UUID、云服务类型、云资源类型、统计时间段开始时间和/或统计时间段结束时间。
7.一种云资源的实时计费管理系统，其特征在于，包括：
数据采集清洗单元：从云服务器中获取云资源使用数据，并对该云资源使用数据进行数据清洗；
话单上传单元：根据清洗后的云资源使用数据，生成话单，所述话单的消息内容包括云服务器所属租户UUID、云服务类型、云资源类型、统计时间段开始时间、统计时间段结束时间、虚拟CPU数目、虚拟内存数目、磁盘类型和磁盘大小；
分布式统计单元：对所述话单进行存储，并对所述话单进行计费数据提取，所述计费数据划分有钥匙单元和取值单元，所述钥匙单元包括云服务器所属租户UUID、云服务类型和云资源类型，所述取值单元包括虚拟CPU数目、虚拟内存数目、磁盘类型、磁盘大小和使用时长；
根据所述计费数据分布式计算计费结果，该分布式计算中每个计算过程包括选取钥匙单元相同的所述计费数据，采用预设的计费模式进行计算，获取计费结果；
数据存入单元：按照所述云服务器所属租户UUID存储所述计费结果；
计费展示单元：获取搜索条件，查询并展示所述计费结果。
8.根据权利要求7所述的一种云资源的实时计费管理系统，其特征在于，所述数据采集清洗单元通过openstack平台API接口获取云资源使用数据；
所述话单上传单元按照SLA模式的话单规格生成所述话单；
所述分布式统计单元采用Hadoop大数据平台对所述话单进行存储，采用HDFS分布式文件系统和MapReduce框架进行所述分布式结算；
所述数据存入单元通过Mysql数据库存储所述计费结果；
所述计费展示单元采用SpringBoot框架与TinyUI进行前后端结合，展示所述计费结果。
9.根据权利要求7所述的一种云资源的实时计费管理系统，其特征在于，所述数据采集清洗单元的数据处理过程具体为，获取所有租户的云服务器详情，根据预设的不活跃状态，进行云服务器的过滤，得到过滤后的云服务器的云资源使用数据；所述不活跃状态包括虚拟机仅仅在数据库创建，但是还没真正开始创建；从配额和计费角度看，虚拟机已经不存在，最终虚拟机和磁盘被销毁；虚拟机发生无法恢复的错误，唯一的可执行的操作就是删除虚拟机。
10.根据权利要求7所述的一种云资源的实时计费管理系统，其特征在于，所述计费模式包括使用时长计费子模式、自定义计费子模式和组合计费子模式，
所述使用时长计费子模式根据使用时长进行云资源计费；
所述自定义计费子模式基于云服务器的磁盘类型、虚拟CPU数目和虚拟内存数目对应的使用价格，根据对应的使用时长进行云资源计费；
所述组合计费子模式将所述使用时长计费子模式和自定义计费子模式的计费结果相加，作为云资源最终的计费结果。
CN202011605932.0A 2020-12-30 2020-12-30 一种云资源的实时计费管理方法和系统 Pending CN112764675A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011605932.0A CN112764675A (zh) 2020-12-30 2020-12-30 一种云资源的实时计费管理方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011605932.0A CN112764675A (zh) 2020-12-30 2020-12-30 一种云资源的实时计费管理方法和系统

Publications (1)

Publication Number Publication Date
CN112764675A true CN112764675A (zh) 2021-05-07

Family

ID=75697387

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011605932.0A Pending CN112764675A (zh) 2020-12-30 2020-12-30 一种云资源的实时计费管理方法和系统

Country Status (1)

Country Link
CN (1) CN112764675A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114679459A (zh) * 2022-05-07 2022-06-28 阿里巴巴（中国）有限公司 云函数的调用方法和装置
CN115134179A (zh) * 2022-06-30 2022-09-30 济南浪潮数据技术有限公司 一种云资源计量计费装置、方法、设备及存储介质
WO2023174360A1 (zh) * 2022-03-16 2023-09-21 华为云计算技术有限公司 基于公有云技术的云服务提供方法和装置
WO2023207951A1 (zh) * 2022-04-29 2023-11-02 华为云计算技术有限公司 基于公有云技术的云资源计费方法、装置及云管理平台
KR102667194B1 (ko) * 2023-01-18 2024-05-17 주식회사 신세계아이앤씨 클라우드 인프라 공유자원 과금 분할 방법 및 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105049218A (zh) * 2015-06-24 2015-11-11 上海斐讯数据通信技术有限公司 PhiCloud云计费方法及系统
CN108023735A (zh) * 2017-11-23 2018-05-11 太极计算机股份有限公司 一种基于动态资源的计费方法
CN109951302A (zh) * 2019-02-26 2019-06-28 启迪云计算有限公司 一种基于数据字典自定义产品的云计算计费系统及方法
CN111684761A (zh) * 2018-02-06 2020-09-18 瑞典爱立信有限公司 用于使用智能合约和区块链管理云服务的方法和装置
CN112000317A (zh) * 2020-08-26 2020-11-27 济南浪潮数据技术有限公司 一种资源计费方法、装置、电子设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105049218A (zh) * 2015-06-24 2015-11-11 上海斐讯数据通信技术有限公司 PhiCloud云计费方法及系统
CN108023735A (zh) * 2017-11-23 2018-05-11 太极计算机股份有限公司 一种基于动态资源的计费方法
CN111684761A (zh) * 2018-02-06 2020-09-18 瑞典爱立信有限公司 用于使用智能合约和区块链管理云服务的方法和装置
CN109951302A (zh) * 2019-02-26 2019-06-28 启迪云计算有限公司 一种基于数据字典自定义产品的云计算计费系统及方法
CN112000317A (zh) * 2020-08-26 2020-11-27 济南浪潮数据技术有限公司 一种资源计费方法、装置、电子设备及存储介质

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023174360A1 (zh) * 2022-03-16 2023-09-21 华为云计算技术有限公司 基于公有云技术的云服务提供方法和装置
WO2023207951A1 (zh) * 2022-04-29 2023-11-02 华为云计算技术有限公司 基于公有云技术的云资源计费方法、装置及云管理平台
CN114679459A (zh) * 2022-05-07 2022-06-28 阿里巴巴（中国）有限公司 云函数的调用方法和装置
CN114679459B (zh) * 2022-05-07 2024-03-12 阿里巴巴（中国）有限公司 云函数的调用方法和装置
CN115134179A (zh) * 2022-06-30 2022-09-30 济南浪潮数据技术有限公司 一种云资源计量计费装置、方法、设备及存储介质
KR102667194B1 (ko) * 2023-01-18 2024-05-17 주식회사 신세계아이앤씨 클라우드 인프라 공유자원 과금 분할 방법 및 시스템

Similar Documents

Publication Publication Date Title
CN112764675A (zh) 一种云资源的实时计费管理方法和系统
CN107391538B (zh) 点击数据采集、处理和展示方法、装置、设备及存储介质
CN105447724B (zh) 内容项推荐方法及装置
Iosup et al. On the performance variability of production cloud services
CN108171540A (zh) 用于资源计量计费的方法和装置
CN105183895A (zh) 虚拟资源推送方法和装置
CN111611305A (zh) 一种数据处理方法、装置及介质
CN108664549A (zh) 一种大数据处理系统、方法和装置
CN109948882B (zh) 基于区块数据结构的任务处理方法及相关设备
CN110084643A (zh) 一种基于历史交易分布的商品定价方法及装置
CN112035717A (zh) 信息处理方法、装置、设备及存储介质
CN108153891A (zh) 上网活跃时间统计方法及装置
TWI786331B (zh) 商區管理系統、商區管理方法、計算設備及非暫態機器可讀儲存媒體
CN112579691B (zh) 一种支持大屏展示的数据处理方法及装置
CN108563778A (zh) 一种关注信息的处理方法及装置、存储介质、电子设备
CN108234622A (zh) 计费方法和计费系统
CN108074126A (zh) 一种业务统计方法、装置和电子设备
CN109636438A (zh) 一种虚拟资源业务系统、虚拟资源的处理方法和装置
CN115829579A (zh) 资源数据处理方法、装置、服务器及存储介质
CN110941608B (zh) 一种埋点分析和漏斗分析报表生成方法、装置及设备
CN114285848A (zh) 区块链资源的可计量方法、系统、电子设备和可读介质
US20210304043A1 (en) Evaluating a recommender system for data processing
CN113065894A (zh) 基于用户画像及订单分析的数据归集方法、装置及存储介质
CN109214874B (zh) Ip产品运营数据处理方法、装置、设备及可读存储介质
CN112634088A (zh) 房源动态信息推送方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination