CN111061786A - 一种多云环境下的资源同步方法及其系统 - Google Patents

一种多云环境下的资源同步方法及其系统 Download PDF

Info

Publication number
CN111061786A
CN111061786A CN201911094686.4A CN201911094686A CN111061786A CN 111061786 A CN111061786 A CN 111061786A CN 201911094686 A CN201911094686 A CN 201911094686A CN 111061786 A CN111061786 A CN 111061786A
Authority
CN
China
Prior art keywords
cloud
data
resource
management domain
management
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911094686.4A
Other languages
English (en)
Inventor
张志江
季统凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
G Cloud Technology Co Ltd
Original Assignee
G Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by G Cloud Technology Co Ltd filed Critical G Cloud Technology Co Ltd
Priority to CN201911094686.4A priority Critical patent/CN111061786A/zh
Publication of CN111061786A publication Critical patent/CN111061786A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • G06F16/2365Ensuring data consistency and integrity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • Storage Device Security (AREA)

Abstract

本发明涉及多云管理技术领域,特别涉及一种多云环境下的资源同步方法及其系统。本发明的方法包括如下步骤:1、配置不同云平台的管理域信息,并且加密存到数据库;2:守护进程监控管理域列表,动态初始化和关闭资源同步定时器;3:多云管理平台调用统一资源API接口,根据对应的云平台适配器获取资源信息;4:对统一资源API接口返回的数据进行整合并且保存到数据库中。本发明解决了多云平台资源数据的统计分析和统一性问题;可以用于多云管理中的云平台数据资源管理。

Description

一种多云环境下的资源同步方法及其系统
技术领域
本发明涉及多云管理技术领域,特别涉及一种多云环境下的资源同步方法及其系统。
背景技术
随着云计算技术的快速发展,应用上云的需求也越来越多;提供云计算服务的厂商也越来越多。客户随着业务量的发展和安全的要求,会在不同的云厂商上构建他们的应用。如何高效地管理不同云厂商上的资源成为混合云管理的一个大难题。
目前混合云解决方案已成为客户使用云的趋势,需要把多个云平台上的大量云资源同步到多云管理平台;但很难做到将不同云平台上大量的资源数据进行统计分析以及保证数据的统一性。
发明内容
本发明解决的技术问题在于提供一种多云环境下的资源同步方法及其系统;将不同云平台上大量的资源数据进行统计分析,并保证数据的统一性。
本发明解决上述技术问题的技术方案是:
所述的方法包括如下步骤:
步骤1、配置不同云平台的管理域信息,并且加密存到数据库;
步骤2:守护进程监控管理域列表,动态初始化和关闭资源同步定时器;
步骤3:多云管理平台调用统一资源API接口,根据对应的云平台适配器获取资源信息;
步骤4:对统一资源API接口返回的数据进行整合并且保存到数据库中。
所述的方法还包括步骤5,即多云管理后台对云平台数据进行统计和分析。
所述的管理域信息采用JSON形式记录,通过RSA加密方法加密JSON字符串。
对统一资源API接口获取的虚拟机资源,保存到对应数据表上,并且通过同步定时器维护数据的统一性。
所述的系统包括管理域模块、同步线程模块、资源调用适配器、资源存储模块和数据分析模块;
所述管理域模块实现配置管理域信息,并对管理域信息加密后存入数据库;
所述同步线程模块,通过其守护进程实现定时器的初始化、启动、释放;
所述资源调用适配器接收统一资源API接口请求之后,判断调用对应的云平台适配器,请求云平台底层接口返回数据,整合数据,返回响应到适配器;
所述资源存储模块将统一资源API接口返回的数据进行整合并且保存到数据库中;
所述数据分析模块;统计云平台计算资源的使用情况、虚拟机的运行状态以及监控告警情况;调用多云管理后台的缓存数据对云平台资源进行统计和分析。
本发明能够为多云管理后台数据缓存提供一个高效同步方法及系统,避免因为接入多个云平台之后数据同步延迟的问题,实现多云平台资源数据高时效性和统一性;该方法也为开发人员后续接入更多云厂商提供一个敏捷的开发方式,提供了一个更好混合云资源同步解决方案。
附图说明
下面结合附图对本发明进一步说明:
图1是本发明方法流程图;
图2是实现本发明方法的系统模块图。
具体实施方式
图1是本发明基于多云的高效同步资源方法的流程图。本发明方法实现步骤如下:
S10:配置管理域信息。
一个管理域对应一个云厂商,配置需要接入的云厂商用户认证信息。因为不同的云厂商用户认证信息项不同,该方法采用JSON形式记录,最后通过RSA加密方法加密JSON字符串后写入数据库,实现同时接入多个公有云或者私有云的管理域。
例如,配置管理域A信息:
{"url":"www.cloud1.com","userName":"user1","password":"test"}
配置管理域B信息:
{"keyStone":"127.0.0.1:8883/v2","accessKeyId":"xxxx","accessKeySecret":"xxxxx"}
通过管理域模块来记录不同云平台的用户认证信息,并且确保用户信息的安全性。
S20:初始化定时器,并且启动。
例如,有一个守护进程监控管理域列表,当新增一个管理域的时候,就会初始化一个定时器;每一个定时器都是独立的线程,各自调用对应云平台的适配器接口获取资源;当管理域被删除的时候,也会释放对应的定时器。
通过守护进程来监控管理域模块,从而实现动态启动资源同步定时器,让多云平台更合理地使用物理机资源,多个定时器并行同步资源,能更加高效地同步云平台资源。
S30:调用统一资源API接口。
例如,调用适配的全部云平台接口都是结合中国云API接口标准,统一接口数量和出入参数。
通过结合中国云API标准的统一资源API接口,可以适配更多云厂商,可以让上层业务应用屏蔽底层云平台接口的差异性,提供接口调用的可用性。
S40:调用对应云平台的适配器获取资源信息。
例如,适配器接收统一API接口请求之后,判断调用对应的云平台的适配器;通过该适配器整合统一API接口需要入参,然后请求云平台底层接口返回的数据之后,接着再次整合数据,返回响应到适配器。
通过适配器模式,可以单独开发对应的云平台适配器,不会影响已有适配的云平台,降低各个适配器降低的耦合度,提高开发人员的开发效率和减少适配云平台带来的BUG数量。
S50:数据整合并且保存到数据库中。
例如,获取到的虚拟机资源,多云管理后台会保存到对应数据表上做缓存,并且通过同步定时器来维护数据的统一性。
通过多云管理后台上做缓存,为了加快多云平台接口响应速度,还可以对数据进行后续的分析和统计。
S60:云平台资源数据统计和分析。
例如,可以统计多个云平台上计算资源的使用情况,虚拟机的运行状态以及监控告警情况等等。
通过调用多云管理后台的缓存数据来实现云平台资源的统计和分析。
见图2所示,本发明的系统包括管理域模块100、同步线程模块200、资源调用适配器300、资源存储模块400和数据分析模块500。管理域模块100实现配置管理域信息,并对管理域信息加密后存入数据库。同步线程模块200,通过其守护进程实现定时器的初始化、启动、释放。资源调用适配器300接收统一资源API接口请求之后,判断调用对应的云平台适配器,请求云平台底层接口返回数据,整合数据,返回响应到适配器。资源存储模块400将统一资源API接口返回的数据进行整合并且保存到数据库中。数据分析模块500统计云平台计算资源的使用情况、虚拟机的运行状态以及监控告警情况;调用多云管理后台的缓存数据对云平台资源进行统计和分析。

Claims (6)

1.一种多云环境下的资源同步方法,其特征在于:所述的方法包括如下步骤:
步骤1、配置不同云平台的管理域信息,并且加密存到数据库;
步骤2:守护进程监控管理域列表,动态初始化和关闭资源同步定时器;
步骤3:多云管理平台调用统一资源API接口,根据对应的云平台适配器获取资源信息;
步骤4:对统一资源API接口返回的数据进行整合并且保存到数据库中。
2.根据权利要求1所述的方法,其特征在于:所述的方法还包括步骤5,即多云管理后台对云平台数据进行统计和分析。
3.根据权利要求1所述的方法,其特征在于:所述的管理域信息采用JSON形式记录,通过RSA加密方法加密JSON字符串。
4.根据权利要求2所述的方法,其特征在于:所述的管理域信息采用JSON形式记录,通过RSA加密方法加密JSON字符串。
5.根据权利要求1至4任一项所述的方法,其特征在于:对统一资源API接口获取的虚拟机资源,保存到对应数据表上,并且通过同步定时器维护数据的统一性。
6.一种多云环境下的资源同步系统,其特征在于:所述的系统包括管理域模块、同步线程模块、资源调用适配器、资源存储模块和数据分析模块;
所述管理域模块实现配置管理域信息,并对管理域信息加密后存入数据库;
所述同步线程模块,通过其守护进程实现定时器的初始化、启动、释放;
所述资源调用适配器接收统一资源API接口请求之后,判断调用对应的云平台适配器,请求云平台底层接口返回数据,整合数据,返回响应到适配器;
所述资源存储模块将统一资源API接口返回的数据进行整合并且保存到数据库中;
所述数据分析模块;统计云平台计算资源的使用情况、虚拟机的运行状态以及监控告警情况;调用多云管理后台的缓存数据对云平台资源进行统计和分析。
CN201911094686.4A 2019-11-11 2019-11-11 一种多云环境下的资源同步方法及其系统 Pending CN111061786A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911094686.4A CN111061786A (zh) 2019-11-11 2019-11-11 一种多云环境下的资源同步方法及其系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911094686.4A CN111061786A (zh) 2019-11-11 2019-11-11 一种多云环境下的资源同步方法及其系统

Publications (1)

Publication Number Publication Date
CN111061786A true CN111061786A (zh) 2020-04-24

Family

ID=70297605

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911094686.4A Pending CN111061786A (zh) 2019-11-11 2019-11-11 一种多云环境下的资源同步方法及其系统

Country Status (1)

Country Link
CN (1) CN111061786A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111582824A (zh) * 2020-05-08 2020-08-25 北京青云科技股份有限公司 云资源同步方法、装置、设备及存储介质
CN112116467A (zh) * 2020-06-16 2020-12-22 上海金融期货信息技术有限公司 一种异构柜台并行运行方法和系统
CN112698923A (zh) * 2021-01-15 2021-04-23 北京开物数智科技有限公司 一种多云厂商边缘Serverless管理系统
CN112769777A (zh) * 2020-12-28 2021-05-07 上海蓝云网络科技有限公司 基于云平台的数据整合方法、装置及电子设备
CN112804363A (zh) * 2021-04-09 2021-05-14 北京视界云天科技有限公司 基于多云融合的缓存资源处理方法及装置
CN113037828A (zh) * 2021-03-03 2021-06-25 浪潮云信息技术股份公司 一种云环境下的数据采集与控制方法及系统
CN113127292A (zh) * 2021-03-17 2021-07-16 上海慧典软件科技有限公司 一种适用于多云管理的运维、监控方法
CN113596128A (zh) * 2021-07-21 2021-11-02 华云数据控股集团有限公司 一种多云平台的资源同步方法、系统及电子设备
CN115834576A (zh) * 2022-10-21 2023-03-21 济南浪潮数据技术有限公司 一种基于多云纳管的跨平台数据分发方法及系统

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111582824A (zh) * 2020-05-08 2020-08-25 北京青云科技股份有限公司 云资源同步方法、装置、设备及存储介质
CN111582824B (zh) * 2020-05-08 2023-03-24 北京青云科技股份有限公司 云资源同步方法、装置、设备及存储介质
CN112116467A (zh) * 2020-06-16 2020-12-22 上海金融期货信息技术有限公司 一种异构柜台并行运行方法和系统
CN112116467B (zh) * 2020-06-16 2024-06-04 上海金融期货信息技术有限公司 一种异构柜台并行运行方法和系统
CN112769777A (zh) * 2020-12-28 2021-05-07 上海蓝云网络科技有限公司 基于云平台的数据整合方法、装置及电子设备
CN112698923A (zh) * 2021-01-15 2021-04-23 北京开物数智科技有限公司 一种多云厂商边缘Serverless管理系统
CN113037828B (zh) * 2021-03-03 2023-01-20 浪潮云信息技术股份公司 一种云环境下的数据采集与控制系统
CN113037828A (zh) * 2021-03-03 2021-06-25 浪潮云信息技术股份公司 一种云环境下的数据采集与控制方法及系统
CN113127292A (zh) * 2021-03-17 2021-07-16 上海慧典软件科技有限公司 一种适用于多云管理的运维、监控方法
CN112804363A (zh) * 2021-04-09 2021-05-14 北京视界云天科技有限公司 基于多云融合的缓存资源处理方法及装置
CN113596128A (zh) * 2021-07-21 2021-11-02 华云数据控股集团有限公司 一种多云平台的资源同步方法、系统及电子设备
CN113596128B (zh) * 2021-07-21 2024-02-09 华云数据控股集团有限公司 一种多云平台的资源同步方法、系统及电子设备
CN115834576A (zh) * 2022-10-21 2023-03-21 济南浪潮数据技术有限公司 一种基于多云纳管的跨平台数据分发方法及系统

Similar Documents

Publication Publication Date Title
CN111061786A (zh) 一种多云环境下的资源同步方法及其系统
US11558470B2 (en) Methods and apparatus to manage cloud provider sessions
US9202225B2 (en) Aggregate monitoring of utilization data for vendor products in cloud networks
CN109358866B (zh) 一种面向应用的多云管理系统
US20020082818A1 (en) Data model for automated server configuration
US10318747B1 (en) Block chain based authentication
US20170279720A1 (en) Real-Time Logs
CN108667639B (zh) 一种私有云环境下的资源管理方法及管理服务器
CN108933838B (zh) 应用数据处理方法及装置
CN114780569B (zh) 一种拟态redis数据库的输入输出代理方法和装置
US11599378B2 (en) Data encryption key management system
CN113965434B (zh) 一种跨机房场景下的api网关路由实现方法
CN113609514B (zh) 一种云硬盘加解密方法、装置、系统及可读存储介质
CN112087401B (zh) 分布式存储中实现服务质量的方法和装置
CN115834075A (zh) 基于多租户管理的密码服务与计算服务一体化方法及装置
Pallas et al. Pick your choice in HBase: Security or performance
US11032321B2 (en) Secure performance monitoring of remote application servers
US11330068B2 (en) Methods and systems for recording user operations on a cloud management platform
Hillbrecht et al. A SNMP-based virtual machines management interface
CN107682228A (zh) 一种OpenStack集群的状态监控方法及其装置
CN109582464B (zh) 一种云平台管理多种虚拟化平台的方法和装置
Kekkonen et al. Towards trusted environment in cloud monitoring
CN107704313A (zh) 一种虚拟机管理方法及其装置
US11714551B2 (en) Credential manager with account selection and resource load-balancing
CN115801833B (zh) 一种企业级公有云资源管理方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination