CN110633128A - 一种基于Docker和Ceph的云平台电力系统分析计算方法 - Google Patents

一种基于Docker和Ceph的云平台电力系统分析计算方法 Download PDF

Info

Publication number
CN110633128A
CN110633128A CN201910748083.5A CN201910748083A CN110633128A CN 110633128 A CN110633128 A CN 110633128A CN 201910748083 A CN201910748083 A CN 201910748083A CN 110633128 A CN110633128 A CN 110633128A
Authority
CN
China
Prior art keywords
power system
analysis
container
calculation
docker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910748083.5A
Other languages
English (en)
Inventor
何伊妮
曹伟
叶桂南
宾灿
张雄宝
孙超
吕志强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangxi Power Grid Co Ltd
Original Assignee
Guangxi Power Grid Power Dispatching Control Center
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangxi Power Grid Power Dispatching Control Center filed Critical Guangxi Power Grid Power Dispatching Control Center
Priority to CN201910748083.5A priority Critical patent/CN110633128A/zh
Publication of CN110633128A publication Critical patent/CN110633128A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/176Support for shared access to files; File sharing support
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533Hypervisors; Virtual machine monitors
    • G06F9/45558Hypervisor-specific management and integration aspects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061Partitioning or combining of resources
    • G06F9/5077Logical partitioning of resources; Management or configuration of virtualized resources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/06Energy or water supply
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533Hypervisors; Virtual machine monitors
    • G06F9/45558Hypervisor-specific management and integration aspects
    • G06F2009/45562Creating, deleting, cloning virtual machine instances
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533Hypervisors; Virtual machine monitors
    • G06F9/45558Hypervisor-specific management and integration aspects
    • G06F2009/45575Starting, stopping, suspending or resuming virtual machine instances
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533Hypervisors; Virtual machine monitors
    • G06F9/45558Hypervisor-specific management and integration aspects
    • G06F2009/45595Network integration; Enabling network access in virtual machine instances

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Economics (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Human Resources & Organizations (AREA)
  • Water Supply & Treatment (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Supply And Distribution Of Alternating Current (AREA)

Abstract

本发明公开了一种基于Docker和Ceph的云平台电力系统分析计算方法,采用Docker容器技术制作电力系统各分析计算功能容器镜像,并根据用户的电力系统分析计算需求动态创建容器;将电力系统分析计算所需的基础公用数据包括发电机模型及容量、电力负荷模型、变压器模型及容量阻抗参数、电力线路模型及阻抗参数、电容电抗器模型及参数等存储在Ceph分布式存储系统中;各电力系统各分析计算功能镜像容器启动后从Ceph下载所需的数据以完成计算。本发明将容器技术与Ceph相结合实现了不同主机间数据的一致性和可靠性,也使得云平台电力系统分析计算系统具备更强的扩展能力。

Description

一种基于Docker和Ceph的云平台电力系统分析计算方法
技术领域
本发明涉及电力系统分析云计算领域,尤其涉及一种基于Docker和Ceph的云平台电力系统的分析计算方法。
背景技术
电力系统的分析计算服务是电力系统规划设计人员确定经济合理、技术可行的规划设计方案的重要工具,是运行调度人员确定系统运行方式、分析系统事故、寻求反事故措施的有效手段,是以计算机技术为基础的现代电力调度自动化系统的核心内容。
容器是轻量级的操作系统级虚拟化,可以在一个资源隔离的进程中运行应用其依赖项。运行应用程序所必需的组件都将打包成一个镜像并可以复用。执行镜像时,它运行在一个隔离环境中,并且不会共享宿主机的内存、CPU以及磁盘,这就保证了容器内进程不能监控容器外的任何进程。
Ceph是近年来最为炙手可热的开源分布式软件定义存储SDS系统。与其他分布式存储系统不同的是,Ceph在RADOS(Reliable Autonomic Distributed Object Storage)的核心对象存储架构之上,提供了块存储、文件存储和对象存储的接口,因此Ceph可以被称为统一存储。和分布式系统相同的是,Ceph同样使用多副本机制来保证数据的高可靠性。
当前系统内计算即存储资源未实现统一管理和协调优化,无法灵活应对多用户请求的电力系统分析计算任务的动态扩展性。采用容器技术可提高资源利用率并具备良好的动态扩展性,容器会分散在不同的主机上,为了保证数据的一致性和可访问性,共享存储是不可避免的。而相比于传统共享文件系统,分布式存储系统扩展能力更强。应用分布式存储系统作为容器的共享存储可很好的应对电力系统分析任务的动态扩展需求。
发明内容
发明目的:本发明提供一种基于Docker和Ceph的云平台电力系统分析计算方法,以解决电力系统各分析计算功能容器在不同主机间数据的一致性和可靠性的问题,也使得云平台电力系统分析计算系统具备更强的扩展能力。
技术方案:本发明基于Docker和Ceph的云平台电力系统分析计算方法,包括以下步骤:采用Docker容器制作电力系统分析计算功能容器镜像,并根据用户的电力系统分析计算需求动态创建容器;将电力系统分析计算所需的基础公用数据存储在Ceph分布式存储系统中;各电力系统各分析计算功能镜像容器启动后从Ceph下载所需的数据以完成计算。
电力系统分析计算系统中各分析计算功能Docker容器镜像包括以下组件:
计算参数文件:各电力系统分析计算所需的设置参数;
Protobuf通讯程序:为可执行程序caprotobuf,按照预先定义的Protobuf结构化数据格式编码和解码;
分析计算程序:对电网分析模型数据库和计算参数文件读取,各电力系统分析计算功能具体的方程求解计算;
依赖动态库:电力系统分析计算功能所依赖的电网断面动态库和拓扑分析动态库。
编写创建容器所需的Dockerfile文件,利用Dockerfile文件构建Docker镜像包括以下步骤:
编写Dockerfile文件,并将程序部分和下载工具打包添加到Dockerfile文件;
在Dockerfile文件所在的目录利用Docker build命令构建镜像。
通过运行Docker镜像以启动镜像容器,包括以下步骤:
根据配置的镜像容器的最大资源占用量,将Docker数据容器中依赖包的存储目录映射到镜像容器的工作目录,运行Docker镜像以启动镜像容器,Docker镜像启动指令中携带shell命令,shell命令在镜像容器启动的同时,执行下载工具的下载程序;其中的shell命令在镜像容器启动的同时,执行下载工具的下载程序。
根据用户电力系统分析计算需求动态创建容器,包括以下步骤:
(a)统计正在运行的未被用户使用的所需功能对应的电力系统分析计算容器数目;
(b)若存在空闲容器则将该容器分配给该用户,否则对应的电力系统分析计算Docker容器镜像启动一个新的容器实例分配给该用户;
(c)从Ceph分布式存储读取所需数据,更新容器内部的电网分析关联数据;
(d)待计算完成后将容器释放。
基础公用数据包括发电机模型及容量、电力负荷模型、变压器模型及容量阻抗参数、电力线路模型及阻抗参数和电容电抗器模型。
工作原理:本发明利用Ceph分布式存储系统存储电力系统分析计算所需的基础公共数据,制作电力系统分析计算系统各功能包括潮流计算、静态安全分析、短路计算、稳定计算的容器镜像,并将其上传到容器注册中心,用户通过API网关发出电力系统分析计算请求,Docker集群接收请求后根据需要完成云平台主机所需镜像的加载,完整的镜像包含了应用运行的所需的系统文件功能及相关联的软件功能,完成这一系列的操作后可以直接对外提供服务,完成分析计算服务。
通过运行Docker镜像以启动镜像容器,通过下载工具及所需数据地址清单,从Ceph分布式存储系统上下载所需的电力系统分析计算数据到镜像容器,通过API网关,利用Protobuf作为数据载体在用户和电力系统各分析计算功能容器间进行通信,实现用户的设置操作和计算结果的返回,并定时释放该用户占用的容器资源。为保证电力系统分析计算功能的实时响应特性,需要最低保证一定数目的容器处于运行状态,在此基础上,根据用户电力系统分析计算需求动态地创建和释放容器。
有益效果:本发明基于Docker和Ceph的云平台电力系统分析计算系统,使得电力系统各分析计算功能容器在不同主机间数据保持一致性和较高的可靠性,也使得云平台电力系统分析计算系统具备更强的扩展能力。
附图说明
图1为本发明基于Docker和Ceph的云平台电力系统分析计算方法架构图。
具体实施方式
如图1所示,本发明实施例的架构图中,当用户在Web前端请求电力系统分析计算功能时,由对应的功能Docker容器镜像动态创建一个容器实例,创建Docker数据容器,编写创建容器所需的Dockerfile文件,利用Dockerfile文件构建Docker镜像。
通过运行Docker镜像以启动基础公共数据动镜像容器,通过下载工具及所需数据地址清单,从Ceph分布式存储系统上下载所需的电力系统分析计算数据到镜像容器,通过API网关,利用Protobuf作为数据载体在用户和电力系统各分析计算功能容器间进行通信,实现用户的设置操作和计算结果的返回,并定时释放该用户占用的容器资源。为保证电力系统分析计算功能的实时响应特性,需要最低保证一定数目的容器处于运行状态,在此基础上,根据用户电力系统分析计算需求动态地创建和释放容器。
电力系统分析计算系统的基础公共数据存储在Ceph分布式存储系统,并生成地址清单;其中的基础公共数据包括发电机模型及容量、电力负荷模型、变压器模型及容量阻抗参数、电力线路模型及阻抗参数、电容电抗器模型及参数;基础公共数据存储在ceph中,并生成地址。
其中,制作的电力系统分析计算系统各功能Docker容器镜像中包括以下组件:
计算参数文件:各电力系统分析计算所需的设置参数;
Protobuf通讯程序:为可执行程序caprotobuf,实现按照预先定义的Protobuf结构化数据格式编码和解码;
分析计算程序:实现电网分析模型数据库和计算参数文件读取,各电力系统分析计算功能具体的方程求解计算;
依赖动态库:电力系统分析计算功能所依赖的电网断面动态库,拓扑分析动态库。
本发明中,编写创建容器所需的Dockerfile文件,利用Dockerfile文件构建Docker镜像具体包括以下步骤:
编写Dockerfile文件,并将程序部分和下载工具打包添加到Dockerfile文件;
在Dockerfile文件所在的目录利用Docker build命令构建镜像。
本发明中的通过运行Docker镜像以启动镜像容器,具体包括以下步骤:
根据配置的镜像容器的最大资源占用量,将Docker数据容器中依赖包的存储目录映射到镜像容器的工作目录,运行Docker镜像以启动镜像容器,Docker镜像启动指令中携带shell命令,shell命令用于在镜像容器启动的同时,执行下载工具的下载程序。
根据用户电力系统分析计算需求动态创建容器,包括以下步骤:
(a)统计正在运行的未被用户使用的所需功能对应的电力系统分析计算容器数目;
(b)若存在空闲容器则将该容器分配给该用户,否则对应的电力系统分析计算Docker容器镜像启动一个新的容器实例分配给该用户;
(c)从Ceph分布式存储读取所需数据,更新容器内部的电网分析关联数据;
(d)待计算完成后将容器释放。

Claims (7)

1.一种基于Docker和Ceph的云平台电力系统分析计算方法,其特征在于:采用Docker容器制作电力系统分析计算功能容器镜像,并根据用户的电力系统分析计算需求动态创建容器;将电力系统分析计算所需的基础公用数据存储在Ceph分布式存储系统中;各电力系统各分析计算功能镜像容器启动后从Ceph下载所需的数据以完成计算。
2.根据权利要求1所述的基于Docker和Ceph的云平台电力系统分析计算方法,其特征在于:所述电力系统分析计算系统中各分析计算功能Docker容器镜像包括以下组件:
计算参数文件:各电力系统分析计算所需的设置参数;
Protobuf通讯程序:为可执行程序caprotobuf,按照预先定义的Protobuf结构化数据格式编码和解码;
分析计算程序:对电网分析模型数据库和计算参数文件读取,各电力系统分析计算功能具体的方程求解计算;
依赖动态库:电力系统分析计算功能所依赖的电网断面动态库和拓扑分析动态库。
3.根据权利要求1所述的基于Docker和Ceph的云平台电力系统分析计算方法,其特征在于:编写创建容器所需的Dockerfile文件,利用Dockerfile文件构建Docker镜像包括以下步骤:
编写Dockerfile文件,并将程序部分和下载工具打包添加到Dockerfile文件;
在Dockerfile文件所在的目录利用Docker build命令构建镜像。
4.根据权利要求1所述的基于Docker和Ceph的云平台电力系统分析计算方法,其特征在于:通过运行Docker镜像以启动镜像容器,包括以下步骤:根据配置的镜像容器的最大资源占用量,将Docker数据容器中依赖包的存储目录映射到镜像容器的工作目录,运行Docker镜像以启动镜像容器,Docker镜像启动指令中携带shell命令,shell命令在镜像容器启动的同时,执行下载工具的下载程序。
5.根据权利要求4所述的基于Docker和Ceph的云平台电力系统分析计算方法,其特征在于:所述shell命令在镜像容器启动的同时,执行下载工具的下载程序。
6.根据权利要求1所述的基于Docker和Ceph的云平台电力系统分析计算方法,其特征在于:根据用户电力系统分析计算需求动态创建容器包括以下步骤:
(a)统计正在运行的未被用户使用的所需功能对应的电力系统分析计算容器数目;
(b)若存在空闲容器则将该容器分配给该用户,否则对应的电力系统分析计算Docker容器镜像启动一个新的容器实例分配给该用户;
(c)从Ceph分布式存储读取所需数据,更新容器内部的电网分析关联数据;
(d)待计算完成后将容器释放。
7.根据权利要求1所述的基于Docker和Ceph的云平台电力系统分析计算方法,其特征在于:所述基础公用数据包括发电机模型及容量、电力负荷模型、变压器模型及容量阻抗参数、电力线路模型及阻抗参数和电容电抗器模型。
CN201910748083.5A 2019-08-14 2019-08-14 一种基于Docker和Ceph的云平台电力系统分析计算方法 Pending CN110633128A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910748083.5A CN110633128A (zh) 2019-08-14 2019-08-14 一种基于Docker和Ceph的云平台电力系统分析计算方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910748083.5A CN110633128A (zh) 2019-08-14 2019-08-14 一种基于Docker和Ceph的云平台电力系统分析计算方法

Publications (1)

Publication Number Publication Date
CN110633128A true CN110633128A (zh) 2019-12-31

Family

ID=68969739

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910748083.5A Pending CN110633128A (zh) 2019-08-14 2019-08-14 一种基于Docker和Ceph的云平台电力系统分析计算方法

Country Status (1)

Country Link
CN (1) CN110633128A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112527463A (zh) * 2020-12-17 2021-03-19 重庆邮电大学 一种基于对象存储的容器镜像下载加速方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106506587A (zh) * 2016-09-23 2017-03-15 中国人民解放军国防科学技术大学 一种基于分布式存储的Docker镜像下载方法
CN106776960A (zh) * 2016-12-05 2017-05-31 公安部第三研究所 基于微容器实现的大数据云平台
CN108009001A (zh) * 2017-11-10 2018-05-08 中国电力科学研究院有限公司 一种基于Docker容器化管理的电网地理信息系统及管理方法
US20180300116A1 (en) * 2016-02-25 2018-10-18 Huawei Technologies Co., Ltd. Method for Automatic Application Deployment and Cloud Management Node

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180300116A1 (en) * 2016-02-25 2018-10-18 Huawei Technologies Co., Ltd. Method for Automatic Application Deployment and Cloud Management Node
CN106506587A (zh) * 2016-09-23 2017-03-15 中国人民解放军国防科学技术大学 一种基于分布式存储的Docker镜像下载方法
CN106776960A (zh) * 2016-12-05 2017-05-31 公安部第三研究所 基于微容器实现的大数据云平台
CN108009001A (zh) * 2017-11-10 2018-05-08 中国电力科学研究院有限公司 一种基于Docker容器化管理的电网地理信息系统及管理方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112527463A (zh) * 2020-12-17 2021-03-19 重庆邮电大学 一种基于对象存储的容器镜像下载加速方法
CN112527463B (zh) * 2020-12-17 2023-08-04 重庆邮电大学 一种基于对象存储的容器镜像下载加速方法

Similar Documents

Publication Publication Date Title
JP6607901B2 (ja) スケーラブル分散ストレージアーキテクチャ
US10979859B2 (en) Allocation of resources in a networked computing environment based on physical location mapping
CN111897654B (zh) 将应用迁移到云平台的方法、装置、电子设备和存储介质
CN105812171B (zh) 一种虚拟化的网络功能vnf控制方法和设备
CN109257399B (zh) 云平台应用程序管理方法及管理平台、存储介质
CN113243005A (zh) 按需网络代码执行系统中的基于性能的硬件仿真
CN104506620A (zh) 一种可扩展的自动化计算服务平台及其构建方法
CN113641457A (zh) 容器创建方法、装置、设备、介质及程序产品
CN110677462B (zh) 多区块链网络的访问处理方法、系统、装置及存储介质
CN112887121B (zh) 一种管理网络服务的方法、设备及系统
WO2020215752A1 (zh) 图计算方法及装置
CN112698925B (zh) 一种服务器集群的容器混合运行处理方法
CN111338786A (zh) 云平台资源的配额管理方法、装置和计算机设备
Fan et al. A live migration algorithm for containers based on resource locality
CN115168061A (zh) 一种计算存储分离方法、系统、电子设备及存储介质
CN111371848A (zh) 一种请求处理方法、装置、设备及存储介质
CN116800616B (zh) 虚拟化网络设备的管理方法及相关装置
CN110633128A (zh) 一种基于Docker和Ceph的云平台电力系统分析计算方法
CN107528871A (zh) 存储系统中的数据分析
Guo et al. Mobile agent‐based service migration in mobile edge computing
CN113485830A (zh) 一种电网监控系统微服务自动扩容方法
CN113438295A (zh) 容器组地址分配方法、装置、设备及存储介质
CN108696559B (zh) 流处理方法及装置
CN112306675B (zh) 数据处理方法、相关设备以及计算机可读存储介质
CN115037757A (zh) 一种多集群服务管理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200120

Address after: 530000 No. 6, democracy Road, the Guangxi Zhuang Autonomous Region, Nanning

Applicant after: GUANGXI POWER GRID Co.,Ltd.

Address before: 530000 No. 6, democracy Road, the Guangxi Zhuang Autonomous Region, Nanning

Applicant before: Guangxi power grid power dispatching control center

TA01 Transfer of patent application right
RJ01 Rejection of invention patent application after publication

Application publication date: 20191231

RJ01 Rejection of invention patent application after publication