CN110891089A - 一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法 - Google Patents

一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法 Download PDF

Info

Publication number
CN110891089A
CN110891089A CN201911200536.7A CN201911200536A CN110891089A CN 110891089 A CN110891089 A CN 110891089A CN 201911200536 A CN201911200536 A CN 201911200536A CN 110891089 A CN110891089 A CN 110891089A
Authority
CN
China
Prior art keywords
token bucket
synchronous
tokens
qos
cluster
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911200536.7A
Other languages
English (en)
Other versions
CN110891089B (zh
Inventor
岳辉
王勇
董朋志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Economic Information Service Co ltd
Original Assignee
China Economic Holdings Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Economic Holdings Ltd filed Critical China Economic Holdings Ltd
Priority to CN201911200536.7A priority Critical patent/CN110891089B/zh
Publication of CN110891089A publication Critical patent/CN110891089A/zh
Application granted granted Critical
Publication of CN110891089B publication Critical patent/CN110891089B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/61—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources taking into account QoS or priority requirements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Hardware Redundancy (AREA)

Abstract

本发明公开了一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，该方法包括启动块存储镜像同步守护进程，执行启动流程请求从主集群同步数据到备集群，采用令牌桶算法对启动流程的IO请求进行控制，执行日志重放事件流程请求从主集群同步数据到备集群，采用令牌桶算法对日志重放事件流程的IO请求进行控制。本发明采用令牌桶算法对从主集群同步数据到备集群的网络带宽进行限速，避免块存储镜像同步占用过多的网路和IO带宽，同时也能保障重要的数据业务优先备份，并且具备处理突发性IO能力，可以对突然产生的大量IO进行处理，避免对集群网络操作冲击。

Description

一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法
技术领域
本发明属于数据存储技术领域，具体涉及一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法。
背景技术
2006诞生的ceph分布式存储系统，是开源社区项目，也是openstack的默认后端存储。ceph是一种软件定义存储，可以运行在所有主流的Linux发行版和其他类UNIX操作系统。ceph的分布式架构使其可以轻易的管理成百上千个节点，同时基于计算的扁平寻址使得ceph客户端可以直接和服务端的任意节点通信，避免因为存在访问热点导致性能瓶颈。ceph对外提供了三大存储接口：块存储(RADOS Block Device，RBD)、文件系统、对象存储。
RBD已成为openstack等IaaS(基础设施及服务)云计算环境中虚拟机、镜像、云盘等服务的块设备存储后端。随着ceph的发展，在Jewel发行版中，开始有了使用RBD镜像来作为两个ceph集群的灾备功能。该功能使用RBD journaling(日志)特性来确保两个集群之间的同步复制。Mirroring(镜像同步)是在对等集群中的每个存储池的基础上配置的，可以配置为一个存储池中的所有images(镜像)自动mirror或者只指定特定的images子集做mirror。RBD-mirror守护进程负责从远端ceph集群中拉去image更新，并将其应用于本地集群的image中。在主备集群之间做RBD mirror数据就必须要走网络，ceph集群的IO能力是有限的，比如带宽、IOPS(每秒中)等。所以需要把有限的IO能力合理的分配，保证重要的业务有足够的IO能力。基于上述因素，需要对RBD Mirror引入QoS(Quality of Service，服务质量)特性，以满足对重要业务的灾备质量。QoS最早起源于网络通信，是指一个通信网络能过利用各种基础技术，为特定应用提供更好的服务的能力。对于一个存储系统而言，QoS更加合理的统筹系统有限的IO资源，从而实现按需分配，对外提供更好的存储能力。作为一个基于对象的分布式存储系统，ceph与传统的存储系统存在很多不同，其中最重要的一点就是：传统存储系统一般而言存在中心控制点，而ceph为了最大程度的追求可扩展性和高并发性，允许客户端通过CRUSH直接与集群中的OSD通信。ceph这种去中心化的架构设计使得其QoS实现机制与传统存储系统存在本质的不同，所以采用的设计原则是不丢失系统原有的优良特性，来实现RBD mirror QoS的功能。
关于ceph的QoS，目前的研究现状是将QoS机制直接嵌入到每个OSD中来实现，引入一层客户端级别的新队列，采用基于权重的轮询机制，将不同客户端队列中的请求分发至磁盘调度队列，从而在单个OSD层面实现对不同客户端按其权重分配IO资源，这种方案存在局限性：无法解决客户端IO资源预留以及最大IO资源限制问题。
发明内容
针对现有技术中的上述不足，本发明提供了一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，实现ceph对RBD mirror QoS的支持，保证到RBD mirror的IO资源合理的分配，并且避免突发性IO对集群造成冲击。
为了达到上述发明目的，本发明采用的技术方案为：
一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，包括以下步骤：
S1、启动块存储镜像同步守护进程，并建立一个共享令牌桶类；
S2、利用块存储镜像同步守护进程执行启动流程，请求从主集群同步数据到备集群；
S3、采用令牌桶算法对启动流程的IO请求进行控制，得到主镜像的一个快照，并将得到的整个快照同步到备集群的镜像；
S4、利用块存储镜像同步守护进程执行日志重放事件流程，请求从主集群同步数据到备集群；
S5、采用令牌桶算法对日志重放事件流程的IO请求进行控制，通过日志的方式将每次日志事件抓取到备集群的镜像，在备集群的镜像上进行回放。
进一步地，所述步骤S3中采用令牌桶算法对启动流程从主集群抓取对象操作进行控制具体包括以下分步骤：
S31、利用启动流程向主集群发送同步IO请求；
S32、判断QoS的队列是否已满；若是，则丢弃该同步IO；若否，则将该同步IO放置到QoS的队列中；
S33、获取令牌，并判断共享令牌桶中剩余令牌数是否大于该同步IO所需令牌数；
S34、若共享令牌桶中剩余令牌数不小于该同步IO所需令牌数，则处理该同步IO，执行从主集群中抓取对象操作；
S35、若共享令牌桶中剩余令牌数小于该同步IO所需令牌数，则将同步IO所需令牌数减去共享令牌桶中剩余令牌数，并将该将同步IO放置到QoS的队列首等待。
进一步地，所述步骤S5采用令牌桶算法对日志重放事件流程的IO请求进行控制具体包括以下分步骤：
S51、利用日志重放事件流程向主集群发送同步IO请求；
S52、判断QoS的队列是否已满；若是，则丢弃该同步IO；若否，则将该同步IO放置到QoS的队列中；
S53、获取令牌，并判断共享令牌桶中剩余令牌数是否大于该同步IO所需令牌数；
S54、若共享令牌桶中剩余令牌数不小于该同步IO所需令牌数，则处理该同步IO，执行从主集群中抓取对象操作；
S55、若共享令牌桶中剩余令牌数小于该同步IO所需令牌数，则将同步IO所需令牌数减去共享令牌桶中剩余令牌数，并将该将同步IO放置到QoS的队列首等待。
进一步地，所述共享令牌桶以独立的方式以一定的速率生成令牌。
进一步地，所述共享令牌桶设置有最大令牌数量，并且共享令牌桶中装载的令牌数量小于最大令牌数量。
进一步地，所述令牌桶算法采用定时器控制共享令牌桶的令牌生成速率。
本发明具有以下有益效果：
(1)本发明在块存储镜像同步守护进程中采用令牌桶算法对从主集群同步数据到备集群的网络带宽进行限速，避免了块存储镜像同步占用过多的网路和IO带宽，同时也能保障重要的数据业务优先备份；
(2)本发明对令牌桶的深度即持有的最大令牌数进行限定，使得具备了处理突发性IO能力，可以对突然产生的大量IO进行处理，避免对集群网络操作冲击。
附图说明
图1是本发明基于令牌桶算法的Ceph块存储镜像同步QoS优化方法流程示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
如图1所示，本发明实施例提供了一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，包括以下步骤S1至S5：
S1、启动块存储镜像同步守护进程，并建立一个共享令牌桶类；
本发明创建的块存储镜像同步(RBD mirror)是一个独立的守护进程(daemon)，其目的是将主集群(primary cluster)上有开启镜像同步功能的镜像备份到备集群(passivecluster)上。块存储镜像同步采用两种不同的方式来备份主集群上的镜像，具体包括启动流程和日志重放事件流程。
在块存储镜像同步启动时，本发明在块存储镜像同步中建立一个共享令牌桶类，这个类用于实现令牌桶算法，从而针对启动流程和日志重放事件流程的网络带宽进行限速。
S2、利用块存储镜像同步守护进程执行启动流程，请求从主集群同步数据到备集群；
本发明在当主集群上的镜像开始启动镜像同步模式时，首先利用块存储镜像同步守护进程执行启动流程，请求从主集群同步数据到备集群。
S3、采用令牌桶算法对启动流程的IO请求进行控制，得到主镜像的一个快照，并将得到的整个快照同步到备集群的镜像；
本发明在执行启动流程时，对主镜像进行快照操作，得到主镜像的一个快照，再将得到的整个快照同步到备集群的镜像。
在启动流程中需要从主镜像抓取对象(object)时，本发明采用令牌桶算法对启动流程的IO请求进行控制。
采用令牌桶算法对启动流程从主集群抓取对象操作进行控制具体包括以下分步骤：
S31、利用启动流程向主集群发送同步IO请求；
S32、判断QoS的队列是否已满；若是，则丢弃该同步IO；若否，则将该同步IO放置到QoS的队列中；
S33、获取令牌，并判断共享令牌桶中剩余令牌数是否大于该同步IO所需令牌数；
S34、若共享令牌桶中剩余令牌数不小于该同步IO所需令牌数，则处理该同步IO，执行从主集群中抓取对象操作；
S35、若共享令牌桶中剩余令牌数小于该同步IO所需令牌数，则将同步IO所需令牌数减去共享令牌桶中剩余令牌数，并将该将同步IO放置到QoS的队列首，等待生成足够的令牌数量。
S4、利用块存储镜像同步守护进程执行日志重放事件流程，请求从主集群同步数据到备集群；
本发明在当利用块存储镜像同步守护进程执行启动流程完毕后，会继续写到主镜像上的IO，请求从主集群同步数据到备集群。
S5、采用令牌桶算法对日志重放事件流程的IO请求进行控制，通过日志的方式将每次日志事件抓取到备集群的镜像，在备集群的镜像上进行回放。
本发明执行日志重放事件流程时，利用块存储镜像同步通过日志的方式将每次日志事件抓取到备集群的镜像，在备集群的镜像上进行回放。
在日志重放事件流程需要从主镜像抓取日志事件时，本发明采用令牌桶算法对日志重放事件流程的IO请求进行控制。
采用令牌桶算法对日志重放事件流程的IO请求进行控制具体包括以下分步骤：
S51、利用日志重放事件流程向主集群发送同步IO请求；
S52、判断QoS的队列是否已满；若是，则丢弃该同步IO；若否，则将该同步IO放置到QoS的队列中；
S53、获取令牌，并判断共享令牌桶中剩余令牌数是否大于该同步IO所需令牌数；
S54、若共享令牌桶中剩余令牌数不小于该同步IO所需令牌数，则处理该同步IO，执行从主集群中抓取对象操作；
S55、若共享令牌桶中剩余令牌数小于该同步IO所需令牌数，则将同步IO所需令牌数减去共享令牌桶中剩余令牌数，并将该将同步IO放置到QoS的队列首等待。
上述启动流程和日志重放事件流程都依赖共享令牌桶实现，通过建立装载令牌的共享令牌桶实现对从主集群同步数据到备集群的流量进行控制，通过控制令牌产生速率就能达到控制IO处理速率的效果。
本发明中共享令牌桶以一定的速率生成令牌，这里生成令牌是一个独立不受干扰的操作。共享令牌桶设置有最大令牌数量，并且共享令牌桶中装载的令牌数量小于最大令牌数量。当需要令牌时，从共享令牌桶中拿取；而不需要令牌时，令牌就会沉淀在共享令牌桶中，但是总令牌数量不会超过共享令牌桶的深度，即共享令牌桶装载令牌的最大数量值。
本领域的普通技术人员将会意识到，这里所述的实施例是为了帮助读者理解本发明的原理，应被理解为本发明的保护范围并不局限于这样的特别陈述和实施例。本领域的普通技术人员可以根据本发明公开的这些技术启示做出各种不脱离本发明实质的其它各种具体变形和组合，这些变形和组合仍然在本发明的保护范围内。

Claims (6)

1.一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，其特征在于，包括以下步骤：
S1、启动块存储镜像同步守护进程，并建立一个共享令牌桶类；
S2、利用块存储镜像同步守护进程执行启动流程，请求从主集群同步数据到备集群；
S3、采用令牌桶算法对启动流程的IO请求进行控制，得到主镜像的一个快照，并将得到的整个快照同步到备集群的镜像；
S4、利用块存储镜像同步守护进程执行日志重放事件流程，请求从主集群同步数据到备集群；
S5、采用令牌桶算法对日志重放事件流程的IO请求进行控制，通过日志的方式将每次日志事件抓取到备集群的镜像，在备集群的镜像上进行回放。
2.如权利要求1所述的基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，其特征在于，所述步骤S3中采用令牌桶算法对启动流程从主集群抓取对象操作进行控制具体包括以下分步骤：
S31、利用启动流程向主集群发送同步IO请求；
S32、判断QoS的队列是否已满；若是，则丢弃该同步IO；若否，则将该同步IO放置到QoS的队列中；
S33、获取令牌，并判断共享令牌桶中剩余令牌数是否大于该同步IO所需令牌数；
S34、若共享令牌桶中剩余令牌数不小于该同步IO所需令牌数，则处理该同步IO，执行从主集群中抓取对象操作；
S35、若共享令牌桶中剩余令牌数小于该同步IO所需令牌数，则将同步IO所需令牌数减去共享令牌桶中剩余令牌数，并将该将同步IO放置到QoS的队列首等待。
3.如权利要求1所述的基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，其特征在于，所述步骤S5采用令牌桶算法对日志重放事件流程的IO请求进行控制具体包括以下分步骤：
S51、利用日志重放事件流程向主集群发送同步IO请求；
S52、判断QoS的队列是否已满；若是，则丢弃该同步IO；若否，则将该同步IO放置到QoS的队列中；
S53、获取令牌，并判断共享令牌桶中剩余令牌数是否大于该同步IO所需令牌数；
S54、若共享令牌桶中剩余令牌数不小于该同步IO所需令牌数，则处理该同步IO，执行从主集群中抓取对象操作；
S55、若共享令牌桶中剩余令牌数小于该同步IO所需令牌数，则将同步IO所需令牌数减去共享令牌桶中剩余令牌数，并将该将同步IO放置到QoS的队列首等待。
4.如权利要求2或3所述的基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，其特征在于，所述共享令牌桶以独立的方式以一定的速率生成令牌。
5.如权利要求2或3所述的基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，其特征在于，所述共享令牌桶设置有最大令牌数量，并且共享令牌桶中装载的令牌数量小于最大令牌数量。
6.如权利要求2或3所述的基于令牌桶算法的Ceph块存储镜像同步QoS优化方法，其特征在于，所述令牌桶算法采用定时器控制共享令牌桶的令牌生成速率。
CN201911200536.7A 2019-11-29 2019-11-29 一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法 Active CN110891089B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911200536.7A CN110891089B (zh) 2019-11-29 2019-11-29 一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911200536.7A CN110891089B (zh) 2019-11-29 2019-11-29 一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法

Publications (2)

Publication Number Publication Date
CN110891089A true CN110891089A (zh) 2020-03-17
CN110891089B CN110891089B (zh) 2022-04-29

Family

ID=69749505

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911200536.7A Active CN110891089B (zh) 2019-11-29 2019-11-29 一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法

Country Status (1)

Country Link
CN (1) CN110891089B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112087401A (zh) * 2020-09-10 2020-12-15 星辰天合（北京）数据科技有限公司 分布式存储中实现服务质量的方法和装置
CN112463066A (zh) * 2020-12-11 2021-03-09 苏州浪潮智能科技有限公司 一种控制分布式块存储逻辑卷突发服务质量的方法和设备
CN114760327A (zh) * 2022-03-30 2022-07-15 阿里巴巴（中国）有限公司 云盘资源配置的调整方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107579926A (zh) * 2017-10-20 2018-01-12 南京易捷思达软件科技有限公司 基于令牌桶算法的Ceph云存储系统的QoS设置方法
US20190155698A1 (en) * 2017-11-20 2019-05-23 Salesforce.Com, Inc. Distributed storage reservation for recovering distributed data
CN110417677A (zh) * 2019-07-29 2019-11-05 北京易捷思达科技发展有限公司 一种基于Ceph分布式存储Osd端数据Recovery的QoS控制方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107579926A (zh) * 2017-10-20 2018-01-12 南京易捷思达软件科技有限公司 基于令牌桶算法的Ceph云存储系统的QoS设置方法
US20190155698A1 (en) * 2017-11-20 2019-05-23 Salesforce.Com, Inc. Distributed storage reservation for recovering distributed data
CN110417677A (zh) * 2019-07-29 2019-11-05 北京易捷思达科技发展有限公司 一种基于Ceph分布式存储Osd端数据Recovery的QoS控制方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
袁猛: "基于Bluestore的分布式存储Ceph集群QoS研究", 《中国优秀硕士学位论文全文数据库》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112087401A (zh) * 2020-09-10 2020-12-15 星辰天合（北京）数据科技有限公司 分布式存储中实现服务质量的方法和装置
CN112087401B (zh) * 2020-09-10 2024-05-28 北京星辰天合科技股份有限公司 分布式存储中实现服务质量的方法和装置
CN112463066A (zh) * 2020-12-11 2021-03-09 苏州浪潮智能科技有限公司 一种控制分布式块存储逻辑卷突发服务质量的方法和设备
CN112463066B (zh) * 2020-12-11 2023-01-06 苏州浪潮智能科技有限公司 一种控制分布式块存储逻辑卷突发服务质量的方法和设备
CN114760327A (zh) * 2022-03-30 2022-07-15 阿里巴巴（中国）有限公司 云盘资源配置的调整方法及装置
CN114760327B (zh) * 2022-03-30 2024-03-26 阿里巴巴（中国）有限公司 云盘资源配置的调整方法及装置

Also Published As

Publication number Publication date
CN110891089B (zh) 2022-04-29

Similar Documents

Publication Publication Date Title
CN110891089B (zh) 一种基于令牌桶算法的Ceph块存储镜像同步QoS优化方法
US11861203B2 (en) Method, apparatus and electronic device for cloud service migration
CN111522628B (zh) 一种基于OpenStack的Kubernetes集群搭建部署方法、架构及存储介质
EP3490224B1 (en) Data synchronization method and system
US11570243B2 (en) Decommissioning, re-commissioning, and commissioning new metadata nodes in a working distributed data storage system
WO2022161430A1 (zh) 边缘云系统、边缘管控方法、管控节点及存储介质
US10481804B2 (en) Cluster system with calculation and storage converged
EP3069263B1 (en) Session idle optimization for streaming server
CN102857577A (zh) 一种集群存储自动负载均衡的系统及方法
CN112565774B (zh) 视频转码资源调度方法及装置
WO2015027901A1 (zh) 一种云服务系统及方法
WO2013063965A1 (zh) 存储系统服务质量控制方法、装置和系统
CN109634522A (zh) 一种资源管理的方法、装置及计算机存储介质
CN114466027B (zh) 一种云原生数据库服务提供方法、系统、设备及介质
US20220050809A1 (en) Distributed metadata management consistency assurance method, device, system and application
JP2007518159A (ja) ネットワーク装置内の独立した絶対時間値を使用して時間認識ネットワークを生成するシステムおよび方法
CN110099084B (zh) 一种保证存储服务可用性的方法、系统及计算机可读介质
CN112202853B (zh) 数据同步方法、系统、计算机设备和存储介质
CN109639773A (zh) 一种动态构建的分布式数据集群控制系统及其方法
CN116304390B (zh) 时序数据处理方法、装置、存储介质及电子设备
CN115604120B (zh) 一种多云集群资源共享方法、装置、设备及存储介质
CN102710790B (zh) 一种基于元数据管理的分布式缓存实现方法及系统
CN115576654A (zh) 一种请求处理方法、装置、设备及存储介质
CN114296891A (zh) 任务的调度方法、系统、计算设备、存储介质及程序产品
CN111459416B (zh) 一种基于分布式存储的热迁移系统及其迁移方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20220304

Address after: 100032 No. 57, Xuanwumen West Street, Xicheng District, Beijing

Applicant after: CHINA ECONOMIC INFORMATION SERVICE Co.,Ltd.

Address before: Room 617, 168 Xizhan South Road, Fengtai District, Beijing 100803

Applicant before: ZHONGJINGSHE HOLDINGS Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant