CN111125050B - 一种openstack环境下基于CephFS提供NFS协议的文件存储方法 - Google Patents

一种openstack环境下基于CephFS提供NFS协议的文件存储方法 Download PDF

Info

Publication number
CN111125050B
CN111125050B CN201911368056.1A CN201911368056A CN111125050B CN 111125050 B CN111125050 B CN 111125050B CN 201911368056 A CN201911368056 A CN 201911368056A CN 111125050 B CN111125050 B CN 111125050B
Authority
CN
China
Prior art keywords
cephfs
nfs
ganesha
server
manila
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911368056.1A
Other languages
English (en)
Other versions
CN111125050A (zh
Inventor
谢涛涛
宋伟
蔡卫卫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Cloud Information Technology Co Ltd
Original Assignee
Inspur Cloud Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Cloud Information Technology Co Ltd filed Critical Inspur Cloud Information Technology Co Ltd
Priority to CN201911368056.1A priority Critical patent/CN111125050B/zh
Publication of CN111125050A publication Critical patent/CN111125050A/zh
Application granted granted Critical
Publication of CN111125050B publication Critical patent/CN111125050B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/172Caching, prefetching or hoarding of files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/176Support for shared access to files; File sharing support
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44505Configuring for program initiating, e.g. using registry, configuration files
    • G06F9/4451User profiles; Roaming
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本发明公开了一种openstack环境下基于CephFS提供NFS协议的文件存储方法,本发明包括如下步骤:S1、基于用户操作开通文件共享存储,并通过相关配置制定共享类型,使得manila组件调度到cephfsnfs后端;S2、通过manila组件向NFS‑Ganesha服务器发送指令;S3、NFS‑Ganesha服务器接受到指令后,下发指令到CephFS;S4、CephFS接到指令后,会在元数据池中创建相应的元数据,维护到MDS中,同时在数据池中创建数据的快照;S5、用户再调用manila组件的REST API获取文件共享存储的挂载点;S6、用户在虚拟机中使用NFS客户端执行挂载操作,写入数据,会通过网络直接写入到步骤S4中数据的快照中。本发明解决了Windows GuestOS的虚拟机无法通过Ceph原生的FUSE客户端访问CephFS的问题。

Description

一种Openstack环境下基于CephFS提供NFS协议的文件存储 方法
技术领域
本发明涉及云计算技术领域,具体地说是一种Openstack环境下基于CephFS提供NFS协议的文件存储方法。
背景技术
云计算领域中,OpenStack在私有云和公有云多有建树,并已成为一种云计算的标准。OpenStack提供的存储功能包括块存储、文件存储和对象存储,在文件存储方面,Manila组件抽象了REST API提供文件存储的接口,通过集成了各种驱动对用户屏蔽了底层实现细节。CephFS是较为成熟的分布式文件系统,依托Ceph多副本技术能保证数据的高可靠性,它提供了FUSE客户端供虚拟机使用,但此客户端仅限于Linux GuestOS的虚拟机,在WindowsGuestOS的虚拟机上无法使用CephFS文件存储功能。
发明内容
本发明的目的是针对以上不足,提供一种在Windows GuestOS和Linux GuestOS的虚拟机均可以使用的基于CephFS提供NFS协议的文件存储方法。
本发明所采用技术方案是:
一种openstack环境下基于CephFS提供NFS协议的文件存储方法,包括如下步骤:
S1、基于用户操作开通文件共享存储,并通过相关配置制定共享类型,使得manila组件调度到cephfsnfs后端;
S2、通过manila组件向NFS-Ganesha服务器发送指令;
S3、NFS-Ganesha服务器接受到指令后,下发指令到CephFS;
S4、CephFS接到指令后,会在元数据池中创建相应的元数据,维护到MDS中,同时在数据池中创建数据的快照;
S5、用户再调用manila组件的REST API获取文件共享存储的挂载点;
S6、用户在虚拟机中使用NFS客户端执行挂载操作,写入数据,会通过网络直接写入到步骤S4中数据的快照中。
作为进一步的优化,本发明所述步骤S1中用户通过OpenStack的Dashboard、CLI和调用REST API中的其中一种开通文件共享存储。
作为进一步的优化,本发明在步骤S2中,所述manila组件通过manila-share服务向NFS-Ganesha服务器发送指令,manila-share服务中自带cephfsnfs驱动。
作为进一步的优化,本发明在使用manila-share时,需要制定如下配置项:
[DEFAULT]
enabled_share_backends=cephfsnfs1
[cephfsnfs1]
ganesha_rados_store_enable=True
ganesha_rados_store_pool_name=cephfs_data
driver_handles_share_servers=False
share_backend_name=CEPHFSNFS1
share_driver=manila.share.drivers.cephfs.driver.CephFSDriver
cephfs_protocol_helper_type=NFS
cephfs_conf_path=/etc/ceph/ceph.conf
cephfs_auth_id=manila
cephfs_cluster_name=ceph
cephfs_enable_snapshots=False
cephfs_ganesha_server_is_remote=True
cephfs_ganesha_server_ip=“NFS-Genasha服务器站点”
cephfs_ganesha_server_username=“NFS-Genasha服务器登录用户名”
cephfs_ganesha_server_password=“NFS-Genasha服务器登录密码”
基于上述配置项,manila-share通过自身的cephfsnfs驱动,使用配置项中的用户名和密码,给配置项中配置的NFS-Ganesha服务器发送指令。
作为进一步的优化,本发明所述NFS-Ganesha,需要相对应的配置文件,同时需要配置ceph.conf和使用的keyring,使得NFS-Ganesha服务器访问到Ceph集群。
作为进一步的优化,本发明在步骤S3中,NFS-Ganesha服务器提供文件系统抽象层FSAL_CEPH对接CephFS存储后端。
作为进一步的优化,本发明所述步骤S1和步骤S5中,manila组件中的manila-api服务负责接收和处理用户的REST API。
作为进一步的优化,本发明所述NFS-Ganesha服务器通过调用用户控件的libcephfs接口,使用libcephfs库访问CephFS。
本发明还涉及一种openstack环境下基于Cephalicfs提供NFS协议的文件存储系统,其特征在于:包括OpenStack的Manila组件、NFS-Ganesha、CephFS和NFS客户端;其中:
所述Manila组件用于提供云端的文件共享;
所述NFS-Ganesha用于搭建Manila与CephFS之间的联系;
所述CephFS用于数据存储;
所述NFS客户端用于对接用户对虚拟机的操作。
作为进一步的优化,本发明所述Manila组件包括manila-api服务、manila-scheduler服务和manila-share服务;其中:
所述manila-api服务用于负责接收和处理用户的REST API;
所述manila-scheduler服务用于调度cephfsnfs驱动;
所述manila-share服务用于通过cephfsnfs驱动对接NFS-Genasha服务器。
本发明具有以下优点:
本发明解决了Windows GuestOS的虚拟机无法通过Ceph原生的FUSE客户端访问CephFS的问题,使用NFS-Ganesha服务作为代理节点,将CephFS提供的文件系统存储以NFS协议对OpenStack的虚拟机暴露,这样不管是Linux GuestOS还是Windows GuestOS的虚拟机,都可以使用NFS客户端访问到CephFS提供的文件系统存储。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
下面结合附图对本发明进一步说明:
图1为本发明的系统组成结构示意图;
图2为本发明的使用流程示意图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步说明,以使本领域的技术人员可以更好地理解本发明并能予以实施,但所举实施例不作为对本发明的限定,在不冲突的情况下,本发明实施例以及实施例中的技术特征可以相互结合。
需要理解的是,在本发明实施例的描述中,“第一”、“第二”等词汇,仅用于区分描述的目的,而不能理解为指示或暗示相对重要性,也不能理解为指示或暗示顺序。在本发明实施例中的“多个”,是指两个或两个以上。
本发明实施例中的属于“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,单独存在B,同时存在A和B这三种情况。另外,本文中字符“/”一般表示前后关联对象是一种“或”关系。
如图1所示的openstack环境下基于CephFS提供NFS协议的文件存储系统,其特征在于:包括OpenStack的Manila组件、NFS-Ganesha、CephFS和NFS客户端;其中:
所述Manila组件用于提供云端的文件共享,支持CIFS协议和NFS协议,管理文件共享存储的生命周期;
所述NFS-Ganesha用于搭建Manila与CephFS之间的联系;
所述CephFS用于数据存储;
所述NFS客户端用于对接用户对虚拟机的操作。
本实施例所述Manila组件包括manila-api服务、manila-scheduler服务和manila-share服务;其中:
所述manila-api服务用于负责接收和处理用户的REST API;
所述manila-scheduler服务用于调度cephfsnfs驱动;
所述manila-share服务用于通过cephfsnfs驱动对接NFS-Genasha服务器。
基于上述文件存储系统,本实施例提供一种openstack环境下基于Cephalicfs提供NFS协议的文件存储方法,如图2所示,包括如下步骤:
S1、用户通过OpenStack的Dashboard或CLI或调用REST API中开通文件共享存储,并通过相关配置制定共享类型,使得manila组件调度到cephfsnfs后端;
S2、所述manila组件通过manila-share服务向NFS-Ganesha服务器发送指令,manila-share服务中自带cephfsnfs驱动;
在使用manila-share时,需要制定如下配置项:
[DEFAULT]
enabled_share_backends=cephfsnfs1
[cephfsnfs1]
ganesha_rados_store_enable=True
ganesha_rados_store_pool_name=cephfs_data
driver_handles_share_servers=False
share_backend_name=CEPHFSNFS1
share_driver=manila.share.drivers.cephfs.driver.CephFSDriver
cephfs_protocol_helper_type=NFS
cephfs_conf_path=/etc/ceph/ceph.conf
cephfs_auth_id=manila
cephfs_cluster_name=ceph
cephfs_enable_snapshots=False
cephfs_ganesha_server_is_remote=True
cephfs_ganesha_server_ip=“NFS-Genasha服务器站点”
cephfs_ganesha_server_username=“NFS-Genasha服务器登录用户名”
cephfs_ganesha_server_password=“NFS-Genasha服务器登录密码”
基于上述配置项,manila-share通过自身的cephfsnfs驱动,使用配置项中的用户名和密码,给配置项中配置的NFS-Ganesha服务器发送指令。
S3、NFS-Ganesha服务器接受到指令后,通过调用用户控件的libcephfs接口,NFS-Ganesha服务器提供文件系统抽象层FSAL_CEPH对接CephFS存储后端,下发指令到CephFS;实施NFS-Ganesha服务时,需要相对应的配置文件,示例如下:
同时需要相应配置ceph.conf和使用的keyring,使得NFS-Ganesha访问到Ceph集群,在实施CephFS服务时,需要实施MDS、MON、OSD和MGR,生成keyring给到NFS-Genasha。
S4、CephFS接到指令后,会在元数据池中创建相应的元数据,维护到MDS中,同时在数据池中创建数据的快照,本实施例的文件存储元数据存储在MDS中,数据存储在OSD中;
S5、用户再调用manila组件的REST API获取文件共享存储的挂载点,且该过程中manila-api服务负责接收和处理用户的REST API;
S6、用户在虚拟机中使用NFS客户端执行挂载操作,写入数据,会通过网络直接写入到步骤S4中数据的快照中。
以上所述实施例仅是为充分说明本发明而所举的较佳的实施例,本发明的保护范围不限于此。本技术领域的技术人员在本发明基础上所作的等同替代或变换,均在本发明的保护范围之内。本发明的保护范围以权利要求书为准。

Claims (8)

1.一种openstack环境下基于CephFS提供NFS协议的文件存储方法,其特征在于:包括如下步骤:
S1、基于用户操作开通文件共享存储,并通过相关配置制定共享类型,使得manila组件调度到cephfsnfs后端;
S2、通过manila组件向NFS-Ganesha服务器发送指令;
S3、NFS-Ganesha服务器接受到指令后,下发指令到CephFS;
S4、CephFS接到指令后,会在元数据池中创建相应的元数据,维护到MDS中,同时在数据池中创建数据的快照;
S5、用户再调用manila组件的REST API获取文件共享存储的挂载点;
S6、用户在虚拟机中使用NFS客户端执行挂载操作,写入数据,会通过网络直接写入到步骤S4中数据的快照中。
2.根据权利要求1所述的文件存储方法,其特征在于:在步骤S1中用户通过OpenStack的Dashboard、CLI和调用REST API中的其中一种方式开通文件共享存储。
3.根据权利要求1所述的文件存储方法,其特征在于:在步骤S2中,所述manila组件通过manila-share服务向NFS-Ganesha服务器发送指令,manila-share服务中自带cephfsnfs驱动。
4.根据权利要求3所述的文件存储方法,其特征在于:在使用manila-share时,需要制定如下配置项:
[DEFAULT]
enabled_share_backends = cephfsnfs1
[cephfsnfs1]
ganesha_rados_store_enable = True
ganesha_rados_store_pool_name = cephfs_data
driver_handles_share_servers = False
share_backend_name = CEPHFSNFS1
share_driver = manila.share.drivers.cephfs.driver.CephFSDriver
cephfs_protocol_helper_type = NFS
cephfs_conf_path = /etc/ceph/ceph.conf
cephfs_auth_id = manila
cephfs_cluster_name = ceph
cephfs_enable_snapshots = False
cephfs_ganesha_server_is_remote= True
cephfs_ganesha_server_ip =“NFS-Genasha服务器站点”
cephfs_ganesha_server_username =“NFS-Genasha服务器登录用户名”
cephfs_ganesha_server_password = “NFS-Genasha服务器登录密码”
基于上述配置项, manila-share通过自身的cephfsnfs驱动,使用配置项中的用户名和密码,给配置项中配置的NFS-Ganesha服务器发送指令。
5.根据权利要求1所述的文件存储方法,其特征在于:所述NFS-Ganesha,需要相对应的配置文件,同时需要配置ceph.conf和使用的keyring,使得NFS-Ganesha服务器访问到Ceph集群。
6.根据权利要求1所述的文件存储方法,其特征在于:在步骤S3中,NFS-Ganesha服务器提供文件系统抽象层FSAL_CEPH对接CephFS存储后端。
7.根据权利要求1所述的文件存储方法,其特征在于:所述步骤S1和步骤S5中,manila组件中的 manila-api服务负责接收和处理用户的REST API。
8.根据权利要求1所述的文件存储方法,其特征在于:所述NFS-Ganesha服务器通过调用用户控件的libcephfs接口,使用libcephfs库访问CephFS。
CN201911368056.1A 2019-12-26 2019-12-26 一种openstack环境下基于CephFS提供NFS协议的文件存储方法 Active CN111125050B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911368056.1A CN111125050B (zh) 2019-12-26 2019-12-26 一种openstack环境下基于CephFS提供NFS协议的文件存储方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911368056.1A CN111125050B (zh) 2019-12-26 2019-12-26 一种openstack环境下基于CephFS提供NFS协议的文件存储方法

Publications (2)

Publication Number Publication Date
CN111125050A CN111125050A (zh) 2020-05-08
CN111125050B true CN111125050B (zh) 2023-08-22

Family

ID=70503226

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911368056.1A Active CN111125050B (zh) 2019-12-26 2019-12-26 一种openstack环境下基于CephFS提供NFS协议的文件存储方法

Country Status (1)

Country Link
CN (1) CN111125050B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112162958B (zh) * 2020-09-11 2023-12-22 北京浪潮数据技术有限公司 网络文件系统的挂载方法、装置及电子设备和存储介质
CN112269759B (zh) * 2020-10-23 2023-12-22 北京浪潮数据技术有限公司 一种共享文件存储的迁移方法及相关装置
CN112579549A (zh) * 2020-12-14 2021-03-30 浪潮云信息技术股份公司 CephFS文件协议共享系统、构建方法及实现方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105471989A (zh) * 2015-11-23 2016-04-06 上海爱数信息技术股份有限公司 一种数据存储方法
CN107506652A (zh) * 2017-07-13 2017-12-22 浙江大学 CephFS分布式文件系统元数据访问保护机制的实现方法及系统
CN108108226A (zh) * 2017-12-20 2018-06-01 恒泰艾普(北京)云技术有限公司 一种云计算环境下的大数据文件分析处理方法
CN108989419A (zh) * 2018-07-11 2018-12-11 郑州云海信息技术有限公司 一种基于云存储的存储节点部署方法
CN109302448A (zh) * 2018-08-27 2019-02-01 华为技术有限公司 一种数据处理方法及装置
CN109324927A (zh) * 2018-09-06 2019-02-12 郑州云海信息技术有限公司 一种基于分布式存储系统的虚拟机备份方法及系统
CN109684032A (zh) * 2018-12-04 2019-04-26 武汉烽火信息集成技术有限公司 防脑裂的OpenStack虚拟机高可用计算节点装置及管理方法
CN110471885A (zh) * 2019-07-22 2019-11-19 江苏艾佳家居用品有限公司 一种nfs分布式文件服务系统及构建方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11137924B2 (en) * 2017-08-25 2021-10-05 Vmware, Inc. Distributed file storage system supporting accesses from multiple container hosts

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105471989A (zh) * 2015-11-23 2016-04-06 上海爱数信息技术股份有限公司 一种数据存储方法
CN107506652A (zh) * 2017-07-13 2017-12-22 浙江大学 CephFS分布式文件系统元数据访问保护机制的实现方法及系统
CN108108226A (zh) * 2017-12-20 2018-06-01 恒泰艾普(北京)云技术有限公司 一种云计算环境下的大数据文件分析处理方法
CN108989419A (zh) * 2018-07-11 2018-12-11 郑州云海信息技术有限公司 一种基于云存储的存储节点部署方法
CN109302448A (zh) * 2018-08-27 2019-02-01 华为技术有限公司 一种数据处理方法及装置
CN109324927A (zh) * 2018-09-06 2019-02-12 郑州云海信息技术有限公司 一种基于分布式存储系统的虚拟机备份方法及系统
CN109684032A (zh) * 2018-12-04 2019-04-26 武汉烽火信息集成技术有限公司 防脑裂的OpenStack虚拟机高可用计算节点装置及管理方法
CN110471885A (zh) * 2019-07-22 2019-11-19 江苏艾佳家居用品有限公司 一种nfs分布式文件服务系统及构建方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
NFS-Ganesha;哲米;《CSDN博客》;第1-5页 *

Also Published As

Publication number Publication date
CN111125050A (zh) 2020-05-08

Similar Documents

Publication Publication Date Title
CN111125050B (zh) 一种openstack环境下基于CephFS提供NFS协议的文件存储方法
WO2021017301A1 (zh) 基于Kubernetes集群的管理方法、装置及计算机可读存储介质
WO2021017279A1 (zh) 基于Kubernetes和网络域的集群安全管理方法、装置及存储介质
US5857188A (en) Management of client requests in a client-server environment
US9092252B2 (en) Information processing apparatus, client management system, and client management method
JP5993947B2 (ja) リモートデスクトップからのサービス結果のためにネイティブビューアーを使用すること
JP5582344B2 (ja) 接続管理システム、及びシンクライアントシステムにおける接続管理サーバの連携方法
CN108123925B (zh) 资源共享的方法、装置及系统
CA3065118C (en) Distributed searching and index updating method and system, servers, and computer devices
WO2017167100A1 (zh) 一种数据迁移方法和装置
US20090260005A1 (en) System and method for providing service
US20160150019A1 (en) Namespace and storage management application infrastructure for use in management of resources in a storage system environment
CN105359176B (zh) 更新先前递送的电子消息的接收者
US11716406B2 (en) Data caching for cloud services
CA2691879C (en) Instant messaging system, component and method for additional service
US5740422A (en) Method and apparatus for resource management for a lan server enterprise
CN106547790B (zh) 一种关系型数据库服务系统
CN113485786A (zh) 一种基于云物理机实现pod挂载cinder卷的方法及系统
US20130238673A1 (en) Information processing apparatus, image file creation method, and storage medium
US8996609B2 (en) Joining of machines in a connected instance group of a networked computing environment
CN112910796B (zh) 流量管理方法、装置、设备、存储介质以及程序产品
US20190149511A1 (en) System and method for connecting using aliases
CN111181772B (zh) 网络协议下发方法、装置及系统
CN114401280A (zh) 一种作业数据同步方法和系统
CN110768855B (zh) 链路化性能测试的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 250100 building S02, Inspur Science Park, No. 1036, Inspur Road, high tech Zone, Jinan, Shandong

Applicant after: Inspur cloud Information Technology Co.,Ltd.

Address before: 250100 No. 1036 Tidal Road, Jinan High-tech Zone, Shandong Province, S01 Building, Tidal Science Park

Applicant before: Tidal Cloud Information Technology Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant