CN111314493A - 异构云存储系统的数据处理方法及其可读介质和系统 - Google Patents
异构云存储系统的数据处理方法及其可读介质和系统 Download PDFInfo
- Publication number
- CN111314493A CN111314493A CN202010278779.9A CN202010278779A CN111314493A CN 111314493 A CN111314493 A CN 111314493A CN 202010278779 A CN202010278779 A CN 202010278779A CN 111314493 A CN111314493 A CN 111314493A
- Authority
- CN
- China
- Prior art keywords
- cloud storage
- storage system
- data request
- independent
- link
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 23
- 238000012545 processing Methods 0.000 claims abstract description 37
- 238000004458 analytical method Methods 0.000 claims abstract description 8
- 230000015654 memory Effects 0.000 claims description 28
- 238000000034 method Methods 0.000 claims description 22
- 230000008569 process Effects 0.000 claims description 12
- 238000010586 diagram Methods 0.000 description 8
- 230000004044 response Effects 0.000 description 8
- 238000011161 development Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000013507 mapping Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000026676 system process Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及计算机领域，公开了一种异构云存储系统的数据处理方法及其可读介质和系统。本申请的异构云存储系统包括统一云存储系统和独立云存储系统，本申请的数据处理方法包括：统一云存储系统接收独立云存储系统的注册请求，并对注册后的独立云存储系统配置一个存储链接；统一云存储系统接收用户端发送的数据请求，并基于已注册的存储链接对该数据请求进行解析；统一云存储系统基于解析结果将数据请求转发给相应的独立云储存系统进行处理；独立云储存系统基于该数据请求进行数据处理后返回处理结果给用户端。
Description
技术领域
本申请涉及计算机领域，特别涉及一种异构云存储系统的数据处理方法及其可读介质和系统。
背景技术
随着IT技术的发展，每天都有海量的业务数据产生，业界也因此出现了各种各样的云存储系统，云存储系统指的是通过集群应用、网络技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通用应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的一个系统。一般来说企业会同时使用多种云存储系统，如果一个云存储系统需要升级，现有技术是先将该云存储系统停机然后备份数据，再将备份数据导入到新系统中，但是这种系统升级的方式流程长，处理复杂，需要耗费较大的时间和精力。
发明内容
本申请实施例提供了一种统一异构云存储系统的数据处理方法，统一云存储系统对内可以包括众多的独立云存储系统，对外为开发人员提供统一的数据交互接口，使开发人员无须关心异构式云存储系统的构成，仅需要与统一云存储系统交互，减少开发人员的开发工作量。
第一方面，本申请实施例提供了一种异构云存储系统的数据处理方法，所述所述异构云存储系统包括一个统一云存储系统和多个独立云存储系统，所述方法包括：
统一云存储系统接收独立云存储系统的注册请求，并对注册后的独立云存储系统配置一个存储链接；
统一云存储系统接收用户端发送的数据请求，并基于已注册的存储链接对该数据请求进行解析；
统一云存储系统基于解析结果将数据请求转发给相应的独立云储存系统进行处理；
独立云储存系统基于该数据请求进行数据处理后返回处理结果给用户端。
在上述第一方面的一种可能实现中，所述存储链接包括以下信息：链接ID、统一云存储系统信息和独立云存储系统信息。
在上述第一方面的一种可能实现中，所述统一云存储系统接收独立云存储系统的注册请求，并对注册后的独立云存储系统配置一个存储链接包括：
各个独立云存储系统分别发送注册请求给统一云存储系统；
针对每个注册请求，统一云存储系统将所述链接ID和统一云存储系统信息写入一个存储链接并配置给对应的独立云存储系统，其中，不同的独立云存储系统对应的链接ID不同；
各个独立云存储系统将各自的系统信息写入存储链接并将存储链接返回给统一云存储系统。
在上述第一方面的一种可能实现中，所述数据请求包括用户端写入的所述数据请求ID、数据请求信息和独立云存储系统信息。
在上述第一方面的一种可能实现中，所述统一云存储系统接收用户端发送的数据请求，并基于所有已注册的存储链接对该数据请求进行解析包括：
数据请求ID与已注册的存储链接的其中一个链接ID对应，则选择数据请求ID与该链接ID对应的独立云存储系统进行处理。
在上述第一方面的一种可能实现中，所述数据请求还包括时间节点信息。
在上述第一方面的一种可能实现中，所述方法还包括：
获取数据请求的时间节点信息；
基于所述时间节点信息选择相应的独立云存储系统处理所述数据请求。
第二方面，本申请实施例提供了一种异构云存储系统，包括一个统一云存储系统和多个独立云存储系统，其中，所说统一云存储系统包括：
注册单元，用于接收独立云存储系统的注册请求，并对注册后的独立云存储系统配置一个存储链接；
解析单元，用于接收用户端发送的数据请求，并基于已注册的存储链接对该数据请求进行解析；
转发单元，用于基于解析结果将数据请求转发给相应的独立云储存系统进行处理，独立云储存系统基于该数据请求进行数据处理后返回处理结果给用户端。
在上述第二方面的一种可能实现中，所述存储链接包括：
所述存储链接包括以下信息：链接ID、统一云存储系统信息和独立云存储系统信息。
在上述第二方面的一种可能实现中，所述注册单元通过以下方式进行注册：
各个独立云存储系统分别发送注册请求给统一云存储系统；
针对每个注册请求，统一云存储系统将所述链接ID和统一云存储系统信息写入一个存储链接并配置给对应的独立云存储系统，其中，不同的独立云存储系统对应的链接ID不同；
各个独立云存储系统将各自的系统信息写入存储链接并将存储链接返回给统一云存储系统。
在上述第二方面的一种可能实现中，所述数据请求包括用户端写入的所述数据请求ID、数据请求信息和独立云存储系统信息。
在上述第二方面的一种可能实现中，，所述解析单元通过以下方式对数据请求进行解析：
数据请求ID与已注册的存储链接的其中一个链接ID对应，则选择数据请求ID与该链接ID对应的独立云存储系统进行处理。
在上述第二方面的一种可能实现中，所述数据请求还包括时间节点信息。
在上述第二方面的一种可能实现中，，所述解析单元通过以下方式对数据请求进行解析：
获取数据请求的时间节点信息；
基于所述时间节点信息选择相应的独立云存储系统处理所述数据请求。
第三方面，本申请实施例提供了一种机器可读介质，所述机器可读介质上存储有指令，该指令在机器上执行时使机器执行上述任一方面异构云存储系统的数据处理方法。
第四方面，本申请实施例提供了一种系统，所述系统包括：
存储器，用于存储由系统的一个或多个处理器执行的指令，以及
处理器，是系统的处理器之一，用于执行上述任一方面所述的异构云存储系统的数据处理方法。
附图说明
图1根据本申请的一些实施例，示出了一种异构云存储系统的数据处理的场景图。
图2根据本申请的一些实施例，示出了一种统一云存储系统的结构框图。
图3根据本申请的一些实施例，示出了一种异构云存储系统的数据处理方法的流程图。
图4根据本申请的一些实施例，示出了一种系统的框图。
图5根据本申请一些实施例，示出了一种片上系统(SoC)的框图。
具体实施例
本申请的说明性实施例包括但不限于统一异构云储存系统及其数据处理方法。
可以理解，如本文所使用的，术语“模块”可以指代或者包括专用集成电路(ASIC)、电子电路、执行一个或多个软件或固件程序的处理器(共享、专用、或群组)和/或存储器、组合逻辑电路、和/或提供所描述的功能的其他适当硬件组件，或者可以作为这些硬件组件的一部分。
可以理解，在本申请各实施例中，处理器可以是微处理器、数字信号处理器、微控制器等，和/或其任何组合。根据另一个方面，所述处理器可以是单核处理器，多核处理器等，和/或其任何组合。
下面将结合附图对本申请的实施例作进一步地详细描述。
根据本申请的一些实施例，图1示出了异构云存储系统的数据处理的场景图10，如图1所示，用户端100向统一云存储系统200发送数据请求，统一云存储系统200将数据请求分别转发给已注册的独立云存储系统400、独立云存储系统500和独立云存储系统600，独立云存储系统对接收到的数据请求处理完成后将处理结果返回给用户端100。其中，独立云存储系统400、独立云存储系统500和独立云存储系统600是异构存储系统，其整体架构、存储方式以及查询原理可能不同，通过注册在统一存储系统200下，通过统一存储系统200的统一调控，实现用户端100的海量数据请求的快速处理。可以理解，独立云存储系统可以是不同公司开发的云存储系统，虽然图1中只示出了3种独立云存储系统，但实际上统一云存储系统200还可以包括任意数量的独立云存储系统，在此不做限制。
下面介绍统一存储系统200的结构，图2根据本申请的一些实施例示出了一种统一云存储系统200的结构框图，如图2所示，统一云存储系统200包括注册单元201、解析单元202和转发单元203。其中，
注册单元201，用于处理各个独立云存储系统的注册请求，并为注册通过的每个独立云存储系统绑定一个已注册的存储链接。其中，存储链接是独立云存储系统的合法凭据，保存于每个独立云存储系统上，拥有存储链接的独立云存储系统才能成功注册到统一云存储框架上。当需要增加新的云存储系统供用户选择时，只需要将该存储系统注册到统一云存储系统200即可，实现整个异构式云存储系统的无缝扩容。
存储链接包括链接ID、发布者和接收者，其中，链接ID是区别各个独立云存储系统的标识，每个存储链接具有互不相同的链接ID，发布者和接收者分别表示统一云存储系统200和独立云存储系统的系统信息。
解析单元202，用于接收用户端100发送的数据请求，并基于所有已注册的存储链接对该数据请求进行解析。其中，数据请求包括数据请求ID、处理者、数据请求信息和响应信息。数据请求ID用于区分各个不同的数据请求，处理者表示要求处理该数据请求的独立云存储系统，处理者的数值是已注册的链接ID的数值，数据请求信息是数据请求的具体信息，表达开发人员想要获取的数据，响应信息由最终处理该数据请求的独立云存储系统写入。
在一些实施例中，解析单元对该数据请求进行解析包括：基于所有已注册的存储链接，分析数据请求中的处理者。由于开发用户在登录统一云存储系统200时，统一云存储系统200提供了已注册的众多独立云存储系统的链接ID供用户选择，用户只需要将自己需要的云存储系统的链接ID的数值作为数据请求的处理者的数值写入数据请求中即可。
转发单元203，用于在处理者非空且与某个已注册的存储链接的链接ID相应时，选择链接ID与该处理者相应的独立云存储系统进行处理。可以理解，此处所说的相应可以是数值上完全相同，也可以是在统一云存储系统中存储有链接ID的数值与处理者的数值之间的映射关系，只要此时分析的处理者的数值与链接ID的数值属于该映射关系中的一个元素即可。
例如，独立云存储系统分别是独立云存储系统400、独立云存储系统500和独立云存储系统600，则处理者独立云存储系统400、独立云存储系统500和独立云存储系统600的链接ID的数值不同，例如，链接ID的数值分别是0101,0202,0303。首先，解析单元202解析数据请求进行解析后获得数据请求ID的数值，例如，数据请求ID数值中包含有0101，则转发单元202将该数据请求发送给独立云存储系统400进行处理，如果数据请求ID数值中包含有0202,则转发单元202将数据请求转发给独立云存储系统500进行处理，如果数据请求ID数值中包含有0303,则请求单元203将该数据请求转发给独立云存储系统600进行处理。
另外，如果处理者非空但是寻找不到对应链接ID的处理者或者链接ID缺失，此时请求单元202可以以统一云存储系统200的启动时间为界限，如果小于或者等于统一云存储的启动时间，选择存储老数据的独立云存储系统，反之，如果大于统一云存储系统的启动时间，选择存储新数据的独立云存储系统。
在一些实施例中，从1月到3月份独立云存储系统400存储的数据为老数据，9月份到12月份独立云存储系统500存储数据为新数据，而中间时间段(3月份到9月份)为独立云存储系统600存储的数据。那么，首先解析单元202解析出数据请求的时间节点信息，例如，数据请求的时间信息解析出来的时间节点是6月份，那么转发单元203将此数据请求发送给独立云存储系统600，独立云存储系统600接收指令后按照自己的读写方式进行读写文件。又例如，数据请求的时间信息是时间节点2月份，则将此数据请求转发送给独立云存储系统400，独立云存储系统400接收指令后按照自己的读写方式进行读写文件。又例如，数据请求的时间节点信息是10月份，则将此数据请求转发送给独立云存储系统500，独立云存储系统500接收指令后按照自己的读写方式进行读写文件。
最后，独立云存储系统在接收到转发单元203转发的数据请求时，根据数据请求中的数据请求信息进行数据处理(例如，数据请求信息为获取指定目录下的所有文件详细信息)，并将处理结果写入响应信息中，然后返回给用户端100。
根据本申请的一些实施例，图3示意性示出了一种异构云存储系统的数据处理方法流程图，图3中的数据处理方法可以由图2中的各个单元执行，具体的，该方法包括：
(1)统一云存储系统处理独立云存储系统的注册请求，并且为注册通过的独立云存储系统绑定一个存储链接(301)；存储链接包括链接ID、发布者和接收者，其中，链接ID是区别各个独立云存储系统的标识，每个存储链接具有互不相同的链接ID，发布者和接收者分别表示统一云存储系统和独立云存储系统的系统信息。
(2)统一云存储系统接收用户端发送的数据请求，基于所有已注册的存储链接对该数据请求进行解析(302)；用于接收用户端发送的数据请求，并基于所有已注册的存储链接对该数据请求进行解析。其中，数据请求包括数据请求ID、处理者、数据请求信息和响应信息。数据请求ID用于区分各个不同的数据请求，处理者表示要求处理该数据请求的独立云存储系统，处理者的数值是已注册的链接ID的数值；数据请求信息是数据请求的具体信息，表达开发人员想要获取的数据；响应信息由最终处理该数据请求的独立云存储系统写入。
(3)统一云存储系统基于解析结果将数据请求转发给相应的独立云储存系统进行处理(303)；用于在处理者非空且与某个已注册的存储链接的链接ID相应时，选择链接ID与该处理者相应的独立云存储系统进行处理。应当理解的是，此处所说的相应可以是数值上完全相同，也可以是在统一云存储系统中存储有链接ID的数值与处理者的数值之间的映射关系，只要此时分析的处理者的数值与链接ID的数值属于该映射关系中的一个元素即可。
如果处理者非空但是寻找不到对应链接ID的处理者或者链接ID缺失，此时请求单元可以根据统一云存储的启动时间为界限，如果小于或者等于统一云存储的启动时间，选择存储老数据的独立云存储系统，反之，如果大于统一云存储系统的启动时间，选择存储新数据的独立云存储系统。
(4)独立云储存系统基于该数据请求进行数据处理后返回处理结果给用户端(304)，被选中的独立云存储系统在接收到转发单元转发的数据请求时，根据所述数据请求中的数据请求信息进行数据处理，并将处理结果写入响应信息中，然后返回给用户端。
因此，本申请实施例提供了一种统一异构云存储系统的数据处理方法，统一云存储系统对内可以包括众多的独立云存储系统，对外为开发人员提供统一的数据交互接口，使开发人员无须关心异构式云存储系统的构成，仅需要与统一云存储系统交互，减少开发人员的开发工作量。
现在参考图4，所示为根据本申请的一个实施例的系统400的框图。图4示意性地示出了根据多个实施例的示例系统400。在一个实施例中，系统400可以包括一个或多个处理器404，与处理器404中的至少一个连接的系统控制逻辑408，与系统控制逻辑408连接的系统内存412，与系统控制逻辑408连接的非易失性存储器(NVM)416，以及与系统控制逻辑408连接的网络接口420。
在一些实施例中，处理器404可以包括一个或多个单核或多核处理器。在一些实施例中，处理器404可以包括通用处理器和专用处理器(例如，图形处理器，应用处理器，基带处理器等)的任意组合。在系统400采用eNB(Evolved Node B，增强型基站)101或RAN(RadioAccess Network，无线接入网)控制器102的实施例中，处理器404可以被配置为执行各种符合的实施例，例如，如图1-3所示的多个实施例中的一个或多个。
在一些实施例中，系统控制逻辑408可以包括任意合适的接口控制器，以向处理器404中的至少一个和/或与系统控制逻辑408通信的任意合适的设备或组件提供任意合适的接口。
在一些实施例中，系统控制逻辑408可以包括一个或多个存储器控制器，以提供连接到系统内存412的接口。系统内存412可以用于加载以及存储数据和/或指令。在一些实施例中系统400的内存412可以包括任意合适的易失性存储器，例如合适的动态随机存取存储器(DRAM)。
NVM/存储器416可以包括用于存储数据和/或指令的一个或多个有形的、非暂时性的计算机可读介质。在一些实施例中，NVM/存储器416可以包括闪存等任意合适的非易失性存储器和/或任意合适的非易失性存储设备，例如HDD(Hard Disk Drive，硬盘驱动器)，CD(Compact Disc，光盘)驱动器，DVD(Digital Versatile Disc，数字通用光盘)驱动器中的至少一个。
NVM/存储器416可以包括安装系统400的装置上的一部分存储资源，或者它可以由设备访问，但不一定是设备的一部分。例如，可以经由网络接口420通过网络访问NVM/存储416。
特别地，系统内存412和NVM/存储器416可以分别包括：指令424的暂时副本和永久副本。指令424可以包括：由处理器404中的至少一个执行时导致系统400实施如图3-4所示的方法的指令。在一些实施例中，指令424、硬件、固件和/或其软件组件可另外地/替代地置于系统控制逻辑408，网络接口420和/或处理器404中。
网络接口420可以包括收发器，用于为系统400提供无线电接口，进而通过一个或多个网络与任意其他合适的设备(如前端模块，天线等)进行通信。在一些实施例中，网络接口420可以集成于系统400的其他组件。例如，网络接口420可以集成于处理器404的，系统内存412，NVM/存储器416，和具有指令的固件设备(未示出)中的至少一种，当处理器404中的至少一个执行所述指令时，系统400实现如图3所示的异构云存储系统的数据处理方法。
网络接口420可以进一步包括任意合适的硬件和/或固件，以提供多输入多输出无线电接口。例如，网络接口420可以是网络适配器，无线网络适配器，电话调制解调器和/或无线调制解调器。
在一个实施例中，处理器404中的至少一个可以与用于系统控制逻辑408的一个或多个控制器的逻辑封装在一起，以形成系统封装(SiP)。在一个实施例中，处理器404中的至少一个可以与用于系统控制逻辑408的一个或多个控制器的逻辑集成在同一管芯上，以形成片上系统(SoC)。
系统400可以进一步包括：输入/输出(I/O)设备432。I/O设备432可以包括用户界面，使得用户能够与系统400进行交互；外围组件接口的设计使得外围组件也能够与系统400交互。在一些实施例中，系统400还包括传感器，用于确定与系统400相关的环境条件和位置信息的至少一种。
在一些实施例中，用户界面可包括但不限于显示器(例如，液晶显示器，触摸屏显示器等)，扬声器，麦克风，一个或多个相机(例如，静止图像照相机和/或摄像机)，手电筒(例如，发光二极管闪光灯)和键盘。
在一些实施例中，外围组件接口可以包括但不限于非易失性存储器端口、音频插孔和电源接口。
在一些实施例中，传感器可包括但不限于陀螺仪传感器，加速度计，近程传感器，环境光线传感器和定位单元。定位单元还可以是网络接口420的一部分或与网络接口420交互，以与定位网络的组件(例如，全球定位系统(GPS)卫星)进行通信。
根据本申请的实施例，图5示出了一种SoC(System on Chip，片上系统)500的框图。在图5中，相似的部件具有同样的附图标记。另外，虚线框是更先进的SoC的可选特征。在图5中，SoC 500包括：互连单元550，其被耦合至应用处理器515；系统代理单元570；总线控制器单元580；集成存储器控制器单元540；一组或一个或多个协处理器520，其可包括集成图形逻辑、图像处理器、音频处理器和视频处理器；静态随机存取存储器(SRAM)单元530；直接存储器存取(DMA)单元560。在一个实施例中，协处理器520包括专用处理器，诸如例如网络或通信处理器、压缩引擎、GPGPU、高吞吐量MIC处理器、或嵌入式处理器等等。
本申请公开的机制的各实施例可以被实现在硬件、软件、固件或这些实现方法的组合中。本申请的实施例可实现为在可编程系统上执行的计算机程序或程序代码，该可编程系统包括至少一个处理器、存储系统(包括易失性和非易失性存储器和/或存储元件)、至少一个输入设备以及至少一个输出设备。
可将程序代码应用于输入指令，以执行本申请描述的各功能并生成输出信息。可以按已知方式将输出信息应用于一个或多个输出设备。为了本申请的目的，处理系统包括具有诸如例如数字信号处理器(DSP)、微控制器、专用集成电路(ASIC)或微处理器之类的处理器的任何系统。
程序代码可以用高级程序化语言或面向对象的编程语言来实现，以便与处理系统通信。在需要时，也可用汇编语言或机器语言来实现程序代码。事实上，本申请中描述的机制不限于任何特定编程语言的范围。在任一情形下，该语言可以是编译语言或解释语言。
在一些情况下，所公开的实施例可以以硬件、固件、软件或其任何组合来实现。所公开的实施例还可以被实现为由一个或多个暂时或非暂时性机器可读(例如，计算机可读)存储介质承载或存储在其上的指令，其可以由一个或多个处理器读取和执行。例如，指令可以通过网络或通过其他计算机可读介质分发。因此，机器可读介质可以包括用于以机器(例如，计算机)可读的形式存储或传输信息的任何机制，包括但不限于，软盘、光盘、光碟、只读存储器(CD-ROMs)、磁光盘、只读存储器(ROM)、随机存取存储器(RAM)、可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、磁卡或光卡、闪存、或用于利用因特网以电、光、声或其他形式的传播信号来传输信息(例如，载波、红外信号数字信号等)的有形的机器可读存储器。因此，机器可读介质包括适合于以机器(例如，计算机)可读的形式存储或传输电子指令或信息的任何类型的机器可读介质。
在附图中，可以以特定布置和/或顺序示出一些结构或方法特征。然而，应该理解，可能不需要这样的特定布置和/或排序。而是，在一些实施例中，这些特征可以以不同于说明性附图中所示的方式和/或顺序来布置。另外，在特定图中包括结构或方法特征并不意味着暗示在所有实施例中都需要这样的特征，并且在一些实施例中，可以不包括这些特征或者可以与其他特征组合。
需要说明的是，本申请各设备实施例中提到的各单元/模块都是逻辑单元/模块，在物理上，一个逻辑单元/模块可以是一个物理单元/模块，也可以是一个物理单元/模块的一部分，还可以以多个物理单元/模块的组合实现，这些逻辑单元/模块本身的物理实现方式并不是最重要的，这些逻辑单元/模块所实现的功能的组合才是解决本申请所提出的技术问题的关键。此外，为了突出本申请的创新部分，本申请上述各设备实施例并没有将与解决本申请所提出的技术问题关系不太密切的单元/模块引入，这并不表明上述设备实施例并不存在其它的单元/模块。
需要说明的是，在本专利的示例和说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
虽然通过参照本申请的某些优选实施例，已经对本申请进行了图示和描述，但本领域的普通技术人员应该明白，可以在形式上和细节上对其作各种改变，而不偏离本申请的精神和范围。
Claims (10)
1.一种异构云存储系统的数据处理方法，其特征在于，所述异构云存储系统包括一个统一云存储系统和多个独立云存储系统，所述方法包括：
统一云存储系统接收独立云存储系统的注册请求，并对注册后的独立云存储系统配置一个存储链接；
统一云存储系统接收用户端发送的数据请求，并基于已注册的存储链接对该数据请求进行解析；
统一云存储系统基于解析结果将数据请求转发给相应的独立云储存系统进行处理；
独立云储存系统基于该数据请求进行数据处理后返回处理结果给用户端。
2.根据权利要求1所述的异构云存储系统的数据处理方法，其特征在于，所述存储链接包括以下信息：链接ID、统一云存储系统信息和独立云存储系统信息。
3.根据权利要求1或2所述的异构云存储的数据处理方法，其特征在于，所述统一云存储系统接收独立云存储系统的注册请求，并对注册后的独立云存储系统配置一个存储链接包括：
各个独立云存储系统分别发送注册请求给统一云存储系统；
针对每个注册请求，统一云存储系统将所述链接ID和统一云存储系统信息写入一个存储链接并配置给对应的独立云存储系统，其中，不同的独立云存储系统对应的链接ID不同；
各个独立云存储系统将各自的系统信息写入存储链接并将存储链接返回给统一云存储系统。
4.根据权利要求1所述的异构云存储的数据处理方法，其特征在于，所述数据请求包括用户端写入的所述数据请求ID、数据请求信息和独立云存储系统信息。
5.根据权利要求1或4所述的方法，其特征在于，所述统一云存储系统接收用户端发送的数据请求，并基于所有已注册的存储链接对该数据请求进行解析包括：
数据请求ID与已注册的存储链接的其中一个链接ID对应，则选择数据请求ID与该链接ID对应的独立云存储系统进行处理。
6.根据权利要求4所述的异构云存储的数据处理方法，其特征在于，所述数据请求还包括时间节点信息。
7.根据权利要求1或6所述的异构云存储的数据处理方法，其特征在于，还包括：
获取数据请求的时间节点信息；
基于所述时间节点信息选择相应的独立云存储系统处理所述数据请求。
8.一种异构云存储系统，其特征在于，包括一个统一云存储系统和多个独立云存储系统，其中，所说统一云存储系统包括：
注册单元，用于接收独立云存储系统的注册请求，并对注册后的独立云存储系统配置一个存储链接；
解析单元，用于接收用户端发送的数据请求，并基于已注册的存储链接对该数据请求进行解析；
转发单元，用于基于解析结果将数据请求转发给相应的独立云储存系统进行处理，独立云储存系统基于该数据请求进行数据处理后返回处理结果给用户端。
9.一种机器可读介质，其特征在于，所述机器可读介质上存储有指令，该指令在机器上执行时使机器执行权利要求1至7中任一项异构云存储系统的数据处理方法。
10.一种系统，包括：
存储器，用于存储由系统的一个或多个处理器执行的指令，以及
处理器，是系统的处理器之一，用于执行权利要求1至7中任一项所述的异构云存储系统的数据处理方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010278779.9A CN111314493A (zh) | 2020-04-10 | 2020-04-10 | 异构云存储系统的数据处理方法及其可读介质和系统 |
| PCT/CN2020/106147 WO2021203591A1 (zh) | 2020-04-10 | 2020-07-31 | 异构云存储系统的数据处理方法及其可读介质和系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010278779.9A CN111314493A (zh) | 2020-04-10 | 2020-04-10 | 异构云存储系统的数据处理方法及其可读介质和系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111314493A true CN111314493A (zh) | 2020-06-19 |
Family
ID=71161020
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010278779.9A Pending CN111314493A (zh) | 2020-04-10 | 2020-04-10 | 异构云存储系统的数据处理方法及其可读介质和系统 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN111314493A (zh) |
| WO (1) | WO2021203591A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021203591A1 (zh) * | 2020-04-10 | 2021-10-14 | 上海依图网络科技有限公司 | 异构云存储系统的数据处理方法及其可读介质和系统 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120296960A1 (en) * | 2011-05-17 | 2012-11-22 | Roundtrip Systems Inc. | Method and system for providing access to mainframe data objects in a heterogeneous computing environment |
| US20140181301A1 (en) * | 2012-12-20 | 2014-06-26 | Software Ag Usa, Inc. | Heterogeneous cloud-store provider access systems, and/or associated methods |
| CN105162845A (zh) * | 2015-08-05 | 2015-12-16 | 深圳联友科技有限公司 | 异构式云存储系统及其数据处理方法 |
| CN106161634A (zh) * | 2016-07-20 | 2016-11-23 | 蔡雄 | 使用云存储的数据管理装置 |
| CN108023746A (zh) * | 2016-11-02 | 2018-05-11 | 杭州海康威视数字技术股份有限公司 | 一种视频数据处理方法、装置及系统 |
| CN109710392A (zh) * | 2018-12-21 | 2019-05-03 | 万达信息股份有限公司 | 一种基于混合云的异构资源调度方法 |
| US20190327303A1 (en) * | 2018-04-20 | 2019-10-24 | EMC IP Holding Company LLC | Method, device and computer program product for scheduling multi-cloud system |
| CN110719325A (zh) * | 2019-09-30 | 2020-01-21 | 恩亿科(北京)数据科技有限公司 | 响应用户请求的方法和装置 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111314493A (zh) * | 2020-04-10 | 2020-06-19 | 上海依图网络科技有限公司 | 异构云存储系统的数据处理方法及其可读介质和系统 |
-
2020
- 2020-04-10 CN CN202010278779.9A patent/CN111314493A/zh active Pending
- 2020-07-31 WO PCT/CN2020/106147 patent/WO2021203591A1/zh active Application Filing
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20120296960A1 (en) * | 2011-05-17 | 2012-11-22 | Roundtrip Systems Inc. | Method and system for providing access to mainframe data objects in a heterogeneous computing environment |
| US20140181301A1 (en) * | 2012-12-20 | 2014-06-26 | Software Ag Usa, Inc. | Heterogeneous cloud-store provider access systems, and/or associated methods |
| CN105162845A (zh) * | 2015-08-05 | 2015-12-16 | 深圳联友科技有限公司 | 异构式云存储系统及其数据处理方法 |
| CN106161634A (zh) * | 2016-07-20 | 2016-11-23 | 蔡雄 | 使用云存储的数据管理装置 |
| CN108023746A (zh) * | 2016-11-02 | 2018-05-11 | 杭州海康威视数字技术股份有限公司 | 一种视频数据处理方法、装置及系统 |
| US20190327303A1 (en) * | 2018-04-20 | 2019-10-24 | EMC IP Holding Company LLC | Method, device and computer program product for scheduling multi-cloud system |
| CN109710392A (zh) * | 2018-12-21 | 2019-05-03 | 万达信息股份有限公司 | 一种基于混合云的异构资源调度方法 |
| CN110719325A (zh) * | 2019-09-30 | 2020-01-21 | 恩亿科(北京)数据科技有限公司 | 响应用户请求的方法和装置 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021203591A1 (zh) * | 2020-04-10 | 2021-10-14 | 上海依图网络科技有限公司 | 异构云存储系统的数据处理方法及其可读介质和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2021203591A1 (zh) | 2021-10-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TW201833792A (zh) | 用戶介面渲染方法及裝置 | |
| US20230168902A1 (en) | Bootstrapping Profile-Guided Compilation and Verification | |
| CN106648569B (zh) | 目标序列化实现方法和装置 | |
| CN110716845B (zh) | 一种Android系统的日志信息读取的方法 | |
| CN111813385B (zh) | 一种基于Web应用的页面插件化方法、装置及设备 | |
| CN113010265A (zh) | Pod的调度方法、调度器、存储插件及系统 | |
| JP2020087470A (ja) | データアクセス方法、データアクセス装置、機器及び記憶媒体 | |
| US7721278B2 (en) | Modular server architecture for multi-environment HTTP request processing | |
| CN114925084A (zh) | 分布式事务处理方法、系统、设备及可读存储介质 | |
| CN112463123A (zh) | 任务编译方法、装置、网络节点、系统及存储介质 | |
| CN111796865A (zh) | 一种字节码文件修改方法、装置、终端设备及介质 | |
| CN113296740A (zh) | 一种服务对象的处理方法、装置、设备和机器可读介质 | |
| CN112579049B (zh) | 基于云平台的定制软件产品化管理方法及装置 | |
| CN116028455A (zh) | 一种数据处理方法、装置、存储介质及电子设备 | |
| CN113220403B (zh) | h5拦截Android返回事件的方法、装置及电子设备 | |
| CN111314493A (zh) | 异构云存储系统的数据处理方法及其可读介质和系统 | |
| CN111241346B (zh) | 一种对象序列化方法、装置、机器可读介质以及系统 | |
| US8510757B2 (en) | Gathering pages allocated to an application to include in checkpoint information | |
| CN111026463A (zh) | 一种页面加载方法、装置、设备和存储介质 | |
| CN106843895B (zh) | 用于处理请求的方法、系统和可读存储介质 | |
| CN113867776A (zh) | 中台应用的发布方法、装置、电子设备和存储介质 | |
| CN110032608B (zh) | 系统数据的信息组装方法、装置、存储介质及电子设备 | |
| US8321606B2 (en) | Systems and methods for managing memory using multi-state buffer representations | |
| US10416923B1 (en) | Fast backup solution for cluster shared volumes shared across a cluster of nodes using extent sets as parallel save streams | |
| CN112486421B (zh) | 一种数据存储方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200619 |
|
| RJ01 | Rejection of invention patent application after publication |