CN112632023A - 一种多数据源写入的文件传输方法、装置及存储介质 - Google Patents

一种多数据源写入的文件传输方法、装置及存储介质 Download PDF

Info

Publication number
CN112632023A
CN112632023A CN202011607024.5A CN202011607024A CN112632023A CN 112632023 A CN112632023 A CN 112632023A CN 202011607024 A CN202011607024 A CN 202011607024A CN 112632023 A CN112632023 A CN 112632023A
Authority
CN
China
Prior art keywords
file
transmission
directory
target
data sources
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011607024.5A
Other languages
English (en)
Inventor
刘少凯
张硕
刘婷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Haohan Data Technology Co ltd
Original Assignee
Haohan Data Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Haohan Data Technology Co ltd filed Critical Haohan Data Technology Co ltd
Priority to CN202011607024.5A priority Critical patent/CN112632023A/zh
Publication of CN112632023A publication Critical patent/CN112632023A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/178—Techniques for file synchronisation in file systems
    • G06F16/1794—Details of file format conversion

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种能够适用于多数据源写入的文件传输方法、装置及存储介质。具体的，所述多数据源写入的文件传输方法包括以下步骤：接收线程数据；接收配置参数；根据配置参数，选择传输方式，所述传输方式设置有多种；接收目标文件；根据配置参数及线程数据，传输目标文件。采用上述方案，能够实现对目标文件的多种数据源写入的文件传输方式，通过线程数据及配置参数的设置提供多线程传输方式，使用者可通过修改配置参数来调整传输过程，来解决文件传输堆积或者计算和存储资源浪费的问题。

Description

一种多数据源写入的文件传输方法、装置及存储介质
技术领域：
本发明涉及计算机技术领域，尤其涉及一种多数据源写入的文件传输方法、装置及存储介质。
背景技术：
在目前的计算机技术领域中，涉及linux本地文件传输至HDFS、Kafka、SFTPServer等节点或集群时，主要采用HDFS、Kafka、SFTP的原生命令或使用Flume开源工具，并且依赖使用HDFS、Kafka、SFTP的原生命令进行手动操作，实际使用时操作不便，并且在生产环境中使用原生命令进行逐个文件传输效率低，无法进行批量上传，也无法灵活配置传输效率。
同时，使用开源工具进行文件传输，如Flume，其配置繁琐，易出现source、channel、sink的关系在配置文件内相互交织的问题，不便于配置和管理，且文件传输速度慢，易产生文件堆积，浪费存储资源；其次，无法通过修改配置选项灵活调整传输能力和传输速度。
因此，本领域亟需一种多数据源写入的文件传输方法、装置及存储介质。
有鉴于此，提出本发明。
发明内容：
本发明的目的在于提供一种能够适用于多数据源写入的文件传输方法、装置及存储介质，以解决现有技术中的至少一项技术问题。
在本发明的第一方面，提供了一种多数据源写入的文件传输方法。
具体的，所述多数据源写入的文件传输方法包括以下步骤：
接收线程数据；
接收配置参数；
根据配置参数，选择传输方式，所述传输方式设置有多种；
接收目标文件；
根据配置参数及线程数据，传输目标文件。
采用上述方案，能够实现对目标文件的多种数据源写入的文件传输方式，通过线程数据及配置参数的设置提供多线程传输方式，使用者可通过修改配置参数来调整传输过程，来解决文件传输堆积或者计算和存储资源浪费的情况。
优选地，所述接收线程数据步骤中，所述线程数据包括至少一条流水线。
进一步地，所述流水线包括运行所需配置文件、执行文件等信息。
进一步地，所述传输方式种类包括HDFS路径、Kafka路径及SFTP路径中的一种或几种。
采用上述方案，传输方式的种类和数量，能够通过实际的工作环境进行针对性的调整，在显著提高工作效率的同时，避免了不必要的计算资源浪费。
优选地，所述接收配置参数步骤中，所述配置参数包括：源目录参数、目标目录参数及本地目录参数，所述源目录为每条流水线的监控目录，所述源目录参数用于配置待传输的目标文件所在路径，所述目标目录为传输工作的目的地，所述目标目录参数用于配置待传输目标文件的传输方式，所述本地目录为备份目录，所述本地目录参数为已传输目标文件存储在本地位置的路径。
进一步地，所述源目录参数包括传输格式、传输文件位置，所述传输格式为待传输目标文件的格式类型，所述传输文件位置为待传输的目标文件的存储位置。
进一步地，所述目标目录参数包括目的集群种类、文件压缩种类、传输目的地址，所述目的集群种类为待传输目标文件的传输目的地集群类型，所述文件压缩种类为待传输目标文件在传输过程中的压缩类型，所述传输目的地址为待传输目标文件的目的地地址。
进一步地，所述本地目录参数包括本地存储目录、传输出错存储目录，所述本地存储目录为已传输成功的目标文件在本地的存储位置，所述传输出错存储目录为传输过程中出现错误时传输的目标文件存放的位置。
采用上述方案，通过使用者针对性的配置参数设置，首先，能够使多条路径间互不干扰，使每条路径均有相对独立的工作环境，其次，能够使传输过程产生的传输日志条理清晰，便于使用者随时查看。
优选地，所述根据配置参数，选择传输方式，所述传输方式设置有多种步骤中，包括：根据传输格式，选择与传输格式相同的路径和文件。
优选地，所述接收目标文件步骤中，包括：接收目标文件，并根据传输位置和执行传输文件格式查找符合条件的目标文件。
优选地，所述根据配置参数及线程数据，传输目标文件步骤中，包括：根据传输文件位置和传输文件格式调取目标文件，并根据目的集群种类及传输目的地址，选择对应传输方式，将目标文件传输至传输目的地址。
进一步地，所述根据配置参数及线程数据，传输目标文件步骤中，还包括：读取文件压缩种类，对目标文件进行压缩。
采用上述方案，首先，能够压缩目标文件的传输体积，降低目标文件对存储资源的占用，其次，能够提高传输速率，并降低传输过程中的传输错误，保证目标文件完整性，防止目标文件丢失。
优选地，所述根据配置参数及线程数据，传输目标文件步骤之后，包括步骤：判断传输文件位置中是否还存在目标文件，若是，进行根据配置参数及线程数据，传输目标文件步骤，若否，循环本步骤。
采用上述方案，能够将传输文件位置中的目标文件依次传输，并对传输文件位置进行监控，直至传输程序停止。
本发明的第二方面，提供了一种多数据源写入的文件传输装置。
具体的，所述多数据源写入的文件传输装置包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述多数据源写入的文件传输方法。
本发明的第三方面，提供了一种存储介质。
具体的，所述存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述多数据源写入的文件传输方法。
综上所述，本发明具有以下有益效果：
1.本发明能够实现对目标文件的多种数据源写入的文件传输方式，通过线程数据及配置参数的设置提供多线程传输方式，使用者可通过修改配置参数来调整传输效率，来解决文件传输堆积或者计算和存储资源浪费的情况；
2.本发明传输方式的种类和数量，能够通过实际的工作环境进行针对性的调整，实现对多种传输方式和数量的灵活配置，在显著提高工作效率的同时，避免了不必要的计算资源浪费；
3.本发明通过使用者针对性的配置参数设置，首先，能够使多条路径间互不干扰，使每条路径均有相对独立的工作环境，其次，能够使传输过程产生的传输日志条理清晰，便于使用者随时查看。
附图说明：
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明的多数据源写入的文件传输方法一种实施方式的流程图；
图2为本发明的多数据源写入的文件传输方法另一种实施方式的流程图。
具体实施方式：
这里将详细地对示例性实施例进行说明，其示例表示在附图中。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
在本发明使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本发明。在本发明和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
以下将通过实施例对本发明进行详细描述。
本发明中所称HDFS路径为Hadoop Distributed File System路径；Kafka为Apache Kafka路径；SFTP路径为Secure File Transfer Protocol路径。
本发明的第一方面，提供了一种多数据源写入的文件传输方法。
如图1所示，所述多数据源写入的文件传输方法包括以下步骤：
S100.接收线程数据；
在具体实施过程中，所述S100.接收线程数据步骤中，所述线程数据包括至少一条流水线，所述流水线包括传输方式种类、传输方式数量，所述传输方式种类包括HDFS路径、Kafka路径及SFTP路径，所述每种路径数量设置有一条。采用上述方案，传输方式的种类和数量，能够通过实际的工作环境进行针对性的调整，在显著提高工作效率的同时，避免了不必要的计算资源浪费。
S200.接收配置参数；
在具体实施过程中，所述S200.接收配置参数步骤中，所述配置参数包括：源目录参数、目标目录参数及本地目录参数，所述源目录为每条流水线的监控目录，所述源目录参数用于配置待传输的目标文件所在路径，所述目标目录为传输工作的目的地，所述目标目录参数用于配置待传输目标文件的传输方式，所述本地目录参数为备份目录，所述本地目录为已传输目标文件存储在本地位置的路径，所述源目录参数包括传输格式、传输文件位置，所述传输格式为待传输目标文件的格式类型，所述传输文件位置为待传输的目标文件的存储位置，所述目标目录参数包括目的集群种类、文件压缩种类、传输目的地址，所述目的集群种类为待传输目标文件的传输目的地集群类型，所述文件压缩种类为待传输目标文件在传输过程中的压缩类型，所述传输目的地址为待传输目标文件的目的地地址，所述本地目录参数包括本地存储目录、传输出错存储目录，所述本地存储目录为已传输成功的目标文件在本地的存储位置，所述传输出错存储目录为传输过程中出现错误时传输的目标文件存放的位置。采用上述方案，通过使用者针对性的配置参数设置，首先，能够使多条路径间互不干扰，使每条路径均有相对独立的工作环境，其次，能够使传输过程产生的传输日志条理清晰，便于使用者随时查看。
S300.根据配置参数，选择传输方式，所述传输方式设置有多种；
在具体实施过程中，所述S300.根据配置参数，选择传输方式，所述传输方式设置有多种步骤中，包括：根据传输格式，选择与传输格式相同的路径和文件。
S400.接收目标文件；
在具体实施过程中，所述S400.接收目标文件步骤中，包括：接收目标文件，并根据传输位置和执行传输文件格式查找符合条件的目标文件。
S500.根据配置参数及线程数据，传输目标文件。
在具体实施过程中，所述S500.根据配置参数及线程数据，传输目标文件步骤中，包括：根据传输文件位置调取目标文件，并根据目的集群种类及传输目的地址，选择对应传输方式，将目标文件传输至传输目的地址，所述根据配置参数及线程数据，传输目标文件步骤中，还包括：读取文件压缩种类，对目标文件进行压缩，所述压缩过程与传输过程同时进行。首先，能够压缩目标文件的传输体积，降低目标文件对存储资源的占用，其次，能够提高传输速率，并降低传输过程中的传输错误，保证目标文件完整性，防止目标文件丢失。
采用上述方案，能够实现对目标文件的多种数据源写入的文件传输方式，通过线程数据及配置参数的设置提供多线程传输方式，使用者可通过修改配置参数来调整传输过程，也可通过配置参数调整各路径中的的传输能力，实现根据实际情况调整路径数量和配置参数来解决文件传输堆积或者计算和存储资源浪费的情况。
在本发明的一些优选实施方式中，如图2所示，所述S500.根据配置参数及线程数据，传输目标文件步骤之后，包括步骤：S600.判断传输文件位置中是否还存在目标文件，若是，进行根据配置参数及线程数据，传输目标文件步骤，若否，循环本步骤。
采用上述方案，能够将传输文件位置中的目标文件依次传输，并对传输文件位置进行监控，直至传输程序停止。
本发明的第二方面，提供了一种多数据源写入的文件传输装置。
具体的，所述多数据源写入的文件传输装置包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述多数据源写入的文件传输方法。
本发明的第三方面，提供了一种存储介质。
具体的，所述存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述多数据源写入的文件传输方法。
综上所述，本发明能够实现对目标文件的多种数据源写入的文件传输方式，通过线程数据及配置参数的设置提供多线程传输方式，使用者可通过修改配置参数来调整传输效率，来解决文件传输堆积或者计算和存储资源浪费的情况；本发明传输方式的种类和数量，能够融合多种传输方式，且传输方式修改以及新增传输种类和数量简便，在显著提高工作效率的同时，避免了不必要的计算资源浪费；本发明通过使用者针对性的配置参数设置，首先，能够使多条路径间互不干扰，使每条路径均有相对独立的工作环境，其次，能够使传输过程产生的传输日志条理清晰，便于使用者随时查看。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
应当理解，本申请实施例中，从权、各个实施例、特征可以互相组合结合，都能实现解决前述技术问题。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种多数据源写入的文件传输方法，其特征在于：所述多数据源写入的文件传输方法包括以下步骤：
接收线程数据；
接收配置参数；
根据配置参数，选择传输方式，所述传输方式设置有多种；
接收目标文件；
根据配置参数及线程数据，传输目标文件。
2.根据权利要求1所述多数据源写入的文件传输方法，其特征在于：所述接收线程数据步骤中，所述线程数据包括至少一条流水线。
3.根据权利要求2所述多数据源写入的文件传输方法，其特征在于：所述接收配置参数步骤中，所述配置参数包括：源目录参数、目标目录参数及本地目录参数，所述源目录为每条流水线的监控目录，所述源目录参数用于配置待传输的目标文件所在路径，所述目标目录为传输工作的目的地，所述目标目录参数用于配置待传输目标文件的传输方式，所述本地目录为备份目录，所述本地目录参数为已传输目标文件存储在本地位置的路径。
4.根据权利要求3所述多数据源写入的文件传输方法，其特征在于：所述源目录参数包括传输格式、传输文件位置，所述传输格式为待传输目标文件的格式类型，所述传输文件位置为待传输的目标文件的存储位置。
5.根据权利要求3或4所述多数据源写入的文件传输方法，其特征在于：所述目标目录参数包括目的集群种类、文件压缩种类、传输目的地址，所述目的集群种类为待传输目标文件的传输目的地集群类型，所述文件压缩种类为待传输目标文件在传输过程中的压缩类型，所述传输目的地址为待传输目标文件的目的地地址。
6.根据权利要求5所述多数据源写入的文件传输方法，其特征在于：所述本地目录参数包括本地存储目录、传输出错存储目录，所述本地存储目录为已传输成功的目标文件在本地的存储位置，所述传输出错存储目录为传输过程中出现错误时传输的目标文件存放的位置。
7.根据权利要求6所述多数据源写入的文件传输方法，其特征在于：所述根据配置参数，选择传输方式，所述传输方式设置有多种步骤中，包括：根据传输格式，选择与传输格式相同的路径和文件。
8.根据权利要求7所述多数据源写入的文件传输方法，其特征在于：所述根据配置参数及线程数据，传输目标文件步骤中，还包括：读取文件压缩种类，对目标文件进行压缩。
9.一种多数据源写入的文件传输装置，其特征在于：所述多数据源写入的文件传输装置包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如权利要求1-8任一种所述的多数据源写入的文件传输方法。
10.一种存储介质，其特征在于：所述存储介质，其上存储有计算机程序，该程序被处理器执行时实现如权利要求1-8任一种所述的多数据源写入的文件传输方法。
CN202011607024.5A 2020-12-30 2020-12-30 一种多数据源写入的文件传输方法、装置及存储介质 Pending CN112632023A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011607024.5A CN112632023A (zh) 2020-12-30 2020-12-30 一种多数据源写入的文件传输方法、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011607024.5A CN112632023A (zh) 2020-12-30 2020-12-30 一种多数据源写入的文件传输方法、装置及存储介质

Publications (1)

Publication Number Publication Date
CN112632023A true CN112632023A (zh) 2021-04-09

Family

ID=75286531

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011607024.5A Pending CN112632023A (zh) 2020-12-30 2020-12-30 一种多数据源写入的文件传输方法、装置及存储介质

Country Status (1)

Country Link
CN (1) CN112632023A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106445951A (zh) * 2015-08-07 2017-02-22 中兴通讯股份有限公司 一种文件传输方法和装置
US10489388B1 (en) * 2018-05-24 2019-11-26 People. ai, Inc. Systems and methods for updating record objects of tenant systems of record based on a change to a corresponding record object of a master system of record
CN110830567A (zh) * 2019-10-31 2020-02-21 中国银行股份有限公司 一种数据传输方法及装置
CN111049913A (zh) * 2019-12-17 2020-04-21 中国建设银行股份有限公司 数据文件的传输方法及装置、存储介质、电子设备
CN111767257A (zh) * 2020-06-28 2020-10-13 星辰天合（北京）数据科技有限公司 基于fuse文件系统和nfs协议的数据传输方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106445951A (zh) * 2015-08-07 2017-02-22 中兴通讯股份有限公司 一种文件传输方法和装置
US10489388B1 (en) * 2018-05-24 2019-11-26 People. ai, Inc. Systems and methods for updating record objects of tenant systems of record based on a change to a corresponding record object of a master system of record
CN110830567A (zh) * 2019-10-31 2020-02-21 中国银行股份有限公司 一种数据传输方法及装置
CN111049913A (zh) * 2019-12-17 2020-04-21 中国建设银行股份有限公司 数据文件的传输方法及装置、存储介质、电子设备
CN111767257A (zh) * 2020-06-28 2020-10-13 星辰天合（北京）数据科技有限公司 基于fuse文件系统和nfs协议的数据传输方法及装置

Similar Documents

Publication Publication Date Title
KR102628362B1 (ko) 컨테이너화된 환경에서 클러스터의 라이브 마이그레이션
US9906598B1 (en) Distributed data storage controller
US10542073B2 (en) File transfer to a distributed file system
JP5745770B2 (ja) 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法
CA2892889C (en) Scaling computing clusters
JP6238309B2 (ja) アプリケーション間の統一性を有する共有されるボリュームのスナップショットを生成するための方法
US8930364B1 (en) Intelligent data integration
US20080270524A1 (en) Distributing files over a computer network
CN111901377B (zh) 一种基于ai训练平台的文件传输方法、装置、设备和介质
US20180006963A1 (en) Network-accessible data volume modification
US20180013826A1 (en) Resource node interface protocol
CN109561124A (zh) 一种文件传输的方法、系统及终端设备
US20220012103A1 (en) System and method for optimization and load balancing of computer clusters
CN105208135A (zh) 一种文件传输方法和设备
CN113434312A (zh) 数据血缘关系处理方法及装置
CA3137742A1 (en) Blockchain cache system
CN113157658B (zh) 客户端日志收集分发方法、装置及计算机设备
EP4062624B1 (en) Managed data export to a remote network from edge devices
CN113347238A (zh) 基于区块链的消息分区方法及系统、设备、存储介质
CN112632023A (zh) 一种多数据源写入的文件传输方法、装置及存储介质
US10402373B1 (en) Filesystem redirection
CN105574008A (zh) 应用于分布式文件系统的任务调度方法和设备
US11334456B1 (en) Space efficient data protection
CN110442455A (zh) 一种数据处理方法及装置
US11728825B2 (en) Cluster-based data compression for AI training on the cloud for an edge network

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination