CN106776829A - 一种数据导出系统及其工作方法 - Google Patents

一种数据导出系统及其工作方法 Download PDF

Info

Publication number
CN106776829A
CN106776829A CN201611060542.3A CN201611060542A CN106776829A CN 106776829 A CN106776829 A CN 106776829A CN 201611060542 A CN201611060542 A CN 201611060542A CN 106776829 A CN106776829 A CN 106776829A
Authority
CN
China
Prior art keywords
data
unit
export
request
subquery
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611060542.3A
Other languages
English (en)
Inventor
朱勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Guangda New Network Technology Co Ltd
Original Assignee
Chengdu Guangda New Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Guangda New Network Technology Co Ltd filed Critical Chengdu Guangda New Network Technology Co Ltd
Priority to CN201611060542.3A priority Critical patent/CN106776829A/zh
Publication of CN106776829A publication Critical patent/CN106776829A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/254Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/252Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Computer And Data Communications (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供了一种数据导出系统及其工作方法。使用本发明,在客户端发出数据导出请求后,服务器创建一个导出任务并放进一个队列中,当服务器导出任务线程池有空闲时取出一个任务并分发给相关的业务进行计算、文件写入操作,在服务器端导出处理过程中需要将状态实时的推送到浏览器客户端,客户端解释响应数据并展示在用户界面上,当服务器端导出文件准备好后,客户端的下载功能被激活,此时用户可通过此功能直接下载文件。本发明能有效解决数据库大量数据导出时的稳定性,提升了系统并发处理的性能。

Description

一种数据导出系统及其工作方法
技术领域
本发明属于数据库数据处理技术领域,尤其涉及到一种数据导出系统及其工作方法。
背景技术
传统的导出工作模式是浏览器客户端发送请求(request),服务器端根据请求进行业务数据处理然后返回响应(response),在这种模式中存在一个重大的缺陷,那就是客户端需要等待服务端处理完成后才将导出文件返回,此时浏览器才能进行其他业务操作。为了获取到导出文件数据,用户只能等待导出请求,基于这种方式,用户的操作性大大的被降低了,且获取数据的过程是有一定的性能消耗,对于多用户高并发导出是无法接受的,在这种情况下,为了能让用户更好的操作体验,降低导出性能消耗,相关的基于通信组件解决数据库大量数据导出的技术便适应时代的需要而产生了。
服务器导出文件任务的实现基本原理如下:在浏览器客户端请求导出任务后,服务器创建一个与业务相关的导出任务并放进一个队列中,当服务器导出任务线程池有空闲时取出一个任务并分发给相关的业务进行计算、文件写入操作,在服务器端导出处理过程中需要将状态实时的推送到浏览器客户端,客户端解释响应数据并展示在用户界面上,当服务器端导出文件准备好后,客户端的下载功能被激活,此时用户可通过此功能直接下载文件。
在网管系统中,基于实时通信组件解决数据库大量数据导出的技术,可以解决很多耗时较多的导出业务要求较高的应用场景,如资源导出,告警导出,性能导出等。
发明内容
为解决上述问题,本发明提供了一种数据导出系统,包括服务器端及与服务器端通信连接的各个客户端。
各个客户端运行有下载系统,所述下载系统用于提供用户操作界面,根据用户所发出的数据导出请求显示对应的任务,并在服务器端准备好数据导出文件后进行下载。
所述服务器端用于响应数据导出请求,进行数据导出文件的准备工作,并接受下载系统对数据导出文件的下载,其建立有数据导出请求队列、导出线程池,还设置有请求接收单元、请求队列管理单元、导出线程管理单元、导出请求拆分单元、子查询单元、文件合并单元。
所述请求接收单元用于接收客户端发送来的数据导出请求。
所述请求队列管理单元用于根据数据导出请求,生成数据查询语句,放入导出请求队列。
所述导出线程管理单元用于控制导出线程池里的空闲线程获取导出请求队列中的导出请求对应的数据查询语句。
所述导出请求拆分单元用于将导出线程获取的数据查询语句拆分为多个子查询,分发给子查询单元。
所述子查询单元是根据导出请求拆分单元对数据查询语句的拆分结果产生的,子查询单元的个数与数据查询语句被拆分个数相同,分别执行对应的子查询操作,并根据查询结果生成导出文件。
所述文件合并单元用于在各个子查询单元成功生成导出文件后将各个子查询单元的导出文件进行合并,形成完整的数据导出文件。
进一步的,所述文件合并单元还将合并后的文件进行压缩。
进一步的,所述服务器端和客户端设置有匹配的实时通信组件,所述实时通信组件用于服务器将其对各个任务的执行进度进度以消息的形式发送给下载系统,并在下载系统的界面上将任务的执行进度予以显示。
进一步的,任务的执行进度种类包括数据导出请求已接收和/或数据查询语句已生成和/或数据查询语句已导出和/或数据查询语句已拆分和/或子查询单元已生成和/或子查询单元已查询和/或子查询单元导出文件已完成和/或导出文件已合并和/或导出文件准备成功和/或导出文件准备失败。
进一步的,所述下载系统在服务器端导出文件准备成功后激活对应对应任务的下载功能
进一步的,所述下载系统在服务器端导出文件准备失败后激活对应软件对应任务的清除功能。
上述的数据导出系统的工作方法,其特征在于,包括如下步骤:
步骤一:客户端向服务器端发出数据导出请求,下载系统创建该请求对应的任务并予以显示。
步骤二:服务端的请求接收单元接收到浏览器的数据导出请求,请求队列管理单元根据数据导出请求生成数据查询语句,放入导出请求队列。
步骤三:导出线程管理单元查看导出线程池中是否有空闲线程,如无则等待直到具有空闲线程,否则控制空闲线程获取导出请求队列中的导出请求。
步骤四:导出请求拆分单元根据导出数据量,将导出请求拆分为多个子查询,系统根据子查询数量建立对应的子查询单元。
步骤五:各个子查询单元执行对应查询操作,如果执行成功,则生成导出文件,并执行步骤六,否则不生成,并跳出本次工作流程。
步骤六:文件合并单元用于将各个子查询单元的导出文件进行合并,形成完整的数据导出文件。
步骤七:用户通过下载系统导出数据导出文件。
进一步的,步骤二至步骤六中,服务器端通过实时通信组件将各个任务对应的数据导出请求执行进度以消息的形式发送给下载系统,下载系统将任务执行进度予以显示。
进一步的,步骤二至步骤六中,下载系统显示的任务执行进度的种类包括数据导出请求已接收和/或数据查询语句已生成和/或数据查询语句已导出和/或数据查询语句已拆分和/或子查询单元已生成和/或子查询单元已查询和/或子查询单元导出文件已完成和/或导出文件已合并和/或导出文件准备成功。
进一步的,在步骤五中,所述任务执行进度的种类还包括导出文件准备失败,如果存在子查询单元没有生成导出文件,则服务器端通过实时通信组件发送表示导出文件准备失败的消息,用户能够通过下载系统清除相关任务。
本发明的有益效果为:
发明基于实时通信组件,且服务端采用异步处理方式,实现了数据库大量数据导出的功能,采用这种结构的实现方式有效解决了数据库大量数据导出的友好性、稳定性,提升了系统并发处理的性能。当然,也可以适用于非大量数据导出的情况。
当在网管技术中运用该技术时,能实现对导出数据量较高的应用功能,如资源数据导出,告警数据导出,性能数据导出等,满足了网管维护人员对导出任务及时响应、灵活操作、低延时的要求,提升了网络维护质量。
附图说明
图1为系统示意图。
具体实施方式:
本发明的设计构思为:在客户端发出数据导出请求后,服务器创建一个导出任务并放进一个队列中,当服务器导出任务线程池有空闲时取出一个任务并分发给相关的业务进行计算、文件写入操作,在服务器端导出处理过程中需要将状态实时的推送到浏览器客户端,客户端解释响应数据并展示在用户界面上,当服务器端导出文件准备好后,客户端的下载功能被激活,此时用户可通过此功能直接下载文件。
下面对本发明所所述数据导出系统进行详细说明。
如图1所示,本发明所述系统包括服务器端及与服务器端通信连接的多个客户端。
客户端运行有下载系统,所述下载系统用于提供用户操作界面,根据用户所发出的数据导出请求显示对应的任务,并在服务器端准备好数据导出文件后根据用户操作进行下载。
所述服务器端用于响应数据导出请求,进行数据导出文件的准备工作,并接受下载系统对数据导出文件的下载。建立了数据导出请求队列、导出线程池,还设置有请求接收单元、请求队列管理单元、导出线程管理单元、导出请求拆分单元、子查询单元、文件合并单元,
所述请求接收单元用于接收客户端发送来的数据导出请求;
所述请求队列管理单元用于根据数据导出请求,生成数据查询语句,放入导出请求队列;
所述导出线程管理单元用于控制导出线程池里的空闲线程获取导出请求队列中的导出请求对应的数据查询语句;
所述导出请求拆分单元用于将导出线程获取的数据查询语句拆分为多个子查询,分发给子查询单元;
所述子查询单元是根据导出请求拆分单元对数据查询语句的拆分结果产生,子查询单元的产生个数与数据查询语句被拆分个数有关,分别执行对应的查询操作,并根据查询结果生成导出文件。导出文件一般是EXCEL文件
所述文件合并单元用于将各个子查询单元的导出文件进行合并,并将合并后的文件导出。优选的,文件合并单元将合并后的文件进行压缩后导出。
服务器的功能单元设置有如下有益效果:
1.用户通过浏览器发起的数据导出请求,统一放入导出请求队列中进行导出文件处理,这种异步处理的方式,一方面用户可不需要长时间停留在导出页面,等待数据导出,可先进行系统其他功能的操作,等服务器完成数据导出后,会通知用户导出完成,在下载系统的用户操作界面中下载文件即可,提高用户的操作体验;另一方面解耦了导出请求的接收与数据导出处理之间的依赖关系,相互 之间不影响,提升系统健壮性。
2.使用线程池进行导出请求的并行处理,一是可提高导出处理效率,二是可根据系统资源情况进行扩展与调整,如果系统资源较空闲,可提高处理线程的数量,提高导出并发度,如果系统资源紧张,减少导出并发度,避免系统负载过高,出现异常。
3.服务器端组装好文件后下载任务软件内对应任务的下载才被激活,在这期间,客户端无需进行等待,可以进行其他系统操作。
优选的,所述服务器端和客户端设置有匹配的实时通信组件,所述实时通信组件用于服务器将其对各个任务的执行进度进度以消息的形式发送给下载系统,并在下载系统的界面上将任务的执行进度予以显示。显示的进度种类包括:数据导出请求接收和/或数据查询语句生成和/或数据查询语句导出和/或数据查询语句拆分和/或子查询单元生成和/或子查询单元查询和/或子查询单元导出文件完成和/或导出文件合并和/或导出文件压缩和/或导出文件准备成功和/或导出文件准备失败。
本发明所述的实时通信组件限于现有技术中存在的、能实现服务器端能够向客户端发送消息的目的的通信组件,如SOCKET。
所述下载系统在用户登录后会自动加载用户下载任务中最新的N条记录。N为预先确定的整数。每个下载任务都设置有对应的进度显示,服务器通过实时通信组件将任务执行进度情况进行显示。
服务器端在每个数据导出请求的文件准备成功或失败之后,实时通信组件将记录此任务的结束状态并立即通知到客户端下载系统,如果导出文件准备成功,用户就可下载,如果失败则可清除该任务。当用户清除下载系统的任务记录时,实时通信组件会发起一条删除任务的命令至服务器,服务收到此消息后会将此任务从数据库中删除掉,同时会通知客户端删除该记录。
下载系统会以分页列表的形式显示各个任务,还会显示各个任务的名称、执行时间、模块类型(所述模块类型包括设备网管系统中的资产、告警、性能等模块),且操作人员可以配置任务记录保持天数,以及清除过时任务的周期(如一天)。
上述系统的工作方法包括如下步骤:
步骤一:客户端向服务器端发出数据导出请求,下载系统创建该请求对应的任务并予以显示。
一般来说,最新的任务会显示在最新的位置上。
步骤二:服务端的请求接收单元接收到浏览器的数据导出请求,请求队列管理单元根据数据导出请求生成数据查询语句,放入导出请求队列。
步骤三:导出线程管理单元查看导出线程池中是否有空闲线程,如无则等待直到具有空闲线程,否则控制空闲线程获取导出请求队列中的导出请求。
步骤四:导出请求拆分单元根据导出数据量,将导出请求拆分为多个子查询,系统根据子查询数量建立对应的子查询单元。
步骤五:各个子查询单元执行对应查询操作,如果执行成功,则生成导出文件,并执行步骤六,否则不生成,并跳出本次工作流程。
任一子查询单元没有生成导出文件都会导致导出文件准备失败,服务器通过实时通信组件发送消息,使得对应任务显示导出文件准备失败的进度,此时,下载系统内对应任务的清除功能被激活,用户能够通过下载系统清除相关任务。在用户点击下载任务记录的“清除”按钮后,实时通信组件组件将发起一条删除任务的命令至服务器,服务收到此消息后会将此任务从数据库中删除掉,同时会通知客户端删除该记录。
步骤六:文件合并单元用于将各个子查询单元的导出文件进行合并,形成完整的数据导出文件。优选的,合并后还会进行压缩。
步骤七:用户通过下载系统导出数据导出文件。
步骤二至步骤六中,下载系统显示任务执行进度。

Claims (10)

1.一种数据导出系统,其特征在于,包括服务器端及与服务器端通信连接的各个客户端;
各个客户端运行有下载系统,所述下载系统用于提供用户操作界面,根据用户所发出的数据导出请求显示对应的任务,并在服务器端准备好数据导出文件后进行下载;
所述服务器端用于响应数据导出请求,进行数据导出文件的准备工作,并接受下载系统对数据导出文件的下载,其建立有数据导出请求队列、导出线程池,还设置有请求接收单元、请求队列管理单元、导出线程管理单元、导出请求拆分单元、子查询单元、文件合并单元;
所述请求接收单元用于接收客户端发送来的数据导出请求;
所述请求队列管理单元用于根据数据导出请求,生成数据查询语句,放入导出请求队列;
所述导出线程管理单元用于控制导出线程池里的空闲线程获取导出请求队列中的导出请求对应的数据查询语句;
所述导出请求拆分单元用于将导出线程获取的数据查询语句拆分为多个子查询,分发给子查询单元;
所述子查询单元是根据导出请求拆分单元对数据查询语句的拆分结果产生的,子查询单元的个数与数据查询语句被拆分个数相同,分别执行对应的子查询操作,并根据查询结果生成导出文件;
所述文件合并单元用于在各个子查询单元成功生成导出文件后将各个子查询单元的导出文件进行合并,形成完整的数据导出文件。
2.如权利要求1所述的数据导出系统,其特征在于,所述文件合并单元还将合并后的文件进行压缩。
3.如权利要求1所述的数据导出系统,其特征在于,所述服务器端和客户端设置有匹配的实时通信组件,所述实时通信组件用于服务器将其对各个任务的执行进度进度以消息的形式发送给下载系统,并在下载系统的界面上将任务的执行进度予以显示。
4.如权利要求3所述的数据导出系统,其特征在于,任务的执行进度种类包括数据导出请求已接收和/或数据查询语句已生成和/或数据查询语句已导出和/或数据查询语句已拆分和/或子查询单元已生成和/或子查询单元已查询和/或子查询单元导出文件已完成和/或导出文件已合并和/或导出文件准备成功和/或导出文件准备失败。
5.如权利要求3所述的数据导出系统,其特征在于,所述下载系统在服务器端导出文件准备成功后激活对应对应任务的下载功能。
6.如权利要求3所述的数据导出系统,其特征在于,所述下载系统在服务器端导出文件准备失败后激活对应软件对应任务的清除功能。
7.如权利要求3或4或5或6所述的数据导出系统的工作方法,其特征在于,包括如下步骤:
步骤一:客户端向服务器端发出数据导出请求,下载系统创建该请求对应的任务并予以显示;
步骤二:服务端的请求接收单元接收到浏览器的数据导出请求,请求队列管理单元根据数据导出请求生成数据查询语句,放入导出请求队列;
步骤三:导出线程管理单元查看导出线程池中是否有空闲线程,如无则等待直到具有空闲线程,否则控制空闲线程获取导出请求队列中的导出请求;
步骤四:导出请求拆分单元根据导出数据量,将导出请求拆分为多个子查询,系统根据子查询数量建立对应的子查询单元;
步骤五:各个子查询单元执行对应查询操作,如果执行成功,则生成导出文件,并执行步骤六,否则不生成,并跳出本次工作流程;
步骤六:文件合并单元用于将各个子查询单元的导出文件进行合并,形成完整的数据导出文件;
步骤七:用户通过下载系统导出数据导出文件。
8.如权利要求7所述的数据导出系统的工作方法,其特征在于,步骤二至步骤六中,服务器端通过实时通信组件将各个任务对应的数据导出请求执行进度以消息的形式发送给下载系统,下载系统将任务执行进度予以显示。
9.如权利要求8所述的数据导出系统的工作方法,其特征在于,步骤二至步骤六中,下载系统显示的任务执行进度的种类包括数据导出请求已接收和/或数据查询语句已生成和/或数据查询语句已导出和/或数据查询语句已拆分和/或子查询单元已生成和/或子查询单元已查询和/或子查询单元导出文件已完成和/或导出文件已合并和/或导出文件准备成功。
10.如权利要求8所述的数据导出系统的工作方法,其特征在于,在步骤五中,所述任务执行进度的种类还包括导出文件准备失败,如果存在子查询单元没有生成导出文件,则服务器端通过实时通信组件发送表示导出文件准备失败的消息,用户能够通过下载系统清除相关任务。
CN201611060542.3A 2016-11-28 2016-11-28 一种数据导出系统及其工作方法 Pending CN106776829A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611060542.3A CN106776829A (zh) 2016-11-28 2016-11-28 一种数据导出系统及其工作方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611060542.3A CN106776829A (zh) 2016-11-28 2016-11-28 一种数据导出系统及其工作方法

Publications (1)

Publication Number Publication Date
CN106776829A true CN106776829A (zh) 2017-05-31

Family

ID=58911020

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611060542.3A Pending CN106776829A (zh) 2016-11-28 2016-11-28 一种数据导出系统及其工作方法

Country Status (1)

Country Link
CN (1) CN106776829A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107784085A (zh) * 2017-09-30 2018-03-09 平安科技(深圳)有限公司 一种数据列表的导出方法及其终端
CN107798111A (zh) * 2017-11-01 2018-03-13 四川长虹电器股份有限公司 一种分布式环境中大批量导出数据的方法
CN108153919A (zh) * 2018-02-28 2018-06-12 弘成科技发展有限公司 Dbf数据导出平台及其导出方法
CN108345682A (zh) * 2018-03-02 2018-07-31 弘成科技发展有限公司 基于多租户可配置的导入导出平台及方法
CN108804712A (zh) * 2018-06-27 2018-11-13 中国建设银行股份有限公司 数据导出方法及装置
CN110019339A (zh) * 2017-11-20 2019-07-16 北京京东尚科信息技术有限公司 一种数据查询方法和系统
WO2019218476A1 (zh) * 2018-05-14 2019-11-21 平安科技(深圳)有限公司 一种数据的导出方法及设备
CN110489468A (zh) * 2019-07-09 2019-11-22 威富通科技有限公司 一种数据报表的导出方法、装置及服务器
CN111125174A (zh) * 2019-12-06 2020-05-08 东软集团股份有限公司 数据导出方法、装置、存储介质、电子设备
CN111435354A (zh) * 2019-01-14 2020-07-21 北京京东尚科信息技术有限公司 数据导出方法、装置、存储介质及电子设备
CN112364067A (zh) * 2021-01-12 2021-02-12 绿漫科技有限公司 一种大批量数据导出系统及其导出方法
CN113779122A (zh) * 2021-02-19 2021-12-10 北京京东振世信息技术有限公司 导出数据的方法和装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101996067A (zh) * 2009-08-19 2011-03-30 阿里巴巴集团控股有限公司 一种数据导出的方法和装置
CN103034735A (zh) * 2012-12-26 2013-04-10 北京讯鸟软件有限公司 一种大数据分布式文件导出方法
CN105843819A (zh) * 2015-01-15 2016-08-10 中国移动通信集团河南有限公司 一种数据导出方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101996067A (zh) * 2009-08-19 2011-03-30 阿里巴巴集团控股有限公司 一种数据导出的方法和装置
CN103034735A (zh) * 2012-12-26 2013-04-10 北京讯鸟软件有限公司 一种大数据分布式文件导出方法
CN105843819A (zh) * 2015-01-15 2016-08-10 中国移动通信集团河南有限公司 一种数据导出方法及装置

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107784085A (zh) * 2017-09-30 2018-03-09 平安科技(深圳)有限公司 一种数据列表的导出方法及其终端
CN107798111A (zh) * 2017-11-01 2018-03-13 四川长虹电器股份有限公司 一种分布式环境中大批量导出数据的方法
CN110019339B (zh) * 2017-11-20 2021-11-30 北京京东尚科信息技术有限公司 一种数据查询方法和系统
CN110019339A (zh) * 2017-11-20 2019-07-16 北京京东尚科信息技术有限公司 一种数据查询方法和系统
CN108153919A (zh) * 2018-02-28 2018-06-12 弘成科技发展有限公司 Dbf数据导出平台及其导出方法
CN108345682A (zh) * 2018-03-02 2018-07-31 弘成科技发展有限公司 基于多租户可配置的导入导出平台及方法
WO2019218476A1 (zh) * 2018-05-14 2019-11-21 平安科技(深圳)有限公司 一种数据的导出方法及设备
CN108804712A (zh) * 2018-06-27 2018-11-13 中国建设银行股份有限公司 数据导出方法及装置
CN111435354A (zh) * 2019-01-14 2020-07-21 北京京东尚科信息技术有限公司 数据导出方法、装置、存储介质及电子设备
CN110489468A (zh) * 2019-07-09 2019-11-22 威富通科技有限公司 一种数据报表的导出方法、装置及服务器
CN111125174A (zh) * 2019-12-06 2020-05-08 东软集团股份有限公司 数据导出方法、装置、存储介质、电子设备
CN112364067A (zh) * 2021-01-12 2021-02-12 绿漫科技有限公司 一种大批量数据导出系统及其导出方法
CN112364067B (zh) * 2021-01-12 2022-02-11 绿城科技产业服务集团有限公司 一种大批量数据导出系统及其导出方法
CN113779122A (zh) * 2021-02-19 2021-12-10 北京京东振世信息技术有限公司 导出数据的方法和装置
CN113779122B (zh) * 2021-02-19 2023-11-03 北京京东振世信息技术有限公司 导出数据的方法和装置

Similar Documents

Publication Publication Date Title
CN106776829A (zh) 一种数据导出系统及其工作方法
CN104618693B (zh) 一种基于云计算的监控视频在线处理任务管理方法及系统
CN111338784B (zh) 一种实现代码仓库与计算服务整合的方法及系统
CN103297395B (zh) 一种互联网业务的实现方法、系统以及装置
CN109241191A (zh) 一种分布式数据源异构同步平台及同步方法
US20120221279A1 (en) Automatic Test System for Distributed Comprehensive Service and Method Thereof
CN105227364B (zh) 一种erp系统资源共享的方法及装置
CN104899274B (zh) 一种内存数据库高效远程访问方法
CN106503017A (zh) 一种分布式爬虫系统任务抓取系统和方法
CN107105009A (zh) 基于Kubernetes系统对接工作流引擎的作业调度方法和装置
CN102012840A (zh) 一种数据的批量调度方法和系统
CN104143124B (zh) 会议预定方法及项目管理系统
CN110597634B (zh) 一种数据处理方法、装置及计算机可读存储介质
CN111210340B (zh) 一种自动任务处理方法、装置、服务器及存储介质
CN109800081A (zh) 一种大数据任务的管理方法及相关设备
CN109062982B (zh) 财务数据交互方法、装置、计算机设备和存储介质
CN111104188A (zh) 漏洞扫描器的调度方法及装置
CN115687486B (zh) 一种基于kettle的轻量级数据采集方法及设备
CN109151056A (zh) 基于Canal的消息推送方法和系统
CN115906999A (zh) 基于Kubernetes集群的大规模强化学习训练任务的管理平台
CN107229628A (zh) 分布式数据库预处理的方法及装置
CN103631594B (zh) 通用流程异步调度方法及系统
CN113220480B (zh) 分布式的数据任务跨云调度系统及方法
CN103744880B (zh) 一种基于云计算的dna数据管理方法及系统
CN106202470B (zh) 脚本的处理方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170531

WD01 Invention patent application deemed withdrawn after publication