CN112131179A - 任务状态检测方法、装置、计算机设备及存储介质 - Google Patents
任务状态检测方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN112131179A CN112131179A CN202011008628.8A CN202011008628A CN112131179A CN 112131179 A CN112131179 A CN 112131179A CN 202011008628 A CN202011008628 A CN 202011008628A CN 112131179 A CN112131179 A CN 112131179A
- Authority
- CN
- China
- Prior art keywords
- data
- data migration
- task
- migration task
- data volume
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 44
- 230000005012 migration Effects 0.000 claims abstract description 377
- 238000013508 migration Methods 0.000 claims abstract description 377
- 238000000034 method Methods 0.000 claims abstract description 26
- 238000012216 screening Methods 0.000 claims abstract description 14
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 abstract description 5
- 238000005516 engineering process Methods 0.000 abstract description 3
- 230000008569 process Effects 0.000 description 11
- 238000012544 monitoring process Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 239000004973 liquid crystal related substance Substances 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/119—Details of migration of file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/1734—Details of monitoring file system events, e.g. by the use of hooks, filter drivers, logs
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明涉及数据处理技术,提供了一种任务状态检测方法、装置、计算机设备及存储介质。该方法获取多个数据迁移任务的开始时间;扫描每个数据迁移任务,得到每个数据迁移任务对应的计算机设备的当前时间;根据每个数据迁移任务的开始时间及对应的所述计算机设备的当前时间,得到每个数据迁移任务的执行时长;筛选出执行时长大于预设阈值的数据迁移任务,计算筛选出的每个数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器,计算筛选出的每个数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量;判断第一数据量等于相应的第一目标数据量时,停止执行相应的数据迁移任务。本发明可以节约调度资源。本发明还涉及数字医疗,应用于医疗平台数据库的数据迁移。
Description
技术领域
本发明涉及数据处理技术,尤其涉及一种任务状态检测方法、装置、计算机设备及存储介质。
背景技术
目前,在构建大数据平台时,数据接入是其中很重要的一个模块或者子系统,尤其是在构建数据湖时,需要接入各种各样的原始数据到一个集中的存储系统,此时,需要构建一个相对独立的数据交换平台来适配各个数据接入场景。
在数据交换平台中,把一个表从源库迁移到目标库,为了支持多并发,一般会启动一个独立的任务来完成这个数据迁移工作,独立的任务比如一个线程或者一个进程。当需要迁移的数据量较大时,任务耗时较长,会出现数据已经迁移完成而任务仍然处于运行状态,造成线程或者进程一直挂着,浪费调度资源。
发明内容
鉴于以上内容,本发明提供一种任务状态检测方法、装置、计算机设备及存储介质,其目的在于解决目前数据已经迁移完成而任务仍处于运行状态,造成线程或者进程一直挂着,浪费调度资源的技术问题。
为实现上述目的,本发明提供一种任务状态检测方法,应用于计算机设备,该方法包括:
获取多个数据迁移任务的开始时间;
扫描每个所述数据迁移任务,得到每个所述数据迁移任务对应的计算机设备的当前时间;
根据每个所述数据迁移任务的所述开始时间及对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长;
筛选出所述执行时长大于预设阈值的一个或多个所述数据迁移任务,计算筛选出的每个所述数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器,计算筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量;
判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量;
当完成迁移的所述第一数据量等于相应的第一目标数据量时,停止执行相应的数据迁移任务。
在其中一实施例中,所述停止执行相应的数据迁移任务之后,所述方法还包括:
获取停止执行的所述数据迁移任务的历史数据;
根据所述历史数据得到停止执行的所述数据迁移任务在不停止执行的情况下完成迁移所述第一目标数据量的理论执行时长;
根据所述预设阈值和停止执行的所述数据迁移任务的所述理论执行时长之间的大小关系,调整所述预设阈值。
在其中一实施例中,所述根据所述预设阈值和停止执行的所述数据迁移任务的所述理论执行时长之间的大小关系,调整所述预设阈值,包括:
当多个停止执行的所述数据迁移任务中有第一预设比例的所述数据迁移任务的所述理论执行时长大于所述预设阈值时,将所述预设阈值调大至第一数值。
在其中一实施例中,所述根据所述预设阈值和停止执行的所述数据迁移任务的所述理论执行时长之间的大小关系,调整所述预设阈值,包括:
当多个停止执行的所述数据迁移任务中有第二预设比例的所述数据迁移任务的所述理论执行时长小于所述预设阈值时,将所述预设阈值调小至第二数值,所述第二数值小于所述第一数值。
在其中一实施例中,所述历史数据包括停止执行的所述数据迁移任务的开始时间,以及停止执行的所述数据迁移任务对应的目标数据停止更新的时间;
所述根据所述历史数据得到停止执行的所述数据迁移任务在不停止执行的情况下完成迁移所述第一目标数据量的理论执行时长,包括:
计算所述开始时间与所述停止更新的时间之间的差值,将所述差值作为所述理论执行时长。
在其中一实施例中,所述判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量之后,所述方法还包括:
当完成迁移的所述第一数据量小于相应的第一目标数据量时,继续执行完成迁移的所述第一数据量小于相应的第一目标数据量的所述数据迁移任务,计算所述数据迁移任务继续执行后所要迁移的第二目标数据量,并启动第二预设计时时长的第二定时器;
计算继续执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的第二数据量;
判断每个继续执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的所述第二数据量是否等于对应的第二目标数据量;
当完成迁移的所述第二数据量等于对应的第二目标数据量时,停止执行相应的所述数据迁移任务。
在其中一实施例中,所述第二预设计时时长小于所述第一预设计时时长。
为实现上述目的,本发明还提供一种任务状态检测装置,所述装置包括:
获取模块:用于获取多个数据迁移任务的开始时间;
扫描模块:用于扫描每个所述数据迁移任务,得到每个所述数据迁移任务对应的计算机设备的当前时间;
计算模块:用于根据每个所述数据迁移任务的所述开始时间及对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长;筛选出所述执行时长大于预设阈值的一个或多个所述数据迁移任务,计算筛选出的每个所述数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器,计算筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量;
判断模块:用于判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量;
停止模块:用于当完成迁移的所述第一数据量等于相应的第一目标数据量时,停止执行相应的数据迁移任务。
为实现上述目的,本发明还提供一种计算机设备,所述计算机设备包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如上所述的任务状态检测方法。
为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质中包括存储数据区和存储程序区,存储数据区存储根据区块链节点的使用所创建的数据,存储程序区存储有任务状态检测程序,所述任务状态检测程序被处理器执行时,实现如上所述的任务状态检测方法的步骤。
本发明提出的任务状态检测方法、装置、计算机设备及存储介质,根据数据迁移任务的开始时间和对应的计算机设备的当前时间,得到数据迁移任务的执行时长;将执行时长大于预设阈值的数据迁移任务筛选出来,计算该数据迁移任务当前所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器。计算数据迁移任务在第一定时器到达所述第一预设计时时长时完成迁移的第一数据量,当第一数据量等于第一目标数据量时,说明数据迁移任务在所述第一定时器到达所述第一预设计时时长时已完成数据迁移,此时停止该数据迁移任务,使得相应的线程或者进程空闲出来,节约调度资源。同时,针对医疗平台的数据迁移,也能够解决调度资源浪费,实现高效完成数据迁移。
附图说明
图1为本发明计算机设备较佳实施例的示意图;
图2为图1中任务状态检测装置较佳实施例的模块示意图;
图3为本发明任务状态检测方法较佳实施例的流程图;
本发明目的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参照图1所示,为本发明计算机设备1较佳实施例的示意图。
该计算机设备1包括但不限于:存储器11、处理器12、显示器13及网络接口14。所述计算机设备1通过网络接口14连接网络,获取原始数据。其中,所述网络可以是企业内部网(Intranet)、互联网(Internet)、全球移动通讯系统(Global System of Mobilecommunication,GSM)、宽带码分多址(Wideband Code Division Multiple Access,WCDMA)、4G网络、5G网络、蓝牙(Bluetooth)、Wi-Fi、通话网络等无线或有线网络。
其中,存储器11至少包括一种类型的可读存储介质,所述可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中,所述存储器11可以是所述计算机设备1的内部存储单元,例如该计算机设备1的硬盘或内存。在另一些实施例中,所述存储器11也可以是所述计算机设备1的外部存储设备,例如该计算机设备1配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(FlashCard)等。当然,所述存储器11还可以既包括所述计算机设备1的内部存储单元也包括其外部存储设备。本实施例中,存储器11通常用于存储安装于所述计算机设备1的操作系统和各类应用软件,例如任务状态检测程序10的程序代码等。此外,存储器11还可以用于暂时地存储已经输出或者将要输出的各类数据。
处理器12在一些实施例中可以是中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器12通常用于控制所述计算机设备1的总体操作,例如执行数据交互或者通信相关的控制和处理等。本实施例中,所述处理器12用于运行所述存储器11中存储的程序代码或者处理数据,例如运行任务状态检测程序10的程序代码等。
显示器13可以称为显示屏或显示单元。在一些实施例中显示器13可以是LED显示器、液晶显示器、触控式液晶显示器以及有机发光二极管(Organic Light-EmittingDiode,OLED)触摸器等。显示器13用于显示在计算机设备1中处理的信息以及用于显示可视化的工作界面,例如显示数据统计的结果。
网络接口14可选地可以包括标准的有线接口、无线接口(如WI-FI接口),该网络接口14通常用于在所述计算机设备1与其它计算机设备之间建立通信连接。
图1仅示出了具有组件11-14以及任务状态检测程序10的计算机设备1和云端数据库2,但是应理解的是,并不要求实施所有示出的组件,可以替代的实施更多或者更少的组件。
可选地,所述计算机设备1还可以包括用户接口,用户接口可以包括显示器(Display)、输入单元比如键盘(Keyboard),可选的用户接口还可以包括标准的有线接口、无线接口。可选地,在一些实施例中,显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及有机发光二极管(Organic Light-Emitting Diode,OLED)触摸器等。其中,显示器也可以适当的称为显示屏或显示单元,用于显示在计算机设备1中处理的信息以及用于显示可视化的用户界面。
该计算机设备1还可以包括射频(Radio Frequency,RF)电路、传感器和音频电路等等,在此不再赘述。
在上述实施例中,处理器12执行存储器11中存储的任务状态检测程序10时可以实现如下步骤:
获取多个数据迁移任务的开始时间;
扫描每个所述数据迁移任务,得到每个所述数据迁移任务对应的计算机设备的当前时间;
根据每个所述数据迁移任务的所述开始时间及对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长;
筛选出所述执行时长大于预设阈值的一个或多个所述数据迁移任务,计算筛选出的每个所述数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器,计算筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量;
判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量;
当完成迁移的所述第一数据量等于相应的第一目标数据量时,停止执行相应的数据迁移任务。
关于上述步骤的详细介绍,请参照下述图2关于任务状态检测装置100实施例的功能模块图以及图3关于任务状态检测方法实施例的流程图的说明。
参照图2所示,为本发明任务状态检测装置100的功能模块图。
本发明所述任务状态检测装置100可以安装于计算机设备中。根据实现的功能,所述任务状态检测装置100可以包括获取模块110、扫描模块120、计算模块130、判断模块140及停止模块150。本发所述模块也可以称之为单元,是指一种能够被计算机设备处理器所执行,并且能够完成固定功能的一系列计算机程序段,其存储在计算机设备的存储器中。
在本实施例中,关于各模块/单元的功能如下:
获取模块110,用于获取多个数据迁移任务的开始时间。
在本实施例中,获取多个正在执行的数据迁移任务的开始时间,一般来说,数据迁移任务为多个,且多个数据迁移任务在同一时间执行,因此对于在同一时间进行的多个数据迁移任务,获取每个数据迁移任务的开始时间。可以理解的是,数据迁移任务的作用为将源库的数据迁移到指定文件。
扫描模块120,用于扫描每个所述数据迁移任务,得到每个所述数据迁移任务对应的计算机设备的当前时间。
在本实施例中,获取预设周期,按预设周期扫描每个数据迁移任务,得到每个数据迁移任务对应的计算机设备的当前时间。换言之,每隔一个预设周期扫描每个数据迁移任务一次,每扫描一次就获取一次每个数据迁移任务对应的计算机设备的当前时间。
可以理解的是,预设周期设置得越短,数据迁移任务状态检测就越灵敏,但是资源开销也越多;预设周期设置得越长,数据迁移任务状态检测就越迟缓,但是资源开销就越少。预设周期可以根据经验而定,例如10分钟。
计算模块130,用于根据每个所述数据迁移任务的开始时间及对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长;筛选出所述执行时长大于预设阈值的一个或多个数据迁移任务,计算筛选出的每个所述数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器,计算筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量。
在本实施例中,获取第一预设计时时长和预设阈值。根据每个所述数据迁移任务的开始时间和对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长,进一步地,数据迁移任务的执行时长为数据迁移任务的开始时间和该数据迁移任务对应的计算机设备的当前时间之间的差值。
将所述执行时长和预设阈值进行比较,得到比较结果。比较结果包括执行时长大于预设阈值、执行时长等于预设阈值,及执行时长小于预设阈值。预设阈值可以根据经验来设置。执行时长大于预设阈值说明该数据迁移任务有较大可能处于假运行状态,即数据迁移已完成但任务仍处于运行状态。
从所述比较结果中筛选出所述执行时长大于预设阈值的一个或多个所述数据迁移任务。计算筛选出的每个数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器。换言之,在计算筛选出来的数据迁移任务所要迁移的第一目标数据量的同时,启动第一定时器。其中,第一目标数据量为数据迁移任务对应的源库在启动第一定时器时的数据量。
计算每个筛选出的所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量。即计算出刚经过第一预设计时时长的数据迁移任务迁移完成的数据量。可以理解的是,在第一定时器到达所述第一预设计时时长时完成迁移的第一数据量为,在第一定时器到达所述第一预设计时时长时数据迁移任务对应的指定文件的数据量与同一数据迁移任务对应的指定文件在启动第一定时器时的数据量之间的差值。第一定时器的第一预设计时时长可以根据经验设置,比如30分钟。
判断模块140,用于判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量。
在本实施例中,判断筛选出来的每个数据迁移任务在第一定时器到达所述第一预设计时时长时已经迁移完成的第一数据量是等于对应的所要迁移的第一目标数据量,还是小于对应的所要迁移的第一目标数据量。其中,所要迁移的第一目标数据量与在第一定时器到达所述第一预设计时时长时已经迁移完成的第一数据量对应于同一数据迁移任务。换言之,参与判断的两个数据量对应同一个筛选出来的数据迁移任务。
停止模块150,用于当完成迁移的所述第一数据量等于相应的第一目标数据量时,停止执行相应的数据迁移任务。
筛选出的所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量等于对应的所要迁移的第一目标数据量,说明该数据迁移任务在第一定时器到达所述第一预设计时时长时已经完成了数据迁移,此时,停止该数据迁移任务,即停止执行第一数据量等于对应的第一目标数据量的数据迁移任务。
值得一提的是,当筛选出的所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量小于对应的所要迁移的第一目标数据量时,继续执行完成迁移的所述第一数据量小于相应的第一目标数据量的所述数据迁移任务,计算所述数据迁移任务继续执行后所要迁移的第二目标数据量,并启动第二预设计时时长的第二定时器;计算所述继续执行的数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的第二数据量;判断每个继续执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的所述第二数据量是否等于对应的所要迁移的第二目标数据量;当继续执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的第二数据量等于对应的所要迁移的第二目标数据量时,停止执行相应的所述继续执行的数据迁移任务。
筛选出的所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的数据量小于对应的所要迁移的第一目标数据量,说明该数据迁移任务在第一定时器到达所述第一预设计时时长时未完成数据迁移,需要继续运行该数据迁移任务。此时,计算该数据迁移任务继续执行后所要迁移的第二目标数据量,即计算该继续执行的数据迁移任务需要继续迁移的数据量,并启动第二预设计时时长的第二定时器。其中,第二目标数据量为数据迁移任务对应的源库在启动第二定时器时的数据量。第二预设计时时长可以等于第一预设计时时长,也可以不等于第一预设计时时长。本实施例中,第二预设计时时长小于第一预设计时时长。数据迁移任务经过对应于第一预设计时时长的数据迁移后需要继续迁移的数据量较小,将第二预设计时时长设置为小于第一预设计时时长,可以更好地对继续执行的数据迁移任务进行监控。
计算每个停止执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的第二数据量。即计算出刚经过第二预设计时时长的数据迁移任务迁移完成的数据量。可以理解的是,第二数据量为在第二定时器到达所述第二预设计时时长时数据迁移任务对应的指定文件的数据量与同一数据迁移任务对应的指定文件在启动第二定时器时的数据量之间的差值。
当第二数据量等于对应的所要迁移的第二目标数据量时,说明该相应的所述数据迁移任务的数据迁移已全部完成,停止执行第二数据量等于对应的所要迁移的第二目标数据量的所述数据迁移任务。
换言之,当数据迁移任务的第一数据量小于对应的所要迁移的第一目标数据量时,对该数据迁移任务,启动第二定时器,以继续进行观察该数据迁移任务。以此类推,直至检测出所有筛选出来的数据迁移任务完成数据迁移。
本发明提出的任务状态检测装置,根据数据迁移任务的开始时间和对应的计算机设备的当前时间,得到数据迁移任务的执行时长;将执行时长大于预设阈值的数据迁移任务筛选出来,计算该数据迁移任务当前所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器。计算数据迁移任务在第一定时器到达所述第一预设计时时长时完成迁移的第一数据量,当第一数据量等于第一目标数据量时,说明数据迁移任务在所述第一定时器到达所述第一预设计时时长时已完成数据迁移,此时停止该数据迁移任务,使得相应的线程或者进程空闲出来,节约调度资源。
值得一提的是,任务状态检测装置还包括调整模块,调整模块用于获取停止执行的所述数据迁移任务的历史数据;根据所述历史数据,得到停止执行的所述数据迁移任务在不停止执行的情况下完成迁移所述第一目标数据量的理论执行时长;根据所述预设阈值和停止执行的所述数据迁移任务的理论执行时长的大小关系,调整所述预设阈值。
在本实施例中,获取因检测出假运行而停止执行的数据迁移任务的历史数据,历史数据包括任务名称、对应的源库、任务的开始时间、对应指定文件中目标数据停止更新的时间等。对应指定文件中目标数据停止更新的时间即为数据迁移任务实际的完成时间,实际完成时间早于第一定时器到达第一预设计时时长的时间。
根据历史数据,计算得到因检测出假运行而停止执行的数据迁移任务在不停止执行的情况下完成迁移所述第一目标数据量的理论执行时长。可以根据开始时间与停止的数据迁移任务对应目标数据停止更新的时间,得到停止的数据迁移任务的理论执行时长。具体地,计算开始时间与停止的数据迁移任务对应目标数据停止更新的时间之间的差值,作为所述理论执行时长。当然,也可利用其它历史数据来得到因检测出假运行而停止的数据迁移任务的理论执行时长。
根据所述预设阈值和停止执行的所述数据迁移任务的理论执行时长的大小关系,调整所述预设阈值。如此动态地调整预设阈值,使得预设阈值为较为合适的数值范围,在保证监控的灵敏度的基础上,有效地减少了系统开销。
进一步地,当多个停止执行的所述数据迁移任务中有第一预设比例的所述数据迁移任务的理论执行时长大于所述预设阈值时,将所述预设阈值调大至第一数值,第一数值大于调大之前的预设阈值。这样可以减轻监控任务的开销。第一预设比例可以为80%,当然,第一预设比例也可以设为其它比例,如60%、75%。预设比例小于100%。
当多个停止执行的所述数据迁移任务中有第二预设比例的所述数据迁移任务的理论执行时长小于所述预设阈值时,将所述预设阈值调小至第二数值,所述第二数值小于第一数值。如此,让整个监控更加灵敏,可以在更短的时间内识别出假运行的任务。第二预设比例可以与第一预设比例相同,也可以不同。
此外,本发明还提供一种任务状态检测方法,该方法应用于计算机设备。参照图3所示,为本发明任务状态检测方法的实施例的方法流程示意图。计算机设备1的处理器12执行存储器11中存储的任务状态检测程序10时实现任务状态检测方法的如下步骤:
步骤S10:获取多个数据迁移任务的开始时间。
在本实施例中,获取多个正在执行的数据迁移任务的开始时间,一般来说,数据迁移任务为多个,且多个数据迁移任务在同一时间执行,因此对于在同一时间进行的多个数据迁移任务,获取每个数据迁移任务的开始时间。可以理解的是,数据迁移任务的作用为将源库的数据迁移到指定文件。
步骤S20:扫描每个所述数据迁移任务,得到每个所述数据迁移任务对应的计算机设备的当前时间。
在本实施例中,获取预设周期,按预设周期扫描每个数据迁移任务,得到每个数据迁移任务对应的计算机设备的当前时间。换言之,每隔一个预设周期扫描每个数据迁移任务一次,每扫描一次就获取一次每个数据迁移任务对应的计算机设备的当前时间。
可以理解的是,预设周期设置得越短,数据迁移任务状态检测就越灵敏,但是资源开销也越多;预设周期设置得越长,数据迁移任务状态检测就越迟缓,但是资源开销就越少。预设周期可以根据经验而定,例如10分钟。
步骤S30:根据每个所述数据迁移任务的开始时间及对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长;筛选出所述执行时长大于预设阈值的一个或多个数据迁移任务,计算筛选出的每个所述数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器,计算筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量。
在本实施例中,获取第一预设计时时长和预设阈值。根据每个所述数据迁移任务的开始时间和对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长,进一步地,数据迁移任务的执行时长为数据迁移任务的开始时间和该数据迁移任务对应的计算机设备的当前时间之间的差值。
将所述执行时长和预设阈值进行比较,得到比较结果。比较结果包括执行时长大于预设阈值、执行时长等于预设阈值,及执行时长小于预设阈值。预设阈值可以根据经验来设置。执行时长大于预设阈值说明该数据迁移任务有较大可能处于假运行状态,即数据迁移已完成但任务仍处于运行状态。
从所述比较结果中筛选出所述执行时长大于预设阈值的一个或多个所述数据迁移任务。计算筛选出的每个数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器。换言之,在计算筛选出来的数据迁移任务所要迁移的第一目标数据量的同时,启动第一定时器。其中,第一目标数据量为数据迁移任务对应的源库在启动第一定时器时的数据量。
计算每个筛选出的所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量。即计算出刚经过第一预设计时时长的数据迁移任务迁移完成的数据量。可以理解的是,在第一定时器到达所述第一预设计时时长时完成迁移的第一数据量为,在第一定时器到达所述第一预设计时时长时数据迁移任务对应的指定文件的数据量与同一数据迁移任务对应的指定文件在启动第一定时器时的数据量之间的差值。第一定时器的第一预设计时时长可以根据经验设置,比如30分钟。
步骤S40:判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量。
在本实施例中,判断筛选出来的每个数据迁移任务在第一定时器到达所述第一预设计时时长时已经迁移完成的第一数据量是等于对应的所要迁移的第一目标数据量,还是小于对应的所要迁移的第一目标数据量。其中,所要迁移的第一目标数据量与在第一定时器到达所述第一预设计时时长时已经迁移完成的第一数据量对应于同一数据迁移任务。换言之,参与判断的两个数据量对应同一个筛选出来的数据迁移任务。
步骤S50:当完成迁移的所述第一数据量等于相应的第一目标数据量时,停止执行相应的数据迁移任务。
筛选出的所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量等于对应的所要迁移的第一目标数据量,说明该数据迁移任务在第一定时器到达所述第一预设计时时长时已经完成了数据迁移,此时,停止该数据迁移任务,即停止执行第一数据量等于对应的第一目标数据量的数据迁移任务。
值得一提的是,当筛选出的所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量小于对应的所要迁移的第一目标数据量时,继续执行完成迁移的所述第一数据量小于相应的第一目标数据量的所述数据迁移任务,计算所述数据迁移任务继续执行后所要迁移的第二目标数据量,并启动第二预设计时时长的第二定时器;计算所述继续执行的数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的第二数据量;判断每个继续执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的所述第二数据量是否等于对应的所要迁移的第二目标数据量;当继续执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的第二数据量等于对应的所要迁移的第二目标数据量时,停止执行相应的所述继续执行的数据迁移任务。
筛选出的所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的数据量小于对应的所要迁移的第一目标数据量,说明该数据迁移任务在第一定时器到达所述第一预设计时时长时未完成数据迁移,需要继续运行该数据迁移任务。此时,计算该数据迁移任务继续执行后所要迁移的第二目标数据量,即计算该继续执行的数据迁移任务需要继续迁移的数据量,并启动第二预设计时时长的第二定时器。其中,第二目标数据量为数据迁移任务对应的源库在启动第二定时器时的数据量。第二预设计时时长可以等于第一预设计时时长,也可以不等于第一预设计时时长。本实施例中,第二预设计时时长小于第一预设计时时长。数据迁移任务经过对应于第一预设计时时长的数据迁移后需要继续迁移的数据量较小,将第二预设计时时长设置为小于第一预设计时时长,可以更好地对继续执行的数据迁移任务进行监控。
计算每个停止执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的第二数据量。即计算出刚经过第二预设计时时长的数据迁移任务迁移完成的数据量。可以理解的是,第二数据量为在第二定时器到达所述第二预设计时时长时数据迁移任务对应的指定文件的数据量与同一数据迁移任务对应的指定文件在启动第二定时器时的数据量之间的差值。
当第二数据量等于对应的所要迁移的第二目标数据量时,说明该相应的所述数据迁移任务的数据迁移已全部完成,停止执行第二数据量等于对应的所要迁移的第二目标数据量的所述数据迁移任务。
换言之,当数据迁移任务的第一数据量小于对应的所要迁移的第一目标数据量时,对该数据迁移任务,启动第二定时器,以继续进行观察该数据迁移任务。以此类推,直至检测出所有筛选出来的数据迁移任务完成数据迁移。
本发明提出的任务状态检测方法,根据数据迁移任务的开始时间和对应的计算机设备的当前时间,得到数据迁移任务的执行时长;将执行时长大于预设阈值的数据迁移任务筛选出来,计算该数据迁移任务当前所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器。计算数据迁移任务在第一定时器到达所述第一预设计时时长时完成迁移的第一数据量,当第一数据量等于第一目标数据量时,说明数据迁移任务在所述第一定时器到达所述第一预设计时时长时已完成数据迁移,此时停止该数据迁移任务,使得相应的线程或者进程空闲出来,节约调度资源。
本实施例中,所述停止执行相应的数据迁移任务之后,任务状态检测方法还包括:获取停止执行的所述数据迁移任务的历史数据;根据所述历史数据,得到停止执行的所述数据迁移任务在不停止执行的情况下完成迁移所述第一目标数据量的理论执行时长;根据所述预设阈值和停止执行的所述数据迁移任务的理论执行时长的大小关系,调整所述预设阈值。
在本实施例中,获取因检测出假运行而停止执行的数据迁移任务的历史数据,历史数据包括任务名称、对应的源库、任务的开始时间、对应指定文件中目标数据停止更新的时间等。对应指定文件中目标数据停止更新的时间即为数据迁移任务实际的完成时间,实际完成时间早于第一定时器到达第一预设计时时长的时间。
根据历史数据,计算得到因检测出假运行而停止执行的数据迁移任务在不停止执行的情况下完成迁移所述第一目标数据量的理论执行时长。可以根据开始时间与停止的数据迁移任务对应目标数据停止更新的时间,得到停止的数据迁移任务的理论执行时长。具体地,计算开始时间与停止的数据迁移任务对应目标数据停止更新的时间之间的差值,作为所述理论执行时长。当然,也可利用其它历史数据来得到因检测出假运行而停止的数据迁移任务的理论执行时长。
根据所述预设阈值和停止执行的所述数据迁移任务的理论执行时长的大小关系,调整所述预设阈值。如此动态地调整预设阈值,使得预设阈值为较为合适的数值范围,在保证监控的灵敏度的基础上,有效地减少了系统开销。
进一步地,当多个停止执行的所述数据迁移任务中有第一预设比例的所述数据迁移任务的理论执行时长大于所述预设阈值时,将所述预设阈值调大至第一数值,第一数值大于调大之前的预设阈值。这样可以减轻监控任务的开销。第一预设比例可以为80%,当然,第一预设比例也可以设为其它比例,如60%、75%。预设比例小于100%。
当多个停止执行的所述数据迁移任务中有第二预设比例的所述数据迁移任务的理论执行时长小于所述预设阈值时,将所述预设阈值调小至第二数值,所述第二数值小于第一数值。如此,让整个监控更加灵敏,可以在更短的时间内识别出假运行的任务。第二预设比例可以与第一预设比例相同,也可以不同。
此外,本发明实施例还提出一种计算机可读存储介质,该计算机可读存储介质可以是硬盘、多媒体卡、SD卡、闪存卡、SMC、只读存储器(ROM)、可擦除可编程只读存储器(EPROM)、便携式紧致盘只读存储器(CD-ROM)、USB存储器等等中的任意一种或者几种的任意组合。所述计算机可读存储介质中包括存储数据区和存储程序区,存储数据区存储根据区块链节点的使用所创建的数据,存储程序区存储有任务状态检测程序10,所述任务状态检测程序10被处理器执行时实现如下操作:
获取多个数据迁移任务的开始时间;
扫描每个所述数据迁移任务,得到每个所述数据迁移任务对应的计算机设备的当前时间;
根据每个所述数据迁移任务的所述开始时间及对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长;
筛选出所述执行时长大于预设阈值的一个或多个所述数据迁移任务,计算筛选出的每个所述数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器,计算筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量;
判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量;
当完成迁移的所述第一数据量等于相应的第一目标数据量时,停止执行相应的数据迁移任务。
需要强调的是,本发明之计算机可读存储介质的具体实施方式与上述任务状态检测方法的具体实施方式大致相同,在此不再赘述。
在另一个实施例中,本发明所提供的任务状态检测方法,为进一步保证上述所有出现的数据的私密和安全性,上述所有数据还可以存储于一区块链的节点中。例如知识图谱、待识别文本等等,这些数据均可存储在区块链节点中。
需要说明的是,本发明所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain),本质上是一个去中心化的数据库,是一串使用密码学方法相关联产生的数据块,每个数据块中包含了一批次网络交易的信息,用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层等。
本发明之计算机可读存储介质的具体实施方式与上述任务状态检测方法的具体实施方式大致相同,在此不再赘述。
需要说明的是,上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。并且本文中的术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、装置、物品或者方法所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、装置、物品或者方法中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,电子装置,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种任务状态检测方法,应用于计算机设备,其特征在于,所述方法包括:
获取多个数据迁移任务的开始时间;
扫描每个所述数据迁移任务,得到每个所述数据迁移任务对应的计算机设备的当前时间;
根据每个所述数据迁移任务的所述开始时间及对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长;
筛选出所述执行时长大于预设阈值的一个或多个所述数据迁移任务,计算筛选出的每个所述数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器,计算筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量;
判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量;
当完成迁移的所述第一数据量等于相应的第一目标数据量时,停止执行相应的数据迁移任务。
2.如权利要求1所述的任务状态检测方法,其特征在于,所述停止执行相应的数据迁移任务之后,所述方法还包括:
获取停止执行的所述数据迁移任务的历史数据;
根据所述历史数据得到停止执行的所述数据迁移任务在不停止执行的情况下完成迁移所述第一目标数据量的理论执行时长;
根据所述预设阈值和停止执行的所述数据迁移任务的所述理论执行时长之间的大小关系,调整所述预设阈值。
3.如权利要求2所述的任务状态检测方法,其特征在于,所述根据所述预设阈值和停止执行的所述数据迁移任务的所述理论执行时长之间的大小关系,调整所述预设阈值,包括:
当多个停止执行的所述数据迁移任务中有第一预设比例的所述数据迁移任务的所述理论执行时长大于所述预设阈值时,将所述预设阈值调大至第一数值。
4.如权利要求2所述的任务状态检测方法,其特征在于,所述根据所述预设阈值和停止执行的所述数据迁移任务的所述理论执行时长之间的大小关系,调整所述预设阈值,包括:
当多个停止执行的所述数据迁移任务中有第二预设比例的所述数据迁移任务的所述理论执行时长小于所述预设阈值时,将所述预设阈值调小至第二数值,所述第二数值小于所述第一数值。
5.如权利要求2所述的任务状态检测方法,其特征在于,所述历史数据包括停止执行的所述数据迁移任务的开始时间,以及停止执行的所述数据迁移任务对应的目标数据停止更新的时间;
所述根据所述历史数据得到停止执行的所述数据迁移任务在不停止执行的情况下完成迁移所述第一目标数据量的理论执行时长,包括:
计算所述开始时间与所述停止更新的时间之间的差值,将所述差值作为所述理论执行时长。
6.如权利要求1所述的任务状态检测方法,其特征在于,所述判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量之后,所述方法还包括:
当完成迁移的所述第一数据量小于相应的第一目标数据量时,继续执行完成迁移的所述第一数据量小于相应的第一目标数据量的所述数据迁移任务,计算所述数据迁移任务继续执行后所要迁移的第二目标数据量,并启动第二预设计时时长的第二定时器;
计算继续执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的第二数据量;
判断每个继续执行的所述数据迁移任务在所述第二定时器到达所述第二预设计时时长时完成迁移的所述第二数据量是否等于对应的第二目标数据量;
当完成迁移的所述第二数据量等于对应的第二目标数据量时,停止执行相应的所述数据迁移任务。
7.如权利要求6所述的任务状态检测方法,其特征在于,所述第二预设计时时长小于所述第一预设计时时长。
8.一种任务状态检测装置,其特征在于,所述装置包括:
获取模块:用于获取多个数据迁移任务的开始时间;
扫描模块:用于扫描每个所述数据迁移任务,得到每个所述数据迁移任务对应的计算机设备的当前时间;
计算模块:用于根据每个所述数据迁移任务的所述开始时间及对应的所述计算机设备的当前时间,计算得到每个所述数据迁移任务的执行时长;筛选出所述执行时长大于预设阈值的一个或多个所述数据迁移任务,计算筛选出的每个所述数据迁移任务所要迁移的第一目标数据量,并启动第一预设计时时长的第一定时器,计算筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的第一数据量;
判断模块:用于判断筛选出的每个所述数据迁移任务在所述第一定时器到达所述第一预设计时时长时完成迁移的所述第一数据量是否等于相应的第一目标数据量;
停止模块:用于当完成迁移的所述第一数据量等于相应的第一目标数据量时,停止执行相应的数据迁移任务。
9.一种计算机设备,其特征在于,所述计算机设备包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如权利要求1至7中任一项所述的任务状态检测方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中包括存储数据区和存储程序区,存储数据区存储根据区块链节点的使用所创建的数据,存储程序区存储有任务状态检测程序,所述任务状态检测程序被处理器执行时,实现如权利要求1至7中任一项所述的任务状态检测方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011008628.8A CN112131179B (zh) | 2020-09-23 | 2020-09-23 | 任务状态检测方法、装置、计算机设备及存储介质 |
PCT/CN2020/125471 WO2021189857A1 (zh) | 2020-09-23 | 2020-10-30 | 任务状态检测方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011008628.8A CN112131179B (zh) | 2020-09-23 | 2020-09-23 | 任务状态检测方法、装置、计算机设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112131179A true CN112131179A (zh) | 2020-12-25 |
CN112131179B CN112131179B (zh) | 2023-11-21 |
Family
ID=73842804
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011008628.8A Active CN112131179B (zh) | 2020-09-23 | 2020-09-23 | 任务状态检测方法、装置、计算机设备及存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN112131179B (zh) |
WO (1) | WO2021189857A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113641484A (zh) * | 2021-10-13 | 2021-11-12 | 浙江口碑网络技术有限公司 | 任务定时调度方法、装置、设备及计算机可读存储介质 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104581822A (zh) * | 2013-10-14 | 2015-04-29 | 中国移动通信集团公司 | 用户设备的业务状态迁移的方法、系统及装置 |
CN107346262A (zh) * | 2017-06-06 | 2017-11-14 | 华为技术有限公司 | 一种任务迁移的方法及控制器 |
CN107391031A (zh) * | 2017-06-27 | 2017-11-24 | 北京邮电大学 | 一种基于混合存储的计算系统中的数据迁移方法及装置 |
CN107679200A (zh) * | 2017-10-11 | 2018-02-09 | 郑州云海信息技术有限公司 | 一种在线数据迁移方法及装置 |
CN109460188A (zh) * | 2018-11-13 | 2019-03-12 | 郑州云海信息技术有限公司 | 一种数据迁移方法、系统、设备及计算机可读存储介质 |
WO2019095576A1 (zh) * | 2017-11-16 | 2019-05-23 | 平安科技(深圳)有限公司 | 数据迁移方法、装置、计算机设备和存储介质 |
US20190205429A1 (en) * | 2018-01-03 | 2019-07-04 | Salesforce.Com, Inc. | Data validation for data record migrations |
CN110019372A (zh) * | 2018-08-21 | 2019-07-16 | 平安科技(深圳)有限公司 | 数据监控方法、装置、服务器及存储介质 |
WO2019228575A2 (en) * | 2019-09-12 | 2019-12-05 | Alibaba Group Holding Limited | Log-structured storage systems |
CN110555014A (zh) * | 2019-09-06 | 2019-12-10 | 中国联合网络通信集团有限公司 | 一种数据迁移方法和系统、电子设备、存储介质 |
CN110895520A (zh) * | 2018-09-12 | 2020-03-20 | 华为技术有限公司 | 一种文件迁移方法、相关装置及设备 |
CN111008188A (zh) * | 2019-10-29 | 2020-04-14 | 平安科技(深圳)有限公司 | 数据迁移方法、装置、计算机设备和存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10747585B2 (en) * | 2017-05-26 | 2020-08-18 | Vmware Inc. | Methods and apparatus to perform data migration in a distributed environment |
CN110096332A (zh) * | 2018-01-31 | 2019-08-06 | 中国科学院计算技术研究所 | 一种面向基站任务的迁移方法和系统 |
CN111338773B (zh) * | 2020-02-21 | 2023-06-20 | 华云数据有限公司 | 一种分布式定时任务调度方法、调度系统及服务器集群 |
CN111338774B (zh) * | 2020-02-21 | 2023-09-19 | 华云数据有限公司 | 分布式定时任务调度系统及计算装置 |
-
2020
- 2020-09-23 CN CN202011008628.8A patent/CN112131179B/zh active Active
- 2020-10-30 WO PCT/CN2020/125471 patent/WO2021189857A1/zh active Application Filing
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104581822A (zh) * | 2013-10-14 | 2015-04-29 | 中国移动通信集团公司 | 用户设备的业务状态迁移的方法、系统及装置 |
CN107346262A (zh) * | 2017-06-06 | 2017-11-14 | 华为技术有限公司 | 一种任务迁移的方法及控制器 |
CN107391031A (zh) * | 2017-06-27 | 2017-11-24 | 北京邮电大学 | 一种基于混合存储的计算系统中的数据迁移方法及装置 |
CN107679200A (zh) * | 2017-10-11 | 2018-02-09 | 郑州云海信息技术有限公司 | 一种在线数据迁移方法及装置 |
WO2019095576A1 (zh) * | 2017-11-16 | 2019-05-23 | 平安科技(深圳)有限公司 | 数据迁移方法、装置、计算机设备和存储介质 |
US20190205429A1 (en) * | 2018-01-03 | 2019-07-04 | Salesforce.Com, Inc. | Data validation for data record migrations |
CN110019372A (zh) * | 2018-08-21 | 2019-07-16 | 平安科技(深圳)有限公司 | 数据监控方法、装置、服务器及存储介质 |
CN110895520A (zh) * | 2018-09-12 | 2020-03-20 | 华为技术有限公司 | 一种文件迁移方法、相关装置及设备 |
CN109460188A (zh) * | 2018-11-13 | 2019-03-12 | 郑州云海信息技术有限公司 | 一种数据迁移方法、系统、设备及计算机可读存储介质 |
CN110555014A (zh) * | 2019-09-06 | 2019-12-10 | 中国联合网络通信集团有限公司 | 一种数据迁移方法和系统、电子设备、存储介质 |
WO2019228575A2 (en) * | 2019-09-12 | 2019-12-05 | Alibaba Group Holding Limited | Log-structured storage systems |
CN111008188A (zh) * | 2019-10-29 | 2020-04-14 | 平安科技(深圳)有限公司 | 数据迁移方法、装置、计算机设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112131179B (zh) | 2023-11-21 |
WO2021189857A1 (zh) | 2021-09-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109857592B (zh) | 数据恢复控制方法、服务器及存储介质 | |
CN109522923B (zh) | 客户地址聚合方法、装置及计算机可读存储介质 | |
US11368366B2 (en) | Group policy object update compliance and synchronization | |
CN108255735B (zh) | 关联环境测试方法、电子装置及计算机可读存储介质 | |
CN112131179B (zh) | 任务状态检测方法、装置、计算机设备及存储介质 | |
CN112214756A (zh) | 一种消费机的权限管理系统、方法及存储介质 | |
CN111813518A (zh) | 机器人预警方法、装置、计算机设备及存储介质 | |
CN105824709A (zh) | 一种临界区访问方法及装置 | |
CN113688602A (zh) | 一种任务处理方法以及装置 | |
CN104951247A (zh) | 信息处理装置以及存储器管理方法 | |
CN110569114B (zh) | 一种业务处理方法、装置、设备及存储介质 | |
CN112749164A (zh) | 数据质量分析方法、装置及电子设备 | |
CN112083925A (zh) | 基于h5页面开发的数据获取方法、装置、设备及存储介质 | |
CN109491771B (zh) | 基于系统性能优化的任务处理方法及相关设备 | |
CN113590298B (zh) | 一种资源调度方法、装置、服务器及存储介质 | |
CN115421859A (zh) | 配置文件的动态加载方法、装置、计算机设备及存储介质 | |
CN109376027A (zh) | 一种异常销毁进程的处理方法及终端 | |
CN113419949B (zh) | 数据处理的异常检测方法、装置、设备及存储介质 | |
FI129933B (en) | Management of communication network prediction models | |
CN107728769B (zh) | 后台应用管理方法、装置及计算机可读存储介质 | |
CN113065055A (zh) | 新闻资讯抓取方法、装置、电子设备及存储介质 | |
CN112783001A (zh) | 水质处理方法、装置、服务器及存储介质 | |
CN112667463A (zh) | 一种应用系统基线状态监控方法及装置 | |
CN111258724A (zh) | 一种分布式系统的数据处理方法、装置、设备和存储介质 | |
CN111950040A (zh) | 终端设备的环境感知方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |