CN113312419A - 一种用于订阅服务的定时调度方法和系统 - Google Patents
一种用于订阅服务的定时调度方法和系统 Download PDFInfo
- Publication number
- CN113312419A CN113312419A CN202110608907.6A CN202110608907A CN113312419A CN 113312419 A CN113312419 A CN 113312419A CN 202110608907 A CN202110608907 A CN 202110608907A CN 113312419 A CN113312419 A CN 113312419A
- Authority
- CN
- China
- Prior art keywords
- expression value
- cron expression
- recommended
- scheduling
- cron
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 230000014509 gene expression Effects 0.000 claims abstract description 230
- 230000002159 abnormal effect Effects 0.000 claims description 6
- 230000007246 mechanism Effects 0.000 abstract description 13
- 238000012423 maintenance Methods 0.000 abstract description 9
- 238000004519 manufacturing process Methods 0.000 abstract description 9
- 230000003111 delayed effect Effects 0.000 abstract description 6
- 230000009286 beneficial effect Effects 0.000 description 8
- 230000000903 blocking effect Effects 0.000 description 8
- 230000006978 adaptation Effects 0.000 description 4
- 235000008113 selfheal Nutrition 0.000 description 4
- 238000013480 data collection Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种用于订阅服务的定时调度方法和系统,涉及服务调度领域。该方法包括:订阅服务,并设置CRON表达式值、第一推荐CRON表达式值、第二推荐CRON表达式值和第三推荐CRON表达式值的调度时间点;根据CRON表达式值定时调度数据,ETL作业数据准备到位,则调度完成;当ETL作业数据准备到位未准备到位,将CRON表达式值更改为第一推荐CRON表达式值,根据第一推荐CRON表达式值定时调度数据,ETL作业数据准备到位,CRON表达式值复位,则调度结束。本方案能够根据etl数据采集作业完成情况,自动阻断、延后作业调度执行,并能够自愈原有作业调度机制,整个过程减少生产中故障的发生,降低运维工作量。
Description
技术领域
本发明涉及服务调度领域,尤其涉及一种用于订阅服务的定时调度方法和系统。
背景技术
当前置数据采集的ETL作业任务未完成或者源头数据采集有问题的ETL作业虚假显示作业采集成功的情况下,会导致数据服务开放平台推送的数据有误:1.数据采集业务表为空,数据服务开放平台未推送。2.数据采集业务表不为空,但存在脏数据或数据不完整。
发明内容
本发明所要解决的技术问题是针对现有技术的不足,提供一种用于订阅服务的定时调度方法和系统。
本发明解决上述技术问题的技术方案如下:
一种用于订阅服务的定时调度方法,包括:
S1,订阅服务,并设置CRON表达式值和第一推荐CRON表达式值的调度时间点;
S2,根据CRON表达式值定时调度数据,ETL作业数据准备到位,则调度完成;
S3,当所述ETL作业数据准备到位未准备到位,将CRON表达式值更改为第一推荐CRON表达式值,根据第一推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束。
本发明的有益效果是:通过根据CRON表达式值定时调度数据,判断ETL作业数据是否到位,来判断是否自动阻断,延后作业调度,本方案能够根据etl数据采集作业完成情况,自动阻断、延后作业调度执行,并能够自愈原有作业调度机制,整个过程减少生产中故障的发生,降低运维工作量。
进一步地,还包括:
S4,设置第二推荐CRON表达式值的调度时间点;当所述ETL作业数据准备到位未准备到位,将第一推荐CRON表达式值更改为第二推荐CRON表达式值,根据第二推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束。
进一步地,还包括:
S5,设置第三推荐CRON表达式值的调度时间点;当所述ETL作业数据准备到位未准备到位,将第二推荐CRON表达式值更改为第三推荐CRON表达式值,根据所述第三推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束;
S6,当所述ETL作业数据准备到位未准备到位,记录为异常访问日志,则调度结束。
采用上述进一步方案的有益效果是:通过本方案的调度方法,平台可以具备阻断和自愈机制,可以对所有正在推送的能够阻断以及触发自愈,不用每个客户群更改cron表达式进行重新推送,以减少生产中故障的发生和运维工作量。
进一步地,所述第一推荐CRON表达式值相对于所述CRON表达式值调度时间延后;
所述第二推荐CRON表达式值相对于所述第一推荐CRON表达式值调度时间延后;
所述第三推荐CRON表达式值相对于所述第二推荐CRON表达式值调度时间延后;
所述第三推荐CRON表达式值在发起下一轮的所述CRON表达式值的调度时间之前。
采用上述进一步方案的有益效果是:通过各CRON表达式值的设定,实现自动阻断和延时自愈。
进一步地,所述S1之前还包括:在服务订阅表中增加第一推荐CRON表达式值、第二推荐CRON表达式值和第三推荐CRON表达式值的字段。
采用上述进一步方案的有益效果是:通过表扩展字段,来实现改造触发机制。
本发明解决上述技术问题的另一种技术方案如下:
一种用于订阅服务的定时调度系统,包括:服务订阅时间设置模块、调度模块和延时调度模块;
所述服务订阅时间设置模块用于订阅服务,并设置CRON表达式值和第一推荐CRON表达式值的调度时间点;
所述调度模块用于根据CRON表达式值定时调度数据,ETL作业数据准备到位,则调度完成;
所述延时调度模块用于当所述ETL作业数据准备到位未准备到位,将CRON表达式值更改为第一推荐CRON表达式值,根据第一推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束。
本发明的有益效果是:通过根据CRON表达式值定时调度数据,判断ETL作业数据是否到位,来判断是否自动阻断,延后作业调度,本方案能够根据etl数据采集作业完成情况,自动阻断、延后作业调度执行,并能够自愈原有作业调度机制,整个过程减少生产中故障的发生,降低运维工作量。
进一步地,还包括:所述服务订阅时间设置模块还用于设置第二推荐CRON表达式值的调度时间点;
第二延时调度模块,用于当所述ETL作业数据准备到位未准备到位,将第一推荐CRON表达式值更改为第二推荐CRON表达式值,根据第二推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束。
进一步地,还包括:所述服务订阅时间设置模块还用于设置第三推荐CRON表达式值的调度时间点;
第三延时调度模块,用于当所述ETL作业数据准备到位未准备到位,将第二推荐CRON表达式值更改为第三推荐CRON表达式值,根据所述第三推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束;当所述ETL作业数据准备到位未准备到位,记录为异常访问日志,则调度结束。
采用上述进一步方案的有益效果是:通过本方案的调度方法,平台可以具备阻断和自愈机制,可以对所有正在推送的能够阻断以及触发自愈,不用每个客户群更改cron表达式进行重新推送,以减少生产中故障的发生和运维工作量。
进一步地,所述第一推荐CRON表达式值相对于所述CRON表达式值调度时间延后;
所述第二推荐CRON表达式值相对于所述第一推荐CRON表达式值调度时间延后;
所述第三推荐CRON表达式值相对于所述第二推荐CRON表达式值调度时间延后;
所述第三推荐CRON表达式值在发起下一轮的所述CRON表达式值的调度时间之前。
采用上述进一步方案的有益效果是:通过各CRON表达式值的设定,实现自动阻断和延时自愈。
进一步地,还包括:字段扩展模块,用于在服务订阅表中增加第一推荐CRON表达式值、第二推荐CRON表达式值和第三推荐CRON表达式值的字段。
采用上述进一步方案的有益效果是:通过表扩展字段,来实现改造触发机制。
本发明附加的方面的优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明实践了解到。
附图说明
图1为本发明的实施例提供的一种用于订阅服务的定时调度方法的流程示意图;
图2为本发明的实施例提供的一种用于订阅服务的定时调度系统的结构框图;
图3为本发明的其他实施例提供的定时调度方法的流程示意图;
图4为本发明的其他实施例提供的多重延时调度的流程示意图。
具体实施方式
以下结合附图对本发明的原理和特征进行描述,所举实施例只用于解释本发明,并非用于限定本发明的范围。
如图1所示,为本发明实施例提供的一种用于订阅服务的定时调度方法,包括:S1,订阅服务,并设置CRON表达式值和第一推荐CRON表达式值的调度时间点;
S2,根据CRON表达式值定时调度数据,ETL作业数据准备到位,则调度完成;其中,ETL(Extract-Transform-Load,数据采集),用来描述将数据从来源端经过抽取(Extract)、转换(Transform)、加载(Load)至到目的端(一般指的是数据仓库)的过程。
S3,当ETL作业数据准备到位未准备到位,将CRON表达式值更改为第一推荐CRON表达式值,根据第一推荐CRON表达式值定时调度数据,ETL作业数据准备到位,CRON表达式值复位,则调度结束。
优选地,在某一实施例中,还可以包括:在订阅表中增加字段四个字段,标准CRON表达式值、推荐CRON表达式值1、推荐CRON表达式值2、推荐CRON表达式值3;
各个CRON表达式值设定:初始化正常CRON表达式与标准CRON表达式值相同,推荐CRON表达式值1相对于标准CRON表达式值有所延后,推荐CRON表达式值2相对于推荐CRON表达式值1有所延后,推荐CRON表达式值3相对于推荐CRON表达式值2有所延后,推荐CRON表达式值3必须在第二次发起的标准CRON表达式值之前;
需要说明的是,正常CRON表达式可以是CRON表达式值;推荐CRON表达式值1可以是第一推荐CRON表达式值、推荐CRON表达式值2可以是第二推荐CRON表达式值、推荐CRON表达式值3可以是第三推荐CRON表达式值。
在某一实施例中,如图3所示,一种用于订阅服务的定时调度方法可以包括:服务订阅,其中,服务订阅表如表1所示;按照正常的CRON表达式如果发现数据未到位,当前为标准CRON表达式值,更改为延迟CRON表达式1;
延迟CRON表达式1时间触发,如数据到位,执行后台作业后,CRON表达式值更正为标准CRON表达式值;如数据未到位,当前为延迟CRON表达式1,更改为延迟CRON表达式2;
延迟CRON表达式2时间触发,如数据到位,执行后台作业后,CRON表达式值更正为标准CRON表达式值;如数据未到位,当前为延迟CRON表达式2,更改为延迟CRON表达式3;
延迟CRON表达式3时间触发,如数据到位,执行后台作业后,CRON表达式值更正为标准CRON表达式值;如数据未到位,当前为延迟CRON表达式3,CRON表达式值更正为标准CRON表达式值,即本次不执行并记录日志,等到下一个正常周期再执行。
表1
其中,CRON表达式可以是一个字符串,字符串可以5或6个空格隔开,分为6或7个域,每一个域代表一个含义,CRON有如下两种语法格式:(1)Seconds Minutes HoursDayofMonth Month DayofWeek Year(2)Seconds Minutes Hours DayofMonth MonthDayofWeek;
CRON表达式值的结构可以为:CRON从左到右:秒、分、小时、月份中的日期、月份、星期中的日期和年份等等,各个字段可以用空格隔开。
各个字段的含义,可以如表2所示:
表2
在某一实施例中,每一个域都可以使用数字,但还可以出现如下特殊字符,它们的含义是:
*:表示匹配该域任意值。假如在Minutes域使用*,即表示每分钟都会触发事件。
?:只能用在DayofMonth和DayofWeek两个域。它也匹配域的任意值,但实际不会。因为DayofMonth和DayofWeek会相互影响。例如想在每月的20日触发调度,不管20日到底是星期几,则只能使用如下写法:13 13 15 20*?,其中最后一位只能用?,而不能使用*,如果使用*表示不管星期几都会触发,实际上并不是这样。
-:表示范围。例如在Minutes域使用5-20,表示从5分到20分每分钟触发一次。
/:表示起始时间开始触发,然后每隔固定时间触发一次。例如在Minutes域使用5/20,则意味着5分钟触发一次,而25,45等分别触发一次。
,:表示列出枚举值。例如:在Minutes域使用5,20,则意味着在5和20分每分钟触发一次。
L:表示最后,只能出现在DayofWeek和DayofMonth域。如果在DayofWeek域使用5L,意味着在最后的一个星期四触发。
W:表示有效工作日(周一到周五),只能出现在DayofMonth域,系统将在离指定日期的最近的有效工作日触发事件。例如:在DayofMonth使用5W,如果5日是星期六,则将在最近的工作日:星期五,即4日触发。如果5日是星期天,则在6日(周一)触发;如果5日在星期一到星期五中的一天,则就在5日触发。另外一点,W的最近寻找不会跨过月份。
LW:这两个字符可以连用,表示在某个月最后一个工作日,即最后一个星期五。
#:用于确定每个月第几个星期几,只能出现在DayofMonth域。例如在4#2,表示某月的第二个星期三。
通过根据CRON表达式值定时调度数据,判断ETL作业数据是否到位,来判断是否自动阻断,延后作业调度,本方案能够根据etl数据采集作业完成情况,自动阻断、延后作业调度执行,并能够自愈原有作业调度机制,整个过程减少生产中故障的发生,降低运维工作量。
优选地,在上述任意实施例中,还包括:
S4,设置第二推荐CRON表达式值的调度时间点;当ETL作业数据准备到位未准备到位,将第一推荐CRON表达式值更改为第二推荐CRON表达式值,根据第二推荐CRON表达式值定时调度数据,ETL作业数据准备到位,CRON表达式值复位,则调度结束。
优选地,在上述任意实施例中,如图4所示,还包括:
S5,设置第三推荐CRON表达式值的调度时间点;当ETL作业数据准备到位未准备到位,将第二推荐CRON表达式值更改为第三推荐CRON表达式值,根据第三推荐CRON表达式值定时调度数据,ETL作业数据准备到位,CRON表达式值复位,则调度结束;
S6,当ETL作业数据准备到位未准备到位,记录为异常访问日志,则调度结束。
通过本方案的调度方法,平台可以具备阻断和自愈机制,可以对所有正在推送的能够阻断以及触发自愈,不用每个客户群更改cron表达式进行重新推送,以减少生产中故障的发生和运维工作量。
优选地,在上述任意实施例中,第一推荐CRON表达式值相对于CRON表达式值调度时间延后;
第二推荐CRON表达式值相对于第一推荐CRON表达式值调度时间延后;
第三推荐CRON表达式值相对于第二推荐CRON表达式值调度时间延后;
第三推荐CRON表达式值在发起下一轮的CRON表达式值的调度时间之前。
通过各CRON表达式值的设定,实现自动阻断和延时自愈。
优选地,在上述任意实施例中,S1之前还包括:在服务订阅表中增加第一推荐CRON表达式值、第二推荐CRON表达式值和第三推荐CRON表达式值的字段。
通过表扩展字段,来实现改造触发机制。
在某一实施例中,如图2所示,一种用于订阅服务的定时调度系统,包括:服务订阅时间设置模块11、调度模块12和延时调度模块13;
服务订阅时间设置模块11用于订阅服务,并设置CRON表达式值和第一推荐CRON表达式值的调度时间点;
调度模块12用于根据CRON表达式值定时调度数据,ETL作业数据准备到位,则调度完成;
延时调度模块13用于当ETL作业数据准备到位未准备到位,将CRON表达式值更改为第一推荐CRON表达式值,根据第一推荐CRON表达式值定时调度数据,ETL作业数据准备到位,CRON表达式值复位,则调度结束。
通过根据CRON表达式值定时调度数据,判断ETL作业数据是否到位,来判断是否自动阻断,延后作业调度,本方案能够根据etl数据采集作业完成情况,自动阻断、延后作业调度执行,并能够自愈原有作业调度机制,整个过程减少生产中故障的发生,降低运维工作量。
优选地,在上述任意实施例中,还包括:服务订阅时间设置模块还用于设置第二推荐CRON表达式值的调度时间点;
第二延时调度模块,用于当ETL作业数据准备到位未准备到位,将第一推荐CRON表达式值更改为第二推荐CRON表达式值,根据第二推荐CRON表达式值定时调度数据,ETL作业数据准备到位,CRON表达式值复位,则调度结束。
优选地,在上述任意实施例中,还包括:所述服务订阅时间设置模块还用于设置第三推荐CRON表达式值的调度时间点;
第三延时调度模块,用于当ETL作业数据准备到位未准备到位,将第二推荐CRON表达式值更改为第三推荐CRON表达式值,根据第三推荐CRON表达式值定时调度数据,ETL作业数据准备到位,CRON表达式值复位,则调度结束;当ETL作业数据准备到位未准备到位,记录为异常访问日志,则调度结束。
通过本方案的调度方法,平台可以具备阻断和自愈机制,可以对所有正在推送的能够阻断以及触发自愈,不用每个客户群更改cron表达式进行重新推送,以减少生产中故障的发生和运维工作量。
优选地,在上述任意实施例中,第一推荐CRON表达式值相对于CRON表达式值调度时间延后;
第二推荐CRON表达式值相对于第一推荐CRON表达式值调度时间延后;
第三推荐CRON表达式值相对于第二推荐CRON表达式值调度时间延后;
第三推荐CRON表达式值在发起下一轮的CRON表达式值的调度时间之前。
通过各CRON表达式值的设定,实现自动阻断和延时自愈。
优选地,在上述任意实施例中,还包括:字段扩展模块,用于在服务订阅表中增加第一推荐CRON表达式值、第二推荐CRON表达式值和第三推荐CRON表达式值的字段。
通过表扩展字段,来实现改造触发机制。
可以理解,在一些实施例中,可以包含如上述各实施例中的部分或全部可选实施方式。
需要说明的是,上述各实施例是与在先方法实施例对应的产品实施例,对于产品实施例中各可选实施方式的说明可以参考上述各方法实施例中的对应说明,在此不再赘述。
读者应理解,在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种用于订阅服务的定时调度方法,其特征在于,包括:
S1,订阅服务,并设置CRON表达式值和第一推荐CRON表达式值的调度时间点;
S2,根据CRON表达式值定时调度数据,ETL作业数据准备到位,则调度完成;
S3,当所述ETL作业数据准备到位未准备到位,将所述CRON表达式值更改为第一推荐CRON表达式值,根据第一推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束。
2.根据权利要求1所述的一种订阅服务定时调度的方法,其特征在于,还包括:
S4,设置第二推荐CRON表达式值的调度时间点;当所述ETL作业数据准备到位未准备到位,将第一推荐CRON表达式值更改为所述第二推荐CRON表达式值,根据所述第二推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束。
3.根据权利要求2所述的一种用于订阅服务的定时调度方法,其特征在于,还包括:
S5,设置第三推荐CRON表达式值的调度时间点;当所述ETL作业数据准备到位未准备到位,将所述第二推荐CRON表达式值更改为所述第三推荐CRON表达式值,根据所述第三推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束;
S6,当所述ETL作业数据准备到位未准备到位,记录为异常访问日志,则调度结束。
4.根据权利要求1-3任一项所述的一种用于订阅服务的定时调度方法,其特征在于,所述第一推荐CRON表达式值相对于所述CRON表达式值调度时间延后;
所述第二推荐CRON表达式值相对于所述第一推荐CRON表达式值调度时间延后;
所述第三推荐CRON表达式值相对于所述第二推荐CRON表达式值调度时间延后;
所述第三推荐CRON表达式值在发起下一轮的所述CRON表达式值的调度时间之前。
5.根据权利要求1所述的一种用于订阅服务的定时调度方法,其特征在于,所述S1之前还包括:在服务订阅表中增加第一推荐CRON表达式值、第二推荐CRON表达式值和第三推荐CRON表达式值的字段。
6.一种用于订阅服务的定时调度系统,其特征在于,包括:服务订阅时间设置模块、调度模块和延时调度模块;
所述服务订阅时间设置模块用于订阅服务,并设置CRON表达式值和第一推荐CRON表达式值的调度时间点;
所述调度模块用于根据CRON表达式值定时调度数据,ETL作业数据准备到位,则调度完成;
所述延时调度模块用于当所述ETL作业数据准备到位未准备到位,将CRON表达式值更改为第一推荐CRON表达式值,根据第一推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束。
7.根据权利要求6所述的一种用于订阅服务的定时调度系统,其特征在于,还包括:
所述服务订阅时间设置模块还用于设置第二推荐CRON表达式值的调度时间点;
第二延时调度模块,用于当所述ETL作业数据准备到位未准备到位,将第一推荐CRON表达式值更改为所述第二推荐CRON表达式值,根据所述第二推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束。
8.根据权利要求7所述的一种用于订阅服务的定时调度系统,其特征在于,还包括:
所述服务订阅时间设置模块还用于设置第三推荐CRON表达式值的调度时间点;
第三延时调度模块,用于当所述ETL作业数据准备到位未准备到位,将第二推荐CRON表达式值更改为所述第三推荐CRON表达式值,根据所述第三推荐CRON表达式值定时调度数据,ETL作业数据准备到位,所述CRON表达式值复位,则调度结束;当所述ETL作业数据准备到位未准备到位,记录为异常访问日志,则调度结束。
9.根据权利要求6-8任一所述的一种用于订阅服务的定时调度系统,其特征在于,所述第一推荐CRON表达式值相对于所述CRON表达式值调度时间延后;
所述第二推荐CRON表达式值相对于所述第一推荐CRON表达式值调度时间延后;
所述第三推荐CRON表达式值相对于所述第二推荐CRON表达式值调度时间延后;
所述第三推荐CRON表达式值在发起下一轮的所述CRON表达式值的调度时间之前。
10.根据权利要求6所述的一种用于订阅服务的定时调度系统,其特征在于,还包括:字段扩展模块,用于在服务订阅表中增加第一推荐CRON表达式值、第二推荐CRON表达式值和第三推荐CRON表达式值的字段。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110608907.6A CN113312419B (zh) | 2021-06-01 | 2021-06-01 | 一种用于订阅服务的定时调度方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110608907.6A CN113312419B (zh) | 2021-06-01 | 2021-06-01 | 一种用于订阅服务的定时调度方法和系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113312419A true CN113312419A (zh) | 2021-08-27 |
CN113312419B CN113312419B (zh) | 2024-07-12 |
Family
ID=77376814
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110608907.6A Active CN113312419B (zh) | 2021-06-01 | 2021-06-01 | 一种用于订阅服务的定时调度方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113312419B (zh) |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6032172A (en) * | 1997-05-29 | 2000-02-29 | Sun Microsystems, Inc. | Distributed computer process scheduling mechanism |
CN101887381A (zh) * | 2010-06-22 | 2010-11-17 | 北京伟库电子商务科技有限公司 | 基于Quartz框架的配置定时任务的方法和装置 |
EP2544139A2 (en) * | 2011-07-06 | 2013-01-09 | Samsung Electronics Co., Ltd. | Apparatus and method for providing advertisement service in mobile communication system |
CN104954469A (zh) * | 2015-06-19 | 2015-09-30 | 长沙廖氏软件科技有限公司 | 一种异构系统信息交换方法 |
CN105511958A (zh) * | 2014-10-11 | 2016-04-20 | 阿里巴巴集团控股有限公司 | 任务的调度方法及装置 |
CN106503217A (zh) * | 2016-11-03 | 2017-03-15 | 用友网络科技股份有限公司 | 基于业务驱动的数据交互装置及方法 |
CN106817689A (zh) * | 2017-01-22 | 2017-06-09 | 兴唐通信科技有限公司 | 一种高可靠性的数据订阅及发布方法及系统 |
CN106874090A (zh) * | 2017-01-23 | 2017-06-20 | 北京思特奇信息技术股份有限公司 | 基于云系统的作业调度方法和系统 |
CN108132833A (zh) * | 2017-12-08 | 2018-06-08 | 广州视源电子科技股份有限公司 | 一种基于zookeeper技术的分布式定时任务调度方法和装置 |
US10037508B1 (en) * | 2017-05-31 | 2018-07-31 | AirTrace, LLC | System for calculating whether time-crucial shipment is located according to expectation |
CN109241156A (zh) * | 2018-07-31 | 2019-01-18 | 安徽四创电子股份有限公司 | 基于etl工具从关系型数据库向非关系型数据库更新的方法 |
CN109814841A (zh) * | 2018-12-19 | 2019-05-28 | 大唐软件技术股份有限公司 | 一种资源信息采集方法及装置 |
CN111367521A (zh) * | 2020-02-21 | 2020-07-03 | 国铁吉讯科技有限公司 | 消息发送方法及装置、消息接收方法及装置 |
CN112783620A (zh) * | 2021-01-05 | 2021-05-11 | 银盛支付服务股份有限公司 | 一种定时任务调度的优化方法、计算机设备及存储介质 |
-
2021
- 2021-06-01 CN CN202110608907.6A patent/CN113312419B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6032172A (en) * | 1997-05-29 | 2000-02-29 | Sun Microsystems, Inc. | Distributed computer process scheduling mechanism |
CN101887381A (zh) * | 2010-06-22 | 2010-11-17 | 北京伟库电子商务科技有限公司 | 基于Quartz框架的配置定时任务的方法和装置 |
EP2544139A2 (en) * | 2011-07-06 | 2013-01-09 | Samsung Electronics Co., Ltd. | Apparatus and method for providing advertisement service in mobile communication system |
CN105511958A (zh) * | 2014-10-11 | 2016-04-20 | 阿里巴巴集团控股有限公司 | 任务的调度方法及装置 |
CN104954469A (zh) * | 2015-06-19 | 2015-09-30 | 长沙廖氏软件科技有限公司 | 一种异构系统信息交换方法 |
CN106503217A (zh) * | 2016-11-03 | 2017-03-15 | 用友网络科技股份有限公司 | 基于业务驱动的数据交互装置及方法 |
CN106817689A (zh) * | 2017-01-22 | 2017-06-09 | 兴唐通信科技有限公司 | 一种高可靠性的数据订阅及发布方法及系统 |
CN106874090A (zh) * | 2017-01-23 | 2017-06-20 | 北京思特奇信息技术股份有限公司 | 基于云系统的作业调度方法和系统 |
US10037508B1 (en) * | 2017-05-31 | 2018-07-31 | AirTrace, LLC | System for calculating whether time-crucial shipment is located according to expectation |
CN108132833A (zh) * | 2017-12-08 | 2018-06-08 | 广州视源电子科技股份有限公司 | 一种基于zookeeper技术的分布式定时任务调度方法和装置 |
CN109241156A (zh) * | 2018-07-31 | 2019-01-18 | 安徽四创电子股份有限公司 | 基于etl工具从关系型数据库向非关系型数据库更新的方法 |
CN109814841A (zh) * | 2018-12-19 | 2019-05-28 | 大唐软件技术股份有限公司 | 一种资源信息采集方法及装置 |
CN111367521A (zh) * | 2020-02-21 | 2020-07-03 | 国铁吉讯科技有限公司 | 消息发送方法及装置、消息接收方法及装置 |
CN112783620A (zh) * | 2021-01-05 | 2021-05-11 | 银盛支付服务股份有限公司 | 一种定时任务调度的优化方法、计算机设备及存储介质 |
Non-Patent Citations (1)
Title |
---|
杨潇黎等: "分布式web日志处理平台的研究与实现", 《信息通信》, 15 March 2019 (2019-03-15), pages 146 - 148 * |
Also Published As
Publication number | Publication date |
---|---|
CN113312419B (zh) | 2024-07-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108536752B (zh) | 一种数据同步方法、装置和设备 | |
CN103092903A (zh) | 数据库日志并行化 | |
CN110134689B (zh) | 基于主体对象标签变化的目标群体筛选方法、系统及计算机设备 | |
CN105740104B (zh) | 数据库中数据备份方法、装置及游戏系统 | |
US10860531B2 (en) | Creation and implementation of designated time points in a version expiration environment | |
CN110502523A (zh) | 业务数据存储方法、装置、服务器及计算机可读存储介质 | |
CN111414424B (zh) | 一种配置数据自动同步redis的方法、系统、介质及设备 | |
CN112612775B (zh) | 一种数据存储方法、装置、计算机设备及存储介质 | |
CN115730008A (zh) | 一种日志解析方法、数据同步系统、电子设备及存储介质 | |
CN112434108B (zh) | 一种数据库同步的方法、装置及设备 | |
CN113312419A (zh) | 一种用于订阅服务的定时调度方法和系统 | |
CN109298925B (zh) | 一种周期任务的定时启动方法、系统及相关装置 | |
US7120822B2 (en) | Computer executable digital video rendering restoration method | |
US8352440B2 (en) | Using repeated incremental background consistency checking to detect problems with content closer in time to when a failure occurs | |
CN110928883A (zh) | 一种数据归档方法及装置 | |
CN111831206B (zh) | 存储空间切换方法及后端监控系统 | |
CN110019181B (zh) | 一种入库方法及装置、计算机可读存储介质 | |
CN108415796A (zh) | 一种基于终端设备的数据恢复方法及终端设备 | |
US10922301B1 (en) | Apparatus, computer program, and method for trigger-based tracking of database modifications | |
CN115309613B (zh) | 一种由运行监控芯片选择辅助边缘节点的方法及系统 | |
CN112631745B (zh) | 一种基于时间窗口的定时任务执行方法、装置及系统 | |
US11550775B2 (en) | Time-to-run column for database management systems | |
CN110147355B (zh) | 数据同步方法、装置及服务器 | |
CN112307007B (zh) | 数据库清理方法及装置 | |
CN116628082A (zh) | 数据同步方法、电子设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |