发明内容
本申请实施例的目的在于提供一种并发任务抢占式调度方法、系统及介质,可以通过链路配合使多个传输子任务并发进行,减少任务传输的等待时间,提高数据传输的吞吐量,实现多个并发任务同步进行读写操作的功能的技术。
本申请实施例还提供了一种并发任务抢占式调度方法,包括:
获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务;
获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息;
获取链路传输状态信息,将链路传输状态信息与预设的状态信息进行比较,得到状态偏差率;
判断所述状态偏差率是否大于或等于预设的偏差率阈值;
若大于或等于,则对同一链路内的待传输子任务进行优先度排序;
若小于,则多个待传输子任务同时并发传输。
可选地,在本申请实施例所述的并发任务抢占式调度方法中,所述获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务,具体为:
获取任务数据库,提取数据特征,并生成特征向量;
将特征向量与预设的向量进行夹角计算,得到向量角;
判断所述向量角是否满足角度范围;
若满足,则判定对应的数据为同一任务内的数据;
若不满足,则判定对应的数据为不同任务内的数据。
可选地,在本申请实施例所述的并发任务抢占式调度方法中,所述获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息,具体为:
获取链路数量与待传输子任务数量;将链路数量与待传输子任务数量进行比较,得到数量差值;
若链路数量大于待传输子任务数量,则获取链路传输标准信息与待传输子任务的占用资源信息;
根据链路传输标准信息与待传输子任务的占用资源信息进行匹配,将待传输子任务通过链路进行数据传输;
若链路数量小于待传输子任务数量,则根据待传输子任务的优先度与链路进行匹配,并获取并发子任务;
获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序;
根据链路空闲顺序对并发子任务进行链路分配。
可选地,在本申请实施例所述的并发任务抢占式调度方法中,所述获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序,具体为:
获取每一个链路占用时间信息,根据链路占用时间信息对链路并发任务分配进行排序;
获取每一个链路并发任务数量,判断所述并发任务数量是否大于预设的数量;
若大于,则计算并发任务数量的超量,根据超量将并发任务按照链路分配排序进行调整;
若小于或等于,则计算并发任务的预定传输时间。
可选地,在本申请实施例所述的并发任务抢占式调度方法中,若大于或等于,则对同一链路内的待传输子任务进行优先度排序,具体为:
获取待传输子任务,将待传输子任务输入预设的传输调度模型,生成子任务优先度信息;
根据子任务优先度信息对待传输子任务进行并发传输排序;
根据传输排序对待传输子任务进行数据传输,并生成链路传输状态;
将链路传输状态与预设的传输状态进行比较,得到链路负荷;
判断所述链路负荷是否大于预设的负荷;
若大于,则生成链路配合信息,根据链路配合信息对链路进行传输调度;
若小于,则将链路传输状态实时进行监控。
可选地,在本申请实施例所述的并发任务抢占式调度方法中,所述获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序,具体为:
获取链路传输时间,根据链路传输时间获取对应链路中并发任务的等待时间;
将等待时间与预设的等待时间进行比较,得到时间偏差率;
判断所述时间偏差率是否大于或等于预设的偏差率阈值;
若大于或等于,则将并发任务进行链路得重新分配;
若小于,则生成并发任务排序信息,并生成每一个并发任务的等待时间,并将等待时间传输至终端。
第二方面,本申请实施例提供了一种并发任务抢占式调度系统,该系统包括:存储器及处理器,所述存储器中包括并发任务抢占式调度方法的程序,所述并发任务抢占式调度方法的程序被所述处理器执行时实现以下步骤:
获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务;
获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息;
获取链路传输状态信息,将链路传输状态信息与预设的状态信息进行比较,得到状态偏差率;
判断所述状态偏差率是否大于或等于预设的偏差率阈值;
若大于或等于,则对同一链路内的待传输子任务进行优先度排序;
若小于,则多个待传输子任务同时并发传输。
可选地,在本申请实施例所述的并发任务抢占式调度系统中,所述获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务,具体为:
获取任务数据库,提取数据特征,并生成特征向量;
将特征向量与预设的向量进行夹角计算,得到向量角;
判断所述向量角是否满足角度范围;
若满足,则判定对应的数据为同一任务内的数据;
若不满足,则判定对应的数据为不同任务内的数据。
可选地,在本申请实施例所述的并发任务抢占式调度系统中,所述获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息,具体为:
获取链路数量与待传输子任务数量;将链路数量与待传输子任务数量进行比较,得到数量差值;
若链路数量大于待传输子任务数量,则获取链路传输标准信息与待传输子任务的占用资源信息;
根据链路传输标准信息与待传输子任务的占用资源信息进行匹配,将待传输子任务通过链路进行数据传输;
若链路数量小于待传输子任务数量,则根据待传输子任务的优先度与链路进行匹配,并获取并发子任务;
获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序;
根据链路空闲顺序对并发子任务进行链路分配。
第三方面,本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质中包括并发任务抢占式调度方法程序,所述并发任务抢占式调度方法程序被处理器执行时,实现如上述任一项所述的并发任务抢占式调度方法的步骤。
由上可知,本申请实施例提供的一种并发任务抢占式调度方法、系统及介质,通过获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务;获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息;获取链路传输状态信息,将链路传输状态信息与预设的状态信息进行比较,得到状态偏差率;判断所述状态偏差率是否大于或等于预设的偏差率阈值;若大于或等于,则对同一链路内的待传输子任务进行优先度排序;若小于,则多个待传输子任务同时并发传输;通过链路配合使多个传输子任务并发进行,减少任务传输的等待时间,提高数据传输的吞吐量,实现多个并发任务同步进行读写操作的功能。
本申请的其他特征和优点将在随后的说明书阐述,本申请的目的和优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
具体实施方式
下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
应注意到,相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本申请的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
请参照图1,图1是本申请一些实施例中的一种并发任务抢占式调度方法的流程图。该并发任务抢占式调度方法用于终端设备中,该并发任务抢占式调度方法,包括以下步骤:
S101,获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务;
S102,获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息;
S103,获取链路传输状态信息,将链路传输状态信息与预设的状态信息进行比较,得到状态偏差率;
S104,判断状态偏差率是否大于或等于预设的偏差率阈值;
S105,若大于或等于,则对同一链路内的待传输子任务进行优先度排序;若小于,则多个待传输子任务同时并发传输。
需要说明的是,通过对任务数据库内的数据进行分析,并进行分类,根据数据类别生成多个待传输子任务,不同的待传输子任务的数据类型不同,将待传输子任务与传输链路进行匹配,提高链路的传输速率,同时降低子任务的排队量,将出现子任务排队时,对待传输子任务进行优先度排序实现待传输子任务有序传输,提高传输效率。
请参照图2,图2是本申请一些实施例中的一种并发任务抢占式调度方法的任务数据库分类流程图。根据本发明实施例,获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务,具体为:
S201,获取任务数据库,提取数据特征,并生成特征向量;
S202,将特征向量与预设的向量进行夹角计算,得到向量角;
S203,判断向量角是否满足角度范围;
S204,若满足,则判定对应的数据为同一任务内的数据;
S205,若不满足,则判定对应的数据为不同任务内的数据。
需要说明的是,通过分析任务数据库内的数据特征,并对特征进行分析比较,从而根据特征向量角的判断结果将数据进行类别分配,提高分类精度。
请参照图3,图3是本申请一些实施例中的一种并发任务抢占式调度方法的并发任务链路分配流程图。根据本发明实施例,获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息,具体为:
S301,获取链路数量与待传输子任务数量;将链路数量与待传输子任务数量进行比较,得到数量差值;
S302,若链路数量大于待传输子任务数量,则获取链路传输标准信息与待传输子任务的占用资源信息;
S303,根据链路传输标准信息与待传输子任务的占用资源信息进行匹配,将待传输子任务通过链路进行数据传输;
S304,若链路数量小于待传输子任务数量,则根据待传输子任务的优先度与链路进行匹配,并获取并发子任务;
S305,获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序,根据链路空闲顺序对并发子任务进行链路分配。
需要说明的是,通过判断待传输子任务的占用链路资源,进行判断链路是否满足该待传输子任务的数据传输,如果满足,则通过一条链路即可实现对应的子任务数据的传输,若不满足,则造成链路排队,并实时判断链路排队的情况,当链路排队严重时,对传输链路进行重新分配,保证待传输数据的等待时间不会过长。
根据本发明实施例,获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序,具体为:
获取每一个链路占用时间信息,根据链路占用时间信息对链路并发任务分配进行排序;
获取每一个链路并发任务数量,判断并发任务数量是否大于预设的数量;
若大于,则计算并发任务数量的超量,根据超量将并发任务按照链路分配排序进行调整;
若小于或等于,则计算并发任务的预定传输时间。
需要说明的是,根据待传输子任务的数据量进行判断链路的占用时间,并判断并发任务量是否大于链路数量,若大于,则计算并发任务量与链路数量的差值,该值为并发任务量的超量,并将超量按照链路的分配顺序进行调整,防止其中一条链路中的并发任务量较多,造成该链路排队严重,造成该链路数据传输瘫痪。
根据本发明实施例,若大于或等于,则对同一链路内的待传输子任务进行优先度排序,具体为:
获取待传输子任务,将待传输子任务输入预设的传输调度模型,生成子任务优先度信息;
根据子任务优先度信息对待传输子任务进行并发传输排序;
根据传输排序对待传输子任务进行数据传输,并生成链路传输状态;
将链路传输状态与预设的传输状态进行比较,得到链路负荷;
判断链路负荷是否大于预设的负荷;
若大于,则生成链路配合信息,根据链路配合信息对链路进行传输调度;
若小于,则将链路传输状态实时进行监控。
需要说明的是,根据待传输子任务的优先度进行并发传输排序,并将传输排序与链路的传输状态进行比较,如链路正在传输时,计算正在传输的数据剩余量,并根据剩余量计算链路剩余负荷,根据链路剩余负荷与下一个待传输子任务的负荷,进行判断链路负荷是否满足待传输子任务的负荷,若满足,则在链路传输过程中将下一个待传输任务进行同步传输,减少子任务的传输等待时间。
根据本发明实施例,获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序,具体为:
获取链路传输时间,根据链路传输时间获取对应链路中并发任务的等待时间;
将等待时间与预设的等待时间进行比较,得到时间偏差率;
判断时间偏差率是否大于或等于预设的偏差率阈值;
若大于或等于,则将并发任务进行链路得重新分配;
若小于,则生成并发任务排序信息,并生成每一个并发任务的等待时间,并将等待时间传输至终端。
需要说明的是,判断链路传输时间,并根据传输时间计算并发任务的等待时间,通过判断等待时间的长短,进行分析数据传输的有效性,如数据传输时间较长时,会造成部分数据的失效,此时需要对传输链路进行重新分配调整,提高数据的传输速率。
根据本发明实施例,还包括:
用户在客户端修改任务状态为待传输任务,并设定任务争夺标识(并发任务);
查询数据库待传输任务列表, 按照状态修改时间和优先级排序规则排序, 取第一条数据行对象;
修改此数据行对象的争夺标识和任务状态,
重新查询数据库中行对象的任务争夺标识的数据行;
如果存在数据行则表明成功抢占任务, 开始执行任务, 如果不存在数据行则标识争夺任务失败 (即被其他服务器抢走任务)。
请参照图4,图4是本申请一些实施例中的一种并发任务抢占式调度系统的结构示意图。第二方面,本申请实施例提供了一种并发任务抢占式调度系统4,该系统包括:存储器41及处理器42,存储器41中包括并发任务抢占式调度方法的程序,并发任务抢占式调度方法的程序被处理器执行时实现以下步骤:
获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务;
获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息;
获取链路传输状态信息,将链路传输状态信息与预设的状态信息进行比较,得到状态偏差率;
判断状态偏差率是否大于或等于预设的偏差率阈值;
若大于或等于,则对同一链路内的待传输子任务进行优先度排序;
若小于,则多个待传输子任务同时并发传输。
根据本发明实施例,获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务,具体为:
获取任务数据库,提取数据特征,并生成特征向量;
将特征向量与预设的向量进行夹角计算,得到向量角;
判断向量角是否满足角度范围;
若满足,则判定对应的数据为同一任务内的数据;
若不满足,则判定对应的数据为不同任务内的数据。
根据本发明实施例,获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息,具体为:
获取链路数量与待传输子任务数量;将链路数量与待传输子任务数量进行比较,得到数量差值;
若链路数量大于待传输子任务数量,则获取链路传输标准信息与待传输子任务的占用资源信息;
根据链路传输标准信息与待传输子任务的占用资源信息进行匹配,将待传输子任务通过链路进行数据传输;
若链路数量小于待传输子任务数量,则根据待传输子任务的优先度与链路进行匹配,并获取并发子任务;
获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序;
根据链路空闲顺序对并发子任务进行链路分配。
需要说明的是,通过判断待传输子任务的占用链路资源,进行判断链路是否满足该待传输子任务的数据传输,如果满足,则通过一条链路即可实现对应的子任务数据的传输,若不满足,则造成链路排队,并实时判断链路排队的情况,当链路排队严重时,对传输链路进行重新分配,保证待传输数据的等待时间不会过长。
根据本发明实施例,获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序,具体为:
获取每一个链路占用时间信息,根据链路占用时间信息对链路并发任务分配进行排序;
获取每一个链路并发任务数量,判断并发任务数量是否大于预设的数量;
若大于,则计算并发任务数量的超量,根据超量将并发任务按照链路分配排序进行调整;
若小于或等于,则计算并发任务的预定传输时间。
需要说明的是,根据待传输子任务的数据量进行判断链路的占用时间,并判断并发任务量是否大于链路数量,若大于,则计算并发任务量与链路数量的差值,该值为并发任务量的超量,并将超量按照链路的分配顺序进行调整,防止其中一条链路中的并发任务量较多,造成该链路排队严重,造成该链路数据传输瘫痪。
根据本发明实施例,若大于或等于,则对同一链路内的待传输子任务进行优先度排序,具体为:
获取待传输子任务,将待传输子任务输入预设的传输调度模型,生成子任务优先度信息;
根据子任务优先度信息对待传输子任务进行并发传输排序;
根据传输排序对待传输子任务进行数据传输,并生成链路传输状态;
将链路传输状态与预设的传输状态进行比较,得到链路负荷;
判断链路负荷是否大于预设的负荷;
若大于,则生成链路配合信息,根据链路配合信息对链路进行传输调度;
若小于,则将链路传输状态实时进行监控。
需要说明的是,根据待传输子任务的优先度进行并发传输排序,并将传输排序与链路的传输状态进行比较,如链路正在传输时,计算正在传输的数据剩余量,并根据剩余量计算链路剩余负荷,根据链路剩余负荷与下一个待传输子任务的负荷,进行判断链路负荷是否满足待传输子任务的负荷,若满足,则在链路传输过程中将下一个待传输任务进行同步传输,减少子任务的传输等待时间。
根据本发明实施例,获取链路传输时间信息,根据链路传输时间信息生成链路空闲顺序,并对链路空间状态按照空闲时间进行排序,具体为:
获取链路传输时间,根据链路传输时间获取对应链路中并发任务的等待时间;
将等待时间与预设的等待时间进行比较,得到时间偏差率;
判断时间偏差率是否大于或等于预设的偏差率阈值;
若大于或等于,则将并发任务进行链路得重新分配;
若小于,则生成并发任务排序信息,并生成每一个并发任务的等待时间,并将等待时间传输至终端。
需要说明的是,判断链路传输时间,并根据传输时间计算并发任务的等待时间,通过判断等待时间的长短,进行分析数据传输的有效性,如数据传输时间较长时,会造成部分数据的失效,此时需要对传输链路进行重新分配调整,提高数据的传输速率。
本发明第三方面提供了一种计算机可读存储介质,可读存储介质中包括并发任务抢占式调度方法程序,并发任务抢占式调度方法程序被处理器执行时,实现如上述任一项的并发任务抢占式调度方法的步骤。
本发明公开的一种并发任务抢占式调度方法、系统及介质,通过获取任务数据库,将任务数据库内的数据进行分类,并生成多个待传输子任务;获取链路个数,将多个待传输子任务与链路进行匹配,生成并发传输信息;获取链路传输状态信息,将链路传输状态信息与预设的状态信息进行比较,得到状态偏差率;判断所述状态偏差率是否大于或等于预设的偏差率阈值;若大于或等于,则对同一链路内的待传输子任务进行优先度排序;若小于,则多个待传输子任务同时并发传输;通过链路配合使多个传输子任务并发进行,减少任务传输的等待时间,提高数据传输的吞吐量,实现多个并发任务同步进行读写操作的功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。