CN103186536A - 一种调度数据共享装置的方法及系统 - Google Patents

一种调度数据共享装置的方法及系统 Download PDF

Info

Publication number
CN103186536A
CN103186536A CN2011104447190A CN201110444719A CN103186536A CN 103186536 A CN103186536 A CN 103186536A CN 2011104447190 A CN2011104447190 A CN 2011104447190A CN 201110444719 A CN201110444719 A CN 201110444719A CN 103186536 A CN103186536 A CN 103186536A
Authority
CN
China
Prior art keywords
data sharing
sharing device
source database
data
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011104447190A
Other languages
English (en)
Inventor
孙爱芳
袁宜峰
凌志浩
高冲
曹建福
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN2011104447190A priority Critical patent/CN103186536A/zh
Priority to PCT/CN2012/072568 priority patent/WO2013097363A1/zh
Publication of CN103186536A publication Critical patent/CN103186536A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004Server selection for load balancing
    • H04L67/1008Server selection for load balancing based on parameters of servers, e.g. available memory or workload

Abstract

本发明公开了一种调度数据共享装置的方法,该方法包括:调度装置对自身所管理的所有数据共享装置进行实时监控,当所管理的数据共享装置的资源使用情况超过设置的阈值时,根据自身当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置;调度装置调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置。本发明同时公开了一种调度数据共享装置的系统,采用本发明的方法及系统,能有效地实现对多个数据共享装置进行任务调度。

Description

一种调度数据共享装置的方法及系统
技术领域
本发明涉及数据共享技术,特别涉及一种调度数据共享装置的方法及系统。
背景技术
随着信息技术的快速发展,各种应用系统应运而生,相应的数据库系统也越来越多。尤其是在泛在网环境下,不仅会出现家居、交通、物流、以及医疗等方面的行业化应用,而且还会出现各种综合应用。为了充分利用网络中的既有资源,实现资源整合和综合应用,数据共享技术成为研究的方向。
数据共享的难点在于数据源的异构性。由于现有的数据库系统一般是基于特定的应用而开发的,因此,相互之间在软硬件环境、数据库形式等方面存在差异,比如:由硬件架构、操作系统、系统软件、数据模型、以及语义等所引起的差异。随着信息技术的发展,在未来的物联网、泛在网中,还会出现更多的终端和系统,对应的数据库也将会呈现出更为复杂的异构性。因此,异构数据共享是亟需解决的问题。
根据现有技术,数据共享装置的功能一般包括:导入数据源/提取源数据库、转换数据格式、加密/解密数据、压缩/解压缩数据、数据发送、以及消息管理等。换句话说,数据共享装置根据收到的查询请求,提取源数据库的数据,将源数据转换为目的数据,提供给用户的目标数据库。可见,源数据库为数据的提供者,目标数据库为数据的使用者。
从数据处理的角度上,现有的数据共享方案可以分为两种:一种是数据复制法,即:将源数据库的数据复制到目标数据库中,或者,将源数据库的数据复制到共享数据库中,目标数据库再从共享数据库中获取数据;另一种是资源映射法,即:将源数据库的数据在目标数据库或共享数据库中进行资源映射,当目标数据库需要时,直接、或通过共享数据库间接向源数据库查询并获取数据。
从系统架构的角度上,现有的数据共享方案也可以分为两种:一种方法是在系统中增加新的数据共享装置,用于连接各个源数据库,该数据共享装置在数据处理上可以采用上述的数据复制法或资源映射法,或者,两种方法都用,目标数据库通过数据共享装置获取所需的数据;另一种方法是不添加任何装置,而是对源数据库进行升级,在源数据库和目标数据库之间建立联系,将源数据库的数据复制到目标数据库中,或者,在目标数据库中建立资源映射。由于对既有应用系统及其数据库进行升级的难度和花费很大,且数据共享方案应考虑到对于异构数据库的通用性,因此,在实际应用中,一般采用前者,实现数据共享,即:采用增加数据共享装置的方案。
采用增加数据共享装置的方案,如图1所示,数据共享装置连接在各源数据库之间,用于接收源数据库的数据上传请求或目标数据库的数据下载请求、完成数据格式的转换、以及数据的缓存或存储,并将处理后的数据发送至目标数据库。采用增加数据共享装置的方案的处理过程可详见专利号为200410009476.8,发明名称为一种异构系统之间数据安全共享的装置及方法的中国专利、以及申请号为200710003536.9,发明名称为在异构系统间实现数据共享的方法和系统的中国专利申请。
上述基于数据共享装置的方案,虽然能够实现异构数据库之间的安全共享。但是,仍然存在一定缺陷:由于只采用一种或单个数据共享装置,从系统架构的角度来讲,现有方案未涉及多个数据共享装置之间的协作和任务调度问题;从功能的角度来讲,现有方案未涉及跟调度相关的功能,比如:源数据库加入/退出时数据共享装置的管理和调度等,因此,随着应用系统及数据库的数量和差异性的增加,采用一种或单个数据共享装置,将无法满足数据共享应用的需求。
发明内容
有鉴于此,本发明的主要目的在于提供一种调度数据共享装置的方法及系统,能有效地对多个数据共享装置进行任务调度。
为达到上述目的,本发明的技术方案是这样实现的:
本发明提供了一种调度数据共享装置的方法,该方法包括:
调度装置对自身所管理的所有数据共享装置进行实时监控,当所管理的数据共享装置的资源使用情况超过设置的阈值时,根据自身当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置;
调度装置调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置。
上述方案中,所述资源使用情况超过设置的阈值的数据共享装置的数据共享任务转移后,该方法进一步包括:
调度装置通知与转移的数据共享任务相关的目标数据库。
上述方案中,所述为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置,为:
根据自身当前保存的资源情况信息,选择负载最小的数据共享装置,作为承担转移的数据共享任务的数据共享装置。
上述方案中,所述调度装置调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置,为:
调度装置确定所述选择的数据共享装置能承担所述需要转移的数据共享任务后,向所述资源使用情况超过设置的阈值的数据共享装置发送调度命令;
所述资源使用情况超过设置的阈值的数据共享装置收到调度命令后,通过与所述选择的数据共享装置进行交互,将需要转移的数据共享任务,转移至所述选择的数据共享装置。
上述方案中,该方法进一步包括:
当有新源数据库加入时,调度装置根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的数据共享装置建立安全连接。
上述方案中,所述调度装置根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,为:
调度装置根据自身当前保存的资源情况信息,选择负载最小的数据共享装置,作为所述新源数据库的归属数据共享装置。
上述方案中,该方法进一步包括:
当获知有源数据库退出时,调度装置更新自身当前保存的资源情况信息。
上述方案中,所述更新自身保存的资源情况信息,包括:
清除待退出源数据库的相关信息,并更新所述待退出源数据库所归属的数据共享装置的运行情况信息。
上述方案中,所述获知有源数据库退出,为:
所述待退出源数据库在执行退出操作或进行关机操作前,向调度装置和自身所归属的数据共享装置发送退出通知;或者,
所述待退出源数据库所归属的数据共享装置在周期性获取源数据库信息的过程中未得到所述待退出数据库的响应时,向调度装置发送所述待退出源数据库的退出通知。
上述方案中,该方法进一步包括:
调度装置收到目标数据库的首次数据查询请求时,根据自身当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的数据共享装置建立安全连接。
上述方案中,所述根据自身当前保存的资源情况信息及所述新数据查询请求,为所述目标数据库选择相应的源数据库及源数据库所归属的数据共享装置,为:
调度装置根据自身当前保存的资源情况信息,选择满足所有所述数据查询请求的源数据库;
之后在选择的所有满足所述数据查询请求的源数据库所归属的数据共享装置中,选择负载最小的数据共享装置作为所述目标数据库确定的数据共享装置。
上述方案中,在协助所述目标数据库与确定的数据共享装置建立安全连接之前,该方法进一步包括:调度装置向所述目标数据库发送确定的源数据库及数据共享装置的相关信息。
上述方案中,该方法进一步包括:
调度装置所管理的数据共享装置周期性、和/或事件性向调度装置上报自身的资源情况信息;
调度装置根据收到的资源情况信息,更新自身当前保存的资源情况信息。
本发明右提供了一种调度数据共享装置的调度装置,该调度装置包括:资源管理模块、以及调度模块;其中,
资源管理模块,用于保存资源情况信息;
调度模块,用于对自身所管理的所有数据共享装置进行实时监控,当所管理的数据共享装置的资源使用情况超过设置的阈值时,根据资源管理模块当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置;并调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置。
上述方案中,所述调度模块,还用于所述资源使用情况超过设置的阈值的数据共享装置的数据共享任务转移后,通知与转移的数据共享任务相关的目标数据库。
上述方案中,所述调度模块,还用于当有新源数据库加入系统时,根据资源管理模块当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的数据共享装置建立安全连接。
上述方案中,该调度装置进一步包括:处理模块,用于收到目标数据库的首次数据查询请求时,根据资源管理模块当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的数据共享装置建立安全连接。
上述方案中,所述处理模块,还用于在协助所述目标数据库与确定的数据共享装置建立安全连接之前,向所述目标数据库发送确定的源数据库及数据共享装置的相关信息。
上述方案中,所述资源管理模块,还用于根据调度装置所管理的数据共享装置周期性或事件性上报的资源情况信息,更新自身当前保存的资源情况信息;和/或,当获知有源数据库退出系统时,更新自身当前保存的资源情况信息。
本发明还提供了一种调度数据共享装置的系统,该系统包括:调度装置、第一数据共享装置、以及第二数据共享装置;其中,
调度装置,用于对自身所管理的所有数据共享装置进行实时监控,当所管理的第一数据共享装置的资源使用情况超过设置的阈值时,根据自身当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的第一数据共享装置选择承担转移的数据共享任务的数据共享装置;并调度所述资源使用情况超过设置的阈值的第一数据共享装置将需要转移的数据共享任务,转移至所述选择的第二数据共享装置。
上述方案中,该系统进一步包括:目标数据库,用于接收调度装置发送的通知;
所述调度装置,还用于所述资源使用情况超过设置的阈值的第一数据共享装置的数据共享任务转移后,通知与转移的数据共享任务相关的目标数据库。
上述方案中,所述调度装置还用于当有新源数据库加入时,根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的第一数据共享装置或第二数据共享装置建立安全连;和/或,当获知有源数据库退出时,更新自身当前保存的资源情况信息;和/或,收到目标数据库的首次数据查询请求时,根据自身当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的第一数据共享装置或第二数据共享装置建立安全连接。
上述方案中,该系统进一步包括源数据库,用于在执行退出操作或进行关机操作前,向调度装置和自身所归属的第一数据共享装置或第二数据共享装置发送退出通知;
所述调度装置,还用于接收源数据库发送的退出通知;
所述第一数据共享装置,还用于接收源数据库发送的退出通知;或者,
所述第二数据共享装置,还用于接收源数据库发送的退出通知。
上述方案中,所述第一数据共享装置,还用于在周期性获取源数据库信息的过程中未得到所述待退出数据库的响应时,向调度装置发送所述待退出源数据库的退出通知;或者,
所述第二数据共享装置,还用于在周期性获取源数据库信息的过程中未得到所述待退出数据库的响应时,向调度装置发送所述待退出源数据库的退出通知;
所述调度装置,还用于接收第一数据共享装置或第二数据共享装置发送的退出通知。
上述方案中,所述第一数据共享装置,还用于周期性、和/或事件性向调度装置上报自身的资源情况信息;
所述第二数据共享装置,还用于周期性、和/或事件性向调度装置上报自身的资源情况信息;
所述调度装置,还用于根据收到的资源情况信息,更新自身当前保存的资源情况信息。
本发明提供的调度数据共享装置的方法及系统,调度装置对自身所管理的所有数据共享装置进行实时监控,当所管理的数据共享装置的资源使用情况超过设置的阈值时,根据自身当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置;调度装置调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置;如此,能有效地实现对多个数据共享装置进行任务调度,从而有效地实现数据共享装置间的协议,进而提高数据共享的效率。
本发明中,当有新源数据库加入时,调度装置根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的数据共享装置建立安全连接;当获知有源数据库退出时,调度装置更新自身当前保存的资源情况信息;调度装置收到目标数据库的首次数据查询请求时,根据自身当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的数据共享装置建立安全连接,如此,能更加有效地实现对多个数据共享装置的调度,从而进一步提高数据共享的效率。
附图说明
图1为现有技术采用数据共享装置的方案的结构示意图;
图2为本发明调度数据共享装置的调度装置结构示意图;
图3为本发明调度数据共享装置的系统结构示意图;
图4为本发明调度数据共享装置的方法流程示意图;
图5为实施例一源数据库加入系统的方法流程示意图;
图6为实施例二源数据库退出系统的方法流程示意图;
图7为实施例三数据共享装置间发生任务调度的方法流程示意图;
图8为实施例四目标数据库向系统查询数据的方法流程示意图。
具体实施方式
下面结合附图及具体实施例对本发明再作进一步详细的说明。
本发明调度数据共享装置的调度装置,如图2所示,该调度装置包括:资源管理模块21、以及调度模块22;其中,
资源管理模块21,用于保存资源情况信息;
调度模块22,用于对自身所管理的所有数据共享装置进行实时监控,当所管理的数据共享装置的资源使用情况超过设置的阈值时,根据资源管理模块21当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置;并调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置。
其中,所述调度模块22,还用于所述资源使用情况超过设置的阈值的数据共享装置的数据共享任务转移后,通知与转移的数据共享任务相关的目标数据库。
所述调度模块22,还用于当有新源数据库加入系统时,根据资源管理模块21当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的数据共享装置建立安全连接。
该调度装置还可以进一步包括:处理模块23,用于收到目标数据库的首次数据查询请求时,根据资源管理模块21当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的数据共享装置建立安全连接。
所述处理模块23,还用于在协助所述目标数据库与确定的数据共享装置建立安全连接之前,向所述目标数据库发送确定的源数据库及数据共享装置的相关信息。
所述资源管理模块21,还用于根据调度装置所管理的数据共享装置周期性或事件性上报的资源情况信息,更新自身当前保存的资源情况信息。
所述资源管理模块21,还用于当获知有源数据库退出系统时,更新自身当前保存的资源情况信息。
基于上述调度数据共享装置的装置,本发明还提供了一种调度数据共享装置的系统,如图3所示,该系统包括:调度装置31、第一数据共享装置32、以及第二数据共享装置33;其中,
调度装置31,用于对自身所管理的所有数据共享装置进行实时监控,当所管理的第一数据共享装置32的资源使用情况超过设置的阈值时,根据自身当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的第一数据共享装置32选择承担转移的数据共享任务的数据共享装置33;并调度所述资源使用情况超过设置的阈值的第一数据共享装置将需要转移的数据共享任务,转移至所述选择的第二数据共享装置33。
具体地,由调度装置31的调度模块,对调度装置31自身所管理的所有数据共享装置进行实时监控,当所管理的第一数据共享装置32的资源使用情况超过设置的阈值时,根据调度装置31的资源管理模块当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的第一数据共享装置32选择承担转移的数据共享任务的数据共享装置33;并调度所述资源使用情况超过设置的阈值的第一数据共享装置32将需要转移的数据共享任务,转移至所述选择的第二数据共享装置33。
其中,所述第二数据共享装置33的个数可以为一个以上。
该系统还可以进一步包括:目标数据库,用于接收调度装置31发送的通知;
所述调度装置31,还用于所述资源使用情况超过设置的阈值的第一数据共享装置32的数据共享任务转移后,通知与转移的数据共享任务相关的目标数据库。
具体地,由调度装置31的调度模块通知与转移的数据共享任务相关的目标数据库。
所述调度装置31,还用于当有新源数据库加入时,根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的第一数据共享装置32或第二数据共享装置33建立安全连接。具体地,由调度装置31的调度模块根据调度装置的资源管理模块保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的第一数据共享装置32或第二数据共享装置33建立安全连接。
所述调度装置31,还用于当获知有源数据库退出时,更新自身当前保存的资源情况信息。具体地,由调度装置的资源管理模块更新自身当前保存的资源情况信息。
该系统还可以进一步包括源数据库,用于在执行退出操作或进行关机操作前,向调度装置31和自身所归属的第一数据共享装置32或第二数据共享装置33发送退出通知;
所述调度装置31,还用于接收源数据库发送的退出通知;
所述第一数据共享装置32,还用于接收源数据库发送的退出通知;或者,
所述第二数据共享装置33,还用于接收源数据库发送的退出通知。
其中,由调度装置的资源管理模块接收源数据库发送的退出通知。
所述第一数据共享装置32,还用于在周期性获取源数据库信息的过程中未得到所述待退出数据库的响应时,向调度装置31发送所述待退出源数据库的退出通知;或者,
所述第二数据共享装置33,还用于在周期性获取源数据库信息的过程中未得到所述待退出数据库的响应时,向调度装置31发送所述待退出源数据库的退出通知;
所述调度装置31,还用于接收第一数据共享装置32或第二数据共享装置33发送的退出通知。具体地,由调度装置31的资源管理模块接收第一数据共享装置32或第二数据共享装置33发送的退出通知。
所述调度装置31,还用于收到目标数据库的首次数据查询请求时,根据自身当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的第一数据共享装置32或第二数据共享装置33建立安全连接。具体地,由调度装置31的处理模块根据调度装置31的资源管理模块当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的第一数据共享装置32或第二数据共享装置33建立安全连接。
所述第一数据共享装置32,还用于周期性、和/或事件性向调度装置31上报自身的资源情况信息;
所述第二数据共享装置33,还用于周期性、和/或事件性向调度装置31上报自身的资源情况信息;
所述调度装置31,还用于根据收到的资源情况信息,更新自身当前保存的资源情况信息。具体地,由调度装置31的资源管理模块根据收到的资源情况信息,更新自身当前保存的资源情况信息。
这里,需要说明的是:本发明所述系统中的调度装置、第一数据共享装置、第二数据共享装置、源数据库、以及目标数据库之间可以通过光纤、以太网等网络进行互连,也可以通过因特网(Internet)进行互连,并遵循输控制协议/因特网互联协议(TCP/IP,Transmission Control Protocol/Internet Protocol)。
基于上述调度数据共享装置的装置及系统,本发明还提供了一种调度数据共享装置的方法,如图4所示,该方法包括以下步骤:
步骤401:调度装置对自身所管理的所有数据共享装置进行实时监控,当所管理的数据共享装置的资源使用情况超过设置的阈值时,根据自身当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置;
这里,调度装置可以根据自身当前保存的资源情况信息,对自身所管理的所有数据共享装置进行实时监控。
所述为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置,具体为:
根据自身当前保存的资源情况信息,选择负载最小的数据共享装置,作为承担转移的数据共享任务的数据共享装置。
所述资源情况信息包括:管理的所有数据共享装置的资源情况信息。其中,所述数据共享装置的资源情况信息包括:所归属的源数据库信息、使用或访问所述源数据库的目标数据库信息、以及运行情况信息。这里,所述源数据库信息包括:源数据库ID、源数据库名、源数据库类型、以及源数据库IP地址等;所述目标数据库信息包括:目标数据库ID、目标数据库名、目标据库类型、以及目标数据库IP地址等;所述运行情况信息包括:CPU使用率、内存占用率、以及存储占用率等等。
步骤402:调度装置调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置。
具体地,调度装置确定所述选择的数据共享装置能承担所述需要转移的数据共享任务后,向所述资源使用情况超过设置的阈值的数据共享装置发送调度命令;
所述资源使用情况超过设置的阈值的数据共享装置收到调度命令后,通过与所述选择的数据共享装置进行交互,将需要转移的数据共享任务,转移至所述选择的数据共享装置。
其中,所述需要转移的数据共享任务为所述资源使用情况超过设置的阈值的数据共享装置所承担的数据共享任务中的一部分。
所述资源使用情况超过设置的阈值的数据共享装置的数据共享任务转移后,该方法还可以进一步包括:
调度装置通知与转移的数据共享任务相关的目标数据库。
该方法还可以进一步包括:
当有新源数据库加入时,调度装置根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的数据共享装置建立安全连接。
其中,所述调度装置根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,具体为:
调度装置根据自身当前保存的资源情况信息,选择负载最小的数据共享装置,作为所述新源数据库的归属数据共享装置。
该方法还可以进一步包括:
当获知有源数据库退出时,调度装置更新自身当前保存的资源情况信息。
其中,所述更新自身当前保存的资源情况信息,包括:
清除待退出源数据库的相关信息,并更新所述待退出源数据库所归属的数据共享装置的运行情况信息。
所述获知有源数据库退出,具体为:
所述待退出源数据库在执行退出操作或进行关机操作前,向调度装置和自身所归属的数据共享装置发送退出通知;或者,
所述待退出源数据库所归属的数据共享装置在周期性获取源数据库信息的过程中未得到所述待退出数据库的响应时,向调度装置发送所述待退出源数据库的退出通知。
该方法还可以进一步包括:
调度装置收到目标数据库的首次数据查询请求时,根据自身当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的数据共享装置建立安全连接。
其中,所述根据自身当前保存的资源情况信息及所述新数据查询请求,为所述目标数据库选择相应的源数据库及源数据库所归属的数据共享装置,具体为:
调度装置根据自身当前保存的资源情况信息,选择满足所有所述数据查询请求的源数据库;
之后在选择的所有满足所述数据查询请求的源数据库所归属的数据共享装置中,选择负载最小的数据共享装置作为所述目标数据库确定的数据共享装置。
在协助所述目标数据库与确定的数据共享装置建立安全连接之前,该方法还可以进一步包括:调度装置向所述目标数据库发送确定的源数据库及数据共享装置的相关信息。
该方法还可以进一步包括:
调度装置所管理的数据共享装置周期性、和/或事件性向调度装置上报自身的资源情况信息;
调度装置根据收到的资源情况信息,更新自身当前保存的资源情况信息。
其中,所述周期性上报是指:数据共享装置每隔一段时间向调度装置上报自身的资源情况信息;所述事件性上报是指:数据共享装置在自身的资源情况信息发生变化时,向调度装置上报自身的资源情况信息,比如:当自身所归属的源数据库退出等事件发生时,向调度装置上报自身的资源情况信息;或者,当有新源数据库加入系统后,向调度装置上报自身的资源情况信息等。在实际应用过程中,为了降低不必要的通信开支,数据共享装置在上报之前,可以将当前的资源情况信息与上一次上报时的资源情况信息进行比较,只向调度装置上报发生变化的资源情况信息部分。
当调度装置根据收到的资源情况信息,确定数据共享装置上报的资源情况信息未发生变化时,则不更新自身当前保存的资源情况信息。
实施例一:
本实施例源数据库加入系统的处理过程,即:调度装置为新加入系统的源数据库分配数据共享装置,并协助新加入系统的源数据库与数据共享装置建立安全连接的过程,如图5所示,包括以下步骤:
步骤501:新源数据库向调度装置发起加入请求;
这里,新源数据库向调度装置发送的请求消息包含:源数据库信息;所述源数据库信息包括:源数据库ID、源数据库名、源数据库类型、以及源数据库IP地址等。
步骤502:调度装置收到请求后,根据自身当前保存的资源情况信息,为新源数据库分配数据共享装置;
具体地,调度装置的调度模块根据调度装置的资源管理模块当前保存的资源情况信息,为新源数据库分配数据共享装置。
这里,所述根据自身当前保存的资源情况信息,为新源数据库分配数据共享装置,具体为:
根据自身当前保存的资源情况信息,选择负载最小的数据共享装置,作为新源数据库的归属数据共享装置;
具体地,所述调度模块遍历资源管理模块当前保存的各数据共享装置的资源情况信息,根据各数据共享装置的运行情况信息,综合CPU使用率、内存占用率、以及存储占用率等信息,选择出负载最低小数据共享装置,作为新源数据库的归属数据共享装置。
步骤503:调度装置发送数据共享任务请求至为所述新源数据库分配的数据共享装置;
这里,所述数据共享任务请求包含所述新源数据库信息;所述新源数据库信息包括:源数据库ID、源数据库名、源数据库类型、以及源数据库IP地址等。
步骤504:所述为所述新源数据库分配的数据共享装置收到请求后,根据自身的资源使用情况,判断是否接受数据共享任务,并在确定接受后,执行步骤505;
具体地,所述为所述新源数据库分配的数据共享装置的处理模块根据所述为所述新源数据库分配的数据共享装置的资源管理模块当前保存的资源使用情况,判断是否接受数据共享任务。
其中,所述为所述新源数据库分配的数据共享装置收到数据共享任务请求时,需要对自身的资源使用情况进行确认,如果自身的负载情况未超过设置的阈值,则接受所述数据共享任务请求。如果自身的负载情况超过设置的阈值,则不接受所述数据共享任务请求,在这种情况下,调度装置确定为所述新源数据库分配的数据共享装置不接受所述数据共享任务请求后,可以重新执行步骤502~504,直至有数据共享装置接受所述数据共享任务请求为止。其中,在重新为新源数据库分配数据共享装置时,则不再选择不接受所述数据共享任务请求的数据共享装置作为为新源数据库分配数据共享装置。
步骤505:所述为所述新源数据库分配的数据共享装置与所述新源数据库建立连接,进行数据共享操作,并通知调度装置;
这里,数据共享装置与新源数据库建立连接、以及数据共享的具体处理过程,属于现有技术。
在进行数据共享操作时,所述为所述新源数据库分配的数据共享装置的资源管理模块,更新自身的资源情况信息,包括:添加新源数据库信息、以及更新运行情况信息。
步骤506:调度装置更新自身当前保存的资源情况信息。
这里,所述为所述新源数据库分配的数据共享装置与新加入的源数据库建立连接后,将自身的资源情况信息上报给调度装置,调度装置的资源管理模块收到信息后,更新自身当前保存的资源情况信息。
实施例二:
本实施例源数据库退出系统的处理过程,如图6所示,包括以下步骤:
步骤601:待退出源数据库向调度装置和自身所归属的数据共享装置发送退出通知;
这里,待退出源数据库退出的原因可以是主动退出,例如:源数据库的所有者进行退出操作或对源数据库装置进行关机操作,待退出源数据库在执行退出操作或进行关机操作前应向调度装置和自身所归属的数据共享装置发送退出通知。
步骤602:所述数据共享装置收到退出通知后,对自身的资源情况信息进行更新,并通知使用待退出数据库的相关目标数据库,更新完成后,向调度装置发送自身的资源情况信息;
具体地,所述数据共享装置的资源管理模块更新资源情况信息;更具体地,所述数据共享装置的资源管理模块删除待退出源数据库在本地的相关信息,比如:源数据库ID、源数据库名、源数据库类型、源数据库IP地址、使用待退出源数据库的目标数据库ID、目标数据库名、目标据库类型、以及目标数据库IP地址等。
这里,调度装置和所述数据共享装置获知源数据库退出的方法还包括:当源数据库因为断电或操作问题等原因,在退出前没有向调度装置和所述数据共享装置发送退出通知时,所述数据共享装置在利周期性获取源数据库信息的过程中,如果不能得到源数据库的响应,则认为源数据库退出了本系统,所述数据共享装置将源数据库退出的通知发送给调度装置。
所述数据共享装置在获知源数据库退出系统的通知后,将此消息告知使用待退出源数据库的相关目标数据库。
步骤603:调度装置收到信息后,更新自身当前保存的资源情况信息。
具体地,调度装置的资源管理模块收到所述数据共享装置的资源情况信息后,更新自身当前保存的资源情况信息。
这里,在实际应用时,由于待退出源数据库可能归属于多个数据共享装置,因此,调度装置可能会收到多个数据共享装置发送的资源情况信息,调度装置收到这些资源情况信息后,会逐个予以更新。
其中,当待退出源数据库归属于多个数据共享装置时,如果超过一定的时间阈值,仍有部分数据共享装置未向调度装置发送更新后的资源情况信息,则调度装置会向未发送资源情况信息的数据共享装置查询资源情况信息,从而获得未发送资源情况信息的数据共享装置更新后的资源情况信息。
实施例三:
本实施例数据共享装置间发生任务调度的处理过程,如图7所示,包括以下步骤:
步骤701:调度装置向资源使用情况超过设置的阈值的数据共享装置发送任务调度请求;
这里,调度装置向资源使用情况超过设置的阈值的数据共享装置发送任务调度请求的条件,为:调度装置对自身所管理的所有数据共享装置的资源情况信息进行实施监控,当数据共享装置的资源使用情况超过设置的阈值时,调度装置会向资源使用情况超过设置的阈值的数据共享装置发送任务调度请求。其中,所述资源使用情况具体可以是:数据共享装置的CPU使用率、内存占用率、存储占用率等参数中的任意一项。这里,根据需要设置阈值。
步骤702:所述资源使用情况超过设置的阈值的数据共享装置收到任务调度请求后,根据自身的资源情况信息,判断是否需要进行任务转移,并将判断结果反馈给调度装置;
这里,所述判断是否需要进行任务转移,具体为:
判断自身的资源使用情况是否超过设置的阈值,如果是,则确定需要进行任务转移,如果不是,则确定不需要进行任务转移。
当所述资源使用情况超过设置的阈值的数据共享装置确定需要进行任务转移时,则所述判断结果为需要进行任务转移,相应的,当所述资源使用情况超过设置的阈值的数据共享装置确定不需要进行任务转移时,则所述判断结果为不需要进行任务转移。
其中,所述阈值与调度装置设置的阈值大小相同;所述资源使用情况具体可以是:CPU使用率、内存占用率、存储占用率等参数中的任意一项。
步骤703:当所述资源使用情况超过设置的阈值的数据共享装置反馈的判断结果为需要进行任务调度时,调度装置向自身管理的负载最小的数据共享装置发送任务调度请求;
这里,调度装置可以根据自身存储的各数据共享装置的资源情况信息,比如:根据CPU使用率、内存占用率、以及存储占用率等参数,查询到负载最小的数据共享装置,从而向负载最小的数据共享装置发送任务调度请求。
步骤704:所述负载最小的数据共享装置收到任务调度请求后,根据自身的资源使用情况,判断是否支持任务转移,并将判断结果反馈给调度装置;
这里,所述负载最小的数据共享装置可以根据自身的资源使用情况,比如:根据CPU使用率、内存占用率、以及存储占用率等参数,判断是否有能力支持新的任务,并将判断结果反馈给调度装置。
当所述负载最小的数据共享装置确定有能力支持新的任务时,所述判断结果为支持任务转移;相应的,当所述负载最小的数据共享装置确定没有能力支持新的任务时,所述判断结果为不支持任务转移。当判断结果为不支持任务转移时,调度装置可以向自身管理的负载次小的数据共享装置发送任务调度请求,以此类推,直至将所述资源使用情况超过设置的阈值的数据共享装置的需要转移的数据共享任务转移出去为止。当调度装置确定没有数据共享装置可以承担所述资源使用情况超过设置的阈值的数据共享装置的需要转移的数据共享任务时,则不进行任何操作。
步骤705:当所述负载最小的数据共享装置反馈的判断结果为支持任务转移时,调度装置向所述资源使用情况超过设置的阈值的数据共享装置发送调度命令;
这里,所述调度命令至少包含如下信息:需要转移的源数据库列表和基本信息、以及使用或访问所述需要转移的源数据库的目标数据库列表和基本信息。其中,所述需要转移的源数据库列表和基本信息可以包括:源数据库ID、以及源数据库IP地址等;所述使用或访问所述需要转移的源数据库的目标数据库列表和基本信息可以包括:目标数据库ID、以及目标数据库IP地址等。
本步骤中,使用源数据库的目标数据库数量及访问流量,是决定数据共享装置负载的主要因素。而在转移目标数据库列表的过程中,对于单个源数据库来说,可以转移使用它的部分或全部目标数据库。
步骤706:所述资源使用情况超过设置的阈值的数据共享装置收到调度命令后,根据调度命令将相关信息发送给所述负载最小的数据共享装置;
这里,所述调度命令包含:所述负载最小的数据共享装置的IP地址,所述资源使用情况超过设置的阈值的数据共享装置据此可以将相关信息发送给所述负载最小的数据共享装置。
其中,所述相关信息至少包含:需要转移的源数据库列表和基本信息、以及使用或访问所述需要转移的源数据库的目标数据库列表和基本信息。其中,所述需要转移的源数据库列表和基本信息可以包括:源数据库ID、源数据库名、源数据库类型、以及源数据库IP地址等;所述使用或访问所述需要转移的源数据库的目标数据库列表和基本信息可以包括:目标数据库ID、目标数据库名、目标据库类型、以及目标数据库IP地址等。需要转移的源数据库为所述资源使用情况超过设置的阈值的数据共享装置所承担的任务中的一部分。
步骤707:所述负载最小的数据共享装置收到所述相关信息后,向所述资源使用情况超过设置的阈值的数据共享装置发送接收完毕通知;
步骤708:所述资源使用情况超过设置的阈值的数据共享装置收到通知后,向调度装置转发所述接收完毕通知;
步骤709:调度装置收到通知后,向需要转移的源数据库发送命令,使其与所述负载最小的数据共享装置建立安全连接;
步骤710:所述需要转移的源数据库收到命令后,与所述负载最小的数据共享装置建立安全连接,之后执行步骤711;
这里,所述需要转移的源数据库与所述负载最小的数据共享装置建立以数据共享为目的的安全连接的方法,属于现有技术。
步骤711:调度装置向使用或访问所述需要转移的源数据库的目标数据库发送数据共享装置更换的通知;
这里,所述数据共享装置更换的通知,是指:由所述资源使用情况超过设置的阈值的数据共享装置更换为所述负载最小的数据共享装置的通知,即:目标数据库在此次调度操作之后,通过所述负载最小的数据共享装置访问所述需要转移的源数据库的数据。
步骤712:所述使用或访问所述需要转移的源数据库的目标数据库收到通知后,向所述负载最小的数据共享装置发送数据请求。
在本步骤之后,所述使用或访问所述需要转移的源数据库的目标数据库通过所述负载最小的数据共享装置访问需要转移的源数据库的方法,与现有技术相同。
相应的,调度装置会根据所述负载最小的数据共享装置及所述资源使用情况超过设置的阈值的数据共享装置所上报的自身的资源情况信息,更新自身保存的资源情况信息。
实施例四:
本实施例目标数据库向系统查询数据的处理过程,即:当目标数据库首次向系统查询数据时,调度装置为目标数据库查找源数据库及数据共享装置,并协助目标数据库与数据共享装置间建立安全连接的过程,如图8所示,包括以下步骤:
步骤801:当目标数据库首次向系统查询数据时,目标数据库向调度装置发送第一数据查询请求;
这里,所述第一数据查询请求包括:目标数据库信息、以及请求的数据信息;其中,所述目标数据库信息包括:目标数据库ID、目标数据库名、目标据库类型、以及目标数据库IP地址等;所述请求的数据信息包括:数据名称、数据类型、以及数据长度等。
步骤802:调度装置收到第一数据查询请求后,根据自身当前保存的资源情况信息,查找到满足所述第一数据查询请求的源数据库及数据共享装置,之后调度装置向满足所述第一数据查询请求的数据共享装置发送第二数据查询请求;
具体地,调度装置根据所述第一数据查询请求,查找满足所述第一数据查询请求的源数据库,可能会查找到一个以上源数据库,之后调度装置在满足所述第一数据查询请求的源数据库所归属的数据共享装置中选择负载最小的数据共享装置。
其中,在选择负载最小的数据共享装置时,所述调度模块遍历调度装置的资源管理模块保存的各数据共享装置的资源情况信息,根据各数据共享装置的运行情况信息,综合CPU使用率、内存占用率、以及存储占用率等信息,选择出负载最低小数据共享装置,作为满足所述第一数据查询请求的数据共享装置。
所述第二数据查询请求包括:目标数据库信息以及要访问的源数据库信息。其中,所述目标数据库信息包括:目标数据库ID、目标数据库名、目标据库类型、以及目标数据库IP地址等;所述要访问的源数据库信息包括:源数据库ID、源数据库名、源数据库类型、以及源数据库IP地址等。
步骤803:所述满足所述第一数据查询请求的数据共享装置收到第二数据查询请求后,向所述目标数据库所请求的源数据库发送第三数据查询请求;
这里,所述第三数据查询请求包括:目标数据库信息;其中,所述目标数据库信息包括:目标数据库ID、目标数据库名、目标据库类型、以及目标数据库IP地址等。
步骤804:所述目标数据库所请求的源数据库收到请求后,向所述满足所述第一数据查询请求的数据共享装置发送第一应答信息;
这里,所述第一应答信息包括:是否接受所述目标数据库的数据查询请求。
步骤805:所述满足所述第一数据查询请求的数据共享装置收到第一应答信息后,向调度装置发送第二应答信息;
这里,所述第二应答信息包括:所述目标数据库所请求的源数据库是否接受所述目标数据库的数据查询请求、所述目标数据库所请求的源数据库信息。其中,所述源数据库信息包括:源数据库ID、源数据库名、源数据库类型、以及源数据库IP地址等。
步骤806:调度装置收到第二应答信息后,向所述目标数据库发送第三应答信息;
这里,所述第三应答信息包括:所述目标数据库所请求的源数据库是否接受所述目标数据库的数据查询请求、所述目标数据库所请求的源数据库信息、以及所述满足所述第一数据查询请求的数据共享装置信息。其中,所述源数据库信息包括:源数据库ID、源数据库名、源数据库类型、以及源数据库IP地址等;所述数据共享装置信息包括:数据共享装置ID、以及数据共享装置IP地址等。
步骤807:所述目标数据库收到第三应答信息后,向所述第一数据查询请求的数据共享装置发送建立连接请求和数据查询请求;
这里,所述目标数据库根据所述第三应答信息,向所述第一数据查询请求的数据共享装置发送建立连接请求;
步骤808:所述满足所述第一数据查询请求的数据共享装置收到请求后,与所述目标数据库建立安全连接,之后向所述目标数据库所请求的源数据库查询数据发送查询请求;
步骤809:所述目标数据库所请求的源数据库收到查询请求后,进行查询,并将查询结果发送给所述满足所述第一数据查询请求的数据共享装置;
步骤810:所述满足所述第一数据查询请求的数据共享装置将接收到的数据进行处理,并发送给所述目标数据库;
这里,步骤807~810为目标数据库通过数据共享装置向源数据库获取数据的过程,属于现有技术,因此未对处理过程作详细描述。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。

Claims (25)

1.一种调度数据共享装置的方法,其特征在于,该方法包括:
调度装置对自身所管理的所有数据共享装置进行实时监控,当所管理的数据共享装置的资源使用情况超过设置的阈值时,根据自身当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置;
调度装置调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置。
2.根据权利要求1所述的方法,其特征在于,所述资源使用情况超过设置的阈值的数据共享装置的数据共享任务转移后,该方法进一步包括:
调度装置通知与转移的数据共享任务相关的目标数据库。
3.根据权利要求2所述的方法,其特征在于,所述为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置,为:
根据自身当前保存的资源情况信息,选择负载最小的数据共享装置,作为承担转移的数据共享任务的数据共享装置。
4.根据权利要求1所述的方法,其特征在于,所述调度装置调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置,为:
调度装置确定所述选择的数据共享装置能承担所述需要转移的数据共享任务后,向所述资源使用情况超过设置的阈值的数据共享装置发送调度命令;
所述资源使用情况超过设置的阈值的数据共享装置收到调度命令后,通过与所述选择的数据共享装置进行交互,将需要转移的数据共享任务,转移至所述选择的数据共享装置。
5.根据权利要求1所述的方法,其特征在于,该方法进一步包括:
当有新源数据库加入时,调度装置根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的数据共享装置建立安全连接。
6.根据权利要求5所述的方法,其特征在于,所述调度装置根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,为:
调度装置根据自身当前保存的资源情况信息,选择负载最小的数据共享装置,作为所述新源数据库的归属数据共享装置。
7.根据权利要求1所述的方法,其特征在于,该方法进一步包括:
当获知有源数据库退出时,调度装置更新自身当前保存的资源情况信息。
8.根据权利要求7所述的方法,其特征在于,所述更新自身保存的资源情况信息,包括:
清除待退出源数据库的相关信息,并更新所述待退出源数据库所归属的数据共享装置的运行情况信息。
9.根据权利要求7所述的方法,其特征在于,所述获知有源数据库退出,为:
所述待退出源数据库在执行退出操作或进行关机操作前,向调度装置和自身所归属的数据共享装置发送退出通知;或者,
所述待退出源数据库所归属的数据共享装置在周期性获取源数据库信息的过程中未得到所述待退出数据库的响应时,向调度装置发送所述待退出源数据库的退出通知。
10.根据权利要求1所述的方法,其特征在于,该方法进一步包括:
调度装置收到目标数据库的首次数据查询请求时,根据自身当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的数据共享装置建立安全连接。
11.根据权利要求10所述的方法,其特征在于,所述根据自身当前保存的资源情况信息及所述新数据查询请求,为所述目标数据库选择相应的源数据库及源数据库所归属的数据共享装置,为:
调度装置根据自身当前保存的资源情况信息,选择满足所有所述数据查询请求的源数据库;
之后在选择的所有满足所述数据查询请求的源数据库所归属的数据共享装置中,选择负载最小的数据共享装置作为所述目标数据库确定的数据共享装置。
12.根据权利要求10所述的方法,其特征在于,在协助所述目标数据库与确定的数据共享装置建立安全连接之前,该方法进一步包括:调度装置向所述目标数据库发送确定的源数据库及数据共享装置的相关信息。
13.根据权利要求1至12任一项所述的方法,其特征在于,该方法进一步包括:
调度装置所管理的数据共享装置周期性、和/或事件性向调度装置上报自身的资源情况信息;
调度装置根据收到的资源情况信息,更新自身当前保存的资源情况信息。
14.一种调度数据共享装置的调度装置,其特征在于,该调度装置包括:资源管理模块、以及调度模块;其中,
资源管理模块,用于保存资源情况信息;
调度模块,用于对自身所管理的所有数据共享装置进行实时监控,当所管理的数据共享装置的资源使用情况超过设置的阈值时,根据资源管理模块当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的数据共享装置选择承担转移的数据共享任务的数据共享装置;并调度所述资源使用情况超过设置的阈值的数据共享装置将需要转移的数据共享任务,转移至所述选择的数据共享装置。
15.根据权利要求14所述的装置,其特征在于,所述调度模块,还用于所述资源使用情况超过设置的阈值的数据共享装置的数据共享任务转移后,通知与转移的数据共享任务相关的目标数据库。
16.根据权利要求14或15所述的装置,其特征在于,所述调度模块,还用于当有新源数据库加入系统时,根据资源管理模块当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的数据共享装置建立安全连接。
17.根据权利要求14或15所述的装置,其特征在于,该调度装置进一步包括:处理模块,用于收到目标数据库的首次数据查询请求时,根据资源管理模块当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的数据共享装置建立安全连接。
18.根据权利要求17述的装置,其特征在于,所述处理模块,还用于在协助所述目标数据库与确定的数据共享装置建立安全连接之前,向所述目标数据库发送确定的源数据库及数据共享装置的相关信息。
19.根据权利要求14或15所述的装置,其特征在于,所述资源管理模块,还用于根据调度装置所管理的数据共享装置周期性或事件性上报的资源情况信息,更新自身当前保存的资源情况信息;和/或,当获知有源数据库退出系统时,更新自身当前保存的资源情况信息。
20.一种调度数据共享装置的系统,其特征在于,该系统包括:调度装置、第一数据共享装置、以及第二数据共享装置;其中,
调度装置,用于对自身所管理的所有数据共享装置进行实时监控,当所管理的第一数据共享装置的资源使用情况超过设置的阈值时,根据自身当前保存的资源情况信息,为所述资源使用情况超过设置的阈值的第一数据共享装置选择承担转移的数据共享任务的数据共享装置;并调度所述资源使用情况超过设置的阈值的第一数据共享装置将需要转移的数据共享任务,转移至所述选择的第二数据共享装置。
21.根据权利要求20所述的系统,其特征在于,该系统进一步包括:目标数据库,用于接收调度装置发送的通知;
所述调度装置,还用于所述资源使用情况超过设置的阈值的第一数据共享装置的数据共享任务转移后,通知与转移的数据共享任务相关的目标数据库。
22.根据权利要求20或21所述的系统,其特征在于,所述调度装置还用于当有新源数据库加入时,根据自身当前保存的资源情况信息,为所述新源数据库选择相应的数据共享装置,并协助所述新源数据库与选择的第一数据共享装置或第二数据共享装置建立安全连;和/或,当获知有源数据库退出时,更新自身当前保存的资源情况信息;和/或,收到目标数据库的首次数据查询请求时,根据自身当前保存的资源情况信息及所述数据查询请求,为所述目标数据库确定相应的源数据库及源数据库所归属的数据共享装置;并协助所述目标数据库与确定的第一数据共享装置或第二数据共享装置建立安全连接。
23.根据权利要求22所述的系统,其特征在于,该系统进一步包括源数据库,用于在执行退出操作或进行关机操作前,向调度装置和自身所归属的第一数据共享装置或第二数据共享装置发送退出通知;
所述调度装置,还用于接收源数据库发送的退出通知;
所述第一数据共享装置,还用于接收源数据库发送的退出通知;或者,
所述第二数据共享装置,还用于接收源数据库发送的退出通知。
24.根据权利要求22所述的系统,其特征在于,所述第一数据共享装置,还用于在周期性获取源数据库信息的过程中未得到所述待退出数据库的响应时,向调度装置发送所述待退出源数据库的退出通知;或者,
所述第二数据共享装置,还用于在周期性获取源数据库信息的过程中未得到所述待退出数据库的响应时,向调度装置发送所述待退出源数据库的退出通知;
所述调度装置,还用于接收第一数据共享装置或第二数据共享装置发送的退出通知。
25.根据权利要求20或21所述的系统,其特征在于,
所述第一数据共享装置,还用于周期性、和/或事件性向调度装置上报自身的资源情况信息;
所述第二数据共享装置,还用于周期性、和/或事件性向调度装置上报自身的资源情况信息;
所述调度装置,还用于根据收到的资源情况信息,更新自身当前保存的资源情况信息。
CN2011104447190A 2011-12-27 2011-12-27 一种调度数据共享装置的方法及系统 Pending CN103186536A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2011104447190A CN103186536A (zh) 2011-12-27 2011-12-27 一种调度数据共享装置的方法及系统
PCT/CN2012/072568 WO2013097363A1 (zh) 2011-12-27 2012-03-19 一种调度数据共享装置的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011104447190A CN103186536A (zh) 2011-12-27 2011-12-27 一种调度数据共享装置的方法及系统

Publications (1)

Publication Number Publication Date
CN103186536A true CN103186536A (zh) 2013-07-03

Family

ID=48677707

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011104447190A Pending CN103186536A (zh) 2011-12-27 2011-12-27 一种调度数据共享装置的方法及系统

Country Status (2)

Country Link
CN (1) CN103186536A (zh)
WO (1) WO2013097363A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103488728A (zh) * 2013-09-17 2014-01-01 北京思特奇信息技术股份有限公司 一种业务系统中进程数量的动态伸缩调整方法及装置
CN109769020A (zh) * 2019-01-09 2019-05-17 网宿科技股份有限公司 Cdn集群加速服务资源管理方法及装置、电子设备和存储介质
CN110263099A (zh) * 2019-06-21 2019-09-20 北京小米移动软件有限公司 数据同步的流量调整方法、装置、设备及存储介质
CN111695806A (zh) * 2020-06-11 2020-09-22 湖南大学 一种资源分配方法、装置设备和存储介质
CN113194103A (zh) * 2021-06-30 2021-07-30 国汽智控(北京)科技有限公司 基于计算处理设备和服务器的通信方法、系统
CN116069869A (zh) * 2023-03-24 2023-05-05 江苏曼荼罗软件股份有限公司 一种用于多设备的数据获取方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006055765A2 (en) * 2004-11-19 2006-05-26 Network Appliance, Inc. System and method for real-time balancing of user workload across multiple storage systems with shared back end storage
WO2006081294A2 (en) * 2005-01-27 2006-08-03 Network Appliance, Inc. Coordinated shared storage architecture
CN1852502A (zh) * 2006-05-29 2006-10-25 杭州华为三康技术有限公司 一种集群系统中实现负载均衡的方法、系统和存储控制器
CN1859804A (zh) * 2006-03-29 2006-11-08 华为技术有限公司 一种负载控制方法
CN102035884A (zh) * 2010-12-03 2011-04-27 华中科技大学 一种云存储系统及其数据部署方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006055765A2 (en) * 2004-11-19 2006-05-26 Network Appliance, Inc. System and method for real-time balancing of user workload across multiple storage systems with shared back end storage
WO2006081294A2 (en) * 2005-01-27 2006-08-03 Network Appliance, Inc. Coordinated shared storage architecture
CN1859804A (zh) * 2006-03-29 2006-11-08 华为技术有限公司 一种负载控制方法
CN1852502A (zh) * 2006-05-29 2006-10-25 杭州华为三康技术有限公司 一种集群系统中实现负载均衡的方法、系统和存储控制器
CN102035884A (zh) * 2010-12-03 2011-04-27 华中科技大学 一种云存储系统及其数据部署方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张友生: "《系统分析师教程》", 28 February 2010, 清华大学出版社 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103488728A (zh) * 2013-09-17 2014-01-01 北京思特奇信息技术股份有限公司 一种业务系统中进程数量的动态伸缩调整方法及装置
CN109769020A (zh) * 2019-01-09 2019-05-17 网宿科技股份有限公司 Cdn集群加速服务资源管理方法及装置、电子设备和存储介质
CN109769020B (zh) * 2019-01-09 2021-09-24 网宿科技股份有限公司 Cdn集群加速服务资源管理方法及装置、电子设备和存储介质
CN110263099A (zh) * 2019-06-21 2019-09-20 北京小米移动软件有限公司 数据同步的流量调整方法、装置、设备及存储介质
CN110263099B (zh) * 2019-06-21 2021-07-13 北京小米移动软件有限公司 数据同步的流量调整方法、装置、设备及存储介质
CN111695806A (zh) * 2020-06-11 2020-09-22 湖南大学 一种资源分配方法、装置设备和存储介质
CN111695806B (zh) * 2020-06-11 2023-05-12 湖南大学 一种资源分配方法、装置设备和存储介质
CN113194103A (zh) * 2021-06-30 2021-07-30 国汽智控(北京)科技有限公司 基于计算处理设备和服务器的通信方法、系统
CN116069869A (zh) * 2023-03-24 2023-05-05 江苏曼荼罗软件股份有限公司 一种用于多设备的数据获取方法及系统
CN116069869B (zh) * 2023-03-24 2023-06-06 江苏曼荼罗软件股份有限公司 一种用于多设备的数据获取方法及系统

Also Published As

Publication number Publication date
WO2013097363A1 (zh) 2013-07-04

Similar Documents

Publication Publication Date Title
CN100411341C (zh) 一种并行下载方法和终端
CN102291416B (zh) 一种客户端与服务器端双向同步的方法及系统
US8930521B2 (en) Method, apparatus, and computer program product for enabling monitoring of a resource
CN103186536A (zh) 一种调度数据共享装置的方法及系统
CN103209223A (zh) 分布式应用会话信息共享方法、系统和应用服务器
CN102591921A (zh) 个人数据中心内的调度和管理
CN102333130A (zh) 一种访问缓存服务器的方法、系统及缓存智能调度器
CN104735095A (zh) 一种云计算平台作业调度方法及装置
CN105373420A (zh) 数据传输方法及装置
CN109783151B (zh) 规则变更的方法和装置
US11922059B2 (en) Method and device for distributed data storage
KR101416280B1 (ko) 이벤트 처리 시스템 및 방법
CN103164262B (zh) 一种任务管理方法及装置
CN112630557A (zh) 设备状态检测方法、装置、设备及介质
JP2006235831A (ja) 状態管理装置および方法およびプログラム
CN102103633B (zh) 基于使用模式改进信息系统性能的方法和系统
CN103685576A (zh) 一种cdn节点的交互方法及cdn管理系统
AU2014305966A1 (en) Managing data feeds
EP3373608B1 (en) Method and apparatus for acquiring resources
CN111209333B (zh) 数据更新方法、装置、终端及存储介质
CN102170476B (zh) 一种基于云节点自主学习的云计算方法和装置
CN109542841A (zh) 集群中创建数据快照的方法及终端设备
CN115878121A (zh) 终端代码增量编译方法、系统、装置、服务器和存储介质
CN114237858A (zh) 一种基于多集群网络的任务调度方法及系统
JP2002259197A (ja) アクティブコンテンツキャッシュ制御システムと、アクティブコンテンツキャッシュ制御装置及び方法と、アクティブコンテンツキャッシュ制御処理用プログラム及びそのプログラムの記録媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20130703