CN103685351B - 一种基于云计算平台的缓存服务节点的调度方法和设备 - Google Patents
一种基于云计算平台的缓存服务节点的调度方法和设备 Download PDFInfo
- Publication number
- CN103685351B CN103685351B CN201210324570.7A CN201210324570A CN103685351B CN 103685351 B CN103685351 B CN 103685351B CN 201210324570 A CN201210324570 A CN 201210324570A CN 103685351 B CN103685351 B CN 103685351B
- Authority
- CN
- China
- Prior art keywords
- service node
- buffer service
- node
- identification information
- buffer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Memory System Of A Hierarchy Structure (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种基于云计算平台的缓存服务节点的调度方法和设备,主要内容包括:接收本地开发引擎确定的待存储数据的位置信息,根据预设的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息,并根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,将所述待存储数据存储至选择的缓存服务节点中,这样不仅能够避免开发者必须实时联网才能获得云计算运行引擎平台的缓存服务的情形,而且还能够为本地开发引擎提供多个缓存服务节点,降低单缓存服务节点故障引发的风险,提高使用云计算运行引擎平台中缓存服务节点灵活性和可靠性。
Description
技术领域
本发明涉及计算机缓存服务应用领域,尤其涉及一种基于云计算平台的缓存服务节点的调度方法和设备。
背景技术
随着计算机技术的不断发展,云计算技术已成为当今计算机信息技术发展的重要方向。所谓云计算技术是指基于互联网的相关服务的增加、使用和交付模式,通常涉及通过互联网来提供动态易扩展且虚拟化的网络资源。云计算技术在使用过程中主要分为三个方面:基础设施级服务、平台级服务和软件级服务,其中:平台级服务是指将软件研发的平台作为一种服务,并把各种服务资源开放式地提供给开发者,对使用的资源进行合理收费,同时对开发的应用程序进行托管运营和维护,例如:缓存服务。
缓存服务是云计算运行引擎平台为开发者提供的分布式缓存服务,用来以共享的方式缓存开发者的非关键性小数据。具体地,首先,开发者在开发云计算应用程序时,可通过申请获取使用云计算运行引擎平台中缓存提供的服务,包括:开通缓存服务、确定缓存服务节点、写缓存数据、读缓存数据、设置过期时间和关闭缓存服务等操作;其次,开发者通过标准缓存服务API接口将缓存的数据读写至申请的缓存服务节点中。
由于开发者需要共享缓存一些Key-value键值对形式的小数据,对缓存数据的一致性以及缓存速率要求都比较高,因此采用云计算运行引擎平台提供的缓存服务节点,不仅可以快速进行数据响应,而且可以减轻后台服务器的存储压力。
在现有技术中,使用云计算运行引擎平台提供的缓存服务的方式有两种:第一种方式是通过互联网直接使用云计算运行引擎平台提供的缓存服务节点;第二种方式是在开发者本地单机模拟云计算运行引擎平台提供的缓存服务节点。
具体地,第一种方式,即通过互联网直接使用云计算运行引擎平台提供的缓存服务节点,具体方式包括:
基于开发者本地的开发引擎统一集成开发工具,将开发完的云计算应用程序部署到云计算运行引擎平台后,通过查看云计算运行引擎平台的运行日志,确定进程调试使用云计算的缓存服务节点cache,如图1所示,为通过互联网使用云计算运行引擎平台缓存服务节点的示意图。
但是这种方式必须要求开发者在能够连接互联网的状态下,才可对申请的云计算运行引擎的缓存服务节点进行使用,这样对应用程序的调试环境提出了相对较高的要求;此外由于开发者技术水平参差不齐,有可能带有不好的编程习惯,往往对已使用过的缓存服务节点不能及时调用API方法释放相应的缓存资源,将造成云计算运行引擎平台中缓存资源的浪费。
为了克服第一种方式存在的缺陷,在实际应用中出现了第二种方式,即在开发者本地单机模拟云计算运行引擎平台提供的缓存服务节点,具体包括:
在本地预安装一个能够模拟云计算引擎平台提供的缓存服务的缓存服务节点cache,这样将通过互联网使用云计算引擎平台提供的缓存服务转变成为调用本地的缓存服务,如图2所示,为本地单机模拟云计算引擎平台提供的缓存服务节点的示意图,这样不仅实现了对缓存服务节点应用的实时监控,而且也能够避免由于程序运行结束不及时释放缓存服务节点而对云计算引擎平台的缓存资源造成的浪费情况。
但是,第二种方式在使用过程中没有考虑到大量云计算应用程序集中使用缓存服务节点的情形,有限地在本地安装一个模拟的缓存服务节点cache,将无法满足开发者的并发请求,并且,一旦模拟的缓存服务节点cache出现故障,将会导致运行数据的丢失,因此,采用第二种方式使用云计算运行引擎平台提供的缓存服务存在针对集群系统的可靠性较差,单一的缓存服务存在较高的单点故障的风险。
由此可见,现有技术中,在使用云计算运行引擎平台中的缓存服务时,存在调度缓存服务节点的灵活性和可靠性差,导致使用单个缓存服务节点时面临较大的单点故障风险。
发明内容
本发明实施例提供了一种基于云计算平台的缓存服务节点的调度方法和设备,用于解决现有技术中在使用云计算运行引擎平台中的缓存服务时,存在调度缓存服务节点的灵活性和可靠性差,导致使用缓存服务节点面临较大的单点故障风险的问题。
一种基于云计算平台的缓存服务节点的调度方法,所述方法包括:
接收本地开发引擎确定的待存储数据的位置信息,所述待存储数据是在本地开发引擎中调试云计算应用程序时产生的,所述位置信息是待存储数据存储至云计算运行引擎平台中缓存服务节点的标识信息;
根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息;
根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,并将所述待存储数据存储至选择的缓存服务节点中。
一种基于云计算平台的缓存服务节点的调度设备,所述设备包括:
接收模块,用于接收本地开发引擎确定的待存储数据的位置信息,所述待存储数据是在本地开发引擎中调试云计算应用程序时产生的,所述位置信息是待存储数据存储至云计算运行引擎平台中缓存服务节点的标识信息;
确定模块,用于根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息;
调度模块,用于根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,并将所述待存储数据存储至选择的缓存服务节点中。
本发明有益效果如下:
本发明实施例在本地开发引擎平台中模拟云计算运行引擎平台中的多个缓存服务节点,接收本地开发引擎确定的待存储数据的位置信息,根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息,并根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,并将所述待存储数据存储至选择的缓存服务节点中,这样不仅能够避免开发者必须实时联网才能获得云计算运行引擎平台的缓存服务的情形,而且还能够为本地开发引擎提供多个缓存服务节点,降低单缓存服务节点故障引发的风险,提高使用云计算运行引擎平台中缓存服务节点灵活性和可靠性。
附图说明
图1为通过互联网使用云计算运行引擎平台缓存服务节点的示意图;
图2为本地单机模拟云计算引擎平台提供的缓存服务节点的示意图;
图3为本发明实施例一的一种基于云计算平台的缓存服务节点的调度方法的示意图;
图4为各个缓存服务节点在本地缓存节点集群中的分布示意图;
图5为本发明实施例二的一种基于云计算平台的缓存服务节点的调度方法的示意图;
图6为拆分后的环形缓存节点群中各个子缓存服务节点的分布示意图;
图7为本地开发引擎使用本地缓存节点集群的示意图;
图8为本实施例三的一种基于云计算平台的缓存服务节点的调度设备的结构示意图。
具体实施方式
为了实现本发明的目的,本发明实施例提供了一种基于云计算平台的缓存服务节点的调度方法和设备,通过接收本地开发引擎确定的待存储数据的位置信息,根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息,并根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,并将所述待存储数据存储至选择的缓存服务节点中。
与现有技术相比,通过在本地开发引擎平台中模拟云计算运行引擎平台中的多个缓存服务节点,根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定待存储数据的位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息,再根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,并将所述待存储数据存储至选择的缓存服务节点中,这样不仅能够避免开发者必须实时联网才能获得云计算运行引擎平台的缓存服务的情形,而且还能够为本地开发引擎提供多个缓存服务节点,降低单缓存服务节点故障引发的风险,提高使用云计算运行引擎平台中缓存服务节点灵活性和可靠性。
下面结合说明书附图对本发明的各实施例进行详细描述。
实施例一:
如图3所示,为本发明实施例一的一种基于云计算平台的缓存服务节点的调度方法的示意图,所述方法包括:
步骤101:预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系。
在步骤101中,预设云计算运行引擎平台中一个缓存服务节点的标识信息与本地缓存节点集群中的至少两个缓存服务节点的标识信息之间的映射关系。
也就是说,在本地缓存节点集群中模拟云计算运行引擎平台中的缓存服务节点时,建立本地缓存服务节点集群中的多个缓存服务节点的标识信息与云计算运行引擎平台中的一个缓存服务节点的标识信息之间的映射关系,这种多对一的映射关系,确保了缓存至本地缓存节点集群中的数据在存储时的灵活性,同时避免了现有技术中存储时出现单点故障的风险。
具体地,当本地缓存服务节点集群中的多个缓存服务节点的标识信息与云计算运行引擎平台中的一个缓存服务节点的标识信息之间存在映射关系时,设定本地缓存节点集群中的多个缓存服务节点的标识信息之间具有主从映射关系,其中,一个标识信息对应主缓存服务节点,其他标识信息对应从缓存服务节点。
所述多个缓存服务节点表示至少两个缓存服务节点。
步骤102:确定本地缓存节点集群中各个缓存服务节点的标识信息。
在步骤102中,由于云计算运行引擎平台中的缓存服务是本地模拟的目标缓存服务,利用云计算运行引擎平台中分布式缓存服务方式,为本地开发引擎的应用程序提供缓存服务,这样就需要在本地缓存节点集群中模拟云计算运行引擎平台中的各个缓存服务节点,模拟的方式可以通过步骤101的方式实现。
所述本地缓存节点集群可以是环形缓存节点集群,也可以是其他形式的缓存节点集群。当本地的缓存节点集群是环形缓存节点集群时,将环形缓存节点集群圆周周长设置为232,保证了本地缓存节点集群中有足够的缓存节点供本地开发引擎使用,其中,所有的模拟云计算运行引擎平台中的缓存服务节点都将分布在该环形缓存节点集群中,如图4所示,为各个缓存服务节点在本地缓存节点集群中的分布示意图。
具体地,确定本地缓存节点集群中多个缓存服务节点的标识信息的方式为:
首先,确定一个IP地址。
其中,所述IP地址是本地缓存节点集群中的一个缓存服务节点对应与云计算运行引擎平台中的一个缓存服务节点的IP地址。
具体地,为了对云计算运行引擎平台中缓存服务节点进行区别,可以通过为每一个缓存服务节点分配相应的IP地址,当开发者需要使用云计算运行引擎平台中缓存服务节点时,从云计算运行引擎平台中获取该缓存服务节点的IP地址,并通过互联网将需要缓存的数据存储在所述IP地址对应的缓存服务节点中,因此,在模拟云计算运行引擎平台中的缓存服务节点时,可以在云计算运行引擎平台中获取每一个缓存服务节点的IP地址。
例如:通过模拟方式得到本地缓存节点集群中的缓存服务节点A对应与云计算运行引擎平台中的缓存服务节点11,此时确定的IP地址就是云计算运行引擎平台中的缓存服务节点11在云计算运行引擎平台中的IP地址。
其次,利用所述IP地址进行哈希运算后得到相应的第一哈希值。
具体地,利用哈希算法对得到的每一个缓存服务节点的IP地址进行哈希运算,得到相应的第一哈希值。
需要说明的是,这里的计算所使用的算法不一定必须是哈希算法,还可以是其他算法,为了保证缓存服务节点能够均匀的分布在本地缓存节点集群中,优选哈希算法。
最后,根据得到的第一哈希值确定本地缓存节点集群中中该缓存服务节点的标识信息。
具体地,将得到的第一哈希值作为本地缓存节点集群中该缓存节点的标识信息。
步骤103:接收本地开发引擎确定的待存储数据的位置信息。
其中,所述待存储数据是在本地开发引擎中调试云计算应用程序时产生的,所述位置信息是待存储数据存储至云计算运行引擎平台中缓存服务节点的标识信息。
在步骤103中,所述调试云计算应用程序时产生的待存储的数据可以是Key-value键值对形式的非关键性小数据。由于缓存服务是以共享的方式为开发者Key-value键值对形式的非关键性小数据提供服务,因此,需要为本地开发引擎中的非关键性小数据确定相应的缓存服务节点,以方便在该缓存服务节点存放非关键性小数据。
在为本地开发引擎中的非关键性小数据确定相应的缓存服务节点之前,首先需要确定该待存储数据待存储的位置信息,具体包括:
首先,确定在本地开发引擎中调试云计算应用程序时产生的待存储数据的属性值。
具体地,针对待存储的每一个非关键性小数据,查找与其对应的Key值,并将找到Key值作为该数据的属性信息。
需要说明的是,这里涉及的数据的属性值不限于Key值,还可以是其他表征数据自身属性的参数值。
其次,利用预设的哈希算法对确定的所述属性值进行哈希运算得到第二哈希值。
需要说明的是,上述计算所使用的算法不一定必须是哈希算法,还可以是其他算法,为了保证数据能够准确地确定待存储的缓存服务节点,优选与确定缓存服务节点分布位置相同的算法--哈希算法。
最后,将所述第二哈希值作为该待存储数据的位置信息。
由于在现有技术中待存储数据将存放至云计算运行引擎平台中的缓存服务节点中,因此,确定的待存储数据的位置信息可以用来确定存储在云计算运行引擎平台中的哪个缓存服务节点上,因此,所述位置信息是待存储数据存储至云计算运行引擎平台中缓存服务节点的标识信息。
在确定待存储数据的位置信息之后,将通过该位置信息得到待存储数据存放的云计算运行引擎平台中缓存服务节点的标识信息。
步骤104:根据步骤101预设的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息。
步骤105:根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点。
较优地,当确定的多个缓存服务节点的标识信息之间具有主从映射关系时,从确定的多个缓存服务节点的标识信息中选择至少两个缓存服务节点,具体包括:从确定的多个缓存服务节点的标识信息中选择一个主缓存服务节点和该主缓存服务节点对应的一个从缓存服务节点。
步骤106:将所述待存储数据存储至选择的缓存服务节点中。
较优地,当选择的缓存服务节点中包含一个主缓存服务节点和一个从缓存服务节点时,将所述待存储数据存储至选择的主缓存服务节点中,并将该主缓存服务节点中存储的数据备份至选择的从缓存服务节点中。
通过本实施例一的方案,在本地开发引擎平台中模拟云计算运行引擎平台中的多个缓存服务节点,接收本地开发引擎确定的待存储数据的位置信息,根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息,并根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,并将所述待存储数据存储至选择的缓存服务节点中,这样不仅能够避免开发者必须实时联网才能获得云计算运行引擎平台的缓存服务的情形,而且还能够为本地开发引擎提供多个缓存服务节点,降低单缓存服务节点故障引发的风险,提高使用云计算运行引擎平台中缓存服务节点灵活性和可靠性。
实施例二:
如图5所示,为本发明实施例二的一种基于云计算平台的缓存服务节点的调度方法的示意图,本实施例二是对实施例一中各个步骤的详细描述。所述方法包括:
步骤201:预设云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系。
在步骤201中,为了保证本地开发引擎中的数据能够均匀分布在各模拟的缓存服务节点中,防止有些缓存服务节点存储数据较多,或者有些缓存服务节点存储数据较少的情形,在确定本地缓存节点集群中各个缓存服务节点的分布地址信息之前,可以为多个缓存服务节点设置虚拟缓存服务节点,具体方式为:
将本地缓存节点集群中的一个缓存服务节点拆分为多个子缓存服务节点,如图6所示,为拆分后的环形缓存节点群中各个子缓存服务节点的分布示意图。
其中,多个子缓存服务节点又称为该缓存服务节点的虚拟节点。
例如:缓存服务节点cache A,经过拆分操作后得到的两个子缓存服务节点cacheA1和cache A2,那么存储在cache A1和cache A2的数据最终都归属于cache A,这样通过变相增加子缓存服务节点的方法,使得数据分配到每个子缓存服务节点,在经过聚合后使得各个缓存服务节点中的数据达到平衡分布的目的。
需要说明的是,将缓存服务节点进行拆分的操作可以是在实施例一的步骤106之后执行,也可以是在实施例一的步骤101之前执行。在实施例一的步骤106之后执行,是当发现本地缓存节点集群中各个缓存服务节点中存储的数据不均衡时的一种补救措施,使得之后存储的数据能够保证本地缓存节点集群中各个缓存服务节点中存储的数量达到相对均衡;在实施例一的步骤101之前执行,是为了避免出现本地缓存节点集群中各个缓存服务节点中存储的数据不均衡这一现象的预防措施,具体执行的时间根据开发者的需要自行设置,这里不限于本实施例的这种执行顺序。
对于拆分得到的子缓存服务节点,需要预设云计算运行引擎平台中一个缓存服务节点的标识信息与本地缓存节点集群中的一个缓存服务节点对应的多个子缓存服务节点的标识信息之间的映射关系。
步骤202:确定本地缓存节点集群中各个缓存服务节点的标识信息。
在步骤202中,对于没有拆分的缓存服务节点的标识信息的确定方法可以通过实施例一步骤102的方式得到;但是对于拆分后的子缓存服务节点,通过以下方式确定本地缓存节点集群中的一个缓存服务节点对应的多个子缓存服务节点的标识信息:
首先,确定一个缓存服务节点对应与云计算运行引擎平台中的一个缓存服务节点的IP地址。
其次,将该IP地址和一个缓存服务节点对应的一个子缓存服务节点的序号进行组合后,利用哈希算法得到第三哈希值。
具体地,每一个缓存服务节点(例如:cacheA)的子缓存服务节点(cache A1)可以表示为:cache A的IP#1。
第三,根据得到的第三哈希值确定该子缓存服务节点在本地缓存节点集群中的标识信息。
具体地,对cache A的IP#1进行哈希运算,得到cacheA1对应的第三哈希值。
最后,根据得到的第三哈希值确定每一个子缓存服务节点在本地缓存节点集群中的分布地址信息。
步骤203:接收本地开发引擎确定的待存储数据的位置信息。
其中,所述待存储数据是在本地开发引擎中调试云计算应用程序时产生的,所述位置信息是待存储数据存储至云计算运行引擎平台中缓存服务节点的标识信息。
步骤204:根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息。
步骤205:根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点。
其中,一个标识信息对应主缓存服务节点,另一个标识信息对应从缓存服务节点。
在步骤205中,选择缓存服务节点之后,判断选择的主缓存服务节点是否是故障节点,若是,则沿着设定的查找方向,将临近该主缓存服务节点的下一个节点作为选择的主缓存服务节点。
所述设定的查找方向可以是顺时针的方向,也可以是逆时针的方向。
根据新选择的主缓存服务节点确定该主缓存服务节点对应的一个从缓存服务节点。
步骤206:将所述待存储数据存储至选择的主缓存服务节点中。
步骤207:将该主缓存服务节点中存储的数据备份至选择的从缓存服务节点中。
为了保证该缓存服务节点在数据存储过程中发生故障,导致该缓存服务节点中存储的数据的丢失,在本发明的实施例中,还可以预先为每一个缓存服务节点复制备份一个从缓存服务节点,这样保证了本地缓存节点集群的稳定性和可靠性。
较优地,将所述数据存储至所述缓存服务节点之后,若确定此时在本地缓存节点集群中增加了一个缓存服务节点,则将该新增加的缓存服务节点优选作为存储之后产生的待存储的数据的缓存服务节点。
此外,如图7所示,为本地开发引擎使用本地缓存节点集群的示意图。
本地开发引擎对本地缓存节点集群的方法主要包括:开启cache缓存服务、查询本地缓存服务数据、修改本地缓存服务数据和增加本地缓存服务数据等操作,具体方式为:
1、在调用开启cache缓存服务时,通过open()方法启动缓存服务。
2、通过调用select(APPID)方法查询本地缓存节点集群中的缓存数据。
3、通过调用modify(APPID,Key)方法修改本地缓存节点集群中的缓存数据。
具体地,通过修改APPID应用程序的Key键值所对应的数据内容。
4、通过调用add(APPID,Key,Value)方法新增本地缓存节点集群中的缓存数据。
具体地,通过向APPID应用程序的缓存中添加Key/Value键值对数据。
5、通过调用set Expire Time(APPID,Key,Value)方法设置缓存过期时间。
具体地,将APPID应用程序的缓存中Key键值对应的缓存数据设置过期时间time。
6、通过调用delete(APPID,Key)方法删除已缓存的数据。
具体地,将APPID应用程序的缓存中Key键值对应的缓存数据删除。
7、通过调用flush(APPID)方法清空APPID的应用程序的缓存数据。
8、通过调用Is Full(APPID)方法判断缓存是否为空。
9、通过调用save(APPID)方法将APPID的应用程序的缓存数据进行数据持久化保存。
10、通过调用close()方法关闭cache缓存服务。
其中,APPID是唯一标识应用程序的标识信息。
实施例三:
如图8所示,为本实施例三的一种基于云计算平台的缓存服务节点的调度设备的结构示意图,所述设备包括:接收模块11、确定模块12和调度模块13,其中:
接收模块11,用于接收本地开发引擎确定的待存储数据的位置信息,所述待存储数据是在本地开发引擎中调试云计算应用程序时产生的,所述位置信息是待存储数据存储至云计算运行引擎平台中缓存服务节点的标识信息;
确定模块12,用于根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息;
调度模块13,用于根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,并将所述待存储数据存储至选择的缓存服务节点中。
具体地,所述确定模块12,具体用于预设云计算运行引擎平台中一个缓存服务节点的标识信息与本地缓存节点集群中的至少两个缓存服务节点的标识信息之间的映射关系。
当所述与云计算运行引擎平台中一个缓存服务节点对应的本地缓存节点集群中的至少两个缓存服务节点满以下条件:本地缓存节点集群中的至少两个缓存服务节点之间具有主从映射关系,其中,一个标识信息对应主缓存服务节点,其他标识信息对应从缓存服务节点时,所述调度模块13,具体用于从确定的多个缓存服务节点的标识信息中选择一个主缓存服务节点和该主缓存服务节点对应的一个从缓存服务节点,并将所述待存储数据存储至选择的主缓存服务节点中,并将该主缓存服务节点中存储的数据备份至选择的从缓存服务节点中。
所述确定模块12,具体用于通过以下方式确定本地缓存节点集群中的各个缓存服务节点的标识信息:
确定一个IP地址,所述IP地址是本地缓存节点集群中的一个缓存服务节点对应与云计算运行引擎平台中的一个缓存服务节点的IP地址;
利用所述IP地址进行哈希运算后得到相应的第一哈希值;
根据得到的第一哈希值确定本地缓存节点集群中该缓存服务节点的标识信息。
较优地,所述设备还包括:判断模块14,其中:
判断模块14,用于在选择缓存服务节点之后,将所述待存储的数据存储至选择的缓存服务节点之前,判断选择的主缓存服务节点是否是故障节点,若是,则触发调度模块13。
所述调度模块13,具体用于沿着设定的查找方向,将临近该主缓存服务节点的下一个节点作为选择的主缓存服务节点,并根据新选择的主缓存服务节点确定该主缓存服务节点对应的一个从缓存服务节点。
所述设备还包括:拆分模块15,其中:
拆分模块15,用于在预设云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系之前,将本地缓存节点集群中的一个缓存服务节点拆分为多个子缓存服务节点。
所述确定模块12,具体用于预设云计算运行引擎平台中一个缓存服务节点的标识信息与本地缓存节点集群中的一个缓存服务节点对应的多个子缓存服务节点的标识信息之间的映射关系。
所述确定模块12,具体用于通过以下方式确定本地缓存节点集群中的一个缓存服务节点对应的多个子缓存服务节点的标识信息:
确定一个缓存服务节点对应与云计算运行引擎平台中的一个缓存服务节点的IP地址;
将该IP地址和一个缓存服务节点对应的一个子缓存服务节点的序号进行组合后,利用哈希算法得到第三哈希值;
根据得到的第三哈希值确定该子缓存服务节点在本地缓存节点集群中的标识信息。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (13)
1.一种基于云计算平台的缓存服务节点的调度方法,其特征在于,所述方法包括:
接收本地开发引擎确定的待存储数据的位置信息,所述待存储数据是在本地开发引擎中调试云计算应用程序时产生的,所述位置信息是待存储数据存储至云计算运行引擎平台中缓存服务节点的标识信息;
将本地缓存节点集群中的一个缓存服务节点拆分为多个子缓存服务节点;
预设云计算运行引擎平台中一个缓存服务节点的标识信息与本地缓存节点集群中的一个缓存服务节点对应的多个子缓存服务节点的标识信息之间的映射关系;以及
根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息;
根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,并将所述待存储数据存储至选择的缓存服务节点中。
2.如权利要求1所述的方法,其特征在于,预设云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,具体包括:
预设云计算运行引擎平台中一个缓存服务节点的标识信息与本地缓存节点集群中的至少两个缓存服务节点的标识信息之间的映射关系。
3.如权利要求2所述的方法,其特征在于,所述与云计算运行引擎平台中一个缓存服务节点对应的本地缓存节点集群中的至少两个缓存服务节点的标识信息满足以下条件:
本地缓存节点集群中的至少两个缓存服务节点的标识信息之间具有主从映射关系,其中,一个标识信息对应主缓存服务节点,其他标识信息对应从缓存服务节点;
从确定的多个缓存服务节点的标识信息中选择至少两个缓存服务节点,具体包括:
从确定的多个缓存服务节点的标识信息中选择一个主缓存服务节点和该主缓存服务节点对应的一个从缓存服务节点;
将所述待存储数据存储至选择的缓存服务节点中,具体包括:
将所述待存储数据存储至选择的主缓存服务节点中,并将该主缓存服务节点中存储的数据备份至选择的从缓存服务节点中。
4.如权利要求1所述的方法,其特征在于,通过以下方式确定本地缓存节点集群中的各个缓存服务节点的标识信息:
确定一个IP地址,所述IP地址是本地缓存节点集群中的一个缓存服务节点对应与云计算运行引擎平台中的一个缓存服务节点的IP地址;
利用所述IP地址进行哈希运算后得到相应的第一哈希值;
根据得到的第一哈希值确定本地缓存节点集群中该缓存服务节点的标识信息。
5.如权利要求1所述的方法,其特征在于,通过以下方式确定的待存储数据的位置信息:
确定所述待存储数据的属性值;
利用预设的哈希算法对确定的所述属性值进行哈希运算得到第二哈希值,将所述第二哈希值作为该待存储数据的位置信息。
6.如权利要求3所述的方法,其特征在于,选择缓存服务节点之后,将所述待存储的数据存储至选择的缓存服务节点之前,所述方法还包括:
判断选择的主缓存服务节点是否是故障节点,若是,则沿着设定的查找方向,将临近该主缓存服务节点的下一个节点作为选择的主缓存服务节点;
根据新选择的主缓存服务节点确定该主缓存服务节点对应的一个从缓存服务节点。
7.如权利要求1所述的方法,其特征在于,通过以下方式确定本地缓存 节点集群中的一个缓存服务节点对应的多个子缓存服务节点的标识信息:
确定一个缓存服务节点对应与云计算运行引擎平台中的一个缓存服务节点的IP地址;
将该IP地址和一个缓存服务节点对应的一个子缓存服务节点的序号进行组合后,利用哈希算法得到第三哈希值;
根据得到的第三哈希值确定该子缓存服务节点在本地缓存节点集群中的标识信息。
8.一种基于云计算平台的缓存服务节点的调度设备,其特征在于,所述设备包括:
接收模块,用于接收本地开发引擎确定的待存储数据的位置信息,所述待存储数据是在本地开发引擎中调试云计算应用程序时产生的,所述位置信息是待存储数据存储至云计算运行引擎平台中缓存服务节点的标识信息;
拆分模块,用于在预设云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系之前,将本地缓存节点集群中的一个缓存服务节点拆分为多个子缓存服务节点;
确定模块,用于预设云计算运行引擎平台中一个缓存服务节点的标识信息与本地缓存节点集群中的一个缓存服务节点对应的多个子缓存服务节点的标识信息之间的映射关系;以及根据预设的云计算运行引擎平台中缓存服务节点的标识信息与本地缓存节点集群中的缓存服务节点的标识信息之间的映射关系,确定所述位置信息对应本地缓存节点集群中的多个缓存服务节点的标识信息;
调度模块,用于根据确定的多个缓存服务节点的标识信息,选择至少两个标识信息对应的缓存服务节点,并将所述待存储数据存储至选择的缓存服务节点中。
9.如权利要求8所述的设备,其特征在于,
所述确定模块,具体用于预设云计算运行引擎平台中一个缓存服务节点的 标识信息与本地缓存节点集群中的至少两个缓存服务节点的标识信息之间的映射关系。
10.如权利要求9所述的设备,其特征在于,所述与云计算运行引擎平台中一个缓存服务节点对应的本地缓存节点集群中的至少两个缓存服务节点满足以下条件:本地缓存节点集群中的至少两个缓存服务节点之间具有主从映射关系,其中,一个标识信息对应主缓存服务节点,其他标识信息对应从缓存服务节点;
所述调度模块,具体用于从确定的多个缓存服务节点的标识信息中选择一个主缓存服务节点和该主缓存服务节点对应的一个从缓存服务节点,并将所述待存储数据存储至选择的主缓存服务节点中,并将该主缓存服务节点中存储的数据备份至选择的从缓存服务节点中。
11.如权利要求9所述的设备,其特征在于,
所述确定模块,具体用于通过以下方式确定本地缓存节点集群中的各个缓存服务节点的标识信息:
确定一个IP地址,所述IP地址是本地缓存节点集群中的一个缓存服务节点对应与云计算运行引擎平台中的一个缓存服务节点的IP地址;
利用所述IP地址进行哈希运算后得到相应的第一哈希值;
根据得到的第一哈希值确定本地缓存节点集群中该缓存服务节点的标识信息。
12.如权利要求10所述的设备,其特征在于,所述设备还包括:
判断模块,用于在选择缓存服务节点之后,将所述待存储的数据存储至选择的缓存服务节点之前,判断选择的主缓存服务节点是否是故障节点,若是,则触发调度模块;
所述调度模块,具体用于沿着设定的查找方向,将临近该主缓存服务节点的下一个节点作为选择的主缓存服务节点,并根据新选择的主缓存服务节点确定该主缓存服务节点对应的一个从缓存服务节点。
13.如权利要求8所述的设备,其特征在于,
所述确定模块,具体用于通过以下方式确定本地缓存节点集群中的一个缓存服务节点对应的多个子缓存服务节点的标识信息:
确定一个缓存服务节点对应与云计算运行引擎平台中的一个缓存服务节点的IP地址;
将该IP地址和一个缓存服务节点对应的一个子缓存服务节点的序号进行组合后,利用哈希算法得到第三哈希值;
根据得到的第三哈希值确定该子缓存服务节点在本地缓存节点集群中的标识信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210324570.7A CN103685351B (zh) | 2012-09-04 | 2012-09-04 | 一种基于云计算平台的缓存服务节点的调度方法和设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210324570.7A CN103685351B (zh) | 2012-09-04 | 2012-09-04 | 一种基于云计算平台的缓存服务节点的调度方法和设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103685351A CN103685351A (zh) | 2014-03-26 |
CN103685351B true CN103685351B (zh) | 2017-03-29 |
Family
ID=50321662
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210324570.7A Active CN103685351B (zh) | 2012-09-04 | 2012-09-04 | 一种基于云计算平台的缓存服务节点的调度方法和设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103685351B (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104408159B (zh) * | 2014-12-04 | 2018-01-16 | 曙光信息产业(北京)有限公司 | 一种数据关联、加载、查询方法及装置 |
CN105847362A (zh) * | 2016-03-28 | 2016-08-10 | 乐视控股(北京)有限公司 | 用于集群的分发内容缓存方法及系统 |
CN110191346B (zh) * | 2018-03-28 | 2021-06-22 | 浙江宇视科技有限公司 | 云端的管理方法、装置和计算机可读存储介质 |
CN109739723A (zh) * | 2018-12-28 | 2019-05-10 | 深圳市网心科技有限公司 | 信息管理方法、装置、计算机装置及存储介质 |
CN109918170A (zh) * | 2019-01-25 | 2019-06-21 | 西安电子科技大学 | 一种云数据中心虚拟机动态资源配置方法及系统 |
CN111800446B (zh) * | 2019-04-12 | 2023-11-07 | 北京沃东天骏信息技术有限公司 | 调度处理方法、装置、设备和存储介质 |
CN109992531B (zh) * | 2019-04-15 | 2020-11-10 | 成都四方伟业软件股份有限公司 | 数据存储方法及装置 |
CN110505277B (zh) * | 2019-07-18 | 2022-04-26 | 北京奇艺世纪科技有限公司 | 一种数据缓存方法、装置及客户端 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101202746A (zh) * | 2006-12-15 | 2008-06-18 | 华为技术有限公司 | 节点标识符生成方法及负载均衡方法及装置 |
CN101562543A (zh) * | 2009-05-25 | 2009-10-21 | 阿里巴巴集团控股有限公司 | 一种缓存数据的处理方法、处理系统和装置 |
CN102103544A (zh) * | 2009-12-16 | 2011-06-22 | 腾讯科技(深圳)有限公司 | 一种分布式缓存的实现方法及装置 |
-
2012
- 2012-09-04 CN CN201210324570.7A patent/CN103685351B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101202746A (zh) * | 2006-12-15 | 2008-06-18 | 华为技术有限公司 | 节点标识符生成方法及负载均衡方法及装置 |
CN101562543A (zh) * | 2009-05-25 | 2009-10-21 | 阿里巴巴集团控股有限公司 | 一种缓存数据的处理方法、处理系统和装置 |
CN102103544A (zh) * | 2009-12-16 | 2011-06-22 | 腾讯科技(深圳)有限公司 | 一种分布式缓存的实现方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN103685351A (zh) | 2014-03-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103685351B (zh) | 一种基于云计算平台的缓存服务节点的调度方法和设备 | |
CN108170612B (zh) | 一种自动化测试方法、装置及服务器 | |
CN103873534B (zh) | 一种应用集群迁移方法及装置 | |
CN105045723A (zh) | 一种缓存数据处理方法、装置和系统 | |
CN105868028A (zh) | 一种进程间共享数据的方法、装置及终端 | |
CN109408590A (zh) | 分布式数据库的扩容方法、装置、设备及存储介质 | |
CN106339475A (zh) | 一种海量数据的分布式存储系统 | |
CN111385370B (zh) | Id分配方法、装置、存储介质及id分配系统 | |
CN104572301A (zh) | 一种资源分配方法和系统 | |
CN103369038A (zh) | 平台即服务PaaS管理平台及方法 | |
CN108897876A (zh) | 一种数据接入方法及装置 | |
CN110119308B (zh) | 管理大规模容器应用的系统 | |
CN103561060A (zh) | 一种多线程环境下的通信链接方法及中转服务器 | |
CN109739684A (zh) | 基于向量时钟的分布式键值数据库的副本修复方法与装置 | |
CN108234551A (zh) | 一种数据处理方法及装置 | |
CN106445641A (zh) | 一种离散计算节点上安全虚拟平台间的数据迁移方法 | |
CN110716730B (zh) | 灰度发布方法、装置、设备及计算机可读存储介质 | |
CN105978744B (zh) | 一种资源分配方法、装置及系统 | |
CN111478823A (zh) | 一种多云管理平台测试方法及装置 | |
CN115834600B (zh) | 一种多云纳管数据同步方法、装置、电子设备和存储介质 | |
CN106101175A (zh) | 设备管控方法、装置和系统 | |
CN107357603A (zh) | 一种软件加载方法、设备及系统 | |
WO2024021472A1 (zh) | 一种界面信息处理方法及装置 | |
CN113347046A (zh) | 网络接入方法及装置 | |
CN105282203A (zh) | 一种集中目录式p2p网络的建立方法和设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |