CN107729182B - 数据存储和访问的方法及装置 - Google Patents

数据存储和访问的方法及装置 Download PDF

Info

Publication number
CN107729182B
CN107729182B CN201710940984.5A CN201710940984A CN107729182B CN 107729182 B CN107729182 B CN 107729182B CN 201710940984 A CN201710940984 A CN 201710940984A CN 107729182 B CN107729182 B CN 107729182B
Authority
CN
China
Prior art keywords
data
data storage
storage server
user
level value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710940984.5A
Other languages
English (en)
Other versions
CN107729182A (zh
Inventor
孙健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Joylin Wireless Information Technology Co ltd
Original Assignee
Suzhou Joylin Wireless Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Joylin Wireless Information Technology Co ltd filed Critical Suzhou Joylin Wireless Information Technology Co ltd
Priority to CN201710940984.5A priority Critical patent/CN107729182B/zh
Publication of CN107729182A publication Critical patent/CN107729182A/zh
Application granted granted Critical
Publication of CN107729182B publication Critical patent/CN107729182B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • G06F11/1451Management of the data involved in backup or backup restore by selection of backup contents

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种数据存储和访问的方法及装置,所述存储方法包括:检测是否接收到数据存储请求;若是,则接收数据并将所述数据按照预设的分级策略赋予相应的级别值;根据所述级别值从所述服务器集群中查找相应的数据存储服务器;将所述数据写入查找到的所述数据存储服务器。本发明通过分级存储可以使数据存储的更加合理,资源分配的更高效,且在同一成本下,可以最小化的节约资源,避免资源浪费;在进行数据访问时,还可以提升访问的效率。

Description

数据存储和访问的方法及装置
技术领域
本发明涉及数据处理领域,特别是涉及一种数据存储和访问的方法及装置。
背景技术
对于现阶段的大规模集群存储系统而言,服务器的宕机,交换机的故障,以及网络异常都是常态。常规技术主要通过服务器热备份,利用多个数据库备份数据,在故障发生时保证系统依然能够正常运行,数据持久可靠。
对于单机游戏支付平台而言,支付平台集群系统需要存储大量的账务信息,这些信息对可靠性和安全性的要求较高。但常规的技术手段往往是通过对整体的服务器热备份,将数据多份存储以提高数据存储服务器的可靠性。但当数据量复杂、数据量巨大且服务器集群庞大的情况下,将数据进行多份存储的冗余处理,会造成巨大的资源浪费,并迅速地提升处理成本。
发明内容
基于此,有必要针对目前存储服务器全部热备份导致资源浪费且成本高昂的问题,提供一种数据存储和访问的方法及装置。
一种数据存储的方法,应用于数据存储服务器集群,所述方法包括:
检测是否接收到数据存储请求;
若是,则接收数据并将所述数据按照预设的分级策略赋予相应的级别值;
根据所述级别值从所述服务器集群中查找相应的数据存储服务器;
将所述数据写入查找到的所述数据存储服务器。
在其中一个实施例中,所述数据存储器服务器集群包括有按照预设级别进行划分的若干服务器集群,其中,所述根据所述级别值从所述服务器集群中查找相应的数据存储服务器,具体为:
从所述数据存储服务器集群中查找出与所述级别值相符合的数据存储服务器。
在其中一个实施例中,所述级别值关联有数据存储的时间,所述方法还包括:
根据所述级别值为所述数据设置默认的存储时间。
在其中一个实施例中,所述级别值还关联有数据存储的次数值,所述方法还包括:
从所述服务器集群中查找出与所述次数值相同数量的数据存储服务器。
在其中一个实施例中,所述将所述数据写入查找到的所述数据存储服务器,包括:
将所述数据分别写入查找到的与所述次数值相同数量的数据存储服务器。
在其中一个实施例中,所述方法还包括:
所述数据存储服务器检测内部存储的数据是否达到所述默认的存储时间;
若是,则判断是否需要删除所述数据。
一种数据访问的方法,应用于数据存储服务器集群,所述方法包括:
检测是否接收到对数据存储服务器集群存储的数据的访问请求;
若是,则确认需要访问的数据的级别值;
根据所述级别值从所述数据存储服务器集群中查找出对应的数据存储服务器;
从查找出的所述数据存储服务器中读取所述数据。
一种数据存储的装置,所述装置包括:
检测模块,用于检测是否接收到数据存储请求;
分级模块,用于在所述检测模块检测出接收到数据存储请求时,则接收数据并将所述数据按照预设的分级策略赋予相应的级别值;
查找模块,用于根据所述级别值从所述服务器集群中查找相应的数据存储服务器;
写入模块,用于将所述数据写入查找到的所述数据存储服务器。
在其中一个实施例中,所述级别值关联有数据存储的时间和次数值,所述装置还包括:
设置模块,用于根据所述级别值为所述数据设置默认的存储时间;
所述查找模块还用于从所述服务器集群中查找出与所述次数值相同数量的数据存储服务器。
一种数据访问的装置,所述装置包括:
检测模块,用于检测是否接收到对数据存储服务器集群存储的数据的访问请求;
确认模块,用于在所述检测模块检测出接收到对数据存储服务器集群存储的数据的访问请求时,则确认需要访问的数据的级别值;
查找模块,用于根据所述级别值从所述数据存储服务器集群中查找出对应的数据存储服务器;
读取模块,用于从查找出的所述数据存储服务器中读取所述数据。
以上所述数据存储和访问的方法及装置,在数据存储服务器集群中,对于需要存储的数据,按照预设的分级策略赋予这些数据相应的级别值,根据级别值从服务器集群中查找相应的数据存储服务器,并将数据写入查找到的数据存储服务器;其中,按照级别值分级存储不同的数据时,在处理的数据量复杂、数据量巨大且服务器集群庞大的情况下,可以使数据存储的更加合理,资源分配的更高效;级别值越大,则表示数据的重要性越高,按照级别值分配服务器存储数据,在同一成本下,可以最小化的节约资源,避免资源浪费。
附图说明
图1为示范性的数据存储服务器的连接示意图;
图2为一实施例的数据存储的方法的流程图;
图3为一实施例的数据访问的方法的流程图;
图4为一实施例的数据存储的装置的结构图;
图5为一实施例的数据访问的装置的结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,游戏平台支付系统一般包括三个部分,分别为:应用程序服务器集群、数据存储服务器集群和管理中心服务器集群。应用程序服务器集群可以发起数据请求,数据请求包括存储数据等。应用程序服务器可以连接多个用户设备,例如多台电脑、移动设备等。用户正在玩的游戏的种类或样式繁多,因此,由不同用户设备产生的计费数据也是不同的,这些计费信息均可以由用户设备发送至应用程序服务器,应用程序服务器会将这些数据存储至数据存储服务器集群。作为一种数据存储的方式,应用程序服务器会向数据存储服务器发送存储数据的存储请求,并等待数据存储服务器做好存储准备的反馈信息。数据存储服务器集群可以包括多个并联、串联或单独的数据存储服务器,这些数据存储服务器可以并行或串行或其他设置的存储方式存储数据。数据存储服务器在接收到应用程序服务器发送的存储请求时,则进行接收数据的准备,并向应用程序服务器发送做好存储准备的反馈信息,准备接收数据进行存储。应用程序服务器接收到反馈信息后,则发送数据至数据存储服务器进行存储。
管理中心服务器集群可以是由两台机器组成的主-主热备的小规模服务器集群,主要负责集群管理,包括对数据存储服务器集群进行健康心跳检测;集群扩容、故障恢复管理;还包括对应用程序服务器集群提供集群地址配置信息服务等。不论数据存储或访问是否进行,游戏平台支付系统均必须处于正常工作状态,否则,将影响数据的正常处理。因此,管理中心服务器集群会实时确认应用程序服务器集群、数据存储服务器集群是否处于正常工作状态,一旦应用程序服务器集群或数据存储服务器集群出现异常,则按照预先的条件进行切换,以保证支付系统的正常工作。
目前而言,随着移动设备的快速普及,产生的游戏计费数据以几何级的速度增加,这些数据如果均无规则的方式或方法进行存储,由于在存储时间上需要保持存储的时间较长,因此,这种存储方式会导致计费数据占用巨大的存储资源,迅速地提升存储成本。同时,对数据的无规则存储也会导致无效、重复、不可用等数据占用资源,浪费存储资源。
为此,如图2所示,为一实施例的数据存储的方法,其应用于数据存储服务器集群,方法包括步骤S120至步骤S180。
步骤S120,检测是否接收到数据存储请求;
步骤S140,若是,则接收数据并将数据按照预设的分级策略赋予相应的级别值;
步骤S160,根据级别值从服务器集群中查找相应的数据存储服务器;
步骤S180,将数据写入查找到的数据存储服务器。
以上所述数据存储的方法,在数据存储服务器集群中,对于需要存储的数据,按照预设的分级策略赋予这些数据相应的级别值,根据级别值从服务器集群中查找相应的数据存储服务器,并将数据写入查找到的数据存储服务器;其中,按照级别值分级存储不同的数据时,在处理的数据量复杂、数据量巨大且服务器集群庞大的情况下,可以使数据存储的更加合理,资源分配的更高效;级别值越大,则表示数据的重要性越高,按照级别值分配服务器存储数据,在同一成本下,可以最小化的节约资源,避免资源浪费。
在本实施的一实现方式中,数据存储器服务器集群包括有按照预设级别进行划分的若干服务器集群。预设级别可以是按照字母顺序或阿拉伯数据组成的级别,级别值越大,代表数据的重要性越高。一般计费数据至少包括时间、数量、价格等数据,这些数据中,有的数据只是比较次数的数据,但有的数据则对计费有着重要的影响,或者没有这些重要的数据则无法计算用户的真实费用。因此,将不同的数据进行分级划分,在进行数据存储时,则可以根据级别值进行存储。
一般的,数据存储服务器可以用于存储各种数据,但在实施例的一实现方式中,数据存储服务器也被预告划分为不同的级别值,这些具有级别值的数据存储服务器只能存储具有对应级别值的数据。因此,在步骤S160中,根据级别值从服务器集群中查找相应的数据存储服务器时,只需要从数据存储服务器集群中查找出与级别值相符合的数据存储服务。
本实施例的另一实现方式中,级别值并不是单独存在的,其关联有相关的级别值信息,这些信息的其中之一为存储时间。存储时间,其为该级别值的数据在数据存储服务器中存储的时间。在进行数据存储时,数据存储服务器会根据该级别值关联的存储时间为相应的数据设置默认的存储时间。
在实施例的另一实现方式中,一些数据可能具有相同的级别值,但并不意味着这些数据具有相同的存储时间。具体而言,本实施例中,还可以为数据设置相应的子级别值,子级别值代表数据的存储时间,且不同的子级别值对应的存储时间不同。例如,可以根据数据的类型、或者重要程度等,为数据设置相应的子级别值,并根据子级别值为数据设置相应的存储时间。
数据存储服务器在对数据进行存储时,一般只是简单的备份,单独的备份可能导致后续数据存储服务器出现异常时,导致数据保存的异常。在本实施例的另一实现方式中,级别值还关联有数据存储的次数值。次数值,表示对应的数据需要被备份的次数。在对数据进行存储时,系统会从服务器集群中查找出与次数值相同数量的数据存储服务器。然后,通过步骤S180,系统会将数据分别写入查找到的与次数值相同数量的数据存储服务器。本实施例中,系统会将数据一一或并行存储至每一个数据存储服务器进行备份,从而保证具有最高级别值的数据的安全性和可靠性。例如,这些数据可以是支付过程中产生的账务信息等,这些账务信息一般对计费具有决定性的影响。
级别值越大,数据的重要性越高。因此,对重要的数据进行不同次数的备份,可以提高数据的安全性和可靠性。而对于那些次要的数据,或者不重要,或者冗余,或者垃圾数据等,存储的次数减小的同时,存储的时间也会减小,从而可以及时的使存储资源良性循环。在存储数据服务器的数量一定的前提下,这种存储方法可以更好的利用存储数据服务器,节约存储成本,提升存储效率。
数据存储服务器在存储数据的同时,也会检测内部存储的数据是否达到默认的存储时间。如果是,则进一步判断是否需要删除对应的数据。
一般进行数据的删除操作时,有些数据的删除方式可能还需要得到维护人员的授权,或需要重新检查一遍,因此,只有在所有的删除条件均成立后,才可以删除对应的数据。
由以上可知,本实施例在存储数据时,可以实现对数据的动态存储,及时删除达到存储时间的数据,合理的开辟出资源以供其他数据的存储,并节约存储成本。
如图3所示,为一实施例的数据访问的方法,应用于数据存储服务器集群,所述方法包括步骤S310至步骤S340。
步骤S310,检测是否接收到对数据存储服务器集群存储的数据的访问请求;
步骤S320,若是,则确认需要访问的数据的级别值;
步骤S330,根据级别值从数据存储服务器集群中查找出对应的数据存储服务器;
步骤S340,从查找出的数据存储服务器中读取数据。
以上所述数据访问的方法中,在接收到对数据存储服务器集群存储的数据的访问请求时,可以根据该数据检测该数据对应的级别值,根据该级别值可以从数据存储服务器集群中查找到具有该级别值的数据存储服务器,并最终从查找到的数据存储服务器中读取数据。按照级别值读取数据,可以快速定位这些数据的位置,从而提升读取数据的效率。
在查找过程中,存储数据被删除的可能性。本实施例中,可以进一步检测是否查找到需要读取的数据,如果未查找到,则确认这些数据是否被删除。
在查找过程中,也可以相应的查找出对应数据的存储时间,以告知用户该数据可以访问的期限。本实施例中,存储时间,是可以用于被用户修改的时间。用户如果觉得这个期限不够长,则可以修改对应数据的存储时间,从而保证用户的使用。
在查找过程中,用户也可以相应的查找出对应数据备份的次数。在用户已知某个或某些数据存储服务器已经工作不正常的情况下,如果用户觉得对应的数据备份的次数不够,则可以进一步选择再次将对应的数据进行备份。用户可以修改对应数据备份的次数,系统会接收修改后的备份的次数,对数据进行新的备份。
如图4所示,一实施例的数据存储的装置包括:
检测模块120,用于检测是否接收到数据存储请求;
分级模块140,用于在检测模块检测出接收到数据存储请求时,则接收数据并将数据按照预设的分级策略赋予相应的级别值;
查找模块160,用于根据级别值从服务器集群中查找相应的数据存储服务器;
写入模块180,用于将数据写入查找到的数据存储服务器。
以上所述数据存储的装置,在数据存储服务器集群中,对于需要存储的数据,按照预设的分级策略赋予这些数据相应的级别值,根据级别值从服务器集群中查找相应的数据存储服务器,并将数据写入查找到的数据存储服务器;其中,按照级别值分级存储不同的数据时,在处理的数据量复杂、数据量巨大且服务器集群庞大的情况下,可以使数据存储的更加合理,资源分配的更高效;级别值越大,则表示数据的重要性越高,按照级别值分配服务器存储数据,在同一成本下,可以最小化的节约资源,避免资源浪费。
在本实施的一实现方式中,数据存储器服务器集群包括有按照预设级别进行划分的若干服务器集群。预设级别可以是按照字母顺序或阿拉伯数据组成的级别,级别值越大,代表数据的重要性越高。一般计费数据至少包括时间、数量、价格等数据,这些数据中,有的数据只是比较次数的数据,但有的数据则对计费有着重要的影响,或者没有这些重要的数据则无法计算用户的真实费用。因此,将不同的数据进行分级划分,在进行数据存储时,则可以根据级别值进行存储。
一般的,数据存储服务器可以用于存储各种数据,但在实施例的一实现方式中,数据存储服务器也被预告划分为不同的级别值,这些具有级别值的数据存储服务器只能存储具有对应级别值的数据。因此,在查找模块根据级别值从服务器集群中查找相应的数据存储服务器时,只需要从数据存储服务器集群中查找出与级别值相符合的数据存储服务。
本实施例的另一实现方式中,级别值并不是单独存在的,其关联有相关的级别值信息,这些信息的其中之一为存储时间。存储时间,其为该级别值的数据在数据存储服务器中存储的时间。
本实施例中,所述装置还包括有:
设置模块,用于根据级别值为数据设置默认的存储时间;
其中,查找模块160还用于从服务器集群中查找出与次数值相同数量的数据存储服务器。
在进行数据存储时,数据存储服务器会根据该级别值关联的存储时间为相应的数据设置默认的存储时间。
在实施例的另一实现方式中,一些数据可能具有相同的级别值,但并不意味着这些数据具有相同的存储时间。具体而言,本实施例中,还可以为数据设置相应的子级别值,子级别值代表数据的存储时间,且不同的子级别值对应的存储时间不同。例如,可以根据数据的类型、或者重要程度等,为数据设置相应的子级别值,并根据子级别值为数据设置相应的存储时间。
数据存储服务器在对数据进行存储时,一般只是简单的备份,单独的备份可能导致后续数据存储服务器出现异常时,导致数据保存的异常。在本实施例的另一实现方式中,级别值还关联有数据存储的次数值。次数值,表示对应的数据需要被备份的次数。在对数据进行存储时,系统会从服务器集群中查找出与次数值相同数量的数据存储服务器。然后,通过写入模块180,系统会将数据分别写入查找到的与次数值相同数量的数据存储服务器。本实施例中,系统会将数据一一或并行存储至每一个数据存储服务器进行备份,从而保证具有最高级别值的数据的安全性和可靠性。例如,这些数据可以是支付过程中产生的账务信息等,这些账务信息一般对计费具有决定性的影响。
级别值越大,数据的重要性越高。因此,对重要的数据进行不同次数的备份,可以提高数据的安全性和可靠性。而对于那些次要的数据,或者不重要,或者冗余,或者垃圾数据等,存储的次数减小的同时,存储的时间也会减小,从而可以及时的使存储资源良性循环。在存储数据服务器的数量一定的前提下,这种存储方法可以更好的利用存储数据服务器,节约存储成本,提升存储效率。
数据存储服务器在存储数据的同时,也会检测内部存储的数据是否达到默认的存储时间。如果是,则进一步判断是否需要删除对应的数据。
一般进行数据的删除操作时,有些数据的删除方式可能还需要得到维护人员的授权,或需要重新检查一遍,因此,只有在所有的删除条件均成立后,才可以删除对应的数据。
如图5所示,一实施例的数据访问的装置包括:
检测模块310,用于检测是否接收到对数据存储服务器集群存储的数据的访问请求;
确认模块320,用于在检测模块检测出接收到对数据存储服务器集群存储的数据的访问请求时,则确认需要访问的数据的级别值;
查找模块330,用于根据级别值从数据存储服务器集群中查找出对应的数据存储服务器;
读取模块340,用于从查找出的数据存储服务器中读取数据。
以上所述数据访问的装置中,在接收到对数据存储服务器集群存储的数据的访问请求时,可以根据该数据检测该数据对应的级别值,根据该级别值可以从数据存储服务器集群中查找到具有该级别值的数据存储服务器,并最终从查找到的数据存储服务器中读取数据。按照级别值读取数据,可以快速定位这些数据的位置,从而提升读取数据的效率。
在查找过程中,存储数据被删除的可能性。本实施例中,可以进一步检测是否查找到需要读取的数据,如果未查找到,则确认这些数据是否被删除。
在查找过程中,也可以相应的查找出对应数据的存储时间,以告知用户该数据可以访问的期限。本实施例中,存储时间,是可以用于被用户修改的时间。用户如果觉得这个期限不够长,则可以修改对应数据的存储时间,从而保证用户的使用。
在查找过程中,用户也可以相应的查找出对应数据备份的次数。在用户已知某个或某些数据存储服务器已经工作不正常的情况下,如果用户觉得对应的数据备份的次数不够,则可以进一步选择再次将对应的数据进行备份。用户可以修改对应数据备份的次数,系统会接收修改后的备份的次数,对数据进行新的备份。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (4)

1.一种数据存储的方法,应用于数据存储服务器集群,其特征在于,所述方法包括:
检测是否接收到数据存储请求;
若是,则接收数据并将所述数据按照预设的分级策略赋予相应的级别值;
根据所述级别值从所述服务器集群中查找相应的数据存储服务器;
将所述数据写入查找到的所述数据存储服务器;
所述数据存储服务器集群包括有按照预设级别进行划分的若干服务器集群,其中,所述根据所述级别值从所述服务器集群中查找相应的数据存储服务器,具体为:
从所述数据存储服务器集群中查找出与所述级别值相符合的数据存储服务器;
所述级别值关联有数据存储的时间,所述方法还包括:
根据所述级别值为所述数据设置默认的存储时间;
所述级别值还关联有数据存储的次数值,所述方法还包括:
从所述服务器集群中查找出与所述次数值相同数量的数据存储服务器;
所述将所述数据写入查找到的所述数据存储服务器,包括:
将所述数据分别写入查找到的与所述次数值相同数量的数据存储服务器;
为数据设置相应的子级别值,子级别值代表数据的存储时间,且不同的子级别值对应的存储时间不同;根据数据的类型、或者重要程度,为数据设置相应的子级别值,并根据子级别值为数据设置相应的存储时间;
其中,次数值,表示对应的数据需要被备份的次数;
所述方法还包括:
所述数据存储服务器检测内部存储的数据是否达到所述默认的存储时间;若是,则判断是否需要删除所述数据;进行数据的删除操作时,数据的删除方式还需要得到维护人员的授权,或需要重新检查一遍,在所有的删除条件均成立后,才能够删除对应的数据。
2.一种数据访问的方法,应用于数据存储服务器集群,其特征在于,所述方法包括:
检测是否接收到对数据存储服务器集群存储的数据的访问请求;
若是,则确认需要访问的数据的级别值;
根据所述级别值从所述数据存储服务器集群中查找出对应的数据存储服务器;
从查找出的所述数据存储服务器中读取所述数据;
按照级别值读取数据,可以快速定位这些数据的位置,从而提升读取数据的效率;
其中,在查找过程中,检测是否查找到需要读取的数据,如果未查找到,则确认这些数据是否被删除;
在查找过程中,用户能够查找出对应数据的存储时间,以告知用户该数据能够访问的期限,存储时间是能够被用户修改的时间,用户如果觉得期限不够长,则能够修改对应数据的存储时间,从而保证用户的使用;
在查找过程中,用户能够查找出对应数据备份的次数,在用户已知某个或某些数据存储服务器已经工作不正常的情况下,如果用户觉得对应的数据备份的次数不够,则可以选择再次将对应的数据进行备份,用户可以修改对应数据备份的次数,系统会接收修改后的备份的次数,对数据进行新的备份。
3.一种数据存储的装置,其特征在于,所述装置包括:
检测模块,用于检测是否接收到数据存储请求;
分级模块,用于在所述检测模块检测出接收到数据存储请求时,则接收数据并将所述数据按照预设的分级策略赋予相应的级别值;
查找模块,用于根据所述级别值从服务器集群中查找相应的数据存储服务器;
写入模块,用于将所述数据写入查找到的所述数据存储服务器;
所述级别值关联有数据存储的时间和次数值,次数值,表示对应的数据需要被备份的次数;
所述装置还包括:
设置模块,用于根据所述级别值为所述数据设置默认的存储时间;
所述查找模块还用于从服务器集群中查找出与所述次数值相同数量的数据存储服务器;
分级模块还能用于为数据设置相应的子级别值,子级别值代表数据的存储时间,且不同的子级别值对应的存储时间不同;根据数据的类型、或者重要程度,为数据设置相应的子级别值,并根据子级别值为数据设置相应的存储时间;
还包括删除模块,用于在进行数据的删除操作时,数据的删除方式还需要得到维护人员的授权,或需要重新检查一遍,在所有的删除条件均成立后,才能够删除对应的数据。
4.一种数据访问的装置,其特征在于,所述装置包括:
检测模块,用于检测是否接收到对数据存储服务器集群存储的数据的访问请求;
确认模块,用于在所述检测模块检测出接收到对数据存储服务器集群存储的数据的访问请求时,则确认需要访问的数据的级别值;
查找模块,用于根据所述级别值从所述数据存储服务器集群中查找出对应的数据存储服务器;
读取模块,用于从查找出的所述数据存储服务器中读取所述数据;
其中,所述查找模块能够:
在查找过程中,检测是否查找到需要读取的数据,如果未查找到,则确认这些数据是否被删除;
在查找过程中,用户能够查找出对应数据的存储时间,以告知用户该数据能够访问的期限,存储时间是能够被用户修改的时间,用户如果觉得期限不够长,则能够修改对应数据的存储时间,从而保证用户的使用;
在查找过程中,用户能够查找出对应数据备份的次数,在用户已知某个或某些数据存储服务器已经工作不正常的情况下,如果用户觉得对应的数据备份的次数不够,则可以选择再次将对应的数据进行备份,用户可以修改对应数据备份的次数,系统会接收修改后的备份的次数,对数据进行新的备份。
CN201710940984.5A 2017-10-11 2017-10-11 数据存储和访问的方法及装置 Active CN107729182B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710940984.5A CN107729182B (zh) 2017-10-11 2017-10-11 数据存储和访问的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710940984.5A CN107729182B (zh) 2017-10-11 2017-10-11 数据存储和访问的方法及装置

Publications (2)

Publication Number Publication Date
CN107729182A CN107729182A (zh) 2018-02-23
CN107729182B true CN107729182B (zh) 2020-12-04

Family

ID=61210346

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710940984.5A Active CN107729182B (zh) 2017-10-11 2017-10-11 数据存储和访问的方法及装置

Country Status (1)

Country Link
CN (1) CN107729182B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109284258A (zh) * 2018-08-13 2019-01-29 华东计算技术研究所(中国电子科技集团公司第三十二研究所) 基于hdfs的分布式多级存储系统及方法
CN111208934B (zh) 2018-11-21 2021-07-09 华为技术有限公司 一种数据存储方法及装置
CN115348155A (zh) * 2022-08-10 2022-11-15 北京飞讯数码科技有限公司 基于集群服务器的业务容灾的实现方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105138476A (zh) * 2015-08-26 2015-12-09 广东创我科技发展有限公司 一种基于hadoop异构存储的数据存储方法及系统
CN105183389A (zh) * 2015-09-15 2015-12-23 北京金山安全软件有限公司 一种数据分级管理方法、装置及电子设备
CN106484330A (zh) * 2016-09-27 2017-03-08 郑州云海信息技术有限公司 一种混合磁盘分层数据优化方法和装置
US9753814B1 (en) * 2014-12-19 2017-09-05 EMC IP Holding Company LLC Application level support for selectively accessing files in cloud-based storage

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8943356B1 (en) * 2010-09-30 2015-01-27 Emc Corporation Post backup catalogs

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9753814B1 (en) * 2014-12-19 2017-09-05 EMC IP Holding Company LLC Application level support for selectively accessing files in cloud-based storage
CN105138476A (zh) * 2015-08-26 2015-12-09 广东创我科技发展有限公司 一种基于hadoop异构存储的数据存储方法及系统
CN105183389A (zh) * 2015-09-15 2015-12-23 北京金山安全软件有限公司 一种数据分级管理方法、装置及电子设备
CN106484330A (zh) * 2016-09-27 2017-03-08 郑州云海信息技术有限公司 一种混合磁盘分层数据优化方法和装置

Also Published As

Publication number Publication date
CN107729182A (zh) 2018-02-23

Similar Documents

Publication Publication Date Title
CN109656896B (zh) 故障修复方法、装置及分布式存储系统和存储介质
EP3617867A1 (en) Fragment management method and fragment management apparatus
CN107729182B (zh) 数据存储和访问的方法及装置
CN109614276A (zh) 故障处理方法、装置、分布式存储系统和存储介质
CN104077197B (zh) 系统恢复方法、装置、固态硬盘和电子设备
CN101211289A (zh) 恢复操作管理系统和方法
CN109656895B (zh) 分布式存储系统、数据写入方法、装置和存储介质
CN110178121A (zh) 一种数据库的检测方法及其终端
CN113535474B (zh) 异构云存储集群故障自动修复的方法、系统、介质及终端
CN106133704A (zh) 内存故障隔离方法和装置
CN109086141B (zh) 内存管理方法和装置以及计算机可读存储介质
CN104685474A (zh) 包括不可纠正的错误的地址范围的通知
CN113625945A (zh) 分布式存储的慢盘处理方法、系统、终端及存储介质
CN108540315A (zh) 分布式存储系统、方法和装置
CN106959907A (zh) 一种云平台碎片化数据备份还原系统
CN110674008B (zh) Ssd的问题盘日志信息收集方法、装置、设备及介质
CN106991314A (zh) 一种数据存储方法及装置
CN111488124A (zh) 一种数据更新方法、装置、电子设备及存储介质
CN105573872A (zh) 数据存储系统的硬盘维护方法和装置
CN103810038A (zh) 一种ha集群中虚拟机存储文件迁移方法及其装置
CN116643906B (zh) 云平台故障的处理方法、装置、电子设备及存储介质
CN104205097A (zh) 一种去重方法装置与系统
CN106708445A (zh) 链路选择方法及装置
CN106611109A (zh) 一种存储设备上的软件的运行方法
CN107340974B (zh) 一种虚拟磁盘的迁移方法及迁移装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant