CN108491160B - 一种数据写入方法及装置 - Google Patents

一种数据写入方法及装置 Download PDF

Info

Publication number
CN108491160B
CN108491160B CN201810203286.1A CN201810203286A CN108491160B CN 108491160 B CN108491160 B CN 108491160B CN 201810203286 A CN201810203286 A CN 201810203286A CN 108491160 B CN108491160 B CN 108491160B
Authority
CN
China
Prior art keywords
write
target data
solid state
state disk
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810203286.1A
Other languages
English (en)
Other versions
CN108491160A (zh
Inventor
叶权
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201810203286.1A priority Critical patent/CN108491160B/zh
Publication of CN108491160A publication Critical patent/CN108491160A/zh
Application granted granted Critical
Publication of CN108491160B publication Critical patent/CN108491160B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614Improving the reliability of storage systems
    • G06F3/0619Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11CSTATIC STORES
    • G11C7/00Arrangements for writing information into, or reading information out from, a digital store
    • G11C7/10Input/output [I/O] data interface arrangements, e.g. I/O data control circuits, I/O data buffers
    • G11C7/1006Data managing, e.g. manipulating data before writing or reading out, data bus switches or control circuits therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Memory System Of A Hierarchy Structure (AREA)
  • Techniques For Improving Reliability Of Storages (AREA)

Abstract

本发明实施例提供了一种数据写入方法及装置,方法包括:接收针对目标数据的写入请求;执行针对所述目标数据的写入操作,并将所述写入请求和所述目标数据存储至固态硬盘中;在所述写入操作执行完成预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;如果不完整,根据所述固态硬盘中存储的所述写入请求和所述目标数据,重新执行针对所述目标数据的写入操作。应用本发明实施例提供的方案可以实现写入数据的完整性。

Description

一种数据写入方法及装置
技术领域
本发明涉及数据存储技术领域,特别是涉及一种数据写入方法及装置。
背景技术
Swift是开源云计算平台Openstack中的云存储服务组件,是目前非常重要的一种云存储解决方案。基于Swift进行数据存储时,用户通过HTTP(HyperText TransferProtocol,超文本传输协议)请求向Swift集群发起数据写入请求,由集群中的代理服务器Swift Proxy接收用户的写入请求,根据写入请求将数据写入到集群中的存储设备中。
在将数据写入存储设备的磁盘时,需要经过磁盘自身Cache(高速缓冲存储器),具体为:先将数据写入磁盘自身Cache,然后由磁盘自身Cache写入存储设备的磁盘。
然而,发明人在实现本发明的过程中发现,现有技术至少存在如下问题:
当数据成功写入磁盘自身Cache时,Swift就会返回数据已成功写入存储设备的消息。此时,如果数据由磁盘自身Cache写入存储设备的磁盘的过程出现故障,例如磁盘发生断电,就会出现磁盘自身Cache中的数据未写入或仅有部分写入磁盘的情况,导致写入存储设备的数据不完整。
发明内容
本发明实施例的目的在于提供一种数据写入方法、装置、终端及计算机可读存储介质,以实现写入数据的完整性。具体技术方案如下:
第一方面,本发明实施例提供了一种数据写入方法,所述方法包括:
接收针对目标数据的写入请求;
执行针对所述目标数据的写入操作,并将所述写入请求和所述目标数据存储至固态硬盘中;
在所述写入操作执行完成预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
如果不完整,根据所述固态硬盘中存储的所述写入请求和所述目标数据,重新执行针对所述目标数据的写入操作。
可选的,所述根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整的步骤,包括:
判断是否存在所述写入操作对应的写入数据;
如果不存在,判定所述写入操作对应的写入数据不完整;
或者,如果存在,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;
如果不相同,判定所述写入操作对应的写入数据不完整;
或者,如果相同,判定所述写入操作对应的写入数据完整。
可选的,所述判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同的步骤,包括:
获得所述写入操作对应的写入数据的特征值,作为第一特征值;
获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
判断所述第一特征值是否与所述第二特征值相同;
如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;
或者,如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
可选的,在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,还包括:
删除所述固态硬盘中存储的所述写入请求和所述目标数据。
可选的,在所述重新执行针对所述目标数据的写入操作的步骤之后,还包括:
删除所述固态硬盘中存储的所述写入请求和所述目标数据。
第二方面,本发明实施例还提供了一种数据写入方法,应用于第一终端,所述方法包括:
接收针对目标数据的第一写入请求;
执行针对所述目标数据的写入操作,并将所述第一写入请求和所述目标数据发送至第二终端,以使得所述第二终端将所述第一写入请求和所述目标数据存储至固态硬盘中;
接收所述第二终端发送的针对目标数据的第二写入请求,重新执行针对所述目标数据的写入操作,其中,所述第二写入请求为:所述第二终端在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成的。
第三方面,本发明实施例还提供了一种数据写入方法,应用于第二终端,所述方法包括:
接收第一终端发送的第一写入请求和目标数据,其中,所述第一终端为:接收到所述第一写入请求后对所述目标数据执行写入操作的终端,所述第一写入请求为:用于请求对所述目标数据执行写入操作的请求;
将所述第一写入请求和所述目标数据存储至固态硬盘中;
在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
如果不完整,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成第二写入请求,并将所述第二写入请求发送给所述第一终端,以使得所述第一终端根据所述第二写入请求重新执行针对所述目标数据的写入操作。
可选的,所述根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整的步骤,包括:
判断是否存在所述写入操作对应的写入数据;
如果不存在,判定所述写入操作对应的写入数据不完整;
或者,如果存在,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;
如果不相同,判定所述写入操作对应的写入数据不完整;
或者,如果相同,判定所述写入操作对应的写入数据完整。
可选的,所述判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同的步骤,包括:
获得所述写入操作对应的写入数据的特征值,作为第一特征值;
获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
判断所述第一特征值是否与所述第二特征值相同;
如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;
或者,如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
可选的,在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,还包括:
删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
可选的,在确定所述第一终端重新执行完成针对所述目标数据的写入操作后,还包括:
删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
第四方面,本发明实施例还提供了一种数据写入装置,所述装置包括:
第一接收模块,用于接收针对目标数据的写入请求;
第一处理模块,用于执行针对所述目标数据的写入操作,并将所述写入请求和所述目标数据存储至固态硬盘中;
第一判断模块,用于在所述写入操作执行完成预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
第一写入模块,用于在判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述写入请求和所述目标数据,重新执行针对所述目标数据的写入操作。
可选的,所述第一判断模块,包括:
第一判断子模块,用于判断是否存在所述写入操作对应的写入数据;如果不存在,判定所述写入操作对应的写入数据不完整;
第二判断子模块,用于在判断出存在所述写入操作对应的写入数据时,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据不完整;如果相同,判定所述写入操作对应的写入数据完整。
可选的,所述第二判断子模块,包括:
第一获得单元,用于获得所述写入操作对应的写入数据的特征值,作为第一特征值;
第二获得单元,用于获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
第一判断单元,用于判断所述第一特征值是否与所述第二特征值相同;如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
可选的,所述装置还包括:
第一删除模块,用于在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,删除所述固态硬盘中存储的所述写入请求和所述目标数据。
可选的,所述装置还包括:
第二删除模块,用于在重新执行针对所述目标数据的写入操作之后,删除所述固态硬盘中存储的所述写入请求和所述目标数据。
第五方面,本发明实施例还提供了一种数据写入方法装置,应用于第一终端,所述装置包括:
第二接收模块,用于接收针对目标数据的第一写入请求;
第二处理模块,用于执行针对所述目标数据的写入操作,并将所述第一写入请求和所述目标数据发送至第二终端,以使得所述第二终端将所述第一写入请求和所述目标数据存储至固态硬盘中;
第二写入模块,用于接收所述第二终端发送的针对目标数据的第二写入请求,重新执行针对所述目标数据的写入操作,其中,所述第二写入请求为:所述第二终端在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成的。
第六方面,本发明实施例还提供了一种数据写入装置,应用于第二终端,所述装置包括:
第三接收模块,用于接收第一终端发送的第一写入请求和目标数据,其中,所述第一终端为:接收到所述第一写入请求后对所述目标数据执行写入操作的终端,所述第一写入请求为:用于请求对所述目标数据执行写入操作的请求;
存储模块,用于将所述第一写入请求和所述目标数据存储至固态硬盘中;
第二判断模块,用于在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
发送模块,用于在判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成第二写入请求,并将所述第二写入请求发送给所述第一终端,以使得所述第一终端根据所述第二写入请求重新执行针对所述目标数据的写入操作。
可选的,所述第二判断模块,包括:
第三判断子模块,用于判断是否存在所述写入操作对应的写入数据;如果不存在,判定所述写入操作对应的写入数据不完整;
第四判断子模块,用于在判断出存在所述写入操作对应的写入数据时,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据不完整;如果相同,判定所述写入操作对应的写入数据完整。
可选的,所述第四判断子模块,包括:
第三获得单元,用于获得所述写入操作对应的写入数据的特征值,作为第一特征值;
第四获得单元,用于获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
第二判断单元,用于判断所述第一特征值是否与所述第二特征值相同;如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
可选的,所述装置还包括:
第三删除模块,用于在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
可选的,所述装置还包括:
第四删除模块,用于在确定所述第一终端重新执行完成针对所述目标数据的写入操作后,删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
第七方面,本发明实施例还提供了一种终端,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述第一方面任一所述的方法步骤。
第八方面,本发明实施例还提供了一种终端,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述第二方面所述的方法步骤。
第九方面,本发明实施例还提供了一种终端,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述第三方面任一所述的方法步骤。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述第一方面任一所述的数据写入方法。
在本发明实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第一方面任一所述的数据写入方法。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述第二方面所述的应用于第一终端的数据写入方法。
在本发明实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第二方面所述的应用于第一终端的数据写入方法。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述第三方面任一所述的应用于第二终端的数据写入方法。
在本发明实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述第三方面任一所述的应用于第二终端的数据写入方法。
本发明实施例提供的方案,在接收到针对目标数据的写入请求之后,执行针对目标数据的写入操作,并将写入请求和目标数据存储至固态硬盘中,在写入操作执行完成预设时长后,根据固态硬盘中存储的目标数据,判断写入操作对应的写入数据是否完整,如果不完整,就根据固态硬盘中存储的写入请求和目标数据,重新执行针对目标数据的写入操作。
可见,本发明实施例提供的方案,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此将写入请求和目标数据存储至固态硬盘,在写入操作执行完成预设时长后,如果写入操作对应的写入数据不完整,则根据固态硬盘中存储的写入请求和目标数据,重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例提供的一种数据写入方法的流程示意图;
图2为本发明实施例提供的另一种数据写入方法的流程示意图;
图3为本发明实施例提供的再一种数据写入方法的流程示意图;
图4为本发明实施例提供的一种数据写入装置的结构示意图;
图5为本发明实施例提供的另一种身数据写入装置的结构示意图;
图6为本发明实施例提供的再一种身数据写入装置的结构示意图;
图7为本发明实施例提供的一种终端的结构图;
图8为本发明实施例提供的另一种终端的结构图;
图9为本发明实施例提供的再一种终端的结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行描述。
为实现写入数据的完整性,本发明实施例提供了一种数据写入方法、装置及终端。
具体的,本发明实施例提供的一种数据写入方法的应用场景可以为:接收到针对目标数据的写入请求后,执行针对目标数据的写入操作,并将写入请求和目标数据存储至固态硬盘中,在写入操作执行完成预设时长后,根据固态硬盘中存储的目标数据,判断写入操作对应的写入数据是否完整,如果不完整,根据固态硬盘中存储的写入请求和目标数据,重新执行针对目标数据的写入操作。
其中,固态硬盘(Solid State Drives,SSD),简称固盘,是用固态电子存储芯片阵列而制成的硬盘,由控制单元和存储单元(FLASH芯片、DRAM芯片)组成。固态硬盘在接口的规范和定义、功能及使用方法上与传统硬盘的完全相同,在产品外形和尺寸上也完全与传统硬盘一致,但I/O性能相对于传统硬盘大大提升。
一种实现方式中,本发明实施例提供的一种数据写入方法可以应用于Swift集群中的代理服务器Swift Proxy,Swift Proxy中预先配置有一定容量的固态硬盘供数据读写,具体应用场景可以是:Swift Proxy在接收到用户通过HTTP请求向Swift集群发起的针对目标数据的写入请求后,执行针对目标数据的写入操作,并将写入请求和目标数据存储至固态硬盘中,在写入操作执行完成预设时长后,根据固态硬盘中存储的目标数据,判断写入操作对应的写入数据是否完整,如果不完整,根据固态硬盘中存储的写入请求和目标数据,重新执行针对目标数据的写入操作。
应用本发明实施例提供的技术方案,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此将写入请求和目标数据存储至固态硬盘,在写入操作执行完成预设时长后,如果写入操作对应的写入数据不完整,则根据固态硬盘中存储的写入请求和目标数据,重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
下面再通过具体实施例对本发明实施例提供的一种数据写入方法进行介绍。
参见图1,图1为本发明实施例提供的一种数据写入方法的流程示意图,可以包括如下步骤:
S101,接收针对目标数据的写入请求。
S102,执行针对目标数据的写入操作,并将写入请求和目标数据存储至固态硬盘中。
其中,执行主体执行针对目标数据的写入操作,可以是将目标数据写入自身的磁盘中,也可以是将目标数据写入到其它存储设备的磁盘中,例如在Swift云存储中应用本发明实施例提供的方案,执行主体即为Swift Proxy,Swift Proxy接收针对目标数据的写入请求,然后将目标数据写入到Swift集群中的存储设备中。
在执行针对目标数据的写入操作时,还需要将写入请求和目标数据存储至固态硬盘中,例如,可以按照时间顺序,将各个写入请求和目标数据存储至固态硬盘中,其中,固态硬盘预先配置在执行主体所在的设备中。
可以理解的,步骤S101中接收的针对目标数据的写入请求是用户通过终端向执行主体发起的请求,因此,写入请求中可以携带用户的用户名、请求将目标数据写入的位置等信息,而执行主体执行针对目标数据的写入操作时,需要根据写入请求中携带的信息来执行。因此,将写入请求和目标数据存储至固态硬盘中,这样,后续在判断出写入操作对应的写入数据不完整的情况下,可以根据写入请求和目标数据重新构造写入请求,即构造出与用户发起的写入请求相同的请求,重新构造的写入请求中携带的信息与用户发起的写入请求中携带的信息相同,因此执行主体可以根据重新构造的写入请求重新执行针对目标数据的写入操作,以保证针对目标数据的写入操作与用户发起的写入请求相对应。
S103,在写入操作执行完成预设时长后,根据固态硬盘中存储的目标数据,判断写入操作对应的写入数据是否完整;如果不完整,执行S104,如果完整,结束。
预设时长可以预先配置,如设置为30秒。
具体的,在根据固态硬盘中存储的目标数据,判断写入操作对应的写入数据是否完整时,具体可以首先判断是否存在写入操作对应的写入数据,如果不存在,表示目标数据未写入磁盘,则判定写入操作对应的写入数据不完整;如果存在,再判断写入操作对应的写入数据是否与固态硬盘中存储的目标数据相同,如果不相同,表示目标数据仅部分写入磁盘,则判定写入操作对应的写入数据不完整,如果相同,表示目标数据全部写入磁盘,则判定写入操作对应的写入数据完整。
在一种实现方式中,在判断写入操作对应的写入数据是否与固态硬盘中存储的目标数据相同时,具体可以首先获得写入操作对应的写入数据的特征值,作为第一特征值,获得固态硬盘中存储的目标数据的特征值,作为第二特征值;然后判断第一特征值是否与第二特征值相同,如果相同,判定写入操作对应的写入数据与固态硬盘中存储的目标数据相同,如果不相同,判定写入操作对应的写入数据与固态硬盘中存储的目标数据不相同。其中,数据的特征值可以为数据的MD5值、哈希值等。具体的,在目标数据的数据量较小时,可以获得目标数据整体的特征值以及写入数据整体的特征值,而在目标数据的数据量较大时,可以按照预设规则,从目标数据中提取部分数据,再获取该部分数据的特征值,以及从写入数据中提取相应的部分数据,获取该部分数据的特征值,这样在目标数据的数据量较大时可以提高计算特征值的速度。
在一种实现方式中,根据固态硬盘中存储的目标数据,判断出写入操作对应的写入数据完整的情况下,还可以删除固态硬盘中存储的写入请求和目标数据。这样,可以减小固态硬盘中存储的数据量。
S104,根据固态硬盘中存储的写入请求和目标数据,重新执行针对目标数据的写入操作。
在判断出写入操作对应的写入数据不完整时,可以根据固态硬盘中存储的写入请求和目标数据,重新构造针对目标数据的写入请求,然后根据重新构造的写入请求,重新执行针对目标数据的写入操作,以确保写入数据的完整性。
具体的,在重新执行针对目标数据的写入操作时,对于目标数据未写入磁盘的情况,可以将目标数据全部写入磁盘;而对于目标数据仅部分写入磁盘的情况,可以将目标数据全部写入磁盘以覆盖步骤S102执行的写入操作所写入的数据,也可以根据目标数据和步骤S102执行的写入操作所写入的数据,判断出目标数据中尚未写入磁盘的数据,从而将尚未写入的数据写入到磁盘以使目标数据对应的写入数据完整,本发明实施例对此不做限定。
在一种实现方式中,在重新执行针对目标数据的写入操作之后,还可以删除固态硬盘中存储的写入请求和目标数据。这样,可以减小固态硬盘中存储的数据量。
可见,应用本发明实施例提供的方案,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此将写入请求和目标数据存储至固态硬盘,在写入操作执行完成预设时长后,如果写入操作对应的写入数据不完整,则根据固态硬盘中存储的写入请求和目标数据,重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
参见图2,图2为本发明实施例提供的另一种数据写入方法的流程示意图,该方法应用于第一终端,可以包括如下步骤:
S201,接收针对目标数据的第一写入请求。
S202,执行针对目标数据的写入操作,并将第一写入请求和目标数据发送至第二终端,以使得第二终端将第一写入请求和目标数据存储至固态硬盘中。
其中,第一终端执行针对目标数据的写入操作,可以是将目标数据写入自身的磁盘中,也可以是将目标数据写入到其它存储设备的磁盘中。例如,在Swift云存储中应用本发明实施例提供的方案,第一终端即为Swift Proxy,Swift Proxy接收针对目标数据的第一写入请求,然后将目标数据写入到Swift集群中的存储设备中,第二终端可以为Swift集群中的一存储设备,也可以为独立于Swift集群的设备,第二终端预先配置有一定容量的固态硬盘供数据读写。
可以理解的,步骤S201中接收的针对目标数据的第一写入请求是用户通过其他终端向第一终端发起的请求,因此,第一写入请求中可以携带用户的用户名、请求将目标数据写入的位置等信息,而第一终端执行针对目标数据的写入操作时,需要根据写入请求中携带的信息来执行。因此,将写入请求和目标数据发送至第二终端,以使得第二终端将第一写入请求和目标数据存储至固态硬盘中,这样,后续在第二终端判断出写入操作对应的写入数据不完整的情况下,可以根据第一写入请求和目标数据重新构造写入请求,即构造出与用户发起的第一写入请求相同的请求,重新构造的写入请求中携带的信息与用户发起的第一写入请求中携带的信息相同,因此第一终端可以根据第二终端重新构造的写入请求重新执行针对目标数据的写入操作,以保证针对目标数据的写入操作与用户发起的第一写入请求相对应。
S203,接收第二终端发送的针对目标数据的第二写入请求,重新执行针对目标数据的写入操作,其中,第二写入请求为:第二终端在确定第一终端完成写入操作预设时长后,根据固态硬盘中存储的目标数据,判断出写入操作对应的写入数据不完整时,根据固态硬盘中存储的第一写入请求和目标数据生成的。
具体的,在重新执行针对目标数据的写入操作时,对于目标数据未写入磁盘的情况,需要将目标数据全部写入磁盘;而对于目标数据仅部分写入磁盘的情况,可以将目标数据全部写入磁盘以覆盖步骤S202执行的写入操作所写入的数据,也可以根据目标数据和步骤S202执行的写入操作所写入的数据,判断出目标数据中尚未写入磁盘的数据,从而将尚未写入的数据写入到磁盘以使目标数据对应的写入数据完整,本发明实施例对此不做限定。
可见,应用本发明实施例提供的方案,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此将第一写入请求和目标数据发送给第二终端以存储至固态硬盘,如果接收到第二终端发送的第二写入请求,表示写入操作对应的写入数据不完整,则根据第二写入请求重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
另外,在Swift云存储中应用本发明实施例提供的方案,Swift Proxy将第一写入请求和目标数据发送至第二终端,以使得第二终端将第一写入请求和目标数据存储至固态硬盘中,也就是将第一写入请求和目标数据旁路备份至第二终端,可见,使用旁路的方式不需要破坏现有Swift的软件架构,即可确保Swift数据的完整性;并且本发明实施例提供的方案从存储层面解决数据完整性问题,可以减少业务层面冗余逻辑,降低业务逻辑复杂度,减少冗余存储成本,例如减少从硬件选配或机房选择方面来保证数据安全性上的成本。
参见图3,与图2所示的应用于第一终端的实施例相对应,本发明实施例提供了再一种数据写入方法,该方法应用于第二终端,可以包括如下步骤:
S301,接收第一终端发送的第一写入请求和目标数据,其中,第一终端为:接收到第一写入请求后对目标数据执行写入操作的终端,第一写入请求为:用于请求对目标数据执行写入操作的请求。
S302,将第一写入请求和目标数据存储至固态硬盘中。
在一种实现方式中,可以按照时间顺序,将第一终端发送各个第一写入请求和目标数据存储至固态硬盘中,其中,固态硬盘预先配置在第二终端中。
S303,在确定第一终端完成写入操作预设时长后,根据固态硬盘中存储的目标数据,判断写入操作对应的写入数据是否完整;如果不完整,执行S304,如果完整,结束。
其中,第二终端确定第一终端完成写入操作,可以通过接收第一终端在完成写入操作后反馈的消息来确定。预设时长可以预先配置,如设置为30秒。
具体的,第二终端在根据固态硬盘中存储的目标数据,判断写入操作对应的写入数据是否完整时,具体可以首先判断是否存在写入操作对应的写入数据,如果不存在,表示目标数据未写入磁盘,则判定写入操作对应的写入数据不完整;如果存在,再判断写入操作对应的写入数据是否与固态硬盘中存储的目标数据相同,如果不相同,表示目标数据仅部分写入磁盘,则判定写入操作对应的写入数据不完整,如果相同,表示目标数据全部写入磁盘,则判定写入操作对应的写入数据完整。
在一种实现方式中,第二终端在判断写入操作对应的写入数据是否与固态硬盘中存储的目标数据相同时,具体可以首先获得写入操作对应的写入数据的特征值,作为第一特征值,获得固态硬盘中存储的目标数据的特征值,作为第二特征值;然后判断第一特征值是否与第二特征值相同,如果相同,判定写入操作对应的写入数据与固态硬盘中存储的目标数据相同,如果不相同,判定写入操作对应的写入数据与固态硬盘中存储的目标数据不相同。其中,数据的特征值可以为数据的MD5值、哈希值等。具体的,在目标数据的数据量较小时,可以获得目标数据整体的特征值以及写入数据整体的特征值,而在目标数据的数据量较大时,可以按照预设规则,从目标数据中提取部分数据,再获取该部分数据的特征值,以及从写入数据中提取相应的部分数据,获取该部分数据的特征值,这样在目标数据的数据量较大时可以提高计算特征值的速度。
在一种实现方式中,第二终端在根据固态硬盘中存储的目标数据,判断出写入操作对应的写入数据完整的情况下,还可以删除固态硬盘中存储的第一写入请求和目标数据。这样,可以减小固态硬盘中存储的数据量。
S304,根据固态硬盘中存储的第一写入请求和目标数据生成第二写入请求,并将第二写入请求发送给第一终端,以使得第一终端根据第二写入请求重新执行针对述目标数据的写入操作。
第二终端在判断出写入操作对应的写入数据不完整时,可以根据固态硬盘中存储的第一写入请求和目标数据,重新构造出针对目标数据的第二写入请求,然后将第二写入请求发送给第一终端,以使得第一终端根据重新构造的第二写入请求重新执行针对目标数据的写入操作,以实现写入数据的完整性。
在一种实现方式中,第二终端在确定第一终端重新执行完成针对目标数据的写入操作后,还可以删除固态硬盘中存储的第一写入请求和目标数据。这样,可以减小固态硬盘中存储的数据量。
可见,应用本发明实施例提供的方案,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此接收第一终端发送的第一写入请求和目标数据并存储至固态硬盘,在确定第一终端完成写入操作预设时长后,如果判断出写入操作对应的写入数据不完整,则根据固态硬盘中存储的第一写入请求和目标数据重新生成第二写入请求并发送给第一终端,以使第一终端重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
与上述图1所示的方法实施例相对应,本发明实施例还提供了一种数据写入装置,如图4所示,可以包括:
第一接收模块401,用于接收针对目标数据的写入请求;
第一处理模块402,用于执行针对所述目标数据的写入操作,并将所述写入请求和所述目标数据存储至固态硬盘中;
第一判断模块403,用于在所述写入操作执行完成预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
第一写入模块404,用于在判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述写入请求和所述目标数据,重新执行针对所述目标数据的写入操作。
可见,应用本发明实施例提供的方案,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此将写入请求和目标数据存储至固态硬盘,在写入操作执行完成预设时长后,如果写入操作对应的写入数据不完整,则根据固态硬盘中存储的写入请求和目标数据,重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
可选的,所述第一判断模块403,可以包括:
第一判断子模块,用于判断是否存在所述写入操作对应的写入数据;如果不存在,判定所述写入操作对应的写入数据不完整;
第二判断子模块,用于在判断出存在所述写入操作对应的写入数据时,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据不完整;如果相同,判定所述写入操作对应的写入数据完整。
可选的,所述第二判断子模块,包括:
第一获得单元,用于获得所述写入操作对应的写入数据的特征值,作为第一特征值;
第二获得单元,用于获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
第一判断单元,用于判断所述第一特征值是否与所述第二特征值相同;如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
可选的,所述装置还可以包括:
第一删除模块,用于在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,删除所述固态硬盘中存储的所述写入请求和所述目标数据。
可选的,所述装置还可以包括:
第二删除模块,用于在重新执行针对所述目标数据的写入操作之后,删除所述固态硬盘中存储的所述写入请求和所述目标数据。
与上述图2所示的应用于第一终端的方法实施例相对应,本发明实施例还提供了一种数据写入装置,如图5所示,该装置应用于第一终端,可以包括:
第二接收模块501,用于接收针对目标数据的第一写入请求;
第二处理模块502,用于执行针对所述目标数据的写入操作,并将所述第一写入请求和所述目标数据发送至第二终端,以使得所述第二终端将所述第一写入请求和所述目标数据存储至固态硬盘中;
第二写入模块503,用于接收所述第二终端发送的针对目标数据的第二写入请求,重新执行针对所述目标数据的写入操作,其中,所述第二写入请求为:所述第二终端在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成的。
可见,应用本发明实施例提供的方案,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此将第一写入请求和目标数据发送给第二终端以存储至固态硬盘,如果接收到第二终端发送的第二写入请求,表示写入操作对应的写入数据不完整,则根据第二写入请求重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
与上述图3所示的应用于第二终端的方法实施例相对应,本发明实施例还提供了一种数据写入装置,如图6所示,该装置应用于第二终端,可以包括:
第三接收模块601,用于接收第一终端发送的第一写入请求和目标数据,其中,所述第一终端为:接收到所述第一写入请求后对所述目标数据执行写入操作的终端,所述第一写入请求为:用于请求对所述目标数据执行写入操作的请求;
存储模块602,用于将所述第一写入请求和所述目标数据存储至固态硬盘中;
第二判断模块603,用于在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
发送模块604,用于在判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成第二写入请求,并将所述第二写入请求发送给所述第一终端,以使得所述第一终端根据所述第二写入请求重新执行针对所述目标数据的写入操作。
可见,应用本发明实施例提供的方案,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此接收第一终端发送的第一写入请求和目标数据并存储至固态硬盘,在确定第一终端完成写入操作预设时长后,如果判断出写入操作对应的写入数据不完整,则根据固态硬盘中存储的第一写入请求和目标数据重新生成第二写入请求并发送给第一终端,以使第一终端重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
可选的,所述第二判断模块603,可以包括:
第三判断子模块,用于判断是否存在所述写入操作对应的写入数据;如果不存在,判定所述写入操作对应的写入数据不完整;
第四判断子模块,用于在判断出存在所述写入操作对应的写入数据时,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据不完整;如果相同,判定所述写入操作对应的写入数据完整。
可选的,所述第四判断子模块,可以包括:
第三获得单元,用于获得所述写入操作对应的写入数据的特征值,作为第一特征值;
第四获得单元,用于获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
第二判断单元,用于判断所述第一特征值是否与所述第二特征值相同;如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
可选的,所述装置还可以包括:
第三删除模块,用于在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
可选的,所述装置还可以包括:
第四删除模块,用于在确定所述第一终端重新执行完成针对所述目标数据的写入操作后,删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
本发明实施例还提供了一种终端,如图7所示,包括处理器701、通信接口702、存储器703和通信总线704,其中,处理器701,通信接口702,存储器703通过通信总线704完成相互间的通信,
存储器703,用于存放计算机程序;
处理器701,用于执行存储器703上所存放的程序时,实现如下步骤:
接收针对目标数据的写入请求;
执行针对所述目标数据的写入操作,并将所述写入请求和所述目标数据存储至固态硬盘中;
在所述写入操作执行完成预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
如果不完整,根据所述固态硬盘中存储的所述写入请求和所述目标数据,重新执行针对所述目标数据的写入操作。
本发明实施例提供的终端,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此将写入请求和目标数据存储至固态硬盘,在写入操作执行完成预设时长后,如果写入操作对应的写入数据不完整,则根据固态硬盘中存储的写入请求和目标数据,重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
关于该方法各个步骤的具体实现以及相关解释内容可以参见上述图1所示的方法实施例,在此不做赘述。
另外,处理器701执行存储器703上所存放的程序而实现的数据写入方法的其他实现方式,与前述方法实施例部分所提及的实现方式相同,这里也不再赘述。
本发明实施例还提供了一种终端,具体为第一终端,如图8所示,包括处理器801、通信接口802、存储器803和通信总线804,其中,处理器801,通信接口802,存储器803通过通信总线804完成相互间的通信,
存储器803,用于存放计算机程序;
处理器801,用于执行存储器803上所存放的程序时,实现如下步骤:
接收针对目标数据的第一写入请求;
执行针对所述目标数据的写入操作,并将所述第一写入请求和所述目标数据发送至第二终端,以使得所述第二终端将所述第一写入请求和所述目标数据存储至固态硬盘中;
接收所述第二终端发送的针对目标数据的第二写入请求,重新执行针对所述目标数据的写入操作,其中,所述第二写入请求为:所述第二终端在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成的。
本发明实施例提供的终端,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此将第一写入请求和目标数据发送给第二终端以存储至固态硬盘,如果接收到第二终端发送的第二写入请求,表示写入操作对应的写入数据不完整,则根据第二写入请求重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
关于该方法各个步骤的具体实现以及相关解释内容可以参见上述图2所示的方法实施例,在此不做赘述。
本发明实施例还提供了一种终端,具体为第二终端,如图9所示,包括处理器901、通信接口902、存储器903和通信总线904,其中,处理器901,通信接口902,存储器903通过通信总线904完成相互间的通信,
存储器903,用于存放计算机程序;
处理器901,用于执行存储器903上所存放的程序时,实现如下步骤:
接收第一终端发送的第一写入请求和目标数据,其中,所述第一终端为:接收到所述第一写入请求后对所述目标数据执行写入操作的终端,所述第一写入请求为:用于请求对所述目标数据执行写入操作的请求;
将所述第一写入请求和所述目标数据存储至固态硬盘中;
在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
如果不完整,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成第二写入请求,并将所述第二写入请求发送给所述第一终端,以使得所述第一终端根据所述第二写入请求重新执行针对所述目标数据的写入操作。
本发明实施例提供的终端,由于固态硬盘不存在磁盘自身Cache,将数据写入固态硬盘时不需要经过磁盘自身Cache,即写入固态硬盘的数据不会出现数据未写入或未全部写入磁盘的情况,因此接收第一终端发送的第一写入请求和目标数据并存储至固态硬盘,在确定第一终端完成写入操作预设时长后,如果判断出写入操作对应的写入数据不完整,则根据固态硬盘中存储的第一写入请求和目标数据重新生成第二写入请求并发送给第一终端,以使第一终端重新执行针对目标数据的写入操作,从而保证了写入的目标数据的完整性。
关于该方法各个步骤的具体实现以及相关解释内容可以参见上述图3所示的方法实施例,在此不做赘述。
另外,处理器901执行存储器903上所存放的程序而实现的数据写入方法的其他实现方式,与前述方法实施例部分所提及的实现方式相同,这里也不再赘述。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述图1所示实施例中所述的数据写入方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述图1所示实施例中所述的数据写入方法。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述图2所示实施例中应用于第一终端的数据写入方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述图2所示实施例中应用于第一终端的数据写入方法。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述图3所示实施例中应用于第二终端的数据写入方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述图3所示实施例中应用于第二终端的数据写入方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、终端、计算机可读存储介质、包含指令的计算机程序产品实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。

Claims (21)

1.一种数据写入方法,其特征在于,所述方法包括:
接收针对目标数据的写入请求;
执行针对所述目标数据的写入操作,并将所述写入请求和所述目标数据存储至固态硬盘中;
在所述写入操作执行完成预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
如果不完整,根据所述固态硬盘中存储的所述写入请求和所述目标数据,重新执行针对所述目标数据的写入操作;
所述根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整的步骤,包括:
判断是否存在所述写入操作对应的写入数据;
如果不存在,判定所述写入操作对应的写入数据不完整;
或者,如果存在,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;
如果不相同,判定所述写入操作对应的写入数据不完整;
或者,如果相同,判定所述写入操作对应的写入数据完整。
2.根据权利要求1所述的方法,其特征在于,所述判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同的步骤,包括:
获得所述写入操作对应的写入数据的特征值,作为第一特征值;
获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
判断所述第一特征值是否与所述第二特征值相同;
如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;
或者,如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
3.根据权利要求1-2中任一项所述的方法,其特征在于,在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,还包括:
删除所述固态硬盘中存储的所述写入请求和所述目标数据。
4.根据权利要求1-2中任一项所述的方法,其特征在于,在所述重新执行针对所述目标数据的写入操作的步骤之后,还包括:
删除所述固态硬盘中存储的所述写入请求和所述目标数据。
5.一种数据写入方法,其特征在于,应用于第一终端,所述方法包括:
接收针对目标数据的第一写入请求;
执行针对所述目标数据的写入操作,并将所述第一写入请求和所述目标数据发送至第二终端,以使得所述第二终端将所述第一写入请求和所述目标数据存储至固态硬盘中;
接收所述第二终端发送的针对目标数据的第二写入请求,重新执行针对所述目标数据的写入操作,其中,所述第二写入请求为:所述第二终端在确定所述第一终端完成所述写入操作预设时长后,判断是否存在所述写入操作对应的写入数据;如果不存在,判定所述写入操作对应的写入数据不完整;或者,如果存在,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据不完整;或者,如果相同,判定所述写入操作对应的写入数据完整,在判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成的。
6.一种数据写入方法,其特征在于,应用于第二终端,所述方法包括:
接收第一终端发送的第一写入请求和目标数据,其中,所述第一终端为:接收到所述第一写入请求后对所述目标数据执行写入操作的终端,所述第一写入请求为:用于请求对所述目标数据执行写入操作的请求;
将所述第一写入请求和所述目标数据存储至所述第二终端的固态硬盘中;
在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
如果不完整,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成第二写入请求,并将所述第二写入请求发送给所述第一终端,以使得所述第一终端根据所述第二写入请求重新执行针对所述目标数据的写入操作;
所述根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整的步骤,包括:
判断是否存在所述写入操作对应的写入数据;
如果不存在,判定所述写入操作对应的写入数据不完整;
或者,如果存在,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;
如果不相同,判定所述写入操作对应的写入数据不完整;
或者,如果相同,判定所述写入操作对应的写入数据完整。
7.根据权利要求6所述的方法,其特征在于,所述判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同的步骤,包括:
获得所述写入操作对应的写入数据的特征值,作为第一特征值;
获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
判断所述第一特征值是否与所述第二特征值相同;
如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;
或者,如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
8.根据权利要求6-7任一项所述的方法,其特征在于,在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,还包括:
删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
9.根据权利要求6-7任一项所述的方法,其特征在于,在确定所述第一终端重新执行完成针对所述目标数据的写入操作后,还包括:
删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
10.一种数据写入装置,其特征在于,所述装置包括:
第一接收模块,用于接收针对目标数据的写入请求;
第一处理模块,用于执行针对所述目标数据的写入操作,并将所述写入请求和所述目标数据存储至固态硬盘中;
第一判断模块,用于在所述写入操作执行完成预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
第一写入模块,用于在判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述写入请求和所述目标数据,重新执行针对所述目标数据的写入操作;
所述第一判断模块,包括:
第一判断子模块,用于判断是否存在所述写入操作对应的写入数据;如果不存在,判定所述写入操作对应的写入数据不完整;
第二判断子模块,用于在判断出存在所述写入操作对应的写入数据时,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据不完整;如果相同,判定所述写入操作对应的写入数据完整。
11.根据权利要求10所述的装置,其特征在于,所述第二判断子模块,包括:
第一获得单元,用于获得所述写入操作对应的写入数据的特征值,作为第一特征值;
第二获得单元,用于获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
第一判断单元,用于判断所述第一特征值是否与所述第二特征值相同;如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
12.根据权利要求10-11中任一项所述的装置,其特征在于,所述装置还包括:
第一删除模块,用于在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,删除所述固态硬盘中存储的所述写入请求和所述目标数据。
13.根据权利要求10-11中任一项所述的装置,其特征在于,所述装置还包括:
第二删除模块,用于在重新执行针对所述目标数据的写入操作之后,删除所述固态硬盘中存储的所述写入请求和所述目标数据。
14.一种数据写入方法装置,其特征在于,应用于第一终端,所述装置包括:
第二接收模块,用于接收针对目标数据的第一写入请求;
第二处理模块,用于执行针对所述目标数据的写入操作,并将所述第一写入请求和所述目标数据发送至第二终端,以使得所述第二终端将所述第一写入请求和所述目标数据存储至固态硬盘中;
第二写入模块,用于接收所述第二终端发送的针对目标数据的第二写入请求,重新执行针对所述目标数据的写入操作,其中,所述第二写入请求为:所述第二终端在确定所述第一终端完成所述写入操作预设时长后,判断是否存在所述写入操作对应的写入数据;如果不存在,判定所述写入操作对应的写入数据不完整;或者,如果存在,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据不完整;或者,如果相同,判定所述写入操作对应的写入数据完整,在判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成的。
15.一种数据写入装置,其特征在于,应用于第二终端,所述装置包括:
第三接收模块,用于接收第一终端发送的第一写入请求和目标数据,其中,所述第一终端为:接收到所述第一写入请求后对所述目标数据执行写入操作的终端,所述第一写入请求为:用于请求对所述目标数据执行写入操作的请求;
存储模块,用于将所述第一写入请求和所述目标数据存储至所述第二终端的固态硬盘中;
第二判断模块,用于在确定所述第一终端完成所述写入操作预设时长后,根据所述固态硬盘中存储的所述目标数据,判断所述写入操作对应的写入数据是否完整;
发送模块,用于在判断出所述写入操作对应的写入数据不完整时,根据所述固态硬盘中存储的所述第一写入请求和所述目标数据生成第二写入请求,并将所述第二写入请求发送给所述第一终端,以使得所述第一终端根据所述第二写入请求重新执行针对所述目标数据的写入操作;
所述第二判断模块,包括:
第三判断子模块,用于判断是否存在所述写入操作对应的写入数据;如果不存在,判定所述写入操作对应的写入数据不完整;
第四判断子模块,用于在判断出存在所述写入操作对应的写入数据时,判断所述写入操作对应的写入数据是否与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据不完整;如果相同,判定所述写入操作对应的写入数据完整。
16.根据权利要求15所述的装置,其特征在于,所述第四判断子模块,包括:
第三获得单元,用于获得所述写入操作对应的写入数据的特征值,作为第一特征值;
第四获得单元,用于获得所述固态硬盘中存储的所述目标数据的特征值,作为第二特征值;
第二判断单元,用于判断所述第一特征值是否与所述第二特征值相同;如果相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据相同;如果不相同,判定所述写入操作对应的写入数据与所述固态硬盘中存储的所述目标数据不相同。
17.根据权利要求15-16任一项所述的装置,其特征在于,所述装置还包括:
第三删除模块,用于在根据所述固态硬盘中存储的所述目标数据,判断出所述写入操作对应的写入数据完整的情况下,删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
18.根据权利要求15-16任一项所述的装置,其特征在于,所述装置还包括:
第四删除模块,用于在确定所述第一终端重新执行完成针对所述目标数据的写入操作后,删除所述固态硬盘中存储的所述第一写入请求和所述目标数据。
19.一种终端,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-4任一所述的方法步骤。
20.一种终端,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求5所述的方法步骤。
21.一种终端,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求6-9任一所述的方法步骤。
CN201810203286.1A 2018-03-13 2018-03-13 一种数据写入方法及装置 Active CN108491160B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810203286.1A CN108491160B (zh) 2018-03-13 2018-03-13 一种数据写入方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810203286.1A CN108491160B (zh) 2018-03-13 2018-03-13 一种数据写入方法及装置

Publications (2)

Publication Number Publication Date
CN108491160A CN108491160A (zh) 2018-09-04
CN108491160B true CN108491160B (zh) 2021-11-26

Family

ID=63338511

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810203286.1A Active CN108491160B (zh) 2018-03-13 2018-03-13 一种数据写入方法及装置

Country Status (1)

Country Link
CN (1) CN108491160B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109992212B (zh) * 2019-04-10 2020-03-27 苏州浪潮智能科技有限公司 一种数据写入方法和一种数据读取方法
CN112071335A (zh) * 2020-08-20 2020-12-11 深圳云宣科技有限公司 一种对光盘刻录文件进行校验的方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103870570A (zh) * 2014-03-14 2014-06-18 广州携智信息科技有限公司 一种基于远程日志备份的HBase数据可用性及持久性的方法
CN103985411A (zh) * 2013-02-07 2014-08-13 希捷科技有限公司 待调度验证的非易失性写入缓冲器数据保留
CN105872040A (zh) * 2016-03-30 2016-08-17 华中科技大学 一种利用网关节点缓存优化分布式块存储写性能的方法
CN105892954A (zh) * 2016-04-25 2016-08-24 乐视控股(北京)有限公司 基于多副本的数据存储方法和装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10133645B2 (en) * 2016-02-08 2018-11-20 Sandisk Technologies Llc Data recovery in three dimensional non-volatile memory array after word line short

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103985411A (zh) * 2013-02-07 2014-08-13 希捷科技有限公司 待调度验证的非易失性写入缓冲器数据保留
CN103870570A (zh) * 2014-03-14 2014-06-18 广州携智信息科技有限公司 一种基于远程日志备份的HBase数据可用性及持久性的方法
CN105872040A (zh) * 2016-03-30 2016-08-17 华中科技大学 一种利用网关节点缓存优化分布式块存储写性能的方法
CN105892954A (zh) * 2016-04-25 2016-08-24 乐视控股(北京)有限公司 基于多副本的数据存储方法和装置

Also Published As

Publication number Publication date
CN108491160A (zh) 2018-09-04

Similar Documents

Publication Publication Date Title
CN110058873B (zh) 应用页面更新方法、装置、设备和存储介质
US9134914B1 (en) Deduplication
CN110753084B (zh) 上链数据读取方法、缓存服务器及计算机可读存储介质
US9830099B1 (en) Secure erase of storage devices
US9021087B1 (en) Method to improve caching accuracy by using snapshot technology
CN108959407B (zh) 数据的强一致性写入方法及终端设备
CN108491160B (zh) 一种数据写入方法及装置
WO2015035814A1 (zh) 一种写数据方法及存储设备
CN107577775B (zh) 一种读取数据方法、装置、电子设备及可读存储介质
US9619336B2 (en) Managing production data
CN113157487B (zh) 数据恢复方法及其设备
CN107864209B (zh) 数据写入的方法、装置及服务器
WO2022218057A1 (zh) 内存泄漏的归因方法、装置、电子设备和存储介质
CN111694639A (zh) 进程容器地址的更新方法、装置和电子设备
US9924002B1 (en) Managing stateless processes
CN112148206A (zh) 一种数据读写方法、装置、电子设备及介质
WO2016127807A1 (zh) 多副本写入存储设备的方法及存储设备
US11132351B2 (en) Executing transactions based on success or failure of the transactions
CN113986134B (zh) 存储数据的方法、读取数据的方法和装置
US11940878B2 (en) Uninterrupted block-based restore operation using a read-ahead buffer
CN115098469A (zh) 数据库迁移方法及装置、电子设备和可读存储介质
CN111274176B (zh) 一种信息处理方法、电子设备、系统及存储介质
CN108959405B (zh) 数据的强一致性读取方法及终端设备
CN109032522B (zh) 固态硬盘的数据读取方法以及固态硬盘
CN109214884B (zh) 需求撮合方法及装置、电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant