CN111177091B - 基于xfs文件系统录像预分配存储方法、系统及存储介质 - Google Patents

基于xfs文件系统录像预分配存储方法、系统及存储介质 Download PDF

Info

Publication number
CN111177091B
CN111177091B CN202010280216.3A CN202010280216A CN111177091B CN 111177091 B CN111177091 B CN 111177091B CN 202010280216 A CN202010280216 A CN 202010280216A CN 111177091 B CN111177091 B CN 111177091B
Authority
CN
China
Prior art keywords
storage
data
bad track
allocation
address
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010280216.3A
Other languages
English (en)
Other versions
CN111177091A (zh
Inventor
郭锐利
程世明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Citops Communication System Co ltd
Original Assignee
Shenzhen Citops Communication System Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Citops Communication System Co ltd filed Critical Shenzhen Citops Communication System Co ltd
Priority to CN202010280216.3A priority Critical patent/CN111177091B/zh
Publication of CN111177091A publication Critical patent/CN111177091A/zh
Application granted granted Critical
Publication of CN111177091B publication Critical patent/CN111177091B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815—Journaling file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0619—Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/064—Management of blocks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Abstract

本发明涉及一种基于XFS文件系统录像预分配存储方法、系统及存储介质，解决了按照现有的预分配方式进行存储，容易出现数据存储错误或遗失的问题，具体包括对存储介质进行存储地址的预分配并存储至超级块中；根据分配的存储地址依次存储写入数据；在存储写入数据的过程中，判断对应的存储地址是否为坏道；若为坏道，则跳过该存储地址并继续判断后续存储地址是否坏道，直至所判断的存储地址并非为坏道，将当前写入数据存储至该并非为坏道的存储地址中；重新预分配存储介质中尚未存储的存储地址并更新至超级块；继续存储写入数据直至完成写入数据的存储。本发明能够在降低超级块更新频次的同时保证数据存储的可靠性，尽可能避免数据存储错误或遗失。

Description

基于XFS文件系统录像预分配存储方法、系统及存储介质
技术领域
本发明涉及存储方法的技术领域，尤其是涉及一种基于XFS文件系统录像预分配存储方法、系统及存储介质。
背景技术
日志文件系统是一种即使在断电或者是操作系统崩溃的情况下保证文件系统一致性的途径。XFS对文件系统元数据提供了日志支持。当文件系统更新时，元数据会在实际的磁盘块被更新之前顺序写入日志。XFS的日志被保存在磁盘块的循环缓冲区上，不会被正常的文件系统操作影响。在外置设备上部署日志会浪费超过最大日志大小的空间。XFS日志也可以被存储在文件系统的数据区（称为内置日志），或者一个额外的设备上（以减少磁盘操作）。
XFS文件系统内部被分为多个“分配组”，它们是文件系统中的等长线性存储区。每个分配组各自管理自己的索引节点（inode）和剩余空间。文件和文件夹可以跨越分配组。这一机制为XFS提供了可伸缩性和并行特性（多个线程和进程），可以同时在同一个文件系统上执行I/O操作。这种由分配组带来的内部分区机制在一个文件系统跨越多个物理设备时特别有用，使得优化对下级存储部件的吞吐量利用率成为可能。
其中，超级块就是文件系统的心脏；在超级块中保存了全局文件信息，如硬盘已用空间、数据块可用空间、inode结点信息等等。当操作系统启动后，系统内核会把超级块中的内容复制到内存中，并周期性的利用内存里的最新内容去更新硬盘上的超级块中的内容。由于这个更新存在一个时间差，为此内存中超级块的信息与硬盘中超级块的信息往往只有在开机与关机的某个特定时刻是同步的；而在其他时间都不同步。假设当操作系统意外宕机或者因为断电而造成意外事故时，内存中超级块的信息没有及时保存到硬盘中，此时文件系统的完整性就会受到破坏，该破坏轻则导致刚建立的丢失，重则会导致文件系统瘫痪。可见若超级块发生损坏，对于文件系统的破坏性非常的大。
在数据存储过程中，系统会生成一个存储地址，而数据根据所生成的存储地址以存储到对应的位置，同时超级块根据生成的存储地址进行更新，所以一旦有大量数据进行存储的过程中，则会出现超级块高频次运行以进行相关数据的更新，进而影响超级块的使用寿命；超级块的高频次的使用更加容易造成损坏。
为了避免超级块的高频次运行，故采用预分配的方式；先对存储介质中的存储地址预分配，同时将预分配的存储地址更新至超级块中；一旦分配完成之后即形成固定规则，后续所需存入的数据只能按照所预分配的存储地址依次进行存储；使得超级块无需在数据存储之后一次次更新地址，有效的降低了超级块的使用频次。
但是，这种预分配的方式，一旦完成预分配之后就形成固定规则，即无法进行更改，只能按照既定的分配地址的逻辑进行依次存储数据，此时若出现分配的地址为损坏的地址，则无法完成对应的存储功能，进而造成数据丢失，所以具有一定的改进空间。
发明内容
针对现有技术存在的不足，本发明目的一是提供一种基于XFS文件系统录像预分配存储方法，能够在降低超级块使用频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
本发明的上述发明目的一是通过以下技术方案得以实现的：
一种基于XFS文件系统录像预分配存储方法，包括：
对存储介质进行存储地址的预分配；根据预先配置规则将存储介质配置形成若干存储块；选择一个未完成存储地址预分配的存储块进行存储地址的预分配；将该存储块中完成预分配的存储地址存储至超级块中；
根据所预分配的存储地址依次存储所需写入的写入数据；
在存储写入数据的过程中，判断当前写入数据所存储的存储地址是否为坏道；
若当前写入数据所存储的存储地址为坏道，则跳过该存储地址并继续判断后续存储地址是否坏道，直至所判断的存储地址并非为坏道，将当前写入数据存储至该并非为坏道的存储地址中；重新预分配存储介质中尚未存储的存储地址并更新至超级块；
继续存储写入数据直至完成写入数据的存储。
通过采用上述技术方案，对存储介质进行存储地址的预分配，并存储到超级块中，后续所需存入的数据按照所预分配的存储地址依次进行存储，使得超级块无需在数据存储之后一次次更新地址，有效的降低了超级块的使用频次；而在存储过程中，对存储的地址进行检测是否为坏道，如果是坏道的情况，则跳过坏道进行存储；由于跳过坏道存储，之前所预分配的地址已经改变，故重新预分配存储地址并更新至超级块，进而实现在尽可能减少超级块运行频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
由于每个存储介质的存储量相对较大，此时若在存储过程中出现坏道，则需要重新预分配后续的存储地址，此时整个预分配的量较大，容易造成运行速度降低的情况；故先对存储介质进行分隔形成多个存储块，再对存储块进行存储地址的预分配，能够有效的降低单次预分配过程中数据的处理量，提高运行速率。
本发明在一较佳示例中可以进一步配置为：在对完成预分配的存储块存储写入数据的过程中，若该存储块储满之后，则重新选择一个未完成存储地址预分配的存储块进行存储地址的预分配，并将该存储块中完成预分配的存储地址更新至超级块中。
通过采用上述技术方案，在数据存储过程中，当前处于存储状态的存储块存满之后，则重新选择一个存储块进行存储地址的预分配，保证数据能够有序的完成存储。
本发明在一较佳示例中可以进一步配置为：在对完成预分配的存储块存储写入数据的过程中，判断当前存储块中已经完成存储的存储率大小，若该存储率大于等于所预设的存储基准值，则选择一个未完成存储地址预分配的存储块进行存储地址的预分配，并将该存储块中完成预分配的存储地址更新至超级块中。
通过采用上述技术方案，在数据存储过程中，一旦发现当前处于存储状态的存储块的存储率大于等于所预设的存储基准值的时候，说明此时当前这个存储块的存储量马上就要存满了，此时直接对未完成存储地址预分配的存储块进行存储地址的预分配，并更新到超级块中；使得马上要衔接另外一个存储块进行存储的时候，能够直接进行存储，而无需等待预分配的存储地址的过程。
本发明在一较佳示例中可以进一步配置为：判断当前写入数据所存储的存储地址是否为坏道的过程中，若当前写入数据所存储的存储地址为坏道，则对该存储地址进行标记形成坏道标记数据并存储至超级块中。
通过采用上述技术方案，一旦出现坏道的时候，就直接进行标记，以便于后续使用者查询以及后续数据调取使用。
本发明在一较佳示例中可以进一步配置为：在对存储块进行存储地址预分配之前，调取超级块中该存储块所对应的坏道标记数据并根据坏道标记数据以对存储块进行存储地址的预分配；
若超级块中不存在坏道标记数据，则对全部存储地址进行预分配；
若超级块中存在坏道标记数据，则除去坏道标记数据所对应的存储地址后对余下的存储地址进行预分配。
通过采用上述技术方案，由于部分存储介质可以实现存储之后擦除，再重新存储的功能；由于之前已经对该当前存储块进行过坏道的判断，故在重新存储的过程中，根据之前标记的坏道标记数据来进行存储地址的分配，即之前已经检测完成的坏道，无需重复检测，直接跳过坏道对之前未判定为坏道的存储地址进行判断即可，提高整体的存储效率。
本发明在一较佳示例中可以进一步配置为：根据该存储块所对应的坏道标记数据以判断该存储块的坏道率大小；
若该坏道率大于等于所预设的坏道基准值，则对该存储块进行标记以形成损坏提醒数据；
跳过该坏道率大于等于坏道基准值的存储块以对余下的存储块进行坏道率大小的判断，直至出现坏道率小于坏道基准值的存储块，则对该坏道率小于坏道基准值的存储块进行存储地址的预分配。
通过采用上述技术方案，根据坏道标记数据，对当前处于存储状态的存储块的坏道率大小进行判断，一旦超过坏道基准值，则直接跳过该存储块，直接由下个坏道率低于坏道基准值的存储块进行存储，坏道率较高说明该定义的存储块所对应的区域存在故障或者存在问题，若继续存储则可能会产生数据遗失等风险，故直接跳过该存储块进行存储。
本发明目的二是提供一种基于XFS文件系统录像预分配存储系统，能够在降低超级块使用频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
本发明的上述发明目的二是通过以下技术方案得以实现的：
一种基于XFS文件系统录像预分配存储系统，包括，
预分配模块：对存储介质进行存储地址的预分配；
超级块更新模块：将完成预分配的存储地址存储至超级块中；以及，
数据存储模块：根据所预分配的存储地址依次存储所需写入的写入数据；在存储写入数据的过程中，判断当前写入数据所存储的存储地址是否为坏道；若当前写入数据所存储的存储地址为坏道，则跳过该存储地址并继续判断后续存储地址是否坏道，直至所判断的存储地址并非为坏道，将当前写入数据存储至该并非为坏道的存储地址中；重新预分配存储介质中尚未存储的存储地址并更新至超级块；继续存储写入数据直至完成写入数据的存储。
通过采用上述技术方案，对存储介质进行存储地址的预分配，并存储到超级块中，后续所需存入的数据按照所预分配的存储地址依次进行存储，使得超级块无需在数据存储之后一次次更新地址，有效的降低了超级块的使用频次；而在存储过程中，对存储的地址进行检测是否为坏道，如果是坏道的情况，则跳过坏道进行存储；由于跳过坏道存储，之前所预分配的地址已经改变，故重新预分配存储地址并更新至超级块，进而实现在尽可能减少超级块运行频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
本发明目的三是提供一种计算机可读存储介质，能够存储相应的程序，便于实现在降低超级块使用频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
本发明的上述发明目的三是通过以下技术方案得以实现的：
一种计算机可读存储介质，包括能够被处理器加载执行时实现如上述的基于XFS文件系统录像预分配存储方法的程序。
通过采用上述技术方案，对存储介质进行存储地址的预分配，并存储到超级块中，后续所需存入的数据按照所预分配的存储地址依次进行存储，使得超级块无需在数据存储之后一次次更新地址，有效的降低了超级块的使用频次；而在存储过程中，对存储的地址进行检测是否为坏道，如果是坏道的情况，则跳过坏道进行存储；由于跳过坏道存储，之前所预分配的地址已经改变，故重新预分配存储地址并更新至超级块，进而实现在尽可能减少超级块运行频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
本发明目的四是提供一种智能终端，能够在降低超级块使用频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
本发明的上述发明目的四是通过以下技术方案得以实现的：
一种智能终端，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序，该程序能够被处理器加载执行时实现如上述的基于XFS文件系统录像预分配存储方法。
通过采用上述技术方案，对存储介质进行存储地址的预分配，并存储到超级块中，后续所需存入的数据按照所预分配的存储地址依次进行存储，使得超级块无需在数据存储之后一次次更新地址，有效的降低了超级块的使用频次；而在存储过程中，对存储的地址进行检测是否为坏道，如果是坏道的情况，则跳过坏道进行存储；由于跳过坏道存储，之前所预分配的地址已经改变，故重新预分配存储地址并更新至超级块，进而实现在尽可能减少超级块运行频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
综上所述，本发明包括以下有益技术效果：能够在降低超级块更新频次的同时保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
附图说明
图1是基于XFS文件系统录像预分配存储方法的流程示意图。
图2是关于对存储介质进行存储地址预分配的方法的流程示意图。
图3是关于可重复存储的存储介质的存储地址预分配方法的流程示意图。
图4是关于坏道率较大的存储块的存储地址预分配方法的流程示意图。
图5是基于XFS文件系统录像预分配存储系统的系统示意框图。
具体实施方式
以下结合附图对本发明作进一步详细说明。
本具体实施例仅仅是对本发明的解释，其并不是对本发明的限制，本领域技术人员在阅读完本说明书后可以根据需要对本实施例做出没有创造性贡献的修改，但只要在本发明的权利要求范围内都受到专利法的保护。
本发明实施例提供一种基于XFS文件系统录像预分配存储方法，包括：对存储介质进行存储地址的预分配；将完成预分配的存储地址存储至超级块中；根据所预分配的存储地址依次存储所需写入的写入数据；在存储写入数据的过程中，判断当前写入数据所存储的存储地址是否为坏道；若当前写入数据所存储的存储地址为坏道，则跳过该存储地址并继续判断后续存储地址是否坏道，直至所判断的存储地址并非为坏道，将当前写入数据存储至该并非为坏道的存储地址中；重新预分配存储介质中尚未存储的存储地址并更新至超级块；继续存储写入数据直至完成写入数据的存储。
本发明实施例中，对存储介质进行存储地址的预分配，并存储到超级块中，后续所需存入的数据按照所预分配的存储地址依次进行存储，使得超级块无需在数据存储之后一次次更新地址，有效的降低了超级块的使用频次；而在存储过程中，对存储的地址进行检测是否为坏道，如果是坏道的情况，则跳过坏道进行存储；由于跳过坏道存储，之前所预分配的地址已经改变，故重新预分配存储地址并更新至超级块，进而实现在尽可能减少超级块运行频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
另外，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，如无特殊说明，一般表示前后关联对象是一种“或”的关系。
下面结合说明书附图对本发明实施例作进一步详细描述。
本发明实施例提供一种基于XFS文件系统录像预分配存储方法，所述方法的主要流程描述如下。
如图1所示：
步骤1000：对存储介质进行存储地址的预分配；将完成预分配的存储地址存储至超级块中。
其中，本实施例中的存储介质包括U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质；关于存储地址的预分配是指预先进行分配并存储至超级块中，使得超级块无需在数据存储之后一次次更新地址，有效的降低了超级块的使用频次；该预分配可以理解为对物理地址进行预先分配，后续要存续的数据直接存储至之前分配的物理地址即可。
如图2所示，关于对存储介质进行存储地址预分配的方法如下：
步骤1100：根据预先配置规则将存储介质配置形成的若干存储块。
其中，该配置过程可以根据实际情况进行，例如根据均分的方式进行配置，也可以根据所定义的比例进行配置。
步骤1200：选择一个未完成存储地址预分配的存储块进行存储地址的预分配。
步骤1300：将该存储块中完成预分配的存储地址更新至超级块中。
其中，由于每个存储介质的存储量相对较大，故单次直接完成所有存储地址的预分配不仅仅影响前期的预分配速度，同时也影响后续的效率，例如若在存储过程中出现坏道，则需要重新预分配后续的存储地址，此时整个预分配的量较大，容易造成运行速度降低的情况；故先对存储介质进行分隔形成多个存储块，再对存储块进行存储地址的预分配，能够有效的降低单次预分配过程中数据的处理量，提高运行速率。
步骤2000：根据所预分配的存储地址依次存储所需写入的写入数据。
在存储过程中，经常会出现一种情况，即所需要存储的写入数据大于单个存储块的存储量，此时则需要使用至少两个存储块进行存储；故此时需要对至少两个存储块进行存储地址的预分配。
在一个实施例中，在对完成预分配的存储块存储写入数据的过程中，若该存储块储满之后，则重新选择一个未完成存储地址预分配的存储块进行存储地址的预分配，并将该存储块中完成预分配的存储地址更新至超级块中。
在一个实施例中，在对完成预分配的存储块存储写入数据的过程中，判断当前存储块中已经完成存储的存储率大小，若该存储率大于等于所预设的存储基准值，则选择一个未完成存储地址预分配的存储块进行存储地址的预分配，并将该存储块中完成预分配的存储地址更新至超级块中。
其中，存储率即当前存储块中数据的存储情况，可以理解为存储率等于该存储块中已经完成存储的存储量除以该存储块的总存储量；本实施例中，存储基准值可以为80%至99%之间的任意数值，优选存储基准值为95%。
步骤2100：在存储写入数据的过程中，判断当前写入数据所存储的存储地址是否为坏道。
其中，坏道分为物理坏道和逻辑坏道。物理坏道就是硬盘磁片的确受到损伤而导致坏道，逻辑坏道是指磁片并未损伤，但由于软件故障、病毒、非正常操作等造成的坏道假象，使得正常的扇区也被标示为坏扇区。在实际检测过程中，可以采用以下的工具进行判断是否坏道，例如：西捷是SeaTools，IBM是Drive Fitness，三星是Self-diagnostic，西部数据是Data Lifeguard Tools，迈拓是Maxtor Diagnostics Program等，也可以采用其他智能终端指代的坏道检测工具实现检测。
步骤2111：若当前写入数据所存储的存储地址为坏道，则跳过该存储地址并继续判断后续存储地址是否坏道，直至所判断的存储地址并非为坏道，将当前写入数据存储至该并非为坏道的存储地址中；重新预分配存储介质中尚未存储的存储地址并更新至超级块。
步骤2112：判断当前写入数据所存储的存储地址是否为坏道的过程中，若当前写入数据所存储的存储地址为坏道，则对该存储地址进行标记形成坏道标记数据并存储至超级块中。
其中，标记的方式可以为独立存储为坏道的存储地址或者对为坏道的存储地址进行颜色标记等等方式实现，一旦出现坏道的时候，就直接进行标记，以便于后续使用者查询以及后续数据调取使用。
步骤2120：若当前写入数据所存储的存储地址并非为坏道，则将当前写入数据存储至该存储地址。
其中，在存储过程中，对存储的地址进行检测是否为坏道，如果是坏道的情况，则跳过坏道进行存储；由于跳过坏道存储，之前所预分配的地址已经改变，故重新预分配存储地址并更新至超级块，进而实现在尽可能减少超级块运行频次的情况下，保证数据存储的可靠性，尽可能避免数据存储错误或遗失。
步骤3000：继续存储写入数据直至完成写入数据的存储。
由于部分存储介质可以实现存储之后擦除，再重新存储的功能；若之前已经对该当前存储块进行过坏道的判断，故在重新存储的过程中，可以根据之前标记的坏道标记数据来进行存储地址的分配，如图3所示，具体关于可重复存储的存储介质的存储地址预分配方法如下：
步骤4100：在对存储块进行存储地址预分配之前，调取超级块中该存储块所对应的坏道标记数据并根据坏道标记数据以对存储块进行存储地址的预分配。
步骤4200：若超级块中不存在坏道标记数据，则对全部存储地址进行预分配。
步骤4300：若超级块中存在坏道标记数据，则除去坏道标记数据所对应的存储地址后对余下的存储地址进行预分配。
其中，基于之前已经检测完成的坏道，无需重复检测，直接跳过坏道对之前未判定为坏道的存储地址进行判断即可，提高整体的存储效率。
坏道率较高说明该定义的存储块所对应的区域存在故障或者存在问题，若继续存储则可能会产生数据遗失等风险，如图4所示，故关于坏道率较大的存储块的存储地址预分配方法如下：
步骤5100：根据该存储块所对应的坏道标记数据以判断该存储块的坏道率大小。
其中，坏道率可以理解为该存储块中存在坏道的量处于该存储块的总存储量。
步骤5200：若该坏道率大于等于所预设的坏道基准值，则对该存储块进行标记以形成损坏提醒数据。
其中，损坏提醒数据可以为颜色标记提醒、语音提醒、文字提醒、弹窗提醒等等，可以采用上述的一种或几种方式的结合实现提醒，根据实际情况进行设置。
步骤5300：跳过该坏道率大于等于坏道基准值的存储块以对余下的存储块进行坏道率大小的判断，直至出现坏道率小于坏道基准值的存储块，则对该坏道率小于坏道基准值的存储块进行存储地址的预分配。
其中，根据坏道标记数据，对当前处于存储状态的存储块的坏道率大小进行判断，一旦超过坏道基准值，则直接跳过该存储块，直接由下个坏道率低于坏道基准值的存储块进行存储，保证写入数据存储的可靠性，本实施例中，坏道基准值可以为20%至50%之间的任意数值，优选坏道基准值为40%。
本发明实施例提供一种计算机可读存储介质，包括能够被处理器加载执行时实现如图1-图3。流程中所述的各个步骤。
所述计算机可读存储介质例如包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
基于同一发明构思，本发明实施例提供一种智能终端，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序，该程序能够被处理器加载执行时实现如图1-图3。流程中所述的基于XFS文件系统录像预分配存储方法。
基于同一发明构思，如图5所示，本发明实施例提供一种基于XFS文件系统录像预分配存储系统，包括，
预分配模块：对存储介质进行存储地址的预分配；
超级块更新模块：将完成预分配的存储地址存储至超级块中；以及，
数据存储模块：根据所预分配的存储地址依次存储所需写入的写入数据；在存储写入数据的过程中，判断当前写入数据所存储的存储地址是否为坏道；若当前写入数据所存储的存储地址为坏道，则跳过该存储地址并继续判断后续存储地址是否坏道，直至所判断的存储地址并非为坏道，将当前写入数据存储至该并非为坏道的存储地址中；重新预分配存储介质中尚未存储的存储地址并更新至超级块；继续存储写入数据直至完成写入数据的存储。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以对本申请的技术方案进行了详细介绍，但以上实施例的说明只是用于帮助理解本发明的方法及其核心思想，不应理解为对本发明的限制。本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。

Claims (9)

1.一种基于XFS文件系统录像预分配存储方法，其特征是，包括：
对存储介质进行存储地址的预分配；根据预先配置规则将存储介质配置形成若干存储块；选择一个未完成存储地址预分配的存储块进行存储地址的预分配；将对应存储块中完成预分配的存储地址存储至超级块中；
根据所预分配的存储地址依次存储所需写入的写入数据；
在存储写入数据的过程中，判断当前写入数据所存储的存储地址是否为坏道；
若当前写入数据所存储的存储地址为坏道，则跳过该存储地址并继续判断后续存储地址是否坏道，直至所判断的存储地址并非为坏道，将当前写入数据存储至该并非为坏道的存储地址中；重新预分配存储介质中尚未存储的存储地址并更新至超级块；
继续存储写入数据直至完成写入数据的存储。
2.根据权利要求1所述的基于XFS文件系统录像预分配存储方法，其特征是：在对完成预分配的存储块存储写入数据的过程中，若该存储块储满之后，则重新选择一个未完成存储地址预分配的存储块进行存储地址的预分配，并将该存储块中完成预分配的存储地址更新至超级块中。
3.根据权利要求1所述的基于XFS文件系统录像预分配存储方法，其特征是：在对完成预分配的存储块存储写入数据的过程中，判断当前存储块中已经完成存储的存储率大小，若该存储率大于等于所预设的存储基准值，则选择一个未完成存储地址预分配的存储块进行存储地址的预分配，并将该存储块中完成预分配的存储地址更新至超级块中。
4.根据权利要求1所述的基于XFS文件系统录像预分配存储方法，其特征是：判断当前写入数据所存储的存储地址是否为坏道的过程中，若当前写入数据所存储的存储地址为坏道，则对该存储地址进行标记形成坏道标记数据并存储至超级块中。
5.根据权利要求4所述的基于XFS文件系统录像预分配存储方法，其特征是：在对存储块进行存储地址预分配之前，调取超级块中该存储块所对应的坏道标记数据并根据坏道标记数据以对存储块进行存储地址的预分配；
若超级块中不存在坏道标记数据，则对全部存储地址进行预分配；
若超级块中存在坏道标记数据，则除去坏道标记数据所对应的存储地址后对余下的存储地址进行预分配。
6.根据权利要求4或5所述的基于XFS文件系统录像预分配存储方法，其特征是：
根据该存储块所对应的坏道标记数据以判断该存储块的坏道率大小；
若该坏道率大于等于所预设的坏道基准值，则对该存储块进行标记以形成损坏提醒数据；
跳过该坏道率大于等于坏道基准值的存储块以对余下的存储块进行坏道率大小的判断，直至出现坏道率小于坏道基准值的存储块，则对该坏道率小于坏道基准值的存储块进行存储地址的预分配。
7.一种基于XFS文件系统录像预分配存储系统，其特征是，包括：
预分配模块：对存储介质进行存储地址的预分配；
超级块更新模块：将完成预分配的存储地址存储至超级块中；以及，
数据存储模块：根据所预分配的存储地址依次存储所需写入的写入数据；在存储写入数据的过程中，判断当前写入数据所存储的存储地址是否为坏道；若当前写入数据所存储的存储地址为坏道，则跳过该存储地址并继续判断后续存储地址是否坏道，直至所判断的存储地址并非为坏道，将当前写入数据存储至该并非为坏道的存储地址中；重新预分配存储介质中尚未存储的存储地址并更新至超级块；继续存储写入数据直至完成写入数据的存储。
8.一种计算机可读存储介质，其特征是，存储有能够被处理器加载执行时实现如权利要求1至6中任一项所述的基于XFS文件系统录像预分配存储方法的程序。
9.一种智能终端，其特征是，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序，该程序能够被处理器加载执行时实现如权利要求1至6中任一项所述的基于XFS文件系统录像预分配存储方法。
CN202010280216.3A 2020-04-10 2020-04-10 基于xfs文件系统录像预分配存储方法、系统及存储介质 Active CN111177091B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010280216.3A CN111177091B (zh) 2020-04-10 2020-04-10 基于xfs文件系统录像预分配存储方法、系统及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010280216.3A CN111177091B (zh) 2020-04-10 2020-04-10 基于xfs文件系统录像预分配存储方法、系统及存储介质

Publications (2)

Publication Number Publication Date
CN111177091A CN111177091A (zh) 2020-05-19
CN111177091B true CN111177091B (zh) 2020-07-31

Family

ID=70653462

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010280216.3A Active CN111177091B (zh) 2020-04-10 2020-04-10 基于xfs文件系统录像预分配存储方法、系统及存储介质

Country Status (1)

Country Link
CN (1) CN111177091B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9170885B2 (en) * 2011-03-21 2015-10-27 Apple Inc. Independent management of data and parity logical block addresses
CN107122131A (zh) * 2017-04-18 2017-09-01 杭州宏杉科技股份有限公司 自动精简配置的方法及装置
CN107247563A (zh) * 2017-07-06 2017-10-13 济南浪潮高新科技投资发展有限公司 一种nand flash芯片的块信息标识实现方法
CN109725848A (zh) * 2017-10-30 2019-05-07 东芝存储器株式会社 计算机系统及储存装置的控制方法
CN110389720A (zh) * 2018-04-23 2019-10-29 爱思开海力士有限公司 存储装置及其操作方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5786611B2 (ja) * 2011-09-30 2015-09-30 富士通株式会社 ストレージ装置およびストレージシステム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9170885B2 (en) * 2011-03-21 2015-10-27 Apple Inc. Independent management of data and parity logical block addresses
CN107122131A (zh) * 2017-04-18 2017-09-01 杭州宏杉科技股份有限公司 自动精简配置的方法及装置
CN107247563A (zh) * 2017-07-06 2017-10-13 济南浪潮高新科技投资发展有限公司 一种nand flash芯片的块信息标识实现方法
CN109725848A (zh) * 2017-10-30 2019-05-07 东芝存储器株式会社 计算机系统及储存装置的控制方法
CN110389720A (zh) * 2018-04-23 2019-10-29 爱思开海力士有限公司 存储装置及其操作方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
星载固态存储文件化管理方案应用研究;董振兴;《中国博士学位论文全文数据库 信息科技辑》;20171115;第I137-8页 *

Also Published As

Publication number Publication date
CN111177091A (zh) 2020-05-19

Similar Documents

Publication Publication Date Title
CN102177505B (zh) 用于优化闪速拷贝级联中的映射表的清理的方法和系统
CN102667703B (zh) 用于虚拟磁带库系统中的优化回收处理的系统和方法
CN104407933B (zh) 一种数据的备份方法及装置
CN111324303B (zh) Ssd垃圾回收方法、装置、计算机设备及存储介质
CN110221782A (zh) 视频文件处理方法及装置
EP3306477A1 (en) Storage device and block storage method based on the storage device
CN103425589A (zh) 控制装置、存储装置以及存储控制方法
CN110018989A (zh) 一种快照比对的方法和装置
KR20160100211A (ko) 대용량 오디오 핑거프린트 데이터베이스의 온라인 실시간 업데이팅을 구성하기 위한 방법 및 장치
CN107885616A (zh) 一种基于文件系统解析的海量小文件备份恢复方法
JP2009043162A (ja) 仮想ライブラリ装置、仮想ライブラリシステム、仮想ライブラリ装置の論理ボリューム複写方法。
US10042570B2 (en) Tape backup and restore in a disk storage environment with intelligent data placement
CN103119567B (zh) 用于管理虚拟带库域的系统和方法
CN111857581A (zh) 一种数据存储的处理方法及系统
CN102629223B (zh) 一种数据修复方法及装置
CN111190537A (zh) 一种追加写场景下顺序存储磁盘管理的方法及系统
CN108646987A (zh) 一种文件卷的管理方法、装置、存储介质及终端
CN111177091B (zh) 基于xfs文件系统录像预分配存储方法、系统及存储介质
CN110658993A (zh) 一种快照回滚方法、装置、设备及存储介质
CN109521957A (zh) 一种数据处理方法和装置
CN109522240A (zh) 一种数据处理方法和装置
CN111399774B (zh) 分布式存储系统下基于快照的数据处理方法和装置
CN114840358A (zh) 一种基于虚拟磁盘的数据修复方法、装置及其介质
CN112988696B (zh) 文件整理方法、装置及相关设备
CN108959517B (zh) 文件管理方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant