CN104504349B - 一种录像数据安全存储装置及方法 - Google Patents
一种录像数据安全存储装置及方法 Download PDFInfo
- Publication number
- CN104504349B CN104504349B CN201410799248.9A CN201410799248A CN104504349B CN 104504349 B CN104504349 B CN 104504349B CN 201410799248 A CN201410799248 A CN 201410799248A CN 104504349 B CN104504349 B CN 104504349B
- Authority
- CN
- China
- Prior art keywords
- module
- data block
- data
- block
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/70—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
- G06F21/78—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer to assure secure storage of data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/06—Addressing a physical block of locations, e.g. base addressing, module addressing, memory dedication
- G06F12/0646—Configuration or reconfiguration
- G06F12/0653—Configuration or reconfiguration with centralised address assignment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/64—Protecting data integrity, e.g. using checksums, certificates or signatures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- General Health & Medical Sciences (AREA)
- Bioethics (AREA)
- Health & Medical Sciences (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
本发明提供一种录像数据安全存储装置,包括专用分区表模块,索引块模块,数据块模块,数据块模块包括数据块头模块和数据块头备份模块及相应的数据记录模块,当数据块头模块受到破坏时,可通过所述数据块头备份模块的信息来访问所述数据记录模块,数据块头模块和数据块头备份模块的组成单元完全一样,都具有以下单元:块号记录单元,属性记录单元,坏块标识记录单元,空闲标识记录单元,忙标识记录单元,随机数标识记录单元,循环冗余校验单元。通过本发明可以改善数据存储的安全性和稳定性,克服FAT文件系统的固有缺陷。
Description
技术领域
本发明涉及嵌入式文件系统领域,特别是涉及一种录像数据存储装置。
背景技术
目前的硬盘录像机中,基于PC和采集卡的一般采用Windows系统,文件系统则多采用NTFS或FAT32;而嵌入式硬盘录像机所采用的文件系统则与厂商选择的嵌入式操作系统及其研发能力有密切的关系。目前嵌入式硬盘录像机中所采用的嵌入式操作系统有RTOS、pSOS、嵌入式Linux、VxWorks等,一般也都采用FAT文件系统。
随着对硬盘录像机需求的增长,传统FAT格式的文件系统逐渐显得有些力不从心,例如读写效率低,磁盘容量和分区大小有限制,有文件大小限制,没有断电保护功能,文件数据安全性低等。另外,长时间连续覆盖使用后会存在大量文件碎片,降低磁盘使用率。据不完全统计,硬盘录像机(DVR)的故障率60%是由硬盘引起的,这些问题在需要高安全性的安防行业显得尤为重要。PC系统使用的FAT文件系统,对于长时间录像产生的大数据包无法管理,只能进行分包,将一段完整的录像,分为若干个小的文件包,如5、10、30min自动形成一个文件,或者150MB、200MB作为一个文件。这样容易产生包与包之间丢帧现象。同时,硬盘磁头需要频繁地读写数据与文件索引,磁头频繁跳动,对于每天十几~24小时连续读写硬盘的DVR系统,极易造成硬盘故障。此外,FAT文件系统用做录像机录像资料管理还存在两个风险:一是文件分配表如果损坏,则录像资料大多会丢失;二是系统突然断电或遭到人为破坏,当前的录像数据不能保存和恢复。因此,如何可靠、安全地存储视频数据就成为一个亟待解决的突出问题。
发明内容
为弥补FAT,EXT3等嵌入式文件系统在媒体数据流存储领域中的不足之处,本发明的目的在于:提供一种录像数据安全存储装置,改善数据存储的安全性和稳定性,克服FAT,EXT3等嵌入式文件存储系统的固有缺陷。
为实现本发明的目的,本发明的技术方案如下:
本发明提供一种录像数据安全存储装置,包括专用分区表模块,存储装置每次格式化后,都会写入相应的分区表,方便对整个存储装置进行初始化的管理;索引块模块,主要是对录入的数据进行管理;数据块模块包括数据块头模块和数据块头备份模块及相应的数据记录模块,当所述数据块头模块受到破坏时,可通过所述数据块头备份模块的信息来访问所述数据记录模块,数据块头模块和数据块头备份模块的组成单元完全一样,都具有以下单元:块号记录单元,用于记录所述数据块模块的编号;属性记录单元,用于记录数据块模块的属性;坏块标识记录单元,用于记录数据块是否为坏块,获取数据块能否使用的情况,如果发现此数据块不能够使用,则不再使用该数据块,这样每个数据块模块都有相对独立的坏块标识记录单元,某一个单独的数据块损坏时不会影响其他数据块的读写;空闲标识记录单元,用于记录数据块还未写入任何数据;忙标识记录单元,用于记录数据块已写入数据;随机数标识记录单元,用于记录每次格式化后产生的一个相对应的随机数,区分格式化操作的唯一性;循环冗余校验单元,对数据差错校验,用于保证数据的正确性和完整性。
进一步地,专用分区表模块的存储容量为128M,其中每隔10M有一个512Byte的内容相同的分区表信息,记录有磁盘容量、循环冗余校验(crc校验)的信息等供索引块和数据块使用;
进一步地,该存储装置中有5个索引块和N个数据块,N值大于等于1,5个索引块内容和容量均完全一样,提供存储装置的基本信息,索引块和/或数据块均匀分布在整个存储装置中;
进一步地,数据块模块容量如果太小,则写的效率会降低,如果太大,则会造成磁盘使用率降低,且没有那么大的内存。根据目前的测试情况,1-2M的数据块容量是较为合适的。磁盘使用效率的估计(数据块大小1M):目前的录像文件大小大约是25MB/10min/cif,按最后一个块的平均使用率50%计算,磁盘使用效率约为24.5/25=98%。
进一步地,索引块里存在数据块描述符,用于描述数据块模块的基本信息,方便对录像存储数据文件进行管理,数据块描述符模块还包括以下单元:每个数据块的块号记录单元,用于记录数据块的编号;属性记录单元,用于记录数据块的属性;格式化标识记录单元,用于记录数据块模块是否已格式化,格式化时,如果记录所述数据块模块已格式化,则不再对其格式化,如果记录所述数据块模块未格式化,则对其格式化;数据块容量记录单元,用于记录数据块模块的内存容量;数据块的总数量记录单元,用于记录数据块模块的总数量;已占用块数记录单元,用于记录已经写入数据的部分块数,由于存储写入时不能在有数据的地方写入数据,需要在没有数据的及连续的地方写入数据,因此需要知道已经占用的块数;写指针位置记录单元,用于在存储数据时,能够根据写指针的位置写入数据,方便我们下一次视频录像时直接在磁盘上写入数据;数据块描述符索引节点个数记录单元,用于记录每个所述数据块描述符索引节点(inode)个数;循环冗余校验单元(crc校验),对数据差错校验,它是数据通信领域中的一种差错校验码,用于保证数据的正确性和完整性。
另外,本发明还公开一种存储录像数据的方法,包括包括添加专用分区表模块、数据块模块、索引块模块的步骤,还包括将数据块头模块、数据块头备份模块及记录的数据信息添加到所述数据块模块中的步骤,当所述数据块头模块受到破坏时,可通过所述数据块头备份模块的信息来访问所述记录的数据信息,数据块头模块和数据块头备份模块的组成单元完全一样,获得数据块头和数据块头备份都包括以下具体步骤:
通过块号记录模块记录数据块模块编号;
通过属性记录模块记录数据块模块属性;
通过坏块标识记录单元记录数据块是否为坏块,获取数据块能否使用的情况;
通过空闲标识记录单元记录数据块还未写入任何数据;
通过忙标识记录单元记录数据块已写入数据;
通过随机数标识记录单元记录每次格式化后产生的一个相对应的随机数,区分格式化操作的唯一性;
通过循环冗余校验单元,对数据差错校验,用于保证数据的正确性和完整性。
通过以上技术方案,本发明具有以下优点:
1、当数据块头模块受到破坏时,可通过所述数据块头备份模块的信息来访问数据块模块,这样可以提高数据存储的安全性和稳定性。
2、每个数据块头模块和数据块头备份模块都有相对独立的坏块标识记录单元,某一个单独的数据块损坏时不会影响其他数据块的读写。
3、另外,在格式化时,数据库模块中的随机数标识记录单元,能够记录每次格式化后产生的一个相对应的随机数,区分格式化操作的唯一性,通过该随机数标识记录单元可以将格式化过程分为两种,一种是将数据块直接格式化,另一种是以写入数据的方式直接覆盖相应的数据,省去直接格式化的过程。
附图说明
图1是录像数据安全存储装置总体构成的一种实施例示意图。。
图2是录像数据安全存储装置中数据块模块构造的一种实施例示意图。
其中,1表示录像数据安全存储装置;2表示专用分区表模块;3表示索引块模块;4表示数据块模块;5表示数据块头模块;6表示数据块头备份模块;6a表示块号记录单元;6b表示属性记录单元;6c表示坏块标识记录单元;6d表示空闲标识记录单元;6e表示忙标识记录单元;6f表示随机数标识记录单元;6g循环冗余校验单元;7表示数据记录模块。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
专用分区表模块2的大小为128M,其中每隔10M有一个大小为512Byte内容相同的分区表信息,包括一些磁盘基本信息如磁盘大小,循环冗余校验等供索引块模块3和数据块模块4使用;
该存储装置1中索引块模块3的数量为5个,数据块模块4的数量为N个,N值大于等于1。索引块模块3和数据块模块4的大小一样;5个索引块模块3的内容完全一样,提供相关存储装置1的基本信息,索引块模块3和数据块模块4均匀分布在整个文件存储装置1中;
数据块模块4包括数据块头模块5和数据块头备份模块6及相应的数据记录模块7,当数据块头模块5受到破坏时,可通过数据块头备份模块6的信息来访问所述数据记录模块7,数据块头模块5和数据块头备份模块6的组成单元完全一样,都具有以下单元:
块号记录单元6a,用于记录数据块模块的编号;
属性记录单元6b,用于记录数据块模块的属性;
坏块标识记录单元6c,用于记录数据块是否为坏块,获取所述数据块能否使用的情况;
空闲标识记录单元6d,用于记录数据块还未写入任何数据;
忙标识记录单元6e,用于记录数据块已写入数据;
随机数标识记录单元6f,用于记录每次格式化后产生的一个相对应的随机数,区分格式化操作的唯一性;
循环冗余校验单元6g,对数据差错校验,用于保证数据的正确性和完整性。
在格式化的时候,先从设备驱动中得到存储设备的容量;格式化的时候每隔10M写入分区表信息,共写入10个,分区表信息加循环冗余校验,只对分区表的16字节进行效验,效验放在分区表最后的0x55aa之前的4个字节;格式化时,文件系统从128M的位置开始,结束位置根据磁盘容量大小决定;如果格式化的时候出现错误,特别是写分区表的时候出错,则直接在文件系统缺省的开始处开始格式化;如果从分区表无法获取文件系统的起始位置(效验正确)和磁盘大小,则用缺省值。
在本发明的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
在本发明的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。
Claims (10)
1.一种录像数据安全存储装置,包括专用分区表模块,索引块模块,数据块模块,其特征在于:所述数据块模块包括数据块头模块和数据块头备份模块及相应的数据记录模块,当所述数据块头模块受到破坏时,可通过所述数据块头备份模块的信息来访问所述数据记录模块,所述数据块头模块和所述数据块头备份模块的组成单元完全一样,都具有以下单元:
块号记录单元,用于记录所述数据块模块的编号;
属性记录单元,用于记录所述数据块模块的属性;
坏块标识记录单元,用于记录所述数据块是否为坏块,获取所述数据块能否使用的情况;
空闲标识记录单元,用于记录所述数据块还未写入任何数据;
忙标识记录单元,用于记录所述数据块已写入数据;
随机数标识记录单元,用于记录每次格式化后产生的一个相对应的随机数,区分格式化操作的唯一性;
循环冗余校验单元,对数据差错校验,用于保证数据的正确性和完整性。
2.根据权利要求1所述的存储装置,其特征在于:所述专用分区表模块中有磁盘容量记录单元、循环冗余校验记录单元。
3.根据权利要求1所述的存储装置,其特征在于:所述专用分区表模块的存储容量为128M,其中每隔10M有一个512Byte的内容相同的分区表信息。
4.根据权利要求1所述的存储装置,其特征在于:所述索引块模块均匀分布在存储装置中。
5.根据权利要求1所述的存储装置,其特征在于:所述数据块模块均匀分布在存储装置中。
6.根据权利要求1所述的存储装置,其特征在于:所述索引块模块数量为5个,所述数据块模块数量为N个,N≥1,所述索引块模块的容量与内容均相同,所述数据块模块的容量与内容均相同。
7.根据权利要求1至6任一项所述的存储装置,其特征在于:所述数据块模块的容量范围在1M至2M。
8.一种录像数据安全存储的方法,包括添加专用分区表模块、数据块模块、索引块模块的步骤,其特征在于,将数据块头模块、数据块头备份模块及记录的数据信息添加到所述数据块模块中,当所述数据块头模块受到破坏时,可通过所述数据块头备份模块的信息来访问所述记录的数据信息,所述数据块头模块和所述数据块头备份模块的组成单元完全一样,获得所述数据块头和所述数据块头备份都包括以下具体步骤:
通过块号记录模块记录所述数据块模块编号;
通过属性记录模块记录所述数据块模块属性;
通过坏块标识记录单元记录所述数据块是否为坏块,获取所述数据块能否使用的情况;
通过空闲标识记录单元记录所述数据块还未写入任何数据;
通过忙标识记录单元记录所述数据块已写入数据;
通过随机数标识记录单元记录每次格式化后产生的一个相对应的随机数,区分格式化操作的唯一性;
通过循环冗余校验单元,对数据差错校验,用于保证数据的正确性和完整性。
9.根据权利要求8所述的录像数据安全存储的方法,其特征在于,所述索引块模块和数据块模块均匀分布在存储装置中,所述索引块模块的容量与内容均相同,所述数据块模块的容量与内容均相同。
10.根据权利要求8所述的录像数据安全存储的方法,其特征在于:添加索引块模块的数量为5个,添加数据块模块的数量为N个,N≥1。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410799248.9A CN104504349B (zh) | 2014-12-19 | 2014-12-19 | 一种录像数据安全存储装置及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410799248.9A CN104504349B (zh) | 2014-12-19 | 2014-12-19 | 一种录像数据安全存储装置及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104504349A CN104504349A (zh) | 2015-04-08 |
CN104504349B true CN104504349B (zh) | 2017-06-20 |
Family
ID=52945745
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410799248.9A Active CN104504349B (zh) | 2014-12-19 | 2014-12-19 | 一种录像数据安全存储装置及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104504349B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106547489A (zh) * | 2016-10-21 | 2017-03-29 | 北京小米移动软件有限公司 | 数据记录方法及装置 |
CN110333887B (zh) * | 2019-07-04 | 2023-04-14 | 郑州天迈科技股份有限公司 | 车载机录像模块优化系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101364218A (zh) * | 2007-08-10 | 2009-02-11 | 深圳市锐明视讯技术有限公司 | 一种硬盘录像机文件系统及其检查方法 |
CN101872639A (zh) * | 2010-01-11 | 2010-10-27 | 杭州海康威视数字技术股份有限公司 | 在数字硬盘录像机上存储及检索图片数据的方法及装置 |
CN102932621A (zh) * | 2011-08-08 | 2013-02-13 | 杭州海康威视数字技术股份有限公司 | 一种存储数据的方法及装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7685126B2 (en) * | 2001-08-03 | 2010-03-23 | Isilon Systems, Inc. | System and methods for providing a distributed file system utilizing metadata to track information about data stored throughout the system |
-
2014
- 2014-12-19 CN CN201410799248.9A patent/CN104504349B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101364218A (zh) * | 2007-08-10 | 2009-02-11 | 深圳市锐明视讯技术有限公司 | 一种硬盘录像机文件系统及其检查方法 |
CN101872639A (zh) * | 2010-01-11 | 2010-10-27 | 杭州海康威视数字技术股份有限公司 | 在数字硬盘录像机上存储及检索图片数据的方法及装置 |
CN102932621A (zh) * | 2011-08-08 | 2013-02-13 | 杭州海康威视数字技术股份有限公司 | 一种存储数据的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN104504349A (zh) | 2015-04-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104484427B (zh) | 一种录像文件存储装置及方法 | |
CN102508784B (zh) | 视频监控设备中闪存卡的数据存储方法及其系统 | |
US8806173B2 (en) | Elimination of duplicate written records | |
CN103226965B (zh) | 基于时间位图的音视频数据存取方法 | |
US10061655B2 (en) | Volatile cache reconstruction after power failure | |
CN104583930B (zh) | 数据迁移的方法、控制器和数据迁移装置 | |
US20150193473A1 (en) | Database Storage System based on Optical Disk and Method Using the System | |
US20090037646A1 (en) | Method of using a flash memory for a circular buffer | |
CN108399050B (zh) | 一种数据处理方法及装置 | |
CN104811645A (zh) | 一种嵌入式录像数据存储方法 | |
CN103793335B (zh) | 存储控制设备、存储设备、信息处理系统及存储控制方法 | |
CN105224891A (zh) | 磁盘光盘融合数据安全存储方法、系统及装置 | |
CN101364218A (zh) | 一种硬盘录像机文件系统及其检查方法 | |
CN105100716A (zh) | 一种用于网络视频监控的安全存储单元及其系统 | |
US20170277451A1 (en) | Method to limit impact of partial media failure of disk drive and detect/report the loss of data for objects due to partial failure of media | |
CN104504349B (zh) | 一种录像数据安全存储装置及方法 | |
CN104007936A (zh) | 访问数据的方法及装置 | |
CN104200831A (zh) | 车载多媒体终端sd卡的存储方法 | |
CN105721809A (zh) | 储存方法与录像系统 | |
US20120005441A1 (en) | Copying apparatus, copying method, memory medium, and program | |
CN105653385B (zh) | 一种车载录像方法 | |
CN103092730B (zh) | 一种信息存储与读取方法 | |
TWI555406B (zh) | 儲存方法及其處理裝置與錄影系統 | |
CN210776642U (zh) | 一种多个tf卡自动拼盘装置 | |
EP2306462B1 (en) | Semiconductor memory device and its early-warning system and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |