CN102663107A - 嵌入式数据管理的方法及系统 - Google Patents
嵌入式数据管理的方法及系统 Download PDFInfo
- Publication number
- CN102663107A CN102663107A CN2012101109869A CN201210110986A CN102663107A CN 102663107 A CN102663107 A CN 102663107A CN 2012101109869 A CN2012101109869 A CN 2012101109869A CN 201210110986 A CN201210110986 A CN 201210110986A CN 102663107 A CN102663107 A CN 102663107A
- Authority
- CN
- China
- Prior art keywords
- data
- file
- loading
- index
- embedded
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明揭示了一种嵌入式数据管理的方法及系统。该方法可包括步骤:分析需要加载的数据,建立需加载的索引文件;加载所述索引文件;在需要加载数据时,根据所述索引文件定向加载数据。本发明可使用分层次、分阶段加载数据,减少了每次读取的数据量减少了内存开支,降低了读取中的出错概率,使读取中的错误恢复更迅速,并且极大的提高了数据加载的速度;实现数据按需加载,降低内存消耗;同时,可在保障数据可以恢复出厂的基础上,最大限度的减少存储开支;另外,对数据进行的增、删以及修改等操作都变为可行、快捷和简单。
Description
技术领域
本发明涉及到电数据处理领域,特别涉及到一种嵌入式数据管理的方法及系统。
背景技术
现有技术中嵌入式系统以其系统规模小,硬件成本低,产品专用度高而被广泛应用。而正因为上述特点,嵌入式软件要求软件设计人员在保证功能正常的基础上,最大程度的降低成本支出。因此,高效、安全以及科学的数据管理方案的设计和使用,在嵌入式软件设计中尤为重要。
现有嵌入式系统对于大量同一类型数据文件的存储方案,主要包括以下两种方案:
1、将所有需要的数据存储在一个文件里面,程序初始化的时候,整个的读取该文件并做解析,以供使用。该种方式一次性读取的数据量大,速度慢,数据的删除和插入操作在同步文件的时候非常复杂,直接导致了读取和存储的时候出错概率的升高。
2、将所需要的数据固化在程序里面,使用特定方式加载和使用。但是如此一来,数据的使用灵活性基本没有,无法对数据进行增、删、改等操作。
发明内容
本发明的主要目的为提供一种嵌入式数据管理的方法,降低了数据读取中的出错概率。
本发明提出一种嵌入式数据管理的方法,包括步骤:
分析需要加载的数据,建立需加载的索引文件;
加载所述索引文件;
在需要加载数据时,根据所述索引文件定向加载数据。
优选地,所述方法之后还可包括步骤:
在加载数据时,判断更新文件中是否存在所述数据;
当不存在时,从备份文件中读取。
优选地,所述备份文件中固化存储初始数据;所述更新文件中存储更新后数据。
优选地,所述在加载数据时,判断更新文件中是否存在所述数据的步骤之前还包括:
分别建立备份文件以及更新文件。
本发明还提出一种嵌入式数据管理的系统,包括:
索引建立单元,用于分析需要加载的数据,建立需加载的索引文件;
索引加载单元,用于加载所述索引文件;
数据加载单元,用于在需要加载数据时,根据所述索引文件定向加载数据。
优选地,所述系统还可包括:
数据判断单元,用于在加载数据时,判断更新文件中是否存在所述数据;
读取单元,用于当不存在时,从备份文件中读取。
优选地,所述备份文件中固化存储初始数据;所述更新文件中存储更新后数据。
优选地,所述系统还可包括:
文件建立单元,用于分别建立备份文件以及更新文件。
本发明可使用分层次、分阶段加载数据,减少了每次读取的数据量减少了内存开支,降低了读取中的出错概率,使读取中的错误恢复更迅速,并且极大的提高了数据加载的速度;实现数据按需加载,降低内存消耗;同时,可在保障数据可以恢复出厂的基础上,最大限度的减少存储开支;另外,对数据进行的增、删以及修改等操作都变为可行、快捷和简单。
附图说明
图1是本发明嵌入式数据管理的方法一实施例中的步骤流程示意图;
图2是本发明嵌入式数据管理的方法另一实施例中的步骤流程示意图;
图3是本发明嵌入式数据管理的系统一实施例中的结构示意图;
图4是本发明嵌入式数据管理的系统另一实施例中的结构示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参照图1,提出本发明一种嵌入式数据管理的方法一实施例。该方法可包括:
步骤S10、分析需要加载的数据,建立需加载的索引文件;
步骤S11、加载该索引文件;
步骤S12、在需要加载数据时,根据该索引文件定向加载数据。
上述嵌入式数据管理的方法,首先可对嵌入式系统需要进行加载的数据进行分析,将大量有相似类型数据文件建立索引文件,先加载索引文件,使用索引文件指向各个目标数据文件,在该嵌入式系统需要加载数据时,根据索引文件按需求定向加载数据。
上述嵌入式数据管理的方法,使用分层次、分阶段加载数据,减少了每次读取的数据量减少了内存开支,降低了读取中的出错概率,使读取中的错误恢复更迅速,并且极大的提高了数据加载的速度;实现数据按需加载,降低内存消耗。
参照图2,上述步骤S12之后还可包括:
步骤S13、在加载数据时,判断更新文件中是否存在该数据;当不存在时,进行步骤S14;当存在时,进行步骤S15;
步骤S14、从备份文件中读取;
步骤S15、从更新文件中读取。
上述备份文件中固化存储初始数据;上述更新文件中存储更新后数据。上述初始数据可固化存储在备份文件中,只可执行读取而不能作修改或删除等操作。在嵌入式系统的运行过程中如果对相应数据进行了增加、删除或修改等操作后,执行该操作后的数据可存储于更新文件中。同时,在进行数据加载时可首先在更新文件中搜索数据,当该更新文件中不存在时再从备份文件中读取。
上述方式可在保障数据可以恢复出厂的基础上,最大限度的减少存储开支;另外,对数据进行的增、删以及修改等操作都变为可行、快捷和简单。
以下以卫星系统对卫星参数的管理为例,对上述嵌入式数据管理的方法作进一步说明。
本实例中的数据管理和存储的对象是卫星参数。每一颗卫星都有自己的相关属性,以及附属的几个到几百个转发器的信息。而在一个卫星终端设备中,需要存储的卫星的信息,有几个到几百个不等。如此算来,这是一堆数量庞大的数据(起码对于嵌入式产品来说)。要加载或者同步到文件系统都是一件繁杂的事情。
下面将详细说明使用本专利对数据的分层次处理:
1)将每颗卫星的参数存储为一个文件,即卫星参数文件。文件格式使用网络上普遍流传的(*.ini)格式,或者使用(*.xml)格式等,只要是能正确的对卫星的每个属性,以及该卫星下的每个转发器属性进行完整正确的读取和存储操作的文件格式都是可以的。
该文件以卫星名称命名(ABS 1.ini)。文件格式如下:
[SATTYPE](域1,卫星属性)
1=0750(属性:经度)
2=ABS1(属性:卫星名)
[DVB](域2,转发器)
0=20(转发器个数)
1=3491,V,10000,56(转发器信息)
2=3556,H,2170,34
3=3582,H,2250,34
4=3587,H,4444,34
5=3596,H,5185,34
2)为上述卫星参数建立索引文件(SateInfo.ini)。其中,每一条信息包含每一颗卫星的基本属性以及该卫星所对应的文件名,该索引文件可以使用程序导入功能建立。
[SATEINFO](卫星信息)
0=170(卫星个数)
1=Eutelsat W3A;70;1;0;1;Eutelsat W3A.ini;(各卫星属性及文件名)
2=Aatra 1E/3A;235;2;0;0;Astra 1E3A.ini;
3=Atlantic Bird 3;3550;3;0;1;Atlantic Bird 3.ini;
3)建立目录结构
3.1)xxx/Satellite/BackUp(备份文件),存储初始状态的数据,即出厂数据:一个卫星索引文件,N个卫星文件。该目录的文件只供读取,不可修改或删除。提供最基本参数的同时,确保可以回到出厂状态。
3.2)xxx/Satellite/Using(更新文件),存储变更后的数据:产生变更后的数据,将被存在Using目录下。参照表1:
4)运行机制
4.1)加载xxx/Satallite/Using/SateInfo.ini,若文件不存在,则加载xxx/Satallite/BackUp/SateInfo.ini。如此,程序已经形成了一份含有基本卫星属性的列表,可用来呈现目前卫星的基本情况。并且该列表是最新修改后同步到文件系统的列表。
4.2)在需要某卫星的详细信息时,检索列表,找到对应文件名,直接打开目标卫星的信息文件,获取其详细信息。打开过程同样遵循,先加载Using/下该卫星,不存在时再加载BackUp/下该卫星。如此,用“需求加载”代替“完全加载”,极大节省了内存开支。
4.3)同步,将内存中的最新修改后的信息,同步到文件系统。
4.4)导入,可以对目前设备中的文件进行扩展。该功能可以读取并且解析可移动存储设备中的卫星信息文件(该文件可以从各大网站下载),加载到程序中。在同步操作中,程序会在Using下创建被导入的卫星信息文件。
上述嵌入式数据管理的方法,可使用分层次、分阶段加载数据,减少了每次读取的数据量减少了内存开支,降低了读取中的出错概率,使读取中的错误恢复更迅速,并且极大的提高了数据加载的速度;实现数据按需加载,降低内存消耗;同时,可在保障数据可以恢复出厂的基础上,最大限度的减少存储开支;另外,对数据进行的增、删以及修改等操作都变为可行、快捷和简单。
参照图3,提出本发明一种嵌入式数据管理的系统20一实施例。该系统20可包括:索引建立单元21、索引加载单元22以及数据加载单元23;该索引建立单元21,用于分析需要加载的数据,建立需加载的索引文件;该索引加载单元22,用于加载该索引文件;该数据加载单元23,用于在需要加载数据时,根据该索引文件定向加载数据。
上述嵌入式数据管理的系统20,首先可对嵌入式系统需要进行加载的数据进行分析,将大量有相似类型数据文件建立索引文件,先加载索引文件,使用索引文件指向各个目标数据文件,在该嵌入式系统需要加载数据时,根据索引文件按需求定向加载数据。
上述嵌入式数据管理的系统20,使用分层次、分阶段加载数据,减少了每次读取的数据量减少了内存开支,降低了读取中的出错概率,使读取中的错误恢复更迅速,并且极大的提高了数据加载的速度;实现数据按需加载,降低内存消耗。
参照图4,上述系统20还可包括:文件建立单元24、数据判断单元25以及读取单元26;该文件建立单元24,用于分别建立备份文件以及更新文件;该数据判断单元25,用于在加载数据时,判断更新文件中是否存在该数据;该读取单元26,用于当不存在时,从备份文件中读取。
上述备份文件中固化存储初始数据;上述更新文件中存储更新后数据。上述初始数据可固化存储在备份文件中,只可执行读取而不能作修改或删除等操作。在嵌入式系统的运行过程中如果对相应数据进行了增加、删除或修改等操作后,执行该操作后的数据可存储于更新文件中。同时,在进行数据加载时可首先在更新文件中搜索数据,当该更新文件中不存在时再从备份文件中读取。
上述方式可在保障数据可以恢复出厂的基础上,最大限度的减少存储开支;另外,对数据进行的增、删以及修改等操作都变为可行、快捷和简单。
上述嵌入式数据管理的系统,可使用分层次、分阶段加载数据,减少了每次读取的数据量减少了内存开支,降低了读取中的出错概率,使读取中的错误恢复更迅速,并且极大的提高了数据加载的速度;实现数据按需加载,降低内存消耗;同时,可在保障数据可以恢复出厂的基础上,最大限度的减少存储开支;另外,对数据进行的增、删以及修改等操作都变为可行、快捷和简单。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (8)
1.一种嵌入式数据管理的方法,其特征在于,包括步骤:
分析需要加载的数据,建立需加载的索引文件;
加载所述索引文件;
在需要加载数据时,根据所述索引文件定向加载数据。
2.根据权利要求1所述的嵌入式数据管理的方法,其特征在于,所述方法之后还包括:
在加载数据时,判断更新文件中是否存在所述数据;
当不存在时,从备份文件中读取。
3.根据权利要求2所述的嵌入式数据管理的方法,其特征在于,所述备份文件中固化存储初始数据;所述更新文件中存储更新后数据。
4.根据权利要求3所述的嵌入式数据管理的方法,其特征在于,所述在需要加载数据时,根据所述索引文件定向加载数据的步骤之前还包括:
分别建立备份文件以及更新文件。
5.一种嵌入式数据管理的系统,其特征在于,包括:
索引建立单元,用于分析需要加载的数据,建立需加载的索引文件;
索引加载单元,用于加载所述索引文件;
数据加载单元,用于在需要加载数据时,根据所述索引文件定向加载数据。
6.根据权利要求5所述的嵌入式数据管理的系统,其特征在于,所述系统还包括:
数据判断单元,用于在加载数据时,判断更新文件中是否存在所述数据;
读取单元,用于当不存在时,从备份文件中读取。
7.根据权利要求6所述的嵌入式数据管理的系统,其特征在于,所述备份文件中固化存储初始数据;所述更新文件中存储更新后数据。
8.根据权利要求7所述的嵌入式数据管理的系统,其特征在于,所述系统还包括:
文件建立单元,用于分别建立备份文件以及更新文件。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012101109869A CN102663107A (zh) | 2012-04-16 | 2012-04-16 | 嵌入式数据管理的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012101109869A CN102663107A (zh) | 2012-04-16 | 2012-04-16 | 嵌入式数据管理的方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102663107A true CN102663107A (zh) | 2012-09-12 |
Family
ID=46772598
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012101109869A Pending CN102663107A (zh) | 2012-04-16 | 2012-04-16 | 嵌入式数据管理的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102663107A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105893435A (zh) * | 2015-12-11 | 2016-08-24 | 乐视网信息技术(北京)股份有限公司 | 数据加载及存储设备、方法、以及系统 |
CN107071714A (zh) * | 2017-06-05 | 2017-08-18 | Tcl移动通信科技(宁波)有限公司 | 一种移动终端及其蓝牙加载控制方法、及存储装置 |
CN107577506A (zh) * | 2017-08-07 | 2018-01-12 | 上海斐讯数据通信技术有限公司 | 一种数据预加载的方法和系统 |
CN113018852A (zh) * | 2021-05-28 | 2021-06-25 | 腾讯科技(深圳)有限公司 | 一种数据处理方法及数据处理装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1492362A (zh) * | 2002-10-25 | 2004-04-28 | 联想(北京)有限公司 | 一种嵌入式数据库的数据备份和恢复方法 |
CN101436190A (zh) * | 2007-11-14 | 2009-05-20 | 英业达股份有限公司 | 同类型数据编列系统及方法 |
US20090187545A1 (en) * | 2008-01-21 | 2009-07-23 | Kenichi Kaku | Method and apparatus for data processing with index search |
CN101520787A (zh) * | 2008-03-19 | 2009-09-02 | 中国科学院自动化研究所 | 一种对实时数据进行存储的方法 |
CN101551252A (zh) * | 2009-05-22 | 2009-10-07 | 四川长虹电器股份有限公司 | 矢量地图制作及快速加载显示的方法 |
-
2012
- 2012-04-16 CN CN2012101109869A patent/CN102663107A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1492362A (zh) * | 2002-10-25 | 2004-04-28 | 联想(北京)有限公司 | 一种嵌入式数据库的数据备份和恢复方法 |
CN101436190A (zh) * | 2007-11-14 | 2009-05-20 | 英业达股份有限公司 | 同类型数据编列系统及方法 |
US20090187545A1 (en) * | 2008-01-21 | 2009-07-23 | Kenichi Kaku | Method and apparatus for data processing with index search |
CN101520787A (zh) * | 2008-03-19 | 2009-09-02 | 中国科学院自动化研究所 | 一种对实时数据进行存储的方法 |
CN101551252A (zh) * | 2009-05-22 | 2009-10-07 | 四川长虹电器股份有限公司 | 矢量地图制作及快速加载显示的方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105893435A (zh) * | 2015-12-11 | 2016-08-24 | 乐视网信息技术(北京)股份有限公司 | 数据加载及存储设备、方法、以及系统 |
CN107071714A (zh) * | 2017-06-05 | 2017-08-18 | Tcl移动通信科技(宁波)有限公司 | 一种移动终端及其蓝牙加载控制方法、及存储装置 |
CN107577506A (zh) * | 2017-08-07 | 2018-01-12 | 上海斐讯数据通信技术有限公司 | 一种数据预加载的方法和系统 |
WO2019028977A1 (zh) * | 2017-08-07 | 2019-02-14 | 上海斐讯数据通信技术有限公司 | 一种数据预加载的方法和系统 |
CN113018852A (zh) * | 2021-05-28 | 2021-06-25 | 腾讯科技(深圳)有限公司 | 一种数据处理方法及数据处理装置 |
CN113018852B (zh) * | 2021-05-28 | 2021-08-06 | 腾讯科技(深圳)有限公司 | 一种数据处理方法及数据处理装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9218403B2 (en) | Optimizing data processing using dynamic schemas | |
US8041695B2 (en) | Automatically extracting data from semi-structured documents | |
CN103036956B (zh) | 一种分布式组态化海量数据归档系统及实现方法 | |
US10417256B2 (en) | Synchronization adapter for synchronizing application data | |
CN102289407B (zh) | 文档格式转换自动测试方法 | |
US8880463B2 (en) | Standardized framework for reporting archived legacy system data | |
CN103078945B (zh) | 对浏览器崩溃数据进行处理的方法与系统 | |
CN107992492B (zh) | 一种数据区块的存储方法、读取方法、其装置及区块链 | |
US20120226658A1 (en) | Data model versioning for document databases | |
CN111062187A (zh) | 一种对docx格式文档进行结构化解析方法及系统 | |
US20020184269A1 (en) | Document management systems for and methods of sharing documents | |
CN102663107A (zh) | 嵌入式数据管理的方法及系统 | |
CN102200968A (zh) | 一种excel表格数据排重的方法和装置 | |
CN103617199A (zh) | 一种操作数据的方法和系统 | |
CN110795920B (zh) | 一种文档生成方法及设备 | |
CN101271399A (zh) | 在嵌入式系统剪裁可重定位的elf文件的方法 | |
CN108256019A (zh) | 数据库主键生成方法、装置、设备及其存储介质 | |
CN116701355A (zh) | 数据视图处理方法、装置、计算机设备及可读存储介质 | |
An et al. | Aspects of neural networks in intelligent collision avoidance systems for Prometheus | |
CN116010147A (zh) | 异常处理表的生成方法、系统、电子设备及存储介质 | |
Pröll et al. | Precise Data Identification Services for Long Tail Research Data. | |
CN104978379A (zh) | 一种应用程序资料站的搭建方法及装置 | |
CN104166739A (zh) | 分析数据库的指标文件处理方法及装置 | |
CN104166734A (zh) | 一种svn全文检索系统及检索方法 | |
CN103336917A (zh) | 批量给swf文件添加域锁定的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20120912 |