CN101655842A - 一种高效存储大量复杂文本信息的方法 - Google Patents
一种高效存储大量复杂文本信息的方法 Download PDFInfo
- Publication number
- CN101655842A CN101655842A CN200810118605A CN200810118605A CN101655842A CN 101655842 A CN101655842 A CN 101655842A CN 200810118605 A CN200810118605 A CN 200810118605A CN 200810118605 A CN200810118605 A CN 200810118605A CN 101655842 A CN101655842 A CN 101655842A
- Authority
- CN
- China
- Prior art keywords
- database
- index
- application program
- stored
- large amount
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种高效存储大量复杂文本信息的方法,首先建立索引表;然后建立内容表;建立文件系统,将每条记录的资源文件存储于文件系统中;应用程序向数据库发起添加内容的请求;数据库将需要检索的数据存储于索引表中,并生成其ID;数据库将不需要检索的数据存储于内容表中,并指定每条记录的索引ID;数据库将生成的索引ID返回给应用程序;应用程序根据索引ID,为资源文本选择存放的路径,并存储资源文件;应用程序向数据库发起检查数据的请求;数据库检索索引表,取得符合条件的索引ID;数据库根据索引ID查询内容表,并返回其内容;最后应用程序根据数据库返回的索引ID,从文件系统中加载资源文件。本发明使得存储海量内容成为现实。
Description
技术领域
本发明涉及一种高效存储大量复杂文本信息的方法,特别涉及一种采用索引表、内容表及文件系统方式存储大量复杂文本信息的方法。
背景技术
在存储海量数量的时候,数据的检索效率成为整个系统效率的关键。本发明将使用索引表、内容表和文件系统来实现该目的。
发明内容
本发明所要解决的技术问题是提供一种采用索引表、内容表及文件系统方式存储大量复杂文本信息的方法。
本发明所述的一种高效存储大量复杂文本信息的方法,该方法至少包括如下的步骤:
步骤1:建立索引表。
步骤2:建立内容表。
步骤3:建立文件系统,将每条记录的资源文件存储于文件系统中。
步骤4:应用程序向数据库发起添加内容的请求。
步骤5:数据库将需要检索的数据存储于索引表中,并生成其ID。
步骤6:数据库将不需要检索的数据存储于内容表中,并指定每条记录的索引ID。
步骤7:数据库将生成的索引ID返回给应用程序。
步骤8:应用程序根据索引ID,为资源文本选择存放的路径,并存储资源文件。
步骤9:应用程序向数据库发起检查数据的请求。
步骤10:数据库检索索引表,取得符合条件的索引ID。
步骤11:数据库根据索引ID查询内容表,并返回其内容。
步骤12:应用程序根据数据库返回的索引ID,从文件系统中加载资源文件。
本发明所述的一种高效存储大量复杂文本信息的方法,建立索引表其步骤为:
步骤11:将需要检索的列存于该表中。
步骤12:将所有的字段都建立索引。
步骤13:要求存储尽量少尽量小的字段,以保证其检索效率。
本发明所述的一种高效存储大量复杂文本信息的方法,建立内容表其步骤为:
步骤21:每条记录都要存储索引表中的ID,以便与其对应。
步骤22:较占空间的、不需要检索的字段存储于该表中。
本发明涉及的一种高效存储大量复杂文本信息的方法,使得存储海量内容成为现实。
附图说明
图1为本发明的流程图。
具体实施方式
参见图1,本发明的主要步骤如下:
步骤1:建立索引表。
步骤2:建立内容表。
步骤3:建立文件系统,将每条记录的资源文件存储于文件系统中。
步骤4:应用程序向数据库发起添加内容的请求。
步骤5:数据库将需要检索的数据存储于索引表中,并生成其ID。
步骤6:数据库将不需要检索的数据存储于内容表中,并指定每条记录的索引ID。
步骤7:数据库将生成的索引ID返回给应用程序。
步骤8:应用程序根据索引ID,为资源文本选择存放的路径,并存储资源文件。
步骤9:应用程序向数据库发起检查数据的请求。
步骤10:数据库检索索引表,取得符合条件的索引ID。
步骤11:数据库根据索引ID查询内容表,并返回其内容。
步骤12:应用程序根据数据库返回的索引ID,从文件系统中加载资源文件。
上述步骤1建立索引表的具体步骤如下:
步骤11:将需要检索的列存于该表中。
步骤12:将所有的字段都建立索引。
步骤13:要求存储尽量少尽量小的字段,以保证其检索效率。
上述步骤2建立内容表的具体步骤如下:
步骤21:每条记录都要存储索引表中的ID,以便与其对应。
步骤22:较占空间的、不需要检索的字段存储于该表中。
上述的技术方案实施时,使得存储海量内容成为现实。
最后所应说明的是,以上实施例仅用以说明而并非限制本发明所描述的技术方案;因此,尽管本说明书参照上述的实施例对本发明已进行了详细的说明,但是,本领域的普通技术人员应当理解,仍然可以对本发明进行修改或者等同地替换;而一切不脱离本发明的精神和范围的技术方案及其改进,其均应涵盖在本发明的权利要求范围当中。
Claims (3)
1、一种高效存储大量复杂文本信息的方法,其特征在于:该方法至少包括如下的步骤:
步骤1:建立索引表。
步骤2:建立内容表。
步骤3:建立文件系统,将每条记录的资源文件存储于文件系统中。
步骤4:应用程序向数据库发起添加内容的请求。
步骤5:数据库将需要检索的数据存储于索引表中,并生成其ID。
步骤6:数据库将不需要检索的数据存储于内容表中,并指定每条记录的索引ID。
步骤7:数据库将生成的索引ID返回给应用程序。
步骤8:应用程序根据索引ID,为资源文本选择存放的路径,并存储资源文件。
步骤9:应用程序向数据库发起检查数据的请求。
步骤10:数据库检索索引表,取得符合条件的索引ID。
步骤11:数据库根据索引ID查询内容表,并返回其内容。
步骤12:应用程序根据数据库返回的索引ID,从文件系统中加载资源文件。
2、根据权利要求1所述的一种高效存储大量复杂文本信息的方法,其特征在于建立索引表,其步骤为:
步骤11:将需要检索的列存于该表中。
步骤12:将所有的字段都建立索引。
步骤13:要求存储尽量少尽量小的字段,以保证其检索效率。
3、根据权利要求1所述的一种高效存储大量复杂文本信息的方法,其特征在于建立内容表,其步骤为:
步骤21:每条记录都要存储索引表中的ID,以便与其对应。
步骤22:较占空间的、不需要检索的字段存储于该表中。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN200810118605A CN101655842A (zh) | 2008-08-20 | 2008-08-20 | 一种高效存储大量复杂文本信息的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN200810118605A CN101655842A (zh) | 2008-08-20 | 2008-08-20 | 一种高效存储大量复杂文本信息的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101655842A true CN101655842A (zh) | 2010-02-24 |
Family
ID=41710135
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200810118605A Pending CN101655842A (zh) | 2008-08-20 | 2008-08-20 | 一种高效存储大量复杂文本信息的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101655842A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102622385A (zh) * | 2011-06-30 | 2012-08-01 | 北京小米科技有限责任公司 | 一种第三方应用程序换肤的方法 |
-
2008
- 2008-08-20 CN CN200810118605A patent/CN101655842A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102622385A (zh) * | 2011-06-30 | 2012-08-01 | 北京小米科技有限责任公司 | 一种第三方应用程序换肤的方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107247808B (zh) | 一种分布式NewSQL数据库系统及图片数据查询方法 | |
US8489550B2 (en) | Multi-tenancy data storage and access method and apparatus | |
US20190258625A1 (en) | Data partitioning and ordering | |
US10831736B2 (en) | Fast multi-tier indexing supporting dynamic update | |
CN103488704B (zh) | 一种数据存储方法及装置 | |
US7174345B2 (en) | Methods and systems for auto-partitioning of schema objects | |
CN104252536B (zh) | 一种基于hbase的上网日志数据查询方法及装置 | |
CN104102710A (zh) | 一种海量数据查询方法 | |
CN108021717B (zh) | 一种轻量级嵌入式文件系统的实现方法 | |
US20080313209A1 (en) | Partition/table allocation on demand | |
US11216516B2 (en) | Method and system for scalable search using microservice and cloud based search with records indexes | |
CN102402602A (zh) | 一种实时数据库的b+树索引方法及装置 | |
CN103473239A (zh) | 一种非关系型数据库数据更新方法和装置 | |
CN106570113B (zh) | 一种海量矢量切片数据云存储方法及系统 | |
US20090248616A1 (en) | Indexing technique to deal with data skew | |
CN102930060A (zh) | 一种数据库快速索引的方法及装置 | |
CN102915382A (zh) | 一种基于索引的数据库的数据查询方法和装置 | |
CN101329686A (zh) | 一种实现网络查询缓存的系统和查询方法 | |
CN101692252A (zh) | 文件空闲块的分配和回收方法 | |
CN105447166A (zh) | 一种基于关键字查找信息的方法及系统 | |
US7310719B2 (en) | Memory management tile optimization | |
CN109828966A (zh) | 渐进式重哈希方法、装置、计算机设备及存储介质 | |
WO2021016050A1 (en) | Multi-record index structure for key-value stores | |
CN104598652B (zh) | 一种数据库查询方法及装置 | |
CN102521304A (zh) | 基于哈希的聚簇表存储方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20100224 |