CN101655842A - 一种高效存储大量复杂文本信息的方法 - Google Patents

一种高效存储大量复杂文本信息的方法 Download PDF

Info

Publication number
CN101655842A
CN101655842A CN200810118605A CN200810118605A CN101655842A CN 101655842 A CN101655842 A CN 101655842A CN 200810118605 A CN200810118605 A CN 200810118605A CN 200810118605 A CN200810118605 A CN 200810118605A CN 101655842 A CN101655842 A CN 101655842A
Authority
CN
China
Prior art keywords
database
index
application program
stored
large amount
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200810118605A
Other languages
English (en)
Inventor
汤海京
徐友春
朱红军
蒋海涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Wenyan Technology Co Ltd
Original Assignee
Beijing Wenyan Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Wenyan Technology Co Ltd filed Critical Beijing Wenyan Technology Co Ltd
Priority to CN200810118605A priority Critical patent/CN101655842A/zh
Publication of CN101655842A publication Critical patent/CN101655842A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种高效存储大量复杂文本信息的方法,首先建立索引表;然后建立内容表;建立文件系统,将每条记录的资源文件存储于文件系统中;应用程序向数据库发起添加内容的请求;数据库将需要检索的数据存储于索引表中,并生成其ID;数据库将不需要检索的数据存储于内容表中,并指定每条记录的索引ID;数据库将生成的索引ID返回给应用程序;应用程序根据索引ID,为资源文本选择存放的路径,并存储资源文件;应用程序向数据库发起检查数据的请求;数据库检索索引表,取得符合条件的索引ID;数据库根据索引ID查询内容表,并返回其内容;最后应用程序根据数据库返回的索引ID,从文件系统中加载资源文件。本发明使得存储海量内容成为现实。

Description

一种高效存储大量复杂文本信息的方法
技术领域
本发明涉及一种高效存储大量复杂文本信息的方法,特别涉及一种采用索引表、内容表及文件系统方式存储大量复杂文本信息的方法。
背景技术
在存储海量数量的时候,数据的检索效率成为整个系统效率的关键。本发明将使用索引表、内容表和文件系统来实现该目的。
发明内容
本发明所要解决的技术问题是提供一种采用索引表、内容表及文件系统方式存储大量复杂文本信息的方法。
本发明所述的一种高效存储大量复杂文本信息的方法,该方法至少包括如下的步骤:
步骤1:建立索引表。
步骤2:建立内容表。
步骤3:建立文件系统,将每条记录的资源文件存储于文件系统中。
步骤4:应用程序向数据库发起添加内容的请求。
步骤5:数据库将需要检索的数据存储于索引表中,并生成其ID。
步骤6:数据库将不需要检索的数据存储于内容表中,并指定每条记录的索引ID。
步骤7:数据库将生成的索引ID返回给应用程序。
步骤8:应用程序根据索引ID,为资源文本选择存放的路径,并存储资源文件。
步骤9:应用程序向数据库发起检查数据的请求。
步骤10:数据库检索索引表,取得符合条件的索引ID。
步骤11:数据库根据索引ID查询内容表,并返回其内容。
步骤12:应用程序根据数据库返回的索引ID,从文件系统中加载资源文件。
本发明所述的一种高效存储大量复杂文本信息的方法,建立索引表其步骤为:
步骤11:将需要检索的列存于该表中。
步骤12:将所有的字段都建立索引。
步骤13:要求存储尽量少尽量小的字段,以保证其检索效率。
本发明所述的一种高效存储大量复杂文本信息的方法,建立内容表其步骤为:
步骤21:每条记录都要存储索引表中的ID,以便与其对应。
步骤22:较占空间的、不需要检索的字段存储于该表中。
本发明涉及的一种高效存储大量复杂文本信息的方法,使得存储海量内容成为现实。
附图说明
图1为本发明的流程图。
具体实施方式
参见图1,本发明的主要步骤如下:
步骤1:建立索引表。
步骤2:建立内容表。
步骤3:建立文件系统,将每条记录的资源文件存储于文件系统中。
步骤4:应用程序向数据库发起添加内容的请求。
步骤5:数据库将需要检索的数据存储于索引表中,并生成其ID。
步骤6:数据库将不需要检索的数据存储于内容表中,并指定每条记录的索引ID。
步骤7:数据库将生成的索引ID返回给应用程序。
步骤8:应用程序根据索引ID,为资源文本选择存放的路径,并存储资源文件。
步骤9:应用程序向数据库发起检查数据的请求。
步骤10:数据库检索索引表,取得符合条件的索引ID。
步骤11:数据库根据索引ID查询内容表,并返回其内容。
步骤12:应用程序根据数据库返回的索引ID,从文件系统中加载资源文件。
上述步骤1建立索引表的具体步骤如下:
步骤11:将需要检索的列存于该表中。
步骤12:将所有的字段都建立索引。
步骤13:要求存储尽量少尽量小的字段,以保证其检索效率。
上述步骤2建立内容表的具体步骤如下:
步骤21:每条记录都要存储索引表中的ID,以便与其对应。
步骤22:较占空间的、不需要检索的字段存储于该表中。
上述的技术方案实施时,使得存储海量内容成为现实。
最后所应说明的是,以上实施例仅用以说明而并非限制本发明所描述的技术方案;因此,尽管本说明书参照上述的实施例对本发明已进行了详细的说明,但是,本领域的普通技术人员应当理解,仍然可以对本发明进行修改或者等同地替换;而一切不脱离本发明的精神和范围的技术方案及其改进,其均应涵盖在本发明的权利要求范围当中。

Claims (3)

1、一种高效存储大量复杂文本信息的方法,其特征在于:该方法至少包括如下的步骤:
步骤1:建立索引表。
步骤2:建立内容表。
步骤3:建立文件系统,将每条记录的资源文件存储于文件系统中。
步骤4:应用程序向数据库发起添加内容的请求。
步骤5:数据库将需要检索的数据存储于索引表中,并生成其ID。
步骤6:数据库将不需要检索的数据存储于内容表中,并指定每条记录的索引ID。
步骤7:数据库将生成的索引ID返回给应用程序。
步骤8:应用程序根据索引ID,为资源文本选择存放的路径,并存储资源文件。
步骤9:应用程序向数据库发起检查数据的请求。
步骤10:数据库检索索引表,取得符合条件的索引ID。
步骤11:数据库根据索引ID查询内容表,并返回其内容。
步骤12:应用程序根据数据库返回的索引ID,从文件系统中加载资源文件。
2、根据权利要求1所述的一种高效存储大量复杂文本信息的方法,其特征在于建立索引表,其步骤为:
步骤11:将需要检索的列存于该表中。
步骤12:将所有的字段都建立索引。
步骤13:要求存储尽量少尽量小的字段,以保证其检索效率。
3、根据权利要求1所述的一种高效存储大量复杂文本信息的方法,其特征在于建立内容表,其步骤为:
步骤21:每条记录都要存储索引表中的ID,以便与其对应。
步骤22:较占空间的、不需要检索的字段存储于该表中。
CN200810118605A 2008-08-20 2008-08-20 一种高效存储大量复杂文本信息的方法 Pending CN101655842A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN200810118605A CN101655842A (zh) 2008-08-20 2008-08-20 一种高效存储大量复杂文本信息的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200810118605A CN101655842A (zh) 2008-08-20 2008-08-20 一种高效存储大量复杂文本信息的方法

Publications (1)

Publication Number Publication Date
CN101655842A true CN101655842A (zh) 2010-02-24

Family

ID=41710135

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200810118605A Pending CN101655842A (zh) 2008-08-20 2008-08-20 一种高效存储大量复杂文本信息的方法

Country Status (1)

Country Link
CN (1) CN101655842A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102622385A (zh) * 2011-06-30 2012-08-01 北京小米科技有限责任公司 一种第三方应用程序换肤的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102622385A (zh) * 2011-06-30 2012-08-01 北京小米科技有限责任公司 一种第三方应用程序换肤的方法

Similar Documents

Publication Publication Date Title
CN107247808B (zh) 一种分布式NewSQL数据库系统及图片数据查询方法
US8489550B2 (en) Multi-tenancy data storage and access method and apparatus
US20190258625A1 (en) Data partitioning and ordering
US10831736B2 (en) Fast multi-tier indexing supporting dynamic update
CN103488704B (zh) 一种数据存储方法及装置
US7174345B2 (en) Methods and systems for auto-partitioning of schema objects
CN104252536B (zh) 一种基于hbase的上网日志数据查询方法及装置
CN104102710A (zh) 一种海量数据查询方法
CN108021717B (zh) 一种轻量级嵌入式文件系统的实现方法
US20080313209A1 (en) Partition/table allocation on demand
US11216516B2 (en) Method and system for scalable search using microservice and cloud based search with records indexes
CN102402602A (zh) 一种实时数据库的b+树索引方法及装置
CN103473239A (zh) 一种非关系型数据库数据更新方法和装置
CN106570113B (zh) 一种海量矢量切片数据云存储方法及系统
US20090248616A1 (en) Indexing technique to deal with data skew
CN102930060A (zh) 一种数据库快速索引的方法及装置
CN102915382A (zh) 一种基于索引的数据库的数据查询方法和装置
CN101329686A (zh) 一种实现网络查询缓存的系统和查询方法
CN101692252A (zh) 文件空闲块的分配和回收方法
CN105447166A (zh) 一种基于关键字查找信息的方法及系统
US7310719B2 (en) Memory management tile optimization
CN109828966A (zh) 渐进式重哈希方法、装置、计算机设备及存储介质
WO2021016050A1 (en) Multi-record index structure for key-value stores
CN104598652B (zh) 一种数据库查询方法及装置
CN102521304A (zh) 基于哈希的聚簇表存储方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20100224