CN101093482A - 一种大量信息存储和检索的方法 - Google Patents
一种大量信息存储和检索的方法 Download PDFInfo
- Publication number
- CN101093482A CN101093482A CN 200610027739 CN200610027739A CN101093482A CN 101093482 A CN101093482 A CN 101093482A CN 200610027739 CN200610027739 CN 200610027739 CN 200610027739 A CN200610027739 A CN 200610027739A CN 101093482 A CN101093482 A CN 101093482A
- Authority
- CN
- China
- Prior art keywords
- phone number
- database
- data
- retrieval
- end system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种大量信息存储和检索的方法，该方法通过手机号码为中心的数据组织方式，进行前端系统对数据库的数据储存和前端系统调用数据库进行的数据查询。与现有技术相比，本发明具有消耗资源小、查找效率和实时性高、冲突小等特点。
Description
技术领域
本发明涉及移动运营商业务系统，特别是涉及一种大量信息存储和检索的方法。
背景技术
移动运营商的用户量非常巨大，用户信息也非常庞杂，运营商业务信息有如下特点：
1.每一个用户具有唯一的不重复的手机号码，手机号码就是用户的身份标识。
2.用户的各种行为基本围绕手机号码展开，如使用各种业务，开通业务等等。
3.用户的行为产生的数据库操作占所有数据库操作的绝大部分。意即数据库的压力基本来源于手机用户的各种需求，系统的统计、分析等运营商本身业务需求不是主要来源。
4.用户行为要求的结果实时性非常高，实时性差的系统会因为用户体验非常差而被运营商抛弃。
因此如何在海量信息中快速查找需要的内容是移动运营商业务系统面临的共同难题。
发明内容
本发明的目的是为了克服上述现有技术存在的缺陷而提供一种大量信息存储和检索的方法。
本发明的目的可以通过以下技术方案来实现：一种大量信息存储和检索的方法，其特征在于，该方法通过手机号码为中心的数据组织方式，进行前端系统对数据库的数据储存和前端系统调用数据库进行的数据查询。
述的手机号码为中心的数据组织方式为：用户数据存储在指定数据库的数据表中，手机号码以数字形式存储；数据表通过手机号码分区方式进行手机号码的分区，并通过手机号码为关键项建立索引。
所述的手机号码分区方式可以为：将所有手机号码分为两百个区，按手机号码后三位号码模两百后的余数将手机号码分到不同的分区中。
所述的手机号码分区方式可以为：将所有手机号码分为两百个区，按手机号码中间某三位号码模两百后的余数将手机号码分到不同的分区中。
所述的前端系统对数据库的数据储存包括以下步骤：
a.前段系统将以手机号码为标识的用户信息传入数据库；
b.数据库通过手机号码分区方式找到上述手机号码指定的存储分区；
c.数据库将数据存入指定的存储分区内，并更新相应的索引。
所述的前端系统调用数据库进行的数据查询包括以下步骤：
a.前端系统将以手机号码为标识的查询条件传入数据库；
b.数据库通过手机号码分区方式找到上述手机号码指定的存储分区；
c.数据库根据索引在指定的存储分区内快速找到相关内容，返回给前端系统。
所述的不同的分区可以分布在不同的文件或不同的物理存储上。
与现有技术相比，本发明具有消耗资源小、查找效率和实时性高、冲突小等特点。
附图说明
图1为本方明的拓扑图。
具体实施方式
下面结合附图对本发明作进一步说明。
如图1所示，一种大量信息存储和检索的方法，该方法通过手机号码为中心的数据组织方式，进行前端系统对数据库的数据储存和前端系统调用数据库进行的数据查询。
本实施例提供了一种移动运营商客户信息存储和检索的数据库方法。本实施例根据移动运营商客户信息的特点，对大量的用户信息按照手机号码的特征进行数据库的分区存储，对相应信息进行查询时按照手机号码特征定位分区后再进行查找，极大的提高了数据查找的效率。
本实施例的核心是以手机号码为中心组织各项数据，提供高效的数据存储和检索方法。本实施例的主要方案如下：
用户数据存储在指定数据库的数据表中，手机号码以数字形式存储。
数据表按照手机号码进行分区。如：整个手机号码分为200个区，每个区存放的数据的特点为此区中手机号码的后三位模200后的余数相同。
如：135xxxxx000用户相关的信息存储在0号分区内
135xxxxx001用户相关的信息存储在1号分区内
13xxxxxx201用户相关的信息也存储在2号分区内
具体的数据分布方式可以根据手机用户的号段的实际分布情况进行调整，如可以不用手机号码末三位，可以采用中间某三位模200的方式进行分布。分布方式的最终目的是使落在各分区内的信息量(数据库记录数)相对均衡，即在业务系统运行过程中各数据库分区内的记录数分布比较均匀。
整个数据库表以手机号码为关键项建立索引，通过索引提高数据查询的效率和速度。
前端系统使用数据库表进行数据存储时采用如下方式：
前端系统将以手机号码为主体的用户信息传入数据库；
数据库根据手机号码特点进行指定方式的运算(如用后三位模200)，找到指定的存储分区；
将数据存入指定分区内，并更新相应的索引。
前端系统调用数据库进行信息查询时采用如下方式：
前端系统将以手机号码为主体的查询条件传入数据库；
数据库根据手机号码特点进行指定方式的运算(如用后三位模200)，找到指定的存储分区；
根据数据索引在指定分区内快速找到相关内容，返回给前端系统。
由于数据查找的范围缩小到一个分区内，使得查找过程消耗的资源极大减少，查找效率极大提高，保证了用户信息查询的实时性。
不同手机号码的数据分布在不同的分区中，不同的分区又可以分布在不同的文件甚至不同的物理存储上，这样可以提高数据处理的并发性，减少冲突，提高速度。
如图1，业务模块提出业务数据存储和查询要求，按照以手机号码为主体组织需求；数据库层按照手机号码分区存储用户信息，在数据库逻辑层上形成分布；物理存储层在物理设备上进行分布，提高了物理设备访问的并发性；这个系统在多个层次进行数据分布，提高了整体的并发效率和系统得处理能力。
Claims (7)
1.一种大量信息存储和检索的方法，其特征在于，该方法通过手机号码为中心的数据组织方式，进行前端系统对数据库的数据储存和前端系统调用数据库进行的数据查询。
2.根据权利要求1所述的一种大量信息存储和检索的方法，其特征在于，所述的手机号码为中心的数据组织方式为：用户数据存储在指定数据库的数据表中，手机号码以数字形式存储；数据表通过手机号码分区方式进行手机号码的分区，并通过手机号码为关键项建立索引。
3.根据权利要求2所述的一种大量信息存储和检索的方法，其特征在于，所述的手机号码分区方式可以为：将所有手机号码分为两百个区，按手机号码后三位号码模两百后的余数将手机号码分到不同的分区中。
4.根据权利要求2所述的一种大量信息存储和检索的方法，其特征在于，所述的手机号码分区方式可以为：将所有手机号码分为两百个区，按手机号码中间某三位号码模两百后的余数将手机号码分到不同的分区中。
5.根据权利要求1或2或3所述的一种大量信息存储和检索的方法，其特征在于，所述的前端系统对数据库的数据储存包括以下步骤：
a.前段系统将以手机号码为标识的用户信息传入数据库；
b.数据库通过手机号码分区方式找到上述手机号码指定的存储分区；
c.数据库将数据存入指定的存储分区内，并更新相应的索引。
6.根据权利要求1或2或3所述的一种大量信息存储和检索的方法，其特征在于，所述的前端系统调用数据库进行的数据查询包括以下步骤：
a.前端系统将以手机号码为标识的查询条件传入数据库；
b.数据库通过手机号码分区方式找到上述手机号码指定的存储分区；
c.数据库根据索引在指定的存储分区内快速找到相关内容，返回给前端系统。
7.根据权利要求3或4所述的一种大量信息存储和检索的方法，其特征在于，所述的不同的分区可以分布在不同的文件或不同的物理存储上。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200610027739 CN101093482A (zh) | 2006-06-19 | 2006-06-19 | 一种大量信息存储和检索的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200610027739 CN101093482A (zh) | 2006-06-19 | 2006-06-19 | 一种大量信息存储和检索的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN101093482A true CN101093482A (zh) | 2007-12-26 |
Family
ID=38991751
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 200610027739 Pending CN101093482A (zh) | 2006-06-19 | 2006-06-19 | 一种大量信息存储和检索的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101093482A (zh) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101291508B (zh) * | 2008-06-10 | 2011-10-05 | 重庆重邮信科通信技术有限公司 | 移动通信系统路测数据的存储和调用方法 |
| CN101483844B (zh) * | 2009-02-12 | 2011-12-07 | 北京阳光加信科技有限公司 | 索引移动电话号码的方法和系统 |
| CN102708633A (zh) * | 2012-04-12 | 2012-10-03 | 福建联迪商用设备有限公司 | 在pos机上实现快速定位挂失卡号的方法 |
| CN102855254A (zh) * | 2011-06-30 | 2013-01-02 | 北京新媒传信科技有限公司 | 一种用户数据的存储方法和系统 |
| CN102999581A (zh) * | 2012-11-14 | 2013-03-27 | 北京北纬点易信息技术有限公司 | 用于业务中大用户量数据访问及实时排序系统 |
| CN103186553A (zh) * | 2011-12-28 | 2013-07-03 | 北京新媒传信科技有限公司 | 一种增值业务中业务产品的查询方法和系统 |
| CN101754145B (zh) * | 2008-12-19 | 2014-05-07 | 康佳集团股份有限公司 | 一种电话号码搜索方法、装置及移动终端 |
| WO2014101240A1 (zh) * | 2012-12-31 | 2014-07-03 | 华为技术有限公司 | 数据存储方法和装置、数据操作方法、系统及接入服务器 |
| CN108154024A (zh) * | 2017-12-20 | 2018-06-12 | 北京奇艺世纪科技有限公司 | 一种数据检索方法、装置及电子设备 |
| CN110110018A (zh) * | 2018-01-30 | 2019-08-09 | 普天信息技术有限公司 | 存储的处理方法、装置、电子设备和存储介质 |
-
2006
- 2006-06-19 CN CN 200610027739 patent/CN101093482A/zh active Pending
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101291508B (zh) * | 2008-06-10 | 2011-10-05 | 重庆重邮信科通信技术有限公司 | 移动通信系统路测数据的存储和调用方法 |
| CN101754145B (zh) * | 2008-12-19 | 2014-05-07 | 康佳集团股份有限公司 | 一种电话号码搜索方法、装置及移动终端 |
| CN101483844B (zh) * | 2009-02-12 | 2011-12-07 | 北京阳光加信科技有限公司 | 索引移动电话号码的方法和系统 |
| CN102855254A (zh) * | 2011-06-30 | 2013-01-02 | 北京新媒传信科技有限公司 | 一种用户数据的存储方法和系统 |
| CN103186553A (zh) * | 2011-12-28 | 2013-07-03 | 北京新媒传信科技有限公司 | 一种增值业务中业务产品的查询方法和系统 |
| CN103186553B (zh) * | 2011-12-28 | 2016-04-20 | 北京新媒传信科技有限公司 | 一种增值业务中业务产品的查询方法和系统 |
| CN102708633A (zh) * | 2012-04-12 | 2012-10-03 | 福建联迪商用设备有限公司 | 在pos机上实现快速定位挂失卡号的方法 |
| CN102708633B (zh) * | 2012-04-12 | 2015-05-13 | 福建联迪商用设备有限公司 | 在pos机上实现快速定位挂失卡号的方法 |
| CN102999581A (zh) * | 2012-11-14 | 2013-03-27 | 北京北纬点易信息技术有限公司 | 用于业务中大用户量数据访问及实时排序系统 |
| WO2014101240A1 (zh) * | 2012-12-31 | 2014-07-03 | 华为技术有限公司 | 数据存储方法和装置、数据操作方法、系统及接入服务器 |
| CN104040539A (zh) * | 2012-12-31 | 2014-09-10 | 华为技术有限公司 | 数据存储方法和装置、数据操作方法、系统及接入服务器 |
| CN104040539B (zh) * | 2012-12-31 | 2017-06-06 | 华为技术有限公司 | 数据存储方法和装置、数据操作方法、系统及接入服务器 |
| CN108154024A (zh) * | 2017-12-20 | 2018-06-12 | 北京奇艺世纪科技有限公司 | 一种数据检索方法、装置及电子设备 |
| CN108154024B (zh) * | 2017-12-20 | 2020-07-28 | 北京奇艺世纪科技有限公司 | 一种数据检索方法、装置及电子设备 |
| CN110110018A (zh) * | 2018-01-30 | 2019-08-09 | 普天信息技术有限公司 | 存储的处理方法、装置、电子设备和存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101093482A (zh) | 一种大量信息存储和检索的方法 | |
| CN102867071B (zh) | 一种网管海量历史数据管理方法 | |
| CN102629269B (zh) | 一种嵌入式数据库的检索及存储方法 | |
| CN108874971B (zh) | 一种应用于海量标签化实体数据存储的工具和方法 | |
| CN100468402C (zh) | 一种数据存储及查询方法 | |
| CN102542071B (zh) | 一种分布式处理数据的系统及方法 | |
| CN101354726B (zh) | 一种机群文件系统的内存元数据管理方法 | |
| CN102129458B (zh) | 关系型数据库的存储方法及装置 | |
| CN103229173B (zh) | 元数据管理方法及系统 | |
| CN102419752B (zh) | 一种工业数据库报文存储方法 | |
| CN102779138B (zh) | 实时数据的硬盘存取方法 | |
| CN105117417A (zh) | 一种读优化的内存数据库Trie树索引方法 | |
| CN103914462B (zh) | 一种数据存储和查询方法以及装置 | |
| CN102033882B (zh) | 一种性能数据的存储方法及系统 | |
| CN101763415B (zh) | 一种数据库的b树索引的生成方法及装置 | |
| CN102375852A (zh) | 建立数据索引的方法、利用该索引查询数据的方法和系统 | |
| CN103473239A (zh) | 一种非关系型数据库数据更新方法和装置 | |
| CN103440245A (zh) | 数据库系统的行列混合存储方法 | |
| CN111460024A (zh) | 基于Elasticsearch的实时业务系统 | |
| CN102054000A (zh) | 数据查询方法、装置及系统 | |
| CN101989301A (zh) | 一种支持多数据源的索引维护方法 | |
| CN109669925A (zh) | 非结构化数据的管理方法及装置 | |
| CN105787058A (zh) | 一种用户标签系统及基于用户标签系统的数据推送系统 | |
| CN103853499A (zh) | 一种多源数据存储和读取方法 | |
| CN102654878B (zh) | 嵌入式系统中分布式数据库的数据操作方法及板卡 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C12 | Rejection of a patent application after its publication | ||
| RJ01 | Rejection of invention patent application after publication |
Open date: 20071226 |