CN103617275A - 一种移动终端上网详细记录查询方法和系统 - Google Patents
一种移动终端上网详细记录查询方法和系统 Download PDFInfo
- Publication number
- CN103617275A CN103617275A CN201310656898.3A CN201310656898A CN103617275A CN 103617275 A CN103617275 A CN 103617275A CN 201310656898 A CN201310656898 A CN 201310656898A CN 103617275 A CN103617275 A CN 103617275A
- Authority
- CN
- China
- Prior art keywords
- fdr
- index file
- parameter
- inquiry
- related fields
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种移动终端上网详细记录查询方法和系统,其中,所述方法包括:提取上网详细记录的参数,生成各参数的索引文件,所述参数的索引文件记录了包含该参数的所有FDR信息;存储各参数的索引文件;接收FDR查询字段,从存储的索引文件中查找该查询字段对应的索引文件,根据查找到的FDR信息获取所述查询字段对应的FDR。本发明可快速地获取与检索FDR参数相关的FDR信息。
Description
技术领域
本发明涉及一种移动终端上网详细记录(FDR,Flow Detail Record)的查询方法和系统。
背景技术
上网详细记录(FDR)是一个包含了某个特定呼叫的相关数据的数据库记录。FDR记录中包含多种细节信息,例如被叫方和主叫方号码、位置区编码(LAC)、服务小区标识(Cell ID)、国际移动用户识别码(IMSI)、国际移动设备身份码(IMEI)、发生时间等。
通过读取FDR可以获知移动用户的上网记录。现有的FDR查询表如表1所示。将FDR中包含的参数作为查询项,将包含该查询项的FDR作为查询值。由于每个查询项存储的是一条FDR记录,若想从查询项中找到所需的查询值,首先需要对FDR记录进行分析,提取对应的查询项,再将所需的查询值与提取的查询项的值进行比较,由此造成查询等待时间长,效率低。其次,对于一条FDR而言,由于其包含了多个查询项,需要被重复存储多次。随着FDR数目的增多,FDR查询表中记录的数据呈指数增长,对存储空间的消耗大。
表1
Mobile | FDR |
LAC | FDR |
CELL ID | FDR |
IMSI | FDR |
IMEI | FDR |
APN | FDR |
端口号 | FDR |
…… | …… |
URL | FDR |
发明内容
本发明提供了一种移动终端上网详细记录的查询方法和系统,以解决如何快速获取上网详细记录的问题。
为解决上述技术问题,本发明提供了一种移动终端上网详细记录的查询方法,所述方法包括:
提取上网详细记录(FDR)的参数,生成各参数的索引文件,所述参数的索引文件记录了包含该参数的所有FDR信息;
存储各参数的索引文件;
接收FDR查询字段,从存储的索引文件中查找该查询字段对应的索引文件,根据查找到的FDR信息获取所述查询字段对应的FDR。
进一步地,所述接收FDR查询字段,从存储的索引文件中查找该查询字段对应的索引文件,根据查找到的FDR信息获取所述查询字段对应的FDR,包括:
当接收到多个FDR查询字段时,分别从存储的索引文件中查询每个查询字段对应的索引文件;
获取多个索引文件共同记录的FDR信息,根据所述共同记录的FDR信息获取所述查询字段对应的FDR。
进一步地,所述方法包括:
所述参数的索引文件记录包含该参数的所有FDR的标识;
从查询字段对应的索引文件查找到FDR标识后,根据FDR标识和FDR的对应关系获取所述查询字段对应的FDR。
为解决上述技术问题,本发明还提供了一种移动终端上网详细记录的查询系统,所述查询系统包括入库模块、查询模块和数据库,其中,
所述入库模块,用于提取上网详细记录(FDR)的参数,生成各参数的索引文件,所述参数的索引文件记录包含该参数的所有FDR信息;以及将各参数的索引文件发送至所述数据库;
所述数据库,用于存储各参数的索引文件;
所述查询模块,用于接收FDR查询字段,从所述数据库中查找该查询字段对应的索引文件,根据查找到的FDR标识信息获取所述查询字段对应的FDR。
进一步地,所述查询模块,接收FDR查询字段,从所述数据库中查找该查询字段对应的索引文件,根据查找到的FDR信息获取所述查询字段对应的FDR,包括:
当接收到多个FDR查询字段时,分别从存储的索引文件中查询每个查询字段对应的索引文件;获取多个索引文件共同记录的FDR信息,根据所述共同记录的FDR信息获取所述查询字段对应的FDR。
进一步地,所述系统包括:
所述入库模块,用于为接收的FDR设置标识,从接收的FDR中提取参数,为各参数生成用于记录包含了该参数的所有FDR的标识的索引文件;将各参数的索引文件、FDR和其对应的FDR标识发送至所述数据库;
所述查询模块,用于接收FDR查询字段,从所述数据库存储的该查询字段对应的索引文件中查找到FDR标识后,根据FDR标识和FDR的对应关系获取所述查询字段对应的FDR。
上述实施例,为FDR中的各参数生成用于记录所有包含了该参数的FDR信息的索引文件,利用该索引文件可实现快速获取与检索FDR参数相关的FDR信息;此外,上述索引文件中的FDR信息可通过FDR标识表示,FDR标识相对FDR记录,极大的节省了存储空间,相应地,也大大加快了FDR信息的入库速度
附图说明
图1为本实施例的移动终端上网详细记录查询方法流程图;
图2为本实施例的移动终端上网详细记录查询系统组成图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,下文中将结合附图对本发明的实施例进行详细说明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。
全文检索技术是搜索引擎的核心支撑技术。全文检索技术指的是通过扫描文章中的每一个词,对每一个词建立一个索引,指明该词在文章中出现的次数和位置,当用户查询时根据建立的索引查找,类似于通过字典的检索字表查字的过程。全文检索技术具有检索响应快,检索数据存储量小的特点。如果将全文检索技术应用于FDR查询,势必会加快获取用户的上网记录。
图1为本实施例的移动终端上网详细记录查询方法流程图。
S101从网络单元上下载其存储的FDR;
S102提取FDR的所有参数,生成各参数的索引文件,参数的索引文件记录了包含该参数的所有FDR的信息;
提取FDR中的参数,对每一个参数均扫描本地已建立的参数索引文件,若本地已为该参数建立索引文件,则将该参数所在的FDR信息写入已建立的索引文件;若本地尚未为该参数建立索引文件,则在本地新建该参数的索引文件,将该参数所在的FDR信息写入新建的索引文件;
为节省存储空间,写入参数索引文件的FDR信息可以为FDR标识,FDR标识可由该FDR和该索引文件对应的参数根据预设算法得出,其占用的存储空间小于FDR记录;
S103存储各参数的索引文件;
当写入索引文件的FDR信息是FDR标识时,还需存储FDR标识和FDR之间的对应关系;
S104接收FDR查询字段,从存储的索引文件中查找该查询字段对应的索引文件,根据查找结果获取所述查询字段对应的FDR;
若接收的FDR查询字段有多个,如查询字段为“186XXXXXXXX2013-11-18”,则分别从存储的索引文件中查询每个查询字段(“186XXXXXXXX”和“2013-11-18”)对应的索引文件;获取多个索引文件共同记录的FDR信息,根据所述共同记录的FDR信息获取所述查询字段对应的FDR;
若根据索引文件查找到的是FDR标识,则还需根据FDR标识和FDR的对应关系获取所述查询字段对应的FDR。
上述实施例,为FDR中的各参数生成用于记录所有包含了该参数的FDR信息的索引文件,利用该索引文件可实现快速获取与检索FDR参数相关的FDR信息;此外,上述索引文件中的FDR信息可通过FDR标识表示,FDR标识相对FDR记录,极大的节省了存储空间,相应地,也大大加快了FDR信息的入库速度
下面以一个具体的应用示例对上述查询方法实施例进行说明。
第一,从网络单元上下载2013-01-01至2013-06-30期间,186手机号的所有FDR;
第二,生成并存储各参数的索引文件,如手机号为18600000000的索引文件记录的内容为:SDR11,SDR12,SDR13…..,SDR1N,其中SDR1N为该用户在默认时间段(如2013-01-01至2013-06-30)期间的上网详细记录标识。时间段2013.5.111:00的索引文件记录的内容为:SDR11,SDR22,SDR23…..,SDR2N,其中SDR2N为所有用户在2013.5.111:00的上网详细记录标识;其中SDRiN由FDRiN和参数(18600000000,或2013.5.111:00)按照一定算法得到;
第三,接收到FDR查询语句“18600000000在2013.5.111:00的上网记录”,对接收的查询语句进行句法分析,提取出其中的FDR查询字段“18600000000”和“2013.5.111:00”;
第四,查询“18600000000”和“2013.5.111:00”的索引文件,获知“18600000000”索引文件记录的上网详细记录标识和“2013.5.111:00”索引文件记录的上网详细记录标识存在共同的FDR标识SDR11,根据SDR11查询与之对应的FDR记录;
第五,向FDR查询语句的发送端返回查询到的与SDR11对应的FDR记录。
图2为本实施例的移动终端上网详细记录查询系统组成图。
该查询系统包括入库模块、查询模块和数据库,其中,
所述入库模块,用于提取上网详细记录(FDR)的参数,生成各参数的索引文件,所述参数的索引文件记录包含该参数的所有FDR信息;以及将各参数的索引文件发送至所述数据库;
该入库模块又可包括FDR读取单元、阻塞队列、参数索引文件生成单元,其中,FDR读取单元用于将从网络单元获取的FDR存储至阻塞队列,只要该阻塞队列未满,就可一直将FDR存储至该阻塞队列;该FDR读取单元可通过多线程技术从网络单元获取FDR。参数索引文件生成单元用于读取阻塞队列的头结点,对头结点的FDR进行分析,提取上网详细记录中的参数,生成各参数的索引文件,以及将各参数的索引文件发送至所述数据库;该参数索引文件生成单元可利用多线程技术将索引文件发送至所述数据库。该入库模块利用阻塞队列平衡从网络单元读取FDR的速度以及向数据库传输参数索引文件的速度,可避免从网络单元读取的数据超过其可处理的数据数,造成入库模块“死机”;
所述FDR信息可以是FDR的标识,这时所述入库模块还需要将FDR和其对应的FDR标识发送至所述数据库;
所述数据库用于存储入库模块发送的数据;该数据库可采用hbase分布式数据库;
所述查询模块,用于接收FDR查询字段,从所述数据库中查找该查询字段对应的索引文件,根据查找到的FDR信息获取所述查询字段对应的FDR。
当查询模块接收到多个FDR查询字段时,从存储的索引文件中查询到的是每个查询字段对应的索引文件;查询模块获取多个索引文件共同记录的FDR信息,根据所述共同记录的FDR信息获取所述查询字段对应的FDR。
当查询模块从所述数据库存储的该查询字段对应的索引文件中查找到的是FDR标识,查询模块需要根据FDR标识和FDR的对应关系获取所述查询字段对应的FDR。
上述实施例,为FDR中的各参数生成用于记录所有包含了该参数的FDR信息的索引文件,利用该索引文件可实现快速获取与检索FDR参数相关的FDR信息;此外,上述索引文件中的FDR信息可通过FDR标识表示,FDR标识相对FDR记录,极大的节省了存储空间,相应地,也大大加快了FDR信息的入库速度。
本领域普通技术人员可以理解上述方法中的全部或部分步骤可通过程序来指令相关硬件完成,所述程序可以存储于计算机可读存储介质中,如只读存储器、磁盘或光盘等。可选地,上述实施例的全部或部分步骤也可以使用一个或多个集成电路来实现,相应地,上述实施例中的各模块/单元可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。本发明不限制于任何特定形式的硬件和软件的结合。
需要说明的是,本发明还可有其他多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员可根据本发明作出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (6)
1.一种移动终端上网详细记录的查询方法,其特征在于,所述方法包括:
提取上网详细记录(FDR)的参数,生成各参数的索引文件,所述参数的索引文件记录了包含该参数的所有FDR信息;
存储各参数的索引文件;
接收FDR查询字段,从存储的索引文件中查找该查询字段对应的索引文件,根据查找到的FDR信息获取所述查询字段对应的FDR。
2.如权利要求1所述的查询方法,其特征在于,所述接收FDR查询字段,从存储的索引文件中查找该查询字段对应的索引文件,根据查找到的FDR信息获取所述查询字段对应的FDR,包括:
当接收到多个FDR查询字段时,分别从存储的索引文件中查询每个查询字段对应的索引文件;
获取多个索引文件共同记录的FDR信息,根据所述共同记录的FDR信息获取所述查询字段对应的FDR。
3.如权利要求1或2所述的查询方法,其特征在于,所述方法包括:
所述参数的索引文件记录包含该参数的所有FDR的标识;
从查询字段对应的索引文件查找到FDR标识后,根据FDR标识和FDR的对应关系获取所述查询字段对应的FDR。
4.一种移动终端上网详细记录的查询系统,其特征在于,所述查询系统包括入库模块、查询模块和数据库,其中,
所述入库模块,用于提取上网详细记录(FDR)的参数,生成各参数的索引文件,所述参数的索引文件记录包含该参数的所有FDR信息;以及将各参数的索引文件发送至所述数据库;
所述数据库,用于存储各参数的索引文件;
所述查询模块,用于接收FDR查询字段,从所述数据库中查找该查询字段对应的索引文件,根据查找到的FDR标识信息获取所述查询字段对应的FDR。
5.如权利要求4所述的系统,其特征在于,所述查询模块,接收FDR查询字段,从所述数据库中查找该查询字段对应的索引文件,根据查找到的FDR信息获取所述查询字段对应的FDR,包括:
当接收到多个FDR查询字段时,分别从存储的索引文件中查询每个查询字段对应的索引文件;获取多个索引文件共同记录的FDR信息,根据所述共同记录的FDR信息获取所述查询字段对应的FDR。
6.如权利要求4或5所述的系统,其特征在于,所述系统包括:
所述入库模块,用于为接收的FDR设置标识,从接收的FDR中提取参数,为各参数生成用于记录包含了该参数的所有FDR的标识的索引文件;将各参数的索引文件、FDR和其对应的FDR标识发送至所述数据库;
所述查询模块,用于接收FDR查询字段,从所述数据库存储的该查询字段对应的索引文件中查找到FDR标识后,根据FDR标识和FDR的对应关系获取所述查询字段对应的FDR。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310656898.3A CN103617275A (zh) | 2013-12-06 | 2013-12-06 | 一种移动终端上网详细记录查询方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310656898.3A CN103617275A (zh) | 2013-12-06 | 2013-12-06 | 一种移动终端上网详细记录查询方法和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103617275A true CN103617275A (zh) | 2014-03-05 |
Family
ID=50167978
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310656898.3A Pending CN103617275A (zh) | 2013-12-06 | 2013-12-06 | 一种移动终端上网详细记录查询方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103617275A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107861956A (zh) * | 2016-09-22 | 2018-03-30 | 杭州海康威视系统技术有限公司 | 一种卡口过车数据记录的查询方法及装置 |
CN111008200A (zh) * | 2019-12-18 | 2020-04-14 | 北京数衍科技有限公司 | 数据查询方法、装置和服务器 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6370518B1 (en) * | 1998-10-05 | 2002-04-09 | Openwave Systems Inc. | Method and apparatus for displaying a record from a structured database with minimum keystrokes |
CN101854360A (zh) * | 2010-05-21 | 2010-10-06 | 恒安嘉新(北京)科技有限公司 | 根据ip地址溯源移动用户手机号的装置及方法 |
CN102054000A (zh) * | 2009-10-28 | 2011-05-11 | 中国移动通信集团公司 | 数据查询方法、装置及系统 |
CN102510568A (zh) * | 2011-11-22 | 2012-06-20 | 联通宽带业务应用国家工程实验室有限公司 | 移动终端上网数据的处理系统和方法 |
CN102646136A (zh) * | 2012-04-06 | 2012-08-22 | 北京西塔网络科技股份有限公司 | 一种高效数据存储查询的方法及系统 |
-
2013
- 2013-12-06 CN CN201310656898.3A patent/CN103617275A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6370518B1 (en) * | 1998-10-05 | 2002-04-09 | Openwave Systems Inc. | Method and apparatus for displaying a record from a structured database with minimum keystrokes |
CN102054000A (zh) * | 2009-10-28 | 2011-05-11 | 中国移动通信集团公司 | 数据查询方法、装置及系统 |
CN101854360A (zh) * | 2010-05-21 | 2010-10-06 | 恒安嘉新(北京)科技有限公司 | 根据ip地址溯源移动用户手机号的装置及方法 |
CN102510568A (zh) * | 2011-11-22 | 2012-06-20 | 联通宽带业务应用国家工程实验室有限公司 | 移动终端上网数据的处理系统和方法 |
CN102646136A (zh) * | 2012-04-06 | 2012-08-22 | 北京西塔网络科技股份有限公司 | 一种高效数据存储查询的方法及系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107861956A (zh) * | 2016-09-22 | 2018-03-30 | 杭州海康威视系统技术有限公司 | 一种卡口过车数据记录的查询方法及装置 |
CN107861956B (zh) * | 2016-09-22 | 2020-10-02 | 杭州海康威视系统技术有限公司 | 一种卡口过车数据记录的查询方法及装置 |
CN111008200A (zh) * | 2019-12-18 | 2020-04-14 | 北京数衍科技有限公司 | 数据查询方法、装置和服务器 |
CN111008200B (zh) * | 2019-12-18 | 2024-01-16 | 北京数衍科技有限公司 | 数据查询方法、装置和服务器 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110399568B (zh) | 信息搜索方法、装置、终端及存储介质 | |
CN108255958B (zh) | 数据查询方法、装置和存储介质 | |
CN107015985B (zh) | 一种数据存储与获取方法及装置 | |
CN107515882B (zh) | 数据查询方法及装置 | |
CN101179472B (zh) | 一种网络资源搜索方法及搜索系统 | |
CN106570014B (zh) | 用于确定用户的家庭属性信息的方法与设备 | |
CN109582470B (zh) | 一种数据处理方法及数据处理装置 | |
CN102375852A (zh) | 建立数据索引的方法、利用该索引查询数据的方法和系统 | |
CN105760380A (zh) | 数据库查询方法、装置及系统 | |
CN104504077A (zh) | 网页访问数据的统计方法和装置 | |
CN112954043B (zh) | 基于网站访问日志识别用户的方法及计算机设备 | |
CN108306878A (zh) | 钓鱼网站检测方法、装置、计算机设备和存储介质 | |
CN103744896A (zh) | 一种数据处理方法和装置 | |
CN100383787C (zh) | 一种数据库多表信息初始化方法 | |
CN101963993B (zh) | 一种数据库单表记录快速查找的方法 | |
CN101826963A (zh) | 存储信息的查找方法及通信终端 | |
CN103617275A (zh) | 一种移动终端上网详细记录查询方法和系统 | |
US10241927B2 (en) | Linked-list-based method and device for application caching management | |
CN103186542A (zh) | 一种数据查询的方法及装置 | |
CN110750537B (zh) | 一种客户身份识别方法及装置、设备、介质 | |
CN101014059A (zh) | 电子电话簿的数据信息存储和扩展的方法 | |
AU2016277745B2 (en) | Linked-list-based method and device for application caching management | |
CN110347925A (zh) | 信息处理方法及计算机可读存储介质 | |
CN109726254B (zh) | 一种三元组知识库的构建方法及装置 | |
CN112148925B (zh) | 用户标识关联查询方法、装置、设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20140305 |