CN112040005A - 一种基于大数据的数据分包处理系统 - Google Patents
一种基于大数据的数据分包处理系统 Download PDFInfo
- Publication number
- CN112040005A CN112040005A CN202010944622.5A CN202010944622A CN112040005A CN 112040005 A CN112040005 A CN 112040005A CN 202010944622 A CN202010944622 A CN 202010944622A CN 112040005 A CN112040005 A CN 112040005A
- Authority
- CN
- China
- Prior art keywords
- module
- data
- user
- region
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013075 data extraction Methods 0.000 claims abstract description 19
- 238000004806 packaging method and process Methods 0.000 claims abstract description 16
- 238000012216 screening Methods 0.000 claims abstract description 12
- 239000000284 extract Substances 0.000 claims description 2
- 238000012856 packing Methods 0.000 claims description 2
- 238000013480 data collection Methods 0.000 claims 1
- 238000000605 extraction Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 2
- 238000000034 method Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/906—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Medical Informatics (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种基于大数据的数据分包处理系统,包括有用数据提取模块、地域数据整理模块、网络地域数据采集模块、上传模块、数据库二、数据分类模块、中央处理模块、目标数据比对模块、数据库一、初次筛分模块、分析模块、用户需求信息比对模块、分包反馈模块、地域信息分类打包模块、用户地域信息识别模块、用户地域信息识别模块、用户模块,用户模块的输出端与用户地域信息识别模块、地域信息分类打包模块、分析模块、目标数据比对模块、数据库二、数据分类模块、中央处理模块、分包反馈模块依次连接。本发明便于根据用户输入的地域信息,通过检索网络大数据,自行弹出地域邮编信息,避免人工检索,进而提供用户体验。
Description
技术领域
本发明涉及数据分包处理技术领域,尤其涉及一种基于大数据的数据分包处理系统。
背景技术
分包交换,顾名思义是将数据分成数据包来进行所谓的传送。分包交换跟电路交换不同,电路交换在同一个时间里的同一个信道上只能传输一个数据,不能同时传输多个数据,但是分包交换可以再同一时间内的同一信道上可以传多个数据。
分包交换就和邮政发快递一样,先把东西(数据)打包,然后根据地区或者其他条件进行派送快递,同一时间里的同一个快递员可以发送多个快件。这就是所谓的分包交换!
大数据(big data),IT行业术语,是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
而目前在地域信息邮编的处理中,不能利用用户输入的关键词,利用大数据,自动弹出用户所需的地区邮编,用户需要自行检索,体验较差,同时在人工检索过程中,反馈速度较慢,为此,我们提出一种基于大数据的数据分包处理系统来解决上述问题。
发明内容
(一)发明目的
为解决背景技术中存在的技术问题,本发明提出一种基于大数据的数据分包处理系统,便于根据用户输入的地域信息,通过检索网络大数据,自行弹出地域邮编信息,避免人工检索,进而提供用户体验。
(二)技术方案
本发明提供了一种基于大数据的数据分包处理系统,包括有用数据提取模块、地域数据整理模块、网络地域数据采集模块、上传模块、数据库二、数据分类模块、中央处理模块、目标数据比对模块、数据库一、初次筛分模块、分析模块、用户需求信息比对模块、分包反馈模块、地域信息分类打包模块、用户地域信息识别模块、用户地域信息识别模块、用户模块,所述用户模块的输出端与用户地域信息识别模块、地域信息分类打包模块、分析模块、目标数据比对模块、数据库二、数据分类模块、中央处理模块、用户需求信息比对模块、分包反馈模块依次连接,所述网络地域数据采集模块的输出端与上传模块、数据库一、初次筛分模块、地域数据整理模块、有用数据提取模块以及数据分类模块的输入端依次连接,所述地域数据整理模块的输出端与数据库二的输入端相连接,所述地域信息分类打包模块的输出端与上传模块的输入端相连接。
优选的,还包括历史数据提取模块,所述数据库二的输出端与历史数据提取模块以及用户模块的输入端依次连接,用于调出用户历史填写的地域记录,作为待选选项。
优选的,所述有用数据提取模块由多个用户端组成,所述分包反馈模块的输出端与多个用户端的输入端相连接,用于将调出的信息反馈至指定用户。
优选的,所述网络地域数据采集模块采用爬虫程序,用于检索用户输入的地址信息,同时将检索结果通过上传模块上传至数据库一,用于初次检索用户模块所需的信息。
优选的,所述地域数据整理模块用于整理初次筛分模块筛分后地域数据,并上传至数据库二,同时有用数据提取模块将有用的数据提取分类存储至数据库二,以便于下一次用户输入地域信息时使用。
优选的,所述用户需求信息比对模块通过对检索数据与客户输入关键词进行系统性比对,从而对提取结果分析,并根据信息相关度依次排序,并通过分包反馈模块将信息依次反馈至用户模块。
优选的,所述用户地域信息识别模块用于对用户检索的信息识别,通过地域信息分类打包模块打包至上传模块,通过上传模块与网络地域数据采集模块的检索进行初次比对,用于加速反馈的速度。
与现有的技术相比,本发明的有益效果是:
通过便于根据用户输入的地域信息,通过检索网络大数据,自行弹出地域邮编信息,避免人工检索,进而提供用户体验。
附图说明
图1为本发明提出的一种基于大数据的数据分包处理系统的方框图;
图2为本发明提出的一种基于大数据的数据分包处理系统的逻辑框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。
如图1-2所示,本发明提出的一种基于大数据的数据分包处理系统,包括有用数据提取模块、地域数据整理模块、网络地域数据采集模块、上传模块、数据库二、数据分类模块、中央处理模块、目标数据比对模块、数据库一、初次筛分模块、分析模块、用户需求信息比对模块、分包反馈模块、地域信息分类打包模块、用户地域信息识别模块、用户地域信息识别模块、用户模块,用户模块的输出端与用户地域信息识别模块、地域信息分类打包模块、分析模块、目标数据比对模块、数据库二、数据分类模块、中央处理模块、用户需求信息比对模块、分包反馈模块依次连接,网络地域数据采集模块的输出端与上传模块、数据库一、初次筛分模块、地域数据整理模块、有用数据提取模块以及数据分类模块的输入端依次连接,地域数据整理模块的输出端与数据库二的输入端相连接,地域信息分类打包模块的输出端与上传模块的输入端相连接。
在一个可选的实施例中,还包括历史数据提取模块,数据库二的输出端与历史数据提取模块以及用户模块的输入端依次连接,用于调出用户历史填写的地域记录,作为待选选项。
在一个可选的实施例中,有用数据提取模块由多个用户端组成,分包反馈模块的输出端与多个用户端的输入端相连接,用于将调出的信息反馈至指定用户。
在一个可选的实施例中,网络地域数据采集模块采用爬虫程序,用于检索用户输入的地址信息,同时将检索结果通过上传模块上传至数据库一,用于初次检索用户模块所需的信息。
在一个可选的实施例中,地域数据整理模块用于整理初次筛分模块筛分后地域数据,并上传至数据库二,同时有用数据提取模块将有用的数据提取分类存储至数据库二,以便于下一次用户输入地域信息时使用。
在一个可选的实施例中,用户需求信息比对模块通过对检索数据与客户输入关键词进行系统性比对,从而对提取结果分析,并根据信息相关度依次排序,并通过分包反馈模块将信息依次反馈至用户模块。
在一个可选的实施例中,用户地域信息识别模块用于对用户检索的信息识别,通过地域信息分类打包模块打包至上传模块,通过上传模块与网络地域数据采集模块的检索进行初次比对,用于加速反馈的速度。
工作原理:首先,用户模块的用户端输入地域的信息,通过用户地域信息识别模块进行识别,通过地域信息分类打包模块发送至上传模块进行分析,同时网络地域数据采集模块在用户输入关键词后即开始根据关键词对地域信息进行检索,检索信息你,通过上传模块发送至数据库一,通过初次筛分模块对数据库一的用户数据筛分,并通过地域数据整理模块将各个地域的信息整理,通过有用数据提取模块提取有用数据,并将有用数据分类,同时将分类后的数据存储在数据库二中,经过中央处理模块处理后,用户需求信息比对模块通过对检索数据与客户输入关键词进行系统性比对,从而对提取结果分析,并根据信息相关度依次排序,并通过分包反馈模块将信息依次反馈至用户模块,地域数据整理模块用于整理初次筛分模块筛分后地域数据,并上传至数据库二,同时有用数据提取模块将有用的数据提取分类存储至数据库二,以便于下一次用户输入地域信息时使用,用户地域信息识别模块用于对用户检索的信息识别,通过地域信息分类打包模块打包至上传模块,通过上传模块与网络地域数据采集模块的检索进行初次比对,用于加速反馈的速度,历史数据提取模块以及用户模块用于调出用户历史填写的地域记录,作为待选选项,进而提高了检索速度。
在本发明的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的设备或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,根据本发明的技术方案及其发明构思加以等同替换或改变,都应涵盖在本发明的保护范围之内。
Claims (7)
1.一种基于大数据的数据分包处理系统,其特征在于,包括有用数据提取模块、地域数据整理模块、网络地域数据采集模块、上传模块、数据库二、数据分类模块、中央处理模块、目标数据比对模块、数据库一、初次筛分模块、分析模块、用户需求信息比对模块、分包反馈模块、地域信息分类打包模块、用户地域信息识别模块、用户地域信息识别模块、用户模块,所述用户模块的输出端与用户地域信息识别模块、地域信息分类打包模块、分析模块、目标数据比对模块、数据库二、数据分类模块、中央处理模块、用户需求信息比对模块、分包反馈模块依次连接,所述网络地域数据采集模块的输出端与上传模块、数据库一、初次筛分模块、地域数据整理模块、有用数据提取模块以及数据分类模块的输入端依次连接,所述地域数据整理模块的输出端与数据库二的输入端相连接,所述地域信息分类打包模块的输出端与上传模块的输入端相连接。
2.根据权利要求1所述的一种基于大数据的数据分包处理系统,其特征在于,还包括历史数据提取模块,所述数据库二的输出端与历史数据提取模块以及用户模块的输入端依次连接,用于调出用户历史填写的地域记录,作为待选选项。
3.根据权利要求1所述的一种基于大数据的数据分包处理系统,其特征在于,所述有用数据提取模块由多个用户端组成,所述分包反馈模块的输出端与多个用户端的输入端相连接,用于将调出的信息反馈至指定用户。
4.根据权利要求1所述的一种基于大数据的数据分包处理系统,其特征在于,所述网络地域数据采集模块采用爬虫程序,用于检索用户输入的地址信息,同时将检索结果通过上传模块上传至数据库一,用于初次检索用户模块所需的信息。
5.根据权利要求1所述的一种基于大数据的数据分包处理系统,其特征在于,所述地域数据整理模块用于整理初次筛分模块筛分后地域数据,并上传至数据库二,同时有用数据提取模块将有用的数据提取分类存储至数据库二,以便于下一次用户输入地域信息时使用。
6.根据权利要求1所述的一种基于大数据的数据分包处理系统,其特征在于,所述用户需求信息比对模块通过对检索数据与客户输入关键词进行系统性比对,从而对提取结果分析,并根据信息相关度依次排序,并通过分包反馈模块将信息依次反馈至用户模块。
7.根据权利要求1所述的一种基于大数据的数据分包处理系统,其特征在于,所述用户地域信息识别模块用于对用户检索的信息识别,通过地域信息分类打包模块打包至上传模块,通过上传模块与网络地域数据采集模块的检索进行初次比对,用于加速反馈的速度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010944622.5A CN112040005A (zh) | 2020-09-10 | 2020-09-10 | 一种基于大数据的数据分包处理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010944622.5A CN112040005A (zh) | 2020-09-10 | 2020-09-10 | 一种基于大数据的数据分包处理系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112040005A true CN112040005A (zh) | 2020-12-04 |
Family
ID=73584999
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010944622.5A Pending CN112040005A (zh) | 2020-09-10 | 2020-09-10 | 一种基于大数据的数据分包处理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112040005A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101127050A (zh) * | 2007-07-03 | 2008-02-20 | 北京大学 | 一种从网页中自动提取网站拥有者行政属地信息的方法 |
CN101270992A (zh) * | 2007-03-23 | 2008-09-24 | 环达电脑(上海)有限公司 | 地理坐标的搜索装置及搜索方法 |
CN104050205A (zh) * | 2013-09-24 | 2014-09-17 | 腾讯科技(深圳)有限公司 | 地址信息输入方法、获取方法、装置、设备和系统 |
CN106874287A (zh) * | 2015-12-11 | 2017-06-20 | 北京四维图新科技股份有限公司 | 一种兴趣点poi地址编码的处理方法及装置 |
CN110609936A (zh) * | 2018-06-11 | 2019-12-24 | 广州华资软件技术有限公司 | 一种模糊地址数据智能分类的方法 |
CN110689294A (zh) * | 2018-07-08 | 2020-01-14 | 姚爱军 | 一种可防止信息泄露的快递信息编码及使用方法 |
-
2020
- 2020-09-10 CN CN202010944622.5A patent/CN112040005A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101270992A (zh) * | 2007-03-23 | 2008-09-24 | 环达电脑(上海)有限公司 | 地理坐标的搜索装置及搜索方法 |
CN101127050A (zh) * | 2007-07-03 | 2008-02-20 | 北京大学 | 一种从网页中自动提取网站拥有者行政属地信息的方法 |
CN104050205A (zh) * | 2013-09-24 | 2014-09-17 | 腾讯科技(深圳)有限公司 | 地址信息输入方法、获取方法、装置、设备和系统 |
CN106874287A (zh) * | 2015-12-11 | 2017-06-20 | 北京四维图新科技股份有限公司 | 一种兴趣点poi地址编码的处理方法及装置 |
CN110609936A (zh) * | 2018-06-11 | 2019-12-24 | 广州华资软件技术有限公司 | 一种模糊地址数据智能分类的方法 |
CN110689294A (zh) * | 2018-07-08 | 2020-01-14 | 姚爱军 | 一种可防止信息泄露的快递信息编码及使用方法 |
Non-Patent Citations (1)
Title |
---|
"邮政编码特服‘184’电话服务系统"项目组: "邮政编码特服"184"电话服务系统的功能及技术实现", 湖北邮电技术, no. 02 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4580233B2 (ja) | 画像シグネチャによる郵便物の識別タグおよび関連するメール操作機 | |
CN102523241B (zh) | 基于决策树高速并行处理的网络流量在线分类方法及装置 | |
US20100299332A1 (en) | Method and system of indexing numerical data | |
CN113392646A (zh) | 一种数据中台系统、构建方法及装置 | |
CN102308533A (zh) | 对报文进行分类的方法及装置 | |
CN107656960B (zh) | 地铁遗失物品管理的自动匹配系统 | |
CN110442568A (zh) | 字段标签的获取方法及装置、存储介质、电子装置 | |
CN106559634A (zh) | 用于交通卡口视频监控的数据存储方法及装置 | |
WO2015039478A1 (zh) | 垃圾短信的识别方法及装置 | |
CN110209942B (zh) | 一种基于大数据的科技信息智能推送系统 | |
CN113254572B (zh) | 一种基于云平台的电子文档分类监管系统 | |
CN112040005A (zh) | 一种基于大数据的数据分包处理系统 | |
CN117171650A (zh) | 基于网络爬虫技术的文献数据处理方法、系统及介质 | |
CN113723501A (zh) | 一种病原微生物参考知识库的最大多样性聚类构建方法 | |
CN116701300B (zh) | 一种基于互联网的计算机文件管理系统 | |
CN114266291B (zh) | 聚类集合的确定方法和装置、存储介质及电子装置 | |
CN106326408A (zh) | 一种通过检索和分析生成笔录的方法、系统和终端 | |
US20040177150A1 (en) | Method for filter selection and array matching | |
CN108460119A (zh) | 一种使用机器学习提升技术支持效率的系统 | |
CN110472205A (zh) | 文件差异化的比对方法及装置、存储介质和电子装置 | |
CN113449173A (zh) | 一种基于特征采样的信息技术提取系统 | |
US20050198059A1 (en) | Database and database management system | |
EP1408404A3 (en) | Data sorting apparatus with query mechanism and method of operation | |
US20230124854A1 (en) | Systems and methods for assisting in object recognition in object processing systems | |
CN116227723A (zh) | 基于特征引擎的资产定级方法、装置、电子设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |