CN109857777A - 一种基于位置特征的海量通信网络电平数据处理及使用方法、系统 - Google Patents
一种基于位置特征的海量通信网络电平数据处理及使用方法、系统 Download PDFInfo
- Publication number
- CN109857777A CN109857777A CN201910020267.XA CN201910020267A CN109857777A CN 109857777 A CN109857777 A CN 109857777A CN 201910020267 A CN201910020267 A CN 201910020267A CN 109857777 A CN109857777 A CN 109857777A
- Authority
- CN
- China
- Prior art keywords
- data
- server
- level data
- processing
- terminal device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 71
- 238000004891 communication Methods 0.000 title claims abstract description 33
- 238000000034 method Methods 0.000 title claims abstract description 25
- 238000005457 optimization Methods 0.000 claims abstract description 8
- 238000012216 screening Methods 0.000 claims description 15
- 238000009877 rendering Methods 0.000 claims description 10
- 241001269238 Data Species 0.000 claims description 5
- 230000006978 adaptation Effects 0.000 claims description 3
- 230000005540 biological transmission Effects 0.000 claims 1
- 238000010276 construction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000033772 system development Effects 0.000 description 1
Landscapes
- Mobile Radio Communication Systems (AREA)
Abstract
本发明涉及一种基于位置特征的海量通信网络电平数据处理及使用方法、系统，主要根据通信网络电平数据位置特征过滤掉同样作用的数据，用以降低后端数据处理的数量；根据网络优化特定使用场景，返回终端设备本身处理能力数据量的数据，供终端利用展现。本发明可以较好提升终端用户使用通信电平数据的体验。
Description
技术领域
本发明涉及软件系统开发领域，特别是一种基于位置特征的海量通信网络电平数据处理及使用方法、系统。
背景技术
目前移动通信网络使用和优化的过程中，由于现有的覆盖范围越来越广，所建立的移动网络基站建设不断增加，用户数量也不断增加，一个省份的通信网络系统接入的终端设备就可以有上千万，通过这些终端上报的电平数据就会更加庞大，面对如此体量的海量数据，如何对其进行高效地存储、处理和在终端设备上使用便成为一个技术难题。
当前使用的技术方案有：
1、基于传统的数据处理技术与关系型数据库管理系统（DBMS），并且后台通过SQL查询关系型数据库获取相关数据后返回给终端设备。
2、对海量数据的表进行分区并精心进行索引设计，对数据库中的数据进一步划分，提升数据读取效率。
3、结合NoSQL技术对热点数据进行缓存，减少对后台数据库读取的压力，提升数据响应速度。
4、采用如Hadoop等技术对数据进行离线处理及统计汇总，在终端设备上呈现统计后较粗粒度的的数据。
5、结合上述的各种方法对数据进行处理。
现有的技术方案大都关注在技术层面对数据进行分块、汇总等方式进行数据处理，忽略了数据本身的特征、数据使用需求及终端设备本身处理的能力。而移动通信网络中上报的电平数据存在明显的位置特征，比如同一个基站/小区由不同终端在局部上报上来的数据就可能一样的，这些一样的数据在网络优化过程中作用并无差别。
发明内容
有鉴于此，本发明的目的是提出一种基于位置特征的海量通信网络电平数据处理及使用方法、系统，可以较好的方式降低海量数据的处理数量及数据存储空间，同时可以较好提升终端用户使用通信电平数据的体验。
本发明采用以下方案实现：一种基于位置特征的海量通信网络电平数据处理及使用方法，具体为：根据通信网络电平数据位置特征过滤掉同样作用的数据，用以降低后端数据处理的数量；根据网络优化特定使用场景，返回终端设备本身处理能力数据量的数据，供终端利用展现。
进一步地，所述根据通信网络电平数据位置特征过滤掉同样作用的数据，用以降低后端数据处理的数量具体包括包括以下步骤：
步骤S11：终端设备向服务器上送电平数据；
步骤S12：服务器根据经纬度范围对电平数据进行筛选及统计；
步骤S13：服务器将筛选后的数据入库存储至存储设备。
进一步地，步骤S2中对电平数据进行筛选及统计具体为：同一电平值的数据仅存储1条记录并记录总条数。
进一步地，所述根据网络优化特定使用场景，返回终端设备本身处理能力数据量的数据，供终端利用展现具体包括以下步骤：
步骤S21：终端设备请求特定经纬度范围的电平数据时，上报终端设备本身与处理能力相关的数据至服务器；
步骤S22：服务器根据终端设备本身的处理能力返回适配其处理能力的数据至终端设备；
步骤S23：终端设备渲染展现接收到的电平数据。
进一步地，步骤S21中，所述终端本身与处理能力相关的数据包括但不限于：终端CPU数据、内存数据。
本发明还提供了一种基于上文所述的基于位置特征的海量通信网络电平数据处理及使用方法的系统，包括设备终端以及服务器；所述设备终端向服务器上送电平数据；所述服务器根据经纬度范围对电平数据进行筛选及统计，并将筛选后的数据存储至存储设备；当终端设备向服务器请求特定经纬度范围的电平数据时，同时向其上报终端设备本身与处理能力相关的数据，服务器根据终端设备本身的处理能力返回适配其处理能力的数据至终端设备；所述终端设备渲染展现接收到的电平数据。
本发明还提供了一种基于上文所述的基于位置特征的海量通信网络电平数据处理及使用方法的系统，包括设备终端，所述设备终端包括以下操作：
所述设备终端向服务器上送电平数据，并等待服务器根据经纬度范围对电平数据进行筛选及统计；
所述终端设备向服务器请求特定经纬度范围的电平数据，上报终端设备本身与处理能力相关的数据至服务器，并接收服务器根据终端设备本身的处理能力返回的适配其处理能力的数据，并对接收到的数据进行渲染展示。
本发明还提供了一种基于上文所述的基于位置特征的海量通信网络电平数据处理及使用方法的系统，包括服务器，所述服务器包括以下操作：
所述服务器接收终端设备上送的电平数据，根据经纬度范围对接收到的电平数据进行筛选及统计，并将筛选后的数据入库存储至存储设备；
当服务器接收到终端设备请求特定经纬度范围的电平数据的请求时，根据终端设备上报的终端设备本身与处理能力相关的数据，返回适配其处理能力的数据至终端设备。
较佳的，在本发明中，服务器通过MR采集终端设备上送的电平数据。同时，所述服务器包括采集服务器集群，所述采集服务器集群包括位置1采集模块、位置2采集模块。。。位置N采集模块。
较佳的，在本发明中，所述终端设备可以为手机。后台服务器根据设备终端本身的处理能力根据特定的抽样算法返回适配其处理能力的数据，同时设备终端可以以较优的方式渲染展现这些电平数据。
与现有技术相比，本发明有以下有益效果：
1、本发明根据通信网络电平数据位置特征过滤掉同样作用的数据，能够降低后端数据处理的数量，并且减少数据存储数量。
2、本发明根据网络优化返回终端设备本身处理能力数据量的数据供终端利用展现，能够较好提升终端用户使用通信电平数据的体验。
附图说明
图1为本发明实施例的数据采集过程示意图。
图2为本发明实施例的终端展现及使用过程示意图。
具体实施方式
下面结合附图及实施例对本发明做进一步说明。
应该指出，以下详细说明都是示例性的，旨在对本申请提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本申请所属技术领域的普通技术人员通常理解的相同含义。
需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本申请的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
本实施例提供了一种基于位置特征的海量通信网络电平数据处理及使用方法，具体为：根据通信网络电平数据位置特征过滤掉同样作用的数据，用以降低后端数据处理的数量；根据网络优化特定使用场景，返回终端设备本身处理能力数据量的数据，供终端利用展现。
如图1所示，在本实施例中，所述根据通信网络电平数据位置特征过滤掉同样作用的数据，用以降低后端数据处理的数量具体包括包括以下步骤：
步骤S11：终端设备向服务器上送电平数据；
步骤S12：服务器根据经纬度范围对电平数据进行筛选及统计；
步骤S13：服务器将筛选后的数据入库存储至存储设备。
在本实施例中，步骤S2中对电平数据进行筛选及统计具体为：同一电平值的数据仅存储1条记录并记录总条数。
如图2所示，在本实施例中，所述根据网络优化特定使用场景，返回终端设备本身处理能力数据量的数据，供终端利用展现具体包括以下步骤：
步骤S21：终端设备请求特定经纬度范围的电平数据时，上报终端设备本身与处理能力相关的数据至服务器；
步骤S22：服务器根据终端设备本身的处理能力返回适配其处理能力的数据至终端设备；
步骤S23：终端设备渲染展现接收到的电平数据。
在本实施例中，步骤S21中，所述终端本身与处理能力相关的数据包括但不限于：终端CPU数据、内存数据。
本实施例还提供了一种基于上文所述的基于位置特征的海量通信网络电平数据处理及使用方法的系统，包括设备终端以及服务器；所述设备终端向服务器上送电平数据；所述服务器根据经纬度范围对电平数据进行筛选及统计，并将筛选后的数据存储至存储设备；当终端设备向服务器请求特定经纬度范围的电平数据时，同时向其上报终端设备本身与处理能力相关的数据，服务器根据终端设备本身的处理能力返回适配其处理能力的数据至终端设备；所述终端设备渲染展现接收到的电平数据。
本实施例还提供了一种基于上文所述的基于位置特征的海量通信网络电平数据处理及使用方法的系统，包括设备终端，所述设备终端包括以下操作：
所述设备终端向服务器上送电平数据，并等待服务器根据经纬度范围对电平数据进行筛选及统计；
所述终端设备向服务器请求特定经纬度范围的电平数据，上报终端设备本身与处理能力相关的数据至服务器，并接收服务器根据终端设备本身的处理能力返回的适配其处理能力的数据，并对接收到的数据进行渲染展示。
本实施例还提供了一种基于上文所述的基于位置特征的海量通信网络电平数据处理及使用方法的系统，包括服务器，所述服务器包括以下操作：
所述服务器接收终端设备上送的电平数据，根据经纬度范围对接收到的电平数据进行筛选及统计，并将筛选后的数据入库存储至存储设备；
当服务器接收到终端设备请求特定经纬度范围的电平数据的请求时，根据终端设备上报的终端设备本身与处理能力相关的数据，返回适配其处理能力的数据至终端设备。
较佳的，在本实施例中，服务器通过MR采集终端设备上送的电平数据。同时，所述服务器包括采集服务器集群，所述采集服务器集群包括位置1采集模块、位置2采集模块。。。位置N采集模块。
较佳的，在本实施例中，所述终端设备可以为手机。后台服务器根据设备终端本身的处理能力根据特定的抽样算法返回适配其处理能力的数据，同时设备终端可以以较优的方式渲染展现这些电平数据。
以上所述仅为本发明的较佳实施例，凡依本发明申请专利范围所做的均等变化与修饰，皆应属本发明的涵盖范围。
Claims (8)
1.一种基于位置特征的海量通信网络电平数据处理及使用方法，其特征在于：根据通信网络电平数据位置特征过滤掉同样作用的数据，用以降低后端数据处理的数量；根据网络优化特定使用场景，返回终端设备本身处理能力数据量的数据，供终端利用展现。
2.根据权利要求1所述的一种基于位置特征的海量通信网络电平数据处理及使用方法，其特征在于：所述根据通信网络电平数据位置特征过滤掉同样作用的数据，用以降低后端数据处理的数量具体包括包括以下步骤：
步骤S11：终端设备向服务器上送电平数据；
步骤S12：服务器根据经纬度范围对电平数据进行筛选及统计；
步骤S13：服务器将筛选后的数据入库存储至存储设备。
3.根据权利要求2所述的一种基于位置特征的海量通信网络电平数据处理及使用方法，其特征在于：步骤S2中对电平数据进行筛选及统计具体为：同一电平值的数据仅存储1条记录并记录总条数。
4.根据权利要求1所述的一种基于位置特征的海量通信网络电平数据处理及使用方法，其特征在于：所述根据网络优化特定使用场景，返回终端设备本身处理能力数据量的数据，供终端利用展现具体包括以下步骤：
步骤S21：终端设备请求特定经纬度范围的电平数据时，上报终端设备本身与处理能力相关的数据至服务器；
步骤S22：服务器根据终端设备本身的处理能力返回适配其处理能力的数据至终端设备；
步骤S23：终端设备渲染展现接收到的电平数据。
5.根据权利要求4所述的一种基于位置特征的海量通信网络电平数据处理及使用方法，其特征在于：步骤S21中，所述终端本身与处理能力相关的数据包括但不限于：终端CPU数据、内存数据。
6.一种基于权利要求1-5任一项所述的基于位置特征的海量通信网络电平数据处理及使用方法的系统，其特征在于：包括设备终端以及服务器；所述设备终端向服务器上送电平数据；所述服务器根据经纬度范围对电平数据进行筛选及统计，并将筛选后的数据存储至存储设备；当终端设备向服务器请求特定经纬度范围的电平数据时，同时向其上报终端设备本身与处理能力相关的数据，服务器根据终端设备本身的处理能力返回适配其处理能力的数据至终端设备；所述终端设备渲染展现接收到的电平数据。
7.一种基于权利要求1-5任一项所述的基于位置特征的海量通信网络电平数据处理及使用方法的系统，其特征在于：包括设备终端，所述设备终端包括以下操作：
所述设备终端向服务器上送电平数据，并等待服务器根据经纬度范围对电平数据进行筛选及统计；
所述终端设备向服务器请求特定经纬度范围的电平数据，上报终端设备本身与处理能力相关的数据至服务器，并接收服务器根据终端设备本身的处理能力返回的适配其处理能力的数据，并对接收到的数据进行渲染展示。
8.一种基于权利要求1-5任一项所述的基于位置特征的海量通信网络电平数据处理及使用方法的系统，其特征在于：包括服务器，所述服务器包括以下操作：
所述服务器接收终端设备上送的电平数据，根据经纬度范围对接收到的电平数据进行筛选及统计，并将筛选后的数据入库存储至存储设备；
当服务器接收到终端设备请求特定经纬度范围的电平数据的请求时，根据终端设备上报的终端设备本身与处理能力相关的数据，返回适配其处理能力的数据至终端设备。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910020267.XA CN109857777A (zh) | 2019-01-09 | 2019-01-09 | 一种基于位置特征的海量通信网络电平数据处理及使用方法、系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910020267.XA CN109857777A (zh) | 2019-01-09 | 2019-01-09 | 一种基于位置特征的海量通信网络电平数据处理及使用方法、系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109857777A true CN109857777A (zh) | 2019-06-07 |
Family
ID=66894291
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910020267.XA Pending CN109857777A (zh) | 2019-01-09 | 2019-01-09 | 一种基于位置特征的海量通信网络电平数据处理及使用方法、系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109857777A (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102740486A (zh) * | 2011-04-02 | 2012-10-17 | 中兴通讯股份有限公司 | 一种资源调度的方法及系统及一种终端 |
| US20160283506A1 (en) * | 2015-03-24 | 2016-09-29 | Datos IO Inc. | ON-THE-FLY DEDUPLICATION DURING DATA MOVEMENT FOR NoSQL DATA STORES |
| CN106844480A (zh) * | 2016-12-23 | 2017-06-13 | 航天星图科技（北京）有限公司 | 一种清洗比对入库方法 |
| CN107273512A (zh) * | 2017-06-21 | 2017-10-20 | 深圳市盛路物联通讯技术有限公司 | 一种基于设备类型和地理位置进行数据去重的方法及设备 |
| CN108632741A (zh) * | 2017-03-20 | 2018-10-09 | 中国移动通信集团湖北有限公司 | 信令数据的筛选方法和装置 |
-
2019
- 2019-01-09 CN CN201910020267.XA patent/CN109857777A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102740486A (zh) * | 2011-04-02 | 2012-10-17 | 中兴通讯股份有限公司 | 一种资源调度的方法及系统及一种终端 |
| US20160283506A1 (en) * | 2015-03-24 | 2016-09-29 | Datos IO Inc. | ON-THE-FLY DEDUPLICATION DURING DATA MOVEMENT FOR NoSQL DATA STORES |
| CN106844480A (zh) * | 2016-12-23 | 2017-06-13 | 航天星图科技（北京）有限公司 | 一种清洗比对入库方法 |
| CN108632741A (zh) * | 2017-03-20 | 2018-10-09 | 中国移动通信集团湖北有限公司 | 信令数据的筛选方法和装置 |
| CN107273512A (zh) * | 2017-06-21 | 2017-10-20 | 深圳市盛路物联通讯技术有限公司 | 一种基于设备类型和地理位置进行数据去重的方法及设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102591943B (zh) | 一种移动终端的页面数据处理方法 | |
| CN104737157B (zh) | 联合数据库系统 | |
| CN104636336B (zh) | 一种视频搜索的方法和装置 | |
| CN107169083A (zh) | 公安卡口海量车辆数据存储与检索方法及装置、电子设备 | |
| CN104935648A (zh) | 一种高性价比的cdn系统及文件预推、分片缓存的方法 | |
| CN106959963A (zh) | 一种数据查询方法、装置及系统 | |
| CN103631933B (zh) | 一种面向分布式去重系统的数据路由方法 | |
| CN104035925B (zh) | 数据存储方法、装置和存储系统 | |
| CN101262676A (zh) | 一种选择手机资费套餐的系统和方法 | |
| CN106850106B (zh) | 基于移动群智感知的无线电环境地图数据收集系统及方法 | |
| CN111552885B (zh) | 实现自动化实时消息推送运营的系统及其方法 | |
| CN109547566A (zh) | 一种基于内存分配的多线程上传优化方法 | |
| TW201322726A (zh) | 移動終端通訊錄的優先順序設置裝置及方法 | |
| CN104968008B (zh) | 一种接入调度方法、装置和系统 | |
| CN102890714A (zh) | 数据索引方法及装置 | |
| CN110399348A (zh) | 文件重删方法、装置、系统及计算机可读存储介质 | |
| CN108900626A (zh) | 一种云环境下数据存储方法、装置及系统 | |
| CN103067479A (zh) | 一种基于文件冷热的网盘同步方法及系统 | |
| US20140114958A1 (en) | Method and system for calculating number of users | |
| CN103823807A (zh) | 一种去除重复数据的方法、装置及系统 | |
| CN107491549A (zh) | 一种数据处理方法及系统 | |
| CN103365658B (zh) | 一种资源访问方法和计算机设备 | |
| CN101404607B (zh) | 更新数据的方法、装置和系统 | |
| CN102354385A (zh) | 移动终端、服务器和证券信息推送方法 | |
| EP1030494A1 (en) | Communication unit and communication method with profile management |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190607 |