CN102662967B - 基于j2ee技术中国联通固网话务分析方案的设计方法 - Google Patents
基于j2ee技术中国联通固网话务分析方案的设计方法 Download PDFInfo
- Publication number
- CN102662967B CN102662967B CN201210060788.6A CN201210060788A CN102662967B CN 102662967 B CN102662967 B CN 102662967B CN 201210060788 A CN201210060788 A CN 201210060788A CN 102662967 B CN102662967 B CN 102662967B
- Authority
- CN
- China
- Prior art keywords
- traffic
- data
- time
- dimension
- foreground
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000007405 data analysis Methods 0.000 title claims abstract description 14
- 238000005516 engineering process Methods 0.000 title claims abstract description 13
- 238000004458 analytical method Methods 0.000 claims abstract description 32
- 238000005259 measurement Methods 0.000 claims abstract description 18
- 230000000875 corresponding effect Effects 0.000 claims description 18
- 238000013461 design Methods 0.000 claims description 16
- 238000012545 processing Methods 0.000 claims description 14
- 238000007619 statistical method Methods 0.000 claims description 11
- 239000004744 fabric Substances 0.000 claims description 9
- 230000008901 benefit Effects 0.000 claims description 8
- PEDCQBHIVMGVHV-UHFFFAOYSA-N Glycerine Chemical compound OCC(O)CO PEDCQBHIVMGVHV-UHFFFAOYSA-N 0.000 claims description 7
- FFBHFFJDDLITSX-UHFFFAOYSA-N benzyl N-[2-hydroxy-4-(3-oxomorpholin-4-yl)phenyl]carbamate Chemical compound OC1=C(NC(=O)OCC2=CC=CC=C2)C=CC(=C1)N1CCOCC1=O FFBHFFJDDLITSX-UHFFFAOYSA-N 0.000 claims description 3
- 230000015572 biosynthetic process Effects 0.000 claims description 3
- 230000002596 correlated effect Effects 0.000 claims description 3
- 238000012423 maintenance Methods 0.000 claims description 3
- 238000007726 management method Methods 0.000 claims description 3
- 230000003068 static effect Effects 0.000 claims description 3
- 238000012360 testing method Methods 0.000 claims description 3
- 239000004606 Fillers/Extenders Substances 0.000 claims description 2
- 230000000694 effects Effects 0.000 claims description 2
- 239000000203 mixture Substances 0.000 claims description 2
- 239000002245 particle Substances 0.000 claims description 2
- 241000208340 Araliaceae Species 0.000 claims 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims 1
- 235000003140 Panax quinquefolius Nutrition 0.000 claims 1
- 235000008434 ginseng Nutrition 0.000 claims 1
- 102000056548 Member 3 Solute Carrier Family 12 Human genes 0.000 description 3
- 108091006623 SLC12A3 Proteins 0.000 description 3
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 238000009418 renovation Methods 0.000 description 1
Landscapes
- Telephonic Communication Services (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明提供一种基于J2EE技术中国联通固网话务分析方案的设计方法，为了克服常规的联通固网话务分析的弊端，本发明综合分析联通固网日常工作中话务分析、统计处理的特点,并依照这些特点设计了一套专用处理话务统计、分析的规则,实现了多数据表、多维度、多时间、多方向、多方式的千万级大数据量的统计、分析。
Description
技术领域
本发明涉及通讯技术领域，具体地说是用于中国联通固网交换话务分析，解决目前交换话务多数据表、多维度、多时间、多类型、多方式的千万级大数据量话务统计分析复杂，运算慢的问题。
背景技术
目前，中国联通话务分析是用户在平常的日常工作中，需要随时了解、跟踪、统计分析网络设备的话务指标，综合评估网络性能和承载能力。话务统计、分析是对各交换机输出的话务报告进行采集，过滤，转换为话务数据，在此基础上，对来话、去话、目的码话务数据进行分析、比较，为电信网的调整提供理论依据。话务分析的目的是对网络、网络单元进行监视，采集相关的话务数据，评价网络和网络单元的有效性，支持网络规划和网络分析，充分发挥电信网的性能，创造更大效益。全省有几百台甚至上千台交换机，按刻钟或小时粒度来采集每条中继或目的码的话务数据，数据量之大是非常可观的。采用常规的方案要对全省的全部交换机进行话务分析，需要耗费大量的人力、物力、时间是显而易见的，而且不能够及时、方便、高效的随时从整体上掌握话务交换网的话务指标，不便于指导生产和领导进行决策，另外常规的话务分析方案分析的范围不够全面、效率低下。
发明内容
本发明的目的是提供一种基于J2EE技术中国联通固网话务分析方案的设计方法。
本发明的目的是按以下方式实现的，为了克服常规的联通固网话务分析的弊端，本发明综合分析联通固网日常工作中话务分析、统计处理的特点,并依照这些特点设计了一套专用处理话务统计、分析的规则,实现了多数据表、多维度、多时间、多方向、多方式的千万级大数据量的统计、分析。
本发明的专用的话务统计、分析方案，具体细节包括两大部分，一部分为后台处理话务数据，一部分为前台统计、分析话务数据：
一、话务数据后台处理
1、首先由各地前置机负责实时采集交换机输出的来话、去话、目的码话务数据，生成相应的话务日志文件。为了使话务日志文件不重复和方便后台脚本解析入库。对话务日志文件命名制定了规则，具体规则是按照地市、网元编码、端口、年月日四大要素组合编码形成日志文件的命名，格式为地市_网元编码_端口ID_年月日，例如文件531_8_7889_20121215即是按照上述规则形成的日志文件；
2、对收到的话务日志进行分析、过滤、转换，完成来话、去话、目的码入库操作，形成话务统计、分析方案的基础话务数据形，统一存放在网管中心的数据库中；
3、本方案中的话务统计、分析均是基于入库后的话务数据的。为了方便来话、去话、目的码原始话务数据的入库，特设计三种话务类型的数据库表，每一种话务数据表都按照一定的规则来进行自动生成；
4、在原始话务数据的基础上，为了便于后续前台快速有效的进行统计、分析，采用ORACLE中的物化视图原理，对各个维度汇总物化视图进行设计。目前支持的维度有地理维度、话务类型维度、时间维度、网元维度；
5、以上流程3、4中具体话务数据表字段内容为时间、周期、维度和基本网管参数组成；
6、为了能够满足实时进行更新各个维度的话务数据，在操作系统平台上编写SHELL脚本，把脚本文件放在CRONTAB中，进行定时执行；
7、话务统计分析设计到的参数非常多，通常包括基本参数和运算参数。在工作中基本参数改动较小、运算参数有可能经常调整。运算参数在程序中使用静态方式，如果后续运算参数调整，那么就需要进一步修改程序、编译、发布、测试等流程。无形中增加了工程项目的维护成本，性能运算参数能够动态配置就显非常有必要了；
8、话务统计、分析业务非常复杂，需要大量的中间运算，所以需要设计多个会话级别的临时表，目前根据实际情况设计如下会话级别的临时表。临时表具体字段内容参照上述流程5中的规则建立即可。临时表在操作上比永久表要更快。因为临时表不需要往编目表中插入条目，临时表的使用也不需要访问编目表，因此也没有编目表的使用。仅有创建临时表才可以存取临时表，在处理临时表时没有锁。因为临时表的数据只对当前Session有效，每个Session都有自己的临时数据，并且不能访问其他Session的临时表中的数据。因此，临时表不需要DML锁。如果仅在数据库的一个会话中使用大量的临时数据，这些数据存入临时表能大大提高性能。临时表的数据不会永久存在(同永久表最大的区别)，当一个会话结束或者事务结束的时候，数据库自动清除数据。
二、前台话务统计分析处理
1、话务统计、分析前台界面规则设计
1)全省交换机、中继群、目的码非常多，为了便于管理，采用多级树的方式来展现。默认情况下交换机是按照交换机类型来组织数据的。为了用户使用更加方便，特设计了厂家类型、交换机功能类型、地市、区县四个维度来组织交换机数据。上述四种维度之间根据生产需要，进行多维度组合，能够调整顺序，动态生成交换机组织树。例如选择厂家、地市，顺序也是按照厂家、地市，那么交换机生成树的展现方式就是厂家、地市、交换机。中继群、目的码因为数量较大，不能全部加载，所以交换机组织树上点击交换机再进行加载中继群和目的码。这样做的优势提高页面显示速度、方便用户快速查询数据；
2)统计维度分为地理维度（地市、区县）、交换机维度、中继群/目的码三种类型。当选择地理、交换机维度时交换机组织树就按照默认的方式显示交换机，交换机不能往下点选中继群或目的码。选择中继群/目的码维度时，并且话务类型选择来话、去话、来去话时点击交换机加载中继群，否则加载目的码；
3)话务类型分为来话、去话、来去话、目的码四种类型。点击来话、去话、来去话、目的码时分别动态加载来话、去话、来去话、目的码的基本参数和运算参数；
4)时间维度分为刻钟、小时、天、月、年。点击上述时间维度时，会加载对应的时间选择，例如选择刻钟时，加载选择刻钟时间的功能；
5)任意选择基本参数和网管参数。选中网管参数后，自动会将其相关的基本参数选中。用户使用时就能够知道此运算参数是有哪些基本参数参与运算组成的；
6)数据统计方式SUM、AVG、MAX、MIN四种类型；
7)显示方式为TOTAL、LIST两种方式；
8)灵活选择时间范围，分为三类：连续时间、连续忙时、间隔忙时。连续时间是指选择的时间段是一段连续的时间，时间段可以选择一个或多个。连续忙时是指选择的日期是连续日期，时间是一段连续时间，根据上述规则，自动分割成每一日期中不同时间段；
4、在上述界面基础上，采用STRUTS技术对界面进行业务处理。具体业务处理流程如下
1)首先对前台选择的时间段进行业务处理，因为前台传递到后台的时间是多个，每一个时间段都有可能跨月,对于跨月的时间段分割成两个时间段。把所有的时间都进行处理后保存在数组中；
2)根据前台传来的条件动态生成需要调用的话务数据表的名字。例如统计维度为中继群/目的码、话务类型为去话、时间粒度为小时、选择时间段为2012-01-01至2012-12-02时间段，那么按照第一部分话务数据后台处理中物化视图定义规则自动生成统计、分析所使用的库表名称为TPI_OG_HR_201201，因为前台选择时间可以是多个，那么就有可能自动生成多个库表名称；
3)根据上述流程1）、2）和本端/对端交换机、中继群类型等对应的过滤条件生成SQL语句，把多个表中需要的数据放到对应的临时表中。例如上述流程2）中的例子中动态生成的库表TPI_OG_HR_201201对应的临时表为TPI_OG_TMP,其他规则参照第二部分后台话务处理流程8即可；
4)对前台传来的基本参数、运算参数、数据统计方式条件动态形成统计、分析的话务参数。再参照上述流程3）中的临时表TPI_OG_TMP，动态生成运算SQL；
5)最后对前台选择的条件做处理和对应关系，运算好的数据和条件对应关系放在LIST中传到前台，然后再前台进行展示现话务数据的结果。对于条件对应关系能够展现统计分析的各个维度的值，便于用户能够知道目前统计分析的条件。用户感觉生成的结果能够满意，直接导出EXCEL，便于后续上报。
本发明的主要优点是：话务统计、分析设涉及到的业务非常复杂、数据量大、运算复杂。针对上述情况，对大数据量的话务数据采取分而治之的策略，后台对各个维度的数据提前进行汇总处理保存。这样用户在正式使用时，就会大大提高统计、分析的速度。针对话务业务复杂，特别定义了一些界面规则和后台JAVA处理规则，用户使用起来就非常方便，同时也简化了后台JAVA程序处理的复杂度，提高了后台处理的效率。实现话务多数据表、多维度、多时间、多类型、多方式的千万级大数据量的统计、分析。
本发明的有益效果是采用上述流程能够是较大的提高了话务统计分析的性能，简化了业务处理流程，大大缩减程序的代码量，实现多数据表、多维度、多时间、多类型、多方式的千万级大数据量的统计、分析。
具体实施方式
在本发明的方案中规则使用以下字符表示：
（1）话务类型维度来话使用“IC”表示；
（2）话务类型维度去话使用“OG”表示；
（3）话务类型维度目的码使用“DT”表示；
（4）话务类型维度来去话合并使用“ICOG”表示；
（5）时间维度刻钟采用“QT”表示；日期格式使用“YYYY-MM-DD HH24:MI:00”表示；
（6）时间维度小时采用“HR”表示；日期格式使用“YYYY-MM-DD HH24:00:00”表示；
（7）时间维度天采用“DAY”表示；日期格式使用“YYYY-MM-DD 00:00:00”表示；
（8）时间维度月采用“MN”；日期格式使用“YYYY-MM-01”表示；
（9） 地理维度省采用“PR”表示；
（10）地理维度地市采用“CT”表示；
（11） 地理纬度区县采用“CTR”表示；
（12） 统计分析方式累加使用“SUM”表示；
（13） 统计分析方式平均使用“AVG”表示；
（14） 统计分析方式最大值使用“MAX”表示；
（15） 统计分析方式最小使用“MIN”表示；
（16） 显示方式汇总使用“TOTAL”表示；
（17） 显示方式明细使用“LIST”表示
（18） TPI (True Performance Initiative)真实性能标准理念来表示话务数据库表的前缀；
具体方案流程如下：
一、话务数据后台处理
1、首先由各地前置机负责实时采集交换机输出的来话、去话、目的码话务数据，生成相应的话务日志文件。为了使话务日志文件不重复和方便后台脚本解析入库。对话务日志文件命名制定了规则，具体规则是按照地市、网元编码、端口、年月日四大要素组合编码形成日志文件的命名，格式为地市_网元编码_端口ID_年月日，例如文件531_8_7889_20121215即是按照上述规则形成的日志文件。
2、对收到的话务日志进行分析、过滤、转换，完成来话、去话、目的码入库操作，形成话务统计、分析方案的基础话务数据形，统一存放在网管中心的数据库中；
3、本方案中的话务统计、分析均是基于入库后的话务数据的。为了方便来话、去话、目的码原始话务数据的入库，特设计三种话务类型的数据库表，每一种话务数据表都按照一定的规则来进行自动生成。话务库表名称规则是按照TPI(前缀)_话务类型_年月，来话、去话、目的码三种话务类型的刻钟粒度基础表定义。例如2012年01月周期为刻钟的来话中继群、去话中继群、目的码话务数据库表分别为TPI_IC_QT_201201、 TPI_OG_QT_201201、TPI_DEST_QT_201201,具体缩写见上述字符定义，以下使用的字符不再单独说明；
4、在原始话务数据的基础上，为了便于后续前台快速有效的进行统计、分析，采用ORACLE中的物化视图原理，对各个维度汇总物化视图进行设计。目前支持的维度有地理维度、话务类型维度、时间维度、网元维度。具体各个维度话务汇总物化视图定义组合如下表：
在设计好的各个维度物化视图上，为了采用ORACLE物化视图的增量更新技术。需要在低级别维度上创建物化视图日志，因为这是高级维度物化视图更新的基础。例如TPI_IC_QT_201201是来话中继群维度的基础表，在这个基础表上创建物化视图更新日志，因为来话中继群小时粒度TPI_IC_HR_201201是在来话中继群刻钟粒度基础表上进行增量更新的。在创建完物化视图后按照前台使用顺序来创建物化视图索引，创建合适的索引对前台统计分析的速度提高有着较大的作用。例如在TPI_IC_QT_201201基础表可以创建时间、维度为顺序的两个字段组成的索引即可，这样既不影响入库，又提高前台统计分析的速度；
5、以上流程3、4中具体话务数据表字段内容为时间、周期、维度和基本网管参数组
成。以来话中继群维度刻钟粒度为例，为了简单起见，基本参数暂定为SERL(占用话务量)，
如下表所示：
| 时间 | 周期 | 维度 | 基本参数 |
| TIME | PERIOD | TRUNK | SERL（占用话务量） |
其他各级维度数据库表字段内容同上；
6、为了能够满足实时进行更新各个维度的话务数据，在操作系统平台上编写SHELL脚本，把脚本文件放在CRONTAB中，进行定时执行。根据中国联通日常工作需要和使用情况，物化视图基础汇总表定时任务为时间维度刻钟，每一刻钟增量更新一次。小时、天、月时间粒度中各个维度表是在时间维度刻钟粒度增量更新的基础上进行增量更新，这样做的好处是增量更新的数据量级相对减少，更新速度就能够大幅度的提高。例如TPI_IC_DAY_201201物化视图的更新是在TPI_IC_HR_201201增量更新的基础上来更新本表，这样就可以减少更新数据。增量更新数据减少，自然更新速度就大大提高，实时性也得到了较大的提高；
7、话务统计分析设计到的参数非常多，通常包括基本参数和运算参数。在工作中基本参数改动较小、运算参数有可能经常调整。运算参数在程序中使用静态方式，如果后续运算参数调整，那么就需要进一步修改程序、编译、发布、测试等流程。无形中增加了工程项目的维护成本，性能运算参数能够动态配置就显非常有必要了。具体细节如下：
1、基本参数表CFG_APP_BS_FIELD的设计方案如下所示：
| 序列ID | 字段英文名 | 字段中文名 | 话务类型 |
| ID | FIELD_EN_NAME | FIELD_CN_NAME | TRAFFIC_TYPE |
| 1 | SERL | 占用话务量 | IC |
2、运算参数表CFG_APP_OP_FIELD的设计方案如下所示：
| 序列ID | 字段英文名 | 字段中文名 | 话务类型 | 基本参数 |
| ID | FIELD_EN_NAME | FIELD_CN_NAME | TRAFFIC_TYPE | BASICPARAM |
| 1 | SERL/NCCT | 电路可用率 | OG | SERL、NCCT |
上述配置可以根据需要使用数据库中函数如SUM、AVG、MAX、MIN等；
注：NCCT为可用电路数；
8、话务统计、分析业务非常复杂，需要大量的中间运算，所以需要设计多个会话级别的临时表，目前根据实际情况设计如下会话级别的临时表；
临时表具体字段内容参照上述流程5中的规则建立即可。临时表在操作上比永久表要更快。因为临时表不需要往编目表中插入条目，临时表的使用也不需要访问编目表，因此也没有编目表的使用。仅有创建临时表才可以存取临时表，在处理临时表时没有锁。因为临时表的数据只对当前Session有效，每个Session都有自己的临时数据，并且不能访问其他Session的临时表中的数据。因此，临时表不需要DML锁。如果仅在数据库的一个会话中使用大量的临时数据，这些数据存入临时表能大大提高性能。临时表的数据不会永久存在(同永久表最大的区别)，当一个会话结束或者事务结束的时候，数据库自动清除数据。
二、前台话务统计分析处理
1、话务统计、分析前台界面规则设计
1)全省交换机、中继群、目的码非常多，为了便于管理，采用多级树的方式来展现。默认情况下交换机是按照交换机类型来组织数据的。为了用户使用更加方便，特设计了厂家类型、交换机功能类型、地市、区县四个维度来组织交换机数据。上述四种维度之间根据生产需要，进行多维度组合，能够调整顺序，动态生成交换机组织树。例如选择厂家、地市，顺序也是按照厂家、地市，那么交换机生成树的展现方式就是厂家、地市、交换机。中继群、目的码因为数量较大，不能全部加载，所以交换机组织树上点击交换机再进行加载中继群和目的码。这样做的优势提高页面显示速度、方便用户快速查询数据；
2)统计维度分为地理维度（地市、区县）、交换机维度、中继群/目的码三种类型。当选择地理、交换机维度时交换机组织树就按照默认的方式显示交换机，交换机不能往下点选中继群或目的码。选择中继群/目的码维度时，并且话务类型选择来话、去话、来去话时点击交换机加载中继群，否则加载目的码；
3) 话务类型分为来话、去话、来去话、目的码四种类型。点击来话、去话、来去话、目的码时分别动态加载来话、去话、来去话、目的码的基本参数和运算参数；
4)时间维度分为刻钟、小时、天、月、年。点击上述时间维度时，会加载对应的时间选择，例如选择刻钟时，加载选择刻钟时间的功能；
5)任意选择基本参数和网管参数。选中网管参数后，自动会将其相关的基本参数选中。用户使用时就能够知道此运算参数是有哪些基本参数参与运算组成的；
6)数据统计方式SUM、AVG、MAX、MIN四种类型；
7)显示方式为TOTAL、LIST两种方式；
8)灵活选择时间范围，分为三类：连续时间、连续忙时、间隔忙时。连续时间是指选择的时间段是一段连续的时间，时间段可以选择一个或多个。连续忙时是指选择的日期是连续日期，时间是一段连续时间，根据上述规则，自动分割成每一日期中不同时间段；
4、在上述界面基础上，采用STRUTS技术对界面进行业务处理。具体业务处理流程如下：
1)首先对前台选择的时间段进行业务处理，因为前台传递到后台的时间是多个，每一个时间段都有可能跨月,对于跨月的时间段分割成两个时间段。把所有的时间都进行处理后保存在数组中；
2)根据前台传来的条件动态生成需要调用的话务数据表的名字。例如统计维度为中继群/目的码、话务类型为去话、时间粒度为小时、选择时间段为2012-01-01至2012-12-02时间段，那么按照第一部分话务数据后台处理中物化视图定义规则自动生成统计、分析所使用的库表名称为TPI_OG_HR_201201，因为前台选择时间可以是多个，那么就有可能自动生成多个库表名称；
3)根据上述流程1）、2）和本端/对端交换机、中继群类型等对应的过滤条件生成SQL语句，把多个表中需要的数据放到对应的临时表中。例如上述流程2）中的例子中动态生成的库表TPI_OG_HR_201201对应的临时表为TPI_OG_TMP,其他规则参照第二部分后台话务处理流程8即可；
4) 对前台传来的基本参数、运算参数、数据统计方式条件动态形成统计、分析的话务参数。再参照上述流程3）中的临时表TPI_OG_TMP，动态生成运算SQL；
5) 最后对前台选择的条件做处理和对应关系，运算好的数据和条件对应关系放在LIST中传到前台，然后再前台进行展示现话务数据的结果。对于条件对应关系能够展现统计分析的各个维度的值，便于用户能够知道目前统计分析的条件。用户感觉生成的结果能够满意，直接导出EXCEL，便于后续上报。
概括本发明的方法，话务分析方案的步骤：
首先由各地前置机负责实时采集交换机输出的来话、去话、目的码话务数据，生成相应的话务日志文件。对收到的话务日志进行分析、过滤、转换，完成来话、去话、目的码入库操作，形成话务统计、分析方案的基础话务数据。来话、去话、目的码原始话务数据的入库，特设计三种话务类型的数据库表。为了方便来话、去话、目的码原始话务数据的入库，特设计三种话务类型的数据库表。每一种话务类型数据库表都按照一定的规则来进行生成。在原始话务数据的基础上，为了便于后续前台快速有效的进行统计、分析，采用ORACLE中的物化视图，对各个维度进行实时更新统计、分析。目前支持的维度有地理维度、话务类型维度、时间维度、网元维度、参数维度。在设计好的各个维度物化视图上，有采用ORACLE物化视图的增量更新技术，编写增量更新存储过程。为了能够满足实时进行更新各个维度的话务数据，在操作系统平台上编写SHELL脚本，把脚本文件放在CROBTAB中，进行定时执行。编写设计各个维度话务数据的物化视图脚本，采用存储过程脚本编写增量更新脚本。接着使用后台脚本的优势来编写实时更新物化视图存储过程。话务统计、分析业务非常复杂，需要大量的中间运算，所以需要设计多个会话级别的临时表，目前根据实际情况设计如下会话级别的临时表。
其次是前台界面设计在后台脚本汇总好的基础上，进行前台话务处理。定义话务统计、分析前台界面规则，详细规则参见具体实施方式。在上述界面基础上，采用STRUTS技术对界面进行业务处理，具体流程参见具体实施方式。
除说明书所述的技术特征外，均为本专业技术人员的已知技术。
Claims (1)
1.基于J2EE技术中国联通固网话务分析方案的设计方法,其特征在于包括：后台处理话务数据和前台统计、分析话务数据，其中：后台处理话务数据和前台统计包括以下内容：
1)首先由各地前置机负责实时采集交换机输出的来话、去话、目的码话务数据，生成相应的话务日志文件，为了使话务日志文件不重复和方便后台脚本解析入库，对话务日志文件命名制定了规则，具体规则是按照地市、网元编码、端口、年月日四大要素组合编码形成日志文件的命名，格式为地市_网元编码_端口ID_年月日；
2)对收到的话务日志进行分析、过滤、转换，完成来话、去话、目的码入库操作，形成话务统计、分析方案的基础话务数据形，统一存放在网管中心的数据库中；
3)话务统计、分析均是基于入库后的话务数据的，为了方便来话、去话、目的码原始话务数据的入库，设计三种话务类型的数据库表，每一种话务数据表都按照一定的规则来进行自动生成，话务库表名称规则是按照TPI前缀_话务类型_年月，来话、去话、目的码三种话务类型的刻钟粒度基础表定义；包括来话中继群、去话中继群、目的码话务数据库表，分别为TPI_IC_QT_201201、TPI_OG_QT_201201、TPI_DEST_QT_201201,具体缩写见字符定义，以下使用的字符不再单独说明；
4)在原始话务数据的基础上，为了便于后续前台快速有效的进行统计、分析，采用ORACLE中的物化视图原理，对各个维度汇总物化视图进行设计，根据工作需要支持维度包括：地理维度、话务类型维度、时间维度、网元维度；
在设计好的各个维度物化视图上，为了采用ORACLE物化视图的增量更新技术，需要在低级别维度上创建物化视图日志，因为这是高级维度物化视图更新的基础，在这个基础表上创建物化视图更新日志，因为来话中继群小时粒度TPI_IC_HR_201201是在来话中继群刻钟粒度基础表上进行增量更新的，在创建完物化视图后按照前台使用顺序来创建物化视图索引，创建索引对前台统计分析的速度提高有着较大的作用；
5)以上步骤3、4中具体话务数据表字段内容由时间、周期、维度和基本网管参数组成，以来话中继群维度刻钟粒度为例，为了简单起见，基本参数暂定为SERL占用话务量；
6)为了能够满足实时进行更新各个维度的话务数据，在操作系统平台上编写SHELL脚本，把脚本文件放在CRONTAB中，进行定时执行，根据中国联通日常工作需要和使用情况，物化视图基础汇总表定时任务为时间维度刻钟，每一刻钟增量更新一次，小时、天、月时间粒度中各个维度表是在时间维度刻钟粒度增量更新的基础上进行增量更新，这样做的好处是增量更新的数据量级相对减少，更新速度就能够大幅度的提高；
7)话务统计分析设计到的参数非常多，通常包括基本参数和运算参数，在工作中基本参数改动较小、运算参数或经常调整，运算参数在程序中使用静态方式，如果后续运算参数调整，那么就需要进一步修改程序、编译、发布、测试流程，无形中增加了工程项目的维护成本，性能运算参数能够动态配置就显非常有必要了；
8)话务统计、分析业务非常复杂，需要大量的中间运算，所以需要设计多个会话级别的临时表；
临时表具体字段内容参照流程5)中的规则建立即可，临时表在操作上比永久表要更快，因为临时表不需要往编目表中插入条目，临时表的使用也不需要访问编目表，因此也没有编目表的使用，仅有创建临时表才可以存取临时表，在处理临时表时没有锁，因为临时表的数据只对当前Session有效，每个Session都有自己的临时数据，并且不能访问其他Session的临时表中的数据，因此，临时表不需要DML锁，如果仅在数据库的一个会话中使用大量的临时数据，这些数据存入临时表能大大提高性能，临时表的数据不会永久存在，当一个会话结束或者事务结束的时候，数据库自动清除数据；
前台话务统计分析处理、话务统计、分析前台界面规则设计
(a)全省交换机、中继群、目的码非常多，为了便于管理，采用多级树的方式来展现，默认情况下交换机是按照交换机类型来组织数据的，为了用户使用更加方便，特设计了厂家类型、交换机功能类型、地市、区县四个维度来组织交换机数据，四种维度之间根据生产需要，进行多维度组合，能够调整顺序，动态生成交换机组织树，选择厂家、地市，顺序也是按照厂家、地市，那么交换机生成树的展现方式就是厂家、地市、交换机，中继群、目的码因为数量较大，不能全部加载，所以交换机组织树上点击交换机再进行加载中继群和目的码，这样做的优势提高页面显示速度、方便用户快速查询数据；
(b)统计维度分为地理维度(地市、区县)、交换机维度、中继群/目的码三种类型，当选择地理、交换机维度时交换机组织树就按照默认的方式显示交换机，交换机不能往下点选中继群或目的码，选择中继群/目的码维度时，并且话务类型选择来话、去话、来去话时点击交换机加载中继群，否则加载目的码；
(c)话务类型分为来话、去话、来去话、目的码四种类型，点击来话、去话、来去话、目的码时分别动态加载来话、去话、来去话、目的码的基本参数和运算参数；
(d)时间维度分为刻钟、小时、天、月、年，点击上述时间维度时，会加载对应的时间选择，选择刻钟时，加载选择刻钟时间的功能；
(e)任意选择基本参数和网管参数，选中网管参数后，自动会将其相关的基本参数选中；用户使用时就能够知道此运算参数是有哪些基本参数参与运算组成的；
(f)数据统计方式SUM、AVG、MAX、MIN四种类型；
(g)显示方式为TOTAL、LIST两种方式；
(h)灵活选择时间范围，分为三类：连续时间、连续忙时、间隔忙时，连续时间是指选择的时间段是一段连续的时间，时间段可以选择一个或多个，连续忙时是指选择的日期是连续日期，时间是一段连续时间，根据上述规则，自动分割成每一日期中不同时间段；
采用STRUTS技术对界面进行业务处理，具体业务处理流程如下：
1)首先对前台选择的时间段进行业务处理，因为前台传递到后台的时间是多个，每一个时间段都有可能跨月,对于跨月的时间段分割成两个时间段，把所有的时间都进行处理后保存在数组中；
2)根据前台传来的条件动态生成需要调用的话务数据表的名字，统计维度为中继群/目的码、话务类型为去话、时间粒度为小时、选择时间段为2012-01-01至2012-12-02时间段，那么按照第一部分话务数据后台处理中物化视图定义规则自动生成统计、分析所使用的库表名称为TPI_OG_HR_201201，因为前台选择时间可以是多个，那么就有可能自动生成多个库表名称；
3)根据流程1)、2)和本端/对端交换机、中继群类型等对应的过滤条件生成SQL语句，把多个表中需要的数据放到对应的临时表中，流程2)中的动态生成的库表TPI_OG_HR_201201对应的临时表为TPI_OG_TMP,其他规则参照第二部分后台话务处理流程8)即可；
4)对前台传来的基本参数、运算参数、数据统计方式条件动态形成统计、分析的话务参数，再参照上述流程3)中的临时表TPI_OG_TMP，动态生成运算SQL；
5)最后对前台选择的条件做处理和对应关系，运算好的数据和条件对应关系放在LIST中传到前台，然后再前台进行展示现话务数据的结果，对于条件对应关系能够展现统计分析的各个维度的值，便于用户能够知道目前统计分析的条件，用户感觉生成的结果能够满意，直接导出EXCEL，便于后续上报。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210060788.6A CN102662967B (zh) | 2012-03-09 | 2012-03-09 | 基于j2ee技术中国联通固网话务分析方案的设计方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210060788.6A CN102662967B (zh) | 2012-03-09 | 2012-03-09 | 基于j2ee技术中国联通固网话务分析方案的设计方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102662967A CN102662967A (zh) | 2012-09-12 |
| CN102662967B true CN102662967B (zh) | 2016-09-14 |
Family
ID=46772458
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201210060788.6A Active CN102662967B (zh) | 2012-03-09 | 2012-03-09 | 基于j2ee技术中国联通固网话务分析方案的设计方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102662967B (zh) |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104424198B (zh) * | 2013-08-21 | 2020-06-26 | 腾讯科技（深圳）有限公司 | 一种页面显示速度的获取方法及装置 |
| CN106033458A (zh) * | 2015-03-18 | 2016-10-19 | 中兴通讯股份有限公司 | 一种大数据处理方法、装置及系统 |
| CN106162675A (zh) * | 2015-03-25 | 2016-11-23 | 中兴通讯股份有限公司 | 一种基于来电提醒的数据处理方法、装置及系统 |
| CN108664488B (zh) * | 2017-03-28 | 2020-11-10 | 华为技术有限公司 | 一种话统指标数据的处理方法及装置 |
| CN108874658A (zh) * | 2017-12-25 | 2018-11-23 | 北京安天网络安全技术有限公司 | 一种沙箱分析方法、装置、电子设备及存储介质 |
| CN108829376B (zh) * | 2018-04-11 | 2021-07-30 | 国家电网公司 | 一种基于综合诊断平台的调度主站系统的运行监测系统 |
| JP2021131692A (ja) * | 2020-02-19 | 2021-09-09 | 株式会社日立製作所 | 実績データ管理装置及び業務管理システム |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101583145A (zh) * | 2009-06-09 | 2009-11-18 | 中兴通讯股份有限公司 | 实现大话务下信令跟踪的方法、系统以及客户端装置 |
| CN101707628A (zh) * | 2009-11-13 | 2010-05-12 | 东南大学 | 基于Ajax和J2EE的融合通信系统及其数据传输方法 |
| CN102087597A (zh) * | 2011-02-14 | 2011-06-08 | 浪潮通信信息系统有限公司 | 一种基于j2ee和构件集的可视化开发平台 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060235925A1 (en) * | 2003-04-23 | 2006-10-19 | Mauro Rossotto | Client-server system and method thereof for providing multimedia and interactive services to mobile terminals |
-
2012
- 2012-03-09 CN CN201210060788.6A patent/CN102662967B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101583145A (zh) * | 2009-06-09 | 2009-11-18 | 中兴通讯股份有限公司 | 实现大话务下信令跟踪的方法、系统以及客户端装置 |
| CN101707628A (zh) * | 2009-11-13 | 2010-05-12 | 东南大学 | 基于Ajax和J2EE的融合通信系统及其数据传输方法 |
| CN102087597A (zh) * | 2011-02-14 | 2011-06-08 | 浪潮通信信息系统有限公司 | 一种基于j2ee和构件集的可视化开发平台 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102662967A (zh) | 2012-09-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102662967B (zh) | 基于j2ee技术中国联通固网话务分析方案的设计方法 | |
| Tapaswi et al. | Effects of environmental fluctuation on plankton allelopathy | |
| CN103793489B (zh) | 一种在线社交网络中社群话题的发现方法 | |
| Khodabandelou et al. | Population estimation from mobile network traffic metadata | |
| CN103138981B (zh) | 一种社交网络分析方法和装置 | |
| CN101778180B (zh) | 一种互动式语音应答系统业务节点动态调整控制方法 | |
| CN110121189A (zh) | 一种网络监控方法和装置 | |
| CN111382155B (zh) | 一种数据仓库的数据处理方法、电子设备及介质 | |
| CN112861494A (zh) | 基于路网数据的可视化报表生成方法、设备和存储介质 | |
| CN107276854B (zh) | 一种大数据下molap统计分析的方法 | |
| CN109768878B (zh) | 一种基于大数据的网络工单计算方法及装置 | |
| Alamanos et al. | Urban water demand assessment for sustainable water resources management, under climate change and socioeconomic changes | |
| Zhang et al. | Co-adaptation enhances the resilience of mutualistic networks | |
| CN101330735A (zh) | 用于网络优化的统计数据分析方法 | |
| Woods et al. | Exploring methods for mapping seasonal population changes using mobile phone data | |
| CN115983733B (zh) | 基于水位控制的电力市场出清数据处理方法和装置 | |
| Harrison et al. | Measurement and mapping of avian diversity in southern Africa: implications for conservation planning | |
| CN100488219C (zh) | 一种话务数据采集及分析统计的方法 | |
| Ramesh | Biodiversity conservation and management | |
| McGee | The Sustainability of Extended Urban Spaces in Asia in the Twenty-First Century: Policy and Research Challenges | |
| AU2014386813A1 (en) | Method and system for generating a user activity grid table | |
| Rafiq et al. | Can temperature be used as a predictor of data traffic? A real network big data analysis | |
| CN113626477B (zh) | 基于水厂物联网系统的可配置报表系统及方法 | |
| CN110740070B (zh) | 一种基于多元非线性拟合的智能电网站点带宽估算方法 | |
| Jestl et al. | Migration drivers in carbonintensive regions in the EU |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address |
Address after: 250100 Ji'nan high tech Zone, Shandong, No. 1036 wave road Patentee after: Tianyuan Communication Information System Co., Ltd. Address before: 250101 Shandong Province, Ji'nan City hi tech Development Zone, Nga Road No. 1036 Patentee before: Langchao Communication Information System Co., Ltd. |
|
| CP03 | Change of name, title or address | ||
| CP03 | Change of name, title or address |
Address after: 250100 S06 tower, 1036, Chao Lu Road, hi tech Zone, Ji'nan, Shandong. Patentee after: INSPUR COMMUNICATION AND INFORMATION SYSTEM Co.,Ltd. Address before: No. 1036, Shandong high tech Zone wave road, Ji'nan, Shandong Patentee before: INSPUR TIANYUAN COMMUNICATION INFORMATION SYSTEM Co.,Ltd. |
|
| CP03 | Change of name, title or address |