CN105187682A - 一种批量数据处理方法及系统 - Google Patents

Abstract

本发明涉及一种批量数据处理方法及系统。所述方法包括将待处理的数据按指定格式生成待处理文件；初始化读取批量待处理文件，根据读取的待处理文件生成相应的XML报文；调用与待处理文件类型匹配的接口，通过调用的接口将生产的XML报文发送给后续处理系统进行处理。本发明通过自动化实现用户批量数据处理功能，有效的解决了手工处理接口数据割接的难度，并能够根据快速的响应割接要求，减少出错概率同时屏蔽了操作人员对各系统数据存储的明细信息了解，可以实现“一键式”的批量数据处理。

Description

一种批量数据处理方法及系统

技术领域

本发明涉及电信技术领域，尤其涉及一种批量数据处理方法及系统。

背景技术

目前在移动电信行业CRM系统数据和BOSS(计费)系统的业务受理数据存放于不同的数据库中，CRM业务数据的变化需要通过工单同步的方式同步到BOSS(计费)系统。

针对不同资费开通或关闭，有些将要发送开通或关闭指令到第三方平台，在目前的系统处理中指令发送有独立的平台，需要具体的用户针对具体资费拼写报文调用组件实现指令发送。

一些省份公司为了开展业务会不定期的给批量用户受理资费，或者需要在某段时间内批量发送指令到第三方平台。因批量受理业务的不连续性，前台业务受理生成订单的模式将无法解决这种批量处理数据。

发明内容

本发明所要解决的技术问题是针对现有技术的不足，提供一种批量数据处理方法及系统。

本发明利用NGBOSS的数据同步系统及CRM到服务开通配置系统，在此系统基础上实现数据的同步及工单的重发。

批量资费数据通过制定统一的XML报文，组装对应数据同步报文或工单发送报文，用于从代码侧支撑工单的重发或数据同步。

本发明解决上述技术问题的技术方案如下：一种批量数据处理方法，包括如下步骤：

步骤1，将待处理的数据按指定格式生成待处理文件；

步骤2，初始化读取批量待处理文件，根据读取的待处理文件生成相应的XML报文；

步骤3，调用与待处理文件类型匹配的接口，通过调用的接口将生产的XML报文发送给后续处理系统进行处理。

本发明的有益效果是：本发明通过自动化实现用户批量数据处理功能，有效的解决了手工处理接口数据割接的难度，并能够根据快速的响应割接要求，减少出错概率同时屏蔽了操作人员对各系统数据存储的明细信息了解，可以实现“一键式”的批量数据处理。

在上述技术方案的基础上，本发明还可以做如下改进。

进一步，所述待处理数据包括资费受理数据和工单重发数据。

进一步，当待处理的数据为工单重发数据时，步骤2的具体操作为：

步骤2.1A，初始化读取批量工单数据文件；

步骤2.2A，判断每个用户是否需要发送工单，如果需要,查找用户的资费信息；

步骤2.3A，将用户的资费信息插入对应的历史资费信息表中；

步骤2.4A，从历史资费信息表中查询指令工单需要的参数,根据查询的参数将批量工单数据组装成CRM到服务开通接口的XML报文；

步骤2.5A，根据XML报文调用CRM到服务开通接口，通过调用的CRM到服务开通接口将生产的XML报文发送给后续处理系统进行处理。

采用上述进一步方案的有益效果：可以自动的实现各种业务错误数据的更新及同步，实现BOSS系统CRM数据各库数据统一。

进一步，所述资费信息相关表包括资费信息历史表、服务信息历史表、服务属性信息历史表、服务轨迹信息历史表和服务属性轨迹信息历史表。

进一步，当待处理的数据为资费受理数据时，步骤2的具体操作为：

步骤2.1B，初始化读取批量资费受理数据文件；

步骤2.2B，根据接收的进程入参获取配置的报文模块；

步骤2.3B，将批量资费受理数据按模板方式进行组装，得到相应的XML报文；

步骤2.4B，根据XML报文调用资料落地接口，实现CRM侧数据落地。

进一步，上述技术方案还包括在CRM侧实现数据落地后，调用数据同步接口，将数据同步到BOSS系统。

进一步，上述技术方案还包括根据资费受理数据文件生成工单文件，进行工单文件的发送。

采用上述进一步方案的有益效果：针对已经受理的资费发送对应的工单指令，由代码实现工单的自动发送，无需人工拼写工单。

本发明解决上述技术问题的另一技术方案如下：一种批量数据处理系统，包括文件生成模块、数据处理模块和接口调用模块；

所述文件生成模块，其用于将待处理的数据按指定格式生成待处理文件；

所述数据处理模块，其用于初始化读取批量待处理文件，根据读取的待处理文件生成相应的XML报文；

所述接口调用模块，其用于调用与待处理文件类型匹配的接口，通过调用的接口将生产的XML报文发送给后续处理系统进行处理。

进一步，所述数据处理模块包括工单数据处理模块和资费受理数据处理模。

附图说明

图1为本发明所述一种批量数据处理方法流程图；

图2为本发明所述实施例中工单重发过程示意图；

图3为本发明所述实施例中资费受理数据处理时序图；

图4为本发明所述一种批量数据处理系统框图。

附图中，各标号所代表的部件列表如下：

1、文件生成模块，2、数据处理模块，3、接口调用模块。

具体实施方式

以下结合附图对本发明的原理和特征进行描述，所举实例只用于解释本发明，并非用于限定本发明的范围。

本发明通过Linux与UnixC/C++编程语言，运行环境依赖于UNIX或LINUX系统，基于移动NGBOSS系统实现批量资费受理数据的自动同步以及平台工单的重发。

如图1所示，一种批量数据处理方法，包括如下步骤：

步骤1，将待处理的数据按指定格式生成待处理文件；

步骤2，初始化读取批量待处理文件，根据读取的待处理文件生成相应的XML报文；

步骤3，调用与待处理文件类型匹配的接口，通过调用的接口将生产的XML报文发送给后续处理系统进行处理。

所述待处理数据包括资费受理数据和工单重发数据。

批量业务工单重发

针对生产系统已有用户实现工单重发功能。通过将待发送用户的基本信息及用户对应的服务信息存入到指导目录下，系统读取每个用户的数据，并将该用户的服务信息插入到对应的工单历史表中，完成后调用CRM到服务开通接口完成该用户某个功能的接口数据重发。

生成工单发送实例文件

工单发送文件即要处理的用户工单数据，文件格式如下：

服务号码|服务标识|订购退订标识|操作时间。

实例如下：

15200000000|BS0050|A|20140930。

当待处理的数据为工单重发数据时，步骤2的具体操作为：

步骤2.1A，初始化读取批量工单数据文件；

步骤2.2A，判断每个用户是否需要发送工单，如果需要,查找用户的资费信息；

步骤2.3A，将用户的资费信息插入对应的历史资费信息表中；

步骤2.4A，从历史资费信息表中查询指令工单需要的参数,根据查询的参数将批量工单数据组装成CRM到服务开通接口的XML报文；

步骤2.5A，根据XML报文调用CRM到服务开通接口，通过调用的CRM到服务开通接口将生产的XML报文发送给后续处理系统进行处理。

所述资费信息相关表包括资费信息历史表、服务信息历史表、服务属性信息历史表、服务轨迹信息历史表和服务属性轨迹信息历史表。

如图2所示，读取批量重发文件用于处理需要待发送的工单信息。针对CRM系统资费工单发送为CRM到服务开通系统根据服务+动作从数据库历史表中查询指令工单需要的参数，并拼写XML报文发送给对应的服务开通接口有后续系统负责处理发送工单。因CRM到服务开通的指令发送工单数据取值从历史表获取数据，因此在工单重发进程中，将该用户对应的资费信息插入一次相应的历史表数据并调用CRM到服务开通接口提供的接口，便可以实现服务工单的重发功能。

批量资费受理

目前各移动省份或集团公司会自动给用户订购某些资费或变更对应资费信息，需要将新增或变更的资费数据入到对应的数据库中。传统的手工处理方式，容易产生错误并且各系统均需要人工干预，容易造成错误。并需要对系统表结构很熟悉的后台开发人员才可以执行操作，为了减少数据割接的难度及减少错误，操作人员只需要将用户及新增的资费信息，放入对应的资费割接目录，将实现数据自动生成及同步到各对应的生产库。

生成需要受理资费的批量用户文件

将需要处理某种资费的数据按指定格式生成文件，文件内容如下：

服务号码|资费标识|资费生效时间|资费失效时间|操作类型|属性标识1～属性标识2|属性值1～属性值2。

实例如下：

15200000000|PIBP0020|20140101000000|20991231235959|A||。

当待处理的数据为资费受理数据时，步骤2的具体操作为：

步骤2.1B，初始化读取批量资费受理数据文件；

步骤2.2B，根据接收的进程入参获取配置的报文模块；

步骤2.3B，将批量资费受理数据按模板方式进行组装，得到相应的XML报文；

步骤2.4B，根据XML报文调用资料落地接口，实现CRM侧数据落地。

上述技术方案还包括在CRM侧实现数据落地后，调用数据同步接口，将数据同步到BOSS系统。

上述技术方案还包括根据资费受理数据文件生成工单文件，进行工单文件的发送。

如图3所示，批量资费受理进程用于利用进程方式实现用户资费的快速受理，并根据配置实现是否发送工单，是否给用户下发短信，同时将受理的资费实例数据同步到BOSS库。

NGBOSS系统中业务资费受理是通过订单的方式将资费信息数据落地，工单发送，数据同步；因批量业务数据量大实时性要求相对较高，将不采用订单的方式实现。

批量资费受理进程读取待处理的批量用户文件，判断该用户所做的资费操作类型，从数据库中读取该类型的XML报文拼装模板，建该用户实例数据转化为实例数据后，调用资料落地接口实现CRM数据库的落地，完成后调用数据同步接口实现BOSS数据的同步，并根据配置标识实现是否发送工单，如果需要发送工单则生成批量工单发送文件，由批量工单处理进程最后统一发送工单。

一种批量数据处理系统，包括文件生成模块1、数据处理模块2和接口调用模块3；所述文件生成模块1，其用于将待处理的数据按指定格式生成待处理文件；所述数据处理模块2，其用于初始化读取批量待处理文件，根据读取的待处理文件生成相应的XML报文；所述接口调用模块3，其用于调用与待处理文件类型匹配的接口，通过调用的接口将生产的XML报文发送给后续处理系统进行处理。

所述数据处理模块2包括工单数据处理模块和资费受理数据处理模。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (9)

1.一种批量数据处理方法，其特征在于，包括如下步骤：

步骤1，将待处理的数据按指定格式生成待处理文件；

步骤2，初始化读取批量待处理文件，根据读取的待处理文件生成相应的XML报文；

步骤3，调用与待处理文件类型匹配的接口，通过调用的接口将生产的XML报文发送给后续处理系统进行处理。

2.根据权利要求1所述一种批量数据处理方法，其特征在于，所述待处理数据包括资费受理数据和工单重发数据。

3.根据权利要求2所述一种批量数据处理方法，其特征在于，当待处理的数据为工单重发数据时，步骤2的具体操作为：

步骤2.1A，初始化读取批量工单数据文件；

步骤2.2A，判断每个用户是否需要发送工单，如果需要,查找用户的资费信息；

步骤2.3A，将用户的资费信息插入对应的历史资费信息表中；

步骤2.4A，从历史资费信息表中查询指令工单需要的参数,根据查询的参数将批量工单数据组装成CRM到服务开通接口的XML报文；

步骤2.5A，根据XML报文调用CRM到服务开通接口，通过调用的CRM到服务开通接口将生产的XML报文发送给后续处理系统进行处理。

4.根据权利要求3所述一种批量数据处理方法，其特征在于，所述资费信息相关表包括资费信息历史表、服务信息历史表、服务属性信息历史表、服务轨迹信息历史表和服务属性轨迹信息历史表。

5.根据权利要求2所述一种批量数据处理方法，其特征在于，当待处理的数据为资费受理数据时，步骤2的具体操作为：

步骤2.1B，初始化读取批量资费受理数据文件；

步骤2.2B，根据接收的进程入参获取配置的报文模块；

步骤2.3B，将批量资费受理数据按模板方式进行组装，得到相应的XML报文；

步骤2.4B，根据XML报文调用资料落地接口，实现CRM侧数据落地。

6.根据权利要求5所述一种批量数据处理方法，其特征在于，还包括在CRM侧实现数据落地后，调用数据同步接口，将数据同步到BOSS系统。

7.根据权利要求5所述一种批量数据处理方法，其特征在于，还包括根据资费受理数据文件生成工单文件，进行工单文件的发送。

8.一种批量数据处理系统，其特征在于，包括文件生成模块、数据处理模块和接口调用模块；

所述文件生成模块，其用于将待处理的数据按指定格式生成待处理文件；

所述数据处理模块，其用于初始化读取批量待处理文件，根据读取的待处理文件生成相应的XML报文；

所述接口调用模块，其用于调用与待处理文件类型匹配的接口，通过调用的接口将生产的XML报文发送给后续处理系统进行处理。

9.根据权利要求5所述一种批量数据处理系统，其特征在于，所述数据处理模块包括工单数据处理模块和资费受理数据处理模块。