CN108170864A - 一种外部数据导入申报数据加工处理方法 - Google Patents

Abstract

本发明公开了一种外部数据导入申报数据加工处理方法，上传文件,对文件进行简单校验，JSON格式数据不需做保存Mongo操作,如果是Excel文件或者XML报文，将文件存储到MongoDB，保存失败则终止,保存成功，将文件取出，读取失败则终止,文件读取成功，开始解析，Excel文件的数据处理，XML报文导入的转换，业务独有的需求实现，解析失败阻断流程，返回信息,解析成功，将结果JOSN数据按附表配置过滤，去掉不需显示的附表节点，失败则阻断流程,将更新后的数据模型作为前端申报表单的初始化数据源，重新初始化申报表单数据。本发明多数据格式的统一处理，将公有部分抽象，细化各业务需求，数据格式规范化，将代码量大大降低，节省工作量。

Description

一种外部数据导入申报数据加工处理方法

技术领域

本发明涉及数据导入及处理技术领域，尤其涉及一种外部数据导入申报数据加工处理方法。

背景技术

在财税类系统在线申报表单的填写过程中，会伴随着不同复杂程度的业务计算与校验规则，表间的关联计算与校验，需要用户在操作过程中反复切换附表表单填写数据与更改错误数据。数据导入将外部已填写好的数据经过解析映射成所需的数据格式，初始化到申报表单，用户只需修改少部分错误数据，甚至不需修改就可直接申报。

在现有的技术实现中，导入目标大多为数据库，少数导入申报表单的实现，一般为XML报文导入，导入模板报文即为申报所用报文，直接使用XML报文初始化申报表单。Excel导入则通过控件将Excel转换为XML，再做导入操作。

在财税类系统中，不同的业务有不同的需求，再加上多渠道的数据来源，就会产生多种不同的申报数据格式，导入的数据格式也顺势增多。如果没有统一的规范，将会造成单个业务需求会对应单个代码实现，单个数据格式的导入又需另外实现，导致代码量过大，各个业务的实现也会出现单兵作战情况，需求覆盖非常小，目前的导入数据大多为导入数据库所用，或者业务量较小。所以，对财税类系统来说，有几个缺点：一是在将数据导入映射到前端展示的实现中，兼容性不够强大，无法满足财税类系统在线申报表单的数据导入；二是面对多业务需求多渠道数据来源，还没有抽象的数据处理方法，代码冗余量比较多，导致工作量上升，效率下降；三是没有统一的规范，多渠道数据来源的导入数据格式规范，映射文件的标准规范；四是Excel文件中动态数据在映射文件的配置或者在程序中的处理还没有针对的处理方法，因此，提出了一种外部数据导入申报数据加工处理方法。

发明内容

本发明的目的是为了解决现有技术中存在的缺点，而提出的一种外部数据导入申报数据加工处理方法。

为了实现上述目的，本发明采用了如下技术方案：

1、一种外部数据导入申报数据加工处理方法，包括如下步骤：

S1：上传文件，上传的文件格式为Excel文件、XML和JSON，Excel文件导入：纳税人在上传文件后，前端获取到上传文件；XML导入：首先规范导入的XML格式为金三导入报文的标准；JSON导入：JSON所规定的格式即为申报表单所使用的JSON数据格式，所以不需做转换，可直接作为初始化前端申报表单的数据源；

S2：文件保存，先对文件进行简单校验，如果是Excel文件或者XML报文，将文件存储到MongoDB，保存失败则终止；JSON格式数据不需做保存Mongo操作；

S3：文件解析，文件保存成功，将文件取出，读取失败则终止；文件读取成功，开始解析，Excel文件的数据处理， XML报文导入的转换，业务独有的需求实现，解析失败阻断流程，返回信息，解析成功，将结果JOSN数据按附表配置过滤，去掉不需显示的附表节点，失败则阻断流程；

S4：更新数据模型，将更新后的数据模型作为前端申报表单的初始化数据源，重新初始化申报表单数据，导入成功。

优选的，所述Excel文件的数据处理，按各自业务各自的需求进行处理后，得到最终的申报表单使用的数据模型。

优选的，所述XML业务独有的需求实现，每个业务都有自己的提交核心的VO，其中业务部分和导入报文的业务部分是对应的，将业务报文转换为bean，在处理各自业务的需求时在对象上操作就方便很多，最后将bean转换成JSON，或者不需做处理可直接将XML转成JSON，最终为申报表单所用的数据模型。

优选的，所述JSON只有在需特殊处理时将其转换成对应的bean，再操作处理，最后再转换成JSON。

本发明提供的一种外部数据导入申报数据加工处理方法，有益效果在于：多数据格式的统一处理，将公有部分抽象，细化各业务需求，在新增业务添加导入功能时，只需关心业务独有的需求部分。数据格式规范化,对导入数据格式的规范，转换模板的制作规范，外部系统接入的规范，统一要求，避免新增加业务时产生另外的类似的入口和实现。实现业务覆盖的全面性，抽象共有的实现，可以说涵盖所有申报业务,业务新增导入功能时，只需规范数据格式,将代码量大大降低，节省工作量,对于多数据渠道来源，统一数据格式规范，做到兼容多数据格式导入,Excel导入通过坐标映射数据，导入的数据准确度高。在解析Excel时对数据统一处理，避免单个业务另写实现去处理。

附图说明

图1为本发明提出的一种外部数据导入申报数据加工处理方法的流程框图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合具体实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

一种外部数据导入申报数据加工处理方法，包括如下步骤：

S1：上传文件，上传的文件格式为Excel文件、XML和JSON，Excel文件导入：纳税人在上传文件后，前端获取到上传文件；XML导入：首先规范导入的XML格式为金三导入报文的标准；JSON导入：JSON所规定的格式即为申报表单所使用的JSON数据格式，所以不需做转换，可直接作为初始化前端申报表单的数据源,JSON只有在需特殊处理时将其转换成对应的bean，再操作处理，最后再转换成JSON；

S2：文件保存，先对文件进行简单校验，如果是Excel文件或者XML报文，将文件存储到MongoDB，保存失败则终止；JSON格式数据不需做保存Mongo操作；

S3：文件解析，文件保存成功，将文件取出，读取失败则终止；文件读取成功，开始解析，Excel文件的数据处理，按各自业务各自的需求进行处理后，得到最终的申报表单使用的数据模型，XML报文导入的转换，业务独有的需求实现，XML业务独有的需求实现，每个业务都有自己的提交核心的VO，其中业务部分和导入报文的业务部分是对应的，将业务报文转换为bean，在处理各自业务的需求时在对象上操作就方便很多，最后将bean转换成JSON，或者不需做处理可直接将XML转成JSON，最终为申报表单所用的数据模型，解析失败阻断流程，返回信息，解析成功，将结果JOSN数据按附表配置过滤，去掉不需显示的附表节点，失败则阻断流程；

S4：更新数据模型，将更新后的数据模型作为前端申报表单的初始化数据源，重新初始化申报表单数据，导入成功。

以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (4)

1.一种外部数据导入申报数据加工处理方法，其特征在于：包括如下步骤：

S1：上传文件，上传的文件格式为Excel文件、XML和JSON，Excel文件导入：纳税人在上传文件后，前端获取到上传文件；XML导入：首先规范导入的XML格式为金三导入报文的标准；JSON导入：JSON所规定的格式即为申报表单所使用的JSON数据格式，所以不需做转换，可直接作为初始化前端申报表单的数据源；

S2：文件保存，先对文件进行简单校验，如果是Excel文件或者XML报文，将文件存储到MongoDB，保存失败则终止；JSON格式数据不需做保存Mongo操作；

S3：文件解析，文件保存成功，将文件取出，读取失败则终止；文件读取成功，开始解析，Excel文件的数据处理，XML报文导入的转换，业务独有的需求实现，解析失败阻断流程，返回信息，解析成功，将结果JOSN数据按附表配置过滤，去掉不需显示的附表节点，失败则阻断流程；

S4：更新数据模型，将更新后的数据模型作为前端申报表单的初始化数据源，重新初始化申报表单数据，导入成功。

2.根据权利要求1所述的新型物联网工业云组网的方法，其特征在于，所述Excel文件的数据处理，按各自业务各自的需求进行处理后，得到最终的申报表单使用的数据模型。

3.根据权利要求1所述的新型物联网工业云组网的方法，其特征在于，所述XML业务独有的需求实现，每个业务都有自己的提交核心的VO，其中业务部分和导入报文的业务部分是对应的，将业务报文转换为bean，在处理各自业务的需求时在对象上操作就方便很多，最后将bean转换成JSON，或者不需做处理可直接将XML转成JSON，最终为申报表单所用的数据模型。

4.根据权利要求1所述的新型物联网工业云组网的方法，其特征在于，所述JSON只有在需特殊处理时将其转换成对应的bean，再操作处理，最后再转换成JSON。