CN110991150A - 一种数据格式转换方法、装置及报账系统 - Google Patents

Abstract

本发明公开了一种数据格式转换方法、装置及报账系统，数据格式转换方法包括获取行筛选规则和映射规则；获取待转换格式的第一账单；获取所述第一账单中的行数据对象集合，所述第一账单为待转换格式的电费账单；根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合；根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单。本发明的方案，实现了便捷高效的将格式不统一的供电局电费账单转换为系统支持的统一格式的报账单数据，解决了现有以人工方式将电费账单数据转换成系统报账单数据的业务处理中，出现的工作量巨大且无法保证数据准确性的问题。

Description

一种数据格式转换方法、装置及报账系统

技术领域

本发明涉及计算机技术领域，尤其涉及一种数据格式转换方法、装置及报账系统。

背景技术

在现有报账业务处理中,企业获取对接供电局的电费账单模板的数据格式千差万别，且电费账单中存在相当比例干扰数据，且仅能获取电子图片版本或纸质版本的账单文件，因此主要以人工的方式筛选出正确数据,并手动添加到统一格式的报账单中，以完成数据格式的转换。

现有技术中，以人工进行数据格式转换，将格式不统一的供电局电费账单转换为系统支持的统一格式的报账单数据的转换方式存在工作量巨大且无法保证数据的准确性的问题,只能等到报账检验环节,才能发现错误数据,再返工重新制作报账单数据，导致重复工作量巨大，效率较低。

发明内容

为了解决上述技术问题，本发明提供了一种数据格式转换方法、装置及报账系统，解决了现有以人工方式将电费账单数据转换成系统报账单数据的业务处理中，出现的工作量巨大且无法保证数据准确性，效率较低的问题。

依据本发明的一个方面，提供了一种数据格式转换方法，包括：

获取行筛选规则和映射规则；

获取待转换格式的第一账单，所述第一账单为待转换格式的电费账单；

获取所述第一账单中的行数据对象集合；

根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合；

根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单。

可选的，所述行筛选规则包括以下至少一项：

所述目标数据对应的参照位置，所述参照位置包括以下其中一项：目标数据所在单元格的前一单元格、上一单元格和当前行；

所述参照位置对应的参照数据值；

所述参照位置与所述参照数据值的逻辑关系，所述逻辑关系包括以下其中一项：等于、不等于、包含、不包含、大于和小于；

所述目标数据的格式类型。

可选的，所述映射规则包括：

所述目标数据与目标账单模板中预设字段的映射关系。

可选的，根据所述行筛选规则，获取所述行数据对象集合中的目标数据集合，包括：

判断所述行数据对象集合是否匹配所述行筛选规则；

在所述行数据对象集合与所述行筛选规则匹配时，遍历所述行数据对象集合，根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合。

可选的，获取待转换格式的第一账单，包括：

获取用户输入的账单文件，所述账单文件的格式包括以下任意一种：扫描件、图片和Excel文件；

对所述账单文件进行识别，获取待转换格式的第一账单。

可选的，获取所述第一账单中的行数据对象集合，包括：

判断所述第一账单中是否含有账单数据；

在判断所述第一账单中有账单数据时，获取所述第一账单中的行数据对象集合。

可选的，根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单之后，还包括：

对所述第二账单进行数据校验；

若所述第二账单通过校验，则根据所述第二账单，生成系统支持的报账单文件。

可选的，对所述第二账单进行数据校验包括：

根据业务校验公式，校验所述第二账单并生成校验结果；

显示所述校验结果，并对检验不通过的数据进行标识。

依据本发明的第二个方面，提供了一种数据格式转换装置，包括：

第一获取模块，用于获取行筛选规则和映射规则；

第二获取模块，用于获取待转换格式的第一账单；

第三获取模块，用于获取所述第一账单中的行数据对象集合，所述第一账单为待转换格式的电费账单；

第四获取模块，用于根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合；

转换模块，用于根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单。

依据本发明的第三个方面，提供了一种报账系统，包括如权利要求9所述的数据格式转换装置。

本发明的实施例的有益效果是：

上述方案中，通过获取行筛选规则和映射规则以及待转换格式的第一账单中的行数据对象集合；进一步根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合；根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单。实现了便捷高效的将格式不统一的供电局电费账单转换为系统支持的统一格式的报账单数据，解决了现有以人工方式将电费账单数据转换成系统报账单数据的业务处理中，出现的工作量巨大且无法保证数据准确性的问题。

附图说明

图1表示本发明实施例的数据格式转换方法流程图之一；

图2表示本发明实施例的数据格式转换方法流程图之二；

图3表示本发明实施例的数据格式转换方法流程图之三；

图4表示本发明实施例的数据格式转换装置结构框图之一；

图5表示本发明实施例的电费账单示意图之一；

图6表示本发明实施例的行筛选规则和映射规则配置示意图之一；

图7表示本发明实施例的行筛选规则和映射规则配置示意图之二；

图8表示本发明实施例的行筛选规则和映射规则配置示意图之三；

图9表示本发明实施例的电费账单示意图之二。

具体实施方式

下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。

如图1所示，本发明的实施例提供了一种数据格式转换方法，包括：

步骤11，获取行筛选规则和映射规则；

该实施例中，行筛选规则和映射规则是根据不同模板类型的电费单单独配置的。也即，不同类型的电费账单，对应不同的筛选规则和映射规则。

这里，获取的行筛选规则和映射规则是用户录入的或者系统历史保存的针对待转换的第一账单所配置的行筛选规则和映射规则。

步骤12，获取第一账单，所述第一账单为待转换格式的电费账单；

该实施例中，待转换格式的第一账单包括电费账单数据。

步骤13，获取所述第一账单中的行数据对象集合；

该实施例中，将第一账单中的电费账单数据按照行进行获取，每一行的电费账单数据作为一个数据对象集合，通过行数据对象集合的划分，便于后续利用行筛选规则，提取出行数据对象集合中的目标数据。

步骤14，根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合；

该实施例中，行筛选规则规定了如何从第一账单中选取各目标数据。目标数据为目标账单模板中所需填报的正确数据。可以理解，目标数据可以包括如电费数值、电量数值、户号、电表号、日期以及业主名称等需要在目标账单模板中记载的非干扰类数据的目标数据项。根据获取的行筛选规则，筛选出第一账单中的行数据对象集合中的目标数据的集合，实现了自动在包括很多干扰数据的电费账单数据中，获取到电费账单数据中的目标数据的技术效果，避免了人工筛选数据导致的人力成本巨大且易发生错误的问题。

步骤15，根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单。

该实施例中，所述映射规则包括：所述目标数据与目标账单模板中预设字段的映射关系。通过系统配置映射规则，将筛选出的目标数据分别映射至目标账单模板中的对应数据项位置中，避免了人工手动的方式对目标数据进行复制粘贴的操作，节约了人力成本，提高了准确性。

上述方案，通过系统配置行筛选规则和映射实现了自动筛选目标数据和自动映射，能够批量处理数据格式转换，节省大量重复工作量，大幅减少了人工操作量以及避免了人工操作带来的数据错误率。

在本发明一可选实施例中，所述行筛选规则包括以下至少一项：

所述目标数据对应的参照位置，所述参照位置包括以下其中一项：目标数据所在单元格的前一单元格、上一单元格和当前行；

所述参照位置对应的参照数据值；

所述参照位置与所述参照数据值的逻辑关系，所述逻辑关系包括以下其中一项：等于、不等于、包含、不包含、大于和小于；

所述目标数据的格式类型。

该实施例中，针对第一账单中的各目标数据，分别配置了行筛选规则。可以理解，例如若有10个目标数据，则针对每个目标数据分别设置对应的行筛选规则。其中，根据目标数据的不同类型，可以选择根据目标数据的格式类型在第一账单中进行筛选，格式类型包括但不限于：日期、数字、文本和数字的组合等格式类型。还可以通过遍历第一账单的各单元格，选择目标数据所在单元格的前一单元格、上一单元格或当前行作为参照位置，并配置参照数据值，若参照位置与参照数据值符合筛选规则中配置的逻辑关系，则可以确定出对应的目标数据所在位置，也就获取到了目标数据。其中，参照数据值也即特征值。如，若需要筛选出用电费用的数值，可以将“电费”这一词语作为参照数据值，也即作为特征值。

为了便于理解，以用户编号的编号数值作为待筛选的目标数据进行举例介绍如下：

一般情况下，账单中“用户编号”的字段后面会记载有用户编号的编号数值。可以理解，为筛选出正确的用户编号的具体编号数值，配置的行筛选规则可以包括：以“用户编号”为对应的参照数据值，以“前一单元格”作为参照位置，并配置参照位置“前一单元格”与参照数据值“用户编号”的逻辑关系为“等于”，那么通过遍历第一账单中的各单元格中的账单数据，若筛选出满足“前一单元格”中的内容等于“用户编号”的参照单元格位置，那么就可以确定此参照位置的后一单元格中记录的即为待筛选的目标数据：用户编号的编号数值。

其中，步骤12，包括：

获取用户输入的账单文件，所述账单文件的格式包括以下任意一种：扫描件、图片和Excel文件；

对所述账单文件进行识别，获取待转换格式的第一账单。

该实施例中，用户上传的账单文件形式一般包括扫描件、图片文件或Excel文件，通过光学字符识别(Optical Character Recognition，简称OCR)技术，能够快捷的识别出账单文件中的电费账单(第一账单)。

其中，在账单文件为Excel文件时，可以通过简洁版的模糊实现(PoorObfuscation Implementation，简称POI)技术，解析Excel格式的账单文件，获取第一账单中的行数据对象集合。这里，POI也是Apache POI[1]，是用Java编写的免费开源的跨平台的Java API，Apache POI提供API给Java程式对Microsoft Office格式档案的读和写功能。

其中，步骤13，包括：

判断所述第一账单中是否含有账单数据；

在判断所述第一账单中有账单数据时，获取所述第一账单中的行数据对象集合。

该实施例中，为了保证行筛选出的目标数据的准确性，需要先判断第一账单中是否含账单数据，若确定不含账单数据，则直接对账单数据进行展示。以使用户根据展示的账单确认无账单数据后，重新上传账单文件重新进行识别获取新第一账单。

在本发明一可选实施例中，步骤14，包括：

判断所述行数据对象集合是否匹配所述行筛选规则；

在所述行数据对象集合与所述行筛选规则匹配时，遍历所述行数据对象集合，根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合。

该实施例中，因不同模板格式的电费账单对应配置不同的行筛选规则，筛选规则中也可能包含一致的规则部分，若行数据对象集合与所选用的行筛选规则不匹配，则不能保证目标数据筛选的准确性。因此，为保证目标数据对象的集合准确性，需对行数据对象集合是否匹配所述行筛选规则进行判断。

如图2所示，步骤15之后，还包括：

步骤16，对所述第二账单进行数据校验；

步骤17，若所述第二账单通过校验，则根据所述第二账单，生成系统支持的报账单文件。

该实施例中，通过对生成的第二账单进行校验，保证了第二账单的数据准确性。

其中，步骤16包括：

根据业务校验公式，校验所述第二账单并生成校验结果；

显示所述校验结果，并对检验不通过的数据进行标识。

该实施例中，通过业务校验公式对生成的第二账单进行校验，保证了目标数据正确性，同时也节省返工成本。通过对校验结果进行显示，以使用户明确第二账单的校验情况。

其中，对检验不通过的数据进行标识的方式包括但不限于：高亮显示，和/或，鼠标悬停进行公式提示。便于提示用户且方便用户修正。

下面结合图3对本发明的数据格式转换方法进行介绍。

图3中，数据格式转换方法包括如下步骤：

步骤31，用户录入行筛选规则及映射规则；

其中，行筛选规则及映射规则也可以是应用之前保存的；提供行筛选规则包括某单元格：等于、不等于、包含、不包含、大于、小于、格式为(日期、数字等)；提供映射规则：第几个单元格映射目标模板的某一字段；

步骤32，用户上传供电局电费账单扫描件、图片文件或EXCEL文件；

步骤33，系统识别出的电费账单数据(第一账单)，系统通过OCR识别技术自动识别出电费账单数据；

步骤34，解析电费账单获取账单数据对象集合；

步骤35，判断电费账单中是否有数据；

步骤36，获取电费账单中的行数据对象集合；

步骤37，判断行数据对象集合是否与行筛选及映射规则相匹配；

步骤38，在确定行数据对象集合与行筛选及映射规则相匹配时，根据映射规则转换为系统支持的报账单数据(第二账单)；

步骤39，根据系统中实现的业务校验公式进行数据校验；

步骤310，对报账单数据进行展示；

步骤311，对于未通过检验的数据，用户手动修改；

步骤312，对报账单数据进行保存；

步骤313，生成系统支持的报账单文件或直接在系统中进行报账操作。

其中，作为进一步优化，步骤32中，通过POI技术解析电费账单EXCEL文件；

其中，作为进一步优化，步骤32具体包括：

(a1)、解析源电费账单EXCEL文件，获取行数据对象集合；

(a2)、遍历行数据对象集合，根据行筛选规则，匹配某单元格(例：包含“供电局”)；

(a3)、将(a2)中筛选中的目标数据集合，根据映射规则封装报账单数据；

其中，作为进一步优化，步骤39具体包括：

(b1)、根据系统中实现的业务校验公式对步骤a3生成的报账单数据进行校验；

(b2)、对报账单数据进行展示；

(b3)、步骤(b1)中校验不通过的数据进行高亮显示，鼠标悬停进行公式提示；

其中，作为进一步优化，步骤313具体包括：

(c1)、点击系统显示的“下载”按钮，下载报账单文件；

(c2)、点击系统显示的“应用”按钮，应用报账单数据进行直供电报账等操作。

上述实施例，通过提供可配置的行筛选规则和映射规则，并结合OCR识别处理多种格式供电局电费账单报账，实现了将来源数据格式不统一情况下的数据格式转换成统一目标数据格式的目的，大幅减少人工操作量并降低了数据错误率，提高了业务处理效率。

本发明还提供一种用以实现上述方法的装置。

如图4所示，其示出的是一种数据格式转换装置，装置400包括：

第一获取模块401，用于获取行筛选规则和映射规则；

第二获取模块402，用于获取第一账单，所述第一账单为待转换格式的电费账单；

第三获取模块403，用于获取所述第一账单中的行数据对象集合；

第四获取模块404，用于根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合；

转换模块405，用于根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单。

可选的，所述行筛选规则包括以下至少一项：

所述目标数据对应的参照位置，所述参照位置包括以下其中一项：目标数据所在单元格的前一单元格、上一单元格和当前行；

所述参照位置对应的参照数据值；

所述参照位置与所述参照数据值的逻辑关系，所述逻辑关系包括以下其中一项：等于、不等于、包含、不包含、大于和小于；

所述目标数据的格式类型。

可选的，所述映射规则包括：

所述目标数据与目标账单模板中预设字段的映射关系。

可选的，第四获取模块404，包括：

判断所述行数据对象集合是否匹配所述行筛选规则；

在所述行数据对象集合与所述行筛选规则匹配时，遍历所述行数据对象集合，根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合。

可选的，第二获取模块402，包括：

第一获取子模块，用于获取用户输入的账单文件，所述账单文件的格式包括以下任意一种：扫描件、图片和Excel文件；

第二获取子模块，用于对所述账单文件进行识别，获取待转换格式的第一账单。

可选的，第三获取模块403，包括：

判断子模块，用于判断所述第一账单中是否含有账单数据；

第三获取子模块，用于在判断所述第一账单中有账单数据时，获取所述第一账单中的行数据对象集合。

可选的，所述装置400还包括：

检验模块，用于对所述第二账单进行数据校验；

生成模块，用于若所述第二账单通过校验，则根据所述第二账单，生成系统支持的报账单文件。

可选的，检验模块包括：

检验单元，用于根据业务校验公式，校验所述第二账单并生成校验结果；

显示单元，用于显示所述校验结果，并对检验不通过的数据进行标识。

该装置是与上述方法实施例对应的装置，上述方法实施例中的所有实现方式均适用于该装置的实施例中，也能达到与方法实施例相同的技术效果。

本发明还提供一种报账系统，包括如上所述的数据格式转换装置。

上述实施例中，首先根据电费账单配置行筛选规则和映射规则，然后将手工扫描的电费单图片通过图像识别功能识别到报账系统中，再通过配置行筛选和映射规则获取图片中的数据。如图5所示，其示出的是一个处理的电费账单图片。

进一步，如图6至图8所示，其示出的是报账系统中显示的行筛选规则和映射规则的配置界面示意图。

参见图6至图8，其示出的是图5所示电费账单的行筛选规则和映射规则配置过程，主要包括：

1、在报账系统的规则配置页面配置规则名称和规则明细。

(1)在“规则名称”后面的数据框中定义本条规则的名称。

其中，因每种电费账单对应的行筛选和映射规则不同，这里规则名称可以理解为，为区分不同类型电费账单对应的行筛选规则和映射规则而起的规则名称，如图中的“电费1”和“电表2”。

(2)规则明细配置行的第一个下拉框选择数据的参照位置，参照位置包括如：前一单元格、上一单元格、当前行等。

(3)规则明细配置行中“等于”后面的数据框定义参照数据值(特征值)。

这里以参照位置与参照数据值的逻辑关系为“等于”进行示例性介绍。即参照位置中的数据是否与预先定义的参照数据值相等。

(4)规则明细配置行中“映射为”后面的下拉框选择数据对应用电明细中的数据项。目的是将筛选出的如用户编号映射到目标账单模板的供电用户号对应位置处。

(5)如果参照位置下拉框选择“当前行”，则自动增加“包含”和“包含”对应的输入框。即可以通过“当前行”中包含的“参照数据值”定位出目标数据所在的行，进一步再通过筛选规则，如通过“上一单元格”的“参照数据值”定位出目标数据所在的列，由此即可确认筛选出目标数据。

2、配置完成后点击“保存”按钮保存规则。

3、根据配置好的规则获得图5所示电费账单文件对应转换后的用电明细数据(第二账单)，如图9所示，其示出的是第二账单的示意图。

上述方案，通过系统配置行筛选规则和映射规则，替代了人工筛选数据，显著提升了工作效率、降低了人力成本，通过系统校验保证目标数据的正确性，提升报账成功率。

其中，对于可行性与实施效果：通过系统配置规则自动筛选和映射，批量处理数据格式转换，节省大量重复工作量。通过系统内置业务规则校验，保证目标数据正确性，同时也节省返工成本。

进一步，从未来发展的角度看，应用系统中处理数据转换场景众多，本发明具备可移植特性，以封装独立工具包的形式或提供服务的形式可快速在各系统实现。

以上所述的是本发明的优选实施方式，应当指出对于本技术领域的普通人员来说，在不脱离本发明所述的原理前提下还可以作出若干改进和润饰，这些改进和润饰也在本发明的保护范围内。

Claims (10)

1.一种数据格式转换方法，其特征在于，包括：

获取行筛选规则和映射规则；

获取第一账单，所述第一账单为待转换格式的电费账单；

获取所述第一账单中的行数据对象集合；

根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合；

根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单。

2.根据权利要求1所述的数据格式转换方法，其特征在于，所述行筛选规则包括以下至少一项：

所述目标数据对应的参照位置，所述参照位置包括以下其中一项：目标数据所在单元格的前一单元格、上一单元格和当前行；

所述参照位置对应的参照数据值；

所述参照位置与所述参照数据值的逻辑关系，所述逻辑关系包括以下其中一项：等于、不等于、包含、不包含、大于和小于；

所述目标数据的格式类型。

3.根据权利要求1或2所述的数据格式转换方法，其特征在于，所述映射规则包括：

所述目标数据与目标账单模板中预设字段的映射关系。

4.根据权利要求1或2所述的数据格式转换方法，其特征在于，根据所述行筛选规则，获取所述行数据对象集合中的目标数据集合，包括：

判断所述行数据对象集合是否匹配所述行筛选规则；

在所述行数据对象集合与所述行筛选规则匹配时，遍历所述行数据对象集合，根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合。

5.根据权利要求1所述的数据格式转换方法，其特征在于，获取第一账单，包括：

获取用户输入的账单文件，所述账单文件的格式包括以下任意一种：扫描件、图片和Excel文件；

对所述账单文件进行识别，获取待转换格式的第一账单。

6.根据权利要求1所述的数据格式转换方法，其特征在于，获取所述第一账单中的行数据对象集合，包括：

判断所述第一账单中是否含有账单数据；

在判断所述第一账单中有账单数据时，获取所述第一账单中的行数据对象集合。

7.根据权利要求1所述的数据格式转换方法，其特征在于，根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单之后，还包括：

对所述第二账单进行数据校验；

若所述第二账单通过校验，则根据所述第二账单，生成系统支持的报账单文件。

8.根据权利要求7所述的数据格式转换方法，其特征在于，校验所述第二账单包括：

根据业务校验公式，校验所述第二账单并生成校验结果；

显示所述校验结果，并对检验不通过的数据进行标识。

9.一种数据格式转换装置，其特征在于，包括：

第一获取模块，用于获取行筛选规则和映射规则；

第二获取模块，用于获取第一账单，所述第一账单为待转换格式的电费账单；

第三获取模块，用于获取所述第一账单中的行数据对象集合；

第四获取模块，用于根据所述行筛选规则，确定所述行数据对象集合中的目标数据集合；

转换模块，用于根据所述映射规则，将所述目标数据集合转换为目标账单模板的第二账单。

10.一种报账系统，其特征在于，包括如权利要求9所述的数据格式转换装置。

Images