CN118093525A - 文件处理方法、装置、设备、介质和程序产品 - Google Patents

Abstract

本公开提供了一种文件处理方法、装置、设备、介质和程序产品，可以应用于大数据、金融科技技术领域，该方法包括：基于多个待处理文件和目标文件标准信息，确定文件处理任务，其中，文件处理任务包括用于处理多个待处理文件生成目标文件的任务，目标文件标准信息用于指示目标文件的文件标准；基于文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，其中，文件处理任务包括多个文件处理子任务，每个数据处理子逻辑用于执行一个文件处理子任务；基于多个文件处理子任务的任务处理顺序，将多个数据处理子逻辑进行排列，得到目标数据处理逻辑；以及利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件。

Description

文件处理方法、装置、设备、介质和程序产品

技术领域

本公开涉及大数据、金融科技技术领域，具体地涉及一种文件处理方法、装置、设备、介质和程序产品。

背景技术

随着计算机技术的发展，应用服务的精细化程度提高，存在同一个服务内部拆分为多个子服务的情况，因此现有应用的接口数量也越来越多。与多个接口相对应的多个接口文件存在内容不统一或者没有整合等问题。现有技术中，通常通过人工进行接口文件的数据统计。

在实施本公开的过程中，发明人发现，现有技术需要消耗大量人力成本，并且在利用人工进行数据统计的过程中，容易因数据量过大而导致统计错误，影响数据统计的效果。

发明内容

鉴于上述问题，本公开提供了文件处理方法、装置、设备、介质和程序产品。

根据本公开的第一个方面，提供了一种文件处理方法，包括：基于多个待处理文件和目标文件标准信息，确定文件处理任务，其中，文件处理任务包括用于处理多个待处理文件生成目标文件的任务，目标文件标准信息用于指示目标文件的文件标准；基于文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，其中，文件处理任务包括多个文件处理子任务，每个数据处理子逻辑用于执行一个文件处理子任务；基于多个文件处理子任务的任务处理顺序，将多个数据处理子逻辑进行排列，得到目标数据处理逻辑；以及利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件。

根据本公开的实施例，基于多个待处理文件和目标文件标准信息，确定文件处理任务，包括：确定多个待处理文件各自的文件数据；基于文件数据和目标文件标准信息，确定多个待处理文件各自的待处理项；以及根据多个待处理项，确定文件处理任务。

根据本公开的实施例，基于文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，包括：基于多个待处理项，确定文件处理任务包括的多个文件处理子任务；以及基于每个文件处理子任务，从预设数据处理逻辑库中选择与文件处理子任务对应的数据处理子逻辑。

根据本公开的实施例，文件处理方法还包括：确定多个文件处理子任务各自的预设优先级和任务类别；将数据修改类别的多个文件处理子任务按照预设优先级的顺序排列，得到目标文件修改任务；将数据统计类别的多个文件处理子任务按照预设优先级的顺序排列，得到目标文件统计任务；以及按照预设优先级将目标文件修改任务和目标文件统计任务进行排列，得到多个文件处理子任务的任务处理顺序。

根据本公开的实施例，数据修改类别包括以下至少一个任务子类别：字段拆分子类别、字典项转换子类别和格式转换子类别；将数据修改类别的多个文件处理子任务按照预设优先级的顺序排列，得到目标文件修改任务，包括：确定数据修改类别的多个文件处理子任务各自的任务子类别；按照多个任务子类别各自的预设优先级的顺序，对多个文件处理子任务进行排序，得到目标文件修改任务。

根据本公开的实施例，利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件，包括：利用目标数据修改逻辑，对多个待处理文件的文件数据进行修改，得到修改后的文件数据；利用目标数据统计逻辑，对修改后的文件数据进行统计，得到统计后的文件数据；以及根据修改后的文件数据和统计后的文件数据，生成目标文件。

根据本公开的实施例，在执行利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件之前，方法还包括：将多个待处理文件的文件数据存储至动态数组中。

本公开的第二方面提供了一种文件处理装置，包括：

任务确定模块，用于基于多个待处理文件和目标文件标准信息，确定文件处理任务，其中，文件处理任务包括用于处理多个待处理文件生成目标文件的任务，目标文件标准信息用于指示目标文件的文件标准；

逻辑选择模块，用于基于文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，其中，文件处理任务包括多个文件处理子任务，每个数据处理子逻辑用于执行一个文件处理子任务；

逻辑确定模块，用于基于多个文件处理子任务的任务处理顺序，将多个数据处理子逻辑进行排列，得到目标数据处理逻辑；以及

文件处理模块，用于利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件。

本公开的第三方面提供了一种电子设备，包括：一个或多个处理器；存储器，用于存储一个或多个程序，其中，当所述一个或多个程序被所述一个或多个处理器执行时，使得一个或多个处理器执行上述文件处理方法。

本公开的第四方面还提供了一种计算机可读存储介质，其上存储有可执行指令，该指令被处理器执行时使处理器执行上述文件处理方法。

本公开的第五方面还提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述文件处理方法。

根据本公开的实施例，基于多个待处理文件和目标文件标准信息，自动化地确定文件处理任务，并确定用于解决文件处理任务的多个数据处理子逻辑，基于文件处理任务中多个文件处理子任务的任务处理顺序，以及数据处理子逻辑与文件处理子任务的对应关系，将多个数据处理子逻辑进行排列得到目标数据处理逻辑。利用目标数据处理逻辑自动化地处理多个待处理文件，能够减少人力成本，提高文件处理准确率。此外，通过根据数据处理子逻辑与文件处理子任务的对应关系，从预设数据处理逻辑库中确定用于解决文件处理任务的多个数据处理子逻辑，从而提高了多个数据处理子逻辑的复用率，灵活组合以确定目标数据处理逻辑，简化了文件处理的复杂性，提高了文件处理效率。

附图说明

通过以下参照附图对本公开实施例的描述，本公开的上述内容以及其他目的、特征和优点将更为清楚，在附图中：

图1示意性示出了根据本公开实施例的文件处理方法、装置、设备、介质和程序产品的应用场景图；

图2示意性示出了根据本公开实施例的文件处理方法的流程图；

图3A示意性示出了根据本公开实施例的文件处理方法的待处理文件的示意图；

图3B示意性示出了根据本公开实施例的文件处理方法的目标文件的示意图；

图4示意性示出了根据本公开实施例的文件处理装置的结构框图；以及

图5示意性示出了根据本公开实施例的适于实现文件处理方法的电子设备的方框图。

具体实施方式

以下，将参照附图来描述本公开的实施例。但是应该理解，这些描述只是示例性的，而并非要限制本公开的范围。在下面的详细描述中，为便于解释，阐述了许多具体的细节以提供对本公开实施例的全面理解。然而，明显地，一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本公开的概念。

在此使用的术语仅仅是为了描述具体实施例，而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在，但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。

在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义，除非另外定义。应注意，这里使用的术语应解释为具有与本说明书的上下文相一致的含义，而不应以理想化或过于刻板的方式来解释。

在使用类似于“A、B和C等中至少一个”这样的表述的情况下，一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如，“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。

在本发明的技术方案中，所涉及的用户信息(包括但不限于用户个人信息、用户图像信息、用户设备信息，例如位置信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据，并且相关数据的收集、存储、使用、加工、传输、提供、公开和应用等处理，均遵守相关法律法规和标准，采取了必要保密措施，不违背公序良俗，并提供有相应的操作入口，供用户选择授权或者拒绝。

在利用个人信息进行自动化决策的场景下，本发明实施例提供的方法、设备和系统均为用户提供相应的操作入口，供用户选择同意或者拒绝自动化决策结果；若用户选择拒绝，则进入专家决策流程。此处的表述“自动化决策”是指通过计算机程序自动分析、评估个人的行为习惯、兴趣爱好或者经济、健康、信用状况等，并进行决策的活动。此处的表述“专家决策”是指专门从事某一领域的工作、具有专门的经验、知识和技能并达到一定的专业水平的人员进行决策的活动。

针对现有技术存在的问题，可以通过人工对文档进行分析，确定需要对待处理文件进行的处理方式，并由计算机对文档进行自动化处理。这种方式虽然减少了人工处理数据过程中可能导致的数据错误问题，但仍需人工进行文档分析，因此同样需要消耗大量人力成本。此外，通过分析文档确定的处理方式通常只能应用于本次文档处理，难以重复利用，处理效率不高。

本公开的实施例提供了一种文件处理方法，包括：基于多个待处理文件和目标文件标准信息，确定文件处理任务，其中，文件处理任务包括用于处理多个待处理文件生成目标文件的任务，目标文件标准信息用于指示目标文件的文件标准；基于文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，其中，文件处理任务包括多个文件处理子任务，每个数据处理子逻辑用于执行一个文件处理子任务；基于多个文件处理子任务的任务处理顺序，将多个数据处理子逻辑进行排列，得到目标数据处理逻辑；以及利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件。

图1示意性示出了根据本公开实施例的文件处理方法、装置、设备、介质和程序产品的应用场景图。

如图1所示，根据该实施例的应用场景100可以包括终端设备101、102、103、网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用，例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。

终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。

服务器105可以是提供各种服务的服务器，例如对用户利用终端设备101、102、103所浏览的网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的用户请求等数据进行分析等处理，并将处理结果(例如根据用户请求获取或生成的网页、信息、或数据等)反馈给终端设备。

需要说明的是，本公开实施例所提供的文件处理方法一般可以由服务器105执行。相应地，本公开实施例所提供的文件处理装置一般可以设置于服务器105中。本公开实施例所提供的文件处理方法也可以由不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群执行。相应地，本公开实施例所提供的文件处理装置也可以设置于不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群中。

应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。

以下将基于图1描述的场景，通过图2、图3A、图3B对公开实施例的文件处理方法进行详细描述。

图2示意性示出了根据本公开实施例的文件处理方法的流程图。

如图2所示，该实施例的文件处理方法包括操作S210～操作S240。

在操作S210，基于多个待处理文件和目标文件标准信息，确定文件处理任务，其中，文件处理任务包括用于处理多个待处理文件生成目标文件的任务，目标文件标准信息用于指示目标文件的文件标准。

在操作S220，基于文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，其中，文件处理任务包括多个文件处理子任务，每个数据处理子逻辑用于执行一个文件处理子任务。

在操作S230，基于多个文件处理子任务的任务处理顺序，将多个数据处理子逻辑进行排列，得到目标数据处理逻辑。

在操作S240，利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件。

根据本公开的实施例，系统中存在多个文件，基于用户发出的文件处理请求，确定需要进行文件处理的多个待处理文件，并确定目标文件标准信息，目标文件标准信息可以基于文件处理请求实时生成，还可以在系统中预先存储多个文件标准信息，基于文件处理请求从多个文件标准信息中确定目标文件标准信息。

根据本公开的实施例，待处理文件的文件格式可以是表格文件，后缀名可以包括.xls、.xlsx、.csv、.xlsm等，目标文件标准信息包括目标文件的文件格式，文件格式包括目标文件的表头格式等。

根据本公开的实施例，基于多个待处理文件和目标文件标准信息，确定将多个待处理文件按照目标文件标准信息整合成目标文件的过程中，对多个待处理文件中的数据各自需要进行的操作，从而确定文件处理任务。

根据本公开的实施例，基于文件处理任务中包括的对多个待处理文件中的数据各自需要进行的操作，确定多个文件处理子任务，根据文件处理子任务与数据处理子逻辑的对应关系，从预设数据处理逻辑库中确定多个文件处理子任务各自对应的数据处理子逻辑。

根据本公开的实施例，文件处理任务包括多个文件处理子任务的任务处理顺序，根据数据处理子逻辑与文件处理子任务的对应关系，将多个数据处理子逻辑按照多个文件处理子任务的顺序进行排列，得到目标数据处理逻辑。

根据本公开的实施例，利用目标数据处理逻辑，对多个待处理文件进行处理后合并，得到目标文件，其中，目标文件的文件内容包括多个待处理文件各自的文件内容，目标文件的表头格式符合目标文件标准信息。

根据本公开的实施例，基于多个待处理文件和目标文件标准信息，自动化地确定文件处理任务，并确定用于解决文件处理任务的多个数据处理子逻辑，基于文件处理任务中多个文件处理子任务的任务处理顺序，以及数据处理子逻辑与文件处理子任务的对应关系，将多个数据处理子逻辑进行排列得到目标数据处理逻辑。利用目标数据处理逻辑自动化地处理多个待处理文件，能够减少人力成本，提高文件处理准确率。此外，通过根据数据处理子逻辑与文件处理子任务的对应关系，从预设数据处理逻辑库中确定用于解决文件处理任务的多个数据处理子逻辑，从而提高了多个数据处理子逻辑的复用率，灵活组合以确定目标数据处理逻辑，简化了文件处理的复杂性，提高了文件处理效率。

根据本公开的实施例，基于多个待处理文件和目标文件标准信息，确定文件处理任务，包括：确定多个待处理文件各自的文件数据；基于文件数据和目标文件标准信息，确定多个待处理文件各自的待处理项；以及根据多个待处理项，确定文件处理任务。

根据本公开的实施例，读取多个待处理文件，确定多个待处理文件各自的文件数据，文件数据中包括多个待处理文件各自的表头格式。将文件数据和目标文件标准信息进行比对，确定多个待处理文件的表头格式与目标文件的表头格式之间的多个区别，将每个区别作为一个待处理项。根据多个待处理项，确定需要对多个待处理文件进行的文件处理操作，即文件处理任务。

根据本公开的实施例，文件处理任务还可以根据以下方法确定：根据基础项和多个待处理项，确定文件处理任务，其中，对于所有目标文件标准信息，都需要进行的处理为基础项。例如，对多个待处理文件的文件内容进行重复项统计，在目标文件中删除多余重复项，使得每种重复项只出现一次。

根据本公开的实施例，通过比对待处理文件各自的文件数据以及目标文件标准信息，确定多个待处理项，从而确定文件处理任务，能够根据多个待处理文件和目标文件标准信息，自动化地确定文件处理任务，避免了人工进行文件处理任务制定过程中导致的人工成本，并且与人工进行文件处理任务制定相比，自动化进行文件处理任务的确定效率更高，准确性更高。

根据本公开的实施例，基于文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，包括：基于多个待处理项，确定文件处理任务包括的多个文件处理子任务；以及基于每个文件处理子任务，从预设数据处理逻辑库中选择与文件处理子任务对应的数据处理子逻辑。

根据本公开的实施例，每个待处理项用于表征需要对待处理文件进行的一个处理操作，文件处理任务包括多个文件处理子任务，其中，每个文件处理子任务与需要对待处理文件进行的一个处理操作，因此，文件处理子任务与待处理项存在一一对应的关系。

根据本公开的实施例，基于文件处理任务的多个待处理项，确定与多个待处理项对应的多个文件处理子任务，基于每个文件处理子任务，从预设数据处理逻辑库中选择与文件处理子任务对应的数据处理子逻辑，以确定多个数据处理子逻辑。

根据本公开的实施例，基于待处理项与文件处理子任务的对应关系，确定与多个待处理项对应的多个文件处理子任务，并基于文件处理子任务与数据处理子逻辑的对应关系，确定与多个文件处理子任务对应的多个数据处理子逻辑，从而确保从预设数据处理逻辑库中选择的多个数据处理子逻辑能够用于执行多个待处理项，又由于上述操作能够自动化进行，因此能够减少人为确定数据处理逻辑时带来的人力成本，并且提高数据处理逻辑的准确率，提高效率。

根据本公开的实施例，文件处理方法还包括：确定多个文件处理子任务各自的预设优先级和任务类别；将数据修改类别的多个文件处理子任务按照预设优先级的顺序排列，得到目标文件修改任务；将数据统计类别的多个文件处理子任务按照预设优先级的顺序排列，得到目标文件统计任务；以及按照预设优先级将目标文件修改任务和目标文件统计任务进行排列，得到多个文件处理子任务的任务处理顺序。

根据本公开的实施例，文件处理系统中包括多个文件处理子任务，其中，每个文件处理子任务的预设优先级和任务类别可以预先设置，其中，任务类别包括数据修改类别和数据统计类别，其中，数据修改类别的文件处理子任务的优先级高于数据统计类别的文件处理子任务的优先级。

根据本公开的实施例，根据系统中预先存储的每个文件处理子任务的预设优先级和任务类别，确定多个文件处理子任务各自的预设优先级和任务类别。将数据修改类别的多个文件处理子任务按照预设优先级进行排列，得到目标文件修改任务，将数据统计类别的多个文件处理子任务按照预设优先级进行排列，得到目标文件统计任务。由于数据修改类别的文件处理子任务的优先级高于数据统计类别的文件处理子任务的优先级，因此，目标文件修改任务的优先级高于目标文件统计任务的优先级，将目标文件修改任务设置于目标文件统计任务之前，得到多个文件处理子任务的任务处理顺序。

根据本公开的实施例，根据多个文件处理子任务各自的预设优先级和任务类别，对多个文件处理子任务进行排列，得到多个文件处理子任务的任务处理顺序，通过确保多个文件处理子任务按照预设顺序执行，避免由于顺序混乱导致处理出错，从而影响目标文件的文件内容的正确性，因此能够提高文件处理的准确性。

根据本公开的实施例，数据修改类别包括以下至少一个任务子类别：字段拆分子类别、字典项转换子类别和格式转换子类别；将数据修改类别的多个文件处理子任务按照预设优先级的顺序排列，得到目标文件修改任务，包括：确定数据修改类别的多个文件处理子任务各自的任务子类别；按照多个任务子类别各自的预设优先级的顺序，对多个文件处理子任务进行排序，得到目标文件修改任务。

根据本公开的实施例，数据修改类别的文件处理子任务包括多个任务子类别的文件处理子任务，其中，任务子类别包括字段拆分子类别、字典项转换子类别和格式转换子类别，其中，字段拆分子类别的文件处理子任务的优先级最高，格式转换子类别的文件处理子任务的优先级最低。确定数据修改类别的多个文件处理子任务各自的任务子类别，按照多个任务子类别各自的预设优先级的顺序，对多个文件处理子任务进行排序，得到目标文件修改任务。

根据本公开的实施例，通过对修改类别的多个文件处理子任务进行排列，确保对文件数据的修改正确进行，避免由于文件处理子任务错误导致的错误修改，提高文件处理的准确性。

根据本公开的实施例，利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件，包括：利用目标数据修改逻辑，对多个待处理文件的文件数据进行修改，得到修改后的文件数据；利用目标数据统计逻辑，对修改后的文件数据进行统计，得到统计后的文件数据；以及根据修改后的文件数据和统计后的文件数据，生成目标文件。

根据本公开的实施例，目标数据处理逻辑包括目标数据修改逻辑和目标数据统计逻辑，其中，将多个数据处理子逻辑按照与目标文件修改任务中的多个文件处理子任务的对应关系进行排列，可以得到目标数据修改逻辑，将多个数据处理子逻辑按照与目标文件统计任务重的多个文件处理子任务的对应关系进行排列，可以得到目标数据统计逻辑。

根据本公开的实施例，利用目标数据修改逻辑，对多个待处理文件的文件数据进行修改，得到修改后的文件数据。利用目标数据统计逻辑，对修改后的文件数据进行统计，得到统计后的文件数据。将统计后的文件数据添加至修改后的文件数据中，得到处理后的文件数据，基于处理后的文件数据，生成目标文件。

根据本公开的实施例，通过先对数据进行修改，再对修改后的文件数据进行统计，能够避免由于对未修改的数据进行统计导致的统计数据出错，确保统计结果的准确性，。

根据本公开的实施例，在确定任务子类别为字段拆分子类别的情况下，确定字段拆分的待拆分字段以及与其对应的多个拆分目标，将多个待处理文件的文件内容中的待拆分字段拆分为多个拆分目标，得到拆分结果；在确定任务子类别为字典项转换子类别的情况下，确定多个待处理文件的文件内容中的占位符和与占位符对应的替换字段，将拆分结果中的占位符替换为与占位符对应的替换字段，得到替换结果；在确定任务子类别为格式转换子类别的情况下，确定多个待处理文件的文件内容中的待转换字段和目标格式，将替换结果中的待转换字段的格式转换为目标格式的字段，得到修改后的文件数据。

根据本公开的实施例，数据统计类别包括以下任务子类别：重复项统计类别和预设字段统计类别。在确定任务子类别为重复项统计类别的情况下，确定多个待处理文件的文件数据中的重复项，其中，文件数据中完全相同的两行数据为重复项，确定多个重复项各自的重复次数，并将重复项进行折叠，使得重复项在修改后的文件数据中只占用一行；在确定任务子类别为预设字段统计类别的情况下，确定需要统计的预设字段，确定文件数据中预设字段的出现次数；基于重复次数和出现次数，确定统计后的文件数据。

图3A示意性示出了根据本公开实施例的文件处理方法的待处理文件的示意图。

如图3A所示，该文件处理方法的待处理文件包括待处理文件A和待处理文件B，其中，待处理文件A和待处理文件B各包括3行数据，待处理文件A的第三行数据和待处理文件B的第二行数据相同。

根据本公开的实施例，利用文件处理方法对待处理文件A和待处理文件B进行处理，包括字段拆分子类别的数据处理子逻辑、字典项转换子类别的数据处理子逻辑和格式转换子类别的数据处理子逻辑，其中，字段拆分子类别的数据处理子逻辑用于将三级-四级名称拆分为三级名称和四级名称，字典项转换子类别的数据处理子逻辑用于将“服务A”替换为“公共服务”，将“服务B”替换为“企业服务”，格式转换子类别的数据处理子逻辑用于将“时间”列的内容由文本格式转换为date格式。

根据本公开的实施例，经过目标数据修改逻辑，对多个待处理文件的文件数据进行修改，得到修改后的文件数据后，利用目标数据统计逻辑，对修改后的文件数据进行统计，得到统计后的文件数据，其中，目标数据统计逻辑包括重复项统计类别的数据处理子逻辑，确定待处理文件A的第三行数据和待处理文件B的第二行数据相同，为重复项，重复次数为2。将统计后的文件数据添加至修改后的文件数据中，得到处理后的文件数据，基于处理后的文件数据，生成如图3B所示的目标文件。

图3B示意性示出了根据本公开实施例的文件处理方法的目标文件的示意图。

如图3B所示，该文件处理方法的目标文件包括五行数据，其中，包括待处理文件A和待处理文件B未重复的四行数据以及重复项，其中，重复项在目标文件中保留一个，并通过重复次数表征该重复项在多个待处理文件中的重复次数。

根据本公开的实施例，在执行利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件之前，文件处理方法还包括：将多个待处理文件的文件数据存储至动态数组中。

根据本公开的实施例，将多个待处理文件的文件数据存储至动态数组中，在动态数组中对文件数据进行处理，得到修改后的文件数据和统计后的文件数据。基于目标文件标准信息，创建与目标文件标准信息中包括的表头格式相同的标准文件。将统计后的文件数据添加至修改后的文件数据中，得到处理后的文件数据，并将动态数组中的数据导出至标准文件，得到目标文件。

根据本公开的实施例，通过动态数组，对待处理文件的文件数据进行导入、处理和导出，以确定目标文件，能够减少中间文件的创建，减少文件处理过程中对存储空间的依赖。

基于上述文件处理方法，本公开还提供了一种文件处理装置。以下将结合图4对该装置进行详细描述。

图4示意性示出了根据本公开实施例的文件处理装置的结构框图。

如图4所示，该实施例的文件处理装置400包括任务确定模块410、逻辑选择模块420、逻辑确定模块430和文件处理模块440。

任务确定模块410用于基于多个待处理文件和目标文件标准信息，确定文件处理任务，其中，文件处理任务包括用于处理多个待处理文件生成目标文件的任务，目标文件标准信息用于指示目标文件的文件标准。在一实施例中，任务确定模块410可以用于执行前文描述的操作S210，在此不再赘述。

逻辑选择模块420用于基于文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，其中，文件处理任务包括多个文件处理子任务，每个数据处理子逻辑用于执行一个文件处理子任务。在一实施例中，逻辑选择模块420可以用于执行前文描述的操作S220，在此不再赘述。

逻辑确定模块430用于基于多个文件处理子任务的任务处理顺序，将多个数据处理子逻辑进行排列，得到目标数据处理逻辑。在一实施例中，逻辑确定模块430可以用于执行前文描述的操作S230，在此不再赘述。

文件处理模块440用于利用目标数据处理逻辑，对多个待处理文件进行处理，得到目标文件。在一实施例中，文件处理模块440可以用于执行前文描述的操作S240，在此不再赘述。

根据本公开的实施例，任务确定模块410包括数据确定单元、待处理项确定单元和任务确定单元。

数据确定单元，用于确定多个待处理文件各自的文件数据。

待处理项确定单元，用于基于文件数据和目标文件标准信息，确定多个待处理文件各自的待处理项。

任务确定单元，用于根据多个待处理项，确定文件处理任务。

根据本公开的实施例，逻辑选择模块420包括子任务确定单元和子逻辑选择单元。

子任务确定单元，用于基于多个待处理项，确定文件处理任务包括的多个文件处理子任务。

子逻辑选择单元，用于基于每个文件处理子任务，从预设数据处理逻辑库中选择与文件处理子任务对应的数据处理子逻辑。

根据本公开的实施例，文件处理装置400还包括类别确定模块、修改任务排列模块、统计任务排列模块和任务排列模块。

类别确定模块，用于确定多个文件处理子任务各自的预设优先级和任务类别。

修改任务排列模块，用于将数据修改类别的多个文件处理子任务按照预设优先级的顺序排列，得到目标文件修改任务。

统计任务排列模块，用于将数据统计类别的多个文件处理子任务按照预设优先级的顺序排列，得到目标文件统计任务。

任务排列模块，用于按照预设优先级将目标文件修改任务和目标文件统计任务进行排列，得到多个文件处理子任务的任务处理顺序。

根据本公开的实施例，数据修改类别包括以下至少一个任务子类别：字段拆分子类别、字典项转换子类别和格式转换子类别；修改任务排列模块包括子类别确定单元和子任务排序单元。

子类别确定单元，用于确定数据修改类别的多个文件处理子任务各自的任务子类别。

子任务排序单元，用于按照多个任务子类别各自的预设优先级的顺序，对多个文件处理子任务进行排序，得到目标文件修改任务。

根据本公开的实施例，文件处理模块440包括数据修改单元、数据统计单元和文件生成单元。

数据修改单元，用于利用目标数据修改逻辑，对多个待处理文件的文件数据进行修改，得到修改后的文件数据。

数据统计单元，用于利用目标数据统计逻辑，对修改后的文件数据进行统计，得到统计后的文件数据。

文件生成单元，用于根据修改后的文件数据和统计后的文件数据，生成目标文件。

根据本公开的实施例，文件处理装置400还包括数据存储模块。

数据存储模块，用于将多个待处理文件的文件数据存储至动态数组中。

根据本公开的实施例，任务确定模块410、逻辑选择模块420、逻辑确定模块430和文件处理模块440中的任意多个模块可以合并在一个模块中实现，或者其中的任意一个模块可以被拆分成多个模块。或者，这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合，并在一个模块中实现。根据本公开的实施例，任务确定模块410、逻辑选择模块420、逻辑确定模块430和文件处理模块440中的至少一个可以至少被部分地实现为硬件电路，例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC)，或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现，或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者，任务确定模块410、逻辑选择模块420、逻辑确定模块430和文件处理模块440中的至少一个可以至少被部分地实现为计算机程序模块，当该计算机程序模块被运行时，可以执行相应的功能。

图5示意性示出了根据本公开实施例的适于实现文件处理方法的电子设备的方框图。

如图5所示，根据本公开实施例的电子设备500包括处理器501，其可以根据存储在只读存储器ROM 502中的程序或者从存储部分508加载到随机访问存储器RAM 503中的程序而执行各种适当的动作和处理。处理器501例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如，专用集成电路(ASIC))等等。处理器501还可以包括用于缓存用途的板载存储器。处理器501可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。

在RAM 503中，存储有电子设备500操作所需的各种程序和数据。处理器501、ROM502以及RAM 503通过总线504彼此相连。处理器501通过执行ROM 502和/或RAM 503中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意，所述程序也可以存储在除ROM 502和RAM 503以外的一个或多个存储器中。处理器501也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。

根据本公开的实施例，电子设备500还可以包括输入/输出(I/O)接口505，输入/输出(I/O)接口505也连接至总线504。电子设备500还可以包括连接至输入/输出(I/O)接口的以下部件中的一项或多项：包括键盘、鼠标等的输入部分506；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分507；包括硬盘等的存储部分508；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至输入/输出(I/O)接口。可拆卸介质511，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器510上，以便于从其上读出的计算机程序根据需要被安装入存储部分508。

本公开还提供了一种计算机可读存储介质，该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的；也可以是单独存在，而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序，当上述一个或者多个程序被执行时，实现根据本公开实施例的方法。

根据本公开的实施例，计算机可读存储介质可以是非易失性的计算机可读存储介质，例如可以包括但不限于：便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。例如，根据本公开的实施例，计算机可读存储介质可以包括上文描述的ROM 502和/或RAM 503和/或ROM 502和RAM 503以外的一个或多个存储器。

本公开的实施例还包括一种计算机程序产品，其包括计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。当计算机程序产品在计算机系统中运行时，该程序代码用于使计算机系统实现本公开实施例的方法。

在该计算机程序被处理器501执行时执行本公开实施例的系统/装置中限定的上述功能。根据本公开的实施例，上文描述的系统、装置、模块、单元等可以通过计算机程序模块来实现。

在一种实施例中，该计算机程序可以依托于光存储器件、磁存储器件等有形存储介质。在另一种实施例中，该计算机程序也可以在网络介质上以信号的形式进行传输、分发，并通过通信部分509被下载和安装，和/或从可拆卸介质511被安装。该计算机程序包含的程序代码可以用任何适当的网络介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。

在这样的实施例中，该计算机程序可以通过通信部分509从网络上被下载和安装，和/或从可拆卸介质511被安装。在该计算机程序被处理器501执行时，执行本公开实施例的系统中限定的上述功能。根据本公开的实施例，上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。

根据本公开的实施例，可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例提供的计算机程序的程序代码，具体地，可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。程序设计语言包括但不限于诸如Java，C++，python，“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

本领域技术人员可以理解，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合，即使这样的组合或结合没有明确记载于本公开中。特别地，在不脱离本公开精神和教导的情况下，本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。

以上对本公开的实施例进行了描述。但是，这些实施例仅仅是为了说明的目的，而并非为了限制本公开的范围。尽管在以上分别描述了各实施例，但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围，本领域技术人员可以做出多种替代和修改，这些替代和修改都应落在本公开的范围之内。

Claims (11)

1.一种文件处理方法，其特征在于，所述方法包括：

基于多个待处理文件和目标文件标准信息，确定文件处理任务，其中，所述文件处理任务包括用于处理所述多个待处理文件生成目标文件的任务，所述目标文件标准信息用于指示所述目标文件的文件标准；

基于所述文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，其中，所述文件处理任务包括多个文件处理子任务，每个所述数据处理子逻辑用于执行一个所述文件处理子任务；

基于所述多个文件处理子任务的任务处理顺序，将所述多个数据处理子逻辑进行排列，得到目标数据处理逻辑；以及

利用所述目标数据处理逻辑，对所述多个待处理文件进行处理，得到所述目标文件。

2.根据权利要求1所述的方法，其特征在于，所述基于多个待处理文件和目标文件标准信息，确定文件处理任务，包括：

确定所述多个待处理文件各自的文件数据；

基于所述文件数据和所述目标文件标准信息，确定所述多个待处理文件各自的待处理项；以及

根据多个所述待处理项，确定所述文件处理任务。

3.根据权利要求2所述的方法，其特征在于，所述基于所述文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，包括：

基于多个所述待处理项，确定所述文件处理任务包括的所述多个文件处理子任务；以及

基于每个所述文件处理子任务，从所述预设数据处理逻辑库中选择与所述文件处理子任务对应的所述数据处理子逻辑。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

确定所述多个文件处理子任务各自的预设优先级和任务类别；

将数据修改类别的多个所述文件处理子任务按照所述预设优先级的顺序排列，得到目标文件修改任务；

将数据统计类别的多个所述文件处理子任务按照所述预设优先级的顺序排列，得到目标文件统计任务；以及

按照所述预设优先级将目标文件修改任务和所述目标文件统计任务进行排列，得到所述多个文件处理子任务的任务处理顺序。

5.根据权利要求4所述的方法，其特征在于，所述数据修改类别包括以下至少一个任务子类别：字段拆分子类别、字典项转换子类别和格式转换子类别；

所述将数据修改类别的多个所述文件处理子任务按照所述预设优先级的顺序排列，得到目标文件修改任务，包括：

确定数据修改类别的多个所述文件处理子任务各自的任务子类别；以及

按照多个所述任务子类别各自的预设优先级的顺序，对所述多个文件处理子任务进行排序，得到所述目标文件修改任务。

6.根据权利要求1所述的方法，其特征在于，所述利用所述目标数据处理逻辑，对所述多个待处理文件进行处理，得到所述目标文件，包括：

利用目标数据修改逻辑，对所述多个待处理文件的文件数据进行修改，得到修改后的文件数据；

利用目标数据统计逻辑，对所述修改后的文件数据进行统计，得到统计后的文件数据；以及

根据所述修改后的文件数据和所述统计后的文件数据，生成所述目标文件。

7.根据权利要求1所述的方法，其特征在于，在执行所述利用所述目标数据处理逻辑，对所述多个待处理文件进行处理，得到所述目标文件之前，所述方法还包括：

将所述多个待处理文件的文件数据存储至动态数组中。

8.一种文件处理装置，其特征在于，所述装置包括：

任务确定模块，用于基于多个待处理文件和目标文件标准信息，确定文件处理任务，其中，所述文件处理任务包括用于处理所述多个待处理文件生成目标文件的任务，所述目标文件标准信息用于指示所述目标文件的文件标准；

逻辑选择模块，用于基于所述文件处理任务，从预设数据处理逻辑库中确定多个数据处理子逻辑，其中，所述文件处理任务包括多个文件处理子任务，每个所述数据处理子逻辑用于执行一个所述文件处理子任务；

逻辑确定模块，用于基于所述多个文件处理子任务的任务处理顺序，将所述多个数据处理子逻辑进行排列，得到目标数据处理逻辑；以及

文件处理模块，用于利用所述目标数据处理逻辑，对所述多个待处理文件进行处理，得到所述目标文件。

9.一种电子设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个计算机程序，

其特征在于，所述一个或多个处理器执行所述一个或多个计算机程序以实现根据权利要求1～7中任一项所述方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现根据权利要求1～7中任一项所述方法的步骤。

11.一种计算机程序产品，包括计算机程序/指令，其特征在于，所述计算机程序被处理器执行时实现根据权利要求1～7中任一项所述方法的步骤。