CN108255984A - 一种数据解析方法和装置 - Google Patents

Abstract

本发明提供了一种数据解析方法和装置，数据解析方法包括：根据外部输入的指令，确定至少一个数据表和一个目标数据；创建一个具有预设表结构的解析数据表；将每一个所述数据表转化成具有所述预设表结构的行数据，并写入所述解析数据表；根据所述预设表结构，在所述解析数据表中确定包括有所述目标数据的各个所述行数据，并存储各个确定的所述行数据对应的各个所述数据表。本发明实施例提供的技术方法能够提高数据解析的效率。

Description

一种数据解析方法和装置

技术领域

本发明涉及计算机应用技术领域，特别涉及一种数据解析方法和装置。

背景技术

随着科技的发展，存储的数据量日益增长，如何通过数据解析在数量庞大的数据中找到人们需要的数据，成为人们关注的焦点。

一般地，数据会存储在数据库中的各个数据表中，当用户查找某一个数据时，先确定数据所在的数据表，再从数据所在的数据表中确定数据。

然而，数据表的数量繁多，很多时候用户不知道数据放在哪个数据表里了，上述方法只能依靠人工逐个解析每一张数据表，以确定用户需要的数据，消耗大量时间，从而降低了数据解析的效率。

发明内容

本发明实施例提供了一种数据解析方法和装置，能够提高数据解析的效率。

第一方面，本发明实施例提供了一种数据解析方法，包括：

根据外部输入的指令，确定至少一个数据表和一个目标数据；

创建一个具有预设表结构的解析数据表；

将每一个所述数据表转化成具有所述预设表结构的行数据，并写入所述解析数据表；

根据所述预设表结构，在所述解析数据表中确定包括有所述目标数据的各个所述行数据，并存储各个确定的所述行数据对应的各个所述数据表。

优选地，所述创建一个具有预设表结构的解析数据表，包括：

设置至少两个预设字段，其中，每一个所述预设字段对应一个数据列；

确定各个所述数据列的排列顺序，形成具有所述预设表结构的所述解析数据表。

优选地，所述将每一个所述数据表转化成具有所述预设表结构的行数据，并写入所述解析数据表，包括：

针对每一个所述数据表，均执行：

分别确定当前数据表中各个数据与所述至少两个预设字段的对应关系；

按照所述对应关系，将各个所述数据分别写入对应的所述预设字段下，得到所述当前数据表对应的所述行数据。

优选地，所述根据所述预设表结构，在所述解析数据表中确定包括有目标数据的各个所述行数据，包括：

在所述至少两个预设字段中，确定所述目标数据对应的目标预设字段；

针对每一个所述行数据，检测当前行数据中所述目标字段下是否存在所述目标数据。

优选地，进一步包括：

检测所述当前数据表对应的所述行数据是否在预设阈值范围内；

当所述当前数据表对应的所述行数据不在预设值阈值范围内时，跳过所述当前数据表。

第二方面，本发明实施例提供了一种数据解析装置，包括：确定模块、创建模块、写入模块和解析模块；

所述确定模块，用于根据外部输入的指令，确定至少一个数据表和一个目标数据；

所述创建模块，用于创建一个具有预设表结构的解析数据表；

所述写入模块，用于将所述确定模块确定的每一个所述数据表转化成具有所述预设表结构的行数据，并写入所述创建模块创建的所述解析数据表；

所述解析模块，用于根据所述预设表结构，在所述解析数据表中确定包括有所述目标数据的所述写入模块得到的各个所述行数据，并存储各个确定的所述行数据对应的各个所述数据表。

优选地，所述创建模块，用于设置至少两个预设字段，其中，每一个所述预设字段对应一个数据列；确定各个所述数据列的排列顺序，形成具有所述预设表结构的所述解析数据表。

优选地，所述写入模块，用于针对每一个所述数据表，均执行：

分别确定当前数据表中各个数据与所述至少两个预设字段的对应关系；

按照所述对应关系，将各个所述数据分别写入对应的所述预设字段下，得到所述当前数据表对应的所述行数据。

优选地，所述解析模块，包括：字段确定单元和检测单元；

所述字段确定单元，用于在所述至少两个预设字段中，确定所述目标数据对应的目标预设字段；

所述检测单元，用于针对每一个所述行数据，检测当前行数据中所述字段确定单元确定的所述目标字段下是否存在所述目标数据。

优选地，进一步包括：阈值检测模块；

所述阈值检测模块，用于检测所述当前数据表对应的所述行数据是否在预设阈值范围内；当所述当前数据表对应的所述行数据不在预设值阈值范围内时，跳过所述当前数据表。

本发明实施例提供了一种数据解析方法和装置，确定至少一个数据表和一个目标数据，以确定目标数据的查找范围；创建一个预设表结构的解析数据表，利用解析数据表具有固定的表结构特点，为同时解析多个数据表提供条件；将每一个数据表写入解析数据表，转化成具有预设数据格式的行数据，将各个数据表写入同一个表结构，实现同时对多个数据表进行解析；根据预设表结构，在解析数据表中确定包括有目标数据的各个行数据对应的所述数据表，由于表结构固定，在查找数据时，只要针对可能存在目标数据的数据列或数据行进行查找，以减少数据处理量。由此可见，通过将数据表写入具有预设表结构的解析数据表，将数据表转化为具有预设表结构的行数据，使得用户能够同时多个数据表进行查找，并且利用固定的表结构缩小查找范围，以减少数据处理，从而提高了数据解析的效率。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明一个实施例提供的一种数据解析方法的流程图；

图2是本发明一个实施例提供的另一种数据解析方法的流程图；

图3是本发明一个实施例提供的一种数据解析装置的结构示意图；

图4是本发明一个实施例提供的另一种数据解装置的结构示意图；

图5是本发明一个实施例提供的又一种数据解装置的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例，基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，本发明实施例提供了一种数据解析方法，包括以下步骤：

步骤101，根据外部输入的指令，确定至少一个数据表和一个目标数据。

步骤102，创建一个具有预设表结构的解析数据表。

步骤103，将每一个所述数据表转化成具有所述预设表结构的行数据，并写入所述解析数据表。

步骤104，根据所述预设表结构，在所述解析数据表中确定包括有所述目标数据的各个所述行数据，并存储各个确定的所述行数据对应的各个所述数据表。

本发明实施例提供了一种数据解析方法，确定至少一个数据表和一个目标数据，以确定目标数据的查找范围；创建一个预设表结构的解析数据表，利用解析数据表具有固定的表结构特点，为同时解析多个数据表提供条件；将每一个数据表写入解析数据表，转化成具有预设数据格式的行数据，将各个数据表写入同一个表结构，实现同时对多个数据表进行解析；根据预设表结构，在解析数据表中确定包括有目标数据的各个行数据对应的所述数据表，由于表结构固定，在查找数据时，只要针对可能存在目标数据的数据列或数据行进行查找，以减少数据处理量。由此可见，通过将数据表写入具有预设表结构的解析数据表，将数据表转化为具有预设表结构的行数据，使得用户能够同时多个数据表进行查找，并且利用固定的表结构缩小查找范围，以减少数据处理，从而提高了数据解析的效率。

为了给同时解析多个数据表提供有利条件，在本发明的一个实施例中，

所述创建一个具有预设表结构的解析数据表，包括：

设置至少两个预设字段，其中，每一个所述预设字段对应一个数据列；

确定各个所述数据列的排列顺序，形成具有所述预设表结构的所述解析数据表。

不同的数据表会设置有不同的字段，且各个字段的排列顺序不同，因此无法同时对多个数据表进行数据解析。在本发明实施例中，通过在解析数据表中设置至少两个预设字段，并让每一个预设字段对应一个数据列，为各个数据表构造相同的字段。例如设定名词字段对应各个数据表中姓名、种类等名词类字段；设置主键字段对应各个数据表中的主键。再确定各个数据列的排列数据，使得每个字段的位置是固定的，为各个数据表构造相同的字段顺序。通过为各个数据表构造相同的字段和相同的字段顺序，为同时解析多个数据表创造条件。

为了实现同时解析多个数据表，在本发明的一个实施例中，所述将每一个所述数据表转化成具有所述预设表结构的行数据，并写入所述解析数据表，包括：

针对每一个所述数据表，均执行：

分别确定当前数据表中各个数据与所述至少两个预设字段的对应关系；

按照所述对应关系，将各个所述数据分别写入对应的所述预设字段下，得到所述当前数据表对应的所述行数据。

分别确定数据表中各个数据与各个预设字段的对应关系，其中，数据表中各个数据，包括：字段、主键和数值；在建立对应关系后，将各个数据写入各个预设字段下，得到行数据，以上述方法得到的行数据具有预设表结构。例如，解析数据表中存在主键字段、名词字段和数值字段，那么对于含有字段“姓名”、“部门”、“入职时间”的数据表，“姓名”、“部门”和“入职时间”对应的主键写入主键字段；“姓名”、“部门”和“入职时间”写入名词字段；“姓名”、“部门”和“入职时间”下的各个数据写入数值字段下，从而将数据表作为一个行数据写入解析数据表。

为了能够减少数据查找过程中的数据处理量，在本发明的一个实施例中，所述根据所述预设表结构，在所述解析数据表中确定包括有目标数据的各个所述行数据，包括：

在所述至少两个预设字段中，确定所述目标数据对应的目标预设字段；

针对每一个所述行数据，检测当前行数据中所述目标字段下是否存在所述目标数据。

由于解析数据表具有固定的表结构，在查询数据时，先在所有预设字段中，确定目标数据对应的目标预设字段，再针对每一个行数据中目标字段下的数据进行查询，如果行数据中目标字段下存在所述目标数据，说明该行数据对应的数据表为目标数据所在的数据表。例如，目标数据为“张三”，“张三”对应的预设字段为“数值字段”，数据表A为第一行数据，数据表B为第二行数据，分别查询第一行数据和第二行数据中“数值字段”下是否存在“张三”。之后根据查询结果存储对应的数据表，例如，如果第一行数据存在“张三”，就存储数据表A；如果第二行数据存在“张三”，就存储数据表B。

在将各个数据表写入解析数据表时，会出现数据错误的情况，这会导致目标数据查询失败，甚至引发整个程序终止，为了解决上述问题，在本发明的一个实施例中，进一步包括：

检测所述当前数据表对应的所述行数据是否在预设阈值范围内；

当所述当前数据表对应的所述行数据不在预设值阈值范围内时，跳过所述当前数据表。

在将各个数据表写入解析数据表的过程中，写入解析数据表的数据可能会出现数据溢出或由于数据格式出错引发系统错误报警，因此设定数据表对应的行数据的阈值范围，一旦转化后的行数据出现异常，跳过该数据表，以防止程序终止，同时也保证了查询结果的准确性。

下面以基于XML(Extensible Markup Language，可扩展标记语言)的数据解析方法为例，展开说明本发明上述实施例，如图2所示，本发明实施例提供了另一种数据解析方法，包括以下步骤：

步骤201，根据外部输入的指令，确定至少一个数据表和一个目标数据。

在本发明实施例中，如果用户输入数据表的编号，查询范围为输入编号的数据表；如果没有输入编号，查询范围为所有数据表。

步骤202，设置至少两个预设字段。

在本发明实施例中，至少两个预设字段，包括：数据表ID(identification，身份标识号)，名称字段和数据字段。上述字段为数据表的全部基本要素，即上述字段可以描述大部分数据表的表结构。通过设置上述字段，可以为同时解析多个数据表创造条件。

步骤203，确定各个数据列的排列顺序，形成具有预设表结构的解析数据表。

在本发明实施例中，字段的排列顺序为数据表ID，名称字段，数据字段。

步骤204，针对每一个数据表，分别确定当前数据表中各个数据与各个预设字段的对应关系。

在本发明实施例中，数据表ID对应各个数据表唯一确定的身份标识信息，名称字段对应数据表的各个列表头或行表头，数据字段对应数据表的各个列表头下的数据或行表头下的数据。

步骤205，按照对应关系，将确定的各个数据分别写入对应的预设字段下。

在本发明实施例中，XML的数据格式为<字段1><字段2>…</字段2></字段1>，在将数据表中的各个列表头下或行表头下的数据写入数据字段下时，将数据表中所有数据转化成一个具有上述格式的XML数据，即利用一个XML数据呈现一个数据表的全部数据。

步骤206，检测当前数据表对应的行数据是否在预设阈值范围内，如果是执行步骤207；否则，执行210。

步骤207，在至少两个预设字段中，确定目标数据对应的目标预设字段。

在本发明实施例中，目标预设字段为解析数据表中的数据字段。

步骤208，针对每一个行数据，检测当前行数据中目标字段下是否存在目标数据。

在本发明实施例中，利用XML中的nodes函数，将目标字段下的XML数据转化为临时数据表，在临时数据表中查询目标数据。

步骤209，在当前行数据中目标字段下存在目标数据时，存储所述当前行数据对应的数据表，并结束当前流程。

步骤210，跳过当前数据表。

如图3所示，本发明实施例提供了一种数据解析装置，包括：确定模块301、创建模块302、写入模块303和解析模块304；

确定模块301，用于根据外部输入的指令，确定至少一个数据表和一个目标数据；

创建模块302，用于创建一个具有预设表结构的解析数据表；

写入模块303，用于将确定模块301确定的每一个所述数据表转化成具有所述预设表结构的行数据，并写入创建模块302创建的所述解析数据表；

解析模块304，用于根据所述预设表结构，在所述解析数据表中确定包括有所述目标数据的写入模块303得到的各个所述行数据，并存储各个确定的所述行数据对应的各个所述数据表。

在本发明的一个实施例中，创建模块302，用于设置至少两个预设字段，其中，每一个所述预设字段对应一个数据列；确定各个所述数据列的排列顺序，形成具有所述预设表结构的所述解析数据表。

在本发明的一个实施例中，写入模块303，用于针对每一个所述数据表，均执行：

分别确定当前数据表中各个数据与所述至少两个预设字段的对应关系；

按照所述对应关系，将各个所述数据分别写入对应的所述预设字段下，得到所述当前数据表对应的所述行数据。

如图4所示，本发明实施例提供了另一种数据解析装置，解析模块304，包括：字段确定单元3041和检测单元3042；

字段确定单元3041，用于在所述至少两个预设字段中，确定所述目标数据对应的目标预设字段；

检测单元3042，用于针对每一个所述行数据，检测当前行数据中字段确定单元3041确定的所述目标字段下是否存在所述目标数据。

如图5所示，本发明实施例提供了又一种数据解析装置，进一步包括：阈值检测模块501；

阈值检测模块501，用于检测所述当前数据表对应的所述行数据是否在预设阈值范围内；当所述当前数据表对应的所述行数据不在预设值阈值范围内时，跳过所述当前数据表。

上述装置内的各单元之间的信息交互、执行过程等内容，由于与本发明方法实施例基于同一构思，具体内容可参见本发明方法实施例中的叙述，此处不再赘述。

本发明实施例提供了一种可读介质，包括执行指令，当存储控制器的处理器执行所述执行指令时，所述存储控制器执行上述实施例中任一所述的数据解析方法。

本发明实施例提供了一种存储控制器，包括：处理器、存储器和总线；

所述处理器和所述存储器通过所述总线连接；

所述存储器，当所述存储控制器运行时，所述处理器执行所述存储器存储的所述执行指令，以使所述存储控制器执行上述实施例中任一所述的数据解析方法。

综上所述，本发明各个实施例至少具有如下有益效果：

1、本发明一实施例中，确定至少一个数据表和一个目标数据，以确定目标数据的查找范围；创建一个预设表结构的解析数据表，利用解析数据表具有固定的表结构特点，为同时解析多个数据表提供条件；将每一个数据表写入解析数据表，转化成具有预设数据格式的行数据，将各个数据表写入同一个表结构，实现同时对多个数据表进行解析；根据预设表结构，在解析数据表中确定包括有目标数据的各个行数据对应的所述数据表，由于表结构固定，在查找数据时，只要针对可能存在目标数据的数据列或数据行进行查找，以减少数据处理量。由此可见，通过将数据表写入具有预设表结构的解析数据表，将数据表转化为具有预设表结构的行数据，使得用户能够同时多个数据表进行查找，并且利用固定的表结构缩小查找范围，以减少数据处理，从而提高了数据解析的效率。

2、本发明一实施例中，通过为各个数据表构建共同的字段和字段顺序，为同时解析多个数据表提供便利条件，从而进一步提高了数据解析的效率。

3、本发明一实施例中，通过建立解析数据表中的预设字段和各个数据表中各个数据的对应关系，将各个数据表写入解析数据表，实现同时解析多个数据表。

4、本发明一实施例中，确定目标数据对应的目标字段，便于在解析数据过程中，只在目标字段下查询目标数据，从而实现缩小查询范围以及减少数据处理量，进一步提高了数据解析的效率。

5、本发明一实施例中，通过对各个行数据进行阈值监测，当出现格式错误或数据溢出时，跳过当前数据表，以避免解析程序终止运行，从而进一步进一步提高了数据解析的效率。

需要说明的是，在本文中，诸如第一和第二之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个〃····〃”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同因素。

本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储在计算机可读取的存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质中。

最后需要说明的是：以上所述仅为本发明的较佳实施例，仅用于说明本发明的技术方案，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所做的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (10)

1.一种数据解析方法，其特征在于，包括：

根据外部输入的指令，确定至少一个数据表和一个目标数据；

创建一个具有预设表结构的解析数据表；

将每一个所述数据表转化成具有所述预设表结构的行数据，并写入所述解析数据表；

根据所述预设表结构，在所述解析数据表中确定包括有所述目标数据的各个所述行数据，并存储各个确定的所述行数据对应的各个所述数据表。

2.根据权利要求1所述的方法，其特征在于，

所述创建一个具有预设表结构的解析数据表，包括：

设置至少两个预设字段，其中，每一个所述预设字段对应一个数据列；

确定各个所述数据列的排列顺序，形成具有所述预设表结构的所述解析数据表。

3.根据权利要求2所述的方法，其特征在于，

所述将每一个所述数据表转化成具有所述预设表结构的行数据，并写入所述解析数据表，包括：

针对每一个所述数据表，均执行：

分别确定当前数据表中各个数据与所述至少两个预设字段的对应关系；

按照所述对应关系，将各个所述数据分别写入对应的所述预设字段下，得到所述当前数据表对应的所述行数据。

4.根据权利要求2所述的方法，其特征在于，

所述根据所述预设表结构，在所述解析数据表中确定包括有目标数据的各个所述行数据，包括：

在所述至少两个预设字段中，确定所述目标数据对应的目标预设字段；

针对每一个所述行数据，检测当前行数据中所述目标字段下是否存在所述目标数据。

5.根据权利要求3所述的方法，其特征在于，进一步包括：

检测所述当前数据表对应的所述行数据是否在预设阈值范围内；

当所述当前数据表对应的所述行数据不在预设值阈值范围内时，跳过所述当前数据表。

6.一种数据解析装置，其特征在于，包括：确定模块、创建模块、写入模块和解析模块；

所述确定模块，用于根据外部输入的指令，确定至少一个数据表和一个目标数据；

所述创建模块，用于创建一个具有预设表结构的解析数据表；

所述写入模块，用于将所述确定模块确定的每一个所述数据表转化成具有所述预设表结构的行数据，并写入所述创建模块创建的所述解析数据表；

所述解析模块，用于根据所述预设表结构，在所述解析数据表中确定包括有所述目标数据的所述写入模块得到的各个所述行数据，并存储各个确定的所述行数据对应的各个所述数据表。

7.根据权利要求6所述的装置，其特征在于，

所述创建模块，用于设置至少两个预设字段，其中，每一个所述预设字段对应一个数据列；确定各个所述数据列的排列顺序，形成具有所述预设表结构的所述解析数据表。

8.根据权利要求7所述的装置，其特征在于，

所述写入模块，用于针对每一个所述数据表，均执行：

分别确定当前数据表中各个数据与所述至少两个预设字段的对应关系；

按照所述对应关系，将各个所述数据分别写入对应的所述预设字段下，得到所述当前数据表对应的所述行数据。

9.根据权利要求7所述的方法，其特征在于，

所述解析模块，包括：字段确定单元和检测单元；

所述字段确定单元，用于在所述至少两个预设字段中，确定所述目标数据对应的目标预设字段；

所述检测单元，用于针对每一个所述行数据，检测当前行数据中所述字段确定单元确定的所述目标字段下是否存在所述目标数据。

10.根据权利要求8所述的装置，其特征在于，

进一步包括：阈值检测模块；

所述阈值检测模块，用于检测所述当前数据表对应的所述行数据是否在预设阈值范围内；当所述当前数据表对应的所述行数据不在预设值阈值范围内时，跳过所述当前数据表。