CN108959574A - 一种测试数据分析方法及系统 - Google Patents

Abstract

本发明公开了一种测试数据分析方法，获取待测试机台的测试日志信息；将获取的测试日志信息根据预设条件导入至关系数据库中；从所述关系数据库中导出符合预设字段的测试数据信息；将导出的符合预设字段的测试数据信息建立数据报告，分析测试机台或产品的某个状态。本发明的目的是提供一种测试数据分析方法及系统，将获取的原始测试日志进行对应格式的转换并将导入至关系数据库中，依据数据分析的要求，在数据库中提取相应数据并分析给出结果，极大地提高了数据分析的效率。

Description

一种测试数据分析方法及系统

技术领域

本发明涉及数据分析领域，特别涉及一种测试数据分析方法及系统。

背景技术

目前，对于出厂机台的合格检测，是企业运行的重要保障，例如，固态硬盘(SolidState Disk，SSD)生产测试流程有多个功能测试站点，每个站点每片SSD都会产生测试日志文件，如何高效分析这些数据，对SSD品质检验保障和测试改善十分重要。同时，测试日志中Nand的数据提取和分析，需要建立在大量数据基础之上。

传统的数据收集工作是依照数据收集要求，先收集符合条件的测试日志文件，然后，再使用特定的数据分析工具来完成数据的分析。从搜集测试日志文件到分析出结果，需要按天给出结果。这对一些涉及SSD出货相关的数据分析来说，是无法接受的。因而，如何从海量测试日志中高效筛选并分析这些数据成为一个十分棘手且亟待解决的问题。

基于以上存在技术问题，本申请提供了解决技术问题的技术方案。

发明内容

本发明的目的是提供一种测试数据分析方法及系统，在本发明中，将获取的原始测试日志进行对应格式的转换并将导入至关系数据库中，依据数据分析的要求，在数据库中提取相应数据并分析给出结果，极大地提高了数据分析的效率。

本发明提供的技术方案如下：

一种测试数据分析方法，获取待测试机台的测试日志信息；将获取的测试日志信息根据预设条件导入至关系数据库中；从关系数据库中导出符合预设字段的测试数据信息；将导出的符合预设字段的测试数据信息建立数据报告，分析测试机台的工作状态。

进一步优选的，构建关系数据库包括：在关系数据库中建立主页表和子页表；将待导入的数据设置第一标识信息和第一预设条件；根据待导入的数据设置的第一标识信息、第一预设条件以及待导入的数据的文件名构建主页表；根据主页表中设置的第一标识信息、第二标识信息以及第二预设条件构建子页表；或，根据主页表中设置的第一标识信息、第二标识信息、第一预设条件、以及第二预设条件构建子页表；根据待导入的数据设置第一标识信息以及文件名将主页表与子页表进行关联设置。

进一步优选的，构建关系数据库包括：在构建子页表时，将子页表中第二标识信息与待导入数据的类别一一对应设置；其中，第一预设条件与第二预设条件中包括数据的类别。

进一步优选的，还包括：当第一预设条件改变时，更新主页表。

进一步优选的，将获取的测试日志信息导入至关系数据库中具体包括：将测试日志信息进行解析；将解析后满足第一预设条件的测试日志信息导入至关系数据库的主页表中；将解析后满足第一预设条件和第二预设条件的测试日志信息导入至关系数据库的子页表中。

一种测试数据分析系统，包括：数据导入模块，用于将从测试平台获取的测试日志信息根据预设条件导入至关系数据库中；数据导出模块，与数据导入模块通信连接，从关系数据库中导出符合预设字段的测试数据信息至客户端；报告生成模块，与数据导出模块通信连接，将导出的符合预设字段的测试数据信息建立数据报告，分析测试装置的工作状态并显示在客户端。

进一步优选的，构建关系数据库包括：在关系数据库中建立主页表和子页表；主页表创建模块，将待导入的数据设置第一标识信息和第一预设条件；根据待导入的数据设置的第一标识信息、第一预设条件以及待导入的数据的文件名构建主页表；子页表创建模块，与主页表通信连接，根据主页表中设置的第一标识信息、第二标识信息以及第二预设条件构建子页表；或，根据主页表中设置的第一标识信息、第二标识信息、第一预设条件、以及第二预设条件构建子页表；信息关联模块，分别与主页表创建模块以及子页表创建模块通信连接，根据待导入的数据设置第一标识信息以及文件名将主页表与子页表进行关联设置。

进一步优选的，构建关系数据库包括：子页表构建模块进一步包括，将子页表中第二标识信息与待导入数据的类别一一对应设置；其中，第一预设条件与第二预设条件中包括数据的类别。

进一步优选的，主页表创建模块进一步包括：当第一预设条件改变时，更新主页表。

进一步优选的，数据导入模块，具体包括：数据解析模块，将测试日志信息进行解析；数据导入模块进一步包括：将解析后满足第一预设条件的测试日志信息导入至关系数据库的主页表中；将解析后满足第一预设条件和第二预设条件的测试日志信息导入至关系数据库的子页表中。

本发明提供的一种测试数据分析方法及系统，能够带来以下至少一种有益效果：

在本发明中，将获取的原始测试日志进行对应格式的转换并将导入至关系数据库中，依据数据分析的要求，在数据库中提取相应数据并分析给出结果，极大地提高了数据分析的效率。

在本发明中，将关系数据库设计为主子页数据架构，有效提取相应数据并分析给出结果，可以在短时间内产生所需要的分析结果，根据实际的测试结果可以在30分钟至3小时以内产生所需要的分析结果，极大地提高了数据分析的效率。

在本发明中，基于强大的服务器主板和RAID架构的PCIe SSD主存储硬件平台，不仅可实现高效分析这些数据，同时对待测试机台的品质检验和测试方式的改善起到了积极有效作用。

在本发明中，主页表根据分析和查看测试数据的需求，可以实现对主页表的更新，即可实现在现有的记录上，增加新的字段，并导入数据；而对现有的记录没有影响；因此，对满足后续新的数据搜集要求具有极大的灵活性和便利性。

附图说明

下面将以明确易懂的方式，结合附图说明优选实施方式，对一种测试数据分析方法及系统的上述特性、技术特征、优点及其实现方式予以进一步说明。

图1是本发明一种测试数据分析方法的一个实施例的流程图；

图2是本发明一种测试数据分析方法的另一个实施例的流程图；

图3是本发明一种测试数据分析方法的另一个实施例的流程图；

图4是本发明一种测试数据分析的结构图；

图5是本发明关系数据库中数据的存储关系图；

图6是本发明关系数据库的结构图；

图7是本发明测试数据信息的硬件架构图；

图8是本发明一种测试数据分析系统的一个实施例的结构图；

图9是本发明一种测试数据分析系统的另一个实施例的结构图。

具体实施方式

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对照附图说明本发明的具体实施方式。显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图，并获得其他的实施方式。

为使图面简洁，各图中只示意性地表示出了与本发明相关的部分，它们并不代表其作为产品的实际结构。另外，以使图面简洁便于理解，在有些图中具有相同结构或功能的部件，仅示意性地绘示了其中的一个，或仅标出了其中的一个。在本文中，“一个”不仅表示“仅此一个”，也可以表示“多于一个”的情形。

在生产基地对于生产出的机台，无论是出厂前，还是在生产过程中，为了保证对产出的机台的质量，需要在生产测试流程中设置多个功能测试站点，每个站点对于产出的机台都会产生测试日志文件，如何高效分析这些数据，对待检测机台品质检验保障和测试改善十分重要。因此，在大量的测试日志中数据提取和分析，需要建立在大量数据基础之上。现有技术比较传统的数据收集工作是依照数据收集要求，先收集符合条件的测试日志文件，然后，再使用特定的数据分析工具来完成数据的分析。这样就造成时间和资源的浪费。

本发明提供了一种测试数据分析方法一个实施例，如图1和图4所示；

步骤S100获取待测试机台的测试日志信息；

步骤S200将获取的测试日志信息根据预设条件导入至关系数据库中；

步骤S300从关系数据库中导出符合预设字段的测试数据信息；

步骤S400将导出的符合预设字段的测试数据信息建立数据报告，分析测试机台的工作状态。

具体的，需要通过测试平台获取到待检测机台的测试日志信息，在该测试日志的信息中包括多个测试点的测试数据；为了克服现有技术的对于测试日志分析的缺陷，本申请将获取到的测试日志导入在数据库中，当需要进行提取哪些数据时，只要通过关系数据库在PC上设置的GUI用户界面相关标识，即可得到相关的数据信息，不同的数据类别不同，在数据库中建立的字符段也不同，不同字符段与GUI用户界面上显示的标识是一一对应的；根据调取的数据类别不同，可以根据测试时间、测试数据的类别不同，建立坐标系，或者相关的图表，显示每个已经完成测试的测试机台的工作参数；也可以对测试的SSD进行测试结果的分析，进行连续时间的数据统计，判断是否存在某种异常或符合某种特征等等，因此将测试日志导入设定的关系数据库中。

在本发明中还提供了一个实施例，参考图2和图6所示，还包括：在将测试日志导入至关系数据库之前还需要构建关系数据库：

在关系数据库中建立主页表和子页表的步骤如下：

步骤S010将待导入的数据设置第一标识信息和第一预设条件；

步骤S020根据待导入的数据设置的第一标识信息、第一预设条件以及待导入的数据的文件名构建主页表；

步骤S031根据主页表中设置的第一标识信息、第二标识信息以及第二预设条件构建子页表；

或，步骤S032根据主页表中设置的第一标识信息、第二标识信息、第一预设条件、以及第二预设条件构建子页表；

在构建子页表时，将子页表中第二标识信息与待导入数据的类别一一对应设置；

其中，第一预设条件与第二预设条件中包括数据的类别；

步骤S040根据待导入的数据设置第一标识信息以及文件名将主页表与子页表进行关联设置；

当第一预设条件改变时，进一步更新主页表。

具体的，在本实施例中提供了一种构建关系数据的实施例；图5中为关系数据库中数据的存储关系图，即主页表与子页表之间的关系图；在关系数据库中需要设置主页表和子页表；在关系数据库中根据用户需要关注的测试信息的类别不同，因此需要在数据库里创建相应的数据列表，用于将数据进行分类；可以包括将常用的数据归为一类，更为细节的数据归为一类，无论以何种形式对测试日志进行归类，需要符合用户的使用需求，以及方便用户进行调取；因此根据用户的实际需求设置不同的预设条件；每次导入的数据，或者对同一个测试机台进行测试的所有数据设置一个对应的ID号，该ID号保存在数据库中，而该ID号是唯一的。

在构建主页表时，需要预先设置一个菜单栏，在菜单栏里包括测试机台的ID号，测试的主要信息比如产品序列号、测试时间、测试结果等。这些测试项目根据用户的需求进行设置，也即第一预设条件；当然还包括该信息的文件名称；这样就完成了主页表的设置。当创建子页表时，首先需要将每次存储的数据中的数据类别设置对应的第二标识信息，也即在子页表中该数据的ID号；当在关系库中通过第二标识信息时，可以导出具体的数值信息，包括该数据获取的时间，还可以在该数据中增加更多细节的数据，即第二预设条件。在子页表中可以包括主页表中的全部满足第一预设条件的测试数据的类别，以及第二预设条件的测试数据的类别。在关系数据库中实现每个测试机台的测试日志的信息的相互调用，需要将主页表与子页表之间建立映射关系，实现相互关联；因此需要在构建子页表的菜单栏时，需要增加该机台记录在主页表的ID号；这样就可以通过在主页表的菜单栏里输入该机台记录在主页表中的ID号以及相应的测试的类别，可以在子页表中调取出该测试机台记录更详细的信息。随着数据统计要求机台的不断的升级，面临主页表字段的增加，因此可以根据数据统计的不同，更新数据库的主页表；例如，在主页表的字段中包括“产品型号”，在后续的数据统计中，需要更细节的产品信息时比如“产品属性”这一项时，可以在第一预设条件中添加新的字段，更新该数据库中的主页表。

本发明还提供了一个实施例；参考图3所示；包括：

步骤S000建立关系数据库；

步骤S100获取待测试机台的测试日志信息；

步骤S200将获取的测试日志信息导入至关系数据库中；

具体包括：

步骤S210将测试日志信息进行解析；

步骤S220将解析后满足第一预设条件的测试日志信息导入至关系数据库的主页表中；

步骤S230将解析后满足第二预设条件的测试日志信息导入至关系数据库的子页表中；

步骤S300从关系数据库中导出符合预设字段的测试数据信息；

步骤S400将导出的符合预设字段的测试数据信息建立数据报告，分析测试装置的工作状态。

在本实施例中，参考图3和4所示，图6为数据导入的结构关系图；根据上述实施例建立关系数据库，该关系数据库应满足测试机台的测试需求；获取测试机台的测试日志信息。参考图7所示硬件架构图，在获取测试日志时，所用的机台平台包括客户端和数据服务器。为了实现数据的备份以及提高数据处理的能力，本发明中系统硬件架构中设置的数据服务器为双CPU的PCIe G3带宽，利用RAID5和PCIe G3 SSD的架构，将获取的原始数据进行存储，以及根据设定的时间自动备份；将原始数据进行存储，包括历史数据的存储和实时数据的分盘存储，避免了数据的丢失。为了将获取的测试数据导入至关系数据库中，参考图4所示，先将获取的原始数据进行格式转换。在本申请中将获取的原始数据转换成JSON格式，具体示例为：

原始数据的转换：

将格式转换后的数据导入关系数据库；

表一为主页表；表二为子页表；

表一Main-Page主页(Organized Data)

Main-ID	ItemA	ItemB_1	ItemB_2	FileName
					1	a	b	c	A.JSON

表二Sub-Page子页表(Raw Data)

Sub-ID	Main-ID	Key	Value
				1	1	ItemA	a
2	1	ItemB	{b,c}
				3	1	ItemC	“hello”
4	1	FileName	A.JSON

将转换格式后的数据根据主页表和子页表中设置的数据类别，分别进行导入；导入数据完成后，根据图4所示，通过输入端的交互界面输入相关的命令，该命名与数据结构的设计的字符段一一对应，根据字符段的不同，通过相关的算法进行导出至交互界面上，并进一步的根据用户的需求，输出相应的报告，则完成数据获取、导入、分析等全部过程。

本发明还提供了一种测试数据分析系统的一个实施例，参考图8所示：包括：数据导入模块100，用于将从测试平台获取的测试日志信息根据预设条件导入至关系数据库中；数据导出模块200，与数据导入模块通信连接，从关系数据库中导出符合预设字段的测试数据信息至客户端；报告生成模块300，与数据导出模块通信连接，将导出的符合预设字段的测试数据信息建立数据报告，分析测试装置的工作状态并显示在客户端。

具体的，本实施例中，硬件系统为：客户端、数据服务器，以及测试平台；数据服务器可以用于将对待测试机台测试过程中测取到的测试数据信息进行保存。参考图7所示，在该数据服务器的中采用的双CPU的PCIe G3带宽，利用RAID5和PCIe G3SSD的架构；将获取的原始数据进行存储，以及根据设定的时间自动备份；将原始数据进行存储，包括历史数据的存储和实时数据的分盘存储，避免了数据的丢失；并根据关系数据库数据信息的导入条件进行导入。结合图4所示，通过测试平台获取到的测试日志导入到数据库中，当需要提取目标数据时，只要通过关系数据库在PC上设置的GUI用户界面相关标识不同字符段与GUI用户界面上显示的标识是一一对应的；根据测试时间、测试数据的类别不同，建立坐标系，或者相关的图表，显示每个已经完成测试的测试机台的工作参数；对测试的SSD进行测试结果的分析，进行连续时间的数据统计，判断是否存在某种异常或符合某种特征等等。因此将测试日志导入设定的关系数据库中，依据数据分析的要求，在数据库中提取相应数据并分析给出结果，极大地提高了数据分析的效率。

本申请中还提供了一个实施例，结合图2、图7和图9所示，构建关系数据库包括：在关系数据库中建立主页表和子页表；主页表创建模块010，将待导入的数据设置第一标识信息和第一预设条件；根据待导入的数据设置的第一标识信息、第一预设条件以及待导入的数据的文件名构建主页表；子页表创建模块020，与主页表通信连接，根据主页表中设置的第一标识信息、第二标识信息以及第二预设条件构建子页表；或，根据主页表中设置的第一标识信息、第二标识信息、第一预设条件、以及第二预设条件构建子页表。在子页表构建模块进一步包括，将子页表中第二标识信息与待导入数据的类别一一对应设置；其中，第一预设条件与第二预设条件中包括数据的类别；信息关联模块030，分别与主页表创建模块以及子页表创建模块通信连接，根据待导入的数据设置第一标识信息以及文件名将主页表与子页表进行关联设置。主页表创建模块进一步包括：当第一预设条件改变时，并进一步更新主页表。

具体的，本实施例的中的实施方式，参见上述方法实施例，与方法实施例一一对应，此处不再赘述。

应当说明的是，上述实施例均可根据需要自由组合。以上仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种测试数据分析方法，其特征在于，包括：

获取待测试机台的测试日志信息；将获取的所述测试日志信息根据预设条件导入至关系数据库中；

从所述关系数据库中导出符合预设字段的测试数据信息；

将导出的符合预设字段的测试数据信息建立数据报告，分析测试机台的工作状态。

2.根据权利要求1所述的测试数据分析方法，其特征在于，构建所述关系数据库包括：

在所述关系数据库中建立主页表和子页表；

将待导入的数据设置第一标识信息和第一预设条件；

根据待导入的数据设置的第一标识信息、所述第一预设条件以及待导入的数据的文件名构建所述主页表；

根据所述主页表中设置的所述第一标识信息、第二标识信息以及所述第二预设条件构建所述子页表；

或，根据所述主页表中设置的所述第一标识信息、第二标识信息、所述第一预设条件、以及第二预设条件构建所述子页表；

根据待导入的数据设置第一标识信息以及文件名将所述主页表与所述子页表进行关联设置。

3.根据权利要求2所述的测试数据分析方法，其特征在于，构建关系数据库包括：

在构建所述子页表时，将所述子页表中所述第二标识信息与所述待导入数据的类别一一对应设置；

其中，所述第一预设条件与所述第二预设条件中包括数据的类别。

4.根据权利要求2-3任一所述的测试数据分析方法，其特征在于，当所述第一预设条件改变时，更新所述主页表。

5.根据权利要求2所述的测试数据分析方法，其特征在于，将获取的所述测试日志信息导入至关系数据库中具体包括：

将所述测试日志信息进行解析；

将解析后满足所述第一预设条件的测试日志信息导入至所述关系数据库的所述主页表中；

将解析后满足所述第一预设条件和所述第二预设条件的测试日志信息导入至所述关系数据库的所述子页表中。

6.一种测试数据分析系统，可执行权利要求1-6任一所述的测试数据分析方法，其特征在于，包括：

数据导入模块，用于将从测试平台获取的测试日志信息根据预设条件导入至关系数据库中；

数据导出模块，与所述数据导入模块通信连接，从所述关系数据库中导出符合预设字段的测试数据信息至所述客户端；

报告生成模块，与所述数据导出模块通信连接，将导出的符合预设字段的测试数据信息建立数据报告，分析测试装置的工作状态并显示在所述客户端。

7.根据权利要求6所述的测试数据分析系统，其特征在于，还包括：构建所述关系数据库包括：在所述关系数据库中建立主页表和子页表；

主页表创建模块，将待导入的数据设置第一标识信息和第一预设条件；根据待导入的数据设置的第一标识信息、所述第一预设条件以及待导入的数据的文件名构建所述主页表；

子页表创建模块，与所述主页表通信连接，根据所述主页表中设置的所述第一标识信息、第二标识信息以及所述第二预设条件构建所述子页表；

或，根据所述主页表中设置的所述第一标识信息、第二标识信息、所述第一预设条件、以及第二预设条件构建所述子页表；

信息关联模块，分别与所述主页表创建模块以及子页表创建模块通信连接，根据待导入的数据设置第一标识信息以及文件名将所述主页表与所述子页表进行关联设置。

8.根据权利要求7所述的测试数据分析系统，其特征在于，构建关系数据库包括：

在所述子页表构建模块进一步包括，将所述子页表中所述第二标识信息与所述待导入数据的类别一一对应设置；

其中，所述第一预设条件与所述第二预设条件中包括数据的类别。

9.根据权利要求7-所述的测试数据分析系统，其特征在于，所述主页表创建模块进一步包括：

当所述第一预设条件改变时，更新所述主页表。

10.根据权利要求6所述的测试数据分析系统，其特征在于，所述数据导入模块，具体包括：

数据解析模块，将所述测试日志信息进行解析；

所述数据导入模块进一步包括：将解析后满足所述第一预设条件的测试日志信息导入至所述关系数据库的所述主页表中；

将解析后满足所述第一预设条件和所述第二预设条件的测试日志信息导入至所述关系数据库的所述子页表中。