CN102346709A - 软件开发辅助方法及系统 - Google Patents

Abstract

本发明提供一种软件开发方法和系统。该方法包括：针对发布的软件或与该软件相关的软件更新，向用户设备提供相关的测试实例及其执行工具；从用户设备侧收集所述测试实例的执行信息；以及汇总分析所述测试实例的执行信息，以得出基于测试实例的软件使用分析结果。本发明通过使软件开发方随其软件或软件更新一同向用户提供共享的测试实例及执行工具，能够从用户设备直观地收集软件使用信息，从而尽早地发现其软件中的缺陷。

Description

软件开发辅助方法及系统

技术领域

本发明涉及数据处理技术，具体地，涉及软件开发辅助方法和系统。

背景技术

现今，大量的软件被不断的开发出来，被应用于计算机和对人们的生活有至关重要影响的机器，这些机器诸如ATM、汽车等。对于这些机器而言，所应用的软件需要是安全可靠的。但是，软件在发布后被发现存在缺陷是普遍存在的现象。一旦软件被发现存在缺陷，软件开发方应该尽快进行修补。一般，软件开发方通过发布补丁来修补其软件中的缺陷。

此外，即使软件中不存在缺陷，也需要其不断地改进来适应不断涌现的新功能、新技术的进步。从而，许多软件开发方为了满足人们的不断增加的功能需求，也会在其软件发布之后通过发布补丁来对其软件进行升级，这些补丁或者用来提供新功能，或者用来提供改进的功能。

在软件的开发过程中，软件开发方通常利用自动的测试实例来测试其所开发的软件。所谓自动的测试实例，是利用脚本实现的、代表软件中的某种功能的程序，其可由相应的自动执行工具来执行，该自动执行工具识别测试实例的执行成功或失败，并记录用于揭示软件的缺陷和问题调试所需的信息。

虽然软件开发人员通过这样的测试能够在软件开发阶段发现软件中的大部分缺陷并进行改进，但是仍然可能会有未被发现的缺陷遗留在软件中。

相对于此，由于不同的用户对于软件的使用会侧重于不同的方面，所以通过用户的使用，更容易发现软件中所存在的缺陷。从而，一般地，软件开发方通过从不同用户收集在软件使用过程中所遇到的问题的反馈来确定软件中的缺陷，进而开发用于修补缺陷的补丁。但是，这样的收集是花费时间和人力的，并且软件开发方与用户之间的沟通方式通常并不直观，软件开发方需要根据用户的描述重建用户的使用环境及操作步骤来寻找问题所在，这导致软件开发方难以有效地根据用户的反馈来确定软件中的缺陷。

此外，用于修补或提供新功能的软件补丁也有可能包含缺陷。虽然软件开发方在发布软件补丁之前也会利用测试实例对其进行测试，但是测试力度相较于正式发布的软件来说，有可能是不及的。目前，利用软件补丁来升级软件的工作可以由用户手动来进行，也可以通过更新管理器自动进行，该更新管理器通过检查软件的版本和补丁信息来自动地将相应的软件补丁部署到用户设备上。由于软件逐渐变得复杂和数目众多，所以自动部署软件补丁的方式越来越普及。

但是，如果软件补丁包含未被测试出的缺陷，则将其一次自动部署到所有用户设备上来进行软件升级的自动部署方式，对于要求安全可靠性的机器而言将是非常危险的。

因此，希望有选择地将软件补丁自动部署到用户设备上，以避免所有用户设备都暴露于软件补丁所带来的潜在危险中。

发明内容

鉴于上述问题，本发明提供一种软件开发辅助方法和系统，以便根据从用户收集的基于共享的测试实例的软件使用情况，来辅助软件的开发、修补和完善以及软件更新的自动部署。在此，将软件开发方为修补其已发布的软件而开发的软件补丁或为提供新功能而开发的软件补丁统称为软件更新。

根据本发明的一个方面，提供了一种软件开发辅助方法，包括：针对发布的软件或与该软件相关的软件更新，向用户设备提供相关的测试实例及其执行工具，其中相关的测试实例及其执行工具用于测试所述软件或软件更新；从用户设备侧收集所述测试实例的执行信息；以及汇总分析所述测试实例的执行信息，以得出基于测试实例的软件使用分析结果。

根据本发明的另一个方面，提供了一种软件开发辅助方法，包括：针对发布的软件或与该软件相关的软件更新，从软件开发方获得相关的测试实例及其执行工具，其中相关的测试实例及其执行工具用于测试所述软件或软件更新；针对所述软件或软件更新，利用所述执行工具执行所述测试实例；收集所述测试实例的执行信息，以反馈给软件开发方。

根据本发明的再一个方面，提供了一种软件开发辅助系统，包括：测试实例管理单元，被配置为针对发布的软件或与该软件相关的软件更新，向用户设备提供相关的测试实例及其执行工具，其中相关的测试实例及其执行工具用于测试所述软件或软件更新；并且从用户设备侧收集所述测试实例的执行信息；以及分析单元，被配置为汇总分析从用户设备收集的所述测试实例的执行信息，以得出基于测试实例的软件使用分析结果。

根据本发明的再一个方面，提供了一种软件开发辅助系统，包括：测试实例及其执行工具，与软件或软件更新相关并在软件或与该软件相关的软件更新的发布时从软件开发方获得，其中相关的测试实例及其执行工具用于测试所述软件或软件更新；测试实例管理单元，被配置为调用所述执行工具执行所述测试实例，并收集所述测试实例的执行信息，以反馈给软件开发方。

采用本发明，通过随软件或软件更新一同向用户提供相关的测试实例及其执行工具，能够从用户设备直观有效地收集与测试实例相关的软件使用信息，从而帮助软件开发方尽早有效地发现其软件或软件更新中的缺陷。

附图说明

相信通过以下结合附图对本发明具体实施方式的说明，能够使人们更好地了解本发明上述的特点、优点和目的。

图1是根据本发明实施例1的软件开发辅助系统的方框图；

图2是与图1的系统相应的软件开发辅助方法的流程图；

图3是根据本发明实施例2的软件开发辅助系统的方框图；

图4是与图3的方法相应的软件开发辅助方法的流程图；

图5是根据本发明实施例3的软件开发辅助系统的方框图；以及

图6是与图5的系统相应的软件开发辅助方法的流程图。

具体实施方式

下面就结合附图对本发明的各个优选实施例进行详细说明。在以下的说明中，同样，将软件开发方为修补其已发布的软件而开发的软件补丁或为提供新功能而开发的软件补丁统称为软件更新。

(实施例1)

首先，说明本发明实施例1的软件开发辅助方法和系统。

图1是根据本发明实施例1的软件开发辅助系统的方框图。

如图1所示，该系统10包括用户设备侧的测试实例库11、测试实例创建单元12、测试实例执行单元13、测试实例管理单元14以及软件开发方设备侧的测试实例管理单元15、测试实例执行信息库16、分析单元17。

在用户设备侧，测试实例库11存储有大量用于测试软件18或其软件更新的功能的测试实例。这些测试实例的每一个利用脚本生成，代表软件18或其软件更新中的某种功能，可由自动执行工具来执行以测试该功能是否正常工作。

测试实例库11中的测试实例可以在软件18或其软件更新的发布时，由软件开发方向用户设备提供。在一个实施例中，这些测试实例随所述软件18或其软件更新一同被提供给用户设备，即与该软件18或其软件更新打包在一起。在另一个实施例中，这些测试实例被提供在用户设备能够访问的软件开发方站点，用户根据一定的条件获得之。

进而，该测试实例库11中的测试实例与软件开发方在开发软件18或其软件更新时所使用的测试实例完全相同，也可以是其中的一部分。

测试实例创建单元12用于在用户设备侧针对软件18或其软件更新创建新的测试实例。在此，利用测试实例创建单元13所创建出的新的测试实例也可以被添加到测试实例库11中。

由于软件开发人员所生成的测试实例是基于其自身的角度而生成的，可能是有限的而未涵盖所有的用户使用环境或操作步骤，利用这样的测试实例有可能使软件开发人员未测试到软件或软件更新的方方面面，使未发现的缺陷遗留在软件或软件更新中。

相对于此，由于不同的用户对于软件的使用会侧重于不同的方面，所以如果用户能够根据自身对软件的使用需求来创建与特定软件功能相关的测试实例，则将更容易帮助软件开发方发现软件或软件更新中的缺陷。因此，在用户设备侧具备能够创建测试实例的测试实例创建单元12，对于软件或软件更新的改进来说将是非常有利的。

该测试实例创建单元12可以由软件开发方随软件18或其软件更新一同发布的测试实例创建工具来实现。该测试实例创建工具既可以随所述软件18或其软件更新一同被提供给用户设备，也可以被提供在用户设备能够访问的软件开发方站点。

进而，该测试实例创建工具可以与软件开发方在开发软件18或其软件更新时所使用的测试实例创建工具相同，也可以是简化的创建工具。

测试实例执行单元13用于针对软件18或其软件更新，调用测试实例库11中的测试实例并在用户设备上执行，并记录执行结果。

具体地，该测试实例执行单元13识别测试实例的执行的成功或失败，如果测试实例执行成功，则生成表示测试实例执行成功的记录；如果执行失败，则生成表示测试实例执行失败的记录。此外，该失败记录可以包括多种信息，诸如具体的测试实例失败表现以及用户的具体操作等，以便能够详细描述测试实例的失败细节。

该测试实例执行单元13可以由软件开发方随软件18或其软件更新一同发布的测试实例执行工具来实现。同样，该测试实例执行工具既可以随软件18或其软件更新一同被提供给用户设备，也可以被提供在用户设备能够访问的软件开发方站点。

进而，该测试实例执行工具可以与软件开发方在开发软件18或其软件更新时所使用的测试实例执行工具相同，也可以是简化的执行工具。

测试实例管理单元14在用户设备侧调用测试实例执行工具13以执行测试实例库11中的测试实例，并收集测试实例的执行信息，以反馈给软件开发方。此外，在软件开发方通过其站点提供测试实例的情况下，该测试实例管理单元14还负责从该站点下载测试实例并存储到测试实例库11。

此外，在测试实例库11中的测试实例是利用测试实例创建单元12新创建的测试实例的情况下，该测试实例管理单元14将该新创建的测试实例与其执行信息一同反馈给软件开发方。

此外，测试实例管理单元14向软件开发方反馈上述执行信息以及新的测试实例(如果存在的话)的方式可以是多样的，其可以周期地上报所收集的执行信息以及新的测试实例(如果存在的话)，并且在发生了测试实例执行失败的情况下，实时地在线向软件开发方发送关于该测试实例执行失败的通知并反馈执行信息。

此外，测试实例管理单元14可以将执行信息以及新的测试实例(如果存在的话)直接反馈给软件开发方设备。也可以在软件开发方通过站点的测试实例执行信息库来收集测试实例的执行信息的情况下，周期地将执行信息以及新的测试实例(如果存在的话)上传到该测试实例执行信息库。

测试实例管理单元14可以由软件开发方随软件18或其软件更新一同发布的测试实例管理工具来实现。同样，该测试实例管理工具既可以随软件18或其软件更新一同被提供给用户设备，也可以被提供在用户设备能够访问的软件开发方站点。

在软件开发方设备侧，测试实例管理单元15周期地或在从用户设备接收到测试实例执行失败的通知时，从用户设备收集测试实例的执行信息以及新的测试实例(如果存在的话)，并存储到测试实例执行信息库16。在软件开发方通过站点的测试实例库来向用户设备提供测试实例的情况，该测试实例管理单元15还负责将软件开发方的测试实例上传到该站点的测试实例库。

分析单元17汇总分析测试实例执行信息库16中的执行信息，以得出基于测试实例的软件使用分析结果。具体地，该分析单元17通过分析，报告出软件功能使用、执行结果和/或功能出错统计等，这些统计诸如是某一功能被使用的频率、某一功能出错的频率等。

从而，在软件开发方侧，能够以该分析单元17所给出的软件使用分析结果为指导，开发或自动部署其下一版本的软件更新。

以上就是图1的软件开发辅助系统的详细描述。需要说明的是，虽然在图1所示出的系统中，在用户设备侧包括了测试实例创建单元12，但是可以理解，该测试实例创建单元12并不是必须的，在具体实现中，也可以在用户设备侧不包括该单元，而仅执行软件开发方所提供的测试实例。

此外，还需要说明的是，虽然在图1的系统中将用户设备侧和软件开发方侧结合在一起进行了图示和说明，但是可以理解，用户设备侧的系统部分和软件开发方设备侧的系统部分是可以分别作为单独的系统来实现和使用的。因此，在实际的实现中，也可以将图1的系统划分为与用户侧有关的软件开发辅助系统(包括上面图1中的测试实例库11、测试实例创建单元12、测试实例执行单元13、测试实例管理单元14)和与软件开发方侧有关的软件开发辅助系统(包括上面图1中的测试实例管理单元15、测试实例执行信息库16、分析单元17)来分别实现。

下面结合图2描述本实施例的与图1的系统相应的软件开发辅助方法。

如图2所示，在该方法中，首先在步骤205，针对软件开发方所发布的软件18或与软件18相关的软件更新，在用户设备侧从软件开发方获得相关的测试实例及其执行工具。

如上所述，在用户设备侧可以从软件开发方随软件18或其软件更新一同获得相关的测试实例及其执行工具，也可以通过能够访问的软件开发方站点来获得。

在此，在用户设备侧，将从软件开发方所获得的测试实例存储到测试实例库11中，并且安装软件开发方所提供的测试实例执行工具从而形成测试实例执行单元13。

在可选步骤210，在用户设备侧针对软件18或其软件更新创建新的测试实例。

本步骤利用软件开发方随软件18或软件更新一同提供或提供在用户设备能够访问的软件开发方站点的测试实例创建工具来实现。

在步骤215，在用户设备侧利用测试实例执行工具，针对软件18或其软件更新执行测试实例库11中的测试实例，以测试该软件18或其软件更新的功能。

在此，上述测试实例可以是软件开发方所提供的测试实例，也可以是用户新创建的测试实例。

在步骤220，在用户设备侧收集上述测试实例的执行信息，以反馈给软件开发方。

具体地，在本步骤中，收集测试实例执行工具所生成的测试实例执行记录，测试实例执行记录表示测试实例的执行成功或失败。并且如果测试实例执行失败，则测试实例执行记录包含更多的信息，诸如具体的测试实例失败表现以及用户的具体操作等。

此外，在测试实例是用户设备侧新创建的测试实例的情况下，在本步骤中将该新创建的测试实例与其执行信息一同反馈给软件开发方。

进而，在本步骤中，周期地向软件开发方反馈所收集的测试实例的执行信息以及新的测试实例(如果存在的话)，并且在发生了测试实例执行失败的情况下，实时地在线向软件开发方发送关于该测试实例执行失败的通知并反馈执行信息。

本步骤利用软件开发方随软件18或软件更新一同提供或提供在用户设备能够访问的软件开发方站点的测试实例管理工具来实现。

在步骤225，在软件开发方侧汇总分析从用户设备反馈的测试实例的执行信息以及新的测试实例(如果存在的话)，以得出基于测试实例的软件使用分析结果。

在该步骤中，在软件开发方侧，通过测试实例的执行信息以及新的测试实例(如果存在的话)的汇总分析，得出基于测试实例的功能使用、执行结果和/或功能出错统计等软件使用分析结果，这些统计诸如某一功能被使用的频率、某一功能出错的频率等。

从而，在软件开发方侧，能够以上述软件使用分析结果为指导，开发或自动部署其下一版本的软件更新。

以上就是图2的软件开发辅助方法的详细描述。需要说明的是，虽然在图2的方法中将用户设备侧和软件开发方侧结合在一起进行了图示和说明，但是可以理解，用户设备侧的方法步骤和软件开发方设备侧的方法步骤是可以分别作为单独的方法来实现和使用的。因此，在实际的实现中，也可以将图2的方法划分为与用户侧有关的软件开发辅助方法和与软件开发方侧有关的软件开发辅助方法来分别实现，其中与用户侧有关的软件开发辅助方法包括上面图2中的步骤205、可选步骤210、步骤215和220，与软件开发方侧有关的软件开发辅助方法包括上面图2中的步骤205(此时为软件开发方向用户设备提供相关的测试实例及其执行工具)、步骤220(此时为从用户设备侧收集测试实例的执行信息)以及步骤225。

以上，结合图1和图2对本实施例的软件开发辅助方法和系统进行了详细描述。本实施例通过使软件开发方随其软件或软件更新一同向用户提供共享的测试实例及执行工具，使用户能够以与软件开发方一致的方式利用在测试过程中所生成的信息更好地与软件开发方进行沟通，使软件开发方能够从用户设备直观有效地收集基于测试实例的软件使用信息，从而尽早地发现其软件或软件更新中的缺陷，或更好地有选择地自动部署其新开发的软件更新。

(实施例2)

在上面描述的实施例1的软件开发辅助方法和系统的基础上，下面描述本发明实施例2的软件开发辅助方法和系统。

图3是根据本发明实施例2的软件开发辅助系统的方框图。

如图3所示，该系统30在图1所示的系统10的基础上，还在软件开发方设备侧包括缺陷跟踪单元31。

具体地，在该系统30中，在软件开发方侧针对其已经发布的软件18或与该软件相关的软件更新，利用系统10获得用户设备侧的测试实例的执行信息以及基于测试实例的软件使用分析结果。

接着，软件开发方设备侧的缺陷跟踪单元31根据系统10的测试实例的执行信息以及软件使用分析结果，确定软件18或其软件更新中所存在的缺陷或经常使用的功能。

从而，在软件开发方侧，根据该缺陷跟踪单元18所确定的缺陷或经常使用的功能，确定新的软件更新的开发方向，开发用于修补软件18或其软件更新中所存在的缺陷的下一版本的软件更新，或开发用于提供新功能以增强软件18或其软件更新中经常使用的功能的下一版本的软件更新。

以上就是图3的软件开发辅助系统的详细描述。

下面结合图4描述本实施例的与图3的系统相应的软件开发辅助方法。

如图4所示，在该方法中，首先在步骤405，在软件开发方侧针对其已经发布的软件18或与该软件相关的软件更新，利用图2的方法，获得用户设备侧的测试实例的执行信息以及基于测试实例的软件使用分析结果。

接着，在步骤410，在软件开发方侧根据所述测试实例的执行信息以及软件使用分析结果，确定软件18或其软件更新中所存在的缺陷或经常使用的功能。

从而，在软件开发方侧开发用于修补软件18或其软件更新中所存在的缺陷或与经常使用的功能相关的下一版本的软件更新。

以上就是对本实施例的软件开发辅助方法和系统的详细描述。本实施例通过使软件开发方能够从用户设备直观有效地收集基于测试实例的软件使用信息，能够帮助软件开发方尽早地发现其软件或软件更新中的缺陷并通过开发软件更新来进行修补。此外，由于通常软件开发方没有有效的方式来获知用户对于其已发布的软件的进一步需求以及使用情况，所以难以确定下一次软件更新的开发方向。但是，利用本实施例，能够使软件开发方基于从用户设备收集的共享的测试实例的执行信息获知用户的功能需求，从而确定进一步的软件更新的开发方向，以提供更加符合用户需求的软件功能。

(实施例3)

在上面描述的实施例1和2的软件开发辅助方法和系统的基础上，下面描述本发明实施例3的软件开发辅助方法和系统。

图5是根据本发明实施例3的软件开发辅助系统的方框图。

如图5所示，该系统50在图1所示的系统10的基础上，还在软件开发方设备侧包括自动部署单元51和自动部署设置单元52。

具体地，在该系统50中，在软件开发方侧针对其已经发布的软件18或与该软件相关的软件更新，利用系统10获得用户设备侧的测试实例的执行信息以及基于测试实例的软件使用分析结果。

接着，软件开发方设备侧的自动部署单元51根据上述测试实例的执行信息以及软件使用分析结果，将在软件开发方侧针对软件18新开发的软件更新53选择性地自动部署到与该软件更新所涉及的功能密切相关的一部分用户设备。

在此，与新的软件更新53所涉及的功能密切相关的一部分用户设备，可以是根据上述测试实例的执行信息以及软件使用分析结果而确定的经常使用该功能的用户设备，也可以是所确定的先前通过执行与该功能相关的测试实例而出现了执行失败的用户设备。

此外，该自动部署单元51还将与新的软件更新53相关的测试实例与该新的软件更新一同自动部署到上述一部分用户设备。

进而，在软件开发方侧，利用系统10周期地或在接收到执行失败的通知时从该一部分用户设备获得与新的软件更新53相关的测试实例的执行信息以及软件使用分析结果，并且自动部署设置单元52根据从该一部分用户设备获得的测试实例的执行信息以及软件使用分析结果，对新的软件更新53确定自动部署设置，并将自动部署设置通知给自动部署单元51。

具体地，所述自动部署设置可以包括是否向除了已被部署新的软件更新53的用户设备之外的其他用户设备全面部署该新的软件更新的设置和/或向哪些用户设备自动部署该新的软件更新的设置等。例如，在自动部署设置单元52根据从该一部分用户设备获得的测试实例的执行信息及其分析结果发现新的软件更新53中存在缺陷时，进行暂时不全面部署该新的软件更新的自动部署设置，以待软件开发方对该软件更新53进行改进。又例如，对于根据从该一部分用户设备获得的测试实例的执行信息及其分析结果而确定了基本上不使用该新的软件更新所涉及的功能的用户设备，进行不部署该新的软件更新53的自动部署设置等。

可以理解，如果软件开发方根据所获得的测试实例的执行信息及其分析结果发现了新的软件更新53中所存在的缺陷，则将首先对该缺陷进行改进，然后再进行新的软件更新53的全面自动部署。

从而，自动部署单元51根据自动部署设置单元52的设置，进行新的软件更新53向其它用户设备的自动部署。

以上就是图5的软件开发辅助系统的详细描述。

下面结合图6描述本实施例的与图5的系统相应的软件开发辅助方法。

如图6所示，在该方法中，首先在步骤605，在软件开发方侧针对其已发布的软件或与该软件相关的软件更新，利用图2的方法，获得用户设备侧的测试实例的执行信息以及基于测试实例的软件使用分析结果。

接着，在步骤610，在软件开发方侧根据所述测试实例的执行信息以及软件使用分析结果，确定与针对软件18新开发的软件更新53所涉及的功能密切相关的一部分用户设备。

在本步骤中，可以根据上述测试实例的执行信息及其分析结果确定经常使用新的软件更新53所涉及的功能的用户设备，也可以确定先前通过执行与该功能相关的测试实例而出现了执行失败的用户设备，作为与该新的软件更新53所涉及的功能密切相关的一部分用户设备。

在步骤615，在软件开发方侧将新的软件更新53以及相关的测试实例选择性地自动部署到上述一部分用户设备。

在步骤620，在软件开发方侧利用图2的方法从所述一部分用户设备收集与新的软件更新53相关的测试实例的执行信息以及软件使用分析结果。

在步骤625，根据与新的软件更新53相关的测试实例的执行信息以及软件使用分析结果，对新的软件更新53确定自动部署设置。

在步骤630，在软件开发方侧根据所述自动部署设置进行新的软件更新53向其它用户设备的自动部署。

可以理解，在该步骤中，如果软件开发方根据所获得的测试实例的执行信息及其分析结果发现了新的软件更新53中所存在的缺陷，则将首先对该缺陷改进，然后再进行新的软件更新53的全面自动部署。

以上就是对本实施例的软件开发辅助方法和系统的详细描述。本实施例通过使软件开发方根据从用户设备直观有效地收集的基于测试实例的软件使用信息，选择性地将新开发的软件更新自动部署到与该软件更新的功能密切相关的一小部分用户设备处来进行检验，进而根据检验结果再确定是否全面部署该软件更新，能够避免因全面自动部署软件更新而同时在大批用户设备上引发问题的情况。

此外，需要说明的是，以上虽然对实施例2、3的软件开发辅助方法和系统分别进行了说明，但这仅是为了说明的方便而采用的描述形式。在实际实现中，也可以将实施例2、3相结合来实现，即在实施例3的软件开发辅助方法和系统中，所自动部署的软件更新是通过实施例2的软件开发辅助方法或系统开发出的用于修补软件18或其软件更新中所存在的缺陷或与经常使用的功能相关的下一版本的软件更新。

此外，还需要指出的是，上述图1的系统10、图3的系统30、图5的系统50及其各个组成部分，可以由专用的电路或芯片构成，也可以通过计算机(处理器)执行相应的程序来实现。

以上虽然通过一些示例性的实施例对本发明的软件开发辅助方法和系统进行了详细的描述，但是以上这些实施例并不是穷举的，本领域技术人员可以在本发明的精神和范围内实现各种变化和修改。因此，本发明并不限于这些实施例，本发明的范围仅以所附权利要求为准。

Claims (19)

1.一种软件开发辅助方法，包括：

针对发布的软件或与该软件相关的软件更新，向用户设备提供相关的测试实例及其执行工具，其中相关的测试实例及其执行工具用于测试所述软件或软件更新；

从用户设备侧收集所述测试实例的执行信息；以及

汇总分析所述测试实例的执行信息，以得出基于测试实例的软件使用分析结果。

2.根据权利要求1所述的方法，其中所述测试实例及其执行工具与所述软件或软件更新一同打包而提供给所述用户设备。

3.根据权利要求1所述的方法，其中所述测试实例及其执行工具通过所述用户设备能够访问的软件开发方站点提供给所述用户设备。

4.根据权利要求1所述的方法，其中所述基于测试实例的软件使用分析结果包括所述软件或软件更新的功能使用、执行结果和/或功能出错统计。

5.根据权利要求1-4中的任意一项所述的方法，包括：

根据所述测试实例的执行信息以及软件使用分析结果，确定所述软件或软件更新中所存在的缺陷或经常使用的功能。

6.根据权利要求5所述的方法，包括：

将针对所述软件或软件更新中所存在的缺陷或经常使用的功能开发的新的软件更新选择性地自动部署到与该新的软件更新所涉及的功能密切相关的一部分用户设备。

7.一种软件开发辅助方法，包括：

针对发布的软件或与该软件相关的软件更新，从软件开发方获得相关的测试实例及其执行工具，其中相关的测试实例及其执行工具用于测试所述软件或软件更新；

针对所述软件或软件更新，利用所述执行工具执行所述测试实例；

收集所述测试实例的执行信息，以反馈给软件开发方。

8.根据权利要求7所述的方法，还包括：

针对所述软件或软件更新创建新的测试实例；

利用所述执行工具，与从软件开发方获得的测试实例一同执行所述新的测试实例；

其中，将所述新的测试实例与其执行信息一同反馈给软件开发方。

9.根据权利要求8所述的方法，其中所述针对所述软件或软件更新创建新的测试实例通过软件开发方与所述软件或软件更新一同向用户设备提供的测试实例创建工具实现。

10.根据权利要求1或7所述的方法，其中所述测试实例的执行信息包括表示所述测试实例的执行成功或失败的记录。

11.一种软件开发辅助系统，包括：

测试实例管理单元，被配置为针对发布的软件或与该软件相关的软件更新，向用户设备提供相关的测试实例及其执行工具，其中相关的测试实例及其执行工具用于测试所述软件或软件更新，并且从用户设备侧收集所述测试实例的执行信息；以及

分析单元，被配置为汇总分析从用户设备收集的所述测试实例的执行信息，以得出基于测试实例的软件使用分析结果。

12.根据权利要求11所述的系统，其中所述测试实例及其执行工具与所述软件或软件更新一同打包而提供给所述用户设备。

13.根据权利要求11所述的系统，其中所述测试实例库及其执行工具通过所述用户设备能够访问的软件开发方站点提供给所述用户设备。

14.根据权利要求11所述的系统，其中所述基于测试实例的软件使用分析结果包括所述软件或软件更新的功能使用、执行结果和/或功能出错统计。

15.根据权利要求11-14中的任意一项所述的系统，包括：

缺陷跟踪单元，被配置为根据所述测试实例的执行信息以及软件使用分析结果，确定所述软件或软件更新中所存在的缺陷或经常使用的功能。

16.根据权利要求15所述的系统，包括：

自动部署单元，被配置为将针对所述软件或软件更新中所存在的缺陷或经常使用的功能开发的新的软件更新选择性地自动部署到与该新的软件更新所涉及的功能密切相关的一部分用户设备。

17.一种软件开发辅助系统，包括：

测试实例及其执行工具，与软件或软件更新相关并在软件或与该软件相关的软件更新的发布时从软件开发方获得，其中相关的测试实例及其执行工具用于测试所述软件或软件更新；

测试实例管理单元，被配置为调用所述执行工具执行所述测试实例，并收集所述测试实例的执行信息，以反馈给软件开发方。

18.根据权利要求17所述的系统，还包括：

测试实例创建单元，用于针对所述软件或软件更新创建新的测试实例；

其中所述测试实例管理单元调用所述执行工具与从软件开发方所获得的测试实例一同执行所述新的测试实例，并将所述新的测试实例与其执行信息一同反馈给软件开发方。

19.根据权利要求11或17所述的系统，其中所述测试实例的执行信息包括表示所述测试实例的执行成功或失败的记录。

Images