CN112860683A - 数据集实时清理方法、装置及系统 - Google Patents

Abstract

一种数据集实时清理方法、装置及系统，可用于金融领域或其他领域。方法包括：根据本地的FTP信息及数据集名称参数，创建共享数据集及作业数据集；根据FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，将其添加至所述主机作业脚本的尾部；将主机作业脚本写入作业数据集中，得到待执行作业数据集，将待执行作业数据集提交至第二站点；接收并执行第二站点返回的数据集清理作业脚本，对共享数据集及待执行作业数据集进行删除。本发明解决了不同站点间清理数据集存在的问题，无需依赖数据库，在数据库不可用情况下，依然可以远程安装并自动实时清理本地和远程站点数据集，主机资源占用更少，简单易实施。

Description

数据集实时清理方法、装置及系统

技术领域

本发明涉及数据集技术领域，尤指一种数据集实时清理方法、装置及系统。

背景技术

在主机不同站点之间，可根据需要远程安装主机资源，如CICS定义、CICS安装等，但无删除对方创建的DATASET(数据集)的权限。一个通用的做法是，在本地站点生成共享DATASET和安装作业，作业内容写到作业DATASET，作业信息写到DB2数据库，然后通过FTP将作业DATASET提交到远程站点执行，并监视DB2数据库中的作业执行状态；远程站点执行完作业后，更新DB2数据库中的作业执行状态为已完成；本地站点读到远程作业执行状态为已完成后，将本地站点的共享DATASET删除。现有方法虽能完成需要的功能，但实现起来较为繁琐，且依赖于DB2数据库，如数据库因维护或故障暂停服务，会影响站点间的通讯，导致本地站点的共享DATASET需要手工清理。因此，需要一种更好的数据集实时清理方法。

发明内容

针对现有技术中存在的问题，本发明实施例的主要目的在于提供一种数据集实时清理方法、装置及系统，实现无需依赖数据库进行数据集实时清理、简单易实施，且资源占用更少。

为了实现上述目的，本发明实施例提供一种数据集实时清理方法，所述方法包括：

根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集；

根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部；

将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致；

接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

可选的，在本发明一实施例中，所述执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除包括：

根据所述数据集清理作业脚本，确定所述数据集清理作业脚本中的待执行作业数据集名称；

若获知所述待执行作业数据集名称中包括所述共享数据集的名称及作业数据集的名称，则对所述共享数据集及所述待执行作业数据集进行删除。

本发明实施例还提供一种数据集实时清理方法，所述方法包括：

接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本；

执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称；

根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中；

根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集。

可选的，在本发明一实施例中，所述根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点包括：根据所述第一站点FTP信息中的IP地址，利用与所述IP地址对应的通讯接口，将所述数据集清理作业脚本提交至所述第一站点。

本发明实施例还提供一种数据集实时清理装置，所述装置包括：

数据集创建模块，用于根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集；

清理作业步模块，用于根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部；

主机作业脚本模块，用于将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致；

数据集清理模块，用于接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

可选的，在本发明一实施例中，所述数据集清理模块包括：

数据集名称单元，用于根据所述数据集清理作业脚本，确定所述数据集清理作业脚本中的待执行作业数据集名称；

数据集清理单元，用于若获知所述待执行作业数据集名称中包括所述共享数据集的名称及作业数据集的名称，则对所述共享数据集及所述待执行作业数据集进行删除。

本发明实施例还提供一种数据集实时清理装置，所述装置包括：

作业脚本接收模块，用于接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本；

数据集名称模块，用于执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称；

清理作业脚本模块，用于根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中；

作业脚本提交模块，用于根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集。

可选的，在本发明一实施例中，所述作业脚本提交模块还用于根据所述第一站点FTP信息中的IP地址，利用与所述IP地址对应的通讯接口，将所述数据集清理作业脚本提交至所述第一站点。

本发明实施例还提供一种数据集实时清理系统，所述系统包括：第一站点、与所述第一站点通信连接的第二站点；

第一站点根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集；根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部；将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致；

第二站点接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本；执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称；根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中；根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集；

第一站点接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

可选的，在本发明一实施例中，所述第一站点还用于根据所述数据集清理作业脚本，确定所述数据集清理作业脚本中的待执行作业数据集名称；若获知所述待执行作业数据集名称中包括所述共享数据集的名称及作业数据集的名称，则对所述共享数据集及所述待执行作业数据集进行删除。

可选的，在本发明一实施例中，所述第二站点还用于根据所述第一站点FTP信息中的IP地址，利用与所述IP地址对应的通讯接口，将所述数据集清理作业脚本提交至所述第一站点。

本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述方法。

本发明还提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述方法的计算机程序。

本发明通过在主机作业末尾增加一个带有站点追溯和原站点数据集清理功能的作业步的方式，解决了不同站点间清理数据集占用较多主机资源、实施繁琐及过度依赖数据库的问题，无需依赖数据库，在数据库不可用情况下，依然可以远程安装并自动实时清理本地和远程站点数据集，主机资源占用更少，简单易实施。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例一种数据集实时清理方法的流程图；

图2为本发明实施例中数据集清理的流程图；

图3为本发明另一实施例中一种数据集实时清理方法的流程图；

图4为本发明实施例一种数据集实时清理系统的结构示意图；

图5为本发明实施例中数据集实时清理系统的工作流程图；

图6为本发明实施例一种数据集实时清理装置的结构示意图；

图7为本发明实施例中数据集清理模块的结构示意图；

图8为本发明另一实施例中一种数据集实时清理装置的结构示意图；

图9为本发明一实施例所提供的电子设备的结构示意图。

具体实施方式

本发明实施例提供一种数据集实时清理方法、装置及系统，可用于金融领域或其他领域，需要说明的是，本发明的数据集实时清理方法、装置及系统可用于金融领域，也可用于除金融领域之外的任意领域，本发明的数据集实时清理方法、装置及系统应用领域不做限定。

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1所示为本发明实施例一种数据集实时清理方法的流程图，本发明实施例提供的数据集实时清理方法的执行主体包括但不限于计算机，执行方可以为本地站点(第一站点)主机。图中所示方法包括：

步骤S11，根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集。

其中，作业请求可以为远程安装主机资源作业，采用常规的技术手段生成主机作业脚本。本发明中的数据集，即DATASET，是逻辑上相关的数据集合，为IBM主机上的数据、程序源码等可存放于数据集中，类似PC机中的“文件”。本地站点(第一站点)的FTP(文件传输协议)信息及数据集名称参数，其中，FTP信息中包括本地站点的IP地址、用户名、密码等信息，数据集名称参数为后续创建共享数据集、作业数据集等使用的输入参数。

具体的，第一站点利用作业请求创建对应的共享数据集及作业数据集。进一步的，共享数据集可以在共享磁盘中创建，作业数据集可以在第一站点内创建。

步骤S12，根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部。

其中，数据集清理作业生成作业步具有站点追溯和原站点数据集清理功能，具体的，数据集清理作业生成作业步中包括第一站点的FTP信息、待清理的数据集的名称。其中，待清理的数据集包括第一站点生成的共享数据集及作业数据集。

进一步的，主机作业脚本可以为远程安装主机资源作业脚本等。主机作业脚本是由第一站点生成，并由远程站点(第二站点)执行的作业脚本。此外，在主机作业脚本的尾部加入数据集清理作业生成作业步。

步骤S13，将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致。

其中，第一站点将添加了数据集清理作业生成作业步的主机作业脚本写入作业数据集中，将此时的作业数据集作为待执行数据集，并提交至第二站点。进一步的，写入了主机作业脚本的待执行作业数据集的名称不变，与未写入主机作业脚本的作业数据集的名称保持一致，即待执行作业数据集与作业数据集为同一数据集，仅存在是否写入主机作业脚本的区别。

具体的，FTP信息中还包括第二站点的IP地址，通过通讯接口，将待执行作业数据集提交至第二站点，由第二站点运行待执行作业数据集。

步骤S14，接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

其中，在第二站点执行到主机作业脚本中的数据集清理作业生成作业步时，第二站点生成数据集清理作业脚本，并将数据集清理作业脚本提交至第一站点。第一站点接收并执行数据集清理作业脚本，数据集清理作业脚本中包括待清理数据集的名称。若数据集清理作业脚本中待清理的数据集名称包括第一站点创建的共享数据集及待执行作业数据集，则执行数据集清理操作，即删除共享数据集及待执行作业数据集，由此实现数据集的清理。

作为本发明的一个实施例，如图2所示，执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除包括：

步骤S141，根据所述数据集清理作业脚本，确定所述数据集清理作业脚本中的待执行作业数据集名称。

其中，在第二站点执行到主机作业脚本中的数据集清理作业生成作业步时，第二站点生成数据集清理作业脚本，并将数据集清理作业脚本提交至第一站点。第一站点接收并执行数据集清理作业脚本，数据集清理作业脚本中包括待清理数据集的名称。

步骤S142，若获知所述待执行作业数据集名称中包括所述共享数据集的名称及作业数据集的名称，则对所述共享数据集及所述待执行作业数据集进行删除。

其中，若数据集清理作业脚本中待清理的数据集名称包括第一站点创建的共享数据集及待执行作业数据集，则执行数据集清理操作，即删除共享数据集及待执行作业数据集，由此实现数据集的清理。

如图3所示为本发明另一实施例中一种数据集实时清理方法的流程图，本发明实施例提供的数据集实时清理方法的执行主体包括但不限于计算机，执行方可以为远程站点(第二站点)主机。图中所示方法包括：

步骤S21，接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本。

其中，远程站点(第二站点)接收第一站点发送的待执行作业数据集，待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本。数据集清理作业生成作业步中包括待清理的数据集名称及待清理数据集所在的站点FTP信息，即第一站点FTP信息。

步骤S22，执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称。

其中，第二站点执行主机作业脚本，当执行到主机作业脚本尾部的数据集清理作业生成作业步时，根据集清理作业步，确定其中包括待清理的数据集名称，即共享数据集的名称及作业数据集的名称(与待执行作业数据集名称相同)，以及待清理数据集所在的站点FTP信息，即第一站点FTP信息。

步骤S23，根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中。

其中，根据共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本。此外，生成的数据集清理作业脚本写入第二站点的临时数据集中。具体的，临时数据集可以根据主机作业脚本生成，例如，生成的临时数据集名称可根据共享数据集的名称及作业数据集的名称生成。

步骤S24，根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集。

其中，根据第一站点的FTP信息，可知第一站点的IP地址、用户名及密码等信息。根据FTP信息与第一站点进行通讯连接，将生成的数据集清理作业脚本提交至第一站点，并删除临时数据集。

进一步的，临时数据集的删除可以在间隔预设时间后，自动删除临时数据集。或者，第二站点读取共享磁盘中的共享数据集，若共享数据集已被删除，则删除临时数据集。

作为本发明的一个实施例，根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点包括：根据所述第一站点FTP信息中的IP地址，利用与所述IP地址对应的通讯接口，将所述数据集清理作业脚本提交至所述第一站点。

其中，根据第一站点的FTP信息，可知第一站点的IP地址、用户名及密码等信息。根据第一站点的FTP信息的IP地址，利用与IP地址对应的通讯接口，与第一站点进行通讯连接，将生成的数据集清理作业脚本提交至第一站点。

如图4所示为本发明实施例一种数据集实时清理系统的结构示意图，图中所示系统包括：第一站点、与第一站点通信连接的第二站点；

第一站点根据根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集；根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将数据集清理作业生成作业步添加至所述主机作业脚本的尾部；将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将待执行作业数据集提交至第二站点；其中，待执行作业数据集的名称与所述作业数据集的名称保持一致。

其中，第一站点根据作业请求生成主机作业脚本，并创建名称与数据集名称参数对应的共享数据集及作业数据集。进一步的，共享数据集可以在共享磁盘中创建，作业数据集可以在第一站点内创建。作业请求可以为远程安装主机资源作业，采用常规的技术手段生成主机作业脚本。

进一步的，数据集清理作业生成作业步具有站点追溯和原站点数据集清理功能，具体的，数据集清理作业生成作业步中包括第一站点的FTP信息、待清理的数据集的名称。其中，待清理的数据集包括第一站点生成的共享数据集及作业数据集。

进一步的，主机作业脚本可以为远程安装主机资源作业脚本等。主机作业脚本是由第一站点生成，并由远程站点(第二站点)执行的作业脚本。此外，在主机作业脚本的尾部加入数据集清理作业生成作业步。

其中，第一站点将添加了数据集清理作业生成作业步的主机作业脚本写入作业数据集中，将此时的作业数据集作为待执行数据集，并提交至第二站点。进一步的，写入了主机作业脚本的待执行作业数据集的名称不变，与未写入主机作业脚本的作业数据集的名称保持一致，即待执行作业数据集与作业数据集为同一数据集，仅存在是否写入主机作业脚本的区别。

具体的，FTP信息中还包括第二站点的IP地址，通过通讯接口，将待执行作业数据集提交至第二站点，由第二站点运行待执行作业数据集。

第二站点接收第一站点发送的待执行作业数据集；其中，待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本；执行主机作业脚本，当执行至数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称；根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将数据集清理作业脚本写入临时数据集中；根据第一站点的FTP信息，将数据集清理作业脚本提交至所述第一站点，并删除临时数据集。

其中，远程站点(第二站点)接收第一站点发送的待执行作业数据集，待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本。数据集清理作业生成作业步中包括待清理的数据集名称及待清理数据集所在的站点FTP信息，即第一站点FTP信息。

进一步，第二站点执行主机作业脚本，当执行到主机作业脚本尾部的数据集清理作业生成作业步时，根据集清理作业步，确定其中包括待清理的数据集名称，即共享数据集的名称及作业数据集的名称(与待执行作业数据集名称相同)，以及待清理数据集所在的站点FTP信息，即第一站点FTP信息。

其中，根据共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本。此外，生成的数据集清理作业脚本写入第二站点的临时数据集中。具体的，临时数据集可以根据主机作业脚本生成，例如，生成的临时数据集名称可根据共享数据集的名称及作业数据集的名称生成。

其中，根据第一站点的FTP信息，可知第一站点的IP地址、用户名及密码等信息。根据FTP信息与第一站点进行通讯连接，将生成的数据集清理作业脚本提交至第一站点，并删除临时数据集。

进一步的，临时数据集的删除可以在间隔预设时间后，自动删除临时数据集。或者，第二站点读取共享磁盘中的共享数据集，若共享数据集已被删除，则删除临时数据集。

第一站点接收并执行所述第二站点返回的数据集清理作业脚本，对共享数据集及待执行作业数据集进行删除。

其中，在第二站点执行到主机作业脚本中的数据集清理作业生成作业步时，第二站点生成数据集清理作业脚本，并将数据集清理作业脚本提交至第一站点。第一站点接收并执行数据集清理作业脚本，数据集清理作业脚本中包括待清理数据集的名称。若数据集清理作业脚本中待清理的数据集名称包括第一站点创建的共享数据集及待执行作业数据集，则执行数据集清理操作，即删除共享数据集及待执行作业数据集，由此实现数据集的清理。

作为本发明的一个实施例，第一站点还用于根据所述数据集清理作业脚本，确定所述数据集清理作业脚本中的待执行作业数据集名称；若获知所述待执行作业数据集名称中包括所述共享数据集的名称及作业数据集的名称，则对所述共享数据集及所述待执行作业数据集进行删除。

其中，在第二站点执行到主机作业脚本中的数据集清理作业生成作业步时，第二站点生成数据集清理作业脚本，并将数据集清理作业脚本提交至第一站点。第一站点接收并执行数据集清理作业脚本，数据集清理作业脚本中包括待清理数据集的名称。

进一步的，若数据集清理作业脚本中待清理的数据集名称包括第一站点创建的共享数据集及待执行作业数据集，则执行数据集清理操作，即删除共享数据集及待执行作业数据集，由此实现数据集的清理。

作为本发明的一个实施例，第二站点还用于根据所述第一站点FTP信息中的IP地址，利用与所述IP地址对应的通讯接口，将所述数据集清理作业脚本提交至所述第一站点。

其中，根据第一站点的FTP信息，可知第一站点的IP地址、用户名及密码等信息。根据第一站点的FTP信息的IP地址，利用与IP地址对应的通讯接口，与第一站点进行通讯连接，将生成的数据集清理作业脚本提交至第一站点。

在本发明一具体实施例中，在本地站点(第一站点)生成的远程安装主机资源作业(主机作业脚本)的末尾，增加生成一个站点追溯和原站点数据集清理功能作业步。将远程安装主机资源作业、站点追溯和原站点数据集清理功能作业步写入到作业DATASET。通过FTP打开JES，将作业DATASET提交到远程站点(第二站点)运行。远程安装主机资源作业运行完之后，接着运行站点追溯和原站点数据集清理功能作业步。站点追溯和原站点数据集清理功能作业步根据作业步中的各DATASET名，生成数据集清理作业脚本，并写入到一个临时DATASET中。站点追溯和原站点数据集清理功能作业步根据作业步中的本地站点FTP信息，通过FTP打开JES，将数据集清理作业脚本提交到本地站点运行。提交成功后，清理临时DATASET。运行在本地站点上的清理作业脚本，将原来本地站点生成的共享DATASET和作业DATASET进行清理。至此，本地和远程站点的DATASET都完成了实时清理。

此外，图4中共享卷为保存共享DATASET的共享磁盘卷，共享DATASET一般被设置为创建站点可维护，其它站点可读。

在本实施例中，如图5所示，本发明系统的具体工作流程包括：

步骤S101，新增一个能依次执行以下功能的程序模块：接收第一站点的“FTP信息”和“DATASET名”入参；根据“DATASET名”生成删除DATASET的作业，并将作业写到临时DATASET中；打开JES，将临时DATASET用FTP提交到“FTP信息”指定的主机站点执行；删除临时DATASET。

步骤S102，在第一站点生成主机作业脚本时，在作业脚本尾部增加数据集清理作业生成作业步。

其中，主机作业脚本即JCL，为一个由多个作业步脚本串起来的作业脚本，每个作业步通过指定程序名和参数来实现具体的业务功能。

步骤S103，将程序模块名加到数据集清理作业生成作业步的SYSTSIN中。

其中，SYSTSIN为JCL中的一个重要的系统变量，用来接收用户的输入(程序、入参，或SQL语句等)，然后将输入交给作业步指定的系统程序去执行。例如，作业步STEPNAME将用户输入的“程序名PROGRAM1、FTP信息和DATASET名”交给系统程序IKJEFT01(IKJEFT01为负责执行用户程序的系统程序)，IKJEFT01识别程序名和程序入参并执行用户程序(固定第一个为用户程序名，后面的都为用户程序的入参)。

步骤S104，获取第一站点FTP信息，创建共享DATASET和作业DATASET。

步骤S105，将“第一站点FTP信息”、“共享DATASET名”和“作业DATASET名”参数写到程序模块名后面。

步骤S106，将尾部增加了数据集清理作业生成作业步的主机作业脚本写到作业DATASET中。

步骤S107，通过FTP打开JES，将作业DATASET提交到第二站点执行。

步骤S108，第二站点作业执行到数据集清理作业生成作业步，作业步依次完成步骤S101所述的功能，共享DATASET和和作业DATASET在第一站点被第二站点传来的数据集清理作业脚本删除。

步骤S109，临时DATASET在第二站点被删除，至此，主机作业流程结束，第一站点和第二站点DATASET都完成了实时清理。

本发明通过在主机作业末尾增加一个带有站点追溯和原站点数据集清理功能的作业步的方式，解决了不同站点间清理数据集占用较多主机资源、实施繁琐及过度依赖数据库的问题，无需依赖数据库，在数据库不可用情况下，依然可以远程安装并自动实时清理本地和远程站点数据集，主机资源占用更少，简单易实施。

如图6所示为本发明实施例一种数据集实时清理装置的结构示意图，图中所示装置包括：

数据集创建模块11，用于根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集。

其中，本发明中的数据集，即DATASET，是逻辑上相关的数据集合，为IBM主机上的数据、程序源码等可存放于数据集中，类似PC机中的“文件”。本地站点(第一站点)的FTP(文件传输协议)信息及数据集名称参数，其中，FTP信息中包括本地站点的IP地址、用户名、密码等信息，数据集名称参数为后续创建共享数据集、作业数据集等使用的输入参数。

具体的，第一站点利用作业请求创建对应的共享数据集及作业数据集。进一步的，共享数据集可以在共享磁盘中创建，作业数据集可以在第一站点内创建。

清理作业步模块12，用于根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部。

其中，数据集清理作业生成作业步具有站点追溯和原站点数据集清理功能，具体的，数据集清理作业生成作业步中包括第一站点的FTP信息、待清理的数据集的名称。其中，待清理的数据集包括第一站点生成的共享数据集及作业数据集。

进一步的，主机作业脚本可以为远程安装主机资源作业脚本等。主机作业脚本是由第一站点生成，并由远程站点(第二站点)执行的作业脚本。此外，在主机作业脚本的尾部加入数据集清理作业生成作业步。

主机作业脚本模块13，用于将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致。

其中，第一站点将添加了数据集清理作业生成作业步的主机作业脚本写入作业数据集中，将此时的作业数据集作为待执行数据集，并提交至第二站点。进一步的，写入了主机作业脚本的待执行作业数据集的名称不变，与未写入主机作业脚本的作业数据集的名称保持一致，即待执行作业数据集与作业数据集为同一数据集，仅存在是否写入主机作业脚本的区别。

具体的，FTP信息中还包括第二站点的IP地址，通过通讯接口，将待执行作业数据集提交至第二站点，由第二站点运行待执行作业数据集。

数据集清理模块14，用于接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

其中，在第二站点执行到主机作业脚本中的数据集清理作业生成作业步时，第二站点生成数据集清理作业脚本，并将数据集清理作业脚本提交至第一站点。第一站点接收并执行数据集清理作业脚本，数据集清理作业脚本中包括待清理数据集的名称。若数据集清理作业脚本中待清理的数据集名称包括第一站点创建的共享数据集及待执行作业数据集，则执行数据集清理操作，即删除共享数据集及待执行作业数据集，由此实现数据集的清理。

作为本发明的一个实施例，如图7所示，所述数据集清理模块14包括：

数据集名称单元1401，用于根据所述数据集清理作业脚本，确定所述数据集清理作业脚本中的待执行作业数据集名称；

数据集清理单元1402，用于若获知所述待执行作业数据集名称中包括所述共享数据集的名称及作业数据集的名称，则对所述共享数据集及所述待执行作业数据集进行删除。

如图8所示为本发明实施例一种数据集实时清理装置的结构示意图，图中所示装置包括：

作业脚本接收模块21，用于接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本。

其中，远程站点(第二站点)接收第一站点发送的待执行作业数据集，待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本。数据集清理作业生成作业步中包括待清理的数据集名称及待清理数据集所在的站点FTP信息，即第一站点FTP信息。

数据集名称模块22，用于执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称。

其中，第二站点执行主机作业脚本，当执行到主机作业脚本尾部的数据集清理作业生成作业步时，根据集清理作业步，确定其中包括待清理的数据集名称，即共享数据集的名称及作业数据集的名称(与待执行作业数据集名称相同)，以及待清理数据集所在的站点FTP信息，即第一站点FTP信息。

清理作业脚本模块23，用于根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中。

其中，根据共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本。此外，生成的数据集清理作业脚本写入第二站点的临时数据集中。具体的，临时数据集可以根据主机作业脚本生成，例如，生成的临时数据集名称可根据共享数据集的名称及作业数据集的名称生成。

作业脚本提交模块24，用于根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集。

其中，根据第一站点的FTP信息，可知第一站点的IP地址、用户名及密码等信息。根据FTP信息与第一站点进行通讯连接，将生成的数据集清理作业脚本提交至第一站点，并删除临时数据集。

进一步的，临时数据集的删除可以在间隔预设时间后，自动删除临时数据集。或者，第二站点读取共享磁盘中的共享数据集，若共享数据集已被删除，则删除临时数据集。

作为本发明的一个实施例，所述作业脚本提交模块还用于根据所述第一站点FTP信息中的IP地址，利用与所述IP地址对应的通讯接口，将所述数据集清理作业脚本提交至所述第一站点。

基于与上述一种数据集实时清理方法相同的申请构思，本发明还提供了上述一种数据集实时清理装置。由于该一种数据集实时清理装置解决问题的原理与一种数据集实时清理方法相似，因此该一种数据集实时清理装置的实施可以参见一种数据集实时清理方法的实施，重复之处不再赘述。

本发明通过在主机作业末尾增加一个带有站点追溯和原站点数据集清理功能的作业步的方式，解决了不同站点间清理数据集占用较多主机资源、实施繁琐及过度依赖数据库的问题，无需依赖数据库，在数据库不可用情况下，依然可以远程安装并自动实时清理本地和远程站点数据集，主机资源占用更少，简单易实施。

本发明还提供一种电子设备，包括第一存储器、第一处理器及存储在第一存储器上并可在第一处理器上运行的第一计算机程序，所述第一处理器执行所述第一计算机程序时实现如下方法，例如包括：

根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集；

根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部；

将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致；

接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

其中，本实施例中的电子设备的结构示意图如图9所示。

本发明还提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行如下方法的第一计算机程序，例如包括：

根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集；

根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部；

将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致；

接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

本发明还提供一种电子设备，包括第二存储器、第二处理器及存储在第二存储器上并可在第二处理器上运行的第二计算机程序，所述第二处理器执行所述程序时实现如下方法，例如包括：

接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本；

执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称；

根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中；

根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集。

其中，本实施例中的电子设备与上述实施例中电子设备结构一致，结构示意图可参考图9。

本发明还提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行如下方法的第二计算机程序，具体包括：

接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本；

执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称；

根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中；

根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集。

如图9所示，该电子设备600还可以包括：通信模块110、输入单元120、音频处理单元130、显示器160、电源170。值得注意的是，电子设备600也并不是必须要包括图9中所示的所有部件；此外，电子设备600还可以包括图9中没有示出的部件，可以参考现有技术。

如图9所示，中央处理器100有时也称为控制器或操作控件，可以包括微处理器或其他处理器装置和/或逻辑装置，该中央处理器100接收输入并控制电子设备600的各个部件的操作。

其中，存储器140，例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息，此外还可存储执行有关信息的程序。并且中央处理器100可执行该存储器140存储的该程序，以实现信息存储或处理等。

输入单元120向中央处理器100提供输入。该输入单元120例如为按键或触摸输入装置。电源170用于向电子设备600提供电力。显示器160用于进行图像和文字等显示对象的显示。该显示器例如可为LCD显示器，但并不限于此。

该存储器140可以是固态存储器，例如，只读存储器(ROM)、随机存取存储器(RAM)、SIM卡等。还可以是这样的存储器，其即使在断电时也保存信息，可被选择性地擦除且设有更多数据，该存储器的示例有时被称为EPROM等。存储器140还可以是某种其它类型的装置。存储器140包括缓冲存储器141(有时被称为缓冲器)。存储器140可以包括应用/功能存储部142，该应用/功能存储部142用于存储应用程序和功能程序或用于通过中央处理器100执行电子设备600的操作的流程。

存储器140还可以包括数据存储部143，该数据存储部143用于存储数据，例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器140的驱动程序存储部144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。

通信模块110即为经由天线111发送和接收信号的发送机/接收机110。通信模块(发送机/接收机)110耦合到中央处理器100，以提供输入信号和接收输出信号，这可以和常规移动通信终端的情况相同。

基于不同的通信技术，在同一电子设备中，可以设置有多个通信模块110，如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)110还经由音频处理器130耦合到扬声器131和麦克风132，以经由扬声器131提供音频输出，并接收来自麦克风132的音频输入，从而实现通常的电信功能。音频处理器130可以包括任何合适的缓冲器、解码器、放大器等。另外，音频处理器130还耦合到中央处理器100，从而使得可以通过麦克风132能够在本机上录音，且使得可以通过扬声器131来播放本机上存储的声音。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

本发明中应用了具体实施例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (15)

1.一种数据集实时清理方法，其特征在于，所述方法包括：

根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集；

根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部；

将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致；

接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

2.根据权利要求1所述的方法，其特征在于，所述执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除包括：

根据所述数据集清理作业脚本，确定所述数据集清理作业脚本中的待执行作业数据集名称；

若获知所述待执行作业数据集名称中包括所述共享数据集的名称及作业数据集的名称，则对所述共享数据集及所述待执行作业数据集进行删除。

3.一种数据集实时清理方法，其特征在于，所述方法包括：

接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本；

执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称；

根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中；

根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集。

4.根据权利要求3所述的方法，其特征在于，所述根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点包括：根据所述第一站点FTP信息中的IP地址，利用与所述IP地址对应的通讯接口，将所述数据集清理作业脚本提交至所述第一站点。

5.一种数据集实时清理装置，其特征在于，所述装置包括：

数据集创建模块，用于根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集；

清理作业步模块，用于根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部；

主机作业脚本模块，用于将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致；

数据集清理模块，用于接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

6.根据权利要求5所述的装置，其特征在于，所述数据集清理模块包括：

数据集名称单元，用于根据所述数据集清理作业脚本，确定所述数据集清理作业脚本中的待执行作业数据集名称；

数据集清理单元，用于若获知所述待执行作业数据集名称中包括所述共享数据集的名称及作业数据集的名称，则对所述共享数据集及所述待执行作业数据集进行删除。

7.一种数据集实时清理装置，其特征在于，所述装置包括：

作业脚本接收模块，用于接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本；

数据集名称模块，用于执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称；

清理作业脚本模块，用于根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中；

作业脚本提交模块，用于根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集。

8.根据权利要求7所述的装置，其特征在于，所述作业脚本提交模块还用于根据所述第一站点FTP信息中的IP地址，利用与所述IP地址对应的通讯接口，将所述数据集清理作业脚本提交至所述第一站点。

9.一种数据集实时清理系统，其特征在于，所述系统包括：第一站点、与所述第一站点通信连接的第二站点；

所述第一站点根据作业请求生成主机作业脚本，并创建共享数据集及作业数据集；根据本地的FTP信息、共享数据集的名称及作业数据集的名称，生成数据集清理作业生成作业步，并将所述数据集清理作业生成作业步添加至所述主机作业脚本的尾部；将添加了数据集清理作业生成作业步的主机作业脚本写入所述作业数据集中，得到待执行作业数据集，并将所述待执行作业数据集提交至第二站点；其中，所述待执行作业数据集的名称与所述作业数据集的名称保持一致；

所述第二站点接收第一站点发送的待执行作业数据集；其中，所述待执行作业数据集中包括尾部添加了数据集清理作业生成作业步的主机作业脚本；执行所述主机作业脚本，当执行至所述数据集清理作业生成作业步时，根据所述数据集清理作业生成作业步，确定第一站点的FTP信息、共享数据集的名称及作业数据集的名称；根据所述共享数据集的名称及作业数据集的名称，生成数据集清理作业脚本，并将所述数据集清理作业脚本写入临时数据集中；根据第一站点的FTP信息，将所述数据集清理作业脚本提交至所述第一站点，并删除所述临时数据集；

所述第一站点接收并执行所述第二站点返回的数据集清理作业脚本，对所述共享数据集及所述待执行作业数据集进行删除。

10.根据权利要求9所述的系统，其特征在于，所述第一站点还用于根据所述数据集清理作业脚本，确定所述数据集清理作业脚本中的待执行作业数据集名称；若获知所述待执行作业数据集名称中包括所述共享数据集的名称及作业数据集的名称，则对所述共享数据集及所述待执行作业数据集进行删除。

11.根据权利要求9所述的系统，其特征在于，所述第二站点还用于根据所述第一站点FTP信息中的IP地址，利用与所述IP地址对应的通讯接口，将所述数据集清理作业脚本提交至所述第一站点。

12.一种电子设备，包括第一存储器、第一处理器及存储在第一存储器上并可在第一处理器上运行的第一计算机程序，其特征在于，所述第一处理器执行所述第一计算机程序时实现权利要求1至2任一项所述方法。

13.一种电子设备，包括第二存储器、第二处理器及存储在第二存储器上并可在第二处理器上运行的第二计算机程序，其特征在于，所述第二处理器执行所述第二计算机程序时实现权利要求3至4任一项所述方法。

14.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1至2任一项所述方法的第一计算机程序。

15.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求3至4任一项所述方法的第二计算机程序。

Images