CN114490715A - 一种数据提取方法、装置、电子设备及存储介质 - Google Patents

Abstract

本发明公开了一种数据提取方法、装置、电子设备及存储介质，其中，该方法包括：接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中；当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据；接收与各数据查询指令相对应的目标数据。解决了数据提取时存在影响业务系统运行稳定性以及存在数据泄露的问题，实现了在不影响目标业务系统的运行状态且保护数据不被泄露的前提下，对数据进行提取的效果。

Description

一种数据提取方法、装置、电子设备及存储介质

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种数据提取方法、装置、电子设备及存储介质。

背景技术

随着大数据技术的广泛应用，商业银行的业务系统中会产生庞大的数据量，但在这些庞大的数据量中，包含只针对某一部门用户或工作人员的数据，也被称为中等量级数据。

目前，对中等量级数据的提取多是通过从正在进行联机交易的数据库中直接提取，或者每隔一段时间，根据当前存储的查询条件在数据库中进行查询。但是这样的操作会导致在数据提取过程中，破坏业务系统的稳定性，或者是在一段时间内，对同一个查询条件进行反复查询，导致对系统资源造成不必要的浪费，增加了系统的运行负载。

为了满足对中等量级的业务数据的提取需求，同时不影响业务系统的稳定运行并降低业务系统的运行负载，需要对数据提取的方法进行改进。

发明内容

本发明提供一种数据提取方法、装置、电子设备及存储介质，以实现在数据提取时不影响业务系统稳定性，同时保护提取的数据不被泄露的效果。

第一方面，本发明实施例提供了一种数据提取方法，包括：

接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中；

当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据；

接收与各数据查询指令相对应的目标数据。

第二方面，本发明实施例还提供了一种数据提取装置，包括：

数据查询指令接收模块，用于接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中；

数据查询指令发送模块，用于当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据；

目标数据接收模块，用于接收与各数据查询指令相对应的目标数据。

第三方面，本发明实施例还提供了一种电子设备，所述电子设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明实施例任一所述的数据提取方法。

第四方面，本发明实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如本发明实施例任一所述的数据提取方法。

本实施例的技术方案，接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中，基于用户在目标显示界面中输入数据查询内容并确认后，基于用户的确认操作以及数据查询内容生成相应的数据查询指令，并将至少一个数据查询指令发送给目标业务系统，当目标业务系统接收到至少一个数据查询指令后，将各数据查询指令添加至目标数据库中的消息队列中，以在目标业务系统处于空闲状态时，将各数据查询指令发送给目标数据库。当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据，通过指令提取函数从消息队列中获取与数据查询标识相对应的数据查询指令，以便根据各数据查询指令从目标数据库中获取相对应的目标数据。接收与各数据查询指令相对应的目标数据，通过在目标业务系统处于空闲状态时，接收目标系统发送的与各数据查询指令相对应的目标数据。解决了数据提取时存在影响业务系统运行稳定性的问题，实现了在不影响目标业务系统的运行状态的前提下对数据进行提取的效果。

附图说明

为了更加清楚地说明本发明示例性实施例的技术方案，下面对描述实施例中所需要用到的附图做一简单介绍。显然，所介绍的附图只是本发明所要描述的一部分实施例的附图，而不是全部的附图，对于本领域普通技术人员，在不付出创造性劳动的前提下，还可以根据这些附图得到其他的附图。

图1为本发明实施例一所提供的一种数据提取方法的流程示意图；

图2为本发明实施例二所提供的一种数据提取方法的流程示意图；

图3为本发明实施例三所提供的一种数据提取方法的流程示意图；

图4为本发明实施例四所提供的一种数据提取装置的结构示意图；

图5为本发明实施例五所提供的一种电子设备的结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

在对本技术方案进行详细阐述前，首先对本技术方案的应用场景进行介绍，以便更加清楚的理解本技术方案。随着大数据的广泛应用，各公司、银行或者医疗机构的业务系统中往往存储了大量的业务数据，在进行简单统计分析、汇报展示或者提交监管部门备案时，需要按照指定的条件从庞大的业务数据中提取与数据查询条件相符合的数据。但是在对中等量级业务数据进行提取的过程时，现有技术一般是在业务系统运行过程中，对业务数据进行即时提取，这样的方式可能会导致业务系统出现运行不稳定的问题，或者是通过预先设定时间段对业务数据进行定时提取，但是可能会出现对同一个数据查询条件进行反复提取的问题，因此，本技术方案针对中等量级业务数据的提取方式进行了改进。

实施例一

图1为本发明实施例一所提供的一种数据提取方法流程示意图，本实施例可适用于在目标业务系统处于空闲状态时，对业务数据进行提取的情况，该方法可以由数据提取装置来执行，该装置可以通过软件和/或硬件的形式实现，硬件可以是电子设备，如，移动终端或PC端等。

如图1所示，该方法包括：

S110、接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中。

其中，在对业务数据进行查询时，根据查询需要可以设定相应的数据查询条件，数据查询指令可以理解为基于目标显示界面中输入的至少一个数据查询条件生成的相应的查询指令。目标显示界面可以理解为业务系统的显示界面，当用户在目标显示界面中输入数据查询条件后，基于用户的确认操作可以生成相应的数据查询指令，并将数据查询指令发送给业务系统，此时，业务系统可以接收到该数据查询指令。目标数据库可以理解为各公司、各公司、银行或者医疗机构的业务系统所对应的数据库，可以用于存放各种业务数据。消息队列可以理解为用于记录各数据查询指令的消息容器。

具体的，当用户需要对业务数据进行提取时，可以在业务系统的目标显示界面中输入相应的数据查询条件，在检测到用户对输入的数据查询条件的确认操作后，可以生成与各数据查询条件相对应的数据查询指令，并将生成的至少一个数据查询指令发送给业务系统所对应的目标数据库的消息队列中，以便根据消息队列中的各数据查询指令在目标数据库中查询相应的业务数据。可以理解的是，业务系统可以接收一个或多个数据查询指令，如根据不同的用户输入的数据查询条件生成的数据查询指令，或者是当同一个用户需要对多个数据进行查询时，通过在目标显示界面中输入不同的数据查询条件，进而生成与各数据查询条件相对应的至少一个数据查询指令。

可选的，所述接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中，包括：接收与目标显示界面中的预设字段相匹配的至少一个数据查询条件；基于预设规则对所述至少一个数据查询条件进行转换，得到与各数据查询条件相对应的至少一个数据查询指令；确定与各数据查询指令相对应的数据查询标识，并将所述至少一个数据查询指令以及相应的数据查询标识发送至与目标数据库相对应的消息队列中。

其中，预设字段可以理解为预先设置的字段，例如预设字段可以设置为各数据查询内容的关键词，以便用户可以在目标显示界面中根据预设字段输入相应的数据查询内容。预设规则可以理解为在将数据查询内容转换为数据查询指令时预先设置的转换规则，如可以将与预设字段相对应的数据查询内容转换为业务系统能够识别的数据查询语句，如SQL语句，并将生成的与数据查询内容相对应的数据查询语句作为数据查询指令。数据查询标识可以理解为与各数据查询指令相对应的标识性信息，如，可以对各数据查询指令进行编号，以便根据编号确定相应的数据查询指令。

具体的，用户在进行数据提取时，可以通过目标显示界面中的预设字段输入与预设字段相匹配的至少一个数据查询内容，然后根据预设规则对输入的至少一个数据查询内容进行转换，生成与各数据查询内容相对应的数据查询指令。在生成各数据查询指令后，确定与各数据查询指令相对应的数据查询标识，并将各数据查询指令以及相应的数据查询标识发送至目标数据库中的消息队列中，以便根据数据查询标识从消息队列中获取与数据标识相对应的数据查询指令。

示例性地，可以将数据查询内容转化为相应的SQL查询语句，在转化过程中，对各数据查询内容中的预设字段进行检测，然后提取与预设字段相匹配的字段内容并转换为相应的SQL查询语句。如在数据查询内容中包含“姓名：张三”，在SQL语句中包含“姓名”这个预设字段，则可以基于预设规则提取预设字段后的字段内容“张三”。

S120、当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据。

其中，在对业务数据进行提取时，为了保证业务系统的稳定运行，可以采用异步提取数据的方法，也就是说并不是在业务系统接收到数据查询指令时，立即根据数据查询指令进行数据查询或提取，而是需要满足预设的数据查询条件时，才对业务数据进行提取。数据查询条件可以理解为预先设置的可以进行数据查询或提取的条件，如可以设置固定的时间段，每晚8点后可以进行数据查询或提取，或者还可以根据业务系统的运行状态确定是否可以进行数据查询或提取，具体的数据查询条件可以根据实际需求进行设置，在此不做具体限定。目标数据可以理解为与数据查询指令相对应的业务数据。

具体的，根据预设的数据查询条件，确定是否可以进行数据查询或提取，如，数据查询条件可以为预先设置的可以进行数据查询或提取的时间段，若检测到当前时刻处于可以进行数据查询或提取的时间段内，则可以认为满足数据查询条件。此时，将预先存储在消息队列中的各数据查询指令发送至目标数据库，以便基于各数据查询指令从目标数据库中，调取与数据查询指令相对应的目标数据。

示例性地，预先设置的数据查询条件为每晚8点后可以进行数据查询或数据提取，当检测到当前时刻处于晚上8点之后，将消息队列中存放的各数据查询指令发送到目标数据库中。然后根据各数据查询指令从目标数据库中查找与各数据查询指令相对应的目标数据，如，目标数据可以为一个信贷数据表或业务数据表等。

S130、接收与各数据查询指令相对应的目标数据。

在实际应用过程中，当满足数据查询条件并基于数据查询指令从目标数据库中获取相应的目标数据后，可以将目标数据发送给业务系统所对应该的客户端，以便为用户提供与数据查询指令相对应的目标数据。

可选的，所述接收与各数据查询指令相对应的目标数据，包括：基于所述目标业务系统和所述目标数据库之间的数据传输通道，接收所述目标数据库发送的与各数据查询指令相对应的目标数据。

其中，目标业务系统可以理解为用于提取业务数据的业务系统。数据传输通道可以理解为用于目标业务系统和目标数据库之间进行数据传输的通信通道。

具体的，在获取与数据查询指令相对应的目标数据后，通过预先设置的目标业务系统和目标数据库之间的数据传输通道，可以将目标数据库中的目标数据发送给目标业务系统，在目标系统接收目标数据后向用户提供目标数据。

本实施例的技术方案，接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中，基于用户在目标显示界面中输入数据查询内容并确认后，基于用户的确认操作以及数据查询内容生成相应的数据查询指令，并将至少一个数据查询指令发送给目标业务系统，当目标业务系统接收到至少一个数据查询指令后，将各数据查询指令添加至目标数据库中的消息队列中，以在目标业务系统处于空闲状态时，将各数据查询指令发送给目标数据库。当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据，通过指令提取函数从消息队列中获取与数据查询标识相对应的数据查询指令，以便根据各数据查询指令从目标数据库中获取相对应的目标数据。接收与各数据查询指令相对应的目标数据，通过在目标业务系统处于空闲状态时，接收目标系统发送的与各数据查询指令相对应的目标数据。解决了数据提取时存在影响业务系统运行稳定性的问题，实现了在业务系统处于空闲状态时对数据进行提取，不影响业务系统稳定运行的效果。

实施例二

作为上述实施例的一可选实施例，图2为本发明实施例二所提供的一种数据提取方法的流程示意图，可选的，根据预设运行状态检测条件对目标业务系统的运行状态进行检测，当检测到目标业务系统处于空闲状态时，从目标数据库中的消息队列中获取相应的数据查询指令，并获取与各数据查询指令相对应的目标数据。

如图2所示，该方法包括：

S210、接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中。

S220、根据预设运行状态检测条件对目标业务系统的运行状态进行检测，得到检测结果，其中，所述目标业务系统的运行状态包括忙碌状态或空闲状态。

其中，目标业务系统的运行状态包括忙碌状态或空闲状态，示例性地，可以设定固定时间段，如每天下午1点至2点，每天晚上8点后为空闲状态，其余时间为忙碌状态；也可以是根据目标业务系统当前是否处于工作状态确定目标业务系统处于忙碌状态还是空闲状态。

具体的，若以预先设置目标业务系统的空闲状态和忙碌状态所对应的时间段为例，检测当前时刻是否处于预设空闲状态所对应的时间段，得到检测结果，并根据检测结果确定目标业务系统当前处于忙碌状态还是空闲状态。

或者，还可以持续监督目标业务系统的运行状态，当检测到目标业务系统处于执行任务状态，则表示目标业务系统当前处于忙碌状态；若检测到目标业务系统在预设时间段内，如1个小时之内没有执行任何业务，则将当前时刻之后的一个小时或任意的预设时长作为目标业务系统的空闲状态。对目标业务系统是否在执行业务进行检测，得到检测结果，并根据检测结果确定目标业务系统的运行状态为忙碌状态还是空闲状态。

S230、若检测结果为目标业务系统处于空闲状态，则将所述消息队列中的各数据查询指令发送至目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据。

具体的，若检测结果为目标业务系统当前的运行状态为空闲状态，则表示可以通过目标业务系统进行数据提取。在对数据进行提取时，首先对消息队列中存储的数据查询指令进行检测，获取消息队列中的至少一个数据查询指令，然后将各数据查询指令发送至目标数据库中，以便基于各数据查询指令从目标数据库中获取相应的目标数据。

可选的，所述若检测结果为满足数据查询条件，则将所述消息队列中的各数据查询指令发送至目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据，包括：基于指令提取函数以及所述各数据查询指令标识，从所述消息队列中提取与所述各数据查询指令相对应的至少一个数据查询指令；基于目标函数将提取的各数据查询指令发送至目标数据库中，以基于所述目标函数从所述目标数据库中调取与各数据查询指令相对应的目标数据。

其中，指令提取函数可以理解为用于提取消息队列中的各数据查询指令的函数，可以为一段程序代码，也可以为一个提取函数。目标函数可以理解为将各数据查询指令发送给目标数据库的函数，如可以为一段程序代码，也可以是一个运行脚本，如shell脚本等。

具体的，在对目标业务系统的运行状态进行检测后，确定目标业务系统当前处于空闲状态，则表示检测结果满足数据查询条件，此时基于预先在目标业务系统中设置的指令提取函数从目标数据库中的消息队列中，将与各数据查询指令标识相对应的至少一个数据查询指令提取出来，然后基于目标函数将提取得到的各数据查询指令发送给目标数据库中，以便获取与各数据查询指令相对应的目标数据。示例性地，在消息队列中可以存储一个或多个数据查询指令，在检测结果为满足数据查询条件时，利用指令提取函数获取消息队列中与各数据查询标识相对应的数据查询指令。在获取各数据查询指令后，若想获取与各数据查询指令相对应的目标数据，还需要将各数据查询指令发送至目标数据库中，以基于目标函数在表数据库中查找与各数据查询指令相对应的目标数据。

S240、接收与各数据查询指令相对应的目标数据。

S250、基于预设加密规则对所述目标数据进行加密处理，得到目标加密数据。

其中，目标系统在接收与各数据查询指令相对应的目标数据后，需要对目标数据进行加密处理，以防止用户在使用目标数据进行数据分析时导致目标数据中的隐私数据被泄露。如目标数据中可能包括客户的姓名、身份证号、手机号、资产情况、家庭住址以及信贷业务情况等，为了更好的防止隐私数据被泄露导致用户信息或业务信息被泄露，需要对接收到的目标数据中的隐私数据进行加密处理。预设加密规则可以理解为对目标数据中的隐私数据进行加密时所使用的规则，如可以预先设置一些隐私数据所对应的关键词信息，当检测到目标数据中包含预先设置的隐私数据所对应的关键词信息时，则使用加密方法或加密程序对隐私数据中的部分数据进行遮盖。目标加密数据可以理解为对目标数据中的隐私数据进行加密后的到的数据。

具体的，为了保护目标数据中的隐私数据不被泄露，可以对获取的目标数据中的隐私数据进行加密。在加密过程中可以采用现有的加密方式对隐私数据进行遮盖，如在对目标数据中的身份证号或手机号进行处理时，可以将最后六位数字进行遮盖。需要说明的是，对目标数据中的隐私数据进行加密并不会对后续用户通过目标数据进行数据分析过程中造成影响。

S260、根据预设文件模板中的配置项与各目标加密数据之间的对应关系，将所述各目标加密数据填充至预设文件模板的目标位置，得到至少一个目标文件。

其中，预设文件模板可以理解为预先设置的文件模板，预设文件模板的格式可以为csv格式、txt格式、xls格式或doc格式中的任意一种文件格式。在预设文件模板中可以设置至少一个配置项，如关键词等。目标位置可以理解为基于预先设置的各配置项与各目标加密数据之间的对应关系，填写目标加密数据的位置。目标文件可以理解为，将目标加密数据填写至预设文件模板后生成的文件。

在实际应用中，目标业务系统在获取目标数据并对目标数据中的隐私数据进行加密后，可以基于预设文件将得到的目标加密数据填写至与各配置项相匹配的目标位置，得到与各目标加密数据相对应的至少一个目标文件，以便用户基于目标业务系统获取目标数据时，可以直接对生成的目标文件进行下载。

S270、将所述至少一个目标文件发送给目标业务系统，以检测到所述目标显示界面中的下载控件被触发时，基于对所述下载控件的触发操作对所述至少一个目标文件进行下载。

具体的，将至少一个目标文件发送给目标业务系统后，用户可以通过目标业务系统的目标显示界面对目标文件进行下载。在目标显示界面中设置有相应的下载控件，用户在需要下载目标文件时，可以通过点击下载控件，然后选择需要下载的目标文件，当目标业务系统检测到目标显示界面中的下载控件被触发时，可以对用户选中的目标文件进行下载。

可选的，预先对所述下载控件进行防暴力点击设置；确定所述下载控件所对应的第一时长是否超过预设时长，若超过预设时长，则再次下载目标文件；若不超过预设时长，则不执行下载目标文件的操作，其中，所述第一时长为当前时刻距离所述下载控件的触发时刻所对应时长，所述预设时长为预先设置的防暴力点击所对应的时长。

其中，防暴力点击设置可以理解为为了防止用户在等待目标文件下载过程中多次触发下载控件进行的相应的设置。

具体的，在目标文件的下载过程中，由于网络的延迟或者是目标业务系统出现卡顿等情况，可能会出现目标文件的下载时长稍长的问题，此时用户在下载过程中可能会多次触发下载控件以获得目标文件，但是这样的操作会触发多次下载请求，导致对同一个目标文件进行多次下载，增加目标业务系统的运行负担，为避免类似的情况发生，可以预先对下载控件进行防暴力点击设置。

示例性地，可以将预设时长设置为30秒，当用户触发下载控件后，若触发下载控件所对应的第一时长小于预设时长，则不需要再次执行目标文件的下载；若第一时长大于预设时长，用户可以再次点击下载控件，再次对同一目标文件进行下载。

本实施例的技术方案，根据预设运行状态检测条件对目标业务系统的运行状态进行检测，得到检测结果，基于检测结果确定目标业务系统是否处于空闲状态。若检测结果为目标业务系统处于空闲状态，则将所述消息队列中的各数据查询指令发送至目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据，也就是说，在不影响目标业务系统的稳定运行的情况下，基于指令提取函数从消息队列中提取与数据查询标识相对应的数据查询指令，并基于目标函数以及各数据查询指令从目标数据库中获取目标数据。基于预设加密规则对所述目标数据进行加密处理，得到目标加密数据，以对目标数据中的隐私数据进行加密，防止隐私数据的泄露。根据预设文件模板中的配置项与各目标加密数据之间的对应关系，将所述各目标加密数据填充至预设文件模板的目标位置，得到至少一个目标文件，基于目标数据与预设文件模板生成目标文件，以便用户通过触发目标显示界面中的下载控件对目标文件进行下载。将所述至少一个目标文件发送给目标业务系统，以检测到所述目标显示界面中的下载控件被触发时，基于对所述下载控件的触发操作对所述至少一个目标文件进行下载，以防止用户在预设时长内反复对同一个目标文件进行反复下载，增加目标业务系统的运行负担。解决了目标数据的提取过程中存在数据泄露的问题，实现了保护数据不被泄露的效果。

实施例三

在一个具体的例子中，如图3所示，在需要进行数据提取时，数据提取用户可以的登录目标业务系统的目标显示界面，通过目标显示页面录入提数条件(即基于预设字段输入与预设字段相匹配的数据查询内容)，根据预设规则提取预设字段所对应的数据查询内容，并将提取的数据查询内容填充至SQL语句中，实现自动拼接提数SQL语句(即，生成相应的数据查询指令)。再生成数据查询指令后，将各数据查询指令以及与各数据查询指令相对应的数据查询标识存储至目标业务系统的消息队列中，以便在检测到目标业务系统处于空闲状态时，从目标业务系统的目标数据库中调取与数据查询标识相匹配的数据查询指令。

基于预设运行状态检测条件对目标业务系统的运行状态进行检测，当确定目标业务系统处于空闲状态时，则可以调用shell脚本(即，目标函数)将消息队列中的各提数SQL(即，数据查询指令)发送给目标数据库，执行提数SQL(即，基于数据查询指令从目标数据库中获取与数据查询指令相对应的目标数据)。在获取目标数据后，为了避免隐私数据被泄露，可以基于预设加密规则对目标数据进行加密，然后将加密后的目标加密数据发送给目标业务系统，为了方便用户对目标加密数据的获取，可以将目标加密数据填充至预设文件模板中，生成相应的数据文件(即，目标文件)，并在数据文件生成后更新提数申请状态，提示用户数据文件已生成可以进行下载。

需要说明的是，在数据文件生成后，用户可以通过触发目标显示界面中的下载控件，对数据文件进行下载，为了防止用户在预设时间内多次点击下载控件，导致对同一数据文件进行多次下载，增加业务系统的运行负担，可以预先对下载控件进行防暴力点击设置，如可以通过setTimeout函数进行设置。

本实施例的技术方案，接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中，基于用户在目标显示界面中输入数据查询内容并确认后，基于用户的确认操作以及数据查询内容生成相应的数据查询指令，并将至少一个数据查询指令发送给目标业务系统，当目标业务系统接收到至少一个数据查询指令后，将各数据查询指令添加至目标数据库中的消息队列中，以在目标业务系统处于空闲状态时，将各数据查询指令发送给目标数据库。当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据，通过指令提取函数从消息队列中获取与数据查询标识相对应的数据查询指令，以便根据各数据查询指令从目标数据库中获取相对应的目标数据。接收与各数据查询指令相对应的目标数据，通过在目标业务系统处于空闲状态时，接收目标系统发送的与各数据查询指令相对应的目标数据。解决了数据提取时存在影响业务系统运行稳定性的问题，实现了在业务系统处于空闲状态时对数据进行提取，不影响业务系统稳定运行的效果。

实施例四

图4为本发明实施例四提供的一种数据提取装置，该装置包括：数据查询指令接收模块310、数据查询指令发送模块320和目标数据接收模块330。

其中，数据查询指令接收模块310，用于接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中；

数据查询指令发送模块320，用于当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据；

目标数据接收模块330，用于接收与各数据查询指令相对应的目标数据。

本实施例的技术方案，接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中，基于用户在目标显示界面中输入数据查询内容并确认后，基于用户的确认操作以及数据查询内容生成相应的数据查询指令，并将至少一个数据查询指令发送给目标业务系统，当目标业务系统接收到至少一个数据查询指令后，将各数据查询指令添加至目标数据库中的消息队列中，以在目标业务系统处于空闲状态时，将各数据查询指令发送给目标数据库。当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据，通过指令提取函数从消息队列中获取与数据查询标识相对应的数据查询指令，以便根据各数据查询指令从目标数据库中获取相对应的目标数据。接收与各数据查询指令相对应的目标数据，通过在目标业务系统处于空闲状态时，接收目标系统发送的与各数据查询指令相对应的目标数据。解决了数据提取时存在影响业务系统运行稳定性的问题，实现了在业务系统处于空闲状态时对数据进行提取，不影响业务系统稳定运行的效果。

在本发明实施例中任一可选技术方案的基础上，可选地，所述数据查询指令接收模块，包括

数据查询条件接收子模块，用于接收与目标显示界面中的预设字段相匹配的至少一个数据查询条件；

数据查询指令确定子模块，用于基于预设规则对所述至少一个数据查询条件进行转换，得到与各数据查询条件相对应的至少一个数据查询指令；

数据查询标识确定子模块，用于确定与各数据查询指令相对应的数据查询标识，并将所述至少一个数据查询指令以及相应的数据查询标识发送至与目标数据库相对应的消息队列中。

在本发明实施例中任一可选技术方案的基础上，可选地，所述数据查询指令发送模块，包括：

运行状态检测子模块，用于根据预设运行状态检测条件对目标业务系统的运行状态进行检测，得到检测结果，其中，所述目标业务系统的运行状态包括忙碌状态或空闲状态；

数据查询指令发送子模块，用于若检测结果为目标业务系统处于空闲状态，则将所述消息队列中的各数据查询指令发送至目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据。

在本发明实施例中任一可选技术方案的基础上，可选地，所述数据查询指令发送子模块，包括：

数据查询指令提取单元，用于基于指令提取函数以及所述各数据查询指令标识，从所述消息队列中提取与所述各数据查询指令相对应的至少一个数据查询指令；

数据查询指令发送单元，用于基于目标函数将提取的各数据查询指令发送至目标数据库中，以基于所述目标函数从所述目标数据库中调取与各数据查询指令相对应的目标数据。

在本发明实施例中任一可选技术方案的基础上，可选地，所述目标数据接收模块，用于：

基于所述目标业务系统和所述目标数据库之间的数据传输通道，接收所述目标数据库发送的与各数据查询指令相对应的目标数据。

在本发明实施例中任一可选技术方案的基础上，可选地，所述数据提取装置，还包括：

目标加密数据确定模块，用于基于预设加密规则对所述目标数据进行加密处理，得到目标加密数据；

目标文件确定模块，用于根据预设文件模板中的配置项与各目标加密数据之间的对应关系，将所述各目标加密数据填充至预设文件模板的目标位置，得到至少一个目标文件，其中，所述预设文件模板为csv格式、txt格式、xls格式或doc格式中的至少一种文件格式；

目标文件下载模块，用于将所述至少一个目标文件发送给目标业务系统，以检测到所述目标显示界面中的下载控件被触发时，基于对所述下载控件的触发操作对所述至少一个目标文件进行下载。

在本发明实施例中任一可选技术方案的基础上，可选地，所述数据提取装置，还包括：

防暴力点击设置模块，用于预先对所述下载控件进行防暴力点击设置；

预设时长检测模块，用于确定所述下载控件所对应的第一时长是否超过预设时长，若超过预设时长，则再次下载目标文件；若不超过预设时长，则不执行下载目标文件的操作，其中，所述第一时长为当前时刻距离所述下载控件的触发时刻所对应时长，所述预设时长为预先设置的防暴力点击所对应的时长。

本发明实施例所提供的数据提取装置可执行本发明任意实施例所提供的数据提取方法，具备执行方法相应的功能模块和有益效果。

值得注意的是，上述装置所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明实施例的保护范围。

实施例五

图5为本发明实施例五提供的一种电子设备的结构示意图。图5示出了适于用来实现本发明实施例实施方式的示例性电子设备40的框图。图5显示的电子设备40仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图5所示，电子设备40以通用计算设备的形式表现。电子设备40的组件可以包括但不限于：一个或者多个处理器或者处理单元401，系统存储器402，连接不同系统组件(包括系统存储器402和处理单元401)的总线403。

总线403表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。

电子设备40典型地包括多种计算机系统可读介质。这些介质可以是任何能够被电子设备40访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。

系统存储器402可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)404和/或高速缓存存储器405。电子设备40可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统406可以用于读写不可移动的、非易失性磁介质(图5未显示，通常称为“硬盘驱动器”)。尽管图5中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线403相连。存储器402可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块407的程序/实用工具408，可以存储在例如存储器402中，这样的程序模块407包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块407通常执行本发明所描述的实施例中的功能和/或方法。

电子设备40也可以与一个或多个外部设备409(例如键盘、指向设备、显示器410等)通信，还可与一个或者多个使得用户能与该电子设备40交互的设备通信，和/或与使得该电子设备40能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口411进行。并且，电子设备40还可以通过网络适配器412与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器412通过总线403与电子设备40的其它模块通信。应当明白，尽管图5中未示出，可以结合电子设备40使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

处理单元401通过运行存储在系统存储器402中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的数据提取方法。

实施例六

本发明实施例六还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行数据提取方法，该方法包括：

接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中；

当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据；

接收与各数据查询指令相对应的目标数据。

本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本发明实施例操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言——诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种数据提取方法，其特征在于，包括：

接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中；

当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据；

接收与各数据查询指令相对应的目标数据。

2.根据权利要求1所述的方法，其特征在于，所述接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中，包括：

接收与目标显示界面中的预设字段相匹配的至少一个数据查询条件；

基于预设规则对所述至少一个数据查询条件进行转换，得到与各数据查询条件相对应的至少一个数据查询指令；

确定与各数据查询指令相对应的数据查询标识，并将所述至少一个数据查询指令以及相应的数据查询标识发送至与目标数据库相对应的消息队列中。

3.根据权利要求1所述的方法，其特征在于，所述当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据，包括：

根据预设运行状态检测条件对目标业务系统的运行状态进行检测，得到检测结果，其中，所述目标业务系统的运行状态包括忙碌状态或空闲状态；

若检测结果为目标业务系统处于空闲状态，则将所述消息队列中的各数据查询指令发送至目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据。

4.根据权利要求3所述的方法，其特征在于，所述若检测结果为满足数据查询条件，则将所述消息队列中的各数据查询指令发送至目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据，包括：

基于指令提取函数以及所述各数据查询指令标识，从所述消息队列中提取与所述各数据查询指令相对应的至少一个数据查询指令；

基于目标函数将提取的各数据查询指令发送至目标数据库中，以基于所述目标函数从所述目标数据库中调取与各数据查询指令相对应的目标数据。

5.根据权利要求1所述的方法，其特征在于，所述接收与各数据查询指令相对应的目标数据，包括：

基于所述目标业务系统和所述目标数据库之间的数据传输通道，接收所述目标数据库发送的与各数据查询指令相对应的目标数据。

6.根据权利要求1所述的方法，其特征在于，在所述接收与各目标数据指令相对应的目标数据之后，还包括：

基于预设加密规则对所述目标数据进行加密处理，得到目标加密数据；

根据预设文件模板中的配置项与各目标加密数据之间的对应关系，将所述各目标加密数据填充至预设文件模板的目标位置，得到至少一个目标文件，其中，所述预设文件模板为csv格式、txt格式、xls格式或doc格式中的至少一种文件格式；

将所述至少一个目标文件发送给目标业务系统，以检测到所述目标显示界面中的下载控件被触发时，基于对所述下载控件的触发操作对所述至少一个目标文件进行下载。

7.根据权利要求6所述的方法，其特征在于，还包括：

预先对所述下载控件进行防暴力点击设置；

确定所述下载控件所对应的第一时长是否超过预设时长，若超过预设时长，则再次下载目标文件；若不超过预设时长，则不执行下载目标文件的操作，其中，所述第一时长为当前时刻距离所述下载控件的触发时刻所对应时长，所述预设时长为预先设置的防暴力点击所对应的时长。

8.一种数据提取装置，其特征在于，包括：

数据查询指令接收模块，用于接收至少一个数据查询指令，并将所述至少一个数据查询指令发送至与目标数据库相对应的消息队列中；

数据查询指令发送模块，用于当检测到满足数据查询条件时，将所述消息队列中的各数据查询指令发送至所述目标数据库，以从所述目标数据库中调取与所述数据查询指令相对应的目标数据；

目标数据接收模块，用于接收与各数据查询指令相对应的目标数据。

9.一种电子设备，其特征在于，所述电子设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的数据提取方法。

10.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7中任一所述的数据提取方法。

Images