CN112600883B - 数据分发方法及装置 - Google Patents

Abstract

本发明提供了一种数据分发方法及装置，包括：确定每个数据分发条件对应的分发批次；通过每个数据分发条件对应的数据链接，获得属于每个分发批次的各个用户行为数据；确定分发顺序，并按照分发顺序依次对属于每个分发批次的各个用户行为数据进行预处理，并发送至数据池中；确定需要接收用户行为数据的各个接收端，并获取每个接收端数据接收条件；基于每个接收端的数据接收条件，确定每个分发批次对应的至少一个接收端；基于各个分发批次对应的分发顺序，依次将数据池中属于每个分发批次的各个用户行为数据发送至对应的各个接收端。应用该方法，按照不同的分发条件分批次对数据进行分发，无需频繁更改分发数据时对应的代码，加快对数据的分发。

Description

数据分发方法及装置

技术领域

本发明涉及数据处理技术领域，特别是涉及一种数据分发方法及装置。

背景技术

随着信息技术的发展，信息呈现出爆发式的膨胀，人们获取信息的途径也更加多样、更加便捷，同时对于信息的时效性要求也越来越高。用户在应用某些软件时，通过用户在软件上的操作和应用，生成用户的用户行为数据，以通过用户行为数据为用户推荐其所感兴趣的信息和产品。

当需要根据用户行为用户推荐相关的信息和产品时，需要根据用户行为数据中的设定的数据分发条件，将用户行为数据发送至对应的接收端，以通过接收端对用户行为数据进行分析。在现有技术中，需要对已有的多个用户行为数据进行分发时，只能单个对用户行为数据进行发送，而每次发送的用户行为数据中设定的数据分发条件可能与上一次发送的用户行为数据的数据分发条件不同，在发送过程中，需要根据数据分发条件更改对应的代码。当需要分发的用户行为数据的个数过于庞大时，需要频繁更改分发用户行为数据对应的代码，增加用户行为数据分发的时间。

发明内容

有鉴于此，本发明提供一种数据分发方法，通过该方法，按照不同的分发条件分批次对数据进行分发，无需频繁更改分发数据时对应的代码，加快对数据的分发。

本发明还提供了一种数据分发装置，用以保证上述方法在实际中的实现及应用。

一种数据分发方法，包括：

确定已设立的各个分发批次，每个所述分发批次对应一个的数据分发条件；

获取每个所述数据分发条件对应的数据链接，并通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据；

确定各个所述分批次对应的分发顺序，并按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中；

确定需要接收用户行为数据的各个接收端，并获取每个所述接收端预先设置的数据接收条件；

基于每个所述接收端的数据接收条件，确定每个所述分发批次对应的至少一个接收端；

基于各个所述分发批次对应的分发顺序，依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端。

上述的方法，可选的，设立各个所述分发批次的过程，包括：

获取预先设置的配置信息；

对所述配置信息进行解析，获得对不同用户行为数据进行分发的数据分发规则；

确定每个所述数据分发规则对应的数据分发条件，按照每个所述数据分发条件设立其对应的分发批次。

上述的方法，可选的，所述通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据，包括：

基于所述数据分发规则，对每个所述分发批次建立至少一个执行线程；

将每个所述数据分发条件对应的数据链接，发送至该数据分发条件对应的分发批次的各个执行线程中，触发每个所述执行线程链接至已输入该执行线程的数据链接对应的数据源，以获得各个所述数据源中已存储的各个用户行为数据。

上述的方法，可选的，所述按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中，包括：

基于所述分发顺序，依次检测属于每个所述分发批次的各个用户行为数据是否存在信息缺失的用户行为数据；

若存在信息缺失的用户行为数据，则将信息缺失的用户行为数据进行清洗，并将已清洗的用户行为数据发送至所述数据池；

若不存在信息缺失的用户行为数据，则将各个用户行为数据按照其所属的分发批次对应的分发顺序发送至所述数据池。

上述的方法，可选的，所述依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端，包括：

当每次从所述数据池中提取属于当前的分发批次的各个用户行为数据时，确定所述当前的分发批次对应的数据分发条件为目标数据分发条件；

解析所述配置信息，并获取所述配置信息中所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程；

应用所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程，将属于所述当前的分发批次对应的各个用户行为数据，发送至所述当前的分发批次对应的各个接收端。

一种数据分发装置，包括：

第一确定单元，用于确定已设立的各个分发批次，每个所述分发批次对应一个的数据分发条件；

第一获取单元，用于获取每个所述数据分发条件对应的数据链接，并通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据；

处理单元，用于确定各个所述分批次对应的分发顺序，并按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中；

第二获取单元，用于确定需要接收用户行为数据的各个接收端，并获取每个所述接收端预先设置的数据接收条件；

第二确定单元，用于基于每个所述接收端的数据接收条件，确定每个所述分发批次对应的至少一个接收端；

分发单元，用于基于各个所述分发批次对应的分发顺序，依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端。

上述的装置，可选的，还包括：

设立单元，用于获取预先设置的配置信息；对所述配置信息进行解析，获得对不同用户行为数据进行分发的数据分发规则；确定每个所述数据分发规则对应的数据分发条件，按照每个所述数据分发条件设立其对应的分发批次。

上述的装置，可选的，所述第一获取单元，包括：

建立子单元，用于基于所述数据分发规则，对每个所述分发批次建立至少一个执行线程；

第一发送子单元，用于将每个所述数据分发条件对应的数据链接，发送至该数据分发条件对应的分发批次的各个执行线程中，触发每个所述执行线程链接至已输入该执行线程的数据链接对应的数据源，以获得各个所述数据源中已存储的各个用户行为数据。

上述的装置，可选的，所述处理单元，包括：

检测子单元，用于基于所述分发顺序，依次检测属于每个所述分发批次的各个用户行为数据是否存在信息缺失的用户行为数据；

清洗子单元，用于若存在信息缺失的用户行为数据，则将信息缺失的用户行为数据进行清洗，并将已清洗的用户行为数据发送至所述数据池；

第二发送子单元，用于若不存在信息缺失的用户行为数据，则将各个用户行为数据按照其所属的分发批次对应的分发顺序发送至所述数据池。

上述的装置，可选的，所述分发单元，包括：

确定子单元，用于当每次从所述数据池中提取属于当前的分发批次的各个用户行为数据时，确定所述当前的分发批次对应的数据分发条件为目标数据分发条件；

获取子单元，用于解析所述配置信息，并获取所述配置信息中所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程；

分发子单元，用于应用所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程，将属于所述当前的分发批次对应的各个用户行为数据，发送至所述当前的分发批次对应的各个接收端。

一种存储介质，所述存储介质包括存储的指令，其中，在所述指令运行时控制所述存储介质所在的设备执行上述的数据分发方法。

一种电子设备，包括存储器，以及一个或者一个以上的指令，其中一个或者一个以上指令存储于存储器中，且经配置以由一个或者一个以上处理器执行上述的数据分发方法。

与现有技术相比，本发明包括以下优点：

本发明提供了一种数据分发方法，包括：确定已设立的各个分发批次，每个所述分发批次对应一个的数据分发条件；获取每个所述数据分发条件对应的数据链接，并通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据；确定各个所述分批次对应的分发顺序，并按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中；确定需要接收用户行为数据的各个接收端，并获取每个所述接收端预先设置的数据接收条件；基于每个所述接收端的数据接收条件，确定每个所述分发批次对应的至少一个接收端；基于各个所述分发批次对应的分发顺序，依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端。应用本发明提供的方法，按照不同的分发条件分批次对数据进行分发，无需频繁更改分发数据时对应的代码，加快对数据的分发。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例提供的一种数据分发方法的方法流程图；

图2为本发明实施例提供的一种数据分发方法的又一方法流程图；

图3为本发明实施例提供的一种数据分发方法的再一方法流程图；

图4为本发明实施例提供的一种数据分发装置的装置结构图；

图5为本发明实施例提供的一种电子设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在本申请中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本发明可用于众多通用或专用的计算装置环境或配置中。例如：个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器装置、包括以上任何装置或设备的分布式计算环境等等。

本发明实施例提供了一种数据分发方法，该方法可以应用在多种系统平台，其执行主体可以为计算机终端或各种移动设备的处理器，所述方法的方法流程图如图1所示，具体包括：

S101：确定已设立的各个分发批次，每个所述分发批次对应一个的数据分发条件。

在本发明实施例中，在对用户行为数据进行分发之前，按照预先设置的数据分发条件设立分发批次，每个数据分发条件对应一个分发批次。

S102：获取每个所述数据分发条件对应的数据链接，并通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据。

在本发明实施例中，每个数据分发条件分别设置有对应的数据链接，数据链接为不同数据源对应的地址，当系统更新用户行为数据时，根据用户行为数据对应的数据分发条件，将该用户行为数据发送至对应的数据源中。其中，数据源可以是Kafka和数据库等用于存储用户行为数据的设备。

由于每个数据分发批次对应一个数据分发条件，则通过每个数据分发条件对应的数据链接，从各个数据源中获取属于每个分发批次的各个用户行为数据。

需要说明的是，数据分发条件根据不同的应用场景进行设置，其具体的设置方式与其对应的应用场景相关。如本发明需要应用在为用户推荐适合用户的应用场景时，可以根据用户在应用平台上设置的个人信息确定数据分发条件，即，数据分发条件为用户接收平台的线上通知、用户接收平台的短信通知、用户可以接受的通知次数或用户不允许平台主动联系等。

还需要说明的是，每个用户行为数据分别对应一个数据分发条件，因此当需要获取每个分发批次的用户行为数据时，通过数据链接可以将用户行为数据分配至其对应的数据分发条件对应的分发批次中。其中，用户在应用某些平台进行操作和设置时，平台会根据用户的操作和设置生成用户行为数据，用户行为数据对应的数据分发条件可以由用户进行自行设置，也可以是生成用户行为数据的平台按照用户的历史操作记录和设置记录，为该用户的用户行为数据进行标记的数据分发条件。在生成用户行为数据并确定其对应的数据分发条件后，可以将用户行为数据上传至其对应的数据源。

S103：确定各个所述分批次对应的分发顺序，并按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中；

在本发明实施例中，在各个分发批次中，按照其对应的数据分发条件确定每个分发批次对应的分发顺序。并按照该分发顺序对属于每个分发批次的各个用户行为数据进行预处理。每处理完一个分发批次的各个用户行为数据，则将属于该分发批次的各个用户行为数据发送到数据池中。

需要说明的是，该数据池中的各个用户行为数据可以是按照其所属的分发批次对应的分发顺序进行排序。

S104：确定需要接收用户行为数据的各个接收端，并获取每个所述接收端预先设置的数据接收条件。

在本发明实施例中，每个接收端预先设置的接收用户行为数据的数据接收条件，当需要对用户行为数据进行分发时，需为每个接收端发送满足该数据接收条件的数据。

其中，接收端的数据接收条件包括接收端所需要接收的用户行为数据的数据类型、数据个数以及与至少一个数据分发条件对应的数据处理条件。

需要说明的是，接收端用于接收用户行为数据，其在接收到用户行为数据后，可以对用户行为数据进行分析，以通过分析结果对该用户行为数据对应的用户推送满足用户需求的提示消息。

S105：基于每个所述接收端的数据接收条件，确定每个所述分发批次对应的至少一个接收端。

在本发明实施例中，确定每个分发批次对应至少一个接收端，属于该分发批次的各个用户行为数据将按照接收端的数据接收条件，将属于该分发批次的所有用户行为数据发送至各个接收端中。

其中，确定每个分发批次对应的各个接收端的过程为：将每个接收端的数据接收条件与各个数据分发条件进行匹配，若匹配一致，则该接收端则为该数据分发条件对应的分发批次的接收端。

例如，各个数据分发条件分别为用户接收平台的线上通知、用户接收平台的短信通知、用户可以接受的通知次数和用户不允许平台主动联系；若某接收端的数据接收条件是接收可以发送短信的用户的用户行为数据，则该接收端为数据数据分发条件为用户接收平台短信通知对应的分发批次对应的接收端。

需要说明的是，一个接收端可以接收至少一个数据分发条件对应的用户行为数据，因此，对于不同批次的各个接收端，其可以接收接收至少一个分发批次的用户行为数据。

S106：基于各个所述分发批次对应的分发顺序，依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端。

在本发明实施例中，在需要向各个接收端发送用户行为数据时，按照该分发顺序从数据池中提取出属于每个分发批次的各个用户行为数据，每获得一个分发批次的各个用户行为数据，则将属于该分发批次的各个用户行为数据分发至该分发批次对应的各个接收端，在将属于该分发批次的各个用户行为数据分发完之后，再从数据池中获取下一分发批次的各个用户行为数据进行分发，直至最后一个分发批次的各个用户行为数据分发结束，则完成对所有用户行为数据的分发。

本发明实施例提供的数据分发方法中，在需要对用户行为数据进行分发前，需先设立多个分发批次，每个分发批次与每个数据分发条件一一对应，且每个数据分发条件对应一个数据链接，通过数据链接可以获得该数据链接对应的数据源中已存储的各个用户行为数据。通过每个数据分发条件对应的数据链接，获取属于每个分发批次的各个用户行为数据。确定各个分发批次对应的分发顺序，并按照分发顺序对各个用户行为数据进行预处理，即，按照该分发顺序对属于当前的分发批次的各个用户行为数据进行预处理后，再对属于下一个分发批次的各个用户行为数据进行预处理，每预处理完一个分发批次的各个用户行为数据，则将属于该分发批次的已处理的各个用户行为数据发送至数据池中。确定当前需要接收用户行为数据的各个接收端，并获取每个接收端预先设置的数据接收条件。基于各个数据接收条件，确定每个分发批次对应的至少一个接收端，并按照分发顺序，从该数据池中依次提取属于每个分发批次的各个用户行为数据。当从数据池中提取出属于当前分发批次的各个用户行为数据时，将各个用户行为数据发送至该当前分发批次对应的各个接收端，再继续从数据池中提取属于下一分发批次的各个用户行为数据发送至该下一分发批次对应的各个接收端。若当前所提取的各个用户行为数据所属的分发批次为最后一个分发批次时，在属于最后一个分发批次的各个用户行为数据分发结束后，完成数据分发过程。

可选的，每个分发批次的用户行为数据为多个，在对属于每个分发批次的各个用户行为数据进行分发时，同一个用户行为数据可以分别发送至其所属分发批次对应的多个接收端，同一个用户行为数据也可以只分发至至其所属分发批次对应的一个接收端。而对于每个分发批次对应的各个接收端，每个接收端可以指定接收用户行为数据的数量，在进行分发用户行为数据时，可以按照接收端可以接收的数量进行用户行为数据的分发。

需要说明的是，本发明实施例中的各个分发批次均设置对应的分发顺序，各个分发批次对应的分发顺序可以是按照数据分发条件进行设置，不同的数据分发条件分别设置不同的优先级，优先级高的数据分发条件其对应的分发批次的分发顺序越靠前。

还需要说明的是，在对属于同一个分发批次的各个用户行为数据进行分发的过程中，由于该分发批次对应一个数据分发条件，该分发批次的各个用户行为数据也对应同一个数据分发条件，因此在进行数据分发过程中，无需更改分发数据时的相关代码。

基于上述实施例提供的方法，对用户行为数据具体的分发过程有以下示例：

确定已设立的分发批次分别为第一批次、第二批次和第三批次，基于第一批次对应的数据分发条件对应的数据链接，获取属于该第一批次的各个用户行为数据；基于第二批次对应的数据分发条件对应的数据链接，获取属于该第二批次的各个用户行为数据；基于第三批次对应的数据分发条件对应的数据链接，获取属于该第三批次的各个用户行为数据。各个分发批次对应的分发顺序为第一批次—第二批次—第三批次，因此，按照该分发顺序，先对属于第一批次的各个用户行为数据进行预处理后发送至数据池，再对属于第二批次的各个用户行为数据进行预处理后发送至数据池，最后对属于第三批次的各个用户行为数据进行预处理后发送至数据池。确定当前有10个接收用户行为数据的接收端，各个接收端分别为A、B、C、D、E、F、G、H、I和J，基于每个接收端的数据接收条件，可以确定第一批次对应的接收端分别为A、B和C；第二批次对应的接收端分别为D、E和F；第三批次对应的接收端分别为G、H、I和J。因此，按照该分发顺序，先从数据池中获取属于第一批次的各个用户行为数据发送至A、B和C，再从数据池中获取属于第二批次的各个用户行为数据发送至D、E和F，最后从数据池中获取属于第三批次的各个用户行为数据发送至G、H、I和J。

应用本发明实施例提供的方法，按照数据分发条件设定不同分发批次，并按批次分发用户行为数据，以减少在分发数据时对代码进行更改的次数，同时加快对各个用户行为数据的分发过程。

本发明实施例提供的方法中，在进行用户行为数据分发之前，需要先设立每个数据分发条件对对应的分发批次，具体的，设立各个分发批次的过程如图2所示，具体可以包括：

S201：获取预先设置的配置信息；

本发明实施例中，该配置信息中包括了预先设置的多个数据分发规则，以及每个数据分发规则对应的程序逻辑和流程等。

S202：对所述配置信息进行解析，获得对不同用户行为数据进行分发的数据分发规则；

在本发明实施例中，解析该配置信息，获得预先设置的多个数据分发规则，其中，每个数据分发规则分别对应一种数据分发条件，对于属于同一个数据分发条件的用户行为数据，需要按照该数据分发规则及该数据分发规则对应的程序逻辑和流程等进行数据的分发。

S203：确定每个所述数据分发规则对应的数据分发条件，按照每个所述数据分发条件设立其对应的分发批次。

在本发明实施例中，按照不同的数据分发规则确定每个所述数据分发规则对应的数据分发条件，并按照数据分发条件设立其对应的分发批次。

本发明实施例提供的数据分发方法中，获取预先设置的配置信息，并对该配置信息进行解析，获得各个数据分发规则，并确定每个数据分发规则对应的数据分发条件，按照每个数据分发条件设立对应的分发批次。

其中，本发明实施例提供的方法中，技术人员预先配置了不同数据分发条件对应的分发规则，以及每个数据分发规则对应的程序逻辑和流程等，以生成对应的配置信息。当处理器响应于系统或用户发送的数据分发请求时，读取已设置的配置信息，并解析该配置信息获得各个数据分发规则，以确定每个数据分发规则对应的数据分发条件，并按照数据分发条件设立分发批次。

可选的，本发明实施例提供的方法中，由于每个数据分发条件分别对应数据分发规则，及该数据分发规则对应的程序逻辑和流程，则属于每个分发批次的各个用户行为数据，可以按照该分发批次对应的数据分发条件所对应的数据分发规则及该数据分发规则对应的程序逻辑和流程进行分发，具体过程包括：

当每次从所述数据池中提取属于当前的分发批次的各个用户行为数据时，确定所述当前的分发批次对应的数据分发条件为目标数据分发条件；

解析所述配置信息，并获取所述配置信息中所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程；

应用所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程，将属于所述当前的分发批次对应的各个用户行为数据，发送至所述当前的分发批次对应的各个接收端。

本发明实施例提供的数据分发过程中，当按照分发顺序依次将数据池中属于每个分发批次的各个用户行为数据分发至该分发批次对应的各个接收端时，在每次提取属于当前的分发批次的各个用户行为数据时，读取该配置信息，并解析该配置信息获取该当前分发批次对应的数据分发条件对应的数据分发规则，按照该数据分发规则及其对应的程序逻辑和流程，分发属于当前分发批次的各个用户行为数据。因此，本发明实施例中，每个数据分发条件对应的各个用户行为数据的数据分发规则及相应的程序逻辑和流程已经提前设置，在每次分发当前的分发批次的各个用户行为数据时，无需重新再更改代码，直接引用已经设置好的规则、程序和流程实现数据分发过程。

本发明实施例提供的方法中，在确定已设立的各个分发批次，需要根据预先设置的数据链接获取属于每个分发批次对应的各个用户行为数据。因此，所述通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据，包括：

基于所述数据分发规则，对每个所述分发批次建立至少一个执行线程；

将每个所述数据分发条件对应的数据链接，发送至该数据分发条件对应的分发批次的各个执行线程中，触发每个所述执行线程链接至已输入该执行线程的数据链接对应的数据源，以获得各个所述数据源中已存储的各个用户行为数据。

本发明实施例提供的数据分发方法中，在进行数据分发之前，需要先获取待分发的各个用户行为数据。在确定已设立的各个分发批次后，获取每个数据分发条件对应的数据链接，每个数据链接是技术人员在需要对用户行为数据进行分类时，将不同的用户行为数据存储至不同的数据源对应的数据源的数据链接。在获得各个数据链接后，按照数据分发规则，对每个分发批次建立至少一个执行线程，该执行线程对数据链接进行执行的程序代码，若将数据链接输入至执行线程，将启动程序代码从数据链接对应的数据源中获取用户行为数据。

需要说明的是，若分发批次只建立一个执行程序，则由一个执行程序通过该分发批次对应的数据接收条件对应的数据链接获取用户行为数据。若分发批次建立多个执行程序，则由多个执行程序同行运行获取用户行为数据，依次加快获取用户行为数据的过程。

应用本发明实施例提供的方法，通过多个执行线程获取用户行为数据，可以加快获取用户行为数据的过程，缩短数据分发的时间。

本发明实施例提供的方法中，在获得用户行为数据中，可能会存在某些信息缺失的数据，因此需要对用户行为数据进行预处理，具体对各个所述用户行为数据进行预处理的过程如图3所示，可以包括：

S301：基于所述分发顺序，依次检测属于每个所述分发批次的各个用户行为数据是否存在信息缺失的用户行为数据。

在本发明实施例中，由于该用户行为数据是用户在应用平台执行某些操作或设置过程中产生的数据，因此，当产生某一用户的用户行为数据并进行上传至数据源进行保存，可能会存在有些数据上传错误或漏传等情况，因此，在需要对各个用户行为数据进行分发之前，需要对属于每个分发批次的各个用户行为数据进行检测，以确定是否存在信息缺失的用户行为数据。

需要说明的是，信息缺失包括数据不完整、数据存在乱码或信息错误等情况。

S302：若存在信息缺失的用户行为数据，则将信息缺失的用户行为数据进行清洗，并将已清洗的用户行为数据发送至所述数据池。

在本发明实施例中，对用户行为数据进行清洗是当存在信息缺失的用户行为数据时，可以从该用户行为数据或其他用户行为数据推导出该用户行为数据所缺失的部分，以保证数据的完整性。

可以理解的是，按照在分发顺序每次提取出属于当前分发批次的各个用户行为数据时，检测属于该当前分发批次的各个用户行为数据是否存在信息缺失，若有信息缺失的用户行为数据，则对信息缺失的用户行为数据进行数据清洗后，将属于当前分发批次的各个用户行为数据发送至数据池，再从该数据池获取属于下一分发批次的各个用户行为数据进行检测。

S303：若不存在信息缺失的用户行为数据，则将各个用户行为数据按照其所属的分发批次对应的分发顺序发送至所述数据池。

在本发明实施例中，当属于每个分发批次的各个用户行为数据中均不存在信息缺失的用户行为数据，则按照该分发顺序依次将属于每个分发批次的各个用户行为数据发送至数据池。

本发明实施例提供的方法中，在将各个用户行为数据发送至数据池之前，按照分发顺序依次检测各个用户行为数据，以确定是否存在信息缺失的用户行为数据。当存在信息缺失的用户行为数据时，需要对信息缺失的用户行为数据进行数据清洗，以保证该用户行为数据的完整性；当不存在信息缺失的用户行为数据，则按照该分发顺序，依次将属于每个分发批次的各个用户行为数据发送至数据池中。

需要说明的是，该数据池主要是对用户行为数据进行保存，作为对用户行为数据进行发送之前的一个中转站，同时可以统一管理各个需要进行分发的用户行为数据，以避免每次需要分发各个用户行为数据，都要频繁向每个用户行为数据所在的数据源发送请求。

应用本发明实施例提供的方法，对各个用户行为数据进行检测，避免出现信息缺失的用户行为数据，影响数据的完整性。

上述各个实施例的具体实施过程及其衍生方式，均在本发明的保护范围之内。

与图1所述的方法相对应，本发明实施例还提供了一种数据分发装置，用于对图1中方法的具体实现，本发明实施例提供的数据分发装置可以应用计算机终端或各种移动设备中，其结构示意图如图4所示，具体包括：

第一确定单元401，用于确定已设立的各个分发批次，每个所述分发批次对应一个的数据分发条件；

第一获取单元402，用于获取每个所述数据分发条件对应的数据链接，并通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据；

处理单元403，用于确定各个所述分批次对应的分发顺序，并按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中；

第二获取单元404，用于确定需要接收用户行为数据的各个接收端，并获取每个所述接收端预先设置的数据接收条件；

第二确定单元405，用于基于每个所述接收端的数据接收条件，确定每个所述分发批次对应的至少一个接收端；

分发单元406，用于基于各个所述分发批次对应的分发顺序，依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端。

本发明实施例提供的数据分发装置中，在需要对用户行为数据进行分发前，需先设立多个分发批次，每个分发批次与每个数据分发条件一一对应，且每个数据分发条件对应一个数据链接，通过数据链接可以获得该数据链接对应的数据源中已存储的各个用户行为数据。通过每个数据分发条件对应的数据链接，获取属于每个分发批次的各个用户行为数据。确定各个分发批次对应的分发顺序，并按照分发顺序对各个用户行为数据进行预处理，即，按照该分发顺序对属于当前的分发批次的各个用户行为数据进行预处理后，再对属于下一个分发批次的各个用户行为数据进行预处理，每预处理完一个分发批次的各个用户行为数据，则将属于该分发批次的已处理的各个用户行为数据发送至数据池中。确定当前需要接收用户行为数据的各个接收端，并获取每个接收端预先设置的数据接收条件。基于各个数据接收条件，确定每个分发批次对应的至少一个接收端，并按照分发顺序，从该数据池中依次提取属于每个分发批次的各个用户行为数据。当从数据池中提取出属于当前分发批次的各个用户行为数据时，将各个用户行为数据发送至该当前分发批次对应的各个接收端，再继续从数据池中提取属于下一分发批次的各个用户行为数据发送至该下一分发批次对应的各个接收端。若当前所提取的各个用户行为数据所属的分发批次为最后一个分发批次时，在属于最后一个分发批次的各个用户行为数据分发结束后，完成数据分发过程。

应用本发明实施例提供的装置，按照数据分发条件设定不同分发批次，并按批次分发用户行为数据，以减少在分发数据时对代码进行更改的次数，同时加快对各个用户行为数据的分发过程。

本发明实施例提供的装置中，还包括：

设立单元，用于获取预先设置的配置信息；对所述配置信息进行解析，获得对不同用户行为数据进行分发的数据分发规则；确定每个所述数据分发规则对应的数据分发条件，按照每个所述数据分发条件设立其对应的分发批次。

本发明实施例提供的装置中，所述第一获取单元，包括：

建立子单元，用于基于所述数据分发规则，对每个所述分发批次建立至少一个执行线程；

第一发送子单元，用于将每个所述数据分发条件对应的数据链接，发送至该数据分发条件对应的分发批次的各个执行线程中，触发每个所述执行线程链接至已输入该执行线程的数据链接对应的数据源，以获得各个所述数据源中已存储的各个用户行为数据。

本发明实施例提供的装置中，所述处理单元，包括：

检测子单元，用于基于所述分发顺序，依次检测属于每个所述分发批次的各个用户行为数据是否存在信息缺失的用户行为数据；

清洗子单元，用于若存在信息缺失的用户行为数据，则将信息缺失的用户行为数据进行清洗，并将已清洗的用户行为数据发送至所述数据池；

第二发送子单元，用于若不存在信息缺失的用户行为数据，则将各个用户行为数据按照其所属的分发批次对应的分发顺序发送至所述数据池。

本发明实施例提供的装置中，所述分发单元，包括：

确定子单元，用于当每次从所述数据池中提取属于当前的分发批次的各个用户行为数据时，确定所述当前的分发批次对应的数据分发条件为目标数据分发条件；

获取子单元，用于解析所述配置信息，并获取所述配置信息中所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程；

分发子单元，用于应用所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程，将属于所述当前的分发批次对应的各个用户行为数据，发送至所述当前的分发批次对应的各个接收端。

以上本发明实施例公开的数据分发装置中各个单元及子单元的具体工作过程，可参见本发明上述实施例公开的数据分发方法中的对应内容，这里不再进行赘述。

本发明实施例还提供了一种存储介质，所述存储介质包括存储的指令，其中，在所述指令运行时控制所述存储介质所在的设备执行上述数据分发方法。

本发明实施例还提供了一种电子设备，其结构示意图如图5所示，具体包括存储器501，以及一个或者一个以上的指令502，其中一个或者一个以上指令502存储于存储器501中，且经配置以由一个或者一个以上处理器503执行所述一个或者一个以上指令502进行以下操作：

确定已设立的各个分发批次，每个所述分发批次对应一个的数据分发条件；

获取每个所述数据分发条件对应的数据链接，并通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据；

确定各个所述分批次对应的分发顺序，并按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中；

确定需要接收用户行为数据的各个接收端，并获取每个所述接收端预先设置的数据接收条件；

基于每个所述接收端的数据接收条件，确定每个所述分发批次对应的至少一个接收端；

基于各个所述分发批次对应的分发顺序，依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现。

为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种数据分发方法，其特征在于，包括：

确定已设立的各个分发批次，每个所述分发批次对应一个的数据分发条件；

获取每个所述数据分发条件对应的数据链接，并通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据；

确定各个所述分发 批次对应的分发顺序，并按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中；

确定需要接收用户行为数据的各个接收端，并获取每个所述接收端预先设置的数据接收条件；

基于每个所述接收端的数据接收条件，确定每个所述分发批次对应的至少一个接收端；

基于各个所述分发批次对应的分发顺序，依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端。

2.根据权利要求1所述的方法，其特征在于，设立各个所述分发批次的过程，包括：

获取预先设置的配置信息；

对所述配置信息进行解析，获得对不同用户行为数据进行分发的数据分发规则；

确定每个所述数据分发规则对应的数据分发条件，按照每个所述数据分发条件设立其对应的分发批次。

3.根据权利要求2所述的方法，其特征在于，所述通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据，包括：

基于所述数据分发规则，对每个所述分发批次建立至少一个执行线程；

将每个所述数据分发条件对应的数据链接，发送至该数据分发条件对应的分发批次的各个执行线程中，触发每个所述执行线程链接至已输入该执行线程的数据链接对应的数据源，以获得各个所述数据源中已存储的各个用户行为数据。

4.根据权利要求1所述的方法，其特征在于，所述按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中，包括：

基于所述分发顺序，依次检测属于每个所述分发批次的各个用户行为数据是否存在信息缺失的用户行为数据；

若存在信息缺失的用户行为数据，则将信息缺失的用户行为数据进行清洗，并将已清洗的用户行为数据发送至所述数据池；

若不存在信息缺失的用户行为数据，则将各个用户行为数据按照其所属的分发批次对应的分发顺序发送至所述数据池。

5.根据权利要求2所述的方法，其特征在于，所述依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端，包括：

当每次从所述数据池中提取属于当前的分发批次的各个用户行为数据时，确定所述当前的分发批次对应的数据分发条件为目标数据分发条件；

解析所述配置信息，并获取所述配置信息中所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程；

应用所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程，将属于所述当前的分发批次对应的各个用户行为数据，发送至所述当前的分发批次对应的各个接收端。

6.一种数据分发装置，其特征在于，包括：

第一确定单元，用于确定已设立的各个分发批次，每个所述分发批次对应一个的数据分发条件；

第一获取单元，用于获取每个所述数据分发条件对应的数据链接，并通过每个所述数据分发条件对应的数据链接，获得属于每个所述分发批次的各个用户行为数据；

处理单元，用于确定各个所述分发 批次对应的分发顺序，并按照所述分发顺序依次对属于每个所述分发批次的各个用户行为数据进行预处理，将已处理的每个用户行为数据发送至预先设置的数据池中；

第二获取单元，用于确定需要接收用户行为数据的各个接收端，并获取每个所述接收端预先设置的数据接收条件；

第二确定单元，用于基于每个所述接收端的数据接收条件，确定每个所述分发批次对应的至少一个接收端；

分发单元，用于基于各个所述分发批次对应的分发顺序，依次将所述数据池中属于每个所述分发批次的各个用户行为数据发送至该分发批次对应的各个接收端。

7.根据权利要求6所述的装置，其特征在于，还包括：

设立单元，用于获取预先设置的配置信息；对所述配置信息进行解析，获得对不同用户行为数据进行分发的数据分发规则；确定每个所述数据分发规则对应的数据分发条件，按照每个所述数据分发条件设立其对应的分发批次。

8.根据权利要求7所述的装置，其特征在于，所述第一获取单元，包括：

建立子单元，用于基于所述数据分发规则，对每个所述分发批次建立至少一个执行线程；

第一发送子单元，用于将每个所述数据分发条件对应的数据链接，发送至该数据分发条件对应的分发批次的各个执行线程中，触发每个所述执行线程链接至已输入该执行线程的数据链接对应的数据源，以获得各个所述数据源中已存储的各个用户行为数据。

9.根据权利要求6所述的装置，其特征在于，所述处理单元，包括：

检测子单元，用于基于所述分发顺序，依次检测属于每个所述分发批次的各个用户行为数据是否存在信息缺失的用户行为数据；

清洗子单元，用于若存在信息缺失的用户行为数据，则将信息缺失的用户行为数据进行清洗，并将已清洗的用户行为数据发送至所述数据池；

第二发送子单元，用于若不存在信息缺失的用户行为数据，则将各个用户行为数据按照其所属的分发批次对应的分发顺序发送至所述数据池。

10.根据权利要求7所述的装置，其特征在于，所述分发单元，包括：

确定子单元，用于当每次从所述数据池中提取属于当前的分发批次的各个用户行为数据时，确定所述当前的分发批次对应的数据分发条件为目标数据分发条件；

获取子单元，用于解析所述配置信息，并获取所述配置信息中所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程；

分发子单元，用于应用所述目标数据分发条件对应的数据分发规则，及该数据分发规则对应的程序逻辑和流程，将属于所述当前的分发批次对应的各个用户行为数据，发送至所述当前的分发批次对应的各个接收端。

Images