CN107249019A - 基于业务的数据处理系统、方法、装置和服务器 - Google Patents

Abstract

本公开是关于一种基于业务的数据处理系统、方法、装置和服务器，其中，该系统包括：至少一个业务方服务器、平台服务器，各业务方服务器与平台服务器连接；每一个业务方服务器对待发送的数据流进行格式转换，生成日志数据，日志数据的格式符合平台服务器的要求，将日志数据发送给平台服务器，以使平台服务器对日志数据进行处理。不再需要平台服务器针对每接入一个业务方服务器，设置针对这个业务方服务器的接口；进而降低平台服务器向终端提供服务的成本，并且降低平台服务器的复杂性；并且，不再需要平台服务器先准备好对应的接口，业务方服务器可以将格式符合平台服务器要求的日志数据发送给平台服务器，可以保证业务服务和访问的正常进行。

Description

基于业务的数据处理系统、方法、装置和服务器

技术领域

本公开涉及数据传输技术领域，尤其涉及基于业务的数据处理系统、方法、装置和服务器。

背景技术

随着终端技术的发展，终端通过服务器可以为用户提供了非常多的业务功能和业务应用。现在，用户在使用终端的时候，与该终端连接的平台服务器可以从多个业务方服务器中获取服务，然后平台服务器将各服务发送给终端，以提供给用户。例如，平台服务器需要有A、B、C三种业务服务需要接入，业务方服务器A、业务方服务器B、业务方服务器C可以分别把数据发送给平台服务器。

相关技术中，在平台服务器一侧，需对针对每接入一个业务方服务器，就需要针对这个业务方服务器开发出相应的接口。这是因为不同的业务方服务器所提供的数据的格式不同，平台服务器需要采用与业务方服务器对应的接口，去接收业务方服务器发送的数据；同时，也使得业务方服务器通过与业务方服务器对应的接口去访问平台服务器。

然而相关技术中，由于不同的业务方服务器所提供的数据的格式不同，从而在平台服务器一侧，针对每接入一个业务方服务器，就需要针对这个业务方服务器开发出相应的接口。进而随着平台服务器需要接入的业务服务的增多，需要开发的接口的个数也增多，进而增加了平台服务器向终端提供服务的成本，并且平台服务器的复杂性也增加；并且，只有平台服务器先准备好对应的接口，业务方服务器才能向平台服务器发送数据或进行访问等，一旦接口出错，则相应的业务服务和访问就不能正常进行。

发明内容

为克服相关技术中存在的增加了平台服务器向终端提供服务的成本，并且平台服务器的复杂性也增加的问题，本公开提供一种基于业务的数据处理系统、方法、装置和服务器。

根据本公开实施例的第一方面，提供一种基于业务的数据处理系统，包括：

至少一个业务方服务器、以及平台服务器；

各所述业务方服务器与所述平台服务器连接；

每一个业务方服务器，对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求，并将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

进一步地，所述系统，还包括：日志服务器集群；

各所述业务方服务器与所述日志服务器集群连接，所述日志服务器集群与所述平台服务器连接；

各所述业务方服务器，对待发送的数据流进行格式转换，生成日志数据，并将所述日志数据发送给所述日志服务器集群；

所述日志服务器集群，对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据通过传输接口发送给所述平台服务器。

进一步地，所述系统，还包括：缓冲队列服务器；

所述缓冲队列服务器连接在所述日志服务器集群与所述平台服务器之间；

所述日志服务器集群，对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据发送给所述缓冲队列服务器；

所述缓冲队列服务器，将所述日志数据放入日志缓存队列中进行缓存，以使所述平台服务器从所述日志缓存队列中读取所述日志数据。

进一步地，所述缓冲队列服务器为kafka集群，或者，所述缓冲队列服务器为基于RabbitMQ的服务器。

本公开的实施例提供的技术方案可以包括以下有益效果：通过提供由至少一个业务方服务器、以及平台服务器构成的基于业务的数据处理系统，各业务方服务器与平台服务器连接；每一个业务方服务器对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器的要求，并将日志数据发送给平台服务器，以使平台服务器对日志数据进行处理。由于不同的业务方服务器所提供的数据的格式不同，不符合平台服务器的要求，各业务方服务器在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器要求的日志数据；从而不再需要平台服务器针对每接入一个业务方服务器，设置针对这个业务方服务器的接口；进而降低平台服务器向终端提供服务的成本，并且降低平台服务器的复杂性；并且，不再需要平台服务器先准备好对应的接口，业务方服务器可以将格式符合平台服务器要求的日志数据发送给平台服务器，可以保证业务服务和访问的正常进行。

根据本公开实施例的第二方面，提供一种基于业务的数据处理方法，包括：

对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求；

将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

进一步地，所述将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理，包括：

将所述日志数据，发送给日志服务器集群，其中，所述日志服务器集群中提供了与平台服务器连接的传输接口，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据通过所述传输接口发送给所述平台服务器。

进一步地，发送给日志服务器集群，以使所述日志服务器集群对所述日志数据进行预设时间内的存储之后，按照预设规则将所述日志数据通过所述传输接口发送给所述平台服务器，包括：

将所述日志数据，发送给所述日志服务器集群，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后按照预设规则将所述日志数据发送给所述缓冲队列服务器，以使所述缓冲队列服务器将所述日志数据放入日志缓存队列中进行缓存之后，以便所述平台服务器从所述日志缓存队列中读取所述日志数据。

进一步地，所述缓冲队列服务器为kafka集群，或者，所述缓冲队列服务器为基于RabbitMQ的服务器。

本公开的实施例提供的技术方案可以包括以下有益效果：本实施例通过对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器的要求；将日志数据发送给平台服务器，以使平台服务器对日志数据进行处理。由于不同的业务方服务器所提供的数据的格式不同，不符合平台服务器的要求，各业务方服务器在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器要求的日志数据；从而不再需要平台服务器针对每接入一个业务方服务器，设置针对这个业务方服务器的接口；进而降低平台服务器向终端提供服务的成本，并且降低平台服务器的复杂性；并且，不再需要平台服务器先准备好对应的接口，业务方服务器可以将格式符合平台服务器要求的日志数据发送给平台服务器，可以保证业务服务和访问的正常进行。

根据本公开实施例的第三方面，提供一种基于业务的数据处理装置，包括：

转换模块，被配置为对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求；

发送模块，被配置为将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

进一步地，所述发送模块，被具体配置为：

将所述日志数据，发送给日志服务器集群，其中，所述日志服务器集群中提供了与平台服务器连接的传输接口，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据通过所述传输接口发送给所述平台服务器。

进一步地，所述发送模块，被具体配置为：

将所述日志数据，发送给所述日志服务器集群，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后按照预设规则将所述日志数据发送给所述缓冲队列服务器，以使所述缓冲队列服务器将所述日志数据放入日志缓存队列中进行缓存之后，以便所述平台服务器从所述日志缓存队列中读取所述日志数据。

进一步地，所述缓冲队列服务器为kafka集群，或者，所述缓冲队列服务器为基于RabbitMQ的服务器。

本公开的实施例提供的技术方案可以包括以下有益效果：通过对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器的要求；将日志数据，发送给日志服务器集群，以使日志服务器集群对日志数据进行预设时间的存储之后按照预设规则将日志数据发送给缓冲队列服务器，以使缓冲队列服务器将日志数据放入日志缓存队列中进行缓存之后，以便平台服务器从日志缓存队列中读取日志数据。由于不同的业务方服务器所提供的数据的格式不同，不符合平台服务器的要求，各业务方服务器在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器要求的日志数据；从而不再需要平台服务器针对每接入一个业务方服务器，设置针对这个业务方服务器的接口；进而降低平台服务器向终端提供服务的成本，并且降低平台服务器的复杂性；并且，不再需要平台服务器先准备好对应的接口，业务方服务器可以将格式符合平台服务器要求的日志数据发送给平台服务器，可以保证业务服务和访问的正常进行。并且，日志服务器集群与平台服务器之间加入了缓冲队列服务器，缓冲队列服务器将日志数据放入日志缓存队列中进行缓存，以降低业务高发访问时的平台服务器的负载。

根据本公开实施例的第四方面，提供一种服务器，包括：

处理器，以及用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求；将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

本公开的实施例提供的技术方案可以包括以下有益效果：通过对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器的要求；将日志数据发送给平台服务器，以使平台服务器对日志数据进行处理。由于不同的业务方服务器所提供的数据的格式不同，不符合平台服务器的要求，各业务方服务器在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器要求的日志数据；从而不再需要平台服务器针对每接入一个业务方服务器，设置针对这个业务方服务器的接口；进而降低平台服务器向终端提供服务的成本，并且降低平台服务器的复杂性；并且，不再需要平台服务器先准备好对应的接口，业务方服务器可以将格式符合平台服务器要求的日志数据发送给平台服务器，可以保证业务服务和访问的正常进行。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。

图1是根据一示例性实施例示出的一种基于业务的数据处理系统实施例一的结构示意图；

图2是根据一示例性实施例示出的一种基于业务的数据处理系统实施例二的结构示意图；

图3是根据一示例性实施例示出的一种基于业务的数据处理方法实施例三的流程图；

图4是根据一示例性实施例示出的一种基于业务的数据处理方法实施例四的流程图；

图5是根据一示例性实施例示出的一种基于业务的数据处理装置实施例五的框图；

图6是根据一示例性实施例示出的一种服务器实施例六的实体的框图；

图7是根据一示例性实施例示出的一种终端设备1900的框图。

附图标记：

1-业务方服务器	2-平台服务器	3-日志服务器集群
			4-缓冲队列服务器

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

图1是根据一示例性实施例示出的一种基于业务的数据处理系统实施例一的结构示意图，如图1所示，该系统包括：

至少一个业务方服务器1、以及平台服务器2；

各所述业务方服务器1与所述平台服务器2连接；

每一个业务方服务器1，对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器2的要求，并将所述日志数据发送给所述平台服务器2，以使所述平台服务器2对所述日志数据进行处理。

在本实施例中，提供了由至少一个业务方服务器1、以及一个平台服务器2构成的基于业务的数据处理系统，需要将各业务方服务器1与平台服务器2进行连接。每一个业务方服务器1为向平台服务器2发送数据流的数据，平台服务器2可以支持每一个业务方服务器1的服务业务。

举例来说，小米的MIUI可以为多种业务做推广，例如为小米主题、小米金融、小米卡包等做推广。MIUI可以为各类业务做推广的时候，需要通过网页链接、或者MIUI的平台服务器2本身的机制，去跳转到业务方的网站或者本地应用程序中，这个时候，实际是MIUI的平台服务器2与各业务方服务器1连接，各业务方服务器1向MIUI的平台服务器2发送数据流。

在平台服务器2向业务方服务器1发送调取指令的时候，业务方服务器1可以对待发送的数据流进行格式转换，去使得数据流的格式可以符合平台服务器2的要求，进而业务方服务器1可以生成日志数据，进而，该日志数据的格式可以符合平台服务器2的要求；然后业务方服务器1将生成的日志数据发送给该平台服务器2；然后，平台服务器2接收业务方服务器1发送的日志数据，从而平台服务器2可以对日志数据进行处理。

举例来说，平台服务器2需要有A、B、C 3种业务服务需要接入，业务方服务器A对待发送的数据流A进行格式转换，生成日志数据A；业务方服务器B对待发送的数据流B进行格式转换，生成日志数据B；业务方服务器C对待发送的数据流C进行格式转换，生成日志数据C；业务方服务器A将日志数据A发送给平台服务器2，业务方服务器B将日志数据B发送给平台服务器2，业务方服务器C将日志数据C发送给平台服务器2；其中，日志数据A、日志数据B、日志数据C的格式相同，格式都符合平台服务器2的要求。

本实施例通过提供由至少一个业务方服务器1、以及平台服务器2构成的基于业务的数据处理系统，各业务方服务器1与平台服务器2连接；每一个业务方服务器1对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器2的要求，并将日志数据发送给平台服务器2，以使平台服务器2对日志数据进行处理。由于不同的业务方服务器1所提供的数据的格式不同，不符合平台服务器2的要求，各业务方服务器1在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器2要求的日志数据；从而不再需要平台服务器2针对每接入一个业务方服务器1，设置针对这个业务方服务器1的接口；进而降低平台服务器2向终端提供服务的成本，并且降低平台服务器2的复杂性；并且，不再需要平台服务器2先准备好对应的接口，业务方服务器1可以将格式符合平台服务器2要求的日志数据发送给平台服务器2，可以保证业务服务和访问的正常进行。

图2是根据一示例性实施例示出的一种基于业务的数据处理系统实施例二的结构示意图，在实施例一的基础上，如图2所示，该系统还包括：日志服务器集群3；

各所述业务方服务器1与所述日志服务器集群3连接，所述日志服务器集群3与所述平台服务器2连接；

各所述业务方服务器1，对待发送的数据流进行格式转换，生成日志数据，并将所述日志数据发送给所述日志服务器集群3；

所述日志服务器集群3，对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据通过传输接口发送给所述平台服务器2。

本实施例提供的系统，还包括：缓冲队列服务器4；

所述缓冲队列服务器4连接在所述日志服务器集群3与所述平台服务器2之间；

所述日志服务器集群3，对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据发送给所述缓冲队列服务器4；

所述缓冲队列服务器4，将所述日志数据放入日志缓存队列中进行缓存，以使所述平台服务器2从所述日志缓存队列中读取所述日志数据。

其中，所述缓冲队列服务器4为kafka集群，或者，所述缓冲队列服务器4为基于RabbitMQ的服务器。

在本实施例中，可以在基于业务的数据处理系统中设置一个日志服务器集群3，将各业务方服务器1与日志服务器集群3连接，并且将日志服务器集群3与平台服务器2连接。日志服务器集群3可以采用现有技术中提供的服务器集群结构，该日志服务器集群3具有强大的处理功能。

在平台服务器2向业务方服务器1发送调取指令的时候，业务方服务器1可以对待发送的数据流进行格式转换，去使得数据流的格式可以符合平台服务器2的要求，进而业务方服务器1可以生成日志数据，进而，该日志数据的格式可以符合平台服务器2的要求；然后业务方服务器1将生成的日志数据发送给该日志服务器集群3。

然后，日志服务器集群3对接收到的日志数据进行预设时间的存储，然后日志服务器集群3将日志数据通过传输接口，按照一定的发送规则发送给平台服务器2。具体来说，日志服务器集群3对日志数据进行存储，进而日志服务器集群3可以为各业务方服务器1与平台服务器2之间提供一个桥梁，保证各业务方服务器1的数据可以被成功提供给平台服务器2；日志服务器集群3可以依据日志数据的生成时间对日志数据进行排序，或者，日志服务器集群3可以依据业务方服务器1的重要程度对来自于不同的业务方服务器1的日志数据进行排序。

然后，平台服务器2接收日志服务器集群3发送的日志数据，从而平台服务器2可以对日志数据进行处理。

举例来说，平台服务器2需要有A、B、C 3种业务服务需要接入，业务方服务器A对待发送的数据流A进行格式转换，生成日志数据A；业务方服务器B对待发送的数据流B进行格式转换，生成日志数据B；业务方服务器C对待发送的数据流C进行格式转换，生成日志数据C；业务方服务器A将日志数据A发送给日志服务器集群3，业务方服务器B将日志数据B发送给日志服务器集群3，业务方服务器C将日志数据C发送给日志服务器集群3；其中，日志数据A、日志数据B、日志数据C的格式相同，格式都符合平台服务器2的要求；日志服务器集群3可以依据各业务方服务器1的重要程度对日志数据进行排序；然后，日志服务器集群3将排序后的日志数据发送给平台服务器2。

具体来说，还可以在基于业务的数据处理系统中设置一个缓冲队列服务器4，缓冲队列服务器4为kafka集群，或者，缓冲队列服务器4为基于RabbitMQ的服务器。可以将缓冲队列服务器4连接在日志服务器集群3与平台服务器2之间。其中，Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据；RabbitMQ是一种应用程序对应用程序的通信方法，应用程序通过读写出入队列的消息来通信，而无需专用连接来链接它们。

在平台服务器2向业务方服务器1发送调取指令的时候，业务方服务器1可以对待发送的数据流进行格式转换，去使得数据流的格式可以符合平台服务器2的要求，进而业务方服务器1可以生成日志数据，进而，该日志数据的格式可以符合平台服务器2的要求；然后业务方服务器1将生成的日志数据发送给该日志服务器集群3。

然后，日志服务器集群3对日志数据进行预设时间的存储，然后日志服务器集群3将日志数据按照一定的发送规则发送给缓冲队列服务器4。具体来说，日志服务器集群3对日志数据进行存储，进而日志服务器集群3可以为各业务方服务器1与缓冲队列服务器4之间提供一个桥梁，保证各业务方服务器1的数据可以被成功提供给缓冲队列服务器4；日志服务器集群3可以依据日志数据的生成时间对日志数据进行排序，或者，日志服务器集群3可以依据业务方服务器1的重要程度对来自于不同业务方服务器1的日志数据进行排序。

然后，缓冲队列服务器4接收日志服务器集群3发送的日志数据；缓冲队列服务器4将日志数据放入日志缓存队列中进行缓存；平台服务器2就可以从缓冲队列服务器4中的日志缓存队列中去读取日志数据了，然后对日志数据进行处理。

举例来说，平台服务器2需要有A、B、C 3种业务服务需要接入，业务方服务器A对待发送的数据流A进行格式转换，生成日志数据A；业务方服务器B对待发送的数据流B进行格式转换，生成日志数据B；业务方服务器C对待发送的数据流C进行格式转换，生成日志数据C；业务方服务器A将日志数据A发送给日志服务器集群3，业务方服务器B将日志数据B发送给日志服务器集群3，业务方服务器C将日志数据C发送给日志服务器集群3；其中，日志数据A、日志数据B、日志数据C的格式相同，格式都符合平台服务器2的要求；日志服务器集群3可以依据各业务方服务器1的重要程度对日志数据进行排序；然后，日志服务器集群3将排序后的日志数据发送给缓冲队列服务器4；然后缓冲队列服务器4接收日志服务器集群3发送的日志数据；缓冲队列服务器4将日志数据放入日志缓存队列中进行缓存；平台服务器2就可以从缓冲队列服务器4中的日志缓存队列中读取日志数据了。

本实施例通过提供由至少一个业务方服务器1、日志服务器集群3、缓冲队列服务器4以及平台服务器2构成的基于业务的数据处理系统，各业务方服务器1与日志服务器集群3连接，缓冲队列服务器4连接在日志服务器集群3与平台服务器2之间；各业务方服务器1对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器2的要求，并将日志数据发送给日志服务器集群3；日志服务器集群3对日志数据进行预设时间的存储之后，按照预设规则将日志数据发送给缓冲队列服务器4；缓冲队列服务器4将日志数据放入日志缓存队列中进行缓存，以使平台服务器2从日志缓存队列中读取日志数据。由于不同的业务方服务器1所提供的数据的格式不同，不符合平台服务器2的要求，各业务方服务器1在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器2要求的日志数据；从而不再需要平台服务器2针对每接入一个业务方服务器1，设置针对这个业务方服务器1的接口；进而降低平台服务器2向终端提供服务的成本，并且降低平台服务器2的复杂性；并且，不再需要平台服务器2先准备好对应的接口，业务方服务器1可以将格式符合平台服务器2要求的日志数据发送给平台服务器2，可以保证业务服务和访问的正常进行。并且，日志服务器集群3与平台服务器2之间加入了缓冲队列服务器4，缓冲队列服务器4将日志数据放入日志缓存队列中进行缓存，以降低业务高发访问时的平台服务器2的负载。

图3是根据一示例性实施例示出的一种基于业务的数据处理方法实施例三的流程图，如图3所示，基于业务的数据处理方法用于服务器中，该方法包括以下步骤。

在步骤S11中，对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求。

在本步骤中，提供了由至少一个业务方服务器、以及一个平台服务器构成的基于业务的数据处理系统，需要将各业务方服务器与平台服务器进行连接。每一个业务方服务器为向平台服务器发送数据流的数据，平台服务器可以支持每一个业务方服务器的服务业务。

在平台服务器向业务方服务器发送调取指令的时候，业务方服务器可以对待发送的数据流进行格式转换，去使得数据流的格式可以符合平台服务器的要求，进而业务方服务器可以生成日志数据，进而，该日志数据的格式可以符合平台服务器的要求。

在步骤S12中，将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

在本步骤中，业务方服务器将生成的日志数据发送给该平台服务器；然后，平台服务器接收业务方服务器发送的日志数据，从而平台服务器可以对日志数据进行处理。

本实施例通过对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器的要求；将日志数据发送给平台服务器，以使平台服务器对日志数据进行处理。由于不同的业务方服务器所提供的数据的格式不同，不符合平台服务器的要求，各业务方服务器在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器要求的日志数据；从而不再需要平台服务器针对每接入一个业务方服务器，设置针对这个业务方服务器的接口；进而降低平台服务器向终端提供服务的成本，并且降低平台服务器的复杂性；并且，不再需要平台服务器先准备好对应的接口，业务方服务器可以将格式符合平台服务器要求的日志数据发送给平台服务器，可以保证业务服务和访问的正常进行。

图4是根据一示例性实施例示出的一种基于业务的数据处理方法实施例四的流程图，如图4所示，基于业务的数据处理方法用于服务器中，该方法包括以下步骤。

在步骤S21中，对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求。

在本步骤中，提供了由至少一个业务方服务器、以及一个平台服务器构成的基于业务的数据处理系统，需要将各业务方服务器与平台服务器进行连接。每一个业务方服务器为向平台服务器发送数据流的数据，平台服务器可以支持每一个业务方服务器的服务业务。还可以在基于业务的数据处理系统中设置一个日志服务器集群，将各业务方服务器与日志服务器集群连接，并且将日志服务器集群与平台服务器连接。日志服务器集群可以采用现有技术中提供的服务器集群结构，该日志服务器集群具有强大的处理功能。

在平台服务器向业务方服务器发送调取指令的时候，业务方服务器可以对待发送的数据流进行格式转换，去使得数据流的格式可以符合平台服务器的要求，进而业务方服务器可以生成日志数据，进而，该日志数据的格式可以符合平台服务器的要求。

在步骤S22中，将所述日志数据，发送给日志服务器集群，其中，所述日志服务器集群中提供了与平台服务器连接的传输接口，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据通过所述传输接口发送给所述平台服务器。

其中，步骤S22具体包括：将所述日志数据，发送给所述日志服务器集群，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后按照预设规则将所述日志数据发送给所述缓冲队列服务器，以使所述缓冲队列服务器将所述日志数据放入日志缓存队列中进行缓存之后，以便所述平台服务器从所述日志缓存队列中读取所述日志数据。

在本步骤中，业务方服务器将生成的日志数据发送给该日志服务器集群。日志服务器集群对日志数据进行预设时间的存储，然后日志服务器集群将日志数据通过传输接口，按照一定的发送规则发送给平台服务器。具体来说，日志服务器集群对日志数据进行存储，进而日志服务器集群可以为各业务方服务器与平台服务器之间提供一个桥梁，保证各业务方服务器的数据可以被成功提供给平台服务器；日志服务器集群可以依据日志数据的生成时间对日志数据进行排序，或者，日志服务器集群可以依据业务方服务器的重要程度对来自于不同的业务方服务器的日志数据进行排序。然后，平台服务器接收日志服务器集群发送的日志数据，从而平台服务器可以对日志数据进行处理。

具体来说，还可以在基于业务的数据处理系统中设置一个缓冲队列服务器，缓冲队列服务器为kafka集群，或者，缓冲队列服务器为基于RabbitMQ的服务器。可以将缓冲队列服务器连接在日志服务器集群与平台服务器之间。

在平台服务器向业务方服务器发送调取指令的时候，业务方服务器可以对待发送的数据流进行格式转换，去使得数据流的格式可以符合平台服务器的要求，进而业务方服务器可以生成日志数据，进而，该日志数据的格式可以符合平台服务器的要求；然后业务方服务器将生成的日志数据发送给该日志服务器集群。

然后，日志服务器集群对日志数据进行预设时间的存储，然后日志服务器集群将日志数据按照一定的发送规则发送给缓冲队列服务器。具体来说，日志服务器集群对日志数据进行存储，进而日志服务器集群可以为各业务方服务器与缓冲队列服务器之间提供一个桥梁，保证各业务方服务器的数据可以被成功提供给缓冲队列服务器；日志服务器集群可以依据日志数据的生成时间对日志数据进行排序，或者，日志服务器集群可以依据业务方服务器的重要程度对来自于不同的业务方服务器的日志数据进行排序。

然后，缓冲队列服务器接收日志服务器集群发送的日志数据；缓冲队列服务器将日志数据放入日志缓存队列中进行缓存；平台服务器就可以从缓冲队列服务器中的日志缓存队列中读取日志数据了，然后对日志数据进行处理。

本实施例通过对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器的要求；将日志数据，发送给日志服务器集群，以使日志服务器集群对日志数据进行预设时间的存储之后按照预设规则将日志数据发送给缓冲队列服务器，以使缓冲队列服务器将日志数据放入日志缓存队列中进行缓存之后，以便平台服务器从日志缓存队列中读取日志数据。由于不同的业务方服务器所提供的数据的格式不同，不符合平台服务器的要求，各业务方服务器在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器要求的日志数据；从而不再需要平台服务器针对每接入一个业务方服务器，设置针对这个业务方服务器的接口；进而降低平台服务器向终端提供服务的成本，并且降低平台服务器的复杂性；并且，不再需要平台服务器先准备好对应的接口，业务方服务器可以将格式符合平台服务器要求的日志数据发送给平台服务器，可以保证业务服务和访问的正常进行。并且，日志服务器集群与平台服务器之间加入了缓冲队列服务器，缓冲队列服务器将日志数据放入日志缓存队列中进行缓存，以降低业务高发访问时的平台服务器的负载。

图5是根据一示例性实施例示出的一种基于业务的数据处理装置实施例五的框图。参照图5，该装置包括：

转换模块31，被配置为对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求；

发送模块32，被配置为将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

其中，所述发送模块32，被具体配置为：

将所述日志数据，发送给日志服务器集群，其中，所述日志服务器集群中提供了与平台服务器连接的传输接口，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据通过所述传输接口发送给所述平台服务器。

具体来说，所述发送模块32，被具体配置为：

将所述日志数据，发送给所述日志服务器集群，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后按照预设规则将所述日志数据发送给所述缓冲队列服务器，以使所述缓冲队列服务器将所述日志数据放入日志缓存队列中进行缓存之后，以便所述平台服务器从所述日志缓存队列中读取所述日志数据。

其中，所述缓冲队列服务器为kafka集群，或者，所述缓冲队列服务器为基于RabbitMQ的服务器。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

本实施例通过对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器的要求；将日志数据，发送给日志服务器集群，以使日志服务器集群对日志数据进行预设时间的存储之后按照预设规则将日志数据发送给缓冲队列服务器，以使缓冲队列服务器将日志数据放入日志缓存队列中进行缓存之后，以便平台服务器从日志缓存队列中读取日志数据。由于不同的业务方服务器所提供的数据的格式不同，不符合平台服务器的要求，各业务方服务器在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器要求的日志数据；从而不再需要平台服务器针对每接入一个业务方服务器，设置针对这个业务方服务器的接口；进而降低平台服务器向终端提供服务的成本，并且降低平台服务器的复杂性；并且，不再需要平台服务器先准备好对应的接口，业务方服务器可以将格式符合平台服务器要求的日志数据发送给平台服务器，可以保证业务服务和访问的正常进行。并且，日志服务器集群与平台服务器之间加入了缓冲队列服务器，缓冲队列服务器将日志数据放入日志缓存队列中进行缓存，以降低业务高发访问时的平台服务器的负载。

图6是根据一示例性实施例示出的一种服务器实施例六的实体的框图。参照图6，该服务器可以具体实现为：处理器81，以及被配置为存储处理器可执行指令的存储器82；

其中，所述处理器81被配置为：对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求；将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

在上述实施例中，应理解，该处理器可以是中央处理单元(英文：CentralProcessing Unit，简称：CPU)，还可以是其他通用处理器、数字信号处理器(英文：DigitalSignal Processor，简称：DSP)、专用集成电路(英文：Application Specific IntegratedCircuit，简称：ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，而前述的存储器可以是只读存储器(英文：read-only memory，缩写：ROM)、随机存取存储器(英文：random access memory，简称：RAM)、快闪存储器、硬盘或者固态硬盘。SIM卡也称为用户身份识别卡、智能卡，数字移动电话机必须装上此卡方能使用。即在电脑芯片上存储了数字移动电话客户的信息，加密的密钥以及用户的电话簿等内容。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。

关于上述实施例中的服务器，其中各个模块执行操作的具体方式已经在有关该方法和装置的实施例中进行了详细描述，此处将不做详细阐述说明。

本实施例通过对待发送的数据流进行格式转换，生成日志数据，其中，日志数据的格式符合平台服务器的要求；将日志数据发送给平台服务器，以使平台服务器对日志数据进行处理。由于不同的业务方服务器所提供的数据的格式不同，不符合平台服务器的要求，各业务方服务器在发送数据流之前将数据流的格式进行转换，生成格式符合平台服务器要求的日志数据；从而不再需要平台服务器针对每接入一个业务方服务器，设置针对这个业务方服务器的接口；进而降低平台服务器向终端提供服务的成本，并且降低平台服务器的复杂性；并且，不再需要平台服务器先准备好对应的接口，业务方服务器可以将格式符合平台服务器要求的日志数据发送给平台服务器，可以保证业务服务和访问的正常进行。

图7是根据一示例性实施例示出的一种终端设备1900的框图。例如，装置1900可以被提供为一服务器。参照图7，装置1900包括处理组件1922，其进一步包括一个或多个处理器，以及由存储器1932所代表的存储器资源，用于存储可由处理组件1922的执行的指令，例如应用程序。存储器1932中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外，处理组件1922被配置为执行指令，以执行上述基于业务的数据处理方法，所述方法包括：

对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求；

将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

装置1900还可以包括一个电源组件1926被配置为执行装置1900的电源管理，一个有线或无线网络接口1950被配置为将装置1900连接到网络，和一个输入输出(I/O)接口1958。装置1900可以操作基于存储在存储器1932的操作系统，例如Windows ServerTM，MacOS XTM，UnixTM,LinuxTM，FreeBSDTM或类似。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。

应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (13)

1.一种基于业务的数据处理系统，其特征在于，包括：

至少一个业务方服务器、以及平台服务器；

各所述业务方服务器与所述平台服务器连接；

每一个业务方服务器，对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求，并将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

2.根据权利要求1所述的系统，其特征在于，所述系统，还包括：日志服务器集群；

各所述业务方服务器与所述日志服务器集群连接，所述日志服务器集群与所述平台服务器连接；

各所述业务方服务器，对待发送的数据流进行格式转换，生成日志数据，并将所述日志数据发送给所述日志服务器集群；

所述日志服务器集群，对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据通过传输接口发送给所述平台服务器。

3.根据权利要求2所述的系统，其特征在于，所述系统，还包括：缓冲队列服务器；

所述缓冲队列服务器连接在所述日志服务器集群与所述平台服务器之间；

所述日志服务器集群，对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据发送给所述缓冲队列服务器；

所述缓冲队列服务器，将所述日志数据放入日志缓存队列中进行缓存，以使所述平台服务器从所述日志缓存队列中读取所述日志数据。

4.根据权利要求3所述的系统，其特征在于，所述缓冲队列服务器为kafka集群，或者，所述缓冲队列服务器为基于RabbitMQ的服务器。

5.一种基于业务的数据处理方法，其特征在于，包括：

对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求；

将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

6.根据权利要求5所述的方法，其特征在于，所述将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理，包括：

将所述日志数据，发送给日志服务器集群，其中，所述日志服务器集群中提供了与平台服务器连接的传输接口，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据通过所述传输接口发送给所述平台服务器。

7.根据权利要求6所述的方法，其特征在于，所述将所述日志数据，发送给日志服务器集群，以使所述日志服务器集群对所述日志数据进行预设时间内的存储之后，按照预设规则将所述日志数据通过所述传输接口发送给所述平台服务器，包括：

将所述日志数据，发送给所述日志服务器集群，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后按照预设规则将所述日志数据发送给所述缓冲队列服务器，以使所述缓冲队列服务器将所述日志数据放入日志缓存队列中进行缓存之后，以便所述平台服务器从所述日志缓存队列中读取所述日志数据。

8.根据权利要求7所述的方法，其特征在于，所述缓冲队列服务器为kafka集群，或者，所述缓冲队列服务器为基于RabbitMQ的服务器。

9.一种基于业务的数据处理装置，其特征在于，包括：

转换模块，被配置为对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求；

发送模块，被配置为将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。

10.根据权利要求9所述的装置，其特征在于，所述发送模块，被具体配置为：

将所述日志数据，发送给日志服务器集群，其中，所述日志服务器集群中提供了与平台服务器连接的传输接口，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后，按照预设规则将所述日志数据通过所述传输接口发送给所述平台服务器。

11.根据权利要求10所述的装置，其特征在于，所述发送模块，被具体配置为：

将所述日志数据，发送给所述日志服务器集群，以使所述日志服务器集群对所述日志数据进行预设时间的存储之后按照预设规则将所述日志数据发送给所述缓冲队列服务器，以使所述缓冲队列服务器将所述日志数据放入日志缓存队列中进行缓存之后，以便所述平台服务器从所述日志缓存队列中读取所述日志数据。

12.根据权利要求11所述的装置，其特征在于，所述缓冲队列服务器为kafka集群，或者，所述缓冲队列服务器为基于RabbitMQ的服务器。

13.一种服务器，其特征在于，包括：

处理器，以及用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：对待发送的数据流进行格式转换，生成日志数据，其中，所述日志数据的格式符合平台服务器的要求；将所述日志数据发送给所述平台服务器，以使所述平台服务器对所述日志数据进行处理。