CN107329832A - 一种数据接收方法及装置 - Google Patents

一种数据接收方法及装置 Download PDF

Info

Publication number
CN107329832A
CN107329832A CN201710523792.4A CN201710523792A CN107329832A CN 107329832 A CN107329832 A CN 107329832A CN 201710523792 A CN201710523792 A CN 201710523792A CN 107329832 A CN107329832 A CN 107329832A
Authority
CN
China
Prior art keywords
service data
filtering
pingback
data
servers
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710523792.4A
Other languages
English (en)
Other versions
CN107329832B (zh
Inventor
马元文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201710523792.4A priority Critical patent/CN107329832B/zh
Publication of CN107329832A publication Critical patent/CN107329832A/zh
Application granted granted Critical
Publication of CN107329832B publication Critical patent/CN107329832B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5038—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the execution order of a plurality of tasks, e.g. taking priority or time dependency constraints into consideration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • G06F11/3072—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data filtering, e.g. pattern matching, time or event triggered, adaptive or policy-based reporting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083—Techniques for rebalancing the load in a distributed system
    • G06F9/5088—Techniques for rebalancing the load in a distributed system involving task migration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues

Abstract

本发明提供的低延时的PingBack数据接收方法及装置，将实时数据过滤通路与批处理通路分开。在实时数据过滤通路中将运行数据保存在PingBack服务器中的本地队列，避免PingBack服务器上的落盘；运行数据的实时过滤在公共资源池中进行，只需读取一次存储在本地队列上的运行数据，并加载保存在公共资源池中的多个过滤规则，分别根据各个所述过滤规则对所述运行数据进行过滤，将数据过滤任务从PingBack服务器中转移到公共资源池。避免了对PingBack服务器从客户端上接收的运行数据的多次读取，降低了PingBack服务器的CPU资源的占用率，降低实时数据过滤通路的延迟。

Description

一种数据接收方法及装置
技术领域
本发明涉及通信技术领域，更具体的，涉及一种数据接收方法及装置。
背景技术
线上应用，尤其是各种客户端应用会通过埋点的方式向服务器报告一些运行的信息。通过收集这些信息，可以检测线上应用的健康状况，或者统计用户使用服务的一些指标，以便改进应用，或提升用户体验。这种通过埋点收集应用信息的方式，称为Pingback数据收集机制，一般架构如图1所示。
目前，Pingback数据接收流程是，各个端或线上服务应用，向Pingback集群上的各台Server发送数据，每个Server收到数据后将数据写入磁盘Disk，业务设置过滤规则从磁盘上过滤想要的数据，并将过滤后的数据发送到Kafka集群做实时处理，同时，全量数据发送到分布式文件系统(英文全称：Hadoop Distributed File System，英文简称：HDFS)做批处理。
但是，目前这种框架PingbackServer接收到数据后首先会写入磁盘，然后在过滤时又从磁盘读取全量数据，过滤后存入Kafka集群，导致实时计算通路的延迟增大。同时，若需增加过滤规则，则需要另起程序读取全量数据，根据增加新的过滤规则对全量数据进行过滤，导致Pingback Server的CPU使用率不断增加，造成实时数据过滤通路延迟。
发明内容
有鉴于此，本发明提供了一种数据接收方法及装置，将实时数据过滤通路与批处理通路分开，在实时数据过滤通路中将数据保存在PingBack服务器中的本地队列，避免PingBack服务器上的落盘，并支持过滤规则的动态编辑，降低了PingBack服务器的CPU资源的占用率，降低实时数据过滤通路的延迟。
具体技术方案如下：
一种数据接收方法，所述方法包括：
将各个客户端发送的运行数据保存到PingBack服务器的本地队列中；
通过PingBack服务器端口实时读取所述本地队列中的运行数据；
加载公共资源池中存储的多个过滤规则，并分别根据各个所述过滤规则对所述运行数据进行过滤，得到与每个所述过滤规则相对应的过滤后的运行数据；
将过滤后的运行数据发送到Kafka集群中。
优选的，所述方法还包括：
将各个客户端发送的所述运行数据保存到PingBack服务器的磁盘中，并将在预设周期内保存在所述磁盘中的运行数据发送到分布式文件系统HDFS进行批处理。
优选的，所述方法还包括：
当接收到用户的编辑指令时，根据所述编辑指令对所述公共资源池中的过滤规则进行编辑。
优选的，所述编辑操作包括增加、删除、修改和查询。
一种数据接收装置，包括：
第一保存单元，用于将各个客户端发送的运行数据保存到PingBack服务器的本地队列中；
读取单元，用于通过PingBack服务器端口实时读取所述本地队列中的运行数据；
过滤单元，用于加载公共资源池中存储的多个过滤规则，并分别根据各个所述过滤规则对所述运行数据进行过滤，得到与每个所述过滤规则相对应的过滤后的运行数据；
发送单元，用于将过滤后的运行数据发送到Kafka集群中。
优选的，所述装置还包括：
第二保存单元，用于将各个客户端发送的所述运行数据保存到PingBack服务器的磁盘中，并将在预设周期内保存在所述磁盘中的运行数据发送到分布式文件系统HDFS进行批处理。
优选的，所述装置还包括：
过滤规则编辑单元，用于当接收到用户的编辑指令时，根据所述编辑指令对所述公共资源池中的过滤规则进行编辑。
优选的，所述编辑操作包括增加、删除、修改和查询。
相对于现有技术，本发明的有益效果如下：
本发明提供的低延时的PingBack数据接收方法及装置，第一保存单元和第二保存单元设置在PingBack服务器上，过滤单元、发送单元和过滤规则编辑单元设置在公共资源池中，将实时数据过滤通路与批处理通路分开。在实时数据过滤通路中将运行数据保存在PingBack服务器中的本地队列，避免PingBack服务器上的落盘；运行数据的实时过滤在公共资源池中进行，只需读取一次存储在本地队列上的运行数据，并加载保存在公共资源池中的多个过滤规则，根据各个所述过滤规则对所述运行数据进行过滤，将数据过滤任务从PingBack服务器中转移到公共资源池。避免了对PingBack服务器从客户端上接收的运行数据的多次读取，降低了PingBack服务器的CPU资源的占用率，降低实时数据过滤通路的延迟。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为现有技术中PingBack数据接收机制架构图；
图2为本发明实施例中公开的一种数据接收方法架构图；
图3为本发明实施例中公开的一种数据接收方法流程图；
图4为本发明实施例中公开的另一种数据接收方法流程图；
图5为本发明实施例中公开的一种数据接收装置结构示意图；
图6为本发明实施例中公开的另一种数据接收装置结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图2，本实施例公开了一种数据接收方法。图2中ISO、Android、IPad、PC和Service为不同类型的客户端，在PingBack集群中包括多个PingBack服务器，每个PingBack服务器上都有磁盘，用于存储各个客户端发送的运行数据，并将在预设周期内保存在所述磁盘中的运行数据发送到HDFS进行批处理。同时，每个PingBack服务器都会维护一个本地队列，占用PingBack服务器上一定的内存。本地队列保存各个客户端发送的运行数据，通过PingBack服务器端口实时读取本地队列中的运行数据。加载公共资源池中存储的多个过滤规则，并分别根据各个所述过滤规则对所述运行数据进行过滤，得到与每个所述过滤规则相对应的过滤后的运行数据，将过滤后的运行数据发送到Kafka集群上。
应用本实施例公开的数据接收方法，将实时数据过滤通路与批处理通路分开。在实时数据过滤通路中将运行数据保存在PingBack服务器中的本地队列，避免PingBack服务器上的落盘；运行数据的实时过滤在公共资源池中进行，只需读取一次存储在本地队列上的运行数据，并加载保存在公共资源池中的多个过滤规则，分别根据各个所述过滤规则对所述运行数据进行过滤，将数据过滤任务从PingBack服务器中转移到公共资源池。避免了对PingBack服务器从客户端上接收的运行数据的多次读取，降低了PingBack服务器的CPU资源的占用率，降低实时数据过滤通路的延迟。
请参阅图3，本实施例公开的一种数据接收方法，包括以下步骤：
S101：将各个客户端发送的运行数据保存到PingBack服务器的本地队列中；
所述客户端可以为图2中ISO、Android、IPad、PC和Service等不同类型的客户端。
S102：通过PingBack服务器端口实时读取所述本地队列中的运行数据；
S103：加载公共资源池中存储的多个过滤规则，并分别根据各个所述过滤规则对所述运行数据进行过滤，得到与每个所述过滤规则相对应的过滤后的运行数据；
需要说明的是，在加载过滤规则时，可以加载公共资源池中存储的所有过滤规则。
S104：将过滤后的运行数据发送到Kafka集群中。
具体的，kafka集群是一个分布式的、可分区的、可复制的日志集群，Kafka集群将接收到的运行数据以topic为单位进行归纳。与每个所述过滤规则相对应的过滤后的运行数据会发送到kafka集群中相应的topic中。
需要说明的是，本实施例公开的一种数据接收方法，还包括：
将各个客户端发送的所述运行数据保存到PingBack服务器的磁盘中，并将在预设周期内保存在所述磁盘中的运行数据发送到分布式文件系统HDFS进行批处理。
优选的，在S101：将各个客户端发送的运行数据保存到PingBack服务器的本地队列中的同时，将各个客户端发送的所述运行数据保存到PingBack服务器的磁盘中。
当然，将各个客户端发送的所述运行数据保存到PingBack服务器的磁盘中，这一步骤也可以在S101之前或在S101之后进行。
本实施例将实时数据过滤通路与批处理通路分开，在实时数据过滤通路中将运行数据保存在PingBack服务器中的本地队列，避免PingBack服务器上的落盘；运行数据的实时过滤在公共资源池中进行，只需读取一次存储在本地队列上的运行数据，将数据过滤任务从PingBack服务器中转移到公共资源池。避免了对PingBack服务器从客户端上接收的运行数据的多次读取，降低了PingBack服务器的CPU资源的占用率，降低实时数据过滤通路的延迟。
图4为本发明实施例公开的另一种数据接收方法流程图，参阅图4，一种数据接收方法还包括：
S105：当接收到用户的编辑指令时，根据所述编辑指令对所述公共资源池中的过滤规则进行编辑。
所述用户可以为运维人员。
需要说明的是，用于可以根据实际需要实时对保存在公共资源池中过滤规则进行编辑，使当实时过滤程序启动时，将编辑后的过滤规则同步加载到实时过滤程序中，实现只读取一次本地队列中的数据，就能加载用户想要使用的各种过滤规则，对运行数据进行过滤，降低了PingBack服务器的对过滤规则管理的复杂性。
需要说明的是，所述编辑操作包括增加、删除、修改和查询。
请参阅图5，基于上述实施例公开的一种数据接收方法，本实施对应公开了一种数据接收装置，包括：
第一保存单元101，用于将各个客户端发送的运行数据保存到PingBack服务器的本地队列中；
读取单元102，用于通过PingBack服务器端口实时读取所述本地队列中的运行数据；
过滤单元103，用于加载公共资源池中存储的多个过滤规则，并分别根据各个所述过滤规则对所述运行数据进行过滤，得到与每个所述过滤规则相对应的过滤后的运行数据；
发送单元104，用于将过滤后的运行数据发送到Kafka集群中。
图6为本发明实施例公开的另一种数据接收装置，参阅图6，所述数据接收装置还包括：
第二保存单元105，用于将各个客户端发送的所述运行数据保存到PingBack服务器的磁盘中，并将在预设周期内保存在所述磁盘中的运行数据发送到分布式文件系统HDFS进行批处理。
过滤规则编辑单元106，用于当接收到用户的编辑指令时，根据所述编辑指令对所述公共资源池中的过滤规则进行编辑。
应用本实施例公开的数据接收装置，第一保存单元101、读取单元102和第二保存单元105设置在PingBack服务器上，过滤单元103、发送单元104和过滤规则编辑单元106设置在公共资源池中，将实时数据过滤通路与批处理通路分开处理，实时数据过滤通路需要读取的运行数据保存在本地队列中不落盘，并将数据过滤与PingBack服务器分离，降低了PingBack服务器的CPU资源的占用率，降低实时数据过滤通路的延迟。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (8)

1.一种数据接收方法，其特征在于，所述方法包括：
将各个客户端发送的运行数据保存到PingBack服务器的本地队列中；
通过PingBack服务器端口实时读取所述本地队列中的运行数据；
加载公共资源池中存储的多个过滤规则，并分别根据各个所述过滤规则对所述运行数据进行过滤，得到与每个所述过滤规则相对应的过滤后的运行数据；
将过滤后的运行数据发送到Kafka集群中。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
将各个客户端发送的所述运行数据保存到PingBack服务器的磁盘中，并将在预设周期内保存在所述磁盘中的运行数据发送到分布式文件系统HDFS进行批处理。
3.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当接收到用户的编辑指令时，根据所述编辑指令对所述公共资源池中的过滤规则进行编辑。
4.根据权利要求3所述的方法，其特征在于，所述编辑操作包括增加、删除、修改和查询。
5.一种数据接收装置，其特征在于，包括：
第一保存单元，用于将各个客户端发送的运行数据保存到PingBack服务器的本地队列中；
读取单元，用于通过PingBack服务器端口实时读取所述本地队列中的运行数据；
过滤单元，用于加载公共资源池中存储的多个过滤规则，并分别根据各个所述过滤规则对所述运行数据进行过滤，得到与每个所述过滤规则相对应的过滤后的运行数据；
发送单元，用于将过滤后的运行数据发送到Kafka集群中。
6.根据权利要求5所述的装置，其特征在于，所述装置还包括：
第二保存单元，用于将各个客户端发送的所述运行数据保存到PingBack服务器的磁盘中，并将在预设周期内保存在所述磁盘中的运行数据发送到分布式文件系统HDFS进行批处理。
7.根据权利要求5所述的装置，其特征在于，所述装置还包括：
过滤规则编辑单元，用于当接收到用户的编辑指令时，根据所述编辑指令对所述公共资源池中的过滤规则进行编辑。
8.根据权利要求7所述的装置，其特征在于，所述编辑操作包括增加、删除、修改和查询。
CN201710523792.4A 2017-06-30 2017-06-30 一种数据接收方法及装置 Active CN107329832B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710523792.4A CN107329832B (zh) 2017-06-30 2017-06-30 一种数据接收方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710523792.4A CN107329832B (zh) 2017-06-30 2017-06-30 一种数据接收方法及装置

Publications (2)

Publication Number Publication Date
CN107329832A true CN107329832A (zh) 2017-11-07
CN107329832B CN107329832B (zh) 2021-01-22

Family

ID=60199560

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710523792.4A Active CN107329832B (zh) 2017-06-30 2017-06-30 一种数据接收方法及装置

Country Status (1)

Country Link
CN (1) CN107329832B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109545113A (zh) * 2018-09-30 2019-03-29 合肥鑫晟光电科技有限公司 一种异常数据处理方法及装置
CN112737962A (zh) * 2020-12-24 2021-04-30 平安科技（深圳）有限公司 存储服务请求的处理方法、装置、计算机设备及存储介质
CN112822783A (zh) * 2020-12-31 2021-05-18 联想未来通信科技(重庆)有限公司 一种资源调度方法、装置和系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104754036A (zh) * 2015-03-06 2015-07-01 合一信息技术（北京）有限公司 一种基于kafka的消息处理系统及处理方法
CN105188090A (zh) * 2015-08-07 2015-12-23 北京思特奇信息技术股份有限公司 一种实现短信下行压力均衡的方法及系统
CN105224445A (zh) * 2015-10-28 2016-01-06 北京汇商融通信息技术有限公司 分布式跟踪系统
CN105786683A (zh) * 2016-03-03 2016-07-20 四川长虹电器股份有限公司 自定制的日志收集系统和方法
US20160261727A1 (en) * 2015-03-06 2016-09-08 Connie W. Yang Systems and methods of streaming data
CN106372504A (zh) * 2016-08-30 2017-02-01 北京奇艺世纪科技有限公司 一种安全威胁数据整合方法、装置及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104754036A (zh) * 2015-03-06 2015-07-01 合一信息技术（北京）有限公司 一种基于kafka的消息处理系统及处理方法
US20160261727A1 (en) * 2015-03-06 2016-09-08 Connie W. Yang Systems and methods of streaming data
CN105188090A (zh) * 2015-08-07 2015-12-23 北京思特奇信息技术股份有限公司 一种实现短信下行压力均衡的方法及系统
CN105224445A (zh) * 2015-10-28 2016-01-06 北京汇商融通信息技术有限公司 分布式跟踪系统
CN105786683A (zh) * 2016-03-03 2016-07-20 四川长虹电器股份有限公司 自定制的日志收集系统和方法
CN106372504A (zh) * 2016-08-30 2017-02-01 北京奇艺世纪科技有限公司 一种安全威胁数据整合方法、装置及系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109545113A (zh) * 2018-09-30 2019-03-29 合肥鑫晟光电科技有限公司 一种异常数据处理方法及装置
CN112737962A (zh) * 2020-12-24 2021-04-30 平安科技（深圳）有限公司 存储服务请求的处理方法、装置、计算机设备及存储介质
CN112822783A (zh) * 2020-12-31 2021-05-18 联想未来通信科技(重庆)有限公司 一种资源调度方法、装置和系统

Also Published As

Publication number Publication date
CN107329832B (zh) 2021-01-22

Similar Documents

Publication Publication Date Title
CN103365725B (zh) 在多个云之间动态分配工作负荷部署单元的方法和系统
CN104424229B (zh) 一种多维度拆分的计算方法及系统
CN110198555A (zh) 一种网络切片的配置方法和装置
CN104754036A (zh) 一种基于kafka的消息处理系统及处理方法
CN110175154A (zh) 一种日志记录的处理方法、服务器及存储介质
CN103942210A (zh) 海量日志信息的处理方法、装置与系统
CN106484709A (zh) 一种日志数据的审计方法和审计装置
CN109636304B (zh) 业务系统的发布方法及装置、存储介质、电子装置
CN107329832A (zh) 一种数据接收方法及装置
CN111459986A (zh) 数据计算系统及方法
CN106407442B (zh) 一种海量文本数据处理方法及装置
CN105814864B (zh) 一种输入输出io请求处理方法及文件服务器
CN110781971A (zh) 一种商户类型识别方法、装置、设备和可读介质
CN110287266A (zh) 一种分布式系统及数据处理方法
CN111160793A (zh) 一种服务网点自助设备数量的配置方法、装置及设备
CN111127214A (zh) 资产组合的方法和装置
CN107249019A (zh) 基于业务的数据处理系统、方法、装置和服务器
CN113553381A (zh) 一种基于管道的新式调度算法的分布式数据治理系统
DE202021102320U1 (de) System zum Implementieren einer Unterdatenbankreplikation
CN108805587A (zh) 一种客户信息处理方法、装置、介质和电子设备
CN110929130B (zh) 一种基于分布式调度的公安部级审计数据查询方法
CN107480189A (zh) 一种多维度实时分析系统及方法
CN106326424A (zh) 报表处理方法、装置和系统
CN105468763A (zh) 大数据操作多人协作方法
CN109769027A (zh) 一种消息推送方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant