CN109347842A - 一种用于教育系统的数据采集方法及装置 - Google Patents

一种用于教育系统的数据采集方法及装置 Download PDF

Info

Publication number
CN109347842A
CN109347842A CN201811259406.6A CN201811259406A CN109347842A CN 109347842 A CN109347842 A CN 109347842A CN 201811259406 A CN201811259406 A CN 201811259406A CN 109347842 A CN109347842 A CN 109347842A
Authority
CN
China
Prior art keywords
server
data
access request
educational system
nginx
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811259406.6A
Other languages
English (en)
Inventor
孙悦
李天驰
涂桂朝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Dianmao Technology Co Ltd
Original Assignee
Shenzhen Dianmao Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Dianmao Technology Co Ltd filed Critical Shenzhen Dianmao Technology Co Ltd
Priority to CN201811259406.6A priority Critical patent/CN109347842A/zh
Publication of CN109347842A publication Critical patent/CN109347842A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004—Server selection for load balancing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004—Server selection for load balancing
    • H04L67/1008—Server selection for load balancing based on parameters of servers, e.g. available memory or workload

Abstract

本发明公开了一种用于教育系统的数据采集方法及装置，教育系统中包含若干个服务器，方法包括：客户端发起访问请求；获取服务器的负载状态数据，所述服务器用于接收客户端采集并发送的数据；根据负载状态数据将访问请求数据分发至对应的服务器；在所述服务器中存储访问请求对应的数据。本发明实施例可以通过运用负载均衡SLB可以有效减轻单台服务器压力大的问题，分发到数据的服务器可用性高，还可提高采集客户端数据的容错能力，降低数据丢失率。

Description

一种用于教育系统的数据采集方法及装置
技术领域
本发明涉及通信技术领域，尤其涉及一种用于教育系统的数据采集方法及装置。
背景技术
教育系统是一种教育类操作系统，学生和家长可通过教育系统进行网上互动，是一种方便快捷的在线教育学习系统。
随着互联网的发展，数据潜在的价值正逐渐被挖掘出来。用户是互联网行业的重要元素，分析用户的行为，挖掘用户的行为数据对行业的发展至关重要。分析用户行为的关键环节是采集用户数据。但目前现有的教育系统中采集数据主要采集服务端数据，不能对客户端的数据进行采集，现有的客户端数据采集数据容易丢失，为后期用户的行为分析带来了不便。
因此，现有技术还有待于改进和发展。
发明内容
鉴于上述现有技术的不足，本发明的目的在于提供一种用于教育系统的数据采集方法及装置，旨在解决现有技术中的教育系统中的采集客户端的数据时，数据容易丢失的问题。
本发明的技术方案如下：
一种用于教育系统的数据采集方法，所述教育系统中包含若干个服务器，所述方法包括：
客户端发起访问请求；
获取服务器的负载状态数据，所述服务器用于接收客户端采集并发送的数据；
根据负载状态数据将访问请求数据分发至对应的服务器；
在所述服务器中存储访问请求对应的数据。
可选地，所述客户端发起访问请求具体为：
所述客户端对应用页面发起访问请求。
可选地，所述服务器为Nginx服务器，
所述获取服务器的负载状态数据，所述服务器用于接收客户端采集并发送的数据，包括：
获取Nginx服务器的负载状态数据，所述负载状态数据为Nginx服务器的每秒查询率、CPU使用率和内存使用率。
可选地，所述根据负载状态数据将访问请求数据分发至对应的服务器，包括：
获取所有Nginx服务器的负载状态数据，将负载状态数据根据预设的评分规则转化为对应的负载评分；
获取负载评分最高的Nginx服务器，将访问请求数据分发至负载评分最高的Nginx服务器。
可选地，所述获取Nginx服务器的负载状态数据，所述负载状态数据为Nginx服务器的每秒查询率、CPU使用率和内存使用率前，包括：
预先在Nginx服务器安装ngx_kafka_module组件。
可选地，所述预先在Nginx服务器安装ngx_kafka_module组件，还包括：
预先在Nginx服务器中配置对应的转发规则。
可选地，所述在所述服务器中存储访问请求对应的数据，包括：
检测到访问请求发送至Nginx服务器后，根据预先配置的转发规则创建Kafka的主题；所述主题用于存储访问请求对应的数据。
本发明又一实施例还提供了一种用于教育系统的数据采集装置，所述装置包括至少一个处理器；以及，
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述的用于教育系统的数据采集方法。
本发明的另一实施例还提供了一种非易失性计算机可读存储介质，其特征在于，所述非易失性计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行时，可使得所述一个或多个处理器执行上述的用于教育系统的数据采集方法。
本发明的另一种实施例提供了一种计算机程序产品，所述计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被处理器执行时，使所述处理器执行上述的用于教育系统的数据采集方法。
有益效果：本发明公开了一种用于教育系统的数据采集方法及装置，本发明实施例中客户端发起访问请求；获取服务器的负载状态数据，所述服务器用于接收客户端采集并发送的数据；根据负载状态数据将访问请求数据分发至对应的服务器；在所述服务器中存储访问请求对应的数据。本发明实施例可以通过运用负载均衡SLB可以有效减轻单台服务器压力大的问题，分发到数据的服务器可用性高，还可提高集客户端数据的容错能力，降低数据丢失率。
附图说明
下面将结合附图及实施例对本发明作进一步说明，附图中：
图1为本发明一种用于教育系统的数据采集方法较佳实施例的流程图；
图2为本发明一种用于教育系统的数据采集装置较佳实施例的硬件结构示意图。
具体实施方式
为使本发明的目的、技术方案及效果更加清楚、明确，以下对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。以下结合附图对本发明实施例进行介绍。
请参阅图1，图1为本发明一种用于教育系统的数据采集方法较佳实施例的流程图。所述教育系统中包含若干个服务器，如图1所示，其包括步骤：
步骤S100、客户端发起访问请求；
步骤S200、获取服务器的负载状态数据，所述服务器用于接收客户端采集并发送的数据；
步骤S300、根据负载状态数据将访问请求数据分发至对应的服务器；
步骤S400、在所述服务器中存储访问请求对应的数据。
具体实施时，进一步地，步骤S100具体为：
所述客户端对应用页面发起访问请求。
具体实施时，客户端发起访问请求，其中访问请求可以是教育系统的某个应用页面的访问请求。通过SLB(Server Load Balancer)服务器负载均衡实现高可用，检测客户端访问请求，访问可用的服务器，从可用的服务器访问公共资源服务。公共资源服务用于对客户端采集的数据进行消费。SLB(Server Load Balancer)服务器负载均衡建立在现有网络结构之上，它提供了一种廉价有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性。负载均衡，就是分摊到多个操作单元上进行执行，例如Web服务器、FTP服务器、企业关键应用服务器和其它关键任务服务器等，从而共同完成工作任务。
进一步地，服务器为Nginx服务器，
所述获取服务器的负载状态数据，所述服务器用于接收客户端采集并发送的数据，包括：
获取Nginx服务器的负载状态数据，所述负载状态数据为Nginx服务器的每秒查询率、CPU使用率和内存使用率。
具体实施时，可以使用服务器压力测试软件等工具获取服务器的每秒查询率、CPU使用率、内存占用率等可以在服务器上直接获取，任何可以实现获取负载状态数据的方法。本发明实施例过SLB、Nginx、Kafka等组件拉取用户数据，同时能极大降低数据的丢失概率。
进一步地，根据负载状态数据将访问请求数据分发至对应的服务器，包括：
获取所有Nginx服务器的负载状态数据，将负载状态数据根据预设的评分规则转化为对应的负载评分；
获取负载评分最高的Nginx服务器，将访问请求数据分发至负载评分最高的Nginx服务器。
具体实施时，Nginx(engine x)是一个高性能的HTTP和反向代理服务，也是一个IMAP/POP3/SMTP服务。Nginx是一款轻量级的Web服务器/反向代理服务器及电子邮件(IMAP/POP3)代理服务器，并在一个BSD-like协议下发行。其特点是占有内存少，并发能力强。Nginx作为负载均衡服务：Nginx既可以在内部直接支持Rails和PHP程序对外进行服务，也可以支持作为HTTP代理服务对外进行服务。Nginx采用C进行编写，不论是系统资源开销还是CPU使用效率都比Perlbal要好很多。处理静态文件，索引文件以及自动索引；打开文件描述符缓冲。无缓存的反向代理加速，简单的负载均衡和容错。
获取所有Nginx服务器的每秒查询率、CPU使用率、内存占用率等负载状态数据，将每秒查询率、CPU使用率、内存占用率转化为一定的分数，根据各项的分数叠加后生成Nginx服务器的负载评分，获取负载评价最高的Nginx服务器，将访问请求数据分发到负载评分最高的Nginx服务器。其中预设的评分规则是指预先对每秒查询率、CPU使用率、内存占用率的单项分数进行设置，对具体的数值与分数的对应关系进行设置。
进一步地，获取Nginx服务器的负载状态数据，所述负载状态数据为Nginx服务器的每秒查询率、CPU使用率和内存使用率前，包括：
预先在Nginx服务器安装ngx_kafka_module组件。
具体实施时，将ngx_kafka_module组件内嵌在Nginx中，安装Nginx前先安装ngx_kafka_module组件。Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。Kafka具体以下特点：通过O(1)的磁盘数据结构提供消息的持久化，这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能；高吞吐量即使是非常普通的硬件Kafka也可以支持每秒数百万的消息；支持通过Kafka服务器和消费机集群来分区消息。支持Hadoop并行数据加载。预先在Nginx服务器安装ngx_kafka_module组件可使得Nginx服务器支持kafka模块。
进一步地，预先在Nginx服务器安装ngx_kafka_module组件，还包括：
预先在Nginx服务器中配置对应的转发规则。
具体实施时，在Nginx配置文件中配置对应的转发规则，其中转发规则location＝/report/topic_a{kafka_topic_topic_a}。
进一步地，在所述服务器中存储访问请求对应的数据，包括：
检测到访问请求发送至Nginx服务器后，根据预先配置的转发规则创建Kafka的主题；所述主题用于存储访问请求对应的数据。
具体实施时，客户端发起请求，经过负载均衡SLB,请求会转发到Ngnix后，根据转发规则创建kafka的主题topic，ngx_kafka_module根据Nginx中的转发规则，在kafka中创建主题为topic_a来存储数据。Kafka自动生成对应的Topic主题存储相应数据。Kafka中的Topic具体是指：每条发布到Kafka集群的消息都有一个类别，这个类别被称为Topic。物理上不同Topic的消息分开存储，逻辑上一个Topic的消息虽然保存于一个或多个broker上但用户只需指定消息的Topic即可生产或消费数据而不必关心数据存于何处。
由以上方法实施例可知，本发明实施例提供一种用于教育系统的数据采集方法，本发明实施例可以通过运用负载均衡SLB可以有效减轻单台服务器压力大的问题，可用性高，同时也可以提高容错能力。ngx_kafka_module内嵌在Nginx内部可以实现根据请求URL把数据准确分发到对应Kafka的Topic主题中，实现数据的准确分类，利用Kafka也降低了数据丢失的概率。
本发明另一实施例提供一种用于教育系统的数据采集装置，如图2所示，装置10包括：
一个或多个处理器110以及存储器120，图2中以一个处理器110为例进行介绍，处理器110和存储器120可以通过总线或者其他方式连接，图2中以通过总线连接为例。
处理器110用于完成装置10的各种控制逻辑，其可以为通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、单片机、ARM(Acorn RISCMachine)或其它可编程逻辑器件、分立门或晶体管逻辑、分立的硬件组件或者这些部件的任何组合。还有，处理器110还可以是任何传统处理器、微处理器或状态机。处理器110也可以被实现为计算设备的组合，例如，DSP和微处理器的组合、多个微处理器、一个或多个微处理器结合DSP核、或任何其它这种配置。
存储器120作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本发明实施例中的用于教育系统的数据采集方法对应的程序指令。处理器110通过运行存储在存储器120中的非易失性软件程序、指令以及单元，从而执行装置10的各种功能应用以及数据处理，即实现上述方法实施例中的用于教育系统的数据采集方法。
存储器120可以包括存储程序区和存储数据区，其中，存储程序区可存储操作装置、至少一个功能所需要的应用程序；存储数据区可存储根据装置10使用所创建的数据等。此外，存储器120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器120可选包括相对于处理器110远程设置的存储器，这些远程存储器可以通过网络连接至装置10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
一个或者多个单元存储在存储器120中，当被一个或者多个处理器110执行时，执行上述任意方法实施例中的用于教育系统的数据采集方法，例如，执行以上描述的图1中的方法步骤S100至步骤S400。
本发明实施例提供了一种非易失性计算机可读存储介质，计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行，例如，执行以上描述的图1中的方法步骤S100至步骤S400。
作为示例，非易失性存储介质能够包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦ROM(EEPROM)或闪速存储器。易失性存储器能够包括作为外部高速缓存存储器的随机存取存储器(RAM)。通过说明丽非限制，RAM可以以诸如同步RAM(SRAM)、动态RAM、(DRAM)、同步DRAM(SDRAM)、双数据速率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、Synchlink DRAM(SLDRAM)以及直接Rambus(兰巴斯)RAM(DRRAM)之类的许多形式得到。本文中所描述的操作环境的所公开的存储器组件或存储器旨在包括这些和/或任何其他适合类型的存储器中的一个或多个。
本发明的另一种实施例提供了一种计算机程序产品，计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序，计算机程序包括程序指令，当程序指令被处理器执行时，使所述处理器执行上述方法实施例的用于教育系统的数据采集方法。例如，执行以上描述的图1中的方法步骤S100至步骤S400。
以上所描述的实施例仅仅是示意性的，其中作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际需要选择其中的部分或者全部模块来实现本实施例方案的目的。
通过以上的实施例的描述，本领域的技术人员可以清楚地了解到各实施例可借助软件加通用硬件平台的方式来实现，当然也可以通过硬件实现。基于这样的理解，上述技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存在于计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机电子设备(可以是个人计算机，服务器，或者网络电子设备等)执行各个实施例或者实施例的某些部分的方法。
除了其他之外，诸如"能够'、"能"、"可能"或"可以"之类的条件语言除非另外具体地陈述或者在如所使用的上下文内以其他方式理解，否则一般地旨在传达特定实施方式能包括(然而其他实施方式不包括)特定特征、元件和/或操作。因此，这样的条件语言一般地不旨在暗示特征、元件和/或操作对于一个或多个实施方式无论如何都是需要的或者一个或多个实施方式必须包括用于在有或没有学生输入或提示的情况下判定这些特征、元件和/或操作是否被包括或者将在任何特定实施方式中被执行的逻辑。
已经在本文中在本说明书和附图中描述的内容包括能够提供智能柜定制方法及装置的示例。当然，不能够出于描述本公开的各种特征的目的来描述元件和/或方法的每个可以想象的组合，但是可以认识到，所公开的特征的许多另外的组合和置换是可能的。因此，显而易见的是，在不脱离本公开的范围或精神的情况下能够对本公开做出各种修改。此外，或在替代方案中，本公开的其他实施例从对本说明书和附图的考虑以及如本文中所呈现的本公开的实践中可能是显而易见的。意图是，本说明书和附图中所提出的示例在所有方面被认为是说明性的而非限制性的。尽管在本文中采用了特定术语，但是它们在通用和描述性意义上被使用并且不用于限制的目的。

Claims (10)

1.一种用于教育系统的数据采集方法,其特征在于,所述教育系统中包含若干个服务器，所述方法包括：
客户端发起访问请求；
获取服务器的负载状态数据，所述服务器用于接收客户端采集并发送的数据；
根据负载状态数据将访问请求数据分发至对应的服务器；
在所述服务器中存储访问请求对应的数据。
2.根据权利要求1所述的用于教育系统的数据采集方法，其特征在于，所述客户端发起访问请求具体为：
所述客户端对应用页面发起访问请求。
3.根据权利要求1所述用于教育系统的数据采集方法，其特征在于，所述服务器为Nginx服务器，
所述获取服务器的负载状态数据，所述服务器用于接收客户端采集并发送的数据，包括：
获取Nginx服务器的负载状态数据，所述负载状态数据为Nginx服务器的每秒查询率、CPU使用率和内存使用率。
4.根据权利要3所述的用于教育系统的数据采集方法，其特征在于，所述根据负载状态数据将访问请求数据分发至对应的服务器，包括：
获取所有Nginx服务器的负载状态数据，将负载状态数据根据预设的评分规则转化为对应的负载评分；
获取负载评分最高的Nginx服务器，将访问请求数据分发至负载评分最高的Nginx服务器。
5.根据权利要求4所述的用于教育系统的数据采集方法，其特征在于，所述获取Nginx服务器的负载状态数据，所述负载状态数据为Nginx服务器的每秒查询率、CPU使用率和内存使用率前，包括：
预先在Nginx服务器安装ngx_kafka_module组件。
6.根据权利要求5所述的用于教育系统的数据采集方法，其特征在于，所述预先在Nginx服务器安装ngx_kafka_module组件，还包括：
预先在Nginx服务器中配置对应的转发规则。
7.根据权利要求6所述的用于教育系统的数据采集方法，其特征在于，所述在所述服务器中存储访问请求对应的数据，包括：
检测到访问请求发送至Nginx服务器后，根据预先配置的转发规则创建Kafka的主题；所述主题用于存储访问请求对应的数据。
8.一种用于教育系统的数据采集装置，其特征在于，所述装置包括至少一个处理器；以及，
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-7任一项所述的用于教育系统的数据采集方法。
9.一种非易失性计算机可读存储介质，其特征在于，所述非易失性计算机可读存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行时，可使得所述一个或多个处理器执行权利要求1-7任一项所述的用于教育系统的数据采集方法。
10.一种计算机程序产品，其特征在于，所述计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被处理器执行时，使所述处理器执行权利要求1-7任一项所述的用于教育系统的数据采集方法。
CN201811259406.6A 2018-10-26 2018-10-26 一种用于教育系统的数据采集方法及装置 Pending CN109347842A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811259406.6A CN109347842A (zh) 2018-10-26 2018-10-26 一种用于教育系统的数据采集方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811259406.6A CN109347842A (zh) 2018-10-26 2018-10-26 一种用于教育系统的数据采集方法及装置

Publications (1)

Publication Number Publication Date
CN109347842A true CN109347842A (zh) 2019-02-15

Family

ID=65312001

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811259406.6A Pending CN109347842A (zh) 2018-10-26 2018-10-26 一种用于教育系统的数据采集方法及装置

Country Status (1)

Country Link
CN (1) CN109347842A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112615759A (zh) * 2020-12-17 2021-04-06 上海哔哩哔哩科技有限公司 全链路压测组件、全链路压测方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105791381A (zh) * 2015-12-30 2016-07-20 东莞市青麦田数码科技有限公司 访问控制的方法及装置
CN106331129A (zh) * 2016-08-30 2017-01-11 广州西麦科技股份有限公司 一种负载均衡装置及其实现负载均衡的方法
CN107085579A (zh) * 2016-02-16 2017-08-22 中国移动通信集团福建有限公司 一种数据采集分发方法及装置
CN107196869A (zh) * 2017-07-14 2017-09-22 北京知道创宇信息技术有限公司 基于主机实际负载的自适应负载均衡方法、设备和系统
JP2018032115A (ja) * 2016-08-23 2018-03-01 株式会社日立製作所 データストア装置およびデータ管理方法
CN108111586A (zh) * 2017-12-14 2018-06-01 重庆邮电大学 一种高并发支持的web集群系统及方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105791381A (zh) * 2015-12-30 2016-07-20 东莞市青麦田数码科技有限公司 访问控制的方法及装置
CN107085579A (zh) * 2016-02-16 2017-08-22 中国移动通信集团福建有限公司 一种数据采集分发方法及装置
JP2018032115A (ja) * 2016-08-23 2018-03-01 株式会社日立製作所 データストア装置およびデータ管理方法
CN106331129A (zh) * 2016-08-30 2017-01-11 广州西麦科技股份有限公司 一种负载均衡装置及其实现负载均衡的方法
CN107196869A (zh) * 2017-07-14 2017-09-22 北京知道创宇信息技术有限公司 基于主机实际负载的自适应负载均衡方法、设备和系统
CN108111586A (zh) * 2017-12-14 2018-06-01 重庆邮电大学 一种高并发支持的web集群系统及方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112615759A (zh) * 2020-12-17 2021-04-06 上海哔哩哔哩科技有限公司 全链路压测组件、全链路压测方法及装置
CN112615759B (zh) * 2020-12-17 2023-03-31 上海哔哩哔哩科技有限公司 全链路压测组件、全链路压测方法及装置

Similar Documents

Publication Publication Date Title
US9239705B2 (en) Method and apparatus for customized software development kit (SDK) generation
CN105701113B (zh) 用于优化网页预加载的方法和设备
CN105447088B (zh) 一种基于志愿者计算的多租户专业云爬虫系统
CN101222349B (zh) 收集web用户行为及性能数据的方法及系统
US9749387B2 (en) Transparently stateful execution of stateless applications
CN103150513B (zh) 拦截应用程序中的植入信息的方法及装置
CN108415710B (zh) 在智能对话开发平台上发布、调用api的方法和系统
US11240290B2 (en) Application download method and apparatus, application sending method and apparatus, and system
CN102880503A (zh) 数据分析系统及数据分析方法
CN111459986B (zh) 数据计算系统及方法
US9614925B2 (en) Intelligent file pre-fetch based on access patterns
CN104137094A (zh) 用于计算设备的内容预先取回
JP2021515950A (ja) クラウドコンピューティングのためのシステム及び方法
CN107590188A (zh) 一种自动化垂直细分领域的爬虫爬取方法及其管理系统
CN101131744A (zh) 一种实现数据对象模型自动适配的方法和系统
He et al. Programming framework and infrastructure for self-adaptation and optimized evolution method for microservice systems in cloud–edge environments
KR20200029387A (ko) 캐시 최적화 및 효율적인 프로세싱을 위한 데이터 집성 방법
CN103713935A (zh) 一种在线管理Hadoop集群资源的方法和装置
CN109634652A (zh) 一种数据处理的方法、装置、计算机存储介质及终端
CN104020992B (zh) 由C/C++生成Java Web服务的方法及装置
WO2019109798A1 (zh) 资源加载的方法、装置、终端及存储介质
CN106021566A (zh) 一种提高单台数据库并发处理能力的方法、装置及系统
CN109766488B (zh) 一种基于Scrapy的数据采集方法
CN109542638A (zh) 一种基于教育系统的文件处理方法及装置
CN106897313B (zh) 一种海量用户业务偏好评估方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190215

RJ01 Rejection of invention patent application after publication