CN108234242A - 一种基于流的压力测试方法和装置 - Google Patents

一种基于流的压力测试方法和装置 Download PDF

Info

Publication number
CN108234242A
CN108234242A CN201711489583.9A CN201711489583A CN108234242A CN 108234242 A CN108234242 A CN 108234242A CN 201711489583 A CN201711489583 A CN 201711489583A CN 108234242 A CN108234242 A CN 108234242A
Authority
CN
China
Prior art keywords
pressure
thread
connection
distributed
task
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711489583.9A
Other languages
English (en)
Inventor
邓茜
钟健男
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Qihoo Technology Co Ltd
Original Assignee
Beijing Qihoo Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Qihoo Technology Co Ltd filed Critical Beijing Qihoo Technology Co Ltd
Priority to CN201711489583.9A priority Critical patent/CN108234242A/zh
Publication of CN108234242A publication Critical patent/CN108234242A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876—Network utilisation, e.g. volume of load or congestion level
    • H04L43/0894—Packet rate
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0823—Errors, e.g. transmission errors
    • H04L43/0829—Packet loss
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/12—Avoiding congestion; Recovering from congestion
    • H04L47/125—Avoiding congestion; Recovering from congestion by balancing the load, e.g. traffic engineering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Environmental & Geological Engineering (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例提供了一种基于流的压力测试方法和装置，该方法包括：在线程池中接收压测任务；在所述线程池中分配多个工作线程；将所述压测任务拆分成多个测试子任务；将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象。一方面，可以模拟不同要求(如码率)的多媒体数据流，无需读取文件，减少CPU、内存等资源的占用，效率更高；另一方面，可以创建任意数量的连接，模拟多用户访问场景，方便统计测试数据，输出性能指标。

Description

一种基于流的压力测试方法和装置
技术领域
本发明涉及测试技术领域，特别是涉及一种基于流的压力测试方法和一种基于流的压力测试装置。
背景技术
随着网络科技的发展以及智能设备的普及，人们喜欢将自己或者自己身边的事情，以流的形式实时在网络平台上开设直播间进行公开直播，其他用户可以进入该直播间进行观看、互动。
这些直播的流通常通过分发系统分发至各个节点，如CDN(Content DeliveryNetwork，内容分发网络)，方便用户可以及时的收看到直播。
目前，对分发系统进行压力测试，一般是通过创建一个线程模拟一条连接，再读取本地的多媒体文件发送至分发系统。
但是，线程过多、读取多媒体文件，将大量占用CPU(Central Processing Unit，中央处理器)和内存等资源，导致同一台设备可以模拟的连接数受到限制。
发明内容
鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的一种基于流的压力测试方法和相应的一种基于流的压力测试装置。
依据本发明的一个方面，提供了一种基于流的压力测试方法，包括：
在线程池中接收压测任务；
在所述线程池中分配多个工作线程；
将所述压测任务拆分成多个测试子任务；
将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象。
可选地，所述线程池中具有调度线程；
所述在线程池中接收压测任务，包括：
调用所述调度线程接收Web页面发送的压测任务。
可选地，所述在所述线程池中分配多个工作线程，包括：
选定待运行的处理器内核；
在所述线程池中分配与所述处理器内核匹配的至少一个工作线程。
可选地，所述压测任务包括连接数量与多媒体参数；
所述将所述压测任务拆分成多个测试子任务，包括：
将所述连接数量分配给所述多个工作线程，以拆分成多个连接子数量；
将所述多个连接子数量分别与所述多媒体参数生成多个测试子任务。
可选地，所述将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象，包括：
将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立所述连接子数量的连接，并按照所述多媒体参数生成多媒体数据流，通过所述连接发送至所述压测对象。
可选地，所述多媒体参数包括：
视频数据帧的发送频率、画面组的类型；
和/或，
音频数据帧的发送频率。
可选地，在内容分发网络CDN中包括中心节点、父层节点、边缘节点；
所述中心节点与源网站进行通信；
所述父层节点之间相互通信，与所述中心节点或者源网站进行通信，以及，与所述边缘节点进行通信；
所述边缘节点用于与客户端进行通信；
所述压测对象包括所述父层节点与所述边缘节点。
可选地，还包括：
接收所述多个测试子任务的多个测试子结果；
根据所述多个测试子结果生成压测结果。
根据本发明的另一方面，提供了一种基于流的压力测试装置，包括：
压测任务接收模块，用于在线程池中接收压测任务；
工作线程分配模块，用于在所述线程池中分配多个工作线程；
压测任务拆分模块，用于将所述压测任务拆分成多个测试子任务；
工作线程测试模块，用于将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象。
可选地，所述线程池中具有调度线程；所述压测任务接收模块包括：
页面接收子模块，用于调用所述调度线程接收Web页面发送的压测任务。
可选地，所述工作线程分配模块包括：
内核选定子模块，用于选定待运行的处理器内核；
工作线程匹配子模块，用于在所述线程池中分配与所述处理器内核匹配的至少一个工作线程。
可选地，所述压测任务包括连接数量与多媒体参数；
所述压测任务拆分模块包括：
数量分配子模块，用于将所述连接数量分配给所述多个工作线程，以拆分成多个连接子数量；
参数生成子模块，用于将所述多个连接子数量分别与所述多媒体参数生成多个测试子任务。
可选地，所述工作线程测试模块包括：
测试子任务执行子模块，用于将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立所述连接子数量的连接，并按照所述多媒体参数生成多媒体数据流，通过所述连接发送至所述压测对象。
可选地，所述多媒体参数包括：
视频数据帧的发送频率、画面组的类型；
和/或，
音频数据帧的发送频率。
可选地，在内容分发网络CDN中包括中心节点、父层节点、边缘节点；
所述中心节点与源网站进行通信；
所述父层节点之间相互通信，与所述中心节点或者源网站进行通信，以及，与所述边缘节点进行通信；
所述边缘节点用于与客户端进行通信；
所述压测对象包括所述父层节点与所述边缘节点。
可选地，还包括：
测试子结果接收模块，用于接收所述多个测试子任务的多个测试子结果；
压测结果生成模块，用于根据所述多个测试子结果生成压测结果。
本发明实施例在线程池中接收压测任务，在线程池中分配多个工作线程，将压测任务拆分成多个测试子任务，将多个测试子任务分别分发至多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过连接发送至所述压测对象，一方面，可以模拟不同要求(如码率)的多媒体数据流，无需读取文件，减少CPU、内存等资源的占用，效率更高；另一方面，可以创建任意数量的连接，模拟多用户访问场景，方便统计测试数据，输出性能指标。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了根据本发明一个实施例的一种基于流的压力测试方法实施例的步骤流程示意图；
图2示出了根据本发明一个实施例的一种内容分发网络CDN的结构示意图；以及
图3示出了根据本发明一个实施例的一种基于流的压力测试装置实施例的结构示意框图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
参照图1，示出了根据本发明一个实施例的一种基于流的压力测试方法实施例的步骤流程示意图，具体可以包括如下步骤：
步骤101，在线程池中接收压测任务。
在本发明实施例中，可以通过asio等方式启动线程池，由该线程池调用相关的线程进行压力测试。
线程池是预先创建线程的一种技术，处理过程中将任务添加到队列，然后在创建线程后自动启动这些任务，当然，线程池在还没有任务到来之前，创建一定数量的线程，放入空闲队列中。这些线程都是处于睡眠状态，即均为启动，不消耗CPU，而只是占用较小的内存空间。
当请求到来之后，缓冲池给这次请求分配一个空闲线程，把请求传入此线程中运行，进行处理。
当预先创建的线程都处于运行状态，即预制线程不够，线程池可以自由创建一定数量的新线程，用于处理更多的请求。
当系统比较闲的时候，也可以通过移除一部分一直处于停用状态的线程。
以asio为例，io_service的方法run()可以阻塞的等待在io_service上的异步操作，异步操作全部执行完之后结束，那么使用io_service::work控制run()使其持续等待由应用投递过来的任务，保证线程持续运行，同时开启N个线程进行处理，也就是保证了线程资源只有一次申请和释放。
在具体实现中，用户可以启动一Web页面，在该Web页面配置压测任务，并通过HttpServer(Hyper Text Transport Protocol Server，应用超文本传输协议的服务)发送至线程池。
对于线程池而言，线程池中具有调度线程，调用该调度线程可以接收Web页面发送的压测任务。
步骤102，在所述线程池中分配多个工作线程。
在具体实现中，线程池中的调度线程接收到压测任务之后，如果线程池中具有足够数量的、空闲的工作线程，则将其直接分配给该压测任务，如果线程池中没有足够数量的空闲的工作线程，则可以生成新的工作线程，并将其分配给该压测任务。
在本发明的一个实施例中，可以选定待运行的处理器内核，在线程池中分配与处理器内核匹配的至少一个工作线程。
在本实施例中，可以预先测定在一个处理器内核中启动的线程的最优数量，即可在一个处理器内核中启动相应数量的线程。
一般而言，处理器内核的数量与工作线程的数量相等，可以使得性能最优。
步骤103，将所述压测任务拆分成多个测试子任务。
线程池中的调度线程分配了工作线程，则可以将Web页面下发的压测任务拆分成相应数量的测试子任务，使得每一个工作线程完成一个测试子任务，从而合作完成压测任务。
在本发明的一个实施例中，压测任务包括连接数量(即与压测对象建立连接的数量)与多媒体参数(即设置多媒体的参数)，则在本发明实施例中，步骤103可以包括如下子步骤：
子步骤S11，将所述连接数量分配给所述多个工作线程，以拆分成多个连接子数量。
子步骤S12，将所述多个连接子数量分别与所述多媒体参数生成多个测试子任务。
在本发明实施例中，可以通过哈希取余法等方式，将连接数量分配给每个工作线程，每个工作线程负责的数量为连接子数量，从而均衡各个工作线程的负载。
此外，每个工作线程的多媒体参数可以是相同的，将多媒体参数分别与每个连接子数量生成每个工作线程的测试子任务。
步骤104，将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象。
在具体实现中，线程池中的调度线程将每个测试子任务分发到每个工作线程。
每个工作线程则按照该测试子任务的要求，与压测对象建立连接，生成多媒体数据流，通过该连接发送至压测对象。
进一步而言，若测试子任务中包括连接子数量、多媒体参数，线程池中的调度线程可以将多个测试子任务分别分发多个工作线程，以与压测对象建立该连接子数量的连接，并按照该多媒体参数生成多媒体数据流，通过连接发送至压测对象。
一般情况下，一个工作线程中可以与压测对象建立多个连接，模拟多个用户进行操作。
在一种情况中，多媒体参数包括视频数据帧的发送频率、画面组(Group ofPictures，GOP)的类型。
在此情况中，工作线程可以模拟用户上传视频流数据，例如，在GOP中，具有1个I帧，20个P帧，每帧间隔10ms发送。
在另一种情况中，多媒体参数包括音频数据帧的发送频率。
在此情况中，工作线程可以模拟用户上传音频流数据。
当然，音频流数据、视频流数据可以同时进行发送，本发明实施例对此不加以限制。
需要说明的是，视频数据帧、音频数据帧并非在本地存储的视频数据、音频数据，而是工作线程实时按照协议规范生成的，该协议可以是公开的协议，也可以是私自的协议，当然，为了降低处理量，视频数据帧、音频数据帧可以是简单的数据形式，如全部为0或全部为1，并不要求一定可以进行播放。
在本发明的一个实施例中，压测对象可以位于内容分发网络CDN中。
在内容分发网络CDN中，通常具有多个用于传输数据流(如直播流)的节点，在某个节点接收到客户端的数据流(如直播流)之后，可以推送至其他节点，在用户访问数据流(如直播流)的时候，通过调度将用户的请求路由或者引导到离用户接入网络最近或者访问效果最佳的节点上，由该节点为用户提供数据流(如直播流)；相对于直接访问源网站，这种方式缩短了用户和数据流(如直播流)之间的网络距离，从而达到加速的效果。
需要说明的是，在不同的内容分发网络CDN中，拓扑结构可能有所不同。
在具体实现中，内容分发网络CDN的多个节点包括中心节点、父层节点、边缘节点。
其中，中心节点为资源的超汇聚节点，可以与源网站进行通信，汇聚了大量源网站的资源，这些资源一般为变化较少的资源，例如，视频、图片等等。
需要说明的是，在某些内容分发网络CDN中可以部署中心节点，即该部分内容分发网络CDN为中心节点-父层节点-边缘节点的三层结构，在某些内容分发网络CDN中可以不部署中心节点，即该部分内容分发网络CDN为父层节点-边缘节点的二层结构，本发明实施例对此不加以限制。
父层节点为资源的次汇聚节点，一方面，由于在CDN内部，各节点之间一般使用双向光纤等专有的通信线缆进行通信，中心节点与父层节点之间的通信质量有较高的保障，在获取变化较少的资源、外部源网站通信质量较差等情况下，可以与中心节点进行通信，从中心节点获取资源，另一方面，在获取新的资源、进行数据操作(如支付)等情况下，可以与源网站进行通信，从源网站获取资源。
再者，父层节点之间可以相互通信，从而组成父层节点与边缘节点之间的传输路径，即一个节点到另一个节点所经过的中间传输的节点及通信线缆所组成的路径。
具体而言，选取传输路径的方式可以有多种，可以根据实际需求选择如下至少一种方式：
1、选取传输性能符合设定的要求的传输路径。
传输性能是指传输流数据的传输路径的传输能力，可以根据节点间的距离、传输速度、数据丢失率、阻塞状况等确定传输路径的传输性能，通过定期更新每两个节点间的传输性能，根据节点之间的各传输路径的传输性能，选取其中传输性能符合要求或传输性能最好的传输路径。
2、选取经过的节点数量最少的传输路径。
在多条传输路径中选取节点数量最少的传输路径，这样，就可以占用最少的传输资源完成数据从一个节点到另一个节点的传输。
3、选取在一段时间内没有选择过的传输路径。
如果历史上有流数据从一个节点传输至另一个节点，那么，当有新的数据要从这两个之间进行传输，可以在一段时间内没有选择过的各传输路径中选取一条，以避免一直选取同一条传输路径导致该传输路径上的节点负载过重。
当然，上述传输路径的选取方式只是作为示例，在实施本发明实施例时，可以根据实际情况设置其他传输路径的选取方式，本发明实施例对此不加以限制。另外，除了上述传输路径的选取方式外，本领域技术人员还可以根据实际需要采用其它传输路径的选取方式，本发明实施例对此也不加以限制
此外，父层节点一般部署有多个运营商的机房，机房之间通过双线光线等专有的通信线缆进行连接，边缘节点一般是部署在某个运营商的网络中，同运营商之间的父层节点的机房可以与边缘节点进行通信。
边缘节点之间具有相互通信的能力，但是，一般情况下，不会直接进行通信。
边缘节点可以接入客户端，例如，手机、平板电脑、电视等等，用于与客户端进行通信，如获取其采集的直播流，或者，将直播流推送至该客户端。
为使本领域技术人员更好地理解本发明实施例，以下通过具体的示例来说明本发明实施例中的内容分发网络CDN。
如图2所示，父层节点为A1、A2、A3、A4，可以按照地理位置进行部署，例如，A1部署在北京、A2部署在上海、A3部署在广州，A4部署在郑州，A1可以与A2进行通信，A2可以与A3进行通信，A3可以与A4进行通信，A4可以与A1进行通信，父层节点之间的循环通信，可以组成环状的父层结构。
此外，每个父层节点可以连接一个或多个边缘节点，边缘节点也可以按照地理位置、运营商等因素进行部署，边缘节点之间一般不直接进行通信，而是经过父层节点进行中转，父层节点A1连接边缘节点A11、A12，父层节点A2连接缘节点A21、A22，父层节点A3连接缘节点A31、A32、A33，父层节点A4连接缘节点A41、A42、A43。
边缘节点接入客户端，如边缘节点A32接入客户端B1，用于接收客户端的数据(如直播流)，或者，将数据(如直播流)发送至该客户端。
对于此内容分发网络CDN，压测对象可以包括父层节点与边缘节点。
当然，对于其他内容分发网络CDN，可能具有不同的拓扑结构，压测对象也可以为其他节点，本发明实施例对此不加以限制。
在执行测试子任务之后，工作线程将测试结果(如连接失败，码率，丢包率等)返回调度线程。
对于调度线程而言，接收多个测试子任务的多个测试子结果，根据多个测试子结果生成压测结果，例如，聚合各个工作线程的测试子结果，形成压测结果，从而返回给Web页面进行显示。
本发明实施例在线程池中接收压测任务，在线程池中分配多个工作线程，将压测任务拆分成多个测试子任务，将多个测试子任务分别分发至多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过连接发送至所述压测对象，一方面，可以模拟不同要求(如码率)的多媒体数据流，无需读取文件，减少CPU、内存等资源的占用，效率更高；另一方面，可以创建任意数量的连接，模拟多用户访问场景，方便统计测试数据，输出性能指标。
对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
参照图3，示出了根据本发明一个实施例的一种基于流的压力测试装置实施例的结构示意框图，具体可以包括如下模块：
压测任务接收模块301，用于在线程池中接收压测任务；
工作线程分配模块302，用于在所述线程池中分配多个工作线程；
压测任务拆分模块303，用于将所述压测任务拆分成多个测试子任务；
工作线程测试模块304，用于将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象。
在本发明的一个实施例中，所述线程池中具有调度线程；所述压测任务接收模块301包括：
页面接收子模块，用于调用所述调度线程接收Web页面发送的压测任务。
在本发明的一个实施例中，所述工作线程分配模块302包括：
内核选定子模块，用于选定待运行的处理器内核；
工作线程匹配子模块，用于在所述线程池中分配与所述处理器内核匹配的至少一个工作线程。
在本发明的一个实施例中，所述压测任务包括连接数量与多媒体参数；
所述压测任务拆分模块303包括：
数量分配子模块，用于将所述连接数量分配给所述多个工作线程，以拆分成多个连接子数量；
参数生成子模块，用于将所述多个连接子数量分别与所述多媒体参数生成多个测试子任务。
在本发明的一个实施例中，所述工作线程测试模块304包括：
测试子任务执行子模块，用于将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立所述连接子数量的连接，并按照所述多媒体参数生成多媒体数据流，通过所述连接发送至所述压测对象。
在具体实现中，所述多媒体参数包括：
视频数据帧的发送频率、画面组的类型；
和/或，
音频数据帧的发送频率。
在本发明的一个实施例中，在内容分发网络CDN中包括中心节点、父层节点、边缘节点；
所述中心节点与源网站进行通信；
所述父层节点之间相互通信，与所述中心节点或者源网站进行通信，以及，与所述边缘节点进行通信；
所述边缘节点用于与客户端进行通信；
所述压测对象包括所述父层节点与所述边缘节点。
在本发明的一个实施例中，还包括：
测试子结果接收模块，用于接收所述多个测试子任务的多个测试子结果；
压测结果生成模块，用于根据所述多个测试子结果生成压测结果。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造这类系统所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的基于流的压力测试设备中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本发明实施例公开了A1、一种基于流的压力测试方法，包括：
在线程池中接收压测任务；
在所述线程池中分配多个工作线程；
将所述压测任务拆分成多个测试子任务；
将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象。
A2、如A1所述的方法，所述线程池中具有调度线程；
所述在线程池中接收压测任务，包括：
调用所述调度线程接收Web页面发送的压测任务。
A3、如A1所述的方法，所述在所述线程池中分配多个工作线程，包括：
选定待运行的处理器内核；
在所述线程池中分配与所述处理器内核匹配的至少一个工作线程。
A4、如A1所述的方法，所述压测任务包括连接数量与多媒体参数；
所述将所述压测任务拆分成多个测试子任务，包括：
将所述连接数量分配给所述多个工作线程，以拆分成多个连接子数量；
将所述多个连接子数量分别与所述多媒体参数生成多个测试子任务。
A5、如A4所述的方法，所述将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象，包括：
将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立所述连接子数量的连接，并按照所述多媒体参数生成多媒体数据流，通过所述连接发送至所述压测对象。
A6、如A4或A5所述的方法，所述多媒体参数包括：
视频数据帧的发送频率、画面组的类型；
和/或，
音频数据帧的发送频率。
A7、如A1-A5任一项所述的方法，在内容分发网络CDN中包括中心节点、父层节点、边缘节点；
所述中心节点与源网站进行通信；
所述父层节点之间相互通信，与所述中心节点或者源网站进行通信，以及，与所述边缘节点进行通信；
所述边缘节点用于与客户端进行通信；
所述压测对象包括所述父层节点与所述边缘节点。
A8、如A1-A5任一项所述的方法，还包括：
接收所述多个测试子任务的多个测试子结果；
根据所述多个测试子结果生成压测结果。
本发明实施例还公开了B9、一种基于流的压力测试装置，包括：
压测任务接收模块，用于在线程池中接收压测任务；
工作线程分配模块，用于在所述线程池中分配多个工作线程；
压测任务拆分模块，用于将所述压测任务拆分成多个测试子任务；
工作线程测试模块，用于将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象。
B10、如B9所述的装置，所述线程池中具有调度线程；所述压测任务接收模块包括：
页面接收子模块，用于调用所述调度线程接收Web页面发送的压测任务。
B11、如B9所述的装置，所述工作线程分配模块包括：
内核选定子模块，用于选定待运行的处理器内核；
工作线程匹配子模块，用于在所述线程池中分配与所述处理器内核匹配的至少一个工作线程。
B12、如B9所述的装置，所述压测任务包括连接数量与多媒体参数；
所述压测任务拆分模块包括：
数量分配子模块，用于将所述连接数量分配给所述多个工作线程，以拆分成多个连接子数量；
参数生成子模块，用于将所述多个连接子数量分别与所述多媒体参数生成多个测试子任务。
B13、如B12所述的装置，所述工作线程测试模块包括：
测试子任务执行子模块，用于将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立所述连接子数量的连接，并按照所述多媒体参数生成多媒体数据流，通过所述连接发送至所述压测对象。
B14、如B12或B13所述的方法，所述多媒体参数包括：
视频数据帧的发送频率、画面组的类型；
和/或，
音频数据帧的发送频率。
B15、如B9-B14任一项所述的装置，在内容分发网络CDN中包括中心节点、父层节点、边缘节点；
所述中心节点与源网站进行通信；
所述父层节点之间相互通信，与所述中心节点或者源网站进行通信，以及，与所述边缘节点进行通信；
所述边缘节点用于与客户端进行通信；
所述压测对象包括所述父层节点与所述边缘节点。
B16、如B9-B14任一项所述的装置，还包括：
测试子结果接收模块，用于接收所述多个测试子任务的多个测试子结果；
压测结果生成模块，用于根据所述多个测试子结果生成压测结果。

Claims (10)

1.一种基于流的压力测试方法，包括：
在线程池中接收压测任务；
在所述线程池中分配多个工作线程；
将所述压测任务拆分成多个测试子任务；
将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象。
2.如权利要求1所述的方法，其特征在于，所述线程池中具有调度线程；
所述在线程池中接收压测任务，包括：
调用所述调度线程接收Web页面发送的压测任务。
3.如权利要求1所述的方法，其特征在于，所述在所述线程池中分配多个工作线程，包括：
选定待运行的处理器内核；
在所述线程池中分配与所述处理器内核匹配的至少一个工作线程。
4.如权利要求1所述的方法，其特征在于，所述压测任务包括连接数量与多媒体参数；
所述将所述压测任务拆分成多个测试子任务，包括：
将所述连接数量分配给所述多个工作线程，以拆分成多个连接子数量；
将所述多个连接子数量分别与所述多媒体参数生成多个测试子任务。
5.如权利要求4所述的方法，其特征在于，所述将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象，包括：
将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立所述连接子数量的连接，并按照所述多媒体参数生成多媒体数据流，通过所述连接发送至所述压测对象。
6.如权利要求4或5所述的方法，其特征在于，所述多媒体参数包括：
视频数据帧的发送频率、画面组的类型；
和/或，
音频数据帧的发送频率。
7.如权利要求1-5任一项所述的方法，其特征在于，在内容分发网络CDN中包括中心节点、父层节点、边缘节点；
所述中心节点与源网站进行通信；
所述父层节点之间相互通信，与所述中心节点或者源网站进行通信，以及，与所述边缘节点进行通信；
所述边缘节点用于与客户端进行通信；
所述压测对象包括所述父层节点与所述边缘节点。
8.如权利要求1-5任一项所述的方法，其特征在于，还包括：
接收所述多个测试子任务的多个测试子结果；
根据所述多个测试子结果生成压测结果。
9.一种基于流的压力测试装置，包括：
压测任务接收模块，用于在线程池中接收压测任务；
工作线程分配模块，用于在所述线程池中分配多个工作线程；
压测任务拆分模块，用于将所述压测任务拆分成多个测试子任务；
工作线程测试模块，用于将所述多个测试子任务分别分发至所述多个工作线程，以与压测对象建立连接，并生成多媒体数据流，通过所述连接发送至所述压测对象。
10.如权利要求9所述的装置，其特征在于，所述线程池中具有调度线程；所述压测任务接收模块包括：
页面接收子模块，用于调用所述调度线程接收Web页面发送的压测任务。
CN201711489583.9A 2017-12-29 2017-12-29 一种基于流的压力测试方法和装置 Pending CN108234242A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711489583.9A CN108234242A (zh) 2017-12-29 2017-12-29 一种基于流的压力测试方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711489583.9A CN108234242A (zh) 2017-12-29 2017-12-29 一种基于流的压力测试方法和装置

Publications (1)

Publication Number Publication Date
CN108234242A true CN108234242A (zh) 2018-06-29

Family

ID=62646476

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711489583.9A Pending CN108234242A (zh) 2017-12-29 2017-12-29 一种基于流的压力测试方法和装置

Country Status (1)

Country Link
CN (1) CN108234242A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109361953A (zh) * 2018-09-18 2019-02-19 武汉斗鱼网络科技有限公司 弹幕消息的动态分发方法、装置、设备和存储介质
CN109491895A (zh) * 2018-10-26 2019-03-19 北京车和家信息技术有限公司 服务器压力测试方法及装置
CN110750348A (zh) * 2019-10-23 2020-02-04 神州数码融信软件有限公司 批量作业调度方法及装置
CN112817771A (zh) * 2021-04-15 2021-05-18 成都四方伟业软件股份有限公司 一种共享多线程服务管理方法及装置
CN113037594A (zh) * 2021-03-24 2021-06-25 北京百度网讯科技有限公司 基于云服务的压力测试方法和装置

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080187053A1 (en) * 2007-02-06 2008-08-07 Microsoft Corporation Scalable multi-thread video decoding
CN101489102A (zh) * 2009-01-13 2009-07-22 中兴通讯股份有限公司 一种设置并执行网络电视内容发布策略的方法及系统
CN102622426A (zh) * 2012-02-27 2012-08-01 杭州闪亮科技有限公司 数据库写入系统及方法
CN103309946A (zh) * 2013-05-16 2013-09-18 华为技术有限公司 多媒体文件处理方法、装置及系统
CN103458270A (zh) * 2013-09-09 2013-12-18 深圳市融创天下科技股份有限公司 视频转码系统和方法
CN103870348A (zh) * 2012-12-14 2014-06-18 中国电信股份有限公司 一种用户并发访问的测试方法和系统
CN104077212A (zh) * 2013-03-26 2014-10-01 阿里巴巴集团控股有限公司 压力测试系统及方法
CN105446860A (zh) * 2015-11-11 2016-03-30 上海欣方智能系统有限公司 基于异步并发机制的压力测试系统和测试方法
CN106227594A (zh) * 2016-07-11 2016-12-14 中国人民解放军国防科学技术大学 一种基于分屏的多核cpu帧缓存显示优化方法
CN106325980A (zh) * 2015-06-30 2017-01-11 中国石油化工股份有限公司 一种多线程并发系统
CN106681832A (zh) * 2016-12-23 2017-05-17 昆明联诚科技股份有限公司 视频流分发方法
CN107341054A (zh) * 2017-06-29 2017-11-10 广州市百果园信息技术有限公司 任务执行方法、装置及计算机可读存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080187053A1 (en) * 2007-02-06 2008-08-07 Microsoft Corporation Scalable multi-thread video decoding
CN101489102A (zh) * 2009-01-13 2009-07-22 中兴通讯股份有限公司 一种设置并执行网络电视内容发布策略的方法及系统
CN102622426A (zh) * 2012-02-27 2012-08-01 杭州闪亮科技有限公司 数据库写入系统及方法
CN103870348A (zh) * 2012-12-14 2014-06-18 中国电信股份有限公司 一种用户并发访问的测试方法和系统
CN104077212A (zh) * 2013-03-26 2014-10-01 阿里巴巴集团控股有限公司 压力测试系统及方法
CN103309946A (zh) * 2013-05-16 2013-09-18 华为技术有限公司 多媒体文件处理方法、装置及系统
CN103458270A (zh) * 2013-09-09 2013-12-18 深圳市融创天下科技股份有限公司 视频转码系统和方法
CN106325980A (zh) * 2015-06-30 2017-01-11 中国石油化工股份有限公司 一种多线程并发系统
CN105446860A (zh) * 2015-11-11 2016-03-30 上海欣方智能系统有限公司 基于异步并发机制的压力测试系统和测试方法
CN106227594A (zh) * 2016-07-11 2016-12-14 中国人民解放军国防科学技术大学 一种基于分屏的多核cpu帧缓存显示优化方法
CN106681832A (zh) * 2016-12-23 2017-05-17 昆明联诚科技股份有限公司 视频流分发方法
CN107341054A (zh) * 2017-06-29 2017-11-10 广州市百果园信息技术有限公司 任务执行方法、装置及计算机可读存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
顾昕，: ""分布式流式计算框架关键技术的研究与实现"", 《中国优秀硕士学位论文全文数据库-信息科技辑》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109361953A (zh) * 2018-09-18 2019-02-19 武汉斗鱼网络科技有限公司 弹幕消息的动态分发方法、装置、设备和存储介质
CN109361953B (zh) * 2018-09-18 2022-04-08 武汉斗鱼网络科技有限公司 弹幕消息的动态分发方法、装置、设备和存储介质
CN109491895A (zh) * 2018-10-26 2019-03-19 北京车和家信息技术有限公司 服务器压力测试方法及装置
CN110750348A (zh) * 2019-10-23 2020-02-04 神州数码融信软件有限公司 批量作业调度方法及装置
CN113037594A (zh) * 2021-03-24 2021-06-25 北京百度网讯科技有限公司 基于云服务的压力测试方法和装置
CN113037594B (zh) * 2021-03-24 2022-09-16 北京百度网讯科技有限公司 基于云服务的压力测试方法和装置
CN112817771A (zh) * 2021-04-15 2021-05-18 成都四方伟业软件股份有限公司 一种共享多线程服务管理方法及装置

Similar Documents

Publication Publication Date Title
CN108234242A (zh) 一种基于流的压力测试方法和装置
Gao et al. Cost-efficient VNF placement and scheduling in public cloud networks
US8412810B1 (en) Provisioning and managing a cluster deployed on a cloud
US11283858B2 (en) Method and system for coordination of inter-operable infrastructure as a service (IaaS) and platform as a service (PaaS) systems
CN110413294A (zh) 服务发布系统、方法、装置和设备
CN109862065A (zh) 文件下载方法、装置和电子设备
US11645582B2 (en) Parameter sharing in federated learning
CN106713944A (zh) 一种流数据任务的处理方法和装置
US10715638B2 (en) Method and system for server assignment using predicted network metrics
CN105897850A (zh) 用于cdn平台的响应处理方法、调度代理服务器及系统
CN107465708A (zh) 一种cdn带宽调度系统及方法
CN102655503A (zh) 使用共享资源池的资源分配
CN107547545A (zh) 视频云平台系统、视频请求处理方法及存储介质、处理器
CN108234207A (zh) 一种基于内容分发网络cdn的故障定位方法和装置
CN108234319A (zh) 一种数据的传输方法和装置
CN105991707B (zh) 多媒体交互方法、服务器及系统
US20180096286A1 (en) Workflow labor optimization system
Rahman et al. Auto-scaling network service chains using machine learning and negotiation game
CN110266822A (zh) 一种基于nginx的共享式负载均衡实现方法
CN109656685A (zh) 容器资源调度方法和系统、服务器及计算机可读存储介质
CN111580974B (zh) Gpu实例分配方法、装置、电子设备和计算机可读介质
CN114896068A (zh) 资源分配方法、资源分配装置、电子设备及存储介质
CN112994937A (zh) 智融标识网络中虚拟cdn的部署与迁移系统
CN108965364A (zh) 资源配置方法、装置及系统
CN108366110A (zh) 一种网站数据交互系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180629