CN111985772B - 一种评价标准协议的鲁棒性与完整度实现方法 - Google Patents
一种评价标准协议的鲁棒性与完整度实现方法 Download PDFInfo
- Publication number
- CN111985772B CN111985772B CN202010679761.XA CN202010679761A CN111985772B CN 111985772 B CN111985772 B CN 111985772B CN 202010679761 A CN202010679761 A CN 202010679761A CN 111985772 B CN111985772 B CN 111985772B
- Authority
- CN
- China
- Prior art keywords
- protocol
- function
- task
- robustness
- requirement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 30
- 238000011156 evaluation Methods 0.000 title claims abstract description 24
- 238000012360 testing method Methods 0.000 claims description 5
- 238000011161 development Methods 0.000 abstract description 9
- 238000004904 shortening Methods 0.000 abstract description 2
- 230000005540 biological transmission Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000013210 evaluation model Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000013441 quality evaluation Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 239000011800 void material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/18—Complex mathematical operations for evaluating statistical data, e.g. average values, frequency distributions, probability functions, regression analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/448—Execution paradigms, e.g. implementations of programming paradigms
- G06F9/4482—Procedural
Abstract
本发明所提供的一种评价标准协议的鲁棒性与完整度实现方法,主要包括在标准协议需求阶段,定义协议功能需求项目;软件设计阶段,确认需求功能项目与功能接口调用对应;功能运行态时,统计分析功能调用的case数,以及边界条件;进一步利用新C++特性异步调用的方法替代公用框架库,将实现过程简易化;最终协议功能集成后,通过运行态的功能调用,评价协议的完整度与鲁棒性,以便后续协议认证通过。从而提高了协议评价的可靠性,降低协议运行成本,缩短协议开发周期,有效提高协议功能的开发质量。
Description
技术领域
本发明涉及协议质量评估领域,尤其是涉及一种评价标准协议的鲁棒性与完整度实现方法。
背景技术
随着网络融合及接入技术的飞速发展,越来越多的用户端设备支持、装载多个网络接口,并利用网络接入技术,如有线、3G、4G、5G或wifi,获得异构网络服务。传输协议也由传统的TCP(Transmission Control Protocol)发展为多路径的并发传输,例如,MPTCP(Multi-Path TCP)与CMT-SCTP(Concurrent Multipath Task Force),是多路径传输新技术中的2个具体实现协议,目前关于协议鲁棒性问题主要集中在于单路径,对于多路径的并发传输协议标准实现,仅仅是通过测试相关案列,来评价协议的认证,且必须通过制定相关认证测试进行判定,这就造成了公共功能库复杂,一旦出现问题排查困难的局面,且针对企业用户而言,个性化的自主协议越来越多,为保证数据的安全性,在设置上尽可能避免使用大量的公用调用框架库,这也导致了标准协议的完整度和鲁棒性难以把握,及协议功能实现周期长,成本高的问题。
发明内容
本发明提出了一种评价标准协议的鲁棒性与完整度实现方法,通过协议功能调用的同时,进统计分析协议功能调用情况,来评估协议功能实现的完整度和鲁棒性,从而节省协议功能实现周期,以及减少反复的认证费用,主动提高协议功能开发的质量。
具体为:
一种评价标准协议的鲁棒性与完整度实现方法,包括:在协议端点中定义协议功能需求,并通过功能接口调用与所述协议功能需求对应的协议任务,分配任务执行空间,并执行所述协议任务,统计所述功能接口协议任务的调用次数,将统计结果存储至所述协议端点,进行协议鲁棒性评价,生成协议评价结果。
其中,所述协议端点用于信息的输入或输出。
进一步的,所述协议端点还包括:根据所述协议功能需求获取对应的功能接口集,并匹配对应的功能集,进而调用协议集中的协议任务,通过执行所述协议任务,获得需求结果,并反馈至所述协议端点。
所述功能接口集至少包括1个。
所述功能集至少包括1个。
所述协议集至少包括1个,且任一所述协议集中至少包括1条协议任务。
进一步的,所述统计所述功能接口协议任务的调用次数,还包括:构建基于C++的标准协议鲁棒性评估模型,进一步包括:
采用std::future函数获取所述协议任务的调用结果;
采用协议集功能函数形成任务队列,线程池threadPool装载所述功能接口函数实现过程;
采用std::STL 模板类容器保存协议集功能函数接口调用结果;
并通过计数函数将每条协议任务调用次数进行统计并存储至所述协议端点中。
进一步的,根据所述协议集要求,判断所述功能接口是否全部实现,计算所述功能接口的实现概率值M。
根据所述协议功能需求的测试案列,判断所述功能接口是否已完成覆盖,计算所述功能接口的覆盖概率值N。
根据标准需求,判断所述协议集是否全部满足或部分满足所述标准需求,计算所述协议集的满足概率值P。
根据贝叶斯法则计算评价标准协议的鲁棒性,为,其中,所述值为根据标准需求预设的权重值。
本发明提供一种评价标准协议的鲁棒性与完整度实现方法,在有限的计算机资源下,通过端点的输入,完成协议接口调用任务,并通过端点获取协议接口调用的结果,统计分析协议接口调用的效率以及属性,并进一步通过构建基于C++的标准协议鲁棒性评估模型,来评价协议的完整度与鲁棒性,从而实现了在源码级开发过程中进行主动分析评价,进而实现开发功能与标准协议完整度与鲁棒性评价同步完成,节省协议功能实现周期,以及减少反复的认证费用,主动提高协议功能开发的质量。
附图说明
图1为一实施例中的评价标准协议的鲁棒性与完整度的过程示意图。
具体实施方式
下面将结合具体实施例及附图对本发明的一种评价标准协议的鲁棒性与完整度实现方法作进一步详细描述。
如图1为评价标准协议的鲁棒性与完整度实现方法过程示意图,其中,端点用于信息的输入或输出,通过在端点中定义协议功能需求,根据该协议功能需求获取对应的功能接口集中的功能接口,通过功能接口调用与所述协议功能需求对应的协议任务,同时分配任务执行空间,用于执行所述协议任务,统计每一功能接口协议任务的调用次数,将统计结果存储至所述协议端点,用于进行进行协议鲁棒性评价。
作为优选的,所述端点可用于与多个功能接口集进行通信。进一步的,每一功能接口集中还包括多个功能集,每一功能集中根据不同的协议功能需求设置有多个用于执行协议任务。
作为优选的,上述的功能接口集、功能集和协议集可用于并发调用并执行协议任务。
作为优选的,还包括,通过构建基于C++的标准协议鲁棒性评估模型进行评价标准协议的鲁棒性与完整度的评价,具体为:
采用std::future函数获取所述协议任务的调用结果;
采用协议集功能函数形成任务队列,线程池threadPool装载所述功能接口函数实现过程,也就是说将协议接口函数生成一个个Task,放在std::thread中执行,例如:
TCP_SocketHostInit(char*ip_adddr,int port);
TCP_SocketHostInitRecv(int sock,Callback func);
TCP_SocketHostInitSend(int sock,char* remoteip,int poort,char*buffer,int size);
TCP_SocketHostInitClose(int sock);
比如网络tcp协议的功能函数的调用,程序为:
Viod tcp_endpoint::init()
{
Pool_ptr=std::make_shared<std::threadpool>(6);
}
Viod tcp_endpoint::create_socket(char*in_addr,int port){
std::future<R>result=pool_ptr->commit(tcp_interface::TCP_Sockethostinit,ip_addr,port);
};
通过并行执行上述功能函数,采用std::STL 模板类容器保存协议集功能函数接口调用结果,其中,std::STL 模板类容器可以为:MAP,vector, queue容器,具体为:
typedef struct result{
//true or false with excute function;
bool success;
// how many time function execute end-begin in one thread
double time_execute;
}R;
enum protocol_interfacename{
TCP_ENDPOINT_CREATESOCKET,
TCP_ENDPOINT_RECEIVE,
TCP_ENDPOINT_SEND,
TCP_ENDPOINT_CLOSE,
TCP_ENDPOINT_CONNECT,
...
}
//int ---use count,vector container function result
std::map<int, std::map<interfaceindex, R> > result_container;
void tcp_endpoint::create_socket(char* ip_addr,int port){
std::future<R>result=pool_ptr->commit(tcp_interface::TCP_SocketHostInit,ip_addr,port);
result_container[mcount++][TCP_ENDPOINT_CREATESOCKET] = result;
}。
优选的,所述queue容器还用于连接通讯机制,从而将功能函数调用结果发送至网络端或端点。
并通过计数函数将每条协议任务调用次数进行统计并存储至所述协议端点中。
进一步的,根据所述协议集要求,判断所述功能接口是否全部实现,计算所述功能接口的实现概率值M。
根据所述协议功能需求的测试案列,判断所述功能接口是否已完成覆盖,计算所述功能接口的覆盖概率值N。
根据标准需求,判断所述协议集是否全部满足或部分满足所述标准需求,计算所述协议集的满足概率值P。
根据贝叶斯法则计算评价标准协议的鲁棒性,为,其中,所述
值为根据标准需求预设的权重值。优选的,分别为:0.8,0.8,0.6。
例如,TCP协议有4条接口,如果只完成1条,就计算其完成概率为25%。如果全实现,并通过执行结果都完成了,则为100%。
综上所述,本发明所提供的一种评价标准协议的鲁棒性与完整度实现方法,主要包括在标准协议需求阶段,定义协议功能需求项目;软件设计阶段,确认需求功能项目与功能接口调用对应;功能运行态时,统计分析功能调用的case数,以及边界条件;进一步利用新C++特性异步调用的方法替代公用框架库,将实现过程简易化;最终协议功能集成后,通过运行态的功能调用,评价协议的完整度与鲁棒性,以便后续协议认证通过。从而提高了协议评价的可靠性,降低协议运行成本,缩短协议开发周期,有效提高协议功能的开发质量。
虽然对本发明的描述是结合以上具体实施例进行的,但是,熟悉本技术领域的人员能够根据上述的内容进行许多替换、修改和变化、是显而易见的。因此,所有这样的替代、改进和变化都包括在附后的权利要求的精神和范围内。
Claims (7)
1.一种评价标准协议的鲁棒性与完整度实现方法,其特征在于,包括:
在协议端点中定义协议功能需求,并通过功能接口调用与所述协议功能需求对应的协议任务,分配任务执行空间,并执行所述协议任务,统计所述功能接口协议任务的调用次数,将统计结果存储至所述协议端点,进行协议鲁棒性评价,生成协议评价结果;
其中,所述统计所述功能接口协议任务的调用次数,还包括:构建基于C++的标准协议鲁棒性评估模型,进一步包括:
采用std::future函数获取所述协议任务的调用结果;
采用协议集功能函数形成任务队列,线程池threadPool装载所述功能接口函数实现过程;
采用std::STL模板类容器保存协议集功能函数接口调用结果;
并通过计数函数将每条协议任务调用次数进行统计并存储至所述协议端点中。
2.根据权利要求1所述的方法,其特征在于,所述协议端点用于信息的输入或输出。
3.根据权利要求1所述的方法,其特征在于,所述协议端点还包括:根据所述协议功能需求获取对应的功能接口集,并匹配对应的功能集,进而调用协议集中的协议任务,通过执行所述协议任务,获得需求结果,并反馈至所述协议端点。
4.根据权利要求3所述的方法,其特征在于,所述功能接口集至少包括1个。
5.根据权利要求3所述的方法,其特征在于,所述功能集至少包括1个。
6.根据权利要求3所述的方法,其特征在于,所述协议集至少包括1个,且任一所述协议集中至少包括1条协议任务。
7.根据权利要求6所述的方法,其特征在于,还包括:所述协议鲁棒性评价包括:根据所述协议集要求,判断所述功能接口是否全部实现,计算所述功能接口的实现概率值M;
根据所述协议功能需求的测试案列,判断所述功能接口是否已完成覆盖,计算所述功能接口的覆盖概率值N;
根据标准需求,判断所述协议集是否全部满足或部分满足所述标准需求,计算所述协议集的满足概率值P;
根据贝叶斯法则计算评价标准协议的鲁棒性,为L=αM*βN*μP,其中,所述α,β,μ值为根据标准需求预设的权重值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010679761.XA CN111985772B (zh) | 2020-07-15 | 2020-07-15 | 一种评价标准协议的鲁棒性与完整度实现方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010679761.XA CN111985772B (zh) | 2020-07-15 | 2020-07-15 | 一种评价标准协议的鲁棒性与完整度实现方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111985772A CN111985772A (zh) | 2020-11-24 |
CN111985772B true CN111985772B (zh) | 2024-02-20 |
Family
ID=73437691
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010679761.XA Active CN111985772B (zh) | 2020-07-15 | 2020-07-15 | 一种评价标准协议的鲁棒性与完整度实现方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111985772B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE20212588U1 (de) * | 2001-08-16 | 2003-02-06 | Interdigital Tech Corp | Ein Netzwerk zur Verwendung eines Sitzungseinleitungsprokolls zur Identifizierung von Benutzergeräts-Ressourcenreservierungs-Aufbauprotokollfähigkeiten |
KR20030044134A (ko) * | 2001-11-28 | 2003-06-09 | 한국전자통신연구원 | 제한조건을 만족하는 다중 경로 배정방법 |
CN102625939A (zh) * | 2009-07-10 | 2012-08-01 | 塞尔蒂卡姆公司 | 用于管理电子资产的系统和方法 |
CN109547693A (zh) * | 2018-11-29 | 2019-03-29 | 惠州市德赛西威智能交通技术研究院有限公司 | 多传感器数据同步系统以及图像数据同步方法 |
CN110266554A (zh) * | 2018-08-02 | 2019-09-20 | 青岛威孚测通信息科技有限公司 | 一种私有通信协议的测试方法 |
CN110853399A (zh) * | 2019-10-12 | 2020-02-28 | 惠州市德赛西威智能交通技术研究院有限公司 | 一种基于超声波传感器车位检测系统的车位识别补偿方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
MY181840A (en) * | 2016-11-04 | 2021-01-08 | Thomson Licensing | Devices and methods for client device authentication |
US10986622B2 (en) * | 2018-05-10 | 2021-04-20 | Apple Inc. | User equipment (UE) downlink transmission configuration indication (TCI)-state selection |
-
2020
- 2020-07-15 CN CN202010679761.XA patent/CN111985772B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE20212588U1 (de) * | 2001-08-16 | 2003-02-06 | Interdigital Tech Corp | Ein Netzwerk zur Verwendung eines Sitzungseinleitungsprokolls zur Identifizierung von Benutzergeräts-Ressourcenreservierungs-Aufbauprotokollfähigkeiten |
KR20030044134A (ko) * | 2001-11-28 | 2003-06-09 | 한국전자통신연구원 | 제한조건을 만족하는 다중 경로 배정방법 |
CN102625939A (zh) * | 2009-07-10 | 2012-08-01 | 塞尔蒂卡姆公司 | 用于管理电子资产的系统和方法 |
CN110266554A (zh) * | 2018-08-02 | 2019-09-20 | 青岛威孚测通信息科技有限公司 | 一种私有通信协议的测试方法 |
CN109547693A (zh) * | 2018-11-29 | 2019-03-29 | 惠州市德赛西威智能交通技术研究院有限公司 | 多传感器数据同步系统以及图像数据同步方法 |
CN110853399A (zh) * | 2019-10-12 | 2020-02-28 | 惠州市德赛西威智能交通技术研究院有限公司 | 一种基于超声波传感器车位检测系统的车位识别补偿方法 |
Non-Patent Citations (2)
Title |
---|
MPTCP协议的鲁棒性评估模型研究及分析;谭齐宁等;《海南大学学报(自然科学版)》;第36卷(第3期);第226-234页 * |
Robust Control for Nonlinear TCP Time-delay Dynamic Network Systems;Sun, P et al.;《PRZEGLAD ELEKTROTECHNICZNY》;第88卷(第7b期);第257-260页 * |
Also Published As
Publication number | Publication date |
---|---|
CN111985772A (zh) | 2020-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111753948B (zh) | 模型处理方法及相关设备 | |
US11016673B2 (en) | Optimizing serverless computing using a distributed computing framework | |
US20140007044A1 (en) | Source Code Generator for Software Development and Testing for Multi-Processor Environments | |
US20150347305A1 (en) | Method and apparatus for outputting log information | |
CN111209203B (zh) | 一种基于源代码的模型验证方法 | |
CN111596902B (zh) | 一种前后端开发框架的搭建方法、装置、设备及存储介质 | |
CN107807841B (zh) | 服务器模拟方法、装置、设备及可读存储介质 | |
CN114064152A (zh) | 基于动态加载的嵌入式多核调试系统及其调试方法 | |
CN108829382B (zh) | 一种用Python建立参考模型提高自动化验证平台效率的方法 | |
CN113434396A (zh) | 接口测试方法、装置、设备、存储介质及程序产品 | |
CN113868120A (zh) | 工业软件调试方法、装置、计算机设备和存储介质 | |
CN115391219A (zh) | 测试用例生成方法、装置、电子设备及存储介质 | |
CN111985772B (zh) | 一种评价标准协议的鲁棒性与完整度实现方法 | |
CN113391970A (zh) | 一种面向异构众核处理器的芯片测试方法及装置 | |
US8387072B1 (en) | Transactional environments for event and data binding handlers | |
CN111611065A (zh) | 机器学习算法的调用方法、装置、存储介质及电子设备 | |
CN111679977A (zh) | 一种基于Jest的React项目单元测试方法、设备及存储介质 | |
CN111176995A (zh) | 一种基于大数据测试用例的测试方法和测试系统 | |
CN115033434A (zh) | 一种内核性能理论值计算方法、装置及存储介质 | |
CN115344370A (zh) | 任务调度方法、装置、设备及存储介质 | |
CN111966597B (zh) | 测试数据生成方法及装置 | |
US10796041B1 (en) | Compacting test patterns for IJTAG test | |
CN113660046A (zh) | 一种大规模无线信道系数产生的加速方法 | |
CN112540813A (zh) | 一种基于工作流引擎的应用生成方法 | |
CN111258940A (zh) | 配置方法、业务审核方法及系统、设备、存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |