CN113676373A - 会话测试方法、装置、计算机设备和存储介质 - Google Patents
会话测试方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN113676373A CN113676373A CN202110923090.1A CN202110923090A CN113676373A CN 113676373 A CN113676373 A CN 113676373A CN 202110923090 A CN202110923090 A CN 202110923090A CN 113676373 A CN113676373 A CN 113676373A
- Authority
- CN
- China
- Prior art keywords
- session
- voice
- transmission channel
- target
- data transmission
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 113
- 238000010998 test method Methods 0.000 title description 7
- 230000005540 biological transmission Effects 0.000 claims abstract description 307
- 238000000034 method Methods 0.000 claims abstract description 40
- 230000004044 response Effects 0.000 claims abstract description 15
- 238000004590 computer program Methods 0.000 claims description 26
- 238000011156 evaluation Methods 0.000 claims description 23
- 230000011218 segmentation Effects 0.000 claims description 13
- 238000012549 training Methods 0.000 description 46
- 230000008569 process Effects 0.000 description 18
- 238000004458 analytical method Methods 0.000 description 10
- 230000011664 signaling Effects 0.000 description 10
- 238000007689 inspection Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 238000013522 software testing Methods 0.000 description 6
- 230000003993 interaction Effects 0.000 description 5
- 238000005070 sampling Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 230000018109 developmental process Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000000047 product Substances 0.000 description 3
- 241000533950 Leucojum Species 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000009530 blood pressure measurement Methods 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 241001391944 Commicarpus scandens Species 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000007795 chemical reaction product Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/60—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for measuring the quality of voice signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/18—Protocol analysers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/146—Markers for unambiguous identification of a particular session, e.g. session cookie or URL-encoding
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Health & Medical Sciences (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- Environmental & Geological Engineering (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computer And Data Communications (AREA)
Abstract
本申请涉及一种会话测试方法、装置、计算机设备和存储介质。所述方法包括:响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,所述目标会话标识集合包括多个目标会话标识;生成各个所述目标会话标识对应的传输通道线程,基于启动连接取样器建立各个所述传输通道线程对应的第一数据传输通道;基于所述第一数据传输通道传输对应的目标会话标识对应的预设会话数据;若满足会话结束条件,基于结束连接取样器结束断开各个所述第一数据传输通道;采集各个所述目标会话标识对应的会话性能数据,统计所述目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。采用本方法能够提高会话测试的可靠性。
Description
技术领域
本申请涉及软件测试技术领域,特别是涉及一种会话测试方法、装置、计算机设备和存储介质。
背景技术
随着软件测试技术的发展,软件测试得到了广泛的应用。软件测试是一种用来促进鉴定软件的正确性、完整性、安全性和质量的过程;或者,软件测试是一种实际输出与预期输出之间的审核或者比较过程,它能够在规定的条件下对程序进行操作,以发现程序错误,衡量软件质量,并对其是否能满足设计要求进行评估的过程。软件测试是项目研发过程中保障软件质量的一项重要活动,在众多领域产品中均有涉及,例如PC(PersonalComputer)端、web(World Wide Web)端、移动端的产品或者涉及到大数据或者人工智能等的会话产品等。
然而,目前的会话测试方法,存在可靠性低的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高会话测试可靠性的会话测试方法、装置、计算机设备和存储介质。
一种会话测试方法,所述方法包括:响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,所述目标会话标识集合包括多个目标会话标识;生成各个所述目标会话标识对应的传输通道线程,基于启动连接取样器建立各个所述传输通道线程对应的第一数据传输通道;基于所述第一数据传输通道传输对应的目标会话标识对应的预设会话数据;若满足会话结束条件,基于结束连接取样器结束断开各个所述第一数据传输通道;采集各个所述目标会话标识对应的会话性能数据,统计所述目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。
在其中一个实施例中,所述第一数据传输通道包括额外消息传输通道线程以及会话消息传输通道线程;所述生成各个所述目标会话标识对应的传输通道线程,基于启动连接取样器建立各个所述传输通道线程对应的第一数据传输通道包括:生成各个所述目标会话标识对应的额外消息传输通道线程以及各个所述目标会话标识对应的会话消息传输通道线程;基于启动连接取样器建立所述额外消息传输通道线程的对应的额外消息传输通道以及会话消息传输通道线程对应的实时会话语音通道;所述基于所述第一数据传输通道传输对应的目标会话标识对应的预设会话数据包括:基于所述额外消息传输通道传输所述目标会话标识对应的预设会话指令,以及基于所述实时会话语音通道传输所述目标会话标识对应的预设会话内容。
在其中一个实施例中,所述若满足会话结束条件,基于结束连接取样器结束断开各个所述第一数据传输通道包括:若满足会话结束条件,生成会话结束指令并将所述会话结束指令保存为全局变量,以使得所述结束连接取样器结束基于所述会话结束指令断开各个所述第一数据传输通道。
在其中一个实施例中,所述采集各个所述目标会话标识对应的会话性能数据,统计所述目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果包括:采集所述目标会话标识对应的第二数据传输通道对应的会话数据传输性能参数,对所述会话数据传输性能参数进行统计,得到传输性能统计结果;将所述传输性能统计结果与性能阈值进行对比,基于对比结果得到会话测试结果。
在其中一个实施例中,当所述会话测试结果为会话测试通过时,则所述方法还包括:接收会话终端发送的会话请求,所述会话请求携带会话主题标识;响应于所述会话请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及所述会话内容信息的标准回复内容;基于所述目标会话标识与所述会话终端建立第二数据传输通道;通过所述第二数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;通过所述第二数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
在其中一个实施例中,所述会话内容信息为会话语音消息;所述通过所述第二数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端包括:对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列;通过所述第二数据传输通道将所述语音片段序列发送给智能会话机器人对应的会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
在其中一个实施例中,所述对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列包括:获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
一种会话测试装置,所述装置包括:目标会话标识集合生成模块,用于响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,所述目标会话标识集合包括多个目标会话标识;第一数据传输通道建立模块,用于生成各个所述目标会话标识对应的传输通道线程,基于启动连接取样器建立各个所述传输通道线程对应的第一数据传输通道;预设会话数据传输模块,用于基于所述第一数据传输通道传输对应的目标会话标识对应的预设会话数据;第一数据传输通道断开模块,用于若满足会话结束条件,基于结束连接取样器结束断开各个所述第一数据传输通道;会话测试结果得到模块,用于采集各个所述目标会话标识对应的会话性能数据,统计所述目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。
在其中一个实施例中,所述第一数据传输通道建立模块,用于生成各个所述目标会话标识对应的额外消息传输通道线程以及各个所述目标会话标识对应的会话消息传输通道线程;基于启动连接取样器建立所述额外消息传输通道线程的对应的额外消息传输通道以及会话消息传输通道线程对应的实时会话语音通道;基于所述额外消息传输通道传输所述目标会话标识对应的预设会话指令,以及基于所述实时会话语音通道传输所述目标会话标识对应的预设会话内容。
在其中一个实施例中,第一数据传输通道断开模块,用于若满足会话结束条件,生成会话结束指令并将所述会话结束指令保存为全局变量,以使得所述结束连接取样器结束基于所述会话结束指令断开各个所述第一数据传输通道。
在其中一个实施例中,会话测试结果得到模块,用于采集所述目标会话标识对应的第二数据传输通道对应的会话数据传输性能参数,对所述会话数据传输性能参数进行统计,得到传输性能统计结果;将所述传输性能统计结果与性能阈值进行对比,基于对比结果得到会话测试结果。
在其中一个实施例中,所述会话测试装置包括:会话请求接收模块,用于接收会话终端发送的会话请求,所述会话请求携带会话主题标识;会话相关数据获取模块,用于响应于所述会话请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及所述会话内容信息的标准回复内容;第二数据传输通道建立模块,用于基于所述目标会话标识与所述会话终端建立第二数据传输通道;机器人会话信息发送模块,用于通过所述第二数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;用户语音信息接收模块,用于通过所述第二数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;会话评估结果得到模块,用于获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
在其中一个实施例中,机器人会话信息发送模块,用于对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列;通过所述第二数据传输通道将所述语音片段序列发送给智能会话机器人对应的会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
在其中一个实施例中,机器人会话信息发送模块,用于获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,所述目标会话标识集合包括多个目标会话标识;生成各个所述目标会话标识对应的传输通道线程,基于启动连接取样器建立各个所述传输通道线程对应的第一数据传输通道;基于所述第一数据传输通道传输对应的目标会话标识对应的预设会话数据;若满足会话结束条件,基于结束连接取样器结束断开各个所述第一数据传输通道;采集各个所述目标会话标识对应的会话性能数据,统计所述目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:生成各个所述目标会话标识对应的额外消息传输通道线程以及各个所述目标会话标识对应的会话消息传输通道线程;基于启动连接取样器建立所述额外消息传输通道线程的对应的额外消息传输通道以及会话消息传输通道线程对应的实时会话语音通道;基于所述额外消息传输通道传输所述目标会话标识对应的预设会话指令,以及基于所述实时会话语音通道传输所述目标会话标识对应的预设会话内容。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:若满足会话结束条件,生成会话结束指令并将所述会话结束指令保存为全局变量,以使得所述结束连接取样器结束基于所述会话结束指令断开各个所述第一数据传输通道。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:采集所述目标会话标识对应的第二数据传输通道对应的会话数据传输性能参数,对所述会话数据传输性能参数进行统计,得到传输性能统计结果;将所述传输性能统计结果与性能阈值进行对比,基于对比结果得到会话测试结果。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:接收会话终端发送的会话请求,所述会话请求携带会话主题标识;响应于所述会话请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及所述会话内容信息的标准回复内容;基于所述目标会话标识与所述会话终端建立第二数据传输通道;通过所述第二数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;通过所述第二数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列;通过所述第二数据传输通道将所述语音片段序列发送给智能会话机器人对应的会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
在其中一个实施例中,所述处理器执行所述计算机程序时实现以下步骤:获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,所述目标会话标识集合包括多个目标会话标识;生成各个所述目标会话标识对应的传输通道线程,基于启动连接取样器建立各个所述传输通道线程对应的第一数据传输通道;基于所述第一数据传输通道传输对应的目标会话标识对应的预设会话数据;若满足会话结束条件,基于结束连接取样器结束断开各个所述第一数据传输通道;采集各个所述目标会话标识对应的会话性能数据,统计所述目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:生成各个所述目标会话标识对应的额外消息传输通道线程以及各个所述目标会话标识对应的会话消息传输通道线程;基于启动连接取样器建立所述额外消息传输通道线程的对应的额外消息传输通道以及会话消息传输通道线程对应的实时会话语音通道;基于所述额外消息传输通道传输所述目标会话标识对应的预设会话指令,以及基于所述实时会话语音通道传输所述目标会话标识对应的预设会话内容。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:若满足会话结束条件,生成会话结束指令并将所述会话结束指令保存为全局变量,以使得所述结束连接取样器结束基于所述会话结束指令断开各个所述第一数据传输通道。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:采集所述目标会话标识对应的第二数据传输通道对应的会话数据传输性能参数,对所述会话数据传输性能参数进行统计,得到传输性能统计结果;将所述传输性能统计结果与性能阈值进行对比,基于对比结果得到会话测试结果。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:接收会话终端发送的会话请求,所述会话请求携带会话主题标识;响应于所述会话请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及所述会话内容信息的标准回复内容;基于所述目标会话标识与所述会话终端建立第二数据传输通道;通过所述第二数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;通过所述第二数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列;通过所述第二数据传输通道将所述语音片段序列发送给智能会话机器人对应的会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
在其中一个实施例中,所述计算机程序被处理器执行时实现以下步骤:获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;
根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;
基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
上述会话测试方法、装置、计算机设备和存储介质,通过响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,该目标会话标识集合包括多个目标会话标识;生成各个目标会话标识对应的传输通道线程,基于启动连接取样器建立各个传输通道线程对应的第一数据传输通道;基于第一数据传输通道传输对应的目标会话标识对应的预设会话数据;若满足会话结束条件,基于结束连接取样器结束断开各个第一数据传输通道;采集各个目标会话标识对应的会话性能数据,统计目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。通过在会话测试过程中,设置不同的取样器,从而有利用整个会话测试过程的完成,达到提高会话测试可靠性的目的。
附图说明
图1为一个实施例中会话测试方法的应用环境图;
图2为一个实施例中会话测试方法的流程示意图;
图3为一个实施例中会话测试结果得到步骤的流程示意图;
图4为一个实施例中会话评估结果得到步骤的流程示意图;
图5为一个实施例中会话语音信息分片传输步骤的流程示意图;
图6为一个实施例中会话语音片段得到步骤的流程示意图;
图7为一个实施例中智能机器人软件架构示意图;
图8为另一个实施例中会话测试的流程示意图;
图9为一个实施例中会话测试装置的结构框图;
图10为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的会话测试方法,可以应用于如图1所示的应用环境中,具体应用到一种会话测试系统中。该会话测试系统包括终端102和服务器104,其中,终端102通过网络与服务器104进行通信。服务器104执行一种会话测试方法,具体的,终端102发送会话测试指令到服务器104,服务器104响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,该目标会话标识集合包括多个目标会话标识;生成各个目标会话标识对应的传输通道线程,基于启动连接取样器建立各个传输通道线程对应的第一数据传输通道;基于第一数据传输通道传输对应的目标会话标识对应的预设会话数据;若满足会话结束条件,基于结束连接取样器结束断开各个第一数据传输通道;采集各个目标会话标识对应的会话性能数据,统计目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种会话测试方法,以该方法应用于图1中的服务器为例进行说明,包括以下步骤:
步骤S202,响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,该目标会话标识集合包括多个目标会话标识。
其中,会话测试指令是指进行会话测试的指示。例如,能够指示会话测试开始的或者结束的指令等。传输协议取样器是指用来模拟传输协议发送请求或者接收请求的对象,该对象可以是插件,也可以是配置文件,或者以其他形式存在的对象。会话标识是指能够唯一确定某次会话的标记。例如,在智能机器人会话场景中,如果是考试场景,服务器接收到“开始考试”的触发操作后,生成唯一一个针对该考试的会话标记,该会话标记可以确定该次考试的唯一性。
具体地,在进行某次会话测试时,服务器通过接收会话测试指令,响应于会话测试指令,利用本端设置的传输协议取样器,执行该传输协议取样器,生成目标会话标识集合,该目标会话标识集合包括多个目标会话标识。
在一个实施例中,在与服务器连接的终端上运行相应的测试脚本,终端发送会话测试指令给服务器,服务器响应于该会话测试指令,通过执行传输协议取样器,例如,HTTP(Hyper Text Transfer Protocol)取样器,生成目标会话标识。为了验证会话系统的性能,进行多次上述执行过程后,生成目标会话标识集合,该目标会话标识集合包括多个目标会话标识。
在一个实施例中,上述目标会话标识的生成过程中,可以利用布尔表达式,确定目标会话标识是否生成成功,假设布尔表达式为真,则确定目标会话标识生成成功;假设布尔表达式为假,则确定目标会话标识生成失败。在确定目标会话标识生成失败时,生成错误日志,在错误日志中会话标识生成部分标记为失败标识。
步骤S204,生成各个目标会话标识对应的传输通道线程,基于启动连接取样器建立各个传输通道线程对应的第一数据传输通道。
其中,传输通道线程是指与传输通道对应的线程,例如,线程1是执行数据传输任务的线程,则该线程1为该数据传输任务的线程,在该数据传输任务中需要有传输通道,则该线程1为与该传输通道对应的线程。启动连接取样器是指能够在启动连接时接收或者发送请求的对象。例如,在Web(World Wide Web)连接中的WebSocket Open Connection取样器。
具体地,服务器在得到目标会话标识集合之后,生成该目标会话标识集合中各个目标会话标识对应的传输通道线程,利用启动连接取样器在各个传输通道线程上建立对应的第一数据传输通道。
在一个实施例中,将传输通道线程分成两种类型的通道组,两种类型的通道组分别为额外消息传输通道和会话消息传输通道,利用启动连接取样器在上述额外消息传输通道对应的线程上建立对应的额外消息传输通道线程;在上述会话消息传输通道对应的线程上建立对应的会话消息传输通道线程。
步骤S206,基于第一数据传输通道传输对应的目标会话标识对应的预设会话数据。
其中,预设会话数据是指在服务器中预先设置的会话数据。例如,在智能机器人会话中,服务器中预先设置的机器人提问问题的文本数据等。
具体地,服务器建立第一数据传输通道后,利用该数据传输通道传输对应的预设会话数据。
在一个实施例中,利用通过会话消息传输通道将会话内容信息对应的机器人会话信息发送至会话终端,通过额外消息传输通道将会话评估结果发送至会话终端。其中,会话内容信息包括有机器人会话信息和会话评估结果,其中的机器人会话信息是指与机器人有关的会话信息,该会话信息包括机器人的文本信息,或者将文本转换为语音之后的语音信息等;会话评估结果是指对机器人与用户之间进行会话交互过程中得到的会话评估结果。例如,智能培训机器人的机器人会话信息为培训的题目,以及对该题目的推荐答案,用户的会话信息为用户针对该培训题目回答的答案,会话评估结果为上述推荐答案与用户回答的答案之间的对比结果。
步骤S208,若满足会话结束条件,基于结束连接取样器结束断开各个第一数据传输通道。
具体地,在满足会话结束条件时,利用结束连接取样器发送连接断开请求,断开各个第一数据传输通道。
在一个实施例中,根据不同场景设置会话结束条件,当满足设置的会话结束条件时,利用结束连接取样器发送连接断开请求,断开各个第一数据传输通道。例如,在智能培训机器人会话中,会话结束条件可以为会话交互的总次数,当该总次数达到上限后,触发结束连接取样器结束断开各个第一数据传输通道。
步骤S210,采集各个目标会话标识对应的会话性能数据,统计目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。
其中,会话性能数据是指在会话过程中,对承载会话的主体的性能有关的数据。承载会话的主体为服务器或者客户端等。例如,在会话过程中,服务器的响应时间、请求出错率或者每秒钟能够处理的请求数目等。
具体地,当服务器断开各个第一数据传输通道后,会话结束,采集各个目标会话标识对应的会话性能数据,统计目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。
在一个实施例中,将各个目标会话标识对应的会话性能数据进行排序,取会话性能数据的平均值或者在排序中处在排序中间位置的会话性能数据作为确定的性能统计结果,利用该性能统计结果与预设的性能指标进行比较,得到会话测试结果。
上述会话测试方法中,通过响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,该目标会话标识集合包括多个目标会话标识;生成各个目标会话标识对应的传输通道线程,基于启动连接取样器建立各个传输通道线程对应的第一数据传输通道;基于第一数据传输通道传输对应的目标会话标识对应的预设会话数据;若满足会话结束条件,基于结束连接取样器结束断开各个第一数据传输通道;采集各个目标会话标识对应的会话性能数据,统计目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。通过在会话测试过程中,设置不同的取样器,从而有利用整个会话测试过程的完成,达到提高会话测试可靠性的目的。
在一个实施例中,生成各个目标会话标识对应的额外消息传输通道线程以及各个目标会话标识对应的会话消息传输通道线程;基于启动连接取样器建立额外消息传输通道线程的对应的额外消息传输通道以及会话消息传输通道线程对应的实时会话语音通道;基于第一数据传输通道传输对应的目标会话标识对应的预设会话数据包括:基于额外消息传输通道传输目标会话标识对应的预设会话指令,以及基于实时会话语音通道传输目标会话标识对应的预设会话内容。
具体地,额外消息传输通道线程与额外消息传输通道之间,以及会话消息传输通道线程与实时会话语音通道之间存在对应关系,在运行额外消息传输通道线程时形成额外消息传输通道,同样的,在运行会话消息传输通道线程时形成实时会话语音通道;其中的额外消息传输通道可以用作传输指令类消息,例如,目标会话标识对应的预设会话指令;实时会话语音通道传输实时语音消息,例如,目标会话标识对应的预设会话内容。
本实施例中,通过基于额外消息传输通道传输目标会话标识对应的预设会话指令,以及基于实时会话语音通道传输目标会话标识对应的预设会话内容,能够达到将指令类消息和实时语音消息分开传输,互不影响,提高传输通道传输消息的准确性。
在一个实施例中,若满足会话结束条件,基于结束连接取样器结束断开各个第一数据传输通道包括:若满足会话结束条件,生成会话结束指令并将会话结束指令保存为全局变量,以使得结束连接取样器结束基于会话结束指令断开各个第一数据传输通道。
其中,结束连接取样器是指可以发送结束连接指令的对象。例如,在会话压力测试的脚本Jmeter中WebSocket连接中的WebSocket Close取样器。
具体地,若满足会话结束条件,会话结束条件可以是会话次数达到预设次数阈值或者达到预设会话时间等,生成会话结束指令,并将该会话结束指令保存为全局变量,以使运行的其他线程能够调用该会话结束指令,关闭会话。同时,以使得结束连接取样器结束基于会话结束指令断开各个第一数据传输通道。
本实施例中,通过若满足会话结束条件,生成会话结束指令并将会话结束指令保存为全局变量,以使得结束连接取样器基于会话结束指令断开各个第一数据传输通道,能够达到准确确定会话结束时间,及时得到会话测试的结果的目的。
在一个实施例中,如图3所示,采集各个目标会话标识对应的会话性能数据,统计目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果包括:
步骤S302,采集目标会话标识对应的第二数据传输通道对应的会话数据传输性能参数,对会话数据传输性能参数进行统计,得到传输性能统计结果。
其中,传输性能参数是指会话数据在传输过程中的质量。例如,会话数据传输的正确率或者传输的速率等。
具体地,服务器利用数据读取插件,采集目标会话标识对应的第二数据传输通道对应的会话数据传输性能参数;为了使采集到的会话数据传输性能参数能够更好的体现会话数据整体的表现,可以对采集到的会话数据传输性能参数进行统计,得到传输性能统计结果。
在一个实施例中,服务器利用WebSocket Single Read取样器采集会话数据传输性能参数,并对采集到的会话数据传输性能参数进行平均数计算或者取会话数据传输性能参数中的众数等,得到传输性能统计结果。
步骤S304,将传输性能统计结果与性能阈值进行对比,基于对比结果得到会话测试结果。
其中,性能阈值是指性能的临界值,大于该临界值认为是性能异常,小于等于该性能阈值认为是性能正常;或者,小于等于该临界值认为是性能异常,大于该性能阈值认为是性能正常。
具体地,在得到传输性能统计结果之后,将该传输性能统计结果与性能阈值进行对比,根据对比结果得到会话测试结果。例如,假设采集的数据传输性能参数为传输时间,性能阈值为40ms,若会话数据在数据传输通道中传输性能统计结果为50ms,该传输性能统计结果50ms大于性能阈值40ms,则该会话测试结果可以判断为异常。可以理解的,传输时间与传输性能为负相关关系,传输时间越短传输性能越好;反之,传输时间越短传输性能越差。
本实施例中,通过采集目标会话标识对应的第二数据传输通道对应的会话数据传输性能参数,对会话数据传输性能参数进行统计,得到传输性能统计结果,将传输性能统计结果与性能阈值进行对比,基于对比结果得到会话测试结果,能够达到准确得到测试结果的目的。
在一个实施例中,如图4所示,当会话测试结果为会话测试通过时,则会话测试方法还包括:
步骤S402,接收会话终端发送的会话请求,该会话请求携带会话主题标识。
其中,会话主题标识是指能够体现会话主题的识别标记,会话主题是指会话的主要内容。例如,会话的主要内容为某个学科的考试题目,则会话主题为该学科的试卷。会话相关数据是指与会话相关的数据,该数据包括会话中的主要内容,也包括会话中用于辅助会话主要内容的辅助内容。例如,会话主题标识为职业素养培训001,则会话相关的数据包括职业素养培训的问题,也包括推荐的问题的答案。
具体地,服务器通过本端的会话服务单元接收会话终端发送的会话请求,该会话请求携带会话主题标识。通过会话主题标识可以确定会话主题。例如,服务器接收到会话终端发送的会话请求为请求开始培训,则该会话请求中携带有培训课程A对应的会话主题标识“培训课程A”。
步骤S404,响应于会话请求,生成对应的目标会话标识,获取会话主题标识对应的会话相关数据,建立目标会话标识与会话相关数据的对应关系,该会话相关数据包括会话内容信息以及会话内容信息的标准回复内容。
具体地,当服务器接收到会话终端发送的会话请求时,响应于会话请求,通过会话标识生成策略生成对应的目标会话标识,通过该目标会话标识、会话主题标识和会话相关数据之间的对应关系,获取到会话主题标识对应的会话相关数据,该会话相关数据包括会话内容信息以及会话内容信息的标准回复内容。
在一个实施例中,通过服务器接收到会话请求携带的会话请求发起的时间戳和本机IP(Internet Protocol)地址,生成对应的目标会话标识;再根据会话请求中携带的会话主题标识,得到会话主题标识对应的会话相关数据,该会话相关数据包括会话内容信息以及会话内容信息的标准回复内容。例如,智能培训机器人中的会话内容信息为培训题目,标准回复内容为推荐话术,该推荐话术可以理解为针对于培训题目得到的标准答案。
步骤S406,基于目标会话标识与会话终端建立第二数据传输通道。
具体地,在服务器基于会话请求生成目标会话标识后,可以通过该目标会话标识与会话终端建立第二数据传输通道。
步骤S408,通过第二数据传输通道将会话内容信息对应的机器人会话信息发送至会话终端。
具体地,在服务器和会话终端建立数据传输通道后,可以通过该数据传输通道将会话内容信息对应的机器人会话信息发送至会话终端。
在一个实施例中,数据传输通道包括实时会话语音通道,通过该实时会话语音通道将会话内容信息对应的机器人会话信息发送至会话终端。
步骤S410,通过第二数据传输通道接收会话终端发送的用户语音信息以及目标会话标识。
具体地,在服务器和会话终端建立数据传输通道后,可以通过数据传输通道接收会话终端发送的用户语音信息以及目标会话标识。
步骤S412,获取基于用户语音信息得到的用户回复内容,基于目标会话标识获取标准回复内容,将用户回复内容与标准回复内容进行对比,得到会话评估结果。
具体地,当服务器通过数据传输通道接收会话终端发送的用户语音信息以及目标会话标识后,通过该用户语音信息与用户回复信息之间的转换关系,得到用户回复内容。根据目标会话标识与标准回复内容之间的对应关系,得到标准回复内容。将用户回复内容与标准回复内容进行对比,得到会话评估结果。
在一个实施例中,对用户回复内容与标准回复内容分别进行语义分析,根据语义分析后的用户回复内容与语义分析后的标准回复内容之间的匹配度,得到会话评估结果。匹配度与会话评估结果之间存在正相关关系,例如,语义分析后的用户回复内容与语义分析后的标准回复内容之间的匹配度为90%,对应的会话评估结果为90分,匹配度为80%,对应的会话评估结果为80分。
在一个实施例中,数据传输通道包括额外消息传输通道,通过该额外消息传输通道将会话评估结果发送给会话终端。
上述机器人会话方法中,通过接收会话终端发送的会话请求,该会话请求携带会话主题标识,响应于会话请求,生成对应的目标会话标识,获取会话主题标识对应的会话相关数据,建立目标会话标识与会话相关数据的对应关系,该会话相关数据包括会话内容信息以及会话内容信息的标准回复内容,基于目标会话标识与会话终端建立数据传输通道,通过数据传输通道将会话内容信息对应的机器人会话信息发送至会话终端,通过数据传输通道接收会话终端发送的用户语音信息以及目标会话标识,获取基于用户语音信息得到的用户回复内容,基于目标会话标识获取标准回复内容,将用户回复内容与标准回复内容进行对比,得到会话评估结果。能够达到提高得到会话评估结果稳定性的目的。
在一个实施例中,如图5所示,会话内容信息为会话语音消息;通过第二数据传输通道将会话内容信息对应的机器人会话信息发送至会话终端包括:
步骤S502,对会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列。
具体地,服务器在获取到智能会话机器人对应的会话语音信息后,根据预设语音信息大小对会话语音信息进行切分,并且根据语音的时序顺序对切分得到的语音片段进行排列,得到语音片段序列。
在一个实施例中,服务器根据预设语音信息大小对会话语音信息进行切分,其中的预设语音信息大小小于最大传输单元MTU(Maximun Transfer Unit)。假设服务器获取到的会话语音信息大小本身小于最大传输单元MTU,则直接发送给会话终端,不进行切分。
步骤S504,通过第二数据传输通道将语音片段序列发送给智能会话机器人对应的会话终端,以使得会话终端对语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个语音片段对应的符合播放条件的语音播放单元;会话终端在会话界面上展示会话语音信息对应的语音提示信息,当满足语音提示信息的语音播放条件时,按照语音片段序列中的顺序,播放语音片段对应的语音播放单元。
具体地,服务器在获取到智能会话机器人对应的会话语音信息并对会话语音信息进行切分得到语音片段序列之后,通过长连接网关将语音片段序列按照先后顺序一段一段地发送给智能会话机器人对应的会话终端,以使得会话终端对语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个语音片段对应的符合播放条件的语音播放单元;会话终端在会话界面上展示会话语音信息对应的语音提示信息,当满足语音提示信息的语音播放条件时,按照语音片段序列中的顺序,播放语音片段对应的语音播放单元。
上述语音会话方法中,通过对该会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列;将该语音片段序列发送给智能会话机器人对应的会话终端,以使得会话终端对语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个语音片段对应的符合播放条件的语音播放单元;会话终端在会话界面上展示会话语音信息对应的语音提示信息,当满足语音提示信息的语音播放条件时,按照语音片段序列中的顺序,播放语音片段对应的语音播放单元。在发送会话语音信息时,对该会话语音信息进行切分,将切分得到的语音片段序列发送给智能会话机器人对应的会话终端,由于切分后的语音片段序列可以是一段一段的进行传输,因此会话终端可以根据已接收到的语音片段播放语音,减少语音会话时的卡顿现象,提高了语音会话的流畅度。
在一个实施例中,如图6所示,对会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列包括:
步骤S602,获取会话语音信息对应的切分得到的当前语音片段的播放时长。
具体地,服务器能够通过音频监听插件获取到会话语音信息对应的切分得到的当前语音片段的播放时长,并将播放时长存储到本地。
步骤S604,根据播放时长确定当前语音片段对应的下一语音片段的片段时长,该片段时长所对应的语音传输时长小于播放时长。
其中,语音传输时长是指语音在传输线路中传输的时间长度。例如,语音片段从服务器传输到会话终端所使用的时间为30毫秒,则该语音片段的传输时长为30毫秒。
具体地,各个语音片段在通信链路中传输,都存在有语音传输时长,在获取当前语音片段的播放时长后,通过该播放时长确定下一语音片段的片段时长,该片段时长所对应的语音传输时长小于播放时长。
步骤S606,基于片段时长从会话语音信息中切分得到当前语音片段对应的下一语音片段。
具体地,服务器在得到下一语音片段的片段时长后,可以利用该片段时长从会话语音信息中切分得到当前语音片段对应的下一语音片段。
在一个实施例中,根据语音片段时长,以及对会话语音信息的采样率、采样位深和声道数等得到语音片段的大小。例如,语音片段的大小表示为A,片段时长表示为T,采样率表示为V,采样位深表示为S,声道数表示为B,则语音片段的大小A表示为公式:
A=T*V*S*B
本实施例中,通过获取会话语音信息对应的切分得到的当前语音片段的播放时长,根据播放时长确定当前语音片段对应的下一语音片段的片段时长,基于片段时长从会话语音信息中切分得到当前语音片段对应的下一语音片段,能够达到准确得到当前语音片段对应的下一语音片段的目的,从而使语音会话更加顺畅。
在一个实施例中,上述智能机器人的软件架构,如图7所示,包括交互展示层、业务逻辑层和技术平台层。具体地,交互展示层用于界面展示与用户交互逻辑处理,该界面可以为PC(Personal Computer)网页、手机APP(Application)或者平板电脑APP等。业务逻辑层处理复杂的业务逻辑,保障系统的可用性以及扩展性等,技术平台层提供更底层的语音,语义等技术支撑。交互展示层包括培训对话界面和培训管理界面。培训管理界面用于管理员配置产品并进行发布,例如,配置试题或者配置规则等。培训对话界面包括SDK(SoftwareDevelopment Kit)和适配不同终端的UI(User Interface)界面。SDK包含有展示层各种处理数据的通用逻辑。业务逻辑层包括长连接网关、培训对话服务、培训管理后台等。其中,培训管理后台用于配置培训对话流程的各个节点、题目、任务等。配置的数据存储在数据库中。长连接网关用于维持与培训对话用户和服务器之间长链接,统一接收客服人员培训时录入的语音信息,并将客服人员录入的语音信息传输给技术平台层的语言平台进行识别、合成、编解码等,并可以接收语音平台发送的机器人说的语音信息。长连接网关根据会话ID(Identity document)记录与培训对话界面和对话控制平台的连接信息,通过心跳机制检查连接的有效性,以保证会话过程中的连接不易断掉。长连接网关与培训对话界面的SDK之间建立两条数据传输通道,即实时对话语音通道和信令语义分析通道。实时对话语音通道用于传输语音信息,信令语义分析通道用于传输控制命令或者质检结果等信息。相比于传统的技术中只有一条数据传输通道,能够让语音和文本数据传输分离,互不影响。培训对话服务用来接收考试请求,通过雪花算法产生会话ID,获取配置数据,如配置的试题及对话节点等信息以及控制对话流程。其中的语义分析平台用来对文本信息进行质检。
在一个实施例中,以培训学员考试为例,描述上述智能机器人的软件架构中各个模块之间的交互过程:客服人员利用平板电脑进行考试,登录账号,进入培训试题考试界面,培训对话界面获取考试界面上的考试开始操作,培训对话界面根据考试按钮的开始操作,向培训对话服务发起考试请求;培训对话服务根据发起考试请求的时间戳以及服务器的IP(Internet Protocol)地址,通过雪花算法会生成一个全局的会话ID,并缓存本次会话数据,将会话ID返回给培训对话界面;培训对话界面根据会话ID与长连接网关建立两条WS(Websocket)连接,长连接网关根据会话ID与对话控制平台建立连接,连接建立后,长连接网关通过会话ID的唯一性维持培训对话界面与对话控制平台之间的长连接;当对话控制平台与长连接网关建立连接成功之后,对话控制平台根据会话ID向培训对话服务获取配置信息,并获取培训对话中的节点信息。培训对话服务根据获取到的会话ID获取缓存的节点信息并返回给对话控制平台。当对话控制平台获取到节点信息之后,如果是机器人节点,则将配置的机器人文本信息转义成语音信息推送给长连接网关,长连接网关通过实时对话语音通道传给培训对话界面,培训对话界面播放机器人语音。当对话控制平台获取到是培训学员节点时,对话控制平台通过发送开始录音指令给长连接网关,长连接网关通过信令通道通知培训对话界面进行录音。培训对话界面采集用户的实时语音信息,并将实时语音信息通过语音传输通道传输给长连接网关;长连接网关通过会话ID将客服人员录入的语音信息传输对话控制平台;对话控制平台对用户录入的语音信息进行语音识别转换为文本信息,然后将文本信息传输给培训对话服务。培训对话服务获取到对话控制平台传过来的信息时,如果是机器人节点,则直接缓存信息;如果是培训学员节点,则调用语义分析平台对学员文本信息进行会话质检,得到质检结果,质检结果一般是正确或者错误,通过质检结果对本次节点信息进行节点分数的计算,以及判断是否下一次节点需要进行跳转等逻辑操作。并将文本信息和质检结果一起传输给统一网关;会话质检是可配置的,可以不需要;长连接网关会将文本信息和质检结果一起通过语义分析通道传输给培训对话界面。
在一个实施例中,如图8所示,为基于Jmeter(Apache Jmeter)实现包含WebSocket协议场景进行会话压力测试的实现过程。通过Jmeter提供的各种各样的测试组件,以及利用第三方测试插件库,通过本实施例中在各个会话测试阶段调用不同的测试组件或者测试插件,设置不同的指令或者数据的采集节点,实现方便,并且可以生成可靠的测试报告,可维护性强。以学员在线考试场景为例,为实现在线考试场景的压力测试,本次压力测试使用到了的插件包括但不限于以下,WebSocket Open Connection取样器、WebSocket SingleWrite取样器、HTTP取样器、While控制器、Json提取器以及Json断言等。具体地,运行Jmeter脚本,执行set-up(启动)线程中的HTTP取样器,生成sessionID(会话标识),使用Json断言,判断sessionID是否生成成功,若sessionID生成失败,则在会话日志中记录False,该False是sessionID生成失败的标志;若sessionID生成成功,则分别建立信令通道线程组和语音通道线程组;在建立信令通道线程组后,利用WebSocket Open Connection取样器建立信令通道,WebSocket Single Write取样器发送开始考试信令,设置While循环控制器判断考试是否结束,若该While循环未结束,则WebSocket Ping和WebSocket Pong配置元件发送ping数据包或者返回pong数据包,维持WebSocket长连接,上述ping数据包或者返回pong数据包可以理解为控制WebSocket长连接的数据包。WebSocket Single Read取样器读取tts(TextTo Speech)内容;若While循环已经结束,则保存关闭考试信令,将关闭信令设置为全局变量,同时使用WebSocket Close取样器断开信令连接通道,采集数据生成结果报告,压测脚本结束。当建立语音通道线程组后,利用WebSocket Open Connection取样器建立语音通道,设置While循环控制器判断结束标记是否满足,若不满足结束标记,则WebSocketSingle Write取样器发送二进制流数据,WebSocket Single Read取样器每隔40ms读取语音信息;该语音信息为服务器本端存储的文本信息进行语音转换得到的;若满足结束标记,则WebSocket Close取样器断开语音连接通道,采集数据生成结果报告,压测脚本结束。
应该理解的是,虽然图2-6的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-6中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图9所示,提供了一种会话测试装置900,包括:目标会话标识集合生成模块902、第一数据传输通道建立模块904、预设会话数据传输模块906、第一数据传输通道断开模块908和会话测试结果得到模块910,其中:目标会话标识集合生成模块902,用于响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,目标会话标识集合包括多个目标会话标识;第一数据传输通道建立模块904,用于生成各个目标会话标识对应的传输通道线程,基于启动连接取样器建立各个传输通道线程对应的第一数据传输通道;预设会话数据传输模块906,用于基于第一数据传输通道传输对应的目标会话标识对应的预设会话数据;第一数据传输通道断开模块908,用于若满足会话结束条件,基于结束连接取样器结束断开各个第一数据传输通道;会话测试结果得到模块910,用于采集各个目标会话标识对应的会话性能数据,统计目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。
在一个实施例中,第一数据传输通道建立模块904,用于生成各个目标会话标识对应的额外消息传输通道线程以及各个目标会话标识对应的会话消息传输通道线程;基于启动连接取样器建立额外消息传输通道线程的对应的额外消息传输通道以及会话消息传输通道线程对应的实时会话语音通道;基于额外消息传输通道传输目标会话标识对应的预设会话指令,以及基于实时会话语音通道传输目标会话标识对应的预设会话内容。
在一个实施例中,第一数据传输通道断开模块908,用于若满足会话结束条件,生成会话结束指令并将会话结束指令保存为全局变量,以使得结束连接取样器结束基于会话结束指令断开各个第一数据传输通道。
在一个实施例中,会话测试结果得到模块910,用于采集目标会话标识对应的第二数据传输通道对应的会话数据传输性能参数,对会话数据传输性能参数进行统计,得到传输性能统计结果;将传输性能统计结果与性能阈值进行对比,基于对比结果得到会话测试结果。
在一个实施例中,会话测试装置包括:会话请求接收模块,用于接收会话终端发送的会话请求,会话请求携带会话主题标识;会话相关数据获取模块,用于响应于会话请求,生成对应的目标会话标识,获取会话主题标识对应的会话相关数据,建立目标会话标识与会话相关数据的对应关系,会话相关数据包括会话内容信息以及会话内容信息的标准回复内容;第二数据传输通道建立模块,用于基于目标会话标识与会话终端建立第二数据传输通道;机器人会话信息发送模块,用于通过第二数据传输通道将会话内容信息对应的机器人会话信息发送至会话终端;用户语音信息接收模块,用于通过第二数据传输通道接收会话终端发送的用户语音信息以及目标会话标识;会话评估结果得到模块,用于获取基于用户语音信息得到的用户回复内容,基于目标会话标识获取标准回复内容,将用户回复内容与标准回复内容进行对比,得到会话评估结果。
在一个实施例中,机器人会话信息发送模块,用于对会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列;通过第二数据传输通道将语音片段序列发送给智能会话机器人对应的会话终端,以使得会话终端对语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个语音片段对应的符合播放条件的语音播放单元;会话终端在会话界面上展示会话语音信息对应的语音提示信息,当满足语音提示信息的语音播放条件时,按照语音片段序列中的顺序,播放语音片段对应的语音播放单元。
在一个实施例中,机器人会话信息发送模块,用于获取会话语音信息对应的切分得到的当前语音片段的播放时长;根据播放时长确定当前语音片段对应的下一语音片段的片段时长,片段时长所对应的语音传输时长小于播放时长;基于片段时长从会话语音信息中切分得到当前语音片段对应的下一语音片段。
关于会话测试装置的具体限定可以参见上文中对于会话测试方法的限定,在此不再赘述。上述会话测试装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图10所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储会话测试数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种会话测试方法。
本领域技术人员可以理解,图10中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种会话测试方法,其特征在于,所述方法包括:
响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,所述目标会话标识集合包括多个目标会话标识;
生成各个所述目标会话标识对应的传输通道线程,基于启动连接取样器建立各个所述传输通道线程对应的第一数据传输通道;
基于所述第一数据传输通道传输对应的目标会话标识对应的预设会话数据;
若满足会话结束条件,基于结束连接取样器结束断开各个所述第一数据传输通道;
采集各个所述目标会话标识对应的会话性能数据,统计所述目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。
2.根据权利要求1所述的方法,其特征在于,所述第一数据传输通道包括额外消息传输通道线程以及会话消息传输通道线程;所述生成各个所述目标会话标识对应的传输通道线程,基于启动连接取样器建立各个所述传输通道线程对应的第一数据传输通道包括:
生成各个所述目标会话标识对应的额外消息传输通道线程以及各个所述目标会话标识对应的会话消息传输通道线程;
基于启动连接取样器建立所述额外消息传输通道线程的对应的额外消息传输通道以及会话消息传输通道线程对应的实时会话语音通道;
所述基于所述第一数据传输通道传输对应的目标会话标识对应的预设会话数据包括:
基于所述额外消息传输通道传输所述目标会话标识对应的预设会话指令,以及基于所述实时会话语音通道传输所述目标会话标识对应的预设会话内容。
3.根据权利要求1所述的方法,其特征在于,所述若满足会话结束条件,基于结束连接取样器结束断开各个所述第一数据传输通道包括:
若满足会话结束条件,生成会话结束指令并将所述会话结束指令保存为全局变量,以使得所述结束连接取样器结束基于所述会话结束指令断开各个所述第一数据传输通道。
4.根据权利要求1所述的方法,其特征在于,所述采集各个所述目标会话标识对应的会话性能数据,统计所述目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果包括:
采集所述目标会话标识对应的第二数据传输通道对应的会话数据传输性能参数,对所述会话数据传输性能参数进行统计,得到传输性能统计结果;
将所述传输性能统计结果与性能阈值进行对比,基于对比结果得到会话测试结果。
5.根据权利要求1所述的方法,其特征在于,当所述会话测试结果为会话测试通过时,则所述方法还包括:
接收会话终端发送的会话请求,所述会话请求携带会话主题标识;
响应于所述会话请求,生成对应的目标会话标识,获取所述会话主题标识对应的会话相关数据,建立所述目标会话标识与所述会话相关数据的对应关系,所述会话相关数据包括会话内容信息以及所述会话内容信息的标准回复内容;
基于所述目标会话标识与所述会话终端建立第二数据传输通道;
通过所述第二数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端;
通过所述第二数据传输通道接收所述会话终端发送的用户语音信息以及所述目标会话标识;
获取基于所述用户语音信息得到的用户回复内容,基于所述目标会话标识获取所述标准回复内容,将所述用户回复内容与所述标准回复内容进行对比,得到会话评估结果。
6.根据权利要求5所述的方法,其特征在于,所述会话内容信息为会话语音消息;所述通过所述第二数据传输通道将所述会话内容信息对应的机器人会话信息发送至所述会话终端包括:
对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列;
通过所述第二数据传输通道将所述语音片段序列发送给智能会话机器人对应的会话终端,以使得所述会话终端对所述语音片段序列中的各个语音片段分别添加语音播放格式信息,得到各个所述语音片段对应的符合播放条件的语音播放单元;所述会话终端在会话界面上展示所述会话语音信息对应的语音提示信息,当满足所述语音提示信息的语音播放条件时,按照所述语音片段序列中的顺序,播放所述语音片段对应的语音播放单元。
7.根据权利要求6所述的方法,其特征在于,所述对所述会话语音信息进行切分,并按照语音顺序对切分得到的语音片段进行排列,得到语音片段序列包括:
获取所述会话语音信息对应的切分得到的当前语音片段的播放时长;
根据所述播放时长确定所述当前语音片段对应的下一语音片段的片段时长,所述片段时长所对应的语音传输时长小于所述播放时长;
基于所述片段时长从所述会话语音信息中切分得到所述当前语音片段对应的下一语音片段。
8.一种会话测试装置,其特征在于,所述装置包括:
目标会话标识集合生成模块,用于响应于会话测试指令,执行传输协议取样器生成目标会话标识集合,所述目标会话标识集合包括多个目标会话标识;
第一数据传输通道建立模块,用于生成各个所述目标会话标识对应的传输通道线程,基于启动连接取样器建立各个所述传输通道线程对应的第一数据传输通道;
预设会话数据传输模块,用于基于所述第一数据传输通道传输对应的目标会话标识对应的预设会话数据;
第一数据传输通道断开模块,用于若满足会话结束条件,基于结束连接取样器结束断开各个所述第一数据传输通道;
会话测试结果得到模块,用于采集各个所述目标会话标识对应的会话性能数据,统计所述目标会话标识对应的会话性能数据,基于性能统计结果得到会话测试结果。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110923090.1A CN113676373B (zh) | 2021-08-12 | 2021-08-12 | 会话测试方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110923090.1A CN113676373B (zh) | 2021-08-12 | 2021-08-12 | 会话测试方法、装置、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113676373A true CN113676373A (zh) | 2021-11-19 |
CN113676373B CN113676373B (zh) | 2022-08-19 |
Family
ID=78542440
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110923090.1A Active CN113676373B (zh) | 2021-08-12 | 2021-08-12 | 会话测试方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113676373B (zh) |
Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080274792A1 (en) * | 2006-07-25 | 2008-11-06 | Walker Jay S | Methods and apparatus for facilitating gaming sessions via a session ticket |
CN101436961A (zh) * | 2007-11-12 | 2009-05-20 | 国际商业机器公司 | 会话管理系统和方法 |
CN102780591A (zh) * | 2011-05-12 | 2012-11-14 | 弗兰克公司 | 用于在会话级别区分和采样双向网络流量的方法和装置 |
CN102803943A (zh) * | 2009-04-15 | 2012-11-28 | 纳诺米克斯公司 | 呼吸冷凝液取样器和检测器以及呼吸/呼吸冷凝液取样器和检测器 |
US20130222393A1 (en) * | 2011-11-30 | 2013-08-29 | The Board of Trustees of the Leland Stanford, Junior, University | Method and System for Interactive Layout |
US20170093888A1 (en) * | 2015-09-28 | 2017-03-30 | International Business Machines Corporation | Autonomic exclusion in a tiered delivery network |
CN107102880A (zh) * | 2017-05-11 | 2017-08-29 | 腾讯科技(深圳)有限公司 | 消息处理方法、装置、存储介质和计算机设备 |
CN108431761A (zh) * | 2015-12-22 | 2018-08-21 | 英特尔公司 | 用于用户姿势的时域特征变换 |
CN110198256A (zh) * | 2019-06-28 | 2019-09-03 | 上海智臻智能网络科技股份有限公司 | 互动式语音应答系统的压力测试方法、客户终端核数确定方法及装置、存储介质、终端 |
CN110768816A (zh) * | 2018-07-27 | 2020-02-07 | 成都鼎桥通信技术有限公司 | 多媒体业务异常保护方法和装置 |
US20200084147A1 (en) * | 2018-09-11 | 2020-03-12 | Cisco Technology, Inc. | In-situ passive performance measurement in a network environment |
CN111506718A (zh) * | 2020-04-20 | 2020-08-07 | 腾讯科技(深圳)有限公司 | 会话消息确定方法、装置、计算机设备和存储介质 |
CN111597104A (zh) * | 2020-04-02 | 2020-08-28 | 福建省农村信用社联合社 | 一种多协议适配的接口回归测试方法、系统、设备和介质 |
CN111723063A (zh) * | 2019-03-18 | 2020-09-29 | 北京沃东天骏信息技术有限公司 | 一种离线日志数据处理的方法和装置 |
CN112565270A (zh) * | 2020-12-08 | 2021-03-26 | 国网湖南省电力有限公司 | Http会话异常检测方法及检测系统 |
CN112737922A (zh) * | 2020-12-23 | 2021-04-30 | 江苏苏宁云计算有限公司 | 通讯方法、装置、计算机设备和存储介质 |
CN112804220A (zh) * | 2020-12-31 | 2021-05-14 | 北京天融信网络安全技术有限公司 | 一种防火墙测试方法、装置、电子设备及存储介质 |
CN112866063A (zh) * | 2021-02-19 | 2021-05-28 | 上海中通吉网络技术有限公司 | 一种基于Jmeter的SIP协议压测工具 |
CN113204449A (zh) * | 2021-05-20 | 2021-08-03 | 深圳软牛科技有限公司 | 会话备份方法、计算机可读存储介质及终端设备 |
-
2021
- 2021-08-12 CN CN202110923090.1A patent/CN113676373B/zh active Active
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080274792A1 (en) * | 2006-07-25 | 2008-11-06 | Walker Jay S | Methods and apparatus for facilitating gaming sessions via a session ticket |
CN101436961A (zh) * | 2007-11-12 | 2009-05-20 | 国际商业机器公司 | 会话管理系统和方法 |
CN102803943A (zh) * | 2009-04-15 | 2012-11-28 | 纳诺米克斯公司 | 呼吸冷凝液取样器和检测器以及呼吸/呼吸冷凝液取样器和检测器 |
CN102780591A (zh) * | 2011-05-12 | 2012-11-14 | 弗兰克公司 | 用于在会话级别区分和采样双向网络流量的方法和装置 |
US20130222393A1 (en) * | 2011-11-30 | 2013-08-29 | The Board of Trustees of the Leland Stanford, Junior, University | Method and System for Interactive Layout |
US20170093888A1 (en) * | 2015-09-28 | 2017-03-30 | International Business Machines Corporation | Autonomic exclusion in a tiered delivery network |
CN108431761A (zh) * | 2015-12-22 | 2018-08-21 | 英特尔公司 | 用于用户姿势的时域特征变换 |
CN107102880A (zh) * | 2017-05-11 | 2017-08-29 | 腾讯科技(深圳)有限公司 | 消息处理方法、装置、存储介质和计算机设备 |
CN110768816A (zh) * | 2018-07-27 | 2020-02-07 | 成都鼎桥通信技术有限公司 | 多媒体业务异常保护方法和装置 |
US20200084147A1 (en) * | 2018-09-11 | 2020-03-12 | Cisco Technology, Inc. | In-situ passive performance measurement in a network environment |
CN111723063A (zh) * | 2019-03-18 | 2020-09-29 | 北京沃东天骏信息技术有限公司 | 一种离线日志数据处理的方法和装置 |
CN110198256A (zh) * | 2019-06-28 | 2019-09-03 | 上海智臻智能网络科技股份有限公司 | 互动式语音应答系统的压力测试方法、客户终端核数确定方法及装置、存储介质、终端 |
CN111597104A (zh) * | 2020-04-02 | 2020-08-28 | 福建省农村信用社联合社 | 一种多协议适配的接口回归测试方法、系统、设备和介质 |
CN111506718A (zh) * | 2020-04-20 | 2020-08-07 | 腾讯科技(深圳)有限公司 | 会话消息确定方法、装置、计算机设备和存储介质 |
CN112565270A (zh) * | 2020-12-08 | 2021-03-26 | 国网湖南省电力有限公司 | Http会话异常检测方法及检测系统 |
CN112737922A (zh) * | 2020-12-23 | 2021-04-30 | 江苏苏宁云计算有限公司 | 通讯方法、装置、计算机设备和存储介质 |
CN112804220A (zh) * | 2020-12-31 | 2021-05-14 | 北京天融信网络安全技术有限公司 | 一种防火墙测试方法、装置、电子设备及存储介质 |
CN112866063A (zh) * | 2021-02-19 | 2021-05-28 | 上海中通吉网络技术有限公司 | 一种基于Jmeter的SIP协议压测工具 |
CN113204449A (zh) * | 2021-05-20 | 2021-08-03 | 深圳软牛科技有限公司 | 会话备份方法、计算机可读存储介质及终端设备 |
Non-Patent Citations (10)
Title |
---|
TOMMY CHANG,ET AL.,: ""Mining Concise Datasets for Testing Satellite-Data-Based Land-Cover Classifiers Meant for Large Geographic Areas"", 《 IEEE JOURNAL OF SELECTED TOPICS IN APPLIED EARTH OBSERVATIONS AND REMOTE SENSING》 * |
TOMMY CHANG,ET AL.,: ""Mining Concise Datasets for Testing Satellite-Data-Based Land-Cover Classifiers Meant for Large Geographic Areas"", 《 IEEE JOURNAL OF SELECTED TOPICS IN APPLIED EARTH OBSERVATIONS AND REMOTE SENSING》, vol. 9, no. 12, 3 September 2019 (2019-09-03) * |
徐世豪,: ""基于Hudson的APP接口自动化测试"", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》 * |
徐世豪,: ""基于Hudson的APP接口自动化测试"", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》, 15 May 2021 (2021-05-15) * |
李信本,: ""基于Web的网络旅游服务系统的形式化B开发"", 《计算机工程》 * |
李信本,: ""基于Web的网络旅游服务系统的形式化B开发"", 《计算机工程》, vol. 33, no. 7, 30 April 2007 (2007-04-30) * |
欧阳诗波,: ""基于Android的分布式推送系统设计与实现"", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》 * |
欧阳诗波,: ""基于Android的分布式推送系统设计与实现"", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》, 15 March 2016 (2016-03-15) * |
赵利强,: ""紧耦合NetStream网络流量采集系统的设计与实现"", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》 * |
赵利强,: ""紧耦合NetStream网络流量采集系统的设计与实现"", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》, 15 May 2016 (2016-05-15) * |
Also Published As
Publication number | Publication date |
---|---|
CN113676373B (zh) | 2022-08-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Garcia et al. | WebRTC testing: challenges and practical solutions | |
CN107645562A (zh) | 数据传输处理方法、装置、设备及系统 | |
CN109508790A (zh) | 基于租赁设备的故障数据处理方法、装置和计算机设备 | |
CN112367680B (zh) | 基于智能电表的外部通信测试方法、装置和计算机设备 | |
US20170180219A1 (en) | System and method of analyzing user skill and optimizing problem determination steps with helpdesk representatives | |
CN113630309B (zh) | 机器人会话系统、方法、装置、计算机设备和存储介质 | |
Amour et al. | An improved QoE estimation method based on QoS and affective computing | |
WO2024188277A1 (zh) | 文本语义匹配方法及制冷设备系统 | |
CN113392893A (zh) | 业务故障的定位方法、装置、存储介质及计算机程序产品 | |
CN111563037A (zh) | 基于测试试题的测试优化方法及装置、存储介质、终端 | |
CN113676373B (zh) | 会话测试方法、装置、计算机设备和存储介质 | |
CN113689854B (zh) | 语音会话方法、装置、计算机设备和存储介质 | |
CN112001622A (zh) | 云虚拟网关的健康度评估方法、系统、设备和存储介质 | |
CN116016468A (zh) | 会话问题诊断方法、装置、介质和电子设备 | |
CN107517237A (zh) | 一种视频识别方法和装置 | |
CN111225114A (zh) | 拨测方法、装置、计算机设备及存储介质 | |
WO2022206307A1 (en) | Method for electronic messaging using image based noisy content | |
CN113079522B (zh) | Ott服务质量测试方法、装置、电子设备和存储介质 | |
CN114253797A (zh) | 一种微服务系统的故障处理方法及相关装置 | |
CN113852835A (zh) | 直播音频处理方法、装置、电子设备以及存储介质 | |
CN112689112A (zh) | 视频交流系统的耗时分析及优化方法、装置、设备及介质 | |
CN115913912A (zh) | 报文拦截及业务链路图的生成方法及装置 | |
CN113032255A (zh) | 响应噪音的识别方法、模型、电子设备及计算机存储介质 | |
CN115391127A (zh) | 一种拨测方法、装置、存储介质及芯片 | |
CN112105045A (zh) | 一种通讯设备故障诊断方法和平台 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |