CN114996391A - 故障变更定位方法、装置、设备、介质及程序产品 - Google Patents

故障变更定位方法、装置、设备、介质及程序产品 Download PDF

Info

Publication number
CN114996391A
CN114996391A CN202210377556.7A CN202210377556A CN114996391A CN 114996391 A CN114996391 A CN 114996391A CN 202210377556 A CN202210377556 A CN 202210377556A CN 114996391 A CN114996391 A CN 114996391A
Authority
CN
China
Prior art keywords
text
change
complaint
user
user complaint
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210377556.7A
Other languages
English (en)
Inventor
刘晖
张荣超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alipay Hangzhou Information Technology Co Ltd
Original Assignee
Alipay Hangzhou Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alipay Hangzhou Information Technology Co Ltd filed Critical Alipay Hangzhou Information Technology Co Ltd
Priority to CN202210377556.7A priority Critical patent/CN114996391A/zh
Publication of CN114996391A publication Critical patent/CN114996391A/zh
Priority to US18/298,987 priority patent/US20230325300A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/3331Query processing
    • G06F16/334Query execution
    • G06F16/3344Query execution using natural language analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/20Administration of product repair or maintenance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/01Customer relationship services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/362Software debugging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/70Software maintenance or management
    • G06F8/71Version control; Configuration management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Quality & Reliability (AREA)
  • Finance (AREA)
  • Computational Linguistics (AREA)
  • Human Resources & Organizations (AREA)
  • Artificial Intelligence (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Computer Hardware Design (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本说明书实施例公开了一种故障变更定位方法、装置、设备、介质及程序产品。其中,该方法包括:通过根据将用户投诉文本对应的投诉时刻的预设时间段内的变更集合中每个变更对应的描述文本与上述用户投诉文本之间进行文本相似度的计算,从而确定变更集合中的变更是否与用户投诉文本有关,若有关,则将相关的变更确定为上述用户投诉文本对应的故障变更。

Description

故障变更定位方法、装置、设备、介质及程序产品
技术领域
本说明书涉及通信技术领域,尤其涉及一种故障变更定位方法、装置、设备、介质及程序产品。
背景技术
为了修复已有的漏洞(bug),提高软件的性能,技术人员需要频繁地对软件进行变更。软件变更需要对系统的配置或者代码等进行更改,这很容易产生故障。在故障发生后,需要快速地对这个故障对应的变更进行定位,即确定故障是由历史上的哪个变更导致的,以便技术人员能够快速对所定位的变更进行回滚,以快速止损并使系统恢复正常运行。
目前,故障可以通过用户投诉来发现。而通过用户投诉来定位故障的流程比较长。客服收到用户投诉后,为了避免误报的情况,需要把多个用户投诉中类似故障的信息汇总,确认是技术出现问题后,通知技术人员对多个变更一一进行排查,确定是哪个变更的发布导致出现故障即确定故障变更的位置。
发明内容
本说明书实施例提供了一种故障变更定位方法、装置、设备、介质及程序产品,利用自然语言技术将用户投诉文本和每个变更通过文本相似度进行关联,只要出现用户投诉文本就能对其进行处理,实现短—长文本的匹配,大大加快了故障变更的定位和修复,提高了对用户投诉文本进行处理的效率。上述技术方案如下:
第一方面,本说明书实施例提供了一种故障变更定位方法,包括:
获取用户投诉文本;
基于上述用户投诉文本的投诉时刻,确定预设时间段内的变更集合;
获取上述变更集合中每个变更对应的描述文本;
计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;
若存在变更对应的描述文本与上述用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本对应的故障变更。
在一种可能的实现方式中,上述描述文本包括至少一个句子;
上述计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,包括:
计算上述用户投诉文本与上述每个变更对应的描述文本中的每个句子之间的第一词重叠分数;上述第一词重叠分数用于表征上述用户投诉文本与上述每个变更对应的描述文本中的每个句子之间的相关性;
从上述每个变更对应的描述文本中提取上述第一词重叠分数最高的N个句子;上述N为正整数;
根据上述每个变更对应的上述N个句子计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述根据上述每个变更对应的上述N个句子计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,包括:
计算上述每个变更对应的上述N个句子分别与上述用户投诉文本之间的N个文本相似度;
根据上述N个文本相似度中L个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;上述L为大于0,且小于或等于N的正整数。
在一种可能的实现方式中,上述根据上述N个文本相似度中L个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,包括:
根据上述N个文本相似度中L个最高的上述文本相似度,以及上述L个最高的上述文本相似度对应的L个句子与上述用户投诉文本之间的L个第一词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述描述文本包括多个句子;
上述计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,包括:
将上述每个变更对应的描述文本中的所有句子按照第一预设规则进行拼接,得到上述描述文本对应的至少一个目标文本;上述目标文本包括至少一个上述句子;
计算上述用户投诉文本与上述描述文本对应的每个目标文本之间的第二词重叠分数;上述第二词重叠分数用于表征上述用户投诉文本与上述描述文本对应的每个目标文本之间的相关性;
从上述描述文本对应的上述至少一个目标文本中提取上述第二词重叠分数最高的M个目标文本;上述M为正整数;
根据上述每个变更的描述文本对应的上述M个目标文本计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述根据上述每个变更的描述文本对应的上述M个目标文本计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,包括:
计算上述每个变更对应的上述M个目标文本分别与上述用户投诉文本之间的M个文本相似度;
根据上述M个文本相似度中K个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;上述K为大于0,且小于或等于M的正整数。
在一种可能的实现方式中,上述根据上述M个文本相似度中K个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,包括:
根据上述M个文本相似度中K个最高的上述文本相似度,以及上述K个最高的上述文本相似度对应的K个目标文本与上述用户投诉文本之间的K个第二词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述接收用户投诉文本之后,上述计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度之前,上述方法还包括:
根据预设停用词词库按照第二预设规则对上述用户投诉文本以及上述每个变更对应的描述文本进行过滤,得到过滤后的用户投诉文本以及过滤后的每个变更对应的描述文本;
上述计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,包括:
计算上述过滤后的每个变更对应的描述文本与上述过滤后的用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述接收用户投诉文本之后,上述计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度之前,上述方法还包括:
确定在上述用户投诉文本的投诉时刻之前投诉的X个历史用户投诉文本;上述X为正整数;
计算上述用户投诉文本与上述X个历史用户投诉文本中每个历史用户投诉文本之间的文本相似度;
若存在Y个历史用户投诉文本与上述用户投诉文本之间的文本相似度大于或等于第二预设阈值,则将上述Y个历史用户投诉文本与上述用户投诉文本按照第三预设规则进行拼接,得到目标投诉文本;上述Y为大于0,且小于或等于X的正整数;
上述计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,包括:
计算上述每个变更对应的描述文本与上述目标投诉文本之间的文本相似度;
上述若存在变更对应的描述文本与上述用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本对应的故障变更,包括:
若存在变更对应的描述文本与上述目标投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本以及上述Y个历史用户投诉文本对应的故障变更。
第二方面,本说明书实施例提供了一种故障变更定位装置,包括:
获取模块,用于获取用户投诉文本;
第一确定模块,用于基于上述用户投诉文本的投诉时刻,确定预设时间段内的变更集合;
上述获取模块还用于,获取上述变更集合中每个变更对应的描述文本;
第一计算模块,用于计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;
第二确定模块,用于若存在变更对应的描述文本与上述用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本对应的故障变更。
在一种可能的实现方式中,上述描述文本包括至少一个句子;
上述第一计算模块包括:
第一计算单元,用于计算上述用户投诉文本与上述每个变更对应的描述文本中的每个句子之间的第一词重叠分数;上述第一词重叠分数用于表征上述用户投诉文本与上述每个变更对应的描述文本中的每个句子之间的相关性;
第一提取单元,用于从上述每个变更对应的描述文本中提取上述第一词重叠分数最高的N个句子;上述N为正整数;
第二计算单元,用于根据上述每个变更对应的上述N个句子计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述第二计算单元具体用于:
计算上述每个变更对应的上述N个句子分别与上述用户投诉文本之间的N个文本相似度;
根据上述N个文本相似度中L个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;上述L为大于0,且小于或等于N的正整数。
在一种可能的实现方式中,上述第二计算单元在根据上述N个文本相似度中L个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于:
根据上述N个文本相似度中L个最高的上述文本相似度,以及上述L个最高的上述文本相似度对应的L个句子与上述用户投诉文本之间的L个第一词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述描述文本包括多个句子;
上述第一计算模块还包括:
拼接单元,用于将上述每个变更对应的描述文本中的所有句子按照第一预设规则进行拼接,得到上述描述文本对应的至少一个目标文本;上述目标文本包括至少一个上述句子;
第三计算单元,用于计算上述用户投诉文本与上述描述文本对应的每个目标文本之间的第二词重叠分数;上述第二词重叠分数用于表征上述用户投诉文本与上述描述文本对应的每个目标文本之间的相关性;
第二提取单元,用于从上述描述文本对应的上述至少一个目标文本中提取上述第二词重叠分数最高的M个目标文本;上述M为正整数;
第四计算单元,用于根据上述每个变更的描述文本对应的上述M个目标文本计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述第四计算单元具体用于:
计算上述每个变更对应的上述M个目标文本分别与上述用户投诉文本之间的M个文本相似度;
根据上述M个文本相似度中K个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;上述K为大于0,且小于或等于M的正整数。
在一种可能的实现方式中,上述第四计算单元在根据上述M个文本相似度中K个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于:
根据上述M个文本相似度中K个最高的上述文本相似度,以及上述K个最高的上述文本相似度对应的K个目标文本与上述用户投诉文本之间的K个第二词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述故障变更定位装置还包括:
过滤模块,用于根据预设停用词词库按照第二预设规则对上述用户投诉文本以及上述每个变更对应的描述文本进行过滤,得到过滤后的用户投诉文本以及过滤后的每个变更对应的描述文本;
上述第一计算模块具体用于:
计算上述过滤后的每个变更对应的描述文本与上述过滤后的用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述故障变更定位装置还包括:
第三确定模块,用于确定在上述用户投诉文本的投诉时刻之前投诉的X个历史用户投诉文本;上述X为正整数;
第二计算模块,用于计算上述用户投诉文本与上述X个历史用户投诉文本中每个历史用户投诉文本之间的文本相似度;
拼接模块,用于若存在Y个历史用户投诉文本与上述用户投诉文本之间的文本相似度大于或等于第二预设阈值,则将上述Y个历史用户投诉文本与上述用户投诉文本按照第三预设规则进行拼接,得到目标投诉文本;上述Y为大于0,且小于或等于X的正整数;
上述第一计算模块还用于,计算上述每个变更对应的描述文本与上述目标投诉文本之间的文本相似度;
上述第二确定模块还用于,若存在变更对应的描述文本与上述目标投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本以及上述Y个历史用户投诉文本对应的故障变更。
第三方面,本说明书实施例提供了一种电子设备,包括:处理器以及存储器;
上述处理器与上述存储器相连;
上述存储器,用于存储可执行程序代码;
上述处理器通过读取上述存储器中存储的可执行程序代码来运行与上述可执行程序代码对应的程序,以用于执行本说明书实施例第一方面或第一方面的任意一种可能的实现方式提供的方法。
第四方面,本说明书实施例提供了一种计算机存储介质,上述计算机存储介质存储有多条指令,上述指令适于由处理器加载并执行本说明书实施例第一方面或第一方面的任意一种可能的实现方式提供的方法。
第五方面,本说明书实施例提供了一种包含指令的计算机程序产品,当上述计算机程序产品在计算机或处理器上运行时,使得上述计算机或上述处理器执行本说明书实施例第一方面或第一方面的任意一种可能的实现方式提供的故障变更定位方法。
本说明书实施例根据用户投诉文本的投诉时刻,确定预设时间段内的变更集合,然后通过计算上述变更集合中的每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,将与上述用户投诉文本之间的文本相似度大于或等于第一预设阈值的变更确定为上述用户投诉文本对应的故障变更,实现利用自然语言技术将用户投诉文本和每个变更通过文本相似度进行关联,只要出现用户投诉文本就能对其进行处理,能够进行短(用户投诉文本)—长(变更对应的描述文本)文本的匹配,大大加快了故障变更的定位和修复,减少了技术人员的排查时间,提高了对用户投诉文本进行处理的效率。
附图说明
为了更清楚地说明本说明书实施例中的技术方案,下面将对实施例中所需使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本说明书的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本说明书一示例性实施例提供的一种故障变更定位系统的架构示意图;
图2为相关技术中提供的一种从用户发现故障到技术人员修复故障的流程示意图;
图3为本说明书一示例性实施例提供的一种故障变更定位方法的流程示意图;
图4为本说明书一示例性实施例提供的变更以及变更对应的描述文本的示意图;
图5为本说明书一示例性实施例提供的一种文本相似度模型的实现流程示意图;
图6为本说明书一示例性实施例提供的另一种文本相似度模型的实现流程示意图;
图7为本说明书一示例性实施例提供的另一种故障变更定位方法的流程示意图;
图8为本说明书一示例性实施例提供的一种故障变更定位装置的结构示意图;
图9为本说明书一示例性实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本说明书实施例中的附图,对本说明书实施例中的技术方案进行清楚、完整地描述。
本说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
请参考图1,图1为本说明书一示例性实施例提供的一种故障变更定位系统的架构示意图。如图1所示,故障变更定位系统可以包括:第一终端集群、第二终端120、服务器130和第三终端集群。其中:
第一终端集群可以为用户端,具体包括一个或多个用户端,其中多个用户端可以包括用户端110a、用户端110b、用户端110c…等。在第一终端集群中可安装用户版的软件,用于实现用户线上输入用户投诉文本或投诉语音等功能。第一终端集群中任意一个用户端均可以建立与网络之间的数据关系,并通过该网络和第二终端120建立数据连接关系,例如发送用户投诉文本、发起投诉电话等。其中,第一终端集群中任意一个用户端可以但不限于是安装有用户版软件的手机、平板电脑、笔记本电脑等设备。
第二终端120可以为客服端,具体可以包括一个或多个客服端。在第二终端120中可安装客服版的软件,用于实现客服线上获取用户投诉文本或投诉语音、接听投诉电话、将投诉电话的内容转换为投诉文本等功能。第二终端120可以建立与网络之间的数据关系,并通过该网络和第一终端集群中任意一个用户端建立数据连接关系,例如接收用户投诉文本、接听投诉电话等。第二终端120还可以通过网络和服务器130建立数据连接关系,例如发送用户投诉文本或投诉电话等。其中,第二终端120可以但不限于是安装有客服版软件的手机、平板电脑、笔记本电脑等设备。
第三终端集群可以为技术人员端,具体包括一个或多个技术人员端,其中多个技术人员端可以包括技术人员端140a、技术人员端140b、技术人员端140c…等。在第三终端集群中可安装技术人员版的软件,用于实现技术人员线上接收故障变更、对故障变更进行排查和修复等功能。第三终端集群中任意一个技术人员端均可以建立与网络之间的数据关系,并通过该网络和服务器130建立数据连接关系,例如发送变更对应的描述文本、接收确定的故障变更等。其中,第三终端集群中任意一个技术人员端可以但不限于是安装有技术人员版软件的手机、平板电脑、笔记本电脑等设备。
服务器130可以是能提供多种故障变更定位的服务器,可以接收网络或第二终端120发送的用户投诉文本等数据,以及接收第三终端集群中任意一个技术人员端发送的变更对应的描述文本等,并将所有技术人员端发送的变更对应的描述文本均存储在数据库中,然后根据上述用户投诉文本以及在上述用户投诉文本的投诉时刻预设时间段内的变更集合中每个变更对应的描述文本确定上述用户投诉文本对应的故障变更。服务器130还可以给第三终端集群中任意一个技术人员端或与用户投诉文本对应的故障变更的技术人员端发送用户投诉文本等。服务器130可以但不限于是硬件服务器、虚拟服务器、云服务器等。
网络可以是在第二终端120和第一终端集群中任意一个用户端之间、在第二终端120和服务器130之间、以及服务器130和第三终端集群中任意一个技术人员端之间提供通信链路的介质,也可以是包含网络设备和传输介质的互联网,不限于此。传输介质可以是有线链路(例如但不限于,同轴电缆、光纤和数字用户线路(digital subscriber line,DSL)等)或无线链路(例如但不限于,无线上网(wireless fidelity,WIFI)、蓝牙和移动设备网络等)。
可以理解地,图1所示的故障变更定位系统中的第一终端集群、第二终端120、服务器130和第三终端集群的数目仅作为示例,在具体实现中,该故障变更定位系统中可以包含任意数目的用户端、客服端、技术人员端和服务器。本说明书实施例对此不作具体限定。例如但不限于,第二终端120可以是多个第二终端(客服端)组成的第二终端集群,服务器130可以是多个服务器组成的服务器集群。
接下来结合图1,介绍相关技术中从用户发现故障到技术人员修复故障时的整体流程。具体请参考图2,其为相关技术中提供的一种从用户发现故障到技术人员修复故障的流程示意图。如图2所示,若软件发生了故障(201,故障发生),客服将会接收到用户的电话投诉和/或线上投诉(202,客户投诉),然后需要客服将接收到用户投诉电话和/或线上投诉文本进行手动提交上报(203,投诉上报)。由于一个投诉电话或投诉文本可能是误报的情况,所以需要由多个客服或现场总控人员把类似故障的投诉电话和/或投诉文本进行汇总(204,投诉汇总),确认是技术出现问题后,通知技术人员,由技术人员拉大群进行一一排查(205,拉群排查),从而定位故障变更的具体位置(206,定位故障变更),并由上述故障变更对应的技术人员进行回滚和修复(207,回滚&修复)。由于变更的数量很多,相应的技术人员也很多,所以不仅需要时间去等待多个类似故障的投诉出现后(204,投诉汇总)才开始对确认是技术出现问题的投诉进行处理,还需要大量地时间才能够确定是哪个变更的发布导致的故障,即现有的从用户发现故障到技术人员修复故障的流程过长,客服以及技术人员的工作量极大,并不能及时对每一个用户投诉电话或投诉文本进行处理。
而本说明书实施例通过机器学习自然语言处理技术,将用户的投诉电话对应的文本和投诉文本(短文本),结合技术人员变更系统或代码等时的相关描述(长文本),在时序上进行关联,即实现短-长文本的文本相似度计算,确认用户投诉是否与某个变更有关,从而可以在变更一发布后,就立刻让技术人员感知到有多少相关的用户投诉,极大加快了故障变更的定位,也可以对每一个用户投诉进行及时的处理,即不需要进行步骤204(投诉汇总)就可以确认该用户投诉是否是技术出现问题,若是,也不需要进行步骤205(拉群排查)就能够由机器迅速地确定其对应的故障变更,从而通知上述故障变更对应的技术人员及时进行回滚和修复。
接下来结合图1-图2,介绍本说明书实施例提供的故障变更定位方法。具体请参考图3,其为本说明书一示例性实施例提供的一种故障变更定位方法的流程示意图。如图3所示,该故障变更定位方法包括以下几个步骤:
步骤302,获取用户投诉文本。
具体地,客服端在接收到用户投诉电话后,可先将上述用户投诉电话的语音数据转换成用户投诉文本,然后将上述投诉文本发送给服务器,从而使服务器可以获取到用户投诉文本。客服端也可以直接将用户投诉电话的语音数据发送给服务器,由服务器将上述语音数据转换为用户投诉文本,服务器也可以直接通过网络接收到由客服端或用户端发送的用户投诉文本等,本说明书对此不作限定。
步骤304,基于用户投诉文本的投诉时刻,确定预设时间段内的变更集合。
具体地,用户投诉文本包括对应的投诉时刻。上述投诉时刻用于表征用户开始拨打投诉电话的时刻或开始发送线上投诉文本的时刻。由于不同的变更对应的发布时刻也可能不同,且每天都可能出现很多个变更,从时序上看,在用户投诉文本的投诉时刻之前,且距离上述用户投诉文本的投诉时刻近的变更与用户投诉文本的具有相关性的概率更大,所以,可以根据用户投诉文本的投诉时刻,确定在上述投诉时刻的预设时间段内的变更集合。上述预设时间段可以是1分钟、8小时、3天、1个月等,本说明书对此不作限定。上述变更集合中包括在户投诉文本的投诉时刻之前的预设时间段内的所有变更。
示例性地,若预设时间段为1天,用户投诉文本的投诉时刻为2022年1月26日00:00:00,则可以将2022年1月25日00:00:00至2022年1月26日00:00:00期间发布的所有变更确定为预设时间段内的变更集合。
步骤306,获取变更集合中每个变更对应的描述文本。
具体地,服务器可以根据变更集合中每个变更对应的名称从预先存储的所有变更对应的描述文本中查找到上述变更集合中每个变更对应的描述文本。变更可以包括但不限于代码变更、配置变更、系统变更、接口变更等。
示例性地,如图4所示,变更400包括配置变更410、代码变更420、系统变更430。上述配置变更410对应的描述文本中包括技术人员撰写的本次变更对应的参数描述411、接口描述412、系统描述413,以及产品经理等非技术人员撰写的本次变更对应的需求描述414。上述代码变更420对应的描述文本中包括技术人员撰写的本次变更对应的代码备注421、迭代描述422、系统描述423、以及产品经理等非技术人员撰写的本次变更对应的需求描述424。上述系统变更430对应的描述文本中包括技术人员撰写的本次变更对应的系统描述431,以及产品经理等非技术人员撰写的本次变更对应的需求描述432。
步骤308,计算每个变更对应的描述文本与用户投诉文本之间的文本相似度。
具体地,可以将每个变更对应的描述文本与用户投诉文本直接输入BERT文本相似度模型中,从而输出得到每个变更对应的描述文本与用户投诉文本之间的文本相似度。上述BERT文本相似度模型由多个变更对应的描述文本、多个用户投诉文本以及上述每个变更对应的描述文本与上述每一个用户投诉文本之间的文本相似度训练得到。
可选地,为了提高上述BERT文本相似度模型的准确率,可以先根据预设停用词词库按照第二预设规则对用户投诉文本以及每个变更对应的描述文本进行过滤,得到过滤后的用户投诉文本以及过滤后的每个变更对应的描述文本,然后再计算上述过滤后的每个变更对应的描述文本与上述过滤后的用户投诉文本之间的文本相似度。上述第二预设规则可以为过滤掉用户投诉文本以及描述文本中与预设停用词词库中的停用词相同的词。上述停用词用于表征对故障和变更的描述无关的词,例如谢谢,好的等。为了避免每个变更对应的描述文本中与软件相关的描述词等被过滤掉而导致故障变更定位的准确率变低,上述第二预设规则也可以为根据预设停用词词库过滤掉用户投诉文本和描述文本中的停用词,同时保留上述描述文本中的与软件相关的描述,例如描述文本中对配置、系统等专业术语的描述,即为了避免与软件相关描述中的某些与预设停用词库中的停用词相同的词被过滤掉,可以对其添加保护字段,本说明书对此不作限定。
步骤310,若存在变更对应的描述文本与用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将变更确定为用户投诉文本对应的故障变更。
具体地,可以将与用户投诉文本之间的文本相似度大于或等于第一预设阈值的描述文本对应的变更确定为上述用户投诉文本对应的故障变更,即可能是由于上述故障变更导致上述用户在使用软件时出现问题,从而发起投诉,即产生上述用户投诉文本。上述第一预设阈值可以为0.1、0.9等,本说明书对此不作限定。上述用户投诉文本对应的故障变更包括至少一个变更。服务器在确定与上述用户投诉文本相关的至少一个故障变更之后,可以将上述用户投诉文本以及其对应的至少一个故障变更发送给上述每个故障变更对应的技术人员进行排查、回滚以及修复。
本说明书实施例根据用户投诉文本的投诉时刻,确定预设时间段内的变更集合,然后通过计算上述变更集合中的每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,将与上述用户投诉文本之间的文本相似度大于或等于第一预设阈值的变更确定为上述用户投诉文本对应的故障变更,实现利用自然语言技术将用户投诉文本和每个变更通过文本相似度进行关联,只要出现用户投诉文本就能对其进行处理,能够进行短(用户投诉文本)—长(变更对应的描述文本)文本的匹配,从而只需要技术人员对与上述用户投诉文本相关联的故障变更进行排查、回滚和修复,并不需要排查所有的变更,大大加快了故障变更的定位和修复,减少了技术人员的排查时间,提高了对用户投诉文本进行处理的效率。
传统的BERT文本相似度模型(BERT模型)只能处理长度小于512的短文本,用户投诉文本的长度一般小于512,而每个变更对应的描述文本的长度远远大于512,为了使BERT文本相似度模型能够实现计算短-长文本的相似度,一般采用对长文本进行压缩或提取长文本中关键词或包括关键词的关键句等进行匹配的方式。但上述方式都会导致丢失掉变更对应的描述文本中大量有意义地文本,从而影响BERT文本相似度模型计算短-长文本相似度的准确率,导致故障变更定位的准确率不高。为了解决上述问题,接下来结合图1-图4,介绍本说明书实施例提供的故障变更定位方法中上述步骤308,计算每个变更对应的描述文本与用户投诉文本之间的文本相似度的一种具体实现过程。具体请参考图5,其为本说明书一示例性实施例提供的一种文本相似度模型的实现流程示意图。如图5所示,该文本相似度模型的实现流程包括以下几个步骤:
步骤502,计算用户投诉文本与每个变更对应的描述文本中的每个句子之间的第一词重叠分数。
具体地,变更对应的描述文本包括至少一个句子。可以先将每个变更对应的描述文本按照句号进行切分,然后再将用户投诉文本与每个变更文本对应的描述文本中的每个句子进行词重叠打分,即计算用户投诉文本与每个变更对应的描述文本中的每个句子之间具有相同或相似的词的分数即第一词重叠分数。上述第一词重叠分数用于表征用户投诉文本与每个变更对应的描述文本中的每个句子之间的相关性。
步骤504,从每个变更对应的描述文本中提取第一词重叠分数最高的N个句子。
具体地,计算出用户投诉文本与每个变更对应的描述文本中的每个句子之间的第一词重叠分数后,可以提取出每个变更对应的描述文本中第一词重叠分数最高的N个句子。上述N为正整数。
示例性地,可以从每个变更对应的描述文本中提取出第一词重叠分数最高的5个句子。
步骤506,根据每个变更对应的N个句子计算每个变更对应的描述文本与用户投诉文本之间的文本相似度。
可选地,可以先计算每个变更对应的第一词重叠分数最高的N个句子分别与用户投诉文本之间的N个文本相似度,即可以将上述每个变更对应的第一词重叠分数最高的N个句子分别与用户投诉文本输入BERT文本相似度模型中,从而输出得到每个变更对应的N个句子与用户投诉文本之间的N个文本相似度。然后根据上述N个文本相似度中L个最高的文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。上述L为大于0,且小于或等于N的正整数。
示例性地,可以计算上述每个变更对应的N个文本相似度中L个最高的文本相似度的平均值,并将上述平均值确定为上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;也可以将上述每个变更对应的N个文本相似度中L个最高的文本相似度进行加权求和,从而得到上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,本说明书实施例对此不作限定。
可选地,在计算出每个变更对应的第一词重叠分数最高的N个句子分别与用户投诉文本之间的N个文本相似度之后,还可以根据上述N个文本相似度中L个最高的文本相似度,以及上述L个最高的文本相似度对应的L个句子与上用户投诉文本之间的L个第一词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。即可以将上述N个文本相似度中L个最高的文本相似度,以及上述L个最高的文本相似度对应的L个句子与上用户投诉文本之间的L个第一词重叠分数进行加权融合,从而得到上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。上述L为大于0,且小于或等于N的正整数。
本说明书实施例通过将每个变更描述文本中第一词重叠分数最高的N个句子对应的N个文本相似度中L个最高的文本相似度,以及上述L个最高的文本相似度对应的L个句子与上用户投诉文本之间的L个第一词重叠分数结合起来共同确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,能够进一步提高计算文本相似度的准确率,从而进一步提升故障变更定位的准确率。
由于每个人撰写描述文本的习惯不同,有时写句号有时写分号,句子长度不一致,若通过上述按照句号切分每个变更对应的描述文本,再根据每个变更对应的描述文本中的某些句子计算每个变更对应的描述文本与用户投诉文本之间的文本相似度,将会产生由于撰写时多写句号导致文本语义被切割的情况,且每个变更对应的描述文本中包括很多个句子,即每个都需要进行很多次第一词重叠分数的计算,计算量特别大,从而出现故障变更定位的效率不够高,文本相似度计算的准确率还不够高,故障变更定位还不够准确等问题。为了解决上述问题,接下来结合图1-图4,介绍本说明书实施例提供的故障变更定位方法中上述步骤308,计算每个变更对应的描述文本与用户投诉文本之间的文本相似度的另一种具体实现过程。具体请参考图6,其为本说明书一示例性实施例提供的另一种文本相似度模型的实现流程示意图。如图6所示,该文本相似度模型的实现流程包括以下几个步骤:
步骤602,将每个变更对应的描述文本中的所有句子按照第一预设规则进行拼接,得到描述文本对应的至少一个目标文本。
具体地,每个变更对应的描述文本包括多个句子。可以将上每个变更对应的描述文本中的所有句子按照第一预设规则进行拼接,从而得到描述文本对应的至少一个目标文本。上述目标文本包括至少一个上述描述文本中的句子。上述第一预设规则可以为将每个变更对应的描述文本中的多个句子按照描述文本中的顺序进行拼接,直至拼接得到的目标文本的长度最接近或等于预设长度。上述句子为长度小于预设阈值的短句子。上述预设阈值可以为256、200、512等大于1且,小于或等于512的任意值,本说明书对此不作限定。上述第一预设规则也可以为将描述文本中的句子或字符按照描述文本中的顺序进行拼接,直至拼接得到的目标文本的长度最接近或等于预设长度,本说明书实施例对此不作限定。上述预设长度可以为BERT文本相似度模型训练的最大文本长度512,也可以为256、400等小于512的任意长度,本说明书实施例对此不作限定。
步骤604,计算用户投诉文本与描述文本对应的每个目标文本之间的第二词重叠分数。
具体地,可以将用户投诉文本与每个描述文本对应的至少一个目标文本中每个目标文本进行词重叠打分,即计算用户投诉文本与每个描述文本对应的至少一个目标文本中每个目标文本之间具有相同或相似的词的分数即第二词重叠分数。上述第二词重叠分数用于表征用户投诉文本与描述文本对应的每个目标文本之间的相关性。
步骤606,从描述文本对应的至少一个目标文本中提取第二词重叠分数最高的M个目标文本。
具体地,计算出用户投诉文本与每个变更的描述文本对应的至少一个目标文本中每个目标文本之间的第二词重叠分数后,可以提取出每个变更的描述文本对应的至少一个目标文本中第二词重叠分数最高的M个目标文本。上述M为正整数,且上述M小于或等于描述文本对应的所有目标文本的总数。
示例性地,若某个变更对应的描述文本中的句子进行拼接后得到20个目标文本,则可以从上述描述文本对应的20个目标文本中提取第二词重叠分数最高的3个目标文本。
步骤608,根据每个变更的描述文本对应的M个目标文本计算每个变更对应的描述文本与用户投诉文本之间的文本相似度。
可选地,可以先计算每个描述文本对应的第二词重叠分数最高的M个目标文本分别与用户投诉文本之间的M个文本相似度,即可以将上述每个描述文本对应的第二词重叠分数最高的M个目标文本分别与用户投诉文本输入BERT文本相似度模型中,从而输出得到每个描述文本对应的M个目标文本与用户投诉文本之间的M个文本相似度。然后根据上述M个文本相似度中K个最高的文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。上述K为大于0,且小于或等于M的正整数。
示例性地,可以计算上述每个变更对应的M个文本相似度中K个最高的文本相似度的平均值,并将上述平均值确定为上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;也可以将上述每个变更对应的M个文本相似度中K个最高的文本相似度进行加权求和,从而得到上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度,本说明书实施例对此不作限定。
可选地,在计算出每个变更对应的第二词重叠分数最高的M个目标文本分别与用户投诉文本之间的M个文本相似度之后,还可以根据上述M个文本相似度中K个最高的文本相似度,以及上述K个最高的文本相似度对应的K个目标文本与上用户投诉文本之间的K个第二词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。即可以将上述M个文本相似度中K个最高的文本相似度,以及上述K个最高的文本相似度对应的K个目标文本与上用户投诉文本之间的K个第二词重叠分数进行加权融合,从而得到上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。上述K为大于0,且小于或等于M的正整数。
本说明书实施例不按照原始的句号进行切分,而是通过将变更对应的描述文本中的句子拼接到接近或等于BERT文本相似度模型训练的最大长度才开始计算第二词重叠分数,并根据每个变更的描述文本对应的第二词重叠分数最高的M个目标文本计算每个变更对应的描述文本与用户投诉文本之间的文本相似度,避免了由于撰写时多写句号导致文本语义被切割的情况,也减少了计算第二词重叠分数的计算量,不仅提高了定位故障变更的效率,还能够进一步提高计算文本相似度的准确率,从而进一步提升故障变更定位的准确率。
由于上述无监督的BERT文本相似度模型不会放过任何的可能性,即尽可能将用户投诉文本与变更关联起来,并且一个用户的描述可能不全面,导致盯盘的技术人员每天都需要对大量的疑似与多个类似又不相同的用户投诉文本相关联的故障变更进行排查。为了解决上述问题,接下来结合图1-图2,介绍本说明书实施例提供的故障变更定位方法。具体请参考图7,其为本说明书一示例性实施例提供的另一种故障变更定位方法的流程示意图。如图7所示,该故障变更定位方法包括以下几个步骤:
步骤702,获取用户投诉文本。
具体地,步骤702与步骤302一致,此处不再赘述。
步骤704,基于用户投诉文本的投诉时刻,确定预设时间段内的变更集合。
具体地,步骤704与步骤304一致,此处不再赘述。
步骤706,获取变更集合中每个变更对应的描述文本。
具体地,步骤706与步骤306一致,此处不再赘述。
步骤708,确定在用户投诉文本的投诉时刻之前投诉的X个历史用户投诉文本。
具体地,可以从获取到的所有用户投诉文本中找到在本次用户投诉文本的投诉时刻之前,且投诉时刻离上述用户投诉文本的投诉时刻最近的X个历史用户投诉文本。上述X为正整数。
示例性地,上述X可以为50、100、200等,本说明书实施例对此不作限定。
步骤710,计算用户投诉文本与X个历史用户投诉文本中每个历史用户投诉文本之间的文本相似度。
具体地,可以将用户投诉文本与X个历史用户投诉文本输入上述实施例中训练好的BERT文本相似度模型中,从而输出得到用户投诉文本与X个历史用户投诉文本中每个历史用户投诉文本之间的文本相似度。
步骤712,若存在Y个历史用户投诉文本与用户投诉文本之间的文本相似度大于或等于第二预设阈值,则将Y个历史用户投诉文本与用户投诉文本按照第三预设规则进行拼接,得到目标投诉文本。
具体地,可以将X个历史用户投诉文本中与用户投诉文本之间的文本相似度大于或等于第二预设阈值的所有历史用户投诉文本即Y个历史用户投诉文本,与用户投诉文本按照第三预设规则进行拼接,得到目标投诉文本。上述第三预设规则可以为将上述Y个历史用户投诉文本与用户投诉文本按照投诉时刻的先后顺序进行拼接,也可以为将上述Y个历史用户投诉文本与用户投诉文本按照任意的顺序进行拼接,还可以为过滤掉上述Y个历史用户投诉文本与用户投诉文本中的停用词,然后按照任意的顺序进行拼接等,本说明书实施例对此不作限定。上述Y为大于0,且小于或等于X的正整数。上述第二预设阈值可以为0.6、0.9等,本说明书实施例对此不作限定。
步骤714,计算每个变更对应的描述文本与目标投诉文本之间的文本相似度。
具体地,可以将每个变更对应的描述文本与目标投诉文本直接输入BERT文本相似度模型中,从而输出得到每个变更对应的描述文本与目标投诉文本之间的文本相似度。上述BERT文本相似度模型由多个变更对应的描述文本、多个用户投诉文本以及上述每个变更对应的描述文本与上述每一个用户投诉文本之间的文本相似度训练得到。
步骤716,若存在变更对应的描述文本与目标投诉文本之间的文本相似度大于或等于第一预设阈值,则将变更确定为用户投诉文本以及Y个历史用户投诉文本对应的故障变更。
具体地,可以将与目标投诉文本之间的文本相似度大于或等于第一预设阈值的描述文本对应的变更确定为上述目标文本即上述用户投诉文本以及Y个历史用户投诉文本对应的故障变更,即可能是由于上述故障变更导致上述用户投诉文本以及Y个历史用户投诉文本各自对应的用户在使用软件时出现问题,从而发起投诉,即产生上述用户投诉文本以及Y个历史用户投诉文本。上述第一预设阈值可以为0.1、0.9等,本说明书对此不作限定。上述用户投诉文本以及Y个历史用户投诉文本对应的故障变更包括至少一个变更,且上述故障变更的数量小于或等于仅根据用户投诉文本确定的故障变更的数量。服务器在确定与上述用户投诉文本相关的至少一个故障变更之后,可以将上述用户投诉文本以及Y个历史用户投诉文本和其对应的至少一个故障变更发送给上述每个故障变更对应的技术人员进行排查、回滚以及修复。
本说明书实施例将在本次用户投诉文本的投诉时刻之前投诉的,Y个与用户投诉文本之间的文本相似度大于或等于第二预设阈值的历史用户投诉文本,与上述用户投诉文本按照第三预设规则拼接为一个目标投诉文本,并通过计算上述每个变更对应的描述文本与上述目标投诉文本之间的文本相似度确定上述用户投诉文本以及上述X个历史用户投诉文本对应的故障变更,既能够避免一个用户的描述不全面导致定位不准确或疑似与该用户投诉文本相关联的故障变更太多的问题,提高故障变更定位的准确性,又可以同时对多个“同类”的用户投诉文本进行处理,极大地减少技术人员工作量。
请参考图8,图8为本说明书一示例性实施例提供的一种故障变更定位装置。该故障变更定位装置800包括:
获取模块810,用于获取用户投诉文本;
第一确定模块820,用于基于上述用户投诉文本的投诉时刻,确定预设时间段内的变更集合;
上述获取模块810还用于,获取上述变更集合中每个变更对应的描述文本;
第一计算模块830,用于计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;
第二确定模块840,用于若存在变更对应的描述文本与上述用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本对应的故障变更。
在一种可能的实现方式中,上述描述文本包括至少一个句子;
上述第一计算模块830包括:
第一计算单元,用于计算上述用户投诉文本与上述每个变更对应的描述文本中的每个句子之间的第一词重叠分数;上述第一词重叠分数用于表征上述用户投诉文本与上述每个变更对应的描述文本中的每个句子之间的相关性;
第一提取单元,用于从上述每个变更对应的描述文本中提取上述第一词重叠分数最高的N个句子;上述N为正整数;
第二计算单元,用于根据上述每个变更对应的上述N个句子计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述第二计算单元具体用于:
计算上述每个变更对应的上述N个句子分别与上述用户投诉文本之间的N个文本相似度;
根据上述N个文本相似度中L个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;上述L为大于0,且小于或等于N的正整数。
在一种可能的实现方式中,上述第二计算单元在根据上述N个文本相似度中L个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于:
根据上述N个文本相似度中L个最高的上述文本相似度,以及上述L个最高的上述文本相似度对应的L个句子与上述用户投诉文本之间的L个第一词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述描述文本包括多个句子;
上述第一计算模块830还包括:
拼接单元,用于将上述每个变更对应的描述文本中的所有句子按照第一预设规则进行拼接,得到上述描述文本对应的至少一个目标文本;上述目标文本包括至少一个上述句子;
第三计算单元,用于计算上述用户投诉文本与上述描述文本对应的每个目标文本之间的第二词重叠分数;上述第二词重叠分数用于表征上述用户投诉文本与上述描述文本对应的每个目标文本之间的相关性;
第二提取单元,用于从上述描述文本对应的上述至少一个目标文本中提取上述第二词重叠分数最高的M个目标文本;上述M为正整数;
第四计算单元,用于根据上述每个变更的描述文本对应的上述M个目标文本计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述第四计算单元具体用于:
计算上述每个变更对应的上述M个目标文本分别与上述用户投诉文本之间的M个文本相似度;
根据上述M个文本相似度中K个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;上述K为大于0,且小于或等于M的正整数。
在一种可能的实现方式中,上述第四计算单元在根据上述M个文本相似度中K个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于:
根据上述M个文本相似度中K个最高的上述文本相似度,以及上述K个最高的上述文本相似度对应的K个目标文本与上述用户投诉文本之间的K个第二词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述故障变更定位装置800还包括:
过滤模块,用于根据预设停用词词库按照第二预设规则对上述用户投诉文本以及上述每个变更对应的描述文本进行过滤,得到过滤后的用户投诉文本以及过滤后的每个变更对应的描述文本;
上述第一计算模块830具体用于:
计算上述过滤后的每个变更对应的描述文本与上述过滤后的用户投诉文本之间的文本相似度。
在一种可能的实现方式中,上述故障变更定位装置800还包括:
第三确定模块,用于确定在上述用户投诉文本的投诉时刻之前投诉的X个历史用户投诉文本;上述X为正整数;
第二计算模块,用于计算上述用户投诉文本与上述X个历史用户投诉文本中每个历史用户投诉文本之间的文本相似度;
拼接模块,用于若存在Y个历史用户投诉文本与上述用户投诉文本之间的文本相似度大于或等于第二预设阈值,则将上述Y个历史用户投诉文本与上述用户投诉文本按照第三预设规则进行拼接,得到目标投诉文本;上述Y为大于0,且小于或等于X的正整数;
上述第一计算模块830还用于,计算上述每个变更对应的描述文本与上述目标投诉文本之间的文本相似度;
上述第二确定模块840还用于,若存在变更对应的描述文本与上述目标投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本以及上述Y个历史用户投诉文本对应的故障变更。
上述故障变更定位装置中各模块的划分仅用于举例说明,在其他实施例中,可将故障变更定位装置按照需要划分为不同的模块,以完成上述故障变更定位装置的全部或部分功能。本说明书实施例中提供的故障变更定位装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时,实现本说明书实施例中所描述的故障变更定位方法的全部或部分步骤。
请参阅图9,图9为本说明书一示例性实施例提供的一种电子设备的结构示意图。如图9所示,该电子设备900可以包括:至少一个处理器910、至少一个通信总线920、用户接口930、至少一个网络接口940、存储器950。
其中,通信总线920可用于实现上述各个组件的连接通信。
其中,用户接口930可以包括显示屏(Display)和摄像头(Camera),可选用户接口还可以包括标准的有线接口、无线接口。
其中,网络接口940可选的可以包括蓝牙模块、近场通信(Near FieldCommunication,NFC)模块、无线保真(Wireless Fidelity,Wi-Fi)模块等。
其中,处理器910可以包括一个或者多个处理核心。处理器910利用各种接口和线路连接整个电子设备900内的各个部分,通过运行或执行存储在存储器950内的指令、程序、代码集或指令集,以及调用存储在存储器950内的数据,执行路由电子设备900的各种功能和处理数据。可选的,处理器910可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器910可集成处理器(Central Processing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示屏所需要显示的内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器910中,单独通过一块芯片进行实现。
其中,存储器950可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory,ROM)。可选的,该存储器950包括非瞬时性计算机可读介质。存储器950可用于存储指令、程序、代码、代码集或指令集。存储器950可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如获取功能、计算功能、确定功能等)、用于实现上述各个方法实施例的指令等;存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器950可选的还可以是至少一个位于远离前述处理器910的存储装置。如图9所示,作为一种计算机存储介质的存储器950中可以包括操作系统、网络通信模块、用户接口模块以及程序指令。
具体地,处理器910可以用于调用存储器950中存储的程序指令,并具体执行以下操作:
获取用户投诉文本。
基于上述用户投诉文本的投诉时刻,确定预设时间段内的变更集合。
获取上述变更集合中每个变更对应的描述文本。
计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
若存在变更对应的描述文本与上述用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本对应的故障变更。
在一些可能的实施例中,上述描述文本包括至少一个句子。
上述处理器910计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于执行:
计算上述用户投诉文本与上述每个变更对应的描述文本中的每个句子之间的第一词重叠分数;上述第一词重叠分数用于表征上述用户投诉文本与上述每个变更对应的描述文本中的每个句子之间的相关性。
从上述每个变更对应的描述文本中提取上述第一词重叠分数最高的N个句子;上述N为正整数。
根据上述每个变更对应的上述N个句子计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一些可能的实施例中,上述处理器910根据上述每个变更对应的上述N个句子计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于执行:
计算上述每个变更对应的上述N个句子分别与上述用户投诉文本之间的N个文本相似度。
根据上述N个文本相似度中L个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;上述L为大于0,且小于或等于N的正整数。
在一些可能的实施例中,上述处理器910根据上述N个文本相似度中L个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于执行:
根据上述N个文本相似度中L个最高的上述文本相似度,以及上述L个最高的上述文本相似度对应的L个句子与上述用户投诉文本之间的L个第一词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一些可能的实施例中,上述描述文本包括多个句子。
上述处理器910计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于执行:
将上述每个变更对应的描述文本中的所有句子按照第一预设规则进行拼接,得到上述描述文本对应的至少一个目标文本;上述目标文本包括至少一个上述句子。
计算上述用户投诉文本与上述描述文本对应的每个目标文本之间的第二词重叠分数;上述第二词重叠分数用于表征上述用户投诉文本与上述描述文本对应的每个目标文本之间的相关性。
从上述描述文本对应的上述至少一个目标文本中提取上述第二词重叠分数最高的M个目标文本;上述M为正整数。
根据上述每个变更的描述文本对应的上述M个目标文本计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一些可能的实施例中,上述处理器910根据上述每个变更的描述文本对应的上述M个目标文本计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于执行:
计算上述每个变更对应的上述M个目标文本分别与上述用户投诉文本之间的M个文本相似度。
根据上述M个文本相似度中K个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度;上述K为大于0,且小于或等于M的正整数。
在一些可能的实施例中,上述处理器910根据上述M个文本相似度中K个最高的上述文本相似度确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于执行:
根据上述M个文本相似度中K个最高的上述文本相似度,以及上述K个最高的上述文本相似度对应的K个目标文本与上述用户投诉文本之间的K个第二词重叠分数确定上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度。
在一些可能的实施例中,上述处理器910执行接收用户投诉文本之后,计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度之前,还用于执行:
根据预设停用词词库按照第二预设规则对上述用户投诉文本以及上述每个变更对应的描述文本进行过滤,得到过滤后的用户投诉文本以及过滤后的每个变更对应的描述文本。
上述处理器910计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于执行:
计算上述过滤后的每个变更对应的描述文本与上述过滤后的用户投诉文本之间的文本相似度。
在一些可能的实施例中,上述处理器910执行接收用户投诉文本之后,计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度之前,还用于执行:
确定在上述用户投诉文本的投诉时刻之前投诉的X个历史用户投诉文本;上述X为正整数。
计算上述用户投诉文本与上述X个历史用户投诉文本中每个历史用户投诉文本之间的文本相似度。
若存在Y个历史用户投诉文本与上述用户投诉文本之间的文本相似度大于或等于第二预设阈值,则将上述Y个历史用户投诉文本与上述用户投诉文本按照第三预设规则进行拼接,得到目标投诉文本;上述Y为大于0,且小于或等于X的正整数。
上述处理器910计算上述每个变更对应的描述文本与上述用户投诉文本之间的文本相似度时,具体用于执行:
计算上述每个变更对应的描述文本与上述目标投诉文本之间的文本相似度。
上述处理器910在执行若存在变更对应的描述文本与上述用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本对应的故障变更时,具体用于执行:
若存在变更对应的描述文本与上述目标投诉文本之间的文本相似度大于或等于第一预设阈值,则将上述变更确定为上述用户投诉文本以及上述Y个历史用户投诉文本对应的故障变更。
本说明书实施例还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机或处理器上运行时,使得计算机或处理器执行上述实施例中的一个或多个步骤。上述故障变更定位装置的各组成模块如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在上述计算机可读取存储介质中。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。上述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行上述计算机程序指令时,全部或部分地产生按照本说明书实施例上述的流程或功能。上述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。上述计算机指令可以存储在计算机可读存储介质中,或者通过上述计算机可读存储介质进行传输。上述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DigitalSubscriber Line,DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。上述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。上述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,数字多功能光盘(DigitalVersatile Disc,DVD))、或者半导体介质(例如,固态硬盘(Solid State Disk,SSD))等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关的硬件来完成,该程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可存储程序代码的介质。在不冲突的情况下,本实施例和实施方案中的技术特征可以任意组合。
以上所述的实施例仅仅是本说明书的优选实施例方式进行描述,并非对本说明书的范围进行限定,在不脱离本说明书的设计精神的前提下,本领域普通技术人员对本说明书的技术方案作出的各种变形及改进,均应落入权利要求书确定的保护范围内。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。

Claims (13)

1.一种故障变更定位方法,所述方法包括:
获取用户投诉文本;
基于所述用户投诉文本的投诉时刻,确定预设时间段内的变更集合;
获取所述变更集合中每个变更对应的描述文本;
计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度;
若存在变更对应的描述文本与所述用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将所述变更确定为所述用户投诉文本对应的故障变更。
2.如权利要求1所述的方法,所述描述文本包括至少一个句子;
所述计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度,包括:
计算所述用户投诉文本与所述每个变更对应的描述文本中的每个句子之间的第一词重叠分数;所述第一词重叠分数用于表征所述用户投诉文本与所述每个变更对应的描述文本中的每个句子之间的相关性;
从所述每个变更对应的描述文本中提取所述第一词重叠分数最高的N个句子;所述N为正整数;
根据所述每个变更对应的所述N个句子计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度。
3.如权利要求2所述的方法,所述根据所述每个变更对应的所述N个句子计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度,包括:
计算所述每个变更对应的所述N个句子分别与所述用户投诉文本之间的N个文本相似度;
根据所述N个文本相似度中L个最高的所述文本相似度确定所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度;所述L为大于0,且小于或等于N的正整数。
4.如权利要求3所述的方法,所述根据所述N个文本相似度中L个最高的所述文本相似度确定所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度,包括:
根据所述N个文本相似度中L个最高的所述文本相似度,以及所述L个最高的所述文本相似度对应的L个句子与所述用户投诉文本之间的L个第一词重叠分数确定所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度。
5.如权利要求1所述的方法,所述描述文本包括多个句子;
所述计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度,包括:
将所述每个变更对应的描述文本中的所有句子按照第一预设规则进行拼接,得到所述描述文本对应的至少一个目标文本;所述目标文本包括至少一个所述句子;
计算所述用户投诉文本与所述描述文本对应的每个目标文本之间的第二词重叠分数;所述第二词重叠分数用于表征所述用户投诉文本与所述描述文本对应的每个目标文本之间的相关性;
从所述描述文本对应的所述至少一个目标文本中提取所述第二词重叠分数最高的M个目标文本;所述M为正整数;
根据所述每个变更的描述文本对应的所述M个目标文本计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度。
6.如权利要求5所述的方法,所述根据所述每个变更的描述文本对应的所述M个目标文本计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度,包括:
计算所述每个变更对应的所述M个目标文本分别与所述用户投诉文本之间的M个文本相似度;
根据所述M个文本相似度中K个最高的所述文本相似度确定所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度;所述K为大于0,且小于或等于M的正整数。
7.如权利要求6所述的方法,所述根据所述M个文本相似度中K个最高的所述文本相似度确定所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度,包括:
根据所述M个文本相似度中K个最高的所述文本相似度,以及所述K个最高的所述文本相似度对应的K个目标文本与所述用户投诉文本之间的K个第二词重叠分数确定所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度。
8.如权利要求1所述的方法,所述接收用户投诉文本之后,所述计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度之前,所述方法还包括:
根据预设停用词词库按照第二预设规则对所述用户投诉文本以及所述每个变更对应的描述文本进行过滤,得到过滤后的用户投诉文本以及过滤后的每个变更对应的描述文本;
所述计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度,包括:
计算所述过滤后的每个变更对应的描述文本与所述过滤后的用户投诉文本之间的文本相似度。
9.如权利要求1所述的方法,所述接收用户投诉文本之后,所述计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度之前,所述方法还包括:
确定在所述用户投诉文本的投诉时刻之前投诉的X个历史用户投诉文本;所述X为正整数;
计算所述用户投诉文本与所述X个历史用户投诉文本中每个历史用户投诉文本之间的文本相似度;
若存在Y个历史用户投诉文本与所述用户投诉文本之间的文本相似度大于或等于第二预设阈值,则将所述Y个历史用户投诉文本与所述用户投诉文本按照第三预设规则进行拼接,得到目标投诉文本;所述Y为大于0,且小于或等于X的正整数;
所述计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度,包括:
计算所述每个变更对应的描述文本与所述目标投诉文本之间的文本相似度;
所述若存在变更对应的描述文本与所述用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将所述变更确定为所述用户投诉文本对应的故障变更,包括:
若存在变更对应的描述文本与所述目标投诉文本之间的文本相似度大于或等于第一预设阈值,则将所述变更确定为所述用户投诉文本以及所述Y个历史用户投诉文本对应的故障变更。
10.一种故障变更定位装置,所述装置包括:
获取模块,用于获取用户投诉文本;
第一确定模块,用于基于所述用户投诉文本的投诉时刻,确定预设时间段内的变更集合;
所述获取模块还用于,获取所述变更集合中每个变更对应的描述文本;
计算模块,用于计算所述每个变更对应的描述文本与所述用户投诉文本之间的文本相似度;
第二确定模块,用于若存在变更对应的描述文本与所述用户投诉文本之间的文本相似度大于或等于第一预设阈值,则将所述变更确定为所述用户投诉文本对应的故障变更。
11.一种电子设备,包括:处理器和存储器;
所述处理器与所述存储器相连;
所述存储器,用于存储可执行程序代码;
所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序,以用于执行如权利要求1-9任一项所述的方法。
12.一种计算机存储介质,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行如权利要求1-9任一项的方法步骤。
13.一种包含指令的计算机程序产品,当所述计算机程序产品在计算机或处理器上运行时,使得所述计算机或所述处理器执行如权利要求1-9任一项所述的故障变更定位方法。
CN202210377556.7A 2022-04-12 2022-04-12 故障变更定位方法、装置、设备、介质及程序产品 Pending CN114996391A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210377556.7A CN114996391A (zh) 2022-04-12 2022-04-12 故障变更定位方法、装置、设备、介质及程序产品
US18/298,987 US20230325300A1 (en) 2022-04-12 2023-04-11 Fault change locating method and apparatus, device, medium, and program product

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210377556.7A CN114996391A (zh) 2022-04-12 2022-04-12 故障变更定位方法、装置、设备、介质及程序产品

Publications (1)

Publication Number Publication Date
CN114996391A true CN114996391A (zh) 2022-09-02

Family

ID=83024045

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210377556.7A Pending CN114996391A (zh) 2022-04-12 2022-04-12 故障变更定位方法、装置、设备、介质及程序产品

Country Status (2)

Country Link
US (1) US20230325300A1 (zh)
CN (1) CN114996391A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012212228A (ja) * 2011-03-30 2012-11-01 Hitachi Solutions Ltd It障害検知・検索装置及びプログラム
US20130311479A1 (en) * 2012-05-21 2013-11-21 International Business Machines Corporation Determining a Cause of an Incident Based on Text Analytics of Documents
CN109902283A (zh) * 2018-05-03 2019-06-18 华为技术有限公司 一种信息输出方法及装置
CN113570380A (zh) * 2020-04-28 2021-10-29 中国移动通信集团浙江有限公司 基于语义分析的业务投诉处理方法、装置、设备及计算机可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012212228A (ja) * 2011-03-30 2012-11-01 Hitachi Solutions Ltd It障害検知・検索装置及びプログラム
US20130311479A1 (en) * 2012-05-21 2013-11-21 International Business Machines Corporation Determining a Cause of an Incident Based on Text Analytics of Documents
CN109902283A (zh) * 2018-05-03 2019-06-18 华为技术有限公司 一种信息输出方法及装置
CN113570380A (zh) * 2020-04-28 2021-10-29 中国移动通信集团浙江有限公司 基于语义分析的业务投诉处理方法、装置、设备及计算机可读存储介质

Also Published As

Publication number Publication date
US20230325300A1 (en) 2023-10-12

Similar Documents

Publication Publication Date Title
CN110197672B (zh) 一种语音通话质量检测方法、服务器、存储介质
US20230052906A1 (en) Entity Recognition Method and Apparatus, and Computer Program Product
US20190228315A1 (en) Auto-solution help desk advisor
CN112612664B (zh) 电子设备的测试方法、装置、电子设备和存储介质
CN115328756A (zh) 一种测试用例生成方法、装置及设备
US20220350690A1 (en) Training method and apparatus for fault recognition model, fault recognition method and apparatus, and electronic device
JP7375089B2 (ja) 音声応答速度確定方法、装置、コンピュータ読み取り可能な記憶媒体及びコンピュータプログラム
CN113656252B (zh) 故障定位方法、装置、电子设备以及存储介质
CN112329429A (zh) 文本相似度学习方法、装置、设备以及存储介质
US20230153550A1 (en) Machine Translation Method and Apparatus, Device and Storage Medium
CN114996391A (zh) 故障变更定位方法、装置、设备、介质及程序产品
CN114444514B (zh) 语义匹配模型训练、语义匹配方法及相关装置
CN115660083A (zh) 面向传输网故障的知识图谱的构建、问答方法及设备
CN114461665B (zh) 用于生成语句转换模型的方法、装置及计算机程序产品
JP2023012541A (ja) テーブルに基づく質問応答方法、装置及び電子機器
CN115221892A (zh) 工单数据处理方法及装置、存储介质及电子设备
CN115357493A (zh) 测试方法、装置、电子设备和存储介质
CN114297057A (zh) 一种自动化测试用例的设计及使用方法
JP2022095608A (ja) イベントライブラリ構築方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム
WO2023272833A1 (zh) 一种数据检测方法、装置、设备及可读存储介质
CN114462364B (zh) 录入信息的方法和装置
US20230196026A1 (en) Method for Evaluating Text Content, and Related Apparatus
CN114647631A (zh) 基于安全外壳协议终端的日志查询方法、装置和设备
US20220374603A1 (en) Method of determining location information, electronic device, and storage medium
CN117290143A (zh) 故障定位方法、系统、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination