CN110533288A - 业务办理流程检测方法、装置、计算机设备和存储介质 - Google Patents

业务办理流程检测方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN110533288A
CN110533288A CN201910667818.1A CN201910667818A CN110533288A CN 110533288 A CN110533288 A CN 110533288A CN 201910667818 A CN201910667818 A CN 201910667818A CN 110533288 A CN110533288 A CN 110533288A
Authority
CN
China
Prior art keywords
audio
business
keyword
image
result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201910667818.1A
Other languages
English (en)
Inventor
熊玮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201910667818.1A priority Critical patent/CN110533288A/zh
Publication of CN110533288A publication Critical patent/CN110533288A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • G06F16/735Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7834Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using audio features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G06F16/784Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content the detected or recognised objects being people
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0639Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06398Performance of employee with respect to a job function
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management

Abstract

业务办理流程检测方法、装置、计算机设备和存储介。本申请涉及数据分析领域,特别涉及一种服务质量检测方法、装置、计算机设备和存储介质。所述方法包括:接收携带有业务信息的视频文件,并从视频文件中提取人脸图像以及音频文件;根据业务信息从预设数据库中查询比对图像,并从预设数据库中查询预设的参考关键字;基于人脸图像与比对图像之间的相似度确定图像检测结果,并基于音频文件中包含的音频关键字与参考关键字的匹配结果,确定音频检测结果;获取业务检测模型,将图像检测结果与音频检测结果输入至业务检测模型中得到业务评分,业务评分用于表征业务办理流程的合规程度。采用本方法能够提高业务办理流程的检测准确性。

Description

业务办理流程检测方法、装置、计算机设备和存储介质
技术领域
本申请涉及计算机技术领域,特别是涉及一种业务办理流程检测方法、装置、计算机设备和存储介质。
背景技术
在办理不同的业务的企业中,为了保证业务办理合规,则需要对业务办理流程进行监控。
传统地,在对业务办理流程进行监控的过程中,往往是通过不同的用户进行评价得到相应的评价结果,而通过主观的评价得到最终的业务检测结果的真实性无法保证,,从而导致业务流程检测的准确性降低。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高检测准确性的业务流程检测方法、装置、计算机设备和存储介质。
一种服务质量评价方法,所述方法包括:
接收携带有业务信息的视频文件,并从所述视频文件中提取人脸图像以及音频文件;
根据所述业务信息从预设数据库中查询比对图像,并从所述预设数据库中查询预设的参考关键字;
基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,并基于所述音频文件中包含的音频关键字与所述参考关键字的匹配结果,确定音频检测结果;
获取业务检测模型,将所述图像检测结果与所述音频检测结果输入至所述业务检测模型中得到业务评分,所述业务评分用于表征业务办理流程的合规程度。
在一个实施例中,所述基于所述音频文件中包含的音频关键字与所述参考关键字的匹配结果,确定音频检测结果,包括:,包括:
将所述音频文件进行文字转换得到待检测文本;
从待检测文本中提取第一子音频关键字,并从所述参考关键字中获取与所述第一子音频关键字对应的跳转关键字,所述跳转关键字用于表征当前业务环节结束,跳转至下一业务环节的关键字;
将所述第一子音频关键字与所述跳转关键字进行匹配得到第一匹配结果,根据所述第一匹配结果得到音频评价结果。
在一个实施例中,将所述第一子音频关键字与所述跳转关键字进行匹配得到第一匹配结果,根据所述第一匹配结果得到音频评价结果之后,包括:
从所述待检测文本中提取第二子音频关键字,并从所述参考关键字中获取与所述第二子音频关键字对应的过滤关键字,所述过滤关键字用于表征业务环节中是否出现的敏感关键字;
将所述第二子音频关键字与所述过滤关键字进行匹配得到第二匹配结果,将所述第二匹配结果添加至所述音频检测结果中。
在一个实施例中,所述基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,包括:
从所述比对图像中获取与所述视频文件所对应关联图片,将所述关联图片与所述人脸图像进行比对;
当所述关联图片与所述人脸图像比对成功时,则查询与所述人脸图像关联的标准图像;
提取与所述标准图像对应的标准身份信息并获取与所述视频文件对应的待验证身份信息,将所述标准身份信息与所述待验证身份信息进行匹配得到身份信息匹配结果;
根据所述身份信息匹配结果得到图像检测结果。
在一个实施例中,所述获取业务检测模型,将所述图像检测结果与所述音频检测结果输入至所述业务检测模型中得到业务评分,所述业务评分用于表征业务办理流程的合规程度之后,包括:
当所述视频文件对应的业务检测结果为不通过时,则输出重新采集提示信息;
统计输出所述重新采集提示信息的次数,当所述采集次数超过预设值时,则对所述视频文件添加核查标签。
在一个实施例中,所述对所述视频文件添加核查标签之后,包括:
获取审核人员标识,根据所述审核人员标识查询待选取审核人员的审核任务量;
选取所述审核任务量低于阈值的待选取审核人员作为目标审核人员,提取目标审核人员关联的联系地址;
查询所述联系地址是否存储在权限数据库中,当所述联系地址存储在权限数据库中,则根据所述联系地址将所述待监控视频进行发送。
在一个实施例中,所述接收携带有业务信息的视频文件之前,包括:
接收采集终端发送的录制指令,所述录制指令上携带有操作人员身份标识;
根据所述操作人员身份标识对应的播报方式,将所述播报方式发送至所述采集终端;
接收到所述采集终端返回的与所述播报方式对应的确认指令,获取与所述确认指令对应的播报信息;
将所述播报信息发送至所述采集终端。
一种业务办理流程检测装置,所述装置包括:
接收模块,用于接收携带有业务信息的视频文件,并从所述视频文件中提取人脸图像以及音频文件;
识别模块,用于根据所述业务信息从预设数据库中查询比对图像,并从所述预设数据库中查询预设的参考关键字;
第一评价模块,用于基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,并基于所述音频文件中包含的音频关键字与所述参考关键字的匹配结果,确定音频检测结果;
第二评价模块,用于获取业务检测模型,将所述图像检测结果与所述音频检测结果输入至所述业务检测模型中得到业务评分,所述业务评分用于表征业务办理流程的合规程度。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
接收携带有业务信息的视频文件,并从所述视频文件中提取人脸图像以及音频文件;
根据所述业务信息从预设数据库中查询比对图像,并从所述预设数据库中查询预设的参考关键字;
基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,并基于所述音频文件中包含的音频关键字与所述参考关键字的匹配结果,确定音频检测结果;
获取业务检测模型,将所述图像检测结果与所述音频检测结果输入至所述业务检测模型中得到业务评分,所述业务评分用于表征业务办理流程的合规程度。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
接收携带有业务信息的视频文件,并从所述视频文件中提取人脸图像以及音频文件;
根据所述业务信息从预设数据库中查询比对图像,并从所述预设数据库中查询预设的参考关键字;
基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,并基于所述音频文件中包含的音频关键字与所述参考关键字的匹配结果,确定音频检测结果;
获取业务检测模型,将所述图像检测结果与所述音频检测结果输入至所述业务检测模型中得到业务评分,所述业务评分用于表征业务办理流程的合规程度。
上述业务办理流程检测方法、装置、计算机设备和存储介质,无需人工进行评价,从而将人工评价得到的评价结果作为业务流程检测,而是服务器通过接收到的视频文件,从视频文件中提取到人脸图像以及音频文件,从而可以根据对人脸图像以及音频文件的检测,得到业务评分,进而根据业务评分得到业务办理流程检测结果,可以提高对业务办理流程检测的准确性。
附图说明
图1为一个实施例中业务办理流程检测方法的应用场景图;
图2为一个实施例中业务办理流程检测方法的流程示意图;
图3为一个实施例中语音检测步骤的流程示意图;
图4为一个实施例中图像检测步骤的流程示意图;
图5为一个实施例中业务办理流程检测装置的结构框图;
图6为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的服务质量评价方法,可以应用于如图1所示的应用环境中。其中,采集终端102与服务器104通过网络进行通信。服务器104接收到采集终端102发送的携带有业务信息的视频文件,并提取视频文件中的人脸图像以及音频文件,服务器104根据业务信息从预设数据库中查询与人脸图像对应的比对图像并查询预设的参考关键字,服务器104基于人脸图像与比对图像之间的目标相似度确定图像检测结果并基于音频文件中包含的音频关键字与参考关键字的匹配结果,确定音频检测结果,服务器104获取到业务检测模型,将图像检测结果与音频检测结果输入至业务检测模型得到业务评分,并根据业务评分得到业务办理流程结果。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种业务办理流程检测方法,以该方法应用于图1中的服务器为例进行说明,包括以下步骤:
S202:接收携带有业务信息的视频文件,并从视频文件中提取人脸图像以及音频文件。
具体地,视频文件是指由采集终端采集到的在服务过程中的服务视频,视频文件可以是不同的服务环节所对应的视频,也可以是整个服务过程中对应的服务视频。业务信息是指所办理相关的业务的业务标识。人脸图像是指包含在视频文件中的不同的角色对应的人脸图像。音频文件是指包含在视频文件中的音频。
具体地,在不同的业务办理流程中,采集终端接收到对应的采集指令,采集终端将采集指令发送至服务器,服务器验证与采集指令对应的操作人员身份标识,服务器可以查询操作人员身份标识是否存储在操作权限库中,当服务器查询到操作人员身份标识存储在操作权限库中,则服务器向采集终端返回确认信息,采集终端接收到确认信息时,采集当前服务环节对应的服务视频作为视频文件,且该服务视频携带有业务信息,可以是,该服务视频携带有对应的业务标识,如相应的业务字段,如保险业务中的保险种类等,采集终端将视频文件发送至服务器,服务器接收到当前服务环节对应的视频文件时,则从视频文件中提取中到待检测图像,其中提取待检测图像可以是从视频文件中提取到每一帧图像,进而服务器分别从每一帧图像中检测到人脸图像,其中,服务器从每一帧图像中检测到人脸图像可以是将从视频文件中提取的每一帧图像输入至训练完成的人脸检测模型中,人脸检测模型可以识别每一帧图像中包含的人脸特征,从而人脸检测模型可以检测出对应的人脸区域,进而提取人脸区域作为人脸图像,进而服务器查询视频文件的起始时间与结束时间,根据起始时间与结束时间得到时间区间,从而根据该时间区间查询到包含在视频文件中的音频数据,将该音频数据作为音频文件,提取对应的音频文件可以是,服务器接收到视频文件,则查询到视频文件的起始时间以及视频文件的结束时间,从视频文件的起始时间开始提取音频数据,直至视频文件结束时停止提取音频数据,则将提取得到的音频数据作为音频文件。
S204:根据业务信息从预设数据库中查询比对图像,并从预设数据库中查询预设的参考关键字。。
具体地,比对图像是指服务器接收并且预存储在数据库中,用于验证人脸图像的相关图像,可以是,比对图像是服务器接收到的身份图像,可以是服务过程中的操作人员的身份标识所关联的预存储的图像,也即时标准图像,也可以是服务过程中用户的身份标识所关联的身份图像,如身份证图像,还可以是预存储经过验证的预存储的图像,可以是预存储的已验证通过的身份证关联图像等。目标相似度是指人脸图像与比对图像之间的相似程度。参考关键字是指预存储在服务器中的数据库里,用于检测音频文件中是否出现的关键字,该参考关键字可以是操作避免出现的敏感词汇,也可以是用户指示的进入下一服务环节的关键字。具体地,当用户首次办理业务时,服务器创建有数据库,进而将用户相关联的身份信息以及操作人员对应的身份信息均存储至数据库中,当服务器接收到视频文件,从视频文件中提取到人脸图像,进而服务器从预设数据库中获取到预存储的参考关键字。
S206:基于人脸图像与比对图像之间的相似度确定图像检测结果,并基于音频文件中包含的音频关键字与参考关键字的匹配结果,确定音频检测结果。
具体地,服务器可以确认人脸图像是否与预存储在数据库中的比对图像一致,从而可以确定人脸图像所对应的人员是否为可以信人员,并且识别是否在采集到的服务视频中是否更换不同的人员,也即是否在服务过程中更换不同的人员,且服务器可以确认音频关键字与预设的参考关键字之间的匹配结果,从而得到音频检测结果。
可以是,服务器接收到视频文件,从视频文件中提取到每一帧的人脸图像,服务器获取到预存储在数据库中的比对图像,服务器分别从每一帧的人脸图像中分别提取第一对比特征,进而从比对图像中提取到第二对比特征,将不同帧的人脸图像的第一对比特征与比对图像的第二对比特征进行比对得到不同的比对相似度,根据不同的比对相似度计算得到人脸图像以及标准图像的目标相似度,当目标相似度超过阈值时,则人脸图像对应的人员与待检测人员为同一人,其中服务器根据不同的比对相似度得到目标相似度可以是将不同的比对相似度的和求得平均值,将该平均值作为目标相似度,进而服务器获取到预设的图像得分范围,查询目标相似度所关联的图像得分范围,根据图像得分范围查询到图像得分,该图像得分作为图像检测结果。
进一步地,服务器将音频文件从视频文件中进行提取,进而将音频文件按照分词逻辑分成不同的音频序列,进而计算不同的音频序列的准确率,将准确率高的音频序列作为音频关键字,其中得到音频关键字可以是服务器将音频文件按照分词逻辑分成不同的音频序列,每个音频序列中包含有待查询关键词,服务器查询每个待查询预存储的每个待查询关键词对应的初级正确率,计算每个待查询关键词对应的初级正确率的乘积,将该乘积作为该音频序列的准确率,进而将准确率搞的音频序列作为音频关键字,服务器获取到预设的参考关键字,服务器将得到的音频关键字与预设的参考关键字进行匹配,根据匹配结果查询到对应的匹配范围,并查询匹配结果落入的匹配范围,进而服务器获取到匹配范围所关联的匹配得分作为音频关键字与参考关键字的匹配得分,进而将该匹配得分作为音频检测结果。需要说明的是,计算匹配的分还可以是采用打分模型,输入音频关键字与参考关键字,直接得到匹配得分,其中打分模型是指按照样本关键字与样本得分进行训练得到的模型,从而根据打分模型,当输入确定的音频关键字以及参考关键字,则可以得到确定的打分结果。
S208;获取业务检测模型,将图像检测结果与音频检测结果输入至业务检测模型中得到业务评分,业务评分用于表征业务办理流程的合规程度。
具体地,业务检测模型是指根据样本图像检测结果、样本音频检测结果以及样本得分进行训练得到的模型,从而当输入确定的图像检测得分以及音频检测得分时,则可以通过业务检测模型输出确定的业务评分,从而得到视频文件的检测结果。
具体地,服务器获取到业务检测模型,将得到的图像检测结果与音频检测结果输入至业务检测模型中,服务器通过业务检测模型得到业务评分,进而服务器查询到对应的业务评价范围,并查询业务评分对应的业务评价范围,将业务评价范围关联的检测结果作为本次业务办理流程对应的业务检测结果。
可以是,视频文件可以是业务办理流程中涉及的不同的业务环节所对应的视频,因此可以根据不同的视频文件对应的业务检测结果得到整个业务办理流程中的业务检测结果。服务器查询到不同的业务环节对应的视频文件,进而提取到不同的视频文件对应的业务检测结果,根据不同的业务检测结果得到整个业务办理流程中的业务质量检测结果。例如,服务器查询到不同的业务环节对应的视频文件,将不同业务环节中对应的视频文件得到的图像检测结果以及音频检测结果输入至业务检测模型中,从而得到不同业务环节中对应的视频文件的业务评分,根据不同的视频文件的业务评分得到业务评价结果,其中,服务器可以计算不同的业务环节的视频文件的业务评分的平均值作为整个业务过程中的业务评分,根据业务评分得到业务检测结果,从而将整体业务过程对应的业务检测结果进行输出,且服务器还可以将不同的视频文件对应的检测结果进行输出。另外,视频文件还可以是整个业务环节中的视频文件,从而可以直接根据整个业务办理流程中的视频文件,获取到整个业务办理流程中的图像检测结果以及音频检测结果,进而将图像检测结果与音频检测结果输入至业务检测模型中得到业务评分,并根据业务评分得到业务检测结果。
上述业务办理流程检测方法,并非是通过用户进行评价得到最终的业务检测结果,而是可以通过服务器对不同的视频文件中的图像和音频分别进行检测,从而根据得到的图像检测结果以及音频检测结果,生成视频文件检测结果,从而可以提高对业务办理流程检测的准确性,且在检测过程中,可以对图像和音频均进行检测,从而可以保证检测的全面性,提高业务办理流程检测的准确率。
在一个实施例中,可参见图3,提供一语音检测步骤的流程示意图,语音检测步骤,也即基于音频文件中包含的音频关键字与参考关键字的匹配结果,确定音频检测结果,包括:将音频文件进行文字转换得到待检测文本;从待检测文本中提取第一子音频关键字,并从参考关键字中获取与第一子音频关键字对应的跳转关键字,跳转关键字用于表征当前业务环节结束,跳转至下一业务环节的关键字;将第一子音频关键字与跳转关键字进行匹配得到第一匹配结果,根据第一匹配结果得到音频评价结果。
具体地,待检测文本是指将音频文件按照文字转换逻辑转换得到的文字。第一子音频关键字是指在服务过程中得到的不同人员的音频所对应的关键字,该第一子音频关键字可以是客户音频对应的音频关键字。跳转关键字是指可以跳转到下一业务环节的关键字。
具体地,当服务器得到音频文件时,则将音频文件进行识别得到将音频文件分为不同的音频,并可以对不同的音频添加音频标签,进而将添加了不同的音频标签的音频文件进行文字转换得到待检测文本,从而服务器根据添加的不同音频标签提取得到第一子文本,进而将第一子文本进行分词得到第一子音频关键字,进而服务器从参考关键字中获取到预存储的跳转关键字,进而服务器将第一子音频关键字与跳转关键字进行匹配,将第一子音频关键字与跳转关键字进行匹配,当匹配成功时,则可以进行下一业务环节,则待监控视频对应的音频评价结果为第一子音频评价通过,另外,当匹配不成功时,则不可进入下一业务环节。
可以是,服务过程中有两个角色,因此当服务器得到音频文件时,则先将音频文件输入至声纹识别模型中,根据声纹识别,将音频文件分为不同的音频,也即分为第一待监控子音频和第二待监控子音频,对第一待监控子音频添加第一音频标签,并对第二待监控子音频添加第二音频标签,进而服务器提取到添加了不同标签的音频文件的特征,根据提取得到的特征识别得到对应的语音文字,进而将语音文字输出得到待检测文本,该待检测文本上添加有第一音频标签与第二音频标签,根据添加的不同标签,提取得到第一子文本,可以是将第一音频标签对应的文本作为第一子文本,进而服务器将第一子文本进行分词得到第一子音频关键字,其中分词可以是根据第一子文本得到不同的第一子文本序列,从而查询不同的第一子文本序列中包含的关键词对应的关键词概率,根据关键词概率得到第一子文本序列的准确率,将准确率高的第一子文本序列作为第一子音频关键字,服务器从参考关键字中获取到预存储的跳转关键字,将第一子音频关键字与跳转关键字进行匹配,当匹配成功时,则表示同意该业务环节,则当前业务环节结束,进而可以跳转至下一业务环节,则待监控视频对应的音频评价结果为第一子音频评价通过。
例如,服务过程中有业务员角色和客户角色,当服务器得到音频文件时,则先将音频文件输入至声纹识别模型中进行声纹识别,进而将音频文件分为不同的音频,进而服务器可以将区分得到的不同音频添加有音频标签,如添加有业务员标签以及客户标签,进而将添加了不同标签的音频文件进行特征识别,从而对应得到语音文字,进而将语音文字输出得到携带有业务员标签以及客户标签的待检测文本,从待检测文本中将添加了客户标签的待检测文本进行提取作为第一子文本,进而服务器将第一子文本进行分词得到第一子音频关键字,进而获取到预存储的跳转关键字,跳转关键字可以为该环节操作的不同关键字,如可以、确认或者同意等正面词语,也可以是相应的中性词语等,将第一子音频关键字与跳转关键字进行匹配,当匹配成功时,则表示同意该业务环节,进而可以跳转至下一业务环节,则待监控视频对应的音频评价结果为第一子音频评价通过。
本实施例中,服务器可以从音频文件中提取到第一子音频关键字,进而服务器将第一子音频关键字与跳转关键字进行匹配得到第一匹配结果,根据第一匹配结果得到音频检测结果对音频进行检测简单易行。
在一个实施例中,可以继续参见图3,将第一子音频关键字与跳转关键字进行匹配得到第一匹配结果,根据第一匹配结果得到音频评价结果之后,包括:从待检测文本中提取第二子音频关键字,并从参考关键字中获取与第二子音频关键字对应的过滤关键字,过滤关键字用于表征业务环节中是否出现的敏感关键字;将第二子音频关键字与过滤关键字进行匹配得到第二匹配结果,将第二匹配结果添加至音频检测结果中。
具体地,第二子音频关键字是指在业务过程中得到的不同人员的音频所对应的关键字,该第二子音频关键字可以是业务人员音频对应的音频关键字。过滤关键字是指在业务过程中避免出现的敏感关键字。
具体地,服务器按照上述步骤对音频文件添加有不同的音频标签,进而将音频文件转化成待检测文本,根据音频标签从待检测文本中提取到第二子音频关键字,并从参考关键字中查询到服务器预存储的过滤关键字,将第二子音频关键字与过滤关键字进行匹配得到第二匹配结果,当第二匹配结果为匹配一致时,则当前包含有第二子音频关键字的待检测文字中出现了敏感词,则将该第二匹配结果添加至音频评价结果中,另外,当第二子音频关键字与过滤关键字匹配不成功时,则第二子音频关键字中未出现敏感词,也即在业务过程中业务人员操作合规。
可以是,业务过程中有两个角色,服务器得到音频文件时,则按照上述步骤得到待检测文本,服务器根据待检测文本上添加的不同标签,提取到第二子文本,可以是将第二音频标签对应的文本作为第二子文本,进而服务器将第二子文本进行分词得到第二子音频关键字,其中分词可以是根据第二子文本得到不同的第二子文本序列,查询不同的第二子文本序列中包含的关键词对应的关键词概率,进而根据关键词概率得到第二子文本序列的准确率,将准确率高的第二子文本序列作为第二子音频关键字,服务器从参考关键字中获取到预存储的过滤关键字,将第二子音频关键字与过滤关键字进行匹配,服务器获取到预存储的过滤关键字,将第二子音频关键字与过滤关键字进行匹配,当匹配成功时,则第二子音频关键字中包含有敏感词,从而在音频评价结果中添加第二子音频评价不通过。
例如,业务过程中有业务员角色和客户角色,当服务器得到音频文件时,则可以按照上述识别步骤区分得到添加有不同的音频标签的音频,如添加了业务员标签以及客户标签的音频,进而将添加了不同标签的音频文件进行特征识别得到语音文字,进而服务器将语音文字输出得到携带有不同标签的待检测文本,从待检测文本中将添加了业务员标签的待检测文本进行提取作为第二子文本,服务器将第二子文本进行分词得到第二子音频关键字,获取到预存储的过滤关键字,过滤关键字可以是在业务过程中业务人员避免出现的敏感词汇等,进而将第二子音频关键字与过滤关键字进行匹配,当匹配成功时,则表示业务过程中出现了敏感词汇,则第二子音频评价不通过,将该第二子音频不通过的第二匹配结果添加至音频评价结果中。
需要说明的是,当服务器得到第一子音频的评价结果和第二子音频的评价结果时,可以根据不同子音频的评价结果对应输出音频评价结果,也即当第一子音频的评价结果与第二子音频的评价结果均为评价通过时,则音频评价结果为通过,当任一项的评价结果为不通过时,则音频评价结果为不通过。
本实施例中,服务器可以对第二子音频关键字与过滤关键字进行匹配得到第二匹配结果,从而可以保证查询的全面性,且对不同的音频与不同种类的关键字进行匹配,避免对语音进行作假,提高业务检测的准确性。
在一个实施例中,可参见图4,提供一图像检测步骤的流程示意图,图像检测步骤,也即基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,包括:从比对图像中获取与所述视频文件所对应关联图片,将关联图片与人脸图像进行比对;当关联图片与人脸图像比对成功时,则查询与人脸图像关联的标准图像;提取与标准图像对应的标准身份信息并获取与所述视频文件对应的待验证身份信息,将标准身份信息与待验证身份信息进行匹配得到身份信息匹配结果;根据身份信息匹配结果得到图像检测结果。
具体地,待验证身份信息是指在服务过程中不同角色对应的身份信息,可以是不同角色对应的基本信息,如姓名、身份证号码等。关联图片是指与待验证身份信息所关联的图片,如身份证图片等。标准图像是指预存储的经过验证的图像,可以是预存储的已验证过的身份证关联图像等。标准身份信息是指预存储的经过验证的身份信息,可以是预存储的已验证过的身份证信息等。
具体地,采集终端在进行采集之前,则可以先采集对应的身份信息,可以是,采集待验证身份信息以及关联图片,并将采集到的待验证身份信息以及关联图片发送至服务器,服务器从采集终端获取到待验证身份信息以及关联图片时,则从关联图片以及人脸图像中提取对应的待识别特征,将待识别特征输入至人脸识别模型中计算相似度,进而通过人脸识别模型识别得到关联图片与人脸图像的相似度超过阈值时,则关联图片与人脸图像比对成功,进而则通过人脸图像查询到与存储的标准图像,查询方法可以是从不同的标准图像中提取与人脸图像对应的待识别特征,通过人脸识别模型得到标准图像,该标准图像即为预存储的通过验证的人脸图像,进而服务器提取到标准图像关联的标准身份信息,将待验证身份信息与标准身份信息进行匹配,进而得到身份信息匹配结果,当身份信息匹配结果为一致时,则服务器根据人脸图像与关联图片比对成功,以及身份信息验证通过的结果,得到图像检测结果为检测通过。
例如,采集终端在采集对应视频之前,则先采集到用户身份信息,如采集到用户身份证图片,例如采用客户身份证图片为例进行说明,将采集到的客户身份证图片发送至服务器,服务器从接收到客户身份证图片中提取到身份证号、姓名以及身份证图片,进而服务器将身份证图片与待监控视频中提取到的人脸图像进行比对,也即可以提取到身份证图片与人脸图像中的待识别特征,将待识别特征输入至人脸识别模型中,服务器通过人脸识别模型根据待识别特征输出身份证图片以及待识别人脸图像的相似度,当相似度超过阈值时,则人脸图像与身份证图片为相同的人,从而身份证图片与待检测人脸图片比对成功,也即关联图片与人脸图像比对成功,进而从预存储的不同的预存储的验证通过的人脸图像中提取到待识别特征,通过人脸识别模型输出与人脸图像的相似度超过阈值的预存储的验证通过的人脸图像,该预存储的且验证通过的人脸图像作为标准图像,进而提取标准图像关联的标准身份信息,如标准的身份证号码与标准的姓名,将该标准的身份号码与待验证身份信息对应的身份证号码进行比对,并将标准的姓名与待验证身份信息对应的姓名进行比对,当比对一致时,则身份信息匹配结果为匹配通过,因此,上述人脸图像验证通过,且身份信息匹配结果为匹配通过,则图像检测结果为检测通过。需要说明的是,当人脸图像验证不通过或者匹配结果为匹配不通过时,则图像检测结果为检测不通过。
本实施例中,在对人脸图像进行识别时,可以是对人脸图像进行识别,且可以根据人脸图像得到相应的标准图像,从而得到相应的标准身份信息,进而根据标准身份信息对待验证身份信息进行验证,从而保证验证的全面性,保证服务质量评价的全面性。
在一个实施例中,获取业务检测模型,将图像检测结果与音频检测结果输入至业务检测模型中得到业务评分,业务评分用于表征业务办理流程的合规程度之后,包括:当视频文件对应的业务检测结果为不通过时,则输出重新采集提示信息;统计输出重新采集提示信息的次数,当采集次数超过预设值时,则对视频文件添加核查标签。
具体地,核查标签是指添加在视频文件上的,需要进行进一步检测的标志。在服务过程中,可以对不同的业务环节均进行视频采集,因此可以对不同的业务环节对应的视频文件进行检测,且由于在一些业务过程中,当当前业务环节对应的视频文件检测为不通过时,则为了保证安全性,则需要重新对检测结果为不通过的视频文件进行采集,因此当服务器得到视频文件检测结果为不通过时,则输出重新采集提示信息,并将重新采集提示信息发送至采集终端,使得采集终端对视频文件进行重新采集,进而服务器接收到采集终端根据重新采集提示信息对当前服务器环节的视频进行重新采集得到更新视频,进而服务器接收到更新视频,对更新视频进行重新检测,当服务器发送重新采集提示信息时,则统计与视频文件对应的重新采集提示信息的次数,比对重新采集提示信息的次数与预设值,当重新采集提示信息的次数超过预设值时,则将视频文件添加核查标签。
另外,当服务器得到视频文件检测结果为不通过时,则输出重新采集提示信息,采集终端显示对应的重新采集信息时,接收到拒绝录制指令时,则将采集终端将拒绝录制指令发送至服务器,则可以直接对视频文件添加核查标签。
本实施例中,服务器对视频文件的服务检测结果为不通过时,则对视频文件进行重新采集,无需在服务结束后再进行统一检测时发现有检测不通过的视频文件整体过程再进行采集,从而可以提高整体业务效率,且服务器统计与视频文件对应的重新采集提示信息的次数,当采集次数超过预设值时,则对视频文件添加核查标签,可以进一步进行核查,提高审核质量。
在一个实施例中,对所述视频文件添加核查标签之后,包括:获取审核人员标识,根据所述审核人员标识查询待选取审核人员的审核任务量;选取审核任务量低于阈值的待选取审核人员作为目标审核人员,提取目标审核人员关联的联系地址;查询联系地址是否存储在权限数据库中,当联系地址存储在权限数据库中,则根据联系地址将待监控视频进行发送。
具体地,审核人员标识是指预存储的具有审核权限的审核人员的身份信息,审核人员标识可以是审核人员对应的基本信息或者详细信息等,例如,审核人员标识是审核人员工号、身份证号码或者姓名等。待选取审核人员是指具有审核权限的所有审核人员。目标审核人员是指服务器选定的最终审核视频文件的审核人员。权限数据库是指存储有相应的审核人员的身份信息的数据库,权限数据库中可以存储有相应的审核人员的审核人员标识以及通讯方式,如审核人员工号、身份证号码、姓名、电话或者邮箱等。
具体地,当服务器对视频文件添加核查标签,则需要将添加了核查标签的视频文件发送至审核人员进行审核,服务器获取到审核人员标识,根据审核人员标识查询到待选取审核人员,进而获取不同的选取审核人员关联的审核任务量,将审核任务量分别与阈值进行比较,选取审核任务量低于阈值的待选取审核人员作为目标审核人员,进而根据目标审核人员所对应的人员标识查询目标审核人员关联的联系地址,进而将关联的联系地址与权限数据库中存储的通讯方式进行匹配,当匹配成功时,则当前的目标审核人员具有审核权限,且未更换有联系方式,则添加了核查标签的视频文件进行发送使得目标审核人员对视频文件进行审核。
例如,服务器获取到审核人员标识,如获取到工号、身份证号码和姓名,则将根据工号、身份证号码和姓名查询到待选取审核人员,进而查询与待选取审核人员所关联的审核任务量,将审核任务量分别与阈值进行比较,选取审核任务量低于阈值的待选取审核人员作为目标审核人员,根据目标审核人员的通信地址,如邮箱地址,进而根据查询该目标审核人员所关联的邮箱地址是否存储在权限存储库中,当邮箱地址存储在权限存储库中,则将添加了核查标签的视频文件进行发送。
本实施例中,服务器可以将添加了核查标签的视频文件发送至有审核权限的审核人员进行进一步审查,保证服务质量评价的准确性,且可以保证服务质量评价过程中的安全性。
在一个实施例中,接收携带有业务信息的视频文件之前,包括:接收采集终端发送的录制指令,录制指令上携带有操作人员身份标识;根据操作人员身份标识对应的播报方式,将播报方式发送至采集终端;接收到采集终端返回的与播报方式对应的确认指令,获取与确认指令对应的播报信息;将播报信息发送至采集终端。
具体地,操作人员身份标识是指业务过程中业务人员的身份信息,可以是业务人员的姓名、工号或者身份证号码等。具体地,在业务过程中,不同的业务环节所需要播报预设的话术,而播报方式可以是人工播报,播报方式还可以是自动播报,也即服务器可以根据操作人员身份标识推荐相应的话术播报方式,并将推荐的播报方式发送至采集终端,操作人员通过采集终端进行选择,当选择确认该播报方式时,则服务器查询到当前业务环节,根据当前业务环节,将对应的播报信息发送至采集终端。可以是,当在业务开始时,业务人员在采集终端的界面上进行选择等操作,如点击开始录制按钮等,采集终端根据业务人员进行的操作生成录制指令,采集终端将录制指令发送至服务器,且录制指令上携带有业务人员的身份标识,如姓名、工号和身份证号码等,服务器接收到业务人员的身份标识时,则查询身份标识关联的业务人员的就职时间,当就职时间超过预设值时,则该业务人员可以熟练进行人工话术播报,则推荐业务过程中的话术的播报方式为人工播报,则将该人工播报的方式返回至采集终端,进而采集终端将该播报方式进行显示,业务人员确认该播报方式时,则生成相应的确认指令,采集终端将确认指令发送至服务器,服务器接收到确认指令时,则查询到人工播报时对应的文字信息作为播报信息,则将播报信息发送至采集终端;另外,当服务器根据业务人员的身份标识关联的业务人员的就职时间未超过预设值时,则可以先进行自动播报,也即可以通过采集终端播报录制完成的相应话术,从而提高服务效率,因此服务器推荐业务过程中的话术的播报方式为自动播报,则将该自动播报的方式返回至采集终端,采集终端将该播报方式进行显示,业务人员确认该播报方式时,则生成相应的确认指令,采集终端将确认指令发送至服务器,服务器接收到确认指令时,则查询到自动播报时对应的语音信息作为播报信息,则将语音信息发送至采集终端,可以通过采集终端自动播报相应的话术。
本实施例中,服务器可以根据操作人员身份标识向采集终端发送对应的播报方式,从而根据播报方式将播报信息发送至采集终端,提高业务的灵活性,且提高服务效率。
应该理解的是,虽然图2-4的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-4中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图5所示,提供了一种业务办理流程检测装置500,包括:接收模块510、识别模块520、提取模块530、第一评价模块540和第二评价模块550,其中:
接收模块510,用于接收携带有业务信息的视频文件,并从视频文件中提取人脸图像以及音频文件。
识别模块520,用于根据业务信息从预设数据库中查询比对图像,并从预设数据库中查询预设的参考关键字。
第一评价模块530,用于基于人脸图像与比对图像之间的相似度确定图像检测结果,并基于音频文件中包含的音频关键字与参考关键字的匹配结果,确定音频检测结果。
第二评价模块540,用于获取业务检测模型,将图像检测结果与音频检测结果输入至业务检测模型中得到业务评分,业务评分用于表征业务办理流程的合规程度。
在一个实施例中,第一评价模块530,包括:
转换单元,用于将音频文件进行文字转换得到待检测文本。
第一获取单元,用于从从参考关键字中待检测文本中提取第一子音频关键字,并获取与第一子音频关键字对应的跳转关键字,跳转关键字用于表征当前业务环节结束,跳转至下一业务环节的关键字。
第二生成单元,用于将第一子音频关键字与跳转关键字进行匹配得到第一匹配结果,根据第一匹配结果得到音频评价结果。
在一个实施例中,第一评价模块530,包括:
第二获取单元,用于从待检测文本中提取第二子音频关键字,并从参考关键字中获取与第二子音频关键字对应的过滤关键字,过滤关键字用于表征业务环节中是否出现的敏感关键字。
添加单元,用于将第二子音频关键字与过滤关键字进行匹配得到第二匹配结果,将第二匹配结果添加至音频检测结果中。
在一个实施例中,识别模块520,包括:
比对单元,用于从比对图像中获取与视频文件所对应关联图片,将关联图片与人脸图像进行比对。
查询单元,用于当关联图片与人脸图像比对成功时,则查询与人脸图像关联的标准图像。
匹配单元,用于提取与标准图像对应的标准身份信息并获取与视频文件对应的待验证身份信息,将标准身份信息与待验证身份信息进行匹配得到身份信息匹配结果。还用于根据身份信息匹配结果得到图像检测结果。
在一个实施例中,业务办理流程检测装置500,包括:
输出模块,用于当视频文件对应的服务检测结果为不通过时,则输出重新采集提示信息。
统计模块,用于统计输出重新采集提示信息的次数,当采集次数超过预设值时,则对视频文件添加核查标签。
在一个实施例中,业务办理流程检测装置500,包括:
任务量查询模块,用于获取审核人员标识,根据审核人员标识查询待选取审核人员的审核任务量。
选取模块,用于选取审核任务量低于阈值的待选取审核人员作为目标审核人员,提取目标审核人员关联的联系地址。
发送模块,用于查询联系地址是否存储在权限数据库中,当联系地址存储在权限数据库中,则根据联系地址将待监控视频进行发送。
在一个实施例中,业务办理流程检测装置500,包括:
采集指令接收模块,用于接收采集终端发送的录制指令,录制指令上携带有操作人员身份标识。
传输模块,用于根据操作人员身份标识对应的播报方式,将播报方式发送至采集终端。
信息获取模块,用于接收到采集终端返回的与播报方式对应的确认指令,获取与确认指令对应的播报信息。
信息发送模块,用于将播报信息发送至采集终端。
关于业务办理流程检测装置的具体限定可以参见上文中对于业务办理流程检测方法的限定,在此不再赘述。上述业务办理流程检测装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图6所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储服务质量评价数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种服务质量评价方法。
本领域技术人员可以理解,图6中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,该存储器存储有计算机程序,该处理器执行计算机程序时实现以下步骤:接收携带有业务信息的视频文件,并从视频文件中提取人脸图像以及音频文件。根据业务信息从预设数据库中查询比对图像,并从预设数据库中查询预设的参考关键字;基于人脸图像与比对图像之间的相似度确定图像检测结果,并基于音频文件中包含的音频关键字与参考关键字的匹配结果,确定音频检测结果;获取业务检测模型,将图像检测结果与音频检测结果输入至业务检测模型中得到业务评分,业务评分用于表征业务办理流程的合规程度。在一个实施例中,处理器执行计算机程序时实现基于.音频文件中包含的音频关键字与.参考关键字的匹配结果,确定音频检测结果,包括,包括:将音频文件进行文字转换得到待检测文本。从待检测文本中提取第一子音频关键字,并从参考关键字中获取与第一子音频关键字对应的跳转关键字,跳转关键字用于表征当前业务环节结束,跳转至下一业务环节的关键字。将第一子音频关键字与跳转关键字进行匹配得到第一匹配结果,根据第一匹配结果得到音频评价结果。
在一个实施例中,处理器执行计算机程序时实现将第一子音频关键字与跳转关键字进行匹配得到第一匹配结果,根据第一匹配结果得到音频评价结果之后,包括:从待检测文本中提取第二子音频关键字,并从参考关键字中获取与第二子音频关键字对应的过滤关键字,过滤关键字用于表征业务环节中是否出现的敏感关键字。将第二子音频关键字与过滤关键字进行匹配得到第二匹配结果,将第二匹配结果添加至音频检测结果中。
在一个实施例中,处理器执行计算机程序时实现基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,包括:从比对图像中获取与视频文件所对应的待验证身份信息以及关联图片,将关联图片与人脸图像进行比对。当关联图片与人脸图像比对成功时,则查询与人脸图像关联的标准图像。提取与标准图像对应的标准身份信息并获取与视频文件对应的待验证身份信息,将标准身份信息与待验证身份信息进行匹配得到身份信息匹配结果。根据身份信息匹配结果得到图像检测结果。
在一个实施例中,处理器执行计算机程序时实现获取业务检测模型,将.图像检测结果与.音频检测结果输入至.业务检测模型中得到业务评分,.业务评分用于表征业务办理流程的合规程度之后,包括:当视频文件对应的业务检测结果为不通过时,则输出重新采集提示信息。统计输出重新采集提示信息的次数,当采集次数超过预设值时,则对视频文件添加核查标签。
在一个实施例中,处理器执行计算机程序时实现对视频文件添加核查标签之后,包括:获取审核人员标识,根据审核人员标识查询待选取审核人员的审核任务量。选取审核任务量低于阈值的待选取审核人员作为目标审核人员,提取目标审核人员关联的联系地址。查询联系地址是否存储在权限数据库中,当联系地址存储在权限数据库中,则根据联系地址将待监控视频进行发送。
在一个实施例中,处理器执行计算机程序时实现接收携带有业务信息的视频文件之前,包括:接收采集终端发送的录制指令,录制指令上携带有操作人员身份标识。根据操作人员身份标识对应的播报方式,将播报方式发送至采集终端。接收到采集终端返回的与播报方式对应的确认指令,获取与确认指令对应的播报信息。将播报信息发送至采集终端。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:接收携带有业务信息的视频文件,并从视频文件中提取人脸图像以及音频文件。根据.业务信息从预设数据库中查询比对图像,并从.预设数据库中查询预设的参考关键字;基于.人脸图像与.比对图像之间的相似度确定图像检测结果,并基于.音频文件中包含的音频关键字与.参考关键字的匹配结果,确定音频检测结果;获取业务检测模型,将.图像检测结果与.音频检测结果输入至.业务检测模型中得到业务评分,.业务评分用于表征业务办理流程的合规程度。
在一个实施例中,计算机程序被处理器执行时实现基于音频文件中包含的音频关键字与参考关键字的匹配结果,确定音频检测结果,包括::将音频文件进行文字转换得到待检测文本。从待检测文本中提取第一子音频关键字,并从参考关键字中获取与第一子音频关键字对应的跳转关键字,跳转关键字用于表征当前业务环节结束,跳转至下一业务环节的关键字。将第一子音频关键字与跳转关键字进行匹配得到第一匹配结果,根据第一匹配结果得到音频评价结果。
在一个实施例中,计算机程序被处理器执行时实现将第一子音频关键字与跳转关键字进行匹配得到第一匹配结果,根据第一匹配结果得到音频评价结果之后,包括:从待检测文本中提取第二子音频关键字,并从参考关键字中获取与第二子音频关键字对应的过滤关键字,过滤关键字用于表征业务环节中是否出现的敏感关键字。将第二子音频关键字与过滤关键字进行匹配得到第二匹配结果,将第二匹配结果添加至音频检测结果中在一个实施例中,计算机程序被处理器执行时实现基于人脸图像与比对图像之间的相似度确定图像检测结果,包括:从比对图像中获取与视频文件所对应关联图片,将关联图片与人脸图像进行比对。当关联图片与人脸图像比对成功时,则查询与人脸图像关联的标准图像。提取与标准图像对应的标准身份信息并获取与视频文件对应的待验证身份信息,将标准身份信息与待验证身份信息进行匹配得到身份信息匹配结果。根据身份信息匹配结果得到图像检测结果。
在一个实施例中,计算机程序被处理器执行时实现获取业务检测模型,将图像检测结果与音频检测结果输入至业务检测模型中得到业务评分,业务评分用于表征业务办理流程的合规程度之后,包括:当视频文件对应的服务检测结果为不通过时,则输出重新采集提示信息。统计输出重新采集提示信息的次数,当采集次数超过预设值时,则对视频文件添加核查标签。
在一个实施例中,计算机程序被处理器执行时实现对视频文件添加核查标签之后,包括:获取审核人员标识,根据审核人员标识查询待选取审核人员的审核任务量。选取审核任务量低于阈值的待选取审核人员作为目标审核人员,提取目标审核人员关联的联系地址。查询联系地址是否存储在权限数据库中,当联系地址存储在权限数据库中,则根据联系地址将待监控视频进行发送。
在一个实施例中,计算机程序被处理器执行时实现接收携带有业务信息的视频文件之前,包括:接收采集终端发送的录制指令,录制指令上携带有操作人员身份标识。根据操作人员身份标识对应的播报方式,将播报方式发送至采集终端。接收到采集终端返回的与播报方式对应的确认指令,获取与确认指令对应的播报信息。将播报信息发送至采集终端。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种业务办理流程检测方法,所述方法包括:
接收携带有业务信息的视频文件,并从所述视频文件中提取人脸图像以及音频文件;
根据所述业务信息从预设数据库中查询比对图像,并从所述预设数据库中查询预设的参考关键字;
基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,并基于所述音频文件中包含的音频关键字与所述参考关键字的匹配结果,确定音频检测结果;
获取业务检测模型,将所述图像检测结果与所述音频检测结果输入至所述业务检测模型中得到业务评分,所述业务评分用于表征业务办理流程的合规程度。
2.根据权利要求1所述的方法,其特征在于,所述基于所述音频文件中包含的音频关键字与所述参考关键字的匹配结果,确定音频检测结果,包括:
将所述音频文件进行文字转换得到待检测文本;
从待检测文本中提取第一子音频关键字,并从所述参考关键字中获取与所述第一子音频关键字对应的跳转关键字,所述跳转关键字用于表征当前业务环节结束,跳转至下一业务环节的关键字;
将所述第一子音频关键字与所述跳转关键字进行匹配得到第一匹配结果,根据所述第一匹配结果得到音频评价结果。
3.根据权利要求2所述的方法,其特征在于,所述将所述第一子音频关键字与所述跳转关键字进行匹配得到第一匹配结果,根据所述第一匹配结果得到音频评价结果之后,包括:
从所述待检测文本中提取第二子音频关键字,并从所述参考关键字中获取与所述第二子音频关键字对应的过滤关键字,所述过滤关键字用于表征业务环节中是否出现的敏感关键字;
将所述第二子音频关键字与所述过滤关键字进行匹配得到第二匹配结果,将所述第二匹配结果添加至所述音频检测结果中。
4.根据权利要求1所述的方法,其特征在于,所述基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,包括:
从所述比对图像中获取与所述视频文件所对应关联图片,将所述关联图片与所述人脸图像进行比对;
当所述关联图片与所述人脸图像比对成功时,则查询与所述人脸图像关联的标准图像;
提取与所述标准图像对应的标准身份信息并获取与所述视频文件对应的待验证身份信息,将所述标准身份信息与所述待验证身份信息进行匹配得到身份信息匹配结果;
根据所述身份信息匹配结果得到图像检测结果。
5.根据权利要求1所述的方法,其特征在于,所述获取业务检测模型,将所述图像检测结果与所述音频检测结果输入至所述业务检测模型中得到业务评分,所述业务评分用于表征业务办理流程的合规程度之后,包括:
当所述视频文件对应的业务检测结果为不通过时,则输出重新采集提示信息;
统计输出所述重新采集提示信息的次数,当所述采集次数超过预设值时,则对所述视频文件添加核查标签。
6.根据权利要求5所述的方法,其特征在于,所述对所述视频文件添加核查标签之后,包括:
获取审核人员标识,根据所述审核人员标识查询待选取审核人员的审核任务量;
选取所述审核任务量低于阈值的待选取审核人员作为目标审核人员,提取目标审核人员关联的联系地址;
查询所述联系地址是否存储在权限数据库中,当所述联系地址存储在权限数据库中,则根据所述联系地址将所述待监控视频进行发送。
7.根据权利要求1至6任一项所述的方法,其特征在于,所述接收携带有业务信息的视频文件之前,包括:
接收采集终端发送的录制指令,所述录制指令上携带有操作人员身份标识;
根据所述操作人员身份标识对应的播报方式,将所述播报方式发送至所述采集终端;
接收到所述采集终端返回的与所述播报方式对应的确认指令,获取与所述确认指令对应的播报信息;
将所述播报信息发送至所述采集终端。
8.一种业务办理流程检测装置,其特征在于,所述装置包括:
接收模块,用于接收携带有业务信息的视频文件,并从所述视频文件中提取人脸图像以及音频文件;
识别模块,用于根据所述业务信息从预设数据库中查询比对图像,并从所述预设数据库中查询预设的参考关键字;;
第一评价模块,用于基于所述人脸图像与所述比对图像之间的相似度确定图像检测结果,并基于所述音频文件中包含的音频关键字与所述参考关键字的匹配结果,确定音频检测结果;
第二评价模块,用于获取业务检测模型,将所述图像检测结果与所述音频检测结果输入至所述业务检测模型中得到业务评分,所述业务评分用于表征业务办理流程的合规程度。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN201910667818.1A 2019-07-23 2019-07-23 业务办理流程检测方法、装置、计算机设备和存储介质 Withdrawn CN110533288A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910667818.1A CN110533288A (zh) 2019-07-23 2019-07-23 业务办理流程检测方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910667818.1A CN110533288A (zh) 2019-07-23 2019-07-23 业务办理流程检测方法、装置、计算机设备和存储介质

Publications (1)

Publication Number Publication Date
CN110533288A true CN110533288A (zh) 2019-12-03

Family

ID=68661793

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910667818.1A Withdrawn CN110533288A (zh) 2019-07-23 2019-07-23 业务办理流程检测方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN110533288A (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110968765A (zh) * 2019-12-04 2020-04-07 掌阅科技股份有限公司 书籍搜索方法、计算设备及计算机存储介质
CN111368737A (zh) * 2020-03-04 2020-07-03 开放智能机器(上海)有限公司 一种自动分析员工工作行为的系统及方法
CN111681673A (zh) * 2020-05-27 2020-09-18 北京华夏电通科技有限公司 庭审过程中敲法槌的识别方法及系统
CN111885375A (zh) * 2020-07-15 2020-11-03 中国工商银行股份有限公司 双录视频的检验方法、装置、服务器及系统
CN112148907A (zh) * 2020-10-23 2020-12-29 北京百度网讯科技有限公司 图像数据库的更新方法、装置、电子设备和介质
CN112348462A (zh) * 2020-10-29 2021-02-09 岭东核电有限公司 工序处理方法、装置、计算机设备和存储介质
CN112348667A (zh) * 2020-10-30 2021-02-09 广州佰锐网络科技有限公司 一种基于虚拟客服的智能开户方法及装置
CN112927033A (zh) * 2021-01-27 2021-06-08 上海商汤智能科技有限公司 数据处理方法及装置、电子设备和存储介质
CN112966932A (zh) * 2021-03-04 2021-06-15 上海明略人工智能(集团)有限公司 导游服务质量评价方法及系统
CN113076533A (zh) * 2020-01-03 2021-07-06 中国移动通信集团广东有限公司 一种业务处理方法及装置
CN113344550A (zh) * 2021-06-30 2021-09-03 西安力传智能技术有限公司 一种流程处理方法、装置、设备及存储介质
CN113888339A (zh) * 2021-10-09 2022-01-04 阳光人寿保险股份有限公司 一种风险事件的核查方法、装置、设备及存储介质
CN114677634A (zh) * 2022-05-30 2022-06-28 成都新希望金融信息有限公司 面签识别方法、装置、电子设备及存储介质
CN115250375A (zh) * 2021-04-26 2022-10-28 北京中关村科金技术有限公司 一种基于固定话术的音视频内容合规性检测方法及装置
CN115526605A (zh) * 2022-10-21 2022-12-27 金恒智控管理咨询集团股份有限公司 基于企业内部控制管理的审批方法及系统
CN115883874A (zh) * 2022-01-27 2023-03-31 北京中关村科金技术有限公司 一种基于文件的合规业务检测方法及装置

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110968765B (zh) * 2019-12-04 2020-09-22 掌阅科技股份有限公司 书籍搜索方法、计算设备及计算机存储介质
CN110968765A (zh) * 2019-12-04 2020-04-07 掌阅科技股份有限公司 书籍搜索方法、计算设备及计算机存储介质
CN113076533A (zh) * 2020-01-03 2021-07-06 中国移动通信集团广东有限公司 一种业务处理方法及装置
CN113076533B (zh) * 2020-01-03 2023-09-05 中国移动通信集团广东有限公司 一种业务处理方法及装置
CN111368737A (zh) * 2020-03-04 2020-07-03 开放智能机器(上海)有限公司 一种自动分析员工工作行为的系统及方法
CN111681673A (zh) * 2020-05-27 2020-09-18 北京华夏电通科技有限公司 庭审过程中敲法槌的识别方法及系统
CN111681673B (zh) * 2020-05-27 2023-06-20 北京华夏电通科技股份有限公司 庭审过程中敲法槌的识别方法及系统
CN111885375A (zh) * 2020-07-15 2020-11-03 中国工商银行股份有限公司 双录视频的检验方法、装置、服务器及系统
CN112148907A (zh) * 2020-10-23 2020-12-29 北京百度网讯科技有限公司 图像数据库的更新方法、装置、电子设备和介质
CN112348462A (zh) * 2020-10-29 2021-02-09 岭东核电有限公司 工序处理方法、装置、计算机设备和存储介质
CN112348667A (zh) * 2020-10-30 2021-02-09 广州佰锐网络科技有限公司 一种基于虚拟客服的智能开户方法及装置
CN112927033A (zh) * 2021-01-27 2021-06-08 上海商汤智能科技有限公司 数据处理方法及装置、电子设备和存储介质
CN112966932A (zh) * 2021-03-04 2021-06-15 上海明略人工智能(集团)有限公司 导游服务质量评价方法及系统
CN115250375B (zh) * 2021-04-26 2024-01-26 北京中关村科金技术有限公司 一种基于固定话术的音视频内容合规性检测方法及装置
CN115250375A (zh) * 2021-04-26 2022-10-28 北京中关村科金技术有限公司 一种基于固定话术的音视频内容合规性检测方法及装置
CN113344550B (zh) * 2021-06-30 2023-11-28 西安力传智能技术有限公司 一种流程处理方法、装置、设备及存储介质
CN113344550A (zh) * 2021-06-30 2021-09-03 西安力传智能技术有限公司 一种流程处理方法、装置、设备及存储介质
CN113888339A (zh) * 2021-10-09 2022-01-04 阳光人寿保险股份有限公司 一种风险事件的核查方法、装置、设备及存储介质
CN113888339B (zh) * 2021-10-09 2024-01-19 阳光人寿保险股份有限公司 一种风险事件的核查方法、装置、设备及存储介质
CN115883874A (zh) * 2022-01-27 2023-03-31 北京中关村科金技术有限公司 一种基于文件的合规业务检测方法及装置
CN114677634A (zh) * 2022-05-30 2022-06-28 成都新希望金融信息有限公司 面签识别方法、装置、电子设备及存储介质
CN114677634B (zh) * 2022-05-30 2022-09-27 成都新希望金融信息有限公司 面签识别方法、装置、电子设备及存储介质
CN115526605A (zh) * 2022-10-21 2022-12-27 金恒智控管理咨询集团股份有限公司 基于企业内部控制管理的审批方法及系统
CN115526605B (zh) * 2022-10-21 2024-03-08 金恒智控管理咨询集团股份有限公司 基于企业内部控制管理的审批方法及系统

Similar Documents

Publication Publication Date Title
CN110533288A (zh) 业务办理流程检测方法、装置、计算机设备和存储介质
US10685657B2 (en) Biometrics platform
CN110147726B (zh) 业务质检方法和装置、存储介质及电子装置
US10593334B2 (en) Method and apparatus for generating voiceprint information comprised of reference pieces each used for authentication
WO2020140665A1 (zh) 双录视频质量检测方法、装置、计算机设备和存储介质
US9697836B1 (en) Authentication of users of self service channels
US8078463B2 (en) Method and apparatus for speaker spotting
US8577684B2 (en) Selective security masking within recorded speech utilizing speech recognition techniques
CN109325742A (zh) 业务审批方法、装置、计算机设备及存储介质
US8219404B2 (en) Method and apparatus for recognizing a speaker in lawful interception systems
CN110364183A (zh) 语音质检的方法、装置、计算机设备和存储介质
CN109766474A (zh) 审讯信息审核方法、装置、计算机设备和存储介质
CN109036435A (zh) 基于声纹信息的身份认证及识别方法
CN107346568A (zh) 一种门禁系统的认证方法和装置
CN112788269B (zh) 视频处理方法、装置、服务器及存储介质
CN111160928A (zh) 一种验证身份的方法及装置
CN109711301A (zh) 驾驶人员审核方法、装置、计算机设备和存储介质
CN110598008A (zh) 录制数据的数据质检方法及装置、存储介质
CN110378587A (zh) 智能质检方法、系统、介质以及设备
CN106782567A (zh) 建立声纹模型的方法和装置
CN111833068A (zh) 基于声纹识别的身份核验系统及方法
US11705134B2 (en) Graph-based approach for voice authentication
CN115866290A (zh) 视频打点方法、装置、设备及存储介质
KR20180073226A (ko) 상담 이력 요약 시스템, 방법 및 컴퓨터 판독 가능한 기록매체
CN113365100A (zh) 视频处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20191203