CN107862598A - 远程面谈审批方法、服务器及可读存储介质 - Google Patents
远程面谈审批方法、服务器及可读存储介质 Download PDFInfo
- Publication number
- CN107862598A CN107862598A CN201710932605.8A CN201710932605A CN107862598A CN 107862598 A CN107862598 A CN 107862598A CN 201710932605 A CN201710932605 A CN 201710932605A CN 107862598 A CN107862598 A CN 107862598A
- Authority
- CN
- China
- Prior art keywords
- micro
- expression
- interview
- examination
- approval
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/03—Credit; Loans; Processing thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/176—Dynamic expression
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Development Economics (AREA)
- Technology Law (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明公开了一种远程面谈审批方法、服务器和可读存储介质，所述远程面谈审批方法包括：接收贷款申请端上传的面谈视频帧；每间隔预设时长对该预设时长内的面谈视频帧中面谈者的微表情进行分析，获取各预设时长内面谈者的微表情分析信息；将面谈视频帧与该面谈视频帧对应预设时长内的微表情分析信息，在审批端同步显示。本发明降低了贷款审批风险，同时，微表情分析信息辅助审批人员对面谈者谈话真伪进行辨别，降低了贷款金融系统的人工审批对审批员经验要求。
Description
技术领域
本发明涉及金融服务系统技术领域，尤其涉及一种远程面谈审批方法、服务器及可读存储介质。
背景技术
随着通信技术和软件系统开发的发展，软件系统逐渐应用于金融领域，特别是在贷款金融领域得到了较为广泛的应用。常见的贷款金融系统(如信贷系统)实现对贷款填单流程、签约流程、审批流程、放款流程进行电子化和自动化，在审批流程中引入了远程视频面谈的人工面谈审核关节，主要是通过视频提问一些相关信息，判断面谈客户(即面谈者)是否有逾期还款或不还款的风险。但是，如何面谈客户存心欺瞒，对于经验相对不足的审批员很难识别出来，高风险面谈客户被审批通过了后续会造成较大经济损失，即现有的贷款金融系统的人工审批对审批员经验要求高、审批风险高的技术问题。
发明内容
本发明的主要目的在于提供一种远程面谈审批方法、服务器及可读存储介质，旨在解决贷款金融系统的人工审批对审批员经验要求高、审批风险高的技术问题。
为实现上述目的，本发明实施例提供一种远程面谈审批方法，所述远程面谈审批方法包括：
接收贷款申请端上传的面谈视频帧；
每间隔预设时长对该预设时长内的面谈视频帧中面谈者的微表情进行分析，获取各预设时长内面谈者的微表情分析信息；
将面谈视频帧与该面谈视频帧对应预设时长内的微表情分析信息，在审批端同步显示。
优选地，所述获取各预设时长内面谈者的微表情分析信息的步骤包括：
识别每间隔预设时长内面谈视频帧中面谈者的微表情情绪和各微表情情绪的出现次数；
根据所述微表情情绪和各微表情情绪的出现次数，确定各预设时长内面谈者的综合情绪信息；
将出现次数最多的微表情作为对应预设时长内的高频情绪；
将所述综合情绪信息和高频情绪作为微表情分析信息。
优选地，所述将所述综合情绪信息和高频情绪作为微表情分析信息的步骤包括：
将基于预设参考表情库匹配评分最高的微表情情绪，作为对应预设时长内的标志情绪；
将所述综合情绪信息、高频情绪和标志情绪，共同作为微表情分析信息。
优选地，所述识别每间隔预设时长内面谈视频帧中面谈者的微表情情绪和各微表情情绪的出现次数的步骤包括：
每间隔预设时长内面谈视频帧中面谈者的各预设面部区域的肌肉变化图像，并根据所述肌肉变化图像在预设面部行为编码系统中查询各预设面部区域对应的特征编码值；
将各预设面部区域的位置信息和特征编码值组成表情特征组，并根据各表情特征组中的位置信息在预设参考表情库中确定对应的面部表情子库，再根据表情特征组中的特征编码在该面部表情子库中确定对应的微表情；
根据面谈者个预设面部区域的微表情，得到面谈者在此预设时长内的微表情情绪，统计各微表情情绪在各预设时长内的出现次数。
优选地，所述根据所述微表情情绪和各微表情情绪的出现次数，确定各预设时长内面谈者的综合情绪信息的步骤包括：
根据所述微表情情绪和预设情绪分析库，获取微表情情绪对应的心理学释义；
根据各微表情情绪的出现次数，为各微表情情绪对应的心理学释义分配权重；
根据微表情情绪对应的心理学释义和对应权重，确定各预设时长内面谈者的综合情绪信息。
优选地，所述将面谈视频帧与该面谈视频帧对应预设时长内的微表情分析信息，在审批端同步显示的步骤包括：
生成微表情面谈界面，并将微表情面谈界面发送至审批端显示，其中微表情面谈界面包括视频框和微表情框；
将面谈视频帧逐个在所述视频框中显示，将与视频框中显示面谈视频帧处于同一预设时长的微表情分析信息在所述微表情框中显示。
优选地，所述生成微表情面谈界面的步骤之后还包括：
当接收到审批端发送的操作请求时，在微表情面谈界面中生成控台框，所述控台框包括一个或多个虚拟按键。
优选地，在所述接将与视频框中显示面谈视频帧处于同一预设时长的微表情分析信息在所述微表情框中显示的步骤之后还包括：
根据所述微表情分析信息，生成用于提示审批人员的提示问题，并将所述提示问题在微表情面谈界面中显示。
本发明还提供一种服务器，所述服务器包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的远程面谈审批程序，所述远程面谈审批程序被所述处理器执行时实现如上述的远程面谈审批方法的步骤。
本发明还提供一种可读存储介质，所述可读存储介质上存储有远程面谈审批程序，所述远程面谈审批程序被处理器执行时实现如上述的远程面谈审批方法的步骤。
本发明通过接收贷款申请端上传的面谈视频帧，再每间隔预设时长对该预设时长内的面谈视频帧中面谈者的微表情进行分析，获取各预设时长内面谈者的微表情分析信息；并将面谈视频帧与该面谈视频帧对应预设时长内的微表情分析信息，在审批端同步显示，实现在审核人员与面谈者进行远程视频面谈过程中，可对面谈者的微表情机械能实时手机，识别采集的微表情的类型和统计微表情出现的次数，并基于微表情的类型和次数实时分析和展示面谈者的微表情分析信息，从而审批人员可根据展示的微表情分析信息并结合买年套的提问，对面谈者的风险进行综合判断，降低了贷款审批风险，同时，微表情分析信息辅助审批人员对面谈者谈话真伪进行辨别，降低了贷款金融系统的人工审批对审批员经验要求。
附图说明
图1为实现本发明各个实施例一个可选的服务器的硬件结构示意图；
图2为本发明远程面谈审批方法一实施例的流程示意图；
图3为图2中步骤S20一实施例的细化流程示意图；
图4为图2中步骤S30一实施例的细化流程示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身没有特定的意义。因此，“模块”、“部件”或“单元”可以混合地使用。
用户端(如贷款申请端)实质为终端设备，终端可以以各种形式来实施。例如，本发明中描述的用户端可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant，PDA)等移动终端，以及诸如数字TV、台式计算机等固定终端。
如图1所示，本发明服务器可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地，服务器还可以包括摄像头、RF(Radio Frequency，射频)电路，传感器、音频电路、WiFi模块等等。其中，传感器比如光传感器、运动传感器以及其他传感器。
本领域技术人员可以理解，图1中示出的服务器结构并不构成对服务器的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及远程面谈审批程序。
在图1所示的服务器中，网络接口1004主要用于连接上级服务器和数据库，与上级服务器和数据库进行数据通信；用户接口1003主要用于连接客户端(用户端)，与客户端进行数据通信；而处理器1001可以用于调用存储器1005中存储的远程面谈审批程序，并执行以下操作：
接收贷款申请端上传的面谈视频帧；
每间隔预设时长对该预设时长内的面谈视频帧中面谈者的微表情进行分析，获取各预设时长内面谈者的微表情分析信息；
将面谈视频帧与该面谈视频帧对应预设时长内的微表情分析信息，在审批端同步显示。
此外，处理器1001可以用于调用存储器1005中存储的远程面谈审批程序，并执行上述远程面谈审批方法各实施例步骤。
本发明还提供一种远程面谈审批方法，该远程面谈审批主要应用于服务器的贷款金融系统上，在远程面谈审批方法一实施例中，参照图2，远程面谈审批方法包括：
步骤S10，接收贷款申请端上传的面谈视频帧；
贷款申请端(用户端)一般设置在贷款门店中(如手机店、电器商场中外驻的电脑)，当具有贷款需求的客户进入贷款门店与现场销售代表沟通后，销售代表进入门店的贷款申请端登录贷款金融系统，从而贷款申请端向服务器发送贷款请求，在发送贷款请求前，销售代表可将有贷款需求客户的相关身份信息和身份标识上传至服务器，身份信息包括：身份证扫描件、姓名、年龄、籍贯、工作地址、工作单位、本人联系方式、关联人员(如亲戚、朋友等)联系方式等，其中身份标识为身份信息的唯一关联标识，该身份标识可以为客户指纹、客户身份证号、客户面部图像等。当服务器接收到用户端发送的贷款请求，对贷款请求进行解析，获取贷款请求所携带的待放款客户的身份标识，其中贷款请求是销售代表在门店中用户端登录贷款金融系统填写必要资料后所发送的。
在服务器接收到用户端发送的贷款请求并获取到客户的身份标识和身份信息之后，服务器向审批人员所使用的审批端转发客户的身份标识和身份信息，服务器建立贷款申请端和审批端之间的视频面谈连接，即审批人员在进入审批端视频面谈界面时，呈现一般视频面谈选项和微表情面谈选项，若审批人员选择一般视频面谈选项，则进入一般视频面谈界面，其中一般视频面谈界面可包括客户信息展示框、视频框和控台框，其中客户信息展示框显示面谈客户的各项基本信息(如身份信息、身份标识、征信、贷款逾期情况等)，控台框包括视频面谈调整项(如调整输入输出音量、视频显示参数、呼叫挂机选项)。若工作人员选择微表情面谈选项，则进入微表情面谈界面，其中微表情面谈界面可包括客户信息展示框、控台框、视频框和微表情框，客户信息展示框、控台框、视频框与一般视频面谈界面中功能相同，微表情框用于显示微表情分析信息。在审批端确定视频面谈界面后，服务器接收贷款申请端上传的面谈视频帧，该面谈视频帧是贷款申请端对正在进行面谈的客户所采集的视频数据。
步骤S20，每间隔预设时长对该预设时长内的面谈视频帧中面谈者的微表情进行分析，获取各预设时长内面谈者的微表情分析信息；
例如预设时长为5s，即每间隔5s对该5s内接收的面谈视频帧进行微表情分析，即对在这5s内面谈者面部的微表情进行分析，如基于预设参考表情库中参考表情与面谈者面部表情进行匹配和分析，获取该5s内面谈者的微表情分析信息。同理，同步获取各个预设时长内面谈者的微表情分析信息，并将各预设时长的微表情分析信息与对应预设时长内的面谈视频帧进行关联。例如在一段时间内，由连续的3个预设时长A、B和C组成，在预设时长A中面谈视频帧集合为a1、微表情分析信息为a2，在预设时长B中面谈视频帧集合为b1、微表情分析信息为b2，在预设时长C中面谈视频帧集合为c1、微表情分析信息为c2，从而a1和a2关联，b1和b2关联，c1和c2关联。
可选地，参照图3，步骤S20中获取各预设时长内面谈者的微表情分析信息的步骤包括：
步骤S21，识别每间隔预设时长内面谈视频帧中面谈者的微表情情绪和各微表情情绪的出现次数；
对接收的面谈视频帧中面谈者的人物面部区域进行实时分析，分析人物面部不同面部区域的特征变化，如基于FACS(Facial Action Coding System，面部行为编码系统)，对人物面部的各个区域进行编码，根据人物面部各个区域在解剖学的肌肉变化，对应得出编码值，然后根据编码值去查询大量实验和统计得出的微表情数据库(即预设参考表情库)，已得到人物的微表情。具体地，步骤S21包括：
每间隔预设时长内面谈视频帧中面谈者的各预设面部区域的肌肉变化图像，并根据所述肌肉变化图像在预设面部行为编码系统中查询各预设面部区域对应的特征编码值；
将各预设面部区域的位置信息和特征编码值组成表情特征组，并根据各表情特征组中的位置信息在预设参考表情库中确定对应的面部表情子库，再根据表情特征组中的特征编码在该面部表情子库中确定对应的微表情；
根据面谈者个预设面部区域的微表情，得到面谈者在此预设时长内的微表情情绪，统计各微表情情绪在各预设时长内的出现次数。
例如，对面谈视频帧中面谈者的各预设面部区域的图像进行分析，得到各预设面部区域的肌肉变化图像，基于这些肌肉变化图像得到面谈者各预设面部区域的实际肌肉变化，进而从预设面部行为编码系统中各预设面部区域的肌肉变化图像对应的特征编码值，其中预设面部行为编码系统对人物面部的各个区域进行编码，根据人物面部各个区域在解剖学的肌肉变化，对应得出编码值，例如对人物面部区域的唇部区域的位置编码为01100，唇部区域细分为4个肌肉块，0表示第一状态1表示第二状态，此时对唇部区域的肌肉变化图像分析后得编码为10，此时，人物面部区域的唇部区域的特征编码值为0110010。
例如，基于预设面部区域的表情特征组中的位置信息，先确定是唇部区域，然后在预设参考表情库中找到唇部区域对应的唇部面部表情子库，该唇部面部表情子库中包含各种唇部动作特征和该唇部动作特征关联的特征编码值，唇部面部表情可包括抿嘴、邹唇、吸唇、张嘴等，进而根据预设面部区域(唇部区域)的表情特征组中的特征编码值，确定唇部区域的微表情，如此循环，确定在该预设时长的周期内，所有预设面部区域的微表情，从而将该预设时长的周期内所有预设面部区域的微表情，与预设参考表情库的预存微表情组合实例进行比较，得到该预设时长的周期内面谈者的微表情情绪。
对面谈视频帧中面谈者人物面部区域编码分析后，可得到该面谈者的脸部动作特征和微表情情绪，脸部动作特征与特征编码值关联对应，该脸部动作特征包括抿嘴、额头抬起、邹额头、专注、下巴抬起、唇角下压、邹唇、吸唇、张嘴、邹鼻子、眨眼、上唇翘起、脸红和吐舌头，微表情包括失望、傻笑、轻佻、大笑、愤怒、放松、尖叫和微笑，基于微表情得出的微表情情绪包括惊讶、悲伤、开心、害怕、反感、藐视和生气等。
步骤S22，根据所述微表情情绪和各微表情情绪的出现次数，确定各预设时长内面谈者的综合情绪信息；
根据微表情情绪的类型和各微表情情绪的出现次数，确定各预设时长内面谈者的综合情绪信息，例如就有预设时长内微表情情绪类型获取面谈者在预设时长内的心理活动信息，然后根据各微表情情绪的出现次数，确定各微表情情绪的心理活动信息的重要程度，其中微表情情绪出现次数越多，对应心理活动信息越重要，根据各心理活动信息以及各各心理活动信息的重要晨读，确定面谈者的综合情绪信息，进而确定各预设时长内面谈者的综合情绪信息。
步骤S23，将出现次数最多的微表情作为对应预设时长内的高频情绪；
同时，将出现次数最多的微表情作为对应预设时长内的高频情绪，并将综合情绪信息和高频情绪作为微表情分析信息，以供审核端进行显示。从而提供一种微表情分析信息的获取方式，实现对面谈者的面谈视频帧进行分析以获取微表情分析信息。
步骤S24，将所述综合情绪信息和高频情绪作为微表情分析信息。
在将具有代表性和典型性的综合情绪信息和高频情绪作为微表情分析信息，有利于审批人员得到最重要的面谈者表情信息，便于简洁且较为准确了解到面谈者的心理活动变化，在微表情辅助面谈准确性和信息易读性上达到较理想的均衡，有利于审批人员快速适应和接受。
步骤S30，将面谈视频帧与该面谈视频帧对应预设时长内的微表情分析信息，在审批端同步显示。
接上述步骤S20中的例子，在一段时间内，逐个将面谈视频帧集合a1和微表情分析信息为a2组合、面谈视频帧集合b1和微表情分析信息为b2组合、面谈视频帧集合c1和微表情分析信息为c2组合在审批端进行同步显示。
在本实施例中，通过接收贷款申请端上传的面谈视频帧，再每间隔预设时长对该预设时长内的面谈视频帧中面谈者的微表情进行分析，获取各预设时长内面谈者的微表情分析信息；并将面谈视频帧与该面谈视频帧对应预设时长内的微表情分析信息，在审批端同步显示，实现在审核人员与面谈者进行远程视频面谈过程中，可对面谈者的微表情机械能实时手机，识别采集的微表情的类型和统计微表情出现的次数，并基于微表情的类型和次数实时分析和展示面谈者的微表情分析信息，从而审批人员可根据展示的微表情分析信息并结合买年套的提问，对面谈者的风险进行综合判断，降低了贷款审批风险，同时，微表情分析信息辅助审批人员对面谈者谈话真伪进行辨别，降低了贷款金融系统的人工审批对审批员经验要求。
此外，步骤S24包括：
将基于预设参考表情库匹配评分最高的微表情情绪，作为对应预设时长内的标志情绪；
将所述综合情绪信息、高频情绪和标志情绪，共同作为微表情分析信息。
在得出综合情绪信息和高频情绪之后，可将预设时长内的微表情情绪与预设参考表情库中对应参考表情匹配评分最高的微表情情绪选出，并将该选出的微表情情绪作为标志情绪。例如预设时长内得出微表情情绪有悲伤、开心和害怕，其中悲伤、开心和害怕分别与预设参考表情库中参考情绪中悲伤、开心和害怕的匹配评分(匹配评分越高，匹配契合度越高)为90、60、50，则将悲伤的微表情情绪作为标志情绪。在得出标志情绪后，将综合情绪信息、高频情绪和标志情绪，共同作为微表情分析信息，从而丰富了审核人员可参考的微表情信息，进一步降低贷款面谈审批风险。
进一步地，在本发明远程面谈审批方法又一实施例中，步骤S22包括：
步骤S221，根据所述微表情情绪和预设情绪分析库，获取微表情情绪对应的心理学释义；
预设情绪分析库中存有经过大量统计和分析所得到的情绪与心理学释义组，根据得到的微表情情绪对预设情绪分析库中的情绪与心理学释义组进行遍历，获取基于面谈视频帧所得各微表情情绪对应的心理学释义，心理学释义与微表情情绪的关联关系是基于统计实验和心理学理论结合得到的。
步骤S222，根据各微表情情绪的出现次数，为各微表情情绪对应的心理学释义分配权重；
根据各微表情情绪的出现次数，为各微表情情绪对应的心理学释义分配权重，其中出现次数越多，分配权重越大。在一个预设时长T的微表情采集和分析周期内，微表情情绪的出现次数n越大，为该微表情情绪所分配的权重Q越大，预设时长内面试者理论上出现微表情情绪的总次数为M*T，M为人每秒出现微表情情绪的理论平均次数，T为预设时长的秒数，即M的单位是次数，T的单位是秒，从而权重Q＝n/M*T，例如微表情情绪的出现次数n为6次，预设时长T为5s，人每秒出现微表情情绪的理论平均次数M为5次，从而该微表情情绪的权重Q＝5/5*5＝20％。
步骤S223，根据微表情情绪对应的心理学释义和对应权重，确定各预设时长内面谈者的综合情绪信息。
根据微表情情绪对应的心理学释义和对应权重，确定各预设时长内面谈者的综合情绪信息，例如将权重最大的心理学释义作为综合情绪信息，也可以将权重前N名(N为大于1的整数)的心理学释义整合为符合自然语言规律的文字段，并将该文字段作为对应预设时长内面谈者的综合情绪信息；此外，也可以将权重前N名(N为大于1的整数)的心理学释义发送至预先关联的第三方终端，第三方终端为心理学专业人士所用终端，将第三方终端根据权重前N名心理学释义所反馈的评价信息作为对应预设时长内面谈者的综合情绪信息。基于上述过程实现综合情绪信息的准确确定，进一步降低了贷款远程面谈审批的风险。
进一步地，在本发明远程面谈审批方法另一实施例中，参照图4，步骤S30包括
步骤S31，生成微表情面谈界面，并将微表情面谈界面发送至审批端显示，其中微表情面谈界面包括视频框和微表情框；
服务器生成微表情面谈界面，并将微表情面谈界面发送至审批端显示，其中微表情面谈界面包括视频框和微表情框，视频框和微表情框置顶于微表情面谈界面最外层界面，且视频框和微表情框关联移动，微表情框中可包括对视频框中显示的各预设时长的面谈视频帧，微表情框显示面谈者的微表情分析信息，如在微表情框中显示综合情绪信息、高频情绪(出现次数最多的微表情)、标志情绪(基于预设参考表情库匹配评分最高的微表情)等，提供一种微表情面谈界面的实现方式。
步骤S32，将面谈视频帧逐个在所述视频框中显示，将与视频框中显示面谈视频帧处于同一预设时长的微表情分析信息在所述微表情框中显示。
在将微表情面谈界面发送至审批端后，即在审批端建立视频框和微表情框之后，逐个将面谈视频帧逐个发送至审批端，以将面谈视频帧逐个在所述视频框中显示，同时建立面谈视频帧与其微表情分析信息之间的时序同步，然后基于时序同步的对应关系，将与视频框中显示面谈视频帧处于同一预设时长的微表情分析信息在所述微表情框中显示，从而保证审核人员基于时序正确的微表情分析信息以辅助审核人员对面谈者进行面谈。
可选地，在生成微表情面谈界面的步骤之后还包括：当接收到审批端发送的操作请求时，在微表情面谈界面中生成控台框，所述控台框包括一个或多个虚拟按键。
在审批人员需要对微表情面谈界面中的视频框或微表情框进行操作时，触发审批端向服务器发送操作请求，从而服务器在微表情面谈界面中生成控台框，所述控台框包括一个或多个虚拟按键，这些虚拟按键可包括调整输入输出音量、视频显示参数、呼叫挂机等功能，提高了审批人员对微表情面谈界面进行操作的便捷性。
进一步地，步骤S32之后还包括：
步骤S33，根据所述微表情分析信息，生成用于提示审批人员的提示问题，并将所述提示问题在微表情面谈界面中显示。
为了对经验不足审批人员远程视频面谈进行辅助，可在得出微表情分析信息之后，根据该微表情分析信息，生成针对性的用于提示审批人员的提示问题，并将提示问题在微表情面谈界面中同步显示，从而审批人员可以就面谈者的微表情状态(即微表情分析信息)快捷地知晓接下来需要询问的提示问题，增加了审批人员的专业性，也降低了审批人员的职业经验要求，也提高了审批面谈对被面谈者资质审批的效率。微表情分析信息和提示问题，可根据资深审批人员的经验和总结预先设定。
本发明还提供一种服务器，所述服务器包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的远程面谈审批程序，所述远程面谈审批程序被所述处理器执行时实现如上述的远程面谈审批方法的步骤。
本发明还提供一种可读存储介质，所述可读存储介质上存储有远程面谈审批程序，所述远程面谈审批程序被处理器执行时实现如上述的远程面谈审批方法的步骤。
本发明服务器和可读存储介质的具体实施方式的拓展内容与上述贷款费率生成方法各实施例基本相同，在此不做累述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护之内。
Claims (10)
1.一种远程面谈审批方法，其特征在于，所述远程面谈审批方法包括：
接收贷款申请端上传的面谈视频帧；
每间隔预设时长对该预设时长内的面谈视频帧中面谈者的微表情进行分析，获取各预设时长内面谈者的微表情分析信息；
将面谈视频帧与该面谈视频帧对应预设时长内的微表情分析信息，在审批端同步显示。
2.如权利要求1所述的远程面谈审批方法，其特征在于，所述获取各预设时长内面谈者的微表情分析信息的步骤包括：
识别每间隔预设时长内面谈视频帧中面谈者的微表情情绪和各微表情情绪的出现次数；
根据所述微表情情绪和各微表情情绪的出现次数，确定各预设时长内面谈者的综合情绪信息；
将出现次数最多的微表情作为对应预设时长内的高频情绪；
将所述综合情绪信息和高频情绪作为微表情分析信息。
3.如权利要求2所述的远程面谈审批方法，其特征在于，所述将所述综合情绪信息和高频情绪作为微表情分析信息的步骤包括：
将基于预设参考表情库匹配评分最高的微表情情绪，作为对应预设时长内的标志情绪；
将所述综合情绪信息、高频情绪和标志情绪，共同作为微表情分析信息。
4.如权利要求2所述的远程面谈审批方法，其特征在于，所述识别每间隔预设时长内面谈视频帧中面谈者的微表情情绪和各微表情情绪的出现次数的步骤包括：
每间隔预设时长内面谈视频帧中面谈者的各预设面部区域的肌肉变化图像，并根据所述肌肉变化图像在预设面部行为编码系统中查询各预设面部区域对应的特征编码值；
将各预设面部区域的位置信息和特征编码值组成表情特征组，并根据各表情特征组中的位置信息在预设参考表情库中确定对应的面部表情子库，再根据表情特征组中的特征编码在该面部表情子库中确定对应的微表情；
根据面谈者个预设面部区域的微表情，得到面谈者在此预设时长内的微表情情绪，统计各微表情情绪在各预设时长内的出现次数。
5.如权利要求2所述的远程面谈审批方法，其特征在于，所述根据所述微表情情绪和各微表情情绪的出现次数，确定各预设时长内面谈者的综合情绪信息的步骤包括：
根据所述微表情情绪和预设情绪分析库，获取微表情情绪对应的心理学释义；
根据各微表情情绪的出现次数，为各微表情情绪对应的心理学释义分配权重；
根据微表情情绪对应的心理学释义和对应权重，确定各预设时长内面谈者的综合情绪信息。
6.如权利要求1所述的远程面谈审批方法，其特征在于，所述将面谈视频帧与该面谈视频帧对应预设时长内的微表情分析信息，在审批端同步显示的步骤包括：
生成微表情面谈界面，并将微表情面谈界面发送至审批端显示，其中微表情面谈界面包括视频框和微表情框；
将面谈视频帧逐个在所述视频框中显示，将与视频框中显示面谈视频帧处于同一预设时长的微表情分析信息在所述微表情框中显示。
7.如权利要求6所述的远程面谈审批方法，其特征在于，所述生成微表情面谈界面的步骤之后还包括：
当接收到审批端发送的操作请求时，在微表情面谈界面中生成控台框，所述控台框包括一个或多个虚拟按键。
8.如权利要求6所述的远程面谈审批方法，其特征在于，在所述接将与视频框中显示面谈视频帧处于同一预设时长的微表情分析信息在所述微表情框中显示的步骤之后还包括：
根据所述微表情分析信息，生成用于提示审批人员的提示问题，并将所述提示问题在微表情面谈界面中显示。
9.一种服务器，其特征在于，所述服务器包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的远程面谈审批程序，所述远程面谈审批程序被所述处理器执行时实现如权利要求1至8中任一项所述的远程面谈审批方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储有远程面谈审批程序，所述远程面谈审批程序被处理器执行时实现如权利要求1至8中任一项所述的远程面谈审批方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710932605.8A CN107862598A (zh) | 2017-09-30 | 2017-09-30 | 远程面谈审批方法、服务器及可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710932605.8A CN107862598A (zh) | 2017-09-30 | 2017-09-30 | 远程面谈审批方法、服务器及可读存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN107862598A true CN107862598A (zh) | 2018-03-30 |
Family
ID=61698494
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710932605.8A Pending CN107862598A (zh) | 2017-09-30 | 2017-09-30 | 远程面谈审批方法、服务器及可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107862598A (zh) |
Cited By (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108596760A (zh) * | 2018-05-14 | 2018-09-28 | 平安普惠企业管理有限公司 | 贷款风险评估方法及服务器 |
| CN109241864A (zh) * | 2018-08-14 | 2019-01-18 | 中国平安人寿保险股份有限公司 | 情感预测方法、装置、计算机设备和存储介质 |
| CN109376598A (zh) * | 2018-09-17 | 2019-02-22 | 平安科技（深圳）有限公司 | 面部表情图片处理方法、装置、计算机设备和存储介质 |
| CN109509087A (zh) * | 2018-12-15 | 2019-03-22 | 深圳壹账通智能科技有限公司 | 智能化的贷款审核方法、装置、设备及介质 |
| CN109584050A (zh) * | 2018-12-14 | 2019-04-05 | 深圳壹账通智能科技有限公司 | 基于微表情识别的用户风险程度分析方法及装置 |
| CN109584051A (zh) * | 2018-12-18 | 2019-04-05 | 深圳壹账通智能科技有限公司 | 基于微表情识别的客户逾期风险判断方法及装置 |
| CN109711982A (zh) * | 2019-01-04 | 2019-05-03 | 深圳壹账通智能科技有限公司 | 面核提问方法、装置、计算机设备和可读存储介质 |
| CN109754312A (zh) * | 2018-12-18 | 2019-05-14 | 深圳壹账通智能科技有限公司 | 产品推送方法、装置、计算机设备和存储介质 |
| CN109767317A (zh) * | 2018-12-15 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 基于会员等级评定的贷款审核方法、装置、设备及介质 |
| CN109767290A (zh) * | 2018-12-18 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 产品推送方法、装置、计算机设备和存储介质 |
| CN109766770A (zh) * | 2018-12-18 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 服务质量评价方法、装置、计算机设备和存储介质 |
| CN109766772A (zh) * | 2018-12-18 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 风险控制方法、装置、计算机设备和存储介质 |
| CN109816360A (zh) * | 2018-12-15 | 2019-05-28 | 深圳壹账通智能科技有限公司 | 理财收益数据处理方法、装置、计算机装置及存储介质 |
| CN109829358A (zh) * | 2018-12-14 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 微表情贷款控制方法、装置、计算机设备及存储介质 |
| CN109919426A (zh) * | 2019-01-24 | 2019-06-21 | 平安科技（深圳）有限公司 | 稽核访谈测谎方法、服务器及计算机可读存储介质 |
| CN109993053A (zh) * | 2019-01-23 | 2019-07-09 | 平安科技（深圳）有限公司 | 电子装置、基于微表情识别的访谈辅助方法和存储介质 |
| CN110135800A (zh) * | 2019-04-23 | 2019-08-16 | 南京葡萄诚信息科技有限公司 | 一种人工智能视频面试方法及系统 |
| CN110164434A (zh) * | 2019-04-16 | 2019-08-23 | 平安普惠企业管理有限公司 | 基于语音识别的面谈审批方法及装置 |
| CN110287895A (zh) * | 2019-04-17 | 2019-09-27 | 北京阳光易德科技股份有限公司 | 一种基于卷积神经网络进行情绪测量的方法 |
| WO2020024390A1 (zh) * | 2018-08-01 | 2020-02-06 | 平安科技（深圳）有限公司 | 基于微表情的节点信息处理方法、装置、计算机设备及存储介质 |
| CN111667359A (zh) * | 2020-06-19 | 2020-09-15 | 上海印闪网络科技有限公司 | 一种基于实时视频的信息审核方法 |
| CN112884326A (zh) * | 2021-02-23 | 2021-06-01 | 无锡爱视智能科技有限责任公司 | 一种多模态分析的视频面试评估方法、装置和存储介质 |
| CN112990750A (zh) * | 2021-04-06 | 2021-06-18 | 上海浩宜信息科技有限公司 | 一种基于移动终端的金融营销系统和方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105160318A (zh) * | 2015-08-31 | 2015-12-16 | 北京旷视科技有限公司 | 基于面部表情的测谎方法及系统 |
| CN105913046A (zh) * | 2016-05-06 | 2016-08-31 | 姜振宇 | 微表情识别装置及方法 |
| CN106792170A (zh) * | 2016-12-14 | 2017-05-31 | 合网络技术（北京）有限公司 | 视频处理方法及装置 |
| CN106909907A (zh) * | 2017-03-07 | 2017-06-30 | 佛山市融信通企业咨询服务有限公司 | 一种视频通讯情感分析辅助系统 |
| CN107180234A (zh) * | 2017-06-01 | 2017-09-19 | 四川新网银行股份有限公司 | 基于人脸表情识别和人脸特征提取的信用风险预测方法 |
| CN107194347A (zh) * | 2017-05-19 | 2017-09-22 | 深圳市唯特视科技有限公司 | 一种基于面部动作编码系统进行微表情检测的方法 |
-
2017
- 2017-09-30 CN CN201710932605.8A patent/CN107862598A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105160318A (zh) * | 2015-08-31 | 2015-12-16 | 北京旷视科技有限公司 | 基于面部表情的测谎方法及系统 |
| CN105913046A (zh) * | 2016-05-06 | 2016-08-31 | 姜振宇 | 微表情识别装置及方法 |
| CN106792170A (zh) * | 2016-12-14 | 2017-05-31 | 合网络技术（北京）有限公司 | 视频处理方法及装置 |
| CN106909907A (zh) * | 2017-03-07 | 2017-06-30 | 佛山市融信通企业咨询服务有限公司 | 一种视频通讯情感分析辅助系统 |
| CN107194347A (zh) * | 2017-05-19 | 2017-09-22 | 深圳市唯特视科技有限公司 | 一种基于面部动作编码系统进行微表情检测的方法 |
| CN107180234A (zh) * | 2017-06-01 | 2017-09-19 | 四川新网银行股份有限公司 | 基于人脸表情识别和人脸特征提取的信用风险预测方法 |
Cited By (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108596760A (zh) * | 2018-05-14 | 2018-09-28 | 平安普惠企业管理有限公司 | 贷款风险评估方法及服务器 |
| WO2020024390A1 (zh) * | 2018-08-01 | 2020-02-06 | 平安科技（深圳）有限公司 | 基于微表情的节点信息处理方法、装置、计算机设备及存储介质 |
| CN109241864A (zh) * | 2018-08-14 | 2019-01-18 | 中国平安人寿保险股份有限公司 | 情感预测方法、装置、计算机设备和存储介质 |
| CN109376598A (zh) * | 2018-09-17 | 2019-02-22 | 平安科技（深圳）有限公司 | 面部表情图片处理方法、装置、计算机设备和存储介质 |
| CN109584050A (zh) * | 2018-12-14 | 2019-04-05 | 深圳壹账通智能科技有限公司 | 基于微表情识别的用户风险程度分析方法及装置 |
| CN109829358A (zh) * | 2018-12-14 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 微表情贷款控制方法、装置、计算机设备及存储介质 |
| CN109509087A (zh) * | 2018-12-15 | 2019-03-22 | 深圳壹账通智能科技有限公司 | 智能化的贷款审核方法、装置、设备及介质 |
| CN109767317A (zh) * | 2018-12-15 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 基于会员等级评定的贷款审核方法、装置、设备及介质 |
| CN109816360A (zh) * | 2018-12-15 | 2019-05-28 | 深圳壹账通智能科技有限公司 | 理财收益数据处理方法、装置、计算机装置及存储介质 |
| CN109754312A (zh) * | 2018-12-18 | 2019-05-14 | 深圳壹账通智能科技有限公司 | 产品推送方法、装置、计算机设备和存储介质 |
| CN109767290A (zh) * | 2018-12-18 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 产品推送方法、装置、计算机设备和存储介质 |
| CN109766770A (zh) * | 2018-12-18 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 服务质量评价方法、装置、计算机设备和存储介质 |
| CN109766772A (zh) * | 2018-12-18 | 2019-05-17 | 深圳壹账通智能科技有限公司 | 风险控制方法、装置、计算机设备和存储介质 |
| CN109584051A (zh) * | 2018-12-18 | 2019-04-05 | 深圳壹账通智能科技有限公司 | 基于微表情识别的客户逾期风险判断方法及装置 |
| CN109711982A (zh) * | 2019-01-04 | 2019-05-03 | 深圳壹账通智能科技有限公司 | 面核提问方法、装置、计算机设备和可读存储介质 |
| CN109993053A (zh) * | 2019-01-23 | 2019-07-09 | 平安科技（深圳）有限公司 | 电子装置、基于微表情识别的访谈辅助方法和存储介质 |
| CN109993053B (zh) * | 2019-01-23 | 2023-09-15 | 平安科技（深圳）有限公司 | 电子装置、基于微表情识别的访谈辅助方法和存储介质 |
| CN109919426A (zh) * | 2019-01-24 | 2019-06-21 | 平安科技（深圳）有限公司 | 稽核访谈测谎方法、服务器及计算机可读存储介质 |
| CN110164434A (zh) * | 2019-04-16 | 2019-08-23 | 平安普惠企业管理有限公司 | 基于语音识别的面谈审批方法及装置 |
| CN110287895A (zh) * | 2019-04-17 | 2019-09-27 | 北京阳光易德科技股份有限公司 | 一种基于卷积神经网络进行情绪测量的方法 |
| CN110287895B (zh) * | 2019-04-17 | 2021-08-06 | 北京阳光易德科技股份有限公司 | 一种基于卷积神经网络进行情绪测量的方法 |
| CN110135800A (zh) * | 2019-04-23 | 2019-08-16 | 南京葡萄诚信息科技有限公司 | 一种人工智能视频面试方法及系统 |
| CN111667359A (zh) * | 2020-06-19 | 2020-09-15 | 上海印闪网络科技有限公司 | 一种基于实时视频的信息审核方法 |
| CN112884326A (zh) * | 2021-02-23 | 2021-06-01 | 无锡爱视智能科技有限责任公司 | 一种多模态分析的视频面试评估方法、装置和存储介质 |
| CN112990750A (zh) * | 2021-04-06 | 2021-06-18 | 上海浩宜信息科技有限公司 | 一种基于移动终端的金融营销系统和方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107862598A (zh) | 远程面谈审批方法、服务器及可读存储介质 | |
| Hitsch et al. | What makes you click? Mate preferences and matching outcomes in online dating | |
| CN104636501B (zh) | 一种多媒体网络人工即时翻译系统及方法 | |
| CN111125512A (zh) | 业务推荐处理方法、装置及系统 | |
| EP3513761A2 (en) | 3d platform for aesthetic simulation | |
| CN107341434A (zh) | 视频图像的处理方法、装置和终端设备 | |
| CN105518708A (zh) | 用于验证活体人脸的方法、设备和计算机程序产品 | |
| CN109670023A (zh) | 人机自动面试方法、装置、设备和存储介质 | |
| CN105871702B (zh) | 一种信息识别方法及服务器 | |
| KR102178935B1 (ko) | 인공지능을 이용한 전직지원 관리서버 및 전직지원 관리방법 | |
| US20200202369A1 (en) | Digital surveys based on digitally detected facial emotions | |
| WO2012172625A1 (ja) | 美容ｓｎｓシステム及びプログラム | |
| CN111599359A (zh) | 人机交互方法、服务端、客户端及存储介质 | |
| CN108694372A (zh) | 一种视频直播客服态度评价方法及装置 | |
| CN112116103A (zh) | 基于联邦学习的个人资质评估方法、装置及系统及存储介质 | |
| CN110264243A (zh) | 基于活体检测的产品推广方法、装置、设备及存储介质 | |
| Wicaksana et al. | Human-explainable features for job candidate screening prediction | |
| CN109711970A (zh) | 贷款授信平台及其授信方法、授信设备、可读存储介质 | |
| CN111079894B (zh) | Bp神经网络模型构建、商家评价方法与装置 | |
| CN110427620B (zh) | 基于社群系统的服务质量优化管理系统 | |
| CN111667359A (zh) | 一种基于实时视频的信息审核方法 | |
| CN106934636A (zh) | 综合管理方法及系统 | |
| CN115330415A (zh) | 基于虚拟场景的银行投资顾问服务系统 | |
| CN110555703B (zh) | 信用合约多视角展示方法以及装置 | |
| CN113822645A (zh) | 一种面试管理系统、设备及计算机介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180330 |