CN115409371A - 银行服务质量反馈方法及装置 - Google Patents

银行服务质量反馈方法及装置 Download PDF

Info

Publication number
CN115409371A
CN115409371A CN202211048738.6A CN202211048738A CN115409371A CN 115409371 A CN115409371 A CN 115409371A CN 202211048738 A CN202211048738 A CN 202211048738A CN 115409371 A CN115409371 A CN 115409371A
Authority
CN
China
Prior art keywords
emotion recognition
face
recognition result
voice
emotion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211048738.6A
Other languages
English (en)
Inventor
朱胜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bank of China Ltd
Original Assignee
Bank of China Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bank of China Ltd filed Critical Bank of China Ltd
Priority to CN202211048738.6A priority Critical patent/CN115409371A/zh
Publication of CN115409371A publication Critical patent/CN115409371A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06395—Quality analysis or management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/02—Banking, e.g. interest calculation or account maintenance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Accounting & Taxation (AREA)
  • Human Computer Interaction (AREA)
  • Educational Administration (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Finance (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Tourism & Hospitality (AREA)
  • Quality & Reliability (AREA)
  • Child & Adolescent Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Operations Research (AREA)
  • Game Theory and Decision Science (AREA)
  • Technology Law (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了银行服务质量反馈方法及装置，可用于人工智能技术领域，方法包括：采集目标用户的人脸视频数据，根据第一人脸情绪识别结果以及第二人脸情绪识别结果确定目标用户的人脸情绪变化值，根据第一语音情绪识别结果以及第二语音情绪识别结果确定目标用户的语音情绪变化值，根据人脸情绪变化值以及语音情绪变化值确定目标用户对应的银行服务质量反馈结果。本发明实现了自动反馈银行服务质量，减少用户操作，提高了效率，提高了银行服务质量反馈的实时性及准确性。

Description

银行服务质量反馈方法及装置
技术领域
本发明涉及人工智能技术领域，尤其涉及银行服务质量反馈方法及装置。
背景技术
目前银行的对客渠道如网点、电子银行等的服务质量评价完全依赖客户手动评价，评价率低，从而不利于服务质量的提升。
综上，目前亟需一种银行服务质量反馈方法，用于解决上述现有技术存在的问题。
发明内容
本发明实施例提供一种银行服务质量反馈方法，用以提高银行服务质量反馈的实时性及准确性，该方法包括：
采集目标用户的人脸视频数据；
根据所述人脸视频数据确定第一时间帧下的第一人脸图像数据以及第二时间帧下的第二人脸图像数据；所述第一时间帧对应银行服务开始时刻；所述第二时间帧对应银行服务结束时刻；
将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果；所述人脸情绪识别模型为利用历史用户的人脸图像数据及对应的人脸情绪识别结果，对机器学习模型进行训练后得到；
将第二人脸图像数据输入至人脸情绪识别模型，得到第二人脸图像数据对应的第二人脸情绪识别结果；
根据所述第一人脸情绪识别结果以及所述第二人脸情绪识别结果确定目标用户的人脸情绪变化值；
确定目标用户所处环境中：第一时间帧所处第一时间段内的第一语音数据，以及第二时间帧所处第二时间段内的第二语音数据；
将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果；所述语音情绪识别模型为利用历史用户的语音数据及对应的语音情绪识别结果，对机器学习模型进行训练后得到；
将第二语音数据输入至语音情绪识别模型，得到第二语音数据对应的第二语音情绪识别结果；
根据所述第一语音情绪识别结果以及所述第二语音情绪识别结果确定目标用户的语音情绪变化值；
根据所述人脸情绪变化值以及所述语音情绪变化值确定目标用户对应的银行服务质量反馈结果。
本发明实施例还提供一种银行服务质量反馈装置，用以提高银行服务质量反馈的实时性及准确性，该装置包括：
获取模块，用于采集目标用户的人脸视频数据；
人脸情绪识别模块，用于根据所述人脸视频数据确定第一时间帧下的第一人脸图像数据以及第二时间帧下的第二人脸图像数据；所述第一时间帧对应银行服务开始时刻；所述第二时间帧对应银行服务结束时刻；将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果；所述人脸情绪识别模型为利用历史用户的人脸图像数据及对应的人脸情绪识别结果，对机器学习模型进行训练后得到；将第二人脸图像数据输入至人脸情绪识别模型，得到第二人脸图像数据对应的第二人脸情绪识别结果；根据所述第一人脸情绪识别结果以及所述第二人脸情绪识别结果确定目标用户的人脸情绪变化值；
语音情绪识别模块，用于确定目标用户所处环境中：第一时间帧所处第一时间段内的第一语音数据，以及第二时间帧所处第二时间段内的第二语音数据；将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果；所述语音情绪识别模型为利用历史用户的语音数据及对应的语音情绪识别结果，对机器学习模型进行训练后得到；将第二语音数据输入至语音情绪识别模型，得到第二语音数据对应的第二语音情绪识别结果；根据所述第一语音情绪识别结果以及所述第二语音情绪识别结果确定目标用户的语音情绪变化值；
银行服务质量反馈模块，用于根据所述人脸情绪变化值以及所述语音情绪变化值确定目标用户对应的银行服务质量反馈结果。
本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述银行服务质量反馈方法。
本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述银行服务质量反馈方法。
本发明实施例还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，所述计算机程序被处理器执行时实现上述银行服务质量反馈方法。
本发明实施例中，采集目标用户的人脸视频数据，根据人脸视频数据确定第一时间帧下的第一人脸图像数据以及第二时间帧下的第二人脸图像数据，将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果，将第二人脸图像数据输入至人脸情绪识别模型，得到第二人脸图像数据对应的第二人脸情绪识别结果，根据第一人脸情绪识别结果以及第二人脸情绪识别结果确定目标用户的人脸情绪变化值，确定第一时间段下的第一语音数据以及第二时间段下的第二语音数据，将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果，将第二语音数据输入至语音情绪识别模型，得到第二语音数据对应的第二语音情绪识别结果，根据第一语音情绪识别结果以及第二语音情绪识别结果确定目标用户的语音情绪变化值，根据人脸情绪变化值以及语音情绪变化值确定目标用户对应的银行服务质量反馈结果，与现有技术相比，通过人脸情绪识别模型确定银行服务前后目标用户的人脸情绪变化值，通过语音识别模型确定银行服务前后目标用户的语音情绪变化值，根据人脸情绪变化值以及语音情绪变化值确定目标用户对应的银行服务质量反馈结果，实现了自动反馈银行服务质量，减少用户操作，提高了效率，提高了银行服务质量反馈的实时性及准确性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
图1为本发明提供的银行服务质量反馈方法的流程示意图；
图2为本发明提供的银行服务质量反馈方法的流程示意图；
图3为本发明提供的银行服务质量反馈方法的流程示意图；
图4为本发明提供的银行服务质量反馈方法的流程示意图；
图5为本发明提供的银行服务质量反馈装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。
本发明实施例中对数据的获取、存储、使用、处理等均符合国家法律法规的相关规定。
图1为本发明实施例提供的一种银行服务质量反馈方法所对应的流程示意图，如图1所示，该方法包括：
步骤101，采集目标用户的人脸视频数据。
本发明实施例中，在银行网点入口、等待区、办理业务区等区域设置摄像头采集目标用户的人脸视频数据。
步骤102，根据人脸视频数据确定第一时间帧下的第一人脸图像数据以及第二时间帧下的第二人脸图像数据。
需要说明的是，第一时间帧对应银行服务开始时刻，第二时间帧对应银行服务结束时刻。
举例来说，摄像头设置在每个业务窗口，采集办理业务的用户的人脸视频数据，然后从人脸视频数据中截取第一时间帧下的第一人脸图像数据以及第二时间帧下的第二人脸图像数据。
步骤103，将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果。
需要说明的是，人脸情绪识别模型为利用历史用户的人脸图像数据及对应的人脸情绪识别结果，对机器学习模型进行训练后得到。
步骤104，将第二人脸图像数据输入至人脸情绪识别模型，得到第二人脸图像数据对应的第二人脸情绪识别结果。
步骤105，根据第一人脸情绪识别结果以及第二人脸情绪识别结果确定目标用户的人脸情绪变化值。
步骤106，确定目标用户所处环境中：第一时间帧所处第一时间段内的第一语音数据，以及第二时间帧所处第二时间段内的第二语音数据。
步骤107，将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果。
需要说明的是，语音情绪识别模型为利用历史用户的语音数据及对应的语音情绪识别结果，对机器学习模型进行训练后得到。
步骤108，将第二语音数据输入至语音情绪识别模型，得到第二语音数据对应的第二语音情绪识别结果。
步骤109，根据第一语音情绪识别结果以及第二语音情绪识别结果确定目标用户的语音情绪变化值。
步骤110，根据人脸情绪变化值以及语音情绪变化值确定目标用户对应的银行服务质量反馈结果。
上述方案，通过人脸情绪识别模型、语音情绪识别模型分别识别服务前后目标用户的情绪，根据人脸情绪变化值以及语音情绪变化值确定目标用户对应的银行服务质量反馈结果，降低了成本，实现了自动反馈银行服务质量，避免了目标用户初始情绪较差带来的银行服务质量的误判，提高了银行服务质量反馈的准确性及效率。
本发明实施例在将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果之前，步骤流程如图2所示，具体如下：
步骤201，将历史用户的人脸图像数据及对应的人脸情绪识别结果作为样本数据，构建第一训练集和第一测试集。
步骤202，利用第一训练集对机器学习模型进行训练，得到人脸情绪识别模型。
步骤203，利用第一测试集对人脸情绪识别模型进行测试。
上述方案，利用第一训练集对机器学习模型进行训练，得到人脸情绪识别模型，通过人脸情绪识别模型识别目标用户的情绪，提高了人脸情绪识别结果的准确性。
本发明实施例在将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果之前，步骤流程如图3所示，具体如下：
步骤301，将历史用户的语音数据对应的语音情绪识别结果作为样本数据，构建第二训练集和第二测试集。
步骤302，利用第二训练集对机器学习模型进行训练，得到语音情绪识别模型。
步骤303，利用第二测试集对语音情绪识别模型进行测试。
上述方案，利用第二训练集对机器学习模型进行训练，得到语音情绪识别模型，通过语音情绪识别模型识别目标用户的情绪，提高了语音情绪识别结果的准确性。
本发明实施例在步骤105中，根据第一人脸情绪识别结果以及第二人脸情绪识别结果，确定人脸情绪识别结果差值；
根据人脸情绪识别结果差值，确定目标用户的人脸情绪变化值。
举例来说，第一人脸情绪识别结果为60，第二人脸情绪识别结果为80，由此确定人脸情绪识别结果差值为20，即目标用户的人脸情绪变化值为20。
比如，第一人脸情绪识别结果为60，第二人脸情绪识别结果为50，由此确定人脸情绪识别结果差值为-10，即目标用户的人脸情绪变化值为-10。
上述方案，根据人脸情绪识别结果差值，确定目标用户的人脸情绪变化值，避免了目标用户初始情绪较差带来的银行服务质量的误判，提高了银行服务质量反馈的准确性。
本发明实施例在步骤109中，根据第一语音情绪识别结果以及第二语音情绪识别结果，确定语音情绪识别结果差值；
根据语音情绪识别结果差值，确定目标用户的语音情绪变化值。
举例来说，第一语音情绪识别结果为70，第二语音情绪识别结果为80，由此确定语音情绪识别结果差值为10，即目标用户的语音情绪变化值为10。
比如，第一语音情绪识别结果为80，第二语音情绪识别结果为50，由此确定语音情绪识别结果差值为-30，即目标用户的语音情绪变化值为-30。
上述方案，根据语音情绪识别结果差值，确定目标用户的语音情绪变化值，避免了目标用户初始情绪较差带来的银行服务质量的误判，提高了银行服务质量反馈的准确性。
本发明实施例在步骤110中，根据人脸情绪变化值以及语音情绪变化值确定目标用户对应的银行服务质量反馈结果，步骤流程如图4所示，具体如下：
步骤401，根据人脸情绪变化值以及语音情绪变化值确定目标用户对应的综合情绪变化值。
在一种可能的实施方式中，根据预设的权重分别对人脸情绪变化值以及语音情绪变化值加权，得到目标用户对应的综合情绪变化值。
步骤402，根据预设的综合情绪变化值与银行服务质量反馈结果的关系确定银行服务质量反馈结果。
举例来说，综合情绪变化值小于-5时，银行服务质量反馈结果为非常不满意；综合情绪变化值为-5至-1时，银行服务质量反馈结果为不满意；综合情绪变化值为0至5时，银行服务质量反馈结果为满意；综合情绪变化值大于5时，银行服务质量反馈结果为非常满意。
上述方案，根据预设的综合情绪变化值与银行服务质量反馈结果的关系确定银行服务质量反馈结果，同时考虑了人脸情绪识别及语音情绪识别，提高了银行服务质量反馈的准确性。
本发明实施例中还提供了一种银行服务质量反馈装置，如下面的实施例所述。该装置如图5所示，所述装置包括：
获取模块501，用于采集目标用户的人脸视频数据；
人脸情绪识别模块502，用于根据所述人脸视频数据确定第一时间帧下的第一人脸图像数据以及第二时间帧下的第二人脸图像数据；所述第一时间帧对应银行服务开始时刻；所述第二时间帧对应银行服务结束时刻；将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果；所述人脸情绪识别模型为利用历史用户的人脸图像数据及对应的人脸情绪识别结果，对机器学习模型进行训练后得到；将第二人脸图像数据输入至人脸情绪识别模型，得到第二人脸图像数据对应的第二人脸情绪识别结果；根据所述第一人脸情绪识别结果以及所述第二人脸情绪识别结果确定目标用户的人脸情绪变化值；
语音情绪识别模块503，用于确定目标用户所处环境中：第一时间帧所处第一时间段内的第一语音数据，以及第二时间帧所处第二时间段内的第二语音数据；将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果；所述语音情绪识别模型为利用历史用户的语音数据及对应的语音情绪识别结果，对机器学习模型进行训练后得到；将第二语音数据输入至语音情绪识别模型，得到第二语音数据对应的第二语音情绪识别结果；根据所述第一语音情绪识别结果以及所述第二语音情绪识别结果确定目标用户的语音情绪变化值；
银行服务质量反馈模块504，用于根据所述人脸情绪变化值以及所述语音情绪变化值确定目标用户对应的银行服务质量反馈结果。
本发明实施例中，所述人脸情绪识别模块502还用于：
在将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果之前，将历史用户的人脸图像数据及对应的人脸情绪识别结果作为样本数据，构建第一训练集和第一测试集；
利用第一训练集对机器学习模型进行训练，得到所述人脸情绪识别模型；
利用第一测试集对所述人脸情绪识别模型进行测试。
本发明实施例中，所述语音情绪识别模块503还用于：
在将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果之前，将历史用户的语音数据对应的语音情绪识别结果作为样本数据，构建第二训练集和第二测试集；
利用第二训练集对机器学习模型进行训练，得到所述语音情绪识别模型；
利用第二测试集对所述语音情绪识别模型进行测试。
本发明实施例中，所述人脸情绪识别模块502具体用于：
根据所述第一人脸情绪识别结果以及所述第二人脸情绪识别结果，确定人脸情绪识别结果差值；
根据所述人脸情绪识别结果差值，确定目标用户的人脸情绪变化值。
本发明实施例中，所述银行服务质量反馈模块504具体用于：
根据所述人脸情绪变化值以及所述语音情绪变化值确定目标用户对应的综合情绪变化值；
根据预设的综合情绪变化值与银行服务质量反馈结果的关系确定银行服务质量反馈结果。
由于该装置解决问题的原理与银行服务质量反馈方法相似，因此该装置的实施可以参见银行服务质量反馈方法的实施，重复之处不再赘述。
本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述银行服务质量反馈方法。
本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述银行服务质量反馈方法。
本发明实施例还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，所述计算机程序被处理器执行时实现上述银行服务质量反馈方法。
本发明实施例中，采集目标用户的人脸视频数据，根据人脸视频数据确定第一时间帧下的第一人脸图像数据以及第二时间帧下的第二人脸图像数据，将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果，将第二人脸图像数据输入至人脸情绪识别模型，得到第二人脸图像数据对应的第二人脸情绪识别结果，根据第一人脸情绪识别结果以及第二人脸情绪识别结果确定目标用户的人脸情绪变化值，确定第一时间段下的第一语音数据以及第二时间段下的第二语音数据，将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果，将第二语音数据输入至语音情绪识别模型，得到第二语音数据对应的第二语音情绪识别结果，根据第一语音情绪识别结果以及第二语音情绪识别结果确定目标用户的语音情绪变化值，根据人脸情绪变化值以及语音情绪变化值确定目标用户对应的银行服务质量反馈结果，与现有技术相比，通过人脸情绪识别模型确定银行服务前后目标用户的人脸情绪变化值，通过语音识别模型确定银行服务前后目标用户的语音情绪变化值，根据人脸情绪变化值以及语音情绪变化值确定目标用户对应的银行服务质量反馈结果，实现了自动反馈银行服务质量，减少用户操作，提高了效率，提高了银行服务质量反馈的实时性及准确性。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (11)

1.一种银行服务质量反馈方法，其特征在于，包括：
采集目标用户的人脸视频数据；
根据所述人脸视频数据确定第一时间帧下的第一人脸图像数据以及第二时间帧下的第二人脸图像数据；所述第一时间帧对应银行服务开始时刻；所述第二时间帧对应银行服务结束时刻；
将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果；所述人脸情绪识别模型为利用历史用户的人脸图像数据及对应的人脸情绪识别结果，对机器学习模型进行训练后得到；
将第二人脸图像数据输入至人脸情绪识别模型，得到第二人脸图像数据对应的第二人脸情绪识别结果；
根据所述第一人脸情绪识别结果以及所述第二人脸情绪识别结果确定目标用户的人脸情绪变化值；
确定目标用户所处环境中：第一时间帧所处第一时间段内的第一语音数据，以及第二时间帧所处第二时间段内的第二语音数据；
将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果；所述语音情绪识别模型为利用历史用户的语音数据及对应的语音情绪识别结果，对机器学习模型进行训练后得到；
将第二语音数据输入至语音情绪识别模型，得到第二语音数据对应的第二语音情绪识别结果；
根据所述第一语音情绪识别结果以及所述第二语音情绪识别结果确定目标用户的语音情绪变化值；
根据所述人脸情绪变化值以及所述语音情绪变化值确定目标用户对应的银行服务质量反馈结果。
2.如权利要求1所述的银行服务质量反馈方法，其特征在于，在将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果之前，还包括：
将历史用户的人脸图像数据及对应的人脸情绪识别结果作为样本数据，构建第一训练集和第一测试集；
利用第一训练集对机器学习模型进行训练，得到所述人脸情绪识别模型；
利用第一测试集对所述人脸情绪识别模型进行测试。
3.如权利要求1所述的银行服务质量反馈方法，其特征在于，在将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果之前，还包括：
将历史用户的语音数据对应的语音情绪识别结果作为样本数据，构建第二训练集和第二测试集；
利用第二训练集对机器学习模型进行训练，得到所述语音情绪识别模型；
利用第二测试集对所述语音情绪识别模型进行测试。
4.如权利要求1所述的银行服务质量反馈方法，其特征在于，根据所述第一人脸情绪识别结果以及所述第二人脸情绪识别结果确定目标用户的人脸情绪变化值，包括：
根据所述第一人脸情绪识别结果以及所述第二人脸情绪识别结果，确定人脸情绪识别结果差值；
根据所述人脸情绪识别结果差值，确定目标用户的人脸情绪变化值。
5.如权利要求1所述的银行服务质量反馈方法，其特征在于，根据所述人脸情绪变化值以及所述语音情绪变化值确定目标用户对应的银行服务质量反馈结果，包括：
根据所述人脸情绪变化值以及所述语音情绪变化值确定目标用户对应的综合情绪变化值；
根据预设的综合情绪变化值与银行服务质量反馈结果的关系确定银行服务质量反馈结果。
6.一种银行服务质量反馈装置，其特征在于，包括：
获取模块，用于采集目标用户的人脸视频数据；
人脸情绪识别模块，用于根据所述人脸视频数据确定第一时间帧下的第一人脸图像数据以及第二时间帧下的第二人脸图像数据；所述第一时间帧对应银行服务开始时刻；所述第二时间帧对应银行服务结束时刻；将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果；所述人脸情绪识别模型为利用历史用户的人脸图像数据及对应的人脸情绪识别结果，对机器学习模型进行训练后得到；将第二人脸图像数据输入至人脸情绪识别模型，得到第二人脸图像数据对应的第二人脸情绪识别结果；根据所述第一人脸情绪识别结果以及所述第二人脸情绪识别结果确定目标用户的人脸情绪变化值；
语音情绪识别模块，用于确定目标用户所处环境中：第一时间帧所处第一时间段内的第一语音数据，以及第二时间帧所处第二时间段内的第二语音数据；将第一语音数据输入至语音情绪识别模型，得到第一语音数据对应的第一语音情绪识别结果；所述语音情绪识别模型为利用历史用户的语音数据及对应的语音情绪识别结果，对机器学习模型进行训练后得到；将第二语音数据输入至语音情绪识别模型，得到第二语音数据对应的第二语音情绪识别结果；根据所述第一语音情绪识别结果以及所述第二语音情绪识别结果确定目标用户的语音情绪变化值；
银行服务质量反馈模块，用于根据所述人脸情绪变化值以及所述语音情绪变化值确定目标用户对应的银行服务质量反馈结果。
7.如权利要求6所述的银行服务质量反馈装置，其特征在于，所述人脸情绪识别模块还用于：
在将第一人脸图像数据输入至人脸情绪识别模型，得到第一人脸图像数据对应的第一人脸情绪识别结果之前，将历史用户的人脸图像数据及对应的人脸情绪识别结果作为样本数据，构建第一训练集和第一测试集；
利用第一训练集对机器学习模型进行训练，得到所述人脸情绪识别模型；
利用第一测试集对所述人脸情绪识别模型进行测试。
8.如权利要求6所述的银行服务质量反馈装置，其特征在于，所述人脸情绪识别模块具体用于：
根据所述第一人脸情绪识别结果以及所述第二人脸情绪识别结果，确定人脸情绪识别结果差值；
根据所述人脸情绪识别结果差值，确定目标用户的人脸情绪变化值。
9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至5任一所述方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至5任一所述方法。
11.一种计算机程序产品，其特征在于，所述计算机程序产品包括计算机程序，所述计算机程序被处理器执行时实现权利要求1至5任一所述方法。
CN202211048738.6A 2022-08-30 2022-08-30 银行服务质量反馈方法及装置 Pending CN115409371A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211048738.6A CN115409371A (zh) 2022-08-30 2022-08-30 银行服务质量反馈方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211048738.6A CN115409371A (zh) 2022-08-30 2022-08-30 银行服务质量反馈方法及装置

Publications (1)

Publication Number Publication Date
CN115409371A true CN115409371A (zh) 2022-11-29

Family

ID=84163649

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211048738.6A Pending CN115409371A (zh) 2022-08-30 2022-08-30 银行服务质量反馈方法及装置

Country Status (1)

Country Link
CN (1) CN115409371A (zh)

Similar Documents

Publication Publication Date Title
CN111950723B (zh) 神经网络模型训练方法、图像处理方法、装置及终端设备
CN110148400B (zh) 发音类型的识别方法、模型的训练方法、装置及设备
CN110659573B (zh) 一种人脸识别方法、装置、电子设备及存储介质
CN106356077B (zh) 一种笑声检测方法及装置
CN109685805B (zh) 一种图像分割方法及装置
CN110751960A (zh) 噪声数据的确定方法及装置
CN110689885A (zh) 机器合成语音识别方法、装置、存储介质及电子设备
CN113963149A (zh) 一种医疗票据图片的模糊判断方法、系统、设备及介质
CN115409371A (zh) 银行服务质量反馈方法及装置
CN115375965A (zh) 一种目标场景识别的预处理方法、目标场景识别方法
CN111738863B (zh) 用户数据筛选方法、装置及系统
CN111259689B (zh) 用于发送信息的方法和装置
CN114842382A (zh) 一种生成视频的语义向量的方法、装置、设备及介质
CN114049126A (zh) 安全认证方法及装置
CN110610697B (zh) 一种语音识别方法及装置
CN114004974A (zh) 对弱光环境下拍摄的图像的优化方法及装置
CN113206998A (zh) 一种业务录制的视频数据质检方法及装置
CN113129252A (zh) 一种图像评分方法及电子设备
CN110648203A (zh) 银行产品信息推送方法及装置
CN109887487A (zh) 一种数据筛选方法、装置及电子设备
CN112019786B (zh) 智能教学录屏方法和系统
CN114363673B (zh) 视频裁剪方法、模型训练方法及装置
CN116866211B (zh) 一种改进的深度合成检测方法和系统
CN114140140B (zh) 一种场景筛选方法、装置及设备
CN117496594A (zh) 动作识别方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination