CN115543090A - 话题转移方法、装置、电子设备和存储介质 - Google Patents

Abstract

本发明提供一种话题转移方法、装置、电子设备和存储介质，其中方法包括：基于交互数据中用户回应内容的回应时长、回应丰富度、回应关联度中至少一种，确定用户对于当前话题内容的话题兴趣度；基于各个用户情绪间的时序关系，以及各个用户情绪中相邻用户情绪之间的差异度，从各个用户情绪中确定目标用户情绪；在话题兴趣度低于预设兴趣度阈值的情况下，基于目标用户情绪确定转移话题内容，并输出转移话题内容，克服了传统方案中针对于用户的兴趣评估过程较为粗糙，以及话题转移十分突兀，以致用户体验不佳的缺陷，实现了在当前话题内容的基础上引入其他话题内容，保证了会话过程的持续性和连贯性，以及话题内容的关联度和贴切度，优化了用户体验。

Description

话题转移方法、装置、电子设备和存储介质

技术领域

本发明涉及人机交互技术领域，尤其涉及一种话题转移方法、装置、电子设备和存储介质。

背景技术

随着科学技术的发展和社会的不断进步，人们对于机器人的关注日益加重，特别是在人机交互领域，机器人更加的拟人化尤为重要，例如，在虚拟人或陪伴机器人领域中，机器人拟人特性的强弱可以直接影响用户体验。

目前，在人机会话过程中机器人能够以文字、语音等方式与用户进行互动，并可以在确认用户对于当前话题的兴趣状态不佳的情况下，及时调整话题内容，但是目前对于用户的兴趣状态的评判往往较为粗糙，并且在话题调整的过程中常出现调整前后内容差异极大的情况，这不仅导致话题调整过程的精度较低，还使得话题转变十分突兀，以致用户体验较差。

发明内容

本发明提供一种话题转移方法、装置、电子设备和存储介质，用以解决现有技术中针对于用户的兴趣状态评估较为粗糙，以及话题转移十分突兀，以致转移前后内容差异过大，致使用户体验不佳的缺陷，精进了兴趣评估过程，实现了用户体验的优化。

本发明提供一种话题转移方法，包括：

确定会话过程中的交互数据，以及多个用户情绪，所述交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；

基于所述交互数据，确定用户对于当前话题内容的话题兴趣度；

基于各个用户情绪间的时序关系，以及所述各个用户情绪中相邻用户情绪之间的差异度，从所述各个用户情绪中确定目标用户情绪；

在所述话题兴趣度低于预设兴趣度阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容。

根据本发明提供的一种话题转移方法，所述基于所述交互数据，确定用户对于当前话题内容的话题兴趣度，包括：

基于第一兴趣度、第二兴趣度、第三兴趣度中至少一种，确定所述用户对于当前话题内容的话题兴趣度；

所述第一兴趣度基于所述用户回应内容的回应时长和第一阈值确定，所述第二兴趣度基于所述用户回应内容的回应丰富度和第二阈值确定，所述第三兴趣度基于所述用户回应内容的回应关联度和第三阈值确定。

根据本发明提供的一种话题转移方法，所述回应丰富度基于所述用户回应内容的内容字符长度和/或内容采集时长确定；

所述回应关联度基于所述用户回应内容与所述当前话题内容之间的逻辑关联度和/或内容关联度确定。

根据本发明提供的一种话题转移方法，所述在所述话题兴趣度低于预设兴趣度阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容，包括：

在所述话题兴趣度低于预设兴趣度阈值，且所述目标用户情绪对应的会话时间与当前时间之间的间隔时长超过预设时长阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容。

根据本发明提供的一种话题转移方法，所述基于所述目标用户情绪确定转移话题内容，包括：

基于各个用户情绪间的时序关系，从所述各个用户情绪中确定所述目标用户情绪的相邻用户情绪；

基于所述目标用户情绪，以及所述目标用户情绪的相邻用户情绪，进行用户情绪分析，并基于用户情绪分析所得的情绪分析结果确定转移话题内容。

根据本发明提供的一种话题转移方法，所述输出所述转移话题内容，之后还包括：

确定所述用户对于所述转移话题内容的转移话题兴趣度，以及对应于所述转移话题内容的会话过程中的多个转移用户情绪；

基于各个转移用户情绪与所述目标用户情绪之间的差异度，从所述各个转移用户情绪中，确定目标转移用户情绪；

在所述转移话题兴趣度低于所述预设兴趣度阈值的情况下，基于所述目标转移用户情绪确定二次转移话题内容，并输出所述二次转移话题内容。

根据本发明提供的一种话题转移方法，所述多个用户情绪基于如下步骤确定：

获取会话过程中的多个用户图像；

确定各个用户图像中的人脸区域和/或肢体动作区域；

对各个人脸区域进行人脸表情识别，得到多个表情情绪，和/或，对各个肢体动作区域进行动作识别，得到多个动作情绪；

基于多个表情情绪和/或多个动作情绪，确定多个用户情绪。

本发明还提供一种话题转移装置，包括：

数据确定单元，用于会话过程中的交互数据，以及多个用户情绪，所述交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；

话题转移单元，用于基于所述交互数据，确定用户对于当前话题内容的话题兴趣度；

基于各个用户情绪间的时序关系，以及所述各个用户情绪中相邻用户情绪之间的差异度，从所述各个用户情绪中确定目标用户情绪；

在所述话题兴趣度低于预设兴趣度阈值的情况下，基于目标用户情绪确定转移话题内容，并输出所述转移话题内容。

本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述的话题转移方法。

本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述的话题转移方法。

本发明提供的话题转移方法、装置、电子设备和存储介质，通过会话过程中不同层面的交互数据，从多个角度评估用户对于当前话题内容的话题兴趣度，并在话题兴趣度低于预设兴趣度阈值的情况下，调用会话过程中情绪转变最为剧烈的目标用户情绪作为依据进行用户情绪分析，以根据情绪分析结果确定转移话题内容，并输出转移话题内容，克服了传统方案中针对于用户的兴趣评估过程较为粗糙，以及话题转移十分突兀，以致转移前后内容差异过大，致使用户体验不佳的缺陷，实现了在当前话题内容的基础上引入其他话题内容，保证了会话过程的持续性和连贯性，以及话题内容的关联度和贴切度，优化了用户体验。

附图说明

为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明提供的话题转移方法的流程示意图；

图2是本发明提供的转移话题内容的确定过程的示意图；

图3是本发明提供的二次话题转移过程的示意图；

图4是本发明提供的用户情绪的确定过程的示意图；

图5是本发明提供的话题转移装置的结构示意图；

图6是本发明提供的电子设备的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明提供一种话题转移方法，旨在通过会话过程中的交互数据，从多个层面评估用户对于当前话题内容的话题兴趣度，并在确定用户对于当前话题内容的话题兴趣度较弱的情况下，调用会话过程中情绪转变最为剧烈的用户情绪作为依据进行用户情绪分析，以根据情绪分析结果确定转移话题内容，实现了在当前话题内容的基础上引入其他话题内容，保证了会话过程的持续性和连贯性，以及话题内容的关联度和贴切度，优化了用户体验，图1是本发明提供的话题转移方法的流程示意图，如图1所示，该方法的执行主体可以是能够与用户进行会话的设备，例如，机器人、虚拟人等，还可以是直接控制设备的服务端，本发明实施例对此不作具体限定。该方法包括：

步骤110，确定会话过程中的交互数据，以及多个用户情绪，交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；

具体地，在用户与设备进行会话的过程中，会持续采集用户图像，此处的用户图像可以通过图像采集设备采集得到，图像采集设备则可以是相机、摄像头、扫描仪等，其可以装设于设备上，也可以独立于设备之外，本发明实施例对此不做具体限定。

而在得到多个用户图像之后，即可对其进行用户情绪分析，以确定会话过程中的多个用户情绪，即可以据此用户图像中的用户表情所表征的表情情绪，和/或，肢体动作所表征的动作情绪，确定用户情绪。

此外，用户情绪还可以依据会话过程中用户与设备间的会话语音确定，该语音可以是用户对于设备输出内容的回应语音，亦可以称之为对应于设备输出内容的用户回应语音，即可以以用户回应语音为基准，分析用户的语气态度、语调平缓、语义信息等，以确定用户情绪。

在确定多个用户情绪的同时，还需获取会话过程中用户与设备间的交互数据，该交互数据为用户对于设备输出内容的回应内容(用户回应内容)的相关数据，其可以是用户回应内容的回应时长、回应丰富度、回应关联度中的任意一种或多种。此处，设备输出内容可以是针对于当前话题内容的相关内容，例如，当前话题内容的背景介绍、依据当前话题内容所提出的问题、当前话题内容的拓展内容等。

其中，回应时长为设备输出内容的输出时间至用户回应内容的采集时间之间的间隔时长；此处的采集时间是指采集到用户回应内容的初始时刻，并非采集完成后的时刻；回应丰富度为用户对于设备输出内容的回应内容的丰富程度，其可以从用户回应内容的内容长短和/或用户回应内容的采集时间长短层面进行衡量；回应关联度则为用户回应内容与设备输出内容之间的关联度，又由于设备输出内容是与当前话题内容相关联的，因而回应关联度也可以是用户回应内容与当前话题内容之间的关联度，其可以从用户回应内容与当前话题内容的逻辑层面、内容层面(语义层面)等进行考量。

步骤120，基于交互数据，确定用户对于当前话题内容的话题兴趣度；

具体地，在步骤110中，得到会话过程中的交互数据之后，即可执行步骤120，利用交互数据，确定用户对于当前话题内容的话题兴趣度，具体可以是，由于交互数据中包含多个层面的数据，因而可以从不同层面入手，利用对应层面的数据，评估用户在这一层面下对于当前话题内容的兴趣状态，从而得到用户在不同层面下的话题兴趣度。

进一步地，可以结合不同层面下用户对于当前话题内容的话题兴趣度，以及交互数据中不同层面的数据进行数据分析，以从整体层面评估用户的兴趣状态，从而可以得到用户对于当前话题内容的话题兴趣度，如此即可保证兴趣评估过程的精度，避免了因评估过程太过粗糙导致后续话题转移出现较大偏差的情况，实现了兴趣评估过程的精细化和全面化。

本发明实施例中，可以通过交互数据中用户回应内容的回应时长，评估用户的兴趣状态，即可以依据回应时长的长短，对应估计用户对于当前话题内容的话题兴趣度的高低，回应时长越短，用户对于当前话题内容的话题兴趣度越高，回应时长越长则话题兴趣度越低；也可以通过回应丰富度的高低评估用户对于当前话题内容的话题兴趣度的高低，即回应丰富度越高，用户对于当前话题内容的话题兴趣度越高，回应丰富度越低则话题兴趣度越低；或者可以通过回应关联度的强弱评估用户对于当前话题内容的话题兴趣度，即回应关联度越强则用户对于当前话题内容的话题兴趣度越高，回应关联度越弱则话题兴趣度越低。

还可以结合用户回应内容的回应时长、回应丰富度、回应关联度中的任意两种，或者同时结合上述三种，以确定用户对于当前话题内容的话题兴趣度，即可以从整体层面评估用户的兴趣状态，通过综合性的分析即可得到整体层面上用户对于当前话题内容的话题兴趣度。

步骤130，基于各个用户情绪间的时序关系，以及各个用户情绪中相邻用户情绪之间的差异度，从各个用户情绪中确定目标用户情绪；

具体地，在经过步骤120，确定会话过程中的多个用户情绪之后，即可执行步骤130，依据各个用户情绪间的时序关系，以及各个用户情绪中相邻用户情绪之间的差异度，从各个用户情绪中确定目标用户情绪，具体过程可以包括如下步骤：

首先，需确定各个用户情绪之间的时序关系，此处的时序关系实际上是用户的各个情绪在会话过程中出现的先后顺序，亦可以理解为，各个用户情绪对应的用户图像的采集顺序；

随即，可以以各个用户情绪间的时序关系为基准，对各个用户情绪进行差异分析，以确定各个用户情绪中相邻用户情绪之间的差异度，具体可以是，参照各个用户情绪间的时序关系，对各个用户情绪进行排序，得到用户情绪序列，然后对用户情绪序列中两两相邻的用户情绪进行差异分析，以确定两两相邻的用户情绪之间的差异度；

此后，即可以用户情绪序列中两两相邻的用户情绪之间的差异度为参考，从各个用户情绪中，筛选出目标用户情绪，此处的目标用户情绪为多个用户情绪中情绪转变最为剧烈的用户情绪，其可以通过相邻用户情绪之间的差异度进行反映，即相邻用户情绪之间的差异度越大，则表明用户的情绪变化越大，即情绪转变越剧烈；反之，相邻用户情绪之间的差异度越小则用户的情绪变化越小，即情绪转变越平缓。

而本发明实施例中，可以从两两相邻的用户情绪之间的差异度中，选取最大的差异度，并确定其对应的用户情绪作为目标用户情绪。

步骤140，在话题兴趣度低于预设兴趣度阈值的情况下，基于目标用户情绪确定转移话题内容，并输出转移话题内容。

具体地，经过步骤120和步骤130得到用户对于当前话题的话题兴趣度，以及目标用户情绪之后，即可执行步骤140，利用话题兴趣度以及预设兴趣度阈值，判断是否满足话题转移条件，具体可以是，在话题兴趣度低于预设兴趣度阈值的情况下，即用户对于当前话题内容的话题兴趣度较低的情况下，换而言之，用户对于当前话题内容不感兴趣的情况下，确定满足话题转移条件，此时可以进行话题转移，因而，需确定转移话题内容并进行输出。

此处，预设兴趣度阈值为预先设定的，用于判断用户对于当前话题内容是否感兴趣的数值，其通常为能够容忍的表示用户对于当前话题内容感兴趣的最小数值，可以根据实际需求相应设定，例如，可以是20％、30％、50％等。

而考虑到传统方案中转移前后内容差异过大，话题转移突兀会导致用户转变不及时，以致用户体验不佳的情况，本发明实施例中将目标用户情绪作为依据，通过分析确定转移话题内容，即以目标用户情绪为基准进行用户情绪分析，以通过情绪分析结果确定转移话题内容。

本发明实施例中，将目标用户情绪作为纽带，以贯联转移前后的话题内容，能够保证会话过程的连贯性，以及话题内容间的关联度，解决了传统方案中转移前后内容差异过大，致使用户体验不佳的问题，实现了用户体验的提升。

本发明提供的话题转移方法，通过会话过程中不同层面的交互数据，从多个角度评估用户对于当前话题内容的话题兴趣度，并在话题兴趣度低于预设兴趣度阈值的情况下，调用会话过程中情绪转变最为剧烈的目标用户情绪作为依据进行用户情绪分析，以根据情绪分析结果确定转移话题内容，并输出转移话题内容，克服了传统方案中针对于用户的兴趣评估过程较为粗糙，以及话题转移十分突兀，以致转移前后内容差异过大，致使用户体验不佳的缺陷，实现了在当前话题内容的基础上引入其他话题内容，保证了会话过程的持续性和连贯性，以及话题内容的关联度和贴切度，优化了用户体验。

基于上述实施例，步骤120包括：

基于第一兴趣度、第二兴趣度、第三兴趣度中至少一种，确定用户对于当前话题内容的话题兴趣度；

第一兴趣度基于用户回应内容的回应时长和第一阈值确定，第二兴趣度基于用户回应内容的回应丰富度和第二阈值确定，第三兴趣度基于用户回应内容的回应关联度和第三阈值确定。

具体地，步骤120中，根据会话过程中的交互数据，确定用户对于当前话题内容的话题兴趣度的过程，可以包括如下步骤：

首先，需分别利用交互数据中用户回应内容的回应时长、回应丰富度和回应关联度，确定针对于当前话题内容的第一兴趣度、第二兴趣度和第三兴趣度，具体可以是，根据用户回应内容的回应时长，以及第一阈值，确定用户对于当前话题内容的第一兴趣度，即在回应时长小于第一阈值的情况下，可以确定用户回应迅速，因而可知确定用户对于当前话题内容的第一兴趣度高；对应地，在回应时长大于等于第一阈值的情况下，可以确定用户回应缓慢，因而可知确定用户对于当前话题内容的第一兴趣度较低；此处，第一兴趣度的具体数值可以根据回应时长与第一阈值之间的差值确定；

也可以根据用户回应内容的回应丰富度，以及第二阈值，确定用户对于当前话题内容的第二兴趣度，即在回应丰富度大于第二阈值的情况下，可以确定用户回应内容丰富，因而可知用户对于当前话题内容的第二兴趣度高；对应地，在回应丰富度小于等于第二阈值的情况下，可以确定用户回应内容单调、匮乏，因而可知用户对于当前话题内容的第二兴趣度较低；此处，第二兴趣度的具体数值可以根据回应丰富度与第二阈值之间的差值确定；

还可以根据用户回应内容的回应关联度，以及第三阈值，确定用户对于当前话题内容的第三兴趣度，即在回应关联度大于第三阈值的情况下，可以确定用户回应内容与当前话题内容之间的关联度高，因而可知用户对于当前话题内容的第三兴趣度高；对应地，在回应关联度小于等于第三阈值的情况下，可以确定用户回应内容单调、匮乏，因而可知用户对于当前话题内容的第三兴趣度较低；此处，第三兴趣度的具体数值可以根据回应关联度与第三阈值之间的差值确定；

此处，第一阈值、第二阈值和第三阈值均为预先设定的，可以作为对应角度下的参照值，用以评估用户对于当前话题内容的兴趣程度，具体数值可以根据实际需求相应设定，例如，第一阈值可以是8秒、10秒、15秒等，第二阈值可以是50％、60％、75％等，第三阈值可以是60％、70％、75％等。

随即，可以依据第一兴趣度、第二兴趣度、第三兴趣度中的任意一种或多种，确定用户对于当前话题内容的话题兴趣度，即可以直接将用户对于当前话题内容的第一兴趣度、第二兴趣度、第三兴趣度中的任意一种，作为用户对于当前话题内容的话题兴趣度，也可以结合第一兴趣度、第二兴趣度和第三兴趣度中的至少两种，或者同时结合上述三种，以确定用户对于当前话题内容的话题兴趣度，即可以从多个层面评估用户的兴趣状态，结合不同角度的兴趣度进行综合分析，以得到整体层面上用户对于当前话题内容的话题兴趣度。

基于上述实施例，回应丰富度基于用户回应内容的内容字符长度和/或内容采集时长确定；

回应关联度基于用户回应内容与当前话题内容之间的逻辑关联度和/或内容关联度确定。

具体地，交互数据中用户回应内容的回应丰富度可以包括用户回应内容的内容字符长度，和/或，用户回应内容的内容采集时长。其中，内容字符长度为用户回应内容的字符数，内容采集时长为用户回应内容的采集时长，对于至语音和文字，采集时长可以是回应内容的输入时长，以及以语音形式呈现的回应内容的陈述时长。

内容字符长度越长，用户回应内容的回应丰富度越高，反之，内容字符长度越短，用户回应内容的回应丰富度越低；同理，内容采集时长越长，用户回应内容的回应丰富度越高，反之，内容采集时长越短，用户回应内容的回应丰富度越低。

而交互数据中用户回应内容的回应关联度则包括用户回应内容与当前话题内容之间的逻辑关联度，和/或，用户回应内容与当前话题内容之间的内容关联度。其中，逻辑关联度是指用户回应内容与当前话题内容在逻辑层面的关联程度，内容关联度则表示用户回应内容与当前话题内容在语义层面的关联程度。

逻辑关联度越强，用户回应内容的回应关联度越高，反之，逻辑关联度越弱，则用户回应内容的回应关联度也越弱；同理，内容关联度越强，用户回应内容的回应关联度越高，反之，内容关联度越弱，则用户回应内容的回应关联度也越弱。

本发明实施例中，结合不同层面的数据以确定用户回应内容的回应丰富度和回应关联度，能够保证交互数据的准确性和全面性，从而为后续兴趣评估过程精度的提升提供助力，进而为用户体验的优化奠定了基础。

基于上述实施例，步骤140包括：

在话题兴趣度低于预设兴趣度阈值，且目标用户情绪对应的会话时间与当前时间之间的间隔时长超过预设时长阈值的情况下，基于目标用户情绪确定转移话题内容，并输出转移话题内容。

考虑到传统方案中的话题转移过程是立即执行的，即是在确定用户对于当前话题内容的兴趣状态不佳的情况下，立即调整话题内容，但是瞬时的话题转移，会导致用户无法及时反映，并且话题转移太过迅速会使得用户无法及时从上一话题内容中抽身，从而无法投入下一话题内容，进而导致用户体验极差。

鉴于此，本发明实施例中提出了预置时段后进行话题转移，即步骤140中，在话题兴趣度低于预设兴趣度阈值时，依据目标用户情绪确定转移话题内容，并输出转移话题内容的过程，可以进一步包括：在话题兴趣度低于预设兴趣度阈值，且目标用户情绪对应的会话时间与当前时间之间的间隔时长超过预设时长阈值的情况下，即用户对于当前话题内容不感兴趣，且与用户情绪发生剧烈转变的会话时间之间的间隔时长超过预设时长阈值的情况下，以目标用户情绪为基准进行用户情绪分析，并根据情绪分析结果确定转移话题内容，以及输出转移话题内容。此处预设时长阈值可以根据实际需求预先设定，例如，可以是4秒、5秒等。

对应地，在目标用户情绪对应的会话时间与当前时间之间的间隔时长小于等于预设时长阈值的情况下，暂不进行话题转移，直至当前时间与目标用户情绪对应的会话时间之间的间隔时长超过预设时长阈值，则根据目标用户情绪，确定转移话题内容并进行输出。

基于上述实施例，图2是本发明提供的转移话题内容的确定过程的流程示意图，如图2所示，步骤140中，基于目标用户情绪确定转移话题内容，包括：

步骤210，基于各个用户情绪间的时序关系，从各个用户情绪中确定目标用户情绪的相邻用户情绪；

步骤220，基于目标用户情绪，以及目标用户情绪的相邻用户情绪，进行用户情绪分析，并基于用户情绪分析所得的情绪分析结果确定转移话题内容。

具体地，步骤140中，根据目标用户情绪，确定转移转移话题内容的过程，可以包括如下步骤：

步骤210，首先可以以各个用户情绪之间的时序关系为参考，从各个用户情绪中确定与目标用户情绪相邻的用户情绪，即可以从参照时序关系排列的用户情绪序列中，选取目标用户情绪前后的用户情绪，作为目标用户情绪的相邻用户情绪；

步骤220，随即可以依据目标用户情绪，以及目标用户情绪的相邻用户情绪，进行用户情绪分析，从而得到情绪分析结果，即可以以目标用户情绪，以及目标用户情绪的相邻用户情绪为基准，分析用户的情绪转变，在此基础上结合设备输出内容和/或当前话题内容，预估用户情绪转变的原因，以及用户情绪转变在时间层面和内容层面的关键点，从而得到情绪分析结果。

进一步地，可以根据用户的情绪分析结果，确定转移话题内容，即可以针对于情绪分析结果中用户情绪转变的原因、用户情绪转变的关键点等提出问题，或者可以根据情绪分析结果避开用户“雷点”，提出与用户情绪转变的原因和/或情绪转变的关键点不相关，却与当前话题内容具有一定关联性的问题，如此可在一定程度上避免会话过程中话题的二次转移，最大程度保障会话过程的持续性和连贯性，以及话题内容的关联度和贴切度。

基于上述实施例，图3是本发明提供的二次话题转移过程的示意图，如图3所示，步骤140中，输出转移话题内容，之后还包括：

步骤310，确定用户对于转移话题内容的转移话题兴趣度，以及对应于转移话题内容的会话过程中的多个转移用户情绪；

步骤320，基于各个转移用户情绪与目标用户情绪之间的差异度，从各个转移用户情绪中，确定目标转移用户情绪；

步骤330，在转移话题兴趣度低于预设兴趣度阈值的情况下，基于目标转移用户情绪确定二次转移话题内容，并输出二次转移话题内容。

具体地，在步骤140中，根据目标用户情绪，确定转移话题内容并输出转移话题内容之后，若再次满足话题转移条件，则可以进行二次转移，具体过程包括如下步骤：

步骤310，首先需要确定会话过程中经初次话题转移之后，用户针对于初次话题转移所确定的转移话题内容的兴趣度，即转移话题兴趣度，同时，还需确定用户在初次话题转移之后的会话过程中的多个用户情绪，即对应于转移话题内容的会话过程中的多个转移用户情绪；此处，转移话题兴趣度和转移用户情绪的确定过程与上文描述的初次话题转移的话题兴趣度和用户情绪的确定过程基本一致，不再赘述；

步骤320，随即可以依据各个转移用户情绪与目标用户情绪之间的差异度，从各个转移用户情绪中确定目标转移用户情绪，具体可以是，以目标用户情绪为基准，针对于各个转移用户情绪进行差异分析，分别确定各个转移用户情绪与目标用户情绪之间的差异度，并以此差异度为参考，从各个用户转移情绪中选取出目标转移用户情绪，此处的目标转移用户情绪为多个转移用户情绪中与目标用户情绪之间的差异最大的转移用户情绪；

步骤330，此后即可利用转移话题兴趣度以及预设兴趣度阈值，判断是否满足话题转移条件，并在满足话题转移条件的情况下，再次进行话题转移，具体可以是，在转移话题兴趣度低于预设兴趣度阈值的情况下，即用户对于转移话题内容的转移话题兴趣度较低的情况下，换而言之，用户对于转移话题内容不感兴趣的情况下，根据目标转移用户情绪确定二次转移话题内容，并输出二次转移话题内容，即以目标用户情绪为依据进行用户情绪分析，并根据情绪分析结果确定二次转移话题内容，以及输出二次转移话题内容。

此处，以目标转移用户情绪为纽带，贯联转移话题内容和二次转移话题内容，能够保证会话过程的连贯性，以及话题内容间的关联度，克服了传统方案中针对于用户的兴趣评估过程较为粗糙，以及话题转移十分突兀，以致转移前后内容差异过大，致使用户体验不佳的缺陷，实现了在转移话题内容的基础上引入二次转移话题内容，保证了会话过程的持续性，以及话题内容间的贴切度，优化了用户体验。

基于上述实施例，图4是本发明提供的用户情绪的确定过程的示意图，如图4所示，多个用户情绪基于如下步骤确定：

步骤410，获取会话过程中的多个用户图像；

步骤420，确定各个用户图像中的人脸区域和/或肢体动作区域；

步骤430，对各个人脸区域进行人脸表情识别，得到多个表情情绪，和/或，对各个肢体动作区域进行动作识别，得到多个动作情绪；

步骤440，基于多个表情情绪和/或多个动作情绪，确定多个用户情绪。

具体地，会话过程中多个用户情绪的确定过程，包括如下步骤：

步骤410，首先需要获取会话过程中的多个用户图像，此处的用户图像可以是图像采集设备在会话过程中按照一定帧率采集的用户的图像，而在获取得到多个用户图像的同时，还需确定多个用户图像之间时序关系，此时序关系即各个用户图像在会话过程中出现的先后顺序，即各个用户图像的采集顺序；

步骤420，而由于用户图像中的面部表情和肢体动作均能够表征用户情绪，因而在得到多个用户图像后，可以从多个用户图像中确定出用户的人脸区域和/或肢体动作区域，即可以对各个用户图像进行区域划分，以从中确定用户的各个人脸区域和/或肢体动作区域；

步骤430，随后可以对各个人脸区域进行人脸表情识别，以识别出用户的面部表情对应的情绪，从而得到用户的多个表情情绪；例如，当人脸区域对应的用户的面部表情为开怀大笑时，可以确定用户的表情情绪为高兴；相应地，当用户的面部表情为皱眉和/或嘴角下拉时，可以确定用户的表情情绪为愤怒、难过、不满等；

也可以对各个肢体动作区域进行动作识别，以识别用户的肢体动作及其表征的情绪，最终得到用户的动作情绪；例如，当用户的肢体动作区域对应的肢体动作为拍手时，可以确定用户的动作情绪为高兴；相应地，当肢体动作为跺脚时，可以确定用户的动作情绪为不满；

还可以对用户的各个人脸区域进行人脸表情识别，以及对各个肢体动作区域进行动作识别，分别得到用户的多个表情情绪，以及多个动作情绪；

步骤440，此后即可根据用户的多个表情情绪和/或多个动作情绪，确定多个用户情绪，即可以直接将表情情绪作为用户情绪，或者将动作情绪作为用户情绪，又或者在各个表情情绪的基础上，结合与之对应的动作情绪，确定各个用户情绪，本发明实施例对此不做具体限定。

基于上述实施例，本发明提供的话题转移方法的总体流程，包括如下步骤：

首先，确定会话过程中的交互数据，以及多个用户情绪，交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；其中，多个用户情绪基于如下步骤确定：获取会话过程中的多个用户图像；确定各个用户图像中的人脸区域和/或肢体动作区域；对各个人脸区域进行人脸表情识别，得到多个表情情绪，和/或，对各个肢体动作区域进行动作识别，得到多个动作情绪；基于多个表情情绪和/或多个动作情绪，确定多个用户情绪；

随即，基于交互数据，确定用户对于当前话题内容的话题兴趣度，具体可以是，基于第一兴趣度、第二兴趣度、第三兴趣度中至少一种，确定用户对于当前话题内容的话题兴趣度；第一兴趣度基于用户回应内容的回应时长和第一阈值确定，第二兴趣度基于用户回应内容的回应丰富度和第二阈值确定，第三兴趣度基于用户回应内容的回应关联度和第三阈值确定；

其中，回应丰富度基于用户回应内容的内容字符长度和/或内容采集时长确定；回应关联度基于用户回应内容与当前话题内容之间的逻辑关联度和/或内容关联度确定。

随后，基于各个用户情绪间的时序关系，以及各个用户情绪中相邻用户情绪之间的差异度，从各个用户情绪中确定目标用户情绪；

此后，在话题兴趣度低于预设兴趣度阈值的情况下，基于目标用户情绪确定转移话题内容，并输出转移话题内容。

进一步地，在话题兴趣度低于预设兴趣度阈值的情况下，基于目标用户情绪确定转移话题内容，并输出转移话题内容的过程，具体可以是，在话题兴趣度低于预设兴趣度阈值，且目标用户情绪对应的会话时间与当前时间之间的间隔时长超过预设时长阈值的情况下，基于目标用户情绪确定转移话题内容，并输出转移话题内容。

其中，基于目标用户情绪确定转移话题内容的过程，具体包括如下步骤：基于各个用户情绪间的时序关系，从各个用户情绪中确定目标用户情绪的相邻用户情绪；基于目标用户情绪，以及目标用户情绪的相邻用户情绪，进行用户情绪分析，并基于用户情绪分析所得的情绪分析结果确定转移话题内容。

而在输出转移话题内容之后，还可以确定用户对于转移话题内容的转移话题兴趣度，以及对应于转移话题内容的会话过程中的多个转移用户情绪；基于各个转移用户情绪与所述目标用户情绪之间的差异度，从所述各个转移用户情绪中，确定目标转移用户情绪；在转移话题兴趣度低于预设兴趣度阈值的情况下，基于目标转移用户情绪确定二次转移话题内容，并输出二次转移话题内容。

本发明实施例提供的方法，通过会话过程中不同层面的交互数据，从多个角度评估用户对于当前话题内容的话题兴趣度，并在话题兴趣度低于预设兴趣度阈值的情况下，调用会话过程中情绪转变最为剧烈的目标用户情绪作为依据进行用户情绪分析，以根据情绪分析结果确定转移话题内容，并输出转移话题内容，克服了传统方案中针对于用户的兴趣评估过程较为粗糙，以及话题转移十分突兀，以致转移前后内容差异过大，致使用户体验不佳的缺陷，实现了在当前话题内容的基础上引入其他话题内容，保证了会话过程的持续性和连贯性，以及话题内容的关联度和贴切度，优化了用户体验。

下面对本发明提供的话题转移装置进行描述，下文描述的话题转移装置与上文描述的话题转移方法可相互对应参照。

图5是本发明提供的话题转移装置的结构示意图，如图5所示，该装置包括：

数据确定单元510，用于会话过程中的交互数据，以及多个用户情绪，所述交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；

话题转移单元520，用于基于所述交互数据，确定用户对于当前话题内容的话题兴趣度；

基于各个用户情绪间的时序关系，以及所述各个用户情绪中相邻用户情绪之间的差异度，从所述各个用户情绪中确定目标用户情绪；

在所述话题兴趣度低于预设兴趣度阈值的情况下，基于目标用户情绪确定转移话题内容，并输出所述转移话题内容。

本发明提供的话题转移装置，通过会话过程中不同层面的交互数据，从多个角度评估用户对于当前话题内容的话题兴趣度，并在话题兴趣度低于预设兴趣度阈值的情况下，调用会话过程中情绪转变最为剧烈的目标用户情绪作为依据进行用户情绪分析，以根据情绪分析结果确定转移话题内容，并输出转移话题内容，克服了传统方案中针对于用户的兴趣评估过程较为粗糙，以及话题转移十分突兀，以致转移前后内容差异过大，致使用户体验不佳的缺陷，实现了在当前话题内容的基础上引入其他话题内容，保证了会话过程的持续性和连贯性，以及话题内容的关联度和贴切度，优化了用户体验。

基于上述实施例，话题转移单元520用于：

基于第一兴趣度、第二兴趣度、第三兴趣度中至少一种，确定所述用户对于当前话题内容的话题兴趣度；

所述第一兴趣度基于所述用户回应内容的回应时长和第一阈值确定，所述第二兴趣度基于所述用户回应内容的回应丰富度和第二阈值确定，所述第三兴趣度基于所述用户回应内容的回应关联度和第三阈值确定。

基于上述实施例，所述回应丰富度基于所述用户回应内容的内容字符长度和/或内容采集时长确定；

所述回应关联度基于所述用户回应内容与所述当前话题内容之间的逻辑关联度和/或内容关联度确定。

基于上述实施例，话题转移单元520用于：

在所述话题兴趣度低于预设兴趣度阈值，且所述目标用户情绪对应的会话时间与当前时间之间的间隔时长超过预设时长阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容。

基于上述实施例，话题转移单元520用于：

基于各个用户情绪间的时序关系，从所述各个用户情绪中确定所述目标用户情绪的相邻用户情绪；

基于所述目标用户情绪，以及所述目标用户情绪的相邻用户情绪，进行用户情绪分析，并基于用户情绪分析所得的情绪分析结果确定转移话题内容。

基于上述实施例，话题转移单元520还用于：

确定所述用户对于所述转移话题内容的转移话题兴趣度，以及对应于所述转移话题内容的会话过程中的多个转移用户情绪；

基于各个转移用户情绪与所述目标用户情绪之间的差异度，从所述各个转移用户情绪中，确定目标转移用户情绪；

在所述转移话题兴趣度低于所述预设兴趣度阈值的情况下，基于所述目标转移用户情绪确定二次转移话题内容，并输出所述二次转移话题内容。

基于上述实施例，数据确定单元510用于：

获取会话过程中的多个用户图像；

确定各个用户图像中的人脸区域和/或肢体动作区域；

对各个人脸区域进行人脸表情识别，得到多个表情情绪，和/或，对各个肢体动作区域进行动作识别，得到多个动作情绪；

基于多个表情情绪和/或多个动作情绪，确定多个用户情绪。

图6示例了一种电子设备的实体结构示意图，如图6所示，该电子设备可以包括：处理器(processor)610、通信接口(Communications Interface)620、存储器(memory)630和通信总线640，其中，处理器610，通信接口620，存储器630通过通信总线640完成相互间的通信。处理器610可以调用存储器630中的逻辑指令，以执行话题转移方法，该方法包括：确定会话过程中的交互数据，以及多个用户情绪，所述交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；基于所述交互数据，确定用户对于当前话题内容的话题兴趣度；基于各个用户情绪间的时序关系，以及所述各个用户情绪中相邻用户情绪之间的差异度，从所述各个用户情绪中确定目标用户情绪；在所述话题兴趣度低于预设兴趣度阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容。

此外，上述的存储器630中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法所提供的话题转移方法，该方法包括：确定会话过程中的交互数据，以及多个用户情绪，所述交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；基于所述交互数据，确定用户对于当前话题内容的话题兴趣度；基于各个用户情绪间的时序关系，以及所述各个用户情绪中相邻用户情绪之间的差异度，从所述各个用户情绪中确定目标用户情绪；在所述话题兴趣度低于预设兴趣度阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容。

又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各方法所提供的话题转移方法，该方法包括：确定会话过程中的交互数据，以及多个用户情绪，所述交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；基于所述交互数据，确定用户对于当前话题内容的话题兴趣度；基于各个用户情绪间的时序关系，以及所述各个用户情绪中相邻用户情绪之间的差异度，从所述各个用户情绪中确定目标用户情绪；在所述话题兴趣度低于预设兴趣度阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容。

以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种话题转移方法，其特征在于，包括：

确定会话过程中的交互数据，以及多个用户情绪，所述交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；

基于所述交互数据，确定用户对于当前话题内容的话题兴趣度；

基于各个用户情绪间的时序关系，以及所述各个用户情绪中相邻用户情绪之间的差异度，从所述各个用户情绪中确定目标用户情绪；

在所述话题兴趣度低于预设兴趣度阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容。

2.根据权利要求1所述的话题转移方法，其特征在于，所述基于所述交互数据，确定用户对于当前话题内容的话题兴趣度，包括：

基于第一兴趣度、第二兴趣度、第三兴趣度中至少一种，确定所述用户对于当前话题内容的话题兴趣度；

所述第一兴趣度基于所述用户回应内容的回应时长和第一阈值确定，所述第二兴趣度基于所述用户回应内容的回应丰富度和第二阈值确定，所述第三兴趣度基于所述用户回应内容的回应关联度和第三阈值确定。

3.根据权利要求2所述的话题转移方法，其特征在于，

所述回应丰富度基于所述用户回应内容的内容字符长度和/或内容采集时长确定；

所述回应关联度基于所述用户回应内容与所述当前话题内容之间的逻辑关联度和/或内容关联度确定。

4.根据权利要求1至3中任一项所述的话题转移方法，其特征在于，所述在所述话题兴趣度低于预设兴趣度阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容，包括：

在所述话题兴趣度低于预设兴趣度阈值，且所述目标用户情绪对应的会话时间与当前时间之间的间隔时长超过预设时长阈值的情况下，基于所述目标用户情绪确定转移话题内容，并输出所述转移话题内容。

5.根据权利要求1至3中任一项所述的话题转移方法，其特征在于，所述基于所述目标用户情绪确定转移话题内容，包括：

基于各个用户情绪间的时序关系，从所述各个用户情绪中确定所述目标用户情绪的相邻用户情绪；

基于所述目标用户情绪，以及所述目标用户情绪的相邻用户情绪，进行用户情绪分析，并基于用户情绪分析所得的情绪分析结果确定转移话题内容。

6.根据权利要求1至3中任一项所述的话题转移方法，其特征在于，所述输出所述转移话题内容，之后还包括：

确定所述用户对于所述转移话题内容的转移话题兴趣度，以及对应于所述转移话题内容的会话过程中的多个转移用户情绪；

基于各个转移用户情绪与所述目标用户情绪之间的差异度，从所述各个转移用户情绪中，确定目标转移用户情绪；

在所述转移话题兴趣度低于所述预设兴趣度阈值的情况下，基于所述目标转移用户情绪确定二次转移话题内容，并输出所述二次转移话题内容。

7.根据权利要求1至3中任一项所述的话题转移方法，其特征在于，所述多个用户情绪基于如下步骤确定：

获取会话过程中的多个用户图像；

确定各个用户图像中的人脸区域和/或肢体动作区域；

对各个人脸区域进行人脸表情识别，得到多个表情情绪，和/或，对各个肢体动作区域进行动作识别，得到多个动作情绪；

基于多个表情情绪和/或多个动作情绪，确定多个用户情绪。

8.一种话题转移装置，其特征在于，包括：

数据确定单元，用于会话过程中的交互数据，以及多个用户情绪，所述交互数据包括用户回应内容的回应时长、回应丰富度、回应关联度中至少一种；

话题转移单元，用于基于所述交互数据，确定用户对于当前话题内容的话题兴趣度；

基于各个用户情绪间的时序关系，以及所述各个用户情绪中相邻用户情绪之间的差异度，从所述各个用户情绪中确定目标用户情绪；

在所述话题兴趣度低于预设兴趣度阈值的情况下，基于目标用户情绪确定转移话题内容，并输出所述转移话题内容。

9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至7任一项所述的话题转移方法。

10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的话题转移方法。

Images