CN114866693B - 一种基于智能终端的信息交互方法及装置 - Google Patents

Abstract

本发明公开一种基于智能终端的信息交互方法及装置，该方法包括：采集位于终端设备预设距离范围内的图像，并从图像中识别人脸图像；终端设备上播放有目标对象的预设视频画面；对同一用户的人脸图像进行追踪，检测用户面对终端设备的时长；根据时长所属的时长范围，播放对应的多媒体资源，多媒体资源用于引导用户获取目标对象的属性信息。在上述方法中，根据用户面对终端设备的时长，给用户针对性的播放对应的多媒体资源，以逐步引导用户获取更多的目标对象的属性信息。这样，不需要销售人员的引导，用户也可以逐步被引导并获取产品的属性信息，提高了用户的购买体验。

Description

一种基于智能终端的信息交互方法及装置

技术领域

本发明涉及终端技术领域，尤其涉及一种基于智能终端的信息交互方法及装置。

背景技术

目前用户购买产品有两种方式，一种方式是去线下的实体商店，看得见摸得着产品，可以现场体验产品，并且当场购买产品。另一种方式是通过线上观看产品的宣传和描述，然后在线下单购买。

然而，在线下产品体验过程中，实体商店配备销售人员的成本高昂，有时并没有足够数量的销售人员供用户咨询和指导；而线上购买的方式，用户并不能全面了解产品的真实情况，也不能进行充分体验。因此，这两种购买方式都存在用户购买体验不佳的问题。

发明内容

本发明提供一种基于智能终端的信息交互方法及装置，以解决线上和线下两种产品购买方式都存在用户购买体验不佳的问题。

为达到上述目的，本发明采用如下技术方案：

第一方面，本发明提供一种基于智能终端的信息交互方法，应用于终端设备，包括：

采集位于所述终端设备预设距离范围内的图像，并从所述图像中识别人脸图像；所述终端设备上播放有目标对象的预设视频画面；

对同一用户的人脸图像进行追踪，检测所述用户面对所述终端设备的时长；

根据所述时长所属的时长范围，播放对应的多媒体资源，所述多媒体资源用于引导所述用户获取所述目标对象的属性信息。

可选的，所述多媒体资源包括第一多媒体资源、第二多媒体资源、第三多媒体资源，所述根据所述时长所属的时长范围，播放对应的多媒体资源，包括：

当检测到所述时长达到第一预设时长时，播放所述第一多媒体资源，所述第一多媒体资源用于介绍所述目标对象的功能；

当检测到所述时长达到第二预设时长时，播放所述第二多媒体资源，所述第二多媒体资源用于引导所述用户体验所述目标对象；

当检测到所述时长达到预设第三预设时长时，播放所述第三多媒体资源，所述第三多媒体资源用于引导所述用户与远端的人工客服建立连接；

其中，所述第二预设时长大于所述第一预设时长，所述第三预设时长大于所述第二预设时长。

可选的，在播放所述第三多媒体资源之后，还包括：

当接收到所述用户开启所述人工客服的指令时，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路。

可选的，在播放所述第三多媒体资源之后，还包括：

当在第四预设时长的时间段内未接收到所述用户开启所述人工客服的指令时，重新播放所述第一多媒体资源。

可选的，所述根据所述时长所属的时长范围，播放对应的多媒体资源，还包括：

当检测到所述时长达到第五预设时长时，播放第四多媒体资源，所述第四多媒体资源用于提示用户在所述终端设备上抽奖；所述第五预设时长大于所述第三预设时长；

响应于所述用户开启抽奖的指令，调用抽奖程序；

显示抽奖结果，并在所述抽奖结果为中奖的情况下，展示奖券码，并提示所述用户在下单时使用所述奖券码。

可选的，在根据所述时长所属的时长范围，播放对应多媒体资源之后，还包括：

当检测到所述用户的人脸图像离开所述预设距离范围，且离开的时长达到第六预设时长时，停止检测所述用户面对所述终端设备的时长，并播放所述预设视频画面。

可选的，在从所述图像中识别人脸图像之后，还包括：

若识别到所述人脸图像，则播放第五多媒体资源，所述第五多媒体资源包括与用户打招呼的内容。

可选的，所述终端设备还包括人工呼叫按钮，所述方法还包括：

响应于所述人工呼叫按钮接收到触发操作，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路；

在通话结束第七预设时长之后，返回所述通话前的页面。

可选的，所述方法还包括：

当接收到预设语音指令时，根据所述预设语音指令的内容，执行目标操作，所述目标操作包括输出所述语音指令对应的多媒体资源、创建音视频通信链路中的一种。

可选的，所述多媒体资源包括语音资源、图像资源、视频资源中的至少一种。

第二方面，本发明提供一种基于智能终端的信息交互装置，应用于终端设备，包括：

人脸识别模块，用于采集位于所述终端设备预设距离范围内的图像，并从所述图像中识别人脸图像；所述终端设备上播放有目标对象的预设视频画面；

时长检测模块，用于对同一用户的人脸图像进行追踪，检测所述用户面对所述终端设备的时长；

第一资源播放模块，用于根据所述时长所属的时长范围，播放对应的多媒体资源，所述多媒体资源用于引导所述用户获取所述目标对象的属性信息。

可选的，所述多媒体资源包括第一多媒体资源、第二多媒体资源、第三多媒体资源，所述资源播放模块具体用于：

当检测到所述时长达到第一预设时长时，播放所述第一多媒体资源，所述第一多媒体资源用于介绍所述目标对象的功能；

当检测到所述时长达到第二预设时长时，播放所述第二多媒体资源，所述第二多媒体资源用于引导所述用户体验所述目标对象；

当检测到所述时长达到预设第三预设时长时，播放所述第三多媒体资源，所述第三多媒体资源用于引导所述用户与远端的人工客服建立连接；

其中，所述第二预设时长大于所述第一预设时长，所述第三预设时长大于所述第二预设时长。

可选的，其特征在于，所述装置还包括：

第一呼叫请求发送模块，用于当接收到所述用户开启所述人工客服的指令时，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路。

可选的，所述装置还包括：

重新播放模块，用于当在第四预设时长的时间段内未接收到所述用户开启所述人工客服的指令时，重新播放所述第一多媒体资源。

可选的，所述资源播放模块进一步用于：

当检测到所述时长达到第五预设时长时，播放第四多媒体资源，所述第四多媒体资源用于提示用户在所述终端设备上抽奖；所述第五预设时长大于所述第三预设时长；

响应于所述用户开启抽奖的指令，调用抽奖程序；

显示抽奖结果，并在所述抽奖结果为中奖的情况下，展示奖券码，并提示所述用户在下单时使用所述奖券码。

可选的，所述装置还包括：

初始视频播放模块，用于当检测到所述用户的人脸图像离开所述预设距离范围，且离开的时长达到第六预设时长时，停止检测所述用户面对所述终端设备的时长，并播放所述预设视频画面。

可选的，所述装置还包括：

第二资源播放模块，用于若识别到所述人脸图像，则播放第五多媒体资源，所述第五多媒体资源包括与用户打招呼的内容。

可选的，所述终端设备还包括人工呼叫按钮，所述装置还包括：

第二呼叫请求发送模块，用于响应于所述人工呼叫按钮接收到触发操作，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路；

返回模块，用于在通话结束第七预设时长之后，返回所述通话前的页面。

可选的，所述装置还包括：

语音互动模块，用于当接收到预设语音指令时，根据所述预设语音指令的内容，执行目标操作，所述目标操作包括输出所述语音指令对应的多媒体资源、创建音视频通信链路中的一种。

第三方面，本发明提供一种终端设备，包括：

处理器；

用于存储所述处理器可执行指令的存储器；

其中，所述处理器被配置为执行所述指令，以实现如第一方面所述的基于智能终端的信息交互方法。

第四方面，本发明提供一种计算机可读存储介质，当所述计算机可读存储介质中的指令由服务器的处理器执行时，使得服务器能够执行如第一方面所述的基于智能终端的信息交互方法。

本发明实施例具有以下有益效果：

在本发明实施例中，采集位于所述终端设备预设距离范围内的图像，并从所述图像中识别人脸图像；所述终端设备上播放有目标对象的预设视频画面；对同一用户的人脸图像进行追踪，检测所述用户面对所述终端设备的时长；根据所述时长所属的时长范围，播放对应的多媒体资源，所述多媒体资源用于引导所述用户获取所述目标对象的属性信息。在上述方法中，根据用户面对终端设备的时长，给用户针对性的播放对应的多媒体资源，以逐步引导用户获取更多的目标对象的属性信息。这样，不需要销售人员的引导，用户也可以逐步被引导并获取产品的属性信息，提高了用户的购买体验。

附图说明

图1为本发明实施例提供的第一种基于智能终端的信息交互方法的步骤流程图；

图2为本发明实施例提供的第二种基于智能终端的信息交互方法的步骤流程图；

图3为本发明实施例提供的一种播放第五多媒体资源的示意图；

图4为本发明实施例提供的一种播放第一多媒体资源的示意图；

图5为本发明实施例提供的第三种基于智能终端的信息交互方法的步骤流程图；

图6为本发明实施例提供的第四种基于智能终端的信息交互方法的步骤流程图；

图7为本发明实施例提供的一种通话界面的示意图；

图8为本发明实施例提供的一种评价界面的示意图；

图9为本发明实施例提供的第五种基于智能终端的信息交互方法的步骤流程图；

图10为本发明实施例提供的基于智能终端的信息交互装置的结构框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

本说明书提供了如实施例或流程图所述的方法操作步骤，但基于常规或无创造性的劳动可以包括更多或者更少的操作步骤。在实际中的系统或服务器产品执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。

图1为本发明实施例提供的第一种基于智能终端的信息交互方法的步骤流程图。该方法可以包括如下步骤：

步骤101、采集位于所述终端设备预设距离范围内的图像，并从所述图像中识别人脸图像；所述终端设备上播放有目标对象的预设视频画面。

在本发明实施例中，终端设备可以是但不限于手机、平板电脑、电脑、智慧屏等。可以通过在线下门店设置智能展台，将终端设备摆放或悬挂在智能展台上。

目标对象是指线下门店所销售的产品。在终端设备上播放目标对象的预设视频画面，该预设视频画面的内容可以是目标对象的外观展示、功能介绍、使用场景、使用方法展示等。

同时，终端设备通过图像传感器采集预设距离范围内的图像，检测图像中是否存在人脸，并进行人脸特征识别。

本方案具体的应用场景中整体包含展板、展台、终端设备和展示的产品几个部分。其中，终端设备的功能包括了多媒体资源展示、基于语音指令的互动问答、远程客服互动问答以及定向展示促销信息。

上述多媒体资源不仅包括视频，也包括了语音和文字的互动性对话以及“虚拟智能客服”的形象展示，通过虚拟智能客服和相应的语音和视频，综合提升整体交互过程的吸引力。

步骤102、对同一用户的人脸图像进行追踪，检测所述用户面对所述终端设备的时长。

根据人脸特征识别的结果，将具有相同特征的人脸标记为同一用户，将具有不同特征的人脸标记为不同用户。

具体地，可以设置检测周期，例如每隔5秒发动一次人脸检测，若人脸离开以后，再增加一个新的脸，则算作一个新人，计数加一。若是连续几次识别到的都是同一个人脸，则算作同一用户。

根据检测周期和连续检测到同一用户的次数可以得到同一用户面对终端设备的时长。

若在多个检测周期内有少数次用户的人脸消失，则有可能该用户发生了转头，可认为该用户还在终端设备的预设范围内，可将转头的时长也计算在用户面对终端设备的时长之内。

步骤103、根据所述时长所属的时长范围，播放对应的多媒体资源，所述多媒体资源用于引导所述用户获取所述目标对象的属性信息。

用户面对终端设备的时长体现出用户对终端设备上播放的预设视频画面的关注程度，该关注程度反映了用户对目标对象的关注程度。

可以根据用户对目标对象的关注程度，预设用户可能感兴趣的多媒体资源。具体地，可对于不同的时长范围，预设不同内容的多媒体资源，该多媒体媒体可以帮助用户获取目标对象的更多属性信息。该属性信息可以包括但不限于目标对象的外形、尺寸、功能、价格、使用方法等。

示例性地，当用户面对终端设备的时长达20秒时，播放目标对象的功能介绍内容；当用户面对终端设备的时长达40秒时，播放能够引导用户体验目标对象的内容；当用户面对终端设备的时长达60秒时，可以播放能够引导用户与人工客服进行深入沟通的内容。

通过在时长所属的时长范围，播放对应的多媒体资源，从而在没有销售人员的情况下，也可以使用户逐步获取目标对象的多种属性信息，更深入的了解目标对象，从而促进用户体验和购买目标对象。

在一种可能的实施方式中，所述多媒体资源包括语音资源、图像资源、视频资源中的至少一种。

具体地，多媒体资源可以为语音资源、图像资源、视频资源中的一种，也可以为语音资源与图像资源的组合、或语音资源与视频资源的组合、或图像资源与视频资源的组合中的任意一种。可以根据线下门店当前的环境特点、噪音特点设置适合的多媒体资源及其组合。

示例性地，当检测到当前噪音值较高时，可以播放视频资源或图像资源；当检测到当前噪音值较低时，可以播放语音资源，或语音资源与图像资源或视频资源的结合，已达到更好的传播目的。

这样，在线下商店中，通过终端设备和用户的交互，一方面用户可以通过观看多媒体资源完整的了解产品和获取产品信息，一方面用户通过多媒体资源的引导可以实地体验产品，从而使用户在没有销售人员的情况下也可以全面了解产品的真实情况，提高了用户的购买体验。

在一种可能的实施方式中，所述方法还包括：

当接收到预设语音指令时，根据所述预设语音指令的内容，执行目标操作，所述目标操作包括输出所述语音指令对应的多媒体资源、创建音视频通信链路中的一种。与步骤101-步骤103中根据用户面对终端设备的时长播放对应的多媒体资源不同，本方案不受时长的限制，在任意时刻，当终端设备采集到语音信号时，判断该语音信号是否为预设的语音指令。若是预设的语音指令，终端设备则执行对应的目标操作。该目标操作可以包括输出对应的多媒体资源或创建用户和智能客服之间的通信链路。

可以理解，语音指令和目标操作之间的对应关系需要预先在程序中设置，一旦终端设备检测到语音指令，则启动目标操作。

多媒体资源可以为语音资源、图像资源、视频资源中的至少一种。例如，终端设备对用户的语音指令进行语音答复，或者播放相应的视频资源。若用户的语音指令的内容为请求与客服进行通话，则终端设备为用户建立与智能客服之间的通信链路。

综上，在本发明实施例中，采集位于所述终端设备预设距离范围内的图像，并从所述图像中识别人脸图像；所述终端设备上播放有目标对象的预设视频画面；对同一用户的人脸图像进行追踪，检测所述用户面对所述终端设备的时长；根据所述时长所属的时长范围，播放对应的多媒体资源，所述多媒体资源用于引导所述用户获取所述目标对象的属性信息。在上述方法中，根据用户面对终端设备的时长，给用户针对性的播放对应的多媒体资源，以逐步引导用户获取更多的目标对象的属性信息。这样，不需要销售人员的引导，用户也可以逐步被引导并获取产品的属性信息，提高了用户的购买体验。

图2为本发明实施例提供的第二种基于智能终端的信息交互方法的步骤流程图。该方法可以包括如下步骤：

步骤201、采集位于所述终端设备预设距离范围内的图像，并从所述图像中识别人脸图像；所述终端设备上播放有目标对象的预设视频画面。

在本发明实施例中，步骤201可以参照步骤101，此处不再赘述。

步骤202、若识别到所述人脸图像，则播放第五多媒体资源，所述第五多媒体资源包括与用户打招呼的内容。

若终端设备从采集的图像中识别到包含人脸图像，则说明此时有用户面对终端设备，可能在观看预设视频画面。

为了进一步吸引人脸图像对应的用户的注意力，提高用户的关注度，可以在识别到人脸图像后，播放第五多媒体资源。第五多媒体资源的内容可以为与用户打招呼的内容。

示例性地，若目标对象为一种扫读笔，则第五多媒体资源的内容可以为：您好，感谢您关注这一创新产品，请看看视频了解一下，可以拿起笔来进行体验。

具体地，第五多媒体资源可以为语音资源，即终端设备通过语音播报的形式朗读第五多媒体资源的内容。当通过语音播放第五多媒体资源时，预设视频画面对应的音量变小，而人工客服的音量调整为最大，并且人工客服的图像由小变大。当语音播放结束时，预设视频画面的音量又重新回到最大音量。

第五多媒体资源也可以为图像资源或视频资源，即在终端设备的显示屏上显示包含第五多媒体资源内容的图像画面或视频画面。

此外，智能终端的音量每隔预设周期(如10分钟)自动检测一次，并在每次检测之后，将音量自动重置为最大音量。

图3为本发明实施例提供的一种播放第五多媒体资源的示意图。

如图3所示，终端设备的界面包括多媒体资源展示区1和人工客服区2两个显示区域。在多媒体资源展示区1中播放有预设视频画面11。在人工客服区2设置有人工客服图标22和智能呼叫按钮21，并在智能呼叫按钮21的下方显示“开启智慧学习之门”字样。

当终端设备从采集的图像中识别到包含人脸图像时，在多媒体资源展示区1播放第五多媒体资源12。图3中的第五多媒体资源12为图像资源，具体显示有如下内容：“您好，感谢您关注这一创新产品，请看看视频了解一下，可以拿起笔来体验一下哦！”。

步骤203、对同一用户的人脸图像进行追踪，检测所述用户面对所述终端设备的时长。

在本发明实施例中，步骤201可以参照步骤101，此处不再赘述。

步骤204、当检测到所述时长达到第一预设时长时，播放所述第一多媒体资源，所述第一多媒体资源用于介绍所述目标对象的功能。

可以在服务器端设置计划文件，该计划文件为不同的时长范围以及对应的不同内容的多媒体资源。终端设备根据服务器端默认的计划文件播放对应的多媒体资源。

示例性地，该时长包括第一预设时长、第二预设时长、第三预设时长等，具体地，第一预设时长、第二预设时长、第三预设时长具体对应的时长可以根据需求进行预设，且第二预设时长大于第一预设时长，第三预设时长大于第二预设时长。示例性地，第一预设时长可以为20秒，第二预设时长可以为40秒，第三预设时长可以为60秒。

第一预设时长对应第一多媒体资源，第二预设时长对应第二多媒体资源，第三预设时长对应第三多媒体资源。其中，第一多媒体资源、第二多媒体资源、第三多媒体资源的内容可以为逐层递进的关系，以有效引导用户获取更深入、更全面的目标对象的属性信息。

具体地，当检测到用户面对终端设备的时长达到第一预设时长时，可以播放预设的第一多媒体资源。该第一多媒体资源的内容为介绍目标对象的功能。

图4为本发明实施例提供的一种播放第一多媒体资源的示意图。

如图4所示，当终端设备检测到用户面对终端设备的时长达到第一预设时长时，在多媒体资源展示区1播放第一多媒体资源13。图4中的第一多媒体资源13为图像资源，具体显示有如下内容：“有没有试一下？你面前的两支笔，一只是离线没有网络的一只是有网络的。查字典和拼读功能，不需要联网就可以使用。联网可以使用更多的AI问答和语音翻译。试试吧！”。

步骤205、当检测到所述时长达到第二预设时长时，播放所述第二多媒体资源，所述第二多媒体资源用于引导所述用户体验所述目标对象。

当检测到用户面对终端设备的时长达到第二预设时长时，可以播放预设的第二多媒体资源。该第二多媒体资源的内容为引导用户体验目标对象。

示例性地，第二多媒体资源的内容可以为：“使用的感觉怎么样？握在手里的是不是很顺手很舒服？看起来是不是很漂亮？查字典是不是飞快？有了这支笔，你再也不会害怕阅读中就单词了！”。

步骤206、当检测到所述时长达到预设第三预设时长时，播放所述第三多媒体资源，所述第三多媒体资源用于引导所述用户与远端的人工客服建立连接；其中，所述第二预设时长大于所述第一预设时长，所述第三预设时长大于所述第二预设时长。

当检测到用户面对终端设备的时长达到第三预设时长时，可以播放预设的第三多媒体资源。该第三多媒体资源的内容为引导所述用户与远端的人工客服建立连接。

示例性地，第三多媒体资源的内容可以为：“体验的怎么样？购买很方便，直接扫码下单就可以。我们会自动的把这个笔送邮寄到你的地址。如果还有问题也可以按人工咨询，询问真人售货员。”。

步骤207、当接收到所述用户开启所述人工客服的指令时，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路。

用户开启人工客服的指令，可以是语音指令，也可以是触控指令。具体地，用户可以通过语音回复第三多媒体资源的方式发出开启人工客服的指令，也可以通过触发终端设备上的人工呼叫触控按钮来发出开启人工客服的指令。

语音指令的内容可以为：“好的，需要”或者“请接通人工客服”等类似的话语。

当终端设备接收到开启人工客服的指令时，将终端设备的标识发送给远端的服务器，服务器在获取空闲的人工坐席标识后，将终端设备的标识和人工坐席的标识发送给第三方通信软件，第三方通信软件创建该终端设备和人工坐席之间的通信链路。

这样，用户就可以通过人工客服咨询更多的目标对象信息。

步骤208、当在第四预设时长的时间段内未接收到所述用户开启所述人工客服的指令时，重新播放所述第一多媒体资源。

第四预设时长也可以根据需求进行预设，例如，可以设置为20秒。当终端设备在第四预设时长的时间段内未接收到用户开启人工客服的指令时，说明用户不需要开启人工客服，终端设备可以重新播放第一多媒体资源。

综上，用户面对终端设备的时长体现出用户对终端设备和目标对象的关注程度，根据用户的关注程度匹配不同的多媒体资源给用户展示，可以提高对用户引导购买的效果。

在一种可能的实施方式中，如图5所示，所述根据所述时长所属的时长范围，播放对应的多媒体资源，还包括以下步骤301-步骤303：

步骤301、当检测到所述时长达到第五预设时长时，播放第四多媒体资源，所述第四多媒体资源用于提示用户在所述终端设备上抽奖；所述第五预设时长大于所述第三预设时长；

步骤302、响应于所述用户开启抽奖的指令，调用抽奖程序；

步骤303、显示抽奖结果，并在所述抽奖结果为中奖的情况下，展示奖券码，并提示所述用户在下单时使用所述奖券码。

在步骤301-步骤303中，当用户面对终端设备的时长达到第五预设时长时，说明用户对目标对象非常感兴趣，且可能有购买需求。此时，可以播放第四多媒体资源，该第四多媒体资源的内容为提示用户在终端设备上抽奖。

第五预设时长大于第三预设时长。示例性地，第五预设时长可以设置为120秒。

示例性地，第四多媒体资源的内容可以为：“你已经体验了这么久，我为你抽个奖吧”。

当用户通过语音指令或触控指令发出抽奖的指令时，终端设备调用抽奖程序，为用户进行抽奖。抽奖结束后，自动在终端设备的显示屏上显示抽奖结果。

若抽奖结果为中奖，则在显示屏上展示奖券码，并提示用户在下单时使用该奖券码。进一步地，终端设备记录该中奖结果，并反馈给服务器。

此时，可以播放相应的多媒体资源。例如，通过语音通知用户：“你太幸运了，我刚才刚为你抽了个奖！，恭喜你！你获得了40元优惠券！请在购买的时候输入优惠券上的号码。10分钟内有效！”。

步骤301-步骤303通过为用户抽奖，可以为有需求的用户提供更有针对性的服务，进一步提高用户对目标对象的关注度，并提高用户的购买欲。

在一种可能的实施方式中，在根据所述时长所属的时长范围，播放对应多媒体资源之后，还包括：

当检测到所述用户的人脸图像离开所述预设距离范围，且离开的时长达到第六预设时长时，停止检测所述用户面对所述终端设备的时长，并播放所述预设视频画面。

若在播放第一多媒体资源、或第二多媒体资源、或第三多媒体资源之后的预设时长内，终端设备未检测到用户的人脸图像，则终端设备可以播放预设视频画面。因为在预设时长内未检测到用户的人脸图像，说明用户可能已经离开了，此时为了使其他用户获取目标对象的信息，可以重新播放预设视频画面。当检测到其他用户面对终端设备的时长达到第一预设时长时，则再一次播放第一多媒体资源，这样，就使每个用户均有机会从终端设备上获取更多的目标对象信息。

在一种可能的实施方式中，如图6所示，所述终端设备还包括人工呼叫按钮，所述方法还包括步骤401-步骤402：

步骤401、响应于所述人工呼叫按钮接收到触发操作，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路；

步骤402、在通话结束第七预设时长之后，返回所述通话前的页面。

在步骤401-步骤402中，终端设备还包括人工呼叫按钮，该人工呼叫按钮可以设置于终端设备的显示界面上。

参照图3，该人工呼叫按钮可以为图3中标号21所示，当用户触摸“人工客服”按钮时，即向终端设备对应的服务器发送人工客服指令。

当用户触发该按钮时，终端设备响应于该触发操作，将终端设备的标识发送给远端的服务器，服务器在获取空闲的人工坐席标识后，将终端设备的标识和人工坐席的标识发送给第三方通信软件，第三方通信软件创建该终端设备和人工坐席之间的通信链路。

在与人工客服连接的过程中，终端设备的显示屏上播放的多媒体资源画面暂停，并通过文字提示用户等待客服接通。此时，显示屏上可以显示“正在连接云端销售代表，请稍等…15”，并同时播放振铃声音。屏幕显示15秒倒计时，若第一个15秒没有客服接通，则自动切换下一个客服。并在显示屏上显示：“正在再次进行连接，请稍等…15”。若所有客服都无空闲，则在显示屏上显示：“抱歉，所有客户咨询线路忙，请您稍后重试”。

若与客服接通，则显示屏上显示视频通话界面或语音对话界面。

当用户与客服沟通完毕，挂断电话后，显示屏上可以提示用户评价人工客服的服务，并弹出评价星供用户选择。

图7为本发明实施例提供的一种通话界面的示意图。

如图7所示，当终端设备和人工坐席接通后，界面中人工客服的图像变大，显示视频通话或语音对话界面，该界面中包括“挂断通话”选项，可供用户自主挂断当前通话。

图8为本发明实施例提供的一种评价界面的示意图。

如图8所示，当通话挂断后，人工客服的图像变小并回到原位。显示屏上显示提示用户进行评价的字样，并弹出五颗评价星供用户进行评价。

在一种可能的实施方式中，如图9所示，所述终端设备还包括退出按钮，所述方法还包括步骤501-步骤503：

步骤501、响应于所述退出按钮接收到触发操作，显示目标对话框，所述目标对话框用于接收密码输入；

步骤502、接收密码并检测所述密码的正确性；

步骤503、若在第八预设时长的时间段内未接收到正确的密码，则返回所述触发操作前正在播放的画面。

在步骤501-步骤503中，为了防止用户误操作将终端设备的当前程序关闭，可以设置退出密码。

具体地，在退出按钮接收到触发操作时，显示目标对话框，该目标对话框为退出密码的输入框。终端设备接收输入的密码，并判断密码的正确性。若密码正确，则退出程序，进入正常的终端界面。若密码不正确，且在第八预设时长的时间段内未接收到正确的密码，则返回之前正在播放的画面。

通过退出密码的设置，可以防止终端设备的当前播放模式被用户误关闭，以保证终端设备的正常工作。

图10为本发明实施例提供的一种基于智能终端的信息交互装置的结构框图。该装置600应用于终端设备，包括：

人脸识别模块601，用于采集位于所述终端设备预设距离范围内的图像，并从所述图像中识别人脸图像；所述终端设备上播放有目标对象的预设视频画面；

时长检测模块602，用于对同一用户的人脸图像进行追踪，检测所述用户面对所述终端设备的时长；

第一资源播放模块603，用于根据所述时长所属的时长范围，播放对应的多媒体资源，所述多媒体资源用于引导所述用户获取所述目标对象的属性信息。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本发明提供的又一实施例中，还提供了一种设备，所述设备包括处理器和存储器，所述存储器种存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现本发明实施例中所述的基于智能终端的信息交互方法。

在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现本发明实施例中所述的基于智能终端的信息交互方法。

在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (20)

1.一种基于智能终端的信息交互方法，其特征在于，应用于终端设备，包括：

采集位于所述终端设备预设距离范围内的图像，并从所述图像中识别人脸图像；所述终端设备上播放有目标对象的预设视频画面；

对用户的人脸图像进行追踪，检测所述用户面对所述终端设备的时长；

根据所述时长所属的时长范围，播放对应的多媒体资源，所述多媒体资源用于引导所述用户获取所述目标对象的属性信息；

所述多媒体资源包括第一多媒体资源、第二多媒体资源、第三多媒体资源，所述根据所述时长所属的时长范围，播放对应的多媒体资源，包括：

当检测到所述时长达到第一预设时长时，播放所述第一多媒体资源，所述第一多媒体资源用于介绍所述目标对象的功能；

当检测到所述时长达到第二预设时长时，播放所述第二多媒体资源，所述第二多媒体资源用于引导所述用户体验所述目标对象；

当检测到所述时长达到预设第三预设时长时，播放所述第三多媒体资源，所述第三多媒体资源用于引导所述用户与远端的人工客服建立连接；

其中，所述第二预设时长大于所述第一预设时长，所述第三预设时长大于所述第二预设时长。

2.根据权利要求1所述的方法，其特征在于，在播放所述第三多媒体资源之后，还包括：

当接收到所述用户开启所述人工客服的指令时，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路。

3.根据权利要求1所述的方法，其特征在于，在播放所述第三多媒体资源之后，还包括：

当在第四预设时长的时间段内未接收到所述用户开启所述人工客服的指令时，重新播放所述第一多媒体资源。

4.根据权利要求1所述的方法，其特征在于，所述根据所述时长所属的时长范围，播放对应的多媒体资源，还包括：

当检测到所述时长达到第五预设时长时，播放第四多媒体资源，所述第四多媒体资源用于提示用户在所述终端设备上抽奖；所述第五预设时长大于所述第三预设时长；

响应于所述用户开启抽奖的指令，调用抽奖程序；

显示抽奖结果，并在所述抽奖结果为中奖的情况下，展示奖券码，并提示所述用户在下单时使用所述奖券码。

5.根据权利要求1所述的方法，其特征在于，在根据所述时长所属的时长范围，播放对应的多媒体资源之后，还包括：

当检测到所述用户的人脸图像离开所述预设距离范围，且离开的时长达到第六预设时长时，停止检测所述用户面对所述终端设备的时长，并播放所述预设视频画面。

6.根据权利要求1所述的方法，其特征在于，在从所述图像中识别人脸图像之后，还包括：

若识别到所述人脸图像，则播放第五多媒体资源，所述第五多媒体资源包括与用户打招呼的内容。

7.根据权利要求1所述的方法，其特征在于，所述终端设备还包括人工呼叫按钮，所述方法还包括：

响应于所述人工呼叫按钮接收到触发操作，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路；

在通话结束第七预设时长之后，返回所述通话前的页面。

8.根据权利要求1所述的方法，其特征在于，所述方法还包括：

当接收到预设语音指令时，根据所述预设语音指令的内容，执行目标操作，所述目标操作包括输出所述语音指令对应的多媒体资源、创建音视频通信链路中的一种。

9.根据权利要求1-8中任一所述的方法，其特征在于，所述多媒体资源包括语音资源、图像资源、视频资源中的至少一种。

10.一种基于智能终端的信息交互装置，其特征在于，应用于终端设备，包括：

人脸识别模块，用于采集位于所述终端设备预设距离范围内的图像，并从所述图像中识别人脸图像；所述终端设备上播放有目标对象的预设视频画面；

时长检测模块，用于对同一用户的人脸图像进行追踪，检测所述用户面对所述终端设备的时长；

第一资源播放模块，用于根据所述时长所属的时长范围，播放对应的多媒体资源，所述多媒体资源用于引导所述用户获取所述目标对象的属性信息；

所述多媒体资源包括第一多媒体资源、第二多媒体资源、第三多媒体资源，所述资源播放模块具体用于：

当检测到所述时长达到第一预设时长时，播放所述第一多媒体资源，所述第一多媒体资源用于介绍所述目标对象的功能；

当检测到所述时长达到第二预设时长时，播放所述第二多媒体资源，所述第二多媒体资源用于引导所述用户体验所述目标对象；

当检测到所述时长达到预设第三预设时长时，播放所述第三多媒体资源，所述第三多媒体资源用于引导所述用户与远端的人工客服建立连接；

其中，所述第二预设时长大于所述第一预设时长，所述第三预设时长大于所述第二预设时长。

11.根据权利要求10所述的装置，其特征在于，所述装置还包括：

第一呼叫请求发送模块，用于当接收到所述用户开启所述人工客服的指令时，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路。

12.根据权利要求10所述的装置，其特征在于，所述装置还包括：

重新播放模块，用于当在第四预设时长的时间段内未接收到所述用户开启所述人工客服的指令时，重新播放所述第一多媒体资源。

13.根据权利要求10所述的装置，其特征在于，所述资源播放模块进一步用于：

当检测到所述时长达到第五预设时长时，播放第四多媒体资源，所述第四多媒体资源用于提示用户在所述终端设备上抽奖；所述第五预设时长大于所述第三预设时长；

响应于所述用户开启抽奖的指令，调用抽奖程序；

显示抽奖结果，并在所述抽奖结果为中奖的情况下，展示奖券码，并提示所述用户在下单时使用所述奖券码。

14.根据权利要求10所述的装置，其特征在于，所述装置还包括：

初始视频播放模块，用于当检测到所述用户的人脸图像离开所述预设距离范围，且离开的时长达到第六预设时长时，停止检测所述用户面对所述终端设备的时长，并播放所述预设视频画面。

15.根据权利要求10所述的装置，其特征在于，所述装置还包括：

第二资源播放模块，用于若识别到所述人脸图像，则播放第五多媒体资源，所述第五多媒体资源包括与用户打招呼的内容。

16.根据权利要求10所述的装置，其特征在于，所述终端设备还包括人工呼叫按钮，所述装置还包括：

第二呼叫请求发送模块，用于响应于所述人工呼叫按钮接收到触发操作，将包括所述终端设备的标识的呼叫请求发送给服务器，以使所述服务器利用第三方通信软件，创建所述人工客服和所述终端设备之间的音视频通信链路；

返回模块，用于在通话结束第七预设时长之后，返回所述通话前的页面。

17.根据权利要求10所述的装置，其特征在于，所述装置还包括：

语音互动模块，用于当接收到预设语音指令时，根据所述预设语音指令的内容，执行目标操作，所述目标操作包括输出所述语音指令对应的多媒体资源、创建音视频通信链路中的一种。

18.根据权利要求10-17中任一所述的装置，其特征在于，所述多媒体资源包括语音资源、图像资源、视频资源中的至少一种。

19.一种终端设备，其特征在于，包括：

处理器；

用于存储所述处理器可执行指令的存储器;

其中，所述处理器被配置为执行所述指令，以实现如权利要求1至9中任一项所述的基于智能终端的信息交互方法。

20.一种计算机可读存储介质，其特征在于，当所述计算机可读存储介质中的指令由服务器的处理器执行时，使得服务器能够执行如权利要求1至9中任一项所述的基于智能终端的信息交互方法。