CN113743282A - 内容搜索方法、装置、电子设备和计算机可读存储介质 - Google Patents

Abstract

本申请实施例公开了一种内容搜索方法、装置、电子设备和计算机可读存储介质，通过响应于内容搜索指令，获取当前搜索图像；对当前搜索图像进行图像内容识别，确定当前搜索图像包含的搜索动作；将搜索动作与预设动作集合进行匹配，确定预设动作集合中与搜索动作匹配的目标动作，预设动作集合中每个动作对应至少一个关联内容；将目标动作的关联内容，作为基于搜索动作搜索到的内容，并进行推荐，该方案通过获取搜索图像进行图像内容识别，基于搜索图像中包含的搜索动作确定对应的内容，并推荐该内容，不需要用户通过键盘或者语音输入即可实现内容搜索，提高搜索效率。

Description

内容搜索方法、装置、电子设备和计算机可读存储介质

技术领域

本申请涉及通信技术领域，具体涉及一种内容搜索方法、装置、电子设备和计算机可读存储介质。

背景技术

随着智能电视机相关技术的发展，用户可以通过遥控从智能电视机中选择想要观看的电视节目，或者是通过语音的方式搜索内容，但是，通过遥控进行选择，需要根据内容分类的众多视频节目中查找到想要观看的内容，查找过程一般耗时较长；而通过遥控输入或者语音输入想要观看的节目的名称进行搜索，由于，键盘输入和语音输入通常不支持方言输入，对普通话不标准的人群造成不便，导致搜索效率低。

发明内容

本申请实施例提供一种内容搜索方法、装置、电子设备和计算机可读存储介质，可以提高内容搜索效率。

本申请实施例提供的一种内容搜索方法，包括：

响应于内容搜索指令，获取当前搜索图像；

对所述当前搜索图像进行图像内容识别，确定所述当前搜索图像包含的搜索动作；

将所述搜索动作与预设动作集合进行匹配，确定所述预设动作集合中与所述搜索动作匹配的目标动作，所述预设动作集合中每个动作对应至少一个关联内容；

将所述目标动作的关联内容，作为基于所述搜索动作搜索到的内容，并进行推荐。

相应的，本申请实施例还提供的一种内容搜索装置，包括：

获取单元，用于响应于内容搜索指令，获取当前搜索图像；

第一确定单元，用于对所述当前搜索图像进行图像内容识别，确定所述当前搜索图像包含的搜索动作；

第二确定单元，用于将所述搜索动作与预设动作集合进行匹配，确定所述预设动作集合中与所述搜索动作匹配的目标动作，所述预设动作集合中每个动作对应有至少一个关联内容；

推荐单元，用于将所述目标动作的关联内容，作为基于所述搜索动作搜索到的内容，并进行推荐。

相应的，本申请实施例还提供的一种电子设备，包括存储器和处理器；所述存储器存储有计算机程序，所述处理器用于运行所述存储器内的计算机程序，以执行本申请实施例提供的任一种内容搜索方法。

相应的，本申请实施例还提供一种计算机可读存储介质，所述计算机可读存储介质用于存储计算机程序，所述计算机程序被处理器加载以执行本申请实施例提供的任一种内容搜索方法。

本申请实施例通过响应于内容搜索指令，获取当前搜索图像；对当前搜索图像进行图像内容识别，确定当前搜索图像包含的搜索动作；将搜索动作与预设动作集合进行匹配，确定预设动作集合中与搜索动作匹配的目标动作，预设动作集合中每个动作对应至少一个关联内容；将目标动作的关联内容，作为基于搜索动作搜索到的内容，并进行推荐，该方案通过获取搜索图像进行图像内容识别，基于搜索图像中包含的搜索动作确定对应的内容，并推荐该内容，不需要用户通过键盘或者语音输入即可实现内容搜索，提高搜索效率。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的内容搜索方法的流程图；

图2是本申请实施例提供的内容搜索装置示意图；

图3是本申请实施例提供的电子设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请实施例提供一种内容搜索方法、装置、电子设备和计算机可读存储介质。该内容搜索装置可以集成在电子设备中，该电子设备可以是终端等设备。

其中，该终端可以包括智能电视机、手机、穿戴式智能设备、平板电脑、笔记本电脑、个人计算(PC，Personal Computer)、以及车载计算机等。

以下分别进行详细说明。需说明的是，以下实施例的描述顺序不作为对实施例优选顺序的限定。

本实施例将从内容搜索装置，该内容搜索装置具体集成的智能电视机的角度进行描述，如图1所示，该内容搜索方法的流程具体如下：

101、响应于内容搜索指令，获取当前搜索图像。

其中，内容搜索指令可以是用于指示智能电视机获取当前搜索图像，以及执行后续内容搜索等操作的指令，内容搜索指令可以是用户通过遥控器的某个按钮触发的，也可以是通过遥控器(或者手指)点击智能电视机展示的用户界面的指定控件触发的，还可以是通过输入语音触发的。

其中，当前搜索图像可以是用于搜索内容的图像，当前搜索图像可以是一张或者包括多张图像，通过当前搜索图像包含的多张图像可以识别用户做出的动态动作。

比如，具体可以是用户按下智能电视机的遥控器的指定按钮，触发智能电视机的内容搜索指令，智能电视机响应该内容搜索指令，获取当前搜索图像，当前搜索图像可以是用户通过与智能电视机连接的手机等终端发送给智能电视机的，或者是智能电视机从自身的内存中获取的。

可选的，当前搜索图像还可以是通过摄像头采集的，即步骤“响应于内容搜索指令，获取当前搜索图像”，具体可以包括：

响应于内容搜索指令，显示内容搜索界面；

通过图像采集设备获取至少一张搜索图像，并在内容搜索界面显示图像采集设备获取的搜索图像；

从搜索图像中确定当前搜索图像。

其中，内容搜索界面可以是智能电视机展示的用于与用户进行交互的用户界面(User Interface，UI)。

其中，图像采集设备可以是具有采集图像功能的设备，比如摄像头，摄像机，相机等设备。

比如，具体可以是智能电视机响应于内容搜索指令，显示内容搜索界面，并启动摄像头进行图像采集，智能电视机可以控制摄像头定时获取搜索图像，例如，每隔一定的时间间隔拍摄一张图片，还可以是实时获取搜索图像，例如视频，并在内容搜索界面显示摄像头采集的搜索图像，显示搜索图像可以让用户确认其是否位于摄像头的采集范围内，并且可以通过搜索图像确认其动作是否正确。

从摄像头采集的至少一张搜索图像中确定当前搜索图像，若摄像头只采集一张搜索图像，则将该搜索图像确定为当前搜索图像，若摄像头采集了多张搜索图像，由于，摄像头启动时，用户可能还未准备好动作，避免由于用户没有准备好动作导致识别的动作错误，可以将摄像头启动一定时间后，采集的搜索图像作为当前搜索图像。

可选的，可以对搜索图像进行预处理，过滤不合格的搜索图像，减少图片的处理数量，例如，对搜索图像进行人脸检测，判断搜索图像中是否存在人脸信息，若不存在人脸信息，则摄像机采集的搜索图像中没有包含用户，所以搜索图像必然不包含搜索动作，即步骤“从搜索图像中确定当前搜索图像”，具体可以包括：

对搜索图像进行人脸检测处理；

若搜索图像中包含人脸信息，则将搜索图像作为候选图像；

从候选图像中确定当前搜索图像。

比如，具体可以是对搜索图像进行人脸检测处理，确定搜索图像中是否存在人脸信息，若搜索图像存在人脸信息，表示搜索图像中存在人体，可以对图像中的人体进行搜索动作识别，则将包含人脸信息的搜索图像作为候选图像。将候选图像中拍摄时间最早的图像作为当前搜索图像，或者是将摄像头启动一定时间后，采集的候选图像作为当前搜索图像。

可选的，第一次使用智能电视机的该搜索方法进行搜索的用户可能不清楚具体的操作，可以在内容搜索界面提示用户做出动作，以进行具体操作，即步骤“响应于内容搜索指令，显示内容搜索界面”之后，具体可以包括：

获取动作提示信息，动作提示信息包括提示图片以及提示文字中的任意一种；

在内容搜索界面显示动作提示信息。

其中，提示信息可以是图片或者是文字等形式的信息，用于提示用户做出肢体动作进行搜索，例如，做出射箭的动作试试看吧；或者是显示一张包含肢体动作的图片。

比如，具体可以是用户通过遥控上的指定按钮触发内容搜索指令，智能电视机响应该内容搜索指令进入动作搜索模式，显示内容搜索界面，并在内容搜索界面显示包含肢体动作的提示图片，以及启动智能电视机采集搜索图像，从搜索图像中确定当前搜索图像。

102、对当前搜索图像进行图像内容识别，确定当前搜索图像包含的搜索动作。

其中，搜索动作可以是用于搜索内容的肢体动作。

比如，具体可以是智能电视机可以基于图像边缘检测算法(例如canny算法、Sobel算法、或者Prewitt算法)当前搜索图片进行边缘特征提取，将提取的边缘特征确定为当前搜索图像包含的搜索动作。

可选的，可以通过提取的边缘特征确定动作的指代名称，例如，射箭动作、跳跃动作、或者是捂眼动作等。

可选的，还可以通过动作识别模型对当前搜索图像进行识别，得到当前搜索图像的搜索动作，即步骤“对当前搜索图像进行图像内容识别，确定当前搜索图像包含的搜索动作”，具体可以包括：

通过动作识别模型对当前搜索图像进行关键点提取，得到当前搜索图像的关键点；

基于关键点确定当前搜索图像包含的搜索动作。

其中，关键点可以是人体动作的关键点，根据关键点可以确定描述人体骨骼信息，进而确定人体所作出的动作，例如，关键点可以是人体的关节所在的位置等。

比如，具体可以是通过动作识别模型基于自下而上的姿态估算法(例如，openpose算法)，或者是自下而上的姿态估算法(例如，Alphapose算法)对当前搜索图像进行关键点进行检测，得到当前搜索图像中人体的关键点，根据关键点得到搜索动作，例如，根据关键点进行连线，得到当前搜索图像包含的搜索动作。

在一实施例中，动作识别模型通过关键点检测后，可以基于关键点检测确定当前搜索图像的搜索动作的指代名称，例如，射箭动作、跳跃动作、或者是转圈动作等。

103、将搜索动作与预设动作集合进行匹配，确定预设动作集合中与搜索动作匹配的目标动作，预设动作集合中每个动作对应至少一个关联内容。

其中，预设动作集合可以是预先设置的动作集合，预设动作集合可以包括多个动作对应的相关动作信息，比如，预设动作集合可以包括有多张包含动作的图片，或者预设动作集合可以包括表示动作的特征向量或者特征信息等，每个动作对应于至少一个关联内容，关联内容可以是与动作对应的内容，比如视频、音乐以及文章等等。

比如，具体可以是智能电视机将搜索动作与预设集合中的每一个动作对应的相关动作信息进行匹配，计算相似度，将预设动作集合中相似度最高的动作确定为搜索动作匹配的目标动作。

可选的，若预设动作集合中包含的动作为每个动作的指代名称，则可以对当前搜索图像进行图像内容识别，确定当前搜索图像包含的动作的指代名称，根据指代名称确定预设动作集合中与搜索动作匹配的目标动作。

可选的，在一次搜索内容的过程中，若进行识别的当前搜索图像中没有识别到有效动作(预设集合中的动作)，可以获取其他的搜索图像进行图像内容识别，提高内容搜索成功的概率，即步骤“将搜索动作与预设动作集合进行匹配，确定预设动作集合中与搜索动作匹配的目标动作”，具体可以是：

若预设动作集合中存在与搜索动作匹配的动作，则将匹配的动作作为搜索动作对应的目标动作；

若预设动作集合中不存在与搜索动作匹配的动作，则基于预设规则从搜索图像中确定目标搜索图像，并将目标搜索图像作为当前搜索图像，返回执行对目标搜索图像进行图像内容识别，确定目标搜索图像包含的搜索动作。

比如，具体可以是若预设动作集合中存在与搜索动作匹配的动作，则将预设动作集合中的动作作为搜索动作对应的目标动作；若预设动作集合中，不存在与当前搜索图像中包含的动作匹配的动作，则智能电视机从采集的搜索图像中确定一张搜索图像作为当前搜索图像，例如，将当前搜索图像在时间顺序上的下一张搜索图像作为当前搜索图像，还可以是将与当前搜索图像的时间间隔超过阈值的搜索图像作为当前搜索图像，再次进行图像内容识别。

可选的，为了防止智能电视机不断执行识别动作的过程，可以设置循环结束条件，例如，可以是若智能电视机在连续10次进行图像内容识别，仍然无法匹配到预设动作集合中的任一动作，则结束本次搜索内容。可选的，智能电视机还可以显示提示信息，提示用户重新做出动作进行识别。

104、将目标动作的关联内容，作为基于搜索动作搜索到的内容，并进行推荐。

比如，具体可以是智能电视机将目标动作对应的关联内容作为根据搜索动作搜索到的内容，并显示该内容，像用户进行推荐。

可选的，为了减少对智能电视机的内容占用，预设动作集合中每个动作对应的可以是关联内容的标识信息，即步骤“将目标动作的关联内容，作为基于搜索动作搜索到的内容，并进行推荐”，具体可以包括：

将目标动作进行映射处理，得到目标动作对应的关联内容的标识信息；

基于标识信息获取关联内容；

将关联内容作为基于搜索动作搜索到的内容；

展示搜索到的内容，以进行推荐。

比如，具体可以是智能电视机将目标动作进行映射，确定目标动作对应的关联内容的标识信息，根据标识信息从内存中获取对应的关联内容，并进行展示。

可选的，为了进一步减少对智能电视机内存的占用，智能电视机可以基于关联内容的标识信息从服务器中获取对应的关联内容，将关联内容作为基于搜索动作搜索到的内容，并进行展示该内容，完成搜索过程。

本申请实施例通过响应于内容搜索指令，获取当前搜索图像；对当前搜索图像进行图像内容识别，确定当前搜索图像包含的搜索动作；将搜索动作与预设动作集合进行匹配，确定预设动作集合中与搜索动作匹配的目标动作，预设动作集合中每个动作对应至少一个关联内容；将目标动作的关联内容，作为基于搜索动作搜索到的内容，并进行推荐，该方案通过获取搜索图像进行图像内容识别，基于搜索图像中包含的搜索动作确定对应的内容，并推荐该内容，不需要用户通过键盘或者语音输入即可实现内容搜索，提高搜索效率。

为了便于更好地实施本申请实施例提供的内容搜索方法，在一实施例中还提供了一种内容搜索装置。其中名词的含义与上述内容搜索方法中相同，具体实现细节可以参考方法实施例中的说明。

该内容搜索装置具体可以集成在电子设备中，如图2所示，该内容搜索装置可以包括：获取单元301、第一确定单元302、第二确定单元303、和推荐单元304，具体如下：

获取单元301：用于响应于内容搜索指令，获取当前搜索图像。

比如，具体可以是用户按下智能电视机的遥控器的指定按钮，触发智能电视机的内容搜索指令，智能电视机响应该内容搜索指令，获取当前搜索图像，当前搜索图像可以是用户通过与智能电视机连接的手机等终端发送给智能电视机的，或者是智能电视机从自身的内存中获取的。

可选的，获取单元301可以包括响应子单元、获取子单元以及确定子单元，具体地：

响应子单元：用于响应于内容搜索指令，显示内容搜索界面；

获取子单元：用于通过图像采集设备获取至少一张搜索图像，并在内容搜索界面显示图像采集设备获取的搜索图像；

确定子单元：用于从搜索图像中确定当前搜索图像。

比如，具体可以是智能电视机响应于内容搜索指令，显示内容搜索界面，并启动摄像头进行图像采集，智能电视机可以控制摄像头定时获取搜索图像，例如，每隔一定的时间间隔拍摄一张图片，还可以是实时获取搜索图像，例如，视频，并在内容搜索界面显示摄像头采集的搜索图像，显示搜索图像可以让用户确认其是否位于摄像头的采集范围内，并且可以通过搜索图像确认其是否动作正确。

从摄像头采集的至少一张搜索图像中确定当前搜索图像，若摄像头只采集一张搜索图像，则将该搜索图像确定为当前搜索图像，若摄像头采集了多张搜索图像，由于，摄像头启动时，用户可能还为准备好动作，避免由于用户没有准备好动作导致识别的动作错误，可以将摄像头启动后一定时间后，采集的搜索图像作为当前搜索图像。

可选的，确定子单元可以包括检测模块、判断模块和图像确定模块，具体地：

检测模块：用于对搜索图像进行人脸检测处理；

判断模块：用于若搜索图像中包含人脸信息，则将搜索图像作为候选图像；

图像确定模块：用于从候选图像中确定当前搜索图像。

比如，具体可以是对搜索图像进行人脸检测处理，确定搜索图像中是否存在人脸信息，若搜索图像存在人脸信息，表示搜索图像中存在人体，可以对搜索图像中的人体进行搜索动作识别，则将包含人脸信息的搜索图像作为候选图像。将候选图像中拍摄时间最早的图像作为当前搜索图像，或者是将摄像头启动后一定时间后，采集的候选图像作为当前搜索图像。

可选的，获取单元301可以包括获取子单元和显示子单元，具体地：

获取子单元：用于获取动作提示信息，动作提示信息包括提示图片以及提示文字中的任意一种；

显示子单元：用于在内容搜索界面显示动作提示信息。

比如，具体可以是用户通过遥控上的指定按钮触发内容搜索指令，智能电视机响应该内容搜索指令进入动作搜索模式，显示内容搜索界面，并在内容搜索界面显示包含肢体动作的提示图片，以及启动智能电视机采集搜索图像，从搜索图像中确定当前搜索图像。

第一确定单元302：用于对当前搜索图像进行图像内容识别，确定当前搜索图像包含的搜索动作。

比如，具体可以是智能电视机可以基于图像边缘检测算法(例如canny算法、Sobel算法、或者Prewitt算法)当前搜索图片进行边缘特征提取，将提取的边缘特征确定为当前搜索图像包含的搜索动作。

可选的，可以通过提取的边缘特征确定动作的指代名称，例如，射箭动作、跳跃动作、或者是捂眼动作等。

可选的，第一确定单元302可以包括提取子单元和确定子单元，具体地：

提取子单元：用于通过动作识别模型对当前搜索图像进行关键点提取，得到当前搜索图像的关键点；

确定子单元：用于基于关键点确定当前搜索图像包含的搜索动作。

比如，具体可以是通过动作识别模型基于自下而上的姿态估算法(例如，openpose算法)，或者是自下而上的姿态估算法(例如，Alphapose算法)对当前搜索图像进行关键点进行检测，得到当前搜索图像中人体的关键点，根据关键点得到搜索动作，例如，根据关键点进行连线，得到当前搜索图像包含的搜索动作。

在一实施例中，动作识别模型通过关键点检测后，可以基于关键点检测确定当前搜索图像的搜索动作的指代名称，例如，射箭动作或者是跳跃动作等。

第二确定单元303：用于将搜索动作与预设动作集合进行匹配，确定预设动作集合中与搜索动作匹配的目标动作，预设动作集合中每个动作对应至少一个关联内容。

比如，具体可以是智能电视机将搜索动作与预设集合中的每一个动作对应的相关动作信息进行匹配，计算相似度，将预设动作集合中相似度最高的动作确定为搜索动作匹配的目标动作。

可选的，若预设动作集合中包含的动作为每个动作的指代名称，则可以对当前搜索图像进行图像内容识别，确定当前搜索图像包含的动作的指代名称，根据指代名称确定预设动作集合中与搜索动作匹配的目标动作。

可选的，第二确定单元303可以包括第一循环子单元和第二循环子单元，具体地：

第一循环子单元：用于若预设动作集合中存在与搜索动作匹配的动作，则将匹配的动作作为搜索动作对应的目标动作；

第二循环子单元：用于若预设动作集合中不存在与搜索动作匹配的动作，则基于预设规则从搜索图像中确定目标搜索图像，并将目标搜索图像作为当前搜索图像，返回执行对目标搜索图像进行图像内容识别，确定目标搜索图像包含的搜索动作。

比如，具体可以是若预设动作集合中存在与搜索动作匹配的动作，则将预设动作集合中的动作作为搜索动作对应的目标动作；若预设动作集合中，不存在与当前搜索图像中包含的动作匹配的动作，则智能电视机从采集的搜索图像中确定一张搜索图像作为当前搜索图像，例如，将当前搜索图像在时间顺序上的下一张搜索图像作为当前搜索图像，还可以是将与当前搜索图像的时间间隔超过阈值的搜索图像作为当前搜索图像，再次进行图像内容识别。

可选的，为了防止智能电视机不断执行识别动作的过程，可以设置循环结束条件，例如，可以是若智能电视机连续识别10次进行图像内容识别，仍然无法匹配到预设动作集合中的任一动作，则结束本次搜索内容。可选的，智能电视机还可以显示提示信息，提示用户重新做出动作进行识别。

推荐单元304：用于将目标动作的关联内容，作为基于搜索动作搜索到的内容，并进行推荐。

比如，具体可以是智能电视机将目标动作对应的关联内容作为根据搜索动作搜索到的内容，并显示该内容，像用户进行推荐。

可选的，推荐单元304可以包括映射子单元、获取子单元、内容确定子单元以及展示子单元，具体地：

映射子单元：用于将目标动作进行映射处理，得到目标动作对应的关联内容的标识信息；

获取子单元：用于基于标识信息获取关联内容；

内容确定子单元：用于将关联内容作为基于搜索动作搜索到的内容；

展示子单元：用于展示搜索到的内容，以进行推荐。

比如，具体可以是智能电视机将目标动作进行映射，确定目标动作对应的关联内容的标识信息，根据标识信息从内存中获取对应的关联内容，并进行展示。

可选的，为了进一步减少对智能电视机内存的占用，智能电视机可以基于关联内容的标识信息从服务器中获取对应的关联内容，将关联内容作为基于搜索动作搜索到的内容，并进行展示该内容，完成搜索过程。

本申请实施例内容搜索装置可以通过获取单元301响应于内容搜索指令，获取当前搜索图像；通过第一确定单元302对当前搜索图像进行图像内容识别，确定当前搜索图像包含的搜索动作；由第二确定单元303将搜索动作与预设动作集合进行匹配，确定预设动作集合中与搜索动作匹配的目标动作，预设动作集合中每个动作对应至少一个关联内容；通过推荐单元304将目标动作的关联内容，作为基于搜索动作搜索到的内容，并进行推荐，该方案通过获取搜索图像进行图像内容识别，基于搜索图像中包含的搜索动作确定对应的内容，并推荐该内容，不需要用户通过键盘或者语音输入即可实现内容搜索，提高搜索效率。

本申请实施例还提供一种电子设备，该电子设备可以是终端，如图3所示，其示出了本申请实施例所涉及的电子设备的结构示意图，具体来讲：

该电子设备可以包括一个或者一个以上处理核心的处理器1001、一个或一个以上计算机可读存储介质的存储器1002、电源1003和输入单元1004等部件。本领域技术人员可以理解，图3中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：

处理器1001是该电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器1002内的软件程序和/或模块，以及调用存储在存储器1002内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。可选的，处理器1001可包括一个或多个处理核心；优选的，处理器1001可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和计算机程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1001中。

存储器1002可用于存储软件程序以及模块，处理器1001通过运行存储在存储器1002的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器1002可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的计算机程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据电子设备的使用所创建的数据等。此外，存储器1002可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器1002还可以包括存储器控制器，以提供处理器1001对存储器1002的访问。

电子设备还包括给各个部件供电的电源1003，优选的，电源1003可以通过电源管理系统与处理器1001逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源1003还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

该电子设备还可包括输入单元1004，该输入单元1004可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。

尽管未示出，电子设备还可以包括显示单元等，在此不再赘述。具体在本实施例中，电子设备中的处理器1001会按照如下的指令，将一个或一个以上的计算机程序的进程对应的可执行文件加载到存储器1002中，并由处理器1001来运行存储在存储器1002中的计算机程序，从而实现各种功能，如下：

响应于内容搜索指令，获取当前搜索图像；

对当前搜索图像进行图像内容识别，确定当前搜索图像包含的搜索动作；

将搜索动作与预设动作集合进行匹配，确定预设动作集合中与搜索动作匹配的目标动作，预设动作集合中每个动作对应至少一个关联内容；

将目标动作的关联内容，作为基于搜索动作搜索到的内容，并进行推荐。

以上各个操作的具体实施可参见前面的实施例，在此不作赘述。

由上可知，本申请实施例的电子设备可以通过响应于内容搜索指令，获取当前搜索图像；对当前搜索图像进行图像内容识别，确定当前搜索图像包含的搜索动作；将搜索动作与预设动作集合进行匹配，确定预设动作集合中与搜索动作匹配的目标动作，预设动作集合中每个动作对应至少一个关联内容；将目标动作的关联内容，作为基于搜索动作搜索到的内容，并进行推荐，该方案通过获取搜索图像进行图像内容识别，基于搜索图像中包含的搜索动作确定对应的内容，并推荐该内容，不需要用户通过键盘或者语音输入即可实现内容搜索，提高搜索效率。

根据本申请的一个方面，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该电子设备执行上述实施例中各种可选实现方式中提供的方法。

本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过计算机程序来完成，或通过计算机程序控制相关的硬件来完成，该计算机程序可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。

为此，本申请实施例提供一种计算机可读存储介质，其中存储有计算机程序，该计算机程序，能够被处理器进行加载，以执行本申请实施例所提供的任一种内容搜索方法。

以上各个操作的具体实施可参见前面的实施例，在此不再赘述。

其中，该计算机可读存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)、磁盘或光盘等。

由于该计算机可读存储介质中所存储的计算机程序，可以执行本申请实施例所提供的任一种内容搜索方法，因此，可以实现本申请实施例所提供的任一种内容搜索方法所能实现的有益效果，详见前面的实施例，在此不再赘述。

以上对本申请实施例所提供的一种内容搜索方法、装置、电子设备和计算机可读存储介质进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种内容搜索方法，其特征在于，包括：

响应于内容搜索指令，获取当前搜索图像；

对所述当前搜索图像进行图像内容识别，确定所述当前搜索图像包含的搜索动作；

将所述搜索动作与预设动作集合进行匹配，确定所述预设动作集合中与所述搜索动作匹配的目标动作，所述预设动作集合中每个动作对应至少一个关联内容；

将所述目标动作的关联内容，作为基于所述搜索动作搜索到的内容，并进行推荐。

2.根据权利要求1所述的方法，其特征在于，所述将所述目标动作的关联内容，作为基于所述搜索动作搜索到的内容，并进行推荐，包括：

将所述目标动作进行映射处理，得到所述目标动作对应的关联内容的标识信息；

基于所述标识信息获取所述关联内容；

将所述关联内容作为基于所述搜索动作搜索到的内容；

展示所述搜索到的内容，以进行推荐。

3.根据权利要求1所述的方法，其特征在于，所述响应于内容搜索指令，获取当前搜索图像，包括：

响应于所述内容搜索指令，显示内容搜索界面；

通过图像采集设备获取至少一张搜索图像，并在所述内容搜索界面显示所述图像采集设备获取的搜索图像；

从所述搜索图像中确定当前搜索图像。

4.根据权利要求3所述的方法，其特征在于，所述响应于所述内容搜索指令，显示内容搜索界面之后，还包括：

获取动作提示信息，所述动作提示信息包括提示图片以及提示文字中的任意一种；

在所述内容搜索界面显示所述动作提示信息。

5.根据权利要求3所述的方法，其特征在于，所述将所述搜索动作与预设动作集合进行匹配，确定所述预设动作集合中与所述搜索动作匹配的目标动作，包括：

若所述预设动作集合中存在与所述搜索动作匹配的动作，则将所述匹配的动作作为所述搜索动作对应的目标动作；

若所述预设动作集合中不存在与所述搜索动作匹配的动作，则基于预设规则从所述搜索图像中确定目标搜索图像，并将所述目标搜索图像作为当前搜索图像，返回执行对所述目标搜索图像进行图像内容识别，确定所述目标搜索图像包含的搜索动作。

6.根据权利要求3所述的方法，其特征在于，所述从所述搜索图像中确定当前搜索图像，包括：

对所述搜索图像进行人脸检测处理；

若所述搜索图像中包含人脸信息，则将所述搜索图像作为候选图像；

从所述候选图像中确定当前搜索图像。

7.根据权利要求1至6任一项所述的方法，其特征在于，所述对所述当前搜索图像进行图像内容识别，确定所述当前搜索图像包含的搜索动作，包括：

通过动作识别模型对所述当前搜索图像进行关键点提取，得到所述当前搜索图像的关键点；

基于所述关键点确定所述当前搜索图像包含的搜索动作。

8.一种内容搜索装置，其特征在于，包括：

获取单元，用于响应于内容搜索指令，获取当前搜索图像；

第一确定单元，用于对所述当前搜索图像进行图像内容识别，确定所述当前搜索图像包含的搜索动作；

第二确定单元，用于将所述搜索动作与预设动作集合进行匹配，确定所述预设动作集合中与所述搜索动作匹配的目标动作，所述预设动作集合中每个动作对应有至少一个关联内容；

推荐单元，用于将所述目标动作的关联内容，作为基于所述搜索动作搜索到的内容，并进行推荐。

9.一种电子设备，其特征在于，包括存储器和处理器；所述存储器存储有计算机程序，所述处理器用于运行所述存储器内的计算机程序，以执行权利要求1至7任一项所述的内容搜索方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质用于存储计算机程序，所述计算机程序被处理器加载，以执行权利要求1至7任一项所述的内容搜索方法。

Images