CN115774806A - 一种搜索处理方法、装置、设备、介质及程序产品 - Google Patents

一种搜索处理方法、装置、设备、介质及程序产品 Download PDF

Info

Publication number
CN115774806A
CN115774806A CN202111052525.6A CN202111052525A CN115774806A CN 115774806 A CN115774806 A CN 115774806A CN 202111052525 A CN202111052525 A CN 202111052525A CN 115774806 A CN115774806 A CN 115774806A
Authority
CN
China
Prior art keywords
search
multimedia data
target
interface
result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111052525.6A
Other languages
English (en)
Inventor
张红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202111052525.6A priority Critical patent/CN115774806A/zh
Priority to PCT/CN2022/113248 priority patent/WO2023035893A1/zh
Publication of CN115774806A publication Critical patent/CN115774806A/zh
Priority to US18/202,795 priority patent/US20230297610A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/438Presentation of query results

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例提供了一种搜索处理方法、装置、设备、介质及程序产品,其中的方法包括:在服务界面上显示多媒体数据;响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面;在第一区域内显示与多媒体数据关联的一个或多个搜索标签;响应于对第一区域中显示的搜索标签中目标标签的选择操作,在第二区域中显示与目标标签关联的搜索结果。采用本申请实施例可提高对多媒体数据的搜索效率。

Description

一种搜索处理方法、装置、设备、介质及程序产品
技术领域
本申请涉及计算机技术领域,具体涉及应用程序领域,尤其涉及一种搜索处理方法、装置、设备、介质及程序产品。
背景技术
许多应用场景(如社交会话场景、线上购物场景、娱乐场景等)中用户往往具有对多媒体数据进行搜索的需求;例如,在使用社交应用程序进行社交会话的场景中,用户可能具有对社交会话界面中多媒体数据进行搜索的需求。
经实践发现,现有技术中对多媒体数据的搜索,需要手动将多媒体数据复制到具有搜索功能的搜索引擎中进行搜索;如多媒体数据为图像,当存在对社交会话界面中图像进行搜索的需求时,需将图像复制到搜索引擎中进行搜索,这使得搜索路径较长、搜索多媒体数据以及查看多媒体数据的效率较低。因此,如何提高对多媒体数据的搜索效率成为研究热点话题。
发明内容
本申请实施例提供一种搜索处理方法、装置、设备、介质及程序产品,可提高对多媒体数据的搜索效率。
一方面,本申请实施例提供一种搜索处理方法,该方法包括:
在服务界面上显示多媒体数据;
响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面,资源搜索界面中包含显示搜索结果的结果显示区域,结果显示区域包括第一区域和第二区域;
在第一区域内显示与多媒体数据关联的一个或多个搜索标签;
响应于对第一区域中显示的搜索标签中目标标签的选择操作,在第二区域中显示与目标标签关联的搜索结果。
另一方面,本申请实施例提供一种搜索处理方法,该方法应用于服务器,该方法包括:
获取数据处理请求,数据处理请求中携带待处理的多媒体数据;
对多媒体数据进行识别处理,得到与多媒体数据关联的一个或多个搜索标签;
基于一个或多个搜索标签生成响应通知消息,响应通知消息包括一个或多个搜索标签;或者,响应通知消息包括一个或多个搜索标签以及与一个或多个搜索标签中目标标签关联的搜索结果;
输出响应通知消息,响应通知消息用于触发第一客户端在资源搜索界面的第一区域内显示与多媒体数据关联的一个或多个搜索标签。
另一方面,本申请实施例提供一种搜索处理装置,该装置包括:
显示单元,用于在服务界面上显示多媒体数据;
处理单元,用于响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面,资源搜索界面中包含显示搜索结果的结果显示区域,结果显示区域包括第一区域和第二区域;
显示单元,还用于在第一区域内显示与多媒体数据关联的一个或多个搜索标签;
处理单元,还用于响应于对第一区域中显示的搜索标签中目标标签的选择操作,在第二区域中显示与目标标签关联的搜索结果。
在一种实现方式中,服务界面为社交会话界面,社交会话界面包括以社交会话消息形式显示的多媒体数据;
处理单元用于响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面时,具体用于:
响应于对社交会话界面中多媒体数据的触发事件,在社交会话界面中显示选项栏,选项栏中包括搜索选项;
若检测到对选项栏中搜索选项的选中操作,则确定产生对多媒体数据的搜索操作,显示资源搜索界面。
在一种实现方式中,多媒体数据包括多媒体数据的缩略信息,处理单元用于在服务界面上显示多媒体数据时,具体用于:
在服务界面上显示多媒体数据的缩略信息。
在一种实现方式中,服务界面为内容显示界面,内容显示界面显示有多媒体数据;内容显示界面包含搜索控件;
处理单元用于响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面时,具体用于:
响应于对内容显示界面中搜索控件的选择操作,输出分享窗口,分享窗口中包含搜索选项;
若检测到对分享窗口中搜索选项的选中操作,则确定产生对多媒体数据的搜索操作,显示资源搜索界面。
在一种实现方式中,多媒体数据包括多媒体数据的数据内容,内容显示界面显示有多媒体数据的数据内容。
在一种实现方式中,处理单元,还用于:
响应于在服务界面上对多媒体数据的搜索操作,显示搜索对象窗口,搜索对象窗口中包含至少一种搜索应用对象的对象标识;
响应于在搜索对象窗口中执行的选择操作,从搜索对象窗口显示的至少一种搜索应用对象的对象标识中确定M个目标对象标识,M为正整数,并触发M个目标对象标识所指示的搜索应用对象进行搜索处理;
其中,资源搜索界面中显示N个目标对象标识所指示的搜索应用对象的搜索结果,N为小于或等于M的正整数。
在一种实现方式中,第一区域内显示的一个或多个搜索标签中的每个搜索标签,与M个目标对象标识中一个目标对象标识指示的搜索应用对象对应;M个目标对象标识中不同目标对象标识指示的搜索应用对象对应不同的搜索标签。
在一种实现方式中,处理单元,还用于:
响应于对第二区域显示的搜索结果中目标搜索结果的选择操作,触发目标搜索结果对应的结果应用对象显示目标搜索结果的搜索信息;
其中,在第二区域中显示的搜索结果包括:结果提示信息,以及,与结果提示信息对应的结果应用对象的应用对象标识。
在一种实现方式中,处理单元,还用于:
在结果应用对象显示目标搜索结果的搜索信息时,显示分享控件;
响应于对分享控件的选中操作,从第二区域中获取目标搜索结果对应的搜索标识;其中,搜索标识用于唯一标识目标搜索结果,搜索标识包括目标搜索结果的链接;
对搜索标识进行分享处理。
在一种实现方式中,处理单元,还用于:
对多媒体数据进行特征分析处理,得到多媒体数据的至少一个关键特征;
建立至少一个关键特征中每个关键特征对应的搜索标签;
根据目标关键特征进行搜索处理,得到目标关键特征对应的与目标标签关联的搜索结果。
在一种实现方式中,目标关键特征属于第一特征类型或第二特征类型,第一特征类型与第二特征类型不同;
处理单元,还用于:
若多媒体数据的目标关键特征属于第一特征类型,则基于第一特征类型和目标关键特征进行搜索处理,得到与第一特征类型相关的结果应用对象对应的搜索结果;
若多媒体数据的目标关键特征属于第二特征类型,则基于第二特征类型和目标关键特征进行搜索处理,得到与第二特征类型相关的结果应用对象对应的搜索结果;
与第一特征类型相关的结果应用对象和与第二特征类型相关的结果应用对象的类型不相同。
另一方面,本申请实施例提供一种搜索处理装置,该搜索处理装置搭载于服务器上,该装置包括:
获取单元,用于获取数据处理请求,数据处理请求中携带待处理的多媒体数据;
处理单元,用于对多媒体数据进行识别处理,得到与多媒体数据关联的一个或多个搜索标签;
处理单元,用于基于一个或多个搜索标签生成响应通知消息,响应通知消息包括一个或多个搜索标签;或者,响应通知消息包括一个或多个搜索标签以及与一个或多个搜索标签中目标标签关联的搜索结果;
处理单元,用于输出响应通知消息,响应通知消息用于触发第一客户端在资源搜索界面的第一区域内显示与多媒体数据关联的一个或多个搜索标签。
在一种实现方式中,处理单元,还用于:
接收搜索请求,搜索请求中包括对一个或多个搜索标签执行的选择操作所选中的搜索标签;
根据所选中的搜索标签进行搜索处理,得到与所选中的搜索标签关联的搜索结果;
基于与所选中的搜索标签关联的搜索结果生成结果通知消息;
结果通知消息用于触发第一客户端在资源搜索界面的第二区域内显示与所选中的搜索标签关联的搜索结果。
在一种实现方式中,服务器包括搜索服务模块、召回结果模块、数据处理模块;处理单元,还用于:
通过搜索服务模块响应数据处理请求,并向数据处理模块发送多媒体数据;
采用数据处理模块对多媒体数据进行识别处理,得到与多媒体数据关联的一个或多个搜索标签;
通过召回结果模块根据目标标签进行搜索处理,得到目标标签关联的搜索结果。
在一种实现方式中,服务器包括离线处理模块以及索引模块;处理单元,还用于:
接收待存储的搜索资源,搜索资源是结果应用对象的提供者提供的;通过离线处理模块将搜索资源发送至数据处理模块;
采用数据处理模块对接收到的搜索资源进行识别处理,得到与搜索资源关联的搜索标签,并将与搜索资源关联的搜索标签返回给离线处理模块;
通过离线处理模块将与搜索资源关联的搜索标签以及搜索资源发送至索引模块;
采用索引模块对与搜索资源关联的搜索标签以及搜索资源进行关联存储。
另一方面,本申请提供了一种计算机设备,该计算机设备包括:
处理器,用于加载并执行计算机程序;
计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,该计算机程序被处理器执行时,实现上述搜索处理方法。
一方面,本申请提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,该计算机程序适于由处理器加载并执行上述搜索处理方法。
一方面,本申请提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,计算机指令被处理器执行时实现上述的搜索处理方法。
本申请实施例中,支持在服务界面上对多媒体数据执行搜索操作,并显示资源搜索界面;其中,在资源搜索界面中显示多媒体数据关联的一个或多个搜索标签,以及显示与目标标签关联的搜索结果。上述方案中,可直接对服务界面上显示的多媒体数据执行搜索操作,得到多媒体数据关联的搜索标签以及目标标签关联的搜索结果,这简化了多媒体数据的搜索过程,缩短搜索路径,提高搜索效率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a示出了本申请一个示例性实施例提供的一种图像的示意图;
图1b示出了本申请一个示例性实施例提供的一种搜索处理场景的示意图;
图2示出了本申请一个示例性实施例提供的一种搜索处理方法的流程示意图;
图3a示出了本申请一个示例性实施例提供的一种图像的缩略图的示意图;
图3b示出了本申请一个示例性实施例提供的一种在内容显示界面中全屏显示图像的示意图;
图3c示出了本申请一个示例性实施例提供的一种通过社交会话界面触发显示内容显示界面的示意图;
图4a示出了本申请一个示例性实施例提供的一种服务界面为社交会话界面的示意图;
图4b示出了本申请一个示例性实施例提供的一种服务界面为内容显示界面的示意图;
图5示出了本申请一个示例性实施例提供的一种资源搜索界面的示意图;
图6示出了本申请一个示例性实施例提供的一种搜索处理方法的流程示意图;
图7a示出了本申请一个示例性实施例提供的一种搜索对象窗口的示意图;
图7b示出了本申请一个示例性实施例提供的一种搜索应用对象为搜索小程序时,对多媒体数据执行搜索的流程示意图;
图8示出了本申请一个示例性实施例提供的一种触发目标搜索结果的流程示意图;
图9示出了本申请一个示例性实施例提供的一种将目标搜索结果的搜索标识以社交会话消息形式分享至社交会话界面的示意图;
图10a示出了本申请一个示例性实施例提供的一种搜索处理场景的示意图;
图10b示出了本申请一个示例性实施例提供的一种搜索处理场景的示意图;
图11a示出了本申请一个示例性实施例提供的一种搜索处理系统的架构示意图;
图11b示出了本申请一个示例性实施例提供的一种搜索处理方法的流程示意图;
图11c示出了本申请一个示例性实施例提供的一种识别算法的架构示意图;
图12示出了本申请一个示例性实施例提供的一种搜索处理装置的结构示意图;
图13示出了本申请一个示例性实施例提供的一种搜索处理装置的结构示意图;
图14示出了本申请一个示例性实施例提供的一种计算机设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例涉及多媒体数据,多媒体数据可包括但不限于:动画、音频、图像、文本、视频、富文本等等;除特别说明外,后续均以多媒体数据为图像为例进行阐述。图像往往包含一个或多个图像元素,一种示例性的图像以及图像所包含的图像元素的示意图可参见图1a,如图1a所示,图像101中包含人1011、滑板1012、鸟1013以及帽子1014,则可将图像101所包含的各个对象称为图像元素,如图像101中包括的图像元素为人1011、滑板1012、鸟1013以及帽子1014。通过对图像进行图像识别,可获取到图像的图像内容以及图像属性信息等,这样基于图像的图像内容以及图像属性信息可更好地对图像进行分析;其中,图像内容可包括图像所包含的图像元素、图像所表达的含义(如图1a所示图像所表达的含义为:一个滑滑板的男孩)等,图像属性信息可包括图像的像素、尺寸、来源、地址等信息。
上述提及的多媒体数据(如图像)可显示于能够用于获取多媒体数据并触发进行数据搜索的目标应用程序所提供的服务界面上。其中,应用程序可是指为完成某项或多项特定功能的计算机程序。按照不同维度(如应用程序的运行方式、功能等)对应用程序进行归类,可得到同一应用程序在不同维度下的类型,其中:①按照应用程序的运行方式分类,应用程序可包括但不限于:安装在终端中的客户端、无需下载安装即可使用的小程序、通过浏览器打开的web应用程序等等。②按照应用程序的功能类型分类,应用程序可包括但不限于:IM(Instant Messaging,即时通信)应用程序、内容交互应用程序等等;其中,即时通信应用程序是指基于互联网的即时交流消息和社交交互的应用程序,即时通信应用程序可以包括但不限于:包含通信功能的社交应用程序、包含社交交互功能的地图应用程序、游戏应用程序等等。内容交互应用程序是指能够实现内容交互的应用程序,例如可以是网银、分享平台、个人空间、新闻等应用程序。本申请实施例对目标应用程序具体为上述哪种类型的应用程序不作限定,特在此说明。
本申请实施例支持直接对目标应用程序的服务界面中显示的多媒体数据进行搜索,得到多媒体数据关联的搜索结果;例如:对目标应用程序(如即时通信应用程序)中社交会话界面(即用于显示参与社交会话的用户所发送的社交会话消息的界面)上显示的图像(即多媒体数据)进行搜索,得到图像所关联的搜索结果,具体该搜索结果可能与图像所包含的某个或多个图像元素关联,如图像中图像元素包括小狗,那么与图像关联的搜索结果可包括:搜索得到的包含有图像元素“小狗”的图像。基于上述相关内容的描述,本申请实施例提出一种搜索处理方案,该搜索处理方案支持对服务界面上显示的多媒体数据执行搜索操作,并在资源搜索界面中显示多媒体数据关联的一个或多个搜索标签,以及与目标标签关联的搜索结果;这样可直接在服务界面上对多媒体数据执行搜索操作,这简化了多媒体数据的搜索过程,缩短搜索路径,提高搜索效率。
上述提及的搜索处理方案可以由目标终端来执行,具体可由目标终端中运行的目标应用程序来执行。其中,目标终端可以是任一终端,终端可包括但不限于:智能手机(如Android手机、iOS手机等)、平板电脑、个人电脑、便携式个人计算机、移动互联网设备(Mobile Internet Devices,简称MID)、智能电视、车载设备、头戴设备等可以进行触屏的智能设备,本申请实施例并不对终端的类型进行限定,在此说明。一种示例性的搜索处理场景的示意图可参见图1b,如图1b所示,假设目标终端为具有图像(即多媒体数据)搜索需求的目标用户(如任一用户)所使用的终端102,终端102中运行有社交应用程序,这样目标用户可通过终端102中运行的社交应用程序参与社交会话。具体地,目标用户可在社交应用程序中任一社交会话的社交会话界面中发送或阅读社交会话消息,实现参与社交会话。其中,社交会话界面中包括社交会话消息流,该社交会话消息流包含参与社交会话的至少一个用户发送的社交会话消息。假设在社交应用程序的社交会话界面中包括以社交会话消息形式显示的多媒体数据,那么响应于对该多媒体数据的搜索操作,可显示资源搜索界面,该资源搜索界面中可包括多媒体数据关联的一个或多个搜索标签(如搜索标签1022),以及一个或多个搜索标签中目标标签关联的搜索结果(如搜索标签1022关联的搜索结果1023)。基于上述描述可知,本申请实施例用于显示多媒体数据以及用于显示搜索结果的界面均属于社交应用程序,也就是说对多媒体数据的搜索过程不需要应用程序的切换和跳转(如将图像从社交应用程序中手动复制至搜索应用中进行搜索),这简化了多媒体数据的搜索过程,缩短搜索路径,提高搜索效率,实现社交应用程序的搜索功能。
值得注意的是,上述是以目标应用程序为社交应用程序,服务界面为社交应用程序中社交会话界面为例进行介绍的;但在实际的应用场景中,服务界面还可以是社交应用程序中的社交公共服务界面,如动态空间界面、朋友圈等界面,这样多媒体数据可是指社交公共服务界面中社交信息流所包含的一个社交信息;其中,社交信息流可是指feed流,是一种持续更新并展现社交信息给用户的信息流。或者,服务界面还可以是多媒体数据的预览界面,该预览界面可用于显示多媒体数据的详情信息;等等。本申请实施例对目标应用程序以及目标应用程序中的服务界面的种类和样式不作限定,特在此说明。
基于上述描述的搜索处理方案,本申请实施例提出更为详细的搜索处理方法,下面将结合附图对本申请实施例提出的搜索处理方法进行详细介绍。
图2示出了本申请一个示例性实施例提供的一种搜索处理方法的流程示意图;该搜索处理方法可以由目标终端(如任一终端)来执行,该搜索处理方法可包括但不限于步骤S201-S204:
S201:在服务界面上显示多媒体数据。
当目标用户打开并使用目标应用程序(如社交应用程序)时,可在目标应用程序中显示服务界面;根据目标应用程序的类型不同,目标应用程序的服务界面并不相同,或者,同一目标应用程序所包含的各个服务界面也并不相同。例如:目标应用程序为社交应用程序,那么社交应用程序的服务界面可包括:用于实现社交会话的社交会话界面、用于显示社交信息流(如feeds流)的社交公共服务界面、用于预览多媒体数据的预览界面、用于设置目标用户(如持有目标终端的使用者)的用户信息(如用户账号、用户昵称、用户头像等信息)的信息设置界面、……、等等。为便于阐述,本申请实施例以应用程序为社交应用程序,社交应用程序的服务界面分别为:用于参与社交会话的社交会话界面,以及用于预览多媒体数据的预览界面为例进行说明;其中,本申请实施例中将用于预览多媒体数据的预览界面称为内容显示界面,在此说明。
上述给出社交应用程序的几种服务界面,下面对各个服务界面中显示多媒体数据的实现方式进行简单介绍。其中:
1)服务界面为社交会话界面,该社交会话界面可用于显示参与社交会话的多个用户的社交会话消息流,那么当多媒体数据以社交会话消息形式显示于社交会话界面中时,响应于对社交会话界面中多媒体数据的搜索操作,可显示资源搜索界面。具体地,多媒体数据包括多媒体数据的缩略信息,这样在社交会话界面(如服务界面)上可显示多媒体数据的缩略信息。下面举例说明多媒体数据包括的缩略信息;例如:多媒体数据为文本,文本包括文本的文档图标,即文本的缩略信息为文档图标,那么文本可以文档图标的形式显示于社交会话界面中,或者,文本包括文本的摘要信息(如标题信息、对文本提取的关键信息等),即文本的缩略信息为摘要信息,那么文本可以摘要信息的形式显示于社交会话界面中。其中,文本是指一种书面语言的表现形式;文本中可包括多个字符,一个或多个字符组成字符串,字符可包括以下至少一种:中文字符(即汉字)、英文字符(即字母)、数字和标点符号(如逗号“,”、句号“。”、方括号“【】”)。再如:多媒体数据为图像,图像包括图像的缩略图,即图像的缩略信息为缩略图,那么图像可以缩略图的形式显示于社交会话界面中。一种示例性的在社交应用程序的社交会话界面中显示图像的缩略图的示意图可参见图3a,如图3a所示,社交应用程序中显示社交会话界面301,该社交会话界面301是用户A与目标用户之间的社交会话所对应的会话界面;社交会话界面301中包括社交会话消息流302,该社交会话消息流302中包括社交会话消息3021以及社交会话消息3022,其中,社交会话消息3022包括图像的缩略图,该缩略图可以理解为将图像的尺寸缩小后得到的。
2)服务界面为内容显示界面,内容显示界面可称为预览界面;当社交应用程序的服务界面为多媒体数据的预览界面时,响应于对社交会话界面中多媒体数据的搜索操作,可显示资源搜索界面。具体地,多媒体数据包括多媒体数据的数据内容,这样在内容显示界面中显示有多媒体数据的数据内容。下面举例说明多媒体数据包括的数据内容;例如:多媒体数据为文本,文本包括字符串,即文本的数据内容为该文本所包含的字符串,那么在内容显示界面中显示有该文本所包含的全部或部分字符串,即内容显示界面用于显示文本的文本详情信息。再如:多媒体数据为图像,图像可进行全屏显示,此时图像的数据内容为全屏显示的图像,那么在内容显示界面中可全屏显示该图像。一种示例性的在内容显示界面中全屏显示图像的示意图可参见图3b,如图3b所示,社交应用程序中显示内容显示界面303,该内容显示界面303全屏显示了图像,即图像的显示尺寸与内容显示界面的界面尺寸相匹配(如相同,或尺寸差距值小于预设差距值),此时图像的数据内容可包括全屏显示的图像。
需要说明的是,①本申请实施例支持从社交应用程序的社交会话界面中触发显示多媒体数据的内容显示界面;换句话说,通过触发图3a所示的社交会话界面301中的社交会话消息3022,可触发显示图3b所示的内容显示界面303,该内容显示界面303中显示有对社交会话消息3022所包含的图像进行放大后的图像。上述实现方式的界面流程示意图可参见图3c,如图3c所示,在社交会话界面301中触发社交会话消息3022后,显示内容显示界面303;其中,针对社交会话界面301中社交会话消息3022的触发操作可包括但不限于:手势操作(如点击、拖拽以及长按等)、语音输入操作以及振动操作(如晃动手机)等。另外,内容显示界面也可以是从社交应用程序所包含的其他服务界面中触发显示的,如社交应用程序包括社交公共服务界面(如朋友圈),当在社交公共服务界面中显示有多媒体数据(如以社交消息流形式显示多媒体数据)时,可直接在社交公共服务界面上触发对多媒体数据的搜索操作,或者,从社交公共服务界面上触发显示内容显示界面,进而从内容显示界面中触发对多媒体数据的搜索操作。
②本申请实施例提及的社交会话界面可包括:目标用户与其他用户(如与目标用户具有好友关系、同事关系或陌生人关系的用户)之间的会话界面,社交会话界面还可以包括:目标用户与社交应用程序之间的会话界面;换句话说,在社交应用程序中可以部署智能机器人,在目标用户与智能机器人之间进行社交会话的过程中,目标用户可发送多媒体数据,且智能机器人可以接收目标用户发送的多媒体数据,并返回与多媒体数据关联的搜索标签以及搜索结果。当然,智能机器人也可以部署于目标用户与其他用户之间的社交会话界面中,这样在社交会话过程中支持从社交会话界面内唤起智能机器人执行搜索。③上述实现方式均是以目标应用程序为社交应用程序,服务界面为社交应用程序所包含的界面为例进行说明的;但可以理解的是,目标应用程序还可以是其他类型的目标应用程序,如目标应用程序为地图类应用程序、游戏类应用程序以及拍照类应用程序等等,相应地服务界面为地图类应用程序所包含的界面(如地图显示界面)等等;本申请实施例对目标应用程序的种类以及服务界面的样式均不作限定,在此说明。
S202:响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面。
正如前述所描述的,目标应用程序的服务界面可包括多种类型,如社交应用程序的服务界面包括社交会话界面、内容显示界面等,那么在不同类型的服务界面上对多媒体数据执行的搜索操作的实现方式并不相同。下面分别以服务界面为社交会话界面,或者服务界面为内容显示界面,且多媒体数据为图像为例,对在服务界面上对多媒体数据执行搜索操作,以及触发显示资源搜索界面的实现方式进行介绍,其中:
1)服务界面为社交会话界面,社交会话界面包括以社交会话消息形式显示的多媒体数据;在这种实现方式中,响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面的实现方式可包括:响应于对社交会话界面中多媒体数据的触发事件,在社交会话界面中显示选项栏,选项栏中包括搜索选项;若检测到对选项栏中搜索选项的选中操作,则确定产生对多媒体数据的搜索操作,显示资源搜索界面。其中,触发事件可包括但不限于:对社交会话界面中多媒体数据执行触发操作(如点击、双击、右键等操作)时所产生的事件、在社交会话界面中检测到存在多媒体数据时所产生的事件、在社交会话界面中检测到光标(如电子笔、遥控器、鼠标等设备在显示屏幕中映射的光标)处于多媒体数据所处显示区域内时所产生的事件等;其中,在社交会话界面中检测到多媒体数据或在多媒体数据所显示区域内存在光标时可产生触发事件的实现方式,在一定程度上提示目标用户可以对多媒体数据进行搜索。综上所述,本申请实施例支持直接从社交会话界面中执行对社交会话界面中多媒体数据的搜索操作。
若多媒体数据包括多媒体数据的缩略信息,则在社交会话界面中显示多媒体数据的缩略信息,对社交会话界面中多媒体数据的触发事件可是指对社交会话界面中多媒体数据的缩略信息的触发事件。一种示例性的在社交会话界面上对多媒体数据的缩略信息执行搜索操作,并显示资源搜索界面的流程示意图可参见图4a;如图4a所示,假设服务界面为社交会话界面301,在该社交会话界面301中显示有以社交会话消息形式显示的图像的缩略图(即社交会话消息3022);当图像的缩略图被触发(如被点击、双击等)时,可在社交会话界面301中显示选项栏401,该选项栏401中包含一个或多个选项,如包括搜索选项4011、复制选项、放大选项等等;若选项栏401中的搜索选项4011被选中,确定产生对图像的搜索操作,表示目标用户想要搜索该图像,则显示资源搜索界面402。
2)服务界面为内容显示界面,内容显示界面显示有多媒体数据;在这种实现方式下,响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面的实现方式可包括:内容显示界面包含搜索控件(或称为搜索组件等),响应于对内容显示界面中搜索控件的选择操作,输出分享窗口,分享窗口中包含搜索选项;若检测到对分享窗口中搜索选项的选中操作,则确定产生对多媒体数据的搜索操作,显示资源搜索界面。也就是说,本申请实施例支持从多媒体数据的预览界面(即内容显示界面)中直接触发对多媒体数据的搜索操作。
若多媒体数据包括多媒体数据的数据内容,则在内容显示界面显示有多媒体数据的数据内容,对服务界面中多媒体数据的搜索操作可是指对内容显示界面中多媒体数据的数据内容的搜索操作。一种示例性的在内容显示界面上对多媒体数据的数据内容执行搜索操作,并触发显示资源搜索界面的流程示意图可参见图4b;如图4b所示,假设服务界面为内容显示界面303,多媒体数据为图像,在内容显示界面303中全屏显示图像;内容显示界面303中包含搜索控件403,当搜索控件403被触发时,触发显示分享窗口404,分享窗口404中包含一个或多个选项,如包括搜索选项4041;当搜索选项4041被触发时,确定产生对图像的搜索操作,表示目标用户想要搜索图像,则显示资源搜索界面402。
值得一提的是,上述只是给出两种示例性的对多媒体数据执行搜索操作的实现方式,且图4a所示的社交会话界面301、选项栏401以及图4b所示的分享窗口404均为示例性;例如,图4b所示的分享窗口404除覆盖显示于内容显示界面303之上以外,还可以单独的界面的形式进行显示。本申请实施例对各个界面的显示样式和显示位置不作限定。
基于上述描述的触发显示资源搜索界面的实现方式可知,本申请实施例支持直接从社交会话界面中触发对社交会话界面所包含的多媒体数据的搜索操作,无需将多媒体数据进行复制和转移,简化搜索操作,提高搜索效率。
S203:在第一区域内显示与多媒体数据关联的一个或多个搜索标签。
S204:响应于对第一区域中显示的搜索标签中目标标签的选择操作,在第二区域中显示与目标标签关联的搜索结果。
步骤S203-S204中,当目标用户具有对服务界面上显示的多媒体数据进行搜索的需求时,目标用户可以在服务界面上对多媒体数据执行搜索操作,这样目标终端可响应于在服务界面上对多媒体数据的搜索操作,触发显示资源搜索界面。其中,资源搜索界面用于显示与多媒体数据关联的一个或多个搜索标签,以及一个或多个搜索标签中目标标签关联的搜索结果的界面。其中,与多媒体数据关联的一个或多个搜索标签以及目标标签关联的搜索结果均是对多媒体数据进行搜索处理后得到的。需要说明的是,上述提及的目标标签可以是默认的搜索标签(如一个或多个搜索标签中的任一个),或者,由目标用户在资源搜索界面中选择的标签,本申请实施例对此不作限定。
其中,资源搜索界面中包含显示搜索结果的结果显示区域,该结果显示区域包括第一区域和第二区域;进一步的,结果显示区域的第一区域内显示多媒体数据关联的一个或多个搜索标签,而结果显示区域的第二区域中显示与目标标签关联的搜索结果,该目标标签可以是响应于对第一区域中显示的搜索标签中目标标签的选择操作时选中的,即目标标签是第一区域中被选择的搜索标签。可选的,在资源搜索界面中还可以包括用于显示多媒体数据的显示区域,即在资源搜索界面中的显示区域内显示被触发的多媒体数据。下面结合图5给出资源搜索界面的一种示例性示意图;如图5所示,(1)该资源搜索界面402中包含显示多媒体数据的显示区域4021,该显示区域4021用于显示多媒体数据,如多媒体数据为图像,该显示区域4021用于显示图像的缩略图等。(2)资源搜索界面402中还包含用于显示搜索结果的结果显示区域4022,该结果显示区域4022中包含第一区域40221以及第二区域40222。其中:
①第一区域40221用于显示与多媒体数据关联的一个或多个搜索标签。根据多媒体数据的类型不同,多媒体数据与搜索标签之间的关联关系并不相同。例如:多媒体数据为图像,则对图像进行图像识别处理后可得到该图像关联的关键词(如关键词可指示图像所包含的图像元素),则可将图像的关键词确定为搜索标签;即图像与图像的搜索标签之间的关联关系可体现为:图像的搜索标签可用于指示图像所包含的图像元素。再如:多媒体数据为文本,该文本包括一段或多段字符串,则对该文本进行文本识别后可提取得到该文本的关键词,则可将文本的关键词确定为与该文本关联的搜索标签;即文本与文本的搜索标签之间的关联关系可体现为:文本的搜索标签可用于指示文本的关键内容(如标题、用于表达文本的中心思想的词语等)。
②第二区域40222用于显示与目标标签关联的搜索结果。当第一区域40221中任一搜索标签(如目标标签)被选中时,可在第二区域40222中显示被选中的该任一搜索标签关联的搜索结果,即该搜索结果是基于该任一搜索标签搜索得到的。举例来说,在第一区域40221中被选中的目标标签为“小明”,则在第二区域40222中显示的与目标标签关联的搜索结果均与“小明”相关。另外,在第一区域40221中可突出显示被选中的目标标签,突出显示的方式可包括:高亮显示、颜色显示等等,比如,高亮显示是指将突出显示的目标标签所占的区域以亮度高于其他搜索标签的亮度进行显示,颜色显示是指将突出显示的目标标签的字体以不同于其他搜索标签的字体的颜色进行显示。
另外,当在第一区域40221中切换被选中的目标标签时,在第二区域40222中切换显示对应的搜索结果;继续参见图5,目前第一区域40221中被选中的搜索标签为标签403,则在第二区域40222中显示的是与标签403关联的搜索结果;当在第一区域40221中执行标签切换操作时,如在第一区域40221中选中标签404,则在第二区域40222中采用标签404关联的搜索结果替换显示标签403关联的搜索结果。还需值得注意的是,响应于对服务界面上多媒体数据搜索操作时,所显示的资源搜索界面中第一区域内可默认选中一个搜索标签,此时该默认选中的搜索标签为目标标签,在第二区域内默认显示该搜索标签关联的搜索结果,这样能在一定程度上提示目标用户切换搜索标签来获取不同搜索标签关联的搜索结果。本申请实施例并不限定默认选中哪一个搜索标签,例如,可按照排序规则对多个搜索标签进行排序,并将排序位置位于第一位置的搜索标签确定为目标标签。其中,对于图像而言其排序规则可包括:根据搜索标签对应关键词所指示的图像元素在图像中所占的显示面积来确定目标标签;当显示面积越大时,该图像元素对应关键词所指示的搜索标签可排列于靠前的位置,则可将显示面积最大(即排列于第一位置)的搜索标签确定为默认被选中的目标标签。当然,上述只是给出图像的一种排序规则,本申请实施例对排序规则的具体实现方式不作限定。
本申请实施例中,支持在服务界面上对多媒体数据执行搜索操作,并显示资源搜索界面;其中,在资源搜索界面中显示多媒体数据关联的一个或多个搜索标签,以及显示与目标标签关联的搜索结果。上述方案中,可直接对服务界面上显示的多媒体数据执行搜索操作,得到多媒体数据关联的搜索标签以及目标标签关联的搜索结果,这简化了多媒体数据的搜索过程,缩短搜索路径,提高搜索效率。
图6示出了本申请一个示例性实施例提供的一种搜索处理方法的流程示意图;该搜索处理方法可以由目标终端(如任一终端)来执行,该搜索处理方法可包括但不限于步骤S601-S607:
S601:在服务界面上显示多媒体数据。
需要说明的是,步骤S601所示的具体实施过程可参见前述图2所示实施例中步骤S201所示的具体实施过程的相关描述,在此不作赘述。
S602:响应于在服务界面上对多媒体数据的搜索操作,显示搜索对象窗口。
S603:响应于在搜索对象窗口中执行的选择操作,从搜索对象窗口显示的至少一种搜索应用对象的对象标识中确定M个目标对象标识,并触发M个目标对象标识所指示的搜索应用对象进行搜索处理。
步骤S602-S603中,本申请实施例支持由目标用户来选择用于对多媒体数据进行搜索处理的搜索应用对象;其中,搜索应用对象可是指具备搜索功能的搜索应用(或称为搜索引擎),搜索应用对象的对象标识可是指搜索应用对象的网址、可链接至搜索应用对象的图标等;通过调用搜索应用对象可实现对多媒体数据进行搜索处理。
可选的,搜索应用对象可是指具备搜索功能的第三方搜索应用;该搜索应用对象与前述提及的目标应用程序进行了绑定,这样在目标应用程序中存在对多媒体数据的搜索操作时,可调用与目标应用程序绑定的搜索应用对象来对多媒体数据进行搜索,相比于现有的需要在目标应用程序中下载多媒体数据后再启动搜索应用对象,并将多媒体数据复制到启动后的搜索应用对象中进行搜索而言,不需要重新启动客户端,节省流量,简化搜索操作,提高搜索速度。或者:搜索应用对象是部署(或运行)于目标应用程序中的、且具备搜索功能的小程序(或称为搜索小程序),这样目标应用程序可以直接利用该小程序对多媒体数据进行搜索,相比于在目标应用程序内部署其他应用程序(如具备搜索功能的搜索引擎)的搜索入口,这种从目标应用程序跳转至其他具备搜索功能的应用程序进行搜索而言,可以快速打开该小程序执行搜索操作,简化搜索操作,降低开发目标应用程序成本,提高搜索效率。或者:搜索应用对象也可以是指目标应用程序所提供的搜索功能,也就是说,搜索应用对象是目标应用程序本身部署的一个搜索功能,即目标应用程序本身具有搜索功能,这样目标应用程序可直接对多媒体数据执行搜索处理,简化搜索操作,提高搜索效率。
具体实现中,当在搜索对象窗口中对任一或多个搜索应用对象的对象标识执行选择操作时,表示目标用户想要采用被选择的对象标识所指示的搜索应用对象来对多媒体数据执行搜索处理,这样获得的关于多媒体数据的搜索结果均来是被选择的对象标识所指示的搜索应用对象搜索得到的。下面通过图7a给出一种示例性的搜索对象窗口的示意图;如图7a所示,响应于在服务界面上对多媒体数据的搜索操作,显示搜索对象窗口701,该搜索对象窗口701中包含至少一种搜索应用对象的对象标识,如搜索应用对象1的对象标识、搜索应用对象2的对象标识、……、等等;目标用户可以在搜索对象窗口701中选择M个目标对象标识,M为正整数,表示目标用户希望采用被选中的M个目标对象标识所指示的搜索应用对象来执行搜索操作;当检测到存在目标对象标识被选择时,触发执行步骤S604。可以理解的是,在搜索对象窗口中显示的对象标识可以同时包括搜索应用对象的对象标识以及目标应用程序所提供的搜索功能的对象标识,本申请实施例对此不作限定。
在搜索应用对象为搜索小程序的实现方式下,触发搜索小程序对目标应用程序的服务界面中多媒体数据执行搜索处理的实现过程可包括:响应于对目标应用程序的服务界面中的多媒体数据的搜索操作,显示目标应用程序的搜索对象窗口,该搜索对象窗口中包括一个或多个搜索小程序的对象标识,当然,该搜索对象窗口中可同时包括具备搜索功能的第三方搜索应用的对象标识;响应于在搜索对象窗口中执行的选择操作,从搜索对象窗口中选中搜索小程序,并触发搜索小程序进行搜索处理;当搜索小程序对多媒体数据执行搜索处理后,可触发显示搜索小程序的搜索界面,该搜索界面包括搜索小程序对多媒体数据搜索得到的搜索标签和搜索标签关联的搜索结果。
下面结合图7b对通过搜索小程序对多媒体数据进行搜索的流程进行简单介绍。如图7b所示,在目标应用程序的服务界面上存在针对多媒体数据的搜索操作时,如服务界面为图7b所示的社交会话界面,多媒体数据在该社交会话界面中以缩略图形式显示时,可根据搜索操作触发显示目标应用程序的搜索对象窗口;并在搜索对象窗口中显示搜索应用对象的对象标识,如在搜索对象窗口中显示搜索小程序的对象标识(如图7b所示的搜索小程序1的对象标识)。当搜索小程序1对应的对象标识被触发时,表示目标用户希望采用搜索小程序1对多媒体数据进行搜索,则触发显示搜索小程序1的搜索界面702,在该搜索界面702中显示有搜索小程序1针对多媒体数据搜索得到的搜索标签和搜索标签关联的搜索结果,进而实现在目标应用程序内直接对多媒体数据的搜索。上述实现方式中,搜索小程序是运行于目标应用程序内的,这样目标应用程序(如目标应用程序)可以直接利用搜索小程序对多媒体数据进行搜索,相比于在目标应用程序内部署其他应用程序的搜索入口,这种从目标应用程序跳转至其他具备搜索功能的目标应用程序进行搜索而言,可以快速打开搜索小程序执行搜索操作,简化搜索操作,降低开发目标应用程序成本,提高搜索效率。
可选的,图7b中搜索小程序1的搜索界面702中可能设置有搜索框7021,这样便于目标用户在搜索框7021内实现对其他内容的搜索;在这种实现方式下,当目标用户在使用目标应用程序过程中存在搜索需求时,可在目标应用程序内打开搜索小程序进行搜索,避免从目标应用程序跳转至其他目标应用程序进行搜索,提升用户体验,提高目标应用程序的留存率。当然,搜索小程序1的搜索界面702的具体样式和功能设置可以是由搜索小程序1的开发商来设定的,图7b所示的搜索界面702只是一种示例性的界面样式,在此说明。
另外,本申请实施例还支持在目标应用程序中存在对多媒体数据的搜索操作时,采用默认的目标搜索小程序(如任一搜索小程序)对多媒体数据进行搜索,并在目标应用程序的资源搜索界面中显示该目标搜索小程序搜索得到的搜索标签和搜索结果;当然,目标应用程序的资源搜索界面中还可以显示目标搜索小程序的对象标识,以提示目标用户当前资源搜索界面中的内容是由目标搜索小程序搜索得到的。或者,采用默认的目标搜索小程序(如任一搜索小程序)对多媒体数据进行搜索后,可直接显示目标搜索小程序的搜索界面,以提示目标用户该搜索结果是否由目标搜索小程序搜索得到的。上述方案中省去目标用户选择对象标识的过程,在一定程序上可缩短搜索流程,提高搜索效率。应当理解的是,在目标应用程序的资源搜索界面中还可以显示其他搜索小程序的对象标识,或者,在目标搜索小程序的搜索界面上还可以显示其他搜索小程序的对象标识,如在目标搜索小程序的搜索界面上悬浮显示其他搜索小程序的对象标识;这方便目标用户选择其他搜索小程序对多媒体数据执行搜索,满足目标用户选择搜索应用对象的需求,增强目标用户对搜索应用对象的选择权。
基于目标用户在搜索对象窗口内执行的选择操作,触发显示资源搜索界面后,本申请实施例支持在第一区域内显示用于指示M个目标对象标识的搜索标签;也就是说,在这种实现方式下第一区域内显示的搜索标签与目标对象标识对应。具体地,第一区域内显示的一个或多个搜索标签中每个搜索标签,与M个目标对象标识中一个目标对象标识指示的搜索应用对象对应;M个目标对象标识中不同目标对象标识指示的搜索应用对象对应不同的搜索标签。简而言之,资源搜索界面的第一区域内显示的搜索标签与M个目标对象标识(或各个目标对象标识所指示的搜索应用对象)具有对应关系。如图7a所示,第一区域内显示的各个搜索标签指示目标对象标识;当任一搜索标签被选中时,在第二区域内显示的该任一搜索标签关联的搜索结果,均是通过该任一搜索标签对应的目标对象标识所指示的搜索应用对象进行搜索处理得到的。在这种实现方式下,与多媒体数据关联的搜索结果均来自于目标用户自定义的搜索应用对象,满足目标用户对搜索应用对象的自定义需求。
上述提及的搜索应用对象是用于对多媒体数据执行搜索处理的搜索应用,通过搜索应用对象可搜索得到关于多媒体数据的搜索结果,搜索结果可包括但不限于:资讯、文章、音视频、动画、图像等形式的内容,搜索结果的载体可包括但不限于:小程序、社交公共服务账号(如订阅号、服务号、公众号等)、个人账号等等。在其他实现方式中,本申请实施例还支持目标用户对搜索结果的载体进行自定义;举例来说,在搜索对象窗口(或与搜索对象窗口独立的其他窗口或界面)中还包括一个或多个结果应用对象的应用对象标识,该结果应用对象作为搜索结果的载体,如结果应用对象为小程序或订阅号等;当目标用户在搜索对象窗口中选择目标应用对象标识后,表示目标用户想要搜索结果均承载于目标应用对象标识所指示的结果应用对象,即在资源搜索界面中第二区域内显示的搜索结果均承载于目标应用对象标识所指示的结果应用对象;如资源搜索界面中第二区域内显示的搜索结果均承载于目标小程序(如任一小程序)。上述提及的搜索结果承载于结果应用对象可是指:搜索结果指示的搜索信息(搜索信息为搜索结果的详情信息)承载于结果应用对象;即:搜索结果指示的搜索信息是通过结果应用对象上传至互联网的。例如,搜索结果指示的搜索信息为文章,结果应用对象为小程序,则文章承载于小程序可指示:文章是通过小程序上传至互联网的,这样通过打开小程序可实现打开该文章。当然,在搜索对象窗口中可能还包含搜索框,这样支持目标用户在搜索框内输入自己想要的结果应用对象或搜索应用对象。本申请实施例对确定结果应用对象和搜索应用对象的具体实现方式不作限定,在此说明。
综上所述,本申请实施例支持由目标用户自定义针对多媒体数据执行搜索处理的搜索应用对象,或者,由目标用户自定义承载搜索结果的结果应用对象,这满足目标用户的搜索场景需求,提升目标用户粘性。
S604:响应于对搜索对象窗口中执行的选择操作,显示资源搜索界面。
S605:在第一区域内显示多媒体数据关联的一个或多个搜索标签。
S606:响应于对第一区域中显示的搜索标签中目标标签的选择操作,在第二区域中显示与目标标签关联的搜索结果。
需要说明的是,步骤S604-S605所示的具体实施过程可参见图2所示实施例中步骤S202-S204所示的具体实施过程的相关描述,在此不作赘述。
S607:响应于对第二区域显示的搜索结果中目标搜索结果的选择操作,触发目标搜索结果对应的结果应用对象显示目标搜索结果的搜索信息。
正如前述所描述的,结果应用对象可包括但不限于:小程序、社交公共服务账号(如订阅号、服务号、公众号等)、个人账号等等;为便于阐述,后续均以结果应用对象为小程序为例进行阐述,即结果应用对象为运行于目标应用程序中的小程序。
本申请实施例支持对资源搜索界面中第二区域内显示的搜索结果进行触发,以触发显示搜索结果的搜索信息,该搜索信息为搜索结果的详情信息。具体实现中,当在资源搜索界面的第二区域内存在针对目标搜索结果(如任一搜索结果)的选择操作时,响应于对第二区域显示的搜索结果中目标搜索结果的选择操作,触发目标搜索结果对应的结果应用对象显示目标搜索结果的搜索信息。其中,在第二区域中显示的搜索结果包括:结果提示信息,以及,与结果提示信息对应的结果应用对象的应用对象标识;这样便于目标用户一目了然的看清各个搜索结果的关键信息(如结果提示信息)以及用于承载搜索结果的结果应用对象。
下面结合附图8来对资源搜索界面所包含的搜索标签、与目标标签关联的搜索结果、以及触发显示目标搜索结果的搜索信息的实现方式等相关内容进行详细说明。如图8所示,资源搜索界面所包含的搜索标签以及与搜索标签关联的搜索结果的相关内容可参见下述描述;其中:假设多媒体数据为图像,资源搜索界面402中第一区域内显示有多个搜索标签,如搜索标签1、搜索标签2、搜索标签3、……、等等;当第一区域内的目标标签(如任一搜索标签)被选中时,在第一区域内可突出显示该目标标签,以提示目标用户突出显示的目标标签处于选中状态,其中,突出显示的方式可参见前述描述。同时,当第一区域内的目标标签被选中时,在第二区域内可显示与该目标标签关联的搜索结果。
需要说明的是,由于目标终端的显示屏幕的显示面积有限,与多媒体数据关联的所有搜索标签可能并不能一次性全部显示于第一区域内;基于此,本申请实施例支持当第一区域内存在滑动事件时,在第一区域内滑动显示被隐藏的那部分搜索标签。其中,滑动事件可以包括但不限于:在第一区域内对滑动轴触发时所产生的事件、在第一区域内针对搜索标签执行滑动操作时所产生的事件等等。同理,搜索结果可能也不能一次性全部显示于第二区域内,因此可采用与上述相似或相同的方式实现在第二区域内滑动显示搜索结果,在此不作详细赘述。
继续参见图8,在第二区域内显示与多媒体数据相关的搜索结果。可选的,可在第二区域内混合显示一个或多个搜索标签关联的搜索结果;例如,第一区域内显示有搜索标签1、搜索标签2以及搜索标签3,那么在第二区域内可同时显示搜索标签1关联的搜索结果、搜索标签2关联的搜索结果以及搜索标签3关联的搜索结果。其中,不同或相同搜索标签关联的多个搜索结果在第二区域内可按照预设规则进行排列显示,所谓预设规则可包括但不限于:
①搜索结果上传至互联网的时间先后顺序,如按照上传至互联网中的时间从早至晚的顺序对多个搜索结果进行排序;例如:搜索结果1于4月8日12:00上传至互联网、搜索结果2于4月8日17:00上传至互联网、搜索结果3于4月7日21:00上传至互联网,则确定搜索结果1与、搜索结果2以及搜索结果3在第二区域内的排序序列为:搜索结果3→搜索结果1→搜索结果2。
②搜索结果的热度(如点击率、浏览量、收藏量、播放量等),如按照搜索结果的播放量从高到低对多个搜索结果进行排序;例如:搜索结果1的播放量为200、搜索结果2的播放量为800以及搜索结果3的播放量为250,则确定搜索结果1与、搜索结果2以及搜索结果3在第二区域内的排序序列为:搜索结果2→搜索结果3→搜索结果1。
③搜索结果与目标用户的历史浏览行为之间的相关度,目标用户的历史浏览行为可包括但不限于:对搜索结果的点赞量、收藏量、播放量、浏览次数等。例如:目标用户在历史时长内(如距离当前时刻(即触发在第二区域内显示搜索结果的时刻)24小时内)对搜索结果1(或搜索结果1对应的结果应用对象)的浏览次数为2次、目标用户在历史时长内对搜索结果2(或搜索结果2对应的结果应用对象)的浏览次数为0次、目标用户在历史时长内对搜索结果3(或搜索结果3对应的结果应用对象)的浏览次数为1次;则确定搜索结果1与、搜索结果2以及搜索结果3在第二区域内的排序序列为:搜索结果1→搜索结果3→搜索结果2。当前,上述只是给出几种示例性的用于对多个搜索结果进行排序的预设规则,本申请实施例对预设规则的具体实现方式不作限定,特在此说明。
当第一区域内存在目标标签时,若目标标签是由目标用户在第一区域内对一个或多个搜索标签执行选择操作时选中的,那么在第二区域内可只显示与目标标签关联的搜索结果,或者,在第二区域内置顶显示与目标标签关联的搜索结果。举例来说,假设目标标签为搜索标签1,则第二区域内显示的搜索结果可均与搜索标签1关联,如第二区域内显示的与搜索标签1关联的搜索结果可包括:搜索结果405、搜索结果406、搜索结果407、……、等等。任一搜索结果包括:结果提示信息,以及与结果提示信息对应的结果应用对象的应用对象标识,如搜索结果405包括结果提示信息4051以及与结果提示信息4051对应的结果应用对象的应用对象标识4052。其中,搜索结果405的结果提示信息4051可以是搜索结果405的摘要信息,用于表达搜索结果405的主要内容等,而搜索结果405所包含的应用对象标识4052可用于明确提示用于承载该搜索结果405的载体,如应用对象标识4052指示结果应用对象为小程序时,可用于提示目标用户该搜索结果是由小程序提供的。
继续参见图8,对第二区域内目标搜索结果执行选择操作后,触发显示目标搜索结果的搜索信息的具体实现方式可参见如下描述;其中:假设搜索结果405被选择,则目标搜索结果为搜索结果405,则响应于对搜索结果405的选择操作,触发搜索结果405对应的结果应用对象显示搜索结果405的搜索信息;如显示结果应用对象的搜索结果界面408,该搜索结果界面408中包括结果提示信息4051对应的搜索结果405的完整信息。例如,搜索结果405为文本,结果提示信息405可以为该文本的文本标题,那么搜索结果界面408中包含该文本对应的完整的文本内容。
值得说明的是,结果应用对象的搜索结果界面的具体样式以及搜索结果界面所包含的功能,可以是根据业务人员的业务需求来定义的,本申请实施例以图8所示的搜索结果界面作为一种示例性介绍,并不会对本申请实施例产生限定。例如,结果应用对象为小程序,那么小程序的搜索结果界面的样式和功能均可以由小程序开发商来自定义。举例来说,结果应用对象支持在搜索结果界面内执行分享操作,实现对搜索结果的分享。具体实现中,在结果应用对象显示目标搜索结果的搜索信息时,显示分享控件,如图8所示的在搜索结果界面408中包括分享控件4081;响应于对分享控件4081的选中操作,从第二区域中获取目标搜索结果对应的搜索标识,该搜索标识可用于唯一标识该目标搜索结果,搜索标识可以包括目标搜索结果的链接(如网络地址),通过目标搜索结果的链接可以访问到该目标搜索结果;获取目标搜索结果对应的搜索标识后,可对该搜索标识进行分享处理。当然,社交应用程序本身也可以支持对搜索结果进行分享,社交应用程序支持分享时分享操作的实现方式可参见上述描述,在此不做赘述。
下面给出几种分享处理的实现方式,例如:在社交会话场景下,分享处理可包括但不限于:将目标搜索结果以社交会话消息形式分享至社交会话界面中,该社交会话界面为对多媒体数据发起搜索请求的会话界面;在这种实现方式下,可帮助目标用户快速分享搜索结果,简化分享操作,提高分享效率。一种将目标搜索结果的搜索标识以社交会话消息形式分享至社交会话界面的示例性示意图可参见图9;如图9所示,在社交会话界面中显示的关于搜索标识的社交会话消息901,可以包括目标搜索结果的搜索标识,以及包括目标搜索结果所对应的结果应用对象的对象标识。再如:分享处理还可以包括:将目标搜索结果分享至社交公共服务界面(如朋友圈、feeds流等界面)。再如:分享处理除包括上述描述的对目标搜索结果进行分享外,还可以包括对目标搜索结果对应的结果应用对象进行分享,具体对结果应用对象的应用对象标识进行分享;在这种实现方式下,分享处理可包括:将目标搜索结果对应的结果应用对象的应用对象标识分享至社交会话界面或社交公共服务界面等。需要注意的是,上述分享功能可以是结果应用对象所提供的,该分享功能也可以是结果应用对象所搭载的应用程序(如用于显示社交会话界面的社交应用程序)所提供的。
本申请实施例中,支持在服务界面上对多媒体数据执行搜索操作,并显示资源搜索界面;其中,在资源搜索界面中显示多媒体数据关联的一个或多个搜索标签,以及显示与目标标签关联的搜索结果。上述方案中,可直接对服务界面上显示的多媒体数据执行搜索操作,得到多媒体数据关联的搜索标签以及目标标签关联的搜索结果,这简化了多媒体数据的搜索过程,缩短搜索路径,提高搜索效率。另外,支持由目标用户自定义针对多媒体数据执行搜索处理的搜索应用对象,或者,由目标用户自定义承载搜索结果的结果应用对象,这满足目标用户的搜索场景需求,提升目标用户粘性。另外,本申请实施例还支持对搜索结果进行分享处理,可帮助目标用户快速分享搜索结果,简化分享操作,提高分享效率。
基于上述图2和图6所示的搜索处理方法的各个界面的示意图,下面以多媒体数据为图像,且图像包括人物元素或商品元素为例,给出两种示例性的搜索处理场景,来对较为完整的搜索处理方法的界面流程进行介绍;其中:
1)图像包括人物元素,如图像为主播进行直播时的直播图像,此时直播图像中包含的人物元素为主播。在这种实现方式下,对图像进行搜索处理时,主要识别得到图像中所包含的人物元素,这样得到的与图像关联的搜索标签可指示人物元素,且搜索标签关联的搜索结果涉及人物元素所指示的人物。下面结合图10a,以图像为主播直播时的图像为例,对触发对图像的搜索操作,以及得到搜索结果的界面流程进行简单介绍;如图10a所示,在资源搜索界面中显示区域内显示直播图像,在第一区域内显示与直播图像关联的一个或多个搜索标签,其中,一个或多个搜索标签均与直播相关,如搜索标签指示直播图像中主播等等。2)图像包括商品元素,如图像为商品销售的宣传图像,此时宣传图像中包含商品元素为商品;在这种实现方式下,对宣传图像进行搜索处理时,主要识别图像中商品、地点、图标等元素,这样得到的与宣传图像关联搜索标签可指示商品元素。图像为宣传图像时,触发对宣传图像的搜索操作,以及得到搜索结果的界面流程的示意图可参见图10b,如图10b所示,在资源搜索界面中显示区域内显示宣传图像,在第一区域内显示与宣传图像关联一个或多个搜索标签,如搜索标签指示宣传图像中的商品图标(如logo图标)等。
值得说明的是,上述只是给出两种示例性的搜索处理场景;可以理解的是,根据多媒体数据的类型不同(如图像所包含的元素种类)的不同,搜索处理场景还可以发生变化;本申请实施例对具体的搜索处理场景不作限制。
上述实施例介绍了本申请实施例提供的搜索处理方法的整体方案流程,下面对本申请实施例的后台的整体实现流程进行详细阐述。为帮助理解后台实现的整体流程,下面先结合附图11a所示的框架图对搜索处理系统进行简单介绍;如图11a所示:该搜索处理系统包括第一客户端和服务器;其中,第一客户端可是指前述提及的目标应用程序,该第一客户端运行于前述提及的目标终端中。服务器是为目标终端或目标终端中运行的第一客户端提供技术服务的后台设备,该服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。需要说明的是,本申请实施例对服务器的数量和种类不作限定。目标终端与服务器之间可以通过直接或间接方式进行通信,本申请实施例对通信连接方式不作限定。
具体实现中,第一客户端用于向服务器发送数据处理请求,该数据处理请求携带待处理的多媒体数据。服务器可用于接收第一客户端发送的数据处理请求,并对多媒体数据进行识别处理,得到与多媒体数据关联的一个或多个搜索标签;服务器还用于根据一个或多个搜索标签中目标标签确定与目标标签关联的搜索结果,并将一个或多个搜索标签和目标标签关联的搜索结果发送至第一客户端。第一客户端还用于接收服务器返回的一个或多个搜索标签以及目标标签关联的搜索结果,并在资源搜索界面的第一区域内显示多媒体数据关联的一个或多个搜索标签;以及在第二区域内显示与目标标签关联的搜索结果。
参见图11a可知,服务器还包括多个模块,如服务器包括搜索服务模块、召回结果模块、数据处理模块、索引模块以及离线处理模块。那么上述服务器所执行的操作可是由服务器所包含的多个模块来执行的。其中,搜索服务模块可用于与数据处理模块之间交互,得到多媒体数据关联的搜索标签;搜索服务模块还负责和召回结果模块做交互,并使用内存缓存搜索结果;另外,搜索服务模块还可以用于监控目标用户的搜索行为等用户数据,如基于用户数据生成日志,以便于后续数据分析。索引模块可用于将结果应用对象的提供者(或开发商)上传的搜索资源与该搜索资源对应的搜索标签关联存储。离线处理模块可用于获取结果应用对象的提供者上传的搜索资源,并定时将搜索资源发送至数据处理模块进行识别处理,得到搜索资源关联的搜索标签。其中,服务器采用各个模块执行搜索处理方法的流程可包括:第一客户端将数据处理请求发送至服务器后,服务器用于通过搜索服务模块响应第一客户端发送的数据处理请求,向数据处理模块发送多媒体数据;服务器还用于通过数据处理模块对多媒体数据进行识别处理,得到多媒体数据关联的一个或多个搜索标签;服务器还用于通过召回结果模块根据目标标签进行搜索处理,得到目标标签关联的搜索结果。其中,数据处理模块可包括识别接口,通过识别接口可调用识别算法对多媒体数据进行识别,得到多媒体数据关联的搜索标签;也就是说,本申请实施例支持将已有的识别算法进行封装,这样只需要通过数据处理模块所提供的识别接口就可以直接调用识别算法来识别多媒体数据。当然,针对多媒体数据的类型不同,识别算法的种类并不相同,本申请实施例对识别算法的种类不作限制,在此说明。
另外,召回结果模块可从索引模块中召回目标标签关联的搜索结果;其中,索引模块中存储有不同标签关联的搜索资源,当任一标签作为目标标签时,该标签关联的全部或部分搜索资源作为目标标签关联的搜索结果。其中,索引模块中各个搜索资源是由结果应用对象的提供者(或开发商)提供的;例如,结果应用对象为小程序,则搜索资源是由小程序的开发商提供的。具体地,搜索处理系统还包括第二客户端,第二客户端是登录或注册结果应用对象的用户所使用的目标应用程序。其中,服务器接收第二客户端发送搜索资源的实现过程可包括:(1)第二客户端用于将结果应用对象所提供的搜索资源发送至服务器,如图10a所示,第二客户端通过服务器所提供的资源上传接口将搜索资源上传至服务器。(2)服务器接收到第二客户端发送的搜索资源后,可首先对搜索资源进行合法性校验,并在校验成功之后,才通过离线处理模块将搜索资源发送至搜索处理模块;其中,所谓合法性校验可以是指:①校验多媒体数据的数据格式是否满足服务器对数据格式的要求;如服务器存储的数据的数据格式为文件格式,当多媒体数据的格式为表格格式时,确定对多媒体数据校验失败,即不能将多媒体数据存储至目标存储节点的本地空间。②校验多媒体数据是否为合法或符合道义道德的数据;如校验多媒体数据是否包含暴力数据、虚假信息等,当检测到多媒体数据包含非法数据或违反道德的信息时,确定对多媒体数据校验失败。③校验多媒体数据的来源是否符合规则;如设定服务器存储的数据均应该来源于结果应用对象A,当多媒体数据来源于结果应用对象B时,确定对多媒体数据校验失败,即不能将多媒体数据存储至服务器;等等。上述只是示例性的列举了几种合法性校验,本申请对服务器对多媒体数据的校验方式不作限定,在此说明。(3)服务器通过搜索处理模块接收离线处理模块发送的搜索资源,并对搜索资源进行识别处理,得到搜索资源关联的搜索标签,并将搜索标签返回给离线处理模块。(4)服务器通过离线处理模块将搜索标签以及搜索资源发送至索引模块,以使索引模块将搜索标签以及搜索资源进行关联存储。
举例来说索引模块对搜索资源以及搜索资源的搜索标签进行关联存储的过程,其中:假设搜索资源包括搜索资源1、搜索资源2以及搜索资源3,数据处理模块对各个搜索资源进行识别处理后,得到搜索资源1关联的标签为标签1以及标签2,搜索资源2关联的标签为标签2以及标签3,搜索资源3关联的标签为标签1以及标签3,则在索引模块中标签1索引下存储有搜索资源1以及搜索资源3、标签2索引下存储有搜索资源1以及搜索资源2、标签3索引下存储有搜索资源2以及搜索资源3;若目标标签为标签1,则可以将标签1索引下的搜索资源1以及搜索资源3中的一个或两个作为与目标标签关联的搜索结果。
需要注意的是,上述是以搜索服务模块、召回结果模块、数据处理模块、索引模块以及离线处理模块为服务器所包含的模块为例进行说明的,但搜索服务模块、召回结果模块、数据处理模块、索引模块以及离线处理模块中的一个或多个模块可以作为单独的设备来参与搜索处理过程,如数据处理模块可以为具备数据处理能力的服务器;本申请实施例对各个模块的存在形式不作限定。
基于图11a所示的搜索处理系统,下面结合图11b对第一客户端与服务器共同执行搜索处理方法的流程进行更为直观的介绍;如图11b所示,该搜索处理方法可包括步骤s11-s17,其中:
s11:第一客户端响应于在服务界面上对多媒体数据的搜索操作,生成数据处理请求,该数据处理请求中携带待处理的多媒体数据。
s12:服务器获取数据处理请求,具体接收第一客户端发送的数据处理请求;并响应数据处理请求对多媒体数据进行识别处理,得到与多媒体数据关联的一个或多个搜索标签;服务器还基于一个或多个搜索标签生成响应通知消息,该响应通知消息包括一个或多个搜索标签;那么服务器将该响应通知消息发送至第一客户端后,该响应通知消息可用于触发第一客户端执行步骤s13。
s13:第一客户端接收到响应通知消息,此时响应通知消息包括多媒体数据关联的一个或多个搜索标签;第一客户端根据响应通知消息在显示屏幕的资源搜索界面中显示多媒体数据关联的一个或多个搜索标签。
具体实现中,第一客户端接收到服务器发送的响应通知消息后,可根据响应通知消息在资源搜索界面的第一区域内显示与多媒体数据关联的一个或多个搜索标签。
在一种实现方式中,若响应通知消息除包含一个或多个搜索标签外,还包括一个或多个搜索标签中目标标签的搜索结果,那么该响应通知消息用于触发第一客户端在资源搜索界面的第一区域内显示一个或多个搜索结果,以及在资源搜索界面的第二区域内显示目标标签关联的搜索结果。其中,目标标签可是按照排序规则从一个或多个搜索标签中确定的,排序规则的相关描述可参见前述图2所示实施例的相关描述,在此不作赘述。换句话说,服务器对多媒体数据执行识别处理,得到一个或多个搜索标签后,可一并从一个或多个搜索标签中确定目标标签,并搜索得到目标标签关联的搜索结果;这样服务器将包含一个或多个搜索标签以及一个或多个搜索标签中目标标签的搜索结果的响应通知消息后,第一客户端可基于响应通知消息在资源搜索界面中同时显示一个或搜索标签以及目标标签关联的搜索结果。这种实现方式在一定程度上可提示目标用户切换选择资源搜索界面中的不同搜索标签,可得到不同搜索标签对应的搜索结果。
s14:第一客户端响应于对一个或多个搜索标签执行的选择操作,生成搜索请求,该搜索请求包括对一个或多个搜索标签执行的选择操作所选中的搜索标签;并将搜索请求发送至服务器。
s15:服务器接收第一客户端发送的搜索请求,并根据所选中的搜索标签进行搜索处理,此时所选中的搜索标签作为目标标签,得到所选中的搜索标签关联的搜索结果;服务器基于所选中的搜索标签关联的搜索结果生成结果通知消息,该结果通知消息用于触发第一客户端在资源搜索界面的第二区域内显示所选中的搜索标签关联的搜索结果。
下面给出服务器所包含的各个模块执行上述方法的实现方式,具体地,服务器通过搜索服务模块将目标标签发送至召回结果模块;召回结果模块根据目标标签执行召回处理,得到目标标签关联的搜索结果;召回结果模块将与目标标签关联的搜索结果返回至搜索服务模块,以使搜索服务模块将基于目标标签关联的搜索结果生成的响应通知消息发送至第一客户端。
可选的,召回结果模块可采用多路召回(即采用不同模型、策略或特征进行召回处理)的方式对搜索结果进行召回,此时的召回为粗排召回,即召回得到的大量的搜索结果;召回结果模块还对大量搜索结果进行精排处理,得到按照一定顺序排列的搜索结果。其中,对多个搜索结果进行精排处理的过程中,可采用排序规则对多个搜索结果进行排序,排序规则可包括但不限于:根据搜索结果与目标标签的关联度进行排序,如将关联度较高的搜索结果排列于关联度较低的搜索结果之前或之上;此处的关联度可以用图像元素的像素值来体现;例如:假设图像中人物元素的像素值为20000,而帽子元素的像素值为6000,则确定人物元素与图像之间的关联度大于帽子元素与图像之间的关联度。或者,根据搜索结果在目标时间段内的热度进行排序,热度可以由搜索结果的点击率、播放量、收藏率等因素来确定;或者,根据目标用户的历史浏览数据对搜索结果进行排序,如目标用户在距离当前时间段之前的目标时间段内对搜索结果1的点击量大于对搜索结果2的点击量,则确定将搜索结果1排列于搜索结果2之前或之上;等等。
步骤s11-s15中,服务器通过各个模块对多媒体数据进行识别处理,得到多媒体数据关联的搜索标签以及目标标签关联的搜索结果的实现方式可包括:对多媒体数据进行特征分析处理,得到多媒体数据的至少一个关键特征;建立至少一个关键特征中每个关键特征对应的搜索标签;然后,根据目标关键特征进行搜索处理,得到目标关键特征对应的与目标标签关联的搜索结果。其中,在根据目标关键特征搜索与目标标签关联的搜索结果的过程中,可根据搜索与目标关键特征关联的结果应用对象,再将结果应用对象对应的搜索资源确定为与目标标签关联的搜索结果。也就是说,在确定搜索结果时,可先确定与目标关键特征关联的结果应用对象,再从该结果应用对象对应的搜索资源中确定搜索结果。举例来说,假设目标关键特征属于第一特征类型或第二特征类型,第一特征类型与第二特征类型不同;若多媒体数据的目标关键特征属于第一特征类型,则基于第一特征类型和目标关键特征进行搜索处理,得到与第一特征类型相关的结果应用对象对应的搜索结果;若多媒体数据的目标关键特征属于第二特征类型,则基于第二特征类型和目标关键特征进行搜索处理,得到与第二特征类型相关的结果应用对象对应的搜索结果;其中,与第一特征类型相关的结果应用对象和与第二特征类型相关的结果应用对象的类型不同。
s16:第一客户端接收服务器返回结果通知消息,此时的结果通知消息包括与目标标签关联的搜索结果;第一客户端根据该结果通知消息在资源搜索界面的第二区域内显示与目标标签关联的搜索结果。
s17:若存在针对目标搜索结果的触发操作,则第一客户端调用目标搜索结果对应的结果应用对象显示目标搜索结果的搜索信息。其中,目标搜索结果为第二区域内显示至少一个搜索结果中的任一搜索结果。
综上所述,本申请实施例根据第一客户端和服务器之间的交互,可实现对服务界面中的多媒体数据进行搜索,得到与多媒体数据关联的搜索结果,缩短搜索路径,提高搜索效率。
值得注意的是,上述图11a以及图11b所示实施例中是以数据处理模块中包括识别接口,通过识别接口调用已封装好的识别算法来识别得到多媒体数据的搜索标签的。但本申请实施例还支持自行搭建识别算法,在这种实现方式下,服务器所包含的数据处理模块本身就具有识别功能,即数据处理模块中集成有识别算法,可直接实现对多媒体数据的识别。一种示例性的自行搭建的识别算法框架可参见图11c,如图11c所示,该识别算法框架自底向上可包括:数据层、模型层、召回层以及排序层;其中,数据层可用于获取结果应用对象的提供者(或登录结果应用对象的使用者)上传的搜索资源。模型层可用于对获取到的搜索资源进行识别处理,得到各个搜索资源的标签,以及将搜索资源以及该搜索资源的标签关联存储;具体模型层可包括多种识别算法(如相似向量(ResNe t)算法、文字识别(opticalcharacter recognition,OCR)算法等),这样模型层可采用多种识别算法中的一种或多种算法对搜索资源进行识别;当然,当获取到待识别的多媒体数据时,模型层还采用识别算法对多媒体数据进行识别处理,得到多媒体数据关联的搜索标签。召回层可用于根据目标标签召回与目标标签关联的搜索结果。排序层可用于根据排序规则对目标标签关联的多个搜索标签进行排序处理,此处的排序规则可包括如下一种或多种:L2R(Learning to rank)相关度、重要度等,或排序规则可参见前述描述的相关内容。
需要说明的是,针对多媒体数据的类型不同,搭建的用于对多媒体数据进行识别的识别算法并不相同。举例来说,多媒体数据为图像,则可采用图像识别算法来对图像进行识别处理,得到图像关联的搜索标签;其中,图像识别算法可是基于深度学习等人工智能(Artificial Intelligence,AI)技术和海量训练数据训练得到的、提供图像识别服务的算法。其中,人工智能是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。人工智能技术是一门综合学科,涉及领域广泛,既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。当然,针对不同的多媒体数据,可基于人工智能技术训练得到不同的识别算法来对不同多媒体数据进行识别,如多媒体数据为文本,则可基于人工智能技术训练得到对文本具备识别能力的识别算法,等等;本申请实施例并不对训练得到识别算法的过程进行限定,在此说明。
本申请实施例中,可通过识别接口调用已经封装好的识别算法来对多媒体数据进行识别,或者自行搭建识别算法来对多媒体数据进行识别,丰富对多媒体数据进行识别的方法。另外,本申请实施例支持在服务界面上对多媒体数据执行搜索操作,并在资源搜索界面中显示多媒体数据关联的一个或多个搜索标签,以及显示与目标标签关联的搜索结果。这种直接对服务界面上显示的多媒体数据执行搜索操作,得到多媒体数据关联的搜索标签以及目标标签关联的搜索结果,这简化了多媒体数据的搜索过程,缩短搜索路径,提高搜索效率。
上述详细阐述了本申请实施例的方法,为了便于更好地实施本申请实施例的上述方案,相应地,下面提供了本申请实施例的装置。
图12示出了本申请一个示例性实施例提供的一种搜索处理装置的结构示意图;该搜索处理装置可以是运行于目标终端中的一个计算机程序(包括程序代码),例如该搜索处理装置可以是目标终端中的目标应用程序(如即时通信应用程序);该搜索处理装置可以用于执行图2以及图6所示的方法实施例中的部分或全部步骤。请参见图12,该搜索处理装置包括如下单元:
显示单元1201,用于在服务界面上显示多媒体数据;
处理单元1202,用于响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面,资源搜索界面中包含显示搜索结果的结果显示区域,结果显示区域包括第一区域和第二区域;
显示单元1201,还用于在第一区域内显示与多媒体数据关联的一个或多个搜索标签;
处理单元1202,还用于响应于对第一区域中显示的搜索标签中目标标签的选择操作,在第二区域中显示与目标标签关联的搜索结果。
在一种实现方式中,服务界面为社交会话界面,社交会话界面包括以社交会话消息形式显示的多媒体数据;
处理单元1202用于响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面时,具体用于:
响应于对社交会话界面中多媒体数据的触发事件,在社交会话界面中显示选项栏,选项栏中包括搜索选项;
若检测到对选项栏中搜索选项的选中操作,则确定产生对多媒体数据的搜索操作,显示资源搜索界面。
在一种实现方式中,多媒体数据包括多媒体数据的缩略信息,处理单元1202用于在服务界面上显示多媒体数据时,具体用于:
在服务界面上显示多媒体数据的缩略信息。
在一种实现方式中,服务界面为内容显示界面,内容显示界面显示有多媒体数据;内容显示界面包含搜索控件;
处理单元1202用于响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面时,具体用于:
响应于对内容显示界面中搜索控件的选择操作,输出分享窗口,分享窗口中包含搜索选项;
若检测到对分享窗口中搜索选项的选中操作,则确定产生对多媒体数据的搜索操作,显示资源搜索界面。
在一种实现方式中,多媒体数据包括多媒体数据的数据内容,内容显示界面显示有多媒体数据的数据内容。
在一种实现方式中,处理单元1202,还用于:
响应于在服务界面上对多媒体数据的搜索操作,显示搜索对象窗口,搜索对象窗口中包含至少一种搜索应用对象的对象标识;
响应于在搜索对象窗口中执行的选择操作,从搜索对象窗口显示的至少一种搜索应用对象的对象标识中确定M个目标对象标识,M为正整数,并触发M个目标对象标识所指示的搜索应用对象进行搜索处理;
其中,资源搜索界面中显示N个目标对象标识所指示的搜索应用对象的搜索结果,N为小于或等于M的正整数。
在一种实现方式中,第一区域内显示的一个或多个搜索标签中每个搜索标签,与M个目标对象标识中一个目标对象标识指示的搜索应用对象对应;M个目标对象标识中不同目标对象标识指示的搜索应用对象对应不同的搜索标签。
在一种实现方式中,处理单元1202,还用于:
响应于对第二区域显示的搜索结果中目标搜索结果的选择操作,触发目标搜索结果对应的结果应用对象显示目标搜索结果的搜索信息;
其中,在第二区域中显示的搜索结果包括:结果提示信息,以及,与结果提示信息对应的结果应用对象的应用对象标识。
在一种实现方式中,处理单元1202,还用于:
在结果应用对象显示目标搜索结果的搜索信息时,显示分享控件;
响应于对分享控件的选中操作,从第二区域中获取目标搜索结果对应的搜索标识;其中,搜索标识用于唯一标识目标搜索结果,搜索标识包括目标搜索结果的链接;
对搜索标识进行分享处理。
在一种实现方式中,处理单元1202,还用于:
对多媒体数据进行特征分析处理,得到多媒体数据的至少一个关键特征;
建立至少一个关键特征中每个关键特征对应的搜索标签;
根据目标关键特征进行搜索处理,得到目标关键特征对应的与目标标签关联的搜索结果。
在一种实现方式中,目标关键特征属于第一特征类型或第二特征类型,第一特征类型与第二特征类型不同;
处理单元1202,还用于:
若多媒体数据的目标关键特征属于第一特征类型,则基于第一特征类型和目标关键特征进行搜索处理,得到与第一特征类型相关的结果应用对象对应的搜索结果;
若多媒体数据的目标关键特征属于第二特征类型,则基于第二特征类型和目标关键特征进行搜索处理,得到与第二特征类型相关的结果应用对象对应的搜索结果;
与第一特征类型相关的结果应用对象和与第二特征类型相关的结果应用对象的类型不相同。
根据本申请的一个实施例,图12所示的搜索处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本申请的其它实施例中,该搜索处理装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。根据本申请的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算设备上运行能够执行如图2及图6所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图12中所示的搜索处理装置,以及来实现本申请实施例的搜索处理方法。计算机程序可以记载于例如计算机可读记录介质上,并通过计算机可读记录介质装载于上述计算设备中,并在其中运行。
本申请实施例中,处理单元1202响应于在服务界面上对多媒体数据的搜索操作,使得显示单元1201显示资源搜索界面;其中,在资源搜索界面中显示多媒体数据关联的一个或多个搜索标签,以及显示与目标标签关联的搜索结果。上述方案中,可直接对服务界面上显示的多媒体数据执行搜索操作,得到多媒体数据关联的搜索标签以及目标标签关联的搜索结果,这简化了多媒体数据的搜索过程,缩短搜索路径,提高搜索效率。
图13示出了本申请一个示例性实施例提供的一种搜索处理装置的结构示意图;该搜索处理装置可以搭载于服务器中;该搜索处理装置可以用于执行图11b所示的方法实施例中的部分或全部步骤。请参见图13,该搜索处理装置包括如下单元:
获取单元1301,用于获取数据处理请求,数据处理请求中携带待处理的多媒体数据;
处理单元1302,用于对多媒体数据进行识别处理,得到与多媒体数据关联的一个或多个搜索标签;
处理单元1302,用于基于一个或多个搜索标签生成响应通知消息,响应通知消息包括一个或多个搜索标签;或者,响应通知消息包括一个或多个搜索标签以及与一个或多个搜索标签中目标标签关联的搜索结果;
处理单元1302,用于输出响应通知消息,响应通知消息用于触发第一客户端在资源搜索界面的第一区域内显示与多媒体数据关联的一个或多个搜索标签。
在一种实现方式中,处理单元1302,还用于:
接收搜索请求,搜索请求中包括对一个或多个搜索标签执行的选择操作选中的搜索标签;
根据所选中的搜索标签进行搜索处理,得到与选中的搜索标签关联的搜索结果;
基于所选中的搜索标签关联的搜索结果生成结果通知消息;
结果通知消息用于触发第一客户端在资源搜索界面的第二区域内显示与选中的搜索标签关联的搜索结果。
在一种实现方式中,服务器包括搜索服务模块、召回结果模块、数据处理模块;处理单元1302,还用于:
通过搜索服务模块响应数据处理请求,并向数据处理模块发送多媒体数据;
采用数据处理模块对多媒体数据进行识别处理,得到与多媒体数据关联的一个或多个搜索标签;
通过召回结果模块根据目标标签进行搜索处理,得到目标标签关联的搜索结果。
在一种实现方式中,服务器包括离线处理模块以及索引模块;处理单元1302,还用于:
接收待存储的搜索资源,搜索资源是结果应用对象的提供者提供的;通过离线处理模块将搜索资源发送至数据处理模块;
采用数据处理模块对接收到的搜索资源进行识别处理,得到与搜索资源关联的搜索标签,并将与搜索资源关联的搜索标签返回给离线处理模块;
通过离线处理模块将与搜索资源关联的搜索标签以及搜索资源发送至索引模块;
采用索引模块对与搜索资源关联的搜索标签以及搜索资源进行关联存储。
根据本申请的一个实施例,图13所示的搜索处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本申请的其它实施例中,该搜索处理装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。根据本申请的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算设备上运行能够执行如图11b所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图13中所示的搜索处理装置,以及来实现本申请实施例的搜索处理方法。计算机程序可以记载于例如计算机可读记录介质上,并通过计算机可读记录介质装载于上述计算设备中,并在其中运行。
本申请实施例中,可直接对服务界面上显示的多媒体数据执行搜索操作,得到多媒体数据关联的搜索标签以及目标标签关联的搜索结果,这简化了多媒体数据的搜索过程,缩短搜索路径,提高搜索效率。
图14示出了本申请一个示例性实施例提供的一种计算机设备的结构示意图。请参见图14,该计算机设备包括处理器1401、通信接口1402以及计算机可读存储介质1403。其中,处理器1401、通信接口1402以及计算机可读存储介质1403可通过总线或者其它方式连接。其中,通信接口1402用于接收和发送数据。计算机可读存储介质1403可以存储在计算机设备的存储器中,计算机可读存储介质1403用于存储计算机程序,计算机程序包括程序指令,处理器1401用于执行计算机可读存储介质1403存储的程序指令。处理器1401(或称CPU(Central Processing Unit,中央处理器))是计算机设备的计算核心以及控制核心,其适于实现一条或多条指令,具体适于加载并执行一条或多条指令从而实现相应方法流程或相应功能。
本申请实施例还提供了一种计算机可读存储介质(Memory),计算机可读存储介质是计算机设备中的记忆设备,用于存放程序和数据。可以理解的是,此处的计算机可读存储介质既可以包括计算机设备中的内置存储介质,当然也可以包括计算机设备所支持的扩展存储介质。计算机可读存储介质提供存储空间,该存储空间存储了计算机设备的处理系统。并且,在该存储空间中还存放了适于被处理器1401加载并执行的一条或多条的指令,这些指令可以是一个或多个的计算机程序(包括程序代码)。需要说明的是,此处的计算机可读存储介质可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器;可选的,还可以是至少一个位于远离前述处理器的计算机可读存储介质。
在一个实施例中,该计算机设备可以是前述实施例提到的目标终端;该计算机可读存储介质中存储有一条或多条指令;由处理器1401加载并执行计算机可读存储介质中存放的一条或多条指令,以实现上述搜索处理方法实施例中的相应步骤;具体实现中,计算机可读存储介质中的一条或多条指令由处理器1401加载并执行如下步骤:
在服务界面上显示多媒体数据;
响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面,资源搜索界面中包含显示搜索结果的结果显示区域,结果显示区域包括第一区域和第二区域;
在第一区域内显示与多媒体数据关联的一个或多个搜索标签;
响应于对第一区域中显示的搜索标签中目标标签的选择操作,在第二区域中显示与目标标签关联的搜索结果。
在一种实现方式中,服务界面为社交会话界面,社交会话界面包括以社交会话消息形式显示的多媒体数据;
计算机可读存储介质中的一条或多条指令由处理器1401加载并在执行响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面时,具体执行如下步骤:
响应于对社交会话界面中多媒体数据的触发事件,在社交会话界面中显示选项栏,选项栏中包括搜索选项;
若检测到对选项栏中搜索选项的选中操作,则确定产生对多媒体数据的搜索操作,显示资源搜索界面。
在一种实现方式中,多媒体数据包括多媒体数据的缩略信息,计算机可读存储介质中的一条或多条指令由处理器1401加载并在执行在服务界面上显示多媒体数据时,具体执行如下步骤:
在服务界面上显示多媒体数据的缩略信息。
在一种实现方式中,内容显示界面显示有多媒体数据;内容显示界面包含搜索控件;
计算机可读存储介质中的一条或多条指令由处理器1401加载并在执行响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面时,具体执行如下步骤:
响应于对内容显示界面中搜索控件的选择操作,输出分享窗口,分享窗口中包含搜索选项;
若检测到对分享窗口中搜索选项的选中操作,则确定产生对多媒体数据的搜索操作,显示资源搜索界面。
在一种实现方式中,多媒体数据包括多媒体数据的数据内容,内容显示界面显示有多媒体数据的数据内容。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1401加载并还执行如下步骤:
响应于在服务界面上对多媒体数据的搜索操作,显示搜索对象窗口,搜索对象窗口中包含至少一种搜索应用对象的对象标识;
响应于在搜索对象窗口中执行的选择操作,从搜索对象窗口显示的至少一种搜索应用对象的对象标识中确定M个目标对象标识,M为正整数,并触发M个目标对象标识所指示的搜索应用对象进行搜索处理;
其中,资源搜索界面中显示N个目标对象标识所指示的搜索应用对象的搜索结果,N为小于或等于M的正整数。
在一种实现方式中,第一区域内显示的一个或多个搜索标签中的每个搜索标签,与M个目标对象标识中一个目标对象标识指示的搜索应用对象对应;M个目标对象标识中不同目标对象标识指示的搜索应用对象对应不同的搜索标签。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1401加载并还执行如下步骤:
响应于对第二区域显示的搜索结果中目标搜索结果的选择操作,触发目标搜索结果对应的结果应用对象显示目标搜索结果的搜索信息;
其中,在第二区域中显示的搜索结果包括:结果提示信息,以及,与结果提示信息对应的结果应用对象的应用对象标识。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1401加载并还执行如下步骤:
在结果应用对象显示目标搜索结果的搜索信息时,显示分享控件;
响应于对分享控件的选中操作,从第二区域中获取目标搜索结果对应的搜索标识;其中,搜索标识用于唯一标识目标搜索结果,搜索标识包括目标搜索结果的链接;
对搜索标识进行分享处理。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1401加载并还执行如下步骤:
对多媒体数据进行特征分析处理,得到多媒体数据的至少一个关键特征;
建立至少一个关键特征中每个关键特征对应的搜索标签;
根据目标关键特征进行搜索处理,得到目标关键特征对应的目标标签关联的搜索结果。
在一种实现方式中,目标关键特征属于第一特征类型或第二特征类型,第一特征类型与第二特征类型不同;
计算机可读存储介质中的一条或多条指令由处理器1401加载并还执行如下步骤:
若多媒体数据的目标关键特征属于第一特征类型,则基于第一特征类型和目标关键特征进行搜索处理,得到与第一特征类型相关的结果应用对象对应的搜索结果;
若多媒体数据的目标关键特征属于第二特征类型,则基于第二特征类型和目标关键特征进行搜索处理,得到与第二特征类型相关的结果应用对象对应的搜索结果;
与第一特征类型相关的结果应用对象和与第二特征类型相关的结果应用对象的类型不相同。
另一个实施例中,该计算机设备可以是前述实施例提到的服务器;该计算机可读存储介质中存储有一条或多条指令;由处理器1401加载并执行计算机可读存储介质中存放的一条或多条指令,以实现上述搜索处理方法实施例中的相应步骤;具体实现中,计算机可读存储介质中的一条或多条指令由处理器1401加载并执行如下步骤:
获取数据处理请求,数据处理请求中携带待处理的多媒体数据;
对多媒体数据进行识别处理,得到与多媒体数据关联的一个或多个搜索标签;
基于一个或多个搜索标签生成响应通知消息,响应通知消息包括一个或多个搜索标签;或者,响应通知消息包括一个或多个搜索标签以及与一个或多个搜索标签中目标标签关联的搜索结果;
输出响应通知消息,响应通知消息用于触发第一客户端在资源搜索界面的第一区域内显示与多媒体数据关联的一个或多个搜索标签。
在一种实现方式中,计算机可读存储介质中的一条或多条指令由处理器1401加载并还执行如下步骤:
接收搜索请求,搜索请求中包括对一个或多个搜索标签执行的选择操作所选中的搜索标签;
根据所选中的搜索标签进行搜索处理,得到与选中的搜索标签关联的搜索结果;
基于与所选中的搜索标签关联的搜索结果生成结果通知消息;
结果通知消息用于触发第一客户端在资源搜索界面的第二区域内显示与选中的搜索标签关联的搜索结果。
在一种实现方式中,服务器包括搜索服务模块、召回结果模块、数据处理模块;计算机可读存储介质中的一条或多条指令由处理器1401加载并还执行如下步骤:
通过搜索服务模块响应数据处理请求,并向数据处理模块发送多媒体数据;
采用数据处理模块对多媒体数据进行识别处理,得到与多媒体数据关联的一个或多个搜索标签;
通过召回结果模块根据目标标签进行搜索处理,得到目标标签关联的搜索结果。
在一种实现方式中,服务器包括离线处理模块以及索引模块;计算机可读存储介质中的一条或多条指令由处理器1401加载并还执行如下步骤:
接收待存储的搜索资源,搜索资源是结果应用对象的提供者提供的;通过离线处理模块将搜索资源发送至数据处理模块;
采用数据处理模块对接收到的搜索资源进行识别处理,得到与搜索资源关联的搜索标签,并将与搜索资源关联的搜索标签返回给离线处理模块;
通过离线处理模块将与搜索资源关联的搜索标签以及搜索资源发送至索引模块;
采用索引模块对与搜索资源关联的搜索标签以及搜索资源进行关联存储。
本申请实施例中,处理器1401响应于在服务界面上对多媒体数据的搜索操作,显示资源搜索界面;其中,在资源搜索界面中显示多媒体数据关联的一个或多个搜索标签,以及显示与目标标签关联的搜索结果。上述方案中,可直接对服务界面上显示的多媒体数据执行搜索操作,得到多媒体数据关联的搜索标签以及目标标签关联的搜索结果,这简化了多媒体数据的搜索过程,缩短搜索路径,提高搜索效率。
本申请实施例还提供一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,计算机指令被处理器执行时实现上述的搜索处理方法。
本领域普通技术人员可以意识到,结合本申请中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用,使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程设备。计算机指令可以存储在计算机可读存储介质中,或者通过计算机可读存储介质进行传输。计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如,同轴电缆、光纤、数字用户线(DSL))或无线(例如,红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如,固态硬盘(Solid State Disk,SSD))等。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (20)

1.一种搜索处理方法,其特征在于,包括:
在服务界面上显示多媒体数据;
响应于在所述服务界面上对所述多媒体数据的搜索操作,显示资源搜索界面,所述资源搜索界面中包含显示搜索结果的结果显示区域,所述结果显示区域包括第一区域和第二区域;
在所述第一区域内显示与所述多媒体数据关联的一个或多个搜索标签;
响应于对所述第一区域中显示的搜索标签中目标标签的选择操作,在所述第二区域中显示与所述目标标签关联的搜索结果。
2.如权利要求1所述的方法,其特征在于,所述服务界面为社交会话界面,所述社交会话界面包括以社交会话消息形式显示的所述多媒体数据;
所述响应于在所述服务界面上对所述多媒体数据的搜索操作,显示资源搜索界面,包括:
响应于对所述社交会话界面中所述多媒体数据的触发事件,在所述社交会话界面中显示选项栏,所述选项栏中包括搜索选项;
若检测到对所述选项栏中搜索选项的选中操作,则确定产生对所述多媒体数据的搜索操作,显示资源搜索界面。
3.如权利要求1所述的方法,其特征在于,所述多媒体数据包括所述多媒体数据的缩略信息,所述在服务界面上显示多媒体数据,包括:
在服务界面上显示所述多媒体数据的缩略信息。
4.如权利要求1所述的方法,其特征在于,所述服务界面为内容显示界面,所述内容显示界面显示有所述多媒体数据;所述内容显示界面包含搜索控件;
所述响应于在所述服务界面上对所述多媒体数据的搜索操作,显示资源搜索界面,包括:
响应于对所述内容显示界面中搜索控件的选择操作,输出分享窗口,所述分享窗口中包含搜索选项;
若检测到对所述分享窗口中搜索选项的选中操作,则确定产生对所述多媒体数据的搜索操作,显示资源搜索界面。
5.如权利要求4所述的方法,其特征在于,所述多媒体数据包括所述多媒体数据的数据内容,所述内容显示界面显示有所述多媒体数据的数据内容。
6.如权利要求1所述的方法,其特征在于,所述显示资源搜索界面之前,还包括:
响应于在服务界面上对所述多媒体数据的搜索操作,显示搜索对象窗口,所述搜索对象窗口中包含至少一种搜索应用对象的对象标识;
响应于在所述搜索对象窗口中执行的选择操作,从所述搜索对象窗口显示的至少一种搜索应用对象的对象标识中确定M个目标对象标识,M为正整数,并触发所述M个目标对象标识所指示的搜索应用对象进行搜索处理;
其中,所述资源搜索界面中显示N个目标对象标识所指示的搜索应用对象的搜索结果,N为小于或等于M的正整数。
7.如权利要求6所述的方法,其特征在于,所述第一区域内显示的一个或多个搜索标签中的每个搜索标签,与所述M个目标对象标识中一个目标对象标识指示的搜索应用对象对应;所述M个目标对象标识中不同目标对象标识指示的搜索应用对象对应不同的搜索标签。
8.如权利要求1所述的方法,其特征在于,所述方法还包括:
响应于对所述第二区域显示的搜索结果中目标搜索结果的选择操作,触发所述目标搜索结果对应的结果应用对象显示所述目标搜索结果的搜索信息;
其中,在所述第二区域中显示的搜索结果包括:结果提示信息,以及,与所述结果提示信息对应的结果应用对象的应用对象标识。
9.如权利要求8所述的方法,其特征在于,所述方法还包括:
在所述结果应用对象显示所述目标搜索结果的搜索信息时,显示分享控件;
响应于对所述分享控件的选中操作,从所述第二区域中获取所述目标搜索结果对应的搜索标识;其中,所述搜索标识用于唯一标识所述目标搜索结果,所述搜索标识包括所述目标搜索结果的链接;
对所述搜索标识进行分享处理。
10.如权利要求1所述的方法,其特征在于,所述显示资源搜索界面之前,还包括:
对所述多媒体数据进行特征分析处理,得到所述多媒体数据的至少一个关键特征;
建立所述至少一个关键特征中每个关键特征对应的搜索标签;
根据目标关键特征进行搜索处理,得到所述目标关键特征对应的与所述目标标签关联的搜索结果。
11.如权利要求10所述的方法,其特征在于,所述目标关键特征属于第一特征类型或第二特征类型,所述第一特征类型与所述第二特征类型不同;
所述方法还包括:
若所述多媒体数据的目标关键特征属于所述第一特征类型,则基于所述第一特征类型和目标关键特征进行搜索处理,得到与所述第一特征类型相关的结果应用对象对应的搜索结果;
若所述多媒体数据的目标关键特征属于所述第二特征类型,则基于所述第二特征类型和目标关键特征进行搜索处理,得到与所述第二特征类型相关的结果应用对象对应的搜索结果;
与所述第一特征类型相关的结果应用对象和与所述第二特征类型相关的结果应用对象的类型不相同。
12.一种搜索处理方法,其特征在于,应用于服务器,包括:
获取数据处理请求,所述数据处理请求中携带待处理的多媒体数据;
对所述多媒体数据进行识别处理,得到与所述多媒体数据关联的一个或多个搜索标签;
基于所述一个或多个搜索标签生成响应通知消息,所述响应通知消息包括所述一个或多个搜索标签;或者,所述响应通知消息包括所述一个或多个搜索标签以及与所述一个或多个搜索标签中目标标签关联的搜索结果;
输出所述响应通知消息,所述响应通知消息用于触发第一客户端在资源搜索界面的第一区域内显示与所述多媒体数据关联的一个或多个搜索标签。
13.如权利要求12所述的方法,其特征在于,所述方法还包括:
接收搜索请求,所述搜索请求中包括对所述一个或多个搜索标签执行的选择操作所选中的搜索标签;
根据所选中的搜索标签进行搜索处理,得到与所选中的搜索标签关联的搜索结果;
基于与所选中的搜索标签关联的搜索结果生成结果通知消息;
所述结果通知消息用于触发所述第一客户端在资源搜索界面的第二区域内显示所述与所选中的搜索标签关联的搜索结果。
14.如权利要求12所述的方法,其特征在于,所述服务器包括搜索服务模块、召回结果模块、数据处理模块;所述方法还包括:
通过所述搜索服务模块响应所述数据处理请求,并向所述数据处理模块发送所述多媒体数据;
采用所述数据处理模块对所述多媒体数据进行识别处理,得到与所述多媒体数据关联的一个或多个搜索标签;
通过所述召回结果模块根据所述目标标签进行搜索处理,得到所述目标标签关联的搜索结果。
15.如权利要求14所述的方法,其特征在于,所述服务器包括离线处理模块以及索引模块;所述方法还包括:
接收待存储的搜索资源,所述搜索资源是结果应用对象的提供者提供的;通过所述离线处理模块将所述搜索资源发送至所述数据处理模块;
采用所述数据处理模块对接收到的所述搜索资源进行识别处理,得到与所述搜索资源关联的搜索标签,并将与所述搜索资源关联的搜索标签返回给所述离线处理模块;
通过所述离线处理模块将与所述搜索资源关联的搜索标签以及所述搜索资源发送至所述索引模块;
采用所述索引模块对与所述搜索资源关联的搜索标签以及所述搜索资源进行关联存储。
16.一种搜索处理装置,其特征在于,包括:
显示单元,用于在服务界面上显示多媒体数据;
处理单元,用于响应于在所述服务界面上对所述多媒体数据的搜索操作,显示资源搜索界面,所述资源搜索界面中包含显示搜索结果的结果显示区域,所述结果显示区域包括第一区域和第二区域;
所述显示单元,还用于在所述第一区域内显示与所述多媒体数据关联的一个或多个搜索标签;
所述处理单元,还用于响应于对所述第一区域中显示的搜索标签中目标标签的选择操作,在所述第二区域中显示与所述目标标签关联的搜索结果。
17.一种搜索处理装置,其特征在于,所述搜索处理装置搭载于服务器上,包括:
获取单元,用于获取数据处理请求,所述数据处理请求中携带待处理的多媒体数据;
处理单元,用于对所述多媒体数据进行识别处理,得到与所述多媒体数据关联的一个或多个搜索标签;
所述处理单元,还用于基于所述一个或多个搜索标签生成响应通知消息,所述响应通知消息包括所述一个或多个搜索标签;或者,所述响应通知消息包括所述一个或多个搜索标签以及与所述一个或多个搜索标签中目标标签关联的搜索结果;
所述处理单元,还用于输出所述响应通知消息,所述响应通知消息用于触发第一客户端在资源搜索界面的第一区域内显示与所述多媒体数据关联的一个或多个搜索标签。
18.一种计算机设备,其特征在于,包括:
处理器,适于执行计算机程序;
计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,所述计算机程序被所述处理器执行时,实现如权利要求1-11任一项所述的搜索处理方法,或实现如权利要求12-15任一项所述的搜索处理方法。
19.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序适于被处理器加载并执行如权利要求1-11任一项所述的搜索处理方法,或实现如权利要求12-15任一项所述的搜索处理方法。
20.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机指令,所述计算机指令被处理器执行时实现如权利要求1-11任一项所述的搜索处理方法,或实现如权利要求12-15任一项所述的搜索处理方法。
CN202111052525.6A 2021-09-08 2021-09-08 一种搜索处理方法、装置、设备、介质及程序产品 Pending CN115774806A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202111052525.6A CN115774806A (zh) 2021-09-08 2021-09-08 一种搜索处理方法、装置、设备、介质及程序产品
PCT/CN2022/113248 WO2023035893A1 (zh) 2021-09-08 2022-08-18 一种搜索处理方法、装置、设备、介质及程序产品
US18/202,795 US20230297610A1 (en) 2021-09-08 2023-05-26 Search processing method and apparatus, device, medium, and program product

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111052525.6A CN115774806A (zh) 2021-09-08 2021-09-08 一种搜索处理方法、装置、设备、介质及程序产品

Publications (1)

Publication Number Publication Date
CN115774806A true CN115774806A (zh) 2023-03-10

Family

ID=85387467

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111052525.6A Pending CN115774806A (zh) 2021-09-08 2021-09-08 一种搜索处理方法、装置、设备、介质及程序产品

Country Status (3)

Country Link
US (1) US20230297610A1 (zh)
CN (1) CN115774806A (zh)
WO (1) WO2023035893A1 (zh)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8553981B2 (en) * 2011-05-17 2013-10-08 Microsoft Corporation Gesture-based visual search
KR102599947B1 (ko) * 2017-10-27 2023-11-09 삼성전자주식회사 관련 이미지를 검색하기 위한 전자 장치 및 이의 제어 방법
US11461340B2 (en) * 2018-01-16 2022-10-04 Sony Interactive Entertainment LLC Adaptive search using social graph information
CN110121093A (zh) * 2018-02-06 2019-08-13 优酷网络技术(北京)有限公司 视频中目标对象的搜索方法及装置
CN112307311A (zh) * 2019-07-30 2021-02-02 腾讯科技(深圳)有限公司 一种信息搜索方法、装置、设备及存储介质
CN111240558A (zh) * 2020-01-20 2020-06-05 腾讯科技(深圳)有限公司 一种信息搜索方法、装置、终端及存储介质

Also Published As

Publication number Publication date
US20230297610A1 (en) 2023-09-21
WO2023035893A1 (zh) 2023-03-16

Similar Documents

Publication Publication Date Title
CN110139162B (zh) 媒体内容的共享方法和装置、存储介质、电子装置
US11176453B2 (en) System and method for detangling of interleaved conversations in communication platforms
US20170364599A1 (en) Application for enhancing metadata tag uses for social interaction
CN106095453B (zh) 一种信息展示方法、装置及电子设备
CN112930669B (zh) 内容推荐方法、装置、移动终端及服务器
CN109688479B (zh) 一种弹幕显示方法、弹幕显示装置和弹幕显示服务器
CN111444415B (zh) 弹幕处理方法、服务器、客户端、电子设备及存储介质
US20170109339A1 (en) Application program activation method, user terminal, and server
CN108777806B (zh) 一种用户身份识别方法、装置和存储介质
CN112069410A (zh) 一种消息处理方法、装置、设备及介质
CN113569037A (zh) 一种消息处理方法、装置以及可读存储介质
KR20180050636A (ko) 검색 서비스와 연결된 메시지 서비스를 위한 메시지 서비스 제공 방법 및 상기 메시지 서비스 제공 방법을 수행하는 메시지 서버 및 사용자 단말
CN111177499A (zh) 一种标签的添加方法、装置及计算机可读存储介质
CN106649518B (zh) 动态信息数据处理的方法和装置
CN112464031A (zh) 交互方法、装置、电子设备以及存储介质
CN112533050B (zh) 一种视频处理方法、装置、设备及介质
CN114647412A (zh) 内容显示方法及终端设备
CN112328895A (zh) 用户画像生成方法、装置、服务器及存储介质
CN112055164A (zh) 信息互动方法、装置、终端及存储介质
CN112015972A (zh) 一种信息推荐方法、装置、电子设备以及存储介质
CN116049490A (zh) 素材搜索方法、装置和电子设备
CN109688041B (zh) 信息处理方法、装置及服务器、智能终端、存储介质
CN112286340A (zh) 用户内容的交互方法、系统和装置
CN115774806A (zh) 一种搜索处理方法、装置、设备、介质及程序产品
CN113707179A (zh) 一种音频识别方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40083060

Country of ref document: HK