CN113297406A - 图片搜索方法、系统及电子设备 - Google Patents

图片搜索方法、系统及电子设备 Download PDF

Info

Publication number
CN113297406A
CN113297406A CN202110484346.3A CN202110484346A CN113297406A CN 113297406 A CN113297406 A CN 113297406A CN 202110484346 A CN202110484346 A CN 202110484346A CN 113297406 A CN113297406 A CN 113297406A
Authority
CN
China
Prior art keywords
picture
recommended
user
data
search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110484346.3A
Other languages
English (en)
Inventor
裴萌菲
申远
高绮蔚
兰金松
夏梦非
薛贤俊
陈培旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Innovation Co
Original Assignee
Alibaba Singapore Holdings Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Singapore Holdings Pte Ltd filed Critical Alibaba Singapore Holdings Pte Ltd
Priority to CN202110484346.3A priority Critical patent/CN113297406A/zh
Publication of CN113297406A publication Critical patent/CN113297406A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/538Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor

Abstract

本申请实施例提供图片搜索方法、系统及电子设备。其中,所述方法包括:响应于用户针对图片搜索功能的触发操作,从至少一个数据源处,获取关联数据信息;基于所述数据信息,确定所述至少一个推荐图片;在界面上,展示所述至少一个推荐图片,以在一推荐图片被触发时显示与所述推荐图片相关的搜索结果。本申请实施例提供的技术方案提供了一种发起图片搜索请求的新途径,即在用户触发图片搜索功能时便自动的展示出推荐图片,用户无需翻找或拍照即可通过触控一个推荐图片来发起图片搜索,丰富了图片搜索功能、智能化程度高,降低了图搜引擎的使用门槛,有助于提高用户体验。

Description

图片搜索方法、系统及电子设备
技术领域
本申请涉及计算机技术领域,尤其涉及图片搜索方法、系统及电子设备。
背景技术
随着计算机技术及互联网技术的发展,网络购物相关技术也得到了广泛应用。在常规网络购物场景中,通常需要用户登陆对应电商应用,根据列表选择自己想要的商品,或者,在搜索框中输入想要的商品文本信息。
在一些应用场景中,用户无法准确知道想要购买的商品名称、商品型号等信息,那么用户就无法在电商应用中搜索到该商品。因此,传统的基于商品信息搜索对应商品的方式不能满足用户日益多样化的网络购物需求。为了满足用户日益多样化的网络购物需求,现有技术中推出图片搜索方案,也就是通过摄像头拍照或相册中保存的图片来发起搜索请求。目前,图片搜索功能使用情况不好,用户使用图片搜索功能发起图片搜索仅包含两种途径,一是摄像头拍摄的方式,另一种是从相册中翻找的方式;方式局限、效率低、且智能化程度低。
发明内容
为解决或改善现有技术中存在的问题,本申请各实施例提供了图片搜索方法、系统及电子设备。
在本申请的一个实施例中,提供了一种图片搜索方法。该方法包括:
响应于用户针对图片搜索功能的触发操作,从至少一个数据源处,获取关联数据信息;
基于所述数据信息,确定所述至少一个推荐图片;
在界面上展示所述至少一个推荐图片,以在一推荐图片被触发时跳转至与所述推荐图片相关的搜索结果页面。
在本申请的另一个实施例中,提供了一种图片搜索系统。所述系统包括:
客户端,用于响应于用户针对图片搜索功能的触发操作,从至少一个数据源处,获取关联数据信息;基于所述数据信息,确定所述至少一个推荐图片;在界面上展示所述至少一个推荐图片;响应于用户针对一推荐图片的可操作界面元素的触发操作,发出搜索请求;
服务端,用于根据所述搜索请求,搜索与所述推荐图片相关的搜索结果;
所述客户端,用于接收所述服务端反馈的所述搜索结果,跳转至显示有所述搜索结果的页面。
在本申请的又一个实施例中,提供了一种电子设备。该电子设备包括:存储器、处理器及显示器;其中,
所述存储器,用于存储程序;
所述处理器,与所述存储器耦合,用于执行所述存储器中存储的所述程序,以用于:
响应于用户针对图片搜索功能的触发操作,从至少一个数据源处,获取关联数据信息;
基于所述数据信息,确定所述至少一个推荐图片;
控制所述显示器在界面上展示所述至少一个推荐图片,以在一推荐图片被触发时跳转至与所述推荐图片相关的搜索结果页面。
在本申请的又一个实施例中,提供了一种图片搜索方法。所述方法包括:
响应于搜索指令;
推荐至少一个推荐图片;
响应于选择的推荐图片,基于所述选择的推荐图片进行搜索并展示。
本申请实施例提供的技术方案,在用户触发图片搜索功能后,从至少一个数据源处获取数据信息;根据获取到的数据信息确定至少一个推荐图片,至少一个推荐图片显示在界面上,用户触控其中一个推荐图片便可跳转至与所述推荐图片相关的搜索结果页面。可见,本申请实施例提供的方案,除拍照或从相册中翻找外,又提供了一种发起图片搜索请求的新途径,即在用户触发图片搜索功能时便自动的展示出推荐图片,用户无需翻找或拍照即可通过触控一个推荐图片来发起图片搜索,丰富了图片搜索功能、智能化程度高,降低了图搜引擎的使用门槛,有助于提高用户体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请一实施例提供的图片搜索方法的流程示意图;
图2a为本申请一实施例提供的为展示至少一个推荐图片的用户操作过程示意图;
图2b为本申请一实施例提供的显示有至少一个推荐图片的界面示意图;
图3为本申请一实施例提供的显示有多个推荐图片及多个目标图片的界面示意图;
图4为本申请一实施例提供的关联显示有推荐图片及其对应用户行为信息的界面示意图;
图5为本申请另一实施例提供的图片搜索方法的流程示意图;
图6a为本申请一实施例提供的显示有推荐搜索关键词及推荐图片的搜索页面示意图;
图6b为本申请一实施例提供的为显示推荐图片的用户操作过程示意图;
图6c为本申请一实施例提供的显示有推荐搜索关键词及推荐图片的另一搜索页面示意图;
图6d为本申请一实施例提供的显示有推荐搜索关键词、推荐图片及品类推荐图的又一搜索页面示意图;
图7为本申请实施例提供的一种图片搜索系统的结构示意图;
图8为本申请实施例提供的一种电子设备的结构示意图;
图9为本申请实施例提供的一种图片搜索装置的结构示意图;
图10为本申请实施例提供的另一种图片搜索装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
在本申请的说明书、权利要求书及上述附图中描述的一些流程中,包含了按照特定顺序出现的多个操作,这些操作可以不按照其在本文中出现的顺序来执行或并行执行。操作的序号如101、102等,仅仅是用于区分各个不同的操作,序号本身不代表任何的执行顺序。另外,这些流程可以包括更多或更少的操作,并且这些操作可以按顺序执行或并行执行。需要说明的是,本文中的“第一”、“第二”等描述,是用于区分不同的消息、设备、模块等,不代表先后顺序,也不限定“第一”和“第二”是不同的类型。此外,下文描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
如图1为本申请一实施例提供的图片搜索方法的流程示意图。该方法的执行主体可以是终端。其中,终端可包括但不限于:平板电脑、手机、台式计算机、笔记本电脑、智能穿戴设备、智能电视等。或者,本实施例所述方法的执行主体为安装在硬件设备上的程序产品,如应用(APP)程序产品;安装有该程序产品的硬件设备可实现如下各步骤对应的功能。具体的,所述图片搜索方法包括如下步骤:
101:响应于用户针对图片搜索功能的触发操作,从至少一个数据源处,获取关联数据信息。
102:基于所述数据信息,确定所述至少一个推荐图片。
103:在界面上展示所述至少一个推荐图片,以在一推荐图片被触发时跳转至与所述推荐图片相关的搜索结果页面。
例如,在应用(比如,电商应用)的首页或搜索页等,展示有搜索框。如图2a所示,用户可通过在搜索框内输入推荐搜索关键词发起关键词搜索。搜索框中还显示有图片搜索控件,如图2a中显示的相机图案对应的控件,用户触发该图片搜索控件,即触发了图片搜索功能。或者,用户还可通过语音控制接口或手势控制接口等来触发图片搜索功能,等等,本实施例对此不作具体限定。
上述101中,数据源可包括但不限于如下中的至少一种:历史搜索数据、历史操作数据、浏览记录数据、用户授权使用的本地图片集等。即,本步骤101“所述至少一个数据源处,获取关联数据信息”,包括如下中的至少一项:
从历史搜索数据中,获取所述用户历史时期搜索的图片和/或关键词;
从历史操作数据中,获取所述用户历史时期截取、保存及采集的图片;
从历史操作数据中,获取至少一个目标对象对应的图片;其中,所述用户历史时期对目标对象执行过设定操作;
从浏览记录数据中,获取所述用户历史时期浏览的图片;
从本地图片集中,获取至少一个本地图片;
从服务端数据中,获取多个用户历史时期搜索或浏览的图片和/或关键词。
上述历史搜索数据、历史操作数据及浏览记录数据,均可存储在所述用户使用的终端上。上述目标对象以及用户对目标对象执行的设定操作,在不同的应用场景中会有所不同。比如,在电商应用场景中,目标对象可以是商品,用户通过电商平台提供的应用对商品执行的设定操作可以包括但不限于:加购操作、收藏操作、加入购物车操作、查看详情操作等等。上述从服务端数据中获取多个用户历史时期搜索或浏览的图片和/或关键词的目的是:能获取到大量其他用户的历史数据,以便于后续能基于大量的其他用户的历史数据为用户推荐图片;比如,可将搜索次数最多的图片作为推荐图片。这里需要补充的是:通过分析其他大量用户的图片搜索喜好来确定推荐图片的相关技术,可参见现有技术中的相应内容,本实施例对此不作具体限定。
另外,本地图片集可以包括但不限于用户相册、应用自带图片集、或是在应用启动后实时从服务端侧加载的图片集等等。这里需要补充的是,当所述本地图片集为用户相册时,需通过用户授权后才可使用。
上述102中,可通过对上述各数据源获取到的数据信息进行分析,以分析出用户图搜需求;然后基于用户图搜需求来确定至少一个推荐图片。有关对至少一种数据源获取到的数据信息进行分析的内容,将在下文中有详细说明。
在确定出至少一个推荐图片之后,可以将至少一个推荐图片直接显示在界面上。该界面可以是图像采集设置启动后对应的采集界面。例如,参见图2a所示,用户点击搜索框中的
Figure BDA0003050210550000051
控件后,图像采集装置(如摄像头)启动,界面上显示的是图像采集界面,即图像采集装置视野范围内采集到的对象均可显示在该界面上。比如,推荐图片显示在浮窗中,所述浮窗位于所述图像采集界面上,遮挡了所述图像采集界面的部分区域。如图2b所示的界面实例,图像采集界面10上,显示有推荐图片1、推荐图片2、推荐图片3、推荐图片4。其中,每一个推荐图片可以显示在一个浮窗上,或者,多个推荐图片展示在同一个浮窗上,本实施例对此不作具体限定。
除了上文中提及的采集界面外,推荐图片也可展示在搜索页面上。参见图6b所示的示例,用户打开某一APP(应用),界面上显示该APP的主页。用户点击主页上的搜索控件或搜索框后,便从主页跳转至搜索页面。该搜索页面上显示搜索框,以及各种搜索推荐,比如最近搜索,搜索发现等等。如图6b中最右侧显示的搜索页面,推荐图片,如图片1、图片2和图片3,……等等显示在搜索页面上。同样的,推荐图片可显示在搜索页面的最下方,或是显示在所述搜索页面的浮窗上,等等,本实施例对此不作具体限定。
用户触控某一推荐图片便可触发针对该推荐图片的图片搜索请求。该图片搜索请求可发送至服务端,以便于服务端根据所述图片搜索请求,搜索出与所述推荐图片相关的搜索结果。
本实施例提供的技术方案,启动执行主体从至少一个数据源处获取数据信息;根据获取到的数据信息确定至少一个推荐图片,至少一个推荐图片显示在界面上,用户触控其中一个推荐图片便可跳转至与所述推荐图片相关的搜索结果页面。可见,本申请实施例提供的方案,除拍照或从相册中翻找外,又提供了一种发起图片搜索请求的新途径,即在用户触发图片搜索功能时便自动的展示出推荐图片,用户翻找或拍照即可通过触控一个推荐图片来发起图片搜索,丰富了图片搜索功能、智能化程度高,降低了图搜引擎的使用门槛,有助于提高用户体验。
在一种可实现的实施方案中,上述实施例中步骤102“基于所述数据信息,确定所述至少一个推荐图片”,可采用如下步骤实现:
1021、对所述数据信息进行分析;
1022、根据分析结果,确定所述至少一个推荐图片。
上述1021中,可采用分析模型对所述数据信息进行分析。其中,所述分析模块可以机器学习模型(如神经网络模型),该分析模型是经训练数据训练得到。这里需要说明的是,本实施例对于分析模型的具体实现不作限定,可以是任何类型的神经网络模型,比如卷积神经网络模型、深度神经网络模型等等。即,步骤1021中对所述数据信息进行分析的具体方式包括:
1021a、获取分析模型;
1021b、将所述数据信息作为所述分析模型的输入,执行所述分析模型得出符合所述用户喜好的图片特征。
即所述分析模型得出的分析结果包含有符合所述用户喜好的图片特征。有了符合用户喜好的图片特征后,便可在图片库中查找具有所述图片特征的图片作为所述推荐图片。其中,所述图片库可以在服务端,也可在本实施例的执行主体本地(比如本地相册)等等。具体的,上述步骤1022可为“根据符合所述用户喜好的图片特征,确定所述至少一个推荐图片”;且该步骤1022可包括如下步骤中的至少一个:
1022a、根据符合所述用户喜好的图片特征,向服务端发送推荐请求;接收所述服务端反馈的基于所述图片特征匹配到的所述至少一个推荐图片;
1022b、根据符合所述用户喜好的图片特征,在已被用户授权可访问的相册中查找与所述图片特征匹配的至少一个相册图片;将所述相册中与所述图片特征匹配的至少一个相册图片,作为推荐图片。
需要说明的是,这里所说的用户授权可访问的相册是智能终端本地存储的相册属于用户个人隐私信息,在未授权的情况下不允许其他应用读取;而对于应用在智能终端本地建立的缓存文件中的图片是可以由该应用根据需要进行读取,其他应用无权读取。从而,能够确保用户数据被安全读取访问。
为了提升对推荐图片的确定效率,还可以在利用分析模型对数据信息进行分析之前,对数据信息进行初步的处理。比如,数据信息包含的从至少一个数据源获取到的数据项具有生成时间、生成方式的属性;可利用生成时间、生成方式等进行初步筛选,以将筛选出的数据项作为所述分析模型的入参,可减小分析的数据量,有助于提高分析效率。
在一些应用场景中,例如,用户张三打开社交应用,张三看到社交应用中某一个朋友发的图片,对图片中展示的目标对象特别感兴趣,于是通过截图操作将该图片进行截屏或图片保存操作将图片保存,然后再进行图片搜索,以查看该目标对象的详细信息(如价格、详情介绍等等)。因此,可认为用户在触发图片搜索控件的操作之前的,紧挨着的截屏操作得到的截屏图片或保存操作保存的图片,为用户张三最为感兴趣的图片,可作为推荐图片;而用户历史时期浏览的图片等,其作为推荐图片的价值较截屏图片或保存图片要低。因此,在另一种可实现的实施方案中,数据信息可包括但不限于:用户历史时期搜索的图片、用户历史时期截取、保存及采集的图片、用户历史时期浏览的图片等。可先对数据信息中包含的多个图片,按照所属数据源进行优先级排序。用户历史时期搜索的图片所属数据源为历史搜索数据;用户历史时期截取、保存及采集的图片所属数据源为历史操作数据;用户历史时期浏览的图片所属数据源为浏览记录数据。比如,所属数据源为历史操作数据的优先级高于所属数据源为历史搜索数据的优先级,所属数据源为历史搜索数据的优先级高于所属数据源为浏览记录数据的优先级。
即上述步骤102“基于所述数据信息,确定所述至少一个推荐图片”的另一种可实现方案如下:
1021’、按照数据项所属的数据源,对所述数据信息中包含的多个数据项进行优先级排序;
1022’、根据所述数据信息中优先级排序在前的至少一个第一数据项,确定所述至少一个推荐图片。
进一步的,本实施例提供的所述方法还可包括如下步骤:
104、响应于用户在所述界面上触发的查看更多操作,在所述界面上显示推荐窗;
105、根据所述数据信息中的至少一个第二数据项,确定多个目标图片;其中,所述至少一个第二数据项的优先级排序在所述至少一个第一数据项的优先级之后;
106、在所述推荐窗内,展示所述至少一个推荐图片及所述多个目标图片。
参见图2b所示,用户可按照图像采集界面上显示的“上滑更多”的提示,在触摸屏上进行上滑操作,以在推荐窗3内展示更多的推荐图片、目标图片,如图3所示。具体的,所述推荐窗内可具有多个划分区,比如,“猜你想要”区、“最近2天浏览”区等。实施时,可将至少一个推荐图片展示在一个划分区内,比如“猜你想要”区;可将多个目标图片展示在另一个划分区内,比如“最近2天浏览”区。
容易理解的是,由于展示位置有限,因此在确定出多个推荐图片时,可利用排序规则对多个推荐图片进行排序,将排序在前的几位(如前6位,或前5位等)的推荐图片展示在推荐窗内。同样的,在确定出多个目标图片时,可利用相应的排序规则,对多个目标图片进行排序,将排序在前的几位(如前9位,或前6位等)的目标图片展示在推荐窗内。其中,排序规则,本实施例不作具体限定,可以是时间顺序排序等。
进一步的,本实施例提供的所述方法还可包括如下步骤:
107、为所述至少一个推荐图片中任一推荐图片,确定与其关联的用户行为信息;
108、在所述推荐窗内,关联地显示推荐图片及其对应的用户行为信息。
参见图4所示的例子,与推荐图片1关联显示的用户行为信息为“最近保存”;与推荐图片2关联显示的用户行为信息为“您加购了”;与推荐图片3关联显示的用户行为信息为“您收藏了”;与推荐图片4关联显示的用户行为信息为“您收藏了”;与推荐图片5关联显示的用户行为信息为“看了又看”;与推荐图片6关联显示的用户行为信息为“看了又看”。图4示出的示例,每个推荐图片均关联显示有与其对应的用户行为信息。在具体实施时,也可不用为每个推荐图片确定对应的用户行为信息,仅关联显示部分推荐图片及其对应的用户行为信息也可,本实施例对此不作限定。
在一种可实现的技术方案中,为推荐图片确定与其关联的用户行为信息,可基于确定该推荐图片的数据项所属数据源确定。若确定该推荐图片的数据项所属数据源为历史操作数据,且为用户历史时期截取的图片,则该推荐图片对应的用户行为信息为“最近截取”。若确定该推荐图片的数据项所属数据源为历史操作数据,且为用户历史时期保存的图片,则该推荐图片对应的用户行为信息为“最近保存”。若确定该推荐图片的数据项所属数据源为历史操作数据,且为用户历史时期对该推荐图片中所示商品执行过加购操作,则该推荐图片对应的用户行为信息为“您加购了”;等等。
在实际应用中,若用户未对至少一个推荐图片进行操作,或者未执行上滑操作,或者未对推荐窗内展示的推荐图片或目标图片中任一进行操作,且未操作时长达到预设时长(比如30s等),则可认为用户对推荐图片及目标图片均不感兴趣。比如图2a所示的应用场景,用户触控界面上搜索框内的
Figure BDA0003050210550000081
控件后,客户端设备上配置的相应APP(应用)在被用户授权访问本地图像采集装置(如摄像头)的情况下,图像采集装置(如摄像头)启动,界面上显示的出图像采集界面,即图像采集装置视野范围内采集到的对象均可显示在该界面上。若用户对该界面(如图2b或图3显示的)上的推荐图片及目标图片均不感兴趣,APP可启动自动识别功能,以对出现在图像采集装置视野内的目标物体进行识别,以便于基于识别结果进行搜索。或者,用户点击拍摄控件或“相册”控件等,以拍摄欲搜索的图片或从相册中查找出欲搜索的图片。
进一步的,本实施例提供的所述方法还可包括如下步骤:
109、在所述界面上展示至少一个品类推荐图,以在一品类推荐图被触发时显示包含相应品类对象的搜索结果。
对应于电商应用场景,品类推荐图可理解为:商品品类推荐图。如图4所示,品类推荐图包括:牛奶饮品品类推荐图、洗护日用品类推荐图、潮流穿搭品类推荐图等等。用户点击相应品类推荐图便可查看到包含有相应品类商品的搜索结果。
具体的,上述至少一个品类推荐图可以是固定的,比如应用预先设定好的几种品类推荐图。或者,上述至少一个品类推荐图是基于数据信息分析得到的;其中数据信息可以是上述步骤101中从至少一个数据源处获取到的;通过对数据信息的分析,得到用户想要搜索的品类,然后将用户想要搜索的至少一个品类对应的品类推荐图进行显示。比如,用户历史上搜索洗护日用品较多,因此可将洗护日用品类图作为品类推荐图进行展示。
基于同样的思路,本申请实施例还提供另一种图片搜索方法。如图5为本申请实施例提供的另一种图片搜索方法的流程示意图。同样的,本实施例所述方法的执行主体可以是终端。其中,终端可包括但不限于:平板电脑、手机、台式计算机、笔记本电脑、智能穿戴设备等。或者,本实施例所述方法的执行主体为安装在硬件设备上的程序产品,如应用(APP)程序产品;安装有该程序产品的硬件设备可实现如下各步骤对应的功能。具体的,所述图片搜索方法包括如下步骤:
201、从至少一个数据源处,获取数据信息。
202、根据所述数据信息,确定至少一个推荐搜索关键词及至少一个推荐图片。
203、在搜索页面上,展示所述至少一个推荐搜索关键词及所述至少一个推荐图片,以同时提供关键词搜索推荐和图片搜索推荐功能待用户选择。
有关上述201和202中“根据所述数据信息,确定至少一个推荐图片”可参见上文中的相应内容,此处不作赘述。另外,根据所述数据信息,确定至少一个推荐搜索关键词,可参见现有技术中的相关内容,本实施例对此不作限定。
如图6a为本申请实施例提供的一种搜索过程示意图。从图6a中可以看到,在终端上显示搜索页面20,该搜索页面20是用户打开应用后所展示的。或者是,用户在打开应用进入主页后,通过主页进入的搜索页面20。进一步地,用户可以在该搜索页面20中,触发图片搜索功能控件30;然后,用户便可在搜索页面上可看到与图片搜索功能控件30关联显示的推荐图片,还可在搜索页面20上看到推荐搜索关键词,图6a中采用圆角矩形框示意性的表示出了各推荐搜索关键词。该搜索页面20中为用户提供了多种类型的推荐,包含有关键词推荐,图片推荐等。即,上述步骤203可具体为:
在搜索页面上显示所述至少一个推荐搜索关键词;
响应于用户针对搜索页面中图片搜索功能控件的触发操作,在所述搜索页面上显示所述至少一个推荐图片。
如图6a所示,所述至少一个推荐图片可显示在图片搜索功能控件(即图中显示的
Figure BDA0003050210550000091
)的附近;或者如图6b所示,所述至少一个推荐图片可显示在界面的下方。进一步的,除显示有至少一个推荐图片(如图6b中的图片1、图片2、图片3、……)外,还可显示“相册”、“拍摄”等控件。用户对推荐图片不感兴趣时,可通过“相册”控件触发从相册查找欲搜索图片的操作,或者通过“拍摄”控件触发图像采集装置(如摄像头)采集视野范围内对象的图片的操作,采集到的图片作为欲搜索图片。
上述方案中,至少一个推荐图片的显示需用户触发。在另一可实现的技术方案中,至少一个推荐搜索关键词及至少一个推荐图片可同时显示,而不需要用户的任何操作。如图6c所示,在用户通过主页进入如图6c所示的搜索页后,该搜索页面20上即同时显示出了至少一个搜索推荐关键词(即图中圆角矩形框示意出的)以及至少一个推荐图片,供用户选择。
在该方案中,用户可基于自身需求选择,而在用户选择图片搜索功能时,不需要用户触发图片搜索功能,且在图片搜索功能启动后还不用从相册或者应用的相关历史记录里面去查找自己想要的图片,由应用主动为其提供推荐图片。用户可以直接通过搜索页面上显示的推荐图片触发图片搜索。比如,用户可以对推荐图片进行触控,以触发针对所述推荐图片的搜索,并显示与推荐图片相关的搜索结果。对所述推荐图片的搜索可具体包括如下过程:对推荐图片进行图像识别,以识别出一搜索对象;然后搜索与所述搜索对象相同或相似的多个候选图片。用户点击某一候选图片,便可查看到该候选图片对应的详情页。比如,在电商应用场景中,识别出推荐图片中有一件“红色开衫毛衣”(即搜索对象),然后搜索与该“红色开衫毛衣”(即搜索对象)相同或相似的多个商品图片。展示搜索出的多个商品图片,用户点击其中一个感兴趣的商品图片,便可进入该商品图片对应商品的详情页,该详情页中包含有:价格、规格型号、商品材质、商品的评价等等。
即本实施例提供的所述方法还可包括如下步骤:
204、响应于对至少一个推荐图片中一选定图片的触发操作,对所述选定图片进行识别,以识别出所述选定图片中的至少一个目标对象;
205、搜索与所述至少一个目标对象相关的搜索结果。
进一步的,本实施例提供的所述方法还可包括如下步骤:
206、在所述搜索页面上展示至少一个品类推荐图,以同时提供关键词搜索推荐、图片搜索推荐及品类推荐待用户选择。
如图6d所示的例子,在搜索页面中显示有关键词搜索推荐、推荐图片(图片1、图片2、图片3)、以及热门品类推荐对应的品类推荐图(如潮流穿搭品类推荐图、日用洗护品类推荐图等等)。用户通过一个搜索页面便可选择多种搜索功能,比如关键词搜索功能,图片搜索功能、品类搜索功能;用户无需进入相应的搜索页面,极大的减少了用户操作,方便用户使用。
进一步的,本申请一实施例还提供了一种图片搜索方法。该方法包括如下步骤:
301、响应于搜索指令;
302、推荐至少一个推荐图片;
303、响应于选择的推荐图片,基于所述选择的推荐图片进行搜索并展示。
上述301中,搜索指令可以是用户通过触控交互界面上的相应控件触发的,也可以是用户语音触发的,还可以是用户通过做出相应的动作触发的,本实施例的执行主体通过传感器(如摄像头)感测到的动作;等等,本实施例对此不作具体限定。
上述302中,至少一个推荐图片的推荐动作可具体包括如上述实施例中的步骤101和102,即“推荐至少一个推荐图片”可包括:
从至少一个数据源处,获取关联数据信息;
基于所述数据信息,确定所述至少一个推荐图片。
有关上述两个步骤的更相近的内容可参见上文中的相应内容,此处不作赘述。
进一步的,本实施例提供的所述方法还可包括如下步骤:
304、推荐并展示至少一个品类推荐图;
303、响应于选择的品类推荐图,基于所述选择的品类推荐图进行搜索并展示。
基于同样的思路,本申请实施例还提供一种图片搜索系统。如图7为本申请实施例提供的一种图片搜索系统的结构示意图。如图7所示,该系统包括:
客户端61,用于响应于用户针对图片搜索功能的触发操作,从至少一个数据源处,获取关联数据信息;基于所述数据信息,确定所述至少一个推荐图片;在所述界面上,展示所述至少一个推荐图片;响应于用户针对一推荐图片的触发操作,发出搜索请求。
服务端62,用于根据所述搜索请求,搜索与所述推荐图片相关的搜索结果。
所述客户端61,用于接收所述服务端反馈的所述搜索结果,显示所述搜索结果。
在该图片搜索系统中,可有多个客户端61分别与服务端62连接。服务端62能够及时为各客户端提供所需的搜索结果。在本系统中,至少一个推荐图片可以是客户端61确定出的,如上文中描述的。当然,在具体实施时,至少一个推荐图片也可由服务端来确定,服务端确定推荐图片的方案同上文中所述的内容,只是部分步骤的执行主体替换为服务端即可。比如,
客户端,用于响应于用户针对图片搜索功能的触发操作,向服务端发送推荐请求;
服务端,用于在接收到所述推荐请求后,从至少一个数据源处,获取数据信息;基于所述数据信息,确定所述至少一个推荐图片;将所述至少一个推荐图片反馈给客户端;
所述客户端,用于在界面上展示所述至少一个推荐图片。
进一步的,本申请另一实施例还提供一种电子设备。如图8为本申请实施例提供的一种电子设备的结构示意图。该电子设备包括存储器801、处理器802及显示器804;其中,
所述存储器801,用于存储程序;
所述处理器802,与所述存储器801耦合,用于执行所述存储器801中存储的所述程序,以用于:
响应于用户针对图片搜索功能的触发操作,从至少一个数据源处,获取关联数据信息;
基于所述数据信息,确定所述至少一个推荐图片;
控制所述显示器804在界面上,展示所述至少一个推荐图片,以在一推荐图片被触发时显示与所述推荐图片相关的搜索结果。
上述存储器801可被配置为存储其它各种数据以支持在电子设备上的操作。这些数据的示例包括用于在电子设备上操作的任何应用程序或方法的指令。存储器可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
进一步地,本实施例中的所述处理器802可以具体是:可编程交换处理芯片,该可编程交换处理芯片中配置有数据复制引擎,能对接收到的数据进行复制。
上述处理器802在执行存储器中的程序时,除了上面的功能之外,还可实现其它功能,具体可参见前面各实施例的描述。进一步,如图8所示,电子设备还包括:电源组件805、音频组件806、通信组件803、图像采集装置807等其它组件。
本申请一个实施例还提供另一种电子设备。本申请实施例提供的另一种电子设备的结构同图8所示的结构类同。该电子设备包括存储器、处理器及显示器;其中,
所述存储器,用于存储程序;
所述处理器,与所述存储器耦合,用于执行所述存储器中存储的所述程序,以用于:
从至少一个数据源处,获取数据信息;
根据所述数据信息,确定至少一个推荐搜索关键词及至少一个推荐图片;
在搜索页面上,展示所述至少一个推荐搜索关键词及所述至少一个推荐图片,以同时提供关键词搜索推荐和图片搜索推荐功能待用户选择。
上述存储器可被配置为存储其它各种数据以支持在电子设备上的操作。这些数据的示例包括用于在电子设备上操作的任何应用程序或方法的指令。存储器可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
进一步地,本实施例中的所述处理器可以具体是:可编程交换处理芯片,该可编程交换处理芯片中配置有数据复制引擎,能对接收到的数据进行复制。
上述处理器在执行存储器中的程序时,除了上面的功能之外,还可实现其它功能,具体可参见前面各实施例的描述。
相应地,本申请实施例还提供一种存储有计算机程序的计算机可读存储介质,所述计算机程序被计算机执行时能够实现上述各实施例提供的图片搜索方法的步骤或功能。
基于同样的思路,本申请实施例还提供一种图片搜索装置。如图9为本申请实施例提供的一种图片搜索装置的结构示意图。该图片搜索装置包括:
获取模块1002,用于响应于用户针对图片搜索功能的触发操作,从至少一个数据源处,获取关联数据信息;
确定模块1003,用于基于所述数据信息,确定所述至少一个推荐图片;
显示模块1001,用于在界面上展示所述至少一个推荐图片,以在一推荐图片被触发时显示与所述推荐图片相关的搜索结果。
进一步的,所述获取模块1002具有如下中的任一项功能:
从历史搜索数据中,获取所述用户历史时期搜索的图片和/或关键词;
从历史操作数据中,获取所述用户历史时期截取、保存和/或采集的图片;
从历史操作数据中,获取至少一个目标对象对应的图片;其中,所述用户历史时期对目标对象执行过设定操作;
从浏览记录数据中,获取所述用户历史时期浏览的图片;
从用户授权使用的本地图片集中,获取至少一个本地图片。
进一步的,所述确定模块1003在基于所述数据信息,确定所述至少一个推荐图片时具体用于:
获取分析模型,其中,所述分析模型为经训练数据训练得到;
将所述数据信息作为所述分析模型的输入,执行所述分析模型得出符合所述用户喜好的图片特征;
根据符合所述用户喜好的图片特征,确定所述至少一个推荐图片。
进一步的,所述确定模块1003在根据符合所述用户喜好的图片特征,确定所述至少一个推荐图片时,具体用于:
根据符合所述用户喜好的图片特征,向服务端发送推荐请求;接收所述服务端反馈的基于所述图片特征匹配到的所述至少一个推荐图片;和/或
根据符合所述用户喜好的图片特征,在已被用户授权可访问的相册中查找与所述图片特征匹配的至少一个相册图片;将所述相册中与所述图片特征匹配的至少一个相册图片,作为推荐图片。
进一步的,所述确定模块1003在基于所述数据信息,确定所述至少一个推荐图片时,具体用于:
按照数据项所属的数据源,对所述数据信息中包含的多个数据项进行优先级排序;
根据所述数据信息中优先级排序在前的至少一个数据项,确定所述至少一个推荐图片。
进一步的,所述显示模块1001还用于响应于用户在所述图像采集界面上触发的查看更多操作,在所述图像采集界面上显示推荐窗;
所述确定模块1003还用于根据所述数据信息中的至少一个第二数据项,确定多个目标图片;其中,所述至少一个第二数据项的优先级排序在所述至少一个第一数据项的优先级之后;
所述显示模块1001还用于在所述推荐窗内,展示所述至少一个推荐图片以及所述多个目标图片。
进一步的,所属数据源为所述历史搜索数据和/或所述历史操作数据的数据信息的优先级高于所属数据源为浏览记录数据的数据信息。
进一步的,本实施例提供的所述图片搜索装置中所述确定模块1003还用于:为所述至少一个推荐图片中任一推荐图片,确定与其关联的用户行为信息。所述显示模块1001还用于在所述推荐窗内,关联地显示推荐图片及其对应的用户行为信息。
基于同样的思路,本申请实施例还提供一种图片搜索装置。如图10为本申请实施例提供的另一种图片搜索装置的结构示意图。该图片搜索装置包括:
确定模块1102,用于从至少一个数据源处,获取数据信息;根据所述数据信息,确定至少一个推荐搜索关键词及至少一个推荐图片;
显示模块1101,用于在搜索页面上,展示所述至少一个推荐搜索关键词及所述至少一个推荐图片,以同时提供关键词搜索推荐和图片搜索推荐功能待用户选择。
进一步的,本申请实施例还提供一种图片搜索装置。该图片搜索装置可包括推荐模块及搜索展示模块。其中,推荐模块用于响应于搜索指令,推荐至少一个推荐图片。搜索展示模块用于响应于选择的推荐图片,基于所述选择的推荐图片进行搜索并展示。
具体的,所述推荐模块在推荐至少一个推荐图片时具体用于:从至少一个数据源处获取数据信息;基于所述数据信息确定所述至少一个推荐图片。
本申请实施例提供技术方案,可以应用于各种电商APP应用中,当用户想要通过图搜方式从当前电商应用中查找某款商品的时候,不需要用户进行过多的复杂操作,能够很快的为用户推荐商品图像;若推荐中有用户想要的商品对应的推荐图片,用户可以直接点击推荐图片就能够看到与该推荐图片相关的搜索结果,不再需要用户从相册中选择图像或者通过摄像头实时拍取图像,能够有效简化操作流程,提升用户体验。
此外,还可以应用于各种作业辅导APP应用中,当用户想要通过拍图方式搜索相关题目和答案的时候,只要用户预先截图或者拍照后,用户打开图搜功能,会主动推荐给用户其截图或者拍照得到的题目,若用户进行选择,则会为用户推荐应用内的题目相关信息(包括题目及解答方法)。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种图片搜索方法,其特征在于,包括:
响应于用户针对图片搜索功能的触发操作,从至少一个数据源处,获取数据信息;
基于所述数据信息,确定所述至少一个推荐图片;
在界面上展示所述至少一个推荐图片,以在一推荐图片被触发时显示与所述推荐图片相关的搜索结果。
2.根据权利要求1所述的方法,其特征在于,所述至少一个数据源处,获取数据信息,包括如下中的至少一项:
从历史搜索数据中,获取所述用户历史时期搜索的图片和/或关键词;
从历史操作数据中,获取所述用户历史时期截取、保存和/或采集的图片;
从历史操作数据中,获取至少一个目标对象对应的图片;其中,所述用户历史时期对目标对象执行过设定操作;
从浏览记录数据中,获取所述用户历史时期浏览的图片;
从本地图片集中,获取至少一个本地图片;
从服务端数据中,获取多个用户历史时期搜索或浏览的图片和/或关键词。
3.根据权利要求1或2所述的方法,其特征在于,基于所述数据信息,确定所述至少一个推荐图片,包括:
获取分析模型,其中,所述分析模型为经训练数据训练得到;
将所述数据信息作为所述分析模型的输入,执行所述分析模型得出符合所述用户喜好的图片特征;
根据符合所述用户喜好的图片特征,确定所述至少一个推荐图片。
4.根据权利要求3所述的方法,其特征在于,根据符合所述用户喜好的图片特征,确定所述至少一个推荐图片,包括:
根据符合所述用户喜好的图片特征,向服务端发送推荐请求;接收所述服务端反馈的基于所述图片特征匹配到的所述至少一个推荐图片;和/或
根据符合所述用户喜好的图片特征,在已被用户授权可访问的相册中查找与所述图片特征匹配的至少一个相册图片;将所述相册中与所述图片特征匹配的至少一个相册图片,作为推荐图片。
5.根据权利要求2所述的方法,其特征在于,基于所述数据信息,确定所述至少一个推荐图片,包括:
按照数据项所属的数据源,对所述数据信息中包含的多个数据项进行优先级排序;
根据所述数据信息中优先级排序在前的至少一个第一数据项,确定所述至少一个推荐图片。
6.根据权利要求5所述的方法,其特征在于,还包括:
响应于用户在所述界面上触发的查看更多操作,在所述界面上显示推荐窗;
根据所述数据信息中的至少一个第二数据项,确定多个目标图片;其中,所述至少一个第二数据项的优先级排序在所述至少一个第一数据项的优先级之后;
在所述推荐窗内,展示所述至少一个推荐图片以及所述多个目标图片。
7.根据权利要求6所述的方法,其特征在于,还包括:
为所述至少一个推荐图片中任一推荐图片,确定与其关联的用户行为信息;
在所述推荐窗内,关联地显示推荐图片及其对应的用户行为信息。
8.根据权利要求1或2所述的方法,其特征在于,还包括:
在所述界面上展示至少一个品类推荐图,以在一品类推荐图被触发时显示包含相应品类对象的搜索结果。
9.一种图片搜索方法,其特征在于,包括:
响应于搜索指令;
推荐至少一个推荐图片;
响应于选择的推荐图片,基于所述选择的推荐图片进行搜索并展示。
10.一种电子设备,其特征在于,包括存储器、处理器及显示器;其中,
所述存储器,用于存储程序;
所述处理器,与所述存储器耦合,用于执行所述存储器中存储的所述程序,以实现上述权利要求1至8中任一项所述方法中的步骤;或者实现上述权利要求9所述方法中的步骤。
CN202110484346.3A 2021-04-30 2021-04-30 图片搜索方法、系统及电子设备 Pending CN113297406A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110484346.3A CN113297406A (zh) 2021-04-30 2021-04-30 图片搜索方法、系统及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110484346.3A CN113297406A (zh) 2021-04-30 2021-04-30 图片搜索方法、系统及电子设备

Publications (1)

Publication Number Publication Date
CN113297406A true CN113297406A (zh) 2021-08-24

Family

ID=77320959

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110484346.3A Pending CN113297406A (zh) 2021-04-30 2021-04-30 图片搜索方法、系统及电子设备

Country Status (1)

Country Link
CN (1) CN113297406A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023231884A1 (zh) * 2022-05-31 2023-12-07 华为技术有限公司 人机交互的方法及电子设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023231884A1 (zh) * 2022-05-31 2023-12-07 华为技术有限公司 人机交互的方法及电子设备

Similar Documents

Publication Publication Date Title
CN109885770B (zh) 一种信息推荐方法、装置、电子设备及存储介质
JP7356206B2 (ja) コンテンツ推薦及び表示
CN108476259B (zh) 基于用户行为的内容推荐的系统和方法
CN103902656B (zh) 媒体对象元数据关联和排名
US10902077B2 (en) Search result aggregation method and apparatus based on artificial intelligence and search engine
US9607010B1 (en) Techniques for shape-based search of content
US9607325B1 (en) Behavior-based item review system
US10380461B1 (en) Object recognition
CN102150163B (zh) 交互式图像选择方法
CN110543598A (zh) 信息推荐方法、装置及终端
CN110221747B (zh) 电子书阅读页面的呈现方法、计算设备及计算机存储介质
TW202141475A (zh) 物品名稱確定方法、裝置、電腦設備及儲存媒體
EP3149615A1 (en) Information processing device, information processing method, and program
US20220083617A1 (en) Systems and methods for enhanced online research
WO2023160413A1 (zh) 书籍推荐方法、装置、电子设备及存储介质
CN114707502A (zh) 虚拟空间处理方法、装置、电子设备及计算机存储介质
CN113869063A (zh) 数据推荐方法、装置、电子设备及存储介质
CN113297406A (zh) 图片搜索方法、系统及电子设备
WO2024078143A1 (zh) 一种搜索结果展示方法及装置
CN114329069A (zh) 视觉搜索查询的智能系统和方法
CN112860921A (zh) 信息搜索方法及装置
CN111859147B (zh) 对象推荐方法、对象推荐装置和电子设备
CN116016421A (zh) 促进在计算装置中执行的基于媒体的内容共享的方法、计算装置可读存储介质以及计算装置
CN109756759B (zh) 一种弹幕信息推荐方法和装置
US11514082B1 (en) Dynamic content selection

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20240312

Address after: # 03-06, Lai Zan Da Building 1, 51 Belarusian Road, Singapore

Applicant after: Alibaba Innovation Co.

Country or region after: Singapore

Address before: Room 01, 45th Floor, AXA Building, 8 Shanton Road, Singapore

Applicant before: Alibaba Singapore Holdings Ltd.

Country or region before: Singapore

TA01 Transfer of patent application right