CN114969479B - 一种搜索方法、装置及存储介质 - Google Patents

一种搜索方法、装置及存储介质 Download PDF

Info

Publication number
CN114969479B
CN114969479B CN202110428735.4A CN202110428735A CN114969479B CN 114969479 B CN114969479 B CN 114969479B CN 202110428735 A CN202110428735 A CN 202110428735A CN 114969479 B CN114969479 B CN 114969479B
Authority
CN
China
Prior art keywords
search
image
determining
sample image
search word
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110428735.4A
Other languages
English (en)
Other versions
CN114969479A (zh
Inventor
丁小波
蔡茂贞
钟地秀
彭琨
李小青
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Internet Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Internet Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Internet Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN202110428735.4A priority Critical patent/CN114969479B/zh
Publication of CN114969479A publication Critical patent/CN114969479A/zh
Application granted granted Critical
Publication of CN114969479B publication Critical patent/CN114969479B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/532Query formulation, e.g. graphical querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9538Presentation of query results

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种搜索方法、装置及存储介质。该搜索方法包括:接收客户端所发送的搜索请求,搜索请求中包括样本图像;基于样本图像所属的图像类型,确定第一搜索词,图像类型包括截图类或非截图类,第一搜索词用于确定搜索范围;根据样本图像的图像内容确定第二搜索词;利用第二搜索词,在第一搜索词所确定的搜索范围内进行搜索。由于第一搜索词基于样本图像所属的图像类型来确定,进而能够通过该第一搜索词来确定搜索范围,并且第二搜索词根据样本图像的图像内容来确定,因此能够利用该第二搜索词在第一搜索词所确定的搜索范围内进行搜索,并且该搜索结合了样本图像的图像类型和图像内容,还能够提高搜索结果的准确性。

Description

一种搜索方法、装置及存储介质
技术领域
本发明涉及互联网领域,尤其涉及一种搜索方法、装置及存储介质。
背景技术
随着互联网技术的蓬勃发展,越来越多的用户利用网络进行搜索。在搜索过程中,用户可以通过客户端发送样本图像,服务端可以通过该样本图像确定搜索结果,并向客户端进行响应。因此,如何利用样本图像来确定搜索结果至关重要。
发明内容
本发明实施例提供一种搜索方法、装置及存储介质,以解决现有技术中的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,提供了一种搜索方法,包括:
接收客户端所发送的搜索请求,所述搜索请求中包括样本图像;
基于所述样本图像所属的图像类型,确定第一搜索词,所述图像类型包括截图类或非截图类,所述第一搜索词用于确定搜索范围;
根据所述样本图像的图像内容确定第二搜索词;
利用所述第二搜索词,在所述第一搜索词所确定的搜索范围内进行搜索。
优选的,基于所述样本图像所属的图像类型,确定第一搜索词,具体包括:
当所述样本图像所属的图像类型为截图类时,确定客户端在发送所述搜索请求前的预设时间段内,所述客户端所在的终端设备所展示的文件的文件类型,并根据所述文件类型确定所述第一搜索词,其中,所述第一搜索词所确定的搜索范围与所述文件类型相匹配;或,
当所述样本图像所属的图像类型为非截图类时,根据所述样本图像的图像属性信息生成所述第一搜索词,其中,所述第一搜索词所确定的搜索范围与所述图像属性信息相匹配。
优选的,所述样本图像的图像属性信息用于指示如下信息中的任意一种或多种:所述样本图像的生成地点、所述样本图像的生成时刻、所述样本图像是否为动态图、所述样本图像的旋转折叠状态。
优选的,所述终端设备在所述预设时间段内展示多个文件;则,
确定客户端在发送所述搜索请求前的预设时间段内,所述客户端所在的终端设备所展示的文件的文件类型,并根据所述文件类型确定所述第一搜索词,具体包括:
确定所述终端设备在所述预设时间段内最后展示的文件的文件类型,并根据所述文件类型确定所述第一搜索词;或,确定所述终端设备在所述预设时间段内展示的各个文件的文件类型,并根据各所述文件类型确定所述第一搜索词。
优选的,根据各所述文件类型确定所述第一搜索词,具体包括:
将各所述文件类型,根据所对应文件在所述终端设备上展示时间的先后顺序进行排列,并根据排列结果生成所述第一搜索词。
优选的,所述方法还包括:
利用所述第一搜索词中的各所述文件类型分别确定相应的搜索库;则,
利用所述第二搜索词,在所述第一搜索词所确定的搜索范围内进行搜索,具体包括:
利用所述第二搜索词,根据各文件类型的排序,依次在各个搜索库中进行搜索。
优选的,根据所述样本图像的图像内容确定第二搜索词,具体包括:
通过对所述样本图像的图像内容进行识别,确定所述图像内容中是否包括目标对象;
若是,则根据所述目标对象生成所述第二搜索词;或,
若否,则确定所述样本图像的图像内容的场景类别,并根据所述场景类别生成所述第二搜索词,其中,所述场景类别表征所述样本图像的图像内容所属的分类。
优选的,所述样本图像的图像内容中包括多个目标对象;则,
根据所述目标对象生成所述第二搜索词,具体包括:
根据各个目标对象的名称以及各个目标对象分别在所述样本图像中的面积占比和/或坐标位置,生成所述第二搜索词
第二方面,还提供了一种搜索装置,包括:接收单元、第一搜索词确定单元、第二搜索词确定单元以及搜索单元,其中:
接收单元,接收客户端所发送的搜索请求,所述搜索请求中包括样本图像;
第一搜索词确定单元,基于所述样本图像所属的图像类型,确定第一搜索词,所述图像类型包括截图类或非截图类,所述第一搜索词用于确定搜索范围;
第二搜索词确定单元,根据所述样本图像的图像内容确定第二搜索词;
搜索单元,利用所述第二搜索词,在所述第一搜索词所确定的搜索范围内进行搜索。
第三方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质包括指令,所述指令在计算机上运行时,使得计算机执行本发明实施例所提供的搜索方法。
采用本申请实施例所提供的搜索方法,接收客户端所发送的搜索请求后,基于搜索请求中的样本图像所属的图像类型,确定第一搜索词,该第一搜索词用于确定搜索范围,该图像类型包括截图类或非截图类,并根据该样本图像的图像内容确定第二搜索词,然后利用第二搜索词,在第一搜索词所确定的搜索范围内进行搜索。由于第一搜索词基于样本图像所属的图像类型来确定,进而能够通过该第一搜索词来确定搜索范围,并且第二搜索词根据样本图像的图像内容来确定,因此能够利用该第二搜索词在第一搜索词所确定的搜索范围内进行搜索,并且该搜索结合了样本图像的图像类型和图像内容,还能够提高搜索结果的准确性。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明实施例提供的搜索方法的具体流程示意图;
图2是本发明实施例提供的搜索装置的具体结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如前所述,随着互联网技术的蓬勃发展,越来越多的用户利用网络进行搜索。在搜索过程中,用户可以通过客户端发送样本图像,服务端可以通过该样本图像确定搜索结果,并向客户端进行响应。比如,用户可以在购物软件的客户端上传商品图像(作为样本图像),从而使服务端根据该商品图像进行搜索等。因此,如何利用样本图像来确定搜索结果至关重要。
基于此,本申请实施例提供了一种搜索方法,能够利用样本图像进行搜索。如图1所示为该搜索方法的具体流程示意图,对于该搜索方法,通常可以由服务端执行,该搜索方法可以包括如下步骤:
步骤S11:接收客户端所发送的搜索请求,该搜索请求中包括样本图像。
在实际应用中,用户的终端设备,比如可以是智能手机、电脑或平板电脑等,通常可以在该终端设备上安装客户端,在需要进行搜索时,可以通过该客户端来发送搜索请求,比如需要搜索与某张图像相关的信息或搜索与该图像类似的其它图像时,可以将该图像作为样本图像携带于该搜索请求中,发送至服务端,从而使服务器能够接收到客户端所发送的搜索请求,进而进行搜索。
步骤S12:确定搜索请求中的样本图像的图像类型,该图像类型包括截图类或非截图类。
服务器在接收到该搜索请求之后,可以先从该搜索请求中解析出样本图像,然后确定该样本图像的图像类型,其中,该图像类型包括截图类或非截图类,也就是说在解析出该样本图像后,确定该样本图像为截图类或非截图类。
其中,这里所说的截图类的图像,通常指该图像通过截图、截屏、PrintScreen或screenshot等方式生成的图像;而非截图类的图像指截图类图像之外的图像,比如通过拍摄等方式生成的图像。
在截图类的图像的生成过程中,通常会在图像的属性信息中标注生成方式为截图、截屏、PrintScreen或screenshot,从而可以通过查看图像的属性信息来判断该图像是否为截图类的图像。
因此,可以通过查看样本图像的属性信息的方式,来判断该样本图像是否属于截图类的图像,比如该样本图像的属性信息中标注该样本图像通过截图、截屏、PrintScreen或screenshot方式生成,则说明该样本图像为截图类的图像,否则为非为截图类的图像。
步骤S13:基于样本图像所属的图像类型,确定第一搜索词,该第一搜索词用于确定搜索范围。
确定样本图像的图像类型的目的在于,通常可以根据图像类型的不同,采用不同的方式来确定该第一搜索词。比如,当样本图像所属的图像类型为截图类时,说明用户偏向于查找截图类的图像,或与该截图类的样本图像内容相关性较高的信息;或者当样本图像所属的图像类型为非截图类时,说明用户偏向于查找非截图类的图像,如拍摄的图像,或与该非截图类的样本图像内容相关性较高的信息。因此可以先确定样本图像所属的图像类型,进而确定第一搜索词,并通过该第一搜索词来确定搜索范围,通过在该搜索范围内进行搜索,从而提高搜索的准确性。
对于非截图类的图像,比如拍摄的图像、软件生成的动态图(如GIF图像等)或软件对现有图像进行旋转折叠所生成的图像等,在这些非截图类图像的生成过程中,通常会在图像属性信息中标注诸如:该图像的生成地点、该图像的生成时刻、该图像是否为动态图、该图像的旋转折叠状态等。
比如对于拍摄生成的非截图类图像,通常会在该图像的图像属性信息标注拍摄地点(即该图像的生成地点)、拍摄时刻(即该图像的生成时刻),当然也可能会标注拍摄者等;通常还可以在图像属性信息中标注是否为动态图,从而通过查看该图像属性信息确定该图像是否为动态图;当然也可以通过图像属性信息标注图像的旋转折叠状态,比如旋转角度为90度、45度等。
因此在一种确定第一搜索词的方式中,当样本图像所属的图像类型为非截图类时,可以通过该样本图像的图像属性信息,确定该样本图像如下信息中的任意一种或多种:样本图像的生成地点、样本图像的生成时刻、样本图像是否为动态图、样本图像的旋转折叠状态。比如该样本图像为拍摄的图像时,可以通过该图像属性信息确定该样本图像的拍摄地点、拍摄时刻等;也可以通过该样本图像的图像属性信息,确定该样本图像是否为动态图或旋转折叠状态等。在确定该样本图像上述信息之后,进一步生成第一搜索词,该第一搜索词所确定的搜索范围与该图像属性信息相匹配。
比如,该图像属性信息指示样本图像的拍摄地点和拍摄时刻时,可以将该拍摄地点和拍摄时刻以某种规则组合成该第一搜索词,从而通过该第一搜索词来确定搜索范围,该搜索范围与该图像属性信息相匹配,也指向了在该拍摄地点和拍摄时刻拍摄得到的图像。比如,样本图像为2020年8月20日在广州天河拍摄的图像,则该样本图像的图像属性信息指示拍摄地点为广州天河,拍摄时刻为2020年8月20日,可以将“广州天河”和“2020年8月20日”组合为第一搜索词【广州天河,2020年8月20日】,从而利用该第一搜索词确定搜索范围为“2020年8月20日”在“广州天河”拍摄的图像;当然,在实际应用中,可也以只将“广州天河”作为第一搜索词【广州天河】,从而确定搜索范围为“广州天河”拍摄的图像;或者,也可以只将“2020年8月20日”作为第一搜索词【2020年8月20日】,从而确定搜索范围为“2020年8月20日”拍摄的图像。
另外,在图像属性信息指示样本图像为动态图时,该第一搜索词可以为【动态图】;或,在图像属性信息指示样本图像为非动态图时,该第一搜索词可以为【非动态图】;或,在图像属性信息指示样本图像的旋转折叠状态(例如顺时针旋转45度)时,该第一搜索词可以为【顺时针旋转45度】等。
当然,也可以将上述几种方式进行组合,从而得到第一搜索词,比如该第一搜索词可以为【广州天河,动态图】、【2020年8月20日,动态图】、【2020年8月,动态图,顺时针旋转45度】等。
另一种确定第一搜索词的方式中,当样本图像所属的图像类型为截图类时,可以先确定客户端在发送搜索请求前的预设时间段内,该客户端所在的终端设备所展示的文件的文件类型,其中,该预设时间段通常可以根据实际需要来确定,比如可以是5分钟、3分钟、10分钟等。当该样本图像为截图类的图像时,通常可能与预设范围内终端设备所展示的文件相关,比如为该文件的截图等,因此可以先确定该文件的文件类型,从而用于后述确定搜索范围。
在确定客户端所在的终端设备所展示的文件的文件类型后,可以根据该文件类型确定第一搜索词,该第一搜索词所确定的搜索范围与文件类型相匹配。
通常在该预设时间段内,终端设备所展示的文件可能有一个或多个,当为一个时,可以直接将该文件的文件类型作为第一搜索词;当为多个时,可以有多种方式来确定第一搜索词,比如,先确定终端设备在预设时间段内最后展示的文件的文件类型,并根据该文件类型确定第一搜索词,比如将最后展示的文件的文件类型作为该第一搜索词,从而通过该第一搜索词将搜索范围确定为该文件类型;或者,也可以将最后展示的两个(或三个、四个等)文件的文件类型来确定第一搜索词,从而通过该第一搜索词将搜索范围确定为最后展示的这两个(或三个、四个等)文件的文件类型;或者,还可以先确定终端设备在预设时间段内展示的各个文件的文件类型,并根据各文件类型确定第一搜索词,比如将这些文件类型组合为第一搜索词,从而通过该第一搜索词将搜索范围确定为这些文件的文件类型。
在实际应用中,终端设备所展示的文件的文件类型可以包括文档、图表、图片、视频等,其中文档可以包括word文档、脚本文件、日志文件、txt文件、备忘录等,图表可以为excel表格等,图片可以为照片等。
比如,终端设备在预设时间段内最后展示的文件为word文档,则文件类型为文档,可以将【文档】作为该第一搜索词,从而通过该第一搜索词【文档】将搜索范围确定为文档类型;
或者,比如终端设备在预设时间段内最后展示的两个文件为word文档和excel表格,则文件类型为文档和图表,从而将【文档,图表】作为该第一搜索词,从而将搜索范围确定为文档类型和图表类型。
或者,比如终端设备在预设时间段内所展示的各个文件分比为excel表格、视频和照片,则文件类型为图表、视频和图片,从而将【图表、视频,图片】作为该第一搜索词,通过该第一搜索词将搜索范围确定为图表类型、视频类型和图片类型。
步骤S14:根据样本图像的图像内容确定第二搜索词。
需要说明的是,上述的第一搜索词能够反映样本图像的图像类型,从而基于该第一搜索词能够确定搜索范围,而该第二搜索词能够反映该样本图像的图像内容,这样通过该第二搜索词在第一搜索词所确定的搜索范围内进行搜索,能够提高搜索的准确性。
在根据样本图像的图像内容确定第二搜索词时,通常可以先对样本图像的图像内容进行识别,并通过对样本图像的图像内容的识别,确定该图像内容中是否包括目标对象,该目标对象可以是文字、物品(例如车子、书本、房子)、动物(例如猫、狗、大象)、人物等,该目标对象通常能够反映出该样本图像图像内容的主题信息,比如目标对象为人物时,通常说明该样本图像的图像内容为以人物为主题的图像;或者,比如目标对象为某种动物时,通常说明该样本图像的图像内容为以动物为主题的图像。
对样本图像的图像内容进行识别时,可以采用图像识别算法,对样本图像的图像内容进行识别,比如可以通过聚类算法对图像中的像素进行聚类,从而对样本图像的图像内容进行识别;也可以采用图像识别模型对样本图像的图像内容进行识别;也可以采用其他方式对样本图像的图像内容进行识别。
对样本图像的图像内容进行识别后,若图像内容中包括目标对象,根据目标对象生成第二搜索词。比如,当样本图像的图像内容中包括一个目标对象时,可以根据该目标对象的名称生成第二搜索词,比如将该目标对象的名称直接作为第二搜索词,比如该目标对象为狗,则可以将【狗】作为该第二搜索词。
或者,当样本图像的图像内容中包括多个目标对象时,考虑到目标对象在样本图像中的面积占比和坐标位置,能够反映出该目标对象在该样本图像中的重要性,比如面积占比越大、坐标位置越靠近样本图像中间的位置,说明该目标对象在该样本图像中的重要性越大。因此,可以样本图像的图像内容中各个目标对象的名称,以及各个目标对象分别在样本图像中的面积占比和/或坐标位置,生成第二搜索词。
在方式一中,可以先确定各个目标对象分别在样本图像中的面积占比,然后将这些目标对象根据面积占比的大小进行排序,选取面积占比最大的一个或几个目标对象,并根据所选取的目标对象的名称生成第二搜索词,比如,选取面积占比最大的一个目标对象,并根据该目标对象的名称生成第二搜索词;或,选取面积占比最大的两个目标对象,并根据这两个目标对象的名称生成第二搜索词。或者,也可以先确定各个目标对象分别在样本图像中的面积占比,然后将这些目标对象根据面积占比的大小进行排序,依照该顺序将目标对象的名称进行排列,从而生成第二搜索词。
在方式二中,在样本图像的图像内容中包括多个目标对象的情况下,也可以先确定各个目标对象分别在样本图像中的坐标位置,然后将这些目标对象根据坐标位置与样本图像中间位置的距离进行排序,选取距离最小的一个或几个目标对象,并根据所选取的目标对象的名称生成第二搜索词,比如选取距离最小的一个目标对象,将该目标对象的名称作为第二搜索词;或者,选取距离最小的两个目标对象,并根据这两个目标对象的名称生成第二搜索词。或者,在样本图像的图像内容中包括多个目标对象的情况下,也可以先确定各个目标对象分别在样本图像中的坐标位置,然后将这些目标对象根据坐标位置与样本图像中间位置的距离进行排序,依照该顺序将目标对象的名称进行排列,从而生成第二搜索词。
或者,在样本图像的图像内容中包括多个目标对象的情况下,也可以结合目标对象在样本图像中的面积占比和坐标位置,生成第二搜索词,比如优先考虑各个目标对象分别在样本图像中的面积占比,如果各个目标对象之间的面积占比均相差较大(比如大于预设阈值),则根据上述的方式一生成第二搜索词;如果某些目标对象之间的面积占比之差小于预设阈值,则将这些目标对象采用方式二,而其他目标对象采取上述的方式一,从而将两种方式结合,生成第二搜索词。
另外,在确定某个目标对象在样本图像中的面积占比时,可以先确定该目标对象边缘位置的坐标,从而计算得到该目标对象的面积,进而计算出在样本图像中的面积占比;对于目标对象在样本图像中的坐标位置,可以将该目标对象的中心点的位置作为该坐标位置。
当然,对样本图像的图像内容进行识别后,若图像内容中不包括目标对象,则进一步确定样本图像的图像内容的场景类别,然后根据该场景类别生成第二搜索词,该场景类别表征样本图像的图像内容所属的分类,这些分类包括:大海、沙滩、黄昏、港口、河流、草原、公园、森林、花园、院子等自然风光。比如,在图像内容中不包括目标对象的情况下,也可以通过对样本图像的图像内容进行识别,可以选取识别结果中的图像内容所属的若干个(比如5个、6个等)分类,根据这些分类的标签确定样本图像图像内容的场景类别,进而组合生成第二搜索词。
步骤S15:利用第二搜索词,在第一搜索词所确定的搜索范围内进行搜索。
在确定第一搜索词和第二搜索词之后,可以通过该第一搜索词确定搜索范围,进而利用该第二搜索词在该搜索范围内进行搜索。
需要说明的是,在上述的步骤S11至步骤S15中,并不需要限定具体的执行顺序,比如可以按照步骤S11至步骤S15的顺序;也可以先执行步骤S11和步骤S14,然后执行步骤S12和步骤S13,然后执行步骤S15;也可以在执行步骤S11之后,在执行步骤S14的过程中,同时执行步骤S12和步骤S13,然后在执行步骤S15;当然,在必要时还可以采用其他的顺序执行,这里对此并不限定。
采用本申请实施例所提供的搜索方法,接收客户端所发送的搜索请求后,基于搜索请求中的样本图像所属的图像类型,确定第一搜索词,该第一搜索词用于确定搜索范围,该图像类型包括截图类或非截图类,并根据该样本图像的图像内容确定第二搜索词,然后利用第二搜索词,在第一搜索词所确定的搜索范围内进行搜索。由于第一搜索词基于样本图像所属的图像类型来确定,进而能够通过该第一搜索词来确定搜索范围,并且第二搜索词根据样本图像的图像内容来确定,因此能够利用该第二搜索词在第一搜索词所确定的搜索范围内进行搜索,并且该搜索结合了样本图像的图像类型和图像内容,还能够提高搜索结果的准确性。
需要进一步说明的是,在上述的步骤S13中,当终端设备在客户端发送搜索请求前的预设时间段内展示多个文件时,可以先确定终端设备在该预设时间段内展示的各个文件的文件类型,并根据各文件类型确定第一搜索词,比如将这些文件类型组合为第一搜索词,从而通过该第一搜索词将搜索范围确定为这些文件的文件类型。在根据各文件类型确定第一搜索词时,可以先将这些文件类型进行排序,比如,将这些文件类型根据对应文件在终端设备上展示时间的先后顺序进行排序,可以将后展示的文件的文件类型靠前排列,从而将完成该排序之后文件类型组合为第一搜索词;当然,将这些文件类型根据文件类型重要性排序规则进行排序,比如该文件类型重要性排序规则中规定了各种文件类型的重要性顺序,从而依照该重要性顺序进行排序。
在将这些文件类型先进行排序,然后将完成该排序之后文件类型组合为第一搜索词后,可以通过如下方式来确定搜索范围:利用第一搜索词中的各文件类型分别确定相应的搜索库,并且在利用第二搜索词进行搜索的过程中,还可以利用第二搜索词,并根据各个文件类型的排序,依次在各个搜索库中进行搜索。
比如,该终端设备在客户端发送搜索请求前的预设时间段内展示两个文件,分别为先展示图片,后展示word文档,则两个文档类型为图片和文档,在排序过程中,可以将后展示的文件的文件类型靠前排列,从而得到第一搜索词【文档、图片】。可以根据该第一搜索词【文档、图片】,确定搜索范围为文档和图片,并且利用第二搜索词在该搜索范围内进行搜索时,可以结合该排序,比如先搜索文档库,然后在搜索图片库,并且在将搜索结果进行展示时,也可以根据该排序进行展示,即,将文档库中的搜索结果靠前展示,将图片库中的搜索结果靠后展示。
服务端在确定客户端在发送搜索请求前的预设时间段内,该客户端所在的终端设备所展示的文件的文件类型时,可以通过客户端来实现。比如可以在客户端中设置埋点,从而对终端设备所展示的文件的文件类型进行监控,并且在发送搜索请求时,将之前预设时间段内终端设备所展示的文件的文件类型,携带于该搜索请求中,发送至服务端。这样服务端在接收到该搜索请求之后,还可以解析出该文件类型。
当然,基于与本申请上述的搜索方法相同的发明构思,本申请实施例还可以提供一种搜索方法,该搜索方法可以应用于客户端,包括如下步骤:
向服务端发送搜索请求,该搜索请求中包括样本图像,使得服务端在接收到该搜索请求后,能够确定搜索请求中的样本图像的图像类型,该图像类型包括截图类或非截图类,并基于样本图像所属的图像类型,确定第一搜索词,该第一搜索词用于确定搜索范围,并根据样本图像的图像内容确定第二搜索词,从而利用第二搜索词,在第一搜索词所确定的搜索范围内进行搜索。
当然,服务端在完成搜索之后,还可以向客户端反馈搜索结果,从而使客户端接收该搜索结果,并进行展示。
基于与本申请所提供的搜索方法相同的发明构思,本申请实施例提供了一种搜索装置,另外,对于该搜索装置中如有不清楚之处,可以结合本申请的搜索方法进行理解。如图2所示为该搜索装置20的具体结构示意图,该搜索装置20包括:接收单元201、第一搜索词确定单元202、第二搜索词确定单元203以及搜索单元204,其中:
接收单元201,接收客户端所发送的搜索请求,所述搜索请求中包括样本图像;
第一搜索词确定单元202,基于所述样本图像所属的图像类型,确定第一搜索词,所述图像类型包括截图类或非截图类,所述第一搜索词用于确定搜索范围;
第二搜索词确定单元203,根据所述样本图像的图像内容确定第二搜索词;
搜索单元204,利用所述第二搜索词,在所述第一搜索词所确定的搜索范围内进行搜索。
由于该搜索装置20采用与本申请实施例所提供的搜索方法相同的发明构思,因此也能够解决现有技术中的问题,这里对此不再赘述。
在实际应用中,第一搜索词确定单元202包括第一搜索词第一确定子单元和第一搜索词第二确定子单元,其中:
第一搜索词第一确定子单元,当所述样本图像所属的图像类型为截图类时,确定客户端在发送所述搜索请求前的预设时间段内,所述客户端所在的终端设备所展示的文件的文件类型,并根据所述文件类型确定所述第一搜索词,其中,所述第一搜索词所确定的搜索范围与所述文件类型相匹配;或,
第一搜索词第二确定子单元,当所述样本图像所属的图像类型为非截图类时,根据所述样本图像的图像属性信息生成所述第一搜索词,其中,所述第一搜索词所确定的搜索范围与所述图像属性信息相匹配。所述样本图像的图像属性信息用于指示如下信息中的任意一种或多种:所述样本图像的生成地点、所述样本图像的生成时刻、所述样本图像是否为动态图、所述样本图像的旋转折叠状态。
所述终端设备在所述预设时间段内展示多个文件;则,第一搜索词第一确定子单元,确定所述终端设备在所述预设时间段内最后展示的文件的文件类型,并根据所述文件类型确定所述第一搜索词;或,确定所述终端设备在所述预设时间段内展示的各个文件的文件类型,并根据各所述文件类型确定所述第一搜索词。
其中,根据各所述文件类型确定所述第一搜索词,可以具体包括:将各所述文件类型,根据所对应文件在所述终端设备上展示时间的先后顺序进行排列,并根据排列结果生成所述第一搜索词。
利用所述第一搜索词中的各所述文件类型分别确定相应的搜索库;搜索单元204,利用所述第二搜索词,根据各文件类型的排序,依次在各个搜索库中进行搜索。
第二搜索词确定单元203,通过对所述样本图像的图像内容进行识别,确定所述图像内容中是否包括目标对象;若是,则根据所述目标对象生成所述第二搜索词;或,若否,则确定所述样本图像的图像内容的场景类别,并根据所述场景类别生成所述第二搜索词,其中,所述场景类别表征所述样本图像的图像内容所属的分类。
所述样本图像的图像内容中包括多个目标对象;则,根据所述目标对象生成所述第二搜索词,可以具体包括:根据各个目标对象的名称以及各个目标对象分别在所述样本图像中的面积占比和/或坐标位置,生成所述第二搜索词。
本发明实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有指令,该指令在计算机上运行时,使得计算机执行本发明实施例所提供的搜索方法,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (10)

1.一种搜索方法,其特征在于,包括:
接收客户端所发送的搜索请求,所述搜索请求中包括样本图像;
基于所述样本图像所属的图像类型,确定第一搜索词,所述图像类型包括截图类或非截图类,所述第一搜索词用于确定搜索范围;
根据所述样本图像的图像内容确定第二搜索词;
利用所述第二搜索词,在所述第一搜索词所确定的搜索范围内进行搜索;
其中,基于所述样本图像所属的图像类型,确定第一搜索词,具体包括:
当所述样本图像所属的图像类型为截图类时,确定客户端在发送所述搜索请求前的预设时间段内,所述客户端所在的终端设备所展示的文件的文件类型,并根据所述文件类型确定所述第一搜索词,其中,所述第一搜索词所确定的搜索范围与所述文件类型相匹配。
2.如权利要求1所述的方法,其特征在于,基于所述样本图像所属的图像类型,确定第一搜索词,具体包括:
当所述样本图像所属的图像类型为非截图类时,根据所述样本图像的图像属性信息生成所述第一搜索词,其中,所述第一搜索词所确定的搜索范围与所述图像属性信息相匹配。
3.如权利要求2所述的方法,其特征在于,所述样本图像的图像属性信息用于指示如下信息中的任意一种或多种:所述样本图像的生成地点、所述样本图像的生成时刻、所述样本图像是否为动态图、所述样本图像的旋转折叠状态。
4.如权利要求1所述的方法,其特征在于,所述终端设备在所述预设时间段内展示多个文件;则,
确定客户端在发送所述搜索请求前的预设时间段内,所述客户端所在的终端设备所展示的文件的文件类型,并根据所述文件类型确定所述第一搜索词,具体包括:
确定所述终端设备在所述预设时间段内最后展示的文件的文件类型,并根据所述文件类型确定所述第一搜索词;或,确定所述终端设备在所述预设时间段内展示的各个文件的文件类型,并根据各所述文件类型确定所述第一搜索词。
5.如权利要求4所述的方法,其特征在于,根据各所述文件类型确定所述第一搜索词,具体包括:
将各所述文件类型,根据所对应文件在所述终端设备上展示时间的先后顺序进行排列,并根据排列结果生成所述第一搜索词。
6.如权利要求5所述的方法,其特征在于,所述方法还包括:
利用所述第一搜索词中的各所述文件类型分别确定相应的搜索库;则,
利用所述第二搜索词,在所述第一搜索词所确定的搜索范围内进行搜索,具体包括:
利用所述第二搜索词,根据各文件类型的排序,依次在各个搜索库中进行搜索。
7.如权利要求1所述的方法,其特征在于,根据所述样本图像的图像内容确定第二搜索词,具体包括:
通过对所述样本图像的图像内容进行识别,确定所述图像内容中是否包括目标对象;
若是,则根据所述目标对象生成所述第二搜索词;或,
若否,则确定所述样本图像的图像内容的场景类别,并根据所述场景类别生成所述第二搜索词,其中,所述场景类别表征所述样本图像的图像内容所属的分类。
8.如权利要求7所述的方法,其特征在于,所述样本图像的图像内容中包括多个目标对象;则,
根据所述目标对象生成所述第二搜索词,具体包括:
根据各个目标对象的名称以及各个目标对象分别在所述样本图像中的面积占比和/或坐标位置,生成所述第二搜索词。
9.一种搜索装置,其特征在于,包括:接收单元、第一搜索词确定单元、第二搜索词确定单元以及搜索单元,其中:
接收单元,接收客户端所发送的搜索请求,所述搜索请求中包括样本图像;
第一搜索词确定单元,基于所述样本图像所属的图像类型,确定第一搜索词,所述图像类型包括截图类或非截图类,所述第一搜索词用于确定搜索范围;
第二搜索词确定单元,根据所述样本图像的图像内容确定第二搜索词;
搜索单元,利用所述第二搜索词,在所述第一搜索词所确定的搜索范围内进行搜索;
其中,第一搜索词确定单元包括第一搜索词第一确定子单元;
所述第一搜索词第一确定子单元,用于当所述样本图像所属的图像类型为截图类时,确定客户端在发送所述搜索请求前的预设时间段内,所述客户端所在的终端设备所展示的文件的文件类型,并根据所述文件类型确定所述第一搜索词,其中,所述第一搜索词所确定的搜索范围与所述文件类型相匹配。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括指令,所述指令在计算机上运行时,使得计算机执行如权利要求1至8中任一项所述的搜索方法。
CN202110428735.4A 2021-04-21 2021-04-21 一种搜索方法、装置及存储介质 Active CN114969479B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110428735.4A CN114969479B (zh) 2021-04-21 2021-04-21 一种搜索方法、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110428735.4A CN114969479B (zh) 2021-04-21 2021-04-21 一种搜索方法、装置及存储介质

Publications (2)

Publication Number Publication Date
CN114969479A CN114969479A (zh) 2022-08-30
CN114969479B true CN114969479B (zh) 2023-08-15

Family

ID=82974050

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110428735.4A Active CN114969479B (zh) 2021-04-21 2021-04-21 一种搜索方法、装置及存储介质

Country Status (1)

Country Link
CN (1) CN114969479B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625937A (zh) * 2009-08-07 2012-08-01 谷歌公司 用于对视觉查询作出响应的体系结构
CN104111989A (zh) * 2014-07-02 2014-10-22 百度在线网络技术(北京)有限公司 搜索结果的提供方法和装置
CN106202316A (zh) * 2016-07-01 2016-12-07 传线网络科技(上海)有限公司 基于视频的商品信息获取方法及装置
CN107577790A (zh) * 2017-09-18 2018-01-12 北京金山安全软件有限公司 一种图像搜索方法及装置
JP2018128955A (ja) * 2017-02-10 2018-08-16 サイジニア株式会社 スクリーンショット画像解析装置、スクリーンショット画像解析方法、およびプログラム
CN110020185A (zh) * 2017-12-29 2019-07-16 国民技术股份有限公司 智能搜索方法、终端及服务器

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625937A (zh) * 2009-08-07 2012-08-01 谷歌公司 用于对视觉查询作出响应的体系结构
CN104111989A (zh) * 2014-07-02 2014-10-22 百度在线网络技术(北京)有限公司 搜索结果的提供方法和装置
CN106202316A (zh) * 2016-07-01 2016-12-07 传线网络科技(上海)有限公司 基于视频的商品信息获取方法及装置
JP2018128955A (ja) * 2017-02-10 2018-08-16 サイジニア株式会社 スクリーンショット画像解析装置、スクリーンショット画像解析方法、およびプログラム
CN107577790A (zh) * 2017-09-18 2018-01-12 北京金山安全软件有限公司 一种图像搜索方法及装置
CN110020185A (zh) * 2017-12-29 2019-07-16 国民技术股份有限公司 智能搜索方法、终端及服务器

Also Published As

Publication number Publication date
CN114969479A (zh) 2022-08-30

Similar Documents

Publication Publication Date Title
US20090161963A1 (en) Method. apparatus and computer program product for utilizing real-world affordances of objects in audio-visual media data to determine interactions with the annotations to the objects
US8977639B2 (en) Actionable search results for visual queries
US9405772B2 (en) Actionable search results for street view visual queries
CN106462728B (zh) 用于基于图像特征的识别的系统和方法
US9020529B2 (en) Computer based location identification using images
US9959644B2 (en) Computerized method and device for annotating at least one feature of an image of a view
US8874596B2 (en) Image processing system and method
US20060190812A1 (en) Imaging systems including hyperlink associations
US20100309226A1 (en) Method and system for image-based information retrieval
US20120113121A1 (en) Aligning and summarizing different photo streams
CN104331509A (zh) 照片管理方法及装置
CN101930444A (zh) 影像搜寻系统及方法
CN102214222B (zh) 通过手机摄像获取景物资讯的预分类及交互系统和方法
US10276213B2 (en) Automatic and intelligent video sorting
CN110083762A (zh) 房源搜索方法、装置、设备及计算机可读存储介质
US11068556B2 (en) Delivering information about an image corresponding to an object at a particular location
CN114969479B (zh) 一种搜索方法、装置及存储介质
Panda et al. Heritage app: annotating images on mobile phones
CN113366420B (zh) 图像处理方法、计算机可读存储介质和计算机设备
Wang et al. Informative image selection for crowdsourcing-based mobile location recognition
KR20210094396A (ko) 이미지 기반 검색 어플리케이션 및 그를 위한 검색 서버
EP3152701A1 (en) Method of and system for determining and selecting media representing event diversity
CN113553144B (zh) 数据分发方法、装置及系统
CN110879849B (zh) 一种基于图像转文字的相似度比较方法及装置
US20230044871A1 (en) Search Results With Result-Relevant Highlighting

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant