CN115017365A - 物品查找方法、装置、服务器、终端及存储介质 - Google Patents

物品查找方法、装置、服务器、终端及存储介质 Download PDF

Info

Publication number
CN115017365A
CN115017365A CN202210564790.0A CN202210564790A CN115017365A CN 115017365 A CN115017365 A CN 115017365A CN 202210564790 A CN202210564790 A CN 202210564790A CN 115017365 A CN115017365 A CN 115017365A
Authority
CN
China
Prior art keywords
article
video
item
target
target object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210564790.0A
Other languages
English (en)
Inventor
张含波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing SoundAI Technology Co Ltd
Original Assignee
Beijing SoundAI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing SoundAI Technology Co Ltd filed Critical Beijing SoundAI Technology Co Ltd
Priority to CN202210564790.0A priority Critical patent/CN115017365A/zh
Publication of CN115017365A publication Critical patent/CN115017365A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/74Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/7867Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/774Generating sets of training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)

Abstract

本申请提供了一种物品查找方法、装置、服务器、终端及存储介质,属于互联网技术领域。方法包括:接收终端发送的物品查找请求,物品查找请求携带目标对象特征,目标对象特征为丢失物品的目标对象的特征;响应于物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,第一视频片段包含目标对象,识别信息包括目标对象特征和目标对象特征关联的物品标签,物品标签表示在第一视频片段中目标对象携带的物品;向终端发送物品查找结果,物品查找结果包括采集第二视频片段的摄像头所处的位置信息。上述方案实现了对丢失物品的位置的快速确定,提高了物品查找的便捷性。

Description

物品查找方法、装置、服务器、终端及存储介质
技术领域
本申请涉及互联网技术领域,特别涉及一种物品查找方法、装置、服务器、终端及存储介质。
背景技术
目前,随着生活水平的日益提高,人们在闲暇时间可以去商场、公园等休闲娱乐场所游玩。在游玩过程中,人们通常会携带一些物品,例如手机、帽子或者背包等。然而在游玩过程中可能会丢失物品,因此如何查找所丢失的物品成为亟需解决的问题。
发明内容
本申请实施例提供了一种物品查找方法、装置、服务器、终端及存储介质,能够提高物品查找的便捷性。所述技术方案如下:
根据本申请实施例的第一方面,提供了一种物品查找方法,所述方法包括:
接收终端发送的物品查找请求,所述物品查找请求携带目标对象特征,所述目标对象特征为丢失物品的目标对象的特征;
响应于所述物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,所述第一视频片段包含所述目标对象,所述识别信息包括所述目标对象特征以及所述目标对象特征关联的物品标签,所述物品标签表示在所述第一视频片段中所述目标对象携带的物品;
向所述终端发送物品查找结果,所述物品查找结果包括采集所述第二视频片段的摄像头对应的位置信息。
在一种可能的实现方式中,所述基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,包括:
对于采集时间相邻且由处于不同位置的摄像头采集的每两个第一视频片段,若存在物品标签包含于所述两个第一视频片段中的第一目标视频片段的识别信息,且不包含于所述两个第一视频片段中的第二目标视频片段的识别信息,则将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段;
其中,所述第一目标视频片段的采集时间早于所述第二目标视频片段的采集时间。
在一种可能的实现方式中,所述物品查找请求还携带目标物品标签,所述目标物品标签表示所丢失的物品;所述若存在物品标签包含于所述两个第一视频片段中的第一目标视频片段的识别信息,且不包含于所述两个第一视频片段中的第二目标视频片段的识别信息,则将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段,包括:
若所述目标物品标签包含于所述第一目标视频片段的识别信息,且不包含于所述第二目标视频片段的识别信息,则将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段。
在一种可能的实现方式中,所述将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段之后,所述向所述终端发送物品查找结果之前,所述方法还包括:
在基于多个所述第一视频片段确定多个所述第二视频片段的情况下,将除采集时间最晚的所述第二视频片段之外的其他所述第二视频片段过滤。
在一种可能的实现方式中,所述将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段,包括:
对于所述第一目标视频片段中相邻的每两个视频帧,若所述两个视频帧中的第一视频帧的识别信息包含所述物品标签,且所述两个视频帧中的第二视频帧的识别信息不包含所述物品标签,则确定所述第二视频帧为物品丢失的目标视频帧,将所述第一目标视频片段确定为所述第二视频片段,所述第一视频帧的采集时间早于所述第二视频帧的采集时间;
若所述第一目标视频片段中最后一个视频帧的识别信息包含所述物品标签,则将所述第二目标视频片段确定为所述第二视频片段。
在一种可能的实现方式中,所述物品查找请求还携带时间段;所述基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,包括:
基于至少两个处于不同位置的摄像头所采集的所述第一视频片段的识别信息,确定物品丢失且采集时间位于所述时间段内的第二视频片段。
在一种可能的实现方式中,所述基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段之前,所述方法还包括:
从至少两个处于不同位置的摄像头所采集的视频中,提取包含所述目标对象的第一视频片段;
确定所述第一视频片段的识别信息。
在一种可能的实现方式中,所述确定所述第一视频片段的识别信息,包括:
对于所述第一视频片段中的每个视频帧,对所述视频帧进行对象识别,得到对象区域和所述对象区域包含的对象特征;
对所述视频帧进行物品识别,得到物品区域和所述物品区域包含的物品对应的物品标签;
在所述物品区域位于所述对象区域的预设范围内的情况下,将所述对象特征和所述物品标签建立关联关系。
在一种可能的实现方式中,所述对所述视频帧进行物品识别,得到物品区域和所述物品区域包含的物品对应的物品标签,包括:
调用物品识别模型,对所述视频帧进行物品识别,得到所述物品区域和所述物品区域包含的物品对应的物品标签。
在一种可能的实现方式中,所述确定所述第一视频片段的识别信息,包括:
从所述第一视频片段中,每隔预设帧数抽取一个视频帧;
对抽取到的所述视频帧进行识别,得到所述识别信息。
在一种可能的实现方式中,所述方法还包括:
从至少两个处于不同位置的摄像头所采集的视频中,提取包含同一对象特征的视频片段;
确定所述视频片段的识别信息;
对于采集时间相邻且由处于不同位置的摄像头采集的每两个视频片段,若存在物品标签包含于所述两个视频片段中的第三视频片段的识别信息,且不包含于所述两个视频片段中的第四视频片段的识别信息,则在所述第三视频片段和所述第四视频片段中的至少一个视频片段的识别信息中,添加所述物品标签对应的物品消失标签,所述第三视频片段的采集时间早于所述第四视频片段的采集时间;
所述基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,包括:
从至少两个处于不同位置的摄像头所采集的第一视频片段中,查找识别信息包括所述物品消失标签的第二目标视频片段,并确定该第二目标视频片段为所述第二视频片段。
根据本申请实施例的第二方面,提供了一种物品查找方法,所述方法包括:
显示物品查找界面;
基于所述物品查找界面,采集目标对象对应的目标对象特征;
向服务器发送物品查找请求,所述物品查找请求携带所述目标对象特征,所述服务器用于响应于所述物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,返回物品查找结果,所述物品查找结果包括采集所述第二视频片段的摄像头对应的位置信息;
接收所述物品查找结果,并显示所述物品查找结果;
其中,所述第一视频片段包含所述目标对象,所述识别信息包括所述目标对象特征以及所述目标对象特征关联的物品标签,所述物品标签表示在所述第一视频片段中所述目标对象携带的物品。
在一种可能的实现方式中,所述物品查找请求还携带目标物品标签,所述目标物品标签表示所丢失的物品,所述方法还包括:
获取在所述物品查找界面中输入的所述目标物品标签。
在一种可能的实现方式中,所述物品查找请求还携带时间段,所述方法还包括:
获取在所述物品查找界面中输入的所述时间段。
根据本申请实施例的第三方面,提供了一种物品查找装置,所述装置包括:
请求接收模块,用于接收终端发送的物品查找请求,所述物品查找请求携带目标对象特征,所述目标对象特征为丢失物品的目标对象的特征;
视频片段确定模块,用于响应于所述物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,所述第一视频片段包含所述目标对象,所述识别信息包括所述目标对象特征以及所述目标对象特征关联的物品标签,所述物品标签表示在所述第一视频片段中所述目标对象携带的物品;
结果发送模块,用于向所述终端发送物品查找结果,所述物品查找结果包括采集所述第二视频片段的摄像头对应的位置信息。
在一种可能的实现方式中,所述视频片段确定模块,用于:
对于采集时间相邻且由处于不同位置的摄像头采集的每两个第一视频片段,若存在物品标签包含于所述两个第一视频片段中的第一目标视频片段的识别信息,且不包含于所述两个第一视频片段中的第二目标视频片段的识别信息,则将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段;
其中,所述第一目标视频片段的采集时间早于所述第二目标视频片段的采集时间。
在一种可能的实现方式中,所述物品查找请求还携带目标物品标签,所述目标物品标签表示所丢失的物品;所述视频片段确定模块,用于:
若所述第一目标视频片段的识别信息包含所述目标物品标签,且所述第二目标视频片段的识别信息不包含所述目标物品标签,则将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段。
在一种可能的实现方式中,所述装置还包括:
视频片段过滤模块,用于在基于多个所述第一视频片段确定多个所述第二视频片段的情况下,将除采集时间最晚的所述第二视频片段之外的其他所述第二视频片段过滤。
在一种可能的实现方式中,所述视频片段确定模块,用于:
对于所述第一目标视频片段中相邻的每两个视频帧,若所述两个视频帧中的第一视频帧的识别信息包含所述物品标签,且所述两个视频帧中的第二视频帧的识别信息不包含所述物品标签,则确定所述第二视频帧为物品丢失的目标视频帧,将所述第一目标视频片段确定为所述第二视频片段,所述第一视频帧的采集时间早于所述第二视频帧的采集时间;
若所述第一目标视频片段中最后一个视频帧的识别信息包含所述物品标签,则将所述第二目标视频片段确定为所述第二视频片段。
在一种可能的实现方式中,所述物品查找请求还携带时间段;所述视频片段确定模块,用于:
基于至少两个处于不同位置的摄像头所采集的所述第一视频片段的识别信息,确定物品丢失且采集时间位于所述时间段内的第二视频片段。
在一种可能的实现方式中,所述装置还包括:
视频片段提取模块,用于从至少两个处于不同位置的摄像头所采集的视频中,提取包含所述目标对象的第一视频片段;
识别信息确定模块,用于确定所述第一视频片段的识别信息。
在一种可能的实现方式中,所述识别信息确定模块,用于:
对于所述第一视频片段中的每个视频帧,对所述视频帧进行对象识别,得到对象区域和所述对象区域包含的对象特征;
对所述视频帧进行物品识别,得到物品区域和所述物品区域包含的物品对应的物品标签;
在所述物品区域位于所述对象区域的预设范围内的情况下,将所述对象特征和所述物品标签建立关联关系。
在一种可能的实现方式中,所述识别信息确定模块,用于:
调用物品识别模型,对所述视频帧进行物品识别,得到所述物品区域和所述物品区域包含的物品对应的物品标签。
在一种可能的实现方式中,所述识别信息确定模块,用于:
从所述第一视频片段中,每隔预设帧数抽取一个视频帧;
对抽取到的所述视频帧进行识别,得到所述识别信息。
在一种可能的实现方式中,所述装置还包括:
视频片段提取模块,用于从至少两个处于不同位置的摄像头所采集的视频中,提取包含同一对象特征的视频片段;
识别信息确定模块,用于确定所述视频片段的识别信息;
标签添加模块,用于对于采集时间相邻且由处于不同位置的摄像头采集的每两个视频片段,若存在物品标签包含于所述两个视频片段中的第三视频片段的识别信息,且不包含于所述两个视频片段中的第四视频片段的识别信息,则在所述第三视频片段和所述第四视频片段中的至少一个视频片段的识别信息中,添加所述物品标签对应的物品消失标签,所述第三视频片段的采集时间早于所述第四视频片段的采集时间;
所述视频片段确定模块,用于从至少两个处于不同位置的摄像头所采集的第一视频片段中,查找识别信息包括所述物品消失标签的第二目标视频片段,并确定该第二目标视频片段为所述第二视频片段。
根据本申请实施例的第四方面,提供了一种物品查找装置,所述装置包括:
界面显示模块,用于显示物品查找界面;
特征采集模块,用于基于所述物品查找界面,采集目标对象对应的目标对象特征;
请求发送模块,用于向服务器发送物品查找请求,所述物品查找请求携带所述目标对象特征,所述服务器用于响应于所述物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,返回物品查找结果,所述物品查找结果包括采集所述第二视频片段的摄像头所处的位置信息;
结果接收模块,用于接收所述物品查找结果,并显示所述物品查找结果;
其中,所述第一视频片段包含所述目标对象,所述识别信息包括所述目标对象特征以及所述目标对象特征关联的物品标签,所述物品标签表示在所述第一视频片段中所述目标对象携带的物品。
在一种可能的实现方式中,所述物品查找请求还携带目标物品标签,所述目标物品标签表示所丢失的物品,所述装置还包括:
标签获取模块,用于获取在所述物品查找界面中输入的所述目标物品标签。
在一种可能的实现方式中,所述物品查找请求还携带时间段,所述装置还包括:
时间段获取模块,用于获取在所述物品查找界面中输入的所述时间段。
根据本申请实施例的第五方面,提供了一种服务器,所述服务器包括处理器和存储器,所述存储器中存储有至少一条程序代码,所述至少一条程序代码由所述处理器加载并执行,以实现如上述第一方面提供的任一种可能的实现方式中所述的物品查找方法。
根据本申请实施例的第六方面,提供了一种终端,所述终端包括处理器和存储器,所述存储器中存储有至少一条程序代码,所述至少一条程序代码由所述处理器加载并执行,以实现如上述第二方面提供的任一种可能的实现方式中所述的物品查找方法。
根据本申请实施例的第七方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一条程序代码,所述至少一条程序代码由处理器加载并执行,以实现上述第一方面提供的任一种可能的实现方式中所述的物品查找方法,或者,实现上述第二方面提供的任一种可能的实现方式中所述的物品查找方法。
根据本申请实施例的第八方面,提供了一种计算机程序产品,所述计算机程序产品包括计算机程序代码,所述计算机程序代码存储在计算机可读存储介质中,处理器从所述计算机可读存储介质读取所述计算机程序代码,所述处理器执行所述计算机程序代码以实现上述第一方面提供的任一种可能的实现方式中所述的物品查找方法,或者,实现上述第二方面提供的任一种可能的实现方式中所述的物品查找方法。
本申请实施例提供了一种丢失物品后定位物品丢失位置的方案,在查找目标对象所丢失的物品时,对于至少两个处于不同位置的摄像头所采集的、且包含该目标对象的第一视频片段,由于第一视频片段的识别信息能够表示目标对象在第一视频片段中携带了哪些物品,因此基于该第一视频片段的识别信息,能够进一步定位到物品丢失的第二视频片段,从而得到物品查找结果,物品查找结果所包括的位置信息表示的位置很有可能就是物品丢失的位置,从而丢失物品的目标对象能够根据该位置信息找寻物品,实现了对物品丢失的位置的快速确定,提高了物品查找的便捷性。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种实施环境的结构示意图;
图2是本申请实施例提供的一种物品查找方法的流程图;
图3是本申请实施例提供的另一种物品查找方法的流程图;
图4是本申请实施例提供的再一种物品查找方法的流程图;
图5是本申请实施例提供的又一种物品查找方法的流程图;
图6是本申请实施例提供的又一种物品查找方法的流程图;
图7是本申请实施例提供的一种物品查找装置的结构示意图;
图8是本申请实施例提供的另一种物品查找装置的结构示意图;
图9是本申请实施例提供的一种服务器的结构示意图;
图10是本申请实施例提供的一种终端的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
可以理解,本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种概念,但除非特别说明,这些概念不受这些术语限制。这些术语仅用于将一个概念与另一个概念区分。
本申请所使用的术语“至少一个”、“多个”、“每个”、“任一”等,至少一个包括一个、两个或两个以上,多个包括两个或两个以上,每个是指对应的多个中的每一个,任一是指多个中的任意一个。
需要说明的是,本申请所涉及的信息(包括但不限于识别信息、定位信息等)、数据(包括但不限于用于处理的数据、存储的数据、显示的数据等),均为经用户授权或者经过各方充分授权的,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。例如,本申请中涉及到的视频都是在充分授权的情况下获取的。
图1是本申请实施例提供的一种实施环境的结构示意图,参见图1,该实施环境包括终端101、服务器102和至少一个摄像头103。终端101、每个摄像头103分别与服务器102通过无线或者有线网络连接。
可选地,终端101包括但不限于智能手机、平板电脑、笔记本电脑或台式电脑。可选地,服务器102为一台服务器、由多台服务器组成的服务器集群、云服务器、云计算平台和虚拟化中心中的至少一种,本申请实施例对此不加以限定。摄像头103用于采集视频。摄像头103设置在可能丢失物品的场所,例如该场所为商场、公园或车站等场所。
在本申请实施例中,每个摄像头103设置在不同的位置,摄像头103用于采集对应位置的视频,向服务器102发送该视频。服务器102用于管理摄像头103以及摄像头103所采集的视频,相应地,服务器102用于接收摄像头103发送的视频,并存储该视频。可选地,服务器102为摄像头103设置对应的视频文件,该视频文件中存储有该摄像头103所采集的视频。
在本申请实施例中,服务器102对外提供有物品查找服务,终端101通过访问服务器102提供的物品查找服务,实现物品的查找。可选地,终端101是用于管理服务器102的控制终端,由服务器102的管理人员使用,从而管理人员能够通过终端101访问服务器102。或者,终端101是任一对象使用的终端,任一对象能够通过自己的终端101访问服务器102。
可选地,服务器102对外提供有网页,终端101通过访问该网页实现例如物品查找、图像采集或信息显示的功能。示例性地,终端101能够在浏览器或包含webview(网页视图)控件的任一应用程序中访问该网页。或者,终端101上安装由服务器102提供服务的目标应用,终端101能够通过该目标应用实现例如物品查找、图像采集和信息显示的功能。可选地,目标应用为终端101操作系统中的目标应用,或者为第三方提供的目标应用。例如该目标应用为物品查找应用或购物应用。
在本申请实施例中,对象在丢失物品之后,能够通过终端101访问服务器102提供的物品查找服务,由服务器102返回物品查找结果,从而终端101接收该物品查找结果并显示,供丢失物品的对象查看,便于对象根据物品查找结果查找所丢失的物品。
本申请实施例提供的物品查找方法可以应用于丢失物品后查找物品的场景,下面对物品查找方法的应用场景进行介绍。例如,商场的不同位置上设置有摄像头,如电梯门口和五楼餐馆门口均设置有摄像头,摄像头采集对应位置处的视频,向服务器发送该视频,服务器接收视频并存储,携带有物品的用户在商场内活动,若用户丢失了某个物品,则可以前往商场的管理处,管理处的终端连接有摄像头,终端控制摄像头采集用户的人脸特征,向服务器发送携带该人脸特征的物品查找请求,服务器通过本申请实施例提供的物品查找方法,确定物品丢失的位置信息,返回该位置信息,终端显示该位置信息,使得用户能够在该位置信息所表示的位置处查找所丢失的物品,或者回忆物品丢失时的细节,从而提高了物品查找的便捷性。
需要说明的一点是,以上应用场景仅是示例性说明,并不对物品查找场景造成限制,本申请除了应用在以上场景外,还能够应用在其他任一物品查找的场景中。
图2是本申请实施例提供的一种物品查找方法的流程图。本申请实施例以服务器为执行主体为例进行说明,参见图2,该方法包括如下步骤:
201、服务器接收终端发送的物品查找请求,该物品查找请求携带目标对象特征,该目标对象特征为丢失物品的目标对象的特征。
其中,对象对应的对象特征用于描述对象的特性,对象特征用于区分不同的对象。可选地,对象包括人物、动物或者事物,相应地,对象为人物时,对象特征为人脸特征。
终端为丢失物品的目标对象对应的终端。在本申请实施例中,某一对象若丢失物品,则可以触发终端向服务器发送物品查找请求,服务器获取该物品查找请求所携带的目标对象特征,目标对象特征为目标对象对应的特征,该目标对象该目标对象特征能够表示丢失物品的目标对象是哪一个对象。
202、服务器响应于该物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,第一视频片段包含该目标对象,该识别信息包括该目标对象特征和该目标对象特征关联的物品标签,该物品标签表示在第一视频片段中该目标对象携带的物品。
在本申请实施例中,摄像头采集视频,向服务器发送该视频,服务器接收该视频,存储该视频。其中,摄像头设置在场所的任意位置,不同摄像头所处的位置不同。对于任一位置的摄像头,若对象位于摄像头的采集范围内,则摄像头采集到的视频包括该对象,若对象携带物品且该物品也位于摄像头的采集范围内,则该视频还包括该物品。
需要说明的是,摄像头可以每采集到一个视频帧,就向服务器发送这一个视频帧,从而数据收发的实时性较高,或者,摄像头还可以连续采集多个视频帧,一次性向服务器发送这多个视频帧,降低数据收发次数。本申请实施例对此不加以限定。
服务器在接收到物品查找请求之后,获取至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息。其中,视频片段的识别信息包括对象特征以及该对象特征关联的物品标签,识别信息所包括的对象特征为视频片段所包括的对象对应的对象特征。对象特征关联的物品标签为视频片段中的对象所携带的物品对应的物品标签。可选地,物品标签包括物品类别,例如物品标签为手机、背包或杯子等。可选地,物品标签还包括物品颜色,例如黑色、白色或红色等。
其中,第一视频片段包含目标对象,则该识别信息包括该目标对象对应的目标对象特征,该第一视频片段还包含目标对象携带的物品,则该识别信息还包括目标对象特征关联的物品标签,以该物品标签来表示该目标对象特征所属的目标对象所携带的物品。包含目标对象的第一视频片段为丢失物品的目标对象出现过的视频片段,采集第一视频片段的摄像头所处的位置信息能够表示该目标对象曾经在哪些位置出现过,而且由于服务器对第一视频片段识别出了目标对象特征关联的物品标签,从而能够根据该物品标签,进一步确定物品丢失的第二视频片段。
203、服务器向终端发送物品查找结果,该物品查找结果包括采集第二视频片段的摄像头对应的位置信息。
其中,采集第二视频片段的摄像头对应的位置信息表示该摄像头所处的位置。在本申请实施例中,采集第二视频片段的摄像头所处的位置很有可能是物品丢失的位置,通过将采集该第二视频片段的摄像头对应的位置信息作为物品查找结果并返回给终端,使得终端能够显示该物品查找结果,供目标对象查看,从而目标对象能够得知物品丢失的位置,根据该位置找寻物品。
本申请实施例提供了一种丢失物品后定位物品丢失位置的方案,在查找目标对象所丢失的物品时,对于至少两个处于不同位置的摄像头所采集的、且包含该目标对象的第一视频片段,由于第一视频片段的识别信息能够表示目标对象在第一视频片段中携带了哪些物品,因此基于该第一视频片段的识别信息,能够进一步定位到物品丢失的第二视频片段,从而得到物品查找结果,物品查找结果所包括的位置信息表示的位置很有可能就是物品丢失的位置,从而丢失物品的目标对象能够根据该位置信息找寻物品,实现了对物品丢失的位置的快速确定,提高了物品查找的便捷性。
图3是本申请实施例提供的另一种物品查找方法的流程图。本申请实施例以服务器为执行主体为例进行说明,参见图3,该方法包括如下步骤:
301、服务器接收终端发送的物品查找请求,该物品查找请求携带目标对象特征,该目标对象特征为丢失物品的目标对象的特征。
在本申请实施例中,目标对象若丢失物品,则可以触发终端采集目标对象对应的目标对象特征。可选地,终端连接有摄像头。目标对象位于摄像头的采集范围内,终端控制摄像头采集图像,然后对该图像进行对象识别,得到目标对象特征。该图像是经目标对象授权之后采集的。终端在采集到目标对象特征之后,向服务器发送携带该目标对象特征的物品查找请求,服务器接收该物品查找请求,获取该物品查找请求所携带的目标对象特征。
需要说明的是,摄像头采集图像的方式与上述实施环境中的摄像头采集视频的方式同理,在此不再赘述。
302、服务器响应于该物品查找请求,从至少两个处于不同位置的摄像头所采集的视频中,提取包含目标对象的第一视频片段。
不同的摄像头处于场所中的不同位置,目标对象在进入场所之后,会被其所在位置处设置的摄像头采集到,则摄像头所采集的视频可能包含该目标对象,可以从所采集的视频中提取包含目标对象的第一视频片段。
可选地,对于每个摄像头所采集的视频,对该视频中的每个视频帧进行对象识别,得到对象识别结果,该对象识别结果表示识别到目标对象或未识别到目标对象。其中,识别到目标对象是指从视频帧中识别到目标对象特征。由于物品查找请求携带目标对象特征,而该目标对象特征为目标对象的特征,若从视频帧中识别到目标对象特征,则对象识别结果为识别到目标对象,表示该视频帧包含该目标对象。
其中,对视频帧进行对象识别是指从视频帧中识别出对象所在的区域,也即对象区域,将该对象区域包含的图像确定为对象特征,或者从该对象区域包含的图像中提取得到对象特征。例如以对象为人为例,从对象区域包含的图像中提取人脸区域,将该人脸区域包含的图像确定为对象特征。
在对摄像头所采集的视频进行对象识别之后,对于每个摄像头,将识别到目标对象的、采集时间相邻的视频帧进行拼接,得到该摄像头所采集的包含该目标对象的第一视频片段。以此类推,获取每个摄像头对应的第一视频片段。其中,采集时间为摄像头采集该视频帧的时间。可选地,摄像头在向服务器发送视频帧的同时向服务器发送视频帧的采集时间,服务器接收该采集时间,存储该采集时间,便于后续使用。
在目标对象在某个场所停留或移动的过程中,可能会有多个摄像头拍摄到该目标对象,因此从多个摄像头采集到的视频中,可以提取到多个第一视频片段,每个第一视频片段具有对应的时间段,则按照时间段的排列顺序,将该多个第一视频片段进行排列,排列后得到的第一视频片段的序列能够体现出目标对象的移动轨迹。
例如,目标对象在场所中活动时,可能先进入摄像头1的采集范围,被摄像头1采集到,然后进入摄像头2的采集范围,被摄像头3采集到,然后又进入摄像头1的采集范围,再次被摄像头1采集到,那么摄像头1所采集的视频中目标对象并不是连续出现的,那么摄像头1拍摄的视频中包括两个第一视频片段,但是这两个第一视频片段的采集时间并不连续,而摄像头2拍摄的视频中的第一视频片段,位于上述两个第一视频片段之间。
再如,目标对象先进入摄像头1的采集范围,被摄像头1采集到,然后目标对象活动到任意摄像头均采集不到的范围内,然后目标对象再次进入摄像头1的采集范围,在这种情况中,摄像头1所采集的视频中目标对象并不是连续出现的,那么摄像头1拍摄的视频中包括两个第一视频片段,但由于没有其他摄像头在此期间采集到目标对象,则这两个第一视频片段仍然可以看做是相邻的第一视频片段,以便于后续处理。
需要说明的是,服务器对视频帧的对象识别方式与上述步骤301中终端对图像的对象识别方式同理,从而针对同一对象,在触发物品查找请求时终端所采集的目标对象特征,与服务器所确定的识别信息中的目标对象特征较为接近,便于服务器后续提取包含目标对象的第一视频片段。
303、服务器确定第一视频片段的识别信息,该识别信息包括目标对象特征以及目标对象特征关联的物品标签,该物品标签表示在第一视频片段中目标对象携带的物品。
在提取到包含目标对象的第一视频片段之后,确定第一视频片段的识别信息。在一种可能的实现方式中,确定第一视频片段的识别信息的实现方式包括:对于第一视频片段中的每个视频帧,对视频帧进行对象识别,得到对象区域和对象区域包含的对象特征;对视频帧进行物品识别,得到物品区域和物品区域包含的物品对应的物品标签;在物品区域位于对象区域的预设范围内的情况下,将对象特征和物品标签建立关联关系。
其中,对象区域指的是对象在视频帧中所在的区域。对象特征为对象区域所包含的图像或者从该图像中提取到的特征。可选地,对象区域以对象在视频帧中的坐标区域表示。例如,在对象为人的情况下,对象区域可以为人体区域,则对象特征为人体特征,对象区域还可以为人脸区域,则对象特征为人脸特征。同理,物品区域指的是物品在视频帧中所在的区域,可选地,物品区域以物品在视频帧的坐标区域表示。其中,预设范围的大小可以根据需要设置,本申请实施例对此不加以限定。
由于一个视频帧中可能会有多个对象,而每个对象都可能携带物品,因此可以将对象特征与物品标签建立关联关系,以区分不同对象所携带的物品。相应地,服务器能够根据物品区域是否在对象区域的预设范围内,确定是否将物品标签和对象特征进行关联。若物品区域位于对象区域的预设范围内,表示物品区域包含的物品距离对象区域包含的对象较近,则该物品很有可能是对象所携带的物品,则通过将该对象特征和该物品标签建立关联关系,来表示该物品标签所表示的物品是对象特征所属的对象携带的;若物品区域未位于对象区域的预设范围内,表示物品区域包含的物品距离对象区域包含的对象较远,则该物品可能并不是对象所携带的物品,则无需将该对象特征和该物品标签建立关联关系,根据这种方式所建立的关联关系较为准确。
其中,视频帧的识别信息包括从该视频帧中识别到的对象特征和该对象特征所关联的物品标签,服务器将第一视频片段中的每个视频帧的识别信息,组成该第一视频片段的识别信息。
在本申请实施例中,由于第一视频片段是提取到的包含目标对象特征的视频片段,则识别到的对象特征包含该目标对象特征,相应地,识别到的物品标签包含该目标对象特征关联的物品标签。上述可选实现方式所确定的识别信息不仅包括目标对象特征和目标对象特征关联的物品标签,还包括识别到的其他对象特征以及该对象特征关联的物品标签,从而识别信息更加完整。
需要说明的一点是,服务器可以先对视频帧进行对象识别再对视频帧进行物品识别,也可以先对视频帧进行物品识别再对视频帧进行对象识别,还可以同时对视频帧进行对象识别和物品识别,本申请实施例对服务器对视频帧进行对象识别和物品识别的顺序不加以限定。
在另一种可能的实现方式中,服务器确定第一视频片段的识别信息的目的是为后续确定物品丢失的视频片段提供数据支持,且在步骤302中已经对第一视频片段进行了对象识别,在对象识别过程中,服务器可以先存储识别得到的目标对象区域和对象区域包含的目标对象特征,从而在步骤303中,可以仅针对目标对象特征进行物品识别,相应地,确定第一视频片段的识别信息的实现方式还可以包括:对于第一视频片段中的每个视频帧,对视频帧进行物品识别,得到物品区域和物品区域包含的物品对应的物品标签;在物品区域位于目标对象区域的预设范围内的情况下,将目标对象特征和物品标签建立关联关系。这种实现方式无需重复对视频帧进行对象识别,所确定的识别信息仅包括目标对象特征和该目标对象特征关联的物品标签,从而大大降低了识别工作量,提高了识别效率。
可选地,物品标签包括物品类别,例如物品标签为手机、背包或杯子等。可选地,服务器借助于物品识别模型对视频帧进行物品识别,相应地,对视频帧进行物品识别,得到物品区域和物品区域包含的物品对应的物品标签的实现方式包括:调用物品识别模型,对视频帧进行物品识别,得到物品区域和物品区域包含的物品对应的物品标签。
其中,物品识别模型用于识别输入的图像,输出物品区域和物品标签,该物品标签包括物品类别。在本申请实施例中,物品识别模型是经过大量训练样本训练得到的。其中,训练样本包括样本视频帧和该样本视频帧对应的样本标签,样本标签包括样本视频帧中的样本物品区域和该样本物品区域包含的物品对应的样本物品标签。可选地,样本视频帧对应的样本标签是技术人员对样本视频帧进行人工标注得到的。
在本申请实施例中,由于物品识别模型是经过大量的训练样本训练得到的,因此物品识别模型的识别准确性较高,通过调用物品识别模型对视频帧进行物品识别,所识别得到的物品区域和物品标签的准确性也较高。
可选地,物品标签还包括物品颜色,则服务器对识别到的物品区域进行颜色识别,得到物品颜色。相应地,服务器将物品颜色和物品类别组成物品标签。由于物品标签所包括的物品类别和物品颜色能够从不同的角度表示同一物品,因此根据该物品标签能够较为准确地表示物品。
需要说明的另一点是,服务器可以对第一视频片段中的每个视频帧进行识别,也可以从第一视频片段中抽取部分视频帧进行识别,本申请实施例对此不加以限定。可选地,确定第一视频片段的识别信息的实现方式包括:从第一视频片段中,每隔预设帧数抽取一个视频帧;对抽取到的视频帧进行识别,得到识别信息。其中,预设帧数可以根据需要设置,例如预设帧数为5、10或20等,本申请实施例对此不加以限定。
在本申请实施例中,由于能够每隔预设帧数抽取一个视频帧,对该视频帧进行识别,这样服务器无需对每个视频帧进行识别,从而大大降低了识别视频帧的工作量,提高了识别效率。
本申请实施例以一个第一视频片段为例,对服务器确定第一视频片段的识别信息的过程进行说明,而提取到的第一视频片段的数量可能较多,则服务器确定每个第一视频片段的识别信息,并存储所确定的识别信息,以便后续进行物品查找。可选地,第一视频片段具有各自的片段标识,片段标识用于区分不同的视频片段,则服务器将片段标识和识别信息对应存储。其中,第一视频片段的片段标识可以根据需要设置,本申请实施例对此不加以限定。
304、服务器基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段。
其中,包含目标对象的第一视频片段为丢失物品的目标对象出现过的视频片段,采集第一视频片段的摄像头所处的位置信息能够表示该目标对象曾经在哪些位置出现过,而且由于服务器对第一视频片段识别出了目标对象特征关联的物品标签,从而能够根据该物品标签,进一步确定物品丢失的第二视频片段。
可选地,步骤304的实现方式包括:对于采集时间相邻且由处于不同位置的摄像头采集的每两个第一视频片段,若存在物品标签包含于两个第一视频片段中的第一目标视频片段的识别信息,且不包含于两个第一视频片段中的第二目标视频片段的识别信息,则将第一目标视频片段和第二目标视频片段中的至少一个,确定为第二视频片段,其中,第一目标视频片段的采集时间早于第二目标视频片段的采集时间。
由于第一目标视频片段是第二目标视频片段的前一视频片段,则第一目标视频片段是在第二目标视频片段之前采集得到的,若第一目标视频片段中的目标对象携带了某个物品,则第一目标视频片段的识别信息包括该物品对应的物品标签,但若第二目标视频片段的识别信息不包含该物品标签,表示第二目标视频片段不包含该物品,则第二目标视频片段中的目标对象很有可能未携带该物品,则可以看作是目标对象丢失了该物品,则第二目标视频片段和第一目标视频片段都有可能是在对象丢失该物品时所采集到的视频片段,因此可以将第一目标视频片段和第二目标视频片段中的至少一个,确定为第二视频片段。
可选地,目标对象在丢失物品之后,若要通过终端查找物品,还可以在终端输入目标物品标签,该目标物品标签表示所丢失的物品,从而物品查找请求还携带目标物品标签;相应地,若第一目标视频片段的识别信息包含目标物品标签,且第二目标视频片段的识别信息不包含目标物品标签,则将第一目标视频片段和第二目标视频片段中的至少一个,确定为第二视频片段。
其中,第二目标视频片段的识别信息不包括物品标签只能说明该第二目标视频片段中存在物品丢失的现象,而该第二目标视频片段中所丢失的物品与目标对象所查找的物品可能并不是同一个。在本申请实施例中,在物品查找请求还携带目标物品标签的情况下,由于目标物品标签能够表示所丢失的物品,也即所查找的物品,因此基于该目标物品标签所确定的第二视频片段较为准确。
在本申请实施例中,第一视频片段的数量可能较多,所确定的第二视频片段的数量可能较多,因此可以对所确定的第二视频片段进行过滤。可选地,在将第一目标视频片段和第二目标视频片段中的至少一个,确定为第二视频片段之后,服务器在基于多个第一视频片段确定多个第二视频片段的情况下,将除采集时间最晚的第二视频片段之外的其他第二视频片段过滤。
由于目标对象在携带物品的过程中,可能会将物品放在不易被摄像头采集到的地方,则部分第一视频片段中可能并不包括该物品,则第一视频片段的识别信息也不包括该物品对应的物品标签,但事实上该物品并未丢失,而是被未采集到的,这样导致第一视频片段的识别信息存在误差。若后续目标对象将物品暴露在摄像头的采集范围内,则后续的第一视频片段的识别信息会再次包括该物品对应的物品标签。
在本申请实施例中,采集时间最晚的第二视频片段是物品出现的最后一个视频片段,则该第二视频片段很有可能是物品丢失的第二视频片段,通过将除采集时间最晚的第二视频片段之外的其他第二视频片段过滤,使得所确定的第二视频片段较为准确。
在本申请实施例中,第一目标视频片段和第二目标视频片段都有可能是物品丢失的视频片段,则可以对第一目标视频片段和第二目标视频片段进行进一步的对比,从中选择一个视频片段作为第二视频片段,相应地,将第一目标视频片段和第二目标视频片段中的至少一个,确定为第二视频片段的实现方式包括:对于第一目标视频片段中相邻的每两个视频帧,若两个视频帧中的第一视频帧的识别信息包含物品标签,且两个视频帧中的第二视频帧的识别信息不包含物品标签,则确定第二视频帧为物品丢失的目标视频帧,将第一目标视频片段确定为第二视频片段,第一视频帧的采集时间早于第二视频帧的采集时间;若第一目标视频片段中最后一个视频帧的识别信息包含物品标签,则将第二目标视频片段确定为第二视频片段。
其中,由于第一视频帧是在第二视频帧之前采集得到的,若第一视频帧中的目标对象携带了某个物品,则第一视频帧的识别信息包括该物品对应的物品标签,但若第二视频帧的识别信息不包括该物品对应的物品标签,表示第二视频帧不包括该物品,则第二视频帧中的目标对象很有可能未携带该物品,则可以看作是目标对象丢失了该物品,则第二视频帧很有可能是在目标对象丢失该物品时所采集到的视频帧,则第一目标视频片段可以看作是物品丢失的第二视频片段。但是若第一目标视频片段中最后一个视频帧的识别信息包含物品标签,则表示物品在最后一个视频帧出现了,也即目标对象还携带有该物品,则物品很有可能是在采集第二目标视频片段时或在采集第一目标视频片段和第二目标视频片段之间的间隔丢失的,则可以将第二目标视频片段看作是物品丢失的第二视频片段。
在一种可能的实现方式中,目标对象在丢失物品之后,能够得知物品丢失的大概时间,若要通过终端查找物品,则还可以在终端中输入时间段,则该物品查找请求还可以携带时间段,则服务器基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段的实现方式还包括:基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失且采集时间位于时间段内的第二视频片段。
在本申请实施例中,物品查找请求所携带的时间段是目标对象输入的时间段,该时间段是目标对象确定的丢失物品的时间段,则服务器可以直接在第一视频片段中,确定物品丢失且采集时间在该时间段内的第二视频片段,从而缩小范围,使得所确定的第二视频片段较为准确。
305、服务器向终端发送物品查找结果,该物品查找结果包括采集第二视频片段的摄像头对应的位置信息。
其中,采集第二视频片段的摄像头对应的位置信息表示该摄像头所处的位置。在本申请实施例中,采集第二视频片段的摄像头所处的位置很有可能是物品丢失的位置,通过将采集该第二视频片段的摄像头对应的位置信息作为物品查找结果并返回给终端,使得终端能够显示该物品查找结果,供目标对象查看,从而目标对象能够得知物品丢失的位置,根据该位置找寻物品。可选地,服务器在提取到每个第一视频片段之后,将该第一视频片段的片段标识与采集该第一视频片段的摄像头对应的位置信息对应存储,便于后续在确定好第二视频片段之后,根据第二视频片段的片段标识,获取与该片段标识对应存储的位置信息。可选地,该物品查找结果还包括第二视频片段的采集时间,以便于目标对象得知物品丢失的大致时间。
本申请实施例提供了一种丢失物品后定位物品丢失位置的方案,在查找目标对象所丢失的物品时,对于至少两个处于不同位置的摄像头所采集的、且包含该目标对象的第一视频片段,由于第一视频片段的识别信息能够表示目标对象在第一视频片段中携带了哪些物品,因此基于该第一视频片段的识别信息,能够进一步定位到物品丢失的第二视频片段,从而得到物品查找结果,物品查找结果所包括的位置信息很有可能就是物品丢失的位置,从而丢失物品的目标对象能够根据该位置信息找寻物品,实现了对物品丢失的位置的快速确定,提高了物品查找的便捷性。
图4是本申请实施例提供的再一种物品查找方法的流程图。本申请实施例以服务器为执行主体为例进行说明,参见图4,该方法包括如下步骤:
401、服务器从至少两个处于不同位置的摄像头所采集的视频中,提取包含同一对象的视频片段。
步骤401的实现方式参见上述步骤302的实现方式,在此不再赘述。
需要说明的是,本申请实施例是提取包含同一对象的视频片段,对于所采集的视频中的第一个视频帧,对该视频帧进行对象识别,得到至少一个对象特征。每个对象特征指代该视频帧包括的一个对象。对于每个对象特征指代的对象,服务器从所采集的视频中提取包含该对象的视频片段,以此类推直至提取到视频中出现过的每个对象的视频片段。其中,第一个视频帧是指采集时间最早的视频帧。
402、服务器确定该视频片段的识别信息。
步骤402的实现方式参见上述步骤303的实现方式,在此不再赘述。
403、服务器对于采集时间相邻且由处于不同位置的摄像头采集的每两个视频片段,若存在物品标签包含于两个视频片段中的第三视频片段的识别信息,且不包含于两个视频片段中的第四视频片段的识别信息,则在第三视频片段和第四视频片段中的至少一个视频片段的识别信息中,添加物品标签对应的物品消失标签,第三视频片段的采集时间早于第四视频片段的采集时间。
可选地,物品消失标签包括所消失的物品对应的物品标签和消失关键字。其中,物品消失标签的表示方式可以根据需要设置,例如物品标签为背包,消失关键字为“消失”,则物品标签对应的物品消失标签为背包消失,本申请实施例对此不加以限定。
例如,第三视频片段的识别信息包括的物品标签为手机,第四视频片段的识别信息包括的物品标签为手机,则无需添加物品消失标签;再如,第三视频片段的识别信息包括的物品标签为手机、背包,第四视频片段的识别信息包括的物品标签为手机,则背包不包含于第四视频片段的识别信息,则添加背包对应的物品消失标签。
步骤403的实现方式参见上述步骤304的实现方式,在此不再赘述。
404、服务器接收终端发送的物品查找请求,该物品查找请求携带目标对象特征,该目标对象特征为丢失物品的目标对象的特征。
步骤404的实现方式参见上述步骤301的实现方式,在此不再赘述。
405、服务器响应于该物品查找请求,从至少两个处于不同位置的摄像头所采集的第一视频片段中,查找识别信息包括物品消失标签的第二目标视频片段,并确定该第二目标视频片段为第二视频片段,第一视频片段包含该目标对象。
其中,若识别信息包括物品消失标签,则表示该第二目标视频片段相比于第一目标视频片段存在物品丢失的现象,而该第二目标视频片段很有可能是在目标对象丢失物品时所采集到的视频片段,则可以将该视频帧确定为第二视频片段。
406、服务器向终端发送物品查找结果,该物品查找结果包括采集第二视频片段的摄像头对应的位置信息。
步骤406的实现方式参见上述步骤305的实现方式,在此不再赘述。
本申请实施例提供了一种丢失物品后定位物品丢失位置的方案,且本申请实施例与上述图3所示实施例的区别在于:本申请实施例在接收到物品查找请求之前,就提取了包含同一对象的视频片段,并为物品丢失的视频片段的识别信息添加了物品消失标签,实现了对视频的预处理,从而在接收到物品查找请求时,能够直接查找识别信息包括该物品消失标签的视频片段,较快地定位到物品丢失的第二视频片段,从而得到物品查找结果,物品查找结果所包括的位置信息表示的位置很有可能就是物品丢失的位置,从而丢失物品的目标对象能够根据该位置信息找寻物品,实现了对物品丢失的位置的快速确定,提高了物品查找的便捷性。
图5是本申请实施例提供的又一种物品查找方法的流程图。本申请实施例以终端为执行主体为例进行说明,参见图5,该方法包括如下步骤:
501、终端显示物品查找界面。
其中,目标对象在想要查找丢失的物品时,触发终端显示查物品查找界面。可选地,物品查找界面是目标应用中的界面。则目标对象触发终端运行目标应用,从而触发终端在该目标应用中显示该物品查找界面。例如目标应用是浏览器,物品查找界面是网站的前端交互界面,服务器为网站的后台服务器,目标对象触发终端运行浏览器,在浏览器中输入网站的网址,触发终端访问该网址,从而触发终端显示物品查找界面。
502、终端基于该物品查找界面,采集目标对象对应的目标对象特征。
可选地,物品查找界面中显示特征采集控件,目标对象触发该特征采集控件,终端响应于该特征采集控件被触发,采集目标对象对应的目标对象特征。相应地,终端连接有摄像头,目标对象位于摄像头的采集范围内,终端响应于特征采集控件被触发,控制摄像头采集图像,对该图像进行对象识别,得到目标对象特征。需要说明的是,图像是经目标对象授权之后采集的。
503、终端向服务器发送物品查找请求,该物品查找请求携带该目标对象特征,服务器用于响应于物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,返回物品查找结果,物品查找结果包括采集第二视频片段的摄像头对应的位置信息。
其中,第一视频片段包含目标对象,识别信息包括目标对象特征和目标对象特征关联的物品标签,物品标签表示在第一视频片段中目标对象携带的物品。在本申请实施例中,终端通过向服务器发送物品查找请求,借助于服务器实现物品查找,得到物品查找结果。
504、终端接收该物品查找结果,并显示该物品查找结果。
在本申请实施例中,终端在接收该物品查找结果之后,显示该物品查找结果。可选地,终端在物品查找界面中显示该物品查找结果,供对象查看。
本申请实施例提供了一种丢失物品后定位物品丢失位置的方案,目标对象在需要查找物品时,能够触发终端向服务器发送物品查找请求,从而借助于服务器查找所丢失的物品,服务器能够根据丢失物品的目标对象对应的目标对象特征,定位到丢失物品的第二视频片段,从而得到物品查找结果,物品查找结果所包括的位置信息表示的位置很有可能就是物品丢失的位置,从而丢失物品的目标对象能够根据该位置信息找寻物品,实现了对物品丢失的位置的快速确定,提高了物品查找的便捷性。
图6本申请实施例提供的又一种物品查找方法的流程图。本申请实施例以终端和服务器为执行主体为例进行说明,参见图6,该方法包括如下步骤:
601、终端显示物品查找界面。
602、终端基于该物品查找界面,采集目标对象对应的目标对象特征。
603、终端向服务器发送物品查找请求,该物品查找请求携带该目标对象特征。
步骤601-步骤603的实现方式参见步骤501-步骤503的实现方式,在此不再赘述。
可选地,目标对象在丢失物品之后,若要通过终端查找物品,还可以在物品查找界面中输入所丢失的物品对应的物品标签,也即目标物品标签,则在步骤603之前,本申请实施例提供的物品查找方法还包括:终端获取在物品查找界面中输入的目标物品标签;从而终端向服务器发送的物品查找请求还携带该目标物品标签。在一种可能的实现方式中,物品查找界面包括输入区域,则目标对象在该输入区域中输入要查找的物品对应的目标物品标签,终端获取在该输入区域中输入的目标物品标签。
在本申请实施例中,通过获取输入的目标物品标签,向服务器发送还包括该目标物品标签的物品查找请求,使得服务器能够在目标对象特征的基础上进一步缩小查找范围,从而所确定的物品查找结果的准确性较高。
可选地,目标对象在丢失物品之后,能够得知丢失物品的大概时间,若要通过终端查找物品,则还可以在物品查找界面中输入时间段,则在步骤603之前,本申请实施例提供的物品查找方法还包括:终端获取在物品查找界面中输入的时间段;从而终端向服务器发送的物品查找请求还携带该时间段。在一种可能的实现方式中,物品查找界面包括输入区域,则目标对象在该输入区域中输入时间段,终端获取输入的时间段。
在本申请实施例中,通过获取输入的时间段,向服务器发送还包括该时间段的物品查找请求,使得服务器能够在目标对象特征的基础上进一步缩小查找范围,查找采集时间位于该时间段内的第二视频片段,从而所确定的物品查找结果的准确性较高。
604、服务器接收该物品查找请求。
605、服务器基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段。
其中,第一视频片段包含目标对象,识别信息包括目标对象特征和目标对象特征关联的物品标签,物品标签表示在第一视频片段中目标对象携带的物品。
606、服务器向终端发送物品查找结果,该物品查找结果包括采集第二视频片段的摄像头对应的位置信息。
步骤604-步骤606的实现方式参见步骤301-步骤305的实现方式,或者步骤604-步骤606的实现方式参见步骤404-步骤406的实现方式,在此不再赘述。
607、终端接收该物品查找结果,并显示该物品查找结果。
在本申请实施例中,终端在接收该物品查找结果之后,显示该物品查找结果。可选地,终端在物品查找界面中显示该物品查找结果,供对象查看。
本申请实施例提供了一种丢失物品后定位物品丢失位置的方案,目标对象在需要查找物品时,能够触发终端向服务器发送物品查找请求,从而借助于服务器查找所丢失的物品,服务器能够根据丢失物品的目标对象对应的目标对象特征,定位到丢失物品的第二视频片段,从而得到物品查找结果,物品查找结果所包括的位置信息表示的位置很有可能就是物品丢失的位置,从而丢失物品的目标对象能够根据该位置信息找寻物品,实现了对物品丢失的位置的快速确定,提高了物品查找的便捷性。
上述所有可选技术方案,可以采用任意结合形成本申请的可选实施例,在此不再一一赘述。
下述为本申请装置实施例,可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节,请参照本申请方法实施例。
图7是本申请实施例提供的一种物品查找装置的结构示意图。参见图7,该装置包括:
请求接收模块701,用于接收终端发送的物品查找请求,物品查找请求携带目标对象特征,目标对象特征为丢失物品的目标对象的特征;
视频片段确定模块702,用于响应于物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,第一视频片段包含目标对象,识别信息包括目标对象特征以及目标对象特征关联的物品标签,物品标签表示在第一视频片段中目标对象携带的物品;
结果发送模块703,用于向终端发送物品查找结果,物品查找结果包括采集第二视频片段的摄像头对应的位置信息。
在一种可能的实现方式中,视频片段确定模块702,用于:
对于采集时间相邻且由处于不同位置的摄像头采集的每两个第一视频片段,若存在物品标签包含于两个第一视频片段中的第一目标视频片段的识别信息,且不包含于两个第一视频片段中的第二目标视频片段的识别信息,则将第一目标视频片段和第二目标视频片段中的至少一个,确定为第二视频片段;
其中,第一目标视频片段的采集时间早于第二目标视频片段的采集时间。
在一种可能的实现方式中,物品查找请求还携带目标物品标签,目标物品标签表示所丢失的物品;视频片段确定模块702,用于:
若目标物品标签包含于第一目标视频片段的识别信息,且不包含于第二目标视频片段的识别信息,则将第一目标视频片段和第二目标视频片段中的至少一个,确定为第二视频片段。
在一种可能的实现方式中,装置还包括:
视频片段过滤模块,用于在基于多个第一视频片段确定多个第二视频片段的情况下,将除采集时间最晚的第二视频片段之外的其他第二视频片段过滤。
在一种可能的实现方式中,视频片段确定模块702,用于:
对于第一目标视频片段中相邻的每两个视频帧,若两个视频帧中的第一视频帧的识别信息包含物品标签,且两个视频帧中的第二视频帧的识别信息不包含物品标签,则确定第二视频帧为物品丢失的目标视频帧,将第一目标视频片段确定为第二视频片段,第一视频帧的采集时间早于第二视频帧的采集时间;
若第一目标视频片段中最后一个视频帧的识别信息包含物品标签,则将第二目标视频片段确定为第二视频片段。
在一种可能的实现方式中,物品查找请求还携带时间段;视频片段确定模块702,用于:
基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失且采集时间位于时间段内的第二视频片段。
在一种可能的实现方式中,装置还包括:
视频片段提取模块,用于从至少两个处于不同位置的摄像头所采集的视频中,提取包含目标对象的第一视频片段;
识别信息确定模块,用于确定第一视频片段的识别信息。
在一种可能的实现方式中,识别信息确定模块,用于:
对于第一视频片段中的每个视频帧,对视频帧进行对象识别,得到对象区域和对象区域包含的对象特征;
对视频帧进行物品识别,得到物品区域和物品区域包含的物品对应的物品标签;
在物品区域位于对象区域的预设范围内的情况下,将对象特征和物品标签建立关联关系。
在一种可能的实现方式中,识别信息确定模块,用于:
调用物品识别模型,对视频帧进行物品识别,得到物品区域和物品区域包含的物品对应的物品标签。
在一种可能的实现方式中,识别信息确定模块,用于:
从第一视频片段中,每隔预设帧数抽取一个视频帧;
对抽取到的视频帧进行识别,得到识别信息。
在一种可能的实现方式中,装置还包括:
视频片段提取模块,用于从至少两个处于不同位置的摄像头所采集的视频中,提取包含同一对象特征的视频片段;
识别信息确定模块,用于确定视频片段的识别信息;
标签添加模块,用于对于采集时间相邻且由处于不同位置的摄像头采集的每两个视频片段,若存在物品标签包含于两个视频片段中的第三视频片段的识别信息,且不包含于两个视频片段中的第四视频片段的识别信息,则在第三视频片段和第四视频片段中的至少一个视频片段的识别信息中,添加物品标签对应的物品消失标签,第三视频片段的采集时间早于第四视频片段的采集时间;
视频片段确定模块702,用于从至少两个处于不同位置的摄像头所采集的第一视频片段中,查找识别信息包括物品消失标签的第二目标视频片段,并确定该第二目标视频片段为第二视频片段。
本申请实施例提供了一种丢失物品后定位物品丢失位置的方案,在查找目标对象所丢失的物品时,对于至少两个处于不同位置的摄像头所采集的、且包含该目标对象的第一视频片段,由于第一视频片段的识别信息能够表示目标对象在第一视频片段中携带了哪些物品,因此基于该第一视频片段的识别信息,能够进一步定位到物品丢失的第二视频片段,从而得到物品查找结果,物品查找结果所包括的位置信息表示的位置很有可能就是物品丢失的位置,从而丢失物品的目标对象能够根据该位置信息找寻物品,实现了对物品丢失的位置的快速确定,提高了物品查找的便捷性。
需要说明的是,上述实施例提供的装置,在实现其功能时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将服务器的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的装置与方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图8是本申请实施例提供的另一种物品查找装置的结构示意图。参见图8,该装置包括:
界面显示模块801,用于显示物品查找界面;
特征采集模块802,用于基于物品查找界面,采集目标对象对应的目标对象特征;
请求发送模块803,用于向服务器发送物品查找请求,物品查找请求携带目标对象特征,服务器用于响应于物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,返回物品查找结果,物品查找结果包括采集第二视频片段的摄像头所处的位置信息;
结果接收模块804,用于接收物品查找结果,并显示物品查找结果;
其中,第一视频片段包含目标对象,识别信息包括目标对象特征以及目标对象特征关联的物品标签,物品标签表示在第一视频片段中目标对象携带的物品。
在一种可能的实现方式中,物品查找请求还携带目标物品标签,目标物品标签表示所丢失的物品,装置还包括:
标签获取模块,用于获取在物品查找界面中输入的目标物品标签。
在一种可能的实现方式中,物品查找请求还携带时间段,装置还包括:
时间段获取模块,用于获取在物品查找界面中输入的时间段。
本申请实施例提供了一种丢失物品后定位物品丢失位置的方案,目标对象在需要查找物品时,能够触发终端向服务器发送物品查找请求,从而借助于服务器查找所丢失的物品,服务器能够根据丢失物品的目标对象对应的目标对象特征,定位到丢失物品的第二视频片段,从而得到物品查找结果,物品查找结果所包括的位置信息表示的位置很有可能就是物品丢失的位置,从而丢失物品的目标对象能够根据该位置信息找寻物品,实现了对物品丢失的位置的快速确定,提高了物品查找的便捷性。
需要说明的是,上述实施例提供的装置,在实现其功能时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将终端的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的装置与方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图9是本申请实施例提供的一种服务器900的结构示意图。该服务器900可因配置或性能不同而产生比较大的差异,可以包括处理器(Central Processing Units,CPU)901和存储器902,其中,存储器902用于存储至少一条程序代码,至少一条程序代码由处理器901加载并执行,以实现上述实施例中的物品查找方法。当然,该服务器900还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器900还可以包括其他用于实现终端功能的部件,在此不做赘述。
本领域技术人员可以理解,图9中示出的结构并不构成对服务器900的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
本申请实施例提供了一种终端,终端包括处理器和存储器,存储器中存储有至少一条程序代码,至少一条程序代码由处理器加载并执行,以实现上述实施例中的物品查找方法。
图10是根据本申请实施例提供的一种终端1000的结构示意图。该终端1000可以是便携式移动终端,比如:智能手机、平板电脑、MP3播放器(Moving Picture Experts GroupAudio Layer III,动态影像专家压缩标准音频层面3)、MP4(Moving Picture ExpertsGroup Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端1000还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,终端1000包括有:处理器1001和存储器1002。
处理器1001可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1001可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1001也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1001可以集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1001还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1002可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1002还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1002中的非暂态的计算机可读存储介质用于存储至少一个计算机程序,该至少一个计算机程序用于被处理器1001所执行以实现本申请中方法实施例提供的物品查找方法。
在一些实施例中,终端1000还可选包括有:外围设备接口1003和至少一个外围设备。处理器1001、存储器1002和外围设备接口1003之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1003相连。具体地,外围设备包括:射频电路1004、显示屏1005、摄像头组件1006、音频电路1007、定位组件1008和电源1009中的至少一种。
外围设备接口1003可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器1001和存储器1002。在一些实施例中,处理器1001、存储器1002和外围设备接口1003被集成在同一芯片或电路板上;在一些其他实施例中,处理器1001、存储器1002和外围设备接口1003中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路1004用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路1004通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1004将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路1004包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1004可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路1004还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏1005用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1005是触摸显示屏时,显示屏1005还具有采集在显示屏1005的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1001进行处理。此时,显示屏1005还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏1005可以为一个,设置在终端1000的前面板;在另一些实施例中,显示屏1005可以为至少两个,分别设置在终端1000的不同表面或呈折叠设计;在另一些实施例中,显示屏1005可以是柔性显示屏,设置在终端1000的弯曲表面上或折叠面上。甚至,显示屏1005还可以设置成非矩形的不规则图形,也即异形屏。显示屏1005可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(Organic Light-EmittingDiode,有机发光二极管)等材质制备。
摄像头组件1006用于采集图像或视频。可选地,摄像头组件1006包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件1006还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路1007可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1001进行处理,或者输入至射频电路1004以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端1000的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1001或射频电路1004的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路1007还可以包括耳机插孔。
定位组件1008用于定位终端1000的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。定位组件1008可以是基于美国的GPS(GlobalPositioning System,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或者欧盟的伽利略系统的定位组件。
电源1009用于为终端1000中的各个组件进行供电。电源1009可以是交流电、直流电、一次性电池或可充电电池。当电源1009包括可充电电池时,该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池,无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
本领域技术人员可以理解,图10中示出的结构并不构成对终端1000的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
在示例性实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有至少一条程序代码,该至少一条程序代码由处理器加载并执行,以实现上述实施例中的物品查找方法。该计算机可读存储介质可以是存储器。例如,该计算机可读存储介质可以是ROM(Read-Only Memory,只读存储器)、RAM(Random Access Memory,随机存取存储器)、CD-ROM(Compact Disc Read-Only Memory,紧凑型光盘只读储存器)、磁带、软盘和光数据存储终端等。
在示例性实施例中,还提供了一种计算机程序产品,计算机程序产品包括计算机程序代码,计算机程序代码存储在计算机可读存储介质中,处理器从计算机可读存储介质读取计算机程序代码,处理器执行计算机程序代码以实现如上述实施例中的物品查找方法。
在一些实施例中,本申请实施例所涉及的计算机程序可被部署在一个计算机设备上执行,或者在位于一个地点的多个计算机设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算机设备上执行,分布在多个地点且通过通信网络互连的多个计算机设备可以组成区块链系统。该计算机设备可以为提供为终端或服务器。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,该程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (19)

1.一种物品查找方法,其特征在于,所述方法包括:
接收终端发送的物品查找请求,所述物品查找请求携带目标对象特征,所述目标对象特征为丢失物品的目标对象的特征;
响应于所述物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,所述第一视频片段包含所述目标对象,所述识别信息包括所述目标对象特征和所述目标对象特征关联的物品标签,所述物品标签表示在所述第一视频片段中所述目标对象携带的物品;
向所述终端发送物品查找结果,所述物品查找结果包括采集所述第二视频片段的摄像头对应的位置信息。
2.根据权利要求1所述的方法,其特征在于,所述基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,包括:
对于采集时间相邻且由处于不同位置的摄像头采集的每两个第一视频片段,若存在物品标签包含于所述两个第一视频片段中的第一目标视频片段的识别信息,且不包含于所述两个第一视频片段中的第二目标视频片段的识别信息,则将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段;
其中,所述第一目标视频片段的采集时间早于所述第二目标视频片段的采集时间。
3.根据权利要求2所述的方法,其特征在于,所述物品查找请求还携带目标物品标签,所述目标物品标签表示所丢失的物品;所述若存在物品标签包含于所述两个第一视频片段中的第一目标视频片段的识别信息,且不包含于所述两个第一视频片段中的第二目标视频片段的识别信息,则将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段,包括:
若所述目标物品标签包含于所述第一目标视频片段的识别信息,且不包含于所述第二目标视频片段的识别信息,则将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段。
4.根据权利要求2所述的方法,其特征在于,所述将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段之后,所述向所述终端发送物品查找结果之前,所述方法还包括:
在基于多个所述第一视频片段确定多个所述第二视频片段的情况下,将除采集时间最晚的所述第二视频片段之外的其他所述第二视频片段过滤。
5.根据权利要求2所述的方法,其特征在于,所述将所述第一目标视频片段和所述第二目标视频片段中的至少一个,确定为所述第二视频片段,包括:
对于所述第一目标视频片段中相邻的每两个视频帧,若所述两个视频帧中的第一视频帧的识别信息包含所述物品标签,且所述两个视频帧中的第二视频帧的识别信息不包含所述物品标签,则确定所述第二视频帧为物品丢失的目标视频帧,将所述第一目标视频片段确定为所述第二视频片段,所述第一视频帧的采集时间早于所述第二视频帧的采集时间;
若所述第一目标视频片段中最后一个视频帧的识别信息包含所述物品标签,则将所述第二目标视频片段确定为所述第二视频片段。
6.根据权利要求1所述的方法,其特征在于,所述物品查找请求还携带时间段;所述基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,包括:
基于至少两个处于不同位置的摄像头所采集的所述第一视频片段的识别信息,确定物品丢失且采集时间位于所述时间段内的第二视频片段。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段之前,所述方法还包括:
从至少两个处于不同位置的摄像头所采集的视频中,提取包含所述目标对象的第一视频片段;
确定所述第一视频片段的识别信息。
8.根据权利要求7所述的方法,其特征在于,所述确定所述第一视频片段的识别信息,包括:
对于所述第一视频片段中的每个视频帧,对所述视频帧进行对象识别,得到对象区域和所述对象区域包含的对象特征;
对所述视频帧进行物品识别,得到物品区域和所述物品区域包含的物品对应的物品标签;
在所述物品区域位于所述对象区域的预设范围内的情况下,将所述对象特征和所述物品标签建立关联关系。
9.根据权利要求8所述的方法,其特征在于,所述对所述视频帧进行物品识别,得到物品区域和所述物品区域包含的物品对应的物品标签,包括:
调用物品识别模型,对所述视频帧进行物品识别,得到所述物品区域和所述物品区域包含的物品对应的物品标签。
10.根据权利要求7所述的方法,其特征在于,所述确定所述第一视频片段的识别信息,包括:
从所述第一视频片段中,每隔预设帧数抽取一个视频帧;
对抽取到的所述视频帧进行识别,得到所述识别信息。
11.根据权利要求1所述的方法,其特征在于,所述方法还包括:
从至少两个处于不同位置的摄像头所采集的视频中,提取包含同一对象的视频片段;
确定所述视频片段的识别信息;
对于采集时间相邻且由处于不同位置的摄像头采集的每两个视频片段,若存在物品标签包含于所述两个视频片段中的第三视频片段的识别信息,且不包含于所述两个视频片段中的第四视频片段的识别信息,则在所述第三视频片段和所述第四视频片段中的至少一个视频片段的识别信息中,添加所述物品标签对应的物品消失标签,所述第三视频片段的采集时间早于所述第四视频片段的采集时间;
所述基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,包括:
从至少两个处于不同位置的摄像头所采集的第一视频片段中,查找识别信息包括所述物品消失标签的第二目标视频片段,并确定所述第二目标视频片段为所述第二视频片段。
12.一种物品查找方法,其特征在于,所述方法包括:
显示物品查找界面;
基于所述物品查找界面,采集目标对象对应的目标对象特征;
向服务器发送物品查找请求,所述物品查找请求携带所述目标对象特征,所述服务器用于响应于所述物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,返回物品查找结果,所述物品查找结果包括采集所述第二视频片段的摄像头对应的位置信息;
接收所述物品查找结果,并显示所述物品查找结果;
其中,所述第一视频片段包含所述目标对象,所述识别信息包括所述目标对象特征和所述目标对象特征关联的物品标签,所述物品标签表示在所述第一视频片段中所述目标对象携带的物品。
13.根据权利要求12所述的方法,其特征在于,所述物品查找请求还携带目标物品标签,所述目标物品标签表示所丢失的物品,所述方法还包括:
获取在所述物品查找界面中输入的所述目标物品标签。
14.根据权利要求12所述的方法,其特征在于,所述物品查找请求还携带时间段,所述方法还包括:
获取在所述物品查找界面中输入的所述时间段。
15.一种物品查找装置,其特征在于,所述装置包括:
请求接收模块,用于接收终端发送的物品查找请求,所述物品查找请求携带目标对象特征,所述目标对象特征为丢失物品的目标对象的特征;
视频片段确定模块,用于响应于所述物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,所述第一视频片段包含所述目标对象,所述识别信息包括所述目标对象特征和所述目标对象特征关联的物品标签,所述物品标签表示在所述第一视频片段中所述目标对象携带的物品;
结果发送模块,用于向所述终端发送物品查找结果,所述物品查找结果包括采集所述第二视频片段的摄像头对应的位置信息。
16.一种物品查找装置,其特征在于,所述装置包括:
界面显示模块,用于显示物品查找界面;
特征采集模块,用于基于所述物品查找界面,采集目标对象对应的目标对象特征;
请求发送模块,用于向服务器发送物品查找请求,所述物品查找请求携带所述目标对象特征,所述服务器用于响应于所述物品查找请求,基于至少两个处于不同位置的摄像头所采集的第一视频片段的识别信息,确定物品丢失的第二视频片段,返回物品查找结果,所述物品查找结果包括采集所述第二视频片段的摄像头对应的位置信息;
结果接收模块,用于接收所述物品查找结果,并显示所述物品查找结果;
其中,所述第一视频片段包含所述目标对象,所述识别信息包括所述目标对象特征和所述目标对象特征关联的物品标签,所述物品标签表示在所述第一视频片段中所述目标对象携带的物品。
17.一种服务器,其特征在于,所述服务器包括处理器和存储器,所述存储器中存储有至少一条程序代码,所述至少一条程序代码由所述处理器加载并执行,以实现如权利要求1至11任一项所述的物品查找方法。
18.一种终端,其特征在于,所述终端包括处理器和存储器,所述存储器中存储有至少一条程序代码,所述至少一条程序代码由所述处理器加载并执行,以实现如权利要求12至14任一项所述的物品查找方法。
19.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有至少一条程序代码,所述至少一条程序代码由处理器加载并执行,以实现如权利要求1至11任一项所述的物品查找方法,或者,实现如权利要求12至14任一项所述的物品查找方法。
CN202210564790.0A 2022-05-23 2022-05-23 物品查找方法、装置、服务器、终端及存储介质 Pending CN115017365A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210564790.0A CN115017365A (zh) 2022-05-23 2022-05-23 物品查找方法、装置、服务器、终端及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210564790.0A CN115017365A (zh) 2022-05-23 2022-05-23 物品查找方法、装置、服务器、终端及存储介质

Publications (1)

Publication Number Publication Date
CN115017365A true CN115017365A (zh) 2022-09-06

Family

ID=83069958

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210564790.0A Pending CN115017365A (zh) 2022-05-23 2022-05-23 物品查找方法、装置、服务器、终端及存储介质

Country Status (1)

Country Link
CN (1) CN115017365A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106529456A (zh) * 2016-11-04 2017-03-22 北京锐安科技有限公司 信息匹配和信息收发方法、装置及目标对象找寻系统
CN106877911A (zh) * 2017-01-19 2017-06-20 北京小米移动软件有限公司 查找物品的方法及装置
CN109993045A (zh) * 2017-12-29 2019-07-09 杭州海康威视系统技术有限公司 物品查找方法及查找装置、查找系统和机器可读存储介质
CN111143596A (zh) * 2019-12-31 2020-05-12 维沃移动通信有限公司 物品查找方法及电子设备
CN112925941A (zh) * 2021-03-25 2021-06-08 深圳市商汤科技有限公司 数据处理方法及装置、电子设备及计算机可读存储介质
CN113542689A (zh) * 2021-07-16 2021-10-22 金茂智慧科技(广州)有限公司 基于无线物联网的图像处理方法及相关设备
CN114416905A (zh) * 2022-01-19 2022-04-29 维沃移动通信有限公司 物品寻找方法、标签生成方法及其装置
CN114446026A (zh) * 2020-10-30 2022-05-06 北京熵行科技有限公司 一种物品遗忘提醒方法、相应的电子设备及装置
CN114500900A (zh) * 2022-02-24 2022-05-13 北京云迹科技股份有限公司 丢失对象的寻找方法及装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106529456A (zh) * 2016-11-04 2017-03-22 北京锐安科技有限公司 信息匹配和信息收发方法、装置及目标对象找寻系统
CN106877911A (zh) * 2017-01-19 2017-06-20 北京小米移动软件有限公司 查找物品的方法及装置
CN109993045A (zh) * 2017-12-29 2019-07-09 杭州海康威视系统技术有限公司 物品查找方法及查找装置、查找系统和机器可读存储介质
CN111143596A (zh) * 2019-12-31 2020-05-12 维沃移动通信有限公司 物品查找方法及电子设备
CN114446026A (zh) * 2020-10-30 2022-05-06 北京熵行科技有限公司 一种物品遗忘提醒方法、相应的电子设备及装置
CN112925941A (zh) * 2021-03-25 2021-06-08 深圳市商汤科技有限公司 数据处理方法及装置、电子设备及计算机可读存储介质
CN113542689A (zh) * 2021-07-16 2021-10-22 金茂智慧科技(广州)有限公司 基于无线物联网的图像处理方法及相关设备
CN114416905A (zh) * 2022-01-19 2022-04-29 维沃移动通信有限公司 物品寻找方法、标签生成方法及其装置
CN114500900A (zh) * 2022-02-24 2022-05-13 北京云迹科技股份有限公司 丢失对象的寻找方法及装置

Similar Documents

Publication Publication Date Title
CN113163470B (zh) 对特定路线上的特定位置进行识别的方法及电子设备
CN115866121B (zh) 应用界面交互方法、电子设备和计算机可读存储介质
CN111182145A (zh) 显示方法及相关产品
CN113794801B (zh) 地理围栏的处理方法及装置
CN109831622B (zh) 一种拍摄方法及电子设备
CN114710640B (zh) 基于虚拟形象的视频通话方法、装置和终端
CN114119758B (zh) 获取车辆位姿的方法、电子设备和计算机可读存储介质
CN110909209B (zh) 直播视频的搜索方法及装置、设备、服务器和存储介质
CN112784174A (zh) 确定位姿的方法、装置和系统
CN114168235B (zh) 一种功能切换入口的确定方法与电子设备
CN111858971A (zh) 多媒体资源推荐方法、装置、终端及服务器
CN114547428A (zh) 推荐模型处理方法、装置、电子设备及存储介质
CN110532474B (zh) 信息推荐方法、服务器、系统以及计算机可读存储介质
CN107944024B (zh) 一种确定音频文件的方法和装置
CN114842069A (zh) 一种位姿确定方法以及相关设备
CN111611414B (zh) 车辆检索方法、装置及存储介质
CN115437601B (zh) 图像排序方法、电子设备、程序产品及介质
CN114173286B (zh) 确定测试路径的方法、装置、电子设备及可读存储介质
CN115017365A (zh) 物品查找方法、装置、服务器、终端及存储介质
CN115995236A (zh) 音色提取、模型训练方法、装置、设备、介质及程序
WO2020077503A1 (zh) 一种信息显示方法及装置
CN116033344B (zh) 地理围栏的确定方法、设备及存储介质
CN112783993B (zh) 基于数字地图的多个授权空间的内容同步方法
CN117133311B (zh) 音频场景识别方法及电子设备
CN116437293B (zh) 地理围栏的建立方法、服务器及通信系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination