CN108108698A - 基于人脸识别和全景视频的目标跟踪方法和系统 - Google Patents

基于人脸识别和全景视频的目标跟踪方法和系统 Download PDF

Info

Publication number
CN108108698A
CN108108698A CN201711417706.8A CN201711417706A CN108108698A CN 108108698 A CN108108698 A CN 108108698A CN 201711417706 A CN201711417706 A CN 201711417706A CN 108108698 A CN108108698 A CN 108108698A
Authority
CN
China
Prior art keywords
panoramic picture
collecting device
panoramic
face
recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711417706.8A
Other languages
English (en)
Inventor
朱磊
李建英
韩琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Yishe Technology Co Ltd
Original Assignee
Harbin Yishe Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Yishe Technology Co Ltd filed Critical Harbin Yishe Technology Co Ltd
Priority to CN201711417706.8A priority Critical patent/CN108108698A/zh
Publication of CN108108698A publication Critical patent/CN108108698A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Vascular Medicine (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明提供了一种基于人脸识别和全景视频的目标跟踪方法和系统。该方法包括:在预定区域内每个采集点设置至少一个全景图像采集设备;采集进入该预定区域的每个用户的人脸图像数据并存储;接收到寻人指令后,确定与该寻人指令对应的用户的人脸图像数据作为待查找目标数据;实时采集每个全景图像采集设备附近预定范围内的全景图像,并将各个全景图像采集设备采集的全景图像与待查找目标数据进行人脸匹配;当匹配成功后,确定匹配成功的全景图像所对应的全景图像采集设备,将该全景图像采集设备的相关信息作为搜索结果。上述技术采用全景图像采集设备,其广视角摄像范围可以保证被查找者不会走入拍摄盲区,保证实时目标跟踪。

Description

基于人脸识别和全景视频的目标跟踪方法和系统
技术领域
本发明涉及技术,尤其涉及一种基于人脸识别和全景视频的目标跟踪方法和系统。
背景技术
现有的景区已经采用人脸识别技术作为景区客流统计,或者作为自动检票时的身份验证等。结伴的游客在景区内极易被过多的人流冲散,当游客之间不能互相通信时,在景区内就会失去联系,尤其是携带孩子或老人出游的游客,在景区内极易将孩子或老人丢失。
发明内容
在下文中给出了关于本发明的简要概述,以便提供关于本发明的某些方面的基本理解。应当理解,这个概述并不是关于本发明的穷举性概述。它并不是意图确定本发明的关键或重要部分,也不是意图限定本发明的范围。其目的仅仅是以简化的形式给出某些概念,以此作为稍后论述的更详细描述的前序。
鉴于此,本发明提供了一种基于人脸识别和全景视频的目标跟踪方法和系统,以至少解决目前景区中游客容易走丢走散的问题。
根据本发明的一个方面,提供了一种基于人脸识别和全景视频的目标跟踪方法,该方法包括:预先在预定区域内确定多个采集点,在每个采集点设置至少一个全景图像采集设备;采集进入该预定区域的每个用户的人脸图像数据并存储在预定数据库中;在接收到寻人指令后,在所述预定数据库中确定与该寻人指令对应的用户的人脸图像数据,作为待查找目标数据;通过所述至少一个全景图像采集设备实时采集每个全景图像采集设备附近预定范围内的全景图像,并将各个全景图像采集设备采集的全景图像与所述待查找目标数据进行人脸匹配;当所述至少一个全景图像采集设备实时采集的全景图像中存在至少一帧全景图像与所述待查找目标数据匹配成功后,确定匹配成功的全景图像所对应的全景图像采集设备,将该全景图像采集设备的相关信息作为搜索结果。
根据本发明的另一方面,还提供了一种基于人脸识别和全景视频的目标跟踪系统,该系统包括:图像采集端,所述图像采集端包括预先在预定区域内多个采集点设置的多个全景图像采集设备,其中,每个采集点设有至少一个全景图像采集设备,每个全景图像采集设备适于实时采集其周围360度的全景图像并传输至服务器端;服务器端,所述服务器端适于在接收到寻人指令后,在预定数据库中确定与该寻人指令对应的用户的人脸图像数据作为待查找目标数据,通过将所述至少一个全景图像采集设备实时采集到的每个全景图像采集设备附近预定范围内的全景图像与所述待查找目标数据进行人脸匹配,将匹配成功的全景图像所对应的全景图像采集设备的相关信息作为搜索结果;其中,所述预定数据库中预先存储有进入该预定区域的每个用户的人脸图像数据。
相比于现有技术中采用的非全景摄像机,本发明的基于人脸识别和全景视频的目标跟踪方法和系统采用全景图像采集设备,其广视角摄像范围可以保证被查找者不会走入拍摄盲区,在相当长的时间内一直在全景图像采集设备范围内活动,从而保证实时目标跟踪。
此外,本发明的基于人脸识别和全景视频的目标跟踪方法和系统的全景图像采集设备高度可以根据目标人群高度设置,以方便有效地进行人脸识别。
此外,现有技术中在一个采集点通常仅设置一个摄像机,即使有的设置了多个摄像机,彼此之间也没有设置不同高度,这样就无法针对不同身高的人进行人脸拍摄和识别;相比于此,本发明的实施例当在每个采集点采用两个、三个、五个或更多个摄像机时,将每个采集点处的不同摄像机设置成不同高度,从而针对不同身高人群进行人脸识别,使得寻人更为有效,不会由于所设置采集设备高度不匹配而拍不到目标脸部而使得最终匹配失败,进而导致找不到目标。
此外,本发明的基于人脸识别和全景视频的目标跟踪方法和系统还具有以下有益效果:针对景区内特殊群体游客在游览过程中走失的情况,首先,系统结合全景图像采集设备在景区内的设置和人脸识别,在不需要被查找者配合的情况下查找到被查找者;第二,查找者根据搜索结果接入某一个全景直播,实时追踪被查找者位置动态;第三,因为已有的电子地图并没有在景区内实时规划路线,系统通过实时生成导航路线来引导查找者尽快找到被查找者。举例来说,当用户A和B进入景区时,对用户B面部进行人脸数据采集,当用户A和用户B在景区内失去联系后,用户A可通过本系统找到用户B。现有景区内的监控摄像机多为非全景摄像机,不能实现360度全范围的目标跟踪。
通过以下结合附图对本发明的最佳实施例的详细说明,本发明的这些以及其他优点将更加明显。
附图说明
本发明可以通过参考下文中结合附图所给出的描述而得到更好的理解,其中在所有附图中使用了相同或相似的附图标记来表示相同或者相似的部件。所述附图连同下面的详细说明一起包含在本说明书中并且形成本说明书的一部分,而且用来进一步举例说明本发明的优选实施例和解释本发明的原理和优点。在附图中:
图1是示意性地示出本发明的基于人脸识别和全景视频的目标跟踪方法的一个示例性处理的流程图;
图2是示意性地示出本发明的基于人脸识别和全景视频的目标跟踪系统的一个示例的结构框图;
图3是示出在每个采集点设置至少两个全景图像采集设备的例子的示意图;
图4是示出在每个采集点设置5个全景图像采集设备的例子的示意图。
本领域技术人员应当理解,附图中的元件仅仅是为了简单和清楚起见而示出的,而且不一定是按比例绘制的。例如,附图中某些元件的尺寸可能相对于其他元件放大了,以便有助于提高对本发明实施例的理解。
具体实施方式
在下文中将结合附图对本发明的示范性实施例进行描述。为了清楚和简明起见,在说明书中并未描述实际实施方式的所有特征。然而,应该了解,在开发任何这种实际实施例的过程中必须做出很多特定于实施方式的决定,以便实现开发人员的具体目标,例如,符合与系统及业务相关的那些限制条件,并且这些限制条件可能会随着实施方式的不同而有所改变。此外,还应该了解,虽然开发工作有可能是非常复杂和费时的,但对得益于本公开内容的本领域技术人员来说,这种开发工作仅仅是例行的任务。
在此,还需要说明的一点是,为了避免因不必要的细节而模糊了本发明,在附图中仅仅示出了与根据本发明的方案密切相关的装置结构和/或处理步骤,而省略了与本发明关系不大的其他细节。
本发明的实施例提供了一种基于人脸识别和全景视频的目标跟踪。
图1给出了本发明的基于人脸识别和全景视频的目标跟踪的一个示例的处理流程。
在该方法中,预先在预定区域内确定多个采集点,在每个采集点设置至少一个全景图像采集设备(如全景摄像机),每个全景图像采集设备适于实时采集其周围360度的全景图像并传输至服务器端。其中,预定区域例如可以是预定景区。需要说明的是,在其他实施例中,上述预定区域也可以其他区域,如比较大面积的工作区域,等等。此外,预定区域内的采集点可以预先选定,例如,可以在预定区域内每100平方米设置一个采集点,等等。
在步骤S110中,采集进入该预定区域的每个用户的人脸图像数据并存储在预定数据库中。然后,执行步骤S120。
根据一个实现方式,采集进入该预定区域的每个用户的人脸图像数据的步骤可以包括:在每个用户进入该预定区域后,通过入口处或预设位置处的人脸图像采集设备来获取该用户的人脸图像数据。
根据另一个实现方式,采集进入该预定区域的每个用户的人脸图像数据的步骤也可以包括:在每个用户进入该预定区域后,向该用户的用户端发送请求照片指令,以从该用户端获取至少一个人脸图像数据。例如,用户手机的客户端(即用户端)在接收到该请求照片指令后,用户可以按照提示进行拍照,上传一个或多个人脸照片,作为上述至少一个人脸图像数据。或者,用户端在接收到该指令后,也可以从设备相册中选取一个或几个已存储照片上传(至服务器),作为上述至少一个人脸图像数据。
在步骤S120中,在接收到寻人指令后,在预定数据库中确定与该寻人指令对应的用户的人脸图像数据,作为待查找目标数据。其中,寻人指令可以来自进入该预定区域中的某个用户的用户端,其用户端例如是设置在该用户手机或其他移动设备上的。然后,执行步骤S130。
根据一个实现方式,可以将预存的全景采集点分布地图发送给对应的用户端(对应的用户端例如是发出寻人指令的用户端,或者是进入该预定区域的每个用户的用户端)以用于显示。其中,全景采集点分布地图中包括该预定区域的电子地图,该电子地图可以是2D或3D的,该地图上显示有各个采集点(和/或各个全景图像采集设备)的标识,例如,可以在地图上每个采集点对应的位置处显示该位置对应的全景图像采集设备的编号。
在步骤S130中,通过至少一个全景图像采集设备实时采集每个全景图像采集设备附近预定范围内的360度的全景图像,并将各个全景图像采集设备采集的全景图像与待查找目标数据进行人脸匹配。其中,人脸匹配的过程例如可以采用现有的人脸匹配算法实现,这里不再详述。然而后执行步骤S140。
在步骤S140中,当至少一个全景图像采集设备实时采集的全景图像中存在至少一帧全景图像与待查找目标数据匹配成功后,确定匹配成功的全景图像所对应的全景图像采集设备,将该全景图像采集设备的相关信息作为搜索结果。
根据一个实现方式,在步骤S140中,还可以将搜索结果发送给发出寻人指令的用户端。
其中,全景图像采集设备的相关信息例如可以包括全景图像采集设备的位置(例如经纬度坐标等)和身份信息中的至少一种信息。其中,身份信息例如是编号(如ID)或名称等。
根据一个实现方式,当匹配成功的全景图像数量大于1时,可以在匹配成功的全景图像之中选择一个来确定搜索结果。例如,可以在匹配成功的全景图像之中选择匹配分数最高的。或者,也可以将匹配成功的至少一帧全景图像发送给发出寻人指令的用户端,并根据该用户端的输入来选择对应的全景图像,以确定搜索结果。
根据一个实现方式,在匹配成功之后,还可以将匹配成功的全景图像采集设备在匹配成功后采集的全景图像实时地发送给发出寻人指令的用户端,以使该用户端通过全景直播方式来寻找待查找目标,方便其实时追踪目标的位置动态。如前所述,若匹配成功的全景图像采集设备多于1个,可以在其中选择一个(如匹配分数最高的或用户选择的)来将其在匹配成功后采集的全景图像实时地发送给发出寻人指令的用户端。
此外,根据一个实现方式,可以获取发出寻人指令的用户端的实时位置作为实时起点位置,并将匹配成功的全景图像采集设备的位置作为当前终点位置,生成该实时起点位置到当前终点位置之间的实时导航路线,以将该导航路线发送给发出寻人指令的用户端以显示。其中,根据两点位置信息生成导航路线的技术例如可以采用现有技术实现,这里不再赘述。
根据一个实现方式,可以预先在每个采集点设置一个全景图像采集设备,且每个全景图像采集设备的高度为预设高度。该预设高度例如可以是80~100公分范围(比如80、90或95等)之间的数值,或者可以是100~120公分(比如100、110或115等)范围之间的数值,或者可以是120~140公分(比如120、130或135等)范围之间的数值,或者可以是140~160公分范围(比如140、150或155等)之间的数值,或者可以是160~180公分范围(比如160、170、175或180等)之间的数值。应当理解的是,本申请所提到的范围可以是包括两端的数值的。
这样,全景图像采集设备的高度可以根据所寻找人群类型设置,例如,寻找人群为儿童时,则全景图像采集设备距离地面的高度设为符合儿童身高的高度,以保证全景图像采集设备可以拍摄到儿童的正脸或者侧脸,如上文所举例子中的100公分等;而当寻找人群为成人时,可以将全景图像采集设备距离地面的高度设为符合成人身高的高度,以保证全景图像采集设备可以拍摄到成年人的正脸或者侧脸,如上文所举例子中的170公分等。
根据另一个实现方式,可以预先在每个采集点设置至少两个全景图像采集设备,且该至少两个全景图像采集设备的高度各不相同。
其中,在每个采集点对应的至少两个全景图像采集设备中,如图3所示,例如可以至少包括第一全景图像采集设备和第二全景图像采集设备。第一全景图像采集设备的高度h1例如可以是80~100公分范围(比如80、90或95等)之间的数值,或者可以是100~120公分(比如100、110或115等)范围之间的数值,或者可以是120~140公分(比如120、130或135等)范围之间的数值。
第二全景图像采集设备的高度h2例如可以是140~160公分范围(比如140、150或155等)之间的数值,或者可以是160~180公分范围(比如160、170、175或180等)之间的数值。
这样,全景图像采集设备的高度可以根据所寻找人群类型设置,例如,第一全景图像采集设备距离地面的高度设为符合儿童身高的高度,以保证第一全景图像采集设备可以拍摄到儿童的正脸或者侧脸,如上文所举例子中的100公分等;第二全景图像采集设备距离地面的高度设为符合成人身高的高度,以保证第二全景图像采集设备可以拍摄到成年人的正脸或者侧脸,如上文所举例子中的170公分等。
相比于现有技术中采用的非全景摄像机,本发明的实施例采用全景图像采集设备,其广视角摄像范围可以保证被查找者不会走入拍摄盲区,在相当长的时间内一直在全景图像采集设备范围内活动,从而保证实时目标跟踪。此外,现有技术中在一个采集点通常仅设置一个摄像机,即使有的设置了多个摄像机,彼此之间也没有设置不同高度,这样就无法针对不同身高的人进行人脸拍摄和识别;相比于此,本发明的实施例当在每个采集点采用两个、三个、五个或更多个摄像机时,将每个采集点处的不同摄像机设置成不同高度,从而针对不同身高人群进行人脸识别,使得寻人更为有效,不会由于所设置采集设备高度不匹配而拍不到目标脸部而使得最终匹配失败,进而导致找不到目标。
此外,根据其他实现方式,也可以预先在每个采集点设置三个或更多个(如4个、5个、8个或10个等)全景图像采集设备,其同一个采集点的不同全景图像采集设备各自的高度也不同。比如,如图4所示,每个采集点可以设置5个全景图像采集设备,分别用A1、A2、A3、A4和A5表示,全景图像采集设备A1的高度例如可以是80~100公分范围(比如80、90或95等)之间的数值,全景图像采集设备A2的高度例如可以是100~120公分(比如100、110或115等)范围之间的数值,全景图像采集设备A3的高度例如可以是120~140公分(比如120、130或135等)范围之间的数值,全景图像采集设备A4的高度例如可以是140~160公分范围(比如140、150或155等)之间的数值,而全景图像采集设备A5的高度例如可以是160~180公分范围(比如160、170、175或180等)之间的数值。
此外,根据本发明的实施例,还可以将搜索结果中对应全景图像采集设备的位置和/或身份信息的文字信息或对应的接入地址发送给发出寻人指令的用户端。
本发明的实施例还提供了一种基于人脸识别和全景视频的目标跟踪系统,该系统包括:图像采集端,所述图像采集端包括预先在预定区域内多个采集点设置的多个全景图像采集设备,其中,每个采集点设有至少一个全景图像采集设备,每个全景图像采集设备适于实时采集其周围360度的全景图像并传输至服务器端;服务器端,所述服务器端适于在接收到寻人指令后,在预定数据库中确定与该寻人指令对应的用户的人脸图像数据作为待查找目标数据,通过将所述至少一个全景图像采集设备实时采集到的每个全景图像采集设备附近预定范围内的全景图像与所述待查找目标数据进行人脸匹配,将匹配成功的全景图像所对应的全景图像采集设备的相关信息作为搜索结果;其中,所述预定数据库中预先存储有进入该预定区域的每个用户的人脸图像数据。
图2示出了本发明的基于人脸识别和全景视频的目标跟踪系统的一个示例的结构框图。
如图2所示,上述系统包括图像采集端和服务器端。此外,上述基于人脸识别和全景视频的目标跟踪系统还可以包括一个或多个用户端,如图2所示,一个或多个用户端在图中采用虚线表示,这是为了表明一个或多个用户端是可选的、而非必须的。其中,图像采集端与服务器端之间的通信例如可以采用有线或无线通信,而服务器端与一个或多个用户端之间的通信可以采用无线网络通信等。
其中,图像采集端包括预先在预定区域内多个采集点设置的多个全景图像采集设备,其中,每个采集点设有至少一个全景图像采集设备,每个全景图像采集设备适于实时采集其周围360度的全景图像并传输至服务器端。
服务器端适于在接收到寻人指令后,在预定数据库中确定与该寻人指令对应的用户的人脸图像数据作为待查找目标数据,通过将至少一个全景图像采集设备实时采集到的每个全景图像采集设备附近预定范围内的全景图像与待查找目标数据进行人脸匹配(例如通过设置一个人脸识别模块来完成该操作),将匹配成功的全景图像所对应的全景图像采集设备的相关信息作为搜索结果。
其中,预定数据库中预先存储有进入该预定区域的每个用户的人脸图像数据。
根据一个实现方式,全景图像采集设备的相关信息例如可以包括全景图像采集设备的位置和身份信息中的至少一种信息。
根据一个实现方式,服务器端还可以适于将搜索结果发送给发出寻人指令的用户端。
根据一个实现方式,该系统还可以包括至少一个人脸图像采集设备,人脸图像采集设备设置于该预定区域的入口处或预设位置处;服务器端适于在每个用户进入该预定区域后通过对应的人脸图像采集设备来获取关于该用户的人脸图像数据。
根据一个实现方式,服务器端可以在每个用户进入该预定区域后,向该用户的用户端发送请求照片指令,以从该用户端获取至少一个人脸图像数据。
根据一个实现方式,服务器端可以预先存储有该预定区域内每个全景图像采集设备的相关信息,并且存储有根据每个全景图像采集设备的相关信息生成的关于该预定区域的全景采集点分布地图,可以将该地图发送给对应的用户端以用于显示。其中,对应的用户端例如是发出寻人指令的用户端,或者可以是进入该预定区域的每个用户的用户端。
根据一个实现方式,服务器端还可以将匹配成功的全景图像采集设备在匹配成功后采集的全景图像实时地发送给发出寻人指令的用户端,以使该用户端通过全景直播方式来寻找待查找目标。
根据一个实现方式,服务器端还可以获取发出寻人指令的用户端的实时位置作为实时起点位置,并将匹配成功的全景图像采集设备的位置作为当前终点位置,生成该实时起点位置到当前终点位置之间的实时导航路线,以将该导航路线发送给发出寻人指令的用户端以显示。
根据一个实现方式,每个采集点可以设置有一个全景图像采集设备,且每个全景图像采集设备的高度为预设高度。其中,预设高度例如在以下范围内:80~100公分之间;或100~120公分之间;或120~140公分之间;或140~160公分之间;或160~180公分之间。
根据一个实现方式,每个采集点可用设置有至少两个全景图像采集设备,且该至少两个全景图像采集设备的高度各不相同。
例如,在每个采集点对应的至少两个全景图像采集设备中至少包括第一全景图像采集设备和第二全景图像采集设备;其中,第一全景图像采集设备的高度在以下范围内:80~100公分之间,或100~120公分之间,或120~140公分之间;第二全景图像采集设备的高度在以下范围内:140~160公分之间,或160~180公分之间。
根据一个实现方式,服务器端还可以将搜索结果中对应全景图像采集设备的位置和/或身份信息的文字信息或对应的接入地址发送给发出寻人指令的用户端。
根据一个实现方式,当匹配成功的全景图像数量大于1时,服务器端可以在匹配成功的全景图像之中选择一个来确定搜索结果。例如,可以在匹配成功的全景图像之中选择匹配分数最高的来选择对应的全景图像,以确定搜索结果。或者,也可以将匹配成功的至少一帧全景图像发送给发出寻人指令的用户端,并根据该用户端的输入来选择对应的全景图像,以确定搜索结果。
综上,本公开提供了以下方案:
方案1、基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法包括:
预先在预定区域内确定多个采集点,在每个采集点设置至少一个全景图像采集设备;
采集进入该预定区域的每个用户的人脸图像数据并存储在预定数据库中;
在接收到寻人指令后,在所述预定数据库中确定与该寻人指令对应的用户的人脸图像数据,作为待查找目标数据;
通过所述至少一个全景图像采集设备实时采集每个全景图像采集设备附近预定范围内的全景图像,并将各个全景图像采集设备采集的全景图像与所述待查找目标数据进行人脸匹配;
当所述至少一个全景图像采集设备实时采集的全景图像中存在至少一帧全景图像与所述待查找目标数据匹配成功后,确定匹配成功的全景图像所对应的全景图像采集设备,将该全景图像采集设备的相关信息作为搜索结果。
方案2、如方案1所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,全景图像采集设备的相关信息包括全景图像采集设备的位置和身份信息中的至少一种信息。
方案3、如方案1或2所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法还包括:
将所述搜索结果发送给发出所述寻人指令的用户端。
方案4、如方案1-3中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,所述采集进入该预定区域的每个用户的人脸图像数据的步骤包括:
在每个用户进入该预定区域后,通过入口处或预设位置处的人脸图像采集设备来获取该用户的人脸图像数据。
方案5、如方案1-3中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,所述采集进入该预定区域的每个用户的人脸图像数据的步骤包括:
在每个用户进入该预定区域后,向该用户的用户端发送请求照片指令,以从该用户端获取至少一个人脸图像数据。
方案6、如方案1-5中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法还包括:
将预存的全景采集点分布地图发送给对应的用户端以用于显示。
方案7、如方案6所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,对应的用户端是发出所述寻人指令的用户端,或进入该预定区域的每个用户的用户端。
方案8、如方案1-7中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法还包括:
将匹配成功的全景图像采集设备在匹配成功后采集的全景图像实时地发送给发出所述寻人指令的用户端,以使该用户端通过全景直播方式来寻找待查找目标。
方案9、如方案8所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法还包括:
获取所述发出所述寻人指令的用户端的实时位置作为实时起点位置,并将匹配成功的全景图像采集设备的位置作为当前终点位置,生成该实时起点位置到当前终点位置之间的实时导航路线,以将该导航路线发送给所述发出所述寻人指令的用户端以显示。
方案10、如方案1-9中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,在每个采集点设置一个全景图像采集设备,且每个全景图像采集设备的高度为预设高度。
方案11、如方案10所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,预设高度在以下范围内:
80~100公分之间;或100~120公分之间;或120~140公分之间;或140~160公分之间;或160~180公分之间。
方案12、如方案1-9中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,在每个采集点设置至少两个全景图像采集设备,且该至少两个全景图像采集设备的高度各不相同。
方案13、如方案12所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,在每个采集点对应的至少两个全景图像采集设备中至少包括第一全景图像采集设备和第二全景图像采集设备;
其中,所述第一全景图像采集设备的高度在以下范围内:80~100公分之间,或100~120公分之间,或120~140公分之间;
所述第二全景图像采集设备的高度在以下范围内:140~160公分之间,或160~180公分之间。
方案14、如方案1-13中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法还包括:
将所述搜索结果中对应全景图像采集设备的位置和/或身份信息的文字信息或对应的接入地址发送给发出所述寻人指令的用户端。
方案15、如方案1-14中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,当匹配成功的全景图像数量大于1时,在所述匹配成功的全景图像之中选择一个来确定搜索结果。
方案16、如方案15所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,在所述匹配成功的全景图像之中选择一个来确定搜索结果的步骤包括:
在所述匹配成功的全景图像之中选择匹配分数最高的;或
将匹配成功的至少一帧全景图像发送给发出所述寻人指令的用户端,并根据该用户端的输入来选择对应的全景图像,以确定搜索结果。
方案17、如方案1-16中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,所述预定区域为预定景区。
方案18、基于人脸识别和全景视频的目标跟踪系统,其特征在于,该系统包括
图像采集端,所述图像采集端包括预先在预定区域内多个采集点设置的多个全景图像采集设备,其中,每个采集点设有至少一个全景图像采集设备,每个全景图像采集设备适于实时采集其周围360度的全景图像并传输至服务器端;
服务器端,所述服务器端适于在接收到寻人指令后,在预定数据库中确定与该寻人指令对应的用户的人脸图像数据作为待查找目标数据,通过将所述至少一个全景图像采集设备实时采集到的每个全景图像采集设备附近预定范围内的全景图像与所述待查找目标数据进行人脸匹配,将匹配成功的全景图像所对应的全景图像采集设备的相关信息作为搜索结果;
其中,所述预定数据库中预先存储有进入该预定区域的每个用户的人脸图像数据。
方案19、如方案18所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,全景图像采集设备的相关信息包括全景图像采集设备的位置和身份信息中的至少一种信息。
方案20、如方案18或19所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,所述服务器端还适于将所述搜索结果发送给发出所述寻人指令的用户端。
方案21、如方案18-20中任一项所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,该系统还包括至少一个人脸图像采集设备,所述人脸图像采集设备设置于该预定区域的入口处或预设位置处;所述服务器端适于在每个用户进入该预定区域后通过对应的人脸图像采集设备来获取关于该用户的人脸图像数据。
方案22、如方案18-20中任一项所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,所述服务器端适于在每个用户进入该预定区域后,向该用户的用户端发送请求照片指令,以从该用户端获取至少一个人脸图像数据。
方案23、如方案18-22中任一项所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,所述服务器端预先存储有该预定区域内每个全景图像采集设备的相关信息以及根据所述每个全景图像采集设备的相关信息生成的关于该预定区域的全景采集点分布地图发送给对应的用户端以用于显示。
方案24、如方案23所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,对应的用户端是发出所述寻人指令的用户端,或进入该预定区域的每个用户的用户端。
方案25、如方案18-24中任一项所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,所述服务器端还适于:将匹配成功的全景图像采集设备在匹配成功后采集的全景图像实时地发送给发出所述寻人指令的用户端,以使该用户端通过全景直播方式来寻找待查找目标。
方案26、如方案25所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,所述服务器端还适于:获取所述发出所述寻人指令的用户端的实时位置作为实时起点位置,并将匹配成功的全景图像采集设备的位置作为当前终点位置,生成该实时起点位置到当前终点位置之间的实时导航路线,以将该导航路线发送给所述发出所述寻人指令的用户端以显示。
方案27、如方案18-26中任一项所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,每个采集点设置有一个全景图像采集设备,且每个全景图像采集设备的高度为预设高度。
方案28、如方案27所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,预设高度在以下范围内:
80~100公分之间;或100~120公分之间;或120~140公分之间;或140~160公分之间;或160~180公分之间。
方案29、如方案18-26中任一项所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,每个采集点设置有至少两个全景图像采集设备,且该至少两个全景图像采集设备的高度各不相同。
方案30、如方案29所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,在每个采集点对应的至少两个全景图像采集设备中至少包括第一全景图像采集设备和第二全景图像采集设备;
其中,所述第一全景图像采集设备的高度在以下范围内:80~100公分之间,或100~120公分之间,或120~140公分之间;
所述第二全景图像采集设备的高度在以下范围内:140~160公分之间,或160~180公分之间。
方案31、如方案18-30中任一项所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,所述服务器端还适于:将所述搜索结果中对应全景图像采集设备的位置和/或身份信息的文字信息或对应的接入地址发送给发出所述寻人指令的用户端。
方案32、如方案18-31中任一项所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,所述服务器端适于:当匹配成功的全景图像数量大于1时,在所述匹配成功的全景图像之中选择一个来确定搜索结果。
方案33、如方案32所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,所述服务器端适于:在所述匹配成功的全景图像之中选择匹配分数最高的来选择对应的全景图像,以确定搜索结果。
方案34、如方案32所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,所述服务器端适于:将匹配成功的至少一帧全景图像发送给发出所述寻人指令的用户端,并根据该用户端的输入来选择对应的全景图像,以确定搜索结果。
方案35、如方案18-34中任一项所述的基于人脸识别和全景视频的目标跟踪系统,其特征在于,该系统还包括一个或多个用户端。
尽管根据有限数量的实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。因此,在不偏离所附权利要求书的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围,对本发明所做的公开是说明性的,而非限制性的,本发明的范围由所附权利要求书限定。

Claims (10)

1.基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法包括:
预先在预定区域内确定多个采集点,在每个采集点设置至少一个全景图像采集设备;
采集进入该预定区域的每个用户的人脸图像数据并存储在预定数据库中;
在接收到寻人指令后,在所述预定数据库中确定与该寻人指令对应的用户的人脸图像数据,作为待查找目标数据;
通过所述至少一个全景图像采集设备实时采集每个全景图像采集设备附近预定范围内的全景图像,并将各个全景图像采集设备采集的全景图像与所述待查找目标数据进行人脸匹配;
当所述至少一个全景图像采集设备实时采集的全景图像中存在至少一帧全景图像与所述待查找目标数据匹配成功后,确定匹配成功的全景图像所对应的全景图像采集设备,将该全景图像采集设备的相关信息作为搜索结果。
2.如权利要求1所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,全景图像采集设备的相关信息包括全景图像采集设备的位置和身份信息中的至少一种信息。
3.如权利要求1或2所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法还包括:
将所述搜索结果发送给发出所述寻人指令的用户端。
4.如权利要求1-3中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法还包括:
将匹配成功的全景图像采集设备在匹配成功后采集的全景图像实时地发送给发出所述寻人指令的用户端,以使该用户端通过全景直播方式来寻找待查找目标。
5.如权利要求1-4中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,该方法还包括:
获取所述发出所述寻人指令的用户端的实时位置作为实时起点位置,并将匹配成功的全景图像采集设备的位置作为当前终点位置,生成该实时起点位置到当前终点位置之间的实时导航路线,以将该导航路线发送给所述发出所述寻人指令的用户端以显示。
6.如权利要求1-5中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,在每个采集点设置一个全景图像采集设备,且每个全景图像采集设备的高度为预设高度。
7.如权利要求6所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,预设高度在以下范围内:
80~100公分之间;或100~120公分之间;或120~140公分之间;或140~160公分之间;或160~180公分之间。
8.如权利要求1-7中任一项所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,在每个采集点设置至少两个全景图像采集设备,且该至少两个全景图像采集设备的高度各不相同。
9.如权利要求8所述的基于人脸识别和全景视频的目标跟踪方法,其特征在于,在每个采集点对应的至少两个全景图像采集设备中至少包括第一全景图像采集设备和第二全景图像采集设备;
其中,所述第一全景图像采集设备的高度在以下范围内:80~100公分之间,或100~120公分之间,或120~140公分之间;
所述第二全景图像采集设备的高度在以下范围内:140~160公分之间,或160~180公分之间。
10.基于人脸识别和全景视频的目标跟踪系统,其特征在于,该系统包括:
图像采集端,所述图像采集端包括预先在预定区域内多个采集点设置的多个全景图像采集设备,其中,每个采集点设有至少一个全景图像采集设备,每个全景图像采集设备适于实时采集其周围360度的全景图像并传输至服务器端;
服务器端,所述服务器端适于在接收到寻人指令后,在预定数据库中确定与该寻人指令对应的用户的人脸图像数据作为待查找目标数据,通过将所述至少一个全景图像采集设备实时采集到的每个全景图像采集设备附近预定范围内的全景图像与所述待查找目标数据进行人脸匹配,将匹配成功的全景图像所对应的全景图像采集设备的相关信息作为搜索结果;
其中,所述预定数据库中预先存储有进入该预定区域的每个用户的人脸图像数据。
CN201711417706.8A 2017-12-25 2017-12-25 基于人脸识别和全景视频的目标跟踪方法和系统 Pending CN108108698A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711417706.8A CN108108698A (zh) 2017-12-25 2017-12-25 基于人脸识别和全景视频的目标跟踪方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711417706.8A CN108108698A (zh) 2017-12-25 2017-12-25 基于人脸识别和全景视频的目标跟踪方法和系统

Publications (1)

Publication Number Publication Date
CN108108698A true CN108108698A (zh) 2018-06-01

Family

ID=62212790

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711417706.8A Pending CN108108698A (zh) 2017-12-25 2017-12-25 基于人脸识别和全景视频的目标跟踪方法和系统

Country Status (1)

Country Link
CN (1) CN108108698A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109186602A (zh) * 2018-08-01 2019-01-11 中控智慧科技股份有限公司 一种用于停车场的导航方法、装置及终端设备
CN109376614A (zh) * 2018-09-29 2019-02-22 爱笔(北京)智能科技有限公司 一种基于人脸的服务提供方法及装置
CN109413495A (zh) * 2018-09-06 2019-03-01 广州虎牙信息科技有限公司 一种登录方法、装置、系统、电子设备及存储介质
CN109727345A (zh) * 2018-11-29 2019-05-07 国政通科技有限公司 一种基于景区实名的游客圈定系统及方法
CN110110669A (zh) * 2019-05-08 2019-08-09 广东赛翼智能科技有限公司 一种基于人脸识别技术的智慧景区游客定位方法及系统
CN110225402A (zh) * 2019-07-12 2019-09-10 青岛一舍科技有限公司 智能保持全景视频中兴趣目标时刻显示的方法及装置
CN110324589A (zh) * 2019-08-06 2019-10-11 嘉应学院 一种旅游景区的监控系统与方法
CN110781265A (zh) * 2019-10-28 2020-02-11 恒大智慧科技有限公司 一种景区寻人方法、装置及存储介质
CN110969048A (zh) * 2018-09-28 2020-04-07 江苏脸萌网络科技有限公司 目标跟踪方法、装置、电子设备及目标跟踪系统
CN111222372A (zh) * 2018-11-26 2020-06-02 珠海格力电器股份有限公司 人员搜寻方法、装置、存储介质和处理器
CN111829504A (zh) * 2019-04-16 2020-10-27 深圳富泰宏精密工业有限公司 飞行器及侦测方法
CN113591651A (zh) * 2021-07-22 2021-11-02 浙江大华技术股份有限公司 抓取图像的方法、图像展示方法、装置和存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103049734A (zh) * 2011-10-12 2013-04-17 杜惠红 一种在公共场所找人的方法及系统
CN105224929A (zh) * 2015-10-10 2016-01-06 北京邮电大学 一种查找人脸照片的方法
US9557811B1 (en) * 2010-05-24 2017-01-31 Amazon Technologies, Inc. Determining relative motion as input
CN106407953A (zh) * 2016-10-14 2017-02-15 蔡璟 一种基于多影像大数据识别的智能寻人系统
CN206164722U (zh) * 2016-09-21 2017-05-10 深圳市泛海三江科技发展有限公司 一种基于人脸识别的商超防盗监控系统
CN107316028A (zh) * 2017-06-30 2017-11-03 广东工业大学 基于移动终端的人群中特定人脸快速定位追踪方法及装置
CN107423674A (zh) * 2017-05-15 2017-12-01 广东数相智能科技有限公司 一种基于人脸识别的寻人方法、电子设备及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9557811B1 (en) * 2010-05-24 2017-01-31 Amazon Technologies, Inc. Determining relative motion as input
CN103049734A (zh) * 2011-10-12 2013-04-17 杜惠红 一种在公共场所找人的方法及系统
CN105224929A (zh) * 2015-10-10 2016-01-06 北京邮电大学 一种查找人脸照片的方法
CN206164722U (zh) * 2016-09-21 2017-05-10 深圳市泛海三江科技发展有限公司 一种基于人脸识别的商超防盗监控系统
CN106407953A (zh) * 2016-10-14 2017-02-15 蔡璟 一种基于多影像大数据识别的智能寻人系统
CN107423674A (zh) * 2017-05-15 2017-12-01 广东数相智能科技有限公司 一种基于人脸识别的寻人方法、电子设备及存储介质
CN107316028A (zh) * 2017-06-30 2017-11-03 广东工业大学 基于移动终端的人群中特定人脸快速定位追踪方法及装置

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109186602A (zh) * 2018-08-01 2019-01-11 中控智慧科技股份有限公司 一种用于停车场的导航方法、装置及终端设备
CN109186602B (zh) * 2018-08-01 2021-05-07 熵基科技股份有限公司 一种用于停车场的导航方法、装置及终端设备
CN109413495A (zh) * 2018-09-06 2019-03-01 广州虎牙信息科技有限公司 一种登录方法、装置、系统、电子设备及存储介质
CN110969048A (zh) * 2018-09-28 2020-04-07 江苏脸萌网络科技有限公司 目标跟踪方法、装置、电子设备及目标跟踪系统
CN109376614A (zh) * 2018-09-29 2019-02-22 爱笔(北京)智能科技有限公司 一种基于人脸的服务提供方法及装置
CN111222372A (zh) * 2018-11-26 2020-06-02 珠海格力电器股份有限公司 人员搜寻方法、装置、存储介质和处理器
CN109727345A (zh) * 2018-11-29 2019-05-07 国政通科技有限公司 一种基于景区实名的游客圈定系统及方法
CN111829504A (zh) * 2019-04-16 2020-10-27 深圳富泰宏精密工业有限公司 飞行器及侦测方法
CN110110669A (zh) * 2019-05-08 2019-08-09 广东赛翼智能科技有限公司 一种基于人脸识别技术的智慧景区游客定位方法及系统
CN110225402A (zh) * 2019-07-12 2019-09-10 青岛一舍科技有限公司 智能保持全景视频中兴趣目标时刻显示的方法及装置
CN110324589A (zh) * 2019-08-06 2019-10-11 嘉应学院 一种旅游景区的监控系统与方法
CN110781265A (zh) * 2019-10-28 2020-02-11 恒大智慧科技有限公司 一种景区寻人方法、装置及存储介质
CN113591651A (zh) * 2021-07-22 2021-11-02 浙江大华技术股份有限公司 抓取图像的方法、图像展示方法、装置和存储介质

Similar Documents

Publication Publication Date Title
CN108108698A (zh) 基于人脸识别和全景视频的目标跟踪方法和系统
CN106550182B (zh) 共享式无人机观景系统
CN106657923B (zh) 基于位置的场景切换式共享观景系统
CN107197153B (zh) 一种照片的拍摄方法及拍摄装置
CN105578027B (zh) 一种拍照方法及装置
CN105981368A (zh) 在成像装置中的照片构图和位置引导
JP2017507557A (ja) 高解像度の動画ストリームを自身の端末で視聴するユーザの体感品質を向上するためのプロセス
US20130201182A1 (en) Image display apparatus, imaging apparatus, image display method, control method for imaging apparatus, and program
CN112702521B (zh) 图像拍摄方法及装置、电子设备、计算机可读存储介质
KR20190127865A (ko) 가상 도구 할당 방법, 서버, 클라이언트 및 저장 매체
WO2013139100A1 (zh) 基于云服务的智能摄影方法、装置及移动终端
CN108955715A (zh) 导航视频生成方法、视频导航方法和系统
CN102685207A (zh) 基于云服务的智能摄影方法和云服务设备
CN106327454A (zh) 合成图像的方法和装置
CN109684494A (zh) 一种景区寻人方法、系统及云端服务器
CN102831816B (zh) 一种提供实时场景地图的装置
CN106657792B (zh) 共享式观景装置
US20170244895A1 (en) System and method for automatic remote assembly of partially overlapping images
CN108924590A (zh) 视频播放及拍照系统
KR20170143439A (ko) 3차원 공간 정보 구축을 위한 빅데이터 시스템의 연계 장치 및 방법
WO2016192467A1 (zh) 一种播放视频的方法及装置
TW201823929A (zh) 移動物件的虛擬訊息遠距管理方法與應用系統
CN110191284B (zh) 对房屋进行数据采集的方法、装置、电子设备和存储介质
CN106777172A (zh) 一种视频时空检索方法
Kollert et al. Mapping of 3D eye-tracking in urban outdoor environments

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 266100 Block C 200-43, Chuangke Street, Qingdao, 306 Ningxia Road, Laoshan District, Qingdao City, Shandong Province

Applicant after: QINGDAO YISPACE TECHNOLOGY Co.,Ltd.

Address before: 150016 Heilongjiang Province, Harbin Economic Development Zone haping Road District Dalian road and Xingkai road junction

Applicant before: HARBIN YISHE TECHNOLOGY Co.,Ltd.

CB02 Change of applicant information
RJ01 Rejection of invention patent application after publication

Application publication date: 20180601

RJ01 Rejection of invention patent application after publication