CN110246292A - 家庭视频监控方法、装置及存储介质 - Google Patents

家庭视频监控方法、装置及存储介质 Download PDF

Info

Publication number
CN110246292A
CN110246292A CN201910346426.5A CN201910346426A CN110246292A CN 110246292 A CN110246292 A CN 110246292A CN 201910346426 A CN201910346426 A CN 201910346426A CN 110246292 A CN110246292 A CN 110246292A
Authority
CN
China
Prior art keywords
identification
personnel
information
incidence relation
monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910346426.5A
Other languages
English (en)
Other versions
CN110246292B (zh
Inventor
孙强
王雪春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201910346426.5A priority Critical patent/CN110246292B/zh
Publication of CN110246292A publication Critical patent/CN110246292A/zh
Application granted granted Critical
Publication of CN110246292B publication Critical patent/CN110246292B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Alarm Systems (AREA)

Abstract

本发明提供了一种家庭视频监控方法、装置及存储介质，涉及视频监控技术领域，其中方法包括：获得与第一被监控人员相对应的第一人脸图像信息、第一手机标识信息，建立第一关联关系、第二关联关系；根据第一关联关系对第二被监控人员的第二人脸特征进行匹配处理，进行第一身份识别；基于第一身份识别的结果确定是否获得与第二被监控人员相对应的第二手机标识信息并根据第二关联关系进行匹配处理，进行第二身份识别。本发明的方法、装置以及存储介质，基于监控视频和手机标识信息对进入室内的人员进行综合识别，可以根据监控安全处理级别进行相应地处理，可以提高识别的效率和准确率，能够提高家庭的安全，并可以为寻找嫌疑人员等提供帮助。

Description

家庭视频监控方法、装置及存储介质
技术领域
本发明涉及视频监控技术领域，尤其涉及一种家庭视频监控方法、装置及存储介质。
背景技术
随着生活水平的提高和社会关系的日益复杂，人们对家庭安全防护越来越重视。家庭安全防护系统可以通过报警主机、摄像机、读卡器、门禁控制器、接警中心等为住宅提供入侵报警服务。目前，家庭视频监控系统应用地比较广泛，但是现有的家庭视频监控系统中的摄像装置主要用于采集家庭环境的图像并存储视频历史信息，当家庭发生盗窃等后，能够通过回放视频历史信息查看入侵者的信息。现有的家庭视频监控系统不能在进入者等进入室内后对进入者等进行自动识别，进而不能向用户进行报警，使得用户不能做出应急处理，难以减少损失。
发明内容
有鉴于此，本发明提供一种家庭视频监控方法、装置及存储介质，用于解决不能自动对进入者进行身份识别的问题。
根据本发明的一个方面，提供一种家庭视频监控方法，包括：获得用户设置的与第一被监控人员相对应的第一人脸图像信息、与所述第一被监控人员相对应的第一手机标识信息；从所述第一人脸图像信息中提取第一人脸特征，建立所述第一人脸特征与所述第一被监控人员身份信息之间的第一关联关系；建立所述第一手机标识信息与所述第一被监控人员身份信息之间的第二关联关系；根据用户设置的监控安全处理级别判断是否进行安全识别处理，如果是，则根据所述第一关联关系对从监控图像中提取的第二被监控人员的第二人脸特征进行匹配处理，进行第一身份识别；基于所述第一身份识别的结果确定是否获得与所述第二被监控人员相对应的第二手机标识信息并根据所述第二关联关系进行匹配处理，进行第二身份识别。
可选地，如果监控安全处理级别为第一级别，则不进行第一身份识别和第二身份识别；如果监控安全处理级别为第二级别，则在进行第一身份识别或第二身份识别后，判断所述第二被监控人员是否包含有所述第一被监控人员，如果否，则向用户进行报警；如果监控安全处理级别为第三级别，则在进行第一身份识别或第二身份识别后，向用户进行报警。
可选地，所述进行第一身份识别包括：如果所述监控安全处理级别为第二级别或第三级别，则从所述监控图像中提取所述第二人脸特征，计算所述第二人脸特征与所述第一关联关系中的所述第一人脸特征的相似度；如果所述相似度大于或等于预设的相似度阈值，则将所述第一关联关系中的所述第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定所述第一身份识别成功；如果所述第二人脸特征与所述第一关联关系中的全部第一人脸特征的相似度都小于所述相似度阈值，则确定所述第一身份识别失败。
可选地，所述进行第二身份识别包括：如果所述第一身份识别失败，通过家庭WIFI设备采集室内范围内的与所述第二被监控人员相对应的第二手机标识信息；将所述第二手机标识信息与所述第二关联关系中的所述第一手机标识信息进行匹配，如果匹配成功，则将所述第二关联关系中的所述第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定所述第二身份识别成功；如果所述第二手机标识信息与所述第二关联关系中的全部第一手机标识信息都匹配失败，则确定所述第二身份识别失败。
可选地，获取采集的所述监控图像以及与所述监控图像相对应的第一时间标签；获取家庭WIFI设备采集的所述第二手机标识信息以及与采集时间相对应的第二时间标签；将第一时间标签与第二时间标签进行关联，并将所述第二手机标识信息添加在所述监控图像中生成视频存储文件并存储。
可选地，当对嫌疑人员进行确认时，获得指定时间段内的所述视频存储文件，从此视频存储文件中获得嫌疑人员的图像信息或与嫌疑人员相对应的所述第二手机标识信息，用以对所述嫌疑人进行追踪。
可选地，所述对所述嫌疑人进行追踪包括：调取位于周边或其他地区摄像头采集的、在嫌疑人员出现的时间上相关联的视频图像信息，利用所述视频图像信息和嫌疑人员的图像信息对嫌疑人员进行追踪；或，调取周边或其他地区的WIFI设备探测到的手机号码或MAC地址，利用此手机号码或MAC地址和与嫌疑人员相对应的所述第二手机标识信息对嫌疑人员进行追踪。
根据本发明的另一方面，提供一种家庭视频监控装置，包括：图像信息获取模块，用于获得用户设置的与第一被监控人员相对应的第一人脸图像信息；终端信息获得模块，用于获得与所述第一被监控人员相对应的第一手机标识信息；第一关联建立模块，用于从所述第一人脸图像信息中提取第一人脸特征，建立所述第一人脸特征与所述第一被监控人员身份信息之间的第一关联关系；第二关联建立模块，用于建立所述第一手机标识信息与所述第一被监控人员身份信息之间的第二关联关系；第一身份识别模块，用于根据用户设置的监控安全处理级别判断是否进行安全识别处理，如果是，则根据所述第一关联关系对从监控图像中提取的第二被监控人员的第二人脸特征进行匹配处理，进行第一身份识别；第二身份识别模块，用于基于所述第一身份识别的结果确定是否获得与所述第二被监控人员相对应的第二手机标识信息并根据所述第二关联关系进行匹配处理，进行第二身份识别。
可选地，如果监控安全处理级别为第一级别，则所述第一身份识别模块不进行第一身份识别并且所述第二身份识别模块不进行第二身份识别；所述装置，包括：报警模块，用于如果监控安全处理级别为第二级别，则在所述第一身份识别模块进行第一身份识别或所述第二身份识别模块进行第二身份识别后，判断所述第二被监控人员是否包含有所述第一被监控人员，如果否，则向用户进行报警；如果监控安全处理级别为第三级别，则在所述第一身份识别模块进行第一身份识别或所述第二身份识别模块进行第二身份识别后，向用户进行报警。
可选地，所述第一身份识别模块，用于如果所述监控安全处理级别为第二级别或第三级别，则从所述监控图像中提取所述第二人脸特征，计算所述第二人脸特征与所述第一关联关系中的所述第一人脸特征的相似度；如果所述相似度大于或等于预设的相似度阈值，则将所述第一关联关系中的所述第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定所述第一身份识别成功；如果所述第二人脸特征与所述第一关联关系中的全部第一人脸特征的相似度都小于所述相似度阈值，则确定所述第一身份识别失败。
可选地，所述第二身份识别模块，用于如果所述第一身份识别失败，通过家庭WIFI设备采集室内范围内的与所述第二被监控人员相对应的第二手机标识信息；将所述第二手机标识信息与所述第二关联关系中的所述第一手机标识信息进行匹配，如果匹配成功，则将所述第二关联关系中的所述第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定所述第二身份识别成功；如果所述第二手机标识信息与所述第二关联关系中的全部第一手机标识信息都匹配失败，则确定所述第二身份识别失败。
可选地，视频信息存储模块，用于获取采集的所述监控图像以及与所述监控图像相对应的第一时间标签；获取家庭WIFI设备采集的所述第二手机标识信息以及与采集时间相对应的第二时间标签；将第一时间标签与第二时间标签进行关联，并将所述第二手机标识信息添加在所述监控图像中生成视频存储文件并存储。
可选地，嫌疑人追踪模块，用于当对嫌疑人员进行确认时，获得指定时间段内的所述视频存储文件，从此视频存储文件中获得嫌疑人员的图像信息或与嫌疑人员相对应的所述第二手机标识信息，用以对所述嫌疑人进行追踪。
可选地，所述嫌疑人追踪模块，还用于调取位于周边或其他地区摄像头采集的、在嫌疑人员出现的时间上相关联的视频图像信息，利用所述视频图像信息和嫌疑人员的图像信息对嫌疑人员进行追踪；或，调取周边或其他地区的WIFI设备探测到的手机号码或MAC地址，利用此手机号码或MAC地址和与嫌疑人员相对应的所述第二手机标识信息对嫌疑人员进行追踪。
根据本发明的又一方面，提供一种家庭视频监控装置，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如上所述方法的步骤。
根据本发明的再一方面，提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述指令被处理器执行如上所述的方法。
本发明的家庭视频监控方法、装置及存储介质，基于监控视频和手机标识信息对进入室内的人员进行综合识别，可以根据监控安全处理级别进行相应地处理，能向用户发送报警消息与室内图片等，用户能够决定进行后续的处理，可以提高识别的效率和准确率，能够提高家庭的安全，并可以为寻找嫌疑人员等提供帮助，提高用户的使用感受度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为根据本发明的家庭视频监控方法的一个实施例的流程示意图；
图2为根据本发明的家庭视频监控方法的一个实施例中的进行第一身份识别的流程示意图；
图3为根据本发明的家庭视频监控方法的一个实施例中的进行第二身份识别的流程示意图；
图4为根据本发明的家庭视频监控方法的一个实施例中的生成视频存储文件的流程示意图；
图5为根据本发明的家庭视频监控装置的一个实施例的模块示意图；
图6为根据本发明的家庭视频监控装置的另一个实施例的模块示意图。
具体实施方式
下面参照附图对本发明进行更全面的描述，其中说明本发明的示例性实施例。下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。下面结合各个图和实施例对本发明的技术方案进行多方面的描述。
下文中的“第一”、“第二”等仅用于描述上相区别，并没有其它特殊的含义。
本发明中的手机标识信息可以为手机号码或手机MAC地址等信息。图1为根据本发明的家庭视频监控方法的一个实施例的流程示意图，如图1所示：
步骤101，获得用户设置的与第一被监控人员相对应的第一人脸图像信息、与第一被监控人员相对应的第一手机号码或第一手机MAC地址信息。第一被监控人员可以为家庭成员、好友等。
步骤102，从第一人脸图像信息中提取第一人脸特征，建立第一人脸特征与第一被监控人员身份信息之间的第一关联关系。第一被监控人员身份信息可以为家庭成员、好友等的身份信息，身份信息可以包括姓名、关系、职业等信息。
步骤103，建立第一手机号码或第一手机MAC地址信息与第一被监控人员身份信息之间的第二关联关系。
步骤104，根据用户设置的监控安全处理级别判断是否进行安全识别处理，如果是，则根据第一关联关系对从监控图像中提取的第二被监控人员的第二人脸特征进行匹配处理，进行第一身份识别。监控图像可以通过在室内设置的摄像头等采集获得。
步骤105，基于第一身份识别的结果确定是否获得与第二被监控人员相对应的第二手机号码或第二手机MAC地址信息并根据第二关联关系进行匹配处理，进行第二身份识别。
可以通过家庭WIFI设备等获得与第二被监控人员相对应的第二手机号码或第二手机MAC地址信息，第二被监控人员为进入室内的人员。家庭WIFI设备可以为WIFI探针设备、家庭WIFI热点等。
在一个实施例中，监控安全处理级别可以设置多种，基于不同的级别可以有多种对应处理方法。例如，如果监控安全处理级别为第一级别，则不进行第一身份识别和第二身份识别；如果监控安全处理级别为第二级别，则在进行第一身份识别或第二身份识别后，判断第二被监控人员是否包含有第一被监控人员，如果否，则向用户进行报警；如果监控安全处理级别为第三级别，则在进行第一身份识别或第二身份识别后，向用户进行报警。报警可以为多种，例如向用户发送报警短信等，由用户决定做后续的处理。
对于人脸识别可以采用多种方法。例如，对比从监控图像中提取第二人脸特征与第一人脸特征的相似度，基于相似度判断是否匹配，可以采用现有的多种方法计算相似度。图2为根据本发明的家庭视频监控方法的一个实施例中的进行第一身份识别的流程示意图，如图2所示：
步骤201，如果监控安全处理级别为第二级别或第三级别，则从监控图像中提取第二人脸特征，计算第二人脸特征与第一关联关系中的第一人脸特征的相似度。
步骤202，如果相似度大于或等于预设的相似度阈值，则将第一关联关系中的第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定第一身份识别成功。相似度阈值为用户设置的阈值，相似度阈值可以为80％等。
步骤203，如果第二人脸特征与第一关联关系中的全部第一人脸特征的相似度都小于相似度阈值，则确定第一身份识别失败。
例如，计算第二人脸特征B与第一关联关系中的第一人脸特征A的相似度为85％，大于相似度阈值80％，获得第一关联关系中与第一人脸特征A对应的第一被监控人员身份信息为家属C的信息，则确定与此第二人脸特征B相对应的第二被监控人员身份信息为家属C的信息，确定第一身份识别成功。如果第二人脸特征B与第一关联关系中的全部第一人脸特征的相似度都小于相似度阈值80％，则确定第一身份识别失败。
图3为根据本发明的家庭视频监控方法的一个实施例中的进行第二身份识别的流程示意图，如图3所示：
步骤301，如果第一身份识别失败，通过家庭WIFI设备采集室内范围内的与第二被监控人员相对应的第二手机号码或第二手机MAC地址信息。
步骤302，将第二手机号码或第二手机MAC地址信息与第二关联关系中的第一手机号码或第一手机MAC地址信息进行匹配。
步骤303，如果匹配成功，则将第二关联关系中的第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定第二身份识别成功。
步骤304，如果第二手机号码或第二手机MAC地址信息与第二关联关系中的全部第一手机号码或第一手机MAC地址信息都匹配失败，则确定第二身份识别失败。
如果进入室内的第二被监控人员带有口罩或第二被监控人员的衣领、帽子等遮住面部，当进行第一身份识别失败时，不能确定进入室内的第二被监控人员不为第一被监控人员，则需要进行第二身份识别成功。
例如，通过家庭WIFI设备采集与第二被监控人员F相对应的第二手机号码1221111111；将第二手机号码1221111111与第二关联关系中的第一手机号码进行匹配。如果第二关联关系中具有第一手机号码1221111111，则匹配成功，获得与第一手机号码1221111111对应的第一被监控人员身份信息为好友G的信息，则将与第二手机号码1221111111对应的第二被监控人员F的身份信息确定为好友G的信息，确定第二身份识别成功。如果第二手机号码1221111111与第二关联关系中的全部第一手机号码都匹配失败，则确定第二身份识别失败。
在一个实施例中，将第一被监控人员(包括有家庭主要成员、亲戚好友以及其他用户认为需要识别的人)的面部信息预先录入视频监控系统，将第一被监控人员的手机号码和MAC号码预先存储在摄像头系统，按照对安全系数的要求，设置与安全系数相对应的监控安全处理级别，用户可以选择开启哪个监控安全处理级别。
监控安全处理级别的第一级别为最低安全系数所对应的最低安全处理级别，当用户开启的监控安全处理级别为第一级别时，不对人脸进行识别和报警，例如，当用户家庭成员都在家中作息时开启的监控安全处理级别为第一级别，不对监控图像进行处理并不向用户发送任何报警信息。
监控安全处理级别的第二级别为中等安全系数所对应的中等安全处理级别，当用户开启的监控安全处理级别为第二级别时，当第一身份识别成功或第二身份识别成功，即确定从监控图像中提取第二人脸特征对应的第二被监控人员身份信息为预设的第一被监控人员身份信息，不进行报警。如果第一身份识别和第二身份识别都失败，则向用户进行报警，报警方式可以是发出报警提醒信息，或者拍摄第二被监控人员的图片并向用户发送短信进行报警。
监控安全处理级别的第三级别为最高安全系数所对应的最高安全处理级别，当用户外出、家里无人时，用户开启的监控安全处理级别为第三级别。当确定家里有人(包括第一被监控人员和第二被监控人员)进入时，即向用户发送信息进行报警，同时进行第一身份识别、第二身份识别。
在一个实施例中，如果当前设置的监控安全处理级别为第二级别或第三级别，从监控图像中提取第二被监控人员的人脸特征信息，计算第二被监控人员的人脸特征信息与第一关联关系中的第一人脸特征的相似度，进行第一身份识别。当基于图像识别出的第二被监控人员身份信息为第一被监控人员身份信息时，如果当前设置的监控安全处理级别为第三级别，则向用户发送信息进行报警，并且向用户发送识别出的第一被监控人员身份信息以及室内图片；如果当前设置的监控安全处理级别为第二级别，则不向用户发送信息。
如果第一身份识别失败，不能准确识别第二被监控人员的身份信息(例如基于图像识别判断用户带有口罩、帽子、围巾等)，通过家庭WIFI设备采集的室内范围内的与第二被监控人员相对应的第二手机号码或第二手机MAC地址信息，利用第二手机号码或第二手机MAC地址信息作为人物识别的依据。如果第二手机号码或第二手机MAC地址信息与第二关联关系中的第一手机号码或第一手机MAC地址信息匹配成功，则将第二关联关系中的第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定第二身份识别成功。
当基于第二手机号码或第二手机MAC地址信息确定只有第一被监控人员(家庭或好友等)在室内并且没有其他人员在室内，如果当前设置的监控安全处理级别为第三级别，则向用户发送信息进行报警，并发送室内图片；如果当前设置的监控安全处理级别为第二级别，则不向用户发送报警信息。
图4为根据本发明的家庭视频监控方法的一个实施例中的生成视频存储文件的流程示意图，如图4所示：
步骤401，获取采集的监控图像以及与监控图像相对应的第一时间标签。
步骤402，获取家庭WIFI设备采集的第二手机号码或第二手机MAC地址信息以及与采集时间相对应的第二时间标签。
步骤403，将第一时间标签与第二时间标签进行关联，并将第二手机号码或第二手机MAC地址信息添加在监控图像中生成视频存储文件并存储。
将第一时间标签与第二时间标签进行关联，可以基于关联关系将第二手机号码或第二手机MAC地址信息加入到监控图像信息的帧索引文件中并存储，或发送到相关的地点，用于日后进行检索和查找。例如，可以将采集的视频图像按照1小时为间隔进行分段存储，获取在某一小时内采集的视频图像信息，以及与此视频图像信息相对应的第一时间标签(例如20181220-10:00-11:00)，生成监控图像信息；可以将在每1小时内采集的手机的号码和MAC地址的信息进行存储，获取wifi设备在每小时内采集的第二手机号码或第二手机MAC地址信息以及与采集时间相对应的第二时间标签(例如20181220-10:00-11:00)，将第一时间标签与第二时间标签进行关联，即将在相同时间段内采集的监控图像、第二手机号码或第二手机MAC地址信息进行关联，将第二手机号码或第二手机MAC地址信息加入到监控图像信息的帧索引文件中生成视频存储文件并存储。
采集的监控图像可以包括视频帧和帧索引文件等，视频文件可以为mp4等，可以将监控图形、第二手机号码或第二手机MAC地址信息以时间线索进行合并，将第二手机号码或第二手机MAC地址信息插入帧索引文件中，生成视频存储文件。
在一个实施例中，当对嫌疑人员进行确认时，获得指定事件段内的视频存储文件，从此视频存储文件中获得嫌疑人员的图像信息以及与嫌疑人员相对应的第二手机号码或第二手机MAC地址信息，用以对嫌疑人进行追踪。可以调取位于周边或其他地区摄像头采集的、在嫌疑人员出现的时间上相关联的视频图像信息，利用视频图像信息和嫌疑人员的图像信息对嫌疑人员进行追踪；或者，调取周边或其他地区的WIFI设备探测到的手机号码或MAC地址，利用此手机号码或MAC地址和与嫌疑人员相对应的第二手机号码或第二手机MAC地址信息对嫌疑人员进行追踪。
例如，当家中发生偷盗等事件后，确实发生偷盗等事件的时间段，调出与此时间段内的视频存储文件，根据偷盗等事件出现的时间，对嫌疑人员进行追查。从视频存储文件中获取嫌疑人图像特征，调取周边不同地点的摄像头采集的、时间上相关联的视频图像信息，利用视频图像信息和嫌疑人图像特征对嫌疑人进行追踪。
可以基于嫌疑人的第二手机号码或第二手机MAC地址信息获取身份信息，通过手机在运营商的开户信息获取嫌疑人的身份信息，包括身份证信息等。也可以确定嫌疑人出现的时间和与嫌疑人相对应的第二手机号码或第二手机MAC地址信息，调取周边或其他地区的WIFI设备探测到手机号码和MAC地址信息；如果周边或其他地区的WIFI设备探测到手机号码和MAC地址信息中包含嫌疑人的第二手机号码或第二手机MAC地址信息，则可以对嫌疑人进行追踪，并可以在周边或其他地区的视频监控设备中提取嫌疑人照片，方便案件侦破、取证。
在一个实施例中，本发明提供一种家庭视频监控装置50，包括：图像信息获取模块51、终端信息获得模块52、第一关联建立模块53、第二关联建立模块54、第一身份识别模块55、第二身份识别模块56、报警模块57、视频信息存储模块58和嫌疑人追踪模块59。
图像信息获取模块51获得用户设置的与第一被监控人员相对应的第一人脸图像信息；终端信息获得模块52获得与第一被监控人员相对应的第一手机号码或第一手机MAC地址信息。第一关联建立模块53从第一人脸图像信息中提取第一人脸特征，建立第一人脸特征与第一被监控人员身份信息之间的第一关联关系。第二关联建立模块54建立第一手机号码或第一手机MAC地址信息与第一被监控人员身份信息之间的第二关联关系。
第一身份识别模块55根据用户设置的监控安全处理级别判断是否进行安全识别处理，如果是，则根据第一关联关系对从监控图像中提取的第二被监控人员的第二人脸特征进行匹配处理，进行第一身份识别。第二身份识别模块56基于第一身份识别的结果确定是否获得与第二被监控人员相对应的第二手机号码或第二手机MAC地址信息并根据第二关联关系进行匹配处理，进行第二身份识别。
如果监控安全处理级别为第一级别，则第一身份识别模块55不进行第一身份识别并且第二身份识别模块56不进行第二身份识别。如果监控安全处理级别为第二级别，则在第一身份识别模块55进行第一身份识别或第二身份识别模块56进行第二身份识别后，判断第二被监控人员是否包含有第一被监控人员，如果否，则报警模块57向用户进行报警。如果监控安全处理级别为第三级别，则在第一身份识别模块55进行第一身份识别或第二身份识别模块56进行第二身份识别后，报警模块57向用户进行报警。
在一个实施例中，如果监控安全处理级别为第二级别或第三级别，则第一身份识别模块55从监控图像中提取第二人脸特征，计算第二人脸特征与第一关联关系中的第一人脸特征的相似度。如果相似度大于或等于预设的相似度阈值，则第一身份识别模块55将第一关联关系中的第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定第一身份识别成功。如果第二人脸特征与第一关联关系中的全部第一人脸特征的相似度都小于相似度阈值，则第一身份识别模块55确定第一身份识别失败。
如果第一身份识别失败，第二身份识别模块56通过家庭WIFI设备采集室内范围内的与第二被监控人员相对应的第二手机号码或第二手机MAC地址信息。第二身份识别模块56将第二手机号码或第二手机MAC地址信息与第二关联关系中的第一手机号码或第一手机MAC地址信息进行匹配，如果匹配成功，则第二身份识别模块56将第二关联关系中的第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定第二身份识别成功。如果第二手机号码或第二手机MAC地址信息与第二关联关系中的全部第一手机号码或第一手机MAC地址信息都匹配失败，则第二身份识别模块56确定第二身份识别失败。
在一个实施例中，视频信息存储模块58获取采集的监控图像以及与监控图像相对应的第一时间标签。视频信息存储模块58获取家庭WIFI设备采集的第二手机号码或第二手机MAC地址信息以及与采集时间相对应的第二时间标签。视频信息存储模块58将第一时间标签与第二时间标签进行关联，并将第二手机号码或第二手机MAC地址信息添加在监控图像中生成视频存储文件并存储。
当对嫌疑人员进行确认时，嫌疑人追踪模块59获得指定事件段内的视频存储文件，从此视频存储文件中获得嫌疑人员的图像信息以及与嫌疑人员相对应的第二手机号码或第二手机MAC地址信息，用以对嫌疑人进行追踪。
嫌疑人追踪模块59调取位于周边或其他地区摄像头采集的、在嫌疑人员出现的时间上相关联的视频图像信息，利用视频图像信息和嫌疑人员的图像信息对嫌疑人员进行追踪；或，嫌疑人追踪模块59调取周边或其他地区的WIFI设备探测到的手机号码或MAC地址，利用此手机号码或MAC地址和与嫌疑人员相对应的第二手机号码或第二手机MAC地址信息对嫌疑人员进行追踪。
在一个实施例中，如图6所示，本发明提供一种家庭视频监控装置，包括存储器61和处理器62，存储器61用于存储指令，处理器62耦合到存储器61，处理器62被配置为基于存储器61存储的指令执行实现上述的家庭视频监控方法。
存储器61可以为高速RAM存储器、非易失性存储器(non-volatile memory)等，存储器61也可以是存储器阵列。存储器61还可能被分块，并且块可按一定的规则组合成虚拟卷。处理器62可以为中央处理器CPU，或专用集成电路ASIC(Application SpecificIntegrated Circuit)，或者是被配置成实施本发明的家庭视频监控方法的一个或多个集成电路。
在一个实施例中，本发明提供一种计算机可读存储介质，计算机可读存储介质存储有计算机指令，指令被处理器执行如上任一实施例的家庭视频监控方法。
上述实施例中的家庭视频监控方法、装置及存储介质，基于监控视频和手机标识信息对进入室内的人员进行综合识别，可以根据监控安全处理级别进行相应地处理，能向用户发送报警消息与室内图片等，用户能够决定进行后续的处理，可以提高识别的效率和准确率，能够提高家庭的安全，并可以为寻找嫌疑人员等提供帮助，提高用户的使用感受度。
可能以许多方式来实现本发明的方法和系统。例如，可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本发明的方法和系统。用于方法的步骤的上述顺序仅是为了进行说明，本发明的方法的步骤不限于以上具体描述的顺序，除非以其它方式特别说明。此外，在一些实施例中，还可将本发明实施为记录在记录介质中的程序，这些程序包括用于实现根据本发明的方法的机器可读指令。因而，本发明还覆盖存储用于执行根据本发明的方法的程序的记录介质。
本发明的描述是为了示例和描述起见而给出的，而并不是无遗漏的或者将本发明限于所发明的形式。很多修改和变化对于本领域的普通技术人员而言是显然的。选择和描述实施例是为了更好说明本发明的原理和实际应用，并且使本领域的普通技术人员能够理解本发明从而设计适于特定用途的带有各种修改的各种实施例。

Claims (10)

1.一种家庭视频监控方法，其特征在于，包括：
获得用户设置的与第一被监控人员相对应的第一人脸图像信息、与第一被监控人员相对应的第一手机标识信息；
从所述第一人脸图像信息中提取第一人脸特征，建立所述第一人脸特征与所述第一被监控人员身份信息之间的第一关联关系；
建立所述第一手机标识信息与所述第一被监控人员身份信息之间的第二关联关系；
根据用户设置的监控安全处理级别判断是否进行安全识别处理，如果是，则根据所述第一关联关系对从监控图像中提取的第二被监控人员的第二人脸特征进行匹配处理，进行第一身份识别；
基于所述第一身份识别的结果确定是否获得与所述第二被监控人员相对应的第二手机标识信息并根据所述第二关联关系进行匹配处理，进行第二身份识别。
2.如权利要求1所述的方法，其特征在于，还包括：
如果监控安全处理级别为第一级别，则不进行第一身份识别和第二身份识别；
如果监控安全处理级别为第二级别，则在进行第一身份识别或第二身份识别后，判断所述第二被监控人员是否包含有所述第一被监控人员，如果否，则向用户进行报警；
如果监控安全处理级别为第三级别，则在进行第一身份识别或第二身份识别后，向用户进行报警。
3.如权利要求2所述的方法，其特征在于，所述进行第一身份识别包括：
如果所述监控安全处理级别为第二级别或第三级别，则从所述监控图像中提取所述第二人脸特征，计算所述第二人脸特征与所述第一关联关系中的所述第一人脸特征的相似度；
如果所述相似度大于或等于预设的相似度阈值，则将所述第一关联关系中的所述第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定所述第一身份识别成功；
如果所述第二人脸特征与所述第一关联关系中的全部第一人脸特征的相似度都小于所述相似度阈值，则确定所述第一身份识别失败。
4.如权利要求3所述的方法，其特征在于，所述进行第二身份识别包括：
如果所述第一身份识别失败，通过家庭WIFI设备采集室内范围内的与所述第二被监控人员相对应的第二手机标识信息；
将所述第二手机标识信息与所述第二关联关系中的所述第一手机标识信息进行匹配，如果匹配成功，则将所述第二关联关系中的所述第一被监控人员身份信息作为与此第二人脸特征相对应的第二被监控人员身份信息，确定所述第二身份识别成功；
如果所述第二手机标识信息与所述第二关联关系中的全部第一手机标识信息都匹配失败，则确定所述第二身份识别失败。
5.如权利要求4所述的方法，其特征在于，还包括：
获取采集的所述监控图像以及与所述监控图像相对应的第一时间标签；
获取家庭WIFI设备采集的所述第二手机标识信息以及与采集时间相对应的第二时间标签；
将第一时间标签与第二时间标签进行关联，并将所述第二手机标识信息添加在所述监控图像中生成视频存储文件并存储。
6.如权利要求5所述的方法，其特征在于，还包括：
当对嫌疑人员进行确认时，获得指定时间段内的所述视频存储文件，从此视频存储文件中获得嫌疑人员的图像信息或与嫌疑人员相对应的所述第二手机标识信息，用以对所述嫌疑人进行追踪。
7.如权利要求6所述的方法，其特征在于，所述对所述嫌疑人进行追踪包括：
调取位于周边或其他地区摄像头采集的、在嫌疑人员出现的时间上相关联的视频图像信息，利用所述视频图像信息和嫌疑人员的图像信息对嫌疑人员进行追踪；或，
调取周边或其他地区的WIFI设备探测到的手机号码或MAC地址，利用此手机号码或MAC地址和与嫌疑人员相对应的所述第二手机标识信息对嫌疑人员进行追踪。
8.一种家庭视频监控装置，其特征在于，包括：
图像信息获取模块，用于获得用户设置的与第一被监控人员相对应的第一人脸图像信息；
终端信息获得模块，用于获得与所述第一被监控人员相对应的第一手机标识信息；
第一关联建立模块，用于从所述第一人脸图像信息中提取第一人脸特征，建立所述第一人脸特征与所述第一被监控人员身份信息之间的第一关联关系；
第二关联建立模块，用于建立所述第一手机标识信息与所述第一被监控人员身份信息之间的第二关联关系；
第一身份识别模块，用于根据用户设置的监控安全处理级别判断是否进行安全识别处理，如果是，则根据所述第一关联关系对从监控图像中提取的第二被监控人员的第二人脸特征进行匹配处理，进行第一身份识别；
第二身份识别模块，用于基于所述第一身份识别的结果确定是否获得与所述第二被监控人员相对应的第二手机标识信息并根据所述第二关联关系进行匹配处理，进行第二身份识别。
9.一种家庭视频监控装置，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述指令被处理器执行如权利要求1至7中任一项所述的方法。
CN201910346426.5A 2019-04-26 2019-04-26 家庭视频监控方法、装置及存储介质 Active CN110246292B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910346426.5A CN110246292B (zh) 2019-04-26 2019-04-26 家庭视频监控方法、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910346426.5A CN110246292B (zh) 2019-04-26 2019-04-26 家庭视频监控方法、装置及存储介质

Publications (2)

Publication Number Publication Date
CN110246292A true CN110246292A (zh) 2019-09-17
CN110246292B CN110246292B (zh) 2022-08-12

Family

ID=67883537

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910346426.5A Active CN110246292B (zh) 2019-04-26 2019-04-26 家庭视频监控方法、装置及存储介质

Country Status (1)

Country Link
CN (1) CN110246292B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110717428A (zh) * 2019-09-27 2020-01-21 上海依图网络科技有限公司 一种融合多个特征的身份识别方法、装置、系统、介质及设备
CN111563086A (zh) * 2020-01-13 2020-08-21 杭州海康威视系统技术有限公司 信息关联方法、装置、设备及存储介质
JP7449030B2 (ja) 2021-12-07 2024-03-13 合同会社O&O 位置情報提供システム

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004306778A (ja) * 2003-04-07 2004-11-04 Denso Corp 撮像制御装置
CN103268680A (zh) * 2013-05-29 2013-08-28 北京航空航天大学 一种家庭智能监控防盗系统
CN103731636A (zh) * 2013-12-12 2014-04-16 深圳先进技术研究院 利用wi-fi与视频监控设备对目标进行追踪的方法
CN105354961A (zh) * 2015-12-03 2016-02-24 周木雄 一种监控报警方法及系统
WO2016123400A1 (en) * 2015-01-28 2016-08-04 Al-Amin Muhammad Portable phone activated video camera with phone location tracking
CN205644143U (zh) * 2016-04-14 2016-10-12 哈尔滨理工大学 一种基于无线传感器网络的远程监控家庭安防系统
CN106097625A (zh) * 2016-08-19 2016-11-09 陈妮娜 一种基于物联网的防盗系统
CN106331658A (zh) * 2016-11-08 2017-01-11 吴清军 基于无线网络手机远程视频监控防盗系统
CN107590439A (zh) * 2017-08-18 2018-01-16 湖南文理学院 基于监控视频的目标人物识别追踪方法和装置
CN108053591A (zh) * 2017-12-28 2018-05-18 广东鹏美森木业科技有限公司 一种具有进出门识别功能的家居看护方法、系统
KR101876125B1 (ko) * 2017-04-10 2018-07-06 경일대학교산학협력단 전자장치와 연동하는 미러 장치 및 그 동작 방법
CN109285308A (zh) * 2017-07-19 2019-01-29 南京海印通信设备有限公司 一种基于无线传感设备的家庭监控装置
EP3434011A1 (en) * 2016-03-22 2019-01-30 Sensormatic Electronics, LLC Method and system for pooled local storage by surveillance cameras
CN109640022A (zh) * 2019-01-18 2019-04-16 歌尔科技有限公司 视频录制方法、装置、网络摄像器及存储介质

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004306778A (ja) * 2003-04-07 2004-11-04 Denso Corp 撮像制御装置
CN103268680A (zh) * 2013-05-29 2013-08-28 北京航空航天大学 一种家庭智能监控防盗系统
CN103731636A (zh) * 2013-12-12 2014-04-16 深圳先进技术研究院 利用wi-fi与视频监控设备对目标进行追踪的方法
WO2016123400A1 (en) * 2015-01-28 2016-08-04 Al-Amin Muhammad Portable phone activated video camera with phone location tracking
CN105354961A (zh) * 2015-12-03 2016-02-24 周木雄 一种监控报警方法及系统
EP3434011A1 (en) * 2016-03-22 2019-01-30 Sensormatic Electronics, LLC Method and system for pooled local storage by surveillance cameras
CN205644143U (zh) * 2016-04-14 2016-10-12 哈尔滨理工大学 一种基于无线传感器网络的远程监控家庭安防系统
CN106097625A (zh) * 2016-08-19 2016-11-09 陈妮娜 一种基于物联网的防盗系统
CN106331658A (zh) * 2016-11-08 2017-01-11 吴清军 基于无线网络手机远程视频监控防盗系统
KR101876125B1 (ko) * 2017-04-10 2018-07-06 경일대학교산학협력단 전자장치와 연동하는 미러 장치 및 그 동작 방법
CN109285308A (zh) * 2017-07-19 2019-01-29 南京海印通信设备有限公司 一种基于无线传感设备的家庭监控装置
CN107590439A (zh) * 2017-08-18 2018-01-16 湖南文理学院 基于监控视频的目标人物识别追踪方法和装置
CN108053591A (zh) * 2017-12-28 2018-05-18 广东鹏美森木业科技有限公司 一种具有进出门识别功能的家居看护方法、系统
CN109640022A (zh) * 2019-01-18 2019-04-16 歌尔科技有限公司 视频录制方法、装置、网络摄像器及存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110717428A (zh) * 2019-09-27 2020-01-21 上海依图网络科技有限公司 一种融合多个特征的身份识别方法、装置、系统、介质及设备
CN111563086A (zh) * 2020-01-13 2020-08-21 杭州海康威视系统技术有限公司 信息关联方法、装置、设备及存储介质
CN111563086B (zh) * 2020-01-13 2023-09-19 杭州海康威视系统技术有限公司 信息关联方法、装置、设备及存储介质
JP7449030B2 (ja) 2021-12-07 2024-03-13 合同会社O&O 位置情報提供システム

Also Published As

Publication number Publication date
CN110246292B (zh) 2022-08-12

Similar Documents

Publication Publication Date Title
CN109658554B (zh) 一种基于大数据的智能小区安防系统
CN103714631B (zh) 基于人脸识别的atm取款机智能监控系统
CN109980781A (zh) 一种变电站智能监控系统
CN206557873U (zh) 一种基于人脸识别的智能安保防进入系统
CN107665530A (zh) 一种人脸识别单元门禁系统及控制方法
WO2018180588A1 (ja) 顔画像照合システムおよび顔画像検索システム
CN107590891A (zh) 一种人脸识别小区门禁系统及控制方法
KR102012672B1 (ko) 얼굴인식 기반의 사람 특징인식을 이용한 방범 시스템 및 방법
CN106204948A (zh) 储物柜管理方法及储物柜管理装置
CN106899827A (zh) 图像数据采集、查询、视频监控方法、设备及系统
CN110246292A (zh) 家庭视频监控方法、装置及存储介质
CN108062539A (zh) 配电房安全管理方法和系统、计算机设备和存储介质
CN109167971A (zh) 智能区域监控报警系统及方法
CN110097724B (zh) 一种基于fpga的物品自动看护方法及系统
CN107730672A (zh) 一种人脸识别单元门禁系统及控制方法
CN108540750A (zh) 基于监控视频与电子设备标识关联的方法、装置及系统
CN109495727B (zh) 智能监控方法及装置、系统、可读存储介质
CN109784231A (zh) 安防信息管理方法、装置及存储介质
CN101976356A (zh) 网吧实名制人脸识别方法及识别系统
CN110490126B (zh) 一种基于人工智能的保险柜安全管控系统
CN108540756A (zh) 基于视频与电子设备标识的识别方法、装置及系统
CN108846912A (zh) 考勤方法、终端及服务器
CN106127618A (zh) 一种基于人脸识别、人数感应及射频识别的定位监控系统及方法
CN109359712A (zh) 电力作业信息动态采集监控装置及其使用方法
CN116563797B (zh) 一种用于智慧校园的监控管理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant