CN111641813B - 访客引导方法、楼宇可视对讲系统及存储介质 - Google Patents
访客引导方法、楼宇可视对讲系统及存储介质 Download PDFInfo
- Publication number
- CN111641813B CN111641813B CN202010482745.1A CN202010482745A CN111641813B CN 111641813 B CN111641813 B CN 111641813B CN 202010482745 A CN202010482745 A CN 202010482745A CN 111641813 B CN111641813 B CN 111641813B
- Authority
- CN
- China
- Prior art keywords
- visitor
- information
- face
- outdoor unit
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
- H04N7/186—Video door telephones
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
Abstract
本发明公开了一种访客引导方法,所述方法包括以下步骤:获取室外机的摄像头采集的图像信息;若所获取的图像信息中未出现访客的完整脸部,则室外机输出访客的位置调整信息以引导访客调整位置,直至可视室内机获取到访客的完整脸部。本发明还公开了一种楼宇可视对讲系统及计算机可读存储介质。通过室外机输出位置调整信息,使得室外机无显示屏时也能够引导访客调整位置,避免可视室内机无法获取到访客的完整脸部,从而无法识别访客身份导致存在安全隐患,提高了访客引导的有效性与访客出入的安全性。
Description
技术领域
本发明涉及可视对讲控制技术领域,尤其涉及一种访客引导方法、楼宇可视对讲系统及计算机可读存储介质。
背景技术
安防楼宇的可视对讲设备的门口机(又称室外机)通常安装有摄像头,由于安装角度,结构设计缺陷等,导致在业主与楼宇门口对讲机侧的访客可视对讲过程中,无法准确捕捉访客面貌。门口机的摄像头存在多种安装方式,通常安装于门口的中控台处以一定角度斜向上拍摄,访客来访时站到对讲机的前面,此时,通常无法完整的获取到访客脸部信息。并且,由于成本高且易损坏,楼宇门口对讲机通常不带有较大和清晰度高的显示屏,在缺少有效图像反馈的情况下,业主无法识别访客,访客也无法准确调整自身位置。
给业主和访客带来不便且可能发生安防危险。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明主要目的在于提供一种访客引导方法、楼宇可视对讲系统及计算机可读存储介质,旨在解决楼宇可视对讲系统中室外机无法显示访客图像,导致访客无法根据有图像反馈调整自身位置,业主无法辨别访客身份的问题。
为实现上述目的,本发明提供一种访客引导方法,所述方法包括以下步骤:
获取室外机的摄像头采集的图像信息;
若所获取的图像信息中未出现访客的完整脸部,则室外机输出访客的位置调整信息以引导访客调整位置,直至可视室内机获取到访客的完整脸部。
可选地,所述室外机的摄像头采集的图像信息为视频,若获取的视频中未出现访客的完整脸部,则室外机输出访客的位置调整信息以引导访客调整位置之前,包括:
以预设周期从室外机的摄像头采集的视频中提取视频帧;
在所提取的视频帧中存在访客的脸部时,根据所提取的视频帧中访客的脸部信息判断所获取的视频中是否包括访客的完整脸部。
可选地,所述根据所提取的视频帧中访客的脸部的位置信息判断所获取的视频中是否包括访客的完整脸部的步骤包括:
根据所提取的视频帧中访客的脸部信息确定所获取的视频中访客的脸部信息;
根据获取的视频中访客的脸部信息判断所获取的视频中是否包括访客的完整脸部。
可选地,所述室外机输出访客位置调整信息以引导访客调整位置包括:
根据所提取的视频帧中访客的脸部的位置信息确定访客的位置调整信息。
可选地,所述根据所提取的视频帧中访客的脸部的位置信息确定访客的位置调整信息的步骤包括:
根据访客的脸部在所提取的视频帧中的位置信息确定访客的脸部在所提取的视频帧中所占的图像区域,所述图像区域为预先划分;
根据访客的脸部位置与其所占的图像区域的位置关系确定访客的位置调整信息。
可选地,所述根据访客的脸部位置与其所占的图像区域的位置关系确定访客的位置调整信息的步骤包括:
根据访客的脸部位置与其所占的图像区域的位置关系确定调整方向信息与调整距离信息;
根据所确定的调整方向信息与调整距离信息确定访客的位置调整信息。
可选地,所述根据访客的脸部位置与其所占的图像区域的位置关系确定调整方向信息与调整距离信息的步骤包括:
根据访客的脸部位置与其所占的图像区域的位置关系确定访客的脸部所占图像区域的位置信息与数量信息;
根据访客的脸部所占图像区域的位置信息与数量信息确定调整方向信息与调整距离信息。
可选地,所述以预设周期从室外机的摄像头采集的视频中提取视频帧的步骤之后,还包括:
若所提取的视频帧中不存在访客的脸部,则根据访客的音频信息确定访客相对于室外机的方向信息与距离信息;
根据所确定的方向信息与距离信息确定访客的位置调整信息。
此外,为实现上述目的,本发明还提供一种楼宇可视对讲系统,所述楼宇可视对讲系统包括存储器、处理器及存储在所述处理器上并可在处理器上运行的访客引导程序,所述处理器执行所述访客引导程序时实现如上所述的访客引导方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有访客引导程序,所述访客引导程序被处理器执行时实现如上所述的访客引导方法的步骤。
本发明实施例中,通过获取室外机的摄像头采集的图像信息,以在所获取的图像信息中未出现访客的完整脸部时,由室外机输出访客的位置调整信息以引导访客调整位置直至可视室内机获取到访客完整脸部。通过室外机输出位置调整信息以有效引导访客调整位置,避免室外机无法显示访客图像时,访客无法根据室外机显示的访客图像准确调整自身位置,导致室内机无法获取访客完整脸部的图像信息,造成安全隐患,提高了访客引导的准确性与访客出入的安全性。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的楼宇可视对讲系统结构示意图;
图2是本发明访客引导方法第一实施例的流程示意图;
图3为本发明访客引导方法第二实施例的流程示意图;
图4为本发明访客引导方法一实施例中视频帧的图像区域划分示意图;
图5为本发明访客引导方法一实施例中访客脸部所占图像区域示意图;
图6为本发明访客引导方法第三实施例的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本申请文件所称的完整脸部并非指脸部的100%即全部脸部,指的是根据获取和显示的脸部信息能识别出相对应的人,即完整脸部可能是脸部的80%及以上。
本发明的主要解决方案是:获取室外机的摄像头采集的图像信息;若所获取的图像信息中未出现访客的完整脸部,则由室外机输出访客的位置调整信息以引导访客调整位置,直至可视室内机获取到访客完整脸部。
目前的楼宇可视对讲系统中,由于室外机通常没有安装显示屏,导致访客无法根据有效的图像反馈来准确调整自身位置,并且在访客无法根据有效的图像反馈以准确出现在有效区域时,室内机无法准确显示访客的面部信息,容易存在安全隐患。因而,本发明提出一种访客引导方法,楼宇可视对讲系统及计算机存储介质,通过获取室外机的摄像头采集的图像信息,然后在所获取的图像信息中未出现访客的完整脸部时,由室外机输出访客的位置调整信息以引导访客调整位置,直至可视室内机获取到访客完整脸部,避免访客无法根据室外机显示的访客图像的引导准确调整自身位置时,可视室内机无法显示访客的完整的面部信息,导致访客出入时存在安全隐患,提高了访客引导的准确性,以及访客出入时的安全性。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的楼宇可视对讲系统结构示意图。
本方案所涉及的楼宇可视对讲系统包括室外机和可视室内机,可视室内机安装有显示屏,使得可视室内机侧用户可根据可视室内机所显示的视频确定访客身份,以确定是否存在安全隐患。
所述楼宇可视对讲系统包括:处理器1001,例如CPU,通信总线1002,存储器1003。其中,通信总线1002用于实现这些组件之间的连接通信。存储器1003可以是高速RAM存储器,也可以是稳定的存储器(non-volatilememory),例如磁盘存储器。
本领域技术人员可以理解,图1中示出的楼宇可视对讲系统结构并不构成对楼宇可视对讲系统的限定,可以包括比图示更多或更少的部件,或组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1003中可以包括访客引导程序;而处理器1001可以用于调用存储器1003中存储的访客引导程序,并执行以下操作:
获取室外机的摄像头采集的图像信息;
若所获取的图像信息中未出现访客的完整脸部,则室外机输出所述位置调整信息以引导访客调整位置,直至可视室内机获取到访客的完整脸部。
所述图像信息为照片或视频。
可选地,所述室外机的摄像头采集的图像信息为视频时,若获取的视频中未出现访客的完整脸部,则室外机输出所述位置调整信息以引导访客调整位置的步骤之前,处理器1001可以调用存储器1003中存储的访客引导程序,还执行以下操作:
以预设周期从室外机的摄像头采集的视频中提取视频帧;
在所提取的视频帧中存在访客的脸部时,根据所提取的视频帧中访客的脸部信息判断所获取的视频中是否包括访客的完整脸部。
可选地,处理器1001可以调用存储器1003中存储的访客引导程序,还执行以下操作:
根据所提取的视频帧中访客的脸部的位置信息确定所获取的视频中访客的脸部信息;
根据获取的视频中访客的脸部信息判断所获取的视频中是否包括访客的完整脸部。
可选地,处理器1001调用存储器1005中存储的访客引导程序,并执行以下操作:
根据所提取的视频帧中访客的脸部的位置信息确定访客的位置调整信息。
可选地,处理器1001可以调用存储器1003中存储的访客引导程序,还执行以下操作:
根据访客的脸部在所提取的视频帧中的位置信息确定访客的脸部在所提取的视频帧中所占的图像区域,所述图像区域为预先划分;
根据访客的脸部位置与其所占的图像区域的位置关系确定访客的位置调整信息。
可选地,处理器1001可以调用存储器1003中存储的访客引导程序,还执行以下操作:
根据访客的脸部位置与其所占的图像区域的位置关系确定调整方向信息与调整距离信息;
根据所确定的调整方向信息与调整距离信息确定访客的位置调整信息。
可选地,处理器1001可以调用存储器1003中存储的访客引导程序,还执行以下操作:
根据访客的脸部位置与其所占的图像区域的位置关系确定访客的脸部所占图像区域的位置信息与数量信息;
根据访客的脸部所占图像区域的位置信息与数量信息确定调整方向信息与调整距离信息。
可选地,所述以预设周期从室外机的摄像头采集的视频中提取视频帧的步骤之后,处理器1001可以调用存储器1003中存储的访客引导程序,还执行以下操作:
若所提取的视频帧中不存在访客的脸部,则根据访客的音频信息确定访客相对于室外机的方向信息与距离信息;
根据所确定的方向信息与距离信息确定访客的位置调整信息。
参照图2,图2为本发明访客引导方法的第一实施例流程图,本实施例中,所述访客引导方法包括以下步骤:
步骤S10:获取室外机的摄像头采集的图像信息;
本实施例中,所述访客引导方法应用于楼宇可视对讲系统中,所述楼宇可视对讲系统至少包括:室外机和与所述室外机通信连接的可视室内机。其中,由于室外机上安装显示屏会增加成本,且容易受到损坏等缘故,所述室外机通常不会安装显示屏,无法显示来访访客的图像信息,导致无法通过室外机显示图像信息来引导访客调整自身姿态;而为了让室内用户能够确认访客的身份,防止有歹徒或骗子等冒充访客进入楼宇内,造成安全隐患,所述室内机通常都装配有显示屏,能够显示访客的图像信息。因而,在室内机装配有显示屏(可视室内机),而室外机未装配显示屏时,需要通过室外安装的摄像头(也可以是包含摄像头的图像采集装置或模块等)来采集图像信息,通过对摄像头所采集的图像信息进行分析来确定访客的位置调整信息,进而根据所确定的位置调整信息引导访客调整位置至可视室内机获取到访客的完整脸部。
因此,要确定访客的位置调整信息,首先要在有访客来访时通过室外摄像头进行图像信息采集,所采集的图像信息可以是视频也可以是照片。且所述摄像头可以是与室内机建立通信连接的,也可以是与可视室外机建立通信连接的。本实施例中,若摄像头与室内机建立通信连接,则在室外机检测到用户的拨号行为后,会开启摄像头进行图像信息采集,并在室外机与可视室内机建立通信连接后,将摄像头采集的图像信息以数据流的形式传输至可视室内机,使得可视室内机可实时获取摄像头采集的图像信息。且在可视室内机获取室外机传输的摄像头采集的图像信息后,可以根据所获取的图像信息分析访客的脸部的位置信息,以根据所述位置信息确定访客的位置调整信息;当然,也可以是室外机直接根据摄像头采集的图像信息分析访客脸部的位置信息,以根据所述位置信息确定访客的位置调整信息。此外,为了提高访客检测的有效性,也可以是无论是否检测到用户的拨号行为,摄像头都处于开启状态实时采集图像信息,以判断访客在拨号连接前,是否有一些异常举动。这样,在存在撬门等异常举动时,能够有效记录异常举动人员的特征信息,便于后续追踪。若摄像头是直接与可视室内机建立通信连接的,则在可视室内机检测到室外机发送的拨号信息时,可由可视室内机向摄像头发送控制信息以控制摄像头进行图像信息采集,摄像头采集的图像信息会实时传输至可视室内机,而可视室内机会将摄像头所采集的图像信息以视频流的形式传输给室外机。此时,可以是可视室内机直接根据摄像头实时传输的图像信息分析确定访客的位置调整信息,也可以是室外机基于可视室内机传输的图像信息进行分析确定访客的位置调整信息。同样,摄像头也可以是处于实时采集状态,即无论是否检测到室外机发送的拨号信息,摄像头始终处于开启状态实时采集图像信息,以更加准确的排除安全隐患。
步骤S20:若所获取的图像信息中未出现访客的完整脸部,则室外机输出访客位置调整信息以引导访客调整位置,直至可视室内机获取到访客的完整脸部。
在可视室内机获取室外机的摄像头采集的图像信息后,为了引导访客调整自身位置至可视室内机获取到访客完整脸部,使得室内用户可以根据可视室内机所显示的图像信息辨别访客身份,需要先确定当前所获取的图像信息中是否存在访客的完整脸部。若当前所获取的视频中不存在访客的完整脸部,则可能所获取的视频中存在访客的部分脸部(指不满足完整脸部的标准),也可能所获取的视频中不存在访客的脸部。
在所获取的图像信息中存在访客的部分脸部时,可优选根据访客的脸部在所获取的图像信息中的位置信息确定访客需要调整的方向(或角度)及移动距离等位置调整信息,如访客的脸部在所获取的图像信息的正东方向时,确定访客的位置调整方向为正东方向。若所获取的图像信息中不存在访客的脸部,则无法根据访客的脸部在所获取的视频中的位置信息确定访客的位置调整信息,此时可以根据所获取的视频中访客的音频信息来确定访客相对于室外机的方向信息与距离信息等,然后根据访客相对于室外机的方向信息与距离信息等信息来确定访客的位置调整信息。如,在所获取的图像信息中没有出现访客的脸部时,若根据访客的音频信息确定访客在所述室外机的正北方向0.5米的距离,则确定访客的位置调整方向为正南方向位置调整距离为0.5米。由于楼宇门口的摄像头可以是直接与室外机通信连接,也可以是与可视室内机通信连接,且摄像头采集的图像信息以数据流的形式进行传输,因而室外机和可视室内机都可以获取到摄像头采集的图像信息,那么,访客的位置调整信息相应的可以是由室外机分析确定的,也可以是由可视室内机分析确定的,因而,在确定访客的位置调整信息后,若所述位置调整信息为室外机自主分析确定的,则直接由室外机输出所述位置调整信息给访客,以引导访客调整自身位置;若所述位置调整信息是由可视室内机分析确定的,则需要将可视室内机确定的位置调整信息发送至室外机,再由室外机输出所述位置调整信息。其中,室外机可以以语音或文字显示等方式将访客的位置调整信息输出给访客,访客在接收到室外机输出的位置调整信息后,执行与所述位置调整信息对应的调整操作,直至可视室内机获取到访客完整脸部。
另外,在所获取的视频中未出现访客的完整脸部时,可视室内机还会以语音、字幕显示及图像显示等方式中至少一种方式输出提示信息,以提示可视室内机侧用户可能存在安全隐患,防止可视室内机侧用户误让小偷等访客进入楼宇,对自己或他人的财产安全或生命安全等造成威胁。对应的,若访客的位置调整信息为室外机确定的,则可由室外机生成相应的提示信息发送至可视室内机,再由可视室内机输出所述提示信息;若访客的位置调整信息为可视室内机确定的,则直接在可视室内机生成提示信息进行输出。
本实施例通过获取室外机的摄像头采集的图像信息,以在所获取的图像信息中未出现访客的完整脸部时,由室外机输出所述位置调整信息以引导访客调整位置,使得可视室内机能够获取到访客的完整脸部,避免室外机未安装显示屏时,无法通过图像反馈有效的引导访客调整自身位置至可视室内机能够获取到访客的完整脸部,而在可视室内机获取到访客完整脸部时,容易误让小偷等可疑人员进入楼宇造成安全隐患,提高了访客引导的有效性与可靠性,提高了访客出入楼宇的安全性。
参照图3,图3为本发明访客引导方法的第二实施例流程图,本实施例中,所述访客引导方法包括以下步骤:
步骤S11:获取室外机的摄像头采集的视频;
步骤S12:以预设周期从室外机的摄像头采集的视频中提取视频帧;
步骤S13:在所提取的视频帧中存在访客的脸部时,根据所提取的视频帧中访客的脸部信息判断所获取的视频中是否包括访客的完整脸部;
步骤S14:若所获取的视频中未出现访客的完整脸部,则室外机输出所述位置调整信息以引导访客调整位置,直至可视室内机获取到访客完整脸部。
本实施例中,在室外机的摄像头获取的图像信息为视频时,为了在所获取的视频中未出现访客的完整脸部时确定访客的位置调整信息,需要以预设周期从室外机的摄像头采集的视频中提取视频帧。若所提取的视频帧中存在访客的脸部,则可以根据所提取的视频帧中的访客的脸部信息进行分析以判断所获取的视频中是否出现访客的完整脸部,如此,可以在保证通话质量的同时,减少系统的资源消耗。具体可以判断过程可以是:先根据所提取的视频帧中访客的脸部的位置信息确定所获取的视频中访客的脸部的位置信息,然后根据所获取的视频中访客的脸部的位置信息确定所获取的视频中访客的脸部信息,所述脸部信息可包括访客的脸部轮廓信息、访客的脸部的位置信息及可识别的访客面部特征信息等,然后根据获取的视频中访客的脸部信息判断所获取的视频中是否包括访客的完整脸部。如,可以根据所获取的视频中的访客的脸部信息判断访客的脸部轮廓是否完整,若所获取的视频中存在访客的完整脸部轮廓,则判定所获取的视频帧中包括访客的完整脸部,若未检测到访客的完整脸部轮廓,则判定所获取的视频帧中未出现访客的完整脸部;也可以是根据所获取的视频中访客的脸部信息判断访客的脸部是否存在于所获取的视频中的预设区域内,若存在于所获取的视频中的预设区域内,则判定所获取的视频帧中包括访客的完整脸部,若不存在于所获取的视频中的预设区域内,则判定所获取的视频帧中未出现访客的完整脸部;也可以是根据所获取的视频中访客的脸部信息判断能够识别出访客的脸部特征信息的识别程度,若所述识别程度超过预设程度,如,能够识别出80%以上的脸部,则判定所获取的视频帧中包括访客的完整脸部,若未超过预设程度,则判定所获取的视频帧中未出现访客的完整脸部。其中,所获取的视频帧中访客的脸部的位置信息可以根据所提取的视频帧中访客的脸部像素点所在位置及所提取的视频帧中的像素点与显示屏模组的像素点的对应关系确定所获取的视频中访客的脸部的位置信息;所述预设周期可以是楼宇可视对讲系统默认的周期,也可以是用户自定义的周期,具体可以根据系统的运行能力及实际的应用环境进行设定。
在判定所获取的视频中是否出现访客的完整脸部之后,若所获取的视频中未出现访客的完整脸部,则需要由室外机发送访客的位置调整信息,以引导访客调整自身位置至可视室内机能够获取到访客的完整脸部。而在室外机发送访客的位置调整信息之前,需要先确定访客的位置调整信息。在一实施例中,可以根据所提取的视频帧中访客的脸部的位置信息确定访客的位置调整信息。如,访客在所提取视频帧的左方时,确定访客的位置调整方向为向右调整。此外,还可以通过深度摄像头,如TOF(Time of flight,飞行时间)摄像头等进行图像采集,以获取图像中访客脸部的深度信息,进而根据所获取的深度信息分析访客与摄像头之间的距离信息及姿态信息等,从而确定访客的调整方向信息、调整距离信息及调整姿态信息(如,抬头、低头或头向左偏等)等。因而,所述位置调整信息可包括:调整方向信息、调整距离信息及调整姿态信息等。
在另一实施例中,可以预先将所提取的视频帧以预设方法划分为预设个数的图像区域,并根据访客的脸部在所提取的视频帧中的位置信息确定访客的脸部在所提取的视频帧中所占的图像区域,然后根据访客的脸部位置与其所占的图像区域的位置关系可以确定访客的位置调整信息。如可以将所提取的视频帧划分为如图4所示的9个矩形的图像区域,其中,所述F区域可以是与可视室内机显示屏的显示区域对应的系统默认的图像区域,也可以是用户自定义设置的图像区域,只有访客的完整脸部出现在F区域时,才能确定所获取的视频中出现了访客的完整脸部,进而确定可视室内机获取到了访客的完整脸部。而划分图像区域的预设方法及具体所需划分的区域的预设个数,可以根据具体的应用需求进行确定。根据预先划分的区域及访客的脸部在所提取的视频帧中的位置信息可以确定访客的脸部出现在划分后所提取的视频帧的哪几个图像区域内,如出现在A区域和F区域内,则确定访客的脸部位置与其所占的A区域和F区域存在相交关系,此时根据该相交关系可以确定访客需要往右边调整。
在一实施例中,根据访客的脸部位置与其所占的图像区域的位置关系具体可以确定需要引导访客调整的调整方向信息与调整距离信息,然后根据所确定的调整方向信息与调整距离信息确定访客的位置调整信息。而所述调整方向信息与调整距离信息的确定具体可以是先根据访客的脸部位置与其所占的图像区域的位置关系确定访客的脸部所占图像区域的位置信息与数量信息,然后根据访客的脸部所占图像区域的位置信息与数量信息确定访客的位置调整信息。具体地,访客的脸部位置与其所占的图像区域的位置关系存在多种情况,可以根据访客的脸部所占的图像区域及所占图像区域内脸部的完整度分为两类,一类是F区域内存在访客的完整脸部,另一类是F区域内不存在访客的完整脸部。若F区域内存在访客的完整脸部,则所获取的视频中包括访客的完整脸部,此时可视室内机可获取到访客完整脸部并显示,以供可视室内机侧用户根据所显示的访客完整脸部确认是否开门。若F区域内不存在访客的完整脸部,则所获取的视频中不存在访客完整脸部,此时用户无法确认访客的身份信息,也不便于后续的身份追踪。因而,F区域内不存在访客的完整脸部时,需要引导访客进行位置调整。此时,可根据所提取的视频帧中访客的脸部所占图像区域的位置信息与数量信息来确定调整方向信息与调整距离信息。由于访客的脸部可能同时占据一个非F区域,或同时占据两个图像区域,三个图像区域或四个图像区域,如图5所示,访客的脸部所占区域的情况以以下四种情况为例:情况一,如访客的脸部同时占据C区域和F区域,可以确定访客需要从当前位置往前走一定距离,该距离可根据访客的脸部在C区域和F区域所占比例的不同进行确定;情况二,如在访客的脸部同时占据B区域、C区域和F区域时,可以确定访客需要从当前位置往右前方走第一距离;情况三,如在访客的脸部同时占据B区域、C区域、CB区域和F区域时,可以确定访客需要从当前位置往右前方走第二距离;情况四,如在访客的脸部只占据CB区域时,可以确定访客需要从当前位置往右前方走第三距离,所述第一距离小于第二距离,所述第二距离小于所述第三距离。所述第一距离、第二距离和第三距离具体可以根据访客的脸部在所提取的视频帧上所需移动距离与访客实际移动的距离之间的对应关系进行确定,所述对应关系可以是类似于地图上的比例尺度,在确定比例关系后,只需要确定访客视频帧上所需移动距离,结合所述比例关系,就可以得到访客实际需要移动的距离,亦即可以确定所述第一距离、第二距离和第三距离。在确定调整方向信息与调整距离信息之后,就可以根据所确定的调整方向信息与调整距离信息确定访客的位置调整信息。将所确定的访客的位置调整信息发送至室外机,室外机接收到所述位置调整信息之后,便可以输出所述位置调整信息,准确引导访客调整位置至可视室内机能够获取到访客完整脸部。
当然,在所提取的视频帧中不存在访客的脸部时,还可以进一步判断所提取的视频帧中是否存在访客其他部位的图像信息,若存在,则可以根据访客其他部位的图像信息分析确定位置调整信息。如,在所提取视频帧的左侧检测到访客的右肩时,则访客需要往右移动等。
本实施例通过获取室外机的摄像头采集的视频,以预设周期从室外机的摄像头采集的视频中提取视频帧,然后在所提取的视频帧中存在访客的脸部时,根据所提取的视频帧中访客的脸部的位置信息判断所获取的视频中是否包括访客的完整脸部,若所获取的视频中未出现访客的完整脸部,则室外机输出访客的位置调整信息以引导访客调整位置,直至可视室内机获取到访客完整脸部。通过分析所提取的视频帧中访客脸部的位置信息来判断所获取的视频中是否出现访客的完整脸部,而无需识别访客的面部特征,能够简化系统的处理操作,从而提高处理速度,并且,由于无需进行细节的人脸识别,对摄像头的要求不高,因而可以降低系统的制造成本。
参照图6,图6为本发明访客引导方法的第三实施例流程图,本实施例中,所述访客引导方法包括以下步骤:
步骤S21:获取室外机的摄像头采集的视频;
步骤S22:以预设周期从室外机的摄像头采集的视频中提取视频帧;
步骤S23:在步骤S22所提取的视频帧中存在访客的脸部时,根据所提取的视频帧中访客的脸部信息判断所获取的视频中是否包括访客的完整脸部;
步骤S24:若步骤S23所获取的视频中未出现访客的完整脸部,则根据所提取的视频帧中访客的脸部的位置信息确定访客的位置调整信息,执行步骤S27;
步骤S25:若步骤S22所提取的视频帧中不存在访客的脸部,则根据访客的音频信息确定访客相对于室外机的方向信息与距离信息;
步骤S26:根据步骤S25所确定的方向信息与距离信息确定访客的位置调整信息,执行步骤S27;
步骤S27:室外机输出访客的位置调整信息以引导访客调整位置,直至室内机获取到访客的完整脸部。
在以预设周期从室外机的摄像头采集的视频中提取视频帧后,若所提取的视频帧中不存在访客的脸部,此时无法通过对所提取的视频帧进行图像分析来确定访客的位置调整信息。因此,本实施例中,在所提取的视频帧中不存在访客的脸部时,可以根据所获取的视频中访客的音频信息确定访客相对于室外机的方向信息与距离信息。然后根据所确定的方向信息与距离信息确定访客的位置调整信息,由室外机输出所述位置调整信息以引导访客调整位置,使得可视室内机能够获取到访客完整脸部。常见的声源定位方法有基于麦克风阵列声源定位方法,基于双耳听觉机理声源定位方法和基于光学传感方式声源定位方法等,因而,根据访客的音频信息确定访客相对于室外机的方向信息与距离信息的方式具体可以是:基于室外机所安装的麦克风阵列,根据麦克风阵列中不同麦克风接收到音频的时间差来确定距离信息,当然也可以是根据所获取的视频中音频的响度信息来确定距离信息,而访客的方向信息可以根据麦克风阵列中不同麦克风接收到的音频的强度来确定等。这里仅作列举,对确定声源(访客)方向信息与距离信息所采用的声源定位方法不做限定。
当然,在声源定位的可靠性不高时,可通过声源定位的方式初步确定访客当前的位置调整信息,在访客当前的位置调整信息的引导下调整位置后,若可视室内机仍然无法获取访客的完整脸部,此时可以结合所提取的视频帧中访客的脸部的位置信息进一步确定访客的位置调整信息,以更加精准的引导访客调整自身位置,直至可视室内机获取到访客完整脸部。
本实施例通过在所提取的视频帧中不存在访客的脸部时,根据访客的音频信息确定访客相对于室外机的方向信息与距离信息,并根据所确定的方向信息与距离信息确定访客的位置调整信息,然后由室外机输出访客的位置调整信息以引导访客调整位置,直至可视室内机获取到访客完整脸部,避免所提取的视频帧中不存在访客的脸部时无法引导访客准确的调整自身的位置,导致可视室内机侧用户无法基于可视室内机所显示的图像辨别访客身份,提高了访客引导的有效性及访客出入楼宇的安全性。
当所述室外机的摄像头采集的图像信息为照片时,较室外机的摄像头采集的图像信息为视频的技术方案,不需要从视频中提取视频帧的步骤,通过对拍摄的照片进行访客完整脸部获取,若获取成功则访客获得授权,若获取失败,则通过室外机引导访客调整位置信息直至获取到访客完整脸部才授权。
采用图片技术方案较视频技术方案步骤简单,但由于照片拍摄存在间隔可能导致影响获取访客完整脸部的准确性。
此外,本发明实施例还提供一种楼宇可视对讲系统,所述楼宇可视对讲系统包括存储器、处理器及存储在所述处理器上并可在处理器上运行的访客引导程序,所述处理器执行所述访客引导程序时实现如上所述访客引导方法的步骤。
此外,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有访客引导程序,所述访客引导程序被处理器执行时实现如上所述的访客引导方法的步骤。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,电视,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (7)
1.一种访客引导方法,其特征在于,应用于楼宇可视对讲系统中,所述楼宇可视对讲系统包括室外机和与所述室外机通信连接的可视室内机,所述访客引导方法包括以下步骤:
可视室内机检测到室外机发送的拨号信息时,向室外机的摄像头发送控制信息以控制摄像头进行图像信息采集,并将所采集的图像信息传输至可视室内机;
获取所述摄像头采集的图像信息,在所述图像信息为视频时,以预设周期从室外机的摄像头采集的视频中提取视频帧;
根据访客的脸部在所提取的视频帧中的位置信息确定访客的脸部在所提取的视频帧中所占的图像区域,所述图像区域为预先划分;
当所述图像区域为预设区域时,确定所获取的图像信息中出现访客的完整脸部,所述预设区域为可视室内机的显示屏的显示区域对应的图像区域;
当所述图像区域不为预设区域时,确定所获取的图像信息中未出现访客的完整脸部;
若所获取的图像信息中未出现访客的完整脸部,则输出提示信息,以提示存在安全隐患,并根据访客的脸部位置与其所占的图像区域的位置关系确定访客的位置调整信息,将所述位置调整信息发送至室外机,由室外机输出访客的位置调整信息以引导访客调整位置,直至可视室内机获取到访客的完整脸部。
2.如权利要求1所述的访客引导方法,其特征在于,室外机输出访客的位置调整信息以引导访客调整位置包括根据所提取的视频帧中访客的脸部的位置信息确定访客的位置调整信息。
3.如权利要求1所述的访客引导方法,其特征在于,所述根据访客的脸部位置与其所占的图像区域的位置关系确定访客的位置调整信息的步骤包括:
根据访客的脸部位置与其所占的图像区域的位置关系确定调整方向信息与调整距离信息;
根据所确定的调整方向信息与调整距离信息确定访客的位置调整信息。
4.如权利要求3所述的访客引导方法,其特征在于,所述根据访客的脸部位置与其所占的图像区域的位置关系确定调整方向信息与调整距离信息的步骤包括:
根据访客的脸部位置与其所占的图像区域的位置关系确定访客的脸部所占图像区域的位置信息与数量信息;
根据访客的脸部所占图像区域的位置信息与数量信息确定调整方向信息与调整距离信息。
5.如权利要求1所述的访客引导方法,其特征在于,所述以预设周期从室外机的摄像头采集的视频中提取视频帧的步骤之后,还包括:
若所提取的视频帧中不存在访客的脸部,则根据访客的音频信息确定访客相对于室外机的方向信息与距离信息;
根据所确定的方向信息与距离信息确定访客的位置调整信息。
6.一种楼宇可视对讲系统,其特征在于,所述可视对讲系统包括存储器、处理器及存储在存储器上并可在处理器上运行的访客引导程序,所述处理器执行所述访客引导程序时实现权利要求1-5中任一项所述的访客引导方法的步骤。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有访客引导程序,所述访客引导程序被处理器执行时实现如权利要求1-5中任一项所述的访客引导方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010482745.1A CN111641813B (zh) | 2020-05-29 | 2020-05-29 | 访客引导方法、楼宇可视对讲系统及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010482745.1A CN111641813B (zh) | 2020-05-29 | 2020-05-29 | 访客引导方法、楼宇可视对讲系统及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111641813A CN111641813A (zh) | 2020-09-08 |
CN111641813B true CN111641813B (zh) | 2022-03-25 |
Family
ID=72331033
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010482745.1A Active CN111641813B (zh) | 2020-05-29 | 2020-05-29 | 访客引导方法、楼宇可视对讲系统及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111641813B (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201263196Y (zh) * | 2008-08-26 | 2009-06-24 | 海尔集团公司 | 可视对讲门铃 |
CN103618851A (zh) * | 2013-11-08 | 2014-03-05 | 杨睿琦 | 一种自拍方法及终端 |
CN104243892A (zh) * | 2013-06-08 | 2014-12-24 | 安凯(广州)微电子技术有限公司 | 具有多摄像头的可视门铃装置 |
CN108093201A (zh) * | 2018-01-24 | 2018-05-29 | 周永业 | 一种视频会议终端及系统 |
CN108965713A (zh) * | 2018-08-01 | 2018-12-07 | 上海小蚁科技有限公司 | 图像采集方法、装置以及计算机可读存储介质 |
CN208384662U (zh) * | 2018-06-07 | 2019-01-15 | 北京海林节能科技股份有限公司 | 楼宇可视对讲门禁系统 |
CN110162944A (zh) * | 2019-05-22 | 2019-08-23 | 维沃移动通信有限公司 | 一种数据获取方法及终端 |
CN110647797A (zh) * | 2019-08-05 | 2020-01-03 | 深圳市大拿科技有限公司 | 一种访客检测方法及装置 |
CN210271013U (zh) * | 2019-09-03 | 2020-04-07 | 胡渐佳 | 人脸识别智能门锁的交互装置 |
CN110991416A (zh) * | 2019-10-08 | 2020-04-10 | 江苏艾展信息技术有限公司 | 一种人脸识别设备终端 |
CN111050130A (zh) * | 2019-12-12 | 2020-04-21 | 深圳市大拿科技有限公司 | 一种摄像头控制方法、装置及存储介质 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8553949B2 (en) * | 2004-01-22 | 2013-10-08 | DigitalOptics Corporation Europe Limited | Classification and organization of consumer digital images using workflow, and face detection and recognition |
CN105187719A (zh) * | 2015-08-21 | 2015-12-23 | 深圳市金立通信设备有限公司 | 一种拍摄方法及终端 |
CN107146305A (zh) * | 2017-05-02 | 2017-09-08 | 上海灵至科技有限公司 | 基于人脸识别的解锁方法及门锁 |
CN108734083B (zh) * | 2018-03-21 | 2023-04-25 | 北京猎户星空科技有限公司 | 智能设备的控制方法、装置、设备和存储介质 |
CN109598223A (zh) * | 2018-11-26 | 2019-04-09 | 北京洛必达科技有限公司 | 基于视频获取目标人物的方法和装置 |
-
2020
- 2020-05-29 CN CN202010482745.1A patent/CN111641813B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201263196Y (zh) * | 2008-08-26 | 2009-06-24 | 海尔集团公司 | 可视对讲门铃 |
CN104243892A (zh) * | 2013-06-08 | 2014-12-24 | 安凯(广州)微电子技术有限公司 | 具有多摄像头的可视门铃装置 |
CN103618851A (zh) * | 2013-11-08 | 2014-03-05 | 杨睿琦 | 一种自拍方法及终端 |
CN108093201A (zh) * | 2018-01-24 | 2018-05-29 | 周永业 | 一种视频会议终端及系统 |
CN208384662U (zh) * | 2018-06-07 | 2019-01-15 | 北京海林节能科技股份有限公司 | 楼宇可视对讲门禁系统 |
CN108965713A (zh) * | 2018-08-01 | 2018-12-07 | 上海小蚁科技有限公司 | 图像采集方法、装置以及计算机可读存储介质 |
CN110162944A (zh) * | 2019-05-22 | 2019-08-23 | 维沃移动通信有限公司 | 一种数据获取方法及终端 |
CN110647797A (zh) * | 2019-08-05 | 2020-01-03 | 深圳市大拿科技有限公司 | 一种访客检测方法及装置 |
CN210271013U (zh) * | 2019-09-03 | 2020-04-07 | 胡渐佳 | 人脸识别智能门锁的交互装置 |
CN110991416A (zh) * | 2019-10-08 | 2020-04-10 | 江苏艾展信息技术有限公司 | 一种人脸识别设备终端 |
CN111050130A (zh) * | 2019-12-12 | 2020-04-21 | 深圳市大拿科技有限公司 | 一种摄像头控制方法、装置及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111641813A (zh) | 2020-09-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109002786B (zh) | 人脸检测方法、设备及计算机可读存储介质 | |
EP3163498B1 (en) | Alarming method and device | |
US10937290B2 (en) | Protection of privacy in video monitoring systems | |
EP3163543B1 (en) | Alarming method and device | |
CN110620946B (zh) | 字幕显示方法及装置 | |
US10565854B2 (en) | Eyeglasses-type wearable terminal, control method thereof, and control program | |
CN113177437A (zh) | 一种人脸识别方法和装置 | |
EP2903261A1 (en) | Apparatus and method for detecting event from plurality of photographed images | |
US20160055653A1 (en) | Video based indoor leak detection | |
US10419728B2 (en) | Monitoring system having personal information protection function and method thereof | |
US20120027305A1 (en) | Apparatus to provide guide for augmented reality object recognition and method thereof | |
US20170339287A1 (en) | Image transmission method and apparatus | |
CA2860014C (en) | Video based indoor leak detection | |
US9197851B2 (en) | Apparatus and method for modulating images for videotelephony | |
CN112329504A (zh) | 门开关状态监测方法、装置、设备及计算机可读存储介质 | |
CN111641813B (zh) | 访客引导方法、楼宇可视对讲系统及存储介质 | |
CN113077354B (zh) | 一种电子设备的投保校验方法和装置 | |
CN111832458A (zh) | 防窃照方法及系统 | |
KR20160003996A (ko) | 감시 영상 분석 장치 및 방법 | |
CN110933314A (zh) | 追焦拍摄方法及相关产品 | |
EP2831702B1 (en) | Information processing device, information processing method and program | |
KR20130062489A (ko) | 객체추적 시스템 및 그 운영방법 | |
CN113222809B (zh) | 实现隐私保护的图片处理方法及装置 | |
CN113822216A (zh) | 事件检测方法及装置、系统、电子设备和存储介质 | |
KR101926510B1 (ko) | 광각카메라를 이용한 안면인식 기반의 광역 감시 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20220302 Address after: 528000 room 2001, building 4, Midea Fortune Plaza, No.1, Chengde Road, Junlan community, Beijiao Town, Shunde District, Foshan City, Guangdong Province Applicant after: Guangdong Ruizhu Intelligent Technology Co.,Ltd. Address before: 528000 Beijiao International Wealth Center (Wanlian Center), No.1 Yifu Road, Junlan community committee, Beijiao Town, Shunde District, Foshan City, Guangdong Province Applicant before: Ruizhu Technology Co.,Ltd. |
|
GR01 | Patent grant | ||
GR01 | Patent grant |