CN110032953A - 监测陌生人的方法、装置、存储介质和计算机设备 - Google Patents
监测陌生人的方法、装置、存储介质和计算机设备 Download PDFInfo
- Publication number
- CN110032953A CN110032953A CN201910234511.2A CN201910234511A CN110032953A CN 110032953 A CN110032953 A CN 110032953A CN 201910234511 A CN201910234511 A CN 201910234511A CN 110032953 A CN110032953 A CN 110032953A
- Authority
- CN
- China
- Prior art keywords
- information
- picture
- user
- voice
- target photo
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 34
- 238000012544 monitoring process Methods 0.000 claims abstract description 53
- 230000004807 localization Effects 0.000 claims abstract description 20
- 206010002953 Aphonia Diseases 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 11
- 238000001914 filtration Methods 0.000 description 10
- 231100001261 hazardous Toxicity 0.000 description 10
- 230000006870 function Effects 0.000 description 4
- 238000012216 screening Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000010835 comparative analysis Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
Abstract
本发明涉及阅读机器人领域,尤其涉及一种监测陌生人方法、装置、存储介质和计算机设备。本发明提供一种监测陌生人的方法、装置、存储介质和计算机设备。用户信息预先存储于阅读机器人,用户信息包括用户声音信息,监测陌生人的方法包括:获取周围环境的声音,记为声音信息。如果声音信息中的人声信息与用户人声信息不匹配,则定位声源,转动摄像头,获取第一目标图片。筛选未曾发送至用户终端的图片,发送至用户终端。本发明旨在解决如何监测儿童周边是否存在陌生人的问题。
Description
技术领域
本发明涉及阅读机器人领域,尤其涉及一种监测陌生人的方法、装置、存储介质和计算机设备。
背景技术
在现有技术中,阅读机器人具有陪伴儿童读书、娱乐和辅助教育的功能。在儿童使用阅读机器人时,儿童可能一个人在家或者家长不在身边时,儿童的安全问题往往会让家长们担心。当家长不在儿童身边的时候,需要保障儿童的周边环境的安全。
发明内容
针对现有技术不足,本发明提供一种监测陌生人的方法、装置、存储介质和计算机设备,旨在解决如何监测儿童周边是否存在陌生人的问题。
本发明提供一种监测陌生人的方法,用于阅读机器人,用户信息预先存储于所述阅读机器人,所述用户信息包括用户声音信息,所述阅读机器人监测陌生人的方法包括:
获取周围环境的声音,记为声音信息;
判断所述声音信息中是否存在人声信息;
若是,则判断所述人声信息是否与所述用户声音信息匹配;
若否,则获取第一目标图片;
判断所述第一目标图片是否与所述图片数据库中的任一图片匹配,所述图片数据库中存有已发送至所述用户终端的图片;
若否,则发送所述第一目标图片至所述用户终端。
进一步地,在所述获取第一目标图片的步骤中,包括:
定位声源,获取第一位置信息;
根据所述第一位置信息转动所述摄像头,获取第一目标图片。
进一步地,所述用户信息包括用户人脸信息,在所述获取周围环境的声音的步骤之前,包括:
判断摄像头是否处于使用状态,其中,所述使用状态为所述阅读机器人使用所述摄像头获取书籍图片的工作状态;
若否,则控制所述摄像头进入监测状态,通过所述摄像头获取摄影信息,所述监测状态为所述摄像头获取周围环境的摄影信息的工作状态;
判断所述摄影信息中是否存在人脸信息;
若是,则判断所述人脸信息是否与所述用户人脸信息匹配;
若否,则获取第二目标图片,所述第二目标图片包含所述人脸信息;
判断所述第二目标图片是否与所述图片数据库中的任一图片匹配;
若否,则发送所述第二目标图片至所述用户终端;
将所述第二目标图片存入所述图片数据库中。
进一步地,在所述判断摄像头是否处于使用状态的步骤之后,包括:
若否,则获取所述声音信息;
判断所述声音信息中是否存在人声信息;
若是,则判断所述人声信息是否与所述用户声音信息匹配;
若不匹配,则定位声源,获取第二位置信息;
根据所述第二位置信息转动所述摄像头,获取第三目标图片;
判断所述第三目标图片是否与所述图片数据库中的任一图片匹配;
若否,则发送所述第三目标图片至所述用户终端;
将所述第三目标图片存入所述图片数据库中;
控制所述摄像头回到所述监测状态。
进一步地,在所述判断摄像头是否处于使用状态的步骤之后,包括:
若所述摄像头不处于使用状态,则获取所述声音信息;
判断所述声音信息中是否存在人声信息;
若是,则判断所述人声信息是否与所述用户声音信息匹配;
若不匹配,则定位声源,获取第三位置信息,并将所述人声信息记为第一预警人声信息;
根据所述第三位置信息转动所述摄像头,获取第四目标图片;
判断所述第四目标图片是否与所述图片数据库中的任一图片匹配;
若否,则发送所述第四目标图片和所述第一预警人声信息至所述用户终端;
将所述第四目标图片存入所述图片数据库。
进一步地,在所述将所述第四目标图片存入所述图片数据库的步骤之后,包括:
接收用户终端发送的查询音频请求信息,所述查询音频请求信息包含查询所述第一预警人声信息的请求信息;
获取人声开始时间点和人声结束时间点,所述人声开始时间点为第一次获取到所述第一预警人声信息的时间点,所述人声结束时间点为最后一次获取到所述第一预警人声信息的时间点;
获取所述人声开始时间点和所述人声结束时间点之间的所述声音信息,记为第一目标音频;
将所述第一目标音频发送至所述用户终端。
进一步地,在所述发送所述第二目标图片至所述用户终端的步骤之后,包括:
接收用户终端发送的查询视频请求信息,所述查询视频请求信息包含期望时间值和所述第二目标图片的信息;
根据所述第二目标图片获取图片时间点,所述图片时间点为在所述摄影信息中获取所述第二目标图片时对应于所述摄影信息的时间点;
获取以所述图片时间点为中心的第一目标视频,所述第一目标视频的时长等于所述期望时间值;
将所述第一目标视频发送至所述用户终端。
本发明还提供一种监测陌生人的装置,用于阅读机器人,用户信息预先存储于所述阅读机器人,所述用户信息包括用户人脸信息和用户声音信息,所述阅读机器人包括:
第一获取模块,用于获取周围环境的声音,记为声音信息;
第一判断模块,用于判断所述声音信息中是否存在人声信息;
第二判断模块,用于若所述声音信息中存在人声信息,则判断所述人声信息是否与所述用户声音信息匹配;
第二获取模块,用于若所述人声信息与所述用户声音信息不匹配,则获取第一目标图片;
第三判断模块,用于判断所述第一目标图片是否与所述图片数据库中的任一图片匹配,所述图片数据库中存有已发送至所述用户终端的图片;
第一发送模块,用于若所述第一目标图片与所述图片数据库中的任一图片都不匹配,则发送所述第一目标图片至所述用户终端。
本发明还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述的监测陌生人的方法的步骤。
本发明还提供一种计算机设备,其包括处理器、存储器及存储于所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述的监测陌生人的方法的步骤。
本发明提供一种监测陌生人的方法、装置、存储介质和计算机设备,用户信息预先存储于阅读机器人,用户信息包括用户声音信息,方法包括:若摄像头处于使用状态,则获取声音信息。如果声音信息中的人声信息与用户人声信息不匹配,则定位声源,转动摄像头,获取第一目标图片。筛选未曾发送至用户终端的图片,发送至用户终端。最后控制摄像头回到使用状态,不影响阅读机器人的阅读功能。本发明旨在解决如何监测儿童周边是否存在陌生人的问题。
附图说明
图1是本发明一实施例的监测陌生人的方法的流程图;
图2是本发明一实施例的监测陌生人的装置的功能模块图;
图3是本发明一实施例的计算机可读存储介质的结构示意框图;
图4是本发明一实施例的计算机设备的结构示意框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
如图1所示,本发明提供一种监测陌生人的方法,用于阅读机器人,阅读机器人设有摄像头和麦克风,用户信息预先存储于阅读机器人,用户信息包括用户人脸信息和用户声音信息,监测陌生人的方法包括:
步骤S101,获取周围环境的声音,记为声音信息。
步骤S102,判断声音信息中是否存在人声信息。
步骤S103,若是,则判断人声信息是否与用户声音信息匹配。
步骤S104,若否,则获取第一目标图片。
具体地,在本实施例中采用TDE算法进行定位声源。确认声源位置后,转动摄像头,通过摄像头获取第一目标图片。
步骤S105,判断第一目标图片是否与图片数据库中的任一图片匹配,图片数据库中存有已发送至用户终端的图片。
用特征向量法或面纹模板法对比分析人脸信息和用户人脸信息的相似度。在本实施例中,相似度高于或等于90%则判断为匹配,相似度低于90%则判断为不匹配。用户信息可由绑定用户自行进行录入,预存于阅读机器人。绑定用户是指与阅读机器人绑定的用户,绑定用户可对阅读机器人进行一系列管理操作,管理操作包括预存用户信息,其他用户无权进行管理操作。
图片数据库中存有已发送至用户终端的图片,将第一目标图片与图片数据库中的图片一一比对,使用图片相似度比对算法计算图片相似度,具体地,使用SIFT算法。若图片相似度高于或等于85%则判断为匹配,若图片相似度低于85%则判断为不匹配。拦截匹配的图片,避免具有高相似度的图片重复发送。
图片数据库具有时效性,具体地,经过特定时间间隔便会进行一次数据清空,特定时间间隔由绑定用户设置。
步骤S106,若否,则发送第一目标图片至用户终端。
当摄像头处于使用状态时,通过麦克风监测周围是否存在陌生人,在监测到存在陌生人时,控制摄像头暂时脱离使用状态,待获取第一目标图片后便回到使用状态。使得阅读机器人兼具阅读和检测安全的功能且两不误。
若出现了陌生人,用户可通过用户终端调用摄像头,实时监视儿童周围发生了什么。阅读机器人接收用户终端的转动命令,操控摄像头的转动,具体地,转动命令包括转动角度、移动距离等信息。
若用户判断第一目标图片中的陌生人没有危险性,则可以通过用户终端发送取消命令至阅读机器人,取消命令包含无危害人脸信息。若阅读机器人监测到的人脸信息可匹配无危害人脸信息,则不获取也不发送包含无危害人脸信息的图片。
在步骤S104中,包括:
定位声源,获取第一位置信息;
根据第一位置信息转动摄像头,获取第一目标图片。
在步骤S101之前,包括:
判断摄像头是否处于使用状态,其中,使用状态为阅读机器人使用摄像头获取书籍图片的工作状态;
若摄像头不处于使用状态,则控制摄像头进入监测状态,通过所述摄像头获取摄影信息,所述监测状态为所述摄像头获取周围环境的摄影信息的工作状态;
判断摄影信息中是否存在人脸信息;
若存在人脸信息,则判断人脸信息是否与用户人脸信息匹配;
若不匹配,则获取第二目标图片,第二目标图片包含人脸信息;
判断第二目标图片是否与图片数据库中的任一图片匹配;
若否,则发送第二目标图片至用户终端;
将第二目标图片存入图片数据库中。
使用状态指的是阅读状态时用摄像头获取阅读文本等并非用于监测安全的工作。
摄像头进入监测状态后,会持续进行旋转,多角度监测周围的安全状况。处于监测状态的摄像头用于检测安全。摄像头获取的摄影信息可以为视频、图片等。
图片数据库中存有已发送至用户终端的第二目标图片。因为摄像头获取的摄影信息随着时间的推移不断更新,所以如不经过筛选则每捕获到一次目标就会发送一张第二目标图片。为了避免相似度高的图片重复发送,将已发送的图片存入图片数据库中,在每次发送图片前比对即将发送图片和图片数据库中的图片,若即将发送图片可在图片数据库中比对出相似度高的图片,则不发送上述即将发送图片。
如果在儿童周边发现与用户人脸信息不匹配的人脸信息,即发现儿童周边有陌生人存在,阅读机器人会自动获取陌生人的照片,并发送至用户终端。也就是说,家长可以通过阅读机器人知道孩子的周围出现了陌生人。本发明中提及的陌生人定义为未预存用户信息至阅读机器人的人。
在步骤S101之后,包括:
若摄像头不处于使用状态,则获取声音信息;
判断声音信息中是否存在人声信息;
若是,则判断人声信息是否与用户声音信息匹配;
若不匹配,则定位声源,获取第二位置信息;
根据第二位置信息转动摄像头,获取第三目标图片;
判断第三目标图片是否与图片数据库中的任一图片匹配;
若否,则发送第三目标图片至用户终端;
将第三目标图片存入图片数据库中。
摄像头按照一定的规律转动,可能会出现没有及时捕捉到陌生人的人脸信息的情况。麦克风的监测相当于和摄像头构成双重保险,当陌生人说话的时候,可通过声源定位陌生人的位置,从而转动摄像头捕捉陌生人的人脸信息,提高了监测周围是否有陌生人的准确性。
在判断摄像头是否处于使用状态的步骤之后,包括:
若摄像头不处于使用状态,则获取声音信息;
判断声音信息中是否存在人声信息;
若是,则判断人声信息是否与用户声音信息匹配;
若不匹配,则定位声源,获取第三位置信息,并将人声信息记为第一预警人声信息;
根据第三位置信息转动摄像头,获取第四目标图片;
判断第四目标图片是否与图片数据库中的任一图片匹配;
若否,则发送第四目标图片和第一预警人声信息至用户终端;
将第四目标图片存入图片数据库。
用户通过第四目标图片和第一预警人声信息,判断陌生人是否存在危险性,可以更全面的判断儿童周围有无危险性陌生人。若用户判断第四目标图片中的陌生人没有危险性,则可以通过用户终端发送取消命令至阅读机器人,取消命令包含无危害人声信息。若阅读机器人监测到可匹配无危害人声信息的人声信息,则不获取声源的位置信息,也不发送第四目标图片和第一预警人声信息至用户终端。
在将第四目标图片存入图片数据库的步骤之后,包括:
接收用户终端发送的查询音频请求信息,查询音频请求信息包含查询第一预警人声信息的请求信息;
获取人声开始时间点和人声结束时间点,人声开始时间点为第一次获取到第一预警人声信息的时间点,人声结束时间点为最后一次获取到第一预警人声信息的时间点;
获取人声开始时间点和人声结束时间点之间的声音信息,记为第一目标音频;
将第一目标音频发送至用户终端。
第一目标音频包含检测到的所有第一预警人声信息及出现第一预警人声信息的时间段内的其它声音信息,使得对话之间有连贯性,易于用户了解事态状况。
在另一实施例中,对第一目标音频进行对话处理,即获取第一目标音频中的人声信息,并将人声信息按时间先后顺序进行排序,生成第二目标音频。提取有价值的信息,缩小音频的播放时长,而且按时间先后顺序进行排序符合逻辑顺序,易于用户了解事态状况。
在另一实施例中,在发送第四目标图片至用户终端的步骤之后,包括:
存储人声信息至陌生人声信息;
获取声音信息;
判断声音信息中是否存在人声信息;
若是,则判断人声信息是否与用户声音信息匹配,若否,则判断人声信息是否与陌生人声信息匹配;
若人声信息与陌生人声信息匹配,则摄像头保持使用状态;
若人声信息与陌生人声信息不匹配,则定位声源,获取位置信息;
根据位置信息转动摄像头,获取第五目标图片;
发送第五目标图片至用户终端;
控制摄像头回到使用状态。
由此可以在避免重复发送同一个人的图片至用户终端的同时,减少了监测陌生人对摄像头使用状态的影响,即降低监测陌生人对阅读流畅性的影响。陌生人声信息具有时效性,具体地,经过特定时间间隔便会进行一次数据清空,特定时间间隔由绑定用户设置。
在获取第二目标图片的步骤中,包括:
根据摄影信息获取多个图片;
标记多个图片中人脸信息的清晰度;
获取清晰度最高的图片为第二目标图片。
具体地,采用点锐度算法计算图片的清晰度,并标记在对应图片。筛选获得清晰度高的图片,便于用户辨别陌生人的身份。
在另一实施例中,获取多张清晰度相对较高的图片为第二目标图片。
在发送第二目标图片至用户终端的步骤之后,包括:
接收用户终端发送的查询视频请求信息,查询视频请求信息包含期望时间区段和第二目标图片的信息;
根据第二目标图片获取图片时间点,图片时间点为在摄影信息中获取第二目标图片时对应于摄影信息的时间点;
获取以所述图片时间点为中心的第一目标视频,所述第一目标视频的时长等于所述期望时间值;
将第一目标视频发送至用户终端。
期望时间值的单位为时间单位,具体的为时、分、秒。用户获取第一目标视频可更直观地看到儿童的周边发生了什么。并且可以自行调整视频的长短,防止漏掉重要信息的同时也不会因视频的时长过长而占据过多存储。
阅读机器人在获取图片时,会给每张图片标记上图片名,图片名唯一存在,每个图片名有对应的时间点,对应的时间点即图片在摄影信息中出现的时间点。阅读机器人在接收到第二目标图片后,根据第二目标图片的图片名查询对应的时间点,便可得到图片时间点。在另一实施例中,图片名以对应时间点命名,直接获取图片名即可得到图片的对应时间点。
具体地,在获取起点和终点之间的摄影信息并记为第一目标视频的步骤之后,包括:
获取第一目标视频中存在人脸信息的第一过滤片段;
获取第一过滤片段中的人脸信息与用户人脸信息不匹配的第二过滤片段;
将第二过滤片段按时间先后顺序排列,获得第二目标视频;
将第二目标视频发送至用户终端。
过滤出存在陌生人人脸信息的片段,方便用户快捷地从多个角度观察陌生人,从而判断陌生人是否为自己认识的人。用户可在用户终端操作,通过在用户终端选择参数“过滤”和“不过滤”来获取用户需要的视频。
如图2所示,本发明提供一种监测陌生人的装置,用于阅读机器人,阅读机器人设有摄像头和麦克风,用户信息预先存储于阅读机器人,用户信息包括用户人脸信息和用户声音信息,阅读机器人监测陌生人的方法包括:
第一获取模块11,用于获取周围环境的声音,记为声音信息。
第一判断模块12,用于判断声音信息中是否存在人声信息。
第二判断模块13,用于若声音信息中存在人声信息,则判断人声信息是否与用户声音信息匹配。
第二获取模块14,用于若人声信息与用户声音信息不匹配,则获取第一目标图片。
具体地,在本实施例中采用TDE算法进行定位声源。确认声源位置后,转动摄像头,通过摄像头获取第一目标图片。
第三判断模块15,用于判断第一目标图片是否与图片数据库中的任一图片匹配,图片数据库中存有已发送至用户终端的图片。
用特征向量法或面纹模板法对比分析人脸信息和用户人脸信息的相似度。在本实施例中,相似度高于或等于90%则判断为匹配,相似度低于90%则判断为不匹配。用户信息可由绑定用户自行进行录入,预存于阅读机器人。绑定用户是指与阅读机器人绑定的用户,绑定用户可对阅读机器人进行一系列管理操作,管理操作包括预存用户信息,其他用户无权进行管理操作。
图片数据库中存有已发送至用户终端的图片,将第一目标图片与图片数据库中的图片一一比对,使用图片相似度比对算法计算图片相似度,具体地,使用SIFT算法。若图片相似度高于或等于85%则判断为匹配,若图片相似度低于85%则判断为不匹配。拦截匹配的图片,避免具有高相似度的图片重复发送。
图片数据库具有时效性,具体地,经过特定时间间隔便会进行一次数据清空,特定时间间隔由绑定用户设置。
第一发送模块16,用于若第一目标图片与图片数据库中的任一图片都不匹配,则发送第一目标图片至用户终端。
当摄像头处于使用状态时,通过麦克风监测周围是否存在陌生人,在监测到存在陌生人时,控制摄像头暂时脱离使用状态,待获取第一目标图片后便回到使用状态。使得阅读机器人兼具阅读和检测安全的功能且两不误。
若出现了陌生人,用户可通过用户终端调用摄像头,实时监视儿童周围发生了什么。阅读机器人接收用户终端的转动命令,操控摄像头的转动,具体地,转动命令包括转动角度、移动距离等信息。
若用户判断第一目标图片中的陌生人没有危险性,则可以通过用户终端发送取消命令至阅读机器人,取消命令包含无危害人脸信息。若阅读机器人监测到的人脸信息可匹配无危害人脸信息,则不获取也不发送包含无危害人脸信息的图片。
在第二获取模块14中,还包括:
第一子获取模块,用于第一子定位模块,用于定位声源,获取第一位置信息;
第二子获取模块,用于根据第一位置信息转动摄像头,获取第一目标图片。
监测陌生人的装置还包括:
第一子判断模块,用于判断摄像头是否处于使用状态,其中,使用状态为阅读机器人使用摄像头获取书籍图片的工作状态;
第一子控制模块,用于若摄像头不处于使用状态,则控制摄像头进入监测状态,通过所述摄像头获取摄影信息,所述监测状态为所述摄像头获取周围环境的摄影信息的工作状态。
第二子判断模块,用于判断摄影信息中是否存在人脸信息。
第三子判断模块,用于若存在人脸信息,则判断人脸信息是否与用户人脸信息匹配。
第三子获取模块,用于若人脸信息与用户人脸信息不匹配,则获取第二目标图片,第二目标图片包含人脸信息。
第四子判断模块,用于判断第二目标图片是否与图片数据库中的任一图片匹配。
第一子发送模块,用于若第二目标图片与图片数据库中的任一图片都不匹配,则发送第二目标图片至用户终端。
第一子存储模块,用于将第二目标图片存入图片数据库中。
图片数据库中存有已发送至用户终端的第二目标图片。因为摄像头获取的摄影信息随着时间的推移不断更新,所以如不经过筛选则每捕获到一次目标就会发送一张第二目标图片。为了避免相似度高的图片重复发送,将已发送的图片存入图片数据库中,在每次发送图片前比对即将发送图片和图片数据库中的图片,若即将发送图片可在图片数据库中比对出相似度高的图片,则不发送上述即将发送图片。
如果在儿童周边发现与用户人脸信息不匹配的人脸信息,即发现儿童周边有陌生人存在,阅读机器人会自动获取陌生人的照片,并发送至用户终端。也就是说,家长可以通过阅读机器人知道孩子的周围出现了陌生人。本发明中提及的陌生人定义为未预存用户信息至阅读机器人的人。
监测陌生人的装置还包括:
第四子获取模块,用于若摄像头不处于使用状态,则获取声音信息;
第五子判断模块,用于判断声音信息中是否存在人声信息;
第六子判断模块,用于若声音信息中存在人声信息,则判断人声信息是否与用户声音信息匹配;
第五子获取模块,用于若人声信息与用户声音信息不匹配,则定位声源,获取第二位置信息;
第六子获取模块,用于根据第二位置信息转动摄像头,获取第三目标图片;
第七子判断模块,用于判断第三目标图片是否与图片数据库中的任一图片匹配;
第二子发送模块,用于若第三目标图片与图片数据库中的任一图片都不匹配,则发送第三目标图片至用户终端;
第二子存储模块,用于将第三目标图片存入图片数据库中。
摄像头按照一定的规律转动,可能会出现没有及时捕捉到陌生人的人脸信息的情况。麦克风的监测相当于和摄像头构成双重保险,当陌生人说话的时候,可通过声源定位陌生人的位置,从而转动摄像头捕捉陌生人的人脸信息,提高了监测周围是否有陌生人的准确性。
监测陌生人的装置还包括:
第七子获取模块,用于若摄像头不处于使用状态,则获取声音信息;
第八子判断模块,用于判断声音信息中是否存在人声信息;
第九子判断模块,用于若声音信息中存在人声信息,则判断人声信息是否与用户声音信息匹配;
第八子获取模块,用于若人声信息与用户声音信息不匹配,则定位声源,获取第三位置信息,并将人声信息记为第一预警人声信息;
第九子获取模块,用于根据第三位置信息转动摄像头,获取第四目标图片;
第十子判断模块,用于判断第四目标图片是否与图片数据库中的任一图片匹配;
第三子发送模块,用于若第四目标图片与图片数据库中的任一图片都不匹配,则发送第四目标图片和第一预警人声信息至用户终端;
第三子存储模块,用于将第四目标图片存入图片数据库。
用户通过第四目标图片和第一预警人声信息,判断陌生人是否存在危险性,可以更全面的判断儿童周围有无危险性陌生人。若用户判断第四目标图片中的陌生人没有危险性,则可以通过用户终端发送取消命令至阅读机器人,取消命令包含无危害人声信息。若阅读机器人监测到可匹配无危害人声信息的人声信息,则不获取声源的位置信息,也不发送第四目标图片和第一预警人声信息至用户终端。
监测陌生人的装置还包括:
第一子接收模块,用于接收用户终端发送的查询音频请求信息,查询音频请求信息包含查询第一预警人声信息的请求信息;
第十子获取模块,用于获取人声开始时间点和人声结束时间点,人声开始时间点为第一次获取到第一预警人声信息的时间点,人声结束时间点为最后一次获取到第一预警人声信息的时间点;
第十一子获取模块,用于获取人声开始时间点和人声结束时间点之间的声音信息,记为第一目标音频;
第四子发送模块,用于将第一目标音频发送至用户终端。
第一目标音频包含检测到的所有第一预警人声信息及出现第一预警人声信息的时间段内的其它声音信息,使得对话之间有连贯性,易于用户了解事态状况。
在另一实施例中,对第一目标音频进行对话处理,即获取第一目标音频中的人声信息,并将人声信息按时间先后顺序进行排序,生成第二目标音频。提取有价值的信息,缩小音频的播放时长,而且按时间先后顺序进行排序符合逻辑顺序,易于用户了解事态状况。
在另一实施例中,监测陌生人的装置还包括:
第四子存储模块,用于存储人声信息至陌生人声信息;
第十二子获取模块,用于获取声音信息;
第十一子判断模块,用于判断声音信息中是否存在人声信息;
第十二子判断模块,用于若声音信息中存在人声信息,则判断人声信息是否与用户声音信息匹配,若否,则判断人声信息是否与陌生人声信息匹配;
第一子终止模块,用于若人声信息与陌生人声信息匹配,则摄像头保持使用状态;
第十三子获取模块,用于若人声信息与陌生人声信息不匹配,则定位声源,获取位置信息;
第十四子获取模块,用于根据位置信息转动摄像头,获取第五目标图片;
第五子发送模块,用于发送第五目标图片至用户终端;
第二子控制模块,用于控制摄像头回到使用状态。
由此可以在避免重复发送同一个人的图片至用户终端的同时,减少了监测陌生人对摄像头使用状态的影响,即降低监测陌生人对阅读流畅性的影响。陌生人声信息具有时效性,具体地,经过特定时间间隔便会进行一次数据清空,特定时间间隔由绑定用户设置。
监测陌生人的装置还包括:
第十五子获取模块,用于根据摄影信息获取多个图片;
第一子标记模块,用于标记多个图片中人脸信息的清晰度;
第十六子获取模块,用于获取清晰度最高的图片为第二目标图片。
具体地,采用点锐度算法计算图片的清晰度,并标记在对应图片。筛选获得清晰度高的图片,便于用户辨别陌生人的身份。
在另一实施例中,获取多张清晰度相对较高的图片为第二目标图片。
监测陌生人的装置还包括:
第二子接收模块,用于接收用户终端发送的查询视频请求信息,查询视频请求信息包含期望时间值和第二目标图片的信息;
第十七子获取模块,用于根据第二目标图片获取图片时间点,图片时间点为在摄影信息中获取第二目标图片时对应于摄影信息的时间点;
第十八子获取模块,获取以图片时间点为中心的第一目标视频,第一目标视频的时长等于所述期望时间值;
第六子发送模块,用于将第一目标视频发送至用户终端。
期望时间值的单位为时间单位。用户获取第一目标视频可更直观地看到儿童的周边发生了什么。并且可以自行调整视频的长短,防止漏掉重要信息的同时也不会因视频的时长过长而占据过多存储。
阅读机器人在获取图片时,会给每张图片标记上图片名,图片名唯一存在,每个图片名有对应的时间点,对应的时间点即图片在摄影信息中出现的时间点。阅读机器人在接收到第二目标图片后,根据第二目标图片的图片名查询对应的时间点,便可得到图片时间点。在另一实施例中,图片名以对应时间点命名,直接获取图片名即可得到图片的对应时间点。
具体地,监测陌生人的装置还包括:
第十九子获取模块,用于获取第一目标视频中存在人脸信息的第一过滤片段;
第二十子获取模块,用于获取第一过滤片段中的人脸信息与用户人脸信息不匹配的第二过滤片段;
第二十一子获取模块,用于将第二过滤片段按时间先后顺序排列,获得第二目标视频;
第七子发送模块,用于将第二目标视频发送至用户终端。
过滤出存在陌生人人脸信息的片段,方便用户快捷地从多个角度观察陌生人,从而判断陌生人是否为自己认识的人。用户可在用户终端操作,通过在用户终端选择参数“过滤”和“不过滤”来获取用户需要的视频。
如图3所示,本发明提供一种计算机可读存储介质21,其上存储有计算机程序22,计算机程序22被处理器执行时实现上述监测陌生人的方法的步骤。
如图4所示,本发明还提供一种计算机设备34,计算机设备包括存储器31和处理器33,存储器31存储有计算机程序32,处理器33执行计算机程序32时实现上述监测陌生人的方法的步骤。
Claims (10)
1.一种监测陌生人的方法,用于阅读机器人,其特征在于,用户信息预先存储于所述阅读机器人,所述用户信息包括用户声音信息,所述阅读机器人监测陌生人的方法包括:
获取周围环境的声音,记为声音信息;
判断所述声音信息中是否存在人声信息;
若是,则判断所述人声信息是否与所述用户声音信息匹配;
若否,则获取第一目标图片;
判断所述第一目标图片是否与所述图片数据库中的任一图片匹配,所述图片数据库中存有已发送至所述用户终端的图片;
若否,则发送所述第一目标图片至所述用户终端。
2.根据权利要求1所述的监测陌生人的方法,其特征在于,在所述获取第一目标图片的步骤中,包括:
定位声源,获取第一位置信息;
根据所述第一位置信息转动所述摄像头,获取第一目标图片。
3.根据权利要求1所述的监测陌生人的方法,其特征在于,所述用户信息包括用户人脸信息,在所述获取周围环境的声音的步骤之前,包括:
判断摄像头是否处于使用状态,其中,所述使用状态为所述阅读机器人使用所述摄像头获取书籍图片的工作状态;
若否,则控制所述摄像头进入监测状态,通过所述摄像头获取摄影信息,所述监测状态为所述摄像头获取周围环境的摄影信息的工作状态;
判断所述摄影信息中是否存在人脸信息;
若是,则判断所述人脸信息是否与所述用户人脸信息匹配;
若否,则获取第二目标图片,所述第二目标图片包含所述人脸信息;
判断所述第二目标图片是否与所述图片数据库中的任一图片匹配;
若否,则发送所述第二目标图片至所述用户终端;
将所述第二目标图片存入所述图片数据库中。
4.根据权利要求3所述的监测陌生人的方法,其特征在于,在所述判断摄像头是否处于使用状态的步骤之后,包括:
若否,则获取所述声音信息;
判断所述声音信息中是否存在人声信息;
若是,则判断所述人声信息是否与所述用户声音信息匹配;
若不匹配,则定位声源,获取第二位置信息;
根据所述第二位置信息转动所述摄像头,获取第三目标图片;
判断所述第三目标图片是否与所述图片数据库中的任一图片匹配;
若否,则发送所述第三目标图片至所述用户终端;
将所述第三目标图片存入所述图片数据库中;
控制所述摄像头回到所述监测状态。
5.根据权利要求3所述的监测陌生人的方法,其特征在于,在所述判断摄像头是否处于使用状态的步骤之后,包括:
若所述摄像头不处于使用状态,则获取所述声音信息;
判断所述声音信息中是否存在人声信息;
若是,则判断所述人声信息是否与所述用户声音信息匹配;
若不匹配,则定位声源,获取第三位置信息,并将所述人声信息记为第一预警人声信息;
根据所述第三位置信息转动所述摄像头,获取第四目标图片;
判断所述第四目标图片是否与所述图片数据库中的任一图片匹配;
若否,则发送所述第四目标图片和所述第一预警人声信息至所述用户终端;
将所述第四目标图片存入所述图片数据库。
6.根据权利要求5所述的阅读机器人监测陌生人的方法,其特征在于,在所述将所述第四目标图片存入所述图片数据库的步骤之后,包括:
接收用户终端发送的查询音频请求信息,所述查询音频请求信息包含查询所述第一预警人声信息的请求信息;
获取人声开始时间点和人声结束时间点,所述人声开始时间点为第一次获取到所述第一预警人声信息的时间点,所述人声结束时间点为最后一次获取到所述第一预警人声信息的时间点;
获取所述人声开始时间点和所述人声结束时间点之间的所述声音信息,记为第一目标音频;
将所述第一目标音频发送至所述用户终端。
7.根据权利要求3所述的监测陌生人的方法,其特征在于,在所述发送所述第二目标图片至所述用户终端的步骤之后,包括:
接收用户终端发送的查询视频请求信息,所述查询视频请求信息包含期望时间值和所述第二目标图片的信息;
根据所述第二目标图片获取图片时间点,所述图片时间点为在所述摄影信息中获取所述第二目标图片时对应于所述摄影信息的时间点;
获取以所述图片时间点为中心的第一目标视频,所述第一目标视频的时长等于所述期望时间值;
将所述第一目标视频发送至所述用户终端。
8.一种监测陌生人的装置,用于阅读机器人,其特征在于,用户信息预先存储于所述阅读机器人,所述用户信息包括用户人脸信息和用户声音信息,所述阅读机器人包括:
第一获取模块,用于获取周围环境的声音,记为声音信息;
第一判断模块,用于判断所述声音信息中是否存在人声信息;
第二判断模块,用于若所述声音信息中存在人声信息,则判断所述人声信息是否与所述用户声音信息匹配;
第二获取模块,用于若所述人声信息与所述用户声音信息不匹配,则获取第一目标图片;
第三判断模块,用于判断所述第一目标图片是否与所述图片数据库中的任一图片匹配,所述图片数据库中存有已发送至所述用户终端的图片;
第一发送模块,用于若所述第一目标图片与所述图片数据库中的任一图片都不匹配,则发送所述第一目标图片至所述用户终端。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的监测陌生人的方法的步骤。
10.一种计算机设备,其特征在于,其包括处理器、存储器及存储于所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的监测陌生人的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910234511.2A CN110032953A (zh) | 2019-03-26 | 2019-03-26 | 监测陌生人的方法、装置、存储介质和计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910234511.2A CN110032953A (zh) | 2019-03-26 | 2019-03-26 | 监测陌生人的方法、装置、存储介质和计算机设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110032953A true CN110032953A (zh) | 2019-07-19 |
Family
ID=67236679
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910234511.2A Pending CN110032953A (zh) | 2019-03-26 | 2019-03-26 | 监测陌生人的方法、装置、存储介质和计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110032953A (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005038115A (ja) * | 2003-07-18 | 2005-02-10 | Hitachi Ltd | 侵入者監視方法及び装置 |
CN105243780A (zh) * | 2015-09-11 | 2016-01-13 | 中山大学 | 一种儿童安全监控方法及系统 |
CN105657376A (zh) * | 2016-03-11 | 2016-06-08 | 无锡吾芯互联科技有限公司 | 基于智能移动终端的家庭安防系统及实现方法 |
CN105741467A (zh) * | 2016-04-25 | 2016-07-06 | 美的集团股份有限公司 | 一种安全监控机器人和机器人安全监控方法 |
CN106671105A (zh) * | 2017-01-17 | 2017-05-17 | 五邑大学 | 面向老人的智能陪护机器人 |
CN107168079A (zh) * | 2017-06-05 | 2017-09-15 | 百色学院 | 一种基于无线通信的家居安防机器人系统 |
CN107351132A (zh) * | 2017-07-31 | 2017-11-17 | 深圳市冠旭电子股份有限公司 | 一种基于机器人的安全检查方法、机器人及存储介质 |
-
2019
- 2019-03-26 CN CN201910234511.2A patent/CN110032953A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005038115A (ja) * | 2003-07-18 | 2005-02-10 | Hitachi Ltd | 侵入者監視方法及び装置 |
CN105243780A (zh) * | 2015-09-11 | 2016-01-13 | 中山大学 | 一种儿童安全监控方法及系统 |
CN105657376A (zh) * | 2016-03-11 | 2016-06-08 | 无锡吾芯互联科技有限公司 | 基于智能移动终端的家庭安防系统及实现方法 |
CN105741467A (zh) * | 2016-04-25 | 2016-07-06 | 美的集团股份有限公司 | 一种安全监控机器人和机器人安全监控方法 |
CN106671105A (zh) * | 2017-01-17 | 2017-05-17 | 五邑大学 | 面向老人的智能陪护机器人 |
CN107168079A (zh) * | 2017-06-05 | 2017-09-15 | 百色学院 | 一种基于无线通信的家居安防机器人系统 |
CN107351132A (zh) * | 2017-07-31 | 2017-11-17 | 深圳市冠旭电子股份有限公司 | 一种基于机器人的安全检查方法、机器人及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11714523B2 (en) | Digital image tagging apparatuses, systems, and methods | |
US7747957B2 (en) | Work space control apparatus | |
US10135925B2 (en) | Non-transitory computer-readable medium, terminal, and method | |
CN105323473A (zh) | 修改包括拍摄限制元素的图像的方法、设备和系统 | |
US9723035B1 (en) | Real-time meeting attendance reporting | |
US7921074B2 (en) | Information processing system and information processing method | |
CN110659397A (zh) | 一种行为检测方法、装置、电子设备和存储介质 | |
CN111047824B (zh) | 一种室内儿童看护联动控制预警方法及系统 | |
CN113282778A (zh) | 一种品质异常记录方法、装置、ar设备、系统及介质 | |
WO2021262938A1 (en) | Remote security system and method for securing a remote workstation | |
CN105376486A (zh) | 一种移动终端及其控制方法 | |
KR101374797B1 (ko) | 영유아를 위한 인터랙션 서비스를 제공하는 장치 및 방법, 이를 이용한 시스템 | |
JP6941950B2 (ja) | 画像提供システム、画像提供方法、および画像提供プログラム | |
JP2006524946A (ja) | デジタル画像処理における画像処理プロファイル | |
CN113963453A (zh) | 一种基于双摄像头人脸识别技术的课堂考勤方法及系统 | |
CN110032953A (zh) | 监测陌生人的方法、装置、存储介质和计算机设备 | |
JP2004356985A (ja) | カメラ撮影装置およびプログラム | |
JP2004158950A (ja) | 記録映像自動生成システム,記録映像自動生成方法,記録映像自動生成プログラムおよび記録映像自動生成プログラムの記録媒体 | |
KR101231156B1 (ko) | Qr 코드를 이용하는 사진 폴더 관리 시스템 및 사진 폴더 관리 방법 | |
KR20170024866A (ko) | 이벤트 영상 자동 생성 시스템 | |
US20160086480A1 (en) | Crime evidence provider cum help seeker | |
CN117897930A (zh) | 用于混合在线会议的流式数据处理 | |
CN105279190B (zh) | 信息处理方法、装置及电子设备 | |
JP6324284B2 (ja) | グループ学習システム | |
CN106506342A (zh) | 信息复制粘贴方法及终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190719 |