CN110211326B - 一种智能看护装置、系统和方法 - Google Patents
一种智能看护装置、系统和方法 Download PDFInfo
- Publication number
- CN110211326B CN110211326B CN201910455346.3A CN201910455346A CN110211326B CN 110211326 B CN110211326 B CN 110211326B CN 201910455346 A CN201910455346 A CN 201910455346A CN 110211326 B CN110211326 B CN 110211326B
- Authority
- CN
- China
- Prior art keywords
- information
- detector
- watched
- nursed
- nursing device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/0202—Child monitoring systems using a transmitter-receiver system carried by the parent and the child
- G08B21/0205—Specific application combined with child monitoring using a transmitter-receiver system
- G08B21/0208—Combination with audio or video communication, e.g. combination with "baby phone" function
Landscapes
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Child & Adolescent Psychology (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Alarm Systems (AREA)
- Emergency Alarm Devices (AREA)
Abstract
本发明中的一种智能看护装置,包括:被看护对象探测器和增强现实显示器,所述被看护对象探测器与所述增强现实显示器通信连接,所述被看护对象探测器,用于获取被看护对象的影像信息;所述增强现实显示器,用于至少根据所述被看护对象探测器获取的所述被看护对象的影像信息,叠加显示于所述增强现实显示器的视场中。本发明中的技术适用于大多数的看护场景中,可以作为辅助克服人的视角盲区,使用者通过叠加的影像可以知晓盲区中发生的事件;也可以作为远程监控使用,使用者能够知晓异地发生的事件。同时本申请的技术中基于人工智能比对分析,能够对异常事件、危险事件作出预判和警告提醒,避免意外的发生,实现对看护对象很好的跟踪看护。
Description
技术领域
本发明属于对被看护对象的照看领域,具体涉及一种智能看护装置,同时本发明还涉及该智能看护系统和智能看护方法。
背景技术
视觉是人接受外界信息的最主要的途径,依靠正常的双眼,普通人可以接受外界信息,作出相应的反应,但与此同时,人双眼的视角有限,只能看到前方一定角度内的事物,对于侧后方及后方的事物无法看到,即使人可以通过转头、转身来看到后方的事物,但-终究是无法实现全视角的观察。
进入二胎时代和老龄化社会,在一些需要看护的场景中,如母亲单独在家照顾幼儿、老师课堂教学或监考、护工照顾老人病人等,需要将视线一直放在看护对象身上,以免出现意外情况。同时,看护者总有一些时间内不可避免的需要做其他事情,如上厕所、在厨房做饭、晾衣服收衣服、临时出门等,这期间看护对象处于类似“失去看护”状态,存在发生意外的情况。例如,目前独自在家中照顾宝宝,母亲在厨房做饭,此时宝宝在客厅处于背后的视角盲区中,目前无法看到宝宝在干吗,只能是不是回头查看,影响做饭效率,也增加了危险。
以上的一些应用场景中可以看出,在一些特定环境中,若能够提供尽可能的或全周的视角,有利于被照看对象避免一些意外的发生,基于此,本申请在此放上进行了研究。
发明内容
针对以上现有技术中的不足,本发明提供了一种智能看护装置,通过其上的探测器可以将视角盲区中的影像显示在显示器中,供使用者查看,避免意外的发生;同时本发明还设有基于该智能看护装置的智能看护系统和智能看护方法,功能强,适应性广。
为了解决上述技术问题,本发明通过下述技术方案得以解决。
本发明中的一种智能看护装置,至少包括:被看护对象探测器和增强现实显示器,所述被看护对象探测器与所述增强现实显示器通信连接,所述被看护对象探测器,用于获取被看护对象的影像信息;所述增强现实显示器,用于至少根据所述被看护对象探测器获取的所述被看护对象的影像信息,叠加显示于所述增强现实显示器的视场中。
本申请中的智能看护装置可以适用于大多数的看护场景中,如家庭中婴幼儿看护、幼儿园中儿童看护、家庭中老人看护、敬老院中老人看护、公共场合周边环境看护儿童或老人等。正常状态下,人的视野向前,在视野中无法看到两侧和后方的场景,存在很大的视角盲区,若此时在视角盲区中出现意外、危险状况,人们无法观察到。事实上,现实中,类似母亲在家中厨房忙碌,幼儿在背对母亲的区域中自顾自玩耍,出现危险事件导致幼儿受伤的事件时有发生,难以很好的避免。本申请中,借助于智能看护装置上的看护对象探测器,可以将人背后的看护对象的影像信息叠加显示于增强现实显示器的视场中,使人可以看到视角盲区中的内容,实现对看护对象很好的跟踪看护,避免意外的发生。
一种优选的实施方式中,所述看护装置包括智能手机、平板电脑、可穿戴的智能眼镜、智能头盔或者智能帽子中的一种。这些具体的实施方式中,对于智能手机和平板电脑,增强现实显示器为其显示屏,在显示屏上可以显示看护对象的影像信息;对于可穿戴的眼镜、头盔或者帽子,增强现实显示器为置于人眼前方的AR眼镜,在其上可以显示看护对象的影像信息。
一种优选的实施方式中,所述被看护对象探测器包括:RGB摄像头、深度摄像头、红外摄像头、方位探测器、计时器、距离探测器中的一种或者多种,所述RGB摄像头,用于获取所述被看护对象的动作信息和/或实物影像信息;所述深度摄像头,用于获取所述被看护对象的实物空间尺寸信息和/或控制按键位置信息;所述红外摄像头,用于获取不可见光环境中的所述被看护对象的动作信息和/或实物影像信息;所述方位探测器,用于获取所述智能看护装置的朝向方位和/或所述被看护对象的朝向/方位;所述计时器,用于在所述被看护对象的完整或者分段的状态中,获取该状态的时间信息;所述距离探测器,用于获取所述被看护对象探测器与被看护对象的距离信息。以上结构中,通过功能性摄像头,可以获得看护对象的信息,包括影像、状态持续时间、距离等;如,其中的红外摄像头使设备可以在暗处工作。
一种优选的实施方式中,所述被看护对象探测器的数量至少为1颗。
一种优选的实施方式中,1颗所述被看护对象探测器可以相对于所述看护装置进行360度巡视,因此可以获得任意位置上的影像信息,保证看护对象处于看护状态中。
一种优选的实施方式中,1颗所述被看护对象探测器设置于所述看护装置的顶部,如,可以为广角摄像头、全景摄像头、可360度全周转动的摄像头、可起飞的小型无人机等;或者,设置于所述看护装置的头箍带,所述被看护对象探测器可以在所述头箍带的轨道中相对运动,实现全周角度的看护。摄像头会始终“盯”着被照看对象,或者,被照看对象最后影像出现的方位。
一种优选的实施方式中,3颗所述被看护对象探测器分别设置于所述看护装置的正前部,以及2个耳夹方位部,使看护没有死角。还有4颗摄像头相对头戴本体的前后左右各设1颗,甚至于8颗摄像头沿着头戴本体水平圆周等距离分布。
一种优选的实施方式中,所述被看护对象探测器还包括机器视觉识别模块和存储模块,所述存储模块,用于存储所述被看护对象的影像、危险物品影像、危险状态影像、环境空间影像、(特定空间的)方位影像中的至少一种,而且这些影像信息已经被事先标定,供AI对比时调用;所述机器视觉识别模块,用于基于获取的实时影像信息,以及与所述存储模块存储的影像信息进行人工智能地对比,识别出所述被看护对象的行为、状态、环境、方位中的至少一种。该结构中,被看护对象数据库设于设备中,基于AI智能识别,当识别到看护对象的行为状态有危险性时,或者环境中有突发情况时,可以发出提醒。
一种优选的实施方式中,所述被看护对象探测器还包括机器视觉识别模块和通信芯片,所述通信芯片,用于从网络存储器中获取所述被看护对象的影像、危险物品、危险状态、环境方位中的至少一种;所述机器视觉识别模块,用于基于获取的实时影像信息,以及与所述通信芯片传递的信息进行人工智能地对比,识别出所述被看护对象的影像、危险与否状态、环境、方位中的至少一种。该结构中,被看护对象数据库设于云端。
一种优选的实施方式中,所述被看护对象包括未成年的孩子、失能老人、残障人士、动物(宠物)中的至少一种;所述增强现实显示器,根据所述被看护对象的影像信息,显示生成实时的看护内容信息、提醒信息、状态信息、环境信息、方位信息中的至少一种。
一种优选的实施方式中,所述看护装置还包括扬声器、警示器、麦克风中的至少一种;所述扬声器,用于语音播报和/或,提醒所述被看护对象的状态信息、方位信息、环境信息中的一种或者多种;所述警示器,用于警报声/光方式提示重要注意信息;所述麦克风,可进行语音控制,用于向移动摄像头发出跟踪所述被看护对象的移动指令,或者,用于要求所述增强现实显示器显示指定方位上的摄像头获取的所述被看护对象的影像信息。
以上为本申请中的一种智能看护装置,通过探测器和显示装置的结合,可以让使用者能够看到视角盲区中的景象,能够实时跟踪看护对象,避免危险、意外的发生,适应场景丰富。
本发明中的一种智能看护系统,包括:可移动被看护对象探测器和增强现实看护装置,所述可移动被看护对象探测器与所述增强现实显示器通信连接,所述可移动被看护对象探测器,用于获取被看护对象的影像信息;所述增强现实看护装置,用于至少根据所述被看护对象探测器获取的被看护对象的影像信息,叠加显示于所述增强现实看护装置的视场中。
本申请中的智能看护系统可以适用于大多数的看护场景中,如家庭中婴幼儿看护、幼儿园中儿童看护、家庭中老人看护、敬老院中老人看护、公共场合周边环境看护儿童/老人等。借助于看护对象探测器,可以将看护对象的影像信息叠加显示于增强现实显示器的视场中,可以实现对看护对象很好的跟踪看护,避免意外的发生。
一种优选的实施方式中,所述可移动被看护对象探测器为(无线)网络摄像头、(家用)移动机器人、无人车或者无人机,这些对象探测器利用其摄像功能,极大的拓宽了人的观察区域,可以实现远距离异空实时的看护。
一种优选的实施方式中,所述可移动被看护对象探测器包括机器视觉识别模块和通信芯片,所述通信芯片,用于从网络存储器中获取所述被看护对象的影像、危险物品影像、危险状态影像、环境空间影像、方位影像中的至少一种信息;所述机器视觉识别模块,用于基于获取的实时影像信息,以及与所述通信芯片传递的信息人工智能地对比识别出所述被看护对象的影像、危险与否状态、环境、方位中的至少一种信息。该结构中,被看护对象数据库设于云端,基于AI智能识别,当识别到看护对象的行为状态有危险性时,或者环境中有突发情况时,可以发出提醒。
一种优选的实施方式中,所述智能看护系统还包括机器视觉识别模块和存储模块,所述存储模块,用于存储所述被看护对象的影像、危险物品影像、危险状态影像、环境空间影像、方位影像中的至少一种;所述存储模块可以设置于所述可移动被看护对象探测器中、或者所述增强现实显示器中,或者家用网络设备中;所述机器视觉识别模块,用于基于获取的实时影像信息,以及与所述存储模块存储的信息进行人工智能地对比,识别出所述被看护对象的影像、状态、环境、方位中的至少一种信息;所述机器视觉识别模块可以设置于所述可移动被看护对象探测器中、或者所述增强现实显示器中、或者家用网络设备中。
一种优选的实施方式中,所述智能看护装置系统还包括扬声器、警示器、麦克风中的至少一种;所述扬声器,用于语音播报和/或提醒所述被看护对象的状态信息、方位信息、环境信息中的一种或者多种;所述警示器,用于警报声/光方式提示重要注意信息;所述扬声器或警示器可以设置于所述可移动被看护对象探测器中或者所述增强现实看护装置中;所述麦克风,用于向移动摄像头发出跟踪所述被看护对象的移动指令,或者,用于要求所述增强现实显示器叠加显示指定方位上的摄像头获取的所述被看护对象的影像信息;所述麦克风设置于所述增强现实看护装置中。
以上的一种智能看护系统,通过探测器和显示装置的结合,可以让使用者能够远距离跟踪看护对象,避免危险、意外的发生,适应场景丰富。
本发明中的一种智能看护方法,其中,在增强现实看护装置的视场中,叠加显示被看护对象的实时影像信息。扩大了使用者的视觉界限,使其可以观察视角盲区中的内容,或者可以(远程)实时查看被看护对象,使用范围广。
一种优选的实施方式中,被看护对象探测器跟踪并获取所述被看护对象的所述影像信息,并将所述影像信息传递给所述增强现实看护装置,用于查看被看护对象的影像信息,能够及时发现意外状况。
一种优选的实施方式中,被看护对象探测器跟踪并获取所述被看护对象的行为影像/信息、状态影像/信息、环境影像/信息、方位影像/信息中的至少一种。例如,对于婴幼儿的看护,其行为信息包括看书、行走、玩玩具、看动画等,其状态信息包括开心、哭闹、睡觉等,其环境信息包括周边的设备:剪刀、开水壶、家具、活动物、人等,其方位信息为所在位置;这些信息方便使用者准确了解看护对象的状态。
一种优选的实施方式中,机器视觉识别模块基于所述被看护对象探测器获取的实时影像信息,与预存储的信息进行人工智能地对比,识别出所述被看护对象的行为、状态、环境、方位中的至少一种。基于AI智能识别,当识别到看护对象的行为状态(可能)有危险性时,或者环境中(可能)有突发情况时,就可以发出提醒。
一种优选的实施方式中,通过麦克风向移动摄像头发出跟踪所述被看护对象的移动指令,或者,通过所述麦克风要求所述增强现实看护装置的视场中叠加显示指定方位上的摄像头获取的所述被看护对象的影像信息,麦克风用于语音控制。
一种优选的实施方式中,通过扬声器语音播报和/或提醒所述被看护对象的状态信息、方位信息、环境信息中的一种或者多种;和/或,通过警示器警报声/光方式提示重要注意信息。
以上的智能看护方法,通过影像叠加的方式,扩大了使用者的视觉界限,使其可以观察视角盲区中的内容,或者可以远程查看看护对象,使用范围广
与现有技术相比,本发明具有以下有益效果:本发明提供了一种智能看护装置,同时本发明还涉及基于该智能看护装置的智能看护系统和智能看护方法,适用于大多数的看护场景中,可以作为辅助克服人的视角盲区,使用者通过叠加的影像可以知晓盲区中发生的事件;也可以作为远程监控使用,使用者能够知晓异地发生的事件。同时本申请的技术中基于人工智能比对分析,能够对异常事件、危险事件作出预判和警告提醒,避免意外的发生,实现对看护对象很好的跟踪看护。
附图说明
图1为本发明中实施例一中的智能看护装置的立体图。
图2为本发明中实施例一中的智能看护装置佩戴时的示意图。
图3为本发明中实施例一中的智能看护装置佩戴时的俯视图。
图4为本发明中实施例二中的智能看护装置的立体图。
图5为本发明中实施例二中的智能看护装置佩戴时的示意图。
图6为本发明中实施例二中的智能看护装置的俯视图。
图7为本发明中实施例三中的智能看护装置的立体图一。
图8为本发明中实施例三中的智能看护装置的立体图二。
图9为本发明中实施例三中的智能看护装置佩戴时的示意图。
图10为本发明中实施例三中的智能看护装置的俯视图。
图11为本发明中实施例四中的智能看护装置的立体图一。
图12为本发明中实施例四中的智能看护装置的立体图二。
图13为本发明中实施例四中的智能看护装置佩戴时的示意图。
图14为本发明中实施例四中的智能看护装置的俯视图。
图15为本发明中实施例五中的智能看护装置的立体图。
图16为本发明中实施例五中的智能看护装置的侧视图。
图17为本发明中实施例五中的智能看护装置的俯视图。
图18为本发明中实施例六中的智能看护装置的立体图。
图19为本发明中实施例六中的智能看护装置的侧视图。
图20为本发明中实施例七中的智能看护装置的立体图。
图21为本发明中实施例七中的智能看护装置的侧视图。
图22为本发明中实施例七中的智能看护装置的俯视图。
图23为本发明一种应用场景的示意图。
图24为本发明一种应用场景中叠加看护影像后的示意图。
具体实施方式
下面结合附图与具体实施方式对本发明作进一步详细描述。
以下实施方式中,自始至终相同或类似的标号表示相同或类似的原件或具有相同或类似功能的原件,以下通过参考附图描述的实施方式是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
本发明的描述中,需要理解的是,术语:中心、纵向、横向、长度、宽度、厚度、上、下、前、后、左、右、竖直、水平、顶、底、内、外、顺时针、逆时针等指示方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,因此不能理解为对本发明的限制。此外,术语:第一、第二等仅用于描述目的,而不能理解为指示或暗示相对重要性或隐含指明所示技术特征的数量。本发明的描述中,除非另有明确的规定和限定,术语:安装、相连、连接等应做广义理解,本领域的普通技术人员可以根据具体情况理解上述术语在本实用性中的具体含义。
本申请中涉及的本发明中的一种智能看护装置,包括:被看护对象探测器和增强现实显示器,所述被看护对象探测器与所述增强现实显示器通信连接,所述被看护对象探测器,用于获取被看护对象的影像信息;所述增强现实显示器,用于至少根据所述被看护对象探测器获取的所述被看护对象的影像信息,叠加显示于所述增强现实显示器的视场中。
以上结构中,所述看护装置包括智能手机、平板电脑、可穿戴的AR/VR眼镜、头盔或者帽子中的一种。这些具体的实施方式中,对于智能手机和平板电脑,增强现实显示器为其显示屏,在显示屏上可以显示看护对象的影像信息;对于可穿戴的眼镜、头盔或者帽子,增强现实显示器为置于人眼前方的AR眼镜,在其上可以显示看护对象的影像信息。所述被看护对象探测器包括:RGB摄像头、深度摄像头、红外摄像头、方位探测器、计时器、距离探测器中的一种或者多种,所述RGB摄像头,用于获取所述被看护对象的动作信息和/或实物影像信息;所述深度摄像头,用于获取所述被看护对象的实物空间尺寸信息和/或控制按键位置信息;所述红外摄像头,用于获取不可见光环境中的所述被看护对象的动作信息和/或实物影像信息;所述方位探测器,用于获取所述智能看护装置的朝向方位和/或所述被看护对象的朝向方位;所述计时器,用于在所述被看护对象的完整或者分段的状态中,获取该状态的时间信息;所述距离探测器,用于获取所述被看护对象探测器与被看护对象的距离信息。以上结构中,通过功能性摄像头,可以获得看护对象的信息,包括影像、状态持续时间、距离等;如,其中的红外摄像头使设备可以在暗处工作。
本申请中的智能看护装置可以适用于大多数的看护场景中,如家庭中婴幼儿看护、幼儿园中儿童看护、家庭中老人看护、敬老院中老人看护、仓库中物品看护、公共场合周边环境看护等。正常状态下,人的视野向前,在视野中无法看到两侧和后方的场景,存在很大的视角盲区,若此时在视角盲区中出现意外、危险状况,人们无法观察到。事实上,现实中,类似母亲在家中厨房忙碌,幼儿在背对母亲的区域中自顾自玩耍,出现危险事件导致幼儿受伤的事件时有发生,难以很好的避免。本申请中,借助于智能看护装置上的看护对象探测器,可以将人背后的看护对象的影像信息叠加显示于增强现实显示器的视场中,使人可以看到视角盲区中的内容,实现对看护对象很好的跟踪看护,避免意外的发生。
本申请中,所述被看护对象探测器还包括机器视觉识别模块和存储模块,所述存储模块,用于存储所述被看护对象的影像、危险物品、危险状态、环境方位中的至少一种;所述机器视觉识别模块,用于基于获取的实时影像信息,以及与所述存储模块存储的信息进行人工智能地对比,识别出所述被看护对象的行为、状态、环境、方位中的至少一种。该结构中,被看护对象数据库设于设备中,基于AI智能识别,当识别到看护对象的行为状态有危险性时,或者环境中有突发情况时,可以发出提醒。
另一中实施方式中,所述被看护对象探测器还包括机器视觉识别模块和通信芯片,所述通信芯片,用于从网络存储器中获取所述被看护对象的影像、危险物品、危险状态、环境方位中的至少一种;所述机器视觉识别模块,用于基于获取的实时影像信息,以及与所述通信芯片传递的信息进行人工智能地对比,识别出所述被看护对象的影像、危险与否状态、环境、方位中的至少一种。该结构中,被看护对象数据库设于云端。
本申请中,所述看护装置还包括扬声器、警示器、麦克风中的至少一种;所述扬声器,用于语音播报和/或,提醒所述被看护对象的状态信息、方位信息、环境信息中的一种或者多种;所述警示器,用于警报声/光方式提示重要注意信息;所述麦克风,可进行语音控制,用于向移动摄像头发出跟踪所述被看护对象的移动指令,或者,用于要求所述增强现实显示器显示指定方位上的摄像头获取的所述被看护对象的影像信息。
本申请中的智能看护装置的具体形式,从以下实施例中详细说明。
实施例一
如图1~3所示,智能看护装置为经过改进的AR眼镜,包括眼镜主体111,该眼镜主体111的前部设有AR显示镜片11,佩戴后置于人眼前方,该AR显示镜片11上可以叠加显示影响信息。在AR显示镜片11的中心上端设有前摄像头12,在眼镜主体111的两侧分别设有一个侧摄像头13,这三个摄像头分别周向分布,且每个摄像头的视角均≥120°,可以捕捉周边360°范围内的影像。具体结构中,该AR眼镜的两侧设有耳夹,佩戴后稳定性高,不易掉落,侧摄像头13置于该耳夹上,不易被头发遮挡,视野好。
实施例二
如图4~6所示,智能看护装置为经过改进的AR眼镜,包括环状主体112,该环状主体112具有环状结构,套在头上实现装配,同时环状结构的外周设有轨道槽14,该轨道槽14中设有可移动的移动式摄像头15,移动方式可以为常规的电机驱动的滚轮或电机驱动的齿啮合移动,因此可以在轨道槽14实现周向移动,能够拍摄周向360°的数据。该环状主体112的前部设有AR显示镜片11,佩戴后置于人眼前方,该AR显示镜片11上可以叠加显示影响信息。
实施例三
如图7~10所示,智能看护装置为经过改进的鸭舌帽,包括帽子主体113,该帽子主体113的前部设有AR显示镜片11,佩戴后置于人眼前方,该AR显示镜片11上可以叠加显示影响信息。在鸭舌帽的鸭舌结构的上端设有前摄像头12,在帽子主体113的两侧分别设有一个侧摄像头13,这三个摄像头分别周向分布,且每个摄像头的视角均≥120°,可以捕捉周边360°范围内的影像。
实施例四
如图11~14所示,智能看护装置为经过改进的鸭舌帽,包括帽子主体113,该帽子主体113的前部设有AR显示镜片11,佩戴后置于人眼前方,该AR显示镜片11上可以叠加显示影响信息。在帽子主体113的顶部设有外露的支架16(稳定器),该支架16上设有可周向转动的转动摄像头17或全景摄像头,若是转动摄像头17,通过转动可以捕捉周边360°范围内的影像,转动方式可以传统的电机驱动转动;若是全景摄像头,直接可以捕捉周边360°范围内的影像。
实施例五
如图15~17所示,智能看护装置为经过改进的头盔,包括头盔主体114和设于头盔主体114上的绑带2,该头盔主体114的前部设有AR显示镜片11,佩戴后置于人眼前方,该AR显示镜片11上可以叠加显示影响信息。在头盔主体114的前端设有前摄像头12,在头盔主体114的两侧分别设有一个侧摄像头13,这三个摄像头分别周向分布,且每个摄像头的视角均≥120°,可以捕捉周边360°范围内的影像。
实施例六
如图18~19所示,智能看护装置为经过改进的头盔,包括头盔主体114和设于头盔主体114上的绑带2,该头盔主体114的前部设有AR显示镜片11,佩戴后置于人眼前方,该AR显示镜片11上可以叠加显示影响信息。在头盔主体114的顶部设有外露的支架16(稳定器),该支架16上设有可周向转动的转动摄像头17或全景摄像头,若是转动摄像头17,通过转动可以捕捉周边360°范围内的影像,转动方式可以传统的电机驱动转动;若是全景摄像头,直接可以捕捉周边360°范围内的影像。
实施例七
如图20~22所示,智能看护装置为经过改进的头盔,包括头盔主体114和设于头盔主体114上的绑带2,该头盔主体114的前部设有AR显示镜片11,佩戴后置于人眼前方,该AR显示镜片11上可以叠加显示影响信息。在头盔主体114的顶部设有平台18,供无人机19停放,无人机19上设有摄像头,无人机19起飞后可以捕捉周围一定范围内的影像,可以去到一些人无法进入的角落,实用性更广。
以上的实施例一至七可以看出,其上的摄像头(被看护对象探测器的一部分)可以实现全周角度的看护,保证看护对象处于看护状态中。实施例一至七中,主体1上还可以设有扬声器、警示器、麦克风中的一种或多种,用于进行语音播放和语音控制。
以上实施例一、三、五中,在主体中还设有存储模块、处理模块、电池模块,均为现有技术中的常规结构。其中,所述存储模块与机器视觉识别模块(摄像头)构成看护对象探测器,用于实施看护。看护过程中,摄像头将拍摄到的影像信息显示在增强现实显示器(AR显示镜片11)上,使佩戴者在正常观察前方视野的同时,可以看到悬浮在视野中的影像。当摄像头拍摄到看护对象的影像后,会与存储模块中的图像/图片信息进行比对分析,当发现有危险因素存在时,可以通过播放语音的形式提醒使用者,同时使用者也可以通过麦克风对装置进行语音控制。
以上实施例二、四、六、七中,在主体中还设有通信芯片、处理模块、电池模块,均为现有技术中的常规结构。其中,所述通信芯片与机器视觉识别模块(摄像头)构成看护对象探测器,用于实施看护。看护过程中,摄像头将拍摄到的影像信息显示在增强现实显示器(AR显示镜片11)上,使佩戴者在正常观察前方视野的同时,可以看到悬浮在视野中的影像。当摄像头拍摄到看护对象的影像后,会通过通信芯片(如蓝牙、wifi、4G、5G等通信模块)与存储在网络存储器中的图像/图片信息进行比对分析,当发现有危险因素存在时,可以通过播放语音的形式提醒使用者,同时使用者也可以通过麦克风对装置进行语音控制。
本申请中的智能看护装置,在其应用场景中,被看护对象包括未成年的孩子、失能老人、残障人士、动物等,例如,可以适用于一人在家带孩子、一人在家照顾行动不便的老人、在家中照顾残障人士、在宠物中心照看动物等。使用过程中,除了显示影像信息,还可以根据信息比对分析的结果,在增强现实显示器中生成实时的看护内容信息、提醒信息、状态信息、环境信息、方位信息等,例如,显示被看护对象姓名、被看护对象所处位置、被看护对象安静或吵闹的状态等。
本发明中还涉及一种智能看护系统,包括:可移动被看护对象探测器和增强现实看护装置,所述可移动被看护对象探测器与所述增强现实显示器通信连接,所述可移动被看护对象探测器,用于获取被看护对象的影像信息;所述增强现实看护装置,用于至少根据所述被看护对象探测器获取的被看护对象的影像信息,叠加显示于所述增强现实看护装置的视场中。
该智能看护系统中,所述可移动被看护对象探测器为网络摄像头、家用移动机器人、无人车或者无人机,这些对象探测器利用其摄像功能,极大的拓宽了人的观察区域,可以实现远距离看护。
该智能看护系统中,还包括机器视觉识别模块和通信芯片,或者,还包括机器视觉识别模块和存储模块,其所工作原理与本发明的智能看护装置中的机器视觉识别模块和通信芯片,或者机器视觉识别模块和存储模块相同。
此外,所述智能看护装置系统还包括扬声器、警示器、麦克风中的至少一种,其中的扬声器、警示器、麦克风的工作原理与本发明的智能看护装置中的相关结构相同。
以上可以看出,本发明中的智能看护系统与智能看护装置最大的区别点在于:在智能看护系统中,可移动被看护对象探测器可以为离开本体的摄像头,只要通过网络与智能看护系统保持通讯连接即可,因此,该方案中的摄像头可以为(无线)网络摄像头、家用移动机器人、无人车或者无人机上的摄像头等,大大拓展了使用范围,如:家长在办公室上班过程中,可以选择查看家中摄像头或幼儿园教室中的摄像头,随时关注孩子的状态,防止意外情况的发生。
以上的一种智能看护系统,通过探测器和显示装置的结合,可以让使用者能够远距离跟踪看护对象,避免危险、意外的发生,适应场景丰富。
最后,本发明中涉及的一种智能看护方法,其中,在增强现实看护装置的视场中叠加显示被看护对象的影像信息。
该看护方法配合本发明中的智能看护装置或智能看护系统,扩大了使用者的视觉界限,使其可以观察视角盲区中的内容,或者可以远程查看看护对象,使用范围广。
具体的,本方法中,被看护对象探测器跟踪并获取所述被看护对象的所述影像信息,并将所述影像信息传递给所述增强现实看护装置,便于使用者查看看护对象的影像信息,能够及时发现意外状况。
例如,举例来说,被看护对象探测器跟踪并获取所述被看护对象的行为信息、状态信息、环境信息、方位信息中的至少一种。例如,对于婴幼儿的看护,其行为信息包括看书、行走、玩玩具、看动画等,其状态信息包括开心、哭闹、睡觉等,其环境信息包括周边的设备、家具、活动物、人等,其方位信息为所在位置;这些信息方便使用者准确了解看护对象的状态。
本方法中还包括以下中的一条或多条:(1)机器视觉识别模块基于所述被看护对象探测器获取的实时影像信息,与预存储的信息进行人工智能地对比,识别出所述被看护对象的行为、状态、环境、方位中的至少一种;(2)通过麦克风向移动摄像头发出跟踪所述被看护对象的移动指令,或者,通过所述麦克风要求所述增强现实看护装置的视场中叠加显示指定方位上的摄像头获取的所述被看护对象的影像信息;(3)通过扬声器语音播报和/或提醒所述被看护对象的状态信息、方位信息、环境信息中的一种或者多种;和/或,通过警示器警报声/光方式提示重要注意信息。
以上为对本发明中的智能看护装置、系统、方法的详细说明,以下举一个详细例子来说明。
参见附图23,为家中厨房的场景,当母亲一人在家带孩子时,不方便一边做饭,一边看孩子,母亲在厨房里操作家务,而2个孩子在客厅或房间中打架,在厨房的母亲因为环境噪音,根本就不知道。孩子们脱离开母亲的视线,一旦发生意外情况,严重的话后果不堪设想,现实中,也有接触到这类新闻。使用本的中的智能看护装置或看护系统,可以很好的避免这一情况。如图24中所示,母亲在厨房中做饭,2个孩子在客厅或房间中打架,此时母亲戴上本申请中的智能看护装置,在其正常的视野中会叠加显示被看护对象(2个孩子打架)的危险影像,当孩子位于母亲身后时,可以依靠智能看护装置上摄像头进行看护,当孩子位于房间中时,可以依靠房间中的摄像头,通信连接后实现看护。正常状态下,孩子自顾自玩耍,当处理模块对拍摄到的影像或图片进行比对分析后发现孩子哭闹或存在危险时,会通过语音报警提醒母亲,可以及时处理。如图24中所示,在AR眼镜的右上角(可以设定在视场中任何位置)的虚拟显示框中,显示两个孩子扭打在一起,系统识别后发出声音警报,提醒母亲进行处理,避免进一步恶性发现,及时保护两个孩子的安全。
再如,可以依靠装置中的计时器,来管理孩子的吃饭时间、看书时间或做作业时间,每天保证一定的阅读时间。可以依靠距离探测器来查看孩子与自己的距离,当距离超出阀值时会及时提醒,尤其适用于外出散步等情况中。依靠红外摄像头可以在暗处识别周边的环境,及时发现危险。其他的如深度摄像头、方位探测器等,都能够实现对于的功能。
除了上述的应用场景外,幼儿园、中小学、养老院、医院、商场、考场等众多的场合中,都可以使用本申请中的看护技术。
以上所述,本发明中的技术适用于大多数的看护场景中,可以作为辅助克服人的视角盲区,使用者通过叠加的影像可以知晓盲区中发生的事件;也可以作为远程监控使用,使用者能够知晓异地发生的事件。同时本申请的技术中基于人工智能比对分析,能够对异常事件、危险事件作出预判和警告提醒,避免意外的发生,实现对看护对象很好的跟踪看护。
本发明的保护范围包括但不限于以上实施方式,本发明的保护范围以权利要求书为准,任何对本技术做出的本领域的技术人员容易想到的替换、变形、改进均落入本发明的保护范围。
Claims (9)
1.一种智能看护装置,其特征在于,包括:被看护对象探测器和增强现实显示器,所述被看护对象探测器与所述增强现实显示器通信连接,
所述被看护对象探测器,用于获取被看护对象的影像信息;
所述增强现实显示器,用于至少根据所述被看护对象探测器获取的所述被看护对象的影像信息,叠加显示于所述增强现实显示器的视场中,所述看护装置包括可穿戴的眼镜或者帽子中的一种;
所述被看护对象探测器包括:RGB摄像头、深度摄像头、红外摄像头、方位探测器、计时器、距离探测器中的一种或者多种,
所述RGB摄像头,用于获取所述被看护对象的动作信息和/或实物影像信息;
所述深度摄像头,用于获取所述被看护对象的实物空间尺寸信息和/或控制按键位置信息;
所述红外摄像头,用于获取不可见光环境中的所述被看护对象的动作信息和/或实物影像信息
所述方位探测器,用于获取所述智能看护装置的朝向方位和/或所述被看护对象的朝向方位;
所述计时器,用于在所述被看护对象的完整或者分段的状态中,获取该状态的时间信息;
所述距离探测器,用于获取所述被看护对象探测器与被看护对象的距离信息;
所述被看护对象探测器 的数量至少为1颗;1颗所述被看护对象探测器 可以相对于所述看护装置进行360度巡视;
1颗所述被看护对象探测器 设置于所述看护装置的顶部,或者,设置于所述看护装置的头箍带,所述被看护对象探测器可以在所述头箍带的轨道中相对运动;或者:3颗所述被看护对象探测器分别设置于所述看护装置的正前部,以及2个耳夹上 ;
所述被看护对象探测器还包括机器视觉识别模块和存储模块,所述存储模块,用于存储所述被看护对象的影像、危险物品、危险状态、环境方位中的至少一种;
所述被看护对象探测器还包括通信芯片,所述通信芯片,用于从网络存储器中获取所述被看护对象的影像、危险物品、危险状态、环境方位中的至少一种;
所述机器视觉识别模块,用于基于获取的实时影像信息,以及与所述通信芯片传递的信息或者所述存储模块存储的信息进行人工智能地对比,识别出所述被看护对象的影像、危险与否状态、环境、方位中的至少一种。
2.如权利要求1所述的一种智能看护装置,其特征在于,所述被看护对象包括未成年的孩子、失能老人、残障人士、动物中的至少一种;所述增强现实显示器,根据所述被看护对象的影像信息,显示生成实时的看护内容信息、提醒信息、状态信息、环境信息、方位信息中的至少一种。
3.如权利要求2所述的一种智能看护装置,其特征在于,所述看护装置还包括扬声器、警示器、麦克风中的至少一种;
所述扬声器,用于语音播报和/或,提醒所述被看护对象的状态信息、方位信息、环境信息中的一种或者多种;
所述警示器,用于警报声/光方式提示重要注意信息;
所述麦克风,用于向移动摄像头发出跟踪所述被看护对象的移动指令,或者,用于要求所述增强现实显示器显示指定方位上的摄像头获取的所述被看护对象的影像信息。
4.一种智能看护系统,其特征在于,包括:可移动被看护对象探测器和智能看护装置,所述可移动被看护对象探测器与所述智能看护装置通信连接,
所述可移动被看护对象探测器,用于获取被看护对象的影像信息;
所述智能看护装置,用于至少根据所述被看护对象探测器获取的被看护对象的影像信息,叠加显示于所述智能看护装置的视场中,所述可移动被看护对象探测器为网络摄像头、家用移动机器人、无人车或者无人机;
所述可移动被看护对象探测器包括机器视觉识别模块和通信芯片,
所述通信芯片,用于从网络存储器中获取所述被看护对象的影像、危险物品、危险状态、环境空间、方位中的至少一种信息;
所述机器视觉识别模块,用于基于获取的实时影像信息,以及与所述通信芯片传递的信息人工智能地对比识别出所述被看护对象的影像、危险与否状态、环境、方位中的至少一种信息。
5.如权利要求4所述的一种智能看护系统,其特征在于,所述智能看护系统还包括存储模块,
所述存储模块,用于存储所述被看护对象的影像、危险物品、危险状态、环境空间、方位中的至少一种;所述存储模块设置于所述可移动被看护对象探测器中、或者所述智能看护装置中,或者家用网络设备中;
所述机器视觉识别模块,用于基于获取的实时影像信息,以及与所述存储模块存储的信息进行人工智能地对比,识别出所述被看护对象的影像、状态、环境、方位中的至少一种信息;所述机器视觉识别模块设置于所述可移动被看护对象探测器中、或者所述智能看护装置中、或者家用网络设备中。
6.如权利要求4所述的一种智能看护系统,其特征在于,所述智能看护系统还包括扬声器、警示器、麦克风中的至少一种;
所述扬声器,用于语音播报和/或提醒所述被看护对象的状态信息、方位信息、环境信息中的一种或者多种;
所述警示器,用于警报声/光方式提示重要注意信息;
所述扬声器或警示器设置于所述可移动被看护对象探测器中或者所述智能看护装置中;
所述麦克风,用于向移动摄像头发出跟踪所述被看护对象的移动指令,或者,用于要求所述智能看护装置叠加显示指定方位上的摄像头获取的所述被看护对象的影像信息;所述麦克风设置于所述智能看护装置中。
7.一种智能看护方法,其特征在于,
在增强现实看护装置的视场中叠加显示被看护对象的影像信息,机器视觉识别模块基于被看护对象探测器获取的实时影像信息,与预存储的信息进行人工智能地对比,识别出所述被看护对象的行为、状态、环境、方位中的至少一种;
被看护对象探测器跟踪并获取所述被看护对象的所述影像信息,并将所述影像信息传递给所述增强现实看护装置;
被看护对象探测器跟踪并获取所述被看护对象的行为信息、状态信息、环境信息、方位信息中的至少一种。
8.如权利要求7所述的一种智能看护方法,其特征在于,通过麦克风向移动摄像头发出跟踪所述被看护对象的移动指令,或者,通过所述麦克风要求所述增强现实看护装置的视场中叠加显示指定方位上的摄像头获取的所述被看护对象的影像信息。
9.如权利要求8所述的一种智能看护方法,其特征在于,通过扬声器语音播报和/或提醒所述被看护对象的状态信息、方位信息、环境信息中的一种或者多种;和/或,通过警示器警报声/光方式提示重要注意信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910455346.3A CN110211326B (zh) | 2019-05-29 | 2019-05-29 | 一种智能看护装置、系统和方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910455346.3A CN110211326B (zh) | 2019-05-29 | 2019-05-29 | 一种智能看护装置、系统和方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110211326A CN110211326A (zh) | 2019-09-06 |
CN110211326B true CN110211326B (zh) | 2022-05-27 |
Family
ID=67789271
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910455346.3A Active CN110211326B (zh) | 2019-05-29 | 2019-05-29 | 一种智能看护装置、系统和方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110211326B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110837299A (zh) * | 2019-11-11 | 2020-02-25 | 上海萃钛智能科技有限公司 | 一种活动管理智能装置、系统和方法 |
CN111866455B (zh) * | 2020-07-03 | 2022-04-19 | 山东科技大学 | 一种智能电子传感装置 |
CN113486838A (zh) * | 2021-07-19 | 2021-10-08 | 歌尔光学科技有限公司 | 事件提醒方法、头戴式显示设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105955043A (zh) * | 2016-05-27 | 2016-09-21 | 浙江大学 | 一种增强现实型的可见即可控智能家居控制系统及方法 |
JP2016189064A (ja) * | 2015-03-30 | 2016-11-04 | カシオ計算機株式会社 | 無線通信システム、電子機器及び無線通信システムの制御方法、制御プログラム |
CN206460410U (zh) * | 2017-02-04 | 2017-09-01 | 上海肇观电子科技有限公司 | 带增强现实的智能设备 |
CN107890343A (zh) * | 2017-11-07 | 2018-04-10 | 盐城工学院 | 健康监测方法、装置及电子设备 |
CN207835667U (zh) * | 2018-02-27 | 2018-09-07 | 深圳市视宝嘉电子有限公司 | 一种婴儿看护系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN207336929U (zh) * | 2017-06-30 | 2018-05-08 | 福州贝园网络科技有限公司 | 可穿戴显示器 |
-
2019
- 2019-05-29 CN CN201910455346.3A patent/CN110211326B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016189064A (ja) * | 2015-03-30 | 2016-11-04 | カシオ計算機株式会社 | 無線通信システム、電子機器及び無線通信システムの制御方法、制御プログラム |
CN105955043A (zh) * | 2016-05-27 | 2016-09-21 | 浙江大学 | 一种增强现实型的可见即可控智能家居控制系统及方法 |
CN206460410U (zh) * | 2017-02-04 | 2017-09-01 | 上海肇观电子科技有限公司 | 带增强现实的智能设备 |
CN107890343A (zh) * | 2017-11-07 | 2018-04-10 | 盐城工学院 | 健康监测方法、装置及电子设备 |
CN207835667U (zh) * | 2018-02-27 | 2018-09-07 | 深圳市视宝嘉电子有限公司 | 一种婴儿看护系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110211326A (zh) | 2019-09-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110211326B (zh) | 一种智能看护装置、系统和方法 | |
US11120559B2 (en) | Computer vision based monitoring system and method | |
US20230336695A1 (en) | Apparatus and Method of Location Determination in a Thermal Imaging System | |
US10229571B2 (en) | Systems and methods for determining whether an individual suffers a fall requiring assistance | |
US9740187B2 (en) | Controlling hardware in an environment | |
US20210304577A1 (en) | Integrated Camera and Ultra-Wideband Location Devices and Related Systems | |
US11032451B2 (en) | Imaging apparatuses and enclosures | |
JP7375770B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US20140140590A1 (en) | Trends and rules compliance with depth video | |
JP2020522828A (ja) | コンピュータービジョンベースの監視システムおよび方法 | |
JPWO2020218409A1 (ja) | 見守り監視システム | |
CN109077704A (zh) | 一种婴幼儿看护识别方法及系统 | |
JP2020145595A (ja) | 看視又は監視システム、又はプログラム | |
CN211021124U (zh) | 智能看护增强现实头盔和系统 | |
US20080211908A1 (en) | Monitoring Method and Device | |
TWM483510U (zh) | 智慧型居家機器人 | |
KR20200071560A (ko) | 체험농장 안전관리 시스템 | |
CN210605199U (zh) | 智能看护增强现实眼镜和系统 | |
CN211048504U (zh) | 智能看护增强现实帽子和系统 | |
KR102053163B1 (ko) | 다기능 유아 케어 시스템 | |
CN209118444U (zh) | 一种用于别墅高端住宅的门窗入侵探测和报警器 | |
CN207835667U (zh) | 一种婴儿看护系统 | |
CN109547916A (zh) | 智能照明设备、通信系统及室内定位方法 | |
US20240292075A1 (en) | Imaging apparatuses and enclosures | |
CN116512290A (zh) | 一种家庭监督机器人 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |