CN110164542A - 一种基于虚拟现实的智能人体监护系统 - Google Patents
一种基于虚拟现实的智能人体监护系统 Download PDFInfo
- Publication number
- CN110164542A CN110164542A CN201810050041.XA CN201810050041A CN110164542A CN 110164542 A CN110164542 A CN 110164542A CN 201810050041 A CN201810050041 A CN 201810050041A CN 110164542 A CN110164542 A CN 110164542A
- Authority
- CN
- China
- Prior art keywords
- monitoring
- module
- virtual reality
- information
- modeling
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- G06F19/3418—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- User Interface Of Digital Computer (AREA)
- Telephonic Communication Services (AREA)
Abstract
一种基于虚拟现实的智能人体监控系统,包括服务器、用户终端、监护装置、动作获取设备以及虚拟现实设备,监护装置包括监护无人机、监护机器人、监护摄像头、监护扬声器、监护麦克风以及监护定位手环,服务器包括:无线模块、用户注册模块、信息存储模块、监护提取模块、监护发送模块、监护获取模块、监护控制模块、监护建模模块、建模传输模块、虚拟现实模块、监护定位模块、监护显示模块、机器人驱动模块、动作获取模块、动作模拟模块以及语音交互模块,无线模块分别与服务器、用户终端、监护无人机、监护机器人、监护摄像头、监护扬声器、监护麦克风、监护定位手环、动作获取设备及虚拟现实设备保持长连接关系。
Description
技术领域
本发明涉及虚拟监护领域,特别涉及一种基于虚拟现实的智能人体监护系统。
背景技术
虚拟现实(Virtual Reality,简称VR,又译作灵境、幻真)是近年来出现的高新技术,也称灵境技术或人工环境。虚拟现实是利用电脑模拟产生一个三维空间的虚拟世界,提供使用者关于视觉、听觉、触觉等感官的模拟,让使用者如同身临其境一般,可以及时、没有限制地观察三度空间内的事物。VR是一项综合集成技术,涉及计算机图形学、人机交互技术、传感技术、人工智能等领域,它用计算机生成逼真的三维视、听、嗅觉等感觉,使人作为参与者通过适当装置,自然地对虚拟世界进行体验和交互作用。使用者进行位置移动时,电脑可以立即进行复杂的运算,将精确的3D世界影像传回产生临场感。该技术集成了计算机图形(CG)技术、计算机仿真技术、人工智能、传感技术、显示技术、网络并行处理等技术的最新发展成果,是一种由计算机技术辅助生成的高技术模拟系统。
然,如何将虚拟现实与监护领域进行相结合,使监护人能够任何地方实时的且真实的监护被监护人是目前急需解决的问题。
发明内容
发明目的:为了克服背景技术中的缺点,本发明实施例提供了一种基于虚拟现实的智能人体监护系统,能够有效解决上述背景技术中涉及的问题。
技术方案:
一种基于虚拟现实的智能人体监护系统,包括服务器、用户终端、监护装置以及虚拟现实设备,所述用户终端为注册的需要监护被监护人的终端设备,所述监护装置包括监护无人机、监护摄像头、监护扬声器、监护麦克风以及监护定位手环,所述监护装置与被监护人绑定,所述监护无人机用于实时跟随被监护人;所述监护摄像头设置于监护无人机侧方位置,用于实时摄取被监护人周围环境影像;所述监护扬声器设置于监护无人机下方位置,用于发出语音信息;所述监护麦克风设置于监护无人机下方位置,用于获取连接的监护无人机周围的语音信息;所述监护定位手环佩戴于被监护人的手腕部位,用于定位被监护人当前位置获取对应位置的定位数据以及检测被监护人的人体信息;所述虚拟现实设备与用户终端绑定,用于提供给需要监护被监护人的虚拟现实体验,所述服务器包括:无线模块,用于与注册的用户终端、所述用户终端绑定的虚拟现实设备、监护装置保持长连接关系;用户注册模块,用于将需要注册的用户终端、与所述用户终端绑定的虚拟现实设备以及与需要注册的用户终端需要监护的被监护人的监护装置进行绑定生成监护注册信息;信息存储模块,用于将生成的监护注册信息进行分类存储;监护提取模块,用于获取与无线模块保持长连接关系的用户终端发送的监护请求信息,并提取用户终端发送的监护请求信息中包含的监护信息以及将提取的监护信息发送给监护发送模块;监护发送模块,用于接收监护提取模块发送的监护请求信息包含的监护信息以及根据所述监护请求信息包含的监护信息提取信息存储模块存储的与所述监护请求信息包含的监护信息符合的监护注册信息,并将搜索出的与所述监护请求信息包含的监护信息符合的监护注册信息发送给监护获取模块;监护获取模块,用于接收监护发送模块发送的与所述监护请求信息包含的监护信息符合的监护注册信息以及根据所述监护请求信息包含的监护信息符合的监护注册信息控制与发送所述监护请求信息的用户终端绑定的监护装置的监护无人机启动运行以及控制与发送所述监护请求信息的用户终端绑定的监护装置的监护摄像头实时摄取连接的监护无人机周围的环境影像、监护麦克风实时获取连接的监护无人机周围的语音信息,并将实时摄取的连接的监护无人机周围的环境影像以及实时获取连接的监护无人机周围的语音信息发送给监护控制模块以及监护建模模块;监护控制模块,用于接收监护获取模块发送的监护摄像头实时摄取连接的监护无人机周围的环境影像以及提取接收到所述监护无人机周围的环境影像包含的监护人影像,并根据提取的监护人影像控制与摄取所述监护人影像的监护摄像头绑定的监护无人机实时跟随所述监护人影像中的被监护人;监护建模模块,用于接收监护获取模块发送的监护摄像头实时摄取的连接的监护无人机周围的环境影像、监护麦克风实时获取连接的监护无人机周围的语音信息,并根据接收到的实时环境影像和实时语音信息进行监护虚拟现实建模以及将监护虚拟现实建模完成的监护虚拟现实场景实时发送给建模传输模块;建模传输模块,用于获取发送监护请求信息的用户终端以及实时接收监护建模模块发送的虚拟现实建模完成的监护虚拟现实场景,并将虚拟现实建模完成的监护虚拟现实场景实时发送给虚拟现实模块;虚拟现实模块,用于实时接收建模传输模块发送的建模完成的监护虚拟现实场景以及将接收到的监护虚拟现实场景发送给与所述发送监护请求信息的用户终端绑定的虚拟现实设备,并利用无线模块控制与所述发送监护请求信息的用户终端绑定的虚拟现实设备根据接收到的监护虚拟现实场景进行虚拟现实环境模拟。
作为本发明的一种优选方式,所述监护建模模块包括环境建模模块、人体建模模块以及音频建模模块,环境建模模块,用于根据监护获取模块发送的监护摄像头实时摄取的连接的监护无人机周围的环境影像进行被监护人环境布局建模,并在环境布局建模完成后将监护虚拟现实场景发送给人体建模模块;人体建模模块,用于接收环境建模模块发送的环境布局建模完成的监护虚拟现实场景以及根据监护获取模块发送的监护摄像头实时摄取的连接的监护无人机周围的环境影像内包含的被监护人影像以及以被监护人为中心向四周扩散预设距离的人体影像进行人体建模,并在人体建模完成后将带有人体建模的监护虚拟现实场景发送给音频建模模块;音频建模模块,用于接收人体建模模块发送的带有人体建模的监护虚拟现实场景以及根据监护获取模块发送的监护麦克风实时获取的连接的监护无人机周围的环境语音信息进行音频建模,并在音频建模完成后将带有音频的监护虚拟现实场景发送给建模传输模块;
作为本发明的一种优选方式,所述服务器还包括:监护定位模块,用于实时获取佩戴于被监护人手腕部位的监护定位手环实时定位数据以及被监护人的实时人体信息,将获取的定位数据以及被监护人人体信息与对应的监护定位手环绑定的虚拟现实设备和用户终端生成监护信息,并将生成的监护信息存储于信息存储模块内与对应的监护定位手环对应的监护注册信息位置。
作为本发明的一种优选方式,所述服务器还包括:监护显示模块,用于实时获取监护定位模块生成的监护信息包含的佩戴于被监护人手腕部位的监护定位手环实时定位数据以及被监护人的实时人体信息,并将获取到的佩戴于被监护人手腕部位的监护定位手环实时定位数据以及被监护人的实时人体信息实时显示于所述监护信息包含的虚拟现实设备接收到的建模完成的监护虚拟现实场景内。
作为本发明的一种优选方式,所述监护装置还包括监护机器人,所述监护机器人与被监护人、需要监护被监护人用户终端以及和用户终端绑定的虚拟现实设备进行绑定,用于实时跟随被监护人并执行指定操作;所述监护机器人上有设置有所述监护机器人连接的监护摄像头、监护麦克风以及监护扬声器。
作为本发明的一种优选方式,所述服务器还包括:机器人驱动模块,用于控制与发送所述监护请求信息的用户终端绑定的监护装置的监护机器人连接的监护摄像头实时摄取连接的监护机器人周围的环境影像以及提取接收到所述监护机器人周围的环境影像包含的监护人影像并根据提取的监护人影像控制与摄取所述监护人影像的监护摄像头绑定的监护机器人实时跟随所述监护人影像中的被监护人。
作为本发明的一种优选方式,还包括动作获取设备,所述动作获取设备用于佩戴于用户手部部位并与佩戴动作获取设备用户的用户终端、虚拟现实设备以及佩戴的用户需要监护的被监护人绑定的监护装置进行绑定,同时所述动作获取设备与无线模块保持长连接关系,用于获取用户手部动作信息。
作为本发明的一种优选方式,所述服务器还包括:动作获取模块,用于获取与无线模块保持长连接关系的动作获取设备的用户动作信息以及将获取的用户动作信息与动作获取设备绑定的用户终端、虚拟现实设备以及监护装置连接,并将获取的用户动作信息发送给动作模拟模块。
作为本发明的一种优选方式,所述服务器还包括:动作模拟模块,用于接收动作获取模块发送的用户动作信息以及根据用户动作信息控制与所述用户动作信息绑定的监护装置的监护机器人模拟与用户动作信息一致的动作。
作为本发明的一种优选方式,所述服务器还包括语音交互模块,用于获取与被监护人绑定的监护装置的监控麦克风获取的被监护人语音信息以及将接收到的被监护人语音信息发送给用户终端,并实时获取用户终端返回的用户语音信息以及根据获取的用户终端返回的用户语音信息控制与被监护人绑定的监护装置的监控扬声器进行播放。
本发明实现以下有益效果:1.智能人体监护系统能够获取与用户终端发送的监护请求信息包含的监护信息,并获取对应的监控无人机周围的环境影像进行对应虚拟现实建模,然后将建模完成的虚拟现实场景传输至与用户终端绑定的虚拟现实设备内提供给用户进行虚拟现实监护。
2.所述智能人体监护系统在进行虚拟现实模拟时将被监护人的监护信息以及定位数据显示于对应的虚拟现实场景内。
3.被监护人的监护人能够通过监护机器人以及动作获取设备进行配合实时控制监护机器人执行与自身动作一致的动作。
4.监护人能够通过监护无人机和/或监护机器人连接的监护扬声器和/或监护麦克风与被监护人进行语音交互。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并于说明书一起用于解释本公开的原理。
图1为本发明其中一个示例提供的智能人体监护系统的电子器件连接图;
图2为本发明其中一个示例提供的监护虚拟现实体验方法的流程图;
图3为本发明其中一个示例提供的监护信息显示方法的流程图;
图4为本发明其中一个示例提供的监护机器人动作模拟方法的流程图;
图5为本发明其中一个示例提供的语音交互方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。
实施例一
参考图1-2所示,图1为本发明其中一个示例提供的智能人体监护系统的电子器件连接图;图2为本发明其中一个示例提供的监护虚拟现实体验方法的流程图。
具体的,本实施例提供一种基于虚拟现实的智能人体监护系统,包括服务器1、用户终端2、监护装置3以及虚拟现实设备4,用户终端2为注册的需要监护被监护人的终端设备,监护装置3包括监护无人机30、监护摄像头31、监护扬声器32、监护麦克风33以及监护定位手环34,监护装置3与被监护人绑定,监护无人机30用于实时跟随被监护人;监护摄像头31设置于监护无人机30侧方位置,用于实时摄取被监护人周围环境影像;监护扬声器32设置于监护无人机30下方位置,用于发出语音信息;监护麦克风33设置于监护无人机30下方位置,用于获取连接的监护无人机30周围的语音信息;监护定位手环34佩戴于被监护人的手腕部位,用于定位被监护人当前位置获取对应位置的定位数据以及检测被监护人的人体信息;虚拟现实设备4与用户终端2绑定,用于提供给需要监护被监护人的虚拟现实体验,其特征在于,服务器1包括:无线模块10,用于与注册的用户终端2、用户终端2绑定的虚拟现实设备4、监护装置3保持长连接关系;用户注册模块11,用于将需要注册的用户终端2、与用户终端2绑定的虚拟现实设备4以及与需要注册的用户终端2需要监护的被监护人的监护装置3进行绑定生成监护注册信息;信息存储模块12,用于将生成的监护注册信息进行分类存储;监护提取模块13,用于获取与无线模块10保持长连接关系的用户终端2发送的监护请求信息,并提取用户终端2发送的监护请求信息中包含的监护信息以及将提取的监护信息发送给监护发送模块14;监护发送模块14,用于接收监护提取模块13发送的监护请求信息包含的监护信息以及根据监护请求信息包含的监护信息提取信息存储模块12存储的与监护请求信息包含的监护信息符合的监护注册信息,并将搜索出的与监护请求信息包含的监护信息符合的监护注册信息发送给监护获取模块15;监护获取模块15,用于接收监护发送模块14发送的与监护请求信息包含的监护信息符合的监护注册信息以及根据监护请求信息包含的监护信息符合的监护注册信息控制与发送监护请求信息的用户终端2绑定的监护装置3的监护无人机30启动运行以及控制与发送监护请求信息的用户终端2绑定的监护装置3的监护摄像头31实时摄取连接的监护无人机30周围的环境影像、监护麦克风33实时获取连接的监护无人机30周围的语音信息,并将实时摄取的连接的监护无人机30周围的环境影像以及实时获取连接的监护无人机30周围的语音信息发送给监护控制模块16以及监护建模模块17;监护控制模块16,用于接收监护获取模块15发送的监护摄像头31实时摄取连接的监护无人机30周围的环境影像以及提取接收到监护无人机30周围的环境影像包含的监护人影像,并根据提取的监护人影像控制与摄取监护人影像的监护摄像头31绑定的监护无人机30实时跟随监护人影像中的被监护人;监护建模模块17,用于接收监护获取模块15发送的监护摄像头31实时摄取的连接的监护无人机30周围的环境影像、监护麦克风33实时获取连接的监护无人机30周围的语音信息,并根据接收到的实时环境影像和实时语音信息进行监护虚拟现实建模以及将监护虚拟现实建模完成的监护虚拟现实场景实时发送给建模传输模块18;建模传输模块18,用于获取发送监护请求信息的用户终端2以及实时接收监护建模模块17发送的虚拟现实建模完成的监护虚拟现实场景,并将虚拟现实建模完成的虚拟现实场景实时发送给虚拟现实模块19;虚拟现实模块19,用于实时接收建模传输模块18发送的建模完成的监护虚拟现实场景以及将接收到的监护虚拟现实场景发送给与发送监护请求信息的用户终端2绑定的虚拟现实设备4,并利用无线模块10控制与发送监护请求信息的用户终端2绑定的虚拟现实设备4根据接收到的监护虚拟现实场景进行虚拟现实环境模拟。
作为本发明的一种优选方式,监护建模模块17包括环境建模模块170、人体建模模块171以及音频建模模块172,环境建模模块170,用于根据监护获取模块15发送的监护摄像头31实时摄取的连接的监护无人机30周围的环境影像进行被监护人环境布局建模,并在环境布局建模完成后将监护虚拟现实场景发送给人体建模模块171;人体建模模块171,用于接收环境建模模块170发送的环境布局建模完成的监护虚拟现实场景以及根据监护获取模块15发送的监护摄像头31实时摄取的连接的监护无人机30周围的环境影像内包含的被监护人影像以及以被监护人为中心向四周扩散预设距离的人体影像进行人体建模,并在人体建模完成后将带有人体建模的监护虚拟现实场景发送给音频建模模块172;音频建模模块172,用于接收人体建模模块171发送的带有人体建模的监护虚拟现实场景以及根据监护获取模块15发送的监护麦克风33实时获取的连接的监护无人机30周围的环境语音信息进行音频建模,并在音频建模完成后将带有音频的监护虚拟现实场景发送给建模传输模块18;
具体的,一种虚拟现实的智能人体监护系统的工作步骤如下:
S1、监护提取模块13利用无线模块10实时获取与无线模块10保持长连接关系到的用户终端2发送的监护请求信息并提取用户终端2发送的监护请求信息中包含的监护信息以及将提取的监护信息发送给监护发送模块14;(监护请求信息包含有监护信息、监护请求、与用户终端2绑定的虚拟现实设备4信息、与被监护人绑定的监护装置3信息以及与虚拟现实设备4绑定的动作获取设备5信息,监护信息包含有被监护人体影像以及监护人信息。)
S2、监护发送模块14接收到监护提取模块13发送的监护请求信息包含的监护信息则根据监护请求信息包含的监护信息提取信息存储模块12存储的与监护请求信息包含的监护信息符合的监护注册信息并将搜索出的与监护请求信息包含的监护信息符合的监护注册信息发送给监护获取模块15;
S3、监护获取模块15接收到监护发送模块14发送的与监护请求信息包含的监护信息符合的监护注册信息则根据监护请求信息包含的监护信息符合的监护注册信息利用无线模块10控制与发送监护请求信息的用户终端2绑定的监护装置3的监护无人机30启动运行;(即根据符合的监护注册信息包含的监护装置3信息控制对应监护装置3信息中的监护无人机30启动进入监护状态,与监护无人机30连接的电子器件也进入待启动状态,监护无人机30内部设置有提供电力的蓄电池。)
S4、监护无人机30启动运行后,监护获取模块15利用无线模块10控制与发送监护请求信息的用户终端2绑定的监护装置3的监护摄像头31实时摄取连接的监护无人机30周围的环境影像、监护麦克风33实时获取连接的监护无人机30周围的语音信息并将实时摄取的连接的监护无人机30周围的环境影像以及实时获取连接的监护无人机30周围的环境语音信息发送给监护控制模块16以及监护建模模块17;
S5、监护控制模块16接收到监护获取模块15发送的实时摄取的连接的监护无人机30周围的环境影像则提取接收到监护无人机30周围的环境影像包含的监护人影像并根据提取的监护人影像利用无线模块10控制与摄取监护人影像的监护摄像头31绑定的监护无人机30实时跟随监护人影像中的被监护人;(即带有摄取被监护人的监护摄像头31连接的监护无人机30实时跟随被监护人。)
S6、监护建模模块17接收到监护获取模块15发送的实时摄取的连接的监护无人机30周围的环境影像以及实时获取连接的监护无人机30周围的环境语音信息则控制内部的环境建模模块170根据实时摄取的连接的监护无人机30周围的环境影像进行被监护人周围环境布局建模并在建模完成后将环境布局建模完成的虚拟现实场景发送给人体建模模块171;(周围环境布局建模是指以被监护人影像为中心向四周扩散200米半径范围内的环境影像布局建模。)
S7、人体建模模块171接收到环境建模模块170发送的环境布局建模完成的虚拟现实场景则根据实时摄取的连接的监护无人机30周围的环境影像内包含的被监护人影像以及以被监护人为中心向四周扩散预设距离的人体影像进行人体建模并在人体建模完成后将带有人体建模的监护虚拟现实场景发送给音频建模模块172;(预设距离是指0-100公里半径范围,在本实施例中是指200米半径范围。)
S8、音频建模模块172接收到人体建模模块171发送的带有人体建模的监护虚拟现实场景则根据实时获取的连接的监护无人机30周围的环境语音信息进行音频建模并在音频建模完成后将带有音频的监护虚拟现实场景发送给建模传输模块18;(即以让监护人在带有虚拟现实设备4进行虚拟现实体验时,能够接收与监护人当前感受到的环境一致。)
S9、建模传输模块18接收到音频建模模块172发送的带有音频的监护虚拟现实场景则获取与监护虚拟现实场景的根据建模的环境影像对应监控摄像头连接的监控无人机绑定的发送监护请求信息的用户终端2并将虚拟现实建模完成的监护虚拟现实场景实时发送给虚拟现实模块19;
S10、虚拟现实模块19接收到建模传输模块18发送的带有音频监护虚拟现实场景则将接收到的监护虚拟现实场景发送给与发送监护请求信息的用户终端2绑定的虚拟现实设备4并利用无线模块10控制与发送监护请求信息的用户终端2绑定的虚拟现实设备4根据接收到的监护虚拟现实场景进行虚拟现实环境模拟。(同时被监护人进行移动,对应的虚拟现实场景也会跟随对应移动并实时建模模拟,以让监护人能够实时体验被监护人的实时状态。)
实施例二
参考图1,图3所示,图3为本发明其中一个示例提供的监护信息显示方法的流程图。
具体的,本实施例与实施例一基本上一致,区别之处在于,本实施例中,服务器1还包括:监护定位模块20,用于实时获取佩戴于被监护人手腕部位的监护定位手环34实时定位数据以及被监护人的实时人体信息,将获取的定位数据以及被监护人人体信息与对应的监护定位手环34绑定的虚拟现实设备4和用户终端2生成监护信息,并将生成的监护信息存储于信息存储模块12内与对应的监护定位手环34对应的监护注册信息位置。
作为本发明的一种优选方式,服务器1还包括:监护显示模块21,用于实时获取监护定位模块20生成的监护信息包含的佩戴于被监护人手腕部位的监护定位手环34实时定位数据以及被监护人的实时人体信息,并将获取到的佩戴于被监护人手腕部位的监护定位手环34实时定位数据以及被监护人的实时人体信息实时显示于监护信息包含的虚拟现实设备4接收到的建模完成的监护虚拟现实场景内。
具体的,在音频建模模块172在将带有音频的监护虚拟现实场景发送给建模传输模块18前,还包括以下工作步骤:
S80、服务器1内部的监护定位模块20利用无线模块10实时获取佩戴于被监护人手腕部位的监护定位手环34实时定位数据以及被监护人的实时人体信息并将获取的定位数据以及被监护人人体信息与对应的监护定位手环34绑定的虚拟现实设备4和用户终端2生成监护信息;
S81、在监护信息生成后,监护定位模块20将生成的监护信息存储于信息存储模块12内与对应的监护定位手环34对应的监护注册信息位置;
S82、同时,服务器1内部的监护显示模块21实时获取监护定位模块20生成的监护信息包含的佩戴于被监护人手腕部位的监护定位手环34实时定位数据以及被监护人的实时人体信息并将获取到的佩戴于被监护人手腕部位的监护定位手环34实时定位数据以及被监护人的实时人体信息实时显示于监护信息包含的虚拟现实设备4接收到的建模完成的监护虚拟现实场景内。
实施例三
参考图1,图4所示,图4为本发明其中一个示例提供的监护机器人动作模拟方法的流程图。
本实施例与实施例一基本上一致,区别之处在于,本实施例中,监护装置3还包括监护机器人35,监护机器人35与被监护人、需要监护被监护人用户终端2以及和用户终端2绑定的虚拟现实设备4进行绑定,用于实时跟随被监护人并执行指定操作。
作为本发明的一种优选方式,服务器1还包括:机器人驱动模块22,用于获取监护获取模块15发送的监护摄像头31实时摄取连接的监护无人机30周围的环境影像以及提取接收到监护无人机30周围的环境影像包含的监护人影像,并根据提取的监护人影像控制与摄取监护人影像的监护摄像头31绑定的监护机器人35实时跟随监护人影像中的被监护人。
作为本发明的一种优选方式,还包括动作获取设备5,动作获取设备5用于佩戴于用户手部部位并与佩戴动作获取设备5用户的用户终端2、虚拟现实设备4以及佩戴的用户需要监护的被监护人绑定的监护装置3进行绑定,同时动作获取设备5与无线模块10保持长连接关系,用于获取用户手部动作信息。
作为本发明的一种优选方式,服务器1还包括:动作获取模块23,用于获取与无线模块10保持长连接关系的动作获取设备5的用户动作信息以及将获取的用户动作信息与动作获取设备5绑定的用户终端2、虚拟现实终端以及监护装置3连接,并将获取的用户动作信息发送给动作模拟模块24。
作为本发明的一种优选方式,服务器1还包括:动作模拟模块24,用于接收动作获取模块23发送的用户动作信息以及根据用户动作信息控制与用户动作信息绑定的监护装置3的监护机器人35模拟与用户动作信息一致的动作。
具体的,在监护获取模块15控制与发送监护请求信息的用户终端2绑定的监护装置3的监护无人机30启动运行时,还包括以下工作步骤:
S11、监护获取模块15利用无线模块10控制与发送监护请求信息的用户终端2绑定的监护装置3的监护机器人35启动运行;(即根据符合的监护注册信息包含的监护装置3信息控制对应监护装置3信息中的监护机器人35启动进入监护状态,与监护机器人35连接的电子器件也进入待启动状态,监护机器人35内部设置有提供电力的蓄电池。)
S12、在监护机器人35启动完成后,服务器1内部的机器人驱动模块22利用无线模块10控制与发送监护请求信息的用户终端2绑定的监护装置3的监护机器人35连接的监护摄像头31实时摄取连接的监护机器人35周围的环境影像以及提取接收到监护机器人35周围的环境影像包含的监护人影像并根据提取的监护人影像利用无线模块10控制与摄取监护人影像的监护摄像头31绑定的监护机器人35实时跟随监护人影像中的被监护人;
S13、同时,服务器1内部的动作获取模块23利用无线模块10实时获取与无线模块10保持长连接关系的动作获取设备5的用户动作信息,将获取的用户动作信息与动作获取设备5绑定的用户终端2、虚拟现实设备4以及监护装置3绑定并将获取的用户动作信息发送给动作模拟模块24;(能够获取用户佩戴动作获取设备5的部位的动作信息,获取后,生成与动作信息对应的动作模拟信号。)
S14、动作模拟模块24接收到动作获取模块23发送的用户动作信息则根据用户动作信息利用无线模块10控制与用户动作信息绑定的监护装置3的监护机器人35模拟与用户动作信息一致的动作。(监护机器人35能够模拟与用户动作信息一致的动作,以让监护人实时照顾被监护人,若监护人未进行动作则监护机器人35进入跟随状态。)
实施例三
参考图1,图5所示,图5为本发明其中一个示例提供的语音交互方法的流程图。
具体的,本实施例与实施例一基本上一致,区别之处在于,本实施例中,服务器1还包括语音交互模块25,用于获取与被监护人绑定的监护装置3的监控麦克风获取的被监护人语音信息以及将接收到的被监护人语音信息发送给用户终端2,并实时获取用户终端2返回的用户语音信息以及根据获取的用户终端2返回的用户语音信息控制与被监护人绑定的监护装置3的监控扬声器进行播放。
在具体的,在监护获取模块15控制与摄取监护人影像的监护摄像头31连接的监护无人机30和/或监护机器人35实时跟随监护人影像中的被监护人,还包括以下工作步骤:
S15、服务器1内部的语音交互模块25利用无线模块10实时获取与被监护人绑定的监护装置3的监控麦克风获取的被监护人语音信息并将获取到的被监护人语音信息利用无线模块10发送给用户终端2;
S16、语音交互模块25利用无线模块10实时获取用户终端2返回的用户语音信息并根据获取的用户终端2返回的用户语音信息利用无线模块10控制与被监护人绑定的监护装置3的监控扬声器进行播放。
上述实施例只为说明本发明的技术构思及特点,其目的是让熟悉该技术领域的技术人员能够了解本发明的内容并据以实施,并不能以此来限制本发明的保护范围。凡根据本发明精神实质所作出的等同变换或修饰,都应涵盖在本发明的保护范围之内。
Claims (9)
1.一种基于虚拟现实的智能人体监护系统,包括服务器、用户终端、监护装置以及虚拟现实设备,所述用户终端为注册的需要监护被监护人的终端设备,所述监护装置包括监护无人机、监护摄像头、监护扬声器、监护麦克风以及监护定位手环,所述监护装置与被监护人绑定,所述监护无人机用于实时跟随被监护人;所述监护摄像头设置于监护无人机侧方位置,用于实时摄取被监护人周围环境影像;所述监护扬声器设置于监护无人机下方位置,用于发出语音信息;所述监护麦克风设置于监护无人机下方位置,用于获取连接的监护无人机周围的语音信息;所述监护定位手环佩戴于被监护人的手腕部位,用于定位被监护人当前位置获取对应位置的定位数据以及检测被监护人的人体信息;所述虚拟现实设备与用户终端绑定,用于提供给需要监护被监护人的虚拟现实体验,其特征在于,所述服务器包括:无线模块,用于与注册的用户终端、所述用户终端绑定的虚拟现实设备、监护装置保持长连接关系;用户注册模块,用于将需要注册的用户终端、与所述用户终端绑定的虚拟现实设备以及与需要注册的用户终端需要监护的被监护人的监护装置进行绑定生成监护注册信息;信息存储模块,用于将生成的监护注册信息进行分类存储;监护提取模块,用于获取与无线模块保持长连接关系的用户终端发送的监护请求信息,并提取用户终端发送的监护请求信息中包含的监护信息以及将提取的监护信息发送给监护发送模块;监护发送模块,用于接收监护提取模块发送的监护请求信息包含的监护信息以及根据所述监护请求信息包含的监护信息提取信息存储模块存储的与所述监护请求信息包含的监护信息符合的监护注册信息,并将搜索出的与所述监护请求信息包含的监护信息符合的监护注册信息发送给监护获取模块;监护获取模块,用于接收监护发送模块发送的与所述监护请求信息包含的监护信息符合的监护注册信息以及根据所述监护请求信息包含的监护信息符合的监护注册信息控制与发送所述监护请求信息的用户终端绑定的监护装置的监护无人机启动运行以及控制与发送所述监护请求信息的用户终端绑定的监护装置的监护摄像头实时摄取连接的监护无人机周围的环境影像、监护麦克风实时获取连接的监护无人机周围的语音信息,并将实时摄取的连接的监护无人机周围的环境影像以及实时获取连接的监护无人机周围的语音信息发送给监护控制模块以及监护建模模块;监护控制模块,用于接收监护获取模块发送的监护摄像头实时摄取连接的监护无人机周围的环境影像以及提取接收到所述监护无人机周围的环境影像包含的监护人影像,并根据提取的监护人影像控制与摄取所述监护人影像的监护摄像头绑定的监护无人机实时跟随所述监护人影像中的被监护人;监护建模模块,用于接收监护获取模块发送的监护摄像头实时摄取的连接的监护无人机周围的环境影像、监护麦克风实时获取连接的监护无人机周围的语音信息,并根据接收到的实时环境影像和实时语音信息进行监护虚拟现实建模以及将监护虚拟现实建模完成的监护虚拟现实场景实时发送给建模传输模块;建模传输模块,用于获取发送监护请求信息的用户终端以及实时接收监护建模模块发送的虚拟现实建模完成的监护虚拟现实场景,并将虚拟现实建模完成的监护虚拟现实场景实时发送给虚拟现实模块;虚拟现实模块,用于实时接收建模传输模块发送的建模完成的监护虚拟现实场景以及将接收到的监护虚拟现实场景发送给与所述发送监护请求信息的用户终端绑定的虚拟现实设备,并利用无线模块控制与所述发送监护请求信息的用户终端绑定的虚拟现实设备根据接收到的监护虚拟现实场景进行虚拟现实环境模拟。
2.根据权利要求1所述的一种基于虚拟现实的智能人体监护系统,其特征在于,所述监护建模模块包括环境建模模块、人体建模模块以及音频建模模块,环境建模模块,用于根据监护获取模块发送的监护摄像头实时摄取的连接的监护无人机周围的环境影像进行被监护人环境布局建模,并在环境布局建模完成后将监护虚拟现实场景发送给人体建模模块;人体建模模块,用于接收环境建模模块发送的环境布局建模完成的监护虚拟现实场景以及根据监护获取模块发送的监护摄像头实时摄取的连接的监护无人机周围的环境影像内包含的被监护人影像以及以被监护人为中心向四周扩散预设距离的人体影像进行人体建模,并在人体建模完成后将带有人体建模的监护虚拟现实场景发送给音频建模模块;音频建模模块,用于接收人体建模模块发送的带有人体建模的监护虚拟现实场景以及根据监护获取模块发送的监护麦克风实时获取的连接的监护无人机周围的环境语音信息进行音频建模,并在音频建模完成后将带有音频的监护虚拟现实场景发送给建模传输模块;
根据权利要求1所述的一种基于虚拟现实的智能人体监护系统,其特征在于,所述服务器还包括:监护定位模块,用于实时获取佩戴于被监护人手腕部位的监护定位手环实时定位数据以及被监护人的实时人体信息,将获取的定位数据以及被监护人人体信息与对应的监护定位手环绑定的虚拟现实设备和用户终端生成监护信息,并将生成的监护信息存储于信息存储模块内与对应的监护定位手环对应的监护注册信息位置。
3.根据权利要求1所述的一种基于虚拟现实的智能人体监护系统,其特征在于,所述服务器还包括:监护显示模块,用于实时获取监护定位模块生成的监护信息包含的佩戴于被监护人手腕部位的监护定位手环实时定位数据以及被监护人的实时人体信息,并将获取到的佩戴于被监护人手腕部位的监护定位手环实时定位数据以及被监护人的实时人体信息实时显示于所述监护信息包含的虚拟现实设备接收到的建模完成的监护虚拟现实场景内。
4.根据权利要求1所述的一种基于虚拟现实的智能人体监护系统,其特征在于,所述监护装置还包括监护机器人,所述监护机器人与被监护人、需要监护被监护人用户终端以及和用户终端绑定的虚拟现实设备进行绑定,用于实时跟随被监护人并执行指定操作;所述监护机器人上有设置有所述监护机器人连接的监护摄像头、监护麦克风以及监护扬声器。
5.根据权利要求1所述的一种基于虚拟现实的智能人体监护系统,其特征在于,所述服务器还包括:机器人驱动模块,用于控制与发送所述监护请求信息的用户终端绑定的监护装置的监护机器人连接的监护摄像头实时摄取连接的监护机器人周围的环境影像以及提取接收到所述监护机器人周围的环境影像包含的监护人影像并根据提取的监护人影像控制与摄取所述监护人影像的监护摄像头绑定的监护机器人实时跟随所述监护人影像中的被监护人。
6.根据权利要求1所述的一种基于虚拟现实的智能人体监护系统,其特征在于,还包括动作获取设备,所述动作获取设备用于佩戴于用户手部部位并与佩戴动作获取设备用户的用户终端、虚拟现实设备以及佩戴的用户需要监护的被监护人绑定的监护装置进行绑定,同时所述动作获取设备与无线模块保持长连接关系,用于获取用户手部动作信息。
7.根据权利要求1所述的一种基于虚拟现实的智能人体监护系统,其特征在于,所述服务器还包括:动作获取模块,用于获取与无线模块保持长连接关系的动作获取设备的用户动作信息以及将获取的用户动作信息与动作获取设备绑定的用户终端、虚拟现实设备以及监护装置连接,并将获取的用户动作信息发送给动作模拟模块。
8.根据权利要求1所述的一种基于虚拟现实的智能人体监护系统,其特征在于,所述服务器还包括:动作模拟模块,用于接收动作获取模块发送的用户动作信息以及根据用户动作信息控制与所述用户动作信息绑定的监护装置的监护机器人模拟与用户动作信息一致的动作。
9.根据权利要求1所述的一种基于虚拟现实的智能人体监护系统,其特征在于,所述服务器还包括语音交互模块,用于获取与被监护人绑定的监护装置的监控麦克风获取的被监护人语音信息以及将接收到的被监护人语音信息发送给用户终端,并实时获取用户终端返回的用户语音信息以及根据获取的用户终端返回的用户语音信息控制与被监护人绑定的监护装置的监控扬声器进行播放。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810050041.XA CN110164542A (zh) | 2018-01-18 | 2018-01-18 | 一种基于虚拟现实的智能人体监护系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810050041.XA CN110164542A (zh) | 2018-01-18 | 2018-01-18 | 一种基于虚拟现实的智能人体监护系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110164542A true CN110164542A (zh) | 2019-08-23 |
Family
ID=67641353
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810050041.XA Withdrawn CN110164542A (zh) | 2018-01-18 | 2018-01-18 | 一种基于虚拟现实的智能人体监护系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110164542A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110581982A (zh) * | 2019-10-09 | 2019-12-17 | 四川博文讯通科技有限公司 | 基于虚拟现实的施工监控及调度系统 |
CN112464080A (zh) * | 2019-09-09 | 2021-03-09 | 华为技术有限公司 | 监护内容的制定方法和装置、智能安全陪护系统 |
WO2021102855A1 (zh) * | 2019-11-28 | 2021-06-03 | 深圳市大疆创新科技有限公司 | 可移动平台、终端设备及其控制方法、存储介质 |
CN117100217A (zh) * | 2023-08-07 | 2023-11-24 | 徐州市永康电子科技有限公司 | 一种远程监护自动控制的多参数监护仪及控制方法 |
-
2018
- 2018-01-18 CN CN201810050041.XA patent/CN110164542A/zh not_active Withdrawn
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112464080A (zh) * | 2019-09-09 | 2021-03-09 | 华为技术有限公司 | 监护内容的制定方法和装置、智能安全陪护系统 |
CN110581982A (zh) * | 2019-10-09 | 2019-12-17 | 四川博文讯通科技有限公司 | 基于虚拟现实的施工监控及调度系统 |
WO2021102855A1 (zh) * | 2019-11-28 | 2021-06-03 | 深圳市大疆创新科技有限公司 | 可移动平台、终端设备及其控制方法、存储介质 |
CN117100217A (zh) * | 2023-08-07 | 2023-11-24 | 徐州市永康电子科技有限公司 | 一种远程监护自动控制的多参数监护仪及控制方法 |
CN117100217B (zh) * | 2023-08-07 | 2024-05-14 | 徐州市永康电子科技有限公司 | 一种远程监护自动控制的多参数监护仪及控制方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110164542A (zh) | 一种基于虚拟现实的智能人体监护系统 | |
CN106648116B (zh) | 一种基于动作捕捉的虚拟现实综合系统 | |
CN104699247B (zh) | 一种基于机器视觉的虚拟现实交互系统及方法 | |
CN205581785U (zh) | 一种多人室内虚拟现实互动系统 | |
CN106980385B (zh) | 一种虚拟装配装置、系统及方法 | |
CN106816057B (zh) | 一种虚拟消防训练系统 | |
CN103488291B (zh) | 一种基于运动捕捉的浸入式虚拟现实系统 | |
CN103345064B (zh) | 一种集成3d识别的帽子及帽子的3d识别方法 | |
US11769306B2 (en) | User-exhibit distance based collaborative interaction method and system for augmented reality museum | |
CN109887369A (zh) | 一种船舶险情逃生模拟培训系统 | |
US20150070274A1 (en) | Methods and systems for determining 6dof location and orientation of head-mounted display and associated user movements | |
CN105608746A (zh) | 一种将现实进行虚拟实现的方法 | |
CN108234276A (zh) | 一种虚拟形象之间互动的方法、终端及系统 | |
CN104660995A (zh) | 一种救灾救援可视系统 | |
CN104011788A (zh) | 用于增强和虚拟现实的系统和方法 | |
CN104473618A (zh) | 一种用于虚拟现实的身体数据采集反馈设备和方法 | |
CN109358754B (zh) | 一种混合现实头戴显示系统 | |
CN105388820A (zh) | 智能监测设备及其监测方法、监测系统 | |
CN105639818A (zh) | 基于增强现实、空间扫描与手势识别技术的智能安全帽 | |
CN105739703A (zh) | 面向无线头戴显示设备的虚拟现实体感交互系统及方法 | |
CN107426508A (zh) | 一种利用ar实现远程安保巡查的方法 | |
CN109921818B (zh) | 一种智能多点实时三维交互头盔显示系统 | |
CN207253639U (zh) | 一种基于虚拟现实的运动交互系统 | |
CN109816601A (zh) | 一种图像处理方法和终端设备 | |
CN205585386U (zh) | 基于增强现实、空间扫描与手势识别技术的智能安全帽 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20190823 |