CN108428475A - 基于人体生理数据监测和虚拟现实的生物反馈训练系统 - Google Patents

基于人体生理数据监测和虚拟现实的生物反馈训练系统 Download PDF

Info

Publication number
CN108428475A
CN108428475A CN201810458951.1A CN201810458951A CN108428475A CN 108428475 A CN108428475 A CN 108428475A CN 201810458951 A CN201810458951 A CN 201810458951A CN 108428475 A CN108428475 A CN 108428475A
Authority
CN
China
Prior art keywords
virtual reality
physiological data
subject
module
virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810458951.1A
Other languages
English (en)
Other versions
CN108428475B (zh
Inventor
段新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201810458951.1A priority Critical patent/CN108428475B/zh
Publication of CN108428475A publication Critical patent/CN108428475A/zh
Application granted granted Critical
Publication of CN108428475B publication Critical patent/CN108428475B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Abstract

本发明提供基于人体生理数据监测和虚拟现实的生物反馈训练系统,包括生理数据采集和传输系统、虚拟现实子系统、外围设备和监视控制子系统;生理数据采集和传输系统采集受试者生理参数,并传输至虚拟现实子系统;虚拟现实子系统生成虚拟场景和向受试者展示虚拟场景,虚拟场景根据生理数据进行变化,虚拟现实子系统结合外围设备对虚拟场景辅助配合;监视控制子系统用于监测生理数据采集和传输系统的生理数据采集选项,和根据虚拟场景和生理参数,调整和/或设置虚拟现实子系统系统参数值,保存受试者实时生理参数。本发明的基于人体生理数据监测和虚拟现实的生物反馈训练系统,能刺激受试者的多种感官,调动受试者的积极性,提升训练效果。

Description

基于人体生理数据监测和虚拟现实的生物反馈训练系统
技术领域
本发明涉及生物反馈法的训练装置领域,尤其是指基于人体生理数据监测和虚拟现实的生物反馈训练系统。
背景技术
生物反馈技术又称为植物神经学习法,是一种利用现代生理科学仪器,通过检监测人体生理参数,并把生理参数信息化后以视觉和听觉的形式反馈给治疗师,供受试者或治疗师根据实际需要,对受试者的某种意识进行强化或弱化训练,从而让受试者了解自己的生理信号与心理变化之间的关系,并学会控制自身的生理信号,最终达到预防、治疗心身疾病的治疗方法。
现有利用生物反馈技术的训练方法是把实时检测到的各种生理参数有选择地转化为影像和声音,并通过音箱/耳机和台式显示屏将生理信息播放给受试者,受试者再根据影像和声音自主控制自己的意念和感觉,从而学会自我控制。上述训练方法呈现各种生理信息的方式单一枯燥,仅仅通过播放设定的图像和声音是无法持续吸引受试者注意力,导致难以保证训练效果,尤其部分缺乏想象力的受试者,难以将单调的图像信息与自己的生理信号的变化关联起来,导致无法完成自主控制生理信号的训练,起不到治疗效果。
发明内容
本发明的目的在于克服现有技术的不足,提供基于人体生理数据监测和虚拟现实的生物反馈训练系统,能有效刺激受试者的多种感官,并调动受试者的积极性,从而提升训练效果。
为了达到上述目的,本发明采用以下技术方案:基于人体生理数据监测和虚拟现实的生物反馈训练系统,包括生理数据采集和传输系统、虚拟现实子系统、外围设备和监视控制子系统;
所述生理数据采集和传输系统用于采集受试者至少一项生理参数,并将所述生理参数传输至所述虚拟现实子系统中;
所述虚拟现实子系统用于生成虚拟场景和向受试者展示虚拟场景,所述虚拟场景可根据所述生理数据进行动态变化,所述虚拟现实子系统可结合所述外围设备对虚拟场景进行辅助配合;
所述监视控制子系统用于监测所述生理数据采集和传输系统的生理数据采集选项,以及根据所述虚拟现实子系统展示的虚拟场景和所述生理数据采集和传输系统采集的生理参数,调整和/或设置所述虚拟现实子系统的系统参数值,并且保存所述受试者的实时生理参数。
与现有技术相比,本发明的基于人体生理数据监测和虚拟现实的生物反馈训练系统,具有以下有益效果:
(1)本发明通过利用虚拟场景给予受试者丰富的临在感,使受试者能沉浸在虚拟场景中,调动人体多感知通道参与信息反馈,直观的观察到自己的生理和心理状态,并通过控制自身生理状态改变虚拟场景,并通过这些反馈信号改善自身状况,这是利用电脑屏幕呈现生理状态的传统训练方法所没法达到的;
(2)针对缺乏想象力的受试者,通过展示丰富直观的动态场景,能更容易领会到心理、生理和动态场景之间的联系,从而更有效的使缺乏想象力的受试者完成对自身心理和生理反应的控制和形成操作性条件反射的训练,增强受试者对自己心理、生理活动的认知及调整能力,提高受试者管理自我心理、生理活动的能力和信心;
(3)治疗师通过借助受试者处于虚拟场景下的反馈效果(人体生理数据的变化),同步采用暗示治疗、心理指导、放松疗法等方式,能让个体了解自身生理信号的变化,从而帮助个体建立行之有效的调节方式,使个体能够控制自身的生理信号,以达到预防、治疗心身疾病的目的。
优选的,所述生理数据采集和传输系统包括生理传感器和模数转换器;所述生理传感器用于采集受试者的生理参数;所述模数转换器用于将所述生理传感器采集的生理参数转换成生理数据,并传输至所述虚拟现实子系统中。
优选的,所述模数转换器上设有应用蓝牙、WIFI、ZigBee、NFC、IrDa、MICS和Ant+中至少一种无线通信协议的无线传输装置,所述模数转换器通过所述无线传输装置与所述生理传感器无线连接。
优选的,所述虚拟现实子系统包括虚拟现实显示装置和服务器;所述服务器用于生成虚拟场景,并且所述服务器可根据采集到的生理参数驱动虚拟场景的变化和根据所述监视控制子系统的指令数据修改系统参数,从而对虚拟场景和工作流程进行调整、以及启动或关闭所述外围设备;所述虚拟现实显示装置用于通过影像和/或声音的方式向受试者展示虚拟场景的动态变化。
为了避免虚拟场景的动态变化速度过快,导致受试者无法适应新的场景,无法及时调整自我生理状况,本发明的虚拟现实显示装置展示的虚拟场景的动态变化可以是虚拟场景的变化和转换,也可以只是虚拟场景内某一元素变化,从而使受试者能循序渐进地进行训练。
优选的,所述虚拟现实显示装置为头戴式显示器。
本发明的所述虚拟现实显示装置便于受试者使用,且安全性强,使用过程中不会对受试者造成损伤。
优选的,所述服务器包括数据传输模块、场景生成模块、数据存储模块和流程控制模块;所述数据传输模块用于与虚拟现实显示装置、生理数据采集和传输系统和监视控制子系统进行数据交互,并将接收到的数据传输至数据存储模块;所述数据存储模块用于储存虚拟场景和受试者的生理数据,其与所述场景生成模块通讯连接;所述场景生成模块根据所述数据存储模块中的生理数据驱动虚拟场景的动态变化;所述流程控制模块用于控制数据传输模块、场景生成模块和数据存储模块运行。
本发明的服务器内部模块功能划分明确,确保服务器高效运行,同时便于出现故障时对服务器内部任一模块进行维修和替换。
优选的,所述监视控制子系统包括监视模块和治疗师操作模块;所述监视模块用于接收所述生理数据采集和传输系统、所述虚拟现实子系统输出的数据,并向治疗师实时展示受试者的生理数据、受试者的状况和虚拟场景,以及供治疗师和受试者进行沟通交流;治疗师操作模块用于供治疗师调整和/或设置所述虚拟现实子系统的系统参数值和调用所述虚拟现实子系统内的虚拟场景,以及监视和记录受试者的实时生理数据供治疗师设定训练方案、分析训练过程和评估训练效果。
通过设置监测模块和治疗师操作模块,使治疗师可根据受试者的喜好和状态调用虚拟现实子系统中已有的虚拟场景,同时治疗师可以根据实际训练需要设置受试者的训练难度。
优选的,所述监视控制子系统还包括数据记录输出设备,所述数据记录输出设备用于供治疗师以移动储存设备和纸张等媒介记录受试者的生理数据、训练方案、训练过程和训练效果。
优选的,所述外围设备包括气味模拟模块、物理接触模拟模块、气流/气压模拟模块、温度模拟模块和湿度模拟模块;所述气味模拟模块,用于根据虚拟场景制造对应的气味;所述物理接触模拟模块,用于根据虚拟场景对受试者施加相应的压力;所述气流/气压模拟模块,用于根据虚拟场景调节受试者所处空间的气流速度和气压;所述温度模拟模块,用于根据虚拟场景调节受试者所处空间的温度;所述湿度模拟模块,用于根据虚拟场景调节受试者所处空间的湿度。
所述外围设备能通过气味、物理接触、气流/气压、温度、湿度等方式丰富沉浸式的虚拟场景的环境,使受试者训练端模块与受试者的交互不限于传统的视觉和听觉,还包括触觉、嗅觉等其他感觉,使受试者可以更直观地感受虚拟场景,令受试者对于虚拟场景的反馈有更加深入的感受,便于受试者领会心理、行为和生理变化之间的关系。
优选的,所述监视控制子系统设置有至少一个或以上,所述生理数据采集和传输系统、虚拟现实子系统和外围设备相互对应设置有至少两个或以上;所述一个监视控制子系统可与两个或以上生理数据采集和传输系统、虚拟现实子系统和外围设备通讯连接。
通过一个监视控制子系统管理多个虚拟现实子系统,能有效提高设备和人力资源的利用率,避免设备和人力资源出现闲置。
附图说明
图1是本发明的第一示意图;
图2是本发明的第二示意图;
图3是本发明的工作原理图;
图4是本发明的工作流程图;
图5是虚拟现实子系统的示意图;
图6是监视控制子系统的示意图;
图7是外围设备的示意图;
图8是场景生成模块生成虚拟场景的流程;
图9是服务器处于场景反馈模式时输出的虚拟场景内的水柱高度与受试者心率的关系图;
图10是服务器处于场景过渡机制时输出的虚拟场景内的水柱高度与受试者心率的关系图。
标号说明:
服务器01,数据传输模块011,场景生成模块013,数据存储模块014,流程控制模块015,监视控制子系统02,监视模块021,治疗师操作模块022,虚拟现实子系统03,外围设备031,虚拟现实显示装置032,气味模拟模块034,物理接触模拟模块035,气流/气压模拟模块036,温度模拟模块037,湿度模拟模块038,生理数据采集和传输系统04,生理传感器041,模数转换器042,数据记录输出设备06。
具体实施方式
以下结合附图说明本发明的实施方式:
参见图1至图8,本实施例的基于人体生理数据监测和虚拟现实的生物反馈训练系统,包括生理数据采集和传输系统04、虚拟现实子系统03、外围设备031和监视控制子系统02。
所述监视控制子系统02设置有至少一个或以上,所述生理数据采集和传输系统04、虚拟现实子系统03和外围设备031相互对应设置有至少两个或以上;所述一个监视控制子系统02可与两个或以上生理数据采集和传输系统04、虚拟现实子系统03和外围设备031通讯连接。通过一个监视控制子系统02管理多个虚拟现实子系统03,能有效提高设备和人力资源的利用率,避免设备和人力资源出现闲置。
所述生理数据采集和传输系统04用于采集受试者生理参数,并将所述生理参数传输至所述虚拟现实子系统03中;所述生理数据采集和传输系统04采集的人体的生理参数包括皮肤电、皮肤温度、呼吸速度、心率、血压、肌电、脑电、心电。
所述虚拟现实子系统03用于生成虚拟场景和向受试者展示虚拟场景,所述虚拟场景可根据所述生理数据进行动态变化,所述虚拟现实子系统031可结合所述外围设备03对虚拟场景进行辅助配合。
所述监视控制子系统02用于监测所述生理数据采集和传输系统04的生理数据采集选项,以及根据所述虚拟现实子系统03展示的虚拟场景和所述生理数据采集和传输系统04采集的生理参数,调整和/或设置所述虚拟现实子系统03的系统参数值,并且保存所述受试者的实时生理参数。
具体地,所述虚拟现实子系统03包括虚拟现实显示装置032和服务器01;所述服务器01用于生成虚拟场景,并且所述服务器01可根据采集到的生理参数驱动虚拟场景的变化和根据所述监视控制子系统02的指令数据修改系统参数,从而对虚拟场景和工作流程进行调整、以及启动或关闭所述外围设备031;所述虚拟现实显示装置032用于通过影像和/或声音的方式向受试者展示虚拟场景的动态变化。
优选的,所述服务器为固定服务器01或移动服务器01或云端服务器01。
优选的,所述虚拟现实显示装置032的显示界面上有生理参数指示标识,生理参数指示标识用于显示人体生理数据,从而让受试者实时了解自身当前的人体生理状况。
作为所述虚拟现实显示装置032检测受试者头部动作的另一种方案,所述虚拟现实显示装置032上设有空间定位装置(图中未示出),当受试者使用虚拟现实显示装置032时,空间定位装置能够确定受试者头部的所在位置或眼睛的视点位置并转化为位置数据传输至所述服务器01,所述服务器01根据位置数据向所述虚拟现实显示装置032输出对应的虚拟场景,从而实现受试者在虚拟场景内的漫游。
为了避免虚拟场景的动态变化速度过快,导致受试者无法适应新的场景,无法及时调整自我生理状况,本发明的虚拟现实显示装置032展示的虚拟场景的动态变化可以是虚拟场景的变化和转换,也可以只是虚拟场景内某一元素变化,从而使受试者能循序渐进地进行训练。
所述虚拟现实显示装置032为头戴式显示器。
头戴式显示器(head-mounted display/helmet-mounted display),简称HMD,主要分为主机式VR、一体式VR和手机式VR三种。主机式VR是数据处理主机和显示器分体式设置并通讯连接的VR显示设备,使用时,受试者佩戴显示器,需数据处理主机接收外部设备数据后向显示器输送虚拟场景数据,显示器才能显示虚拟场景。一体式VR是数据处理主机和显示器一体式设置的VR显示设备,使用时,受试者直接佩戴显示器即可接收外部设备数据并显示虚拟场景。手机式VR是利用手机具有数据处理和显示的功能,将手机插在VR头显盒子里即可将手机转变成VR显示设备。
本发明的所述虚拟现实显示装置032便于受试者使用,且安全性强,使用过程中不会对受试者造成损伤。另外,所述虚拟现实显示装置032能直观显示受试者不同心理状态下的生理变化状态,反馈的信息直观丰富、生动、趣味性强,能给受试者良好的体验效果,便于受试者坚持接受训练。
所述生理数据采集和传输系统04包括生理传感器041和模数转换器042;所述生理传感器041用于采集受试者的生理参数;所述模数转换器042用于将所述生理传感器041采集的生理参数转换成生理数据,并传输至所述虚拟现实子系统03中。
所述生理传感器041为可穿戴式生理状况检测设备、手持式生理状况检测设备中至少一种;如智能手环,智能腕表、臂带、耳夹、眼镜、心率带、血压计、心率仪、感应头盔等。
上述设备属于市面上广泛应用的人体生理数据采集设备,具有方便易得,使用便捷的优点,本发明的训练系统采用可穿戴式生理状况检测设备和手持式生理状况检测设备对人体生理数据进行采集和无线传输,方便受试者在家中也能完成训练,摆脱了现有训练方法受设备及场地等条件的限制。
所述模数转换器042上设有应用蓝牙、WIFI、ZigBee、NFC、IrDa、MICS和Ant+中至少一种无线通信协议的无线传输装置(图中未示出),所述模数转换器042通过所述无线传输装置与所述生理传感器041无线连接。
本基于虚拟现实的生物反馈训练系统的头戴式显示器为手机式VR,所述手机式VR包括VR头显盒子(图中未示出)和移动电子设备(图中未示出),所述虚拟现实子系统03可向所述移动电子设备发送虚拟场景,使所述移动电子设备作为所述虚拟现实子系统03的显示屏幕使用。所述生理传感器041可向所述移动电子设备发送人体生理数据,使受试者可通过所述移动电子设备操作所述生理传感器041和查看所述生理传感器041采集的生理数据;另外,所述模数转换器042与移动电子设备通讯连接,所述移动电子设备作为模数转换器042的输出模块使用。
以下对所述生理数据采集和传输系统04内部模块的无线连接方案进行举例说明:
连接方案1:
本连接方案中,所述生理数据采集和传输系统04内部模块应用单一无线通信协议连接。
所述生理数据采集和传输系统04与所述移动电子设备、所述虚拟现实子系统03采用蓝牙无线通信协议连接;所述生理数据采集和传输系统04的生理传感器041通过蓝牙连接将生理数据传输至所述模数转换器042;所述模数转换器042将生理数据通过蓝牙连接传输至移动电子设备,移动电子设备通过安装的应用程序完成人体生理数据的接收和管理后,再将生理数据通过蓝牙连接传输至虚拟现实子系统03;或,所述模数转换器042直接将人体生理数据通过蓝牙连接传输至所述虚拟现实子系统03。
连接方案2:
本连接方案中,所述生理数据采集和传输系统04内部模块应用两种或以上无线通信协议连接。
所述生理数据采集和传输系统04的生理传感器041与模数转换器042应用ZigBee无线通信协议连接,所述模数转换器042与所述移动电子设备、所述虚拟现实子系统03应用蓝牙无线通信协议连接;所述模数转换器042上设置有ZigBee/蓝牙网关,所述生理传感器041通过ZigBee连接将生理数据传输至所述模数转换器042;所述模数转换器042将生理数据通过蓝牙连接传输至移动电子设备,移动电子设备通过安装的应用程序完成生理数据的接收和管理后,再将人体生理数据通过蓝牙传输至虚拟现实子系统03;或,所述模数转换器042直接将人体生理数据通过蓝牙连接传输至所述虚拟现实子系统03。
所述监视控制子系统02包括监视模块021和治疗师操作模块022;所述监视模块021用于接收所述生理数据采集和传输系统04、所述虚拟现实子系统03输出的数据,并向治疗师实时展示受试者的生理数据、受试者的状况和虚拟场景,以及供治疗师和受试者进行沟通交流;治疗师操作模块022用于供治疗师调整和/或设置所述虚拟现实子系统03的系统参数值和调用所述虚拟现实子系统03内的虚拟场景,以及监视和记录受试者的实时生理数据供治疗师设定训练方案、分析训练过程和评估训练效果。
具体地,所述监视模块021为固定显示设备或移动显示设备。在训练过程中,治疗师和受试者通过实时视频或音频进行沟通。受试者和治疗师有效的沟通互动,可以使受试者更加积极参于训练治疗,并更加配合治疗师的提示进行心理调整,从而更快的总结出适合自己的训练方法,以及便于治疗师制定更有效的治疗方案;同时治疗师在沟通互动中,能加更加深入了解受试者的状况,结合测量得出的人体生理数据,能很容易地调整训练方案和评价训练效果。
具体地,所述治疗师操作模块022为固定控制终端或移动控制终端。当所述治疗师操作模块022为联网的固定控制终端或移动控制终端时,能实现训练系统的网络化远程操控和远程治疗,一方面治疗师可以在不同地点实时查看受试者的生理状况的变化、远程设置治疗流程、远程修改所述虚拟现实子系统03的系统参数值和查看虚拟场景,另一方面,受试者可以在家中或就近的医疗点中接受远程医疗健康服务,从而有效降低受试者的治疗成本。
通过设置监测模块021和治疗师操作模块022,使治疗师可根据受试者的喜好和状态调用虚拟现实子系统中已有的虚拟场景,同时治疗师可以根据实际训练需要设置受试者的训练难度。
所述监视控制子系统02还包括数据记录输出设备06,所述数据记录输出设备06用于供治疗师以移动储存设备和纸张等媒介记录受试者的生理数据、训练方案、训练过程和训练效果。
所述外围设备031包括气味模拟模块034、物理接触模拟模块035、气流/气压模拟模块036、温度模拟模块037和湿度模拟模块038;所述气味模拟模块034,用于根据虚拟场景制造对应的气味;所述物理接触模拟模块035,用于根据虚拟场景对受试者施加相应的压力;所述气流/气压模拟模块036,用于根据虚拟场景调节受试者所处空间的气流速度和气压;所述温度模拟模块037,用于根据虚拟场景调节受试者所处空间的温度;所述湿度模拟模块038,用于根据虚拟场景调节受试者所处空间的湿度。
所述外围设备031能通过气味、物理接触、气流/气压、温度、湿度等方式丰富沉浸式的虚拟场景的环境,使受试者训练端模块与受试者的交互不限于传统的视觉和听觉,还包括触觉、嗅觉等其他感觉,使受试者可以更直观地感受虚拟场景,令受试者对于虚拟场景的反馈有更加深入的感受,便于受试者领会心理、行为和生理变化之间的关系。
所述服务器01包括数据传输模块011、场景生成模块013、数据存储模块014和流程控制模块015;所述数据传输模块011用于与虚拟现实显示装置032、生理数据采集和传输系统04和监视控制子系统02进行数据交互,并将接收到的数据传输至数据存储模块014;所述数据存储模块014用于储存虚拟场景和受试者的生理数据,其与所述场景生成模块013通讯连接;所述场景生成模块013根据所述数据存储模块014中生理数据驱动虚拟场景的动态变化;所述流程控制模块015用于控制数据传输模块011、场景生成模块013和数据存储模块014运行。
具体地,所述虚拟场景的数据包括影像数据、音频数据、气味分子数据、力反馈数据、气流/气压数据、温度数据和湿度数据。影像数据包括地表元素、天空元素、生物元素、景观和建筑物元素等。
所述场景生成模块013的工作过程为:建立虚拟场景;生理数据驱动场景变化;渲染可供数据驱动的虚拟场景。
通过利用所述场景生成模块013生成不同的虚拟场景,使服务器01内的虚拟场景不断更新,相比与一般虚拟现实设备只是播放预设的虚拟场景,能确保受试者每次接收训练时都能接触新的虚拟场景,从而提高受试者的积极性,提高训练效果。
本发明的服务器内部模块功能划分明确,确保服务器高效运行,同时便于出现故障时对服务器内部任一模块进行维修和替换。
具体地,所述生理数据驱动所述虚拟场景进行动态变化的方式包括函数运算和阈值触发。
函数运算的原理为:在服务器01中设定若干组与虚拟场景内的元素相关联的函数关系式,当训练开始时,服务器01将接收到的生理数据代入预设的函数关系式中,虚拟场景内的元素根据预设的函数关系式的运算结果进行动态变化。
阈值触发的原理为:在服务器01中设定当生理数据到达不同的生理参数阈值时,虚拟场景内的元素转变为相对应的状态,当训练开始时,服务器01将接收到的生理数据与预设的生理参数阈值进行比较,当生理数据到达预设的生理参数阈值时,虚拟场景内的元素转变为相对应的状态。
所述服务器01设有场景反馈模式;所述服务器01进入场景反馈模式时,所述服务器01接收生理数据采集和传输系统04输出的生理数据,向所述虚拟现实子系统03输出动态的虚拟场景。
所述服务器01设有修改模式;所述服务器01进入修改模式时,治疗师可通过监视控制子系统02对服务器01的系统参数值进行修改,例如治疗师可通过监视控制子系统02修改所述数据存储模块014内触发虚拟场景或场景内元素变化的生理参数阈值,并将修改后的生理参数阈值发送至所述服务器01;服务器01内的数据传输模块011接收数据后再将数据传输至所述数据存储模块014,所述数据存储模块014以修改后的生理参数阈值作为新的预设的生理参数阈值执行虚拟场景输出流程。
所述服务器01设有场景过渡机制:
使用函数运算作为驱动方式时,治疗师预先就某生理参数阈值前后一定范围内设置过渡函数关系式,治疗师设定过渡函数关系式后,服务器01自动生成过渡虚拟场景。当所述服务器01接收生理数据采集和传输系统04输出的生理数据时,所述服务器01将生理数据分别代入原函数关系式和过渡函数关系式中,并向所述虚拟现实子系统03输出与原函数关系式和过渡函数关系式的运算结果对应的虚拟场景。
使用阈值触发作为驱动方式时,治疗师预先在某预设的生理参数阈值前后一定范围内再设定过渡生理参数阈值,治疗师设定过渡生理参数阈值后,服务器01自动生成过渡虚拟场景。当所述服务器01接收生理数据采集和传输系统04输出的生理数据时,所述服务器01根据受试者的生理参数触发预设的生理参数阈值,向所述虚拟现实子系统03输出与预设的生理参数阈值和过渡生理参数阈值对应的虚拟场景。
通过在所述服务器01设置场景过渡机制,能确保两个场景或某个元素切换时更加顺畅,从而避免虚拟场景出现不稳定的跳跃,显得影像的过渡生硬,提高受试者对虚拟场景的视觉体验。
本实施例以虚拟场景内的水柱的状态变化和受试者的心率变化为例子,对服务器01的场景反馈模式和场景过渡机制进行说明:
参见图9,所述服务器01处于场景反馈模式时,当受试者的心率为50-60次/分钟,服务器01接收生理数据采集和传输系统04的生理数据,将向虚拟现实子系统03输出的虚拟场景中的水柱高度为1m;当受试者的心率至60-70次/分钟,服务器01向虚拟现实子系统03输出的虚拟场景中的水柱高度为1.5m。
参见图10,在心率为58-62次/分钟的区间设置过渡区间,服务器01根据设置的过渡区间生成过渡虚拟场景;所述服务器01处于场景过渡机制时,当受试者的心率从50-60次/分钟升高至60-70次/分钟过程中,所述服务器01向虚拟现实子系统03输出的虚拟场景中的水柱高度将从1m升高至1.3m后再升高至1.5m。
本发明的工作原理:
受试者:受试者穿戴好生理传感器041和虚拟现实显示装置032,此时,生理传感器041实时检测受试者的人体生理状况,并将受试者的人体生理状况通过模数转换器042转换成生理数据分别传输至虚拟现实子系统03和监视控制子系统02;虚拟现实显示装置032接受服务器01输出的虚拟场景,并向受试者显示虚拟场景和播放声音,同时所述外围设备031接收所述服务器01输出的虚拟场景,模拟出虚拟场景中出现的气味、物理接触、气流/气压、温度、湿度,如通过控制风扇转速模拟气流大小、通过加热香味膜片产生不同浓度的香味、利用电加热器升高环境温度和控制湿度;随着受试者的人体生理数据的变化,所述服务器01输出相应的虚拟场景,触发气味模拟模块034、物理接触模拟模块035、气流/气压模拟模块036、温度模拟模块037和湿度模拟模块038运作,增加虚拟场景的趣味及生动性,强化受试者的训练效果。另外,虚拟现实显示装置032上会显示出受试者的人体生理数据及变化的指示图标,使受试者了解自身身体状况,同时受试者可通过虚拟现实显示装置032与治疗师进行实时沟通。
治疗师:治疗师通过监视模块021查看受试者的状态、虚拟场景和受试者的人体生理数据,同时,治疗师通过监视模块021与受试者进行互动,从而及时对训练效果进行评估和调整方案。治疗师可通过治疗师操作模块022设置或调整服务器01的系统参数值,例如可以设置不同的触发虚拟场景生理参数阈值。治疗师设置或调整完成后,治疗师操作模块022将生理参数阈值输出至服务器01。
与现有技术相比,本发明的基于人体生理数据监测和虚拟现实的生物反馈训练系统,具有以下有益效果:
(1)本发明通过利用虚拟场景给予受试者丰富的临在感,使受试者能沉浸在虚拟场景中,调动人体多感知通道参与信息反馈,直观的观察到自己的生理和心理状态,并通过控制自身生理状态,改变虚拟场景,并通过这些反馈信号改善自身状况,这是利用电脑屏幕呈现生理状态的传统训练方法所没法达到的;
(2)针对缺乏想象力的受试者,通过展示丰富直观的动态场景,能更容易领会到心理、生理和动态场景之间的联系,从而更有效的使缺乏想象力的受试者完成对自身心理和生理反应的控制和形成操作性条件反射的训练,增强受试者对自己心理、生理活动的认知及调整能力,提高受试者管理自我心理、生理活动的能力和信心;
(3)治疗师通过借助受试者处于虚拟场景下的反馈效果(人体生理数据的变化),同步采用暗示治疗、心理指导、放松疗法等方式,能让个体了解自身生理信号的变化,从而帮助个体建立行之有效的调节方式,使个体能够控制自身的生理信号,以达到预防、治疗心身疾病的目的。
根据上述说明书的揭示和教导,本发明所属领域的技术人员还可以对上述实施方式进行变更和修改。因此,本发明并不局限于上面揭示和描述的具体实施方式,对本发明的一些修改和变更也应当落入本发明的权利要求的保护范围内。此外,尽管本说明书中使用了一些特定的术语,但这些术语只是为了方便说明,并不对本发明构成任何限制。

Claims (10)

1.基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:包括生理数据采集和传输系统、虚拟现实子系统、外围设备和监视控制子系统;
所述生理数据采集和传输系统用于采集受试者至少一项生理参数,并将所述生理参数传输至所述虚拟现实子系统中;
所述虚拟现实子系统用于生成虚拟场景和向受试者展示虚拟场景,所述虚拟场景可根据所述生理数据进行动态变化,所述虚拟现实子系统可结合所述外围设备对虚拟场景进行辅助配合;
所述监视控制子系统用于监测所述生理数据采集和传输系统的生理数据采集选项,以及根据所述虚拟现实子系统展示的虚拟场景和所述生理数据采集和传输系统采集的生理参数,调整和/或设置所述虚拟现实子系统的系统参数值,并且保存所述受试者的实时生理参数。
2.根据权利要求1所述的基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:所述生理数据采集和传输系统包括生理传感器和模数转换器;
所述生理传感器用于采集受试者的生理参数;
所述模数转换器用于将所述生理传感器采集的生理参数转换成生理数据,并传输至所述虚拟现实子系统中。
3.根据权利要求2所述的基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:所述模数转换器上设有应用蓝牙、WIFI、ZigBee、NFC、IrDa、MICS和Ant+中至少一种无线通信协议的无线传输装置,所述模数转换器通过所述无线传输装置与所述生理传感器无线连接。
4.根据权利要求1所述的基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:所述虚拟现实子系统包括虚拟现实显示装置和服务器;
所述服务器用于生成虚拟场景,并且所述服务器可根据采集到的生理参数驱动虚拟场景的变化和根据所述监视控制子系统的指令数据修改系统参数,从而对虚拟场景和工作流程进行调整、以及启动或关闭所述外围设备;
所述虚拟现实显示装置用于通过影像和/或声音的方式向受试者展示虚拟场景的动态变化。
5.根据权利要求4所述的基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:所述虚拟现实显示装置为头戴式显示器。
6.根据权利要求4所述的基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:所述服务器包括数据传输模块、场景生成模块、数据存储模块和流程控制模块;
所述数据传输模块用于与虚拟现实显示装置、生理数据采集和传输系统和监视控制子系统进行数据交互,并将接收到的数据传输至数据存储模块;
所述数据存储模块用于储存虚拟场景和受试者的生理数据,其与所述场景生成模块通讯连接;
所述场景生成模块根据所述数据存储模块中的生理数据驱动虚拟场景的动态变化;
所述流程控制模块用于控制数据传输模块、场景生成模块和数据存储模块运行。
7.根据权利要求1所述的基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:所述监视控制子系统包括监视模块和治疗师操作模块;
所述监视模块用于接收所述生理数据采集和传输系统、所述虚拟现实子系统输出的数据,并向治疗师实时展示受试者的生理数据、受试者的状况和虚拟场景,以及供治疗师和受试者进行沟通交流;
治疗师操作模块用于供治疗师调整和/或设置所述虚拟现实子系统的系统参数值和调用所述虚拟现实子系统内的虚拟场景,以及监视和记录受试者的实时生理数据供治疗师设定训练方案、分析训练过程、评估训练效果和回放训练过程。
8.根据权利要求7所述的基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:所述监视控制子系统还包括数据记录输出设备,所述数据记录输出设备用于供治疗师以移动储存设备和纸张等媒介记录受试者的生理数据、训练方案、训练过程和训练效果。
9.根据权利要求1所述的基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:所述外围设备包括气味模拟模块、物理接触模拟模块、气流/气压模拟模块、温度模拟模块和湿度模拟模块;
所述气味模拟模块,用于根据虚拟场景制造对应的气味;
所述物理接触模拟模块,用于根据虚拟场景对受试者施加相应的压力;
所述气流/气压模拟模块,用于根据虚拟场景调节受试者所处空间的气流速度和气压;
所述温度模拟模块,用于根据虚拟场景调节受试者所处空间的温度;
所述湿度模拟模块,用于根据虚拟场景调节受试者所处空间的湿度。
10.根据权利要求1所述的基于人体生理数据监测和虚拟现实的生物反馈训练系统,其特征在于:所述监视控制子系统设置有至少一个或以上,所述生理数据采集和传输系统、虚拟现实子系统和外围设备相互对应设置有至少两个或以上;所述一个监视控制子系统可与两个或以上生理数据采集和传输系统、虚拟现实子系统和外围设备通讯连接。
CN201810458951.1A 2018-05-15 2018-05-15 基于人体生理数据监测和虚拟现实的生物反馈训练系统 Active CN108428475B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810458951.1A CN108428475B (zh) 2018-05-15 2018-05-15 基于人体生理数据监测和虚拟现实的生物反馈训练系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810458951.1A CN108428475B (zh) 2018-05-15 2018-05-15 基于人体生理数据监测和虚拟现实的生物反馈训练系统

Publications (2)

Publication Number Publication Date
CN108428475A true CN108428475A (zh) 2018-08-21
CN108428475B CN108428475B (zh) 2023-09-15

Family

ID=63163085

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810458951.1A Active CN108428475B (zh) 2018-05-15 2018-05-15 基于人体生理数据监测和虚拟现实的生物反馈训练系统

Country Status (1)

Country Link
CN (1) CN108428475B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109300529A (zh) * 2018-09-12 2019-02-01 阿呆科技(北京)有限公司 基于人工智能和虚拟现实/增强现实的毒瘾渴求靶向干预矫治系统
CN110400624A (zh) * 2019-07-29 2019-11-01 深圳市康宁医院(深圳市精神卫生研究所、深圳市精神卫生中心) 社交治疗仪
CN110764622A (zh) * 2019-11-01 2020-02-07 山东大学 一种虚拟现实多模式演讲训练工具
CN111161847A (zh) * 2020-01-07 2020-05-15 上海理工大学 一种适用于幽闭恐惧症患者的虚拟场景系统及其实现方法
CN111380123A (zh) * 2018-12-29 2020-07-07 大金工业株式会社 空调装置及空调装置的控制方法
CN111435611A (zh) * 2019-12-04 2020-07-21 云赛智联股份有限公司 基本心率hdr的沉浸式学生心理舒缓交互系统
CN112274755A (zh) * 2020-10-10 2021-01-29 中山大学孙逸仙纪念医院 沉浸式耳鸣虚拟vr生物反馈治疗仪
CN112451831A (zh) * 2020-12-14 2021-03-09 深圳市艾利特医疗科技有限公司 一种基于虚拟现实的听觉功能训练及检测系统
CN113096763A (zh) * 2021-04-08 2021-07-09 杭州深睿博联科技有限公司 一种多端异步的远程视觉训练方法和系统
CN113611394A (zh) * 2021-07-02 2021-11-05 江苏嘉纳宝医疗科技有限公司 基于虚拟现实技术对强迫症状的心理评估及干预方法
CN114176534A (zh) * 2021-11-25 2022-03-15 爱其服(杭州)科技有限公司 一种用于元宇宙的智能穿戴系统
CN114530230A (zh) * 2021-12-31 2022-05-24 北京津发科技股份有限公司 基于虚拟现实技术的人员能力测试与反馈训练方法、装置、设备及存储介质
CN116403680A (zh) * 2023-01-20 2023-07-07 北京瑞帆科技有限公司 一种基于xr技术的认知刺激治疗系统

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10125075A1 (de) * 2001-05-14 2002-11-28 Fraunhofer Ges Forschung Personal Immersion: PC-basiertes Echtzeitgraphiksystem für Virtual Reality Anwendungen
CN1404018A (zh) * 2002-09-29 2003-03-19 西安交通大学 计算机网络环境智能化场景绘制装置系统及绘制处理方法
US20040110602A1 (en) * 2002-12-04 2004-06-10 Feldman Philip G. Computer interactive isometric exercise system and method for operatively interconnecting the exercise system to a computer system for use as a peripheral
CN101174332A (zh) * 2007-10-29 2008-05-07 张建中 一种将真实世界实时场景与虚拟现实场景结合交互的方法和装置以及系统
CN101430837A (zh) * 2008-11-21 2009-05-13 哈尔滨工程大学 基于cave的沉浸式摩托艇驾驶仿真系统
US20140092135A1 (en) * 2012-10-02 2014-04-03 Aria Glassworks, Inc. System and method for dynamically displaying multiple virtual and augmented reality scenes on a single display
CN106377252A (zh) * 2016-09-30 2017-02-08 兰州大学 一种基于虚拟现实的生物信息反馈系统
CN106412558A (zh) * 2016-09-08 2017-02-15 深圳超多维科技有限公司 一种立体虚拟现实直播方法、装置及设备
CN106933348A (zh) * 2017-01-24 2017-07-07 武汉黑金科技有限公司 一种基于虚拟现实的脑电神经反馈干预系统及方法
CN107049702A (zh) * 2017-03-29 2017-08-18 东南大学 一种基于虚拟现实的下肢康复训练机器人系统
CN107185216A (zh) * 2017-07-17 2017-09-22 湖州健凯康复产品有限公司 一种基于虚拟现实的康复系统和训练方法
CN107432977A (zh) * 2016-05-27 2017-12-05 南京抹香鲸信息科技有限公司 一种基于大数据的虚拟现实心理训练系统
CN107591038A (zh) * 2017-10-13 2018-01-16 国网上海市电力公司 一种杆上变压器停复役的模拟操作交互系统
CN107799165A (zh) * 2017-09-18 2018-03-13 华南理工大学 一种基于虚拟现实技术的心理评估方法
CN107833611A (zh) * 2017-11-06 2018-03-23 广州优涵信息技术有限公司 一种基于虚拟现实的自闭症康复训练方法

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10125075A1 (de) * 2001-05-14 2002-11-28 Fraunhofer Ges Forschung Personal Immersion: PC-basiertes Echtzeitgraphiksystem für Virtual Reality Anwendungen
CN1404018A (zh) * 2002-09-29 2003-03-19 西安交通大学 计算机网络环境智能化场景绘制装置系统及绘制处理方法
US20040110602A1 (en) * 2002-12-04 2004-06-10 Feldman Philip G. Computer interactive isometric exercise system and method for operatively interconnecting the exercise system to a computer system for use as a peripheral
CN101174332A (zh) * 2007-10-29 2008-05-07 张建中 一种将真实世界实时场景与虚拟现实场景结合交互的方法和装置以及系统
CN101430837A (zh) * 2008-11-21 2009-05-13 哈尔滨工程大学 基于cave的沉浸式摩托艇驾驶仿真系统
US20140092135A1 (en) * 2012-10-02 2014-04-03 Aria Glassworks, Inc. System and method for dynamically displaying multiple virtual and augmented reality scenes on a single display
CN107432977A (zh) * 2016-05-27 2017-12-05 南京抹香鲸信息科技有限公司 一种基于大数据的虚拟现实心理训练系统
CN106412558A (zh) * 2016-09-08 2017-02-15 深圳超多维科技有限公司 一种立体虚拟现实直播方法、装置及设备
CN106377252A (zh) * 2016-09-30 2017-02-08 兰州大学 一种基于虚拟现实的生物信息反馈系统
CN106933348A (zh) * 2017-01-24 2017-07-07 武汉黑金科技有限公司 一种基于虚拟现实的脑电神经反馈干预系统及方法
CN107049702A (zh) * 2017-03-29 2017-08-18 东南大学 一种基于虚拟现实的下肢康复训练机器人系统
CN107185216A (zh) * 2017-07-17 2017-09-22 湖州健凯康复产品有限公司 一种基于虚拟现实的康复系统和训练方法
CN107799165A (zh) * 2017-09-18 2018-03-13 华南理工大学 一种基于虚拟现实技术的心理评估方法
CN107591038A (zh) * 2017-10-13 2018-01-16 国网上海市电力公司 一种杆上变压器停复役的模拟操作交互系统
CN107833611A (zh) * 2017-11-06 2018-03-23 广州优涵信息技术有限公司 一种基于虚拟现实的自闭症康复训练方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
周镇定: "基于多种运动想象脑电信号识别的虚拟现实系统控制方法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》, no. 10, pages 138 - 502 *
王珊: "基于人工智能的虚拟树木生长过程模拟", 《中国优秀硕士学位论文全文数据库 信息科技辑》, no. 10, pages 138 - 801 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109300529A (zh) * 2018-09-12 2019-02-01 阿呆科技(北京)有限公司 基于人工智能和虚拟现实/增强现实的毒瘾渴求靶向干预矫治系统
CN109300529B (zh) * 2018-09-12 2021-09-21 阿呆科技(北京)有限公司 基于人工智能和虚拟现实/增强现实的毒瘾渴求靶向干预矫治系统
CN111380123A (zh) * 2018-12-29 2020-07-07 大金工业株式会社 空调装置及空调装置的控制方法
CN110400624A (zh) * 2019-07-29 2019-11-01 深圳市康宁医院(深圳市精神卫生研究所、深圳市精神卫生中心) 社交治疗仪
CN110764622A (zh) * 2019-11-01 2020-02-07 山东大学 一种虚拟现实多模式演讲训练工具
CN111435611A (zh) * 2019-12-04 2020-07-21 云赛智联股份有限公司 基本心率hdr的沉浸式学生心理舒缓交互系统
CN111161847A (zh) * 2020-01-07 2020-05-15 上海理工大学 一种适用于幽闭恐惧症患者的虚拟场景系统及其实现方法
CN112274755B (zh) * 2020-10-10 2022-09-06 中山大学孙逸仙纪念医院 沉浸式耳鸣虚拟vr生物反馈治疗仪
CN112274755A (zh) * 2020-10-10 2021-01-29 中山大学孙逸仙纪念医院 沉浸式耳鸣虚拟vr生物反馈治疗仪
CN112451831A (zh) * 2020-12-14 2021-03-09 深圳市艾利特医疗科技有限公司 一种基于虚拟现实的听觉功能训练及检测系统
CN113096763A (zh) * 2021-04-08 2021-07-09 杭州深睿博联科技有限公司 一种多端异步的远程视觉训练方法和系统
CN113611394A (zh) * 2021-07-02 2021-11-05 江苏嘉纳宝医疗科技有限公司 基于虚拟现实技术对强迫症状的心理评估及干预方法
CN114176534A (zh) * 2021-11-25 2022-03-15 爱其服(杭州)科技有限公司 一种用于元宇宙的智能穿戴系统
CN114530230A (zh) * 2021-12-31 2022-05-24 北京津发科技股份有限公司 基于虚拟现实技术的人员能力测试与反馈训练方法、装置、设备及存储介质
CN114530230B (zh) * 2021-12-31 2022-12-02 北京津发科技股份有限公司 基于虚拟现实技术的人员能力测试与反馈训练方法、装置、设备及存储介质
CN116403680A (zh) * 2023-01-20 2023-07-07 北京瑞帆科技有限公司 一种基于xr技术的认知刺激治疗系统

Also Published As

Publication number Publication date
CN108428475B (zh) 2023-09-15

Similar Documents

Publication Publication Date Title
CN108428475A (zh) 基于人体生理数据监测和虚拟现实的生物反馈训练系统
US11051730B2 (en) Virtual reality biofeedback systems and methods
EP3053354B1 (en) Functional headwear
US9779751B2 (en) Respiratory biofeedback devices, systems, and methods
CN100573622C (zh) 多媒体脑波反馈儿童学习训练方法及训练仪
US20080214903A1 (en) Methods and Systems for Physiological and Psycho-Physiological Monitoring and Uses Thereof
CN106730239A (zh) 一种基于脑电波监测的闭环催眠头罩
US11000669B2 (en) Method of virtual reality system and implementing such method
US20030149344A1 (en) Applications of the biofeedback technique and cardio vascular monitoring
WO2014107795A1 (en) Adaptive brain training computer system and method
CN113227944B (zh) 用于增强现实的脑机接口
AU2010240501A1 (en) Nasal flow device controller
CN108371815A (zh) 一种沉浸式电子游戏操作系统及游戏方法
CN208521618U (zh) 基于人体生理数据监测和虚拟现实的生物反馈训练系统
CN110957030A (zh) 一种睡眠质量监测及交互系统
TWI418334B (zh) 用於生理訊號及環境訊號感測、分析及回饋之系統
US11490857B2 (en) Virtual reality biofeedback systems and methods
CN110882465A (zh) 基于脑电与运动状态反馈的注意力训练系统及方法
JP2022059140A (ja) 情報処理装置及びプログラム
CN110491498A (zh) 一种脑波信号的数据接收和处理方法
CN215875885U (zh) 一种基于vr技术的沉浸式抗压力心理训练系统
CN112534491A (zh) 一种医学模拟器、医学训练系统和方法
AU2022268737A1 (en) Method for remote physiological group brainwave synchronization
CN108553830A (zh) 一种带数据分析的智能腕力球
CN116173368B (zh) 一种视听嗅多模态协同诱导激活多脑区联动意识康复系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant