CN116942989A - 一种运用虚拟现实技术的心理疗法系统 - Google Patents

一种运用虚拟现实技术的心理疗法系统 Download PDF

Info

Publication number
CN116942989A
CN116942989A CN202310920369.3A CN202310920369A CN116942989A CN 116942989 A CN116942989 A CN 116942989A CN 202310920369 A CN202310920369 A CN 202310920369A CN 116942989 A CN116942989 A CN 116942989A
Authority
CN
China
Prior art keywords
scene
data
patient
virtual
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310920369.3A
Other languages
English (en)
Inventor
张宗宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Fengtai District Mental Health Center Beijing Fengtai District Mental Health Prevention And Control Center
Original Assignee
Beijing Fengtai District Mental Health Center Beijing Fengtai District Mental Health Prevention And Control Center
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Fengtai District Mental Health Center Beijing Fengtai District Mental Health Prevention And Control Center filed Critical Beijing Fengtai District Mental Health Center Beijing Fengtai District Mental Health Prevention And Control Center
Priority to CN202310920369.3A priority Critical patent/CN116942989A/zh
Publication of CN116942989A publication Critical patent/CN116942989A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M21/02Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis for inducing sleep or relaxation, e.g. by direct nerve stimulation, hypnosis, analgesia
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0027Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0044Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
    • A61M2021/005Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0141Head-up displays characterised by optical features characterised by the informative content of the display

Landscapes

  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Anesthesiology (AREA)
  • Psychology (AREA)
  • Acoustics & Sound (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Hematology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Psychiatry (AREA)
  • Child & Adolescent Psychology (AREA)
  • Pain & Pain Management (AREA)
  • Developmental Disabilities (AREA)
  • Hospice & Palliative Care (AREA)
  • Social Psychology (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明公开了一种运用虚拟现实技术的心理疗法系统,涉及心理治疗技术领域,为了提高心理疾病通过虚拟治疗的效果。运用虚拟现实技术的心理疗法系统,音频处理完成后可以使播放出来的音频声音更加的融合、去杂音,图像数据进行失真度、清晰度和偏斜度进行调整处理,可以提升图像质量,数字头盔配合戴数据手套可以使患者在虚拟场景中进行抓取、移动、装配、操纵和控制,使患者在虚拟缓解中通过不断接收虚拟环境下的社交训练,减轻心理疾病的情况,将音频数据所对应的场景时间段进行确认,提高视频与声音同步进行的效果,不会出现声音与场景不同步的问题。

Description

一种运用虚拟现实技术的心理疗法系统
技术领域
本发明涉及心理治疗技术领域,具体为一种运用虚拟现实技术的心理疗法系统。
背景技术
心理疗法又叫精神疗法,与化学、天然药物及物理治疗不同,是医生与病人交往接触过程中,医生通过语言来影响病人的心理活动的一种方法。在现有技术中,对心理疾病患者进行心理治疗时,采用的治疗手段都是单一的问诊治疗,问诊治疗还存在以下问题:
1.患者在进行心理治疗时,只是单纯的由医生对患者进行病情询问,询问完成后进行简单的言语治疗,从而导致患者的心理治疗效果不佳。
2.当患者进行虚拟治疗时,由于VR图像没有进行更优良的优化,从而使场景画面过去粗糙,导致患者在进行治疗时治疗效果不佳。
发明内容
本发明的目的在于提供一种运用虚拟现实技术的心理疗法系统,音频处理完成后可以使播放出来的音频声音更加的融合、去杂音,图像数据进行失真度、清晰度和偏斜度进行调整处理,可以提升图像质量,数字头盔配合戴数据手套可以使患者在虚拟场景中进行抓取、移动、装配、操纵和控制,使患者在虚拟缓解中通过不断接收虚拟环境下的社交训练,减轻心理疾病的情况,将音频数据所对应的场景时间段进行确认,提高视频与声音同步进行的效果,不会出现声音与场景不同步的问题,可以解决现有技术中的问题。
为实现上述目的,本发明提供如下技术方案:
一种运用虚拟现实技术的心理疗法系统,包括:
患者资料数据采集单元,用于:
根据医生对患者在治疗前的诊断数据进行获取,根据获取的诊断数据判断患者的心理疾病的属性范围,其中,心理疾病的范围包括知觉障碍,记忆障碍,感觉障碍,注意障碍,意志障碍,情感障碍,思维障碍,意识障碍,行为障碍和人格障碍,根据诊断数据判断患者属于的心理疾病属性,并且可以进行多项选择;
虚拟设备调试单元,用于:
基于患者资料数据采集单元中确认的患者心理疾病属性,根据不同属性的心理疾病障碍范围进行不同的虚拟治疗场景选择,并且,根据诊断结果对患者将要使用的虚拟设备进行参数调试;
其中,虚拟设备包括数字头盔、数据手套以及治疗室,并且数字头盔上设置有音响设备,数字头盔、数据手套以及治疗室均与终端操控装置电性连接;
VR场景生成单元,用于:
基于虚拟设备调试单元中获取的虚拟治疗场景,将该虚拟场景从数据库中进行场景获取,数据库中场景获取后将该场景所对应的视频数据进行调取,并将视频数据与场景数据进行数据融合,数据融合后将数据进行优化处理,并将优化处理的参数进行确认;
人机交互调试单元,用于:
基于VR场景生成单中获取的优化后的参数,将参数导入至虚拟设备中,当各个虚拟设备启动后,患者根据不用的虚拟设备进行不同体感的缓解治疗;
其中,当患者进行治疗时数字头盔会对患者的脑电波的波动进行实时记录,并将记录的结果进行独立存储;
治疗结果参数决策单元,用于:
基于人机交互调试单元中获取的记录结果以及患者资料数据采集单元中获取的诊断结果,将记录结果与诊断结果进行对比计算,根据计算结果判断治疗结果的等级,对比计算结果如下:
上式中,x表示记录结果;y表示诊断结果;n表示对比结果;a表示低于正常等级的阈值;b表示正常等级;c表示高于正常等级的阈值,且a、b均为异常等级。
优选的,所述虚拟设备调试单元,包括:
场景确认模块,用于:
将患者的心理疾病的属性范围进行确认,确认完成后进行虚拟治疗场景选择,其中,每种属性的心理疾病均对应特定的虚拟治疗场景;
虚拟治疗场景确认后,将确认完成的一个或者多个虚拟治疗场景的场景参数进行确认;
确认完成后将参数进行唯一编码标号,并且每个唯一编码与所对应的场景进行编码绑定。
优选的,所述虚拟设备调试单元,还包括:
设备控制对应模块,用于:
基于场景确认模块中获取的场景参数,将参数阈值分别与数字头盔、数据手套以及治疗室进行参数对应;
参数对应完成后数字头盔、数据手套以及治疗室即为患者进行治疗所对应的属性范围的治疗设备;
其中,数字头盔为VR式头盔眼镜,患者佩戴后可通过数字头盔进行场景观看;患者佩戴数据手套后,可在虚拟场景内进行物体抓取、移动、装配、操纵和控制,并且,将手指伸屈时的各种姿势转换成数字信号送给终端操控装置,终端操控装置通过患者对应的治疗场景来识别出患者的手在虚拟场景中操作时的姿势,并执行相应的操作。
优选的,所述VR场景生成单元,包括:
场景视频生成模块,用于:
将患者治疗时候所对应的场景数据进行获取,场景数据获取后将场景数据以帧为单位进行场景数据划分;
场景数据划分完成后将场景数据进行视频合成,视频合成完成后标记为场景视频;
并且,场景视频确认完成后,将对应的音频数据进行获取,并将音频数据与视频数据进行数据响应。
优选的,所述VR场景生成单元,还包括:
音频数据获取模块,用于:
基于场景视频生成模块中获取的音频数据,将一组或者多组音频数据进行音频分帧;
根据分帧完成的音频,确认每个音频帧对应的场景视频数据进行视频帧对应。
优选的,所述VR场景生成单元,还包括:
音频数据处理模块,用于:
基于音频数据获取模块中获取音频帧对应完成的视频帧,将音频帧中的噪声信号进行确认;
根据噪声信号确认每个噪声信号的噪声特征,其中,噪声特征的确认根据二维小波的变换进行确认;
根据噪声特征生成音频处理模板,通过音频处理模板将该场景下的一组或者多组音频数据进行处理。
优选的,所述VR场景生成单元,还包括:
视频图像处理模块,用于:
基于场景视频生成模块中获取的视频数据,将视频中的图像进行不同视角方向的截取;
图像截取完成后将图像的失真度、清晰度和偏斜度进行调整处理,其中,调整的方法是将标准的失真度、清晰度和偏斜度的标准阈值与截图的图像阈值进行阈值对应,若截取图像的阈值与标准阈值对应不上时,则将截取图像阈值进行调整,直至阈值调整至与标准阈值一致。
优选的,所述视频图像处理模块,还用于:
截取图像处理完成后将截取图像对应的灰度图像进行确认,根据灰度图像确认滤波图像;
其中,滤波图像是根据线性空间滤波进行获取,滤波图像获取后将滤波图像进行去噪处理,处理完成后图像标注为标准图像。
优选的,所述VR场景生成单元,还包括:
视频全息生成模块,用于:
将场景中的音频数据和视频数据均进行获取,获取完成后将序列号相同的音频数据和视频数据进行数据整合;
整合完成后将音频数据中的声音进行语音识别,得到的音频数据中对应的文本文件,并对文本文件进行处理,得到文本文件中每一句文本对应的时间戳;
将视频数据中的图像数据进行获取,获取确定图像数据与文本文件中每一句文本对应的时间戳的关联关系。
优选的,所述视频全息生成模块,还用于:
根据关联关系确定图像数据对应的时间标识,根据时间标识对图像数据进行排序,其中,同一时刻下的图像数据至少为一张;
将排序结果为同一时间的图像数据进行统计,统计完成后获取统计数据中每个图像数据的截取角度;
将截取角度对同一时刻的统计数据进行捕捉合并,得到当前场景的全息VR图像;
将获取的全息VR图像进行VR视频生成,得到最终VR模拟场景数据,将VR模拟场景数据的参数进行确认,并将该参数标注为最终调试参数。
与现有技术相比,本发明的有益效果如下:
1.本发明提供的一种运用虚拟现实技术的心理疗法系统,数字头盔后可以进行针对性VR场景的观看,可以帮助患者缓解压力和焦虑,数字头盔配合戴数据手套可以使患者在虚拟场景中进行抓取、移动、装配、操纵和控制,使患者在虚拟缓解中通过不断接收虚拟环境下的社交训练,减轻心理疾病的情况。
2.本发明提供的一种运用虚拟现实技术的心理疗法系统,音乐以及语音向导数据通过音频数据处理模块进行音频处理,音频处理完成后可以使播放出来的音频声音更加的融合、去杂音,图像数据进行失真度、清晰度和偏斜度进行调整处理,可以提升图像质量。
3.本发明提供的一种运用虚拟现实技术的心理疗法系统,对文本文件进行处理,得到文本文件中每一句文本对应的时间戳,可以将音频数据所对应的场景时间段进行确认,提高视频与声音同步进行的效果,不会出现声音与场景不同步的问题。
附图说明
图1为本发明的整体流程示意图;
图2为本发明的虚拟设备调试单元模块示意图;
图3为本发明的VR场景生成单元模块示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了解决现有技术中,患者在进行心理治疗时,只是单纯的由医生对患者进行病情询问,询问完成后进行简单的言语治疗,从而导致患者的心理治疗效果不佳的问题,请参阅图1和图2,本实施例提供以下技术方案:
一种运用虚拟现实技术的心理疗法系统,包括:患者资料数据采集单元,用于:根据医生对患者在治疗前的诊断数据进行获取,根据获取的诊断数据判断患者的心理疾病的属性范围,其中,心理疾病的范围包括知觉障碍,记忆障碍,感觉障碍,注意障碍,意志障碍,情感障碍,思维障碍,意识障碍,行为障碍和人格障碍,根据诊断数据判断患者属于的心理疾病属性,并且可以进行多项选择;虚拟设备调试单元,用于:基于患者资料数据采集单元中确认的患者心理疾病属性,根据不同属性的心理疾病障碍范围进行不同的虚拟治疗场景选择,并且,根据诊断结果对患者将要使用的虚拟设备进行参数调试;其中,虚拟设备包括数字头盔、数据手套以及治疗室,并且数字头盔上设置有音响设备,数字头盔、数据手套以及治疗室均与终端操控装置电性连接;VR场景生成单元,用于:基于虚拟设备调试单元中获取的虚拟治疗场景,将该虚拟场景从数据库中进行场景获取,数据库中场景获取后将该场景所对应的视频数据进行调取,并将视频数据与场景数据进行数据融合,数据融合后将数据进行优化处理,并将优化处理的参数进行确认;人机交互调试单元,用于:基于VR场景生成单中获取的优化后的参数,将参数导入至虚拟设备中,当各个虚拟设备启动后,患者根据不用的虚拟设备进行不同体感的缓解治疗;其中,当患者进行治疗时数字头盔会对患者的脑电波的波动进行实时记录,并将记录的结果进行独立存储;治疗结果参数决策单元,用于:基于人机交互调试单元中获取的记录结果以及患者资料数据采集单元中获取的诊断结果,将记录结果与诊断结果进行对比计算,根据计算结果判断治疗结果的等级,对比计算结果如下:
上式中,x表示记录结果;y表示诊断结果;n表示对比结果;a表示低于正常等级的阈值;b表示正常等级;c表示高于正常等级的阈值,且a、b均为异常等级。
具体的,通过患者资料数据采集单元可以将医生诊断患者的病情资料进行更完成的获取,并且医生对患者病情的属性范围都进行有效的归类,可以使后期的虚拟治疗进行针对性的医治,通过虚拟设备调试单元将患者的治疗场景进行选择,治疗场景是根据患者心理疾病的属性进行选择,选择完成后将应对的场景参数均对应至不同的虚拟设备中,其中,患者佩戴数字头盔和数据手套后,根据患者观看到的虚拟场景对患者进行缓解和放松饿的治疗,同时数据手套可以根据虚拟场景中的具体操作进行抓取、移动、装配、操纵和控制,提高了治疗时的趣味性,音响设备也使患者在使用时根据患病情况进行音乐播放以及播放场景视频中的语音向导,治疗室为患者的独立治疗房间,房间内根据患者的心理疾病属性可以对温湿度、亮度、含氧度以及香薰设备进行调控,通过VR场景生成单元可以将患者所对应的场景画面以及声音进行进一步的优化,提高了视频数据和音频数据使用的效果,根据人机交互调试单元可以对患者在进行虚拟治疗时的脑电波进行进一步的记录,对脑电波的记录可以更精准的了解到患者在进行治疗时的兴奋程度,并根据脑电波的记录可以清楚的判断该次的治疗是否取得了预期的效果,通过治疗结果参数决策单元将该次治疗的结果数据以及治疗前的数据进行对比,对比完成后通过对比结果对该次的治疗效果进行判断,其中,若n的阈值在a范围内,则表示得出的结果低于正常等级,若n的阈值在c范围内,则表示得出的结果高于正常等级,若n的阈值在b范围内,则表示得出的结果为正常等级,其中a、b、c均为一个阈值段,进一步的提高了医生在对患者治疗后效果的判断以及决策。
所述虚拟设备调试单元,包括:场景确认模块,用于:将患者的心理疾病的属性范围进行确认,确认完成后进行虚拟治疗场景选择,其中,每种属性的心理疾病均对应特定的虚拟治疗场景;虚拟治疗场景确认后,将确认完成的一个或者多个虚拟治疗场景的场景参数进行确认;确认完成后将参数进行唯一编码标号,并且每个唯一编码与所对应的场景进行编码绑定,所述虚拟设备调试单元,还包括:设备控制对应模块,用于:基于场景确认模块中获取的场景参数,将参数阈值分别与数字头盔、数据手套以及治疗室进行参数对应;参数对应完成后数字头盔、数据手套以及治疗室即为患者进行治疗所对应的属性范围的治疗设备;其中,数字头盔为VR式头盔眼镜,患者佩戴后可通过数字头盔进行场景观看;患者佩戴数据手套后,可在虚拟场景内进行物体抓取、移动、装配、操纵和控制,并且,将手指伸屈时的各种姿势转换成数字信号送给终端操控装置,终端操控装置通过患者对应的治疗场景来识别出患者的手在虚拟场景中操作时的姿势,并执行相应的操作。
具体的,先将患者的心理疾病属性范围进行确定,每一种属性的心理疾病都有相对应的治疗场景,根据患者的心理疾病的属性将应对的场景进行选择,若患者同时患上两种或两种以上的心理疾病,则也都将对应的多个场景进行选择,进一步的提高了患者在患上多种心理疾病后的治疗效果,并且每个治疗场景都拥有独立的编码,进一步的提高了后期场景图像优化饿的便捷性,通过设备控制对应模块可以将对应的场景参数与虚拟设备进行参数对应,其中主要对应的是根据患者心率疾病的属性对应的场景数据,根据虚拟设备中的数字头盔、数据手套和治疗室对患者进行针对性的治疗,其中,患者带上数字头盔后可以进行针对性VR场景的观看,可以帮助患者缓解压力和焦虑,同时数字头盔配合戴数据手套可以使患者在虚拟场景中进行抓取、移动、装配、操纵和控制,进一步的提高了患者提供情景模拟训练的机会,可以使患者在虚拟缓解中通过不断接收虚拟环境下的社交训练,减轻心理疾病的情况,从而提高治疗的效果。
为了解决现有技术中,当患者进行虚拟治疗时,由于VR图像没有进行更优良的优化,从而使场景画面过去粗糙,导致患者在进行治疗时治疗效果不佳的问题,请参阅图3,本实施例提供以下技术方案:
所述VR场景生成单元,包括:场景视频生成模块,用于:将患者治疗时候所对应的场景数据进行获取,场景数据获取后将场景数据以帧为单位进行场景数据划分;场景数据划分完成后将场景数据进行视频合成,视频合成完成后标记为场景视频;并且,场景视频确认完成后,将对应的音频数据进行获取,并将音频数据与视频数据进行数据响应,所述VR场景生成单元,还包括:音频数据获取模块,用于:基于场景视频生成模块中获取的音频数据,将一组或者多组音频数据进行音频分帧;根据分帧完成的音频,确认每个音频帧对应的场景视频数据进行视频帧对应,所述VR场景生成单元,还包括:音频数据处理模块,用于:基于音频数据获取模块中获取音频帧对应完成的视频帧,将音频帧中的噪声信号进行确认;根据噪声信号确认每个噪声信号的噪声特征,其中,噪声特征的确认根据二维小波的变换进行确认;根据噪声特征生成音频处理模板,通过音频处理模板将该场景下的一组或者多组音频数据进行处理。
具体的,将患者根据心理疾病对应的场景图像进行获取,获取后通过场景视频生成模块将场景图像生成场景视频,进一步的提高了后期VR视频生成的便捷性和真实性,并且场景视频生成的同时将场景视频对应的音频数据进行获取,音频数据主要是场景视频中所播放的音乐以及语音向导数据,音乐以及语音向导数据均通过数字头盔上的音响进行播放,播放音乐有效的降低了患者在进行心理治疗时的焦虑情绪,同时语音向导可以教患者需要进行的下一个步骤,音乐以及语音向导数据通过音频数据处理模块进行音频处理,音频处理完成后可以使播放出来的音频声音更加的融合、去杂音,同时也进一步提高了患者在使用时的舒适性。
所述VR场景生成单元,还包括:视频图像处理模块,用于:基于场景视频生成模块中获取的视频数据,将视频中的图像进行不同视角方向的截取;图像截取完成后将图像的失真度、清晰度和偏斜度进行调整处理,其中,调整的方法是将标准的失真度、清晰度和偏斜度的标准阈值与截图的图像阈值进行阈值对应,若截取图像的阈值与标准阈值对应不上时,则将截取图像阈值进行调整,直至阈值调整至与标准阈值一致,所述视频图像处理模块,还用于:截取图像处理完成后将截取图像对应的灰度图像进行确认,根据灰度图像确认滤波图像;其中,滤波图像是根据线性空间滤波进行获取,滤波图像获取后将滤波图像进行去噪处理,处理完成后图像标注为标准图像。
具体的,通过视频图像处理模块将场景数据中的图像数据进行失真度、清晰度和偏斜度进行调整处理,有助于消除模糊或不清晰的图像,并提升图像质量,可以保证图像在处理后更加准确和可靠,可以进一步的优化场景数据中画面的质感,使患者观看的更加舒适和清晰,同时根据线性空间滤波将图像处理为滤波图像并将滤波图像进行去噪,有效的处理掉了场景图像中不必要的干扰信号,提高了后期VR场景视频生成的效果。
所述VR场景生成单元,还包括:视频全息生成模块,用于:将场景中的音频数据和视频数据均进行获取,获取完成后将序列号相同的音频数据和视频数据进行数据整合;整合完成后将音频数据中的声音进行语音识别,得到的音频数据中对应的文本文件,并对文本文件进行处理,得到文本文件中每一句文本对应的时间戳;将视频数据中的图像数据进行获取,获取确定图像数据与文本文件中每一句文本对应的时间戳的关联关系,所述视频全息生成模块,还用于:根据关联关系确定图像数据对应的时间标识,根据时间标识对图像数据进行排序,其中,同一时刻下的图像数据至少为一张;将排序结果为同一时间的图像数据进行统计,统计完成后获取统计数据中每个图像数据的截取角度;将截取角度对同一时刻的统计数据进行捕捉合并,得到当前场景的全息VR图像;将获取的全息VR图像进行VR视频生成,得到最终VR模拟场景数据,将VR模拟场景数据的参数进行确认,并将该参数标注为最终调试参数。
具体的,当最终的VR场景视频在数字头盔中进行显示之前,先将处理完成的视频数据与音频数据进行优化融合,将音频数据中的声音进行语音识别,得到的音频数据中对应的文本对文本文件进行处理,得到文本文件中每一句文本对应的时间戳,可以将音频数据所对应的场景时间段进行确认,提高视频与声音同步进行的效果,不会出现声音与场景不同步的问题文件,并,根据时间标识对图像数据进行排序,并且同一时刻下的图像数据至少为一张,通过对场景画面进行多帧截取并进行排序,进一步的提高了场景画面的流畅性。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

Claims (10)

1.一种运用虚拟现实技术的心理疗法系统,其特征在于,包括:
患者资料数据采集单元,用于:
根据医生对患者在治疗前的诊断数据进行获取,根据获取的诊断数据判断患者的心理疾病的属性范围,其中,心理疾病的范围包括知觉障碍,记忆障碍,感觉障碍,注意障碍,意志障碍,情感障碍,思维障碍,意识障碍,行为障碍和人格障碍,根据诊断数据判断患者属于的心理疾病属性,进行多项选择;
虚拟设备调试单元,用于:
基于患者资料数据采集单元中确认的患者心理疾病属性,根据不同属性的心理疾病障碍范围进行不同的虚拟治疗场景选择,并且,根据诊断结果对患者将要使用的虚拟设备进行参数调试;
其中,虚拟设备包括数字头盔、数据手套以及治疗室,并且数字头盔上设置有音响设备,数字头盔、数据手套以及治疗室均与终端操控装置电性连接;
VR场景生成单元,用于:
基于虚拟设备调试单元中获取的虚拟治疗场景,将该虚拟场景从数据库中进行场景获取,数据库中场景获取后将该场景所对应的视频数据进行调取,并将视频数据与场景数据进行数据融合,数据融合后将数据进行优化处理,并将优化处理的参数进行确认;
人机交互调试单元,用于:
基于VR场景生成单中获取的优化后的参数,将参数导入至虚拟设备中,当各个虚拟设备启动后,患者根据不用的虚拟设备进行不同体感的缓解治疗;
其中,当患者进行治疗时数字头盔会对患者的脑电波的波动进行实时记录,并将记录的结果进行独立存储;
治疗结果参数决策单元,用于:
基于人机交互调试单元中获取的记录结果以及患者资料数据采集单元中获取的诊断结果,将记录结果与诊断结果进行对比计算,根据计算结果判断治疗结果的等级,对比计算结果如下:
上式中,x表示记录结果;y表示诊断结果;n表示对比结果;a表示低于正常等级的阈值;b表示正常等级;c表示高于正常等级的阈值,且a、b均为异常等级。
2.根据权利要求1所述的一种运用虚拟现实技术的心理疗法系统,其特征在于:所述虚拟设备调试单元,包括:
场景确认模块,用于:
将患者的心理疾病的属性范围进行确认,确认完成后进行虚拟治疗场景选择,其中,每种属性的心理疾病均对应特定的虚拟治疗场景;
虚拟治疗场景确认后,将确认完成的一个或者多个虚拟治疗场景的场景参数进行确认;
确认完成后将参数进行唯一编码标号,并且每个唯一编码与所对应的场景进行编码绑定。
3.根据权利要求2所述的一种运用虚拟现实技术的心理疗法系统,其特征在于:所述虚拟设备调试单元,还包括:
设备控制对应模块,用于:
基于场景确认模块中获取的场景参数,将参数阈值分别与数字头盔、数据手套以及治疗室进行参数对应;
参数对应完成后数字头盔、数据手套以及治疗室即为患者进行治疗所对应的属性范围的治疗设备;
其中,数字头盔为VR式头盔眼镜,患者佩戴后通过数字头盔进行场景观看;患者佩戴数据手套后,在虚拟场景内进行物体抓取、移动、装配、操纵和控制,并且,将手指伸屈时的各种姿势转换成数字信号送给终端操控装置,终端操控装置通过患者对应的治疗场景来识别出患者的手在虚拟场景中操作时的姿势,并执行相应的操作。
4.根据权利要求1所述的一种运用虚拟现实技术的心理疗法系统,其特征在于:所述VR场景生成单元,包括:
场景视频生成模块,用于:
将患者治疗时候所对应的场景数据进行获取,场景数据获取后将场景数据以帧为单位进行场景数据划分;
场景数据划分完成后将场景数据进行视频合成,视频合成完成后标记为场景视频;
并且,场景视频确认完成后,将对应的音频数据进行获取,并将音频数据与视频数据进行数据响应。
5.根据权利要求4所述的一种运用虚拟现实技术的心理疗法系统,其特征在于:所述VR场景生成单元,还包括:
音频数据获取模块,用于:
基于场景视频生成模块中获取的音频数据,将一组或者多组音频数据进行音频分帧;
根据分帧完成的音频,确认每个音频帧对应的场景视频数据进行视频帧对应。
6.根据权利要求5所述的一种运用虚拟现实技术的心理疗法系统,其特征在于:所述VR场景生成单元,还包括:
音频数据处理模块,用于:
基于音频数据获取模块中获取音频帧对应完成的视频帧,将音频帧中的噪声信号进行确认;
根据噪声信号确认每个噪声信号的噪声特征,其中,噪声特征的确认根据二维小波的变换进行确认;
根据噪声特征生成音频处理模板,通过音频处理模板将该场景下的一组或者多组音频数据进行处理。
7.根据权利要求4所述的一种运用虚拟现实技术的心理疗法系统,其特征在于:所述VR场景生成单元,还包括:
视频图像处理模块,用于:
基于场景视频生成模块中获取的视频数据,将视频中的图像进行不同视角方向的截取;
图像截取完成后将图像的失真度、清晰度和偏斜度进行调整处理,其中,调整的方法是将标准的失真度、清晰度和偏斜度的标准阈值与截图的图像阈值进行阈值对应,若截取图像的阈值与标准阈值对应不上时,则将截取图像阈值进行调整,直至阈值调整至与标准阈值一致。
8.根据权利要求7所述的一种运用虚拟现实技术的心理疗法系统,其特征在于:所述视频图像处理模块,还用于:
截取图像处理完成后将截取图像对应的灰度图像进行确认,根据灰度图像确认滤波图像;
其中,滤波图像是根据线性空间滤波进行获取,滤波图像获取后将滤波图像进行去噪处理,处理完成后图像标注为标准图像。
9.根据权利要求7所述的一种运用虚拟现实技术的心理疗法系统,其特征在于:所述VR场景生成单元,还包括:
视频全息生成模块,用于:
将场景中的音频数据和视频数据均进行获取,获取完成后将序列号相同的音频数据和视频数据进行数据整合;
整合完成后将音频数据中的声音进行语音识别,得到的音频数据中对应的文本文件,并对文本文件进行处理,得到文本文件中每一句文本对应的时间戳;
将视频数据中的图像数据进行获取,获取确定图像数据与文本文件中每一句文本对应的时间戳的关联关系。
10.根据权利要求9所述的一种运用虚拟现实技术的心理疗法系统,其特征在于:所述视频全息生成模块,还用于:
根据关联关系确定图像数据对应的时间标识,根据时间标识对图像数据进行排序,其中,同一时刻下的图像数据至少为一张;
将排序结果为同一时间的图像数据进行统计,统计完成后获取统计数据中每个图像数据的截取角度;
将截取角度对同一时刻的统计数据进行捕捉合并,得到当前场景的全息VR图像;
将获取的全息VR图像进行VR视频生成,得到最终VR模拟场景数据,将VR模拟场景数据的参数进行确认,并将该参数标注为最终调试参数。
CN202310920369.3A 2023-07-26 2023-07-26 一种运用虚拟现实技术的心理疗法系统 Pending CN116942989A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310920369.3A CN116942989A (zh) 2023-07-26 2023-07-26 一种运用虚拟现实技术的心理疗法系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310920369.3A CN116942989A (zh) 2023-07-26 2023-07-26 一种运用虚拟现实技术的心理疗法系统

Publications (1)

Publication Number Publication Date
CN116942989A true CN116942989A (zh) 2023-10-27

Family

ID=88454305

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310920369.3A Pending CN116942989A (zh) 2023-07-26 2023-07-26 一种运用虚拟现实技术的心理疗法系统

Country Status (1)

Country Link
CN (1) CN116942989A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6425764B1 (en) * 1997-06-09 2002-07-30 Ralph J. Lamson Virtual reality immersion therapy for treating psychological, psychiatric, medical, educational and self-help problems
CN107320836A (zh) * 2017-05-02 2017-11-07 华南理工大学 基于vr技术的抑郁症辅助治疗虚拟场景系统及其实现方法
US20180011971A1 (en) * 2016-07-05 2018-01-11 Ta-Chuan Yeh System for mental health clinical application
CN108969864A (zh) * 2018-06-06 2018-12-11 中国人民解放军第四军医大学 基于vr技术的抑郁症康复治疗装置及其使用方法
CN109646784A (zh) * 2018-12-21 2019-04-19 华东计算技术研究所(中国电子科技集团公司第三十二研究所) 基于沉浸式vr的失眠障碍心理治疗系统和方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6425764B1 (en) * 1997-06-09 2002-07-30 Ralph J. Lamson Virtual reality immersion therapy for treating psychological, psychiatric, medical, educational and self-help problems
US20180011971A1 (en) * 2016-07-05 2018-01-11 Ta-Chuan Yeh System for mental health clinical application
CN107320836A (zh) * 2017-05-02 2017-11-07 华南理工大学 基于vr技术的抑郁症辅助治疗虚拟场景系统及其实现方法
CN108969864A (zh) * 2018-06-06 2018-12-11 中国人民解放军第四军医大学 基于vr技术的抑郁症康复治疗装置及其使用方法
CN109646784A (zh) * 2018-12-21 2019-04-19 华东计算技术研究所(中国电子科技集团公司第三十二研究所) 基于沉浸式vr的失眠障碍心理治疗系统和方法

Similar Documents

Publication Publication Date Title
CN109585021B (zh) 基于全息投影技术的精神状态评估方法
CN102149319B (zh) 阿尔茨海默氏症认知使能器
US11659350B1 (en) Metaverse dating
KR102277820B1 (ko) 반응정보 및 감정정보를 이용한 심리 상담 시스템 및 그 방법
EP3982362B1 (en) Audio processing method, apparatus, computer device, and storage medium
KR20190027354A (ko) 비전 성능 데이터를 획득, 분석 및 생성하고 비전 성능 데이터에 기반하여 미디어를 수정하기 위한 방법 및 시스템
CN107463780A (zh) 一种3d虚拟自闭症治疗系统及治疗方法
CN112905015A (zh) 一种基于脑机接口的冥想训练方法
CN107402635B (zh) 结合脑电波与虚拟现实的心理健康调节方法及系统
CN103823551A (zh) 一种实现多维度感知虚拟交互的系统和方法
JP2022536126A (ja) 感情認識方法及びそれを利用した感情認識用デバイス
CN111028919A (zh) 基于人工智能算法的恐惧症自我诊疗系统
CN113397547A (zh) 一种基于生理数据的观影评价服务系统和方法
CN114756121A (zh) 基于脑机接口的虚拟现实可交互式情绪检测与调控系统
CN113082448A (zh) 基于脑电信号和眼动仪的虚拟沉浸式自闭症儿童治疗系统
CN111654752B (zh) 多媒体信息播放方法、装置、电子设备及存储介质
CN116942989A (zh) 一种运用虚拟现实技术的心理疗法系统
WO2020220142A1 (en) System for measuring breath and for adapting breath exercises
Cha et al. Deep-learning-based real-time silent speech recognition using facial electromyogram recorded around eyes for hands-free interfacing in a virtual reality environment
CN116458901A (zh) 一种神经反馈训练方法、系统、设备及存储介质
Liu et al. Generating talking face with controllable eye movements by disentangled blinking feature
RU2704497C1 (ru) Способ формирования системы управления мозг-компьютер
CN108563322B (zh) Vr/ar设备的控制方法和装置
Tivatansakul et al. The design, implementation and evaluation of a relaxation service with facial emotion detection
CN115810099B (zh) 一种用于虚拟沉浸式抑郁症治疗系统的图像融合设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination