CN112365957A - 一种基于虚拟现实的心理治疗系统 - Google Patents

一种基于虚拟现实的心理治疗系统 Download PDF

Info

Publication number
CN112365957A
CN112365957A CN202011456132.7A CN202011456132A CN112365957A CN 112365957 A CN112365957 A CN 112365957A CN 202011456132 A CN202011456132 A CN 202011456132A CN 112365957 A CN112365957 A CN 112365957A
Authority
CN
China
Prior art keywords
virtual reality
visitor
information
picture
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011456132.7A
Other languages
English (en)
Inventor
聂镭
黄海
聂颖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Longma Zhixin Zhuhai Hengqin Technology Co ltd
Original Assignee
Longma Zhixin Zhuhai Hengqin Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Longma Zhixin Zhuhai Hengqin Technology Co ltd filed Critical Longma Zhixin Zhuhai Hengqin Technology Co ltd
Priority to CN202011456132.7A priority Critical patent/CN112365957A/zh
Publication of CN112365957A publication Critical patent/CN112365957A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33Querying
    • G06F16/3331Query processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/35Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/36Creation of semantic tools, e.g. ontology or thesauri
    • G06F16/367Ontology
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Computational Linguistics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Biomedical Technology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Pathology (AREA)
  • Artificial Intelligence (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Evolutionary Computation (AREA)
  • Animal Behavior & Ethology (AREA)
  • Evolutionary Biology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请属于信息处理领域,尤其涉及一种基于虚拟现实的心理治疗系统,该系统包括服务器,与服务器连接的虚拟现实设备以及与服务器连接的用户终端,该服务器包括:获取来访者的目标语音信息;查找与目标语音信息对应的目标文本信息;将目标文本信息输入至预设的知识图谱中,得到场景进度信息;从预设的模型数据库中查找与目标文本信息匹配的虚拟现实元素数据根据虚拟现实元素数据以及场景进度信息生成第一虚拟现实场景数据,并发送第一虚拟现实场景数据至虚拟现实设备,以指示虚拟现实设备播放与第一虚拟现实场景数据对应的第一3D画面至来访者。可见,本申请不需要人工控制播放给来访者的3D画面的进度,达到便捷给来访者进行心理治疗的效果。

Description

一种基于虚拟现实的心理治疗系统
技术领域
本申请属于信息处理领域,尤其涉及一种基于虚拟现实的心理治疗系统。
背景技术
虚拟现实(VR)整合了计算机图形学、模式识别技术、身体传感技术、分布实时处理技术、语言处理和立体声技术等,通过高分辨显示技术以及多传感交互技术生成逼真的可以集视、听、嗅、触、运动等多种感觉于一体的沉浸式交互式虚拟环境,使人产生身临其境的感觉。VR应用于PTSD的治疗产生了一种新的疗法即虚拟现实暴露疗法(VRET),在VRET中,来访者佩戴运动敏感设备,通过电脑生成的虚拟环境,呈现恐惧相关的视觉、听觉、触觉刺激,近些年来VRET越来越广泛地应用于各种心理障碍的治疗,但是在VRET治疗过程中,依然需要治疗师全程进行人工控制,不能够便捷的使用VRET治疗。
发明内容
有鉴于此,本申请实施例提供了一种基于虚拟现实的心理治疗系统,以解决在心理治疗治疗过程中,依然需要治疗师全程进行人工控制,不能便捷进行心理治疗的问题。
本申请实施例提供了一种基于虚拟现实的心理治疗系统,包括:
服务器,用于获取来访者的目标语音信息,其中,目标语音信息为表征来访者描述的创伤事件的信息;查找与所述目标语音信息对应的目标文本信息;将所述目标文本信息输入至预设的知识图谱中,得到场景进度信息;从预设的模型数据库中查找与所述目标文本信息匹配的虚拟现实元素数据;根据所述虚拟现实元素数据以及所述场景进度信息生成第一虚拟现实场景数据,并发送所述第一虚拟现实场景数据至虚拟现实设备,以指示所述虚拟现实设备播放与所述第一虚拟现实场景数据对应的第一3D画面至来访者;发送所述虚拟现实场景数据至用户终端,以指示所述用户终端播放与所述虚拟现实场景数据对应的2D画面至治疗师;接收所述用户终端发送的播放指令;基于所述播放指令调整所述第一虚拟现实场景数据,得到第二虚拟现实场景数据,并发送所述第二虚拟现实场景数据至所述虚拟现实设备,以指示所述虚拟现实设备播放与所述第二虚拟现实场景数据对应的第三3D画面至所述来访者;
虚拟现实设备,用于接收第一虚拟现实场景数据,根据第一虚拟现实场景数据生成第一3D画面,播放第一3D画面至来访者;接收第二虚拟现实场景数据,根据第二虚拟现实场景数据生成第二3D画面,播放第二3D画面至来访者;
用户终端,用于接收第一虚拟现实数据,根据第一虚拟现实数据生成2D画面,播放2D画面至治疗师;根据治疗师的触屏操作生成与治疗师触屏操作对应的播放指令,发送播放指令至服务器,以指示服务器基于播放指令调整第一虚拟现实场景数据,得到第二虚拟现实场景数据。
在一种可能的实现方式中,所述服务器还具体用于:
接收第一虚拟现实数据,根据第一虚拟现实数据生成2D画面,播放2D画面至治疗师;根据治疗师的触屏操作生成与治疗师触屏操作对应的播放指令,发送播放指令至服务器,以指示服务器基于播放指令调整第一虚拟现实场景数据,得到第二虚拟现实场景数据。
在一种可能的实现方式中,所述服务器还具体用于:
获取历史来访者的特征信息,所述特征信息为播放第二3D画面至所述历史来访者时,采集得到的特征信息;对所述特征信息进行聚类处理,根据所述特征信息对应的变化值确定出所述第二3D画面的时间节点;根据所述时间节点生成所述历史来访者对应的历史场景进度信息。
在一种可能的实现方式中,所述服务器还具体用于:
建立所述历史场景进度信息与所述历史来访者的第一用户画像之间的关联关系;
将所述历史场景进度信息作为第一节点,所述来访者的第一用户画像作为第二节点,所述关联关系作为所述第一节点与所述第二节点之间的边,生成所述预设的知识图谱。
本申请实施例与现有技术相比存在的有益效果是:
本申请实施例中,服务器通过来访者的语音信息和预设的知识图谱,可以自动生成3D画面,发送3D画面至虚拟现实设备之后可以自动控制播放给来访者的画面进程,不需要人工控制播放给来访者的3D画面的进度,达到便捷给来访者进行心理治疗的效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的基于虚拟现实的心理治疗系统;
图2是本申请实施例提供的基于虚拟现实的心理治疗方法的一种流程示意图;
图3是本申请实施例提供的基于虚拟现实的心理治疗方法的图2中步骤S203之前的一种流程示意图;
图4是本申请实施例提供的基于虚拟现实的心理治疗方法的图3中步骤S 301的具体流程示意图;
图5是本申请实施例提供的基于虚拟现实的心理治疗方法的图3中步骤S302的具体流程示意图;
图6是本申请实施例提供的基于虚拟现实的心理治疗方法的图1中步骤S205之前的一种流程示意图;
图7是本申请实施例提供的基于虚拟现实的心理治疗装置的结构示意图;
图8是本申请实施例提供的服务器的示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
需说明的是,本申请实施例的应用场景是治疗师给患有PTSD症状的来访者进行暴露治疗的过程中,治疗师通过虚拟现实设备播放与来访者经历过的创伤事件对应的画面至来访者,来访者会因为通过想象创伤事件的情景或直接在创伤记忆下的暴露,寻找到安全感和减少认知偏差,降低回避行为,从而使得对创伤记忆的恐惧情绪也得以缓解,给予与创伤记忆相类似的刺激一个新的意义,达到对来访者进行治疗的目的。
为了说明本申请所述的技术方案,下面通过具体实施例来进行说明。
参见图1,为本申请实施例提供的基于虚拟现实的心理治疗系统1的结构示意图,包括服务器10、与服务器连接的虚拟现实设备20以及与服务器连接的用户终端30,其中,服务器可以是云端服务器,虚拟现实设备可以是虚拟现实头盔,本申请实施例对虚拟现实头盔的型号不作限制,用户终端可以是手机、笔记本等移动设备。
服务器用于获取来访者的目标语音信息,其中,目标语音信息为表征来访者描述的创伤事件的信息;查找与目标语音信息对应的目标文本信息;将目标文本信息输入至预设的知识图谱中,得到场景进度信息;从预设的模型数据库中查找与目标文本信息匹配的虚拟现实元素数据;根据虚拟现实元素数据以及场景进度信息生成第一虚拟现实场景数据,并发送第一虚拟现实场景数据至虚拟现实设备,以指示虚拟现实设备播放与第一虚拟现实场景数据对应的第一3D画面至来访者;发送虚拟现实场景数据至用户终端,以指示用户终端播放与虚拟现实场景数据对应的2D画面至治疗师;接收用户终端发送的播放指令;基于播放指令调整第一虚拟现实场景数据,得到第二虚拟现实场景数据,并发送第二虚拟现实场景数据至虚拟现实设备,以指示虚拟现实设备播放与第二虚拟现实场景数据对应的第三3D画面至来访者。
虚拟现实设备,用于接收第一虚拟现实场景数据,根据第一虚拟现实场景数据生成第一3D画面,播放第一3D画面至来访者;接收第二虚拟现实场景数据,根据第二虚拟现实场景数据生成第二3D画面,播放第二3D画面至来访者。
用户终端,用于接收第一虚拟现实数据,根据第一虚拟现实数据生成2D画面,播放2D画面至治疗师;根据治疗师的触屏操作生成与治疗师触屏操作对应的播放指令,发送播放指令至服务器,以指示服务器基于播放指令调整第一虚拟现实场景数据,得到第二虚拟现实场景数据。
其中,触屏操作可以是滑动等操作。
在一种实施方式中,服务器还具体用于:
获取历史场景进度信息,历史场景进度信息为历史来访者对应的场景进度信息;根据历史场景进度信息以及历史来访者的第一用户画像生成预设的知识图谱。
在一种实施方式中,服务器还具体用于:
获取历史来访者的特征信息,特征信息为播放第二3D画面至历史来访者时,采集得到的特征信息;对特征信息进行聚类处理,根据特征信息对应的变化值确定出所述第二3D画面的时间节点;根据时间节点生成历史来访者对应的历史场景进度信息。
在一种实施方式中,服务器还具体用于:
建立历史场景进度信息与历史来访者的第一用户画像之间的关联关系;
将历史场景进度信息作为第一节点,来访者的第一用户画像作为第二节点,关联关系作为所述第一节点与第二节点之间的边,生成预设的知识图谱。
本申请实施例中,服务器通过来访者的语音信息和预设的知识图谱,可以自动生成3D画面,发送3D画面至虚拟现实设备之后可以自动控制播放给来访者的画面进程,不需要人工控制播放给来访者的3D画面的进度,达到便捷给来访者进行心理治疗的效果。
需说明的是,上述关于服务器侧的详细介绍请参见下列内容。
下面具体介绍服务器侧的流程方法。
参见图2,为本申请实施例提供的基于虚拟现实的心理治疗方法的一种流程示意图,该方法应用于上述实施例的服务器,该方法包括以下步骤:
步骤S201、获取来访者的目标语音信息。
其中,目标语音信息为表征来访者描述的创伤事件的信息。
具体应用中,服务器实时获取采集装置(例如麦克风)采集的来访者的语音信息,从语音信息中识别出目标语音信息。例如,对获取到的来访者的语音信息进行预处理,例如预加重、分帧加窗等,然后进行梅尔频率倒谱提取语音特征,根据语音特征输入到预设的语音特征模型例如通过循环神经网络提前训练得到的,得到来访者的文本信息。对文本信息进行切词处理,得到构成文本信息的分词,然后在预设的词向量数据库例如根据word2vec模型、fastText模型或者glove模型训练得到的词向量数据库查找出每个分词对应的向量,对每个分词的向量与预先设定的来访者描述创伤事件对应的向量进行相似度计算,例如余弦相似度计算,得到相似度值,若相似度值大于相似度阈值,则将相似度大于相似度阈值的语音信息确定为目标语音信息。
步骤S202、查找与目标语音信息对应的目标文本信息。
其中,目标文本信息是指来访者描述的创伤事件对应的文本信息。
具体应用中,服务器采用与步骤S201中相同的方式,得到语音信息对应的文本信息,确定出语音信息中的目标语音信息,然后根据目标语音信息在文本信息中查找对应的目标文本信息,例如采用正则表达式等方式查找出目标文本信息。
步骤S203、将目标文本信息输入至预设的知识图谱中,得到场景进度信息。
其中,预设的知识图谱包括历史来访者的用户画像、历史场景进度信息以及历史来访者的用户画像与历史场景进度信息之间的关联关系。
优选的,如图3所示,为本申请实施例提供的基于虚拟现实的心理治疗方法的图2中步骤S203之前的一种流程示意图,将目标文本信息输入至预设的知识图谱中,得到场景进度信息之前包括:
步骤S301、获取历史场景进度信息。
其中,历史场景进度信息为历史来访者对应的场景进度信息,是指第二3D画面对应的时间进度表,即时间戳。
具体地,如图4所示,为本申请实施例提供的基于虚拟现实的心理治疗方法的图3中步骤S301的具体流程示意图,获取历史场景进度信息,包括:
步骤S401、获取历史来访者的特征信息。
其中,特征信息为播放第二3D画面至历史来访者时,采集得到的特征信息,例如,特征信息可以包括但是不限于历史来访者的表情特征、动作特征以及生理特征等。具体地,获取特征信息的来源可以是服务器通过与摄像装置、穿戴式采集装置以及音频采集装置等采集装置建立连接关系,从采集装置获取的。
步骤S402、对特征信息进行聚类处理,根据特征信息对应的变化值确定出第二3D画面的时间节点。
具体应用中,服务器对特征信息进行数值化处理,例如通过one-hot(独热编码)等方式对特征信息进行统一维度单位的数据化处理,然后利用聚类分析算法(例如K-means算法)进行聚类处理,确定出变化值大于变化值阈值的数据变化对应的时间节点作为第二3D画面的时间节点。
可以理解的是,在虚拟现实设备播放第二3D画面至历史来访者时,历史来访者的特征(例如表情、心理以及动作)会跟随着画面播放的进度不同产生变化,以此来确定出第二3D画面的时间节点。
步骤S403、根据时间节点生成历史来访者对应的历史场景进度信息。
可以理解的是,根据时间点可以生成对应的时间戳。
步骤S302、根据历史场景进度信息以及历史来访者的第一用户画像生成预设的知识图谱。
具体应用中,如图5所示,为本申请实施例提供的基于虚拟现实的心理治疗方法的图3中步骤S302的具体流程示意图,根据历史场景进度信息以及历史来访者的第一用户画像生成预设的知识图谱,包括:
步骤S501、建立历史场景进度信息与历史来访者的第一用户画像之间的关联关系。
其中,第一用户画像包括历史来访者的基本信息(例如姓名、年龄、性别等)、创伤事件信息(例如,创伤事件类型、发生时间、地点等)。
步骤S502、将历史场景进度信息作为第一节点,来访者的第一用户画像作为第二节点,关联关系作为第一节点与第二节点之间的边,生成预设的知识图谱。
可以理解的是,根据预设的知识图谱存储有历史来访者的用户画像与场景进度信息之间的关联关系,那么可以基于预设的知识图谱,在接收到来访者的用户画像时,可以为用户画像匹配出对应的场景进度信息,那么后续在生成来访者的创伤事件对应的3D画面时,可以按照场景进度信息播放3D画面给来访者,不需要治疗师远程通过用户终端控制3D画面的播放过程,达到便捷给来访者进行心理治疗的效果。
步骤S204、从预设的模型数据库中查找与目标文本信息匹配的虚拟现实元素数据。
例如,应用场景为来访者经历过911事件后患上的PTSD症状,那么,虚拟现实场景数据包括坍塌的建筑对应的虚拟现实元素数据、惊慌的人群对应的虚拟现实场景数据以及陷入大厦的飞机对应的虚拟现实场景数据等。
示例性地,从预设的模型数据库查找与目标文本信息匹配的虚拟现实元素数据,具体包括以下步骤:
第一步、识别目标文本信息中场景描述信息。
其中,场景描述信息是指来访者描述创伤事件关键信息。
具体应用中,服务器通过预先训练的有限状态机对文本信息进行分段,然后再通过正则表达式查找出每个段落对应的场景描述信息。
第二步、对场景描述信息进行分类,得到场景描述信息中的分类信息。
其中,分类信息包括任务、行为、方向、目标以及地点等。
具体应用中,服务器通过预先训练的支持向量机对场景描述信息进行分类,得到分类信息。其中,分类信息可以具体为一个特征向量。
第三步、识别预设的模型数据库中每个模型数据对应的标签信息。
其中,标签信息可以是指每个模型数据对应的特征向量,预设的模型数据库包括3D模型、动画模型、天气模型以及嗅觉模型等场景模型数据。
第四步、将与分类信息匹配的标签信息对应的模型数据作为虚拟现实元素数据。
具体应用中,可以对分类信息与标签信息之间进行余弦距离、欧式距离、或者杰卡德相似度计算,将相似度大于相似度阈值的标签信息对应的模型数据作为虚拟现实元素数据。
步骤S205、根据虚拟现实元素数据以及场景进度信息生成第一虚拟现实场景数据,并发送第一虚拟现实场景数据至虚拟现实设备,以指示虚拟现实设备播放与第一虚拟现实场景数据对应的第一3D画面至来访者。
具体应用中,服务器可以基于虚拟现实设备的外部插件,通过动画编辑器将虚拟现实元素数据和场景进度信息之间进行融合,得到第一虚拟现实场景数据。
优选的,如图6所示,为本申请实施例提供的基于虚拟现实的心理治疗方法的图1中步骤S205之前的一种流程示意图,根据虚拟现实元素数据以及场景进度信息生成第一虚拟现实场景数据,并发送第一虚拟现实场景数据至虚拟现实设备,以指示虚拟现实设备播放与第一虚拟现实场景数据对应的第一3D画面至来访者之后,还包括:
步骤S601、发送第一虚拟现实场景数据至用户终端,以指示用户终端播放与虚拟现实场景数据对应的2D画面至治疗师。
步骤S602、接收用户终端发送的播放指令。
步骤S603、基于播放指令调整第一虚拟现实场景数据,得到第二虚拟现实场景数据,并发送第二虚拟现实场景数据至虚拟现实设备,以指示虚拟现实设备播放与第二虚拟现实场景数据对应的第三3D画面至来访者。
其中,第二虚拟现实场景数据是指修改后的第二虚拟现实场景数据。
可以理解的是,本申请实施例可以自动播放3D画面给来访者,还可以实时受到用户终端处治疗师的实时监测,能够根据治疗师的命令修改播放的3D画面,从而达到更好的治疗效果。
本申请实施例中,服务器通过来访者的语音信息和预设的知识图谱,可以自动生成3D画面,发送3D画面至虚拟现实设备之后可以自动控制播放给来访者的画面进程,不需要人工控制播放给来访者的3D画面的进度,达到便捷给来访者进行心理治疗的效果。
下面将对本申请实施例提供的基于虚拟现实的心理治疗装置进行介绍说明。本实施例的方法装置与上述方法相互对应。
图7是本申请实施例提供的一种装置的结构示意图,该装置可以具体集成于,该装置可以包括:
获取模块71,用于获取来访者的目标语音信息,其中,所述目标语音信息为表征来访者描述的创伤事件的信息;
查找单元72,用于查找与所述目标语音信息对应的目标文本信息;
关联模块73,用于将所述目标文本信息输入至预设的知识图谱中,得到场景进度信息;
匹配模块74,用于从预设的模型数据库中查找与所述目标文本信息匹配的虚拟现实元素数据;
生成模块75,用于根据所述虚拟现实元素数据以及所述场景进度信息生成第一虚拟现实场景数据,并发送所述第一虚拟现实场景数据至虚拟现实设备,以指示所述虚拟现实设备播放与所述第一虚拟现实场景数据对应的第一3D画面至来访者。
在一种可能的实现方式中,所述设备还包括:
信息获取模块,用于获取历史场景进度信息,所述历史场景进度信息为历史来访者对应的场景进度信息;
生成模块,用于根据所述历史场景进度信息以及所述历史来访者的第一用户画像生成所述预设的知识图谱。
在一种可能的实现方式中,所述信息获取模块包括:
获取单元,用于获取历史来访者的特征信息,所述特征信息为播放第二3D画面至所述历史来访者时,采集得到的特征信息;
聚类单元,用于对所述特征信息进行聚类处理,根据所述特征信息对应的变化值确定出所述第二3D画面的时间节点;
生成单元,根据所述时间节点生成所述历史来访者对应的历史场景进度信息。
在一种可能的实现方式中,所述生成单元包括:
关联子单元,用于建立所述历史场景进度信息与所述历史来访者的第一用户画像之间的关联关系;
生成子单元,将所述历史场景进度信息作为第一节点,所述来访者的第一用户画像作为第二节点,所述关联关系作为所述第一节点与所述第二节点之间的边,生成所述预设的知识图谱。
在一种可能的实现方式中,所述设备还包括:
发送模块,用于发送所述第一虚拟现实场景数据至用户终端,以指示所述用户终端播放与所述虚拟现实场景数据对应的2D画面至治疗师;
接收模块,用于接收所述用户终端发送的播放指令;
指示模块,用于基于所述播放指令调整所述第一虚拟现实场景数据,得到第二虚拟现实场景数据,并发送所述第二虚拟现实场景数据至所述虚拟现实设备,以指示所述虚拟现实设备播放与所述第二虚拟现实场景数据对应的第三3D场景至所述来访者。
需要说明的是,上述装置/单元之间的信息交互、执行过程等内容,由于与本申请方法实施例基于同一构思,其具体功能及带来的技术效果,具体可参见方法实施例部分,此处不再赘述。
图8是本申请实施例提供的服务器8的示意图。如图8所示,该实施例的服务器8包括:处理器80、存储器81以及存储在所述存储器81中并可在所述处理器80上运行的计算机程序62。所述处理器80执行所述计算机程序62时实现上述各个提取方法实施例中的步骤。
示例性的,所述计算机程序62可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器81中,并由所述处理器80执行,以完成本申请。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序82在所述服务器8中的执行过程。
所述服务器8可以是云端服务器等计算设备。所述服务器8可包括,但不仅限于,处理器80、存储器81。本领域技术人员可以理解,图8仅仅是服务器8的示例,并不构成对服务器8的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述服务器8还可以包括输入输出设备、网络接入设备、总线等。
所称处理器80可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器 (Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列 (Field-Programmable Gate Array,FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器81可以是所述服务器8的内部存储单元,例如服务器8的硬盘或内存。所述存储器81也可以是所述服务器8的外部存储设备,例如所述服务器8上配备的插接式硬盘,智能存储卡(Smart Media Card, SMC),安全数字(Secure Digital, SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器81还可以既包括所述服务器8的内部存储单元也包括外部存储设备。所述存储器81用于存储所述计算机程序以及所述服务器8所需的其他程序和数据。所述存储器81还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的服务器和方法,可以通过其它的方式实现。例如,以上所描述的服务器实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。

Claims (4)

1.一种基于虚拟现实的心理治疗系统,其特征在于,该系统包括:
服务器,用于获取来访者的目标语音信息,其中,目标语音信息为表征来访者描述的创伤事件的信息;查找与所述目标语音信息对应的目标文本信息;将所述目标文本信息输入至预设的知识图谱中,得到场景进度信息;从预设的模型数据库中查找与所述目标文本信息匹配的虚拟现实元素数据;根据所述虚拟现实元素数据以及所述场景进度信息生成第一虚拟现实场景数据,并发送所述第一虚拟现实场景数据至虚拟现实设备,以指示所述虚拟现实设备播放与所述第一虚拟现实场景数据对应的第一3D画面至来访者;发送所述虚拟现实场景数据至用户终端,以指示所述用户终端播放与所述虚拟现实场景数据对应的2D画面至治疗师;接收所述用户终端发送的播放指令;基于所述播放指令调整所述第一虚拟现实场景数据,得到第二虚拟现实场景数据,并发送所述第二虚拟现实场景数据至所述虚拟现实设备,以指示所述虚拟现实设备播放与所述第二虚拟现实场景数据对应的第三3D画面至所述来访者;
虚拟现实设备,用于接收第一虚拟现实场景数据,根据第一虚拟现实场景数据生成第一3D画面,播放第一3D画面至来访者;接收第二虚拟现实场景数据,根据第二虚拟现实场景数据生成第二3D画面,播放第二3D画面至来访者;
用户终端,用于接收第一虚拟现实数据,根据第一虚拟现实数据生成2D画面,播放2D画面至治疗师;根据治疗师的触屏操作生成与治疗师触屏操作对应的播放指令,发送播放指令至服务器,以指示服务器基于播放指令调整第一虚拟现实场景数据,得到第二虚拟现实场景数据。
2.如权利要求1所述的基于虚拟现实的心理治疗系统,其特征在于,所述服务器还具体用于:
接收第一虚拟现实数据,根据第一虚拟现实数据生成2D画面,播放2D画面至治疗师;根据治疗师的触屏操作生成与治疗师触屏操作对应的播放指令,发送播放指令至服务器,以指示服务器基于播放指令调整第一虚拟现实场景数据,得到第二虚拟现实场景数据。
3.如权利要求2所述的基于虚拟现实的心理治疗系统,其特征在于,所述服务器还具体用于:
获取历史来访者的特征信息,所述特征信息为播放第二3D画面至所述历史来访者时,采集得到的特征信息;对所述特征信息进行聚类处理,根据所述特征信息对应的变化值确定出所述第二3D画面的时间节点;根据所述时间节点生成所述历史来访者对应的历史场景进度信息。
4.如权利要求3所述的基于虚拟现实的心理治疗系统,其特征在于,所述服务器还具体用于:
建立所述历史场景进度信息与所述历史来访者的第一用户画像之间的关联关系;
将所述历史场景进度信息作为第一节点,所述来访者的第一用户画像作为第二节点,所述关联关系作为所述第一节点与所述第二节点之间的边,生成所述预设的知识图谱。
CN202011456132.7A 2020-12-13 2020-12-13 一种基于虚拟现实的心理治疗系统 Pending CN112365957A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011456132.7A CN112365957A (zh) 2020-12-13 2020-12-13 一种基于虚拟现实的心理治疗系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011456132.7A CN112365957A (zh) 2020-12-13 2020-12-13 一种基于虚拟现实的心理治疗系统

Publications (1)

Publication Number Publication Date
CN112365957A true CN112365957A (zh) 2021-02-12

Family

ID=74536805

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011456132.7A Pending CN112365957A (zh) 2020-12-13 2020-12-13 一种基于虚拟现实的心理治疗系统

Country Status (1)

Country Link
CN (1) CN112365957A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112991848A (zh) * 2021-02-23 2021-06-18 广州乐庚信息科技有限公司 一种基于虚拟现实的远程教育方法及系统
CN114569864A (zh) * 2022-05-09 2022-06-03 阿里健康科技(杭州)有限公司 虚拟沙盘模型的展示、构建方法及计算机设备
CN117499748A (zh) * 2023-11-02 2024-02-02 江苏濠汉信息技术有限公司 一种基于边缘计算的课堂教学互动方法及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104517478A (zh) * 2013-09-28 2015-04-15 南京专创知识产权服务有限公司 一种虚拟现实技术在教育中的运用
CN109830282A (zh) * 2019-03-29 2019-05-31 贾艳滨 场景训练数据处理方法及装置
WO2019143186A1 (ko) * 2018-01-18 2019-07-25 재단법인 아산사회복지재단 뇌연결성 기반의 시지각 트레이닝 장치, 방법 및 프로그램
CN110531849A (zh) * 2019-08-16 2019-12-03 广州创梦空间人工智能科技有限公司 一种基于5g通信的增强现实的智能教学系统
CN110784768A (zh) * 2019-10-17 2020-02-11 珠海格力电器股份有限公司 一种多媒体资源播放方法、存储介质及电子设备
CN110992763A (zh) * 2019-03-28 2020-04-10 珠海超凡视界科技有限公司 基于虚拟现实进行科目二的教学方法
CN111986781A (zh) * 2020-08-24 2020-11-24 龙马智芯(珠海横琴)科技有限公司 基于人机交互的心理治疗方法、装置以及用户终端
CN112007255A (zh) * 2020-09-02 2020-12-01 龙马智芯(珠海横琴)科技有限公司 基于混合现实的心理治疗方法、装置、系统及服务器

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104517478A (zh) * 2013-09-28 2015-04-15 南京专创知识产权服务有限公司 一种虚拟现实技术在教育中的运用
WO2019143186A1 (ko) * 2018-01-18 2019-07-25 재단법인 아산사회복지재단 뇌연결성 기반의 시지각 트레이닝 장치, 방법 및 프로그램
CN110992763A (zh) * 2019-03-28 2020-04-10 珠海超凡视界科技有限公司 基于虚拟现实进行科目二的教学方法
CN109830282A (zh) * 2019-03-29 2019-05-31 贾艳滨 场景训练数据处理方法及装置
CN110531849A (zh) * 2019-08-16 2019-12-03 广州创梦空间人工智能科技有限公司 一种基于5g通信的增强现实的智能教学系统
CN110784768A (zh) * 2019-10-17 2020-02-11 珠海格力电器股份有限公司 一种多媒体资源播放方法、存储介质及电子设备
CN111986781A (zh) * 2020-08-24 2020-11-24 龙马智芯(珠海横琴)科技有限公司 基于人机交互的心理治疗方法、装置以及用户终端
CN112007255A (zh) * 2020-09-02 2020-12-01 龙马智芯(珠海横琴)科技有限公司 基于混合现实的心理治疗方法、装置、系统及服务器

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112991848A (zh) * 2021-02-23 2021-06-18 广州乐庚信息科技有限公司 一种基于虚拟现实的远程教育方法及系统
CN114569864A (zh) * 2022-05-09 2022-06-03 阿里健康科技(杭州)有限公司 虚拟沙盘模型的展示、构建方法及计算机设备
CN114569864B (zh) * 2022-05-09 2022-08-12 阿里健康科技(杭州)有限公司 虚拟沙盘模型的展示、构建方法及计算机设备
CN117499748A (zh) * 2023-11-02 2024-02-02 江苏濠汉信息技术有限公司 一种基于边缘计算的课堂教学互动方法及系统

Similar Documents

Publication Publication Date Title
EP3477519B1 (en) Identity authentication method, terminal device, and computer-readable storage medium
US20220198516A1 (en) Data recommendation method and apparatus, computer device, and storage medium
EP3885965B1 (en) Image recognition method based on micro facial expressions, apparatus and related device
CN109902659B (zh) 用于处理人体图像的方法和装置
CN112365957A (zh) 一种基于虚拟现实的心理治疗系统
US11436863B2 (en) Method and apparatus for outputting data
CN111241340B (zh) 视频标签确定方法、装置、终端及存储介质
Laraba et al. Dance performance evaluation using hidden Markov models
RU2720359C1 (ru) Способ и оборудование распознавания эмоций в речи
CN111414506B (zh) 基于人工智能情绪处理方法、装置、电子设备及存储介质
CN113870395A (zh) 动画视频生成方法、装置、设备及存储介质
CN112365956A (zh) 基于虚拟现实的心理治疗方法、装置、服务器及存储介质
CN114895817A (zh) 交互信息处理方法、网络模型的训练方法及装置
CN111091044A (zh) 一种面向网约车的车内危险场景识别方法
CN111653274B (zh) 唤醒词识别的方法、装置及存储介质
CN112188306A (zh) 一种标签生成方法、装置、设备及存储介质
CN111541951A (zh) 基于视频的交互处理方法、装置、终端及可读存储介质
CN112259078A (zh) 一种音频识别模型的训练和非正常音频识别的方法和装置
CN116543798A (zh) 基于多分类器的情感识别方法和装置、电子设备、介质
JP7479507B2 (ja) 画像処理方法及び装置、コンピューター機器、並びにコンピュータープログラム
CN111259698A (zh) 用于获取图像的方法及装置
CN111291539B (zh) 文件编辑控制方法、装置、计算机装置及存储介质
CN113435357A (zh) 语音播报方法、装置、设备及存储介质
CN113269125A (zh) 一种人脸识别方法、装置、设备及存储介质
CN113515994A (zh) 视频特征提取方法、装置、设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination