CN112116981B - 基于人工智能的康复训练方法、装置、系统及存储介质 - Google Patents
基于人工智能的康复训练方法、装置、系统及存储介质 Download PDFInfo
- Publication number
- CN112116981B CN112116981B CN202010909663.0A CN202010909663A CN112116981B CN 112116981 B CN112116981 B CN 112116981B CN 202010909663 A CN202010909663 A CN 202010909663A CN 112116981 B CN112116981 B CN 112116981B
- Authority
- CN
- China
- Prior art keywords
- action
- rehabilitation training
- rehabilitation
- training
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013473 artificial intelligence Methods 0.000 title claims abstract description 107
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 4
- 238000012163 sequencing technique Methods 0.000 claims description 4
- 230000004931 aggregating effect Effects 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract description 7
- 230000003190 augmentative effect Effects 0.000 abstract description 2
- 230000000875 corresponding effect Effects 0.000 description 124
- 238000010586 diagram Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 210000001624 hip Anatomy 0.000 description 3
- 230000002776 aggregation Effects 0.000 description 2
- 238000004220 aggregation Methods 0.000 description 2
- 230000009191 jumping Effects 0.000 description 2
- 210000002414 leg Anatomy 0.000 description 2
- 238000005728 strengthening Methods 0.000 description 2
- 210000000689 upper leg Anatomy 0.000 description 2
- 230000003313 weakening effect Effects 0.000 description 2
- GNFTZDOKVXKIBK-UHFFFAOYSA-N 3-(2-methoxyethoxy)benzohydrazide Chemical compound COCCOC1=CC=CC(C(=O)NN)=C1 GNFTZDOKVXKIBK-UHFFFAOYSA-N 0.000 description 1
- FGUUSXIOTUKUDN-IBGZPJMESA-N C1(=CC=CC=C1)N1C2=C(NC([C@H](C1)NC=1OC(=NN=1)C1=CC=CC=C1)=O)C=CC=C2 Chemical compound C1(=CC=CC=C1)N1C2=C(NC([C@H](C1)NC=1OC(=NN=1)C1=CC=CC=C1)=O)C=CC=C2 FGUUSXIOTUKUDN-IBGZPJMESA-N 0.000 description 1
- YTAHJIFKAKIKAV-XNMGPUDCSA-N [(1R)-3-morpholin-4-yl-1-phenylpropyl] N-[(3S)-2-oxo-5-phenyl-1,3-dihydro-1,4-benzodiazepin-3-yl]carbamate Chemical compound O=C1[C@H](N=C(C2=C(N1)C=CC=C2)C1=CC=CC=C1)NC(O[C@H](CCN1CCOCC1)C1=CC=CC=C1)=O YTAHJIFKAKIKAV-XNMGPUDCSA-N 0.000 description 1
- 210000001217 buttock Anatomy 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/30—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Primary Health Care (AREA)
- Software Systems (AREA)
- Medical Informatics (AREA)
- Epidemiology (AREA)
- Physical Education & Sports Medicine (AREA)
- Public Health (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Biophysics (AREA)
- Acoustics & Sound (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Rehabilitation Tools (AREA)
Abstract
本发明公开了一种基于人工智能的康复训练方法、装置、系统及存储介质,该方法的步骤包括:侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方,并提示用户佩戴AR设备;基于康复训练处方确定对应的康复训练动作,将康复训练动作转化为对应的3D训练视频,并将3D训练视频发送至AR设备,以供所述AR设备播放所述3D训练视频;获取用户的康复跟随动作,并检测康复跟随动作是否与康复训练动作匹配;若检测到康复跟随动作与康复训练动作不匹配,则播报对应的调整语音。本发明通过人工智能增强现实对应的训练动作,从而提升了康复训练的效果。
Description
技术领域
本发明涉及人工智能和医疗机械技术领域,尤其涉及一种基于人工智能的康复训练方法、装置、系统及存储介质。
背景技术
目前康复训练方法主要是通过人工调节康复训练方法,患者若想在家中进行康复训练,则需要按照医生给的处方进行康复训练,而且医生所开处方中的康复训练动作和康复建议往往只是书面的,并不能真实化呈现,从而难以使得患者的康复训练动作标准化,达不到康复效果。由此可知,目前康复训练方法的康复训练效果差。
发明内容
本发明的主要目的在于提供一种基于人工智能的康复训练方法、装置、系统及存储介质,旨在解决目前康复训练方法的康复训练效果差的技术问题。
为实现上述目的,本发明提供一种基于人工智能的康复训练方法,所述基于人工智能的康复训练方法包括以下步骤:
侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方,并提示用户佩戴AR设备;
基于所述康复训练处方确定对应的康复训练动作,将所述康复训练动作转化为对应的3D训练视频,并将所述3D训练视频发送至所述AR设备,以供所述AR设备播放所述3D训练视频;
获取所述用户的康复跟随动作,并检测所述康复跟随动作是否与所述康复训练动作匹配;
若检测到所述康复跟随动作与所述康复训练动作不匹配,则播报对应的调整语音。
可选地,所述基于所述康复训练处方确定对应的康复训练动作,将所述康复训练动作转化为对应的3D训练视频的步骤包括:
识别所述康复训练处方中的文字信息、图片信息或者语音信息,根据所述文字信息、所述图片信息和所述语音信息中至少一项确定所述康复训练处方中对应的各个康复训练动作;
将各个所述康复训练动作进行集合,并将所述集合后的康复训练动作转化为对应的3D训练视频。
可选地,所述根据所述文字信息、所述图片信息和所述语音信息中至少一项确定所述康复训练处方中对应的各个康复训练动作的步骤包括:
获取所述文字信息中的各个目标文字信息,并基于各个所述目标文字信息确定对应的各个所述康复训练动作,其中,所述目标文字信息中包含有对应的训练动作词语;或者
获取所述图片信息中的各个目标图片信息,并基于各个所述目标图片信息确定对应的各个所述康复训练动作,其中,所述目标图片信息中包含有对应的训练动作;或者
获取所述语音信息中的各个目标语音信息,并基于各个所述目标语音信息确定对应的各个所述康复训练动作,其中,所述目标语音信息中包含有对应的训练动作关键词。
可选地,所述将所述康复训练动作进行集合,并将所述集合后的康复训练动作转化为对应的3D训练视频的步骤包括:
根据各个所述康复训练动作中的动作属性,将各个所述康复训练动作进行分类,得到各个所述康复训练动作对应的各个动作集合;
根据各个所述动作集合中的动作优先级,将各个所述动作集合进行排序,并将各个所述排序后的各个动作集合转化为对应的3D训练视频。
可选地,所述侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方的步骤包括:
侦测到用户发送人工智能辅助的启动指令后,播报对应的提示信息,并基于所述提示信息接收所述用户对应的身份信息;
基于所述身份信息获取所述用户与医生对应的历史聊天信息,并基于所述历史聊天信息确定所述用户对应的康复训练处方。
可选地,所述获取所述用户的康复跟随动作,并检测所述康复跟随动作是否与所述康复训练动作匹配的步骤包括:
获取所述康复跟随动作,并识别所述康复跟随动作中的动作姿势、动作幅度和动作速度;
检测所述动作姿势、所述动作幅度和所述动作速度与所述康复训练动作中的动作姿势、动作幅度和动作速度对应的标准程度差是否小于或者等于预设偏差。
可选地,所述检测所述用户的康复跟随动作是否与所述康复训练动作匹配的步骤之后,还包括:
若检测到所述康复跟随动作与所述康复训练动作匹配,则获取所述用户的身体状况;
根据所述身体状况确定所述用户的心率状况和体力状况,根据所述心率状况和所述体力状况调整所述康复训练动作。
此外,为实现上述目的,本发明还提供一种基于人工智能的康复训练装置,所述基于人工智能的康复训练装置包括:
获取模块,用于侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方;
提示模块,用于提示用户佩戴AR设备;
确定模块,用于基于所述康复训练处方确定对应的康复训练动作;
转化模块,用于将所述康复训练动作转化为对应的3D训练视频;
发送模块,用于将所述3D训练视频发送至所述AR设备,以供所述AR设备播放所述3D训练视频;
所述获取模块还用于获取所述用户的康复跟随动作;
检测模块,用于检测所述用户的康复跟随动作是否与所述康复训练动作匹配;
播报模块,用于若检测到所述康复跟随动作与所述康复训练动作不匹配,则播报对应的调整语音。
此外,为实现上述目的,本发明还提供一种基于人工智能的康复训练系统,所述基于人工智能的康复训练系统包括存储器、处理器和存储在所述存储器上并在所述处理器上运行的基于人工智能的康复训练程序,所述基于人工智能的康复训练程序被所述处理器完成时实现如上所述的基于人工智能的康复训练方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有基于人工智能的康复训练程序,所述基于人工智能的康复训练程序被处理器完成时实现如上所述的基于人工智能的康复训练方法的步骤。
本发明实现通过侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方,并提示用户佩戴AR设备;基于所述康复训练处方确定对应的康复训练动作,将所述康复训练动作转化为对应的3D训练视频,并将所述3D训练视频发送至所述AR设备,以供所述AR设备播放所述3D训练视频;获取所述用户的康复跟随动作,并检测所述康复跟随动作是否与所述康复训练动作匹配;若检测到所述康复跟随动作与所述康复训练动作不匹配,则播报对应的调整语音。由此可知,本发明用户在进行康复训练的过程中,获取用户对应的康复训练处方,然后根据康复训练处方确定对应的康复训练动作,将康复训练动作转化为3D训练视频,以供用户根据3D训练视频进行康复训练,然后检测康复跟随动作是否与康复训练动作匹配,若康复跟随动作与康复训练动作不匹配,播报对应的调整语音,以供用户根据调整语音调整康复跟随动作,使得用户能够按照康复训练动作中的动作标准进行康复训练,不断纠正错误的康复跟随动作,加强了用户的训练体验,以及提升了用户康复训练的效果。
附图说明
图1是本发明基于人工智能的康复训练方法第一实施例的流程示意图;
图2是本发明基于人工智能的康复训练装置较佳的结构示意图;
图3是本发明实施例方案涉及的硬件运行环境的结构示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
本发明提供一种基于人工智能的康复训练方法,参照图1,图1为本发明基于人工智能的康复训练方法第一实施例的流程示意图。
本发明实施例提供了基于人工智能的康复训练方法的实施例,需要说明的是,虽然在流程图中示出了逻辑顺序,但是在某些数据下,可以以不同于此处的顺序完成所示出或描述的步骤。
基于人工智能的康复训练方法包括:
步骤S10,侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方,并提示用户佩戴AR设备。
用户可在人工智能系统的指令输入框中输入对应的启动指令,或者通过用户终端向人工智能系统发送对应的启动指令,人工智能系统侦测到用户发送人工智能辅助的启动指令后,通过智能无线网络获取用户和医生的历史对话记录,然后通过分析历史对话记录,确定医生给用户对应的康复训练处方,人工智能系统得到用户对应的康复训练处方后,向用户播报对应的提示信息,通过提示信息提示用户佩戴上AR(Augmented Reality,增强现实)设备。
进一步地,用户可将医生开的康复训练处方转化为对应的播报语音,人工智能系统接收用户对应的播报语音,然后通过分析该播报语音,确定用户对应的康复训练处方。
其中,AR设备包括但不限制于AR眼镜和AR头盔。
进一步地,所述步骤S10包括:
步骤a,侦测到用户发送人工智能辅助的启动指令后,播报对应的提示信息,并基于所述提示信息接收所述用户对应的身份信息;
步骤b,基于所述身份信息获取所述用户与医生对应的历史聊天信息,并基于所述历史聊天信息确定所述用户对应的康复训练处方。
具体地,人工智能系统侦测到用户发送人工智能辅助的启动指令后,通过语音方式向用户播报对应的提示信息,通过提示信息提示用户需要将用户自身的身份信息转化为对应的语音信息,用户接收到提示信息后,将自身的身份信息语音播报给人工智能系统。人工智能系统接收到用户的身份信息后,通过用户身份信息确定对应的账号信息,然后登录该账号并获取账号中与医生的历史聊天信息,然后分析历史聊天信息,确定用户对应的康复训练处方。
进一步地,人工智能系统侦测到用户发送人工智能辅助的启动指令后,通过语音方式向用户播报对应的提示信息,通过提示信息提示用户在人工智能系统的指令输入框中输入对应的身份信息,用户接收到提示信息后,在人工智能系统的输入框中输入对应的身份信息。
步骤S20,基于所述康复训练处方确定对应的康复训练动作,将所述康复训练动作转化为对应的3D训练视频,并将所述3D训练视频发送至所述AR设备,以供所述AR设备播放所述3D训练视频。
人工智能系统获取康复训练处方中的文字信息、图片信息或者语音信息,然后提取文字信息中对应的动作词语,抽取图片信息中对应的动作图片,识别语音信息中对应的动作语句,根据动作词语、动作图片或者动作语句得到用户对应的康复训练动作,然后将康复训练动作进行组合,以及将组合后的康复训练动作进行排序,并将排序后的各个康复训练动作组合转化为对应的3D(Three Dimensional,三维)训练视频,最后将各个3D训练视频发送到AR设备中,AR设备播放康复训练动作对应的3D训练视频,用户根据AR设备中的各个3D训练视频进行康复训练。
进一步地,所述步骤S20包括:
步骤c,识别所述康复训练处方中的文字信息、图片信息或者语音信息,根据所述文字信息、所述图片信息和所述语音信息中至少一项确定所述康复训练处方中对应的各个康复训练动作;
步骤d,将各个所述康复训练动作进行集合,并将所述集合后的康复训练动作转化为对应的3D训练视频。
具体地,人工智能系统识别康复训练处方中的文字信息、图片信息或者语音信息,然后提取文字信息中对应的动作词语,抽取图片信息中对应的动作图片,识别语音信息中对应的动作语句,根据动作词语、动作图片或者动作语句得到用户对应的康复训练动作,然后将各个康复训练动作中属性相同或者相似的训练动作进行集合,得到各个类型的康复训练动作,并将集合后各个类型的康复训练动作转化为对应的各个3D训练视频,最后将各个3D训练视频发送到AR设备中,根据各个3D训练视频中训练动作的优先顺序进行播放,用户根据AR设备中的各个3D训练视频进行康复训练。
进一步地,所述步骤c包括:
步骤e,获取所述文字信息中的各个目标文字信息,并基于各个所述目标文字信息确定对应的各个所述康复训练动作,其中,所述目标文字信息中包含有对应的训练动作词语;
具体地,人工智能系统获取文字信息中包含有对应的训练动作词语的各个目标文字信息,然后通过分析各个目标文字信息,确定各个康复训练动作。
步骤f,获取所述图片信息中的各个目标图片信息,并基于各个所述目标图片信息确定对应的各个所述康复训练动作,其中,所述目标图片信息中包含有对应的训练动作;
具体地,人工智能系统获取图片信息中包含有对应的训练动作的各个目标图片信息,然后通过分析各个目标图片信息,确定各个康复训练动作。
步骤g,获取所述语音信息中的各个目标语音信息,并基于各个所述目标语音信息确定对应的各个所述康复训练动作,其中,所述目标语音信息中包含有对应的训练动作关键词。
具体地,人工智能系统获取语音信息中包含有对应的训练动作关键词的各个目标语音信息,然后通过分析各个目标语音信息,确定各个康复训练动作。
进一步地,所述步骤d包括:
步骤h,根据各个所述康复训练动作中的动作属性,将各个所述康复训练动作进行分类,得到各个所述康复训练动作对应的各个动作集合;
步骤i,根据各个所述动作集合中的动作优先级,将各个所述动作集合进行排序,并将各个所述排序后的各个动作集合转化为对应的3D训练视频。
具体地,人工智能系统确定各个康复训练动作中的训练动作为跳跃、拉伸、旋转或者下蹲等动作属性,然后根据跳跃、拉伸、旋转或者下蹲等动作属性将康复训练动作进行动作分类,将同一属性或者相似属性的康复训练动作集合在一起,得到康复训练动作各个动作集合,然后确定各个动作集合中的康复部位,根据动作集合中康复部位的动作优先级将动作集合进行排序,最后将排序后的各个动作集合转化为对应的3D训练视频。
其中,康复部位包括但不限制于头部、腰部、臀部和腿部。动作优先级即康复部位对应的康复训练工作的优先顺序,比如,腰部动作优先级>头部动作优先级>臀部动作优先级>腿部动作优先级,本实施例不作限制。
步骤S30,获取所述用户的康复跟随动作,并检测所述康复跟随动作是否与所述康复训练动作匹配。
人工智能系统实时获取用户根据3D训练视频训练的康复跟随动作,并实时获取3D训练视中的康复训练动作,然后检测康复跟随动作中各个动作的第一标准程度与康复训练动作中各个动作的第二标准程度对应的标准程度差是否小于或者等于预设标准差,若检测到第一标准程度与第二标准程度对应的标准程度差小于或者等于预设标准差,人工智能系统则确定康复跟随动作与康复训练动作匹配,若检测到第一标准程度与第二标准程度对应的标准程度差大于预设标准差,人工智能系统则确定康复跟随动作与康复训练动作不匹配。其中,预设标准差根据实际情况设定,本实施例不作限制。
进一步地,所述步骤S30包括:
步骤j,获取所述康复跟随动作,并识别所述康复跟随动作中的动作姿势、动作幅度和动作速度;
步骤k,检测所述动作姿势、所述动作幅度和所述动作速度与所述康复训练动作中的动作姿势、动作幅度和动作速度对应的标准程度差是否小于或者等于预设偏差。
具体地,人工智能系统实时获取用户根据3D训练视频训练的康复跟随动作,并识别康复跟随动作中的第一动作姿势、第一动作幅度和第一动作速度,然后实时获取3D训练视中的康复训练动作,并识别康复训练动作中的第二动作姿势、第二动作幅度和第二动作速度。然后人工智能系统检测第一动作姿势对应的第一姿势动作与第二动作姿势对应的第二姿势动作的第一标准程度差是否小于或者等于第一预设偏差,检测第一动作幅度对应的第一摆动动作与第二动作幅度对应的第二摆动动作的第二标准程度差是否小于或者等于第二预设偏差,并检测第一动作速度对应的第一速度动作与第二动作速度对应的第二速度动作的第三标准程度差是否小于或者等于第三预设偏差。人工智能系统若检测到第一标准程度差小于或者等于第一预设偏差,同时,检测到第二标准程度差小于或者等于第二预设偏差,以及检测到第三标准程度差小于或者等于第三预设偏差,则确定康复跟随动作与康复训练动作匹配。人工智能系统若检测到第一标准程度差大于第一预设偏差,或者,第二标准程度差大于第二预设偏差,或者,第三标准程度差大于第三预设偏差,则确定康复跟随动作与康复训练动作不匹配。
其中,第一预设偏差、第二预设偏差和第三预设偏差都是根据实际情况设定,本实施例不作限制。
在本实施例中,比如,第一预设偏差为5度,第一动作姿势对应的第一姿势动作为向右旋转30度,第二动作姿势对应的第二姿势动作为向右旋转35度,人工智能系统确定第一姿势动作和第二姿势动作对应的第一标准程度差为5度等于第一预设偏差为5度,则确定康复跟随动作与康复训练动作匹配。第二预设偏差2厘米,第一动作幅度对应的第一摆动动作为大腿提起10厘米,第二动作幅度对应的第二摆动动作为大腿提起7厘米,人工智能系统确定第一摆动动作和第二摆动动作的第二标准程度差为3厘米大于第二预设偏差2厘米,则确定康复跟随动作与康复训练动作不匹配。
步骤S40,若检测到所述康复跟随动作与所述康复训练动作不匹配,则播报对应的调整语音。
人工智能系统若检测到康复跟随动作与康复训练动作不匹配,则根据康复跟随动作与康复训练动作的偏差程度播报对应的调整语音,用户接收到人工智能系统播报的调整语音后,根据调整语音调整康复跟随动作中的动作姿势、动作幅度或者动作速度,以使得调整后的康复跟随动作与康复训练动作匹配。
本实施例实现通过侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方,并提示用户佩戴AR设备;基于所述康复训练处方确定对应的康复训练动作,将所述康复训练动作转化为对应的3D训练视频,并将所述3D训练视频发送至所述AR设备,以供所述AR设备播放所述3D训练视频;获取所述用户的康复跟随动作,并检测所述康复跟随动作是否与所述康复训练动作匹配;若检测到所述康复跟随动作与所述康复训练动作不匹配,则播报对应的调整语音。由此可知,本实施例用户在进行康复训练的过程中,获取用户对应的康复训练处方,然后根据康复训练处方确定对应的康复训练动作,将康复训练动作转化为3D训练视频,以供用户根据3D训练视频进行康复训练,然后检测康复跟随动作是否与康复训练动作匹配,若康复跟随动作与康复训练动作不匹配,播报对应的调整语音,以供用户根据调整语音调整康复跟随动作,使得用户能够按照康复训练动作中的动作标准进行康复训练,不断纠正错误的康复跟随动作,加强了用户的训练体验,以及提升了用户康复训练的效果。
进一步地,提出本发明基于人工智能的康复训练方法第二实施例。
所述基于人工智能的康复训练方法第二实施例与所述基于人工智能的康复训练方法第一施例的区别在于,所述基于人工智能的康复训练方法还包括:
步骤l,若检测到所述康复跟随动作与所述康复训练动作匹配,则获取所述用户的身体状况;
步骤m,根据所述身体状况确定所述用户的心率状况和体力状况,根据所述心率状况和所述体力状况调整所述康复训练动作。
具体地,人工智能系统若检测到康复跟随动作与康复训练动作匹配,则确定用户一直按照康复训练动作中的动作标准在训练,然后获取用户对应的身体状况,并分析用户的身体状况,确定用户的心率状况和体力状况,若检测到用户的心率值接近预设心率阈值,人工智能系统则减弱康复训练动作中的动作标准程度,若检测到用户的心率值低于预设心率标准值,人工智能系统则增强康复训练动作中的动作标准程度,若检测到用户的心率值处于预设心率标准值和预设心率阈值之间,人工智能系统则保持当前的动作标准程度。或者,人工智能系统若检测到用户的体力值接近预设体力消耗阈值,则减弱康复训练动作中的动作标准程度,人工智能系统若检测到用户的体力值低于预设体力消耗值,则增强康复训练动作中的动作标准程度,人工智能系统若检测到用户的体力值处于预设体力消耗值和预设体力消耗阈值,则保持当前的动作标准程度。
本实施例通过若检测到所述康复跟随动作与所述康复训练动作匹配,则获取所述用户的身体状况;根据所述身体状况确定所述用户的心率状况和体力状况,根据所述心率状况和所述体力状况调整所述康复训练动作。由此可知,本实施例根据用户的心率状况和体力状况对康复训练动作进行增强或者减弱,从而使得用户能够在各个时间段都能保持康复训练动作中的动作标准,加强了用户体验,以及提升了用户的训练效果。
此外,本发明还提供一种基于人工智能的康复训练装置,参照图2,所述基于人工智能的康复训练装置包括:
获取模块10,用于侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方;
提示模块20,用于提示用户佩戴AR设备;
确定模块30,用于基于所述康复训练处方确定对应的康复训练动作;
转化模块40,用于将所述康复训练动作转化为对应的3D训练视频;
发送模块50,用于将所述3D训练视频发送至所述AR设备,以供所述AR设备播放所述3D训练视频;
所述获取模块10还用于获取所述用户的康复跟随动作;
检测模块60,用于检测所述用户的康复跟随动作是否与所述康复训练动作匹配;
播报模块70,用于若检测到所述康复跟随动作与所述康复训练动作不匹配,则播报对应的调整语音。
进一步地,所述确定模块30还包括:
识别单元,用于识别所述康复训练处方中的文字信息、图片信息或者语音信息。
进一步地,所述确定模块30还用于根据所述文字信息、所述图片信息和所述语音信息中至少一项确定所述康复训练处方中对应的各个康复训练动作。
进一步地,所述转化模块40还包括:
集合单元,用于将各个所述康复训练动作进行集合。
进一步地,所述转化模块40还用于将所述集合后的康复训练动作转化为对应的3D训练视频。
进一步地,所述获取模块10还用于获取所述文字信息中的各个目标文字信息;
所述确定模块30还用于基于各个所述目标文字信息确定对应的各个所述康复训练动作,其中,所述目标文字信息中包含有对应的训练动作词语;
所述获取模块10还用于获取所述图片信息中的各个目标图片信息;
所述确定模块30还用于基于各个所述目标图片信息确定对应的各个所述康复训练动作,其中,所述目标图片信息中包含有对应的训练动作;
所述获取模块10还用于获取所述语音信息中的各个目标语音信息;
所述确定模块30还用于基于各个所述目标语音信息确定对应的各个所述康复训练动作,其中,所述目标语音信息中包含有对应的训练动作关键词。
进一步地,所述集合单元还包括:
分类子单元,用于根据各个所述康复训练动作中的动作属性,将各个所述康复训练动作进行分类,得到各个所述康复训练动作对应的各个动作集合;
排序子单元,用于根据各个所述动作集合中的动作优先级,将各个所述动作集合进行排序。
进一步地,所述转化模块40还用于将各个所述排序后的各个动作集合转化为对应的3D训练视频。
进一步地,所述播报模块70还用于侦测到用户发送人工智能辅助的启动指令后,播报对应的提示信息。
进一步地,所述确定模块30还包括:
接收单元,用于基于所述提示信息接收所述用户对应的身份信息;
所述获取模块10还用于基于所述身份信息获取所述用户与医生对应的历史聊天信息;
所述确定模块30还用于基于所述历史聊天信息确定所述用户对应的康复训练处方;
所述获取模块10还用于获取所述康复跟随动作;
所述识别单元还用于识别所述康复跟随动作中的动作姿势、动作幅度和动作速度;
所述检测模块60还用于检测所述动作姿势、所述动作幅度和所述动作速度与所述康复训练动作中的动作姿势、动作幅度和动作速度对应的标准程度差是否小于或者等于预设偏差;
所述获取模块10还用于若检测到所述康复跟随动作与所述康复训练动作匹配,则获取所述用户的身体状况。
进一步地,所述基于人工智能的康复训练装置还包括:
调整模块,用于根据所述身体状况确定所述用户的心率状况和体力状况,根据所述心率状况和所述体力状况调整所述康复训练动作。
本发明基于基于人工智能的康复训练装置具体实施方式与上述基于基于人工智能的康复训练方法各实施例基本相同,在此不再赘述。
此外,本发明还提供一种基于人工智能的康复训练系统。如图3所示,图3是本发明实施例方案涉及的硬件运行环境的结构示意图。
需要说明的是,图3即可为基于人工智能的康复训练系统的硬件运行环境的结构示意图。
如图3所示,该基于人工智能的康复训练系统可以包括:处理器1001,例如CPU(Central Processing Unit,中央处理器),存储器1005,用户接口1003,网络接口1004,通信总线1002。通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(board),可选用户接口1003还可以包括标准的有线接口(如USB(Universal Serial Bus,通用串行总线)接口)、无线接口(如蓝牙接口)。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI((Wireless-Fidelity))接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,基于人工智能的康复训练系统还可以包括RF(Radio Frequency,射频)电路,传感器、WiFi模块等等。
本领域技术人员可以理解,图3中示出的基于人工智能的康复训练系统结构并不构成对基于人工智能的康复训练系统的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图3所示,作为一种计算机存储介质的存储器1005中可以包括操作设备、网络通信模块、用户接口模块以及基于人工智能的康复训练程序。其中,操作设备是管理和控制基于人工智能的康复训练系统硬件和软件资源的程序,支持基于人工智能的康复训练程序以及其它软件或程序的运行。
在图所示的基于人工智能的康复训练系统中,用户接口1003主要用户终端,以用户通过用户终端向人工智能系统发送对应的启动指令;网络接口1004主要用于人工智能系统,以接收用户终端发送的启动指令、通过智能无线网络获取用户的历史记录信息、以及与用户进行交流;处理器1001可以用于调用存储器1005中存储的基于人工智能的康复训练程序,并完成如上所述的基于人工智能的康复训练系统的控制方法的步骤。
本发明基于人工智能的康复训练系统具体实施方式与上述基于人工智能的康复训练方法各实施例基本相同,在此不再赘述。
此外,本发明实施例还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有基于人工智能的康复训练程序,所述基于人工智能的康复训练程序被处理器完成时实现如上所述的基于人工智能的康复训练方法的步骤。
本发明计算机可读存储介质具体实施方式与上述基于人工智能的康复训练方法各实施例基本相同,在此不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的数据下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多数据下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件货物的形式体现出来,该计算机软件货物存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台基于人工智能的康复训练系统完成本发明各个实施例所述的方法。
Claims (8)
1.一种基于人工智能的康复训练方法,其特征在于,所述基于人工智能的康复训练方法包括以下步骤:
侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方,并提示用户佩戴AR设备;
所述侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方的步骤包括:
侦测到用户发送人工智能辅助的启动指令后,播报对应的提示信息,并基于所述提示信息接收所述用户对应的身份信息;
基于所述身份信息获取所述用户与医生对应的历史聊天信息,并基于所述历史聊天信息确定所述用户对应的康复训练处方;
基于所述康复训练处方确定对应的康复训练动作,将所述康复训练动作转化为对应的3D训练视频,并将所述3D训练视频发送至所述AR设备,以供所述AR设备播放所述3D训练视频;
所述基于所述康复训练处方确定对应的康复训练动作,将所述康复训练动作转化为对应的3D训练视频的步骤包括:
识别所述康复训练处方中的文字信息、图片信息或者语音信息,根据所述文字信息、所述图片信息和所述语音信息中至少一项确定所述康复训练处方中对应的各个康复训练动作;
将各个所述康复训练动作进行集合,并将所述集合后的康复训练动作转化为对应的3D训练视频;
获取所述用户的康复跟随动作,并检测所述康复跟随动作是否与所述康复训练动作匹配;
若检测到所述康复跟随动作与所述康复训练动作不匹配,则播报对应的调整语音。
2.如权利要求1所述的基于人工智能的康复训练方法,其特征在于,所述根据所述文字信息、所述图片信息和所述语音信息中至少一项确定所述康复训练处方中对应的各个康复训练动作的步骤包括:
获取所述文字信息中的各个目标文字信息,并基于各个所述目标文字信息确定对应的各个所述康复训练动作,其中,所述目标文字信息中包含有对应的训练动作词语;或者
获取所述图片信息中的各个目标图片信息,并基于各个所述目标图片信息确定对应的各个所述康复训练动作,其中,所述目标图片信息中包含有对应的训练动作;或者
获取所述语音信息中的各个目标语音信息,并基于各个所述目标语音信息确定对应的各个所述康复训练动作,其中,所述目标语音信息中包含有对应的训练动作关键词。
3.如权利要求1所述的基于人工智能的康复训练方法,其特征在于,所述将所述康复训练动作进行集合,并将所述集合后的康复训练动作转化为对应的3D训练视频的步骤包括:
根据各个所述康复训练动作中的动作属性,将各个所述康复训练动作进行分类,得到各个所述康复训练动作对应的各个动作集合;
根据各个所述动作集合中的动作优先级,将各个所述动作集合进行排序,并将各个所述排序后的各个动作集合转化为对应的3D训练视频。
4.如权利要求1所述的基于人工智能的康复训练方法,其特征在于,所述获取所述用户的康复跟随动作,并检测所述康复跟随动作是否与所述康复训练动作匹配的步骤包括:
获取所述康复跟随动作,并识别所述康复跟随动作中的动作姿势、动作幅度和动作速度;
检测所述动作姿势、所述动作幅度和所述动作速度与所述康复训练动作中的动作姿势、动作幅度和动作速度对应的标准程度差是否小于或者等于预设偏差。
5.如权利要求1至4任一项所述的基于人工智能的康复训练方法,其特征在于,所述检测所述用户的康复跟随动作是否与所述康复训练动作匹配的步骤之后,还包括:
若检测到所述康复跟随动作与所述康复训练动作匹配,则获取所述用户的身体状况;
根据所述身体状况确定所述用户的心率状况和体力状况,根据所述心率状况和所述体力状况调整所述康复训练动作。
6.一种基于人工智能的康复训练装置,其特征在于,所述基于人工智能的康复训练装置包括:
获取模块,用于侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方;
所述侦测到用户发送人工智能辅助的启动指令后,获取用户对应的康复训练处方的步骤包括:
侦测到用户发送人工智能辅助的启动指令后,播报对应的提示信息,并基于所述提示信息接收所述用户对应的身份信息;
基于所述身份信息获取所述用户与医生对应的历史聊天信息,并基于所述历史聊天信息确定所述用户对应的康复训练处方;
提示模块,用于提示用户佩戴AR设备;
确定模块,用于基于所述康复训练处方确定对应的康复训练动作;
所述基于所述康复训练处方确定对应的康复训练动作的步骤包括:
识别所述康复训练处方中的文字信息、图片信息或者语音信息,根据所述文字信息、所述图片信息和所述语音信息中至少一项确定所述康复训练处方中对应的各个康复训练动作;
转化模块,用于将所述康复训练动作转化为对应的3D训练视频;
所述将所述康复训练动作转化为对应的3D训练视频的步骤包括:
将各个所述康复训练动作进行集合,并将所述集合后的康复训练动作转化为对应的3D训练视频;
发送模块,用于将所述3D训练视频发送至所述AR设备,以供所述AR设备播放所述3D训练视频;
所述获取模块还用于获取所述用户的康复跟随动作;
检测模块,用于检测所述用户的康复跟随动作是否与所述康复训练动作匹配;
播报模块,用于若检测到所述康复跟随动作与所述康复训练动作不匹配,则播报对应的调整语音。
7.一种基于人工智能的康复训练系统,其特征在于,所述基于人工智能的康复训练系统包括存储器、处理器和存储在所述存储器上并在所述处理器上运行的基于人工智能的康复训练程序,所述基于人工智能的康复训练程序被所述处理器完成时实现如权利要求1至5中任一项所述的基于人工智能的康复训练方法的步骤。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有基于人工智能的康复训练程序,所述基于人工智能的康复训练程序被处理器完成时实现如权利要求1至5中任一项所述的基于人工智能的康复训练方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010909663.0A CN112116981B (zh) | 2020-09-02 | 2020-09-02 | 基于人工智能的康复训练方法、装置、系统及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010909663.0A CN112116981B (zh) | 2020-09-02 | 2020-09-02 | 基于人工智能的康复训练方法、装置、系统及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112116981A CN112116981A (zh) | 2020-12-22 |
CN112116981B true CN112116981B (zh) | 2023-12-22 |
Family
ID=73805536
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010909663.0A Active CN112116981B (zh) | 2020-09-02 | 2020-09-02 | 基于人工智能的康复训练方法、装置、系统及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112116981B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113674830A (zh) * | 2021-08-25 | 2021-11-19 | 上海一尺视界数码科技有限公司 | 一种康复训练方法、系统、终端及可存储介质 |
CN113989926A (zh) * | 2021-10-26 | 2022-01-28 | 合肥工业大学 | 一种基于人体康复的动作识别系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108242261A (zh) * | 2018-01-10 | 2018-07-03 | 苏州脉吉医疗技术有限公司 | 康复训练方案制定系统和方法 |
CN109242981A (zh) * | 2018-09-28 | 2019-01-18 | 中国科学院苏州生物医学工程技术研究所 | 双屏交互的增强现实康复训练系统 |
CN110739040A (zh) * | 2019-08-29 | 2020-01-31 | 北京邮电大学 | 一种上下肢康复评定训练系统 |
CN110841266A (zh) * | 2019-10-24 | 2020-02-28 | 中国人民解放军军事科学院国防科技创新研究院 | 一种辅助训练系统及方法 |
CN111068263A (zh) * | 2019-11-26 | 2020-04-28 | 中国科学院苏州生物医学工程技术研究所 | 镜像治疗的增强现实手功能康复训练装置 |
CN111210892A (zh) * | 2019-12-30 | 2020-05-29 | 江苏爱朋医疗科技股份有限公司 | 康复训练方法、系统及存储介质 |
WO2020114333A1 (zh) * | 2018-12-05 | 2020-06-11 | 深圳Tcl新技术有限公司 | 基于视频的ar教育方法、智能电视、存储介质及设备 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110808092A (zh) * | 2019-09-17 | 2020-02-18 | 南京茂森电子技术有限公司 | 一种远程运动康复系统 |
CN111292824A (zh) * | 2020-01-20 | 2020-06-16 | 深圳市丞辉威世智能科技有限公司 | 康复方法、康复设备、装置及计算机可读存储介质 |
-
2020
- 2020-09-02 CN CN202010909663.0A patent/CN112116981B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108242261A (zh) * | 2018-01-10 | 2018-07-03 | 苏州脉吉医疗技术有限公司 | 康复训练方案制定系统和方法 |
CN109242981A (zh) * | 2018-09-28 | 2019-01-18 | 中国科学院苏州生物医学工程技术研究所 | 双屏交互的增强现实康复训练系统 |
WO2020114333A1 (zh) * | 2018-12-05 | 2020-06-11 | 深圳Tcl新技术有限公司 | 基于视频的ar教育方法、智能电视、存储介质及设备 |
CN110739040A (zh) * | 2019-08-29 | 2020-01-31 | 北京邮电大学 | 一种上下肢康复评定训练系统 |
CN110841266A (zh) * | 2019-10-24 | 2020-02-28 | 中国人民解放军军事科学院国防科技创新研究院 | 一种辅助训练系统及方法 |
CN111068263A (zh) * | 2019-11-26 | 2020-04-28 | 中国科学院苏州生物医学工程技术研究所 | 镜像治疗的增强现实手功能康复训练装置 |
CN111210892A (zh) * | 2019-12-30 | 2020-05-29 | 江苏爱朋医疗科技股份有限公司 | 康复训练方法、系统及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112116981A (zh) | 2020-12-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11380316B2 (en) | Speech interaction method and apparatus | |
CN108000526B (zh) | 用于智能机器人的对话交互方法及系统 | |
JP6816925B2 (ja) | 育児ロボットのデータ処理方法及び装置 | |
CN112116981B (zh) | 基于人工智能的康复训练方法、装置、系统及存储介质 | |
CN107197384B (zh) | 应用于视频直播平台的虚拟机器人多模态交互方法和系统 | |
CN104360736B (zh) | 基于手势的终端控制方法和系统 | |
CN106294854B (zh) | 一种用于智能机器人的人机交互方法及装置 | |
CN107203953A (zh) | 一种基于互联网、表情识别和语音识别的教学系统及其实现方法 | |
EP3493032A1 (en) | Robot control method and companion robot | |
CN110795528A (zh) | 一种数据查询方法、装置、电子设备及存储介质 | |
CN109036374B (zh) | 数据处理方法和装置 | |
CN110598576A (zh) | 一种手语交互方法、装置及计算机介质 | |
CN109117952B (zh) | 一种基于深度学习的机器人情感认知的方法 | |
CN110333774A (zh) | 一种基于多模态交互的远程用户注意力评估方法及系统 | |
CN106055894A (zh) | 一种基于人工智能的行为分析方法和系统 | |
CN106096717A (zh) | 面向智能机器人的信息处理方法及系统 | |
CN107239538B (zh) | 具有自学习功能的平行客服机器人系统及其自学习方法 | |
CN108924651B (zh) | 基于训练操作识别的教学视频智能播放系统 | |
CN102902704B (zh) | 信息处理设备、短语输出方法 | |
CN110781881A (zh) | 一种视频中的赛事比分识别方法、装置、设备及存储介质 | |
CN110727800A (zh) | 一种自适应儿童学前教育系统和方法 | |
CN107609474A (zh) | 肢体动作识别方法、装置、机器人及存储介质 | |
CN106653020A (zh) | 一种基于深度学习的智慧视听设备多业务控制方法及系统 | |
CN111917999A (zh) | 视频处理方法、移动终端及可读存储介质 | |
US20150181161A1 (en) | Information Processing Method And Information Processing Apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |