CN110598611A - 看护系统、基于看护系统的病人看护方法和可读存储介质 - Google Patents

看护系统、基于看护系统的病人看护方法和可读存储介质 Download PDF

Info

Publication number
CN110598611A
CN110598611A CN201910825972.7A CN201910825972A CN110598611A CN 110598611 A CN110598611 A CN 110598611A CN 201910825972 A CN201910825972 A CN 201910825972A CN 110598611 A CN110598611 A CN 110598611A
Authority
CN
China
Prior art keywords
patient
determining
emotional state
image
nursing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910825972.7A
Other languages
English (en)
Other versions
CN110598611B (zh
Inventor
丁晓端
钟王攀
金大鹏
黄坤
李彤
殷燕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Wisdom Forest Network Technology Co Ltd
Original Assignee
Shenzhen Wisdom Forest Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Wisdom Forest Network Technology Co Ltd filed Critical Shenzhen Wisdom Forest Network Technology Co Ltd
Priority to CN201910825972.7A priority Critical patent/CN110598611B/zh
Publication of CN110598611A publication Critical patent/CN110598611A/zh
Application granted granted Critical
Publication of CN110598611B publication Critical patent/CN110598611B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A61B5/02055Simultaneously evaluating both cardiovascular condition and temperature
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/70Multimodal biometrics, e.g. combining information from different biometric modalities
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Cardiology (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Multimedia (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Hospice & Palliative Care (AREA)
  • Theoretical Computer Science (AREA)
  • Social Psychology (AREA)
  • Psychology (AREA)
  • Pulmonology (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Accommodation For Nursing Or Treatment Tables (AREA)

Abstract

本发明公开了一种基于看护系统的病人看护方法,看护系统包括布置在看护场所不同区域的图像采集模块,所述基于看护系统的病人看护方法包括以下步骤:获取所述图像采集模块采集的病人的图像;根据所述图像确定所述病人当前的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态;判断所述情绪状态判断所述病人是否需要进行安抚;在判定所述病人需要安抚时,确定所述图像采集模块对应的区域,控制所述区域的电器执行所述情绪状态对应的预设操作,以对所述病人的情绪进行安抚。本发明还公开一种看护系统和可读存储介质。本发明能够及时的发现病人的异常情绪并对病人进行安抚。

Description

看护系统、基于看护系统的病人看护方法和可读存储介质
技术领域
本发明涉及看护技术领域,尤其涉及一种看护系统、基于看护系统的病人看护方法和可读存储介质。
背景技术
随着人们生活、工作的压力增大,越来越多的人的精神处于紧张以及压抑状态,若不及时处理以及疏导,会导致人们产生精神疾病。
对于精神疾病的康复,需要有人员看护以对病人的进行及时的安抚。但目前,看护人员不可能对病人进行时时刻刻的看护,且看护人员无法察觉病人的某些不明显的异常情绪,导致病人的异常情绪不能被及时发现并安抚。
发明内容
本发明的主要目的在于提供一种看护系统、基于看护系统的病人看护方法和可读存储介质,旨在解决病人的异常情绪不能被及时发现并安抚的问题。
为实现上述目的,本发明提供一种基于看护系统的病人看护方法,看护系统包括布置在看护场所不同区域的图像采集模块,所述基于看护系统的病人看护方法包括以下步骤:
获取所述图像采集模块采集的病人的图像;
根据所述图像确定所述病人当前的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态;
判断所述情绪状态判断所述病人是否需要进行安抚;
在判定所述病人需要安抚时,确定所述图像采集模块对应的区域,控制所述区域的电器执行所述情绪状态对应的预设操作,以对所述病人的情绪进行安抚。
在一实施例中,所述根据所述图像确定所述病人的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态的步骤包括:
根据所述图像识别所述病人的脸部表情以及肢体动作;
根据所述脸部表情以及所述肢体动作确定所述病人当前的情绪状态及/或根据所述脸部表情以及所述肢体动作确定所述病人在下一时间段的情绪状态。
在一实施例中,所述图像采集模块对应的区域还设有语音采集模块,所述根据所述脸部表情以及所述肢体动作确定所述病人当前的情绪状态及/或根据所述脸部表情以及所述肢体动作确定所述病人在下一时间段的情绪状态的步骤包括:
获取所述语音采集模块采集的病人的语音以及所述语音的语音参数,并将所述语音转换为文本,其中,所述语音参数包括音调、音速以及响度中的至少一个;
根据所述语音参数、所述文本、所述脸部表情以及所述肢体动作确定所述病人当前的情绪状态及/或根据所述语音参数、所述文本、所述脸部表情以及所述肢体动作确定所述病人在下一时间段的情绪状态。
在一实施例中,所述判断所述情绪状态判断所述病人是否需要进行安抚的步骤之后,还包括:
在判定所述病人需要安抚时,确定所述病人上一次安抚对应的安抚时间点;
确定所述安抚时间点与当前时间点之间的间隔时长;
在所述间隔时长大于预设时长,执行所述确定所述图像采集模块对应的区域的步骤。
在一实施例中,所述确定所述安抚时间点与当前时间点之间的间隔时长的步骤之后,还包括:
在所述间隔时长小于或等于预设时长,确定所述病人的身份信息;
根据所述身份信息确定目标终端,并向所述目标终端发送病人情绪不稳定的提示信息。
在一实施例中,所述根据所述图像确定所述病人当前的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态的步骤之后,还包括:
获取所述病人的生理参数,其中,所述生理参数包括病人的体温以及心率;
根据所述生理参数以及图像判断所述病人是否出现身体不适;
在所述病人出现身体不适时,向预设终端输出病人身体不适的提示信息。
在一实施例中,所述控制所述区域的电器执行所述情绪状态对应的预设操作的步骤包括:
根据所述情绪状态在所述区域的各个电器中确定待控制电器以及各个所述待控制电器的目标运行参数;
控制各个所述待控制电器按照对应的目标运行参数运行。
在一实施例中,所述预设操作包括播放音乐、播放视频以及语音聊天中的至少一种。
为实现上述目的,本发明还提供一种看护系统,所述看护系统包括多个图像采集模块、存储器、处理器以及存储在所述存储器并可在所述处理器上运行的病人看护程序,所述病人看护程序被处理器执行时实现如上所述的基于看护系统的病人看护方法的各个步骤。
为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质存储有病人看护程序,所述病人看护程序被处理器执行时实现如上所述的基于看护系统的病人看护方法的各个步骤。
本发明提供的看护系统、基于看护系统的病人看护方法和可读存储介质,看护系统获取图像采集模块采集的病人的图像,并根据图像确定病人当前的情绪状态、或者根据图像确定病人在下一时间段的情绪状态、或者根据图像确定病人在当前以及下一时间段的情绪状态,最后根据情绪状态判断病人是否需要进行安抚,若病人需要安抚,则控制图像采集模块对应的区域的电器执行预设操作以对病人的情绪进行安抚。由于看护系统能够根据病人的图像确定病人的情绪状态,且在情绪状态表征病人需要安抚时,控制电器执行预设操作对病人进行安抚,也即看护系统能够及时的发现病人的异常情绪并对病人进行安抚。
附图说明
图1为本发明实施例涉及的看护系统的硬件构架示意图;
图2为本发明基于看护系统的病人看护方法第一实施例的流程示意图;
图3为图2中步骤S20的细化流程示意图;
图4为本发明基于看护系统的病人看护方法第二实施例的流程示意图;
图5为本发明基于看护系统的病人看护方法第三实施例的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例的主要解决方案是:获取所述图像采集模块采集的病人的图像;根据所述图像确定所述病人当前的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态;判断所述情绪状态判断所述病人是否需要进行安抚;在判定所述病人需要安抚时,确定所述图像采集模块对应的区域,控制所述区域的电器执行所述情绪状态对应的预设操作,以对所述病人的情绪进行安抚。
由于看护系统能够根据病人的图像确定病人的情绪状态,且在情绪状态表征病人需要安抚时,控制电器执行预设操作对病人进行安抚,也即看护系统能够及时的发现病人的异常情绪并对病人进行安抚。
作为一种实现方案,看护系统可以如图1所示。
本发明实施例方案涉及的是看护系统,看护系统包括:处理器101,例如CPU,存储器102,通信总线103以及多个图像采集模块104。其中,通信总线103用于实现这些组件之间的连接通信,看护系统应用于病人的看护场所。看护场所分为多个区域,每个区域内具有对应的看护病人,且每个区域设置对应图像采集模块104,图像采集模块104可为摄像头,。
存储器102可以是高速RAM存储器,也可以是稳定的存储器(non-volatilememory),例如磁盘存储器。如图1所示,作为一种计算机存储介质的存储器103中可以包括病人看护程序;而处理器101可以用于调用存储器102中存储的病人看护程序,并执行以下操作:
获取所述图像采集模块采集的病人的图像;
根据所述图像确定所述病人当前的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态;
判断所述情绪状态判断所述病人是否需要进行安抚;
在判定所述病人需要安抚时,确定所述图像采集模块对应的区域,控制所述区域的电器执行所述情绪状态对应的预设操作,以对所述病人的情绪进行安抚。
在一实施例中,处理器101可以用于调用存储器102中存储的病人看护程序,并执行以下操作:
根据所述图像识别所述病人的脸部表情以及肢体动作;
根据所述脸部表情以及所述肢体动作确定所述病人当前的情绪状态及/或根据所述脸部表情以及所述肢体动作确定所述病人在下一时间段的情绪状态。
在一实施例中,处理器101可以用于调用存储器102中存储的病人看护程序,并执行以下操作:
获取所述语音采集模块采集的病人的语音以及所述语音的语音参数,并将所述语音转换为文本,其中,所述语音参数包括音调、音速以及响度中的至少一个;
根据所述语音参数、所述文本、所述脸部表情以及所述肢体动作确定所述病人当前的情绪状态及/或根据所述语音参数、所述文本、所述脸部表情以及所述肢体动作确定所述病人在下一时间段的情绪状态。
在一实施例中,处理器101可以用于调用存储器102中存储的病人看护程序,并执行以下操作:
在判定所述病人需要安抚时,确定所述病人上一次安抚对应的安抚时间点;
确定所述安抚时间点与当前时间点之间的间隔时长;
在所述间隔时长大于预设时长,执行所述确定所述图像采集模块对应的区域的步骤。
在一实施例中,处理器101可以用于调用存储器102中存储的病人看护程序,并执行以下操作:
在所述间隔时长小于或等于预设时长,确定所述病人的身份信息;
根据所述身份信息确定目标终端,并向所述目标终端发送病人情绪不稳定的提示信息。
在一实施例中,处理器101可以用于调用存储器102中存储的病人看护程序,并执行以下操作:
获取所述病人的生理参数,其中,所述生理参数包括病人的体温以及心率;
根据所述生理参数以及图像判断所述病人是否出现身体不适;
在所述病人出现身体不适时,向预设终端输出病人身体不适的提示信息。
在一实施例中,处理器101可以用于调用存储器102中存储的病人看护程序,并执行以下操作:
根据所述情绪状态在所述区域的各个电器中确定待控制电器以及各个所述待控制电器的目标运行参数;
控制各个所述待控制电器按照对应的目标运行参数运行。
在一实施例中,处理器101可以用于调用存储器102中存储的病人看护程序,并执行以下操作:
所述预设操作包括播放音乐、播放视频以及语音聊天中的至少一种。
本实施例根据上述方案,看护系统获取图像采集模块采集的病人的图像,并根据图像确定病人当前的情绪状态、或者根据图像确定病人在下一时间段的情绪状态、或者根据图像确定病人在当前以及下一时间段的情绪状态,最后根据情绪状态判断病人是否需要进行安抚,若病人需要安抚,则控制图像采集模块对应的区域的电器执行预设操作以对病人的情绪进行安抚。由于看护系统能够根据病人的图像确定病人的情绪状态,且在情绪状态表征病人需要安抚时,控制电器执行预设操作对病人进行安抚,也即看护系统能够及时的发现病人的异常情绪并对病人进行安抚。
基于上述看护系统的硬件构架,提出本发明基于看护系统的病人看护方法的实施例。
参照图2,图2为本发明基于看护系统的病人看护方法的第一实施例,所述基于看护系统的病人看护方法包括以下步骤:
步骤S10,获取所述图像采集模块采集的病人的图像;
在本实施例中,执行主体为看护系统。看护系统应用于病人的看护场所,看护场所包括多个区域。每个区域可看护对应的病人,且各个区域中设有对应的图像采集模块,图像采集模块可为摄像头。看护系统在对病人进行看护时,启动图像采集模块,图像采集模块实时采集对应的区域的病人的图像。图像采集模块将采集的图像反馈至看护系统的后台服务器,也即服务器实时获取图像采集模块采集的图像。需要说明的是,在本实施例中,病人指的是患有精神疾病的病人,也即病人在一定程度上并未拥有自主行动能力,故需要对病人进行看护。
步骤S20,根据所述图像确定所述病人当前的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态;
服务器中设有情绪识别模型。情绪识别模型通过对含有异常情绪的病人的图像进行训练得到。具体的,采集异常情绪的病人的图像,且根据不同的异常情绪对图像进行情绪标签的标记,异常情绪包括惊恐、愤怒、过度兴奋等不正常的情绪,将带有情绪标签的图像输入预设的模型中进行训练,在当模型的收敛值不在变化时,停止训练,从而得到情绪识别模型,再将情绪识别模型存储至服务器中。当然,也可对正常情绪以及异常情绪的病人的图像进行训练,得到情绪识别模型。
服务器在获得病人的图像后,对图像中的病人进行情绪状态的识别,从而确定病人当前的情绪状态。此外,服务器还可预测下一个时间段内病人的情绪状态。具体的,请参照图3,也即步骤S20包括:
步骤S21,根据所述图像识别所述病人的脸部表情以及肢体动作;
步骤S22,根据所述脸部表情以及所述肢体动作确定所述病人的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态。
服务器从图像中查找到病人的脸部以及四肢,从而识别病人的脸部表情以及肢体动作,脸部表情以及肢体动作能够表征病人的情绪状态。例如,手握拳头且面目较为狰狞,可以判定病人处于愤怒状态。可以理解的是,服务器先从图像中识别病人的脸部表情,再确定病人的肢体动作,脸部表情为主,肢体动作为辅,也即优先从脸部表情判断病人的情绪状态,再通过肢体动作对由脸部表情确定情绪状态进行再次确认。
此外,可设置脸部表情与肢体动作的组合,每种组合对应一种情绪状态。例如,脸部表情分为5种、肢体动作分为10种,组合即为50种,对应50种情绪状态。
当然,不同的病人的脸部表情所代表的情绪状态不同,因此,可对病人的情绪状态进行观看,从而收集病人不同情绪状态下的图像,以建立病人对应的情绪识别模型。
上述为病人的当前的情绪状态的确定。服务器还具备识别病人下一个时间段的情绪状态的功能,也即服务器具有预测病人情绪状态的功能。具体的,服务器中设有预测模型,预测模型的训练方式与情绪识别模型的训练方式相同,不同之处在于,预测模型学习的图像为预测图像,预测图像中病人的脸部表情与肢体动作为病人爆发某种情绪状态之前的表情以及动作。例如,预测图像中病人的手指抖动、面部微红,这是病人即将进入愤怒的情绪状态的征兆,也即预测图像中的标记的情绪状态为愤怒。可以理解的是,预测模型通过含有预测的情绪标签的图像训练得到。需要说明的是,下一时间段指的是当前时间点和预设间隔时长构成的时间段,预设间隔时长为任何合适的数值,比如半小时。服务器可以预测模型对图像中病人的脸部表情以及肢体动作进行识别,从而预测出病人在下一时间段的情绪状态。
需要说明的是,服务器可以仅通过情绪识别模型识别病人的当前情绪状态,也可以仅通过预测模型识别病人在下一时间段的情绪状态,或者服务器同时采用情绪识别模型以及预测模型确定病人当前的情绪状态以及下一时间段的情绪状态。
步骤S30,判断所述情绪状态判断所述病人是否需要进行安抚;
在服务器确定病人的情绪状态后,服务器即可判断病人是否需要进行安抚。情绪状态既可以为当前的情绪状态,也可为下一时间段的情绪状态。具体的,情绪可分为多种类型,且各个情绪可分为严重、轻微等多个情绪等级,情绪状态即可用类型以及等级进行表征。某些类型的情绪状态需要立即进行安抚,而无需判断情绪的等级,例如,情绪状态为惊恐,此时,病人需要进行安抚。
另一些类型的情绪状态在轻微等级状态下,无需进行安抚,例如,情绪状态为兴奋,若兴奋的等级为轻微,则可判定病人的情绪正常,无需对病人进行安抚;若兴奋的等级为严重,则需要对病人进行安抚。
可以理解的是,服务器可先确定情绪状态的类型,若该情绪状态的类型为预设类型时,则可判定需要对病人进行安抚,可将负面情绪的情绪状态定义为预设类型;若情绪状态的类型不为预设类型(不为预设类型的情绪状态为正面情绪),则判断该情绪状态的等级是否大于预设等级,若是大于预设等级,则需要对病人进行安抚。需要说明的是,情绪状态可分为多个等级,例如1、2、3、4以及5五个等级,其中,1等级与2等级属于轻微的情绪等级,3等级属于中等的情绪等级,而4等级以及5等级则属于严重的情绪等级,可将预设等级设置为3级情绪等级。
步骤S40,在判定所述病人需要安抚时,确定所述图像采集模块对应的区域,控制所述区域的电器执行所述情绪状态对应的预设操作,以对所述病人的情绪进行安抚。
每一个图像采集模块对应一个看护区域,看护区域中设有电器。电器可以是音频播放装置、视频播放装置等,音频播放装置可播放音乐,而视频播放装置则播放视频。在当服务器判定需要对病人进行安抚时,确定采集病人图像的图像采集模块对应的区域,进而确定该区域的电器,从而控制电器执行情绪状态对应的预设操作,进而对病人进行情绪上的安抚。预设操作包括播放音乐、播放视屏、语音聊天中的至少一个,预设操作即为视为服务器对病人的情绪安抚操作。不同的情绪状态对应的预设操作有所不同。例如,病人的情绪状态为悲伤,那么情绪状态对应的预设操作可是为播放欢快的音乐或者视频;若病人的情绪状态为孤单,则通过音频播放装置与病人进行语音聊天;若病人的情绪状态为紧张,则播放舒缓的音乐。可以理解的是,服务器可根据情绪状态确定待控制电器以及待控制电器的目标运行参数,再控制各个待控制电器按照对应的目标运行参数运行,例如,情绪状态为悲伤,则待控制电器为音频播放装置,目标运行参数为播放欢快的歌曲以及播放时长为20min。
当然,服务器可直接向预设终端输出病人情绪较差的提示信息,使得预设终端的用户陪护病人,以对病人进行情绪的安抚。
在本实施例提供的技术方案中,看护系统获取图像采集模块采集的病人的图像,并根据图像确定病人当前的情绪状态、或者根据图像确定病人在下一时间段的情绪状态、或者根据图像确定病人在当前以及下一时间段的情绪状态,最后根据情绪状态判断病人是否需要进行安抚,若病人需要安抚,则控制图像采集模块对应的区域的电器执行预设操作以对病人的情绪进行安抚。由于看护系统能够根据病人的图像确定病人的情绪状态,且在情绪状态表征病人需要安抚时,控制电器执行预设操作对病人进行安抚,也即看护系统能够及时的发现病人的异常情绪并对病人进行安抚。
在一实施例中,图像采集模块所在的区域还还设有语音采集模块,语音采集模块可为麦克风。服务器在获取病人的图像的同时,同时获取语音采集模块采集病人的语音。服务器中含有病人的声纹模板,在获取到病人的语音后,服务器提取该语音的声纹特征,并比对声纹模板与声纹特征以确定该语音是否为病人发出,也即避免服务器根据电器发出的人工语音判断病人的情绪状态。若该语音为病人发出,那么服务器获取语音的语音参数,语音参数包括音调、音速以及响度中的至少一个,同时,服务器还将语音转化为文本。
在得到语音的语音参数以及文本后,即可根据语音参数、文本、脸部表情以及肢体动作确定病人的情绪状态。具体的,语音参数以及文本也是确定病人情绪状态的因素之一,例如,音调较高、语速较快、响度较高、且文本中为无意义的词语,即可表征病人的情绪状态为激动、愤怒等情绪状态,服务器再结合脸部表情以及肢体动作进一步确定病人当前的情绪状态。
此外,服务器可能通过脸部表情以及肢体动作无法准确的判断病人的情绪状态,也即病人的异常情绪和病人的正常情绪的脸部表情以及肢体动作相同。此时,可通过语音进行情绪状态的确定。例如,病人的情绪状态为孤单,病人可能在自言自语,比如,“我想回家了”,服务器通过捕捉语音,识别到该文本,在通过病人的重复次数,确定孤单的等级,在病人重复“我想回家”的次数达到预设次数,或者在预设时间周期的重复次数达到预设次数,即确定病人当前的情绪状态为孤单,也即服务器可以通过语音转化的文本确定病人当前的情绪状态。
此外,服务器可以通过脸部表情、主体动作、语音参数以及文本对病人进行下一时间段的情绪状态的预测,预测的流程可参照上述病人当前的情绪状态的确定流程,在此不再一一赘述。当然,服务器可以通过脸部表情、主体动作、语音参数以及文本同时确定病人当前的情绪状态以及下一时间段的情绪状态。
在本实施例中,看护系统可以通过语音的文本、语音的语音参数、脸部表情以及肢体动作中的一个或多个准确的确定病人当前的情绪状态或者下一时间段段的情绪状态。
参照图4,图4为本发明基于看护系统的病人看护方法的第二实施例,基于第一实施例,所述步骤S30之后,还包括:
步骤S50,在判定所述病人需要安抚时,确定所述病人上一次安抚对应的安抚时间点;
步骤S60,确定所述安抚时间点与当前时间点之间的间隔时长;
步骤S70,在所述间隔时长大于预设时长,执行所述确定所述图像采集模块对应的区域,控制所述区域的电器执行所述情绪状态对应的预设操作,以对所述病人的情绪进行安抚的步骤;
步骤S80,在所述间隔时长小于或等于预设时长,确定所述病人的身份信息;
步骤S90,根据所述身份信息确定目标终端,并向所述目标终端发送病人情绪不稳定的提示信息。
在本实施例中,看护系统的服务器间隔一段时间识别病人的情绪状态,若是需要安抚,则控制看护区域对应的电器对病人的情绪进行安抚。因此,看护区域的病人可能存在多次安抚。若是在一定的时间内,病人安抚的次数较多时,表明电器对病人的安抚效果不高,此时需要工人进行安抚。
对此,在服务器确定病人需要安抚时,确定上一次病人安抚对应的安抚时间点,从而确定安抚时间点与当前时间点之间的间隔时长。间隔时长的长短能够表明病人的上一次安抚的时间与当前需要安抚的间隔有多长,若是间隔时长较长,则表明上次的安抚有效,若间隔时长较短,则表明上次的安抚效果较差。
故在得到间隔时长后,服务器判断间隔时长是否大于预设时长,若间隔时长大于预设时长,电器的安抚有效,则继续采用电器对病人的情绪进行安抚,也即执行步骤S40。若间隔时长小于或等于预设时长,服务器通过图像采集模块对应的设备确定看护的区域,该区域关联有病人的身份信息,身份信息可包括负责病人的看护人员、病人的亲属联系方式、病人的病情以及病人的名字、年龄等,服务器可以身份信息中确定目标终端,目标终端可为看护人员的终端,也可为亲属的终端。服务器再向目标终端发送病人情绪不稳定的提示信息,从而提示目标终端的用户对病人进行情绪上的安抚。
在本实施例提供的技术方案中,看护系统在判定病人需要安抚时,确定病人上一次安抚对应的安抚时间点,从而确定安抚时间点与当前时间点之间的间隔时长,若间隔时长大于预设时长,则表明电器对病人的情绪安抚有效,则继续采用电器对病人进行情绪上的安抚;若间隔时长小于预设时长,则表明电器对病人的情绪安抚效果较差,此时,则向人工进行安抚,使得看护系统根据不同情况采取对应的措施,以有效的安抚病人的情绪。
参照图5,图5为本发明基于看护系统的病人看护方法的第三实施例,基于第一或第二实施例,所述步骤S20之后,还包括:
步骤S100,获取所述病人的生理参数,其中,所述生理参数包括病人的体温以及心率;
步骤S110,根据所述生理参数以及图像判断所述病人是否出现身体不适;
步骤S120,在所述病人出现身体不适时,向预设终端输出病人身体不适的提示信息。
在本实施例中,服务器不仅可以识别病人的情绪状态,还可识别病人身体上的不适。每个区域设有红外测温装置,服务器可通过红外测温装置获得病人的体温。此外,病人可携带手环,手环与服务器通信连接,手环将病人的生理数据发送给服务器,也即服务器可获得病人的生理参数,生理参数包括病人的体温以及心率等。体温和心率能够反映出病人是否发烧,而图像可以识别病人的脸部表情以及肢体动作,例如,呕吐时脸部为痛苦的表情,感觉到冷时身体颤抖。也即服务器可以通过生理参数以及图像判断病人是否出现身体不适。
在当服务器判定病人出现身体不适时,则向预设终端发送病人身体不适的提示信息,使得预设终端的用户及时对病人采取措施,避免病人身体上的病情恶化。
在本实施例提供的技术方案中,服务器获取病人的生理参数,并根据生理参数以及图像判断病人是否出现身体上的不适,若是,则向预设终端输出病人身体不适的提示信息,使得预设终端的用户及时采取措施,减缓病人身体上的疼痛,进而避免由身体上的不适引发病人精神上复发。
本发明还提供一种看护系统,所述看护系统包括多个图像采集模块、存储器、处理器以及存储在所述存储器并可在所述处理器上运行的病人看护程序,所述病人看护程序被处理器执行时实现如上所述的基于看护系统的病人看护方法的各个步骤。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质存储有病人看护程序,所述病人看护程序被处理器执行时实现如上所述的基于看护系统的病人看护方法的各个步骤
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于看护系统的病人看护方法,其特征在于,看护系统包括布置在看护场所不同区域的图像采集模块,所述基于看护系统的病人看护方法包括以下步骤:
获取所述图像采集模块采集的病人的图像;
根据所述图像确定所述病人当前的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态;
判断所述情绪状态判断所述病人是否需要进行安抚;
在判定所述病人需要安抚时,确定所述图像采集模块对应的区域,控制所述区域的电器执行所述情绪状态对应的预设操作,以对所述病人的情绪进行安抚。
2.如权利要求1所述的基于看护系统的病人看护方法,其特征在于,所述根据所述图像确定所述病人的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态的步骤包括:
根据所述图像识别所述病人的脸部表情以及肢体动作;
根据所述脸部表情以及所述肢体动作确定所述病人当前的情绪状态及/或根据所述脸部表情以及所述肢体动作确定所述病人在下一时间段的情绪状态。
3.如权利要求2所述的基于看护系统的病人看护方法,其特征在于,所述图像采集模块对应的区域还设有语音采集模块,所述根据所述脸部表情以及所述肢体动作确定所述病人当前的情绪状态及/或根据所述脸部表情以及所述肢体动作确定所述病人在下一时间段的情绪状态的步骤包括:
获取所述语音采集模块采集的病人的语音以及所述语音的语音参数,并将所述语音转换为文本,其中,所述语音参数包括音调、音速以及响度中的至少一个;
根据所述语音参数、所述文本、所述脸部表情以及所述肢体动作确定所述病人当前的情绪状态及/或根据所述语音参数、所述文本、所述脸部表情以及所述肢体动作确定所述病人在下一时间段的情绪状态。
4.如权利要求1所述的基于看护系统的病人看护方法,其特征在于,所述判断所述情绪状态判断所述病人是否需要进行安抚的步骤之后,还包括:
在判定所述病人需要安抚时,确定所述病人上一次安抚对应的安抚时间点;
确定所述安抚时间点与当前时间点之间的间隔时长;
在所述间隔时长大于预设时长,执行所述确定所述图像采集模块对应的区域的步骤。
5.如权利要求4所述的基于看护系统的病人看护方法,其特征在于,所述确定所述安抚时间点与当前时间点之间的间隔时长的步骤之后,还包括:
在所述间隔时长小于或等于预设时长,确定所述病人的身份信息;
根据所述身份信息确定目标终端,并向所述目标终端发送病人情绪不稳定的提示信息。
6.如权利要求1所述的基于看护系统的病人看护方法,其特征在于,所述根据所述图像确定所述病人当前的情绪状态及/或根据所述图像确定所述病人在下一时间段的情绪状态的步骤之后,还包括:
获取所述病人的生理参数,其中,所述生理参数包括病人的体温以及心率;
根据所述生理参数以及图像判断所述病人是否出现身体不适;
在所述病人出现身体不适时,向预设终端输出病人身体不适的提示信息。
7.如权利要求1-6任一项所述的基于看护系统的病人看护方法,其特征在于,所述控制所述区域的电器执行所述情绪状态对应的预设操作的步骤包括:
根据所述情绪状态在所述区域的各个电器中确定待控制电器以及各个所述待控制电器的目标运行参数;
控制各个所述待控制电器按照对应的目标运行参数运行。
8.如权利要求1-6任一项所述的基于看护系统的病人看护方法,其特征在于,所述预设操作包括播放音乐、播放视频以及语音聊天中的至少一种。
9.一种看护系统,其特征在于,所述看护系统包括多个图像采集模块、存储器、处理器以及存储在所述存储器并可在所述处理器上运行的病人看护程序,所述病人看护程序被处理器执行时实现如权利要求1-8任一项所述的基于看护系统的病人看护方法的各个步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有病人看护程序,所述病人看护程序被处理器执行时实现如权利要求1-8任一项所述的基于看护系统的病人看护方法的各个步骤。
CN201910825972.7A 2019-08-30 2019-08-30 看护系统、基于看护系统的病人看护方法和可读存储介质 Active CN110598611B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910825972.7A CN110598611B (zh) 2019-08-30 2019-08-30 看护系统、基于看护系统的病人看护方法和可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910825972.7A CN110598611B (zh) 2019-08-30 2019-08-30 看护系统、基于看护系统的病人看护方法和可读存储介质

Publications (2)

Publication Number Publication Date
CN110598611A true CN110598611A (zh) 2019-12-20
CN110598611B CN110598611B (zh) 2023-06-09

Family

ID=68857240

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910825972.7A Active CN110598611B (zh) 2019-08-30 2019-08-30 看护系统、基于看护系统的病人看护方法和可读存储介质

Country Status (1)

Country Link
CN (1) CN110598611B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111191483A (zh) * 2018-11-14 2020-05-22 百度在线网络技术(北京)有限公司 看护方法、装置及存储介质
CN111210592A (zh) * 2020-01-07 2020-05-29 珠海爬山虎科技有限公司 视频识别监护方法、计算机装置以及计算机可读存储介质
CN111405307A (zh) * 2020-03-20 2020-07-10 广州华多网络科技有限公司 直播模板配置方法、装置及电子设备
CN111741116A (zh) * 2020-06-28 2020-10-02 海尔优家智能科技(北京)有限公司 情感交互方法、装置、存储介质及电子装置
CN112842337A (zh) * 2020-11-11 2021-05-28 郑州大学第一附属医院 一种用于移动查房场景的情感疏导系统及方法
DE102022130121A1 (de) 2022-11-15 2024-05-16 Beyond Emotion GmbH Benachrichtigungsvorrichtung über einen emotionalen und/oder mentalen Zustand einer Person

Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080101660A1 (en) * 2006-10-27 2008-05-01 Samsung Electronics Co., Ltd. Method and apparatus for generating meta data of content
US20120283502A1 (en) * 2011-03-21 2012-11-08 Mishelevich David J Ultrasound neuromodulation treatment of depression and bipolar disorder
US20130090946A1 (en) * 2011-10-05 2013-04-11 Thomas Kwok-Fah Foo Systems and methods for imaging workflow
JP2015096140A (ja) * 2013-11-15 2015-05-21 国立大学法人佐賀大学 気分誘導装置および気分誘導プログラムならびに気分誘導方法
CN105893582A (zh) * 2016-04-01 2016-08-24 深圳市未来媒体技术研究院 一种社交网络用户情绪判别方法
CN106202032A (zh) * 2016-06-24 2016-12-07 广州数说故事信息科技有限公司 一种面向微博短文本的情感分析方法及其系统
US20160379225A1 (en) * 2015-06-24 2016-12-29 Intel Corporation Emotional engagement detector
US20170086698A1 (en) * 2013-11-15 2017-03-30 Yibing Wu Life maintenance mode, a brain inhibition therapy and a personal health information platform
US20170329763A1 (en) * 2014-11-28 2017-11-16 Yandex Europe Ag System and method for detecting meaningless lexical units in a text of a message
US20180077095A1 (en) * 2015-09-14 2018-03-15 X Development Llc Augmentation of Communications with Emotional Data
CN108242238A (zh) * 2018-01-11 2018-07-03 广东小天才科技有限公司 一种音频文件生成方法及装置、终端设备
CN108549720A (zh) * 2018-04-24 2018-09-18 京东方科技集团股份有限公司 一种基于情绪识别的安抚方法、装置及设备、存储介质
CN109002473A (zh) * 2018-06-13 2018-12-14 天津大学 一种基于词向量与词性的情感分析方法
CN109008952A (zh) * 2018-05-08 2018-12-18 深圳智慧林网络科技有限公司 基于深度学习的监护方法及相关产品
CN109284845A (zh) * 2018-10-24 2019-01-29 平安科技(深圳)有限公司 预约访问方法、系统、计算机设备及存储介质
CN109376225A (zh) * 2018-11-07 2019-02-22 广州市平道信息科技有限公司 聊天机器人装置及系统
CN109493946A (zh) * 2018-10-16 2019-03-19 安徽医科大学 一种产后抑郁网络干预系统
CN109672937A (zh) * 2018-12-28 2019-04-23 深圳Tcl数字技术有限公司 电视应用主题切换方法、电视、可读存储介质及系统
CN109753663A (zh) * 2019-01-16 2019-05-14 中民乡邻投资控股有限公司 一种客户情绪分级方法及装置
CN110096600A (zh) * 2019-04-16 2019-08-06 上海图菱新能源科技有限公司 人工智能情绪改善互动程序和方法

Patent Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080101660A1 (en) * 2006-10-27 2008-05-01 Samsung Electronics Co., Ltd. Method and apparatus for generating meta data of content
US20120283502A1 (en) * 2011-03-21 2012-11-08 Mishelevich David J Ultrasound neuromodulation treatment of depression and bipolar disorder
US20130090946A1 (en) * 2011-10-05 2013-04-11 Thomas Kwok-Fah Foo Systems and methods for imaging workflow
JP2015096140A (ja) * 2013-11-15 2015-05-21 国立大学法人佐賀大学 気分誘導装置および気分誘導プログラムならびに気分誘導方法
US20170086698A1 (en) * 2013-11-15 2017-03-30 Yibing Wu Life maintenance mode, a brain inhibition therapy and a personal health information platform
US20170329763A1 (en) * 2014-11-28 2017-11-16 Yandex Europe Ag System and method for detecting meaningless lexical units in a text of a message
US20160379225A1 (en) * 2015-06-24 2016-12-29 Intel Corporation Emotional engagement detector
US20180077095A1 (en) * 2015-09-14 2018-03-15 X Development Llc Augmentation of Communications with Emotional Data
CN105893582A (zh) * 2016-04-01 2016-08-24 深圳市未来媒体技术研究院 一种社交网络用户情绪判别方法
CN106202032A (zh) * 2016-06-24 2016-12-07 广州数说故事信息科技有限公司 一种面向微博短文本的情感分析方法及其系统
CN108242238A (zh) * 2018-01-11 2018-07-03 广东小天才科技有限公司 一种音频文件生成方法及装置、终端设备
CN108549720A (zh) * 2018-04-24 2018-09-18 京东方科技集团股份有限公司 一种基于情绪识别的安抚方法、装置及设备、存储介质
CN109008952A (zh) * 2018-05-08 2018-12-18 深圳智慧林网络科技有限公司 基于深度学习的监护方法及相关产品
CN109002473A (zh) * 2018-06-13 2018-12-14 天津大学 一种基于词向量与词性的情感分析方法
CN109493946A (zh) * 2018-10-16 2019-03-19 安徽医科大学 一种产后抑郁网络干预系统
CN109284845A (zh) * 2018-10-24 2019-01-29 平安科技(深圳)有限公司 预约访问方法、系统、计算机设备及存储介质
CN109376225A (zh) * 2018-11-07 2019-02-22 广州市平道信息科技有限公司 聊天机器人装置及系统
CN109672937A (zh) * 2018-12-28 2019-04-23 深圳Tcl数字技术有限公司 电视应用主题切换方法、电视、可读存储介质及系统
CN109753663A (zh) * 2019-01-16 2019-05-14 中民乡邻投资控股有限公司 一种客户情绪分级方法及装置
CN110096600A (zh) * 2019-04-16 2019-08-06 上海图菱新能源科技有限公司 人工智能情绪改善互动程序和方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111191483A (zh) * 2018-11-14 2020-05-22 百度在线网络技术(北京)有限公司 看护方法、装置及存储介质
CN111210592A (zh) * 2020-01-07 2020-05-29 珠海爬山虎科技有限公司 视频识别监护方法、计算机装置以及计算机可读存储介质
CN111405307A (zh) * 2020-03-20 2020-07-10 广州华多网络科技有限公司 直播模板配置方法、装置及电子设备
CN111741116A (zh) * 2020-06-28 2020-10-02 海尔优家智能科技(北京)有限公司 情感交互方法、装置、存储介质及电子装置
CN111741116B (zh) * 2020-06-28 2023-08-22 海尔优家智能科技(北京)有限公司 情感交互方法、装置、存储介质及电子装置
CN112842337A (zh) * 2020-11-11 2021-05-28 郑州大学第一附属医院 一种用于移动查房场景的情感疏导系统及方法
DE102022130121A1 (de) 2022-11-15 2024-05-16 Beyond Emotion GmbH Benachrichtigungsvorrichtung über einen emotionalen und/oder mentalen Zustand einer Person

Also Published As

Publication number Publication date
CN110598611B (zh) 2023-06-09

Similar Documents

Publication Publication Date Title
CN110598611A (zh) 看护系统、基于看护系统的病人看护方法和可读存储介质
JP6101684B2 (ja) 患者を支援する方法及びシステム
CN102149319B (zh) 阿尔茨海默氏症认知使能器
JP2004310034A (ja) 対話エージェントシステム
US20170344713A1 (en) Device, system and method for assessing information needs of a person
CN110587621B (zh) 机器人、基于机器人的病人看护方法和可读存储介质
CN110558997A (zh) 基于机器人的陪护方法、机器人和计算机可读存储介质
WO2018212134A1 (ja) 認知症ケアシステム
CN113375316B (zh) 用于空调的控制方法及装置、空调
CN110598612B (zh) 基于移动终端的病人看护方法、移动终端和可读存储介质
JPWO2018074224A1 (ja) 雰囲気醸成システム、雰囲気醸成方法、雰囲気醸成プログラム、及び雰囲気推定システム
CN113096808A (zh) 事件提示方法、装置、计算机设备及存储介质
JP2019017499A (ja) 療養支援システム
Charness Aging and communication: Human factors issues
JP2020126195A (ja) 音声対話装置、音声対話装置の制御装置及び制御プログラム
WO2019187590A1 (ja) 情報処理装置、情報処理方法、プログラム
WO2017179262A1 (ja) 情報処理装置、情報処理方法、およびプログラム
JP2020091636A (ja) 音声対話装置の制御方法
CN113473288A (zh) 一种智能耳机、舒缓情绪压力的方法、设备及介质
EP3799407A1 (en) Initiating communication between first and second users
JP2021033676A (ja) 情報処理装置及びプログラム
Altmann et al. Analysis of nonverbal involvement in dyadic interactions
US20230317274A1 (en) Patient monitoring using artificial intelligence assistants
CN117226866A (zh) 一种智能养老陪护机器人
US20230210372A1 (en) Passive assistive alerts using artificial intelligence assistants

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant