CN112998707A - 用于监视患者的监视系统和用于运行监视系统的方法 - Google Patents

用于监视患者的监视系统和用于运行监视系统的方法 Download PDF

Info

Publication number
CN112998707A
CN112998707A CN202011492389.8A CN202011492389A CN112998707A CN 112998707 A CN112998707 A CN 112998707A CN 202011492389 A CN202011492389 A CN 202011492389A CN 112998707 A CN112998707 A CN 112998707A
Authority
CN
China
Prior art keywords
synthetic
sound
patient
visual appearance
synthesized
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011492389.8A
Other languages
English (en)
Inventor
M.菲斯特
M.伯格
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens Healthcare GmbH
Original Assignee
Siemens Healthcare GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Healthcare GmbH filed Critical Siemens Healthcare GmbH
Publication of CN112998707A publication Critical patent/CN112998707A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M21/02—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis for inducing sleep or relaxation, e.g. by direct nerve stimulation, hypnosis, analgesia
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021—Measuring pressure in heart or blood vessels
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7405—Details of notification to user or communication with user or patient ; user input means using sound
    • A61B5/741—Details of notification to user or communication with user or patient ; user input means using sound using synthesised speech
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/20—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H80/00—ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0044—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
    • A61M2021/005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/50—General characteristics of the apparatus with microprocessors or computers
    • A61M2205/502—User interfaces, e.g. screens or keyboards
    • A61M2205/507—Head Mounted Displays [HMD]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/04—Heartbeat characteristics, e.g. ECG, blood pressure modulation
    • A61M2230/06—Heartbeat rate only
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/08—Other bio-electrical signals
    • A61M2230/10—Electroencephalographic signals
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2230/00—Measuring parameters of the user
    • A61M2230/30—Blood pressure
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/003—Changing voice quality, e.g. pitch or formants
    • G10L21/007—Changing voice quality, e.g. pitch or formants characterised by the process used

Abstract

为了与困难的患者也能特别良好地沟通提供了一种用于特别是在医学诊断或治疗的干预期间监视患者的监视系统，该监视系统具有带有声音发生器的声音克隆设备、测量单元、分析单元和控制单元，声音克隆设备被设计为，用与人的声音不同的、克隆的合成声音来代替人的自然声音，其中至少两个合成声音是可选择的；测量单元被设计为用于记录患者的至少一个生理参数；分析单元被设计为用于对所测量的患者的至少一个生理参数进行分析；控制单元被设计为，对声音克隆设备进行控制，使得依据通过分析单元分析的结果，(针对声音克隆设备的进一步运行)选择或拒绝合成声音。

Description

用于监视患者的监视系统和用于运行监视系统的方法
技术领域
本发明涉及一种根据本发明的用于特别是在医学诊断或治疗的干预期间监视患者的监视系统，以及一种根据本发明的方法。
背景技术
在医生诊所、医院或其它医学机构中对患者进行治疗时，与患者进行沟通是除最佳医学护理之外的首要的重要因素。在此，与年老、糊涂或痴呆患者以及与儿童的沟通是特别困难的。沟通不成功可能会成为医学上的问题，例如，如在没有全身麻醉的情况下进行医学检查或介入或手术的情况。通常，在检查或干预之前的准备谈话中有受信任的人或看护人在场，以便使沟通变得容易。但是，在检查、介入或手术期间不再是这种情况。在此，患者通常必须直接与医生进行沟通，这尤其是对于上面提到的患者组会非常成问题。
发明内容
本发明要解决的技术问题是，提供一种设备，该设备可以实现在医学干预期间中与患者、尤其是与年轻、年老、糊涂或痴呆患者的改善的沟通；此外，本发明要解决的技术问题是，提供一种用于运行该设备的方法。
根据本发明，上述技术问题通过根据本发明的用于特别是在医学诊断或治疗的干预期间监视患者的监视系统，以及根据本发明的用于运行该监视系统的方法来解决。本发明还给出了有利的设计方案。
本发明以令人惊讶的方式使用了针对各个讲话者训练的声音克隆设备。这种设备通常是已知的，例如从在线文章https://www.vice.com/de/article/3k7mgn/diese-ki- braucht-nur-eine-37-sekunden-lange-aufnahme-dann-klont-sie-eure-stimme或者从Arik,Chen等人于2018年在加拿大蒙特利尔的第32届神经信息处理系统国际会议的NIPS’18论文集，第10040-10050页发布的文章“Neural Voice Cloning with a Few Samples(利用少量样本的神经声音克隆)”中已知。在另外的实施中，本发明以令人惊讶的方式使用深度伪造设备(Deep-Fake-Vorrichtung)。这种设备原则上是已知的，例如从在线文章https://www.cnet.com/news/samsung-ai-deepfake-can-fabricate-a-video-of-you- from-a-single-photo-mona-lisa-cheapfake-dumbfake/或从Thies,J.等人于2016年在IEEE计算机视觉和模式识别会议的论文集，第2387-2395页发布的文章：Face2face:Real-time face capture and reenactment of rgb videos(Face2face：rgb视频的实时面部捕捉和重演)中已知。
根据本发明的用于特别是在医学诊断或治疗的干预期间监视患者的监视系统具有带有声音发生器的声音克隆设备、测量单元、分析单元和控制单元，声音克隆设备被设计为，用与人的声音不同的、克隆的合成声音来代替人(尤其是医学人员，例如医生)的自然声音并输出，其中至少两个合成声音是可选择的；测量单元被设计为用于记录患者的至少一个生理参数；分析单元被设计为，用于对所测量的患者的至少一个生理参数进行分析；控制单元被设计为，对声音克隆设备进行控制，使得依据通过分析单元分析的结果，(针对声音克隆设备的进一步运行)选择或拒绝合成声音。根据本发明的用于运行监视系统的方法包括以下步骤：激活声音克隆设备，其中设置第一合成声音；在利用第一合成声音运行声音克隆设备期间，记录患者的至少一个生理参数；对患者的至少一个生理参数进行分析；并且依据分析的结果自动控制声音克隆设备。特别地，依据通过分析单元分析的结果，针对声音克隆设备的进一步运行，选择或拒绝第一合成声音。
根据本发明的用于特别是在医学诊断或治疗的干预期间监视患者的监视系统的另外的变形方案包括，带有图像生成器和可视化设备的深度伪造设备、测量单元、分析单元和控制单元，图像生成器被设计为，用与人的自然视觉外观或自然环境不同的合成视觉外观或合成环境来代替人的自然视觉外观或自然环境，其中至少两个合成视觉外观或至少两个合成环境是可选择的；可视化设备用于将人的合成视觉外观或者环境的合成环境可视化；测量单元被设计为，用于记录患者的至少一个生理参数；分析单元被设计为，用于对所测量的患者的至少一个生理参数进行分析；控制单元被设计为，用于对深度伪造设备进行控制，使得依据通过分析单元分析的结果，特别是针对深度伪造设备的进一步运行，选择或拒绝合成视觉外观或合成背景。
如果将这种设备或方法应用于存在有患者、尤其是特别年青、年老、糊涂或痴呆的患者的医学环境中，特别是在检查、干预和手术情况下，则由此可以实现对沟通的明显改善。因此，医学人员、例如执行干预的医生可以通过这种方式利用合成声音，例如诸如亲戚或熟人的患者熟悉的声音，与患者进行交谈，并且由此实现更好的配合，或者对患者产生镇定效果。替换地，医学人员、例如执行干预的医生可以利用合成视觉外观，例如诸如亲戚或熟人的患者熟悉的脸部或表情或身体语言，与患者进行交谈，并且由此实现更好的配合，或者对患者产生镇定作用。以这种方式，还可以避免可能由处于焦虑中的患者引起的危险。对于该设备，通过测量和分析患者的生理参数并在此基础上选择或拒绝合成声音或合成视觉外观，可以确保对患者的镇静作用。替换地，还可以简单地显示与实际环境不同的起到镇定作用的合成环境，例如海滩或者患者熟悉的房间。
根据本发明的实施，已经通过使用预先训练的机器学习算法产生了克隆的合成声音或合成视觉外观或合成环境。基于AI的声音克隆算法是已知的，例如百度公司推出的“Deep Voice”算法。该算法可以非常逼真地克隆人类的声音。基于AI的深度伪造算法(Deep-Fake Algorithmen)，即用于创建深度伪造的算法，即用于在视频序列中创建不同面部的算法也是已知的。根据本发明的另外的实施，已经通过患者认识的人、特别是亲密的人的语音样本或视觉外观对算法进行了预先训练。患者认识的人例如可以是亲戚(父母、孩子、兄弟姐妹、配偶等)或者是患者熟悉的熟人(看护人、朋友)。
声音克隆设备的预先训练利用“要学习”的相应人员的声音进行，例如现场或借助语音样本进行，以学习声音的特征。在学习阶段之后，声音克隆设备的声音生成器能够以患者熟悉的人的(合成)声音来再现任何人(医生等)所讲的句子。例如，对于“Deep Voice”，只需3.7秒的音频剪辑即可进行训练，其中，更长的音频剪辑或者更多的示例当然会提供更好的结果。如果存在足够的音频材料，则在声音上要克隆的人是否还活着也无关紧要。讲话者的年龄、性别或口音也不重要。由此，已知的声音克隆算法可以用男性的合成声音来代替女性的声音，或者用美国口音来代替英国口语。
深度伪造设备的预先训练利用相应人员的照片或视频序列进行，以便学习该人的视觉外观的特征(面部、表情、身体语言)。在学习阶段之后，深度伪造设备的图像生成器能够以患者熟悉的人的视觉外观再现任何人(医生等)。为此需要必须由患者佩戴或观看的光学可视化设备，例如屏幕或AR/VR眼镜。
根据本发明的另外的实施，分析单元被设计为，用于将所测量的患者的至少一个生理参数与至少一个阈值进行比较。在分析的框架中执行这一点，从而以简单的方式获得明确的结果，在此基础上可以选择或拒绝合成声音或合成视觉外观或合成环境。在这种情况下，控制单元被设计为，对声音克隆设备或深度伪造设备进行控制，使得选择导致不超过阈值的合成声音或合成视觉外观或合成环境，或者拒绝导致超过阈值的合成声音或的合成视觉外观或合成环境。因此例如，如果在利用特定的合成声音或合成视觉外观或合成环境进行沟通时，患者的生理参数明显增长超过阈值，则拒绝该合成声音或合成视觉外观或合成环境，因为其显然没有对患者起到镇定效果。反之，如果参数持续保持在阈值以下，即如果患者看起来较为镇定，则继续使用该合成声音或合成视觉外观或合成环境。对于一些参数，还可以以相反的方式对声音克隆设备或深度伪造设备进行控制，使得选择导致超过阈值的合成声音或合成视觉外观或合成环境，或者拒绝导致低于阈值的合成声音或合成视觉外观或合成环境。
根据本发明的另外的设计方案，测量单元被设计为，用于测量可用作患者的精神状态的指标的生理参数，并且分析单元被设计为，用于关于患者的精神状态对生理参数进行分析。在此，将患者的精神状态理解为患者的急性精神、心理和情感的整体状况。在此，所使用的生理参数例如可以由以下测量值中的一个构成：血压、脉搏、EEG(脑电图)。还可以使用其它参数或多个不同的参数。测量单元可以包含传感器、照相机或其它测量值传感器。
根据本发明的另外的设计方案，控制单元被设计为，对声音克隆设备或深度伪造设备进行控制，使得选择导致积极精神状态的合成声音或合成视觉外观或合成环境，或者拒绝导致消极精神状态的合成声音或合成视觉外观或合成环境。在此，将积极的精神状态理解为患者是平静的和/或配合的和/或感到舒适的精神状态。消极的精神状态被理解为患者是例如紧张、不安或者害怕的精神状态。
根据本发明的另外的设计方案，对患者的至少一个生理参数的分析包含与至少一个阈值的比较和/或关于患者的精神状态的分析。
以有利的方式，以如下方式进行控制，即，如果对至少一个生理参数的分析得出没有超过该参数的阈值，则选择第一合成声音或第一合成视觉外观或第一合成环境，并且如果对至少一个生理参数的分析得出超过了该参数的阈值，则拒绝第一合成声音或第一合成视觉外观或第一合成环境。此外，有利地以如下方式进行控制，即，如果第一合成声音或第一合成视觉外观或第一合成环境导致患者的积极精神状态，则选择该第一合成声音或第一合成视觉外观或第一合成环境，并且如果第一合成声音或第一合成视觉外观或第一合成环境导致患者的消极精神状态，则将其拒绝。
根据本发明的另外的设计方案，(除了第一合成声音之外)针对至少一个第二合成声音，分别对至少一个生理参数进行测量和分析，并且依据对生理参数的分析，从第一合成声音和至少第二合成声音的选择中，针对声音克隆设备的进一步运行选择合成声音。因此，关于至少两个合成声音对患者的(例如镇定)效果来对该至少两个合成声音进行测试。然后，以有利的方式选择导致患者的积极精神状态或者最有助于使患者镇定的合成声音。
替换地，针对至少一个第二合成视觉外观或至少一个第二合成环境，分别对至少一个生理参数进行测量和分析，并且依据对生理参数的分析，从第一合成视觉外观和至少第二合成视觉外观或者从第一合成环境和至少第二合成环境的选择中，针对深度伪造设备的进一步运行选择合成视觉外观或合成环境。
附图说明
下面参照附图中示意性示出的实施例来更详细地解释本发明以及根据本发明的特征的其它有利的设计方案，但是本发明不限于这些实施例。附图中：
图1示出了根据本发明的方法的基本步骤的流程图；
图2示出了根据本发明的设备的视图；和
图3示出了具有附加步骤的方法的另外的设计方案。
具体实施方式
在本发明的框架中，特别是在诸如没有全身麻醉的医学检查或介入或手术的情况下，借助声音克隆系统或深度伪造设备来改善尤其是与年老、糊涂或痴呆的患者以及与儿童的沟通，通过声音克隆系统或深度伪造设备，医生可以以参考人员的声音(合成声音)或参考人员的面部、表情或身体语言(合成视觉外观)与患者进行沟通，以便能够实现更好的配合和/或起到镇定作用。
在图1中以声音克隆设备为例示出了根据本发明的方法的基本步骤。这些步骤借助如图中2所示的监视系统15来执行。例如，在医生A与患者P进行沟通时使用该方法。在第一步骤1中，监视系统15的声音克隆设备10被激活，其中设置第一合成声音F1。如后面还要描述的那样，例如之前已经借助机器学习算法克隆了第一合成声音F1，并且该第一合成声音F1代表患者P认识或熟悉的人的声音。例如，合成声音F1可以是患者P的丈夫/妻子、患者P的孩子、患者P的朋友或亲戚、患者P的父母或患者P的看护人的声音。如果激活了声音克隆设备10，则所包含的声音生成器11负责，用克隆的合成声音F1来代替医生A的原始声音，即实时地用合成声音F1来代替医生A的所说的词。在此，声音克隆设备10具有至少两个克隆的合成声音，例如第一合成声音F1和第二合成声音F2，以供选择。在此，预先选择和设置可以自动也可以手动进行。
在第二步骤2中，然后在以第一合成声音运行声音克隆设备期间，记录或测量患者的至少一个生理参数。这借助与监视系统15相关联的测量单元13进行，该测量单元13例如具有一个或多个传感器、照相机或其它测量传感器，或者由它们中的一个构成。例如，可以使用至少一个生理参数作为患者的精神状态的指标。至少一个生理参数例如可以由以下测量值中的一个构成：血压、脉搏、EEG，其中在此例如可以使用脉搏测量传感器、EEG电极或血压测量传感器。还可以对能够推断出患者P的精神状态或感觉的其它任意生理参数进行测量。在此，可以一次地或在先前设定的时间段内测量一个或多个生理参数。在第三步骤3中，借助与监视系统15相关联的分析单元14对患者的至少一个生理参数进行分析。在此，该分析例如可以包含简单地与一个或多个阈值进行比较或者包含在患者的积极或消极的精神状态方面的更复杂分析。
在分析之后，在第四步骤4中，依据分析的结果，借助与监视系统15相关联的控制单元12自动控制声音克隆设备10。在此例如，如果分析得出第一合成声音F1对患者P产生积极影响，即例如如果患者的精神状态是或变为积极的，患者是或变为镇定的或者比之前更配合，则保留或选择第一合成声音F1。在最简单的情况下，如果参数没有超过阈值(例如脉搏、血压等)，则保留或选择第一合成声音F1。另一方面，如果分析得出第一合成声音F1对患者P产生消极影响，即例如如果患者的精神状态是或变为消极的，患者是或变为激动的、害怕的或惊慌的，或者患者表现出紧张症状或者其配合意愿降低，则拒绝或终止第一合成声音F1。在最简单的情况下，如果分析得出超过了阈值，则拒绝或终止第一合成声音F1。
图3中示出了本发明的扩展的设计方案。在第一步骤1中设置了第一合成声音F1、在第二步骤2中测量了至少一个生理参数并且在第三步骤3中对其进行了分析之后，然后在第五步骤5中激活另外的第二合成声音F2，以便例如医生A现在以第二个合成声音F2进行讲话。然后，在第六步骤6中，同样地借助测量单元13来记录或测量患者的至少一个生理参数、特别是与第一合成声音F1的情况下已经记录或测量的相同的一个或多个生理参数，以确保可比性。然后，在第七步骤7中，借助分析单元对所测量的参数进行分析。在此优选地，以与使用第一合成声音F1时的分析类似的方式来进行分析，例如简单地通过与一个或多个阈值进行比较或者更复杂地在患者的积极或消极的精神状态方面进行分析
然后，在第八步骤8中，依据分析从两个合成声音中自动选择在精神状态方面对患者P产生最积极影响的合成声音。当然还可以使用多于两个的合成声音，例如三个或四个合成声音。
在预先过程中，可以借助机器学习来克隆合成声音。这例如可以在使用要克隆的声音的音频记录的情况下执行。可以克隆活着的人的声音，也可以克隆已经去世的人的声音，为此只需要足够长的音频记录(电影记录、声音记录、通话应答等)。在图3中，在实际的方法之前，在第九步骤9.1中已经克隆了第一合成声音，在第十步骤9.2中已经克隆了第二合成声音。这可以直接在实际的方法之前或者更长时间之前(几天、几周等)执行。通常，用于创建克隆的声音的方法是已知的，例如参见上面所解释的。
通用的方法优选地应用在医学环境中，即例如没有全身麻醉的检查、介入和手术中，但也可以将其用于其它环境中，例如护理机构中。该方法可以在所描述的情况下执行或者在准备阶段中执行，以便为相应的情况做准备。然后，监视系统15可以在医学环境中使用在那里选择的合成声音。
还可以规定，针对不同的状况选择不同的合成声音。为此，例如可以将例如患者遵循指示的(客观)结果纳入到分析中，并且可以在选择或拒绝合成声音时加以考虑。在这种情况下，以每个合成声音来测试各个状况，即例如一方面测试对指示(例如呼吸命令)的遵循，另一方面测试镇定保持。由此可能发生，对于每种状况，不同的合成声音分别是更适合的，即例如第一合成声音适用于镇静，第二合成声音适用于遵循指示。这可以由监视系统15(例如借助机器学习)来学习，从而由此相应于在相应状况下的分析，借助控制单元来设置最合适的合成声音。
图1和图3中描述的方法还可以直接转用到深度伪造设备中，并且可以以类似的方式执行。
利用深度伪造方法(Deep-Fake Method)(“深度学习(Deep-Learning)”和“伪造(Fake)”组成的合成词)，可以通过人工智能技术在很大程度上自主地修改和篡改媒体内容(尤其是视频)。由此产生的伪造视频在很大程度上是真实的，并且很难与原始视频区分开。存在多种深度伪造的可能：所谓的“人脸交换(face swapping)”，其中在视频或照片中将一个人的面部与生成的另一个人的面部交换。替换地，可以更换视频的环境，从而将人员置于新的环境中。另外的应用是作为“人体木偶(body puppetry)”已知的、将身体运动传递到视频材料中的其他人。
在实时计算机生成的、交互式虚拟环境中显示并同时感知现实以及其物理特性被称为虚拟现实(VR)。虚拟现实和物理现实的混合被称为混合或增强现实(AR)。
从所使用的AR/VR可视化设备的角度来看，存在例如可以在本发明的框架中使用的两种类别，以便使患者可以看到合成视觉外观或合成环境：
所谓的光学透视设备(例如HoloLens2)，其中虚拟对象通过光学透镜附加地叠加在环境上，或者视频透视设备(例如Varjo XR1)，其基于VR眼镜建立，但在那里也针对性地一同将视频信号从外部馈送到眼镜中。
光学透视设备较小且可携带，但是可见范围的大小有限，并且只能导致真实对象“淡出”。视频透视设备可以实现完全淡出，并且具有较大的可见范围，但通常较大、较重并且通常是有线连接的。
在根据本发明的方法的框架内，患者佩戴所描述的可视化设备中的一个(例如AR眼镜，VR眼镜，Hololens)或注视其中一个(例如屏幕)。
例如，在医生A与患者P进行沟通时使用该方法。首先，激活监视系统的深度伪造设备，其中设置第一合成视觉外观(“动画化身(animated avatar)”)。如后面还要描述的那样，先前例如已经借助机器学习算法产生了第一合成视觉外观，并且第一合成视觉外观代表患者P认识或熟悉的人(丈夫/妻子、孩子、朋友或亲戚、父母或看护人)的面部、表情或身体语言。如果激活深度伪造设备，则所包含的图像生成器负责，用克隆的合成视觉外观来代替医生A的原始视觉外观。
在此，深度伪造设备具有至少两个克隆的合成视觉外观以供选择。预先选择和设置在此可以自动也可以手动进行。然后，在深度伪造设备运行期间记录或测量患者的至少一个生理参数。这借助与监视系统15相关联的测量单元13执行，该测量单元例如具有一个或多个传感器、照相机或其它测量传感器，或者由它们中的一个构成。例如，可以使用至少一个生理参数作为患者的精神状态的指标。至少一个生理参数例如可以由以下测量值中的一个构成：血压、脉搏、EEG，其中在此例如可以使用脉搏测量传感器、EEG电极或血压测量传感器。还可以对能够推断出患者P的精神状态或感觉的其它任意生理参数进行测量。在此，可以一次地或在先前设定的时间段内测量一个或多个生理参数。然后，借助与监视系统相关联的分析单元对患者的至少一个生理参数进行分析。在此，该分析例如可以包含简单地与一个或多个阈值进行比较或者包含在患者的积极或消极的精神状态方面的更复杂分析。
在分析之后，依据分析的结果，借助与监视系统15相关联控制单元12自动控制深度伪造设备。在此，例如如果分析得出对患者P产生积极影响，即例如如果患者的精神状态是或变为积极的，患者是或变为镇定的或者比之前更配合，则保留或选择第一合成视觉外观。在最简单的情况下，如果参数没有超过阈值(例如脉搏、血压等)，则保留或选择第一合成视觉外观。另一方面，如果分析得出对患者P产生负面影响，即例如如果患者的精神状态是或变为消极的，患者是或变为激动的、害怕的或惊慌的，或者患者表现出紧张症状或者其配合意愿降低，则拒绝或终止第一合成视觉外观。在最简单的情况下，如果分析得出超过了阈值，则拒绝或终止第一合成视觉外观。
在本发明的扩展设计方案中，然后可以激活另外的第二合成视觉外观。然后，在第六步骤6中，同样借助测量单元13来记录或测量患者的至少一个生理参数、特别是相同的一个或多个生理参数，以确保可比性。然后，借助分析单元对所测量的参数进行分析。在此优选地，以与先前分析类似的方式进行分析，例如简单地通过与一个或多个阈值进行比较，或者更复杂地在患者的积极或消极的精神状态方面进行分析。随后，依据分析的结果自动选择在精神状态对患者P产生最积极影响的合成视觉外观。当然还可以使用多于两个，例如三个或四个合成视觉外观。
在该方法的框架中，可以从患者的视角记录风景，例如通常利用RGB或RGB-D照相机。替换地(或附加地)还可以使用各种各样其它的空间照相机。在视频记录中，借助深度伪造算法针对性地用“更舒适的面孔(化身，Avatare)”来代替手术人员，并且通过患者佩戴的AR/VR可视化设备(例如，AR眼镜、VR眼镜、Hololens、屏幕)将如此改变的图像实时展现给患者。由此，例如还可以扔掉面具，使得该状况对于患者更加舒适。还可以使患者看到曾经不能够看到的具有镇静作用的情绪和表情。在介入期间，医生现在可以以化身形式作为先前训练的参考人员中的一个与患者交谈。附加地，可以改变手术室内的环境，这也再次对患者起到镇定作用。例如，可以将场景虚拟地转移至加勒比海海滩、草坪或自己的客厅或卧室。
在介入的过程中(或与患者的试验对谈中)，系统能够“学习”哪种化身在哪种状况下是成功的，其中例如确定指示是否成功。然后，系统可以自动地在“镇定动作”的情况下更倾向于使用化身X，在指示的情况下更倾向于使用化身Y等。还可以在手术前根据测试序列进行学习。
以如下方式简要总结本发明：为了与困难的患者也能特别良好地沟通提供了一种用于特别是在医学诊断或治疗的干预期间监视患者的监视系统，该监视系统具有带有声音发生器的声音克隆设备、测量单元、分析单元和控制单元，声音克隆设备被设计为，用与人的声音不同的、克隆的合成声音来代替人的自然声音，其中至少两个合成声音是可选择的；测量单元被设计为用于记录患者的至少一个生理参数；分析单元被设计为，用于对所测量的患者的至少一个生理参数进行分析；控制单元被设计为，对声音克隆设备进行控制，使得依据通过分析单元分析的结果，(针对声音克隆设备的进一步运行)选择或拒绝合成声音。

Claims (20)

1.一种用于特别是在医学诊断或治疗的干预期间监视患者的监视系统(15)，其具有
-带有声音发生器(11)的声音克隆设备(10)，所述声音克隆设备被设计为，用与人的声音不同的、克隆的合成声音来代替人的自然声音并输出，其中至少两个合成声音是可选择的，
-测量单元(13)，所述测量单元被设计为，用于记录患者的至少一个生理参数，
-分析单元(14)，所述分析单元被设计为，用于对所测量的患者的至少一个生理参数进行分析，
-控制单元(12)，所述控制单元被设计为，对所述声音克隆设备(10)进行控制，使得依据通过所述分析单元分析的结果，特别是针对所述声音克隆设备(10)的进一步运行，选择或拒绝合成声音。
2.一种用于特别是在医学诊断或治疗的干预期间监视患者的监视系统，其具有
-带有图像生成器和可视化设备的深度伪造设备，所述图像生成器被设计为，用与人的自然视觉外观或自然环境不同的合成视觉外观或合成环境来代替人的自然视觉外观或自然环境，其中至少两个合成视觉外观或至少两个合成环境是可选择的，所述可视化设备用于将人的合成视觉外观或者环境的合成环境可视化，
-测量单元(13)，所述测量单元被设计为，用于记录患者的至少一个生理参数，
-分析单元(14)，所述分析单元被设计为，用于对所测量的患者的至少一个生理参数进行分析，
-控制单元(12)，所述控制单元被设计为，用于对所述深度伪造设备进行控制，使得依据通过所述分析单元分析的结果，特别是针对所述深度伪造设备的进一步运行，选择或拒绝所述合成视觉外观或合成背景。
3.根据权利要求1或2所述的监视系统，其中，所述分析单元(14)被设计为，用于将所测量的患者的至少一个生理参数与至少一个阈值进行比较。
4.根据上述权利要求中任一项所述的监视系统，其中，已经通过使用预先训练的机器学习算法产生了克隆的合成声音或合成视觉外观或合成环境。
5.根据权利要求4所述的监视系统，其中，通过患者认识的人、特别是亲密的人的语音样本或视觉外观对所述算法进行预先训练。
6.根据权利要求3所述的监视系统，其中，所述控制单元(12)被设计为，对所述声音克隆设备(10)或所述深度伪造设备进行控制，使得选择导致不超过阈值的合成声音或合成视觉外观或合成环境，或者拒绝导致超过阈值的合成声音或的合成视觉外观或合成环境。
7.根据上述权利要求中任一项所述的监视系统，其中，所述测量单元(13)被设计为，用于测量生理参数，所述生理参数能够用作患者的精神状态的指标，并且所述分析单元(14)被设计为，用于关于患者的精神状态对所述生理参数进行分析。
8.根据上述权利要求中任一项所述的监视系统，其中，至少一个生理参数由以下测量值中的一个构成：血压、脉搏、脑电图。
9.根据上述权利要求中任一项所述的监视系统，其中，所述控制单元(12)被设计为，对所述声音克隆设备(10)或所述深度伪造设备进行控制，使得选择导致积极精神状态的合成声音或合成视觉外观或合成环境，或者拒绝导致消极精神状态的合成声音或合成视觉外观或合成环境。
10.一种用于运行根据权利要求1至9中任一项所述的监视系统(15)的方法，所述方法具有以下步骤：
-激活声音克隆设备(10)或深度伪造设备，其中设置第一合成声音或第一合成视觉外观或第一合成环境，
-在利用所述第一合成声音运行所述克隆设备(10)期间，或者在利用所述第一合成视觉外观或第一合成环境运行所述深度伪造设备期间，记录患者的至少一个生理参数，
-对患者的至少一个生理参数进行分析，并且
-依据分析的结果自动控制所述声音克隆设备(10)或所述深度伪造设备。
11.根据权利要求10所述的方法，其中，依据通过分析单元分析的结果，针对所述声音克隆设备(10)的进一步运行，选择或拒绝所述第一合成声音，或者通过分析单元针对所述深度伪造设备的进一步运行，选择或拒绝所述第一合成视觉外观或第一合成环境。
12.根据权利要求10或11所述的方法，其中，对患者的至少一个生理参数的分析包含与至少一个阈值的比较。
13.根据上述权利要求中任一项所述的方法，其中，对至少一个生理参数的分析包含关于患者的精神状态的分析。
14.根据权利要求12所述的方法，其中，以如下方式进行控制，即，如果对至少一个生理参数的分析得出没有超过所述参数的阈值，则选择所述第一合成声音或所述第一合成视觉外观或第一合成环境，并且如果对至少一个生理参数的分析得出超过了所述参数的阈值，则拒绝所述第一合成声音或所述第一合成视觉外观或第一合成环境。
15.根据权利要求13所述的方法，其中，以如下方式进行控制，即，如果所述第一合成声音或所述第一合成视觉外观或第一合成环境导致患者的积极精神状态，则选择所述第一合成声音或所述第一合成视觉外观或第一合成环境，如果所述第一合成声音或所述第一合成视觉外观或第一合成环境导致患者的消极精神状态，则拒绝所述第一合成声音或所述第一合成视觉外观或第一合成环境。
16.根据权利要求10至15中任一项所述的方法，其中，针对至少一个第二合成声音或至少一个第二合成视觉外观或至少一个第二合成环境，分别对至少一个生理参数进行测量和分析，并且依据对生理参数的分析，从所述第一合成声音和至少第二合成声音的选择中，针对所述声音克隆设备(10)的进一步运行，选择合成声音或合成视觉外观或合成环境。
17.根据权利要求10至15中任一项所述的方法，其中，针对至少一个第二合成视觉外观或至少一个第二合成环境，分别对至少一个生理参数进行测量和分析，并且依据对生理参数的分析，从所述第一合成视觉外观和至少第二合成视觉外观或者从所述第一合成环境和至少第二合成环境的选择中，针对所述深度伪造设备的进一步运行，选择合成视觉外观或合成环境。
18.根据权利要求13和16所述的方法，其中，选择导致患者的最积极精神状态的合成声音。
19.根据权利要求13和17所述的方法，其中，选择导致患者的最积极精神状态的合成视觉外观或合成环境。
20.一种用于执行根据权利要求9至16中任一项所述的方法的监视系统，其中，在不同的状况下记录参数，并且依据状况进行分析，并且执行依据状况的控制。
CN202011492389.8A 2019-12-19 2020-12-17 用于监视患者的监视系统和用于运行监视系统的方法 Pending CN112998707A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102019220224.1 2019-12-19
DE102019220224.1A DE102019220224A1 (de) 2019-12-19 2019-12-19 Überwachungssystem zur Überwachung eines Patienten und Verfahren zum Betrieb des Überwachungssystems

Publications (1)

Publication Number Publication Date
CN112998707A true CN112998707A (zh) 2021-06-22

Family

ID=76205773

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011492389.8A Pending CN112998707A (zh) 2019-12-19 2020-12-17 用于监视患者的监视系统和用于运行监视系统的方法

Country Status (3)

Country Link
US (1) US20210186339A1 (zh)
CN (1) CN112998707A (zh)
DE (1) DE102019220224A1 (zh)

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5356287A (en) * 1987-03-16 1994-10-18 Mcintyre Kevin M Simulating presence
US5676633A (en) * 1996-01-05 1997-10-14 Healing Environments International, Inc. Method and apparatus for biophilically promoting patient relaxation, for reducing physical and/or psychological patient stress and for expediting patient recovery
US20040130449A1 (en) * 2003-01-03 2004-07-08 Hung Hung Wen Electronic baby-soothing device with wireless remote monitor
DE102004001801A1 (de) * 2004-01-05 2005-07-28 Deutsche Telekom Ag Dialogsystem insbesondere zur Unterstützung der Patientenbetreuung
CN1886170A (zh) * 2003-11-26 2006-12-27 皇家飞利浦电子股份有限公司 用于在医疗环境中给个人提供个人化体验的系统
US20080281164A1 (en) * 2007-05-11 2008-11-13 General Electric Company Apparatus and method for a patient monitor
JP2009020794A (ja) * 2007-07-13 2009-01-29 Teijin Pharma Ltd 在宅医療支援システム
CN101923669A (zh) * 2008-07-18 2010-12-22 史迪芬·凯斯 智能的适应式设计
CN102178540A (zh) * 2011-03-18 2011-09-14 北京科技大学 三轮式全向移动控制装置及自闭症儿童监护辅助系统
CN103298398A (zh) * 2010-09-03 2013-09-11 精神检测有限公司 用于确定脑干反应状态发展的系统及方法
KR20140099569A (ko) * 2013-01-31 2014-08-13 대구가톨릭대학교산학협력단 소아정신질환 검사 및 치료 시스템 및 소아정신질환 검사 및 치료 방법
CN103996155A (zh) * 2014-04-16 2014-08-20 深圳市易特科信息技术有限公司 智能交互及心理慰藉机器人服务系统
CN204840598U (zh) * 2015-05-20 2015-12-09 杨克西 一种用于安抚患者情绪的系统
TW201801678A (zh) * 2016-07-05 2018-01-16 葉大全 心理臨床應用的虛擬實境系統
JP2018121967A (ja) * 2017-02-02 2018-08-09 テルモ株式会社 医療システム
CN109830304A (zh) * 2018-12-19 2019-05-31 中南大学湘雅三医院 基于亲情音视频的老人健康管理系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10827961B1 (en) * 2012-08-29 2020-11-10 Masimo Corporation Physiological measurement calibration
CN106571145A (zh) * 2015-10-08 2017-04-19 重庆邮电大学 一种语音模仿方法和装置
US11538455B2 (en) * 2018-02-16 2022-12-27 Dolby Laboratories Licensing Corporation Speech style transfer
US11166677B2 (en) * 2019-03-06 2021-11-09 General Electric Company Systems and methods for monitoring a patient

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5356287A (en) * 1987-03-16 1994-10-18 Mcintyre Kevin M Simulating presence
US5676633A (en) * 1996-01-05 1997-10-14 Healing Environments International, Inc. Method and apparatus for biophilically promoting patient relaxation, for reducing physical and/or psychological patient stress and for expediting patient recovery
US20040130449A1 (en) * 2003-01-03 2004-07-08 Hung Hung Wen Electronic baby-soothing device with wireless remote monitor
CN1886170A (zh) * 2003-11-26 2006-12-27 皇家飞利浦电子股份有限公司 用于在医疗环境中给个人提供个人化体验的系统
DE102004001801A1 (de) * 2004-01-05 2005-07-28 Deutsche Telekom Ag Dialogsystem insbesondere zur Unterstützung der Patientenbetreuung
US20080281164A1 (en) * 2007-05-11 2008-11-13 General Electric Company Apparatus and method for a patient monitor
JP2009020794A (ja) * 2007-07-13 2009-01-29 Teijin Pharma Ltd 在宅医療支援システム
CN101923669A (zh) * 2008-07-18 2010-12-22 史迪芬·凯斯 智能的适应式设计
CN103298398A (zh) * 2010-09-03 2013-09-11 精神检测有限公司 用于确定脑干反应状态发展的系统及方法
CN102178540A (zh) * 2011-03-18 2011-09-14 北京科技大学 三轮式全向移动控制装置及自闭症儿童监护辅助系统
KR20140099569A (ko) * 2013-01-31 2014-08-13 대구가톨릭대학교산학협력단 소아정신질환 검사 및 치료 시스템 및 소아정신질환 검사 및 치료 방법
CN103996155A (zh) * 2014-04-16 2014-08-20 深圳市易特科信息技术有限公司 智能交互及心理慰藉机器人服务系统
CN204840598U (zh) * 2015-05-20 2015-12-09 杨克西 一种用于安抚患者情绪的系统
TW201801678A (zh) * 2016-07-05 2018-01-16 葉大全 心理臨床應用的虛擬實境系統
JP2018121967A (ja) * 2017-02-02 2018-08-09 テルモ株式会社 医療システム
CN109830304A (zh) * 2018-12-19 2019-05-31 中南大学湘雅三医院 基于亲情音视频的老人健康管理系统

Also Published As

Publication number Publication date
DE102019220224A1 (de) 2021-06-24
US20210186339A1 (en) 2021-06-24

Similar Documents

Publication Publication Date Title
Patel et al. Recommended protocols for instrumental assessment of voice: American Speech-Language-Hearing Association expert panel to develop a protocol for instrumental assessment of vocal function
Bekele et al. Understanding how adolescents with autism respond to facial expressions in virtual reality environments
Thomas et al. Contributions of oral and extraoral facial movement to visual and audiovisual speech perception.
WO2020119355A1 (zh) 自闭症谱系障碍患者的多模态情感认知能力的评估方法
Pineles et al. Attentional biases to internal and external sources of potential threat in social anxiety.
Lowe et al. Avoidance of eye gaze by adults who stutter
JP7002143B2 (ja) コミュニケーション解析装置およびそれに使用される測定・フィードバック装置、インタラクション装置
KR20190005219A (ko) 사용자 건강 분석을 위한 증강 현실 시스템들 및 방법들
CN107809951B (zh) 利用基于视频检测出生理信号的对扭曲的心理生理探测(测谎)方法和装置
Guntupalli et al. Emotional and physiological responses of fluent listeners while watching the speech of adults who stutter
US10841724B1 (en) Enhanced hearing system
KR102104202B1 (ko) 가상 현실을 사용한 인지행동치료 장치
CN109765991A (zh) 社交互动系统、用于帮助用户进行社交互动的系统及非暂时性计算机可读存储介质
JP2020113197A (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
JP2023004800A (ja) デジタルコンテンツに基づく治療情報提供装置及び方法
Smeele et al. Laterality in visual speech perception.
Bernstein et al. Quantified acoustic–optical speech signal incongruity identifies cortical sites of audiovisual speech processing
Sun et al. Biosensors toward behavior detection in diagnosis of alzheimer’s disease
US11635816B2 (en) Information processing apparatus and non-transitory computer readable medium
KR20190036038A (ko) 신경질환 진단용 가상현실 장치, 시스템 및 제공방법
CN111640496A (zh) 一种基于人工智能的中医远程会诊系统
CN112998707A (zh) 用于监视患者的监视系统和用于运行监视系统的方法
Irwin et al. Neural and behavioral differences in speech perception for children with autism spectrum disorders within an audiovisual context
Bekele et al. Responses during facial emotional expression recognition tasks using virtual reality and static IAPS pictures for adults with schizophrenia
Rigo et al. Nonverbal sensitivity of normal-hearing and hearing-impaired older adults

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination