KR20200092659A - Medical communication virtual training simulation system and method - Google Patents

Medical communication virtual training simulation system and method Download PDF

Info

Publication number
KR20200092659A
KR20200092659A KR1020190009827A KR20190009827A KR20200092659A KR 20200092659 A KR20200092659 A KR 20200092659A KR 1020190009827 A KR1020190009827 A KR 1020190009827A KR 20190009827 A KR20190009827 A KR 20190009827A KR 20200092659 A KR20200092659 A KR 20200092659A
Authority
KR
South Korea
Prior art keywords
user
medical communication
content
virtual
communication content
Prior art date
Application number
KR1020190009827A
Other languages
Korean (ko)
Other versions
KR102160669B1 (en
Inventor
이지현
김형신
Original Assignee
서울대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서울대학교산학협력단 filed Critical 서울대학교산학협력단
Priority to KR1020190009827A priority Critical patent/KR102160669B1/en
Publication of KR20200092659A publication Critical patent/KR20200092659A/en
Application granted granted Critical
Publication of KR102160669B1 publication Critical patent/KR102160669B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Marketing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • Human Resources & Organizations (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Optics & Photonics (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

Provided is a medical communication virtual training simulation system which provides learners with correct communication training. The medical communication virtual training simulation system comprises: a receiving/transmitting unit which receives a medical communication content request from a user and transmitting the medical communication content; a content generation unit which generates the medical communication content; and a feedback generation unit which generates feedback content that records the behavior of the user while the medical communication content is provided to the user, wherein the medical communication content corresponds to content in which the user conducts a conversation with a virtual patient according to a scenario from a viewpoint of a doctor.

Description

의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템 및 방법{Medical communication virtual training simulation system and method}Medical communication virtual training simulation system and method}

3차원 가상 환경을 이용한 의료 커뮤니케이션의 훈련 시뮬레이션을 제공하는 시스템 및 방법으로, 학습자들에게 환자와의 올바른 커뮤니케이션 훈련을 제공하는 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템 및 방법을 제공한다.As a system and method for providing training simulation of medical communication using a 3D virtual environment, a medical communication virtual training simulation system and method for providing correct communication training with a patient is provided.

[국가지원 연구개발에 대한 설명][Explanation on national support R&D]

본 연구는 과학기술정보통신부 개인기초연구사업(가상현실 및 햅틱 시뮬레이션 기술 기반 통합 치의료 임상 교육 시스템 프로토타입 개발 연구, 과제 고유번호: 1711069125, 세부과제번호: 2017R1C1B2010469)의 지원에 의하여 이루어진 것이다.This study was made with the support of the Ministry of Science and ICT's personal basic research project (a virtual reality and haptic simulation technology-based integrated dental clinical education system prototype development study, task identification number: 1711069125, detailed assignment number: 2017R1C1B2010469).

의료 기술 발전에 따라, 로봇을 이용한 수술 기법 등과 같이 질병의 진단과 치료 및 수술에 관한 기술, 기법은 점점 발전해오고 있으며, 발전된 의료 기술의 도움에 의해 치료 및 수술 기술은 점점 상향 평준화되고 있다. 따라서, 좋은 의사, 진정한 의술을 행하는 의사가 되기 위해서는 치료 및 수술 테크닉 이외의 기술, 자신의 환자와의 원활한 의사소통을 통해 상호 신뢰적인 관계를 형성하는 환자와의 공감 능력이 보다 요구되고 있다. 환자와의 공감 능력은 단순히 환자의 기분이나 비위를 맞추어 주는 것에 국한되지 않으며, 환자의 병리학적 히스토리를 효과적으로 추출하는 데 중요한 역할을 하며, 정확한 진단, 정확한 정보를 환자에게 제공하여 오진단 및/또는 의료 과실을 방지하게 한다. With the development of medical technology, technologies and techniques for diagnosis, treatment and surgery of diseases, such as surgical techniques using robots, have been gradually developed, and with the help of advanced medical technologies, treatment and surgery technologies are gradually leveling upward. Therefore, in order to be a good doctor and a doctor who performs true medicine, skills other than treatment and surgical techniques and empathy with patients who form mutually trusting relationships through smooth communication with their patients are more demanded. The ability to empathize with the patient is not limited to simply matching the mood or disposition of the patient, plays an important role in effectively extracting the patient's pathological history, and provides accurate diagnosis and accurate information to the patient to diagnose and/or diagnose incorrectly. Prevent medical malpractice.

한 명의 의사가 만나게 되는 환자는 외모, 배경, 경험, 교육 수준, 종교, 태도 등에서 매우 다양한 스펙트럼을 가진다. 따라서, 다양한 환자와 신뢰적인 관계를 형성하기 위해서는 의사에게 인내심, 지각력, 이해심, 공감 능력이 필요하나, 이러한 감정, 능력은 단기간 내에 형성되는 것은 아니며, 오랜 경험을 필요로 한다.Patients that a doctor meets have a wide spectrum of appearance, background, experience, education level, religion, and attitude. Therefore, in order to form a reliable relationship with various patients, the doctor needs patience, perception, understanding, and empathy, but these emotions and abilities are not formed in a short period of time, but require a long experience.

현재, 의학 커리큘럼은 과학적 지식을 전달하는 데 집중하고 있으며, 환자와의 공감 능력과 관련한 충분한 커리큘럼을 제공하지 못하고 있다. 또한, 기술의 발전으로 많은 의료 시술, 수술을 3차원 가상 공간에서 훈련하는 시스템이 한국 특허 공개 문헌 10-2017-0095007과 같이 개발되어, 적용되고 있으나, 환자와의 커뮤니케이션, 환자와의 공감 능력을 가상 공간에서 훈련하는 시스템은 개발되지 않은 상황이다. Currently, the medical curriculum focuses on delivering scientific knowledge, and does not provide sufficient curriculum related to empathy with patients. In addition, with the development of technology, a system for training many medical procedures and surgeries in a 3D virtual space has been developed and applied as in Korean Patent Publication No. 10-2017-0095007, but it has improved communication with patients and empathy with patients. A system for training in virtual space has not been developed.

한국 특허 공개 문헌 10-2017-0095007 (2017년 08월 22일)Korean Patent Publication No. 10-2017-0095007 (August 22, 2017)

본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로, 3차원 가상 공간에서 학습자들에게 환자와의 올바른 커뮤니케이션 훈련을 제공할 수 있는 훈련 시뮬레이션 시스템 및 방법을 제공한다.The present invention has been devised to solve the above-mentioned problems, and provides a training simulation system and method capable of providing correct communication training with a patient to learners in a 3D virtual space.

본 발명의 일 실시예에 따른 의료 커뮤니케이션의 가상 훈련 시뮬레이션 시스템은 사용자로부터 의료 커뮤니케이션 컨텐츠 요청을 수신하고, 상기 의료 커뮤니케이션 컨텐츠를 송신하는 송수신부; 상기 의료 커뮤니케이션 컨텐츠를 생성하는 컨텐츠 생성부; 및 상기 의료 커뮤니케이션 컨텐츠가 상기 사용자에게 제공되는 동안 상기 사용자의 행동을 기록한 피드백 컨텐츠를 생성하는 피드백 생성부를 포함하고, 상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 의사 입장에서 가상 환자와 시나리오에 따라 대화를 수행하는 컨텐츠에 해당한다. A virtual training simulation system of medical communication according to an embodiment of the present invention includes a transmitting and receiving unit receiving a medical communication content request from a user and transmitting the medical communication content; A content generator that generates the medical communication content; And a feedback generator configured to generate feedback content recording the user's behavior while the medical communication content is provided to the user, wherein the medical communication content allows the user to perform a conversation according to a scenario with a virtual patient from a doctor's point of view. Corresponds to the content.

본 발명의 다른 실시예에 따른 의료 커뮤니케이션의 가상 훈련 시뮬레이션 방법은 사용자로부터 의료 커뮤니케이션 컨텐츠 요청을 수신하는 단계; 상기 사용자에게 3차원 가상 공간을 제공하는 디바이스를 통해 상기 의료 커뮤니케이션 컨텐츠를 제공하는 단계; 상기 의료 커뮤니케이션 컨텐츠가 상기 사용자에게 제공되는 동안 기록된 상기 사용자의 행동을 기초로 피드백 컨텐츠를 생성하는 단계; 및 상기 피드백 컨텐츠를 상기 사용자에게 제공하는 단계를 포함하고, 상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 의사 입장에서 가상 환자와 시나리오에 따라 대화를 수행하는 컨텐츠에 해당한다.A virtual training simulation method of medical communication according to another embodiment of the present invention includes receiving a medical communication content request from a user; Providing the medical communication content through a device that provides a 3D virtual space to the user; Generating feedback content based on the user's behavior recorded while the medical communication content is provided to the user; And providing the feedback content to the user, and the medical communication content corresponds to content in which the user communicates with a virtual patient according to a scenario from a doctor's viewpoint.

본 발명의 또 다른 실시예에 따른 컴퓨터 프로그램은 하드웨어와 결합되어 상기 의료 커뮤니케이션의 가상 훈련 시뮬레이션 방법을 실행하도록 매체에 저장된다.A computer program according to another embodiment of the present invention is stored in a medium in combination with hardware to execute the virtual training simulation method of the medical communication.

본 발명의 또 다른 실시예에 따른 디바이스는, 의료 커뮤니케이션 컨텐츠를 표시하는 디바이스로서, 사용자의 동작 및 음성을 인식하는 센서부; 상기 의료 커뮤니케이션 컨텐츠를 표시하는 표시부; 및 상기 센서부에 의해 측정된 사용자의 동작 및 음성에 따라 상기 표시부에 표시되는 의료 커뮤니케이션 컨텐츠를 제어하는 제어부를 포함하고, 상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 의사 입장에서 가상 환자와 시나리오에 따라 대화를 수행하는 컨텐츠에 해당한다. A device according to another embodiment of the present invention, a device for displaying medical communication content, the sensor unit for recognizing the user's operation and voice; A display unit that displays the medical communication content; And a control unit for controlling medical communication content displayed on the display unit according to a user's motion and voice measured by the sensor unit, wherein the medical communication content enables the user to have a conversation with a virtual patient in a doctor's position according to a scenario. Corresponds to the content being performed.

본 발명의 일 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템은 사용자가 현실감을 느낄 수 있게 하는 가상 환경으로 구현된 의료 커뮤니케이션 컨텐츠를 제공하여, 사용자로 하여금 표시되는 의료 커뮤니케이션 컨텐츠에 보다 몰두할 수 있게 한다. The medical communication virtual training simulation system according to an embodiment of the present invention provides medical communication content implemented in a virtual environment that allows a user to feel reality, thereby allowing the user to be more immersed in the displayed medical communication content.

또한, 가상 환자와의 대화 내용을 확인할 수 있는 피드백 컨텐츠를 제공하여 사용자의 자기 성찰(Self-reflection)을 유도한다. In addition, by providing feedback content that can confirm the conversation with the virtual patient, it induces the user's self-reflection.

이에 따라, 사용자의 의료 커뮤니케이션 학습 효과가 보다 향상될 수 있다.Accordingly, the user's medical communication learning effect can be further improved.

도 1은 본 발명의 일 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템을 설명하기 위한 도면이다.
도 2는 본 발명의 일 실시예에 따른 가상 훈련 시뮬레이션 시스템의 구성을 도시한 블록도이다.
도 3a 내지 도 3f는 본 발명의 일 실시예에 따른 의료 커뮤니케이션 컨텐츠를 도시한 예시적인 화면이다.
도 4는 의료 커뮤니케이션 컨텐츠를 표시하는 디바이스의 구성을 도시한 블록도이다.
도 5는 본 발명의 또 다른 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 방법의 순서도이다. 1 is a view for explaining a medical communication virtual training simulation system according to an embodiment of the present invention.
2 is a block diagram showing the configuration of a virtual training simulation system according to an embodiment of the present invention.
3A to 3F are exemplary screens illustrating medical communication content according to an embodiment of the present invention.
4 is a block diagram showing the configuration of a device for displaying medical communication content.
5 is a flowchart of a method for simulating medical communication virtual training according to another embodiment of the present invention.

본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.Terms used in the specification will be briefly described, and the present invention will be described in detail.

본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.The terminology used in the present invention has been selected, while considering the functions in the present invention, general terms that are currently widely used are selected, but this may vary according to the intention or precedent of a person skilled in the art or the appearance of new technologies. In addition, in certain cases, some terms are arbitrarily selected by the applicant, and in this case, their meanings will be described in detail in the description of the applicable invention. Therefore, the term used in the present invention should be defined based on the meaning of the term and the contents of the present invention, rather than a simple term name.

명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.When a certain part of the specification "includes" a certain component, this means that other components may be further included instead of excluding other components unless otherwise specified. In addition, terms such as “... unit” and “module” described in the specification mean a unit that processes at least one function or operation, which may be implemented in hardware or software, or a combination of hardware and software. .

아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art to which the present invention pertains may easily practice. However, the present invention can be implemented in many different forms and is not limited to the embodiments described herein. In addition, in order to clearly describe the present invention in the drawings, parts irrelevant to the description are omitted, and like reference numerals are assigned to similar parts throughout the specification.

도 1은 본 발명의 일 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템을 설명하기 위한 도면이다. 도 2는 본 발명의 일 실시예에 따른 가상 훈련 시뮬레이션 시스템의 구성을 도시한 블록도이다. 도 3a 내지 도 3f는 본 발명의 일 실시예에 따른 의료 커뮤니케이션 컨텐츠를 도시한 예시적인 화면이다. 1 is a view for explaining a medical communication virtual training simulation system according to an embodiment of the present invention. 2 is a block diagram showing the configuration of a virtual training simulation system according to an embodiment of the present invention. 3A to 3F are exemplary screens illustrating medical communication content according to an embodiment of the present invention.

도 1 내지 도 3f를 참조하면, 본 발명의 일 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템(10)은 사용자에게 의료 커뮤니케이션 컨텐츠를 제공한다.1 to 3F, the medical communication virtual training simulation system 10 according to an embodiment of the present invention provides medical communication content to a user.

여기서, 사용자는 다양한 환자와 커뮤니케이션 능력을 향상시키고, 상호작용을 통해 관계를 형성하고자 하는 의대생 또는 의사일 수 있으나, 이에 한정되는 것은 아니다. 상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 의사 입장에서 가상 환자와 시나리오에 따라 대화를 수행하는 컨텐츠에 해당한다.Here, the user may be a medical student or a doctor who wants to improve communication skills with various patients and to form a relationship through interaction, but is not limited thereto. The medical communication content corresponds to content in which the user performs a conversation according to a scenario with a virtual patient from a doctor's point of view.

사용자는 의료 커뮤니케이션 컨텐츠가 재생되는 디바이스(100)를 통해 상기 컨텐츠를 요청할 수 있다. 디바이스(100)는 표시부를 통해 사용자에게 3차원 가상 공간을 제공하는 장치일 수 있다. 본 실시예에서 디바이스(100)는 헤드 마운트형 디스플레이 장치(Head Mounted Display; HMD)일 수 있으나, 이에 한정되는 것은 아니며, 다른 실시예에서 디바이스는 입체 디스플레이로 구성될 수도 있다. 디바이스(100)는 의료 커뮤니케이션 컨텐츠를 요청하고, 이를 실행시켜, 사용자에게 제공하는 소프트웨어 및/또는 하드웨어적인 구성을 포함할 수 있다. 디바이스(100)의 구성에 대해서는 보다 상세히 후술하도록 한다.The user may request the content through the device 100 in which the medical communication content is reproduced. The device 100 may be an apparatus that provides a 3D virtual space to a user through a display unit. In this embodiment, the device 100 may be a head mounted display (HMD), but is not limited thereto, and in other embodiments, the device may be configured as a stereoscopic display. The device 100 may include software and/or hardware configuration for requesting and executing medical communication content and providing it to a user. The configuration of the device 100 will be described later in more detail.

의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템(10)은 적어도 송수신부(11) 및 컨텐츠 생성부(12)를 포함한다. 송수신부(11)는 디바이스(100)로부터 컨텐츠 요청을 수신하고, 컨텐츠 생성부(12)에 이를 전달한다. 컨텐츠 생성부(12)는 컨텐츠 요청 신호에 대응하는 의료 시뮬레이션 컨텐츠를 생성한다. 그리고, 송수신부(11)는 컨텐츠 생성부(12)에서 제공되는 의료 커뮤니케이션 컨텐츠를 디바이스(100)로 송신할 수 있다. 송수신부(11)는 디바이스(100)와 데이터의 송수신이 가능하도록 구성될 수 있다. 송수신부(11)는 유선 케이블을 통해 디바이스(100)와 연결되어 데이터 송수신이 가능할 수 있다. 다만 이에 한정되는 것은 아니며, 송수신부(11)는 네트워크 환경을 통해 디바이스(100)와 데이터 송수신이 가능하도록 구성될 수도 있다. The medical communication virtual training simulation system 10 includes at least a transmission/reception unit 11 and a content generation unit 12. The transmission/reception unit 11 receives a content request from the device 100 and transmits the content request to the content generation unit 12. The content generation unit 12 generates medical simulation content corresponding to a content request signal. Then, the transmission/reception unit 11 may transmit the medical communication content provided by the content generation unit 12 to the device 100. The transceiver 11 may be configured to enable data transmission and reception with the device 100. The transceiver 11 may be connected to the device 100 through a wired cable to transmit and receive data. However, the present invention is not limited thereto, and the transceiver 11 may be configured to transmit and receive data with the device 100 through a network environment.

컨텐츠 생성부(12)는 상술한 의료 커뮤니케이션 컨텐츠를 생성하며, 송수신부(11)를 통해 의료 커뮤니케이션 컨텐츠를 디바이스(100)에 제공한다. 의료 커뮤니케이션 컨텐츠는 가상 환자를 포함하는 3차원 가상 공간 환경으로 구현될 수 있다. 예시적으로, 가상의 진료실에 가상 환자가 존재하는 3차원 가상 공간으로 구현될 수 있다. 컨텐츠 생성부(12)는 다양한 가상 공간 및 다양한 시나리오를 기초로 의료 커뮤니케이션 컨텐츠를 생성할 수 있다. 사용자는 특정 가상 공간 및 특정 시나리오를 디바이스(100)를 통해 선택하여 의료 커뮤니케이션 컨텐츠를 요청할 수 있으나, 이에 한정되는 것은 아니다. 컨텐츠 생성부(12)는 가상 공간 및 시나리오를 랜덤하게 선택하여 의료 커뮤니케이션 컨텐츠를 생성할 수도 있다.The content generation unit 12 generates the above-described medical communication content, and provides the medical communication content to the device 100 through the transmission/reception unit 11. The medical communication content may be implemented as a 3D virtual space environment including virtual patients. For example, it may be embodied as a 3D virtual space in which a virtual patient exists in a virtual treatment room. The content generation unit 12 may generate medical communication content based on various virtual spaces and various scenarios. The user may select a specific virtual space and a specific scenario through the device 100 to request medical communication content, but is not limited thereto. The content generator 12 may randomly select a virtual space and a scenario to generate medical communication content.

사용자는 제공받은 의료 커뮤니케이션 컨텐츠를 디바이스(100)를 통해 경험하게 되며, 시나리오에 따라 가상 환자와 커뮤니케이션을 수행하게 된다. 가상 환자의 말은 음성으로 제공될 수 있으나, 이에 한정되는 것은 아니다. 가상 환자의 말은 음성과 화면 상의 자막으로 함께 제공되거나, 자막만으로 제공될 수도 있다. The user experiences the provided medical communication content through the device 100 and communicates with the virtual patient according to the scenario. The speech of the virtual patient may be provided by voice, but is not limited thereto. The words of the virtual patient may be provided together with audio and subtitles on the screen, or may be provided only with subtitles.

또한, 디바이스(100)는 사용자의 음성을 인식할 수 있는 센서부를 포함하며, 인식된 음성은 의료 커뮤니케이션 컨텐츠에 반영될 수 있다. 즉, 사용자는 실제 환자와 대화하는 현실감을 느낄 수 있다. 다만, 디바이스(100)의 센서부는 사용자의 말, 의사, 행동을 의료 커뮤니케이션 컨텐츠에 반영할 수 있는 다른 입력 수단을 더 포함할 수도 있다. 또한, 사용자의 신체 일부가 가상 물체로 구현되어 의료 커뮤니케이션 컨텐츠 내에 반영될 수도 있다. 예시적으로, 사용자의 손은 의료 커뮤니케이션 컨텐츠의 가상 공간 상에 가상 손으로 구현될 수도 있다. 즉, 사용자가 커뮤니케이션 과정에서 발생하는 제스처나 손 모양 등이 가상 공간에 구현될 수 있다. In addition, the device 100 includes a sensor unit capable of recognizing a user's voice, and the recognized voice may be reflected in medical communication content. In other words, the user can feel the reality of talking to a real patient. However, the sensor unit of the device 100 may further include other input means capable of reflecting the user's words, doctors, and actions in medical communication content. In addition, a part of the user's body may be implemented as a virtual object and reflected in medical communication content. For example, the user's hand may be implemented as a virtual hand on a virtual space of medical communication content. That is, a gesture or a hand shape generated by the user in the communication process may be implemented in the virtual space.

도 3a는 디바이스(100)에 표시되는 의료 커뮤니케이션 컨텐츠의 동작 화면을 예시적으로 도시한 것이다. 도 3a는 예시적으로, 치과를 방문한 가상 환자를 치과 의사의 입장으로 커뮤니케이션하는 컨텐츠를 도시한 것이다. 의료 커뮤니케이션 컨텐츠는 사용자의 시야보다 넓은 화면을 제공하는 광시야각 영상을 포함한다. 사용자는 본인의 시야에 대응하는 크기로 광시야각 이미지의 일부에 해당하는 화면을 시청할 수 있다. 또한, 사용자는 의료 커뮤니케이션 컨텐츠의 가상 공간에서 시야를 변경하여 현재 표시되고 있는 화면이 아닌 다른 화면, 광시야각 영상의 다른 부분을 시청할 수 있다. 도 3b는 도 3a에 표시된 화면보다 아래쪽으로 사용자의 시야를 변경한 화면이다. 예시적으로, 사용자가 착용한 디바이스(100)가 HMD인 경우, 사용자가 고개를 아래쪽으로 이동한 경우이다.3A exemplarily shows an operation screen of medical communication content displayed on the device 100. FIG. 3A exemplarily shows content for communicating a virtual patient who visits the dentist to the dentist. Medical communication content includes a wide viewing angle image that provides a wider screen than the user's field of view. The user can watch a screen corresponding to a part of the wide viewing angle image with a size corresponding to his/her field of view. In addition, the user can view a different part of the screen that is currently being displayed and a different part of the wide viewing angle image by changing the field of view in the virtual space of the medical communication content. 3B is a screen in which a user's field of view is changed below the screen displayed in FIG. 3A. For example, when the device 100 worn by the user is an HMD, the user moves the head downward.

여기서, 의료 커뮤니케이션 컨텐츠를 구성하는 시나리오는 가상 환자에 대한 진료의 시작부터 진료의 종료까지의 과정을 포함한다. 의료 커뮤니케이션 컨텐츠를 구성하는 시나리오는 상기 가상 환자에 대한 정보 수집 과정, 상기 가상 환자의 질문에 대한 상기 사용자의 응답 과정, 상기 가상 환자에 대한 진단 과정 및 상기 가상 환자에 대한 치료 계획 과정을 포함할 수 있다. 상기 과정은 일반적인 의료 진료 과정으로 순차적으로 진행될 수 있다. 다만, 시나리오는 가상 환자의 질문에 대한 사용자의 응답 과정에 따라 분기될 수 있다. 즉, 사용자의 적절한 응답이 제공되는 경우, 또는 사용자가 적절한 응답을 제공하지 못하거나 늦게 대답하는 경우와 같이 사용자의 응답 과정에 따라 이어지는 시나리오가 달라질 수 있다. 즉, 본 발명의 일 실시예에 따른 의료 커뮤니케이션 컨텐츠는 정해진 시나리오대로 대화가 진행되지 않고 실제 대화와 같이 사용자의 응답에 따라 시나리오가 분기될 수 있어, 환자와의 커뮤니케이션 교육 효과가 보다 높아질 수 있다.Here, the scenario constituting the medical communication content includes a process from the start of the treatment for the virtual patient to the end of the treatment. The scenarios constituting the medical communication content may include the information collection process for the virtual patient, the user's response process to the virtual patient's question, the diagnostic process for the virtual patient, and the treatment planning process for the virtual patient. have. The above process may be sequentially performed as a general medical treatment process. However, the scenario may be diverged according to the user's response process to the virtual patient's question. That is, the following scenarios may vary depending on the user's response process, such as when a user's appropriate response is provided, or when the user fails to provide a proper response or responds late. That is, in the medical communication content according to an embodiment of the present invention, a conversation may not proceed according to a predetermined scenario, but a scenario may be diverged according to a user's response like an actual conversation, so that the communication education effect with the patient may be higher.

의료 커뮤니케이션 컨텐츠는 사용자가 가상 환자와 현재 수행하여야 하는 상호작용에 대한 설명(121) 및 이에 대한 제한 시간(122)을 사용자 인터페이스로써 제공할 수 있다. 도 3a 및 도 3b는 현재 환자와 처음 대면한 사용자가 환자에게 "인사하고 질문하기"라는 상호작용을 수행하여야 함을 알려주는 설명 및 이에 대한 제한 시간이 사용자 인터페이스로 제공되는 것으로 도시한다. 도 3b는 이러한 사용자 인터페이스가 도 3a의 사용자 시야에서 완전히 보이지 않아서 사용자 시야를 아래로 이동한 것이다.The medical communication content may provide a description 121 of a user's current interaction with a virtual patient and a time limit 122 for the interaction. 3A and 3B illustrate that a user interface is provided with a description and a time limit for informing the user that a user who first encounters the current patient should perform an “say and ask” interaction to the patient. FIG. 3B shows that this user interface is not fully visible in the user's view of FIG. 3A, thus moving the user's view down.

여기서, 환자와의 커뮤니케이션에서 가장 중요한 포인트는 공감 능력에 해당한다. 즉, 환자의 현재 상황 및 환자의 말에 대해 적절한 타이밍에 공감을 표현할 수 있다면 환자와의 상호 신뢰적인 관계를 형성할 수 있다. 본 실시예에 따른 의료 커뮤니케이션 컨텐츠는 사용자가 공감적 표현을 하여야 하는 타이밍을 사용자에게 알림하는 기능을 포함할 수 있다. 도 3c에 도시한 바와 같이, 본 실시예에 따른 의료 커뮤니케이션 컨텐츠는 환자와의 커뮤니케이션 도중 공감적 표현을 환자에게 건네어야 하는 타이밍을 가상 공간 상에 별도의 이모티콘(123)으로 사용자에게 알려줄 수 있다. 사용자는 상기 알림 이모티콘을 통해 지금 공감적 표현을 수행하여야 하는 타이밍임을 인지할 수 있고, 환자에게 위로의 말과 같은 적절한 공감적 표현을 적절한 타이밍에 전달할 수 있다.Here, the most important point in communication with the patient corresponds to empathy ability. In other words, if you can express empathy at the right timing for the patient's current situation and the patient's speech, you can form a mutually reliable relationship with the patient. The medical communication content according to the present embodiment may include a function of notifying the user of the timing at which the user should express empathy. As illustrated in FIG. 3C, the medical communication content according to the present embodiment may inform a user of a separate emoticon 123 on a virtual space with a timing for passing a sympathetic expression to a patient during communication with the patient. Through the notification emoticon, the user can recognize that it is time to perform the sympathetic expression now, and can deliver the appropriate sympathetic expression such as words of comfort to the patient at the appropriate timing.

또한, 본 실시예에 따른 의료 커뮤니케이션 컨텐츠는 사용자가 가상의 환자에게 응답하여야 하는 스크립트(124)를 제공할 수 있다. 상기 스크립트는 현재 시나리오 상 환자에게 응답하여야 하는 가장 최적의 대답일 수 있다. 상기 스크립트는 사용자가 정면을 응시하고 있는 경우에는 사용자의 시야에 표시되지 않는다. 즉, 스크립트는 광시야각 영상에서 사용자의 시선이 정면이 아닌 방향을 응시하였을 때 사용자에게 표시될 수 있다. 예시적으로, 사용자가 화면의 아래 방향으로 시선을 이동하는 경우 스크립트가 표시될 수 있다. 도 3d는 사용자가 화면의 아래 방향으로 시선을 이동하였을 때, 환자의 특정 질문에 대한 적절한 대답이 스크립트로 제공되는 것을 도시한 것이며, 도 3e는 가상 환자에 대한 치료 계획 과정을 설명하는 적절한 스크립트가 제공되는 것을 도시한 것이다. 환자와의 커뮤니케이션이 다소 미숙한 사용자는 상기 스크립트를 보조적으로 활용하여 환자와의 대화를 원활히 수행할 수 있으며, 환자와의 커뮤니케이션 능력을 효과적으로 훈련할 수 있다. In addition, the medical communication content according to the present embodiment may provide a script 124 that a user should respond to a virtual patient. The script may be the most optimal answer to respond to the patient in the current scenario. The script is not displayed in the user's view when the user is staring at the front. That is, the script may be displayed to the user when the user's gaze gazes in a direction other than the front in a wide viewing angle image. For example, a script may be displayed when the user moves the gaze in the downward direction of the screen. FIG. 3D shows that when the user moves the gaze in the downward direction of the screen, an appropriate answer to a patient's specific question is provided as a script, and FIG. 3E shows an appropriate script describing a treatment planning process for a virtual patient It shows what is provided. A user who is somewhat inexperienced with the patient can use the script as an auxiliary to smoothly communicate with the patient, and can effectively train the communication ability with the patient.

또한, 본 실시예에 따른 의료 커뮤니케이션 컨텐츠는 도 3f와 같이, 가상 환자에 대한 진단 과정에서 환자에 대한 검사 기록(125), 예를 들어, X-ray 사진 등이 함께 표시될 수 있다. 사용자는 표시되는 검사 기록을 기초로 가상 환자를 진단할 수 있다. 의료 커뮤니케이션 컨텐츠에서 상기 검사 기록은 랜덤하게 제공될 수 있다. 따라서, 사용자는 가상 공간 내에서 가상 환자의 병을 진료, 진단할 수 있고, 이와 관련된 커뮤니케이션을 가상 환자와 수행할 수 있다.In addition, in the medical communication content according to the present embodiment, as shown in FIG. 3F, a test record 125 for a patient, for example, an X-ray picture, etc. may be displayed together in a diagnosis process for a virtual patient. The user can diagnose the virtual patient based on the displayed test record. In medical communication content, the test record may be provided at random. Therefore, the user can treat and diagnose the disease of the virtual patient in the virtual space, and communicate with the virtual patient.

본 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템(10)은 피드백 생성부(13)를 더 포함할 수 있다.The medical communication virtual training simulation system 10 according to the present embodiment may further include a feedback generator 13.

상기 의료 커뮤니케이션 컨텐츠가 디바이스를 통해 사용자에게 제공되는 동안, 사용자의 행동은 모두 기록될 수 있다. 피드백 생성부(13)은 상기 의료 커뮤니케이션 컨텐츠가 사용자에게 제공되는 동안 사용자의 행동을 기록한 피드백 컨텐츠를 생성할 수 있다. 사용자의 행동은 상기 디바이스를 통해 기록되어, 송수신부(11)를 통해 피드백 생성부(13)로 제공될 수 있다.While the medical communication content is provided to the user through the device, all actions of the user can be recorded. The feedback generator 13 may generate feedback content that records the user's behavior while the medical communication content is provided to the user. The user's actions may be recorded through the device and provided to the feedback generator 13 through the transceiver 11.

피드백 생성부(13)에서 생성된 피드백 컨텐츠는 제공된 의료 커뮤니케이션 컨텐츠 및 이에 반응한 사용자의 행동을 포함할 수 있다. 피드백 컨텐츠는 사용자에게 제공된 의료 커뮤니케이션 컨텐츠 및 이에 반응한 사용자의 행동이 함께 기록된 영상 파일일 수 있다. 여기서, 사용자의 행동은 사용자가 의료 커뮤니케이션 컨텐츠의 학습 도중에 가상 환자와 대화한 음성뿐만 아니라 사용자의 제스처 및 손 모양 등을 포함할 수 있다. 사용자는 피드백 컨텐츠를 통해 가상 환자와 본인이 어떠한 커뮤니케이션을 수행하였는지 여부를 확인할 수 있다. 사용자는 가상 환자의 질문에 대한 본인의 답변 내용, 답변 시간의 적절성, 공감 표현의 내용 및 타이밍, 환자의 상태에 대한 검진의 정확성 등을 확인할 수 있다. 즉, 피드백 컨텐츠는 사용자에게 브리핑 환경을 제공할 수 있으며, 사용자의 자기 성찰(Self-reflection)을 유도하여, 사용자의 학습 효과를 보다 향상시킬 수 있다. 또한, 피드백 생성부(13)는 사용자에게 가상 환자의 질문에 대한 본인의 답변 내용, 답변 시간의 적절성, 공감 표현의 내용 및 타이밍, 환자의 상태에 대한 검진의 정확성 등을 기초로 사용자에 대한 등급 평가를 제공할 수도 있다. The feedback content generated by the feedback generator 13 may include provided medical communication content and user actions in response thereto. The feedback content may be an image file in which medical communication content provided to the user and actions of the user in response thereto are recorded together. Here, the user's behavior may include a user's gesture and a hand shape, as well as a voice in which the user has spoken with a virtual patient during learning of medical communication content. The user can check what communication the virtual patient and the user have performed through the feedback content. The user can check the content of his/her answer to the virtual patient's question, the appropriateness of the response time, the content and timing of empathy, and the accuracy of the checkup for the patient's condition. That is, the feedback content may provide a briefing environment for the user, and induce self-reflection of the user, thereby improving the learning effect of the user. In addition, the feedback generator 13 grades the user based on the user's answer content to the virtual patient's question, the appropriateness of the response time, the content and timing of empathy, and the accuracy of the checkup on the patient's condition. You can also provide an assessment.

이하, 본 발명의 다른 실시예에 따른 디바이스에 대해 설명하도록 한다. 도 4는 의료 커뮤니케이션 컨텐츠를 표시하는 디바이스(100)의 구성을 도시한 블록도이다. Hereinafter, a device according to another embodiment of the present invention will be described. 4 is a block diagram showing the configuration of a device 100 for displaying medical communication content.

도 4를 참조하면, 디바이스(100)는 센서부(101), 표시부(102), 제어부(103)를 포함한다. 일 실시예에서 디바이스(100)는 송수신부(104) 및/또는 저장부(105)를 더 포함할 수도 있다.Referring to FIG. 4, the device 100 includes a sensor unit 101, a display unit 102, and a control unit 103. In one embodiment, the device 100 may further include a transmission/reception unit 104 and/or a storage unit 105.

실시예들에 따른 디바이스(100)는, 전적으로 하드웨어이거나, 전적으로 소프트웨어이거나, 또는 부분적으로 하드웨어이고 부분적으로 소프트웨어인 측면을 가질 수 있다. 예컨대, 본 명세서에서 디바이스(100)를 구성하는 각각의 "부(unit)"는 하드웨어 및 이를 구동시키기 위한 운용 소프트웨어를 통칭할 수 있다. 또한, 하드웨어는 CPU 또는 다른 프로세서(processor)를 포함하는 데이터 처리 기기일 수 있다. 또한, 하드웨어에 의해 구동되는 소프트웨어는 실행중인 프로세스, 객체(object), 실행파일(executable), 실행 스레드(thread of execution), 프로그램(program) 등을 지칭할 수 있다.The device 100 according to embodiments may have aspects that are entirely hardware, entirely software, or partially hardware and partially software. For example, in this specification, each “unit” constituting the device 100 may collectively refer to hardware and operating software for driving the same. Further, the hardware may be a data processing device including a CPU or other processor. In addition, software driven by hardware may refer to a running process, an object, an executable, a thread of execution, a program, or the like.

또한, 실시예들에 따른 디바이스(100)를 구성하는 각각의 부는 반드시 물리적으로 구분되는 별개의 구성요소를 지칭하는 것으로 의도되지 않는다. 도 1에서 센서부(101), 표시부(102) 및 제어부(103) 등은 서로 구분되는 별개의 블록으로 도시되나, 실시예에 따라서는 센서부(101), 표시부(102) 및 제어부(103) 중 일부 또는 전부가 하나의 소자로 집적화될 수도 있다. 예컨대, 마이크로프로세서(microprocessor)와 같은 처리 수단, 가속도 센서 및 터치스크린을 갖춘 스마트폰(smartphone)이 전술한 센서부(101), 표시부(102) 및 제어부(103) 중 하나 이상에 해당될 수 있으며, 이러한 스마트폰이 머리에 장착 가능한 다른 부재(미도시)와 결합되어 실시예들에 따른 디바이스(100)를 구성할 수도 있다. 즉, 본 명세서에 기재된 디바이스(100)는 다른 부재를 통해 헤드 마운트용으로 사용 가능한 스마트폰일 수도 있다. Also, each part constituting the device 100 according to the embodiments is not intended to refer to a separate component that is physically separated. In FIG. 1, the sensor unit 101, the display unit 102, and the control unit 103 are shown as separate blocks, but according to embodiments, the sensor unit 101, the display unit 102, and the control unit 103 Some or all of them may be integrated into one device. For example, a smartphone having a processing means such as a microprocessor, an acceleration sensor, and a touch screen may correspond to one or more of the above-described sensor unit 101, display unit 102, and control unit 103, , Such a smart phone may be combined with another member (not shown) that can be mounted on the head to configure the device 100 according to embodiments. That is, the device 100 described in this specification may be a smartphone usable for head mounting through another member.

센서부(101)는 사용자의 동작 및 음성을 인식할 수 있다. 구체적으로, 사용자가 디바이스(100)를 착용한 경우, 센서부(101)는 디바이스(100)를 착용한 사용자의 머리 움직임을 측정하기 위한 부분이다. 이를 위하여, 센서부(101)는 사용자의 움직임에 대한 센서 측정값을 얻을 수 있는 하나 또는 복수의 종류의 센서를 포함할 수 있다. 예를 들어, 센서부(101)는 가속도계(accelerometer), 자기력계(magnetometer) 및/또는 자이로스코프(gyroscope)로 이루어질 수 있으나, 이에 한정되는 것은 아니다. 센서부(101)에 의해 얻어진 측정값은 사용자 시점에 따라 표시되는 이미지에 대응되는 시점을 변화시키는 데 사용될 수 있다. 또한, 센서부(101)는 사용자의 손동작을 인식하는 센서를 더 포함할 수 있다. 인식된 사용자의 손동작은 제어부(103)에 의해 처리되어 의료 커뮤니케이션 컨텐츠의 가상 공간에 가상의 손으로 구현될 수 있다.The sensor unit 101 may recognize a user's motion and voice. Specifically, when the user wears the device 100, the sensor unit 101 is a part for measuring the head movement of the user wearing the device 100. To this end, the sensor unit 101 may include one or more types of sensors capable of obtaining sensor measurement values for user movement. For example, the sensor unit 101 may be formed of an accelerometer, a magnetometer, and/or a gyroscope, but is not limited thereto. The measurement value obtained by the sensor unit 101 may be used to change a viewpoint corresponding to an image displayed according to a user viewpoint. Also, the sensor unit 101 may further include a sensor that recognizes a user's hand gesture. The recognized user's hand gesture may be processed by the controller 103 and implemented as a virtual hand in the virtual space of the medical communication content.

표시부(102)는 사용자의 눈 부근에 위치하여 이미지를 표시하기 위한 부분이다. 표시부(102)는 액정표시장치(Liquid Crystal Display; LCD) 또는 다른 적절한 화상 표시 소자를 포함할 수 있다. 또한, 표시부(102)는 화상 표시 소자에 의해 표시되는 이미지의 초점이 사용자의 눈 또는 그 부근에 맺히게 하기 위한 볼록 렌즈 등 하나 이상의 광학 소자를 더 포함할 수도 있다. 본 명세서에서 표시부(102)에 표시되는 이미지는, 사진과 같은 단일 이미지 또는 영상과 같은 일련의 연속된 이미지를 모두 포함하는 것으로 의도된다. 예컨대, 영상 및/또는 음성을 포함하는 동영상 등의 컨텐츠(contents)도 본 명세서에 기재된 이미지에 포함될 수 있다. 상술한 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템(10)에서 제공되는 의료 커뮤니케이션 컨텐츠는 표시부(102)에 표시될 수 있다. The display unit 102 is a portion for displaying an image located near the user's eyes. The display unit 102 may include a liquid crystal display (LCD) or other suitable image display device. In addition, the display unit 102 may further include one or more optical elements such as a convex lens for focusing the image displayed by the image display element on or near the user's eye. In the present specification, the image displayed on the display unit 102 is intended to include both a single image such as a photograph or a series of consecutive images such as an image. For example, contents, such as a video including video and/or audio, may also be included in the image described herein. The medical communication content provided by the above-described medical communication virtual training simulation system 10 may be displayed on the display unit 102.

일 실시예에서, 디바이스(100)는 송수신부(104)를 더 포함하며, 표시부(102)에 표시되는 의료 커뮤니케이션 컨텐츠는 송수신부(104)를 통해 수신되는 것일 수 있다. 송수신부(104)는 유선 케이블 또는 네트워크를 통해 의료 커뮤니케이션 컨텐츠를 수신할 수도 있다. 다만, 이에 한정되는 것은 아니며, 표시부(102)에서 표시되는 의료 커뮤니케이션 컨텐츠는 저장부(105)에 미리 저장된 것일 수도 있다. 저장부(105)는 표시부(102)에 표시될 의료 커뮤니케이션 컨텐츠 또는 다른 추가적인 데이터를 저장할 수 있는 저장소를 포함한다.In one embodiment, the device 100 further includes a transmission/reception unit 104, and medical communication content displayed on the display unit 102 may be received through the transmission/reception unit 104. The transceiver 104 may receive medical communication content through a wired cable or a network. However, the present invention is not limited thereto, and the medical communication content displayed on the display unit 102 may be stored in advance in the storage unit 105. The storage unit 105 includes a storage for storing medical communication content or other additional data to be displayed on the display unit 102.

제어부(103)는 디바이스(100)의 전반적인 동작 과정, 의료 커뮤니케이션 컨텐츠를 요청하고, 이를 실행시켜, 사용자에게 제공하는 과정을 제어할 수 있다. 또한, 제어부(103)는 센서부(101) 및 표시부(102)에 통신 가능하게 연결되어, 센서부(101)에 의해 얻어진 측정값에 기초하여 표시부(102)에 표시되는 의료 커뮤니케이션 컨텐츠를 제어한다. The control unit 103 may control an overall operation process of the device 100, a request for medical communication content, and executing it, thereby providing a process to a user. In addition, the control unit 103 is communicatively connected to the sensor unit 101 and the display unit 102 to control medical communication content displayed on the display unit 102 based on the measurement values obtained by the sensor unit 101. .

제어부(103)는 센서부(101)에 의해 측정된 사용자의 동작 및 음성에 따라 표시부(102)에 표시되는 의료 커뮤니케이션 컨텐츠를 제어할 수 있다. 제어부(103)는 센서부(101)에 의해 측정된 사용자의 움직임에 따라 표시부(102)에 표시되는 의료 커뮤니케이션 컨텐츠에 대응되는 시점을 변화시킬 수 있다. 이는 광시야각 이미지의 일부를 출력하면서 디바이스(100)를 착용한 사용자의 머리가 움직이는 것에 대응하여 이미지의 표시되는 부분을 이동시킴으로써 사용자가 현실감을 느낄 수 있게 하는 것으로, 종래의 디바이스(100)에 사용되는 것과 동일한 표시 형태이다. 예컨대, 사용자가 고개를 오른쪽으로 돌릴 경우, 표시부(102)에 표시되는 이미지 전체를 이에 대응하여 좌측으로 이동시킴으로써, 사용자로 하여금 이미지로 표시된 가상 공간에서 고개를 돌려 오른편을 바라본 것과 같이 느끼도록 하는 것이다. 또한, 제어부(103)는 의료 커뮤니케이션 컨텐츠가 제공되는 동안 제공되는 의료 커뮤니케이션과 사용자의 행동(음성 및/또는 동작)을 기록하여 저장부(105)에 저장할 수 있다.The control unit 103 may control medical communication content displayed on the display unit 102 according to a user's operation and voice measured by the sensor unit 101. The control unit 103 may change a viewpoint corresponding to the medical communication content displayed on the display unit 102 according to the user's movement measured by the sensor unit 101. This allows the user to feel reality by moving the displayed part of the image in response to the movement of the user's head wearing the device 100 while outputting a part of the wide viewing angle image, which is used in the conventional device 100 It is the same display form as it is. For example, when the user turns the head to the right, the entire image displayed on the display unit 102 is moved to the left in response to this, so that the user feels as if looking at the right side by turning the head in the virtual space indicated by the image. . In addition, the control unit 103 may record the medical communication and the user's actions (voice and/or actions) provided while the medical communication content is being provided and store it in the storage unit 105.

본 실시예에 따른 디바이스(100)는 사용자가 현실감을 느낄 수 있게 하는 환경을 제공하여, 사용자로 하여금 표시되는 의료 커뮤니케이션 컨텐츠에 보다 몰두할 수 있게 한다. 이에 따라, 사용자의 의료 커뮤니케이션 학습 효과는 보다 향상될 수 있다. The device 100 according to the present embodiment provides an environment that allows the user to feel reality, thereby allowing the user to be more immersed in the displayed medical communication content. Accordingly, the user's medical communication learning effect can be further improved.

이하, 본 발명의 또 다른 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 방법에 대해 설명하도록 한다. Hereinafter, a method for simulating medical communication virtual training according to another embodiment of the present invention will be described.

도 5는 본 발명의 또 다른 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 방법의 순서도이다. 5 is a flowchart of a method for simulating medical communication virtual training according to another embodiment of the present invention.

도 5를 참조하면, 본 발명의 또 다른 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 방법은 사용자로부터 의료 커뮤니케이션 컨텐츠 요청을 수신하는 단계(S100), 상기 사용자에게 3차원 가상 공간을 제공하는 디바이스를 통해 상기 의료 커뮤니케이션 컨텐츠를 제공하는 단계(S110); 상기 의료 커뮤니케이션 컨텐츠가 상기 사용자에게 제공되는 동안, 기록된 상기 사용자의 행동을 기초로 피드백 컨텐츠를 생성하는 단계(S120); 및 상기 피드백 컨텐츠를 상기 사용자에게 제공하는 단계(S130)를 포함한다. Referring to FIG. 5, a method for simulating medical communication virtual training according to another embodiment of the present invention includes receiving a request for medical communication content from a user (S100), through a device providing a 3D virtual space to the user. Providing medical communication content (S110); Generating feedback content based on the recorded behavior of the user while the medical communication content is provided to the user (S120); And providing the feedback content to the user (S130).

본 실시예에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 방법은 상술한 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템(10)에서 수행되는 방법으로, 도 1 내지 도 3f가 더 참조될 수 있다. The medical communication virtual training simulation method according to the present embodiment is a method performed in the medical communication virtual training simulation system 10 described above, and FIGS. 1 to 3F may be further referred to.

먼저, 사용자로부터 의료 커뮤니케이션 컨텐츠 요청을 수신한다(S100).First, a medical communication content request is received from a user (S100).

사용자는 의료 커뮤니케이션 컨텐츠가 재생되는 디바이스(100)를 통해 상기 컨텐츠를 요청할 수 있다. 디바이스(100)는 표시부를 통해 사용자에게 3차원 가상 공간을 제공하는 장치일 수 있다. 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템(10)은 상기 요청에 대응하는 의료 시뮬레이션 컨텐츠를 생성한다. 상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 의사 입장에서 가상 환자와 시나리오에 따라 대화를 수행하는 컨텐츠에 해당한다. 의료 커뮤니케이션 컨텐츠는 가상 환자를 포함하는 3차원 가상 공간 환경으로 구현될 수 있다. 예시적으로, 가상의 진료실에 가상 환자가 존재하는 3차원 가상 공간으로 구현될 수 있다.The user may request the content through the device 100 in which the medical communication content is reproduced. The device 100 may be an apparatus that provides a 3D virtual space to a user through a display unit. The medical communication virtual training simulation system 10 generates medical simulation content corresponding to the request. The medical communication content corresponds to content in which the user performs a conversation according to a scenario with a virtual patient from a doctor's point of view. The medical communication content may be implemented as a 3D virtual space environment including virtual patients. For example, it may be embodied as a 3D virtual space in which a virtual patient exists in a virtual treatment room.

다음으로, 상기 사용자에게 3차원 가상 공간을 제공하는 디바이스를 통해 상기 의료 커뮤니케이션 컨텐츠를 제공한다(S110).Next, the medical communication content is provided through a device that provides a 3D virtual space to the user (S110).

사용자는 제공받은 의료 커뮤니케이션 컨텐츠를 디바이스(100)를 통해 경험하게 되며, 시나리오에 따라 가상 환자와 커뮤니케이션을 수행하게 된다. 가상 환자의 말은 음성으로 제공될 수 있으나, 이에 한정되는 것은 아니다. 가상 환자의 말은 음성과 화면 상의 자막으로 함께 제공되거나, 자막만으로 제공될 수도 있다. 여기서, 의료 커뮤니케이션 컨텐츠를 구성하는 시나리오는 가상 환자에 대한 진료의 시작부터 진료의 종료까지 과정을 포함한다. 의료 커뮤니케이션 컨텐츠를 구성하는 시나리오는 상기 가상 환자에 대한 정보 수집 과정, 상기 가상 환자의 질문에 대한 상기 사용자의 응답 과정, 상기 가상 환자에 대한 진단 과정 및 상기 가상 환자에 대한 치료 계획 과정을 포함할 수 있다. 상기 과정은 일반적인 의료 진료 과정으로 순차적으로 진행될 수 있다. 상기 시나리오는 상기 가상 환자의 질문에 대한 상기 사용자의 응답 과정에 따라 분기될 수 있다. 또한, 상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 공감적 표현을 하여야 하는 타이밍을 상기 사용자에게 알림하는 기능을 포함할 수 있다. 또한, 상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 상기 가상의 환자에게 응답하여야 하는 스크립트를 제공할 수 있다. 상기 의료 커뮤니케이션 컨텐츠는 상기 사용자의 시야보다 넓은 화면을 제공하는 광시야각 영상을 포함하며, 상기 스크립트는 상기 사용자가 정면을 응시하고 있는 경우에는 사용자의 시야에 표시되지 않을 수 있다. The user experiences the provided medical communication content through the device 100 and communicates with the virtual patient according to the scenario. The speech of the virtual patient may be provided by voice, but is not limited thereto. The words of the virtual patient may be provided together with audio and subtitles on the screen, or may be provided only with subtitles. Here, the scenario constituting the medical communication content includes a process from the start of the treatment for the virtual patient to the end of the treatment. The scenarios constituting the medical communication content may include the information collection process for the virtual patient, the user's response process to the virtual patient's question, the diagnostic process for the virtual patient, and the treatment planning process for the virtual patient. have. The above process may be sequentially performed as a general medical treatment process. The scenario may be branched according to the user's response process to the virtual patient's question. In addition, the medical communication content may include a function of notifying the user of the timing at which the user should express empathy. In addition, the medical communication content may provide a script that the user should respond to the virtual patient. The medical communication content includes a wide viewing angle image that provides a wider screen than the user's field of view, and the script may not be displayed in the user's field of view when the user is staring in front.

다음으로, 의료 커뮤니케이션 컨텐츠가 상기 사용자에게 제공되는 동안, 기록된 상기 사용자의 행동을 기초로 피드백 컨텐츠를 생성한다(S120).Next, while medical communication content is provided to the user, feedback content is generated based on the recorded behavior of the user (S120).

상기 의료 커뮤니케이션 컨텐츠가 디바이스를 통해 사용자에게 제공되는 동안, 사용자의 행동은 모두 기록될 수 있다. 기록된 사용자의 행동을 기초로 피드백 컨텐츠가 생성될 수 있다. 생성된 피드백 컨텐츠는 제공된 의료 커뮤니케이션 컨텐츠 및 이에 반응한 사용자의 행동을 포함할 수 있다. 피드백 컨텐츠는 사용자에게 제공된 의료 커뮤니케이션 컨텐츠 및 이에 반응한 사용자의 행동이 함께 기록된 영상 파일일 수 있다. 여기서, 사용자의 행동은 사용자가 의료 커뮤니케이션 컨텐츠의 학습 도중에 가상 환자와 대화한 음성뿐만 아니라 사용자의 제스처 및 손 모양 등을 포함할 수 있다. While the medical communication content is provided to the user through the device, all actions of the user can be recorded. Feedback content may be generated based on the recorded user behavior. The generated feedback content may include provided medical communication content and user actions in response to it. The feedback content may be an image file in which medical communication content provided to the user and actions of the user in response thereto are recorded together. Here, the user's behavior may include a user's gesture and a hand shape as well as a voice in which the user has spoken with a virtual patient during learning of medical communication content.

피드백 컨텐츠를 상기 사용자에게 제공한다(S130).Feedback content is provided to the user (S130).

생성된 피드백 컨텐츠는 사용자에게 제공될 수 있다. 사용자는 피드백 컨텐츠를 통해 가상 환자와 본인이 어떠한 커뮤니케이션을 수행하였는지 여부를 확인할 수 있다. 사용자는 가상 환자의 질문에 대한 본인의 답변 내용, 답변 시간의 적절성, 공감 표현의 내용 및 타이밍, 환자의 상태에 대한 검진의 정확성 등을 확인할 수 있다. 즉, 피드백 컨텐츠는 사용자에게 브리핑 환경을 제공할 수 있으며, 사용자의 자기 성찰(Self-reflection)을 유도하여, 사용자의 학습 효과를 보다 향상시킬 수 있다. 또한, 사용자에게 가상 환자의 질문에 대한 본인의 답변 내용, 답변 시간의 적절성, 공감 표현의 내용 및 타이밍, 환자의 상태에 대한 검진의 정확성 등을 기초로 사용자에 대한 등급 평가가 제공될 수도 있다.The generated feedback content can be provided to the user. The user can check what communication the virtual patient and the user have performed through the feedback content. The user can check the content of his/her answer to the virtual patient's question, the appropriateness of the response time, the content and timing of empathy, and the accuracy of the checkup for the patient's condition. That is, the feedback content can provide a briefing environment for the user, and induce the user's self-reflection, thereby improving the user's learning effect. In addition, the user may be provided with a rating evaluation for the user based on the content of the user's answer to the virtual patient's question, the appropriateness of the response time, the content and timing of empathy, and the accuracy of the examination of the patient's condition.

이상에서 설명한 실시예들에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 방법에 의한 동작은, 적어도 부분적으로 컴퓨터 프로그램으로 구현되고 컴퓨터로 읽을 수 있는 기록매체에 기록될 수 있다. 실시예들에 따른 의료 커뮤니케이션 가상 훈련 시뮬레이션 방법에 의한 동작을 구현하기 위한 프로그램이 기록되고 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수도 있다. 또한, 본 실시예를 구현하기 위한 기능적인 프로그램, 코드 및 코드 세그먼트(segment)들은 본 실시예가 속하는 기술 분야의 통상의 기술자에 의해 용이하게 이해될 수 있을 것이다.The operation by the virtual communication simulation training method according to the above-described embodiments may be at least partially implemented in a computer program and recorded in a computer-readable recording medium. The program for realizing the operation by the medical communication virtual training simulation method according to the embodiments is recorded, and the computer-readable recording medium includes all types of recording devices in which data that can be read by the computer are stored. Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disks, and optical data storage devices. In addition, the computer readable recording medium may be distributed over network coupled computer systems so that the computer readable code is stored and executed in a distributed manner. In addition, functional programs, codes, and code segments for implementing the present embodiment will be readily understood by those skilled in the art to which this embodiment belongs.

이상에서는 실시예들을 참조하여 설명하였지만 본 발명은 이러한 실시예들 또는 도면에 의해 한정되는 것으로 해석되어서는 안 되며, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although described above with reference to embodiments, the present invention should not be construed as being limited by these embodiments or the drawings, and those skilled in the art will appreciate the spirit and scope of the present invention as set forth in the claims below. It will be understood that various modifications and changes can be made to the present invention without departing from the scope.

10: 의료 커뮤니케이션 가상 훈련 시뮬레이션 시스템
11: 송수신부
12: 컨텐츠 생성부
13: 피드백 생성부
100: 디바이스10: medical communication virtual training simulation system
11: Transceiver
12: content creation unit
13: feedback generator
100: device

Claims (15)

사용자로부터 의료 커뮤니케이션 컨텐츠 요청을 수신하고, 상기 의료 커뮤니케이션 컨텐츠를 송신하는 송수신부;
상기 의료 커뮤니케이션 컨텐츠를 생성하는 컨텐츠 생성부; 및
상기 의료 커뮤니케이션 컨텐츠가 상기 사용자에게 제공되는 동안 상기 사용자의 행동을 기록한 피드백 컨텐츠를 생성하는 피드백 생성부를 포함하고,
상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 의사 입장에서 가상 환자와 시나리오에 따라 대화를 수행하는 컨텐츠에 해당하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 시스템.A transmitting and receiving unit receiving a medical communication content request from a user and transmitting the medical communication content;
A content generator that generates the medical communication content; And
And a feedback generator configured to generate feedback content that records the user's behavior while the medical communication content is provided to the user,
The medical communication content is a virtual training simulation system of medical communication corresponding to content in which the user performs a conversation according to a scenario with a virtual patient from a doctor's point of view. 제1 항에 있어서,
상기 시나리오는 적어도 상기 가상 환자에 대한 정보 수집 과정, 상기 가상 환자의 질문에 대한 상기 사용자의 응답 과정, 상기 가상 환자에 대한 진단 과정 및 상기 가상 환자에 대한 치료 계획 과정을 포함하며,
상기 시나리오는 상기 가상 환자의 질문에 대한 상기 사용자의 응답 과정에 따라 분기되는 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 시스템.According to claim 1,
The scenario includes at least the information collection process for the virtual patient, the user's response process to the virtual patient's question, the diagnostic process for the virtual patient, and the treatment planning process for the virtual patient,
The scenario is a virtual training simulation system of medical communication, characterized in that branching according to the user's response process to the virtual patient's question. 제1 항에 있어서,
상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 공감적 표현을 하여야 하는 타이밍을 상기 사용자에게 알림하는 기능을 포함하는 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 시스템.According to claim 1,
The medical communication content is a virtual training simulation system of medical communication, characterized in that it comprises a function for notifying the user of the timing at which the user should empathize. 제1 항에 있어서,
상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 상기 가상의 환자에게 응답하여야 하는 스크립트를 제공하는 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 시스템.According to claim 1,
The medical communication content is a virtual training simulation system of medical communication, characterized in that to provide a script that the user should respond to the virtual patient. 제4 항에 있어서,
상기 의료 커뮤니케이션 컨텐츠는 상기 사용자의 시야보다 넓은 화면을 제공하는 광시야각 영상을 포함하며,
상기 스크립트는 상기 사용자가 정면을 응시하고 있는 경우에는 사용자의 시야에 표시되지 않는 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 시스템.According to claim 4,
The medical communication content includes a wide viewing angle image that provides a wider screen than the user's field of view,
The script is a virtual training simulation system of medical communication, characterized in that when the user is staring at the front is not displayed in the user's field of view. 제1 항에 있어서,
상기 피드백 컨텐츠는 제공된 의료 커뮤니케이션 컨텐츠 및 상기 제공된 의료 커뮤니케이션 컨텐츠에 반응한 사용자의 행동을 포함하는 영상 파일인 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 시스템.According to claim 1,
The feedback content is a virtual training simulation system of medical communication, characterized in that the video file containing the provided medical communication content and the user's actions in response to the provided medical communication content. 사용자로부터 의료 커뮤니케이션 컨텐츠 요청을 수신하는 단계;
상기 사용자에게 3차원 가상 공간을 제공하는 디바이스를 통해 상기 의료 커뮤니케이션 컨텐츠를 제공하는 단계;
상기 의료 커뮤니케이션 컨텐츠가 상기 사용자에게 제공되는 동안 기록된 상기 사용자의 행동을 기초로 피드백 컨텐츠를 생성하는 단계; 및
상기 피드백 컨텐츠를 상기 사용자에게 제공하는 단계를 포함하고,
상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 의사 입장에서 가상 환자와 시나리오에 따라 대화를 수행하는 컨텐츠에 해당하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 방법.Receiving a medical communication content request from a user;
Providing the medical communication content through a device that provides a 3D virtual space to the user;
Generating feedback content based on the user's behavior recorded while the medical communication content is provided to the user; And
And providing the feedback content to the user,
The medical communication content is a virtual training simulation method of medical communication corresponding to the content in which the user performs a conversation according to a scenario with a virtual patient from a doctor's point of view. 제7 항에 있어서,
상기 시나리오는 적어도 상기 가상 환자에 대한 정보 수집 과정, 상기 가상 환자의 질문에 대한 상기 사용자의 응답 과정, 상기 가상 환자에 대한 진단 과정 및 상기 가상 환자에 대한 치료 계획 과정을 포함하며,
상기 시나리오는 상기 가상 환자의 질문에 대한 상기 사용자의 응답 과정에 따라 분기되는 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 방법.The method of claim 7,
The scenario includes at least the information collection process for the virtual patient, the user's response process to the virtual patient's question, the diagnostic process for the virtual patient, and the treatment planning process for the virtual patient,
The scenario is a virtual training simulation method of medical communication, characterized in that branching according to the user's response process to the virtual patient's question. 제7 항에 있어서,
상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 공감적 표현을 하여야 하는 타이밍을 상기 사용자에게 알림하는 기능을 포함하는 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 방법.The method of claim 7,
The medical communication content is a virtual training simulation method of medical communication, characterized in that it comprises a function for notifying the user of the timing at which the user should empathize. 제7 항에 있어서,
상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 상기 가상의 환자에게 응답하여야 하는 스크립트를 제공하는 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 방법.The method of claim 7,
The medical communication content is a virtual training simulation method of medical communication, characterized in that to provide a script that the user should respond to the virtual patient. 제10 항에 있어서,
상기 의료 커뮤니케이션 컨텐츠는 상기 사용자의 시야보다 넓은 화면을 제공하는 광시야각 영상을 포함하며,
상기 스크립트는 상기 사용자가 정면을 응시하고 있는 경우에는 사용자의 시야에 표시되지 않는 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 방법.The method of claim 10,
The medical communication content includes a wide viewing angle image that provides a wider screen than the user's field of view,
The script is a virtual training simulation method of medical communication, characterized in that when the user is staring at the front is not displayed in the user's field of view. 제7 항에 있어서,
상기 피드백 컨텐츠는 제공된 의료 커뮤니케이션 컨텐츠 및 상기 제공된 의료 커뮤니케이션 컨텐츠에 반응한 사용자의 행동을 포함하는 영상 파일인 것을 특징으로 하는 의료 커뮤니케이션의 가상 훈련 시뮬레이션 방법.The method of claim 7,
The feedback content is a virtual communication simulation method of medical communication, characterized in that the image file including the provided medical communication content and the user's actions in response to the provided medical communication content. 하드웨어와 결합되어 제7항 내지 제12항 중 어느 한 항에 따른 의료 커뮤니케이션의 가상 훈련 시뮬레이션 방법을 실행하도록 매체에 저장된 컴퓨터 프로그램.A computer program stored in a medium to execute a virtual training simulation method of medical communication according to any one of claims 7 to 12 in combination with hardware. 의료 커뮤니케이션 컨텐츠를 표시하는 디바이스로서,
사용자의 동작 및 음성을 인식하는 센서부;
상기 의료 커뮤니케이션 컨텐츠를 표시하는 표시부; 및
상기 센서부에 의해 측정된 사용자의 동작 및 음성에 따라 상기 표시부에 표시되는 의료 커뮤니케이션 컨텐츠를 제어하는 제어부를 포함하고,
상기 의료 커뮤니케이션 컨텐츠는 상기 사용자가 의사 입장에서 가상 환자와 시나리오에 따라 대화를 수행하는 컨텐츠에 해당하는 것을 특징으로 하는 디바이스.A device for displaying medical communication content,
A sensor unit for recognizing a user's motion and voice;
A display unit that displays the medical communication content; And
It includes a control unit for controlling the medical communication content displayed on the display unit according to the user's operation and voice measured by the sensor unit,
The medical communication content is a device characterized in that the user corresponds to the content to perform a conversation according to the scenario with the virtual patient from the doctor's point of view. 제14 항에 있어서,
상기 디바이스는 헤드 마운트형 디스플레이 장치(Head Mounted Display; HMD)인 것을 특징으로 하는 디바이스.The method of claim 14,
The device is a head mounted display device (Head Mounted Display; HMD) device.
KR1020190009827A 2019-01-25 2019-01-25 Medical communication virtual training simulation system and method KR102160669B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190009827A KR102160669B1 (en) 2019-01-25 2019-01-25 Medical communication virtual training simulation system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190009827A KR102160669B1 (en) 2019-01-25 2019-01-25 Medical communication virtual training simulation system and method

Publications (2)

Publication Number Publication Date
KR20200092659A true KR20200092659A (en) 2020-08-04
KR102160669B1 KR102160669B1 (en) 2020-09-28

Family

ID=72049069

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190009827A KR102160669B1 (en) 2019-01-25 2019-01-25 Medical communication virtual training simulation system and method

Country Status (1)

Country Link
KR (1) KR102160669B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102381972B1 (en) * 2021-08-02 2022-04-04 (주) 마인즈에이아이 Method and device for supporting addict of addictive preferred item to perform proper adaptive behavior on antisocially preferred item
KR20240084830A (en) 2022-12-07 2024-06-14 가톨릭대학교 산학협력단 Metaverse server for providing metaverse service in hospital environment, method and program

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102423849B1 (en) * 2020-09-29 2022-07-21 인제대학교 산학협력단 System for providing treatment and clinical skill simulation using virtual reality

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11249543A (en) * 1998-02-02 1999-09-17 Mitsubishi Electric Inf Technol Center America Inc Patient simulation system
KR20090043513A (en) * 2006-07-12 2009-05-06 메디컬 사이버월드스 인코퍼레이티드 Computerized medical training system
KR101743230B1 (en) * 2016-04-18 2017-06-05 (주)케이디엠티 Apparatus and method for providing realistic language learning contents based on virtual reality and voice recognition
KR20170095007A (en) 2016-02-12 2017-08-22 한국기술교육대학교 산학협력단 Simulation system and method for surgery training
KR20180098174A (en) * 2017-02-24 2018-09-03 주식회사 브이알애드 Virtual reality-based radiology practice apparatus and method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11249543A (en) * 1998-02-02 1999-09-17 Mitsubishi Electric Inf Technol Center America Inc Patient simulation system
KR20090043513A (en) * 2006-07-12 2009-05-06 메디컬 사이버월드스 인코퍼레이티드 Computerized medical training system
KR20170095007A (en) 2016-02-12 2017-08-22 한국기술교육대학교 산학협력단 Simulation system and method for surgery training
KR101743230B1 (en) * 2016-04-18 2017-06-05 (주)케이디엠티 Apparatus and method for providing realistic language learning contents based on virtual reality and voice recognition
KR20180098174A (en) * 2017-02-24 2018-09-03 주식회사 브이알애드 Virtual reality-based radiology practice apparatus and method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102381972B1 (en) * 2021-08-02 2022-04-04 (주) 마인즈에이아이 Method and device for supporting addict of addictive preferred item to perform proper adaptive behavior on antisocially preferred item
KR20240084830A (en) 2022-12-07 2024-06-14 가톨릭대학교 산학협력단 Metaverse server for providing metaverse service in hospital environment, method and program

Also Published As

Publication number Publication date
KR102160669B1 (en) 2020-09-28

Similar Documents

Publication Publication Date Title
Kim A SWOT analysis of the field of virtual reality rehabilitation and therapy
US10474793B2 (en) Systems, apparatus and methods for delivery and augmentation of behavior modification therapy and teaching
EP2600331A1 (en) Head-mounted display based education and instruction
KR101983279B1 (en) Nerve disprder diagnosis apparatus and method using virtual reality
US20220270501A1 (en) System and method for intervention with attention deficient disorders
KR102160669B1 (en) Medical communication virtual training simulation system and method
Mikhailenko et al. Eye-tracking in immersive virtual reality for education: a review of the current progress and applications
Sharma et al. Keep calm and do not carry-forward: Toward sensor-data driven AI agent to enhance human learning
AU2016410178A1 (en) Method and system for quantitative assessment of visual motor response
WO2020152779A1 (en) Rehabilitation system and image processing device for higher brain dysfunction
US20240153407A1 (en) Simulated reality technologies for enhanced medical protocol training
Soto et al. AR stereoscopic 3D human eye examination app
KR20190048144A (en) Augmented reality system for presentation and interview training
US20220358726A1 (en) System and method for augmented reality visualization of benign paroxysmal position vertigo (bppv) disorder
JP2023169150A (en) Three-dimensional display system
El Haddioui Eye Tracking Applications for E-Learning Purposes: An Overview and Perspectives
Goldiez Techniques for assessing and improving performance in navigation and wayfinding using mobile augmented reality
Teruel et al. Exploiting awareness for the development of collaborative rehabilitation systems
KR20190076722A (en) Method and system for testing multiple-intelligence based on vr/ar using mobile device
WO2018231059A2 (en) Wireless communication system for remote medical assistance
Schubert et al. Size matters: How reaching and vergence movements are influenced by the familiar size of stereoscopically presented objects
JP7562105B2 (en) Content display device, content display method, and program
KR20210148764A (en) Device and Method for Providing Virtual Contents
Tümler et al. Igbudu Mary
de Oliveira Manco SEEING THROUGH PLAY

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant