KR102444058B1 - 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템 - Google Patents

인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템 Download PDF

Info

Publication number
KR102444058B1
KR102444058B1 KR1020200162031A KR20200162031A KR102444058B1 KR 102444058 B1 KR102444058 B1 KR 102444058B1 KR 1020200162031 A KR1020200162031 A KR 1020200162031A KR 20200162031 A KR20200162031 A KR 20200162031A KR 102444058 B1 KR102444058 B1 KR 102444058B1
Authority
KR
South Korea
Prior art keywords
acupuncture
controller
human body
training
providing
Prior art date
Application number
KR1020200162031A
Other languages
English (en)
Other versions
KR20220074008A (ko
Inventor
류창주
Original Assignee
아주통신(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아주통신(주) filed Critical 아주통신(주)
Priority to KR1020200162031A priority Critical patent/KR102444058B1/ko
Publication of KR20220074008A publication Critical patent/KR20220074008A/ko
Application granted granted Critical
Publication of KR102444058B1 publication Critical patent/KR102444058B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H39/00—Devices for locating or stimulating specific reflex points of the body for physical therapy, e.g. acupuncture
    • A61H39/08—Devices for applying needles to such points, i.e. for acupuncture ; Acupuncture needles or accessories therefor
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B23/00—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
    • G09B23/28—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for medicine

Abstract

본 발명에 따르는 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법은 다음을 포함한다. 상기 혼합현실 침술 훈련 시스템은, 정면이 천장을 바라보도록 배치되는 인체의 일부 또는 전부를 3차원형태로 모형화한 실제인체모형; 상기 인체 모형을 일 단으로 찌를 경우, 상기 찌르는 동작으로 인한 압력값을 서버로 제공하는 침술 콘트롤러; 상기 서버로부터 침술 시뮬레이션 사용자 인터페이스(User Interface : UI)를 수신하여 착용자의 시야로 소정의 침술 훈련 영상을 제공하는 HMD(Head Mounted Display); 및 실제인체모형상기 침술 콘트롤러로부터 신호를 수신하고, 침술 시뮬레이션 UI를 통하여 상기 침술 콘트롤러의 신호에 대응하는 영상을 표시하여, 사용자에게 가상의 침술 시뮬레이션 훈련이 제공되도록 하는 상기 서버; 를 포함한다. 혼합현실 침술 훈련 방법은 (a) 상기 서버가 상기 HMD로, 가상인체모형, 가상디스플레이, 콘텐츠메뉴판, 및 가상3D배경을 포함하는 침술 시뮬레이션UI를 제공하는 단계; (b) 상기 침술 시뮬레이션 UI에 포함된 콘텐츠 메뉴판 내의 복수의 버튼 중 어느 하나의 버튼에 대한 사용자 입력이 발생되는 경우, 상기 서버가 상기 가상디스플레이를 통하여 침술훈련콘텐츠를 표시하는 영상을 상기 HMD로 제공하는 단계; (c) 상기 실제인체모형에 대한 상기 침술 콘트롤러의 입력이 발생되는 경우, 상기 서버가 상기 침술 콘트롤러의 입력에 대응하는 영상을 상기 침술 시뮬레이션 UI에 표시하는 영상을 상기 HMD로 제공하는 단계; 및 (d) 상기 침술 콘트롤러의 입력과 상기 가상디스플레이를 통해 제시된 문제에 대한 기 설정된 응답값을 비교하여 정답/오답 여부를 상기 가상디스플레이를 통하여 표시하는 영상을 상기 HMD로 제공하는 단계를 포함하는, 인체모형침술 훈련 제공방법에 관한 기능을 제공 할 수 있다.

Description

인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템{SYSTEM FOR MIXED-REALITY ACUPUNCTURE TRAINING WITH DUMMY AND ACUPUNCTURE CONTROLLER}
본 발명은 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템에 관한 것으로서, 보다 상세하게는, 혼합 현실 기술을 활용하여 가상의 인체에 침술 실습을 가능하게 하는 침술 교육을 위한 시스템에 관한 것이다.
종래의 교육시장의 추세는 단순 지식 습득이 아닌 실감 체험형 교육이며, 예를 들어, '의사가 알아야 할 지식'을 전달하는 방식에서 벗어나 '의사가 하는 일'을 교육하는데 초점을 맞추고 있으며, AR, VR 및 MR 등 e-러닝 시장을 이끄는 첨단 디지털 기술의 발전으로 현실공간에서도 실제와 같은 학습효과가 가능한 상황이다.
특히 생명을 다뤄야 하는 의학교육 및 의료현장에서 디지털 기술을 이용한 실감 체험형 학습의 중요도는 더욱 높아지고 있는 실정이다.
하지만, 종래의 한의학 교육 현장에서는 의료기술을 객관적으로 평가할 수 있는 표준화된 모델의 미비로 개인의 감(感)에 의지한 의료시술 훈련이 이뤄지고 있는 실정이다.
또한, 실제 인체 대상 훈련이 이뤄지기 어렵고 이에 따른 기술숙달훈련이 부족하여 실제 의료 현장을 대비한 능숙한 기술 보유가 어렵다는 문제점이 존재하였다.
즉, 국내외 의학교육에서는 의료사고를 줄이고 정교한 기술숙달을 위해 환자를 대하는 것과 같은 유사한 모의환경을 구축하고 이에 맞는 교육 콘텐츠 개발이 활발하게 일어나고 있는 상황이지만, 한의학에서는 의술의 계량화, 표준화가 늦춰지고 있어서 첨단기술을 이용한 교육 시스템의 도입 및 개발속도가 다소 미진한 실정이다.
본 발명은 전술한 종래 기술의 문제점을 해결하기 위한 것으로서, 혼합현실을 통해 3차원 실제인체모형에 경혈점을 표시하여 사용자가 경혈점의 위치를 파악할 수 있고, 경혈점이 표시된 3차원 실제인체모형에 직접 시침하면서 반복 실습할 수 있는 혼합현실을 이용한 침술 훈련시스템 및 이를 이용한 침술 훈련방법을 제공하는 목적이 있다.
또한, 침술 기술 실습과 평가에서 인체에 대한 침습적 침술을 대신하고 공정하게 평가할 수 있는 표준화된 침술가상훈련 시뮬레이터를 제공하는데 그 목적이 있다.
본 발명이 해결하려는 과제들은 이상에서 언급한 과제들로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따르는, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법에 있어서, 상기 시스템은, 정면이 천장을 바라보도록 배치되는 인체의 일부 또는 전부를 3차원형태로 모형화한 실제인체모형; 상기 인체 모형을 일 단으로 찌를 경우, 상기 찌르는 동작으로 인한 압력값을 서버로 제공하는 침술 콘트롤러; 상기 서버로부터 침술 시뮬레이션 사용자 인터페이스(User Interface : UI)를 수신하여 착용자의 시야로 소정의 침술 훈련 영상을 제공하는 HMD(Head Mounted Display); 및 실제인체모형상기 침술 콘트롤러로부터 신호를 수신하고, 침술 시뮬레이션 UI를 통하여 상기 침술 콘트롤러의 신호에 대응하는 영상을 표시하여, 사용자에게 가상의 침술 시뮬레이션 훈련이 제공되도록 하는 상기 서버; 를 포함하되, (a) 상기 서버가 상기 HMD로, 가상인체모형, 가상디스플레이, 콘텐츠 메뉴판, 및 가상3D배경을 포함하는 침술 시뮬레이션UI를 제공하는 단계; (b) 상기 침술 시뮬레이션 UI에 포함된 콘텐츠 메뉴판 내의 복수의 버튼 중 어느 하나의 버튼에 대한 사용자 입력이 발생되는 경우, 상기 서버가 상기 가상디스플레이를 통하여 침술 훈련 콘텐츠를 표시하는 영상을 상기 HMD로 제공하는 단계; (c) 상기 실제인체모형에 대한 상기 침술 콘트롤러의 입력이 발생되는 경우, 상기 서버가 상기 침술 콘트롤러의 입력에 대응하는 영상을 상기 침술 시뮬레이션 UI에 표시하는 영상을 상기 HMD로 제공하는 단계; 및 (d) 상기 침술 콘트롤러의 입력과 상기 가상디스플레이를 통해 제시된 문제에 대한 기 설정된 응답값을 비교하여 정답/오답 여부를 상기 가상디스플레이를 통하여 표시하는 영상을 상기 HMD로 제공하는 단계;를 포함할 수 있다.
또한, 상기 실제인체모형은,실제 인체 크기와 형태가 동일하고, 상기 인체 모형의 일 측에 배치되는 위치추적센서를 포함하되, 상기 위치추적센서는 상기 서버로 기준위치신호를 전송하여, 상기 서버가 상기 기준위치신호를 바탕으로, 상기 침술 콘트롤러와 실제인체모형 간의 위치관계와 상기 침술 시뮬레이션UI 내의 가상인체모형과 가상 침술 콘트롤러 간의 위치관계 간의 동기화를 수행할 수 있다.
또한, 상기 실제인체모형은, 피부에 대응하는 실리콘 층; 상기 실리콘 층 하부에 배치되는 외골격에 대응하는 스티로폴 층; 상기 스티로폴 층의 하부에 배치되는 충진재로 구성된 라이트클레이 층; 상기 라이트클레이 층의 하부에 배치되되, 중심부에 절연체가 배치되는 전도성실리콘 층; 및 상기 전도성 실리콘 층의 하부에 배치되는 내골격에 대응하는 나무 층; 을 포함할 수 있다.
또한, 상기 전도성 실리콘 층은, 상기 절연체의 상부에 배치되는 제 1 전도성 실리콘 층 및 하부에 배치되는 제 2 전도성 실리콘 층을 포함하여 구성되는 것이고, 상기 침술 콘트롤러의 말단이 상기 전도성 실리콘 층을 관통하는 경우, 제 1 및 제 2 전도성 실리콘에 의해 맞닿게 되어 신호가 발생될 수 있다.
또한, 상기 침술 콘트롤러는, 본체 케이스; 상기 본체 케이스의 하부에 배치되며, 일단으로 상기 실제인체모형을 가압하는 핀; 상기 핀의 타단에 배치되는 스프링;상기 스프링과 상기 핀에 접촉하여 구성되어, 상기 핀이 가압한 압력을 측정하는 압력센서; 상기 본체 케이스의 중간부에 배치되는 배터리; 상기 본체 케이스의 상부에 배치되며, 서버로 위치신호를 전송하기 위해 IR(Infrared Ray)필터, 및 IR센서를 포함하는 센서부; 를 포함할 수 있다.
또한, 상기 (b)단계는, 경혈점 평가 콘텐츠를 선택하고, 실습콘텐츠를 설명하는 문구가 제시되고, 상기 경혈점 평가 문제가 표시될 수 있다.
또한, 상기 (b)단계는, 가상 인체 모형(600) 위에 모든 경혈점에 관한 혈이미지가 점과 선으로 구성되어 오버랩 되어 표시될 수 있다.
또한, 상기 (b)단계는, 증상별 경혈점 보기 콘텐츠를 선택하고, 실습콘텐츠를 설명하는 문구가 제시되고, 콘텐츠 메뉴판 하단에는 복수의 증상명이 표시될 수 있다.
또한, 상기 (c)단계는, 침술 콘트롤러가 특정 경혈점을 누르는 듯한 영상과 침술로 누르는 압력에 대한 수치 정보가 함께 제공되는 것인 실제 인체 모형(200) 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템.
또한, 상기 (c)단계는, 가상디스플레이에는 해당 경혈점에 대한 특징, 위치, 침구법에 대한 정보와 상기 해당 경혈점을 누르는 법에 대한 동영상이 함께 제공될 수 있다.
또한, 상기 (c)단계는, 침술 콘트롤러로 가한 각 압력 별 신체피부로 삽입되는 깊이에 대한 정보가 가상 디스플레이 옆 공간에 제공될 수 있다.
본 발명은 실제 인체에 대한 침습적 침술훈련을 대신하여 침술훈련과 평가를 공정하게 수행할 수 있는 상호작용형 MR기반의 사용자 중심 침술훈련을 위한 3D 실제인체모형 및 침술 콘트롤러를 제공할 수 있다.
또한, 경혈 평가 콘텐츠를 통해, 3D 실제인체모형기반 침술훈련 및 평가 시스템, 콘트롤러 기반 인체 모형 대상 침술훈련이 가능할 수 있으며, 침술 콘트롤러의 위치 정보를 제공하고, 침술 콘트롤러의 정확성 판별 알고리즘 구현하여, WHO표준에 근거한 교육 및 평가 기능을 제공 할 수 있다.
또한, 3차원 실제인체모형과 침술 콘트롤러를 통해 사용자의 시침을 인식하여 침술순서, 경혈점 위치, 제한시간에 대해 공정하고 객관적으로 사용자의 침술 숙달 정도를 평가하여 피드백을 제공함으로 인해 사용자가 능동적으로 침술을 학습할 수 있는 효과가 있다.
도 1은 본 발명의 일 실시예에 따르는, 실제인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템의 예시도 이다.
도 2 내지 도 3은, 본 발명의 일 실시예에 따르는, 실제인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템의 실제인체모형의 내부 구성에 대한 예시도 이다.
도 4는 본 발명의 일 실시예에 따르는, 실제인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템의 실제인체모형이 형성되는 방법에 대한 예시도이다.
도 5 는, 본 발명의 일 실시예에 따르는, 실제인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템의 침술 콘트롤러에 대한 예시도 이다.
도 6은, 본 발명의 일 실시예에 따르는, 실제인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템의 침술 콘트롤러의 모형 접촉부가 가압되어, 눌려진 형상에 대한 예시도 이다.
도 7은, 본 발명의 또 다른 실시예에 따르는, 실제인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템의 침술 콘트롤러에 대한 예시도 이다.
도8은, 본 발명의 일 실시예에 따르는, 실제인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템의 작동 순서도 이다.
도9는, 본 발명의 일 실시예에 따르는, 서버 안에 포함된 프로세서의 세부구성을 나타낸 도면이다.
도 10은, 본 발명의 일 실시예에 따르는, 침술 시뮬레이션 사용자 인터페이스의 구조도 이다.
도11 내지 도 12는, 본 발명의 일 실시예에 따르는, 경혈점 평가 콘텐츠의 구조도 이다.
도13는, 본 발명의 일 실시예에 따르는, 경혈점 보기 콘텐츠의 구조도이다.
도14내지 도 15는, 본 발명의 일 실시예에 따르는, 증상별 경혈점 평가 콘텐츠의 구조도 이다.
도16는, 본 발명의 일 실시예에 따르는, 증상별 경혈점 보기 콘텐츠의 구조도 이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다. 한편, '~부'는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니며, '~부'는 어드레싱 할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 '~부'는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 '~부'들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 '~부'들로 결합되거나 추가적인 구성요소들과 '~부'들로 더 분리될 수 있다. 뿐만 아니라, 구성요소들 및 '~부'들은 디바이스 또는 보안 멀티미디어카드 내의 하나 또는 그 이상의 CPU들을 재생시키도록 구현될 수도 있다.
이하에서, 도 1을 참조하여 본 발명의 일 실시예에 따르는, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 수행하기 위한 시스템에 대해 구체적으로 설명한다.
도 1에 도시된 바와 같이, 3D 실제인체모형 데이터와 모형 본체의 정합을 위한 외부 돌출형 트랙커를 구비하고, 인체의 일부 또는 전부를 3차원형태로 모형화한 실제인체모형(200)과, 실제인체모형(200) 및 침술 콘트롤러(300)의 센서들로부터 신호를 수신하고, VR 컨텐츠를 통한 경혈 평가 프로그램이 내장된 서버(100) 및 실제인체모형(200)에 시침할 수 있는 침부(330) 및 사용자가 파지할 수 있는 손잡이 부를 형성하는 본체부를 포함하는 침술 콘트롤러(300)를 포함할 수 있다.
실제인체모형(200)은, 인체의 피부와 유사한 실리콘과 같은 연질의 재질을 이용하여 인체의 전부 또는 일부가 3차원 형상으로 모형화되어 제작될 수 있다.
실리콘과 같은 연질의 재질을 이용함으로써 사용자가 실제인체모형(200)에 시침을 할 때 촉감이 실제 인체와 유사하도록 하여 현실감을 향상시킬 수 있게 되며, 안전하게 침술을 반복 실습할 수 있다.
또한, 실제인체모형(200)은 인체의 부위별로 분리 가능하도록 형성될 수 있으며, 실제인체모형(200)이 인체의 부위별로 분리 가능하도록 형성됨으로서 추후 고장 등이 발생할 경우에 부위별로 교체하여 조립할 수 있으며 사용자가 원하는 부위만 사용할 수 있게 된다.
또한, 본 발명의 추가 실시예로써, 실제인체모형 및 침술 콘트롤러(300)를 이용한 혼합현실 침술 훈련 시스템은, HMD(920)(Head Mounted Display)를 추가로 구비할 수 있다.
HMD(920)는, 실제인체모형(200)을 촬영하여 영상을 생성하기 위한 카메라 모듈과, 카메라 모듈을 통해 촬영되는 영상의 인체모형을 인식하기 위한 모형 인식 모듈, 모형 인식모듈을 통해 인식된 영상의 인체모형에 미리 경혈점이 표시되어 저장된 인체 모형 데이터를 합성하기 위한 영상 합성부와, 영상 합성부에서 합성된 영상을 디스플레이하기 위한 디스플레이를 포함할 수 있다.
또한, 서버(100), 인체 모형(200) 및 침술 콘트롤러(300)와 유/무선 네트워크를 통해 통신연결 될 수 있다.
HMD(920)를 사용자가 머리에 착용하는 경우, 사용자의 눈에 근접한 위치에 디스플레이가 존재하여, 이를 통해 3D 영상이 투영될 수 있다.
이하에서, 도 2 내지 3을 참조하여, 본 발명의 일 실시예에 따르는, 실제인체모형(200) 및 침술 콘트롤러(300)를 이용한 혼합현실 침술 훈련 시스템의 인체 모형에 대해 구체적으로 설명한다.
본 발명의 일 실시예에 따르는, 개선된 인체 모형은, 센서가 돌출된 형태의 인체 모형이 될 수 있다.
센서는 실제 인체 모형(200)의 머리에 대응하는 최 상단에서 연장되어 구비 될 수 있으며, 내장되는 것이 아닌 외부로 돌출되도록 구비하여, 센서에서 문제가 발생하는 경우, 교체가 가능하여, 유지보수가 용이할 수 있다.
또한, 피부를 표현하는 소재는 실리콘 또는 연질 소재를 사용하여 사람의 피부와 유사한 느낌을 줄 수 있다.
실제 인체모형(200)의 내부에는 목재 또는 금속이 삽입되어 내골격이나 뼈대를 형성할 수 있다.
도 2는 실제인체모형(200)의 피부 레이어 구조에 대한 일 실시예에 대한 도면이다.
도 2에 도시된 바와 같이, 실제인체모형(200)의 피부는 다양한 층을 갖는 레이어 구조로 구비될 수 있다.
최 상단에 인체의 피부와 유사한 느낌을 낼 수 있는 실리콘으로, 피부 층을 형성할 수 있으며, 인체의 피부에 대응하는 실리콘 층(210) 하단에 인체의 외골격에 대응하는 스티로폴 층(220)을 구비할 수 있다.
스티로폴 층(220) 하단에는 인체 모형(200)의 내부에서 충진제 역할을 수행하는 라이트클레이 층(230)이 구비될 수 있으며, 라이트클레이 층(230) 하단에는 전도성 실리콘 층이 구비될 수 있다.
이때, 전도성 실리콘 층은, 중심부에 절연체(240)를 구비하여, 절연체(240)를 기준으로 상부에 구비되는 제 1 전도성 실리콘 충(241) 및 하부에 구비되는 제 2 전도성 실리콘 층(242)으로 구성될 수 있다.
전도성 실리콘 층 하부에는 인체의 내골격에 대응하는 나무 층(250)이 구비될 수 있다.
도 2에 도시된 바와 같은 인체 모형(200)은, 침술 콘트롤러(300)의 침부가 인체 모형(200)에 직접 삽입되는 형태의 침술 콘트롤러(300)를 사용하는 침술훈련시스템에 대응하는 인체 모형(200)이 될 수 있다.
침술 콘트롤러(300)의 침부가 인체 모형(200)의 내부에 구비되는 전도성 실리콘 층을 관통하는 경우, 시침이 수행된 것으로 판단할 수 있다.
즉, 중심부에 절연체(240)를 구비하고, 절연체(240)의 상부에 배치되는 제 1 전도성 실리콘 층(241) 및 하부에 배치되는 제 2 전도성 실리콘 층(242)으로 구성되는 전도성 실리콘 층은, 중심부에 절연체(240)가 구비되어 있으므로, 전기 신호가 흐르지 않도록 구비되어 있다.
전도성 실리콘 층을 금속으로 구비된 침부(330)가 관통하는 경우, 침부(330)에 의해 제 1 전도성 실리콘 층과 제 2 전도성 실리콘 층이 연결될 수 있으며, 이 경우, 전기 신호가 흐를 수 있게 되어, 해당 위치에 침부가 삽입된 것으로 판단할 수 있다.
도 3은, 개선된 인체 모형(200)의 피부 레이어 구조에 대한 다른 실시예에 대한 도면이다.
도 3에 도시된 바와 같이, 본 발명의 다른 실시예에 따르는, 인체 모형(200)의 피부는 다양한 층을 갖는 레이어 구조로 구비될 수 있다.
최 상단에 인체의 피부와 유사한 느낌을 낼 수 있는 실리콘으로, 피부 층을 형성할 수 있으며, 인체의 피부에 대응하는 실리콘 층(210) 하단에 인체의 외골격에 대응하는 스티로폴 층(220)을 구비할 수 있다.
도 3에 도시된, 본 발명의 다른 실시예에 따르는, 인체 모형(200)은, 침술 콘트롤러(300)의 침부가 인체 모형(200)에 직접 삽입되지 않고, 도 4 내지 5를 통해 구체적으로 설명할 압력센서(400)를 구비한 비 삽입 식 침술 콘트롤러와 대응하는 구성이 될 수 있다.
이하 도 4를 참조하여, 본 발명의 일 실시예에 따르는, 인체 모형에 대해 구체적으로 설명한다.
본 발명의 일 실시예에 따르는, 인체 모형(200)은, 도 4에 도시된 바와 같이 형성될 수 있다.
인체의 일부 또는 전부를 3차원 형태로 모형화한 모형 본체, 3D 모델링된 인체 모형 데이터 및 3D 경혈점 데이터를 결합하여 형성될 수 있다.
아울러, 본 발명의 일 실시예에 따르는, 인체 모형(200)은, 바람직하게, 아시아 성인을 모델로 하고, 표준 사이즈로써, 나이 40세, 근육량 50% 키는 175cm를 기준으로 제작될 수 있다.
또한, 인체 모형(200)은, 3D 모델링 툴을 이용, 인체의 각 부위(손, 발, 가슴, 머리 등)별로 모델링을 하여 대상을 표현하고 공간상 XYZ 3축을 기준으로 6개 방향 자유회전이 가능하도록 모델링될 수 있다.
현실과 유사한 형체로 보이게 하기 위해 대상의 재질과 색상, 빛과의 관계 및 경혈의 위치정보를 고려하여 렌더링될 수 있다.
제작된 3D 실제인체모형 데이터는 MR콘텐츠로 이용을 위해 Unity 3D에서 활용이 가능한 파일포맷으로 변환할 수 있다.
MR콘텐츠는 실제 Dummy에 가상의 3D 실제인체모형 데이터를 정합시켜 사용할 예정이므로 Dummy와 사이즈 및 모양이 정확하게 일치하도록 디자인될 수 있다.
이때, 3D 경혈점 데이터는 경혈이라는 객체가 포함하고 있는 여러 갈래의 정보를 다목적으로 이용할 수 있도록 3D로 시각화한 데이터가 될 수 있다.
예를 들어, 사용자가 원하는 요구에 가장 정확한 침술작업을 할 수 있도록 경혈데이터를 구조화 하고, 경혈데이터 요소를 확정하여 이를 3D 실제인체모형 데이터에 매칭시킬 수 있다.
3D 경혈점 데이터에 활용되는 표준 경혈맵은 한의약융합연구정보센터의 표준경혈 DB를 통해 수집된 경혈 맵이다.
한의약융합데이터센터의 표준경혈DB는 2008년 제정된 WHO / WPRO 표준경혈위치에 근거하여 경혈마다 소속 경맥, WHO표준위치, 취혈법, 자침깊이, 주의사항 등을 명시되어 있으며, 이를 토대로 본 발명의 일 실시예에 따르는, 인체 모델 데이터에 3D 경혈정보로 활용될 수 있다.
여기서, 경혈점에는 경락경혈의 위치정보에 따른 경혈의 정보(취혈법, 경혈의 주치 효능 등)를 포함하여 구성될 수 있다.
이하에서 도 5 내지 6을 참조하여, 본 발명의 일 실시예에 따르는, 침술 콘트롤러(300)에 대해 구체적으로 설명한다.
본 발명의 일 실시예에 따르는 침술 콘트롤러(300)는 크게 침부(330)와 본체부로 구성될 수 있다.
여기서, 본체부는 제 1 직경으로 구비되는 제 1 본체부(310) 및 제 1 직경보다 넓은 제 2 직경으로 구비되는 제 2 본체부(320)로 구성될 수 있으며, 제 1 및 제 2 본체부를 연결하는 중간 본체부를 포함하되, 제 1 본체부와 제 2 본체부의 길이는 서로 대응하도록 구비될 수 있다.
도 5에 도시된 바와 같이, 본 발명의 일 실시예에 따르는, 침술 콘트롤러(300)의 침부(330)는 제 1 본체부(310) 내에 삽입되도록 구비되되, 소정의 길이로 연장되어 형성되고, 인체 모형(200)의 일 단이 접촉하게 되는 모형 접촉부(331)를 포함하고, 모형 접촉부(331)보다 짧은 길이로 형성되되, 중간부분에 비해 양단의 직경이 더 두껍게 형성되어, 탄성부재가 중간부분에 결합 후 결속 완료되도록 구성된 제 1 탄성부재 결합부(410)를 포함하여 구비 될 수 있다.
또한, 시침하면서 가해지는 압력을 측정하기 위한 압력센서(400)를 포함하여 구비될 수 있으며, 압력센서(400)는 도시된 바와 같이, 원판형으로 구비될 수 있으며, 일 단이 침부(330)의 타 단과 맞닿을 수 있도록 구비될 수 있다.
또한, 압력센서(400)와 일 단에서 접촉되도록 구비되고, 중간 부분에 비해 양단의 직경이 더 두껍게 형성되어, 탄성부재가 중간 부분에 결합 후 결속완료되도록 구성되되, 일 단의 면적이 압력센서(400)의 면적과 대응되도록 구성됨에 따라 타 단의 면적보다 넓게 구성되는 제 2 탄성부재 결합부(420)를 포함하여 구성될 수 있다.
도 6은 침술 콘트롤러(300)를 가압하여 실제인체모형(200)과 모형 접촉부(331)가 맞닿아 가압되어, 눌려진 침술 콘트롤러(300)의 내부 형상에 대한 예시도 이다.
도 6에 도시된 바와 같이, 침술 콘트롤러(300)는 내부에 제 1 내지 제 3 격벽을 구비할 수 있다.
3개의 격벽은 제 1 본체부(310)와 가장 근접한 위치에서부터 소정의 간격을 갖고 형성되되, 제 1 본체부(310)와 가장 근접한 격벽이 제 1 격벽(321)이고, 점차 이격되어 제 2 및 제 3격벽이 구비되어 있을 수 있다.
제 1 탄성부재 결합부(410)는 제 1 격벽(321)을 관통할 수 있도록 구비되어 있으며, 제 2 탄성부재 결합부(420)는 제 2 격벽(321)을 관통할 수 있도록 구비될 수 있다.
또한, 제 3 격벽(323)의 내부 공간에 PCB모듈, 배터리(500) 및 트랙커(600)가 실장되되, 트랙커는 상기 제 2 본체부의 일 단에 구비될 수 있다.
제 3 격벽(323)의 내부 공간에 실장된 PCB 모듈은 압력센서(400)로부터 정보를 수신하고, 서버(100) 및 실제인체 모형(200)과 통신할 수 있는 통신모듈이 될 수 있다.
예를 들어, 침부(330)가 실제인체모형(200)과 접촉된 후 압력이 가해지는 경우, 침부(330)가 압력센서(400)를 가압하게 되고, 이로 인해, 제 1 탄성부재 결합부(410)가 제 1 격벽(321)을 통과하고 제 2 탄성부재 결합부가 제 2 격벽을 통과하게 되면, PCB 모듈은 압력센서(400)로부터 가압 신호를 수신하고, 이를 서버(100) 또는 실제인체 모형(200)으로 제공할 수 있다.
본 발명의 추가 실시예로써, 침술 콘트롤러(300)는 바람직하게, 사용자가 손으로 잡을 수 있고, 또한 각 부품을 내부에 구성, 배치시키기 위해, 길이는 약 225mm, 직경은 3.0mm ~ 25.6mm, 무게는 약 0.7kg로 구비될 수 있다.
또한, 도 5 내지 도 6에 도시된 바와 같이, 그립감과 실제감을 고려하여 펜과 같은 형상을 가질 수 있다.
본 발명의 또 다른 실시예에 따르는, 침술 콘트롤러(300)는 도 7에 도시된 바와 같이 구성될 수 있다. 도 7를 참조하여, 구성을 설명하면, 본체 케이스(550)가 있고, 본체 케이스(550)의 하부에 실제인체모형(200)을 가압하는 핀(580)이 배치되며, 핀(580)의 위로 배치되는 스프링(570)이 배치될 수 있다.
본체 케이스(550)의 내부에는 스프링(570)과 핀(580)에 접촉하여 구성되어, 핀(580)이 가압한 압력을 측정하는 압력센서(400)가 비치되고, 본체 케이스(550)의 중간 부분에 배터리(500)가 메인 코어 보드(530)과 함께 배치될 수 있다.
본체 케이스(550)의 상부에는, 서버(100)로 위치신호를 전송하기 위해 IR(Infrared Ray)필터(510), 및 IR센서(520)를 포함하는 센서부가 배치될 수 있다.
이하에서, 본 발명의 일 실시예에 따르는, 실제인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 수행하는 과정을 설명한다.
사용자의 앞에 인체모형이 배치되어 있는 상태에서, 사용자가 HMD(920)장치를 착용할 경우, 서버(100)가 HMD(920)장치는로 침술 시뮬레이션 사용자 인터페이스(UI)를 제공한다.
침술 시뮬레이션 UI는 가상 인체 모형(600), 가상 디스플레이(900), 콘텐츠 메뉴판(800) 및 가상공간으로 구성될 수 있다.
이때, 가상 인체 모형(600)은 실제인체모형(200)이 배치되어 있는 위치와 대응하는 가상 공간 영상 내에 배치되게 된다. 실제인체모형(200)의 일 측에 위치추적센서가 배치되어 있으며, 해당 센서가 서버(100)로 위치신호를 보내어 서버(100)가 기준점 좌표를 인식하도록 하여, 실제인체모형(200)과 가상 인체 모형(600)의 좌표가 대응되도록 할 수 있다.
위치추적센서는 실제 인체 모형(200)의 머리에 대응하는 최 상단에 위치 될 수 있으며, 본 발명이 실시되는 공간 내에 배치된 복수의 센서 또는 서버(100)와 통신망을 통해 통신할 수 있다. 이때, 위치추적센서와 공간 내에 배치된 복수의 센서가 인체모형의 머리부분의 좌표를 서버(100)에 전송하고, 서버(100)는 수신한 좌표 값들을 비교하여 실제인체모형(200)이 존재하는 좌표와 가상 인체 모형(600)이 존재하는 좌표를 대응한다.
가상 디스플레이(900)는 가상 인체 모형(600)의 뒤편에 사용자가 바라보는 시점에 표시될 수 있으며 화면에는 특징, 위치, 침구법 및 효과에 관한 정보를 카테고리 별로 제공할 수 있고, 콘텐츠 메뉴판(800)이 포함될 수 있다.
콘텐츠 메뉴판(800)은 도10과 같이, 경락보기, 경혈점 평가 컨텐츠 및 증상별 경혈점 보기의 항목을 제공할 수 있다. 이때, 경혈점 평가 컨텐츠를 선택하면 경혈점 평가 컨텐츠와 증상별 경혈점 평가 콘텐츠를 제공할 수 있다.
가상공간은, 사용자가 착용한 HMD(920)에서 사용자의 시야로 제공되며 사용자가 실제 가상 실습현장에 배치된 것과 같은 느낌을 주는 가상 공간 이미지가 3D로 제공될 수 있다.
이때, 가상공간에는 가상 인체 모형(600), 가상 디스플레이(900), 가상 침술 콘트롤러(700)가 사용자의 시야로 제공되며, 침술 콘트롤러(300)를 조작하면 가상 침술 콘트롤러(700)가 대응하여 조작될 수 있다.
가상 디스플레이(900)는 사용자가 침술 콘트롤러(300)로 침술 시뮬레이션 UI내의 콘텐츠 메뉴판(800)에 대한 입력을 수행하면 입력과 대응하는 콘텐츠를 표시할 수 있다. .
침술 콘트롤러(300)는 서버에 압력센서(400)로 측정한 압력 값을 전달함과 동시에 본 발명이 실시되는 공간 내에 배치된 복수의 센서와 통신망을 통해 통신할 수 있다. 이때, 위치추적센서와 공간 내에 배치된 복수의 센서가 침술 콘트롤러(300)의 좌표를 서버(100)에 전송하고, 서버(100)는 수신한 좌표 값들을 비교하여 침술 콘트롤러(300)이 존재하는 좌표와 가상 침술 콘트롤러(700)이 존재하는 좌표를 대응한다. 상기의 과정을 거쳐 침술 콘트롤러(300)를 조작하여 가상 침술 콘트롤러(700)를 가상공간에서 조작할 수 있다.
사용자는 침술 콘트롤러(300)로 콘텐츠 메뉴판(800)에 포함된 경락보기, 경혈점 평가 컨텐츠 및 증상별 경혈점 보기 메뉴를 선택하여 상기 컨텐츠를 실행할 수 있다.
예를 들어, 사용자가 침술 콘트롤러(300)를 콘텐츠 메뉴판(800)의 경락보기 버튼을 클릭할 경우, 가상 디스플레이(900)에는 “14개의 경락 중 원하는 경락을 선택해서 볼 수 있는 경락보기”라는 실습 콘텐츠를 설명하는 문구가 제시되고, 콘텐츠 메뉴판(800)은 14개의 경락 종류를 표시하는 정보가 추가로 표시할 수 있다.
이때, 침술 콘트롤러(300)의 IR 센서부는 IR신호를 서버(100)로 전송함으로써, 침술 콘트롤러(300)가 실제 현실 상에서 위치하는 위치정보를 서버(100)에 제공하고, 서버(100)는 콘텐츠 메뉴판(800)의 가상공간 속 위치와 침술 콘트롤러(300)의 가상공간 속 위치를 대비하여, 사용자가 가상공간 속에서 어느 메뉴를 클릭하였는지 판별하고, 이에 대응하는 영상을 HMD(920)로 전송할 수 있다.
경락보기 콘텐츠는 가상 인체 모형(600) 상에 선과 점으로 구성된 혈 이미지(910)가 경락 종류 별로 다르게 덧씌워져서 제공된다. 이때 혈 이미지(910)는 인체의 머리 끝부터 발 끝까지 선으로 이어지다가 혈자리에는 둥글고 큰 점의 모양으로 표시를 해주는 방법일 수 있다. 또한, 혈 이미지(910)는 혈관 내 피가 이동하는 듯한 애니메이션 효과가 제공되도록 하여 실제 인체와 같은 느낌을 받을 수 있도록 구성될 수 있다.
사용자가 침술 콘트롤러(300)를 인체모형의 어느 한 위치에 대고 압력으로 가하면, 서버(100)는 침술 콘트롤러(300)의 위치정보를 참고하여, 침술 콘트롤러(300)가 가상 인체 모형(600) 위에 이동하는 형태를 HMD(920)로 제공한다. 이를 통해서 사용자는 인체모형을 보지 못하지만, HMD(920)로 제공되는 영상내의 가상 인체 모형(600)을 실제인체모형(200)으로 인식하여 누르고 싶은 인체모형의 특정지점을 누를 수 있다.
이때, 사용자가 가상 인체 모형(600)에 덧씌워져 보이는 혈 이미지(910)에 압력을 가하면, 가상 디스플레이(900)에는 도 13와 같이 해당 경혈점에 대한 특징, 위치, 침구법 및 효과에 관한 정보가 제공되며, 컨텐츠 메뉴판(800)이 있던 공간에 해당 경혈점을 누르는 법에 대한 동영상이 함께 제공될 수 있다.
이때, 도10와 같이 침술 콘트롤러(300)로 가한 압력 별로 신체피부로 삽입되는 깊이에 대한 정보가 가상 디스플레이(900)의 옆 공간에 제공될 수 있다. 또한, 도 12와 같이 사용자가 침술 콘트롤러(300)으로 가한 압력의 수치가 가상 침술 콘트롤러(700)의 상단에 수치화하여 표시할 수 있다.
예를 들어, 사용자가 침술 콘트롤러(300)를 콘텐츠 메뉴판(800)의 경혈점 평가 컨텐츠 내의 경혈점 평가 콘텐츠를 선택할 경우, 가상 디스플레이(900)에는 "경혈점위치에 대한 이해도 평가를 위해 화면에 문제가 제시되면 그에 맞는 경혈점을 가상 인체 모형(600)상에서 선택하라"라는 실습 콘텐츠를 설명하는 문구가 표시되고, 가상 인체 모형(600)은 모든 경혈점에 관한 점과 선으로 구성된 혈 이미지(910)가 덧씌워져 표시된다.
예를 들어, 가상 디스플레이(900)에 "12정경중 <수소음심경>의 慕에 해당하는 경혈점을 선택하라"라는 문제가 제시되고, 사용자가 침술 콘트롤러(300)를 인체모형의 답변 위치에 대고 압력을 가하면, 서버(100)가 DB에 저장된 질문 및 정답정보를 검색하여 정답/오답을 판단하고 정답/오답에 대응하는 화면을 HMD(920)로 전송하여, 가상 디스플레이(900) 화면에 출력되도록 할 수 있다. 정답의 경우에는, 정답을 맞췄다라는 문구와 함께 상기 경혈점의 특징, 위치, 침구법 및 효과에 관한 정보가 제공될 수 있다. 오답의 경우에는, 틀렸다라는 문구와 함께 정답 경혈점의 위치 정보가 제공될 수 있다.
사용자가 침술 콘트롤러(300)를 콘텐츠 메뉴판(800)의 ‘증상별 경혈점 보기’ 콘텐츠를 클릭할 경우, 가상 디스플레이(900)에는 “22개의 증상 중 원하는 증상을 선택하여 경혈을 볼수 있는 콘텐츠”라는 실습 콘텐츠를 설명하는 문구가 제시되고, 콘텐츠 메뉴판(800) 하단에 복수의 증상명이 표시될 수 있다.
예를 들어, 도16와 같이 가상 디스플레이(900)에 상단에 콘텐츠 메뉴판(800)에 포함된 경락보기, 경혈점 평가 및 증상별 경혈점 보기가 표시되고, 증상별 경혈점 보기는 기 선택된 항목이므로 밝은 색으로 표시될 수 있다. 그 아래로 복수의 증상명이 줄에 맞춰서 표시될 수 있다.
사용자가 특정 증상명을 침술 콘트롤러(300)로 선택하는 경우, 서버(100)는 HMD(920)로 해당 증상에 대한 설명, 치료법, 치료 가능한 경혈정보를 포함하는 정보를 HMD(920)로 전송하여, 가상 디스플레이(900) 화면에 출력되도록 할 수 있다.
이때, 침술 콘트롤러(300)로 인체모형에 있는 특정 경혈점을 누르면, HMD(920)로 표시되는 가상공간 속에서 침술 콘트롤러(300)가 상기 특정 경혈점을 누르는 듯한 영상과 침술로 누르는 압력에 대한 수치 정보가 함께 제공될 수 있다.
침술로 누르는 압력에 대한 수치 정보는, 침술 콘트롤러(300)의 핀(580)이 인체모형에 가하는 압력이 침술 콘트롤러(300) 내부에 설치된 압력센서(400)로 전달되고, 압력센서(400)는 해당 압력을 측정하여, 서버(100)로 무선 전송하며, 서버(100)는 해당 측정 압력을 기초로, 압력수치를 HMD(920)로 제공하여, 가상 인체 모형(600)에 압력에 대한 수치정보가 표시되는 것이다.
사용자가 침술 콘트롤러(300)로 콘텐츠 메뉴판(800)의 경혈점 평가 컨텐츠 내의 '증상별 경혈점 평가' 콘텐츠를 선택할 경우, 가상 디스플레이(900)에는 "보기로 제시된 경혈점 중 각 증상에 맞는 경혈점을 침술 콘트롤러를 이용해 선택하라"라는 실습콘텐츠를 설명하는 문구가 제시되고, 가상 디스플레이(900)에 문제가 제시된다.
예를 들어, 도14과 같이 가상 디스플레이(900)에 “다음 경혈점 중 <만성위염>증상에 해당하는 경혈점을 선택하라”라는 문제가 제시되고, 문제의 아래 편에 복수의 보기가 나타나게 된다. 사용자가 침술 콘트롤러(300)를 가상 디스플레이(900)의 답변 위치에 대고 압력을 가하면, 도15와 같이 서버(100)가 DB에 저장된 질답정보를 검색하여 정답/오답을 판단하고 정답/오답에 대응하는 화면을 HMD(920)로 전송하여, 가상 디스플레이(900) 화면에 출력되도록 할 수 있다. 정답의 경우에는, 정답을 맞췄다라는 문구와 함께 상기 경혈점의 특징, 위치, 침구법 및 효과에 관한 정보가 제공될 수 있다. 오답의 경우에는, 틀렸다라는 문구와 함께 정답 경혈점의 위치 정보가 제공될 수 있다. 이후, 침술 콘트롤러(300)를 조작하여 다른문제로 넘어가거나, 평가를 종료할 수 있다.
추가 실시예로서, 소정의 혈자리를 눌러라라는 문제가 가상 디스플레이를 통해 제시되고, 실제인체모형에 대해 침술콘트롤러를 가압하는 식으로 사용자가 행동할 경우, 침술콘트롤러의 핀(침부)가 얼마나 깊이 삽입되었는지(즉, 핀(침부)를 누르는 사용자의 압력)을 측정하고, 압력에 따르는 정답여부를 평가할 수 있다. 즉, 혈자리마다 누르는 깊이가 상이하도록 지정될 수 있는데, 서버가 그 혈자리에 맞는 압력을 가했는지 여부를 평가하여, 정답여부를 평가할 수 있다. 아울러, 다수의 사용자가 각 혈자리 별로 침술콘트롤러를 압력한 데이터들을 압력값 및 혈자리에 대해 매칭 저장함으로써, 다수의 사용자의 시뮬레이션 데이터들을 누적할 수 있다. 그리고, 해당 시뮬레이션 데이터들에 대한 기계학습(입력값을 침술콘트롤러의 압력값과 혈자리로 설정하고, 출력값을 정답에 다다르기 위해 사용자가 보정해야할 침술콘트롤러의 압력값으로 설정한 기계학습)을 수행하여, 사용자가 문제풀이를 하기 전에, 각 혈자리별로 세게 눌러야할지, 살살 눌러야할지 여부를 미리 알려줄 수 있다. 이는 가상 디스플레이를 통해 안내 메시지 등으로 알려줄 수 있다.
본 발명의 방법 및 시스템은 특정 실시예와 관련하여 설명되었지만, 그것들의 구성 요소 또는 동작의 일부 또는 전부는 범용 하드웨어 아키텍쳐를 갖는 컴퓨터 시스템을 사용하여 구현될 수 있다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 서버 200: 실제인체모형
210: 실리콘 층 220: 스티로폴 층
230: 라이트클레이 층 240: 절연체
241: 제 1 전도성 실리콘 242: 제 1 전도성 실리콘
250: 나무 층 260: 위치추적센서
300: 침술 콘트롤러 310: 제 1 본체부
320: 제 2 본체부 321: 제 1 격벽
322: 제 2 격벽 323: 제 3 격벽
330: 침부 331: 모형 접촉부
400: 압력센서 410: 제 1 탄성부재 결합부
420: 제 2 탄성부재 결합부 500: 배터리
510: IR필터 520: IR센서
530: 메인 코어 보드 550: 본체 케이스
570: 스프링 580: 핀
600: 가상 인체 모형 700: 가상 침술 콘트롤러
800: 컨텐츠 메뉴판 900: 가상 디스플레이
910: 혈 이미지 920: HMD

Claims (11)

  1. 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법에 있어서,
    상기 시스템은,
    정면이 천장을 바라보도록 배치되는 인체의 일부 또는 전부를 3차원형태로 모형화한 실제인체모형; 상기 인체 모형을 일 단으로 찌를 경우, 상기 찌르는 동작으로 인한 압력값을 서버로 제공하는 침술 콘트롤러; 상기 서버로부터 침술 시뮬레이션 사용자 인터페이스(User Interface : UI)를 수신하여 착용자의 시야로 소정의 침술 훈련 영상을 제공하는 HMD(Head Mounted Display); 및 상기 침술 콘트롤러로부터 신호를 수신하고, 침술 시뮬레이션 UI를 통하여 상기 침술 콘트롤러의 신호에 대응하는 영상을 표시하여, 사용자에게 가상의 침술 시뮬레이션 훈련이 제공되도록 하는 상기 서버; 를 포함하되,
    (a) 상기 서버가 상기 HMD로, 가상인체모형, 가상디스플레이, 콘텐츠 메뉴판, 및 가상3D배경을 포함하는 침술 시뮬레이션UI를 제공하는 단계;
    (b) 상기 침술 시뮬레이션 UI에 포함된 콘텐츠 메뉴판 내의 복수의 버튼 중 어느 하나의 버튼에 대한 사용자 입력이 발생되는 경우, 상기 서버가 상기 가상디스플레이를 통하여 침술 훈련 콘텐츠를 표시하는 영상을 상기 HMD로 제공하는 단계;
    (c) 상기 실제인체모형에 대한 상기 침술 콘트롤러의 입력이 발생되는 경우, 상기 서버가 상기 침술 콘트롤러의 입력에 대응하는 영상을 상기 침술 시뮬레이션 UI에 표시하는 영상을 상기 HMD로 제공하는 단계; 및
    (d) 상기 침술 콘트롤러의 입력과 상기 가상디스플레이를 통해 제시된 문제에 대한 기 설정된 응답값을 비교하여 정답/오답 여부를 상기 가상디스플레이를 통하여 표시하는 영상을 상기 HMD로 제공하는 단계;
    를 포함하고,
    상기 실제인체모형은,
    피부에 대응하는 실리콘 층;
    상기 실리콘 층 하부에 배치되는 외골격에 대응하는 스티로폴 층;
    상기 스티로폴 층의 하부에 배치되는 충진재로 구성된 라이트클레이 층;
    상기 라이트클레이 층의 하부에 배치되되, 중심부에 절연체가 배치되는 전도성실리콘 층; 및
    상기 전도성 실리콘 층의 하부에 배치되는 내골격에 대응하는 나무 층; 을 포함하는 것인, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
  2. 제 1 항에 있어서,
    상기 실제인체모형은,
    실제 인체 크기와 형태가 동일하고, 상기 인체 모형의 일 측에 배치되는 위치추적센서를 포함하되,
    상기 위치추적센서는 상기 서버로 기준위치신호를 전송하여, 상기 서버가 상기 기준위치신호를 바탕으로, 상기 침술 콘트롤러와 실제인체모형 간의 위치관계와 상기 침술 시뮬레이션UI 내의 가상인체모형과 가상 침술 콘트롤러 간의 위치관계 간의 동기화를 수행하는 것인, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
  3. 삭제
  4. 제 1항에 있어서,
    상기 전도성 실리콘 층은,
    상기 절연체의 상부에 배치되는 제 1 전도성 실리콘 층 및 하부에 배치되는 제 2 전도성 실리콘 층을 포함하여 구성되는 것이고,
    상기 침술 콘트롤러의 말단이 상기 전도성 실리콘 층을 관통하는 경우, 제 1 및 제 2 전도성 실리콘에 의해 맞닿게 되어 신호가 발생되는 것인,
    인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
  5. 제 1 항에 있어서,
    상기 침술 콘트롤러는,
    본체 케이스;
    상기 본체 케이스의 하부에 배치되며, 일단으로 상기 실제인체모형을 가압하는 핀;
    상기 핀의 타단에 배치되는 스프링;
    상기 스프링과 상기 핀에 접촉하여 구성되어, 상기 핀이 가압한 압력을 측정하는
    압력센서;
    상기 본체 케이스의 중간부에 배치되는 배터리;
    상기 본체 케이스의 상부에 배치되며, 서버로 위치신호를 전송하기 위해 IR(Infrared Ray)필터, 및 IR센서를 포함하는 센서부;
    를 포함하는,
    인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
  6. 제 1항에 있어서,
    상기 (b)단계는,
    경혈점 평가 콘텐츠를 선택하고, 실습콘텐츠를 설명하는 문구가 제시되고, 상기 경혈점 평가 문제가 표시되는 것인, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
  7. 제1항에 있어서,
    상기 (b)단계는,
    가상인체모형 위에 모든 경혈점에 관한 혈이미지가 점과 선으로 구성되어 오버랩 되어 표시되는 것인, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
  8. 제1항에 있어서,
    상기 (b)단계는,
    증상별 경혈점 보기 콘텐츠를 선택하고, 실습콘텐츠를 설명하는 문구가 제시되고, 콘텐츠 메뉴판 하단에는 복수의 증상명이 표시되는 것인, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
  9. 제 1항에 있어서,
    상기 (c)단계는,
    침술 콘트롤러가 특정 경혈점을 누르는 듯한 영상과 침술로 누르는 압력에 대한 수치 정보가 함께 제공되는 것인, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
  10. 제1항에 있어서,
    상기 (c)단계는,
    가상디스플레이에는 해당 경혈점에 대한 특징, 위치, 침구법에 대한 정보와 상기 해당 경혈점을 누르는 법에 대한 동영상이 함께 제공되는 것인, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
  11. 제1항에 있어서,
    상기 (c)단계는,
    침술 콘트롤러로 가한 각 압력 별 신체피부로 삽입되는 깊이에 대한 정보가 가상 디스플레이 옆 공간에 제공되는 것인, 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템을 통한 침술 훈련 제공방법.
KR1020200162031A 2020-11-27 2020-11-27 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템 KR102444058B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200162031A KR102444058B1 (ko) 2020-11-27 2020-11-27 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200162031A KR102444058B1 (ko) 2020-11-27 2020-11-27 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템

Publications (2)

Publication Number Publication Date
KR20220074008A KR20220074008A (ko) 2022-06-03
KR102444058B1 true KR102444058B1 (ko) 2022-09-16

Family

ID=81982625

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200162031A KR102444058B1 (ko) 2020-11-27 2020-11-27 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템

Country Status (1)

Country Link
KR (1) KR102444058B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116646052B (zh) * 2023-06-28 2024-02-09 西安交通大学医学院第二附属医院 一种基于三维人体模型的辅助针灸定位系统与方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101407077B1 (ko) 2012-12-26 2014-06-12 강원대학교산학협력단 근육주사 훈련용 전극 모듈

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100446548B1 (ko) * 2002-05-27 2004-09-01 신진태 가상현실의 한방침구 시스템
KR20190067966A (ko) * 2017-12-08 2019-06-18 주식회사 비온시이노베이터 클라우드 기반 학습자 중심의 침술훈련과 평가를 위한 인체모형 및 가상 시뮬레이터
KR102199189B1 (ko) * 2018-12-14 2021-01-06 아주통신(주) 혼합현실을 이용한 침술 훈련시스템 및 이를 이용한 침술 훈련방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101407077B1 (ko) 2012-12-26 2014-06-12 강원대학교산학협력단 근육주사 훈련용 전극 모듈

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
비특허 1

Also Published As

Publication number Publication date
KR20220074008A (ko) 2022-06-03

Similar Documents

Publication Publication Date Title
US11361516B2 (en) Interactive mixed reality system and uses thereof
CN107067856B (zh) 一种医学模拟训练系统和方法
CN111465970B (zh) 用于教导患者护理的增强现实系统
Coles et al. Integrating haptics with augmented reality in a femoral palpation and needle insertion training simulation
US7114954B2 (en) Interaction education system for teaching patient care
KR102199189B1 (ko) 혼합현실을 이용한 침술 훈련시스템 및 이를 이용한 침술 훈련방법
KR20190087912A (ko) 증강현실과 가상현실을 이용한 훈련용 응급처치 시뮬레이션 방법
US20080050711A1 (en) Modulating Computer System Useful for Enhancing Learning
CN111408010B (zh) 一种自闭症儿童空间感知能力训练装置及训练方法
Boonbrahm et al. Interactive marker-based augmented reality for CPR training
KR102444058B1 (ko) 인체모형 및 침술 콘트롤러를 이용한 혼합현실 침술 훈련 시스템
Strada et al. Holo-BLSD–A holographic tool for self-training and self-evaluation of emergency response skills
KR20180097343A (ko) 심폐 소생술 훈련 시스템
KR100446548B1 (ko) 가상현실의 한방침구 시스템
CN116631252A (zh) 一种基于混合现实技术的体格检查模拟系统及方法
KR20180097334A (ko) 심폐 소생술 훈련 시뮬레이션 방법
CN110599882A (zh) 一种针灸装置
CN116229793A (zh) 一种基于虚拟现实技术的培训考核系统
Deutsch et al. Formative evaluation and preliminary findings of a virtual reality telerehabilitation system for the lower extremity
CN111276022A (zh) 一种基于vr技术的胃镜模拟操作系统
KR102252249B1 (ko) 개선된 인체모형 및 침술 컨트롤러를 구비한 침술훈련시스템
CN211264765U (zh) 一种针灸装置
CN114038259A (zh) 一种5g虚拟现实医学超声实训系统及其方法
KR20210061866A (ko) 침술 훈련 시스템에 활용하기 위한 경혈 평가 콘텐츠
RU2799123C1 (ru) Способ обучения с использованием взаимодействия с физическими объектами в виртуальной реальности

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant