KR20200125294A - 전자적 루페 장치 및 이를 이용한 진단 방법 - Google Patents

전자적 루페 장치 및 이를 이용한 진단 방법 Download PDF

Info

Publication number
KR20200125294A
KR20200125294A KR1020190049368A KR20190049368A KR20200125294A KR 20200125294 A KR20200125294 A KR 20200125294A KR 1020190049368 A KR1020190049368 A KR 1020190049368A KR 20190049368 A KR20190049368 A KR 20190049368A KR 20200125294 A KR20200125294 A KR 20200125294A
Authority
KR
South Korea
Prior art keywords
patient
image
server
electronic loupe
loupe device
Prior art date
Application number
KR1020190049368A
Other languages
English (en)
Other versions
KR102236486B1 (ko
Inventor
임승준
김기석
Original Assignee
주식회사 메디씽큐
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 메디씽큐 filed Critical 주식회사 메디씽큐
Priority to KR1020190049368A priority Critical patent/KR102236486B1/ko
Publication of KR20200125294A publication Critical patent/KR20200125294A/ko
Application granted granted Critical
Publication of KR102236486B1 publication Critical patent/KR102236486B1/ko

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4824Touch or pain perception evaluation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022Monitoring a patient using a global network, e.g. telephone networks, internet
    • A61B5/0476
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4821Determining level or depth of anaesthesia
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7275Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7445Display arrangements, e.g. multiple display units

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Psychiatry (AREA)
  • Physiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Hospice & Palliative Care (AREA)
  • Pain & Pain Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Psychology (AREA)
  • Anesthesiology (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

본 발명은 전자적 루페 장치에 관한 것으로서 서버로부터 환자의 고통 레벨정보를 수신하는 제1 통신부, 및 상기 제1 통신부가 수신한 고통 레벨정보를 디스플레이하는 제1 디스플레이부를 포함하고, 상기 환자의 고통 레벨정보는 환자가 착용한 전자적 루페장치가 상기 환자의 뇌파를 측정하여 생성되는 정보인 것을 특징으로 하며, 환자의 고통정도를 진료 중에 의사가 정확하게 파악할 수 있다.

Description

전자적 루페 장치 및 이를 이용한 진단 방법{A electric loupe and diagnosis method using the same}
본 발명은 전자적 루페 장치에 관한 것으로서, 더욱 상세하게는 환자의 고통정도를 진료 중에 의사가 정확하게 파악할 수 있는 전자적 루페 장치 및 이를 이용한 진단 방법에 관한 것이다.
많은 전공의 외과 의사는 흔히 정교한 구조체를 수술할 때 루페를 사용한다. 외과 의사가 사용하는 루페는 안경의 렌즈 내에 장착되고, 교정 시력, 동공간 거리 및 원하는 초점 거리를 고려하여 개별 외과 의사마다 주문 제작된다. 몇몇 루페는 헬멧 또는 머리에 착용하는 다른 장치에 부착되며 다수의 배율이 이용가능하다. 이들은 성형 수술, 정형외과 수술, 미세혈관 수술 및 건(tendon) 봉합 수술에 가장 흔히 사용된다.
그런데 종래에는 의사들만이 루페를 사용하기 때문에 환자가 직접 환부를 확인하면서 의사의 설명을 들을 수 없었고, 환부에 대한 바람직한 치료 방법에 대해서는 전적으로 의사의 진단에 의존해야 했기 때문에 과잉진료의 의심이 드는 상황에서도 정확한 진단인지 확인할 수 없었다. 또한, 실제 치료가 필요하지 않은 경우에도 직접 의사를 찾아가 대면 진료를 받기 전에는 환자가 알 수 없는 불편함이 있었다. 뿐만 아니라 의사는 치료 중 환자의 고통정도를 파악할 수 없어 마취정도나 신경치료가 제대로 되었는지 확인할 수 있는 방법이 없었다.
선행기술(한국공개번호:10-2019-0017377)은 치료시 치아에 중첩된 AR 데이터를 확인하여 진료에 도움이 되는 기술이 개시되어 있으나, 상기 선행기술 역시 환자 본인이 직접 의사를 찾아가야 하고, 치료 중 손을 사용하기 힘든 환자로부터 어떠한 피드백도 받을 수 없는 문제점이 있었다.
따라서, 본 발명이 해결하고자 하는 첫 번째 과제는 환자의 고통정도를 진료 중에 의사가 정확하게 파악할 수 있는 전자적 루페 장치를 제공하는 것이다.
본 발명이 해결하고자 하는 두 번째 과제는 환자가 진료를 받는 중 두 손을 사용하지 못하거나 말을 할 수 없는 상황에서도 머리 또는 눈동자의 움직임만으로 의사에게 의사표시를 바로 할 수 있는 전자적 루페를 이용한 진단 방법을 제공하는 것이다.
또한, 상기된 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공하는데 있다.
본 발명은 상기 첫 번째 과제를 달성하기 위하여, 서버로부터 환자의 고통 레벨정보를 수신하는 제1 통신부; 및 상기 제1 통신부가 수신한 고통 레벨정보를 디스플레이하는 제1 디스플레이부를 포함하고, 상기 환자의 고통 레벨정보는 환자가 착용한 전자적 루페장치가 상기 환자의 뇌파를 측정하여 생성되는 정보인 것을 특징으로 하는 전자적 루페 장치를 제공한다.
본 발명의 일 실시 예에 의하면, 상기 제1 통신부는 마크 정보에 의하여 선택된 녹화영상을 수신하고, 상기 제1 디스플레이부는 상기 녹화영상을 디스플레이하고, 상기 마크 정보는 녹화 중인 영상에 삽입되는 정보인 것이 바람직하다.
또한, 상기 제1 통신부는 상기 서버로부터 협진 요청신호를 수신하고, 상기 제1 통신부가 상기 협진 요청신호에 대하여 상기 서버로 협진 수락신호를 전송하면, 상기 서버는 상기 협진 요청신호를 생성한 전자적 루페 장치에서 디스플레이되는 영상을 상기 제1 통신부로 전송하여 상기 영상을 공유할 수 있다.
한편, 상기 제1 통신부는 상기 서버의 AI 모듈에 의해 결정된 상기 녹화영상에 추가할 AR 영상을 수신할 수 있다.
본 발명의 다른 실시 예에 의하면, 움직임을 감지하는 제1 센서부를 더 포함하고, 상기 제1 통신부는 상기 제1 센서부에서 감지된 움직임 정보를 상기 서버로 송신하고, 상기 서버가 상기 움직임 정보를 이용하여 생성한 AR 데이터를 수신하며, 상기 제1 디스플레이부는 상기 수신한 AR 데이터를 디스플레이 할 수 있다.
한편, 상기 제1 통신부는 상기 환자가 착용한 전자적 루페 장치에서 생성된 고통 레벨정보가 임계치를 넘는 경우 마취가 충분하지 않다는 신호를 상기 서버로부터 수신할 수 있다.
또한, 상기 제1 통신부는 상기 환자의 환부가 치아이고, 상기 환자가 착용한 전자적 루페 장치에서 생성된 고통 레벨정보가 임계치를 넘는 경우 상기 치아의 신경이 살아있는 것으로 표시하거나 신경치료가 필요한 것을 표시하는 AR 데이터를 상기 서버로부터 수신하여 상기 제1 디스플레이부에 출력하는 것이 바람직하다.
본 발명의 또 다른 실시 예에 의하면, 상기 의사가 착용한 전자적 루페 장치에 디스플레이되는 것과 동일한 영상이 상기 환자가 착용한 전자적 루페 장치에 출력될 수 있다.
또한, 진단하는 의사와 환자가 다른 장소에 있는 경우, 상기 환자 옆에 있는 보조자가 착용한 상기 전자적 루페 장치를 이용하여 획득한 상기 환자의 환부의 영상을 상기 서버를 통해 상기 의사가 착용한 전자적 루페 장치로 전송할 수 있다.
상기 치아의 치료영상을 상기 치아의 지정번호에 대응하여 저장하고, 상기 치아가 다시 치료되는 경우 상기 저장된 치료영상을 상기 제1 디스플레이부에 출력하여 상기 의사에게 제공하는 것이 바람직할 것이다.
상기 환자의 환부 영상이 치아 영상인 경우, 상기 제1 통신부는 상기 서버의 AI 모듈로부터 상기 치아 영상의 배열 또는 형상을 기 저장된 건강한 치아 영상과 비교학습함으로써, 치료가 필요한 치아의 지정번호를 수신하는 것이 바람직하다.
본 발명은 상기 첫 번째 과제를 달성하기 위하여, 환자가 착용하는 전자적 루페 장치에 있어서, 상기 환자의 뇌파를 측정하여 상기 환자의 고통레벨 정보를 생성하는 고통레벨 정보 생성부; 서버로부터 마크 정보에 의하여 선택된 녹화영상을 수신하고, 상기 생성된 고통레벨 정보를 상기 서버로 전송하는 제2 통신부; 및 상기 제2 통신부가 수신한 녹화영상을 디스플레이하는 제2 디스플레이부를 포함하고, 상기 마크 정보는 녹화 중인 영상에 삽입되는 정보인 것을 특징으로 하는 전자적 루페 장치를 제공한다.
본 발명의 일 실시 예에 의하면, 움직임을 감지하는 제2 센서부를 더 포함하고, 상기 제2 디스플레이부에 치료 환부를 치료할 수 있는 적어도 1개 이상의 옵션을 디스플레이되면, 상기 환자가 상기 옵션 중 하나를 일정시간 이상 응시하면, 시선의 이동으로 상기 옵션을 드래그하여 치아치료 선택 리스트에 포함함으로써, 선택된 복수 개의 옵션 비용을 환자에게 디스플레이할 수 있다.
또한, 상기 전자적 루페 장치에 출력되는 AR 데이터는 상기 환자의 환부를 치료하는 옵션들을 포함하고, 상기 옵션들이 상기 환부에 치료되었을 때의 결과를 나타내는 AR 영상을 디스플레이하는 것이 바람직하다.
이때, 상기 환자의 환부를 치료하는 사례와 유사한 사례의 치료결과영상 또는 치료경과를 상기 서버로부터 수신하여 상기 제2 디스플레이부로 출력하여 상기 환자에게 제공할 수 있다.
본 발명은 상기 두 번째 과제를 달성하기 위하여, 서버로부터 환자의 고통 레벨정보를 수신하는 단계; 및 상기 수신한 고통 레벨정보를 디스플레이하는 단계를 포함하고, 상기 환자의 고통 레벨정보는 환자가 착용한 전자적 루페 장치가 상기 환자의 뇌파를 측정하여 생성되는 정보인 것을 특징으로 하는 전자적 루페 장치를 이용한 진단 방법을 제공한다.
또한, 본 발명은 상기 두 번째 과제를 달성하기 위하여, 서버로부터 마크 정보에 의하여 선택된 녹화영상을 수신하는 단계; 상기 수신한 녹화영상을 디스플레이하는 단계; 환자의 뇌파를 측정하여 상기 환자의 고통레벨 정보를 생성하는 단계; 및 상기 생성된 고통레벨 정보를 서버로 전송하는 단계를 포함하는 것을 특징으로 하는 전자적 루페 장치를 이용한 진단 방법을 제공한다.
상기 다른 기술적 과제를 해결하기 위하여, 본 발명은 상기된 전자적 루페를 이용한 진단 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 제공한다.
본 발명에 따르면, 환자의 고통정도를 진료 중에 의사가 정확하게 파악할 수 있다.
또한, 본 발명에 따르면, 환자가 진료를 받는 중 두 손을 사용하지 못하거나 말을 할 수 없는 상황에서도 머리 또는 눈동자의 움직임만으로 의사에게 의사표시를 바로 할 수 있다.
도 1은 본 발명의 바람직한 일 실시 예에 따른 전자적 루페 장치의 구성도이다.
도 2는 치료가 필요한 특정 치아에 대하여 치료 옵션이 AR 영상으로 표시된 것을 도시한 것이다.
도 3은 치아 일부가 손실되어 레진 치료가 필요한 상황에서 AR 영상으로 레진 치료가 된 후의 상태를 도시한 것이다.
도 4는 특정 치아를 크라운 치료로 하는 경우 크라운 재료에 따라 제시되는 AR 영상을 도시한 것이다.
도 5는 본 발명의 바람직한 일 실시 예에 따른 전자적 루페 장치를 이용한 진단 방법의 흐름도이다.
이하 첨부된 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있는 바람직한 실시 예를 상세히 설명한다. 그러나 이들 실시 예는 본 발명을 보다 구체적으로 설명하기 위한 것으로, 본 발명의 범위가 이에 의하여 제한되지 않는다는 것은 당업계의 통상의 지식을 가진 자에게 자명할 것이다.
본 발명이 해결하고자 하는 과제의 해결 방안을 명확하게 하기 위한 발명의 구성을 본 발명의 바람직한 실시 예에 근거하여 첨부 도면을 참조하여 상세히 설명하되, 도면의 구성요소들에 참조번호를 부여함에 있어서 동일 구성요소에 대해서는 비록 다른 도면상에 있더라도 동일 참조번호를 부여하였으며 당해 도면에 대한 설명시 필요한 경우 다른 도면의 구성요소를 인용할 수 있음을 미리 밝혀둔다. 아울러 본 발명의 바람직한 실시 예에 대한 동작 원리를 상세하게 설명함에 있어 본 발명과 관련된 공지 기능 혹은 구성에 대한 구체적인 설명 그리고 그 이외의 제반 사항이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우, 그 상세한 설명을 생략한다.
덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 '연결'되어 있다고 할때, 이는 '직접적으로 연결'되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 '간접적으로 연결'되어 있는 경우도 포함한다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 또는 "포함하는(comprising)"은 언급된 구성요소, 단계, 동작, 또는 소자 외에 하나 이상의 다른 구성요소, 단계, 동작, 또는 소자의 존재 또는 추가를 배제하지 않는다.
제2, 제1 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제2 구성요소는 제1 구성요소로 명명될 수 있고, 유사하게 제1 구성요소도 제2 구성요소로 명명될 수 있다.
도 1은 본 발명의 바람직한 일 실시 예에 따른 전자적 루페 장치의 구성도이다.
도 1을 참조하면, 본 실시 예에 따른 전자적 루페 장치는 의사용 전자적 루페 장치(100)와 환자용 전자적 루페 장치(200)로 구분될 수 있다.
의사용 전자적 루페 장치(100)는 의사가 착용하고, 환자용 전자적 루페 장치(200)는 환자가 착용하는 것이 바람직하다. 의사용 전자적 루페 장치(100)와 환자용 전자적 루페 장치(200)는 서버(300)를 거쳐 서로 통신할 수 있고, 제1 통신부(130)와 제2 통신부(230) 간에 서버(300)를 거치지 않고 직접 송수신하는 것도 가능하다.
다른 실시예로서, 의사와 환자가 서로 원격지에 위치한 경우 의사용 전자적 루페 장치(100)를 환자와 같이 있는 보조자가 착용하여 환자의 환부의 영상을 의사가 착용한 환자용 전자적 루페 장치(200)로 서버(300)를 통하여 전달하거나 직접 제1 통신부(130)와 제2 통신부(230)를 통해 전송할 수 있다. 이 경우 환자 본인의 치아상태(치료할 치아의 면적, 충치 진행의 정도 등)를 의사를 직접 찾아가지 않고도 원격으로 확인할 수 있고, 진료 중에도 자신의 환부를 직접 확인할 수 있다.
의사용 전자적 루페 장치(100)는 카메라부(110), 제1 센서부(120), 제1 통신부(130), 및 제1 디스플레이부(140)를 포함하여 구성된다.
의사용 전자적 루페 장치(100)는 사용자가 착용하는 스마트 글라스, HMD 장치(헤드 마운트형 디스플레이 장치) 형태인 것이 바람직하다.
카메라부(110)는 진단하고자 하는 환부의 영상을 촬영한다. 의사로부터 수신한 마크 정보를 이용하여 카메라부(110)가 촬영하는 녹화영상의 녹화시작과 녹화종료를 나타내는 것이 바람직하다. 제1 센서부(120)에 의해 특정 제스처가 입력되거나 별도의 인터페이스(예를 들어, 버튼, 스위치)를 특정 신호가 통해 입력되는 경우 상기 마크 정보가 입력된 것으로 인식할 수 있다.
일 례로서, 치과의 경우 카메라부(110)는 3차원 디지털촬영을 이용하여 환자의 치아 및 안면 골구조에 대한 3D 이미지를 생성하며, 예컨대 3D 구강 스캐너 또는 CBCT(Cone Beam Computerized Tomography: 콘빔CT), 3D 모델스캐너 등으로 구성될 수 있다. 3D 구강 스캐너는 구강 내에 조사된 입사광이 치아 또는 피사체에 반사되는 경우 반사광을 센싱하여 구강 내 피사체의 전체 형상을 3D 이미지로 생성한다. CBCT는 면적검출기를 이용하여 원추형의 투과 X선을 2차원적으로 검출하고, 이를 이용하여 3차원 체적 정보를 획득함으로써 구강 내 피사체에 대한 1회전 스캔만으로 3D 이미지를 생성한다. 3D 구강 스캐너에 의한 3D 이미지는 피사체(치아, 잇몸 등)의 표면 형상을 정확히 표현하는 장점이 있고, CBCT에 의한 3D 이미지는 치아의 치관 정보뿐만 아니라 치조골, 치근 정보까지 정확히 표현하는 장점이 있다.
제1 센서부(120)는 의사용 전자적 루페 장치(100)를 머리에 착용한 의사 또는 보조자의 움직임을 감지하여 움직임 정보를 생성한다.
제1 센서부(120)는 3축 가속도 센서와 3축 자이로 센서를 이용하여 의료진 또는 보조자의 머리 움직임을 감지할 수 있다. 상기 생성된 움직임 정보는 의사의 머리 움직임 뿐만 아니라 눈동자의 좌우, 위아래 이동 정보를 포함하고, 눈동자가 일정 시간 이상 정지된 상태도 움직임 정보가 될 수 있다.
의사가 의사용 전자적 루페 장치(100)를 착용한 상태에서 환자를 진단하거나 치료하기 위해 두 손을 모두 사용할 때, 제1 디스플레이부(140)에 디스플레이된 메뉴를 선택하거나 버튼을 누르는 등의 행위를 하기 위해서 제1 센서부(120)에서 감지된 움직임 정보를 이용하는 것이 바람직하다.
구체적으로, 착용자가 고개 내지 얼굴을 좌우로 돌리거나, 고개 내지 얼굴을 앞뒤로 이동시키거나, 고개 내지 얼굴을 위아래로 이동시키거나, 고개 내지 얼굴을 회전시킬 경우 제1 센서부(120)는 이러한 움직임을 감지할 수 있다.
또한, 제1 센서부(120)는 각 움직임을 1회만 하는지 아니면 여러 번 하는지를 감지할 수 있다. 또 다른 실시예에 따라서는, 움직임이 여러 번 있는 경우, 제1 센서부(120)는 각 움직임 사이의 시간 간격을 감지할 수 있다.
이러한 움직임은 각각 서로 다른 의미를 가지며, 착용자가 얼굴을 움직이는 형태, 각 움직임의 시도 횟수 또는 각 움직임 사이의 시간 간격 등을 조절하여 다양한 행위가 발생하도록 할 수 있다.
한편, 제1 센서부(120)는 머리의 움직임 외에도 의료진 눈동자의 동작, 눈 깜박임을 감지하여 명령어에 대응시킬 수 있다. 상기 눈동자의 동작은 일정시간 동안 특정 오브젝트에 바라보는 것과 눈동자가 물체를 바라보는 시선의 이동 등을 포함한다.
예를 들어, 상기 눈동자가 일정한 시간 동안 특정 오브젝트를 바라보는 경우 상기 오브젝트를 선택한 것으로 인지하고, 눈동자의 시선이 이동함에 따라 선택된 오브젝트가 이동하게 되며, 눈을 깜박이는 경우 선택을 해제하는 것을 인지할 수 있다.
제1 통신부(130)는 카메라부(110)에서 획득한 환부의 영상과 제1 센서부(120)에서 감지된 움직임 정보를 서버(300)로 송신하고, 서버(300)가 상기 영상과 상기 움직임 정보로부터 가공된 AR 데이터를 수신할 수 있다. 한편, 상기 수신된 AR 데이터는 상기 움직임 정보로부터 모션 입력을 해석하고, 모션 입력에 의해 선택된 메뉴에 해당하는 AR 데이터일 수 있다.
서버(300)가 수신한 영상은 카메라부(110)에 의해 촬영되고, 서버(300)는 상기 영상에 포함된 특정 오브젝트에 대하여 AR 데이터를 부가할 수 있다.
서버(300)가 제1 통신부(130)로 송신하는 AR 데이터를 상기 수신한 영상 데이터에 부가하여 함께 보낼 수도 있다. 한편, 상기 영상 데이터는 용량이 커서 실시간 전송에 어려움이 있으므로, 서버(300)가 상기 영상 데이터를 송신하지 않고 상기 영상에서 오브젝트가 위치한 좌표 또는 오브젝트 위치와 상기 좌표나 위치에 대응하는 AR 데이터를 제1 통신부(130)로 보낼 수 있다.
서버(300)는 의사용 전자적 루페 장치(100)로부터 수신한 환부의 영상과 움직임 정보를 수신하여 AR 데이터를 생성할 수 있으나, 의사용 전자적 루페 장치(100)가 서버(300)를 이용하지 않고 직접 AR 데이터를 생성하는 것도 가능하다.
제1 디스플레이부(140)는 카메라부(110)에서 획득한 환부의 영상과 제1 통신부(130)가 수신한 AR 데이터를 디스플레이한다. 상기 환부에 AR 데이터가 겹쳐서 디스플레이될 수 있는 이유는 AR 데이터가 디스플레이될 오브젝트 좌표 또는 위치를 서버(300)가 제1 통신부(130)로 같이 전송하기 때문이다. 다른 실시예로서, 서버(300)로부터 AR 데이터가 부가된 영상 데이터를 수신하여 디스플레이할 수 있다.
한편, 서버(300)는 AI(Artificial Intelligence) 기능을 갖고 있는 것이 바람직하며, 해당 AI 모듈은 촬영되고 있는 치아 영상에서 일부 치아에 대한 마크(Mark) 정보를 그 영상의 부분에 부가하여 저장할 수 있다. 예를 들어, 영상 중 'A 수술 도구를 사용하는 수술 장면'이 나오는 경우, 상기 AI 모듈은 그 영상에 'A 수술 도구'라는 마크 정보를 더하여 영상 부분을 저장할 수 있다.
상기 수술도구가 치과용 핸드피스인 경우, 상기 AI 모듈은 특정 치아에 대하여 어떠한 핸드피스를 사용했는지 상기 마크 정보를 이용하여 녹화되는 영상과 함께 저장될 수 있다.
치과용 핸드피스는 치아에 충치가 있을때 또는 치아가 날카로워 다듬을 때 치아 제거 및 부드럽게 다듬을 때 사용되는 기구이다.
고속 핸드피스는 300,000~450,000 R.P.M으로 고속회전하여 치아를 절삭하는 반면, 저속 핸드피스는 200,000~300,000 R.P.M으로 회전속도가 느려 기공용으로 사용된다. 특히 고속 핸드피스는 애나멜질, 상아질, 및 오래된 금속 수복물(크라운 등) 제거가 필요한 충치치료에 사용되고, 저속 핸드피스는 충치 자체의 절삭 및 예방적 치료를 위해 사용된다.
특정 치아의 치료에 사용된 핸드피스의 종류가 마크 정보와 함께 녹화영상에 저장되면, 추후 동일한 치아를 치료시, 상기 녹화영상을 디스플레이하면서 이전 치료에 사용되었던 핸드피스를 표시할 수 있다.
또한, 녹화영상에 저장되는 마크 정보를 이용하여 사용자가 찾기 원하는 영상을 손쉽게 검색할 수 있다. 특정 수술도구(예를 들면, 고속 핸드피스, 저속 핸드피스, 에어워터 시린지, 스케일링 등)가 사용되는 구간, 특정 환부(예를 들면, 특정 치아번호)가 촬영되는 구간, 특정 바이탈 사인(혈압, 체온, 맥박, 호흡량 등)이 측정되는 구간 등이 마크 정보로 저장되면, 사용자가 녹화영상 중 필요한 구간을 검색하기가 용이하다.
상기 마크 정보는 상술한 치료에 사용된 수술도구 외에도 다양한 정보를 포함하는 것이 바람직하다. 의사, 협진 의사, 또는 의료 전문가 등이 입력한 것으로서, 수술 도중 특정 환부에 대한 의학적 소견이나 특정 환부를 정상 조직과 구별하기 위한 영역 표시가 마크 정보에 포함될 수 있다.
또한, 특정 환부에 대한 과거 치료 기록, 특정 환부 치료시 추천 치료 방법, 및 예상되는 질환 예측 등을 마크 정보에 포함하는 것이 바람직할 것이다.
상기 과거 치료 기록에는 해당 치아의 신경치료 기록, 마지막 스케일링 받은 날짜, 또는 과거 촬영한 X-RAY 사진 등이 포함된다. 상기 추천 치료 방법은 AI 모듈이 상기 특정 환부에 대한 과거 유사한 치료 사례들을 분석하여 가장 예후가 좋은 치료 방법을 선택하여 제시할 수 있다. 또한, 상기 AI 모듈은 환자로부터 측정된 의료 영상과 데이터를 기초로 분석하여 발병가능성이 높은 질환을 예측하고, 마크 정보에 포함시킬 수 있다.
한편, 진단하는 의료진과 환자가 다른 장소에 있어 의료진이 직접 환자를 볼 수 없는 경우, 환자와 같이 있는 보조자가 착용한 의사용 전자적 루페 장치(100)를 이용하여 획득한 상기 환자의 환부의 영상과 상기 보조자의 움직임 정보로 가공된 AR 데이터를 서버(300)를 통해 의사가 착용한 의사용 전자적 루페 장치(100)로 전송할 수 있다. 따라서, 원격지에 있는 의료인도 보조자의 도움을 얻어 환자를 진단할 수 있게 된다. 이때, 상기 AR 데이터는 상기 움직임 정보로부터 모션 입력을 해석하고, 모션 입력에 의해 선택된 메뉴에 해당하는 AR 데이터일 수 있다.
또한, 본 발명에 따른 의사용 전자적 루페 장치(100)를 착용한 의료진이 다른 의료진에게 협진을 요청할 수 있다. 이 경우 얼굴을 움직이는 형태 및 각 움직임의 시도 횟수를 조절하여 협진을 요청하는 협진 요청부(미도시)를 추가로 구비할 수 있다.
협진을 요청받은 또 다른 의료진은 협진요청 수신부(미도시)를 구비한 의사용 전자적 루페 장치(100)를 착용하고, 협진을 요청한 의료진이 착용한 의사용 전자적 루페 장치(100)의 디스플레이부에 출력되는 영상을 공유할 수 있다.
환자용 전자적 루페 장치(200)는 제2 센서부(220), 제2 통신부(230), 제2 디스플레이부(240), 및 고통레벨 정보 생성부(250)를 포함하여 구성된다.
환자용 전자적 루페 장치(200)는 사용자가 착용하는 스마트 글라스, HMD 장치(헤드 마운트형 디스플레이 장치) 형태인 것이 바람직하다.
일 실시 예로서, 상기 의료인 또는 보조자가 착용한 의사용 전자적 루페 장치(100)를 통해 보는 영상 및 디스플레이되는 AR 데이터가 상기 환자가 착용한 환자용 전자적 루페 장치(200)에 동일하게 출력되고, 상기 환자의 움직임 정보가 서버(300)로 송신되는 것이 바람직하다.
환자용 전자적 루페 장치(200)는 의료진이 바라보는 환부의 영상을 환자에게 디스플레이하게 되므로, 서버(300) 또는 의사용 전자적 루페 장치(100)로부터 환부의 영상 데이터를 수신하는 것이 바람직하다.
제2 센서부(220)는 환자용 전자적 루페 장치(200)를 머리에 착용한 환자의 움직임을 감지하여 움직임 정보를 생성한다.
제2 센서부(220)는 3축 가속도 센서와 3축 자이로 센서를 이용하여 환자의 머리 움직임을 감지할 수 있다.
환자가 의료진으로부터 진료나 진단을 받는 경우 두 손을 사용하여 머리에 착용한 환자용 전자적 루페 장치(200)를 제어하는 것은 어려운 상황이다. 제2 디스플레이부(240)에 디스플레이된 메뉴를 선택하거나 버튼을 누르는 등의 행위를 하기 위해서 제2 센서부(120)에서 감지된 움직임 정보를 이용할 수 있다.
예를 들어, 환자 머리의 좌우회전, 위아래 회전하는 동작, 시계방향, 반시계방향으로 회전하는 동작 등에 명령어를 대응시킬 수 있다.
한편, 제2 센서부(220)는 머리의 움직임 외에도 환자 눈동자의 동작을 감지하여 명령어에 대응시킬 수 있다. 상기 눈동자의 동작은 눈동자가 움직이지 않고 고정된 시간(계속 응시하는 시간) 등을 포함한다. 이러한 동작 감지를 통해 환자는 말을 할 수 없는 상황에서도 의사를 전달하는 것이 가능하다.
제2 통신부(230)는 서버(300)로부터 카메라부(110)에서 획득한 환부의 영상과 AR 데이터를 수신하고, 제2 센서부(220)에서 감지된 움직임 정보를 서버(300)로 송신한다.
제2 통신부(230)가 서버(300)로부터 수신한 영상은 의사용 전자적 루페 장치(100)의 카메라부(110)를 통해 획득한 영상이고, 수신한 AR 데이터는 상기 영상에 포함된 특정 오브젝트에 대응하는 AR 데이터인 것이 바람직하다.
제2 통신부(230)는 상기 특정 오브젝트의 좌표 또는 위치 정보를 수신하고, 상기 좌표 또는 오브젝트 위치는 AR 데이터를 상기 영상 내 오브젝트에 표시하는데 참조되는 것이 바람직하다.
제2 디스플레이부(240)는 제2 통신부(230)가 수신한 영상과 AR 데이터를 디스플레이한다.
제2 디스플레이부(240)에 치료 환부를 치료할 수 있는 적어도 1개 이상의 옵션을 디스플레이하고, 상기 환자가 상기 옵션 중 하나를 일정시간 이상 응시하면, 시선의 이동으로 상기 옵션을 드래그하여 구매리스트에 포함함으로써, 선택된 복수 개의 옵션 비용을 환자에게 디스플레이하도록 할 수 있다.
상기 환자가 착용한 환자용 전자적 루페 장치(200)의 제2 디스플레이부(240)에 출력되는 AR 데이터는 상기 환자의 환부를 치료하는 옵션들을 디스플레이하되, 상기 옵션들이 상기 환부에 치료되었을 때의 결과를 나타내는 AR 영상을 디스플레이할 수 있다.
즉, 환자가 디스플레이된 환부 치료 옵션들 중 하나를 선택하면, 상기 선택된 옵션이 사용되어 상기 환부에 치료된 예상결과를 AR 영상으로 디스플레이하는 것이 바람직하다.
또한, 상기 환자의 환부를 치료하는 사례와 유사한 사례의 치료결과영상 또는 치료경과를 서버(300)에서 검색하여 제2 디스플레이부(240)에 출력할 수 있다.
도 2는 치료가 필요한 특정 치아에 대하여 치료 옵션이 AR 영상으로 표시된 것을 도시한 것이다.
도 2를 참조하면, 특정 치아에 대하여 서버(300)의 AI 모듈이 판단하여 인레이가 필요한 면적이 결정되어 디스플레이된다. AI 모듈의 판단을 통해 인레이가 필요한 면적이 디스플레이되며, 의사가 임의적으로 인레이 필요 면적을 수정하지 못하게 함으로써, 과잉 진료를 방지하고, 치료에 대한 신뢰도를 높일 수 있다.
또한, 인레이 치료 옵션인 레진 인레이, 세라믹 인레이, 및 금 인레이가 AR 영상으로 디스플레이되고, 해당 인레이 재료로 치료된 경우의 치료 후 영상도 같이 디스플레이되는 것이 바람직하다.
해당 인레이 치료 옵션에 대한 치료가격이 환자에게 디스플레이되고, AI 모듈이 판단할 때, 환자에게 가장 최적의 인레이 옵션을 추천할 수 있다.
환자가 환자용 전자적 루페 장치(200)를 착용한 상태에서 제2 센서부(220)가 환자의 눈동자가 움직이지 않고 특정 메뉴에 시선이 고정되어 일정 시간 유지하는 것을 감지하면, 해당 메뉴가 선택되어 화면 위로 떠오르게되고, 눈동자의 시선이 이동함에 따라 선택된 메뉴도 이동하게 된다.
선택된 메뉴가 치아치료 선택 리스트로 이동되면, 현재까지 선택된 메뉴의 치료 옵션 가격이 모두 계산되어 최종 가격이 환자에게 디스플레이되는 것이 바람직하다.
또한, 해당 환자가 가입한 치아보험을 보험회사서버로부터 수신하고, 치아 보험이 적용가능한지 디스플레이할 수 있다.
도 3은 치아 일부가 손실되어 레진 치료가 필요한 상황에서 AR 영상으로 레진 치료가 된 후의 상태를 도시한 것이다.
의사용 전자적 루페 장치(100)의 카메라부(110)에 의해 촬영된 치아 영상이 서버(300)로 전송되면, 서버(300)의 AI 모듈은 치아 영상의 특정 치아가 치료가 필요한지 여부를 판단하고, 치료가 된 후의 영상을 환자용 전자적 루페 장치(200)로 전송하여 환자가 제2 디스플레이부(240)를 통해 확인할 수 있다.
도 3을 참조하면, 특정 치아의 일부가 손실된 경우, 레진 치료가 이루어진 뒤의 치료영상을 AR 영상으로 디스플레이할 수 있다.
환자는 미리 AR 영상을 통해 여러 옵션에 대한 치료 후의 영상을 확인함으로써, 치료 전 가장 마음에 드는 치료 옵션을 선택할 수 있게 된다.
도 4는 특정 치아를 크라운 치료로 하는 경우 크라운 재료에 따라 제시되는 AR 영상을 도시한 것이다.
PFM 크라운은 겉은 도자재질이고, 내부는 금속으로 이루어진 재질로서, 가장 저렴한 크라운이다. 금 크라운은 강도가 단단하면서도 유연하기 때문에 자연치아와 가장 비슷하게 제작할 수 있으나 심미성이 떨어지는 단점이 있다. 지르코니아 크라운은 강도가 아주 단단하고 심미성이 우수하며, 자연치아와 생체친화성이 좋다.
환자는 각 크라운 별로 실제로 치료된 후의 AR 영상을 본 후 선택할 수 있게 되므로, 치료 후의 결과에 대한 만족을 높일 수 있게 된다.
다시 도 1을 참조하면, 고통레벨 정보 생성부(250)는 상기 환자의 뇌파를 측정하여 고통레벨 정보를 생성한다. 고통레벨 정보 생성부(250)는 상기 생성된 고통레벨 정보를 의사용 전자적 루페 장치(100) 또는 서버(300)로 전송한다.
의사용 전자적 루페 장치(100)가 상기 고통레벨 정보를 수신하면, 고통레벨에 따라 소리의 크기를 조절하거나, 빛의 깜박이는 주기를 짧게 하여 고통의 정도를 의사에게 전달할 수 있다.
고통레벨 정보 생성부(250)에서 생성된 고통레벨이 소정의 임계치를 넘는 경우 상기 환부에 마취가 충분하지 않다는 신호를 의사용 전자적 루페 장치(100) 또는 서버(300)로 전송할 수 있다. 이때, 상기 환부가 치아이고, 고통레벨 정보 생성부(250)에서 생성된 고통레벨이 소정의 임계치를 넘는 경우 상기 치아의 신경이 살아있는 것으로 표시하거나 신경치료가 필요한 것을 표시하는 AR 데이터가 제1 디스플레이부(140)에 출력되도록 할 수 있다.
고통레벨 정보 생성부(250)는 통증이 있는 부위에 자극을 가했을 때 뇌가 통증을 느끼는 정도를 뇌파를 통해 측정할 수 있다. 이때의 뇌파를 유발 뇌파라고 부르며, 자극 후 250ms 후에 통증과 관련된 positive 뇌파가 나타나므로 P250이라고 한다.
다른 실시 예로서, 통증이 없는 경우를 0, 통증이 심한 경우를 10이라고 할 때, 환자의 뇌파를 측정하고, 환자가 통증의 정도를 0~10까지 작성하도록 하여 측정된 뇌파와 통증의 정도를 매핑시킨다.
매핑된 데이터를 축적하고, 환자의 통증의 정도(0~10)에 따른 뇌파의 패턴을 기계학습(machine learning)을 통해 학습한다.
즉, 환자가 통증이 가장 심하다고 느끼는 10의 통증에 대응하는 뇌파의 패턴 데이터, 통증이 없다고 느끼는 0에 대응하는 뇌파의 패턴 데이터를 축적하고, 각 통증의 정도에 대응하는 뇌파의 패턴의 특징을 추출한 후, 수신된 뇌파의 패턴을 비교하게 되면, 환자로부터 측정된 뇌파가 환자의 통증의 정도가 어느 정도인지 판단할 수 있게 된다.
다른 실시예로서, 환자의 통증정도를 측정하기 위해 뇌혈류를 측정할 수 있다. 초음파를 이용하여 두개골 내에 위치한 뇌혈관의 혈류 속도를 측정할 수 있다.
바람직하게는 뇌파와 뇌혈류를 모두 고려하여, 환자의 통증 정도를 정확하게 파악할 수 있다.
본 발명에 따른 의사용 전자적 루페 장치(100)를 사용하여 카메라부(110)에서 획득한 영상이 치아 영상인 경우, 서버(300)는 치아의 배열 또는 치아의 형상을 기 저장된 치료가 필요없는 건강한 치아 영상과 비교하고, 치료가 필요한 치아의 치아번호를 확인하여 의사용 전자적 루페 장치(100)로 전송하고 제1 디스플레이부(140) 또는 제2 디스플레이부(240)는 해당 치아와 관련된 AR 데이터를 출력할 수 있다.
또한, 상기 치아의 치료영상을 상기 치아의 치아번호에 대응하여 서버(300)에 저장하고, 동일 환자의 상기 치아가 동일 의료인에 의해 다시 치료되는 경우는 물론, 다른 의료진에 의해 치료되는 경우에도 상기 저장된 치료영상을 제1 디스플레이부(140) 또는 제2 디스플레이부(240)에 출력할 수 있다.
도 5는 본 발명의 바람직한 일 실시 예에 따른 전자적 루페 장치를 이용한 진단 방법의 흐름도이다.
도 5를 참조하면, 본 실시 예에 따른 전자적 루페 장치를 이용한 진단 방법은 도 1에 도시된 전자적 루페 장치에서 시계열적으로 처리되는 단계들로 구성된다. 따라서, 이하 생략된 내용이라 하더라도 도 1에 도시된 전자적 루페 장치에 관하여 이상에서 기술된 내용은 본 실시 예에 따른 전자적 루페 장치를 이용한 진단 방법에도 적용된다.
500 단계에서 의사용 전자적 루페 장치(100)는 진단하고자 하는 환부의 영상을 촬영한다.
510 단계에서 의사용 전자적 루페 장치(100)는 500 단계에서 생성한 영상과 움직임을 감지하는 제1 센서부(120)에서 감지된 움직임 정보를 서버(300)로 송신한다.
의료진이 의사용 전자적 루페 장치(100)를 착용한 상태에서 환자를 진단하거나 치료하기 위해 두 손을 모두 사용할 때, 제1 디스플레이부(140)에 디스플레이된 메뉴를 선택하거나 버튼을 누르는 등의 행위를 하기 위해서 제1 센서부(120)에서 감지된 움직임 정보를 이용한다.
예를 들어, 의료진 머리의 좌우회전, 위아래 회전하는 동작, 시계방향, 반시계방향으로 회전하는 동작 등에 명령어를 대응시킬 수 있다.
한편, 머리의 움직임 외에도 의료진 눈동자의 동작을 감지하여 명령어에 대응시킬 수 있다. 상기 눈동자의 동작은 눈동자가 움직이지 않고 고정된 시간(계속 응시하는 시간) 등을 포함한다.
520 단계에서 의사용 전자적 루페 장치(100)는 서버(300)로부터 상기 영상과 상기 움직임 정보를 이용하여 가공한 AR 데이터를 수신하고, 환자용 전자적 루페 장치(200) 역시 서버(300)로부터 의료진이 착용한 의사용 전자적 루페 장치(100)에서 촬영한 영상과 상기 전자적 루페 장치의 움직임 정보를 이용하여 생성된 AR 데이터를 서버(300)로부터 수신한다. 상기 수신된 AR 데이터는 상기 움직임 정보로부터 모션 입력을 해석하고, 모션 입력에 의해 선택된 메뉴에 해당하는 AR 데이터인 것이 바람직하다.
상기 영상 데이터는 용량이 커서 실시간 전송에 어려움이 있으므로, 서버(300)가 상기 영상 데이터를 송신하지 않고 상기 영상에서 오브젝트가 위치한 좌표 또는 오브젝트 위치를 전송하면서, 상기 좌표나 위치에 대응하는 AR 데이터를 의사용 전자적 루페 장치(100)로 보낼 수 있다.
또한, 환자용 전자적 루페 장치(200)는 서버(300)로부터 마크 정보에 의하여 선택된 녹화영상을 수신할 수 있다.
상기 마크 정보는 의사로부터 수신될 수 있으며, 카메라부(110)가 촬영하는 녹화영상의 녹화시작과 녹화종료를 나타내는 것이 바람직하다. 제1 센서부(120)에 의해 특정 제스처가 입력되거나 별도의 인터페이스(예를 들어, 버튼, 스위치)를 특정 신호가 통해 입력되는 경우 상기 마크 정보가 입력된 것으로 인식할 수 있다.
530 단계에서 의사용 전자적 루페 장치(100)와 환자용 전자적 루페 장치(200)는 500 단계에서 생성한 영상과 서버(300)에서 생성된 AR 데이터를 디스플레이한다.
환자용 전자적 루페 장치(200)는 의사용 전자적 루페 장치(100)가 생성한 영상과 상기 영상에 부가된 AR 데이터를 서버(300)로부터 수신하여 디스플레이하는 것이 바람직하다.
540 단계에서 환자용 전자적 루페 장치(200)는 상기 환자의 뇌파를 측정하여 고통 레벨정보를 생성한다.
환자용 전자적 루페 장치(200)는 통증이 있는 부위에 자극을 가했을 때 뇌가 통증을 느끼는 정도를 뇌파를 통해 측정할 수 있다. 다른 실시 예로서, 통증이 없는 경우를 0, 통증이 심한 경우를 10이라고 할 때, 환자의 뇌파를 측정하고, 환자가 통증의 정도를 0~10까지 작성하도록 하여 측정된 뇌파와 통증의 정도를 매핑시킨다. 매핑된 데이터를 축적하고, 환자의 통증의 정도(0~10)에 따른 뇌파의 패턴을 기계학습(machine learning)을 통해 학습한다. 즉, 환자가 통증이 가장 심하다고 느끼는 10의 통증에 대응하는 뇌파의 패턴 데이터, 통증이 없다고 느끼는 0에 대응하는 뇌파의 패턴 데이터를 축적하고, 각 통증의 정도에 대응하는 뇌파의 패턴의 특징을 추출한 후, 수신된 뇌파의 패턴을 비교하게 되면, 환자로부터 측정된 뇌파가 환자의 통증의 정도가 어느 정도인지 판단할 수 있게 된다.
550 단계에 환자용 전자적 루페 장치(200)는 540 단계에서 생성된 고통 레벨정보를 서버(300)로 전송한다.
560 단계에서 의사용 전자적 루페 장치(100)는 서버(300)로부터 고통 레벨정보를 수신한다.
570 단계에서 의사용 전자적 루페 장치(100)는 상기 고통 레벨정보에 상응하는 신호를 출력한다.
의사용 전자적 루페 장치(100)가 상기 고통 레벨정보를 수신하면, 고통의 정도에 비례하여 소리의 크기를 조절하거나, 빛의 깜박이는 주기를 짧게 하여 고통의 정도를 의료진에게 전달할 수 있다.
본 발명의 실시 예들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시 예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시 예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
따라서, 본 발명의 사상은 설명된 실시 예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.

Claims (18)

  1. 서버로부터 환자의 고통 레벨정보를 수신하는 제1 통신부; 및
    상기 제1 통신부가 수신한 고통 레벨정보를 디스플레이하는 제1 디스플레이부를 포함하고,
    상기 환자의 고통 레벨정보는 환자가 착용한 전자적 루페장치가 상기 환자의 뇌파를 측정하여 생성되는 정보인 것을 특징으로 하는 전자적 루페 장치.
  2. 제1 항에 있어서,
    상기 제1 통신부는 마크 정보에 의하여 선택된 녹화영상을 수신하고,
    상기 제1 디스플레이부는 상기 녹화영상을 디스플레이하고,
    상기 마크 정보는 녹화 중인 영상에 삽입되는 정보인 것을 특징으로 하는 전자적 루페 장치.
  3. 제1 항에 있어서,
    상기 제1 통신부는 상기 서버로부터 협진 요청신호를 수신하고,
    상기 제1 통신부가 상기 협진 요청신호에 대하여 상기 서버로 협진 수락신호를 전송하면, 상기 서버는 상기 협진 요청신호를 생성한 전자적 루페 장치에서 디스플레이되는 영상을 상기 제1 통신부로 전송하여 상기 영상을 공유하는 것을 특징으로 하는 전자적 루페 장치.
  4. 제1 항에 있어서,
    상기 제1 통신부는 상기 서버의 AI 모듈에 의해 결정된 상기 녹화영상에 추가할 AR 영상을 수신하는 것을 특징으로 하는 전자적 루페 장치.
  5. 제1 항에 있어서,
    움직임을 감지하는 제1 센서부를 더 포함하고,
    상기 제1 통신부는 상기 제1 센서부에서 감지된 움직임 정보를 상기 서버로 송신하고, 상기 서버가 상기 움직임 정보를 이용하여 생성한 AR 데이터를 수신하며,
    상기 제1 디스플레이부는 상기 수신한 AR 데이터를 디스플레이 하는 것을 특징으로 하느 전자적 루페 장치.
  6. 제1 항에 있어서,
    상기 제1 통신부는 상기 환자가 착용한 전자적 루페 장치에서 생성된 고통 레벨정보가 임계치를 넘는 경우 마취가 충분하지 않다는 신호를 상기 서버로부터 수신하는 것을 특징으로 하는 전자적 루페 장치.
  7. 제1 항에 있어서,
    상기 제1 통신부는 상기 환자의 환부가 치아이고, 상기 환자가 착용한 전자적 루페 장치에서 생성된 고통 레벨정보가 임계치를 넘는 경우 상기 치아의 신경이 살아있는 것으로 표시하거나 신경치료가 필요한 것을 표시하는 AR 데이터를 상기 서버로부터 수신하여 상기 제1 디스플레이부에 출력하는 것을 특징으로 하는 전자적 루페 장치.
  8. 제1 항에 있어서,
    상기 의사가 착용한 전자적 루페 장치에 디스플레이되는 것과 동일한 영상이 상기 환자가 착용한 전자적 루페 장치에 출력되는 것을 특징으로 하는 전자적 루페 장치.
  9. 제1 항에 있어서,
    진단하는 의사와 환자가 다른 장소에 있는 경우, 상기 환자 옆에 있는 보조자가 착용한 상기 전자적 루페 장치를 이용하여 획득한 상기 환자의 환부의 영상을 상기 서버를 통해 상기 의사가 착용한 전자적 루페 장치로 전송하는 것을 특징으로 하는 전자적 루페 장치.
  10. 제1 항에 있어서,
    상기 치아의 치료영상을 상기 치아의 지정번호에 대응하여 저장하고,
    상기 치아가 다시 치료되는 경우 상기 저장된 치료영상을 상기 제1 디스플레이부에 출력하여 상기 의사에게 제공하는 것을 특징으로 하는 전자적 루페 장치.
  11. 제1 항에 있어서,
    상기 환자의 환부 영상이 치아 영상인 경우, 상기 제1 통신부는 상기 서버의 AI 모듈로부터 상기 치아 영상의 배열 또는 형상을 기 저장된 건강한 치아 영상과 비교학습함으로써, 치료가 필요한 치아의 지정번호를 수신하는 것을 특징으로 하는 전자적 루페 장치.
  12. 환자가 착용하는 전자적 루페 장치에 있어서,
    상기 환자의 뇌파를 측정하여 상기 환자의 고통레벨 정보를 생성하는 고통레벨 정보 생성부;
    서버로부터 마크 정보에 의하여 선택된 녹화영상을 수신하고, 상기 생성된 고통레벨 정보를 상기 서버로 전송하는 제2 통신부; 및
    상기 제2 통신부가 수신한 녹화영상을 디스플레이하는 제2 디스플레이부를 포함하고,
    상기 마크 정보는 녹화 중인 영상에 삽입되는 정보인 것을 특징으로 하는 전자적 루페 장치.
  13. 제12 항에 있어서,
    움직임을 감지하는 제2 센서부를 더 포함하고,
    상기 제2 디스플레이부에 치료 환부를 치료할 수 있는 적어도 1개 이상의 옵션을 디스플레이되면, 상기 환자가 상기 옵션 중 하나를 일정시간 이상 응시하면, 시선의 이동으로 상기 옵션을 드래그하여 치아치료 선택 리스트에 포함함으로써, 선택된 복수 개의 옵션 비용을 환자에게 디스플레이하는 것을 특징으로 하는 전자적 루페 장치.
  14. 제12 항에 있어서,
    상기 전자적 루페 장치에 출력되는 AR 데이터는 상기 환자의 환부를 치료하는 옵션들을 포함하고, 상기 옵션들이 상기 환부에 치료되었을 때의 결과를 나타내는 AR 영상을 디스플레이하는 것을 특징으로 하는 전자적 루페 장치.
  15. 제12 항에 있어서,
    상기 환자의 환부를 치료하는 사례와 유사한 사례의 치료결과영상 또는 치료경과를 상기 서버로부터 수신하여 상기 제2 디스플레이부로 출력하여 상기 환자에게 제공하는 것을 특징으로 하는 전자적 루페 장치.
  16. 서버로부터 환자의 고통 레벨정보를 수신하는 단계; 및
    상기 수신한 고통 레벨정보를 디스플레이하는 단계를 포함하고,
    상기 환자의 고통 레벨정보는 환자가 착용한 전자적 루페 장치가 상기 환자의 뇌파를 측정하여 생성되는 정보인 것을 특징으로 하는 전자적 루페 장치를 이용한 진단 방법.
  17. 서버로부터 마크 정보에 의하여 선택된 녹화영상을 수신하는 단계;
    상기 수신한 녹화영상을 디스플레이하는 단계;
    환자의 뇌파를 측정하여 상기 환자의 고통레벨 정보를 생성하는 단계; 및
    상기 생성된 고통레벨 정보를 서버로 전송하는 단계를 포함하는 것을 특징으로 하는 전자적 루페 장치를 이용한 진단 방법
  18. 제16 항 또는 제17 항 중에 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
KR1020190049368A 2019-04-26 2019-04-26 전자적 루페 장치 및 이를 이용한 진단 방법 KR102236486B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190049368A KR102236486B1 (ko) 2019-04-26 2019-04-26 전자적 루페 장치 및 이를 이용한 진단 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190049368A KR102236486B1 (ko) 2019-04-26 2019-04-26 전자적 루페 장치 및 이를 이용한 진단 방법

Publications (2)

Publication Number Publication Date
KR20200125294A true KR20200125294A (ko) 2020-11-04
KR102236486B1 KR102236486B1 (ko) 2021-04-06

Family

ID=73571064

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190049368A KR102236486B1 (ko) 2019-04-26 2019-04-26 전자적 루페 장치 및 이를 이용한 진단 방법

Country Status (1)

Country Link
KR (1) KR102236486B1 (ko)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007143602A (ja) * 2005-11-24 2007-06-14 Oyama Yoshio 歯科診療情報共有システム
KR20180027492A (ko) * 2015-07-08 2018-03-14 시로나 덴탈 시스템스 게엠베하 해부학적 구조를 스캐닝하고 스캐닝 결과를 디스플레이하기 위한 시스템 및 방법
KR20180105284A (ko) * 2017-03-14 2018-09-28 주식회사 사람과기술 원격 진료 방법
KR20190000107A (ko) * 2017-06-22 2019-01-02 주식회사 엠티이지 이벤트 인덱스를 통한 수술 영상 처리 방법 및 장치
KR20190000488A (ko) * 2017-06-23 2019-01-03 동의대학교 산학협력단 구강 모니터링 치경
JP2019506200A (ja) * 2015-12-29 2019-03-07 ヴィーアール フィジオ リミテッド 治療及びフィジカルトレーニングデバイス

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007143602A (ja) * 2005-11-24 2007-06-14 Oyama Yoshio 歯科診療情報共有システム
KR20180027492A (ko) * 2015-07-08 2018-03-14 시로나 덴탈 시스템스 게엠베하 해부학적 구조를 스캐닝하고 스캐닝 결과를 디스플레이하기 위한 시스템 및 방법
JP2019506200A (ja) * 2015-12-29 2019-03-07 ヴィーアール フィジオ リミテッド 治療及びフィジカルトレーニングデバイス
KR20180105284A (ko) * 2017-03-14 2018-09-28 주식회사 사람과기술 원격 진료 방법
KR20190000107A (ko) * 2017-06-22 2019-01-02 주식회사 엠티이지 이벤트 인덱스를 통한 수술 영상 처리 방법 및 장치
KR20190000488A (ko) * 2017-06-23 2019-01-03 동의대학교 산학협력단 구강 모니터링 치경

Also Published As

Publication number Publication date
KR102236486B1 (ko) 2021-04-06

Similar Documents

Publication Publication Date Title
AU2022252723B2 (en) Imaging modification, display and visualization using augmented and virtual reality eyewear
CN107529968B (zh) 用于观察口腔内部的装置
US11297285B2 (en) Dental and medical loupe system for lighting control, streaming, and augmented reality assisted procedures
KR20210006244A (ko) 디지털 치아 영상에 치아 진료 데이터를 기록 및 표시하는 방법 및 장치
JP6829763B2 (ja) 医療用診療装置
JP5043145B2 (ja) 診断システム
KR102236486B1 (ko) 전자적 루페 장치 및 이를 이용한 진단 방법
AU2020214696B2 (en) System for visualizing patient stress
JP7343470B2 (ja) 制御装置、制御方法、および制御プログラム
JP2007330701A (ja) 医療用表示装置及び医療用表示方法
JP6632652B2 (ja) 画像処理装置および画像処理プログラム
Igna et al. Digital technology in paediatric dentistry and orthodontics
JP7428683B2 (ja) 画像処理装置、画像処理システム、画像処理方法、画像処理プログラム
JP2024155937A (ja) 拡張現実および仮想現実アイウェアを用いた結像修正、表示、および可視化
JP2019141257A (ja) 画像処理装置および画像処理プログラム

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant