KR101115020B1 - 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템 - Google Patents

수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템 Download PDF

Info

Publication number
KR101115020B1
KR101115020B1 KR1020100078987A KR20100078987A KR101115020B1 KR 101115020 B1 KR101115020 B1 KR 101115020B1 KR 1020100078987 A KR1020100078987 A KR 1020100078987A KR 20100078987 A KR20100078987 A KR 20100078987A KR 101115020 B1 KR101115020 B1 KR 101115020B1
Authority
KR
South Korea
Prior art keywords
surgical
surgical image
image
storing
real time
Prior art date
Application number
KR1020100078987A
Other languages
English (en)
Other versions
KR20120016536A (ko
Inventor
홍사장
지기환
이민철
Original Assignee
주식회사 케이엠티엘
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이엠티엘 filed Critical 주식회사 케이엠티엘
Priority to KR1020100078987A priority Critical patent/KR101115020B1/ko
Publication of KR20120016536A publication Critical patent/KR20120016536A/ko
Application granted granted Critical
Publication of KR101115020B1 publication Critical patent/KR101115020B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/22Social work

Abstract

본 발명은 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템에 관한 것으로서, 보다 구체적으로는 서비스 제공 서버가, (1) 촬영 장치로부터 수술 집도의의 개인 정보를 입력받는 단계; (2) 상기 개인 정보가 회원 정보와 일치하는 경우, 수술 영상 녹화 제어화면을 상기 촬영 장치에 전송하는 단계; (3) 상기 촬영 장치로부터 집도하는 수술에 관한 수술 정보를 입력받는 단계; (4) 상기 촬영 장치가 수술 영상 녹화 시작신호를 입력받은 경우, 상기 촬영 장치로부터 수술 영상을 수신하는 단계; (5) 상기 수술 영상을 수술실 외부에 설치된 모니터에 실시간으로 전송하는 단계; (6) 상기 촬영 장치가 수술 영상 녹화 정지신호를 입력받은 경우, 상기 수술 영상에 상기 수술 집도의의 개인 정보를 대응시킨 후 상기 수술 영상을 임시 저장부에 저장하는 단계; (7) 상기 촬영 장치가 상기 수술 영상 녹화 시작신호를 미리 지정된 시간 내에 입력받은 경우, 상기 촬영 장치로부터 수술 영상을 수신하여 상기 임시 저장부에 저장하는 동시에, 상기 모니터에 실시간으로 전송하는 단계; 및 (8) 상기 촬영 장치가 상기 수술 영상 녹화 정지신호를 입력받은 경우, 상기 단계 (6)에서의 수술 영상과 상기 단계 (7)에서의 수술 영상을 연결하고, 상기 수술 집도의의 개인 정보 및 상기 수술 정보를 대응시켜 데이터베이스에 저장하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.
본 발명에서 제안하고 있는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템에 따르면, 수술 영상을 녹화하고 이를 저장하는 동시에 실시간으로 수술실 외부에 설치된 모니터에 제공함으로써, 수술에 참여하지 않은 전문가들도 수술 장면을 확인할 수 있으므로, 전문가들로 하여금 수술의 진행 과정에 문제가 있는지 판단하고 문제 발생 시 신속하게 대처할 수 있도록 한다.
또한 본 발명에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템은, 서버를 사용하여 고도화된 전산망으로 방대한 수술 영상을 체계적으로 관리할 수 있으므로, 의료 기록의 명확한 관리가 가능하고 관리 비용 및 시간을 절약할 수 있으며, 수술 영상에 대한 접근과 리뷰가 용이하여 수술에 대한 환자의 신뢰감을 향상시킬 수 있다.
뿐만 아니라, 본 발명에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템은, 수술이 피치 못할 사정으로 중단되고 다시 재개된 경우, 녹화된 수술 영상이 중단된 시간만큼의 공백을 포함하거나, 또는 하나의 수술에 복수 개의 수술 영상이 녹화되어 별도의 편집 과정이 필요하다는 문제를 해결하기 위하여, 수술 집도의가 녹화를 정지한 후 다시 녹화를 시작하여도 하나의 수술과정에 대해서는 공백 없는 하나의 수술 영상만을 생성할 수 있으므로 효율적인 녹화가 가능하다.

Description

수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템{A METHOD AND SYSTEM FOR RECORDING, SAVING AND PROVIDING SURGERY VIDEO IN REAL TIME}
본 발명은 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템에 관한 것으로서, 특히 수술 과정을 영상으로 촬영하고 서버에 저장하는 동시에 실시간으로 수술 과정을 중계함으로써, 수술에 참여하지 않는 자도 수술 과정을 확인할 수 있도록 하는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템에 관한 것이다.
최근 멀티미디어에 관한 기술이 급진적으로 발전하여 다양한 분야에 활용됨에 따라, 의료 분야에서도 환자들에 대한 수술 장면을 동영상으로 제작하여 의사들이 의학 관련 학회에서 발표하거나 다른 용도로 활용할 수 있도록 하는 기술이 개발되고 있다. 이러한 기술의 구현을 위하여 일반적으로는 아날로그 비디오카메라 및 VHS(Video Home System) 또는 S-VHS(Super-VHS) 방식의 비디오테이프 레코더(Video Tape Recorder)를 사용하여, 수동적으로 수술 장면을 촬영하는 방식을 사용한다.
그러나 수많은 수술이 이루어지는 병원에서 이러한 방식으로 각 수술 영상을 녹화하여 테이프 또는 메모리 형태로 저장하는 경우, 저장 공간에 한계가 있을 뿐만 아니라, 저장 후 동영상을 편집할 때 많은 시간이 소모되고, 편집 과정에서 녹화와 재생을 여러 번 반복하게 됨으로써 동영상의 화질이 떨어질 수 있다. 또한 많은 양의 동영상을 관리하기 위해서는 상당한 인력과 비용이 지출되어야 한다는 문제점이 있다.
또한, 이러한 방식을 사용하면 수술실에서 수술을 집도하는 집도의나 간호사 또는 조수 외에는 수술 과정을 실시간으로 확인할 수 없으므로, 녹화된 수술 영상을 추후에 재생하여 수술이 잘 되었는지를 파악하는 경우, 만약 수술 과정에 문제가 있었다면 이미 환자의 상태에 악영향을 미친 후이므로 재수술과 같은 별도의 치료를 수행하여 회복시켜야 한다는 문제가 있다. 따라서 다른 전문가들이 실시간으로 수술 과정을 확인하고 수술 도중에 문제 발생 시 즉각 대처함으로써, 잘못된 수술로 인하여 환자가 다시 고통받는 것을 미리 방지할 필요가 있다.
본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 수술 영상을 녹화하고 이를 저장하는 동시에 실시간으로 수술실 외부에 설치된 모니터에 제공함으로써, 수술에 참여하지 않은 전문가들도 수술 장면을 확인할 수 있으므로, 전문가들로 하여금 수술의 진행 과정에 문제가 있는지 판단하고 문제 발생 시 신속하게 대처할 수 있도록 하는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템을 제공하는 것을 그 목적으로 한다.
또한 본 발명은, 서버를 사용하여 고도화된 전산망으로 방대한 수술 영상을 체계적으로 관리할 수 있으므로, 의료 기록의 명확한 관리가 가능하고 관리 비용 및 시간을 절약할 수 있으며, 수술 영상에 대한 접근과 리뷰가 용이하여 수술에 대한 환자의 신뢰감을 향상시킬 수 있는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템을 제공하는 것을 다른 목적으로 한다.
뿐만 아니라 본 발명은, 수술이 피치 못할 사정으로 중단되고 다시 재개된 경우, 녹화된 수술 영상이 중단된 시간만큼의 공백을 포함하거나, 또는 하나의 수술에 복수 개의 수술 영상이 녹화되어 별도의 편집 과정이 필요하다는 문제를 해결하기 위하여, 수술 집도의가 녹화를 정지한 후 다시 녹화를 시작하여도 하나의 수술과정에 대해서는 공백 없는 하나의 수술 영상만을 생성할 수 있으므로 효율적인 녹화가 가능한 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템을 제공하는 것을 또 다른 목적으로 한다.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른, 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법은, 서비스 제공 서버가,
(1) 촬영 장치로부터 수술 집도의의 개인 정보를 입력받는 단계;
(2) 상기 개인 정보가 회원 정보와 일치하는 경우, 수술 영상 녹화 제어화면을 상기 촬영 장치에 전송하는 단계;
(3) 상기 촬영 장치로부터 집도하는 수술에 관한 수술 정보를 입력받는 단계;
(4) 상기 촬영 장치가 수술 영상 녹화 시작신호를 입력받은 경우, 상기 촬영 장치로부터 수술 영상을 수신하는 단계;
(5) 상기 수술 영상을 수술실 외부에 설치된 모니터에 실시간으로 전송하는 단계;
(6) 상기 촬영 장치가 수술 영상 녹화 정지신호를 입력받은 경우, 상기 수술 영상에 상기 수술 집도의의 개인 정보를 대응시킨 후 상기 수술 영상을 임시 저장부에 저장하는 단계;
(7) 상기 촬영 장치가 상기 수술 영상 녹화 시작신호를 미리 지정된 시간 내에 입력받은 경우, 상기 촬영 장치로부터 수술 영상을 수신하여 상기 임시 저장부에 저장하는 동시에, 상기 모니터에 실시간으로 전송하는 단계; 및
(8) 상기 촬영 장치가 상기 수술 영상 녹화 정지신호를 입력받은 경우, 상기 단계 (6)에서의 수술 영상과 상기 단계 (7)에서의 수술 영상을 연결하고, 상기 수술 집도의의 개인 정보 및 상기 수술 정보를 대응시켜 데이터베이스에 저장하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.
바람직하게는,
상기 촬영 장치가 상기 수술 영상 녹화 시작신호를 상기 미리 지정된 시간 내에 입력받지 않은 경우, 상기 단계 (6)에서 저장한 수술 영상에 상기 수술 정보를 대응시킨 후 상기 수술 영상을 데이터베이스에 저장하는 단계를 더 포함할 수 있다.
바람직하게는, 상기 미리 지정된 시간은,
수술에 소요되는 시간을 고려하여 5분 내지 2시간일 수 있다.
바람직하게는, 상기 개인 정보는
성명, 아이디, 비밀번호, 직책 또는 소속을 포함할 수 있다.
바람직하게는, 상기 수술 정보는,
수술을 받는 환자에 대한 신상 정보, 수술 부위, 수술 원인 또는 수술 날짜를 포함할 수 있다.
바람직하게는,
(9) 사용자의 전자기기로부터 로그인 정보를 입력받는 단계;
(10) 상기 로그인 정보가 회원 정보와 일치하는 경우, 수술 영상 재생 목록을 사용자의 전자기기에 전송하는 단계; 및
(11) 상기 수술 영상 재생 목록 중 사용자가 선택한 수술 영상, 상기 수술 집도의의 개인 정보 및 상기 수술 정보를 사용자의 전자기기에 전송하는 단계를 더 포함할 수 있다.
더욱 바람직하게는, 상기 수술 영상 재생 목록은,
사용자의 회원 등급에 따라 포함하는 정보의 종류에 차별을 둘 수 있다.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른, 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템은,
수술 집도의가 집도하는 수술을 영상으로 촬영하여 실시간으로 서비스 제공 서버에 전송하는 촬영 장치;
상기 촬영 장치로부터 전송받은 수술 영상을 저장, 편집, 관리하며 수술실 외부에 설치된 모니터에 실시간으로 전송하는 서비스 제공 서버; 및
상기 서비스 제공 서버로부터 수술 영상을 실시간으로 전송받아 수술에 참여하지 않은 사람이 수술의 진행 과정을 실시간으로 확인할 수 있도록 하는 모니터를 포함하되,
상기 촬영 장치는,
수술 장면을 영상으로 촬영하는 카메라;
상기 카메라가 촬영한 수술 영상을 디지털 파일로 인코딩하는 변환부;
수술 영상의 녹화와 관련된 신호를 입력받는 입력부; 및
상기 카메라가 촬영한 수술 영상을 서비스 제공 서버에 전송하는 송신부를 포함할 수 있다.
바람직하게는, 상기 촬영 장치는,
상기 카메라의 위치 또는 각도에 관한 제어 신호를 수신하는 수신부; 및
상기 카메라를 지지하며, 상기 제어 신호에 따라 상기 카메라의 위치 또는 각도를 제어하는 카메라 지지부를 더 포함할 수 있다.
바람직하게는, 상기 입력부는,
수술 집도의의 음성을 인식하여 상기 수술 영상의 녹화와 관련된 신호를 판별하는 음성인식기이거나 또는 수술 집도의가 터치로 상기 수술 영상의 녹화와 관련된 신호를 입력할 수 있도록 하는 터치스크린일 수 있다.
본 발명에서 제안하고 있는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템에 따르면, 수술 영상을 녹화하고 이를 저장하는 동시에 실시간으로 수술실 외부에 설치된 모니터에 제공함으로써, 수술에 참여하지 않은 전문가들도 수술 장면을 확인할 수 있으므로, 전문가들로 하여금 수술의 진행 과정에 문제가 있는지 판단하고 문제 발생 시 신속하게 대처할 수 있도록 한다.
또한 본 발명에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템은, 서버를 사용하여 고도화된 전산망으로 방대한 수술 영상을 체계적으로 관리할 수 있으므로, 의료 기록의 명확한 관리가 가능하고 관리 비용 및 시간을 절약할 수 있으며, 수술 영상에 대한 접근과 리뷰가 용이하여 수술에 대한 환자의 신뢰감을 향상시킬 수 있다.
뿐만 아니라, 본 발명에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템은, 수술이 피치 못할 사정으로 중단되고 다시 재개된 경우, 녹화된 수술 영상이 중단된 시간만큼의 공백을 포함하거나, 또는 하나의 수술에 복수 개의 수술 영상이 녹화되어 별도의 편집 과정이 필요하다는 문제를 해결하기 위하여, 수술 집도의가 녹화를 정지한 후 다시 녹화를 시작하여도 하나의 수술과정에 대해서는 공백 없는 하나의 수술 영상만을 생성할 수 있으므로 효율적인 녹화가 가능하다.
도 1은 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법의 순서도.
도 2는 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법의 수술 영상 녹화 제어화면을 나타내는 도면.
도 3은 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법의 수술 영상 재생 목록을 나타내는 도면.
도 4는 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템의 구성도.
도 5는 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템의 촬영 장치의 블록도.
도 6은 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템의 카메라를 나타내는 도면.
도 7은 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템의 모니터를 사용하는 모습을 나타내는 도면.
이하에서는 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예를 상세하게 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 유사한 기능 및 작용을 하는 부분에 대해서는 도면 전체에 걸쳐 동일 또는 유사한 부호를 사용한다.
덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 ‘연결’되어 있다고 할 때, 이는 ‘직접적으로 연결’되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 ‘간접적으로 연결’되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 ‘포함’한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
도 1은 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법의 순서도이다. 도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법은, 촬영 장치로부터 수술 집도의의 개인 정보를 입력받는 단계(S100), 개인 정보가 회원 정보와 일치하는 경우, 수술 영상 녹화 제어화면을 촬영 장치에 전송하는 단계(S200), 촬영 장치로부터 집도하는 수술에 관한 수술 정보를 입력받는 단계(S300), 촬영 장치가 수술 영상 녹화 시작신호를 입력받은 경우, 촬영 장치로부터 수술 영상을 수신하는 단계(S400), 수술 영상을 수술실 외부에 설치된 모니터에 실시간으로 전송하는 단계(S500), 촬영 장치가 수술 영상 녹화 정지신호를 입력받은 경우, 수술 영상에 수술 집도의의 개인 정보를 대응시킨 후 수술 영상을 임시 저장부에 저장하는 단계(S600), 촬영 장치가 수술 영상 녹화 시작신호를 미리 지정된 시간 내에 입력받은 경우, 촬영 장치로부터 수술 영상을 수신하여 임시 저장부에 저장하는 동시에, 모니터에 실시간으로 전송하는 단계(S700), 촬영 장치가 수술 영상 녹화 정지신호를 입력받은 경우, 단계 S600에서의 수술 영상과 단계 S700에서의 수술 영상을 연결하고, 수술 집도의의 개인 정보 및 수술 정보를 대응시켜 데이터베이스에 저장하는 단계(S800), 촬영 장치가 수술 영상 녹화 시작신호를 미리 지정된 시간 내에 입력받지 않은 경우, 단계 S600에서 저장한 수술 영상에 수술 정보를 대응시킨 후 수술 영상을 데이터베이스에 저장하는 단계(S900), 사용자의 전자기기로부터 로그인 정보를 입력받는 단계(S1000), 로그인 정보가 회원 정보와 일치하는 경우, 수술 영상 재생 목록을 사용자의 전자기기에 전송하는 단계(S1100), 수술 영상 재생 목록 중 사용자가 선택한 수술 영상, 수술 집도의의 개인 정보 및 수술 정보를 사용자의 전자기기에 전송하는 단계(S1200)를 포함하여 구성될 수 있다.
단계 S100에서는, 촬영 장치로부터 수술 집도의의 개인 정보를 입력받는다. 이때 수술 집도의의 개인 정보는 성명, 아이디, 비밀번호, 직책 또는 소속을 포함하며, 이는 수술 영상의 분류 및 식별을 위하여 필요하다.
단계 S200에서는, 개인 정보가 회원 정보와 일치하는 경우, 수술 영상 녹화 제어화면을 촬영 장치에 전송한다. 개인 정보가 회원 정보와 일치하는 경우로 한정하는 것은, 불필요한 녹화를 차단하여 서버의 저장 공간을 효율적으로 사용하기 위함이다. 수술 영상 녹화 제어화면에 대하여, 도 2를 참조하여 상세히 설명하도록 한다.
도 2는 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법의 수술 영상 녹화 제어화면을 나타내는 도면이다. 도 2에 도시된 바와 같이, 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법의 수술 영상 녹화 제어화면은, 수술 집도의가 수술 영상 녹화 시작신호 또는 수술 영상 녹화 정지신호를 입력할 수 있도록 한다. 또한 녹화 관련 상태(status)를 표시하여 수술 집도의가 수술 영상 녹화 관련 상태를 점검할 수 있도록 한다.
단계 S300에서는, 촬영 장치로부터 집도하는 수술에 관한 수술 정보를 입력받는다. 수술 정보는 수술을 받는 환자에 대한 신상 정보, 수술 부위, 수술 원인 또는 수술 날짜를 포함하며, 수술 집도의의 개인 정보와 마찬가지로 수술 영상의 분류 및 식별을 위하여 필요하다.
단계 S400에서는, 촬영 장치가 수술 영상 녹화 시작신호를 입력받은 경우, 촬영 장치로부터 수술 영상을 수신한다. 수술 영상 녹화 시작신호의 입력 방식에는 제한이 없으며, 서비스 제공 서버는 촬영 장치로부터 실시간으로 수신하는 수술 영상을 고화질 저용량의 디지털 파일로 인코딩할 수 있다. 촬영 장치 대신 서비스 제공 서버가 인코딩 역할을 담당하는 경우, 촬영 장치의 구성이 간단해짐으로써 촬영 장치의 크기를 소형화할 수 있다. 이때 인코딩 방식은 WMV(Window Media Video) 형식을 사용할 수 있다.
단계 S500에서는, 수술 영상을 수술실 외부에 설치된 모니터에 실시간으로 전송한다. 서비스 제공 서버가 수술 영상을 모니터에 실시간으로 제공함으로써, 수술에 참여하지 않은 전문가들도 외부에서 수술의 진행 과정을 파악할 수 있으므로, 수술 도중 문제가 발생할 경우 신속한 조치를 취하는 것이 가능하다.
단계 S600에서는, 촬영 장치가 수술 영상 녹화 정지신호를 입력받은 경우, 수술 영상에 수술 집도의의 개인 정보를 대응시킨 후 수술 영상을 임시 저장부에 저장한다. 수술 영상 녹화 정지신호는 수술이 끝난 경우 또는 수술이 중단되는 경우에 입력될 수 있다. 수술 영상 녹화 정지신호가 입력된 시각까지 녹화된 수술 영상은, 분류를 위하여 수술 집도의의 개인 정보를 대응시킨다. 이후 임시 저장부에 수술 영상을 저장하며, 이는 수술이 일시 중단된 경우를 고려하기 위함이다. 수술이 일시 중단된 후 다시 재개될 경우, 하나의 수술에 2개의 수술 영상이 녹화될 수 있으므로 2개의 수술 영상을 합성하는 별도의 편집 과정이 요구된다. 이러한 문제점을 해결하기 위하여, 먼저 여태까지 녹화된 수술 영상을 임시 저장부에 저장한 뒤, 수술이 중단된 후 재개되는 경우인지를 판별하여, 일시 중단의 경우는 임시 저장부에 저장된 수술 영상과 다음에 녹화되는 수술 영상을 자동으로 합성한 뒤 데이터베이스에 저장하고, 수술 종료의 경우에는 임시 저장부에 저장된 수술 영상을 바로 데이터베이스에 옮겨 저장할 수 있다.
단계 S700에서는, 촬영 장치가 수술 영상 녹화 시작신호를 미리 지정된 시간 내에 입력받은 경우, 촬영 장치로부터 수술 영상을 수신하여 임시 저장부에 저장하는 동시에, 모니터에 실시간으로 전송한다. 미리 지정된 시간 내에 다시 수술 영상 녹화 시작신호가 입력되는 경우는 수술이 일시 중단된 후 재개된 상황으로 판단할 수 있다. 이때 미리 지정된 시간은, 수술에 소요되는 시간을 고려하여 5분 내지 2시간일 수 있으나, 수술의 종류에 따라 제한 없이 설정될 수 있다. 수술이 재개되어 녹화되는 수술 영상 또한 임시 저장부에 저장되며, 수술에 참여하지 않은 전문가가 실시간으로 모니터링 할 수 있도록, 서비스 제공 서버로부터 모니터에 전송된다.
다만 수술이 중단된 후 수술 집도의가 교체되어 수술 집도의의 개인 정보가 변경되는 경우에는, 수술 집도의의 개인 정보를 새롭게 입력받더라도, 미리 지정된 시간 내에 촬영 장치가 수술 영상 녹화 시작신호를 입력받는다면 연속된 수술로 판단하고 수술 영상을 녹화할 수 있다. 다른 환자에 대한 새로운 수술이 동일한 수술실에서 미리 지정된 시간 내에 진행되는 경우에는, 수술 영상 녹화 제어화면을 리셋하여 새로운 수술 영상을 녹화할 수 있다.
단계 S800에서는, 촬영 장치가 수술 영상 녹화 정지신호를 입력받은 경우, 단계 S600에서의 수술 영상과 단계 S700에서의 수술 영상을 연결하고, 수술 집도의의 개인 정보 및 수술 정보를 대응시켜 데이터베이스에 저장한다. 즉 수술이 종료된 경우에는, 수술 중단 전과 후에 녹화된 수술 영상을 합성할 필요가 있으므로, 임시 저장부에 저장되었던 수술 영상들을 연결시키고 데이터베이스로 옮겨 저장할 수 있다. 연결된 최종적인 수술 영상에는 시간상의 공백이 존재하며, 서비스 제공 서버는 중단 여부를 안내하는 프레임을 수술 영상에 삽입하여 저장할 수 있다. 연결된 수술 영상이 데이터베이스에 저장되면, 임시 저장부에 저장되어 있던 수술 영상들은 저장 공간의 확보를 위하여 삭제할 수 있다.
단계 S900에서는, 촬영 장치가 수술 영상 녹화 시작신호를 미리 지정된 시간 내에 입력받지 않은 경우, 단계 S600에서 저장한 수술 영상에 수술 정보를 대응시킨 후 수술 영상을 데이터베이스에 저장한다. 이 경우는 수술이 중단된 후 재개된 상황이 아니라, 수술이 종료된 후 다른 수술이 동일한 수술 집도의에 의하여 재개되는 경우로 판단되므로, 단계 S600에서 저장한 수술 영상에 다른 수술 영상을 연결시킬 필요가 없다. 따라서 임시 저장부에 저장되어 있던 단계 S600의 수술 영상을 그대로 데이터베이스에 옮겨 저장하고, 임시 저장부에 저장된 데이터는 삭제할 수 있다. 이때 미리 지정된 시간은 단계 S700과 마찬가지로 5분 내지 2시간으로 설정하거나, 수술의 종류에 따라 다른 미리 지정된 시간을 설정할 수 있다.
단계 S1000에서는, 사용자의 전자기기로부터 로그인 정보를 입력받는다. 사용자의 전자기기는 컴퓨터, 핸드폰, 기타 단말기를 포함하며, 인터넷을 통하여 서비스 제공 서버에 접속이 가능한 기기일 수 있다. 사용자는 수술을 집도한 의사, 수련의, 의대생, 간호사 또는 수술을 받은 환자일 수 있다. 이때 사용자의 직책 또는 소속에 따라 회원 등급을 분류할 수 있다.
단계 S1100에서는, 로그인 정보가 회원 정보와 일치하는 경우, 수술 영상 재생 목록을 사용자의 전자기기에 전송한다. 로그인 과정을 거침으로써, 서비스 제공 서버에 저장된 수술 영상을 제3자가 함부로 열람하거나 편집하는 것을 차단할 수 있다. 수술 영상 재생 목록에 대하여, 도 3을 참조하여 상세히 설명하도록 한다.
도 3은 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법의 수술 영상 재생 목록을 나타내는 도면이다. 도 3에 도시된 바와 같이, 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법의 수술 영상 재생 목록은, 수술 날짜, 수술을 받은 환자, 수술 종류 또는 수술 원인에 따라 분류된 수술 영상 목록을 포함할 수 있다. 다만 사용자의 회원 등급에 따라 포함하는 정보의 종류에 차별을 둘 수 있다. 예컨대 수술을 받은 환자는 수술 영상의 재생만 가능하도록 하고, 수술을 집도한 의사는 수술 영상의 재생뿐만 아니라 수술 영상에 대한 상세정보를 수정할 수 있도록 차별화할 수 있다. 따라서 수술 영상을 효율적으로 관리할 수 있다.
단계 S1200에서는, 수술 영상 재생 목록 중 사용자가 선택한 수술 영상, 수술 집도의의 개인 정보 및 수술 정보를 사용자의 전자기기에 전송한다. 서비스 제공 서버는 VOD 서비스와 같은 형식으로 사용자에게 수술 영상을 제공할 수 있기 때문에, 사용자는 언제 어디서든 간단한 검색만으로 수술 영상을 용이하게 확인할 수 있다. 따라서 수술 영상의 효율적 관리 및 분석을 통해 의료 수준을 한 단계 발전시킬 수 있다. 또한 환자가 자신이 받은 수술에 대한 수술 영상을 직접 확인할 수 있으므로, 병원에 대한 환자의 신뢰도가 대폭 향상될 수 있고 불필요한 의료 분쟁을 미리 차단할 수 있다.
도 4는 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템의 구성도이다. 도 4에 도시된 바와 같이, 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템(10)은, 촬영 장치(100), 서비스 제공 서버(200), 모니터(300)를 포함하여 구성될 수 있다.
촬영 장치(100)는, 수술 집도의가 집도하는 수술을 영상으로 촬영하여 실시간으로 서비스 제공 서버(200)에 전송한다. 촬영 장치(100)에 대하여, 도 5를 참조하여 상세히 설명하도록 한다.
도 5는 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템의 촬영 장치의 블록도이다. 도 5에 도시된 바와 같이, 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템의 촬영 장치(100)는, 카메라(110), 변환부(120), 입력부(130), 송신부(140), 수신부(150), 카메라 지지부(160)를 포함할 수 있다.
카메라(110)는, 수술 장면을 영상으로 촬영한다. 카메라(110)에 대하여, 도 6을 참조하여 상세히 설명하도록 한다.
도 6은 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템의 카메라를 나타내는 도면이다. 도 6에 도시된 바와 같이, 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템(10)의 카메라는, 복강경 수술의 경우, 환자 신체의 내부에 삽입되는 형태(a)일 수 있다. 이때 마이크로스코프 후미에 위치해 있는 촬영기기를 통하여 환자 장기의 시술 촬영이 가능하다. 반면 외과적인 수술의 경우, 카메라 지지부(160)를 이용하여 위치나 각도를 조절하면서 환자의 시술 부위를 촬영할 수 있는 형태((b) 또는 (c))일 수 있다.
변환부(120)는, 카메라(110)가 촬영한 수술 영상을 디지털 파일로 인코딩한다. 인코딩은 수술 영상을 고화질, 저용량 파일로 변환하기 위하여 WMV(Window Media Video) 방식을 사용할 수 있다. 촬영하는 수술 영상을 송신부(140)가 실시간으로 서비스 제공 서버(200)에 전송하기 위하여, 변환부(120)는 카메라(110)로부터 입력되는 수술 영상을 별도의 시작 명령 신호 없이도 실시간으로 인코딩할 수 있다.
입력부(130)는, 수술 영상의 녹화와 관련된 신호를 입력받는다. 이때 입력부(130)는 수술 집도의의 음성을 인식하여 수술 영상의 녹화와 관련된 신호를 판별하는 음성인식기(도시하지 않음)이거나 또는 수술 집도의가 터치로 수술 영상의 녹화와 관련된 신호를 입력할 수 있도록 하는 터치스크린(도시하지 않음)일 수 있으며, 수술 영상의 녹화와 관련된 신호는 수술 영상 녹화 시작신호와 수술 영상 녹화 정지신호를 포함한다. 입력부(130)로 음성인식기를 사용할 경우, 수술 집도의가 음성만으로 수술 영상 녹화를 제어할 수 있으므로, 더욱 효과적으로 수술 영상의 녹화가 가능하다.
송신부(140)는, 카메라(110)가 촬영한 수술 영상을 서비스 제공 서버(200)에 전송한다. 유무선 네트워크를 사용하여 실시간으로 수술 영상을 서비스 제공 서버(200)에 전송함으로써, 수술에 참여하지 않은 사람들이 모니터(300)로 수술 영상을 직접 확인할 수 있도록 하며, 의사, 간호사, 환자 등의 사용자가 추후 수술 영상을 서비스 제공 서버(200)로부터 열람하여 확인할 수 있도록 한다.
수신부(150)는, 카메라(110)의 위치 또는 각도에 관한 제어 신호를 수신한다. 이는 도 6의 (b), (c)에 도시된 바와 같은 형태를 갖는 촬영 장치(100)에 구비될 수 있다. 물론 수신하는 제어 신호는 카메라(110)의 제어에 관한 모든 신호를 포함할 수 있다.
카메라 지지부(160)는, 카메라(110)를 지지하며, 제어 신호에 따라 카메라(110)의 위치 또는 각도를 제어한다. 카메라(110)를 거치할 수 있는 크레인의 형태일 수 있으며, 제어 신호에 따라 자동으로 카메라(110)의 위치 또는 각도를 조절하거나 또는 수술 집도의에 의하여 수동으로 카메라(110)의 위치 또는 각도를 조절할 수 있다.
서비스 제공 서버(200)는, 촬영 장치(100)로부터 전송받은 수술 영상을 저장, 편집, 관리하며, 수술실 외부에 설치된 모니터(300)에 실시간으로 전송한다. 서비스 제공 서버(200)가 수술 영상을 데이터베이스에 저장하여 체계적으로 관리함으로써, 의사, 간호사, 환자 등의 사용자가 도서관에서 책을 검색하는 방식과 같이 수술 영상을 용이하게 검색하여 확인할 수 있다.
서비스 제공 서버(200)는, 촬영 장치(100)로부터 수술 집도의의 개인 정보, 수술 정보, 수술 영상을 수신하고, 사용자의 전자기기(도시하지 않음)로부터 로그인 정보를 수신하는 수신부(도시하지 않음), 수술 중단 전후로 녹화된 각각의 수술 영상을 임시로 저장하는 임시 저장부(도시하지 않음), 수술 중단 전후로 녹화된 각각의 수술 영상을 연결하여 하나의 수술 영상으로 합성한 후 저장하거나, 수술 영상 재생 목록 또는 회원 정보를 저장하는 데이터베이스(도시하지 않음), 촬영 장치(100)에 수술 영상 녹화 제어화면을 송신하고, 모니터(300)에 수술 영상을 실시간으로 송신하며, 사용자의 전자기기에 수술 영상 재생 목록, 수술 영상을 송신하는 송신부(도시하지 않음)를 포함할 수 있다.
모니터(300)는, 서비스 제공 서버(200)로부터 수술 영상을 실시간으로 전송받아 수술에 참여하지 않은 사람이 수술의 진행 과정을 실시간으로 확인할 수 있도록 한다. 모니터(300)에 대하여, 도 7을 참조하여 상세히 설명하도록 한다.
도 7은 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템의 모니터를 사용하는 모습을 나타내는 도면이다. 도 7에 도시된 바와 같이, 본 발명의 일실시예에 따른 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템(10)의 모니터(300)는, 장소에 구애받지 않고 설치될 수 있으며 서비스 제공 서버(200)로부터 실시간으로 전송받은 수술 영상을 재생함으로써, 집도되고 있는 수술에 대한 전문가들이 수술 과정에 문제가 없는지를 즉각 검사할 수 있도록 한다. 또한 의대생, 수련의가 모니터(300)를 통하여 수술 과정을 관찰함으로써, 의료 학습 도구로도 사용될 수 있다.
이상 설명한 본 발명은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허청구범위에 의하여 정해져야 할 것이다.
10: 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 시스템
100: 촬영 장치 110: 카메라
120: 변환부 130: 입력부
140: 송신부 150: 수신부
160: 카메라 지지부 200: 서비스 제공 서버
300: 모니터

Claims (10)

  1. 수술 영상 녹화 방법에 있어서, 서비스 제공 서버가,
    (1) 촬영 장치로부터 수술 집도의의 개인 정보를 입력받는 단계;
    (2) 상기 개인 정보가 회원 정보와 일치하는 경우, 수술 영상 녹화 제어화면을 상기 촬영 장치에 전송하는 단계;
    (3) 상기 촬영 장치로부터 집도하는 수술에 관한 수술 정보를 입력받는 단계;
    (4) 상기 촬영 장치가 수술 영상 녹화 시작신호를 입력받은 경우, 상기 촬영 장치로부터 수술 영상을 수신하는 단계;
    (5) 상기 수술 영상을 수술실 외부에 설치된 모니터에 실시간으로 전송하는 단계;
    (6) 상기 촬영 장치가 수술 영상 녹화 정지신호를 입력받은 경우, 상기 수술 영상에 상기 수술 집도의의 개인 정보를 대응시킨 후 상기 수술 영상을 임시 저장부에 저장하는 단계;
    (7) 상기 촬영 장치가 상기 수술 영상 녹화 시작신호를 미리 지정된 시간 내에 입력받은 경우, 상기 촬영 장치로부터 수술 영상을 수신하여 상기 임시 저장부에 저장하는 동시에, 상기 모니터에 실시간으로 전송하는 단계; 및
    (8) 상기 촬영 장치가 상기 수술 영상 녹화 정지신호를 입력받은 경우, 상기 단계 (6)에서의 수술 영상과 상기 단계 (7)에서의 수술 영상을 연결하고, 상기 수술 집도의의 개인 정보 및 상기 수술 정보를 대응시켜 데이터베이스에 저장하는 단계를 포함하는 것을 특징으로 하는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법.
  2. 제1항에 있어서,
    상기 촬영 장치가 상기 수술 영상 녹화 시작신호를 상기 미리 지정된 시간 내에 입력받지 않은 경우, 상기 단계 (6)에서 저장한 수술 영상에 상기 수술 정보를 대응시킨 후 상기 수술 영상을 데이터베이스에 저장하는 단계를 더 포함하는 것을 특징으로 하는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법.
  3. 제1항 또는 제2항에 있어서, 상기 미리 지정된 시간은,
    수술에 소요되는 시간을 고려하여 5분 내지 2시간인 것을 특징으로 하는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법.
  4. 제1항에 있어서, 상기 개인 정보는,
    성명, 아이디, 비밀번호, 직책 또는 소속을 포함하는 것을 특징으로 하는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법.
  5. 제1항에 있어서, 상기 수술 정보는,
    수술을 받는 환자에 대한 신상 정보, 수술 부위, 수술 원인 또는 수술 날짜를 포함하는 것을 특징으로 하는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법.
  6. 제1항에 있어서,
    (9) 사용자의 전자기기로부터 로그인 정보를 입력받는 단계;
    (10) 상기 로그인 정보가 회원 정보와 일치하는 경우, 수술 영상 재생 목록을 사용자의 전자기기에 전송하는 단계; 및
    (11) 상기 수술 영상 재생 목록 중 사용자가 선택한 수술 영상, 상기 수술 집도의의 개인 정보 및 상기 수술 정보를 사용자의 전자기기에 전송하는 단계를 더 포함하는 것을 특징으로 하는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법.
  7. 제6항에 있어서, 상기 수술 영상 재생 목록은,
    사용자의 회원 등급에 따라 포함하는 정보의 종류에 차별을 두는 것을 특징으로 하는 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법.
  8. 삭제
  9. 삭제
  10. 삭제
KR1020100078987A 2010-08-16 2010-08-16 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템 KR101115020B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100078987A KR101115020B1 (ko) 2010-08-16 2010-08-16 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100078987A KR101115020B1 (ko) 2010-08-16 2010-08-16 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20120016536A KR20120016536A (ko) 2012-02-24
KR101115020B1 true KR101115020B1 (ko) 2012-03-06

Family

ID=45838786

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100078987A KR101115020B1 (ko) 2010-08-16 2010-08-16 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템

Country Status (1)

Country Link
KR (1) KR101115020B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230115124A (ko) 2022-01-26 2023-08-02 주식회사 안단테 수술실 운용 관리 시스템

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102253768B1 (ko) * 2019-04-03 2021-05-24 장호열 의료영상 리코딩 시스템 및 리코딩 로봇의 제어 방법
CN111294568B (zh) * 2020-03-13 2020-12-04 北京维卓致远医疗科技发展有限责任公司 一种医疗远程控制实现视频融合的方法
CN112185541A (zh) * 2020-09-28 2021-01-05 上海群医信息科技有限公司 一种可靠性高的远程实时手术指导平台
KR102349987B1 (ko) * 2021-08-18 2022-01-11 곽찬이 수술실 cctv 실시간 스트리밍 서비스 제공 시스템
CN116312092A (zh) * 2023-03-15 2023-06-23 广东爱唯视医疗科技有限公司 一种基于5g-vr的眼科手术教学平台的示教方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230115124A (ko) 2022-01-26 2023-08-02 주식회사 안단테 수술실 운용 관리 시스템

Also Published As

Publication number Publication date
KR20120016536A (ko) 2012-02-24

Similar Documents

Publication Publication Date Title
KR101115020B1 (ko) 수술 영상을 저장하고 실시간으로 제공하는 수술 영상 녹화 방법 및 시스템
US20150134365A1 (en) Multi-media medical record system
US20030046109A1 (en) Medical information system for improving efficiency of clinical record creating operations
WO1999042029A1 (en) Compact imaging instrument system
US20010052933A1 (en) System and method for image capture, storage and retrieval
CN101414325A (zh) 图像诊断辅助系统和图像诊断辅助方法
US9531699B2 (en) Electronic protected health information security for digital medical treatment room
CN108540742A (zh) 一种医学影像音视频录制系统
CN112434652A (zh) 一种智能可视化手术记录编辑方法及系统
JP5393905B1 (ja) 診療記録管理システム、診療記録受信装置、診療記録送信装置、及び診療記録管理プログラム
Blakeslee et al. Practice of otolaryngology via telemedicine
CN114040138A (zh) 一种可视化手术过程记录方法及记录系统
Heneghan et al. Telemedicine applications in otoloryngology
KR20010002074A (ko) 의료영상 저장관리 시스템
CN207039767U (zh) 一种医用家属谈话系统
US11483515B2 (en) Image recording and reproduction apparatus, image recording method, and endoscope system
CN106855919A (zh) 一种手术影像采集管理方法及一种手术影像采集装置
KR100932195B1 (ko) 의료 영상데이터 처리 방법 및 시스템
KR20090029457A (ko) 의료 영상 데이터 통합 관리 시스템 및 이를 이용한 의료영상 데이터를 저장하는 방법
US20060101024A1 (en) Reproducing apparatus, reproducing method and software thereof
WO2019156531A1 (ko) 실시간 객체추적을 이용한 내시경 진료정보 공유 방법
KR0155895B1 (ko) 내시경 수술시스템 주변장치 및 그 제어방법
KR20020058189A (ko) 인터넷기반의 수술 컨퍼런스 방법 및 장치
KR101022058B1 (ko) 동영상 전자 차트를 이용한 수술 영상 관리 방법
CN114040137B (zh) 一种以dicom格式记录的手术记录系统及数据处理方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141126

Year of fee payment: 8