KR102421429B1 - Method for Auto-creating Doctor’s Consult Slide Video - Google Patents

Method for Auto-creating Doctor’s Consult Slide Video Download PDF

Info

Publication number
KR102421429B1
KR102421429B1 KR1020200027668A KR20200027668A KR102421429B1 KR 102421429 B1 KR102421429 B1 KR 102421429B1 KR 1020200027668 A KR1020200027668 A KR 1020200027668A KR 20200027668 A KR20200027668 A KR 20200027668A KR 102421429 B1 KR102421429 B1 KR 102421429B1
Authority
KR
South Korea
Prior art keywords
doctor
consultation
medical
request data
medical consultation
Prior art date
Application number
KR1020200027668A
Other languages
Korean (ko)
Other versions
KR20210113466A (en
Inventor
신철호
김경민
박준걸
장명빈
Original Assignee
닥프렌즈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 닥프렌즈 주식회사 filed Critical 닥프렌즈 주식회사
Priority to KR1020200027668A priority Critical patent/KR102421429B1/en
Publication of KR20210113466A publication Critical patent/KR20210113466A/en
Application granted granted Critical
Publication of KR102421429B1 publication Critical patent/KR102421429B1/en

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H80/00ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/08Auctions
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/06Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring

Abstract

본 발명은 의사 상담 슬라이드 동영상 자동 생성 방법에 관한 것으로서, 단말과 통신하는 운영서버를 통해 실행되는 방법에 있어서, 상담 의사로 지정된 의사 단말로 지정된 녹음 시나리오를 주기적으로 제공하고,와 상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일을 수집하고, 상기 수집된 상기 음성 녹음 파일을 지속적으로 분석하여 상기 의사의 목소리 특성을 파악하고, 상기 파악된 상기 의사의 목소리 특성을 상기 의사의 식별정보와 매칭하여 지정된 데이터베이스에 저장하고, 지정된 병원 단말로부터 지정된 분야의 의학 상담 요청 데이터를 수집하고, 상기 수집된 의학 상담 요청 데이터를 의학 분야 별로 분류하고, 상담 의사로 지정된 의사의 분야와 상기 분류된 의학 상담 요청 데이터를 매칭하여, 상기 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정하고, 상기 결정된 상담 의사 단말로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받고, 상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미)에 대응되도록 상기 의학 상담 답변을 위한 하나 이상의 이미지나 동영상을 상담 슬라이드 상에 배치하고, 상기 상담 슬라이드 상에 배치된 이미지, 동영상에 대한 설명 내용을 추가하여, 상기 추가된 설명 내용을 상기 상담 의사의 목소리 특성에 따라 생성한 음성 파일을 상기 상담 슬라이드에 포함하여 동영상 형태로 저장한 상담 슬라이드 동영상을 생성하며, 상기 생성된 상담 슬라이드 동영상을 상기 의학 상담 요청 데이터에 대응하는 의학 상담을 요청한 사용자 단말 또는 지정된 동영상 관리 서버로 제공한다.The present invention relates to a method for automatically generating a slide video of a doctor consultation, a method executed through an operation server communicating with a terminal, wherein a recording scenario designated as a doctor terminal designated as a consultation doctor is periodically provided, and The corresponding doctor's voice recording file is collected, the collected voice recording file is continuously analyzed to determine the doctor's voice characteristics, and the identified doctor's voice characteristics are matched with the doctor's identification information. Store in a specified database, collect medical consultation request data in a specified field from a specified hospital terminal, classify the collected medical consultation request data by medical field, and classify the medical consultation request data with the field of a doctor designated as a consultation doctor to determine a counselor who will provide an answer to the medical consultation request data, receive medical consultation answer data for the medical consultation request data from the determined counselor terminal, and include One or more images or videos for answering the medical consultation are placed on the consultation slide to correspond to the text content (or meaning), and the added description A voice file generated according to the voice characteristics of the counselor is included in the counseling slide to generate a counseling slide video stored in the form of a video, and the generated counseling slide video is used for medical counseling corresponding to the medical counseling request data. is provided to the requested user terminal or a designated video management server.

Description

의사 상담 슬라이드 동영상 자동 생성 방법{Method for Auto-creating Doctor’s Consult Slide Video}{Method for Auto-creating Doctor’s Consult Slide Video}

본 발명은 단말과 통신하는 운영서버를 통해 실행되는 방법에 있어서, 상담 의사로 지정된 의사 단말로 지정된 녹음 시나리오를 주기적으로 제공하고,와 상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일을 수집하고, 상기 수집된 상기 음성 녹음 파일을 지속적으로 분석하여 상기 의사의 목소리 특성을 파악하고, 상기 파악된 상기 의사의 목소리 특성을 상기 의사의 식별정보와 매칭하여 지정된 데이터베이스에 저장하고, 지정된 병원 단말로부터 지정된 분야의 의학 상담 요청 데이터를 수집하고, 상기 수집된 의학 상담 요청 데이터를 의학 분야 별로 분류하고, 상담 의사로 지정된 의사의 분야와 상기 분류된 의학 상담 요청 데이터를 매칭하여, 상기 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정하고, 상기 결정된 상담 의사 단말로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받고, 상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미)에 대응되도록 상기 의학 상담 답변을 위한 하나 이상의 이미지나 동영상을 상담 슬라이드 상에 배치하고, 상기 상담 슬라이드 상에 배치된 이미지, 동영상에 대한 설명 내용을 추가하여, 상기 추가된 설명 내용을 상기 상담 의사의 목소리 특성에 따라 생성한 음성 파일을 상기 상담 슬라이드에 포함하여 동영상 형태로 저장한 상담 슬라이드 동영상을 생성하며, 상기 생성된 상담 슬라이드 동영상을 상기 의학 상담 요청 데이터에 대응하는 의학 상담을 요청한 사용자 단말 또는 지정된 동영상 관리 서버로 제공하는 의사 상담 슬라이드 동영상 자동 생성 방법에 관한 것이다.The present invention provides a method executed through an operation server communicating with a terminal, comprising: periodically providing a recording scenario designated as a doctor terminal designated as a consultation doctor; and collecting the doctor's voice recording file corresponding to the provided recording scenario; , continuously analyzing the collected voice recording file to determine the characteristics of the doctor's voice, match the identified characteristics of the doctor's voice with the identification information of the doctor and store it in a designated database, By collecting medical consultation request data of a field, classifying the collected medical consultation request data by medical field, and matching the classified medical consultation request data with the field of a doctor designated as a counselor, for the medical consultation request data Determine a counselor who will provide an answer, receive medical consultation answer data for the medical consultation request data from the determined counselor terminal, and respond to the text content (or meaning) included in the medical consultation request data. One or more images or videos for a consultation answer are placed on a consultation slide, and descriptions of images and videos placed on the consultation slide are added to generate the added description according to the characteristics of the counselor's voice. One voice file is included in the counseling slide to generate a video of a counseling slide stored in the form of a video, and the generated counseling slide video is provided to a user terminal or a designated video management server that has requested a medical consultation corresponding to the medical consultation request data It relates to a method for automatically generating a video of a doctor consultation slide.

인터넷과 정보 기술의 발달로 인해 다양한 형태의 홍보와 마케팅 수단이 등장했고, 특히 타 기업과의 차별성을 강조하기 위해 기업들은 이러한 홍보와 마케팅 수단을 좀 더 효과적으로 활용할 수 있는 방안을 늘 고민하고 있다.With the development of the Internet and information technology, various forms of publicity and marketing methods have emerged. In particular, in order to emphasize differentiation from other companies, companies are always thinking about ways to use these publicity and marketing methods more effectively.

이런 기업들과 마찬가지로 병원들도 자신만의 차별화된 홍보나 마케팅을 고심하고 있으나, 아무래도 일반 기업 보다는 제한적인 여견들이 많은 것이 현실이었다.
대한민국 공개특허공보 제10-2017-0045957호(2017년04월28일 공개)는 홍보용 미디어 콘텐츠 제작 시스템 및 그 방법에 관한 것으로, 스토리 컨테이너, 리소스 아이템과 같은 미디어 콘텐츠들을 자동으로 분류하고, 비정형, 반정형, 또는 정형화된 포맷으로 검색이나 질의 요청이 왔을 때 적절한 템플릿을 추천하여 홍보용 미디어 콘텐츠를 제작하는 구성이 기재되어 있다.
Like these companies, hospitals are struggling with their own differentiated public relations and marketing, but the reality is that there are many more limited women than general companies.
Republic of Korea Patent Publication No. 10-2017-0045957 (published on April 28, 2017) relates to a system and method for producing media content for publicity, and automatically classifies media content such as story containers and resource items, and A configuration is described in which media content for promotion is produced by recommending an appropriate template when a search or query request is received in a semi-structured or standardized format.

특히 병원들은 최근의 트렌드에 맞추어 홈페이지나 블로그 운영, 유튜브 채널 운영 등을 위한 홍보/마케팅 컨텐츠를 제작하고 싶어하나, 일반적으로 이런 컨텐츠 제작을 위해 영상 컨텐츠 기획, 녹음실 방문, 동영상 촬영, 영상 편집 등 소요되는 시간이 너무 많으며, 영상 컨텐츠의 노출을 위해 발생하는 비용이 너무 많은 문제가 있다.In particular, hospitals want to produce promotional/marketing contents for website, blog operation, and YouTube channel operation in line with recent trends. There is a problem that there is too much time and the cost incurred for exposing the video content is too much.

상기와 같은 문제점을 해소하기 위한 본 발명의 목적은, 단말과 통신하는 운영서버를 통해 실행되는 방법에 있어서, 상담 의사로 지정된 의사 단말로 지정된 녹음 시나리오를 주기적으로 제공하는 제1 단계와 상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일을 수집하는 제2 단계와 상기 수집된 상기 음성 녹음 파일을 지속적으로 분석하여 상기 의사의 목소리 특성을 파악하고, 상기 파악된 상기 의사의 목소리 특성을 상기 의사의 식별정보와 매칭하여 지정된 데이터베이스에 저장하는 제3 단계와 지정된 병원 단말로부터 지정된 분야의 의학 상담 요청 데이터를 수집하는 제4 단계와 상기 수집된 의학 상담 요청 데이터를 의학 분야 별로 분류하고, 상담 의사로 지정된 의사의 분야와 상기 분류된 의학 상담 요청 데이터를 매칭하여, 상기 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정하는 제5 단계와 상기 결정된 상담 의사 단말로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받는 제6 단계와 상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미)에 대응되도록 상기 의학 상담 답변을 위한 하나 이상의 이미지나 동영상을 상담 슬라이드 상에 배치하고, 상기 상담 슬라이드 상에 배치된 이미지, 동영상에 대한 설명 내용을 추가하여, 상기 추가된 설명 내용을 상기 상담 의사의 목소리 특성에 따라 생성한 음성 파일을 상기 상담 슬라이드에 포함하여 동영상 형태로 저장한 상담 슬라이드 동영상을 생성하는 제7 단계 및 상기 생성된 상담 슬라이드 동영상을 상기 의학 상담 요청 데이터에 대응하는 의학 상담을 요청한 사용자 단말 또는 지정된 동영상 관리 서버로 제공하는 제8 단계를 포함하는 의사 상담 슬라이드 동영상 자동 생성 방법을 제공함에 있다.An object of the present invention to solve the above problems is, in a method executed through an operation server communicating with a terminal, a first step of periodically providing a recording scenario designated as a doctor terminal designated as a consultation doctor, and the provided recording A second step of collecting the doctor's voice recording file corresponding to the scenario, and continuously analyzing the collected voice recording file to determine the doctor's voice characteristics, and to determine the doctor's voice characteristics as the doctor's voice characteristics. A third step of matching identification information and storing it in a designated database, a fourth step of collecting medical consultation request data in a designated field from a designated hospital terminal, and classifying the collected medical consultation request data by medical field, and designated as a counselor A fifth step of determining a counselor who will provide an answer to the medical consultation request data by matching the field of a doctor with the classified medical consultation request data, and medical consultation on the medical consultation request data from the determined consultation doctor terminal One or more images or videos for the medical consultation answer are arranged on a consultation slide so as to correspond to the sixth step of receiving answer data and the text content (or meaning) included in the medical consultation request data, and on the consultation slide A method for generating a counseling slide video in which the added explanation content is included in the counseling slide according to the voice characteristics of the counselor in the counseling slide and stored in the form of a video by adding explanations for the placed images and videos It is to provide a method for automatically generating a doctor consultation slide video, comprising step 7 and step 8 of providing the generated counseling slide video to a user terminal requesting medical consultation or a designated video management server corresponding to the medical consultation request data.

본 발명에 따른 의사 상담 슬라이드 동영상 자동 생성 방법은, 단말과 통신하는 운영서버를 통해 실행되는 방법에 있어서, 상담 의사로 지정된 의사 단말로 지정된 녹음 시나리오를 주기적으로 제공하는 제1 단계와 상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일을 수집하는 제2 단계와 상기 수집된 상기 음성 녹음 파일을 지속적으로 분석하여 상기 의사의 목소리 특성을 파악하고, 상기 파악된 상기 의사의 목소리 특성을 상기 의사의 식별정보와 매칭하여 지정된 데이터베이스에 저장하는 제3 단계와 지정된 병원 단말로부터 지정된 분야의 의학 상담 요청 데이터를 수집하는 제4 단계와 상기 수집된 의학 상담 요청 데이터를 의학 분야 별로 분류하고, 상담 의사로 지정된 의사의 분야와 상기 분류된 의학 상담 요청 데이터를 매칭하여, 상기 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정하는 제5 단계와 상기 결정된 상담 의사 단말로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받는 제6 단계와 상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미)에 대응되도록 상기 의학 상담 답변을 위한 하나 이상의 이미지나 동영상을 상담 슬라이드 상에 배치하고, 상기 상담 슬라이드 상에 배치된 이미지, 동영상에 대한 설명 내용을 추가하여, 상기 추가된 설명 내용을 상기 상담 의사의 목소리 특성에 따라 생성한 음성 파일을 상기 상담 슬라이드에 포함하여 동영상 형태로 저장한 상담 슬라이드 동영상을 생성하는 제7 단계 및 상기 생성된 상담 슬라이드 동영상을 상기 의학 상담 요청 데이터에 대응하는 의학 상담을 요청한 사용자 단말 또는 지정된 동영상 관리 서버로 제공하는 제8 단계를 포함하는 것을 특징으로 한다.The method for automatically generating a slide video of a doctor consultation according to the present invention is a method executed through an operation server communicating with a terminal, the first step of periodically providing a recording scenario designated as a doctor terminal designated as a consultation doctor, and the provided recording scenario A second step of collecting the voice recording file of the doctor corresponding to A third step of matching information and storing it in a specified database, a fourth step of collecting medical consultation request data in a specified field from a specified hospital terminal, and classifying the collected medical consultation request data by medical field, and a doctor designated as a counselor A fifth step of determining a counselor who will provide an answer to the medical consultation request data by matching the field of medical treatment with the classified medical consultation request data, and a medical consultation answer to the medical consultation request data from the determined counselor terminal One or more images or videos for the medical consultation answer are arranged on the consultation slide so as to correspond to the sixth step of receiving data and the text content (or meaning) included in the medical consultation request data, and placed on the consultation slide A seventh method of generating a counseling slide video in which the added explanation content is included in the counseling slide according to the voice characteristics of the counselor in the counseling slide and stored in the form of a video by adding the explanation content for the image and video and an eighth step of providing the generated consultation slide video to a user terminal requesting medical consultation or a designated video management server corresponding to the medical consultation request data.

삭제delete

본 발명에 따르면, 상기 제3 단계는, 지정된 의사 별로 지속적으로 수집되는 음성 녹음 파일을 딥 러닝 또는 머신 러닝 기반 분석을 통해 상기 의사의 목소리에 대한 특성을 분석하는 단계를 포함하여 이루어질 수 있다.According to the present invention, the third step may include analyzing the characteristics of the doctor's voice through deep learning or machine learning-based analysis of a voice recording file continuously collected for each designated doctor.

삭제delete

삭제delete

삭제delete

삭제delete

본 발명에 따르면, 상기 제6 단계는, 상기 결정된 상담 의사 단말로 상기 의학 상담 요청 데이터를 제공하는 단계를 더 포함하여 이루어질 수 있다.According to the present invention, the sixth step may further include providing the medical consultation request data to the determined consultation doctor terminal.

본 발명에 따르면, 상기 의학 상담 답변 데이터는, 텍스트, 이미지, 동영상 중 어느 하나 이상을 포함하여 이루어질 수 있다.According to the present invention, the medical consultation answer data may include any one or more of text, image, and video.

삭제delete

삭제delete

본 발명에 따르면, 상기 상담 슬라이드는, 상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미) 또는 상기 의학 상담 답변을 위한 이미지나 동영상의 개수에 따라 하나 이상의 상담 슬라이드에 연속적으로 배치되는 것을 특징으로 한다.According to the present invention, the counseling slides are continuously arranged on one or more counseling slides according to the text content (or meaning) included in the medical counseling request data or the number of images or videos for the medical counseling answer. do.

본 발명에 따르면, 머신러닝을 통해 학습된 원장님의 목소리를 활용, 텍스트 입력시 음성파일 자동 생성하고, 딥슬라이드 기술을 이용한 영상 컨텐츠를 간편하게 생성할 수 있는 이점이 있다.According to the present invention, there is an advantage in that it is possible to use the voice of the director learned through machine learning, automatically generate a voice file when text is input, and easily create video content using the deep slide technology.

또한, 본 발명에 따르면, 영상 생성 시 다양한 플랫폼 자동 노출을 통한 의사 및 이용자 편의성을 제공할 수 있는 이점이 있다.In addition, according to the present invention, there is an advantage that can provide convenience to doctors and users through automatic exposure to various platforms when generating images.

도 1은 본 발명의 실시 방법에 따른 의사 상담 슬라이드 동영상을 자동으로 생성하는 시스템 구성을 도시한 도면이다.
도 2는 본 발명의 실시 방법에 따라 상담 의사로 지정된 의사의 음성 녹음 파일을 통해 목소리 특성을 파악하는 과정을 도시한 도면이다.
도 3은 본 발명의 실시 방법에 따라 지정된 상담 의사 단말로부터 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받는 과정을 도시한 도면이다.
도 4는 본 발명의 실시 방법에 따라 의사 상담 슬라이드 동영상을 생성하여 제공하는 과정을 도시한 도면이다.
1 is a diagram showing the configuration of a system for automatically generating a slide video of a doctor consultation according to an embodiment of the present invention.
2 is a diagram illustrating a process of recognizing voice characteristics through a voice recording file of a doctor designated as a counselor according to an embodiment of the present invention.
3 is a diagram illustrating a process of receiving medical consultation answer data for medical consultation request data from a designated consultation doctor terminal according to an embodiment of the present invention.
4 is a diagram illustrating a process of generating and providing a doctor consultation slide video according to an embodiment of the present invention.

이하 첨부된 도면과 설명을 참조하여 본 발명의 바람직한 실시예에 대한 동작 원리를 상세히 설명한다. 다만, 하기에 도시되는 도면과 후술되는 설명은 본 발명의 특징을 효과적으로 설명하기 위한 여러 가지 방법 중에서 바람직한 실시 방법에 대한 것이며, 본 발명이 하기의 도면과 설명만으로 한정되는 것은 아니다.Hereinafter, the principle of operation of the preferred embodiment of the present invention will be described in detail with reference to the accompanying drawings and description. However, the drawings shown below and the description to be given below relate to a preferred implementation method among various methods for effectively explaining the characteristics of the present invention, and the present invention is not limited only to the following drawings and description.

즉, 하기의 실시예는 본 발명의 수 많은 실시예 중에 바람직한 합집합 형태의 실시예 예에 해당하며, 하기의 실시예에서 특정 구성(또는 단계)를 생략하는 실시예, 또는 특정 구성(또는 단계)에 구현된 기능을 특정 구성(또는 단계)로 분할하는 실시예, 또는 둘 이상의 구성(또는 단계)에 구현된 기능을 어느 하나의 구성(또는 단계)에 통합하는 실시예, 특정 구성(또는 단계)의 동작 순서를 교체하는 실시예 등은, 하기의 실시예에서 별도로 언급하지 않더라도 모두 본 발명의 권리범위에 속함을 명백하게 밝혀두는 바이다. 따라서 하기의 실시예를 기준으로 부분집합 또는 여집합에 해당하는 다양한 실시예들이 본 발명의 출원일을 소급받아 분할될 수 있음을 분명하게 명기하는 바이다.That is, the following embodiment corresponds to an embodiment of a preferred union type among numerous embodiments of the present invention, and an embodiment in which a specific configuration (or step) is omitted in the following embodiment, or a specific configuration (or step) An embodiment in which a function implemented in a function is divided into a specific configuration (or step), or an embodiment in which a function implemented in two or more configurations (or step) is integrated into any one configuration (or step), a specific configuration (or step) Embodiments in which the order of operation is replaced, etc. are clearly stated to be within the scope of the present invention, even if not separately mentioned in the following embodiments. Accordingly, it is clearly specified that various embodiments corresponding to a subset or a complement can be divided retroactively from the filing date of the present invention based on the following examples.

또한, 하기에서 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로써, 이는 환자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 발명에서 전반에 걸친 내용을 토대로 내려져야 할 것이다. In addition, in the following description of the present invention, if it is determined that a detailed description of a related well-known function or configuration may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted. And the terms to be described later are terms defined in consideration of functions in the present invention, which may vary depending on the intention or custom of the patient or operator. Therefore, the definition should be made based on the content throughout the present invention.

결과적으로, 본 발명의 기술적 사상은 청구범위에 의해 결정되며, 이하 실시예는 진보적인 본 발명의 기술적 사상을 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 효율적으로 설명하기 위한 일 수단일 뿐이다.As a result, the technical spirit of the present invention is determined by the claims, and the following examples are one means for efficiently explaining the technical spirit of the present invention to those of ordinary skill in the art to which the present invention belongs. only

도면1은 본 발명의 실시 방법에 따른 의사 상담 슬라이드 동영상을 자동으로 생성하는 시스템 구성을 도시한 도면이다.1 is a diagram showing the configuration of a system for automatically generating a slide video of a doctor consultation according to an embodiment of the present invention.

보다 상세하게 본 도면1은 상담 의사로 지정된 의사 단말로부터 지정된 녹음 시나리오에 대한 상기 의사의 음성 녹음 파일을 수집하고, 이를 지속적으로 분석하여 상기 의사의 목소리 특성을 파악하여 저장한 후, 지정된 분야의 의학 상담 요청 데이터를 수집하고 상기 수집된 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정하여, 상기 결정된 상담 의사 단말로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받아 상담 슬라이드 동영상을 생성하기 위한 시스템의 구성을 도시한 것으로서, 본 발명이 속한 기술분야에서 통상의 지식을 가진 자라면, 본 도면1을 참조 및/또는 변형하여 상기 시스템의 구성에 대한 다양한 실시 방법(예컨대, 일부 구성부가 생략되거나, 또는 세분화되거나, 또는 합쳐진 실시 방법)을 유추할 수 있을 것이나, 본 발명은 상기 유추되는 모든 실시 방법을 포함하여 이루어지며, 본 도면1에 도시된 실시 방법만으로 그 기술적 특징이 한정되지 아니한다.In more detail, FIG. 1 shows that a doctor's voice recording file for a specified recording scenario is collected from a doctor's terminal designated as a counselor, and the voice characteristics of the doctor are identified and stored by continuously analyzing it, and then, after the doctor's voice characteristics are stored. Collect consultation request data, determine a counselor who will provide an answer to the collected medical consultation request data, receive medical consultation answer data for the medical consultation request data from the determined counselor terminal, and generate a counseling slide video As a diagram showing the configuration of a system for doing this, those of ordinary skill in the art to which the present invention pertains, refer to and/or modify this FIG. 1 to see various implementation methods for the configuration of the system (eg, some components Omitted, subdivided, or combined implementation method) may be inferred, but the present invention is made including all the implementation methods inferred above, and the technical characteristics are not limited only to the implementation method shown in FIG. 1 .

본 발명의 시스템은, 운영서버(100)로부터 지정된 녹음 시나리오를 주기적으로 제공받고, 상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일을 상기 운영서버(100)로 제공하는 의사 단말(145)과, 지정된 분야의 의학 상담 요청 데이터를 상기 운영서버(100)로 제공하는 병원 단말(150)과, 상기 운영서버(100)로 의학 상담 요청 데이터에 대응하는 의학 상담을 요청하고, 상기 의학 상담에 대한 상담 슬라이드 동영상을 제공받는 사용자 단말(155)과, 상기 운영서버(100)로부터 생성된 상기 상담 슬라이드 동영상을 제공받아 사용자에게 제공하는 동영상 관리 서버(160)와, 상기 상담 의사로 지정된 의사 단말로부터 지정된 녹음 시나리오에 대한 상기 의사의 음성 녹음 파일을 수집하는 기능과, 이를 지속적으로 분석하여 상기 의사의 목소리 특성을 파악하여 저장하는 기능과, 지정된 분야의 의학 상담 요청 데이터를 수집하고 상기 수집된 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정하는 기능과, 상기 결정된 상담 의사 단말로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받아 상담 슬라이드 동영상을 생성하여 사용자 단말이나 지정된 동영상 관리 서버로 제공하는 기능 중 어느 하나 이상의 기능을 수행하는 운영서버(100)를 포함하여 이루어질 수 있다.The system of the present invention includes a doctor terminal 145 that periodically receives a specified recording scenario from the operation server 100 and provides the doctor's voice recording file corresponding to the provided recording scenario to the operation server 100; , a hospital terminal 150 that provides medical consultation request data in a designated field to the operation server 100, and requests a medical consultation corresponding to the medical consultation request data to the operation server 100, for the medical consultation A user terminal 155 that receives a counseling slide video, a video management server 160 that receives the counseling slide video generated from the operation server 100 and provides it to a user, and a doctor terminal designated as the counselor A function of collecting the doctor's voice recording file for the recording scenario, a function of continuously analyzing it to identify and store the characteristics of the doctor's voice, and collecting medical consultation request data in a specified field and requesting the collected medical consultation A function of determining a counselor who will provide an answer to the data, and receiving medical consultation answer data for the medical consultation request data from the determined counselor terminal, generating a slide video of the consultation, and providing it to a user terminal or a designated video management server It may include an operation server 100 that performs any one or more of the functions to be performed.

상기 의사 단말(145)은 상기 운영서버(100)와 연동하며, 상기 상담 의사로 지정된 의사(또는 특정 병원의 의사)가 이용하는 컴퓨터 장치의 총칭으로서, 유선망에 연결된 컴퓨터, 노트북 등의 유선단말과, 무선망에 연결된 휴대폰, 스마트폰, 태블릿PC, 노트북 등의 무선단말을 중 적어도 하나를 포함한다. 바람직하게, 상기 의사는 상기 의사 단말(145)을 통해 상기 운영서버(100)에 접속하여 상기 의사에 대한 식별을 수행할 수 있으며, 상기 의사 단말(145)은 상기 운영서버(100)로부터 음성 녹음 파일 생성을 위한 지정된 녹음 시나리오를 주기적으로 제공받는 기능과, 상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일을 생성하는 기능과, 상기 생성된 상기 의사의 음성 녹음 파일을 상기 운영서버(100)로 제공하는 기능 중 하나 이상의 기능을 포함하며, 실시 방법에 따라 상기 기능을 위해 지정된 적어도 하나 이상의 절차를 수행하는 프로그램이나 앱(Application)이 설치될 수 있으며, 이 중 일부의 구성은 웹 방식을 통해 구현될 수도 있다. 이하, 별도의 언급이 없더라도 상기 의사 단말(145)을 주체로 하여 설명하는 기능은 상기 의사 단말(145)에 설치된 프로그램(또는 앱)이나 웹 방식을 통해 구현되는 것임을 명백하게 밝혀두는 바이다.The doctor terminal 145 interworks with the operation server 100 and is a generic term for computer devices used by a doctor designated as the consulting doctor (or a doctor in a specific hospital), and includes a wired terminal such as a computer or a laptop connected to a wired network; and at least one of wireless terminals such as mobile phones, smart phones, tablet PCs, and laptops connected to a wireless network. Preferably, the doctor may access the operation server 100 through the doctor terminal 145 to identify the doctor, and the doctor terminal 145 may record voice from the operation server 100 . A function of periodically receiving a specified recording scenario for file creation, a function of generating the doctor's voice recording file corresponding to the provided recording scenario, and the operation server (100) It includes one or more functions among the functions provided by the , and depending on the implementation method, a program or application that performs at least one or more procedures designated for the function may be installed, and some of these functions are configured through a web method. may be implemented. Hereinafter, even if there is no separate mention, the functions described with the pseudo terminal 145 as the main body are clearly implemented through a program (or app) installed in the pseudo terminal 145 or a web method.

상기 병원 단말(150)은 상기 운영서버(100)와 연동하며, 환자(또는 사용자)로부터 획득한 지정된 분야의 의학 상담 요청 데이터를 상기 운영서버(100)로 제공하는 지정된 병원에 구비되어 상기 병원의 의사 또는 직원이 이용하는 컴퓨터 장치의 총칭으로서, 유선망에 연결된 컴퓨터, 노트북 등의 유선단말과, 무선망에 연결된 휴대폰, 스마트폰, 태블릿PC, 노트북 등의 무선단말을 중 적어도 하나를 포함한다. 바람직하게, 상기 병원의 의사 또는 직원은 상기 병원 단말(150)을 통해 상기 운영서버(100)에 접속하여 상기 병원에 대한 식별을 수행할 수 있으며, 상기 병원 단말(150)은 환자 또는 사용자가 이용하는 단말로부터 지정된 분야의 의학 상담 요청 데이터를 수집하거나 획득하는 기능과, 상기 수집 또는 획득한 상기 지정된 분야의 의학 상담 요청 데이터를 상기 운영서버(100)로 제공하는 기능 중 하나 이상의 기능을 포함하며, 실시 방법에 따라 상기 기능을 위해 지정된 적어도 하나 이상의 절차를 수행하는 프로그램이나 앱(Application)이 설치될 수 있으며, 이 중 일부의 구성은 웹 방식을 통해 구현될 수도 있다. 이하, 별도의 언급이 없더라도 상기 병원 단말(150)을 주체로 하여 설명하는 기능은 상기 병원 단말(150)에 설치된 프로그램(또는 앱)이나 웹 방식을 통해 구현되는 것임을 명백하게 밝혀두는 바이다.The hospital terminal 150 is provided in a designated hospital that interworks with the operation server 100, and provides medical consultation request data in a specified field obtained from a patient (or user) to the operation server 100, the hospital's As a generic term for computer devices used by doctors or staff, it includes at least one of wired terminals such as computers and laptops connected to a wired network and wireless terminals such as mobile phones, smart phones, tablet PCs, and laptops connected to a wireless network. Preferably, the doctor or staff of the hospital may perform identification of the hospital by accessing the operation server 100 through the hospital terminal 150, and the hospital terminal 150 is used by the patient or user. It includes at least one function of a function of collecting or acquiring medical consultation request data of a designated field from a terminal, and a function of providing the collected or acquired medical consultation request data of the specified field to the operation server 100, Depending on the method, a program or an application that performs at least one or more procedures designated for the function may be installed, and some of these may be implemented through a web method. Hereinafter, even if there is no separate mention, the function described with the hospital terminal 150 as the main body is clearly clarified that it is implemented through a program (or app) installed in the hospital terminal 150 or a web method.

상기 사용자 단말(155)은 상기 운영서버(100)와 연동하며, 상기 운영서버(100)를 통해 생성되어 제공되는 의학 상담 답변 데이터를 포함하는 상담 슬라이드 동영상을 직접 또는 지정된 동영상 관리 서버(160)를 통해 제공받는 사용자가 이용하는 컴퓨터 장치의 총칭으로서, 유선망에 연결된 컴퓨터, 노트북 등의 유선단말과, 무선망에 연결된 휴대폰, 스마트폰, 태블릿PC, 노트북 등의 무선단말을 중 적어도 하나를 포함한다. 바람직하게, 상기 사용자는 상기 사용자 단말(155)을 통해 상기 운영서버(100)나 동영상 관리 서버(160)에 접속하여 상기 사용자에 대한 식별을 수행할 수 있으며, 상기 사용자 단말(155)은 상기 운영서버(100)나 동영상 관리 서버(160)로 지정된 분야의 의학 상담 요청 데이터를 제공하는 기능과, 상기 운영서버(100)나 동영상 관리 서버(160)로부터 의학 상담 답변 데이터를 포함하는 상담 슬라이드 동영상을 제공받는 기능 중 하나 이상의 기능을 포함하며, 실시 방법에 따라 상기 기능을 위해 지정된 적어도 하나 이상의 절차를 수행하는 프로그램이나 앱(Application)이 설치될 수 있으며, 이 중 일부의 구성은 웹 방식을 통해 구현될 수도 있다. 이하, 별도의 언급이 없더라도 상기 사용자 단말(155)을 주체로 하여 설명하는 기능은 상기 사용자 단말(155)에 설치된 프로그램(또는 앱)이나 웹 방식을 통해 구현되는 것임을 명백하게 밝혀두는 바이다.The user terminal 155 interworks with the operation server 100, and directly or a designated video management server 160 transmits a consultation slide video including medical consultation answer data generated and provided through the operation server 100. A generic term for a computer device used by a user provided through a wired network, and includes at least one of a wired terminal such as a computer and a laptop connected to a wired network, and a wireless terminal such as a mobile phone, a smart phone, a tablet PC, and a laptop connected to a wireless network. Preferably, the user can perform identification of the user by accessing the operation server 100 or the video management server 160 through the user terminal 155, and the user terminal 155 is the operation server. A function of providing medical consultation request data in the field designated by the server 100 or the video management server 160, and a consultation slide video including medical consultation answer data from the operation server 100 or the video management server 160 A program or application that includes one or more functions among the provided functions, and performs at least one or more procedures designated for the functions according to the implementation method may be installed, some of which are implemented through a web method it might be Hereinafter, even if there is no separate mention, the functions described with the user terminal 155 as the main body are clearly implemented through a program (or app) installed in the user terminal 155 or a web method.

상기 동영상 관리 서버(160)는 상기 운영서버(100)와 연동하며, 상기 운영서버(100)로부터 생성된 의학 상담 답변 데이터를 포함하는 상담 슬라이드 동영상을 제공받아 관리하고 사용자에게 제공하는 소셜 네트워크 서비스를 수행하는 서버이거나, 또는 포탈 서버일 수 있다.The video management server 160 interworks with the operation server 100, and receives and manages a slide video of counseling including medical consultation answer data generated from the operation server 100, and provides a social network service to the user. It may be a running server or a portal server.

도면1을 참조하면, 상기 운영서버(100)는 시나리오 제공부(105)와, 음성 수집부(110)와, 특성 확인부(115)와, 데이터 수신부(120)와, 상담 결정부(125)와, 답변 수신부(130)와, 슬라이드 생성부(135)와, 슬라이드 제공부(140)를 구비할 구성될 수 있다. 한편 본 도면1의 실시예는 편의상 상기 운영서버(100)를 하나의 서버 형태로 도시하였으나, 상기 운영서버(100)를 구현하는 실시예가 이에 의해 한정되는 것은 아니며, 상기 운영서버(100)는 둘 이상의 서버 조합 또는 서버 시스템 형태로 구현되거나 기 구축된 서버에 탑재되는 소프트웨어 형태로 구현될 수 있으며, 본 발명은 이러한 모든 실시예를 포함한다.Referring to FIG. 1 , the operation server 100 includes a scenario providing unit 105 , a voice collecting unit 110 , a characteristic checking unit 115 , a data receiving unit 120 , and a consultation determining unit 125 . And, it may be configured to include a response receiving unit 130 , a slide generating unit 135 , and a slide providing unit 140 . On the other hand, although the embodiment of this figure 1 shows the operation server 100 in the form of one server for convenience, the embodiment implementing the operation server 100 is not limited thereto, and the operation server 100 has two It may be implemented in the form of a combination of the above servers or a server system, or may be implemented in the form of software mounted on a pre-built server, and the present invention includes all such embodiments.

상기 시나리오 제공부(105)는 상담 의사로 지정된 의사 단말(145)로 지정된 녹음 시나리오를 주기적으로 제공할 수 있다. 여기서 상기 녹음 시나리오는 상기 의사의 음성 녹음 파일을 수집하기 위한 의학적 시나리오와 비의학적 시나리오를 모두 포함할 수 있다.The scenario providing unit 105 may periodically provide a recording scenario designated as a doctor terminal 145 designated as a consultation doctor. Here, the recording scenario may include both a medical scenario and a non-medical scenario for collecting the doctor's voice recording file.

상기 음성 수집부(110)는 상기 시나리오 제공부(105)를 통해 상기 의사 단말(145)로 지정된 녹음 시나리오가 주기적으로 제공된 이후, 상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일을 수집할 수 있다.After the recording scenario designated to the doctor terminal 145 is periodically provided through the scenario providing unit 105, the voice collection unit 110 may collect the doctor's voice recording file corresponding to the provided recording scenario. have.

상기 특성 확인부(115)는 상기 음성 수집부(110)를 통해 상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일이 수집되면, 상기 수집된 상기 음성 녹음 파일을 지속적으로 분석하여 상기 의사의 목소리 특성을 파악할 수 있다.When the doctor's voice recording file corresponding to the provided recording scenario is collected through the voice collecting unit 110, the characteristic check unit 115 continuously analyzes the collected voice recording file to determine the doctor's voice. characteristics can be identified.

본 발명의 실시 방법에 따르면, 상기 특성 확인부(115)는 지정된 의사 별로 지속적으로 수집되는 음성 녹음 파일을 딥 러닝 또는 머신 러닝 기반 분석을 통해 상기 의사의 목소리에 대한 특성을 분석할 수 있다.According to the implementation method of the present invention, the characteristic check unit 115 may analyze the characteristics of the voice of the doctor through deep learning or machine learning-based analysis of the voice recording file continuously collected for each designated doctor.

한편, 상기 특성 확인부(115)는 상기 음성 녹음 파일을 지속적으로 분석하여 상기 의사의 목소리 특성이 파악되면, 상기 파악된 상기 의사의 목소리 특성을 상기 의사의 식별정보와 매칭하여 지정된 데이터베이스(또는 저장매체)에 저장할 수 있다.On the other hand, when the characteristics of the doctor's voice are recognized by continuously analyzing the voice recording file, the characteristic checking unit 115 matches the identified characteristics of the doctor's voice with the identification information of the doctor to a designated database (or storage). media) can be stored.

상기 데이터 수신부(120)는 상기 특성 확인부(115)를 통해 상기 의사의 목소리 특성이 파악되고 데이터베이스(또는 저장매체)에 저장된 이후에, 지정된 병원 단말(150)로부터 지정된 분야의 의학 상담 요청 데이터를 수집할 수 있다.The data receiving unit 120 receives medical consultation request data in a specified field from the specified hospital terminal 150 after the characteristics of the doctor's voice are identified through the characteristic confirmation unit 115 and stored in a database (or storage medium). can be collected

여기서, 상기 의학 상담 요청 데이터는 병원의 온라인 게시판 등을 통해 환자나 사용자로부터 질의된 의학 상담 요청 내용을 포함할 수 있다.Here, the medical consultation request data may include medical consultation request contents queried by a patient or a user through an online bulletin board of a hospital.

상기 상담 결정부(125)는 상기 데이터 수신부(120)를 통해 지정된 분야의 의학 상담 요청 데이터가 수신된 이후, 상기 수집된 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정할 수 있다.After receiving medical consultation request data in a designated field through the data receiving unit 120 , the consultation decision unit 125 may determine a counselor who will provide an answer to the collected medical consultation request data.

본 발명의 실시 방법에 따르면, 상기 상담 결정부(125)는 상기 수집된 의학 상담 요청 데이터를 의학 분야 별로 분류하고, 상담 의사로 지정된 의사의 분야와 상기 분류된 의학 상담 요청 데이터를 매칭하는 과정을 통해 상기 수집된 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정할 수 있다.According to the implementation method of the present invention, the consultation decision unit 125 classifies the collected medical consultation request data by medical field, and performs a process of matching the classified medical consultation request data with the field of a doctor designated as a consultation doctor. Through this, it is possible to determine a counselor who will provide an answer to the collected medical consultation request data.

상기 답변 수신부(130)는 상기 상담 결정부(125)를 통해 상기 수집된 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사가 결정되면, 상기 결정된 상담 의사 단말(145)로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받을 수 있다. 여기서, 상기 의학 상담 답변 데이터는 텍스트, 이미지, 동영상 중 어느 하나 이상을 포함할 수 있다.When a counselor who will provide an answer to the collected medical consultation request data is determined through the consultation decision unit 125, the answer receiving unit 130 receives the medical consultation request data from the determined consultation doctor terminal 145. It is possible to receive medical consultation answer data for Korea. Here, the medical consultation answer data may include any one or more of text, image, and video.

또한, 상기 답변 수신부(130)는 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받기 위해 상기 결정된 상담 의사 단말(145)로 상기 의학 상담 요청 데이터를 제공하는 것이 가능하다.In addition, the answer receiving unit 130 may provide the medical consultation request data to the determined consultation doctor terminal 145 to receive medical consultation answer data for the medical consultation request data.

상기 슬라이드 생성부(135)는 상기 답변 수신부(130)를 통해 상담 의사 단말(145)로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받으면, 상기 의학 상담 답변 데이터를 포함하는 상담 슬라이드 동영상을 생성할 수 있다.When receiving medical consultation answer data for the medical consultation request data from the consultation doctor terminal 145 through the answer receiving unit 130, the slide generating unit 135 generates a consultation slide video including the medical consultation answer data. can create

본 발명의 실시 방법에 따르면, 상기 슬라이드 생성부(135)는 상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미)에 대응되도록 상기 의학 상담 답변을 위한 하나 이상의 이미지나 동영상을 상담 슬라이드 상에 배치하고, 상기 상담 슬라이드 상에 배치된 이미지, 동영상에 대한 설명 내용을 추가할 수 있다. 또한 상기 추가된 설명 내용을 상기 상담 의사의 목소리 특성에 따라 음성 파일로 생성하고, 상기 생성된 음성 파일을 상기 상담 슬라이드에 포함하여 동영상 형태로 저장할 수 있다. 여기서 상기 상담 슬라이드는 상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미) 또는 상기 의학 상담 답변을 위한 이미지나 동영상의 개수에 따라 하나 이상의 상담 슬라이드에 연속적으로 배치되는 것이 가능하다.According to the embodiment of the present invention, the slide generating unit 135 arranges one or more images or videos for the medical consultation answer on the consultation slide so as to correspond to the text content (or meaning) included in the medical consultation request data. And, it is possible to add descriptions of images and videos arranged on the counseling slide. In addition, the added explanation content may be generated as a voice file according to the characteristics of the counselor's voice, and the generated voice file may be included in the counseling slide and stored in the form of a moving picture. Here, the counseling slides may be continuously arranged on one or more counseling slides according to the text content (or meaning) included in the medical counseling request data or the number of images or videos for the medical counseling answer.

상기 슬라이드 제공부(140)는 상기 슬라이드 생성부(135)를 통해 상기 의학 상담 답변 데이터를 포함하는 상담 슬라이드 동영상이 생성되면, 상기 생성된 상담 슬라이드 동영상을 상기 의학 상담 요청 데이터에 대응하는 의학 상담을 요청한 사용자 단말(155) 또는 지정된 동영상 관리 서버(160)로 제공할 수 있다.When a slide video of counseling including the medical consultation answer data is generated through the slide generator 135, the slide providing unit 140 converts the generated counseling slide video to medical consultation corresponding to the medical consultation request data. It may be provided to the requested user terminal 155 or a designated video management server 160 .

도면2는 본 발명의 실시 방법에 따라 상담 의사로 지정된 의사의 음성 녹음 파일을 통해 목소리 특성을 파악하는 과정을 도시한 도면이다.2 is a diagram illustrating a process of recognizing voice characteristics through a voice recording file of a doctor designated as a counselor according to an embodiment of the present invention.

보다 상세하게 본 도면2는 상기 도면1에 도시된 운영서버(100)에서 상담 의사로 지정된 의사 단말(145)로부터 지정된 녹음 시나리오에 대한 상기 의사의 음성 녹음 파일을 수집하고, 이를 지속적으로 분석하여 상기 의사의 목소리 특성을 파악하여 저장하는 과정을 도시한 것으로서, 본 발명이 속한 기술분야에서 통상의 지식을 가진 자라면, 본 도면2를 참조 및/또는 변형하여 상기 과정에 대한 다양한 실시 방법(예컨대, 일부 단계가 생략되거나, 또는 순서가 변경된 실시 방법)을 유추할 수 있을 것이나, 본 발명은 상기 유추되는 모든 실시 방법을 포함하여 이루어지며, 본 도면2에 도시된 실시 방법만으로 그 기술적 특징이 한정되지 아니한다.In more detail, FIG. 2 shows that the doctor's voice recording file for the recording scenario designated as the consultation doctor is collected from the doctor terminal 145 designated as the consulting doctor in the operation server 100 shown in FIG. As showing a process of identifying and storing the characteristics of a doctor's voice, those of ordinary skill in the art to which the present invention pertains may refer to and/or modify this FIG. 2 to see various implementation methods for the process (eg, An implementation method in which some steps are omitted or the order is changed) may be inferred, but the present invention is made including all the implementation methods inferred above, and the technical characteristics are not limited only to the implementation method shown in FIG. 2 No.

도면2를 참조하면, 도시된 실시 과정은 상기 운영서버(100)에서 상담 의사로 지정된 의사 단말(145)로 지정된 녹음 시나리오를 주기적으로 제공하는 과정으로부터 개시될 수 있다(200). Referring to FIG. 2 , the illustrated implementation process may be started from the process of periodically providing a recording scenario designated by the operation server 100 to the doctor terminal 145 designated as the consulting doctor ( 200 ).

바람직하게, 상기 녹음 시나리오는 상기 의사의 음성 녹음 파일을 수집하기 위한 의학적 시나리오와 비의학적 시나리오를 모두 포함할 수 있다.Preferably, the recording scenario may include both a medical scenario and a non-medical scenario for collecting the voice recording file of the doctor.

상기 의사 단말(145)로 지정된 녹음 시나리오가 주기적으로 제공된 이후, 상기 운영서버(100)는 상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일을 수집한다(205).After the recording scenario designated to the doctor terminal 145 is periodically provided, the operation server 100 collects the doctor's voice recording file corresponding to the provided recording scenario (205).

그리고, 상기 운영서버(100)는 상기 수집된 상기 음성 녹음 파일을 지속적으로 분석하여 상기 의사의 목소리 특성을 파악한다(210).Then, the operation server 100 continuously analyzes the collected voice recording file to determine the characteristics of the doctor's voice (210).

본 발명의 실시 방법에 따르면, 상기 운영서버(100)는 지정된 의사 별로 지속적으로 수집되는 음성 녹음 파일을 딥 러닝 또는 머신 러닝 기반 분석을 통해 상기 의사의 목소리에 대한 특성을 분석할 수 있다.According to the implementation method of the present invention, the operation server 100 may analyze the characteristics of the doctor's voice through deep learning or machine learning-based analysis of the voice recording files continuously collected for each designated doctor.

여기서, 상기 녹음 시나리오의 제공부터 의사의 목소리에 대한 특성 분석까지의 과정은 상기 의사의 목소리에 대한 특성이 파악될 때까지 반복적으로 수행되는 것이 바람직하다.Here, it is preferable that the process from providing the recording scenario to analyzing the characteristics of the doctor's voice is repeatedly performed until the characteristics of the doctor's voice are identified.

한편, 상기 음성 녹음 파일을 지속적으로 분석하여 상기 의사의 목소리 특성이 파악되면, 상기 운영서버(100)는 상기 파악된 상기 의사의 목소리 특성을 상기 의사의 식별정보와 매칭하여 지정된 데이터베이스(또는 저장매체)에 저장한다(215).On the other hand, when the voice characteristics of the doctor are identified by continuously analyzing the voice recording file, the operation server 100 matches the identified characteristics of the doctor's voice with the identification information of the doctor to a designated database (or storage medium). ) is stored in (215).

도면3은 본 발명의 실시 방법에 따라 지정된 상담 의사 단말로부터 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받는 과정을 도시한 도면이다.3 is a diagram illustrating a process of receiving medical consultation answer data for medical consultation request data from a designated consultation doctor terminal according to an embodiment of the present invention.

보다 상세하게 본 도면3은 상기 도면2의 과정을 통해 운영서버(100)에서 상담 의사로 지정된 의사의 목소리 특성을 파악하여 저장한 이후, 지정된 분야의 의학 상담 요청 데이터를 수집하고 상기 수집된 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정하여, 상기 결정된 상담 의사 단말로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받는 과정을 도시한 것으로서, 본 발명이 속한 기술분야에서 통상의 지식을 가진 자라면, 본 도면3을 참조 및/또는 변형하여 상기 과정에 대한 다양한 실시 방법(예컨대, 일부 단계가 생략되거나, 또는 순서가 변경된 실시 방법)을 유추할 수 있을 것이나, 본 발명은 상기 유추되는 모든 실시 방법을 포함하여 이루어지며, 본 도면3에 도시된 실시 방법만으로 그 기술적 특징이 한정되지 아니한다.In more detail, FIG. 3 shows that, through the process of FIG. 2, the operation server 100 identifies and stores the voice characteristics of a doctor designated as a counselor, collects medical consultation request data in a designated field, and collects the collected medical consultation It shows a process of determining a counselor who will provide an answer to the requested data, and receiving medical consultation answer data for the medical consultation request data from the determined counselor terminal, as is common knowledge in the art to which the present invention belongs With reference to and/or modifying this figure 3, various implementation methods for the above process (eg, an implementation method in which some steps are omitted or the order is changed) will be inferred, but the present invention is based on the analogy It is made including all implementation methods that are used, and the technical characteristics are not limited only to the implementation method shown in FIG. 3 .

도면3을 참조하면, 도시된 실시 과정은, 상기 도면2의 과정을 통해 상담 의사로 지정딘 의사의 목소리 특성이 파악되고 데이터베이스(또는 저장매체)에 저장된 이후에, 상기 운영서버(100에서 지정된 병원 단말(150)로부터 지정된 분야의 의학 상담 요청 데이터를 수집하는 과정으로부터 개시될 수 있다(300). 여기서, 상기 의학 상담 요청 데이터는 병원의 온라인 게시판 등을 통해 환자나 사용자로부터 질의된 의학 상담 요청 내용을 포함하는 것이 바람직하다.Referring to FIG. 3 , in the illustrated implementation process, after the voice characteristics of a doctor designated as a consulting doctor are identified through the process of FIG. 2 and stored in a database (or storage medium), the operation server 100 designated hospital It may be started from the process of collecting medical consultation request data of a designated field from the terminal 150 (300), where the medical consultation request data is medical consultation request content queried from a patient or user through an online bulletin board of a hospital, etc. It is preferable to include

상기 지정된 분야의 의학 상담 요청 데이터가 수신된 이후, 상기 운영서버(100)는 상기 수집된 의학 상담 요청 데이터를 의학 분야 별로 분류하고(305), 상담 의사로 지정된 의사의 분야와 상기 분류된 의학 상담 요청 데이터를 매칭하여(310), 상기 수집된 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정한다(310).After the medical consultation request data of the designated field is received, the operation server 100 classifies the collected medical consultation request data by medical field (305), and the classified medical consultation with the field of the doctor designated as the consultation doctor. By matching the requested data (310), a counselor who will provide an answer to the collected medical consultation request data is determined (310).

상기 수집된 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사가 결정되면, 상기 운영서버(100)는 상기 결정된 상담 의사 단말(145)로 상기 의학 상담 요청 데이터를 제공하여 상기 의학 상담 요청 데이터에 대한 답변을 요청하고(320), 상기 상담 의사 단말(145)로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 수신한다(325). 여기서, 상기 의학 상담 답변 데이터는 텍스트, 이미지, 동영상 중 어느 하나 이상을 포함할 수 있다.When a counselor who will provide an answer to the collected medical consultation request data is determined, the operation server 100 provides the medical consultation request data to the determined consultation doctor terminal 145 to provide information on the medical consultation request data. Requests an answer ( 320 ), and receives medical consultation answer data for the medical consultation request data from the consultation doctor terminal 145 ( 325 ). Here, the medical consultation answer data may include any one or more of text, image, and video.

도면4는 본 발명의 실시 방법에 따라 의사 상담 슬라이드 동영상을 생성하여 제공하는 과정을 도시한 도면이다.4 is a diagram illustrating a process of generating and providing a doctor consultation slide video according to an embodiment of the present invention.

보다 상세하게 본 도면4는 상기 도면3의 과정을 통해 운영서버(100)에서 지정된 분야의 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사 단말로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받는 이후, 상기 의학 상담 답변 데이터를 포함하는 상담 슬라이드 동영상을 생성하여 사용자 단말이나 지정된 동영상 관리 서버로 제공하는 과정을 도시한 것으로서, 본 발명이 속한 기술분야에서 통상의 지식을 가진 자라면, 본 도면4를 참조 및/또는 변형하여 상기 과정에 대한 다양한 실시 방법(예컨대, 일부 단계가 생략되거나, 또는 순서가 변경된 실시 방법)을 유추할 수 있을 것이나, 본 발명은 상기 유추되는 모든 실시 방법을 포함하여 이루어지며, 본 도면4에 도시된 실시 방법만으로 그 기술적 특징이 한정되지 아니한다.In more detail, FIG. 4 provides medical consultation answer data to the medical consultation request data from the consultation doctor terminal that will provide an answer to the medical consultation request data in the field designated by the operation server 100 through the process of FIG. 3 After receiving, as showing a process of generating a counseling slide video including the medical consultation answer data and providing it to a user terminal or a designated video management server, those of ordinary skill in the art to which the present invention pertains, this drawing 4, various implementation methods for the above process (eg, an implementation method in which some steps are omitted or the order is changed) may be inferred by referring and/or modifying 4, but the present invention includes all implementation methods inferred above. The technical characteristics are not limited only to the implementation method shown in FIG. 4 .

도면4를 참조하면, 도시된 실시 과정은, 상기 도면3의 과정을 통해 상담 의사 단말(145)로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받은 이후, 상기 운영서버(100)에서 상기 의학 상담 답변 데이터를 포함하는 상담 슬라이드 동영상을 생성하기 위해 상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미)에 대응되도록 상기 의학 상담 답변을 위한 하나 이상의 이미지나 동영상을 상담 슬라이드 상에 배치하는 과정으로부터 개시될 수 있다(400).Referring to FIG. 4 , in the illustrated implementation process, after receiving medical consultation answer data for the medical consultation request data from the consultation doctor terminal 145 through the process of FIG. 3 , the operation server 100 performs the A process of arranging one or more images or videos for medical consultation answers on a consultation slide so as to correspond to text content (or meaning) included in the medical consultation request data to generate a consultation slide video including medical consultation answer data It can be started from (400).

그리고, 상기 운영서버(100)는 상기 상담 슬라이드 상에 배치된 이미지, 동영상에 대한 설명 내용을 추가한다(405). Then, the operation server 100 adds descriptions for images and videos arranged on the counseling slide ( 405 ).

상기 상담 슬라이드 상에 배치된 이미지, 동영상에 대한 설명 내용이 추가되면, 상기 운영서버(100)는 상기 추가된 설명 내용을 상기 상담 의사의 목소리 특성에 따라 음성 파일로 생성한다(410). When explanations for images and moving pictures placed on the counseling slide are added, the operation server 100 generates the added explanations as a voice file according to the voice characteristics of the counselor ( 410 ).

그리고, 상기 운영서버(100)는 상기 생성된 음성 파일을 상기 상담 슬라이드에 포함하여 동영상 형태로 저장한다(415). 여기서 상기 상담 슬라이드는 상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미) 또는 상기 의학 상담 답변을 위한 이미지나 동영상의 개수에 따라 하나 이상의 상담 슬라이드에 연속적으로 배치되는 것이 가능하다.Then, the operation server 100 stores the generated voice file in the form of a moving picture by including it in the counseling slide (415). Here, the counseling slides may be continuously arranged on one or more counseling slides according to the text content (or meaning) included in the medical counseling request data or the number of images or videos for the medical counseling answer.

상기 의학 상담 답변 데이터를 포함하는 상담 슬라이드 동영상이 생성되면, 상기 운영서버(100)는 상기 생성된 상담 슬라이드 동영상을 상기 의학 상담 요청 데이터에 대응하는 의학 상담을 요청한 사용자 단말(155) 또는 지정된 동영상 관리 서버(160)로 제공한다(420)When the consultation slide video including the medical consultation answer data is generated, the operation server 100 uses the generated consultation slide video to the user terminal 155 requesting medical consultation corresponding to the medical consultation request data or to manage a designated video It is provided to the server 160 (420)

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

100 : 운영서버 104 : 서비스가입 확인부
108 : 정보 저장부 112 : 보험가입 확인부
116 : 보험정보 생성부 120 : 보험 청구부
125 : 약국 내 단말 130 : 의약관리모듈
135 : 정보처리모듈 140 : 인쇄장치
145 : 터치스크린장치 150 : 환자 무선단말
155 : 앱 160 : 정보관리서버
165 : 중계서버
100: operation server 104: service subscription confirmation unit
108: information storage unit 112: insurance subscription confirmation unit
116: insurance information generation unit 120: insurance claim unit
125: terminal in the pharmacy 130: drug management module
135: information processing module 140: printing device
145: touch screen device 150: patient wireless terminal
155: app 160: information management server
165: relay server

Claims (8)

단말과 통신하는 운영서버를 통해 실행되는 방법에 있어서,
상담 의사로 지정된 의사 단말로 지정된 녹음 시나리오를 주기적으로 제공하는 제1 단계;
상기 제공된 녹음 시나리오에 대응하는 상기 의사의 음성 녹음 파일을 수집하는 제2 단계;
상기 수집된 상기 음성 녹음 파일을 지속적으로 분석하여 상기 의사의 목소리 특성을 파악하고, 상기 파악된 상기 의사의 목소리 특성을 상기 의사의 식별정보와 매칭하여 지정된 데이터베이스에 저장하는 제3 단계;
지정된 병원 단말로부터 지정된 분야의 의학 상담 요청 데이터를 수집하는 제4 단계;
상기 수집된 의학 상담 요청 데이터를 의학 분야 별로 분류하고, 상담 의사로 지정된 의사의 분야와 상기 분류된 의학 상담 요청 데이터를 매칭하여, 상기 의학 상담 요청 데이터에 대한 답변을 제공할 상담 의사를 결정하는 제5 단계;
상기 결정된 상담 의사 단말로부터 상기 의학 상담 요청 데이터에 대한 의학 상담 답변 데이터를 제공받는 제6 단계;
상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미)에 대응되도록 상기 의학 상담 답변을 위한 하나 이상의 이미지나 동영상을 상담 슬라이드 상에 배치하고, 상기 상담 슬라이드 상에 배치된 이미지, 동영상에 대한 설명 내용을 추가하여, 상기 추가된 설명 내용을 상기 상담 의사의 목소리 특성에 따라 생성한 음성 파일을 상기 상담 슬라이드에 포함하여 동영상 형태로 저장한 상담 슬라이드 동영상을 생성하는 제7 단계; 및
상기 생성된 상담 슬라이드 동영상을 상기 의학 상담 요청 데이터에 대응하는 의학 상담을 요청한 사용자 단말 또는 지정된 동영상 관리 서버로 제공하는 제8 단계;를 포함하는 의사 상담 슬라이드 동영상 자동 생성 방법.
In the method executed through the operation server communicating with the terminal,
A first step of periodically providing a recording scenario designated as a doctor terminal designated as a counselor;
a second step of collecting the doctor's voice recording file corresponding to the provided recording scenario;
a third step of continuously analyzing the collected voice recording file to determine the characteristics of the doctor's voice, matching the identified characteristics of the doctor's voice with the identification information of the doctor, and storing it in a designated database;
a fourth step of collecting medical consultation request data in a designated field from a designated hospital terminal;
Classifying the collected medical consultation request data by medical field, matching the classified medical consultation request data with a field of a doctor designated as a counselor, to determine a counselor who will provide an answer to the medical consultation request data Step 5;
a sixth step of receiving medical consultation answer data for the medical consultation request data from the determined consultation doctor terminal;
One or more images or videos for answering the medical consultation are arranged on a consultation slide so as to correspond to the text content (or meaning) included in the medical consultation request data, and description of the image and video placed on the consultation slide a seventh step of generating a counseling slide video in which the added explanation content is included in the counseling slide according to the voice characteristics of the counselor and stored in the form of a video; and
and an eighth step of providing the generated consultation slide video to a user terminal requesting medical consultation or a designated video management server corresponding to the medical consultation request data.
제 1항에 있어서, 상기 제3 단계는,
지정된 의사 별로 지속적으로 수집되는 음성 녹음 파일을 딥 러닝 또는 머신 러닝 기반 분석을 통해 상기 의사의 목소리에 대한 특성을 분석하는 단계를 포함하여 이루어지는 것을 특징으로 하는 의사 상담 슬라이드 동영상 자동 생성 방법.
According to claim 1, wherein the third step,
A method of automatically generating a doctor consultation slide video, comprising the step of analyzing the characteristics of the doctor's voice through deep learning or machine learning-based analysis of voice recording files continuously collected for each designated doctor.
삭제delete 삭제delete 제 1항에 있어서, 상기 제6 단계는,
상기 결정된 상담 의사 단말로 상기 의학 상담 요청 데이터를 제공하는 단계를 더 포함하여 이루어지는 것을 특징으로 하는 의사 상담 슬라이드 동영상 자동 생성 방법.
According to claim 1, wherein the sixth step,
and providing the medical consultation request data to the determined consultation doctor terminal.
제 1항에 있어서, 상기 의학 상담 답변 데이터는,
텍스트, 이미지, 동영상 중 어느 하나 이상을 포함하여 이루어지는 것을 특징으로 하는 의사 상담 슬라이드 동영상 자동 생성 방법.
According to claim 1, wherein the medical consultation answer data,
A method for automatically generating a slide video of a doctor consultation, characterized in that it includes any one or more of text, image, and video.
삭제delete 제 1항에 있어서, 상기 상담 슬라이드는,
상기 의학 상담 요청 데이터에 포함된 텍스트 내용(또는 의미) 또는 상기 의학 상담 답변을 위한 이미지나 동영상의 개수에 따라 하나 이상의 상담 슬라이드에 연속적으로 배치되는 것을 특징으로 하는 의사 상담 슬라이드 동영상 자동 생성 방법.
According to claim 1, wherein the consultation slide,
The method for automatically generating a doctor consultation slide video, characterized in that the text content (or meaning) included in the medical consultation request data or the number of images or videos for answering the medical consultation are continuously arranged on one or more consultation slides.
KR1020200027668A 2020-03-05 2020-03-05 Method for Auto-creating Doctor’s Consult Slide Video KR102421429B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200027668A KR102421429B1 (en) 2020-03-05 2020-03-05 Method for Auto-creating Doctor’s Consult Slide Video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200027668A KR102421429B1 (en) 2020-03-05 2020-03-05 Method for Auto-creating Doctor’s Consult Slide Video

Publications (2)

Publication Number Publication Date
KR20210113466A KR20210113466A (en) 2021-09-16
KR102421429B1 true KR102421429B1 (en) 2022-07-18

Family

ID=77926799

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200027668A KR102421429B1 (en) 2020-03-05 2020-03-05 Method for Auto-creating Doctor’s Consult Slide Video

Country Status (1)

Country Link
KR (1) KR102421429B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200066280A1 (en) * 2018-08-27 2020-02-27 Samsung Electronics Co., Ltd. Method and apparatus with speaker authentication and/or training

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100735489B1 (en) * 2004-12-27 2007-07-04 주식회사 이수유비케어 Method for providing medical service and system thereof
KR102014589B1 (en) * 2017-03-02 2019-08-26 (주)아이쿱 Apparatus and method for assisting medical consultation

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200066280A1 (en) * 2018-08-27 2020-02-27 Samsung Electronics Co., Ltd. Method and apparatus with speaker authentication and/or training

Also Published As

Publication number Publication date
KR20210113466A (en) 2021-09-16

Similar Documents

Publication Publication Date Title
US11581070B2 (en) Electronic medical record summary and presentation
US20210158933A1 (en) Federated, centralized, and collaborative medical data management and orchestration platform to facilitate healthcare image processing and analysis
US11176318B2 (en) Medical network
US11610653B2 (en) Systems and methods for improved optical character recognition of health records
US10296187B1 (en) Process action determination
US10733370B2 (en) Method, apparatus, and computer program product for generating a preview of an electronic document
US11514124B2 (en) Personalizing a search query using social media
Jain et al. Availability of telemedicine services across hospitals in the United States in 2018: a cross-sectional study
US11276293B1 (en) Contextual assessment of current conditions
CN111081329A (en) Automatic clinical data entry method and device, electronic equipment and storage medium
CN110799971A (en) Generation and presentation of media content
US8219515B2 (en) Visualization of data record physicality
JP2022093317A (en) Computer-implemented method, system and computer program product (recognition and restructuring of previously presented information)
Spinazze et al. The computer will see you now: overcoming barriers to adoption of computer-assisted history taking (CAHT) in primary care
KR102421429B1 (en) Method for Auto-creating Doctor’s Consult Slide Video
CN113764097A (en) Medical advice data processing method, terminal device, server and storage medium
US20200261018A1 (en) Secure Platform for Point-to-Point Brain Sensing
JP7016563B1 (en) Information processing equipment, methods and programs
KR102530883B1 (en) Method for Processing Registration of Professional Counseling Media
US20230042449A1 (en) System and method for decreasing turnaround for pre-authorizations using a smart request for information model
Chuah et al. Digital divide among individuals with acquired brain injury: a scoping review protocol
US20230207082A1 (en) Systems and methods for improved optical character recognition of health records
Pandeeswari et al. QR Based Paperless Out-Patient Health and Consultation Records Sharing System
Kohlmann et al. A collaboration tool based on SNOCAP-HET
Souza et al. A Taxonomy of Methods, Tools, and Approaches for Enabling Collaborative Annotation

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant