KR20220095581A - Method and apparatus for generating dental electronic chart using speech recognition - Google Patents

Method and apparatus for generating dental electronic chart using speech recognition Download PDF

Info

Publication number
KR20220095581A
KR20220095581A KR1020200187241A KR20200187241A KR20220095581A KR 20220095581 A KR20220095581 A KR 20220095581A KR 1020200187241 A KR1020200187241 A KR 1020200187241A KR 20200187241 A KR20200187241 A KR 20200187241A KR 20220095581 A KR20220095581 A KR 20220095581A
Authority
KR
South Korea
Prior art keywords
dental
electronic chart
chart
generating
electronic
Prior art date
Application number
KR1020200187241A
Other languages
Korean (ko)
Other versions
KR102623753B1 (en
Inventor
송인석
박정수
Original Assignee
고려대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 고려대학교 산학협력단 filed Critical 고려대학교 산학협력단
Priority to KR1020200187241A priority Critical patent/KR102623753B1/en
Publication of KR20220095581A publication Critical patent/KR20220095581A/en
Application granted granted Critical
Publication of KR102623753B1 publication Critical patent/KR102623753B1/en

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/103Formatting, i.e. changing of presentation of documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/174Form filling; Merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/279Recognition of textual entities
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/04Segmentation; Word boundary detection
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/20ICT specially adapted for the handling or processing of patient-related medical or healthcare data for electronic clinical trials or questionnaires
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems

Abstract

Disclosed are a method for generating a dental electronic chart and a device for generating a dental electronic chart using speech recognition. The device for generating a dental electronic chart includes: a voice data generation unit for generating voice data based on a voice uttered during dental treatment; a conversion unit converting the voice data into text data using a neural network-based voice recognition model; an extraction unit extracting dental terms corresponding to each item in subjective, objective, assessment, plan (SOAP) format optimized for dental medical records from the text data; and a dental electronic chart generating unit generating a dental electronic chart based on the extracted dental technical terms.

Description

음성 인식을 이용한 치과 전자 차트 생성 방법 및 장치{METHOD AND APPARATUS FOR GENERATING DENTAL ELECTRONIC CHART USING SPEECH RECOGNITION}Method and apparatus for generating an electronic dental chart using voice recognition

아래 실시예들은 음성 인식을 이용한 치과 전자 차트 생성 기술에 관한 것이다.The following embodiments relate to a technology for generating an electronic dental chart using voice recognition.

최근 의료진의 음성을 인식하고 텍스트로 변환하여 의료 기록 차트에 자동으로 작성해주는 기술이 등장하였다. 종래의 기술은 의과 용어를 사전에 학습하여, 의과 용어와 관련된 차트를 작성하는 기술을 제공할 수 있다. 그러나, 종래의 기술은 치과 및 의과에서 보편적으로 사용되는 SOAP(subjective, objective, assessment, plan) 형태의 차트를 기록하는 데에는 불편함이 있다는 한계가 있다. 따라서, 치과 및 의과에서 보편적으로 사용되는 SOAP 형태의 차트를 기록하는 것에 최적화된, 음성 인식 기반의 자동 차트 작성 기술을 발명하기 위한 연구가 필요한 실정이다. Recently, a technology that recognizes the voice of medical staff, converts it into text, and automatically writes it on a medical record chart has emerged. The prior art may provide a technique for preparing a chart related to the medical term by learning the medical term in advance. However, the prior art has a limitation in that it is inconvenient to record a chart in the form of a SOAP (subjective, objective, assessment, plan) commonly used in dentistry and medicine. Therefore, there is a need for research to invent a voice recognition-based automatic charting technology that is optimized for recording a chart in the SOAP format commonly used in dentistry and medicine.

일 실시예에 따른 치과 전자 차트 생성 장치는 치과 진료 시에 발화된 음성에 기초하여 음성 데이터를 생성하는 음성 데이터 생성부; 뉴럴 네트워크 기반의 음성 인식 모델을 이용하여, 상기 음성 데이터를 텍스트 데이터로 변환하는 변환부; 상기 텍스트 데이터로부터 치과 의무 기록에 최적화된 SOAP(subjective, objective, assessment, plan) 형식의 각 항목에 대응되는 치과 용어를 추출하는 추출부; 상기 추출된 치과 전문 용어에 기초하여 치과 전자 차트를 생성하는 치과 전자 차트 생성부를 포함할 수 있다.A dental electronic chart generating apparatus according to an exemplary embodiment includes: a voice data generator configured to generate voice data based on a voice uttered during dental treatment; a conversion unit that converts the speech data into text data using a neural network-based speech recognition model; an extraction unit for extracting dental terms corresponding to each item in a SOAP (subjective, objective, assessment, plan) format optimized for dental medical records from the text data; and a dental electronic chart generating unit that generates an electronic dental chart based on the extracted dental terminology.

상기 추출부는, 상기 텍스트 데이터로부터 치과 용어를 식별하고, 상기 식별된 치과 용어 및 상기 텍스트 데이터를 상기 SOAP 형식에 포함된 각 항목에 대응되도록 분류할 수 있다.The extractor may identify a dental term from the text data, and classify the identified dental term and the text data to correspond to each item included in the SOAP format.

상기 각 항목은, 주관적 소견(subjective; S), 객관적 소견(objective; O), 평가(assessment; A) 및 계획(plan; P) 중 적어도 하나를 포함할 수 있다.Each of the items may include at least one of a subjective opinion (S), an objective opinion (O), an assessment (A), and a plan (P).

상기 치과 용어는, 치아 식별 번호, 치과 관련 증상 및 치과 전문 용어 중 적어도 하나를 포함할 수 있다.The dental term may include at least one of a tooth identification number, a dental symptom, and a dental terminology.

상기 치과 전자 차트를 생성부는, 상기 치과 전자 차트에 포함된 서식에 상기 텍스트 데이터 및 상기 추출된 치과 용어 중 적어도 하나를 기입할 수 있다.The electronic dental chart generating unit may write at least one of the text data and the extracted dental term in a form included in the electronic dental chart.

상기 치과 전자 차트를 생성부는, 상기 치과 용어에 기초하여, 상기 치과 전자 차트에 포함된 체크 박스에 대한 체크 여부를 결정하여 표시할 수 있다.The electronic dental chart generating unit may determine whether to check a check box included in the electronic dental chart, based on the dental term, and display it.

상기 치과 전자 차트는, SOAP 형식에 기반한 서식을 포함하고, 상기 서식은, 표, 드롭 박스, 체크 박스, 선택 버튼 및 텍스트 기입 란 중 적어도 하나를 포함하는 것을 특징으로 할 수 있다.The electronic dental chart may include a format based on a SOAP format, and the format may include at least one of a table, a drop box, a check box, a selection button, and a text entry field.

일 실시예에 따른 치과 전자 차트 생성 장치는 상기 치과 전자 차트를 생성한 후에, 상기 생성된 치과 전자 차트에 기입된 내용 중 오인식된 부분에 대한 사용자 입력을 입력받고, 상기 사용자 입력에 기초하여 상기 치과 전자 차트의 기입된 내용을 교정하는 교정부를 더 포함할 수 있다.After generating the electronic dental chart, the dental electronic chart generating apparatus according to an embodiment receives a user input for an erroneously recognized part among the contents written in the generated electronic dental chart, and based on the user input, the dental electronic chart generates the dental electronic chart. It may further include a correction unit for correcting the written content of the electronic chart.

일 실시예에 따른 치과 전자 차트 생성 방법은 치과 진료 시에 발화된 음성에 기초하여 음성 데이터를 생성하는 단계; 뉴럴 네트워크 기반의 음성 인식 모델을 이용하여, 상기 음성 데이터를 텍스트 데이터로 변환하는 단계; 상기 텍스트 데이터로부터 치과 의무 기록에 최적화된 SOAP(subjective, objective, assessment, plan) 형식의 각 항목에 대응되는 치과 용어를 추출하는 단계; 및 상기 추출된 치과 전문 용어에 기초하여 치과 전자 차트를 생성하는 단계를 포함할 수 있다.According to an embodiment, a method for generating an electronic dental chart includes generating voice data based on a voice uttered during dental treatment; converting the speech data into text data using a neural network-based speech recognition model; extracting a dental term corresponding to each item in a SOAP (subjective, objective, assessment, plan) format optimized for dental medical records from the text data; and generating an electronic dental chart based on the extracted dental terminology.

상기 추출하는 단계는, 상기 텍스트 데이터로부터 치과 용어를 식별하는 단계; 및 상기 식별된 치과 용어 및 상기 텍스트 데이터를 상기 SOAP 형식에 포함된 각 항목에 대응되도록 분류하는 단계를 포함할 수 있다.The extracting may include: identifying a dental term from the text data; and classifying the identified dental term and the text data to correspond to each item included in the SOAP format.

상기 각 항목은, 주관적 소견(subjective; S), 객관적 소견(objective; O), 평가(assessment; A) 및 계획(plan; P) 중 적어도 하나를 포함할 수 있다.Each of the items may include at least one of a subjective opinion (S), an objective opinion (O), an assessment (A), and a plan (P).

상기 치과 용어는, 치아 식별 번호, 치과 관련 증상 및 치과 전문 용어 중 적어도 하나를 포함할 수 있다.The dental term may include at least one of a tooth identification number, a dental symptom, and a dental terminology.

상기 치과 전자 차트를 생성하는 단계는, 상기 치과 전자 차트에 포함된 서식에 상기 텍스트 데이터 및 상기 추출된 치과 용어 중 적어도 하나를 기입하는 단계를 포함할 수 있다.The generating of the electronic dental chart may include writing at least one of the text data and the extracted dental term in a form included in the electronic dental chart.

상기 치과 전자 차트를 생성하는 단계는, 상기 치과 용어에 기초하여, 상기 치과 전자 차트에 포함된 체크 박스에 대한 체크 여부를 결정하여 표시하는 단계를 포함할 수 있다.The generating of the electronic dental chart may include determining whether to check a check box included in the electronic dental chart and displaying the check box, based on the dental term.

상기 치과 전자 차트는, SOAP 형식에 기반한 서식을 포함하고, 상기 서식은, 표, 드롭 박스, 체크 박스, 선택 버튼 및 텍스트 기입 란 중 적어도 하나를 포함하는 것을 특징으로 할 수 있다.The electronic dental chart may include a format based on a SOAP format, and the format may include at least one of a table, a drop box, a check box, a selection button, and a text entry field.

일 실시예에 따른 치과 전자 차트 생성 방법은 상기 치과 전자 차트를 생성한 후에, 상기 생성된 치과 전자 차트에 기입된 내용 중 오인식된 부분에 대한 사용자 입력을 입력받는 단계; 상기 사용자 입력에 기초하여 상기 치과 전자 차트의 기입된 내용을 교정하는 단계를 더 포함할 수 있다.The method for generating an electronic dental chart according to an embodiment includes the steps of: after generating the electronic dental chart, receiving a user input for a misrecognized portion among contents written in the created electronic dental chart; The method may further include correcting the written contents of the electronic dental chart based on the user input.

일 실시예에 따르면 의과 및 치과에서 보편적으로 이용되는 SOAP 형태에 최적화된 전자 차트 생성 방법을 제공할 수 있다.According to an embodiment, it is possible to provide an electronic chart generating method optimized for SOAP format commonly used in medicine and dentistry.

일 실시예에 따르면 의료진이 치과 진료를 수행하는 중에 발화한 음성을 자동으로 차트에 기록해주는 방법을 제공할 수 있다.According to an embodiment, a method of automatically recording a voice uttered by a medical staff while performing dental treatment on a chart may be provided.

일 실시예에 따르면 의료진이 진료 또는 치료를 하고 있어 직접 차트에 의료 기록을 입력하기 어려운 상황에서도 차트에 환자의 상태를 기록할 수 있다.According to one embodiment, even in a situation in which it is difficult to directly input the medical record into the chart because the medical staff is treating or treating the patient, the patient's condition may be recorded on the chart.

일 실시예에 따르면 의료진이 손에 장갑을 끼고 있고, 마스크를 착용하고 있으며, 진료를 보며 차트를 작성하기에는 어려움이 있어, 진료 후에 차트를 작성하게 되면서 발생할 수 있는 진료 기록의 및 오기를 방지할 수 있다.According to one embodiment, it is difficult for medical staff to write a chart while seeing a medical treatment when they are wearing gloves and a mask, so it is possible to prevent the medical records and errors that may occur while writing the chart after treatment. have.

일 실시예에 따르면 의료진이 진료를 보면서도 진료 기록을 정확하게 작성할 수 있도록 하여, 진료 기록의 정확성 및 동시성을 확보하여 의무 기록의 객관성을 보장할 수 있다.According to an embodiment, it is possible to ensure the objectivity of the medical record by enabling the medical staff to accurately write the medical record while viewing the medical treatment, thereby ensuring the accuracy and simultaneity of the medical record.

일 실시예에 따르면 의료진이 보다 편리하고 빠르게 차트를 작성할 수 있도록 할 수 있다.According to an exemplary embodiment, it is possible to allow a medical staff to create a chart more conveniently and quickly.

도 1은 일 실시예에 따른 치과 전자 차트 생성 시스템의 개요를 도시하는 도면이다.
도 2는 일 실시예에 따른 치과 전자 차트 생성 방법을 설명하기 위한 흐름도이다.
도3a 내지 도 4b는 치아 식별 번호를 도시하는 도면들이다.
도 5 내지 도 10는 일 실시예에 따른 치과 전자 차트의 일례를 도시하는 도면들이다.
도 11은 일 실시예에 따른 치과 전자 차트 생성 장치의 구성을 도시하는 도면이다.
1 is a diagram illustrating an outline of a dental electronic chart generating system according to an embodiment.
2 is a flowchart illustrating a method of generating an electronic dental chart according to an embodiment.
3A to 4B are views showing tooth identification numbers.
5 to 10 are diagrams illustrating an example of an electronic dental chart according to an embodiment.
11 is a diagram illustrating a configuration of an electronic dental chart generating apparatus according to an embodiment.

실시예들에 대한 특정한 구조적 또는 기능적 설명들은 단지 예시를 위한 목적으로 개시된 것으로서, 다양한 형태로 변경되어 구현될 수 있다. 따라서, 실제 구현되는 형태는 개시된 특정 실시예로만 한정되는 것이 아니며, 본 명세서의 범위는 실시예들로 설명한 기술적 사상에 포함되는 변경, 균등물, 또는 대체물을 포함한다.Specific structural or functional descriptions of the embodiments are disclosed for purposes of illustration only, and may be changed and implemented in various forms. Accordingly, the actual implementation form is not limited to the specific embodiments disclosed, and the scope of the present specification includes changes, equivalents, or substitutes included in the technical spirit described in the embodiments.

제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 해석되어야 한다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.Although terms such as first or second may be used to describe various elements, these terms should be interpreted only for the purpose of distinguishing one element from another. For example, a first component may be termed a second component, and similarly, a second component may also be termed a first component.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.When a component is referred to as being “connected to” another component, it may be directly connected or connected to the other component, but it should be understood that another component may exist in between.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설명된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The singular expression includes the plural expression unless the context clearly dictates otherwise. In this specification, terms such as "comprise" or "have" are intended to designate that the described feature, number, step, operation, component, part, or combination thereof exists, and includes one or more other features or numbers, It should be understood that the possibility of the presence or addition of steps, operations, components, parts or combinations thereof is not precluded in advance.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 해당 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related art, and should not be interpreted in an ideal or excessively formal meaning unless explicitly defined in the present specification. does not

이하, 실시예들을 첨부된 도면들을 참조하여 상세하게 설명한다. 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조 부호를 부여하고, 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, embodiments will be described in detail with reference to the accompanying drawings. In the description with reference to the accompanying drawings, the same components are assigned the same reference numerals regardless of the reference numerals, and overlapping descriptions thereof will be omitted.

도 1은 일 실시예에 따른 치과 전자 차트 생성 시스템의 개요를 도시하는 도면이다.1 is a diagram illustrating an outline of a dental electronic chart generating system according to an embodiment.

본 명세서에서 설명하는 치과 전자 차트 생성 시스템은 의료진이 치과 진료를 보는 동안 발화한 음성을 인식하고, 인식된 음성에 포함된 내용을 치과 전자 차트에 자동으로 입력하는 방법을 제공할 수 있다. 치과 전자 차트 생성 시스템은 인식한 음성에 기초하여 치과 및 의과에서 이용되는 SOAP(subjective, objective, assessment, plan) 형식의 차트에 최적화된 치과 전자 차트 생성 방법을 제공할 수 있다. 치과 전자 차트 생성 시스템은 인식한 음성으로부터 치과 용어를 식별하고, 식별된 치과 용어를 SOAP 형식으로 구조화하여 치과 전자 차트에 입력시킬 수 있다. 치과 전자 차트 생성 시스템은 의료진의 음성을 일반 차트 또는 치과에 특화된 치과 차트에 포함된 서식에 맞는 형태로 치과 전자 차트에 기록할 수 있다. 치과 전자 차트 생성 시스템은 진료 기록자의 음성을 인식하고 자동으로 치과 전자 차트를 생성하여 진료 기록자의 편의성을 증대시킬 수 있고, 진료 기록의 효율성을 증대시킬 수 있다. 치과 전자 차트 생성 장치는 SOAP 형태의 일반적인 차트 서식 및 관습적/국제표준 치식 표기 방식을 인식할 수 있는 음성인식 기술을 통해, 보다 범용적이고 표준화되고 편리한 치과 전자 차트 생성 방법을 제공할 수 있다. 치과 전자 차트 생성 시스템은 치과 전자 차트에 의료 기록을 입력하는 것에 최적화된 치과 음성 인식 기술과 사용자 인터페이스를 제공할 수 있다.The dental electronic chart generating system described herein may provide a method of recognizing a voice uttered while a medical staff views dental treatment, and automatically inputting contents included in the recognized voice into the dental electronic chart. The dental electronic chart generating system may provide a dental electronic chart generating method optimized for a SOAP (subjective, objective, assessment, plan) type chart used in dentistry and medicine based on the recognized voice. The dental electronic chart generating system may identify a dental term from the recognized voice, structure the identified dental term in a SOAP format, and input it into the dental electronic chart. The dental electronic chart generating system may record the voice of the medical staff on the dental electronic chart in a form that is suitable for a format included in a general chart or a dental chart specialized for dentistry. The dental electronic chart generating system may increase the convenience of the medical recorder by recognizing the voice of the medical recorder and automatically generating the dental electronic chart, and may increase the efficiency of the medical record. The dental electronic chart generating apparatus can provide a more general, standardized and convenient dental electronic chart creation method through a voice recognition technology capable of recognizing a SOAP type general chart format and customary/international standard dental notation method. The dental electronic chart generating system may provide a dental voice recognition technology and a user interface optimized for inputting medical records into the dental electronic chart.

도 1을 참조하면 치과 전자 차트 생성 장치(110)는 진료 중에 의료진(120)이 발화한 음성을 인식하여 음성 데이터를 생성할 수 있다. 치과 전자 차트 생성 장치(110)는 음성 데이터에 기초하여 음성 데이터에 대응하는 텍스트 데이터를 생성할 수 있고, 텍스트 데이터로부터 치과 진료에서 유의미한 치과 용어를 추출할 수 있다. 치과 전자 차트 생성 장치(110) 추출한 치과 용어 및 텍스트 데이터를 치과 전자 차트에 포함된 서식에 적합 맞게 기입 또는 표시하여 치과 전자 차트를 생성할 수 있다.Referring to FIG. 1 , the electronic dental chart generating apparatus 110 may generate voice data by recognizing the voice uttered by the medical staff 120 during treatment. The electronic dental chart generating apparatus 110 may generate text data corresponding to the voice data based on the voice data, and extract meaningful dental terms in dental care from the text data. The electronic dental chart generating apparatus 110 may generate an electronic dental chart by filling in or displaying the extracted dental terms and text data to fit a format included in the electronic dental chart.

도 2는 일 실시예에 따른 치과 전자 차트 생성 방법을 설명하기 위한 흐름도이다.2 is a flowchart illustrating a method of generating an electronic dental chart according to an embodiment.

도 2를 참조하면 단계(210)에서 치과 전자 차트 생성 장치는 치과 진료 시에 발화된 음성에 기초하여 음성 데이터를 생성할 수 있다. 치과 전자 차트 생성 장치는 내장 또는 외장된 마이크를 이용하여 의료진이 진료를 보거나 치료를 하는 중에 발화한 음성을 수집하고 수집한 음성에 기초하여 음성 데이터를 생성할 수 있다.Referring to FIG. 2 , in step 210 , the electronic dental chart generating apparatus may generate voice data based on a voice uttered during dental treatment. The dental electronic chart generating apparatus may use a built-in or external microphone to collect voices uttered while medical staff sees or treats, and may generate voice data based on the collected voices.

단계(220)에서 치과 전자 차트 생성 장치는 뉴럴 네트워크 기반의 음성 인식 모델을 이용하여, 음성 데이터를 텍스트 데이터로 변환할 수 있다. 음성 인식 모델은 인공지능을 기반으로 하고, 기계 학습을 통해 계속해서 성능이 향상될 수 있다. 음성 인식 모델은 자동 음성 인식 기술을 이용할 수 있다. 음성 인식 모델은 국내 의료 데이터를 학습할 수 있고, 의학전사적 특징이 반영되어 있을 수 있다. 또한, 음성 인식 모델은 다양한 진료과 및 검사기법 별로 사용되는 국영문이 혼재된 의학용어에 대한 전처리를 수행할 수 있다. 음성 인식 모델은 새로운 의료 전문 용어에 대한 업데이트 시스템을 구축하고 있을 수 있다. 음성 인식 모델은 특정 병원의 데이터에 기초하여 업데이트될 수 있다. 음성 인식 모델은 영상 전송 시스템(Picture Archiving and Communications System; PACS), 전자의무기록(Electronic Medical Record;EMR) 등과 같은 HIS(hospital information service)에 연동되어 음성 인식에 필요한 데이터에 접근할 수 있다.In operation 220 , the dental electronic chart generating apparatus may convert voice data into text data using a neural network-based voice recognition model. Speech recognition models are based on artificial intelligence and can be continuously improved through machine learning. The speech recognition model may use automatic speech recognition technology. The voice recognition model can learn domestic medical data, and characteristics of the medical company may be reflected. In addition, the speech recognition model can perform pre-processing of medical terms in which Korean and English texts used for various departments and examination techniques are mixed. The speech recognition model may be building an update system for new medical jargon. The speech recognition model may be updated based on data of a specific hospital. The voice recognition model is linked to a hospital information service (HIS) such as a picture archiving and communications system (PACS) and an electronic medical record (EMR) to access data required for voice recognition.

단계(230)에서 치과 전자 차트 생성 장치는 텍스트 데이터로부터 치과 의무 기록에 최적화된 SOAP 형식의 각 항목에 대응되는 치과 용어를 추출할 수 있다. 일 실시예에서 치과 전자 차트 생성 장치는 텍스트 데이터로부터 치과 용어를 식별하고, 식별된 치과 용어 및 텍스트 데이터를 SOAP 형식에 포함된 각 항목에 대응되도록 분류할 수 있다. 여기서, 각 항목은 주관적 소견(subjective; S), 객관적 소견(objective; O), 평가(assessment; A) 및 계획(plan; P) 중 적어도 하나를 포함할 수 있다. 주관적 소견은 주호소(chief complaint), 현병력(history of present illness), 과거 병력(past medical history) 및 과거 수술력(past surgical history)을 포함할 수 있다. 객관적 소견은 바이탈(vitals), 건강 검진(physical exam), 정골 구조 검사(osteopathic structural exam) 및 실험 수치(tests and lab values)를 포함할 수 있다.In step 230, the dental electronic chart generating apparatus may extract a dental term corresponding to each item in a SOAP format optimized for dental medical records from the text data. In an embodiment, the electronic dental chart generating apparatus may identify a dental term from text data, and classify the identified dental term and text data to correspond to each item included in the SOAP format. Here, each item may include at least one of a subjective opinion (S), an objective opinion (O), an assessment (A), and a plan (P). Subjective findings may include chief complaint, history of present illness, past medical history, and past surgical history. Objective findings may include vitals, physical exams, osteopathic structural exams, and tests and lab values.

평가는 감별진단(Differential diagnosis)을 포함할 수 있고, 계획은 환자의 계획을 포함할 수 있다. SOAP 형식은 보편적인 의무 기록의 차팅 방식에 최적화되어 있을 수 있다.The evaluation may include differential diagnosis, and the plan may include the patient's plan. The SOAP format may be optimized for a common way of charting medical records.

치과 용어는 치아 식별 번호, 치과 관련 증상 및 치과 전문 용어 중 적어도 하나를 포함할 수 있다. 여기서 치아 식별 번호는 치식이라고도 지칭될 수 있다.The dental term may include at least one of a tooth identification number, a dental symptom, and a dental terminology. Here, the tooth identification number may also be referred to as a tooth.

치아 식별 변호는 예를 들어 도 3a 내지 도 4b와 같을 수 있다. 도 3a 및 도 3b는 치아의 상악/하악과 좌/우를 나타내기 위해 치아를 사분면으로 표시할 수 있고, 각 사분면은 연속된 숫자 또는 문자로 표현될 수 있다. 도 3a는 영구치 표기법으로, 시계 방향 순으로 왼쪽 위, 왼쪽 아래, 오른쪽 아래 및 오른쪽위를 나타낼 수 있다. 도 3b는 유치 표기법일 수 있다. 도 4a 및 도 4b는 FDI(federation dentaire international) 시스템으로, 국제 치과 연맹 표기법일 수 있다. 도 4a 및 도 4b는 영구치와 유치 모두 두 자릿수의 숫자를 부여할 수 있다. 10의 자리 숫자는 각 사분면을 나타낼 수 있고, 1의 자리 숫자는 치아를 지칭할 수 있다. 도 4a는 영구치 표기법으로, 10의 자리 숫자는 1 내지 4로 상하좌우를 나타낼 수 있고, 1의 자리 숫자는 1 내지 8로 전치부 내지 구치부를 나타낼 수 있다. 도 4b는 유치 표기법으로, 10의 자리 숫자는 5 내지 8로 상하좌우를 나타내고, 1의 자리 숫자는 1 내지 5로 전치부 내지 구치부를 나타낼 수 있다.The tooth identification number may be, for example, as shown in FIGS. 3A to 4B . 3A and 3B show teeth as quadrants to represent the maxilla/mandibular and left/right sides of the teeth, and each quadrant may be represented by consecutive numbers or letters. 3A is a permanent tooth notation, and may indicate upper left, lower left, lower right, and upper right in clockwise order. 3b may be a childish notation. 4A and 4B are a federation dentaire international (FDI) system, which may be an international dental federation notation. 4A and 4B can be assigned double-digit numbers to both permanent teeth and primary teeth. A digit of ten may represent each quadrant, and a digit of one may refer to a tooth. Figure 4a is a permanent tooth notation, the digit of 10 may represent up, down, left and right as 1 to 4, and the digit of 1 may represent the anterior or posterior part as 1 to 8. 4B is a deciduous notation, in which the digit of 10 may represent up, down, left and right as 5 to 8, and the digit of 1 may represent the anterior or posterior part as 1 to 5.

다시 도 2로 돌아오면, 단계(240)에서 치과 전자 차트 생성 장치는 추출된 치과 전문 용어에 기초하여 치과 전자 차트를 생성할 수 있다. 치과 전자 차트 생성 장치는 치과 전자 차트에 포함된 항목들 중에서 추출된 각각의 치과 전문 용어 및 주요 표현에 대응되는 항목을 식별하고, 식별된 항목의 서식에 기초하여 치과 전문 용어 및 주요 표현을 반영할 수 있다.Referring back to FIG. 2 , in step 240 , the electronic dental chart generating apparatus may generate an electronic dental chart based on the extracted dental terminology. The dental electronic chart generating device identifies an item corresponding to each extracted dental terminology and key expression from among items included in the dental electronic chart, and reflects the dental terminology and key expression based on the format of the identified item. can

치과 전자 차트 생성 장치는 치과 전자 차트에 포함된 서식에 텍스트 데이터 및 추출된 치과 용어 중 적어도 하나를 기입할 수 있다. 또한, 치과 전자 차트 생성 장치는 치과 용어에 기초하여, 치과 전자 차트에 포함된 체크 박스에 대한 체크 여부를 결정하여 표시할 수 있다. 여기서, 치과 전자 차트는, SOAP 형식에 기반한 서식을 포함할 수 있다. 서식은, 표, 드롭 박스, 체크 박스, 선택 버튼 및 텍스트 기입 란 중 적어도 하나를 포함할 수 있다.The apparatus for generating an electronic dental chart may write at least one of text data and extracted dental terms in a form included in the electronic dental chart. Also, the electronic dental chart generating apparatus may determine and display whether a check box included in the electronic dental chart is checked based on the dental term. Here, the electronic dental chart may include a form based on the SOAP format. The format may include at least one of a table, a drop box, a check box, a selection button, and a text entry field.

치과 전자 차트 생성 장치는 치과 전자 차트를 생성한 후에, 생성된 치과 전자 차트에 기입된 내용 중 오인식된 부분에 대한 사용자 입력을 입력받을 수 있다. 치과 전자 차트 생성 장치는 사용자 입력에 기초하여 치과 전자 차트의 기입된 내용을 교정할 수 있다.After generating the electronic dental chart, the apparatus for generating an electronic dental chart may receive a user input for an erroneously recognized part among contents written in the created electronic dental chart. The dental electronic chart generating apparatus may correct the written content of the dental electronic chart based on a user input.

도 5 내지 도 9는 일 실시예에 따른 치과 전자 차트의 일례를 도시하는 도면들이다.5 to 9 are diagrams illustrating an example of an electronic dental chart according to an embodiment.

도 5는 일 실시예에 따른 보존과의 차트 서식을 포함하는 전자 차트의 일례를 도시하는 도면일 수 있다. 도 5를 참조하면, 치과 전자 차트 생성 장치는 음성 데이터가 변환된 텍스트 데이터로부터 추출된 치과 용어를 전자 차트 내 표의 빈 칸에 입력할 수 있다. 또한, 치과 전자 차트 생성 장치는 추출된 치과 용어에 기초하여 전자 차트 내 체크 박스에 대한 체크 여부를 결정할 수 있고, 체크를 수행할 수 있다.5 may be a diagram illustrating an example of an electronic chart including a chart format of a department of preservation according to an embodiment. Referring to FIG. 5 , the apparatus for generating an electronic dental chart may input a dental term extracted from text data converted from voice data into a blank space of a table in the electronic chart. Also, the electronic dental chart generating apparatus may determine whether a check box in the electronic chart is checked based on the extracted dental term, and may perform the check.

도 6은 일 실시예에 따른 치주과의 차트 서식을 포함하는 전자 차트의 일례를 도시하는 도면일 수 있다. 도 6은 일 실시예에 따른 구조화된 치주질환 차트일 수도 있다. 도 6을 참조하면, 치과 전자 차트 생성 장치는 음성 데이터가 변환된 텍스트 데이터로부터 추출된 치과 용어 또는 수치를 전자 차트 내 표의 빈 칸에 입력할 수 있고 수치의 등락을 표시할 있다. 또한, 치과 전자 차트 생성 장치는 추출된 치과 용어에 기초하여 전자 차트 내 체크 박스에 대한 체크 여부를 결정할 수 있고, 체크를 수행할 수 있다. 또한 치과 전자 차트 생성 장치는 텍스트 데이터에 기초하여 서식에 포함된 드롭 박스의 값을 결정할 수 있다.6 may be a diagram illustrating an example of an electronic chart including a chart format of periodontology according to an embodiment. 6 may be a structured periodontal disease chart according to an embodiment. Referring to FIG. 6 , the dental electronic chart generating apparatus may input dental terms or numerical values extracted from text data into which voice data is converted into blank spaces of tables in the electronic chart, and display the fluctuations in numerical values. Also, the electronic dental chart generating apparatus may determine whether to check a check box in the electronic chart based on the extracted dental term, and may perform the check. Also, the electronic dental chart generating apparatus may determine the value of the drop box included in the form based on the text data.

도 7은 일 실시예에 따른 일반 치과 전자 차트의 일례를 도시하는 도면일 수 있다. 도 7을 참조하면, 치과 전자 차트 생성 장치는 음성 데이터가 변환된 텍스트 데이터로부터 추출된 치과 용어 또는 수치에 기초하여 해당되는 치아 이미지에 각 치아에 대한 특이 사항을 나타낼 수 있다. 또한, 치과 전자 차트 생성 장치는 음성 데이터가 변환된 텍스트 데이터로부터 추출된 치과 용어를 전자 차트 내 빈 칸에 입력할 수 있다.7 may be a diagram illustrating an example of a general dental electronic chart according to an embodiment. Referring to FIG. 7 , the electronic dental chart generating apparatus may indicate specific details for each tooth in a corresponding tooth image based on a dental term or numerical value extracted from text data into which voice data is converted. Also, the electronic dental chart generating apparatus may input a dental term extracted from text data converted from voice data into a blank space in the electronic chart.

도 8은 일 실시예에 따른 신경과의 차트 서식을 포함하는 전자 차트의 일례를 도시하는 도면일 수 있다. 치과 전자 차트 생성 장치는 음성 데이터가 변환된 텍스트 데이터에 기초하여 주호소에 대한 입력란에 환자의 주호소에 대한 텍스트를 입력할 수 있다. 또한, 치과 전자 차트 생성 장치는 텍스트 데이터에 기초하여 전자 차트에 환자의 현병력, 통증이 발생한 위치, 및 통증의 양상에 대한 정보를 입력할 수 있다.8 may be a diagram illustrating an example of an electronic chart including a chart format of a neurologist according to an embodiment. The electronic dental chart generating apparatus may input a text for the patient's address in the input box for the address based on the text data converted from voice data. In addition, the electronic dental chart generating apparatus may input information about the patient's current medical history, a location where pain occurs, and an aspect of pain in the electronic chart based on text data.

실시예에 따라 치과 전자 차트 생성 장치는, 치과 전자 차트 생성 장치가 생성한 치과 전자 차트를 사용자에게 디스플레이하고, 치과 전자 차트를 교정하기 위한 사용자 입력을 수신할 수 있다. 치과 전자 차트 생성 장치는 사용자 입력에 기초하여 의료진이 발화한 실제 음성과 차이가 있는 부분에 대해 교정을 수행할 수 있다.According to an embodiment, the electronic dental chart generating apparatus may display the electronic dental chart generated by the electronic dental chart generating apparatus to a user and receive a user input for correcting the electronic dental chart. The electronic dental chart generating apparatus may correct a portion different from the actual voice uttered by the medical staff based on the user input.

도 9는 일 실시예에 따른 공통 초진 차트의 서식을 포함하는 전자 차트의 일례를 도시하는 도면일 수 있다. 도 9를 참조하면, 치과 전자 차트 생성 장치는 SOAP 형식에 기초하여 의료진이 발화한 음성에 포함된 치식, 치과 관련된 증상, 치과 전문 용어 중 적어도 하나를 인식하고, 인식한 내용을 텍스트 또는 구조화된 형식으로 공통 초진 차트의 서식을 포함하는 전자 차트에 입력할 수 있다. 참조번호(910)은 치과 전자 차트 생성 장치가 인식한 치과 진료와 관련된 내용을 구조화된 서식에 자동으로 작성한 것일 수 있다. 참조번호(920)은 치과 전자 차트 생성 장치가 인식한 음성의 내용을 전사한 것일 수 있다. 치과 전자 차트 생성 장치는 의료진의 음성을 그대로 텍스트화 하여 전자 차트에 입력할 수 있고, 의료진의 음성을 전자 차트에 포함된 서식에 맞게 변환하여 입력할 수도 있다.9 may be a diagram illustrating an example of an electronic chart including a format of a common initial chart according to an embodiment. Referring to FIG. 9 , the dental electronic chart generating device recognizes at least one of dental plaque, dental-related symptoms, and dental terminology included in a voice uttered by a medical staff based on a SOAP format, and displays the recognized content in a text or structured format. It can be entered into an electronic chart containing the format of the common initial chart. Reference number 910 may automatically write the content related to dental treatment recognized by the electronic dental chart generating device in a structured form. Reference number 920 may be a transcription of the content of the voice recognized by the electronic dental chart generating apparatus. The dental electronic chart generating apparatus may convert the medical staff's voice into text as it is and input it into the electronic chart, or may convert the medical staff's voice to fit a format included in the electronic chart and input it.

도 11은 일 실시예에 따른 턱관절 차트의 서식을 포함하는 전자 차트의 일례를 도시하는 도면일 수 있다. 도 11을 참조하면, 치과 전자 차트 생성 장치는 구조화된 턱관절 차트의 서식에 의료진의 음성에 포함된 수치를 텍스트로 입력할 수 있다. 또한, 치과 전자 차트 생성 장치는 구조화된 턱관절 차트의 서식에 의료진의 음성에 대응되는 보기 또는 체크 박스를 체크할 수 있다.11 may be a diagram illustrating an example of an electronic chart including a format of a temporomandibular joint chart according to an embodiment. Referring to FIG. 11 , the electronic dental chart generating apparatus may input the numerical value included in the voice of the medical staff in the form of the structured temporomandibular joint chart as text. Also, the electronic dental chart generating apparatus may check a view or check box corresponding to the voice of the medical staff in the format of the structured temporomandibular joint chart.

도 11은 일 실시예에 따른 치과 전자 차트 생성 장치의 구성을 도시하는 도면이다.11 is a diagram illustrating a configuration of an electronic dental chart generating apparatus according to an embodiment.

도 11을 참조하면, 치과 전자 차트 생성 장치(1100)은 음성 데이터 생성부(1110), 변환부(1120), 추출부(1130) 및 치과 전자 차트 생성부(1140)를 포함할 수 있다. 여기서, 치과 저자 차트 생성 장치(1100)는 본 명세서에서 설명하는 치과 전자 차트 생성 장치에 대응될 수 있다.Referring to FIG. 11 , the electronic dental chart generating apparatus 1100 may include a voice data generating unit 1110 , a converting unit 1120 , an extracting unit 1130 , and an electronic dental chart generating unit 1140 . Here, the dental author chart generating apparatus 1100 may correspond to the dental electronic chart generating apparatus described herein.

음성 데이터 생성부(1110)는 치과 진료 시에 발화된 음성에 기초하여 음성 데이터를 생성할 수 있다. 변환부(1120)는 뉴럴 네트워크 기반의 음성 인식 모델을 이용하여, 음성 데이터를 텍스트 데이터로 변환할 수 있다.The voice data generator 1110 may generate voice data based on a voice uttered during dental treatment. The converter 1120 may convert voice data into text data using a neural network-based voice recognition model.

추출부(1130)는 텍스트 데이터로부터 치과 의무 기록에 최적화된 SOAP 형식의 각 항목에 대응되는 치과 용어를 추출할 수 있다. 추출부(1130)는 텍스트 데이터로부터 치과 용어를 식별하고, 식별된 치과 용어 및 텍스트 데이터를 SOAP 형식에 포함된 각 항목에 대응되도록 분류할 수 있다.The extraction unit 1130 may extract a dental term corresponding to each item in a SOAP format optimized for dental medical records from the text data. The extractor 1130 may identify a dental term from the text data, and classify the identified dental term and the text data to correspond to each item included in the SOAP format.

치과 전자 차트 생성부(1140)는 추출된 치과 전문 용어에 기초하여 치과 전자 차트를 생성할 수 있다. 실시예에 따라 치과 전자 차트를 생성부(1140)는 치과 전자 차트에 포함된 서식에 텍스트 데이터 및 추출된 치과 용어 중 적어도 하나를 기입할 수 있다. 또한, 치과 전자 차트를 생성부(1140)는 치과 용어에 기초하여, 치과 전자 차트에 포함된 체크 박스에 대한 체크 여부를 결정하여 표시할 수도 있다.The electronic dental chart generator 1140 may generate an electronic dental chart based on the extracted dental terminology. According to an embodiment, the electronic dental chart generating unit 1140 may write at least one of text data and extracted dental terms in a form included in the electronic dental chart. Also, the electronic dental chart generation unit 1140 may determine whether to check a check box included in the electronic dental chart and display it based on dental terms.

다른 실시예에서 치과 전자 차트 생성 장치(1100)는 교정부(미도시)를 더 포함할 수 있다. 교정부(미도시)는 치과 전자 차트를 생성한 후에, 생성된 치과 전자 차트에 기입된 내용 중 오인식된 부분에 대한 사용자 입력을 입력받고, 사용자 입력에 기초하여 치과 전자 차트의 기입된 내용을 교정할 수 있다.In another embodiment, the electronic dental chart generating apparatus 1100 may further include an orthodontic unit (not shown). After generating the dental electronic chart, the orthodontist (not shown) receives a user input for an erroneously recognized part among the contents written in the generated dental electronic chart, and corrects the written content of the dental electronic chart based on the user input can do.

이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 컨트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The embodiments described above may be implemented by a hardware component, a software component, and/or a combination of a hardware component and a software component. For example, the apparatus, methods and components described in the embodiments may include, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable gate (FPGA) array), a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions, may be implemented using a general purpose computer or special purpose computer. The processing device may execute an operating system (OS) and a software application running on the operating system. A processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For convenience of understanding, although one processing device is sometimes described as being used, one of ordinary skill in the art will recognize that the processing device includes a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that can include For example, the processing device may include a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as parallel processors.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.Software may comprise a computer program, code, instructions, or a combination of one or more thereof, which configures a processing device to operate as desired or is independently or collectively processed You can command the device. The software and/or data may be any kind of machine, component, physical device, virtual equipment, computer storage medium or apparatus, to be interpreted by or to provide instructions or data to the processing device. , or may be permanently or temporarily embody in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored in a computer-readable recording medium.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있으며 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination, and the program instructions recorded on the medium are specially designed and configured for the embodiment, or are known and available to those skilled in the art of computer software. may be Examples of the computer-readable recording medium include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic such as floppy disks. - includes magneto-optical media, and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like.

위에서 설명한 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 또는 복수의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The hardware devices described above may be configured to operate as one or a plurality of software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 이를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described with reference to the limited drawings, those of ordinary skill in the art may apply various technical modifications and variations based thereon. For example, the described techniques are performed in an order different from the described method, and/or the described components of the system, structure, apparatus, circuit, etc. are combined or combined in a different form than the described method, or other components Or substituted or substituted by equivalents may achieve an appropriate result.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

110, 1100: 치과 전자 차트 생성 장치
1110: 음성 데이터 생성부 1120: 변환부
1130: 추출부 1140: 치과 전자 차트 생성부
110, 1100: dental electronic chart generating device
1110: voice data generating unit 1120: converting unit
1130: extraction unit 1140: dental electronic chart generation unit

Claims (17)

치과 전자 차트 생성 장치에 있어서,
치과 진료 시에 발화된 음성에 기초하여 음성 데이터를 생성하는 음성 데이터 생성부;
뉴럴 네트워크 기반의 음성 인식 모델을 이용하여, 상기 음성 데이터를 텍스트 데이터로 변환하는 변환부;
상기 텍스트 데이터로부터 치과 의무 기록에 최적화된 SOAP(subjective, objective, assessment, plan) 형식의 각 항목에 대응되는 치과 용어를 추출하는 추출부; 및
상기 추출된 치과 전문 용어에 기초하여 치과 전자 차트를 생성하는 치과 전자 차트 생성부를 포함하는,
치과 전자 차트 생성 장치.
In the dental electronic chart generating device,
a voice data generator for generating voice data based on the voice uttered during dental treatment;
a conversion unit that converts the speech data into text data using a neural network-based speech recognition model;
an extraction unit for extracting dental terms corresponding to each item in a SOAP (subjective, objective, assessment, plan) format optimized for dental medical records from the text data; and
Comprising a dental electronic chart generator for generating a dental electronic chart based on the extracted dental terminology,
Dental electronic chart generator.
제1항에 있어서,
상기 추출부는,
상기 텍스트 데이터로부터 치과 용어를 식별하고,
상기 식별된 치과 용어 및 상기 텍스트 데이터를 상기 SOAP 형식에 포함된 각 항목에 대응되도록 분류하는,
치과 전자 차트 생성 장치.
According to claim 1,
The extraction unit,
identify a dental term from the text data;
Classifying the identified dental term and the text data to correspond to each item included in the SOAP format,
Dental electronic chart generator.
제1항에 있어서,
상기 각 항목은,
주관적 소견(subjective; S), 객관적 소견(objective; O), 평가(assessment; A) 및 계획(plan; P) 중 적어도 하나를 포함하는,
치과 전자 차트 생성 장치.
According to claim 1,
Each of the above items is
comprising at least one of a subjective opinion (S), an objective opinion (O), an assessment (A) and a plan (P),
Dental electronic chart generator.
제1항에 있어서,
상기 치과 용어는,
치아 식별 번호, 치과 관련 증상 및 치과 전문 용어 중 적어도 하나를 포함하는,
치과 전자 차트 생성 장치.
According to claim 1,
The dental term is
comprising at least one of a tooth identification number, a dental symptom, and a dental terminology;
Dental electronic chart generator.
제1항에 있어서,
상기 치과 전자 차트를 생성부는,
상기 치과 전자 차트에 포함된 서식에 상기 텍스트 데이터 및 상기 추출된 치과 용어 중 적어도 하나를 기입하는,
치과 전자 차트 생성 장치.
According to claim 1,
The dental electronic chart generating unit,
writing at least one of the text data and the extracted dental term in a form included in the dental electronic chart;
Dental electronic chart generator.
제5항에 있어서,
상기 치과 전자 차트를 생성부는,
상기 치과 용어에 기초하여, 상기 치과 전자 차트에 포함된 체크 박스에 대한 체크 여부를 결정하여 표시하는,
치과 전자 차트 생성 장치.
6. The method of claim 5,
The dental electronic chart generating unit,
Based on the dental term, determining and displaying whether a check box included in the dental electronic chart is checked or not,
Dental electronic chart generator.
제6항에 있어서,
상기 치과 전자 차트는, SOAP 형식에 기반한 서식을 포함하고,
상기 서식은, 표, 드롭 박스, 체크 박스, 선택 버튼 및 텍스트 기입 란 중 적어도 하나를 포함하는 것을 특징으로 하는,
치과 전자 차트 생성 장치.
7. The method of claim 6,
The dental electronic chart includes a format based on SOAP format,
The form, characterized in that it includes at least one of a table, a drop box, a check box, a selection button, and a text entry field,
Dental electronic chart generator.
제1항에 있어서,
상기 치과 전자 차트를 생성한 후에, 상기 생성된 치과 전자 차트에 기입된 내용 중 오인식된 부분에 대한 사용자 입력을 입력받고, 상기 사용자 입력에 기초하여 상기 치과 전자 차트의 기입된 내용을 교정하는 교정부를 더 포함하는,
치과 전자 차트 생성 장치.
According to claim 1,
After generating the electronic dental chart, a correction unit that receives a user input for an erroneously recognized part of the content written in the generated electronic dental chart, and corrects the written content of the dental electronic chart based on the user input more containing,
Dental electronic chart generator.
제1항 내지 제8항 중 어느 하나의 항의 방법을 실행시키기 위한 인스트럭션들을 저장하는 컴퓨터 판독 가능한 저장 매체.A computer-readable storage medium storing instructions for executing the method of any one of claims 1 to 8. 치과 전자 차트 생성 방법에 있어서,
치과 진료 시에 발화된 음성에 기초하여 음성 데이터를 생성하는 단계;
뉴럴 네트워크 기반의 음성 인식 모델을 이용하여, 상기 음성 데이터를 텍스트 데이터로 변환하는 단계;
상기 텍스트 데이터로부터 치과 의무 기록에 최적화된 SOAP(subjective, objective, assessment, plan) 형식의 각 항목에 대응되는 치과 용어를 추출하는 단계; 및
상기 추출된 치과 전문 용어에 기초하여 치과 전자 차트를 생성하는 단계를 포함하는,
치과 전자 차트 생성 방법.
A method for generating an electronic dental chart, comprising:
generating voice data based on the voice uttered during dental treatment;
converting the speech data into text data using a neural network-based speech recognition model;
extracting a dental term corresponding to each item in a SOAP (subjective, objective, assessment, plan) format optimized for dental medical records from the text data; and
Comprising the step of generating a dental electronic chart based on the extracted dental terminology,
How to create a dental electronic chart.
제10항에 있어서,
상기 추출하는 단계는,
상기 텍스트 데이터로부터 치과 용어를 식별하는 단계; 및
상기 식별된 치과 용어 및 상기 텍스트 데이터를 상기 SOAP 형식에 포함된 각 항목에 대응되도록 분류하는 단계
를 포함하는,
치과 전자 차트 생성 방법.
11. The method of claim 10,
The extracting step is
identifying a dental term from the text data; and
classifying the identified dental term and the text data to correspond to each item included in the SOAP format;
containing,
How to create a dental electronic chart.
제10항에 있어서,
상기 각 항목은,
주관적 소견(subjective; S), 객관적 소견(objective; O), 평가(assessment; A) 및 계획(plan; P) 중 적어도 하나를 포함하는,
치과 전자 차트 생성 방법.
11. The method of claim 10,
Each of the above items is
comprising at least one of a subjective opinion (S), an objective opinion (O), an assessment (A) and a plan (P),
How to create a dental electronic chart.
제10항에 있어서,
상기 치과 용어는,
치아 식별 번호, 치과 관련 증상 및 치과 전문 용어 중 적어도 하나를 포함하는,
치과 전자 차트 생성 방법.
11. The method of claim 10,
The dental term is
comprising at least one of a tooth identification number, a dental symptom, and a dental terminology;
How to create a dental electronic chart.
제10항에 있어서,
상기 치과 전자 차트를 생성하는 단계는,
상기 치과 전자 차트에 포함된 서식에 상기 텍스트 데이터 및 상기 추출된 치과 용어 중 적어도 하나를 기입하는 단계를 포함하는,
치과 전자 차트 생성 방법.
11. The method of claim 10,
The step of generating the dental electronic chart comprises:
Comprising the step of writing at least one of the text data and the extracted dental term in a form included in the dental electronic chart,
How to create a dental electronic chart.
제14항에 있어서,
상기 치과 전자 차트를 생성하는 단계는,
상기 치과 용어에 기초하여, 상기 치과 전자 차트에 포함된 체크 박스에 대한 체크 여부를 결정하여 표시하는 단계를 포함하는,
치과 전자 차트 생성 방법.
15. The method of claim 14,
The step of generating the dental electronic chart comprises:
Based on the dental term, comprising the step of determining whether to check a check box included in the dental electronic chart and displaying,
How to create a dental electronic chart.
제15항에 있어서,
상기 치과 전자 차트는, SOAP 형식에 기반한 서식을 포함하고,
상기 서식은, 표, 드롭 박스, 체크 박스, 선택 버튼 및 텍스트 기입 란 중 적어도 하나를 포함하는 것을 특징으로 하는,
치과 전자 차트 생성 방법.
16. The method of claim 15,
The dental electronic chart includes a format based on SOAP format,
The form, characterized in that it includes at least one of a table, a drop box, a check box, a selection button, and a text entry field,
How to create a dental electronic chart.
제10항에 있어서,
상기 치과 전자 차트를 생성한 후에,
상기 생성된 치과 전자 차트에 기입된 내용 중 오인식된 부분에 대한 사용자 입력을 입력받는 단계;
상기 사용자 입력에 기초하여 상기 치과 전자 차트의 기입된 내용을 교정하는 단계
를 더 포함하는,
치과 전자 차트 생성 방법.
11. The method of claim 10,
After generating the dental electronic chart,
receiving a user input for an erroneously recognized part of the content written in the generated dental electronic chart;
Correcting the written contents of the dental electronic chart based on the user input
further comprising,
How to create a dental electronic chart.
KR1020200187241A 2020-12-30 2020-12-30 Method and apparatus for generating dental electronic chart using speech recognition KR102623753B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200187241A KR102623753B1 (en) 2020-12-30 2020-12-30 Method and apparatus for generating dental electronic chart using speech recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200187241A KR102623753B1 (en) 2020-12-30 2020-12-30 Method and apparatus for generating dental electronic chart using speech recognition

Publications (2)

Publication Number Publication Date
KR20220095581A true KR20220095581A (en) 2022-07-07
KR102623753B1 KR102623753B1 (en) 2024-01-11

Family

ID=82397841

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200187241A KR102623753B1 (en) 2020-12-30 2020-12-30 Method and apparatus for generating dental electronic chart using speech recognition

Country Status (1)

Country Link
KR (1) KR102623753B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102626954B1 (en) 2023-04-20 2024-01-18 주식회사 덴컴 Speech recognition apparatus for dentist and method using the same
KR102649996B1 (en) * 2023-07-04 2024-03-22 주식회사 덴컴 Integrated management server for dental chart and method using the same

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030025507A (en) * 2001-09-21 2003-03-29 정용석 Speech Recognition EMR(Electronic Medical Record) System
JP2005149083A (en) * 2003-11-14 2005-06-09 Hitachi Medical Corp Electronic medical record input support apparatus
JP2015035099A (en) * 2013-08-08 2015-02-19 株式会社東芝 Electronic clinical chart preparation apparatus
US20180130558A1 (en) * 2008-11-12 2018-05-10 Softech, Inc. Dental charting system
KR20180055234A (en) * 2016-11-16 2018-05-25 (주)라우기술 Voice using the dental care system and methods
KR101952106B1 (en) * 2017-11-03 2019-02-26 주식회사 셀바스에이아이 Method and apparatus for providing electronic medical record service
KR101955225B1 (en) * 2017-11-03 2019-03-08 주식회사 셀바스에이아이 Method and apparatus for providing editing interface of electronic medical record service
KR20200013960A (en) * 2018-07-31 2020-02-10 스마트케어웍스(주) Automatically generating system of medical record
KR102076793B1 (en) * 2019-07-04 2020-02-12 주식회사 포시에스 Method for providing electric document using voice, apparatus and method for writing electric document using voice

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030025507A (en) * 2001-09-21 2003-03-29 정용석 Speech Recognition EMR(Electronic Medical Record) System
JP2005149083A (en) * 2003-11-14 2005-06-09 Hitachi Medical Corp Electronic medical record input support apparatus
US20180130558A1 (en) * 2008-11-12 2018-05-10 Softech, Inc. Dental charting system
JP2015035099A (en) * 2013-08-08 2015-02-19 株式会社東芝 Electronic clinical chart preparation apparatus
KR20180055234A (en) * 2016-11-16 2018-05-25 (주)라우기술 Voice using the dental care system and methods
KR101952106B1 (en) * 2017-11-03 2019-02-26 주식회사 셀바스에이아이 Method and apparatus for providing electronic medical record service
KR101955225B1 (en) * 2017-11-03 2019-03-08 주식회사 셀바스에이아이 Method and apparatus for providing editing interface of electronic medical record service
KR20200013960A (en) * 2018-07-31 2020-02-10 스마트케어웍스(주) Automatically generating system of medical record
KR102076793B1 (en) * 2019-07-04 2020-02-12 주식회사 포시에스 Method for providing electric document using voice, apparatus and method for writing electric document using voice

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
B. Schloss 외, "Towards an Automated SOAP Note: Classifying Utterances form Medical Conversations", arXiv, arXiv:2007.08749v3. (2020.07.27.)* *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102626954B1 (en) 2023-04-20 2024-01-18 주식회사 덴컴 Speech recognition apparatus for dentist and method using the same
KR102649996B1 (en) * 2023-07-04 2024-03-22 주식회사 덴컴 Integrated management server for dental chart and method using the same

Also Published As

Publication number Publication date
KR102623753B1 (en) 2024-01-11

Similar Documents

Publication Publication Date Title
US10990266B2 (en) Method and system for generating transcripts of patient-healthcare provider conversations
JP6078057B2 (en) Document expansion in dictation-based document generation workflow
CN109003648B (en) Oral outpatient speech electronic medical record generation method and computer readable storage medium
CN109564589B (en) Entity identification and linking system and method using manual user feedback
KR20200027091A (en) A system that recommends diagnostic cases by deducing the degree of similarity using the artificial neural network technique for the patient's main symptom and diagnostic relationship
KR20220095581A (en) Method and apparatus for generating dental electronic chart using speech recognition
CN109524121A (en) Medical records processing method and device
US20190156926A1 (en) Automated code feedback system
US20220061959A1 (en) Voice-assisted dental systems
CN110609910B (en) Medical knowledge graph construction method and device, storage medium and electronic equipment
US11797080B2 (en) Health simulator
CN115458113A (en) Medical record generation method, system, storage medium and electronic equipment
KR20180055234A (en) Voice using the dental care system and methods
JP2007140861A (en) Information processing system, information processing method, and program
WO2020004556A1 (en) Patient assessment support device, patient assessment support method, and recording medium
CN114582487A (en) Traditional Chinese medicine diagnosis and treatment assisting method and system based on traditional Chinese medicine knowledge graph
CN111986217B (en) Image processing method, device and equipment
US20160055321A1 (en) Systems and methods for tooth charting
Zhang et al. Development of natural language processing algorithm for dental charting
JP7225401B2 (en) MEDICAL SUPPORT DEVICE, OPERATION METHOD THEREOF, MEDICAL ASSISTANCE PROGRAM AND MEDICAL SUPPORT SYSTEM
Maas et al. Automated Medical Reporting: From Multimodal Inputs to Medical Reports through Knowledge Graphs.
US20170147751A1 (en) System and Methods for Narrative Patient Visit Note Generation
JP2006302057A (en) Medical audio information processing apparatus and medical audio information processing program
Chleborad et al. Evaluation of voice-based data entry to an electronic health record system for dentistry
US11450323B1 (en) Semantic reporting system

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant