WO2023101232A1 - 수치화 장치 및 방법 - Google Patents

수치화 장치 및 방법 Download PDF

Info

Publication number
WO2023101232A1
WO2023101232A1 PCT/KR2022/016977 KR2022016977W WO2023101232A1 WO 2023101232 A1 WO2023101232 A1 WO 2023101232A1 KR 2022016977 W KR2022016977 W KR 2022016977W WO 2023101232 A1 WO2023101232 A1 WO 2023101232A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
graph
graph information
coordinate
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2022/016977
Other languages
English (en)
French (fr)
Inventor
최인영
박경호
이현진
이선정
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industry Academic Cooperation Foundation of Catholic University of Korea
Original Assignee
Industry Academic Cooperation Foundation of Catholic University of Korea
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industry Academic Cooperation Foundation of Catholic University of Korea filed Critical Industry Academic Cooperation Foundation of Catholic University of Korea
Publication of WO2023101232A1 publication Critical patent/WO2023101232A1/ko
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/12—Audiometering
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/12—Audiometering
    • A61B5/121—Audiometering evaluating hearing capacity
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/40—Image enhancement or restoration using histogram techniques
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients

Definitions

  • the present embodiments provide a digitization apparatus and method.
  • a standard pure tone hearing test is known.
  • the frequency and output level of the test sound are set, the output level of the test sound is adjusted while monitoring the subject's response to the test sound, and the output level of the test sound is set at the time when the subject's response can be confirmed.
  • the test result is recorded and provided in the form of an audiogram graph according to an audiogram display method on a recording sheet.
  • the data recorded on the recording paper is created and stored as a paper document from the beginning, it is very likely to be lost or damaged over time, and it is very difficult to find and use only necessary data from a large amount of recording paper.
  • the present embodiment is a digitization device, a graph information extraction unit for extracting graph information from a specific region of image information in which a hearing test result is recorded, a symbol included in the graph information
  • a coordinate information extraction unit that divides graph information according to color to generate graph information for each color and extracts each coordinate information for a specific symbol included in the graph information for each color, and frequency information and threshold information for each coordinate information. It provides a digitization device comprising a result storage unit for converting to a preset target file and storing it.
  • the present embodiment is a digitization method, in the graph information extraction step of extracting graph information from a specific region of image information in which a hearing test result is recorded, by classifying the graph information according to the color of a symbol included in the graph information
  • FIG. 1 is a diagram showing the configuration of a digitizing device according to an embodiment of the present disclosure.
  • FIG. 2 is a flowchart illustrating an operation of digitizing and storing test results of a digitizing device according to an embodiment of the present disclosure.
  • FIG. 3 is a diagram showing an example for explaining the operation of the graph information extraction unit of the digitizing device according to an embodiment of the present disclosure.
  • FIG. 4 is a diagram illustrating an example for explaining an operation of a coordinate information extraction unit of a digitizing device according to an embodiment of the present disclosure.
  • FIG. 5 is a diagram showing an example for explaining the operation of the result storage unit of the digitizing device according to an embodiment of the present disclosure.
  • FIG. 6 is a flowchart of a digitization method according to an embodiment of the present disclosure.
  • FIG. 7 is a block diagram of a digitization device according to an embodiment of the present disclosure.
  • the present disclosure relates to a digitization apparatus and method.
  • first, second, A, B, (a), and (b) may be used in describing the components of the present disclosure. These terms are only used to distinguish the component from other components, and the nature, order, or order of the corresponding component is not limited by the term.
  • an element is described as being “connected,” “coupled to,” or “connected” to another element, that element is directly connected or connectable to the other element, but there is another element between the elements. It will be understood that elements may be “connected”, “coupled” or “connected”.
  • FIG. 1 is a diagram showing the configuration of a digitizing device according to an embodiment of the present disclosure.
  • the digitization apparatus 100 includes a graph information extraction unit 110 that extracts graph information from a specific region of image information in which a hearing test result is recorded, and included in the graph information.
  • a coordinate information extraction unit 120 for generating graph information for each color by dividing graph information according to the color of the displayed symbol and extracting each coordinate information for a specific symbol included in the graph information for each color and each coordinate information It provides a digitization device 100 characterized by comprising a result storage unit 130 that converts into frequency information and threshold information and stores them as a preset target file.
  • the graph information extractor 110 may extract graph information from a specific region of image information in which a hearing test result is recorded.
  • the graph information extractor 110 may extract graph information from a specific area designated based on a document type of image information in which a hearing test result is recorded.
  • the graph information extractor 110 may additionally extract character information including symbol information, coordinate axis information, and date information of the graph information.
  • the graph information extractor 110 may search for a specific area using coordinates in image information and extract graph information located in the specific area using OpenCV technology.
  • the graph information extractor 110 extracts the color and type of the symbol included in the graph information as symbol information, and converts the coordinate axis (X-axis and Y-axis) range and unit of the graph to the coordinate axis information. can be extracted with
  • the graph information extractor 110 may extract a year value (Date of Evaluation) of the hearing test included in the image information as date information.
  • the image information on which the hearing test result of the document is recorded may be in the form of a document that can be recognized by optical character recognition OCR, such as a PDF file.
  • the graph information may be an audiogram recording test results according to ear directions (left or right) and hearing test types (airway, bone conduction).
  • the coordinate information extractor 120 may generate graph information for each color by classifying graph information according to the color of a symbol included in the graph information. Also, the coordinate information extractor 120 may extract each coordinate information for a specific symbol included in the graph information for each color.
  • the graph information for each color includes first color graph information and second color graph information, and may be graph information for right hearing loss and graph information for left hearing loss, respectively.
  • the color of the symbol included in the graph information may be displayed in red for the right ear and blue for the left ear according to the direction of the ear in which the hearing test was performed. Therefore, the coordinate information extractor 120 can generate first color graph information composed of red symbols and second color graph information composed of blue symbols by classifying the color of symbols included in graph information as red or blue. there is.
  • the coordinate information extractor 120 may extract a specific symbol based on a preset symbol type among hearing symbols included in the graph information for each color. For example, the coordinate information extractor 120 selects and presets at least one symbol type among hearing symbols included in the graph information for the right hearing aid and the graph information for the left hearing aid, and sets the selected symbol type in advance. Based on this, a specific symbol can be extracted. Specifically, the coordinate information extractor 120 is a hearing symbol included in the graph information for the right hearing. At least one symbol type can be selected from among them. Then, the coordinate information extraction unit 120 is a hearing symbol included in the graph information for the left hearing. At least one symbol type can be selected from among them.
  • the aforementioned hearing symbol is an example, and is not limited thereto.
  • the coordinate information extractor 120 may extract a specific symbol corresponding to a preset symbol type from each of the graph information for the right ear and the graph information for the left ear.
  • the coordinate information extractor 120 may convert graph information for each color into black-and-white graph information, and convert the black-and-white graph information into binarized graph information by performing binarization. For example, the coordinate information extractor 120 may perform black-and-white processing on all pixels present in the first color graph information and the second color graph information to convert them into black-and-white graph information. Further, the coordinate information extractor 120 may adjust pixel values in the black-and-white graph information, remove noise, and perform binarization processing to convert the black-and-white graph information into binarized graph information.
  • the coordinate information extractor 120 may extract coordinate information for a specific symbol by searching for a region in which a similarity with a preset symbol type is greater than or equal to a threshold value from the binarized graph information. For example, the coordinate information extractor 120 may compare a pixel value of template information corresponding to a preset symbol type with a pixel value of binarized graph information and extract a matching area as a specific symbol. Further, the coordinate information extractor 120 may extract coordinate information for a specific symbol by using the position of the specific symbol extracted from the graph and the pixel information on the layout of the graph information for each color.
  • the result storage unit 130 may convert each piece of coordinate information into frequency information and threshold information and store them in a preset target file. For example, the result storage unit 130 may calculate an interval ratio such that pixel information of graph information for each color matches coordinate axis information of graph information. Then, the result storage unit 130 may convert X-axis coordinate information and Y-axis coordinate information included in each coordinate information into frequency information and threshold information, respectively, based on the calculated interval ratio. For example, the result storage unit 130 may convert coordinate information expressed in pixels into frequency information and threshold information based on the ratio of the size per pixel of the graph to the range and unit of the graph coordinate axis.
  • the result storage unit 130 may set a target file in a form in which threshold information is classified according to frequency information for a specific taste, and input and store the converted frequency information and threshold information in the set target file.
  • the result storage unit 130 may set a target file in which a vertical axis (row) is divided by registration number or date, and a horizontal axis (column) is divided by frequency information for a specific symbol.
  • threshold information according to the corresponding frequency information from the test result of the corresponding registration number may be input and stored at a point where the vertical axis and the horizontal axis intersect.
  • the result storage unit 130 stores threshold information for each frequency information for a specific symbol as a target file, but the target file may be in the form of an Excel file.
  • the format of the Excel file is an example, and is not limited thereto.
  • FIG. 2 is a flowchart illustrating an operation of digitizing and storing test results of a digitizing device according to an embodiment of the present disclosure.
  • the graph information extractor 110 of the digitization device may extract graph information from image information (S210).
  • the graph information extractor 110 may extract graph information from a specific region of image information in which a hearing test result is recorded.
  • the graph information extractor 110 may extract graph information from a specific area designated by a user based on a document type of image information in which a hearing test result is recorded.
  • the graph information extractor 110 may additionally extract text information including coordinate axis information and date information in addition to symbol information included in graph information in a designated specific area.
  • the graph information extractor 110 may extract graph information located in a specific area using OpenCV technology and extract text information with high accuracy using OCR technology.
  • OpenCV technology OpenCV technology
  • OCR technology since the selection of software technology can be changed according to the user's intention, it is not limited thereto.
  • the coordinate information extraction unit 120 of the digitizing device may generate graph information for each color by classifying the extracted graph information (S220).
  • the coordinate information extractor 120 may generate graph information for each color by classifying graph information according to the color of a symbol included in the extracted graph information.
  • the coordinate information extractor 120 may generate graph information for each color using the color of a symbol classified according to the direction of the ear in which the hearing test was performed on the extracted graph information. Accordingly, the generated graph information for each color includes first color graph information and second color graph information, and may be graph information for right hearing loss and graph information for left hearing loss, respectively.
  • the coordinate information extractor 120 of the digitizing device may convert color-specific graph information into black-and-white graph information (S230). For example, the coordinate information extractor 120 may change each pixel value of the graph information for each color into a pixel value representing white or a pixel value representing black, thereby converting it into black and white graph information. For example, the coordinate information extractor 120 may change RGB components of graph information for each color into grayscale and convert them into black and white graph information.
  • the coordinate information extractor 120 of the digitizing device may convert black-and-white graph information into binarized graph information (S240). For example, the coordinate information extractor 120 may adjust pixel values of the black-and-white graph information to remove noise and perform binarization to convert the black-and-white graph information into binarized graph information. For example, the coordinate information extractor 120 may convert black-and-white graph information into binary graph information by changing pixels of a specific pixel value or less to 0 and pixels of a specific pixel value or more to 1.
  • the specific pixel value may be a predetermined value or may be a value differently determined according to pixels.
  • the coordinate information extraction unit 120 of the digitization device may extract coordinate information for each specific symbol (S250).
  • the coordinate information extractor 120 may extract coordinate information for a specific symbol by searching for a region in which a similarity with a preset symbol type is greater than or equal to a threshold value from the binarized graph information.
  • the coordinate information extractor 120 may compare a pixel value of template information corresponding to a preset symbol type with a pixel value of binarized graph information and extract a matching area as a specific symbol.
  • the coordinate information extractor 120 may scan the entire region of the binarized graph information using the template information, and calculate a similarity between the template information and the binarized graph information in the form of a real number.
  • the coordinate information extractor 120 may extract an area having a calculated similarity equal to or greater than a threshold value as an area corresponding to a specific symbol.
  • the coordinate information extraction unit 120 may extract a specific symbol that matches the template information through the matchTemplate() function of the open OpenCV library.
  • the coordinate information extractor 120 may extract coordinate information about a specific symbol by using pixel information about the location of the specific symbol extracted from the graph and the layout of the graph information for each color. Specifically, the coordinate information extractor 120 may extract coordinate information for a specific symbol by calculating a relative X-axis distance and Y-axis distance with an end point as a reference point based on pixel information in the binarized graph information.
  • the result storage unit 130 of the digitizing device may convert each coordinate information into frequency information and threshold information (S260).
  • the result storage unit 130 may convert each coordinate information into frequency information and threshold value information based on an interval ratio calculated so that pixel information of graph information for each color and coordinate axis information of graph information match each other.
  • the result storage unit 130 may compare the horizontal pixel size and the vertical pixel size of the graph information with the X-axis length and Y-axis length of the coordinate axis to calculate each interval ratio for the X-axis and Y-axis. .
  • the result storage unit 130 may apply the calculated interval ratio to the X-axis coordinate information and the Y-axis coordinate information of a specific symbol, respectively, and convert them into frequency information and threshold information.
  • the size of the graph information may be 865 pixels horizontally and 762 pixels vertically
  • the length of the X axis of the coordinate axis may be 125 to 8K (Hz)
  • the length of the Y axis may be -10 to 130 (dB).
  • the result storage unit 130 may calculate each interval ratio of the X axis and the Y axis per pixel and convert each coordinate information into frequency information and threshold information.
  • the result storage unit 130 of the digitization device may store the result as a preset target file (S270).
  • the result storage unit 130 may input and store the frequency information and the threshold information in a target file set in a form in which threshold information is classified according to frequency information for a specific taste. Details of the target file will be described later with reference to FIG. 5 .
  • FIG. 3 is a diagram showing an example for explaining the operation of the graph information extraction unit of the digitizing device according to an embodiment of the present disclosure.
  • the graph information extractor 110 may extract the graph information 330 from the specific area 320 of the image information 310 in which the hearing test result is recorded.
  • the graph information extractor 110 may designate a specific area 320 by a user based on a document type of the image information 310 in which a hearing test result is recorded.
  • the graph information extractor 110 may extract the graph information 330 within the start coordinates and end coordinates of the designated specific area 320 and store it in a file format.
  • the graph information extractor 110 adds text information including coordinate axis information 340 and date information 350 in addition to the symbol information included in the graph information 330 in the designated specific area 320. can be extracted with Specifically, the graph information extractor 110 may extract the graph information 330 located in the specific area 320 using OpenCV technology and extract text information with high accuracy using OCR technology. However, since the selection of software technology can be changed according to the user's intention, it is not limited thereto.
  • FIG. 4 is a diagram illustrating an example for explaining an operation of a coordinate information extraction unit of a digitizing device according to an embodiment of the present disclosure.
  • the graph information extractor 110 may extract graph information 330 .
  • a hearing test result by a pure tone audiometry tester may be displayed as a plurality of hearing symbols.
  • the hearing symbol may indicate airway and bone conduction hearing thresholds on the graph information 330 represented as an audiogram.
  • the color of the hearing symbol included in the graph information 330 may be displayed in red for the right ear test result and blue for the left ear test result according to the direction of the ear.
  • the coordinate information extractor 120 may generate graph information 420 for each color by classifying the graph information 330 according to the color of the symbol included in the graph information 330 .
  • the coordinate information extractor 120 classifies the color of the symbol included in the graph information 330 as red or blue, and obtains first color graph information composed of red symbols and second color graph information composed of blue symbols. can create Accordingly, the coordinate information extractor 120 may generate first color graph information for the right ear test result and second color graph information for the left ear test result from the graph information 330 .
  • the first color graph information is among symbols or It may include, and the second color graph is a symbol or can include
  • the symbol is an example and is not limited thereto as long as it is appropriately classified according to the ear direction as a hearing symbol displayed on the audiogram.
  • the coordinate information extractor 120 may extract a specific symbol 430 included in graph information for each color.
  • the coordinate information extractor 120 may extract a specific symbol based on at least one preset symbol type among hearing symbols included in the graph information for each color.
  • the hearing symbol included in the first color graph information for the test result of the right ear is ⁇ in the case of an unobstructed airway threshold, ⁇ in the case of an unoccluded bone conduction threshold, ⁇ in the case of an obscured airway threshold, or in the case of a blocked bone conduction threshold.
  • the coordinate information extractor 120 from the first color graph information and At least one symbol type can be selected and set in advance.
  • the hearing symbol included in the second color graph information for the test result of the left ear is ⁇ for the unobstructed airway threshold, > for the unobstructed bone conduction threshold, ⁇ for the blocked airway threshold, or for the blocked bone conduction threshold.
  • the coordinate information extractor 120 extracts ⁇ , ⁇ , ⁇ and X from the second color graph information. At least one symbol type can be selected and set in advance.
  • the coordinate information extractor 120 may convert graph information for each color into black-and-white graph information, and perform binarization again to convert the graph information into binarized graph information. Also, the coordinate information extractor 120 may extract, as a specific symbol, a region having a degree of similarity with a preset symbol type equal to or greater than a threshold value from the binarized graph information. Specifically, the coordinate information extractor 120 may preset a threshold value from 0.5 to 0.8. However, the closer the threshold value is to 1, the more accurate it can be extracted. In addition, the coordinate information extractor 120 may extract, as a specific symbol, a region in which a similarity with a preset symbol type is greater than or equal to a threshold value from the binarized graph information.
  • the coordinate information extractor 120 may extract coordinate information 440 for a specific sign.
  • the coordinate information extractor 120 may extract the coordinate information 440 through the relative position of a specific symbol extracted using pixel information of graph information.
  • the coordinate information 440 may be extracted as a value within the size range of graph information in the form of (x, y).
  • each coordinate information 440 may be extracted in the form of (178.5, 109.5), (308.5, 109.5), (697.5, 131.5), (438.5, 153.5), (567.5, 153.5), and the like.
  • FIG. 5 is a diagram showing an example for explaining the operation of the result storage unit of the digitizing device according to an embodiment of the present disclosure.
  • the result storage unit 130 may convert each piece of coordinate information into frequency information 520 and threshold information 530 and store them in a preset target file 510 .
  • the result storage unit 130 may set the target file 510 in a form in which the threshold information 530 is classified for each frequency information 520 for a specific taste. Then, the result storage unit 130 may input and store frequency information and threshold information obtained by converting each coordinate information into the set target file 510 .
  • the frequency information 520 is input on the horizontal axis (column) of the target file 150, and the frequency information for a plurality of symbol types (a) selected from among specific symbols and a plurality of non-selected symbol types (b) It can be divided into frequency information and classified.
  • the threshold information 530 may be input for each registration number or date on a vertical axis (row) of the target file 150 . At this time, the threshold information 530 is the smallest sound intensity that can be heard for the signal stimulus sound, and may mean a value when there is no response even at the maximum measured intensity of each frequency.
  • This target file 510 may be in the form of an Excel file, but is not limited thereto.
  • FIG. 6 is a flowchart of a digitization method according to an embodiment of the present disclosure.
  • the digitization method may include a graph information extraction step of extracting graph information from a specific region of image information in which a hearing test result is recorded (S610).
  • the digitizing device may extract graph information from a specific area designated based on the document type of image information in which the hearing test result is recorded.
  • the digitization device may additionally extract text information including coordinate axis information and date information of graph information.
  • the digitizer may extract the color and type of the symbol included in the graph information as symbol information, and may extract the coordinate axis (X-axis and Y-axis) range and unit of the graph as coordinate axis information.
  • the digitization device may extract a year value (Date of Evaluation) of the hearing test included in the image information as date information.
  • the graph information may be an audiogram recording test results according to ear directions (left or right) and hearing test types (airway, bone conduction).
  • the digitization method may include a coordinate information extraction step of extracting each coordinate information for a specific symbol included in graph information (S620).
  • the digitization device may generate graph information for each color by classifying graph information according to the color of a symbol included in the graph information.
  • the digitization device may extract each coordinate information for a specific symbol included in the graph information for each color.
  • the graph information for each color includes first color graph information and second color graph information, and may be graph information for right hearing loss and graph information for left hearing loss, respectively.
  • the digitizer may extract a specific symbol based on a preset symbol type among hearing symbols included in the graph information for each color.
  • the digitization device selects and presets at least one symbol type among hearing symbols included in the graph information for right hearing and the graph information for left hearing, and selects a specific symbol based on the set symbol type. can be extracted.
  • the digitization device is a hearing symbol included in the graph information for the right hearing. At least one symbol type can be selected from among them.
  • the digitization device is a hearing symbol included in the graph information for the left hearing. At least one symbol type can be selected from among them.
  • the aforementioned hearing symbol is an example, and is not limited thereto.
  • the digitizer may extract coordinate information for a specific symbol by searching for a region in which a similarity with a preset symbol type is greater than or equal to a threshold value from binarized graph information. For example, the digitizer may compare a pixel value of template information corresponding to a preset symbol type with a pixel value of binarized graph information and extract a matching area as a specific symbol. In addition, the digitizing device may extract coordinate information about a specific symbol by using the position of the specific symbol extracted from the graph and the pixel information about the layout of the graph information for each color.
  • the digitization method may include a result storage step of converting each coordinate information into frequency information and threshold information and storing them in a preset target file (S630).
  • the digitization device may calculate an interval ratio so that pixel information of graph information for each color and coordinate axis information of graph information match each other.
  • the digitizer may convert X-axis coordinate information and Y-axis coordinate information included in each piece of coordinate information into frequency information and threshold information, respectively, based on the calculated interval ratio.
  • the digitizer may convert coordinate information expressed in pixels into frequency information and threshold value information based on the ratio of the size per pixel of the graph to the range and unit of the graph coordinate axis.
  • the digitizer may set a target file in a form in which threshold information is classified according to frequency information for a specific taste, and input and store the converted frequency information and threshold information in the set target file.
  • the digitizing device may set a target file in which a vertical axis (row) is divided by registration number or date, and a horizontal axis (column) is divided by frequency information for a specific symbol.
  • threshold information according to the corresponding frequency information from the test result of the corresponding registration number may be input and stored at a point where the vertical axis and the horizontal axis intersect.
  • FIG. 7 is a block diagram of a digitization device according to an embodiment of the present disclosure.
  • a digitization apparatus 100 includes a communication interface 710 and a processor 720.
  • the digitizing device 100 may further include a memory 730 .
  • Each component, communication interface 710, processor 720 and memory 730 may be connected to each other through a communication bus.
  • a communication bus may include circuitry that couples components together and carries communications (eg, control messages and/or data) between components.
  • the communication interface 710 may obtain image information on which a hearing test result is recorded. Also, the communication interface 710 may perform communication with an external device through wireless or wired communication.
  • the processor 720 may perform at least one method described above with reference to FIGS. 1 to 6 or an algorithm corresponding to at least one method.
  • the processor 720 may be a hardware-implemented data processing device having a circuit having a physical structure for executing desired operations.
  • desired operations may include codes or instructions included in a program.
  • a data processing unit implemented in hardware includes a microprocessor, a central processing unit, a processor core, a multi-core processor, and a multiprocessor. , Neural Processing Unit (NPU), Application-Specific Integrated Circuit (ASIC), and Field Programmable Gate Array (FPGA).
  • NPU Neural Processing Unit
  • ASIC Application-Specific Integrated Circuit
  • FPGA Field Programmable Gate Array
  • the processor 720 may execute a program and control the digitizer 100 .
  • Program codes executed by the processor 720 may be stored in an internal memory or may be stored in an external memory, that is, the memory 730 .
  • the memory 730 may store an image in which a hearing test result obtained through the communication interface 710 is recorded.
  • the memory 930 may store program codes implemented using OpenCV or OCR open source.
  • the memory 730 may store various information generated during processing of the processor 720 and output information extracted by the processor 720 .
  • the output information may be information extracted from image information on which inspection results are recorded and stored in the form of a preset template.
  • the memory 730 may store the digitized result.
  • the digitized result may be obtained from the digitizing device 100 or may be obtained from an external device.
  • the memory 730 may store various data and programs.
  • the memory 730 may include volatile memory or non-volatile memory.
  • the memory 730 may be provided with a mass storage medium such as a hard disk to store various data.
  • the present disclosure is not necessarily limited to these embodiments. That is, within the scope of the purpose of the present disclosure, all of the components may be selectively combined with one or more to operate.
  • all of the components may be implemented as a single independent piece of hardware, some or all of the components are selectively combined to perform some or all of the combined functions in one or a plurality of hardware. It can be implemented as a computer program having and recorded on a computer readable medium.
  • the computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. Program commands recorded on the medium may be specially designed and configured for the embodiment or may be known and usable to those skilled in computer software.
  • Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic media such as floptical disks.
  • - includes hardware devices specially configured to store and execute program instructions, such as magneto-optical media, and ROM, RAM, flash memory, and the like.
  • Examples of program instructions include high-level language codes that can be executed by a computer using an interpreter, as well as machine language codes such as those produced by a compiler.
  • the hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Otolaryngology (AREA)
  • Artificial Intelligence (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Image Analysis (AREA)

Abstract

본 개시는 수치화 장치 및 방법에 관한 것으로서, 특히 청력 검사 결과가 기록된 이미지 정보에 포함된 그래프를 자동으로 수치화할 수 있는 수치화 장치 및 방법을 제공할 수 있다. 구체적으로, 그래프 정보로부터 특정 기호에 대한 각각의 좌표 정보를 추출하여 정형화된 형태로 변환함으로써, 검사 결과를 보다 정확하게 수치화할 수 있는 수치화 장치 및 방법을 제공할 수 있다.

Description

수치화 장치 및 방법
본 실시예들은 수치화 장치 및 방법을 제공한다.
일반적인 청력 검사 방법으로서 표준 순음 청력 검사가 알려져 있다. 이 표준 순음 청력 검사는 검사음의 주파수와 출력 레벨을 설정하고 검사음에 대한 피검자의 응답을 감시하면서 검사음의 출력 레벨을 조정하고 피검자의 응답을 확인할 수 있던 시점의 검사음의 출력 레벨을 설정한 주파수의 역값으로서 기록함으로써, 피검자의 청력을 검사하는 것이다. 이러한 순음 청력 검사의 경우, 검사 결과를 기록지에 오디오 그램 표시 방법에 따른 청력도 그래프 형태로 기록하여 제공하고 있다. 다만, 기록지에 기록된 상태의 데이터는 처음부터 종이 문서로 생성되어 보관되었기 때문에 시간경과에 따라 유실되거나 손상될 가능성이 매우 높고, 다량의 기록지 중 필요한 데이터만을 찾아 사용하기도 매우 곤란하다는 문제점이 있다.
이에 최근에는 이들 기록지를 스캐닝하는 등으로 이미지를 파일화하고, 각 이미지 파일에 인덱스 데이터를 부과하여 보관하는 형태를 병행하고 있다. 다만, 이 경우 역시 기록지에 기록된 검사 결과 값이 디지털 데이터 형태로 수치화되지 않았기 때문에, 컴퓨터를 이용하여 데이터들 사이의 비교에 기반한 유형화나 다른 관측데이터와의 관련성 추출하고자 하는 등의 사용자 요구를 실현할 수 없다는 문제점이 있다.
따라서, 검사 결과가 기록되어 있는 기록지를 스캐닝하여 문서 영상을 인식하는 컴퓨터 비전 기술 등을 사용하여 이미지 파일화하고, 각 이미지 파일에서 기록값을 추출하는 디지털 데이터화 과정(Digitizing)을 필요하다. 특히, 순음 청력 검사의 검사 결과가 기록된 기록지에 포함된 그래프 형태의 디지털 데이터 형태로 수치화할 수 있는 기술을 필요로 하고 있다.
이러한 배경에서, 본 실시예들 청력 검사 결과가 기록된 이미지 정보에 포함된 그래프를 자동으로 수치화할 수 있는 수치화 장치 및 방법을 제공하는데 있다.
전술한 목적을 달성하기 위하여, 일 측면에서, 본 실시예는 수치화 장치에 있어서, 청력 검사 결과가 기록된 이미지 정보의 특정 영역으로부터 그래프 정보를 추출하는 그래프 정보 추출부, 그래프 정보에 포함된 기호의 색상에 따라 그래프 정보를 구분하여 색상 별 그래프 정보를 생성하고, 색상 별 그래프 정보에 포함되어 있는 특정 기호에 대한 각각의 좌표 정보를 추출하는 좌표 정보 추출부 및 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환하여 미리 설정된 타겟 파일로 저장하는 결과 저장부를 포함하는 것을 특징으로 하는 수치화 장치를 제공한다.
다른 측면에서, 본 실시예는 수치화 방법에 있어서, 청력 검사 결과가 기록된 이미지 정보의 특정 영역으로부터 그래프 정보를 추출하는 그래프 정보 추출 단계, 그래프 정보에 포함된 기호의 색상에 따라 그래프 정보를 구분하여 색상 별 그래프 정보를 생성하고, 색상 별 그래프 정보에 포함되어 있는 특정 기호에 대한 각각의 좌표 정보를 추출하는 좌표 정보 추출 단계 및 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환하여 미리 설정된 타겟 파일로 저장하는 결과 저장 단계를 포함하는 것을 특징으로 하는 수치화 방법을 제공한다.
도 1은 본 개시의 일 실시예에 따른 수치화 장치의 구성을 도시한 도면이다.
도 2는 본 개시의 일 실시예에 따른 수치화 장치의 검사 결과를 수치화하여 저장하는 동작을 설명하기 위한 흐름도이다.
도 3은 본 개시의 일 실시예에 따른 수치화 장치의 그래프 정보 추출부의 동작을 설명하기 위한 예시를 도시한 도면이다.
도 4는 본 개시의 일 실시예에 따른 수치화 장치의 좌표 정보 추출부의 동작을 설명하기 위한 예시를 도시한 도면이다.
도 5는 본 개시의 일 실시예에 따른 수치화 장치의 결과 저장부의 동작을 설명하기 위한 예시를 도시한 도면이다.
도 6은 본 개시의 일 실시예에 따른 수치화 방법의 흐름도이다
도 7은 본 개시의 일 실시예에 따른 수치화 장치의 블록도이다.
본 개시는 수치화 장치 및 방법에 관한 것이다.
이하, 본 개시의 일부 실시 예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 개시를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 개시의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
또한, 본 개시의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 어떤 구성 요소가 다른 구성요소에 "연결", "결합" 또는 "접속"된다고 기재된 경우, 그 구성 요소는 그 다른 구성요소에 직접적으로 연결되거나 또는 접속될 수 있지만, 각 구성 요소 사이에 또 다른 구성 요소가 "연결", "결합" 또는 "접속"될 수도 있다고 이해되어야 할 것이다.
이하 첨부된 도면을 참고하여 본 개시를 상세히 설명하기로 한다.
도 1은 본 개시의 일 실시예에 따른 수치화 장치의 구성을 도시한 도면이다.
도 1을 참조하면, 본 개시의 일 실시예에 따른 수치화 장치(100)는, 청력 검사 결과가 기록된 이미지 정보의 특정 영역으로부터 그래프 정보를 추출하는 그래프 정보 추출부(110), 그래프 정보에 포함된 기호의 색상에 따라 그래프 정보를 구분하여 색상 별 그래프 정보를 생성하고, 색상 별 그래프 정보에 포함되어 있는 특정 기호에 대한 각각의 좌표 정보를 추출하는 좌표 정보 추출부(120) 및 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환하여 미리 설정된 타겟 파일로 저장하는 결과 저장부(130)를 포함하는 것을 특징으로 하는 수치화 장치(100)를 제공한다.
일 실시예에 따른 그래프 정보 추출부(110)는 청력 검사 결과가 기록된 이미지 정보의 특정 영역으로부터 그래프 정보를 추출할 수 있다. 일 예로, 그래프 정보 추출부(110)는 청력 검사 결과가 기록된 이미지 정보의 문서 형태를 기반으로 지정된 특정 영역으로부터 그래프 정보를 추출할 수 있다. 또한, 그래프 정보 추출부(110)는 그래프 정보의 기호 정보, 좌표 축 정보 및 날짜 정보를 포함하는 문자 정보를 추가로 추출할 수 있다. 예를 들어, 그래프 정보 추출부(110)는 이미지 정보 내의 좌표를 이용하여 특정 영역을 검색하고, 특정 영역에 위치한 그래프 정보를 OpenCV 기술을 이용하여 추출할 수 있다. 다른 예를 들어, 그래프 정보 추출부(110)는 그래프 정보에 포함된 기호의 색상, 유형 등을 기호 정보로 추출하고, 그래프의 좌표 축(X축 및 Y축)범위, 단위 등을 좌표 축 정보로 추출할 수 있다. 또한, 그래프 정보 추출부(110)는 이미지 정보에 포함된 청력 검사가 시행된 년도 값(Date of Evaluation) 등을 날짜 정보로 추출할 수 있다. 여기서, 문서의 청력 검사 결과가 기록된 이미지 정보는 PDF 파일과 같이, 광학식 문자 판독(Optical Character Recognition OCR)에 의해 인식이 가능한 문서 형태일 수 있다. 또한, 그래프 정보는 귀 방향(왼쪽, 오른쪽) 및 청력 검사 종류(기도, 골도)에 따라 검사 결과를 기록한 오디오그램일 수 있다.
일 실시예에 따른 좌표 정보 추출부(120)는 그래프 정보에 포함된 기호의 색상에 따라 그래프 정보를 구분하여 색상 별 그래프 정보를 생성할 수 있다. 그리고, 좌표 정보 추출부(120)는 색상 별 그래프 정보에 포함되어 있는 특정 기호에 대한 각각의 좌표 정보를 추출할 수 있다. 일 예로, 색상 별 그래프 정보는 제 1 색상 그래프 정보 및 제 2 색상 그래프 정보로 이루어지며, 각각 오른쪽 청력에 대한 그래프 정보 및 왼쪽 청력에 대한 그래프 정보일 수 있다. 예를 들어, 그래프 정보에 포함된 기호의 색상은 청력 검사를 수행한 귀 방향에 따라 오른쪽 귀의 결과는 적색, 왼쪽 귀의 결과는 청색으로 표시될 수 있다. 따라서, 좌표 정보 추출부(120)는 그래프 정보에 포함되어 있는 기호의 색상을 적색 또는 청색으로 구분하여, 적색 기호로 구성된 제 1 색상 그래프 정보 및 청색 기호로 구성된 제 2 색상 그래프 정보를 생성할 수 있다.
또한, 일 예로, 좌표 정보 추출부(120)는 색상 별 그래프 정보에 포함되어 있는 청력 기호 중 미리 설정된 기호 유형에 기초하여 특정 기호를 추출할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 오른쪽 청력에 대한 그래프 정보 및 왼쪽 청력에 대한 그래프 정보에 포함되어 있는 각각의 청력 기호 중 적어도 하나 이상의 기호 유형을 선택하여 미리 설정하고, 설정된 기호 유형에 기초하여 특정 기호를 추출할 수 있다. 구체적으로, 좌표 정보 추출부(120)는 오른쪽 청력에 대한 그래프 정보에 포함되어 있는 청력 기호
Figure PCTKR2022016977-appb-img-000001
중 적어도 하나 이상의 기호 유형을 선택할 수 있다. 그리고, 좌표 정보 추출부(120)는 왼쪽 청력에 대한 그래프 정보에 포함되어 있는 청력 기호
Figure PCTKR2022016977-appb-img-000002
중 적어도 하나 이상의 기호 유형을 선택할 수 있다. 다만, 전술한 청력 기호는 일 예로, 이에 한정되는 것은 아니다. 또한, 좌표 정보 추출부(120)는 오른쪽 청력에 대한 그래프 정보 및 왼쪽 청력에 대한 그래프 정보 각각으로부터 미리 설정된 기호 유형에 해당되는 특정 기호를 추출할 수 있다.
다른 일 예로, 좌표 정보 추출부(120)는 색상 별 그래프 정보를 흑백 그래프 정보로 변환하고, 흑백 그래프 정보에 대해 이진화를 수행하여 이진화된 그래프 정보로 변환할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 제 1 색상 그래프 정보 및 제 2 색상 그래프 정보 내 존재하는 모든 픽셀 각각에 흑백 처리를 수행하여 흑백 그래프 정보로 변환할 수 있다. 그리고, 좌표 정보 추출부(120)는 흑백 그래프 정보에서 픽셀 값을 조정하여 노이즈 제거 및 이진화 처리를 수행하여 이진화된 그래프 정보로 변환할 수 있다.
그리고, 다른 일 예로, 좌표 정보 추출부(120)는 이진화된 그래프 정보로부터 미리 설정된 기호 유형과의 유사도가 임계 값 이상인 영역을 검색하여 특정 기호에 대한 좌표 정보를 추출할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 미리 설정된 기호 유형에 해당되는 템플릿 정보의 픽셀 값을 이진화된 그래프 정보의 픽셀 값과 비교하여 매칭되는 영역을 특정 기호로 추출할 수 있다. 그리고, 좌표 정보 추출부(120)는 그래프 상에서 추출된 특정 기호의 위치와 색상 별 그래프 정보의 레이 아웃에 대한 픽셀 정보를 이용하여 특정 기호에 대한 좌표 정보를 추출할 수 있다.
일 실시예에 따른 결과 저장부(130)는 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환하여 미리 설정된 타겟 파일로 저장할 수 있다. 일 예로, 결과 저장부(130)는 색상 별 그래프 정보의 픽셀 정보와 그래프 정보의 좌표 축 정보가 매칭되도록 간격 비율을 산출할 수 있다. 그리고, 결과 저장부(130)는 산출된 간격 비율에 기초하여 각각의 좌표 정보에 포함된 X축 좌표 정보 및 Y 축 좌표 정보를 각각 주파수 정보 및 역치 정보로 변환할 수 있다. 예를 들어, 결과 저장부(130)는 그래프의 픽셀 당 크기와 그래프 좌표 축의 범위 및 단위의 비율에 기초하여 픽셀로 표현된 좌표 정보를 주파수 정보 및 역치 정보로 변환할 수 있다.
다른 일 예로, 결과 저장부(130)는 특정 기호에 대한 주파수 정보 별로 역치 정보가 분류되는 형태로 타겟 파일을 설정하고, 변환된 주파수 정보 및 역치 정보를 설정된 타겟 파일에 입력하여 저장할 수 있다. 예를 들어, 결과 저장부(130)는 등록 번호 또는 날짜 별로 세로축(행)이 구분되고, 특정 기호에 대한 주파수 정보 별로 가로축(열)이 구분되는 형태의 타겟 파일을 설정할 수 있다. 이 때, 세로축과 가로축의 교차되는 지점에는 해당 등록 번호의 검사 결과에서 해당 주파수 정보에 따른 역치 정보가 입력되어 저장될 수 있다. 다른 예를 들어, 결과 저장부(130)는 특정 기호에 대한 주파수 정보 별로 역치 정보를 타겟 파일로 저장하되, 타겟 파일은 엑셀 파일의 형태일 수 있다. 다만, 엑셀 파일의 형태는 일 예로, 이에 한정되는 것은 아니다.
도 2는 본 개시의 일 실시예에 따른 수치화 장치의 검사 결과를 수치화하여 저장하는 동작을 설명하기 위한 흐름도이다.
도 2를 참조하면, 본 개시의 일 실시예에 따른 수치화 장치의 그래프 정보 추출부(110)는 이미지 정보에서 그래프 정보를 추출할 수 있다(S210). 일 예로, 그래프 정보 추출부(110)는 청력 검사 결과가 기록된 이미지 정보의 특정 영역으로부터 그래프 정보를 추출할 수 있다. 예를 들어, 그래프 정보 추출부(110)는 청력 검사 결과가 기록된 이미지 정보의 문서 형태를 기반으로 사용자에 의해 지정된 특정 영역으로부터 그래프 정보를 추출할 수 있다. 또한, 그래프 정보 추출부(110)는 지정된 특정 영역에서 그래프 정보에 포함된 기호 정보 외에도 좌표 축 정보 및 날짜 정보를 포함하는 문자(Text) 정보를 추가로 추출할 수 있다. 구체적으로, 그래프 정보 추출부(110)는 특정 영역에 위치한 그래프 정보를 OpenCV 기술을 이용하여 추출하고, OCR 기술을 이용하여 문자 정보를 높은 정확도로 추출할 수 있다. 하지만 소프트웨어 기술의 선택은 사용자의 의도에 따라 변경이 가능하므로 이에 한정되는 것은 아니다.
일 실시예에 따른 수치화 장치의 좌표 정보 추출부(120)는 추출된 그래프 정보를 구분하여 색상 별 그래프 정보를 생성할 수 있다(S220). 일 예로, 좌표 정보 추출부(120)는 추출된 그래프 정보에 포함된 기호의 색상에 따라 그래프 정보를 구분하여 색상 별 그래프 정보를 생성할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 추출된 그래프 정보를 청력 검사를 수행한 귀 방향에 따라 구분된 기호의 색상을 이용하여 색상 별 그래프 정보를 생성할 수 있다. 따라서, 생성된 색상 별 그래프 정보는 제 1 색상 그래프 정보 및 제 2 색상 그래프 정보로 이루어지며, 각각 오른쪽 청력에 대한 그래프 정보 및 왼쪽 청력에 대한 그래프 정보일 수 있다.
일 실시예에 따른 수치화 장치의 좌표 정보 추출부(120)는 색상 별 그래프 정보를 흑백 그래프 정보로 변환할 수 있다(S230). 일 예로, 좌표 정보 추출부(120)는 각각의 색상 별 그래프 정보의 픽셀값 각각을 백색을 나타내는 픽셀값 또는 흑색을 나타내는 픽셀값으로 변경하여 흑백 그래프 정보로 변환할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 색상 별 그래프 정보의 RGB 성분을 그레이 스케일(grayscale)로 변경하여 흑백 그래프 정보로 변환할 수 있다.
일 실시예에 따른 수치화 장치의 좌표 정보 추출부(120)는 흑백 그래프 정보를 이진화된 그래프 정보로 변환할 수 있다(S240). 일 예로, 좌표 정보 추출부(120)는 흑백 그래프 정보의 픽셀 값을 조정하여 노이즈 제거 및 이진화를 수행하여 이진화된 그래프 정보로 변환할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 흑백 그래프 정보에서 특정 픽셀 값 이하의 픽셀들은 0으로 변경하고, 특정 픽셀 값 이상의 픽셀들은 1로 변경하여 이진화된 그래프 정보로 변환할 수 있다. 여기서, 특정 픽셀 값은 미리 결정된 값일 수 있고, 픽셀에 따라 상이하게 결정되는 값일 수도 있다.
일 실시예에 따른 수치화 장치의 좌표 정보 추출부(120)는 특정 기호에 대한 각각의 좌표 정보를 추출할 수 있다(S250). 일 예로, 좌표 정보 추출부(120)는 이진화된 그래프 정보로부터 미리 설정된 기호 유형과의 유사도가 임계 값 이상인 영역을 검색하여 특정 기호에 대한 좌표 정보를 추출할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 미리 설정된 기호 유형에 해당되는 템플릿 정보의 픽셀 값을 이진화된 그래프 정보의 픽셀 값과 비교하여 매칭되는 영역을 특정 기호로 추출할 수 있다. 구체적으로, 좌표 정보 추출부(120)는 템플릿 정보를 이용하여 이진화된 그래프 정보의 전체 영역을 스캔하고, 템플릿 정보와 이진화된 그래프 정보간 유사도를 실수 형태로 산출할 수 있다. 그리고, 좌표 정보 추출부(120)는 산출된 유사도가 임계 값 이상인 영역을 특정 기호에 대응하는 영역으로 추출할 수 있다. 또한, 좌표 정보 추출부(120)는 공개된 OpenCV 라이브러리의 matchTemplate()함수를 통해 템플릿 정보에 매칭되는 특정 기호를 추출할 수 있다.
다른 예를 들어, 좌표 정보 추출부(120)는 그래프 상에서 추출된 특정 기호의 위치와 색상 별 그래프 정보의 레이 아웃에 대한 픽셀 정보를 이용하여 특정 기호에 대한 좌표 정보를 추출할 수 있다. 구체적으로, 좌표 정보 추출부(120)는 이진화된 그래프 정보에서 픽셀 정보에 기초하여 끝점을 기준점으로 상대적인 X축 거리와 Y축 거리를 계산하여 특정 기호에 대한 좌표 정보를 추출할 수 있다.
일 실시예에 따른 수치화 장치의 결과 저장부(130)는 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환할 수 있다(S260). 일 예로, 결과 저장부(130)는 색상 별 그래프 정보의 픽셀 정보와 그래프 정보의 좌표 축 정보가 매칭되도록 산출된 간격 비율에 기초하여 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환할 수 있다. 예를 들어, 결과 저장부(130)는 그래프 정보의 가로 픽셀 크기 및 세로 픽셀 크기와 좌표 축의 X축 길이 및 Y축 길이를 비교하여 X축 및 Y축에 대한 각각의 간격 비율을 산출할 수 있다. 그리고, 결과 저장부(130)는 특정 기호의 X축 좌표 정보 및 Y 축 좌표 정보에 산출된 간격 비율을 각각 적용하여 주파수 정보 및 역치 정보로 변환할 수 있다. 구체적으로, 그래프 정보의 크기는 가로가 865 픽셀이고 세로가 762 픽셀이며, 좌표 축의 X 축 길이는 125~8K(Hz)이고, Y 축 길이는 -10~130(dB)일 수 있다. 이에 따라, 결과 저장부(130)는 픽셀 당 X축 및 Y축에 대한 각각의 간격 비율을 산출하여, 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환할 수 있다.
일 실시예에 따른 수치화 장치의 결과 저장부(130)는 미리 설정된 타겟 파일로 저장할 수 있다(S270). 일 예로, 결과 저장부(130)는 특정 기호에 대한 주파수 정보 별로 역치 정보가 분류되는 형태로 설정된 타겟 파일에 주파수 정보 및 상기 역치 정보를 입력하여 저장할 수 있다. 타겟 파일에 대한 상세한 내용은 도 5를 참조하여 후술한다.
도 3은 본 개시의 일 실시예에 따른 수치화 장치의 그래프 정보 추출부의 동작을 설명하기 위한 예시를 도시한 도면이다.
도 3을 참조하면, 본 개시의 일 실시예에 따른 수치화 장치의 그래프 정보 추출부(110)가 그래프 정보를 추출하는 내용을 설명할 수 있다. 일 예로, 그래프 정보 추출부(110)는 청력 검사 결과가 기록된 이미지 정보(310)의 특정 영역(320)으로부터 그래프 정보(330)를 추출할 수 있다. 예를 들어, 그래프 정보 추출부(110)는 청력 검사 결과가 기록된 이미지 정보(310)의 문서 형태를 기반으로 사용자에 의해 특정 영역(320)을 지정할 수 있다. 그리고, 그래프 정보 추출부(110)는 지정된 특정 영역(320)의 시작 좌표와 끝 좌표 내에서 그래프 정보(330)를 추출하고 파일 형태로 저장할 수 있다. 또한, 그래프 정보 추출부(110)는 지정된 특정 영역(320)에서 그래프 정보(330)에 포함된 기호 정보 외에도 좌표 축 정보(340) 및 날짜 정보(350)를 포함하는 문자(Text) 정보를 추가로 추출할 수 있다. 구체적으로, 그래프 정보 추출부(110)는 특정 영역(320)에 위치한 그래프 정보(330)를 OpenCV 기술을 이용하여 추출하고, OCR 기술을 이용하여 문자 정보를 높은 정확도로 추출할 수 있다. 하지만 소프트웨어 기술의 선택은 사용자의 의도에 따라 변경이 가능하므로 이에 한정되는 것은 아니다.
도 4는 본 개시의 일 실시예에 따른 수치화 장치의 좌표 정보 추출부의 동작을 설명하기 위한 예시를 도시한 도면이다.
도 4를 참조하면, 본 개시의 일 실시예에 따른 수치화 장치의 좌표 정보 추출부(120)가 특정 기호에 대한 좌표 정보를 추출하는 내용을 설명할 수 있다. 일 예로, 그래프 정보 추출부(110)는 그래프 정보(330)를 추출할 수 있다. 예를 들어, 그래프 정보(330)는 순음 청력 검사기에 의한 청력 검사 결과가 복수의 청력 기호로 표시될 수 있다. 구체적으로, 청력 기호는 오디오그램으로 표시된 그래프 정보(330) 상에 기도 및 골도 청력 역치를 나타낼 수 있다. 구체적으로, 그래프 정보(330)에 포함된 청력 기호의 색상은 귀 방향에 따라 오른쪽 귀의 검사 결과는 적색, 왼쪽 귀의 검사 결과는 청색으로 표시될 수 있다.
또한, 일 예로, 좌표 정보 추출부(120)는 그래프 정보(330)에 포함된 기호의 색상에 따라 그래프 정보(330)를 구분하여 색상 별 그래프 정보(420)를 생성할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 그래프 정보(330)에 포함되어 있는 기호의 색상을 적색 또는 청색으로 구분하여 적색 기호로 구성된 제 1 색상 그래프 정보 및 청색 기호로 구성된 제 2 색상 그래프 정보를 생성할 수 있다. 이에 따라, 좌표 정보 추출부(120)는 그래프 정보(330)로부터 오른쪽 귀의 검사 결과에 대한 제 1 색상 그래프 정보와 왼쪽 귀의 검사 결과에 대한 제 2 색상 그래프 정보를 생성할 수 있다. 여기서, 제 1 색상 그래프 정보는 기호 중
Figure PCTKR2022016977-appb-img-000003
또는
Figure PCTKR2022016977-appb-img-000004
를 포함할 수 있고, 제 2 색상 그래프는 기호 중
Figure PCTKR2022016977-appb-img-000005
또는
Figure PCTKR2022016977-appb-img-000006
를 포함할 수 있다. 다만, 기호는 일 예를 설명한 것으로, 오디오 그램 상에 표시되는 청력 기호로 귀 방향에 따라 적합하게 구분되면 이에 한정되는 것은 아니다.
또한, 일 예로, 좌표 정보 추출부(120)는 색상 별 그래프 정보에 포함되어 있는 특정 기호(430)를 추출할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 색상 별 그래프 정보에 포함되어 있는 각각의 청력 기호 중 미리 설정된 적어도 하나 이상의 기호 유형에 기초하여 특정 기호를 추출할 수 있다. 구체적으로, 오른쪽 귀의 검사 결과에 대한 제 1 색상 그래프 정보에 포함된 청력 기호는 비차폐 기도 역치의 경우 ○, 비차폐 골도 역치의 경우 ＜,차폐 기도 역치의 경우 △, 또는 차폐 골도 역치의 경우
Figure PCTKR2022016977-appb-img-000007
일 수 있다. 이에 따라, 좌표 정보 추출부(120)는 제 1 색상 그래프 정보로부터
Figure PCTKR2022016977-appb-img-000008
및
Figure PCTKR2022016977-appb-img-000009
중 적어도 하나 이상의 기호 유형을 선택하여 미리 설정할 수 있다. 반면에, 왼쪽 귀의 검사 결과에 대한 제 2 색상 그래프 정보에 포함된 청력 기호는 비차폐 기도 역치의 경우 ×, 비차폐 골도 역치의 경우 ＞, 차폐 기도 역치의 경우 □, 또는 차폐 골도 역치의 경우
Figure PCTKR2022016977-appb-img-000010
일 수 있다. 이에 따라, 좌표 정보 추출부(120)는 제 2 색상 그래프 정보로부터 ×,△,□ 및
Figure PCTKR2022016977-appb-img-000011
중 적어도 하나 이상의 기호 유형을 선택하여 미리 설정할 수 있다.
다른 예를 들어, 좌표 정보 추출부(120)는 색상 별 그래프 정보를 흑백 그래프 정보로 변환하고, 다시 이진화를 수행하여 이진화된 그래프 정보로 변환할 수 있다. 그리고, 좌표 정보 추출부(120)는 이진화된 그래프 정보로부터 미리 설정된 기호 유형과의 유사도가 임계 값 이상인 영역을 특정 기호로 추출할 수 있다. 구체적으로, 좌표 정보 추출부(120)는 임계 값을 0.5에서 0.8까지로 미리 설정할 수 있다. 다만, 임계 값이 1에 가까울수록 정확하게 추출할 수 있다. 또한, 좌표 정보 추출부(120)는 이진화된 그래프 정보에서 미리 설정된 기호 유형과의 유사도가 임계 값 이상인 영역을 특정 기호로 추출할 수 있다.
또한, 일 예로, 좌표 정보 추출부(120)는 특정 기호에 대한 좌표 정보(440)를 추출할 수 있다. 예를 들어, 좌표 정보 추출부(120)는 그래프 정보의 픽셀 정보를 이용하여 추출된 특정 기호의 상대적 위치를 통해 좌표 정보(440)를 추출할 수 있다. 구체적으로, 그래프 정보의 크기는 가로가 865 픽셀이고 세로가 762 픽셀이면, 그래프의 좌측 상단을 기준으로 추출된 특정 기호의 상대적 위치를 통해 좌표 정보(440)를 추출할 수 있다. 따라서, 좌표 정보(440)는 (x, y)의 형태로 그래프 정보의 크기 범위 내의 값으로 추출될 수 있다. 구체적으로, 각각의 좌표 정보(440)는 (178.5, 109.5), (308.5, 109.5), (697.5, 131.5), (438.5, 153.5), (567.5, 153.5) 등의 형태로 추출될 수 있다.
도 5는 본 개시의 일 실시예에 따른 수치화 장치의 결과 저장부의 동작을 설명하기 위한 예시를 도시한 도면이다.
도 5를 참조하면, 본 개시의 일 실시예에 따른 수치화 장치의 결과 저장부(130)가 미리 설정된 타겟 파일(510)로 저장하는 내용을 설명할 수 있다. 일 예로, 결과 저장부(130)는 각각의 좌표 정보를 주파수 정보(520) 및 역치 정보(530)로 변환하여 미리 설정된 타겟 파일(510)로 저장할 수 있다. 예를 들어, 결과 저장부(130)는 특정 기호에 대한 주파수 정보(520) 별로 역치 정보(530)가 분류되는 형태로 타겟 파일(510)을 설정할 수 있다. 그리고, 결과 저장부(130)는 각각의 좌표 정보가 변환된 주파수 정보 및 역치 정보를 설정된 타겟 파일(510)에 입력하여 저장할 수 있다. 구체적으로, 주파수 정보(520)는 타겟 파일(150)의 가로축(열)에 입력되며, 특정 기호 중에서 선택된 복수의 기호 유형(a)에 대한 주파수 정보와 선택되지 않은 복수의 기호 유형(b)에 대한 주파수 정보로 나뉘어 분류될 수 있다. 또한, 역치 정보(530)는 타겟 파일(150)의 세로축(행)에 등록 번호 또는 날짜 별로 입력될 수 있다. 이 때, 역치 정보(530)는 신호 자극음에 대해 들을 수 있는 가장 작은 음의 강도로, 각 주파수의 최대 측정 강도에서도 반응을 하지 않는 경우의 값을 의미할 수 있다. 이러한, 타겟 파일(510)은 엑셀 파일의 형태일 수 있으나, 이에 한정되는 것은 아니다.
이하에서는 도 1 내지 도 5를 참조하여 설명한 수치화 장치가 수행할 수 있는 수치화 방법에 대해서 설명한다.
도 6은 본 개시의 일 실시예에 따른 수치화 방법의 흐름도이다
도 6을 참조하면, 본 개시의 일 실시예에 따른 수치화 방법은 청력 검사 결과가 기록된 이미지 정보의 특정 영역으로부터 그래프 정보를 추출하는 그래프 정보 추출 단계를 포함할 수 있다(S610). 일 예로, 수치화 장치는 청력 검사 결과가 기록된 이미지 정보의 문서 형태를 기반으로 지정된 특정 영역으로부터 그래프 정보를 추출할 수 있다. 또한, 수치화 장치는 그래프 정보의 좌표 축 정보 및 날짜 정보를 포함하는 문자 정보를 추가로 추출할 수 있다. 예를 들어, 수치화 장치는 그래프 정보에 포함된 기호의 색상, 유형 등을 기호 정보로 추출하고, 그래프의 좌표 축(X축 및 Y축)범위, 단위 등을 좌표 축 정보로 추출할 수 있다. 또한, 수치화 장치는 이미지 정보에 포함된 청력 검사가 시행된 년도 값(Date of Evaluation) 등을 날짜 정보로 추출할 수 있다. 여기서, 그래프 정보는 귀 방향(왼쪽, 오른쪽) 및 청력 검사 종류(기도, 골도)에 따라 검사 결과를 기록한 오디오그램일 수 있다.
본 개시의 일 실시예에 따른 수치화 방법은 그래프 정보에 포함된 특정 기호에 대한 각각의 좌표 정보를 추출하는 좌표 정보 추출 단계를 포함할 수 있다(S620). 일 예로, 수치화 장치는 그래프 정보에 포함된 기호의 색상에 따라 그래프 정보를 구분하여 색상 별 그래프 정보를 생성할 수 있다. 그리고, 수치화 장치는 색상 별 그래프 정보에 포함되어 있는 특정 기호에 대한 각각의 좌표 정보를 추출할 수 있다. 예를 들어, 색상 별 그래프 정보는 제 1 색상 그래프 정보 및 제 2 색상 그래프 정보로 이루어지며, 각각 오른쪽 청력에 대한 그래프 정보 및 왼쪽 청력에 대한 그래프 정보일 수 있다.
다른 일 예로, 수치화 장치는 색상 별 그래프 정보에 포함되어 있는 청력 기호 중 미리 설정된 기호 유형에 기초하여 특정 기호를 추출할 수 있다. 예를 들어, 수치화 장치는 오른쪽 청력에 대한 그래프 정보 및 왼쪽 청력에 대한 그래프 정보에 포함되어 있는 각각의 청력 기호 중 적어도 하나 이상의 기호 유형을 선택하여 미리 설정하고, 설정된 기호 유형에 기초하여 특정 기호를 추출할 수 있다. 구체적으로, 수치화 장치는 오른쪽 청력에 대한 그래프 정보에 포함되어 있는 청력 기호
Figure PCTKR2022016977-appb-img-000012
중 적어도 하나 이상의 기호 유형을 선택할 수 있다. 그리고, 수치화 장치는 왼쪽 청력에 대한 그래프 정보에 포함되어 있는 청력 기호
Figure PCTKR2022016977-appb-img-000013
중 적어도 하나 이상의 기호 유형을 선택할 수 있다. 다만, 전술한 청력 기호는 일 예로, 이에 한정되는 것은 아니다.
또 다른 일 예로, 수치화 장치는 이진화된 그래프 정보로부터 미리 설정된 기호 유형과의 유사도가 임계 값 이상인 영역을 검색하여 특정 기호에 대한 좌표 정보를 추출할 수 있다. 예를 들어, 수치화 장치는 미리 설정된 기호 유형에 해당되는 템플릿 정보의 픽셀 값을 이진화된 그래프 정보의 픽셀 값과 비교하여 매칭되는 영역을 특정 기호로 추출할 수 있다. 그리고, 수치화 장치는 그래프 상에서 추출된 특정 기호의 위치와 색상 별 그래프 정보의 레이 아웃에 대한 픽셀 정보를 이용하여 특정 기호에 대한 좌표 정보를 추출할 수 있다.
본 개시의 일 실시예에 따른 수치화 방법은 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환하여 미리 설정된 타겟 파일로 저장하는 결과 저장 단계를 포함할 수 있다(S630). 일 예로, 수치화 장치는 색상 별 그래프 정보의 픽셀 정보와 그래프 정보의 좌표 축 정보가 매칭되도록 간격 비율을 산출할 수 있다. 그리고, 수치화 장치는 산출된 간격 비율에 기초하여 각각의 좌표 정보에 포함된 X축 좌표 정보 및 Y 축 좌표 정보를 각각 주파수 정보 및 역치 정보로 변환할 수 있다. 예를 들어, 수치화 장치는 그래프의 픽셀 당 크기와 그래프 좌표 축의 범위 및 단위의 비율에 기초하여 픽셀로 표현된 좌표 정보를 주파수 정보 및 역치 정보로 변환할 수 있다.
다른 일 예로, 수치화 장치는 특정 기호에 대한 주파수 정보 별로 역치 정보가 분류되는 형태로 타겟 파일을 설정하고, 변환된 주파수 정보 및 역치 정보를 설정된 타겟 파일에 입력하여 저장할 수 있다. 예를 들어, 수치화 장치는 등록 번호 또는 날짜 별로 세로축(행)이 구분되고, 특정 기호에 대한 주파수 정보 별로 가로축(열)이 구분되는 형태의 타겟 파일을 설정할 수 있다. 이 때, 세로축과 가로축의 교차되는 지점에는 해당 등록 번호의 검사 결과에서 해당 주파수 정보에 따른 역치 정보가 입력되어 저장될 수 있다.
도 7은 본 개시의 일 실시예에 따른 수치화 장치의 블록도이다.
도 7을 참조하면, 일 실시예에 따른 수치화 장치(100)는 통신 인터페이스(710) 및 프로세서(720)를 포함한다. 수치화 장치(100)는 메모리(730)를 더 포함할 수 있다. 각 구성 요소, 통신 인터페이스(710), 프로세서(720) 및 메모리(730)는 통신 버스를 통해 서로 연결될 수 있다. 예를 들면, 통신 버스는 구성요소들을 서로 연결하고, 구성요소들 간의 통신(예: 제어 메시지 및/또는 데이터)을 전달하는 회로를 포함할 수 있다.
통신 인터페이스(710)는 청력 검사 결과가 기록된 이미지 정보를 획득할 수 있다. 또한, 통신 인터페이스(710)는 무선 통신 또는 유선 통신을 통해서 외부 장치의 통신을 수행할 수 있다.
프로세서(720)는 도 1 내지 도 6을 통해 전술한 적어도 하나의 방법 또는 적어도 하나의 방법에 대응되는 알고리즘을 수행할 수 있다. 프로세서(720)는 목적하는 동작들(desired operations)을 실행시키기 위한 물리적인 구조를 갖는 회로를 가지는 하드웨어로 구현된 데이터 처리 장치일 수 있다. 예를 들어, 목적하는 동작들은 프로그램에 포함된 코드(code) 또는 인스트럭션들(instructions)을 포함할 수 있다. 예를 들어, 하드웨어로 구현된 데이터 처리 장치는 마이크로프로세서(microprocessor), 중앙 처리 장치(central processing unit), 프로세서 코어(processor core), 멀티-코어 프로세서(multi-core processor), 멀티프로세서(multiprocessor), NPU(Neural Processing Unit), ASIC(Application-Specific Integrated Circuit), FPGA(Field Programmable Gate Array)를 포함할 수 있다.
또한, 프로세서(720)는 프로그램을 실행하고, 수치화 장치(100)를 제어할 수 있다. 프로세서(720)에 의하여 실행되는 프로그램 코드는 내부 메모리에 저장되거나, 외부 메모리, 즉 메모리(730)에 저장될 수 있다. 예를 들어, 메모리(730)는 통신 인터페이스(710)를 통해 획득한 청력 검사 결과가 기록된 이미지 영상을 저장할 수 있다. 메모리(930)는 OpenCV 또는 OCR 오픈소스를 사용하여 구현한 프로그램 코드를 저장할 수 있다. 또한, 메모리(730)는 프로세서(720)의 처리 과정에서 생성되는 다양한 정보 및 프로세서(720)에 의해 추출된 출력 정보들을 저장할 수 있다. 출력 정보는 검사 결과가 기록된 이미지 정보로부터 추출된 정보로 미리 설정된 템플릿 형태로 저장된 정보일 수 있다. 메모리(730)는 수치화된 결과를 저장할 수 있다. 수치화된 결과는, 수치화 장치(100)에서 획득한 것일 수도 있고, 외부 장치로부터 획득한 것일 수도 있다. 이밖에도, 메모리(730)는 각종 데이터와 프로그램 등을 저장할 수 있다. 메모리(730)는 휘발성 메모리 또는 비휘발성 메모리를 포함할 수 있다. 메모리(730)는 하드 디스크 등과 같은 대용량 저장 매체를 구비하여 각종데이터를 저장할 수 있다.
이상에서, 본 개시의 실시 예를 구성하는 모든 구성 요소들이 하나로 결합되거나 결합되어 동작하는 것으로 설명되었다고 해서, 본 개시가 반드시 이러한 실시 예에 한정되는 것은 아니다. 즉, 본 개시의 목적 범위 안에서라면, 그 모든 구성 요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다. 또한, 그 모든 구성 요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체 (magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
또한, 이상에서 기재된 "포함하다", "구성하다" 또는 "가지다" 등의 용어는, 특별히 반대되는 기재가 없는 한, 해당 구성 요소가 내재될 수 있음을 의미하는 것이므로, 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것으로 해석되어야 한다. 기술적이거나 과학적인 용어를 포함한 모든 용어들은, 다르게 정의되지 않는 한, 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 사전에 정의된 용어와 같이 일반적으로 사용되는 용어들은 관련 기술의 문맥 상의 의미와 일치하는 것으로 해석되어야 하며, 본 개시에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이상의 설명은 본 개시의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 개시의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 개시에 개시된 실시 예들은 본 개시의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 개시의 기술 사상의 범위가 한정되는 것은 아니다. 본 개시의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 개시의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
CROSS-REFERENCE TO RELATED APPLICATION
본 특허출원은 2021년 11월 30일 한국에 출원한 특허출원번호 제 10-2021-0168258호에 대해 미국 특허법 119(a)조 (35 U.S.C § 119(a))에 따라 우선권을 주장하며, 그 모든 내용은 참고문헌으로 본 특허출원에 병합된다. 아울러, 본 특허출원은 미국 이외에 국가에 대해서도 위와 동일한 이유로 우선권을 주장하면 그 모든 내용은 참고문헌으로 본 특허출원에 병합된다.

Claims (16)

  1. 청력 검사 결과가 기록된 이미지 정보의 특정 영역으로부터 그래프 정보를 추출하는 그래프 정보 추출부;
    상기 그래프 정보에 포함된 기호의 색상에 따라 상기 그래프 정보를 구분하여 색상 별 그래프 정보를 생성하고, 상기 색상 별 그래프 정보에 포함되어 있는 특정 기호에 대한 각각의 좌표 정보를 추출하는 좌표 정보 추출부; 및
    상기 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환하여 미리 설정된 타겟 파일로 저장하는 결과 저장부;를 포함하는 것을 특징으로 하는 수치화 장치.
  2. 제 1 항에 있어서,
    상기 그래프 정보 추출부는,
    상기 그래프 정보의 기호 정보, 좌표 축 정보 및 날짜 정보를 포함하는 문자 정보를 추가로 추출하는 것을 특징으로 하는 수치화 장치.
  3. 제 1 항에 있어서,
    상기 색상 별 그래프 정보는,
    제 1 색상 그래프 정보 및 제 2 색상 그래프 정보로 이루어지며, 각각 오른쪽 청력에 대한 그래프 정보 및 왼쪽 청력에 대한 그래프 정보인 것을 특징으로 하는 수치화 장치.
  4. 제 3 항에 있어서,
    상기 좌표 정보 추출부는,
    상기 오른쪽 청력에 대한 그래프 정보 및 상기 왼쪽 청력에 대한 그래프 정보에 포함되어 있는 각각의 청력 기호 중 적어도 하나 이상의 기호 유형을 선택하여 미리 설정하고, 상기 기호 유형에 기초하여 상기 특정 기호를 추출하는 것을 특징으로 하는 수치화 장치.
  5. 제 1 항에 있어서,
    상기 좌표 정보 추출부는,
    상기 색상 별 그래프 정보를 흑백 그래프 정보로 변환하고, 상기 흑백 그래프 정보에 대해 이진화를 수행하여 이진화된 그래프 정보로 변환하는 것을 특징으로 하는 수치화 장치.
  6. 제 5 항에 있어서,
    상기 좌표 정보 추출부는,
    상기 이진화된 그래프 정보로부터 미리 설정된 기호 유형과의 유사도가 임계 값 이상인 영역을 검색하여 상기 특정 기호에 대한 좌표 정보를 추출하는 것을 특징으로 하는 수치화 장치.
  7. 제 1 항에 있어서,
    상기 결과 저장부는,
    상기 색상 별 그래프 정보의 픽셀 정보와 상기 그래프 정보의 좌표 축 정보가 매칭되도록 간격 비율을 산출하고, 상기 간격 비율에 기초하여 상기 각각의 좌표 정보에 포함된 X 축 좌표 정보 및 Y 축 좌표 정보를 각각 상기 주파수 정보 및 상기 역치 정보로 변환하는 것을 특징으로 하는 수치화 장치.
  8. 제 1 항에 있어서,
    상기 결과 저장부는,
    상기 특정 기호에 대한 주파수 정보 별로 상기 역치 정보가 분류되는 형태로 상기 타겟 파일을 설정하고, 변환된 상기 주파수 정보 및 상기 역치 정보를 상기 타겟 파일에 입력하여 저장하는 것을 특징으로 하는 수치화 장치.
  9. 청력 검사 결과가 기록된 이미지 정보의 특정 영역으로부터 그래프 정보를 추출하는 그래프 정보 추출 단계;
    상기 그래프 정보에 포함된 기호의 색상에 따라 상기 그래프 정보를 구분하여 색상 별 그래프 정보를 생성하고, 상기 색상 별 그래프 정보에 포함되어 있는 특정 기호에 대한 각각의 좌표 정보를 추출하는 좌표 정보 추출 단계; 및
    상기 각각의 좌표 정보를 주파수 정보 및 역치 정보로 변환하여 미리 설정된 타겟 파일로 저장하는 결과 저장 단계;를 포함하는 것을 특징으로 하는 수치화 방법.
  10. 제 9 항에 있어서,
    상기 그래프 정보 추출 단계는,
    상기 그래프 정보의 기호 정보, 좌표 축 정보 및 날짜 정보를 포함하는 문자 정보를 추가로 추출하는 것을 특징으로 하는 수치화 방법.
  11. 제 9 항에 있어서,
    상기 색상 별 그래프 정보는,
    제 1 색상 그래프 정보 및 제 2 색상 그래프 정보로 이루어지며, 각각 오른쪽 청력에 대한 그래프 정보 및 왼쪽 청력에 대한 그래프 정보인 것을 특징으로 하는 수치화 방법.
  12. 제 11 항에 있어서,
    상기 좌표 정보 추출 단계는,
    상기 오른쪽 청력에 대한 그래프 정보 및 상기 왼쪽 청력에 대한 그래프 정보에 포함되어 있는 각각의 청력 기호 중 적어도 하나 이상의 기호 유형을 선택하여 미리 설정하고, 상기 기호 유형에 기초하여 상기 특정 기호를 추출하는 것을 특징으로 하는 수치화 방법.
  13. 제 9 항에 있어서,
    상기 좌표 정보 추출 단계는,
    상기 색상 별 그래프 정보를 흑백 그래프 정보로 변환하고, 상기 흑백 그래프 정보에 대해 이진화를 수행하여 이진화된 그래프 정보로 변환하는 것을 특징으로 하는 수치화 방법.
  14. 제 13 항에 있어서,
    상기 좌표 정보 추출 단계는,
    상기 이진화된 그래프 정보로부터 미리 설정된 기호 유형과의 유사도가 임계 값 이상인 영역을 검색하여 상기 특정 기호에 대한 좌표 정보를 추출하는 것을 특징으로 하는 수치화 방법.
  15. 제 9 항에 있어서,
    상기 결과 저장 단계는,
    상기 색상 별 그래프 정보의 픽셀 정보와 상기 그래프 정보의 좌표 축 정보가 매칭되도록 간격 비율을 산출하고, 상기 간격 비율에 기초하여 상기 각각의 좌표 정보에 포함된 X 축 좌표 정보 및 Y 축 좌표 정보를 각각 상기 주파수 정보 및 상기 역치 정보로 변환하는 것을 특징으로 하는 수치화 방법.
  16. 제 9 항에 있어서,
    상기 결과 저장 단계는,
    상기 특정 기호에 대한 주파수 정보 별로 상기 역치 정보가 분류되는 형태로 상기 타겟 파일을 설정하고, 변환된 상기 주파수 정보 및 상기 역치 정보를 상기 타겟 파일에 입력하여 저장하는 것을 특징으로 하는 수치화 방법.
PCT/KR2022/016977 2021-11-30 2022-11-02 수치화 장치 및 방법 Ceased WO2023101232A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210168258A KR102720803B1 (ko) 2021-11-30 2021-11-30 수치화 장치 및 방법
KR10-2021-0168258 2021-11-30

Publications (1)

Publication Number Publication Date
WO2023101232A1 true WO2023101232A1 (ko) 2023-06-08

Family

ID=86612738

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2022/016977 Ceased WO2023101232A1 (ko) 2021-11-30 2022-11-02 수치화 장치 및 방법

Country Status (2)

Country Link
KR (1) KR102720803B1 (ko)
WO (1) WO2023101232A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7708058B2 (ja) * 2022-10-07 2025-07-15 トヨタ自動車株式会社 画像の比較方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090029430A (ko) * 2007-09-18 2009-03-23 계명대학교 산학협력단 전자 의무 기록 시스템에 연동 가능한 심전도 기록지의이진화 방법 및 장치
KR101249364B1 (ko) * 2010-07-29 2013-04-09 주식회사 평화이즈 통합의료정보 시스템의 전자서식 생성 시스템 및 관리 방법
KR20140078911A (ko) * 2012-12-18 2014-06-26 인충교 의료 검사 결과 판독 장치 및 방법
JP2016206823A (ja) * 2015-04-20 2016-12-08 アドバンスト・アプリケーション株式会社 帳票データ抽出システム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090029430A (ko) * 2007-09-18 2009-03-23 계명대학교 산학협력단 전자 의무 기록 시스템에 연동 가능한 심전도 기록지의이진화 방법 및 장치
KR101249364B1 (ko) * 2010-07-29 2013-04-09 주식회사 평화이즈 통합의료정보 시스템의 전자서식 생성 시스템 및 관리 방법
KR20140078911A (ko) * 2012-12-18 2014-06-26 인충교 의료 검사 결과 판독 장치 및 방법
JP2016206823A (ja) * 2015-04-20 2016-12-08 アドバンスト・アプリケーション株式会社 帳票データ抽出システム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
CROWSON MATTHEW G.; LEE JONG WOOK; HAMOUR AMR; MAHMOOD RAFID; BABIER AARON; LIN VINCENT; TUCCI DEBARA L.; CHAN TIMOTHY C. Y.: "AutoAudio: Deep Learning for Automatic Audiogram Interpretation", JOURNAL OF MEDICAL SYSTEMS, SPRINGER US, NEW YORK, vol. 44, no. 9, 7 August 2020 (2020-08-07), New York, XP037213062, ISSN: 0148-5598, DOI: 10.1007/s10916-020-01627-1 *

Also Published As

Publication number Publication date
KR20230080784A (ko) 2023-06-07
KR102720803B1 (ko) 2024-10-22

Similar Documents

Publication Publication Date Title
CN111985465B (zh) 文本识别方法、装置、设备及存储介质
US8611662B2 (en) Text detection using multi-layer connected components with histograms
US7170647B2 (en) Document processing apparatus and method
JP5701182B2 (ja) 画像処理装置、画像処理方法及びコンピュータプログラム
US11983910B2 (en) Image processing system, image processing method, and storage medium each for obtaining pixels of object using neural network
EP2833636B1 (en) Color chart detection device, color chart detection method and color chart detection computer program
WO2015183015A1 (ko) 문자 인식 방법 및 그 장치
JP2001297303A (ja) 文書画像認識方法、装置及びコンピュータ読み取り可能な記録媒体
CN101983507A (zh) 自动红眼检测
WO2010131435A1 (en) Pattern recognition apparatus and method therefor configured to recognize object and another lower-order object
CN111666884B (zh) 活体检测方法、装置、计算机可读介质及电子设备
US20220327862A1 (en) Method for detecting whether a face is masked, masked-face recognition device, and computer storage medium
JP4077919B2 (ja) 画像処理方法及び装置及びその記憶媒体
JP2022074466A (ja) 画像処理装置および画像形成装置
KR20230095801A (ko) 인공지능 기반의 병리영상 암 병변 맞춤형 위치 표시 방법 및 시스템
CN113763370B (zh) 数字病理图像的处理方法、装置、电子设备及存储介质
JP2021149452A (ja) 画像処理装置、制御方法及び制御プログラム
KR102720803B1 (ko) 수치화 장치 및 방법
JP5857634B2 (ja) 単語間空白検出装置、単語間空白検出方法及び単語間空白検出用コンピュータプログラム
KR102300475B1 (ko) 표가 삽입된 이미지를 전자 문서로 변환할 수 있는 전자 장치 및 그 동작 방법
JP2019046225A (ja) 認識装置、認識プログラム、及び認識方法
CN115660952A (zh) 图像处理方法、词典笔及存储介质
JP2004246597A (ja) 画像処理装置、記録媒体およびプログラム
CN112464761A (zh) 一种用于压板标识牌的识别系统和方法
CN113627430B (zh) 线缆线号的检测方法、装置和电子设备

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22901591

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 22901591

Country of ref document: EP

Kind code of ref document: A1