KR20160035888A - Apparatus and method for diagnosis support using endoscope - Google Patents
Apparatus and method for diagnosis support using endoscope Download PDFInfo
- Publication number
- KR20160035888A KR20160035888A KR1020140127807A KR20140127807A KR20160035888A KR 20160035888 A KR20160035888 A KR 20160035888A KR 1020140127807 A KR1020140127807 A KR 1020140127807A KR 20140127807 A KR20140127807 A KR 20140127807A KR 20160035888 A KR20160035888 A KR 20160035888A
- Authority
- KR
- South Korea
- Prior art keywords
- region
- lesion
- image
- extracted
- symptom
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 30
- 238000003745 diagnosis Methods 0.000 title description 5
- 230000003902 lesion Effects 0.000 claims abstract description 67
- 238000000605 extraction Methods 0.000 claims abstract description 5
- 208000024891 symptom Diseases 0.000 claims description 51
- 201000010099 disease Diseases 0.000 claims description 39
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims description 39
- 239000000284 extract Substances 0.000 claims description 9
- 238000010586 diagram Methods 0.000 description 4
- 238000010191 image analysis Methods 0.000 description 3
- 238000001839 endoscopy Methods 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000003449 preventive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Surgery (AREA)
- Biomedical Technology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Physics & Mathematics (AREA)
- Animal Behavior & Ethology (AREA)
- Molecular Biology (AREA)
- Heart & Thoracic Surgery (AREA)
- Optics & Photonics (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Endoscopes (AREA)
- Image Processing (AREA)
Abstract
Description
내시경 장비를 이용한 진단 보조 장치 및 방법에 연관되며, 구체적으로는 병변부에 대한 영상 분석을 통한 사용자의 병변부의 건강 상태를 판단하는 장치 및 방법에 연관된다.The present invention relates to a diagnosis assisting apparatus and method using endoscopic equipment, and more particularly, to an apparatus and method for determining a health state of a lesion of a user through image analysis of a lesion.
내시경은 수술을 하거나 절개를 하지 않고서는 직접 병변부를 볼 수 없는 신체의 내부에 삽입되어 장기나 체강 내부를 직접 볼 수 있게 만든 의료 기기이다. 초기의 내시경은 신체의 체강 내에 가늘고 긴 삽입부를 삽입하여 체강 내의 장기 등을 단순히 관찰하는 용도로 사용되었다. 이후 영상 처리 기술의 발전에 따라, 흑백 카메라로 체강 내의 각 부위를 촬영한 후, 촬영된 영상을 통해 각 부위의 병변부를 자세하게 관찰할 수 있게 되었다.Endoscopy is a medical device that can be inserted into the inside of a body where the lesion can not be seen directly without surgery or incision, allowing the inside of the organ or body cavity to be seen directly. Early endoscopy was used to simply observe organs in the body cavity by inserting an elongated insertion section into the body cavity of the body. With the progress of the image processing technology, it is possible to observe lesion parts of each part in detail through the photographed images after photographing each part in the body cavity with a monochrome camera.
한편, 내시경은 과거 흑백 영상만을 제공하던 것에서부터 시작하여 영상 처리 기술의 발달에 힘입어 컬러 고해상도 영상 내지는 협대역 영상을 제공하는 수준까지 발전하였다.On the other hand, the endoscope has been developed from the provision of only black and white images in the past to the level of providing color high-resolution images or narrow-band images due to the development of image processing technology.
이러한 내시경의 발달은 보다 정확한 병변부 구별력을 제공하는 것과 밀접한 연관이 있다.The development of these endoscopes is closely related to providing more accurate lesion discrimination.
따라서, 사용자의 병변부에 대한 영상 분석을 통해 건강 상태를 판단하는 장치가 필요하다.Therefore, a device for determining the health state through image analysis of the lesion part of the user is needed.
일측에 따르면, 제1 병변부에 대한 영상을 획득하는 내시경 카메라; 상기 영상에서 상기 제1 병변부의 특징을 나타내는 제1 영역을 추출하고, 기 저장된 데이터베이스에서 상기 제1 병변부와 관련된 복수의 참조 영역들을 추출하는 추출부; 상기 추출된 제1 영역을 상기 추출된 복수의 참조 영역들과 비교하는 비교부; 및 상기 비교 결과에 따라, 상기 복수의 참조 영역들로부터 상기 제1 영역과 관련된 제1 참조 영역을 선택하는 선택부를 포함하는 영상 판독 장치가 제공된다.According to one aspect, an endoscope camera for acquiring an image of a first lesion part; An extraction unit for extracting a first region representing a feature of the first lesion from the image and extracting a plurality of reference regions associated with the first lesion from a previously stored database; A comparison unit comparing the extracted first region with the extracted plurality of reference regions; And a selection unit that selects a first reference area associated with the first area from the plurality of reference areas according to the comparison result.
일실시예에 따르면, 상기 데이터베이스는, 복수의 질병 각각에 대한 증상을 나타내는 참조 영상들을 포함하고, 상기 참조 영상들은 해당 질병에 관련된 병변부를 포함할 수 있다.According to one embodiment, the database includes reference images representing symptoms for each of a plurality of diseases, and the reference images may include lesions related to the disease.
다른 일실시예에 따르면, 상기 복수의 참조 영역들은, 상기 제1 병변부와 관련된 질병의 초기 증상, 중기 증상 및 말기 증상에 따라 상기 참조 영상들에서 추출될 수 있다.According to another embodiment, the plurality of reference areas may be extracted from the reference images according to an initial symptom, a mid-term symptom, and a terminal symptom of a disease associated with the first lesion part.
또 다른 일실시예에 따르면, 상기 비교부는, 상기 추출된 제1 영역을 상기 초기 증상에 따른 참조 영역, 상기 중기 증상에 따른 참조 영역 및 상기 말기 증상에 따른 참조 영역에 대응시켜 비교할 수 있다.According to another embodiment, the comparing unit may compare the extracted first region with a reference region according to the initial symptom, a reference region according to the mid-term symptom, and a reference region corresponding to the terminal symptom.
일실시예에 따르면, 상기 추출부는, 상기 제1 병변부의 색, 질감, 히스토그램, 웨이블릿 및 DWT 중 적어도 하나를 이용하여 상기 제1 영역을 추출할 수 있다.According to an embodiment, the extracting unit may extract the first region using at least one of color, texture, histogram, wavelet, and DWT of the first lesion.
다른 일실시예에 따르면, 상기 제1 참조 영역에 미리 설정된 진단 정보를 제공하는 정보 제공부를 더 포함할 수 있다.According to another embodiment, the information processing apparatus may further include an information providing unit for providing diagnostic information preset in the first reference area.
또 다른 일실시예에 따르면, 상기 정보 제공부는, 상기 제1 참조 영역에 관련된 질병들을 우선 순위에 따라 제공할 수 있다.According to another embodiment, the information providing unit may provide the diseases related to the first reference area according to the priority order.
또한, 상기 제1 병변부를 포함하는 영상의 잡음을 제거하는 처리부를 더 포함할 수 있다.The apparatus may further include a processor for removing noise of the image including the first lesion.
다른 일측에 따르면, 제1 병변부에 대한 영상을 획득하는 단계; 상기 영상에서 상기 제1 병변부의 특징을 나타내는 제1 영역을 추출하는 단계; 기 저장된 데이터베이스에서 상기 제1 병변부와 관련된 복수의 참조 영역들을 추출하는 단계; 상기 추출된 제1 영역을 상기 추출된 복수의 참조 영역들과 비교하는 단계; 및 상기 비교 결과에 따라, 상기 복수의 참조 영역들로부터 상기 제1 영역과 관련된 제1 참조 영역을 선택하는 단계를 포함하는 영상 판독 방법이 제공된다.According to another aspect, there is provided a method comprising: obtaining an image for a first lesion; Extracting a first region representing a feature of the first lesion from the image; Extracting a plurality of reference regions associated with the first lesion from a pre-stored database; Comparing the extracted first region with the extracted plurality of reference regions; And selecting a first reference region associated with the first region from the plurality of reference regions, in accordance with the comparison result.
여기서, 상기 데이터베이스는, 복수의 질병 각각에 대한 증상을 나타내는 참조 영상들을 포함하고, 상기 참조 영상들은 해당 질병에 관련된 병변부를 포함할 수 있다.Here, the database may include reference images representing symptoms for each of a plurality of diseases, and the reference images may include lesions related to the disease.
또한, 상기 복수의 참조 영역들은, 상기 제1 병변부와 관련된 질병의 초기 증상, 중기 증상 및 말기 증상에 따라 상기 참조 영상들에서 추출될 수 있다.The plurality of reference regions may be extracted from the reference images according to an initial symptom, a mid-term symptom, and a terminal symptom of a disease associated with the first lesion.
한편, 상기 추출된 제1 영역을 상기 추출된 복수의 참조 영역들과 비교는, 상기 추출된 제1 영역을 상기 초기 증상에 따른 참조 영역, 상기 중기 증상에 따른 참조 영역 및 상기 말기 증상에 따른 참조 영역에 대응시켜 비교할 수 있다.The extracted first region may be compared with the extracted plurality of reference regions by comparing the extracted first region with a reference region according to the initial symptom, a reference region according to the mid-term symptom, Area can be compared.
일실시예에 따르면, 상기 제1 참조 영역에 미리 설정된 진단 정보를 제공하는 단계를 더 포함할 수 있다.According to an embodiment of the present invention, the method may further comprise providing diagnostic information preset in the first reference area.
또한, 상기 진단 정보는, 상기 제1 참조 영역에 관련된 질병들을 우선 순위에 따라 제공도리 수 있다.In addition, the diagnosis information may provide priorities for diseases related to the first reference region.
또 다른 일측에 따르면, 영상 판독 방법을 실행하는 프로그램을 수록한 컴퓨터 판독 가능 기록 매체에 있어서, 상기 영상 판독 방법은, 제1 병변부에 대한 영상을 획득하는 단계; 상기 영상에서 상기 제1 병변부의 특징을 나타내는 제1 영역을 추출하는 단계; 기 저장된 데이터베이스에서 상기 제1 병변부와 관련된 복수의 참조 영역들을 추출하는 단계; 상기 추출된 제1 영역을 상기 추출된 복수의 참조 영역들과 비교하는 단계; 및 상기 비교 결과에 따라, 상기 복수의 참조 영역들로부터 상기 제1 영역과 관련된 제1 참조 영역을 선택하는 단계를 포함하는 컴퓨터 판독 가능 기록 매체가 제공된다.According to another aspect of the present invention, there is provided a computer-readable recording medium storing a program for executing an image reading method, the method comprising: acquiring an image for a first lesion; Extracting a first region representing a feature of the first lesion from the image; Extracting a plurality of reference regions associated with the first lesion from a pre-stored database; Comparing the extracted first region with the extracted plurality of reference regions; And selecting a first reference area associated with the first area from the plurality of reference areas, in accordance with the comparison result.
도 1은 일실시예에 따른 영상 판독 장치의 개념도이다.
도 2는 일실시예에 따른 영상 판독 장치의 구성을 나타낸 블록도이다.
도 3은 일실시예에 따른 영상 판독 방법의 흐름을 나타낸 순서도이다.
도 4는 다른 일실시예에 따른 영상 판독 방법의 흐름을 나타낸 순서도이다.1 is a conceptual diagram of an image reading apparatus according to an embodiment.
2 is a block diagram showing a configuration of an image reading apparatus according to an embodiment.
3 is a flowchart showing a flow of an image reading method according to an embodiment.
4 is a flowchart showing a flow of an image reading method according to another embodiment.
이하에서, 일부 실시예들을, 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.In the following, some embodiments will be described in detail with reference to the accompanying drawings. However, it is not limited or limited by these embodiments. Like reference symbols in the drawings denote like elements.
아래 설명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례, 새로운 기술의 출현 등에 따라 달라질 수 있다.Although the terms used in the following description have selected the general terms that are widely used in the present invention while considering the functions of the present invention, they may vary depending on the intention or custom of the artisan, the emergence of new technology, and the like.
또한 특정한 경우는 이해를 돕거나 및/또는 설명의 편의를 위해 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 설명 부분에서 상세한 그 의미를 기재할 것이다. 따라서 아래 설명에서 사용되는 용어는 단순한 용어의 명칭이 아닌 그 용어가 가지는 의미와 명세서 전반에 걸친 내용을 토대로 이해되어야 한다.Also, in certain cases, there may be terms chosen arbitrarily by the applicant for the sake of understanding and / or convenience of explanation, and in this case the meaning of the detailed description in the corresponding description section. Therefore, the term used in the following description should be understood based on the meaning of the term, not the name of a simple term, and the contents throughout the specification.
도 1은 일실시예에 따른 영상 판독 장치의 개념도(100)이다.1 is a conceptual diagram (100) of an image reading apparatus according to an embodiment.
일실시예에 따르면, 영상 판독 장치(120)는 사용자의 의료 영상(110)을 입력 받아 영상 분석을 수행할 수 있다. 영상 판독 장치(120)는 의료 영상(110)에서 병변부의 특징을 나타내는 영역을 추출하고, 기 저장된 데이터베이스에 저장된 참조 영역들과 비교하여 매칭되는 참조 영역을 선택할 수 있다.According to one embodiment, the
일실시예에 따르면, 영상 판독 장치(120)는 의료 영상(110)의 분석을 수행하여 해당되는 질병 정보(131, 132, 133)를 제공할 수 있다. 질병 정보는 사용자가 질병에 대한 양성 및 음성에 대한 정보를 포함할 수 있고, 가능성 있는 경우에 질병에 대한 예방 정보를 포함할 수도 있다.According to one embodiment, the
이하, 도 2 내지 도 4에서는 영상 판독 장치 및 방법에 대해 설명한다.Hereinafter, an image reading apparatus and method will be described with reference to Figs. 2 to 4. Fig.
도 2는 일실시예에 따른 영상 판독 장치의 구성을 나타낸 블록도(200)이다.2 is a block diagram 200 showing the configuration of an image reading apparatus according to an embodiment.
영상 판독 장치(200)는 내시경 카메라(210), 추출부(220), 비교부(230), 선택부(240)를 포함할 수 있다. 내시경 카메라(210)는 제1 병변부에 대한 영상을 획득할 수 있다. 내시경 카메라(210)는 사용자의 인체 내부에 삽입되어 제1 병변부에 대한 영상을 획득할 수 있다.The
추출부(220)는 영상에서 제1 병변부의 특징을 나타내는 제1 영역을 추출할 수 있다. 또한 추출부(220)는, 기 저장된 데이터베이스에서 제1 병변부와 관련된 복수의 참조 영역들을 추출할 수 있다.The extracting
여기서, 기 저장된 데이터베이스는 복수의 질병 각각에 대한 증상을 나타내는 참조 영상들을 포함할 수 있다. 참조 영상들은 해당 질병에 관련된 병변부를 포함할 수 있다. 예를 들면, "A질병"에 관한 참조 영상은 "A질병"을 걸렸을 때, 정상인과 다른 증상을 보이는 병변부에 대한 영상일 수 있다.Here, the pre-stored database may include reference images representing symptoms for each of a plurality of diseases. The reference images may include a lesion associated with the disease. For example, a reference image of "A disease" may be an image of a lesion that has a different symptom from that of a normal person when the "A disease"
또한, 기 저장된 데이터베이스는 영상 판독 장치(200)와는 별도로 외부 장치에서 구현될 수 있으며, 영상 판독 장치(200)에 내장되어 구현될 수도 있다. 따라서, 기 저장된 데이터베이스는 영상 판독 장치(200)에서 구현되는 경우 뿐만 아니라, 물리적으로 영상 판독 장치(200)의 외부에서 구현되는 경우 또한 본 발명의 사상 범위에서 제외되지 않는다.In addition, the pre-stored database may be implemented in an external apparatus separately from the
한편, 복수의 참조 영역들은 제1 병변부와 관련된 질병의 초기 증상, 중기 증상 및 말기 증상에 따라 참조 영상들에서 추출될 수 있다. 질병에 따라 증상의 정도에 따라 병변부의 특징이 다를 수 있다. 즉, 초기 증상, 중기 증상 및 말기 증상에 따라 병변부에 검출되는 특징이 다를 수 있다. 질병의 증상에 따라 초기 증상, 중기 증상 및 말기 증상으로 나뉜 것은 일예시에 불과하며, 증상의 정도에 따라 단계별 복수의 참조 영역들이 추출될 수 있다.On the other hand, the plurality of reference regions can be extracted from the reference images according to the initial symptom, the mid-term symptom, and the terminal symptom of the disease associated with the first lesion. Depending on the severity of the disease, the features of the lesion may be different. That is, the features detected in the lesion may be different depending on the initial symptom, the mid-term symptom, and the terminal symptom. According to the symptom of the disease, the initial symptom, the middle term symptom and the terminal symptom are divided into only one example, and a plurality of reference regions can be extracted according to the degree of symptom.
일실시예에 따르면, 추출부(220)는 제1 병변부의 색, 질감, 히스토그램, 웨이블릿 및 DWT 중 적어도 하나를 이용하여 제1 영역을 추출할 수 있다.According to one embodiment, the extracting
비교부(230)는 추출된 제1 영역을 추출된 복수의 참조 영역들과 비교할 수 있다. 사용자의 인체 내부를 촬영하여 획득된 제1 병변부에 대한 영상을 제1 병변부와 관련된 복수의 참조 영역들과 비교할 수 있다.The comparing
일실시예에 따르면, 비교부(230)는 제1 영역을 초기 증상에 따른 참조 영역, 중기 영역에 따른 참조 영역 및 말기 증상에 따른 참조 영역에 대응시켜 비교할 수 있다.According to one embodiment, the
선택부(240)는 비교 결과에 따라 복수의 참조 영역들로부터 제1 영역과 관련된 제1 참조 영역을 선택할 수 있다. 선택부(240)는 복수의 참조 영역 중에서 제1 병변부에 대한 제1 영상과 근접한 제1 참조 영역을 선택할 수 있다.The selecting
다른 일실시예에 따르면, 영상 판독 장치(200)는 정보 제공부(250)를 더 포함할 수 있다. 정보 제공부(250)는 제1 참조 영역에 미리 설정된 진단 정보를 제공할 수 있다. 여기서 진단 정보는 제1 병변부 증상에 대한 진단 정보를 제공할 수 있다. 예를 들면, 영상 판독 장치(200)는 "제1 병변부"에 대해 "A질병"의 진단을 제공할 수 있으며, 그에 따른 처방 진단도 제공할 수 있다.According to another embodiment, the
또 다른 일실시예예 따르면, 정보 제공부(250)는 제1 참조 영역에 관련된 질병들을 우선 순위에 따라 제공할 수 있다. 정보 제공부(250)는 우선 순위에 따라 가능성이 높은 질병 순으로 제공할 수 있으며, 또한, 확률적으로 계산된 수치를 제시할 수도 있다.According to another embodiment, the
일실시예에 따르면, 영상 판독 장치(200)는 처리부(260)를 더 포함할 수도 있다. 처리부(260)는 제1 병변부를 포함하는 영상의 잡음을 제거할 수 있다. 즉, 내시경 카메라(210)에서 획득된 제1 병변부에 대한 영상의 잡을 제거하여 추출부(220)가 제1 영역을 추출할 수 있도록 할 수 있다.According to one embodiment, the
이하에서는, 영상 판독 장치가 수행하는 다양한 동작이나 응용들이 설명되는데, 상기 내시경 카메라, 추출부, 비교부, 선택부, 정보 제공부 및 처리부 중 어느 구성을 특정하지 않더라도 본 발명의 기술분야에 대한 통상의 기술자가 명확하게 이해하고 예상할 수 있는 정도의 내용은 통상의 구현으로 이해될 수 있으며, 본 발명의 권리범위가 특정한 구성의 명칭이나 물리적/논리적 구조에 의해 제한되는 것은 아니다.Hereinafter, various operations and applications performed by the image reading apparatus will be described. Even if the configuration of the endoscope camera, the extracting unit, the comparing unit, the selecting unit, the information providing unit and the processing unit is not specified, To be understood and predicted by a person skilled in the art can be understood as a normal implementation and the scope of the present invention is not limited by the name of the specific configuration or the physical / logical structure.
도 3은 일실시예에 따른 영상 판독 방법의 흐름을 나타낸 순서도(300)이다.3 is a
일실시예에 따르면, 영상 판독 장치는 제1 병변부에 대한 영상을 획득할 수 있다. (단계 310) 영상 판독 장치의 내시경 카메라는 사용자의 인체의 부위 중 제1 병변부에 대해서 촬영할 수 있다. 촬영을 통해 제1 병변부를 포함하는 영상을 획득할 수 있다.According to one embodiment, the image reading apparatus can acquire an image for the first lesion part. (Step 310) The endoscope camera of the image reading apparatus can photograph the first lesion of the part of the user's body. An image including the first lesion part can be obtained through the photographing.
일실시예에 따르면, 영상 판독 장치는 제1 영역을 추출할 수 있다. (단계 320) 여기서, 제1 영역은 내시경 카메라를 통해 획득한 영상에서 제1 병변부의 특징을 나타내는 영역일 수 있다. 또한, 제1 영역의 추출은 제1 병변부의 색, 질감, 히스토그램, 웨이블릿 및 DWT 중 적어도 하나를 이용하여 추출될 수 있다.According to one embodiment, the image reading apparatus can extract the first area. (Step 320). Here, the first area may be an area representing the characteristic of the first lesion in the image acquired through the endoscope camera. In addition, extraction of the first region may be extracted using at least one of color, texture, histogram, wavelet, and DWT of the first lesion.
일실시예에 따르면, 영상 판독 장치는 기 저장된 데이터베이스에서 제1 병변부와 관련된 복수의 참조 영역들을 추출할 수 있다. (단계 330)According to one embodiment, the image reading device may extract a plurality of reference areas associated with the first lesion in the pre-stored database. (Step 330)
여기서, 기 저장된 데이터베이스는 복수의 질병에 대한 참조 영상들을 포함할 수 있다. 참조 영상들을 통해 복수의 질병 각각에 대한 증상 정보를 획득할 수 있다. 참조 영상들은 해당 질병에 관련된 병변부를 포함할 수 있다. 예를 들면, 참조 영상들은 제1 병변부와 관련된 질병의 초기 증상, 중기 증상 및 말기 증상에 따른 영상들을 포함할 수 있다.Here, the pre-stored database may include reference images for a plurality of diseases. The symptom information for each of a plurality of diseases can be obtained through reference images. The reference images may include a lesion associated with the disease. For example, the reference images may include images of an initial symptom, a mid-term symptom, and a terminal symptom of a disease associated with the first lesion.
일실시예에 따르면, 영상 판독 장치는 제1 영역과 복수의 참조 영역들과 비교할 수 있다. (단계 340) 예를 들면, 영상 판독 장치는 추출된 제1 영역을 초기 증상에 따른 참조 영역, 중기 증상에 따른 참조 영역 및 말기 증상에 따른 참조 영역에 대응시켜 비교할 수 있다.According to one embodiment, the image reading apparatus can compare with the first area and the plurality of reference areas. (Step 340) For example, the image reading apparatus can compare the extracted first region with the reference region according to the initial symptom, the reference region according to the mid-term symptom, and the reference region according to the terminal symptom.
일실시예에 따르면, 영상 판독 장치는 제1 참조 영역을 선택할 수 있다. (350) 영상 판독 장치는 비교 결과에 따라 복수의 참조 영역들로부터 제1 영역과 관련된 제1 참조 영역을 선택할 수 있다. 영상 판독 장치는 제1 병변부의 특징을 나타내는 제1 영역과 매칭되는 참조 영역을 복수의 참조 영역들에서 선택할 수 있다.According to one embodiment, the image reading device can select the first reference area. (350) The image reading apparatus can select a first reference area associated with the first area from a plurality of reference areas according to the comparison result. The image reading apparatus can select the reference region matching with the first region indicating the characteristic of the first lesion portion from a plurality of reference regions.
도 4는 다른 일실시예에 따른 영상 판독 방법의 흐름을 나타낸 순서도이다.4 is a flowchart showing a flow of an image reading method according to another embodiment.
일실시예에 따르면, 영상 판독 장치는 진단 정보를 제공할 수 있다. (단계 410) 진단 정보는 제1 참조 영역에 미리 설정된 것이고, 제1 참조 영역에 대응하는 질병에 대한 정보를 포함할 수 있다. 또한, 진단 정보는 해당 질병에 대한 증상 및 처방, 예방 정보 등을 포함할 수 있다.According to one embodiment, the image reading apparatus can provide diagnostic information. (Step 410) The diagnostic information is previously set in the first reference area, and may include information on the disease corresponding to the first reference area. In addition, the diagnosis information may include symptoms, prescription, prevention information, and the like for the disease.
다른 일실시예에 따르면, 영상 판독 장치는 제1 참조 영역에 관련된 질병들을 우선 순위에 따라 제공할 수 있다. 우선 순위에 따라 제공하는 경우, 해당 질병과 일치하는 확률을 제시할 수 있다.According to another embodiment, the image reading apparatus can provide the diseases related to the first reference region in priority order. If provided in priority order, the probability of matching the disease can be presented.
또 다른 일실시예에 따르면, 영상 판독 장치는 제1 병변부를 포함하는 영상의 잡음을 제거할 수 있다.According to another embodiment, the image reading apparatus may remove noise of an image including the first lesion part.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다.The apparatus described above may be implemented as a hardware component, a software component, and / or a combination of hardware components and software components. For example, the apparatus and components described in the embodiments may be implemented within a computer system, such as, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable array (FPA) A programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions.
처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다.The processing device may execute an operating system (OS) and one or more software applications running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software.
이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.For ease of understanding, the processing apparatus may be described as being used singly, but those skilled in the art will recognize that the processing apparatus may have a plurality of processing elements and / As shown in FIG. For example, the processing unit may comprise a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as a parallel processor.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of the foregoing, and may be configured to configure the processing device to operate as desired or to process it collectively or collectively Device can be commanded.
소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software and / or data may be in the form of any type of machine, component, physical device, virtual equipment, computer storage media, or device , Or may be permanently or temporarily embodied in a transmitted signal wave. The software may be distributed over a networked computer system and stored or executed in a distributed manner. The software and data may be stored on one or more computer readable recording media.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.The method according to an embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions to be recorded on the medium may be those specially designed and configured for the embodiments or may be available to those skilled in the art of computer software.
컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like.
프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like.
상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the equivalents of the claims, as well as the claims.
110: 의료 영상
120: 영상 판독 장치
131, 132, 133: 질병 정보
200: 영상 판독 장치
210: 내시경 카메라
220: 추출부
230: 비교부
240: 선택부110: medical imaging
120: image reading device
131, 132, 133: Disease information
200: image reading device
210: Endoscope camera
220:
230:
240:
Claims (15)
상기 영상에서 상기 제1 병변부의 특징을 나타내는 제1 영역을 추출하고, 기 저장된 데이터베이스에서 상기 제1 병변부와 관련된 복수의 참조 영역들을 추출하는 추출부;
상기 추출된 제1 영역을 상기 추출된 복수의 참조 영역들과 비교하는 비교부; 및
상기 비교 결과에 따라, 상기 복수의 참조 영역들로부터 상기 제1 영역과 관련된 제1 참조 영역을 선택하는 선택부
를 포함하는 영상 판독 장치.An endoscope camera for acquiring an image of the first lesion;
An extraction unit for extracting a first region representing a feature of the first lesion from the image and extracting a plurality of reference regions associated with the first lesion from a previously stored database;
A comparison unit comparing the extracted first region with the extracted plurality of reference regions; And
Selecting a first reference area associated with the first area from the plurality of reference areas according to a result of the comparison,
And an image reading device.
상기 데이터베이스는,
복수의 질병 각각에 대한 증상을 나타내는 참조 영상들을 포함하고, 상기 참조 영상들은 해당 질병에 관련된 병변부를 포함하는 영상 판독 장치.The method according to claim 1,
The database includes:
Wherein the reference images include reference images representing symptoms for each of a plurality of diseases, and the reference images include lesions related to the disease.
상기 복수의 참조 영역들은,
상기 제1 병변부와 관련된 질병의 초기 증상, 중기 증상 및 말기 증상에 따라 상기 참조 영상들에서 추출된 영상 판독 장치.3. The method of claim 2,
The plurality of reference areas may include:
Wherein the reference image is extracted from the reference images according to an initial symptom, a mid-term symptom, and a terminal symptom of a disease associated with the first lesion.
상기 비교부는,
상기 추출된 제1 영역을 상기 초기 증상에 따른 참조 영역, 상기 중기 증상에 따른 참조 영역 및 상기 말기 증상에 따른 참조 영역에 대응시켜 비교하는 영상 판독 장치.The method of claim 3,
Wherein,
Wherein the extracted first region is compared with a reference region according to the initial symptom, a reference region according to the mid-term symptom, and a reference region corresponding to the terminal symptom.
상기 추출부는,
상기 제1 병변부의 색, 질감, 히스토그램, 웨이블릿 및 DWT 중 적어도 하나를 이용하여 상기 제1 영역을 추출하는 영상 판독 장치.The method according to claim 1,
The extracting unit extracts,
Extracting the first region using at least one of color, texture, histogram, wavelet, and DWT of the first lesion.
상기 제1 참조 영역에 미리 설정된 진단 정보를 제공하는 정보 제공부를 더 포함하는 영상 판독 장치.The method according to claim 1,
Further comprising an information providing unit for providing predetermined diagnostic information to the first reference area.
상기 정보 제공부는,
상기 제1 참조 영역에 관련된 질병들을 우선 순위에 따라 제공하는 영상 판독 장치.The method according to claim 6,
The information providing unit,
And provides the diseases related to the first reference region according to priority.
상기 제1 병변부를 포함하는 영상의 잡음을 제거하는 처리부를 더 포함하는 영상 판독 장치.The method according to claim 1,
And a processor for removing noise of the image including the first lesion.
상기 영상에서 상기 제1 병변부의 특징을 나타내는 제1 영역을 추출하는 단계;
기 저장된 데이터베이스에서 상기 제1 병변부와 관련된 복수의 참조 영역들을 추출하는 단계;
상기 추출된 제1 영역을 상기 추출된 복수의 참조 영역들과 비교하는 단계; 및
상기 비교 결과에 따라, 상기 복수의 참조 영역들로부터 상기 제1 영역과 관련된 제1 참조 영역을 선택하는 단계
를 포함하는 영상 판독 방법.Obtaining an image for the first lesion;
Extracting a first region representing a feature of the first lesion from the image;
Extracting a plurality of reference regions associated with the first lesion from a pre-stored database;
Comparing the extracted first region with the extracted plurality of reference regions; And
Selecting a first reference region associated with the first region from the plurality of reference regions according to the comparison result
/ RTI >
상기 데이터베이스는,
복수의 질병 각각에 대한 증상을 나타내는 참조 영상들을 포함하고, 상기 참조 영상들은 해당 질병에 관련된 병변부를 포함하는 영상 판독 방법.10. The method of claim 9,
The database includes:
Wherein the reference images include a reference image representing a symptom for each of a plurality of diseases, and the reference images include a lesion associated with the disease.
상기 복수의 참조 영역들은,
상기 제1 병변부와 관련된 질병의 초기 증상, 중기 증상 및 말기 증상에 따라 상기 참조 영상들에서 추출된 영상 판독 방법.11. The method of claim 10,
The plurality of reference areas may include:
Wherein the reference image is extracted from the reference images according to an initial symptom, a mid-term symptom, and a terminal symptom of a disease associated with the first lesion.
상기 추출된 제1 영역을 상기 추출된 복수의 참조 영역들과 비교는,
상기 추출된 제1 영역을 상기 초기 증상에 따른 참조 영역, 상기 중기 증상에 따른 참조 영역 및 상기 말기 증상에 따른 참조 영역에 대응시켜 비교하는 영상 판독 방법.12. The method of claim 11,
Comparing the extracted first region with the extracted plurality of reference regions,
Wherein the extracted first region is compared with a reference region according to the initial symptom, a reference region according to the mid-term symptom, and a reference region corresponding to the terminal symptom.
상기 제1 참조 영역에 미리 설정된 진단 정보를 제공하는 단계를 더 포함하는 영상 판독 방법.10. The method of claim 9,
And providing the preset diagnostic information to the first reference area.
상기 진단 정보는,
상기 제1 참조 영역에 관련된 질병들을 우선 순위에 따라 제공되는 영상 판독 방법.14. The method of claim 13,
The diagnostic information includes:
Wherein the diseases are related to the first reference region in a priority order.
제1 병변부에 대한 영상을 획득하는 단계;
상기 영상에서 상기 제1 병변부의 특징을 나타내는 제1 영역을 추출하는 단계;
기 저장된 데이터베이스에서 상기 제1 병변부와 관련된 복수의 참조 영역들을 추출하는 단계;
상기 추출된 제1 영역을 상기 추출된 복수의 참조 영역들과 비교하는 단계; 및
상기 비교 결과에 따라, 상기 복수의 참조 영역들로부터 상기 제1 영역과 관련된 제1 참조 영역을 선택하는 단계
를 포함하는 컴퓨터 판독 가능 기록 매체.
A computer-readable recording medium storing a program for executing an image reading method,
Obtaining an image for the first lesion;
Extracting a first region representing a feature of the first lesion from the image;
Extracting a plurality of reference regions associated with the first lesion from a pre-stored database;
Comparing the extracted first region with the extracted plurality of reference regions; And
Selecting a first reference region associated with the first region from the plurality of reference regions according to the comparison result
Readable recording medium.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020140127807A KR20160035888A (en) | 2014-09-24 | 2014-09-24 | Apparatus and method for diagnosis support using endoscope |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020140127807A KR20160035888A (en) | 2014-09-24 | 2014-09-24 | Apparatus and method for diagnosis support using endoscope |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20160035888A true KR20160035888A (en) | 2016-04-01 |
Family
ID=55799228
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020140127807A KR20160035888A (en) | 2014-09-24 | 2014-09-24 | Apparatus and method for diagnosis support using endoscope |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20160035888A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20200005831A (en) * | 2018-07-09 | 2020-01-17 | 주식회사 셀바스에이아이 | Method for predicting cancer suspicious area and device for predicting cancer suspicious area using the same |
| CN113613543A (en) * | 2019-03-18 | 2021-11-05 | 奥林巴斯株式会社 | Diagnosis support device, diagnosis support method, and program |
-
2014
- 2014-09-24 KR KR1020140127807A patent/KR20160035888A/en active Search and Examination
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20200005831A (en) * | 2018-07-09 | 2020-01-17 | 주식회사 셀바스에이아이 | Method for predicting cancer suspicious area and device for predicting cancer suspicious area using the same |
| CN113613543A (en) * | 2019-03-18 | 2021-11-05 | 奥林巴斯株式会社 | Diagnosis support device, diagnosis support method, and program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111295127B (en) | Examination support device, endoscope device, and recording medium | |
| US10692198B2 (en) | Image processing apparatus, image processing method, image processing system, and non-transitory computer-readable storage medium for presenting three-dimensional images | |
| JP2015154918A (en) | Apparatus and method for lesion detection | |
| EP3046478A1 (en) | Image analysis techniques for diagnosing diseases | |
| EP3811334B1 (en) | Automatic liver segmentation in ct | |
| EP2397990B1 (en) | Image processing apparatus, image processing method, and image processing program | |
| JP7019815B2 (en) | Learning device | |
| JP3842171B2 (en) | Tomographic image processing device | |
| KR20220096453A (en) | Lesion detection method, device and program from endoscopic images using deep learning model | |
| KR20230118054A (en) | Method and system for predicting biomarker expression in medical image | |
| JP6843785B2 (en) | Diagnostic support system, diagnostic support method, and program | |
| KR20160035888A (en) | Apparatus and method for diagnosis support using endoscope | |
| JP5800549B2 (en) | Image processing apparatus, operation method of image processing apparatus, and image processing program | |
| CN111161852B (en) | Endoscope image processing method, electronic equipment and endoscope system | |
| US9754368B2 (en) | Region extraction apparatus, method, and program | |
| US20220202284A1 (en) | Endoscope processor, training device, information processing method, training method and program | |
| JP2011135936A (en) | Image processor, medical image diagnostic apparatus, and image processing program | |
| JP7213412B2 (en) | MEDICAL IMAGE EXTRACTION APPARATUS, MEDICAL IMAGE EXTRACTION METHOD, AND COMPUTER PROGRAM | |
| JP7498739B2 (en) | Method, system, and software program product for generating training data for endoscopy applications | |
| KR20200056871A (en) | lesion area detection device, lesion area detection method, and computer program | |
| JP5192751B2 (en) | Image processing apparatus, image processing method, and image processing program | |
| US10299864B1 (en) | Co-localization of multiple internal organs based on images obtained during surgery | |
| US12124960B2 (en) | Learning apparatus and learning method | |
| US20220230367A1 (en) | Information processing apparatus, information processing system, information processing method, and information processing program | |
| KR101619615B1 (en) | Apparatus and method for extracting tympanum scope |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| AMND | Amendment | ||
| E601 | Decision to refuse application | ||
| AMND | Amendment |