KR101887760B1 - 열화상카메라를 이용한 유방암 진단 장치 및 방법 - Google Patents
열화상카메라를 이용한 유방암 진단 장치 및 방법 Download PDFInfo
- Publication number
- KR101887760B1 KR101887760B1 KR1020160130805A KR20160130805A KR101887760B1 KR 101887760 B1 KR101887760 B1 KR 101887760B1 KR 1020160130805 A KR1020160130805 A KR 1020160130805A KR 20160130805 A KR20160130805 A KR 20160130805A KR 101887760 B1 KR101887760 B1 KR 101887760B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- breast cancer
- unit
- chest
- contour
- Prior art date
Links
- 206010006187 Breast cancer Diseases 0.000 title claims abstract description 158
- 208000026310 Breast neoplasm Diseases 0.000 title claims abstract description 157
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000003745 diagnosis Methods 0.000 title claims description 9
- 210000000481 breast Anatomy 0.000 claims abstract description 35
- 238000001931 thermography Methods 0.000 claims abstract description 32
- 238000010191 image analysis Methods 0.000 claims abstract description 31
- 238000004458 analytical method Methods 0.000 claims abstract description 20
- 210000000038 chest Anatomy 0.000 claims description 92
- 238000001514 detection method Methods 0.000 claims description 38
- 239000013598 vector Substances 0.000 claims description 33
- 238000001914 filtration Methods 0.000 claims description 32
- 238000007781 pre-processing Methods 0.000 claims description 21
- 239000011159 matrix material Substances 0.000 claims description 17
- 238000013528 artificial neural network Methods 0.000 claims description 10
- 230000002708 enhancing effect Effects 0.000 claims description 8
- 230000009466 transformation Effects 0.000 claims description 7
- 238000009826 distribution Methods 0.000 claims description 6
- 238000002405 diagnostic procedure Methods 0.000 claims description 2
- 239000006185 dispersion Substances 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 239000000284 extract Substances 0.000 description 4
- 230000004083 survival effect Effects 0.000 description 4
- 206010028980 Neoplasm Diseases 0.000 description 3
- 241000282465 Canis Species 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000013399 early diagnosis Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 238000009607 mammography Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000005855 radiation Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 235000008733 Citrus aurantifolia Nutrition 0.000 description 1
- 235000011941 Tilia x europaea Nutrition 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000004571 lime Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000004393 prognosis Methods 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000001757 thermogravimetry curve Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 238000012285 ultrasound imaging Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/20—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
- H04N23/23—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only from thermal infrared radiation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/30—Transforming light or analogous information into electric information
- H04N5/33—Transforming infrared radiation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10048—Infrared image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20048—Transform domain processing
- G06T2207/20061—Hough transform
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- Medical Informatics (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Molecular Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Toxicology (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Analysis (AREA)
Abstract
본 발명은 열화상 카메라를 이용한 유방암 진단 장치 및 방법에 관한 것으로, 더욱 상세하게는 열화상 카메라를 통해 촬영된 열화상 이미지로부터 가슴을 인식하고, 인식된 가슴에 대한 가슴 열화상 이미지로부터 유방암 열화상 분석 정보를 획득하고, 획득된 유방암 열화상 분석 정보 및 정상인의 가슴에 대한 유방암 열화상 분석 정보를 비교하여 유방암 여부를 판단하는 열화상카메라를 이용한 유방암 진단 장치 및 방법에 관한 것이다.
Description
본 발명은 열화상 카메라를 이용한 유방암 진단 장치 및 방법에 관한 것으로, 더욱 상세하게는 열화상 카메라를 통해 촬영된 열화상 이미지로부터 가슴을 인식하고, 인식된 가슴에 대한 가슴 열화상 이미지로부터 유방암 열화상 분석 정보를 획득하고, 획득된 유방암 열화상 분석 정보 및 정상인의 가슴에 대한 유방암 열화상 분석 정보를 비교하여 유방암 여부를 판단하는 열화상카메라를 이용한 유방암 진단 장치 및 방법에 관한 것이다.
유방암은 전세계적으로 여성 암의 약 25%를 차지하여 높은 발생률과 사망률을 가지는 번식력이 왕성한 암 중 하나이다. 제1기에서 제3기의 유방암에 대한 2012년 데이터에 따르면 1년 생존률은 97% 이상이며, 제4기에 대한 생존률은 71%이다. 또한, 환자의 5년 생존률은 1기 진단 시 97%에서 4기 진단 시 15%로 급격하게 떨어진다.
유방암 환자의 생존률 및 예후에서의 변화는 유방암의 초기 검출에 크게 의존한다. 따라서 유방암의 조기 진단은 매우 중요하며, 유방암의 조기 진단을 위해 다양한 진단 방법들이 개발되어 왔다.
유방암 진단 방법에는 자가검진, 유방촬영술, 유방초음파, 자기공명영상(MRI) 등이 있다.
자가검진 방식은 자신의 유방을 스스로 만져 보아 멍울이나 다른 이상이 없는지를 확인하는 것으로, 비용이 들지 않고 위험성이 없다는 장점이 있으나 정확성이 떨어진다는 단점이 있다.
유방촬영술 방식은 유방의 특정부위만을 확대하여 검사를 시행하여 진단에 필요한 영상을 얻기 위해서 압박한 상태의 유방을 촬영하는 것으로, 검사 시 통증을 유발하고, 검사 비용이 많이 소요되는 문제점을 갖는다.
유방초음파 방식은 상대적으로 저렴하고 방사선에 환자를 노출시키지 않는 다는 점에서 이점을 가지나, 미세한 석회물질을 찾아내기는 어렵다는 문제점을 갖는다.
자기공명영상(MRI) 방식은 암의 종양을 검출하는 데 사용될 수 있으나, 장치 설치 및 유지 보수에 드는 비용이 상당이 높은 문제점이 있으며, 이로 인해 의료수가가 높아지는 문제점이 있었다.
이와 같이 유방암 검출을 위한 보다 정확하게 수행할 수 있으면서도 해당 의료장치의 설치 및 유지비용이 적게 소요되고 의료수가를 낮출 수 있는 유방암 진단 장치의 개발이 요구되어지고 있다.
이런 요구와 고급 센서 기술 및 화성 처리 기술이 발전하고, 열화상 카메라를 구비하는 스마트폰 등의 모바일 단말기의 보급에 따라 소형 저비용의 열화상 카메라를 이용한 유방암 진단에 상당한 관심이 집중되고 있다.
따라서 본 발명의 목적은 열화상 카메라를 통해 촬영된 열화상 이미지로부터 가슴을 인식하고, 인식된 가슴에 대한 가슴 열화상 이미지로부터 유방암 열화상 분석 정보를 획득하고, 획득된 유방암 열화상 분석 정보 및 정상인의 가슴에 대한 유방암 열화상 분석 정보를 비교하여 유방암 여부를 판단하는 열화상카메라를 이용한 유방암 진단 장치 및 방법을 제공함에 있다.
상기와 같은 목적을 달성하기 위한 본 발명에 따른 열화상카메라를 이용한 유방암 진단장치는: 열화상카메라를 포함하고, 환자의 가슴부분을 포함하는 신체를 상기 열화상카메라로 촬영하여 열화상 이미지를 출력하는 열화상 이미지 획득부; 상기 열화상 이미지에서 배경을 삭제하고, 배경이 삭제된 신체에서 가슴을 인식한 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 출력하는 이미지 전처리를 수행하는 이미지 전처리부; 및 정상인의 유방암 열화상 분석 정보를 저장하고 있으며, 상기 이미지 전 처리된 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 분석하여 특징 벡터들을 추출하고 추출된 특징 벡터들을 인공신경망을 적용하여 분류하고 상기 특징 벡터들을 매개변수로 하는 유방암 열화상 분석 정보를 생성하고, 생성된 상기 유방암 열화상 분석 정보와 상기 정상인의 유방암 열화상 분석 정보를 비교하여 상기 좌측 및 우측 가슴의 유방암 존재 여부를 판단하는 유방암 판정부를 포함하는 것을 특징으로 한다.
상기 이미지 전처리부는, 상기 열화상 이미지에서 배경을 삭제하여 출력하는 이미지 배경 제거부; 및 배경이 삭제된 상기 열화상 이미지로부터 관심영역인 가슴을 인식하여 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 출력하는 관심영역 설정부를 포함하는 것을 특징으로 한다.
상기 이미지 배경 제거부는, 상기 열화상 이미지 획득부로부터 출력되는 상기 열화상 이미지의 RGB 채널 중 레드(R) 채널의 열화상 이미지를 선택하여 출력하는 채널 선택부; 상기 레드 채널의 열화상 이미지를 가우시안 필터링을 수행하여 출력하는 가우시안 필터링부; 상기 가우시안 필터링된 레드 채널의 열화상 이미지로부터 신체의 윤곽선을 검출하는 윤곽선 검출부; 및 상기 검출된 윤곽선에 근거하여 상기 RGB 채널 모두를 포함하는 열화상 이미지로부터 배경을 삭제하는 배경 삭제부를 포함하는 것을 특징으로 한다.
상기 이미지 배경 제거부는, 상기 검출된 윤곽선에 허프 변환을 수행하여 상기 윤곽선을 더 뚜렷하게 강화하는 윤곽선 강화부를 더 포함하는 것을 특징으로 한다.
관심영역 설정부는, 상기 배경이 제거된 RGB 채널 모두를 포함하는 열화상 이미지로부터 그린 채널만 선택하여 출력하는 채널 선택부; 상기 그린 채널의 열화상 이미지를 가우시안 필터링을 수행하여 출력하는 가우시안 필터링부; 가우시안 필터링된 그린 채널의 열화상 이미지로부터 가슴부분을 포함하는 신체의 윤곽선을 검출하여 출력하는 윤곽선 검출부; 상기 윤곽선 검출부에서 검출된 신체 윤곽선으로부터 허프 원 변환을 수행하여 가슴부분에 대응하는 원 검출을 수행하는 윤곽선 강화부; 및 상기 윤곽선 검출부에서 검출된 원에 기초하여 이미지관심영역(Region of Interest: ROI) 검출을 통해 상기 RGB 채널 모두를 포함하는 열화상 이미지로부터 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 추출하는 유방 검출부를 포함하는 것을 특징으로 한다.
상기 윤곽선 강화부는, 상기 허프 원 변환의 매개변수인 최소 반지름 값이 여성 가슴의 평균 반지름 값으로 설정되고, 가슴을 검출하기 위한 가슴 사이의 거리를 정의하는 좌측 및 우측 원의 중심부 사이의 최소 거리 값이 50으로 설정되는 것을 특징으로 한다.
유방암 판정부는, 상기 이미지 전 처리된 좌측 및 우측 화상 이미지를 수직, 수평 및 두 대각선에 대한 동시발생행렬에 근거한 특징 벡터들을 추출하여 출력하는 동시발생행렬 특성 생성부; 및 정상인의 유방암 열화상 분석 정보를 저장하고 있으며, 추출된 특징 벡터들에 인공신경망을 적용하여 유방암 열화상 분석 정보를 생성하고, 상기 정상인의 유방암 열화상 분석 정보를 비교하여 상기 좌측 및 우측 가슴의 유방암 존재 여부를 판단하는 유방암 분석부를 포함하는 것을 특징으로 한다.
상기 유방암 판정부는, 상기 좌측 및 우측 가슴 화상 이미지 각각의 RGB 채널별 특징 벡터에 근거하여 측정된 히스토그램의 분포를 분석하여 출력하는 히스토그램 분석부를 더 포함하고, 상기 유방암 분석부는, 정상인의 좌측 및 우측 화상 이미지에 대한 히스토그램을 더 저장하고 있고, 상기 정상인의 히스토그램 및 상기 히스토그램 분석부를 통해 RGB 채널별 특징 정보에 근거하여 측정된 히스토그램을 비교하여 1차적으로 유방암 여부를 판단하고, 상기 유방암 열화상 분석정보에 의한 2차 유방암 여부를 판단하여 둘 모두 유방임인 것으로 판단되면 최종적으로 해당 가슴에 유방암이 존재하는 것으로 판단하는 것을 특징으로 한다.
상기 유방암 판정부는, 상기 특징 벡터로 수직, 수평 및 두 대각선 방향에서의 동시발생행렬별 에너지(Energy), 엔트로피(Entropy), 콘트라스트(Contrast), 상관성(Correlation), 동종성(Homogeneity)과, RGB 채널별 평균(Mean), 분산(Variance), 비대칭률(Skewness), 첨도(Kurtosis)를 포함하는 것을 특징으로 한다.
상기와 같은 목적을 달성하기 위한 본 발명에 따른 열화상카메라를 이용한 유방암 진단 방법은: 열화상 이미지 획득부가 환자의 가슴부분을 포함하는 신체를 열화상카메라로 촬영하여 열화상 이미지를 출력하는 열화상 이미지 획득 단계; 이미지 전처리부가 상기 열화상 이미지에서 배경을 삭제하고, 배경이 삭제된 신체에서 가슴을 인식한 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 출력하는 이미지 전처리를 수행하는 이미지 전처리 단계; 및 유방암 판정부가 상기 이미지 전 처리된 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 분석하여 특징 벡터들을 추출하고 추출된 특징 벡터들을 인공신경망을 적용하여 분류하고 상기 특징 벡터들을 매개변수로 하는 유방암 열화상 분석 정보를 생성하고, 생성된 상기 유방암 열화상 분석 정보와 정상인의 유방암 열화상 분석 정보를 비교하여 상기 좌측 및 우측 가슴의 유방암 존재 여부를 판단하는 유방암 판정 단계를 포함하는 것을 특징으로 한다.
상기 이미지 전처리 단계는, 이미지 배경 제거부가 상기 열화상 이미지에서 배경을 삭제하여 출력하는 이미지 배경 제거 단계; 및 관심영역 설정부가 배경이 삭제된 상기 열화상 이미지로부터 관심영역인 가슴을 인식하여 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 출력하는 관심영역 설정 단계를 포함하는 것을 특징으로 한다.
상기 이미지 배경 제거 단계는, 채널 선택부가 상기 열화상 이미지 획득부로부터 출력되는 상기 열화상 이미지의 RGB 채널 중 레드(R) 채널을 선택하여 출력하는 채널 선택 단계; 가우시안 필터링부가 상기 레드 채널의 열화상 이미지를 가우시안 필터링을 수행하여 출력하는 가우시안 필터링 단계; 윤곽선 검출부가 상기 가우시안 필터링된 레드 채널의 열화상 이미지로부터 신체의 윤곽선을 검출하는 윤곽선 검출 단계; 및 배경 삭제부가 상기 검출된 윤곽선에 근거하여 상기 RGB 채널 모두를 포함하는 열화상 이미지로부터 배경을 삭제하는 배경 삭제 단계를 포함하는 것을 특징으로 한다.
상기 이미지 배경 제거 단계는, 윤곽선 강화부가 상기 검출된 윤곽선에 허프 변환 수행하여 윤곽선을 더 뚜렷하게 강화하는 윤곽선 강화 단계를 더 포함하는 것을 특징으로 한다.
관심영역 설정 단계는, 상기 배경이 제거된 RGB 채널 모두를 포함하는 열화상 이미지로부터 그린 채널만 선택하여 출력하는 채널 선택 단계; 상기 그린 채널의 열화상 이미지를 가우시안 필터링을 수행하여 출력하는 가우시안 필터링 단계; 가우시안 필터링된 그린 채널의 열화상 이미지로부터 가슴부분을 포함하는 신체의 윤곽선을 검출하여 출력하는 윤곽선 검출 단계; 윤곽선 검출부에서 검출된 신체 윤곽선으로부터 허프 원 변환을 수행하여 가슴부분에 대응하는 원 검출을 수행하는 윤곽선 강화 단계; 및 윤곽선 검출부에서 검출된 원에 기초하여 이미지관심영역(ROI) 검출을 통해 상기 RGB 채널 모두를 포함하는 열화상 이미지로부터 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 추출하는 유방 검출 단계를 포함하는 것을 특징으로 한다.
상기 윤곽선 강화 단계는, 윤곽선 강화부가 상기 허프 원 변환의 매개변수인 최소 반지름 값을 여성 가슴의 평균 반지름 값으로 설정되고, 가슴을 검출하기 위한 가슴 사이의 거리를 정의하는 좌측 및 우측 원의 중심부 사이의 최소 거리 값을 50으로 설정되는 것을 특징으로 한다.
유방암 판정 단계는, 히스토그램 분석부를 통해 상기 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지 각각의 히스토그램을 분석하여 출력하는 히스토그램 분석 단계; 상기 이미지 전 처리된 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 분석하여 특징 벡터들을 추출하여 출력하는 특징 정보 생성 단계; 및 정상인의 유방암 열화상 분석 정보를 저장하고 있으며, 추출된 특징 벡터들에 인공신경망을 적용하여 분류하고 상기 특징 벡터들을 매개변수로 하는 유방암 열화상 분석 정보를 생성하고, 상기 정상인의 유방암 열화상 분석 정보를 비교하여 상기 좌측 및 우측 가슴의 유방암 존재 여부를 판단하는 유방암 분석 단계를 포함하는 것을 특징으로 한다.
상기 유방암 분석 단계는, 유방암 분석부가 정상인의 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지에 대한 히스토그램을 더 저장하고 있고, 상기 정상인의 히스토그램 및 상기 히스토그램 분석부를 통해 측정된 히스토그램을 비교하여 1차적으로 유방암 여부를 판단하는 히스토그램 분석 단계를 더 포함하고, 상기 유방암 분석 단계 후, 상기 히스토그램 분석에 의한 유방암 여부 및 상기 유방암 열화상 분석정보에 의한 유방암 여부를 판단에서 둘 모두 유방임인 것으로 판단되면 최종적으로 해당 가슴에 유방암이 존재하는 것으로 판단하는 것을 특징으로 한다.
본 발명은 열화상카메라를 이용하여 유방암을 진단함으로써 유방암 진단 장치의 생산단가를 낮출 수 있고, 의료수가를 낮출 수 있는 효과를 갖는다.
또한, 본 발명은 열화상카메라를 이용하므로 환자가 방사능 등의 해로운 요소에 노출되지 않도록 할 수 있는 효과를 갖는다.
즉, 본 발명의 열화상카메라를 이용한 유방암 진단장치는 다른 유방암 진단 방법에 비해 빠르고, 경제적이며, 보다 안전해서 임사부와 같은 민감한 환자에게도 사용할 수 있는 효과를 갖는다.
또한, 본 발명은 1인 당 한 대 꼴로 보유하고 있고 열화상 카메라가 장착되어 있는 스마트폰 등의 모바일 단말기를 통해서도 개인들이 직접 유방암을 진단할 수 있으므로, 일반인들에게 간편하고 저렴한 1차 유방암 진단 수단을 제공할 수 있으므로 유방암을 조기 진단할 수 있는 효과를 갖는다.
도 1은 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 구성을 나타낸 도면이다.
도 2는 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 이미지 배경 제거부의 상세 구성을 나타낸 도면이다.
도 3은 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 관심영역 설정부의 상세 구성을 나타낸 도면이다.
도 4는 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 유방암 판정부의 상세 구성을 나타낸 도면이다.
도 5는 본 발명의 일실시예에 따라 적용된 정상인과 유방암 환자의 열화상 이미지를 나타낸 도면이다.
도 6은 본 발명에 따른 원본 화상 이미지 및 배경이 제거된 화상 이미지를 나타낸 도면이다.
도 7은 본 발명의 일실시예에 따른 RGB 채널별 열화상 이미지를 나타낸 도면이다.
도 8은 본 발명에 따른 가우시안 필터링의 수행 여부에 따른 윤곽선 검출 비교 결과를 설명하기 위한 윤관선 이미지들을 나타낸 도면이다.
도 9는 본 발명에 따른 허프 변환 수행 시 검출된 윤곽선 이미지를 나타낸 도면이다.
도 10은 본 발명에 따른 허프 변환을 이용한 유방 인식 및 ROI 검출에 의해 분리된 좌우 가슴영역의 추출 방법을 설명하기 위한 도면이다.
도 11은 발명에 따른 유방암 검출 방법을 설명하기 위한 정상인과 유방암 환자의 히스토그램을 나타낸 도면이다.
도 12는 본 발명에 따른 유방암 검출 방법을 설명하기 위한 동시발생행렬 생성 방법을 설명하기 위한 도면이다.
도 13은 본 발명에 따라 생성된 동시발생행렬에 대한 강도 레벨을 서로 다른 색으로 구분하여 나타낸 도면이다.
도 2는 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 이미지 배경 제거부의 상세 구성을 나타낸 도면이다.
도 3은 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 관심영역 설정부의 상세 구성을 나타낸 도면이다.
도 4는 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 유방암 판정부의 상세 구성을 나타낸 도면이다.
도 5는 본 발명의 일실시예에 따라 적용된 정상인과 유방암 환자의 열화상 이미지를 나타낸 도면이다.
도 6은 본 발명에 따른 원본 화상 이미지 및 배경이 제거된 화상 이미지를 나타낸 도면이다.
도 7은 본 발명의 일실시예에 따른 RGB 채널별 열화상 이미지를 나타낸 도면이다.
도 8은 본 발명에 따른 가우시안 필터링의 수행 여부에 따른 윤곽선 검출 비교 결과를 설명하기 위한 윤관선 이미지들을 나타낸 도면이다.
도 9는 본 발명에 따른 허프 변환 수행 시 검출된 윤곽선 이미지를 나타낸 도면이다.
도 10은 본 발명에 따른 허프 변환을 이용한 유방 인식 및 ROI 검출에 의해 분리된 좌우 가슴영역의 추출 방법을 설명하기 위한 도면이다.
도 11은 발명에 따른 유방암 검출 방법을 설명하기 위한 정상인과 유방암 환자의 히스토그램을 나타낸 도면이다.
도 12는 본 발명에 따른 유방암 검출 방법을 설명하기 위한 동시발생행렬 생성 방법을 설명하기 위한 도면이다.
도 13은 본 발명에 따라 생성된 동시발생행렬에 대한 강도 레벨을 서로 다른 색으로 구분하여 나타낸 도면이다.
이하 첨부된 도면을 참조하여 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 구성 및 동작을 설명하고, 상기 장치에서의 유방암 진단 방법을 설명한다.
도 1은 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 구성을 나타낸 도면이고, 도 5는 본 발명의 일실시예에 따라 적용된 정상인과 유방암 환자의 열화상 이미지를 나타낸 도면이며, 도 6은 본 발명에 따른 원본 화상 이미지 및 배경이 제거된 화상 이미지를 나타낸 도면이다. 도 5의 (가)는 정상인의 RGB 열화상 이미지이고, (나)는 암환자의 RGB 열화상 이미지이다. 이하 도 1, 도 5 및 도 6을 참조하여 설명한다.
본 발명에 따른 열화상카메라를 이용한 유방암 진단장치는 열화상 이미지 획득부(10), 이미지 전처리부(100) 및 유방암 판정부(400)를 포함한다.
열화상 이미지 획득부(10) 열화상 카메라(미도시)를 포함하여 환자의 신체 중 가슴부분을 포함하는 신체 일부를 촬영하고 상기 가슴 부분을 포함하는 신체에 대한 RGB 열화상 이미지를 이미지 전처리부(100)로 전송한다. 상기 RGB 열화상 이미지란 도 5에서 나타낸 바와 같이 레드(Red: R), 그린(Green: G) 및 블루(Blue: B) 모두를 포함하고 있는 열화상 이미지를 의미한다. 레드만을 포함하는 열화상 이미지를 이하 레드 채널 열화상 이미지라 하고, 그린만을 포함하는 열화상 이미지를 이하 그린 채널 열화상 이미지라 한다. 또한, 상기 RGB 열화상 이미지는 레드 채널, 그린 채널, 블루 채널 이외에도 그레이(회색) 채널 등을 더 포함하고 있을 것이다.
도 5에서 나타낸 바와 같이 열화상 이미지 획득부(10)는 열화상 촬영을 받은 환자가 정상인 경우 도 5의 (가)와 같은 RGB 열화상 이미지를 출력하고, 환자가 유방암에 걸린 경우 도 5의 (나)와 같은 RGB 열화상 이미지를 출력할 것이다. 그러나 도 4의 도면만으로 유방암 여부를 확정할 수는 없을 것이다. 그러나 통상적으로 정상인의 RGB 열화상 이미지는 전체적으로 열의 분포가 균등하나, 유방암 환자의 RGB 열화상 이미지는 종양이 있는 우측 가슴의 열 분포가 다른 영역에 비해 급격하게 달라지는 것을 볼 수 있다.
이미지 전처리부(100)는 열화상 이미지 획득부(10)로부터 도 5의 (가)와 같은 RGB 열화상 이미지를 입력받고, 도 6의 (가)와 같은 RGB 열화상 이미지에서 도 6의 (나)와 같이 배경이 삭제된 RGB 열화상 이미지를 획득하며, 상기 배경이 삭제된 RGB 열화상 이미지로부터 가슴을 인식하여 좌측 가슴 RGB 채널 열화상 이미지 및 우측 가슴 RGB 채널 열화상 이미지를 유방암 판정부(400)로 출력한다.
유방암 판정부(400)는 정상인의 히스토그램 및 유방암 열화상 분석 정보를 저장하고 있으며, 상기 히스토그램 및 히스토그램의 특징 벡터에 의한 1차 유방암 여부 판단 및 상기 유방암 열화상 분석 정보의 특징 벡터를 활용한 2차 유방암 여부 판단 중 하나 이상에 의해 대상 환자의 유방암 여부를 결정하도록 구성될 수 있을 것이다. 그러나 1차 유방암 여부 판단에서 유방암 판정으로 나온다고 해도 해당 환자가 유방암에 걸렸다고 확정할 수 없다. 따라서 유방암 판정부(400)는 2차 유방암 여부 판단만 수행되거나, 2차 유방암 여부 판단에 보조적인 판단 수단으로 1차 유방암 여부 판단을 적용하는 것이 바람직할 것이다.
상기 유방암 판정부(400)는 상기 이미지 전 처리된 좌측 및 우측 RGB 채널 열화상 이미지를 분석하여 특징 벡터들을 추출하고 추출된 특징 벡터들에 인공신경망을 적용하여 유방암 열화상 분석 정보를 생성하고, 상기 정상인의 유방암 열화상 분석 정보를 비교하여 상기 좌측 및 우측 가슴의 유방암 존재 여부를 판단(2차 유방암 여부 판단)한다.
도 2는 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 이미지 배경 제거부의 상세 구성을 나타낸 도면이고, 도 7은 본 발명의 일실시예에 따른 RGB 채널별 열화상 이미지를 나타낸 도면이고, 도 8은 본 발명에 따른 가우시안 필터링의 수행 여부에 따른 윤곽선 검출 비교 결과를 설명하기 위한 윤관선 이미지들을 나타낸 도면이며, 도 9는 본 발명에 따른 허프 변환 수행 시 검출된 윤곽선 이미지를 나타낸 도면이다. 이하 도 2 및 도 7 내지 도 9를 참조하여 설명한다.
이미지 배경 제거부(200)는 채널 선택부(210), (제1)가우시안 필터링부(220), 윤곽선 검출부(230) 및 배경 삭제부(250)를 포함하고, 선택적으로 윤곽선 강화부(240)를 더 포함할 수 있을 것이다.
채널 선택부(210)는 열화상 이미지 획득부(10)로부터 입력되는 RGB 열화상 이미지로부터 레드(R) 채널 열화상 이미지만을 선택하여 출력한다.
이는 도 7 및 하기 표 1에서 보이는 바와 같이 레드 채널의 열화상 이미지의 평균 및 표준편차가 다른 채널의 평균 및 표준편차보다 작아 환자의 가슴부분을 포함하는 신체의 윤곽선을 검출하는 데 더 용이하게 때문이다.
| 구분 | 레드(R) | 그린(G) | 블루(B) |
| 평균 | 24.44 | 60.52 | 128.83 |
| 표준편차 | 40.39 | 40.80 | 42.60 |
가우시안 필터링부(220)는 상기 채널 선택부(210)로부터 입력되는 레드 채널 열화상 이미지에 대해 가우시안 필터링을 수행하여 출력한다.
윤곽선 검출부(230)는 상기 가우시안 필터링부(220)에서 가우시안 필터링된 레드 채널 열화상 이미지로부터 윤곽선을 검출하여 출력하는 것으로 캐니 엣지(Canny Edge) 프로세스가 적용된다.
본 발명의 이미지 배경 제거부(200)에서 상기 가우신안 필터링부(220)는 선택적으로 구성될 수 있을 것이다. 그러나 도 8(나)에서 가우시안 필터링된 레드 채널 열화상 이미지(711)에 대해 캐니 엣지 프로세스를 수행하여 추출된 윤곽선(712)이 도 8의 (가)와 같이 레드 채널 열화상 이미지(701)를 바로 캐니 엣지 프로세스를 수행하여 추출된 윤곽선(702)보다 더 선명함을 확인할 수 있다.
따라서 가우시안 필터링부(220)를 통해 가우시안 필터링을 수행한 후 윤곽선을 검출하는 것이 바람직할 것이다.
윤곽선 강화부(240) 또한 선택적으로 구성될 수 있으며, 허프 변환(Hough Transform) 프로세스를 수행하여 도 9와 같이 상기 윤곽선 검출부(230)에서 검출된 윤곽선을 더 뚜렷하게 처리한다.
배경 삭제부(250)는 상기 열화상 이미지 획득부(10)로부터 RGB 채널 열화상 이미지를 입력받고, 윤곽선 강화부(240)로부터 윤곽선을 입력받아 윤곽선에 근거한 가우시안 필터링을 수행하여, 상술한 도 6과 같이 상기 RGB 채널 열화상 이미지로부터 배경을 삭제한 후 관심영역 설정부(300)로 출력한다.
도 3은 본 발명에 따른 열화상카메라를 이용한 유방암 진단 장치의 관심영역 설정부의 상세 구성을 나타낸 도면이고, 도 10은 본 발명에 따른 허프 변환을 이용한 유방 인식 및 ROI 검출에 의해 분리된 좌우 가슴영역의 추출 방법을 설명하기 위한 도면이다. 이하 도 3 및 도 10을 참조하여 설명한다.
관심영역 설정부(300)는 채널 선택부(310), 가우시안 필터링부(320), 윤곽선 검출부(330) 및 윤곽선 강화부(340) 및 유방 검출부(350)를 포함한다.
채널 선택부(310)는 이미지 배경 제거부(200)로부터 입력되는 배경이 제거된 RGB 열화상 이미지로부터 그린(G) 채널 열화상 이미지만을 선택하여 출력한다. 그린 채널을 선택하는 것은 촬영된 환자의 가슴 부분 검출에 더 유리하게 때문일 것이다
가우시안 필터링부(320)는 배경이 제거된 상기 그린 채널 열화상 이미지를 가우시안 필터링을 수행한 후 윤곽선 검출부(330)로 출력한다. 가우시안 필터링을 수행함으로써 후술할 윤곽선 강화부(340)에서 실제 가슴에 대응하는 원 윤곽선의 일치도를 높일 수 있다.
윤곽선 검출부(330)는 상기 가우시안 필터링된 그린 채널 열화상 이미지에 캐니 엣지 프로세스를 적용하여 도 10의 가에 보이는 바와 같이 상기 그린 채널 열화상 이미지로부터 가슴 부분 윤곽선을 포함하는 신체의 윤곽선을 검출하여 출력한다.
윤곽선 강화부(340)는 상기 윤곽선 검출부(330)에서 검출된 가슴부분 윤곽선을 포함하는 신체 윤곽선에 허프 원 변환 프로세스를 적용하여 도 10의 (나)와 같이 가습부분에 대응하는 원 윤곽선을 검출한다. 도 10의 (나)는 검출된 원 윤곽선을 배경이 제거된 그린 채널 열화상 이미지에 적용한 경우를 나타낸 것이다.
유방 검출부(350)는 상기 검출된 원 윤곽선을 배경이 제거된 RGB 채널 열화상 이미지에 적용하여 도 10의 (다)와 같이 원형태의 RGB 채널의 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 검출하여 유방암 판정부(400)로 출력한다. 이미지관심영역(ROI) 추출률을 높이기 위해 유방 검출부(350)는 상기 원의 최소 반지름 값이 일반 여성 가슴의 평균 반지름 값으로 설정되었으며, 허프 원 변환으로 검출된 원들의 중심부 사이의 최소 거리 값이 50으로 설정되었다.
도 4는 본 발명에 따른 열화상카메라를 이용한 유방암 진단장치의 유방암 판정부의 상세 구성을 나타낸 도면이고, 도 11은 발명에 따른 유방암 검출 방법을 설명하기 위한 정상인과 유방암 환자의 히스토그램을 나타낸 도면이이며, 도 12는 본 발명에 따른 유방암 검출 방법을 설명하기 위한 동시발생행렬 생성 방법을 설명하기 위한 도면이고, 도 13은 본 발명에 따라 생성된 동시발생행렬에 대한 강도 레벨을 서로 다른 색으로 구분하여 나타낸 도면이다. 이하 도 4, 도 11 내지 도 13을 참조하여 설명한다.
유방암 판정부(400)는 히스토그램 분석부(410), 동시발생행렬 특성 생성부(420) 및 유방암 분석부(430)를 포함한다.
히스토그램 분석부(410)는 정상인의 좌측 및 우측 가슴 열화상 이미지에 대한 히스토그램을 미리 저장하여 가지고 있으며, 관심영역 설정부(300)로부터 입력되는 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지로부터 각각의 히스토그램을 생성하여 출력한다. 상기 히스토그램은 도 11에서 보이는 바와 같이 열화상 이미지의 색(열) 강도 레벨 대 픽셀 수에 대한 히스토그램이다.
상기 히스토그램은 주어진 좌측 및 우측 가슴 열화상 이미지 내의 상기 색 강도의 존재 확률 분포함수를 나타내며, 하기 수학식 1에 의해 표현될 수 있다.
여기서, p는 열화상 이미지의 픽셀 값이고, m 및 n은 이미지의 너비와 높이를 나타낸다.
도 11은 상기 수학식 1에 의해 생성되는 히스토그램으로, (가)는 정상인의 히스토그램이고, (나)는 유방암이 있는 가능성이 높은 환자의 히스토그램을 나타낸 것이다.
상기 히스토그램에 적용될 수 있는 특징 벡터로는 평균(Mean), 표준편차(Standard Deviation), 비대칭률(Skewness), 첨도(Kurtosis) 등이 될 수 있을 것이다.
상기 평균은 RGB 채널 열화상 이미지의 RGB 채널의 평균 픽셀 값이고, 표준편차는 이미지의 분산에 제곱근을 연산한 값이며, 비대칭률은 색상분포에 대한 대칭정도를 나타낸 값이며, 첨도는 정규 분포에 대한 분포를 측정한 값이다.
상기 평균, 표준편차, 비대칭률 및 첨도는 하기 수학식 2에 의해 구해질 수 있을 것이다.
동시발생행렬 특성 생성부(420)는 도 12에서 나타낸 바와 같이 관심영역 설정부(300)로부터 입력되는 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지 각각으로부터 그레이 레벨(채널)(1201)에서의 동시발생행렬(1202)을 생성하고, 이미지 N*N 행렬 마스크를 사용하여 발생 빈도를 특정 값으로 지정하고, 수평, 수직, 서로 다른 두 대각선 방향 관계에서 픽셀의 쌍을 구한다. 동시발생행렬은 이차적 통계적 특징을 정의하기 위해서 사용한다.
동시발생행렬에 적용되는 특징 벡터로는 에너지(Energy), 콘트라스트(Contrast), 동종성(Homogeneity) 및 상관성(Correlation) 등이 될 수 있을 것이다.
상기 에너지는 동시발생행렬의 제곱된 요소들의 합의 균일성을 의미하고, 엔트로피는 통계 임의성, 즉 불확실성을 측정하는 값이며, 콘트라스트는 이미지에서의 지역 변동성을 측정할 수 있고, 동종성은 서로 다른 두 대각선 방향에 대하여 동시발생행렬의 원소 분포를 측정하며, 상관성은 픽셀 사이의 관계를 타나내는 것으로 하기 수학식 3으로 계산될 수 있을 것이다.
상기 수학식 3의 각 특징벡터들에 대해서는 이 기술분야의 당업자에게 잘 알려져 있는 기술이므로 상세한 설명을 생략한다.
상기 동시발생행렬 특성 생성부(420)는 구해진 픽셀 쌍을 도 13과 같이 색 강도 레벨로 변환하여 출력하도록 구성될 수도 있을 것이다.
유방암 분석부(430)는 히스토그램에 기반한 RGB 채널별 평균, 분산, 비대칭률, 첨도, 수직 수평, 서로 다른 두 대각선 방향에서의 동시발생행렬별로 에너지, 엔트로피, 콘트라스트, 동종성, 상관성 등의 특징 벡터 값들을 인공신경망을 적용하여 분류하고, 도 11과 같이 정상인의 히스토그램 및 계산된 히스토그램을 비교하고, 도 13과 같이 상기 동시발생행렬 특성 생성부(420)에서 출력되는 색 강도 레벨 정보 및 정상인의 가슴 열화상 이미지에 대한 색 강도 레벨 정보를 비교하여 열화상 이미지를 촬영한 환자의 유방암 여부를 판단하도록 구성될 수도 있으며, 상기 각 특징 벡터별로 정상인의 특징 벡터와 상기 환자의 특징 벡터들을 비교하여 유방암 여부를 판단할 수도 있을 것이다.
또한, 유방암 분석부(430)는 상기 환자의 오른쪽 및 왼쪽 가슴 열화상 이미지의 상대 엔트로피를 하기 수학식 4에 의해 계산하고, 계산된 상기 환자의 엔트로피와 정상인의 상대 엔트로피를 비교하여 유방암 발병 여부를 판단하도록 구성될 수도 있을 것이다. 하기 표 2는 유방암 환자와 정상인의 그린 채널 및 그레이 채널에서의 상대 엔트로피 차이 및 그에 따른 유방암 판정 결과를 나타낸 것이다.
또한, 유방암 분석부(430)는 상술한 방법들 중 둘 이상을 조합하여 환자의 유방암 발명 여부를 판단하도록 구성될 수도 있을 것이다.
한편, 본 발명은 전술한 전형적인 바람직한 실시예에만 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 개량, 변경, 대체 또는 부가하여 실시할 수 있는 것임은 당해 기술분야에서 통상의 지식을 가진 자라면 용이하게 이해할 수 있을 것이다. 이러한 개량, 변경, 대체 또는 부가에 의한 실시가 이하의 첨부된 특허청구범위의 범주에 속하는 것이라면 그 기술사상 역시 본 발명에 속하는 것으로 보아야 한다.
10: 열화상 이미지 획득부 100: 이미지 전처리부
200: 이미지 배경 제거부 210: 채널 선택부(레드)
220: 가우시안 필터링부 230: 윤곽선 검출부
240: 윤곽선 강화부 250: 배경 삭제부
300: 관심영역 설정부 310: 채널 선택부(그린)
320: 가우시안 필터링부 330: 윤곽선 검출부
340: 윤곽선 강화부 350: 유방 검출부
400: 유방암 판정부 410: 히스토그램 분석부
420: 동시발생행렬 특성 생성부 430: 유방암 분석부
200: 이미지 배경 제거부 210: 채널 선택부(레드)
220: 가우시안 필터링부 230: 윤곽선 검출부
240: 윤곽선 강화부 250: 배경 삭제부
300: 관심영역 설정부 310: 채널 선택부(그린)
320: 가우시안 필터링부 330: 윤곽선 검출부
340: 윤곽선 강화부 350: 유방 검출부
400: 유방암 판정부 410: 히스토그램 분석부
420: 동시발생행렬 특성 생성부 430: 유방암 분석부
Claims (18)
- 열화상카메라를 포함하고, 환자의 가슴부분을 포함하는 신체를 상기 열화상카메라로 촬영하여 열화상 이미지를 출력하는 열화상 이미지 획득부;
상기 열화상 이미지에서 배경을 삭제하고, 배경이 삭제된 신체에서 가슴을 인식한 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 출력하는 이미지 전처리를 수행하는 이미지 전처리부; 및
정상인의 유방암 열화상 분석 정보를 저장하고 있으며, 상기 이미지 전 처리된 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 분석하여 특징 벡터들을 추출하고 추출된 특징 벡터들을 인공신경망을 적용하여 분류하고 상기 특징 벡터들을 매개변수로 하는 유방암 열화상 분석 정보를 생성하고, 생성된 상기 유방암 열화상 분석 정보와 상기 정상인의 유방암 열화상 분석 정보를 비교하여 상기 좌측 및 우측 가슴의 유방암 존재 여부를 판단하는 유방암 판정부를 포함하되,
유방암 판정부는,
상기 이미지 전 처리된 좌측 및 우측 화상 이미지를 수직, 수평 및 두 대각선에 대한 동시발생행렬에 근거한 특징 벡터들을 추출하여 출력하는 동시발생행렬 특성 생성부;
상기 좌측 및 우측 가슴 화상 이미지 각각의 RGB 채널별 특징 벡터에 근거하여 측정된 히스토그램의 분포를 분석하여 출력하는 히스토그램 분석부; 및
정상인의 유방암 열화상 분석 정보 및 정상인의 좌측 및 우측 화상 이미지에 대한 히스토그램을 저장하고 있으며, 상기 정상인의 히스토그램 및 상기 히스토그램 분석부를 통해 RGB 채널별 특징 정보에 근거하여 측정된 히스토그램을 비교하여 1차적으로 유방암 여부를 판단하고, 추출된 특징 벡터들에 인공신경망을 적용하여 유방암 열화상 분석 정보를 생성하고, 상기 정상인의 유방암 열화상 분석 정보를 비교하여 상기 좌측 및 우측 가슴의 2차적인 유방암 존재 여부를 판단하는 유방암 분석부를 포함하고,
상기 히스토그램 분석부는,
하기 수학식 1에 의해 상기 히스토그램을 분석하는 것을 특징으로 하는 열화상 카메라를 이용한 유방암 진단장치.
[수학식 1]
여기서, p는 열화상 이미지의 픽셀 값이고, m 및 n은 이미지의 너비와 높이를 나타낸다.
- 제1항에 있어서,
상기 이미지 전처리부는,
상기 열화상 이미지에서 배경을 삭제하여 출력하는 이미지 배경 제거부; 및
배경이 삭제된 상기 열화상 이미지로부터 관심영역인 가슴을 인식하여 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 출력하는 관심영역 설정부를 포함하는 것을 특징으로 하는 열화상카메라를 이용한 유방암 진단장치.
- 제2항에 있어서,
상기 이미지 배경 제거부는,
상기 열화상 이미지 획득부로부터 출력되는 상기 열화상 이미지의 RGB 채널 중 레드(R) 채널의 열화상 이미지를 선택하여 출력하는 채널 선택부;
상기 레드 채널의 열화상 이미지를 가우시안 필터링을 수행하여 출력하는 가우시안 필터링부;
상기 가우시안 필터링된 레드 채널의 열화상 이미지로부터 신체의 윤곽선을 검출하는 윤곽선 검출부; 및
상기 검출된 윤곽선에 근거하여 상기 RGB 채널 모두를 포함하는 열화상 이미지로부터 배경을 삭제하는 배경 삭제부를 포함하는 것을 특징으로 하는 열화상카메라를 이용한 유방암 진단장치.
- 제3항에 있어서,
상기 이미지 배경 제거부는,
상기 검출된 윤곽선에 허프 변환을 수행하여 상기 윤곽선을 더 뚜렷하게 강화하는 윤곽선 강화부를 더 포함하는 것을 특징으로 하는 열화상카메라를 이용한 유방암 진단장치.
- 제2항에 있어서,
관심영역 설정부는,
상기 배경이 제거된 RGB 채널 모두를 포함하는 열화상 이미지로부터 그린 채널만 선택하여 출력하는 채널 선택부;
상기 그린 채널의 열화상 이미지를 가우시안 필터링을 수행하여 출력하는 가우시안 필터링부;
가우시안 필터링된 그린 채널의 열화상 이미지로부터 가슴부분을 포함하는 신체의 윤곽선을 검출하여 출력하는 윤곽선 검출부;
상기 윤곽선 검출부에서 검출된 신체 윤곽선으로부터 허프 원 변환을 수행하여 가슴부분에 대응하는 원 검출을 수행하는 윤곽선 강화부; 및
상기 윤곽선 검출부에서 검출된 원에 기초하여 이미지관심영역(Region of Interest: ROI) 검출을 통해 상기 RGB 채널 모두를 포함하는 열화상 이미지로부터 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 추출하는 유방 검출부를 포함하는 것을 특징으로 하는 열화상 카메라를 이용한 유방암 진단장치.
- 제5항에 있어서,
상기 윤곽선 강화부는,
상기 허프 원 변환의 매개변수인 최소 반지름 값이 여성 가슴의 평균 반지름 값으로 설정되고, 가슴을 검출하기 위한 가슴 사이의 거리를 정의하는 좌측 및 우측 원의 중심부 사이의 최소 거리 값이 50으로 설정되는 것을 특징으로 하는 열화상 카메라를 이용한 유방암 진단장치.
- 삭제
- 삭제
- 제1항에 있어서,
상기 유방암 판정부는,
상기 특징 벡터로 수직, 수평 및 두 대각선 방향에서의 동시발생행렬별 에너지(Energy), 엔트로피(Entropy), 콘트라스트(Contrast), 상관성(Correlation), 동종성(Homogeneity)과, RGB 채널별 평균(Mean), 분산(Variance), 비대칭률(Skewness), 첨도(Kurtosis)를 포함하는 것을 특징으로 하는 열화상 카메라를 이용한 유방암 진단장치.
- 열화상 이미지 획득부가 환자의 가슴부분을 포함하는 신체를 열화상카메라로 촬영하여 열화상 이미지를 출력하는 열화상 이미지 획득 단계;
이미지 전처리부가 상기 열화상 이미지에서 배경을 삭제하고, 배경이 삭제된 신체에서 가슴을 인식한 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 출력하는 이미지 전처리를 수행하는 이미지 전처리 단계; 및
유방암 판정부가 이미지 전 처리된 상기 좌측 가슴 열화상 이미지 및 상기 우측 가슴 열화상 이미지를 분석하여 특징 벡터들을 추출하고 추출된 특징 벡터들을 인공신경망을 적용하여 분류하고 상기 특징 벡터들을 매개변수로 하는 유방암 열화상 분석 정보를 생성하고, 생성된 상기 유방암 열화상 분석 정보와 정상인의 유방암 열화상 분석 정보를 비교하여 상기 좌측 및 우측 가슴의 유방암 존재 여부를 판단하는 유방암 판정 단계를 포함하되,
유방암 판정 단계는,
히스토그램 분석부를 통해 상기 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지 각각의 히스토그램을 분석하여 출력하는 히스토그램 분석 단계;
상기 이미지 전 처리된 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 분석하여 특징 벡터들을 추출하여 출력하는 특징 정보 생성 단계; 및
정상인의 유방암 열화상 분석 정보를 저장하고 있으며, 추출된 특징 벡터들에 인공신경망을 적용하여 분류하고 상기 특징 벡터들을 매개변수로 하는 유방암 열화상 분석 정보를 생성하고, 상기 정상인의 유방암 열화상 분석 정보를 비교하여 상기 좌측 및 우측 가슴의 유방암 존재 여부를 판단하는 유방암 분석 단계를 포함하고,
상기 유방암 분석 단계는,
유방암 분석부가 정상인의 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지에 대해 하기 수학식 1에 의해 측정된 히스토그램을 더 저장하고 있고, 상기 정상인의 히스토그램 및 상기 히스토그램 분석부를 통해 하기 수학식 1에 의해 측정된 히스토그램을 비교하여 1차적으로 유방암 여부를 판단하는 히스토그램 분석 단계를 더 포함하고,
상기 유방암 분석 단계 후, 상기 히스토그램 분석에 의한 유방암 여부 및 상기 유방암 열화상 분석정보에 의한 유방암 여부를 판단에서 둘 모두 유방임인 것으로 판단되면 최종적으로 해당 가슴에 유방암이 존재하는 것으로 판단하는 것을 특징으로 하는 열화상 카메라를 이용한 유방암 진단방법.
[수학식 1]
여기서, p는 열화상 이미지의 픽셀 값이고, m 및 n은 이미지의 너비와 높이를 나타낸다.
- 제10항에 있어서,
상기 이미지 전처리 단계는,
이미지 배경 제거부가 상기 열화상 이미지에서 배경을 삭제하여 출력하는 이미지 배경 제거 단계; 및
관심영역 설정부가 배경이 삭제된 상기 열화상 이미지로부터 관심영역인 가슴을 인식하여 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 출력하는 관심영역 설정 단계를 포함하는 것을 특징으로 하는 열화상카메라를 이용한 유방암 진단방법.
- 제11항에 있어서,
상기 이미지 배경 제거 단계는,
채널 선택부가 상기 열화상 이미지 획득부로부터 출력되는 상기 열화상 이미지의 RGB 채널 중 레드(R) 채널을 선택하여 출력하는 채널 선택 단계;
가우시안 필터링부가 상기 레드 채널의 열화상 이미지를 가우시안 필터링을 수행하여 출력하는 가우시안 필터링 단계;
윤곽선 검출부가 상기 가우시안 필터링된 레드 채널의 열화상 이미지로부터 신체의 윤곽선을 검출하는 윤곽선 검출 단계; 및
배경 삭제부가 상기 검출된 윤곽선에 근거하여 상기 RGB 채널 모두를 포함하는 열화상 이미지로부터 배경을 삭제하는 배경 삭제 단계를 포함하는 것을 특징으로 하는 열화상카메라를 이용한 유방암 진단방법.
- 제12항에 있어서,
상기 이미지 배경 제거 단계는,
윤곽선 강화부가 상기 검출된 윤곽선에 허프 변환 수행하여 윤곽선을 더 뚜렷하게 강화하는 윤곽선 강화 단계를 더 포함하는 것을 특징으로 하는 열화상카메라를 이용한 유방암 진단방법.
- 제11항에 있어서,
관심영역 설정 단계는,
상기 배경이 제거된 RGB 채널 모두를 포함하는 열화상 이미지로부터 그린 채널만 선택하여 출력하는 채널 선택 단계;
상기 그린 채널의 열화상 이미지를 가우시안 필터링을 수행하여 출력하는 가우시안 필터링 단계;
가우시안 필터링된 그린 채널의 열화상 이미지로부터 가슴부분을 포함하는 신체의 윤곽선을 검출하여 출력하는 윤곽선 검출 단계;
윤곽선 검출부에서 검출된 신체 윤곽선으로부터 허프 원 변환을 수행하여 가슴부분에 대응하는 원 검출을 수행하는 윤곽선 강화 단계; 및
윤곽선 검출부에서 검출된 원에 기초하여 이미지관심영역(ROI) 검출을 통해 상기 RGB 채널 모두를 포함하는 열화상 이미지로부터 좌측 가슴 열화상 이미지 및 우측 가슴 열화상 이미지를 추출하는 유방 검출 단계를 포함하는 것을 특징으로 하는 열화상 카메라를 이용한 유방암 진단방법.
- 제14항에 있어서,
상기 윤곽선 강화 단계는,
윤곽선 강화부가 상기 허프 원 변환의 매개변수인 최소 반지름 값을 여성 가슴의 평균 반지름 값으로 설정되고, 가슴을 검출하기 위한 가슴 사이의 거리를 정의하는 좌측 및 우측 원의 중심부 사이의 최소 거리 값을 50으로 설정되는 것을 특징으로 하는 열화상 카메라를 이용한 유방암 진단방법.
- 삭제
- 삭제
- 제10항에 있어서,
상기 특징 벡터는,
수직, 수평 및 두 대각선 방향에서의 동시발생행렬별 에너지(Energy), 엔트로피(Entropy), 콘트라스트(Contrast), 상관성(Correlation), 동종성(Homogeneity)과, RGB 채널별 평균(Mean), 분산(Variance), 비대칭도(Skewness), 첨도(Kurtosis)를 포함하는 것을 특징으로 하는 열화상 카메라를 이용한 유방암 진단방법.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020160130805A KR101887760B1 (ko) | 2016-10-10 | 2016-10-10 | 열화상카메라를 이용한 유방암 진단 장치 및 방법 |
| PCT/KR2017/011134 WO2018070760A1 (ko) | 2016-10-10 | 2017-10-10 | 열화상카메라를 이용한 유방암 진단 장치 및 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020160130805A KR101887760B1 (ko) | 2016-10-10 | 2016-10-10 | 열화상카메라를 이용한 유방암 진단 장치 및 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20180039466A KR20180039466A (ko) | 2018-04-18 |
| KR101887760B1 true KR101887760B1 (ko) | 2018-08-10 |
Family
ID=61905646
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020160130805A KR101887760B1 (ko) | 2016-10-10 | 2016-10-10 | 열화상카메라를 이용한 유방암 진단 장치 및 방법 |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR101887760B1 (ko) |
| WO (1) | WO2018070760A1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020060046A1 (ko) * | 2018-09-20 | 2020-03-26 | 아주대학교 산학협력단 | 4채널 입력을 이용하는 컨볼루션 신경망 기반의 유방 영상 분석 방법 및 그 시스템 |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB2571379B (en) * | 2018-07-16 | 2021-10-27 | Npl Management Ltd | System and method for obtaining thermal image data of a body part and thermal imager |
| EP3620765B1 (en) * | 2018-09-10 | 2020-11-04 | Axis AB | Method and system for filtering thermal image data |
| KR102108050B1 (ko) * | 2019-10-21 | 2020-05-07 | 가천대학교 산학협력단 | 증강 컨볼루션 네트워크를 통한 유방암 조직학 이미지 분류 방법 및 그 장치 |
| WO2022097815A1 (ko) * | 2020-11-03 | 2022-05-12 | 한국 한의학 연구원 | 열화상 카메라를 이용한 한의사의 복부 촉진기반 냉감 영역 재현 진단모델 개발 기술 |
| KR102418326B1 (ko) * | 2020-11-26 | 2022-07-13 | 네오컨버전스 주식회사 | 인공지능을 이용한 태아박동 진단에 사용되는 딥러닝용 수치 데이터 생성방법 및 장치 |
| KR102543555B1 (ko) * | 2022-07-11 | 2023-06-14 | 성균관대학교산학협력단 | 인공지능형 유방암 진단 장치 및 이를 이용한 유방암 자가 진단 방법 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5657362A (en) * | 1995-02-24 | 1997-08-12 | Arch Development Corporation | Automated method and system for computerized detection of masses and parenchymal distortions in medical images |
| WO2003049032A2 (en) * | 2001-12-07 | 2003-06-12 | Koninklijke Philips Electronics N.V. | Medical viewing system and method for spatially enhancing structures in noisy images |
| KR100804809B1 (ko) | 2005-07-04 | 2008-02-20 | 김영창 | 유방암 검사장치 |
| KR100719350B1 (ko) * | 2005-09-08 | 2007-05-17 | 건국대학교 산학협력단 | 유방암 진단시스템 및 진단방법 |
| KR101078756B1 (ko) * | 2009-10-12 | 2011-11-01 | 서울대학교산학협력단 | 디지털 유방 ｘ-선 영상에서 미세석회화 군집 검출 방법 |
| KR101642299B1 (ko) * | 2014-08-07 | 2016-07-25 | 박영훈 | 유방암 진단시스템 및 유방암 진단방법 |
-
2016
- 2016-10-10 KR KR1020160130805A patent/KR101887760B1/ko active IP Right Grant
-
2017
- 2017-10-10 WO PCT/KR2017/011134 patent/WO2018070760A1/ko active Application Filing
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2020060046A1 (ko) * | 2018-09-20 | 2020-03-26 | 아주대학교 산학협력단 | 4채널 입력을 이용하는 컨볼루션 신경망 기반의 유방 영상 분석 방법 및 그 시스템 |
| US11922622B2 (en) | 2018-09-20 | 2024-03-05 | Ajou University Industry-Academic Cooperation Foundation | Convolutional neural network based breast image analysis method using four-channel inputs and system therefor |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2018070760A1 (ko) | 2018-04-19 |
| KR20180039466A (ko) | 2018-04-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101887760B1 (ko) | 열화상카메라를 이용한 유방암 진단 장치 및 방법 | |
| Navarro et al. | Accurate segmentation and registration of skin lesion images to evaluate lesion change | |
| US5133020A (en) | Automated method and system for the detection and classification of abnormal lesions and parenchymal distortions in digital medical images | |
| US8340388B2 (en) | Systems, computer-readable media, methods, and medical imaging apparatus for the automated detection of suspicious regions of interest in noise normalized X-ray medical imagery | |
| US20120014505A1 (en) | Radiation image processing apparatus, radiation image processing method, and radiation image processing program | |
| US20140018681A1 (en) | Ultrasound imaging breast tumor detection and diagnostic system and method | |
| JP4604451B2 (ja) | 医用画像処理装置及び悪性度の判定方法 | |
| ITRM20060213A1 (it) | Metodo di elaborazione di immagini biomediche | |
| TWI482102B (zh) | 強化標的圖案之處理方法、標的圖案分類系統之產生方法以及分類檢測標的圖案之方法 | |
| de Souza Jr et al. | Automatic frontal sinus recognition in computed tomography images for person identification | |
| JP2003334183A (ja) | 異常陰影検出装置 | |
| JP4729188B2 (ja) | 視線検出装置 | |
| Guzman-Cabrera et al. | Digital processing of thermographic images for medical applications | |
| US20170367677A1 (en) | Analysis method for breast image and electronic apparatus using the same | |
| JPH09251535A (ja) | ２次元多階調画像におけるパタン検出方法及び装置 | |
| US20160100789A1 (en) | Computer-aided diagnosis system and computer-aided diagnosis method | |
| Kapoor et al. | Real time intelligent thermal analysis approach for early diagnosis of breast cancer | |
| Negied | Infrared thermography-based breast cancer detection—comprehensive investigation | |
| Shaikh et al. | Application of image processing techniques for characterization of skin cancer lesions using thermal images | |
| JP2005065855A (ja) | 乳腺領域閾値決定方法および装置並びにプログラム | |
| González et al. | On image registration for study of thyroid disorders by infrared exams | |
| KR20190113351A (ko) | 머신러닝 알고리즘을 이용한 의료영상 분석장치 | |
| Gomathy et al. | Automated segmentation using PCA and area estimation of thyroid gland using ultrasound images | |
| KR101566618B1 (ko) | 충혈도 산출 방법 및 장치 | |
| JP3975668B2 (ja) | 特徴量正誤判定方法および画像処理装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |