KR20220118302A - 심장질환의 유무를 분류하는 장치 및 방법 - Google Patents

심장질환의 유무를 분류하는 장치 및 방법 Download PDF

Info

Publication number
KR20220118302A
KR20220118302A KR1020220005170A KR20220005170A KR20220118302A KR 20220118302 A KR20220118302 A KR 20220118302A KR 1020220005170 A KR1020220005170 A KR 1020220005170A KR 20220005170 A KR20220005170 A KR 20220005170A KR 20220118302 A KR20220118302 A KR 20220118302A
Authority
KR
South Korea
Prior art keywords
heart disease
input data
layer
heart
classifying
Prior art date
Application number
KR1020220005170A
Other languages
English (en)
Inventor
장혁재
홍영택
장영걸
이지나
맹신희
Original Assignee
연세대학교 산학협력단
주식회사 온택트헬스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 연세대학교 산학협력단, 주식회사 온택트헬스 filed Critical 연세대학교 산학협력단
Priority to KR1020220005170A priority Critical patent/KR20220118302A/ko
Publication of KR20220118302A publication Critical patent/KR20220118302A/ko

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B7/00Instruments for auscultation
    • A61B7/02Stethoscopes
    • A61B7/04Electric stethoscopes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Pathology (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Artificial Intelligence (AREA)
  • Acoustics & Sound (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Mathematical Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Fuzzy Systems (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 심장질환의 유무를 분류하기 위한 것으로, 심장 질환의 유무를 분류하는 장치는, 심음도(phonocardiogram, PCG)로부터 추출된 멜 스펙트럼(mel spectrum) 기반의 특징 정보를 포함하는 입력 데이터를 생성하는 생성부, 및 상기 입력 데이터의 유효 길이에 기반하여 추출된 상기 입력 데이터의 유효 특징을 이용하여 상기 심장 질환을 분류하는 분류부를 포함할 수 있다.

Description

심장질환의 유무를 분류하는 장치 및 방법{APPARATUS AND METHOD FOR CLASSIFYING HEART DISEASE}
본 발명은 심장질환의 유무를 분류하는 장치 및 방법에 관한 것이다.
청진기를 통해 쉽게 들을 수 있는 심장음은 심장질환 진단에 있어 가장 먼저 수행되는 기본적인 검사방법이다. 심음도(PCG: Phonocardiogram)는 전자 청진기를 통해 여러 심장주기 동안의 심장음을 기록한 것으로 청진의 시각화 및 심장질환 진단 목적으로 사용된다.
도 6을 참조하면, 심음도는 S1, Systole, S2, Diastole의 총 4가지의 상태로 구분되어 있으며, 4가지 상태를 순차적으로 연결해 하나의 주기를 형성한다. 도 6의 (a)와 같이 정상적인 심음도에는 신호에 잡음이 거의 없지만 도 6의 (b)와 같이 심장질환을 가지고 있는 환자의 심음도의 경우 신호 전반에 걸쳐 잡음이 많이 섞여 있다.
이와 같이, 심음도를 활용하면 심장박동에 의해 판막이 열리고 닫히는 소리의 이상을 분석해 판막 관련 질환 초기 진단이 가능해진다. 비침습적인 방법으로 쉽게 심장박동음 분석이 가능하다는 장점이 있지만, 정확한 분석을 수행하기까지 전문적 수련을 필요로 하고 전문의 마다 소견이 다를 수 있어 형식적인 절차로 수행되고 있다.
최근에는 컴퓨터 단층 촬영, 자기 공명영상, 초음파 영상 검사 등 정밀 검사 방법들이 표준으로 자리 잡으면서 PCG의 활용도는 점차 낮아지고 있는 상황이다.
최근 인공지능 기술의 발전과 함께 PCG 분석을 위한 다양한 기법들이 제안되었다. 대표적으로, 심장음 신호에 1차원 합성곱 신경망(convolutional neural network, CNN)을 이용한 방법과 은닉 마르코프 모델(hidden markov models, HMM)을 활용한 방법이 있다. 다른 방법으로는 장단기 기억(long short-term memory, LSTM) 기반 인공신경망 네트워크를 활용한 분석, 신호의 스펙트럼을 분석해 이미지 형태로 분석하는 2D CNN방법이 있다.
이와 관련하여, 한국등록특허 제10-1524226호는 신경망을 이용한 심장질환판별 방법 및 그 장치를 개시하고 있다.
본 발명은 PCG 특징 분석에 적합한 1차원 CNN(Convolutional Neural Network) 기반의 심장질환 분류 모델을 통해 심장질환의 유무를 분류하는 심장질환 분류 장치 및 방법을 제공하고자 한다.
또한, 본 발명은 PCG 신호를 MFCC(Mel-Frequency Cepstral Coefficient)에 기초하여 유의미한 음성학적 특징으로 변환하여 입력 데이터를 생성하는 심장질환 분류 장치 및 방법을 제공하고자 한다.
다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 심장 질환의 유무를 분류하는 장치는, 심음도(phonocardiogram, PCG)로부터 추출된 멜 스펙트럼(mel spectrum) 기반의 특징 정보를 포함하는 입력 데이터를 생성하는 생성부, 및 상기 입력 데이터의 유효 길이에 기반하여 추출된 상기 입력 데이터의 유효 특징을 이용하여 상기 심장 질환을 분류하는 분류부를 포함할 수 있다.
또한, 심장 질환의 유무를 분류하는 방법은, 심음도(phonocardiogram, PCG)로부터 추출된 멜 스펙트럼(mel spectrum) 기반의 특징 정보를 포함하는 입력 데이터를 생성하는 단계, 및 상기 입력 데이터의 유효 길이에 기반하여 추출된 상기 입력 데이터의 유효 특징을 이용하여 상기 심장 질환을 분류하는 단계를 포함할 수 있다.
또한, 매체에 저장된 프로그램은, 프로세서에 의해 동작되면 전술한 방법을 실행할 수 있다.
상술한 과제 해결 수단은 단지 예시적인 것으로서, 본 발명을 제한하려는 의도로 해석되지 않아야 한다. 상술한 예시적인 실시예 외에도, 도면 및 발명의 상세한 설명에 기재된 추가적인 실시예가 존재할 수 있다.
전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, RNN(Recurrent Neural Network)기반 모델을 사용하지 않고 1차원 CNN만 이용하여 시간에 따른 신호변화를 모델링 함으로써 연산 시간과 네트워크의 복잡도를 크게 줄일 수 있다.
도 1은 본 발명의 일 실시예에 따른 심장질환 분류 장치의 블록도이다.
도 2는 본 발명의 일 실시예에 따른 심장질환 분류 장치의 구성도이다.
도 3은 본 발명의 일 실시예에 따른 CNN 기반 심장질환 분류 모델의 네트워크 구조를 도시한 도면이다.
도 4는 본 발명의 일 실시예에 따른 합성곱 블록층의 구성도이다.
도 5는 본 발명의 일 실시예에 따른 심장질환 분류 방법의 흐름도이다.
도 6은 정상 심음도와 비정상 심음도를 도시한 도면이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다.
본 명세서에 있어서 단말 또는 디바이스가 수행하는 것으로 기술된 동작이나 기능 중 일부는 해당 단말 또는 디바이스와 연결된 서버에서 대신 수행될 수도 있다. 이와 마찬가지로, 서버가 수행하는 것으로 기술된 동작이나 기능 중 일부도 해당 서버와 연결된 단말 또는 디바이스에서 수행될 수도 있다.
이하 첨부된 도면을 참고하여 본 발명의 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 심장질환 분류 장치의 블록도이고, 도 2는 본 발명의 일 실시예에 따른 심장질환 분류 장치의 구성도이고, 도 3은 본 발명의 일 실시예에 따른 CNN 기반 심장질환 분류 모델의 네트워크 구조를 도시한 도면이고, 도 4는 본 발명의 일 실시예에 따른 합성곱 블록층의 구성도이다.
도 1 및 2를 참조하면, 심장질환 분류 장치(1)는 모델 생성부(100), 입력 데이터 생성부(110) 및 심장질환 분류부(120)를 포함할 수 있다. 입력 데이터 생성부(110)는 전처리부(112) 및 특징 추출부(114)를 포함할 수 있다.
심장질환 분류 장치(1)는 입력받은 심음도 신호(210)에 대해 세그멘테이션(220)한 후 분류(240)를 수행할 수 있다.
예를 들어, 심장질환 분류 장치(1)는 세그멘테이션(220)을 통해 심음도 신호(210)의 레이블을 생성할 수 있다.
구체적으로, 심장질환 분류 장치(1)는 레이블을 생성하기 위해 1 Khz로 다운 샘플링 후 레이블 분석을 진행하고, 이 후 다시 업샘플링하여 학습을 진행할 수 있다.
본원에 따르면, 심음도 신호의 세그멘테이션(220)에 대한 레이블을 기반으로 데이터를 앙상블 함으로써 네트워크의 성능을 향상시킬 수 있다. 이를 통해 질병 진단 네트워크 학습을 진행하여 데이터의 어떤 부분을 보고 질병을 진단했는지 확인할 수 있어 더욱 높은 수준의 학습이 가능해진 것으로 상정된다.
또한, 심장질환 분류 장치(1)는 데이터 전처리(230)를 통해 신호의 잡음과 이상값을 제거할 수 있다.
또한, 심장질환 분류 장치(1)는 전처리된 데이터를 3 주기 단위로 분리하고, 이를 MFCC 분석을 통해 네트워크의 입력 데이터를 생성할 수 있다.
심장질환 분류 장치(1)의 일예는 데스크탑, 노트북 등과 같은 퍼스널 컴퓨터(personal computer)뿐만 아니라 유무선 통신이 가능한 모바일 단말을 포함할 수 있다. 모바일 단말은 휴대성과 이동성이 보장되는 무선 통신 장치로서, 스마트폰(smartphone), 태블릿 PC, 웨어러블 디바이스뿐만 아니라, 블루투스(BLE, Bluetooth Low Energy), NFC, RFID, 초음파(Ultrasonic), 적외선, 와이파이(WiFi), 라이파이(LiFi) 등의 통신 모듈을 탑재한 각종 디바이스를 포함할 수 있다. 다만, 심장질환 분류 장치(1)는 도 1에 도시된 형태 또는 앞서 예시된 것들로 한정 해석되는 것은 아니다.
모델 생성부(100)는 심음도 기반의 입력 데이터를 입력받고 심장질환을 분류하는 CNN 기반 심장질환 분류 모델을 생성할 수 있다.
도 3을 참조하면, 심장질환 분류 모델(320)은 합성곱 블록층(332), 1차원 풀링층(334), 글로벌 풀링층(342) 및 완전 연결층(350)을 포함할 수 있다.
예를 들어, 심장질환 분류 모델(320)은 합성곱 블록층(332) 및 1차원 풀링층(334)을 포함하는 4개의 제 1 서브층(330) 및 합성곱 블록층(332) 및 글로벌 풀링층(342)을 포함하는 1개의 제 2 서브층(340)을 포함할 수 있다. 여기서, 심장질환 분류 모델(320)은 제 1 서브층(330), 제 2 서브층(340) 및 완전 연결층(350)의 순서로 연결되도록 구성될 수 있다.
즉, 심장질환 분류 모델(320)은 마지막 합성곱 블록층(332)과 완전 연결층(350) 사이에 글로벌 풀링층(342)을 포함한다. 이때, 글로벌 풀링층(342)에서는 전체 크기에 대하여 평균을 구하는 것이 아니라 실제 유효 길이에 맞게 계산하여 네트워크의 성능을 개선시킬 수 있다.
도 4를 참조하면, 합성곱 블록층(332)은 2세트의 1차원 합성곱 연산과 활성함수를 포함할 수 있다. 이 때, 활성함수는 렐루(Rectified Linear Unit, ReLU)일 수 있다.
여기서, 합성곱 블록층(332)의 필터 개수는 32개를 시작으로 두배씩 증가하여 512개를 최대로 할 수 있다.
심장질환 분류 모델(320)의 하이퍼 파라미터는 깊이(층의 개수) 5, 필터 개수 32, 배치 사이즈 64일 수 있다.
모델 생성부(100)는 심장질환 분류 모델에 심음도 기반의 학습 데이터를 입력하여 심장질환을 분류하도록 심장질환 분류 모델을 학습시킬 수 있다.
입력 데이터 생성부(110)는 멜 스펙트럼(Mel spectrum) 기반 특징 추출 기법을 통해 상기 심음도로부터 상기 입력 데이터를 생성할 수 있다.
또한, 입력 데이터 생성부(110)는 입력 데이터의 유효 길이에 제로 패딩(zero padding)을 적용하여 기설정된 길이의 입력 데이터를 생성할 수 있다.
예를 들어, 입력 데이터 생성부(110)는 샘플마다 심장박동 주기가 다를 수 있기 때문에 인간의 가역 심장박동 범위에 맞춰 심음도의 주기 중 최대 크기에 맞춰 제로 패딩을 적용해 길이가 모두 720이 되도록 할 수 있다. 이때, 처리가 완료된 입력 데이터는 최종 13×720의 데이터의 형태일 수 있다.
심장질환 분류 모델의 글로벌 풀링층은 입력 데이터의 유효 길이에 대한 평균을 산출하여 입력 데이터의 유효 특징을 추출할 수 있다.
전처리부(112)는 버터워스 필터(Butterworth Filter)에 기초하여 기설정된 주기수의 심음도의 신호의 범위를 결정할 수 있다.
심장음 대부분의 정보는 저역대에 포함되어 있고 고역대로 갈수록 노이즈가 많이 분포한다. 따라서, 전처리부(112)는 효과적으로 심장음을 추출하기 위해 버터워스 필터를 사용해 신호의 범위를 결정할 수 있다.
또한, 전처리부(112)는 spike removal 메소드를 통해 심음도의 신호에서 노이즈(튀는 값)을 보정할 수 있다.
여기서, 전처리부(112)는 데이터 앙상블을 통한 정확도 향상을 위해 심음도의 분할을 진행하여 데이터를 충분한 정보를 포함할 수 있는 3개 주기의 심음도 데이터로 분할할 수 있다. 여기서, 심음도의 분할은 은닉 마르코프 모형(HMM: Hidden Markov Model)기반의 분할 기법이 이용될 수 있다.
특징 추출부(114)는 멜 스펙트럼 기반 특징 추출 기법으로서 MFCC에 기초하여 심음도로부터 기설정된 수의 특징 성분을 추출하여 입력 데이터를 생성할 수 있다.
MFCC란 인간이 소리를 듣는 방식을 반영한 특징 추출 기법으로서, 특징 추출부(114)는 700 Hz 미만의 주파수 대역으로 심음도의 분석을 위해 13개의 Mel 계수 값을 사용할 수 있다.
즉, 본원에서는 심음도의 신호를 MFCC 방법으로 유의미한 음성학적 특징으로 변환해 입력 데이터로 사용한다.
심장질환 분류부(120)는 입력 데이터를 심장질환 분류 모델에 입력하여 심장질환을 분류할 수 있다.
예를 들어, 심장질환 분류부(120)는 입력 데이터를 정상(Normal), 대동맥 판막 협착증(Aortic stenosis), 승모 판막 폐쇄 부전증(Mitral regurgitation), 대동맥 판막 폐쇄 부전증(Aortic regurgitation), 승모판막 협착증(Mitral stenosis) 및 동맥관 개존증(Patent ductus arteriosus) 중 어느 하나로 분류할 수 있다.
본 출원인은 PhysioNet Challenge 2016에서 공개적으로 제공하는 3240개의 심장소리 데이터를 활용하여 본원에 따른 실시예와 비교예의 성능을 비교하는 실험을 수행하였다.
네트워크의 성능을 측정하기 위해 층의 깊이와 필터 개수, 배치 사이즈를 조정하며 결과를 비교하였다. 오차 갱신을 위한 손실 함수로는 이진 교차 엔트로피를 사용하였고 모델의 성능을 평가하기 위한 지표로는 Acc(Accuracy), Ppv(Positive Predictive Value), Se(Sensitivity), Sp(Specificity), MAcc(Modified Accuracy)를 사용하였다. PhysioNet Challenge 2016와 동일한 비교를 위해 Sensitivity, Specificity, MAcc는 다음과 같이 정의하였다.
Figure pat00001
Figure pat00002
Figure pat00003
성능 비교 결과, 이하의 표 1과 같이 본원에서의 하이퍼 파라미터(4/32/64)가 정확도, 민감도, 특이도 등 다수의 지표에서 가장 높은 값을 갖는 것으로 확인되었다. 표 1에서 N은 층의 개수이고 F는 필터 개수이며 B는 배치 사이즈를 의미한다.
N/F/B ACC Se Sp PPV MAcc
4/16/64 0.94 0.72 0.98 0.83 0.85
4/32/64 0.94 0.87 0.95 0.73 0.91
5/32/64 0.95 0.87 0.97 0.82 0.92
또한, 이하의 표 2와 같이 본원의 심장질환 분류 모델의 네트워크(본원의 실시예)가 PhysioNet Challenge 2016에서 제안된 다른 기법들과 비교해 우수한 심장질환 진단 성능을 보였다. 여기서, Potes의 기법은 CNN과 앙상블 기법 중 하나인 아다부스트를 사용한 기법이었으며 Zabihi의 기법은 support vector machine 여러 개를 앙상블한 형태이고 Kay & agarwal의 기법은 regularized neural network를 사용해 학습한 기법이다. 또한, Regularized neural network는 가중치를 규제를 통해 오버피팅을 막아주고 일반화에 적합한 특성을 갖도록 하는 기법이다.
Se Sp MAcc
Potes et al. 0.94 0.78 0.86
Zabihi et al. 0.87 0.85 0.86
Kay & Agarwal 0.87 0.83 0.85
본원의 실시예 0.87 0.97 0.92
도 5는 본 발명의 일 실시예에 따른 심장질환 분류 방법의 흐름도이다. 도 5에 도시된 일 실시예에 따른 심장질환 분류 방법은 도 1에 도시된 심장질환 분류 장치에서 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 5에 도시된 일 실시예에 따라 수행되는 심장질환 분류 방법에도 적용된다.단계 S500에서 심장질환 분류 장치는 심음도 기반의 입력 데이터를 입력받고 심장질환을 분류하는 CNN 기반의 심장질환 분류 모델을 생성할 수 있다. 여기서, 심장질환 분류 모델은 합성곱 블록층, 1차원 풀링층, 글로벌 풀링층 및 완전 연결층을 포함할 수 있다.
단계 S510에서 심장질환 분류 장치는 멜 스펙트럼 기반 특징 추출 기법을 통해 심음도로부터 입력 데이터를 생성할 수 있다.
단계 S520에서 심장질환 분류 장치는 입력 데이터를 심장질환 분류 모델에 입력하여 심장질환을 분류할 수 있다.
도 5를 통해 설명된 심장질환 분류 방법은 매체에 저장된 컴퓨터 프로그램의 형태로 구현되거나, 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
1: 심장질환 분류 장치
100: 모델 생성부
110: 입력 데이터 생성부
112: 전처리부
114: 특징 추출부
120: 심장질환 분류부

Claims (11)

  1. 심장 질환의 유무를 분류하는 장치에 있어서,
    심음도(phonocardiogram, PCG)로부터 추출된 멜 스펙트럼(mel spectrum) 기반의 특징 정보를 포함하는 입력 데이터를 생성하는 생성부; 및
    상기 입력 데이터의 유효 길이에 기반하여 추출된 상기 입력 데이터의 유효 특징을 이용하여 상기 심장 질환을 분류하는 분류부를 포함하는 장치.
  2. 청구항 1에 있어서,
    상기 분류부는, 합성곱 블록층, 1차원 풀링층, 글로벌 풀링층 및 완전 연결층을 포함하는 CNN(convolutional neural network) 기반의 심장 질환 분류 모델을 이용하여 상기 심장 질환을 분류하는 장치.
  3. 청구항 2에 있어서,
    상기 심장 질환 분류 모델은, 상기 합성곱 블록층 및 상기 1차원 풀링층을 포함하는 4개의 제 1 서브층 및 상기 합성곱 블록층 및 상기 글로벌 풀링층을 포함하는 1개의 제 2 서브층을 포함 장치.
  4. 청구항 3에 있어서,
    상기 심장 질환 분류 모델은, 상기 제 1 서브층, 상기 제 2 서브층 및 상기 완전 연결층의 순서로 연결되도록 구성되는 장치.
  5. 청구항 2에 있어서,
    상기 합성곱 블록층은, 2세트의 1차원 합성곱 연산과 활성함수를 포함하는 장치.
  6. 청구항 5에 있어서,
    상기 활성함수는, 렐루(Rectified Linear Unit, ReLU)인 장치.
  7. 청구항 3에 있어서,
    상기 생성부는,
    버터워스 필터(butterworth filter)에 기초하여 기설정된 주기 수의 상기 심음도의 신호의 범위를 결정하고,
    MFCC(mel-frequency cepstral coefficient)에 기초하여 상기 심음도로부터 기 설정된 수의 특징 성분을 추출하는 장치.
  8. 청구항 7에 있어서,
    상기 생성부는, 상기 입력 데이터의 유효 길이에 제로 패딩(zero padding)을 적용함으로써 기 설정된 길이의 상기 입력 데이터를 생성하는 장치.
  9. 청구항 8에 있어서,
    상기 글로벌 풀링층은, 상기 입력 데이터의 유효 길이에 대한 평균을 산출함으로써 상기 입력 데이터의 유효 특징을 추출하는 장치.
  10. 심장 질환의 유무를 분류하는 방법에 있어서,
    심음도(phonocardiogram, PCG)로부터 추출된 멜 스펙트럼(mel spectrum) 기반의 특징 정보를 포함하는 입력 데이터를 생성하는 단계; 및
    상기 입력 데이터의 유효 길이에 기반하여 추출된 상기 입력 데이터의 유효 특징을 이용하여 상기 심장 질환을 분류하는 단계를 포함하는 방법.
  11. 프로세서에 의해 동작되면 청구항 10에 따른 방법을 실행하기 위해 매체에 저장된 프로그램.
KR1020220005170A 2021-02-18 2022-01-13 심장질환의 유무를 분류하는 장치 및 방법 KR20220118302A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220005170A KR20220118302A (ko) 2021-02-18 2022-01-13 심장질환의 유무를 분류하는 장치 및 방법

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210021984A KR102352859B1 (ko) 2021-02-18 2021-02-18 심장질환의 유무를 분류하는 장치 및 방법
KR1020220005170A KR20220118302A (ko) 2021-02-18 2022-01-13 심장질환의 유무를 분류하는 장치 및 방법

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020210021984A Division KR102352859B1 (ko) 2021-02-18 2021-02-18 심장질환의 유무를 분류하는 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20220118302A true KR20220118302A (ko) 2022-08-25

Family

ID=80051989

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020210021984A KR102352859B1 (ko) 2021-02-18 2021-02-18 심장질환의 유무를 분류하는 장치 및 방법
KR1020220005170A KR20220118302A (ko) 2021-02-18 2022-01-13 심장질환의 유무를 분류하는 장치 및 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020210021984A KR102352859B1 (ko) 2021-02-18 2021-02-18 심장질환의 유무를 분류하는 장치 및 방법

Country Status (2)

Country Link
KR (2) KR102352859B1 (ko)
WO (1) WO2022177045A1 (ko)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101252060B1 (ko) * 2011-08-03 2013-04-12 충북대학교 산학협력단 은닉 마코프 모델과 심잡음 로그우도를 결합한 심장질환 진단 장치
BR112019004145A2 (pt) * 2016-09-07 2019-05-28 Koninklijke Philips Nv coanalisador de sinal de fonocardiograma, mídia não transitória de armazenamento legível por máquina, e método de coanálise de sinal de fonocardiograma
KR102226875B1 (ko) * 2018-12-04 2021-03-11 건양대학교산학협력단 기계학습 모델을 이용한 심장질환예측 시스템, 및 방법
KR102186159B1 (ko) * 2020-04-22 2020-12-03 가천대학교 산학협력단 피어슨 상관계수 및 뉴로-퍼지 네트워크 기반 심음 분석 방법 및 시스템

Also Published As

Publication number Publication date
KR102352859B1 (ko) 2022-01-18
WO2022177045A1 (ko) 2022-08-25

Similar Documents

Publication Publication Date Title
EP3608918A1 (en) Parallel implementation of deep neural networks for classifying heart sound signals
Abduh et al. Classification of heart sounds using fractional Fourier transform based mel-frequency spectral coefficients and stacked autoencoder deep neural network
CN110755108A (zh) 一种基于智能听诊器的心脏声音分类方法、系统、装置及可读存储介质
US20230329646A1 (en) Classifying biomedical acoustics based on image representation
EP3427669A1 (en) Method and system for classifying phonocardiogram signal quality
Riaz et al. A novel embedded system design for the detection and classification of cardiac disorders
Banerjee et al. Multi-class heart sounds classification using 2D-convolutional neural network
KR20170064960A (ko) 파동신호를 활용한 질병 진단 장치 및 그 방법
Shuvo et al. NRC-Net: Automated noise robust cardio net for detecting valvular cardiac diseases using optimum transformation method with heart sound signals
Chowdhury et al. SpectroCardioNet: An attention-based deep learning network using triple-spectrograms of PCG signal for heart valve disease detection
Roy et al. Design of ear-contactless stethoscope and improvement in the performance of deep learning based on CNN to classify the heart sound
Bourouhou et al. Heart sounds classification for a medical diagnostic assistance
Das et al. Heart valve diseases detection based on feature-fusion and hierarchical LSTM network
Talal et al. Machine learning‐based classification of multiple heart disorders from PCG signals
Sanjeev et al. Deep learning-based mixed data approach for COVID-19 detection
Roy et al. Conv-Random Forest Based IoT: A Deep Learning Model Based on CNN and Random Forest for Classification and Analysis of Valvular Heart Diseases
CN114010220A (zh) 心音信号处理方法、计算机设备及存储介质
KR102186159B1 (ko) 피어슨 상관계수 및 뉴로-퍼지 네트워크 기반 심음 분석 방법 및 시스템
KR20220170673A (ko) 폐음 기반 폐질환 분석 장치 및 방법
KR102352859B1 (ko) 심장질환의 유무를 분류하는 장치 및 방법
Narváez et al. Classification of heart sounds using linear prediction coefficients and mel-frequency cepstral coefficients as acoustic features
Netto et al. HBNET: a blended ensemble model for the detection of cardiovascular anomalies using phonocardiogram
Karan et al. Heart Sound Abnormality Detection using Wavelet Packet Features and Machine Learning
Fakhry et al. Comparison of window shapes and lengths in short-time feature extraction for classification of heart sound signals
Lalouani et al. Enabling effective breathing sound analysis for automated diagnosis of lung diseases