JP7065185B2 - Electrocardiographic signal detection - Google Patents

Electrocardiographic signal detection Download PDF

Info

Publication number
JP7065185B2
JP7065185B2 JP2020526667A JP2020526667A JP7065185B2 JP 7065185 B2 JP7065185 B2 JP 7065185B2 JP 2020526667 A JP2020526667 A JP 2020526667A JP 2020526667 A JP2020526667 A JP 2020526667A JP 7065185 B2 JP7065185 B2 JP 7065185B2
Authority
JP
Japan
Prior art keywords
predetermined number
electrocardiographic signal
neural network
convolutional neural
feature data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020526667A
Other languages
Japanese (ja)
Other versions
JP2020528336A (en
Inventor
孔▲橋▼ 汪
威 ▲趙▼
▲亞▼▲チャオ▼ 李
▲瀟▼ 李
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anhui Huami Information Technology Co Ltd
Original Assignee
Anhui Huami Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Anhui Huami Information Technology Co Ltd filed Critical Anhui Huami Information Technology Co Ltd
Publication of JP2020528336A publication Critical patent/JP2020528336A/en
Application granted granted Critical
Publication of JP7065185B2 publication Critical patent/JP7065185B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/217Validation; Performance evaluation; Active pattern learning techniques
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/318Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A61B5/346Analysis of electrocardiograms
    • A61B5/349Detecting specific parameters of the electrocardiograph cycle
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/318Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/318Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A61B5/346Analysis of electrocardiograms
    • A61B5/349Detecting specific parameters of the electrocardiograph cycle
    • A61B5/352Detecting R peaks, e.g. for synchronising diagnostic apparatus; Estimating R-R interval
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/318Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A61B5/346Analysis of electrocardiograms
    • A61B5/349Detecting specific parameters of the electrocardiograph cycle
    • A61B5/364Detecting abnormal ECG interval, e.g. extrasystoles, ectopic heartbeats
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7275Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • G06F18/24133Distances to prototypes
    • G06F18/24137Distances to cluster centroïds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/12Classification; Matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Theoretical Computer Science (AREA)
  • Cardiology (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • Data Mining & Analysis (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Fuzzy Systems (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)

Description

本発明は、電子技術分野に関し、特に心電信号検出方法、装置及び電子機器に関する。 The present invention relates to the field of electronic technology, and particularly to electrocardiographic signal detection methods, devices and electronic devices.

近年、ディープラーニング方法の台頭とともに、研究者がニューラルネットワークを訓練するモードを採用し始めて心電(ECG)信号の分類および認識を行うことは、ますます多くなってきている。しかし、そのうちの大半は、心電信号の単一心拍に対して認識および分類を行っているが、連続するECG多心拍に対して病理認識を行うものは、いまだ存在しなかった。 In recent years, with the rise of deep learning methods, more and more researchers have begun to adopt modes to train neural networks to classify and recognize electrocardiographic (ECG) signals. However, while most of them recognize and classify electrocardiographic signals for a single heartbeat, none have yet performed pathological recognition for consecutive ECG polycardiacs.

それに鑑みて、本発明は、連続する心電信号に対して病理診断を行うことができるという新たな解決手段を提供する。 In view of this, the present invention provides a new solution that allows pathological diagnosis to be performed on continuous electrocardiographic signals.

上記目的を果たすために、本発明に係る解決手段は、下記のようになっている。 In order to achieve the above object, the solution according to the present invention is as follows.

本発明の第1態様は、心電信号検出方法を提供する。前記心電信号検出方法は、
所定時間長の心電信号を分割して第1所定数の単一心拍を取得するステップと、
前記第1所定数の単一心拍の各単一心拍に対応する特徴データを特定し、第1所定数の特徴データを取得するステップと、
前記所定時間長の心電信号と前記第1所定数の特徴データとに基づいて、前記所定時間長の心電信号の病理タイプを特定するステップと、を含む。
The first aspect of the present invention provides a method for detecting an electrocardiographic signal. The electrocardiographic signal detection method is
A step of dividing an electrocardiographic signal of a predetermined time length to obtain a first predetermined number of single heartbeats, and
A step of identifying the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats and acquiring the feature data of the first predetermined number of heartbeats.
A step of identifying the pathological type of the electrocardiographic signal of the predetermined time length based on the electrocardiographic signal of the predetermined time length and the characteristic data of the first predetermined number is included.

本発明の第2態様は、心電信号検出方法を提供する。前記心電信号検出方法は、
第2畳み込みニューラルネットワークによって所定時間長の心電信号の病理タイプを特定するステップと、
前記病理タイプが前記心電信号に異常が発生したと示す場合に、前記所定時間長の心電信号を分割して第1所定数の単一心拍を取得するステップと、
前記第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ入力することで、前記第1所定数の単一心拍における異常が発生した心拍位置を前記第1畳み込みニューラルネットワークによって特定するステップと、を含む。
A second aspect of the present invention provides a method for detecting an electrocardiographic signal. The electrocardiographic signal detection method is
The step of identifying the pathological type of the electrocardiographic signal of a predetermined time length by the second convolutional neural network, and
When the pathological type indicates that an abnormality has occurred in the electrocardiographic signal, a step of dividing the electrocardiographic signal having a predetermined time length to obtain a first predetermined number of single heartbeats and
By inputting the data of the first predetermined number of single heartbeats into the first convolutional neural network, the step of identifying the heartbeat position where the abnormality occurred in the first predetermined number of single heartbeats by the first convolutional neural network. And, including.

本発明の第3態様は、心電信号検出装置を提供する。前記心電信号検出装置は、
所定時間長の心電信号を分割して第1所定数の単一心拍を取得するための第1分割モジュールと、
前記第1分割モジュールで取得された前記第1所定数の単一心拍の各単一心拍に対応する特徴データを特定し、第1所定数の特徴データを取得するための第1特定モジュールと、
前記所定時間長の心電信号と、前記第1特定モジュールで特定された前記第1所定数の特徴データとに基づいて、前記所定時間長の心電信号の病理タイプを特定するための第2特定モジュールと、を備える。
A third aspect of the present invention provides an electrocardiographic signal detection device. The electrocardiographic signal detection device is
A first division module for dividing an electrocardiographic signal having a predetermined time length to obtain a first predetermined number of single heartbeats,
A first specific module for specifying the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats acquired by the first division module and acquiring the first predetermined number of feature data, and
A second for identifying the pathological type of the electrocardiographic signal having a predetermined time length based on the electrocardiographic signal having a predetermined time length and the feature data of the first predetermined number specified by the first specific module. It is equipped with a specific module.

本発明の第4態様は、心電信号検出装置を提供する。前記心電信号検出装置は、
第2畳み込みニューラルネットワークによって所定時間長の心電信号の病理タイプを特定するための第4特定モジュールと、
前記第4特定モジュールで特定された前記病理タイプが前記心電信号に異常が発生したと示す場合に、前記所定時間長の心電信号を分割して第1所定数の単一心拍を取得するための第2分割モジュールと、
前記第2分割モジュールで取得された前記第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ入力することで、前記第1畳み込みニューラルネットワークによって前記第1所定数の単一心拍における異常が発生した心拍位置を特定するための第5特定モジュールと、を備える。
A fourth aspect of the present invention provides an electrocardiographic signal detection device. The electrocardiographic signal detection device is
A fourth specific module for identifying the pathological type of an electrocardiographic signal of a predetermined time length by a second convolutional neural network, and
When the pathological type specified by the fourth specific module indicates that an abnormality has occurred in the electrocardiographic signal, the electrocardiographic signal having a predetermined time length is divided to obtain a first predetermined number of single heartbeats. 2nd split module for
By inputting the data of the first predetermined number of single heartbeats acquired by the second division module into the first convolutional neural network, the abnormality in the first predetermined number of single heartbeats by the first convolutional neural network It is provided with a fifth specific module for specifying the heartbeat position where the above occurs.

本発明の第5態様は、機器読み取り可能な記憶媒体を提供する。前記機器読み取り可能な記憶媒体には、上記第1態様または第2態様で提出された心電信号検出方法を実行するための機器の実行可能な指令が記憶されている。 A fifth aspect of the present invention provides a device-readable storage medium. The device-readable storage medium stores an executable command of the device for executing the electrocardiographic signal detection method submitted in the first or second aspect.

本発明の第6態様は、電子機器を提供する。前記電子機器は、プロセッサと、前記プロセッサの実行可能な指令を記憶するための記憶媒体とを備え、前記プロセッサは、上記第1態様または第2態様で提出された心電信号検出方法を実行する。 A sixth aspect of the present invention provides an electronic device. The electronic device comprises a processor and a storage medium for storing an executable command of the processor, the processor performing the electrocardiographic signal detection method submitted in the first or second aspect. ..

上記解決手段から分かるように、何れの単一心拍も連続時系列のECG信号において孤立ではなく、前後に隣接する単一心拍に関連しているため、本発明における第1所定数の単一心拍の各単一心拍に対応する特徴データは、代表する心電信号の病理特性を非常に良好に表せる。したがって、所定時間長の心電信号の病理タイプは、心電信号と第1所定数の特徴データとによって、非常に良好に検出することができる。 As can be seen from the above-mentioned solutions, since any single heartbeat is not isolated in the ECG signal of the continuous time series but is related to the single heartbeats adjacent to each other before and after, the first predetermined number of single heartbeats in the present invention. The characteristic data corresponding to each single heartbeat of the above can very well represent the pathological characteristics of the representative electrocardiographic signal. Therefore, the pathological type of the electrocardiographic signal having a predetermined time length can be detected very well by the electrocardiographic signal and the first predetermined number of feature data.

本発明の一例示的な実施例の心電信号検出方法の模式的なフローチャートである。It is a schematic flowchart of the electrocardiographic signal detection method of an exemplary embodiment of this invention.

図1Aに示す実施例における連続心電信号の模式図である。It is a schematic diagram of the continuous electrocardiographic signal in the embodiment shown in FIG. 1A.

図1Aに示す実施例における単一心拍の模式図である。FIG. 3 is a schematic diagram of a single heartbeat in the embodiment shown in FIG. 1A.

本発明の別の例示的な実施例の心電信号検出方法の模式的なフローチャートである。It is a schematic flowchart of the electrocardiographic signal detection method of another exemplary embodiment of this invention.

図2Aに示す実施例に適用される心電信号を検出するアーキテクチャの模式図である。FIG. 2 is a schematic diagram of an architecture for detecting an electrocardiographic signal applied to the embodiment shown in FIG. 2A.

図2Aに示す実施例における第1畳み込みニューラルネットワークの構造模式図である。It is a structural schematic diagram of the 1st convolutional neural network in the Example shown in FIG. 2A.

図2Aに示す実施例における第2畳み込みニューラルネットワークの構造模式図である。It is a structural schematic diagram of the 2nd convolutional neural network in the Example shown in FIG. 2A.

本発明の更に別の例示的な実施例の心電信号検出方法の模式的なフローチャートである。It is a schematic flowchart of the electrocardiographic signal detection method of still another exemplary embodiment of this invention.

図3Aに示す実施例に適用される心電信号を検出するアーキテクチャの模式図の一である。It is one of the schematic diagrams of the architecture for detecting an electrocardiographic signal applied to the embodiment shown in FIG. 3A.

図3Aに示す実施例に適用される心電信号を検出するアーキテクチャの模式図の二である。FIG. 2 is a schematic diagram of an architecture for detecting an electrocardiographic signal applied to the embodiment shown in FIG. 3A.

本発明のもう1つの例示的な実施例の心電信号検出方法の模式的なフローチャートである。It is a schematic flowchart of the electrocardiographic signal detection method of another example embodiment of this invention.

図4Aに示す実施例に適用される心電信号を検出するアーキテクチャの模式図である。FIG. 4 is a schematic diagram of an architecture for detecting an electrocardiographic signal applied to the embodiment shown in FIG. 4A.

本発明の一例示的な実施例の心電信号検出装置の構造模式図である。It is structural schematic diagram of the electrocardiographic signal detection apparatus of an exemplary embodiment of this invention.

本発明の別の例示的な実施例の心電信号検出装置の構造模式図である。It is a structural schematic diagram of the electrocardiographic signal detection apparatus of another exemplary embodiment of this invention.

本発明の更に別の例示的な実施例の心電信号検出装置の構造模式図である。It is a structural schematic diagram of the electrocardiographic signal detection apparatus of still another exemplary embodiment of this invention.

本発明の一例示的な実施例の電子機器の構造模式図である。It is a structural schematic diagram of the electronic device of an example example of this invention.

ここで、例示的な実施例を詳細に説明する。その例示は、図面に示される。以下の記述は、図面に係る際、別途示さない限り、異なる図面における同じ符号が同じ又は類似する要素を示す。以下の例示的な実施例に記述される実施形態が本発明と一致する全ての実施形態を代表するわけではない。逆に、それらは、単に添付する特許請求の範囲に詳細に記述されるような、本発明の幾つかの態様に一致する装置及び方法の例である。 Here, exemplary embodiments will be described in detail. An example is shown in the drawings. The following description, when relating to a drawing, indicates elements of the same or similar elements in different drawings, unless otherwise indicated. The embodiments described in the following exemplary examples are not representative of all embodiments consistent with the present invention. Conversely, they are examples of devices and methods that are consistent with some aspects of the invention, as described in detail in the appended claims.

本発明で使用される用語は、単に特定の実施例を記述する目的であり、本発明を制限するためのものではない。本発明及び添付する特許請求の範囲で使用される単数形式の「一種」、「前記」及び「当該」も、文脈から他の意味を明瞭で分かる場合でなければ、複数の形式を含むことを意図する。理解すべきことは、本文で使用される用語「および/または」が、1つまたは複数の関連する列挙項目を含む如何なる或いは全ての可能な組み合わせを指す。 The terminology used in the present invention is solely for the purpose of describing a particular embodiment and is not intended to limit the invention. The singular forms "type", "above" and "corresponding" used in the present invention and the appended claims also include a plurality of forms unless the other meanings are clearly understood from the context. Intended. It should be understood that the term "and / or" used in the text refers to any or all possible combinations including one or more related enumeration items.

理解すべきことは、本発明において第1、第2、第3等という用語を用いて各種の情報を記述するが、これらの情報は、これらの用語に限定されるものではない。これらの用語は、単に同一のタイプの情報同士を区分するために用いられる。例えば、本発明の範囲を逸脱しない限り、第1情報が第2情報と呼称されてもよく、類似的に、第2情報が第1情報と呼称されてもよい。これは、コンテキストに依存する。例えば、ここで使用される言葉「場合」は、「…とき」や「…ときに」あるいは「特定の状況に応じて」として解釈されてもよい。 It should be understood that various information is described by using the terms first, second, third, etc. in the present invention, but these information are not limited to these terms. These terms are used simply to distinguish between the same type of information. For example, as long as it does not deviate from the scope of the present invention, the first information may be referred to as the second information, and similarly, the second information may be referred to as the first information. This depends on the context. For example, the word "case" used herein may be interpreted as "... when", "... when" or "according to a particular situation".

本発明を更に説明するために、以下に実施例を提供する。 To further illustrate the invention, examples are provided below.

図1Aは、本発明の一例示的な実施例の心電信号検出方法の模式的なフローチャートであり、図1Bは、図1Aに示す実施例における連続心電信号の模式図であり、図1Cは、図1Aに示す実施例におけるECG単一心拍の模式図である。本発明は、ウェアラブル機器および手持ち機器等の電子機器に適用されてもよく、ユーザの心臓健康状況をモニタリングする。図1Aに示すように、以下のステップを含む。 1A is a schematic flowchart of an electrocardiographic signal detection method according to an exemplary embodiment of the present invention, FIG. 1B is a schematic diagram of a continuous electrocardiographic signal according to the embodiment shown in FIG. 1A, and FIG. 1C. Is a schematic diagram of the ECG single heartbeat in the example shown in FIG. 1A. The present invention may be applied to electronic devices such as wearable devices and handheld devices, and monitors the user's heart health status. As shown in FIG. 1A, it includes the following steps.

ステップ101では、所定時間長の心電信号を分割して第1所定数の単一心拍を取得する。 In step 101, the electrocardiographic signal having a predetermined time length is divided to obtain a first predetermined number of single heartbeats.

一実施例では、ECG信号に関する認識方法によって所定時間長のECG信号を分割して第1所定数の単一心拍を取得してもよい。図1Bと図1Cに示すように、所定時間長の連続ECG信号を分割することで、各単一心拍の開始時点、終了時点および持続時間を把握できる。且つ、単一心拍の持続時間tは、所定長に正規化されてもよい。例えば、所定長がLである場合に、単一心拍は、下記のように表されてもよい。

Figure 0007065185000001
単一心拍の持続時間に対して正規化を行う過程に、固定のサンプリングレートでサンプリングを行ってもよい。Pは、各サンプリング点での単一心拍の信号強度を示す。例えば、Pは、第1個のサンプリング点での単一心拍の信号強度を示し、Pは、第L個のサンプリング点での単一心拍の信号強度を示し、p、p、・・・pは、L個のサンプリング点での単一心拍の信号強度を示し、tは、当該単一心拍の持続時間である。第1所定数がNであることを例示として説明すると、連続するN個のECG単一心拍は、下記のように表されてもよい。
Figure 0007065185000002
ijは、第j個のサンプリング点での第i個の単一心拍の信号強度を示し、i=1、2、・・・N、j=1、2、・・・L、t、t、・・・tは、N個の単一心拍のそれぞれの持続時間を示す。 In one embodiment, the ECG signal having a predetermined time length may be divided according to the recognition method for the ECG signal to acquire a first predetermined number of single heartbeats. As shown in FIGS. 1B and 1C, by dividing a continuous ECG signal having a predetermined time length, the start time point, end time point, and duration of each single heartbeat can be grasped. Moreover, the duration t of a single heartbeat may be normalized to a predetermined length. For example, when the predetermined length is L, the single heartbeat may be expressed as follows.
Figure 0007065185000001
Sampling may be performed at a fixed sampling rate during the normalization process for the duration of a single heartbeat. P indicates the signal strength of a single heartbeat at each sampling point. For example, P 1 indicates the signal strength of a single heartbeat at the first sampling point, PL indicates the signal strength of a single heartbeat at the Lth sampling point, p 1 , p 2 , p. ... p L indicates the signal strength of a single heartbeat at L sampling points, and t is the duration of the single heartbeat. Explaining that the first predetermined number is N as an example, N consecutive ECG single heartbeats may be expressed as follows.
Figure 0007065185000002
P ij indicates the signal strength of the i-th single heartbeat at the j-th sampling point, i = 1, 2, ... N, j = 1, 2, ... L, t 1 , t 2 , ... t N indicate the duration of each of N single heartbeats.

ステップ102では、第1所定数の単一心拍の各単一心拍に対応する特徴データを特定し、第1所定数の特徴データを取得する。 In step 102, the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats is specified, and the feature data of the first predetermined number is acquired.

一実施例では、ディープラーニングネットワークに基づいて第1所定数の単一心拍の各単一心拍に対応する特徴データを特定してもよい。当該特徴データは、単一の特徴であってもよく、複数の特徴の組み合わせであってもよい。単一心拍信号をディープラーニングネットワークへ入力し、当該ディープラーニングネットワークの畳み込み層を設定して単一心拍信号に対して畳み込み処理を行った後、特徴データを取得してもよい。 In one embodiment, feature data corresponding to each single heartbeat of a first predetermined number of single heartbeats may be specified based on a deep learning network. The feature data may be a single feature or a combination of a plurality of features. A single heartbeat signal may be input to a deep learning network, a convolution layer of the deep learning network may be set, a convolution process may be performed on the single heartbeat signal, and then feature data may be acquired.

上記ステップ101に対応し、特徴データは、例えば、T、T、・・・Tである。 Corresponding to the above step 101, the feature data is, for example, T 1 , T 2 , ... TN .

即ち、ステップ102は、P→Tが実現できる。ここで、i=1、2、・・・N。 That is, in step 102, PiTi can be realized. Here, i = 1, 2, ... N.

ステップ103では、所定時間長の心電信号と第1所定数の特徴データとに基づいて、所定時間長の心電信号の病理タイプを特定する。 In step 103, the pathological type of the electrocardiographic signal having a predetermined time length is specified based on the electrocardiographic signal having a predetermined time length and the feature data of the first predetermined number.

一実施例では、所定時間長の心電信号を1つの畳み込みニューラルネットワークの入力層へ入力し、第1所定数の特徴データを当該畳み込みニューラルネットワークの畳み込み層へ入力し、畳み込みニューラルネットワークの処理によって、当該畳み込みニューラルネットワークの出力層において心電信号の病理タイプを特定する。一実施例では、各種の異なる病理特徴を有する莫大な心電信号によって当該畳み込みニューラルネットワークを訓練してもよい。当該畳み込みニューラルネットワークを訓練することにより、当該畳み込みニューラルネットワークは、心電信号の病理タイプを正確に認識できる。 In one embodiment, an electrocardiographic signal having a predetermined time length is input to an input layer of one convolutional neural network, a first predetermined number of feature data is input to the convolutional layer of the convolutional neural network, and the processing of the convolutional neural network is performed. , Identify the pathological type of the electrocardiographic signal in the output layer of the convolutional neural network. In one embodiment, the convolutional neural network may be trained with a huge electrocardiographic signal having various different pathological features. By training the convolutional neural network, the convolutional neural network can accurately recognize the pathological type of the electrocardiographic signal.

一実施例では、病理タイプは、心房性期外収縮、心室性期外収縮、心房細動、心房粗動、心室性頻拍等を含んでもよい。説明すべきことは、上記病理タイプは、例示的な説明に過ぎず、本発明に対する制限を構成しない。 In one embodiment, the pathological type may include atrial extrasystoles, ventricular extrasystoles, atrial fibrillation, atrial flutter, ventricular tachycardia, and the like. It should be explained that the pathology type is merely an exemplary description and does not constitute a limitation to the present invention.

連続ECG信号における何れの単一心拍も孤立ではなく、前後に隣接する単一心拍に関連しているため、本発明における第1所定数の単一心拍の各単一心拍に対応する特徴データは、代表する心電信号の病理特性を非常に良好に表せる。したがって、心電信号と第1所定数の特徴データとに基づいて、所定時間長の心電信号の病理タイプを良好に検出することができる。 Since no single heartbeat in the continuous ECG signal is isolated and is associated with adjacent single heartbeats before and after, the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats in the present invention is available. , The pathological characteristics of the representative electrocardiographic signal can be expressed very well. Therefore, the pathological type of the electrocardiographic signal having a predetermined time length can be satisfactorily detected based on the electrocardiographic signal and the first predetermined number of feature data.

図2Aは、本発明の別の例示的な実施例の心電信号検出方法の模式的なフローチャートであり、図2Bは、図2Aに示す実施例に適用される心電信号を検出するアーキテクチャの模式図であり、図2Cは、図2Aに示す実施例における第1畳み込みニューラルネットワークの構造模式図であり、図2Dは、図2Aに示す実施例における第2畳み込みニューラルネットワークの構造模式図である。図2Aに示すように、以下のステップを含む。 FIG. 2A is a schematic flowchart of an electrocardiographic signal detection method according to another exemplary embodiment of the present invention, and FIG. 2B is an architecture for detecting an electrocardiographic signal applied to the embodiment shown in FIG. 2A. It is a schematic diagram, FIG. 2C is a structural schematic diagram of the first convolutional neural network in the embodiment shown in FIG. 2A, and FIG. 2D is a structural schematic diagram of the second convolutional neural network in the embodiment shown in FIG. 2A. .. As shown in FIG. 2A, it includes the following steps.

ステップ201では、所定時間長の心電信号を分割して第1所定数の単一心拍を取得する。 In step 201, the electrocardiographic signal having a predetermined time length is divided to obtain a first predetermined number of single heartbeats.

ステップ201の記述が上記図1Aに示す実施例の記述を参照すればよいため、ここで詳細に説明しない。 Since the description of step 201 may refer to the description of the embodiment shown in FIG. 1A, it will not be described in detail here.

ステップ202では、第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ順次入力することで、第1所定数の単一心拍の各単一心拍に対応する特徴データを抽出する。 In step 202, the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats is extracted by sequentially inputting the data of the first predetermined number of single heartbeats into the first convolutional neural network.

ステップ203では、所定時間長の心電信号における各単一心拍に対応する時系列データを特定し、第1所定数の時系列データを取得する。 In step 203, the time-series data corresponding to each single heartbeat in the electrocardiographic signal having a predetermined time length is specified, and the first predetermined number of time-series data is acquired.

ステップ204では、第1所定数の時系列データと第1所定数の特徴データとを第2畳み込みニューラルネットワークの入力層へ入力することで、当該心電信号の病理タイプを特定する。 In step 204, the pathological type of the electrocardiographic signal is specified by inputting the first predetermined number of time series data and the first predetermined number of feature data to the input layer of the second convolutional neural network.

ステップ205では、第1畳み込みニューラルネットワークによって第1所定数の単一心拍の各単一心拍に対して判定を行い、判定結果を取得する。 In step 205, a determination is made for each single heartbeat of the first predetermined number of single heartbeats by the first convolutional neural network, and the determination result is acquired.

ステップ206では、判定結果に基づいて第1所定数の単一心拍における異常が発生した心拍位置を特定する。 In step 206, the heartbeat position where the abnormality occurs in the first predetermined number of single heartbeats is specified based on the determination result.

説明すべきことは、上記ステップ205とステップ206とが必ずしもステップ204の後で実行されるとは限らず、ステップ202の後でステップ205とステップ206を実行してもよい。このように、第1畳み込みニューラルネットワークによって第1所定数の単一心拍における異常が発生した心拍位置を認識できる。 It should be explained that the steps 205 and 206 are not necessarily executed after step 204, and steps 205 and 206 may be executed after step 202. In this way, the first convolutional neural network can recognize the heartbeat position where the abnormality occurs in the first predetermined number of single heartbeats.

以下では、図2B-図2Dを組み合わせて本実施例に対して例示的な説明を行う。 In the following, an exemplary description will be given to the present embodiment in combination with FIGS. 2B and 2D.

上記ステップ202では、図2Bに示すように、上記ステップ201によって連続する25個の単一心拍、並びに、当該25個の単一心拍の開始時点、終了時点および持続時間を取得し、単一心拍のデータのそれぞれに対して長さ正規化を行う。例えば、正規化長さが196である場合に、長さが196である25個の単一心拍データを第1畳み込みニューラルネットワークへ順次入力し、第1畳み込みニューラルネットワークの所定畳み込み層において、各単一心拍に対応する特徴データを出力してもよい。例えば、各単一心拍が5*2個の特徴データに対応する場合に、25個の単一心拍は、5*2*25個の特徴データに対応する。図2Bに示すように、第1畳み込みニューラルネットワークによって各単一心拍の特徴データを取得した後、各単一心拍に対応する特徴データをキャッシュしてもよい。 In step 202, as shown in FIG. 2B, 25 consecutive single heartbeats and the start time point, end time point, and duration of the 25 single heartbeats are acquired by the step 201, and the single heartbeat is obtained. Perform length normalization for each of the data in. For example, when the normalized length is 196, 25 single heartbeat data having a length of 196 are sequentially input to the first convolutional neural network, and each single is in a predetermined convolutional layer of the first convolutional neural network. Feature data corresponding to one heartbeat may be output. For example, if each single heartbeat corresponds to 5 * 2 feature data, 25 single heartbeats correspond to 5 * 2 * 25 feature data. As shown in FIG. 2B, after acquiring the feature data of each single heartbeat by the first convolutional neural network, the feature data corresponding to each single heartbeat may be cached.

上記ステップ203とステップ204において、一実施例では、所定時間長の心電信号における各単一心拍に対して、当該単一心拍のR波に対応する時点を特定し、当該単一心拍のR波に前後に隣接する第2所定数の単一心拍のそれぞれのR波に対応する時点を特定し、当該単一心拍のR波に対応する時点と当該単一心拍に前後に隣接する第2所定数の単一心拍のR波のそれぞれに対応する時点とに基づいて、当該単一心拍に対応する時系列データを特定してもよい。例えば、第2所定数が2であれば、現在の単一心拍のR波と前後2つずつの単一心拍(即ち、合計4つの単一心拍)のR波との距離がそれぞれx、x、x、xである。各単一心拍のリズム情報Xを1つの5次元ベクタと示す場合に、下記のことを満たす。

Figure 0007065185000003
N個の単一心拍は、以下のように表されてもよい。
Figure 0007065185000004
Nは、第1所定数、即ち、単一心拍の数である。 In step 203 and step 204, in one embodiment, for each single heartbeat in an electrocardiographic signal having a predetermined time length, a time point corresponding to the R wave of the single heartbeat is specified, and the R of the single heartbeat is specified. The time point corresponding to each R wave of the second predetermined number of single heartbeats adjacent to the wave before and after is specified, the time point corresponding to the R wave of the single heartbeat and the second time point adjacent to the single heartbeat before and after. Time-series data corresponding to the single heartbeat may be specified based on the time point corresponding to each of the R waves of a predetermined number of single heartbeats. For example, if the second predetermined number is 2, the distance between the current single heartbeat R wave and the two front and rear single heartbeats (that is, a total of four single heartbeats) is x 1 , respectively. It is x2, x3 , and x4 . When the rhythm information X of each single heartbeat is shown as one five-dimensional vector, the following is satisfied.
Figure 0007065185000003
N single heartbeats may be expressed as:
Figure 0007065185000004
N is the first predetermined number, that is, the number of single heartbeats.

例えば、単一心拍がm1*n1個の特徴データ、およびm2*n2個の時系列データに対応する場合に、第2畳み込みニューラルネットワークへ入力されたデータ量は、m1*n1+m2*n2と表されてもよい。図2Bに示すように、第2畳み込みニューラルネットワークへ入力された単一心拍が5*2*25個の特徴データに対応し、第2畳み込みニューラルネットワークへ入力された単一心拍が5*1*25個の時系列データに対応する場合に、第2畳み込みニューラルネットワークへ入力されたデータ量は、5*3*25と表されてもよい。 For example, when a single heartbeat corresponds to m1 * n1 feature data and m2 * n2 time series data, the amount of data input to the second convolutional neural network is expressed as m1 * n1 + m2 * n2. You may. As shown in FIG. 2B, the single heartbeat input to the second convolutional neural network corresponds to 5 * 2 * 25 feature data, and the single heartbeat input to the second convolutional neural network is 5 * 1 *. When corresponding to 25 time series data, the amount of data input to the second convolutional neural network may be expressed as 5 * 3 * 25.

上記ステップ204では、第2畳み込みニューラルネットワークが各種の病理特徴を有する莫大な心電信号によって訓練された後、第2畳み込みニューラルネットワークは、入力層のデータに基づいて、当該心電信号の病理タイプを正確に認識することができる。 In step 204 above, after the second convolutional neural network is trained by a huge electrocardiographic signal with various pathological features, the second convolutional neural network is based on the data of the input layer and the pathological type of the electrocardiographic signal. Can be accurately recognized.

上記ステップ205とステップ206では、第1畳み込みニューラルネットワークに対して莫大な正常と異常の単一心拍の心電信号によって訓練してもよい。訓練を経た後、第1畳み込みニューラルネットワークは、単一心拍に異常が発生したか否かを正確に認識することができる。例えば、25個の単一心拍を第1畳み込みニューラルネットワークへ順次入力した後、第1畳み込みニューラルネットワークは、単一心拍の正常と異常に対して判定を行ってもよい。例えば、1は単一心拍が正常であることを示し、0は単一心拍が異常であることを示す場合に、25個の単一心拍は、0と1との系列の25個の組み合わせに対応可能である。当該系列の組み合わせにより、この25個の単一心拍における異常が発生した心拍位置を認識することができる。 In steps 205 and 206 above, the first convolutional neural network may be trained with an enormous normal and abnormal single heartbeat electrocardiogram. After training, the first convolutional neural network can accurately recognize whether or not an abnormality has occurred in a single heartbeat. For example, after 25 single heartbeats are sequentially input to the first convolutional neural network, the first convolutional neural network may make a determination for normality and abnormality of the single heartbeat. For example, if 1 indicates that the single heartbeat is normal and 0 indicates that the single heartbeat is abnormal, then 25 single heartbeats are in 25 combinations of the series 0 and 1. It is possible. By combining the series, it is possible to recognize the heartbeat position where the abnormality occurs in the 25 single heartbeats.

図2Cに示すように、第1畳み込みニューラルネットワークは、4つの畳み込み層を含み、各層の畳み込みは、何れも畳み込み、活性化およびプーリング(pooling)等の処理を含む。各畳み込み層は、入力出力データおよび畳み込みカーネルサイズが異なる以外、各処理の計算順が何れも同じである。即ち、単一心拍のデータは、第1畳み込みニューラルネットワークへ入力された後、畳み込みおよび活性化を経てから、プーリングされ、これによって当該畳み込み層から出力された特徴データを取得する。第1層の畳み込み層から第3層の畳み込み層は、各層が何れも連続する二段畳み込み、活性化、プーリングを含むが、第4層の畳み込み層は、一段畳み込み、活性化、プーリングのみを含む。活性化運算では、一般的にsigmoid、tanH、reLu等の関数が採用されている。第1畳み込みニューラルネットワークでは、畳み込み運算は、心電信号の特徴データを抽出するために用いられ、活性化運算は、特徴データの非線形度、即ち、活性を向上するために用いられ、プーリング運算は、特徴データに対して次元を低減するために用いられる。 As shown in FIG. 2C, the first convolution neural network includes four convolution layers, each of which convolves, includes processes such as convolution, activation and pooling. Each convolution layer has the same calculation order for each process, except that the input / output data and the convolution kernel size are different. That is, the single heartbeat data is input to the first convolutional neural network, then convolved and activated, and then pooled, thereby acquiring the feature data output from the convolutional layer. The convolutional layers of the first layer to the third layer include two-stage convolution, activation, and pooling in which each layer is continuous, while the convolutional layer of the fourth layer contains only one-stage convolution, activation, and pooling. include. In the activation calculation, functions such as sigmoid, tanH, and reLu are generally adopted. In the first convolutional neural network, the convolutional operation is used to extract the feature data of the electrocardiographic signal, the activation calculation is used to improve the non-linearity of the feature data, that is, the activity, and the pooling calculation is. , Used to reduce dimensions for feature data.

図2Dに示すように、第2畳み込みニューラルネットワークは、3つの畳み込み層を含み、各畳み込み層は、入力出力データおよび畳み込みカーネルサイズが異なる以外、各処理の計算順が何れも同じである。即ち、入力データ(心電信号の時系列データを含む)は、第2畳み込みニューラルネットワークへ入力された後、畳み込みおよび活性化を経てから、当該畳み込み層から出力された特徴データを取得する。第1層の畳み込み層から第3層の畳み込み層は、各層が何れも一段畳み込みおよび活性化を含むが、プーリングを含まない。 As shown in FIG. 2D, the second convolutional neural network includes three convolutional layers, and each convolutional layer has the same calculation order of each process except that the input / output data and the convolutional kernel size are different. That is, the input data (including the time-series data of the electrocardiographic signal) is input to the second convolutional neural network, then convolved and activated, and then the feature data output from the convolutional layer is acquired. The convolutional layers of the first layer to the third layer each include one-stage convolution and activation, but do not include pooling.

本実施例では、第2畳み込みニューラルネットワークが連続する心電信号に対して病理診断を行うと同時に、第1畳み込みニューラルネットワークによって異常の心拍位置を正確に特定できる。第1畳み込みニューラルネットワークから出力された特徴データがオリジナルの単一心拍の近似と見なされてもよいため、第1畳み込みニューラルネットワークから出力された特徴データをオリジナルの心電信号に積算することにより、心電信号を認識する可能性は、大きく向上する。 In this embodiment, the second convolutional neural network makes a pathological diagnosis for a continuous electrocardiographic signal, and at the same time, the first convolutional neural network can accurately identify the abnormal heartbeat position. Since the feature data output from the first convolutional neural network may be regarded as an approximation of the original single heartbeat, the feature data output from the first convolutional neural network can be integrated into the original electrocardiographic signal. The possibility of recognizing an electrocardiographic signal is greatly improved.

図3Aは、本発明の更に別の例示的な実施例の心電信号検出方法の模式的なフローチャートであり、図3Bは、図3Aに示す実施例に適用される心電信号を検出するアーキテクチャの模式図の一であり、図3Cは、図3Aに示す実施例に適用される心電信号を検出するアーキテクチャの模式図の二であり、図3Aに示すように、以下のステップを含む。 FIG. 3A is a schematic flowchart of an electrocardiographic signal detection method according to still another exemplary embodiment of the present invention, and FIG. 3B is an architecture for detecting an electrocardiographic signal applied to the embodiment shown in FIG. 3A. 3C is a schematic diagram of an architecture for detecting an electrocardiographic signal applied to an embodiment shown in FIG. 3A, which includes the following steps as shown in FIG. 3A.

ステップ301では、所定時間長の心電信号を分割して第1所定数の単一心拍を取得する。 In step 301, the electrocardiographic signal having a predetermined time length is divided to obtain a first predetermined number of single heartbeats.

ステップ301の記述は、上記図1Aに示す実施例の記述を参照すればよいため、ここで詳細に説明しない。 The description of step 301 will not be described in detail here because the description of the embodiment shown in FIG. 1A may be referred to.

ステップ302では、第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ順次入力することで、第1所定数の単一心拍の各単一心拍に対応する特徴データを抽出する。 In step 302, by sequentially inputting the data of the first predetermined number of single heartbeats into the first convolutional neural network, the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats is extracted.

ステップ302の記述は、上記図2Aに示す実施例の記述を参照すればよいため、ここで詳細に説明しない。 The description of step 302 will not be described in detail here because the description of the embodiment shown in FIG. 2A may be referred to.

ステップ303では、第1所定数の特徴データを第2畳み込みニューラルネットワークの所定畳み込み層へ入力し、所定時間長の心電信号を第2畳み込みニューラルネットワークの入力層へ入力することで、第2畳み込みニューラルネットワークによって当該心電信号の病理タイプを特定する。 In step 303, the first predetermined number of feature data is input to the predetermined convolutional layer of the second convolutional neural network, and the electrocardiographic signal having a predetermined time length is input to the input layer of the second convolutional neural network, thereby performing the second convolution. The pathological type of the electrocardiographic signal is identified by a neural network.

ステップ303の記述は、上記図2Aに示す実施例の記述を参照すればよいため、ここで詳細に説明しない。 The description of step 303 will not be described in detail here because the description of the embodiment shown in FIG. 2A may be referred to.

以下では、図3Bと図3Cを組み合わせてステップ303を例示的に説明する。図3Bに示すように、分割して得られた第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ順次入力し、分割されていないオリジナルの心電信号を第2畳み込みニューラルネットワークへ入力してもよい。例えば、オリジナルの連続する心電信号が20個の単一心拍に分割されると、20個の単一心拍のデータは、第1畳み込みニューラルネットワークへ順次入力される。当該20個の単一心拍のデータが第1畳み込みニューラルネットワークに進入して対応する処理が行われた後、第1畳み込みニューラルネットワークの所定畳み込み層から出力された特徴データは、キャッシュされてもよい。例えば、第1畳み込みニューラルネットワークの第2層の畳み込み層から出力された20群の特徴データは、キャッシュされてもよい。単一心拍ごとに第2層の畳み込み層から出力された特徴データ量を21*32と示す場合に、20個の単一心拍に対応する特徴データ量は、21*32*20=420*32と示されてもよい。 In the following, step 303 will be exemplified by combining FIGS. 3B and 3C. As shown in FIG. 3B, the data of the first predetermined number of single heartbeats obtained by division are sequentially input to the first convolutional neural network, and the original undivided electrocardiographic signal is input to the second convolutional neural network. You may enter it. For example, when the original continuous electrocardiographic signal is divided into 20 single heartbeats, the data of the 20 single heartbeats are sequentially input to the first convolutional neural network. After the 20 single heartbeat data enter the first convolutional neural network and perform the corresponding processing, the feature data output from the predetermined convolutional layer of the first convolutional neural network may be cached. .. For example, the feature data of 20 groups output from the convolutional layer of the second layer of the first convolutional neural network may be cached. When the amount of feature data output from the convolutional layer of the second layer for each single heartbeat is indicated as 21 * 32, the amount of feature data corresponding to 20 single heartbeats is 21 * 32 * 20 = 420 * 32. May be indicated.

オリジナルの連続する心電信号は、第2畳み込みニューラルネットワークの入力層へ入力される。 The original continuous electrocardiographic signal is input to the input layer of the second convolutional neural network.

一実施例では、第1畳み込みニューラルネットワークの所定畳み込み層で得られた特徴データを第2畳み込みニューラルネットワークの所定畳み込み層で得られた特徴データに注入してもよい。図3Cに示すように、第1畳み込みニューラルネットワークの第2層の畳み込み層で得られた特徴データを、第2畳み込みニューラルネットワークの第2層の畳み込み層で得られた特徴データに注入し、この2群の特徴データをともに第2畳み込みニューラルネットワークの第3層の畳み込み層へ入力する。例えば、第2畳み込みニューラルネットワークの第2畳み込み層から得られた特徴データ量を531*32と示す場合に、第3層の畳み込み層で入力される特徴データ量は、420*32+531*32=(531-111)*32+531*32=531*64-111*32と示される。第3層の畳み込み層の処理可能な特徴データ量を531*64と示す場合に、第3層の畳み込み層にとって、111*32個の特徴データが欠いている。欠いている部分に対して、ゼロパディングの方式により、第3層の畳み込み層で実際に入力される特徴データと第3層の畳み込み層の処理に必要な特徴データとが一致することを確保できる。 In one embodiment, the feature data obtained in the predetermined convolutional layer of the first convolutional neural network may be injected into the feature data obtained in the predetermined convolutional layer of the second convolutional neural network. As shown in FIG. 3C, the feature data obtained in the second convolutional layer of the first convolutional neural network is injected into the feature data obtained in the second convolutional layer of the second convolutional neural network, and this is injected. Both of the feature data of the two groups are input to the convolutional layer of the third layer of the second convolutional neural network. For example, when the amount of feature data obtained from the second convolutional layer of the second convolutional neural network is indicated as 531 * 32, the amount of feature data input by the third convolutional layer is 420 * 32 + 531 * 32 = ( 531-111) * 32 + 531 * 32 = 531 * 64-111 * 32. When the amount of feature data that can be processed by the convolution layer of the third layer is shown as 531 * 64, the convolution layer of the third layer lacks 111 * 32 feature data. With respect to the missing part, the zero padding method can ensure that the feature data actually input in the third layer convolution layer and the feature data required for processing the third layer convolution layer match. ..

説明すべきことは、図3Cが単に例示的な説明に過ぎず、第1畳み込みニューラルネットワークの所定畳み込み層から異なる次元の特徴データを出力して、第2畳み込みニューラルネットワークの所定畳み込み層へ注入可能であるため、第2畳み込みニューラルネットワークの、第1畳み込みニューラルネットワークの特徴データに対する依存度は、柔軟に調整可能である。ここでの所定畳み込み層は、ある畳み込み層であってもよく、複数の畳み込み層であってもよい。例えば、第1畳み込みニューラルネットワークの第2畳み込み層から出力された特徴データを第2畳み込みニューラルネットワークの第2畳み込み層へ注入するとともに、第1畳み込みニューラルネットワークの第3畳み込み層から出力された特徴データを第2畳み込みニューラルネットワークの第3畳み込み層へ注入可能である。 What should be explained is that FIG. 3C is merely an exemplary explanation, and feature data of different dimensions can be output from a predetermined convolutional layer of the first convolutional neural network and injected into the predetermined convolutional layer of the second convolutional neural network. Therefore, the dependence of the second convolutional neural network on the feature data of the first convolutional neural network can be flexibly adjusted. The predetermined convolution layer here may be a certain convolution layer or a plurality of convolution layers. For example, the feature data output from the second convolutional layer of the first convolutional neural network is injected into the second convolutional layer of the second convolutional neural network, and the feature data output from the third convolutional layer of the first convolutional neural network. Can be injected into the third convolutional layer of the second convolutional neural network.

本実施例では、第1畳み込みニューラルネットワークの所定畳み込み層から出力された特徴データを第2畳み込みニューラルネットワークの所定畳み込み層へ入力することで、第2畳み込みニューラルネットワークの認識結果を第1畳み込みニューラルネットワークの特徴データに依存させることが可能であり、心電信号に対する認識性能は、向上できる。 In this embodiment, the feature data output from the predetermined convolutional layer of the first convolutional neural network is input to the predetermined convolutional layer of the second convolutional neural network, and the recognition result of the second convolutional neural network is input to the first convolutional neural network. It is possible to make it dependent on the feature data of, and the recognition performance for the electrocardiographic signal can be improved.

図4Aは、本発明のもう1つの例示的な実施例の心電信号検出方法の模式的なフローチャートであり、図4Bは、図4Aに示す実施例に適用される心電信号を検出するアーキテクチャの模式図であり、図4Aに示すように、以下のステップを含む。 FIG. 4A is a schematic flowchart of an electrocardiographic signal detection method according to another exemplary embodiment of the present invention, and FIG. 4B is an architecture for detecting an electrocardiographic signal applied to the embodiment shown in FIG. 4A. It is a schematic diagram of, and as shown in FIG. 4A, includes the following steps.

ステップ401では、所定時間長の心電信号を第2畳み込みニューラルネットワークへ入力し、第2畳み込みニューラルネットワークによって当該心電信号の病理タイプを特定する。 In step 401, an electrocardiographic signal having a predetermined time length is input to the second convolutional neural network, and the pathological type of the electrocardiographic signal is specified by the second convolutional neural network.

ステップ402では、病理タイプが心電信号に異常が発生したと示す場合に、所定時間長の心電信号を分割して第1所定数の単一心拍を取得する。 In step 402, when the pathology type indicates that an abnormality has occurred in the electrocardiographic signal, the electrocardiographic signal having a predetermined time length is divided to obtain a first predetermined number of single heartbeats.

ステップ403では、取得された第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ入力し、第1畳み込みニューラルネットワークによって第1所定数の単一心拍における異常が発生した心拍位置を特定する。 In step 403, the acquired first predetermined number of single heartbeat data is input to the first convolutional neural network, and the first convolutional neural network identifies the heartbeat position where the abnormality occurs in the first predetermined number of single heartbeats. do.

好ましくは、上記ステップ403では、第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークの入力層へ入力し、第1畳み込みニューラルネットワークによって第1所定数の単一心拍の各単一心拍に対して判定を行い、判定結果を取得し、判定結果に基づいて第1所定数の単一心拍における異常が発生した心拍位置を特定する。 Preferably, in step 403, the data of the first predetermined number of single heartbeats is input to the input layer of the first convolutional neural network, and each single heartbeat of the first predetermined number of single heartbeats is input by the first convolutional neural network. Is determined, the determination result is acquired, and the heartbeat position where the abnormality occurs in the first predetermined number of single heartbeats is specified based on the determination result.

図4Bに示すように、ある所定時間長(例えば、30秒)の連続心電信号のデータを直接第2畳み込みニューラルネットワークへ入力し、当該連続心電信号のデータに対して認識を行い、病理タイプを取得する。病理タイプが心電信号に異常が発生したと示す場合に、当該心電信号を分割して例えば25個の単一心拍のデータを取得してもよい。この25個の単一心拍のデータを第1畳み込みニューラルネットワークに順次入力して認識させ、判定結果を取得する。判定結果は、0と1とで構成される系列であってもよい。例えば、0は異常を示し、1は正常を示すと、25個の単一心拍は、25ビット(bit)の長さの0と1との組み合わせに対応可能である。0の所在する位置を認識することで、この25個の単一心拍における異常が発生した心拍位置を特定できる。 As shown in FIG. 4B, data of a continuous electrocardiographic signal having a predetermined time length (for example, 30 seconds) is directly input to the second convolutional neural network, and the data of the continuous electrocardiographic signal is recognized to perform pathology. Get the type. If the pathology type indicates that an abnormality has occurred in the electrocardiographic signal, the electrocardiographic signal may be divided to obtain data of, for example, 25 single heartbeats. The data of these 25 single heartbeats are sequentially input to the first convolutional neural network and recognized, and the determination result is acquired. The determination result may be a series composed of 0 and 1. For example, if 0 indicates an abnormality and 1 indicates normal, 25 single heartbeats can correspond to a combination of 0s and 1s having a length of 25 bits. By recognizing the position where 0 is located, it is possible to identify the heartbeat position where the abnormality occurs in these 25 single heartbeats.

本実施例では、第2畳み込みニューラルネットワークによって認識された病理タイプが、心電信号に異常が発生したと示すとき、第1畳み込みニューラルネットワークによって当該心電信号の単一心拍について逐一に認識を行うことで、異常が発生した心拍位置を認識する。 In this embodiment, when the pathological type recognized by the second convolutional neural network indicates that an abnormality has occurred in the electrocardiographic signal, the first convolutional neural network recognizes the single heartbeat of the electrocardiographic signal one by one. By doing so, the heartbeat position where the abnormality has occurred is recognized.

上記図2B、図3A、図3Bおよび図4Bに示すアーキテクチャ図から分かるように、本発明における第1畳み込みニューラルネットワークが単一心拍認識ネットワークと見なされ、第2畳み込みニューラルネットワークが心電信号検出ネットワークと見なされてもよい。本発明における第1畳み込みニューラルネットワークと第2畳み込みニューラルネットワークのアーキテクチャ設計は、以下の有利な効果がある。
1)第1畳み込みニューラルネットワークを単独で訓練して、全ネットワークアーキテクチャに対する訓練の難易度を低減することができる。
2)十分な単一心拍データを第1畳み込みニューラルネットワークの訓練サンプルとして取得しやすい。このため、第1畳み込みニューラルネットワークが十分な訓練を受けることができ、単一心拍の認識の安定性および信頼性は、保証できる。
3)第1畳み込みニューラルネットワークで得られた特徴データに基づいて第2畳み込みニューラルネットワークの訓練を補強できるため、長い系列の連続心拍の心電信号のデータ不足の問題を解決できる。
4)心電信号の数が小さいため、本発明におけるアーキテクチャ設計は、組み込み型開発応用に適用できる。
As can be seen from the architectural diagrams shown in FIGS. 2B, 3A, 3B and 4B above, the first convolutional neural network in the present invention is regarded as a single heart rate recognition network, and the second convolutional neural network is an electrocardiographic signal detection network. May be considered. The architectural design of the first convolutional neural network and the second convolutional neural network in the present invention has the following advantageous effects.
1) The first convolutional neural network can be trained independently to reduce the difficulty of training for the entire network architecture.
2) It is easy to acquire sufficient single heart rate data as a training sample of the first convolutional neural network. Therefore, the first convolutional neural network can be sufficiently trained, and the stability and reliability of recognition of a single heartbeat can be guaranteed.
3) Since the training of the second convolutional neural network can be reinforced based on the feature data obtained by the first convolutional neural network, the problem of data shortage of the electrocardiographic signal of a long series of continuous heartbeats can be solved.
4) Due to the small number of electrocardiographic signals, the architectural design in the present invention can be applied to embedded development applications.

図5は、本発明の一例示的な実施例の心電信号検出装置の構造模式図である。図5に示すように、当該心電信号検出装置は、第1分割モジュール51、第1特定モジュール52と第2特定モジュール53を備えてもよい。 FIG. 5 is a schematic structural diagram of an electrocardiographic signal detection device according to an exemplary embodiment of the present invention. As shown in FIG. 5, the electrocardiographic signal detection device may include a first division module 51, a first specific module 52, and a second specific module 53.

第1分割モジュール51は、所定時間長の心電信号を分割して第1所定数の単一心拍を取得する。 The first division module 51 divides an electrocardiographic signal having a predetermined time length to acquire a first predetermined number of single heartbeats.

第1特定モジュール52は、第1分割モジュール51で取得された第1所定数の単一心拍の各単一心拍に対応する特徴データを特定し、第1所定数の特徴データを取得する。 The first specific module 52 specifies the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats acquired by the first division module 51, and acquires the first predetermined number of feature data.

第2特定モジュール53は、所定時間長の心電信号と第1特定モジュール52で特定された第1所定数の特徴データとに基づいて、所定時間長の心電信号の病理タイプを特定する。 The second specific module 53 identifies the pathological type of the electrocardiographic signal having a predetermined time length based on the electrocardiographic signal having a predetermined time length and the first predetermined number of feature data specified by the first specific module 52.

図6は、本発明の別の例示的な実施例の心電信号検出装置の構造模式図である。図6に示すように、上記図5に示す実施例を基に、第1特定モジュール52は、第1入力手段521と抽出手段522を備えてもよい。 FIG. 6 is a schematic structural diagram of an electrocardiographic signal detection device according to another exemplary embodiment of the present invention. As shown in FIG. 6, based on the embodiment shown in FIG. 5, the first specific module 52 may include a first input means 521 and an extraction means 522.

第1入力手段521は、第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ順次入力する。 The first input means 521 sequentially inputs the data of the first predetermined number of single heartbeats to the first convolutional neural network.

抽出手段522は、第1畳み込みニューラルネットワークによって第1所定数の単一心拍の各単一心拍に対応する特徴データを抽出する。 The extraction means 522 extracts the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats by the first convolutional neural network.

一実施例では、心電信号検出装置は、判定モジュール54と第3特定モジュール55を更に備える。 In one embodiment, the electrocardiographic signal detection device further includes a determination module 54 and a third specific module 55.

判定モジュール54は、第1畳み込みニューラルネットワークによって、第1分割モジュール51で取得された第1所定数の単一心拍の各単一心拍に対して判定を行い、判定結果を取得する。 The determination module 54 makes a determination for each single heartbeat of the first predetermined number of single heartbeats acquired by the first division module 51 by the first convolutional neural network, and acquires the determination result.

第3特定モジュール55は、判定モジュール54で取得された判定結果に基づいて第1所定数の単一心拍における異常が発生した心拍位置を特定する。 The third specific module 55 identifies the heartbeat position where the abnormality occurs in the first predetermined number of single heartbeats based on the determination result acquired by the determination module 54.

一実施例では、第2特定モジュール53は、第1特定手段531、第2入力手段532と第2特定手段533を備えてもよい。 In one embodiment, the second specific module 53 may include a first specific means 531, a second input means 532, and a second specific means 533.

第1特定手段531は、第1所定数の単一心拍の各単一心拍に対応する時系列データを特定し、第1所定数の時系列データを取得する。 The first specifying means 531 specifies the time-series data corresponding to each single heartbeat of the first predetermined number of single heartbeats, and acquires the first predetermined number of time-series data.

第2入力手段532は、第1特定手段531で取得された第1所定数の時系列データと第1所定数の特徴データとを第2畳み込みニューラルネットワークの入力層へ入力する。 The second input means 532 inputs the first predetermined number of time series data acquired by the first specific means 531 and the first predetermined number of feature data to the input layer of the second convolutional neural network.

第2特定手段533は、第2畳み込みニューラルネットワークによって心電信号の病理タイプを特定する。 The second specifying means 533 identifies the pathological type of the electrocardiographic signal by the second convolutional neural network.

第1特定手段531は、具体的に、
所定時間長の心電信号における各単一心拍について、当該単一心拍のR波に対応する時点を特定し、
当該単一心拍のR波に前後に隣接する第2所定数の単一心拍のそれぞれのR波に対応する時点を特定し、
当該単一心拍のR波に対応する時点と、当該単一心拍に前後に隣接する第2所定数の単一心拍のそれぞれのR波に対応する時点とに基づいて、当該単一心拍に対応する時系列データを特定する。
Specifically, the first specific means 531 is
For each single heartbeat in the electrocardiographic signal of a predetermined time length, the time point corresponding to the R wave of the single heartbeat is specified.
The time point corresponding to each R wave of the second predetermined number of single heartbeats adjacent to the R wave of the single heartbeat before and after is specified.
Corresponds to the single heartbeat based on the time point corresponding to the R wave of the single heartbeat and the time point corresponding to each R wave of the second predetermined number of single heartbeats adjacent to the single heartbeat before and after. Specify the time series data to be used.

一実施例では、第2特定モジュール53は、第3入力手段534、第4入力手段535と第3特定手段536を備える。 In one embodiment, the second specific module 53 includes a third input means 534, a fourth input means 535, and a third specific means 536.

第3入力手段534は、第1所定数の特徴データを第2畳み込みニューラルネットワークの所定畳み込み層へ入力する。 The third input means 534 inputs the first predetermined number of feature data to the predetermined convolutional layer of the second convolutional neural network.

第4入力手段535は、所定時間長の心電信号を第2畳み込みニューラルネットワークの入力層へ入力する。 The fourth input means 535 inputs an electrocardiographic signal having a predetermined time length to the input layer of the second convolutional neural network.

第3特定手段536は、第2畳み込みニューラルネットワークによって、第3入力手段534で入力された第1所定数の特徴データと第4入力手段535で入力された心電信号とに対して認識を行い、心電信号の病理タイプを特定する。 The third specific means 536 recognizes the first predetermined number of feature data input by the third input means 534 and the electrocardiographic signal input by the fourth input means 535 by the second convolutional neural network. , Identify the pathological type of electrocardiographic signal.

図7は、本発明の更に別の例示的な実施例の心電信号検出装置の構造模式図である。図7に示すように、心電信号検出装置は、第4特定モジュール71、第2分割モジュール72と第5特定モジュール73を備えてもよい。 FIG. 7 is a schematic structural diagram of an electrocardiographic signal detection device according to still another exemplary embodiment of the present invention. As shown in FIG. 7, the electrocardiographic signal detection device may include a fourth specific module 71, a second division module 72, and a fifth specific module 73.

第4特定モジュール71は、第2畳み込みニューラルネットワークによって所定時間長の心電信号の病理タイプを特定する。 The fourth specific module 71 identifies the pathological type of the electrocardiographic signal having a predetermined time length by the second convolutional neural network.

第2分割モジュール72は、第4特定モジュール71で特定された病理タイプが心電信号に異常が発生したと示す場合に、所定時間長の心電信号を分割して第1所定数の単一心拍を取得する。 The second division module 72 divides the electrocardiographic signal having a predetermined time length into a single predetermined number when the pathological type specified by the fourth specific module 71 indicates that an abnormality has occurred in the electrocardiographic signal. Get a heartbeat.

第5特定モジュール73は、第2分割モジュール72で取得された第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ入力することで、第1畳み込みニューラルネットワークによって第1所定数の単一心拍における異常が発生した心拍位置を特定する。 The fifth specific module 73 inputs the data of the first predetermined number of single heartbeats acquired by the second division module 72 into the first convolutional neural network, and the first convolutional neural network causes the first predetermined number of single heartbeats. Identify the heartbeat position where the abnormality occurred in one heartbeat.

一実施例では、第5特定モジュール73は、第5入力手段731、判定手段732と第4特定手段733を備えてもよい。 In one embodiment, the fifth specific module 73 may include a fifth input means 731, a determination means 732, and a fourth specific means 733.

第5入力手段731は、第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークの入力層へ入力する。 The fifth input means 731 inputs the data of the first predetermined number of single heartbeats to the input layer of the first convolutional neural network.

判定手段732は、第5入力手段731によって第1畳み込みニューラルネットワークへ入力された第1所定数の単一心拍の各単一心拍に対して判定を行い、判定結果を取得する。 The determination means 732 makes a determination for each single heartbeat of the first predetermined number of single heartbeats input to the first convolutional neural network by the fifth input means 731, and acquires the determination result.

第4特定手段733は、判定手段732で取得された判定結果に基づいて、第1所定数の単一心拍における異常が発生した心拍位置を特定する。 The fourth specifying means 733 identifies the heartbeat position where the abnormality occurs in the first predetermined number of single heartbeats based on the determination result acquired by the determination means 732.

本発明のメモリ検出装置の実施例は、電子機器に適用可能である。装置実施例は、ソフトウェアにて実施されてもよく、ハードウェアまたはソフト・ハードウェアの組み合わせで実施されてもよい。ソフトウェアによる実施を例とすると、論理意味上の装置は、所在する電子機器のプロセッサが非一過性の記録媒体における対応する機器の実行可能な指令を読み取ってメモリへ転送して動作させることによって形成される。ハードウェア実装に関しては、図8は、本発明の心電信号検出装置の所在する電子機器のハードウェア構造図であり、図8に示すプロセッサ801、メモリ802、ネットワークインターフェース803および非一過性の記録媒体804に加えて、実施例における装置の所在する電子機器は、通常、当該電子機器の実機能に応じて、他のハードウェアを備えてもよい。ここで繰り返し説明しない。 The embodiment of the memory detection device of the present invention is applicable to electronic devices. The device embodiment may be implemented by software, or may be implemented by hardware or a combination of software and hardware. Taking software implementation as an example, a logically meaningful device is operated by the processor of an located electronic device reading the executable command of the corresponding device on a non-transient recording medium and transferring it to memory. It is formed. With respect to hardware implementation, FIG. 8 is a hardware structural diagram of the electronic device in which the electrocardiographic signal detector of the present invention is located, the processor 801 shown in FIG. 8, the memory 802, the network interface 803, and the non-transient In addition to the recording medium 804, the electronic device in which the device in the embodiment is located may usually be equipped with other hardware depending on the actual function of the electronic device. I will not repeat it here.

当業者は、明細書を考慮してここで開示された発明を実践した後、本発明の他の実施案を容易に想到する。本発明は、本発明の如何なる変形、用途または適応的な変化をカバーすることを意図する。これらの変形、用途または適応的な変化は、本発明の一般的な原理に従い、本発明に開示されていない本技術分野における公知常識や慣用技術手段を含む。明細書と実施例は、単に例示と見なされ、本発明の真の範囲および要旨は、請求項によって示される。 Those skilled in the art will readily come up with other embodiments of the invention after practicing the invention disclosed herein in light of the specification. The present invention is intended to cover any variation, use or adaptive variation of the invention. These variations, uses or adaptive changes, in accordance with the general principles of the invention, include common sense and conventional techniques in the art not disclosed in the invention. The specification and examples are considered merely exemplary and the true scope and gist of the invention is set forth by claim.

更に説明すべきことは、用語「含む」、「備える」またはほかの何れかの同義語が非排他的含有をカバーすることを意図する。このように、一シリーズの要素を有する手順、方法、物品または機器は、それらの要素を有するだけではなく、明確に挙げられていない他の要素も有し、またはこのような手順、方法、物品または機器に固有の要素も有する。更なる制限がない限り、語句「1つの…を含む」で限定される要素は、前記要素を有する手順、方法、物品または機器に他の同じ要素を更に有することをあえて排除しない。 Further to be explained, it is intended that the terms "include", "provide" or any other synonym cover non-exclusive inclusion. Thus, a procedure, method, article or device having a series of elements not only has those elements, but also has other elements that are not explicitly listed, or such procedures, methods, articles. Or it also has elements specific to the device. Unless further restricted, the element limited by the phrase "contains one ..." does not deliberately exclude having the same other element in the procedure, method, article or device having the element.

上述したのは、本発明の好適な実施例に過ぎず、本発明を制限するためのものではない。本発明の精神及び原則内でなされた如何なる変更、均等物による置換、改良等も、本発明の保護範囲内に含まれる。 The above are merely preferred embodiments of the invention and are not intended to limit the invention. Any changes, substitutions, improvements, etc. made within the spirit and principles of the invention are also included within the scope of the invention.

Claims (9)

心電信号を検出するための電子機器に適用される心電信号検出方法であって、
所定時間長の心電信号を分割して第1所定数の単一心拍を取得するステップと、
前記第1所定数の単一心拍の各単一心拍に対応する特徴データを特定し、第1所定数の特徴データを取得するステップと、
前記所定時間長の心電信号と前記第1所定数の特徴データとに基づいて、前記所定時間長の心電信号の病理タイプを特定するステップと、を含み、
前記第1所定数の単一心拍の各単一心拍に対応する特徴データを特定するステップは、
前記第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ順次入力することと、
前記第1所定数の単一心拍の各単一心拍に対応する特徴データを前記第1畳み込みニューラルネットワークによって抽出することと、を含み、
前記所定時間長の心電信号と前記第1所定数の特徴データとに基づいて、前記所定時間長の心電信号の病理タイプを特定するステップは、
前記第1所定数の単一心拍の各単一心拍に対応する時系列データを特定し、第1所定数の時系列データを取得することと、
前記第1所定数の時系列データと前記第1所定数の特徴データとを第2畳み込みニューラルネットワークの入力層へ入力することで、前記心電信号の病理タイプを前記第2畳み込みニューラルネットワークによって特定することと、を含む、
ことを特徴とする心電信号検出方法。
An electrocardiographic signal detection method applied to electronic devices for detecting electrocardiographic signals.
A step of dividing an electrocardiographic signal of a predetermined time length to obtain a first predetermined number of single heartbeats, and
A step of identifying the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats and acquiring the feature data of the first predetermined number of heartbeats.
Including a step of identifying the pathological type of the electrocardiographic signal of the predetermined time length based on the electrocardiographic signal of the predetermined time length and the feature data of the first predetermined number.
The step of identifying the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats is
The data of the first predetermined number of single heartbeats are sequentially input to the first convolutional neural network, and
Including extracting feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats by the first convolutional neural network.
The step of identifying the pathological type of the electrocardiographic signal of the predetermined time length based on the electrocardiographic signal of the predetermined time length and the feature data of the first predetermined number is
Identifying the time-series data corresponding to each single heartbeat of the first predetermined number of single heartbeats, and acquiring the first predetermined number of time-series data.
By inputting the first predetermined number of time series data and the first predetermined number of feature data into the input layer of the second convolutional neural network, the pathological type of the electrocardiographic signal is specified by the second convolutional neural network. To do, including,
A method for detecting an electrocardiographic signal.
前記第1畳み込みニューラルネットワークによって前記第1所定数の単一心拍の各単一心拍に対して判定を行い、判定結果を取得するステップと、
前記判定結果に基づいて、前記第1所定数の単一心拍における異常が発生した心拍位置を特定するステップと、を更に含むことを特徴とする請求項1に記載の心電信号検出方法。
A step of making a judgment for each single heartbeat of the first predetermined number of single heartbeats by the first convolutional neural network and acquiring the judgment result.
The electrocardiographic signal detection method according to claim 1, further comprising a step of identifying a heartbeat position in which an abnormality has occurred in the first predetermined number of single heartbeats based on the determination result.
前記単一心拍に対応する時系列データを特定することは、
当該単一心拍のR波に対応する時点を特定することと、
当該単一心拍のR波に前後に隣接する第2所定数の単一心拍のそれぞれのR波に対応する時点を特定することと、
当該単一心拍のR波に対応する時点と、当該単一心拍に前後に隣接する第2所定数の単一心拍のそれぞれのR波に対応する時点とに基づいて、当該単一心拍に対応する時系列データを特定することと、を含むことを特徴とする請求項1に記載の心電信号検出方法。
Identifying the time series data corresponding to the single heartbeat is
Identifying the time point corresponding to the R wave of the single heartbeat,
Identifying the time point corresponding to each R wave of the second predetermined number of single heartbeats adjacent to the R wave of the single heartbeat before and after.
Corresponds to the single heartbeat based on the time point corresponding to the R wave of the single heartbeat and the time point corresponding to each R wave of the second predetermined number of single heartbeats adjacent to the single heartbeat before and after. The electrocardiographic signal detection method according to claim 1, wherein the time-series data to be specified is specified.
前記所定時間長の心電信号と前記第1所定数の特徴データとに基づいて、前記所定時間長の心電信号の病理タイプを特定するステップは、
前記第1所定数の特徴データを第2畳み込みニューラルネットワークの所定畳み込み層へ入力することと、
前記所定時間長の心電信号を前記第2畳み込みニューラルネットワークの入力層へ入力することと、
前記第2畳み込みニューラルネットワークによって前記心電信号のタイプを特定することと、を含むことを特徴とする請求項1に記載の心電信号検出方法。
The step of identifying the pathological type of the electrocardiographic signal of the predetermined time length based on the electrocardiographic signal of the predetermined time length and the feature data of the first predetermined number is
Inputting the first predetermined number of feature data into the predetermined convolutional layer of the second convolutional neural network, and
By inputting the electrocardiographic signal having a predetermined time length to the input layer of the second convolutional neural network,
The electrocardiographic signal detection method according to claim 1, wherein the type of the electrocardiographic signal is specified by the second convolutional neural network.
所定時間長の心電信号を分割して第1所定数の単一心拍を取得するための第1分割モジュールと、
前記第1分割モジュールで取得された前記第1所定数の単一心拍の各単一心拍に対応する特徴データを特定し、第1所定数の特徴データを取得するための第1特定モジュールと、
前記所定時間長の心電信号と、前記第1特定モジュールで特定された前記第1所定数の特徴データとに基づいて、前記所定時間長の心電信号の病理タイプを特定するための第2特定モジュールと、を備え、
前記第1特定モジュールは、
前記第1所定数の単一心拍のデータを第1畳み込みニューラルネットワークへ順次入力するための第1入力手段と、
前記第1所定数の単一心拍の各単一心拍に対応する特徴データを前記第1畳み込みニューラルネットワークによって抽出するための抽出手段と、を備え、
前記第2特定モジュールは、
前記第1所定数の単一心拍の各単一心拍に対応する時系列データを特定し、第1所定数の時系列データを取得するための第1特定手段と、
前記第1特定手段で取得された前記第1所定数の時系列データと、前記第1所定数の特徴データとを第2畳み込みニューラルネットワークの入力層へ入力するための第2入力手段と、
前記第2畳み込みニューラルネットワークによって前記心電信号の病理タイプを特定するための第2特定手段と、を備えることを特徴とする心電信号検出装置。
A first division module for dividing an electrocardiographic signal having a predetermined time length to obtain a first predetermined number of single heartbeats,
A first specific module for specifying the feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats acquired by the first division module and acquiring the first predetermined number of feature data, and
A second for identifying the pathological type of the electrocardiographic signal having a predetermined time length based on the electrocardiographic signal having a predetermined time length and the feature data of the first predetermined number specified by the first specific module. With a specific module,
The first specific module is
A first input means for sequentially inputting the data of the first predetermined number of single heartbeats into the first convolutional neural network, and
An extraction means for extracting feature data corresponding to each single heartbeat of the first predetermined number of single heartbeats by the first convolutional neural network is provided.
The second specific module is
A first specific means for specifying time-series data corresponding to each single heartbeat of the first predetermined number of single heartbeats and acquiring the first predetermined number of time-series data.
A second input means for inputting the first predetermined number of time series data acquired by the first specific means and the first predetermined number of feature data into the input layer of the second convolutional neural network.
An electrocardiographic signal detection device comprising: a second specifying means for identifying a pathological type of the electrocardiographic signal by the second convolutional neural network.
前記第1畳み込みニューラルネットワークによって前記第1所定数の単一心拍の各単一心拍に対して判定を行い、判定結果を取得するための判定モジュールと、
前記判定モジュールで取得された前記判定結果に基づいて、前記第1所定数の単一心拍における異常が発生した心拍位置を特定するための第3特定モジュールと、を更に備えることを特徴とする請求項に記載の心電信号検出装置。
A determination module for making a determination for each single heartbeat of the first predetermined number of single heartbeats by the first convolutional neural network and acquiring the determination result,
A claim characterized by further comprising a third specific module for identifying a heartbeat position in which an abnormality has occurred in the first predetermined number of single heartbeats based on the determination result acquired by the determination module. Item 5. The electrocardiographic signal detection device according to Item 5.
前記第2特定モジュールは、
前記第1所定数の特徴データを第2畳み込みニューラルネットワークの所定畳み込み層へ入力するための第3入力手段と、
前記所定時間長の心電信号を前記第2畳み込みニューラルネットワークの入力層へ入力するための第4入力手段と、
前記第2畳み込みニューラルネットワークによって、前記第3入力手段で入力された前記第1所定数の特徴データと、前記第4入力手段で入力された前記心電信号とに対して認識を行い、前記心電信号の病理タイプを特定するための第3特定手段と、を備えることを特徴とする請求項に記載の心電信号検出装置。
The second specific module is
A third input means for inputting the first predetermined number of feature data into the predetermined convolutional layer of the second convolutional neural network, and
A fourth input means for inputting an electrocardiographic signal having a predetermined time length to the input layer of the second convolutional neural network, and
The second convolutional neural network recognizes the first predetermined number of feature data input by the third input means and the electrocardiographic signal input by the fourth input means, and recognizes the heart. The electrocardiographic signal detection device according to claim 5 , further comprising a third specific means for identifying a pathological type of an electric signal.
機器読み取り可能な記憶媒体であって、
前記機器読み取り可能な記憶媒体には、上記請求項1からの何れか一項に記載の心電信号検出方法を実行するための機器の実行可能な指令が記憶されていることを特徴とする機器読み取り可能な記憶媒体。
A storage medium that can be read by a device
The device-readable storage medium is characterized in that an executable command of the device for executing the electrocardiographic signal detection method according to any one of claims 1 to 4 is stored. Device readable storage medium.
プロセッサと、前記プロセッサの実行可能な指令を記憶するための記憶媒体とを備え、
前記プロセッサは、上記請求項1からの何れか一項に記載の心電信号検出方法を実行することを特徴とする電子機器。
It comprises a processor and a storage medium for storing the executable instructions of the processor.
The processor is an electronic device according to any one of claims 1 to 4 , wherein the processor executes the electrocardiographic signal detection method.
JP2020526667A 2017-08-03 2018-08-01 Electrocardiographic signal detection Active JP7065185B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201710656849.8 2017-08-03
CN201710656849.8A CN107516075B (en) 2017-08-03 2017-08-03 Electrocardiosignal detection method and device and electronic equipment
PCT/CN2018/097917 WO2019024861A1 (en) 2017-08-03 2018-08-01 Detection of electrocardiogram signal

Publications (2)

Publication Number Publication Date
JP2020528336A JP2020528336A (en) 2020-09-24
JP7065185B2 true JP7065185B2 (en) 2022-05-11

Family

ID=60722226

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020526667A Active JP7065185B2 (en) 2017-08-03 2018-08-01 Electrocardiographic signal detection

Country Status (7)

Country Link
US (1) US11534097B2 (en)
EP (1) EP3644220A4 (en)
JP (1) JP7065185B2 (en)
KR (1) KR102451795B1 (en)
CN (1) CN107516075B (en)
CA (1) CA3071699C (en)
WO (1) WO2019024861A1 (en)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107516075B (en) 2017-08-03 2020-10-09 安徽华米智能科技有限公司 Electrocardiosignal detection method and device and electronic equipment
CN108030488A (en) * 2017-11-30 2018-05-15 北京医拍智能科技有限公司 The detecting system of arrhythmia cordis based on convolutional neural networks
CN108470158B (en) * 2018-03-08 2020-05-12 华南理工大学 Method for searching error minimum network computing structure for dynamic ECG data
KR20190114694A (en) * 2018-03-30 2019-10-10 삼성에스디에스 주식회사 Method for learning and analyzing time series data by using artificial intelligence
EP3847958A4 (en) * 2018-09-04 2021-09-08 Shenzhen Institutes of Advanced Technology Arrhythmia detection method and apparatus, electronic device, and computer storage medium
TWI680746B (en) * 2018-11-21 2020-01-01 晶神醫創股份有限公司 Method and system for neurological event detection
CN109480824B (en) * 2018-12-11 2021-10-08 武汉中旗生物医疗电子有限公司 Method and device for processing electrocardio waveform data and server
CN109875579A (en) * 2019-02-28 2019-06-14 京东方科技集团股份有限公司 Emotional health management system and emotional health management method
US20220218262A1 (en) * 2019-04-30 2022-07-14 Medicalgorithmics S.A. Electrocardiogram signal segmentation
EP3981321A4 (en) * 2019-07-29 2022-08-03 Cardio Intelligence Inc. Electrocardiogram display device, electrocardiogram display method, and program
US11521743B2 (en) * 2019-10-21 2022-12-06 Tencent America LLC Framework for performing electrocardiography analysis
CN111488793B (en) * 2020-02-21 2024-04-30 广州视源电子科技股份有限公司 Electrocardiosignal classification method, electrocardiosignal classification device, electronic equipment and storage medium
KR102241799B1 (en) * 2020-08-06 2021-04-19 주식회사 에이티센스 Method and electronic apparatus for providing classfication data of ecg detection signal
CN112690802B (en) * 2020-12-25 2023-03-03 平安科技(深圳)有限公司 Method, device, terminal and storage medium for detecting electrocardiosignals
CN112883803B (en) * 2021-01-20 2023-09-01 武汉中旗生物医疗电子有限公司 Electrocardiogram signal classification method, device and storage medium based on deep learning
KR102653258B1 (en) * 2022-02-18 2024-04-01 주식회사 뷰노 Ecg delineation and inetegration method
WO2024019523A1 (en) * 2022-07-22 2024-01-25 주식회사 메디컬에이아이 Method, program, and apparatus for predicting health state by using electrocardiogram
CN116530996B (en) * 2023-06-26 2023-08-29 广东技术师范大学 Low-measurement-load-oriented electrocardiographic data abnormality early warning method and system
CN116548980B (en) * 2023-07-07 2023-09-01 广东技术师范大学 Long-time-interval electrocardiograph classification method and system based on pulse neural network

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102779234A (en) 2012-06-28 2012-11-14 中国科学院苏州纳米技术与纳米仿生研究所 Electrocardiogram classified processing method and device
WO2017091736A1 (en) 2015-11-23 2017-06-01 Mayo Foundation For Medical Education And Research Processing physiological electrical data for analyte assessments
JP2017129896A (en) 2016-01-18 2017-07-27 富士通株式会社 Machine learning device, machine learning method, and machine learning program

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL155955A0 (en) * 2003-05-15 2003-12-23 Widemed Ltd Adaptive prediction of changes of physiological/pathological states using processing of biomedical signal
US8150128B2 (en) 2006-08-30 2012-04-03 The Trustees Of Columbia University In The City Of New York Systems and method for composite elastography and wave imaging
TW200927065A (en) 2007-12-28 2009-07-01 Tatung Co Monitoring and control system for cardiopulmonary function and device thereof
EP2523534B1 (en) 2011-05-12 2019-08-07 Ledengin, Inc. Apparatus and methods for tuning of emitter with multiple LEDs to a single color bin
KR20140063100A (en) * 2012-11-16 2014-05-27 삼성전자주식회사 Apparatus and methods for remote cardiac disease management
US20150112208A1 (en) * 2013-10-23 2015-04-23 Quanttus, Inc. Medication management
CN104783782B (en) * 2015-04-13 2017-09-01 深圳市飞马与星月科技研究有限公司 Electrocardiosignal automatic testing method and device
US10779744B2 (en) * 2015-10-27 2020-09-22 Cardiologs Technologies Sas Automatic method to delineate or categorize an electrocardiogram
CN105232032A (en) 2015-11-05 2016-01-13 福州大学 Remote electrocardiograph monitoring and early warning system and method based on wavelet analysis
US20180032689A1 (en) * 2016-07-29 2018-02-01 Qatar University Method and apparatus for performing feature classification on electrocardiogram data
CN106344004A (en) * 2016-09-28 2017-01-25 清华大学 Electrocardiosignal feature point detecting method and device
CN106779051A (en) * 2016-11-24 2017-05-31 厦门中控生物识别信息技术有限公司 A kind of convolutional neural networks model parameter processing method and system
CN106934799B (en) * 2017-02-24 2019-09-03 安翰科技(武汉)股份有限公司 Capsule endoscope visual aids diagosis system and method
CN107516075B (en) 2017-08-03 2020-10-09 安徽华米智能科技有限公司 Electrocardiosignal detection method and device and electronic equipment

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102779234A (en) 2012-06-28 2012-11-14 中国科学院苏州纳米技术与纳米仿生研究所 Electrocardiogram classified processing method and device
WO2017091736A1 (en) 2015-11-23 2017-06-01 Mayo Foundation For Medical Education And Research Processing physiological electrical data for analyte assessments
JP2017129896A (en) 2016-01-18 2017-07-27 富士通株式会社 Machine learning device, machine learning method, and machine learning program

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Quazi Abidur Rahman et al.,Utilizing ECG-Based Heartbeat Classification for Hypertrophic Cardiomyopathy Identification,IEEE TRANSACTIONS ON NANOBIOSCIENCE,2015年07月,VOL.14, NO.5,pp.505-512
U. Rajendra Acharya et al.,Application of deep convolutional neural network for automated detection of myocardial infarction using ECG signals,Information Sciences,2017年06月23日,415-416,pp.190-198

Also Published As

Publication number Publication date
CN107516075B (en) 2020-10-09
US11534097B2 (en) 2022-12-27
CA3071699A1 (en) 2019-02-07
EP3644220A1 (en) 2020-04-29
CA3071699C (en) 2023-02-28
WO2019024861A1 (en) 2019-02-07
KR20200036908A (en) 2020-04-07
JP2020528336A (en) 2020-09-24
US20200155024A1 (en) 2020-05-21
CN107516075A (en) 2017-12-26
KR102451795B1 (en) 2022-10-06
EP3644220A4 (en) 2020-11-04

Similar Documents

Publication Publication Date Title
JP7065185B2 (en) Electrocardiographic signal detection
EP3608918B1 (en) Parallel implementation of deep neural networks for classifying heart sound signals
US10869610B2 (en) System and method for identifying cardiac arrhythmias with deep neural networks
Acharya et al. Automated detection of arrhythmias using different intervals of tachycardia ECG segments with convolutional neural network
Limam et al. Atrial fibrillation detection and ECG classification based on convolutional recurrent neural network
CN110226921B (en) Electrocardiosignal detection and classification method and device, electronic equipment and storage medium
WO2021017313A1 (en) Atrial fibrillation detection method and apparatus, computer device, and storage medium
Raghavendra et al. Cardiac arrhythmia detection using dynamic time warping of ECG beats in e-healthcare systems
CN111345816B (en) Multi-lead QRS complex detection method, device, equipment and storage medium
CN108968941B (en) Arrhythmia detection method, device and terminal
CN111345817B (en) QRS complex position determination method, device, equipment and storage medium
CN110638430B (en) Method for building cascade neural network ECG signal arrhythmia classification model
CN109077714B (en) Signal identification method, device, equipment and storage medium
CN110558975B (en) Electrocardiosignal classification method and system
CN109077720B (en) Signal processing method, device, equipment and storage medium
CN112603330B (en) Electrocardiosignal identification and classification method
CN115470828A (en) Multi-lead electrocardiogram classification and identification method based on convolution and self-attention mechanism
CN111657925A (en) Electrocardiosignal classification method, system, terminal and storage medium based on machine learning
Chen et al. Heart sound segmentation via duration long–short term memory neural network
CN109044340B (en) Electrocardiogram data classification method and device, electronic equipment and storage medium
CN111067512B (en) Ventricular fibrillation detection device, ventricular fibrillation detection model training method and equipment
CN115470832A (en) Electrocardiosignal data processing method based on block chain
CN115177262A (en) Heart sound and electrocardiogram combined diagnosis device and system based on deep learning
Golande et al. Optical electrocardiogram based heart disease prediction using hybrid deep learning
CN111214225B (en) Room excitement identification method and device, electronic equipment and readable storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200129

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210521

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210914

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211207

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220401

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220425

R150 Certificate of patent or registration of utility model

Ref document number: 7065185

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150