CN111091092A - 一种基于优化卷积神经网络分类的数据增强方法 - Google Patents

一种基于优化卷积神经网络分类的数据增强方法 Download PDF

Info

Publication number
CN111091092A
CN111091092A CN201911296246.7A CN201911296246A CN111091092A CN 111091092 A CN111091092 A CN 111091092A CN 201911296246 A CN201911296246 A CN 201911296246A CN 111091092 A CN111091092 A CN 111091092A
Authority
CN
China
Prior art keywords
image
dimensional
wave
gray
gray scale
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911296246.7A
Other languages
English (en)
Inventor
陈真诚
郑震宇
梁永波
朱健铭
韩国成
魏子宁
唐群峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guilin University of Electronic Technology
Original Assignee
Guilin University of Electronic Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guilin University of Electronic Technology filed Critical Guilin University of Electronic Technology
Priority to CN201911296246.7A priority Critical patent/CN111091092A/zh
Publication of CN111091092A publication Critical patent/CN111091092A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/22Source localisation; Inverse modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/30Noise filtering

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于优化卷积神经网络分类的数据增强方法,其特征在于,包括如下步骤:1)获取一维信号数据;2)生成二维灰度图像;3)得到二维图像;4)图像重塑;5)训练。这种方法能够增加较少数据类型的数据量进而达到数据平衡的目的,获得的二维灰度图像能够最大程度的保留原始信号的信息,避免因为噪声滤波等操作带来的数据丢失问题,这种方法也能提高数据处理的效率、提高图像分类的准确率。

Description

一种基于优化卷积神经网络分类的数据增强方法
技术领域
本发明涉及图像信息处理技术领域,具体是一种基于优化卷积神经网络分类的数据增强方法。
背景技术
在图像信息处理技术领域,得到更好更准确的图像分类结果是众多研究者所追求的目标,一个更加准确的分类结果能够更好的减轻人工分类的工作量,但是大部分得到的原始信号都是带有干扰噪声的一维信号,在对其进行识别分类之前,均需要进行噪声滤波和特征提取等一系列的相关操作,这不仅需要更加繁琐的处理技术,同时也在一定程度上会对原始信号数据造成丢失或遗漏。
在将一维信号转换成二维灰度图像的技术中,因为二维灰度图像自身的特性,受到信号的噪声干扰影响较小,因此可以不需要对二维灰度图像数据进行噪声滤波和特征提取等一系列数据预处理步骤,这样不仅减少了数据处理的工作量,而且在最大程度上保留了原始数据的信息。
由于深度学习的模型的性能需要大量数据的训练来支撑,但是往往所得到的数据量达不到理想的标准,所以数据量的多少对于一个模型训练的好坏起到了关键的作用,在对二维灰度图像数据的裁剪和重塑后,所得到的数据量大大增加,这能够大大的提高深度学习模型的训练训练后的性能。
发明内容
本发明的目的是针对现有技术的不足,而提供一种基于优化卷积神经网络分类的数据增强方法。这种方法能够增加较少数据类型的数据量进而达到数据平衡的目的,获得的二维灰度图像能够最大程度的保留原始信号的信息,避免因为噪声滤波等操作带来的数据丢失问题,这种方法也能提高数据处理的效率、提高图像分类的准确率。
实现本发明目的的技术方案是:
一种基于优化卷积神经网络分类的数据增强方法,其特征在于,包括如下步骤:
1)获取一维信号数据;
2)生成二维灰度图像:将步骤1)获得的一维信号转换生成二维灰度图像;
3)得到二维图像:将步骤2)生成的二维灰度图像采用九种不同的裁剪方式得到九个不同的二维灰度图像;
4)图像重塑:将所有裁剪后的二维灰度图像进行重塑,以统一全部二维图像的图像大小;
5)训练:将经过数据增强后的二维灰度图像输入到二维卷积神经网络中加以训练学习,进行检测识别分类,进而完成卷积神经网络分类的目的。
步骤2)中所述的生成二维灰度图像的过程为:
以心电信号为例,假定一维心电信号包含有P-QRS-T波,QRS波群在P波之后,是一个短时程、较高幅度及波形尖锐的波群,P-QRS-T波是三个紧密相连的电位波动,第一个向下的波成为Q波,第一个向上的波成为R波,紧接R波之后向下的波形为S波,正常QRS波群历时0.06秒-0.10秒,是心室内兴奋传播所需的时间,找到R波的峰值时间并对其进行定位,以R波峰值为定位基点,对每个心电信号搏动进行切片,将R波峰值信号居中,同时将前一个和后一个R波峰值信号中排除第一个和最后92个心电信号,用以转换生成为一个二维心电图像,转换如公式(1):
T(Rp(n)-92)≤T(Rp(n))≤T(Rp(n)+92) (1),
式中T(Rp(n))表示所定位的R波峰值时间;T(Rp(n)-92)表示所定位的R波峰值时间之前的92个心电信号;T(Rp(n)+92)表示所定位的R波峰值时间之后的92个心电信号,转换后生成的二维灰度图像为192×128大小的二维灰度图像,能够更好的作为二维卷积神经网络的输入数据。
步骤3)中所述得到九个不同的二维灰度图像的过程为:
对目标二维图像的指定区域进行裁剪,将图像左上角坐标定位为(0,0,0,0),按照96×96大小的格式进行裁剪,则左上图像的基准坐标为(0,0,96,96),得到大小为96×96的左上灰度图像,依照这种方式,分别定位基准坐标(0,16,96,96)和(0,32,96,96)可以得到左中灰度图像和左下灰度图像,以此类推,依照这种方式可以得到中上灰度图像、中部灰度图像、中下灰度图像、右上灰度图像、右中灰度图像和右下灰度图像,因为所采用的裁剪方式以96大小为标准,所以得到的全部裁剪图像均是96×96大小的二维灰度图像。
步骤4)中所述的重塑为:
将裁剪后的二维灰度图像内各点的像素值标记为裁剪后96×96的灰度图像内与其最近的点,表示公式如下:
Figure BDA0002320634310000021
Figure BDA0002320634310000022
式中fw表示重塑后的宽度比;fh表示重塑后的高度比;w1和h1表示96×96灰度图像的宽度和高度;w2和h2表示重塑后的二维灰度图像的宽度和高度,通过图像的重塑,得到大小为192×128尺寸的二维灰度图像,这样使得裁剪后的增加的图像与原始图像的大小尺寸一致。
本技术方案基于优化卷积神经网络分类的数据增强方法使得深度学习框架下的二维卷积神经网络模型在进行检测识别分类时,能够很好的优化输入数据量的不平衡和过少无法更好的验证模型性能的问题,此外,将一维信号转换成二维灰度图像作为输入数据也可以省去对一维信号的噪声滤波、信号分割和特征提取等数据预处理步骤,大大减少了对数据处理的工作量。
这种方法能够增加较少数据类型的数据量进而达到数据平衡的目的,获得的二维灰度图像能够最大程度的保留原始信号的信息,避免因为噪声滤波等操作带来的数据丢失问题,这种方法也能提高数据处理的效率、提高图像分类的准确率。
附图说明
图1为实施例的方法流程示意图;
图2为实施例中心电图图像裁剪重塑示意图。
具体实施方式
下面结合附图和实施例对本发明的内容作进一步的阐述,但不是对本发明的限定。
实施例:
参照图1、图2,一种基于优化卷积神经网络分类的数据增强方法,其特征在于,包括如下步骤:
1)获取一维信号数据;
2)生成二维灰度图像:将步骤1)获得的一维信号转换生成二维灰度图像;
3)得到二维图像:将步骤2)生成的二维灰度图像采用九种不同的裁剪方式得到九个不同的二维灰度图像;
4)图像重塑:将所有裁剪后的二维灰度图像进行重塑,以统一全部二维图像的图像大小;
5)训练:将经过数据增强后的二维灰度图像输入到二维卷积神经网络中加以训练学习,进行检测识别分类,进而完成卷积神经网络分类的目的。
步骤2)中所述的生成二维灰度图像的过程为:
以心电信号为例,假定一维心电信号包含有P-QRS-T波,QRS波群在P波之后,是一个短时程、较高幅度及波形尖锐的波群,P-QRS-T波是三个紧密相连的电位波动,第一个向下的波成为Q波,第一个向上的波成为R波,紧接R波之后向下的波形为S波,正常QRS波群历时0.06秒-0.10秒,是心室内兴奋传播所需的时间,找到R波的峰值时间并对其进行定位,以R波峰值为定位基点,对每个心电信号搏动进行切片,将R波峰值信号居中,同时将前一个和后一个R波峰值信号中排除第一个和最后92个心电信号,用以转换生成为一个二维心电图像,转换如公式(1):
T(Rp(n)-92)≤T(Rp(n))≤T(Rp(n)+92)
式中T(Rp(n))表示所定位的R波峰值时间;T(Rp(n)-92)表示所定位的R波峰值时间之前的92个心电信号;T(Rp(n)+92)表示所定位的R波峰值时间之后的92个心电信号,转换后生成的二维灰度图像为192×128大小的二维灰度图像,能够更好的作为二维卷积神经网络的输入数据。
步骤3)中所述得到九个不同的二维灰度图像的过程为:
对目标二维图像的指定区域进行裁剪,将图像左上角坐标定位为(0,0,0,0),按照96×96大小的格式进行裁剪,则左上图像的基准坐标为(0,0,96,96),得到大小为96×96的左上灰度图像,依照这种方式,分别定位基准坐标(0,16,96,96)和(0,32,96,96)可以得到左中灰度图像和左下灰度图像,以此类推,依照这种方式可以得到中上灰度图像、中部灰度图像、中下灰度图像、右上灰度图像、右中灰度图像和右下灰度图像,因为所采用的裁剪方式以96大小为标准,所以得到的全部裁剪图像均是96×96大小的二维灰度图像。
步骤4)中所述的重塑为:
将裁剪后的二维灰度图像内各点的像素值标记为裁剪后96×96的灰度图像内与其最近的点,表示公式如下:
Figure BDA0002320634310000041
Figure BDA0002320634310000042
式中fw表示重塑后的宽度比;fh表示重塑后的高度比;w1和h1表示96×96灰度图像的宽度和高度;w2和h2表示重塑后的二维灰度图像的宽度和高度,通过图像的重塑,得到大小为192×128尺寸的二维灰度图像,这样使得裁剪后的增加的图像与原始图像的大小尺寸一致。

Claims (4)

1.一种基于优化卷积神经网络分类的数据增强方法,其特征在于,包括如下步骤:
1)获取一维信号数据;
2)生成二维灰度图像:将步骤1)获得的一维信号转换生成二维灰度图像;
3)得到二维图像:将步骤2)生成的二维灰度图像采用九种不同的裁剪方式得到九个不同的二维灰度图像;
4)图像重塑:将所有裁剪后的二维灰度图像进行重塑,以统一全部二维图像的图像大小,进而实现二维灰度图像的数据增强;
5)训练:将经过数据增强后的二维灰度图像输入到二维卷积神经网络中加以训练学习,进行检测识别分类。
2.根据权利要求1所述的基于优化卷积神经网络分类的数据增强方法,其特征在于,步骤2)中所述的生成二维灰度图像的过程为:
以心电信号为例,假定一维心电信号包含有P-QRS-T波,QRS波群在P波之后,是一个短时程、较高幅度及波形尖锐的波群,P-QRS-T波是三个紧密相连的电位波动,第一个向下的波成为Q波,第一个向上的波成为R波,紧接R波之后向下的波形为S波,正常QRS波群历时0.06秒-0.10秒,是心室内兴奋传播所需的时间,找到R波的峰值时间并对其进行定位,以R波峰值为定位基点,对每个心电信号搏动进行切片,将R波峰值信号居中,同时将前一个和后一个R波峰值信号中排除第一个和最后92个心电信号,用以转换生成为一个二维心电图像,转换如公式(1):
T(Rp(n)-92)≤T(Rp(n))≤T(Rp(n)+92)(1),
式中T(Rp(n))表示所定位的R波峰值时间;T(Rp(n)-92)表示所定位的R波峰值时间之前的92个心电信号;T(Rp(n)+92)表示所定位的R波峰值时间之后的92个心电信号,转换后生成的二维灰度图像为192×128大小的二维灰度图像,作为二维卷积神经网络的输入数据。
3.根据权利要求1所述的基于优化卷积神经网络分类的数据增强方法,其特征在于,步骤3)中所述得到九个不同的二维灰度图像的过程为:
对目标二维图像的指定区域进行裁剪,将图像左上角坐标定位为(0,0,0,0),按照96×96大小的格式进行裁剪,则左上图像的基准坐标为(0,0,96,96),得到大小为96×96的左上灰度图像,依照这种方式,分别定位基准坐标(0,16,96,96)和(0,32,96,96)可以得到左中灰度图像和左下灰度图像,以此类推,依照这种方式可以得到中上灰度图像、中部灰度图像、中下灰度图像、右上灰度图像、右中灰度图像和右下灰度图像,所采用的裁剪方式以96大小为标准,所以得到的全部裁剪图像均是96×96大小的二维灰度图像。
4.根据权利要求1所述的基于优化卷积神经网络分类的数据增强方法,其特征在于,步骤4)中所述的重塑为:
将裁剪后的二维灰度图像内各点的像素值标记为裁剪后96×96的灰度图像内与其最近的点,表示公式如下:
Figure FDA0002320634300000021
Figure FDA0002320634300000022
式中fw表示重塑后的宽度比;fh表示重塑后的高度比;w1和h1表示96×96灰度图像的宽度和高度;w2和h2表示重塑后的二维灰度图像的宽度和高度,通过图像的重塑,得到大小为192×128尺寸的二维灰度图像,这样使得裁剪后的增加的图像与原始图像的大小尺寸一致。
CN201911296246.7A 2019-12-16 2019-12-16 一种基于优化卷积神经网络分类的数据增强方法 Pending CN111091092A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911296246.7A CN111091092A (zh) 2019-12-16 2019-12-16 一种基于优化卷积神经网络分类的数据增强方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911296246.7A CN111091092A (zh) 2019-12-16 2019-12-16 一种基于优化卷积神经网络分类的数据增强方法

Publications (1)

Publication Number Publication Date
CN111091092A true CN111091092A (zh) 2020-05-01

Family

ID=70395120

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911296246.7A Pending CN111091092A (zh) 2019-12-16 2019-12-16 一种基于优化卷积神经网络分类的数据增强方法

Country Status (1)

Country Link
CN (1) CN111091092A (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102347944A (zh) * 2011-07-22 2012-02-08 哈尔滨工业大学深圳研究生院 基于小波算法的心电信号传输方法和系统
CN103284702A (zh) * 2013-06-17 2013-09-11 中国科学院苏州纳米技术与纳米仿生研究所 心电图和脉搏波关系分析及融合分析的方法和装置
CN104866724A (zh) * 2015-05-26 2015-08-26 北京海思敏医疗技术有限公司 基于图像的心电分析方法及装置
CN106805965A (zh) * 2016-12-19 2017-06-09 深圳先进技术研究院 一种心电信号分类方法及装置
CN107822622A (zh) * 2017-09-22 2018-03-23 成都比特律动科技有限责任公司 基于深度卷积神经网络的心电图诊断方法和系统
US20180333104A1 (en) * 2017-05-18 2018-11-22 Koninklijke Philips N.V. Convolutional deep learning analysis of temporal cardiac images
CN109620211A (zh) * 2018-11-01 2019-04-16 吉林大学珠海学院 一种基于深度学习的智能化异常心电辅助诊断方法
CN109770891A (zh) * 2019-01-31 2019-05-21 上海交通大学 心电信号预处理方法及预处理装置
CN110189324A (zh) * 2019-06-05 2019-08-30 桂林电子科技大学 一种医学图像处理方法及处理装置
US20190298204A1 (en) * 2018-03-30 2019-10-03 Cardiologs Technologies Sas Systems and methods for digitizing electrocardiograms
CN110458765A (zh) * 2019-01-25 2019-11-15 西安电子科技大学 基于感知保持卷积网络的图像质量增强方法

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102347944A (zh) * 2011-07-22 2012-02-08 哈尔滨工业大学深圳研究生院 基于小波算法的心电信号传输方法和系统
CN103284702A (zh) * 2013-06-17 2013-09-11 中国科学院苏州纳米技术与纳米仿生研究所 心电图和脉搏波关系分析及融合分析的方法和装置
CN104866724A (zh) * 2015-05-26 2015-08-26 北京海思敏医疗技术有限公司 基于图像的心电分析方法及装置
CN106805965A (zh) * 2016-12-19 2017-06-09 深圳先进技术研究院 一种心电信号分类方法及装置
US20180333104A1 (en) * 2017-05-18 2018-11-22 Koninklijke Philips N.V. Convolutional deep learning analysis of temporal cardiac images
CN107822622A (zh) * 2017-09-22 2018-03-23 成都比特律动科技有限责任公司 基于深度卷积神经网络的心电图诊断方法和系统
US20190298204A1 (en) * 2018-03-30 2019-10-03 Cardiologs Technologies Sas Systems and methods for digitizing electrocardiograms
CN109620211A (zh) * 2018-11-01 2019-04-16 吉林大学珠海学院 一种基于深度学习的智能化异常心电辅助诊断方法
CN110458765A (zh) * 2019-01-25 2019-11-15 西安电子科技大学 基于感知保持卷积网络的图像质量增强方法
CN109770891A (zh) * 2019-01-31 2019-05-21 上海交通大学 心电信号预处理方法及预处理装置
CN110189324A (zh) * 2019-06-05 2019-08-30 桂林电子科技大学 一种医学图像处理方法及处理装置

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
CHINGCHAN1996: "ECG-Arrhythmia-Classification-in-2D-CNN", 《HTTPS://HUB.連接.台灣/CHINGCHAN1996/ECG-ARRHYTHMIA-CLASSIFICATION-IN-2D-CNN》 *
TAE JOON JUN 等: "ECG arrhythmia classification using a 2-D convolutional neural network", 《ARXIV》 *
WENBO ZHANG 等: "ECG Signal Classification with Deep Learning for Heart Disease Identification", 《2018INTERNATIONAL CONFERENCE ON BIG DATA AND ARTIFICIAL INTELLIGENCE》 *
张坤 等: "基于深度学习的心律失常检测算法研究", 《医疗卫生装备》 *
查雪帆 等: "结合迁移学习与深度卷积网络的心电分类研究", 《中国医学物理学杂志》 *

Similar Documents

Publication Publication Date Title
CN100373399C (zh) 建立劣化字典的方法和装置
JP5188334B2 (ja) 画像処理装置、画像処理方法およびプログラム
US5410611A (en) Method for identifying word bounding boxes in text
CN105574063B (zh) 基于视觉显著性的图像检索方法
CN110738207A (zh) 一种融合文字图像中文字区域边缘信息的文字检测方法
RU2001107822A (ru) Распознавание знаков
US6389166B1 (en) On-line handwritten Chinese character recognition apparatus
CN102663454B (zh) 一种字符书写规范度评测的方法和装置
CN109919145B (zh) 一种基于3d点云深度学习的矿卡检测方法及系统
CN109583438B (zh) 电子图像的文字的识别方法及图像处理装置
CN111461100A (zh) 一种票据识别方法、装置、电子设备和存储介质
CN114155445B (zh) 基于改进YOLOv3的SAR图像目标检测方法
CN112712058A (zh) 一种字符识别提取方法
CN109741273A (zh) 一种手机拍照低质图像的自动处理与评分方法
CN115578741A (zh) 一种基于Mask R-cnn算法和类型分割的扫描文件版面分析方法
US9070037B2 (en) Method, apparatus and system for recognizing magnetic ink character
CN113793385A (zh) 鱼头鱼尾定位方法及装置
CN113628113A (zh) 一种图像拼接方法及其相关设备
CN111091092A (zh) 一种基于优化卷积神经网络分类的数据增强方法
CN109800702B (zh) 指静脉识别的快速比对方法及计算机可读取的存储介质
CN108509865B (zh) 一种工伤信息录入方法及装置
Choksi et al. Hindi optical character recognition for printed documents using fuzzy k-nearest neighbor algorithm: a problem approach in character segmentation
Shiba et al. Detection of Go-board contour in real image using genetic algorithm
JP2003123023A (ja) 文字認識方法及び文字認識装置、文字認識プログラム並びにそのプログラムを記録した記録媒体
CN111612819B (zh) 基于图像金字塔绝对误差和的运动目标跟踪方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20200501