CN108830858B - 一种基于红外和光学影像双模成像信息的活体菌落计数方法 - Google Patents

一种基于红外和光学影像双模成像信息的活体菌落计数方法 Download PDF

Info

Publication number
CN108830858B
CN108830858B CN201810635755.7A CN201810635755A CN108830858B CN 108830858 B CN108830858 B CN 108830858B CN 201810635755 A CN201810635755 A CN 201810635755A CN 108830858 B CN108830858 B CN 108830858B
Authority
CN
China
Prior art keywords
image
optical image
living body
sequence
infrared
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810635755.7A
Other languages
English (en)
Other versions
CN108830858A (zh
Inventor
余辉
杜培培
李晨曦
张黎明
张乾昆
高晨阳
邓晨阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin University
Original Assignee
Tianjin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University filed Critical Tianjin University
Priority to CN201810635755.7A priority Critical patent/CN108830858B/zh
Publication of CN108830858A publication Critical patent/CN108830858A/zh
Application granted granted Critical
Publication of CN108830858B publication Critical patent/CN108830858B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10056Microscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30242Counting objects in image

Abstract

本发明涉及一种基于红外和光学影像双模成像信息的活体菌落计数方法,步骤如下:获取同一原始目标的光学影像和序列红外影像;采用水平集算法对上述光学影像进行处理;采用仿射变换,对光学影像和序列红外影像进行图像配准,根据光学影像中获取的连通域位置信息,依次获取光学影像中连通域在序列红外影像中的对应位置;逐个统计光学影像中连通域对应的红外影像空间下序列图像的连通域局部纹理特征集,纹理特征集包括灰度均值、灰度方差、灰度共生矩阵的能量、熵和相关性五个特征;得到活体菌落检测分类模型;依次对判断为具有活性特征的连通域计数,获取活体菌落的数目。

Description

一种基于红外和光学影像双模成像信息的活体菌落计数方法
技术领域
本发明属于食品及环保检测领域,尤其涉及一种活体菌落计数检测方法。
背景技术
菌落计数器已经从人工、半人工向全自动发展,被广泛的应用于生物和医学领域。相比较一些常规算法,水平集算法在菌落计数方面,算法速度和准确性上都有了很大提高。常规菌落分析仪器大多是处理单张静态图像,根据单张静态图像的信息,无法排除杂质颗粒及死菌等因素对菌落计数的影响,容易引入假阳性错误。通过红外影像判断菌落活性受限于红外影像的分辨率和成本,只能定性的判断菌落的活性,并不能直接对菌落计数。目前现有的菌落分析仪器尚未有公开的针对活体菌落计数的功能。
发明内容
本发明提供了一种基于红外和光学影像双模成像信息的活体菌落计数方法,以克服现有技术上的不足。本发明提出一种光学影像与红外影像相结合的活体菌落计数方法,根据活体菌落热量高于背景热量,排除杂质、水渍、死菌等因素带来的假阳性错误,同时解决了普通红外影像受限于分辨率和成本无法定量获取活体菌落个数的问题。本发明的技术方案如下:
一种基于红外和光学影像双模成像信息的活体菌落计数方法,步骤如下:
1)对目标培养皿进行多次扫描拍摄,获取同一原始目标的光学影像和序列红外影像;
2)采用水平集算法对上述光学影像进行处理,遍历图像中的所有像素点,根据像素点的特征进行空间分割,获取点集区域作为连通域,并对连通域进行定位;
3)对光学影像和序列红外影像建立三维笛卡尔直角坐标系,分别确定从光学影像到序列红外影像沿x轴,y轴,z轴变换的尺度参数mx,my,mz,沿x轴,y轴,z轴平移的刚体变换参数p,q,r,绕沿x轴,y轴,z轴旋转的刚体变换参数θ,ω,φ。采用九参数仿射变换,对光学影像和序列红外影像进行图像配准,根据光学影像中获取的连通域位置信息,依次获取光学影像中连通域在序列红外影像中的对应位置;
4)逐个统计光学影像中连通域对应的红外影像空间下序列图像的连通域局部纹理特征集,纹理特征集包括灰度均值、灰度方差、灰度共生矩阵的能量、熵和相关性五个特征;
5)制作符合支持向量机格式的标签样本,将分类器训练集中的具有活体特征的样本标签置为1,不具有活体特征的样本标签置为-1,并设计和训练SVM分类器,获取分类器模型,从而得到活体菌落检测分类模型;
6)采用活体菌落检测分类模型对红外影像空间下序列图像的局部纹理特征进行分类,判断样本是具有活体特征的连通域,或为杂质以及死菌对应的不具有活体特征的连通域;
7)依次对判断为具有活性特征的连通域计数,获取活体菌落的数目。
本发明提出的基于红外和光学影像双模成像信息的活体菌落技术方法,解决了当今常规菌落分析仪器处理单张静态图像,无法排除杂质颗粒及死菌等因素引入假阳性错误的问题以及红外图像受限于分辨率或成本无法定量的获取活体菌落个数的问题。
附图说明
图1:本发明方法流程图
图2:目标图像及采用改进水平集算法处理后的图像,包括连通域的定位
图3:仿射变示意图像
图4:原始目标图像及局部放大
图5:感兴趣区域的红外散斑图像
具体实施方式:
现结合实例、附图对本发明作进一步描述:
1)图像采集
1、CCD摄像头和红外摄像头对目标进行多次拍照,采集该目标的单张光学影像和多张红外影像,将多张红外影像按照拍摄的时间顺序进行排序,保存为序列红外影像。
2)图像处理
1、如图2所示,采用水平集算法对上述光学影像进行处理,遍历图像中的所有像素点,根据像素点的特征进行空间分割,获取点集区域作为连通域,并对连通域进行定位。
2、采用仿射变换,对光学影像中和序列红外影像进行图像配准,根据光学影像中获取的连通域位置信息,依次获取光学影像中连通域在序列红外影像中的对应位置。
在3D情况下,需要9个参数描述一个全局尺度变换的刚体变换。定义光学影像和序列红外影像上各方向,即x轴,y轴,z轴方向上尺度变化系数分别为为mx,my,mz,在三维空间中,光学影像下图像坐标为(x,y,z),表示在红外影像上为(x',y',z'),其变换可以表示为下列公式:
沿x轴的平移:
Figure BDA0001701507550000021
沿y轴的平移:
Figure BDA0001701507550000022
沿z轴的平移:
Figure BDA0001701507550000023
绕x轴的旋转:
Figure BDA0001701507550000031
绕y轴的旋转:
Figure BDA0001701507550000032
绕z轴的旋转:
Figure BDA0001701507550000033
如图3所示,θ,ω,φ是绕x轴,y轴,z轴的旋转刚体变换参数,p,q,r是沿x轴、y轴和z轴的平移刚体变换参数。仿射变换公式如下:
Figure BDA0001701507550000034
将已经得到的光学影像下连通域的坐标信息,带入上述公式(1),即可获取在红外影像下该连通域对应的区域坐标。
3、如图4所示,光斑可能会影响光学影像中对菌落个数的判定,而对于已经死亡的菌落及杂质与活体菌落在单张光学影像中无法区分,但是由于死亡菌落和杂质不存在代谢活动,因此与活体菌落存在细微的温差波动,从而在序列红外影像中杂质死菌与真实的活体菌落存在着显著差异。图5是原始目标的部分红外影像,红外影像获取序列红外影像中对应疑似菌落连通域的灰度平均值
Figure BDA0001701507550000041
和灰度方差
Figure BDA0001701507550000042
首先把序列红外影像的R、G、B分量转化为灰度值表征每个像素点构成的图像,转化公式如下:
Gray(x,y)=0.299×R(x,y)+0.587×G(x,y)+0.114×B(x,y) (2)
接下来对连通域对应的序列红外影像中的区域求取灰度平均值
Figure BDA0001701507550000043
和灰度方差
Figure BDA0001701507550000044
公式如下:
Figure BDA0001701507550000045
Figure BDA0001701507550000046
4、逐一对连通域在序列红外影像中的对应区域建立灰度共生矩阵。首先将已经灰度化的序列红外影像进行灰度量级化,将图像的灰度级压缩至8级以减小共生矩阵的尺寸,对于精度要求高且纹理细密的纹理分布,选取像素间距d=1,0°方向获取对比度、能量、熵和相关性纹理特性。p(i,j)表示灰度共生矩阵第i行和第j列的数值。
能量获取公式如下:
Figure BDA0001701507550000047
对比度获取公式如下:
Figure BDA0001701507550000048
熵获取公式如下:
Figure BDA0001701507550000049
相关性获取公式如下:
Figure BDA00017015075500000410
具体纹理向量的值列于下表中。
Figure BDA00017015075500000411
Figure BDA0001701507550000051
对六个特征向量进行显著性检验,选取t检验方法,建立假设,确定检验水平α=0.1,计算统计量
Figure BDA0001701507550000052
S1 2和S2 2为两样本方差,n1和n2为两样本容量,选用双侧检验,选用α=0.1的统计显著水平,确定灰度平均值、灰度方差、灰度共生矩阵的能量、熵、相关性这五个特征位显著性特征,所以选取灰度平均值、灰度方差、灰度共生矩阵的能量、熵、相关性这五个特征作为判定指标。
6、采用支持向量机技术对红外影像空间下序列图像的局部纹理特征进行分类。以局部纹理特征为特征,特征有五个,分别是灰度均值、灰度方差、灰度共生矩阵的能量、熵和相关性。制作符合支持向量机格式的标签样本,将分类器训练集中的具有活体特征的样本标签置为1,不具有活体特征的样本标签置为-1,并设计和训练SVM分类器,获取分类器模型,从而得到活体菌落检测分类模型。采用活体菌落检测分类模型对红外影像空间下序列图像的局部纹理特征进行分类,判断样本是具有活体特征的连通域,或为杂质以及死菌对应的不具有活体特征的连通域,即将连通域的特征向量输入到已经找到的最佳分隔超平面w·x+b=0中,该平面即为分类的决策边界,其中w是法向量,b为截距,将特征值分在平面两边,即判断该连通域是否具有活体特征,实现支持向量机的二分类。
3)菌落计数
对通过序列红外影像纹理特征判定为具有活体特征的连通域进行计数,获取活体菌落数目。

Claims (1)

1.一种基于红外和光学影像双模成像信息的活体菌落计数方法,步骤如下:
1)对目标培养皿进行多次扫描拍摄,获取同一原始目标的光学影像和序列红外影像;
2)采用水平集算法对上述光学影像进行处理,遍历图像中的所有像素点,根据像素点的特征进行空间分割,获取点集区域作为连通域,并对连通域进行定位;
3)对光学影像和序列红外影像建立三维笛卡尔直角坐标系,分别确定从光学影像到序列红外影像沿x轴,y轴,z轴变换的尺度参数mx,my,mz,沿x轴,y轴,z轴平移的刚体变换参数p,q,r,绕沿x轴,y轴,z轴旋转的刚体变换参数θ,ω,φ;采用仿射变换,对光学影像和序列红外影像进行图像配准,根据光学影像中获取的连通域位置信息,依次获取光学影像中连通域在序列红外影像中的对应位置;
4)逐一对连通域在序列红外影像中的对应区域建立灰度共生矩阵,首先将已经灰度化的序列红外影像进行灰度量级化,将图像的灰度级压缩至8级以减小共生矩阵的尺寸,对于精度要求高且纹理细密的纹理分布,选取像素间距d=1,0°方向获取光学影像中连通域对应的红外影像空间下序列图像的连通域局部纹理特征集,纹理特征集包括灰度均值、灰度方差、灰度共生矩阵的能量、熵和相关性五个特征;
5)制作符合支持向量机格式的标签样本,将分类器训练集中的具有活体特征的样本标签置为1,不具有活体特征的样本标签置为-1,并设计和训练SVM分类器,获取分类器模型,从而得到活体菌落检测分类模型;
6)采用活体菌落检测分类模型对红外影像空间下序列图像的局部纹理特征进行分类,判断样本是具有活体特征的连通域,或为杂质以及死菌对应的不具有活体特征的连通域;
7)依次对判断为具有活性特征的连通域计数,获取活体菌落的数目。
CN201810635755.7A 2018-06-20 2018-06-20 一种基于红外和光学影像双模成像信息的活体菌落计数方法 Active CN108830858B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810635755.7A CN108830858B (zh) 2018-06-20 2018-06-20 一种基于红外和光学影像双模成像信息的活体菌落计数方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810635755.7A CN108830858B (zh) 2018-06-20 2018-06-20 一种基于红外和光学影像双模成像信息的活体菌落计数方法

Publications (2)

Publication Number Publication Date
CN108830858A CN108830858A (zh) 2018-11-16
CN108830858B true CN108830858B (zh) 2021-08-03

Family

ID=64142686

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810635755.7A Active CN108830858B (zh) 2018-06-20 2018-06-20 一种基于红外和光学影像双模成像信息的活体菌落计数方法

Country Status (1)

Country Link
CN (1) CN108830858B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110322438B (zh) * 2019-06-26 2021-09-14 杭州上池科技有限公司 结核分枝杆菌自动检测模型的训练方法及自动检测系统
CN110766734A (zh) * 2019-08-15 2020-02-07 中国科学院遥感与数字地球研究所 光学影像与热红外影像的配准方法及设备
CN111398189B (zh) * 2020-03-23 2023-03-14 苏州同阳科技发展有限公司 多模态光学成像水质遥感检测装置与污染特征提取方法
CN116626029B (zh) * 2023-07-20 2023-09-22 津泰(天津)医疗器械有限公司 一种用于糖尿病氯化钴试纸色差的检测方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102024259A (zh) * 2010-12-24 2011-04-20 刘安安 一种菌落自动检测方法
CN102676633A (zh) * 2012-03-08 2012-09-19 天津大学 一种菌落自动计数方法
CN103197302A (zh) * 2013-04-02 2013-07-10 电子科技大学 一种适用于穿墙雷达成像的目标位置提取方法
US8889349B2 (en) * 2009-10-30 2014-11-18 Hitachi Engineering & Services Co., Ltd. Method for testing microorganism or the like and testing apparatus therefor
CN106096604A (zh) * 2016-06-02 2016-11-09 西安电子科技大学昆山创新研究院 基于无人平台的多波段融合探测方法
CN106408584A (zh) * 2016-09-14 2017-02-15 北京环境特性研究所 一种红外图像目标筛选方法及系统
CN106815819A (zh) * 2017-01-24 2017-06-09 河南工业大学 多策略粮虫视觉检测方法
CN106875404A (zh) * 2017-01-18 2017-06-20 宁波摩视光电科技有限公司 一种白带显微图像中上皮细胞的智能识别方法
CN107862299A (zh) * 2017-11-28 2018-03-30 电子科技大学 一种基于近红外与可见光双目摄像头的活体人脸检测方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8889349B2 (en) * 2009-10-30 2014-11-18 Hitachi Engineering & Services Co., Ltd. Method for testing microorganism or the like and testing apparatus therefor
CN102024259A (zh) * 2010-12-24 2011-04-20 刘安安 一种菌落自动检测方法
CN102676633A (zh) * 2012-03-08 2012-09-19 天津大学 一种菌落自动计数方法
CN103197302A (zh) * 2013-04-02 2013-07-10 电子科技大学 一种适用于穿墙雷达成像的目标位置提取方法
CN106096604A (zh) * 2016-06-02 2016-11-09 西安电子科技大学昆山创新研究院 基于无人平台的多波段融合探测方法
CN106408584A (zh) * 2016-09-14 2017-02-15 北京环境特性研究所 一种红外图像目标筛选方法及系统
CN106875404A (zh) * 2017-01-18 2017-06-20 宁波摩视光电科技有限公司 一种白带显微图像中上皮细胞的智能识别方法
CN106815819A (zh) * 2017-01-24 2017-06-09 河南工业大学 多策略粮虫视觉检测方法
CN107862299A (zh) * 2017-11-28 2018-03-30 电子科技大学 一种基于近红外与可见光双目摄像头的活体人脸检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"多模态图像配准";上官晋太等;《天津科学技术出版社》;20110831;第31-34页 *
"模式识别";刘家锋等;《哈尔滨工业大学出版社》;20140831;第221页 *

Also Published As

Publication number Publication date
CN108830858A (zh) 2018-11-16

Similar Documents

Publication Publication Date Title
CN108830858B (zh) 一种基于红外和光学影像双模成像信息的活体菌落计数方法
CN110363158B (zh) 一种基于神经网络的毫米波雷达与视觉协同目标检测与识别方法
CN111062915B (zh) 一种基于改进YOLOv3模型的实时钢管缺陷检测方法
CN106651752B (zh) 三维点云数据配准方法及拼接方法
CN105574527B (zh) 一种基于局部特征学习的快速物体检测方法
CN107833181B (zh) 一种基于变焦立体视觉的三维全景图像生成方法
CN109465809A (zh) 一种基于双目立体视觉定位识别的智能垃圾分类机器人
CN109269430A (zh) 基于深度提取模型的多株立木胸径被动测量方法
CN112067233B (zh) 一种用于风洞模型六自由度运动捕获方法
CN109612888B (zh) 基于图像技术的粉体混合均匀性检测方法
CN1651905A (zh) 钢中非金属夹杂物定量分析方法
CN110910454A (zh) 一种牲畜三维重构移动式设备的自动标定配准方法
CN209289269U (zh) 一种基于双目立体视觉定位识别的智能垃圾分类机器人
CN111310756A (zh) 一种基于深度学习的损伤玉米颗粒检测和分类方法
CN116416250B (zh) 一种速食罐装产品产线的成品检测系统
CN113393439A (zh) 一种基于深度学习的锻件缺陷检测方法
CN114463425B (zh) 一种基于概率Hough直线检测的工件表面无特征点定位方法
Jähnisch et al. 3-D vision feedback for nanohandling monitoring in a scanning electron microscope
CN109978897B (zh) 一种多尺度生成对抗网络的异源遥感图像配准方法及装置
CN115222819A (zh) 一种基于机场大范围场景下多模信息参照的相机自标定和目标追踪方法
CN111256607A (zh) 一种基于三通道标志点的变形测量方法
CN114693522A (zh) 一种全聚焦超声图像拼接方法
CN110930425A (zh) 基于邻域向量内积局部对比度图像增强的损伤目标检测方法
CN111127613A (zh) 基于扫描电子显微镜的图像序列三维重构方法及系统
CN113112471B (zh) 基于ri-hog特征及快速金字塔的目标检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant