CN106372594A - 一种基于增强现实的移动平台三维生物细胞展示系统 - Google Patents
一种基于增强现实的移动平台三维生物细胞展示系统 Download PDFInfo
- Publication number
- CN106372594A CN106372594A CN201610777532.5A CN201610777532A CN106372594A CN 106372594 A CN106372594 A CN 106372594A CN 201610777532 A CN201610777532 A CN 201610777532A CN 106372594 A CN106372594 A CN 106372594A
- Authority
- CN
- China
- Prior art keywords
- cell
- gray
- pixel
- sigma
- mobile terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
- G06V20/695—Preprocessing, e.g. image segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
- G06V20/698—Matching; Classification
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
一种基于增强现实的移动平台三维生物细胞展示系统,包括细胞识别模块和生物细胞展示系统,所述生物细胞展示系统包括移动终端、无线网络通讯、云端服务器、细胞结构信息数据库,细胞图像经过细胞识别模块后传到移动终端,移动终端通过无线网络通讯与云端服务器进行通讯,云端服务器和细胞结构信息数据库进行通讯。本发明的有益效果为:能够减少网络流量、缩短传输时间。
Description
技术领域
本发明涉及三维图像领域,具体涉及一种基于增强现实的移动平台三维生物细胞展示系统。
背景技术
长久以来,基础医学科学,尤其是类似生物化学与分子生物学这样的学科教研中,最大的一个难题就是研究对象的微观性、不可见性。随着后基因组时代、蛋白质组时代的到来,这个矛盾越来越突出。学科的迅猛发展要求从学、从业人员尽快掌握新理论和新技术,传统的以纸质媒介作为载体的教学、研究手段已跟不上要求。
发明内容
为解决上述问题,本发明旨在提供一种基于增强现实的移动平台三维生物细胞展示系统。
本发明的目的采用以下技术方案来实现:
一种基于增强现实的移动平台三维生物细胞展示系统,包括细胞识别模块和生物细胞展示系统,所述生物细胞展示系统包括移动终端、无线网络通讯、云端服务器、细胞结构信息数据库,细胞图像经过细胞识别模块后传到移动终端,移动终端通过无线网络通讯与云端服务器进行通讯,云端服务器和细胞结构信息数据库进行通讯。
本发明的有益效果为:能够减少网络流量、缩短传输时间。
附图说明
利用附图对本发明作进一步说明,但附图中的实施例不构成对本发明的任何限制,对于本领域的普通技术人员,在不付出创造性劳动的前提下,还可以根据以下附图获得其它的附图。
图1是生物细胞展示系统的结构示意图;
图2是细胞识别模块的结构示意图。
附图标记:
细胞识别模块1、细胞图像分割单元11、特征提取单元12、分类识别单元13。
具体实施方式
结合以下应用场景对本发明作进一步描述。
应用场景1
参见图1、图2,本应用场景的一个实施例的一种基于增强现实的移动平台三维生物细胞展示系统,包括细胞识别模块和生物细胞展示系统,所述生物细胞展示系统包括移动终端、无线网络通讯、云端服务器、细胞结构信息数据库,细胞图像经过细胞识别模块后传到移动终端,移动终端通过无线网络通讯与云端服务器进行通讯,云端服务器和细胞结构信息数据库进行通讯。
优选地,所述移动终端利用OpenGL ES绘制细胞三维模型。
本优选实施例能够更加直观学习细胞结构,提高学习效率。
优选地,所述移动终端为最终显示设备。
本优选实施例中,使用者可随时随地使用本系统。
优选的,所述细胞识别模块1包括细胞图像分割单元11、特征提取单元12、分类识别单元13;所述细胞图像分割单元11用于区分由细胞图像采集模块采集的细胞图像中的背景、细胞核和细胞质;所述特征提取单元12用于对细胞图像的纹理特征进行提取;所述分类识别单元13用于根据纹理特征利用分类器实现对细胞图像分类识别。
本优选实施例构建了细胞识别模块1的单元架构。
优选的,所述细胞图像分割单元11包括图像转换子单元、噪声去除子单元、粗分割子单元、细胞核中心标定子单元、精确分割子单元,具体为:
(1)图像转换子单元,用于将采集的细胞图像转化为灰度图像;
(2)噪声去除子单元,用于对灰度图像进行去噪处理,包括:
对于像素点(x,y),选取其3×3的邻域Sx,y和(2N+1)×(2N+1)的邻域Lx,y,N为大于等于2的整数;
首先对像素点是否为边界点进行判断,设定阈值T,T∈[13,26],计算像素点(x,y)与其邻域Sx,y中每个像素点的灰度差值,并与阈值T进行比较,若灰度差值大于阈值T的个数大于等于6,则像素点(x,y)为边界点,否则,像素点(x,y)为非边界点;
若(x,y)为边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(x,y)为降噪前像素点(x,y)的灰度值,σ为像素点(x,y)邻域Lx,y内灰度值标差,q(i,j)∈[q(x,y)-1.5σ,q(x,y)+1.5σ]表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点,k表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点的数量;
若(x,y)为非边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(i,j)代表图像中点(i,j)处的灰度值,w(i,j)为邻域Lx,y内点(i,j)对应的高斯权重;
(3)粗分割子单元,用于对去噪后的细胞图像中的背景、细胞质、细胞核进行粗划分,具体为:
将每个像素(x,y)用一个四维特征向量表示:
式中,h(x,y)代表(x,y)的灰度值,have(x,y)代表其邻域Sx,y灰度均值,hmed(x,y)代表其邻域Sx,y灰度中值,hsta(x,y)代表其邻域Sx,y灰度方差;
采用K-means聚类法将其划分为背景、细胞质、细胞核三类;
(4)细胞核中心标定子单元,用于对细胞核中心进行标定:
由粗分割子单元得到细胞核大致区域,设细胞核区域包含n个点:(x1,y1),…,(xn,yn),对该区域进行灰度加权标定和几何中心标定,取其平均值作为细胞核中心(xz,yz):
(5)精确分割子单元,用于对细胞核、细胞质进行精确分割;
构建从细胞核中心(xz,yz)到细胞核和细胞质边界点(xp,yp)的有向线段的距离表示向下取整;
沿线段以单位长度进行采样可以得到disp个点(x1,y1),…,若采样点的坐标不是整数,其灰度值通过周围像素线性插值得到;
点(xi,yi)处沿线段方向的灰度差:
hd(xi,yi)=h(xi-1,yi-1)-h(xi,yi)
定义灰度差抑制函数:
点(xi,yi)处沿线段方向的梯度gra(xi,yi):
选取梯度最大的值点作为细胞核和细胞质的精确边缘。
本优选实施例设置噪声去除子单元,有效融合了中心像素与邻域像素的空间临近性和灰度相似性来进行降噪处理,在图像中的平坦区域,邻域内像素灰度值相差不大,采用高斯滤波器对灰度值进行加权滤波,在变化剧烈的边界区域,行边界保持滤波,有利于图像边缘的保持;采用K均值聚类提取细胞核和细胞质粗轮廓,可有效去除噪声的干扰;设置细胞核中心标定子单元,便于后续对细胞核和细胞质轮廓进行精确定位;精确分割子单元充分利用了方向信息,克服了炎症细胞对边缘图的干扰,能够准确提取出细胞核和细胞质边缘。
优选的,所述对细胞图像的纹理特征进行提取,包括:
(1)基于改进的灰度共生矩阵法求取细胞图像的综合灰度共生矩阵,所述综合灰度共生矩阵体现了细胞在不同方向上的纹理特征:
设在0°、45°、90°、135°四个方向上的灰度共生矩阵分别为h(x,y,d,0°)、h(x,y,d,45°)、h(x,y,d,90°)、h(x,y,d,135°),所对应的矩阵元素项目为X1、X2、X3、X4,则综合灰度共生矩阵的计算公式为:
H(x,y,d)=w1h(x,y,d,0°)+w2h(x,y,d,45°)+w3h(x,y,d,90°)+w4h(x,y,d,135°)
综合灰度共生矩阵元素数目为:
式中,d表示距离,d的取值范围为[2,4],wi为加权系数,i=1,2,3,4,其由四个方向中的每个方向上的灰度共生矩阵对应的对比度参数计算,设四个方向上的灰度共生矩阵对应的对比度参数分别为Di,均值为i=1,2,3,4,则加权系数wi的计算公式为:
(2)利用所述综合灰度共生矩阵和矩阵元素项目获取所需的四个纹理特征参数:对比度、方差和、能量和均值;
(3)对所述四个纹理特征参数进行归一化处理,最终获得归一化的纹理特征值。
本优选实施例基于改进的灰度共生矩阵法,采用设置加权系数的方式求取细胞图像的综合灰度共生矩阵,进而提取细胞在指定四个方向上的纹理特征,解决了由于外部干扰(如细胞图像采集时光照角度造成的影响、气体的流动干扰等)造成的细胞的纹理特征参数值在不同方向上有较大差别的问题,提高了细胞图像纹理特征提取的精度;选定对比度、方差和、能量和均值四个纹理特征,去掉了冗余和重复的特征参数;对所述四个纹理特征参数进行归一化处理,方便了后续的细胞图像的分类识别处理。
在此应用场景中,设定阈值T=13,d=2,图像去噪效果相对提高了5%,细胞图像特征的提取精度提高了8%。
应用场景2
参见图1、图2,本应用场景的一个实施例的一种基于增强现实的移动平台三维生物细胞展示系统,包括细胞识别模块和生物细胞展示系统,所述生物细胞展示系统包括移动终端、无线网络通讯、云端服务器、细胞结构信息数据库,细胞图像经过细胞识别模块后传到移动终端,移动终端通过无线网络通讯与云端服务器进行通讯,云端服务器和细胞结构信息数据库进行通讯。
优选地,所述移动终端利用OpenGL ES绘制细胞三维模型。
本优选实施例能够更加直观学习细胞结构,提高学习效率。
优选地,所述移动终端为最终显示设备。
本优选实施例中,使用者可随时随地使用本系统。
优选的,所述细胞识别模块1包括细胞图像分割单元11、特征提取单元12、分类识别单元13;所述细胞图像分割单元11用于区分由细胞图像采集模块采集的细胞图像中的背景、细胞核和细胞质;所述特征提取单元12用于对细胞图像的纹理特征进行提取;所述分类识别单元13用于根据纹理特征利用分类器实现对细胞图像分类识别。
本优选实施例构建了细胞识别模块1的单元架构。
优选的,所述细胞图像分割单元11包括图像转换子单元、噪声去除子单元、粗分割子单元、细胞核中心标定子单元、精确分割子单元,具体为:
(1)图像转换子单元,用于将采集的细胞图像转化为灰度图像;
(2)噪声去除子单元,用于对灰度图像进行去噪处理,包括:
对于像素点(x,y),选取其3×3的邻域Sx,y和(2N+1)×(2N+1)的邻域Lx,y,N为大于等于2的整数;
首先对像素点是否为边界点进行判断,设定阈值T,T∈[13,26],计算像素点(x,y)与其邻域Sx,y中每个像素点的灰度差值,并与阈值T进行比较,若灰度差值大于阈值T的个数大于等于6,则像素点(x,y)为边界点,否则,像素点(x,y)为非边界点;
若(x,y)为边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(x,y)为降噪前像素点(x,y)的灰度值,σ为像素点(x,y)邻域Lx,y内灰度值标差,q(i,j)∈[q(x,y)-1.5σ,q(x,y)+1.5σ]表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点,k表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点的数量;
若(x,y)为非边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(i,j)代表图像中点(i,j)处的灰度值,w(i,j)为邻域Lx,y内点(i,j)对应的高斯权重;
(3)粗分割子单元,用于对去噪后的细胞图像中的背景、细胞质、细胞核进行粗划分,具体为:
将每个像素(x,y)用一个四维特征向量表示:
式中,h(x,y)代表(x,y)的灰度值,have(x,y)代表其邻域Sx,y灰度均值,hmed(x,y)代表其邻域Sx,y灰度中值,hsta(x,y)代表其邻域Sx,y灰度方差;
采用K-means聚类法将其划分为背景、细胞质、细胞核三类;
(4)细胞核中心标定子单元,用于对细胞核中心进行标定:
由粗分割子单元得到细胞核大致区域,设细胞核区域包含n个点:(x1,y1),…,(xn,yn),对该区域进行灰度加权标定和几何中心标定,取其平均值作为细胞核中心(xz,yz):
(5)精确分割子单元,用于对细胞核、细胞质进行精确分割;
构建从细胞核中心(xz,yz)到细胞核和细胞质边界点(xp,yp)的有向线段的距离表示向下取整;
沿线段以单位长度进行采样可以得到disp个点(x1,y1),…,若采样点的坐标不是整数,其灰度值通过周围像素线性插值得到;
点(xi,yi)处沿线段方向的灰度差:
hd(xi,yi)=h(xi-1,yi-1)-h(xi,yi)
定义灰度差抑制函数:
点(xi,yi)处沿线段方向的梯度gra(xi,yi):
选取梯度最大的值点作为细胞核和细胞质的精确边缘。
本优选实施例设置噪声去除子单元,有效融合了中心像素与邻域像素的空间临近性和灰度相似性来进行降噪处理,在图像中的平坦区域,邻域内像素灰度值相差不大,采用高斯滤波器对灰度值进行加权滤波,在变化剧烈的边界区域,行边界保持滤波,有利于图像边缘的保持;采用K均值聚类提取细胞核和细胞质粗轮廓,可有效去除噪声的干扰;设置细胞核中心标定子单元,便于后续对细胞核和细胞质轮廓进行精确定位;精确分割子单元充分利用了方向信息,克服了炎症细胞对边缘图的干扰,能够准确提取出细胞核和细胞质边缘。
优选的,所述对细胞图像的纹理特征进行提取,包括:
(1)基于改进的灰度共生矩阵法求取细胞图像的综合灰度共生矩阵,所述综合灰度共生矩阵体现了细胞在不同方向上的纹理特征:
设在0°、45°、90°、135°四个方向上的灰度共生矩阵分别为h(x,y,d,0°)、h(x,y,d,45°)、h(x,y,d,90°)、h(x,y,d,135°),所对应的矩阵元素项目为X1、X2、X3、X4,则综合灰度共生矩阵的计算公式为:
H(x,y,d)=w1h(x,y,d,0°)+w2h(x,y,d,45°)+w3h(x,y,d,90°)+w4h(x,y,d,135°)
综合灰度共生矩阵元素数目为:
式中,d表示距离,d的取值范围为[2,4],wi为加权系数,i=1,2,3,4,其由四个方向中的每个方向上的灰度共生矩阵对应的对比度参数计算,设四个方向上的灰度共生矩阵对应的对比度参数分别为Di,均值为i=1,2,3,4,则加权系数wi的计算公式为:
(2)利用所述综合灰度共生矩阵和矩阵元素项目获取所需的四个纹理特征参数:对比度、方差和、能量和均值;
(3)对所述四个纹理特征参数进行归一化处理,最终获得归一化的纹理特征值。
本优选实施例基于改进的灰度共生矩阵法,采用设置加权系数的方式求取细胞图像的综合灰度共生矩阵,进而提取细胞在指定四个方向上的纹理特征,解决了由于外部干扰(如细胞图像采集时光照角度造成的影响、气体的流动干扰等)造成的细胞的纹理特征参数值在不同方向上有较大差别的问题,提高了细胞图像纹理特征提取的精度;选定对比度、方差和、能量和均值四个纹理特征,去掉了冗余和重复的特征参数;对所述四个纹理特征参数进行归一化处理,方便了后续的细胞图像的分类识别处理。
在此应用场景中,设定阈值T=15,d=2,图像去噪效果相对提高了6%,细胞图像特征的提取精度提高了8%。
应用场景3
参见图1、图2,本应用场景的一个实施例的一种基于增强现实的移动平台三维生物细胞展示系统,包括细胞识别模块和生物细胞展示系统,所述生物细胞展示系统包括移动终端、无线网络通讯、云端服务器、细胞结构信息数据库,细胞图像经过细胞识别模块后传到移动终端,移动终端通过无线网络通讯与云端服务器进行通讯,云端服务器和细胞结构信息数据库进行通讯。
优选地,所述移动终端利用OpenGL ES绘制细胞三维模型。
本优选实施例能够更加直观学习细胞结构,提高学习效率。
优选地,所述移动终端为最终显示设备。
本优选实施例中,使用者可随时随地使用本系统。
优选的,所述细胞识别模块1包括细胞图像分割单元11、特征提取单元12、分类识别单元13;所述细胞图像分割单元11用于区分由细胞图像采集模块采集的细胞图像中的背景、细胞核和细胞质;所述特征提取单元12用于对细胞图像的纹理特征进行提取;所述分类识别单元13用于根据纹理特征利用分类器实现对细胞图像分类识别。
本优选实施例构建了细胞识别模块1的单元架构。
优选的,所述细胞图像分割单元11包括图像转换子单元、噪声去除子单元、粗分割子单元、细胞核中心标定子单元、精确分割子单元,具体为:
(1)图像转换子单元,用于将采集的细胞图像转化为灰度图像;
(2)噪声去除子单元,用于对灰度图像进行去噪处理,包括:
对于像素点(x,y),选取其3×3的邻域Sx,y和(2N+1)×(2N+1)的邻域Lx,y,N为大于等于2的整数;
首先对像素点是否为边界点进行判断,设定阈值T,T∈[13,26],计算像素点(x,y)与其邻域Sx,y中每个像素点的灰度差值,并与阈值T进行比较,若灰度差值大于阈值T的个数大于等于6,则像素点(x,y)为边界点,否则,像素点(x,y)为非边界点;
若(x,y)为边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(x,y)为降噪前像素点(x,y)的灰度值,σ为像素点(x,y)邻域Lx,y内灰度值标差,q(i,j)∈[q(x,y)-1.5σ,q(x,y)+1.5σ]表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点,k表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点的数量;
若(x,y)为非边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(i,j)代表图像中点(i,j)处的灰度值,w(i,j)为邻域Lx,y内点(i,j)对应的高斯权重;
(3)粗分割子单元,用于对去噪后的细胞图像中的背景、细胞质、细胞核进行粗划分,具体为:
将每个像素(x,y)用一个四维特征向量表示:
式中,h(x,y)代表(x,y)的灰度值,have(x,y)代表其邻域Sx,y灰度均值,hmed(x,y)代表其邻域Sx,y灰度中值,hsta(x,y)代表其邻域Sx,y灰度方差;
采用K-means聚类法将其划分为背景、细胞质、细胞核三类;
(4)细胞核中心标定子单元,用于对细胞核中心进行标定:
由粗分割子单元得到细胞核大致区域,设细胞核区域包含n个点:(x1,y1),…,(xn,yn),对该区域进行灰度加权标定和几何中心标定,取其平均值作为细胞核中心(xz,yz):
(5)精确分割子单元,用于对细胞核、细胞质进行精确分割;
构建从细胞核中心(xz,yz)到细胞核和细胞质边界点(xp,yp)的有向线段的距离表示向下取整;
沿线段以单位长度进行采样可以得到disp个点(x1,y1),…,若采样点的坐标不是整数,其灰度值通过周围像素线性插值得到;
点(xi,yi)处沿线段方向的灰度差:
hd(xi,yi)=h(xi-1,yi-1)-h(xi,yi)
定义灰度差抑制函数:
点(xi,yi)处沿线段方向的梯度gra(xi,yi):
选取梯度最大的值点作为细胞核和细胞质的精确边缘。
本优选实施例设置噪声去除子单元,有效融合了中心像素与邻域像素的空间临近性和灰度相似性来进行降噪处理,在图像中的平坦区域,邻域内像素灰度值相差不大,采用高斯滤波器对灰度值进行加权滤波,在变化剧烈的边界区域,行边界保持滤波,有利于图像边缘的保持;采用K均值聚类提取细胞核和细胞质粗轮廓,可有效去除噪声的干扰;设置细胞核中心标定子单元,便于后续对细胞核和细胞质轮廓进行精确定位;精确分割子单元充分利用了方向信息,克服了炎症细胞对边缘图的干扰,能够准确提取出细胞核和细胞质边缘。
优选的,所述对细胞图像的纹理特征进行提取,包括:
(1)基于改进的灰度共生矩阵法求取细胞图像的综合灰度共生矩阵,所述综合灰度共生矩阵体现了细胞在不同方向上的纹理特征:
设在0°、45°、90°、135°四个方向上的灰度共生矩阵分别为h(x,y,d,0°)、h(x,y,d,45°)、h(x,y,d,90°)、h(x,y,d,135°),所对应的矩阵元素项目为X1、X2、X3、X4,则综合灰度共生矩阵的计算公式为:
H(x,y,d)=w1h(x,y,d,0°)+w2h(x,y,d,45°)+w3h(x,y,d,90°)+w4h(x,y,d,135°)
综合灰度共生矩阵元素数目为:
式中,d表示距离,d的取值范围为[2,4],wi为加权系数,i=1,2,3,4,其由四个方向中的每个方向上的灰度共生矩阵对应的对比度参数计算,设四个方向上的灰度共生矩阵对应的对比度参数分别为Di,均值为i=1,2,3,4,则加权系数wi的计算公式为:
(2)利用所述综合灰度共生矩阵和矩阵元素项目获取所需的四个纹理特征参数:对比度、方差和、能量和均值;
(3)对所述四个纹理特征参数进行归一化处理,最终获得归一化的纹理特征值。
本优选实施例基于改进的灰度共生矩阵法,采用设置加权系数的方式求取细胞图像的综合灰度共生矩阵,进而提取细胞在指定四个方向上的纹理特征,解决了由于外部干扰(如细胞图像采集时光照角度造成的影响、气体的流动干扰等)造成的细胞的纹理特征参数值在不同方向上有较大差别的问题,提高了细胞图像纹理特征提取的精度;选定对比度、方差和、能量和均值四个纹理特征,去掉了冗余和重复的特征参数;对所述四个纹理特征参数进行归一化处理,方便了后续的细胞图像的分类识别处理。
在此应用场景中,设定阈值T=18,d=3,图像去噪效果相对提高了7%,细胞图像特征的提取精度提高了7%。
应用场景4
参见图1、图2,本应用场景的一个实施例的一种基于增强现实的移动平台三维生物细胞展示系统,包括细胞识别模块和生物细胞展示系统,所述生物细胞展示系统包括移动终端、无线网络通讯、云端服务器、细胞结构信息数据库,细胞图像经过细胞识别模块后传到移动终端,移动终端通过无线网络通讯与云端服务器进行通讯,云端服务器和细胞结构信息数据库进行通讯。
优选地,所述移动终端利用OpenGL ES绘制细胞三维模型。
本优选实施例能够更加直观学习细胞结构,提高学习效率。
优选地,所述移动终端为最终显示设备。
本优选实施例中,使用者可随时随地使用本系统。
优选的,所述细胞识别模块1包括细胞图像分割单元11、特征提取单元12、分类识别单元13;所述细胞图像分割单元11用于区分由细胞图像采集模块采集的细胞图像中的背景、细胞核和细胞质;所述特征提取单元12用于对细胞图像的纹理特征进行提取;所述分类识别单元13用于根据纹理特征利用分类器实现对细胞图像分类识别。
本优选实施例构建了细胞识别模块1的单元架构。
优选的,所述细胞图像分割单元11包括图像转换子单元、噪声去除子单元、粗分割子单元、细胞核中心标定子单元、精确分割子单元,具体为:
(1)图像转换子单元,用于将采集的细胞图像转化为灰度图像;
(2)噪声去除子单元,用于对灰度图像进行去噪处理,包括:
对于像素点(x,y),选取其3×3的邻域Sx,y和(2N+1)×(2N+1)的邻域Lx,y,N为大于等于2的整数;
首先对像素点是否为边界点进行判断,设定阈值T,T∈[13,26],计算像素点(x,y)与其邻域Sx,y中每个像素点的灰度差值,并与阈值T进行比较,若灰度差值大于阈值T的个数大于等于6,则像素点(x,y)为边界点,否则,像素点(x,y)为非边界点;
若(x,y)为边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(x,y)为降噪前像素点(x,y)的灰度值,σ为像素点(x,y)邻域Lx,y内灰度值标差,q(i,j)∈[q(x,y)-1.5σ,q(x,y)+1.5σ]表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点,k表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点的数量;
若(x,y)为非边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(i,j)代表图像中点(i,j)处的灰度值,w(i,j)为邻域Lx,y内点(i,j)对应的高斯权重;
(3)粗分割子单元,用于对去噪后的细胞图像中的背景、细胞质、细胞核进行粗划分,具体为:
将每个像素(x,y)用一个四维特征向量表示:
式中,h(x,y)代表(x,y)的灰度值,have(x,y)代表其邻域Sx,y灰度均值,hmed(x,y)代表其邻域Sx,y灰度中值,hsta(x,y)代表其邻域Sx,y灰度方差;
采用K-means聚类法将其划分为背景、细胞质、细胞核三类;
(4)细胞核中心标定子单元,用于对细胞核中心进行标定:
由粗分割子单元得到细胞核大致区域,设细胞核区域包含n个点:(x1,y1),…,(xn,yn),对该区域进行灰度加权标定和几何中心标定,取其平均值作为细胞核中心(xz,yz):
(5)精确分割子单元,用于对细胞核、细胞质进行精确分割;
构建从细胞核中心(xz,yz)到细胞核和细胞质边界点(xp,yp)的有向线段的距离表示向下取整;
沿线段以单位长度进行采样可以得到disp个点(x1,y1),…,若采样点的坐标不是整数,其灰度值通过周围像素线性插值得到;
点(xi,yi)处沿线段方向的灰度差:
hd(xi,yi)=h(xi-i,yi-1)-h(xi,yi)
定义灰度差抑制函数:
点(xi,yi)处沿线段方向的梯度gra(xi,yi):
选取梯度最大的值点作为细胞核和细胞质的精确边缘。
本优选实施例设置噪声去除子单元,有效融合了中心像素与邻域像素的空间临近性和灰度相似性来进行降噪处理,在图像中的平坦区域,邻域内像素灰度值相差不大,采用高斯滤波器对灰度值进行加权滤波,在变化剧烈的边界区域,行边界保持滤波,有利于图像边缘的保持;采用K均值聚类提取细胞核和细胞质粗轮廓,可有效去除噪声的干扰;设置细胞核中心标定子单元,便于后续对细胞核和细胞质轮廓进行精确定位;精确分割子单元充分利用了方向信息,克服了炎症细胞对边缘图的干扰,能够准确提取出细胞核和细胞质边缘。
优选的,所述对细胞图像的纹理特征进行提取,包括:
(1)基于改进的灰度共生矩阵法求取细胞图像的综合灰度共生矩阵,所述综合灰度共生矩阵体现了细胞在不同方向上的纹理特征:
设在0°、45°、90°、135°四个方向上的灰度共生矩阵分别为h(x,y,d,0°)、h(x,y,d,45°)、h(x,y,d,90°)、h(x,y,d,135°),所对应的矩阵元素项目为X1、X2、X3、X4,则综合灰度共生矩阵的计算公式为:
H(x,y,d)=w1h(x,y,d,0°)+w2h(x,y,d,45°)+w3h(x,y,d,90°)+w4h(x,y,d,135°)
综合灰度共生矩阵元素数目为:
式中,d表示距离,d的取值范围为[2,4],wi为加权系数,i=1,2,3,4,其由四个方向中的每个方向上的灰度共生矩阵对应的对比度参数计算,设四个方向上的灰度共生矩阵对应的对比度参数分别为Di,均值为i=1,2,3,4,则加权系数wi的计算公式为:
(2)利用所述综合灰度共生矩阵和矩阵元素项目获取所需的四个纹理特征参数:对比度、方差和、能量和均值;
(3)对所述四个纹理特征参数进行归一化处理,最终获得归一化的纹理特征值。
本优选实施例基于改进的灰度共生矩阵法,采用设置加权系数的方式求取细胞图像的综合灰度共生矩阵,进而提取细胞在指定四个方向上的纹理特征,解决了由于外部干扰(如细胞图像采集时光照角度造成的影响、气体的流动干扰等)造成的细胞的纹理特征参数值在不同方向上有较大差别的问题,提高了细胞图像纹理特征提取的精度;选定对比度、方差和、能量和均值四个纹理特征,去掉了冗余和重复的特征参数;对所述四个纹理特征参数进行归一化处理,方便了后续的细胞图像的分类识别处理。
在此应用场景中,设定阈值T=20,d=4,图像去噪效果相对提高了8%,细胞图像特征的提取精度提高了6%。
应用场景5
参见图1、图2,本应用场景的一个实施例的一种基于增强现实的移动平台三维生物细胞展示系统,包括细胞识别模块和生物细胞展示系统,所述生物细胞展示系统包括移动终端、无线网络通讯、云端服务器、细胞结构信息数据库,细胞图像经过细胞识别模块后传到移动终端,移动终端通过无线网络通讯与云端服务器进行通讯,云端服务器和细胞结构信息数据库进行通讯。
优选地,所述移动终端利用OpenGL ES绘制细胞三维模型。
本优选实施例能够更加直观学习细胞结构,提高学习效率。
优选地,所述移动终端为最终显示设备。
本优选实施例中,使用者可随时随地使用本系统。
优选的,所述细胞识别模块1包括细胞图像分割单元11、特征提取单元12、分类识别单元13;所述细胞图像分割单元11用于区分由细胞图像采集模块采集的细胞图像中的背景、细胞核和细胞质;所述特征提取单元12用于对细胞图像的纹理特征进行提取;所述分类识别单元13用于根据纹理特征利用分类器实现对细胞图像分类识别。
本优选实施例构建了细胞识别模块1的单元架构。
优选的,所述细胞图像分割单元11包括图像转换子单元、噪声去除子单元、粗分割子单元、细胞核中心标定子单元、精确分割子单元,具体为:
(1)图像转换子单元,用于将采集的细胞图像转化为灰度图像;
(2)噪声去除子单元,用于对灰度图像进行去噪处理,包括:
对于像素点(x,y),选取其3×3的邻域Sx,y和(2N+1)×(2N+1)的邻域Lx,y,N为大于等于2的整数;
首先对像素点是否为边界点进行判断,设定阈值T,T∈[13,26],计算像素点(x,y)与其邻域Sx,y中每个像素点的灰度差值,并与阈值T进行比较,若灰度差值大于阈值T的个数大于等于6,则像素点(x,y)为边界点,否则,像素点(x,y)为非边界点;
若(x,y)为边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(x,y)为降噪前像素点(x,y)的灰度值,σ为像素点(x,y)邻域Lx,y内灰度值标差,q(i,j)∈[q(x,y)-1.5σ,q(x,y)+1.5σ]表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点,k表示邻域Lx,y内灰度值落于区间[q(x,y)-1.5σ,q(x,y)+1.5σ]的点的数量;
若(x,y)为非边界点,则进行如下降噪处理:
式中,h(x,y)为降噪后像素点(x,y)的灰度值,q(i,j)代表图像中点(i,j)处的灰度值,w(i,j)为邻域Lx,y内点(i,j)对应的高斯权重;
(3)粗分割子单元,用于对去噪后的细胞图像中的背景、细胞质、细胞核进行粗划分,具体为:
将每个像素(x,y)用一个四维特征向量表示:
式中,h(x,y)代表(x,y)的灰度值,have(x,y)代表其邻域Sx,y灰度均值,hmed(x,y)代表其邻域Sx,y灰度中值,hsta(x,y)代表其邻域Sx,y灰度方差;
采用K-means聚类法将其划分为背景、细胞质、细胞核三类;
(4)细胞核中心标定子单元,用于对细胞核中心进行标定:
由粗分割子单元得到细胞核大致区域,设细胞核区域包含n个点:(x1,y1),…,(xn,yn),对该区域进行灰度加权标定和几何中心标定,取其平均值作为细胞核中心(xz,yz):
(5)精确分割子单元,用于对细胞核、细胞质进行精确分割;
构建从细胞核中心(xz,yz)到细胞核和细胞质边界点(xp,yp)的有向线段的距离表示向下取整;
沿线段以单位长度进行采样可以得到disp个点(x1,y1),…,若采样点的坐标不是整数,其灰度值通过周围像素线性插值得到;
点(xi,yi)处沿线段方向的灰度差:
hd(xi,yi)=h(xi-1,yi-1)-h(xi,yi)
定义灰度差抑制函数:
点(xi,yi)处沿线段方向的梯度gra(xi,yi):
选取梯度最大的值点作为细胞核和细胞质的精确边缘。
本优选实施例设置噪声去除子单元,有效融合了中心像素与邻域像素的空间临近性和灰度相似性来进行降噪处理,在图像中的平坦区域,邻域内像素灰度值相差不大,采用高斯滤波器对灰度值进行加权滤波,在变化剧烈的边界区域,行边界保持滤波,有利于图像边缘的保持;采用K均值聚类提取细胞核和细胞质粗轮廓,可有效去除噪声的干扰;设置细胞核中心标定子单元,便于后续对细胞核和细胞质轮廓进行精确定位;精确分割子单元充分利用了方向信息,克服了炎症细胞对边缘图的干扰,能够准确提取出细胞核和细胞质边缘。
优选的,所述对细胞图像的纹理特征进行提取,包括:
(1)基于改进的灰度共生矩阵法求取细胞图像的综合灰度共生矩阵,所述综合灰度共生矩阵体现了细胞在不同方向上的纹理特征:
设在0°、45°、90°、135°四个方向上的灰度共生矩阵分别为h(x,y,d,0°)、h(x,y,d,45°)、h(x,y,d,90°)、h(x,y,d,135°),所对应的矩阵元素项目为X1、X2、X3、X4,则综合灰度共生矩阵的计算公式为:
H(x,y,d)=w1h(x,y,d,0°)+w2h(x,y,d,45°)+w3h(x,y,d,90°)+w4h(x,y,d,135°)
综合灰度共生矩阵元素数目为:
式中,d表示距离,d的取值范围为[2,4],wi为加权系数,i=1,2,3,4,其由四个方向中的每个方向上的灰度共生矩阵对应的对比度参数计算,设四个方向上的灰度共生矩阵对应的对比度参数分别为Di,均值为i=1,2,3,4,则加权系数wi的计算公式为:
(2)利用所述综合灰度共生矩阵和矩阵元素项目获取所需的四个纹理特征参数:对比度、方差和、能量和均值;
(3)对所述四个纹理特征参数进行归一化处理,最终获得归一化的纹理特征值。
本优选实施例基于改进的灰度共生矩阵法,采用设置加权系数的方式求取细胞图像的综合灰度共生矩阵,进而提取细胞在指定四个方向上的纹理特征,解决了由于外部干扰(如细胞图像采集时光照角度造成的影响、气体的流动干扰等)造成的细胞的纹理特征参数值在不同方向上有较大差别的问题,提高了细胞图像纹理特征提取的精度;选定对比度、方差和、能量和均值四个纹理特征,去掉了冗余和重复的特征参数;对所述四个纹理特征参数进行归一化处理,方便了后续的细胞图像的分类识别处理。
在此应用场景中,设定阈值T=26,d=2,图像去噪效果相对提高了7.5%,细胞图像特征的提取精度提高了8%。
最后应当说明的是,以上实施例仅用以说明本发明的技术方案,而非对本发明保护范围的限制,尽管参照较佳实施例对本发明作了详细地说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的实质和范围。
Claims (3)
1.一种基于增强现实的移动平台三维生物细胞展示系统,其特征是,包括细胞识别模块和生物细胞展示系统,所述生物细胞展示系统包括移动终端、无线网络通讯、云端服务器、细胞结构信息数据库,细胞图像经过细胞识别模块后传到移动终端,移动终端通过无线网络通讯与云端服务器进行通讯,云端服务器和细胞结构信息数据库进行通讯。
2.根据权利要求1所述的一种基于增强现实的移动平台三维生物细胞展示系统,其特征是,所述移动终端利用OpenGL ES绘制细胞三维模型。
3.根据权利要求2所述的一种基于增强现实的移动平台三维生物细胞展示系统,其特征是,所述移动终端为最终显示设备。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610777532.5A CN106372594A (zh) | 2016-08-30 | 2016-08-30 | 一种基于增强现实的移动平台三维生物细胞展示系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610777532.5A CN106372594A (zh) | 2016-08-30 | 2016-08-30 | 一种基于增强现实的移动平台三维生物细胞展示系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106372594A true CN106372594A (zh) | 2017-02-01 |
Family
ID=57900978
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610777532.5A Pending CN106372594A (zh) | 2016-08-30 | 2016-08-30 | 一种基于增强现实的移动平台三维生物细胞展示系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106372594A (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104537705A (zh) * | 2015-01-23 | 2015-04-22 | 济宁医学院 | 基于增强现实的移动平台三维生物分子展示系统和方法 |
CN105894464A (zh) * | 2016-03-28 | 2016-08-24 | 福州瑞芯微电子股份有限公司 | 一种中值滤波图像处理方法和装置 |
-
2016
- 2016-08-30 CN CN201610777532.5A patent/CN106372594A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104537705A (zh) * | 2015-01-23 | 2015-04-22 | 济宁医学院 | 基于增强现实的移动平台三维生物分子展示系统和方法 |
CN105894464A (zh) * | 2016-03-28 | 2016-08-24 | 福州瑞芯微电子股份有限公司 | 一种中值滤波图像处理方法和装置 |
Non-Patent Citations (2)
Title |
---|
李宽: ""细胞图像的分割、纹理提取及识别方法研究"", 《中国博士学位论文全文数据库 信息科技辑》 * |
梁光明: ""体液细胞图像有形成分智能识别关键技术研究"", 《中国博士学位论文全文数据库 信息科技辑》 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104766058B (zh) | 一种获取车道线的方法和装置 | |
CN108334847B (zh) | 一种真实场景下的基于深度学习的人脸识别方法 | |
CN104134071B (zh) | 一种基于颜色描述的可变形部件模型物体检测方法 | |
CN103426165A (zh) | 一种地面激光点云与无人机影像重建点云的精配准方法 | |
CN110853057B (zh) | 基于全局和多尺度全卷积网络的航拍图像分割方法 | |
CN111414954B (zh) | 一种岩石图像检索方法及其系统 | |
CN110619605B (zh) | 并行气象要素降尺度方法、装置、电子设备及存储介质 | |
CN109767454A (zh) | 基于时-空-频显著性的无人机航拍视频运动目标检测方法 | |
CN105117740A (zh) | 字体识别方法及装置 | |
CN107346414A (zh) | 行人属性识别方法和装置 | |
CN114241422A (zh) | 一种基于ESRGAN和改进YOLOv5s的学生课堂行为检测方法 | |
CN105488541A (zh) | 增强现实系统中基于机器学习的自然特征点识别方法 | |
CN109871829A (zh) | 一种基于深度学习的检测模型训练方法和装置 | |
CN105138983A (zh) | 基于加权部件模型和选择性搜索分割的行人检测方法 | |
CN103714331A (zh) | 一种基于点分布模型面部表情特征的提取方法 | |
CN110084107A (zh) | 一种基于改进mrf的高分辨率遥感影像道路提取方法及装置 | |
CN102708589B (zh) | 一种基于特征聚类的三维目标多视点视图建模方法 | |
CN113449692A (zh) | 一种基于无人机的地图车道信息更新方法及其系统 | |
CN106909881A (zh) | 基于无人机遥感影像提取玉米育种基地垄数的方法及系统 | |
CN104616035B (zh) | 基于图像全局特征及SURF算法的Visual Map快速匹配方法 | |
CN117557780A (zh) | 一种机载多模态学习的目标检测算法 | |
CN107644230A (zh) | 一种遥感图像对象的空间关系建模方法 | |
CN116958698A (zh) | 一种基于街景图像多模态信息的建筑物分类方法 | |
CN107220615B (zh) | 一种融合兴趣点大数据的城市不透水面信息提取方法 | |
CN106372594A (zh) | 一种基于增强现实的移动平台三维生物细胞展示系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170201 |
|
RJ01 | Rejection of invention patent application after publication |