CN109949338A - 一种基于cpg模型仿生水下机器鱼的目标跟踪识别方法 - Google Patents
一种基于cpg模型仿生水下机器鱼的目标跟踪识别方法 Download PDFInfo
- Publication number
- CN109949338A CN109949338A CN201910131228.7A CN201910131228A CN109949338A CN 109949338 A CN109949338 A CN 109949338A CN 201910131228 A CN201910131228 A CN 201910131228A CN 109949338 A CN109949338 A CN 109949338A
- Authority
- CN
- China
- Prior art keywords
- image
- cpg
- recognition methods
- methods based
- target following
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Analysis (AREA)
Abstract
本发明涉及一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,包括对机器鱼的模型建立、对水下目标的跟踪识别和根据水下目标实时调整机器鱼的运动轨迹。本发明的有益效果:通过对仿生机器鱼尾部机构建立链式CPG结构模型,提高了游动效率,同时,CPG简化了对关节间的协调控制,并提高机器鱼运动的协调性,转向和加速时的灵敏性;通过对不明目标物持续跟踪拍摄,可避免目标物因被遮挡或被光线流场干扰导致出现未能检测识别的情况,识别效果更好。
Description
技术领域
本发明涉及水下机器鱼跟踪识别控制领域,具体来说,涉及一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法。
背景技术
仿生机器鱼用于完成水下探测任务,其可在水下环境中通过双目识别摄像头拍摄目标物图像并实现目标物的图像识别。
水环境中的图像识别,相比于大气环境,具有更大的困难。这主要是由于水环境的特殊性导致的,水环境中照明是充满变数,水中光线是不均匀的,水中颗粒物混淆传统的噪声模型,因此,在水下环境中,在对不明目标物进行识别时,经常因为不明目标物被遮挡或被光线流场干扰导致出现未能检测识别的情况。
在跟踪和识别的过程中,还需要对仿生机器鱼进行实时的控制,实时调整仿生机器鱼尾部机构的姿态,保证其的正确运动轨迹。
仿生机器鱼对水下目标的识别和运动轨迹的调整在水下探测任务中缺一不可。
针对相关技术中的问题,目前尚未提出有效的解决方案。
发明内容
针对相关技术中的上述技术问题,本发明提出一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,能够准确识别目标,并作出相应的运动轨迹调整。
为实现上述技术目的,本发明的技术方案是这样实现的:一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,包括以下步骤:
S1根据水下机器鱼具体尾部机构,构建链式CPG结构模型;
S2对水下某个不明目标物持续跟踪,并在跟踪过程中拍摄该不明目标物的图像;
S3将所述图像通过双边滤波算法进行图像预处理;
S4将图像预处理后的所述图像采用otsu最佳阈值分割法分割成像元图像;
S5基于颜色特征、形状特征、纹理特征中的一种或多种对所述像元图像进行图像特征提取以获取到相应特征;
S6将所述特征根据预定的目标物规则在SVM分类器中进行图像分类并识别出目标物;
S7根据识别出的目标物对水下机器鱼进行游动控制,模拟所述尾部机构各关节运动节律;
S8根据对所述尾部机构实际输入速度方向档位,在CPG结构模型中计算出各关节的相对转动角度θi;
S9各关节控制系统根据对应的所述相对转动角度θi进行角度闭环控制。
进一步的,在S1中,所述尾部机构为若干关节与连杆构成的链式结构。
进一步的,在S4中,先采用otsu最佳阈值分割法对所述图像进行图像阈值化,再通过自适应阈值二值化算法对所述图像进行二值化操作。
进一步的,在S5中,所述颜色特征通过主色调直方图或颜色矩来进行描述,所述纹理特征通过圆形LBP来描述。
进一步的,在S5中,所述形状特征在提取时先通过canny边缘检测,检测出所述不明目标物的边缘轮廓,再用findContours将边缘序列化,再通过多边形逼近提取出所述不明目标物的外轮廓。
进一步的,在S1中,所述尾部机构中关节数量为三个。
进一步的,在S9中,关节控制系统包括伺服驱动器和与伺服驱动器连接的伺服电机。
进一步的,所述伺服驱动器包括位置处理单元、与所述位置处理单元连接的位置调节器、与所述位置调节器连接的速度调节器,以及分别与所述速度调节器和所述伺服电机连接的电流调节器。
本发明的有益效果:通过对仿生机器鱼尾部机构建立链式CPG结构模型,提高了游动效率,同时,CPG简化了对关节间的协调控制,并提高机器鱼运动的协调性,转向和加速时的灵敏性;通过对不明目标物持续跟踪拍摄,可避免目标物因被遮挡或被光线流场干扰导致出现未能检测识别的情况,识别效果更好。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法的原理框图;
图2是根据本发明实施例所述的图像边缘的示意图;
图3是根据图2所述的右侧边缘像素点权重的积的分布图;
图4是根据图2所述的像素点进行双边滤波后的示意图;
图5是根据本发明实施例所述的RGB色彩空间的示意图;
图6是根据本发明实施例所述的KCF目标跟踪算法流程的示意图;
图7是根据本发明实施例所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法中的CPG控制模型的结构框图;
图8是根据本发明实施例所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法中的仿生结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员所获得的所有其他实施例,都属于本发明保护的范围。
一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,可分为一种基于CPG模型仿生水下机器鱼的模拟控制方法和水下目标跟踪识别方法,具体的,在建立CPG模型后,根据水下具体识别的目标图像来对机器鱼进行相关的调节控制。
1、CPG模型的建立:
根据水下机器鱼具体尾部机构,将鲨鱼鱼尾简化为三个关节与连杆构成的尾部机构,再加上刚性连杆构建链式CPG结构模型;如图8所示,图中1号曲线为鲨鱼尾部摆动曲线,图中2号曲线为连杆机构对鲨鱼鱼尾拟合后的形状,图中2号曲线上的圆圈3为每个关节的节点。
2、水下目标跟踪识别
如图1-5所示,包括以下步骤:
S1对水下某个不明目标物持续跟踪,并在跟踪过程中拍摄该不明目标物的图像;
S2将所述图像进行图像预处理;
S3将图像预处理后的所述图像阈值分割成像元图像;
S4基于颜色特征、形状特征、纹理特征中的一种或多种对所述像元图像进行图像特征提取以获取到相应特征;
S5将所述特征根据预定的目标物规则进行图像分类并识别出目标物。
在本发明的一个具体实施例中,在S1中,采用KCF的目标跟踪算法对所述不明目标物进行跟踪。
在本发明的一个具体实施例中,在S2中,采用双边滤波算法来对所述图像进行图像预处理,以达到保持边缘、降噪平滑的效果。
在本发明的一个具体实施例中,所述双边滤波算法的表达式为:
with the normalization
式中,x(ξ,x)、s(f(ξ),f(x))均为权重函数,ξ为邻域像素点,x中心像素点。
在本发明的一个具体实施例中,所述权重函数为高斯函数,其表达式为:
where
d(ξ,x)=d(ξ-x)=||ξ-x||
式中,||ξ-x||为两个值ξ,x之间的欧式距离。
在本发明的一个具体实施例中,在S3中,先采用otsu最佳阈值分割法对所述图像进行图像阈值化,再通过自适应阈值二值化算法对所述图像进行二值化操作。
在本发明的一个具体实施例中,在S4中,所述颜色特征通过主色调直方图或颜色矩来进行描述,所述纹理特征通过圆形LBP来描述。
在本发明的一个具体实施例中,在S4中,所述形状特征在提取时先通过canny边缘检测,检测出所述不明目标物的边缘轮廓,再用findContours将边缘序列化,再通过多边形逼近提取出所述不明目标物的外轮廓。
在本发明的一个具体实施例中,在S5中,将所述特征放入SVM分类器中进行图像分类。
为了方便理解本发明的上述技术方案,以下通过具体使用方式对本发明的上述技术方案进行详细说明。
本发明通过对水下某个不明目标物持续跟踪拍摄,并将拍摄的图像进行识别,直至目标物被识别出,从而避免了目标物因一时被遮挡或一时被光线流场干扰导致出现未能检测识别的情况。
图像处理和识别的原理为先人为设定目标物的形状,颜色,纹理等规则,在将拍摄到的图像依次进行图像预处理、图像分割和图像特征提取后,根据所设定规则进行图像分类和识别。
水下双目识别摄像头拍摄到不明目标物图像后,因为水下图像噪声很多,需要先进行图像处理再进行图像识别。
图像处理包括图像预处理和图像分割两部分。
图像预处理采用双边滤波算法来达到保持边缘、降噪平滑的效果。双边滤波算法和其他滤波算法原理一样,双边滤波算法也是采用加权平均的算法,其用周边像素亮度值的加权平均代表某个像素的强度,所用的加权平均基于高斯分布。最重要的是,双边滤波的权重不仅考虑了像素的欧氏距离(如普通的高斯低通滤波,只考虑了位置对中心像素的影响),还考虑了像素范围域中的辐射差异(例如卷积核中像素与中心像素之间相似程度、颜色强度,深度距离等),在计算中心像素的时候同时考虑这两个权重。它的一般表达式为
with the normalization
式中,权重c(ξ,x)和邻域像素点ξ与中心像素点x之间的几何距离相关,权重s(f(ξ),f(x))和邻域像素点ξ与中心像素点x之间的色彩距离相关。随着ξ与之x间几何距离和色彩距离的变化,像素点ξ的权重c(ξ,x)和s(f(ξ),f(x))随之变化。这样的一个滤波器是一个智能的可自动调节权重的滤波器。至于如何自动调节,就取决于权重函数c(ξ,x)和s(f(ξ),f(x))的具体表达式。
双边滤波算法中两个权重函数均为高斯函数,即:
where
d(ξ,x)=d(ξ,x)=||ξ-x||
其中,||ξ-x||为两个值ξ,x之间的欧式距离。
采用高斯函数之后,当邻域像素点ξ与中心像素点x的欧式距离||ξ-x||比较大,或是两个像素值相差比较大时,该像素点的权重就比较小,导致该像素点对滤波后的像素点的影响较小。更进一步,每个滤波后像素点的值,受与他色彩相近并且距离较近的像素点的影响较大,而受其他临域像素点ξ的影响较小,这样保护了图像中原像素点的色彩,滤掉了少数存在的“噪声点”,起到了平滑的作用,同时又保护了边缘。
图2为图像中的一个边缘,图中用高度代表该像素点的像素值。
图3为求得图2中右侧边缘上的一个像素点的权重c(ξ,x)s(f(ξ),f(x))(图中用高度代表权重的大小),可以看到,颜色越相近s(f(ξ),f(x))值越大,距离越近c(ξ,x)值越大,那么最终两个权重的积就如图中分布。
图4对图2中的每一个像素点都进行双边滤波,结果如图4所示,可以看到滤波的结果即保护了边缘,同时平滑了图像。
图像分割采用otsu最佳阈值分割法和自适应阈值二值化方法。
(1)otsu最佳阈值分割法在类间方差最大的情况下是最佳的,即统计鉴别分析中所用的度量。otsu最佳阈值分割法有一个重要的特性,就是它完全以在一幅图像的直方图上执行计算为基础,而直方图是很容易得到的一维阵列。。
otsu最佳阈值分割法的具体步骤如下:
a、计算输入图像的直方图,并归一化。
b、计算累积均值mu,以及全局灰度均值。
c、计算被分到类1的概率q1,和被分到类2的概率q2。
d、用公式计算类间方差,sigma=q1*q2*(mu1-mu2)*(mu1-mu2)
e、循环寻找类间方差最大值,并记下此时的阈值,即为最佳阈值。
f、利用最佳阈值进行图像阈值化
(2)自适应阈值二值化
STEP1:求出图像的灰度的最大值gmax和最小值gmin,然后,初始阈值T0设置为:Tk=(gmax+gmin)/2,k是迭代次数,此时k=0。
STEP2:根据阈值Tk,将目标图像分割成背景和前景两部分,其中大于Tk的灰度区域称为前景,小于Tk的灰度区域称为背景,然后分别计算出前景和背景的平均灰度值g1和g2,g1=Σg1(x,y)∑,g2=∑g2(x,y)/Σ。
STEP3:计算新的阈值Tk+1=(g1+g2)/2
STEP4:如果|Tk+1-Tk|<10或者k>50,结束迭代,否则,k=k+1,转入STEP2。
STEP5,根据阈值Tk,对图像进行二值化操作。
图像识别包括图像特征提取和图像分类两部分。
图像特征提取分为,颜色特征提取、形状特征提取、纹理特征提取,这些特征事先预定,如选择识别红色球体。
颜色特征提取时,为消除极端光照对颜色的影响,这里将RGB颜色空间转换成HSV颜色空间,HSV是一种将RGB色彩空间中的点在倒圆锥体中的表示方法。HSV即色相(Hue)、饱和度(Saturation)、明度(Value),又称HSB(B即Brightness)。色相是色彩的基本属性,就是平常说的颜色的名称,如红色、黄色等。饱和度(S)是指色彩的纯度,越高色彩越纯,低则逐渐变灰,取0-100%的数值。明度(V),取0-max(计算机中HSV取值范围和存储的长度有关)。HSV颜色空间可以用一个圆锥空间模型来描述。圆锥的顶点处,V=0,H和S无定义,代表黑色。圆锥的顶面中心处V=max,S=0,H无定义,代表白色。示意图如图5所示。
转换公式如下:
v=max
p=v×(1-s)
q=v×(1-f×s)
t=v×(1-(1-f)×s)
对于每个人颜色向量(r,g,b),
颜色特征可颜色直方图或颜色矩来描述。
颜色直方图用以反映图像颜色的组成分布,即各种颜色出现的概率,利用颜色空间三个分量的剥离得到颜色直方图,之后通过观察实验数据发现将图像进行旋转变换、缩放变换、模糊变换后图像的颜色直方图改变不大,即图像直方图对图像的物理变换是不敏感的。因此常提取颜色特征并用颜色直方图应用于衡量和比较两幅图像的全局差。另外,如果图像可以分为多个区域,并且前景与背景颜色分布具有明显差异,则颜色直方图呈现双峰形。
颜色直方图也有其缺点:由于颜色直方图是全局颜色统计的结果,因此丢失了像素点间的位置特征。可能有几幅图像具有相同或相近的颜色直方图,但其图像像素位置分布完全不同。因此,图像与颜色直方图得多对一关系使得颜色直方图在识别前景物体上不能获得很好的效果。
考虑到颜色直方图的以上问题,主色调直方图便产生了。所谓主色调直方图基于假设少数几个像素的值能够表示图像中的绝大部分像素,即出现频率最高的几个像素被选为主色,仅用主色构成的主色调直方图描述一幅图像。这样的描述子并不会降低通过颜色特征进行匹配的效果,因为从某种角度将,频度出现很小的像素点可以被视为噪声。
颜色矩利用线性代数中矩的概念,将图像中的颜色分布用其矩表示。利用颜色一阶矩(平均值Average)、颜色二阶矩(方差Variance)和颜色三阶矩(偏斜度Skewness)来描述颜色分布。与颜色直方图不同,利用颜色矩进行图像描述无需量化图像特征。由于每个像素具有颜色空间的三个颜色通道,因此图像的颜色矩有9个分量来描述。
形状特征在提取时,先通过canny边缘检测,检测出边缘轮廓,再用findContours将边缘序列化,多边形逼近提出外轮廓,再用形状匹配matchShapes匹配预定的目标物规则中的目标形状,以实现识别。
Canny边缘检测算子是一种多级检测算法,分三步:
a.高斯模糊。这一步很简单,类似于LoG算子(Laplacian ofGaussian)作高斯模糊一样,主要作用就是去除噪声。因为噪声也集中于高频信号,很容易被识别为伪边缘。应用高斯模糊去除噪声,降低伪边缘的识别。但是由于图像边缘信息也是高频信号,高斯模糊的半径选择很重要,过大的半径很容易让一些弱边缘检测不到。
b.计算梯度幅值和方向。图像的边缘可以指向不同方向,因此经典Canny算法用了四个梯度算子来分别计算水平,垂直和对角线方向的梯度。但是通常都不用四个梯度算子来分别计算四个方向。常用的边缘差分算子(如Rober,Prewitt,Sobel)计算水平和垂直方向的差分Gx和Gy。这样就可以如下计算梯度模和方向:
θ=atan2(Gy,Gx)
梯度角度θ范围从弧度-π到π,然后把它近似到四个方向,分别代表水平,垂直和两个对角线方向(0°,45°,90°,135°)。可以以±iπ/8(i=1,3,5,7)分割,落在每个区域的梯度角给一个特定值,代表四个方向之一。
这里选择Sobel算子计算梯度。Sobel算法很简单,到处都可以找到,就不列出代码来了。相对于其他边缘算子,Sobel算子得出来的边缘粗大明亮。
c.非最大值抑制。非最大值抑制是一种边缘细化方法。通常得出来的梯度边缘不止一个像素宽,而是多个像素宽。因此这样的梯度图还是很“模糊”。而形状特征提取要求,边缘只有一个精确的点宽度。非最大值抑制能帮助保留局部最大梯度而抑制所有其他梯度值。这意味着只保留了梯度变化中最锐利的位置。算法如下:
1)比较当前点的梯度强度和正负梯度方向点的梯度强度。
2)如果当前点的梯度强度和同方向的其他点的梯度强度相比较是最大,保留其值。否则抑制,即设为0。比如当前点的方向指向正上方90°方向,那它需要和垂直方向,它的正上方和正下方的像素比较。
d.双阀值。一般的边缘检测算法用一个阀值来滤除噪声或颜色变化引起的小的梯度值,而保留大的梯度值。Canny算法应用双阀值,即一个高阀值和一个低阀值来区分边缘像素。如果边缘像素点梯度值大于高阀值,则被认为是强边缘点。如果边缘梯度值小于高阀值,大于低阀值,则标记为弱边缘点。小于低阀值的点则被抑制掉。
e.滞后边界跟踪。至此,强边缘点可以认为是真的边缘。弱边缘点则可能是真的边缘,也可能是噪声或颜色变化引起的。为得到精确的结果,后者引起的弱边缘点应该去掉。通常认为真实边缘引起的弱边缘点和强边缘点是连通的,而又噪声引起的弱边缘点则不会。所谓的滞后边界跟踪算法检查一个弱边缘点的8连通领域像素,只要有强边缘点存在,那么这个弱边缘点被认为是真是边缘保留下来。滞后边界跟踪算法搜索所有连通的弱边缘,如果一条连通的弱边缘的任何一个点和强边缘点连通,则保留这条弱边缘,否则抑制这条弱边缘。搜索时可以用广度优先或者深度优先算法,这里采用深度优先算法。一次连通一条边缘的深度优先算法如下:
STEP1:准备一个栈s,一个队列q,设联通指示变量connected为假。从图像的第一个点开始,进入STEP2。
STEP2:如果这个点是弱边界点并且没有被标记,把它标记,并把它作为第一个元素放入栈s中,同时把它放入记录连通曲线的队列q,进入STEP3。如果这个点不是弱边界或者已经被标记过,到图像的下一个点,重复STEP2。
STEP3:从栈s中取出一个元素,查找它的8像素领域。如果一个领域像素是弱边界并且没有被标记过,把这个领域像素标记,并加入栈s中,同时加入队列q。同时查找领域对应的强边界图,如果有一个像素是强边界,表示这条弱边界曲线和强边界联通,设置connected为真。重复STEP3直到栈中没有元素了。如果connected为假,则依次从队列q中取出每个元素,清空标记。如果connected为真,保留标记。
STEP4:清空队列q,设置connected为假,移动到图像的下一个点,到STEP2。
纹理特征采用圆形LBP来描述,圆形LBP具有水下纹理特性稳定的优点。经典LBP是用正方形8-领域来描述图像的纹理特征,其缺点是难以满足不同尺寸和频率的需求。这里,采用将3×3的正方形窗口领域扩展到任意圆形领域。由于圆形LBP采样点在圆形边界上,那么必然会导致部分计算出来的采样点坐标不是整数,因此这里就需要对得到的坐标像素点值进行处理,常用的处理方法是最近邻插值或双线性插值。
图像分类过程中,基于实时处理的需求考虑,这里采用准确率与速度兼顾的SVM分类器,SVM分类器可选择多项式核的C类支持向量机进行多分类,允许用异常值惩罚因子C进行不完全分类。栅格选参Gamma coef degree调整参数训练特征,再根据实时计算的特征放入SVM分类器中分类。
水下目标跟踪主要是在目标检测识别的基础上,跟踪选定目标,解决目标遮挡或光线流场干扰未能检测识别情况,在目标跟踪时,传统camshift容易造成目标扩散,这里选用KCF的目标跟踪算法。
KCF目标跟踪算法是一种鉴别式跟踪方法,这类方法一般都是在跟踪过程中训练一个目标检测器,使用目标检测器去检测下一帧预测位置是否是目标,然后再使用新检测结果去更新训练集进而更新目标检测器。而在训练目标检测器时一般选取目标区域为正样本,目标的周围区域为负样本,当然越靠近目标的区域为正样本的可能性越大。
KCF目标跟踪算法优势如下:
a.使用目标周围区域的循环矩阵采集正负样本,利用脊回归训练目标检测器,并成功的利用循环矩阵在傅里叶空间可对角化的性质将矩阵的运算转化为向量的Hadamad积,即元素的点乘,大大降低了运算量,提高了运算速度,使算法满足实时性要求。
b.将线性空间的脊回归通过核函数映射到非线性空间,在非线性空间通过求解一个对偶问题和某些常见的约束,同样的可以使用循环矩阵傅里叶空间对角化简化计算。
c.给出了一种将多通道数据融入该算法的途径。
KCF目标跟踪算法流程如图6所示。
针对特定水下跟踪需要的手工特征提取(即上述的图像特征提取)会比传统的SIFT提取HMM分类在速度和质量上占有优势。与KCF算法的融合后更是加速了跟踪算法的速度以及稳定性。
3、机器鱼调节与控制
链式CPG模型构建根据鱼类控制运动中枢简化而来,链式模型就是每节只受前一关节运动状态影响(两关节要有一定的配合),关节肌肉特性决定的。
通过二阶微分方程来模拟所述尾部机构各关节运动节律:
根据实际输入速度方向档位,在CPG结构模型中计算出各关节的相对转动角度θi;
θi(t)=xi(t)+ri(t)cos(φi(t)) (4)
如图1所示,i(i=1,2,3)为每一关节的摆动参数Speed为速度档位,Direction为方向档位。实际控制过程中,只需输入速度方向档位,即可通过CPG控制结构映射到对每一关节的相对转动角度θi的控制。
各关节控制系统根据对应的所述相对转动角度θi进行角度闭环控制;
如图1所示,由CPG模型可得知对应每个关节的转动角度θi,再此输出基础上,再对伺服电机做实时角度闭环控制,以达到预期S1中仿真曲线的控制目的。
具体的,如图1所示,伺服电机与伺服驱动器间形成多个闭环控制:电流环通过电流反馈实现对电机扭矩(力)的控制,速度环通过转速反馈控制,改变了电流环输入的扭矩,从而达到精准快速的转速控制。位置环就是根据电机输出轴的位置传感器作为反馈,对电机转速实时调节来达到电机转到某一位置的目的,三闭环能在一定程度上提高电机控制效果。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,其特征在于,包括以下步骤:
S1根据水下机器鱼具体尾部机构,构建链式CPG结构模型;
S2对水下某个不明目标物持续跟踪,并在跟踪过程中拍摄该不明目标物的图像;
S3将所述图像通过双边滤波算法进行图像预处理;
S4将图像预处理后的所述图像采用otsu最佳阈值分割法分割成像元图像;
S5基于颜色特征、形状特征、纹理特征中的一种或多种对所述像元图像进行图像特征提取以获取到相应特征;
S6将所述特征根据预定的目标物规则在SVM分类器中进行图像分类并识别出目标物;
S7根据识别出的目标物对水下机器鱼进行游动控制,模拟所述尾部机构各关节运动节律;
S8根据对所述尾部机构实际输入速度方向档位,在CPG结构模型中计算出各关节的相对转动角度;
S9各关节控制系统根据对应的所述相对转动角度进行角度闭环控制。
2.根据权利要求1所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,其特征在于,在S1中,所述尾部机构为若干关节与连杆构成的链式结构。
3.根据权利要求1所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,其特征在于,在S4中,先采用otsu最佳阈值分割法对所述图像进行图像阈值化,再通过自适应阈值二值化算法对所述图像进行二值化操作。
4.根据权利要求1所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,其特征在于,在S5中,所述颜色特征通过主色调直方图或颜色矩来进行描述,所述纹理特征通过圆形LBP来描述。
5.根据权利要求1所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,其特征在于,在S5中,所述形状特征在提取时先通过canny边缘检测,检测出所述不明目标物的边缘轮廓,再用findContours将边缘序列化,再通过多边形逼近提取出所述不明目标物的外轮廓。
6.根据权利要求2所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,其特征在于,在S1中,所述尾部机构中关节数量为三个。
7.根据权利要求1所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,其特征在于,在S9中,关节控制系统包括伺服驱动器和与伺服驱动器连接的伺服电机。
8.根据权利要求7所述的一种基于CPG模型仿生水下机器鱼的目标跟踪识别方法,其特征在于,所述伺服驱动器包括位置处理单元、与所述位置处理单元连接的位置调节器、与所述位置调节器连接的速度调节器,以及分别与所述速度调节器和所述伺服电机连接的电流调节器。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910131228.7A CN109949338A (zh) | 2019-02-20 | 2019-02-20 | 一种基于cpg模型仿生水下机器鱼的目标跟踪识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910131228.7A CN109949338A (zh) | 2019-02-20 | 2019-02-20 | 一种基于cpg模型仿生水下机器鱼的目标跟踪识别方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109949338A true CN109949338A (zh) | 2019-06-28 |
Family
ID=67007148
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910131228.7A Pending CN109949338A (zh) | 2019-02-20 | 2019-02-20 | 一种基于cpg模型仿生水下机器鱼的目标跟踪识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109949338A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111612824A (zh) * | 2020-05-26 | 2020-09-01 | 天津市微卡科技有限公司 | 一种用于机器人控制的意识跟踪识别算法 |
CN111709917A (zh) * | 2020-06-01 | 2020-09-25 | 深圳市深视创新科技有限公司 | 基于标注的形状匹配算法 |
CN111899271A (zh) * | 2019-12-16 | 2020-11-06 | 西北工业大学 | 一种图像分割和超声波探伤仪的自动检定的方法及系统 |
CN113191294A (zh) * | 2021-05-11 | 2021-07-30 | 山东浪潮科学研究院有限公司 | 一种基于机器视觉的大型漂浮物体冲撞大坝预防检测方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102303700A (zh) * | 2011-05-26 | 2012-01-04 | 中国科学院自动化研究所 | 具有嵌入式视觉的多控制面机器鱼 |
CN105182912A (zh) * | 2015-09-18 | 2015-12-23 | 芜湖日升重型机床有限公司 | 一种数控机床电气控制系统及维修 |
CN105893940A (zh) * | 2016-03-29 | 2016-08-24 | 南京大学 | 基于边缘检测的集装箱起吊防撞定准系统的实现方法 |
CN105945925A (zh) * | 2016-04-28 | 2016-09-21 | 中国科学院合肥物质科学研究院 | 一种仿生蛇形机器人控制方法 |
CN107291088A (zh) * | 2016-10-20 | 2017-10-24 | 天津科技大学 | 一种水下机器人图像识别和目标跟踪系统 |
CN108416268A (zh) * | 2018-02-02 | 2018-08-17 | 华侨大学 | 一种基于双机器人视觉沟通的动作识别方法 |
US10096385B1 (en) * | 2015-07-23 | 2018-10-09 | Hrl Laboratories, Llc | System and method for model-based estimation and control of epidural spinal cord stimulation |
-
2019
- 2019-02-20 CN CN201910131228.7A patent/CN109949338A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102303700A (zh) * | 2011-05-26 | 2012-01-04 | 中国科学院自动化研究所 | 具有嵌入式视觉的多控制面机器鱼 |
US10096385B1 (en) * | 2015-07-23 | 2018-10-09 | Hrl Laboratories, Llc | System and method for model-based estimation and control of epidural spinal cord stimulation |
CN105182912A (zh) * | 2015-09-18 | 2015-12-23 | 芜湖日升重型机床有限公司 | 一种数控机床电气控制系统及维修 |
CN105893940A (zh) * | 2016-03-29 | 2016-08-24 | 南京大学 | 基于边缘检测的集装箱起吊防撞定准系统的实现方法 |
CN105945925A (zh) * | 2016-04-28 | 2016-09-21 | 中国科学院合肥物质科学研究院 | 一种仿生蛇形机器人控制方法 |
CN107291088A (zh) * | 2016-10-20 | 2017-10-24 | 天津科技大学 | 一种水下机器人图像识别和目标跟踪系统 |
CN108416268A (zh) * | 2018-02-02 | 2018-08-17 | 华侨大学 | 一种基于双机器人视觉沟通的动作识别方法 |
Non-Patent Citations (4)
Title |
---|
何叶荣: "《煤矿安全管理风险评价方法及应用研究》", 31 January 2017, 中国科学技术大学出版社 * |
刘代志: "《军民融合与地球物理》", 31 October 2017, 西安地图出版社 * |
刘安全: "一种面向机器鱼的高精度位姿控制算法设计与实现", 《机器人》 * |
夏良正 等: "《数字图像处理》", 30 September 1999, 东南大学出版社 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111899271A (zh) * | 2019-12-16 | 2020-11-06 | 西北工业大学 | 一种图像分割和超声波探伤仪的自动检定的方法及系统 |
CN111612824A (zh) * | 2020-05-26 | 2020-09-01 | 天津市微卡科技有限公司 | 一种用于机器人控制的意识跟踪识别算法 |
CN111709917A (zh) * | 2020-06-01 | 2020-09-25 | 深圳市深视创新科技有限公司 | 基于标注的形状匹配算法 |
CN111709917B (zh) * | 2020-06-01 | 2023-08-22 | 深圳市深视创新科技有限公司 | 基于标注的形状匹配算法 |
CN113191294A (zh) * | 2021-05-11 | 2021-07-30 | 山东浪潮科学研究院有限公司 | 一种基于机器视觉的大型漂浮物体冲撞大坝预防检测方法 |
CN113191294B (zh) * | 2021-05-11 | 2022-06-17 | 山东浪潮科学研究院有限公司 | 一种基于机器视觉的大型漂浮物体冲撞大坝预防检测方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109949338A (zh) | 一种基于cpg模型仿生水下机器鱼的目标跟踪识别方法 | |
Chen et al. | A cascade face spoofing detector based on face anti-spoofing R-CNN and improved retinex LBP | |
CN101739712B (zh) | 基于视频的3d人脸表情动画驱动方法 | |
CN108319973A (zh) | 一种树上柑橘果实检测方法 | |
CN101930543B (zh) | 一种自拍视频中眼睛图像的调正方法 | |
CN108399361A (zh) | 一种基于卷积神经网络cnn和语义分割的行人检测方法 | |
Moreira et al. | Neural-based color image segmentation and classification using self-organizing maps | |
CN109461186A (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
CN112785534A (zh) | 一种动态场景下去鬼影多曝光图像融合方法 | |
CN108537181A (zh) | 一种基于大间距深度度量学习的步态识别方法 | |
CN106446925A (zh) | 一种基于图像处理的海豚身份识别的方法 | |
CN105825168A (zh) | 一种基于s-tld的川金丝猴面部检测和追踪算法 | |
CN105184771A (zh) | 一种自适应运动目标检测系统及检测方法 | |
CN107154044A (zh) | 一种中餐食物图像的分割方法 | |
CN111881725B (zh) | 一种融合空频域特征的光学遥感图像船舶目标检测方法 | |
CN103413312A (zh) | 基于邻里成分分析和尺度空间理论的视频目标跟踪方法 | |
Nalla et al. | Image dehazing for object recognition using faster RCNN | |
Tuominen et al. | Cloud detection and movement estimation based on sky camera images using neural networks and the Lucas-Kanade method | |
Mayer et al. | Towards autonomous vision self-calibration for soccer robots | |
CN107330918B (zh) | 一种基于在线多示例学习的足球视频球员跟踪方法 | |
Duan et al. | Unmanned aerial vehicle recognition of maritime small-target based on biological eagle-eye vision adaptation mechanism | |
CN109961012A (zh) | 一种水下目标跟踪识别方法 | |
Maldonado-Ramírez et al. | Robotic visual tracking of relevant cues in underwater environments with poor visibility conditions | |
CN110334703B (zh) | 一种昼夜图像中的船舶检测和识别方法 | |
CN112101260A (zh) | 一种作业人员安全带识别方法、装置、设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190628 |
|
RJ01 | Rejection of invention patent application after publication |