CN113804913B - 一种利用单个光流传感器获取球形电机旋转速度的方法 - Google Patents

一种利用单个光流传感器获取球形电机旋转速度的方法 Download PDF

Info

Publication number
CN113804913B
CN113804913B CN202111192765.6A CN202111192765A CN113804913B CN 113804913 B CN113804913 B CN 113804913B CN 202111192765 A CN202111192765 A CN 202111192765A CN 113804913 B CN113804913 B CN 113804913B
Authority
CN
China
Prior art keywords
optical flow
image
spherical
camera
rotor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111192765.6A
Other languages
English (en)
Other versions
CN113804913A (zh
Inventor
徐志科
刘呈磊
金龙
冷静雯
朱星星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southeast University
Original Assignee
Southeast University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southeast University filed Critical Southeast University
Priority to CN202111192765.6A priority Critical patent/CN113804913B/zh
Publication of CN113804913A publication Critical patent/CN113804913A/zh
Application granted granted Critical
Publication of CN113804913B publication Critical patent/CN113804913B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P3/00Measuring linear or angular speed; Measuring differences of linear or angular speeds
    • G01P3/36Devices characterised by the use of optical means, e.g. using infrared, visible, or ultraviolet light
    • G01P3/38Devices characterised by the use of optical means, e.g. using infrared, visible, or ultraviolet light using photographic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/269Analysis of motion using gradient-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20016Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform

Abstract

本发明公开一种利用单个光流传感器获取球形电机旋转速度的方法,包括以下步骤:S1:确定光流传感器与球形电机转子的位置关系;S2:光流摄像头获取球形电机转子表面图像;S3:对球形电机转子图像进行数据处理;S4:球形电机转子图像特征点选取;S5:对每一个特征点进行L‑K光流运算;S6:由每个特征点的光流计算完整图像的光流;S7:利用图像的光流获取图像投影速度;S8:利用球形电机与传感器之间的位置关系求解球形转子的速度。本发明的球形转子转速识别方法与传统的球形转子转速识别方法相比,具有无接触的优点,降低损耗;只利用单个摄像头,依靠单个光流摄像头与空间位置关系直接计算速度大小与方向。

Description

一种利用单个光流传感器获取球形电机旋转速度的方法
技术领域
本发明涉及速度传感器与计算机图像处理领域,具体是一种利用单个光流传感器获取球形电机旋转速度的方法。
背景技术
在航天姿态控制、机器人以及数控机床等新兴高科技领域,球形电机凭借其相较于传统电机的优势——可以输出任意轴的力矩、质量更低、体积更小而获得更广泛的应用前景。为了实现对电机高精度的控制,就需要对球形电机进行闭环控制,所以获取球形电机的转速是必要的。
球形电机的转速不同于传统电机,测量球形电机的转速不仅需要测量转速大小,还需要测量转速的方向。现在市场上多采用多个摄像头配合获取球形电机的转速大小与方向。主要包括霍尔传感器、光电编码器等等方法,这些方法为了测得多个自由度的球形电机转速,需要多个传感器之间的配合。
发明内容
本发明的目的在于提供一种利用单个光流传感器获取球形电机旋转速度的方法,通过确定传感器与球形转子的相对位置,可以实现利用单个摄像头对球形电机的转速测量。
本发明的目的可以通过以下技术方案实现:
一种利用单个光流传感器获取球形电机旋转速度的方法,包括以下步骤:
S1:确定光流传感器与球形电机转子的位置关系;
S2:光流摄像头获取球形电机转子表面图像;
S3:对球形电机转子图像进行数据处理;
S4:球形电机转子图像特征点选取;
S5:对每一个特征点进行L-K光流运算;
S6:由每个特征点的光流计算完整图像的光流;
S7:利用图像的光流获取图像投影速度;
S8:利用球形电机与传感器之间的位置关系求解球形转子的速度。
进一步的,所述S1中光流传感器安装于球形电机定子外壳上,传感器摄像头参考平面与球形电机转子表面的垂直距离在摄像头工作范围之内。
进一步的,所述S2中获取照片的摄像头分辨率在500以上,拍摄时外部光照条件保持不变或变化缓慢。
进一步的,所述S3具体包括以下步骤:
S31:对RGB图像数据进行灰度计算;
S32:将灰度值转化为双精度值,便于计算机处理。
进一步的,所述S4具体包括以下步骤:
S41:计算图像中每个像素点的梯度矩阵G及其最小特征值λm
Figure BDA0003301872140000021
式中px,py为计算像素点的位置,wx,wy为综合选取窗口大小,选取范围在2-7像素范围之内;Ix,Iy为像素点灰度值在x,y方向的偏导;
S42:寻找图像中所有最小特征值的最大值λmax
S43:保留最小特征值大于10%λmax的像素点;
S44:保留λm局部最大的像素点,保留的像素点的λm要比邻域3*3像素范围内的任意像素点大。
进一步的,所述S5具体包括以下步骤:
S51:建立图像分层金字塔:
Figure BDA0003301872140000031
式中L为层数,I为某位置像素点的灰度值大小;将获取得到的图像作为金字塔的第0层,从第0层计算得到第1层,再从第1层计算得到第2层;以这样的递归方式得到图像金字塔;式中x、y为图像像素点的位置,图像左上角为(0,0);
S52:最上层特征点的光流值无可靠初始估计值:
Figure BDA0003301872140000032
式中
Figure BDA0003301872140000033
为最大层的光流;
S53:迭代计算下一层特征点光流值:
Figure BDA0003301872140000034
式中dL为第L层残差位移矢量;
S54:若最终收敛,得到最终光流值:
Figure BDA0003301872140000035
式中
Figure BDA0003301872140000036
为该特征像素点光流的最终解,每个特征点都会有计算得到的光流。
进一步的,所述S6由每个特征点的光流计算完整图像的光流:
Figure BDA0003301872140000041
式中
Figure BDA0003301872140000042
为第i个特征点的光流,n为特征点的个数,
Figure BDA0003301872140000043
为图像的光流。
进一步的,所述S7由光流传感器摄像头的分辨率计算图像光流所代表的投影速度:
Figure BDA0003301872140000044
式中
Figure BDA0003301872140000045
为投影速度,ppi为摄像头分辨率,Δt为前后两帧图像的间隔时间,计算结果单位为cm/s。
进一步的,所述S8具体包括以下步骤:
S81:摄像头到球形转子摄像面的距离由图像大小计算得到:
Figure BDA0003301872140000046
Figure BDA0003301872140000047
式中d为摄像头到球形转子摄像面的距离,f为摄像头的焦距,R为球形转子的半径,d′为摄像头到球形转子表面的距离,A、B为图像大小;
S82:由传感器摄像头与球形转子的位置关系:
Figure BDA0003301872140000048
Figure BDA0003301872140000049
为实际的转速,单位为cm/s,方向与光流
Figure BDA00033018721400000410
方向相反。
本发明的有益效果:
本发明的球形转子转速识别方法与传统的球形转子转速识别方法相比,具有无接触的优点,降低损耗;只利用单个摄像头,依靠单个光流摄像头与空间位置关系直接计算速度大小与方向,而其他无接触的识别方法一般都用到了两个或多个摄像头协同工作。
附图说明
图1是本发明光流传感器获取球形电机转子照片示意图;
图2是本发明球形转子空间坐标系的示意图;
图3是本发明转子图像金字塔分层与光流计算示意图;
图4是本发明球形电机转子与摄像头相对位置示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
一种利用光流传感器获取球形电机旋转速度的方法,包括以下步骤:
S1:球形电机转子照片获取依靠光流传感器上的摄像头,如图1所示,球形电机应用场合不要求高转速输出,转速不高保证了前后两帧图像差异性不大,电机的工作环境一般不发生改变,保证了外部光照环境变换是缓慢均匀的。
获取的前后两帧2D图像分别为图像I与图像J。
S2:图像数据处理的灰度处理依靠灰度函数,将RGB图像转化为灰度图;将灰度图转化为双精度数据,方便计算机处理。灰度函数:
E′y=0.299R+0.587G+0.114B
式中R,G,B为RGB图像像素点的值,E′y为像素点的灰度值;
两幅图像I,J的灰度值分别为I(x,y)与J(x,y),图像左上顶点的像素坐标为[0 0]T。nx、ny分别为图像的宽度与高度。
S3:图像特征点选取,包括:
S31:计算图像1中每个像素点的梯度矩阵G及其最小特征值λm
Figure BDA0003301872140000061
式中px,py为计算像素点的位置,wx,wy为综合选取窗口大小,选取范围在2~7像素范围之内;Ix,Iy为像素点灰度值在x、y方向的偏导。
S32:寻找图像1中所有最小特征值的最大值λmax
S33:保留最小特征值大于10%λmax的像素点;
S34:保留λm局部最大的像素点,保留像素点的λm要比邻域(3*3大小)中任意像素点的大;
得到第一幅图像I的特征点为μ=[μx μy]T,在第二幅图像J中对应的特征点为v=[vx vy]T
S4:光流运算基于灰度一致性假设,即:
Figure BDA0003301872140000062
光流d使得上述残差公式最小。
对特征点进行L-K光流运算,具体包括:
S41:如附图3所示,建立图像分层金字塔:
Figure BDA0003301872140000071
为了满足上式,在图像
Figure BDA0003301872140000072
周围定义一些虚拟元素:
IL-1(-1,y)=IL-1(0,y)
IL-1(x,-1)=IL-1(x,0)
Figure BDA0003301872140000073
Figure BDA0003301872140000074
Figure BDA0003301872140000075
图像IL的宽度
Figure BDA0003301872140000076
与高度
Figure BDA0003301872140000077
的最大整数满足下列两个条件:
Figure BDA0003301872140000078
Figure BDA0003301872140000079
由此建立起图像金字塔,对于两帧图像就有两个图像金字塔序列,如对于图像大小为640×480的图像,第一、二、三层图像大小分别为320×240、160×120、80×60。
S42:第L层的灰度一致性假设:
Figure BDA00033018721400000710
式中gL为第L层的初始光流,dL为残差位移矢量。
最上层特征点的光流值无可靠初始估计值:
Figure BDA00033018721400000711
式中
Figure BDA0003301872140000081
为最大层的光流值;
迭代计算下一层特征点光流值:
gL-1=2(gL+dL)
式中dL为第L层残差位移矢量;
若最终收敛,得到最终光流值:
d=g0+d0
式中d为光流的最终解。
S43:L-K光流迭代算法是每一层金字塔都要运行一遍的算法,利用中心差分法计算图像梯度:
Figure BDA0003301872140000082
Figure BDA0003301872140000083
得到光流矢量:
Figure BDA0003301872140000084
式中
Figure BDA0003301872140000085
为使得误差函数最小的最优光流矢量,G为梯度矩阵,
Figure BDA0003301872140000086
为:
Figure BDA0003301872140000087
式中k代表迭代次数。
图像光流迭代计算是基于金字塔分层的L-K光流迭代计算。图像金字塔分层一般为3-5层,每层金字塔每个窗口的L-K光流迭代次数一般在5次以内结束。
S5:利用位置关系求解球形转子的速度,包括:
S51:由每个特征点的光流计算整个图像的光流:
Figure BDA0003301872140000088
式中
Figure BDA0003301872140000091
为第i个特征点的光流,n为特征点的个数,
Figure BDA0003301872140000092
为图像的光流。
S52:由光流传感器摄像头的分辨率计算光流所代表的投影速度:
Figure BDA0003301872140000093
式中
Figure BDA0003301872140000094
为投影速度,ppi为摄像头分辨率,Δt为前后两帧图像的间隔时间,计算结果单位为cm/s。
S53:如附图2所示,摄像头到球形转子摄像面的距离可以由图像大小计算得到:
Figure BDA0003301872140000095
Figure BDA0003301872140000096
式中d为摄像头到球形转子摄像面的距离,f为摄像头的焦距,R为球形转子的半径,d′为摄像头到球形转子表面的距离,A、B为图像大小。
S54:如附图4所示,由传感器摄像头与球形转子的位置关系:
Figure BDA0003301872140000097
Figure BDA0003301872140000098
为实际的转速,单位为cm/s,方向与光流
Figure BDA0003301872140000099
方向相反。
在本说明书的描述中,参考术语“一个实施例”、“示例”、“具体示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。

Claims (9)

1.一种利用单个光流传感器获取球形电机旋转速度的方法,其特征在于,包括以下步骤:
S1:确定光流传感器与球形电机转子的位置关系;
S2:光流摄像头获取球形电机转子表面图像;
S3:对球形电机转子图像进行数据处理;
S4:球形电机转子图像特征点选取;
S5:对每一个特征点进行L-K光流运算;
S6:由每个特征点的光流计算完整图像的光流;
S7:利用图像的光流获取图像投影速度;
S8:利用球形电机与传感器之间的位置关系求解球形转子的速度。
2.根据权利要求1所述的方法,其特征在于,所述S1中光流传感器安装于球形电机定子外壳上,传感器摄像头参考平面与球形电机转子表面的垂直距离在摄像头工作范围之内。
3.根据权利要求1所述的方法,其特征在于,所述S2中获取照片的摄像头分辨率在500以上,拍摄时外部光照条件保持不变或变化缓慢。
4.根据权利要求1或2所述的方法,其特征在于,所述S3具体包括以下步骤:
S31:对RGB图像数据进行灰度计算;
S32:将灰度值转化为双精度值,便于计算机处理。
5.根据权利要求1所述的方法,其特征在于,所述S4具体包括以下步骤:
S41:计算图像中每个像素点的梯度矩阵G及其最小特征值λm
Figure FDA0003857625020000021
式中px,py为计算像素点的位置,wx,wy为综合选取窗口大小,选取范围在2-7像素范围之内;Ix,Iy为像素点灰度值在x,y方向的偏导;
S42:寻找图像中所有最小特征值的最大值λmax
S43:保留最小特征值大于10%λmax的像素点;
S44:保留λm局部最大的像素点,保留的像素点的λm要比邻域3*3像素范围内的任意像素点大。
6.根据权利要求1所述的方法,其特征在于,所述S5具体包括以下步骤:
S51:建立图像分层金字塔:
Figure FDA0003857625020000022
式中L为层数,I为某位置像素点的灰度值大小;将获取得到的图像作为金字塔的第0层,从第0层计算得到第1层,再从第1层计算得到第2层;以这样的递归方式得到图像金字塔;式中x、y为图像像素点的位置,图像左上角为(0,0);
S52:最上层特征点的光流值无可靠初始估计值:
Figure FDA0003857625020000031
式中
Figure FDA0003857625020000032
为最大层的光流;
S53:迭代计算下一层特征点光流值:
Figure FDA0003857625020000033
式中dL为第L层残差位移矢量;
S54:若最终收敛,得到最终光流值:
Figure FDA0003857625020000034
式中
Figure FDA0003857625020000035
为特征点光流值的最终解,每个特征点都会有计算得到的光流。
7.根据权利要求1所述的方法,其特征在于,所述S6由每个特征点的光流计算完整图像的光流:
Figure FDA0003857625020000036
式中
Figure FDA0003857625020000037
为第i个特征点的光流,n为特征点的个数,
Figure FDA0003857625020000038
为图像的光流。
8.根据权利要求1所述的方法,其特征在于,所述S7由光流传感器摄像头的分辨率计算图像光流所代表的投影速度:
Figure FDA0003857625020000039
式中
Figure FDA00038576250200000310
为投影速度,ppi为摄像头分辨率,Δt为前后两帧图像的间隔时间,计算结果单位为cm/s。
9.根据权利要求1所述的方法,其特征在于,所述S8具体包括以下步骤:
S81:摄像头到球形转子摄像面的距离由图像大小计算得到:
Figure FDA0003857625020000041
Figure FDA0003857625020000042
式中d为摄像头到球形转子摄像面的距离,f为摄像头的焦距,R为球形转子的半径,d′为摄像头到球形转子表面的距离,A、B为图像大小;
S82:由传感器摄像头与球形转子的位置关系:
Figure FDA0003857625020000043
Figure FDA0003857625020000044
为实际的转速,单位为cm/s,方向与光流
Figure FDA0003857625020000045
方向相反。
CN202111192765.6A 2021-10-13 2021-10-13 一种利用单个光流传感器获取球形电机旋转速度的方法 Active CN113804913B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111192765.6A CN113804913B (zh) 2021-10-13 2021-10-13 一种利用单个光流传感器获取球形电机旋转速度的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111192765.6A CN113804913B (zh) 2021-10-13 2021-10-13 一种利用单个光流传感器获取球形电机旋转速度的方法

Publications (2)

Publication Number Publication Date
CN113804913A CN113804913A (zh) 2021-12-17
CN113804913B true CN113804913B (zh) 2022-11-29

Family

ID=78897686

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111192765.6A Active CN113804913B (zh) 2021-10-13 2021-10-13 一种利用单个光流传感器获取球形电机旋转速度的方法

Country Status (1)

Country Link
CN (1) CN113804913B (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0719287B2 (ja) * 1988-12-02 1995-03-06 工業技術院長 動画像処理による運動計測方法
CN104168444B (zh) * 2013-05-17 2018-05-01 浙江大华技术股份有限公司 一种跟踪球机的目标跟踪方法及跟踪球机
JP6807142B2 (ja) * 2015-07-28 2021-01-06 株式会社Uacj 磁気ディスク用アルミニウム合金基板及びその製造方法
CN108592951B (zh) * 2018-05-30 2019-08-02 中国矿业大学 一种基于光流法的采煤机捷联惯导初始对准系统及方法

Also Published As

Publication number Publication date
CN113804913A (zh) 2021-12-17

Similar Documents

Publication Publication Date Title
CN110276808B (zh) 一种单相机结合二维码测量玻璃板不平度的方法
Coorg et al. Spherical mosaics with quaternions and dense correlation
US9830715B2 (en) Method for determining a parameter set designed for determining the pose of a camera and/or for determining a three-dimensional structure of the at least one real object
CN111981982B (zh) 一种基于加权sfm算法的多向合作靶标光学测量方法
CN108645398A (zh) 一种基于结构化环境的即时定位与地图构建方法及系统
CN109272574B (zh) 基于投影变换的线阵旋转扫描相机成像模型构建方法和标定方法
CN101763643A (zh) 一种结构光三维扫描仪系统自动标定方法
CN113205603A (zh) 一种基于旋转台的三维点云拼接重建方法
CN108574825A (zh) 一种云台摄像机的调整方法和装置
CN111127540B (zh) 一种三维虚拟空间自动测距方法及系统
CN111156997A (zh) 一种基于相机内参在线标定的视觉/惯性组合导航方法
CN111862316A (zh) 一种基于优化的imu紧耦合稠密直接rgbd的三维重建方法
CN113920206A (zh) 透视移轴相机的标定方法
CN111275764B (zh) 基于线段阴影的深度相机视觉里程测量方法
CN102269575B (zh) 一种视觉测量中基于映射的相位匹配方法
CN109102527A (zh) 基于标识点的视频动作的获取方法和装置
CN113804913B (zh) 一种利用单个光流传感器获取球形电机旋转速度的方法
CN112634305B (zh) 一种基于边缘特征匹配的红外视觉里程计实现方法
CN112184809A (zh) 相对位姿的估计方法、装置、电子设备及介质
CN112258631A (zh) 一种基于深度神经网络的三维目标检测方法及系统
CN117197333A (zh) 基于多目视觉的空间目标重构与位姿估计方法及系统
CN112767481B (zh) 一种基于视觉边缘特征的高精度定位及建图方法
CN112767482B (zh) 一种多传感器融合的室内外定位方法及系统
CN117078839A (zh) 基于神经辐射场的三维模型重建方法、系统和终端
CN111968182B (zh) 一种双目相机非线性模型参数的标定方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant