CN102928431B - 基于单目多视角机器视觉的珍珠大小形状在线自动分级装置 - Google Patents

Abstract

一种基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，包括用于对珍珠进行自动检测和分类的流水线，用于拍摄被检珍珠图像的单目多视角机器视觉装置，用于对被检珍珠图像进行图像处理、检测、识别、分类以及协调控制流水线上各动作机构的协调动作的微处理器，流水线包括上料动作机构、送检动作机构、下料动作机构、分级动作机构和分级执行机构；本发明提供一种具有机构简单、制造成本低、能满足珍珠大小和形状等品质指标的检测、分级效率高、使用和维护方便和自动化程度高的基于单目多视角机器视觉的珍珠大小形状在线自动分级装置。

Description

基于单目多视角机器视觉的珍珠大小形状在线自动分级装置

技术领域

本发明属于立体成像技术、机器视觉技术、机械设计技术、光学技术和自动控制技术在珍珠自动分级方面的应用，尤其适用于大规模养殖珍珠生产企业的珍珠自动分级。

背景技术

珍珠在我国具有悠久的使用和培育历史。到2005年，我国淡水珍珠的年产量更是达到1500吨左右，约占世界珍珠产量的95％以上。出口淡水珍珠400~500吨，占国际市场淡水珍珠交易量的90％以上，海水珍珠年产量达到20吨，居世界首位。然而相对于我国如此大的珍珠产量，目前整个行业所采用的分级方法基本上仍停留在人工检测的阶段，企业需要安排大量的人员以肉眼观察的方式对珍珠的等级进行分类。这种人工检测的珍珠分级方法，由于珍珠体积小、数量多，分级工作负荷大、效率低，易疲劳，加上对于经验有较高的要求，检测结果易受人为因素影响，不但大大增加了珍珠生产企业的生产成本，也不利于实施准确有效和稳定的质量控制。因此，提高分级分选的效率，实现分级分选的自动化，对于珍珠的生产销售是一件极其重要的事情。

随着养殖珍珠国家分级标准的出台（GB/T 18781-2008），新标准的出台明确了养殖珍珠的定义、分类、质量因素及其级别标准等，使得对于出口产品实施分级检验制度成为可能，由此对于各珍珠生产和加工企业提出了新的要求。对珍珠进行准确快速的分级成为了珍珠生产企业工作重心之一。因此，对珍珠进行准确而快速的分级成为了珍珠生产企业的迫切需求。

国家发明申请号200710066683.0公开了一种基于机器视觉的珍珠实时检测和分级系统，运用机器视觉技术对顺序自由下落的珍珠表面进行图像采集，将采集到的图像传送到DSP、计算机等硬件设备中进行处理，并将处理结果按照珍珠分类标准做即时判别，最后把判别信息传送到分选装置，从而实现用设备自动将不同特征的珍珠进行分类，完成珍珠的大小、形状、光洁、瑕疵和颜色等全部外观品质指标的检测，实现珍珠的快速实时检测和分级。但是，该发明在图像获取技术方面存在着不足之处，为了要从多角度拍摄自由下落的珍珠表面需要配置多台高速摄像机，这样会增加硬件成本不利于产业推广；另一方面，要求多台高速摄像机实时抓拍自由下落的珍珠图像，对装置的控制精度有很高的要求；更重要的是由于珍珠图像在自由下落情况下进行抓拍的，所抓拍的图像对珍珠的光洁和瑕疵检测上造成不利影响，还有需要对多台高速摄像机的内部参数以及颜色系统进行校正；对于珍珠颜色的识别，要保证多台摄像机的颜色系统一致并非一件容易的事情。

珍珠作为非平面的球体目标，表面具有一定的弧度，要根据大小、形状、光洁、瑕疵和颜色分级，必须获得珍珠整个球体表面的图像。因此，检测一颗珍珠并对其进行有效分级需要获取多幅图像，采用一种以珍珠为中心的全方位视觉检测手段。另一方面，珍珠表面非常光滑，具有极高的反光性，很容易在珍珠表面产生周围物体的倒影；由于珍珠的表面具有反光以及呈现表面映像等特有现象，所以，我们在获取珍珠图像过程中，选择在柔弱光下进行，选择与之色差比较大的黑色作为背景，便于图像的分析与处理。照明方式选择为单点照明方式，光源的位置和镜头齐高，两者夹角小于10度。

因此，一种基于单目多视角机器视觉的流水式珍珠自动分级装置的设计迫切需要解决以下几个问题：1）如何设计一种低成本的、以物为中心的全景视觉装置来一次获得珍珠整个球体表面的图像；2）如何一次完成珍珠的大小和形状等外观品质指标的视觉检测；3）如何减少环境多义性和珍珠的表面反光对机器视觉检测结果的干扰；4）如何利用流水线的设计方式来提高检测速度，实现珍珠的快速实时检测和分级。

发明内容

为了克服已有的基于机器视觉的珍珠实时检测和分级系统的机构复杂、制造成本高、难以满足各种品质指标的检测需要、检测与分级效率低、使用和维护困难和自动化程度不高等不足，本发明提供一种具有机构简单、制造成本低、能同时满足珍珠大小形状指标的检测、检测与分级效率高、使用和维护方便和自动化程度高的基于单目多视角机器视觉的流水式珍珠自动分级装置。

本发明解决其技术问题所采用的技术方案是：

一种基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，包括用于对珍珠进行自动检测和分类的流水线，用于拍摄被检珍珠图像的单目多视角机器视觉装置和用于对被检珍珠图像进行图像处理、检测、识别、分类以及协调控制流水线上各动作机构的协调动作的微处理器，所述流水线包括用于将被检珍珠从待测物件容器中以每次一粒珍珠喂送到上料输入口的上料动作机构，用于将被检珍珠提升到视觉检测箱中进行视觉分析的送检动作机构，用于将送检动作机构的活动顶杆的翻板上的已检珍珠落入分级输入口的下料动作机构，用于将落入到分级输入口的已检珍珠根据分级判断结果控制分级输出口转动到相对应的珍珠分级容器上方的分级动作机构和用于将在分级输出口内的已检珍珠收集到相对应的珍珠分级容器中的分级执行机构；所述的微处理器还包括：

图像读取模块，用于从所述的广角摄像机读取包含有从9个不同视角拍摄的被检珍珠的图像；图像处理模块，用于从一幅图像中分割出9幅不同视角的珍珠图像和将9幅不同视角的图像背景中分割出珍珠图像，并根据知识库中保存的传感器的标定结果对9幅不同视角的珍珠图像进行透视投影转换处理；传感器标定模块，用于对广角摄像机的标定、鱼眼镜头的畸变矫正以及透视投影变换，将标定广角摄像机的内部参数以及透视投影变换的参数存储到知识库中；形状大小识别模块，用于根据国家标准对被检珍珠进行大小和形状的识别；结果输出模块，用于将被检珍珠的大小和形状的检测结果进行汇总，一方面根据国家检测标准自动生成一份检测结果表，另一方面，将检测结果的信息发送给流水线控制模块，让流水线控制模块控制相应的分级控制模块自动完成被检珍珠的自动分级；人机交互模块，用于在人工干预下完成检测参数的设定和控制检测结果的输出。

进一步，所述的视觉检测箱由1个广角摄像机和8个平面镜所构成的单目多视角立体视觉装置，通过一个广角摄像机的一次成像来获取从9个视角拍摄的珍珠表面图像，所述的视觉检测箱由广角摄像机和2个平面镜斗型腔组成；每个斗型腔由尺寸相同的等腰梯形平面镜组成，上斗型腔呈上小下大，下斗型腔呈上大下小，上下斗型腔的大口径处尺寸相同，在上下斗型腔的大口径处将上下斗型腔合并为一整体，镜面朝向腔体内侧，且腔体的中轴线重合于摄像机的主光轴；广角镜头由上斗型腔小口端探入腔体内，镜头入射光线由上斗型腔端口的直射光线和镜面反射光线组成；通过腔体的直射光线投影在摄像机投影面的中央区域，被测珍珠通过活动支架被安置到中央区域，镜面反射光线投射到摄像机投影面的周边区域，且8个镜面的投影区域各不相同；因此，该装置拍摄的图像包含被测珍珠的多个影像，且这些影像来自于9不同透视投影点；所述的视觉检测箱一共有9个不同透视投影点，在摄像机中直接成像的为真实摄像机的透视投影点，所拍摄的图像如附图3中的视角0；其他8个均为由摄像机和反射镜面所成像的为虚拟摄像机的透视投影点，所拍摄的图像分别来自于视角1~视角8，所述的单目多视角立体视觉装置具有严格一致的内部参数和颜色系统。

所述的图像处理模块中，分割出珍珠图像后，根据知识库中保存的传感器的标定结果对9幅不同视角的珍珠图像进行透视投影转换处理，得到9幅不同视角的分割后无畸变的珍珠图像。

所述的形状大小识别模块中，根据国家标准中将珍珠的外形分为正圆、圆、近圆、椭圆、扁平和异形6种类型；把最能反应其形状的面称为珍珠的特征面，通过特征面的识别，对珍珠按形状进行分类；因此，首先是要确定特征面，一次成像过程中有9个不同视角的珍珠图像，分别对9个不同视角获得的珍珠图像进行处理来确定那个面作为特征面；

针对一粒珍珠所拍摄的9幅图像中，若存在尖头这一特征形状等，则判别为尖头；若含有平头这一特征形状，则判别为平头；若仅存在正圆、圆、近圆、椭圆等，则按照椭圆、近圆、圆、正圆的优先级顺序进行判别归类，最终实现珍珠形状的判别分类；

根据上述处理中提取的珍珠图像进行边缘化处理，提取珍珠边缘：计算并得到目标边缘的形心，以便后续的极坐标变换；

这里用傅立叶级数的系数来对珍珠的形状进行描述；首先将珍珠轮廓图映射到极坐标系中，并求半径序列r(k),{k＝1,2,…,360}，由于珍珠的大小不一，使得傅里叶变换得到F(h)不具有可比性；因此，接着需要将其归一化半径为l的标准圆，归一化公式如公式（1）所示，

r_q(k)=r(k)/r_max    （1）

式中，r_q(k)为归一化的半径，r(k)为半径序列，r_max为最大的半径；

归一化后的半径，珍珠无论其大小都可以进行比较，然后用公式（2）对归一化后的半径r_q(k)做离散傅里叶变换，

$F\left(h\right)=\underset{k=1}{\overset{n}{\mathrm{\Σ}}}{r}_q\left(k\right)e^{-j2\mathrm{\πkh}/n}h=\mathrm{0,1,2},...---\left(2\right)$

式中，r_q(k)为归一化的半径，F(h)为归一化的半径r_q(k)的傅里叶变换；

由于F(h)是对称的，因此计算其前n／2个值；采用前8个F(h)来代表珍珠形状的主要信息，对珍珠形状进行模式识别；

进一步，对正圆、圆、近圆、椭圆、平头和尖头的6种不同形状类型的各10个珍珠样品拍摄图像并经过一系列图像预处理，由微处理器分别计算每种样品的前8个F(h)值，再取各自的平均值作为珍珠样品的特征参数；

对于一粒待形状分类的珍珠，其F(h)隶属于种类W的F(h)的隶属度μ_Wn用公式（3）进行计算，

${\mathrm{\μ}}_{\mathrm{Wn}}=\frac{1}{1+|F\left(h\right)-\stackrel{\‾}{F}\left(h\right)|\stackrel{\‾}{F}\left(h\right)}---\left(3\right)$

式中，F(h)为每种样品的归一化的半径r_q(k)的傅里叶变换值，为待形状分类的珍珠的归一化的半径r_q(k)的傅里叶变换值，μ_Wn为待形状分类的珍珠隶属于某种类W的F(h)的隶属度计算值；

根据公式（3）得该珍珠的隶属度矩阵μ，由公式（4）进行计算，

阶权重系数向量α用公式（5）进行计算，

α=[α₀,α₁,α₂,α₃,α₄,α₅,α₆,α₇]^T,且 $\underset{k=0}{\overset{7}{\mathrm{\Σ}}}{\mathrm{\α}}_k=1---\left(5\right)$

于是，被检珍珠隶属于种类W的隶属度向量用公式（6）计算，

μ_W=μ·α=[μ₁,μ₂,μ₃,μ₄,μ₅,μ₆]^T    （6）

识别中，μ_W中的最大值分量对应的下标就是该珍珠的形状识别分类结果；

对于1粒被检珍珠共有9幅从不同视角拍摄的图像，每幅图像根据形状识别分类结果得到正圆、圆、近圆、椭圆、平头和尖头的6种不同形状类型中的一种判断结果；在9幅从不同视角拍摄的图像的状识别分类结果中若存在尖头这一特征形状等，则被检珍珠的最终形状判别结果为尖头；若含有平头这一特征形状，则判别为平头；若仅存在正圆、圆、近圆、椭圆等，则按照椭圆、近圆、圆、正圆的优先级顺序进行判别归类，最终实现被检珍珠形状的判别分类。

所述的形状大小识别模块中，根据国家标准，正圆、圆、近圆形、椭圆珍珠以最小直径来表示，其他形状养殖珍珠以最大尺寸乘最小尺寸表示；在被检珍珠形状的判别分类中得到被检珍珠的形状类型后，根据公式（1）中所使用的半径序列r(k)和最大的半径r_max数据，得到被检珍珠的最小直径R_min和最大直径R_max，如果被检珍珠形状的判别分类中得到被检珍珠的形状类型为正圆、圆、近圆形、椭圆中的任何一种就以最小直径R_min作为被检珍珠大小的分类识别结果；如果被检珍珠形状的判别分类中得到被检珍珠的形状类型为平头、尖头中的任何一种就以最小直径R_min乘以最大直径R_max作为被检珍珠大小的分类识别结果。

所述的上料动作机构与所述的送检动作机构有一个动作配合，当所述的送检动作机构的活动顶杆下降到某一个位置高度时，所述的上料动作机构的上料管中的被检珍珠依靠自身重力流入到送检机构的活动顶杆的翻门上，完成上料的动作。

所述的送检动作机构由活动顶杆、翻门、转动齿轮和步进电机所构成，活动顶杆内部中空，当翻门打开时，在翻门上的珍珠将沿顶杆内孔落下；活动顶杆的外侧配置有齿条，齿条与转动齿轮相啮合，步进电机带动转动齿轮正反转动，控制转动齿轮正反方向的转动就能控制活动顶杆的上下运动；当活动顶杆运动到上位极限状态时，活动顶杆将被测珍珠提升到检测箱中进行检测；当活动顶杆运动到下位极限状态时，这时活动顶杆对上料管出口处不发生遮挡，上料管的珍珠依靠自身的重量流入到活动顶杆的翻门上；活动顶杆的上部和翻门采用黑色无镜面反射的金属材料制成。

所述的下料动作机构安置在所述的送检动作机构的活动顶杆内，由翻门、弹簧铰链和牵引式电磁铁所构成，翻门通过弹簧铰链固定在活动顶杆上内侧；牵引式电磁铁不通电时弹簧铰链的弹簧力使得翻门处于闭合状态，当牵引式电磁铁通电时克服弹簧铰链中的弹簧力使得翻门打开，使得安置在活动顶杆的翻门上的珍珠依靠其本身重力下落到活动顶杆的内孔中，流入活动顶杆内孔中的珍珠接着流入到分级输入口中。

所述的分级动作机构由转动盘和步进电机构成，转盘的上面开有一个分级输入口，转盘的下面开有一个分级输出口，分级输入口和分级输出口是连通的，分级输出口下面配置了一根分级输出导管，分级输出口与分级输出导管之间配置有所述的分级执行机构，步进电机驱动转动盘的转动；

所述的分级执行机构由翻门、弹簧铰链和牵引式电磁铁所构成，翻门通过弹簧铰链固定在分级输出口；牵引式电磁铁不通电时弹簧铰链的弹簧力使得翻门处于闭合状态，当牵引式电磁铁通电时克服弹簧铰链中的弹簧力使得翻门打开，使得在分级输出口的已检珍珠依靠其本身重力下落到沿输出导管流入到相对应的珍珠分级容器中。

所述的流水线控制模块，用于控制所述的上料动作机构、所述的送检动作机构、所述的下料动作机构、所述的分级动作机构和所述的分级执行机构之间的协调顺序动作；首先是送检动作机构的活动顶杆上下运动，送检动作机构的活动顶杆从上极限位运动到下极限位的时间为T1，从下极限位运动到上极限位的时间为T2，这里T1＝T2；当送检动作机构的活动顶杆从上极限位开始运动时刻触发图像抓拍机构进行被检珍珠图像的抓拍，然后进行图像分析、检测和分类识别；经过时间T11触发下料动作机构的动作，使得安置在活动顶杆的翻门上的珍珠依靠其本身重力下落到活动顶杆的内孔中，流入活动顶杆内孔中的珍珠接着流入到分级输入口中；经过时间T12根据分级判断结果触发分级动作机构的转动，使得分级输入口对准相对应的分级收集容器的转动，因此，在T12时间内必须完成对被测珍珠的图像分析、检测和分类识别处理；经过时间T13上料管的珍珠依靠自身的重量流入到送检动作机构的活动顶杆的翻门上；活动顶杆到达下极限位后改变运动方向，向上运动，经过时间T21后触发分级执行机构的电磁开关动作，使得已检珍珠流入到相对应的珍珠分级容器中；经过时间T22后触发分级动作机构的转动，使得分级输入口对准活动顶杆的转动，等待下一次被检珍珠的落下；经过时间T23后触发上料动作机构的送检准备动作，将一粒珍珠送入上料管内；活动顶杆到达上极限位后改变运动方向，向下运动，以此往复循环，每循环一次完成一粒珍珠的分类检测。

本发明的有益效果主要表现在：1）采用了流水线式珍珠实时自动检测和分级方法，上料动作、图像抓拍动作、图像分析和检测处理、卸料动作和分级动作都是并行进行的，提高了自动检测和分级的效率；2）通过单一的广角摄像机通过8个平面反射镜同时获取9幅来自不同视角的被检珍珠表面的图像，极大地简化了基于机器视觉的自动检测装置的复杂度，降低了装置的制造成本，同时也为后续图像处理和分析提供了便利；3）装置能从被测珍珠的大小、形状指标对珍珠进行综合的实时自动检测和分级处理；4）以养殖珍珠国家分级标准进行珍珠的图像分析和检测处理，所检测的指标符合国家标准。

附图说明

图1为一种基于单目多视角机器视觉的珍珠大小形状在线自动分级装置的总体说明图，其中1为珍珠分级入料口，2为LED灯，3为广角摄像机，4为镜面，5为珍珠，6为下料动作机构，7为活动顶杆，8为分级执行机构，9为分级输出口，10为步进电机，11为分级输入口，12为送检动作机构，13为上料动作机构，14为分级动作机构，15为珍珠分级容器；

图2为一种基于单目多视角机器视觉装置从不同视角拍摄被检珍珠的示意图，其中16为虚拟摄像机3的投影点，17为摄像机的投影点，18为虚拟摄像机1的投影点，19为第一镜面、20为虚拟摄像机4的投影点、21为第二镜面，22为被检珍珠，23为虚拟摄像机2的投影点；

图3为一种基于单目多视角机器视觉装置从9个不同视角拍摄被检珍珠的9幅图像；

图4为上料机构、送检机构和下料机构的关系结构图，其中，24为齿条，25为转动齿轮、26为上料管、27为翻板，28为自动下翻门，29为弹簧铰链；

图5为下料机构动作时在送检机构的活动顶杆的翻门上的已检珍珠下落到送检机构的活动顶杆的内孔中的情况示意图；

图6为在送检机构的活动顶杆在下位极限时，上料管的珍珠依靠自身的重量流入到活动顶杆的翻门上示意图；

图7为一种基于单目多视角机器视觉的珍珠大小形状在线自动分级装置的各机构动作序列说明图；

图8为将珍珠轮廓图映射到极坐标系中的说明图；

图9为一种基于单目多视角机器视觉的珍珠大小形状在线自动分级装置的硬件结构和软件系统构成说明图。

具体实施方式

下面结合附图对本发明作进一步描述。

参照图1～图9，一种基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，包括用于对珍珠进行自动检测和分类的流水线，用于拍摄被检珍珠图像的单目多视角机器视觉装置和用于对被检珍珠图像进行图像处理、检测、识别、分类以及协调控制流水线上各动作机构的协调动作的微处理器，所述流水线包括用于将被检珍珠从待测物件容器中以每次一粒珍珠喂送到上料输入口的上料动作机构，用于将被检珍珠提升到视觉检测箱中进行视觉分析的送检动作机构，用于将送检动作机构的活动顶杆的翻板上的已检珍珠落入分级输入口的下料动作机构，用于将落入到分级输入口的已检珍珠根据分级判断结果控制分级输出口转动到相对应的珍珠分级容器上方的分级动作机构和用于将在分级输出口内的已检珍珠收集到相对应的珍珠分级容器中的分级执行机构；

所述的视觉检测箱，用于从9个不同视角拍摄被检珍珠的图像；由1个广角摄像机和8个平面镜所构成的单目多视角立体视觉装置，通过一个广角摄像机的一次成像来获取从9个视角拍摄的珍珠表面图像，实现一种以珍珠为观察中心的全方位视觉装置；主要由广角摄像机和2个平面镜斗型腔组成；每个斗型腔由尺寸相同的等腰梯形平面镜组成，上斗型腔呈上小下大，下斗型腔呈上大下小，上下斗型腔的大口径处尺寸相同，在上下斗型腔的大口径处将上下斗型腔合并为一整体，镜面朝向腔体内侧，且腔体的中轴线重合于摄像机的主光轴；广角镜头由上斗型腔小口端探入腔体内，镜头入射光线由上斗型腔端口的直射光线和镜面反射光线组成；通过腔体的直射光线投影在摄像机投影面的中央区域，被测珍珠通过活动支架被安置到中央区域，镜面反射光线投射到摄像机投影面的周边区域，且8个镜面的投影区域各不相同；因此，该装置拍摄的图像包含被测珍珠的多个影像，且这些影像来自于9不同透视投影点，如附图3所示；本发明中一共有9个不同透视投影点，在摄像机中直接成像的为真实摄像机的透视投影点，所拍摄的图像如附图3中的视角0；其他8个均为由摄像机和反射镜面所成像的为虚拟摄像机的透视投影点，所拍摄的图像分别为附图3中的视角1~视角8，由于都是在同一个摄像机中成像，因此该装置具有严格一致的内部参数和颜色系统；

所述的微处理器还包括：

图像读取模块，用于从所述的广角摄像机读取包含有从9个不同视角拍摄的被检珍珠的图像；图像处理模块，用于从一幅图像中分割出9幅不同视角的珍珠图像和将9幅不同视角的图像背景中分割出珍珠图像，并根据知识库中保存的传感器的标定结果对9幅不同视角的珍珠图像进行透视投影转换处理；传感器标定模块，用于对广角摄像机的标定、鱼眼镜头的畸变矫正以及透视投影变换，将标定广角摄像机的内部参数以及透视投影变换的参数存储到知识库中；形状大小识别模块，用于根据国家标准对被检珍珠进行大小和形状的识别；结果输出模块，用于将被检珍珠的大小、形状的检测结果进行汇总，一方面根据国家检测标准自动生成一份检测结果表，另一方面，将检测结果的信息发送给流水线控制模块，让流水线控制模块控制相应的分级控制模块自动完成被检珍珠的自动分级；人机交互模块，用于在人工干预下完成检测参数的设定和控制检测结果的输出；

上料控制模块，用于控制所述的上料动作机构的动作，将被检珍珠从待测物件容器中以每次一粒珍珠喂送到上料输入口；下料控制模块，用于控制所述的下料动作机构的动作，将所述的送检动作机构的活动顶杆的翻板上的已检珍珠落入分级输入口；分级控制模块，用于控制所述的分级动作机构的动作，将落入到分级输入口的已检珍珠根据分级判断结果转动到相对应的珍珠分级容器上方；分级执行模块，用于控制所述的分级执行机构的动作，将在分级输出口内的已检珍珠收集到相对应的珍珠分级容器中；送检控制模块，用于控制所述的送检动作机构的动作，将被检珍珠提升到视觉检测箱中进行视觉分析；流水线控制模块，用于控制流水线上的所述的上料动作机构、所述的送检动作机构、所述的广角摄像机、所述的下料动作机构、所述的分级动作机构和所述的分级执行机构按规定的流程并行协调动作；

所述的上料动作机构，用于将被检珍珠从待测物件容器中以每次一粒珍珠喂送到上料管内；所述的上料动作机构与所述的送检动作机构有一个动作配合，当所述的送检动作机构的活动顶杆下降到某一个位置高度时，所述的上料动作机构的上料管中的被检珍珠依靠自身重力流入到送检机构的活动顶杆的翻门上，完成上料的动作；

所述的送检动作机构，用于将被检珍珠提升到视觉检测箱中进行视觉分析；所述的送检动作机构主要由活动顶杆、翻门、转动齿轮和步进电机所构成，活动顶杆内部中空，当翻门打开时，在翻门上的珍珠将沿顶杆内孔落下；活动顶杆的外侧配置有齿条，齿条与转动齿轮相啮合，步进电机带动转动齿轮正反转动，控制转动齿轮正反方向的转动就能控制活动顶杆的上下运动；当活动顶杆运动到上位极限状态时，活动顶杆将被测珍珠提升到检测箱中进行检测，如附图4所示；当活动顶杆运动到下位极限状态时，这时活动顶杆对上料管出口处不发生遮挡，上料管的珍珠依靠自身的重量流入到活动顶杆的翻门上，如附图6所示；活动顶杆的上部和翻门采用黑色无镜面反射的金属材料制成；

所述的下料动作机构，用于将所述的送检动作机构的活动顶杆的翻板上的已检珍珠落入分级输入口；下料动作机构安置在所述的送检动作机构的活动顶杆内，由翻门、弹簧铰链和牵引式电磁铁所构成，翻门通过弹簧铰链固定在活动顶杆上内侧；牵引式电磁铁不通电时弹簧铰链的弹簧力使得翻门处于闭合状态，当牵引式电磁铁通电时克服弹簧铰链中的弹簧力使得翻门打开，使得安置在活动顶杆的翻门上的珍珠依靠其本身重力下落到活动顶杆的内孔中，流入活动顶杆内孔中的珍珠接着流入到分级输入口中，如附图5所示；

所述的分级动作机构，用于将分级输入口对准活动顶杆的内孔等待流入活动顶杆内孔中的珍珠接着流入到分级输入口中和将落入到分级输出口内的已检珍珠根据分级判断结果转动到相对应的珍珠分级容器上方；主要由转动盘和步进电机构成，转盘的上面开有一个分级输入口，转盘的下面开有一个分级输出口，分级输入口和分级输出口是连通的，分级输出口下面配置了一根分级输出导管，分级输出口与分级输出导管之间配置有所述的分级执行机构，步进电机驱动转动盘的转动；

所述的分级执行机构，用于将分级输出口内的珍珠经分级输出导管流入到相对应的珍珠分级容器中，由翻门、弹簧铰链和牵引式电磁铁所构成，翻门通过弹簧铰链固定在分级输出口；牵引式电磁铁不通电时弹簧铰链的弹簧力使得翻门处于闭合状态，当牵引式电磁铁通电时克服弹簧铰链中的弹簧力使得翻门打开，使得在分级输出口的已检珍珠依靠其本身重力下落到沿输出导管流入到相对应的珍珠分级容器中；

流水线控制模块，用于控制所述的上料动作机构、所述的送检动作机构、所述的下料动作机构、所述的分级动作机构和所述的分级执行机构之间的协调顺序动作；下面以附图7所示的动作顺序说明5种动作之间的时序关系，首先是送检动作机构的活动顶杆上下运动，送检动作机构的活动顶杆从上极限位运动到下极限位的时间为T1，从下极限位运动到上极限位的时间为T2，本发明中T1＝T2；当送检动作机构的活动顶杆从上极限位开始运动时刻触发图像抓拍机构进行被检珍珠图像的抓拍，然后进行图像分析、检测和分类识别；经过时间T11触发下料动作机构的动作，使得安置在活动顶杆的翻门上的珍珠依靠其本身重力下落到活动顶杆的内孔中，流入活动顶杆内孔中的珍珠接着流入到分级输入口中；经过时间T12根据分级判断结果触发分级动作机构的转动，使得分级输入口对准相对应的分级收集容器的转动，因此，在T12时间内必须完成对被测珍珠的图像分析、检测和分类识别处理；经过时间T13上料管的珍珠依靠自身的重量流入到送检动作机构的活动顶杆的翻门上；活动顶杆到达下极限位后改变运动方向，向上运动，经过时间T21后触发分级执行机构的电磁开关动作，使得已检珍珠流入到相对应的珍珠分级容器中；经过时间T22后触发分级动作机构的转动，使得分级输入口对准活动顶杆的转动，等待下一次被检珍珠的落下；经过时间T23后触发上料动作机构的送检准备动作，将一粒珍珠送入上料管内；活动顶杆到达上极限位后改变运动方向，向下运动，以此往复循环，每循环一次完成一粒珍珠的分类检测；

所述的图像处理模块，用于从一幅图像中分割出9幅不同视角的珍珠图像和将9幅不同视角的图像背景中分割出珍珠图像，并根据知识库中保存的传感器的标定结果对9幅不同视角的珍珠图像进行透视投影转换处理，得到9幅不同视角的分割后无畸变的珍珠图像；

所述的形状大小识别模块，用于根据国家标准对被检珍珠进行大小和形状的识别；国家标准中将珍珠的外形分为正圆、圆、近圆、椭圆、扁平和异形6种类型，相关的评价标准如表1所示；人工挑选珍珠时一般是从最能反映其形状的一面来观察它的外形进行分选；在基于机器视觉的识别中，我们就把这个最能反应其形状的称为珍珠的特征面，通过特征面的识别，对珍珠按形状进行分类；因此，首先是要确定特征面，由于本发明中采用了一种以物为中心的全景成像技术，一次成像过程中有9个不同视角的珍珠图像，分别对9个不同视角获得的珍珠图像进行处理来确定那个面作为特征面；

针对一粒珍珠所拍摄的9幅图像中，若存在尖头这一特征形状等，则判别为尖头；若含有平头这一特征形状，则判别为平头；若仅存在正圆、圆、近圆、椭圆等，则按照椭圆、近圆、圆、正圆的优先级顺序进行判别归类，最终实现珍珠形状的判别分类；

根据上述处理中提取的珍珠图像进行边缘化处理，提取珍珠边缘：计算并得到目标边缘的形心，以便后续的极坐标变换；

傅里叶变换与傅里叶反变换对为我们提供了一种描述函数及其各次谐波方法，利用这一特性，可以对珍珠的边缘进行傅里叶变换，用傅立叶级数的系数来对珍珠的形状进行描述；本发明中首先将珍珠轮廓图映射到极坐标系中，并求半径序列r(k)，{k＝1,2,…,360}，由于珍珠的大小不一，使得傅里叶变换得到F(h)不具有可比性；因此，接着需要将其归一化半径为l的标准圆，归一化公式如公式（1）所示，

r_q(k)＝r(k)/r_max    （1）

式中，r_q(k)为归一化的半径，r(k)为半径序列，r_max为最大的半径；

归一化后的半径，珍珠无论其大小都可以进行比较，然后用公式（2）对归一化后的半径r_q(k)做离散傅里叶变换，

$F\left(h\right)=\underset{k=1}{\overset{n}{\mathrm{\Σ}}}{r}_q\left(k\right)e^{-j2\mathrm{\πkh}/n}h=\mathrm{0,1,2},...---\left(2\right)$

式中，r_q(k)为归一化的半径，F(h)为归一化的半径r_q(k)的傅里叶变换；

由于F(h)是对称的，因此只要计算其前n／2个值即可；另一方面，实验发现珍珠的轮廓信息大都集中在前8个F(h)，舍弃后续的F(h)对轮廓线信息损失很小；为了提高计算速度，本发明中采用了前8个F(h)来代表珍珠形状的主要信息，对珍珠形状进行模式识别；

本发明中，对正圆、圆、近圆、椭圆、平头和尖头的6种不同形状类型的各10个珍珠样品拍摄图像并经过一系列图像预处理，由计算机分别计算每种样品的前8个F(h)值，再取各自的平均值作为珍珠样品的特征参数，这些特征参数保存在计算机的存储单元中；

为了实现珍珠形状进行模糊分类，对于一粒待形状分类的珍珠，其F(h)隶属于种类W的F(h)的隶属度μ_Wn用公式（3）进行计算，

${\mathrm{\μ}}_{\mathrm{Wn}}=\frac{1}{1+|F\left(h\right)-\stackrel{\‾}{F}\left(h\right)|\stackrel{\‾}{F}\left(h\right)}---\left(3\right)$

式中，F(h)为每种样品的归一化的半径r_q(k)的傅里叶变换值，为待形状分类的珍珠的归一化的半径r_q(k)的傅里叶变换值，μ_Wn为待形状分类的珍珠隶属于某种类W的F(h)的隶属度计算值；

根据公式（3）可得该珍珠的隶属度矩阵μ，由公式（4）进行计算，

阶权重系数向量α用公式（5）进行计算，

α=[α₀,α₁,α₂,α₃,α₄,α₅,α₆,α₇]^T,且 $\underset{k=0}{\overset{7}{\mathrm{\Σ}}}{\mathrm{\α}}_k=1---\left(5\right)$

于是，被检珍珠隶属于种类W的隶属度向量用公式（6）计算，

μ_W=μ·α=[μ₁,μ₂,μ₃,μ₄,μ₅,μ₆]^T    （6）

识别中，μ_W中的最大值分量对应的下标就是该珍珠的形状识别分类结果；

对于1粒被检珍珠共有9幅从不同视角拍摄的图像，每幅图像根据形状识别分类结果得到正圆、圆、近圆、椭圆、平头和尖头的6种不同形状类型中的一种判断结果；下面要进行最终的形状识别分类判断，在9幅从不同视角拍摄的图像的状识别分类结果中若存在尖头这一特征形状等，则被检珍珠的最终形状判别结果为尖头；若含有平头这一特征形状，则判别为平头；若仅存在正圆、圆、近圆、椭圆等，则按照椭圆、近圆、圆、正圆的优先级顺序进行判别归类，最终实现被检珍珠形状的判别分类；

对于被检珍珠大小的分类识别是建立在被检珍珠形状的判别分类基础上的，根据国家标准，正圆、圆、近圆形、椭圆珍珠以最小直径来表示，其他形状养殖珍珠以最大尺寸乘最小尺寸表示；在被检珍珠形状的判别分类中得到被检珍珠的形状类型后，根据公式（1）中所使用的半径序列r(k)和最大的半径r_max数据，得到被检珍珠的最小直径R_min和最大直径R_max，如果被检珍珠形状的判别分类中得到被检珍珠的形状类型为正圆、圆、近圆形、椭圆中的任何一种就以最小直径R_min作为被检珍珠大小的分类识别结果；如果被检珍珠形状的判别分类中得到被检珍珠的形状类型为平头、尖头中的任何一种就以最小直径R_min乘以最大直径R_max作为被检珍珠大小的分类识别结果。

为了一次性、全方位获取被检珍珠整个球体表面的图像，本发明设计了由1个广角摄像机和8个平面镜构成的单目多视角的立体视觉装置，通过一个广角摄像机的一次成像来获取从9个视角拍摄的珍珠表面图像，实现一种以珍珠为观察中心的全方位视觉装置；具体做法是：在广角摄像机前面放置由8枚平面镜构成的对称斗型腔，镜面朝向腔体内侧；物体光线经过8枚平面镜反射后，投影到摄像机图像平面的不同区域，在摄像机图像平面上投影多个影像，生成单目多视角立体图像；该图像等价于不同视角的多幅图像，等价于一个单目多视角的立体视觉装置，该装置通过一次成像就能从9个不同视角拍摄的珍珠表面图像，为全方位检测被测珍珠的大小、形状等外观品质指标提供一种立体视觉装置；

附图2为单目多视角立体视觉系统的原理图；它主要由摄像单元、广角镜头和2个平面镜斗型腔组成；每个斗型腔由尺寸相同的等腰梯形平面镜组成，上斗型腔呈上小下大，下斗型腔呈上大下小，上下斗型腔的大口径处尺寸相同，在上下斗型腔的大口径处将上下斗型腔合并为一整体，镜面朝向腔体内侧，且腔体的中轴线重合于摄像机的主光轴；广角镜头由上斗型腔小口端探入腔体内，镜头入射光线由上斗型腔端口的直射光线和镜面反射光线组成；通过腔体的直射光线投影在摄像机投影面的中央区域，被测珍珠通过活动支架被安置到中央区域，镜面反射光线投射到摄像机投影面的周边区域，且8个镜面的投影区域各不相同；因此，该装置拍摄的图像包含被测珍珠的多个影像，且这些影像来自于9不同透视投影点，如附图3所示；本发明中一共有9个不同透视投影点，在摄像机中直接成像的为真实摄像机的透视投影点，所拍摄的图像如附图3中的视角0；其他8个均为由摄像机和反射镜面所成像的为虚拟摄像机的透视投影点，所拍摄的图像分别为附图3中的视角1~视角8，由于都是在同一个摄像机中成像，因此该装置具有严格一致的内部参数和颜色系统；

单目多视角立体图像提取装置中的摄像机和镜头使用前需要进行标定，为了增加摄像机的视角，选用了360°×180°的鱼眼广角镜头；因此，内部参数的标定包括鱼眼广角镜头投影模型参数、镜头半径方向和切线方向畸变参数、相机的焦点距离和图像主点位置参数；

在常规情况下鱼眼镜头的标定，要使用多幅图像实现全部模型参数的精确标定；由于本发明采用了单目多视角摄像装置使用平面镜反射光线，拍摄的一幅多视点投影图像上包含标定板的多个影像；由平面镜反射原理可知，这些标定板影像等价于同一标定板在不同位置上分别投影到相机投影平面上所获得的多幅标定板图像；所以，使用一幅标定板的多视点投影图像标定相机内部参数，等价于使用多幅标定板图像的标定操作，图像中包含标定板的9个独立影像，能够获得高精度的标定结果；鱼眼镜头畸变很大，边缘区域尤为严重，使用该图像对摄像机和鱼眼镜头进行了标定，使用标定结果对图像进行了畸变矫正，并进行透视投影变换，鱼眼镜头畸变导致的歪扭曲线边已经被矫正为直线，得到了标准的透视投影图像；关于广角摄像机的标定、鱼眼镜头的畸变矫正以及透视投影变换方法在数字图像处理和计算机视觉的相关书籍中均有介绍；

要实现珍珠实时自动检测和分级，需要对自动检测和分级过程中所必须完成动作的机构进行设计，其中包括：用于将被检珍珠自动送入到检测装置的活动顶杆上的上料动作机构，上料动作机构要保证每次只送一颗珍珠并且珍珠的位置正好落在活动顶杆上；用于将落在活动顶杆的翻板上被检珍珠提升到检测箱中进行视觉分析、分类和分级判断的送检动作机构；用于将活动顶杆上已检珍珠落入分级输入口的下料动作机构；用于对翻板上被检珍珠行视觉分析、分类和分级判断的微处理器；用于对翻板上已检珍珠根据分级判断结果将已检珍珠收集到相对应的珍珠分级容器中的分级执行机构；

本发明中，上料动作机构与送检动作机构有一个动作配合，当送检动作机构的活动顶杆下降到某一个位置高度时，上料动作机构的上料管中的被检珍珠依靠自身重力流入到送检动作机构的活动顶杆的翻门上，此时，送检动作机构的活动顶杆就迅速改变运动方向将流入到送检动作机构的活动顶杆的翻板上提升到检测箱中进行视觉分析；活动顶杆靠近转动齿轮一侧配置有转动齿轮相啮合的齿条，转动齿轮正反方向的转动使得活动顶杆的上下运动，控制转动齿轮正反方向的转动就能控制活动顶杆的上下运动，当活动顶杆运动到上位极限状态时，活动顶杆将被测珍珠提升到检测箱中进行检测，如附图4所示；当活动顶杆运动到下位极限状态时，这时活动顶杆对上料管出口处不发生遮挡，上料管的珍珠依靠自身的重量流入到活动顶杆的翻门上，如附图6所示；下料动作机构由翻门、弹簧铰链和牵引式电磁铁所构成，当牵引式电磁铁通电时克服弹簧铰链中的弹簧力使得翻门打开，使得安置在活动顶杆的翻门上的珍珠依靠其本身重力下落到活动顶杆的内孔中，流入活动顶杆内孔中的珍珠接着流入到分级输入口中，如附图5所示；在分级输入口中的珍珠根据当牵引式电磁铁失电时弹簧铰链中的弹簧力使得翻门关闭，以保证在翻门上的珍珠不落入到活动顶杆的内孔中；上料动作机构保证每次一粒珍珠进入上料管中，以保证落入到活动顶杆的翻门上只有一粒珍珠；

进一步，将上述几个机构的动作关联从上料机构开始取出一粒被测珍珠到最后分级执行机构将已检珍珠送入珍珠分级容器中实现实时自动检测和分级的流程进行整体说明；

Step1）上料动作机构以每一次动作将一粒被测珍珠送入上料管，当送检动作机构的活动顶杆运动到下位极限状态时，上料管的珍珠依靠自身的重量流入到送检动作机构的活动顶杆的翻门上，同时上料动作机构动作准备好一粒被测珍珠送入上料管；

Step2）送检动作机构的活动顶杆运动到上位极限状态时，活动顶杆将被测珍珠提升到检测箱中进行视觉检测，从9个不同视角拍摄被测珍珠的图像；

Step3）抓拍了被测珍珠的图像后启动下料动作机构，使得安置在活动顶杆的翻门上的珍珠依靠其本身重力下落到活动顶杆的内孔中，流入活动顶杆内孔中的珍珠接着流入到分级输入口中；

Step4）对分级输入口中的已检珍珠根据分级判断结果控制分级动作机构转动到相对应的珍珠分级容器的上方，接着控制分级执行机构的电磁开关使得已检珍珠流入到相对应的珍珠分级容器中；

Step5）返回到Step1）；

综上所述，送检动作机构的活动顶杆运动序列决定了其他机构的相关动作，送检动作机构的活动顶杆从下位极限向上运动时与上料机构的配合，该动作期间驱动分级动作机构的步进电机的转动动作将分级输出口对准已检珍珠等级所对应的珍珠分级容器；送检动作机构的活动顶杆运动到上位极限状态时与抓拍单元抓拍动作的配合，该动作期间驱动分级执行机构的电磁开关使得已检珍珠流入到相对应的珍珠分级容器中；送检动作机构的活动顶杆从上位极限状态向下运动时与下料机构的配合，该动作期间驱动分级动作机构的步进电机的转动动作将分级输入口对准活动顶杆的内孔；动作序列如附图7所示；

首先是送检动作机构的活动顶杆上下运动，送检动作机构的活动顶杆从上极限位运动到下极限位的时间为T1，从下极限位运动到上极限位的时间为T2，本发明中T1＝T2；当送检动作机构的活动顶杆从上极限位开始运动时刻触发图像抓拍机构进行被检珍珠图像的抓拍，然后进行图像分析、检测和分类识别；经过时间T11触发下料动作机构的动作，使得安置在活动顶杆的翻门上的珍珠依靠其本身重力下落到活动顶杆的内孔中，流入活动顶杆内孔中的珍珠接着流入到分级输入口中；经过时间T12根据分级判断结果触发分级动作机构的转动，使得分级输入口对准相对应的分级收集容器的转动，因此，在T12时间内必须完成对被测珍珠的图像分析、检测和分类识别处理；经过时间T13上料管的珍珠依靠自身的重量流入到送检动作机构的活动顶杆的翻门上；活动顶杆到达下极限位后改变运动方向，向上运动，经过时间T21后触发分级执行机构的电磁开关动作，使得已检珍珠流入到相对应的珍珠分级容器中；经过时间T22后触发分级动作机构的转动，使得分级输入口对准活动顶杆的转动，等待下一次被检珍珠的落下；经过时间T23后触发上料动作机构的送检准备动作，将一粒珍珠送入上料管内；活动顶杆到达上极限位后改变运动方向，向下运动，以此往复循环，每循环一次完成一粒珍珠的分类检测；

根据GB/T 18781-2008珍珠分级国家标准，珍珠分级是根据珍珠的类别（海水、淡水），分别从颜色、大小、形状、光泽、光洁度、珠层厚度（有核珍珠）等6个方面的质量因素进行评价，其中颜色、光泽、光洁度是根据国家标准样品对比给出级别；本发明依据GB/T 18781-2008珍珠分级国家标准中的大小、形状质量指标对被检珍珠进行分级；

1）珍珠的大小：正圆、圆、近圆形珍珠以最小直径来表示，其他形状养殖珍珠以最大尺寸乘最小尺寸表示，批量散珠可以用珍珠筛的孔径范围表示；测量珍珠大小，根据计算可得出珍珠圆度是正圆、圆或是近圆；

2）珍珠的形状：珍珠形状级别主要依据珍珠的直径差百分比来进行判定的，海水珍珠与淡水珍珠指标有不同，共分为6个等级，用表1进行归纳；

表1珍珠的形状级别

照明方式的设计是机器视觉照明系统中最为重要的环节，本发明的照明方式选择为单点照明方式，照明光源采用白色LED，LED的位置和镜头齐高，两者夹角小于10度，通过8枚平面镜构成的对称斗型腔的反射使得照射到珍珠表面的光均匀，无阴影、无反光、亮度大，满足不同检测指标的照明要求；

珍珠在检测箱中进行检测时，光照条件、图像背景的灰度值和珍珠的反射光强度均恒定在一定区域内，本发明采用了全局Ostu算法来进行图像分割，由于珍珠区域最外面有一层光晕，利用腐蚀算法去除最外层的光晕；

人工挑选珍珠时一般是从最能反映其形状的一面来观察它的外形进行分选；在基于机器视觉的识别中，我们就把这个最能反应其形状的称为珍珠的特征面，通过特征面的识别，对珍珠按形状进行分类；因此，首先是要确定特征面，由于本发明中采用了一种以物为中心的全景成像技术，一次成像过程中有9个不同视角的珍珠图像，分别对9个不同视角获得的珍珠图像进行处理来确定那个面作为特征面；

针对一粒珍珠所拍摄的9幅图像中，若存在尖头这一特征形状等，则判别为尖头；若含有平头这一特征形状，则判别为平头；若仅存在正圆、圆、近圆、椭圆等，则按照椭圆、近圆、圆、正圆的优先级顺序进行判别归类，最终实现珍珠形状的判别分类；

根据上述处理中提取的珍珠图像进行边缘化处理，提取珍珠边缘：计算并得到目标边缘的形心，以便后续的极坐标变换。

Claims (7)

1.一种基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，其特征在于：包括用于对珍珠进行自动检测和分类的流水线，用于一次性、全方位获取被检珍珠整个球体表面图像的单目多视角机器视觉装置和用于对被检珍珠图像进行图像处理、检测、识别、分类以及协调控制流水线上各动作机构的协调动作的微处理器，所述流水线包括用于将被检珍珠从待测物件容器中以每次一粒珍珠喂送到上料输入口的上料动作机构，用于将被检珍珠提升到单目多视角机器视觉装置中进行视觉分析的送检动作机构，用于将送检动作机构的活动顶杆的翻板上的已检珍珠落入分级输入口的下料动作机构，用于将落入到分级输入口的已检珍珠根据分级判断结果控制分级输出口转动到相对应的珍珠分级容器上方的分级动作机构和用于将在分级输出口内的已检珍珠收集到相对应的珍珠分级容器中的分级执行机构；所述的微处理器还包括：

图像读取模块，用于从所述的单目多视角机器视觉装置读取包含有从9个不同视角拍摄的被检珍珠的图像；图像处理模块，用于从一幅图像中分割出9幅不同视角的珍珠图像和将9幅不同视角的图像背景中分割出珍珠图像，并根据知识库中保存的传感器的标定结果对9幅不同视角的珍珠图像进行透视投影转换处理；传感器标定模块，用于对广角摄像机的标定、鱼眼镜头的畸变矫正以及透视投影变换，将标定广角摄像机的内部参数以及透视投影变换的参数存储到知识库中；形状大小识别模块，用于根据国家标准GB/T18781-2008对被检珍珠进行大小和形状的识别；结果输出模块，用于将被检珍珠的大小和形状的检测结果进行汇总，一方面根据国家检测标准自动生成一份检测结果表，另一方面，将检测结果的信息发送给流水线控制模块，让流水线控制模块控制相应的分级控制模块自动完成被检珍珠的自动分级；人机交互模块，用于在人工干预下完成检测参数的设定和控制检测结果的输出；

所述的单目多视角机器视觉装置由1个广角摄像机和8个平面镜所构成的单目多视角立体视觉装置，通过一个广角摄像机的一次成像来获取从9个视角拍摄的珍珠表面图像，所述的单目多视角机器视觉装置由广角摄像机和2个平面镜斗型腔组成；每个斗型腔由尺寸相同的等腰梯形平面镜组成，上斗型腔呈上小下大，下斗型腔呈上大下小，上下斗型腔的大口径处尺寸相同，在上下斗型腔的大口径处将上下斗型腔合并为一整体，镜面朝向腔体内侧，且腔体的中轴线重合于摄像机的主光轴；广角镜头由上斗型腔小口端探入腔体内，镜头入射光线由上斗型腔端口的直射光线和镜面反射光线组成；通过腔体的直射光线投影在摄像机投影面的中央区域，被测珍珠通过活动支架被安置到中央区域，镜面反射光线投射到摄像机投影面的周边区域，且8个镜面的投影区域各不相同；因此，该装置拍摄的图像包含被测珍珠的多个影像，且这些影像来自于9不同透视投影点；所述的单目多视角机器视觉装置一共有9个不同透视投影点，在摄像机中直接成像的为真实摄像机的透视投影点；其他8个均为由摄像机和反射镜面所成像的为虚拟摄像机的透视投影点，所述的单目多视角立体视觉装置具有严格一致的内部参数和颜色系统。

2.如权利要求1所述的基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，其特征在于：所述的图像处理模块中，分割出珍珠图像后，根据知识库中保存的传感器的标定结果对9幅不同视角的珍珠图像进行透视投影转换处理，得到9幅不同视角的分割后无畸变的珍珠图像。

3.如权利要求1所述的基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，其特征在于：所述的上料动作机构与所述的送检动作机构有一个动作配合，当所述的送检动作机构的活动顶杆下降到某一个位置高度时，所述的上料动作机构的上料管中的被检珍珠依靠自身重力流入到送检动作机构的活动顶杆的翻门上，完成上料的动作。

4.如权利要求1所述的基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，其特征在于：所述的送检动作机构由活动顶杆、翻门、转动齿轮和步进电机所构成，活动顶杆内部中空，当翻门打开时，在翻门上的珍珠将沿顶杆内孔落下；活动顶杆的外侧配置有齿条，齿条与转动齿轮相啮合，步进电机带动转动齿轮正反转动，控制转动齿轮正反方向的转动就能控制活动顶杆的上下运动；当活动顶杆运动到上位极限状态时，活动顶杆将被测珍珠提升到所述的单目多视角机器视觉装置中的中央区域进行检测；当活动顶杆运动到下位极限状态时，这时活动顶杆对上料管出口处不发生遮挡，上料管的珍珠依靠自身的重量流入到活动顶杆的翻门上；活动顶杆的上部和翻门采用黑色无镜面反射的金属材料制成。

5.如权利要求1所述的基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，其特征在于：所述的下料动作机构安置在所述的送检动作机构的活动顶杆内，由翻门、弹簧铰链和牵引式电磁铁所构成，翻门通过弹簧铰链固定在活动顶杆上内侧；牵引式电磁铁不通电时弹簧铰链的弹簧力使得翻门处于闭合状态，当牵引式电磁铁通电时克服弹簧铰链中的弹簧力使得翻门打开，使得安置在活动顶杆的翻门上的珍珠依靠其本身重力下落到活动顶杆的内孔中，流入活动顶杆内孔中的珍珠接着流入到分级输入口中。

6.如权利要求1所述的基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，其特征在于：所述的分级动作机构由转动盘和步进电机构成，转盘的上面开有一个分级输入口，转盘的下面开有一个分级输出口，分级输入口和分级输出口是连通的，分级输出口下面配置了一根分级输出导管，分级输出口与分级输出导管之间配置有所述的分级执行机构，步进电机驱动转动盘的转动；

所述的分级执行机构由翻门、弹簧铰链和牵引式电磁铁所构成，翻门通过弹簧铰链固定在分级输出口；牵引式电磁铁不通电时弹簧铰链的弹簧力使得翻门处于闭合状态，当牵引式电磁铁通电时克服弹簧铰链中的弹簧力使得翻门打开，使得在分级输出口的已检珍珠依靠其本身重力下落到沿输出导管流入到相对应的珍珠分级容器中。

7.如权利要求1所述的基于单目多视角机器视觉的珍珠大小形状在线自动分级装置，其特征在于：所述的流水线控制模块，用于控制所述的上料动作机构、所述的送检动作机构、所述的下料动作机构、所述的分级动作机构和所述的分级执行机构之间的协调顺序动作；首先是送检动作机构的活动顶杆上下运动，送检动作机构的活动顶杆从上极限位运动到下极限位的时间为T1，从下极限位运动到上极限位的时间为T2，这里T1＝T2；当送检动作机构的活动顶杆从上极限位开始运动时刻触发对被检珍珠图像的抓拍，然后进行图像分析、检测和分类识别；经过时间T11触发下料动作机构的动作，使得安置在活动顶杆的翻门上的珍珠依靠其本身重力下落到活动顶杆的内孔中，流入活动顶杆内孔中的珍珠接着流入到分级输入口中；经过时间T12根据分级判断结果触发分级动作机构的转动，使得分级输入口对准相对应的分级收集容器的转动，因此，在T12时间内必须完成对被测珍珠的图像分析、检测和分类识别处理；经过时间T13上料管的珍珠依靠自身的重量流入到送检动作机构的活动顶杆的翻门上；活动顶杆到达下极限位后改变运动方向，向上运动，经过时间T21后触发分级执行机构的电磁开关动作，使得已检珍珠流入到相对应的珍珠分级容器中；经过时间T22后触发分级动作机构的转动，使得分级输入口对准活动顶杆的转动，等待下一次被检珍珠的落下；经过时间T23后触发上料动作机构的送检准备动作，将一粒珍珠送入上料管内；活动顶杆到达上极限位后改变运动方向，向下运动，以此往复循环，每循环一次完成一粒珍珠的分类检测。