CN106023723A - 一种教育玩具套件及其凸面镜成像校正方法 - Google Patents

Abstract

本发明涉及计算机视觉检测处理技术领域，提供了一种教育玩具套件及其凸面镜成像校正方法，包括支架、头盔探测器和底板，支架安装于底板上，头盔探测器安装于支架上；头盔探测器还包括：本体、第四凹槽、2个扇形块和凸面镜，并且第四凹槽位于本体内，用于夹持不同型号的平板电脑，在第四凹槽夹持平板电脑屏幕的端点处设置有凸面镜，凸面镜的另一端安装于头盔探测器边缘上，凸面镜与水平面夹角成锐角，第四凹槽夹持平板电脑屏幕的端点高于平板电脑的摄像头位置，2个扇形块位于凸面镜的2个边缘上，用于固定凸面镜和夹持平板电脑。本发明通过凸面镜增大图像的采集范围，再对凸面镜成像进行校正，得到准确的图像分析结果，增加图像采集速度。

Description

一种教育玩具套件及其凸面镜成像校正方法

技术领域

本发明涉及计算机视觉检测处理技术领域，特别涉及一种教育玩具套件及其凸面镜成像校正方法。

背景技术

现在平板电脑上有许多有趣的幼教游戏应用程序或者儿童游戏，但往往只是让小朋友在屏幕上指指画画，互动性欠缺，长时间看着屏幕容易对眼睛造成伤害；而当下一些互动性强的传统性游戏玩具已经脱离了时代的发展，形式上无法满足孩子学习、玩耍的需求，也不便于孩子和家长的互动沟通。

为了解决上述问题，计算机视觉识别处理技术领域成功的开发了一种教育玩具套件，包括：支架、头盔探测器和底板，并且支架安装于底板上，头盔探测器安装于支架上；底板上方设置有第一凹槽；支架底部具有凸起，凸起安装在第一凹槽内，顶部具有第二凹槽和第三凹槽，第二凹槽用于放置平板电脑；头盔探测器安装于第三凹槽内，头盔凹槽内安装有反射镜。

在上述的玩具套件中采用的是反射镜，但是反射镜的采集范围相对较窄，不能满足采集较大视场范围内图像的要求。

凸面镜应用较为广泛，最为常见的就是用于倒车镜与转弯镜，它们都利用了凸面镜对光发散的原理，扩大视野，从而可以具有更广阔的视野范围。

但是凸面镜成像规律复杂：凸面镜的曲率大小决定成像畸变的程度，通常来说曲率越大成像畸变越严重；凸面镜所成像的大小受物距的影响，物距越远，成像越小。另外由于凸面镜本身加工工艺的问题，凸面镜镜面本身可能存在局部的凹凸形变等问题会导致成像发生形变。总之，如想直接利用凸面镜图像进行精确的测量、监控是比较困难的。

因此，计算机视觉检测处理技术领域急需一种教育玩具套件及其凸面镜成像校正方法，通过凸面镜增大图像的采集范围，再对凸面镜成像进行校正，得到准确的图像分析结果，增加图像采集速度。

发明内容

本发明为了解决上述问题，提供了一种教育玩具套件及其凸面镜成像校正方法，技术方案如下：

一种教育玩具套件，包括支架、头盔探测器和底板，并且支架安装于底板上，头盔探测器安装于支架上，底板上方设置有第一凹槽；支架底部具有凸起，凸起安装在第一凹槽内，顶部具有第二凹槽和第三凹槽，第二凹槽用于放置平板电脑；头盔探测器安装于第三凹槽内；

头盔探测器还包括：本体、第四凹槽、2个扇形块和凸面镜，并且第四凹槽位于本体内，用于夹持不同型号的平板电脑，在第四凹槽夹持平板电脑屏幕的端点处设置有凸面镜，凸面镜的另一端安装于头盔探测器边缘上，凸面镜与水平面夹角成锐角，第四凹槽夹持平板电脑屏幕的端点高于平板电脑的摄像头位置，2个扇形块位于凸面镜的2个边缘上，用于固定凸面镜和夹持平板电脑。

一种教育玩具套件中凸面镜成像校正方法，包括如下步骤：

步骤一，把棋盘格标定板摆放于固定位置；

步骤二，通过刚性连接装置固定安装好平面镜与相机，通过相机采集棋盘格标定板在平面镜中的图像；

步骤三，保持相机、棋盘格标定板、刚体连接装置不动，将步骤二中的平面镜替换成凸面镜，通过刚性连接装置固定安装好凸面镜与相机，通过相机采集棋盘格标定板在凸面镜中的图像；

步骤四，记录平面镜图像和凸面镜图像中棋盘格的各角点位置，并计算出分别位于平面镜图像和凸面镜图像中的角点位置之间的映射关系；

角点位置是指角点在图像中的坐标位置；

步骤五，利用步骤四计算得到的角点位置之间的映射关系，对凸面镜图像全图做变换，即可得到经过校正的凸面镜图像。

优选的，在上述的一种凸面镜成像校正方法中，还包括：步骤六，将步骤五中的焦点位置之间的映射关系存储到平板电脑中，对头盔探测器采集到的图像进行校正，得到经过校正的凸面镜图像。

优选的，在上述的一种凸面镜成像校正方法中，步骤四具体的步骤为：

a）通过手工或者图像处理方法自动找到棋盘格在平面镜和凸面镜中各个对应角点的坐标；

b）通过局部的对应角点，得出局部区域的几何对应关系，即为平面镜图像和凸面镜图像中的角点位置之间的映射关系；

设定PaPbPcPdPa为凸面镜图像中的不规则四边形，Pa、Pb、Pc和Pd是该四边形的顶点；QaQbQcQdQa为平面镜图像中的矩形，Qa、Qb、Qc和Qd是该四边形的顶点；假定两个区域内对应点之间存在平面摄影变换的关系，则计算两个四边形区域PaPbPcPdPa 和QaQbQcQdQa 内的点与点之间的几何对应关系，具体公式如下：

其中，矩阵，是棋盘格标定板经凸面镜成像后四个角点所围成的PaPbPcPdPa区域内任意一点P的坐标，则是棋盘格标定板经平面镜成像后四个角点所围成的QaQbQcQdQa区域内任意一点Q的坐标，写成齐次坐标的形式；

根据不共线的四点必然能解得唯一H矩阵的结论，4组对应点对均满足公式，可以得到8个方程，进而求解得到H矩阵，即为平面镜图像和凸面镜图像中的角点位置之间的映射关系，具体如下：

……

其中，Q _ax 、Q _bx 、Q _cx 、Q _dx 分别表示Qa、Qb、Qc、Qd点的x坐标，Q _ay 、Q _by 、Q _cy 、Q _dy 分别表示Qa、Qb、Qc、Qd点的y坐标，P _ax 、P _bx 、P _cx 、P _dx 分别表示Pa、Pb、Pc、Pd点的x坐标，P _ay 、P _by 、P _cy 、P _dy 分别表示Pa、Pb、Pc、Pd点的y坐标，h ₁₁、h ₁₂、h ₁₃、h ₂₁、h ₂₂、h ₂₃、h ₃₁、h ₃₂分别表示矩阵H中的各项变量；

优选的，在上述的一种凸面镜成像校正方法中，步骤b）中计算局部区域的几何对应关系的方法为数据插值，仿射变换，多项式拟合。

优选的，在上述的一种凸面镜成像校正方法中，步骤五具体的步骤为：

I）应用矩阵H，求得校正后图像中各点在凸面镜图像中对应点的坐标；

应用公式求得区域QaQbQcQdQa内各图像坐标点对应在区域PaPbPcPdPa内任意点P的坐标；

II）使用图像插值法得到图像在P点的像素值；

其中，P点的坐标通常都是非整数，所以要进一步进行插值计算得出非整数图像坐标点的像素值；图像插值的方法有很多种，包括最近邻插值、样条插值、双线性插值、三次线性插值。

优选的，在上述的一种凸面镜成像校正方法中，步骤五中采用双线性插值方法得到的图像在P点的像素值，即校正后图像中Q点的像素值，具体如下：

假设已知函数f在Qa(x1，y1)、Qb(x1，y2)，Qc(x2，y1) 以及Qd(x2，y2) 四个点的像素值，求f（x，y）在点P(x，y)位置处的像素值；

首先在x方向进行线性插值，得到与P点具有相同x坐标的点R1和R2点的像素值，然后在y方向进行线性插值，即可得到P点的像素值，具体如下：

其中，f（R1）、f（R2）、f（Qa）、f（Qb）、f（Qc）、f（Qd）分别表示点R1、R2、Qa、Qb、Qc、Qd的像素值。

本发明的有益效果：

1、通过凸面镜增大图像的采集范围，因为凸面镜本身的特性能对大视野范围内的场景进行监控和测量；再对凸面镜成像进行校正，得到准确的图像分析结果，增加图像采集速度。

2、本发明凸面镜成像校正方法中用到的设备简单，由凸面镜、平面镜、相机、刚性连接装置，印刷有棋盘格标定板组成，成本低廉。

3、本发明应用范围广，受约束条件少，不需要知道相机的内外参数，也不需要知道相机相对凸面镜的位置信息即可完成成像信息的采集。

4、本发明采用密集的棋盘格网格进行校正，校正的图形达到较高的精度。

5、本发明具有稳定的校正性能，能适应不同光照条件。

附图说明

下面结合附图和具体实施方式来详细说明本发明：

图1是本发明一种教育玩具套件的结构示意图。

图2是本发明一种教育玩具套件的支架的后视图。

图3是本发明一种教育玩具套件的支架的立体图。

图4是本发明一种教育玩具套件的底板的结构示意图。

图5是本发明葡萄探索号教育玩具套件的头盔探测器的结构示意图。

图6是一种教育玩具套件中凸面镜成像校正方法的流程图。

图7是凸面镜图像中的不规则四边形PaPbPcPdPa，平面镜图像中的矩形QaQbQcQdQa的结构示意图。

其中，图1-7中的附图标记与部件名称之间的对应关系为：

支架1，凸起101，第二凹槽102，第三凹槽103，头盔探测器2，本体201，第四凹槽202，2个扇形块203，反光镜204，底板3，第一凹槽301。

具体实施方式

为了使本发明技术实现的措施、创作特征、达成目的与功效易于明白了解，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例1：

图1是本发明一种教育玩具套件的结构示意图。

图2是本发明一种教育玩具套件的支架的后视图。

图3是本发明一种教育玩具套件的支架的立体图。

图4是本发明一种教育玩具套件的底板的结构示意图。

图5是本发明葡萄探索号教育玩具套件的头盔探测器的结构示意图。

如图1-5所示，一种教育玩具套件，包括支架1、头盔探测器2和底板3，并且支架1安装于底板3上，头盔探测器2安装于支架1上；底板3，上方设置有第一凹槽301；支架1，底部具有凸起101，凸起101安装在第一凹槽301内，顶部具有第二凹槽102和第三凹槽103，第二凹槽102用于放置平板电脑；头盔探测器2，安装于第三凹槽103内；头盔探测器2还包括：本体201、第四凹槽202、2个扇形块203和凸面镜204，并且第四凹槽202位于本体201内，用于夹持不同型号的平板电脑，在第四凹槽202夹持平板电脑屏幕的端点处设置有凸面镜204，凸面镜204的另一端安装于头盔探测器2边缘上，凸面镜204与水平面夹角成锐角，第四凹槽202夹持平板电脑屏幕的端点高于平板电脑的摄像头位置，2个扇形块203位于凸面镜204的2个边缘上，用于固定凸面镜204和夹持平板电脑。

图6是一种教育玩具套件中凸面镜成像校正方法的流程图。

如图6所示，一种教育玩具套件中凸面镜成像校正方法，包括如下步骤：

一种教育玩具套件中凸面镜成像校正方法，包括如下步骤：

步骤一，把棋盘格标定板摆放于固定位置；

步骤二，通过刚性连接装置固定安装好平面镜与相机，通过相机采集棋盘格标定板在平面镜中的图像；

步骤三，保持相机、棋盘格标定板、刚体连接装置不动，将步骤二中的平面镜替换成凸面镜，通过刚性连接装置固定安装好凸面镜与相机，通过相机采集棋盘格标定板在凸面镜中的图像；

步骤四，记录平面镜图像和凸面镜图像中棋盘格的各角点位置，并计算出分别位于平面镜图像和凸面镜图像中的角点位置之间的映射关系；

角点位置是指角点在图像中的坐标位置；

a）通过手工或者图像处理方法自动找到棋盘格在平面镜和凸面镜中各个对应角点的坐标；

b）通过局部的对应角点，得出局部区域的几何对应关系，即为平面镜图像和凸面镜图像中的角点位置之间的映射关系；

图7是凸面镜图像中的不规则四边形PaPbPcPdPa，平面镜图像中的矩形QaQbQcQdQa的结构示意图。

如图7所示，

设定PaPbPcPdPa为凸面镜图像中的不规则四边形，Pa、Pb、Pc和Pd是该四边形的顶点；QaQbQcQdQa为平面镜图像中的矩形，Qa、Qb、Qc和Qd是该四边形的顶点；假定两个区域内对应点之间存在平面摄影变换的关系，则计算两个四边形区域PaPbPcPdPa 和QaQbQcQdQa 内的点与点之间的几何对应关系，具体公式如下：

其中，矩阵，是棋盘格标定板经凸面镜成像后四个角点所围成的PaPbPcPdPa区域内任意一点P的坐标，则是棋盘格标定板经平面镜成像后四个角点所围成的QaQbQcQdQa区域内任意一点Q的坐标，写成齐次坐标的形式；

根据不共线的四点必然能解得唯一H矩阵的结论，4组对应点（Pa，Qa）、（Pb，Qb）、（Pc，Qc）和（Pd，Qd）对均满足公式，可以得到8个方程，进而求解得到H矩阵，即为平面镜图像和凸面镜图像中的角点位置之间的映射关系，具体如下：

其中，Q _ax 、Q _bx 、Q _cx 、Q _dx 分别表示Qa、Qb、Qc、Qd点的x坐标，Q _ay 、Q _by 、Q _cy 、Q _dy 分别表示Qa、Qb、Qc、Qd点的y坐标，P _ax 、P _bx 、P _cx 、P _dx 分别表示Pa、Pb、Pc、Pd点的x坐标，P _ay 、P _by 、P _cy 、P _dy 分别表示Pa、Pb、Pc、Pd点的y坐标，h ₁₁、h ₁₂、h ₁₃、h ₂₁、h ₂₂、h ₂₃、h ₃₁、h ₃₂分别表示矩阵H中的各项变量；

步骤b）中计算局部区域的几何对应关系的方法为数据插值，仿射变换，多项式拟合；

步骤五，利用步骤四计算得到的角点位置之间的映射关系，对凸面镜图像全图做变换，即可得到经过校正的凸面镜图像；

I）应用矩阵H，求得校正后图像中各点在凸面镜图像中对应点的坐标；

应用公式求得区域QaQbQcQdQa内各图像坐标点对应在区域PaPbPcPdPa内任意点P的坐标；

II）使用图像插值法得到图像在P点的像素值；

其中，P点的坐标通常都是非整数，所以要进一步进行插值计算得出非整数图像坐标点的像素值；图像插值的方法有很多种，包括最近邻插值、样条插值、双线性插值、三次线性插值。

当采用双线性插值方法得到的图像在P点的像素值，即校正后图像中Q点的像素值时，具体如下：

假设已知函数f在Qa(x1，y1)、Qb(x1，y2)，Qc(x2，y1) 以及Qd(x2，y2) 四个点的像素值，求f（x，y）在点P(x，y)位置处的像素值；

首先在x方向进行线性插值，得到与P点具有相同x坐标的点R1和R2点的像素值，然后在y方向进行线性插值，即可得到P点的像素值，具体如下：

其中，f（R1）、f（R2）、f（Qa）、f（Qb）、f（Qc）、f（Qd）分别表示点R1、R2、Qa、Qb、Qc、Qd的像素值。

本实施例的一种教育玩具套件中凸面镜成像校正方法中，还包括：步骤六，将步骤五中的焦点位置之间的映射关系存储到平板电脑中，对头盔探测器采集到的图像进行校正，得到经过校正的凸面镜图像。

本发明通过凸面镜增大图像的采集范围，因为凸面镜本身的特性能对大视野范围内的场景进行监控和测量；再对凸面镜成像进行校正，得到准确的图像分析结果，增加图像采集速度。

本发明凸面镜成像校正方法中用到的设备简单，由凸面镜、平面镜、相机、刚性连接装置，印刷有棋盘格标定板组成，成本低廉。

本发明应用范围广，受约束条件少，不需要知道相机的内外参数，也不需要知道相机相对凸面镜的位置信息即可完成成像信息的采集。

本发明采用密集的棋盘格网格进行校正，校正的图形达到较高的精度。

本发明具有稳定的校正性能，能适应不同光照条件。

以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的只是说明本发明的原理，在不脱离本发明精神和范围的前提下本发明还会有各种变化和改进，这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等同物界定。

Claims (7)

1.一种教育玩具套件，其特征在于，包括：支架、头盔探测器和底板，并且支架安装于底板上，头盔探测器安装于支架上，底板上方设置有第一凹槽；支架底部具有凸起，凸起安装在第一凹槽内，顶部具有第二凹槽和第三凹槽，第二凹槽用于放置平板电脑；头盔探测器安装于第三凹槽内；

头盔探测器还包括：本体、第四凹槽、2个扇形块和凸面镜，并且第四凹槽位于本体内，用于夹持不同型号的平板电脑，在第四凹槽夹持平板电脑屏幕的端点处设置有凸面镜，凸面镜的另一端安装于头盔探测器边缘上，凸面镜与水平面夹角成锐角，第四凹槽夹持平板电脑屏幕的端点高于平板电脑的摄像头位置，2个扇形块位于凸面镜的2个边缘上，用于固定凸面镜和夹持平板电脑。

2.一种教育玩具套件中凸面镜成像校正方法，其特征在于，包括如下步骤：

步骤一，把棋盘格标定板摆放于固定位置；

步骤二，通过刚性连接装置固定安装好平面镜与相机，通过相机采集棋盘格标定板在平面镜中的图像；

步骤三，保持相机、棋盘格标定板、刚体连接装置不动，将步骤二中的平面镜替换成凸面镜，通过刚性连接装置固定安装好凸面镜与相机，通过相机采集棋盘格标定板在凸面镜中的图像；

步骤四，记录平面镜图像和凸面镜图像中棋盘格的各角点位置，并计算出分别位于平面镜图像和凸面镜图像中的角点位置之间的映射关系；

角点位置是指角点在图像中的坐标位置；

步骤五，利用步骤四计算得到的角点位置之间的映射关系，对凸面镜图像全图做变换，即可得到经过校正的凸面镜图像。

3.根据权利要求2所述的一种教育玩具套件中凸面镜成像校正方法，其特征在于，还包括：步骤六，将步骤五中的焦点位置之间的映射关系存储到平板电脑中，对头盔探测器采集到的图像进行校正，得到经过校正的凸面镜图像。

4.根据权利要求2所述的一种教育玩具套件中凸面镜成像校正方法，其特征在于，步骤四具体的步骤为：

a）通过手工或者图像处理方法自动找到棋盘格在平面镜和凸面镜中各个对应角点的坐标；

b）通过局部的对应角点，得出局部区域的几何对应关系，即为平面镜图像和凸面镜图像中的角点位置之间的映射关系；

设定PaPbPcPdPa为凸面镜图像中的不规则四边形，Pa、Pb、Pc和Pd是该四边形的顶点；QaQbQcQdQa为平面镜图像中的矩形，Qa、Qb、Qc和Qd是该四边形的顶点；假定两个区域内对应点之间存在平面摄影变换的关系，则计算两个四边形区域PaPbPcPdPa 和QaQbQcQdQa 内的点与点之间的几何对应关系，具体公式如下：

其中，矩阵，是棋盘格标定板经凸面镜成像后四个角点所围成的PaPbPcPdPa区域内任意一点P的坐标，则是棋盘格标定板经平面镜成像后四个角点所围成的QaQbQcQdQa区域内任意一点Q的坐标，写成齐次坐标的形式；

根据不共线的四点必然能解得唯一H矩阵的结论，4组对应点（Pa，Qa）、（Pb，Qb）、（Pc，Qc）和（Pd，Qd）对均满足公式，可以得到8个方程，进而求解得到H矩阵，即为平面镜图像和凸面镜图像中的角点位置之间的映射关系，具体如下：

其中，Q _ax 、Q _bx 、Q _cx 、Q _dx 分别表示Qa、Qb、Qc、Qd点的x坐标，Q _ay 、Q _by 、Q _cy 、Q _dy 分别表示Qa、Qb、Qc、Qd点的y坐标，P _ax 、P _bx 、P _cx 、P _dx 分别表示Pa、Pb、Pc、Pd点的x坐标，P _ay 、P _by 、P _cy 、P _dy 分别表示Pa、Pb、Pc、Pd点的y坐标，h ₁₁、h ₁₂、h ₁₃、h ₂₁、h ₂₂、h ₂₃、h ₃₁、h ₃₂分别表示矩阵H中的各项变量。

5.根据权利要求4所述的一种教育玩具套件中凸面镜成像校正方法，其特征在于，步骤b）中计算局部区域的几何对应关系的方法为数据插值，仿射变换，多项式拟合。

6.根据权利要求4所述的一种教育玩具套件中凸面镜成像校正方法，其特征在于，步骤五具体的步骤为：

I）应用矩阵H，求得校正后图像中各点在凸面镜图像中对应点的坐标；

应用公式求得区域QaQbQcQdQa内各图像坐标点对应在区域PaPbPcPdPa内任意点P的坐标；

II）使用图像插值法得到图像在P点的像素值；

其中，P点的坐标通常都是非整数，所以要进一步进行插值计算得出非整数图像坐标点的像素值；图像插值的方法有很多种，包括最近邻插值、样条插值、双线性插值、三次线性插值。

7.根据权利要求6所述的一种教育玩具套件中凸面镜成像校正方法，其特征在于，步骤五中采用双线性插值方法得到的图像在P点的像素值，即校正后图像中Q点的像素值，具体如下：

假设已知函数f在Qa(x1，y1)、Qb(x1，y2)，Qc(x2，y1) 以及Qd(x2，y2) 四个点的像素值，求f（x，y）在点P(x，y)位置处的像素值；

首先在x方向进行线性插值，得到与P点具有相同x坐标的点R1和R2点的像素值，然后在y方向进行线性插值，即可得到P点的像素值，具体如下：

其中，f（R1）、f（R2）、f（Qa）、f（Qb）、f（Qc）、f（Qd）分别表示点R1、R2、Qa、Qb、Qc、Qd的像素值。