CN105709434A - 一种教育玩具套件及其反光镜位置检测方法 - Google Patents

一种教育玩具套件及其反光镜位置检测方法 Download PDF

Info

Publication number
CN105709434A
CN105709434A CN201610053440.2A CN201610053440A CN105709434A CN 105709434 A CN105709434 A CN 105709434A CN 201610053440 A CN201610053440 A CN 201610053440A CN 105709434 A CN105709434 A CN 105709434A
Authority
CN
China
Prior art keywords
image
location
hole
rabbet joint
groove
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610053440.2A
Other languages
English (en)
Other versions
CN105709434B (zh
Inventor
范旭
孙贤军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai brocade Technology Group Co.,Ltd.
Original Assignee
Shanghai Putao Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Putao Technology Co Ltd filed Critical Shanghai Putao Technology Co Ltd
Priority to CN201610053440.2A priority Critical patent/CN105709434B/zh
Priority to PCT/CN2016/086800 priority patent/WO2017128603A1/zh
Publication of CN105709434A publication Critical patent/CN105709434A/zh
Application granted granted Critical
Publication of CN105709434B publication Critical patent/CN105709434B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63HTOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H33/00Other toys
    • A63H33/04Building blocks, strips, or similar building parts
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63HTOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H33/00Other toys
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30164Workpiece; Machine component

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及计算机视觉检测处理技术领域,提供了一种教育玩具套件及其反光镜位置检测方法,包括支架、头盔探测器和底板,支架安装于底板上,头盔探测器安装于支架上,底板上方设置有第一凹槽;支架底部具有凸起,凸起安装在第一凹槽内,顶部具有第二凹槽和第三凹槽,第二凹槽用于放置平板电脑;头盔探测器安装于第三凹槽内;还包括:定位孔,设置于第三凹槽的侧壁底侧,并且位于侧壁的纵向中心轴上;头盔探测器包括:本体、第四凹槽、扇形块和反光镜。通过前置摄像头采集图像;检测定位孔和槽线的位置;对图像进行处理,由定位孔、槽线与X轴的夹角判定反光镜是否安装准确。本发明在教育玩具套件上设置定位孔,通过图像采集检测反光镜的位置。

Description

一种教育玩具套件及其反光镜位置检测方法
技术领域
本发明涉及计算机视觉检测处理技术领域,特别涉及一种教育玩具套件及其反光镜位置检测方法。
背景技术
现在平板电脑上有许多有趣的幼教游戏应用程序或者儿童游戏,但往往只是让小朋友在屏幕上指指画画,互动性欠缺,长时间看着屏幕容易对眼睛造成伤害;而当下一些互动性强的传统性游戏玩具已经脱离了时代的发展,形式上无法满足孩子学习、玩耍的需求,也不便于孩子和家长的互动沟通。
为了解决上述问题,应用计算机视觉识别处理技术领域成功的开发了一种教育玩具套件,包括:支架、头盔探测器和底板,并且支架安装于底板上,头盔探测器安装于支架上;底板上方设置有第一凹槽;支架底部具有凸起,凸起安装在第一凹槽内,顶部具有第二凹槽和第三凹槽,第二凹槽用于放置平板电脑;头盔探测器安装于第三凹槽内。
上述的教育玩具套件虽然解决了平板电脑中游戏的互动性欠缺的问题,但是其关键部件反光镜安装常常出现偏差,会导致安装缓慢,图像采集出错,分析结果不准确等问题的出现。
因此,急需一种教育玩具套件及其反光镜位置检测方法,在教育玩具套件上设置定位孔,能够应用针对性的图像处理技术检测部件上预设的定位孔的位置是否居中,槽线是否位于对称的位于定位孔的上方,实现对反光镜安装的校准。
发明内容
本发明为了解决上述问题,提供了一种教育玩具套件及其反光镜位置检测方法,技术方案如下:
一种教育玩具套件,包括支架、头盔探测器和底板,并且支架安装于底板上,头盔探测器安装于支架上,底板上方设置有第一凹槽;支架底部具有凸起,凸起安装在第一凹槽内,顶部具有第二凹槽和第三凹槽,第二凹槽用于放置平板电脑;头盔探测器安装于第三凹槽内;还包括:定位孔,设置于第三凹槽侧壁的纵向中心轴上;
头盔探测器还包括:本体、第四凹槽、2个扇形块和反光镜,并且第四凹槽位于本体内,用于夹持不同型号的平板电脑,在第四凹槽夹持平板电脑屏幕的端点处设置有反光镜,反光镜的另一端安装于头盔探测器边缘上,反光镜与水平面夹角成锐角,第四凹槽夹持平板电脑屏幕的端点高于平板电脑的摄像头位置,2个扇形块位于反光镜的2个边缘上,用于固定反光镜和夹持平板电脑。
优选的,在上述的一种教育玩具套件中,在第四凹槽夹持平板电脑的背部外壳处设置有固定支点,用于夹紧平板电脑。
一种教育玩具套件的反光镜位置检测方法,包括如下步骤:
步骤一,首先将平板电脑的底端安装于第二凹槽内,然后通过第四凹槽将头盔探测器安装于平板电脑的顶端;
步骤二,固定安装好后,通过平板电脑的前置摄像头采集图像;
步骤三,在前置摄像头采集的图像中提取出定位孔的位置图像;
步骤四,通过步骤三中提取出的位置图像,判断出定位孔的位置,由定位孔的位置判定平板电脑是否安装准确如果不准确执行步骤一至四的步骤,重新安装,直至测定安装准确为止,如果安装准确执行步骤五;
前置摄像头获得的正确图像中,定位孔应该位于图像的中心点位置;预先设定一个偏差阈值,只要定位孔的偏差小于等于偏差阈值即认为安装准确;如果图像中出现了定位孔,但是定位孔超过偏差阈值,则表示平板电脑没有正确安装;如果定位孔没有出现在图像中,则表示平板电脑或者头盔探测器没有正确安装;
步骤五,在图像中提取只含有槽线的位置图像,并且测定槽线长轴与X轴的夹角绝对值;
步骤六,由槽线长轴与X轴的夹角绝对值判定反光镜是否安装准确。
优选的,在上述一种教育玩具套件的反光镜位置检测方法中,步骤二的具体步骤为:
将平板电脑前置摄像头所获取图像定义为Ixy,Ixy=f(x,y);
其中,(x,y)表示图像像素点的位置坐标,f(x,y)表示图像的在(x,y)上的像素值;
由于摄像头采集的图像为彩色图片,因此f(x,y)=(Rxy,Gxy,Bxy);
其中,Rxy表示图像像素点在红色通道的色彩值,Gxy表示图像像素点在绿色通道的色彩值,Bxy表示图像像素点在蓝色通道的色彩值。
优选的,在上述一种教育玩具套件的反光镜位置检测方法中,步骤三的具体步骤为:
首先,把步骤二中采集得到的彩色图像转换为灰度图像,具体公式为:
Gray(x,y)=0.2989×Rxy+0.5870×Gxy+0.1140×Bxy
其中,Gray(x,y)表示灰度图像;
进一步地,定义一个模板矩阵用以提取定位孔,模板矩阵大小为(n+2)×(n+2),并且模板矩阵是中间为n×n零矩阵、边界为1的方形矩阵,模板矩阵具体为:
其中,mask(n+2)×(n+2)表示模板矩阵;
进一步地,把灰度图像与模板矩阵一起做卷积运算;
因为定位孔设置于第三凹槽的侧壁底侧,所以定位孔应该位于灰度图像的上半部分,在卷积运算的过程中只去灰度图像的上半部分与模板矩阵一起做运算即可;
卷积运算的具体公式为:
0≤s≤Mr+n+1;
0≤t≤Mc+n+1;
其中,Mr表示图像的高度,Mc表示图像的宽度,C(s,t)表示卷积图像,n的具体数值由图像中定位孔的直径确定;
进一步地,从灰度图像中减去卷积图像得出差图像,再计算差图像的像素值,并对差图像进行二值化处理,具体公式为:
其中,B(x,y)表示差图像的二值化图像,γ表示定位孔二值化处理中的经验阈值;
进一步地,采用形态学先验知识滤除非定位孔区域,得到只含有定位孔的位置图像。
优选的,在上述一种教育玩具套件的定位孔检测定位方法中,步骤三中采用形态学先验知识滤除非定位孔区域,得到只含有定位孔的位置图像的具体步骤为:
a)对差图像的二值化图像做8邻域连通分量标记;
8邻域连通是指将一个像素的像素值非零,另一个像素点的上、下、左、右、左上、右上、左下、右下8个方向也存在非零像素值的点,则认为这2个像素点是8邻域连通的,因此不同的连通区域即可被一一区分出来;
b)分别计算步骤a)标记完成的连通区域的面积,并且设定面积阈值;
计算每个8邻域连通分量中含有的像素个数,像素个数即为连通区域的面积;
c)分别计算步骤a)标记完成的连通区域的离心率,并且设定离心率阈值;
d)根据每个连通区域的面积、面积阈值、离心率以及离心率阈值即可滤除非定位区域,得出定位孔位置图像;
首先,将步骤b)中计算得出的连通区域的面积数值与面积阈值进行比较,当面积数值超出面积阈值范围时表示该连通区域为非定位区域,将其滤除;
然后,将步骤c)中计算得出的连通区域的离心率与离心率阈值相比较,当离心率超出离心率阈值范围时表示该连通区域为非定位区域,将其滤除;
进一步地,滤除非定位区域的剩余连通区域为定位孔位置图像。
优选的,在上述一种教育玩具套件的反光镜位置检测方法中,步骤五的具体步骤为:
首先,把步骤二中采集得到的彩色图像转换为灰度图像,具体公式为:
Gray(x,y)=0.2989×Rxy+0.5870×Gxy+0.1140×Bxy
其中,Gray(x,y)表示灰度图像;
进一步地,定义一个模板矩阵用以提取槽线,模板矩阵大小为(n+2)×(n+2),并且模板矩阵是中间为n×n零矩阵、边界为1的方形矩阵,模板矩阵具体为:
其中,mask(n+2)×(n+2)表示模板矩阵;
进一步地,把灰度图像与模板矩阵一起做卷积运算;
因为定位孔设置于第三凹槽的侧壁底侧,所以定位孔应该位于灰度图像的上半部分,在卷积运算的过程中只去灰度图像的上半部分与模板矩阵一起做运算即可;
卷积运算的具体公式为:
0≤s≤Mr+n+1;
0≤t≤Mc+n+1;
其中,Mr表示图像的高度,Mc表示图像的宽度,C(s,t)表示卷积图像,h的具体数值由图像中槽线的宽度确定;
进一步地,从灰度图像中减去卷积图像得出差图像,再计算差图像的像素值,并对差图像进行二值化处理,具体公式为:
其中,B(x,y)表示差图像的二值化图像,β表示槽线二值化处理中预先设定的经验阈值;
进一步地,采用形态学先验知识滤除非槽线区域,得到只含有槽线的图像。
优选的,在上述一种教育玩具套件的反光镜位置检测方法中,步骤五中采用形态学先验知识滤除非槽线区域,得到只含有槽线的图像的具体步骤为:
1)对差图像的二值化图像做8邻域连通分量标记;
8邻域连通是指将一个像素的像素值非零,另一个像素点的上、下、左、右、左上、右上、左下、右下8个方向也存在非零像素值的点,则认为这2个像素点是8邻域连通的,因此不同的连通区域即可被一一区分出来;
2)分别计算步骤1)标记完成的连通区域的长轴和短轴长度,并且计算长轴与短轴的比率,并且设定长短轴比率阈值;
3)分别计算步骤1)标记完成的连通区域的长轴与X轴夹角的绝对值,夹角取值范围为0-90°;
4)分别计算步骤1)标记完成的连通区域的面积,并且设定面积阈值;
首先,计算每个8邻域连通分量中含有的像素个数,像素个数即为连通区域的面积;
5)根据每个连通区域的面积、面积阈值、长短轴比率、长短轴比率阈值即可滤除大部分非槽线区域;
连通区域内超出面积阈值或者长短轴比率阈值的区域为非槽线区域,将其滤除;
6)计算定位孔与槽线的相互关系,滤除所有非槽线区域,得出只含有槽线的图像。
定位孔与槽线的正确位置关系应该是定位孔位于中间,槽线位于定位孔的四周;如果不满足上述定位孔与槽线的正确位置关系,则其为非槽线区域,将其滤除,得出只含有槽线的图像。
优选的,在上述一种教育玩具套件的反光镜位置检测方法中,步骤六中由槽线的长轴与X轴夹角的绝对值判定反光镜是否安装准确的评判标准为:
如果槽线的长轴与X轴夹角的绝对值大于预先设定的偏差角度阈值,则认为反光镜发生旋转,安装错误,否则安装准确。
本发明的有益效果:
1、硬件设计巧妙,本发明只在平板电脑底座上打上一个定位孔,结构简单,成本低廉,但是定位孔的大小和位置是经过大量的实验验证的,更加科学,便于摄像头采集图像,能够快速检测安装是否成功。
2、计算速度快,每次定位检测耗时在50ms左右。
3、检测性能稳定,对不同光照、不同平板电脑的安装都能够快速的进行测试,适用性更强。
4、本发明在教育玩具套件上设置定位孔,能够应用针对性的图像处理技术检测部件上预设的定位孔的位置是否居中,槽线是否位于对称的位于定位孔的上方,实现对反光镜安装的校准。
附图说明
下面结合附图和具体实施方式来详细说明本发明:
图1是本发明一种教育玩具套件的结构示意图。
图2是本发明一种教育玩具套件的支架的后视图。
图3是本发明一种教育玩具套件的支架的立体图。
图4是本发明一种教育玩具套件的底板的结构示意图。
图5是本发明葡萄探索号教育玩具套件的头盔探测器的结构示意图。
图6是本发明葡萄探索号教育玩具套件的应用示意图。
图7是一种教育玩具套件的反光镜位置检测方法的流程图。
其中,图1-7中的附图标记与部件名称之间的对应关系为:
支架1,凸起101,第二凹槽102,第三凹槽103,碟状底架104,圆形顶架105,露空提手106,头盔探测器2,本体201,第四凹槽202,2个扇形块203,反光镜204,固定支点205,底板3,第一凹槽301。
具体实施方式
为了使本发明技术实现的措施、创作特征、达成目的与功效易于明白了解,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1:
图1是本发明一种教育玩具套件的结构示意图。
图2是本发明一种教育玩具套件的支架的后视图。
图3是本发明一种教育玩具套件的支架的立体图。
图4是本发明一种教育玩具套件的底板的结构示意图。
图5是本发明葡萄探索号教育玩具套件的头盔探测器的结构示意图。
图6是本发明葡萄探索号教育玩具套件的应用示意图。
如图1-6所示,一种教育玩具套件,包括支架1、头盔探测器2和底板3,并且支架1安装于底板3上,头盔探测器2安装于支架1上;底板3,上方设置有第一凹槽301;支架1,底部具有凸起101,凸起101安装在第一凹槽301内,顶部具有第二凹槽102和第三凹槽103,第二凹槽102用于放置平板电脑;头盔探测器2,安装于第三凹槽103内;还包括:定位孔104,设置于第三凹槽103侧壁的纵向中心轴上;头盔探测器2还包括:本体201、第四凹槽202、2个扇形块203和反光镜204,并且第四凹槽202位于本体201内,用于夹持不同型号的平板电脑,在第四凹槽202夹持平板电脑屏幕的端点处设置有反光镜204,反光镜204的另一端安装于头盔探测器2边缘上,反光镜204与水平面夹角成锐角,第四凹槽202夹持平板电脑屏幕的端点高于平板电脑的摄像头位置,2个扇形块203位于反光镜204的2个边缘上,用于固定反光镜204和夹持平板电脑。
本实施例中,在第四凹槽202夹持平板电脑的背部外壳处设置有固定支点205,用于夹紧平板电脑。
图7是一种教育玩具套件的反光镜位置检测方法的流程图。
如图7所示,一种教育玩具套件的反光镜位置检测方法,包括如下步骤:
步骤一,首先将平板电脑的底端安装于第二凹槽内,然后通过第四凹槽将头盔探测器安装于平板电脑的顶端;
步骤二,固定安装好后,通过平板电脑的前置摄像头采集图像;
步骤三,在前置摄像头采集的图像中提取出定位孔的位置图像;
步骤四,通过步骤三中提取出的位置图像,判断出定位孔的位置,由定位孔的位置判定平板电脑是否安装准确如果不准确执行步骤一至四的步骤,重新安装,直至测定安装准确为止,如果安装准确执行步骤五;
前置摄像头获得的正确图像中,定位孔应该位于图像的中心点位置;预先设定一个偏差阈值,只要定位孔的偏差小于等于偏差阈值即认为安装准确;如果图像中出现了定位孔,但是定位孔超过偏差阈值,则表示平板电脑没有正确安装;如果定位孔没有出现在图像中,则表示平板电脑或者头盔探测器没有正确安装;
步骤五,在图像中提取只含有槽线的位置图像,并且测定槽线长轴与X轴的夹角绝对值;
步骤六,由槽线长轴与X轴的夹角绝对值判定反光镜是否安装准确。
实施例2:
图7是一种教育玩具套件及其反光镜位置检测方法的流程图。
如图7所示,一种教育玩具套件及其反光镜位置检测方法,包括如下步骤:
步骤一,首先将平板电脑的底端安装于第二凹槽内,然后通过第四凹槽将头盔探测器安装于平板电脑的顶端;
步骤二,固定安装好后,通过平板电脑的前置摄像头采集图像;
将平板电脑前置摄像头所获取图像定义为Ixy,Ixy=f(x,y);
其中,(x,y)表示图像像素点的位置坐标,f(x,y)表示图像的在(x,y)上的像素值;
由于摄像头采集的图像为彩色图片,因此f(x,y)=(Rxy,Gxy,Bxy);
其中,Rxy表示图像像素点在红色通道的色彩值,Gxy表示图像像素点在绿色通道的色彩值,Bxy表示图像像素点在蓝色通道的色彩值;
步骤三,在前置摄像头采集的图像中提取出定位孔的位置图像;
首先,把步骤二中采集得到的彩色图像转换为灰度图像,具体公式为:
Gray(x,y)=0.2989×Rxy+0.5870×Gxy+0.1140×Bxy
其中,Gray(x,y)表示灰度图像;
进一步地,定义一个模板矩阵用以提取定位孔,模板矩阵大小为(n+2)×(n+2),并且模板矩阵是中间为n×n零矩阵、边界为1的方形矩阵,模板矩阵具体为:
其中,mask(n+2)×(n+2)表示模板矩阵;
进一步地,把灰度图像与模板矩阵一起做卷积运算;
因为定位孔设置于第三凹槽的侧壁底侧,所以定位孔应该位于灰度图像的上半部分,在卷积运算的过程中只去灰度图像的上半部分与模板矩阵一起做运算即可;
卷积运算的具体公式为:
0≤s≤Mr+n+1;
0≤t≤Mc+n+1;
其中,Mr表示图像的高度,Mc表示图像的宽度,C(s,t)表示卷积图像,n的具体数值由图像中定位孔的直径确定;
进一步地,从灰度图像中减去卷积图像得出差图像,再计算差图像的像素值,并对差图像进行二值化处理,具体公式为:
其中,B(x,y)表示差图像的二值化图像;
进一步地,采用形态学先验知识滤除非定位孔区域,得出定位孔位置图像的具体步骤为:
a)对差图像的二值化图像做8邻域连通分量标记;
8邻域连通是指将一个像素的像素值非零,另一个像素点的上、下、左、右、左上、右上、左下、右下8个方向也存在非零像素值的点,则认为这2个像素点是8邻域连通的,因此不同的连通区域即可被一一区分出来;
b)分别计算步骤a)标记完成的连通区域的面积,并且设定面积阈值;
计算每个8邻域连通分量中含有的像素个数,像素个数即为连通区域的面积;
c)分别计算步骤a)标记完成的连通区域的离心率,并且设定离心率阈值;
d)根据每个连通区域的面积、面积阈值、离心率以及离心率阈值即可滤除非定位区域,得出定位孔图像;
首先,将步骤b)中计算得出的连通区域的面积数值与面积阈值进行比较,当面积数值超出面积阈值范围时表示该连通区域为非定位区域,将其滤除;
然后,将步骤c)中计算得出的连通区域的离心率与离心率阈值相比较,当离心率超出离心率阈值范围时表示该连通区域为非定位区域,将其滤除;
进一步地,滤除非定位区域的剩余连通区域为定位孔的位置图像;
步骤四,通过步骤三中提取出的位置图像,判断出定位孔的位置,由定位孔的位置判定平板电脑是否安装准确如果不准确执行步骤一至四的步骤,重新安装,直至测定安装准确为止,如果安装准确执行步骤五;
前置摄像头获得的正确图像中,定位孔应该位于图像的中心点位置;预先设定一个偏差阈值,只要定位孔的偏差小于等于偏差阈值即认为安装准确;如果图像中出现了定位孔,但是定位孔超过偏差阈值,则表示平板电脑没有正确安装;如果定位孔没有出现在图像中,则表示平板电脑或者头盔探测器没有正确安装;
步骤五,在图像中提取只含有槽线的位置图像,并且测定槽线长轴与X轴的夹角绝对值;
首先,把步骤二中采集得到的彩色图像转换为灰度图像,具体公式为:
Gray(x,y)=0.2989×Rxy+0.5870×Gxy+0.1140×Bxy
其中,Gray(x,y)表示灰度图像;
进一步地,定义一个模板矩阵用以提取槽线,模板矩阵大小为(n+2)×(n+2),并且模板矩阵是中间为n×n零矩阵、边界为1的方形矩阵,模板矩阵具体为:
其中,mask(n+2)×(n+2)表示模板矩阵;
进一步地,把灰度图像与模板矩阵一起做卷积运算;
因为定位孔设置于第三凹槽的侧壁底侧,所以定位孔应该位于灰度图像的上半部分,在卷积运算的过程中只去灰度图像的上半部分与模板矩阵一起做运算即可;
卷积运算的具体公式为:
0≤s≤Mr+n+1;
0≤t≤Mc+n+1;
其中,Mr表示图像的高度,Mc表示图像的宽度,C(s,t)表示卷积图像,h的具体数值由图像中槽线的宽度确定;
进一步地,从灰度图像中减去卷积图像得出差图像,再计算差图像的像素值,并对差图像进行二值化处理,具体公式为:
其中,B(x,y)表示差图像的二值化图像,β表示槽线二值化处理中预先设定的经验阈值;
进一步地,采用形态学先验知识滤除非槽线区域,得到只含有槽线的图像,具体步骤为:
1)对差图像的二值化图像做8邻域连通分量标记;
8邻域连通是指将一个像素的像素值非零,另一个像素点的上、下、左、右、左上、右上、左下、右下8个方向也存在非零像素值的点,则认为这2个像素点是8邻域连通的,因此不同的连通区域即可被一一区分出来;
2)分别计算步骤1)标记完成的连通区域的长轴和短轴长度,并且计算长轴与短轴的比率,并且设定长短轴比率阈值;
3)分别计算步骤1)标记完成的连通区域的长轴与X轴夹角的绝对值,夹角取值范围为0-90°;
4)分别计算步骤1)标记完成的连通区域的面积,并且设定面积阈值;
首先,计算每个8邻域连通分量中含有的像素个数,像素个数即为连通区域的面积;
5)根据每个连通区域的面积、面积阈值、长短轴比率、长短轴比率阈值即可滤除大部分非槽线区域;
连通区域内超出面积阈值或者长短轴比率阈值的区域为非槽线区域,将其滤除;
6)计算定位孔与槽线的相互关系,滤除所有非槽线区域,得出只含有槽线的图像;
定位孔与槽线的正确位置关系应该是定位孔位于中间,槽线位于定位孔的四周;如果不满足上述定位孔与槽线的正确位置关系,则其为非槽线区域,将其滤除,得出只含有槽线的图像;
步骤六,由槽线长轴与X轴的夹角绝对值判定反光镜是否安装准确;
如果槽线的长轴与X轴夹角的绝对值大于预先设定的偏差角度阈值,则认为反光镜发生旋转,安装错误,否则安装准确。
本发明硬件设计巧妙,只在平板电脑底座上打上一个定位孔,结构简单,成本低廉,但是定位孔的大小和位置是经过大量的实验验证的,更加科学,便于摄像头采集图像,能够快速检测安装是否成功。
本发明计算速度快,每次定位检测耗时在50ms左右。
本发明检测性能稳定,对不同光照、不同平板电脑的安装都能够快速的进行测试,适用性更强。
本发明在教育玩具套件上设置定位孔,能够应用针对性的图像处理技术检测部件上预设的定位孔的位置是否居中,槽线是否位于对称的位于定位孔的上方,实现对反光镜安装的校准。
以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等同物界定。

Claims (9)

1.一种教育玩具套件,包括:支架、头盔探测器和底板,并且所述支架安装于底板上,头盔探测器安装于支架上,所述底板上方设置有第一凹槽;所述支架底部具有凸起,所述凸起安装在第一凹槽内,项部具有第二凹槽和第三凹槽,所述第二凹槽用于放置平板电脑;所述头盔探测器安装于第三凹槽内;其特征在于,还包括:定位孔,设置于所述第三凹槽侧壁的纵向中心轴上;
所述头盔探测器还包括:本体、第四凹槽、2个扇形块和反光镜,并且所述第四凹槽位于本体内,用于夹持不同型号的平板电脑,在所述第四凹槽夹持平板电脑屏幕的端点处设置有反光镜,所述反光镜的另一端安装于头盔探测器边缘上,所述反光镜与水平面夹角成锐角,所述第四凹槽夹持平板电脑屏幕的端点高于平板电脑的摄像头位置,2个所述扇形块位于反光镜的2个边缘上,用于固定所述反光镜和夹持平板电脑。
2.根据权利要求亲1所述的一种教育玩具套件,其特征在于,在所述第四凹槽夹持平板电脑的背部外壳处设置有固定支点,用于夹紧平板电脑。
3.一种教育玩具套件的反光镜位置检测方法,其特征在于,包括如下步骤:
步骤一,首先将平板电脑的底端安装于第二凹槽内,然后通过第四凹槽将头盔探测器安装于平板电脑的顶端;
步骤二,固定安装好后,通过平板电脑的前置摄像头采集图像;
步骤三,在前置摄像头采集的图像中提取出定位孔的位置图像;
步骤四,通过步骤三中提取出的位置图像,判断出定位孔的位置,由定位孔的位置判定平板电脑是否安装准确如果不准确执行所述步骤一至四的步骤,重新安装,直至测定安装准确为止,如果安装准确执行步骤五;
前置摄像头获得的正确图像中,定位孔应该位于图像的中心点位置;预先设定一个偏差阈值,只要定位孔的偏差小于等于偏差阈值即认为安装准确;如果图像中出现了定位孔,但是定位孔超过偏差阈值,则表示平板电脑没有正确安装;如果定位孔没有出现在图像中,则表示平板电脑或者头盔探测器没有正确安装;
所述步骤五,在图像中提取只含有槽线的位置图像,并且测定槽线长轴与X轴的夹角绝对值;
步骤六,由槽线长轴与X轴的夹角绝对值判定反光镜是否安装准确。
4.根据权利要求3所述的一种教育玩具套件的反光镜位置检测方法,其特征在于,所述步骤二的具体步骤为:
将平板电脑前置摄像头获取的图像定义为Ixy,Ixy=f(x,y);
其中,(x,y)表示图像像素点的位置坐标,f(x,y)表示图像的在(x,y)上的像素值;
由于摄像头采集的图像为彩色图片,因此f(x,y)=(Rxy,Gxy,Bxy);
其中,Rxy表示图像像素点在红色通道的色彩值,Gxy表示图像像素点在绿色通道的色彩值,Bxy表示图像像素点在蓝色通道的色彩值。
5.根据权利要求4所述的一种教育玩具套件的反光镜位置检测方法,其特征在于,所述步骤三的具体步骤为:
首先,把步骤二中采集得到的彩色图像转换为灰度图像,具体公式为:
Gray(x,y)=0.2989×Rxy+0.5870×Gxy+0.1140×Bxy
其中,Gray(x,y)表示灰度图像;
进一步地,定义一个模板矩阵用以提取定位孔,模板矩阵大小为(n+2)×(n+2),并且模板矩阵是中间为n×n零矩阵、边界为1的方形矩阵,模板矩阵具体为:
其中,mask(n+2)×(n+2)表示模板矩阵;
进一步地,把灰度图像与模板矩阵一起做卷积运算;
因为定位孔设置于第三凹槽的侧壁底侧,所以定位孔应该位于灰度图像的上半部分,在卷积运算的过程中只去灰度图像的上半部分与模板矩阵一起做运算即可;
卷积运算的具体公式为:
0≤s≤Mr+n+1;
0≤t≤Mc+n+1;
其中,Mr表示图像的高度,Mc表示图像的宽度,C(s,t)表示卷积图像,n的具体数值由图像中定位孔的直径确定;
进一步地,从灰度图像中减去卷积图像得出差图像,再计算差图像的像素值,并对差图像进行二值化处理,具体公式为:
其中,B(x,y)表示差图像的二值化图像;
进一步地,采用形态学先验知识滤除非定位孔区域,得到只含有定位孔的图像。
6.根据权利要求5所述的一种教育玩具套件的反光镜位置检测方法,其特征在于,所述步骤三中采用形态学先验知识滤除非定位孔区域,得到只含有定位孔的图像的具体步骤为:
a)对差图像的二值化图像做8邻域连通分量标记;
8邻域连通是指将一个像素的像素值非零,另一个像素点的上、下、左、右、左上、右上、左下、右下8个方向也存在非零像素值的点,则认为这2个像素点是8邻域连通的,因此不同的连通区域即可被一一区分出来;
b)分别计算所述步骤a)标记完成的连通区域的面积,并且设定面积阈值;
计算每个8邻域连通分量中含有的像素个数,像素个数即为连通区域的面积;
c)分别计算所述步骤a)标记完成的连通区域的离心率,并且设定离心率阈值;
d)根据每个连通区域的面积、面积阈值、离心率以及离心率阈值即可滤除非定位区域,得出定位孔位置图像;
首先,将所述步骤b)中计算得出的连通区域的面积数值与面积阈值进行比较,当面积数值超出面积阈值范围时表示该连通区域为非定位区域,将其滤除;
然后,将所述步骤c)中计算得出的连通区域的离心率与离心率阈值相比较,当离心率超出离心率阈值范围时表示该连通区域为非定位区域,将其滤除;
进一步地,滤除非定位区域的剩余连通区域为定位孔位置图像。
7.根据权利要求6所述的一种教育玩具套件的反光镜位置检测方法,其特征在于,所述步骤五的具体步骤为:
首先,把步骤二中采集得到的彩色图像转换为灰度图像,具体公式为:
Gray(x,y)=0.2989×Rxy+0.5870×Gxy+0.1140×Bxy
其中,Gray(x,y)表示灰度图像;
进一步地,定义一个模板矩阵用以提取槽线,模板矩阵大小为(n+2)×(n+2),并且模板矩阵是中间为n×n零矩阵、边界为1的方形矩阵,模板矩阵具体为:
其中,mask(n+2)×(n+2)表示模板矩阵;
进一步地,把灰度图像与模板矩阵一起做卷积运算;
因为定位孔设置于第三凹槽的侧壁底侧,所以定位孔应该位于灰度图像的上半部分,在卷积运算的过程中只去灰度图像的上半部分与模板矩阵一起做运算即可;
卷积运算的具体公式为:
0≤s≤Mr+n+1;
0≤t≤Mc+n+1;
其中,Mr表示图像的高度,Mc表示图像的宽度,C(s,t)表示卷积图像,h的具体数值由图像中槽线的宽度确定;
进一步地,从灰度图像中减去卷积图像得出差图像,再计算差图像的像素值,并对差图像进行二值化处理,具体公式为:
其中,B(x,y)表示差图像的二值化图像,β表示槽线二值化处理中预先设定的经验阈值;
进一步地,采用形态学先验知识滤除非槽线区域,得到只含有槽线的图像。
8.根据权利要求7所述的一种教育玩具套件的反光镜位置检测方法,其特征在于,所述步骤五中采用形态学先验知识滤除非槽线区域,得到只含有槽线的图像的具体步骤为:
1)对差图像的二值化图像做8邻域连通分量标记;
8邻域连通是指将一个像素的像素值非零,另一个像素点的上、下、左、右、左上、右上、左下、右下8个方向也存在非零像素值的点,则认为这2个像素点是8邻域连通的,因此不同的连通区域即可被一一区分出来;
2)分别计算所述步骤1)标记完成的连通区域的长轴和短轴长度,并且计算长轴与短轴的比率,并且设定长短轴比率阈值;
3)分别计算所述步骤1)标记完成的连通区域的长轴与X轴夹角的绝对值,夹角取值范围为0-90°;
4)分别计算所述步骤1)标记完成的连通区域的面积,并且设定面积阈值;
首先,计算每个8邻域连通分量中含有的像素个数,像素个数即为连通区域的面积;
5)根据每个连通区域的面积、面积阈值、长短轴比率、长短轴比率阈值即可滤除大部分非槽线区域;
连通区域内超出面积阈值或者长短轴比率阈值的区域为非槽线区域,将其滤除;
6)计算定位孔与槽线的相互关系,滤除所有非槽线区域,得出只含有槽线的图像;
定位孔与槽线的正确位置关系应该是定位孔位于中间,槽线位于定位孔的四周;如果不满足上述定位孔与槽线的正确位置关系,则其为非槽线区域,将其滤除,得出只含有槽线的图像。
9.根据权利要求8所述的一种教育玩具套件的反光镜位置检测方法,其特征在于,所述步骤六中由槽线的长轴与X轴夹角的绝对值判定反光镜是否安装准确的评判标准为:
如果槽线的长轴与X轴夹角的绝对值大于预先设定的偏差角度阈值,则认为反光镜发生旋转,安装错误,否则安装准确。
CN201610053440.2A 2016-01-26 2016-01-26 一种教育玩具套件及其反光镜位置检测方法 Active CN105709434B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610053440.2A CN105709434B (zh) 2016-01-26 2016-01-26 一种教育玩具套件及其反光镜位置检测方法
PCT/CN2016/086800 WO2017128603A1 (zh) 2016-01-26 2016-06-22 一种教育玩具套件及其反光镜位置检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610053440.2A CN105709434B (zh) 2016-01-26 2016-01-26 一种教育玩具套件及其反光镜位置检测方法

Publications (2)

Publication Number Publication Date
CN105709434A true CN105709434A (zh) 2016-06-29
CN105709434B CN105709434B (zh) 2017-10-13

Family

ID=56154051

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610053440.2A Active CN105709434B (zh) 2016-01-26 2016-01-26 一种教育玩具套件及其反光镜位置检测方法

Country Status (2)

Country Link
CN (1) CN105709434B (zh)
WO (1) WO2017128603A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106097833A (zh) * 2016-08-19 2016-11-09 上海葡萄纬度科技有限公司 一种教育玩具套件及其数字识别方法
CN106296710A (zh) * 2016-08-19 2017-01-04 上海葡萄纬度科技有限公司 一种教育玩具套件及其敲击动作检测方法
CN106297492A (zh) * 2016-08-19 2017-01-04 上海葡萄纬度科技有限公司 一种教育玩具套件及利用颜色和轮廓识别编程模块的方法
WO2017128605A1 (zh) * 2016-01-26 2017-08-03 上海葡萄纬度科技有限公司 一种教育玩具套件及其基于hsv的魔方颜色识别方法
WO2017128604A1 (zh) * 2016-01-26 2017-08-03 上海葡萄纬度科技有限公司 一种教育玩具套件及其基于形状匹配的魔方检测定位方法
WO2017128607A1 (zh) * 2016-01-26 2017-08-03 上海葡萄纬度科技有限公司 一种教育玩具套件及检测七巧板摆放形状、位置的方法
WO2017128606A1 (zh) * 2016-01-26 2017-08-03 上海葡萄纬度科技有限公司 一种教育玩具套件及其七巧板颜色识别方法
WO2018032627A1 (zh) * 2016-08-19 2018-02-22 上海葡萄纬度科技有限公司 一种教育玩具套件及其海洋模具识别方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111724444B (zh) * 2020-06-16 2023-08-22 中国联合网络通信集团有限公司 目标物的抓取点的确定方法、装置及抓取系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060096873A1 (en) * 2004-11-09 2006-05-11 Fromm Wayne G Miniature comic book kit
CN104269079A (zh) * 2014-09-30 2015-01-07 张启熙 基于镜面反射和增强现实技术的移动终端幼教系统及方法
CN105194884A (zh) * 2015-10-27 2015-12-30 上海葡萄纬度科技有限公司 教育玩具套件

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102496021A (zh) * 2011-11-23 2012-06-13 南开大学 基于小波变换的图像二值化方法
US9946947B2 (en) * 2012-10-31 2018-04-17 Cognex Corporation System and method for finding saddle point-like structures in an image and determining information from the same
CN105096348B (zh) * 2014-04-30 2018-06-29 富士通株式会社 检测图像中的色彩板的装置和方法
CN205164140U (zh) * 2015-10-27 2016-04-20 上海葡萄纬度科技有限公司 教育玩具套件
CN105513086B (zh) * 2016-01-26 2019-02-19 上海葡萄纬度科技有限公司 一种教育玩具套件及其基于形状匹配的魔方检测定位方法
CN105498253B (zh) * 2016-01-26 2017-10-13 上海葡萄纬度科技有限公司 一种教育玩具套件及其定位孔检测定位方法
CN105498200A (zh) * 2016-01-26 2016-04-20 上海葡萄纬度科技有限公司 一种教育玩具套件及其七巧板颜色识别方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060096873A1 (en) * 2004-11-09 2006-05-11 Fromm Wayne G Miniature comic book kit
CN104269079A (zh) * 2014-09-30 2015-01-07 张启熙 基于镜面反射和增强现实技术的移动终端幼教系统及方法
CN105194884A (zh) * 2015-10-27 2015-12-30 上海葡萄纬度科技有限公司 教育玩具套件

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017128605A1 (zh) * 2016-01-26 2017-08-03 上海葡萄纬度科技有限公司 一种教育玩具套件及其基于hsv的魔方颜色识别方法
WO2017128604A1 (zh) * 2016-01-26 2017-08-03 上海葡萄纬度科技有限公司 一种教育玩具套件及其基于形状匹配的魔方检测定位方法
WO2017128607A1 (zh) * 2016-01-26 2017-08-03 上海葡萄纬度科技有限公司 一种教育玩具套件及检测七巧板摆放形状、位置的方法
WO2017128606A1 (zh) * 2016-01-26 2017-08-03 上海葡萄纬度科技有限公司 一种教育玩具套件及其七巧板颜色识别方法
CN106097833A (zh) * 2016-08-19 2016-11-09 上海葡萄纬度科技有限公司 一种教育玩具套件及其数字识别方法
CN106296710A (zh) * 2016-08-19 2017-01-04 上海葡萄纬度科技有限公司 一种教育玩具套件及其敲击动作检测方法
CN106297492A (zh) * 2016-08-19 2017-01-04 上海葡萄纬度科技有限公司 一种教育玩具套件及利用颜色和轮廓识别编程模块的方法
WO2018032627A1 (zh) * 2016-08-19 2018-02-22 上海葡萄纬度科技有限公司 一种教育玩具套件及其海洋模具识别方法
WO2018032630A1 (zh) * 2016-08-19 2018-02-22 上海葡萄纬度科技有限公司 一种教育玩具套件及利用颜色和轮廓识别编程模块的方法
WO2018032629A1 (zh) * 2016-08-19 2018-02-22 上海葡萄纬度科技有限公司 一种教育玩具套件及其敲击动作检测方法
WO2018032626A1 (zh) * 2016-08-19 2018-02-22 上海葡萄纬度科技有限公司 一种教育玩具套件及其数字识别方法
CN106097833B (zh) * 2016-08-19 2019-08-30 上海葡萄纬度科技有限公司 一种教育玩具套件及其数字识别方法

Also Published As

Publication number Publication date
CN105709434B (zh) 2017-10-13
WO2017128603A1 (zh) 2017-08-03

Similar Documents

Publication Publication Date Title
CN105709434A (zh) 一种教育玩具套件及其反光镜位置检测方法
CN105498253B (zh) 一种教育玩具套件及其定位孔检测定位方法
CN105513086B (zh) 一种教育玩具套件及其基于形状匹配的魔方检测定位方法
CN105719318B (zh) 一种教育玩具套件中基于hsv的魔方颜色识别方法
CN105498200A (zh) 一种教育玩具套件及其七巧板颜色识别方法
CN106097833A (zh) 一种教育玩具套件及其数字识别方法
CN105719307A (zh) 一种教育玩具套件及检测七巧板摆放形状、位置的方法
CN106297492B (zh) 一种教育玩具套件及利用颜色和轮廓识别编程模块的方法
CN103954458B (zh) 一种非接触式四轮定位仪及其检测方法
CN103810491B (zh) 融合深度和灰度图像特征点的头姿估计兴趣点检测方法
CN106485699B (zh) 一种基于点匹配的基准标志定位方法
CN106355592B (zh) 一种教育玩具套件及其电路元件和电线的识别方法
CN103927748B (zh) 一种基于多矩形图像距离转换模型的坐标标定方法
CN106218409A (zh) 一种可人眼跟踪的裸眼3d汽车仪表显示方法及装置
WO2018032627A1 (zh) 一种教育玩具套件及其海洋模具识别方法
WO2018006566A1 (zh) 视图调整方法和系统
CN106790898B (zh) 一种基于显著性分析的手机屏幕坏点自动检测方法和系统
CN105069421B (zh) 一种基于图像的人体站立行为自动检测方法和装置
CN106960184A (zh) 一种书本边框的图像定位方法
CN106023723B (zh) 一种教育玩具套件及其凸面镜成像校正方法
CN104751480B (zh) 基于视觉技术的米8字段位式液晶屏检测方法及装置
CN106327956B (zh) 一种教育玩具套件及其涂色卡片识别方法
KR20040022841A (ko) 카메라와 레이저 거리미터기를 이용한 스프레더 자세 인식 방법
CN109472222A (zh) 一种基于计算机视觉技术的辅助二胡练习者姿态检测方法
CN114783242A (zh) 一种用于在线教育的绘画教学方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Room 3001, building 22, No. 500 Jiajian Road, Jiading District, Shanghai

Patentee after: Shanghai brocade Technology Group Co.,Ltd.

Address before: 201822 room 3001, building 22, No. 500 Jiajian highway, Jiading District, Shanghai

Patentee before: SHANGHAI PUTAO TECHNOLOGY Co.,Ltd.

PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: An educational toy kit and its reflector position detection method

Effective date of registration: 20230725

Granted publication date: 20171013

Pledgee: China Minsheng Banking Corp Shanghai branch

Pledgor: Shanghai brocade Technology Group Co.,Ltd.

Registration number: Y2023310000394