CN109085795B - 一种基于手指位置识别的美甲彩绘机控制方法 - Google Patents

一种基于手指位置识别的美甲彩绘机控制方法 Download PDF

Info

Publication number
CN109085795B
CN109085795B CN201810786100.XA CN201810786100A CN109085795B CN 109085795 B CN109085795 B CN 109085795B CN 201810786100 A CN201810786100 A CN 201810786100A CN 109085795 B CN109085795 B CN 109085795B
Authority
CN
China
Prior art keywords
finger
line segment
edge
nail
contour
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810786100.XA
Other languages
English (en)
Other versions
CN109085795A (zh
Inventor
吴宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GUANGZHOU TIANHE HIGH-TECH INDUSTRY DEVELOPMENT ZONE TAIJI ELECTRONICS Co Ltd
Original Assignee
GUANGZHOU TIANHE HIGH-TECH INDUSTRY DEVELOPMENT ZONE TAIJI ELECTRONICS Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GUANGZHOU TIANHE HIGH-TECH INDUSTRY DEVELOPMENT ZONE TAIJI ELECTRONICS Co Ltd filed Critical GUANGZHOU TIANHE HIGH-TECH INDUSTRY DEVELOPMENT ZONE TAIJI ELECTRONICS Co Ltd
Priority to CN201810786100.XA priority Critical patent/CN109085795B/zh
Publication of CN109085795A publication Critical patent/CN109085795A/zh
Priority to PCT/CN2019/091321 priority patent/WO2020015489A1/zh
Application granted granted Critical
Publication of CN109085795B publication Critical patent/CN109085795B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/18Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
    • G05B19/19Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by positioning or contouring control systems, e.g. to control position from one programmed point to another or to control movement along a programmed continuous path
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/34Director, elements to supervisory
    • G05B2219/34098Slope fitting, fairing contour, curve fitting, transition

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Manufacturing & Machinery (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Coating Apparatus (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于手指位置识别的美甲彩绘机控制方法,通过在美甲彩绘机上增设有侧摄像头和补光灯;并通过接收侧摄像头所拍摄的检测图像,以基于该检测图像执行甲片检测步骤。本发明通过侧摄像头抓取检测图像,并基于抓取到的检测图像,分析判断出用户手指的手指上沿轮廓线的最高点H是否在上检测线与下检测线之间,以此检测出用户手指的放置位置是否正确,即检测出:用户手指的甲片是否过高而有可能与喷墨部件发生碰撞,或者,用户手指的甲片是否过低而有可能导致甲片上的喷绘图像不清晰,从而,本发明依据此检测判断能够避免甲片上的喷绘效果因用户手指的放置位置不正确而受到影响。

Description

一种基于手指位置识别的美甲彩绘机控制方法
技术领域
本发明涉及一种基于手指位置识别的美甲彩绘机控制方法。
背景技术
用于美甲彩绘的美甲机通常包含用于观察手指甲面、识别甲面形状和大小的摄像头部件;用于放置手指的手指定位部件、用于将图案喷绘在指甲表面的喷墨部件和打印机架,这些组成打印机构,其中手指定位部件固定于打印机架上并置于喷墨部件的下方,形成打印部位;用于控制打印的电子电路部件等。
目前,市面上已有的美甲彩绘机打印机构基于以上部件的形状,其中手指放置于手指定位部件上并置于喷墨部件的下面,彩绘过程中由于墨盒的来回移动,而喷墨口距离手指甲面的最短距离不超过2mm,一旦手指放置的位置不是在最准确的彩绘位置,易与墨盒相互碰撞而导致彩绘效果不佳,或者距离墨盒过远而导致彩绘效果不佳。
发明内容
本发明所要解决的技术问题是:提供一种基于手指位置识别的美甲彩绘机控制方法,以克服现有美甲彩绘机使用时用户的手指可能会放置在错误位置而影响彩绘效果的问题。
解决上述技术问题,本发明所采用的技术方案如下:
一种基于手指位置识别的美甲彩绘机控制方法,该方法所适用的美甲彩绘机设有用于放置手指的手指定位部件、用于在所述手指的甲片上进行喷绘的喷墨部件和用于带动所述喷墨部件分别沿纵向和横向移动的驱动机构,所述横向垂直于所述手指放置在所述手指定位部件上时的指向方向,其特征在于:所述的美甲彩绘机还设有侧摄像头和补光灯;所述侧摄像头的拍摄方向平行于所述横向,所述补光灯为放置在所述手指定位部件上的手指提供照明;
所述的美甲彩绘机控制方法,包括:
步骤S1、接收所述侧摄像头所拍摄的检测图像,并能基于该检测图像执行甲片检测步骤,包括:
步骤S11、基于所述检测图像,建立平面直角坐标系OXY,其中,该平面直角坐标系OXY的X轴沿所述检测图像的宽度方向延伸,Y轴沿所述检测图像的高度方向延伸;
步骤S12、在所述检测图像中,识别出所述手指的手指上沿轮廓线,并读取该手指上沿轮廓线的最高点H在所述平面直角坐标系OXY中的坐标(XH,YH),其中,在所述Y轴的方向向下的情况下,所述最高点H为所述手指上沿轮廓线中YH最小的点,在所述Y轴的方向向上的情况下,所述最高点H为所述手指上沿轮廓线中YH最大的点;
步骤S13、判断所述手指上沿轮廓线的最高点H是否在上检测线与下检测线之间,其中,所述上检测线为所述检测图像中能够表示所述喷墨部件的喷嘴沿所述纵向移动时的轨迹线段,所述下检测线与所述上检测线相平行并位于所述上检测线的下方,且所述下检测线与上检测线之间的距离为预设的有效打印距离△D;如果判断结果为是,则判定所述手指的放置位置正确,如果判断结果为否,则判定所述手指的放置位置错误。
作为本发明的优选实施方式:所述上检测线为所述美甲彩绘机经过校准步骤得到;
在所述侧摄像头能够拍摄到所述喷墨部件位于其底面上的喷嘴的情况下,所述校准步骤为:首先,通过所述驱动机构将所述喷墨部件沿所述横向移动至中间位置;其次,在确保喷墨部件的喷嘴落在所述侧摄像头的拍摄范围内的前提下,通过所述驱动机构将所述喷墨部件沿所述纵向移动至前端,将所述喷嘴的中心此时在所述检测图像中的位置标记为前端点P1;然后,在确保喷墨部件的喷嘴落在所述侧摄像头的拍摄范围内的前提下,通过所述驱动机构将所述喷墨部件沿所述纵向移动至后端,将所述喷嘴的中心此时在所述检测图像中的位置标记为后端点P2;最后,将所述前端点P1与所述后端点P2的连线作为所述上检测线;
在所述侧摄像头所拍摄的所述喷墨部件的底面平行于所述X轴的情况下,所述校准步骤为:在所述检测图像中,将所述喷墨部件的下边沿所在的直线作为所述上检测线。
为了减少因检测图像的图像变形而带来的检测误差,作为本发明的优选实施方式:所述侧摄像头的拍摄中心线位于所述喷墨部件与所述手指定位部件之间。
作为本发明的优选实施方式:所述步骤S12中,识别所述手指的手指上沿轮廓线的方法为:
步骤S12-1、对所述检测图像进行降噪处理和边缘增强处理,以得到灰度图像;
步骤S12-2、检测出所述灰度图像中的边缘线段;
步骤S12-3、对所述步骤S12-2检测出的边缘线段进行断裂补齐,即:对于相邻的两段所述边缘线段,如果该两段边缘线段的线段端部之间的距离在预设的最大断裂间距以内,则将该两个线段端部连接起来,以获得至少一条连续的边缘轮廓线段;
步骤S12-4、将每一条所述边缘轮廓线段均截断为至少一条轮廓边沿线段,该轮廓边沿线段的两端为对应边缘轮廓线段上X轴坐标最大和最小的点;
步骤S12-5、通过以下条件对步骤S12-4得到的轮廓边沿线段进行筛选,以排除并非所述手指上沿轮廓线的轮廓边沿线段,并将剩余的轮廓边沿线段认定为所述手指上沿轮廓线;
条件一、如果某一轮廓边沿线段的长度小于预设的最小甲片上沿线段长度,则排除该轮廓边沿线段;
条件二、如果某一轮廓边沿线段的上侧区域亮度超过下侧区域亮度的差值在预设亮度阈值以上,则排除该轮廓边沿线段,其中,所述上侧区域亮度和下侧区域亮度分别为位于对应轮廓边沿线段的上侧和下侧的预设区域范围内的平均亮度。
作为本发明的优选实施方式:所述步骤S12-4中,先对各条所述边缘轮廓线段进行扫描,再将每一条被扫描到的边缘轮廓线段均截断为至少一条轮廓边沿线段;其中,所述扫描方式为:
预设用于启动扫描的X轴坐标,记为起始坐标XS,对每一条经过该起始坐标的所述边缘轮廓线段进行扫描,即:以所述边缘轮廓线段位于所述起始坐标XS上的点作为所述轮廓边沿线段的起始点,从该起始点开始,向所述手指的指尖方向扫描该边缘轮廓线段,且在扫描到该边缘轮廓线段上的分叉点时,沿多根分叉线段中位于最上方的分叉线段继续进行扫描,直至扫描至相应线段上X轴坐标最靠近所述手指的指尖所在X轴坐标的点并以该点作为所述轮廓边沿线段的末端点,使得位于所述起始点与末端点并在上述扫描过程中被扫描到的点组成所述轮廓边沿线段。
所述步骤S12-5中,对步骤S12-4得到的轮廓边沿线段进行筛选的条件还包括:
条件三、如果某一轮廓边沿线段的下侧区域颜色在预设的多种肤色颜色范围值以内,则排除该轮廓边沿线段,其中,所述下侧区域颜色分别为位于对应轮廓边沿线段的下侧的预设区域范围内的平均颜色。
作为本发明的优选实施方式:所述的步骤S1中,按预设的采样频率提取所述侧摄像头所拍摄的检测图像,并且,对所提取的每一幅所述检测图像,均执行一次所述甲片检测步骤。
作为本发明的优选实施方式:所述的美甲彩绘机控制方法,还包括:
步骤S2、在所述美甲彩绘机的工作过程中,当判定所述手指的放置位置正确时,控制所述美甲彩绘机正常工作,当判定所述手指的放置位置错误时,控制所述美甲彩绘机停止工作。
作为本发明的优选实施方式:所述的美甲彩绘机控制方法,还包括:
步骤S3、检测所述检测图像,判断是否存在反光区域,该反光区域的平均亮度和面积分别在预设的亮度阈值和面积阈值以上,如果判断判断结果为是,则判定所述手指未放置在手指定位部件上,如果判断结果为否,则判定所述手指已放置在手指定位部件上。
作为本发明的优选实施方式:所述的美甲彩绘机控制方法,还包括:
步骤S4、当所述步骤S3判定所述手指未放置在手指定位部件上时,控制所述美甲彩绘机停止工作。
作为本发明的优选实施方式:所述的美甲彩绘机控制方法按照以下两种方式之一实施:
方式一、所述的美甲彩绘机设有通信模块,该通信模块能够将所述侧摄像头所拍摄的检测图像发送给外部控制设备,且所述外部控制设备能够通过所述通信模块发送用于控制所述美甲彩绘机的控制指令,所述美甲彩绘机控制方法在所述外部控制设备上实施;
方式二、所述的美甲彩绘机设有控制系统,所述美甲彩绘机控制方法在所述控制系统上实施。
与现有技术相比,本发明具有以下有益效果:
第一,本发明通过侧摄像头抓取检测图像,并基于抓取到的检测图像,分析判断出用户手指的手指上沿轮廓线的最高点H是否在上检测线与下检测线之间,以此检测出用户手指的放置位置是否正确,即检测出:用户手指的甲片是否过高而有可能与喷墨部件发生碰撞,或者,用户手指的甲片是否过低而有可能导致甲片上的喷绘图像不清晰,从而,本发明依据此检测判断能够避免甲片上的喷绘效果因用户手指的放置位置不正确而受到影响。
第二,本发明通过校准步骤确定上检测线和下检测线在检测图像中的位置,使得本发明能够适用于存在不同装配误差的美甲彩绘机,降低了对侧摄像头的装配精度要求,实施成本得以降低。
第三,本发明通过在步骤S12-4中以特定的扫描方式扫描边缘轮廓线段来获得轮廓边沿线段,并在步骤S12-5中增设条件三,能够更为可靠的筛选出手指上沿轮廓线,以适应于手指在美甲彩绘机中的应用环境。
附图说明
下面结合附图和具体实施例对本发明作进一步的详细说明:
图1为本发明的美甲彩绘机的主视结构示意图;
图2为本发明的美甲彩绘机的俯视结构示意图;
图3为本发明中侧摄像头和补光灯的位置示意图;
图4为本发明中检测图像的示意图。
具体实施方式
如图1至图4所示,本发明公开的是一种基于手指位置识别的美甲彩绘机控制方法,该方法所适用的美甲彩绘机设有用于放置手指3的手指定位部件1、用于在手指3的甲片上进行喷绘的喷墨部件2和用于带动喷墨部件2分别沿纵向和横向移动的驱动机构,横向垂直于手指3放置在手指定位部件1上时的指向方向。
本发明的发明构思为:
本发明的美甲彩绘机还设有侧摄像头4和补光灯5;侧摄像头4的拍摄方向平行于横向,补光灯5为放置在手指定位部件1上的手指3提供照明,补光灯5优选采用LED灯,但也可采用其它合适类型的光源;
所述的美甲彩绘机控制方法,包括:
步骤S1、接收侧摄像头4所拍摄的检测图像6,并基于该检测图像6执行甲片检测步骤,包括:
步骤S11、基于检测图像6,建立平面直角坐标系OXY,其中,该平面直角坐标系OXY的X轴沿检测图像6的宽度方向延伸,Y轴沿检测图像6的高度方向延伸;
步骤S12、在检测图像6中,识别出手指3的手指上沿轮廓线,并读取该手指上沿轮廓线的最高点H在平面直角坐标系OXY中的坐标(XH,YH),其中,在Y轴的方向向下的情况下,最高点H为手指上沿轮廓线中YH最小的点,在Y轴的方向向上的情况下,最高点H为手指上沿轮廓线中YH最大的点;
步骤S13、判断手指上沿轮廓线的最高点H是否在上检测线L1与下检测线L2之间,其中,上检测线L1为检测图像6中能够表示喷墨部件2的喷嘴21沿纵向移动时的轨迹线段,下检测线L2与上检测线L1相平行并位于上检测线L1的下方,且下检测线L2与上检测线L1之间的距离为预设的有效打印距离△D,该有效打印距离△D一般在2.5mm至2.8mm,但也可按实际需要设置;如果判断结果为是,则判定手指3的放置位置正确,如果判断结果为否,则判定手指3的放置位置错误。
在上述发明构思的基础上,本发明采用以下优选的结构:
作为本发明的优选实施方式:上检测线L1为美甲彩绘机经过校准步骤得到;
在侧摄像头4能够拍摄到喷墨部件2位于其底面上的喷嘴21的情况下,校准步骤为:首先,通过驱动机构将喷墨部件2沿横向移动至中间位置;其次,在确保喷墨部件2的喷嘴21落在侧摄像头4的拍摄范围内的前提下,通过驱动机构将喷墨部件2沿纵向移动至前端,将喷嘴21的中心此时在检测图像6中的位置标记为前端点P1;然后,在确保喷墨部件2的喷嘴21落在侧摄像头4的拍摄范围内的前提下,通过驱动机构将喷墨部件2沿纵向移动至后端,将喷嘴21的中心此时在检测图像6中的位置标记为后端点P2;最后,将前端点P1与后端点P2的连线作为上检测线L1;
在侧摄像头4所拍摄的喷墨部件2的底面平行于X轴的情况下,校准步骤为:在检测图像6中,将喷墨部件2的下边沿所在的直线作为上检测线L1,在此情况下,该上检测线L1平行于X轴。
为了减少因检测图像6的图像变形而带来的检测误差,作为本发明的优选实施方式:侧摄像头4的拍摄中心线4a位于喷墨部件2与手指定位部件1之间。
作为本发明的优选实施方式:步骤S1中,按预设的采样频率提取侧摄像头4所拍摄的检测图像6,并且,对所提取的每一幅检测图像6,均执行一次甲片检测步骤。从而,在美甲彩机的整个美甲彩绘过程中,均能对用户的手指3是否放置在正确的位置进行检测。
作为本发明的优选实施方式:美甲彩绘机控制方法,还包括:
步骤S2、在美甲彩绘机的工作过程中,当判定手指3的放置位置正确时,控制美甲彩绘机正常工作,当判定手指3的放置位置错误时,控制美甲彩绘机停止工作,且还可发出报警提示,以提示用户调整手指3至正确的放置位置。
作为本发明的优选实施方式:美甲彩绘机控制方法,还包括:
步骤S3、检测检测图像6,判断是否存在反光区域,该反光区域的平均亮度和面积分别在预设的亮度阈值和面积阈值以上,如果判断判断结果为是,则判定手指3未放置在手指定位部件1上,如果判断结果为否,则判定手指3已放置在手指定位部件1上。
作为本发明的优选实施方式:美甲彩绘机控制方法,还包括:
步骤S4、当步骤S3判定手指3未放置在手指定位部件1上时,控制美甲彩绘机停止工作,且还可发出报警提示,以提示用户。
作为本发明的优选实施方式:美甲彩绘机控制方法按照以下两种方式之一实施:
方式一、美甲彩绘机设有通信模块,该通信模块能够将侧摄像头4所拍摄的检测图像6发送给外部控制设备,且外部控制设备能够通过通信模块发送用于控制美甲彩绘机的控制指令,美甲彩绘机控制方法在外部控制设备上实施;其中,外部控制设备可以是手机、平板电脑等移动设备,也可以是个人电脑、服务器等,通信模块可以采用无线通信方式也可以采用优先通信方式。
方式二、美甲彩绘机设有控制系统,美甲彩绘机控制方法在控制系统上实施。
上述步骤S12中,识别手指3的手指上沿轮廓线的方法,可以采用以下两种实施例之一:
实施例一
本实施例一中,上述步骤S12识别手指3的手指上沿轮廓线的方法为:
步骤S12-1、对检测图像6进行降噪处理和边缘增强处理,以得到灰度图像;
步骤S12-2、检测出灰度图像中的边缘线段;
其中,该检测方法可以是Canny、Sobel等现有的边缘检测算法。
步骤S12-3、对步骤S12-2检测出的边缘线段进行断裂补齐,即:对于相邻的两段边缘线段,如果该两段边缘线段的线段端部之间的距离在预设的最大断裂间距以内,则将该两个线段端部连接起来,以获得至少一条连续的边缘轮廓线段;
其中,由于美甲彩绘机对用户手指3的甲片进行美甲彩绘时,甲片上需要涂上指甲油可以PP或PG胶等,这就使得:在补光灯5的照亮下,甲片在侧摄像头4所拍摄的检测图像6中呈现出高亮的状态,因此,经过步骤S12-1至步骤S12-3的处理,得到的边缘轮廓线段中必然包含有用户手指3的甲片边缘轮廓线3a;而且,基于侧摄像头4的拍摄范围、美甲彩绘机的内部结构等不同影响因素,步骤S12-3得到的边缘轮廓线段中还可能包含有用户手指3的指腹轮廓线3b、用户手指3的指头上沿轮廓线3c和位于检测图像6背景中的干扰轮廓线2a,该干扰轮廓线2a是补光灯5照射美甲彩绘机的内部结构如喷墨部件2所形成阴影产生的边缘轮廓。
步骤S12-4、将每一条边缘轮廓线段均截断为至少一条轮廓边沿线段,该轮廓边沿线段的两端为对应边缘轮廓线段上X轴坐标最大和最小的点;
举例来说:在步骤S12-3获得的边缘轮廓线段包括甲片边缘轮廓线3a、指腹轮廓线3b和干扰轮廓线2a的情况下,甲片边缘轮廓线3a被截断为甲片上沿线段3a1和甲片下沿线段3a2两条轮廓边沿线段,指腹轮廓线3b和干扰轮廓线2a分别为轮廓边沿线段;而在用户的手指3伸入美甲彩绘机内较多而使指头上沿轮廓线3c也被步骤S12-3获得的情况下,甲片边缘轮廓线3a和指头上沿轮廓线3c作为一条轮廓边沿线段。
步骤S12-5、通过以下条件对步骤S12-4得到的轮廓边沿线段进行筛选,以排除并非手指上沿轮廓线的轮廓边沿线段,并将剩余的轮廓边沿线段认定为手指上沿轮廓线;
条件一、如果某一轮廓边沿线段的长度小于预设的最小甲片上沿线段长度,则排除该轮廓边沿线段;也即:排除掉步骤S12-4得到的轮廓边沿线段中,长度过短而不可能包含甲片上沿线段3a1的线段。
条件二、如果某一轮廓边沿线段的上侧区域亮度超过下侧区域亮度的差值在预设亮度阈值以上,则排除该轮廓边沿线段,其中,上侧区域亮度和下侧区域亮度分别为位于对应轮廓边沿线段的上侧和下侧的预设区域范围内的平均亮度;也即:排除掉因补光灯5照明形成阴影所产生的干扰轮廓线2a。
举例来说:在步骤S12-3获得的边缘轮廓线段包括甲片边缘轮廓线3a、指腹轮廓线3b和干扰轮廓线2a的情况下,手指上沿轮廓线的最高点H(XH,YH)位于甲片上沿线段3a1上;而在用户的手指3伸入美甲彩绘机内较多而使指头上沿轮廓线3c也被步骤S12-3获得的情况下,手指上沿轮廓线的最高点H(XH,YH)位于指头上沿轮廓线3c上。
实施例二
本实施例二中,上述步骤S12识别手指3的手指上沿轮廓线的方法,在上述实施例一的基础上,还包括:
步骤S12-4中,先对各条边缘轮廓线段进行扫描,再将每一条被扫描到的边缘轮廓线段均截断为至少一条轮廓边沿线段;其中,扫描方式为:
预设用于启动扫描的X轴坐标,记为起始坐标XS,对每一条经过该起始坐标的边缘轮廓线段进行扫描,即:以边缘轮廓线段位于起始坐标XS上的点作为轮廓边沿线段的起始点,从该起始点开始,向手指3的指尖方向扫描该边缘轮廓线段起始坐标XS可根据实际应用需要设置,例如:根据起始坐标XS的不同设置,前述边缘轮廓线段上的点可以是图4中的点(XS,YS1)和点(XS,YS2),也可以是点(XS,YS3);,且在扫描到该边缘轮廓线段上的分叉点时,沿多根分叉线段中位于最上方的分叉线段继续进行扫描(例如:扫描到图4中的分叉点F时,位于最上方的分叉线段即为甲片上沿线段3a1),放弃扫描位于下方的其它分叉线段,直至扫描至相应线段上X轴坐标最靠近手指3的指尖所在X轴坐标的点并以该点作为轮廓边沿线段的末端点,使得位于起始点与末端点并在上述扫描过程中被扫描到的点组成轮廓边沿线段。
步骤S12-5中,对步骤S12-4得到的轮廓边沿线段进行筛选的条件还包括:
条件三、如果某一轮廓边沿线段的下侧区域颜色在预设的多种肤色颜色范围值以内,则排除该轮廓边沿线段,其中,下侧区域颜色分别为位于对应轮廓边沿线段的下侧的预设区域范围内的平均颜色;也即:排除掉甲片下沿线段3a2。
本发明不局限于上述具体实施方式,根据上述内容,按照本领域的普通技术知识和惯用手段,在不脱离本发明上述基本技术思想前提下,本发明还可以做出其它多种形式的等效修改、替换或变更,均落在本发明的保护范围之中。例如:喷墨部件2可以是与喷嘴21一体的墨盒,也可以是与墨盒分体的喷墨专用部件。又如:补光灯5优选布置在侧摄像头4的侧方,但也可布置在其他合适的位置,以能够为手指3提供照明为准。

Claims (10)

1.一种基于手指位置识别的美甲彩绘机控制方法,该方法所适用的美甲彩绘机设有用于放置手指(3)的手指定位部件(1)、用于在所述手指(3)的甲片上进行喷绘的喷墨部件(2)和用于带动所述喷墨部件(2)分别沿纵向和横向移动的驱动机构,所述横向垂直于所述手指(3)放置在所述手指定位部件(1)上时的指向方向;
其特征在于:所述的美甲彩绘机还设有侧摄像头(4)和补光灯(5);所述侧摄像头(4)的拍摄方向平行于所述横向,所述补光灯(5)为放置在所述手指定位部件(1)上的手指(3)提供照明;
所述的美甲彩绘机控制方法,包括:
步骤S1、接收所述侧摄像头(4)所拍摄的检测图像(6),并基于该检测图像(6)执行甲片检测步骤,包括:
步骤S11、基于所述检测图像(6),建立平面直角坐标系OXY,其中,该平面直角坐标系OXY的X轴沿所述检测图像(6)的宽度方向延伸,Y轴沿所述检测图像(6)的高度方向延伸;
步骤S12、在所述检测图像(6)中,识别出所述手指(3)的手指上沿轮廓线,并读取该手指上沿轮廓线的最高点H在所述平面直角坐标系OXY中的坐标(XH,YH),其中,在所述Y轴的方向向下的情况下,所述最高点H为所述手指上沿轮廓线中YH最小的点,在所述Y轴的方向向上的情况下,所述最高点H为所述手指上沿轮廓线中YH最大的点;
步骤S13、判断所述手指上沿轮廓线的最高点H是否在上检测线(L1)与下检测线(L2)之间,其中,所述上检测线(L1)为所述检测图像(6)中能够表示所述喷墨部件(2)的喷嘴(21)沿所述纵向移动时的轨迹线段,所述下检测线(L2)与所述上检测线(L1)相平行并位于所述上检测线(L1)的下方,且所述下检测线(L2)与上检测线(L1)之间的距离为预设的有效打印距离△D;如果判断结果为是,则判定所述手指(3)的放置位置正确,如果判断结果为否,则判定所述手指(3)的放置位置错误。
2.根据权利要求1所述基于手指位置识别的美甲彩绘机控制方法,其特征在于:所述上检测线(L1)为所述美甲彩绘机经过校准步骤得到;
在所述侧摄像头(4)能够拍摄到所述喷墨部件(2)位于其底面上的喷嘴(21)的情况下,所述校准步骤为:首先,通过所述驱动机构将所述喷墨部件(2)沿所述横向移动至中间位置;其次,在确保喷墨部件(2)的喷嘴(21)落在所述侧摄像头(4)的拍摄范围内的前提下,通过所述驱动机构将所述喷墨部件(2)沿所述纵向移动至前端,将所述喷嘴(21)的中心此时在所述检测图像(6)中的位置标记为前端点P1;然后,在确保喷墨部件(2)的喷嘴(21)落在所述侧摄像头(4)的拍摄范围内的前提下,通过所述驱动机构将所述喷墨部件(2)沿所述纵向移动至后端,将所述喷嘴(21)的中心此时在所述检测图像(6)中的位置标记为后端点P2;最后,将所述前端点P1与所述后端点P2的连线作为所述上检测线(L1);
在所述侧摄像头(4)所拍摄的所述喷墨部件(2)的底面平行于所述X轴的情况下,所述校准步骤为:在所述检测图像(6)中,将所述喷墨部件(2)的下边沿所在的直线作为所述上检测线(L1)。
3.根据权利要求1所述基于手指位置识别的美甲彩绘机控制方法,其特征在于:所述侧摄像头(4)的拍摄中心线(4a)位于所述喷墨部件(2)与所述手指定位部件(1)之间。
4.根据权利要求1至3任意一项所述基于手指位置识别的美甲彩绘机控制方法,其特征在于:所述步骤S12中,识别所述手指(3)的手指上沿轮廓线的方法为:
步骤S12-1、对所述检测图像(6)进行降噪处理和边缘增强处理,以得到灰度图像;
步骤S12-2、检测出所述灰度图像中的边缘线段;
步骤S12-3、对所述步骤S12-2检测出的边缘线段进行断裂补齐,即:对于相邻的两段所述边缘线段,如果该两段边缘线段的线段端部之间的距离在预设的最大断裂间距以内,则将该两段边缘线段的线段端部连接起来,以获得至少一条连续的边缘轮廓线段;
步骤S12-4、将每一条所述边缘轮廓线段均截断为至少一条轮廓边沿线段,该轮廓边沿线段的两端为对应边缘轮廓线段上X轴坐标最大和最小的点;
步骤S12-5、通过以下条件对步骤S12-4得到的轮廓边沿线段进行筛选,以排除并非所述手指上沿轮廓线的轮廓边沿线段,并将剩余的轮廓边沿线段认定为所述手指上沿轮廓线;
条件一、如果某一轮廓边沿线段的长度小于预设的最小甲片上沿线段长度,则排除该轮廓边沿线段;
条件二、如果某一轮廓边沿线段的上侧区域亮度超过下侧区域亮度的差值在预设亮度阈值以上,则排除该轮廓边沿线段,其中,所述上侧区域亮度和下侧区域亮度分别为位于对应轮廓边沿线段的上侧和下侧的预设区域范围内的平均亮度。
5.根据权利要求4所述基于手指位置识别的美甲彩绘机控制方法,其特征在于:所述步骤S12-4中,先对各条所述边缘轮廓线段进行扫描,再将每一条被扫描到的边缘轮廓线段均截断为至少一条轮廓边沿线段;其中,所述扫描方式为:
预设用于启动扫描的X轴坐标,记为起始坐标XS,对每一条经过该起始坐标的所述边缘轮廓线段进行扫描,即:以所述边缘轮廓线段位于所述起始坐标XS上的点作为所述轮廓边沿线段的起始点,从该起始点开始,向所述手指(3)的指尖方向扫描该边缘轮廓线段,且在扫描到该边缘轮廓线段上的分叉点时,沿多根分叉线段中位于最上方的分叉线段继续进行扫描,直至扫描至相应线段上X轴坐标最靠近所述手指(3)的指尖所在X轴坐标的点并以该点作为所述轮廓边沿线段的末端点,使得位于所述起始点与末端点并在上述扫描过程中被扫描到的点组成所述轮廓边沿线段;
所述步骤S12-5中,对步骤S12-4得到的轮廓边沿线段进行筛选的条件还包括:
条件三、如果某一轮廓边沿线段的下侧区域颜色在预设的多种肤色颜色范围值以内,则排除该轮廓边沿线段,其中,所述下侧区域颜色分别为位于对应轮廓边沿线段的下侧的预设区域范围内的平均颜色。
6.根据权利要求1至3任意一项所述基于手指位置识别的美甲彩绘机控制方法,其特征在于:所述的步骤S1中,按预设的采样频率提取所述侧摄像头(4)所拍摄的检测图像(6),并且,对所提取的每一幅所述检测图像(6),均执行一次所述甲片检测步骤。
7.根据权利要求1至3任意一项所述基于手指位置识别的美甲彩绘机控制方法,其特征在于:所述的美甲彩绘机控制方法,还包括:
步骤S2、在所述美甲彩绘机的工作过程中,当判定所述手指(3)的放置位置正确时,控制所述美甲彩绘机正常工作,当判定所述手指(3)的放置位置错误时,控制所述美甲彩绘机停止工作。
8.根据权利要求1至3任意一项所述基于手指位置识别的美甲彩绘机控制方法,其特征在于:所述的美甲彩绘机控制方法,还包括:
步骤S3、检测所述检测图像(6),判断是否存在反光区域,该反光区域的平均亮度和面积分别在预设的亮度阈值和面积阈值以上,如果判断判断结果为是,则判定所述手指(3)未放置在手指定位部件(1)上,如果判断结果为否,则判定所述手指(3)已放置在手指定位部件(1)上。
9.根据权利要求8所述基于手指位置识别的美甲彩绘机控制方法,其特征在于:所述的美甲彩绘机控制方法,还包括:
步骤S4、当所述步骤S3判定所述手指(3)未放置在手指定位部件(1)上时,控制所述美甲彩绘机停止工作。
10.根据权利要求1至3任意一项所述基于手指位置识别的美甲彩绘机控制方法,其特征在于:所述的美甲彩绘机控制方法按照以下两种方式之一实施:
方式一、所述的美甲彩绘机设有通信模块,该通信模块能够将所述侧摄像头(4)所拍摄的检测图像(6)发送给外部控制设备,且所述外部控制设备能够通过所述通信模块发送用于控制所述美甲彩绘机的控制指令,所述美甲彩绘机控制方法在所述外部控制设备上实施;
方式二、所述的美甲彩绘机设有控制系统,所述美甲彩绘机控制方法在所述控制系统上实施。
CN201810786100.XA 2018-07-17 2018-07-17 一种基于手指位置识别的美甲彩绘机控制方法 Active CN109085795B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810786100.XA CN109085795B (zh) 2018-07-17 2018-07-17 一种基于手指位置识别的美甲彩绘机控制方法
PCT/CN2019/091321 WO2020015489A1 (zh) 2018-07-17 2019-06-14 一种基于手指位置识别的美甲彩绘机控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810786100.XA CN109085795B (zh) 2018-07-17 2018-07-17 一种基于手指位置识别的美甲彩绘机控制方法

Publications (2)

Publication Number Publication Date
CN109085795A CN109085795A (zh) 2018-12-25
CN109085795B true CN109085795B (zh) 2020-01-21

Family

ID=64837686

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810786100.XA Active CN109085795B (zh) 2018-07-17 2018-07-17 一种基于手指位置识别的美甲彩绘机控制方法

Country Status (2)

Country Link
CN (1) CN109085795B (zh)
WO (1) WO2020015489A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109085795B (zh) * 2018-07-17 2020-01-21 广州天河高新技术产业开发区太极电子有限公司 一种基于手指位置识别的美甲彩绘机控制方法
CN109766063A (zh) * 2019-01-21 2019-05-17 深圳市邻友通科技发展有限公司 一种美甲机打印校准方法、装置、美甲机及存储介质
JP6973437B2 (ja) * 2019-03-25 2021-11-24 カシオ計算機株式会社 印刷装置、印刷方法及びプログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100569531C (zh) * 2005-12-06 2009-12-16 罗春晖 多用途喷墨打印机
JP5375894B2 (ja) * 2011-08-10 2013-12-25 カシオ計算機株式会社 ネイルプリント装置及び印刷制御方法
JP5831441B2 (ja) * 2012-12-17 2015-12-09 カシオ計算機株式会社 ネイルプリント装置及びネイルプリント装置の印刷方法
JP6167728B2 (ja) * 2013-07-26 2017-07-26 カシオ計算機株式会社 ネイルプリント装置及びネイルプリント装置の制御方法
JP2016010543A (ja) * 2014-06-30 2016-01-21 カシオ計算機株式会社 描画装置
JP6439342B2 (ja) * 2014-09-22 2018-12-19 カシオ計算機株式会社 爪情報検出装置、描画装置及び爪情報検出方法
JP6435749B2 (ja) * 2014-09-26 2018-12-12 カシオ計算機株式会社 ネイルデザイン表示制御装置、ネイルプリント装置、ネイルデザイン表示制御方法及びネイルデザイン表示制御プログラム
JP6561462B2 (ja) * 2014-12-19 2019-08-21 カシオ計算機株式会社 ネイルプリント装置及びネイルプリント装置の描画方法
CN105892767A (zh) * 2014-12-24 2016-08-24 南京优触电子科技有限公司 一种基于超声波的交互设施实现方法
JP2017018456A (ja) * 2015-07-14 2017-01-26 船井電機株式会社 塗布装置、及び塗布方法
JP6699176B2 (ja) * 2016-01-06 2020-05-27 カシオ計算機株式会社 描画装置、その描画制御方法及び描画制御プログラム
CN109085795B (zh) * 2018-07-17 2020-01-21 广州天河高新技术产业开发区太极电子有限公司 一种基于手指位置识别的美甲彩绘机控制方法

Also Published As

Publication number Publication date
WO2020015489A1 (zh) 2020-01-23
CN109085795A (zh) 2018-12-25

Similar Documents

Publication Publication Date Title
CN109085795B (zh) 一种基于手指位置识别的美甲彩绘机控制方法
CN109123989B (zh) 描绘系统、终端装置及记录介质
US9712727B2 (en) Nail information detection device, drawing apparatus, and nail information detection method
US9050829B2 (en) Medium transportation device and recording apparatus
CN108944094B (zh) 印刷装置以及印刷装置的控制方法
CN111447856B (zh) 描绘装置以及描绘方法
CN107568877B (zh) 绘画装置及绘画装置的绘画方法
US10696067B2 (en) Nail printing apparatus and control method
CN111728344B (zh) 印刷装置以及印刷方法
JP7439129B2 (ja) 部品装着機
CN114193941B (zh) 印刷装置、指甲姿势确认方法以及记录介质
US20230106149A1 (en) Component mounter
WO2021166230A1 (ja) 画像処理装置および実装装置、画像処理方法
CN113408388A (zh) 基于点状喷码的检测方法及装置
CN114375259B (zh) 印刷装置、终端装置、印刷系统、印刷方法以及程序
US20220304448A1 (en) Printing apparatus and controlling method
EP3267146B1 (en) Recognition device and recognition method
JP7334826B2 (ja) ネイルプリント装置
JP4437607B2 (ja) 表面実装機
US20220203720A1 (en) Printer, control method, and non-transitory computer-readable medium storing computer-readable instructions
CN209594211U (zh) 用于贴片机的视觉补偿校正装置
CN113370661B (zh) 采用机器视觉检测喷嘴异常的方法、装置、控制板及设备
US20220305825A1 (en) Printing apparatus and control method
JP3515350B2 (ja) 液滴検知システム
CN107344446B (zh) 基于图像处理法的玻璃印刷装置以及玻璃印刷方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant