CN102922880A - 指甲打印装置及印刷控制方法 - Google Patents
指甲打印装置及印刷控制方法 Download PDFInfo
- Publication number
- CN102922880A CN102922880A CN2012102848957A CN201210284895A CN102922880A CN 102922880 A CN102922880 A CN 102922880A CN 2012102848957 A CN2012102848957 A CN 2012102848957A CN 201210284895 A CN201210284895 A CN 201210284895A CN 102922880 A CN102922880 A CN 102922880A
- Authority
- CN
- China
- Prior art keywords
- mentioned
- finger
- nail
- model
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B41—PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
- B41J—TYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
- B41J3/00—Typewriters or selective printing or marking mechanisms characterised by the purpose for which they are constructed
- B41J3/407—Typewriters or selective printing or marking mechanisms characterised by the purpose for which they are constructed for marking on special material
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B41—PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
- B41J—TYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
- B41J11/00—Devices or arrangements of selective printing mechanisms, e.g. ink-jet printers or thermal printers, for supporting or handling copy material in sheet or web form
- B41J11/008—Controlling printhead for accurately positioning print image on printing material, e.g. with the intention to control the width of margins
-
- A—HUMAN NECESSITIES
- A45—HAND OR TRAVELLING ARTICLES
- A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
- A45D29/00—Manicuring or pedicuring implements
- A45D2029/005—Printing or stamping devices for applying images or ornaments to nails
Landscapes
- Image Analysis (AREA)
- Record Information Processing For Printing (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明本发明涉及指甲打印装置及印刷控制方法。对指甲实施印刷的指甲打印装置具备摄影部、手指尺寸取得部、模型选择部、区域确定部以及印刷部。摄影部对包含作为印刷对象的指甲的手指进行摄影而取得手指图像。手指尺寸取得部从所取得的上述手指图像取得手指的尺寸。模型选择部根据所取得的上述手指的尺寸,从存储部所存储的具有相互不同形状的轮廓线的多个指甲区域提取用模型中选择1个确定的指甲区域提取用模型。区域确定部将所选择的确定的上述指甲区域提取用模型与取得的手指图像中的指甲的图像区域匹配,由此确定手指的作为印刷对象的指甲区域。印刷部具有对所确定的上述指甲区域涂敷墨的打印头。
Description
相关申请的交叉引用:本申请以申请号为日本特愿2011-176503、申请日为2011年08月12日的日本申请为基础,享受该申请的优先权,并通过参照而包含其全部内容。
技术领域
本发明涉及指甲打印装置及印刷控制方法,尤其涉及使用指甲区域提取用模型来确定实施印刷的指甲区域的指甲打印装置及其印刷控制方法。
背景技术
指甲打印装置是如下的打印装置:将要印刷的指甲的手指定位到设置在装置主体上的手指载放台上,使用喷墨方式的打印头等在该定位了的手指的指甲上印刷颜色、图样等的图像。在这种指甲打印装置中,如果不能够正确地检测手指的指甲部的区域(以下称作“指甲区域”),则不能够确定印刷位置、印刷范围。
因此,以往,在这种指甲打印装置中,为了确定指甲区域与其以外的部分之间的边界线(即、指甲部的轮廓线)而识别指甲区域,提出有如下方法:通过摄影手指图像并对所摄影的手指图像进行图像处理,由此识别对应于指甲的区域。这种指甲打印装置例如记载于日本特表2003-534083号公报。
如此,如果能够从手指图像中自动地提取指甲部的区域,则能够将用户进行输入的时间劳力抑制为最小限度,并且能够自动地检测成为印刷对象的指甲区域,而进行印刷。
但是,实际上,指甲部和皮肤的光学特性非常近似,包含相互相同的颜色信息。并且,指甲部及皮肤的颜色根据个人而多种多样。因此,仅通过对手指图像进行图像处理,不容易正确地提取指甲区域。
关于这一点,在专利文献1中仅记载有从手指图像中对手指像进行分析,而没有提及用于正确地提取、确定指甲区域的具体方法。因此,仅通过该文献所公开的技术,难以进行正确的指甲区域的提取、确定。
作为通过图像分析来提取、确定指甲区域的具体方法,可以考虑使成为模型的指甲图像与用户的手指图像匹配,而确定指甲的位置、范围。
但是,例如,与如提取脸的要素等的情况那样、各要素的配置确定的情况不同,在提取、确定指甲区域的情况下,没有成为匹配时的基准的配置。因此,难以使成为模型的指甲图像与用户的手指图像的适当位置匹配。
并且,指甲的大小、位置根据性别(男性还是女性)、体格(胖还是瘦等)、年龄(成人还是儿童)等而较大地不同,其形式也千差万别。因此,在使用指甲图像的模型来提取、确定指甲区域的情况下,需要使用与用户的性别、体格等相一致的模型。但是,在该情况下,需要用户输入性别、体格等信息,指甲打印装置的操作变得繁杂,花费时间劳力。
发明内容
本发明的目的在于提供指甲打印装置及印刷控制方法,能够自动地选择适合于用户的指甲区域提取用模型,并使用选择的指甲区域提取用模型来确定用户的指甲区域,能够迅速、高精度地进行向用户指甲的印刷。
用于实现上述目的的本发明的指甲打印装置为,在对指甲实施印刷的指甲打印装置中,具备:
摄影部,对包含作为印刷对象的指甲的手指进行摄影,取得手指图像;
手指尺寸取得部,从由上述摄影部取得的上述手指图像取得上述手指的尺寸;
存储部,存储具有相互不同形状的轮廓线的多个指甲区域提取用模型;
模型选择部,根据由上述手指尺寸取得部取得的上述手指的尺寸,从上述存储部所存储的上述多个指甲区域提取用模型中选择1个确定的指甲区域提取用模型;
区域确定部,将由上述模型选择部选择的上述确定的指甲区域提取用模型与上述手指图像中的上述指甲的图像区域匹配,由此确定上述手指的作为印刷对象的指甲区域;以及
印刷部,具有向由上述区域确定部确定的上述指甲区域涂敷墨的打印头。
用于实现上述目的的本发明的指甲打印装置的印刷控制方法为,在对指甲实施印刷的指甲打印装置的印刷控制方法中,
对包含作为印刷对象的指甲的手指进行摄影,而取得手指图像;
从上述取得的上述手指图像取得上述手指的尺寸;
根据上述取得的上述手指的尺寸,从存储部所存储的具有相互不同形状的轮廓线的多个指甲区域提取用模型中选择1个确定的指甲区域提取用模型;
将上述选择的上述确定的指甲区域提取用模型与上述手指图像中的上述指甲的图像区域匹配,由此确定上述手指的作为印刷对象的指甲区域;以及
通过打印头向上述确定的上述指甲区域涂敷墨。
附图说明
图1是表示本发明的实施方式的指甲打印装置的外观的立体图。
图2是表示本实施方式的指甲打印装置的内部结构的立体图。
图3是表示本实施方式的指甲打印装置的印刷手指固定部的截面图,表示作为印刷手指而将从食指到小指插入到印刷手指插入部时的状态。
图4是本实施方式的指甲打印装置的正面侧的截面图。
图5是本实施方式的指甲打印装置的侧面侧的截面图。
图6是表示本实施方式的指甲打印装置的控制装置的结构的主要部分框图。
图7是表示本实施方式的指甲区域提取用模型的生成处理的流程图。
图8是示意地表示用于取得成为样本的手指图像的主要部分结构的侧视图。
图9A是成为样本的多人的手指图像的第一例,图9B是表示沿着图9A的手指图像中的指甲的轮廓线配置了特征点P的状态的图。
图10A是成为样本的多人的手指图像的第二例,图10B是表示沿着图10A的手指图像中的指甲的轮廓线配置了特征点P的状态的图。
图11A是成为样本的多人的手指图像的第三例,图11B是表示沿着图11A的手指图像中的指甲的轮廓线配置了特征点P的状态的图。
图12是表示样本文件的一例的图。
图13是表示指甲区域提取用模型的一例的图。
图14A是成为男性用的指甲区域提取用模型生成的样本的多个男性的手指图像的一例,图14B是表示男性用的指甲区域提取用模型的一例的图。
图15A是成为女性用的指甲区域提取用模型生成的样本的多个女性的手指图像的一例,图15B是表示女性用的指甲区域提取用模型的一例的图。
图16是用于说明对指甲区域提取用模型进行扫描而设定基准点的方法的一例的说明图。
图17是表示本实施方式的印刷控制处理的流程图。
图18是表示本实施方式的印刷控制处理中的模型选择处理的流程图。
图19是表示本实施方式的印刷控制处理中的区域调整处理及印刷处理的流程图。
图20是表示印刷手指的手指图像的一例的图。
图21是表示从图20的手指图像生成的扫描用图像的一例的图。
图22是说明对扫描用图像进行扫描而设定最大手指宽度及基准像素的方法的一例的说明图。
图23是表示将指甲区域提取用模型配置在印刷手指的手指图像上的初始位置的状态的图。
图24是表示使指甲区域提取用模型与印刷手指的手指图像的指甲区域匹配的状态的图。
具体实施方式
以下,对于本发明的指甲打印装置及其印刷控制方法,表示实施方式而进行详细说明。
图1是表示本发明的实施方式的指甲打印装置的外观的立体图。
图2是表示本实施方式的指甲打印装置的内部结构的立体图。
图3是表示本实施方式的指甲打印装置的印刷手指固定部的截面图,表示作为印刷手指而将从食指到小指插入到印刷手指插入部时的状态。
如图1所示,该指甲打印装置1具备壳主体2及盖体4。该壳主体2及盖体4经由设置在壳主体2的上面后端部的铰链3而相互连结。
上述壳主体2形成为在俯视时为椭圆状。在该壳主体2的前侧能够立起放倒地设置有开闭板2c。该开闭板2c经由设置在壳主体2的前面下端部的铰链与壳主体2连结。该开闭板2c用于对壳主体2的前面进行开闭。
在壳主体2的顶板2f上设置有后述的操作部12,在顶板2f的大致中央部设定有显示部13。
另外,壳主体2及盖体4的形状、结构不限定于此处所例示的。
在壳主体2中收容有指甲打印装置1的装置主体10。
该装置主体10具备图2所示的印刷手指固定部20、摄影部30、印刷部40及控制装置50(参照图6)。
这些印刷手指固定部20、摄影部30、印刷部40及控制装置50设置在机架11上。
机架11由下部机架11a及上部机架11b构成。
下部机架11a形成为箱状,并设置在壳主体2的内部下方,上部机架11b设置在下部机架11a的上方且在壳主体2的内部上方。
印刷手指固定部20设置在机架11中的下部机架11a上。
通过在该下部机架11a上设置的印刷手指插入部20a、非印刷手指插入部20b及抓紧部20c构成印刷手指固定部20。
印刷手指插入部20a是用于插入与要印刷的指甲T相对应的手指(以下称为“印刷手指”)U1的手指插入部(参照图3)。
印刷手指插入部20a的底面(印刷手指载放面),作为载放印刷手指U1的手指载放构件起作用。
在印刷手指U1载放到该印刷手指插入部20a的印刷手指载放面上的状态下,进行印刷手指U1的摄影、印刷。
另外,印刷手指插入部20a的载放印刷手指U1的印刷手指载放面,优选形成为白色、灰色、黑色等相对于手指、指甲的颜色明亮度差较大的颜色,以便在印刷手指U1的摄影时印刷手指U1与背景之间的边界变得明确。
非印刷手指插入部20b是用于插入印刷手指以外的手指(以下称为“非印刷手指”)U2的手指插入部(参照图3)。
抓紧部20c是能够用插入到印刷手指插入部20a中的印刷手指U1和插入到非印刷手指插入部20b中的非印刷手指U2夹持的部分。
在本实施方式中,该抓紧部20c由对印刷手指插入部20a和非印刷手指插入部20b进行分隔的隔壁21构成。
该隔壁21的上面构成平坦的印刷手指载放面。
在构成印刷手指载放面的隔壁21的上面上,设置有用于对印刷手指U1进行定位的定位标记211(参照后述的图20)。
定位标记211只要能够对印刷手指U1进行定位即可,其形状、位置不特别限定。定位标记211可以是设置在隔壁21的上面上的凹部、也可以是凸部。
在用户通过显示部13来确认由摄影部30摄影的图像的同时进行印刷手指U1的插入的情况下,定位标记211也可以只是以能够与印刷手指载放面的颜色进行区别的颜色印刷的平面标识等。
也可以代替定位标记211,而将通过与印刷手指U1的前端部触碰来进行定位的触碰部件,设置在隔壁21的上面上。
如图3所示,在该隔壁21的供手指插入一侧的端部上,形成有鼓出部22。该鼓出部22形成于在将印刷手指U1及非印刷手指U2较深地插入到印刷手指插入部20a及非印刷手指插入部20b时、印刷手指U1及非印刷手指U2的指根U3所抵接的部分。
鼓出部22的手指插入方向的截面,例如以从隔壁21的下面朝向下方鼓出的方式形成为圆形。由此,在印刷手指U1的指腹整体与印刷手指载放面抵接的状态下,能够用印刷手指U1和非印刷手指U2较强地夹持隔壁21(抓紧部20c)。鼓出部22的截面形状不限定于圆形,也可以是椭圆形、多边形等非圆形。
例如,在左手的拇指以外的4根手指(食指、中指、无名指及小指)成为印刷手指U1的情况下,如图3所示,用户将4根印刷手指U1插入到印刷手指插入部20a中,将作为非印刷手指U2的拇指插入到非印刷手指插入部20b中。在该情况下,用户用插入到印刷手指插入部20a中的印刷手指U1和插入到非印刷手指插入部20b中的非印刷手指U2来夹持抓紧部20c,由此印刷手指U1被固定在抓紧部20c上。
在仅拇指成为印刷手指U1的情况下,将拇指(印刷手指U1)插入到印刷手指插入部20a中,将拇指以外的4根手指(非印刷手指U2)插入到非印刷手指插入部20b中。在该情况下,用户也是用印刷手指U1和非印刷手指U2来夹持抓紧部20c,由此印刷手指U1被固定。
图4是本实施方式的指甲打印装置的正面侧的截面图。
图5是本实施方式的指甲打印装置的侧面侧的截面图。
如图4及图5所示,摄影部30设置在机架11中的上部机架11b上。
在设置于上部机架11b上的基板31的中央部下面上,设置有内置了驱动器的、例如具有200万像素程度以上的像素的摄像机32。
在基板31上,以包围摄像机32的方式设置有白色LED等照明灯33。摄影部30具备该摄像机32及照明灯33而构成。
该摄影部30为,通过照明灯33对作为手指载放部的印刷手指插入部20a上所载放的印刷手指U1进行照明,通过摄像机32对该印刷手指U1进行摄影,而得到手指图像。该摄影部30与后述的控制装置50的主体控制部52连接,由该主体控制部52控制。
印刷部40对由后述的指甲区域决定部53决定的最终的印刷区域即指甲区域Ta(参照图24)实施颜色、花纹等的印刷。印刷部40主要设置在上部机架11b上。
如图4及图5所示,在上部机架11b的两侧板上,相互平行地架设有2根导杆41。在该导杆41上滑动自如地设置有主滑架42。如图5所示,在主滑架42的前壁42a及后壁42b上,相互平行地架设有2根导杆44。在该导杆44上滑动自如地设置有副滑架45。在该副滑架45的下面中央部搭载有打印头46。
在本实施方式中,该打印头46是将墨微滴化、对被印字介质直接喷吹而进行印刷的喷墨方式的打印头。另外,打印头46的记录方式不限定于喷墨方式。
主滑架42经由动力传递构件与马达43连结。此外,主滑架42构成为,通过马达43的正反转,而能够沿着导杆41在左右方向上移动。副滑架45经由动力传递构件与马达47连结。此外,副滑架45构成为,通过马达47的正反转,能够沿着导杆44在前后方向上移动。
在下部机架11a上,设置有用于向打印头46供给墨的墨盒48。墨盒48构成为,经由未图示的供墨管与打印头46连接,向打印头46适当地供给墨。也可以构成为,在打印头46本身上搭载墨盒。
印刷部40具备这些导杆41、主滑架42、马达43、导杆44、副滑架45、打印头46、马达47及墨盒48等而构成。该印刷部40的马达43、打印头46及马达47与后述的控制装置50的主体控制部52连接,由该主体控制部52控制。
操作部12是用于供用户进行各种输入的输入构件。
在操作部12上例如配置有使指甲打印装置1的电源接通的电源开关按钮、使动作停止的停止开关按钮及用于进行其他各种输入的操作按钮121。
在本实施方式中构成为,在显示部13的表面上,与显示部13一体地设置有触摸面板TP,通过未图示的手写笔等的触摸操作,能够进行各种输入。
例如,在显示部13的显示画面上,显示印刷开关按钮、使动作中止的中止开关按钮、用于供用户选择应印刷的指甲图像图案(即、应向作为印刷对象区域的指甲区域Ta印刷的所希望的设计)的图案选择开关按钮等各种操作按钮。然后,用户通过在显示部13的显示画面上触摸这些操作按钮,由此也能够进行各种输入。
在本实施方式中,通过在显示部13的显示画面上显示手指图像,并沿着该手指图像中的指甲区域Ta的轮廓线进行用手写笔等进行触摸的触摸操作,由此能够隔开预定的间隔而输入多个后述的特征点P。
显示部13例如是由液晶面板(液晶显示器(LCD:Liquid Crystal Display))等构成的显示构件。
在显示部13上,例如显示对印刷手指U1进行了摄影的手指图像、在手指图像上重叠了指甲区域提取用模型M的图像(参照图23等)、最终的指甲区域Ta(参照图24等)、应向印刷手指U1的指甲区域Ta印刷的指甲图像图案、以及设计确认用的缩略图像等。
如上所述,在该显示部13上一体地构成有触摸面板TP。
控制装置50例如设置在基板31等上,该基板31配置在上部机架11b上。
图6是表示本实施方式的指甲打印装置中的控制装置的结构的主要部分框图。
控制装置50是除了未图示的CPU(Central Processing Unit:中央处理器)之外、还具备由ROM(Read Only Memory:只读存储器)、RAM(RandomAccess Memory:随机存取存储器)等(都未图示)构成的存储部51的计算机。
在存储部51中保存有应印刷的指甲图像图案等的数据、以及指甲区域决定程序、印刷程序等各种程序。控制装置50执行这些程序而控制指甲打印装置1的各部分。
控制装置50作为印刷控制部起作用,该印刷控制部从手指图像中确定指甲区域Ta,并将印刷部40控制为对用户的印刷手指U1中、被确定为该指甲区域Ta的区域实施印刷。
并且,如后所述,控制装置50作为存储控制部起作用,该存储控制部生成指甲区域提取用模型M,并且将多个特征点P的坐标位置与特征点P的编号赋予对应、作为指甲区域提取用模型M存储到存储部51的模型用存储区域51a中。
在本实施方式中,控制装置50包括主体控制部52、指甲区域决定部53等功能部。
在本实施方式中,如图6所示,在存储部51中设置有模型用存储区域51a、模型选择用数据区域51b等各种存储区域。
模型用存储区域51a是保存有后述的多个指甲区域提取用模型M(参照图13等)、学习用模型文件及基准点Pd(图16等参照)的编号、坐标信息等的存储区域。
所谓指甲区域提取用模型M,是指为了从手指图像中确定(决定)指甲区域Ta而使用的模型。
作为指甲区域提取用模型M,越使用近似于用户的指甲区域的模型,则越能够迅速且高精度地进行指甲区域的提取、确定。但是,指甲区域的大小、形状的特征,根据用户的性别(男性还是女性)、用户的体格(例如胖还是瘦)等而不同。
因此,在本实施方式中,作为指甲区域提取用模型M,在模型用存储区域51a中存储有胖人用的指甲区域提取用模型M1、男性用的指甲区域提取用模型M2、女性用的指甲区域提取用模型M3、瘦人用的指甲区域提取用模型M4、儿童(6岁以下)用的指甲区域提取用模型M5、具有相互不同的轮廓线的5种指甲区域提取用模型M。
另外,以下在仅说明为“指甲区域提取用模型M”的情况下,包含所有这5种指甲区域提取用模型M1~M5。
另外,指甲区域提取用模型M不限定于这5种。例如,也可以存储有根据年龄层不同(10-20岁、30-40岁、50-60岁……)等而进一步细分化的指甲区域提取用模型M。
并且,也可以按照各手指(拇指、食指、中指、无名指、小指)的每个指甲准备指甲区域提取用模型M。
或者,不限定于此处所例示的准备所有指甲区域提取用模型M的情况,例如也可以在模型用存储区域51a中仅存储男性用的指甲区域提取用模型M2、女性用的指甲区域提取用模型M3。
模型选择用数据区域51b是存储有进行模型选择处理所需要的各种数据的存储区域,该模型选择处理是从模型用存储区域51a所存储的多个指甲区域提取用模型M中选择适合于用户的手指的模型的处理。
在本实施方式中,根据用户的印刷手指U1的尺寸,从存储部51的模型用存储区域51a所存储的上述5种指甲区域提取用模型M(M1~M5)中,选择适合于用户的1个指甲区域提取用模型M。
因此,在模型选择用数据区域51b中,作为用于选择指甲区域提取用模型M的数据,与各指甲区域提取用模型M相对应的手指的最大手指宽度(即、手指的宽度最大的部分的宽度尺寸)的值,被存储为用于选择各指甲区域提取用模型的阈值数据。
通过统计已知手指宽度根据性别、体格的差异而不同(关于性别,例如参照制品评价技术基盘机构编的“人特性数据库”等)。因此,能够根据最大手指宽度来推测用户的性别、体格等,而能够选择适合于用户的指甲区域提取用模型M。
具体来说,在本实施方式中,若用户的印刷手指U1的最大手指宽度为20mm以上,则应用胖人用的指甲区域提取用模型M1。若用户的印刷手指U1的最大手指宽度为18mm以上且不足20mm,则应用男性用的指甲区域提取用模型M2。若用户的印刷手指U1的最大手指宽度为15mm以上且不足18mm,则应用女性用的指甲区域提取用模型M3。若用户的印刷手指U1的最大手指宽度为13mm以上且不足15mm,则应用瘦人用的指甲区域提取用模型M4。若用户的印刷手指U1的最大手指宽度不足13mm,则应用儿童(6岁以下)用的指甲区域提取用模型M5。如此,对于指甲区域提取用模型M1至M5的各自,预先决定手指的最大手指宽度的阈值,并存储到模型选择用数据区域51b中。
另外,用于从模型选择用数据区域51b所存储的指甲区域提取用模型M(M1~M5)中选择适合于用户的模型的数据,不限定于此处所例示的数据。此外,用于选择指甲区域提取用模型M的阈值不限定于此处所例示的阈值,也可以适当变更。
指甲区域提取用模型M也可以在指甲打印装置1的工厂出货前的阶段被预先生成,并保存到所出货的各指甲打印装置1的存储部51的模型用存储区域51a。
或者,也可以在使用指甲打印装置1的用户处、在该指甲打印装置1中生成指甲区域提取用模型M,并保存到其存储部51的模型用存储区域51a。
以下,对在指甲打印装置1中生成指甲区域提取用模型M的方法进行说明。
图7是表示本实施方式的指甲区域提取用模型的生成处理的流程图。
图8是示意地表示用于取得成为样本的手指图像的主要部分结构的侧视图。
图9A是成为样本的多人的手指图像的第一例,图9B是表示沿着图9A的手指图像中的指甲的轮廓线配置了特征点P的状态的图。
图10A是成为样本的多人的手指图像的第二例,图10B是表示沿着图10A的手指图像中的指甲的轮廓线配置了特征点P的状态的图。
图11A是成为样本的多人的手指图像的第三例,图11B是表示沿着图11A的手指图像中的指甲的轮廓线配置了特征点P的状态的图。
图12是表示样本文件的一例的图。
如图7所示,在生成指甲区域提取用模型M时,首先取得成为样本的多人的手指图像(即、手指Us及其指甲T的图像。参照图9A、图10A、图11A)(步骤S1)。
具体而言,如图8所示,用户与进行实际的印刷时同样,在指甲打印装置1的印刷手指插入部20a上载放成为样本的手指Us,通过摄影部30对该手指Us进行摄影,而取得人数量(例如30人)的手指图像。
在此,不特别限定取得几人量的手指图像,但是人数越多,则越能够生成能够进行高精度的指甲区域Ta的提取、确定的指甲区域提取用模型M,是较优选的。
另外,在本实施方式中,如上述那样生成5种指甲区域提取用模型M(M1~M5),并存储到存储部51中。因此,对每个对象组(即、男性、女性、胖人、瘦人、6岁以下的儿童)取得成为样本的多人的手指图像。
另外,在本实施方式中,以在存储部51中仅保存5种指甲区域提取用模型M1~M5的情况为例进行说明。但是,如上所述,存储部51中所保存的指甲区域提取用模型M不限定于这5种。
在预先存储其他指甲区域提取用模型M的情况下,也可以取得属于与其对应的分类的多人的手指图像作为样本,并生成按照各种类的个别的指甲区域提取用模型M。例如,如果是生成30-40岁的人用的指甲区域提取用模型M的情况,则取得30-40岁的多人的手指图像。
所取得的手指图像的数据,被输入到作为计算机的控制装置50的存储部51的模型用存储区域51a中(步骤S2)。
接着,如图9A、图10A、图11A所示,使所取得的各手指图像依次显示在指甲打印装置1的显示部13。然后,使用者使用配置在显示部13上部的触摸面板TP,沿着各手指图像中的指甲T的轮廓线,通过手写笔等的触摸操作,几乎等间隔地配置特征点P(参照图9B、图10B、图11B)。由此,各手指图像的各特征点P的位置信息被输入作为计算机的控制装置50中(步骤S3)。
另外,在本实施方式中,以使用手写笔等来输入特征点P的情况为例进行说明,但是输入用设备不限定于手写笔等,也可以使用人的手指、鼠标等指示设备来进行输入。
另外,如图9B、图10B、图11B所示那样,指甲T的轮廓根据人的不同而多种多样,但是无论是哪种配置、形状的指甲T,使配置的特征点P的数量都相同。
在本实施方式中,使特征点P的数量为18个。但是,特征点P的数量不限定于此。特征点P的个数越多,则越能够细致地表现指甲的轮廓线,越能够生成高精度的指甲区域提取用模型M。
并且,特征点P的配置方式也不限定于图示例。例如,也可以以包围指甲T的轮廓的方式,在指甲T的下侧(即、特征点P的No.1和No.18之间)也配置特征点P。
如图9B、图10B、图11B所示,对各手指图像中的各特征点P依次赋予共通的编号(在本实施方式中,从指甲T的左下开始依次为No.1~No.18)。然后,控制装置50生成将该编号与各特征点P的坐标值赋予对应的样本文件(文本文件),并存储到模型用存储区域51a(步骤S4)。
图12表示该样本文件的一例。例如,关于图9A所示的样本的手指Us的手指图像的样本文件,成为图9B所表示的各特征点P的编号与该特征点P的坐标值被赋予对应的文件。在此,各特征点P的坐标值与构成手指图像的多个像素的位置相对应。各特征点P的坐标值的x坐标、y坐标的值,例如表示后述的图16所示那种、构成手指图像的多个像素中的以手指图像的1个角为原点的X軸的像素的编号和Y轴的像素的编号。在此,X轴是沿着手指的宽度方向的方向,Y轴是与X方向正交的方向、是沿着手指的长度方向的方向。
接着,控制装置50判断在当初所输入的手指图像(在本实施方式中为30人量的数据)中是否剩余未赋予特征点P的图像(步骤S5)。
然后,在由控制装置50判断为剩余未赋予特征点P的图像的情况下(步骤S5:是),对还未赋予特征点P的手指图像重复步骤S3及步骤S4的处理。
另一方面,在由控制装置50判断为没有剩余未赋予特征点P的图像的情况下(步骤S5:否),控制装置50计算各样本文件中的手指图像的各特征点P的坐标值的平均值以及特征点P所包围的区域的亮度值的平均值(步骤S6)。
坐标值的平均值的计算方法例如为,对于各特征点P,在将所有手指图像的坐标值相加之后、除以人数。即,例如,对于第一个特征点P,在将30人量的坐标值相加之后、除以30,由此得到该第一个特征点P的坐标值的平均值。
关于亮度值的平均值也同样,例如,在将30人量的亮度值相加之后、除以30,由此进行计算。
并且,控制装置50对各样本文件中的手指图像的各特征点P的坐标值与各坐标值的平均值之间的偏差进行主成分分析(步骤S7)。
由此,控制装置50得到该样本文件中的各特征点P的被平均化的坐标值的固有矢量。
接着,控制装置50对各样本文件中的手指图像的特征点P所包围的区域的亮度值与该亮度值的平均值之间的偏差进行主成分分析(步骤S8)。
由此,控制装置50得到该样本文件中的被平均化的亮度值的固有矢量。
如此,通过预先对于各坐标值及亮度值取得固有矢量,由此能够使计算机上的处理简化并且加速。
并且,各特征点P的坐标值、即由各特征点P包围的区域的形状,与由各特征点P包围的区域的亮度值之间具有相关关系。因此,若将该相关关系统一为1个系数,则计算机上的处理变得容易。
因此,控制装置50进行特征点P的坐标值组的固有值、固有矢量及由特征点P包围的区域的亮度值的固有值、固有矢量的主成分分析。
由此,控制装置50计算出作为能够对特征点P的坐标值和由特征点P包围的区域的亮度值的双方进行控制的参数的系数(在图7中设为“系数c”)(步骤S9)。
而且,控制装置50对应于各样本文件生成学习用模型文件,该学习用模型文件包括:各手指图像的各特征点P的被平均化的坐标值组的固有值、固有矢量;手指图像中由特征点P包围的区域的被平均化的亮度值的固有值、固有矢量;特征点P的坐标值及区域的亮度值的主成分得分的固有值、固有矢量;各种系数(例如矢量维值统一用的系数c、归一化用的系数等);各特征点P的坐标值的平均值;以及由特征点P包围的区域的亮度值的平均值等。
在本实施方式中,对应于30人量的样本文件的各个文件,生成30个学习用模型文件。然后,将生成的各学习用模型文件保存到模型用存储区域51a中(步骤S10)。
接着,控制装置50对于各样本文件中的手指图像的各特征点P的坐标值,根据在步骤S6中计算出的平均值,将由特征点P包围的区域的平均形状(由步骤S6的平均化处理后的坐标值表示)保存到模型用存储区域51a中,作为指甲区域提取用模型M(步骤S11)。
另外,指甲区域提取用模型M也可以只是对各特征点P的坐标值进行了平均化的模型。但是,为了成为精度更高、具有普遍性的模型,也可以考虑整体的轮廓、平衡而进行对具有个人差的特征性值进行修正的变形处理。
接着,对指甲区域提取用模型M的例进行说明。
图13是示意地表示指甲区域提取用模型M的一例的图。
另外,在图13中,为了便于图示,除了指甲区域提取用模型M即由特征点P包围的区域用实线表示之外,手指整体用双点划线表示。
图14A是表示成为男性用的指甲区域提取用模型生成的样本的多个男性的手指图像的一例的图,图14B是表示根据成为样本的多个男性的手指图像生成的男性用的指甲区域提取用模型M2的一例的图。
图15A是表示成为女性用的指甲区域提取用模型生成的样本的多个女性的手指图像的一例的图,图15B是表示根据成为样本的多个女性的手指图像生成的女性用的指甲区域提取用模型M3的一例的图。
图16是用于说明对指甲区域提取用模型进行扫描而设定基准点的方法的一例的说明图。
各指甲区域提取用模型M1~M5,按照成为样本的各组分类,具有相互不同形状的轮廓线(在本实施方式中为将特征点P连接的线)。
在图16中,为了便于说明,手指图像被表示为,由在X方向上为30个、在Y方向上为30个的900个(=30×30)像素构成。实际上,手指图像的像素数具有与摄影部30的摄像机32的像素数相对应的像素数,例如具有200万像素程度以上的像素数。在此,如图16所示,X轴是沿着手指的宽度方向的方向,Y轴是与X轴正交的方向、是沿着手指的长度方向的方向。此外,特征点P的坐标值表示以手指图像的1个角(在图16中为左上角)为原点的X轴的像素的编号和Y轴的像素的编号。
如图16所示,控制装置50例如以规定的顺序对作为指甲区域提取用模型M的由特征点P包围的区域进行扫描。在本实施方式中,从图像最上方的行开始每次一行地从左向右依次扫描。而且,将最先检测到的特征点P作为基准点Pd,将该基准点Pd的编号及其坐标值保存到模型用存储区域51a中。
在此,也可以通过后述的图像扫描部532来进行指甲区域提取用模型M的扫描。
图16表示在第5行的扫描中第一次检测到特征点P的例子。
在图16的情况下,该特征点P为第9个点,X轴方向的坐标由x=14的坐标值表示,Y轴方向的坐标由y=5的坐标值表示。
因此,在该情况下,特征点P的编号9号及作为其坐标值的x=14、y=5,作为基准点Pd而保存到模型用存储区域51a中。
另外,基准点Pd的确定方法不限定于此。
例如,也可以为,在显示画面上显示指甲区域提取用模型M,当用户通过手写笔等触摸某个特征点P时,在控制装置50中将该特征点P选择作为基准点Pd。
例如,在如后述那样设定手指图像的基准像素Cd时,在从图像最上方的行开始每次一行地从左向右依次扫描的情况下,用户在显示画面上确认指甲区域提取用模型M,并触摸在目视中被认为是处于最左上位置的特征点P,由此将适合于与基准像素Cd重合的特征点P选择作为基准点Pd。
主体控制部52实现指甲打印装置1各部分的各种处理。主体控制部52进行如下处理:作为摄影控制部来控制摄影部30而使其取得手指图像;或者作为印刷控制部来控制印刷部40而使其对指甲区域Ta进行印刷;或者作为显示控制部来控制显示部13的显示等。
指甲区域决定部53是决定成为印刷对象的指甲区域Ta的功能部。指甲区域决定部53为,通过将存储部51的模型用存储区域51a所存储的指甲区域提取用模型M、与通过摄影部30得到的用户的手指图像进行匹配,由此决定成为印刷对象的指甲区域Ta。
在本实施方式中,指甲区域决定部53包括扫描用图像生成部531、图像扫描部532、黑白判别部533、手指尺寸取得部534、模型选择部535以及区域确定部530等功能部。指甲区域决定部53按照存储部51所存储的指甲区域决定程序,从手指图像中决定(确定)成为印刷对象的最终的指甲区域Ta。
图20是表示印刷手指的手指图像的一例的图。
图21是表示从图20的手指图像生成的扫描用图像的一例的图。
扫描用图像生成部531,根据通过摄影部30得到的用户的手指图像(参照图20),将印刷手指载放面的明亮度和手指图像的明亮度的中间值作为阈值,而生成二值化为黑白的扫描用图像。
图21表示扫描用图像的一例,该扫描用图像如下地生成:隔壁21上面的印刷手指载放面被设定为白色或浅灰色等、明亮度比手指、指甲的颜色高的颜色,将印刷手指载放面的明亮度和手指图像的明亮度的中间值作为阈值,使明亮度比阈值低的手指区域(即、成为印刷对象的指甲区域Ta及该手指整体)为白色,使其以外的明亮度比阈值高的区域(即、印刷手指载放面)为黑色。在此,在图21中,手指区域中成为黑色的区域是如下区域:手指、指甲的上面反射来自照明灯33的光,而明亮度变得比周围的手指、指甲的表面高的区域。
图像扫描部532沿着X轴方向即手指的宽度方向,对由扫描用图像生成部531生成的扫描用图像进行依次扫描。
图像扫描部532按照与决定指甲区域提取用模型M的基准点Pd时相同的顺序,对扫描用图像进行依次扫描。
在本实施方式中,在控制装置50决定指甲区域提取用模型M的基准点Pd时,如上所述,与从图像最上方的行开始每次一行地沿着X轴方向从左向右依次扫描的情况同样,图像扫描部532也从扫描用图像最上方的行开始每次一行地沿着X轴方向即手指的宽度方向从左向右依次扫描(参照图22)。
黑白判别部533为,与图像扫描部532对扫描用图像的各像素的扫描相对应,依次判别图像扫描部532所扫描的扫描用图像的各像素是白色像素还是黑色像素。
手指尺寸取得部534,从由摄影部30摄影的手指图像中取得手指的宽度方向的尺寸(手指宽度)。
在本实施方式中,手指尺寸取得部534将手指图像中的用户的印刷手指U1的手指宽度的最大值(最大手指宽度),取得作为手指的宽度方向的尺寸(手指宽度)。
即,在本实施方式中,手指尺寸取得部534为,首先在同一行(排)中由黑白判别部533判别为白色的像素连续多个时,对被判别为白色的像素的连续数进行计数,并将各行(排)中的该连续数存储到存储部51等中。
另外,手指尺寸取得部534为,在同一行中由黑白判别部533判别为白色的像素连续多个之后、被判别为黑色的像素存在1个或多个、而被判别为白色的像素再次连续的这种情况下,将该行中连续的白色像素的最大值作为连续的白色像素数,存储到存储部51中。
对于由黑白判别部533判别为一个白色像素也没有的行,在存储部51中存储“0”。
然后,手指尺寸取得部534为,在黑白判别部533对于所有行的像素的黑白判别结束之后,将由黑白判别部533判别为白色的像素最多连续的行的、被判别为白色的像素数,作为表示该手指的最大手指宽度的像素数。
此外,在本实施方式中,手指尺寸取得部534为,对摄影部30的摄影位置(即摄像机32与手指之间的距离)等进行考虑,将表示该最大手指宽度的像素数(单位:像素)变换为实际尺寸宽度(单位:mm)。而且,手指尺寸取得部534将变换后的最大手指宽度(实际尺寸宽度)Wmax存储到存储部51中。
另外,在上述中,说明了扫描用图像生成部531生成使手指区域为白色、使其以外的区域为黑色的扫描用图像的情况,但是不限于此。
例如,也可以生成如下的扫描用图像:隔壁21上面的印刷手指载放面被设定为黑色或深灰色等、明亮度比手指、指甲的颜色低的颜色,将印刷手指载放面的明亮度和手指图像的明亮度的中间值作为阈值,使手指区域为黑色、使其以外的区域为白色。在该情况下,手指尺寸取得部534为,对在同一行中由黑白判别部533判别为黑色的像素的连续数进行计数,并存储到存储部51等中,将由黑白判别部533判别为黑色的像素最多连续的行的、被判别为黑色的像素数,作为表示该手指的最大手指宽度的像素数。
模型选择部535为,根据由手指尺寸取得部534取得的手指尺寸(在本实施方式中为手指的最大手指宽度(实际尺寸宽度)),从存储部51的模型用存储区域51a所存储的多个指甲区域提取用模型M1~M5中,选择1个指甲区域提取用模型M。
模型选择部535为,参照存储部51的模型选择用数据区域51b所存储的阈值数据,选择1个最适合作为应用于用户的印刷手指U1的指甲区域提取用模型M的模型。
具体而言,模型选择部535为,例如若由手指尺寸取得部534取得的用户的印刷手指U1的最大手指宽度Wmax为20mm以上,则选择胖人用的指甲区域提取用模型M1。若用户的印刷手指U1的最大手指宽度Wmax为18mm以上且不足20mm,则选择男性用的指甲区域提取用模型M2。若用户的印刷手指U1的最大手指宽度Wmax为15mm以上且不足18mm,则选择女性用的指甲区域提取用模型M3。若用户的印刷手指U1的最大手指宽度Wmax为13mm以上且不足15mm,则选择瘦人用的指甲区域提取用模型M4。若用户的印刷手指U1的最大手指宽度Wmax不足13mm,则选择儿童(6岁以下)用的指甲区域提取用模型M5。
区域确定部530为,通过将由模型选择部535选择的指甲区域提取用模型M与通过摄影部30得到手指图像进行匹配,由此确定成为印刷对象的指甲区域Ta。
区域确定部530包括基准像素设定部536、初始位置设定部537以及区域调整部538而构成。
像素设定部536为,设定在将指甲区域提取用模型M与用户的手指图像进行匹配时、成为基准的手指图像的基准像素Cd。
基准像素设定部536为,在黑白判别部533按照由图像扫描部532所扫描的顺序判别了各像素的白黑的情况下,将多个像素中最先被判别为白色像素的像素设定为基准像素Cd。
图22是说明对扫描用图像进行扫描而设定最大手指宽度及基准像素的方法的一例的说明图。
如图22所示,从扫描用图像的上方(图21所示的手指的高度尺寸H方向的上侧)开始,依次进行扫描用图像的像素的扫描。
在此,对于扫描用图像的X轴、Y轴的设定以及X、Y轴的原点位置,被设定为与在生成指甲区域提取用模型时所设定的X轴、Y轴以及X、Y轴的原点相同。由此,在图22中也与上述图16同样,手指图像由在X方向上为30个、在Y方向上为30个的900个(=30×30)像素构成。此外,与图16同样,X轴是沿着手指的宽度方向的方向,Y轴是与X轴正交的方向、是沿着手指的长度方向的方向,X、Y轴的原点被设定在手指图像的左上角。
另外,在图22中示意地表示了图21所示的扫描用图像,双点划线表示在扫描用图像中用白色表示的手指区域的轮廓。
如图22所示,在本实施方式中,将第5行的第14个像素被最先判别为白色像素的情况作为例子。
在图22的情况下,基准像素设定部536将由该x=14、y=5的坐标值表示的像素设定为基准像素Cd。
图23是表示将指甲区域提取用模型配置在印刷手指的手指图像上的初始位置的状态的图。
图24是表示使指甲区域提取用模型与印刷手指的手指图像的指甲区域匹配的状态的图。
初始位置设定部537为,使指甲区域提取用模型M的基准点Pd与由基准像素设定部536设定为基准像素Cd的像素重合,而设定指甲区域提取用模型M的匹配的初始位置。如此,初始位置设定部537将指甲区域提取用模型M配置到与手指图像的该初始位置重叠的位置上。
如上所述,根据与用户进行印刷时同样、将成为样本的手指载放在指甲打印装置1的印刷手指插入部20a上并进行摄影而取得的手指图像,来生成指甲区域提取用模型M。因此,指甲区域提取用模型M(即、由特征点P包围的区域)与用户的印刷手指U1的指甲区域Ta的位置、朝向一致。
因此,当设定了基准像素Cd、并使该基准像素Cd与指甲区域提取用模型M的基准点Pd重合时,指甲区域提取用模型M的基准点Pd以外的特征点P的位置,能够根据其与基准点Pd之间的位置关系来确定。
如此,通过将指甲区域提取用模型M的与各特征点P对应的点配置到用户的印刷手指U1的手指图像上,并将这些点连接,由此设定用于匹配指甲区域提取用模型M的初始位置(参照图23)。
区域调整部538为,将由初始位置设定部537配置的指甲区域提取用模型M的范围、形状调整为,与手指图像的指甲区域Ta一致。
区域调整部538为,应用使用了AAM(Active Appearance Model:主动外观模型)的检测算法,对指甲区域提取用模型M的坐标值进行更新,以使指甲区域提取用模型M的范围、形状与用户的手指图像的指甲区域Ta一致。区域调整部538通过对指甲区域提取用模型M的坐标值进行调整、更新,由此确定成为印刷对象的最终的指甲区域Ta(参照图24)。
接着,对本实施方式的指甲打印装置1的印刷控制方法进行说明。
图17是表示本实施方式的印刷控制处理的流程图。
图18是表示本实施方式的印刷控制处理中的模型选择处理的流程图。
图19是表示本实施方式的印刷控制处理中的区域调整处理及印刷处理的流程图。
在通过该指甲打印装置1进行印刷的情况下,用户首先接通电源开关而启动控制装置50,并选择想在印刷手指U1上印刷的指甲图像图案(设计)。
所选择的指甲图像图案在显示部13上被显示为设计确认用的缩略图像。在为该设计即可的情况下,用户通过未图示的确定按钮来确定指甲图像图案。
接着,用户将印刷手指U1插入到印刷手指插入部20a中,并定位到定位标记211之上,并且将非印刷手指U2插入到非印刷手指插入部20b中,在固定了印刷手指U1之后,操作印刷开关。
例如,在想对左手的食指、中指、无名指及小指的指甲区域Ta实施印刷的情况下,如图3所示,将食指、中指、无名指及小指平面并列地插入到印刷手指插入部20a中,并将拇指插入到非印刷手指插入部20b中。
然后,通过插入到印刷手指插入部20a中的食指、中指、无名指及小指和插入到非印刷手指插入部20b中的拇指来夹持抓紧部20c。由此,作为印刷手指U1的食指、中指、无名指及小指被固定。
然后,如图17所示,控制装置50首先进行模型选择处理,该模型选择处理选择应该对用户应用的指甲区域提取用模型M(参照S21、图18)。
如图18所示,当从显示部13的印刷开关输入指示时,控制装置50首先控制摄影部30,使其对印刷手指U1整体进行摄影。
由此,取得印刷手指U1的手指图像(参照步骤S31、图20)。
所取得的手指图像的数据被存储到存储部51的RAM等中。
接着,指甲区域决定部53的扫描用图像生成部531,生成使通过摄影部30得到的手指图像中的手指区域(即、成为印刷对象的指甲区域Ta及该手指整体)为白色、使其以外的区域为黑色的扫描用图像(参照步骤S32、图21)。
图像扫描部532为,对由扫描用图像生成部531生成的扫描用图像,从最上方的行开始每次一行地从左向右依次进行扫描(参照步骤S33、图22)。
然后,黑白判别部533为,按照由图像扫描部532所扫描的顺序,判别扫描用图像的各像素的黑白(步骤S34)。
手指尺寸取得部534为,对手指的高度尺寸H(图21)方向的各行(排)中的、由黑白判别部533判别为白色的像素连续多个时的、被判别为白色的像素的连续数进行计数。
然后,在黑白判别部533对所有行的像素结束了黑白判别之后,将由黑白判别部533判别为白色的像素最多连续的行的、被判别为白色的像素数,作为表示该手指的最大手指宽度的像素数。
然后,手指尺寸取得部534将表示该最大手指宽度的像素数(单位:像素)变换为实际尺寸宽度(单位:mm)。然后,手指尺寸取得部534将变换后的值作为最大手指宽度Wmax而存储到存储部51中(步骤S35)。
接着,模型选择部535判断由手指尺寸取得部534取得的用户的印刷手指U1的最大手指宽度Wmax是否为20mm以上(步骤S36)。然后,模型选择部535为,在判断为用户的印刷手指U1的最大手指宽度Wmax为20mm以上的情况下(步骤S36:是),将胖人用的指甲区域提取用模型M1(步骤S37),选择作为用于提取用户的指甲区域的指甲区域提取用模型M。
另一方面,模型选择部535为,在判断为用户的印刷手指U1的最大手指宽度Wmax不为20mm以上的情况下(步骤S36:否),进一步判断用户的印刷手指U1的最大手指宽度Wmax是否为18mm以上且不足20mm(步骤S38)。然后,模型选择部535为,在判断为用户的印刷手指U1的最大手指宽度Wmax为18mm以上且不足20mm的情况下(步骤S38:是),选择男性用的指甲区域提取用模型M2(步骤S39)。
另一方面,模型选择部535为,在判断为用户的印刷手指U1的最大手指宽度Wmax不为18mm以上且不足20mm的情况下(步骤S38:否),进一步判断用户的印刷手指U1的最大手指宽度Wmax是否为15mm以上且不足18mm(步骤S40)。然后,模型选择部535为,在判断为用户的印刷手指U1的最大手指宽度Wmax为15mm以上且不足18mm的情况下(步骤S40:是),选择女性用的指甲区域提取用模型M3(步骤S41)。
另一方面,模型选择部535为,在判断为用户的印刷手指U1的最大手指宽度Wmax不为15mm以上且不足18mm的情况下(步骤S40:否),进一步判断用户的印刷手指U1的最大手指宽度Wmax是否为13mm以上且不足15mm(步骤S42)。然后,模型选择部535为,在判断为用户的印刷手指U1的最大手指宽度Wmax为13mm以上且不足15mm的情况下(步骤S42:是),选择瘦人用的指甲区域提取用模型M4(步骤S43)。
另一方面,模型选择部535为,在判断为用户的印刷手指U1的最大手指宽度Wmax不为13mm以上且不足15mm的情况下(步骤S42:否)、即用户的印刷手指U1的最大手指宽度Wmax不足13mm的情况下,将儿童(6岁以下)用的指甲区域提取用模型M5,选择作为用于提取用户的指甲区域的指甲区域提取用模型M(步骤S44)。
返回图17,区域确定部530的基准像素设定部536为,在从用户的手指图像生成的扫描用图像中,将黑白判别部533最先判别为白色像素的像素设定为基准像素Cd(步骤S22)。
在本实施方式中,第5行的第14个像素被设定为基准像素Cd(参照图22)。
接着,初始位置设定部537为,在由基准像素设定部536设定的手指图像的基准像素Cd的坐标(在本实施方式中,坐标值为:x=14、y=5)上,重合在模型选择处理(参照图18)中选择的指甲区域提取用模型M的基准点Pd(步骤S23)。并且,初始位置设定部537为,根据与该基准点Pd之间的位置关系,来确定该指甲区域提取用模型M的基准点Pd以外的特征点P在手指图像上的位置(坐标)(步骤S24)。由此,设定了用于指甲区域提取用模型M的匹配的初始位置(参照图23)。
当设定了指甲区域提取用模型M的匹配的初始位置时,区域调整部538进行如下的区域调整处理:将由初始位置设定部537配置的指甲区域提取用模型M的范围、形状调整为与手指图像的指甲区域Ta一致,而确定作为印刷对象区域的最终的指甲区域Ta。然后,向所确定的指甲区域Ta进行印刷处理(参照步骤S25、图24)。
例如,在本实施方式中,如图23所示,指甲区域提取用模型M的特征点P的1号至8号,比实际的印刷手指U1的指甲区域Ta的轮廓线稍微靠右侧。此外,指甲区域提取用模型M的特征点P的10号至18号,比实际的印刷手指U1的指甲区域Ta的轮廓线较大地靠右侧。
因此,为了使指甲区域提取用模型M与正确的指甲区域Ta一致,需要将特征点P的1号至8号的位置稍微向左侧进行修正,并将特征点P的10号至18的位置向左侧进行修正。
具体而言,进行图19所示的区域调整处理及印刷处理。
即,区域调整部538为,首先将重叠了指甲区域提取用模型M的手指图像的区域的亮度值,取得为矢量(将其作为“亮度矢量gi”)(步骤S51)。
之后,计算该亮度值矢量gi与在指甲区域提取用模型M的生成过程中计算出的、存储部51所保存的指甲区域提取用模型M的各特征点P所包围的区域的被平均化的亮度值的固有矢量(将其作为“平均亮度矢量gm”)之间的差分Δg(步骤S52)。
接着,区域调整部538使用该差分Δg来更新系数c(步骤S53,另外,将所更新的系数c作为“更新值new_c”)。
区域调整部538为了得到new_c,而使用Δg来求出Δc。通过Δc=Δg×A的公式,能够求出Δc。在此,A是在指甲区域提取用模型M的生成过程中已经计算出的参数。
并且,使用该Δc来求出更新值new_c。通过new_c=c+Δc,能够求出更新值new_c。
然后,区域调整部538将更新值new_c视为系数c,重新计算指甲区域提取用模型M的各特征点P的被平均化的坐标值的矢量(将其作为“平均坐标矢量sm”)及平均亮度矢量gm(步骤S54)。
另外,通过s+Ps×Ws×Qs×c的公式,能够求出指甲区域提取用模型M的各特征点P的坐标值s的更新值。在该公式中,Ps是坐标值s的固有矢量,Ws是对坐标矢量和亮度矢量的单位的不同进行归一化的对角矩阵,Qs是坐标值及亮度值的固有矢量。在此,除系数c以外都是在指甲区域提取用模型M的生成过程中已经计算出的参数,因此仅通过更新系数c的值,就能够更新坐标值。
并且,区域调整部538为,取得重叠了指甲区域提取用模型M的手指图像的区域的亮度矢量gi,并计算该亮度值矢量gi与更新了系数c的值的指甲区域提取用模型M的平均亮度矢量gm之间的差分Δg(步骤S55)。
然后,区域调整部538为,通过使与指甲区域提取用模型M之间的误差e=||Δg||,并且将该误差e的二次方(e×e)作为误差值E,并且对系数c更新前的更新前Δg也进行同样的计算,由此求出更新前误差值E_prevous(步骤S56)。
区域调整部538判断是否为(E_previous-E>0.0001×E)、且重复了上述计算处理的计算循环的次数为上限值(例如30次)以下(步骤S57)。
然后,在由区域调整部538判断为(E_previous-E>0.0001×E)、且计算循环的次数为上限值(例如30次)以下的情况下(步骤S57:是),重复步骤S13至步骤S17的处理。
另外,公式中的“0.0001”是收敛判断用的系数,能够任意地设定。此外,计算循环的次数的上限值也不特别限定,能够任意地设定。
另一方面,在由区域调整部538判断为不是(E_previous-E>0.0001×E)、或者计算循环的次数超过上限值(例如30次)的情况下(步骤S57:否),区域调整部538视为指甲区域提取用模型M与手指图像之间的误差的修正(指甲区域提取用模型M的更新)收敛,并结束区域调整处理,将由该时刻的最新的更新后的指甲区域提取用模型M的各特征点P包围的区域,确定为作为印刷对象的指甲区域Ta(参照步骤S58、图24)。
当确定了作为印刷对象的指甲区域Ta时,主体控制部52控制印刷部40,使其进行向用户的印刷手指U1的指甲区域Ta的印刷(步骤S59)。
如此,在该实施方式中,指甲打印装置1具备:对所载放的手指进行摄影而得到手指图像的图6的摄影部30;和存储数据的图6的存储部51,该指甲打印装置1进行以下的动作。
即,按照沿着由摄影部30得到的手指图像中的指甲区域的轮廓线的触摸操作,隔开预定的间隔输入多个图16等的特征点P。然后,通过作为存储控制部的图6的控制装置50,将该所输入的多个特征点P的坐标位置和编号赋予对应而存储到图6的存储部51的模型用存储区域51a中,作为图13等的指甲区域提取用模型M。
在通过该控制而将图13等的指甲区域提取用模型M存储到存储部51的模型用存储区域51a中之后,通过图6的图像扫描部532从预定的方向依次扫描由摄影部30新得到的手指图像。
从存储部51的模型用存储区域51a所存储的指甲区域提取用模型M的多个特征点P的坐标位置中,提取与第一坐标位置(在本实施方式中为基准像素Cd的坐标位置)相对应的第二坐标位置(在本实施方式中为No.9的特征点P的坐标位置),该第一坐标位置是通过该图像扫描部532的扫描而最先被判别为表示手指区域的像素(在本实施方式中为黑白的扫描用图像中的白色像素)的像素在手指图像上的坐标位置。
然后,将该所提取的第二坐标位置(在本实施方式中为No.9的特征点P的坐标位置)作为指甲区域提取用模型M的匹配的基准点Pd,而重叠到第一坐标位置(即、基准像素Cd的坐标位置)上(图17的S23)。
另一方面,以该重叠了的第一坐标位置(即、基准像素Cd的坐标位置)和第二坐标位置(即、No.9的特征点P的坐标位置)为基准,将指甲区域提取用模型M的其他多个特征点P(No.1~No.8、No.10~No.18)重合为,与存储部51所存储的编号(1~18)分别赋予对应的多个特征点P的坐标位置(No.1~No.8的特征点P、No.10~No.18的特征点P的各x、y坐标值),分别被配置到手指图像上的对应的坐标位置(参照图19的S51~S58、图24)。
然后,作为印刷控制部的图6的控制装置50将印刷部40控制为,对根据该所重合的多个坐标位置而确定的图24等的指甲区域Ta实施印刷(参照图19的S59、图24)。
另外,在本实施方式中说明了的学习用模型文件及指甲区域提取用模型M的生成顺序是一个例子,也可以进行使各步骤靠前靠后等的适宜变更。
如上所述,根据本实施方式的指甲打印装置1,预先将具有相互不同轮廓线的多个指甲区域提取用模型M存储到存储部51中,并且由手指尺寸取得部534从用户的手指图像中取得印刷手指U1的尺寸(在本实施方式中为最大手指宽度Wmax),模型选择部535根据所取得的手指尺寸(最大手指宽度Wmax),从多个指甲区域提取用模型M中选择一个指甲区域提取用模型M。
因此,用户不需要自己输入性别、体格等,仅通过将手指设置到指甲打印装置1内,就能够自动地选择适合于确定用户的指甲区域的指甲区域提取用模型M。
然后,通过将该所选择的指甲区域提取用模型M与手指图像匹配,由此确定成为印刷对象的指甲区域Ta,因此能够简单、迅速且高精度地确定其位置、大小根据人的不同而千差万别的指甲区域Ta,能够对确定的指甲区域Ta正确地实施印刷。
成为选择指甲区域提取用模型M时的基准的手指尺寸,是手指的宽度尺寸或手指的长度尺寸,因此通过对将手指图像变换为黑白二值的扫描用图像进行解析这种比较简单的图像处理,能够容易地得到手指尺寸。因此,能够迅速地得到选择指甲区域提取用模型M时的基准,能够实现处理速度的提高。
在本实施方式中,在存储部51的模型用存储区域51a中存储有指甲区域提取用模型M、学习模型文件及基准点Pd的编号、坐标信息等,并且通过基准像素设定部536来设定成为与指甲区域提取用模型M匹配时的基准的手指图像的基准像素Cd,使指甲区域提取用模型M的基准点Pd与该基准像素Cd的坐标重合,而设定指甲区域提取用模型M的匹配的初始位置。
因此,例如在使用采用了AAM的检测算法来检测、确定指甲区域Ta的情况下,能够简单且迅速地将模型配置到适当的初始位置,并能够高精度地检测出根据人的不同而个人差较大且难以与手指整体进行区别的指甲区域Ta。
此外,在基准像素设定部536设定基准像素Cd时,首先将手指图像二值化为白色和黑色而使手指区域明确,并按照进行了扫描的顺序来判别该被二值化了的扫描用图像的各像素的黑白,将最先被判别为白色像素的像素设定为基准像素Cd。
因此,通过比较简单的图像处理,能够唯一地设定基准像素Cd,并能够实现处理速度的提高。
另外,在本实施方式中,以如下情况为例进行了说明:作为用于从指甲区域提取用模型M(M1~M5)中选择适合于用户的模型的数据,手指的最大手指宽度Wmax被存储在模型选择用数据区域51b中;但是用于选择指甲区域提取用模型M的数据不限定于此。
例如,用户的印刷手指U1的从指尖到手指的指根或手指的第二关节为止的长度尺寸(例如图21的指的高度尺寸H),也可以被存储作为阈值数据。或者,印刷手指U1的面积等也可以被存储作为阈值数据。
并且,也可以为,将印刷手指U1的最大手指宽度、长度尺寸、面积中的任意两个以上存储作为阈值数据,并将这些组合来选择适合于用户的指甲区域提取用模型M。
在本实施方式中,以如下情况为例进行了说明:作为用于选择指甲区域提取用模型M的阈值数据,手指的最大手指宽度Wmax的实际尺寸值(单位:mm)被存储在模型选择用数据区域51b中。但是,阈值数据不限定于手指的最大手指宽度Wmax的实际尺寸值,例如在从规定的位置对手指进行了摄影时白色像素连续的数量(单位:Pix(像素))也可以被存储作为阈值数据。
在该情况下,例如,若连续的白色像素的数量为110像素以上,则无论男女都选择作为胖人用模型的指甲区域提取用模型M1。若连续的白色像素的数量为90像素以上且不足110像素,则选择作为男性用模型的指甲区域提取用模型M2。若连续的白色像素的数量为70像素以上且不足90像素,则选择作为女性用模型的指甲区域提取用模型M3。若连续的白色像素的数量为60像素以上且不足70像素,则无论男女都选择作为瘦人用模型的指甲区域提取用模型M4。若连续的白色像素的数量为60像素以下,则选择作为小学生以下的儿童用模型的指甲区域提取用模型M5。
在本实施方式中,以仅根据模型选择用数据区域51b所存储的阈值数据来进行指甲区域提取用模型M的选择的情况为例。但是,进行指甲区域提取用模型M的选择的方法不限定于此。
例如,在用户的性别、年龄等个人信息被登记到指甲打印装置1中那样的情况下,也可以通过使用这些信息、或者将这些信息与模型选择用数据区域51b所存储的阈值数据组合,来进行指甲区域提取用模型M的选择。
例如,在按照手指的不同种类而准备有学习用模型文件及指甲区域提取用模型M的情况下,用户也可以自己输入印刷的手指的种类。
也可以为,控制装置50对由摄影部30摄影的图像的特征进行分析,而自动地判断手指的种类,并选择应用的学习用模型文件及指甲区域提取用模型M。
在本实施方式中,以在区域调整处理中将由模型选择处理选择的指甲区域提取用模型M与用户的实际的指甲区域重合的情况为例。但是,例如,在区域调整处理中判定为由模型选择处理选择的指甲区域提取用模型M与用户的实际的指甲区域之间的偏差大到规定量以上时,也可以依次应用其他的指甲区域提取用模型M,而使用偏差最少的模型来进行区域调整处理。
也可以为,在用户一度选择了某个学习用模型文件及指甲区域提取用模型M之后,在设定被解除之前,对于同一用户,在下次以后的印刷时,选择相同的学习用模型文件及指甲区域提取用模型M。
在该情况下,在同一用户使用指甲打印装置1的情况下,不需要重新进行模型选择处理,能够缩短处理时间。
并且,也可以为,一度进行使用了学习用模型文件及指甲区域提取用模型M的指甲区域的区域调整处理,在用户的指甲区域Ta被确定之后,在设定被解除之前,对于同一用户,在下次以后的印刷时,将该所确定的指甲区域作为印刷对象。
在该情况下,在同一用户使用指甲打印装置1的情况下,不需要重新进行模型选择处理、区域调整处理,能够缩短处理时间。
在由模型选择部535选择了指甲区域提取用模型M的情况下,也可以将选择结果显示在显示部13等上,用户能够进行确认、变更等。
也可以为,预先确定基准点Pd并将其存储到模型用存储区域51a中,当在基准像素设定部536中设定了通过图像扫描部532的扫描而最先被判别为表示手指区域的像素(在本实施方式中为白黑的扫描用图像中的白色像素)的像素在手指图像上的第一坐标位置(本实施方式中为基准像素Cd的坐标位置)时,使基准点Pd与其重合。
也可以为,从存储部51的模型用存储区域51a所存储的指甲区域提取用模型M的多个特征点P的坐标位置中,提取与通过图像扫描部532的扫描而最先被判别为表示手指区域的像素(在本实施方式中为白黑的扫描用图像中的白色像素)的像素在手指图像上的第一坐标位置(在本实施方式中为基准像素Cd的坐标位置)相对应的第二坐标位置(在本实施方式中为No.9的特征点P的坐标位置),并将该所提取的第二坐标位置(在本实施方式中为No.9的特征点P的坐标位置)作为指甲区域提取用模型M的匹配的基准点Pd,而使其与第一坐标位置(即、基准像素Cd的坐标位置)重合。
学习用模型文件及指甲区域提取用模型M的生成过程中的固有矢量的计算处理、变形处理、用于以1个系数对坐标值和亮度值进行控制的系数的归一化处理等,是用于实现计算机处理速度的提高等的处理,不是本发明必需的要素。
指甲区域提取用模型M的构成不限定于特征点P的编号与各特征点P的坐标值被赋予对应的构成。例如,也可以是包含某个特征点P被作为基准点Pd的信息、各特征点P的坐标值与基准点Pd之间的位置关系等其他信息的构成等。在基准点Pd的信息包含在指甲区域提取用模型M中的情况下,不需要另外将基准点Pd的信息存储到模型用存储区域51a中。
在本实施方式中,以能够将4根手指同时插入装置、而对插入的4根手指连续地进行印刷的指甲打印装置1为例,但是也能够将本发明应用于将手指每次一根地插入装置而依次进行印刷的装置。
也可以构成为,在显示部13等上显示表示将指甲区域提取用模型M与手指图像进行了匹配的结果的图像,而用户能够事后地对各特征点P的位置等进行微调整。
在该情况下,也可以将微调整后的指甲区域提取用模型M存储到模型用存储区域51a中,在下次以后相同用户进行了选择时,应用该微调整后的指甲区域提取用模型M。
在本实施方式中构成为,由指甲打印装置1的控制装置50进行学习用模型文件的制作、指甲区域提取用模型M的生成等的指甲区域提取模型的生成处理、以及基准点Pd的设定等。但是,进行学习用模型文件的制作、指甲区域提取用模型M的生成等的指甲区域提取模型的生成处理、以及基准点Pd的设定等的装置,不限定于指甲打印装置1的控制装置50。
例如,也可以构成为,在工厂出货阶段前,将由指甲打印装置1摄影的多人的手指图像的数据复制到存储卡中而取出,并将该数据输入到与未图示的手写板等输入用设备等连接的、指甲打印装置1之外的模型生成用计算机等(未图示)中,在该模型生成用计算机中,进行指甲区域提取模型的生成处理以及基准点Pd的设定等。
在该情况下,使用手写板来进行特征点P的输入等。另外,输入用设备不限定于手写板,也可以在一般的监视器画面上,使用鼠标等指示设备来进行特征点P的输入等。
在该情况下,从指甲打印装置1取出用作为样本图像的手指图像的数据、并输入到模型生成用计算机等中的方法,不限定于使用存储卡,例如,也可以复制到USB存储器等中,也可以将指甲打印装置1和模型生成用计算机等直接用线缆连接而输入数据。
并且,对用作为样本图像的手指图像的数据进行取得的装置,不限定于指甲打印装置1。
也可以为,使用能够以与将手指载放到指甲打印装置1的手指载放部上时同样的条件(例如手指的朝向、配置等)进行摄影的单独的装置,对多人的手指进行摄影而取得手指图像,将该手指图像的数据输入到指甲打印装置1的控制装置50或模型生成用计算机等中而用作为样本图像。
以上,说明了本发明的几个实施方式,但是本发明的范围不限定于上述实施方式,包括专利请求范围所记载的发明范围以及与其均等的范围。
Claims (19)
1.一种对指甲实施印刷的指甲打印装置,其中,具备:
摄影部,对包含作为印刷对象的指甲的手指进行摄影,取得手指图像;
手指尺寸取得部,从由上述摄影部取得的上述手指图像取得上述手指的尺寸;
存储部,存储具有相互不同形状的轮廓线的多个指甲区域提取用模型;
模型选择部,根据由上述手指尺寸取得部取得的上述手指的尺寸,从上述存储部所存储的上述多个指甲区域提取用模型中选择1个确定的指甲区域提取用模型;
区域确定部,将由上述模型选择部选择的上述确定的指甲区域提取用模型与上述手指图像中的上述指甲的图像区域匹配,由此确定上述手指的作为印刷对象的指甲区域;以及
印刷部,具有向由上述区域确定部确定的上述指甲区域涂敷墨的打印头。
2.根据权利要求1所述的指甲打印装置,其中,
按照上述手指的每个种类设置有上述多个指甲区域提取用模型,
上述模型选择部,从与上述手指的种类对应的上述多个指甲区域提取用模型中选择上述确定的指甲区域提取用模型。
3.根据权利要求1所述的指甲打印装置,其中,
上述模型选择部,不需要用户的判断操作,而根据上述手指的尺寸,自动地选择上述确定的指甲区域提取用模型。
4.根据权利要求1所述的指甲打印装置,其中,
上述手指尺寸取得部,取得上述手指的宽度方向的尺寸的最大值、上述手指的长度方向的尺寸的任一个,作为上述手指的尺寸。
5.根据权利要求1所述的指甲打印装置,其中,
上述存储部,还存储有与上述各指甲区域提取用模型对应的上述手指的尺寸的阈值,
上述模型选择部,根据由上述手指尺寸取得部取得的上述手指的尺寸与上述存储部所存储的上述阈值的比较,选择上述多个指甲区域提取用模型中的与上述手指的尺寸对应的1个上述指甲区域提取用模型,作为上述确定的指甲区域提取用模型。
6.根据权利要求1所述的指甲打印装置,其中,
还具备:
手指载放部,具有在上述摄影部对上述手指进行摄影时、载放该手指的印刷手指载放面;
扫描用图像生成部,将由上述摄影部取得的上述手指图像进行二值化,生成使上述手指的区域成为白色和黑色中的一方、使其以外的区域成为白色和黑色中的另一方的扫描用图像;
图像扫描部,对于相对于上述扫描用图像沿着一定的扫描方向设置的多个行的各行,沿着上述扫描方向对由上述扫描用图像生成部生成的上述扫描用图像进行依次扫描;以及
黑白判别部,依次判别上述图像扫描部所扫描的上述扫描用图像的各像素是白色像素还是黑色像素,
上述印刷手指载放面被设定为具有与上述手指不同的明亮度的颜色。
7.根据权利要求6所述的指甲打印装置,其中,
上述扫描方向是上述手指的宽度方向,
上述手指尺寸取得部,取得上述扫描用图像的上述多个行的各行中的、由上述黑白判别部判别为白色和黑色中的上述一方颜色的像素的像素连续的数量的最大值,作为与上述手指的尺寸对应的像素数。
8.根据权利要求6所述的指甲打印装置,其中,
上述存储部,进一步将沿着上述各指甲区域提取用模型的轮廓线配置、并包含在与上述手指图像匹配时作为基准的基准点的多个特征点的坐标值,与上述各指甲区域提取用模型对应存储,
上述区域确定部具备:
基准像素设定部,设定上述手指图像中的在与上述指甲区域提取用模型匹配时作为基准的基准像素;
初始位置设定部,将上述指甲区域提取用模型的匹配的初始位置,设定到将上述确定的指甲区域提取用模型的上述基准点与由上述基准像素设定部设定为上述基准像素的像素重合的位置,并将上述指甲区域提取用模型配置到上述初始位置,而将上述指甲区域提取用模型配置到与上述手指图像的至少一部分重叠的位置;以及
区域调整部,将配置到上述初始位置的上述确定的指甲区域提取用模型的上述各特征点的坐标值,向使由该各特征点包围的区域与上述手指图像的上述指甲区域一致的方向调整,将由具有调整后的坐标值的上述各特征点包围的区域作为上述指甲区域。
9.根据权利要求8所述的指甲打印装置,其中,
上述基准像素设定部,与上述图像扫描部对上述扫描用图像的扫描对应,将上述扫描用图像的上述多个像素中、由上述黑白判别部最先判别为白色和黑色中的上述一方的颜色的确定的像素,设定为上述基准像素。
10.根据权利要求8所述的指甲打印装置,其中,
上述区域调整部,计算将上述各特征点的坐标值更新为第一值的第一指甲区域模型的亮度矢量与上述手指图像的重叠了上述第一指甲区域模型的区域的亮度矢量之间的第一差分,
根据上述第一差分的值,将上述各特征点的坐标值更新为不同于上述第一值的第二值,并计算将上述各特征点的坐标值更新为上述第二值的第二指甲区域模型的亮度矢量与上述手指图像的重叠了上述第二指甲区域模型的区域的亮度矢量之间的第二差分,
将上述第二差分相对于上述第一差分的变化率为小于规定量的值时的上述各特征点的上述第二值,作为上述调整值。
11.一种对指甲实施印刷的指甲打印装置的印刷控制方法,其中,
对包含作为印刷对象的指甲的手指进行摄影,取得手指图像;
从上述取得的上述手指图像取得上述手指的尺寸;
根据上述取得的上述手指的尺寸,从存储部所存储的具有相互不同形状的轮廓线的多个指甲区域提取用模型中选择1个确定的指甲区域提取用模型;
将上述选择的上述确定的指甲区域提取用模型与上述手指图像中的上述指甲的图像区域匹配,由此确定上述手指的作为印刷对象的指甲区域;以及
通过打印头向上述确定的上述指甲区域涂敷墨。
12.根据权利要求11所述的指甲打印装置的印刷控制方法,其中,
按照上述手指的每个种类设置有上述多个指甲区域提取用模型,
选择上述确定的指甲区域提取用模型的动作,包含从与上述手指的种类对应的上述多个指甲区域提取用模型中选择上述确定的指甲区域提取用模型的动作。
13.根据权利要求11所述的指甲打印装置的印刷控制方法,其中,
选择上述确定的指甲区域提取用模型,不需要用户的判断操作,而根据上述手指的尺寸,自动地选择上述确定的指甲区域提取用模型。
14.根据权利要求11所述的指甲打印装置的印刷控制方法,其中,
取得上述手指的尺寸的动作,取得上述手指的宽度方向的尺寸的最大值、上述手指的长度方向的尺寸的任一个,作为上述手指的尺寸。
15.根据权利要求11所述的指甲打印装置的印刷控制方法,其中,
上述存储部,还存储有与上述各指甲区域提取用模型对应的上述手指的尺寸的阈值,
选择上述确定的指甲区域提取用模型的动作,包含根据取得的上述手指的尺寸和上述存储部所存储的上述阈值的比较,选择上述多个指甲区域提取用模型中的与上述手指的尺寸对应的1个上述指甲区域提取用模型,作为上述确定的指甲区域提取用模型的动作。
16.根据权利要求11所述的指甲打印装置的印刷控制方法,其中,
取得上述手指图像的动作,包含对被设定为具有与上述手指不同的明亮度的颜色的印刷手指载放面上所载放的上述手指和上述手指周围的上述印刷手指载放面的上面的一部分进行摄影,取得上述手指图像的动作,
取得上述手指的尺寸的动作包含如下动作:
将上述取得的上述手指图像进行二值化,生成使上述手指的区域成为白色和黑色中的一方、使其以外的区域成为白色和黑色中的另一方的扫描用图像;
对于相对于上述扫描用图像沿着一定的扫描方向设置的多个行的各行,沿着上述扫描方向依次扫描上述生成的上述扫描用图像;以及
依次判别上述扫描的上述扫描用图像的各像素是白色像素还是黑色像素,取得上述扫描用图像的上述多个行的各行中的、被判别为白色和黑色中的上述一方的颜色的像素的像素连续的数量的最大值,作为与上述手指的尺寸对应的像素数。
17.根据权利要求11所述的指甲打印装置的印刷控制方法,其中,
上述存储部,进一步将沿着上述各指甲区域提取用模型的轮廓线配置、并包含在与上述手指图像匹配时作为基准的基准点的多个特征点的坐标值,与上述各指甲区域提取用模型对应存储,
取得上述手指图像的动作,包含对被设定为具有与上述手指不同的明亮度的颜色的印刷手指载放面上所载放的上述手指和上述手指周围的上述印刷手指载放面的上面的一部分进行摄影,取得上述手指图像的动作,
确定上述指甲区域的动作包含如下动作:
设定上述手指图像中的在与上述指甲区域提取用模型匹配时作为基准的基准像素;
将上述指甲区域提取用模型的匹配的初始位置,设定到将上述确定的指甲区域提取用模型的上述基准点与设定为上述基准像素的像素重合的位置,并将上述指甲区域提取用模型配置到上述初始位置,而将上述指甲区域提取用模型配置到与上述手指图像的至少一部分重叠的位置;以及
将配置到上述初始位置的上述确定的指甲区域提取用模型的上述各特征点的坐标值,向使由该各特征点包围的区域与上述手指图像的上述指甲区域一致的方向调整,将由具有调整后的坐标值的上述各特征点包围的区域作为上述指甲区域。
18.根据权利要求17所述的指甲打印装置的印刷控制方法,其中,
设定上述基准像素的动作包含如下动作:
将上述取得的上述手指图像进行二值化,生成使上述手指的区域成为白色和黑色中的一方、使其以外的区域成为白色和黑色中的另一方的扫描用图像;
对于相对于上述扫描用图像沿着一定的扫描方向设置的多个行中的各行,沿着上述扫描方向依次扫描上述生成的上述扫描用图像;以及
依次判别上述扫描的上述扫描用图像的各像素是白色像素还是黑色像素,将上述扫描用图像的上述多个像素中的、由上述黑白判别部最先判别为白色和黑色中的上述一方的颜色的确定的像素,设定为上述基准像素。
19.根据权利要求17所述的指甲打印装置的印刷控制方法,其中,
对上述确定的指甲区域提取用模型的上述各特征点的坐标值进行调整的动作,包含如下动作:
计算将上述各特征点的坐标值更新为第一值的第一指甲区域模型的亮度矢量与上述手指图像的重叠了上述第一指甲区域模型的区域的亮度矢量之间的第一差分;
根据上述第一差分的值,将上述各特征点的坐标值更新为不同于上述第一值的第二值,并计算将上述各特征点的坐标值更新为上述第二值的第二指甲区域模型的亮度矢量与上述手指图像的重叠了上述第二指甲区域模型的区域的亮度矢量之间的第二差分;以及
将上述第二差分相对于上述第一差分的变化率为小于规定量的值时的上述各特征点的上述第二值,作为上述调整值。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP176503/2011 | 2011-08-12 | ||
JP2011176503A JP5382078B2 (ja) | 2011-08-12 | 2011-08-12 | ネイルプリント装置及び印刷制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102922880A true CN102922880A (zh) | 2013-02-13 |
CN102922880B CN102922880B (zh) | 2015-04-01 |
Family
ID=47637869
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210284895.7A Active CN102922880B (zh) | 2011-08-12 | 2012-08-10 | 指甲打印装置及印刷控制方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8820866B2 (zh) |
JP (1) | JP5382078B2 (zh) |
CN (1) | CN102922880B (zh) |
Cited By (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104621953A (zh) * | 2015-03-08 | 2015-05-20 | 刘晓英 | 指甲图案智能生成器 |
CN104783475A (zh) * | 2014-01-20 | 2015-07-22 | 卡西欧计算机株式会社 | 描绘装置以及描绘装置的描绘控制方法 |
CN105058797A (zh) * | 2015-08-20 | 2015-11-18 | 上海中医药大学附属岳阳中西医结合医院 | 一种3d打印美甲的方法 |
CN105228832A (zh) * | 2013-08-07 | 2016-01-06 | 莉利科技有限公司 | 至少在一个指甲表面施用图案的系统和打印方法 |
CN105433577A (zh) * | 2014-09-22 | 2016-03-30 | 卡西欧计算机株式会社 | 指甲信息检测装置、描画装置以及指甲信息检测方法 |
CN105459624A (zh) * | 2014-09-26 | 2016-04-06 | 卡西欧计算机株式会社 | 指甲打印装置及指甲打印装置的动作控制方法 |
CN105455389A (zh) * | 2014-09-26 | 2016-04-06 | 卡西欧计算机株式会社 | 美甲设计显示控制装置、美甲打印装置及美甲设计显示控制方法 |
CN106313905A (zh) * | 2015-06-30 | 2017-01-11 | 卡西欧计算机株式会社 | 绘图装置以及绘图装置的绘图控制方法 |
CN106307967A (zh) * | 2015-06-30 | 2017-01-11 | 卡西欧计算机株式会社 | 绘图装置以及绘图装置的绘图方法 |
CN107296364A (zh) * | 2017-01-19 | 2017-10-27 | 广州天河高新技术产业开发区太极电子有限公司 | 一种基于移动互联网的美甲业务运营系统和方法 |
CN108749338A (zh) * | 2018-05-07 | 2018-11-06 | 广州杰赛科技股份有限公司 | 美甲打印校准方法、装置、设备及计算机可读存储介质 |
CN109349774A (zh) * | 2018-10-29 | 2019-02-19 | 徐悦 | 一种自动美甲方法和设备 |
CN109532255A (zh) * | 2018-12-28 | 2019-03-29 | 武汉朋谊科技有限公司 | 打印机的打印控制平台 |
CN109558784A (zh) * | 2017-09-27 | 2019-04-02 | 卡西欧计算机株式会社 | 指甲轮廓检测装置、指甲轮廓检测方法以及记录介质 |
CN109572239A (zh) * | 2019-01-14 | 2019-04-05 | 深圳市邻友通科技发展有限公司 | 一种美甲装置的打印方法、系统、美甲设备和介质 |
CN109978899A (zh) * | 2017-12-22 | 2019-07-05 | 卡西欧计算机株式会社 | 轮廓检测装置、描绘装置、轮廓检测方法以及记录介质 |
US10470546B2 (en) | 2013-08-23 | 2019-11-12 | Preemadonna Inc. | Systems, methods and apparatuses for decorating nails |
CN111216451A (zh) * | 2018-11-27 | 2020-06-02 | 卡西欧计算机株式会社 | 涂布装置、便携终端以及涂布系统 |
CN111300998A (zh) * | 2017-06-29 | 2020-06-19 | 卡西欧计算机株式会社 | 美甲打印装置及控制方法 |
CN111728344A (zh) * | 2019-03-25 | 2020-10-02 | 卡西欧计算机株式会社 | 印刷装置以及印刷方法 |
US11103041B2 (en) | 2017-10-04 | 2021-08-31 | Preemadonna Inc. | Systems and methods of adaptive nail printing and collaborative beauty platform hosting |
CN114074482A (zh) * | 2020-08-21 | 2022-02-22 | 卡西欧计算机株式会社 | 印刷装置、印刷控制方法以及记录介质 |
US11265444B2 (en) | 2013-08-23 | 2022-03-01 | Preemadonna Inc. | Apparatus for applying coating to nails |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102258547B1 (ko) * | 2013-12-31 | 2021-05-31 | 피나일스 오와이 | 네일 관리를 위한 방법 및 시스템 |
GB201407735D0 (en) * | 2014-05-01 | 2014-06-18 | Loft Crag | Nail art prining apparatus |
JP6384150B2 (ja) * | 2014-07-01 | 2018-09-05 | カシオ計算機株式会社 | 描画装置、および描画装置の描画制御方法 |
CA3044997C (en) * | 2014-07-23 | 2022-03-08 | Preemadonna Inc. | Apparatus for applying coating to nails |
CN104382327A (zh) * | 2014-12-03 | 2015-03-04 | 曹乃承 | 美甲装置和美甲、健康管理、信息推送方法 |
JP6575060B2 (ja) * | 2014-12-19 | 2019-09-18 | カシオ計算機株式会社 | 描画装置、描画装置の動作制御方法及び描画装置の動作制御プログラム |
JP6493198B2 (ja) * | 2015-12-22 | 2019-04-03 | カシオ計算機株式会社 | 描画装置及び描画装置の描画方法 |
JP6651874B2 (ja) * | 2016-02-02 | 2020-02-19 | カシオ計算機株式会社 | 描画装置及び描画装置の描画制御方法 |
CN106003725A (zh) * | 2016-06-29 | 2016-10-12 | 北京易速普瑞科技有限公司 | 一种美甲贴片制造方法及装置 |
JP7047294B2 (ja) * | 2017-09-19 | 2022-04-05 | カシオ計算機株式会社 | 輪郭検出装置、描画装置、輪郭検出方法及び輪郭検出プログラム |
JP7035405B2 (ja) * | 2017-09-21 | 2022-03-15 | カシオ計算機株式会社 | 輪郭検出装置、描画装置、輪郭検出方法及び輪郭検出プログラム |
JP7334826B2 (ja) | 2018-04-04 | 2023-08-29 | カシオ計算機株式会社 | ネイルプリント装置 |
JP2021520974A (ja) * | 2018-04-13 | 2021-08-26 | コーラル・ラボラトリーズ・インコーポレイテッドCoral Labs, Inc. | ネイルポリッシュの正確な塗布及び硬化を行うシステム及び方法 |
JP7124419B2 (ja) * | 2018-04-25 | 2022-08-24 | カシオ計算機株式会社 | ネイルプリント装置 |
US20200105007A1 (en) * | 2018-09-28 | 2020-04-02 | Mani.Me, Inc. | Apparatus and method for model reconstruction using photogrammetry |
JP6977693B2 (ja) * | 2018-10-04 | 2021-12-08 | カシオ計算機株式会社 | 印刷装置及び印刷方法 |
US11064784B2 (en) | 2019-01-14 | 2021-07-20 | Shenzhen Danya Technology Co., Ltd. | Printing method and system of a nail printing apparatus, and a medium thereof |
US10939738B2 (en) * | 2019-02-26 | 2021-03-09 | Elementree Inc. | Automatic nail polish application system and method |
JP2022116375A (ja) * | 2019-06-17 | 2022-08-10 | ジュネル株式会社 | ネイルサイズ推定装置 |
AU2020373040A1 (en) | 2019-10-29 | 2022-06-16 | NailPro, Inc. | Automated total nail care systems, devices and methods |
JP2021108010A (ja) * | 2019-12-27 | 2021-07-29 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法、学習モデルの生成方法、およびプログラム |
JP2021190868A (ja) * | 2020-05-29 | 2021-12-13 | キヤノン株式会社 | 映像同期装置、映像同期装置の制御方法及びプログラム |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5931166A (en) * | 1998-12-22 | 1999-08-03 | Weber; Paul J. | Fingernail decorating |
JP2000006384A (ja) * | 1998-06-25 | 2000-01-11 | Mitsumi Electric Co Ltd | 立体面に印刷できる印刷装置 |
CN1388743A (zh) * | 2000-05-26 | 2003-01-01 | 珍珠技术控股有限责任公司 | 使用喷墨术美化手指甲和脚趾甲 |
US6525724B1 (en) * | 1998-12-25 | 2003-02-25 | Kabushiki Kaisha Atlus | Nail ornamenting device |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU1353299A (en) * | 1997-12-24 | 1999-07-19 | Jit Ceremony Co., Ltd. | Nail art method and device |
-
2011
- 2011-08-12 JP JP2011176503A patent/JP5382078B2/ja active Active
-
2012
- 2012-08-09 US US13/570,562 patent/US8820866B2/en active Active
- 2012-08-10 CN CN201210284895.7A patent/CN102922880B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000006384A (ja) * | 1998-06-25 | 2000-01-11 | Mitsumi Electric Co Ltd | 立体面に印刷できる印刷装置 |
US5931166A (en) * | 1998-12-22 | 1999-08-03 | Weber; Paul J. | Fingernail decorating |
US6525724B1 (en) * | 1998-12-25 | 2003-02-25 | Kabushiki Kaisha Atlus | Nail ornamenting device |
CN1388743A (zh) * | 2000-05-26 | 2003-01-01 | 珍珠技术控股有限责任公司 | 使用喷墨术美化手指甲和脚趾甲 |
Cited By (43)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9889692B2 (en) | 2013-08-07 | 2018-02-13 | Nailae Technology Limited | System for applying a design on at least one nail surface |
CN105228832A (zh) * | 2013-08-07 | 2016-01-06 | 莉利科技有限公司 | 至少在一个指甲表面施用图案的系统和打印方法 |
CN105228832B (zh) * | 2013-08-07 | 2017-03-15 | 莉利科技有限公司 | 至少在一个指甲表面施用图案的系统和打印方法 |
US10477937B2 (en) | 2013-08-23 | 2019-11-19 | Preemadonna Inc. | Systems and apparatuses to apply a material to a nail |
US10653225B2 (en) | 2013-08-23 | 2020-05-19 | Preemadonna Inc. | Apparatus for applying coating to nails |
US10972631B2 (en) | 2013-08-23 | 2021-04-06 | Preemadonna, Inc. | Apparatus for applying coating to nails |
US11082582B2 (en) | 2013-08-23 | 2021-08-03 | Preemadonna Inc. | Systems and methods to initiate and perform the painting of an area of interest on a finger |
US11265444B2 (en) | 2013-08-23 | 2022-03-01 | Preemadonna Inc. | Apparatus for applying coating to nails |
US11290615B2 (en) | 2013-08-23 | 2022-03-29 | Preemadonna Inc. | Systems and methods to initiate and perform the painting of an area of interest on a finger |
US10470546B2 (en) | 2013-08-23 | 2019-11-12 | Preemadonna Inc. | Systems, methods and apparatuses for decorating nails |
CN104783475B (zh) * | 2014-01-20 | 2018-04-06 | 卡西欧计算机株式会社 | 描绘装置以及描绘装置的描绘控制方法 |
CN104783475A (zh) * | 2014-01-20 | 2015-07-22 | 卡西欧计算机株式会社 | 描绘装置以及描绘装置的描绘控制方法 |
CN105433577A (zh) * | 2014-09-22 | 2016-03-30 | 卡西欧计算机株式会社 | 指甲信息检测装置、描画装置以及指甲信息检测方法 |
CN105433577B (zh) * | 2014-09-22 | 2019-02-12 | 卡西欧计算机株式会社 | 指甲信息检测装置、描画装置以及指甲信息检测方法 |
CN105455389B (zh) * | 2014-09-26 | 2019-01-01 | 卡西欧计算机株式会社 | 美甲设计显示控制装置、美甲打印装置及美甲设计显示控制方法 |
CN105455389A (zh) * | 2014-09-26 | 2016-04-06 | 卡西欧计算机株式会社 | 美甲设计显示控制装置、美甲打印装置及美甲设计显示控制方法 |
CN105459624A (zh) * | 2014-09-26 | 2016-04-06 | 卡西欧计算机株式会社 | 指甲打印装置及指甲打印装置的动作控制方法 |
CN104621953A (zh) * | 2015-03-08 | 2015-05-20 | 刘晓英 | 指甲图案智能生成器 |
CN106313905B (zh) * | 2015-06-30 | 2018-05-04 | 卡西欧计算机株式会社 | 绘图装置以及绘图装置的绘图控制方法 |
CN106313905A (zh) * | 2015-06-30 | 2017-01-11 | 卡西欧计算机株式会社 | 绘图装置以及绘图装置的绘图控制方法 |
CN106307967A (zh) * | 2015-06-30 | 2017-01-11 | 卡西欧计算机株式会社 | 绘图装置以及绘图装置的绘图方法 |
CN106307967B (zh) * | 2015-06-30 | 2019-08-02 | 卡西欧计算机株式会社 | 绘图装置以及绘图装置的绘图方法 |
CN105058797A (zh) * | 2015-08-20 | 2015-11-18 | 上海中医药大学附属岳阳中西医结合医院 | 一种3d打印美甲的方法 |
WO2018133806A1 (zh) * | 2017-01-19 | 2018-07-26 | 广州天河高新技术产业开发区太极电子有限公司 | 一种基于移动互联网的美甲业务运营系统和方法 |
CN107296364A (zh) * | 2017-01-19 | 2017-10-27 | 广州天河高新技术产业开发区太极电子有限公司 | 一种基于移动互联网的美甲业务运营系统和方法 |
CN111300998A (zh) * | 2017-06-29 | 2020-06-19 | 卡西欧计算机株式会社 | 美甲打印装置及控制方法 |
CN111300998B (zh) * | 2017-06-29 | 2022-01-14 | 卡西欧计算机株式会社 | 美甲打印装置及控制方法 |
CN109558784A (zh) * | 2017-09-27 | 2019-04-02 | 卡西欧计算机株式会社 | 指甲轮廓检测装置、指甲轮廓检测方法以及记录介质 |
US11717070B2 (en) | 2017-10-04 | 2023-08-08 | Preemadonna Inc. | Systems and methods of adaptive nail printing and collaborative beauty platform hosting |
US11103041B2 (en) | 2017-10-04 | 2021-08-31 | Preemadonna Inc. | Systems and methods of adaptive nail printing and collaborative beauty platform hosting |
CN109978899A (zh) * | 2017-12-22 | 2019-07-05 | 卡西欧计算机株式会社 | 轮廓检测装置、描绘装置、轮廓检测方法以及记录介质 |
CN108749338B (zh) * | 2018-05-07 | 2019-07-09 | 广州杰赛科技股份有限公司 | 美甲打印校准方法、装置、设备及计算机可读存储介质 |
CN108749338A (zh) * | 2018-05-07 | 2018-11-06 | 广州杰赛科技股份有限公司 | 美甲打印校准方法、装置、设备及计算机可读存储介质 |
CN109349774A (zh) * | 2018-10-29 | 2019-02-19 | 徐悦 | 一种自动美甲方法和设备 |
CN111216451A (zh) * | 2018-11-27 | 2020-06-02 | 卡西欧计算机株式会社 | 涂布装置、便携终端以及涂布系统 |
CN111216451B (zh) * | 2018-11-27 | 2022-01-04 | 卡西欧计算机株式会社 | 涂布装置、便携终端以及涂布系统 |
CN109532255B (zh) * | 2018-12-28 | 2020-06-02 | 北京数科网维技术有限责任公司 | 打印机的打印控制平台 |
CN109532255A (zh) * | 2018-12-28 | 2019-03-29 | 武汉朋谊科技有限公司 | 打印机的打印控制平台 |
CN109572239A (zh) * | 2019-01-14 | 2019-04-05 | 深圳市邻友通科技发展有限公司 | 一种美甲装置的打印方法、系统、美甲设备和介质 |
CN109572239B (zh) * | 2019-01-14 | 2022-01-18 | 深圳市邻友通科技发展有限公司 | 一种美甲装置的打印方法、系统、美甲设备和介质 |
CN111728344A (zh) * | 2019-03-25 | 2020-10-02 | 卡西欧计算机株式会社 | 印刷装置以及印刷方法 |
CN111728344B (zh) * | 2019-03-25 | 2023-09-01 | 卡西欧计算机株式会社 | 印刷装置以及印刷方法 |
CN114074482A (zh) * | 2020-08-21 | 2022-02-22 | 卡西欧计算机株式会社 | 印刷装置、印刷控制方法以及记录介质 |
Also Published As
Publication number | Publication date |
---|---|
JP5382078B2 (ja) | 2014-01-08 |
US20130038648A1 (en) | 2013-02-14 |
US8820866B2 (en) | 2014-09-02 |
JP2013039168A (ja) | 2013-02-28 |
CN102922880B (zh) | 2015-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102922880B (zh) | 指甲打印装置及印刷控制方法 | |
CN102555525B (zh) | 指甲印刷装置及印刷控制方法 | |
CN102948994B (zh) | 美甲打印装置及打印控制方法 | |
CN103660611B (zh) | 美甲打印装置及其印刷控制方法 | |
CN105433577A (zh) | 指甲信息检测装置、描画装置以及指甲信息检测方法 | |
US6525724B1 (en) | Nail ornamenting device | |
CN104272921B (zh) | 指甲打印装置、指甲打印装置的打印方法 | |
JP5601103B2 (ja) | ネイルプリント装置及び印刷制御方法 | |
US10696067B2 (en) | Nail printing apparatus and control method | |
CN109637664A (zh) | 一种bmi评测方法、装置及计算机可读存储介质 | |
CN104584070A (zh) | 认证装置以及认证方法 | |
CN1388743A (zh) | 使用喷墨术美化手指甲和脚趾甲 | |
WO2012127798A1 (ja) | 学習支援装置、電子ペン、学習支援システム、学習支援方法、及び学習支援プログラム | |
CN104423578A (zh) | 交互式输入系统和方法 | |
CN103029437A (zh) | 指甲打印装置 | |
CN110074788A (zh) | 一种基于机器学习的身体数据获取方法和装置 | |
JP2018195267A (ja) | 情報処理装置、情報処理装置の制御方法及びプログラム | |
CN109272517A (zh) | 绘图装置、绘图方法以及记录有程序的记录介质 | |
CN101794377A (zh) | 检测脸的特征部位的坐标位置的图像处理装置 | |
JP5928264B2 (ja) | ネイルプリント装置及び印刷制御方法 | |
CN103218801B (zh) | 图像处理设备和方法、以及指定标记估计设备和方法 | |
JP7334826B2 (ja) | ネイルプリント装置 | |
JP7392696B2 (ja) | 輪郭検出装置、印刷装置、輪郭検出方法及びプログラム | |
CN110781734A (zh) | 一种基于纸笔交互的儿童认知游戏系统 | |
JP7087593B2 (ja) | ネイルプリント装置、指種判定方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |