CN103260036A

CN103260036A - 图像处理装置、图像处理方法、存储介质以及图像处理系统

Info

Publication number: CN103260036A
Application number: CN2013100511233A
Authority: CN
Inventors: 喜多一记; 坂田胜
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 2012-02-16
Filing date: 2013-02-16
Publication date: 2013-08-21
Anticipated expiration: 2033-02-16
Also published as: JP5578186B2; US20130216136A1; JP2013168051A; CN103260036B

Abstract

本发明提供图像处理方法、图像处理装置以及图像处理系统。图像处理方法具备拍摄被摄体和与该被摄体不同的对象的步骤；提取该对象的特征的步骤；和将所述被摄体的图像变换为与所述对象的特征相应的角色图像的步骤。

Description

图像处理装置、图像处理方法、存储介质以及图像处理系统

技术领域

本发明涉及制作动画片等中登场的角色的图像即角色图像的图像处理装置、图像处理方法、存储介质以及图像处理系统。

背景技术

在本说明书中，“角色图像”是指在动画片中登场的非写实地进行表现的人物的图像。

与角色图像类似的有插画，例如在专利文献1(JP特开2004-102819号公报)中记载了根据照片图像来制作插画性图像的技术。但是，这终究只是将实物的照片进行“插画性”的表现的技术，本说明书所说的角色图像是指与实物的照片不同的具有个性的人物等的图像。根据牛津高级学习词典，“插画(illustration)”是指书籍或杂志中的图画或描画”，“角色”是指“书籍、游戏、电影、漫画等的登场人物或动物”。

关于这样的角色图像，例如在下述的文献2(河谷大和(北海道大学)等，“基于动画片角色的特征提取的动画度(animedegree)评价及其应用”FIT2008(第7次信息科学技术研讨会)，I-040，2008年)中，讨论了成为动画度的要素。另外，在拍摄人物并将其变换为角色图像的最单纯的手法中，准备众多的角色图像的数据库，选择与被摄体的特征最匹配的角色图像(例如，文献3：JP特开2004-313225号公报)。

所谓被摄体的特征，作为单纯举例，能举出男女的性别、颜色、明度、轮廓的形状等。若应用脸部识别技术，则还能提取眼睛的大小、脸部的纵横比等更详细的特征。

另一方面，在数据库中大量存储的角色图像中附带存储有多个特征信息，取得与从所述被摄体提取的特征信息之间的匹配，选择匹配性最高的角色图像即可。

如此，在现有技术中，通过取得与从被摄体提取的特征信息之间的匹配，选择匹配性最高的角色图像，由此将被摄体变换为角色图像。因此，在角色图像中能使被摄体的特征得到反映的另一面，对某人物而变换出的匹配性最高的角色图像只有1个。

即，由于被设为被摄体的某人物的特征是既成事实，因此对应于该既成事实而变换的角色图像与该人物总是存在对应关系，基本上同一人物被变换为同一角色图像。因此，角色图像的多样性较为缺乏。

当然，若驱使CG(Computer Graphics，计算机图形)来对通过现有技术而变换的角色图像进行加工，则能制作对某人物加上了不同的特征或印象的角色图像。但是，通过CG技术来加工图像则需要对CG技术的高度的知识和技术等，对通常的用户来说是困难的，而且无法容易且迅速地进行。

发明内容

本发明鉴于这样的现有技术的课题而提出，目的在于提供能容易且迅速地制作加上了能自由选择与被摄体的特征不同的特征的角色图像的图像处理装置、图像处理方法、记录介质以及图像处理系统。

为了解决所述课题，本发明是在将拍摄得到的被摄体的图像变换为角色图像的图像处理装置中的角色图像的制作方法，其特征在于：拍摄与该被摄体不同的对象，提取该对象的特征，将所述被摄体的图像变换为与所述对象的特征相应的角色图像。

即，在拍摄被摄体后，每当对该被摄体进行角色图像化时，通过拍摄其它的对象，用该对象的特征来对被摄体进行角色图像化。

根据本发明，能够容易且迅速地制作出加入了与被摄体的特征不同的特征的角色图像。

附图说明

图1是表示本发明的一个实施方式所涉及的数字照相机的构成的框图。

图2是表示本实施方式的网络系统的构成的概念图。

图3是表示图像服务网站的构成的框图。

图4A是表示图像服务网站内的第1DB的构成的概念图，图4B是表示图像服务网站内的第2DB的构成的概念图。

图5是表示数字照相机和图像服务网站的处理顺序的流程图。

图6是表示图5中的步骤S102的用于检测被摄体的脸部的处理的详细的流程图。

图7A是表示用于提取脸部的眼睛的区域的面具图案的示例的图，图7B是表示眼睛的识别区域的条件数据的示例的图，图7C是表示脸部识别区域的条件数据的示例的图。

图8A是表示第1次的摄影图像的一例的图，图8B是表示被剪切的人物的脸部图像的一例的图。

图9是表示图5中的步骤S106的用于检测对象的处理的详细的流程图。

图10A是表示第2次的摄影图像的一例的图，图10B是表示被剪切的对象的一例的图。

图11是用于说明提取人物的脸部的区域的特征的处理顺序的一例的图。

图12是表示提取对象的特征的处理顺序的一例的流程图。

图13是表示从摄影图像到变换为角色图像为止的示例的迁移图。

图14是表示从摄影图像到变换为角色图像为止的示例的迁移图。

图15是表示从摄影图像到变换为角色图像为止的示例的迁移图。

图16是表示从摄影图像到变换为角色图像为止的示例的迁移图。

具体实施方式

下面，说明本发明的实施方式。图1是表示应用了本发明的实施方式所涉及的数字照相机1的电气构成的框图。数字照相机1拥有通信功能，具备：CPU11、与CPU11连接的ROM12、RAM13、内部存储器14。在ROM12中存储有用于使CPU11进行后述的流程图所示的动作的程序。另外，CPU11包含用于识别处理摄像元件8所拍摄的脸部的脸部识别引擎150、和用于剪切脸部图像的剪切处理引擎450。

脸部识别引擎150具备在照片中拍到1个或多个脸部的情况下识别各个脸部的能力。另外，脸部识别引擎150由与CPU11联动的ASIC(Application Specific Integrated Circuit：面向特定用途的集成电路)、或DSP(Digital Signal Processor，数字图像处理器)、或可重构LSI(能通过C语言等的程序来重构的LSI)构成。

剪切处理引擎450执行后述的流程图中说明的剪切脸部图像的处理。RAM13是CPU11根据需要而暂时存储各种数据的工作用的存储器。

内部存储器14是硬盘或基于闪速存储器的大容量非易失性存储器。

显示控制部16通过基于从CPU11提供的显示用的图像数据来驱动液晶显示面板3，来将图像、各种菜单显示在液晶显示面板3上。触摸输入控制部17基于CPU11的控制来输入触控面板5的操作信号。

触控面板5能从静电容方式、光学方式、电阻膜方式、表面弹性波方式、超声波方式、电磁感应方式等各种各样的存在中进行适当的选择。还能嵌入指纹认证、静脉认证等的功能。

存储卡接口18是控制拆装自由地安装在存储卡槽的各种存储卡60与CPU11之间的数据的输入输出的输入输出接口。

键输入部7具备快门键、电源键等的通常配置在数字照相机上的按键。键输入控制部20基于CPU11的控制来扫描键输入部7，取入按键的操作信号。

摄像控制部19驱动摄像元件8来进行取入被摄体的图像的控制。以拜尔数据(Bayer data)而被取入的图像数据在被变换为YUV以及RGB后，被压缩成JPEG(Joint Photographic Group，联合图像专家组)数据并被记录在内部存储器14或存储卡60中。

电源控制部70经由图外的蓄电池来取入DC电源，对各部提供主电源71或待机电源72的电力。

通信控制部30与便携电话线路31或经由无线LAN32而与因特网500连接，进行包括邮件的收发、内容的收发在内的通信控制。地址簿33用在邮件收发中，实际设于内部存储器14内。

图2是表示本实施方式的网络系统的构成的概念图。510是个人计算机，用无线LAN32等经由通信控制部30来与数字照相机1连接，能进行在数字照相机1中无法设定的复杂的设定。

图像服务网站530作为如下单元发挥功能：提取单元，其从与数字照相机1拍摄并发送来的所述被摄体不同的物体即对象的图像中提取该对象的特征；和变换单元，其将数字摄像机1拍摄并发送来的所述被摄体的图像变换为与所提取的对象的特征相应的角色图像。另外，“对象”是指与希望变换为角色图像的被摄体不同的、为了赋予要制作的角色图像的印象(特征)而拍摄的被摄体。

图3是表示该图像服务网站530的构成的框图。该图像服务网站530由DB(database，数据库)区111、程序区114以及控制区115构成。在DB区111设有第1DB100和第2DB200。在程序区114容纳有用于执行后述的流程图所示的各种处理的程序。另外，控制区115具备CPU117和缓冲存储器118。

前述的第1DB100如图4A所示，区分为人的脸部特征信息存储区域101、头部角色图像数据存储区域102以及附带特征信息存储区域103。在人的脸部特征信息存储区域101中，按各特征量F(1)、F(2)、F(3)、F(4)…区分地存储后述那样的表示脸部的特征的脸部特征信息。另外，在头部角色图像数据存储区域102中，与所述脸部的各特征量F(1)、F(2)、F(3)、F(4)…对应地存储后述图13～图16的603、703、803、903所示那样的使由包含角色图像中的头发在内的脖子以及脸部构成的头部的图像进行显示的头部角色图像数据A1、A2、A3、A4…。在附带特征信息存储区域103中，与头部角色图像A1、A2、A3、A4…对应地分别存储特征数据D(1)、D(2)、D(3)、D(4)…。特征数据D(i)包含色调H(i)、饱和度S(i)、明度V(i)、轮廓形状C(i)、大小＝L(i)。i为1到M的任意的整数。

前述的第2DB200如图4B所示，按各个N＝1、2、3、4…和每个连续编号N来区分为对象的模板存储区域201、身体角色图像数据存储区域202、附带特征信息区域203以及标记区域204。在对象的模板存储区域201中，存储有表示“猕猴桃”、“蛋糕”、“小猪存钱罐”、“汽车”等的人以外物体的特征的特征信息(在本实施方式中，是色调、饱和度、明度、轮廓形状、大小的各特征量数据)，作为模板。另外，在身体角色图像存储区域202中，与所述各模板对应地存储如后述图13～图16的605、705、805、905所示那样的身体角色图像数据B1、B2、B3、B4…。在附带特征信息存储区域203中，与身体角色图像数据B1、B2、B3、B4…对应地分别存储特征数据d(1)、d(2)、d(3)、d(4)…。特征数据d(j)包含色调h(j)、饱和度s(j)、明度＝v(j)、轮廓形状c(j)、大小l(j)。j为1到Nmax的任意的整数。在标记区域204，设置表示与拍摄得到的对象相似的相似标记。

接下来，按照图5所示的流程图来说明以上的构成所涉及的本实施方式中的动作。左侧表示数字照相机1的处理，右侧表示图像服务网站530的处理。将数字照相机1设定为角色图像制作模式时，通过CPU11按照容纳于ROM12中的程序来执行处理，来使数字摄像机1如图5的左侧的流程图那样进行动作。另外，图像服务网站530通过CPU117按照容纳在程序区114的程序来执行处理，来如图5的右侧的流程图那样进行动作。

即，数字照相机1直到执行第1次的摄影处理为止待机(步骤S101)。在用户操作设于键输入部4的快门键时，摄像控制部19按照来自CPU11的指示来驱动摄像元件8。由此，以拜尔数据从摄像元件8中取入的图像数据在被摄像控制部19变换为YUV以及RGB数据后，被压缩成JPEG数据并记录在内部存储器14或存储卡60中。

于是，步骤S101的判断成为“是”，CPU11使处理从步骤S101前进到步骤S102，并判断在所记录的图像中是否有人物的脸部。

图6是表示检测该被摄体的脸部的处理即步骤S102的详细的流程图。首先，如前述那样取入被记录在内部存储器14或存储卡60中的图像(步骤S301)，基于亮度或色差数据来提取轮廓(步骤S302)。轮廓并不限于闭合曲线，也可以是以图像的端部为起点/终点的曲线。而且，轮廓的数量也不限于1个，可以是多个。接下来，将所述图像分割为以该提取出的轮廓为边界的多个区域(步骤S303)。从分割区域中选择任意一个区域作为对象区域(步骤S304)。然后，基于RGB或色差数据来算出已选择的区域的平均RGB或平均色差数据(步骤S305)，将该算出的RGB或色差值变换为HSV(步骤S306)。

接着，判断该变换的HSV是否为肤色的区域，即色调(Hue)是否在6～38°内(步骤S307)，在该判断为“否”的情况下，判断为不是脸部的区域(步骤S315)。接下来，判断本次选择的区域是否是在该图像中是最后的区域(步骤S318)，在不是最后的区域的情况下，返回步骤S304并选择下一区域，反复前述的处理。然后，若直到最后的区域已执行以上的处理，则步骤S318的判断成为“是”，输出识别结果作为判断结果。

另外，在步骤S307的判断为“是”的情况下，使用图7A、图7B、图7C所示的面具图案来在所述对象区域中检索眼睛和瞳孔的区域(步骤S308)。

图7A为用于提取脸部的眼睛的区域的面具图案的示例，将其作为参考图案，使用模板匹配等来进行检索，能从输入图像中检索眼睛或脸部所在的图像区域。图7B是识别眼睛的数据的示例，例如，将眼睛的长细比设为b/a，将符合与α1≤b/a≤α2的条件的被摄体图像的区域识别为“眼睛的区域”。另外，还设(眼睛的面积)

(黑眼(瞳孔)的面积)s2＝πr²，黑眼(瞳孔)的比率S2/S1＝r²/ab，将符合β1≤r²/ab≤β2等的条件的被摄体图像的区域被识别为“眼睛的区域”。另外，图7C是在用于识别为人的脸部的条件数据的设定中，例如能将满足(眉下至鼻下的长度)或(右眼的宽度)

W3等的条件的被摄体图像的区域识别为是“脸部的区域”。

由此，使用图7A、图7B、图7C所示的脸部的面具图案，来在所述对象区域中检索眼睛与瞳孔的区域(步骤S308)。接下来，判定能否检测到眼睛的区域(步骤S309)，在无法检测到的情况下，判断为不是脸部的区域(步骤S315)。在能检测出的情况下，算出的眼睛的纵横比(b/a)、眼睛与瞳孔(黑眼)的面积比(r²/ab)(步骤S310)，判断眼睛的纵横比是否在规定范围内，即判断是否符合前述的α1≤b/a≤α2的条件(步骤S311)。在该判断为“否”的情况下，判断为不是脸部的区域(步骤S315)。

另外，在步骤S311的判断为“是”的情况下，判断眼睛与瞳孔的比率是否在规定范围内，即是否符合所述β1≤r²/ab≤β2的条件(步骤S312)。在该判断为“否”的情况下，判断为不是脸部的区域(步骤S315)。在步骤S312的判断为“是”的情况下，算出右眼的宽度W1、右眼与左眼的间隔W2、左眼的宽度W3(步骤S313)，判断W1是否与W2、W3相等，即是否是W1-δ≤W2≤W1+δ、W1-δ≤W3≤W1+δ(步骤S314)。在该判断为“否”的情况下，判断为不是脸部的区域(步骤S315)。然后，在该判断为“是”的情况下，即，步骤S307、S309、S311、S312、S314的判断全部为“是”的情况下，将在所述S304中所选择的区域识别为脸部的区域(步骤S316)。进而，存储该识别出的脸部的区域的位置坐标(步骤S317)，输出识别结果，作为判断结果(步骤S319)。

因此，通过上述的处理，在图5的流程图的步骤S102中判断为在图像中有人物的脸部的情况下，输出“是”，在没有人物的脸部的情况下输出“否”。然后，在输出“是”的情况下，执行剪切所判断出的脸部图像(脸部部分)的剪切处理。该剪切处理通过剪切在所述S302提取出的轮廓、即在所述步骤S316识别为脸部的区域的图像部分来进行。进而，将该剪切的脸部图像发送给图像服务网站530(步骤S104)。

因此，若在通过第1次的摄影拍摄了例如具有图8A所示的脸部的人物P0存在的图像P1，则如图8B所示，从人物P0，剪切出脸部部分P2，并将其图像数据从数字照相机1发送给图像服务网站530。

另外，如此地在本实施方式中，在数字照相机1侧执行用于剪切脸部图像(脸部部分)的剪切处理(步骤S103)，将该剪切得到的脸部图像发送给图像服务网站530。但是，还能从数字照相机1侧，将在第1次拍摄的图像自身发送给图像服务网站530，在图像服务网站530侧进行剪切处理。

如此，不仅能减轻处理能力低于服务器(图像服务网站530)的数字照相机1的处理负担，还能在处理能力高的服务器(图像服务网站530)侧正确且迅速地进行剪切处理。

接下来，数字照相机1直到执行第2次的摄影处理为止都待机(图5的步骤S105)。在用户操作设于键输入部4的快门键时，与前述相同，摄像控制部19按照来自CPU11的指示来驱动摄像元件8，并在通过摄像控制部19将以拜尔数据从摄像元件8取入的图像数据变换为YUV以及RGB数据后，压缩成JPEG数据并记录在内部存储器14或存储卡60中。

于是，步骤S105的判断成为“是”，CPU11使处理从步骤S105前进到步骤S106，并判断例如在图像的中心部是否有人物的脸部以外的物体。

图9是表示检测人物的脸部以外的物体的处理即步骤S106的详细的流程图。首先，如前述那样，在记录于内部存储器14或存储卡60的图像中取入用光标C(参照图10A)包围的图像的中央部分(步骤S401)，基于亮度或色差数据来提取轮廓(步骤S402)。接下来，在所述图像中提取以该提取出的轮廓为边界的区域(步骤S403)，将该提取出的区域设为选择区域(步骤S404)。然后，基于RGB或色差数据来算出所选择的区域的平均RGB或平均色差数据(步骤S405)，将该算出的RGB或色差值变换为HSV(Hue，Saturation，Value，色调，饱和度，亮度)(步骤S406)。

接着，判断该变换的HSV是否为肤色的区域，即色调(Hue)是否在6～38°内(步骤S407)，在该判断为“否”的情况下，判断出为脸部以外的物体的区域(步骤S415)。进而，存储该识别出的物体的区域的位置坐标(步骤S417)，输出识别结果作为判断结果(是)(步骤S419)。

另外，在步骤S407的判断为“是”的情况下，使用图7A所示的脸部的面具图案，来在所述对象区域中检索眼睛和瞳孔的区域(步骤S408)。接下来，判断能否检测到眼睛的区域(步骤S409)，在无法检测到的情况下，判断为是物体的区域(步骤S415)。在能检测到的情况下，算出眼睛的纵横比(b/a)、眼睛与瞳孔(黑眼)的面积比(r²/ab)(步骤S410)，判断眼睛的纵横比是否在规定范围内，即判断是否符合所述α1≤b/a≤α2的条件(步骤S411)。在该判断为“否”的情况下，判断为是物体的区域(步骤S415)。

另外，在步骤S411的判断为“是”的情况下，判断眼睛与瞳孔的比率是否在规定范围内，即判断是否符合前述的β1≤r²/ab≤β2的条件(步骤S412)。在该判断为“否”的情况下，判断为是物体的区域(步骤S415)。在步骤S412的判断为“是”的情况下，算出右眼的宽度W1、右眼与左眼的间隔W2、左眼的宽度W3(步骤S413)，判断W1是否与W2、W3相等，即判断是否为W1-δ≤W2≤W1+δ、W1-δ≤W3≤W1+δ(步骤S414)。在该判断为“否”的情况下，判断为是物体的区域(步骤S415)。然后，在该判断为“是”的情况下，即在步骤S407、S409、S411、S412、S414的判断全部为“是”的情况下，不将在前述步骤S404选择的区域识别为物体的区域，而是识别为脸部的区域(步骤S416)，输出识别结果作为判断结果(否)(步骤S418)。

因此，通过上述的处理，在图5的左侧的流程图的步骤S106中，在判断为在图像的中心部有人物的脸部以外的物体的情况下输出“是”。然后，在输出“是”的情况下，执行剪切已被判断的物体的剪切处理(步骤S107)。该剪切处理通过剪切在前述步骤S402提取出的轮廓、即在前述步骤S415识别为物体的区域的图像部分来进行。进而，将该剪切得到的物体的图像作为对象的图像而发送给图像服务网站530(步骤S108)。

因此，通过第2次的摄影，例如如图10A所示那样，若拍摄到在显示于液晶显示面板3的取景图像中且在显示于中心部的光标C内存在猕猴桃P3的图像P4，则如图10B所示那样，从图像P4中剪切猕猴桃P1部分，并将该图像数据作为对象的图像数据而从数字照相机1发送给图像服务网站530。

另一方面，图像服务网站530判断是否接收到在前述步骤S104从数字照相机1发送来的脸部图像数据(步骤S201)。若接收到该脸部图像数据，则执行头部角色图像变换处理(步骤S202)。该头部角色图像变换处理由下述(1)以及(2)的处理构成。

(1)提取以接收到的脸部图像数据所表征的脸部图像的特征的处理。

(2)从第1DB100读出与该提取的特征对应的头部角色图像数据A(i)的处理。

图11是表示前述(1)的提取脸部的特征的处理顺序的一例的流程说明图。即，在步骤S114(脸部的位置检测)中，将各种的曲线适用到脸部的轮廓图像上来检测人物的脸部部分。接下来，在步骤S116(脸部的特征点的位置检测)中，剪切出图像的脸部部分，将脸部的大小标准化来检测脸部的特征点的位置。进而，在步骤S118(特征量的检测)中，通过小波变换等，从各特征点的图像中提取频率分量等的每个个人的特征量F。

若将该特征量F的从最小值到最大值的摆动范围设为1000，则在图4A中，则在能得到特征量F(1)为1～10，F(2)为11～20，F(3)为21～30、…F(100)为991～1000的范围的特征量时，这些特征量与对应的头部角色图像数据A1、A2、A3、…A100对应。

在该例中，将特征量的范围分为1000并与100种类的头部角色图像(下面将用头部角色图像数据表征的图像称作头部角色图像)建立对应，但对应关系、头部角色图像的数量等都能适当进行设定。

因此，在该示例的情况下，在图4A所示的第1DS100的人的脸部特征信息存储区域101中存储多个所述特征量F(1)、F(2)、F(3)、F(4)…，在头部角色图像数据存储区域102中，与各特征量对应地存储不同的头部角色图像数据A(1)、A(2)、A(3)、A(4)…。然后，在所述(2)的处理中，通过读出与特征量对应的头部角色图像数据来完成角色图像变换处理(S202)。

然后，在图5的右侧的流程图中，在接着S202的步骤S203中，判断是否接收到从数字照相机1发送来的对象图像数据。若接收到该对象图像数据，则执行身体角色图像变换处理(步骤S204)。该身体角色图像变换处理由下述(3)以及(4)的处理构成。

(3)提取以所接收到的对象图像数据所表征的对象的特征的处理。

(4)从第2DB200读出与该提取出的对象的特征对应的身体角色图像数据B(j)的处理。

图12是表示所述(3)的提取对象的特征的处理顺序的流程图。图像服务网站530的CPU117基于容纳在程序区114的程序来执行在该流程图中所示的处理。即，将用于对添加在第2DB200的行的连续编号N进行计数的计数器N置位为初始值“1”(步骤S501)。

接着，执行来自接收到的对象图像的特征提取处理(步骤S502)。在此，在本实施方式中，将进行提取的特征设为色调、饱和度、明度、轮廓形状、大小的各特征量数据。因此，通过该步骤S502的处理，在缓冲存储器118中存储色调h(0)、饱和度s(0)、明度v(0)、轮廓形状c(0)、大小l(0)，作为对象图像的特征数据d(0)。

然后，比较存储在该缓冲存储器118中的特征数据d(0)的色调h(0)、饱和度s(0)、明度v(0)、轮廓形状c(0)、大小l(0)、与附随于第2DB200的第N行的存储区域202中所存储的身体角色图像数据B(N)上的特征数据d(N)(色调h(N)、饱和度s(N)、明度v(N)、轮廓形状c(N)、大小l(N))，算出相似度(步骤S503)。即，算出所提取的特征数据d(0)的各值与存储的特征数据d(N)的各值的比率。

接下来，判断该算出的比率即相似度是否为规定值以上(步骤S504)，在不足规定值的情况下前进到步骤S506。然后，直到N的值成为第2DB200的行的最大值即Nmax位置，对N的值进行递增(步骤S507)并反复进行从步骤S503起的处理。另外，在相似度为规定值以上的情况下，将对象识别为模板的物体(步骤S505)。因此，在相似度为规定值以上的情况下，将对象特定为“猕猴桃”、“蛋糕”、“小猪存钱罐”、“汽车”等的人以外的物体。

例如，设相似度的规定值以上为0.9～1.1(1.0＝一致)。若拍摄并提取的对象的特征数据d(0)的色调h(0)与附随于第2DB200的第1行(N＝1)的身体角色图像B(1)的色调h(1)的相似度被判断为0.8，则由于偏离了规定值的范围，因此前进到第2行(N＝2)的比较。若在第2行将色调的相似度判断为1.05，则由于在规定值的范围内，因此前进到第2行的饱和度的相似度比较，在此，若相似度如0.98那样在规定范围内，则前进到第2行的明度的比较。若在此明度的相似度如1.2那样偏离了规定范围，则结束第2行的比较，前进到第3行的比较。然后，若判断为附随于第3行的特征数据B3的全部特征数据的要素都在规定范围内，则将第3行的身体角色图像(下面将用身体角色图像数据表征的图像称作身体角色图像)判断为与拍摄的对象相似，在第2DB200的标记区域204建立相似标记(步骤S508)。

直到Nmax位置进行该相似度比较处理，设建立了相似标记的身体角色图像数据有10个。接下来，进行与在DB100中决定的头部角色图像之间的匹配(步骤S509)。即，由于头部角色图像与被摄体的脸部相似，身体角色图像与对象相似，因此，从建立了相似标记的10个身体角色图像数据中选择与已经决定的头部角色图像在特征上最相似的身体角色图像数据。具体地，头部角色图像A1、A2、A3、…分别附带有特征数据D(1)、D(2)、D(3)，作为色调、饱和度、明度、轮廓形状、大小，比较附随于建立相似标记的10个身体角色图像B(j)的特征数据d(j)、与决定的头部角色图像A(i)的特征数据D(i)的相似度，并特定各要素的相似度的平均最接近1的身体角色图像B(j)。

然后，在所述(4)的处理中，通过读出存储于与在对象的模板存储区域201中所特定的模板对应的行中的身体角色图像数据B(j)(步骤S510)，来完成身体角色变换处理(S204)。

然后，执行用于合成在所述步骤S202读出的头部角色图像A(i)、和在所述步骤S204读出的身体角色图像B(j)的合成处理(步骤S204)。即，通过将头部角色图像A(i)合成结合到身体角色图像B(j)的上端部，来制作全身角色图像。然后，将该制作的全身角色图像数据发送给数字照相机1(步骤S206)。

于是，数字照相机1接收从该图像服务网站530发送来的全身角色图像数据，将其显示在液晶显示面板3并存储在内部存储器14或存储卡60中(步骤S109)。

因此，根据本实施方式，能容易且迅速地制作加上了与作为被摄体的人物的特征不同的特征的角色图像。并且，在实施方式中，由于角色图像使头部的特征反映被摄体人物的脸部的特征，因此，能容易且迅速地制作加入了被摄体人物的特征并加入了与该被摄体人物的特征不同的特征的角色图像。

即，如图13所示，在通过第1次的快门键操作来拍摄人物601时，对其脸部图像602进行剪切处理，并将剪切得到的图像数据从数字照相机1发送给图像服务网站530。于是，图像服务网站530接受该剪切的图像数据，并将其变换为与脸部图像602的特征相应的头部角色图像(由包含头发在内的脖子以及脸部构成)603。

另外，在通过第2次的快门键操作使猕猴桃604位于光标C内来进行拍摄时，对猕猴桃604的图像部分进行剪切处理，并将剪切得到的图像数据从数字照相机1发送给图像服务网站530。于是，图像服务网站530接受该剪切的图像数据，并将其变换为与猕猴桃604的特征相应的身体角色图像605。然后，图像服务网站530合成头部角色图像603和身体角色图像605来制作全身角色图像606，并将其发送给数字照相机1。

因此，能容易且迅速地制作具有作为被摄体的人物的脸部图像602、并加上了与其不同的物体即作为对象的猕猴桃604的特征的角色图像。

另外，如图14所示，在通过第1次的快门键操作来拍摄人物时，对其脸部图像702进行剪切处理，并将剪切得到的图像数据从数字照相机1发送给图像服务网站530。于是，图像服务网站530接受该剪切的图像数据，并将其变换为与脸部图像702的特征相应的头部角色图像703。

在通过第2次的快门键操作使蛋糕704位于光标C内来进行拍摄时，对蛋糕704的图像进行剪切处理，并将剪切得到的图像数据从数字照相机1发送给图像服务网站530。于是，图像服务网站530接收该剪切的图像数据，并将其变换为与蛋糕704的特征相应的身体角色图像705。然后，图像服务网站530合成头部角色图像703和身体角色图像705来制作全身角色图像706，并将其发送给数字照相机1。

另外，如图15所示，在通过第1次的快门键操作来拍摄人物时，对其脸部图像802进行剪切处理，并将剪切得到的图像数据从数字照相机1发送给图像服务网站530。于是，图像服务网站530接受该剪切的图像数据，并将其变换为与脸部图像802的特征相应的头部角色图像803。

在通过第2次的快门键操作使小猪的存钱罐804位于光标C内来进行拍摄时，对小猪的存钱罐804的图像进行剪切处理，并将剪切得到的图像数据从数字照相机1发送给图像服务网站530。于是，图像服务网站530接收该剪切的图像数据，并将其变换为与小猪的存钱罐804的特征相应的身体角色图像805。然后，图像服务网站530合成头部角色图像803和身体角色图像805来制作全身角色图像806，并将其发送给数字照相机1。

另外，如图16所示，在通过第1次的快门键操作来拍摄人物时，对其脸部图像902进行剪切处理，并将剪切得到的图像数据从数字照相机1发送给图像服务网站530。于是，图像服务网站530接受该剪切的图像数据，并将其变换为与脸部图像902的特征相应的头部角色图像903。

在通过第2次的快门键操作使汽车904位于光标C内来进行拍摄时，对汽车904的图像进行剪切处理，并将剪切得到的图像数据从数字照相机1发送给图像服务网站530。于是，图像服务网站530接收该剪切的图像数据，并将其变换为与汽车904的特征相应的身体角色图像905。然后，图像服务网站530合成头部角色图像903和身体角色图像905来制作全身角色图像906，并将其发送给数字照相机1。

因此，能容易且迅速地制作具有作为被摄体的人物的脸部图像602的特征、并还加上了与其不同的物体即作为对象的蛋糕704、小猪的存钱罐804、汽车905的特征的角色图像。

另外，在本实施方式中，通过组合数字照相机1和图像服务网站530来实施本发明，但也可以仅由数字照相机1来实施本发明。这种情况下，在ROM12内预先设置第1DB100以及第2DB200，使数字照相机1的CPU11执行图5所示的流程(1)以及(2)的处理即可。

另外，以数字照相机为例进行了说明，但还能应用在智能手机中。

另外，脸部图像的剪切也可以沿着用手指或笔从触控面板上描绘脸部图像的轮廓来进行。

另外，也可以使得能在事后追加从而增加存储在第1DB、第2DB中的脸部角色图像或身体角色图像，也可以使得用户能投稿。

另外，还能不在同时期拍摄被摄体和对象，可使用已经作为被摄体而保存的照片。

另外，在本实施方式中，示出了变换为角色图像的对象是人的情况，但并不限于人，也可以是其它的有形物。

以上说明了本发明的实施方式，但本发明并不限定于此，还包含记载在权利要求的范围内的发明和与其等同的范围。

根据本发明的实施方式，在希望将人物的照片变换为角色图像时，由于能通过拍摄对象来反映该对象的特征，因此能在直观的印象下制作角色图像。

例如，若举出印象的示例，则在对象为“绿色圆形的猕猴桃”时，制作“穿着绿色衣服且脸圆的短裙女性”的角色图像，在对象为“蛋糕”时，制作“裹着栗色的轻飘飘的连衣裙的女性”的角色图像，在对象是“小猪的存钱罐”时，制作“穿着粉红的家居服的悠闲的女性”的角色图像，在对象是“银色的汽车”时，制作“穿着单色衣服的直爽感觉的女性”的角色图像，因此，能用感觉制作角色图像，能提供新的体验方式。

Claims

1.一种图像处理方法，其中，

拍摄被摄体和与该被摄体不同的对象，

提取该对象的特征，

将所述被摄体的图像变换为与所述对象的特征相应的角色图像。

2.根据权利要求1所述的图像处理方法，其中，

所述被摄体是人物被摄体。

3.根据权利要求2所述的图像处理方法，其中

在所述变换中包含：

将所述被摄体的图像区分为脸部图像和脸部以外的图像，

将所述脸部以外的图像变换为与所述对象的特征相应的部分图像，

合成所述脸部图像和所述部分图像。

4.根据权利要求1所述的图像处理方法，其中，

所述特征包含色调(HHH)、饱和度(SSS)、明度(VVV)、轮廓形状(fff)或大小(LLL)的至少任一者。

5.一种图像处理装置，其具备：

摄影单元，其拍摄被摄体和与该被摄体不同的对象；

提取单元，其提取由所述摄影单元拍摄得到的对象的特征；和

变换单元，其将所述被摄体的图像变换为与由所述提取单元提取出的对象的特征相应的角色图像。

6.一种存储介质，其存储有作为下述单元而进行动作的程序，即，

摄影单元，其拍摄被摄体和与该被摄体不同的对象；

7.一种图像处理系统，由终端、以及经由网络与该终端连接的服务器构成，其中，

所述终端具备：摄影单元，其拍摄被摄体和与该被摄体不同的对象，

所述服务器具备：

提取单元，其提取由所述摄影单元拍摄得到的对象的特征；

变换单元，其将所述摄影单元拍摄得到的所述被摄体的图像变换为与由所述提取单元提取出的对象的特征相应的角色图像；和

发送单元，其将由所述变换单元变换得到的角色图像发送给所述终端。