CN105744145A - 图像生成方法以及图像生成装置 - Google Patents
图像生成方法以及图像生成装置 Download PDFInfo
- Publication number
- CN105744145A CN105744145A CN201510958530.1A CN201510958530A CN105744145A CN 105744145 A CN105744145 A CN 105744145A CN 201510958530 A CN201510958530 A CN 201510958530A CN 105744145 A CN105744145 A CN 105744145A
- Authority
- CN
- China
- Prior art keywords
- image
- face
- real scene
- scene shooting
- theme
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 230000008859 change Effects 0.000 claims description 12
- 230000008451 emotion Effects 0.000 claims description 7
- 230000009471 action Effects 0.000 claims description 4
- 230000036541 health Effects 0.000 claims description 3
- 230000001815 facial effect Effects 0.000 abstract description 9
- 239000002131 composite material Substances 0.000 abstract 1
- 210000003128 head Anatomy 0.000 description 27
- 230000008569 process Effects 0.000 description 26
- 238000006073 displacement reaction Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000000052 comparative effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 210000004209 hair Anatomy 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000178 monomer Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 210000000162 simple eye Anatomy 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明提供一种图像生成方法以及图像生成装置。摄像装置(1)具备：原始图像获取部(51)、脸部图像生成部(52)、题目决定部(53)、脸部要素置换部(54)和角色图像生成部(55)。原始图像获取部(51)获取成为处理对象的原始图像。脸部图像生成部(52)基于原始图像的特征区域来生成脸部图像。题目决定部(53)决定题目。脸部图像生成部(52)基于题目来变更脸部图像。角色图像生成部(55)基于题目来生成与脸部图像对应的姿态图像。另外，角色图像生成部(55)将由脸部要素置换部(54)变更后的脸部图像与由角色图像生成部(55)生成的姿态图像合成来生成角色图像。
Description
本发明基于2014年12月22日提出的日本专利申请2014-259356来主张优先权，并且作为参考而援引其全部内容。
技术领域
本发明涉及图像生成方法以及图像生成装置。
背景技术
以往就存在根据脸部照片来创建角色图像的技术。例如，在日本特开2005-092657号公报所记载的技术中，记载了对构成脸部的多个要素的每一个进行变更来变更脸部的表情的技术。
但是，在上述专利文献1所记载的技术中，为了对要素的每一个进行变更来变更脸部的表情而数据量变多，因此存在不适合用在智能手机的应用程序等中的问题。
发明内容
本发明正是鉴于这样的状况而提出，其目的在于，降低数据量地生成可表现丰富多彩的角色的表情的角色图像。
一种图像生成方法，包括以下的步骤：
非实拍脸部图像生成步骤，基于获取到的包含脸部的实拍图像(原始图像：照片)来生成所述脸部的非实拍脸部图像(基本形图像)；
变更步骤，基于主题，将所述非实拍脸部图像之中的、分别与所述非实拍脸部图像的多个部分区域(脸部的要素：眼睛、鼻子等)对应的多个非实拍部分图像(脸部要素的图像)中的至少一个所述非实拍部分图像，变更为与所述主题对应的非实拍主题图像；和
合成图像生成步骤，生成将基于所述主题的所述脸部以外的身体的图像即身体图像(姿态图像)、与变更为所述非实拍主题图像后的所述非实拍脸部图像进行合成而得到的合成图像(与题目相符的生成后的图像)。
附图说明
图1是表示本发明的一实施方式所涉及的摄像装置的硬件的构成的框图。
图2是用于说明本实施方式中的角色图像的生成方法的图。
图3是表示以不同的人来创建的情况下的角色图像的比较例的图。
图4是表示图1的摄像装置的功能性构成之中用于执行角色图像生成处理的功能性构成的功能框图。
图5是用于说明题目表格存储部中存储的题目表格的示意图。
图6是说明具有图4的功能性构成的图1的摄像装置所执行的角色图像生成处理的流程的流程图。
具体实施方式
以下，关于本发明的实施方式，利用附图进行说明。
图1是表示本发明的一实施方式所涉及的摄像装置的硬件的构成的框图。
摄像装置1例如作为数码相机而构成。
摄像装置1具备：CPU(CentralProcessingUnit，中央处理器)11、ROM(ReadOnlyMemory，只读存储器)12、RAM(RandomAccessMemory，随机存取存储器)13、总线14、输入输出接口15、摄像部16、输入部17、输出部18、存储部19、通信部20和驱动器21。
CPU11按照ROM12中记录的程序或者从存储部19下载到RAM13中的程序来执行各种处理。
RAM13中还适当存储CPU11执行各种处理所需的数据等。
CPU11、ROM12以及RAM13经由总线14而相互连接。该总线14上还连接着输入输出接口15。在输入输出接口15上连接着摄像部16、输入部17、输出部18、存储部19、通信部20以及驱动器21。
摄像部16虽未图示，但具备光学镜头部和图像传感器。
为了拍摄被摄体，光学镜头部由使光聚光的透镜例如聚焦透镜、变焦透镜等构成。
聚焦透镜是使被摄体像成像在图像传感器的受光面上的透镜。变焦透镜是使焦距在一定范围内自如变化的透镜。
在光学镜头部中还根据需要而设置对焦点、曝光、白平衡等的设定参数进行调整的外围电路。
图像传感器由光电变换元件、AFE(AnalogFrontEnd；模拟前端)等构成。
光电变换元件例如由CMOS(ComplementaryMetalOxideSemiconductor；互补金属氧化物半导体)型的光电变换元件等构成。被摄体像从光学镜头部入射至光电变换元件。因此，光电变换元件对被摄体像进行光电变换(摄像)后将图像信号蓄积一定时间，并将所蓄积的图像信号作为模拟信号而依次提供给AFE。
AFE对该模拟的图像信号执行A/D(Analog/Digital；模拟/数字)变换处理等各种信号处理。通过各种信号处理而生成数字信号，并作为摄像部16的输出信号而输出。
以下将这样的摄像部16的输出信号称为“摄像图像的数据”。摄像图像的数据被适当提供给CPU11、未图示的图像处理部等。
输入部17由各种按钮等构成，根据用户的指示操作来输入各种信息。
输出部18由显示器、扬声器等构成，输出图像、声音。
存储部19由硬盘或者DRAM(DynamicRandomAccessMemory，动态随机存取存储器)等构成，存储各种图像的数据。
通信部20控制经由包含因特网在内的网络而与其他装置(未图示)之间进行的通信。
驱动器21中适当装载由磁盘、光盘、磁光盘或者半导体存储器等构成的可移动介质31。由驱动器21从可移动介质31读出的程序根据需要而被安装于存储部19。另外，可移动介质31能够与存储部19同样地也对存储部19所存储的图像的数据等各种数据进行存储。
在这样构成的摄像装置1中，具有能够根据拍摄人的脸部而得到的图像来生成使实拍像角色化后的角色图像的功能。另外，关于摄像装置1中生成的角色图像，可生成与感情等的题目对应的角色图像。即，基于拍摄人的脸部而得到的图像来生成角色，并且进一步加入感情等的题目来生成角色图像。在本实施方式中，题目用于决定角色图像整体的印象，例如用于表现“喜悦”、“欢笑”、“愤怒”、“哭泣”、“惊讶”、“常态”、“请求”、“悲伤”等的感情等。
图2是用于说明本实施方式中的角色图像的生成方法的图。
在本实施方式中，角色图像如图2所示，首先根据包含人的脸部的实拍的图像(实拍图像)来生成成为基本形的脸部图像(非实拍图像)。
然后，决定题目(主题)，并将基本形的脸部图像中的脸部的要素区域(部分区域)置换为包含脸部要素的图像(以下称为“非实拍部分图像”)，以与所决定的题目相对应。即，由于生成的脸部图像的表情为1种，因此若直接合成为例如表现了喜怒哀乐的姿态图像(身体图像)，则会生成躯体的表现与脸部的表情不符的角色图像，所以置换为与题目对应的脸部要素的图像(非实拍主题图像)。
进而，选择与题目对应的姿态图像。
此外，在本实施方式中，非实拍部分图像与姿态图像使用公共的图像。也就是，即使在不同的对象中生成角色图像的情况下也使用相同的非实拍部分图像和姿态图像。
然后，将按所决定的题目置换了脸部要素后的脸部图像与选择出的姿态图像进行合成，来生成角色图像(合成图像)。
具体而言，在决定了<请求>的题目的情况下，将脸部图像变更成作为与<题目：请求>对应的脸部要素的眨眼的眼睛，并与对应的姿态图像进行合成，由此来生成请求姿态的角色图像。
另外，在决定了<悲伤>的题目的情况下，将脸部图像变更成作为与<题目：悲伤>对应的脸部要素的双眼和嘴，并与对应的姿态图像进行合成，由此来生成<题目：悲伤>的角色图像。
图3是表示以与人物A不同的人物B来创建的情况下的角色图像的比较例的图。
若以上述的方法根据与人物A不同的人物B的他人的图像来生成角色图像，则如图3所示，即使是相同的姿态，整体的印象也不同，具有成为其他角色图像的效果。
实际上，题目是公共的，只不过公共地置换了脸部要素(在<请求>的题目中为眨眼，在<悲伤>的题目中为悲伤的眼睛和嘴)，但由于发型、眼睛、嘴、眉毛等的形状不同，因此被识别为是他人。即，置换后的脸部要素未对其他人性产生影响。即，以完全相同的图像进行了置换，哪个角色图像中都是相同的眨眼、悲伤的眼睛、悲伤的嘴，但却获得了宛如基本形的脸部图像分别变为各个表情这样的印象。关于置换的脸部的要素，从插图性来说，欢笑时的眼睛的形状可由朝上的圆弧状的插图来表现，哭泣时的眼睛的形状可由朝下的圆弧状的插图来表现，欢笑时的嘴可由张大的嘴的插图来表现，悲伤时的嘴可由朝上的圆弧(ヘ字嘴)的插图来表现，因此，若与原始脸部的插图的要素无关地以欢笑、眨眼、哭泣各为1种地预先准备了置换要素，则仅通过置换为这些置换要素就能改变表情。
另外，置换的要素并非与各人对应而是相同的脸部要素，因此无需特别地预先准备脸部要素。
因此，在摄像装置1中，仅通过置换脸部要素，就能简单地生成与题目对应的角色图像。另外，作为置换对象，为脸部的要素单位，进而，由于与对象无关地使用公共的非实拍部分图像、姿态图像，因此能够降低生成所涉及的数据量。
另外，在摄像装置1中，由于脸部要素以外的脸部的部分根据实拍的图像来生成，因此即使非实拍部分图像和姿态图像相同，也会成为能识别出是不同的角色图像的角色图像。
图4是表示这样的摄像装置1的功能性构成之中用于执行角色图像生成处理的功能性构成的功能框图。
角色图像生成处理是指：将根据原始图像(实拍图像)生成的脸部图像置换为与题目对应的脸部要素的图像(非实拍主题图像)，并与题目所对应的姿态图像进行合成来生成角色图像的一系列处理。
在执行角色图像生成处理时，如图4所示，在CPU11中，原始图像获取部51、脸部图像生成部52、题目决定部53、脸部要素置换部54和角色图像生成部55发挥功能。
另外，在存储部19的一个区域中被设定原始图像存储部71、题目表格存储部72、要素图像存储部73和角色图像存储部74。
在原始图像存储部71中，存储经由摄像部16、因特网而从外部获取到的图像(成为处理对象的原始图像)的数据。在本实施方式中，存储对人的脸部进行拍摄而得到的实拍的图像的数据。
题目表格存储部72中存储题目和脸部要素被建立了对应的题目表格。
图5是用于说明题目表格存储部72中存储的题目表格的示意图。
题目表格如图5所示，是将与姿态的内容对应的题目编号([题目NO.])、与各脸部要素(表示眼睛的状态的[眼睛要素]/表示有无眨眼的[眨眼]/表示嘴的状态的[嘴要素])中的状态以及各脸部要素的图像数据建立了对应的表格。[眼睛要素：欢笑/哭泣]是指在脸部要素之中选择眼睛的要素：欢笑/哭泣的非实拍部分图像，[眨眼：眨眼]是指在脸部要素之中的眼睛中有眨眼而选择眨眼的非实拍部分图像，[嘴要素：欢笑/哭泣]是指在脸部要素之中选择嘴的要素：欢笑/哭泣的非实拍部分图像。
要素图像存储部73中存储非实拍部分图像、和与题目对应的姿态图像等在角色图像的生成中使用的各种要素图像的数据。
在此，“非实拍部分图像”例如是如图2以及3所示的双眼、嘴、单眼(眨眼)等与脸部的部位对应的图像，与成为对象的脸部图像无关，是公共的图像。
另外，“姿态图像”在本实施方式中如图2以及3所示，包含脸部以外的躯体，进而包含与题目对应的背景图像。
角色图像存储部74中存储所生成的角色图像的数据。
原始图像获取部51基于用户经由输入部17而执行的图像的选择操作，获取原始图像存储部71中存储的成为脸部图像的生成对象的原始图像。
脸部图像生成部52基于由原始图像获取部51获取到的原始图像的脸部区域来生成脸部图像。根据原始图像生成的脸部图像尚未进行脸部要素的置换，因此为基本形的脸部图像。
题目决定部53基于用户经由输入部17而执行的题目决定操作来决定题目。由题目决定部53决定的题目在本实施方式中是表现了“喜悦”、“欢笑”、“愤怒”、“哭泣”、“惊讶”、“常态”、“请求”等人的感情的姿态。
脸部要素置换部54基于由题目决定部53决定的题目，并参照题目表格存储部72中存储的题目表格，将脸部图像的脸部要素置换为要素图像存储部73中存储的对应的非实拍部分图像。由脸部要素置换部54执行脸部图像的脸部要素的置换的结果，将生成与题目对应的脸部图像(以下称为“对应于题目的脸部图像”)。
角色图像生成部55将由脸部图像生成部52以及脸部要素置换部54生成的对应于题目的脸部图像、和要素图像存储部73中存储的与题目对应的姿态图像进行合成，来生成角色图像。
要素图像存储部73将所生成的角色图像存储到角色图像存储部74中或者显示输出于输出部18。
图6是说明具有图4的功能性构成的图1的摄像装置1所执行的角色图像生成处理的流程的流程图。
角色图像生成处理通过用户对输入部17的角色图像生成处理开始的操作而开始。
在步骤S11中，原始图像获取部51基于用户经由输入部17而执行的图像的选择操作，从原始图像存储部71获取成为脸部图像的生成对象的原始图像。
在步骤S12中，脸部图像生成部52基于由原始图像获取部51获取到的原始图像的脸部区域来生成脸部图像(基本形的脸部图像)(非实拍脸部图像生成步骤)。
在步骤S13中，题目决定部53基于用户经由输入部17而执行的题目决定操作来决定题目。具体而言，题目决定部53从“欢笑”、“愤怒”、“哭泣”、“惊讶”、“常态”的姿态之中决定一个姿态。具体而言，题目决定部53从“欢笑”、“愤怒”、“哭泣”、“惊讶”、“常态”的题目之中决定“欢笑”的题目。
在步骤S14中，脸部要素置换部54从题目表格存储部72读入与由题目决定部53决定的题目对应的题目表格。具体而言，脸部要素置换部54从题目表格存储部72读入与“欢笑”的姿态对应的要素表格。
在步骤S15中，脸部要素置换部54基于读入的题目表格来判定是否对眼睛进行变更。
在不对眼睛进行变更的情况下，在步骤S15中判定为否而处理前进到步骤S17。步骤S17以后的处理在后面描述。
在对眼睛进行变更的情况下，在步骤S15中判定为是而处理前进到步骤S16。
在步骤S16中，脸部要素置换部54基于题目表格，将脸部图像中的眼睛的要素置换为要素图像存储部73中存储的眼睛的要素图像(变更步骤)。
在步骤S17中，脸部要素置换部54判定是否变更为眨眼。
在不变更为眨眼的情况下，在步骤S17中判定为否而处理前进到步骤S19。
在变更为眨眼的情况下，在步骤S17中判定为是而处理前进到步骤S18。
在步骤S18中，脸部要素置换部54基于题目表格，将脸部图像中的与眨眼对应的眼睛的要素置换为要素图像存储部73中存储的眼睛的要素图像(变更步骤)。
在步骤S19中，脸部要素置换部54判定是否对嘴进行变更。
在不对嘴进行变更的情况下，在步骤S19中判定为否而处理前进到步骤S21。
在对嘴进行变更的情况下，在步骤S19中判定为是而处理前进到步骤S20。
在步骤S20中，脸部要素置换部54基于题目表格，将脸部图像中的嘴的要素置换为要素图像存储部73中存储的嘴的非实拍部分图像(变更步骤)。基于题目表格而所有脸部的要素被置换后的结果，生成对应于姿态的脸部图像。
在步骤S21中，角色图像生成部55将与由题目决定部53决定的题目对应的姿态图像、和由脸部图像生成部52以及脸部要素置换部54生成的对应于姿态的脸部图像进行合成，来生成角色图像(合成图像生成步骤)。
在步骤S22中，角色图像生成部55将所生成的角色图像存储到角色图像存储部74中或者显示输出于输出部18。然后，角色图像生成处理结束。
因此，通过按每个题目来准备姿态图像与要变更的非实拍部分图像建立了对应的题目表格，并根据题目而置换为与表现题目的喜怒哀乐相符的脸部要素，从而使姿态图像的喜怒哀乐与脸部的喜怒哀乐相符。关于眼睛的脸部要素，在闭眼的状态下，准备朝上的圆弧和朝下的圆弧，关于嘴的脸部要素，准备张开时的要素和ヘ字嘴的要素，并分别进行组合来置换原始的脸部要素，由此能够变化为各种表情。因此，能够实现置换了脸部要素后的脸部图像与各种姿态的合成，从而能够生成富有多样性的角色图像。由于使眼睛的脸部要素、嘴的脸部要素这样最低限度的置换用的要素能够应用于任何脸部图像，因此不会压迫存储非实拍部分图像的容量。
如以上那样构成的摄像装置1具备：原始图像获取部51、脸部图像生成部52、题目决定部53、脸部要素置换部54和角色图像生成部55。
原始图像获取部51获取成为处理对象的原始图像。
脸部图像生成部52基于由原始图像获取部51获取到的原始图像的特征区域来生成作为第1图像的脸部图像。
题目决定部53决定作为要生成的图像的主题的题目。
脸部图像生成部52基于由题目决定部53决定的作为要生成的图像的主题的题目，对作为第1图像的脸部图像进行变更。
角色图像生成部55基于由题目决定部53决定的作为要生成的图像的主题的题目，生成与作为第1图像的脸部图像对应的作为第2图像的姿态图像。
角色图像生成部55将由脸部要素置换部54变更后的作为第1图像的脸部图像、与由角色图像生成部55生成的作为第2图像的姿态图像进行合成，来生成作为第3图像的角色图像。
由此，在摄像装置1中，能够降低数据量地生成可表现丰富多彩的角色的表情的角色图像。
脸部要素置换部54基于由题目决定部53决定的作为要生成的图像的主题的题目，来变更构成作为第1图像的脸部图像的部分区域。
由此，在摄像装置1中，能够生成更丰富多彩的角色图像。
另外，在摄像装置1中，原始图像是包含脸部的实拍图像。
脸部图像生成部52从原始图像中将特征区域作为脸部区域，基于该脸部区域来生成作为第1图像的脸部图像。
脸部要素置换部54将作为第1图像的脸部图像中的构成脸部的部位设为单位来变更部分区域。
由此，在摄像装置1中，例如，以眼睛、嘴这样的构成脸部的部位单位进行变更，因此能够简单地进行变更。
具备要素图像存储部73，存储与作为要生成的图像的主题的题目对应的构成脸部的各部位的图像即非实拍部分图像，脸部要素置换部54基于由题目决定部53决定的作为要生成的图像的主题的题目，来变更对应的部位图像和脸部的部分区域。
由此，在摄像装置1中，通过使用与预先存储的题目对应的姿态图像，从而能够减少生成非实拍部分图像的工时，并且还能够减少生成所涉及的数据量。
角色图像生成部55生成包含与脸部对应的躯体的图像，来作为第2图像即姿态图像。
由此，在摄像装置1中，由于还生成脸部以外的部分，因此能够生成成为更丰富多彩的表现的角色图像。
要素图像存储部73存储与作为要生成的图像的主题的题目对应的第2图像即姿态图像。
角色图像生成部55基于由题目决定部53决定的作为要生成的图像的主题的题目，从要素图像存储部73获取作为对应的第2图像的姿态图像。
由此，在摄像装置1中，通过使用与预先存储的题目对应的姿态图像，从而能够减少生成姿态图像的工时，并且还能够减少生成所涉及的数据量。
作为要生成的图像的主题的题目是指表现人的感情的题目。
由此，在摄像装置1中，能够生成成为更丰富多彩的表现的角色图像。
此外，本发明并不限定于上述实施方式，在能够实现本发明的目的的范围内的变形、改良等包含于本发明。
在上述的实施方式中，姿态图像被构成为包含脸部以外的躯体和背景图像，但只要是与脸部图像一起表现题目的图像即可，例如，可以是加入了脸部以外的躯体、仅上半身、或背景图像的图像等。
另外，在上述的实施方式中，由用户进行题目的决定，但例如也可构成为利用原始图像的脸部的表情的判定结果来进行题目的决定。另外，作为主题的题目并不限于表现人的感情的题目，也可以是人的举动、姿势、动作等。
另外，在上述的实施方式中，对于应用本发明的摄像装置1，以数码相机为例进行了说明，但并不特别限定于此。
例如，本发明能够广泛应用于具有角色图像生成处理功能的电子设备。具体而言，例如，本发明能够应用于笔记本型的个人计算机、打印机、电视接收机、摄像机、便携式导航装置、移动电话、智能手机、便携式游戏机等中。
上述的一系列处理可以通过硬件来执行，也可通过软件来执行。
换而言之，图4的功能性构成只是例示，并不特别限定。即，摄像装置1只要具备能够将上述的一系列处理作为整体来执行的功能即可，至于为了实现该功能而使用什么样的功能模块，并不特别限定于图4的例子。
另外，一个功能模块可以由硬件单体来构成，也可以由软件单体来构成，还可以由它们的组合来构成。
在通过软件来执行一系列处理的情况下，构成该软件的程序被从网络或记录介质安装到计算机等中。
计算机可以是嵌入于专用的硬件的计算机。另外，计算机也可以是通过安装各种程序而能够执行各种功能的计算机，例如通用的个人计算机。
包含这样的程序的记录介质，不仅可由为了向用户提供程序而与装置主体分体地发布的图1的可移动介质31构成，还可由以预先组合于装置主体的状态来提供给用户的记录介质等构成。可移动介质31例如由磁盘(包含软盘)、光盘或者磁光盘等构成。光盘例如由CD-ROM(CompactDisk-ReadOnlyMemory，光盘-只读存储器)、DVD(DigitalVersatileDisk，数字通用盘)、Blu-ray(注册商标)Disc(蓝光盘)等构成。磁光盘由MD(Mini-Disk)等构成。另外，以预先组合于装置主体的状态来提供给用户的记录介质，例如由记录了程序的图1的ROM12、图1的存储部19中包含的硬盘等构成。
此外，在本说明书中，对记录介质中记录的程序进行记述的步骤当然包括按其顺序以时间序列来执行的处理，但未必要以时间序列来处理，也包含并行地或者单独地执行的处理。
以上，对本发明的几个实施方式进行了说明，但这些实施方式只是例示，并非用于限定本发明的技术范围。本发明能够采取其他各种实施方式，进而，在不脱离本发明的主旨的范围内，能够进行省略、置换等各种变更。这些实施方式及其变形包含在本说明书等所记载的发明的范围、主旨内，并且包含在权利要求书所记载的发明及其等同范围内。
Claims (12)
1.一种图像生成方法，其特征在于，包括以下步骤：
非实拍脸部图像生成步骤，基于获取到的包含脸部的实拍图像来生成所述脸部的非实拍脸部图像；
变更步骤，基于主题，将所述非实拍脸部图像之中的、分别与所述非实拍脸部图像的多个部分区域对应的多个非实拍部分图像中的至少一个所述非实拍部分图像，变更为与所述主题对应的非实拍主题图像；和
合成图像生成步骤，生成将基于所述主题的所述脸部以外的身体的图像即身体图像、与变更为所述非实拍主题图像后的所述非实拍脸部图像进行合成而得到的合成图像。
2.根据权利要求1所述的图像生成方法，其特征在于，
在所述变更步骤中，以构成所述脸部的部位为单位来变更所述非实拍图像的所述部分区域的图像。
3.根据权利要求1所述的图像生成方法，其特征在于，
在所述变更步骤中，从与所述主题对应的作为构成脸部的各部位的图像的多个非实拍部分图像之中，选择至少一个与所述主题对应的非实拍部分图像，并对与所述选择出的非实拍图像对应的所述非实拍图像的所述部分区域的图像进行变更。
4.根据权利要求1所述的图像生成方法，其特征在于，
所述身体图像是表现了人物的姿势、动作的图像。
5.根据权利要求1所述的图像生成方法，其特征在于，
所述图像生成方法还包括选择步骤，所述选择步骤从多个所述身体图像之中选择至少一个基于所述主题的所述身体图像。
6.根据权利要求5所述的图像生成方法，其特征在于，
在所述选择步骤中，从所述多个所述身体图像之中，基于由用户选择出的所述主题来选择至少一个所述身体图像。
7.根据权利要求1所述的图像生成方法，其特征在于，
所述主题用于表现人的感情、举动、姿势、动作当中的至少一种。
8.一种图像生成装置，其特征在于，
所述图像生成装置具备控制部，
所述控制部被设定为执行以下动作：
基于获取到的包含脸部的实拍图像来生成所述脸部的非实拍脸部图像；
基于主题，将所述非实拍脸部图像之中的、分别与所述非实拍脸部图像的多个部分区域对应的多个非实拍部分图像中的至少一个所述非实拍部分图像，变更为与所述主题对应的非实拍主题图像；
生成将基于所述主题的所述脸部以外的身体的图像即身体图像、与变更为所述非实拍主题图像后的所述非实拍脸部图像进行合成而得到的合成图像。
9.根据权利要求8所述的图像生成装置，其特征在于，
所述图像生成装置具备存储部，该存储部存储与所述主题对应的作为构成脸部的各部位的图像的多个非实拍部分图像。
10.根据权利要求8所述的图像生成装置，其特征在于，
所述存储部存储与所述主题对应的多个身体图像。
11.根据权利要求8所述的图像生成装置，其特征在于，
所述图像生成装置具备至少一个以上的所述存储部。
12.根据权利要求8所述的图像生成装置，其特征在于，
所述主题的种类有多种，
所述存储单元根据多个主题来存储所述多个身体图像。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014-259356 | 2014-12-22 | ||
| JP2014259356A JP6269469B2 (ja) | 2014-12-22 | 2014-12-22 | 画像生成装置、画像生成方法及びプログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN105744145A true CN105744145A (zh) | 2016-07-06 |
Family
ID=56130044
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510958530.1A Pending CN105744145A (zh) | 2014-12-22 | 2015-12-18 | 图像生成方法以及图像生成装置 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US20160180569A1 (zh) |
| JP (1) | JP6269469B2 (zh) |
| CN (1) | CN105744145A (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108322824B (zh) * | 2018-02-27 | 2020-11-03 | 四川长虹电器股份有限公司 | 一种将电视画面进行情景置换的方法及系统 |
| CN109271554B (zh) * | 2018-09-07 | 2022-02-11 | 江西省云眼大视界科技有限公司 | 一种智能视频识别系统及其应用 |
| CN109741427A (zh) * | 2018-12-14 | 2019-05-10 | 新华三大数据技术有限公司 | 动画数据处理方法、装置、电子设备及存储介质 |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5649086A (en) * | 1995-03-08 | 1997-07-15 | Nfx Corporation | System and method for parameter-based image synthesis using hierarchical networks |
| US20010042057A1 (en) * | 2000-01-25 | 2001-11-15 | Nec Corporation | Emotion expressing device |
| CN1433240A (zh) * | 2002-01-17 | 2003-07-30 | 富士通株式会社 | 电子设备和程序 |
| CN1444185A (zh) * | 2002-03-13 | 2003-09-24 | 松下电器产业株式会社 | 计算机图形动画装置及计算机图形动画方法 |
| CN1606347A (zh) * | 2004-11-15 | 2005-04-13 | 北京中星微电子有限公司 | 一种视频通信的方法 |
| JP2007193824A (ja) * | 2000-04-13 | 2007-08-02 | Fujifilm Corp | 画像処理方法 |
| US20100033591A1 (en) * | 2008-08-05 | 2010-02-11 | Canon Kabushiki Kaisha | Image capturing apparatus and control method therefor |
| CN101715069A (zh) * | 2008-09-30 | 2010-05-26 | 富士胶片株式会社 | 图像合成设备及其控制方法 |
| CN101753850A (zh) * | 2008-12-03 | 2010-06-23 | 华晶科技股份有限公司 | 情感式的影像处理装置及影像处理方法 |
| US20100157099A1 (en) * | 2008-12-22 | 2010-06-24 | Kyocera Corporation | Mobile device with a camera |
| JP2010282312A (ja) * | 2009-06-03 | 2010-12-16 | Atari Inc | メールコミュニケーションシステム |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH1186023A (ja) * | 1997-09-01 | 1999-03-30 | Noriyori Urata | ゲームソフトにおける顔を含むグラフィックの表現方法 |
| JP2004178163A (ja) * | 2002-11-26 | 2004-06-24 | Matsushita Electric Ind Co Ltd | 画像処理方法及びその装置 |
| US20080249897A1 (en) * | 2005-09-30 | 2008-10-09 | Sk C&C Co. Ltd | Electronic Commerce System for the Digital Fashion Using an Avatar Based on a User and Method for Operating the Same |
| WO2007138911A1 (ja) * | 2006-05-30 | 2007-12-06 | Panasonic Corporation | キャラクタ服飾決定装置、キャラクタ服飾決定方法、およびキャラクタ服飾決定プログラム |
| US9817946B2 (en) * | 2011-12-16 | 2017-11-14 | Cerner Innovation, Inc. | Graphic representations of health-related status |
| US10155168B2 (en) * | 2012-05-08 | 2018-12-18 | Snap Inc. | System and method for adaptable avatars |
-
2014
- 2014-12-22 JP JP2014259356A patent/JP6269469B2/ja active Active
-
2015
- 2015-12-17 US US14/972,446 patent/US20160180569A1/en not_active Abandoned
- 2015-12-18 CN CN201510958530.1A patent/CN105744145A/zh active Pending
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5649086A (en) * | 1995-03-08 | 1997-07-15 | Nfx Corporation | System and method for parameter-based image synthesis using hierarchical networks |
| US20010042057A1 (en) * | 2000-01-25 | 2001-11-15 | Nec Corporation | Emotion expressing device |
| JP2007193824A (ja) * | 2000-04-13 | 2007-08-02 | Fujifilm Corp | 画像処理方法 |
| CN1433240A (zh) * | 2002-01-17 | 2003-07-30 | 富士通株式会社 | 电子设备和程序 |
| CN1444185A (zh) * | 2002-03-13 | 2003-09-24 | 松下电器产业株式会社 | 计算机图形动画装置及计算机图形动画方法 |
| CN1606347A (zh) * | 2004-11-15 | 2005-04-13 | 北京中星微电子有限公司 | 一种视频通信的方法 |
| US20100033591A1 (en) * | 2008-08-05 | 2010-02-11 | Canon Kabushiki Kaisha | Image capturing apparatus and control method therefor |
| CN101715069A (zh) * | 2008-09-30 | 2010-05-26 | 富士胶片株式会社 | 图像合成设备及其控制方法 |
| CN101753850A (zh) * | 2008-12-03 | 2010-06-23 | 华晶科技股份有限公司 | 情感式的影像处理装置及影像处理方法 |
| US20100157099A1 (en) * | 2008-12-22 | 2010-06-24 | Kyocera Corporation | Mobile device with a camera |
| JP2010282312A (ja) * | 2009-06-03 | 2010-12-16 | Atari Inc | メールコミュニケーションシステム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2016118992A (ja) | 2016-06-30 |
| JP6269469B2 (ja) | 2018-01-31 |
| US20160180569A1 (en) | 2016-06-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104822015B (zh) | 图像处理装置、图像处理方法以及计算机可读的存储介质 | |
| CN104349060B (zh) | 图像处理装置、图像处理方法及存储介质 | |
| CN103685968B (zh) | 图像处理装置及图像处理方法 | |
| CN105744144A (zh) | 图像生成方法以及图像生成装置 | |
| KR101566081B1 (ko) | 화상 처리 장치, 화상 처리 방법 및 기억 매체 | |
| JP2011040876A (ja) | カメラ、カメラの制御方法、表示制御装置、および表示制御方法 | |
| WO2009113383A1 (ja) | 撮像装置及び画像再生装置 | |
| CN105721765A (zh) | 图像生成装置以及图像生成方法 | |
| CN103369238B (zh) | 图像生成装置以及图像生成方法 | |
| JP2009141516A (ja) | 画像表示装置，カメラ，画像表示方法，プログラム，画像表示システム | |
| CN103780862B (zh) | 再生控制装置、再生控制方法以及记录介质 | |
| CN104469237B (zh) | 运动图像甄选装置以及运动图像甄选方法 | |
| CN105744145A (zh) | 图像生成方法以及图像生成装置 | |
| CN104811607B (zh) | 摄像装置、摄像方法以及记录介质 | |
| CN103516951B (zh) | 图像生成装置以及图像生成方法 | |
| JP2013046374A (ja) | 画像処理装置 | |
| JP4161769B2 (ja) | 画像出力装置、画像出力方法、画像出力処理プログラム、および画像配信サーバ、画像配信処理プログラム | |
| CN105376479A (zh) | 图像生成装置以及图像生成方法 | |
| CN108810398A (zh) | 图像处理装置、图像处理方法以及记录介质 | |
| CN105744143B (zh) | 图像处理装置、图像处理方法以及记录介质 | |
| JP5242756B2 (ja) | 画像処理装置、画像処理方法、およびカメラ | |
| JP4922066B2 (ja) | カメラ | |
| WO2022158201A1 (ja) | 画像処理装置、画像処理方法、プログラム | |
| JP6476811B2 (ja) | 画像生成装置、画像生成方法及びプログラム | |
| JPH1115993A (ja) | 画像情報処理用の装置及び記憶媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20160706 |
|
| WD01 | Invention patent application deemed withdrawn after publication |