CN112511735B - 图像处理装置、摄影装置、图像处理方法及存储介质 - Google Patents
图像处理装置、摄影装置、图像处理方法及存储介质 Download PDFInfo
- Publication number
- CN112511735B CN112511735B CN202010944066.1A CN202010944066A CN112511735B CN 112511735 B CN112511735 B CN 112511735B CN 202010944066 A CN202010944066 A CN 202010944066A CN 112511735 B CN112511735 B CN 112511735B
- Authority
- CN
- China
- Prior art keywords
- image
- display
- control unit
- user
- determination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims abstract description 110
- 238000003672 processing method Methods 0.000 title claims abstract description 8
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 175
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 174
- 238000000605 extraction Methods 0.000 claims abstract description 66
- 239000000284 extract Substances 0.000 claims abstract description 30
- 238000003384 imaging method Methods 0.000 claims abstract description 21
- 239000002131 composite material Substances 0.000 claims description 43
- 230000008859 change Effects 0.000 claims description 39
- 239000003086 colorant Substances 0.000 claims description 11
- 230000002194 synthesizing effect Effects 0.000 claims description 8
- 238000000034 method Methods 0.000 description 89
- 230000008569 process Effects 0.000 description 63
- 238000012986 modification Methods 0.000 description 56
- 230000004048 modification Effects 0.000 description 56
- 238000010586 diagram Methods 0.000 description 42
- 230000015654 memory Effects 0.000 description 27
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 20
- 230000006870 function Effects 0.000 description 19
- 239000000203 mixture Substances 0.000 description 19
- 230000009467 reduction Effects 0.000 description 12
- 230000003936 working memory Effects 0.000 description 11
- 208000025174 PANDAS Diseases 0.000 description 10
- 208000021155 Paediatric autoimmune neuropsychiatric disorders associated with streptococcal infection Diseases 0.000 description 10
- 240000004718 Panda Species 0.000 description 10
- 235000016496 Panda oleosa Nutrition 0.000 description 10
- 238000004891 communication Methods 0.000 description 8
- 238000012217 deletion Methods 0.000 description 7
- 230000037430 deletion Effects 0.000 description 7
- 238000012937 correction Methods 0.000 description 4
- 230000003247 decreasing effect Effects 0.000 description 4
- 239000007787 solid Substances 0.000 description 4
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 230000012447 hatching Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
- G06V10/273—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion removing elements interfering with the pattern to be recognised
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/30—Noise filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供一种提高用于删除从显示图像中提取的提取图像中包括的噪声的用户操作性且能够容易删除噪声的图像处理装置、摄影装置、图像处理方法及存储介质。移动终端(10)具备提取部(32A)和显示控制部(31)。提取部(32A)从显示于触摸屏显示器(12)中的显示图像(50)中提取一部分作为成为合成对象图像(54)的提取图像。在成为合成对象图像(54)的提取图像包括不同面积的多个区域的情况下,显示控制部(31)根据由用户(U)输入的操作的操作量以与面积对应的顺序删除多个区域中的至少一个。
Description
技术领域
本发明涉及一种图像处理装置、摄影装置、图像处理方法及存储介质。
背景技术
通常,已知一种从显示图像中提取一部分作为提取图像的技术。例如,专利文献1中公开了一种技术,其根据成为掩模的轮廓图像从包括背景图像和作为提取对象的非背景的图像的提取对象图像中提取图像作为合成用图像,并将所提取的合成用图像与另一背景图像进行合成。
在专利文献1中记载的技术中,背景和非背景(提取对象图像)的分离根据背景图像与提取对象图像的像素值的差分进行。在专利文献1中记载的技术中,通过由用户设定用于分离背景和非背景的阈值,抑制了噪声混入轮廓图像中,并抑制了噪声混入提取对象图像中。
专利文献1:国际公开第2006/033178号
然而,在专利文献1中记载的技术中,有时未能适当地删除用户欲删除的噪声。例如,在背景图像与提取对象图像的像素值的差分根据提取对象图像与背景图像接触的部分而不同的情况下,有时未能适当地进行背景和非背景的分离而使噪声混入提取对象图像中。针对专利文献1,若欲从提取对象图像中充分删除噪声,则用户需要进行的操作有时会变得复杂。
发明内容
本发明是鉴于以上情况而完成的,其目的在于,提供一种提高用于删除从显示图像中提取的提取图像中包括的噪声的用户操作性且能够容易删除噪声的图像处理装置、摄影装置、图像处理方法及图像处理程序。
为了实现上述目的,本发明的第1方式的图像处理装置具备:提取部,从显示于显示部中的显示图像中提取一部分作为提取图像;及显示控制部,在提取图像包括不同面积的多个区域的情况下,根据由用户输入的操作的操作量以与面积对应的顺序删除多个区域中的至少一个。
本发明的第2方式的图像处理装置在第1方式的图像处理装置中,还具备:合成部,将显示于显示部中的提取图像作为合成对象图像,并生成将合成对象图像与由用户选择的选择图像进行合成的合成图像,显示控制部将合成图像显示于显示部中。
本发明的第3方式的图像处理装置在第1方式或第2方式的图像处理装置中,显示控制部还将用于用户输入操作的操作部显示于显示部中。
本发明的第4方式的图像处理装置在第1方式至第3方式中的任一方式的图像处理装置中,显示控制部还删除提取图像中的由用户指示的区域的一部分或全部。
本发明的第5方式的图像处理装置在第1方式至第4方式中的任一方式的图像处理装置中,显示控制部将确定显示图像中的一部分区域的确定框和用于从确定框内的图像中包括的颜色中指定基准颜色的颜色指定用标记重叠显示于显示图像中,提取部从确定框内的图像中提取与由颜色指定用标记指定的基准颜色对应的图像作为提取图像。
本发明的第6方式的图像处理装置在第5方式的图像处理装置中,颜色指定用标记显示于确定框内,并且预先确定了确定框与颜色指定用标记之间的相对位置关系。
本发明的第7方式的图像处理装置在第5方式或第6方式的图像处理装置中,还具备:第1受理部,受理放大或缩小确定框的尺寸变更指示,显示控制部进行根据第1受理部受理的尺寸变更指示变更确定框的尺寸的控制。
本发明的第8方式的图像处理装置在第5方式至第7方式中的任一方式的图像处理装置中,还具备:第2受理部,受理移动确定框的位置的移动指示,显示控制部进行根据第2受理部受理的移动指示移动确定框的位置的控制。
本发明的第9方式的图像处理装置在第5方式至第8方式中的任一方式的图像处理装置中,显示控制部还显示具有大于颜色指定用标记的面积且表示基准颜色的指示符。
本发明的第10方式的图像处理装置在第5方式至第9方式中的任一方式的图像处理装置中,提取部将确定框内的整个图像的灰度数值化,并提取灰度的数值处于包括基准颜色所对应的灰度的数值在内的基准颜色范围内的图像作为提取图像。
本发明的第11方式的图像处理装置在第10方式的图像处理装置中,还具备:设定部,供用户设定基准颜色范围。
本发明的第12方式的摄影装置具备:摄影部,拍摄被摄体;显示部,显示由摄影部拍摄的图像;及第1方式至第11方式中的任一方式的图像处理装置。
本发明的第13方式的摄影装置在第12方式的摄影装置中,将显示图像即时预览显示在显示部中。
并且,为了实现上述目的,本发明的第14方式的图像处理方法由计算机执行如下处理:从显示于显示部中的显示图像中提取一部分作为提取图像;及在提取图像包括不同面积的多个区域的情况下,根据由用户输入的操作的操作量以与面积对应的顺序删除多个区域中的至少一个。
并且,为了实现上述目的,本发明的第15方式的存储介质存储用于使计算机执行如下处理的图像处理程序:从显示于显示部中的显示图像中提取一部分作为提取图像;及在提取图像包括不同面积的多个区域的情况下,根据由用户输入的操作的操作量以与面积对应的顺序删除多个区域中的至少一个。
并且,本发明的图像处理装置具备存储用于使计算机执行的指示的存储器和构成为执行所存储的指示的处理器,处理器从显示于显示部中的显示图像中提取一部分作为提取图像,并在提取图像中包括不同面积的多个区域的情况下,根据由用户输入的操作的操作量以与面积对应的顺序删除多个区域中的至少一个。
发明效果
根据本发明,提高用于删除从显示图像中提取的提取图像中包括的噪声的用户操作性,并能够容易删除噪声。
附图说明
图1是表示用户正在使用作为摄影装置的一例的移动终端来拍摄的情形的一例的图。
图2是表示移动终端的电结构的一例的概略的图。
图3是表示移动终端的结构的一例的功能框图。
图4是表示带指示符的确定框的显示例的图。
图5是表示移动终端的结构的一例的功能框图。
图6是表示合成摄影处理的一例的流程图。
图7是用于说明确定框的移动的图。
图8是用于说明确定框的放大/缩小的图。
图9是表示合成对象图像提取处理的一例的流程图。
图10是用于说明从确定区域中提取合成对象图像的处理的图。
图11是表示即时预览显示有与合成对象图像合成的选择图像的情形的图。
图12是表示合成对象图像编辑处理的一例的流程图。
图13是用于说明噪声去除模式的图。
图14是用于说明噪声去除模式的图。
图15是用于说明噪声去除模式的图。
图16是用于说明噪声去除模式的图。
图17是用于说明橡皮擦模式的图。
图18是用于说明橡皮擦模式的图。
图19是用于说明橡皮擦模式的图。
图20是用于说明颜色变更模式的图。
图21是表示在颜色变更模式下改变作为合成对象图像的字符的颜色时的一例的图。
图22是表示在形状编辑模式下移动作为合成对象图像的字符的显示位置时的一例的图。
图23是表示在形状编辑模式下放大作为合成对象图像的字符的显示尺寸时的一例的图。
图24是表示在形状编辑模式下旋转作为合成对象图像的字符的显示姿势时的一例的图。
图25是概括实施方式的移动终端中的合成摄影处理的图。
图26是用于说明变形例1的图。
图27是用于说明变形例1的图。
图28是用于说明变形例1的图。
图29是用于说明变形例1的图。
图30是用于说明变形例2的图。
图31是用于说明变形例2的图。
图32A是用于说明变形例3的图。
图32B是用于说明变形例3的图。
图32C是用于说明变形例3的图。
图32D是用于说明变形例3的图。
图32E是用于说明变形例3的图。
图32F是用于说明变形例3的图。
图33A是用于说明变形例4的图。
图33B是用于说明变形例4的图。
图34A是用于说明变形例5的图。
图34B是用于说明变形例5的图。
图35A是表示变形例6的合成摄影处理的一例的流程图。
图35B是表示变形例6的合成摄影处理的一例的流程图。
图36A是用于说明变形例7的图。
图36B是用于说明变形例7的图。
图37是用于说明变形例8的图。
具体实施方式
以下,参考附图对用于实施本发明的技术的方式例进行详细说明。如图1所示,移动终端10例如为智能手机。除发挥移动电话的功能以外,移动终端10还发挥执行被称为应用等的各种应用程序的计算机的功能。并且,移动终端10还能够拍摄照片,是摄影装置的一例。
移动终端10在主体内内置有拍摄被摄体的摄影部11(参考图2)。移动终端10在主体的前表面设置有触摸屏显示器12。移动终端10能够进行即时预览显示,该即时预览显示是将由摄影部11拍摄的摄影图像依次显示于触摸屏显示器12中作为实时取景图像的。
在即时预览显示中,摄影部11例如以每秒30帧的帧速率输出摄影图像,显示于触摸屏显示器12中的实时取景图像也以该帧速率更新。因此,即时预览显示的实时取景图像被视觉辨认为动画。由于即时预览显示被摄体,因此用户U能够一边通过触摸屏显示器12的显示确认被摄体及摄影图像的构图,一边进行拍摄。
如作为一例示于图2中那样,移动终端10具备摄影部11、触摸屏显示器12、CPU(Central Processing Unit,中央处理器)14、操作开关16、工作存储器17、存储装置18、介质控制器19、外部I/F(Interface,接口)21及通信部22。它们经由总线23连接成能够进行通信。
CPU14通过执行操作系统(省略图示)来发挥主控制部26及显示控制部31的功能。主控制部26统一控制移动终端10的各部。显示控制部31控制触摸屏显示器12的显示。并且,CPU14还发挥对由摄影部11拍摄的图像实施图像处理的图像处理部32的功能。
工作存储器17为用作CPU14执行各种程序时的工作区域的易失性存储器,可使用RAM(Random Access Memory,随机存取存储器)。并且,工作存储器17用作如后述那样进行即时预览显示及图像处理时的工作存储器。
除上述操作系统以外,存储装置18中还存储有应用程序(AP)27等各种程序。作为应用程序27,除后述的照片合成应用程序以外,还有图像显示软件、网页浏览器及邮件应用程序等。
并且,存储装置18中设置有存储表示用户U使用移动终端10拍摄的图像的图像数据等用户的数据的用户区域28。存储装置18例如为闪存等非易失性存储器。另外,作为存储装置18,也可以使用HDD(Hard Disk Drive,硬盘驱动器)或SSD(Solid State Drive,固态驱动器)等。
触摸屏显示器12为发挥存储于存储装置18中的GUI(GraphicalUser In terface,图形用户界面)的功能的操作画面及显示由摄影部11拍摄的图像等的显示部的一例。并且,触摸屏显示器12具备检测基于用户U的手指等的触摸操作的功能,用于检测触摸操作并对主控制部26输入操作指示。众所周知,触摸屏显示器12例如由LCD(LiquidCrystalDisplay,液晶显示器)或有机EL(Organic Electro-Luminescence,有机电致发光)显示器等显示部和电阻膜方式或静电电容方式等触摸面板部构成。
操作开关16为设置于移动终端10的主体的多功能键及电源按钮等各种机械操作部,对主控制部26输入操作指示。
主控制部26为受理来自触摸屏显示器12及操作开关16的操作指示的输入的受理部。
显示控制部31在主控制部26的控制下进行将操作画面及图像等显示于触摸屏显示器12中的控制。显示控制部31进行将操作画面及图像等数据转换为触摸屏显示器12可处理的视频信号的处理等并将其输出至触摸屏显示器12。
除对由摄影部11拍摄的摄影图像实施亮度校正及压缩扩展处理之类的一般的图像处理以外,图像处理部32还对摄影部11拍摄的摄影图像实施后述的图像提取及图像合成等各种图像处理。
介质控制器19进行针对存储卡29等装卸自如的可移动介质的数据的写入和读出。
外部I/F21例如为USB(Universal Serial Bus,通用串行总线)连接器等接口。外部I/F21上连接有充电线缆、通信线缆及USB存储器等。
通信部22具有天线及通信控制电路(均省略图示),担负通过移动通信网及无线LAN(Local Area Network,局域网)进行的无线通信及近距离无线通信等通信功能。
摄影部11例如具有摄影镜头11A、图像传感器11B、AD(Analog-to-digital,模数)转换器(A/D)11C、图像输入控制器11D、图像信号处理电路11E、定时信号发生器(TG)11F及驱动器11G。
摄影镜头11A会聚来自被摄体的光并使被摄体像成像于图像传感器11B的摄像面。图像传感器11B对由成像元件拍摄的被摄体光进行光电转换并将其作为模拟图像信号而输出。作为图像传感器11B,例如可使用CCD(ChargeCoupled Device,电荷耦合器件)图像传感器或CMOS(Complementary Metal Oxide Semiconductor,互补金属氧化物半导体)图像传感器等。在进行即时预览显示的情况下,图像传感器11B以预先设定的帧速率依次输出模拟图像信号。
AD转换器11C将来自图像传感器11B的模拟图像信号转换为数字图像信号。图像输入控制器11D将从AD转换器11C输入的数字图像信号记录于工作存储器17中作为摄影图像。在进行即时预览摄影的期间,图像输入控制器11D将摄影图像记录于工作存储器17中作为实时取景图像。在工作存储器17内,实时取景图像用于即时预览显示,是根据图像传感器11b的帧速率依次更新的。
图像信号处理电路11E对由图像输入控制器11D记录于工作存储器17中的摄影图像实施白平衡处理、伽马校正处理及YC转换处理等各种信号处理。白平衡处理为调整摄影图像中包括的R(红色)、G(绿色)、B(蓝色)的各图像信号的增益来调整白平衡的处理。伽马校正处理为根据预先存储的伽马特性对图像信号进行的灰度变换处理。YC处理为将R、G、B的图像信号转换为亮度信号Y和色差信号Cr、Cb的处理。经图像信号处理电路11E的处理的摄影图像被重新写入到工作存储器17中。
定时信号发生器11F在主控制部26的控制下生成规定图像传感器11B的动作定时的定时信号。驱动器11G根据来自定时信号发生器11F的定时信号驱动图像传感器11B。
在启动摄影部11使移动终端10发挥摄影装置的功能的情况下,显示控制部31进行将摄影部11拍摄的摄影图像即时预览显示于触摸屏显示器12中作为实时取景图像的控制。即时预览显示例如与摄影部11的启动同时开始。并且,即时预览显示会在执行与快门按钮的操作对应的图像保存动作的期间中断一段时间,但基本上会持续至摄影部11的动作结束为止。
更具体而言,摄影部11以上述帧速率依次输出摄影图像,摄影图像输出至工作存储器17。摄影图像在由图像信号处理电路11E实施信号处理之后记录于工作存储器17中。在即时预览显示中,摄影图像记录于工作存储器17中作为实时取景图像,并以上述帧速率依次更新。显示控制部31读出在工作存储器17内依次更新的实时取景图像来依次更新触摸屏显示器12的显示,由此实现即时预览显示。并且,在此,为了进行即时预览显示,将由摄影部11进行的摄影称为即时预览摄影。
并且,在即时预览显示中,若用户U操作快门按钮,则输入图像保存指示。若输入图像保存指示,则在该定时拍摄的摄影图像保存于存储装置18的用户区域28或存储卡29中的预先设定的保存目的地。在将摄影图像记录于存储卡29中的情况下,图像处理部32经由介质控制器19进行该记录。
作为保存用摄影图像,可以为记录于工作存储器17中以用作实时取景图像的图像,也可以为在快门按钮的操作定时由摄影部11新获取的图像。
作为应用程序27之一,移动终端10中安装有对实时取景图像实施图像合成以即时预览显示的照片合成应用程序。照片合成应用程序例如在即时预览显示显示图像作为实时取景图像的期间提取显示图像的一部分作为合成对象图像。然后,生成将所提取的合成对象图像54与不同于显示图像的选择图像进行合成的合成图像,在移动终端10中实现即时预览显示所生成的合成图像作为实时取景图像的功能。
本实施方式的照片合成应用程序为本发明的图像处理程序的一例,通过启动照片合成应用程序使本实施方式的移动终端10发挥本发明的图像处理装置的一例的功能。参考图3~图5对与照片合成应用程序的启动对应的移动终端10的功能所涉及的结构进行说明。
首先,参考图3及图4对移动终端10中的照片合成的前处理所涉及的功能进行说明。若启动照片合成应用程序,则CPU14发挥显示控制部31及图像处理部32的功能。
如图3所示,工作存储器17中设置有发挥图像存储器17A及VRAM(Video Randomaccess memory,视讯随机存取存储器)17B的功能的区域。图像存储器17A为临时记录从摄影部11输出的摄影图像作为实时取景图像的区域。VRA M17B为记录在图像处理部32中经图像处理的实时取景图像的区域。
若启动照片合成应用程序,则摄影部11开始显示图像50的即时预览摄影。图像存储器17A中记录有显示图像50作为实时取景图像。图像存储器17A内的显示图像50依次更新为按照摄影部11的帧速率输出的最新的摄影图像。显示图像50为由摄影部11拍摄的实时取景图像,是成为合成对象图像54(参考图5)的提取源的图像。
显示图像50由图像处理部32从图像存储器17A读出。显示图像50由图像处理部32实施亮度校正等图像处理之后记录于VRAM17B中。显示控制部31从VRAM17B读出实时取景图像的显示图像50而即时预览显示于触摸屏显示器12中。
并且,作为应用程序27的照片合成应用程序所使用的数据,存储装置18中记录有带指示符的确定框60及颜色指定用标记62的数据。
在即时预览显示显示图像50的情况下,如图4所示,作为用于在显示图像50内提取合成对象图像54的GUI,显示控制部31使带指示符的确定框60及颜色指定用标记62重叠于显示图像50上并将其显示于触摸屏显示器12中。
图4中示出显示控制部31使带指示符的确定框60及颜色指定用标记62重叠显示在显示于移动终端10的触摸屏显示器12中的显示图像50上的状态的一例。带指示符的确定框60为用户U使用的GUI以使用户确定从显示图像50中提取合成对象图像54的范围。由带指示符的确定框60确定的区域为确定区域52,提取确定区域52的一部分作为合成对象图像54。如图4所示,本实施方式的带指示符的确定框60包括指示符60A、确定框60B及放大/缩小指示标记60C。本实施方式的带指示符的确定框60的确定框60B为确定本发明的显示图像中的一部分区域的确定框的一例。并且,本实施方式的带指示符的确定框60的指示符60A为表示本发明的基准颜色的指示符的一例。本实施方式的确定区域52为本发明的显示图像中的一部分区域的一例,并且为本发明的确定框内的图像的一例。
如图4所示,被确定框60B包围的区域为确定区域52。在本实施方式中,能够放大及缩小确定框60B的尺寸。换言之,用户U能够变更确定区域52的尺寸(范围)。作为一例,在本实施方式中,通过由用户U操作放大/缩小指示标记60C来放大或缩小确定框60B。若受理放大或缩小确定框60B的操作指示,则主控制部26向显示控制部31输出所受理的操作指示的信息。本实施方式的放大或缩小确定框60B的操作指示为本发明的变更确定框60B的尺寸的尺寸变更指示的一例。显示控制部31将确定框60B变更为与从主控制部26输入的操作指示的信息对应的大小。此时的本实施方式的主控制部26为本发明的第1受理部的一例。另外,在本实施方式中,作为一例,能够放大及缩小确定框60B,但也可以为能够进行放大及缩小中的至少一个的方式。
并且,在本实施方式中,能够移动确定框60B。换言之,用户U能够变更确定框60B相对于显示图像50的位置。若受理移动确定框60B的操作指示,则主控制部26向显示控制部31输出所受理的操作指示的信息。本实施方式的移动确定框60B的操作指示为本发明的移动确定框60B的位置的移动指示的一例。显示控制部31将带指示符的确定框60移动至与从主控制部26输入的操作指示的信息对应的位置。此时的本实施方式的主控制部26为本发明的第2受理部的一例。
并且,如图4所示,确定框60B内显示有颜色指定用标记62。在本实施方式中,预先确定了确定框60B和颜色指定用标记62的相对位置关系。作为一例,在本实施方式中,将颜色指定用标记62的位置设为确定框60B的中心(重心)的位置。颜色指定用标记62为表示用于从确定区域52内的图像的颜色中指定基准颜色的标记的图像。本实施方式的颜色指定用标记62为本发明的颜色指定用标记的一例。作为一例,本实施方式的颜色指定用标记62为具有包围显示图像50的圆环状的形状的标记,将圆环状的内部的显示图像50的颜色指定为基准颜色。
指示符60A具有大于颜色指定用标记62的面积,显示由颜色指定用标记62指定的基准颜色。
接着,参考图5对移动终端10中的合成摄影处理所涉及的功能进行说明。若启动照片合成应用程序,则CPU14发挥图像处理部32的提取部32A及合成部32B的功能。
提取部32A提取显示图像50的一部分作为用于合成图像的合成对象图像54。具体而言,提取部32A从确定区域52中提取合成对象图像54,该确定区域52是从显示图像50中确定的。更具体而言,提取部32A从由上述带指示符的确定框60的确定框60B确定的确定区域52中提取与由颜色指定用标记62指定的基准颜色对应的图像作为合成对象图像54。成为合成对象图像54的图像例如可举出表示标记或字符串的图像等。标记包括字符、图形、图案及选自这些中的2个以上的组合中的至少1个。字符为包括数字及记号的概念。标记包括表示公司名、商品名、店名、站名或地名等的徽标。图案包括条纹图案、方格图案及点图案等。并且,标记还包括由字符、数字或记号中的任一个构成的标记。
字符串包括由手写的字符或打印的字符构成的消息、交通安全的口号、旅游景点的欢迎或接送的问候语、商品的广告文等。消息例如为“前几天谢谢你”或“恭喜入学”之类的向特定的人传达想法的话语,包括祝福的话语、感谢的话语及问候语等。
此外,在旅游景点向游客提供的印模等印章或印记也包括在标记中。并且,在寺院或神社,作为对参拜者提供的印章或印记的御朱印等也包括在标记或字符串中的任一个中。并且,包括在标记或字符串中的字符并不限于日语,也可以为英语、中文及韩语等外国语。
提取部32A根据确定区域52内的图像的对比度提取与基准颜色对应的图像的区域作为合成对象图像54。若从显示图像50中提取出合成对象图像54,则所提取的合成对象图像54记录于图像存储器17A中。
摄影部11在图像存储器17A中保持合成对象图像54的状态下开始选择图像56的即时预览摄影。图像存储器17A中记录有选择图像56作为实时取景图像。在触摸屏显示器12中,开始选择图像56的即时预览显示。选择图像56为由摄影部11拍摄的实时取景图像,是与合成对象图像54合成的合成目标图像。
合成部32B生成将选择图像56与合成对象图像54进行合成的合成图像。与合成对象图像54合成的选择图像56记录于VRAM17B中作为合成图像。显示控制部31将与合成对象图像54合成的选择图像56作为合成图像来开始即时预览显示。
并且,主控制部26根据通过触摸屏显示器12输入的操作指示受理触摸屏显示器12内的合成对象图像54的编辑指示。由主控制部26受理的编辑指示输入于显示控制部31或合成部32B中。显示控制部31或合成部32B根据所输入的编辑指示进行合成对象图像54的编辑。
并且,在通常的摄影的情况下,若用户U在与合成对象图像54合成的选择图像56的即时预览显示期间操作快门按钮,则输入图像保存指示。若输入图像保存指示,则在该定时将与合成对象图像54合成的选择图像56保存到存储装置18的用户区域28或存储卡29中的预先设定的保存目的地中作为保存用合成图像。作为一例,在本实施方式中,图像处理部32对合成图像实施压缩处理,并将经压缩的合成图像记录于预先设定的保存目的地中。
参考上述图1及图4和图6~图15对上述结构所起的作用进行说明。
如上所述,图1中示出用户U使用移动终端10来进行拍摄的场景。图1所示的场景为用户U与朋友T一同访问的有“熊猫”的动物园,朋友T所穿的衬衫80上印有字符82“JAPANDA”、波浪线83及水珠84。在本例中,举出如下例子进行说明:在该场所,用户U根据“熊猫(PANDA)”与“JAPANDA”的语感的类似性想到拍摄将“熊猫”和“JAPANDA”中的字符82“PANDA”这2个被摄体组合到一起的合成照片,并使用移动终端10进行该拍摄。
如图6所示,在移动终端10中,若启动照片合成应用程序,则移动终端10切换为合成摄影模式来执行合成摄影处理。若开始合成摄影处理,则首先,在步骤S100中,显示控制部31将显示图像50即时预览显示于触摸屏显示器12中。具体而言,在摄影部11中开始显示图像50的即时预览摄影,并且在触摸屏显示器12中开始显示图像50的即时预览显示。
在下一步骤S102中,如上述图4所示,显示控制部31使带指示符的确定框60及颜色指定用标记62重叠于被即时预览显示的显示图像50上并将其显示于触摸屏显示器12中。
若显示带指示符的确定框60及颜色指定用标记62,则用户U调整成欲提取的字符82落入确定框60B内的状态。并且,在本实施方式的移动终端10中,将欲提取的字符82的颜色作为基准颜色。因此,用户U将颜色指定用标记62的位置调整成重叠于欲提取的字符82的颜色的图像上的位置。例如,用户U调整成颜色指定用标记62重叠于欲提取的字符82上的状态。作为进行这些调整的方法,可举出通过由用户U移动移动终端10来调整摄影范围(即,映现在显示图像50本身中的被摄体)的方法。并且,作为进行这些调整的方法,可举出基于确定框60B(确定区域52)的移动的调整方法及基于确定框60B(确定区域52)的放大或缩小的调整方法。
因此,在下一步骤S104中,如上所述,主控制部26判定是否受理移动确定框60B的操作指示。作为一例,在本实施方式中,用户U进行的移动确定框60B的操作指示通过在用户U用1根手指触摸显示于触摸屏显示器12中的确定框60B的状态下进行向欲移动的方向滑动手指的手势来进行。这种手势称为滑动等。
在主控制部26未受理这种移动确定框60B的操作指示的情况下,步骤S104的判定成为否定判定,并转移到步骤S108。另一方面,在主控制部26已受理移动确定框60B的操作指示的情况下,步骤S104的判定成为肯定判定,并转移到步骤S106。
在步骤S106中,显示控制部31将确定框60B移动至与上述移动确定框60B的操作指示对应的位置。具体而言,从主控制部26向显示控制部31输出表示移动后的确定框60B的坐标信息作为操作指示的信息。显示控制部31将确定框60B显示于与从主控制部26输入的坐标信息对应的位置。
图7中示出被移动的确定框60B的显示的一例。在图7所示的例子中,示出了确定框60B的位置(更具体而言,确定框60B相对于显示图像50的位置)移动至比图4所示的例子更靠下方(靠近操作开关16的一侧)的状态的一例。
在下一步骤S108中,如上所述,主控制部26判定是否受理放大或缩小确定框60B的操作指示。作为一例,在本实施方式中,用户U进行的操作指示通过在用户U用1根手指触摸显示于触摸屏显示器12中的放大/缩小指示标记60C的状态下进行向与欲放大或缩小的大小对应的方向滑动手指的手势来进行。另外,放大或缩小确定框60B的操作指示方法并不限定于本实施方式,例如也可以为如下方法:通过由用户U对显示于触摸屏显示器12中的确定框60B或确定区域52进行双指外扩或双指内收之类的手势来进行操作指示。双指外扩为在触摸屏显示器12中在用2根手指触摸显示画面的状态下扩展2根手指的间隔的手势。若在用2根手指触摸确定框60B或确定区域52的上下或左右的状态下进行双指外扩,则会放大确定框60B,放大确定区域52的面积。与双指外扩相反地,双指内收为缩小2根手指的间隔的手势。若进行双指内收,则会缩小确定框60B,缩小确定区域52的面积。
在主控制部26未受理这种放大或缩小确定框60B的操作指示的情况下,步骤S108的判定成为否定判定,并转移到步骤S112。另一方面,在主控制部26已受理放大或缩小确定框60B的操作指示的情况下,步骤S108的判定成为肯定判定,并转移到步骤S110。
在步骤S110中,显示控制部31将确定框60B的大小变更为与上述放大或缩小确定框60B的操作指示对应的大小。通过变更确定框60B的大小,也会变更确定区域52的大小。具体而言,从主控制部26向显示控制部31输出表示放大或缩小后的确定框60B的坐标信息作为操作指示的信息。显示控制部31将确定框60B显示为与从主控制部26输入的坐标信息对应的大小(位置)。
图8中示出已变更大小的确定框60B的显示的一例。在图8所示的例子中,示出了比图7所示的例子更缩小确定框60B的大小的状态。
本实施方式的用户U欲仅提取“JAPANDA”这一字符82中的字符82“PANDA”。因此,如图7所示,用户U将确定框60B如上所述调整成仅使字符82“JAPANDA”中的字符82“PANDA”落入确定框60B内而另一方面使字符82“JA”落在确定框60B外的状态。并且,用户U参考指示符60A的颜色将确定框60B如上所述调整成由颜色指定用标记62指定的基准颜色成为字符82的颜色的状态(在本例中为颜色指定用标记62重叠于字符82上的状态)。在上述图4所示的例子中,如指示符60A所示,由颜色指定用标记62指定的基准颜色不同于字符82的颜色,因此不优选。并且,在上述图8所示的例子中,包括在确定框60B内的字符82仅为字符82“NDA”,因此字符82“PA”不会被提取,从而不优选。另一方面,在图7所示的例子中,字符82“PANDA”包括在确定框60B内,但不包括字符82“JA”,并且颜色指定用标记62重叠于字符82上,如指示符60A所示,字符82的颜色成为由颜色指定用标记62指定的状态,因此优选。因此,用户U将显示图像50与带指示符的确定框60之间的关系调整成图7所示的状态。
如此,若完成确定框60B的位置及大小、颜色指定用标记62的位置等的调整,则在本实施方式中,通过进行用手指点击作为GUI显示于触摸屏显示器12中的快门按钮70的操作来进行用户U进行的合成对象图像54的提取指示。在本实施方式中,提取部32A根据用户U进行的合成对象图像54的提取指示从由确定框60B确定的确定区域52中提取提取图像。然后,合成部32B将显示于触摸屏显示器12中的提取图像作为合成对象图像54与选择图像56进行合成,生成合成图像。将显示于触摸屏显示器12中的提取图像作为合成对象图像54,因此以下还将提取图像称为合成对象图像54。
因此,在下一步骤S112中,主控制部26判定是否受理上述合成对象图像54的提取指示。在主控制部26未受理合成对象图像54的提取指示的情况下,步骤S112的判定成为否定判定,并返回到步骤S104,重复进行上述步骤S104~S110的处理。另一方面,在主控制部26已受理合成对象图像54的提取指示的情况下,步骤S112的判定成为肯定判定,并转移到步骤S114。
在步骤S114中,通过图9中例示的合成对象图像提取处理从显示图像50的确定区域52中提取合成对象图像54。
在图9所示的步骤S150中,提取部32A从显示图像50中确定确定区域52。具体而言,如上所述,若用户U操作快门按钮70进行提取指示,则主控制部26向提取部32A输出与确定框60B的位置对应的坐标信息。提取部32A根据从主控制部26输入的坐标信息从显示图像50中确定确定区域52。
在下一步骤S152中,提取部32A将整个确定区域52灰度化。具体而言,提取部32A针对确定区域52中包括的所有像素暂且将其颜色变换为由0~255的256个色阶的像素值表示的白色至黑色的灰度的像素值。
将各像素的颜色变换为灰度的方法并无特别限定,能够适用现有的技术。例如,在确定区域52为RGB图像的情况下,根据下述(1)式从各像素中的Red(R:红色)的像素值、Green(G:绿色)的像素值及Blue(B:蓝色)的像素值中获得经灰度化的像素值Gray。
Gray=Red×0.3+Green×0.59+Blue×0.11……(1)
图10中示出了将确定区域52的图像灰度化的例子。另外,图10所示的确定区域52与在上述图7所示的状态下由带指示符的确定框60确定的确定区域52对应。图10所示的确定区域52中映现有朋友T、背景B、衬衫80及字符82作为被摄体,且包括各自的图像。
在下一步骤S154中,提取部32A判定基准颜色是否为白色。作为一例,在本实施方式中,在上述步骤S152中将经灰度化的像素值为0~127的像素视为黑色像素,将像素值为128~255的像素视为白色像素。即,在本实施方式中,将经灰度化的确定区域52的像素的颜色二值化为白色或黑色中的任一个。
在作为基准颜色的像素的像素值(具体而言,被颜色指定用标记62包围的显示图像50的像素的像素值)为128~255中的任一个的情况下,提取部32A判定为基准颜色为白色。在基准颜色为白色的情况下,步骤S154的判定成为肯定判定,并转移到步骤S156。此时的本实施方式中的像素值为128~255的范围是包括本发明的基准颜色所对应的灰度的数值的基准颜色范围的一例。
在步骤S156中,提取部32A提取确定区域52内的白色像素(即,像素值为128~255色的像素)的区域作为合成对象图像54。
另一方面,在作为基准颜色的像素的像素值(具体而言,被颜色指定用标记62包围的显示图像50的像素的像素值)为0~127中的任一个的情况下,提取部32A判定为基准颜色为黑色。在基准颜色为黑色的情况下,步骤S154的判定成为否定判定,并转移到步骤S158。此时的本实施方式中的像素值为0~127的范围是包括本发明的基准颜色所对应的灰度的数值的基准颜色范围的一例。
在步骤S158中,提取部32A提取确定区域52内的黑色像素(即,像素值为0~127色的像素)的区域作为合成对象图像54。
在图10所示的例子中,将确定区域52的图像灰度化而得的字符82A“P”、字符82B“A”、字符82C“N”、字符82D“D”及字符82E“A”、波浪线83及水珠84中的各像素的像素值处于0~127的范围内。因此,字符82判定为黑色像素。另一方面,朋友T、背景B及衬衫80中的各像素的像素值处于128~255的范围内,从而判定为白色像素。
因此,在本实施方式的例子中,如图10所示,由提取部32A判定为基准颜色为黑色,从确定区域52中分别提取字符82、波浪线83及水珠84作为合成对象图像54。具体而言,从确定区域52中分别提取字符82即字符82A“P”、字符82B“A”、字符82C“N”、字符82D“D”及字符82E“A”的图像作为合成对象图像54。并且,作为波浪线83,从确定区域52中分别提取3条波浪线的图像作为合成对象图像54。并且,作为水珠84,从确定区域52中分别提取多个点的图像作为合成对象图像54。提取部32A将字符82A“P”、字符82B“A”、字符82C“N”、字符82D“D”及字符82E“A”、3条波浪线及多个点视为1个合成对象图像54。
若结束上述步骤S156的处理或步骤S158的处理,则合成对象图像提取处理结束。通过结束合成对象图像提取处理,合成摄影处理的步骤S114结束,并转移到步骤S116。
若提取出合成对象图像54,则在步骤S116中,摄影部11立刻开始选择图像56的即时预览摄影。
若开始选择图像56的即时预览摄影,则在下一步骤S118中,合成部32B将所提取的合成对象图像54与选择图像56进行合成。另外,在本实施方式中,除确定区域52内的合成对象图像54以外的图像视为透明的图像。
在下一步骤S120中,显示控制部31在触摸屏显示器12中即时预览显示与合成对象图像54合成的选择图像56。并且,显示控制部31在选择图像56上显示噪声去除按钮90、橡皮擦按钮92、颜色变更按钮94及形状编辑按钮96作为用户用于编辑合成图像的编辑工具。
图11中示出即时预览显示有当前阶段的与成为合成对象图像54的字符82、波浪线83及水珠84合成的选择图像56的情形。如图11所示,在即时预览显示与合成对象图像54合成的选择图像56的情况下,显示控制部31在初始状态下将合成对象图像54显示于选择图像56的中央(即,触摸屏显示器12的显示画面的中央)。而且,如图11所示,显示控制部31例如在触摸屏显示器12的显示画面的下方位置显示作为编辑工具的噪声去除按钮90、橡皮擦按钮92、颜色变更按钮94及形状编辑按钮96及快门按钮70作为GUI。快门按钮70为用于输入图像保存指示的操作按钮,是用于将与合成对象图像54合成的选择图像56保存为合成图像的操作按钮。
用户U一边观察如此与合成对象图像54合成的选择图像56的即时预览显示,一边确定选择图像56的构图及选择图像56中的被摄体的图像与合成对象图像54之间的相对位置关系。
具体而言,如图11所示,用户U想要拍摄将字符82“PANDA”和“熊猫”组合到一起的合成照片。因此,用户U调节移动终端10的位置及朝向,以映入“熊猫”作为选择图像56的被摄体。然后,调节选择图像56内的“熊猫”的位置、尺寸及视角等。用户U通过这种操作来确定选择图像56的构图。
在确定这种选择图像56的构图的同时,用户U还进行选择图像56内的合成对象图像54的编辑。在进行合成对象图像54的编辑的情况下,用户U根据所期望的编辑内容用1根手指触摸作为编辑工具的噪声去除按钮90、橡皮擦按钮92、颜色变更按钮94及形状编辑按钮96中的任一个。在触摸到噪声去除按钮90、橡皮擦按钮92、颜色变更按钮94及形状编辑按钮96的情况下,向主控制部26输入编辑指示。
在步骤S122中,主控制部26判定是否进行选择图像56内的合成对象图像54的编辑。在转移到步骤S122之后的预先确定的时间内未输入用户U操作编辑工具进行的编辑指示的情况下,步骤S122的判定成为否定判定,并转移到步骤S126。另一方面,在转移到步骤S122之后的预先确定的时间内输入了用户U操作编辑工具进行的编辑指示的情况下,步骤S122的判定成为肯定判定,并转移到步骤S124。
在步骤S124中,通过图12中例示的合成对象图像编辑处理进行合成对象图像54的编辑。如图11所示,在初始状态下,字符82、波浪线83及水珠84显示于选择图像56上作为合成对象图像54。如上所述,本实施方式的用户U想要将字符82“PANDA”作为合成对象图像54,并且想要从合成对象图像54中排除掉波浪线83及水珠84。在这种情况下,用户U通过操作噪声去除按钮90或橡皮擦按钮92来进行从合成对象图像54中删除波浪线83及水珠84的操作。
在图12所示的步骤S200中,主控制部26判定所受理的编辑指示是否为操作噪声去除按钮90进行的编辑指示。在是操作噪声去除按钮90进行的编辑指示的情况下,步骤S200成为肯定判定,并转移到步骤S202。此时,移动终端10成为噪声去除模式。在噪声去除模式下,关于显示于触摸屏显示器12中的合成对象图像54中的多个区域,显示控制部31按区域从合成对象图像54中删除。另外,在此,“区域”是指连续的像素的块,其详细内容将在后面叙述。并且,显示控制部31从合成对象图像54中确定区域的方法并无特别限定,例如能够适用所谓的图像处理中的套索工具。另外,如字母表字符的“O”(欧)等,在构成区域的像素包括构成非区域的像素的方式的情况下,关于被构成区域的像素包围的构成非区域的像素,可以视为构成该区域的像素。例如,关于字母表的字符“O”的情况,作为与字符“O”对应的区域,可以采用圆环状的区域,也可以采用所谓的实心圆形区域。
在步骤S202中,如图13所示,显示控制部31将噪声去除工具91显示于选择图像56上。噪声去除工具91包括滑动条91A及滑块91B。
用户U在用1根手指触摸滑块91B的状态下进行使手指沿滑动条91A滑动的手势来变更滑块91B的位置。在合成对象图像54包括不同面积的多个区域的情况下,若变更滑块91B的位置,则显示控制部31根据滑块91B的操作量以与面积对应的顺序删除多个区域中的至少一个。在图13所示的例子中,显示控制部31根据滑块91B的位置从左侧向右侧移动的移动量从面积小的区域开始依次删除显示于触摸屏显示器12中的合成对象图像54中的多个区域。另外,在本实施方式中,即使暂且删除合成对象图像54的区域,也能够使所删除的区域复原,直至噪声去除模式结束为止。作为一例,在本实施方式中,在使所删除的区域复原的情况下,用户U通过沿滑动条91A从右侧向左侧(即,与删除时相反的方向)移动滑块91B的位置,与删除时相反地使面积大的区域依次复原。另外,区域的“面积”与区域的图像的像素数对应。
在图13所示的例子中,合成对象图像54包括字符82、波浪线83及水珠84的多个区域。关于字符82“PANDA”,面积分别不同的字符82A“P”、字符82B“A”、字符82C“N”、字符82D“D”及字符82E“A”的图像分别成为1个区域。即,字符82包括5个区域,并且不同面积的区域的数量为4个。并且,波浪线83中包括的3个波浪线的图像分别成为1个区域。即,波浪线83包括3个区域,并且不同面积的区域的数量为1个。而且,水珠84中包括的多个点的图像分别成为1个区域。即,水珠84包括与多个点相同数量的区域,并且不同面积的区域的数量为1个。
并且,在本实施方式中,在通过噪声去除工具91进行噪声的去除的情况下,能够放大整个合成对象图像54。例如,在噪声小而难以观察的情况下等,用户U通过放大合成对象图像54的显示尺寸,能够容易观察合成对象图像54中包括的噪声。
因此,在下一步骤S204中,主控制部26判定是否放大合成对象图像54的显示尺寸。放大显示尺寸时的编辑指示例如通过用户U用2根手指进行的双指外扩之类的手势来进行。
在主控制部26未受理放大合成对象图像54的显示尺寸的编辑指示的情况下,步骤S204的判定成为否定判定,并转移到步骤S208。另一方面,在主控制部26已受理放大合成对象图像54的显示尺寸的编辑指示的情况下,步骤S204的判定成为肯定判定,并转移到步骤S206。表示主控制部26受理的编辑指示的信息输出至显示控制部31。
在步骤S206中,显示控制部31将合成对象图像54的显示尺寸变更为与表示从主控制部26输入的编辑指示的信息对应的大小。如此,若用户U在用2根手指触摸合成对象图像54的上下或左右的状态下进行双指外扩,则会放大合成对象图像54的显示尺寸。
在下一步骤S208中,主控制部26判定滑块91B是否被操作。在用户U在转移到步骤S122之后的预先确定的时间内未操作滑块91B的情况下,步骤S208的判定成为否定判定,并转移到步骤S216。另一方面,在用户U在转移到步骤S122之后的预先确定的时间内操作了滑块91B的情况下,步骤S208的判定成为肯定判定,并转移到步骤S210。
在步骤S210中,显示控制部31判定滑块91B是否向右移动。即,判定是否由滑块91B进行用于删除合成对象图像54中包括的多个区域的编辑指示。另外,在本实施方式中,从主控制部26向显示控制部31输入表示滑块91B的位置的信息(即,表示滑块91B的位置的坐标信息)作为编辑指示的信息。显示控制部31根据表示滑块91B的位置的坐标信息导出滑块91B的移动方向及移动量。
在滑块91B向右移动的情况下,步骤S210的判定成为肯定判定,并转移到步骤S212。
在步骤S212中,显示控制部31根据用户U的操作量(换言之,滑块91B的移动量)以与面积对应的顺序依次删除合成对象图像54中包括的多个区域的至少1个。
作为一例,本实施方式的显示控制部31用滑块91B的移动量的最大值(即,滑块91B从滑动条91A的右端移动至左端时的移动量(以下,称为最大移动量))除以不同面积的区域的数量减去1而得的值。在图13所示的例子中,如上所述,关于不同面积的区域的数量,字符82为4,波浪线83为1,水珠84为1,因此整个合成对象图像54的不同面积的区域的数量为6。因此,显示控制部31将用最大移动量除以5(即,6减去1而得的数量)而得的值作为用于删除区域的移动量的阈值。然后,显示控制部31在每当滑块91B的移动量达到移动量的阈值时以面积由小到大的顺序依次删除合成对象图像54中包括的区域。
例如,在合成对象图像54中包括的字符82、波浪线83及水珠84中,波浪线83中包括的3条波浪线的各自的面积最大。字符82的面积第二大,并且面积以字符82A“P”、字符82C“N”、字符82B、82E“A”及字符82D“D”的顺序变大。并且,水珠84中包括的多个点的面积分别是最小的。因此,如图14所示,若向右侧移动滑块91B,则显示控制部31首先从合成对象图像54中删除水珠84。如图15所示,若从该状态进一步向右侧移动滑块91B,则显示控制部31从合成对象图像54中删除字符82中的字符82A“P”。若从该状态进一步向右侧移动滑块91B,则显示控制部31从合成对象图像54中以面积由小到大的顺序删除字符。最终,如图16所示,显示控制部31完全删除字符82,设为仅显示合成对象图像54中包括的多个区域内的面积最大的波浪线83的状态。
另一方面,在滑块91B向左移动的情况下,步骤S210的判定成为否定判定,并转移到步骤S214。
在步骤S214中,显示控制部31根据用户U的操作量(换言之,滑块91B的移动量)以与面积对应的顺序依次使暂且删除的区域复原。另外,在使暂且删除的区域复原的情况下,只要以面积由大到小的顺序依次复原所删除的多个区域即可,该方法只要进行与上述删除区域的动作相反的动作即可。
在下一步骤S216中,主控制部26判定是否结束噪声去除模式。在本实施方式中,已完成噪声的去除的用户U通过再次用1根手指触摸噪声去除按钮90来指示噪声去除模式的结束。在本实施方式中,若移动滑块91B从合成对象图像54中去除水珠84而设为图14所示的状态,则用户U用1根手指触摸噪声去除按钮90来进行结束噪声去除模式的编辑指示。
主控制部26判定是否受理用于结束噪声去除模式的编辑指示。在主控制部26未受理用于结束噪声去除模式的编辑指示的情况下,步骤S216的判定成为否定判定,并返回到步骤S204,重复进行步骤S204~S214的处理。另一方面,在主控制部26已受理用于结束噪声去除模式的编辑指示的情况下,步骤S216的判定成为肯定判定,并结束噪声去除模式。
另外,在合成对象图像54中包括的多个区域的面积均相同的情况下,或者,在合成对象图像54仅包括1个区域的情况下,例如电可以设为在噪声去除模式下不删除任何合成对象图像54中包括的区域的方式。并且,例如也可以设为在噪声去除模式下一次性删除所有合成对象图像54中包括的区域的方式。并且,例如也可以设为向用户显示表示警告的信息而不切换为噪声去除模式的方式。
另一方面,在图11所示的显示状态下,在主控制部26受理的编辑指示不是操作噪声去除按钮90进行的编辑指示的情况下,步骤S200的判定成为否定判定,并转移到步骤S218。
在步骤S218中,主控制部26判定所受理的编辑指示是否为操作橡皮擦按钮92进行的编辑指示。在是操作橡皮擦按钮92进行的编辑指示的情况下,步骤S218成为肯定判定,并转移到步骤S220。此时,移动终端10成为橡皮擦模式。在橡皮擦模式下,关于显示于触摸屏显示器12中的合成对象图像54中的多个区域,显示控制部31从合成对象图像54中删除一部分或全部区域。
在步骤S220中,如图17所示,显示控制部31将橡皮擦工具93显示于选择图像56上。橡皮擦工具93包括橡皮擦一览表93A及橡皮擦93B。
橡皮擦一览表93A为橡皮擦93B的尺寸的一览表,包括不同尺寸的多个橡皮擦93B的图像。用户U通过用1根手指触摸根据欲删除的区域的大小等选择的尺寸的橡皮擦93B的图像来指示删除时使用的橡皮擦93B的尺寸。然后,用户U通过再次用1根手指触摸显示于触摸屏显示器12中的合成对象图像54中包括的区域中的欲删除的区域来进行指示用橡皮擦93B擦拭的开始位置的操作指示。
在步骤S222中,主控制部26判定橡皮擦93B的尺寸及是否进行用橡皮擦93B擦拭的开始位置的操作指示。在主控制部26未受理这些操作指示的情况下,步骤S222的判定成为否定判定,并转移到步骤S226。另一方面,在主控制部26已受理这些操作指示的情况下,步骤S222的判定成为肯定判定,并转移到步骤S224。若受理橡皮擦93B的尺寸及开始位置的指示操作,则主控制部26向显示控制部31输出橡皮擦93B的尺寸及开始位置的信息。另外,在本实施方式中,从主控制部26向显示控制部31输入表示橡皮擦93B的位置的信息(即,表示橡皮擦93B的位置的坐标信息)作为编辑指示的信息。显示控制部31根据表示橡皮擦93B的位置的坐标信息导出橡皮擦93B的位置。
在步骤S224中,显示控制部31将与从主控制部26输入的尺寸对应的橡皮擦93B显示于与所输入的坐标信息对应的位置。作为一例,在本实施方式中,如图17所示,用户U指示的尺寸的矩形橡皮擦93B显示于用户U指示的开始位置。
用户U通过用1根手指触摸所显示的橡皮擦93B并进行在欲用橡皮擦93B擦拭的范围内滑动的手势来移动橡皮擦93B的位置。若移动橡皮擦93B,则显示控制部31响应橡皮擦93B的移动删除合成对象图像54的区域的图像。在图18所示的例子中,显示控制部31响应用户U在显示于触摸屏显示器12中的波浪线83上移动橡皮擦93B而从合成对象图像54中依次删除橡皮擦93B的图像所重叠的波浪线83的部分。
在下一步骤S226中,主控制部26判定是否结束橡皮擦模式。在本实施方式中,已完成不必要的部分的删除的用户U通过再次用1根手指触摸橡皮擦按钮92来指示橡皮擦模式的结束。在本实施方式中,若移动橡皮擦93B从合成对象图像54中去除波浪线83而设为图19所示的状态,则用户U用1根手指触摸橡皮擦按钮92来进行结束橡皮擦模式的编辑指示。
主控制部26判定是否受理用于结束橡皮擦模式的编辑指示。在主控制部26未受理用于结束橡皮擦模式的编辑指示的情况下,步骤S226的判定成为否定判定,并返回到步骤S222,重复进行步骤S222及S224的处理。另一方面,在主控制部26已受理用于结束橡皮擦模式的编辑指示的情况下,步骤S226的判定成为肯定判定,并结束橡皮擦模式。
另外,在橡皮擦模式中,也可以与上述噪声去除模式相同地设为能够使暂且删除的区域的部分复原直至橡皮擦模式结束为止的方式。
另一方面,在图11所示的显示状态下,在主控制部26受理的编辑指示既不是操作噪声去除按钮90进行的编辑指示也不是操作橡皮擦按钮92进行的编辑指示的情况下,步骤S218的判定成为否定判定,并转移到步骤S228。
在步骤S228中,主控制部26判定所受理的编辑指示是否为操作颜色变更按钮94进行的编辑指示。在是操作颜色变更按钮94进行的编辑指示的情况下,步骤S228成为肯定判定,并转移到步骤S230。此时,移动终端10成为颜色变更模式。在颜色变更模式下,合成部32B变更显示于触摸屏显示器12中的合成对象图像54的颜色。
在步骤S230中,如图20所示,合成部32B将调色板95显示于选择图像56上。调色板95上排列有多个颜色。在用户U进行改变字符82的颜色的编辑指示的情况下,例如进行用1根手指从排列在调色板95上的多个颜色中点击所希望的颜色的手势来进行颜色变更指示。
在步骤S232中,主控制部26判定是否受理合成对象图像54的颜色变更指示。在主控制部26未受理颜色变更指示的情况下,步骤S232的判定成为否定判定,并转移到步骤S236。另一方面,在已受理合成对象图像54的颜色变更指示的情况下,步骤S232的判定成为肯定判定,并转移到步骤S234。表示主控制部26受理的颜色变更指示的信息输出至合成部32B。
在下一步骤S234中,合成部32B将显示于触摸屏显示器12中的合成对象图像54的颜色变更为与从主控制部26输入的颜色变更指示对应的颜色。在图21所示的例子中,示出了通过进行用户U用手指点击排列在调色板95上的白色95W的编辑指示而将字符82的颜色改变为白色的状态。
在下一步骤S236中,主控制部26判定是否结束颜色变更模式。在本实施方式中,已将字符82的颜色设为所期望的颜色的用户U通过再次用1根手指触摸颜色变更按钮94来进行结束颜色变更模式的编辑指示。
主控制部26判定是否受理用于结束颜色变更模式的编辑指示。在主控制部26未受理用于结束颜色变更模式的编辑指示的情况下,步骤S236的判定成为否定判定,并返回到步骤S232,重复进行步骤S232及S234的处理。另一方面,在主控制部26已受理用于结束颜色变更模式的编辑指示的情况下,步骤S236的判定成为肯定判定,并结束颜色变更模式。
另外,在本实施方式的颜色变更模式下,对使用调色板95来进行作为合成对象图像54的字符82的颜色的变更的方式进行了说明,但合成对象图像54的颜色的变更方法并不限定于使用调色板95的方法。例如,也可以设为如下方式:在选择图像56上显示颜色切换按钮(省略图示),若用户U用手指点击,则如白色和黑色、白色和红色、白色、黑色及红色等那样,根据点击颜色切换按钮的次数在预先确定的多种颜色之间进行变更。合成对象图像54的颜色变更例如以避免合成对象图像54的颜色与选择图像56的背景部分的颜色在色彩上重叠导致难以观察合成对象图像54为目的而进行。或者,也可以以根据用户U的感性等配合背景颜色来改变合成对象图像54的颜色为目的进行颜色变更。
另一方面,在图11所示的显示状态下,在主控制部26受理的编辑指示既不是操作噪声去除按钮90进行的编辑指示、也不是操作橡皮擦按钮92进行的编辑指示、也不是操作颜色变更按钮94进行的编辑指示的情况下,步骤S228的判定成为否定判定,并转移到步骤S230。即,在主控制部26受理的编辑指示为操作形状编辑按钮96进行的编辑指示的情况下,转移到步骤S238。此时,移动终端10成为形状编辑模式。在形状编辑模式下,合成部32B受理显示于触摸屏显示器12中的合成对象图像54的显示位置、显示姿势及显示尺寸中的至少1个的编辑指示。
图22中示出了移动作为合成对象图像54的字符82的显示位置时的一例。在图22所示的例子中,示出了图像处理部32将字符82的显示位置移动至下方(靠近操作开关16的一侧)的状态的一例。在用户U进行移动显示位置的编辑指示的情况下,在触摸屏显示器12中,在用1根手指触摸字符82的状态下进行向欲移动的方向滑动手指的手势。
并且,图23中示出了放大作为合成对象图像54的字符82的显示尺寸时的一例。在用户U进行放大/缩小显示尺寸的编辑指示的情况下,例如以双指外扩或双指内收之类的手势进行。若在用2根手指触摸字符82的上下或左右的状态下进行双指外扩,则会放大字符82的显示尺寸。另一方面,若进行双指内收,则会缩小字符82的显示尺寸。
并且,图24中示出了旋转作为合成对象图像54的字符82的显示姿势时的一例。在用户U进行旋转显示姿势的编辑指示的情况下,在触摸屏显示器12中,在用2根手指触摸字符82的上下或左右的状态下进行在维持2根手指的间隔的同时旋转2根手指的手势。
主控制部26受理针对合成对象图像54的这种手势作为针对合成对象图像54的形状的编辑指示。在步骤S238中,主控制部26判定是否受理针对合成对象图像54的形状的编辑指示。在主控制部26未受理针对合成对象图像54的形状的编辑指示的情况下,步骤S238的判定成为否定判定,并转移到步骤S242。另一方面,在主控制部26已受理针对合成对象图像54的形状的编辑指示的情况下,步骤S238的判定成为肯定判定,并转移到步骤S240。主控制部26向合成部32B输出所受理的编辑指示的信息。
在下一步骤S240中,合成部32B根据从主控制部26输入的编辑指示的信息如上所述编辑选择图像56内的合成对象图像54。
在下一步骤S242中,主控制部26判定是否结束形状编辑模式。在本实施方式中,已将字符82的形状设为所期望的形状的用户U通过再次用1根手指触摸形状编辑按钮96来进行结束形状编辑模式的编辑指示。
主控制部26判定是否受理用于结束形状编辑模式的编辑指示。在主控制部26未受理用于结束形状编辑模式的编辑指示的情况下,步骤S242的判定成为否定判定,并返回到步骤S238,重复进行步骤S238及S240的处理。另一方面,在主控制部26已受理用于结束形状编辑模式的编辑指示的情况下,步骤S242的判定成为肯定判定,并结束形状编辑模式。
若通过上述步骤S216的处理结束噪声去除模式,通过上述步骤S226的处理结束橡皮擦模式,通过上述步骤S236的处理结束颜色变更模式,或者,通过上述步骤S242的处理结束形状编辑模式,则合成对象图像编辑处理结束。通过结束合成对象图像编辑处理,合成摄影处理的步骤S124结束,并转移到步骤S126。
若结束合成对象图像54的编辑,则用户U用手指点击快门按钮70。若点击快门按钮70,则主控制部26受理点击操作作为合成图像的保存指示。
在步骤S126中,主控制部26判定是否受理上述合成图像的保存指示。在主控制部26未受理合成图像的保存指示的情况下,步骤S126的判定成为否定判定,并返回到步骤S122,重复进行步骤S122及S124的处理。
另一方面,在主控制部26已受理合成图像的保存指示的情况下,步骤S126的判定成为肯定判定,并转移到步骤S128。
主控制部26向合成部32B输出所受理的合成图像的保存指示的信息。若从主控制部26输入合成图像的保存指示的信息,则图像处理部32确定在对快门按钮70进行点击操作的定时拍摄的选择图像56,并确定所确定的选择图像56内的合成对象图像54的显示位置等。合成部32B将已确定显示位置等的合成对象图像54与所确定的选择图像56进行合成,并作为保存用合成图像向图像存储器17A输出。
在下一步骤S128中,图像处理部32保存合成图像。具体而言,图像处理部32对向图像存储器17A输出的保存用合成图像实施压缩处理,并将经压缩处理的合成图像记录于存储装置18的用户区域28或存储卡29中来保存合成图像。
在下一步骤S130中,主控制部26判定是否结束合成摄影模式。在本实施方式中,在主控制部26已受理通过用户U进行的操作开关16等的操作进行的结束合成摄影模式的操作指示的情况下,结束合成摄影模式。因此,在主控制部26未受理结束合成摄影模式的操作指示的情况下,步骤S130的判定成为否定判定,并返回到步骤S100,重复进行步骤S100~S128的处理。另一方面,在主控制部26已受理结束合成摄影模式的操作指示的情况下,步骤S130的判定成为肯定判定,并结束合成摄影模式。
图25中示出了概括本实施方式的移动终端10中的合成摄影处理的图。如图25所示,移动终端10具备提取部32A和显示控制部31。提取部32A从显示于触摸屏显示器12中的显示图像50中提取一部分作为成为合成对象图像54的提取图像。在成为合成对象图像54的提取图像包括不同面积的多个区域的情况下,显示控制部31根据由用户U输入的操作的操作量以与面积对应的顺序删除多个区域中的至少一个。
即,在本实施方式的移动终端10中,在所提取的提取图像包括对于合成对象图像54而言不必要的噪声等区域的情况下,通过根据由用户U输入的操作的操作量以与面积对应的顺序删除多个区域中的至少一个,能够使合成对象图像54不包括不必要的区域。
例如,通常提取图像中包括的噪声区域的面积趋于小于用户U欲作为合成对象图像54的区域的面积。并且,例如,在背景等不必要的区域与用户U欲作为合成对象图像54的区域的对比度较小的情况下,提取图像有时会包括背景等不必要的区域。此时,不必要的区域的面积趋于大于用户U欲作为合成对象图像54的区域的面积。在这种情况下,通过以与面积对应的顺序删除提取图像中包括的多个区域中的至少一个,能够使合成对象图像54不包括不必要的区域。在本实施方式的移动终端10中,能够根据由用户U输入的操作的操作量进行这种删除。
因此,根据本实施方式的移动终端10,提高用于删除从显示图像50中提取的成为合成对象图像54的提取图像中包括的噪声的用户U的操作性,并且能够容易删除噪声。
并且,如图25所示,本实施方式的移动终端10还具备合成部32B,以显示于触摸屏显示器12中的提取图像为合成对象图像54,生成将合成对象图像54与由用户U选择的选择图像56进行合成而成的合成图像。因此,在本实施方式的移动终端10中,能够容易生成与用户U的期望对应的合成图像。
并且,在本实施方式的移动终端10中,将用于用户U输入用于从提取图像中删除不必要的区域的操作的噪声去除工具91显示于触摸屏显示器12中。由此,用户U能够以容易理解且更简单的操作删除提取图像中包括的噪声。
并且,在本实施方式的移动终端10中,通过橡皮擦工具93进一步删除提取图像中用户所指示的区域的一部分或全部。在本实施方式的移动终端10中,提取图像中包括的多个区域内的无法以与面积对应的顺序完全删除的噪声等能够通过橡皮擦工具93来删除。因此,本实施方式的移动终端10能够应对各种噪声,因此能够使提取图像(合成对象图像54)成为包括更适当的区域的图像。
并且,如图25所示,本实施方式的移动终端10将显示控制部31确定作为显示图像50中的一部分区域的确定区域52的确定框60B和用于从确定框60B内的确定区域52的图像中包括的颜色中指定基准颜色的颜色指定用标记62重叠显示于显示图像50。提取部32A从确定框60B内的确定区域52的图像中提取与由颜色指定用标记62指定的基准颜色对应的图像作为成为合成对象图像54的提取图像。
根据本实施方式的移动终端10,在指定应作为合成对象图像54的图像的情况下,用户U只要将颜色指定用标记62重叠于欲作为合成对象图像54的图像的颜色上即可,因此用户U无需从显示图像50中包括的多个图像中直接指定作为合成对象图像54的图像。例如,用户U无需进行用1根手指触摸作为合成对象图像54的图像的区域或滑动1根手指来包围整个区域等的手势。因此,根据本实施方式的移动终端10,即使不在触摸屏显示器12上进行操作,也能够指定应作为合成对象图像54的图像,因此例如即使仅用拿着移动终端10的单只手,也能够指定应作为合成对象图像54的图像。由此,根据本实施方式的移动终端10,进一步提高操作性,能够进行与各种场景对应的合成摄影。
并且,根据本实施方式的移动终端10,即使合成对象图像54为复杂的形状,也能够通过简单的操作从确定区域52中适当地提取合成对象图像54。因此,根据本实施方式的移动终端10,使合成图像的创建变得简单,并且提高与合成相关的用户U的操作性。
并且,在本实施方式的移动终端10中,预先确定了确定框60B与颜色指定用标记62之间的相对位置关系。因此,在本实施方式的移动终端10中,用户U无需指定确定框60B的位置和颜色指定用标记62的位置这两者,因此进一步提高用户U的操作性。
并且,在本实施方式的移动终端10中,能够放大及缩小确定框60B。并且,在本实施方式的移动终端10中,能够移动确定框60B。例如,有时合成对象图像54相对于显示图像50的位置会因摄影位置受到限制等而不可避免地成为偏移的位置。并且,例如不想包括在合成对象图像54中的图像有时会散布在显示图像50中。在本实施方式的移动终端10中,由于能够放大及缩小确定框60B,因此即使在这种情况下,也能够在显示图像50上将用户U欲作为合成对象图像54的所期望的图像适当地包括在确定框60B的范围内(即,确定区域52内)。并且,同样地,在本实施方式的移动终端10中,由于能够移动确定框60B,因此能够在显示图像50上将用户U欲作为合成对象图像54的所期望的图像适当地包括在确定框60B的范围内(即,确定区域52内)。
并且,在本实施方式的移动终端10中,基准颜色显示于具有大于颜色指定用标记62的面积的指示符60A中。用户U能够通过指示符60A来确认由颜色指定用标记62指定的基准颜色,因此例如即使在颜色指定用标记62较小的情况下,也能够容易进行基准颜色的确认。
并且,在本实施方式的移动终端10中,将确定框60B的整个确定区域52的灰度数值化,并提取灰度的数值处于包括基准颜色所对应的灰度的数值在内的基准颜色范围内的图像作为合成对象图像54。在本实施方式的移动终端10中,能够根据将灰度数值化的数值从确定区域52中提取合成对象图像54,因此能够容易在移动终端10中提取合成对象图像54,能够减轻移动终端10中的处理负荷。
[变形例1]
在上述方式中,对预先确定有提取部32A从确定区域52中提取合成对象图像54时的基准颜色范围的方式进行了说明。相对于此,在本变形例中,对由用户U设定基准颜色范围的方式进行说明。另外,在本变形例中,为了便于说明,设为已从合成对象图像54中删除除字符82以外的区域的状态。
图26中示出在上述合成摄影处理的步骤S120中显示控制部31在触摸屏显示器12上即时预览显示有与合成对象图像54合成的选择图像56的状态的一例。另外,在图26所示的例子中,为了容易观察合成对象图像54(字符82),由显示控制部31在选择图像56与合成对象图像54之间夹入了1张半透明的背景图像。
在确定区域52内,在字符82与朋友T、背景B、衬衫80及水珠84各自的图像(参考图10)的对比度之差比较小的情况下,有时提取部32A会提取出朋友T、背景B及衬衫80等图像,而不会成为图26所示那样。例如,在经灰度化的背景B的像素的像素值为0~127中的任一值的情况下,提取部32A判定为背景B的像素的颜色也是与基准颜色相同的黑色。此时,提取部32A提取字符82和背景B作为合成对象图像54。因此,图27所示,显示控制部31在触摸屏显示器12中显示将字符82和背景B作为合成对象图像54而合成的选择图像56。
在这种情况下,在本变形例中,通过由用户U设定成为基准颜色范围的边界的阈值(换言之,判定基准颜色是白色还是黑色的阈值)来设定基准颜色范围,由此能够从合成对象图像54中排出背景B。在本变形例中,图27所示,显示控制部31例如在触摸屏显示器12的显示画面的下方位置显示用于设定成为基准颜色范围的边界的阈值的设定按钮73作为GUI。通过进行用户U用1根手指点击设定按钮73的操作指示,如图28所示,显示控制部31显示阈值设定工具74作为GUI。阈值设定工具74包括表示像素值为0~255的颜色的滑动条74A及滑块74B。
用户U在用1根手指触摸滑块74B的状态下进行沿滑动条74A滑动手指的手势来变更滑块74B的位置。若滑块74B的位置变更,则提取部32A将成为基准颜色范围的边界的阈值变更为表示与所变更的位置对应的滑动条74A的颜色(具体而言,由滑块74B指定的滑动条74A的像素的像素值)。在图28所示的例子中,滑块74B的位置越向右侧移动,成为基准颜色范围的边界的阈值变得越大,越接近白色。另一方面,滑块74B的位置越向左侧移动,阈值变得越小,越接近黑色。
在从合成对象图像54中排出背景B的情况下,如图29所示,用户U将滑块74B移动至背景B的颜色与字符82的颜色之间。如此,通过由用户U移动滑块74B,成为基准颜色范围的边界的阈值成为背景B的像素的像素值与字符82的像素的像素值之间的值。在该状态下,通过移动终端10再次进行上述合成对象图像提取处理(参考图9),如图29所示,能够设为合成对象图像54中仅包括字符82的状态。
如此,在本变形例中,能够由用户U设定成为基准颜色范围的边界的阈值(换言之,成为合成对象图像54与其他图像的对比度的边界的阈值)。
因此,根据本变形例的移动终端10,能够通过简单的操作从确定区域52中仅提取用户U所期望的图像作为合成对象图像54。并且,用户U能够一边观察滑动条74A的颜色一边设定成为基准颜色范围的边界的阈值,因此能够更直观地进行阈值的设定。
另外,阈值设定工具74并不限定于包括滑动条74A及滑块74B的方式。例如,阈值设定工具74也可以为包括颜色空间及指定颜色空间的坐标的指针的方式。此时,与被用户U用指针指定的颜色空间的坐标对应的像素值成为基准颜色范围的边界的阈值。
并且,在上述实施方式例及本变形例中,对将经灰度化的像素二值化并将其中一个作为基准颜色范围的方式进行了说明,但基准颜色范围并不限定于本方式。例如,也可以为设为三值化以上并将包括基准颜色像素值的范围作为基准颜色范围的方式。并且,例如也可以为将从基准颜色像素的像素值中预先确定的范围(在具体例中为基准颜色像素值±20的范围)作为基准颜色范围的方式。
[变形例2]
在上述各方式中,对由颜色指定用标记62指定欲合成的字符82的颜色作为基准颜色的方式进行了说明,但有时会因未适当地进行将字符82的颜色设为基准颜色的指定而无法适当地提取合成对象图像54。相对于这种情况,在本变形例中,对指定字符82的颜色作为基准颜色的方法的变形例进行说明。
例如,如图30所示,在字符82细等小于颜色指定用标记62的情况下,被颜色指定用标记62包围的显示图像50中的字符82的比例会小于其他图像(在图30的例子中为衬衫80)。在被颜色指定用标记62包围的显示图像50中包括多个图像的情况下,若将所包括的比例高的图像的颜色作为基准颜色,则衬衫80的像素的颜色成为基准颜色。如上所述,提取部32A将衬衫80的像素的颜色判定为白色,因此基准颜色成为白色。因此,如图31所示,提取部32A分别提取判定为白色的朋友T、背景B及衬衫80作为合成对象图像54。
在这种情况下,在本变形例中,用户U通过反转基准颜色,能够将欲提取的图像的颜色(在本变形例中为字符82的颜色)作为基准颜色。在本变形例中,如图30所示,显示控制部31例如在触摸屏显示器12的显示画面的下方位置显示用于反转基准颜色的反转按钮76作为GUI。若用户U通过用1根手指点击反转按钮76来进行反转指示,则主控制部26受理反转指示,并向提取部32A输出反转指示的信息。若从主控制部26输入反转指示的信息,则提取部32A使在上述合成对象图像提取处理(参考图9)的步骤S154中判定的基准颜色的颜色反转,并根据反转后的基准颜色进行合成对象图像54的提取。
提取部32A根据反转后的基准颜色进行合成对象图像54的提取。在本变形例中,黑色成为基准颜色,从而将字符82的颜色作为基准颜色而由提取部32A进行合成对象图像54的提取。因此,如图31所示,提取部32A能够提取字符82作为合成对象图像54。
因此,根据本变形例的移动终端10,能够通过简单的操作从确定区域52中适当地提取合成对象图像54。
另外,提取部32A使基准颜色反转的定时并无限定。例如,也可以设为如下方式:在用户U感觉到字符82细而无法准确地将颜色指定用标记62对准到字符82上的情况下,或者,在用户U感觉到据观察显示于指示符60A中的颜色与字符82的颜色不同的情况下,在进行合成对象图像54的提取指示之前进行反转指示。并且,也可以设为如下方式:在即时预览显示与合成对象图像54合成的选择图像56之后,由觉察到合成对象图像54未成为所期望的图像的用户U进行反转指示。
并且,在本变形例中,对在无法适当地提取合成对象图像54的情况下通过使基准颜色反转来适当地提取合成对象图像54的方式进行了说明,但用于适当地提取合成对象图像54的方法并不限定于本变形例。例如,也可以设为使作为合成对象图像54提取的图像与未提取的图像之间的关系反转的方式。在本变形例的情况下,如上所述,若将白色作为基准颜色,则提取部32A分别提取朋友T、背景B及衬衫80,而不提取字符82。提取部32A通过使是否提取的关系反转(变更),能够提取字符82,而不分别提取朋友T、背景B及衬衫80。
[变形例3]
在本变形例中,对带指示符的确定框60的确定框60B的变形例进行说明。确定框60B的“框”只要能够明确地呈现出确定区域52的范围即可。
例如,如图32A~图32C所示,确定框60B中,包围确定区域52的线的一部分可以不连贯。图32A及图32B所示的确定框60B具有所谓的方括号形状。即使为图32A及图32B所示的方式,也可由确定框60B明确地呈现出确定区域52的范围为在图中标出基于斜线的阴影线的范围。并且,图32C的确定框60B具有所谓的直角引号形状。即使为图32C所示的方式,也可由确定框60B明确地呈现出确定区域52的范围为在图中标出基于斜线的阴影线的范围。
并且,例如,如图32D所示,确定框60B也可以为表示框出位置的标记形状。即使为图32D所示的方式,也可由确定框60B明确地呈现出确定区域52的范围为在图中标出基于斜线的阴影线的范围。
并且,确定框60B并不限定于矩形,也可以为其他形状。例如,如图32E及图32F所示,确定框60B也可以为圆形框。
[变形例4]
在本变形例中,对带指示符的确定框60的指示符60A的变形例进行说明。
在上述中,对在确定框60B的框上配置有指示符60A且将指示符60A和确定框60B一体地视为带指示符的确定框60的方式进行了说明。然而,也可以将指示符60A和确定框60B视为是独立的。
在将指示符60A和确定框60B视为是独立的情况下,例如,如图33A所示,显示控制部31可以将指示符60A显示于远离确定框60B的位置(在显示图像50中的确定框60B的上方的位置显示指示符60A等)。
并且,指示符60A的形状也无特别限定。在上述各方式中,对指示符60A的形状为圆形的情况进行了说明,但例如,如图33B所示,指示符60A的形状也可以为矩形。并且,可以将指示符60A的形状设为与颜色指定用标记62的形状相同的形状,也可以将指示符60A的形状设为与确定框60B的形状相同的形状。
[变形例5]
在本变形例中,对颜色指定用标记62的变形例进行说明。在上述中,对颜色指定用标记62为具有包围显示图像50的圆环状的形状的标记的方式进行了说明。然而,颜色指定用标记62的形状并不限定于圆环状。
例如,如图34A所示,颜色指定用标记62的形状也可以为圆状,也可以为所谓的实心圆形图像。此时,将颜色指定用标记62所重叠的部分的显示图像50的颜色指定为基准颜色。
并且,例如,如图34B所示,颜色指定用标记62的形状也可以为矩形。并且,例如也可以将颜色指定用标记62的形状设为与确定框60B的形状相同的形状。
[变形例6]
并且,在上述中,对显示图像50及选择图像56为能够即时预览显示的实时取景图像的方式进行了说明,但显示图像50及选择图像56中的至少一个也可以不是实时取景图像。即,显示图像50及选择图像56中的至少一个也可以为从在过去拍摄并保存于存储卡29或存储装置18的用户区域28等中的摄影图像(以下,称为保存图像)中读出的图像。
首先,对显示图像50不是实时取景图像而是保存图像的情况进行说明。图35A中示出了显示图像50为保存图像时的合成摄影处理的流程图。图35A所示的合成摄影处理包括步骤S101A~S101C的处理来代替上述图6所示的合成摄影处理的步骤S100。
在步骤S101A中,显示控制部31创建所保存的保存图像的一览表并将其显示于触摸屏显示器12。保存图像的一览表例如可举出并列显示保存图像的缩略图像等的方式。
用户U参考保存图像的一览表进行用于选择欲作为合成对象图像54的图像中包括的保存图像的操作指示。作为一例,在本变形例中,用户U进行的用于选择保存图像的操作指示通过用户用1根手指触摸显示于触摸屏显示器12中的保存图像的缩略图像等来进行。若受理用于选择保存图像的操作指示,则主控制部26向显示控制部31输出该操作指示的信息。
在下一步骤S101B中,显示控制部31判定是否已由用户选择保存图像。步骤S101B的判定成为否定判定,直至从主控制部26输入用于选择保存图像的操作指示的信息为止。另一方面,在从主控制部26输入用于选择保存图像的操作指示的信息的情况下,步骤S101B的判定成为肯定判定,并转移到步骤S101C。
在步骤S101C中,显示控制部31从所保存的保存图像中将与操作指示的信息对应的1张保存图像显示于触摸屏显示器12中作为显示图像50。
下一步骤S102以后的处理与上述方式相同。另外,在本例的情况下,在主控制部26的控制下,从存储卡29或用户区域28中读出保存图像作为显示图像50。所读出的显示图像50记录于图像存储器17A中。从存储卡29或用户区域28中读出的显示图像50是经压缩的。图像处理部32从图像存储器17A中读出显示图像50,并对显示图像50实施扩展处理。提取部32A从经扩展处理的显示图像50中提取合成对象图像54。
接着,对选择图像56不是实时取景图像而是保存图像的情况进行说明。图35B中示出了选择图像56为保存图像时的合成摄影处理的流程图。图35B所示的合成摄影处理包括步骤S117A及S117B的处理来代替上述图6所示的合成摄影处理的步骤S116。
在步骤S117A中,与上述步骤S101A相同地,显示控制部31创建所保存的保存图像的一览表并将其显示于触摸屏显示器12中。
用户U参考保存图像的一览表以与用于从上述保存图像的一览表中选择欲作为合成对象图像54的保存图像的操作指示相同的方式进行用于选择欲作为选择图像56的保存图像的操作指示。若受理用于选择保存图像的操作指示,则主控制部26向显示控制部31输出该操作指示的信息。
在下一步骤S117B中,与上述步骤S101B相同地,显示控制部31判定是否已由用户选择保存图像。步骤S117B的判定成为否定判定,直至从主控制部26输入用于选择保存图像的操作指示的信息为止。另一方面,在从主控制部26输入用于选择保存图像的操作指示的信息的情况下,步骤S117B的判定成为肯定判定,并转移到步骤S118。
下一步骤S118以后的处理与上述方式相同。另外,在本例的情况下,在主控制部26的控制下,从保存于存储卡29或用户区域28中的保存图像中读出与操作指示的信息对应的1张保存图像作为选择图像56。所读出的选择图像56记录于图像存储器17A中。从存储卡29或用户区域28中读出的选择图像56是经压缩的。图像处理部32从图像存储器17A读出选择图像56,并对选择图像56实施扩展处理。合成部32B将合成对象图像54与经扩展处理的选择图像56进行合成。
另外,关于显示图像50及选择图像56不是实时取景图像而是保存图像的情况,只要组合上述图35A所示的合成摄影处理和图35B所示的合成摄影处理即可。
如此,若能够将过去的摄影图像用作显示图像50,则例如在用户U根据用户U在旅行目的地找到的被摄体联想到映入过去拍摄的摄影图像中的标记或字符串的情况下,能够实现获得该被摄体和从被摄体联想到的标记或字符串的合成照片之类的享受方式。并且,例如,相反地,在用户U根据用户U在旅行目的地找到的标记或字符串的被摄体联想到过去拍摄的摄影图像的情况下,能够实现获得作为当前的被摄体的标记或字符串和从被摄体联想到的摄像图像的合成照片之类的享受方式。
并且,也可以将进行合成摄影并记录于存储卡29或用户区域28中的合成图像用作显示图像50及选择图像56中的至少一个。如此,能够进行多次合成,因此进一步增加享受方式。
并且,作为显示图像50及选择图像56中的至少一个,不仅可以设为保存于存储卡29或用户区域28中的保存图像,而且还可以设为能够将经由互联网等从服务器中下载的图像用作显示图像50及选择图像56中的至少一个。在从服务器中下载图像的情况下,也暂且记录于存储卡29或用户区域28中,因此之后的处理与从存储卡29或用户区域28中将保存图像用作显示图像50及选择图像56中的至少一个的情况相同。
[变形例7]
在上述方式中,对显示控制部31以面积由小到大的顺序依次删除成为合成对象图像54的提取图像中包括的多个区域的方式进行了说明,但删除区域的顺序并不如上所述限定于本方式。例如,也可以设为以面积由大到小的顺序依次删除的方式。
并且,例如也可以设为以面积由小到大的顺序依次删除且以面积由大到小的顺序删除的方式。此时,如图36A所示,显示控制部31显示于触摸屏显示器12中的噪声去除工具91包括滑动条91A、滑块91B及滑块91C。用户U沿滑动条91A操作(移动)滑块91B时的动作如上所述。另一方面,在用户U沿滑动条91A移动滑块91C的情况下,显示控制部31根据从左侧向右侧移动的移动量以面积由大到小的顺序依次删除合成对象图像54中包括的多个区域(在图36A中为由字符82、波浪线83及水珠84表示的区域)。另外,不同点仅是面积由大到小还是面积由小到大,具体的删除方法只要适用在上述方式中说明的方法即可。
例如,若用户U沿滑动条91A从左侧向右侧移动滑块91C,则最先从合成对象图像54中删除字符82、波浪线83及水珠84的区域中的面积最大的波浪线83的区域,显示于触摸屏显示器12中的合成对象图像54成为图36B所示的状态。
[变形例8]
在本变形例中,对在欲作为合成对象图像54的提取图像的区域中包括比较小(例如小于噪声等)的区域时的变形例进行说明。
例如,如图37所示,对合成对象图像54为字符82的情况进行说明。在图37所示的例子中,显示控制部31将包括在字符82“フジカラ一”中的字符82F“ジ”识别为82F1~82F3、82F5及82F6这5个区域。此时,作为浊音符的区域82F5及82F6的面积比较小,因此在移动滑块91B的情况下,有可能会在比较早的阶段从合成对象图像54中删除。
在这种情况下,如上所述,本变形例的显示控制部31可以设为如下方式:在识别出合成对象图像54中包括的区域之后,对合成对象图像54进行将图像数据转换为字符码的集合的OCR(Optical Character Recognition,光学字符识别)处理等字符识别处理,并汇集识别为1个字符的区域作为1个区域。
如此,通过汇集多个区域作为1个区域,即使在用户U欲包括到合成对象图像54中的区域的面积小的情况下,也能够使其难以被删除。
如上所述,在上述各方式的移动终端10中,在所提取的提取图像包括对于合成对象图像54而言不必要的噪声等区域的情况下,通过根据由用户U输入的操作的操作量以与面积对应的顺序删除多个区域中的至少一个,能够使合成对象图像54不包括不必要的区域。因此,根据本实施方式的移动终端10,提高用于删除从显示图像50中提取的成为合成对象图像54的提取图像中包括的噪声的用户U的操作性,并且能够容易删除噪声。
另外,本发明的技术能够在上述各方式不脱离本发明的宗旨的范围内进行各种变形。例如,在从显示图像50中提取合成对象图像54时,有时显示有合成对象图像54的被摄体为圆筒形状等弯曲的物体。在这种情况下,提取部32A可以设为对从确定区域52中提取的合成对象图像54实施将曲面平面化的平面化处理的方式。这种平面化处理可以根据用户U进行的操作指示进行,也可以在判定被摄体的形状之后由提取部32A自动进行。
在上述各方式中,作为摄影装置的一例,以智能手机等移动终端10为例进行了说明,但也可以为除智能手机以外的移动终端,例如可以为平板终端,也可以为作为专用相机的普通的数码相机。
并且,组装有本发明的图像处理装置的装置并不限定于移动终端10,例如可以为组装于通用的个人计算机等中的方式,并且也可以为组装于不具有摄影功能的装置中的方式。另外,在组装于不具有摄影功能的装置中的情况下,其为不具有即时预览显示功能的装置,因此显示图像50及选择图像56这两者成为不是实时取景图像的图像(即,静止图像)。
并且,示出照片合成应用程序作为一例的图像处理程序可以在出售移动终端10时安装于预先存储装置18中,也可以在用户购买移动终端10之后,使用移动终端10访问服务器,并从服务器中下载启动程序来安装。
并且,由本发明的移动终端10执行的合成摄影模式的处理仅为一例。因此,当然也可以在不脱离宗旨的范围内删除不需要的步骤,或者追加新的步骤,或者更改处理顺序。
并且,在上述实施方式中,图6中作为一例示出的合成摄影模式的多个步骤的组合相当于本发明的图像处理方法的一例。
并且,在上述实施方式中,例如,作为主控制部、提取部、合成部及显示控制部之类的执行各种处理的处理部(Processing Unit)的硬件结构,能够使用以下示出的各种处理器(Processor)。作为各种处理器,除作为执行软件(程序)来发挥各种处理部的功能的通用的处理器的CPU以外,还包括FPGA(Field-Programmable Gate Array,现场可编程门阵列)等能够在制造之后变更为电路结构的PLD(Programmable Logic Device,可编程逻辑器件)及作为具有ASIC(Application Specific Integrated Circuit,专用集成电路)等为了执行特定处理而专门设计的电路结构的处理器的专用电路等。
并且,可以由这些各种处理器中的1个来执行上述各种处理,也可以通过相同种类或不同种类的2种以上的处理器的组合(例如,多个FPGA及CPU和FPGA的组合等)来执行上述各种处理。并且,也可以由1个处理器构成多个处理部。作为由1个处理器构成多个处理部的例子,有如下方式:使用如片上系统(System On Chip:SOC)等那样由1个IC(IntegratedCircuit,集成电路)芯片来实现包括多个处理部的系统整体的功能的处理器。
如此,各种处理部使用1个以上的上述各种处理器来构成为硬件结构。
而且,更具体而言,作为这些各种处理器的硬件结构,能够使用组合半导体元件等电路元件而成的电路(Circuitry)。
并且,除摄影装置的启动程序以外,本发明的技术还涉及到能够由非临时性存储摄影装置的启动程序的计算机读取的存储介质(USB存储器或DVD(Digital VersatileDisc,数字多功能光盘)-ROM(Read Only Memory,只读存储器)等)。
符号说明
10-移动终端(摄影装置),11-摄影部,11A-摄影镜头,11B-图像传感器,11C-AD转换器(A/D),11D-图像输入控制器,11E-图像信号处理电路,11F-定时信号发生器(TG),11G-驱动器,12-触摸屏显示器,14-CPU,16-操作开关,17-工作存储器,17A-图像存储器,18-存储装置,19-介质控制器,21-外部I/F,22-通信部,23-总线,26-主控制部,27-应用程序(AP),28-用户区域,29-存储卡,31-显示控制部,32-图像处理部,32A-提取部,32B-合成部,50-显示图像,52-确定区域,54-合成对象图像,56-选择图像,60-带指示符的确定框,60、60A-指示符,60B-确定框,60C-放大/缩小指示标记,62-颜色指定用标记,70-快门按钮,73-设定按钮,74-阈值设定工具,74A-滑动条,74B-滑块,76-反转按钮,80-衬衫,82、82A~82F、82F1~82F3、82F5及82F6-字符,83-波浪线,84-水珠,90-噪声去除按钮,91-噪声去除工具,91A-滑动条,91B、91C-滑块,92-橡皮擦按钮,93-橡皮擦工具,93A-橡皮擦一览表,93B-橡皮擦,94-颜色变更按钮,95-调色板,95W-白色,96-形状编辑按钮,B-背景,T-朋友,U-用户。
Claims (15)
1.一种图像处理装置,其具备:
提取部,从显示于显示部中的显示图像中提取一部分作为提取图像;及
显示控制部,在所述提取图像包括不同面积的多个区域的情况下,在每当由用户操作的滑块的移动量达到阈值时,以与面积对应的顺序删除多个所述区域中的至少一个。
2.根据权利要求1所述的图像处理装置,其中,
所述图像处理装置还具备:
合成部,将显示于所述显示部中的所述提取图像作为合成对象图像,并生成将所述合成对象图像与由用户选择的选择图像进行合成的合成图像,
所述显示控制部将所述合成图像显示于所述显示部中。
3.根据权利要求1所述的图像处理装置,其中,
所述显示控制部还将用于所述用户输入所述操作的操作部显示于所述显示部中。
4.根据权利要求1所述的图像处理装置,其中,
所述显示控制部还删除所述提取图像中的由所述用户指示的区域的一部分或全部。
5.根据权利要求1所述的图像处理装置,其中,
所述显示控制部将确定所述显示图像中的一部分区域的确定框和用于从所述确定框内的图像中包括的颜色中指定基准颜色的颜色指定用标记重叠显示于所述显示图像中,
所述提取部从所述确定框内的图像中提取与由所述颜色指定用标记指定的所述基准颜色对应的图像作为所述提取图像。
6.根据权利要求5所述的图像处理装置,其中,
所述颜色指定用标记显示于所述确定框内,并且预先确定了所述确定框与所述颜色指定用标记之间的相对位置关系。
7.根据权利要求5所述的图像处理装置,其中,
所述图像处理装置还具备:
第1受理部,受理放大或缩小所述确定框的尺寸变更指示,
所述显示控制部进行根据所述第1受理部受理的所述尺寸变更指示变更所述确定框的尺寸的控制。
8.根据权利要求5所述的图像处理装置,其中,
所述图像处理装置还具备:
第2受理部,受理移动所述确定框的位置的移动指示,
所述显示控制部进行根据所述第2受理部受理的所述移动指示移动所述确定框的位置的控制。
9.根据权利要求5所述的图像处理装置,其中,
所述显示控制部还显示具有大于所述颜色指定用标记的面积且表示所述基准颜色的指示符。
10.根据权利要求5所述的图像处理装置,其中,
所述提取部将所述确定框内的整个图像的灰度数值化,并提取灰度的数值处于包括所述基准颜色所对应的灰度的数值在内的基准颜色范围内的图像作为所述提取图像。
11.根据权利要求10所述的图像处理装置,其中,
所述图像处理装置还具备:
设定部,供用户设定所述基准颜色范围。
12.一种摄影装置,其具备:
摄影部,拍摄被摄体;
显示部,显示由所述摄影部拍摄的图像;及
权利要求1至11中任一项所述的图像处理装置。
13.权利要求12所述的摄影装置,其中,
将显示图像即时预览显示在所述显示部中。
14.一种图像处理方法,其由计算机执行如下处理:
从显示于显示部中的显示图像中提取一部分作为提取图像;及
在所述提取图像包括不同面积的多个区域的情况下,在每当由用户操作的滑块的移动量达到阈值时,以与面积对应的顺序删除多个所述区域中的至少一个。
15.一种计算机能读取的存储介质,存储用于使计算机执行如下处理的图像处理程序:
从显示于显示部中的显示图像中提取一部分作为提取图像;及
在所述提取图像包括不同面积的多个区域的情况下,在每当由用户操作的滑块的移动量达到阈值时,以与面积对应的顺序删除多个所述区域中的至少一个。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019-167364 | 2019-09-13 | ||
JP2019167364A JP7256719B2 (ja) | 2019-09-13 | 2019-09-13 | 画像処理装置、撮影装置、画像処理方法、及び画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112511735A CN112511735A (zh) | 2021-03-16 |
CN112511735B true CN112511735B (zh) | 2024-06-21 |
Family
ID=74864038
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010944066.1A Active CN112511735B (zh) | 2019-09-13 | 2020-09-09 | 图像处理装置、摄影装置、图像处理方法及存储介质 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11495010B2 (zh) |
JP (1) | JP7256719B2 (zh) |
CN (1) | CN112511735B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102164234A (zh) * | 2010-02-09 | 2011-08-24 | 株式会社泛泰 | 具有拍摄功能的设备 |
CN104247390A (zh) * | 2012-03-06 | 2014-12-24 | 苹果公司 | 用于修剪和拉直图像的用户界面工具 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001209802A (ja) * | 1999-11-15 | 2001-08-03 | Fuji Photo Film Co Ltd | 顔抽出方法および装置並びに記録媒体 |
JP4346859B2 (ja) * | 2002-03-27 | 2009-10-21 | 富士フイルム株式会社 | 画像撮像装置、画像撮像装置における画像表示方法およびプログラム |
JP4399462B2 (ja) | 2004-09-22 | 2010-01-13 | ポリゴンマジック株式会社 | 画像処理装置、方法、およびプログラム |
JP4742996B2 (ja) * | 2006-06-02 | 2011-08-10 | フリュー株式会社 | 画像編集装置、画像編集方法、画像編集プログラム、およびこれを記録した記録媒体、ならびに写真撮影プリント装置 |
JP5493839B2 (ja) | 2009-12-25 | 2014-05-14 | カシオ計算機株式会社 | 撮像装置、画像合成方法及びプログラム |
US8577173B2 (en) | 2011-06-20 | 2013-11-05 | Kodak Alaris Inc. | Multi-element image templates |
JP5917080B2 (ja) * | 2011-10-18 | 2016-05-11 | 株式会社キーエンス | 画像処理装置、拡大観察装置および画像処理プログラム |
WO2014034949A1 (ja) * | 2012-09-03 | 2014-03-06 | 株式会社東芝 | 医用画像処理装置及び放射線治療装置 |
KR102145548B1 (ko) * | 2014-01-03 | 2020-08-18 | 삼성전자주식회사 | 이미지 촬상 방법, 이미지 촬상 장치 및 비일시적 기록매체 |
JP6241689B2 (ja) * | 2016-12-19 | 2017-12-06 | フリュー株式会社 | 画像処理装置、画像処理方法、並びにプログラム |
CN107395991B (zh) * | 2017-08-31 | 2020-01-10 | Oppo广东移动通信有限公司 | 图像合成方法、装置、计算机可读存储介质和计算机设备 |
-
2019
- 2019-09-13 JP JP2019167364A patent/JP7256719B2/ja active Active
-
2020
- 2020-08-27 US US17/005,041 patent/US11495010B2/en active Active
- 2020-09-09 CN CN202010944066.1A patent/CN112511735B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102164234A (zh) * | 2010-02-09 | 2011-08-24 | 株式会社泛泰 | 具有拍摄功能的设备 |
CN104247390A (zh) * | 2012-03-06 | 2014-12-24 | 苹果公司 | 用于修剪和拉直图像的用户界面工具 |
Also Published As
Publication number | Publication date |
---|---|
CN112511735A (zh) | 2021-03-16 |
US11495010B2 (en) | 2022-11-08 |
US20210081700A1 (en) | 2021-03-18 |
JP2021043409A (ja) | 2021-03-18 |
JP7256719B2 (ja) | 2023-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI550549B (zh) | 圖像處理裝置及圖像處理方法 | |
US9001051B2 (en) | Information processing apparatus, display method, and display program | |
JP5456159B2 (ja) | 背景から前景の頭頂部を分離するための方法および装置 | |
US11049303B2 (en) | Imaging apparatus, and operation program and operation method for imaging apparatus | |
CN110610531A (zh) | 图像处理方法、图像处理装置和记录介质 | |
JP4694957B2 (ja) | 情報提示装置及び情報提示方法とそのプログラム | |
JP2013235203A (ja) | 表示制御装置、表示制御方法およびプログラム | |
US20230342990A1 (en) | Image processing apparatus, imaging apparatus, image processing method, and image processing program | |
CN112511735B (zh) | 图像处理装置、摄影装置、图像处理方法及存储介质 | |
US20150206282A1 (en) | Image processing device, image processing method, and image processing program | |
JP3674633B2 (ja) | 画像検索装置、電子スチルカメラ、および画像検索方法 | |
WO2021124873A1 (ja) | 撮像装置、撮像装置の作動方法、プログラム、及び撮像システム | |
JP2008123090A (ja) | カメラポインタ装置、ラベリング方法及びプログラム | |
JP2005055973A (ja) | 携帯情報端末 | |
JP2007241370A (ja) | 携帯装置及び撮像装置 | |
JP5181935B2 (ja) | 画像処理装置、プログラム及び被写体検出方法 | |
JP4328282B2 (ja) | 数値入力方法及び装置並びに数値入力プログラム | |
KR100753216B1 (ko) | 가상 키패드를 구비한 휴대용 단말기 및 문자 입력 방법 | |
JP4185479B2 (ja) | 小型情報端末、小型情報端末の画像処理方法、およびこの方法のプログラム | |
JP2021051256A (ja) | 表示装置、表示方法、プログラム | |
JP2013131801A (ja) | 情報端末装置、撮像画像処理システム、方法、プログラムおよび記録媒体 | |
JP2004048131A (ja) | 線画データ処理及び送信方法、線画データ処理及び送信システム、及び、線画データ処理及び送信用プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |