CN103716534B - 摄像装置及合成图像的方法 - Google Patents
摄像装置及合成图像的方法 Download PDFInfo
- Publication number
- CN103716534B CN103716534B CN201310468277.2A CN201310468277A CN103716534B CN 103716534 B CN103716534 B CN 103716534B CN 201310468277 A CN201310468277 A CN 201310468277A CN 103716534 B CN103716534 B CN 103716534B
- Authority
- CN
- China
- Prior art keywords
- image
- mask
- data file
- final
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 43
- 230000004048 modification Effects 0.000 claims abstract description 61
- 238000012986 modification Methods 0.000 claims abstract description 61
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 17
- 230000015572 biosynthetic process Effects 0.000 claims description 32
- 238000003786 synthesis reaction Methods 0.000 claims description 32
- 239000000203 mixture Substances 0.000 claims description 17
- 241000208340 Araliaceae Species 0.000 claims 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims 1
- 235000003140 Panax quinquefolius Nutrition 0.000 claims 1
- 235000008434 ginseng Nutrition 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 10
- 238000003384 imaging method Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 239000002131 composite material Substances 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 210000003813 thumb Anatomy 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000001308 synthesis method Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/21—Intermediate information storage
- H04N1/2104—Intermediate information storage for one or a few pictures
- H04N1/2112—Intermediate information storage for one or a few pictures using still video cameras
- H04N1/2116—Picture signal recording combined with imagewise recording, e.g. photographic recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
- Editing Of Facsimile Originals (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明提供了一种用于合成多幅连续捕捉的图像的摄像装置。所述摄像装置包括:摄像单元,通过连续拍摄对象来捕捉多幅图像;输入单元,接收从捕捉的多幅图像中对于参考图像的选择和参考图像中的修改部分;显示单元,显示所述参考图像;控制器,当参考图像中的修改部分被选中并且用于替换所述修改部分的图像被确定时,基于修改部分来生成掩膜图像,并且通过使用掩膜图像合成参考图像和用于替换修改部分的图像来生成最终图像;以及,存储单元,存储包括掩膜图像、捕捉的多幅图像、和最终图像的信息的数据文件。
Description
相关申请的交叉引用
本申请要求于2012年10月9日向韩国知识产权局提交的韩国专利申请No.10-2012-0112022的优先权益,通过引用,将其全部内容合并于此。
技术领域
本发明的各个实施例大体上涉及一种摄像装置及图像合成方法。更具体的,各个实施例涉及一种用于将连续捕捉的图像和掩膜图像的信息存储在数据文件中,并且使用存储的信息来合成图像的摄像装置及图像合成方法。
背景技术
由于电子技术的进步,在逐渐增加的休闲生活中,各种摄影设备得以使用并且经常用于拍摄静止图像或运动图像。
然而,对于用户来说,当拍摄运动对象或者多个静止对象时,使用单次拍摄不容易捕捉到令他/她满意的图像。
在这方面,最近的摄影设备提供了连续拍摄功能,其允许用户在一段短时间内通过拍摄多幅图片来捕捉他/她预期的图像。所述摄影设备还提供图像合成功能,用于寻找连续捕捉的图片中的预期部分并且将其附加到另一幅图像。
然而,由于常规的图像合成方法只存储合成的最后输出的图像,用户无法通过取得现存的图像并继续进行图像合成,或者返回前一个合成阶段来编辑输出的图像。
发明内容
本发明的各个实施例可以解决与常规布置相关的上述和其他问题,以及缺点,并且实施例提供了用于将连续捕捉的图像和掩膜图像的信息存储到数据文件中,并且使用存储的信息来合成图像的摄像装置和图像合成方法。
根据实施例,摄像装置包括:摄像单元,通过连续地拍摄对象来捕捉多幅图像;输入单元,接收从捕捉的多幅图像中对于参考图像的选择和参考图像中的修改部分;显示单元,显示参考图像;控制器,当参考图像中的修改部分被选择以及用于替换修改部分的图像被确定时,基于修改部分生成掩膜图像,并且通过使用掩膜图像合成参考图像和用于替换修改部分的图像来生成最终图像;以及,存储单元,存储包括掩膜图像、拍摄的图像、和最终图像的信息的数据文件。所述存储单元可以将捕捉的图像、最终图像、和数据文件存储在单独的文件夹中。当接收到最终图像的修改请求时,控制器读取数据文件来重新合成参考图像和用于替换修改部分的图像。
当控制器生成掩膜图像时,所述控制器可以至少执行一次图像合成,在其中,控制器根据通过输入单元的输入命令而顺序地将掩膜图像应用到捕捉的多幅图像中的其他图像,在其他图像中分离出与修改部分相对应的图像部分,合成所述分离的图像部分和参考图像的修改部分,并且显示合成的图像。当接收到存储命令时,控制器可以确定最后显示的图像为最终图像,并且将最终图像存储到存储单元中。
当在图像合成过程中或者正在编辑最终图像时接收到取消命令时,控制器可以使用存储在数据文件中的掩膜图像的信息来恢复并且显示之前的图像,所述图像是在执行图像合成之前所显示的图像。当接收到修改请求时,控制器可以将添加到数据文件中的最终图像设置为参考图像,并且提供用于在最终图像中选择修改部分的界面。
数据文件可以被划分为标头和主体,主体可以存储捕捉的多幅图像和掩膜图像,标头可以存储捕捉的多幅图像和掩膜图像的信息,并且,当最终图像被生成并且被添加到数据文件中时,控制器可以改变存储在标头中的信息。掩膜图像信息可以是在主体中存储的掩膜图像的标头中所存储的掩膜图像特征信息,并且掩膜图像特征信息可以包括掩膜图像的掩蔽部分的位置和大小信息。存储单元可以是非易失性存储器。
根据另一个实施例,图像合成方法包括:通过连续拍摄对象来捕捉多幅图像;接收从捕捉的多幅图像中对于参考图像的选择;显示参考图像;当参考图像中的修改部分被选择并且用于替换修改部分的图像被确定时,使用基于修改部分的掩膜图像来合成参考图像和用于替换修改部分的图像;存储包括掩膜图像和捕捉的多幅图像的信息的数据文件;以及,当接收到最终图像的修改请求时,读取数据文件来重新合成参考图像和用于替换修改部分的图像。
最终图像的生成可以包括:当在参考图像中的修改部分被选择时,基于修改部分生成掩膜图像;根据输入命令,通过顺序地将掩膜图像应用到捕捉的多幅图像中的其他图像来至少执行一次图像合成,在其他图像中分离出与修改部分相对应的图像部分,合成分离的图像部分和参考图像的修改部分,并且显示合成的图像;以及,当接收到存储命令时,确定最后显示的图像为最终图像。
图像合成方法可以进一步包括:当在图像合成过程中或者正在编辑最终图像时接收到取消命令时,使用存储在数据文件中的掩膜图像的信息来恢复并显示之前的图像,所述图像是在执行图像合成之前显示的图像。图像合成方法可以进一步包括:当接收到修改请求时,将添加到数据文件中的最终图像设置为参考图像,并且提供用于在最终图像中选择修改部分的界面。
数据文件可以被划分为标头和主体,主体可以存储捕捉的多幅图像和掩膜图像,标头可以存储捕捉的多幅图像和掩膜图像的信息,以及,当最终图像被生成并且被添加到数据文件中时,存储在标头中的信息可以被修改。掩膜图像信息可以包括在主体中掩膜图像的标头中所存储的掩膜图像特征信息,并且掩膜图像特征信息可以包括掩膜图像的掩蔽部分的位置和大小信息。数据文件可以被存储在非易失性存储器中。
如上文所述,根据本发明的各个实施例,图像合成过程可以使用存储在数据文件中的最终图像和掩膜图像的信息来继续,并且例如,通过取消图像合成可以对最终图像进行编辑。
附图说明
结合附图,通过下面对于实施例的描述,使得这些和/或其它方面和优点将变得明显及更容易理解。附图中:
图1是根据实施例的摄像装置的框图;
图2是根据实施例的数据文件的详细示意图;
图3是根据实施例的数据文件的存储位置的示意图;
图4是根据实施例的掩膜图像的示意图;
图5、6和7是根据实施例的图像合成方法的示意图;
图8是根据实施例的用于产生新图像和使用新图像作为用于图像合成的基础图像的方法的示意图;
图9是根据实施例的用于合成连续捕捉的图像的方法的流程图。
具体实施方式
现在对实施例做出详细的参考,其示例示出在附图中,其中,相似的标号始终指代相似的元件。下面将参照附图描述实施例。
图1是根据实施例的摄像装置100的框图。所述摄像装置100可以使用拍摄静态图像的数字静态照相机,拍摄动态画面的视频摄像机,和具有与数字静态照相机或者视频摄像机相同拍摄功能的、诸如移动电话、游戏机、PDA和PC的各种电子设备来实现。
参照图1,摄像装置100包括:控制器110、摄像单元120、存储单元130、输入单元140、和显示单元150。
摄像单元120通过捕捉对象的图像来获得图像。详细地,摄像单元120可以包括:透镜(未示出),用于通过会聚对象的光线在摄像区域内形成光学图像;成像装置,用于将来自透镜的入射光转换为电信号;以及,AD转换器(未示出),用于将成像装置的模拟信号转换为数字信号。所述成像装置可以使用电荷耦合器件(CCD)成像装置或者互补金属氧化物半导体(COMS)成像装置。
存储单元130存储由摄像单元120获得的图像。所述存储单元130可以是内部存储器,例如摄像装置100中的HDD,或者外部存储器,例如记忆棒或者记忆卡。所述存储单元130可以包括易失性存储器(例如,DDR),并且在易失性存储器中暂时性的存储来自摄像单元120的像素值,以用于快速处理。
输入单元140接收各种用户命令。当捕捉图像时,用户可以设置图像文件格式类型,并且输入关于图像分辨率和数字变焦的命令。当编辑捕捉的图像时,用户可以输入用于在捕捉的图像中设置要修改的区域和将另一幅图像的预期部分粘贴到该区域中的命令。
输入单元140可以用摄像装置100的多个按钮,或者输入/输出设备,例如触摸屏来实现。
显示单元150显示关于摄像装置100的各种信息。显示单元150可以在实时视图中显示来自透镜的光学信号,或者显示由摄像单元120捕捉的图像。用户可以编辑,例如,通过显示单元150合成预存的图像。
控制器110根据用户命令控制摄像装置100的运行。详细地,当通过输入单元140输入拍摄命令时,控制器110可以使用摄像单元120获得对象的图像信息,并且将获得的图像信息存储在存储单元130中。但是,对于用户来讲,使用单次拍摄来捕捉他/她预期的图像是不容易的。于是,控制器110提供连续拍摄功能,用于在一段短时间内捕捉多幅图像,并且用户随后可以通过合成图像来获得他/她预期的输出图像。
当用户使用连续拍摄功能捕捉对象的图像时,控制器110将连续捕捉的图像文件和数据文件存储在存储单元130中。
这里,数据文件可以包括连续拍摄的图像的信息和图像合成过程中生成的掩膜图像信息。
使用数据文件中存储的掩膜图像的信息和连续捕捉的图像的信息,用户可以继续进行图像合成或者返回到之前的合成阶段。
使用捕捉的多幅图像的图像合成方法将参照图5、6和7来具体描述。
图2是根据实施例的由控制器110生成并存储在存储单元130中的数据文件200的详细示意图。
所述数据文件200包括标头210和主体220。
所述标头210包括数据文件200的基本信息,例如捕捉的图像数目、图像大小、每秒帧数(FPS)、掩膜图像数目,以及合成图像和合成部分的信息。
所述主体220包括由摄像单元120捕捉的图像和根据用户命令生成的掩膜图像。如所示的,主体220可以包括捕捉的多幅图像和多幅掩膜图像。捕捉的图像可以被存储为JPG文件或者RAW文件。虽然RAW文件增加了存储容量,但是它不经过使用内部算法操作而进行的JPG解码,从而允许更快的处理速度。在某些情况下,图像可以被调整大小,并且根据输出图像的大小来存储。
存储在数据文件中的掩膜图像将参照图4来具体描述。
图3是根据实施例的图像文件和数据文件的存储位置的示意图。
由于根据相关技术的摄影设备只存储连续捕捉的图像和最后合成的输出图像,所以每次生成新的合成图像时,都需要选择被合成的图像和图像中被合成的位置。
根据实施例,连续捕捉的图像被保存在图像文件夹310中,并且数据文件200被保存在独立的数据文件夹320中。
由于将数据文件200存储在作为非易失性存储器的内部存储器或者外部存储器中,所以即使当系统被重启,图像合成过程也可以通过取得合成信息来继续进行,并且图像合成过程也可以被取消(例如,返回图像合成的之前的阶段)。
图4是根据实施例的掩膜图像的示意图。
掩膜图像400是用于在特定图像中将预期的部分从特定图像的其余部分中分离出来,并且将分离出的图像部分与另一图像进行合成的图像。
掩膜图像400被划分为白色区域410和黑色区域420。所述白色区域410是透明的。当特定图像和掩膜图像400合成时,该特定图像中与掩膜的白色区域410相对应的部分被从特定图像的其余的部分中分离出来。
在图像合成过程中生成的掩膜图像400可以被存储在数据文件200中。所述掩膜图像400可以被存储在图像文件的主体220中,或者掩膜信息(例如,掩膜图像的左上坐标和大小信息,以及参考图像信息)可以被保存在标头210中,而没有将图像类型信息保存在标头210中。
当掩膜信息被记录并且被存储在标头210中时,当需要掩膜图像400时,可以使用存储在标头210中的掩膜信息来产生新的掩膜图像。
图5、6和7是根据实施例的图像合成方法的示意图。
在图5中,图像#1520到图像#4550是根据用户命令,由摄像装置连续捕捉的图像510。在该实施例中,在包括多个对象的合影中,用户只用单次拍摄无法获得令他/她满意的输出图像。
于是,用户试图在连续捕捉的图像510中通过合成他/她预期的图像部分来获得最终的输出图像。这里,用户预期的最终图像是输出图像560。为了从连续捕捉的图像510中生成最终输出图像560,使用图像#1520作为基础图像,f2部分522被图像#4550中的相应部分所替换,并且f3部分523被图像#3540中的相应部分替换。图像#1520中的f1部分521没有被替换。
图6描绘的是图像#1520的f2部分522被图像#4550的相应部分替换。
用户从图5中所示的连续捕捉的图像510中选择基础图像610。所述基础图像610是作为合成多幅图像的基础背景的图像。此后,假设基础图像610就是图像#1520。
当基础图像610被选中,用户在基础图像610中设置修改部分611。所述修改部分611可以用人脸检测、预存在存储单元130中的掩膜图案,或者用户的画线来设置。
当修改部分611被确定时,将显示编辑窗口,用于将修改部分611与另一图像中的相应部分进行交换。所述编辑窗口包括:修改按钮612,用于选择用于替换修改部分611的图像;OK按钮613,用于确认替换修改部分611的图像;UNDO(取消)按钮614,用于取消图像合成;以及,SAVE(保存)按钮615,用于结束图像合成并且将最终输出的图像保存在图像文件夹310中。
这里,通过按修改按钮612,用户可以顺序地识别图像#2530和图像#3540中与修改部分611相对应的图像部分。
当一旦在基础图像610中按下修改按钮612时,将显示图像620,在该图像中,基础图像610中的修改部分611被替换为图像#2530中相对应的部分。这里,当更多次的按下修改按钮612时,则将可以显示图像630和显示图像640,在图像630中,修改部分611被替换为图像#3540中相对应的部分;以及显示图像640,并且在图像640中,修改部分611被替换为图像#4550中相对应的部分。
为了寻找和确认在修改部分611中使用的预期图像,用户可以按OK按钮613。当用户在编辑窗口中按OK按钮613(图7中的711)时,可以生成与修改部分611相应的掩膜图像650,并且将其存储在数据文件200的主体220中,以及,合成后图像的信息可以被存储在标头210中。
代替在数据文件200的主体220中存储与修改部分611相应的掩膜图像650,可以在标头210中存储掩膜图像650的掩膜信息,并且根据需要,可以使用相应的掩膜信息来生成掩膜图像650。
在图6所示的图像合成过程中,用户想要在修改部分611中合成在其中对象在微笑的图像#4550。因此,当用户将修改部分611替换为图4#550中的相应部分,并且按OK按钮613时,图#4550相应的掩膜图像650和合成信息可以被保存在数据文件200的标头210中。
同时,可以将掩膜信息保存在标头210中,而不将掩膜图像650保存在主体220中,并且,根据需要,可以使用相应的掩膜信息来生成掩膜图像650。
图7描绘了图像合成过程的生成最终图像并将其存储在图像文件夹中的方法。
如先前关于图5所提到的,当图像#1520的f3部分523被替换为图像#3540的相应部分,就可以最终生成用户预期的合成图像730。图像720是当图像#1520的f3部分523被替换为图像#2530的相应部分时生成的图像,且不是用户预期的合成图像。
当用户在基础图像710中没有更多的部分需要修改而按下SAVE(保存)按钮713时,最终的输出被保存在图像文件夹310中,并且掩膜图像或者掩膜信息可以像前文中所述的被保存在数据文件中。
同时,通过按UNDO(取消)按钮712,过程可以返回到之前的合成阶段,即,返回到f2部分522的合成阶段。当返回到之前的合成阶段时,保存在数据文件200中的掩膜信息或者掩膜图像,以及合成信息可以被使用。
即,保存在数据文件200中的掩膜位置和大小,以及合成图像的信息可以被用于返回到f2部分522的合成阶段。
因此,用户可以使用保存在数据文件200中的信息来返回到之前的合成阶段,而不必重复先前(former)的合成过程。由于数据文件200被保存在非易失性存储器中,即使系统被重新启动,也可以通过从数据文件200中取得信息来继续编辑与合成。
图8是根据实施例的用于生成新图像并且将该新图像作为图像合成过程基础图像的方法的示意图。
最终输出图像820可以被保存在数据文件200的主体220中。在这种情况下,输出图像的信息810可以被添加到标头210中。例如,如果最初的图像数量是n,当通过图像合成过程生成的输出图像820被添加到数据文件200中时,数据文件200的主体220中保存的图像文件数目增加到n+1。
之后可以使用输出图像820作为基础图像来合成新的图像。
图9是根据实施例的用于合成连续捕捉的图像的方法的流程图。
用户使用摄像装置100捕捉连续图像(S910),并且从捕捉的图像中为图像合成过程选择参考图像作为背景图像(S920)。
当用户在参考图像中选择要修改的部分时,生成相应的掩膜图像(S930)并且将其用于合成图像(S940)。
同时,当确定了用于替换背景图像(参考图像)中修改部分的图像时,掩膜图像和合成信息被记录在数据文件200中(S950)。当背景图像包括另一个修改部分时,则重复该过程。当生成了最终图像和数据(S960中的是(Y))时,最终图像被保存在图像文件夹中(S970)。如果没有生成最终图像和数据(S960中的否(N)),则过程返回到步骤S930。
此中所引用的全部参考,包括出版物、专利申请、和专利都通过参考而结合于此,使得每个参考都独立地且特定地被指示为将通过引用而被合并,并且被在此详细地进行阐述。
为了促进对于本发明原理的理解,已经对附图中所示的实施例给出了参考,并且使用了特定的语言来描述这些实施例。然而,本发明的范围不应被这些特定的语言所限制,并且本发明应当被理解为包括对于本领域普通技术人员而言正常会发生的所有的实施例。此中使用的术语是为了描述特定的实施例,而不是要限制本发明的示例实施例。在实施例的描述中,当相关技术的某些详细解释被认为可能导致本发明的本质被误解时,其将被省略。
此中描述的装置可以包括:处理器;存储器,用于存储处理器可执行的程序数据;永久性存储设备,例如磁盘驱动器;通信端口,用于处理和外部设备的通信;以及,用户界面设备,其包括显示器、触摸板、按键、按钮等。当涉及软件模块时,这些软件模块可以被存储为程序指令或者处理器可执行的计算机可读代码,其被存储在非暂时性的计算机可读介质上,例如,磁性存储介质(例如,磁带、硬盘、软盘),光学记录介质(例如,CD-ROM、数字多功能光盘(DVD)等等),以及固态存储器(例如,随机存取存储器(RAM)、只读存储器(ROM)、静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、闪存、拇指驱动器(thumbdrive)等等)。所述计算机可读记录介质也可以是分布在网络连接的计算机系统上,以便计算机可读代码以分布式的方式存储和执行。该计算机可读记录介质可以被计算机读取,存储在存储器中,并且由处理器执行。
此外,使用此中的公开内容,本发明所属行业中具有普通技术的程序员可以很容易地实现功能程序、代码、和代码段,以用来制作和使用本发明。
本发明可以用功能块组件和各种处理步骤来描述。这些功能块可以用被配置为执行指定的功能的任意数量的硬件和/或软件组件来实现。例如,本发明可以采用各种集成电路组件,例如,存储器元件、处理元件、逻辑元件、查找表等,其可以在一个或多个微处理器或者其他控制设备的控制下执行各种功能。类似地,在使用软件编程或者软件元素来实现本发明的元件的地方,本发明可以用任意的编程语言或脚本语言,例如,C、C++、汇编语言等,利用数据结构、对象、过程、例程,或者其他编程元素实现的各种算法来实现。功能方面可以以在一个或者多个处理器上执行的算法来实现。更进一步的,本发明可以采用用于电子配置、信号处理和/或控制、数据处理等的任意数量的常规技术。最后,除非在此另行指明或者上下文另有明显的矛盾,否则此中描述的所有方法的步骤可以按照任意适当的顺序来执行。
为了简洁起见,常规的电子器件、控制系统、软件开发、和系统的其他功能性方面(和系统的单独的操作部件的组件)可能不会被详细描述。更进一步的,各附图中所示的连接线或者连接器旨在代表各元件之间示例性的功能关系和/或物理的或者逻辑耦合。应当指出,在实际的设备中可能存在许多替代的或者额外的功能关系、物理连接或者逻辑连接。词汇“机制”、“元件”、“单元”、“结构”、“装置”、和“构造”被广泛使用,并且其不限于机械的或者物理的实施例,而是可以包括结合处理器的软件例程,等等。
除非另有声明,否则任意和全部示例的使用,或者此中提供的示例性语言(如“例如”),仅仅旨在更好地阐明本发明,而不是要构成本发明范围的限制。对于本领域中的那些普通技术人员而言显而易见的是,在不脱离以下权利要求所限定的本发明的精神和范围的情况下,可以进行大量的修改和调整。因此,本发明的范围并非由对本发明的详细描述来限定,而是由以下权利要求来限定,并且在范围中的所有差异都将被解释为包含在本发明中。
除非该元件被特别地描述为“必须的”或者“关键的”,否则任何事项或者组件对于本发明的实践都不是必须的。还需要认识到,此中使用的术语“包括”、“包含”、和“具有”特定地表示被解读为开放式的行业术语。除非上下文中明确地另有所指,否则在描述本发明的上下文中(尤其是在以下权利要求的上下文中),术语“一”和“一个”和“该”以及类似指示语的使用应被理解为同时包括单数和复数这两者。此外,应该理解到,尽管术语“第一”、“第二”等可能被在此用于描述不同元件,但这些元件不应当被这些术语所限制,其仅仅是用来将一个元件与另一个元件区别开。更进一步的,除非在此中另有所指,否则在本文中对数值范围的列举仅仅旨在用作单独指代落在此范围内的每个单独的数值的速记方法,并且每个单独的数值都被结合到说明书中,就如同其在此中是被单独列举一样。
虽然已经示出和描述了本发明的几个实施例,但是本领域中的技术人员可以理解,在不脱离本发明的原理和精神的情况下,可以对这些实施例进行改变,本发明的范围通过权利要求及其等同物来限定。
Claims (14)
1.一种摄像装置,包括:
摄像单元,通过连续拍摄对象来捕捉多幅图像;
输入单元,接收从捕捉的多幅图像中对参考图像的选择和参考图像中的修改部分;
显示单元,显示所述参考图像;
控制器,当参考图像中的修改部分被选中并且用于替换所述修改部分的图像被确定时,所述控制器基于修改部分生成掩膜图像,并且通过使用掩膜图像合成参考图像和用于替换修改部分的图像来生成最终图像;以及
存储单元,存储包括掩膜图像、捕捉的多幅图像、和最终图像的信息的数据文件,
其中,所述存储单元将捕捉的多幅图像、最终图像、和数据文件存储在单独的文件夹中,以及
当接收到最终图像的修改请求时,所述控制器从存储单元中读取数据文件来重新合成参考图像和用于替换修改部分的图像,
其中,当所述控制器生成掩膜图像时,所述控制器至少执行一次图像合成,其中,控制器根据通过输入单元的输入命令来顺序地将掩膜图像应用到捕捉的多幅图像中的其他图像上,在其他图像中分离出与修改部分相对应的图像部分,合成所述分离的图像部分和参考图像的修改部分,并且显示合成的图像。
2.如权利要求1所述的摄像装置,其中:
当通过输入单元接收到存储命令时,所述控制器确定最后显示的图像为最终图像,并且将所述最终图像存储到存储单元中。
3.如权利要求2所述的摄像装置,其中,当在图像合成过程中或者正在编辑最终图像时接收到取消命令时,所述控制器使用数据文件中存储的掩膜图像的信息来恢复并显示之前的图像,所述之前的图像是在执行图像合成之前所显示的图像。
4.如权利要求1所述的摄像装置,其中,当接收到修改请求时,所述控制器将添加到数据文件中的最终图像设置为参考图像,并且提供用于在最终图像中选择修改部分的界面。
5.如权利要求1所述的摄像装置,其中,数据文件被分为标头和主体,所述主体存储捕捉的多幅图像和掩膜图像,并且所述标头存储捕捉的多幅图像和掩膜图像的信息,以及
当生成了最终图像并将其添加到数据文件中时,所述控制器修改存储在标头中的信息。
6.如权利要求5所述的摄像装置,其中,所述掩膜图像的信息包括在主体中存储的掩膜图像的标头中存储的掩膜图像特征信息,以及
掩膜图像特征信息包括掩膜图像的掩蔽部分位置和大小信息。
7.如权利要求1所述的摄像装置,其中,所述存储单元是非易失性存储器。
8.一种图像合成方法,包括:
通过连续拍摄对象来捕捉多幅图像;
接收从捕捉的多幅图像中对于参考图像的选择;
显示参考图像;
当参考图像中的修改部分被选中并且用于替换所述修改部分的图像被确定时,通过使用基于修改部分的掩膜图像来合成参考图像和用于替换修改部分的图像来生成最终图像;
存储数据文件,所述数据文件包括掩膜图像、捕捉的多幅图像、和最终图像的信息;以及
当接收到最终图像的修改请求时,读取数据文件来重新合成参考图像和用于替换修改部分的图像,
其中,最终图像的生成包括:
当参考图像中的修改部分被选中时,基于所述修改部分生成掩膜图像,以及
根据输入命令,通过顺序地将掩膜图像应用到捕捉的多幅图像中的其他图像来至少执行一次图像合成,在其他图像中分离出与所述修改部分相对应的图像部分,合成被分离的图像部分和参考图像的修改部分,并且显示合成的图像。
9.如权利要求8所述的图像合成方法,其中,最终图像的生成还包括:
当接收到存储命令时,确定最后显示的图像为最终图像。
10.如权利要求9所述的图像合成方法,进一步包括:
当在图像合成过程中或者正在编辑最终图像时接收到取消命令时,使用存储在数据文件中的掩膜图像的信息来恢复并显示之前的图像,所述之前的图像是在执行图像合成之前所显示的图像。
11.如权利要求8所述的图像合成方法,进一步包括:
当接收到修改请求时,将添加到数据文件的最终图像设置为参考图像,并且提供用于在最终图像中选择修改部分的界面。
12.如权利要求8所述的图像合成方法,其中,数据文件被划分为标头和主体,所述主体存储捕捉的多幅图像和掩膜图像,并且所述标头存储捕捉的多幅图像和掩膜图像的信息,以及
当生成最终图像并且将其添加到数据文件中时,修改存储在所述标头中的信息。
13.如权利要求12所述的图像合成方法,其中,所述掩膜图像的信息包括在主体中存储的掩膜图像的标头中存储的掩膜图像特征信息,以及
所述掩膜图像特征信息包括所述掩膜图像的掩蔽部分位置和大小信息。
14.如权利要求8所述的图像合成方法,其中,所述数据文件被存储在非易失性存储器中。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020120112022A KR101948692B1 (ko) | 2012-10-09 | 2012-10-09 | 촬영 장치 및 이미지 합성 방법 |
KR10-2012-0112022 | 2012-10-09 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103716534A CN103716534A (zh) | 2014-04-09 |
CN103716534B true CN103716534B (zh) | 2019-06-28 |
Family
ID=49212638
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310468277.2A Active CN103716534B (zh) | 2012-10-09 | 2013-10-09 | 摄像装置及合成图像的方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9413922B2 (zh) |
EP (1) | EP2720226B1 (zh) |
KR (1) | KR101948692B1 (zh) |
CN (1) | CN103716534B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6157094B2 (ja) * | 2012-11-21 | 2017-07-05 | キヤノン株式会社 | 通信装置、設定装置、通信方法、設定方法、及び、プログラム |
JP2016009873A (ja) * | 2014-06-20 | 2016-01-18 | ソニー株式会社 | 情報処理装置、情報処理システム、情報処理方法およびプログラム |
KR102164543B1 (ko) * | 2014-10-16 | 2020-10-12 | 삼성전자 주식회사 | 디스플레이 장치 및 디스플레이 방법 |
KR102594858B1 (ko) * | 2016-08-01 | 2023-10-27 | 삼성전자 주식회사 | 이미지 합성 및 복원하는 전자 장치 및 방법 |
US10176616B2 (en) * | 2017-01-19 | 2019-01-08 | Adobe Inc. | Automatic capture and refinement of a digital image of a group of people without user intervention |
CN107659722B (zh) * | 2017-09-25 | 2020-02-18 | 维沃移动通信有限公司 | 一种图像选择方法及移动终端 |
KR102470250B1 (ko) * | 2020-03-26 | 2022-11-24 | 박재현 | 광학적 부분 차단을 이용한 다이내믹 영상 생성방법 |
WO2023039865A1 (zh) * | 2021-09-17 | 2023-03-23 | 深圳市大疆创新科技有限公司 | 图像处理方法、视频处理方法、训练方法、设备、程序产品及存储介质 |
KR20240047294A (ko) | 2022-10-04 | 2024-04-12 | 오영식 | 이동하는 카메라로 다중 촬영한 사진들의 해상도 향상 방법, 장치, 및 시스템 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1706181A (zh) * | 2002-10-23 | 2005-12-07 | 松下电器产业株式会社 | 图像组合便携式终瑞及其所用的图像组合方法 |
CN101616258A (zh) * | 2008-06-25 | 2009-12-30 | 索尼株式会社 | 图像处理设备和图像处理方法 |
US20100164976A1 (en) * | 2008-12-26 | 2010-07-01 | Won-Hee Choe | Image processing apparatus and method |
CN102326181A (zh) * | 2009-01-28 | 2012-01-18 | 惠普发展公司,有限责任合伙企业 | 动态图像拼贴 |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10123A (en) * | 1853-10-11 | Improvement in cultivate ng-plows | ||
US7391929B2 (en) | 2000-02-11 | 2008-06-24 | Sony Corporation | Masking tool |
US8896725B2 (en) * | 2007-06-21 | 2014-11-25 | Fotonation Limited | Image capture device with contemporaneous reference image capture mechanism |
US20050129324A1 (en) * | 2003-12-02 | 2005-06-16 | Lemke Alan P. | Digital camera and method providing selective removal and addition of an imaged object |
EP1713030A4 (en) | 2004-02-05 | 2007-05-02 | Vodafone Kk | PICTURE PROCESSING METHOD, PICTURE PROCESSING DEVICE AND MOBILE COMMUNICATION TERMINAL DEVICE |
KR100702397B1 (ko) * | 2004-06-14 | 2007-04-02 | 후지필름 가부시키가이샤 | 화상처리시스템, 그 방법 및 화상처리 프로그램을 기록한 컴퓨터판독가능한 기록매체 |
JP4378258B2 (ja) * | 2004-10-14 | 2009-12-02 | 富士フイルム株式会社 | 画像補正装置およびその制御方法 |
JP2006279440A (ja) * | 2005-03-29 | 2006-10-12 | Nippon Telegr & Teleph Corp <Ntt> | 映像通信方法および端末装置 |
US7834894B2 (en) * | 2007-04-03 | 2010-11-16 | Lifetouch Inc. | Method and apparatus for background replacement in still photographs |
US8068693B2 (en) * | 2007-07-18 | 2011-11-29 | Samsung Electronics Co., Ltd. | Method for constructing a composite image |
US8031970B2 (en) * | 2007-08-27 | 2011-10-04 | Arcsoft, Inc. | Method of restoring closed-eye portrait photo |
JP4466702B2 (ja) * | 2007-09-12 | 2010-05-26 | カシオ計算機株式会社 | 撮像装置、及び撮像制御プログラム |
KR100948369B1 (ko) * | 2007-11-21 | 2010-03-22 | 이현주 | 영상통신단말기의 영상 합성 장치 및 방법 |
JP2009141811A (ja) * | 2007-12-07 | 2009-06-25 | Nec Corp | 画像処理装置、方法、プログラム、記録媒体、撮像装置及び携帯端末装置 |
US8004582B2 (en) | 2007-12-14 | 2011-08-23 | Casio Computer Co., Ltd. | Image file processing apparatus, image file processing method, and storage medium |
US8497920B2 (en) * | 2008-06-11 | 2013-07-30 | Nokia Corporation | Method, apparatus, and computer program product for presenting burst images |
JP4877319B2 (ja) * | 2008-12-24 | 2012-02-15 | カシオ計算機株式会社 | 画像生成装置、プログラム、画像表示方法、及び、撮像方法 |
JP5498059B2 (ja) | 2009-06-02 | 2014-05-21 | オリンパスイメージング株式会社 | 撮影装置、撮影方法、再生方法、画像処理装置、および画像処理用プログラム |
KR101665130B1 (ko) * | 2009-07-15 | 2016-10-25 | 삼성전자주식회사 | 복수의 인물에 대한 이미지 생성 장치 및 방법 |
JP5423285B2 (ja) * | 2009-09-29 | 2014-02-19 | 株式会社ニコン | カメラ |
JP2011176748A (ja) * | 2010-02-25 | 2011-09-08 | Sony Corp | 画像処理装置および方法、並びにプログラム |
JP5445235B2 (ja) | 2010-03-09 | 2014-03-19 | ソニー株式会社 | 画像処理装置、画像処理方法およびプログラム |
US9077917B2 (en) | 2011-06-09 | 2015-07-07 | Apple Inc. | Image sensor having HDR capture capability |
KR101817657B1 (ko) * | 2011-12-21 | 2018-01-11 | 삼성전자주식회사 | 디지털 촬영 장치 및 이의 제어 방법 |
KR101901910B1 (ko) * | 2011-12-23 | 2018-09-27 | 삼성전자주식회사 | 선택 영역을 변화시키는 결과 영상을 생성 또는 저장하는 장치 및 방법 |
JP5807555B2 (ja) * | 2012-01-20 | 2015-11-10 | 富士通株式会社 | 画像処理プログラム、装置及び方法 |
JP5949481B2 (ja) * | 2012-03-14 | 2016-07-06 | 富士通株式会社 | 画像処理方法、プログラム及び装置 |
US8913147B2 (en) * | 2012-09-28 | 2014-12-16 | Ebay, Inc. | Systems, methods, and computer program products for digital image capture |
EP2797053B1 (en) * | 2013-04-24 | 2017-03-22 | Morpho, Inc. | Image compositing device and image compositing method |
-
2012
- 2012-10-09 KR KR1020120112022A patent/KR101948692B1/ko active IP Right Grant
-
2013
- 2013-09-17 EP EP13184717.0A patent/EP2720226B1/en not_active Not-in-force
- 2013-09-25 US US14/036,344 patent/US9413922B2/en active Active
- 2013-10-09 CN CN201310468277.2A patent/CN103716534B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1706181A (zh) * | 2002-10-23 | 2005-12-07 | 松下电器产业株式会社 | 图像组合便携式终瑞及其所用的图像组合方法 |
CN101616258A (zh) * | 2008-06-25 | 2009-12-30 | 索尼株式会社 | 图像处理设备和图像处理方法 |
US20100164976A1 (en) * | 2008-12-26 | 2010-07-01 | Won-Hee Choe | Image processing apparatus and method |
CN102326181A (zh) * | 2009-01-28 | 2012-01-18 | 惠普发展公司,有限责任合伙企业 | 动态图像拼贴 |
Also Published As
Publication number | Publication date |
---|---|
EP2720226A1 (en) | 2014-04-16 |
KR101948692B1 (ko) | 2019-04-25 |
US20140098259A1 (en) | 2014-04-10 |
CN103716534A (zh) | 2014-04-09 |
KR20140045804A (ko) | 2014-04-17 |
EP2720226B1 (en) | 2016-05-11 |
US9413922B2 (en) | 2016-08-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103716534B (zh) | 摄像装置及合成图像的方法 | |
CN104754274B (zh) | 图像再现装置及其控制方法 | |
US9307153B2 (en) | Method and apparatus for previewing a dual-shot image | |
US9473702B2 (en) | Controlling image capture and/or controlling image processing | |
CN109565551A (zh) | 对齐于参考帧合成图像 | |
JP2011060272A (ja) | Ui提供方法及びこれを適用したディスプレイ装置 | |
CN103139464A (zh) | 提供全景图像的方法及其成像设备 | |
US9692971B2 (en) | Image capturing apparatus capable of automatically switching from reproduction mode to shooting mode and displaying live view image and control method thereof | |
JP6381892B2 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP6230386B2 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP2007110262A (ja) | 画像鑑賞用ソフトウェア及び画像蓄積装置 | |
JP6056551B2 (ja) | 画像処理プログラムおよびデジタルカメラ | |
JP2013157842A (ja) | 画像再生装置 | |
US20210400192A1 (en) | Image processing apparatus, image processing method, and storage medium | |
US20210382931A1 (en) | Information processing apparatus, control method of information processing apparatus, and non-transitory computer-readable storage medium | |
JP7362748B2 (ja) | 撮像素子、撮像装置、撮像素子の作動方法、及びプログラム | |
JP2011044989A (ja) | 画像処理装置、画像処理プログラムおよび画像処理方法 | |
US20180041711A1 (en) | Selective Partial View Enlargement for Image and Preview | |
US9736380B2 (en) | Display control apparatus, control method, and storage medium | |
JP6991830B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム | |
JP2020150517A (ja) | 画像処理装置、画像処理方法、コンピュータプログラム及び記憶媒体 | |
JP2005057623A (ja) | 画像データ処理装置 | |
WO2022158201A1 (ja) | 画像処理装置、画像処理方法、プログラム | |
CN111565285A (zh) | 图像输出装置及其控制方法和存储介质 | |
JP6335064B2 (ja) | 撮像装置、撮像装置の制御方法およびコンピュータプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |