CN102480598A - 摄影装置、摄影方法和程序 - Google Patents

摄影装置、摄影方法和程序 Download PDF

Info

Publication number
CN102480598A
CN102480598A CN2011103747959A CN201110374795A CN102480598A CN 102480598 A CN102480598 A CN 102480598A CN 2011103747959 A CN2011103747959 A CN 2011103747959A CN 201110374795 A CN201110374795 A CN 201110374795A CN 102480598 A CN102480598 A CN 102480598A
Authority
CN
China
Prior art keywords
image
kinetoplast
images
composograph
background
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011103747959A
Other languages
English (en)
Other versions
CN102480598B (zh
Inventor
佐藤秀彦
上园哲司
樱井顺三
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AOF Imaging Technology Co Ltd
Original Assignee
AOF Imaging Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AOF Imaging Technology Co Ltd filed Critical AOF Imaging Technology Co Ltd
Publication of CN102480598A publication Critical patent/CN102480598A/zh
Application granted granted Critical
Publication of CN102480598B publication Critical patent/CN102480598B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种摄影装置、摄影方法和程序,所述摄影装置能够更加迅速地生成从连续拍摄的多个图像中分别提取的多个动体进行合成后的图像。在按下了快门键时,读出此时存储在存储器中的预览图像(p1-pn),基于预览图像(p1-pn)生成一张背景图像。并且,从存储器读出拍摄图像(P1)后,找出拍摄图像(P1)和背景图像的差异,从拍摄图像(P1)中提取由存在差异的像素构成的动体图像。将从拍摄图像(P1)中提取的动体图像合成在背景图像上,生成合成图像(C1)。

Description

摄影装置、摄影方法和程序
技术领域
本发明涉及摄影装置、摄影方法和程序,例如涉及能够更加迅速地生成从连续拍摄的多个图像中分别提取的多个动体进行合成后的图像的摄影装置、摄影方法和程序。
背景技术
随着CMOS(Complementary Metal Oxide Semiconductor,互补金属氧化物半导体)等摄像器件和对通过摄像器件获取的图像进行处理的IC芯片的性能的提高,连拍功能使每单位时间可拍摄的图像数量增加。在近年来销售的数码相机中,也有1秒钟能够拍摄数十张图像的相机。
因此,针对应用了连拍功能的数码相机的各种功能提出方案。例如,具有这样的技术:通过对短时间连续拍摄的多个图像进行解析,提取动态物体(动体),将从各图像中提取的动体重叠在一张图像上进行合成。
该技术中,以位于通过一系列拍摄而得到的多个图像的相同位置的像素的像素值的中值为各像素的像素值,制作中值图像,将各图像的像素中与中值图像的像素的差值大的像素作为动体部分的像素,并将其替换为中值图像的像素,由此能够进行中值图像和动体部分的图像的合成。
现有技术文献
专利文献
专利文献1:日本特开2009-059060号公报
发明内容
上述技术中,由于在使用所有的通过一系列拍摄得到的多个图像之后才能够生成中值图像,当然在一系列拍摄结束前不能生成中值图像。因此,使用者在结束一系列的拍摄、并结束中值图像的生成之前无法确认针对哪一图像合成从各图像中提取的动体。
并且,在使用像素数与摄像器件的有效像素数相同的图像、即所谓的完整图像进行上述的合成处理时,各处理都需要时间,并且一系列拍摄结束后如果不经过一段时间就无法确认合成结果的图像。
本发明的目的是提供一种能够更加迅速地生成从连续拍摄的多个图像中分别提取的多个动体进行合成而得到的图像的摄影装置、摄影方法和程序。
本发明的一个方面涉及一种摄影装置,其特征在于,其具备:拍摄单元,用于进行连续拍摄;存储单元,用于存储在按下快门键之前通过上述拍摄单元拍摄的多个第1图像和在按下上述快门键后通过上述拍摄单元拍摄的多个第2图像;和生成单元,其至少基于多个上述第1图像,生成背景图像,所述背景图像是在上述第1图像和上述第2图像中含有的动体的背景的图像。
本发明的一个方面涉及一种摄影方法,其特征在于,其包含如下步骤:拍摄步骤,进行连续拍摄;存储步骤,存储在按下快门键之前拍摄的多个第1图像和在按下上述快门键后拍摄的多个第2图像;和生成步骤,至少基于多个所述第1图像,生成背景图像,所述背景图像是在上述第1图像和上述第2图像中含有的动体的背景的图像。
本发明的一个方面涉及一种程序,其使计算机执行包含下述步骤的处理:拍摄步骤,进行连续拍摄;存储步骤,存储在按下快门键之前拍摄的多个第1图像和在按下上述快门键后拍摄的多个第2图像;和生成步骤,至少基于多个上述第1图像,生成背景图像,所述背景图像是在上述第1图像和上述第2图像中含有的动体的背景的图像。
根据本发明,能够更迅速地生成从连续拍摄的多个图像中分别提取的多个动体进行合成后的图像。
附图说明
图1是表示本实施方式的摄影装置的构成例的框图。
图2是表示在设定动体合成模式时所进行的处理的流程的图。
图3是表示图1的图像处理部的构成例的图。
图4是对摄影装置的拍摄处理进行说明的流程图。
图5是说明图4的步骤S4中所进行的快速浏览图像生成处理的流程图。
图6是说明图4的步骤S5中所进行的总图像生成处理的流程图。
图7是表示使用基于拍摄图像生成的背景图像来生成合成图像的处理流程图。
符号说明
1摄影装置
11CPU
12CMOS传感器
13存储器
14图像处理部
15存储部
16LCD
21快速浏览图像生成部
22总图像生成部
23显示处理部
24信息生成部
31分辨率转换部
32背景图像生成部
33动体提取部
34合成部
41背景图像生成部
42动体提取部
43合成部
具体实施方式
[本发明的实施方式]
图1是表示本实施方式涉及的摄影装置1的构成例的框图。摄影装置1是数码静物相机、数码摄像机、移动电话机等具有拍摄静止画面功能的装置。
CPU(Central Processing Unit,中央处理器)11执行规定的程序,控制摄影装置1的所有工作。例如,CPU11在选择将从连续拍摄的多个图像中提取的动体合成为一张图像的模式、即动体合成模式时,控制CMOS传感器12,在按下快门键之前连续拍摄多个图像(以下,在适当的情况下称为预览拍摄),并且在按下快门键时连续拍摄多个图像(以下,称为连拍)。
CMOS传感器12对由透镜获取的光进行光电转换,并对通过光电转换而得到的图像信号进行A/D(Analog/Digital,模拟/数字)转换。CMOS传感器12使通过A/D转换得到的图像数据存储在存储器13中。
在存储器13中设置有可存储多个在按下快门键之前拍摄的图像即预览图像的区域和可存储多个在按下快门键后拍摄的图像即拍摄图像的区域。
在用于预览图像的区域按拍摄顺序存储预览图像,在没有空白区域时,以覆盖时间久的图像的方式依次存储预览图像。在用于预览图像的区域常常能够存储在即将按下快门键之前拍摄的多个预览图像。存储在存储器13中的预览图像被图像处理部14适当读出,并被显示在LCD(Liquid Crystal Display,液晶显示器)16上。使用者能够观看显示在LCD16上的预览图像来确认构图。
图像处理部14在选择了动体合成模式时,读出存储在存储器13中的图像,进行图像的合成等。对于由图像处理部14进行的处理的内容和图像处理部14的详细构成在后面叙述。
存储部15由相对摄影装置1可进行装卸的存储卡等构成,存储由图像处理部14生成的图像。LCD16显示图像处理部14所提供的预览图像、合成图像。操作部17由快门键等各种按钮构成,在使用者操作按钮时,将表示使用者操作内容的信号输出给CPU11。
[动体合成模式时的处理]
图2是表示在设定动体合成模式时所进行的处理的流程的图。
图2的横轴表示时刻,时刻t1是按下快门键的时刻。即,通过时刻t1之前的预览拍摄可得到预览图像,通过时刻t1之后的连拍可得到多个拍摄图像。例如,在固定摄影装置1的状态下进行预览图像和拍摄图像的拍摄。在各个预览图像和拍摄图像中以相同的风景作为背景进行拍摄,并拍摄在该风景近前侧(摄影装置1侧)移动的动体。
在按下快门键时,图像处理部14如图2的左方所示,读出此时存储在存储器13中的预览图像p1-pn,基于预览图像p1-pn生成一张背景图像。背景图像是成为从拍摄图像中提取的动体图像的合成目的地的图像,例如,以位于预览图像p1-pn的相同位置的像素的像素值的中值作为各像素的像素值的方式生成背景图像。背景图像是不拍摄动体而仅拍摄背景的图像。
在生成背景图像后,可以将背景图像立即显示在LCD16上,使用者能够确认成为动体合成目的地的图像。
在通过按下快门键而拍摄的拍摄图像被存储在存储器13中时,图像处理部14按拍摄顺序逐一地从存储器13中读出拍摄图像。拍摄图像的读出例如在一系列拍摄结束前开始,与拍摄图像的拍摄同时进行。
在图2的例子中,拍摄7张图像,并将每隔一张而选择出的拍摄图像P1-P4这4张拍摄图像按顺序从存储器13中读出。在拍摄图像P1-P4中分别映出表示以相同风景为背景进行移动的人物在各图像拍摄时的状态的拍摄对象H1-H4。
将拍摄图像P1从存储器13中读出后,如拍摄图像P1的下面所示,图像处理部14找出拍摄图像P1与背景图像的差异。在拍摄图像P1中映出拍摄对象H1,由于拍摄对象H1的背景与映在背景图像上的风景相同,所以拍摄图像P1的像素中、与背景图像有差异的像素即为拍摄对象H1部分的像素。
图像处理部14通过从拍摄图像P1中提取由拍摄对象H1部分的像素构成的动体图像,并重叠在背景图像上进行合成,从而生成箭头#1的前端所示的合成图像C1。合成图像C1的生成通过用从拍摄图像P1中提取的拍摄对象H1部分的像素替换背景图像的像素中拍摄对象H1所重叠的像素来进行。合成图像C1形成为映出拍摄对象H1的图像。合成图像C1的生成结束后,图像处理部14将合成图像C1显示在LCD16上。由此,使用者能够确认合成状态。
将拍摄图像P1之后所拍摄的拍摄图像P2从存储器13读出后,如拍摄图像P2的下面所示,图像处理部14找出拍摄图像P2与背景图像的差异。在拍摄图像P2中映出拍摄对象H2,由于拍摄对象H2的背景与映在背景图像中的风景相同,所以拍摄图像P2的像素中、与背景图像有差异的像素即为拍摄对象H2部分的像素。
图像处理部14通过从拍摄图像P2中提取由拍摄对象H2部分的像素构成的动体图像,并将其重叠在之前刚生成的合成图像即合成图像C1上,进行合成,从而生成如箭头#2的前端所示的合成图像C2。合成图像C2的生成通过用从拍摄图像P2中提取的拍摄对象H2部分的像素替换合成图像C1的像素中拍摄对象H2所重叠的像素来进行。合成图像C2成为映出拍摄对象H1和拍摄对象H2的图像。合成图像C2的生成结束后,图像处理部14将合成图像C2代替合成图像C1显示在LCD16上。
将拍摄图像P2之后拍摄的拍摄图像P3从存储器13中读出后,如拍摄图像P3的下面所示,图像处理部14找出拍摄图像P3与背景图像的差异。在拍摄图像P3中映出拍摄对象H3,由于拍摄对象H3的背景与映在背景图像中的风景相同,所以拍摄图像P3的像素中、与背景图像有差异的像素即为拍摄对象H3部分的像素。
图像处理部14通过从拍摄图像P3中提取由拍摄对象H3部分的像素构成的动体图像,并将其重叠在之前刚生成的合成图像即合成图像C2上,进行合成,从而生成如箭头#3的前端所示的合成图像C3。合成图像C3的生成通过用从拍摄图像P3中提取的拍摄对象H3部分的像素替换合成图像C2的像素中拍摄对象H3所重叠的像素来进行。合成图像C3成为映出拍摄对象H1-H3的图像。在合成图像C3的生成结束后,图像处理部14将合成图像C3代替合成图像C2显示在LCD16上。
将拍摄图像P3之后拍摄的拍摄图像P4从存储器13中读出后,如拍摄图像P4的下面所示,图像处理部14找出拍摄图像P4与背景图像的差异。在拍摄图像P4中映出拍摄对象H4,由于拍摄对象H4的背景与映在背景图像中的风景相同,所以拍摄图像P4的像素中、与背景图像有差异的像素即为拍摄对象H4部分的像素。
图像处理部14通过从拍摄图像P4中提取由拍摄对象H4部分的像素构成的动体图像,并将其重叠在之前刚生成的合成图像即合成图像C3上,进行合成,从而生成如箭头#4的前端所示的合成图像C4。合成图像C4的生成通过用从拍摄图像P4中提取的拍摄对象H4部分的像素替换合成图像C3的像素中拍摄对象H4所重叠的像素来进行。合成图像C4成为映出拍摄对象H1-H4的图像。在生成合成图像C4后,图像处理部14将合成图像C4代替合成图像C3显示在LCD16上。
如上所述,通过使用在按下快门键之前拍摄的预览图像,预先生成成为动体图像合成目的地的背景图像,从而可以在拍摄图像的拍摄后立即提取动体图像,并与背景图像合成,生成合成图像。
即,使用在按下快门键后拍摄的拍摄图像生成背景图像的情况下,如果利用图2的例子进行说明,则在拍摄图像P4的拍摄结束前不能生成背景图像,因而合成图像的生成也在其后的时间才能开始,但通过如上使用预览图像生成背景图像,可以在拍摄图像P1的拍摄结束后立即开始生成合成图像C1。
需要说明的是,也可以不在按下快门键后进行背景图像的生成,而是在每次拍摄预览图像,并将其存储在存储器13中时,使用存储在存储器13中的多个预览图像,生成背景图像。在按下快门键后,使用预先生成的背景图像开始合成图像的生成。通过这种方式,例如能够更迅速地生成合成图像。
并且,通过以上处理,能够在每次合成图像的生成结束时,将合成图像显示在LCD16上,并出示给使用者。合成图像的显示既可以如上所述替代先前生成的合成图像逐一地显示,也可以与先前生成的合成图像并列显示。通过这种方式,例如能够容易地确认合成情况。
合成图像的生成也可以使用低分辨率的图像和高分辨率的图像这两种图像来进行。此处所说的高分辨率的图像(所谓的完整图像)是通过CMOS传感器12拍摄的、像素数与CMOS传感器12的有效像素数相同的图像,低分辨率的图像(例如,用于在拍摄后立即确认拍摄图像的快速浏览图像)是通过对高分辨率的图像进行分辨率转换而得到的图像。
与使用高分辨率图像生成合成图像时相比,通过使用低分辨率图像进行合成图像的生成,能够更迅速地进行处理,并能够进行在更早的时间显示合成图像的快速浏览显示。将基于低分辨率图像生成的作为快速浏览显示用合成图像的各个快速浏览图像存入总图像的头部信息中,与总图像一起保存在存储部15中。总图像例如为使用高分辨率图像最终生成的合成图像(在图2的例子的情况下,为合成图像C4)。
图3是表示图1的图像处理部14的构成例的图。图3所示的功能部中的至少一部分是通过由图1的CPU11来执行规定的程序来实现功能。
图像处理部14具有快速浏览图像生成部21、总图像生成部22、显示处理部23和信息生成部24。快速浏览图像生成部21具有分辨率转换部31、背景图像生成部32、动体提取部33和合成部34,总图像生成部22具有背景图像生成部41、动体提取部42和合成部43。从存储器13读出的预览图像被输入分辨率转换部31和背景图像生成部41,并且每次拍摄时从存储器13读出的各个拍摄图像被输入分辨率转换部31和动体提取部42。
快速浏览图像生成部21的分辨率转换部31将输入的预览图像和拍摄图像转换为低分辨率的图像。另外,虽然此处将预览图像的分辨率转换为低分辨率,但根据预览图像的分辨率的不同,有时并不转换为低分辨率。分辨率转换部31将通过分辨率转换而得到的低分辨率预览图像输出给背景图像生成部32,将低分辨率拍摄图像输出给动体提取部33。
背景图像生成部32基于由分辨率转换部31提供的多个低分辨率预览图像,生成以位于多个低分辨率预览图像的相同位置的像素的像素值的中值为各像素的像素值的背景图像。由背景图像生成部32生成的背景图像被提供给动体提取部33和合成部34。
动体提取部33找出由背景图像生成部32提供的低分辨率的背景图像与从分辨率转换部31提供的低分辨率的拍摄图像之间的差异(位于相同位置的像素的像素值的差)。动体提取部33从拍摄图像中提取由与背景图像有差异的像素构成的动体图像,输出给合成部34。
合成部34将由背景图像生成部32提供的低分辨率的背景图像、和由动体提取部33从低分辨率拍摄图像中提取并供给的动体图像进行合成,生成成为快速浏览图像的合成图像。动体图像在背景图像上的合成通过用动体图像的像素替换背景图像的像素中与动体部分重合的像素来进行。合成部34在每次生成成为快速浏览图像的合成图像时,都将生成的合成图像输出给显示处理部23和信息生成部24。
如上所述,合成部34通过将提取自第一张拍摄图像中的动体图像重叠在背景图像上以后进行合成,生成第一张合成图像,通过将提取自第二张以后的各个拍摄图像中的动体图像重叠在之前刚生成的合成图像上以后进行合成,生成第二张以后的各个合成图像。
显示处理部23在每次从合成部34供给快速浏览图像时,都将快速浏览图像显示在LCD16上。
并且,显示处理部23在被指示显示存储在存储部15中的总图像时,从存储部15中读出被指示显示的总图像的文件。总图像的文件由总图像的数据和头部信息构成,在头部信息中保存有在总图像的生成时生成的各个快速浏览图像的数据。显示处理部23将存入总图像的头部信息中的快速浏览图像例如按生成顺序逐一地显示或多张并列显示在LCD16上,与此同时,将总图像显示在LCD16上。
总图像生成部22的背景图像生成部41基于输入的多个高分辨率预览图像,生成以位于多个高分辨率预览图像的相同位置的像素的像素值的中值为各像素的像素值的背景图像。由背景图像生成部41生成的背景图像供给于动体提取部42和合成部43。
动体提取部42找出从背景图像生成部41供给的高分辨率的背景图像与输入的高分辨率的拍摄图像之间的差异。动体提取部42从拍摄图像中提取由与背景图像有差异的像素构成的动体图像,并输出给合成部43。
合成部43基于从背景图像生成部41供给的高分辨率的背景图像、和由动体提取部42从高分辨率拍摄图像中提取并供给的动体图像,进行与生成快速浏览图像的合成部34的处理同样的处理。
即,合成部43通过将提取自第一张拍摄图像中的动体图像重叠在背景图像上之后进行合成,生成第一张合成图像,通过将提取自第二张以后的各个拍摄图像中的动体图像重叠在之前刚生成的合成图像上之后进行合成,生成第二张以后的各个合成图像。合成部43将对提取自最后一张拍摄图像中的动体图像进行合成而生成的最后合成图像作为总图像输出给信息生成部24。
信息生成部24将从合成部34供给的各个快速浏览图像存入头部信息中,生成由头部信息和从合成部43供给的总图像的数据构成的文件,并存储在存储部15中。
其次,参照图4的流程图,对摄影装置1的拍摄处理进行说明。
图4的处理例如在使用者选择动体合成模式作为拍摄模式时开始。各步骤的处理不是只按照图中所示的顺序进行,可适当地与其他处理同时进行。
在步骤S 1中,CPU11控制CMOS传感器12,拍摄多个预览图像。拍摄的预览图像供给于存储器13,存储在用于预览图像的区域。
在步骤S2中,CPU11基于从操作部17供给的信息,判断是否按下快门键,在判断为不按快门时,返回步骤S1,重复预览图像的拍摄。
另一方面,在步骤S2中判断按下了快门键时,在步骤S3中,CPU11控制CMOS传感器12,通过连拍功能,拍摄多个图像。拍摄的拍摄图像依次供给于存储器13,存储在用于拍摄图像的区域。
在步骤S4中,通过图像处理部14的快速浏览图像生成部21进行快速浏览图像生成处理。将通过快速浏览图像生成处理而生成的多个快速浏览图像供给于信息生成部24。
在步骤S5中,通过图像处理部14的总图像生成部22进行总图像生成处理。通过总图像生成处理而生成的总图像即最后的合成图像被提供给信息生成部24。
在步骤S6中,信息生成部24将通过快速浏览图像生成处理而生成的多个快速浏览图像存入总图像的头部信息。
在步骤S7中,信息生成部24将由存储有快速浏览图像的头部信息和通过总图像生成处理而生成的总图像的数据构成的文件存储在存储部15中。其后,返回步骤S1,进行以上的处理。
接下来参照图5的流程图,对在图4的步骤S4中所实施的快速浏览图像生成处理进行说明。
在步骤S11中,快速浏览图像生成部21的分辨率转换部31将输入的预览图像和拍摄图像转换为低分辨率的图像。
在步骤S12中,背景图像生成部32基于多个低分辨率预览图像,生成以位于相同位置的像素的像素值的中值为各像素的像素值的背景图像。
在步骤S13中,动体提取部33选择一张通过分辨率转换部31进行分辨率转换而得到的低分辨率的拍摄图像。
在步骤S14中,动体提取部33找出通过背景图像生成部32而生成的低分辨率的背景图像与所选择的低分辨率的拍摄图像的差异,从拍摄图像中提取由与背景图像有差异的像素构成的动体图像。
在步骤S15中,合成部34将通过背景图像生成部32而生成的低分辨率的背景图像、和动体提取部33从低分辨率的拍摄图像中提取的动体图像进行合成,生成成为快速浏览图像的合成图像。将通过合成部34而生成的快速浏览图像供给于显示处理部23和信息生成部24。
在步骤S16中,显示处理部23将通过合成部34而生成的快速浏览图像显示在LCD16上。
在步骤S17中,动体提取部33判断是否选择了全部的拍摄图像,在判断为没有选择全部的拍摄图像时,返回步骤S13,选择下一拍摄图像重复同样的处理。在通过将提取自第一张拍摄图像中的动体图像重叠合成在背景图像上生成第一张合成图像后,通过将提取自第二张以后的各个拍摄图像中的动体图像重叠合成在之前刚生成的合成图像上,生成第二张以后的各个合成图像。将生成的合成图像依次显示在LCD16上,与此同时,供给于信息生成部24。
在步骤S17中判断为选择全部的拍摄图像时,返回图4的步骤S4,进行此后的处理。
其次,参照图6的流程图,对在图4的步骤S5中所实施的总图像生成处理进行说明。
在步骤S21中,总图像生成部22的背景图像生成部41基于输入的多个高分辨率的预览图像,生成以位于多个高分辨率预览图像的相同位置的像素的像素值的中值为各像素的像素值的背景图像。
在步骤S22中,动体提取部42选择一张所输入的高分辨率拍摄图像。
在步骤S23中,动体提取部42找出通过背景图像生成部41而生成的高分辨率的背景图像与所选择的高分辨率的拍摄图像的差异,从拍摄图像中提取由与背景图像有差异的像素构成的动体图像。
在步骤S24中,合成部43将通过背景图像生成部41而生成的高分辨率的背景图像、和动体提取部42从高分辨率的拍摄图像中提取的动体图像进行合成,生成合成图像。
在步骤S25中,动体提取部42判断是否选择了全部的拍摄图像,在判断为没有选择全部的拍摄图像时,返回步骤S22,选择下一张拍摄图像重复同样的处理。将提取自第一张拍摄图像中的动体图像重叠在背景图像上之后进行合成,从而生成第一张合成图像,然后,通过将提取自第二张以后的各个拍摄图像中的动体图像重叠在之前刚生成的合成图像上之后进行合成,生成第二张以后的各个合成图像。
在步骤S25中判断为选择了全部的拍摄图像时,在步骤S26中,合成部43将对提取自最后的拍摄图像中的动体图像进行合成而生成的最后的合成图像作为总图像输出给信息生成部24。其后,返回图4的步骤S5,进行此后的处理。
[发明的实施方式的效果]
1.通过以上的处理,可更迅速地生成从连续拍摄的多个拍摄图像中分别提取的多个动体进行合成后的图像。
2.由拍摄前的图像与拍摄后的多个图像各自之间的差异,能够容易地提取多个动体的图像。
3.通过使用预览图像生成背景图像,能够在结束第一张图像的拍摄后立即开始合成图像的生成。因此,能够在每次生成合成图像时对进行显示。
4.通过使最终生成的合成图像形成为高分辨率的总图像进行保存,从而可以显示出高品质的合成图像。
5.由于将作为快速浏览显示用合成图像的各个快速浏览图像存入总图像的头部信息中,所以可以使快速浏览图像例如按生成顺序逐一地显示,或多张并列显示。
[变形例]
在以上内容中,将基于高分辨率的预览图像生成的背景图像用于生成总图像,但也可以在快速浏览图像的生成时使用基于低分辨率预览图像生成的低分辨率背景图像来生成总图像。
并且,在以上内容中,每次生成快速浏览图像时都在LCD16上进行显示,出示给使用者,但此时,也可以取消总图像的生成处理。例如,在取消总图像的生成处理时操作的取消按钮与快速浏览图像一起显示出来,按下操作部17的规定按钮时,或在LCD16上叠置有触摸屏的情况下使用者按下取消按钮时,中止总图像的生成处理。通过这种方式,不执行无用的处理,因而,例如能够节约电力消耗。
映在一张合成图像上的各个动体过于拥挤时(靠得过近时),有时难以从合成图像中辨别动体的动态迁移。为了使各个动体不过于拥挤,使用者可以选择这样的方式:使用连拍功能所拍摄的拍摄图像中每隔几张的拍摄图像来生成合成图像。通过如此设定,例如能够生成使用者更满意的合成图像。
并且,也可以设定为如下方式,在按下快门键后通过连拍功能拍摄3n+1张(例如31张)拍摄图像,通过找出与背景图像的差异从各拍摄图像中提取动体,计算提取的动体的重心的坐标,根据重心的坐标是否移动,选择合成在背景图像上的动体图像。
例如,在重心的坐标发生移动时,选择从第一张拍摄图像、第n+1张拍摄图像、第2n+1张拍摄图像和最后拍摄图像的各个拍摄图像中提取的动体图像,用于生成合成图像。并且,在重心的坐标没有发生移动时,选择从第3n+1张拍摄图像中提取的各个动体图像,用于生成合成图像。
根据动体的重心是否发生移动,改变用于生成合成图像的动体图像,由此能够防止在一张合成图像上映现的各个动体过于拥挤。
在以上内容中,基于在按下快门键之前拍摄的预览图像,生成背景图像,但也可以基于在按下快门键后拍摄的拍摄图像,生成背景图像。
图7是表示使用基于拍摄图像生成的背景图像来生成合成图像的处理流程图。
在图7的例子中,使用在按下快门键后拍摄的拍摄图像P1-P4的中值,生成背景图像。并且,通过找出与背景图像的差异,从拍摄图像P1中提取动体图像H1,通过将所提取的动体图像H1合成在背景图像上,生成如箭头#1的前端所示的合成图像C1。
同样,通过找出与背景图像的差异,从拍摄图像P2-P4中提取各个动体图像H2、H3、H4,通过将所提取的动体图像H2、H3、H4合成在之前刚生成的合成图像上,生成如箭头#2-#4的前端所示的合成图像C2-C4。
如上所述利用拍摄图像生成背景图像,因而,能够生成接近动体活动时的背景的背景图像。
本发明的实施方式不限于上述的实施方式,在不脱离本发明的构思的范围中可以进行各种改变。

Claims (8)

1.一种摄影装置,其特征在于,其具备:
拍摄单元,用于进行连续拍摄;
存储单元,用于存储在按下快门键之前通过所述拍摄单元拍摄的多个第1图像和在按下所述快门键后通过所述拍摄单元拍摄的多个第2图像;和
生成单元,其至少基于多个所述第1图像,生成背景图像,所述背景图像是在所述第1图像和所述第2图像中含有的动体的背景的图像。
2.如权利要求1所述的摄影装置,其特征在于,其进一步具备:
提取单元,其通过找出所述背景图像和所述第2图像的差异,提取动体图像,所述动体图像是在各个所述第2图像中含有的动体的图像;和
合成单元,其在所述背景图像上重叠从按下所述快门键后拍摄的第一张所述第2图像中提取的所述动体图像后进行合成,来生成合成图像,将从第二张以后的所述第2图像中提取的所述动体图像重叠在通过对从前一个所述第2图像中提取的所述动体图像进行合成而生成的所述合成图像上,进行合成,来生成多个所述合成图像。
3.如权利要求2所述的摄影装置,其特征在于,其进一步具备显示单元,所述显示单元用于在每次生成所述合成图像时显示所生成的所述合成图像。
4.如权利要求3所述的摄影装置,其特征在于,其进一步具备处理单元,所述处理单元用于将合成图像作为总图像保存在记录介质中,所述合成图像是通过对从按下所述快门键后拍摄的最后的所述第2图像中提取的所述动体图像进行合成而生成的。
5.如权利要求4所述的摄影装置,其特征在于,其进一步具备转换单元,所述转换单元用于将所述第1图像和所述第2图像转换为分辨率低的图像,
所述生成单元基于至少多个转换了分辨率的所述第1图像,生成低分辨率的所述背景图像,
所述提取单元从转换了分辨率的各个所述第2图像中提取所述动体图像,
所述合成单元将从转换了分辨率的各个所述第2图像中提取的所述动体图像重叠在低分辨率的所述背景图像上进行合成,生成低分辨率的所述合成图像,
所述处理单元将通过所述合成单元生成的多个低分辨率的所述合成图像存入所述总图像的头部信息中后,保存所述总图像。
6.如权利要求5所述的摄影装置,其特征在于,所述显示单元在被指示显示保存于所述记录介质中的所述总图像时,按照由所述合成单元生成的顺序显示包含在所述总图像的头部信息中的多个所述合成图像。
7.一种摄影方法,其特征在于,其包含如下步骤:
拍摄步骤,进行连续拍摄;
存储步骤,存储在按下快门键之前拍摄的多个第1图像和在按下所述快门键后拍摄的多个第2图像;和
生成步骤,至少基于多个所述第1图像,生成背景图像,所述背景图像是在所述第1图像和所述第2图像中含有的动体的背景的图像。
8.一种程序,其使计算机执行包含下述步骤的处理:
拍摄步骤,进行连续拍摄;
存储步骤,存储在按下快门键之前拍摄的多个第1图像和在按下所述快门键后拍摄的多个第2图像;和
生成步骤,至少基于多个所述第1图像,生成背景图像,所述背景图像是在所述第1图像和所述第2图像中含有的动体的背景的图像。
CN201110374795.9A 2010-11-19 2011-11-18 摄影装置和摄影方法 Expired - Fee Related CN102480598B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010258674A JP2012109898A (ja) 2010-11-19 2010-11-19 撮影装置、撮影方法、およびプログラム
JP2010-258674 2010-11-19

Publications (2)

Publication Number Publication Date
CN102480598A true CN102480598A (zh) 2012-05-30
CN102480598B CN102480598B (zh) 2014-04-02

Family

ID=46064047

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110374795.9A Expired - Fee Related CN102480598B (zh) 2010-11-19 2011-11-18 摄影装置和摄影方法

Country Status (3)

Country Link
US (1) US8810664B2 (zh)
JP (1) JP2012109898A (zh)
CN (1) CN102480598B (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103660638A (zh) * 2012-09-18 2014-03-26 卡西欧计算机株式会社 图像排列决定方法及装置、印刷装置以及显示装置
CN104023172A (zh) * 2014-06-27 2014-09-03 深圳市中兴移动通信有限公司 动态影像的拍摄方法和拍摄装置
CN104113682A (zh) * 2013-04-22 2014-10-22 联想(北京)有限公司 一种图像获取方法及电子设备
CN105049674A (zh) * 2015-07-01 2015-11-11 中科创达软件股份有限公司 一种视频图像处理方法和系统
CN106227439A (zh) * 2015-06-07 2016-12-14 苹果公司 用于捕获增强型数字图像和与之交互的设备和方法
CN106375670A (zh) * 2016-09-30 2017-02-01 努比亚技术有限公司 一种图片处理方法及终端
CN109495683A (zh) * 2018-11-30 2019-03-19 努比亚技术有限公司 一种间隔拍摄方法、设备及计算机可读存储介质
CN109922294A (zh) * 2019-01-31 2019-06-21 维沃移动通信有限公司 一种视频处理方法及移动终端
CN111010511A (zh) * 2019-12-12 2020-04-14 维沃移动通信有限公司 全景分身图像拍摄方法及电子设备
CN113810587A (zh) * 2020-05-29 2021-12-17 华为技术有限公司 一种图像处理方法及装置

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2940989B1 (en) 2014-05-02 2022-01-05 Samsung Electronics Co., Ltd. Method and apparatus for generating composite image in electronic device
US9912860B2 (en) 2016-06-12 2018-03-06 Apple Inc. User interface for camera effects
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
RU2737127C1 (ru) * 2017-06-20 2020-11-24 Сименс Акциенгезелльшафт Продление срока службы диска силовой турбины, подверженного коррозионному повреждению при эксплуатации (варианты)
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
KR102243924B1 (ko) * 2019-11-19 2021-04-23 주식회사 한글과컴퓨터 프레임 간에 동일한 배경을 갖는 동영상으로부터 움직이는 객체를 추적하기 위한 객체 추적 장치 및 그 동작 방법
US11039074B1 (en) 2020-06-01 2021-06-15 Apple Inc. User interfaces for managing media
US11212449B1 (en) * 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101009776A (zh) * 2006-01-23 2007-08-01 精工爱普生株式会社 摄像元件及其装置、摄像方法、摄像系统及图像处理装置
CN101431616A (zh) * 2007-11-06 2009-05-13 奥林巴斯映像株式会社 图像合成装置及图像合成方法
CN101656836A (zh) * 2008-08-22 2010-02-24 奥林巴斯映像株式会社 照相机、图像合成方法以及程序

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004032592A (ja) * 2002-06-28 2004-01-29 Sanyo Electric Co Ltd 画像合成回路及びこれを具えた撮影装置
JP2005311674A (ja) * 2004-04-21 2005-11-04 Toshiba Corp 映像記録表示装置および映像記録表示方法
JP2006054698A (ja) * 2004-08-12 2006-02-23 Canon Inc 手振れ補正機能を有する撮像装置
JP2006186637A (ja) * 2004-12-27 2006-07-13 Fuji Photo Film Co Ltd 画像生成装置、画像生成方法、及びプログラム
US8026945B2 (en) * 2005-07-22 2011-09-27 Cernium Corporation Directed attention digital video recordation
JP4415198B2 (ja) 2007-08-30 2010-02-17 カシオ計算機株式会社 画像合成装置及びプログラム
JP2009290860A (ja) * 2008-04-28 2009-12-10 Panasonic Corp 撮像装置
US8493409B2 (en) * 2009-08-18 2013-07-23 Behavioral Recognition Systems, Inc. Visualizing and updating sequences and segments in a video surveillance system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101009776A (zh) * 2006-01-23 2007-08-01 精工爱普生株式会社 摄像元件及其装置、摄像方法、摄像系统及图像处理装置
CN101431616A (zh) * 2007-11-06 2009-05-13 奥林巴斯映像株式会社 图像合成装置及图像合成方法
CN101656836A (zh) * 2008-08-22 2010-02-24 奥林巴斯映像株式会社 照相机、图像合成方法以及程序

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103660638A (zh) * 2012-09-18 2014-03-26 卡西欧计算机株式会社 图像排列决定方法及装置、印刷装置以及显示装置
CN104113682B (zh) * 2013-04-22 2018-08-31 联想(北京)有限公司 一种图像获取方法及电子设备
CN104113682A (zh) * 2013-04-22 2014-10-22 联想(北京)有限公司 一种图像获取方法及电子设备
CN104023172A (zh) * 2014-06-27 2014-09-03 深圳市中兴移动通信有限公司 动态影像的拍摄方法和拍摄装置
CN106227439A (zh) * 2015-06-07 2016-12-14 苹果公司 用于捕获增强型数字图像和与之交互的设备和方法
CN105049674A (zh) * 2015-07-01 2015-11-11 中科创达软件股份有限公司 一种视频图像处理方法和系统
CN106375670A (zh) * 2016-09-30 2017-02-01 努比亚技术有限公司 一种图片处理方法及终端
CN109495683A (zh) * 2018-11-30 2019-03-19 努比亚技术有限公司 一种间隔拍摄方法、设备及计算机可读存储介质
CN109922294A (zh) * 2019-01-31 2019-06-21 维沃移动通信有限公司 一种视频处理方法及移动终端
CN109922294B (zh) * 2019-01-31 2021-06-22 维沃移动通信有限公司 一种视频处理方法及移动终端
CN111010511A (zh) * 2019-12-12 2020-04-14 维沃移动通信有限公司 全景分身图像拍摄方法及电子设备
CN113810587A (zh) * 2020-05-29 2021-12-17 华为技术有限公司 一种图像处理方法及装置
CN113810587B (zh) * 2020-05-29 2023-04-18 华为技术有限公司 一种图像处理方法及装置

Also Published As

Publication number Publication date
US20120127346A1 (en) 2012-05-24
CN102480598B (zh) 2014-04-02
JP2012109898A (ja) 2012-06-07
US8810664B2 (en) 2014-08-19

Similar Documents

Publication Publication Date Title
CN102480598B (zh) 摄影装置和摄影方法
CN105609035B (zh) 图像显示装置及方法
CN104885440B (zh) 图像处理装置、摄像装置及图像处理方法
CN101739206A (zh) 图像处理设备、图像显示方法、及图像显示程序
CN101867723A (zh) 图像处理装置、摄像装置及图像再生装置
CN104782110B (zh) 图像处理装置、摄像装置及图像处理方法
CN102209195A (zh) 成像装置、图像处理装置、图像处理方法以及程序
CN102209142A (zh) 成像装置、图像处理装置、图像处理方法以及程序
CN101256763A (zh) 图像显示控制装置
CN106057146A (zh) 摄影装置、专用集成电路
CN101676913A (zh) 图像检索装置、数字照相机以及图像检索方法
CN102256059A (zh) 摄影装置及显示控制电路
CN103299227A (zh) 图像捕获设备和图像捕获方法
CN101490708B (zh) 图像处理设备、图像处理方法和程序
CN101827214A (zh) 图像处理装置及图像处理方法
CN105051600B (zh) 图像处理装置、摄像装置以及图像处理方法
CN100474890C (zh) 图像显示装置
US20120194544A1 (en) Electronic equipment
CN103973966A (zh) 摄像装置、摄像方法
CN103716534A (zh) 摄像装置及合成图像的方法
CN106210506A (zh) 图像传感器和摄像装置
JP6948810B2 (ja) 画像処理システム
CN101031056B (zh) 图像处理装置及方法
JP2006081224A (ja) 電子スチルカメラ及び画像加工方法
CN101500090B (zh) 图像处理装置,图像处理方法和程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140402

Termination date: 20141118

EXPY Termination of patent right or utility model