CN101656836A - 照相机、图像合成方法以及程序 - Google Patents

照相机、图像合成方法以及程序 Download PDF

Info

Publication number
CN101656836A
CN101656836A CN 200910167430 CN200910167430A CN101656836A CN 101656836 A CN101656836 A CN 101656836A CN 200910167430 CN200910167430 CN 200910167430 CN 200910167430 A CN200910167430 A CN 200910167430A CN 101656836 A CN101656836 A CN 101656836A
Authority
CN
China
Prior art keywords
image
mentioned
synthetic
picture frame
common
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 200910167430
Other languages
English (en)
Other versions
CN101656836B (zh
Inventor
志村和彦
丸山淳
上村达之
野中修
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Imaging Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Imaging Corp filed Critical Olympus Imaging Corp
Publication of CN101656836A publication Critical patent/CN101656836A/zh
Application granted granted Critical
Publication of CN101656836B publication Critical patent/CN101656836B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Studio Circuits (AREA)

Abstract

本发明提供照相机、图像合成方法以及程序,其效果是即使不准备特殊的广角镜头等也能够表现如全景那样的广阔感并且能够在宏大的背景图像中表现被摄体的运动。该照相机具有:动态图像记录部(9a),其记录连续拍摄到的图像帧;类似提取部(5c),其判定连续拍摄到的图像帧的共同部图像并进行提取;合成部(7a),其合成多个共同部图像来得到背景图像;以及动态图像合成部(7b),其在背景图像上依次合成连续拍摄到的图像帧。

Description

照相机、图像合成方法以及程序
技术领域
本发明涉及照相机、图像合成方法以及程序,具体而言,涉及能够根据动态图像来合成具有全景那样的宽度的图像的照相机、图像合成方法以及程序。
背景技术
近年来,随着数字图像的普及,已经开始提供各种图像加工技术,能够以以往未曾想到的方式来欣赏图像。由于照相机也实现了数字图像化,因此能够简单地进行动态图像摄影。此外,随着图像的数字化,容易通过数字变焦来扩大显示图像的一部分,用于远距离的被摄体。数字变焦用于缩小视野的方向,相反,也在照相机上搭载用于扩大摄影范围的技术。
例如,在专利文献1中公开了下述摄像装置:连接分割图像来进行图像合成,得到再现广阔视野的全景图像。
【专利文献1】日本特许第3804313号公报
上述专利文献1所公开的摄像装置能够扩大摄影范围。但是,该摄像装置是以被摄体静止为前提的,只能应用于像风景那样静止的图像。即,专利文献1所公开的摄像装置不适于有运动的被摄体的摄影。
发明内容
本发明正是鉴于上述问题而完成的,其目的在于提供如下的照相机、图像合成方法以及程序,即使不准备特殊的广角镜头等也能够表现如全景那样的广阔感并且能够在宏大的背景图像中表现被摄体的运动。
为了实现上述目的,第一发明的照相机具有:连续图像记录部,其记录连续拍摄到的图像帧;共同部图像判定部,其判定上述连续拍摄到的图像帧的共同部图像;背景合成部,其用于取得合成了多个上述共同部图像的图像;以及动态图像合成部,其依次合成上述背景合成部的结果和上述连续拍摄到的图像帧。
第二发明的照相机是在上述第一发明中,上述照相机还具有运动检测部,该动作检测部检测当照相机的朝向变化时的运动方向,上述共同部图像判定部在上述连续拍摄到的图像帧的下一帧图像中,利用与上述运动检测部所检测到的上述运动方向相反方向的图像端部的图像,来判定上述共同部图像。
第三发明的照相机是在上述第二发明中,上述照相机还具有粘贴用空白赋予部,该粘贴用空白赋予部对上述共同部图像赋予粘贴部,在上述连续拍摄到的图像的前面图像中,利用与上述运动检测部所检测到的上述运动方向相反方向的图像端部的图像,来判定上述粘贴用空白赋予部。
第四发明的照相机是在上述第一发明中,上述动态图像合成部使上述连续拍摄到的图像帧的各帧中的上述共同部图像的位置相对于上述背景合成部的结果一致,且除去上述背景合成部的结果中的相应帧宽度的的背景图像,用上述对应的帧来置换该除去的图像并进行显示。
第五发明的图像再生装置具有:共同部提取部,其在连续拍摄到的图像帧之间提取共同部图像;背景合成部,其依次合成多个上述提取出的共同部图像,并生成背景图像;以及动态图像合成部,其从上述背景图像中检测与上述连续拍摄到的图像帧共同的部分,根据该共同的部分来置换成上述图像帧并合成动态图像。
第六发明的图像再生装置是在上述第五发明中,上述动态图像合成部在由上述背景合成部完成了背景图像生成之后,依次置换上述图像帧并合成动态图像。
第七发明的图像再生装置是在上述第五发明中,交替地反复由上述背景合成部进行的基于上述图像帧的上述背景图像的生成、和由上述动态图像合成部进行的上述动态图像的合成。
第八发明的图像再生装置是在上述第五发明中还具有存储部,该存储部存储上述连续拍摄到的图像帧,上述动态图像合成部依次读出上述存储部中存储的上述图像帧,并且在上述背景图像上合成上述动态图像。
第九发明的图像合成方法具有以下步骤:记录连续拍摄到的图像帧;提取上述连续拍摄到的图像帧的共同部图像;合成多个上述共同部图像并取得背景图像;以及在上述背景图像上依次合成上述连续拍摄到的图像帧,并合成动态图像。
第十发明的图像合成方法具有以下步骤:在连续拍摄到的图像帧之间提取共同部图像;依次合成多个上述提取出的共同部图像,并生成背景图像;从上述背景图像中检测与上述连续拍摄到的图像帧共同的部分,根据该共同的部分来置换成上述图像帧并合成动态图像。
第十一发明的程序使计算机执行下述步骤:记录连续拍摄到的图像帧的步骤;判定上述连续拍摄到的图像帧的共同部图像的步骤;得到合成了多个上述共同部图像的图像的步骤;以及在上述合成了多个共同部图像的图像上依次合成上述连续图像帧的步骤。
第十二发明的程序使计算机执行下述步骤:在连续拍摄到的图像帧之间提取共同部图像的步骤;依次合成多个上述提取出的共同部图像,并生成背景图像的步骤;以及从上述背景图像中检测与上述连续拍摄到的图像帧共同的部分,根据该共同的部分来置换成上述图像帧并合成动态图像的步骤。
根据本发明能够提供如下的照相机、图像合成方法以及程序,即使不准备特殊的广角镜头等也能够表现如全景那样的广阔感,并且能够在宏大的背景图像中表现被摄体的运动。
附图说明
图1是示出本发明第1实施方式的照相机的结构的框图。
图2是示出在本发明第1实施方式的照相机中动态拍摄到的图像中的各帧图像的图。
图3是示出关于本发明第1实施方式的照相机、被摄体在背景图像中运动的状况的动态图像,(a)是初始阶段的图像,(b)是(a)之后的图像。
图4是说明在本发明第1实施方式的照相机中生成背景图像的图,(a)是最初的帧的图像,(b)是下一帧的图像,(c)是提取出两个图像的共同部(部分背景图像)的图,(d)与(b)相同是下一帧的图像,(e)是再下一个的图像,(f)是提取出下一帧和再下一帧的两个图像的共同部(部分背景图像)的图,(g)是对共同部(部分背景图像)进行合成后的图。
图5是说明在本发明第1实施方式的照相机中动态图像的生成方法的图,(a)是背景图像的图,(b)(c)是说明将背景图像的一部分置换成构成动态图像的帧图像来生成动态图像的图。
图6是说明在本发明第1实施方式的照相机中动态图像的生成办法的图。
图7是本发明第1实施方式的照相机中的背景图像合成的流程图。
图8是本发明第1实施方式的照相机中的动态图像显示的流程图。
图9是示出在本发明第2实施方式的照相机中的背景图像的图,(a)~(c)依次示出背景图像延长的状况。
图10是本发明第2实施方式的照相机中的背景图像合成的流程图。
标号说明
1、控制部;2、镜头;3、摄像部;4、运动判定部;5a、第1缓存器;5b、第2缓存器;5c类似提取部;5d、第3缓存器;5e、空白部;6、图像处理部;7a、合成部;7b、动态图像合成部;8、显示部;9a、动态图像记录部;9b、背景记录部;10、照相机;21a~21e、帧图像;22、山脉;23、树;24、人物;24a、人物的部分;25a~25b、部分背景图像(共同部分);26a~26b空白部(粘贴部);27、背景图像;27a~27c、背景图像;27e、背景图像的一部分
具体实施方式
以下,根据附图使用适用本发明的照相机来说明优选的实施方式。图1是示出本发明的第1实施方式的照相机10的结构的框图。照相机10是数码相机,可以拍摄静止图像和动态图像。在照相机10的内部设置有控制部1、操作部1a、镜头2、摄像部3、运动判定部4、第1缓存器5a、第2缓存器5b、类似提取部5c、第3缓存器5d、空白部5e、图像处理部6、合成部7a、动态图像合成部7b、显示部8、动态图像记录部9a以及背景记录部9b。
控制部1由CPU(Central Processing Unit:中央处理器)等构成,并与该照相机10的各部连接,根据内置的程序来进行总体控制。操作部1a包括释放按钮、菜单按钮、再生按钮等操作部件,当用户操作了操作部1a时,控制部1根据操作向各部输出控制信号。
镜头2是用于形成被摄体像的光学镜头。摄像部3包含摄像元件及其读取电路等,将由镜头2形成的被摄体像转换成图像数据。运动判定部4输入来自摄像部3的图像数据,检测照相机10的运动方向。即,对连续得到的图像进行比较,判定照相机10的摄影画面在哪个方向上运动。
第1缓存器5a是用于临时存储来自摄像部3的图像数据的存储部。第2缓存器5b是用于如下用途的存储部:在向第1缓存器5a临时存储图像数据时,将之前临时存储在第1缓存器5a中的图像数据转发到第2缓存器5b进行临时存储。
类似提取部5c对分别临时存储在第1缓存器5a和第2缓存器5b中的图像数据的端部侧进行比较,仅提取出类似的部分(以下,将类似的部分称为部分背景图像(参照后述图4中的25a、25b))。这里,端部侧是相对于运动判定部4所检测到的照相机10的运动方向位于后侧的端部侧。
空白部5e仅提取临时存储在第1缓存器5a中的图像数据的端部侧来作为空白部(也称为粘贴部)。另外,空白部的位置是在运动判定部4所检测到的照相机10的运动方向的相反侧。第3缓存器5是临时存储由类似提取部5c提取出的部分背景图像、和由空白部5e提取出的空白部的存储部。
合成部7a依次合成临时存储在第3缓存器5d中的部分背景图像。即,每当从摄像部3向第1缓存器5a输出构成动态图像的各帧图像数据时,在第3缓存器5d中临时存储部分背景图像和空白部,并输出到合成部7a。每当输出部分背景图像时,合成部7a以部分背景图像的一部分与空白部重复的方式来贴合部分背景图像,并生成背景图像。即,每当输出各帧图像数据时,部分背景图像逐渐向空白部的相反方向延伸,成为如全景图像那样的背景图像。
图像处理部6进行用于减少存储容量的图像压缩等图像处理。由图像处理部6以JPEG形式或动态JPEG形式等对由合成部7a生成的背景图像的图像数据、和从摄像部3输出的构成动态图像的各帧图像数据进行压缩等的图像处理。
背景记录部9b记录由合成部7a生成、并被图像处理部6压缩处理后的背景图像的图像数据。动态图像记录部9a记录从摄像部3输出的背景分离处理前的动态图像。动态图像记录部9a和背景记录部9b可分别设置,也可以在同一记录介质中分配至不同的区域。
动态图像合成部7b在背景记录部9b中记录的背景图像上合成记录在动态图像记录部9a中的动态图像。即,动态图像合成部7b针对构成动态图像的各帧来检测与背景图像一致的部分,将该检测出的部分置换成动态图像来合成图像。由此,能够合成如在宽阔的风景中奔驰的图像。
显示部8包含液晶监视器等显示装置,其再生显示由动态图像合成部7b合成的动态图像或者记录在动态图像记录部9a中的动态图像。另外,不仅将动态图像合成部7b所合成的图像数据显示在显示部8上,还能够将该图像数据记录在动态图像记录部9a等中。
接下来,使用图2和图3对本实施方式中合成的动态图像进行说明。图2示出在以山脉22和树23为背景动态地拍摄快跑的人物24的情况下构成动态图像的各帧21a~21d。可以通过依次再生各帧21a~21d来作为动态图像进行欣赏。
如图2所示,当连续拍摄在广阔的风景中人物正在奔跑的状况、小鸟正在飞翔的状况、交通工具等正在飞驰的状况时,不能在一帧中显现全部的广阔背景。可拍摄多帧图像来描绘出本来的广阔感。
因此,在本实施方式中,如图3所示,根据构成动态图像的多个帧来生成背景图像27,在该背景图像27中表现作为被摄体的人物24运动的状况。即,图3(a)示出人物24从右侧往左侧奔跑的状况,图3(b)示出在图3(a)时刻之后的时刻人物24在左侧奔跑的状况。
这样,在本实施方式中,能够再现被摄体在画面内运动的状况以及与该运动状况相对应的宽广背景。现有的照相机能够在同一位置依次再生静止的全景或如图2所示的各帧,但无法表现出运动和广阔感。与此相对,本实施方式的照相机10能够表现出运动和广阔感。
接下来,使用图4和图5来说明背景图像27的生成方法。图4(a)、(b)示出了连续得到的摄影帧。在各摄影帧的作为被摄体的人物24的后面侧,作为背景存在共同的区域。即,因为摄影者是追赶人物24的运动,所以向人物24运动方向的相反侧稍稍偏移,但是背景是共同的。在图4(a)、(b)中的共同部分(部分背景图像)25a上加斜线示出。
从该共同部分(部分背景图像)25a到中央的范围内,人物24的一部分24a(在图中为脚的部分)发生变化,因此背景和人物24在两个图像(图4(a)和图4(b))上不同,类似提取部5c不对该部分24a进行类似检测。因此,作为两个图像类似而被提取的部分是施加了斜线的共同部分(部分背景图像)25a,类似提取部5c只提取出该长方形状的共同部分(部分背景图像)25a。另外,在本实施方式中,在将画面横向等分成8个的长方形范围内提取类似部分。针对该分割数量和该形状可适当地进行变更。
图4(c)是取出共同部分(部分背景图像)25a、还从图4(a)取出空白部(粘贴部)26a并将两者合成后的图。空白部26a是与部分背景图像25a邻接的部分。该部分被利用为与下一部分背景图像25b合成时的空白部(粘贴部)。
通过比较图4(a)和图4(b)的帧来提取部分背景图像25a,然后通过比较图4(d)和图4(e)的帧来提取部分背景图像25b。即,图4(d)是与图4(b)相同的图像,但是由于要与下一帧进行比较,所以其提取出的共同部分(部分背景图像)的位置不同于图4(b)的情况。部分背景图像25b以与部分背景图像25a相同的方式被提取,此外还提取出空白部(粘贴部)26a。
这样,提取出带有长方形状的空白部26a、26b的部分背景图像25a、25b,然后以空白部26a重叠到部分背景图像25a上的方式,由合成部7a进行图像合成,从而得到如图4(g)所示的背景图像。之后,每当从摄像部3输出构成动态图像的摄影帧的图像数据时,依次比较摄影帧,生成并合成部分背景图像等,由此合成如图5(a)所示的背景图像27。后面会使用图7所示的流程图来叙述该背景图像的合成步骤。
接着,使用图5和图6来说明在背景图像27上嵌入动态图像的摄影帧并生成动态图像的方法。在如前所述地生成背景图像27后,接着在该背景图像27中依次检测与动态图像的各帧类似的部分,将该类似部分的图像依次置换到背景图像27中,由此得到在如图3所示的全景风景中人物24正在奔跑这样的动态图像。
首先,从图6所示的背景图像27中检测与构成动态图像的各帧21e的部分背景图像25e一致的部分背景图像25e′。当检测出一致部分时,从背景图像27中除去与嵌入图像相当的部分(部分背景图像21e的宽度Y)27e,在该部分上嵌入帧21e。如图5(b)、(c)所示,可以通过依次错开构成动态图像的各帧,来得到如人物24正在奔跑这样的动态图像。该动态图像的合成是由动态图像合成部7b来进行的。此外,关于动态图像的合成步骤,在后面会使用图8所示的流程图进行描述。
接下来,使用图7所示的流程图来说明图4和图5所说明的背景图像合成。通过由控制部1控制各个部来执行该背景图像合成的流程。
进入背景图像合成的流程后,首先进行运动判定(S1)。在该步骤中,运动判定部根据由摄像部3取得的图像的周边部的图像数据,来检测运动矢量,并检测视野范围正在往哪儿移动。如前所述,在本实施方式中,在照相机10的移动方向的后方合成背景图像,根据该运动方向来确定合成背景图像的方向。
接下来,第1缓存器取得图像(S2)。在该步骤中,将来自摄像部3的图像数据临时存储在第1缓存器5a中。然后,进行是否取得了下一图像的判定(S3)。摄像部3以预定时间间隔取得图像数据,在该步骤中,判定是否经过了预定时间并读出构成动态图像的下一摄影帧的图像数据而取得了图像。
在步骤S3的判定结果是取得了下一图像的情况下,向第2缓存器进行转发(S4)。在该步骤中,将临时存储在第1缓存器5a中的图像数据转发到第2缓存器5b,将新得到的图像数据临时存储在第1缓存器5a中。另一方面,在步骤S3的判定结果是未取得下一图像的情况下,判定可否对临时存储在第1缓存器5a和第2缓存器5b中的两个图像进行比较(S11)。在该步骤中,两个缓存器内临时存储有图像数据,判定是否尚未进行比较。
在步骤S11的判定结果是不能比较的情况下,进入步骤S18。另一方面,在步骤S11的判定结果是能够比较的情况下,提取第1缓存器中的后面部分与第2缓存器中的共同部分,并对此进行记录(S12)。在该步骤中,如图4所说明的那样,根据后取得的图像(对应于图4(a)所示的图像,临时存储在第1缓存器5a中)的运动方向的后侧部分,与先前取得的图像(对应于图4(b)所示的图像,转发到了第2缓存器5b)进行比较,并提取出一致的部分背景图像25a,将其临时存储在第3缓存器5d中。
接下来,从第2缓存器中将共同部的后面存储为粘贴部(S13),如图4(c)、(f)中所说明的那样,从先前取得并临时存储在第2缓存器5b内的图像数据中复制作为粘贴部的空白部26a、26b,并将其与部分背景图像25a、25b一起临时存储。
接下来,进行是否能够合成的判定(S14)。即,在步骤S12、S13中已临时存储了用于背景图像合成的部分背景图像25a、25b和空白部26a、26b,因此判定是否能够使用这些数据来进行图像合成。在该判定结果是不能合成的情况下,进入步骤S18。
另一方面,如果步骤S14中的判定结果是能够合成,则接着对之前的共同部(部分背景图像)和粘贴部进行重叠来合成图像(S15)。即,如图4(g)所示,使用长方形状的部分背景图像25a、25b和空白部26a、26b来合成背景图像27。该合成是由合成部7a来进行的。
接下来,记录在步骤S15中合成的各帧和共同部(部分背景图像)(S16)。各帧是构成动态图像的图像数据,其记录在动态图像记录部9a中,合成了共同部(部分背景图像)的背景图像27记录在背景记录部9b中。
然后,判定背景图像合成是否结束(S18)。在一边进行动态图像摄影一边进行背景图像合成的情况下,当该动态图像摄影结束时,判定为背景图像合成结束。另外,也可以预先拍摄动态图像并对其进行记录,针对该记录的动态图像进行背景图像合成,此时,在采用预先记录的全部动态图像帧进行了背景图像合成的情况下判定为结束。
在步骤S18中的判定结果不是结束的情况下,返回步骤S3,取得下一图像并执行上述动作。另一方面,当判定的结果是结束的情况下,返回到对照相机10进行总体控制的最初流程。
接下来,在前述的背景图像上重叠动态图像来进行合成,使用图8所示的流程图,说明用于生成如图3所示的动态图像的动态图像显示的流程。
进入动态图像显示的流程后,首先显示合成后的背景图像27(S21)。在该步骤中,在显示部8上显示由合成部7a合成的如图5(a)所示的背景图像27。然后,进行是否是预定定时的判定(S22)。在该步骤中,判定是否是从动态图像记录部9a读出的动态图像的每个帧的定时,在不是预定定时的情况下,等待成为预定定时。
当在步骤S22中的判定结果为预定定时时,接着进行是否有未合成图像的判定(S23)。在该步骤中,判定是否从动态图像记录部9a读出了全部的构成动态图像的摄影帧。在该判定结果是没有未合成图像的情况下,返回到进行照相机10的总体控制的流程。
另一方面,在步骤S23中的判定结果是存在未合成图像的情况下,检测两个图像的共同部(S24)。在该步骤中,如在图6中说明的那样,检测背景图像27的与相当于一个动态图像帧的帧图像21e的部分背景图像25e相对应的部分25e′。
然后,如图6中说明的那样,确定从部分背景图像(共同部)25e到其相反侧的宽度Y(S25),从背景图像27中除去相当于该宽度Y部分的图像(S26)。然后,在除去的部分嵌入动态图像的帧图像21e并合成图像(S27)。即,在这些步骤中,在背景图像27中,从部分背景图像(共同部分)开始除去与嵌入图像的宽度相当的宽度Y的部分,在该部分嵌入所拍摄到的原图像(帧图像21e)来进行显示。在预定时间的期间内显示该合成后的图像。
接下来,从在步骤S27中合成的图像将背景恢复到背景图像27(S28)。当恢复背景时,返回步骤S22并执行上述动作。这样,通过反复执行步骤S22~S28,来依次比较背景图像27和动态图像的帧图像,针对包含共同部的宽度Y的背景图像27,置换图像来依次获得图像,从而合成动态图像。
如以上所说明的那样,在本实施方式中,能够在一次静止图像摄影所不能拍摄的全景背景中,以动态图像的方式再现移动体正在移动的状况(参照图3)。
尤其因为大画面电视机等面向于显示广阔风景,所以可预先记录由本实施方式的照相机所拍摄的图像,并与大画面电视机连接后进行再生显示。此外,可以通过再生设备来对普通的摄像机所拍摄的图像进行图像分析,进行与本实施方式相同的再生显示。
接下来,针对本发明的第2实施方式,使用图9和图10来进行说明。如图3所示,第1实施方式预先生成全景状的背景图像27,在该背景图像27中显示移动体移动的状况。在第2实施方式中,如图9所示,根据移动体的运动来延长背景图像。
即,如图9(a)~(c)所示,根据人物24的移动,背景图像27a~27c依次延长。这种显示方法在表示移动体移动的过程时是有效的,能够体验起初不知道在移动目的地有什么的刺激效果。
该第2实施方式的结构与图1所示的相同,取代图7所示的流程图,执行图10所示的背景图像合成的流程图。
该背景图像合成的流程与图7所示的流程几乎相同,取代步骤S16中的各帧和共同部区域记录,执行步骤S17的第1缓存图像合成。在第1实施方式中,在生成所有的部分背景图像25a、25b之后,对它们进行合成来生成背景图像27。但是,在第2实施方式中,每当生成部分背景图像时,都利用到此为止生成的部分背景图像来进行合成。
另外,关于步骤S18中是否结束的判定,在第1实施方式中判定是否通过所有的部分背景图像生成了背景图像27,而在第2实施方式中,如果生成了部分背景图像则暂且结束并进行动态图像显示。进行了1帧的动态图像显示时,返回背景图像合成,之后反复动态图像显示和背景图像合成。
以上,如说明的那样,按照本发明的各实施方式,根据连续拍摄的图像帧来生成背景图像,检测图像帧与背景图像共同的部分,在该共同部分处依次置换连续拍摄到的图像帧来合成动态图像。因此,即使不准备特殊的广角镜头等,也能够表现全景般的广阔感并且在宏大的背景图像中表现被摄体的运动。即,能够进行同时表现广阔的风景和移动体的运动状况的图像显示。
另外,在本实施方式中,用照相机进行拍摄并对该拍摄到的图像进行再生显示。但不限于此,照相机可以只是拍摄和动态图像记录,在再生设备中,如本实施方式所示在全景风格的背景图像中以移动体移动的方式进行再生显示。该情况下,可以依次读出所记录的动态图像数据,临时存储到第1缓存器5a和第2缓存器5b并进行转发,使用该临时存储的图像数据进行与本发明的实施方式相同的处理。
此外,作为动态图像,不仅是像电视机或电影这样的自然运动的图像,即使是帧拍摄或连拍等连续拍摄的图像,显然也能够适用本发明。
此外,在本实施方式中,作为用于摄影的设备,使用数码相机进行了说明,但是作为照相机,可以是具有动态图像等连续摄影功能的数字单反相机,可以是小型数码相机,可以是如摄像机、电影摄像机那样的动态图像专用摄像机,并且还可以是内置于移动电话或便携信息终端(PDA:Personal Digital Assist,个人数码助理)等的照相机。不管是哪一种,只要是能够连续取得图像的摄影设备,都能适用本发明。
本发明不只限于上述实施方式,在实施阶段中可以在不脱离其主旨的范围内对构成要素进行变型并具体化。另外可以通过适当组合上述实施方式中公开的多个构成要素来形成各种发明。例如,可以删除在实施方式中示出的全部构成要素中的几个。而且,还可以适当组合不同实施方式中的构成要素。

Claims (12)

1.一种照相机,其特征在于,该照相机具有:
连续图像记录部,其记录连续拍摄到的图像帧;
共同部图像判定部,其判定上述连续拍摄到的图像帧的共同部图像;
背景合成部,其用于取得合成了多个上述共同部图像的图像;以及
动态图像合成部,其依次合成上述背景合成部的结果和上述连续拍摄到的图像帧。
2.根据权利要求1所述的照相机,其特征在于,
上述照相机还具有运动检测部,该运动检测部检测当照相机的朝向变化时的运动方向,
上述共同部图像判定部在上述连续拍摄到的图像帧的下一帧图像中,利用与上述运动检测部所检测到的上述运动方向相反方向的图像端部的图像,来判定上述共同部图像。
3.根据权利要求2所述的照相机,其特征在于,
上述照相机还具有粘贴用空白赋予部,该粘贴用空白赋予部对上述共同部图像赋予粘贴部,
在上述连续拍摄到的图像的前面图像中,利用与上述运动检测部所检测到的上述运动方向相反方向的图像端部的图像,来判定上述粘贴用空白赋予部。
4.根据权利要求1所述的照相机,其特征在于,
上述动态图像合成部使上述连续拍摄到的图像帧的各帧中的上述共同部图像的位置相对于上述背景合成部的结果一致,且除去上述背景合成部的结果中的相应帧宽度的背景图像,用上述相应帧来置换该除去的图像并进行显示。
5.一种图像再生装置,其特征在于,该图像再生装置具有:
共同部提取部,其在连续拍摄到的图像帧之间提取共同部图像;
背景合成部,其依次合成多个上述提取出的共同部图像,并生成背景图像;以及
动态图像合成部,其从上述背景图像中检测与上述连续拍摄到的图像帧共同的部分,根据该共同的部分来置换成上述图像帧并合成动态图像。
6.根据权利要求5所述的图像再生装置,其特征在于,
上述动态图像合成部在由上述背景合成部完成了背景图像生成之后,依次置换上述图像帧并合成动态图像。
7.根据权利要求5所述的图像再生装置,其特征在于,
该图像再生装置交替地反复由上述背景合成部进行的基于上述图像帧的上述背景图像的生成、和由上述动态图像合成部进行的上述动态图像的合成。
8.根据权利要求5所述的图像再生装置,其特征在于,
该图像再生装置还具有存储部,该存储部存储上述连续拍摄到的图像帧,上述动态图像合成部依次读出存储在上述存储部中的上述图像帧,并且在上述背景图像上合成上述动态图像。
9.一种图像合成方法,其特征在于,该图像合成方法具有以下步骤:
记录连续拍摄到的图像帧;
提取上述连续拍摄到的图像帧的共同部图像;
合成多个上述共同部图像并取得背景图像;以及
在上述背景图像上依次合成上述连续拍摄到的图像帧,并合成动态图像。
10.一种图像合成方法,其特征在于,该图像合成方法具有以下步骤:
在连续拍摄到的图像帧之间提取共同部图像;
依次合成多个上述提取出的共同部图像,并生成背景图像;
从上述背景图像中检测与上述连续拍摄到的图像帧共同的部分,根据该共同的部分来置换成上述图像帧并合成动态图像。
11.一种程序,其特征在于,该程序使计算机执行下述步骤:
记录连续拍摄到的图像帧的步骤;
判定上述连续拍摄到的图像帧的共同部图像的步骤;
得到合成了多个上述共同部图像的图像的步骤;以及
在上述合成了多个共同部图像的图像上依次合成上述连续图像帧的步骤。
12.一种程序,其特征在于,该程序使计算机执行下述步骤:
在连续拍摄到的图像帧之间提取共同部图像的步骤;
依次合成多个上述提取出的共同部图像,并生成背景图像的步骤;以及
从上述背景图像中检测与上述连续拍摄到的图像帧共同的部分,根据该共同的部分来置换成上述图像帧并合成动态图像的步骤。
CN 200910167430 2008-08-22 2009-08-21 照相机和图像合成方法 Expired - Fee Related CN101656836B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008213816 2008-08-22
JP2008-213816 2008-08-22
JP2008213816A JP5133816B2 (ja) 2008-08-22 2008-08-22 カメラ、画像合成方法、およびプログラム

Publications (2)

Publication Number Publication Date
CN101656836A true CN101656836A (zh) 2010-02-24
CN101656836B CN101656836B (zh) 2013-06-05

Family

ID=41710897

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200910167430 Expired - Fee Related CN101656836B (zh) 2008-08-22 2009-08-21 照相机和图像合成方法

Country Status (2)

Country Link
JP (1) JP5133816B2 (zh)
CN (1) CN101656836B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102333221A (zh) * 2011-10-21 2012-01-25 北京大学 一种全景式背景预测的视频编解码方法
CN102469259A (zh) * 2010-11-01 2012-05-23 奥林巴斯映像株式会社 全景图像生成装置及全景图像生成方法
CN102480598A (zh) * 2010-11-19 2012-05-30 信泰伟创影像科技有限公司 摄影装置、摄影方法和程序
CN104361572A (zh) * 2014-11-27 2015-02-18 百度在线网络技术(北京)有限公司 图片处理方法和装置
CN104618572A (zh) * 2014-12-19 2015-05-13 广东欧珀移动通信有限公司 一种终端的拍照方法及装置
CN105049674A (zh) * 2015-07-01 2015-11-11 中科创达软件股份有限公司 一种视频图像处理方法和系统
CN106303235A (zh) * 2016-08-11 2017-01-04 广东小天才科技有限公司 拍照处理方法及装置
JP2017152931A (ja) * 2016-02-24 2017-08-31 株式会社Tbwa Hakuhodo 撮影システム及びプログラム
CN113170037A (zh) * 2018-12-06 2021-07-23 华为技术有限公司 一种拍摄长曝光图像的方法和电子设备

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5218071B2 (ja) * 2009-01-07 2013-06-26 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
JP2013008124A (ja) * 2011-06-23 2013-01-10 Nikon Corp 画像処理装置及びプログラム
WO2014178234A1 (ja) * 2013-04-30 2014-11-06 ソニー株式会社 画像処理装置、画像処理方法、及びプログラム
CN105657256B (zh) * 2015-12-30 2019-03-29 联想(北京)有限公司 一种图片处理方法和电子设备
JP6241503B2 (ja) * 2016-06-08 2017-12-06 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4005322B2 (ja) * 2001-05-23 2007-11-07 株式会社コナミデジタルエンタテインメント 画像処理装置、画像処理方法、プログラム及び自動写真撮影装置
JP4180083B2 (ja) * 2003-09-26 2008-11-12 シャープ株式会社 パノラマ画像作成装置及びパノラマ画像撮影装置
JP2005157847A (ja) * 2003-11-27 2005-06-16 Seiko Epson Corp 画像処理装置および処理方法
JP2007142565A (ja) * 2005-11-15 2007-06-07 Olympus Imaging Corp 撮像装置及びその撮像方法
CN1889625A (zh) * 2006-08-02 2007-01-03 智多微电子(上海)有限公司 参数可配置的图像定位叠加模块及方法
JP2009077362A (ja) * 2007-08-24 2009-04-09 Sony Corp 画像処理装置、動画再生装置、これらにおける処理方法およびプログラム

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102469259B (zh) * 2010-11-01 2015-06-17 奥林巴斯映像株式会社 全景图像生成装置及全景图像生成方法
CN102469259A (zh) * 2010-11-01 2012-05-23 奥林巴斯映像株式会社 全景图像生成装置及全景图像生成方法
CN102480598A (zh) * 2010-11-19 2012-05-30 信泰伟创影像科技有限公司 摄影装置、摄影方法和程序
CN102480598B (zh) * 2010-11-19 2014-04-02 信泰伟创影像科技有限公司 摄影装置和摄影方法
CN102333221B (zh) * 2011-10-21 2013-09-04 北京大学 一种全景式背景预测的视频编解码方法
CN102333221A (zh) * 2011-10-21 2012-01-25 北京大学 一种全景式背景预测的视频编解码方法
CN104361572A (zh) * 2014-11-27 2015-02-18 百度在线网络技术(北京)有限公司 图片处理方法和装置
CN104618572A (zh) * 2014-12-19 2015-05-13 广东欧珀移动通信有限公司 一种终端的拍照方法及装置
CN105049674A (zh) * 2015-07-01 2015-11-11 中科创达软件股份有限公司 一种视频图像处理方法和系统
JP2017152931A (ja) * 2016-02-24 2017-08-31 株式会社Tbwa Hakuhodo 撮影システム及びプログラム
CN106303235A (zh) * 2016-08-11 2017-01-04 广东小天才科技有限公司 拍照处理方法及装置
CN113170037A (zh) * 2018-12-06 2021-07-23 华为技术有限公司 一种拍摄长曝光图像的方法和电子设备
CN113170037B (zh) * 2018-12-06 2023-08-22 华为技术有限公司 一种拍摄长曝光图像的方法和电子设备

Also Published As

Publication number Publication date
CN101656836B (zh) 2013-06-05
JP5133816B2 (ja) 2013-01-30
JP2010050795A (ja) 2010-03-04

Similar Documents

Publication Publication Date Title
CN101656836B (zh) 照相机和图像合成方法
US8199221B2 (en) Image recording apparatus, image recording method, image processing apparatus, image processing method, and program
JP4678404B2 (ja) 撮像装置、その制御方法およびプログラム
CN109309796A (zh) 使用多个相机获取图像的电子装置和用其处理图像的方法
KR20100043139A (ko) 화상 처리 장치, 동화상 재생 장치, 이들에서의 처리 방법 및 프로그램
US9413922B2 (en) Photographing apparatus and method for synthesizing images
JP2012099876A (ja) 画像処理装置、撮像装置、画像処理方法、プログラム
CN102572258A (zh) 能再现全景图像的图像再现装置
US8767096B2 (en) Image processing method and apparatus
CN102148931A (zh) 摄像装置
JP4407549B2 (ja) 撮影装置、動画再生装置、動画記録再生プログラム
JP2015053741A (ja) 画像再生装置
US20210281747A1 (en) Image capture device with an automatic image capture capability
CN102790852B (zh) 图像合成显示装置、图像合成显示方法及摄影设备
JP2005348178A (ja) 動画記録再生装置、画像表示方法、及びプログラム
JP4178878B2 (ja) 画像処理方法及び装置
JP2008005427A (ja) 撮像装置および撮像方法、並びにプログラム
JP6893322B2 (ja) 画像生成システム、画像表示システム、画像生成方法、画像生成プログラム、及び移動体
JP6600397B2 (ja) ビデオシーケンスのフレームを選択する方法、システム、及び、装置
WO2019000427A1 (zh) 一种图像处理方法、装置及电子设备
JP2005328279A (ja) 記録装置
JP5602818B2 (ja) カメラ、画像再生装置、画像合成方法、およびプログラム
JP2007324663A (ja) ビデオカメラ
CN105794193A (zh) 图像处理设备、图像处理方法和程序
WO2021181965A1 (ja) 画像処理装置、画像処理方法、プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20151210

Address after: Tokyo, Japan, Japan

Patentee after: Olympus Corporation

Address before: Tokyo, Japan

Patentee before: Olympus Imaging Corp.

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130605

Termination date: 20190821