CN101312501B - 摄像装置和显示方法 - Google Patents

摄像装置和显示方法 Download PDF

Info

Publication number
CN101312501B
CN101312501B CN2008100993466A CN200810099346A CN101312501B CN 101312501 B CN101312501 B CN 101312501B CN 2008100993466 A CN2008100993466 A CN 2008100993466A CN 200810099346 A CN200810099346 A CN 200810099346A CN 101312501 B CN101312501 B CN 101312501B
Authority
CN
China
Prior art keywords
image
view data
unit
camera head
movement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2008100993466A
Other languages
English (en)
Other versions
CN101312501A (zh
Inventor
伊藤健世
藤井贵史
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aozhixin Digital Technology Co.,Ltd.
Original Assignee
Olympus Imaging Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Imaging Corp filed Critical Olympus Imaging Corp
Publication of CN101312501A publication Critical patent/CN101312501A/zh
Application granted granted Critical
Publication of CN101312501B publication Critical patent/CN101312501B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明通过对构成全景图像的图像的摄影时机进行辅助,使用户以适当的速度且向适当的方向进行摇摄操作,由此使用便利性良好,能获得没有被摄体抖动的全景图像。数字照相机具有:显示部(15),其显示由摄像元件(2)等获得的图像数据所涉及的图像;及CPU(13),其进行以下处理:根据在第1时刻由摄像元件(2)等获得的图像数据所涉及的第1图像和在第1时刻之后的第2时刻由摄像元件(2)等获得的图像数据所涉及的第2图像,检测第2图像所表现的被摄体位置相对于第1图像所表现的被摄体位置的移动量、及与显示在显示部(15)上的图像一起,在显示部(15)上显示所检测出的移动量作为移动轨迹的处理等。

Description

摄像装置和显示方法 
技术领域
本发明涉及搭载了全景摄影功能的摄像装置及其显示方法。 
背景技术
在作为摄像装置的一例的数字照相机中,具有如下的照相机,作为摄影功能,除了通常摄影功能以外还搭载了全景摄影功能。 
图10是概念性地示出这种数字照相机中的通常摄影功能下的通常摄影和全景摄影功能下的全景摄影的图。如该图所示,在通常摄影中,当用户按下一次快门按钮(释放按钮)时,进行一次摄影,获得一张图像101。另一方面,在全景摄影中,当用户按下一次快门按钮时,进行第一次摄影,当进行摇摄操作时,自动进行多次第二次及以后的摄影。而且,将各摄影所获得的图像(在该图的例子中为图像102~105)组合起来制作一张全景图像106。根据这种全景摄影功能,用户不需要注意第二次及以后的摄影的快门时机,能够方便地进行全景摄影。另外,在全景摄影功能中,除此之外,也可以通过快门按钮手动进行第二次及以后的摄影的快门时机,或者,可以设定手动进行或自动进行第二次及以后的摄影的快门时机。 
但是,专利文献1涉及用于组合图像的重叠技术,提出了如下方法:根据由三维陀螺仪等各种传感器测定的数字照相机摄影时的移动信息,运算数字照相机摄影时的移动方向和移动距离,提取出相邻的被摄体帧,来制作全景图像。并且,专利文献2涉及用于适当维持摄影视场角的辅助线的显示技术,提出了如下方法:使用显示在显示装置上的辅助线,用户能够维持照相机的水平状态。进而,专利文献3涉及用于适当进行摇摄操作的摇摄状态的显示技术,提出了如下方法:在取景器等中显示全景摄影时的摇摄状态,用户能够进行适当的摇摄操作。 
【专利文献1】日本特开2004-128683号公报 
【专利文献2】日本特开2006-324948号公报 
【专利文献3】日本特开平8-223481号公报 
使用上述这种全景摄影功能进行摄影时,由于用户对数字照相机的摇摄操作,在通过第二次及以后的摄影所获得的图像中表现的被摄体中产生抖动(以下简称为“被摄体抖动”),有时无法获得用户满意的全景图像。认为其原因是,在第二次及以后的摄影时,用户对数字照相机的摇摄操作相对于数字照相机的摄影条件(例如快门速度等)提前。因此,期望如下的技术:至少在第二次及以后的各摄影时进行辅助,以使用户能够以适当的速度且向适当的方向进行数字照相机的摇摄操作。 
即使使用上述专利文献1或2提出的方法也无法实现这种技术。专利文献1和2本来也不是作为防止由摇摄操作产生的被摄体抖动的技术而提出的,完全没有公开其对策。另一方面,如果使用上述专利文献3所提出的方法,也许能够适当进行摇摄操作,但是,因为不知道在什么时机对构成全景图像的图像进行摄影,所以,用户必须始终以使摇摄指示器位于基准指示器的中心的方式进行摇摄操作,使用便利性差。 
发明内容
鉴于上述情况,本发明的目的在于,提供摄像装置及其显示方法,通过对构成全景图像的图像的摄影时机进行辅助,以使用户以适当的速度且向适当的方向进行摇摄操作,由此,使用便利性良好,而且能够获得没有被摄体抖动的全景图像。 
为了达成上述目的,本发明的第1方面的摄像装置一边使装置相对于被摄体移动一边进行多张图像的摄像,其特征在于,该摄像装置具有:摄像单元,其对被摄体进行摄像并获得图像数据;显示单元,其显示由所述摄像单元获得的图像数据所涉及的图像;移动量检测单元,其根据在第1时刻由所述摄像单元获得的图像数据所涉及的第1图像和在所述第1时刻之后的第2时刻由所述摄像单元获得的图像数据所涉及的第2图像,检测所述第2图像中所表现的被摄体的位置相对于所述第1图像中所表现的被摄体的位置的移动量;以及显示控制单元,其将由所述移动量检测单元检测出的移动量中提取的水平方向和垂直方向的移动量的相当量作为移动轨迹,并与显示在所述显示单元上的图像一起显示在所述显示单元上,其中水平方向和垂直方向的移动量的相当量用黑圈之间的间隔进行显示。
并且,本发明的第2方面的摄像装置的特征在于,在上述第1方面中,所述显示控制单元将从进行了静态图像的摄影的时刻到当前时刻的期间由所述摄像单元获得的图像数据所涉及的图像中所表现的被摄体位置的时间变化作为移动轨迹来显示,该移动轨迹以进行所述静态图像的摄影的时刻或者进行所述摄影指示的时刻为起点。 
并且,本发明的第3方面的摄像装置的特征在于,在上述第1方面中,当根据由所述移动量检测单元检测出的移动量,检测出距进行了静态图像的摄影的时刻之后初次由所述摄像单元获得的图像数据所涉及的图像中所表现的被摄体位置的移动量达到了所述显示单元的1个显示画面的相当量时,进行下次的静态图像的摄影。 
并且,本发明的第4方面的摄像装置的特征在于,在上述第1方面中,所述移动量检测单元根据在所述第1时刻由所述摄像单元获得的图像数据和在所述第2时刻由所述摄像单元获得的图像数据,检测移动向量,根据该移动向量,检测所述第2图像中所表现的被摄体位置相对于所述第1图像中所表现的被摄体位置的移动量。 
并且,本发明的第5方面的摄像装置的特征在于,在上述第1方面中,所述显示单元将对所述摄像单元获得的多个静态图像用图像数据所涉及的图像进行合成来生成一个合成图像时所允许的垂直方向的移动允许幅度范围,与由所述摄像单元获得的图像数据所涉及的图像一起进行显示。 
并且,本发明的第6方面的摄像装置的特征在于,在上述第1方面中,该摄像装置还具有警告单元,该警告单元在基于由所述移动量检测单元检测出的移动量的移动速度超过允许值时进行警告。 
并且,本发明的第7方面的摄像装置的特征在于,在上述第1方面 中,该摄像装置还具有:图像合成单元,其将由所述摄像单元所拍摄的多个静态图像用图像数据合成为一个图像数据;以及记录单元,其记录由所述图像合成单元合成的图像数据。 
并且,本发明的第8方面的摄像装置的特征在于,在上述第1方面中,在初次的静态图像的摄影时,将ISO灵敏度设定为最大来进行摄影,在以后的静态图像的摄影时,保持将所述ISO灵敏度设定为最大的状态、且与所拍摄的所述初次的静态图像的曝光相配地来设定快门速度而进行摄影。 
并且,本发明的第9方面的摄像装置的特征在于,在上述第1方面中,该摄像装置还具有设定单元,该设定单元设定用于引导移动该摄像装置的速度的移动速度, 
所述显示单元还显示引导标记,该引导标记用于根据由所述设定单元所设定的移动速度,引导移动该摄像装置的速度或/和下次的静态图像的摄影。 
并且,本发明的第10方面的摄像装置的特征在于,在上述第1方面中,所述显示控制单元在所述显示单元上连续显示由所述摄像单元获得的多个静态图像用图像数据所涉及的静态图像的移动轨迹。 
并且,本发明的第11方面的摄像装置的特征在于,在上述第3方面中,当根据由所述移动量检测单元检测出的移动量、检测出距进行了静态图像的摄影的时刻之后初次由所述摄像单元获得的图像数据所涉及的图像中所表现的被摄体位置的移动量达到了所述显示单元的1个显示画面的相当量时,或者根据摄影指示,将所述移动轨迹的显示位置变更为该移动轨迹的起点侧的所述显示画面内的端部。 
本发明的第12方面的摄像装置的显示方法一边使装置相对于被摄体移动一边进行多张图像的摄像,其特征在于,该显示方法具有以下步骤:根据在第1时刻对被摄体进行摄像而获得的第1图像数据和在所述第1时刻之后的第2时刻对被摄体进行摄像而获得的第2图像数据,检测所述第2图像数据所涉及的图像中所表现的被摄体位置相对于所述第1图数据所涉及的图像中所表现的被摄体位置的移动量;以及将所检测出的所述移动量与通过摄像获得的图像数据所涉及的图像一起作为移动轨迹来显示。 
根据本发明,通过对构成全景图像的图像的摄影时机进行辅助,以使用户以适当的速度且向适当的方向进行摇摄操作,由此,使用便利性良好,而且能够获得没有被摄体抖动的全景图像。 
附图说明
图1是示出作为一个实施方式的摄像装置的数字照相机的系统结构的图。 
图2是示出在全景摄影动作中显示在显示部上的画面例的图。 
图3是示意性地示出在全景摄影动作中显示在显示部上的一连串的画面例的图。 
图4是示出全景摄影动作的流程的图。 
图5是概念性地示出S8的处理的图。 
图6是示意性地示出S8的处理的图。 
图7(a)、(b)、(c)是概念性地示出S10的一部分处理的图。 
图8是概念性地说明S14的处理的图。 
图9是示意性地示出构成为可以连续显示多个静态图像的移动轨迹时的显示画面例的图。 
图10是概念性地示出通常摄影功能下的通常摄影和全景摄影功能下的全景摄影的图。 
标号说明 
1:摄影镜头;2:摄像元件;3:摄像部;4:A/D部;5:图像缓冲存储器;6:显示处理部;7:内置存储器;8:外部存储器;9:有线I/F;10:无线I/F;11:压缩解压缩部;12:图像处理部;13:CPU;14:总线;15:显示部;16:Flash ROM;17:操作部;18:麦克风(录音部);21:区域;22:移动轨迹;31、32、33:移动轨迹;41:区域;42:线;43:移动轨迹;101、102、103、104、105:图像;106:全景图像。 
具体实施方式
下面,参照附图说明本发明的实施方式。 
【实施例1】 
图1是示出作为本发明的一个实施方式的摄像装置的数字照相机的系统结构的图。 
在该图中,摄影镜头1使被摄体像成像于摄像元件2。摄像元件2例如是CCD(Charge Coupled Device:电荷耦合器件)或CMOS(Complementary Metal Oxide Semiconductor:互补金属氧化物半导体)等图像传感器,对通过摄影镜头1的作用而成像的被摄体像进行光电转换,并输出模拟电信号。摄像部3具有降低噪声分量的CDS(CorrelatedDouble Sampling:相关双采样)部以及使信号电平稳定的AGC(AutomaticGain Control:自动增益控制)部等,降低从摄像元件2输出的模拟电信号的噪声分量,并且使信号电平稳定并输出。A/D部4将从摄像部3输出的模拟电信号转换成数字电信号,作为图像数据输出该数字电信号。 
A/D部4、图像缓冲存储器5、显示处理部6、内置存储器7、外部存储器8、有线I/F 9、无线I/F 10、压缩解压缩部11、图像处理部12、CPU 13经由总线14连接。 
图像缓冲存储器5例如是DRAM(Dynamic Random Access Memory:动态随机存取存储器)等存储器,用于临时保存从A/D部4输出的图像数据、图像处理部13处理中的图像数据等。例如,临时保存静态图像用的图像数据、实时图像(实况图像)用的图像数据等。另外,所谓实时图像,是指在显示部15上实时显示成像于摄像元件2上的被摄体像时的图像。 
显示处理部6进行根据图像数据生成显示部15可以显示的图像信号并输出给显示部15的处理。显示部15例如是LCD(Liquid Crystal Display:液晶显示器)等,在显示画面上显示与从显示处理部6输出的图像信号对应的图像。 
内置存储器7是预先内置于该数字照相机中的存储器,记录图像数据等。外部存储器8是在该数字照相机上装卸自如的例如xD-picture card(图像卡)(注册商标)、Compact Flash(注册商标)卡等存储卡,记录图像数据等。 
有线I/F 9例如是用于利用USB(Universal Serial Bus:通用串行总线)或其他有线通信标准与外部设备连接的接口。无线I/F 10例如是用于利用IrDA(Infrared Data Association,红外数据标准协会)或其他无线通信标准与外部设备连接的接口。 
压缩解压缩部11在记录图像数据时、显示所记录的图像数据时等,例如以JPEG(Joint Photographic Experts Group:联合图像专家组)方式等进行图像数据的压缩处理和解压缩处理。 
图像处理部12进行以下处理:合成(组合)摄影时刻不同的多个静态图像用的图像数据来生成一个全景图像用的图像数据的处理、根据摄影时刻不同的两个实时图像用的图像数据来检测移动向量的处理。并且,除此之外,也对图像数据进行以下各种图像处理:γ(Gamma)校正或白平衡校正等的校正处理、增减构成图像的像素数的图像放大/缩小处理(尺寸调节处理)等。 
CPU 13通过读出存储在Flash ROM 16中的照相机程序并执行,来控制该数字照相机整体的动作。并且,显示控制部13a控制在后面详细叙述的全景摄影中的显示部15的显示,其通过由CPU 13执行照相机程序进行显示控制来实现。Flash ROM 16是可以进行电擦写动作的非易失性存储器,除了存储由CPU 13执行的照相机程序以外,还存储在该照相机程序的执行中所使用的各种数据等。 
操作部17包含用于接受来自用户的各种指示并向CPU 13通知该指示的各种按钮。例如,包含后述的快门按钮(释放按钮)、菜单按钮、上下左右按钮以及OK按钮等。另外,快门按钮是用于进行摄影指示的按钮。麦克风(录音部)18将声音转换为数字数据即声音数据,用于声音的录音。 
接着,详细说明作为具有这种结构的数字照相机的动作之一的全景摄影动作。其中,在本实施方式中,以用户按下快门按钮后从左侧向右侧对数字照相机进行摇摄操作来进行全景摄影的情况为例,说明该全景摄影动作。 
首先,说明全景摄影动作的概要。 
在本实施方式的数字照相机中,开始全景摄影动作时,在显示部15的显示画面上,显示实时图像,还显示作为用于引导用户以适当的速度且向适当的方向进行摇摄操作的标记的区域、以及表示用户实际进行的摇摄操作的状况的移动轨迹,用户以使移动轨迹沿着基于显示画面上的区域的引导的方式进行摇摄操作,由此,能够获得没有被摄体抖动的全景图像。 
图2是示出在全景摄影动作中显示在显示部15上的画面例的图。图3是示意性地示出在全景摄影动作中显示在显示部15上的一连串的画面例的图。如图2所示,在全景摄影动作中,在显示画面上显示实时图像,还显示上述的区域21和移动轨迹22。 
区域21由推荐速度区域21a、轨道修正提倡区域21b以及警告建议显示区域21c这三种部分区域构成。推荐速度区域21a是如下的部分区域:在当前的移动轨迹(该图中的黑圈)22a包含在该推荐速度区域21a内的情况下,表示用户正在适当地进行摇摄操作。轨道修正提倡区域21b是如下的部分区域:在当前的移动轨迹22a包含在该轨道修正提倡区域21b内的情况下,表示对于用户的摇摄操作提倡进行轨道修正。警告建议显示区域21c是如下的部分区域:在当前的移动轨迹22a包含在该警告建议显示区域21c内的情况下,表示用户的摇摄操作过快,该情况下,如图3的一个画面例所示,在显示画面上进行警告显示。 
当开始全景摄影动作时,这3种部分区域随着时间的经过而变化地进行显示。在本例的情况下,因为假设从左侧向右侧进行摇摄操作,所以,如图3所示,显示成随着时间的经过,推荐速度区域21a以与移动允许速度v对应的一定速度从左侧向右侧移动,与此相伴,变化地显示轨道修正提倡区域21b和警告建议显示区域21c。另外,在图3中,省略了轨道修正提倡区域21b和警告建议显示区域21c的图示。 
这里,通过下式赋予上述的移动允许速度v。 
移动允许速度v=β/(1/α)[pixel/sec] 
β是假设摄像元件2为CCD时CCD上的被摄体抖动的允许值[pixel]。并且,1/α是预先确定的快门速度[sec]。在后面详细叙述,在本实施方式 的数字照相机中,在全景摄影动作中的静态图像的摄影中,必须在快门速度高于1/α的高速的快门速度下进行摄影。因此,当用户的摇摄操作的速度在移动允许速度v以下时,能够拍摄没有被摄体抖动的静态图像。 
并且,如图3所示,每当全景摄影动作中的静态图像的摄影结束时,推荐速度区域21a都显示在区域21上的左端的位置,再次向右侧移动地显示。 
在当前的移动轨迹22a位于显示画面的右端的时刻,进行全景摄影动作中的静态图像的摄影(为第二次及以后的静态图像的摄影)。即,当拍摄了静态图像后的移动轨迹22的移动量达到区域21的水平方向(左右方向)的长度即1个显示画面时,进行下次的静态图像的摄影。因此,如果在推荐速度区域21a位于区域21上的右端时同时移动轨迹22a位于区域21上的右端,则是全景摄影动作中的静态图像的最佳摄影时机。由此,如果用户以至少当推荐速度区域21a位于区域21上的右端时移动轨迹22a位于区域21上的右端的方式进行摇摄操作,则能够拍摄没有被摄体抖动的静态图像。 
区域21的垂直方向(上下方向)的幅度表示组合(合成)所拍摄的多个静态图像来制作全景图像时所允许的垂直方向的移动允许幅度。 
通过以上这种显示,在摇摄操作中,在当前的移动轨迹22a包含在推荐速度区域21a内时,用户能够认识到正在适当地进行当前的摇摄操作。并且,在当前的移动轨迹22a包含在轨道修正提倡区域21b内时,用户能够认识到最好修正摇摄操作的轨道,以使移动轨迹22a包含在推荐速度区域21a内。并且,在当前的移动轨迹33a包含在警告建议显示区域21c内或在区域21外时,用户认识到正在不适当地进行当前的摇摄操作,能够修正摇摄操作,以使当前的移动轨迹22a包含在推荐速度区域21a内。由此,用户能够以适当的速度且向适当的方向进行全景摄影中的摇摄操作。 
并且,如果在推荐速度区域21a位于区域21上的右端时同时移动轨迹22a位于区域21上的右端,则是全景摄影动作中的静态图像的最佳摄影时机,所以,用户以至少当推荐速度区域21a位于区域21上的右端时 使移动轨迹22a位于区域21上的右端的方式进行摇摄操作,由此能够获得没有被摄体抖动的全景图像。因此,用户没必要以使当前的移动轨迹22a始终包含在推荐速度区域21a内的方式进行摇摄操作,所以,使用便利性良好。 
图4是示出包含以上这种动作的全景摄影动作的流程的图。 
在该图中,在设定了通常摄影模式作为摄影模式时,通过由用户操作菜单按钮、上下左右按钮以及OK按钮而使摄影模式从通常摄影模式变更设定为全景摄影模式时,检测出该全景摄影模式的设定(S1),将ISO感度设定为最大值(MAX)(S2)。这里,设定为最大值的ISO感度一直被设定为最大值,直到之后摄影模式从全景摄影模式向其他摄影模式变更为止。 
另外,当设定为通常摄影模式或全景摄影模式这样的摄影模式时,基本上成为在显示部15上继续进行实时图像的显示的实时画面状态。 
接着,判定是否检测到用户按下快门按钮(S3)。这里,在该判定结果为“否”的情况下,反复进行本判定。 
另一方面,在S3的判定结果为“是”的情况下,在设定为最大值的ISO感度下拍摄静态图像(S4),对显示部15的显示画面进行初始化(S5)。在该显示画面的初始化中,与实时图像一起,还对使用上述图2和图3说明的区域和移动轨迹进行初始化来显示。即,在区域上的左端的位置显示推荐速度区域,与此相伴,在区域上显示轨道修正提倡区域以及警告建议显示区域。并且,作为当前的移动轨迹,在区域的左端、区域的垂直方向的宽度的中心位置标绘显示黑圈。但是,在S3的判定为“是”后的第二次及以后的S5的处理中,不变更最后作为移动轨迹而标绘显示的黑圈在垂直方向的位置,将其移动到区域的左端侧进行显示,并且,消去除此之外的移动轨迹。 
并且,在S5的处理中,进一步将在后述的S14的处理中成为判定对象的、从移动向量中提取出的水平分量的移动量的累计值S清除为0(S=0)。 
接着,取入实时图像用的图像数据(S6),在图像缓冲存储器5中保 存所取入的实时图像用的图像数据(S7)。其中,在图像缓冲存储器5中没有保存设定为第1实时图像用图像数据的图像数据的情况下,将所取入的实时图像用图像数据设定为第1实时图像用图像数据并保存。或者,在图像缓冲存储器5中保存了设定为第1实时图像用图像数据的图像数据、在图像缓冲存储器5中没有保存设定为第2实时图像用图像数据的图像数据的情况下,将所取入的实时图像用图像数据设定为第2实时图像用图像数据并保存。 
接着,从设定为第1和第2实时图像用图像数据的两个图像数据中,检测移动向量(S8),该移动向量表示设定为第2实时图像用图像数据的图像数据所涉及的实时图像中所表现的被摄体位置、相对于设定为第1实时图像用图像数据的图像数据所涉及的实时图像中所表现的被摄体位置的移动量。但是,在没有保存设定为第2实时图像用图像数据的图像数据的情况下,不进行本处理(S8)和接下来的S9的处理,返回S6。因此,该情况下,在接下来的S6中所取入的实时图像用图像数据被设定为第2实时图像用图像数据并保存。 
图5是概念性地示出S8的处理的图,图6是示意性地示出S8的处理的图。 
如图5和图6所示,例如在将实时图像用图像数据i(1)设定为第1实时图像用图像数据并保存在图像缓冲存储器5中、将实时图像用图像数据i(4)设定为第2实时图像用图像数据并保存在图像缓冲存储器5中的情况下,通过检测设定为第1实时图像用图像数据的图像数据i(1)和设定为第2实时图像用图像数据的图像数据i(4)之间的差分,来求出移动向量。由此,能够求出设定为第2实时图像用图像数据的图像数据所涉及的实时图像中所表现的被摄体位置、相对于设定为第1实时图像用图像数据的图像数据所涉及的实时图像中所表现的被摄体位置的移动量。另外,在后面详细叙述,根据这样求出的移动量,在显示部10的显示画面上显示移动轨迹。 
当图4的S8的处理结束时,接着,根据在该S8中所检测出的移动向量判定是否检测到数字照相机在水平方向进行了移动(S9)。在该检测 中,从移动向量中提取出水平方向的移动量,当该移动量在规定量以上时,检测为数字照相机在水平方向进行了移动。 
在S9中,在该判定结果为“否”的情况下,在设定为第2实时图像用图像数据的图像数据中,解除该设定,返回S6。因此,该情况下,在接下来的S6中所取入的实时图像用图像数据被设定为第2实时图像用图像数据并保存。 
另一方面,在S9的判定结果为“是”的情况下,从在S8中所检测出的移动向量中提取水平方向和垂直对象的移动量,在显示部15上显示该移动量的相当量作为当前的移动轨迹(S10),并且,在该S10中,在设定为第1实时图像用图像数据的图像数据中,解除该设定,并且,将设定为第2实时图像用图像数据的图像数据设定为第1实时图像用图像数据,在设定为第2实时图像用图像数据的图像数据中,解除该设定。 
图7(a)、(b)、(c)是概念性地示出S10的一部分处理的图。 
如该图(a)所示,例如将设定为第1实时图像用图像数据的图像数据所涉及的实时图像设为第Z张实时图像,将设定为第2实时图像用图像数据的图像数据所涉及的实时图像设为第Z+α张实时图像,将从在这两个实时图像用图像数据之间获得的移动向量中所提取出的水平方向和垂直方向的移动量设为该图(b)所示的Δx和Δy。该情况下,如该图(c)所示,在显示部15上利用黑圈31标绘显示其水平方向的移动量Δx的相当量和其垂直方向的移动量Δy的相当量,作为当前的移动轨迹。但是,在标绘显示黑圈31作为当前的移动轨迹时,在从作为上次的移动轨迹而标绘显示的黑圈32移动了水平方向的移动量Δx的相当量和垂直方向的移动量Δy的相当量的位置,进行标绘显示。 
另外,在该图(c)中,除了作为移动轨迹而标绘显示的黑圈31以外的黑圈,是过去通过S10的处理同样作为移动轨迹而标绘显示的黑圈,黑圈33是在S3的判定为“是”后初次进行S5的处理时作为移动轨迹而标绘显示的黑圈。 
并且,在该图(c)中,为了便于说明,加大作为移动轨迹而标绘显示的黑圈和黑圈之间的间隔来进行显示,但是,在实际的处理中,该间 隔很小,如使用上述图2和图3所说明的那样,作为移动轨迹而标绘显示的黑圈整体显示成线那样。 
另外,在该图(c)中,在区域21中省略了推荐速度区域、轨道修正提倡区域以及警告建议显示区域的图示。 
当图4的S10的处理结束时,接着,判定在该S10中显示的移动轨迹(作为当前的移动轨迹而标绘显示的黑圈)是否存在于区域内(S11)。另外,该判定也是判定用户的摇摄操作是否是制作全景图像时的图像合成所允许的水平。在S11的判定中该判定结果为“否”的情况下,进行警告显示(S12),进入S14。 
另一方面,在S11的判定结果为“是”的情况下,判定在该S10中显示的移动轨迹(作为当前的移动轨迹而标绘显示的黑圈)是否存在于警告建议显示区域内(S13)。另外,该判定也是判定用户的摇摄操作是否是会产生被摄体抖动的水平。在S13的判定中该判定结果为“是”的情况下,进行警告显示(S12),进入S14。在此时的警告显示中,如上述图3的一个画面例所示,例如在显示部15的显示画面上显示“请稍微慢点移动”等消息。 
另一方面,在S13的判定结果为“否”的情况下,或者在S12的处理后,接着,将从在S8中所检测出的移动向量中所提取出的水平分量的移动量Δx与累计值S相加(S←S+Δx),判定累计值S是否在规定量X以上(S≥X)(S14)。另外,规定量X是相当于区域的水平方向的长度即1个显示画面的量,该判定也是判定是否是下次的静态图像的摄影时机。 
图8是概念性地说明S14的处理的图。 
如该图所示,通过反复进行本处(S14),每次将从在S8中所检测出的移动向量中所提取出的水平分量的移动量Δx与累计值S进行累计,在该累计值S在规定量X以上(S=Δx1+Δx2+Δx3+...Δxn≥X)时,成为下次的静态图像的摄影时机,S14的判定为“是”。 
这样进行S14的判定,在该判定结果为“是”的情况下,接着,作为下次拍摄静态图像时的快门速度,确定与S3的判定为“是”后初次在S4中拍摄的静态图像的曝光相配的快门速度(S15),返回S4。另外,在S15 的快门速度的确定中,因为在S2中将ISO感度设定为最大值,所以,能够确定更高速的快门速度。因此,在接下来的S4中进行的静态图像的摄影中,在S15中所确定的高速的快门速度下进行静态图像的摄影,所以,能够拍摄没有被摄体抖动的静态图像。但是,在S15的处理中,必须确定高于上述1/α的高速的快门速度,不能确定比1/α慢的快门速度。 
另一方面,在S14的判定结果为“否”的情况下,接着,判定是否检测到全景摄影结束指示(S16)。另外,例如可以通过按下快门按钮来进行全景摄影结束指示。该情况下,可以仅利用快门按钮进行全景摄影的开始和结束指示。 
在S16的判定结果为“是”的情况下,进行组合(合成)目前为止(从S3的判定为“是”后到当前时刻为止)在S4中所拍摄的静态图像的图像数据来制作全景图像的图像数据的处理(全景合成自动处理)(S17),在外部存储器8(或者也可以是内部存储器7)中记录该全景图像的图像数据(S18),返回S3。 
另一方面,在S16的判定结果为“否”的情况下,接着,判定是否在S3的判定为“是”后经过了一定时间(S19)。在该S19的判定结果为“是”的情况下,进入S17,进行上述S17和S18的处理,返回S3。另一方面,在S19的判定结果为“否”的情况下,返回S6。该情况下,在接下来的S6中所取入的实时图像用图像数据被设定为第2实时图像用图像数据并保存。 
以上,根据本实施方式的数字照相机,用户能够以适当的速度且向适当的方向进行全景摄影中的摇摄操作,所以能够获得没有被摄体抖动的全景图像。 
并且,在该摇摄操作中,用户没必要以使当前的移动轨迹始终包含在推荐速度区域内的方式进行摇摄操作,只要以至少推荐速度区域位于区域上的右端时当前的移动轨迹位于区域上的右端的方式进行摇摄操作即可,所以,能够提高使用便利性。 
另外,在本实施方式的数字照相机中,说明了用户从左侧向右侧对数字照相机进行摇摄操作时的例子,但是,从右侧向左侧进行摇摄操作 时,当然也能够同样进行处理。 
并且,在本实施方式的数字照相机中,如果在推荐速度区域位于区域上的右端时同时当前的移动轨迹位于区域上的右端,则是全景摄影动作中的静态图像的最佳摄影时机,所以,可以构成为在推荐速度区域位于区域上的右端时,通过声音、振动或显示等,告知推荐速度区域位于区域上的右端的情况。 
并且,在本实施方式的数字照相机中,也可以构成为在全景摄影动作中的第二次及以后的静态图像的摄影时,通过声音、振动或显示等,告知进行了静态图像的摄影的情况。 
并且,在本实施方式的数字照相机中,自动进行全景摄影动作中的第二次及以后的静态图像的摄影,但是,也可以构成为由用户手动进行该摄影。 
并且,在本实施方式的数字照相机中,在全景摄影动作中,可以显示从上次的静态图像的摄影到下次的静态图像的摄影为止的1个静态图像的移动轨迹,但是,例如也可以构成为,可以连续显示多个静态图像的移动轨迹。 
图9是示意性地示出这样构成时的显示画面例的图。 
该图所示的例子是构成为可以连续显示5个静态图像的移动轨迹的例子。在该例子中,在区域41上,显示表示5个摄影图像的快门时机的位置的线42(42a、42b、42c、42d和42e)。因此,在当前的移动轨迹43到达区域41上的线42(也包含线42的延长线)的位置时,成为静态图像的摄影时机,进行静态图像的摄影。然后,在当前的移动轨迹43到达显示画面的右端(区域41上的线42e(也包含线42e的延长线))的位置而进行静态图像的摄影时,与上述本实施方式同样,进行区域41和移动轨迹43的初始化。即,在区域41上的左端的位置显示推荐速度区域41a,与此相伴,在区域41上显示轨道修正提倡区域以及警告建议显示区域,进而,最后标绘显示的移动轨迹移动到显示画面的左端侧进行显示,消去其他移动轨迹。另外,在图9中,省略了区域41上的轨道修正提倡区域和警告建议显示区域的图示,但是,实际上与上述本实施方式同样, 也显示这些区域。 
并且,在这样构成为可以连续显示多个静态图像的移动轨迹的情况下,如果预先确定了构成全景图像的静态图像数量,则也可以构成为可以连续显示该所确定的数量的静态图像的移动轨迹。 
并且,在本实施方式的数字照相机中,可以通过按下快门按钮来进行全景摄影结束指示,但是,也可以通过按下其他按钮等其他方法来进行全景摄影结束指示。 
以上,对本发明进行了详细说明,但是,本发明不限于上述实施方式,在不脱离本发明的主旨的范围内,当然可以进行各种改良和变更。 

Claims (12)

1.一种摄像装置,其一边使装置相对于被摄体移动一边进行多张图像的摄像,其特征在于,该摄像装置具有:
摄像单元,其对被摄体进行摄像并获得图像数据;
显示单元,其显示由所述摄像单元获得的图像数据所涉及的图像;
移动量检测单元,其根据在第1时刻由所述摄像单元获得的图像数据所涉及的第1图像和在所述第1时刻之后的第2时刻由所述摄像单元获得的图像数据所涉及的第2图像,检测所述第2图像中所表现的被摄体的位置相对于所述第1图像中所表现的被摄体的位置的移动量;以及
显示控制单元,所述显示控制单元将由所述移动量检测单元检测出的移动量中提取的水平方向和垂直方向的移动量的相当量作为移动轨迹,并与显示在所述显示单元上的图像一起显示在所述显示单元上,其中水平方向和垂直方向的移动量的相当量用黑圈之间的间隔进行显示。
2.根据权利要求1所述的摄像装置,其特征在于,
所述显示控制单元将从进行了静态图像的摄影的时刻到当前时刻的期间由所述摄像单元获得的图像数据所涉及的图像中所表现的被摄体位置的时间变化作为移动轨迹来显示,该移动轨迹以进行所述静态图像的摄影的时刻或者进行所述摄影指示的时刻为起点。
3.根据权利要求1所述的摄像装置,其特征在于,
当根据由所述移动量检测单元检测出的移动量,检测出距进行了静态图像的摄影的时刻之后初次由所述摄像单元获得的图像数据所涉及的图像中所表现的被摄体位置的移动量达到了所述显示单元的1个显示画面的相当量时,进行下次的静态图像的摄影。
4.根据权利要求1所述的摄像装置,其特征在于,
所述移动量检测单元根据在所述第1时刻由所述摄像单元获得的图像数据和在所述第2时刻由所述摄像单元获得的图像数据,检测移动向量,根据该移动向量,检测所述第2图像中所表现的被摄体位置相对于所述第1图像中所表现的被摄体位置的移动量。
5.根据权利要求1所述的摄像装置,其特征在于,
所述显示单元将对所述摄像单元获得的多个静态图像用图像数据所涉及的图像进行合成来生成一个合成图像时所允许的垂直方向的移动允许幅度范围,与由所述摄像单元获得的图像数据所涉及的图像一起进行显示。
6.根据权利要求1所述的摄像装置,其特征在于,
该摄像装置还具有警告单元,该警告单元在基于由所述移动量检测单元检测出的移动量的移动速度超过允许值时进行警告。
7.根据权利要求1所述的摄像装置,其特征在于,
该摄像装置还具有:
图像合成单元,其将由所述摄像单元所拍摄的多个静态图像用图像数据合成为一个图像数据;以及
记录单元,其记录由所述图像合成单元合成的图像数据。
8.根据权利要求1所述的摄像装置,其特征在于,
在初次的静态图像的摄影时,将ISO灵敏度设定为最大来进行摄影,在以后的静态图像的摄影时,保持将所述ISO灵敏度设定为最大的状态、且与所拍摄的所述初次的静态图像的曝光相配地来设定快门速度而进行摄影。
9.根据权利要求1所述的摄像装置,其特征在于,
该摄像装置还具有设定单元,该设定单元设定用于引导移动该摄像装置的速度的移动速度,
所述显示单元还显示引导标记,该引导标记用于根据由所述设定单元所设定的移动速度,引导移动该摄像装置的速度或/和下次的静态图像的摄影。
10.根据权利要求1所述的摄像装置,其特征在于,
所述显示控制单元在所述显示单元上连续显示由所述摄像单元获得的多个静态图像用图像数据所涉及的静态图像的移动轨迹。
11.根据权利要求3所述的摄像装置,其特征在于,
当根据由所述移动量检测单元检测出的移动量、检测出距进行了静态图像的摄影的时刻之后初次由所述摄像单元获得的图像数据所涉及的图像中所表现的被摄体位置的移动量达到了所述显示单元的1个显示画面的相当量时,或者根据摄影指示,将所述移动轨迹的显示位置变更为该移动轨迹的起点侧的所述显示画面内的端部。
12.一种摄像装置的显示方法,一边使装置相对于被摄体移动一边进行多张图像的摄像,其特征在于,该显示方法具有以下步骤:
根据在第1时刻对被摄体进行摄像而获得的第1图像数据和在所述第1时刻之后的第2时刻对被摄体进行摄像而获得的第2图像数据,检测所述第2图像数据所涉及的图像中所表现的被摄体位置相对于所述第1图数据所涉及的图像中所表现的被摄体位置的移动量;以及
将所检测出的所述移动量与通过摄像获得的图像数据所涉及的图像一起作为移动轨迹来显示。
CN2008100993466A 2007-05-21 2008-05-21 摄像装置和显示方法 Active CN101312501B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2007134615 2007-05-21
JP2007-134615 2007-05-21
JP2007134615A JP4818987B2 (ja) 2007-05-21 2007-05-21 撮像装置、表示方法、及びプログラム

Publications (2)

Publication Number Publication Date
CN101312501A CN101312501A (zh) 2008-11-26
CN101312501B true CN101312501B (zh) 2010-12-08

Family

ID=40100906

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008100993466A Active CN101312501B (zh) 2007-05-21 2008-05-21 摄像装置和显示方法

Country Status (2)

Country Link
JP (1) JP4818987B2 (zh)
CN (1) CN101312501B (zh)

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010136302A (ja) * 2008-12-08 2010-06-17 Sony Corp 撮像装置、撮像方法、およびプログラム
JP5434126B2 (ja) * 2009-02-19 2014-03-05 カシオ計算機株式会社 撮像装置、撮像方法及び撮像プログラム
CN101964869B (zh) * 2009-07-23 2012-08-22 华晶科技股份有限公司 全景图像的引导拍摄方法
JP5378135B2 (ja) 2009-09-29 2013-12-25 富士フイルム株式会社 画像レイアウト決定方法ならびにそのプログラムおよび情報処理装置
JP5352406B2 (ja) 2009-09-30 2013-11-27 富士フイルム株式会社 合成画像作成方法ならびにそのプログラムおよび情報処理装置
JP5532297B2 (ja) * 2009-12-18 2014-06-25 ソニー株式会社 画像処理装置、画像処理方法、及び、プログラム
JP5364625B2 (ja) * 2010-03-15 2013-12-11 富士フイルム株式会社 撮像装置
JP4985808B2 (ja) 2010-03-19 2012-07-25 カシオ計算機株式会社 撮像装置、及びプログラム
JP2012068380A (ja) * 2010-09-22 2012-04-05 Sony Corp 画像処理装置、撮像装置、および画像処理方法、並びにプログラム
US9549122B2 (en) 2011-03-30 2017-01-17 Nec Corporation Imaging apparatus, photographing guide displaying method for imaging apparatus, and non-transitory computer readable medium
US9007429B2 (en) 2011-04-06 2015-04-14 Casio Computer Co., Ltd. Image processing device capable of generating wide-range image
KR101784176B1 (ko) 2011-05-25 2017-10-12 삼성전자주식회사 영상 촬영 장치 및 그 제어방법
JP5965596B2 (ja) 2011-07-27 2016-08-10 オリンパス株式会社 画像処理システム、情報処理装置及びプログラム
JP5845763B2 (ja) * 2011-09-20 2016-01-20 カシオ計算機株式会社 撮像装置、画像処理方法及びプログラム
JP5655804B2 (ja) * 2012-03-16 2015-01-21 カシオ計算機株式会社 撮像装置、及びプログラム
JP6220276B2 (ja) * 2014-01-31 2017-10-25 株式会社Nttドコモ 撮像装置及び撮像方法
US9591237B2 (en) * 2015-04-10 2017-03-07 Qualcomm Incorporated Automated generation of panning shots
JP6107882B2 (ja) * 2015-05-21 2017-04-05 カシオ計算機株式会社 撮像装置、表示制御方法及びプログラム
CN104902183B (zh) * 2015-05-28 2017-10-20 广东欧珀移动通信有限公司 全景拍照方法及装置
CN104869317B (zh) * 2015-06-02 2018-05-04 广东欧珀移动通信有限公司 智能设备拍摄方法及装置
KR102469694B1 (ko) 2015-08-24 2022-11-23 삼성전자주식회사 카메라를 구비하는 장치에서 사진 촬영 지원 기법
JP6723720B2 (ja) * 2015-10-20 2020-07-15 キヤノン株式会社 表示システム、情報処理方法及びプログラム
CN105611108A (zh) * 2015-12-18 2016-05-25 联想(北京)有限公司 一种信息处理方法及电子设备
WO2017149850A1 (ja) * 2016-02-29 2017-09-08 富士フイルム株式会社 情報処理装置、情報処理方法、及びプログラム
CN105611179B (zh) * 2016-03-28 2018-09-04 广东欧珀移动通信有限公司 一种用于手持拍照防抖的多帧优选方法、装置及移动终端
JP6094701B2 (ja) * 2016-04-05 2017-03-15 株式会社ニコン 撮像装置
JP6399120B2 (ja) * 2017-02-16 2018-10-03 株式会社ニコン 撮像装置
CN107464119A (zh) * 2017-08-18 2017-12-12 上海二三四五金融科技有限公司 一种自动获取身份信息的控制方法及装置
JP6980494B2 (ja) * 2017-11-16 2021-12-15 キヤノン株式会社 撮像制御装置およびその制御方法
JP7001087B2 (ja) * 2019-12-23 2022-01-19 株式会社ニコン 撮像装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1932841A (zh) * 2005-10-28 2007-03-21 南京航空航天大学 基于仿生复眼的运动目标检测装置及其方法
CN101082766A (zh) * 2006-06-01 2007-12-05 上海杰图软件技术有限公司 一种快速采集全景图像的设备和方法
CN101146231A (zh) * 2007-07-03 2008-03-19 浙江大学 根据多视角视频流生成全景视频的方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3776514B2 (ja) * 1996-07-08 2006-05-17 株式会社日立製作所 カメラ揺れ補正方法および画像監視システム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1932841A (zh) * 2005-10-28 2007-03-21 南京航空航天大学 基于仿生复眼的运动目标检测装置及其方法
CN101082766A (zh) * 2006-06-01 2007-12-05 上海杰图软件技术有限公司 一种快速采集全景图像的设备和方法
CN101146231A (zh) * 2007-07-03 2008-03-19 浙江大学 根据多视角视频流生成全景视频的方法

Also Published As

Publication number Publication date
CN101312501A (zh) 2008-11-26
JP2008289095A (ja) 2008-11-27
JP4818987B2 (ja) 2011-11-16

Similar Documents

Publication Publication Date Title
CN101312501B (zh) 摄像装置和显示方法
CN109842753B (zh) 摄像头防抖系统、方法、电子设备和存储介质
US8111321B2 (en) Imaging device and method for its image processing, with face region and focus degree information
US8208034B2 (en) Imaging apparatus
CN101848338B (zh) 具有变焦功能的摄影装置
US20100321470A1 (en) Imaging apparatus and control method therefor
CN109194877B (zh) 图像补偿方法和装置、计算机可读存储介质和电子设备
US20070242149A1 (en) Image display control apparatus, method of controlling the same, and control program therefor
KR101441786B1 (ko) 피사체 판정 장치, 피사체 판정 방법, 및 기록 매체
CN110636216B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
US8767096B2 (en) Image processing method and apparatus
CN101931746B (zh) 摄像装置以及摄像方法
JP4692849B2 (ja) 立体画像記録装置および立体画像記録方法
CN102348067A (zh) 摄像设备和摄像设备的控制方法
CN105100586A (zh) 检测装置及检测方法
JP4127521B2 (ja) ディジタル・カメラおよびその制御方法
JP4894708B2 (ja) 撮像装置
US7990458B2 (en) Digital camera
KR102592745B1 (ko) 자세 추정 장치, 자세 추정 방법 및 기록 매체에 저장된 컴퓨터 프로그램
KR100763969B1 (ko) 자동 촬상 장치 및 자동 촬상 장치의 제어용 프로그램이 저장된 컴퓨터로 판독 가능한 기록 매체
US7209163B1 (en) Image processing apparatus, image output apparatus, and camera
KR100781680B1 (ko) 카메라 폰의 사진 파일 저장 및 전송 방법
US10911676B2 (en) Memory card and moving image reproduction device
JP2012124797A (ja) 撮影装置
KR20090102431A (ko) 영상의 흔들림 정도를 표시하는 디지털 영상 처리장치 및그 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20151125

Address after: Tokyo, Japan, Japan

Patentee after: Olympus Corporation

Address before: Tokyo, Japan

Patentee before: Olympus Imaging Corp.

TR01 Transfer of patent right

Effective date of registration: 20211216

Address after: Tokyo, Japan

Patentee after: Aozhixin Digital Technology Co.,Ltd.

Address before: Tokyo, Japan

Patentee before: OLYMPUS Corp.

TR01 Transfer of patent right