CN103888684B - 图像处理装置、图像处理方法以及记录介质 - Google Patents

Abstract

本发明提供一种图像处理装置以及图像处理方法。摄像装置(1)具备：逐次获取图像的摄像部(17)、以规定的范围来合成逐次获取的图像以便生成广角图像的图像合成部(91)、使实时显示图像和所述规定的范围同时显示于显示部(20)以便能视觉辨认所述实时显示图像与规定的范围的相对的大小的显示控制部(51)、在实时显示图像与所述规定的范围的相对的大小显示于所述显示部(20)的期间变更所述相对的大小的视角设定部(53)、以及控制图像合成部(91)来生成与变更后的相对的大小相应的广角图像的图像合成控制部(92)。

Description

图像处理装置、图像处理方法以及记录介质

技术领域

本发明涉及对多个图像进行合成的图像处理装置以及图像处理方法。

背景技术

作为现有技术，在日本特开平11-69293号公报中记载了通过对逐次拍摄的图像进行合成来生成比1次的摄像更广角的图像的技术。

然而，在上述专利文献1的技术中，所生成的广角图像的范围是固定的，因此存在未必能以用户期望的范围来生成广角图像这样的担忧。

发明内容

为此，本发明鉴于上述那样的状况而提出，其目的在于，能以用户期望的合成范围来合成图像。

本发明提供一种图像处理装置，其特征在于，具备：获取单元，其逐次获取图像；合成单元，其以规定的范围对由所述获取单元逐次获取的图像进行合成，来生成广角图像；显示控制单元，其使实时显示图像和所述规定的范围同时显示于显示单元，以便能视觉辨认所述实时显示图像与所述规定的范围的相对的大小；变更单元，其在由所述显示控制单元将所述实时显示图像与所述规定的范围的相对的大小显示于所述显示单元的期间，变更所述相对的大小；以及控制单元，其控制所述合成单元，以便生成与由所述变更单元变更后的相对的大小相应的广角图像。

本发明提供一种图像处理方法，其特征在于，包括：获取步骤，逐次获取图像；合成步骤，以规定的范围对由所述获取步骤逐次获取的图像进行合成，来生成广角图像；显示控制步骤，使实时显示图像和所述规定的范围同时显示于显示单元，以便能视觉辨认所述实时显示图像与所述规定的范围的相对的大小；变更步骤，在由所述显示控制步骤将所述实时显示图像与所述规定的范围的相对的大小显示于所述显示单元的期间，变更所述相对的大小；以及控制步骤，控制所述合成，以便生成与由所述变更步骤变更后的相对的大小相应的广角图像。

附图说明

图1A是说明本实施方式的数字广角图像的示意图。

图1B是说明本实施方式的数字广角图像的示意图。

图2是用于说明摄影模式的设定以及摄影模式内的修剪区的设定方法的示意图。

图3是表示本发明的一实施方式所涉及的摄像装置的硬件的构成的框图。

图4是表示图1的摄像装置的功能性的构成当中用于执行视角设定处理、摄像处理、和数字广角图像生成处理的功能性的构成的功能框图。

图5是说明具有图4的功能性的构成的图3的摄像装置所执行的视角设定处理的流程的流程图。

图6是表示本实施方式中的生成图像的视角设定的具体例的示意图。

图7是表示具有图4的功能性的构成的图3的摄像装置所执行的摄像处理的流程的流程图。

图8是表示具有图4的功能性的构成的图3的摄像装置所执行的数字广角图像生成处理的流程的流程图。

具体实施方式

以下，使用附图来说明本发明的实施方式。

图1是说明本实施方式的数字广角图像的示意图。

“数字广角图像”是具有与通常的图像的纵横比(4：3)相同的纵横比且比通常的图像更广角的图像。另外，“数字广角图像”是指，不是通过变更为广角的透镜等光学性的处理，而是通过合成多个摄像区域的不同的图像来数字性地处理而生成的图像。

在本实施方式中，能生成视角(图像的合成范围的广度)分别不同的数字广角图像。也就是，通过改变作为合成对象的图像的张数或数字广角模式(后述)的等级，能生成视角各自不同的数字广角图像。

在本实施方式中，构成为：在生成数字广角图像的情况下，改变用于数字广角图像的生成的图像的切出区域(以下，称为“修剪区”)。

在如此构成的本实施方式中，通过针对显示于显示部20的实时显示图像的操作来进行摄影模式(后述)的变更、该摄影模式为数字广角模式的情况下的规定的数字广角模式的等级下的修剪区(后述)的变更、以及摄影模式为规定的等级的数字广角模式的情况下的视角的设定。

在本实施方式中，如图1A所示，能设定：通常摄影模式、第1数字广角摄影模式(等级1的数字广角模式)、第2数字广角摄影模式(等级2的数字广角模式)、第3数字广角摄影模式(等级3的数字广角模式)这4种摄影模式。

“通常摄影模式”是以通常的视角来拍摄被摄体的模式。在“通常摄影模式”下，例如，拍摄1张被摄体。

另外，在“通常摄影模式”下，修剪区设为固定。即，在“通常摄影模式”下，不能进行修剪区的变更。

“第1数字广角摄影模式”是指，例如，生成3个数字广角模式当中视角最窄的数字广角图像的模式，在本实施方式中，通过使摄像装置移动来获取多个图像，并通过该获取的图像来生成数字广角图像。在本实施方式中，通过第1数字广角摄影模式而生成的数字广角图像是从4张图像合成的，因此通过每次将摄像装置1朝右方向移动规定距离时进行4次摄像处理，来获取构成数字广角图像的多个图像。将如此拍摄得到的图像按照摄像位置进行合成，来生成纵横比为4：3的数字广角图像。

另外，在“第1数字广角摄影模式”下，如图1B所示，对于修剪区在最大修剪区TAmax至最小修剪区TAmin间的修剪范围TR内，细微地调整该范围，从而能将数字广角图像变更为任意的尺寸。

“第2数字广角摄影模式”是指，例如，生成数字广角图像的视角比上述的第1数字广角摄影模式在上下方向上更广角的数字广角图像的模式。在本实施方式中，通过第2数字广角摄影模式而生成的数字广角图像在使摄像装置1每次朝右方向移动规定距离时进行4次摄像处理，接下来，在使摄像装置1朝下方向移动后，每次朝左方向移动规定距离时进行4次摄像处理。其结果是，在上段获取4张图像，在下段获取4张图像。将如此获取的图像按照摄像位置进行图像合成，来生成纵横比为4：3的数字广角图像。

另外，在“第2数字广角摄影模式”下，也与“第1数字广角摄影模式”同样，对于修剪区在最大修剪区TAmax至最小修剪区TAmin间的修剪范围TR内，细微地调整修剪区，从而能任意地变更所生成的数字广角图像的大小。

“第3数字广角摄影模式”是指，例如，生成数字广角图像的视角比上述的第2数字广角摄影模式在上下方向上进一步广的数字广角图像的模式。在本实施方式中，通过第3数字广角摄影模式而生成的数字广角图像在每次使摄像装置1朝右方向移动规定距离时进行4次摄像处理，接下来，在使摄像装置1朝下方向移动后，每次朝左方向移动规定距离时进行4次摄像处理，进而，在使摄像装置1朝下方向移动后，每次朝右方向移动规定距离时进行4次摄像。其结果是，在上段拍摄4张图像，在中段拍摄4张图像，在下段拍摄4张图像。将如此拍摄得到的图像按照摄像位置进行合成，来生成纵横比为4∶3的数字广角图像。

另外，在“第3数字广角摄影模式”下，也与“第1数字广角摄影模式”同样，对于修剪区在最大修剪区TAmax至最小修剪区TAmin间的修剪范围TR内，细微地调整修剪区，从而能任意地变更所生成的数字广角图像的大小。

如此，针对摄影模式、该摄影模式为规定的数字广角模式的情况下的修剪区的范围、以及能对规定的等级的数字广角模式下的视角进行设定的本实施方式中的设定的方法，来进行说明。

图2是用于说明摄影模式、摄影模式为规定的数字广角模式的情况下的修剪区的范围、以及规定的等级的数字广角模式下的视角的设定方法的示意图。

在本实施方式中，以1个操作来进行摄影模式、该摄影模式为数字广角模式的情况下的修剪区的范围、以及摄影模式为数字广角模式的情况下的该数字广角模式的视角的设定以及变更。

具体而言，如图2所示，摄影模式、修剪区的范围、以及视角的变更通过对显示于显示单元的设定图像SI的大小进行变更来执行。

“设定图像SI”是指显示于设定画面的图像，是进行摄影模式、修剪区的范围、以及摄影模式为数字广角模式的情况下的数字广角图像的视角的设定以及变更时成为目标的图像。通过变更该设定图像SI的大小，能选择摄影模式、修剪区的范围、以及摄影模式为数字广角模式的情况下的数字广角图像的视角。即，按照设定图像SI的大小，来对摄影模式、修剪区、以及数字广角图像的视角进行指定。

基于设定图像SI的大小来分配摄影模式、修剪区的范围、以及视角的信息，并变更设定图像SI的大小以与期望的设定对应，从而能设定摄影模式、修剪区、以及数字广角图像的视角。

具体而言，在本实施方式中，在设定图像SI的显示状态下，作为默认显示，设定图像SI成为最大的尺寸Smax，在该位置M0上设定“通常摄影模式”。此外，在本实施方式中，设定图像SI是实时显示图像。“实时显示图像”是指，作为使搭载于摄像装置1的摄像部所执行的摄像动作开始的结果而被依次输出的图像。该实时显示图像是如下图像：被临时地存储在搭载于摄像装置1的存储部中，其后，在搭载于摄像装置1的显示部中被依次显示的图像。对实时显示图像进行显示的结果是，在摄像装置1的显示部中时刻显示当前的摄影风景。

若将设定图像SI设为小于位置M0的大小(在此，设为“位置M1”)，则设定“第1数字广角摄影模式”。进而，在位置M1至位置M2之间的区域TR2内的位置上设定“第1数字广角摄影模式”下的修剪等级。随着位置从位置M1朝着位置M2走，能从图1B所示的最小修剪区TAmin起朝着最大修剪区TAmax变更修剪区的范围。另外，通过此时的设定图像SI的大小来设定数字广角图像的视角。

另外，若将设定图像SI设为位置M2的大小，则设定“第2数字广角摄影模式”。进而，在位置M2至位置M3之间的区域TR3内的位置上设定“第2数字广角摄影模式”下的修剪等级。随着位置从位置M2朝着位置M3走，能从图1B所示的最小修剪区TAmin起朝着最大修剪区TAmax变更修剪区的范围。另外，通过此时的设定图像SI的大小来设定数字广角图像的视角。

进而，若将设定图像SI设为位置M3的大小，则设定“第3数字广角摄影模式”。进而，在从位置M3起至成为不能将设定图像SI的大小减小得更小的尺寸Smin的位置Mt之间的区域TR4内的位置上设定“第3数字广角摄影模式”下的修剪等级。随着使位置从位置M3起朝着位置Mt走，能从图1B所示的最小修剪区TAmin起朝着最大修剪区TAmax变更修剪区的范围。另外，通过此时的设定图像SI的大小来设定数字广角图像的视角。

此外，在沿从位置Mt到位置M0的方向进行操作的情况下，设定数字广角摄影模式的位置关系与上述的设定相反。

如此，通过变更设定图像的大小来设定摄影模式、和修剪区、及数字广角图像的视角，能进行直观性的操作下的设定。另外，通过将数字广角模式内的修剪区的范围设为能变更，从而视角的设定不会变得离散地，能以用户期望的视角来进行最终生成的数字广角图像的视角的变更。

接下来，说明具有上述那样的功能的摄像装置1的硬件的构成。

图3是表示本发明的一实施方式所涉及的摄像装置1的硬件的构成的框图。

摄像装置1例如构成为数码相机。

摄像装置1具备：CPU(Central Processing Unit；中央处理器)11、ROM(Read OnlyMemory；只读存储器)12、RAM(Random Access Memory；随机存取存储器)13、图像处理部14、总线15、输入输出接口16、摄像部17、移动检测部18、触摸面板19、显示部20、操作部21、存储部22、通信部23、以及驱动器24。

CPU11遵照记录在ROM12中的程序或者从存储部22加载至RAM13的程序来执行各种处理。

在RAM13中还适当存储CPU11执行各种处理所需的数据等。

图像处理部14由DSP(Digital Signal Processor；数字信号处理器)或VRAM(Video Random Access Memory；视频随机存取存储器)等构成，与CPU11协作，来对图像的数据实施各种图像处理。

CPU11、ROM12、RAM13以及图像处理部14经由总线15而相互连接。在该总线15另外还连接有输入输出接口16。在输入输出接口16，连接有：摄像部17、移动检测部18、触摸面板19、显示部20、操作部21、存储部22、通信部23、以及驱动器24。

摄像部17虽未图示，但具备光学透镜部和图像传感器。

光学透镜部由为了拍摄被摄体而对光进行聚焦的透镜例如聚焦透镜或变焦透镜等构成。

聚焦透镜是使被摄体像成像于图像传感器的受光面的透镜。变焦透镜是使焦点距离以一定的范围自由变化的透镜。

在光学透镜部中，另外，根据需要，设置对焦点、曝光、白平衡等的设定参数进行调整的外围电路。

图像传感器由光电变换元件、AFE(Analog Front End；模拟前端)等构成。

光电变换元件例如由CMOS(Complementary Metal Oxide Semiconductor；互补金属氧化物半导体)型的光电变换元件等构成。从光学透镜部将被摄体像入射至光电变换元件。为此，光电变换元件对被摄体像进行光电变换(拍摄)并将图像信号蓄积一定时间，且将已蓄积的图像信号作为模拟信号依次提供给AFE。

AFE对该模拟的图像信号执行A/D(模拟/数字)变换处理等各种信号处理。数字信号通过各种信号处理而被生成，并作为摄像部17的输出信号被输出。以下将该摄像部17的输出信号称为“图像的数据”。该图像的数据将作为用于全景图像的生成的原始图像的数据而被使用。

移动检测部18例如由陀螺仪传感器构成，检测摄像装置1的速度或角加速度。

在此，如上所述，摄像装置1在移动当中以规定的间隔(在本实施方式中移动的距离成为恒定的间隔)进行多次摄像。该规定的间隔的运算使用移动检测部18的检测结果。即，CPU11基于移动检测部18的检测结果(速度或角加速度)来计算摄像装置1的移动量，并以与该移动量相应的规定间隔来进行多次摄像。

在摄像装置1中，从移动检测部18的检测结果中获取与数字广角摄像的模式的等级相应的多张图像。

触摸面板19能检测来自用户的触摸操作，按照用户的触摸操作来输入各种信息。

显示部20由显示器或扬声器等构成，输出图像或声音。

操作部21由十字键或快门按钮等的物理性的各种按钮构成，按照用户的指示操作来输入各种信息。

存储部22由硬盘或者DRAM(Dynamic Random Access Memory；动态随机存取存储器)等构成，存储各种图像的数据。

通信部23控制经由包含互联网在内的网络与其他的装置(未图示)之间进行的通信。

在驱动器24中，适当安装磁盘、光盘、光磁盘、或者半导体存储器等所构成的可移动介质31。由驱动器24从可移动介质31中读出的程序根据需要被安装至存储部22。另外，可移动介质31还能与存储部22同样地存储存储部22中所存储的图像的数据等各种数据。

以上说明了本发明的一实施方式所涉及的摄像装置1的硬件的构成。

接下来，说明这样的摄像装置1的功能性的构成当中用于执行视角设定处理的功能性的构成。

图4是表示这样的摄像装置1的功能性的构成当中用于执行视角设定处理、摄像处理、和数字广角图像生成处理的功能性的构成的功能框图。

“视角设定处理”是指，至通过变更显示于设定画面的设定图像的大小来设定摄影模式、修剪区、以及数字广角图像的视角为止的一系列的处理。此外，在本实施方式中，构成为将实时显示图像作为设定图像进行使用。

通过将实时显示图像设为设定图像，从而用户能在参酌摄影状况的同时设定适合该摄影状况的摄影模式或数字广角图像的视角。

在执行视角设定处理的情况下，在图4中，CPU11中，显示控制部51、输入操作检测部52、视角设定部53、摄影模式设定部54、以及修剪区设定部55起作用。

作为存储部22的一区域，设置设定信息存储部71。

在设定信息存储部71中存储有：作为视角设定的引导的设定图像、设定图像的大小与设定的对应关系的信息、作为设定操作的结果的摄影模式、修剪区、以及数字广角图像的视角的设定等。

显示控制部51在进行设定画面的显示时使设定图像被显示，在存在与用户所执行的设定图像的大小的变更相关的操作的情况下，控制显示部20，以使得与该操作对应地改变设定图像的大小来进行显示。

输入操作检测部52检测用户对触摸面板19的操作。输入操作检测部52例如检测以用户的2根手指与触摸面板19接触的状态使2根手指相靠近以捏近的操作(以下，也称为“捏缩(pinch in)操作”)、反之使2根手指相远离的操作(以下，也称为“捏放(pinch out)操作”)等的设定视角的操作(以下，称为“视角设定操作”)。

视角设定部53基于输入操作检测部52的检测结果即视角设定操作，来进行数字广角图像的视角的设定。另外，视角设定部53使所设定的视角的信息存储至设定信息存储部71。

摄影模式设定部54设定与由视角设定部53设定的视角对应的摄影模式。另外，摄影模式设定部54使该所设定的摄影模式的信息存储至设定信息存储部71。

修剪区设定部55判定与由视角设定部53设定的视角对应的修剪区。另外，修剪区设定部55使该所设定的修剪区的信息存储至设定信息存储部71。

以上，针对图3的摄像装置1的功能性的构成当中用于执行视角设定处理的功能性的构成进行了说明。

接下来，针对图3的摄像装置1的功能性的构成当中用于执行摄像处理的功能性的构成进行说明。

“摄像处理”是指，至遵照摄影模式的设定进行图像的摄像并获取与该摄像模式相应的图像为止的一系列的处理。

在执行摄像处理的情况下，如图4所示，在CPU11中，摄像控制部56起作用。

在存储部22的一区域中设置图像存储部72。

摄像控制部56基于设定信息存储部71中所存储的摄影模式的信息，来控制摄像部17。从摄像部17将图像的数据输出至图像存储部72。

在图像存储部72中存储从摄像部17输出的图像的数据。

以上，针对图3的摄像装置1的功能性的构成当中用于执行摄像处理的功能性的构成进行了说明。

接下来，针对图3的摄像装置1的功能性的构成当中用于执行数字广角图像生成处理的功能性的构成进行说明。

“数字广角图像生成处理”是指，至根据获取的多个图像来生成与图像为同一纵横比的合成图像，并根据生成的合成图像来生成按照与图像为同一纵横比切出了期望的区域而得到的数字广角图像为止的一系列的处理。

在执行数字广角图像生成处理的情况下，如图4所示，在图像处理部14中，图像合成部91和图像合成控制部92起作用。

图像合成部91对图像存储部72中所存储的图像的数据的图像进行合成，来生成合成图像的数据。图像合成部91将生成的合成图像的数据输出至合成图像存储部73进行存储。

图像合成控制部92基于设定信息存储部71中所存储的摄影模式的信息以及修剪区的信息来控制图像合成部91，以进行图像存储部72中所存储的图像的数据的图像合成。

合成图像存储部73存储由图像合成部91生成的合成图像的数据。

以上，针对图3的摄像装置1的功能性的构成当中用于执行数字广角图像生成处理的功能性的构成进行了说明。

接下来，说明与由本实施方式中的摄像装置1进行的数字广角图像的生成相关的处理。

“与数字广角图像的生成相关的处理”由以下构成：对数字广角图像的视角进行设定的视角设定处理；按照在该视角设定处理中所设定的摄影模式来获取多个图像的摄像处理；对该获取的多个图像进行合成来生成合成图像，并按照视角设定处理中所设定的修剪区进行切出，来生成数字广角图像的数字广角图像生成处理。

首先，说明与数字广角图像的生成相关的处理当中视角设定处理的流程。

图5是说明具有图4的功能性的构成的图3的摄像装置1所执行的视角设定处理的流程的流程图。

另外，图6是表示本实施方式中的生成图像的视角设定的具体例的示意图。

此外，在图6中，设定图像SI0表示“通常摄影模式”下的设定图像，设定图像SI1表示“数字广角模式”的“广角等级1”下的设定图像，设定图像SI2表示“数字广角模式”的“广角等级2”下的设定图像，设定图像SI3表示“数字广角模式”的“广角等级3”下的设定图像。

视角设定处理是通过执行用户对触摸面板19的操作而开始的。

若开始视角设定处理，则在本实施方式中，显示控制部51进行使从摄像部17获取的实时显示图像作为设定图像显示于显示部20的控制。由此，图6所示那样的视角设定的设定画面将作为实时显示图像被显示。

在步骤S1中，输入操作检测部52判定是否已进行捏缩操作。

在判定为已进行捏缩操作的情况下，在步骤S1中判定为“是”，处理前进至步骤S2。

与此相对，在判定为未进行捏缩操作的情况下，在步骤S1中判定为“否”，处理前进至步骤S6。关于步骤S6以后的处理将后述。

在步骤S2中，摄影模式设定部54判定当前的摄影模式是否为数字广角摄影模式。

在当前的摄影模式为数字广角摄影模式的情况下，在步骤S2中判定为“是”，处理前进至步骤S3。

在步骤S3中，摄影模式设定部54将摄影模式切换至并非通常摄影模式的数字广角摄影模式。

与此相对，在当前的摄影模式并非数字广角摄影模式的情况下，在步骤S2中判定为“否”，处理前进至步骤S4。

在步骤S4中，视角设定部53根据由输入操作检测部52判定出的捏缩操作的量，来设定数字广角摄影模式下的视角。

另外，在步骤S4中，摄影模式设定部54根据由视角设定部53设定的视角，来设定数字广角摄影模式的等级。

另外，在步骤S4中，修剪区设定部55根据由视角设定部53设定的视角来进行设定。

在步骤S5中，显示控制部51控制显示部20，按照根据由输入操作检测部52检测出的捏缩操作的量来变更设定图像SI的图像尺寸。

在图6的例子中，在默认的状态下，按照设定图像SI0的图像尺寸而为“通常摄影模式”，从该状态起，用户通过进行捏缩操作，来变更数字广角图像的视角。另外，通过捏缩操作，按照设定图像S11的图像尺寸而成为“数字广角模式”的“广角等级1”，按照设定图像SI2的图像尺寸而成为“数字广角模式”的“广角等级2”，按照设定图像SI3的图像尺寸而变化为“数字广角模式”的“广角等级3”。

另外，修剪区设定部55按照设定图像SI1与设定图像SI2之间的图像尺寸，来进行“数字广角模式”的“广角等级1”下的修剪区的决定，另外，按照设定图像SI2与设定图像SI3之间的图像尺寸，来进行“数字广角模式”的“广角等级2”下的修剪区的决定，按照设定图像SI3至规定的图像尺寸之间来进行“数字广角模式”的“广角等级3”下的修剪区的决定。

即，在数字广角图像模式的等级为“1”的情况下，设定“广角等级1”的摄影方法，按照对应的捏缩操作的量来设定修剪区。例如，在捏缩操作的量在第1数字广角图像模式下最小的情况下，按照“修剪区”中的上段的图像LP1所示的修剪框TF1来修剪图像，由此所生成的数字广角图像的像(image)成为“最终输出图像”的上段的图像SP1。图像SP1是广角的程度在数字广角摄影模式之中最窄的图像。

与此相对，在数字广角图像模式的等级为“3”的情况下，设定“广角等级3”的摄影方法，按照对应的捏缩操作的量来设定修剪区。例如，在捏缩的量在数字广角图像模式(等级3)下最大的情况下，按照“修剪区”中的下段的图像LP6所示的修剪框TF6来修剪图像，由此所生成的数字广角图像的像成为“最终输出图像”的上段的图像SP6。图像SP6是广角的程度在数字广角摄影模式之中最广的图像。如此，用户能生成任意的广角的程度的数字广角图像。

由此，视角设定处理结束。

在步骤S6中，输入操作检测部52检测是否已进行捏放操作。

在判定为未进行捏放操作的情况下，在步骤S6中判定为“否”，处理前进至步骤S7。

与此相对，在已进行捏放操作的情况下，在步骤S6中判定为“是”，处理前进至步骤S9。步骤S9以后的处理将后述。

在步骤S7中，由于输入操作检测部52在步骤S1中未检测到捏缩操作，而且在步骤S6中未检测到捏放操作，因此判定为捏动操作本身不存在。

在步骤S8中，摄影模式设定部54将摄影模式维持为当前所设定的模式。即，摄影模式设定部54不使视角的设定的信息存储至设定信息存储部71，而结束视角设定处理。

在步骤S9中，摄影模式设定部54判定当前的摄影模式是否为数字广角摄影模式。

在当前的摄影模式并非数字广角摄影模式的情况下，在步骤S9中判定为“否”，处理前进至步骤S10。

在步骤S10中，摄影模式设定部54将摄影模式维持为通常摄影模式。即，摄影模式设定部54不使视角的设定的信息存储至设定信息存储部71，而结束视角设定处理。

与此相对，在当前的摄影模式为数字广角摄影模式的情况下，在步骤S9中判定为“是”，处理前进至步骤S11。

在步骤S11中，输入操作检测部52判定捏缩操作的等级是否最小。

在捏缩操作的等级最小的情况下，在步骤S11中判定为“是”，处理前进至步骤S12。

在步骤S12中，摄影模式设定部54将摄影模式切换至并非数字广角摄影模式的通常摄影模式。

与此相对，在捏缩操作的等级最小的情况下，在步骤S11中判定为“否”，处理前进至步骤S13。

在步骤S13中，摄影模式设定部54将摄影模式维持为通常摄影模式。

在步骤S14中，视角设定部53根据由输入操作检测部52判定出的捏缩操作的量来设定数字广角图像的视角，摄影模式设定部54设定数字广角图像的合成中的数字广角摄影模式的等级，修剪区设定部55设定数字广角图像的视角下的修剪区。

具体而言，视角设定部53进行与检测到用户所执行的对触摸面板19的捏动操作的输入操作检测部52的检测结果对应的数字广角图像的视角的设定，并使所设定的视角的信息存储至设定信息存储部71。

另外，具体而言，摄影模式设定部54设定与所设定的数字广角图像的视角对应的摄影模式，并使该所设定的摄影模式的信息存储至设定信息存储部71。

另外，具体而言，修剪区设定部55判定与所设定的数字广角图像的视角对应的修剪区，并使判定出的修剪区的信息存储至设定信息存储部71。

在步骤S15中，显示控制部51控制显示部20，按照根据由输入操作检测部52检测出的捏缩操作的量来变更设定图像的图像尺寸。

由此，视角设定处理结束。

接下来，说明与数字广角图像的生成相关的处理当中摄像处理的流程。

图7是表示具有图4的功能性的构成的图3的摄像装置1所执行的摄像处理的流程的流程图。

摄像处理是通过用户执行对触摸面板19的操作而开始的。

另外，在开始摄像处理后，通过对快门按钮等的操作部21进行半按操作来进行AF处理，其后，通过全按来开始摄像。

在步骤S31中，显示控制部51控制显示部20，以进行与通过视角设定处理所设定的摄像模式对应的引导显示。在显示部20中例如执行引导显示，该引导显示用于促成：通过使摄像装置1移动来按照图1A所示那样的摄影顺序进行摄像。在已获取需要的图像的情况下，在该引导显示中追加获取完成图像来进行追加引导显示。用户能够在观察追加显示的同时知晓：通过使摄像装置1在哪个方向上移动多少来获取需要张数的图像即可。

在步骤S32中，摄像控制部56基于设定信息存储部71中所存储的摄影模式的信息来控制摄像部17，从而依次获取图像的数据。其后，将获取的图像的数据存储在图像存储部72中。

在步骤S33中，显示控制部51控制显示部20，以将获取的图像追加至引导显示。

在步骤S34中，CPU11判断连拍是否已结束。

在连拍未结束的情况下，在步骤S34中判断为“否”，处理返回至步骤S31，进行图像的获取。

与此相对，在连拍已结束的情况下，在步骤S34中判断为“是”，摄像处理结束。

接下来，说明与数字广角图像的生成相关的处理当中数字广角图像生成处理的流程。

图8是表示具有图4的功能性的构成的图3的摄像装置1所执行的数字广角图像生成处理的流程的流程图。

数字广角图像处理通过用户执行对触摸面板19的操作而开始。

在步骤S51中，图像合成控制部92控制图像合成部91，使得：按照与通过视角设定处理而设定的摄像模式对应的规定的摄像顺序来对从存储部22获取的多个图像进行合成，生成与图像的纵横比(4：3)相同的纵横比的合成图像的数据。

在步骤S52中，图像合成控制部92控制图像合成部91，使得：对于已生成的合成图像，切出图像，以便成为与通过视角设定处理而设定的图像的纵横比(4：3)相同的纵横比的修剪区，生成用户设定的期望的尺寸的数字广角图像的数据。

其后，图像合成部91将已生成的数字广角图像的数据输出至合成图像存储部73进行存储。由此数字广角图像处理结束。

由此，在摄像装置1中，从合成图像中，从成为与图像的纵横比相同的比率的任意的大小的区域即修剪区中生成数字广角图像，因此能提供任意的大小的数字广角图像。

另外，在摄像装置1中，从多张图像中，从处于包含规定的范围在内的范围且成为与图像的纵横比相同的比率的合成图像中，切出合成图像的一部分来生成数字广角图像，因此能防止分辨率下降，能提供高质量的数字广角图像。

在本实施方式中，通过如上设定的摄影模式，按照图1A所示那样的摄影手法来拍摄规定张数的图像。

然后，将获取的多个图像按照摄影模式下的配置进行图像合成，生成数字广角图像，按照图1B所示那样所设定的修剪区来切出图像，生成成为期望的视角的数字广角图像。

如上构成的摄像装置1具备：摄像部17、图像合成部91、显示控制部51、视角设定部53、以及图像合成控制部92。

摄像部17逐次获取图像。

图像合成部91以规定的范围对逐次获取的图像进行合成。

显示控制部51使逐次获取的图像与规定的范围的相对的大小能视觉辨认的状态的图像显示于显示部20。

视角设定部53按照逐次获取的图像与所述规定的范围的相对的大小能视觉辨认的状态，来变更逐次获取的图像相对于规定的范围的相对的大小。

图像合成控制部92控制图像合成部91，以便生成与变更后的相对的大小相应的合成图像。

故而，在摄像装置1中，按照逐次获取的图像与所述规定的范围的相对的大小能视觉辨认的状态，来变更逐次获取的图像相对于规定的范围的相对的大小的显示形态，生成与变更后的相对的大小相应的合成图像。

因此，在摄像装置1中，能以用户的期望的合成范围来合成图像。

显示控制部51按照与规定的范围大致一致的大小使逐次获取的图像显示于显示部20。

视角设定部53变更相对的大小的显示形态，使得逐次获取的图像相对于规定的范围缩小。

图像合成控制部92控制图像合成部91，以便生成与由视角设定部53变更后的相对的大小相应的合成图像。

故而，在摄像装置1中，变更相对的大小的显示形态，以使逐次获取的图像相对于规定的范围缩小，并生成与变更后的相对的大小相应的合成图像。

因此，在摄像装置1中，能以用户的期望的合成范围来合成图像。

显示控制部51将包围逐次获取的图像的规定的设定框作为规定的范围进行显示。

视角设定部53变更逐次获取的图像与规定的设定框的相对的大小。

故而，在摄像装置1中，不仅将包围逐次获取的图像的规定的设定框作为规定的范围进行显示，而且变更所获取的图像与规定的设定框的相对的大小。

因此，在摄像装置1中，能以用户的期望的合成范围来合成图像。

视角设定部53通过变更逐次获取的图像的大小，来对逐次获取的图像与所述规定的设定框的相对的大小进行变更。

因此，在摄像装置1中，能以用户的期望的合成范围来合成图像。

视角设定部53通过变更设定框的大小，来变更逐次获取的图像与所述规定的设定框的相对的大小。

因此，在摄像装置1中，能以用户的期望的合成范围来合成图像。

显示部20具有触摸面板19。

视角设定部53通过对触摸面板19的操作来变更相对的大小。

因此，在摄像装置1中，用户能直观地进行操作，且能给出无缝的印象。

另外，摄像装置1具备将由图像合成部91合成的图像修剪成规定的大小的修剪区设定部55。

视角设定部53基于变更后的图像的相对的大小，来设定由修剪区设定部55修剪的图像的大小。

因此，在摄像装置1中，能以用户的期望的合成范围来合成图像。

此外，本发明不限于上述的实施方式，能达成本发明的目的的范围内的变形、改良等也包含在本发明中。

在上述的实施方式中，构成为通过对重叠于显示部20上的触摸面板19进行操作来进行设定图像的大小的变更，即，设定的变更，但不限于此。例如，还可以构成为：取代触摸面板19，由设置于装置的十字键等的物理性的操作按钮(操作部21)来变更设定图像的大小。

另外，在上述的实施方式中，将实时显示图像用作了设定图像，但并不限于此。设定图像只要是进行摄影模式和修剪区的设定的图像即可，例如可以将预存储的图像用作设定图像。在此情况下，可以构成为显示1个图像，但也可以构成为：若变为摄影模式切换等的图像尺寸，则变更为知道摄影模式切换这一点的图像(例如，在图像中显示摄影模式名那样的图像)来进行显示。

另外，在上述的实施方式中，构成为通过使显示于显示部20的设定图像的大小变化来进行数字广角图像的视角的变更，但并不限于此。例如，可以构成为：对于设定图像，设定成为数字广角图像的视角(图像的合成范围)的设定的目标的设定框，并变更该设定框的大小，从而进行数字广角图像的视角的变更。

更具体而言，关于数字广角图像的视角(图像的合成范围)的设定，可以通过对图6所示的数码相机的显示部20内的显示区域中的设定框进行经由触摸面板19的捏缩/捏放操作，从而设定表征数字广角图像的视角(图像的合成范围)的显示部20内的设定框的大小。

也就是，数字广角图像的视角的设定设为了针对上述的设定图像(实时显示图像)来进行，但本发明不限于此，只要是通过设定设定图像与设定框的相对的大小而能进行数字广角图像的视角的设定，就能解决本发明的课题。

另外，基于由视角设定部53设定的数字广角图像的视角(图像的合成范围)来进行了摄影模式以及修剪的设定，但不限于此。

也就是，视角设定部53可以基于由摄影模式设定部54设定的摄影模式的等级、以及由修剪区设定部55设定的摄影模式下的修剪区，来进行视角的设定。

此外，可以构成为：通过进行经由触摸面板19的捏缩/捏放操作，使表征数字广角图像的视角(图像的合成范围)的显示部20内的设定框的大小固定，将设定图像设定为可变更来执行，而且能使设定图像固定而变更设定框的相对的大小。

另外，关于设定图像的变更显示，例如可以构成为：在设定图像变为对模式进行切换的位置的大小的情况下，进行以下显示：报告或者强调显示图像的外周、或者按照图像的变化临时变迟地进行变化、等的模式的变化。

另外，可以构成为使基于当前的设定图像的大小的设定结果的像显示于画面。

另外，在上述的实施方式中，构成为通过将使设定图像的显示成为最大的状态设为设定画面的初期的状态，进行减小设定图像的操作，从而进行数字广角摄像模式的等级提升、以及摄像模式下的修剪区的放大，但不限于此，可以构成为：通过将设定图像的显示成为最小的状态设为设定画面的初期的状态，从而进行数字广角摄像模式的等级提升以及摄像模式下的修剪区的放大，以便放大设定图像的显示范围，。

另外，在上述的实施方式中，通过将作为实时显示图像的设定图像的显示成为最大的状态设为设定画面的初期的状态，进行减小该设定图像的操作，来进行了从通常摄影模式到数字广角摄像模式的切换，而这样的摄影模式的切换的手法对于想在观察摄影环境的变化的同时即时变更摄影模式等场景下有效。

也就是，即使数字广角摄影模式只有1种，将作为实时显示图像的设定图像的显示成为最大的状态作为设定画面的初期的状态来进行减小该设定图像的操作这样的手法作为从通常的摄影模式到广角摄影模式(数字广角摄像模式)的切换的手法也是有效的。

另外，在上述的实施方式中，关于数字广角摄像，构成为直线状地移动摄像装置1来连续地获取图像，但并不限于此，可以构成为：与摄像顺序无关，在需要的图像来到期望的可摄像的位置时获取对应于摄像模式所需的图像。

另外，在上述的实施方式中，应用本发明的摄像装置1以数码相机为例进行了说明，但并不限定于此。

例如，本发明能普遍应用于具有视角设定功能的电子设备。具体而言，例如，本发明能应用于笔记本型的个人计算机、打印机、电视接收机、摄像机、智能手机、图像处理装置、便携式导航装置、便携式电话机、可移动游戏机等。

上述的一系列的处理既能由硬件执行，也能由软件执行。

换言之，图4的功能性的构成只不过是例示，并不特别限定。即，只要摄像装置1中具备能将上述的一系列的处理作为整体执行的功能即可，而关于为了实现该功能而使用怎样的功能块，并不限定于图3的例子。

另外，1个功能块既可以由硬件单体来构成，也可以由软件单体来构成，还可以由它们的组合来构成。

在使软件来执行一系列的处理的情况下，构成该软件的程序从网络或记录介质安装至计算机等。

计算机可以是嵌入在专用的硬件中的计算机。另外，计算机可以是通过安装各种程序而能执行各种功能的计算机，例如通用的个人计算机。

包含这样的程序的记录介质不仅由为了对用户提供程序而与装置主体另外分布的图3的可移动介质31构成，而且由按照预先嵌入至装置主体的状态被提供给用户的记录介质等构成。可移动介质31例如由磁盘(包含软盘)、光盘、或光磁盘等构成。光盘例如由CD-ROM(Compact Disk-Read Only Memory；压缩光盘-只读存储器)、DVD(Digital VersatileDisk；多功能光盘)等构成。光磁盘由MD(Mini-Disk；迷你盘)等构成。另外，按照预先嵌入至装置主体的状态被提供给用户的记录介质例如由记录有程序的图3的ROM12、包含在图3的存储部22中的硬盘等构成。

此外，本说明书中，关于对记录介质上所记录的程序进行记述的步骤，当然包含沿其顺序按时间系列所进行的处理，但不必一定是按时间系列进行处理，还可以包含并行或者单独执行的处理。

尽管以上说明了本发明的几个实施方式，但这些实施方式只是例示，并不限定本发明的技术范围。本发明能采取其他各种实施方式，进而，在不脱离本发明的主旨的范围内，能进行省略或置换等各种变更。这些实施方式或其变形不仅包含在本说明书等所记载的发明的范围或主旨中，还包含在与权利要求书所记载的发明均等的范围中。

Claims (12)

1.一种图像处理装置，其特征在于，具备：

获取单元，其逐次获取图像；

合成单元，其以规定的范围对由所述获取单元逐次获取的图像进行合成，来生成广角图像；

显示控制单元，其使实时显示图像和所述规定的范围同时显示于显示单元，以便能视觉辨认所述实时显示图像与所述规定的范围的相对的大小；

变更单元，其在由所述显示控制单元将所述实时显示图像与所述规定的范围的相对的大小显示于所述显示单元的期间，变更所述相对的大小；以及

控制单元，其控制所述合成单元，以便与由所述变更单元变更后的相对的大小相应地，使逐次获取的所述图像的合成方法变更，并生成广角图像。

2.根据权利要求1所述的图像处理装置，其特征在于，

所述显示控制单元按照与所述规定的范围大致一致的大小来使逐次获取的所述图像显示于所述显示单元，

所述变更单元变更所述相对的大小，以便逐次获取的所述图像相对于所述规定的范围缩小，

所述合成控制单元控制所述合成单元，以便生成与由所述变更单元变更后的相对的大小相应的大小的广角图像。

3.根据权利要求1所述的图像处理装置，其特征在于，

还具备：

设定单元，其设定与由所述变更单元变更后的所述相对的大小相应的摄影模式，

所述设定单元，在逐次获取的所述图像与所述规定的范围的相对的大小大致一致时，设定通常的摄像模式，而在所述实时显示图像比所述规定的范围相对小时，设定通过规定的合成方法合成逐次获取的所述图像来生成广角图像的数字广角模式。

4.根据权利要求3所述的图像处理装置，其特征在于，

所述图像处理装置还具备合成方法存储单元，该合成方法存储单元将逐次获取的所述图像与所述规定的范围的相对的大小的等级和所述规定的合成方法建立对应地存储多个，

所述设定单元，在所述相对的大小的等级，在所述实时显示图像的大小比所述规定的范围的大小相对小时，从所述合成方法存储单元读取该等级所对应的规定的合成方法并进行设定。

5.根据权利要求1所述的图像处理装置，其特征在于，

所述显示控制单元将包围所述实时显示图像的规定的框作为所述规定的范围进行显示，

所述变更单元变更所述实时显示图像与所述规定的框的相对的大小。

6.根据权利要求3所述的图像处理装置，其特征在于，

所述变更单元通过变更所述实时显示图像的大小，来变更所述实时显示图像与所述规定的框的相对的大小。

7.根据权利要求3所述的图像处理装置，其特征在于，

所述变更单元通过变更所述规定的框的大小，来变更所述相对的大小。

8.根据权利要求1所述的图像处理装置，其特征在于，

所述显示单元具有触摸面板，

所述变更单元通过对于所述触摸面板的操作来变更所述相对的大小。

9.根据权利要求1所述的图像处理装置，其特征在于，

还具备：

修剪单元，其将由所述合成单元合成后的图像修剪成规定的大小，

所述变更单元基于变更后的相对的大小，来设定由所述修剪单元修剪的图像的大小。

10.根据权利要求1～9中任一项所述的图像处理装置，其特征在于，

还具备：

摄像单元，其连续拍摄被摄体，并逐次输出图像，

所述获取单元获取由所述摄像单元逐次输出的图像。

11.一种图像处理方法，其特征在于，包括：

获取步骤，逐次获取图像；

合成步骤，以规定的范围对由所述获取步骤逐次获取的图像进行合成，来生成广角图像；

显示控制步骤，使实时显示图像和所述规定的范围同时显示于显示单元，以便能视觉辨认所述实时显示图像与所述规定的范围的相对的大小；

变更步骤，在由所述显示控制步骤将所述实时显示图像与所述规定的范围的相对的大小显示于所述显示单元的期间，变更所述相对的大小；以及

控制步骤，控制所述合成，以便与由所述变更步骤变更后的相对的大小相应地，使逐次获取的所述图像的合成方法变更，并生成广角图像。

12.一种记录介质，记录有计算机可读的程序，该程序使计算机执行作为如下单元的功能：

获取单元，其逐次获取图像；

合成单元，其以规定的范围对由所述获取单元逐次获取的图像进行合成，来生成广角图像；

显示控制单元，其使实时显示图像和所述规定的范围同时显示于显示单元，以便能视觉辨认所述实时显示图像与所述规定的范围的相对的大小；

变更单元，其在由所述显示控制单元将所述实时显示图像与所述规定的范围的相对的大小显示于所述显示单元的期间，变更所述相对的大小；以及

控制单元，其控制所述合成单元，以便与由所述变更单元变更后的相对的大小相应地，使逐次获取的所述图像的合成方法变更，并生成广角图像。