CN110012213A - 摄像控制设备和记录介质 - Google Patents

Abstract

本发明提供一种摄像控制设备和记录介质。该摄像控制设备包括：获取单元，其被配置为获取与变焦倍率有关的信息；合成单元，其被配置为对通过一系列摄像操作所获取到的多个图像进行合成，以生成在视角方面比所获取到的各图像宽的合成图像；以及控制单元，其被配置为进行控制，以在开始一系列摄像操作之前，基于所获取到的信息来显示表示通过合成单元对多个图像进行合成而能够生成的合成图像的视角的项。

Description

摄像控制设备和记录介质

技术领域

本发明的各方面一般涉及能够进行一系列摄像操作以对多个图像进行合成的摄像控制设备及其控制方法。

背景技术

在进行多个摄像操作并对拍摄图像进行合成的全景摄像中，存在显示引导的方法。日本特开平6-303562讨论了如下方法：计算从用于全景摄像的摄像操作开始时起移动图像的移动量以及生成全景图像所需的图像的移动量，然后显示全景摄像的进度状况。

日本特开平6-303562中讨论的方法不能识别要通过在全景摄像中对图像进行合成而获得的合成图像的视角，而是仅在摄像完成后才能够知道在全景摄像中获得了什么视角。此外，该方法不能在进行摇摄之前知道以什么速度移动照相机。

发明内容

本发明的各方面一般涉及解决上述问题中的至少一个，并提供一种使得用户能够以更适当的方式进行全景摄像的摄像控制设备。

根据本发明的方面，提供一种摄像控制设备，包括：获取单元，其被配置为获取与变焦倍率有关的信息；合成单元，其被配置为对通过一系列摄像操作获取到的多个图像进行合成，以生成与所获取到的各个图像相比视角更宽的合成图像；以及控制单元，其被配置为进行控制，以在开始所述一系列摄像操作之前，基于所获取到的信息来显示表示通过所述合成单元对多个图像进行合成而能够生成的合成图像的视角的项。

根据本发明的方面，提供一种摄像控制设备，包括：获取单元，其被配置为获取与变焦倍率有关的信息；合成单元，其被配置为对通过一系列摄像操作获取到的多个图像进行合成，其中在所述一系列摄像操作中，在正在改变摄像单元的方向时进行摄像；以及控制单元，其被配置为进行控制，以在开始所述一系列摄像操作之前，基于所获取到的信息来显示表示在所述一系列摄像操作中改变所述摄像单元的方向的速度的引导。

根据本发明的方面，提供一种非暂时性计算机可读记录介质，其存储有用于使计算机用作根据上述的摄像控制设备的各单元的程序。

通过以下参考附图对典型实施例的说明，本发明的其它特征将变得明显。

附图说明

图1A和1B是用作可以应用本发明的典型实施例的结构的设备的示例的数字照相机的外观图。

图2是示出可以应用本典型实施例的结构的数字照相机的结构示例的框图。

图3是本典型实施例中的全景摄像处理的流程图。

图4的(4A)、(4B)、(4C)、(4D)、(4E)、(4F1)、(4F2)、(4F3)、(4F4)和(4F5)是用于说明全景摄像的图。

图5的(5A)、(5B)、(5C)、(5D)、(5E)、(5F)、(5G)、(5H)、(5I)和(5J)是示出本典型实施例中的显示示例的图。

具体实施方式

以下将参考附图来详细描述本发明的各种典型实施例、特征和方面。

图1A和1B是用作可以应用本发明的摄像设备的典型实施例的数字照相机的外观图。图1A是数字照相机100的正面立体图，以及图1B是数字照相机100的背面立体图。在图1A和1B中，显示单元28是用于显示图像或各种信息的显示单元。快门按钮61是可用于发出摄像指示的操作单元。模式选择开关60是可用于在各种模式之间切换的操作单元。端子盖40是保护诸如用于连接外部装置和数字照相机100的连接线缆等的连接器(未示出)的盖。主电子拨盘71是转动操作构件，使得主电子拨盘71可以转动以进行例如改变诸如快门速度和光圈值等的设置值。电源开关72是可用于在数字照相机100的电源的接通和断开之间切换的操作构件。副电子拨盘73是可用于进行例如选择框的移动或图像前进的转动操作构件。箭头键74是上、下、左和右部分能够被按压的四向键。可以进行与箭头键74的按压部分相对应的操作。设置按钮75是主要用于例如确定选择项的推压式按钮。快门按钮61是用于发出摄像指示的按钮，并且可用于发出静止图像的摄像指示和运动图像的摄像指示。此外，可以按下快门按钮61以开始全景摄像。在全景摄像中，当按下快门按钮61时，拍摄多个图像。此外，如下所述，对多个拍摄图像进行合成以生成横向长或纵向长的图像。通过对图像进行合成所获得的图像的最大宽度是预定的，使得当完成预定量(像素宽度)的摄像时，全景摄像结束。可选地，当用户在开始全景摄像之后按下快门按钮61时，全景摄像结束，并且根据直到此时为止所拍摄的多个图像来生成合成图像。变焦杆78是以围绕快门按钮61的方式定位的杆，并且可以从一侧向另一侧转动以移动透镜的位置，从而使得能够改变光学变焦倍率。快门按钮61、主电子拨盘71、电源开关72、副电子拨盘73、箭头键74和设置按钮75包括在操作单元70中。目镜取景器16是观察型取景器，其允许用户观察聚焦画面(未示出)以确认通过镜头单元150(图2)所获得的被摄体的光学图像的聚焦或构图。

图2是示出根据本典型实施例的数字照相机100的结构示例的框图。在图2中，镜头单元150是安装有可更换摄像镜头的镜头单元。

透镜103通常由多个透镜元件构成，但是在图2中，透镜103被简单地示为单个透镜元件。通信端子6是用于镜头单元150与数字照相机100进行通信的通信端子，通信端子10是用于数字照相机100与镜头单元150进行通信的通信端子。镜头单元150经由通信端子6和10与系统控制单元50进行通信，并且使得包括在镜头单元150中的镜头系统控制电路4经由光圈驱动电路2来进行光圈102的控制，并且经由自动调焦(AF)驱动电路3来改变透镜103的位置，从而调节焦点。

设置快门101以在系统控制单元50的控制下控制摄像单元22的曝光时间。摄像单元22是利用用于将光学图像转换为电信号的例如电荷耦合器件(CCD)元件或互补金属氧化物半导体(CMOS)元件的图像传感器来配置。

模数(A/D)转换器23将从摄像单元22输出的模拟图像信号转换为数字数据，并且图像处理单元24对从A/D转换器23输出的数据或从存储器控制单元15读出的数据进行预定的像素插值、诸如缩小等的调整大小处理和颜色转换处理。此外，图像处理单元24使用拍摄的图像数据来进行预定的计算处理，并且系统控制单元50基于所获得的计算结果来进行曝光控制和测距控制。由此，进行通过镜头(TTL)方式的自动调焦(AF)处理、自动曝光(AE)处理和电子闪光(EF)(闪光预备发光)处理。图像处理单元24还使用拍摄的图像数据来进行预定的计算处理，并基于所获得的计算结果来进行TTL方式的自动白平衡(AWB)处理。

从A/D转换器23输出的数据随后经由图像处理单元24和存储器控制单元15而写入存储器32中、或者经由存储器控制单元15而不经由图像处理单元24直接写入存储器32中。存储器32存储由摄像单元22获取并由A/D转换器23转换成数字数据的图像数据，或者要在显示单元28上显示的图像数据。存储器32具有用以存储预定数量的静止图像或者在预定时间内拍摄的运动图像和声音的存储容量。此外，存储器32还用作图像显示用存储器(视频存储器)。

数模(D/A)转换器13将存储在存储器32中的用于图像显示的数据转换为模拟信号，并将模拟信号提供给显示单元28。以这种方式，存储在存储器32中的用于显示的图像数据然后经由D/A转换器13显示在显示单元28上。显示单元28在诸如液晶显示器(LCD)等的显示装置上进行与从D/A转换器13提供的模拟信号相对应的显示。然后，D/A转换器13将通过A/D转换器23进行了A/D转换并存储在存储器32中的数字信号转换为模拟信号，然后将模拟信号顺次传送到显示单元28并在显示单元28上进行显示，从而实现电子取景器的功能，从而使得能够进行直通图像显示(实时取景显示)。

非易失性存储器56是用作可以通过系统控制单元50以电气方式进行的擦除、记录和读取操作的记录介质的存储器，并且包括例如电可擦除可编程只读存储器(EEPROM)。例如，用于系统控制单元50的操作的常数和程序存储在非易失性存储器56中。这里使用的程序是执行用以进行下面在本典型实施例中描述的各种流程图的计算机程序。

系统控制单元50在其中包含至少一个处理器，并控制数字照相机100整体。系统控制单元50用作通过执行记录在非易失性存储器56上的程序来实现本典型实施例中的各种处理操作的计算机。

系统存储器52包括随机存取存储器(RAM)，在其上例如展开系统控制单元50的操作所用的常数和变量以及从非易失性存储器56读出的程序。此外，系统控制单元50还通过控制例如存储器32、D/A转换器13和显示单元28来进行显示控制。

模式选择开关60将系统控制单元50的操作模式切换为例如静止图像记录模式、运动图像拍摄模式和回放模式中的任何一个。包括在静止图像记录模式中的模式包括自动摄像模式、自动场景判别模式、手动模式、全景摄像模式、进行各个摄像场景的摄像设置的各种场景模式、程序自动曝光(AE)模式和自定义模式。模式选择开关60用于将系统控制单元50的操作模式直接切换到菜单画面中所包括的这些模式中的任何一个。可选地，在通过模式选择开关60切换到菜单画面之后，可以使用其它操作构件来进行向菜单画面中所包括的这些模式中的任何一个的切换。同样地，在运动图像拍摄模式中可以包括多个模式。

第一快门开关62被配置为响应于数字照相机100的快门按钮61的中途操作(换句话说，半按下状态)(摄像准备指示)而接通，从而生成第一快门开关信号SW1。响应于第一快门开关信号SW1，开始诸如自动调焦(AF)处理、自动曝光(AE)处理、自动白平衡(AWB)处理和闪光预发光(EF)处理等的操作。

第二快门开关64被配置为响应于快门按钮61的完成操作(换句话说，完全按下状态)(摄像指示)而接通，从而生成第二快门开关信号SW2。响应于第二快门开关信号SW2，系统控制单元50开始进行自摄像单元22所进行的静止图像拍摄操作起、从摄像单元22的信号读出操作、至将数据写入记录介质200的写入操作的一系列摄像处理操作。

在显示单元28上所显示的各种功能图标被选择和操作的状态下，操作单元70的各种操作构件针对各情形被适当地分配相应的功能，从而用作各种功能按钮。这些功能按钮包括例如结束按钮、后退按钮、图像前进按钮、跳过按钮、光圈缩小按钮和属性改变按钮。例如，当按下菜单按钮时，在显示单元28上显示各种可设置的菜单画面。允许用户使用显示在显示单元28上的菜单画面以及上、下、左和右的四向按钮和设置按钮来直观地进行各种设置。

电源控制单元80利用例如电池检测电路、DC-DC转换器和用于切换要通电的块的开关电路来配置，并且检测电池的安装的存在或不存在、电池的类型、以及剩余电池电量。此外，电源控制单元80基于这种检测的结果和来自系统控制单元50的指示来控制DC-DC转换器，并在各自的时间段向包括记录介质200的各个部分供给电压。电源开关72是用于切换数字照相机100的通电和断电的开关。电源单元30例如包括诸如碱性电池或锂电池等的一次电池，诸如镍镉(NiCd)电池、镍氢(NiMH)电池或锂(Li)电池等的二次电池，或者交流(AC)适配器。

记录介质接口(I/F)18是与诸如存储卡或硬盘等的记录介质200的接口。记录介质200是用于在摄像时记录图像的诸如存储卡等的非易失性记录介质，并且利用例如半导体存储器、光盘或磁盘来配置。

通信单元54经由无线或经由有线线缆连接到外部装置或网络，并且进行例如视频信号和音频信号的发送和接收。通信单元54还能够连接到无线局域网(LAN)或因特网。通信单元54能够发送摄像单元22所拍摄的图像(包括直通图像)和记录介质200上所记录的图像，并且还能够从外部装置接收图像数据或各种其它信息。

姿势检测单元55检测数字照相机100相对于重力方向的姿势。可以基于姿势检测单元55所检测到的姿势来辨别摄像单元22所拍摄的图像是以横向姿势保持的数字照相机100所拍摄的图像还是以纵向姿势保持的数字照相机100所拍摄的图像。系统控制单元50能够将与姿势检测单元55所检测到的姿势相对应的姿势信息附加到摄像单元22所拍摄的图像的图像文件，或者以旋转了的图像来进行记录。要使用的姿势检测单元55包括例如加速度传感器和陀螺仪传感器。

接着，参考图3来描述本典型实施例中的全景摄像处理。该处理由系统控制单元50将记录在非易失性存储器56上的程序加载到系统存储器52上并执行该程序来实现。此外，响应于数字照相机100通电并被切换到全景摄像模式而开始该处理。

在步骤S301中，系统控制单元50在显示单元28上显示摄像单元22所获取到的实时取景图像。如图5的(5A)所示显示实时取景图像。在全景摄像中，用户向右或向左或向上或向下移动数字照相机100(进行摇摄)以逐渐改变用于摄像的被摄体(摄像角度)，从而对拍摄图像进行合成以生成具有宽视角的合成图像。参考图4的(4A)、(4B)、(4C)和(4D)来描述在全景摄像中获取图像的方法。图4的(4A)至(4D)是用于说明摇动数字照相机100的方向与要从图像数据剪切的剪切区域之间的关系的图。图4的(4A)示出摄像单元22中所包括的图像传感器的有效图像区域，其中“Wv”表示水平方向上的有效像素的数量，以及“Hv”表示垂直方向上的有效像素的数量。图4的(4B)示出从拍摄图像的图像数据剪切的剪切区域，其中“Wcrop”表示水平方向上的剪切像素的数量，以及“Hcrop”表示垂直方向上的剪切像素的数量。图4的(4C)是示出针对在数字照相机100沿由箭头指示的水平方向摇动的同时进行摄像的情况下的图像数据的剪切区域的图。在图4的(4C)中，由阴影表示的区域S1表示要从图像数据中剪切的剪切区域，其中沿水平方向的图像数据的剪切被设置为“Wv>Wcrop”并且沿垂直方向的图像数据的剪切被设置为“Hv＝Hcrop”。图4的(4D)是示出针对在数字照相机100沿由箭头指示的垂直方向摇动的同时进行摄像的情况下的图像数据的剪切区域的图。在图4的(4D)中，由阴影表示的区域S2表示要从图像数据中剪切的剪切区域，其中沿水平方向的图像数据的剪切被设置为“Wv＝Wcrop”并且沿垂直方向的图像数据的剪切被设置为“Hv>Hcrop”。可以针对每个图像数据设置不同的拍摄图像的图像数据的剪切区域。此外，针对在摇摄开始时要获得的图像数据和在摇摄结束时要获得的图像数据，可以将各个剪切区域设置得较宽以使得视角变宽。确定图像数据的剪切区域的方法可以通过例如在紧接着摄像之后所获得的数字照相机100的角度与一帧之前所获得的数字照相机100的角度之间的差来设置。剪切和存储用于全景图像合成处理的图像数据，这使得能够节省存储器32的存储容量。

以这种方式，在正在进行摇摄时获取要合成的图像，并且以同一被摄体位于相同位置的方式沿水平方向或垂直方向顺次对多个图像进行合成。由此，可以获取到比在图像传感器中一次摄像所能够拍摄的范围宽的范围(视角)。在步骤S301中，可以显示表示向右移动数字照相机100的项，诸如图5的(5A)所示的项502等。

在步骤S302中，系统控制单元50获取光学系统信息。在步骤S302中要获取的光学系统信息是相对于摄像单元22的与透镜103有关的焦距信息，该焦距信息是基于与安装到数字照相机100的透镜103有关的信息和所设置的变焦倍率的值来获取的。具体地，系统控制单元50获取与加载在系统存储器52中的焦距有关的摄像信息。

在步骤S303中，系统控制单元50计算全景图像的视角。系统控制单元50基于在步骤S302中获取到的光学系统信息中所包括的焦距信息来计算作为一个全景图像可记录的合成图像的视角的大小作为视角信息。参考图4的(4E)来描述具体计算方法。图4的(4E)是示意性示出相对于图像传感器的透镜的焦距与视角之间的关系的图。示出了图像传感器401、摄像透镜402和相对于图像传感器401的摄像透镜402的焦距403。然后，还示出了图像传感器401和摄像透镜402所取的视角404。此外，在本示例中，描述了沿水平方向的全景摄像。这里，在假设关于图像传感器401的大小，宽度由Sw(mm)表示，视角404由θ(rad)表示，并且焦距403由r(mm)表示的情况下，视角404可以通过下面的公式(1)来计算。

θ＝2×arctan((Sw/2)/r)(1)

这里所示的视角404是相对于图像传感器401的整个面的视角，因此表示合成用的一个拍摄图像的视角的大小。

另一方面，图像传感器401的整个面的视角与可记录为全景图像的视角的比例等于合成用的一个拍摄图像的宽度与可记录全景图像的最大宽度的比例。换句话说，在假设可记录全景图像的最大宽度(全景图像最大宽度)由Pw(像素)表示并且一个拍摄图像的宽度(一个拍摄图像宽度)由Iw(像素)表示的情况下，可以通过下面的公式(2)来计算可记录为一个全景图像的视角的大小作为视角Pθ。

Pθ＝(Pw/Iw)×θ(2)

基于公式(1)和(2)获得下面的公式(3)。

Pθ＝2×(Pw/Iw)×arctan((Sw/2)/r)(3)

换句话说，在假设根据数字照相机100唯一确定全景图像最大宽度Pw、一个拍摄图像宽度Iw和图像传感器宽度Sw的情况下，可记录为一个全景图像的视角Pθ的大小取决于焦距r。

基于具体数值示例来进一步描述其细节。在假设数字照相机100的摄像单元22的图像传感器是APS-C尺寸的CMOS传感器的情况下，其有效像素部分的水平宽度是22.7mm，并且相对于摄像单元22的透镜103的焦距通过变焦杆78而被设置为18mm。然后，在假设合成用的一个拍摄图像包括5000个像素并且可记录全景图像的最大宽度是20000个像素的情况下，通过公式(3)将可记录为一个全景图像的视角的大小计算为约258°的视角。同样地，在焦距为36mm的情况下，将可记录为一个全景图像的视角的大小计算为约140°的视角。

这些计算处理操作由系统控制单元50和图像处理单元24进行。此外，预先记录在例如系统存储器52或记录介质200上的多个固定数据(诸如全景图像最大宽度、一个拍摄图像宽度和图像传感器宽度)被存储器控制单元15加载并被图像处理单元24处理。每当操作变焦杆78时在存储器32上更新并记录的与焦距有关的信息在计算处理期间也被存储器控制单元15加载，并且被图像处理单元24处理。然后，将所计算出的视角信息经由存储器控制单元15记录在存储器32上。虽然在上述示例中已经描述了沿水平方向的全景摄像，但是本典型实施例也可以应用于沿垂直方向的全景摄像。在沿垂直方向的全景摄像中，全景图像最大宽度、一个拍摄图像宽度和图像传感器宽度被改变为与高度有关的各信息，并且可以进行同样的计算处理操作以获得表示可记录为一个全景图像的视角的大小的视角。

在步骤S304中，系统控制单元50在显示单元28上显示表示全景摄像中可用于摄像的视角的范围的项。在步骤S304中显示的项包括例如图5的(5A)或(5B)所示的项503或504。图5的(5A)和(5B)示出在对同一被摄体进行了摄像的情况下所获得的实时取景图像，以及例如假设在拍摄图5的(5A)所示的实时取景图像501的情况下的焦距是18mm和假设拍摄图5的(5B)所示的实时取景图像505的情况下的焦距是36mm。在步骤S303中描述的示例中，在焦距为18mm的情况下，可记录为一个全景图像的视角的大小是258°，以及在焦距为36mm的情况下，可记录为一个全景图像的视角的大小为140°。图5的(5A)所示的项503表示可记录为一个全景图像的视角的大小高达258°，因此项503使得用户能够掌握作为合成图像可获取到180°以上的宽视角。图5的(5B)所示的项504表示可记录为一个全景图像的视角的大小高达140°，因此项504使得用户能够掌握作为合成图像可获取到小于180°的视角。以这种方式，显示表示在步骤S303中所获取到的视角的项，使得用户能够掌握以下内容。具体地，在可记录全景图像的最大宽度是固定(例如，在上述示例中为20000个像素)的情况下，用户可以在摄像之前掌握能够在数字照相机100的当前条件(例如，焦距和图像传感器)下获取到具有什么视角的图像。由于用户能够在进行全景摄像之前掌握可以获得围绕用户360°范围中的多大视角，因此使得用户能够在拍摄要通过合成所获得的图像的同时进行摄像。例如，在使用远摄镜头进行摄像的情况下，即使用户想要进行包括长桥的中间的全景摄像，当在桥的一端开始摄像时，中间也可能无法包含在合成图像中。然而，由于预先表示要通过合成所获得的图像的视角以使得能够掌握能够获取到的视角，因此可以容易掌握从哪里开始全景摄像使得能够将意图的被摄体包含在合成图像中。可选地，如图5的(5B)所示，在远摄设置下进行摄像的情况下，项504使得能够掌握能够获得的最大视角(可记录为一个全景图像的视野的大小的范围)小于180度。因此，在用户意图使从桥的一端到其中间的范围包含在合成图像中的情况下，用户可以预先将设置改变到广角侧，从而使得能够获得具有更宽视角的合成图像。此外，可以将当前正显示为实时取景图像的拍摄图像范围的视角与项503或504一起显示。

在步骤S305中，系统控制单元50判断是否已经发出了摄像开始指示。可以响应于按下快门按钮61而发出摄像开始指示。如果判断为已经发出了摄像开始指示(步骤S305中为“是”)，则处理进入步骤S308，否则(步骤S305中为“否”)，处理进入步骤S306。

在步骤S306中，系统控制单元50判断镜头单元150是否已被更换并且其中安装的透镜103是否已经改变。如果判断为透镜103已经改变(步骤S306中为“是”)，则处理返回到步骤S302，否则(步骤S306中为“否”)，处理进入步骤S307。

在步骤S307中，系统控制单元50判断光学变焦倍率是否已经改变(镜头位置是否已经改变)。根据针对变焦杆78所进行的操作来改变光学变焦倍率。如果判断为光学变焦倍率已经改变(步骤S307中为“是”)，则处理返回到步骤S302，否则(步骤S307中为“否”)，处理返回到步骤S305。在光学变焦倍率或透镜103已经改变的情况下，由于在步骤S303中要计算的视角范围改变，因此处理返回到步骤S302，使得系统控制单元50重新进行用于计算视角的处理。

在步骤S308中，系统控制单元50进行摄像处理。在摄像处理中，摄像单元22控制快门和光圈，然后获取静止图像。

在步骤S309中，系统控制单元50进行全景图像合成处理。参考图4的(4F1)、(4F2)、(4F3)、(4F4)和(4F5)来描述步骤S308和步骤S309中的处理。图4的(4F1)至图4的(4F5)是用于说明全景图像的合成处理的流程的图。在图4的(4F1)中，点阴影区域是示意性表示视野中所包括的一行树的区域，并且斜线阴影区域表示图像数据中的剪切区域。图4的(4F1)示出在按下快门按钮61时首先拍摄的图像的位置，其中范围405表示通过进行一次摄像(步骤S308中的摄像处理)所获取到的摄像范围，因此视野被设置为要通过合成而意图获得的全景图像的一端。图4的(4F2)和图4的(4F3)示意性示出在数字照相机100正在向着要通过合成而意图获得的全景图像的另一端摇动的同时顺次进行摄像的状态。在全景摄像中，如图4的(4F2)和图4的(4F3)所示，逐个图像顺次进行摄像，并且每次都在步骤S309中进行合成处理，并且还进行下面描述的步骤S310至步骤S312中的处理。此外，进行步骤S308至步骤S312中的处理，直到在判断为通过对所获取到的图像数据进行合成而获得的图像的宽度(像素数)达到最大值(例如，20000个像素)的情况下在步骤S312中结束摄像为止。这里，用户不会在每次摄像操作中都发出摄像指示，而是需要在图4的(4F1)所示的摄像中进行的首次操作时发出响应于快门按钮61的按下而要发出的摄像开始指示。图4的(4F4)示出当已经进行了数字照相机100的摇动并且通过对所获取到的图像数据进行合成而获得的图像的宽度(像素数)已经达到最大值(例如，20000个像素)时顺次摄像结束的情况。换句话说，图4的(4F4)示出在步骤S312中判断为已经获取到与步骤S303中所计算出的最大视角相对应的图像数据的情况下顺次摄像已经结束的状态。以这种方式，在用户正在摇动数字照相机100的同时，以逐渐改变的摄像范围来顺次进行摄像，直到达到可记录全景图像的最大宽度的像素数为止。图4的(4F5)示出作为顺次对多个拍摄图像进行合成(静止图像)的结果而最终获得的全景图像。可记录全景图像的最大宽度的像素数由数字照相机的类型或手动选择设置来确定。

此外，在上述步骤S310中，系统控制单元50计算通过顺次对拍摄图像进行合成而获得的合成图像的视角。描述具体计算方法。一个拍摄图像的视角与合成图像数据中所记录的最大视角的大小的比例等于一个拍摄图像的宽度的像素数与合成图像的宽度的像素数的比例。因此，在合成图像的宽度的像素数由Cw(像素)表示的情况下，基于公式(3)通过下面的公式(4)来计算表示合成图像数据中所记录的视角的大小的视角Cθ(rad)。

Cθ＝2×(Cw/Iw)×arctan((Sw/2)/r)(4)

与关于步骤S303描述的数值示例一样，描述了沿水平方向的全景摄像。在假设在针对一个图像的全景摄像中能够记录的图像的最大宽度是5000个像素的情况下，摄像单元22是具有水平宽度22.7mm的有效像素部分的CMOS传感器，并且透镜103的焦距被设置为18mm。如果此时获得的合成图像数据的水平宽度是2000个像素，则获得合成图像中所记录的视野范围作为约52°的视角。这些计算处理操作由系统控制单元50和图像处理单元24进行，并且预先记录在系统存储器52或记录介质200上的多个固定数据(诸如一个拍摄图像宽度和图像传感器宽度)被存储器控制单元15加载并被图像处理单元24处理。关于与合成图像宽度有关的数据，在步骤S309中存储在存储器32中的合成图像数据被存储器控制单元15加载和获取，并被图像处理单元24处理。关于与焦距有关的信息，记录在存储器32上的信息也被存储器控制单元15加载并被图像处理单元24处理。然后，经由存储器控制单元15将所计算出的与合成图像数据有关的视角信息记录在存储器32上。可选地，可以将在步骤S303中所计算的视角乘以通过将合成图像宽度(像素数)除以能够通过合成所获得的图像的最大图像宽度而获得的值来计算视角。

在步骤S311中，系统控制单元50更新显示的进度项以表示全景进度。系统控制单元50基于在步骤S310中所计算出的合成图像数据(通过对拍摄图像进行合成所获得的图像数据)中所记录的最大视角的大小来更新进度项。图5的(5C)和(5D)所示的进度项506和507分别对应于图5的(5A)和(5B)所示的项503和504，项503和504各自的整个宽度表示可记录为一个全景图像的视角的大小(视野的范围)。进度项506的区域506a和进度项507的区域507a各自表示通过合成所获得的视角的大小。区域506a和507a各自是作为图像数据所生成的圆弧，以表示与在步骤S310中所获取到的视角相对应的角度。因此，随着图像合成的进行，进度项的显示方式正在以与通过合成而新添加的视角相对应的圆弧的角度改变。在各自表示向右进行摇动的情况的图5的(5C)和(5D)所示的示例中，按照从左端向右端的顺序，进度项的显示方式以与通过合成而新添加的视角相对应的圆弧的角度从灰色向黑色改变。换句话说，进度项的显示方式按从一端向着照相机的摇动方向(另一端)顺次逐渐改变。图5的(5C)所示的阴影线部分506b实际上并未显示，而是为了说明的目的而示出的，并且在步骤S309中接着进行的合成处理中添加新的拍摄图像以进行合成的情况下，与相关视角相对应的圆弧的角度α所定义的区域的显示方式从灰色变为黑色。因此，随着拍摄图像的数量增加并且通过合成所获得的视角相应地增加，显示方式改变的部分变大。此外，在向左进行摇动的情况下，进度项的显示方式按从右端向左端的顺序逐渐改变。此外，在步骤S310中，代替计算视角，可以获得当前合成图像的图像宽度(像素数)与能够通过合成所获得的合成图像的最大图像宽度的比例，并且可以根据所获得的比例来改变进度项的显示方式。

在步骤S312中，系统控制单元50判断摄像是否已经结束。在合成图像已经达到可记录为一个全景图像的像素数以及响应于用户发出的摄像结束指示的情况下，全景摄像结束。经由存储器控制单元15获取记录在存储器32上的合成图像数据，然后通过图像处理单元24将该合成图像数据与先前确定的可记录全景图像的最大大小进行比较，并且在合成图像数据达到最大大小的情况下，摄像结束。如果判断为摄像已经结束(步骤S312中为“是”)，则处理进入步骤S313，否则(步骤S312中为“否”)，处理返回到步骤S308。如果在步骤S312中未判断为摄像已经结束，则重复步骤S308至步骤S311中的处理，即重复进行摄像和显示进度的一系列处理操作。

在步骤S313中，系统控制单元50进行记录处理。更具体地，系统控制单元50进行用于将在步骤S309中通过合成所获得的图像记录在记录介质200上的处理。

根据上述典型实施例，使得用户能够在全景摄像之前掌握可记录为一个全景图像的视角的大小以及全景图像合成的进度。这样，使得用户能够在摄像之前调整全景摄像的起始位置或适当的焦距，从而容易地在意图的范围内进行摄像并且省去进行不想要的预备摄像的麻烦。

[显示摇动速度]

此外，可以配置显示在用以改变摄像设备的方向的摇摄期间的速度。在如全景摄像中那样用户在手持数字照相机100的同时进行摇摄的情况下，即使摆动宽度相同，由于根据例如变焦倍率的增加而使焦距变长并且视角变大，因此在图像传感器上所形成的视野的移动量也变大。换句话说，由于在图像合成期间，与先前拍摄图像重叠的区域用作重叠宽度，因此以离开重叠区域的方式进行后续摄像，从而随着焦距变长，摇动速度会降低。然而，用户难以掌握以什么速度进行摇动是适当的。因此，以过高的速度进行摇动可能导致全景摄像失败，以及以过低的速度进行摇动可能导致进行多余摄像。

因此，可以将用于明确地表示对于用户适当的摇动速度的项与可记录为一个全景图像的视角的范围一起。基于在步骤S303中所计算出的视角信息、全景图像的最大大小、通过进行一次摄像所能够拍摄的图像的大小、以及与合成用的重叠宽度有关的像素大小信息，来获得适当的摇动速度。基于上述信息计算要拍摄多少图像来生成一个全景图像，并且基于全景合成图像的最大宽度来计算针对每次摄像进行摇动的角度。然后，基于摄像速度和合成处理速度来计算先前在数字照相机100中定义的全景摄像中的摄像间隔。最后，基于摄像间隔和在摄像和摄像之间进行摇动的角度来计算摇动速度。然后，基于所计算出的摇动速度来显示诸如图5的(5E)或(5F)所示等的速度引导。

与图5的(5A)相对应的图5的(5E)示出速度引导508的显示，以及与图5的(5B)相对应的图5的(5F)示出速度引导509的显示。例如，当假设图5的(5E)的情况下的焦距是18mm并且假设图5的(5F)的情况下的焦距是36mm时，由于在焦距较短的情况下允许进行较快的摇动，速度引导508的箭头比速度引导509的箭头长，使得速度引导508表示允许进行更快的摇动。另一方面，在显示速度引导509的情况下，用户可以掌握应该缓慢地进行摇动。然后，这样的引导不限于通过示例示出的箭头状物体，而可以是以所计算的速度进行动画运动的图标，并且可以具有任何形式，只要可以表示所计算出的适当速度即可。例如，速度可以用数字表示。此外，诸如图5的(5A)至(5D)之一所示等，示出摇动速度的表示可以与示出可记录为一个全景图像的视角的大小的项一起显示。此外，示出适当的摇动速度的表示可以与示出当前摇动速度的项一起显示，从而使得能够掌握当前摇动速度是高于还是低于适当的摇动速度。

根据上述示例，使得用户能够预先掌握用户应该以什么摇动速度来进行全景摄像。这使得用户更容易以适当的速度实现摇摄，从而可以防止或减少全景摄像失败或过度摄像。

此外，在上述典型实施例的描述中，虽然已经使用图5的(5A)至(5F)描述了表示可记录为一个全景图像的视角的大小，但是项的显示方式不限于上述方式。

图5的(5G)和(5H)示出显示矩形条的示例。图5的(5G)所示的项510对应于项503，以及图5的(5H)所示的项511对应于项504。基于与矩形条有关的模板图像数据，将这些项生成为具有与步骤S303中所计算出的视角的大小成比例的长度的矩形数据。

图5的(5I)示出圆形的三维项的显示的示例。与通过从包围具有宽度l的圆圈的区域512减去扇形斜线阴影部分513而获得的角度相对应的部分，换句话说，与角度β相对应的部分表示可记录为一个全景图像的视角的大小。在开始全景摄像之后，显示方式从原始显示方式如点阴影部分514那样改变，从而表示合成的进度。

图5的(5J)示出如下显示示例：不仅表示可记录为一个全景图像的视角的大小，而且还以带状方式逐渐显示合成图像来表示合成的进度。在图5的(5J)中，通过项503来表示可记录为一个全景图像的视角的大小，并且在区域515中显示合成图像。在全景摄像期间，用户以使得在区域515中使框516向右移动的方式摇动数字照相机100。这使得用户能够在确认在区域515中正在合成图像的同时进行摇动。

用于引导的这些图标不限于作为示例所示的圆弧状条或矩形条，而可以具有任何形式，只要能够表示所计算出的视角即可。此外，这些引导仅需要是能够显示视角的引导，因此，不需要是诸如以上所述等的图标，而可以是直接表示例如等于所计算出的视角的数值的项。

此外，在上面的描述中，虽然已经描述了获取与镜头有关的焦距信息作为变焦倍率信息的示例，但是本发明不限于此，而是可以应用于以下情况。具体地，例如，可以获取与电子变焦有关的变焦倍率信息，并且例如，可以根据所获取到的变焦倍率信息自然地改变要在画面中显示的全景摄像角度或摇动速度表示。

在上述典型实施例中由系统控制单元50进行的各种控制操作可以由一个硬件进行。可选地，多个硬件可以分担用以控制整个设备的处理。

虽然已经使用具体实施例描述了本发明的典型实施例，但是本发明不限于特定的典型实施例和示例，并且应当理解，可以在不背离本发明的精神或范围的情况下进行改变和修改。上述典型实施例仅是示例，并且可以适当地组合。

虽然在上述实施例中例示了将本发明应用于数字照相机100的情况，但是本发明并不局限于此，本发明还可应用于能够在发出记录指示之前对记录数据进行记录的记录控制设备。具体地，本发明可应用于例如移动电话终端、移动图像查看器、设置有取景器的打印机设备、数字相框、音乐播放器，游戏机或电子书阅读器。

<其它实施例>

通过进行前述处理来实现本发明的一些典型实施例。具体地，可以将实现上述典型实施例的功能的软件经由网络或各种记录介质提供给系统或设备，并且系统或设备中的一个或多个计算机(或中央处理单元(CPU)或微处理单元(MPU))可以读出程序代码以供执行。在这种情况下，程序和存储有该程序的非易失性记录介质构成一些典型实施例。

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将进行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并进行程序的方法。

尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (18)

1.一种摄像控制设备，包括：

获取单元，其被配置为获取与变焦倍率有关的信息；

合成单元，其被配置为对通过一系列摄像操作获取到的多个图像进行合成，以生成与所获取到的各个图像相比视角更宽的合成图像；以及

控制单元，其被配置为进行控制，以在开始所述一系列摄像操作之前，基于所获取到的信息来显示表示通过所述合成单元对多个图像进行合成而能够生成的合成图像的视角的项。

2.根据权利要求1所述的摄像控制设备，其中，所述控制单元进行控制，以在连接第一镜头的情况下显示表示第一视角的项，以及在连接与所述第一镜头相比角度更宽的第二镜头的情况下显示表示比所述第一视角大的第二视角的项。

3.根据权利要求1所述的摄像控制设备，其中，所述控制单元进行控制，以在所述变焦倍率是第一倍率的情况下显示表示第三视角的项，以及在所述变焦倍率是与所述第一倍率相比角度更宽的第二倍率的情况下显示表示比所述第三视角大的视角的项。

4.根据权利要求1所述的摄像控制设备，还包括指示单元，所述指示单元被配置为发出用以开始所述一系列摄像操作的指示，

其中，响应于所述一系列摄像操作的开始，所述控制单元进行控制，以进行表示通过对拍摄图像进行合成而获得的合成图像的视角的显示。

5.根据权利要求1所述的摄像控制设备，其中，所述合成图像的视角与所述项一起显示。

6.根据权利要求1所述的摄像控制设备，其中，所述项是示出角度的表示，并且所述项的大小根据所获取到的信息而不同。

7.根据权利要求1所述的摄像控制设备，其中，所述项是条。

8.根据权利要求7所述的摄像控制设备，其中，在开始所述一系列摄像操作之后，根据拍摄图像的数量的增加，所述条的显示方式从其一端向着另一端改变。

9.根据权利要求1所述的摄像控制设备，其中，与所述变焦倍率无关地，通过所述合成单元所进行的合成而能够生成的合成图像的最大像素数相等。

10.根据权利要求1所述的摄像控制设备，其中，在所述一系列摄像操作中，在正在改变摄像单元的方向时进行摄像。

11.根据权利要求1所述的摄像控制设备，其中，所述与变焦倍率有关的信息是焦距。

12.根据权利要求1所述的摄像控制设备，其中，所述与变焦倍率有关的信息是电子变焦。

13.一种摄像控制设备，包括：

获取单元，其被配置为获取与变焦倍率有关的信息；

合成单元，其被配置为对通过一系列摄像操作获取到的多个图像进行合成，其中在所述一系列摄像操作中，在正在改变摄像单元的方向时进行摄像；以及

控制单元，其被配置为进行控制，以在开始所述一系列摄像操作之前，基于所获取到的信息来显示表示在所述一系列摄像操作中改变所述摄像单元的方向的速度的引导。

14.根据权利要求13所述的摄像控制设备，

其中，所述合成单元是被配置为从通过所述一系列摄像操作获取到的所述多个图像来生成与所获取到的各个图像相比视角更宽的合成图像的合成单元，以及

其中，所述控制单元进行控制，以在开始所述一系列摄像操作之前，基于所获取到的信息来将表示所述合成单元能够生成的合成图像的视角的项与所述引导一起显示。

15.根据权利要求13所述的摄像控制设备，其中，所述与变焦倍率有关的信息是焦距。

16.根据权利要求13所述的摄像控制设备，其中，所述与变焦倍率有关的信息是电子变焦。

17.一种非暂时性计算机可读记录介质，其存储有用于使计算机用作根据权利要求1所述的摄像控制设备的各单元的程序。

18.一种非暂时性计算机可读记录介质，其存储有用于使计算机用作根据权利要求13所述的摄像控制设备的各单元的程序。