CN102572240A - 成像设备、图像处理设备、图像处理方法和程序 - Google Patents

Abstract

本发明公开了成像设备、图像处理方法和程序。该成像设备包括：成像部分，当执行成像时用于根据成像位置对全向被摄体成像，并产生包括所述全向被摄体的圆形图像；图像处理部分，在根据在所有方向中基于处于成像位置的成像设备的姿态指定的方向而产生的圆形图像上指定基本上扇形的对象区域，并且将该对象区域的图像转换为基本上矩形的图像；以及显示控制部分，用于将作为已转换图像的转换图像和所产生的圆形图像同时显示在显示部分上。

Description

成像设备、图像处理设备、图像处理方法和程序

技术领域

本公开涉及成像设备，具体地说涉及成像设备、图像处理设备、图像处理方法和用于使计算机执行用于关于全向图像执行图像处理的方法的程序。

背景技术

最近几年，由诸如风景之类的成像被摄体产生图像(图像数据)并且将产生的图像记录为图像文件(图像内容项)的成像设备，比如数码相机或者数字摄像机(集成了记录器的相机)越来越普及。此外，已经提出了产生包括较宽范围被摄体的图像的成像设备。例如，已经提出了对全向被摄体成像并且产生全向图像(包括全向被摄体的图像)的成像设备。

例如，提出了通过利用包括具有旋转对称形状的反射表面的全向成像光学系统而能够对全向(360°)被摄体成像的成像设备(例如，请参见第2000-131738号日本未审查专利申请公开)。

发明内容

在现有技术中，因为可以对全向被摄体成像的事实，所以例如可以产生全向图像(环形图像或者圆形图像)。

此外，还假定通过使用于产生全向图像的适配器(包括全向成像光学系统的适配器)可卸下和将该适配器安装在成像设备上来记录全向图像。此外，假定适配器安装在成像设备上并且执行全向图像的成像操作的情况。当用户在执行成像操作的同时确认捕获图像时，可以认为用户通过观看全向图像(例如，环形图像或者圆形图像)来进行确认。

然而，在执行正常成像操作时显示的图像(例如，包括光轴方向上的被摄体的图像)和在执行全向图像的成像操作时显示的全向图像的成像范围互相不同。因此，例如，假定习惯于正常成像操作的用户通过观察所显示的全向图像难以察觉成像操作或者全向图像的条件。此外，同样，在再现利用全向图像的成像操作记录的全向图像的情况下，假定习惯于利用正常成像操作记录的图像的用户即使在观看全向图像时也难以察觉全向图像。

因此，希望容易地察觉利用全向成像光学系统产生的全向图像。

根据本公开的实施例，提供了成像设备、图像处理方法和由计算机执行该方法的成像，该成像设备包括：成像部分，根据执行成像时的成像位置对全向被摄体成像，并且产生包括全向被摄体的圆形图像；图像处理部分，在根据在所有方向之中基于成像位置中成像设备的姿态指定的方向产生的圆形图像上指定基本上扇形的对象区域，并且将该对象区域的图像转换为基本上矩形的图像；以及显示控制部分，将作为已转换图像的转换图像和产生的圆形图像同时显示在显示部分上。因此，获得了下面的效果。即，产生圆形图像(全向图像)，指定基于指定方向的圆形图像中基本上扇形的对象区域，将该对象区域的图像转换为基本上矩形的图像，因此，同时显示已转换图像(转换图像)和产生的圆形图像。

此外，在本公开的实施例中，该图像处理部分可以指定对象区域，以使得在产生的圆形图像中不截断该指定方向。因此，获得下面的效果。即，指定对象区域，以使得在产生的圆形图像中，不截断该指定方向。

此外，在本公开的实施例中，在安装了包括用于对包括在光轴方向上的被摄体的全向被摄体成像的全向成像光学系统的适配器的状态下，该成像部分产生圆形图像，以及该图像处理部分可以根据成像位置包括光轴方向作为指定方向。因此，获得下面的效果。即，在安装了包括全向成像光学系统的适配器的状态下，产生圆形图像，以及在根据成像位置包括成像部分的光轴方向作为指定方向的同时，指定对象区域。

此外，在本公开的实施例中，该成像设备可以进一步包括显示部分，光轴方向可以与垂直于该显示部分中的显示表面的方向近似一致，以及在安装了适配器的状态下，成像部分可以产生包括处于光轴方向上的被摄体和面对显示表面的被摄体的圆形图像。因此，获得下面的效果。即，在安装了适配器的状态下，产生包括处于光轴方向上的被摄体和面对显示部分中的显示表面的被摄体的圆形图像。

此外，在本公开的实施例中，该图像处理部分可以将产生的圆形图像的圆周方向划分为4个，并且指定该四个划分的区域作为对象区域，以使得光轴方向上的被摄体和面对显示表面的被摄体分别位于转换图像的中心位置。因此，获得下面的效果。即，该圆形图像的圆周方向划分为4个，以使得成像部分的光轴方向上的被摄体和面对显示部分中的显示表面的被摄体分别位于转换图像的中心位置，并且指定该四个划分的区域作为对象区域。

此外，在本公开的实施例中，在执行圆形图像的成像操作时，显示控制部分可以将该转换图像和产生的圆形图像显示在显示部分上。因此，获得下面的效果。即，在执行圆形图像的成像操作时，显示该转换图像和圆形图像。

此外，在本公开的实施例中，该成像设备可以进一步包括：操作接收部分，接收切换显示部分中的显示状态的切换操作，其中该图像处理部分可以将产生的圆形图像的圆周方向划分为多个，将划分的多个区域指定为对象区域，以及产生多个转换图像，以及显示控制部分当接收到切换操作时根据该切换操作，可以将显示在显示部分上的转换图像切换到另一转换图像。因此，获得下面的效果。即，将该圆形图像的圆周方向划分为多个，将划分的多个区域指定为对象区域，以及产生多个转换图像，以及在接收到切换显示部分中的显示情况的切换操作的情况下，根据切换操作将该转换图像切换到另一转换图像。

此外，在本公开的实施例中，该图像处理部分可以指定基本上扇形的对象区域，以使得与产生的圆形图像的圆周方向上的指定方向对应的位置是基本上矩形图像中的指定位置。因此，获得下面的效果。即，指定该对象区域，以使得与圆形图像的圆周方向上的指定方向对应的位置是基本上矩形图像中的指定位置。

此外，在本公开的实施例中，成像部分可以产生图像作为圆形图像，在该图像中环形布置包括全向被摄体的图像。因此，获得下面的效果。即，产生其中包括全向被摄体的图像被环形布置的图像。

根据本公开的另一实施例，提供了图像处理设备、图像处理方法和由计算机执行该方法的程序，该图像处理设备包括：获取部分，根据执行成像设备的成像时的成像位置对全向被摄体成像，并且获取包括产生的全向被摄体的圆形图像；以及图像处理部分，用于根据在所有方向之中基于在成像位置中成像设备的姿态指定的方向，在获取的圆形图像中指定基本上扇形的对象区域，将该对象区域的图像转换为基本上矩形的图像，以及包括作为显示对象图像的图像。因此，获得下面的效果。即，获取圆形图像(全向图像)，根据指定的方向在圆形图像中指定基本上扇形的对象区域，以及将该对象区域的图像转换为基本上矩形的图像，以及包括作为显示对象图像的图像。

根据本公开的实施例，可以轻而易举地察觉利用全向成像光学系统产生的全向图像。

附图说明

图1A和图1B是示出本公开的第一实施例的成像设备的外观配置示例的示意图。

图2A和图2B是示出本公开的第一实施例的成像设备的外观配置示例的示意图。

图3A和图3B是示出本公开的第一实施例的成像设备和适配器的外观配置示例的示意图。

图4A和图4B是示出本公开的第一实施例的成像设备和适配器的外观配置示例的示意图。

图5是示出在本公开的第一实施例中可以包括在适配器中的全向成像光学系统的截面图。

图6是示出本公开的第一实施例的成像设备的内部配置示例的框图。

图7是示出本公开的第一实施例的成像设备的功能配置示例的框图。

图8A和图8B是简明示出在本公开的第一实施例中作为成像设备的成像对象的成像范围与由成像设备产生的捕获图像之间的关系的示意图。

图9A和图9B是示出在本公开的第一实施例中利用成像设备执行的成像操作与由成像操作产生的捕获图像之间的关系的示意图。

图10A和图10B是示出在本公开的第一实施例中利用成像设备执行的成像操作与由成像操作产生的捕获图像之间的关系的示意图。

图11A和图11B是示出在本公开的第一实施例中作为图像处理部分转换的对象的全向图像(环形图像)与转换之后的全景图像之间的关系的示意图。

图12A和图12B是示出在本公开的第一实施例中作为图像处理部分转换的对象的全景图像与对应于该全景图像的转换图像之间的关系的示意图。

图13A和图13B是示出在本公开的第一实施例中作为图像处理部分转换的对象的全向图像与转换之后的图像(转换图像)之间的关系的示意图。

图14是示出在本公开的第一实施例中显示在输入与输出面板上的全向图像和转换图像的显示示例的示意图。

图15是示出在本公开的第一实施例中当切换显示在输入与输出面板上的转换图像时的切换示例的示意图。

图16A和图16B是示出在本公开的第一实施例中显示在输入与输出面板上的全向图像和转换图像的显示示例的示意图。

图17是示出在本公开的第一实施例中成像设备执行的全向图像的成像操作控制处理的处理步骤的流程图。

图18是示出在本公开的第二实施例中图像处理设备的功能配置示例的框图。

图19A和图19B是示出在本公开的第二实施例中显示在显示部分上的全向图像和转换图像的显示示例的示意图。

具体实施方式

下面将描述本公开的实施例。根据下面的顺序进行描述。

1.第一实施例(显示控制：在执行成像操作或者再现时同时显示全向图像(环形图像)和转换图像(矩形图像)的示例)

2.第二实施例(显示控制：利用图像处理设备同时显示全向图像和转换图像的示例)

1.第一实施例

成像设备的外观配置示例

图1A至图2B是示出本公开的第一实施例的成像设备100的外观配置示例的示意图。

图1A是示出成像设备100的前表面(即，在其上安装面对被摄体的镜头的表面)的外观的前视图。此外，图1B是成像设备100的后表面(即，面对拍摄者的输入与输出面板151的表面)的外观的后视图。图2A是示出成像设备100的侧表面外观的侧视图。图2B是示出成像设备100的前表面侧的外观的侧视图。此外，例如，利用通过对被摄体成像而产生捕获图像(图像数据)并且记录所产生的捕获图像的成像设备实现成像设备100。例如，成像设备是数码相机、数字摄像机(例如，集成了记录器的相机)等。

成像设备100包括：成像部分110、电源开关141、快门按钮142、操作按钮组143、上/下与左/右按钮144、记录按钮145和输入与输出面板151。此外，图3A至图4B所示的适配器200安装在成像设备100的上端101。此外，为了固定安装在上端101上的适配器200(磁铁安装在与上端101邻接的表面上)，邻接(abut)适配器200的表面(上部101的上端表面)包括磁体。

成像设备110通过对被摄体成像产生捕获图像(图像数据)。此外，当安装适配器200时，利用成像部分110执行全向图像的成像操作(全向成像操作)。另外，将参考图6和图7详细描述成像部分110。

电源开关141是当接通/断开成像设备100的电源时使用的操作部件。

快门按钮142是当将成像部分110产生的图像(图像数据)记录为内容项目(静止图像内容项目)时用户按下的操作部件。例如，在设置成像模式的情况下，当快门按钮142半按下时，执行进行自动聚焦的聚焦控制。此外，在快门按钮142完全按下的情况下，执行聚焦控制，并且快门按钮完全按下时由成像部分110产生的图像(图像数据)被记录为内容项目(静止图像内容项目)。例如，内容项目记录在图6所示的存储卡180上。

操作按钮组143具有当执行各种操作时使用的操作按钮。

上/下与左/右按钮144是执行关于上/下和左/右的各种操作的操作按钮。

记录按钮145是当将成像部分110产生的图像(图像数据)记录为内容项目(运动图像内容项目)时用户按下的操作按钮。例如，在设置成像模式的情况下，当记录按钮145被按下时，开始由成像部分110产生的图像(图像数据)的记录处理。此外，在记录按钮145被再一次按下的情况下，图像(图像数据)的记录处理结束。例如，通过记录处理，内容项目(运动图像内容项目)记录在图6所示的存储卡180上。

输入与输出面板151显示各种图像，并且根据接近或者接触显示表面的人体的检测情况来从用户接收操作输入。此外，输入与输出面板151还被称为触摸屏或者触摸面板。输入与输出面板151包括操作接收部分和显示面板。例如，作为操作接收部分，可以采用根据电容的变化，检测具有导电性的人体(例如，人的手指)的接触或者接近的静电型(电容型)触摸面板。此外，例如，作为显示面板，可以采用诸如LCD(液晶显示器)和有机EL(电致发光)面板之类的显示面板。此外，例如，通过将透明触摸面板重叠在显示面板的显示表面上构造输入与输出面板151。

成像设备和适配器的外观配置示例

图3A至图4B是示出本公开的第一实施例的成像设备100和适配器200的外观配置示例的示意图。图3A至图4B示出适配器200安装在图1A至图2B所示的成像设备100上的情况下的外观配置。

图3A是示出成像设备100和适配器200的前表面外观的前视图。此外，图3B是示出成像设备100和适配器200的后表面外观的后视图。图4A是示出成像设备100和适配器200的侧表面外观的侧视图。此外，图4B是示出成像设备100和适配器200的前表面侧的外观的透视图。

适配器200是可以附加到成像设备100上并且可以从成像设备100上卸下，并且为了全向(整个外围)成像而附加的适配器。适配器200包括：全向成像光学系统210、盖板220、附加部分230以及反射镜240。此外，图5示出反射镜240。

全向成像光学系统210是成像设备100用于对全向(整个外围)被摄体成像的光学系统。此外，将参考图5详细描述全向成像光学系统210。

盖板220是用于覆盖全向成像光学系统210的圆柱形盖板。

附加部分230是用于将适配器200安装在成像设备100上，并且其形状适配成像设备100的上端101(图1A至2B所示)的附加部分。此外，磁铁201(图6所示的)安装在附加部分230的凹形部分的底部(邻接成像设备100的上端101的上表面的部分)。因此，当附加部分230适配并且安装在成像设备100的上端101上时，适配器200由磁铁201固定到成像设备100的上端101。此外，在适配器200安装在成像设备100上的状态下，成像部分110由附加部分230覆盖。在这种情况下，由适配器200的全向成像光学系统210聚焦的全向被摄体图像入射到成像部分110的成像光学系统111(图6所示)，并且在成像装置112处成像(图6所示)。

这样，因为包括全向成像光学系统210的适配器200安装在成像部分110上的事实，所以利用不装有全向成像光学系统的成像设备100，可以执行全向成像操作。全向成像操作指的是对在成像设备100的所有方向(0°到360°)上出现的被摄体成像。

这样，当适配器200安装时，既利用适配器200的全向成像光学系统210又利用成像部分110的成像光学系统111来对成像设备100的全向被摄体图像成像。此外，如图9A至图10B等所示，由利用全向成像光学系统210的全向成像操作来产生作为成像设备100的全向被摄体的图像的全向图像420。此外，所产生的全向图像420显示在输入与输出面板151上，作为通过图像(through-image)。

此外，如图1A至图2B所示，假定适配器200未安装在成像部分110上的情况。在这种情况下，当设置成像模式时，成像设备100利用内置成像光学系统111执行成像操作。成像操作是当利用成像光学系统111执行成像设备100的成像时根据位置(成像位置)对出现在指定的一个方向(面对成像光学系统111的光轴的成像方向)上的被摄体成像的操作。在该成像操作中，一个方向上的被摄体图像经由成像光学系统111入射，并且在成像装置112中成像。

如图1A至图4B所示，构造适配器200，以附加到成像设备100的成像部分110上和从其卸下。因此，因为适配器200安装在成像部分110上，所以利用成像设备100，用户可以轻而易举地执行全向成像操作。

全向成像光学系统的配置示例

图5是示出在本公开的第一实施例中可以包括在适配器200内的全向成像光学系统210的截面图。图5示出二次反射型全向成像光学系统210的示例。

全向成像光学系统210是包括凸镜和凹镜、具有相对于中轴211旋转对称的形状的全向成像镜头。此外，中轴211布置在成像部分110的成像光学系统111的光轴108与中轴211之间的夹角为90°的线上。即，全向成像光学系统210聚焦的被摄体图像由反射镜240反射，光路径变更为90°，并且被摄体图像被送到成像光学系统111。

全向成像光学系统210包括第一反射面212、第二反射面213、光入射部分214和光输出部分215。

第一反射面212是位于全向成像光学系统210下并且由镜面加工环形凹镜构成的环形反射面。第二反射面213是与第一反射面212相对地布置并且由镜面加工凸镜构成的锥面形反射面。

光入射部分214是布置在第二反射面213的外周边并且由透明玻璃板构成的环形光入射部分。因此，光透射到光入射部分214。光输出部分215是布置在第一反射面212的内周边上并且由透明玻璃板构成的光输出部分。因此，光透射到光输出部分215。

在此，由于全向成像光学系统210是二次反射型的，所以设计全向成像光学系统210的光学特性，以使得在离全向成像光学系统210任何距离的被摄体的所有焦点218都位于第一反射面212与第二反射面213之间。此外，在图5中，利用多个圆形简略地示出被摄体的焦点218。

在全向成像光学系统210中，如果入射光216是从光入射部分214入射的，则在由第一反射面212反射之后由第二反射面213反射，并且该光入射到光输出部分215。此外，从光输出部分215出来的光被反射镜240反射，并且光路径变更为90°。此后，该光入射到成像部分110的成像光学系统111中，并且被送到成像装置112。此外，在图5中，为了解释的便利，仅出射到对应于成像光学系统111的椭圆形109的光被示为从光输出部分215出来的光。

这样，全向成像光学系统210可以获取处于绕中轴211的360°范围的被摄体图像。因此，全向成像光学系统210使位于周边的全向(360°)被摄体图像聚焦，并且可以将该图像送到成像光学系统111。

此外，在图5中，作为示例，描述二次反射型全向成像光学系统210。另外，也可以采用一次反射型全向成像光学系统210。一次反射型全向成像光学系统包括用于反射来自全向被摄体的光的单个反射面。此外，在一次反射型全向成像光学系统中，单个反射面由具有相对于中轴旋转对称的形状的凸镜构成的，并且布置为使得从反射面反射的光面对成像设备100的成像光学系统111。

成像设备的内部配置示例

图6是示出本公开的第一实施例的成像设备100的内部配置示例的框图。此外，与成像设备100的内部配置一起，图6还示出安装在成像设备100上的适配器200。

成像设备100包括：成像部分110、霍尔传感器130、操作接收部分140、显示部分150以及闪速ROM(只读存储器)161。此外，成像设备100包括DRAM(动态随机存取存储器)162、DSP(数字信号处理器)170和存储卡180。

成像部分110包括：用于产生捕获图像的光学系统、成像装置等。即，成像部分110包括：成像光学系统111、成像装置112、TG(定时发生器)113以及光学部件驱动部分114和115。

成像光学系统111是为了在一个方向上对被摄体成像而利用光学方法设计且包括诸如聚焦透镜和变焦透镜的各种透镜、消除不必要波长的滤光片以及光圈的光学部件的光学系统。从被摄体入射的光学图像(被摄体图像)经由成像光学系统111内的每个光学部件成像在成像装置112的曝光表面上。此外，光学部件驱动部分114和115机械地连接到成像光学系统111，以驱动构成成像光学系统111的光学部件。

通过对从成像光学系统111提供的光学图像进行光电转换，成像装置112产生电信号(模拟图像信号)，并且将产生的电信号输出到DSP 170。作为成像装置112，例如，可以采用诸如CCD(电荷耦合器件)或者CMOS(互补金属氧化物半导体)之类的固态成像装置。

TG 113是根据DSP 170的控制产生成像装置112所需的操作脉冲的定时发生器。例如，TG 113产生诸如用于垂直传送的四相脉冲、场移位脉冲、用于水平传送的两相脉冲以及快门脉冲之类的各种脉冲，并且将这些脉冲送到成像装置112。此外，通过利用TG 113驱动成像装置112来形成被摄体图像。此外，因为TG 113调节成像装置112的快门速度的事实，捕获图像的曝光量或者曝光时间段受到控制(电子快门功能)。

光学部件驱动部分114和115根据DSP 170的控制驱动构成成像光学系统111的光学部件，并且例如包括变焦马达、聚焦马达等。例如，光学部件驱动部分114和115移动构成成像光学系统111的变焦透镜、聚焦透镜等，并且调节光圈。

霍尔传感器130是安装在上端101的内侧上的一部分(当安装适配器200时与磁铁210相邻的部分)上的霍尔传感器，并且检测当安装适配器200时磁铁201产生的磁场的磁通密度。如图所示，磁铁201安装在适配器200的附加部分230的凹形部分的底部(邻接成像设备100的上端101的上端表面的部分)上。

例如，在适配器200安装在成像设备100的上端101上的情况下，由于磁铁201布置在霍尔传感器130附近，所以霍尔传感器130检测来自磁铁201的作为预定磁通密度或者更大的磁场。另一方面，在适配器200未安装在成像设备100的上端101上的情况下，霍尔传感器130不检测来自磁铁201的作为预定磁通密度或者更大的磁场。这样，根据霍尔传感器130检测到的磁场强度，可以检测到适配器200是否安装在成像设备100的上端101上。此外，霍尔传感器130将与检测到的磁场强度相关的信息(磁场强度信息)输出到DSP 170，然后，DSP 170根据该磁场强度信息确定适配器200相对于成像部分110的安装情况(安装了还是未安装适配器200)。此外，DSP 170根据是否安装了适配器200来切换成像设备100的各种操作设置。

操作接收部分140是用于接收来自用户的操作输入并且根据接收到的操作输入将操作信号输出到DSP 170的操作接收部分。例如，如图1A至图4B所示，操作接收部分140对应于电源开关141、快门按钮142、操作按钮组143、上/下与左/右按钮144、记录按钮145和输入与输出面板151。例如，操作按钮组143(例如，图14和15所示的)可以接收切换显示部分150中的显示情况的开关操作。

例如，显示部分150包括液晶显示器(LCD)、有机EL显示器等。显示器150显示根据DSP 170的控制输入的各种图像数据。例如，显示部分150显示在成像操作期间从DSP 170实时输入的成像期间的捕获图像(通过图像)。因此，用户可以在成像操作期间通过显示部分150观看图像的同时操作成像设备100。此外，在执行存储在存储卡180上的内容项目的再现指令操作的情况下，显示器150显示从DSP 170输入的内容项目。因此，用户可以确认在存储在存储卡180上的内容项目中包括什么。

闪速ROM 161是存储用于执行DSP 170的各种控制处理的程序的存储器。DSP 170根据存储在闪速ROM 161上的程序工作，并且利用DRAM 162执行进行每种控制所需的计算和控制处理。此外，程序可以由诸如盘式记录介质或者存储卡的可拆卸记录介质送到DSP 170，并且可以通过诸如因特网的网络将其下载到DSP 170。

DSP 170是用于执行捕获图像的图像处理或者成像设备100的操作控制的计算处理装置。DSP 170包括信号处理部分(未示出)、记录与再现部分(未示出)以及控制部分(未示出)。例如，信号控制部分关于成像装置112输出的图像信号(模拟图像信号)执行预定信号处理，并且将信号处理之后的图像信号(数字图像信号)输出到显示部分150或者记录与再现部分。例如，信号处理部分包括模拟信号处理部分、A/D(模/数)转换部分以及数字信号处理部分。

模拟信号处理部分是预处理图像信号的处理部分(所谓模拟前端)。例如，模拟信号处理部分关于从成像装置112输出的图像信号执行CDS(相关双采样)处理、可编程增益放大器(PGA)的增益处理等。A/D转换部分将从模拟信号处理部分输出的图像信号(模拟图像信号)转换为数字图像信号，并且将已转换信号输出到数字信号处理部分。数字信号处理部分关于从A/D转换部分输出的数字图像信号执行诸如去噪、白平衡调节、色彩校正、边缘增强以及伽玛校正之类的数字信号处理，并且将处理的信号输出到显示部分150、记录与再现部分等。

DSP 170的控制部分包括安装在DSP 170内的诸如微控制器之类的计算处理装置，并且用于控制成像设备100的所有操作。例如，该控制部分利用DRAM 162或者闪速ROM 161执行控制功能。例如，DSP 170的控制部分控制TG 113或者光学部件驱动部分114和115，并且控制成像部分110的成像操作。例如，DSP 170的控制部分通过调节成像光学系统111的光圈、成像装置112的电子快门速度的设置、信号处理部分的AGC的增益设置等，来执行自动曝光控制(AE功能)。此外，DSP 170的控制部分移动成像光学系统111的聚焦透镜，并且执行将成像光学系统111的聚焦关于特定被摄体自动匹配的自动聚焦控制(AF功能)。此外，DSP 170的控制部分移动成像光学系统111的变焦透镜，并且调节捕获图像的视角。此外，DSP 170的控制部分对记录与再现部分对捕获图像的记录与再现处理进行控制。此外，DSP 170的控制部分执行在显示部分150上显示各种显示数据的显示控制。

存储卡180是可以附加到成像设备100并且可以从其卸下的记录介质。此外，例如，作为记录介质，可以采用诸如另一半导体存储器、光盘、硬盘等的盘形记录介质。例如，作为光盘，可以采用蓝光盘、DVD(数字多功能盘)、CD(压缩光盘)等。此外，记录介质可以容纳在成像设备100内，并且可以是可以附加到成像设备100并且可以从其卸下的远程介质。

成像设备的功能配置示例

图7是示出本公开的第一实施例的成像设备100的功能配置示例的框图。此外，利用同样的附图标记表示与图6所示功能配置中的部分相同的部分，并且省略对它们的一部分描述。

成像设备100包括：成像部分110、适配器安装检测部分131、操作接收部分140、显示部分150、图像处理部分171、成像模式设置部分172、控制部分173、记录控制部分174、显示控制部分175以及记录介质185。此外，记录介质185对应于图6所示的存储卡180。此外，图像处理部分171、成像模式设置部分172、控制部分173、记录控制部分174以及显示控制部分175对应于图6所示的DSP 170。此外，适配器安装检测部分131对应于图6所示的霍尔传感器130。

成像部分110是以特定方向(例如光轴方向)对被摄体成像并产生包括被摄体的平面图像(图像数据)以及根据由成像模式设置部分172设置的成像模式执行成像处理的成像部分。在此，作为成像模式，设置平面图像的成像模式或者全向图像的成像模式的任意一个。平面图像的成像模式是记录包括特定方向(例如，光轴方向)的被摄体的平面图像的成像模式。此外，全向图像的成像模式是在适配器200安装在成像部分110上的状态下，记录包括全向被摄体的平面图像(全向图像)的成像模式。此外，在上述每种成像模式中，可以设置用于记录静止图像的静止图像捕获模式和用于记录运动图像的运动图像捕获模式的任意一个。即，在设置平面图像捕获模式或者全向图像捕获模式的情况下，根据用户的操作，可以执行静止图像的记录操作和运动图像的记录操作的任意一个。

例如，当设置平面图像捕获模式时，成像部分110通过在特定方向对被摄体成像产生平面图像。此外，当设置全向图像捕获模式时(当安装适配器200时)，成像部分110通过根据进行成像时的成像位置对全向被摄体成像产生环形平面图像(全向图像)。全向图像包括位于成像部分110的光轴方向上的被摄体和与显示部分150的显示表面相对的被摄体(例如，图9A至图10B所示的)。此外，成像部分110的光轴方向几乎与显示部分150中的显示表面的垂直方向一致。此外，成像部分110将所产生的图像输出到图像处理部分171。

适配器安装检测部分131检测适配器200是否安装在成像设备100的上端101上，并且将检测结果(适配器安装信息)输出到控制部分173。

图像处理部分171根据控制部分173的控制关于从成像部分110输出的图像执行各种图像处理，并且将从成像部分110输出的图像和经过图像处理的图像输出到记录控制部分174和显示控制部分175。此外，图像处理部分171根据成像模式设置部分172设置的成像模式执行图像处理。例如，图像处理部分171根据所有方向中的特定方向指定由成像部分110产生的全向图像中的基本上扇形的对象区域，并且将该对象区域的图像转换为基本上矩形的图像(转换图像)。在此，特定方向是根据进行成像时处于成像位置中的成像设备100的姿态指定的方向，并且例如，是成像部分110的光轴方向或者显示部分150中的显示表面的垂直方向。此外，图像处理部分171指定对象区域，以使得不截断由成像部分110产生的全向图像中的特定方向。例如，图像处理部分171将整个圆周图像的周界方向划分为4，以使得将成像部分110的光轴方向上的被摄体和与显示部分150的显示表面相对的被摄体分别定位在转换图像的中心位置。此外，图像处理部分171将四个划分的区域指定为对象区域，并且这四个对象区域的图像被分别转换并成为转换图像(例如，请参见图13A和图13B)。此外，图像处理部分171对应于DSP 170的信号处理部分。

成像模式设置部分172根据控制部分173的控制设置成像部分110中的成像模式。具体地说，成像模式设置部分172将平面图像捕获模式和全向图像捕获模式中的任意一个设置为成像模式。此外，在适配器200未安装在成像部分110上的情况下，根据由操作接收部分140接收到的用户操作(设置操作)来设置成像模式。另一方面，在适配器200安装在成像部分110上的情况下，设置全向图像捕获模式。即，当检测到安装了适配器200时，在设置了平面图像捕获模式的情况下，解除所设置的成像模式，而设置全向图像捕获模式。此外，当在检测到安装了适配器200的状态下，利用用户操作执行用于设置为平面图像捕获模式的设置操作时，该设置操作无效。

在此，在成像设备100内，根据先前安装的成像光学系统111的特性，优化用于控制变焦、聚焦、曝光等的成像参数的设置。此外，还根据成像光学系统111的特性，设计成像设备100内的显示处理的设置或者操作控制的设置。因此，当适配器200安装在成像设备100上时，根据安装在适配器200上的全向成像光学系统210的特性，需要改变成像参数的设置，并且切换显示处理或者操作控制的设置。因此，在本公开的第一实施例中，当适配器200安装在成像设备100上时，根据全向成像光学系统210的特性，自动控制成像设备100的各种设置。即，在成像模式的设置处理中，例如，自动执行成像部分110的成像处理的设置(例如，与成像处理相关的成像参数的设置)、显示部分150的显示处理的设置、利用操作接收部分140的用户操作的控制的设置等。

控制部分173执行整个成像设备100的控制。例如，控制部分173根据由操作接收部分140接收到的用户的操作输入执行控制。此外，控制部分173对应于DSP 170的控制部分。

记录控制部分174根据控制部分173的控制对从图像处理部分171输出的图像执行压缩记录处理。例如，在设置了成像模式的情况下，当按下记录按钮145(图1A和图1B等所示的)时，记录控制部分174以预定压缩编码方式压缩捕获的图像(帧)。此外，将压缩的成像信号记录在记录介质185上，作为运动图像内容项目。此外，在设置了成像模式的情况下，当按下快门按钮142(图2A和图2B所示的)时，记录控制部分174以预定压缩编码方式压缩捕获的图像(静止图像)，并且将该压缩的图像记录在记录介质185上，作为静止图像内容项目。

显示控制部分175根据控制部分173的控制在显示部分150上显示从图像处理部分171输出的图像或者存储在记录介质185上的图像。例如，在设置了成像模式的情况下，显示控制部分175在显示部分150上显示从图像处理部分171输出的图像，作为通过图像。此外，例如，在设置了全向图像捕获模式的情况下，显示控制部分175同时在显示部分150上显示从图像处理部分171输出的转换图像和全向图像，作为通过图像(例如，图14所示的)。在这种情况下，当收到转换图像的切换操作时，显示控制部分175根据切换操作将显示在显示部分150上的转换图像切换为另一转换图像。此外，在设置了再现模式时，显示控制部分175从记录介质185获取与来自操作接收部分140的再现指示操作相关的内容项目，并且对压缩的图像数据解压缩并将解压缩的图像数据显示在显示部分150上。此外，记录控制部分174和显示控制部分175对应于DSP 170的记录与再现部分。

成像范围与捕获图像的关系的示例

图8A和图8B是简明示出在本公开的第一实施例中作为成像设备100的成像对象的成像范围与成像设备100产生的捕获图像之间的关系的示意图。

图8A简明示出在利用适配器200安装在其上的成像设备100执行全向成像操作的情况下的成像范围400。此外，图8B简明示出当在图8A所示的状态下执行全向成像操作时，成像设备100产生的全向图像402(环形图像)。此外，表示相应关系的星形、圆形、三角形等布置在成像范围400和全向图像402中。

如图8A和图8B所示，在利用适配器200安装在其上的成像设备100执行全向成像操作的情况下，产生对应于成像范围400的环形全向图像402。在这种情况下，图8B所示的全向图像402显示在输入与输出面板151上(例如，图14所示的)。

捕获图像的成像操作示例

图9A到图10B是示出在本公开的第一实施例中利用成像设备100执行的成像操作与由成像操作产生的捕获图像之间的关系的示意图。

图9A是利用成像设备100产生全向图像(环形图像)的情况下，从上面看作为成像对象的地点410的情况下的俯视图。图9B示出从侧面看在图9A所示的状态下执行的成像操作的情况。地点410是包括房屋、树等的地点(在图9中，省略房屋和树)，并且在图9A和图9B中，为了便于解释，这些被简化。此外，在图9A和图9B中，示出了适配器200安装在成像设备100上的情况下的成像操作示例。此外，图9A和图9B示出用户操作成像设备100并执行全向图像(环形图像)的成像操作(全向成像操作)，以使得人415位于手持适配器200安装在其上的成像设备100的人(拍摄者)411前面的示例。

图10A示出图9A和图9B所示的全向操作产生的全向图像420。即，全向图像420是人415位于上侧而人411位于下侧的环形图像。

图10B示出图10A所示的全向图像420由径向上的虚线425截断并展开的水平长形图像421。即，水平长形图像421是人411和人415布置在对应于全向图像420的位置的全景图像。

此外，在图9A和图9B所示的状态下，在从成像设备100提取适配器200的情况下产生平面图像。作为平面图像，例如，产生人415位于中心的垂直长形图像。

在此，在图9A和图9B所示的状态下，在人411执行成像操作的情况下，图10A所示的全向图像420显示在输入与输出面板151上。例如，假定水平长形图像421和全向图像420一起显示在输入与输出面板151上。在这种情况下，由于水平图像421在水平方向是长的，所以认为水平长形图像421被缩小和显示。然而，在水平长形图像421被缩小和显示的情况下，包括在水平长形图像421上的被摄体小，并且还假定难以看到细节部分。因此，认为显示水平长形图像421被划分的图像(即，全向图像420被划分和转换的图像)。例如，认为全向图像420被切开(即，在人411和415、防止、树的位置切开)以划分为4个(利用水平方向上的线和垂直方向上的线划分为4个)，并且显示每个图像。然而，如果这样划分全向图像，则由于作为拍摄者的人411、作为主被摄体的人415等被截断并显示，所以可以假定人411难以观看显示的图像。因此，在本公开的第一实施例中，描述了下面的示例。即，根据在所有方向中基于处于成像位置中的成像设备100的姿态指定的特定方向，在全向图像420中指定基本上扇形的对象区域，并且该对象区域的图像被转换为近似矩形形状的图像并显示。在这种情况下，在全向图像420内指定基本上扇形的对象区域，以使得在全向图像420中不截断指定方向。

即，在转换为扭曲为圈形(donut-shape)的全向图像的情况下，需要校正该扭曲。在这种情况下，指定全向图像上的90°的区域(转换图像的对象区域)，并且可以执行关于对象区域的图像的转换。在此，例如，由于输入与输出面板151位于成像设备100的后表面侧，所以拍摄者位于成像设备100的后表面侧的概率高。此外，在成像设备100中，相对于成像方向(光轴方向)以线性方式布置输入与输出面板151。因此，在拍摄者可以直接看到输入与输出面板151的位置中拍摄者手持成像设备100同时执行成像操作的情况下，重要的是产生转换图像，以使地拍摄者和位于拍摄者前面的被摄体(主被摄体)的位置不被划分。例如，如果中心作为成像设备100的正面(光轴方向)，则在全向图像上指定90°的区域，并且可以指定每个90°的区域(四个区域)。因此，拍摄者本身或者正常成像操作时前面的被摄体可以位于显示的图像的中心位置。

此外，在利用成像设备100执行成像操作的情况下，可以记录多种捕获图像。例如，假定在人415作为主被摄体时，人411执行记录多种捕获图像的成像操作。例如，还假定在执行了记录平面图像的成像操作后，执行记录图10A所示的全向图像420的成像操作。在这种情况下，首先，在垂直长形状态的成像设备100没有安装适配器200时，人411设置平面图像捕获模式，并且执行成像操作(例如，运动图像捕获操作)。随后，人411安装适配器200、保持成像设备100的垂直长形状态、设置全向图像捕获模式、以及执行成像操作(例如，运动图像捕获模式)。

然而，还假定在人411结束平面图像的成像操作后，它们仅安装适配器200，并且在忘记全向图像捕获模式的设置操作的状态下开始成像操作。此外，还假定在人411安装了适配器200后，它们执行全向成像操作、在忘记提取适配器200的情况下设置另一成像模式(例如，平面图像捕获模式)、以及开始成像操作。在这种情况下，关注可能未记录适当的捕获图像。因此，在本公开的第一实施例中，当安装适配器200时，自动设置适当的成像模式。

从整个圆周图像到全向图像的转换示例

图11A和图11B是示出在本公开的第一实施例中作为由图像处理部分171转换的对象的全向图像(环形图像)与转换之后的全景图像之间关系的示意图。图11A示出成像部分110产生的全向图像450，而图11B示出其中转换并产生全向图像450的全向图像460。

作为示例，图11A和图11B描述了下面的情况。即，在水平轴作为X轴，而垂直轴作为Y轴的x-y坐标系中，包括由成像部分110产生的全向图像450的矩形的左上角作为原点(0，0)，转换全向图像450。此外，图11A和图11B描述了下面的示例。即，通过使全景图像460的X轴方向对应于全向图像450的圆周方向，而全景图像460的Y轴方向对应于全向图像450的径向，执行转换处理。

与图11A所示的全向图像450对应的圆形的中心坐标OP1被赋予坐标(x0，y0)，而对应于全向图像450的圆形的半径被赋予r。此外，对应于全向图像450的圆形的内径(半径ro1)与基线AB1之间的交叉点被赋予坐标OP2，而对应于全向图像450的圆形的外径(半径r)与基线AB1之间的交叉点被赋予坐标OP3。此外，基线AB1是在执行从全向图像到全景图像的转换处理的情况下作为基准的线，并且该基线是处于对应于全向图像的圆形的径向上的线。此外，在图11(B)中，全景图像460的X轴方向上的长度(像素数)被赋予W1，而Y轴方向上的长度(像素数)被赋予H1。

在此，利用下面的等式1获得图11A所示全向图像450内的坐标APm(xm，ym)。

$\left[\begin{array}{c}\mathrm{xm}\\ \mathrm{ym}\end{array}\right]=\mathrm{rm}\left[\begin{array}{c}\cos \mathrm{\θ}\\ \sin \mathrm{\θ}\end{array}\right]+\left[\begin{array}{c}\mathrm{xo}\\ \mathrm{yo}\end{array}\right]$ 等式1

在此，rm是表示从中心坐标OP1到坐标APm(xm，ym)的距离的值。此外，θ是表示连接中心坐标OP1和坐标APm(xm，ym)的线段与基线AB1之间的夹角的值。

在此，在全向图像450上的坐标OP2对应于全景图像460的基准位置(0，0)的情况下，全景图像460的x轴方向上的变化(0到W1)对应于全向图像450的圆周方向上的变化(0到2πr)。此外，全景图像460的Y轴方向上的变化(0到H1)对应于全向图像450的径向上的变化(ro1到r)。此外，还提供了下面的特性。即，在X轴上的位置从0线性变化到W1的情况下，圆周方向上的位置从0线性变化到2πr。此外，提供下面的特性。即，在Y轴上的位置从0线性变化到H1的情况下，径向上的位置从r01线性变化到r。

在这种情况下，利用下面的等式2和3，图11b所示的全景图像460上的坐标BP(xi，yj)变为全向图像450上的坐标AP(rj，θj)。

rj＝(r-r01)×(yj/H1)...等式2

θj＝2πr×(xj/W1)...等式3

这样，计算与转换之后的全景图像460中的坐标BP(xj，yj)对应的全向图像450中的坐标AP(xj，0j)。因此，获得与全景图像460中的每个坐标对应的全向图像450中的坐标，并且通过读该坐标的图像数据，全向图像450可以转换为全景图像460。在此，在获得的坐标介于像素之间的情况下，通过利用位于所获得的坐标的外围的像素数据执行内插处理等，产生对应于所获得的坐标的像素数据。此外，关于所产生的图像数据执行诸如适当失真校正等的校正处理。

此外，在图11A和图11B中，描述了将环形图像转换为全景图像的转换示例。然而，同样还可以执行作为全向图像的圆形图像转换为全景图像的情况。这样，在圆形图像转换为全景图像的情况下，例如，对全景图像460中的Y轴方向上的变化(0到H1)执行转换处理，以对应于全向图像450的径向上的变化(0到r)。此外，也可以利用其它转换方法将全向图像转换为全景图像。

全向图像的修改

图12A和图12B是示出在本公开的第一实施例中作为图像处理部分171转换的对象的全景图像与对应于该全景图像的转换图像之间的关系的示意图。

图13A和图13B是示出在本公开的第一实施例中作为图像处理部分171转换的对象的全向图像与转换之后的图像(转换图像)之间的关系的示意图。

图12A示出通过图像处理部分171的转换处理产生的全景图像470，而图12B示出对应于全景图像470的转换图像475至478。

图13A示出成像部分110产生的全向图像480。全向图像450与图10A所示的全向图像类似。此外，图13B示出全向图像480划分并产生的转换图像475至478。

通过上面描述的转换处理，由全向图像480产生全景图像470。在此，由于全景图像470是在指定的方向(例如，水平方向)比标准图像长的图像，所以当显示整个全景图像470时，显示比其它图像更缩小的图像。因此，用户不能详细看到全景图像470上的每个部分。

因此，全景图像470由作为边界的图12A所示的划分线417至473划分，并且划分的转换图像475至478可以用作显示图像。在这种情况下，图像处理部分171通过上面描述的转换处理由全向图像480产生全景图像470，并且通过划分全景图像470产生转换图像475至478。此外，如图13A和图13B所示，转换图像475至478可以由全向图像480直接产生。

在此，图13A所示的虚线481和482是对应于图12A所示的划分线471至473的线。如上所述，如果作为拍摄者的人411和作为主被摄体的人415等被截断，则由于假定人411难以看到显示图像，所以构造本公开的第一实施例，以使得人411和人415等不被截断。即，其中水平方向上的线和垂直方向上的线分别旋转45°的线(虚线481和482)变成边界。此外，在本公开的第一实施例中，描述了全向图像被划分为4个，以使得人411和425等未被截断的示例。然而，也可以采用四分之外的划分。例如，利用水平方向上的线一分为二。在这种情况下，由于即使全景图像480中的房屋或者树被截断，作为主被摄体的人411和415仍未被截断，所以认为对人411的影响小。

这样，图像处理部分171将全向图像的圆周方向划分为多个，划分的多个区域指定为对象区域，并且产生多个转换图像。此外，图像处理部分171产生转换图像，以使得与全向图像的圆周方向中的指定方向对应的位置是转换图像(基本上矩形图像)中的指定位置(例如，水平方向上的中心位置)。

全向图像和转换图像的显示示例

图14是示出在本公开的第一实施例中在输入与输出面板151上显示的全向图像和转换图像的显示示例的示意图。图14示出显示图12A至图13B所示的全向图像480和转换图像475的示例。

例如，在利用成像设备100执行全向图像的成像操作时，显示控制部分175将全向图像480和转换图像475显示在输入与输出面板151上，作为通过图像。在这种情况下，显示与转换图像475对应的位置的V形图标485重叠并显示在全向图像480上。如图15所示，在通过切换操作切换转换图像的情况下，根据切换改变V形图标。

转换图像的切换示例

图15是示出在本公开的第一实施例中当切换在输入与输出面板151上显示的转换图像时的切换示例的示意图。如图14所示，图15示出在全向图像480和转换图像475显示为通过图像的情况下，执行切换从而根据使用操作对转换图像475至478中的任意一个显示的示例。

例如，因为使用由3个操作按钮构成的操作按钮组143中的一个操作按钮(操作按钮的右端)的事实，所以可以顺序改变转换图像475至478的显示情况(箭头491至494所示)。此外，因为使用操作按钮组143当中的其它操作按钮(操作按钮的左端)的事实，所以可以顺序改变转换图像475至478的显示情况(箭头495至498所示)。此外，标记在图14所示的操作按钮组143的上侧的操作图标对应于标记在图15所示的箭头491至498的附近的操作图标。此外，虚线481和482指示全向图像480上可以显示V形图标(图14所示的V形图标485)的位置。

这样，在成像操作时，与全向图像一起，用户还可以看到全向图像的转换处理产生的一部分全景图像的图像(转换图像)。因此，在成像操作期间，用户可以在全向图像中轻而易举地确认用户要求的区域的详细部分。即，根据本公开的第一实施例，用户可以轻而易举地察觉全向成像光学系统210产生的全向图像。

此外，图14和图15示出同时显示全向图像和转换图像的示例。然而，例如，根据用户操作，可以仅显示转换图像。此外，当在执行全向图像的成像操作的情况下执行记录操作时，仅记录全向图像。然而，作为显示对象的转换图像和全向图像可以相关联并且记录(例如，记录在同一个文件或者不同文件中)。在这种情况下，例如，作为附加信息，可以包括时间信息、同步信息(同步显示全向图像和转换图像的信息)等，以使得同步显示全向图像和转换图像。

全向图像和转换图像的显示示例

上面描述了在成像操作期间同时显示全向图像和转换图像的示例。关于由全向图像的成像操作记录的全向图像内容项，同样也是在再现时，同时或者顺序地显示全向图像和转换图像。此外，由于同时和顺序地显示全向图像和转换图像的示例与图14和图15的示例基本相同，所以在此省略描述。图16A和图16B是顺序显示转换图像的显示示例。

图16A和图16B是示出在本公开的第一实施例中显示在输入与输出面板151上的全向图像和转换图像的显示示例的示意图。图16A和图16B示出在成像设备100处于水平长状态(例如，成像设备100在图1A和图1B中箭头102和103的方向上旋转90°)下，输入与输出面板152的显示示例。此外，图16A和图16B示出显示图12A到图13B所示的转换图像477和转换图像478的示例。例如，首先，图12A和图12B所示的转换图像475等以水平长状态显示在输入与输出面板151上。显示之后，通过执行上面描述的切换操作，切换转换图像476至478的顺序。通过切换操作，可以显示转换图像477和转换图像478。在这种情况下，V形图标500显示在显示屏幕的左上部。与图14所示的V形图标485相同，V形图标500是显示对应于所显示的转换图像的位置的图标。因此，用户可以轻而易举地察觉所显示的转换图像对应于全向图像上的位置。即，用户可以轻而易举地察觉利用全向成像光学系统210产生的全向图像。

成像设备的操作示例

接着，将参考附图描述本公开的第一实施例中的成像设备100的操作。

图17是示出在本公开的第一实施例中成像设备100执行的全向图像的成像操作控制处理的处理步骤的示例的流程图。在该示例中，适配器200安装在成像设备100上，利用成像模式设置部分172设置全向图像捕获模式。此外，在该示例中，执行运动图像捕获操作。

首先，确定是否执行成像操作的开始操作(步骤S901)，并且当未执行成像操作的开始操作时，连续观察。当执行成像操作的开始操作时(步骤S901)，成像部分110执行成像处理，并且产生全向图像(环形图像)(步骤S902)。此外，步骤S902是权利要求书中描述的获取步骤的示例。

接着，图像处理部分171在所产生的全向图像上指定基本上扇形的对象区域，并且该对象区域的图像转换为基本上矩形的图像(转换图像)(步骤S903)。在这种情况下，在全向图像的整个区域作为对象区域(例如，4个区域)的情况下产生转换图像，并且在仅作为全向图像的显示对象的区域作为对象区域(例如，一个区域)的情况下产生转换图像。此外，步骤S903是权利要求书中描述的图像处理步骤的示例。

接着，显示控制部分175将转换图像和全向图像同时显示在显示部分150上(步骤S904)。此外，步骤S904是权利要求书中描述的显示控制步骤的示例。接着，记录控制部分174将全向图像记录在记录介质185上，作为运动图像文件(步骤S905)。

接着，确定是否执行在显示部分150上显示转换图像的显示切换操作(步骤S906)，并且当未执行显示切换操作时，处理进行到步骤S908。另一方面，当执行显示切换操作时(步骤S906)，显示控制部分175改变作为显示对象的转换图像，并且将该转换图像显示在显示部分150上(步骤S907)。在这种情况下，当未产生作为显示对象的转换图像时，图像处理部分171顺序产生转换图像。

接着，确定是否执行成像操作的结束操作(步骤S908)，并且当未执行成像操作的结束操作时，该处理返回步骤S902。另一方面，当执行成像操作的结束操作时(步骤S908)，全向图像的成像操作控制处理的操作结束。

2.第二实施例

在本公开的第一实施例中，在全向图像的成像操作期间，全向图像和转换图像显示为通过图像。此外，在第一实施例中，成像设备再现由成像操作记录的全向图像和转换图像。在此，关于成像操作记录的全向图像文件(全向图像内容项)，假定利用其他设备(图像处理设备)执行再现。此外，在这种情况下，可以显示全向图像和转换图像。因此，本公开的第二实施例说明利用图像处理设备显示全向图像和转换图像的示例。

图像处理设备的配置示例

图18是示出在本公开的第二实施例中图像处理设备800的功能配置示例的框图。例如，图像处理设备800由从每个广播电台接收广播波并且显示各种图像的电视接收机(例如，包括记录功能的电视接收机)实现。

图像处理设备800包括：控制部分810、操作接收部分820、内容存储部分830、获取部分840、图像处理部分850、显示控制部分860以及显示部分870。本公开的第二实施例描述了利用本公开的第一实施例中的成像设备记录的全向图像内容项(图像数据(观看数据)和音频数据)显示全向图像和转换图像的示例。此外，在图18中，为了便于解释，关于输出各种音频信息项等的扬声器，省略说明和解释。

控制部分810根据操作接收部分820可以接收的操作输入来控制图像处理设备800的每个部分。例如，当接收到用于显示全向图像的显示指示操作时，控制部分810执行用于根据显示指示操作在显示部分870上显示全向图像的控制。此外，当接收到用于显示全向图像和转换图像的显示指示操作时，控制部分810执行用于根据显示指示操作在显示部分870上显示全向图像和转换图像的控制。另外，当接收到切换显示在显示部分870上的转换图像的切换操作时，控制部分810执行用于根据切换操作切换转换图像的控制。

操作接收部分820是用于接收用户的操作输入的操作接收部分，并且它将对应于接收到的操作输入的操作信号送到控制部分810。

内容存储部分830是存储各种内容项的存储部分，并且将存储的内容送到获取部分840。例如，内容存储部分830存储用于显示全向图像的内容(全向图像内容)。例如，全向图像内容由成像设备100记录，并且通过记录介质(存储卡180等)或者网络记录在内容存储部分830上。

获取部分840根据控制部分810的控制来获取存储在内容存储部分830内的各种信息项，并且将获取的信息项送到每个部分。例如，当获取部分840从内容存储部分830获取全向图像内容项时，获取部分840将全向图像内容项送到图像处理部分850。

图像处理部分850根据控制部分810的控制利用从获取部分840提供的全向图像内容项来产生转换图像(显示对象图像)，并且将产生的转换图像和全向图像输出到显示控制部分860。即，根据在所有方向中基于处于成像位置的成像设备100的姿态指定的方向，图像处理部分850指定全向图像中的基本上扇形的对象区域，并且将该对象区域的图像转换为基本上矩形的图像。此外，由于本实施例的图像转换方法与本公开的第一实施例的转换方法类似，所以在此省略其详细描述。

显示控制部分860根据操作接收部分820接收到的操作输入来执行用于显示存储在内容存储部分830上的内容项的显示处理。例如，当接收到用于显示全向图像的显示指令操作时，显示控制部分860根据显示指令操作使全向图像显示在显示部分870上。此外，当接收到用于显示全向图像和转换图像的显示指示操作时，显示控制部分860根据显示指示操作将全向图像和转换图像同时显示在显示部分870上。此外，当接收到用于切换显示在显示部分870上的转换图像的切换操作时，显示控制部分860根据切换操作切换转换图像。

显示部分870是根据显示控制部分860的控制而显示各种图像的显示部分。例如，显示部分870可以由诸如LCD(液晶显示器)的显示元件实现。此外，例如，具有较宽显示屏的显示部分可以用作显示部分870。

全向图像和转换图像的显示示例

图19A和图19B是示出在本公开的第二实施例中显示在显示部分870上的全向图像和转换图像的显示示例的框图。

图19A示出在显示部分870上与全向图像881一起显示两个转换图像882和883的示例。此外，指示全向图像881上对应于所显示的转换图像882和883的位置的T形图标884布置在全向图像881上，并且显示。

图19B示出四个转换图像892至895与全向图像891一起显示在显示部分870上的示例。此外，指示全向图像891上对应于所显示的转换图像892至895的位置的X形图标896布置在全向图像891上，并且显示。

此外，图19A所示的全向图像881和891与图13A等所示的全向图像480相同，而图19A和图19B所示的转换图像882、883、892至895与图13B等所示的转换图像475至478相同。

此外，图19A和图19B所示的显示示例是示例，并且可以以其它排列显示全向图像和转换图像。此外，可以根据用户操作，适当改变全向图像和转换图像的布局。

这样，当利用包括具有较宽显示屏幕的显示部分870的图像处理设备800再现全向图像内容项时，即使显示较多数量的转换图像和全向图像内容项，用户仍可以轻而易举地观看内容项。因此，根据用户偏爱，可以与全向图像一起以各种排列显示转换图像。因此，用户可以轻而易举地察觉利用全向成像光学系统产生的全向图像。

此外，本公开的实施例可以应用于诸如便携式电话、导航系统和能够显示各种图像的便携式媒体播放器之类的成像设备(例如，具有成像功能的电子设备)。此外，本公开的实施例还可以应用于将图像数据输出到外部显示装置并且将各种图像显示在显示装置上的诸如DVD再现设备之类的图像处理设备。

此外，本公开的实施例描述了产生环形图像作为全向图像并且显示的示例。然而，本公开的实施例还可以应用于产生圆形图像作为全向图像并且显示的情况。

此外，本公开的实施例是用于说明本公开的示例，与本公开的实施例中描述的相同，本公开的实施例的主题和权利要求书中指定的主题具有互相对应关系。同样，权利要求书中指定的主题和本公开的实施例中利用相同术语表述的主题具有互相对应关系。然而，本公开并不局限于实施例，并且在不脱离本公开的实质范围的情况下，通过对实施例进行各种修改，可以指定本公开。

此外，本公开的实施例中描述的处理步骤可以理解为具有一系列步骤的方法和用于在计算机内或者用于记录程序的记录介质上执行一系列步骤的程序。作为记录介质上，例如，可以采用CD(压缩盘)、MD(迷你盘)、DVD(数字多功能盘)、存储卡、蓝光盘(注册商标)等。

本公开含有与于2010年12月22日向日本专利局提交的第JP2010-286200号日本优先权专利申请公开的主题有关的主题，在此通过引用包括该专利申请的全部内容。

本技术领域内的技术人员应当明白，根据设计要求和其它因素，可以进行各种修改、组合、部分组合和变型，然而，它们都落入所附权利要求书及其等效物的范围内。

Claims (12)

1.一种成像设备，包括：

成像部分，根据执行成像时的成像位置对全向被摄体成像，并产生包括所述全向被摄体的圆形图像；

图像处理部分，在根据在所有方向之中基于所述成像位置中成像设备的姿态指定的方向产生的圆形图像中指定基本上扇形的对象区域，并且将所述对象区域的图像转换为基本上矩形的图像；以及

显示控制部分，将作为已转换图像的转换图像和所产生的圆形图像同时显示在显示部分上。

2.根据权利要求1所述的成像设备，其中，所述图像处理部分指定所述对象区域，以使得在所产生的圆形图像中不截断所述指定方向。

3.根据权利要求2所述的成像设备，其中，所述成像部分在安装了包括用于对包括在光轴方向上的被摄体的全向被摄体成像的全向成像光学系统的适配器的状态下产生所述圆形图像，以及

所述图像处理部分根据所述成像位置包括光轴方向作为所述指定方向。

4.根据权利要求3所述的成像设备，其中，所述成像设备进一步包括所述显示部分，

所述光轴方向与垂直于所述显示部分中的显示表面的方向近似一致，以及

所述成像部分在安装了所述适配器的状态下产生包括所述光轴方向上的被摄体和面对所述显示表面的被摄体的圆形图像。

5.根据权利要求4所述的成像设备，其中，所述图像处理部分将所产生的圆形图像的圆周方向划分为四个，并且指定四个划分的区域作为所述对象区域，以使得所述光轴方向上的被摄体和面对所述显示表面的被摄体分别位于所述转换图像的中心位置。

6.根据权利要求1所述的成像设备，其中，所述显示控制部分在执行所述圆形图像的成像操作时将所述转换图像和所产生的圆形图像显示在所述显示部分上。

7.根据权利要求1所述的成像设备，进一步包括：

操作接收部分，接收切换所述显示部分中的显示状态的切换操作，

其中，所述图像处理部分将所产生的圆形图像的圆周方向划分为多个，将划分的多个区域指定为所述对象区域，以及产生多个转换图像，以及

所述显示控制部分当接收到所述切换操作时根据切换操作将显示在所述显示部分上的转换图像切换为另一转换图像。

8.根据权利要求1所述的成像设备，其中，所述图像处理部分指定基本上扇形的对象区域，以使得与所产生的圆形图像的圆周方向上的指定方向对应的位置是基本上矩形的图像中的所述指定位置。

9.根据权利要求1所述的成像设备，其中，所述成像部分产生其中包括所述全向被摄体的图像环形布置的图像作为所述圆形图像。

10.一种成像设备，包括：

获取部分，用于根据执行成像设备的成像时的成像位置对全向被摄体成像，并且获取包括所产生的全向被摄体的圆形图像；以及

图像处理部分，用于根据在所有方向之中基于所述成像位置中成像设备的姿态指定的方向，在所获取的圆形图像中指定基本上扇形的对象区域，将所述对象区域的图像转换为基本上矩形的图像，以及包括所述图像作为显示对象图像。

11.一种图像处理方法，包括：

根据执行成像设备的成像时的成像位置对全向被摄体成像，并获取包括所产生的全向被摄体的圆形图像；

根据在所有方向之中基于所述成像位置中所述成像设备的姿态指定的方向，在所获取的圆形图像中指定基本上扇形的对象区域，并且将所述对象区域的图像转换为基本上矩形的图像；以及

在显示部分上同时显示已转换图像和所获取的圆形图像。

12.一种使得计算机执行下面的步骤的程序，所述步骤包括：

根据执行成像设备的成像时的成像位置对全向被摄体成像，并且获取包括所产生的全向被摄体的圆形图像；

根据在所有方向之中基于所述成像位置中所述成像设备的姿态指定的方向，在所获取的圆形图像上指定基本上扇形的对象区域，并且将所述对象区域的图像转换为基本上矩形的图像；以及

在显示部分上同时显示已转换图像和所获取的圆形图像。

Images