CN104737528B - 摄像装置以及图像显示方法 - Google Patents

Abstract

摄像装置(100)包括：生成部，根据具有将通过了摄影透镜(16)的第一以及第二区域的被摄体像进行光瞳分割而分别成像的第一以及第二像素组的摄像元件(20)，生成第一显示用图像，并且，根据第一以及第二像素组生成用于对焦确认的第二显示用图像(60)以及辅助对焦确认的第三显示用图像(61)；以及显示控制部，控制第二以及第三显示用图像在显示部(213)的交替显示，且使显示部(213)显示第一以及第二显示用图像或者显示第一以及第三显示用图像。

Description

摄像装置以及图像显示方法

技术领域

本发明涉及摄像装置以及图像显示方法，尤其是涉及确认对焦的技术。

背景技术

在数码相机中，公知在对准焦点(进行聚焦)时使用相位差检测方式或对比度检测方式的自动聚焦技术。另一方面，还公知具有使用者能够手动对准焦点的所谓手动聚焦模式的数码相机。

作为具有手动聚焦模式的数码相机，公知如下方法：以能够确认拍摄到的被摄体并同时进行聚焦调整的方式设置反光镜，进行基于目视的对比度的确认。

但是，在进行基于目视的对比度的确认的方法中，通过在对焦点前后移动聚焦透镜来寻找对焦点，因此在不移动聚焦透镜的状态下，难以辨别被摄体是否对焦。

另外，在近年来逐渐普及的省略了反光镜的数码相机中，由于没有反光镜，因此没有在显示相位差的同时确认被摄体像的方法，不得不依赖对比度检测方式。但是，在该情况下，不能进行LCD等显示装置的分辨率以上的对比度的显示，不得不采用将一部分图像进行放大等而显示的方法。

因此，近年来，在手动聚焦模式时，为了使操作者容易进行使焦点对准被摄体的作业，将分割图像(Split image)显示在即时预览图像(也称为实时取景图像)内。此处，分割图像是指如下图像：分割为两半的上下图像与焦点的偏差对应地在左右方向上产生偏差，当处于焦点对准的状态时，上下图像的左右方向的偏差消失。使用者以使分割图像的上下图像的偏差消失的方式操作手动聚焦环而对准焦点(进行对焦)。

作为显示分割图像的摄像装置的例子，在专利文献1所记载的摄像装置中，将来自摄像光学系统的光束中的通过光瞳分割部进行分割的光束所形成的第一被摄体像以及第二被摄体像分别进行了光电转换，而生成第一图像以及第二图像，使用这些第一以及第二图像来生成分割图像，并且将由未被光瞳分割部分割的光束形成的第三被摄体像进行光电转换而生成第三图像。并且，将上述第三图像显示在显示部中，并且在第三图像内显示上述生成的分割图像，且对分割图像附加从第三图像提取出的颜色信息。

另一方面，与分割图像不同地，专利文献2记载了将右眼图像和左眼图像高速地交替显示的立体图像显示方法。

现有技术文献

专利文献

专利文献1：日本特开2009-147665号公报

专利文献2：日本特开2005-229560号公报

发明内容

发明要解决的课题

但是，在专利文献1所记载的技术中，虽然显示分割图像，但存在难以判断是否对期望的被摄体进行了对焦的情况。此外，在专利文献2所记载的技术中，没有考虑判断是否对期望的被摄体进行了对焦。

本发明鉴于这样的情况而完成，其目的在于，提供一种摄像装置以及图像显示方法，能够容易地确认显示部所显示的图像是否位于对焦点。

用于解决课题的技术方案

为了实现上述目的，本发明的一个方式所涉及的摄像装置，包括：生成部，生成部，基于具有将通过了摄影透镜中的第一区域以及第二区域的被摄体像进行光瞳分割而分别成像的第一像素组以及第二像素组的摄像元件所输出的图像信号，生成第一显示用图像，并且，根据基于从第一像素组以及第二像素组输出的第一图像信号以及第二图像信号的第一图像以及第二图像，生成用于对焦确认的第二显示用图像以及辅助对焦确认的第三显示用图像；以及显示部，能够交替显示第二显示用图像以及第三显示用图像；显示控制部，控制第二显示用图像以及第三显示用图像在显示部的交替显示，并进行使显示部显示第一显示用图像和第二显示用图像或者显示第一显示用图像和第三显示用图像的控制。

由此，通过使第二显示用图像和第三显示用图像交替显示在显示部中，能够容易地进行所期望的被摄体的图像是否位于对焦点的确认。

此外，本发明的其他方式所涉及的摄像装置，包括：生成部，基于具有将通过了摄影透镜中的第一区域以及第二区域的被摄体像进行光瞳分割而分别成像的第一像素组以及第二像素组的摄像元件所输出的图像信号，根据基于从第一像素组以及第二像素组输出的第一图像信号以及第二图像信号的第一图像以及第二图像，生成用于对焦确认的第二显示用图像以及辅助对焦确认的第三显示用图像；显示部，能够交替显示第二显示用图像以及第三显示用图像；以及显示控制部，控制第二显示用图像以及第三显示用图像在显示部的交替显示，并进行使显示部显示第二显示用图像或者显示第三显示用图像的控制。

由此，通过使第二显示用图像和第三显示用图像交替显示在显示部的宽范围内，能够容易地进行所期望的被摄体的图像是否位于对焦点的确认。

在摄像装置中，优选的是，摄像元件具有使被摄体像在未被光瞳分割的情况下成像的第三像素组，生成部基于从第三像素组输出的第三图像信号，生成第一显示用图像。由此，能够得到画质更好的第一显示用图像。

在摄像装置中，优选的是，摄像元件在摄像元件的至少中央附近具有第一像素组和第二像素组。

在摄像装置中，优选的是，生成部生成以下图像：第二显示用图像，具有第一显示范围和第二显示范围，在第一显示范围使用第一图像，在第二显示范围使用第二图像；以及第三显示用图像，在第一显示范围和第二显示范围中的至少一个使用的图像与第二显示用图像不同。

在摄像装置中，优选的是，显示控制部切换以下控制：基于第一模式的控制，交替显示第一显示用图像和第二显示用图像的图像以及第一显示用图像和第三显示用图像的图像，或者交替显示第二显示用图像和第三显示用图像；以及基于第二模式的控制，代替交替显示而只显示第一显示用图像和第二显示用图像的图像或者只显示第二显示用图像。

由此，能够根据使用条件而切换显示部的显示，在摄影时，能够舒适地观看显示部的显示图像。

在摄像装置中，优选的是，显示控制部切换以下控制：基于第一模式的控制，交替显示第一显示用图像和第二显示用图像的图像以及第一显示用图像和第三显示用图像的图像，或者以第一频率交替显示第二显示用图像和第三显示用图像；以及基于第二模式的控制，交替显示第一显示用图像和第二显示用图像的图像以及第一显示用图像和第三显示用图像的图像，或者以比第一频率高的第二频率交替显示第二显示用图像和第三显示用图像。由此，能够根据使用条件而切换显示部的显示，在摄影时，能够舒适地观看显示部的显示图像。

在摄像装置中，优选的是，显示控制部切换以下控制：基于第一模式的控制，基于第一模式的控制，交替显示第一显示用图像和第二显示用图像的图像以及第一显示用图像和第三显示用图像的图像，或者交替显示第二显示用图像和第三显示用图像；以及基于第二模式的控制，只显示第一显示用图像。由此，能够根据使用条件而切换显示部的显示，在摄影时，能够舒适地观看显示部的显示图像。

在摄像装置中，优选的是，摄影透镜具有手动聚焦功能，当正在使用手动聚焦功能时，显示控制部通过第一模式进行控制，当不是正在使用手动聚焦功能时，显示控制部通过第二模式进行控制。由此，能够根据使用条件而切换显示部的显示，在摄影时，能够舒适地观看显示部的显示图像。

在摄像装置中，优选的是，还包括快门部，该快门部输出摄影准备指令以及摄影指令，在从快门部输出摄影准备指令的期间，显示控制部切换到第一模式。由此，能够根据使用条件而切换显示部的显示，在摄影时，能够舒适地观看显示部的显示图像。

在摄像装置中，优选的是，摄影透镜具有变焦功能，当正在使用变焦功能时，显示控制部通过第一模式进行控制，当不是正在使用变焦功能时，显示控制部通过第二模式进行控制。由此，能够根据使用条件而切换显示部的显示，在摄影时，能够舒适地观看显示部的显示图像。

为了实现上述目的，本发明的一个方式所涉及的图像显示方法，包括以下步骤：基于具有将通过了摄影透镜中的第一区域以及第二区域的被摄体像进行光瞳分割而分别成像的第一像素组以及第二像素组的摄像元件所输出的图像信号，生成第一显示用图像，并且，根据基于从第一像素组以及第二像素组输出的第一图像信号以及第二图像信号的第一图像以及第二图像，生成用于对焦确认的第二显示用图像以及辅助对焦确认的第三显示用图像；以及对于能够交替显示第二显示用图像以及第三显示用图像的显示部，通过控制第二显示用图像以及第三显示用图像在显示部的交替显示，来显示第一显示用图像和第二显示用图像，或者显示第一显示用图像和第三显示用图像。

由此，通过使第二显示用图像和第三显示用图像交替显示在显示部中，能够容易地进行所期望的被摄体的图像是否位于对焦点的确认。

为了实现上述目的，本发明的其他方式所涉及的图像显示方法，包括以下步骤：基于具有将通过了摄影透镜中的第一区域以及第二区域的被摄体像进行光瞳分割而分别成像的第一像素组以及第二像素组的摄像元件所输出的图像信号，根据基于从第一像素组以及第二像素组输出的第一图像信号以及第二图像信号的第一图像以及第二图像，生成用于对焦确认的第二显示用图像以及辅助对焦确认的第三显示用图像；以及对于能够交替显示第二显示用图像以及第三显示用图像的显示部，通过控制第二显示用图像以及第三显示用图像在显示部的交替显示，来显示第二显示用图像或者第三显示用图像。

由此，通过使第二显示用图像和第三显示用图像交替显示在显示部的宽范围内，能够容易地进行所期望的被摄体的图像是否位于对焦点的确认。

发明效果

根据本发明，通过交替显示第二显示用图像以及第三显示用图像，能够容易地进行显示部所显示的图像是否位于对焦点的确认。

附图说明

图1是从斜前方观察本发明的一个方式所涉及的摄像装置的立体图。

图2是图1所示的摄像装置的后视图。

图3是表示图1所示的摄像装置的实施方式的框图。

图4A是表示在本发明的摄像装置所使用的摄像元件中设置的滤色器的滤色器排列以及遮光构件的图。

图4B是表示在本发明的摄像装置所使用的摄像元件中设置的滤色器的滤色器排列以及遮光构件的图(A面)。

图4C是表示在本发明的摄像装置所使用的摄像元件中设置的滤色器的滤色器排列以及遮光构件的图(B面)。

图5A是表示作为相位差像素的第一像素的结构例的图。

图5B是表示作为相位差像素的第二像素的结构例的图。

图6是表示第二显示用图像的例子的图。

图7是表示第二显示用图像的其他例子的图。

图8A是表示第二显示用图像和第三显示用图像的交替显示的例子的图。

图8B是表示第二显示用图像和第三显示用图像的交替显示的例子的图。

图9A是表示第二显示用图像和第三显示用图像的交替显示的其他例子的图。

图9B是表示第二显示用图像和第三显示用图像的交替显示的其他例子的图。

图10是表示第一显示用图像以及第二显示用图像的显示例的图。

图11是本发明中的摄像装置的主要部分的功能框图。

图12是本发明中的第一实施方式的流程图。

图13是本发明中的第二实施方式的流程图。

图14是本发明中的第三实施方式的流程图。

图15是本发明中的第四实施方式的流程图。

图16是本发明中的第五实施方式的流程图。

图17是表示在本发明的摄像装置所使用的摄像元件中设置的其他滤色器的滤色器排列以及遮光构件的图。

图18是作为本发明的其他方式所涉及的摄像装置的智能手机的外观图。

图19是表示智能手机的主要部分结构的框图。

具体实施方式

以下，参照附图，对本发明的例子进行说明。此外，在以下的说明中，将相位差像素设为第一像素以及第二像素，将普通像素(不是相位差像素的像素)设为第三像素。此外，从第一像素输出第一图像信号而生成第一图像，从第二像素输出第二图像信号而生成第二图像，从第三像素输出第三图像信号。第一显示用图像(普通图像或者普通实时取景图像)从第一图像和/或第二图像生成。第一显示用图像(普通图像或者普通实时取景图像)也从第三图像信号生成。此外，第二显示用图像从第一图像以及第二图像生成。此外，辅助对焦确认的第三显示用图像从第一图像和/或第二图像生成。

[摄像装置的外观]

图1是从斜前方观察本发明的一个方式所涉及的具有变焦镜头的相机即摄像装置100的立体图，图2是摄像装置100的后视图。

摄像装置100由相机主体200、安装于相机主体200的变焦镜头300(摄影透镜(透镜部)16(标号未图示)、聚焦环302(手动操作部))构成，其是不具备反光镜的数码相机。

在相机主体200的前表面设置有光学取景器的取景器窗241、取景器切换杆(取景器切换部)214等。当使取景器切换杆214沿箭头SW方向转动时，使得在光学取景器中进行目视确认的像在光学像和电子像(即时预览图像)之间进行切换(后述)。此外，光学取景器的光轴L2是与变焦镜头300的光轴L1不同的光轴。此外，在相机主体200的上表面主要设置有快门按钮211(释放按钮)以及摄影模式等的设定用的转盘212。

在相机主体200的背面主要设置有光学取景器的取景器目镜部242、显示部213、十字键222、MENU/OK键224、BACK/DISP按钮225。此外，在快门按钮211为半按压状态的情况下，摄影准备指令的信号从操作部14传递到CPU(Central Processing Unit，中央处理器)12(参照图3)。此外，在快门按钮211为全按压状态的情况下，摄影指令的信号从操作部14传递到CPU12(参照图3)。

十字键222作为输出菜单的选择、变焦和逐帧播放等各种指令信号的多功能的键发挥功能。MENU/OK键224是兼具作为菜单按钮的功能和作为对选择内容的确定以及执行等进行指示的OK按钮的功能的操作键，所述菜单按钮用于进行使得在显示部213的画面上显示菜单的指令。BACK/DISP按钮225在选择项目等期望的对象的删除、指示内容的取消或者返回前一个的操作状态等时使用。

显示部213除了用于摄影模式时的即时预览图像(实时取景图像)的显示、重放模式时的重放图像的显示之外，还用于菜单画面等的显示。此外，在以下的说明中记载为显示部213，但本发明的摄像装置中的显示部的含义是包括图2中的取景器(取景器存在于安装有图2的取景器目镜部242的部位)和显示部213(液晶画面显示)。此外，关于在取景器和显示部213中的图像显示的切换，既可以使取景器切换杆214具有该切换功能，也可以使转盘212具有该切换功能。

此外，在图1中，示出了具有变焦镜头的摄像装置100，但本发明的摄像装置100并不限定于具有变焦镜头的摄像装置100。即，具有单焦点的镜头的摄像装置100也能够用作本发明的摄像装置100。此外，本发明的摄像装置100也可以是可换镜头式的摄像装置100。

[摄像装置的内部结构]

图3是表示本发明所涉及的摄像装置100的实施方式的框图。

该摄像装置100是对拍摄到的静止画面或动画进行记录的数码相机，相机整体的动作由中央处理装置(CPU)12进行统一控制。

如图1以及图2所示，摄像装置100的操作部14包括快门按钮211、选择摄影模式等的转盘(聚焦模式切换部)212、取景器切换杆214、十字键222、MENU/OK键224、BACK/DISP按钮225。来自该操作部14的各种操作信号供给到CPU12。

当设定摄影模式时，表示被摄体的图像光经由包括能够通过手动操作而移动的聚焦透镜在内的摄影透镜16以及快门18，在彩色的摄像元件(CMOS(Complementary MetalOxide Semiconductor，互补式金属氧化物半导体)传感器)20的受光面进行成像。在摄像元件20中蓄积的信号电荷根据从设备控制部22供给的读取信号，而依次读取为与信号电荷(电压)对应的数字信号。此外，摄像元件20具有根据读取信号的时机而控制各光电传感器的电荷蓄积时间(快门速度)的所谓的电子快门功能。

从上述结构的摄像元件20中的第一像素组读取第一图像信号，从上述结构的摄像元件20中的第二像素组读取第二图像信号，并通过AD转换部进行AD转换，临时存储在SDRAM(Synchronous Dynamic Random Access Memory，同步动态随机存取存储器)等存储器26中。此外，在本发明中使用的摄像元件20还能够具有第一像素组、第二像素组以及第三像素组。在摄像元件20具有该第三像素组的情况下，从摄像元件20的第一像素组读取第一图像信号，从第二像素组读取第二图像信号以及从第三像素组读取第三图像信号，并临时存储在SDRAM等存储器26中。

如图3所示，图像处理部28具有普通处理部30和分割图像处理部32。普通处理部30对与摄像元件20具有的第三像素组对应的第三图像信号(R、G、B信号)进行处理，生成第一显示用图像。另一方面，分割图像处理部32对与第一像素组以及第二像素组对应的第一像素信号以及第二像素信号(R、G、B信号)进行处理，生成第二显示用图像以及第三显示用图像。

此外，在摄像元件20具有第一像素组、第二像素组以及第三像素组的情况下，能够选择使用哪个图像信号来生成第一显示用图像。即，可以基于第一像素组以及第二像素组来生成第一显示用图像，也可以基于第三像素组来生成第一显示用图像。

普通处理部30以及分割图像处理部32分别具有调整R、G、B信号的增益并进行白平衡(WB)校正的WB增益部(未图示)、对进行了WB校正的各R、G、B信号进行伽马校正的伽马校正部(未图示)、进行与摄像元件20的滤色器排列对应的去马赛克(色插补)处理而生成实施了去马赛克处理的(进行了同时化的)R、G、B信号的去马赛克(同时化)处理部(未图示)等，并通过各处理部对在存储器26中临时存储的初始的数字信号(RAW数据)依次进行信号处理。

此处，去马赛克处理(去马赛克处理)是指从与单板式的彩色摄像元件的滤色器排列对应的马赛克图像按每个像素计算全部颜色信息的处理，也称为同时化处理。例如，在由RGB这3色的滤色器构成的摄像元件的情况下，是从由RGB这3色构成的马赛克图像按每个像素计算RGB全部颜色信息的处理。

通过普通处理部30进行了处理的R、G、B信号通过编码器34而编码为记录用的信号，并记录在记录部40(参照图11)中。

将通过普通处理部30进行了处理的显示用的彩色图像(第一显示用图像)和通过分割图像处理部32进行了处理的显示用的彩色图像(第二、第三显示用图像)分别供给到显示部图形控制器36(显示控制部)。显示部图形控制器36在输入的第一显示用图像的显示区域内合成彩色的第二、第三显示用图像，并将合成的图像数据输出到显示部213。

作为在第一显示用图像(普通的彩色图像)中合成第二、第三显示用图像的方法，并不限定于嵌入第二、第三显示用图像来代替第一显示用图像的一部分的图像的合成，也可以是使第二、第三显示用图像重叠在第一显示用图像之上的合成。此外，在重叠第二、第三显示用图像时，也可以适当调整要重叠第二、第三显示用图像的第一显示用图像的一部分的图像与第二、第三显示用图像的透射率而进行重叠。

由此，表示拍摄的被摄体像的即时预览图像连续地显示在显示部213的画面上，而所显示的即时预览图像成为在第一显示用图像的显示区域内显示了第二、第三显示用图像的图像(参照图10)。

进而，还能够将第二、第三显示用图像显示在显示部213的一面。在该情况下，第一显示用图像不显示在显示部213中，而在显示部213中显示第二、第三显示用图像。

此外，摄像装置100能够通过转盘212(聚焦模式切换部)切换手动聚焦模式和自动聚焦模式，如果选择手动聚焦模式，则优选使显示部213显示合成了第二、第三显示用图像的即时预览图像。

另一方面，如果通过转盘212选择自动聚焦模式，则CPU12作为相位差检测部以及自动焦点调整部发挥作用。相位差检测部检测相位差像素即第一像素组的第一图像和第二像素组的第二图像的相位差。自动焦点调整部基于检测出的相位差，以使摄影透镜16的散焦量(第一、第二图像间的相位偏差)成为零的方式从设备控制部22经由固定架256、346控制未图示的透镜驱动部，使摄影透镜16向对焦位置移动。

[摄像元件]

接着，说明图4A到图4C所示的摄像元件20的结构。

图4A到图4C示出了在摄像元件20中设置的滤色器的滤色器排列以及遮光构件。图4A的RA、GA、BA表示图4B所示的A面的R(红)、G(绿)、B(蓝)的滤色器。此外，图4A的RB、GB、BB表示图4C所示的B面的R(红)、G(绿)、B(蓝)的滤色器。此外，在滤色器设置有以20A以及20B示出的遮光构件的像素是相位差像素。

如图4A所示，在摄像元件20中，作为在各像素上配置的红(R)、绿(G)、蓝(B)的滤色器，拜耳排列的A面的像素组和B面的像素组沿着水平方向以及垂直方向彼此错开半个间距配置(参照图4B、图4C)。

本发明的摄像元件20具有通过了摄影透镜16中的第一以及第二区域的被摄体像进行光瞳分割而分别成像的第一以及第二像素组(参照图5A、图5B)。由于第一以及第二像素组存在于摄像元件20内，能够从第一像素组得到第一像素信号，从第二像素组得到第二像素信号。并且，能够利用第一像素信号和/或第二像素信号生成第二显示用图像。此外，能够利用第一像素信号和/或第二像素信号生成第三显示用图像。

进而，还能够利用第一像素信号以及第二像素信号生成第一显示用图像。

另一方面，摄像元件20还能够具备上述被摄体在未被光瞳分割的情况下成像的第三像素组。在摄像元件20具备第三像素组的情况下，第一显示用图像可以由第一以及第二图像信号生成，也可以由第三图像信号生成。在由第三图像信号生成了第一显示用图像的情况下，第一显示用图像具有较好的画质。

此外，A面的像素组以及B面的像素组分别由普通像素组(第三像素组)和相位差检测用的相位差像素组(第一像素组、第二像素组)构成。

图5A以及图5B是表示构成摄像元件20的第一像素组和第二像素组的相位差像素的一例的图。

图5A所示的第一像素在光电二极管PD的前表面侧(微透镜L侧)配置有遮挡受光面的左半部分的遮光构件20A。另一方面，图5B所示的第二像素在光电二极管PD的前表面侧配置有遮挡受光面的右半部分的遮光构件20B。此外，为了便于说明，将图5A作为第一像素、将图5B作为第二像素而说明，但也可以是，图5A是第二像素，图5B是第一像素。

微透镜L以及遮光构件20A、20B作为光瞳分割部发挥功能，第一像素只接受通过摄影透镜16的出瞳的光束的光轴的左侧，第二像素只接受通过摄影透镜16的出瞳的光束的光轴的右侧。这样一来，通过作为光瞳分割部的微透镜L以及遮光构件20A、20B，将通过出瞳的光束左右分割，并分别入射到第一像素以及第二像素(相位差像素)。

此外，在与通过摄影透镜16的出瞳的光束中的左半部分的光束对应的被摄体像和与右半部分的光束对应的被摄体像中，焦点对准的部分在摄像元件20上的相同的位置成像，但前焦点或者后焦点的部分分别入射到摄像元件20上的不同的位置(相位偏差)。由此，与左半部分的光束对应的被摄体像和与右半部分的光束对应的被摄体像能够作为视差不同的视差图像(左眼图像、右眼图像)而取得。此外，该实施方式的摄像元件20是CMOS型的图像传感器，但并不限定于此，也可以是CCD(Charge Coupled Device，电荷耦合器件)图像传感器。

此外，第一像素组和第二像素组优选配置在摄像元件20的中央附近。这是因为，想要进行对焦的图像位于视角的中央附近的情况多，如果第一像素组和第二像素组位于中央附近则容易使其对焦。此外，在此，中央附近是指包括摄像元件20的中心点在内的某恒定的区域。

图6表示由第一图像以及第二图像生成的第二显示用图像60的例子。第二显示用图像60包括第一显示范围60A和第二显示范围60B。并且，在第一显示范围60A显示第一图像，在第二显示范围60B显示第二图像。即，第二显示用图像60成为所谓的分割图像。

第一以及第二像素组与第二显示用图像60的尺寸对应设置。分割图像由基于第一像素组生成的第二显示用图像60的第一显示范围60A的图像(视差图像)和基于第二像素组生成的第二显示用图像60的第二显示范围60B的图像(视差图像)构成。

在图6所示的第二显示用图像60内，存在焦点距离不同的被摄体(a)、(b)以及(c)。并且，在图6所示的例子中，是对被摄体(a)对准焦点的状态，对被摄体(b)以及(c)没有对准焦点的状态。即，被摄体(a)在第一显示范围60A和第二显示范围60B的边界处沿视差方向(水平方向)不产生图像的偏差。另一方面，被摄体(b)以及被摄体(c)在第一显示范围60A和第二显示范围60B的边界处沿视差方向(水平方向)产生图像的偏差。因此，在图6所示的第二显示用图像60中，对被摄体(a)对准焦点。

与图6相同地，图7表示通过第一图像以及第二图像生成的第二显示用图像60的例子。此外，在第二显示用图像60内存在焦点距离不同的被摄体(a)、(b)以及(c)。

在图7的情况下，是对被摄体(b)对准焦点的状态。即，被摄体(a)以及被摄体(c)在第一显示范围60A和第二显示范围60B的边界处沿视差方向(水平方向)产生图像的偏差。另一方面，被摄体(b)在第一显示范围60A和第二显示范围60B的边界处沿视差方向(水平方向)不产生图像的偏差。因此，在图7所示的第二显示用图像60中，对被摄体(b)对准焦点。

此外，与在图6以及图7中表示的第二显示用图像60相同地，第三显示用图像具有第一显示范围和第二显示范围。此外，第三显示用图像中的第一显示范围以及第二显示范围中的至少一个所使用的图像与第二显示用图像60不同(参照图8A以及图9A中的标号61)。

例如，在第二显示用图像60中，在第一显示范围60A中显示第一图像，在第二显示范围60B中显示第二图像，因此在第三显示用图像中，考虑在第一显示范围以及第二显示范围内使用第一图像的情况、在第一显示范围以及第二显示范围内使用第二图像的情况以及在第一显示范围内使用第二图像且在第二显示范围内使用第一图像的情况。

图8A、图8B、图9A以及图9B表示第二显示用图像60和第三显示用图像的交替显示的例子。图8A是第三显示用图像61，在第三显示用图像61中的第一显示范围以及第二显示范围内使用第二图像。另一方面，图8B表示在图6中示出的第二显示用图像60。

此外，图9A是第三显示用图像61，在第三显示用图像61中的第一显示范围以及第二显示范围内使用第二图像。另一方面，图9B表示在图7中示出的第二显示用图像60。

交替显示是指，如图8A、图8B、图9A以及图9B所示，将图8A所示的第三显示用图像61和图8B所示的第二显示用图像60以预定的频率交替地显示，或者将图9A所示的第三显示用图像61和图9B所示的第二显示用图像60以预定的频率交替地显示。

这样一来，通过将第二显示用图像60和第三显示用图像61交替显示，能够简单地确认对当前显示的图像的哪个位置对焦(焦点是否对准)。即，通过将图8A所示的图像(第三显示用图像61)以及图8B所示的图像(第二显示用图像60)交替显示，焦点对准的被摄体的图像(在图8A以及图8B中，被摄体(a))即使进行交替显示其图像也不变(移动)。另一方面，焦点没有对准的被摄体的图像(在图8A以及图8B中，被摄体(b)以及(c))通过进行交替显示而使图像发生变化(移动)。因此，通过将第二显示用图像60和第三显示用图像61交替显示，能够简单地确认当前显示的图像的哪个位置有对焦点(焦点是否对准)。

图10表示在显示部213或者取景器(取景器设置在与图2的取景器目镜部242相同的部位)中显示的图像的例子。在图10所示的例子中，在显示部213或者取景器中显示第一显示用图像，并且显示第二显示用图像60(第二显示用图像60由第一图像和第二图像构成)。在图10所示的例子中，没有示出第三显示用图像61，但在将第二显示用图像60和第三显示用图像61交替显示的情况下，显示第二显示用图像60或者第三显示用图像61。换言之，能够使显示部213或者取景器显示第一显示用图像和第二显示用图像60或者第一显示用图像和第三显示用图像61。

使显示部213显示第一显示用图像、第二显示用图像以及第三显示用图像的显示方法能够采用各种方式。例如，显示方法也可以有第一模式和第二模式，并能够切换第一模式和第二模式。

并且，也可以是，在第一模式中，交替显示第一显示用图像和第二显示用图像60或者第一显示用图像和第三显示用图像61，或者交替显示第二显示用图像60和第三显示用图像61。

此外，也可以是，作为第一模式，以第一频率交替显示第一显示用图像和第二显示用图像60或者第一显示用图像和第三显示用图像61，或者以第一频率交替显示第二显示用图像60和第三显示用图像61，作为第二模式，以第二频率(第二频率比第一频率高)交替显示第一显示用图像和第二显示用图像60或者第一显示用图像和第三显示用图像61，或者以第二频率交替显示第二显示用图像60和第三显示用图像61。此外，根据判断焦点是否对准的观点，第一频率以及第二频率是0.5Hz到20Hz的范围，优选为1Hz到18Hz，进一步优选为2Hz到16Hz。

进而，也可以是，作为第一模式，交替显示第一显示用图像和第二显示用图像60或者第一显示用图像和第三显示用图像61，或者交替显示第二显示用图像60和第三显示用图像61，作为第二模式，将第一显示用图像显示在显示部的一面。

图11是摄像装置100的主要部分的功能框图。此外，对于与图3所示的框图共用的部分附属相同的标号。

在图11中，在普通处理部30中，输入从接口(I/F)块(部)24输出的R、G、B的RAW数据(RAW图像)，将第一、第二像素组的位置的R、G、B的像素通过第三像素组中的同色的周围像素进行插补而生成。由此，与只具有第三像素组的摄像元件20相同地，能够得到1个画面量的第三像素组的RAW图像，并能够基于第三像素组的RAW图像而生成记录用的第一显示用图像。

普通处理部30将生成的记录用的第一显示用图像的图像数据输出到编码器34以及显示部图形控制器36。

另一方面，分割图像处理部(分割图像处理块)32从在存储器26中临时存储的RAW数据提取第一像素组以及第二像素组的R、G、B信号，基于第一像素组以及第二像素组的R、G、B信号而生成第二显示用图像60以及第三显示用图像61。

分割图像处理部32基于第一像素组以及第二像素组的R、G、B信号，进行包括与普通处理部30相同的去马赛克(同时化)处理等在内的图像处理，由此能够生成左右的视差图像(第一图像以及第二图像)。并且，分割图像处理部32通过合成图6、图7所示的第二显示用图像60的第一显示范围60A的图像和图6、图7所示的第二显示用图像60的第二显示范围60B的图像而生成分割图像，并将生成的分割图像的图像数据输出到显示部图形控制器36。

此外，分割图像处理部32还生成第三显示用图像61，并输出到显示部图形控制器36。在显示部图形控制器36中，由上述的第一图像以及第二图像生成在第三显示用图像61的第一显示范围以及第二显示范围中的至少一个中使用的图像与上述第二显示用图像60不同的第三显示用图像61。

此外，由于第一像素组以及第二像素组的受光面的左半部分或者右半部分被遮挡，因此第一像素组以及第二像素组的R、G、B信号成为比第三像素组的R、G、B信号小的值。因此，分割图像处理部32优选进行亮度的校正，使得分割图像的亮度成为与由第三像素组生成的图像相同的亮度。

此外，上述普通处理部30和分割图像处理部32在每次自摄像元件20取得1个画面量的RAW数据时，对该RAW数据并行进行图像处理。

显示部图形控制器36基于从普通处理部30供给的与第三像素组对应的记录用的图像数据和从分割图像处理部32供给的与第一、第二像素组对应的分割图像的图像数据，生成显示用的图像数据。

即，显示部图形控制器36根据显示部213的画面尺寸(纵横的像素数)，调整第一显示用图像、第二显示用图像60以及第三显示用图像61的尺寸，并在调整了记录用的图像的尺寸后的图像(显示用的图像)的一部分合成分割图像，从而生成显示用的图像数据。

将合成了分割图像的图像数据输出到显示部213。由此，在显示部213显示合成了第一显示用图像和第二显示用图像和/或第三显示用图像的表示被摄体像的即时预览图像。

此外，在通过转盘212选择了动画模式作为摄影模式的情况下，将由普通处理部30生成的记录用的图像数据(动画数据)经由编码器34而记录到记录部40，在选择了静止画面模式作为摄影模式的情况下，将在快门释放时由普通处理部30生成的记录用的图像数据(静止画面数据)经由编码器34而记录到记录部40。

[混合取景器]

在图11中，设置于相机主体200的混合取景器220被用作光学取景器(OVF)240或者电子取景器(EVF)248。OVF240是包括物镜244和目镜246的逆伽利略式取景器。EVF248包括液晶显示部(LCD)247、棱镜(合成部)245以及目镜246。

此外，在物镜244的前方配置有液晶快门243。在将混合取景器220用作EVF时，液晶快门243进行遮光，使得光学像不会入射到物镜244。

棱镜245使在LCD247中显示的电子像或者各种信息进行反射并引导至目镜246，且合成光学像和在LCD247中显示的信息(电子像、各种信息)。

此处，如果使取景器切换杆214沿箭头SW方向转动，则在每次转动时在能够通过OVF对光学像进行目视确认的OVF模式和能够通过EVF对电子像进行目视确认的EVF模式之间交替地切换。

在OVF模式的情况下，显示部图形控制器36进行控制，使得液晶快门243成为非遮光状态，从而能够从目镜部对光学像进行目视确认。此外，在LCD247中只显示分割图像。由此，能够显示在光学像的一部分重叠了分割图像的取景器像。

另一方面，在EVF模式的情况下，显示部图形控制器36进行控制，使得液晶快门243成为遮光状态，从而只能从目镜部对在LCD247中显示的电子像进行目视确认。此外，对LCD247供给与输出到显示部213的合成了分割图像的图像数据相同的图像数据。由此，能够与显示部213相同地显示在普通图像的一部分合成了分割图像的电子像。

[第一实施方式]

图12是说明第一实施方式的流程图。以下，对流程图进行说明。

首先，通过CPU12判断摄像装置100是否为手动聚焦模式(步骤S10)。在利用操作部14中的转盘212设定为手动聚焦模式的情况下，CPU12能够判断为是手动聚焦模式。在不是手动聚焦模式的情况下(在步骤S10中为“否”的情况下)，返回并重新判断是否为手动聚焦模式。

另一方面，在是手动聚焦模式的情况下(步骤S10的“是”的情况下)，使第二显示用图像60和第三显示用图像61以频率5Hz进行交替显示(步骤S20)。

之后，通过CPU12进行是否正在进行手动聚焦操作的判断(步骤S30)。此处，正在进行手动聚焦操作的判断能够设置各种基准。例如，可以将聚焦环302移动时判断为正在进行手动聚焦操作，也可以将聚焦透镜移动时判断为正在进行手动聚焦操作，也可以将使用者的手接触到聚焦环302时判断为正在进行手动聚焦操作。此外，在该情况下，聚焦环302包含在操作部14中，来自操作部14的信号传递到CPU12，并通过CPU12进行是否正在进行手动聚焦操作的判断。

接着，进行是否正在进行手动聚焦操作的判断(步骤S30)。在判断为不是正在进行手动聚焦操作的情况下(在步骤S30中为“否”的情况下)，返回到步骤S20，通过显示部图形控制器36以频率5Hz交替显示第二显示用图像60和第三显示用图像61。另一方面，在判断为正在进行手动聚焦操作的情况下(步骤S30的“是”的情况下)，通过显示部图形控制器36显示第二显示用图像60(分割图像)(步骤S40)。

之后，通过CPU12判断快门按钮211是否为半按压状态(步骤S50)。快门按钮211包含在操作部14中，由CPU12进行快门按钮211是否为半按压状态的判断。

在快门按钮211不是半按压状态的情况下(在步骤S50中为“否”的情况下)，返回到步骤S30，判断是否正在进行手动聚焦操作(步骤S30)。

另一方面，在快门按钮211是半按压状态的情况下(在步骤S50中为“是”的情况下)，通过显示部图形控制器36使显示部213只显示第一显示用图像(步骤S60)。

之后，判断快门按钮211是否为全按压(步骤S70)。快门按钮211包含在操作部14中，由CPU12进行快门按钮211是否为全按压状态的判断。

在判断为快门按钮211不是全按压的情况下(在步骤S70中为“否”的情况下)，返回到步骤S30，进行是否正在进行手动聚焦操作的判断(步骤S30)。

判断快门按钮211是否为全按压(步骤S70)，在判断为快门按钮211是全按压的情况下(在步骤S70中为“是”的情况下)，进行摄影(步骤S80)。

之后，判断是否摄影结束(步骤S90)，在摄影未结束的情况下(在步骤S90中为“否”的情况下)，返回到步骤S10，判断是否为手动聚焦模式(步骤S10)。在摄影结束的情况下(在步骤S90中为“是”的情况下)，结束。此外，摄影是否结束的判断在CPU12中进行，但能够以各种基准来进行判断。例如，在相机主体200的电源断开的情况下，设为摄影结束。

通过采用这样的图12所示的第一实施方式，在手动聚焦模式中进行第二显示用图像60和第三显示用图像61的交替显示，因此容易进行焦点对准哪个位置的确认。此外，通过在正在进行手动聚焦操作时显示第二显示用图像60，容易对准焦点。进而，通过以快门按钮211的半按压状态来显示第一显示用图像，能够准确地把握想要拍摄的图像。

[第二实施方式]

图13是说明第二实施方式的流程图。以下，对流程图进行说明。此外，对与图12相同的步骤附属相同的标号，并省略其说明。

在图12所示的第一实施方式的流程图和图13所示的第二实施方式的流程图中，图13所示的第二实施方式的流程图的不同点在于，在判断为进行了手动聚焦操作的情况下(在步骤S30中判断为“是”的情况下)，通过显示部图形控制器36以频率2Hz交替显示第二显示用图像60和第三显示用图像61(步骤S45)。

即，在图13所示的第二实施方式中，在是手动聚焦模式的情况下，以5Hz交替显示第二显示用图像60和第三显示用图像61(步骤S20)，进而，在正在进行手动聚焦操作时，也以2Hz交替显示第二显示用图像60和第三显示用图像61。

通过采用这样的图13所示的第二实施方式，即使是正在进行手动聚焦操作时，也以2Hz交替显示第二显示用图像60和第三显示用图像61。因此，能够容易地判断焦点是否对准并且进行聚焦操作。

[第三实施方式]

图14是说明第三实施方式的流程图。以下，对流程图进行说明。此外，对与图12相同的步骤附属相同的标号，并省略其说明。

首先，在第三实施方式中，进行是否为手动聚焦模式的判断(步骤S10)。在不是手动聚焦模式的情况下(在步骤S10中为“否”的情况下)，返回到开始。另一方面，在是手动聚焦模式的情况下(在步骤S10中为“是”的情况下)，显示第二显示用图像(步骤S40)。

之后，进行快门按钮211是否为半按压状态的判断(步骤S50)。在快门按钮211没有被半按压的情况下(在步骤S50中为“否”的情况下)，返回到步骤S40，显示第二显示用图像60(步骤S40)。另一方面，在快门按钮211是半按压状态的情况下(在步骤S50中为“是”的情况下)，以频率5Hz交替显示第二显示用图像60和第三显示用图像61(步骤S65)。

之后，进行快门按钮211是否为全按压状态的判断(步骤S70)。在快门按钮211是全按压状态的情况下(在步骤S70中为“否”的情况下)，返回到步骤S50，进行快门按钮211是否为半按压状态的判断(步骤S50)。另一方面，在快门按钮211是全按压状态的情况下(在步骤S70中为“是”的情况下)，进行摄影(步骤S80)。

之后，进行摄影结束的判断(步骤S90)，在摄影未结束的情况下(在步骤S90中为“否”的情况下)，返回到步骤S10，进行是否为手动聚焦模式的判断(步骤S10)。另一方面，在判断为摄影结束的情况下(在步骤S90中为“是”的情况下)，结束。

在判断作为手动聚焦模式的情况下(步骤S10)，通过显示部图形控制器36使显示部213显示第二显示用图像60(步骤S40)。之后，由CPU12进行快门按钮211是否为半按压状态的判断(步骤S50)。

如第三实施方式所示，在快门按钮211是半按压状态的情况下(在步骤S50中为“是”的情况下)，通过进行第二显示用图像60和第三显示用图像61的交替显示(5Hz)，能够容易地进行焦点相对于进行摄影的图像是否对准的判断。

[第四实施方式]

图15是说明第四实施方式的流程图。以下，对流程图进行说明。此外，对与图12相同的步骤附属相同的标号，并省略其说明。

如果比较图15所示的第四实施方式和图14所示的第三实施方式，则在图15所示的第四实施方式中，代替在图14所示的第三实施方式中显示第二显示用图像(步骤S40)，而以频率5Hz交替显示第二显示用图像60和第三显示用图像(步骤S20)。此外，在图15所示的第四实施方式中，代替在图14所示的第三实施方式中的快门按钮211是否为半按压状态的判断(步骤S50)，而是进行是否正在使用变焦功能的判断(步骤S35)。此外，在图15所示的第四实施方式中，代替在图14所示的第三实施方式中的交替显示第二显示用图像60和第三显示用图像61(步骤S65)，而进行快门按钮211是否为全按压状态的判断(步骤S70)。

此外，由CPU12进行是否正在使用变焦功能的判断(步骤S35)。正在使用变焦功能的基准能够采用各种基准。例如，能够在变焦环移动、变焦镜头移动、显示用图像变焦等情况下，经由操作部14由CPU12判断正在使用变焦功能。

如第四实施方式所示，在正在使用变焦功能的情况下(步骤S35的“是”的情况下)，显示第一显示用图像(步骤S70)，从而能够准确地把握进行变焦的图像。

[第五实施方式]

图16是说明第五实施方式的流程图。第五实施方式是在一定期间内不进行任何操作的情况下将显示返回到初始的例子。即，从开始手动聚焦模式到进行手动聚焦操作、变焦操作以及快门按钮211的半按压为止以频率5Hz进行第二显示用图像60和第三显示用图像61的交替显示。接着，当进行手动聚焦操作、变焦操作或者快门按钮211的半按压时，以频率2Hz进行第二显示用图像60和第三显示用图像61的交替显示。进而，之后，如果一定时间没有进行手动聚焦操作、变焦操作或者快门按钮211的半按压，则再次以频率5Hz进行第二显示用图像60和第三显示用图像61的交替显示。以下，对图16的流程图进行说明。此外，对于与图12相同的步骤附属相同的标号。

首先，判断是否为手动聚焦模式(步骤S10)。接着，在不是手动聚焦模式的情况下(在步骤S10中为“否”的情况下)，返回到开始。另一方面，在是手动聚焦模式的情况下(步骤S10中“是”)，由CPU12在显示部图形控制器36设置标记F＝1且使显示部图形控制器36的计时器T的计数开始(步骤S12)。

之后，由CPU12判断是否在显示部图形控制器36设置了标记F＝1(步骤S14)。在是标记F＝1的情况下(在步骤S14中为“是”的情况下)，以频率5Hz进行第二显示用图像60和第三显示用图像61的交替显示(步骤S20)。另一方面，在不是标记F＝1的情况下(在步骤S14中为“否”的情况下)，以频率2Hz进行第二显示用图像60和第三显示用图像61的交替显示(步骤S45)。

之后，进行是否正在进行手动聚焦操作的判断(步骤S30)。在正在进行手动聚焦操作的情况下(在步骤S30中为“是”的情况下)，由CPU12在显示部图形控制器36设置标记F＝0且将计时器T复位(步骤S37)。另一方面，在不是正在进行手动聚焦操作的情况下(在步骤S30中为“否”的情况下)，进行是否正在使用变焦功能的判断(步骤S35)。在正在使用变焦功能的情况下(在步骤S35中为“是”的情况下)，设为标记F＝0且将计时器T复位(步骤S37)。另一方面，在不是正在使用变焦功能的情况下(步骤S35的“否”的情况下)，由CPU12进行计时器T是否经过3秒以上的判断(步骤S42)。此外，能够适当决定计时器T的设定秒数，例如能够设定为1秒、5秒、7秒等。在计时器T未经过3秒以上的情况下(步骤S42的“否”的情况下)，直接前进到快门按钮211是否为半按压状态的判断(步骤S50)。

在计时器T经过了3秒以上的情况下(步骤S42的“是”的情况下)，由CPU12进行是否为标记F＝0的判断(步骤S44)。在不是标记F＝0的情况下(在步骤S44中为“否”的情况下)，直接前进到快门按钮211是否为半按压的判断(步骤S50)。另一方面，在是标记F＝0的情况下(在步骤S44中为“是”的情况下)，由CPU12在显示部图形控制器36设定为标记F＝1(步骤S47)。

在快门按钮211是否被半按压的判断(步骤S50)中，快门按钮211没有被半按压的情况下(在步骤S50中为“否”的情况下)，返回到步骤S14，进行标记F＝1的判断(步骤S14)。另一方面，在快门按钮211是半按压状态的情况下(在步骤S50中为“是”的情况下)，设定为标记F＝0且将计时器T复位为0(步骤S52)。

之后，进行快门按钮211是否为全按压状态的判断(步骤S70)。在快门按钮211不是全按压状态的情况下(在步骤S70中为“否”的情况下)，返回到步骤S14，进行标记F＝1的判断(步骤S14)。另一方面，在快门按钮211是全按压状态的情况下(在步骤S70中为“是”的情况下)，前进到摄影(步骤S80)。

之后，进行摄影结束的判断(步骤S90)，在未结束摄影的情况下(在步骤S90中为“否”的情况下)，返回并进行是否为手动聚焦模式的判断(步骤S10)，在结束摄影的情况下(在步骤S90中为“是”的情况下)，结束。

这样一来，通过采取图16所示的第五实施方式，在一定时间没有进行操作的情况下，能够再次返回到初始的显示状态。由此，能够进行适合于摄像装置100的使用状态的图像显示，容易确认焦点是否对准。

[摄像元件的其他实施方式]

图17是表示应用于本发明的摄像元件20的其他实施方式的图，特别是，表示设置于摄像元件20的滤色器的滤色器排列以及遮光构件。

图17所示的摄像元件20的滤色器排列包括由与6×6像素对应的正方形排列图案构成的基本排列图案P(由粗框表示的图案)，该基本排列图案P沿着水平方向以及垂直方向重复配置。即，在该滤色器排列中，R、G、B的各颜色的滤波器以预定的周期性进行排列。此外，图17中的、R表示红色的滤色器、G表示绿色的滤色器、B表示蓝色的滤色器。进而，20A以及20B是遮光构件，将具有遮光构件20A的像素设为第一像素组，将具有遮光构件20B的像素设为第二像素组，将不具有遮光构件的像素设为第三像素组。

如果只取出图17所示的摄像元件20所包含的左右的相位像素组(第一像素组、第二像素组)，则左右的相位像素组的滤色器排列分别成为拜耳排列。即，摄像元件20的全部像素组中的一部分像素配置为相位像素，以使左右的相位差像素组的滤色器排列分别成为拜耳排列。

图17所示的摄像元件20的滤色器排列具有6×6像素的基本排列图案P，比具有2×2像素的基本排列图案的拜耳排列复杂。因此，去马赛克(同时化)处理等信号处理变得复杂，但通过如上所述地配置相位差像素以使左右的相位像素组的滤色器排列分别成为拜耳排列，从而能够容易地进行用于生成分割图像的去马赛克(同时化)处理等信号处理。

＜智能手机的结构＞

图18是表示摄像装置100的其他实施方式即智能手机500的外观的图。图18所示的智能手机500具有平板状的框体502，在框体502的一个面包括作为显示部213的显示面板521和作为输入部的操作面板522一体而成的显示输入部520。此外，框体502包括扬声器531、话筒532、操作部540和相机部541。此外，框体502的结构并不限定于此。例如，也可以采用显示部213和输入部彼此独立的结构，或者采用框体502具有折叠结构或滑动机构的结构。

图19是表示图18所示的智能手机500的结构的框图。如图19所示，作为智能手机的主要构成元素，包括无线通信部510、显示输入部520、通话部530、操作部540、相机部541、存储部550、外部输入输出部560、GPS(Global Positioning System，全球定位系统)接收部570、动作传感器部580、电源部590以及主控制部501。此外，作为智能手机500的主要功能，包括与基站装置BS进行经由移动通信网NW的移动无线通信的无线通信功能。

无线通信部510根据主控制部501的指示，对容纳在移动通信网NW中的基站装置BS进行无线通信。利用该无线通信，进行声音数据、图像数据等各种文件数据、电子邮件数据等的发送接收和Web数据或流数据等的接收。

显示输入部520是通过主控制部501的控制，显示图像(静止图像以及动态图像)和字符信息等而在视觉上对用户传递信息并且检测对于所显示的信息的用户操作的所谓的触摸面板，并包括显示面板521和操作面板522。在对生成的3D图像进行鉴赏的情况下，优选显示面板521是3D显示面板。

显示面板521将LCD(Liquid Crystal Display，液晶显示器)、OELD(OrganicElectro-Luminescence Display，有机电致发光显示器)等用作显示设备。操作面板522是以能够对在显示面板521的显示面上显示的图像进行目视确认的方式载置，并检测由用户的手指或触笔操作的一个或多个坐标的设备。当通过用户的手指或触笔操作该设备时，将因操作而产生的检测信号输出到主控制部501。接着，主控制部501基于接收到的检测信号，检测显示面板521上的操作位置(坐标)。

如图18所示，智能手机500的显示面板521和操作面板522成为一体而构成显示输入部520，但也可以是操作面板522完全覆盖显示面板521的配置。在采用了该配置的情况下，操作面板522也可以在除了显示面板521之外的区域也具有检测用户操作的功能。换言之，也可以是，操作面板522具有与显示面板521重叠的重叠部分的检测区域(以下，称为显示区域)和除此以外的不与显示面板521重叠的外缘部分的检测区域(以下，称为非显示区域)。

此外，也可以使显示区域的大小和显示面板521的大小完全一致，但不需要使两者必须一致。此外，也可以是，操作面板522具有外缘部分和除此以外的内侧部分的2个感应区域。进而，外缘部分的宽度根据框体502的大小等而适当设计。进而，作为在操作面板522中采用的位置检测方式，可以列举出矩阵开关方式、电阻膜方式、表面弹性波方式、红外线方式、电磁感应方式、静电电容方式等，并能够采用任一种方式。

通话部530包括扬声器531和话筒532，将通过话筒532输入的用户的声音转换为能够在主控制部501中处理的声音数据并输出到主控制部501，或者对从无线通信部510或者外部输入输出部560接收到的声音数据进行解码并从扬声器531输出。此外，如图18所示，例如，能够将扬声器531安装在与设置有显示输入部520的面相同的面，将话筒532安装在框体502的侧面。

操作部540是使用了键开关等的硬件键(hardware key)，受理来自用户的指示。例如，如图18所示，操作部540安装在智能手机500的框体502的显示部的下部、下侧面，其是当被手指等按下时接通，当挪走手指时通过弹簧等的恢复力而处于断开状态的按钮式的开关。

存储部550存储主控制部501的控制程序和控制数据、将通信对象的名称、电话号码等形成对应的地址数据、发送接收的电子邮件的数据、通过Web浏览下载的Web数据、下载的内容数据，并临时存储流数据等。此外，存储部550由智能手机内置的内部存储部551和具有将外部存储器装卸自如的外部存储器槽的外部存储部552构成。此外，构成存储部550的各个内部存储部551和外部存储部552使用闪存类(flash memory type)、硬盘类(harddisk type)、多媒体卡微类(multimedia card micro type)、卡类的存储器(例如、MicroSD(注册商标)存储器等)、RAM(Random Access Memory，随机存取存储器)、ROM(Read OnlyMemory，只读存储器)等存储介质实现。

外部输入输出部560起到作为与连接到智能手机500的全部外部设备的接口的作用，用于通过通信等(例如，通用串行总线(USB)、IEEE1394等)或者网络(例如，互联网、无线LAN、蓝牙(Bluetooth)(注册商标)、RFID(Radio Frequency Identification，射频识别)、红外线通信(红外数据联盟(Infrared Data Association：IrDA))(注册商标)、UWB(UltraWideband，超宽带)(注册商标)、ZigBee(注册商标)等)直接或者间接地与其他外部设备连接。

作为连接到智能手机500的外部设备，例如有经由有线/无线头组、有线/无线外部充电器、有线/无线数据端口、印刷电路板座(card socket)而连接的存储卡(Memory card)或SIM(Subscriber Identity Module Card，用户识别模块卡)/UIM(User IdentityModule Card，用户身份模块卡)卡、经由音频视频I/O(输入/输出(Input/Output))端子而连接的外部音频视频设备、无线连接的外部音频视频设备、有线/无线连接的智能手机、有线/无线连接的个人计算机、有线/无线连接的PDA(Personal Digital Assistant，个人数字助理)、有线/无线连接的个人计算机、耳机等。外部输入输出部560能够将这样从外部设备接受传输的数据传递到智能手机500的内部的各结构元素或将智能手机500的内部的数据传输到外部设备。

GPS接收部570根据主控制部501的指示，接收从GPS卫星ST1～STn发送的GPS信号，并执行基于接收到的多个GPS信号的定位运算处理，检测由该智能手机500的纬度、经度、高度构成的位置。GPS接收部570在能够从无线通信部510、外部输入输出部560(例如，无线LAN(Local Area Network，局域网)取得位置信息时，还能够使用该位置信息来检测位置。

动作传感器部580具有例如3轴的加速度传感器等，根据主控制部501的指示，检测智能手机500的物理上的动作。通过检测智能手机500的物理上的动作，检测出智能手机500移动的方向和加速度。该检测结果输出到主控制部501。

电源部590根据主控制部501的指示，对智能手机500的各部分提供在电池(未图示)中蓄积的电力。

主控制部501具有微处理器，根据存储部550存储的控制程序、控制数据而动作，统一控制智能手机500的各部分。此外，主控制部501为了通过无线通信部510而进行声音通信或数据通信，具有控制通信系统的各部分的移动通信控制功能和应用处理功能。

应用处理功能通过根据存储部550存储的应用软件而使主控制部501动作来实现。作为应用处理功能，例如有控制外部输入输出部560而与对象设备进行数据通信的红外线通信功能、进行电子邮件的发送接收的电子邮件功能、阅览Web网页的Web浏览功能、本发明所涉及的从2D图像生成3D图像的功能等。

此外，主控制部501具有基于接收数据、下载的流数据等图像数据(静止图像或动态图像的数据)，将影像在显示输入部520中显示等图像处理功能。图像处理功能是指，主控制部501对上述图像数据进行解码，对该解码结果实施图像处理，并将图像在显示输入部520中显示的功能。

进而，主控制部501执行对显示面板521的显示控制和检测通过了操作部540、操作面板522的用户操作的操作检测控制。

通过显示控制的执行，主控制部501显示用于启动应用软件的图标、滚动条等的软件键，或者用于制作电子邮件的窗口。另外，滚动条是指，对于无法容纳在显示面板521的显示区域中的较大的图像等，用于受理移动图像的显示部分的指示的软件键。

此外，通过操作检测控制的执行，主控制部501检测通过了操作部540的用户操作，或者通过操作面板522受理对上述图标的操作、对上述窗口的输入栏的字符串的输入，或者受理通过了滚动条的显示用图像的滚动请求。

进而，通过操作检测控制的执行，主控制部501具有判定对操作面板522进行操作的操作位置是与显示面板521重叠的重叠部分(显示区域)还是除此以外的与显示面板521不重叠的外缘部分(非显示区域)，并对操作面板522的感应区域或软件键的显示位置进行控制的触摸面板控制功能。

此外，主控制部501还能够检测对于操作面板522的手势操作，并根据检测到的手势操作来执行预先设定的功能。手势操作的含义是指，不是以往的单纯的触摸操作，而是通过手指等而描画轨迹，或者同时指定多个位置，再或者将这些进行组合而从多个位置至少对其中一个位置描画轨迹的操作。

相机部541是使用CMOS(Complementary Metal Oxide Semiconductor，互补金属氧化物半导体)或CCD(Charge-Coupled Device，电荷耦合器件)等摄像元件20进行电子摄影的数码相机，具有与图1等所示的摄像装置100相同的功能。

即，相机部541构成为能够切换手动聚焦模式和自动聚焦模式。如果选择了手动聚焦模式，则通过对操作部540或者在显示输入部520中显示的聚焦用的图标按钮等进行操作，能够进行相机部541的摄影透镜的对焦。并且，在手动聚焦模式时，使显示面板521显示合成了分割图像的即时预览图像，由此，能够确认手动聚焦时的对焦状态。此外，也可以在智能手机500中设置图8所示的混合取景器220。

此外，相机部541通过主控制部501的控制，能够将通过拍摄而得到的图像数据例如转换为JPEG(Joint Photographic coding Experts Group，联合图像专家组)等压缩的图像数据，并记录在存储部550中，或者通过外部输入输出部560和无线通信部510而输出。在图18所示的智能手机500中，相机部541安装于与显示输入部520相同的面，但相机部541的安装位置并不限定于此，也可以安装在显示输入部520的背面，或者，也可以安装多个相机部541。此外，在安装了多个相机部541的情况下，也能够切换用于摄影的相机部541而进行单独摄影或者同时使用多个相机部541进行摄影。

此外，相机部541能够用于智能手机500的各种功能。例如，作为在显示面板521显示在相机部541中取得的图像或者操作面板522的操作输入之一，能够利用相机部541的图像。此外，在GPS接收部570检测位置时，还能够参照来自相机部541的图像来检测位置。进而，还能够参照来自相机部541的图像，不使用3轴的加速度传感器或者与3轴的加速度传感器并用而判断智能手机500的相机部541的光轴方向或者判断当前的使用环境。当然，还能够在应用软件内利用来自相机部541的图像。

除此之外，也可以将由GPS接收部570取得的位置信息、由话筒532取得的声音信息(也可以是由主控制部等进行声音文本转换而成为文本信息)、由动作传感器部580取得的姿势信息等附加于静止画面或者动画的图像数据并记录在存储部550中，或者通过外部输入输出部560或无线通信部510进行输出。

此外，本发明并不限定于上述的实施方式，当然能够在不脱离本发明的精神的范围内进行各种变形。

标号说明

12…CPU、14…操作部、16…摄影透镜、18…快门、20…摄像元件、20A…遮光构件、20B…遮光构件、22…设备控制部、24…接口部、26…存储器、28…图像处理部、30…普通处理部、32…分割图像处理部、34…编码器、36…显示部图形控制器、40…记录部、60…第二显示用图像、60A…第一显示范围、60B…第二显示范围、100…摄像装置、200…相机主体、300…变焦镜头、302…聚焦环、500…智能手机。

Claims (15)

1.一种摄像装置，包括：

生成部，基于具有将通过了摄影透镜中的第一区域以及第二区域的被摄体像进行光瞳分割而分别成像的第一像素组以及第二像素组的摄像元件所输出的图像信号，生成第一显示用图像，并且，根据基于从所述第一像素组以及所述第二像素组输出的第一图像信号以及第二图像信号的第一图像以及第二图像，生成用于对焦确认的第二显示用图像以及辅助对焦确认的第三显示用图像；

显示部，能够交替显示所述第二显示用图像以及所述第三显示用图像；以及

显示控制部，控制所述第二显示用图像以及所述第三显示用图像在所述显示部的交替显示，并进行使所述显示部显示所述第一显示用图像和所述第二显示用图像或者显示所述第一显示用图像和所述第三显示用图像的控制，

所述生成部生成具有第一显示范围和第二显示范围的所述第二显示用图像以及具有所述第一显示范围和所述第二显示范围的所述第三显示用图像，所述第二显示用图像在所述第一显示范围使用所述第一图像，在所述第二显示范围使用所述第二图像，所述第三显示用图像在所述第一显示范围和所述第二显示范围中的至少一个使用的图像与所述第二显示用图像不同。

2.根据权利要求1所述的摄像装置，其中，

所述摄像元件具有使所述被摄体像在未被光瞳分割的情况下成像的第三像素组，

所述生成部基于从所述第三像素组输出的第三图像信号，生成所述第一显示用图像。

3.根据权利要求1所述的摄像装置，其中，

所述摄像元件在所述摄像元件的至少中央附近具有第一像素组和第二像素组。

4.根据权利要求1所述的摄像装置，其中，

所述显示控制部切换以下控制：

基于第一模式的控制，交替显示所述第一显示用图像和所述第二显示用图像的图像以及所述第一显示用图像和所述第三显示用图像的图像；以及

基于第二模式的控制，代替所述交替显示而只显示所述第一显示用图像和所述第二显示用图像的图像。

5.根据权利要求1所述的摄像装置，其中，

所述显示控制部切换以下控制：

基于第一模式的控制，以第一频率交替显示所述第一显示用图像和所述第二显示用图像的图像以及所述第一显示用图像和所述第三显示用图像的图像；以及

基于第二模式的控制，以比所述第一频率高的第二频率交替显示所述第一显示用图像和所述第二显示用图像的图像以及所述第一显示用图像和所述第三显示用图像的图像。

6.根据权利要求1所述的摄像装置，其中，

所述显示控制部切换以下控制：

基于第一模式的控制，交替显示所述第一显示用图像和所述第二显示用图像的图像以及所述第一显示用图像和所述第三显示用图像的图像；以及

基于第二模式的控制，只显示所述第一显示用图像。

7.一种摄像装置，包括：

生成部，基于具有将通过了摄影透镜中的第一区域以及第二区域的被摄体像进行光瞳分割而分别成像的第一像素组以及第二像素组的摄像元件所输出的图像信号，根据基于从所述第一像素组以及所述第二像素组输出的第一图像信号以及第二图像信号的第一图像以及第二图像，生成用于对焦确认的第二显示用图像以及辅助对焦确认的第三显示用图像；

显示部，能够交替显示所述第二显示用图像以及所述第三显示用图像；以及

显示控制部，控制所述第二显示用图像以及所述第三显示用图像在所述显示部的交替显示，并进行使所述显示部显示所述第二显示用图像或者显示所述第三显示用图像的控制，

所述生成部生成具有第一显示范围和第二显示范围的所述第二显示用图像以及具有所述第一显示范围和所述第二显示范围的所述第三显示用图像，在所述第一显示范围使用所述第一图像，在所述第二显示范围使用所述第二图像，所述第三显示用图像在所述第一显示范围和所述第二显示范围中的至少一个使用的图像与所述第二显示用图像不同。

8.根据权利要求7所述的摄像装置，其中，

所述显示控制部切换以下控制：

基于第一模式的控制，交替显示所述第二显示用图像和所述第三显示用图像；以及

基于第二模式的控制，代替所述交替显示而只显示所述第二显示用图像。

9.根据权利要求7所述的摄像装置，其中，

所述显示控制部切换以下控制：

基于第一模式的控制，以第一频率交替显示所述第二显示用图像和所述第三显示用图像；以及

基于第二模式的控制，以比所述第一频率高的第二频率交替显示所述第二显示用图像和所述第三显示用图像。

10.根据权利要求8所述的摄像装置，其中，

所述摄影透镜具有手动聚焦功能，

当正在使用所述手动聚焦功能时，所述显示控制部通过所述第一模式进行控制，

当不是正在使用所述手动聚焦功能时，所述显示控制部通过所述第二模式进行控制。

11.根据权利要求8所述的摄像装置，其中，

还包括快门部，该快门部输出摄影准备指令以及摄影指令，

在从所述快门部输出摄影准备指令的期间，所述显示控制部切换到所述第一模式。

12.根据权利要求8所述的摄像装置，其中，

所述摄影透镜具有变焦功能，

当正在使用所述变焦功能时，所述显示控制部通过所述第一模式进行控制，

当不是正在使用所述变焦功能时，所述显示控制部通过所述第二模式进行控制。

13.根据权利要求1到12中的任一项所述的摄像装置，其中，

所述第二显示用图像是分割图像，所述第三显示用图像是由所述第一图像构成的图像、由所述第二图像构成的图像或者与所述第二显示用图像即所述分割图像不同的分割图像。

14.一种图像显示方法，包括以下步骤：

生成步骤，基于具有将通过了摄影透镜中的第一区域以及第二区域的被摄体像进行光瞳分割而分别成像的第一像素组以及第二像素组的摄像元件所输出的图像信号，生成第一显示用图像，并且，根据基于从所述第一像素组以及所述第二像素组输出的第一图像信号以及第二图像信号的第一图像以及第二图像，生成用于对焦确认的第二显示用图像以及辅助对焦确认的第三显示用图像；以及

显示步骤，对于能够交替显示所述第二显示用图像以及所述第三显示用图像的显示部，通过控制所述第二显示用图像以及所述第三显示用图像在所述显示部的交替显示，来显示所述第一显示用图像和所述第二显示用图像，或者显示所述第一显示用图像和所述第三显示用图像，

所述生成步骤生成具有第一显示范围和第二显示范围的所述第二显示用图像以及具有所述第一显示范围和所述第二显示范围的所述第三显示用图像，在所述第一显示范围使用所述第一图像，在所述第二显示范围使用所述第二图像，所述第三显示用图像在所述第一显示范围和所述第二显示范围中的至少一个使用的图像与所述第二显示用图像不同。

15.一种图像显示方法，包括以下步骤：

生成步骤，基于具有将通过了摄影透镜中的第一区域以及第二区域的被摄体像进行光瞳分割而分别成像的第一像素组以及第二像素组的摄像元件所输出的图像信号，根据基于从所述第一像素组以及所述第二像素组输出的第一图像信号以及第二图像信号的第一图像以及第二图像，生成用于对焦确认的第二显示用图像以及辅助对焦确认的第三显示用图像；以及

显示步骤，对于能够交替显示所述第二显示用图像以及所述第三显示用图像的显示部，通过控制所述第二显示用图像以及所述第三显示用图像在所述显示部的交替显示，来显示所述第二显示用图像或者所述第三显示用图像，

所述生成步骤生成具有第一显示范围和第二显示范围的所述第二显示用图像以及具有所述第一显示范围和所述第二显示范围的所述第三显示用图像，在所述第一显示范围使用所述第一图像，在所述第二显示范围使用所述第二图像，所述第三显示用图像在所述第一显示范围和所述第二显示范围中的至少一个使用的图像与所述第二显示用图像不同。