CN101094319A - 摄像装置以及信号处理装置 - Google Patents

Abstract

本发明提供一种摄像装置以及信号处理装置，其中，该摄像装置具备能够对应多种摄像部的通用性高的信号处理装置，该信号处理装置安装到这种摄像装置。所述摄像装置具有：摄像部(10)，其可输出第一摄像信号和第二摄像信号这2种摄像信号；AE评价值运算部(50)，其选择性地处理2种摄像信号，生成AE评价值；AF评价值运算部(60)，其选择性地处理2种摄像信号，生成亮度信号，根据所生成的亮度信号，生成AF评价值；以及图像处理部(30、40)，其对2种摄像信号实施图像处理，得到图像数据。

Description

摄像装置以及信号处理装置

技术领域

本发明涉及摄像装置以及信号处理装置。

背景技术

近年来的安装于摄像装置(例如数字照相机)的摄像部具有各种形式。例如，在专利文献1中记载的摄像装置具有可利用独立的摄像光学系统拍摄运动图像和静止图像的摄像部。在该专利文献1中，独立具备用于拍摄运动图像的摄像光学系统和用于拍摄静止图像的摄像光学系统，经由一方的摄像光学系统得到的摄像信号与经由另一方的摄像光学系统得到的摄像信号处于非同步的关系。而且，这些摄像信号被选择性地输入到摄像信号的处理部，进行信号处理。

并且，在专利文献2中示出了如下结构的摄像部：可从不同的信道同时输出摄像元件的垂直方向上相邻的2个像素的摄像信号，所述摄像元件的摄像面上粘贴有Bayer排列的滤色器。而且，还存在如下结构的摄像部：可从不同的信道同时输出摄像元件的水平方向上相邻的2个像素的摄像信号，所述摄像元件的摄像面上粘贴有Bayer排列的滤色器。在具有这种结构的摄像部中，从摄像元件的各信道输出的摄像信号分别输入到摄像信号的处理部，进行信号处理。

专利文献1：日本特开2003-23555号公报

专利文献2：日本特开昭62-92587号公报

今后，对于安装在摄像装置上的摄像部，考虑根据性能等采用上述的各种结构。但是，数字照相机中的摄像信号用于AE、AF等处理。用于实现这些处理的信号处理装置的结构根据摄像部的结构而有所不同，但优选能够利用同一结构的信号处理装置对应多种摄像部。

发明内容

本发明是鉴于上述情况而进行的，其目的在于，提供一种具备能够对应多种摄像部的通用性高的信号处理装置的摄像装置以及安装在这种摄像装置上的信号处理装置。

为了达到上述目的，本发明的第一方式的摄像装置，其对被摄体进行拍摄来得到图像数据，所述摄像装置的特征在于，其包括：摄像部，其可输出第一摄像信号和第二摄像信号这2种摄像信号；第一运算部，其选择性地对上述2种摄像信号进行处理，生成AE评价值；第二运算部，其选择性地对上述2种摄像信号进行处理，生成亮度信号，根据该生成的亮度信号生成AF评价值；以及图像处理部，其对上述2种摄像信号实施图像处理，得到图像数据。

此外，为了达到上述目的，本发明的第二方式的信号处理装置，其对第一摄像信号和第二摄像信号这2种摄像信号进行处理，所述信号处理装置的特征在于，其具有：第一运算部，其选择性地对上述2种摄像信号进行处理，生成AE评价值；第二运算部，其选择性地对上述2种摄像信号进行处理，生成亮度信号，根据该生成的亮度信号生成AF评价值；以及图像处理部，其对上述2种摄像信号实施图像处理，得到图像数据。

根据本发明，能够提供具备可以对应多种摄像部的通用性高的信号处理装置的摄像装置以及安装在这种摄像装置上的信号处理装置。

附图说明

图1是示出本发明的一实施方式的摄像装置的主要结构的框图。

图2是示出Bayer排列的图。

图3是示出选择部51的详细结构的图。

图4是示出Y生成部61的详细结构的图。

图5是用于说明摄像部10的第一构成例的图。

图6是示出在使用图5的摄像部的情况下，图像处理部30和图像处理部40的设定的图。

图7是示出在使用图5的摄像部的情况下，AE评价值运算部50的设定的图。

图8是示出在使用图5的摄像部的情况下，AF评价值运算部60的设定的图。

图9是示出与图5所示的摄像部10对应地利用图像处理部30和图像处理部40进行图像处理的图。

图10是示出与图5所示的摄像部10对应地在AE评价值运算部50中进行与AE评价值运算相关的处理的时序图。

图11是示出与图5所示的摄像部10对应地在AF评价值运算部60进行与AF评价值运算相关的处理的时序图。

图12是用于说明摄像部10的第二构成例的图。

图13是示出在使用图12的摄像部的情况下，图像处理部30和图像处理部40的设定的图。

图14是示出在使用图12的摄像部的情况下，AE评价值运算部50的设定的图。

图15是示出在使用图12的摄像部的情况下，AF评价值运算部60的设定的图。

图16是示出与图12所示的摄像部10对应地在AE评价值运算部50中进行与AE评价值运算相关的处理的时序图。

图17是示出与图12所示的摄像部10对应地在AF评价值运算部60中进行与AF评价值运算相关的处理的时序图。

图18是用于说明摄像部10的第三结构例的图。

图19是示出与图18所示的摄像部10对应地在AE评价值运算部50中进行与AE评价值运算相关的处理的时序图。

图20是示出与图18所示的摄像部10对应地在AF评价值运算部60中进行与AF评价值运算相关的处理的时序图。

符号说明

10、10a、10b摄像部；20、20a、20b前处理部；30、40图像处理部；31，41低通滤波器(LPF)；32、42尺寸调整(resize)部；33选择部；34、43、53、63地址控制部；35、44、54、64 DMAIF；50AE评价值运算部；51选择部；52、62累积部、60AF评价值运算部；61Y生成部、70数据总线；80存储部；511、512触发器(FF)；513、514、611、615加法部；515、516、517、612、614选择部；613行存储器(line memory)。

具体实施方式

下面，参照附图，说明本发明的实施方式。

图1是示出本发明的一实施方式所涉及的摄像装置的主要结构的框图。图1所示的摄像装置由摄像部10、前处理部20、信号处理装置(图1中由图像处理部30和图像处理部40、AE评价值运算部50、以及AF评价值运算部60构成)、数据总线70、以及存储部80构成。

摄像部10由至少一个摄像光学系统和配置于摄像光学系统后方的至少一个摄像元件构成。摄像光学系统将来自未图示的被摄体的光会聚到摄像元件上。摄像元件是例如CCD方式的摄像元件，接收来自未图示的被摄体的光，输出与所接收的光对应的摄像信号。在该摄像元件的摄像面上粘贴有图2所示的Bayer排列的滤色器。此处，本实施方式中的摄像部10可以使用后述的输出各种方式的摄像信号的、各种结构的摄像部。

前处理部20进行用于去除从摄像部10输出的摄像信号中包含的噪声成分的相关双采样(CDS)处理、摄像信号的放大处理、以及将摄像信号数字化的处理等各种前处理。

图像处理部30和图像处理部40对从前处理部20输出的摄像信号实施预定的图像处理，得到图像数据。此处，在图1中，作为图像处理的例子，示出了进行尺寸调整处理的结构，该尺寸调整处理用于在未图示的显示装置上进行图像显示，但也可以进行尺寸调整处理以外的图像处理。如图1所示，图像处理部30由低通滤波器(LPF)31、尺寸调整部32、选择部33、地址控制部34、以及DMAIF 35构成。并且，图像处理部40由LPF 41、尺寸调整部42、地址控制部43、以及DMAIF 44构成。此处，由选择部33、地址控制部34、DMAIF 35、地址控制部43、以及DMAIF 44构成存储处理部。

为了防止后级的尺寸调整处理引起的折叠失真，LPF 31和LPF 41除去从前处理部20输入的摄像信号的高频成分。尺寸调整部32和尺寸调整部42对从LPF 31和LPF 41输入的摄像信号实施尺寸调整处理，得到图像数据。选择部33与尺寸调整部32和尺寸调整部42连接，选择来自尺寸调整部32和尺寸调整部42中的某一方的图像数据，输出给DMAIF35。地址控制部34和地址控制部43控制将图像数据写入到存储部80时的写入地址。DMAIF 35和DMAIF 44进行图像数据的DMA传送。

作为第一运算部的AE评价值运算部50按照每个颜色累积分割成多个区域的摄像面的各个区域所对应的摄像信号(Bayer排列的情况下，为R、Gr、Gb、B的3种颜色4个成分)，从而求出AE评价值。如图1所示，AE评价值运算部50由选择部51、累积部52、地址控制部53、以及DMAIF 54构成。

选择部51对前处理部20中处理的摄像信号进行处理后输出，通过处理使得该摄像信号能够在累积部52上按照每个颜色进行累积。图3是示出选择部5 1的详细结构的图。如图3所示，选择部51由触发器(FF)511和触发器(FF)512、加法部513和加法部514、选择部515和选择部516、以及选择部517构成。

FF 511和FF 512将来自前处理部20的摄像信号仅保持1像素所对应的量。作为第一加法部的加法部513将来自前处理部20的摄像信号和保持于FF 511的摄像信号相加，输出到选择部515上。作为第二加法部的加法部514将来自前处理部20的摄像信号和保持于FF 512的摄像信号相加，输出到选择部516上。

作为第一选择部的选择部515，根据选择信号sel1的设定，选择来自前处理部20的摄像信号和在加法部513中相加得到的摄像信号中的任意一个摄像信号，输出到选择部517上。此处，当选择信号sel1为“0”时，选择部515选择来自前处理部20的摄像信号，当选择信号sel1为“1”时，选择部515选择来自加法部513的摄像信号。作为第二选择部的选择部516，根据选择信号sel 2的设定，选择来自前处理部20的摄像信号和在加法部514中相加得到的摄像信号中的任意一个摄像信号，输出到选择部517上。此处，当选择信号sel 2为“0”时，选择部516选择来自前处理部20的摄像信号，当选择信号sel 2为“1”时，选择部516选择来自加法部514的摄像信号。作为第三选择部的选择部517，根据选择信号sel 3的设定，选择来自选择部515的摄像信号和来自选择部516的摄像信号中的任意一个摄像信号，输出到累积部52上。此处，当选择信号sel 3为“0”时，选择部517选择来自选择部515的摄像信号，当选择信号sel 3为“1”时，选择部517选择来自选择部516的摄像信号。

作为AE评价值生成部的累积部52按照每个区域和每个颜色累积从选择部51输入的摄像信号，求出AE评价值。此处，累积部52例如构成为能够按照每个区域和每个颜色累积以Bayer排列的顺序输入的摄像信号。地址控制部53控制将AE评价值写入到存储部80时的写入地址。DMAIF 54进行AE评价值的DMA传送。

作为第二运算部的AF评价值运算部60根据前处理部20中处理的摄像信号生成亮度(Y)信号之后(对R、Gr、Gb、B分别乘以系数之后相加)，将分割成多个区域的摄像面的各个区域所对应的Y信号累积，从而求出AF评价值。该AF评价值运算部60由Y生成部61、累积部62、地址控制部63、以及DMAIF 64构成。

Y生成部61根据从前处理部20输出的2种摄像信号生成Y信号，输出到累积部62。图4是示出Y生成部61的详细结构的图。如图4所示，Y生成部61由加法部611、选择部612、行存储器613、选择部614、以及加法部615构成。

作为第三加法部的加法部611将在前处理部20中前处理后的2个像素所对应量的摄像信号相加，输出到选择部612和选择部614上。作为第四选择部的选择部612根据选择信号sel 0的设定，选择来自前处理部20的摄像信号和在加法部611中相加得到的摄像信号的任意一个摄像信号，输出到行存储器613上。此处，当选择信号sel 0为“0”时，选择部612选择来自前处理部20的摄像信号，当选择信号sel 0为“1”时，选择部612选择来自加法部611的摄像信号。

作为保持部的行存储器613对于从选择部612输出的摄像信号仅保持1行所对应的量。作为第五选择部的选择部614，根据选择信号sel 1的设定，选择来自前处理部20的摄像信号(图4的“1”和“4”)、来自行存储器613的摄像信号(图4的“2”)以及来自加法部611的摄像信号(图4的“3”)中的任意一个摄像信号，输出到加法部615上。作为第四加法部的加法部615将从选择部612输出的2个摄像信号相加，生成Y信号，将所生成的Y信号输出到累积部62上。

作为AF评价值生成部的累积部62，按照每个区域累积从Y生成部61输出的Y信号，求出AF评价值。地址控制部63控制将AF评价值写入到存储部80时的写入地址。DMAIF 64进行AF评价值的DMA传送。

此处，在图1所示的结构中，图像处理部30和图像处理部40中的图像处理、AE评价值运算部50中的AE评价值的运算、以及AF评价值运算部60中的AF评价值的运算可以同时进行。

数据总线70是用于分别传送来自图像处理部30和图像处理部40的图像数据、来自AE评价值运算部50的AE评价值、以及来自AF评价值运算部60的AF评价值的传送路。存储部80由例如SDRAM构成，将经由数据总线70传送的图像数据、AE评价值、AF评价值等各种数据临时存储。

下面，说明具有上述结构的摄像装置的动作。

首先，说明图5所示的与输出2种摄像信号的摄像部10对应的动作。图5所示的摄像部10具有信道1(ch1)和信道2(ch2)这两个输出信道。并且，图5的摄像部10的结构如下：在1个水平期间(1H)内，从ch1输出奇数行(Bayer排列的情况下为R、Gr的行)的摄像信号，作为第一摄像信号，从ch2输出偶数行(Bayer排列的情况下为Gb、B的行)的摄像信号，作为第二摄像信号。

在图1所示的摄像装置中，使用图5所示的摄像部10的情况下，不使用图6、图7、图8的虚线所示的部分。因此，使选择部33选择来自尺寸调整部32的图像数据。并且，在AE评价值运算部50内的选择部51中，将选择部515的选择信号sel 1和选择部516的选择信号sel 2均设定为“0”。此外，在AF评价值运算部60内的Y生成部61中，将选择部614的选择信号sel 1设定为“1和4”。

图9是示出与图5所示的摄像部10对应地利用图像处理部30和图像处理部40进行的图像处理的图。如上所述，在1个水平期间内，奇数行的摄像信号根据时钟信号，1个像素1行地从摄像部10的ch1向前处理部20输入1行所对应的量。前处理部20对所输入的摄像信号实施前处理，输出到图像处理部30中。图像处理部30的LPF 31和尺寸调整部32对所输入的摄像信号实施图像处理，得到图像数据。而且，选择部33选择该图像数据，输出到DMAIF 35中。同时，在1个水平期间内，偶数行的摄像信号根据时钟信号，1个像素1行地从摄像部10的ch2向前处理部20输入1行所对应的量。前处理部20对所输入的摄像信号实施前处理，输出到图像处理部40中。图像处理部40的LPF 41和尺寸调整部42对所输入的摄像信号实施图像处理，得到图像数据。并且，将该图像数据输出到DMAIF 44中。

地址控制部34和地址控制部43控制利用DMAIF 35和DMAIF 44写入图像数据时的写入地址。具体地说，控制写入地址，使得来自尺寸调整部32的图像数据和来自尺寸调整部42的图像数据1行1行交替地写入到存储部80。由此，得到对摄像部10中取入的摄像信号实施图像处理的结果。

图10是示出与图5所示的摄像部10对应地在AE评价值运算部50中进行与AE评价值运算相关的处理的时序图。图10中示出垂直同步信号VD、水平同步信号HD、摄像部10的ch1中的输出、摄像部10的ch2中的输出、选择部515的选择信号sel 1、选择部516的选择信号sel 2、选择部517的选择信号sel 3、以及来自选择部517的输出。

若对摄像部10输入了垂直同步信号VD，则开始读出1帧摄像信号。之后，每次输入水平同步信号HD时，奇数行的摄像信号根据时钟信号，1个像素1行地从ch1向前处理部20输入1行所对应的量。前处理部20对所输入的摄像信号实施前处理，输出到选择部51的FF511、加法部513、以及选择部515。此处，选择部515的选择信号sel1设定为“0”，所以选择部515选择来自前处理部20的摄像信号，输出到选择部517中。

另一方面，偶数行的摄像信号根据时钟信号，1个像素1行地从ch2向前处理部20输入1行所对应的量。前处理部20对所输入的摄像信号实施前处理，输出到选择部51的FF 512、加法部514、以及选择部516中。此处，选择部516的选择信号sel 2设定为“0”，所以选择部516选择来自前处理部20的摄像信号，输出到选择部517中。

如图10所示，选择部517的选择信号sel 3在第奇数行的水平期间设为“0”，在第偶数行的水平期间设为“1”。由此，选择部517在第奇数行的水平期间选择来自ch1的摄像信号，输出到累积部52中，在第偶数行的水平期间选择来自ch2的摄像信号，输出到累积部52中。即，选择部517的输出如图10所示，摄像部10所取入的摄像信号以Bayer排列的顺序输入到累积部52中。从而可以在累积部52中运算AE评价值。

另外，运算出AE评价值之后，在地址控制部53的控制下，利用DMAIF 54将AE评价值写入到存储部80中。并且，通过对该AE评价值进行评价，确定摄影时的曝光条件。对于该方法，可以利用按照每个区域评价AF评价值的方法、重点评价画面内的部分区域的方法等公知技术，因此，此处省略详细说明。

图11是示出与图5所示的摄像部10对应地在AF评价值运算部60进行与AF评价值运算相关的处理的时序图。图11中示出垂直同步信号VD、水平同步信号HD、摄像部10的ch1中的输出、摄像部10的ch2中的输出、选择部612的选择信号sel 0、选择部614的选择信号sel 1、以及加法部615的输出。

若对摄像部10输入了垂直同步信号VD，则开始读出1摄像信号。之后，每次输入水平同步信号HD时，奇数行的摄像信号根据时钟信号，1个像素1行地从ch1向前处理部20输入1行所对应的量。前处理部20对所输入的摄像信号实施前处理，输出到Y生成部61的加法部611、选择部612、以及选择部614中。此处，选择部614的选择信号sel 1设定为“1和4”，所以选择部614选择来自前处理部20的摄像信号，输出到加法部615中。

另一方面，偶数行的摄像信号根据时钟信号，1个像素1行地从ch2向前处理部20输入1行所对应的量。前处理部20对所输入的摄像信号实施前处理，输出到Y生成部61的加法部611以及选择部614中。此处，选择部614的选择信号sel 1设定为“1和4”，所以选择部614选择来自前处理部20的摄像信号，输出到加法部615中。

加法部615对所输入的摄像信号的各颜色乘以预定系数之后相加，从而生成Y信号，输出到累积部62中。例如，NTSC形式的情况下，颜色信号和Y信号之间存在如下关系：

Y＝0.3R+0.59G+0.11B。

另外，在上述式子中，G＝(Gr+Gb)/2。这样生成的Y信号在累积部62中按照每个区域累积，运算出AF评价值。

此外，运算出AF评价值之后，在地址控制部63的控制下，利用DMAIF 64将AF评价值写入到存储部80中。并且，根据该AF评价值对图像的对比度进行评价，驱动镜头，从而将图像对比度最高的摄影镜头的位置设为对焦位置。该方法属于公知技术，所以在此省略详细说明。

接着，说明图12所示的与输出2种摄像信号的摄像部10对应的动作。图12所示的摄像部10具有信道1(ch1)和信道2(ch2)这2种输出信道。而且，图12的摄像部10的结构如下：在1个水平期间(1H)内，从ch1输出奇数列像素(Bayer排列的情况下为R或Gb)的摄像信号，作为第一摄像信号，从ch2输出偶数列像素(Bayer排列的情况下为Gr、B)的摄像信号，作为第二摄像信号。另外，图12的情况下，在1个水平期间内仅输入相同颜色的摄像信号。

在图1所示的摄像装置中，使用图12所示的摄像部10的情况下，不使用图13、图14、图15的虚线所示的部分。因此，不使DMAIF 44动作。并且，在AE评价值运算部50内的选择部51中，选择部515的选择信号sel 1和选择部516的选择信号sel 2均设为“1”。另外，在AF评价值运算部60内的Y生成部61中，将选择部612的选择信号sel 0设为“1”，将选择部614的选择信号sel 1设定“2和3”。

说明与图12所示的摄像部10对应地利用图像处理部30和图像处理部40进行的图像处理。如上所述，奇数列的摄像信号根据时钟信号，1个像素1个像素地从摄像部10的ch1输入到前处理部20。前处理部20对所输入的摄像信号实施前处理，输出到图像处理部30中。图像处理部30的LPF 31和尺寸调整部32对所输入的摄像信号实施图像处理，得到图像数据。然后，将该图像数据输出到选择部33中。同时，偶数列的摄像信号根据时钟信号，1个像素1个像素地从ch2输入到前处理部20中。前处理部20对所输入的摄像信号实施前处理，输出到图像处理部40中。图像处理部40的LPF 41和尺寸调整部42对所输入的摄像信号实施图像处理，得到图像数据。然后，将该图像数据输出到选择部33中。

选择部331个像素1个像素交替地选择从尺寸调整部32和尺寸调整部42输入的图像数据，输出到DMAIF 35中。地址控制部34控制利用DMAIF 35写入图像数据时的写入地址。具体地说，按照如下方式进行控制：在通过选择部33选择预定像素(例如1行)所对应量的图像数据的时刻，所选择的图像数据按照所选择的顺序写入到存储部80中。由此，得到对摄像部10所取入的摄像信号实施了图像处理的结果。

图16是示出与图12所示的摄像部10对应地在AE评价值运算部50中进行与AE评价值运算相关的处理的时序图。图16中示出垂直同步信号VD、水平同步信号HD、摄像部10的ch1中的输出、摄像部10的ch2中的输出、加法部513的输出、加法部514的输出、选择部515的选择信号sel 1、选择部516的选择信号sel 2、选择部517的选择信号sel 3、以及来自选择部517的输出。

若对摄像部10输入了垂直同步信号VD，则开始读出1帧摄像信号。之后，每次输入水平同步信号HD时，奇数列的摄像信号根据时钟信号，1个像素1个像素地从ch1输入到前处理部20中。前处理部20对所输入的摄像信号实施前处理，输出到选择部51的FF 511、加法部513、以及选择部515中。加法部513将FF 511中保持的摄像信号和来自前处理部20的摄像信号相加，输出到选择部515中。由此，如图16所示，R彼此以及Gb彼此相加。进而，选择部515的选择信号sel 1设定为“1”，所以选择部515选择来自加法部513的摄像信号，输出到选择部517中。

另一方面，偶数列的摄像信号根据时钟信号，1个像素1个像素地从ch2输入到前处理部20中。前处理部20对所输入的摄像信号实施前处理，输出到选择部51的FF 512、加法部514、以及选择部516中。加法部514将FF 512中保持的摄像信号和来自前处理部20的摄像信号相加，输出到选择部516中。由此，如图16所示，Gr彼此以及B彼此相加。此外，选择部516的选择信号sel 2设定为“1”，所以选择部516选择来自加法部514的摄像信号，输出到选择部517中。

如图16所示，选择部517的选择信号sel 3从第二个时钟之后，每隔时钟，交替设定“0”和“1”。因此，选择部517的输出如图16所示，摄像部10所取入的摄像信号以Bayer排列的顺序输入到累积部52中。由此，可以在累积部52中运算AE评价值。

图17是示出与图12所示的摄像部10对应地在AF评价值运算部60中进行与AF评价值运算相关的处理的时序图。图17中示出垂直同步信号VD、水平同步信号HD、摄像部10的ch1中的输出、摄像部10的ch2中的输出、加法部611的输出、行存储器613的输出、选择部612的选择信号sel 0、选择部614的选择信号sel 1、以及加法部615的输出。

若对摄像部10输入垂直同步信号VD，则开始读出1帧摄像信号。之后，每次输入水平同步信号HD时，奇数列的摄像信号根据时钟信号，1个像素1个像素地从ch1输入到前处理部20中。前处理部20对所输入的摄像信号实施前处理，输出到Y生成部61的加法部611、选择部612、以及选择部614中。

另一方面，偶数列的摄像信号根据时钟信号，1个像素1个像素地从ch2输入到前处理部20中。前处理部20对所输入的摄像信号实施前处理，输出到Y生成部61的加法部611以及选择部614中。

加法部611对来自ch1的摄像信号和来自ch2的摄像信号的各颜色乘以预定系数之后相加，输出到选择部612和选择部614中。此处的系数以上述的用于求出Y信号的系数为基准。即，针对每个时钟对加法部611输入用于求出Y信号的4个成分中的2个成分，所以乘以与该2个成分对应的系数之后相加。此外，选择部612的选择信号sel 0设为“1”，所以选择部612选择来自加法部611的摄像信号，输出到行存储器613中。若对行存储器613输入1行摄像信号，则从行存储器613输出摄像信号。

此处，选择部614的选择信号sel 1设定为“2和3”，所以选择部614选择来自加法部611的摄像信号和来自行存储器613的摄像信号，输出到加法部615中。如图17所示，通过选择来自加法部611的摄像信号和来自行存储器613的摄像信号，从而收齐用于生成Y信号所需的各颜色的摄像信号。

加法部615将所输入的摄像信号相加，从而生成Y信号，输出到累积部62中。这样生成的Y信号在累积部62中按照每个区域累积，运算出AF评价值。

接着，说明图18的与摄像部10对应的动作。图18所示的摄像部10由摄像部10a和摄像部10b这两个摄像部构成，与此同时，前处理部20也由前处理部20a和前处理部20b构成。

摄像部10a和摄像部10b分别由摄像光学系统、配置于摄像光学系统后方的摄像元件构成。此处，摄像部10a和摄像部10b的摄像元件分别以图2所示的Bayer排列输出摄像信号。并且，前处理部20a对摄像部10a所得到的摄像信号进行前处理，前处理部20b对摄像部10b所得到的摄像信号进行前处理。

说明与图18所示的摄像部10对应地利用图像处理部30和图像处理部40进行的图像处理。如上所述，摄像部10a和摄像部10b分别输出Bayer排列的摄像信号，所以仅使图像处理部30和图像处理部40中的任意一方动作，即可进行图像处理。或者，也可以像例如利用图像处理部30进行静止图像摄影用的图像处理、利用图像处理部40进行运动图像摄影用的图像处理那样使两者进行完全不同的图像处理。该情况下，图像处理部30和图像处理部40所得到的图像数据各自独立地存储到存储部80中。

图19是示出与图18所示的摄像部10对应地在AE评价值运算部50中进行与AE评价值运算相关的处理的时序图。如图19所示，摄像部10a和摄像部10分别输出Bayer排列的摄像信号，所以将选择部515的选择信号sel 1以及选择部516的选择信号sel 2均设定为“0”，将选择部517的选择信号sel 3设定为希望使用的信道，从而利用摄像部10a和摄像部10b的希望的一方进行AE评价值运算。

图20是示出与图18所示的摄像部10对应地在AF评价值运算部60中进行与AF评价值运算相关的处理的时序图。如图19所示，摄像部10a和摄像部10b分别输出Bayer排列的摄像信号，所以将选择部612的选择信号sel 0设定为希望使用的信道，将选择部614的选择信号sel 1设定为2、1或4，从而可以利用摄像部10a和摄像部10b的希望的一方进行AF评价值运算。

另外，当然图19和图20所示的选择部的设定也可以应用到输出Bayer排列的摄像信号的摄像部仅有1个的情况。

如上述说明，根据第一实施方式，仅改变图像处理部30、AE评价值运算部50、以及AF评价值运算部60内部的各选择部的设定，就能够进行与结构不同的多种摄像部10对应的图像处理、AE评价值运算、以及AF评价值运算。

以上，根据实施方式对本发明进行了说明，但本发明不限于上述的实施方式，在本发明的要旨的范围内可以进行各种变形和应用。例如，上述的实施方式中，摄像部10可以输出2种不同的摄像信号，但对于可以输出3种以上不同的摄像信号的摄像部，也可以应用上述实施方式的方法。

而且，上述的实施方式中包括各种阶段的发明，通过所公开的多个构成要件的适当组合，可以提取各种发明。例如，从实施方式中示出的全部构成要件中删除几个构成要件，也能够解决上述课题，获得上述效果的情况下，删除该构成要件的结构也能作为发明提取。

Claims (14)

1.一种摄像装置，该摄像装置对被摄体进行拍摄来得到图像数据，所述摄像装置的特征在于，所述摄像装置包括：

摄像部，其可输出第一摄像信号和第二摄像信号这2种摄像信号；

第一运算部，其选择性地对上述2种摄像信号进行处理，生成AE评价值；

第二运算部，其选择性地对上述2种摄像信号进行处理，生成亮度信号，根据该生成的亮度信号生成AF评价值；以及

图像处理部，其对上述2种摄像信号实施图像处理，得到图像数据。

2.根据权利要求1所述的摄像装置，其特征在于，上述第一运算部具备：

第一加法部，其将连续输出的2个像素所对应量的上述第一摄像信号相加；

第二加法部，其将连续输出的2个像素所对应量的上述第二摄像信号相加；

第一选择部，其选择来自上述摄像部的第一摄像信号和来自上述第一加法部的摄像信号中的任意一个摄像信号；

第二选择部，其选择来自上述摄像部的第二摄像信号和来自上述第二加法部的摄像信号中的任意一个摄像信号；

第三选择部，其选择来自上述第一选择部的摄像信号和来自上述第二选择部的摄像信号中的任意一个摄像信号；以及

AE评价值生成部，其根据来自上述第三选择部的摄像信号，生成上述AE评价值。

3.根据权利要求1所述的摄像装置，其特征在于，上述第二运算部具备：

第三加法部，其将来自上述摄像部的第一摄像信号和第二摄像信号相加；

第四选择部，其选择来自上述摄像部的第一摄像信号和来自上述第三加法部的摄像信号中的任意一个摄像信号；

保持部，其保持来自上述第四选择部的摄像信号；

第五选择部，其选择来自上述摄像部的第一摄像信号和第二摄像信号、来自上述保持部的摄像信号以及来自上述第三加法部的摄像信号中的任意一个摄像信号；

第四加法部，其将来自上述第五选择部的2个摄像信号相加，生成亮度信号；以及

AF评价值生成部，其根据来自上述第四加法部的亮度信号，生成上述AF评价值。

4.根据权利要求1所述的摄像装置，其特征在于，所述摄像装置还具有存储部，该存储部存储利用上述图像处理部得到的图像数据，

上述图像处理部具备：

第一图像处理部，其对上述第一摄像信号实施图像处理，得到图像数据；

第二图像处理部，其对上述第二摄像信号实施图像处理，得到图像数据；以及

存储处理部，其选择性地将上述第一图像处理部所得到的图像数据和上述第二图像处理部所得到的图像数据写入到上述存储部中。

5.根据权利要求2所述的摄像装置，其特征在于，在上述摄像部中像素排列成矩阵状，且上述摄像部针对每一个时钟1个像素1个像素地同时输出相邻2行的在垂直方向上相邻的2个像素的摄像信号，分别作为上述第一摄像信号和上述第二摄像信号，

在上述第一运算部中，上述第一选择部选择来自上述摄像部的第一摄像信号，上述第二选择部选择来自上述摄像部的第二摄像信号，上述第三选择部每隔一行交替地选择来自上述第一选择部的第一摄像信号和来自上述第二选择部的第二摄像信号。

6.根据权利要求3所述的摄像装置，其特征在于，在上述摄像部中像素排列成矩阵状，且上述摄像部针对每一个时钟1个像素1个像素地同时输出相邻2行的在垂直方向上相邻的2个像素的摄像信号，分别作为上述第一摄像信号和上述第二摄像信号，

在上述第二运算部中，上述第五选择部选择来自上述摄像部的第一摄像信号和来自上述摄像部的第二摄像信号这两个摄像信号。

7.根据权利要求4所述的摄像装置，其特征在于，在上述摄像部中像素排列成矩阵状，且上述摄像部针对每一个时钟1个像素1个像素地同时输出相邻2行的在垂直方向上相邻的2个像素的摄像信号，分别作为上述第一摄像信号和上述第二摄像信号，

在上述图像处理部中，上述存储处理部将利用上述第一图像处理部和上述第二图像处理部分别得到的图像数据每隔一行交替地写入到上述存储部中。

8.根据权利要求2所述的摄像装置，其特征在于，在上述摄像部中像素排列成矩阵状，且上述摄像部针对每一个时钟1个像素1个像素地同时输出1行上的水平方向相邻的2个像素的摄像信号，分别作为上述第一摄像信号和上述第二摄像信号，

在上述第一运算部中，上述第一选择部选择来自上述第一加法部的摄像信号，上述第二选择部选择来自上述第二加法部的摄像信号，上述第三选择部每隔一个时钟交替地选择来自上述第一选择部的摄像信号和来自上述第二选择部的摄像信号。

9.根据权利要求3所述的摄像装置，其特征在于，在上述摄像部中像素排列成矩阵状，且上述摄像部针对每一个时钟1个像素1个像素地同时输出1行上的水平方向相邻的2个像素的摄像信号，分别作为上述第一摄像信号和上述第二摄像信号，

在上述第二运算部中，上述第四选择部选择来自上述第三加法部的摄像信号，上述第五选择部选择来自上述保持部的摄像信号和来自上述第三加法部的摄像信号这两个摄像信号。

10.根据权利要求4所述的摄像装置，其特征在于，在上述摄像部中像素排列成矩阵状，且上述摄像部针对每一个时钟1个像素1个像素地同时输出1行上的水平方向相邻的2个像素的摄像信号，分别作为上述第一摄像信号和上述第二摄像信号，

在上述图像处理部中，上述存储处理部每隔一个时钟交替地选择利用上述第一图像处理部和上述第二图像处理部分别得到的图像数据，将该图像数据写入到上述存储部中。

11.根据权利要求1所述的摄像装置，其特征在于，上述摄像部具有：

摄像光学系统，其具有第一摄像光学系统和第二摄像光学系统；

第一摄像元件，其接收来自上述第一摄像光学系统的光，输出上述第一摄像信号；以及

第二摄像元件，其接收来自上述第二摄像光学系统的光，输出上述第二摄像信号，

上述图像处理部具有：

第一图像处理部，其对上述第一摄像信号实施第一图像处理；以及

第二图像处理部，其对上述第二摄像信号实施与上述第一图像处理不同的第二图像处理。

12.根据权利要求11所述的摄像装置，其特征在于，上述第一摄像元件和上述第二摄像元件分别是静止图像摄影用的摄像元件和运动图像摄影用的摄像元件，

上述第一图像处理和上述第二图像处理分别是静止图像摄影用的图像处理和运动图像摄影用的图像处理。

13.根据权利要求1～12中的任意一项所述的摄像装置，其特征在于，在所述摄像装置中同时进行上述第一运算部中的AE评价值的生成、上述第二运算部中的AF评价值的生成、以及上述图像处理部中的图像处理。

14.一种信号处理装置，该信号处理装置用于处理第一摄像信号和第二摄像信号这2种摄像信号，所述信号处理装置的特征在于，所述信号处理装置具有：

第一运算部，其选择性地对上述2种摄像信号进行处理，生成AE评价值；

第二运算部，其选择性地对上述2种摄像信号进行处理，生成亮度信号，根据该生成的亮度信号生成AF评价值；以及

图像处理部，其对上述2种摄像信号实施图像处理，得到图像数据。

Images