CN107135380A - 一种彩色成像装置以及获取彩色图像的方法 - Google Patents
一种彩色成像装置以及获取彩色图像的方法 Download PDFInfo
- Publication number
- CN107135380A CN107135380A CN201610112996.4A CN201610112996A CN107135380A CN 107135380 A CN107135380 A CN 107135380A CN 201610112996 A CN201610112996 A CN 201610112996A CN 107135380 A CN107135380 A CN 107135380A
- Authority
- CN
- China
- Prior art keywords
- color
- mrow
- color filer
- filter plate
- filer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/125—Colour sequential image capture, e.g. using a colour wheel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
本发明实施例提供一种彩色成像装置以及获取彩色图像的方法，用以解决对彩色滤波片加工难度较大的问题。彩色成像装置包括在光路传输路径上依次排列的主透镜，微透镜阵列，以及成像传感器；装置还包括设置于主透镜的孔径光阑处的第一彩色滤波片；主透镜，第一彩色滤波片，微透镜阵列，以及成像传感器平行且共轴；成像传感器位于微透镜阵列的焦点处；其中，光从一个微透镜到达成像传感器时覆盖成像传感器的M*N的像素阵列；第一彩色滤波片包括至少一个能够过滤出至少一个颜色的滤波片；第一彩色滤波片在垂直于轴线的任一方向上的尺寸不小于主透镜在对应方向上的尺寸。
Description
技术领域
本发明实施例涉及图像处理技术领域，尤其涉及一种彩色成像装置以及获取彩色图像的方法。
背景技术
彩色成像技术目前已经普遍应用于数码相机、手机等设备。彩色成像传感器中包括只能捕获灰度图像的成像传感器。成像传感器通过将入射光信号转换为电信号，可以记录下光强信息，由于成像传感器捕获的只是灰度图像，无法感受颜色。因此为了获得彩色照片，技术人员通过在成像传感器上覆盖彩色滤波片来区分不同的色彩。因此，如图1所示，传统的彩色成像传感器包括微透镜阵列、彩色滤波片以及成像传感器，并且三者是制作在一起的。
目前普遍采用的彩色滤波片为红(英文：red，简称R)绿(英文：Green，简称：G)蓝(英文：blue，简称：B)滤波片，通过多个拜耳(Bayer)阵列实现。每个Bayer阵列呈2*2矩阵排列，包括4个子单元，4个子单元分别为2个绿色滤波片，1个红色滤波片和1个蓝色滤波片。每一个颜色的滤波片对应成像传感器上的一个像素，从而使的该像素能够对相应的颜色感光，这样每个像素记录红绿蓝三色中的一种颜色信息，再通过色彩空间插值法进行处理，即可获得彩色图像。
由于在彩色成像传感器制作时，彩色滤波片中一个子单元大小与成像传感器的一个像素尺寸相当，需要将彩色滤波片的每个子单元精确对应到成像传感器的每一个像素，因而彩色滤波片的结构精细，彩色滤波片的配准也存在较大的难度，加工过程比较复杂。彩色成像传感器的成像面积越大，像素尺寸越小，加工的难度就越大。
发明内容
本发明实施例提供一种彩色成像装置以及获取彩色图像的方法，用以解决现有技术中存在的对彩色滤波片加工难度大的问题。
第一方面，本发明实施例提供了一种彩色成像装置，包括在光路传输路径上依次排列的主透镜，微透镜阵列，以及成像传感器；所述主透镜包括至少两个共轴且位置相对固定的单透镜；所述装置还包括设置于所述主透镜的孔径光阑处的第一彩色滤波片；所述主透镜，所述第一彩色滤波片，所述微透镜阵列，以及所述成像传感器平行且共轴；所述微透镜阵列包括l个微透镜；所述成像传感器位于所述微透镜阵列的焦平面；其中，所述成像传感器包括l*M*N个像素，光从任意一个微透镜到达所述成像传感器时覆盖所述成像传感器的M*N的像素阵列，且光从所述l个微透镜到达所述成像传感器时覆盖所述成像传感器包括的l*M*N个像素；其中，l、M和N均为正整数；所述第一彩色滤波片包括至少一个能够过滤出至少一种颜色的滤波片；所述第一彩色滤波片在垂直于轴线的任一方向上的尺寸不小于所述主透镜在对应方向上的尺寸。
彩色滤波片设置于主透镜的孔径光阑处，微透镜阵列位于主透镜的像平面，场景发出的光线经过主透镜和彩色滤波片后，成像在微透镜阵列上。经过微透镜阵列后，不同颜色的光线到达成像传感器的不同像素上，从而能够得到彩色图像。本发明实施例中彩色滤波片的尺寸在垂直于轴线的任一方向上不小于所述主透镜在对应方向上的尺寸，远大于直接加工在成像传感器表面的彩色滤波片中每个单元的尺寸，因此大大降低了彩色滤波片的加工难度。并且彩色滤波片不再需要加工到成像传感器上。现有技术中彩色滤波片与成像传感器同时加工产生的，一旦修改彩色滤波片就连带成像传感器一起修改，本发明实施例中彩色滤波片并不要加工到成像传感器上，因此在修改时，可以单独修改。
在一种可能的设计中，所述成像传感器中各个像素与位于所述成像传感器的中心的像素的距离disn为：
ni＝1,2,3,…,Npixelx/2,nj＝1,2,3,…,Npixely/2；
其中，ni表示在水平方向上距离所述成像传感器的中心的像素的第ni个像素；nj表示在垂直方向上距离所述成像传感器的中心的像素的第nj个像素；disn表示所述第n个像素与所述成像传感器的中心的像素的距离，n＝(ni，nj)；Npixelx表示所述成像传感器中的水平方向上的像素个数；Npixely表示所述成像传感器中的垂直方向上的像素个数；D表示所述主透镜的直径；d表示所述微透镜的直径；F表示所述主透镜的焦距；f表示所述微透镜的焦距。
其中，光通过位于位于微透镜阵列中心的微透镜到达成像传感器时，刚好覆盖M*N个像素，随着微透镜的位置距离微透镜阵列中心的位置偏离越远，光经过微透镜会发生倾斜，尤其是在外围时，如果成像传感器的像素间距不变，从处于外围的某个微透镜透射的光会照射到该微透镜对应的像素之外的像素上，引起像素间的串扰。为了防止像素之间出现串扰，可以对所述成像传感器中的各个像素之间的距离进行上述设计。
在一种可能的设计中，所述第一彩色滤波片包括以阵列排列的M*N个子单元；其中，一个子单元对应一种颜色的单色滤波片。
这里所述的单色滤波片是以镀膜实现的滤波片，颜色不能更改。
在一种可能的设计中，所述第一彩色滤波片为红绿蓝RGB滤波片，所述红绿蓝RGB滤波片包括的M*N个子单元分别对应绿色滤波片、红色滤波片以及蓝色滤波片，其中，M和N均为大于等于2的整数。
在一种可能的设计中，所述红绿蓝RGB滤波片呈Bayer阵列分布。能够避免多种颜色带来的像素间的串扰。
在一种可能的设计中，所述第一彩色滤波片包括以阵列排列的M*N个法珀腔结构的滤波片，且法珀腔结构的滤波片的腔体内填充为液晶或者填充为电光晶体，用于在施加于法珀腔结构的滤波片的腔体的两侧电压变化时，变化所过滤出的颜色。
通过上述设计，将第一彩色滤波片采用法珀腔结构设计，使得第一彩色滤波片包括的滤波片所过滤出的颜色可以变化，第一彩色滤波片的透射光谱发生变化，从而能够通过改变第一彩色滤波片所过滤出的颜色获得不同波段的场景信息，实现多光谱成像。
在一种可能的设计中，所述装置还包括第一接收模块、第一控制模块、第一处理模块以及第一合成模块；
所述第一接收模块，用于获取彩色成像的第一图像采集指令，所述第一图像采集指令携带采集模式；
所述第一控制模块，用于识别所述采集模式为高光谱成像模式时，向所述第一处理模块发出第一调节指令，所述第一调节指令用于指示所述第一处理模块更改L次所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色；所述L等于所述法珀腔结构的滤波片所能过滤出的颜色数量；
所述第一处理模块，用于在接收到所述调节指令后，调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，使用所述第一控制模块调节后所述第一彩色滤波片获取一帧图像，再次调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，直到达到所述法珀腔结构的滤波片所能过滤出的颜色数量，从而获取L帧图像；其中，每次调节后的M*N个法珀腔结构的滤波片所过滤出的颜色不相同，任意两次调节后的所述第一彩色滤波片中各M*N个法珀腔结构的滤波片所过滤出的颜色均不相同；
第一合成模块，用于对所述第一处理模块处理得到所述L帧图像进行融合处理得到彩色图像。
通过上述设计能够实现多光谱成像。
在一种可能的设计中，所述第一控制模块，还用于：
在识别所述采集模式为红绿蓝RGB成像模式时，向所述第一处理模块发出第二调节指令，所述第二调节指令用于指示所述第一处理模块更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，且调节后的M*N个法珀腔结构的滤波片所过滤出的颜色仅包括红色、绿色和蓝色；
所述第一处理模块，还用于在接收到所述第一控制模块发送的调节指令后，调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，且调节后的M*N个法珀腔结构的滤波片所过滤出的颜色仅包括红色、绿色和蓝色；并使用所述第一彩色滤波片获取彩色图像。
通过上述设计，能够在多光谱成像以及普通成像中自由切换。
在一种可能的设计中，所述第一彩色滤波片设置于轮转结构，所述轮转结构还包括至少一个第二彩色滤波片以及旋转轴，用于通过旋转所述轮转结构的旋转轴，调节所述第一彩色滤波片和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜，微透镜阵列，以及成像传感器共轴；
所述至少一个第二彩色滤波片与所述第一彩色滤波片包括的单色滤波片数量和排列方式相同，所述第一彩色滤波片和所述至少一个第二彩色滤波片中任意两个彩色滤波片中不包括颜色相同的单色滤波片。
通过上述轮转结构设计，能够实现多光谱成像。
在一种可能的设计中，所述装置还包括第二接收模块，第二控制模块、第二处理模块以及第二合成模块；
所述第二接收模块，用于获取彩色成像的第二图像采集指令，所述第二图像采集指令携带采集模式；
所述第二控制模块，用于在识别所述采集模式为高光谱成像模式时，旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，并向所述第二处理模块发送用于拍摄一帧图像的拍摄指令；
所述第二处理模块，用于在接收到所述拍摄指令后，使用所述一个彩色滤波片获取一帧图像，并向所述第二处理模块发送拍摄完成一帧图像的完成指令；
所述第二控制模块，还用于在接收到所述第二处理模块发送的完成指令时，再次旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的另一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，并再次向所述第二处理模块发送用于拍摄一帧图像的拍摄指令；在确定所述轮转结构包括的L个彩色滤波片均被使用时，向所述第二合成模块发送合成指令，所述合成指令用于指示所述第二合成模块对所述第二处理模块拍摄得到的L帧图像进行融合处理，所述L为大于1的正整数，从而获取L帧图像；
所述第二合成模块在接收到所述第二控制模块发送的合成指示后，对所述L帧图像进行融合处理得到彩色图像。
通过上述轮转结构的设计，能够实现多光谱彩色成像。
在一种可能的设计中，所述第一彩色滤波片为RGB滤波片；
所述第二控制模块，还用于在识别所述采集模式为RGB成像模式时，旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，并向所述第二处理模块发送用于拍摄一帧图像的拍摄指令；
所述第二处理模块，用于在接收到所述拍摄指令后，使用所述第一彩色滤波片获取彩色图像。
通过上述设计，可以在需要拍摄普通彩色图像以及多光谱彩色图像中切换。
第二方面，本发明实施例还提供了一种通过图像采集设备获取彩色图像的方法，其特征在于，所述图像采集设备包括第一方面所述彩色成像装置，且彩色成像装置中的第一彩色滤波片为法珀腔结构，所述方法包括：
所述图像采集设备接收获取彩色成像的第一图像采集指令，所述第一图像采集指令中携带的采集模式为高光谱成像模式；
所述图像采集设备通过旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴；并使用所述一个彩色滤波片获取一帧图像；再次旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的另一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，直到所述轮转结构包括的L个彩色滤波片均被使用，所述L为大于1的正整数，从而获取L帧图像；
所述图像采集设备对所述L帧图像进行融合处理得到彩色图像。
本发明实施例中彩色滤波片的尺寸在垂直于轴线的任一方向上不小于所述主透镜在对应方向上的尺寸，远大于直接加工在成像传感器表面的彩色滤波片中每个单元的尺寸，因此大大降低了彩色滤波片的加工难度。并且彩色滤波片不再需要加工到成像传感器上。现有技术中彩色滤波片与成像传感器同时加工产生的，一旦修改彩色滤波片就连带成像传感器一起修改，本发明实施例中彩色滤波片并不要加工到成像传感器上，因此在修改时，可以单独修改。并且同过上述设计能够实现获取多光谱彩色图像。
在一种可能的设计中，当所述第一彩色滤波片为RGB滤波片时，所述方法还包括：
所述图像采集设备接收获取彩色成像的第二图像采集指令，所述第二图像采集指令中携带的采集模式为红绿蓝RGB成像模式；
所述图像采集设备调节所述第一彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，并使用所述第一彩色滤波片获得彩色图像。
第三方面，本发明实施例提供了一种通过图像采集设备获取彩色图像的方法，其特征在于，所述图像采集设备包括第一方面的彩色成像装置，所述彩色成像装置包括的第一彩色滤波片设置于轮转结构，所述方法包括：
所述图像采集设备接收获取彩色成像的第一图像采集指令，所述第一图像采集指令中携带的采集模式为高光谱成像模式；
所述图像采集设备调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，并使用所述第一彩色滤波片获取一帧图像，再次调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，直到达到所述法珀腔结构的滤波片所能过滤出的颜色数量，从而获取L帧图像；其中，每次调节后的M*N个法珀腔结构的滤波片所过滤出的颜色不相同，任意两次调节后的所述第一彩色滤波片中各M*N个法珀腔结构的滤波片所过滤出的颜色均不相同；所述L等于所述法珀腔结构的滤波片所能过滤出的颜色数量；
所述图像采集设备对所述L帧图像进行融合处理得到彩色图像。
本发明实施例中彩色滤波片的尺寸在垂直于轴线的任一方向上不小于所述主透镜在对应方向上的尺寸，远大于直接加工在成像传感器表面的彩色滤波片中每个单元的尺寸，因此大大降低了彩色滤波片的加工难度。并且彩色滤波片不再需要加工到成像传感器上。现有技术中彩色滤波片与成像传感器同时加工产生的，一旦修改彩色滤波片就连带成像传感器一起修改，本发明实施例中彩色滤波片并不要加工到成像传感器上，因此在修改时，可以单独修改。并且同过上述设计能够实现获取多光谱彩色图像。
在一种可能的设计中，所述方法还包括：
所述图像采集设备接收获取彩色成像的第二图像采集指令，所述第二图像采集指令中携带的采集模式为红绿蓝RGB成像模式；
所述图像采集设备调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，且调节后的M*N个法珀腔结构的滤波片所过滤出的颜色仅包括红色、绿色和蓝色；
所述图像采集设备使用所述第一彩色滤波片获取彩色图像。
通过上述实现方式，可以在需要拍摄普通彩色图像以及多光谱彩色图像中切换。
附图说明
图1为现有技术提供的彩色传感器结构示意图；
图2为本发明实施例提供的一种彩色成像装置示意图；
图3为本发明实施例提供的另一种彩色成像装置示意图；
图4为本发明实施例提供的微透镜与成像传感器对应关系剖面示意图；
图5为本发明实施例提供的微透镜与成像传感器对应关系主面示意图；
图6为本发明实施例提供的光线偏移示意图；
图7为本发明实施例提供的第一彩色滤波片结构示意图；
图8A为本发明实施例提供的光路示意图；
图8B为本发明实施例提供的成像传感器记录的颜色信息示意图；
图9为本发明实施例提供的液晶法珀腔结构示意图；
图10为本发明实施例提供的电光晶体法珀腔结构示意图；
图11为本发明实施例提供的又一种彩色成像装置示意图；
图12为本发明实施例提供的轮转结构示意图；
图13为本发明实施例提供的轮转结构中彩色滤波片颜色示意图；
图14为本发明实施例提供的再一种彩色成像装置示意图；
图15为本发明实施例提供的一种通过图像采集设备获取彩色图像的方法流程图；
图16为本发明实施例提供的另一种通过图像采集设备获取彩色图像的方法流程图；
图17为本发明实施例提供的又一种通过图像采集设备获取彩色图像的方法流程图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
本发明实施例提供一种彩色成像装置以及获取彩色图像的方法，用以解决现有技术中存在的对彩色滤波片加工难度大问题。本发明实施例具体应用场景可以与传统的CMOS/CCD彩色成像传感器相同，具体可以是相机的镜头或者手机摄像头等等需要成像的设备上，来获取彩色图像。其中，方法和装置是基于同一发明构思的，由于方法及装置解决问题的原理相似，因此装置与方法的实施可以相互参见，重复之处不再赘述。
需要说明的是，本发明实施例的说明书和权利要求书及附图中涉及的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
参见图2，为本发明实施例提供的一种彩色成像装置示意图。彩色成像装置中包括在光路传输路径上依次排列的主透镜，微透镜阵列，以及成像传感器；该彩色成像装置还包括设置于所述主透镜的孔径光阑处的彩色滤波片；所述主透镜，所述彩色滤波片，所述微透镜阵列，以及所述成像传感器平行且共轴；所述微透镜阵列包括l个微透镜；l个微透镜的焦距相同；所述成像传感器位于所述微透镜阵列的焦平面；所述成像传感器包括L*M*N个像素，光从任意一个微透镜到达所述成像传感器时覆盖所述成像传感器的M*N的像素阵列，且光从所述L个微透镜到达所述成像传感器时覆盖所述成像传感器包括的L*M*N个像素，即成像传感器器包括L个M*N的像素阵列，每个M*N的像素阵列对应一个微透镜，L个M*N的像素阵列对应L个微透镜。其中，L、M和N均为正整数。
所述彩色滤波片包括至少一个能够过滤出至少一种颜色的滤波片；所述彩色滤波片在垂直于轴线的任一方向上的尺寸不小于所述主透镜在对应方向上的尺寸。
彩色滤波片设置于主透镜的孔径光阑处，微透镜阵列位于主透镜的像平面，场景发出的光线经过主透镜和彩色滤波片后，成像在微透镜阵列上。经过微透镜阵列后，不同颜色的光线到达成像传感器的不同像素上，从而能够得到彩色图像。本发明实施例中彩色滤波片的尺寸在垂直于轴线的任一方向上不小于所述主透镜在对应方向上的尺寸，远大于直接加工在成像传感器表面的彩色滤波片中每个单元的尺寸，因此大大降低了彩色滤波片的加工难度。并且彩色滤波片不再需要加工到成像传感器上。现有技术中彩色滤波片与成像传感器同时加工产生的，一旦修改彩色滤波片就连带成像传感器一起修改，本发明实施例中彩色滤波片并不要加工到成像传感器上，因此在修改时，可以单独修改。
参见图3，为本发明实施例提供的一种彩色成像装置。图3以主透镜包括两个单透镜为例。彩色成像装置中包括在光路传输路径上依次排列的主透镜201，微透镜阵列202，以及成像传感器203；所述主透镜201包括第一单透镜201a和第二单透镜201b。当然主透镜可以包括多个单透镜，本发明实施例对此不作具体限定。所述装置还包括设置于所述主透镜的孔径光阑处的第一彩色滤波片204。
所述主透镜201中的两个单透镜，所述第一彩色滤波片204，所述微透镜阵列202，以及所述成像传感器203平行且共轴。
所述微透镜阵列202包括l个微透镜；所述微透镜阵列202可以与所述成像传感器203固定在一起；其中，光从任意一个微透镜到达所述成像传感器时覆盖所述成像传感器的M*N的像素阵列，光从所述l个微透镜到达所述成像传感器时覆盖所述成像传感器包括的l*M*N个像素，即成像传感器器包括l个M*N的像素阵列，每个M*N的像素阵列对应一个微透镜，L个M*N的像素阵列对应l个微透镜。其中，l、M和N均为正整数。
如图4所示的剖面图以及图5所示的主面图，以M＝N＝2为例，一个微透镜对应于所述成像传感器203的4个像素形成的2*2像素阵列，图4中的4个正方形表示成像传感器203的4个像素，圆形表示一个微透镜。
所述第一彩色滤波片204包括至少一个滤波片，该至少一个滤波片至少能过滤出至少一种颜色。即滤波片可以是单色滤波片，仅能过滤出一种颜色，还可以是不同条件下能透射不同颜色的光的滤波片。
所述第一彩色滤波片204在垂直于轴线的任一方向上的尺寸不小于所述主透镜201在对应方向上的尺寸。
其中，所述第一彩色滤波片204在垂直于轴线的任一方向上的尺寸不小于所述主透镜201在对应方向上的尺寸，也就是说在垂直于轴线的方向上彩色滤波片204能够完全覆盖主透镜201。例如，在垂直于轴线的方向上第一彩色滤波片204为圆形结构，在垂直于轴线的方向上主透镜201也为圆形结构，则第一彩色滤波片204的直径不小于主透镜201的直径。这里所述的主透镜包括多个单透镜，且主透镜的尺寸以最大的单透镜为准。
其中，光通过位于位于微透镜阵列中心的微透镜到达成像传感器时，刚好覆盖M*N个像素，随着微透镜的位置距离微透镜阵列中心的位置偏离越远，光经过微透镜会发生倾斜，尤其是在外围时，如果成像传感器的像素间距不变，从处于外围的某个微透镜透射的光会照射到该微透镜对应的像素之外的像素上，引起像素间的串扰。
为了防止像素之间出现串扰，可以对所述成像传感器中的各个像素之间的距离进行设置。具体设置为：所述成像传感器中各个像素与位于所述成像传感器的中心的像素的距离disn为：
ni＝1,2,3,…,Npixelx/2,nj＝1,2,3,…,Npixely/2；
其中，ni表示在水平方向上距离所述成像传感器的中心的像素的第ni个像素；nj表示在垂直方向上距离所述成像传感器的中心的像素的第nj个像素；disn表示所述第n个像素与所述成像传感器的中心的像素的距离，n＝(ni,nj)；Npixelx表示所述成像传感器中的水平方向上的像素个数；Npixely表示所述成像传感器中的垂直方向上的像素个数；D表示所述主透镜的直径；d表示所述微透镜的直径；F表示所述主透镜的焦距；f表示所述微透镜的焦距。
上述公式通过如下方式计算得到：
为解决光线经过微透镜发生偏移而产生的串扰，本发明将对成像传感器上的像素间距进行设计。具体来说，设中心像素的位置为(0，0)，第(ni，nj)个像素的位置为像素间隔的增大同时可以减小由衍射效应造成的同一个子图像内不同像素间的串扰。
根据几何关系可以求出在以图像中心为中心的坐标轴上，外围光线经过最外侧的微透镜后的偏移量：
其中，P为水平/垂直方向上微透镜的个数；D为主透镜的直径；d为微透镜的直径；F表示所述主透镜的焦距；f表示所述微透镜的焦距；ΔhP为主透镜外围光线经过最外侧微透镜后的偏移量。
每个微透镜相应的外围光线偏移量为，如图6所示：
表示每个微透镜在水平方向上相应的外围光线偏移量；表示每个微透镜在垂直方向上相应的外围光线偏移量。从而能够确定所述成像传感器中各个像素与位于所述成像传感器的中心的像素的距离disn为：
ni＝1,2,3,…,Npixelx/2,nj＝1,2,3,…,Npixely/2。
可选地，第一彩色滤波片204包括以阵列排列的M*N个子单元；其中，一个子单元对应一种颜色的单色滤波片。任意两个单色滤波片的颜色可以不同，也可以相同，并且可以包括多个颜色，在M*N个子单元中任意排列，本发明对此不作具体限定。也就说M*N个单色滤波片可以包括M*N个颜色。这里所述的单色滤波片是以镀膜实现的滤波片，颜色不能更改。
这里第一彩色滤波片204包括的子单元数与一个微透镜对应的像素数相同。当彩色滤波片204中不仅仅包括RGB三种颜色时，能够获得多光谱成像，得到不同波段的场景信息。
可选地，第一彩色滤波片204可以是RGB滤波片，所述RGB滤波片包括的M*N个子单元分别对应绿色滤波片、红色滤波片以及蓝色滤波片能够记录三种颜色信息。绿色滤波片、红色滤波片以及蓝色滤波片在M*N个子单元排列方式本发明实施例对此不作具体限定，具体可以以Bayer阵列的排列方式来排列。
例如，如图7所示，M＝N＝2，第一彩色滤波片204为2*2的bayer阵列结构，能够记录三种颜色信息。即彩色滤波片204包括4个子单元，两个子单元对应绿色，一个子单元对应红色，一个子单元对应蓝色。
第一彩色滤波片204设置于主透镜201的孔径光阑处，微透镜位于主透镜201的像平面，场景发出的光线经过主透镜201和第一彩色滤波片204后，正好能够成像在微透镜阵列上。经过微透镜阵列后，不同颜色的光线分开，到达成像传感器203的不同像素上，如图8A所示。成像传感器203记录的颜色信息如图8B所示，由于成像传感器203记录的初始图像只包含光强信息，初始图像仅是灰度图，颜色信息需要通过像素位置来辨识。
在后续根据成像传感器203上携带的颜色信息处理得到彩色图像时，可以通过如下方式实现：
可以在每个微透镜后对应的4个携带不同颜色信息的像素融合为一个像素，并且该4个像素位于一个Bayer阵列中。从而所呈现的图像能够记录原始的完整的颜色和强度信息。
可选地，本发明实施例还可以对彩色滤波片204的结构进行设计，使得第一彩色滤波片204包括的滤波片所过滤出的颜色可以变化，第一彩色滤波片204的透射光谱发生变化，从而能够通过改变第一彩色滤波片204所过滤出的颜色获得不同波段的场景信息，实现多光谱成像。具体的，所述第一彩色滤波片204包括以阵列排列的M*N个法珀腔结构的滤波片，且法珀腔结构的滤波片的腔体内填充为液晶或者填充为电光晶体，用于在施加于法珀腔结构的滤波片的腔体的两侧电压变化时，变化所过滤出的颜色。
法珀腔是由两块平行或者呈较小楔角的两块玻璃板组成，两块玻璃板相对的内表面具有高反射率。当入射光的频率满足共振条件时，其透射频谱会出现很高的峰值，对应着很高的透射率。两个反射镜间距的变化改变透射光谱。两个反射镜为内表面具有高反射率的两块玻璃板的内表面的距离。
光谱透射率可以表示为：
其中FF表示法珀腔的精细度，I表示透射光的光强度，I0表示入射光的光强度，m表示介质的折射率，dd表示两个反射镜的间距，θ表示光线的入射角，λ表示波长。本发明实施例中可以通过改变介质的折射率对法珀腔的光谱透射率进行控制。介质的折射率的改变可以通过具有电光效应的材料来实现，如液晶和电光晶体，该材料的折射率会在外加电场的作用下发生变化。
如图9所示，为液晶法珀腔结构示意图。液晶法珀腔也就是法珀腔的腔体内填充为液晶。法珀腔中由外向内依次分别为：玻璃板601、导电电极602、液晶分子导向层603、液晶604。液晶为法珀腔的最内层。其中，玻璃板601的内表面具有高反射率，从而对称的两块玻璃板形成了反射镜。通过导电电极602可以向整个法珀腔施加电压。在法珀腔内部填充液晶。液晶具有光学各向异性，沿分子长轴方向上的折射率不同于短轴方向上的折射率。在导电电极602上施加电压后，在两块导电电极之间形成电场，在电场作用下，液晶分子会发生偏转，从而折射率会发生相应的变化。
如图10所示，为电光晶体法珀腔结构示意图。电光晶体法珀腔也就是法珀腔的腔体内填充为电光晶体。法珀腔中由外向内依次分别为：玻璃板701、导电电极702、电光晶体703。电光晶体是具有电光效应的晶体材料。随着加载到电光晶体上的电压的变化，电光晶体的折射率发生变化。电光晶体材料可以为氛化磷二氢钾(DKDP)、磷酸二氢铵(ADP)等等。
当第一彩色滤波片204为一个法珀腔滤波片时，在实现多光谱成像时，拍摄多帧图像，每拍摄一帧更改一次滤波片。即更改滤波片的法珀腔的腔体电压。然后拍摄L帧图像。L为该法珀腔滤波片的能够实现的总的光谱通道数，即所述法珀腔滤波片所能过滤出的颜色数量。对L帧图像进行融合处理从而得到多光谱彩色图像。
第一彩色滤波片204包括多个法珀腔结构的滤波片。调节各个法珀腔的腔体电压，使得任意两个法珀腔的光谱透射率不相同，从而不需要多帧拍摄既能够获得多光谱彩色图像。当然也可以进行多帧拍摄使得得到的多光谱彩色图像空间分辨率更高。
在第一彩色滤波片204为法珀腔结构的滤波片时，如图11所示，所述装置还包括第一接收模块801、第一控制模块802、第一处理模块803以及第一合成模块804；
所述第一接收模块801，用于获取彩色成像的第一图像采集指令，所述第一图像采集指令携带采集模式。
所述第一控制模块802，用于识别所述采集模式为高光谱成像模式时，向所述第一处理模块803发出第一调节指令，所述第一调节指令用于指示所述第一处理模块803更改L次所述第一彩色滤波片204包括的M*N个法珀腔结构的滤波片所过滤出的颜色；所述L等于所述法珀腔结构的滤波片所能过滤出的颜色数量。
所述第一处理模块803，用于在接收到所述第一控制模块802发送的所述调节指令后，调节电压更改所述第一彩色滤波片204包括的M*N个法珀腔结构的滤波片所过滤出的颜色，使用所述第一控制模块802调节后所述第一彩色滤波片204获取一帧图像，再次调节电压更改所述第一彩色滤波片204包括的M*N个法珀腔结构的滤波片所过滤出的颜色，直到达到所述法珀腔结构的滤波片所能过滤出的颜色数量，从而获取L帧图像；其中，每次调节后的M*N个法珀腔结构的滤波片所过滤出的颜色不相同，任意两次调节后的所述第一彩色滤波片204中各M*N个法珀腔结构的滤波片所过滤出的颜色均不相同。
所述第一合成模块804，用于对所述第一处理模块803处理得到所述L帧图像进行融合处理得到彩色图像。
可选地，所述第一控制模块802，还可以用于在识别所述采集模式为红绿蓝RGB成像模式时，向所述第一处理模块803发出第二调节指令，所述第二调节指令用于指示所述第一处理模块803更改所述第一彩色滤波片204包括的M*N个法珀腔结构的滤波片所过滤出的颜色，且调节后的M*N个法珀腔结构的滤波片所过滤出的颜色仅包括红色、绿色和蓝色；
所述第一处理模块803，还用于在接收到所述第一控制模块802发送的调节指令后，调节电压更改所述第一彩色滤波片204包括的M*N个法珀腔结构的滤波片所过滤出的颜色，且调节后的M*N个法珀腔结构的滤波片所过滤出的颜色仅包括红色、绿色和蓝色；并使用所述第一彩色滤波片204获取彩色图像。
可选地，当第一彩色滤波片204包括多个单色滤波片时，即单色滤波片通过镀膜实现，不能更改颜色，所述第一彩色滤波片204还可以设置于轮转结构205，所述轮转结构205还包括至少一个第二彩色滤波片，用于通过旋转所述轮转结构205调节所述第一彩色滤波片204和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜201，微透镜阵列202，以及成像传感器203共轴。
所述至少一个第二彩色滤波片与所述第一彩色滤波片204包括的单色滤波片数量和排列方式相同，所述第一彩色滤波片204和所述至少一个第二彩色滤波片中任意两个彩色滤波片中不包括颜色相同的单色滤波片。
例如：如图12所示，轮转结构205中包括4个彩色滤波片。每个第二彩色滤波片可以包括4个子单元，每个子单元对应一个颜色的单色滤波片。可以包括4*4种颜色，如图13所示，图13中每个数字表示一种颜色。当然还可以设置4个第二彩色滤波片中包括一个RGB滤波片。可以在不需要多光谱成像时，采用RGB滤波片获得彩色图像。
通过上述实现方式，可以在需要拍摄普通彩色图像以及多光谱彩色图像中切换。
当然，轮转结构205中包括的4个彩色滤波片还可以是法珀腔结构的滤波片。可以调节每个法珀腔的光谱透射率或调节轮转结构205拍摄多帧图像，以获取更多的光谱图像信息。
基于上述轮转结构205，如图14所示，所述装置还可以包括第二接收模块901，第二控制模块902、第二处理模块903以及第二合成模块904；
所述第二接收模块901，用于获取彩色成像的第二图像采集指令，所述第二图像采集指令携带采集模式；
所述第二控制模块902，用于在识别所述采集模式为高光谱成像模式时，旋转所述轮转结构205的旋转轴，调节所述轮转结构205包括的所述第一彩色滤波片204和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜201、微透镜阵列202、以及成像传感器203共轴，并向所述第二处理模块903发送用于拍摄一帧图像的拍摄指令；
所述第二处理模块903，用于在接收到所述拍摄指令后，使用所述一个彩色滤波片获取一帧图像，并向所述第二处理模块903发送拍摄完成一帧图像的完成指令；
所述第二控制模块902，还用于在接收到所述第二处理模块903发送的完成指令时，再次旋转所述轮转结构205的旋转轴，调节所述轮转结构205包括的所述第一彩色滤波片204和所述至少一个第二彩色滤波片中的另一个彩色滤波片与所述主透镜201、微透镜阵列202、以及成像传感器203共轴，并再次向所述第二处理模块903发送用于拍摄一帧图像的拍摄指令；在确定所述轮转结构205包括的L个彩色滤波片均被使用时，向所述第二合成模块904发送合成指令，所述合成指令用于指示所述第二合成模块对所述第二处理模块903拍摄得到的L帧图像进行融合处理，所述L为大于1的正整数，从而获取L帧图像；
所述第二合成模块904在接收到所述第二控制模块902发送的合成指示后，对所述L帧图像进行融合处理得到彩色图像。
可选地，在所述第一彩色滤波片204为RGB滤波片时，所述第二控制模块902，还用于在识别所述采集模式为RGB成像模式时，旋转所述轮转结构205的旋转轴，调节所述轮转结构205包括的所述第一彩色滤波片204与所述主透镜201、微透镜阵列202、以及成像传感器203共轴，并向所述第二处理模块903发送用于拍摄一帧图像的拍摄指令；
所述第二处理模块903，用于在接收到所述拍摄指令后，使用所述第一彩色滤波片204获取彩色图像。
本发明实施例还提供了一种通过图像采集设备获取彩色图像的方法，所述图像采集设备包括彩色成像装置，该彩色成像装置采用上述轮转结构。
如图15所示，所述方法包括：
S1101，所述图像采集设备接收获取彩色成像的第一图像采集指令，所述第一图像采集指令中携带采集模式为高光谱成像模式。
S1102，所述图像采集设备通过旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴；并使用所述一个彩色滤波片获取一帧图像；再次旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的另一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，直到所述轮转结构中的L个彩色滤波片均被使用，所述L为大于1的正整数，从而获取L帧图像。
S1103，所述图像采集设备对所述L帧图像进行融合处理得到彩色图像。
可选地，当轮转结构中的所述第一彩色滤波片为RGB滤波片，通过图像采集设备获取彩色图像的方法，如图16所示，可以包括：
S1201，所述图像采集设备接收获取彩色成像的第一图像采集指令，所述第一图像采集指令中携带采集模式。
S1202，所述图像采集设备确定所述采集模式。当采集模式为RGB成像模式时，执行S1204。当采集模式为高光谱成像模式时，执行S1203。
S1203，所述图像采集设备通过旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴；并使用所述一个彩色滤波片获取一帧图像；再次旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的另一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，直到所述轮转结构中的L个彩色滤波片均被使用，所述L为大于1的正整数，从而获取L帧图像。执行S1205。
S1204，调节所述RGB滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，并使用所述RGB滤波片获得彩色图像。
S1205，所述图像采集设备对所述L帧图像进行融合处理得到彩色图像。
本发明实施例还提供了一种通过图像采集设备获取彩色图像的方法，所述图像采集设备包括彩色成像装置，该彩色成像装置采用上述法珀腔滤波片。
如图17所示，该方法包括：
S1301，所述图像采集设备接收获取彩色成像的第一图像采集指令，所述第一图像采集指令中携带的采集模式为高光谱成像模式。
S1302，所述图像采集设备调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，并使用所述第一彩色滤波片获取一帧图像，再次调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，直到达到所述法珀腔结构的滤波片所能过滤出的颜色数量，从而获取L帧图像。
其中，每次调节后的M*N个法珀腔结构的滤波片所过滤出的颜色不相同，任意两次调节后的所述第一彩色滤波片中各M*N个法珀腔结构的滤波片所过滤出颜色均不相同；所述L等于所述法珀腔结构的滤波片所能过滤出的颜色数量。
S1303，所述图像采集设备对所述L帧图像进行融合处理得到彩色图像。
可选地，所述方法还可以包括：
所述图像采集设备接收获取彩色成像的第二图像采集指令，所述第二图像采集指令中携带的采集模式为RGB成像模式；
所述图像采集设备调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，且调节后的M*N个法珀腔结构的滤波片所过滤出的颜色仅包括红色、绿色和蓝色；
所述图像采集设备使用所述第一彩色滤波片获取彩色图像。
通过上述实现方式，可以在需要拍摄普通彩色图像以及多光谱彩色图像中切换。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (15)
1.一种彩色成像装置，其特征在于，包括在光路传输路径上依次排列的主透镜，微透镜阵列，以及成像传感器；
所述主透镜包括至少两个共轴且位置相对固定的单透镜；
所述装置还包括设置于所述主透镜的孔径光阑处的第一彩色滤波片；
所述主透镜，所述第一彩色滤波片，所述微透镜阵列，以及所述成像传感器平行且共轴；
所述微透镜阵列包括l个微透镜；所述成像传感器位于所述微透镜阵列的焦平面；其中，所述成像传感器包括l*M*N个像素，光从任意一个微透镜到达所述成像传感器时覆盖所述成像传感器的M*N的像素阵列，且光从所述l个微透镜到达所述成像传感器时覆盖所述成像传感器包括的l*M*N个像素；其中，l、M和N均为正整数；
所述第一彩色滤波片包括至少一个能够过滤出至少一种颜色的滤波片；
所述第一彩色滤波片在垂直于轴线的任一方向上的尺寸不小于所述主透镜在对应方向上的尺寸。
2.如权利要求1所述的装置，其特征在于，所述成像传感器中各个像素与位于所述成像传感器的中心的像素的距离disn为：
<mrow>
<mtable>
<mtr>
<mtd>
<mrow>
<msub>
<mi>dis</mi>
<mi>n</mi>
</msub>
<mo>=</mo>
<msup>
<mrow>
<mo>(</mo>
<mrow>
<msup>
<mrow>
<mo>(</mo>
<mrow>
<mfrac>
<mrow>
<mi>f</mi>
<mrow>
<mo>&lsqb;</mo>
<mrow>
<mrow>
<mo>(</mo>
<mrow>
<msub>
<mi>n</mi>
<mi>i</mi>
</msub>
<mo>-</mo>
<mn>1</mn>
</mrow>
<mo>)</mo>
</mrow>
<mi>d</mi>
<mo>+</mo>
<mi>D</mi>
</mrow>
<mo>&rsqb;</mo>
</mrow>
</mrow>
<mrow>
<mn>2</mn>
<mi>F</mi>
</mrow>
</mfrac>
<mo>+</mo>
<mfrac>
<mrow>
<mrow>
<mo>(</mo>
<mrow>
<msub>
<mi>n</mi>
<mi>i</mi>
</msub>
<mo>-</mo>
<mn>1</mn>
</mrow>
<mo>)</mo>
</mrow>
<mi>d</mi>
</mrow>
<mn>2</mn>
</mfrac>
</mrow>
<mo>)</mo>
</mrow>
<mn>2</mn>
</msup>
<mo>+</mo>
<msup>
<mrow>
<mo>(</mo>
<mrow>
<mfrac>
<mrow>
<mi>f</mi>
<mrow>
<mo>&lsqb;</mo>
<mrow>
<mrow>
<mo>(</mo>
<mrow>
<msub>
<mi>n</mi>
<mi>j</mi>
</msub>
<mo>-</mo>
<mn>1</mn>
</mrow>
<mo>)</mo>
</mrow>
<mi>d</mi>
<mo>+</mo>
<mi>D</mi>
</mrow>
<mo>&rsqb;</mo>
</mrow>
</mrow>
<mrow>
<mn>2</mn>
<mi>F</mi>
</mrow>
</mfrac>
<mo>+</mo>
<mfrac>
<mrow>
<mrow>
<mo>(</mo>
<mrow>
<msub>
<mi>n</mi>
<mi>j</mi>
</msub>
<mo>-</mo>
<mn>1</mn>
</mrow>
<mo>)</mo>
</mrow>
<mi>d</mi>
</mrow>
<mn>2</mn>
</mfrac>
</mrow>
<mo>)</mo>
</mrow>
<mn>2</mn>
</msup>
</mrow>
<mo>)</mo>
</mrow>
<mfrac>
<mn>1</mn>
<mn>2</mn>
</mfrac>
</msup>
<mo>,</mo>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<msub>
<mi>n</mi>
<mi>i</mi>
</msub>
<mo>=</mo>
<mn>1</mn>
<mo>,</mo>
<mn>2</mn>
<mo>,</mo>
<mn>3</mn>
<mo>,</mo>
<mo>...</mo>
<mo>,</mo>
<msub>
<mi>N</mi>
<mrow>
<mi>p</mi>
<mi>i</mi>
<mi>x</mi>
<mi>e</mi>
<mi>l</mi>
<mi>x</mi>
</mrow>
</msub>
<mo>/</mo>
<mn>2</mn>
<mo>,</mo>
<msub>
<mi>n</mi>
<mi>j</mi>
</msub>
<mo>=</mo>
<mn>1</mn>
<mo>,</mo>
<mn>2</mn>
<mo>,</mo>
<mn>3</mn>
<mo>,</mo>
<mo>...</mo>
<mo>,</mo>
<msub>
<mi>N</mi>
<mrow>
<mi>p</mi>
<mi>i</mi>
<mi>x</mi>
<mi>e</mi>
<mi>l</mi>
<mi>y</mi>
</mrow>
</msub>
<mo>/</mo>
<mn>2</mn>
</mrow>
</mtd>
</mtr>
</mtable>
<mo>;</mo>
</mrow>
其中，ni表示在水平方向上距离所述成像传感器的中心的像素的第ni个像素；nj表示在垂直方向上距离所述成像传感器的中心的像素的第nj个像素；disn表示所述第n个像素与所述成像传感器的中心的像素的距离，n＝(ni，nj)；Npixelx表示所述成像传感器中的水平方向上的像素个数；Npixely表示所述成像传感器中的垂直方向上的像素个数；D表示所述主透镜的直径；d表示所述微透镜的直径；F表示所述主透镜的焦距；f表示所述微透镜的焦距。
3.如权利要求1或2所述的装置，其特征在于，所述第一彩色滤波片包括以阵列排列的M*N个子单元；其中，一个子单元对应一种颜色的单色滤波片。
4.如权利要求3所述的装置，其特征在于，所述第一彩色滤波片为红绿蓝RGB滤波片，所述红绿蓝RGB滤波片包括的M*N个子单元分别对应绿色滤波片、红色滤波片以及蓝色滤波片，其中，M和N均为大于等于2的整数。
5.如权利要求4所述的装置，其特征在于，所述红绿蓝RGB滤波片呈Bayer阵列分布。
6.如权利要求1或2所述的装置，其特征在于，所述第一彩色滤波片包括以阵列排列的M*N个法珀腔结构的滤波片，且法珀腔结构的滤波片的腔体内填充为液晶或者填充为电光晶体，用于在施加于法珀腔结构的滤波片的腔体的两侧电压变化时，变化所过滤出的颜色。
7.如权利要求6所述的装置，其特征在于，所述装置还包括第一接收模块、第一控制模块、第一处理模块以及第一合成模块；
所述第一接收模块，用于获取彩色成像的第一图像采集指令，所述第一图像采集指令携带采集模式；
所述第一控制模块，用于识别所述采集模式为高光谱成像模式时，向所述第一处理模块发出第一调节指令，所述第一调节指令用于指示所述第一处理模块更改L次所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色；所述L等于所述法珀腔结构的滤波片所能过滤出的颜色数量；
所述第一处理模块，用于在接收到所述调节指令后，调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，使用所述第一控制模块调节后所述第一彩色滤波片获取一帧图像，再次调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，直到达到所述法珀腔结构的滤波片所能过滤出的颜色数量，从而获取L帧图像；其中，每次调节后的M*N个法珀腔结构的滤波片所过滤出的颜色不相同，任意两次调节后的所述第一彩色滤波片中各M*N个法珀腔结构的滤波片所过滤出的颜色均不相同；
第一合成模块，用于对所述第一处理模块处理得到所述L帧图像进行融合处理得到彩色图像。
8.如权利要求7所述的装置，其特征在于，所述第一控制模块，还用于：
在识别所述采集模式为红绿蓝RGB成像模式时，向所述第一处理模块发出第二调节指令，所述第二调节指令用于指示所述第一处理模块更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，且调节后的M*N个法珀腔结构的滤波片所过滤出的颜色仅包括红色、绿色和蓝色；
所述第一处理模块，还用于在接收到所述第一控制模块发送的调节指令后，调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，且调节后的M*N个法珀腔结构的滤波片所过滤出的颜色仅包括红色、绿色和蓝色；并使用所述第一彩色滤波片获取彩色图像。
9.如权利要求3至5任一项所述的装置，其特征在于，所述第一彩色滤波片设置于轮转结构，所述轮转结构还包括至少一个第二彩色滤波片以及旋转轴，用于通过旋转所述轮转结构的旋转轴，调节所述第一彩色滤波片和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜，微透镜阵列，以及成像传感器共轴；
所述至少一个第二彩色滤波片与所述第一彩色滤波片包括的单色滤波片数量和排列方式相同，所述第一彩色滤波片和所述至少一个第二彩色滤波片中任意两个彩色滤波片中不包括颜色相同的单色滤波片。
10.如权利要求9所述的装置，其特征在于，所述装置还包括第二接收模块，第二控制模块、第二处理模块以及第二合成模块；
所述第二接收模块，用于获取彩色成像的第二图像采集指令，所述第二图像采集指令携带采集模式；
所述第二控制模块，用于在识别所述采集模式为高光谱成像模式时，旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，并向所述第二处理模块发送用于拍摄一帧图像的拍摄指令；
所述第二处理模块，用于在接收到所述拍摄指令后，使用所述一个彩色滤波片获取一帧图像，并向所述第二处理模块发送拍摄完成一帧图像的完成指令；
所述第二控制模块，还用于在接收到所述第二处理模块发送的完成指令时，再次旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的另一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，并再次向所述第二处理模块发送用于拍摄一帧图像的拍摄指令；在确定所述轮转结构包括的L个彩色滤波片均被使用时，向所述第二合成模块发送合成指令，所述合成指令用于指示所述第二合成模块对所述第二处理模块拍摄得到的L帧图像进行融合处理，所述L为大于1的正整数，从而获取L帧图像；
所述第二合成模块在接收到所述第二控制模块发送的合成指示后，对所述L帧图像进行融合处理得到彩色图像。
11.如权利要求10所述的装置，其特征在于，所述第一彩色滤波片为RGB滤波片；
所述第二控制模块，还用于在识别所述采集模式为RGB成像模式时，旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，并向所述第二处理模块发送用于拍摄一帧图像的拍摄指令；
所述第二处理模块，用于在接收到所述拍摄指令后，使用所述第一彩色滤波片获取彩色图像。
12.一种通过图像采集设备获取彩色图像的方法，其特征在于，所述图像采集设备包括如权利要求9所述的彩色成像装置，所述方法包括：
所述图像采集设备接收获取彩色成像的第一图像采集指令，所述第一图像采集指令中携带的采集模式为高光谱成像模式；
所述图像采集设备通过旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴；并使用所述一个彩色滤波片获取一帧图像；再次旋转所述轮转结构的旋转轴，调节所述轮转结构包括的所述第一彩色滤波片和所述至少一个第二彩色滤波片中的另一个彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，直到所述轮转结构包括的L个彩色滤波片均被使用，所述L为大于1的正整数，从而获取L帧图像；
所述图像采集设备对所述L帧图像进行融合处理得到彩色图像。
13.如权利要求12所述的方法，其特征在于，当所述第一彩色滤波片为RGB滤波片时，所述方法还包括：
所述图像采集设备接收获取彩色成像的第二图像采集指令，所述第二图像采集指令中携带的采集模式为红绿蓝RGB成像模式；
所述图像采集设备调节所述第一彩色滤波片与所述主透镜、微透镜阵列、以及成像传感器共轴，并使用所述第一彩色滤波片获得彩色图像。
14.一种通过图像采集设备获取彩色图像的方法，其特征在于，所述图像采集设备包括如权利要求6所述的彩色成像装置，所述方法包括：
所述图像采集设备接收获取彩色成像的第一图像采集指令，所述第一图像采集指令中携带的采集模式为高光谱成像模式；
所述图像采集设备调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，并使用所述第一彩色滤波片获取一帧图像，再次调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，直到达到所述法珀腔结构的滤波片所能过滤出的颜色数量，从而获取L帧图像；其中，每次调节后的M*N个法珀腔结构的滤波片所过滤出的颜色不相同，任意两次调节后的所述第一彩色滤波片中各M*N个法珀腔结构的滤波片所过滤出的颜色均不相同；所述L等于所述法珀腔结构的滤波片所能过滤出的颜色数量；
所述图像采集设备对所述L帧图像进行融合处理得到彩色图像。
15.如权利要求14所述的方法，其特征在于，还包括：
所述图像采集设备接收获取彩色成像的第二图像采集指令，所述第二图像采集指令中携带的采集模式为红绿蓝RGB成像模式；
所述图像采集设备调节电压更改所述第一彩色滤波片包括的M*N个法珀腔结构的滤波片所过滤出的颜色，且调节后的M*N个法珀腔结构的滤波片所过滤出的颜色仅包括红色、绿色和蓝色；
所述图像采集设备使用所述第一彩色滤波片获取彩色图像。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610112996.4A CN107135380B (zh) | 2016-02-29 | 2016-02-29 | 一种彩色成像装置以及获取彩色图像的方法 |
| EP16892295.3A EP3410704A1 (en) | 2016-02-29 | 2016-08-19 | Color imaging device, and method for obtaining color images |
| PCT/CN2016/096086 WO2017148109A1 (zh) | 2016-02-29 | 2016-08-19 | 一种彩色成像装置以及获取彩色图像的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610112996.4A CN107135380B (zh) | 2016-02-29 | 2016-02-29 | 一种彩色成像装置以及获取彩色图像的方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107135380A true CN107135380A (zh) | 2017-09-05 |
| CN107135380B CN107135380B (zh) | 2019-05-28 |
Family
ID=59721906
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610112996.4A Expired - Fee Related CN107135380B (zh) | 2016-02-29 | 2016-02-29 | 一种彩色成像装置以及获取彩色图像的方法 |
Country Status (3)
| Country | Link |
|---|---|
| EP (1) | EP3410704A1 (zh) |
| CN (1) | CN107135380B (zh) |
| WO (1) | WO2017148109A1 (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110798605A (zh) * | 2019-11-29 | 2020-02-14 | 维沃移动通信有限公司 | 摄像模组及电子设备 |
| US20210293723A1 (en) * | 2020-03-18 | 2021-09-23 | Kabushiki Kaisha Toshiba | Optical inspection device |
| CN115802183A (zh) * | 2021-09-10 | 2023-03-14 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113905164A (zh) * | 2021-10-09 | 2022-01-07 | 奕目(上海)科技有限公司 | 光场成像系统以及通过光场成像系统采集光场信息的方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101500085A (zh) * | 2008-01-28 | 2009-08-05 | 索尼株式会社 | 图像摄取装置 |
| CN103486532A (zh) * | 2013-08-28 | 2014-01-01 | 成都谱视科技有限公司 | 基于可见光滤光片的太阳光导入装置 |
| CN103686102A (zh) * | 2012-09-14 | 2014-03-26 | 株式会社理光 | 摄像装置以及摄像系统 |
| US20150070544A1 (en) * | 2013-09-10 | 2015-03-12 | Rambus Inc. | Oversampled image sensor with conditional pixel readout |
| CN104580950A (zh) * | 2013-10-28 | 2015-04-29 | 全视科技有限公司 | 多透镜阵列模块中的紧凑间隔件 |
| CN105093472A (zh) * | 2015-08-25 | 2015-11-25 | 华为技术有限公司 | 成像装置和成像方法 |
-
2016
- 2016-02-29 CN CN201610112996.4A patent/CN107135380B/zh not_active Expired - Fee Related
- 2016-08-19 WO PCT/CN2016/096086 patent/WO2017148109A1/zh active Application Filing
- 2016-08-19 EP EP16892295.3A patent/EP3410704A1/en not_active Withdrawn
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101500085A (zh) * | 2008-01-28 | 2009-08-05 | 索尼株式会社 | 图像摄取装置 |
| CN103686102A (zh) * | 2012-09-14 | 2014-03-26 | 株式会社理光 | 摄像装置以及摄像系统 |
| CN103486532A (zh) * | 2013-08-28 | 2014-01-01 | 成都谱视科技有限公司 | 基于可见光滤光片的太阳光导入装置 |
| US20150070544A1 (en) * | 2013-09-10 | 2015-03-12 | Rambus Inc. | Oversampled image sensor with conditional pixel readout |
| CN104580950A (zh) * | 2013-10-28 | 2015-04-29 | 全视科技有限公司 | 多透镜阵列模块中的紧凑间隔件 |
| CN105093472A (zh) * | 2015-08-25 | 2015-11-25 | 华为技术有限公司 | 成像装置和成像方法 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110798605A (zh) * | 2019-11-29 | 2020-02-14 | 维沃移动通信有限公司 | 摄像模组及电子设备 |
| CN110798605B (zh) * | 2019-11-29 | 2021-05-28 | 维沃移动通信有限公司 | 摄像模组及电子设备 |
| US20210293723A1 (en) * | 2020-03-18 | 2021-09-23 | Kabushiki Kaisha Toshiba | Optical inspection device |
| CN115802183A (zh) * | 2021-09-10 | 2023-03-14 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
| CN115802183B (zh) * | 2021-09-10 | 2023-10-20 | 荣耀终端有限公司 | 图像处理方法及其相关设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP3410704A1 (en) | 2018-12-05 |
| CN107135380B (zh) | 2019-05-28 |
| WO2017148109A1 (zh) | 2017-09-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102490000B1 (ko) | 라이트 필드 콘텐츠를 처리하기 위한 방법 및 디바이스 | |
| CN105611136B (zh) | 一种图像传感器以及电子设备 | |
| CN100579185C (zh) | 复眼方式的摄像装置 | |
| CN102236245B (zh) | 单透镜2d/3d数字照相机 | |
| CN102640036B (zh) | 生成三维图像信息的方法和装置 | |
| CN107135380A (zh) | 一种彩色成像装置以及获取彩色图像的方法 | |
| CN106840398A (zh) | 一种多光谱光场成像方法 | |
| CN103119516A (zh) | 光场摄像装置和图像处理装置 | |
| CN102474648B (zh) | 三维摄像装置 | |
| WO2016123910A1 (zh) | 一种立体显示装置及其制作方法 | |
| TWI527434B (zh) | 利用光場相機產生立體影像的方法及光場相機 | |
| CN103403494A (zh) | 摄像装置 | |
| JP6112419B2 (ja) | 撮像装置および測距装置 | |
| CN106605172A (zh) | 显示装置、用于驱动显示装置的方法以及电子设备 | |
| CN102907102A (zh) | 摄像装置、摄像系统以及摄像方法 | |
| CN105980926B (zh) | 投影仪和图像显示方法 | |
| CN103052914B (zh) | 三维摄像装置 | |
| WO2013111598A1 (ja) | アレイ状光学素子、撮像用部材、撮像素子、撮像装置および測距装置 | |
| CN102472958A (zh) | 三维摄像装置 | |
| CN104272732B (zh) | 图像处理装置、方法及摄像装置 | |
| JP2003299121A (ja) | 立体画像表示装置および立体画像表示システム | |
| CN103636199A (zh) | 三维摄像装置、图像处理装置、图像处理方法及图像处理程序 | |
| CN106331662A (zh) | 一种图像撷取装置及图像撷取方法 | |
| CN102474649B (zh) | 三维摄像装置及透光板 | |
| KR20210070801A (ko) | 초분광 카메라 모듈을 포함하는 듀얼 카메라 모듈과 이를 포함하는 장치와 그 동작방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20191212 Address after: 211200 No.1, Xiushan Middle Road, Lishui Economic Development Zone, Nanjing City, Jiangsu Province Patentee after: NANJING ADVANCED BIOMATERIALS AND PROCESS EQUIPMENT RESEARCH INSTITUTE Co.,Ltd. Address before: 510000 unit 2414-2416, building, No. five, No. 371, Tianhe District, Guangdong, China Patentee before: GUANGDONG GAOHANG INTELLECTUAL PROPERTY OPERATION Co.,Ltd. Effective date of registration: 20191212 Address after: 510000 unit 2414-2416, building, No. five, No. 371, Tianhe District, Guangdong, China Patentee after: GUANGDONG GAOHANG INTELLECTUAL PROPERTY OPERATION Co.,Ltd. Address before: 518129 Bantian HUAWEI headquarters office building, Longgang District, Guangdong, Shenzhen Patentee before: HUAWEI TECHNOLOGIES Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20190528 Termination date: 20200229 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |