CN113099078B - 摄像头模组、成像方法和成像装置 - Google Patents
摄像头模组、成像方法和成像装置 Download PDFInfo
- Publication number
- CN113099078B CN113099078B CN202010018843.XA CN202010018843A CN113099078B CN 113099078 B CN113099078 B CN 113099078B CN 202010018843 A CN202010018843 A CN 202010018843A CN 113099078 B CN113099078 B CN 113099078B
- Authority
- CN
- China
- Prior art keywords
- module
- filter
- lens
- optical
- camera module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 178
- 230000003287 optical effect Effects 0.000 claims abstract description 166
- 238000001914 filtration Methods 0.000 claims description 10
- 239000011521 glass Substances 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 61
- 238000001228 spectrum Methods 0.000 description 49
- 238000012545 processing Methods 0.000 description 43
- 238000000034 method Methods 0.000 description 29
- 230000003595 spectral effect Effects 0.000 description 21
- 238000012937 correction Methods 0.000 description 20
- 239000010408 film Substances 0.000 description 13
- 239000004973 liquid crystal related substance Substances 0.000 description 13
- 239000011159 matrix material Substances 0.000 description 12
- 238000007781 pre-processing Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 10
- 239000003086 colorant Substances 0.000 description 9
- 230000008569 process Effects 0.000 description 7
- 239000010409 thin film Substances 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 210000002858 crystal cell Anatomy 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000002834 transmittance Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 210000004027 cell Anatomy 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000010287 polarization Effects 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 238000002203 pretreatment Methods 0.000 description 2
- 229910001285 shape-memory alloy Inorganic materials 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 206010034972 Photosensitivity reaction Diseases 0.000 description 1
- BQCADISMDOOEFD-UHFFFAOYSA-N Silver Chemical compound [Ag] BQCADISMDOOEFD-UHFFFAOYSA-N 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000036211 photosensitivity Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000009469 supplementation Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- LAJZODKXOMJMPK-UHFFFAOYSA-N tellurium dioxide Chemical compound O=[Te]=O LAJZODKXOMJMPK-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/12—Generating the spectrum; Monochromators
- G01J3/26—Generating the spectrum; Monochromators using multiple reflection, e.g. Fabry-Perot interferometer, variable interference filters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0205—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
- G01J3/0208—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using focussing or collimating elements, e.g. lenses or mirrors; performing aberration correction
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0205—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
- G01J3/0224—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using polarising or depolarising elements
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/0205—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
- G01J3/0235—Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using means for replacing an element by another, for replacing a filter or a grating
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/027—Control of working procedures of a spectrometer; Failure detection; Bandwidth calculation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/12—Generating the spectrum; Monochromators
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/12—Generating the spectrum; Monochromators
- G01J3/1256—Generating the spectrum; Monochromators using acousto-optic tunable filter
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2803—Investigating the spectrum using photoelectric array detector
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/30—Measuring the intensity of spectral lines directly on the spectrum itself
- G01J3/32—Investigating bands of a spectrum in sequence by a single detector
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
- G01J3/462—Computing operations in or between colour spaces; Colour management systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
- G01J3/50—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors
- G01J3/51—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors using colour filters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/125—Colour sequential image capture, e.g. using a colour wheel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/131—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing infrared wavelengths
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/12—Generating the spectrum; Monochromators
- G01J2003/1213—Filters in general, e.g. dichroic, band
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/12—Generating the spectrum; Monochromators
- G01J2003/1269—Electrooptic filter
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
- G02B26/001—Optical devices or arrangements for the control of light using movable or deformable optical elements based on interference in an adjustable optical cavity
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/20—Filters
- G02B5/208—Filters for use with infrared or ultraviolet radiation, e.g. for separating visible light from infrared and/or ultraviolet radiation
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/20—Filters
- G02B5/28—Interference filters
- G02B5/281—Interference filters designed for the infrared light
-
- G—PHYSICS
- G02—OPTICS
- G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
- G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
- G02F1/01—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour
- G02F1/11—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour based on acousto-optical elements, e.g. using variable diffraction by sound or like mechanical waves
Landscapes
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Theoretical Computer Science (AREA)
- Color Television Image Signal Generators (AREA)
- Blocking Light For Cameras (AREA)
- Studio Devices (AREA)
Abstract
本申请提供摄像头模组、成像方法和成像装置。本申请的摄像头模组包括滤光片模块和传感器模块,所述滤光片模块用于:在不同的时间,向所述传感器模块上的同一像素点,输出入射到所述滤光片模块的光信号中不同波段的目标光信号,所述传感器模块用于:将入射到所述传感器模块的所述目标光信号转换为电信号并输出。本申请提供摄像头模组、成像方法和成像装置能够提高图像的成像质量。
Description
技术领域
本申请涉及图像处理领域,并且更具体地,涉及摄像头模组、成像方法和成像装置。
背景技术
图像传感器是终端拍照系统最主要的组成元件之一,对成像质量起决定性作用。目前常用的彩色成像传感器为拜耳型传感器。拜耳型传感器为了得到全彩影像,需要采用去马赛克算法来插值补充,这会导致图像分辨率下降,同时,在插值过程中经常引入摩尔条纹、彩色噪声、拉链状噪声等问题,从而降低成像质量。
随着智能终端技术的发展和普及,人们对智能终端的拍照体验要求越来越高。其中,用户希望获得更高的拍照质量。
因此,如何提高图像的成像质量,成为了一个亟待解决的问题。
发明内容
本申请提供摄像头模组、成像方法和成像装置,能够提高图像的成像质量。
第一方面,本申请提供一种摄像头模组,该摄像头模组包括:滤光片模块和传感器模块;所述滤光片模块用于:在不同的时间,向所述传感器模块上的同一像素点,输出入射到所述滤光片模块的光信号中不同波段的目标光信号;所述传感器模块用于:将入射到所述传感器模块的所述目标光信号转换为电信号并输出。
本申请提供的摄像头模组中,滤光片模块分时过滤得到不同波段的目标光信号,传感器分时对这些不同波段进行光电转换,与现有技术中同时采集多个波段的光信号并采用去马赛克算法来插值补充以获取全彩影像相比,有助于提高成像分辨率和提高成像的色彩还原准确度,还可以有助于避免摩尔条纹、彩色噪声和拉链状噪声等问题。
在一些可能的实现方式中,所述滤光片模块包括移动模块和多个滤波片;所述滤波片用于输出入射到所述滤波片上的光信号中的所述目标光信号,所述多个滤波片中不同的滤波片输出的所述目标光信号的波段不同;所述移动模块用于:在不同的时间,将所述多个滤波片中不同的滤波片移动到能够接收所述光信号的目标位置。
在另一些可能的实现方式中,所述滤光片模块包括移动模块和线性渐变干涉式的滤光片;所述移动模块用于:在不同的时间,将所述线性渐变干涉式的滤光片不同部位移动到能够接收所述光信号的目标位置,所述滤光片的不同部分输出的所述目标光信号的波段不通过。
可选地,所述滤光片从可见光到红外光连续可调。
在另一些可能的实现方式中,所述滤光片模块包括两个两面反射镜和移动模块;所述移动模块用于:调节所述两个两面反射镜之间的距离,使得在不同的时间所述两个两面反射镜之间的距离不同;所述两个两面反射镜用于:将入射到所述一个两面反射镜上的光信号中的目标光信号过滤出并从所述两个两面反射镜中的另一个两面反射镜输出,所述两面反射镜之间的距离不同时,所述目标光信号的波段不同。
在另一些可能的实现方式中,所述滤光片模块包括液晶可调滤光片。可选地,所述滤光片模块为所述摄像头模组的多个滤光片模块中的一个。
在另一些可能的实现方式中,所述滤光片模块包括声光可调滤光片。
在第一方面或上述任意一种可能的实现方式中,可选地所述滤光片模块还包括红外截止滤光片,所述红外截止滤光片用于:在所述目标光信号入射到所述传感器模块之前,过滤掉所述目标光信号中的红外光。通过滤掉目标光信号中的红外光,传感器感光的波段更接近于人眼的感光波段,最终照片或者视频更接近与人眼视物的习惯。
在第一方面或上述任意一种可能的实现方式中,可选地,所述摄像头模组还包括:第一镜头模块。其中,所述第一镜头模块用于:将入射到所述第一镜头模块的光信号输出到所述滤光片模块。第一镜头模块可以减少大角度入射下滤光片模块产生的色偏问题,同时保证更多的光信号入射到传感器模块,从而可以进一步提高成像质量。
可选地,所述第一镜头模块包括以下一项或多项:塑料镜片,玻璃镜片,衍射光学元件DOE,超透镜等。
可选地,所述摄像头模组还包括马达模块;所述马达模块用于:控制所述第一镜头模块和/或所述传感器模块移动,以实现所述摄像头模块的对焦功能和/或防抖功能。
可选地,所述摄像头模块还包括第二镜头模块,所述第二镜头模块位于所述滤光片模块和所述传感器模块之间。其中所述第二镜头模块用于:将所述滤光片输出的目标光信号输出到所述传感器模块,并增大所述目标光信号在所述传感器模块上的覆盖范围。
第二镜头模块可以增大滤光片模块输出的目标光信号在传感器模块的入射角度,以增大该目标光信号在传感器模块上的覆盖范围,也就是说,第二镜头模块可以使得传感器模块在同一时间可以采集到更多的目标光信号,从而可以提供更多的图像原始数据,进而可以提高成像质量。
在第一方面或上述任意一种可能的实现方式中,可选地,所述摄像头模块还包括第二镜头模块,所述第二镜头模块位于所述滤光片模块和所述传感器模块之间;其中所述第二镜头模块用于:将所述滤光片输出的目标光信号输出到所述传感器模块,并增大所述目标光信号在所述传感器模块上的覆盖范围。
可选地,所述摄像头模组还包括第二马达模块;所述第二马达模块用于:控制所述第二镜头模块和/或传感器模块移动,以实现所述摄像头模块的对焦功能和/或防抖功能。
可选地,所述摄像头模组还包括:第一镜头模块;其中,所述第一镜头模块用于:将入射到所述第一镜头模块的光信号输出到所述滤光片模块上的所述目标位置。
可选地,所述第二镜头模块包括以下一项或多项:塑料镜片,玻璃镜片,衍射光学元件DOE,超透镜等。
在第一方面或上述任意一种可能的实现方式中,可选地,所述传感器模块包括全带通传感器或宽带通传感器。
第二方面,本申请提供一种成像方法,该成像方法包括:获取多组图像原始数据,所述多组图像原始数据为摄像头模组对不同时间采集的不同波段的目标光信号进行光电转换得到的图像原始数据;对所述多组图像原始数据进行色彩调试处理,以得到彩色图像,所述多组图像原始数据中不同组的图像原始数据对应的不同波段内的目标光信号。
本申请的成像方法中,整个ISP色彩通路中没有去马赛克处理,有效的提高了分辨率,避免了摩尔条纹的产生;精细的图像原始数据和高维度的CCM矩阵,保障了色彩调试时候的多自由度,保障了色彩还原的准确性。
在一些可能的实现方式中,所述对所述摄像头模组采集的多组图像原始数据进行色彩调试处理,包括:对所述多组图像原始数据进行白平衡、色彩还原、伽马矫正和三维色彩查找处理。
第三方面,本申请提供一种成像装置,该成像装置包括用于实现第二方面所述的成像方法的各个模块。这些模块可以通过硬件或软件的方式实现。
第四方面,提供了一种成像装置,该装置包括:存储器,用于存储程序;处理器,用于执行所述存储器存储的程序,当所述存储器存储的程序被执行时,所述处理器用于执行第一方面所述的方法。
可选地,该成像装置还包括通信接口,该通信接口用于与摄像头模组或其他装置进行信息交互。
可选地,该成像装置还包括收发器,该收发器用于与摄像头模组或其他装置进行信息交互。
第五方面,本申请提供一种调整摄像头模组的光谱模式的方法,该方法包括:接收第一信息,所述第一信息用于指示设置所述摄像头模组的光谱模式;响应于所述第一信息,输出多个光谱模式中每个光谱模式的模式信息,所述每个光谱模式的模式信息包括所述每个光谱模式的名称信息。
可选地,所述多个光谱模式包括以下至少一个:普通模式、高精度模式、暗光模式、印刷模式或专家模式。
在一些可能的实现方式中,所述方法还包括:接收第二信息,所述第二信息用于指示将所述摄像头模组的光谱模式设置为所述多个光谱模式中的目标光谱模式;响应于所述第二信息,将所述摄像头模组的光谱模式设置为所述目标光谱模式。
第六方面,本申请提供一种装置,该装置包括用于实现第五方面所述的方法的各个模块。这些模块可以通过硬件或软件的方式实现。
第七方面,提供了一种装置,该装置包括:输入单元,用于接收用户输入的信息;存储器,用于存储程序;输出单元,用于向用户输出信息;处理器,用于执行所述存储器存储的程序,当所述存储器存储的程序被执行时,所述处理器用于执行第五方面所述的方法。
其中,输入单元可以是触摸屏、麦克风、鼠标、键盘、摄像头或者其他能够感应用户输入的装置;输出单元可以是显示屏、扩音器等等装置。
第八方面,本申请提供一种成像系统,该成像系统包括以下一种或多种装置:第一方面所述的摄像头模组,第三方面或第四方面所述的成像装置,第六方面或第七方面所述的装置。
第九方面,本申请提供一种计算机可读存储介质,所述计算机可读存储介质中存储用于成像装置执行的指令,所述指令用于执行第二方面所述的成像方法。
第十方面,本申请提供一种计算机可读存储介质,所述计算机可读存储介质中存储用于成像装置执行的指令,所述指令用于执行第五方面所述的方法。
第十一方面,提供一种包含指令的计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述第二方面所述的成像方法。
第十二方面,提供一种包含指令的计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述第五方面所述的成像方法。
第十三方面,提供一种芯片,所述芯片包括处理器与数据接口,所述处理器通过所述数据接口读取存储器上存储的指令,执行上述第二方面所述的方法。
第十四方面,提供一种芯片,所述芯片包括处理器与数据接口,所述处理器通过所述数据接口读取存储器上存储的指令,执行上述第五方面所述的方法。
附图说明
图1是本申请一个实施例的成像系统的示意架构图;
图2是本申请另一个实施例的成像系统的示意性结构图;
图3是本申请另一个实施例的成像系统的示意性结构图;
图4是本申请另一个实施例的成像系统的示意性结构图;
图5是本申请另一个实施例的成像系统的示意性结构图;
图6是本申请另一个实施例的成像系统的示意性结构图;
图7是本申请另一个实施例的成像系统的示意性结构图;
图8是本申请另一个实施例的成像系统的示意性结构图;
图9是本申请另一个实施例的成像系统的示意性结构图;
图10是本申请另一个实施例的成像系统的示意性结构图;
图11是本申请另一个实施例的成像系统的示意性结构图;
图12是本申请另一个实施例的成像系统的示意性结构图;
图13是本申请另一个实施例的成像系统的示意性结构图;
图14是本申请一个实施例的滤光片模块的示意性结构图;
图15是本申请另一个实施例的滤光片模块的示意性流程图;
图16是本申请另一个实施例的滤光片模块的示意性结构图;
图17是本申请另一个实施例的滤光片模块的示意性结构图;
图18是本申请另一个实施例的滤光片模块的示意性结构图;
图19是本申请另一个实施例的滤光片模块的示意性结构图;
图20是本申请另一个实施例的滤光片模块的示意性结构图;
图21是本申请另一个实施例的滤光片模块的示意性结构图;
图22是本申请另一个实施例的滤光片模块的示意性结构图;
图23是本申请另一个实施例的滤光片模块的示意性结构图;
图24是本申请另一个实施例的滤光片模块的示意性结构图;
图25是本申请另一个实施例的滤光片模块的示意性结构图;
图26是本申请另一个实施例的滤光片模块的示意性结构图;
图27是本申请一个实施例的成像方法的示意性流程图;
图28是本申请另一个实施例的成像方法的示意性流程图;
图29是本申请一个实施例的模式选择界面的示意图;
图30是本申请另一个实施例的成像系统的示意性结构图;
图31是本申请一个实施例的成像方法的示意性流程图;
图32是本申请另一个实施例的成像方法的示意性流程图;
图33是本申请一个实施例的摄像头模组的示意性结构图;
图34是本申请一个实施例的成像装置的示意性结构图;
图35是本申请另一个实施例的成像装置的示意性结构图;
图36是本申请一个实施例的调整摄像头模组的光谱模式的装置的示意性结构图;
图37是本申请另一个实施例的调整摄像头模组的光谱模式的装置的示意性结构图;
图38为本申请一个实施例的拜耳阵列滤光片的示意性结构图;
图39为本申请一个实施例的单一色图像的示意图;
图40为本申请另一个实施例的单一色图像的示意图。
具体实施方式
下面先介绍成像原理:景物通过镜头生成的光学图像投射到图像传感器表面,图像传感器将光信号转换为电信号,电信号经模数转换处理之后得到数字图像信号,数字图像信号经过处理器的加工处理,再传输到显示器上就可以看到图像了。
由于自然界中的绝大部分彩色,通常是由几种单一色,例如红、绿、蓝三种基色,按一定比例混合得到的,因此,想要获得彩色图像,需要先获取几种基色的单一色图像,然后再将这几种单一色图像按照一定的比例混合,才能得到彩色图像。
下面以单一色为红、绿和蓝三种基色为例,结合图38介绍基于拜耳阵列滤光片获取景物的单一色图像的实现方式。如图38所示,拜耳阵列滤光片中,红色、绿色和蓝色波段光的传感器呈棋盘状排列,因此,景物通过拜耳阵列滤光片投射到传感器上后得到的图像中,红绿蓝三个颜色呈棋盘状排列,红绿蓝三个颜色分别对应的单一色图像如图39所示。
如图39所示,每种单一色图像都只包含了一部分数据,要想获取完整的红、绿和蓝单一色图像,就需要根据图39所示的每一个单一色图像对该种单一色进行插值运算,以得到如图40所示的分别仅包含红色、绿色和蓝色的完整单一色图像。
而根据插值运算得到的三个单一色图像还原得到的彩色图像,不仅分辨率较低;而且,在插值过程中还会引入摩尔条纹、彩色噪声和拉链状噪声等问题,这也会降低成像质量。
为了提高图像的成像质量,本申请提出了新的滤光片、摄像头模组、成像系统以及成像方法。
图1是本申请一个实施例的成像系统100的示意架构图。成像系统100可以包括摄像头模组110和处理模块120。可选地,成像系统100还可以包括存储模块130和显示模块140。
其中,摄像头模组110可以包括滤光片模块112和传感器模块115。处理模块120可以包括图像信号处理单元121和滤光片控制单元123。滤光片模块112、滤光片控制单元123、传感器模块115、图像信号处理单元121、存储模块130以及显示模块140之间通过总线系统150通信,即传输信号或数据。
滤光片模块112用于接收滤光片控制单元123输出的控制信号,并在控制信号的控制下,在不同的时间,向所述传感器模块上的同一像素点,输出入射光中不同波段内的光信号。滤光片模块112输出的光信号中包括成像系统100完成成像所需波段的光信号。例如,成像系统100的光谱模式为RGB模式时,所需波段包括红、绿和蓝三个波段;成像系统100的光谱模式为RYB模式时,所需波段包括红、黄、蓝三个波段;成像系统100的光谱模式为RWB模式时,所需波段包括红、蓝和全带通三个波段;成像系统100的光谱模式为RGBW模式时,所需波段包括红、绿、蓝、全带通波段;在其他一些特殊的光谱模式中,所需波段除了可见光中的波段以外,还可以包括近红外光波段。为了描述方便,将所需波段的光信号称为目标光信号。
可选地,滤光片模块112可以包括但不限于以下可调滤光片:微机电驱动的干涉式薄膜滤光片、基于液晶调制的可调滤光片、基于声光可调滤波器(AOTF)的可调滤光片、基于法布里-珀罗谐振腔(fabry–pérot cavity,FP)腔干涉的可调滤光片、基于磁光效应的可调滤光片等。滤光片模块112的示例性结构后续将会详细介绍。
传感器模块115用于将通过滤光片模块112入射的光信号转换为电信号,并输出该电信号。传感器模块115将光信号转换为电信号的过程,也可以称为感光成像。传感器模块115持续将光信号转换为电信号的过程,可以称为对光信号的连续积分。
可选地,传感器模块115可以在控制单元的控制下,仅在滤光片模块112输出目标光信号时才进行光电信号的转换;也可以是对滤光片模块112输出的所有光信号均进行光电信号的转换。后一种情况下,可以由图像信号处理单元121从传感器模块115输出的电信号中筛选出目标光信号转换得到的电信号。传感器模块115输出的电信号可以称为图像原始数据。
传感器模块115的一种示例为全带通传感器,该全带通传感器的每个像素对可见光均可感光成像,或者,该全带通传感器的每个像素对可见光和近红外光均可感光成像。
图像信号处理(image signal processor,ISP)单元121用于对传感器模块115输出的电信号进行处理,以得到彩色图像。例如,图像信号处理单元121用于对图像原始数据进行以下处理:白平衡(white balance,WB)、色彩还原(color correction,CC)、伽马(gamma)矫正、三维颜色查找表(3dimensions look-up-table,3D Lut)矫正,以实现色彩相关调试,得到全彩图像。
滤光片控制单元123用于向滤光片模块112输出控制信号,以控制滤光片模块112在不同的时间过滤输出入射光中不同波段的目标光信号。
存储模块130用于存储处理模块120执行的程序代码和/或图像相关数据,例如,传感器模块115采集的图像原始数据、处理模块120对图像原始数据进行色彩调试时的临时数据以及色彩调试后得到的彩色图像。
存储模块130可以是只读存储器(read only memory,ROM),静态存储设备,动态存储设备或者随机存取存储器(random access memory,RAM)等。
显示模块140用于显示图像信号处理单元121处理得到的彩色图像。显示模块140可以是液晶显示器(liquid crystal display,LCD),发光二级管(light emitting diode,LED)显示设备,阴极射线管(cathode ray tube,CRT)显示设备,或投影仪(projector)等。
图1所示的成像系统中,不需要去马赛克处理,可以调高图像分辨率,避免摩尔条纹的产生。滤光片模块112可以提供更精细的光谱原始数据,以及处理模块120可以提供高维度CCM矩阵,以保障色彩调试时候的多自由度,保障色彩还原的准确性。
图2是本申请另一个实施例的成像系统200的示意架构图。如图2所示,成像系统200除了可以包括成像系统100中的各个组成部分,成像系统200中的摄像头模组110还可以包括镜头模块111。
镜头模块111还可以用于使得滤光片模块112输出的目标光信号可以更大面积地覆盖传感器模块115的感光区域,例如刚好覆盖传感器模块115的感光区域。其中,经过镜头模块111的光信号入射到滤光片模块112的角度,小于没有镜头模块111时,该光信号入射到滤光片模块112的角度。或者可以说,镜头模块111可以理解为减小光信号入射到滤光片模块112的角度。这样,镜头模块111减少大角度入射下滤光片模块112产生的色偏问题,同时保证更多的光信号入射到传感器模块115,从而可以进一步提高成像质量。
可以理解的是,镜头模块111位于滤光片模块112之前,还可以用于收集目标物和/或目标景发射或反射的光信号,并将该光信号输出到滤光片模块112。
镜头模块111可以包含但不限于以下镜头组件:塑料镜片组、塑玻混合镜片组、衍射光学元件(diffractive optical elements,DOE)镜片、超透镜(metalens)或其他镜头。可以理解的是,镜头模块111中包括3个镜片仅是一种示例,其可以包括更多或更少、或是更多种类的镜片。
图3是本申请另一个实施例的成像系统300的示意架构图。如图3所示,成像系统300除了可以包括成像系统200中的各个组成部分,成像系统300的摄像头模组110还可以包括马达模块114,处理模块120还可以包括马达控制单元122。
其中,马达模块114具体用于:接收马达控制单元122输出的控制信号,并根据该控制信号移动镜头模块111,以调整镜头模块111与传感器模块115之间相对位置,例如沿着镜头光轴方向调整镜头模块111与传感器模块115之间的距离,从而实现对焦功能,沿着垂直于光轴方向调整镜头模块111与传感器模块115之间的相对位置,从而实现光学防抖。
马达模块114可以包含但不限于以下类型马达:音圈马达(voice coil motor,VCM)、记忆金属合金(shape-memory alloy,SMA)马达、压电式(Peizo)马达或微机电系统(microelectro mechanical systems,Mems)马达等。
本申请实施例中,滤光片模块与对焦以及光学防抖功能互相独立,因此不会牺牲光学防抖性能。
图4是本申请另一个实施例的成像系统400的示意架构图。如图4所示,成像系统400可以包括成像系统300中的各个组成部分,不同之处在于,马达模块114具体用于:接收马达控制单元122输出的控制信号,并根据该控制信号移动传感器模块115,以调整镜头模块111与传感器模块115之间的相对位置,例如沿着镜头光轴方向调整镜头模块111与传感器模块115之间的距离,从而实现对焦功能,沿着与镜头光轴垂直方向调整镜头模块111与传感器模块115的相对位置,以实现光学防抖。
图5是本申请另一个实施例的成像系统500的示意架构图。如图5所示,成像系统500可以包括成像系统300中的各个组成部分,不同之处在于,马达模块114具体用于:接收马达控制单元122输出的控制信号,并根据该控制信号移动镜头模块111和传感器模块115,以调整镜头模块111与传感器模块115之间的相对位置,例如沿着镜头光轴方向调整镜头模块111与传感器模块115之间的距离,从而实现对焦功能,沿着垂直于光轴的方向调整镜头模块111与传感器模块115之间的相对位置,从而实现光学防抖,且该马达模块114可以同时移动镜头模块111和传感器模块115,从而可以快速实现对焦和快速防抖。
图6是本申请另一个实施例的成像系统600的示意架构图。如图6所示,成像系统600可以包括成像系统200中的各个组成部分,不同之处在于,成像系统600中的镜头模块111,与成像系统200中的镜头模块111的位置不同。具体地,成像系统600中的镜头模块111位于滤波片模块112与传感器模块115之间。
图7是本申请另一个实施例的成像系统700的示意架构图。如图7所示,成像系统700可以包括成像系统300中的各个组成部分,不同之处在于,成像系统700中的镜头模块111,与成像系统300中的镜头模块111的位置不同。具体地,成像系统700中的镜头模块111位于滤波片模块112与传感器模块115之间。
图8是本申请另一个实施例的成像系统800的示意架构图。如图8所示,成像系统800可以包括成像系统400中的各个组成部分,不同之处在于,成像系统800中的镜头模块111,与成像系统400中的镜头模块111的位置不同。具体地,成像系统800中的镜头模块111位于滤波片模块112与传感器模块115之间。
图9是本申请另一个实施例的成像系统900的示意架构图。如图9所示,成像系统900可以包括成像系统500中的各个组成部分,不同之处在于,成像系统900中的镜头模块111,与成像系统500中的镜头模块111的位置不同。具体地,成像系统900中的镜头模块111位于滤波片模块112与传感器模块115之间。
图10是本申请另一个实施例的成像系统1000的示意架构图。如图10所示,成像系统1000可以包括成像系统600中的各个组成部分,不同之处在于,成像系统1000比成像系统600至少多一个镜头模块111,且该镜头模块111位于滤波片模块112远离传感器模块115的一侧。
图11是本申请另一个实施例的成像系统1100的示意架构图。如图11所示,成像系统1100可以包括成像系统700中的各个组成部分,不同之处在于,成像系统1100比成像系统700至少多一个镜头模块111,且该镜头模块111位于滤波片模块112远离传感器模块115的一侧。
图12是本申请另一个实施例的成像系统1200的示意架构图。如图12所示,成像系统1200可以包括成像系统800中的各个组成部分,不同之处在于,成像系统1200比成像系统800至少多一个镜头模块111,且该镜头模块111位于滤波片模块112远离传感器模块115的一侧。
图13是本申请另一个实施例的成像系统1300的示意架构图。如图13所示,成像系统1300可以包括成像系统900中的各个组成部分,不同之处在于,成像系统1300比成像系统900至少多一个镜头模块111,且该镜头模块111位于滤波片模块112远离传感器模块115的一侧。
图30是本申请另一个实施例的成像系统3000的示意架构图。如图30所示,成像系统3000可以包括成像系统1300中的各个组成部分,不同之处在于,成像系统3000中的马达模块114用于:接收马达控制单元122输出的控制信号,并根据该控制信号移动位于滤波片模块112远离传感器模块115的那一侧的镜头模块111和传感器模块115,以调整该镜头模块111与传感器模块115之间的相对位置,从而快速实现对焦和快速防抖。
上面介绍了本申请提出的成像系统的示意性结构。下面介绍本申请提出的滤光片模块的结构。在介绍本申请提出的滤光片模块之前,先介绍一下本申请的成像系统中的通光孔。
图33为本申请一个实施例的摄像头模组的示意性结构图。如图33所示,摄像头模组3300包括镜头3310、滤波片模块3320和传感器模块3330。图33中的虚线圆柱体区域以镜头3310和传感器模块3330的法线为中心,该虚线圆柱体区域即为通光孔3340。
可以理解的是,摄像头模组3300包括镜头3310、滤波片模块3320和传感器模块3330仅是一种示例,实际上,摄像头模组3300的结构可以是前述任意一种成像系统中的摄像头模组的结构。例如,摄像头模组3300中还可以包括马达模块,或者,滤波片3320与传感器模块3330之间可以包括另一个镜头模块,或者,摄像头模组中可以不包括镜头3310。
另外,可以理解的是,图33中示出的滤波片模块3320的形状仅是一种示例,该滤波片模块3320可以是图14至图19中任一所示的滤光片模块。
图14是本申请一个实施例的滤光片模块1400的示意性结构图。滤光片模块1400可以是图1至图13任意一个所示的摄像头模组中的滤光片模块。
滤光片模块1400包括红色窄带滤光片14-1、绿色窄带滤光片14-2、蓝色窄带滤光片14-3和高速电动转轮14-4,其中,红色窄带滤光片14-1、绿色窄带滤光片14-2和蓝色窄带滤光片14-3安装在高速电动转轮14-4上,高速电动转轮14-4不透光,仅有窄带滤光片透光。
滤光片模块1400的工作原理如下:高速电动转轮接收滤光片控制单元输出的控制信号,在控制信号的控制下高速转动,从而带动红色窄带滤光片14-1、绿色窄带滤光片14-2和蓝色窄带滤光片14-3转动;由于通光孔14-5的位置固定不变,因此,在高速电动转轮的带动下,红色窄带滤光片14-1、绿色窄带滤光片14-2和蓝色窄带滤光片14-3轮流覆盖通光孔14-5;红色窄带滤光片14-1、绿色窄带滤光片14-2和蓝色窄带滤光片14-3中每一个滤光片覆盖通光孔14-5时,通光孔14-5输出相应波段的目标光信号。也就是说,通过高速电动转轮的高速转动,实现滤光片模块1400输出的目标光信号在红色、绿色和蓝色波段之间的切换。
图16为本申请另一个实施例的滤光片模块1600的示意性结构图。滤光片模块1600包括红色窄带滤光片16-1、绿色窄带滤光片16-2、蓝色窄带滤光片16-3和高速电动转轮16-4,其中,红色窄带滤光片16-1、绿色窄带滤光片16-2和蓝色窄带滤光片16-3安装在高速电动转轮16-4上,高速电动转轮16-4不透光。滤光片模块1600为抽屉推拉式的机械切换结构。例如,在一个时段,红色窄带滤光片16-1被高速电动转轮16-4推进到通光孔所在的通道,而其他滤光片被拉出通光孔所在通道。滤光片模块1600可以是图1至图13任意一个所示的摄像头模组中的滤光片模块。
滤光片模块1600的工作原理如下:由于通光孔16-5的位置固定不变,因此,在抽拉式/平移式马达的带动下,红色窄带滤光片16-1、绿色窄带滤光片16-2和蓝色窄带滤光片16-3轮流覆盖通光孔16-5;红色窄带滤光片16-1、绿色窄带滤光片16-2和蓝色窄带滤光片16-3中每一个滤光片覆盖通光孔16-5时,通光孔14-5输出相应波段的目标光信号。也就是说,通过抽拉式/平移式马达的带动,实现滤光片模块1600输出的目标光信号在红色、绿色和蓝色波段之间的切换。
可以理解的是,滤光片模块1400或滤光片模块1600中的滤光片可以是其他波段的滤光片,例如,可以是红色窄带滤波片、黄色窄带滤波片和蓝色窄带滤波片,或者可以是红色窄带滤波片、蓝色窄带滤波片和全带滤波片,或者可以是红色窄带滤波片、绿色窄带滤波片、蓝色窄带滤波片和全带滤波片。
可以理解的是,为了实现更精细的光谱调制,得到质量更高的图像,可以增加滤光片。例如,如图15所示,可以在滤光片模块1400中增加滤光片14-6甚至更多的滤光片。例如,滤光片模块1400用于对红外光成像时,可以在高速电动转轮14-4上按照红外滤光片,该红外滤光片仅允许红外光通过。例如,如图17所示,滤光片模块1600用于对红外光成像时,可以在高速电动转轮16-4上按照红外滤光片16-6,该红外滤光片仅允许红外光通过。
基于图14和图15所示的滤光片模块,可以在通光孔14-5上覆盖红外截止滤光片,基于图16或图17所示的滤光片模块,可以在通光孔16-5上覆盖红外截止滤光片,该红外截止滤光片不随高速电动马达的转动而转动,以过滤掉目标光信号中的红外光,从而提高成像质量;或者,可以在不能完全过滤掉红外红的滤光片的表面覆盖红外截止滤光片,以过滤掉红外光。
图18为本申请另一个实施例的滤光片模块1800的示意性结构图。滤光片模块1800可以是图1至图13任意一个所示的摄像头模组中的滤光片模块。
滤光片模块1800包括渐变干涉式薄膜滤光片18-1和高速电动转轮18-2,渐变干涉式薄膜滤光片18-1固定在高速电动转轮18-2上。渐变干涉式薄膜滤光片18-1在可见光范围可以连续滤波。高速电动转轮18-2不透光,仅有渐变干涉式薄膜滤光片18-1透光,成像系统的通光孔如18-3所示。
渐变干涉式薄膜滤光片18-1沿箭头方向呈渐变色,且颜色逐渐由浅变深,因此其可以对可见光范围内的光线进行连续的滤波。例如,渐变干涉式薄膜滤光片18-1可以对波长位于380纳米至780纳米范围内的光线进行连续滤波。
如图18所示,以虚线为起点,沿箭头方向,滤光片18-1能够透过的光的波长连续变化。这样,当渐变干涉式薄膜滤光片18-1沿箭头相反方向连续转动时,滤光片模块1800能够过滤输出的目标光信号的波长连续变化。
高速电动转轮18-2可以带动滤光片18-1仅沿逆时针方向转动或者仅沿顺时针方向转动,也可以带动滤光片沿逆时针方向和顺时针方向交叉转动。
例如,高速电动转轮18-2可以带动滤光片18-1沿逆时针方向不停地旋转,从而实现连续滤波。
又如,高速电动转轮18-2可以带动滤光片18-1沿顺时针方向不停旋转,从而实现连续滤波。
又如,高速电动转轮18-2带动滤光片18-1沿逆时针方向旋转一圈之后,带动滤光片18-1沿顺时针方向旋转,并在沿顺时针方向旋转一圈之后,再带动滤光片沿逆时针方向旋转,从而实现连续滤波。
滤光片模块1800的工作原理与滤光片模块1400的工作原理类似,此处不再赘述。不同之处在于,渐变式滤光片每时每刻都有光通过,没有1400结构中两片滤光片之间的间隙。
可选地,若渐变干涉式薄膜滤光片18-1无法完全滤掉红外光,可以在通光孔18-3上安装单独的红外截止滤光片,该红外截止滤光片不随转轮转动。
可选地,滤光片模块1800用于对红外光成像时,渐变干涉式薄膜滤光片18-1在可见光到红外光连续可调。
图19为本申请另一个实施例的滤光片模块1900的示意性结构图。滤光片模块1900可以是图1至图13任意一个所示的摄像头模组中的滤光片模块。
滤光片模块1900包括渐变干涉式薄膜滤光片19-1和高速电动转轮19-2,渐变干涉式薄膜滤光片19-1固定在马达19-2上。渐变干涉式薄膜滤光片19-1沿长边在可见光范围连续滤波。马达19-2不透光,且仅有渐变干涉式薄膜滤光片19-1透光,成像系统的通光孔如19-3所示。
渐变干涉式薄膜滤光片19-1沿箭头方向呈渐变色,且颜色逐渐由浅变深,因此其可以对可见光范围内的光线进行连续的滤波。例如,渐变干涉式薄膜滤光片19-1可以对波长位于380纳米至780纳米范围内的光线进行连续滤波。
如图19所示,沿箭头方向,滤光片19-1能够透过的光的波长连续变化。这样,当渐变干涉式薄膜滤光片19-1沿箭头相反方向连续转动时,滤光片模块1900能够连续过滤输出的目标光信号的波长连续变化。
在一些示例中,马达19-2可以带动滤光片19-1沿箭头方向移动和沿箭头相反方向移动。例如,马达19-2带动滤光片19-1沿箭头方向移动,以便于滤光片19-1不同颜色部分按照从左到右的顺序从通光孔19-3上滑过;然后马达19-2带动滤光片19-1沿箭头反方向移动,以便于滤光片19-1不同颜色部分按照从右到左的顺序从通光孔19-3上滑过。
滤光片模块1900的工作原理与滤光片模块1400的工作原理类似,此处不再赘述。不同之处在于,渐变式滤光片可以连续滤光,没有1400结构中两片滤光片之间的间隙。
可选地,若渐变干涉式薄膜滤光片19-1无法完全滤掉红外光,可以在通光孔19-5上安装单独的红外截止滤光片,该红外截止滤光片不随转轮转动。
可选地,滤光片模块1900用于对红外光成像时,渐变干涉式薄膜滤光片19-1在可见光到红外光连续可调。
图20为本申请另一个实施例的滤光片模块2000的示意性结构图。滤光片模块2000可以是图1至图13任意一个所示的摄像头模组中的滤光片模块。
滤光片模块2000包含反射镜20-1、反射镜20-2、高速移动马达20-3,固定结构20-4。反射镜20-1和反射镜20-2沿光轴方向依次排列,光轴可以理解为垂直通过反射镜20-1和反射镜20-2的光柱(光束)的中心线。反射镜20-2通过固定结构20-4固定在滤光片模块2000中的固定位置,反射镜20-1在高速移动马达20-3的带动下沿光轴方向远离或接近反射镜20-1。
反射镜20-1可以将入射到反射镜20-1的光线反射到反射镜20-2,反射镜20-2也可以将入射到反射镜20-2的光线反射到反射镜20-1。例如,反射镜20-1和反射镜20-2相对的内表面都具有高反射率。
基于法布里-珀罗(Fabry–Pérot,F-P)干涉原理,当反射镜20-1与反射镜20-2的两个反射面严格平行,且来自光源任一点的单色光以入射角θ照射到反射镜20-1和反射镜20-2时,透射光是许多平行光束的叠加,且任意一对相邻光束的光程差为2*n*l*cosθ,反射镜20-1与反射镜20-2的透射率由该光程差决定,其中,n指反射镜20-1与反射镜20-2之间介质的折射率,l指反射镜20-1与反射镜20-2之间的距离,θ指入射角。
当光程差为目标光信号的波长的整数倍时,该反射镜20-1和反射镜20-2对目标光信号的透射率最大。此时,可以认为滤光片模块2000仅能通过此目标光信号,而反射其他波长的光。
因此,可以通过高速移动马达20-3移动反射镜20-1,以改变反射镜20-1与反射镜20-2之间的距离,从而可以调节反射镜20-1与反射镜20-2的透射光的光程差,进而可以调节能够透过反射镜20-1与反射镜20-2的光的透射率,最终使得滤光片模块2000输出所需波长的目标光信号。
在另一些示例中,反射镜20-2也可以设置在高速移动马达上且随高速移动马达的移动而移动。这些示例中,只需保证反射镜20-1和反射镜20-2随高速移动马达移动时,相互之间的距离能够发生改变,以使得光程差能够达到目标光信号的波长的整数倍即可。
滤光片模块2000可以在整个可见光范围连续可调,或者可以在可见光范围和近红外光范围内连续可调。滤光片模块2000在整个可见光范围连续可调时,反射镜20-1、20-2通常可以采用镀银(Ag)反射镜。
高速移动马达20-3可以采用基于MEMs或者Peizo的高速移动马达。高速移动马达20-3可以接收滤光片控制单元输出的控制信号,该控制信号用于控制高速移动马达20-3移动的距离。
可选地,若不考虑利用红外光来进行图像处理,如图21所示,可以增加红外截止滤光片20-5来滤除红外光。其中,红外截止滤光片20-5完全覆盖反射镜20-2的通光口径,这样才能实现仅容许可见光波段通过的目的。
图22为本申请另一个实施例的滤光片模块2200的示意性结构图。滤光片模块2200可以是图1至图13任意一个所示的摄像头模组中的滤光片模块。
滤光片模块2200包括线性偏光片22-1、相位延迟单元22-2、液晶盒22-3、检偏器22-4。线性偏光片22-1、相位延迟单元22-2、液晶盒22-3、检偏器22-4沿光轴方向依次排开,光轴可以理解为垂直通过线性偏光片22-1的光柱(光束)的中心线。
光信号经过线性偏光片22-1转换成线偏光,线偏光在相位延迟器22-2和液晶盒22-3的作用下发生双折射效应,产生相位差,从而使得线偏光偏振方向旋转,进而使得只有与检偏器22-4方向一致的光信号可以通过。相同的液晶旋向对于不同的波段的光信号引入的相位差不同,因此可以向液晶盒输出变化的电压,通过可变电压控制液晶盒筛选出对应的波段的目标光信号。液晶盒22-3可以接收滤光片控制单元输出的控制信号,该控制信号用于控制液晶盒22-3的输入电压。
可选地,可以在滤光片模块2200中添加红外截止滤光片,以过滤掉红外光,从而提高成像质量。在可调滤光片模块2200内,对红外截止滤光片的位置无特殊要求,只要能覆盖整个通光孔区域即可。在一个示例中,如图23所示,红外截止滤光片22-5沿光轴方向排列在检偏器之后。
可选地,如图24所示,将图22所示的结构(图24中一个虚线框内结构)当作一个整体单元,并将多个该结构沿着光轴方向依次排列,得到新的滤光片模块2400,该滤光片结构可以输出更精细的波段光信号。可选地,可以在滤光片模块2400中添加红外截止滤光片,以过滤掉红外光,从而提高成像质量。
在可调滤光片模块2400内,对红外截止滤光片的位置无特殊要求,只要能覆盖整个通光孔区域即可。在一个示例中,红外截止滤光片24-5沿光轴方向排列在最后一个检偏器之后。
图25为本申请另一个实施例的滤光片模块2500的示意性结构图。滤光片模块2500可以是图1至图13任意一个所示的摄像头模组中的滤光片模块。
滤光片模块2500包含线性偏光片25-1、相位延迟单元25-2、声光可调滤光器(AOTF)25-3、检偏器25-4。线性偏光片25-1、相位延迟单元25-2、声光可调滤光器(AOTF)25-3、检偏器25-4沿光轴方向依次排列,光轴可以理解为垂直通过线性偏光片25-1的光柱(光束)的中心线。相位延迟单元也称为相位延迟器。
入射光信号经过线性偏光片25-1转换成线偏光,线偏光在相位延迟器25-2和AOTF25-3的作用下发生双折射效应,产生相位差,使得线偏光偏振方向旋转,这样,只有与检偏器25-4方向一致的光信号可以通过。其中,AOTF利用射频进行驱动,同一个射频(radiofrequency,RF)信号对于不同波长引入的相位差不同,因此可以通过改变射频信号的频率控制AOTF筛选出不同波段的光。
其中,相位延迟器可以采用液晶相位延迟器,AOTF的材料可以选择二氧化碲(TeO2)。
可选地,为了提高成像质量,可以在滤光片模块中添加红外截止滤光片。在可调滤光片模块2600内,对红外截止滤光片的位置无特殊要求,只要能覆盖整个通光孔区域即可。在一个示例中,如图26所示,红外截止滤光片25-5沿光轴方向排列在检偏器之后。
本申请各个实施例中,因为滤光片模块可以分时输出不同波段的目标信号光,传感器模块无需进行插值运算即可获取完整单一色图像,从而可以避免因插值运算而导致图像质量下降的问题。
图27为本申请一个实施例的成像方法的示意性流程图。该成像方法可以由图1至图13中任一所示的成像系统来执行。
图27所示的成像方法包括S2710至S2780。可以理解的是,本申请提出的成像方法中可以包括更多或更少的步骤。例如,执行成像方法的成像系统中不包含马达模块和马达控制单元时,该成像方法中不包括S2750和S2740。
S2710,启动成像应用。例如,用户点击手机上成像应用的图标,手机启动该成像应用。
S2720,滤光片控制单元向滤光片模块输出控制信号,以控制滤光片模块输出目标光信号。
具体地,滤光片控制单元根据设定的光谱模式控制滤光片模块进行光谱筛选。光谱模式包含但不局限于以下模式:RGB模式,所需波段包括红、绿和蓝三个波段;RYB模式,所需波段包括红、黄、蓝三个波段;RWB模式,所需波段包括红、蓝和全带通三个波段;RGBW模式,所需波段包括红、绿、蓝、全带通波段;在其他一些特殊的光谱模式中,所需波段除了可见光中的波段以外,还可以包括近红外光波段,例如用于后期图像处理,以在ISP里通过计算的方法获得更好的成像质量。其中,每个波段的光谱范围可以根据实际应用进行微调。
传感器模块接受光信号,将光信号转换为电信号(即图像原始数据)并传递给ISP。在一些设计中,传感器模块的感光积分时间和周期与滤光片模块中的各种滤光片的滤光时间和周期配合,具体地,传感器模块对设定的单波段内的目标光信号进行连续积分,对各个光谱模式中波段切换过程中的光信号不进行探测。传感器模块对设定的单波段内的目标光信号进行连续积分得到的数据可以称为窄波段图片。
S2730,ISP从传感器模块接收图像原始数据,并对图像原始数据进行处理。例如,传感器模块将窄波段图片组传给ISP,ISP在整个彩色图像处理通路(color imageprocessing pipeline)中,对窄波段图片进行预处理、白平衡、色彩还原、Gamma校正和3DLut校正等处理,最终完成色彩相关的调试,得到彩色图像。
S2740,马达控制单元根据陀螺仪反馈信息向马达模块输出控制信息,以使得马达模块在该控制信息的控制下调整镜头模块与传感器模块之间的距离。若成像系统中没有马达模块和马达控制单元,则可以不执行该步骤。
S2750,马达控制单元根据ISP输出的对焦信息向马达模块输出控制信息,以使得马达模块在该控制信息的控制下调整镜头模块与传感器模块之间的距离。若成像系统中没有马达模块和马达控制单元,则可以不执行该步骤。
S2760,显示模块显示ISP处理得到的彩色图像。
S2770,判断是否进行拍照或录像。例如用户点击用户界面上的拍照或录像按键时,确定进行拍照或录像。
S2780,若确定进行拍照或录像,则存储模块保存ISP处理得到的彩色图像;否则重新执行S2720。
本申请实施例中,由于ISP从传感器模块接收的窄波段图片为单一色图像,因此整个ISP色彩通路中不需要通过插值运算(即去马赛克处理)即可获取完整单一色图像,从而可以有效的提高图像分辨率,避免摩尔条纹的产生,最终提高成像质量。
本申请还提供了一种成像方法,该成像方法的一种示意性流程图如图31所示。图31所示的成像方法可以包括S3101至S3107。
该成像方法可以由ISP执行。例如,ISP在彩色图像处理通路中对窄波段图像进行处理以得到彩色图像。这n个窄波段图像可以是采用包含前述图14至图26中任一图所示的滤光片模块的摄像头模组拍摄得到的图像。其中,窄波段图像1至窄波段图像n与ISP所属的成像系统的光谱模式所包括的n个波段一一对应,窄波段图像i是指滤波片模块过滤出所述n个波段中的第i个波段的目标光信号之后,传感器模块对该第i个波段的目标光信号连续积分得到的图像数据。例如,n等于3时,窄波段图像1对应红色波段,窄波段图像2对应绿色波段、窄波段图像3对应蓝色波段。
S3101,对n个窄波段图像进行预处理(preprocessing)。
此处的预处理可以指对传感器模块采集的图像数据进行非颜色相关的处理,例如,对进行噪声抑制或锐化等相关处理。
例如,有些可调滤光片,要实现三通道(n=3),但是实际上这种滤光片采集时候实际采集的通道要更精细更多(n>3),可以在预处理阶段通过相邻通道对应的图像信息相加的方式,获取最终的通道模式。
其中,相邻通道对应的图像信息相加,可以抵消随机噪声,提高得到的图像的抗噪声能力。也就是说,该预处理方式可以提高多通道滤光片的感光能力。
S3102,对预处理后的图像进行白平衡。
白平衡可以还原被拍摄景物的色彩,使在不同光源条件下拍摄的景物同人眼观看的画面色彩相近。
其中,若预处理之后得到三个通道的图像数据,则进行白平衡处理时,通常需要三个数据矩阵,这三个数据矩阵与这三个通道的图像数据一一对应,这三个数据矩阵的获取方式可以参考现有技术。
若预处理之后得到的是三个以上通道的图像数据,则进行白平衡处理时,通常需要三个以上数据矩阵,这三个以上的数据矩阵与这三个以上通道的图像数据一一对应,这三个以上的数据矩阵的获取方式可以参考上述三个数据矩阵的获取方式,此处不再赘述。
S3103,使用色彩矫正矩阵对白平衡后的图像进行色彩还原。
色彩矫正可以确保图像的色彩能够被较为精确地再现拍摄现场人眼看到的情况。其中,色彩还原使用的色彩校正矩阵(color correction matrix,CCM)的维度可以由预处理后得到的图像通道数和显示系统的基色数量。
例如,预处理得到n个通道的图像数据,且显示系统为m基色系统时,对应的CCM是个m*n的矩阵,m和n为正整数。
例如,预处理得到三个通道的图像数据,且显示系统为三基色系统时,对应的CCM是一个3*3的矩阵。
本申请实施例中的CCM的获取方式可以参考现有技术中3*3的CCM的获取方式,此处不再赘述。
S3104,对色彩还原得到的图像进行伽马矫正。
本申请的实施例中,若将预处理得到的n个窄波段图像中的第i个图像记为矩阵λi,将对该第i个图像进行白平衡处理所使用的矩阵记为awbi,则对预处理得到的n窄波段图像进行白平衡、色彩校正和伽马校正的一种示例性数学表达式如下:
其中,中的λi表示预处理得到的n个通道中的第i个通道的图像数据矩阵,i为小于或等于n的正整数;/>表示CCM,m表示显示系统的基色数量,()γ表示伽马处理,/>中的λj表示进行白平衡、色彩校正和伽马校正得到的m个基色图像数据矩阵中的第j个基色图像数据矩阵,j为小于或等于m的矩阵。
S3105,对伽马矫正得到的图像进行3D Lut矫正。
S3106,对3D Lut矫正得到的图像进行后处理(post processing)。后处理与前处理类似,此处不再赘述。
S3107,显示后处理得到的图像,和/或,存储后处理得到的图像。其中,在存储图像之前,可以对图像先进行压缩,以节省存储空间。
可以理解的是,图31所示的操作仅是示例,本申请提出的成像方法中可以包括更多或更少的操作,或者,可以执行类似的操作。
例如,如图32所示,ISP进行彩色图像处理时,不仅对窄波段图像1至窄波段图像n进行处理,还可以对红外(infrared radiation,IR)波段图像进行处理。其中,红外波段图像可以用于低照度下的灰度成像,以及用于可见光图像更精准的色彩还原。
本申请还提供了一种成像方法,该成像方法可以包括S2720和S2730。可选地,该成像方法还可以包括S2740;可选地,还可以包括S2750,可选地,还可以包括2760和/或S2780。
本申请还提供了如图1至图13中任意一个所示的成像系统中的摄像头模组。
本申请还提供了一种多模组摄像头,该该模组摄像头包括多个摄像头模组,其中至少一个摄像头模组为图1至图13中任意一个所示的成像系统中的摄像头模组。可选地,其中至少一个摄像头模组可以为传统摄像头模组,例如基于拜耳阵列传感器或基于弗文(foveon)传感器的摄像头模组。这样,可以提高成像质量以及联合实现双目测距。
该多模组摄像头包括传统摄像头模组和如图1至图13中任意一个所示的成像系统中的摄像头模组时的成像方法的一种示意性流程图如图28所示。其中,本申请新提出的摄像头模组称为可调摄像头模组。
S2810,启动成像应用。该步骤可以参考S2710。
S2820,启动传统摄像头模组进行预览对焦。该步骤可以参考现有技术。
S2830,判断是否使用可调摄像头模组进行拍照或录像,是则执行S2840,否则重复执行S2850。
S2840,使用可调摄像头模组进行拍照或录像。该步骤的具体实现方式可以参考图27所示的成像方法中的S2720至S2780。
本申请还提供一种成像装置,该成像装置包括图1至图13任一所示的成像系统中的处理模块,甚至可以包括其中的存储模块和/或显示模块。
本申请还提供一种终端设备,该终端设备包括图1至图13中任一所示的成像系统。
本申请还提供一种模式设置方法,该方法包括:显示模式选择界面,该模式选择界面上包括多种模式选项;根据用户在模式选择界面上的输入信息确定用户选择的模式,例如,用户点击的选项对应的模式即为用户选择的模式;根据用户选择的模式设置光谱模式,不同的光谱模式对应不同波段的光信号。
本申请还提供一种调整摄像头模组的光谱模式的方法,该方法包括:接收用于指示设置所述摄像头模组的光谱模式的指示信息,响应于所述指示信息,输出多个光谱模式中每个光谱模式的模式信息,所述每个光谱模式的模式信息包括所述每个光谱模式的名称信息。
其中,所述多个光谱模式中不同的光谱模式下,所述摄像头模组的滤光通道不同。例如,所述多个光谱模式包括但不仅限于:普通模式、高精度模式、暗光模式、印刷模式等。通常情况下,默认用户选择的是普通模式。
普通模式下,可调滤光片采用与传统拜耳滤光片相同的滤光策略,采用红,绿,蓝三通道滤光;高精度模式下,可调滤光片采用至少四通道滤光,光谱精细程度高于传统拜耳滤光片;暗光模式下,可调滤光片的滤光通道中一般至少含有一个宽于RGB单色波段的通道,例如RYB,RWB等。可选地,这多个光谱模式还可以包括专家模式,专家模式主要针对更专业的人群的需求,在专家模式中用户可以自定义滤光的通道数以及每个通道的波段。
该方法还可以包括:接收第二信息,所述第二信息用于指示将所述摄像头模组的光谱模式设置为所述多个光谱模式中的目标光谱模式;响应于所述第二信息,将所述摄像头模组的光谱模式设置为所述目标光谱模式。其中,目标光谱模式即为用户从所述多个光谱模式中选择的光谱模式。
在一些设计中,可以通过界面的形式输出这多个光谱模式的模式信息,一种示例如图29所示。或者,也可以通过其他方式输出这多个光谱模式的模式信息,例如,通过语音播放的方式。
在一些设计中,每个光谱模式的模式信息还可以包括该光谱模式对应的波段或者滤光通道信息。
图29为本申请一个实施例的模式设置界面的示意图。该界面中包括以下几个光谱模式选项:普通模式、高精度模式、暗光模式、印刷模式和专家模式,其中,默认设置为普通模式。每个模式名称后的图标为可选中图标,用户选中其中哪个图标,表示用户将光谱模式设置为该图标对应的模式。专家模式通过双选开关控制,一般处于关闭状态。
图34是本申请一个实施例的成像装置的示意性结构图。该成像装置3400包括获取模块3410和处理模块3420。成像装置3400可以用于实现上述任意成像方法。
例如,获取模块3410用于:获取多组图像原始数据,所述多组图像原始数据为摄像头模组对不同时间采集的不同波段的目标光信号进行光电转换得到的图像原始数据。处理模块3420用于对所述多组图像原始数据进行色彩调试处理,以得到彩色图像,所述多组图像原始数据中不同组的图像原始数据对应的不同波段内的目标光信号。
在一些可能的实现方式中,所述处理模块3420具体用于:对所述多组图像原始数据进行白平衡、色彩还原、伽马矫正和三维色彩查找处理。
图35是本申请另一个实施例的成像装置的示意性结构图。该装置3500包括存储器3510和处理器3520。
存储器3510用于存储程序。处理器3520用于执行所述存储器3510存储的程序,当所述存储器3510存储的程序被执行时,所述处理器3520用于执行前述任意一种成像方法。
图36是本申请一个实施例的调整摄像头模组的光谱模式的装置的示意性结构图。该装置3600包括输入模块3610和输出模块3620,可选地,还可以包括处理模块3630。装置3600可以用于实现上述调整摄像头模组的光谱模式的方法。
例如,输入模块3610用于:接收用于指示设置所述摄像头模组的光谱模式的指示信息;输出模块3620用于:响应于所述指示信息,输出多个光谱模式中每个光谱模式的模式信息,所述每个光谱模式的模式信息包括所述每个光谱模式的名称信息。
可选地,输入模块3610还可以用于:接收第二信息,所述第二信息用于指示将所述摄像头模组的光谱模式设置为所述多个光谱模式中的目标光谱模式;处理模块3630用于:响应于所述第二信息,将所述摄像头模组的光谱模式设置为所述目标光谱模式,其中,目标光谱模式即为用户从所述多个光谱模式中选择的光谱模式。
图37是本申请一个实施例的调整摄像头模组的光谱模式的装置的示意性结构图。该装置3700包括存储器3710和处理器3720。
存储器3710用于存储程序。处理器3720用于执行所述存储器3710存储的程序,当所述存储器3710存储的程序被执行时,所述处理器3720用于执行前述调整摄像头模组的光谱模式的方法。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
应理解,本申请实施例中的处理器可以为中央处理单元(central processingunit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(digital signalprocessor,DSP)、专用集成电路(application specific integrated circuit,ASIC)、现场可编程门阵列(field programmable gate array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
应理解,本申请中的“/”表示“或”的意思。其中“和/或”可以包括三种并列的方案。例如“A和/或B”可以包括:A,B,A和B。应理解,本申请中的“A或B”可以包括:A,B,A和B。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (8)
1.一种摄像头模组,其特征在于,包括:滤光片模块、传感器模块和第二镜头模块,所述第二镜头模块位于所述滤光片模块和所述传感器模块之间;
所述滤光片模块用于:在不同的时间,向所述传感器模块上的同一像素点输出入射到所述滤光片模块的光信号中不同波段的目标光信号;
所述第二镜头模块用于:将所述滤光片输出的目标光信号输出到所述传感器模块,并增大所述目标光信号在所述传感器模块上的覆盖范围;
所述传感器模块用于:将入射到所述传感器模块的所述目标光信号转换为电信号并输出;
其中,所述滤光片模块包括红外截止滤光片、移动模块和沿第一方向排列的多个滤波片;
所述滤波片用于输出入射到所述滤波片上的光信号中的所述目标光信号,所述多个滤波片中不同的滤波片输出的所述目标光信号的波段不同;
所述移动模块用于:在不同的时间的一个时段内,将所述多个滤波片中的一个滤波片推进至能够接收所述光信号的目标位置,并将所述多个滤波片中的其他滤波片拉出所述目标位置;
所述红外截止滤光片用于:在所述目标光信号入射到所述传感器模块之前,过滤掉所述目标光信号中的红外光;
所述第一方向垂直于与所述滤光片被推拉的方向。
2.如权利要求1所述的摄像头模组,其特征在于,所述摄像头模组还包括:第一镜头模块;
其中,所述第一镜头模块用于:将入射到所述第一镜头模块的光信号输出到所述滤光片模块。
3.如权利要求2所述的摄像头模组,其特征在于,所述第一镜头模块包括以下一项或多项:塑料镜片,玻璃镜片,衍射光学元件DOE,超透镜,镜头。
4.如权利要求2所述的摄像头模组,其特征在于,所述摄像头模组还包括马达模块;
所述马达模块用于:控制所述第一镜头模块和/或所述传感器模块移动,以实现所述摄像头模组的对焦功能和/或防抖功能。
5.如权利要求1所述的摄像头模组,其特征在于,所述摄像头模组还包括第二马达模块;
所述第二马达模块用于:控制所述第二镜头模块和/或所述传感器模块移动,以实现所述摄像头模组的对焦功能和/或防抖功能。
6.如权利要求1所述的摄像头模组,其特征在于,所述第二镜头模块包括以下一项或多项:塑料镜片,玻璃镜片,衍射光学元件DOE,超透镜,镜头。
7.如权利要求1至6中任一项所述的摄像头模组,其特征在于,所述传感器模块包括全带通传感器或宽带通传感器。
8.一种成像系统,其特征在于,包括如权利要求1至7中任一项所述的摄像头模组。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010018843.XA CN113099078B (zh) | 2020-01-08 | 2020-01-08 | 摄像头模组、成像方法和成像装置 |
EP20911551.8A EP4075781A4 (en) | 2020-01-08 | 2020-11-16 | CAMERA MODULE, IMAGE METHOD AND IMAGE DEVICE |
PCT/CN2020/128975 WO2021139401A1 (zh) | 2020-01-08 | 2020-11-16 | 摄像头模组、成像方法和成像装置 |
US17/791,471 US20230045724A1 (en) | 2020-01-08 | 2020-11-16 | Camera Module, Imaging Method, and Imaging Apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010018843.XA CN113099078B (zh) | 2020-01-08 | 2020-01-08 | 摄像头模组、成像方法和成像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113099078A CN113099078A (zh) | 2021-07-09 |
CN113099078B true CN113099078B (zh) | 2023-06-27 |
Family
ID=76664124
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010018843.XA Active CN113099078B (zh) | 2020-01-08 | 2020-01-08 | 摄像头模组、成像方法和成像装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230045724A1 (zh) |
EP (1) | EP4075781A4 (zh) |
CN (1) | CN113099078B (zh) |
WO (1) | WO2021139401A1 (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112492182B (zh) * | 2020-12-11 | 2022-05-20 | 维沃移动通信有限公司 | 摄像模组、电子设备、拍摄控制方法及装置 |
CN113747014B (zh) * | 2021-09-03 | 2023-12-26 | 维沃移动通信(杭州)有限公司 | 摄像头模组、电子设备和图像采集方法 |
CN113905164A (zh) * | 2021-10-09 | 2022-01-07 | 奕目(上海)科技有限公司 | 光场成像系统以及通过光场成像系统采集光场信息的方法 |
CN114384052A (zh) * | 2021-12-22 | 2022-04-22 | 重庆盾银科技有限公司 | 一种跟踪成像系统及成像方法 |
TW202346911A (zh) * | 2022-02-14 | 2023-12-01 | 美商圖納堤克斯股份有限公司 | 使用分色超穎光學計算相機進行高品質成像之系統及方法 |
CN114845017A (zh) * | 2022-04-13 | 2022-08-02 | Oppo广东移动通信有限公司 | 成像模组、电子设备、成像方法和存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104159049A (zh) * | 2014-08-15 | 2014-11-19 | 北京思比科微电子技术股份有限公司 | 一种图像传感器及其工作方法 |
CN207164435U (zh) * | 2017-08-24 | 2018-03-30 | 普联技术有限公司 | 一种摄像装置 |
CN108449531A (zh) * | 2018-03-26 | 2018-08-24 | 京东方科技集团股份有限公司 | 悬浮触控摄像头模组、电子设备及触控方法 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7477309B2 (en) * | 2002-07-10 | 2009-01-13 | Lockheed Martin Corporation | Infrared camera system and method |
JP2004159293A (ja) * | 2002-09-11 | 2004-06-03 | Casio Comput Co Ltd | 撮像記録装置、画像処理装置、撮像記録制御プログラム及び画像処理プログラム、撮像記録方法並びに画像処理方法 |
JP2009121986A (ja) * | 2007-11-15 | 2009-06-04 | Omron Corp | 分光装置 |
JP2013181912A (ja) * | 2012-03-02 | 2013-09-12 | Seiko Epson Corp | 成分分析装置 |
CN202600333U (zh) * | 2012-04-20 | 2012-12-12 | 中国科学院遥感应用研究所 | 一种波段可调的多光谱ccd相机 |
CN103703770B (zh) * | 2012-08-02 | 2016-11-02 | 松下知识产权经营株式会社 | 偏振彩色摄像装置 |
EP3722758B1 (en) * | 2012-11-13 | 2023-11-01 | Viavi Solutions Inc. | Portable spectrometer |
CN105452825B (zh) * | 2013-06-24 | 2018-05-29 | 科技创新动量基金(以色列)参股有限公司 | 一种用于彩色图像获取的系统和方法 |
CN103698010B (zh) * | 2013-12-31 | 2016-05-04 | 中国科学院光电研究院 | 一种微型化线性渐变滤光片型成像光谱仪 |
CN105987754B (zh) * | 2015-03-04 | 2020-06-12 | 中国人民解放军电子工程学院 | 一种集成高光谱和偏振高光谱探测能力的成像仪 |
CN105467490A (zh) * | 2015-12-28 | 2016-04-06 | 北京天诚盛业科技有限公司 | 一种滤光模组、成像装置及移动终端 |
CN106657802B (zh) * | 2016-12-19 | 2019-07-12 | 北京空间机电研究所 | 一种转轮式多光谱相机自动曝光调节系统及调节方法 |
CN107395940B (zh) * | 2017-08-30 | 2020-03-06 | Oppo广东移动通信有限公司 | 滤光组件、成像装置、电子设备和电子设备的成像方法 |
CN107561684B (zh) * | 2017-09-30 | 2021-02-23 | Oppo广东移动通信有限公司 | 滤光片、镜头模组和成像模组 |
CN108827886A (zh) * | 2018-03-16 | 2018-11-16 | 上海帆声图像科技有限公司 | 一种成像装置 |
CN209182232U (zh) * | 2018-11-23 | 2019-07-30 | 深圳市雷泛科技有限公司 | 光谱仪 |
CN110595616A (zh) * | 2019-08-23 | 2019-12-20 | 南京理工大学 | 采用线性渐变滤光片和狭缝的高光谱成像装置及成像方法 |
-
2020
- 2020-01-08 CN CN202010018843.XA patent/CN113099078B/zh active Active
- 2020-11-16 WO PCT/CN2020/128975 patent/WO2021139401A1/zh unknown
- 2020-11-16 US US17/791,471 patent/US20230045724A1/en active Pending
- 2020-11-16 EP EP20911551.8A patent/EP4075781A4/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104159049A (zh) * | 2014-08-15 | 2014-11-19 | 北京思比科微电子技术股份有限公司 | 一种图像传感器及其工作方法 |
CN207164435U (zh) * | 2017-08-24 | 2018-03-30 | 普联技术有限公司 | 一种摄像装置 |
CN108449531A (zh) * | 2018-03-26 | 2018-08-24 | 京东方科技集团股份有限公司 | 悬浮触控摄像头模组、电子设备及触控方法 |
Also Published As
Publication number | Publication date |
---|---|
EP4075781A1 (en) | 2022-10-19 |
CN113099078A (zh) | 2021-07-09 |
EP4075781A4 (en) | 2023-01-11 |
WO2021139401A1 (zh) | 2021-07-15 |
US20230045724A1 (en) | 2023-02-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113099078B (zh) | 摄像头模组、成像方法和成像装置 | |
KR101871034B1 (ko) | 플렌옵틱 이미징 장치 | |
KR100848763B1 (ko) | 멀티 스펙트럼 화상 촬영 장치 및 어댑터 렌즈 | |
US7112779B2 (en) | Optical apparatus and beam splitter | |
CN102203656B (zh) | 照相机和照相机系统 | |
CN102474648B (zh) | 三维摄像装置 | |
JP3943848B2 (ja) | 撮像装置 | |
CN102484723B (zh) | 固体摄像元件、摄像装置以及信号处理方法 | |
US9008412B2 (en) | Image processing device, image processing method and recording medium for combining image data using depth and color information | |
CN103636199B (zh) | 三维摄像装置、图像处理装置、图像处理方法 | |
CN108291800A (zh) | 光谱成像方法和系统 | |
JP2008211631A (ja) | 焦点検出素子、焦点検出装置および撮像装置 | |
CN103004218B (zh) | 三维摄像装置、摄像元件、透光部、及图像处理装置 | |
JP2017208585A (ja) | 撮像装置および画像データ生成プログラム | |
CN102474649B (zh) | 三维摄像装置及透光板 | |
JP2011017827A (ja) | フィルタ装置ならびにこれを備える撮影レンズおよび撮影装置 | |
CN113259546B (zh) | 图像获取装置和图像获取方法 | |
JP2001078212A (ja) | 撮像装置 | |
CN112203065A (zh) | 图像生成装置及电子设备、图像生成方法 | |
JP2001078217A (ja) | 撮像装置 | |
JP2001078213A (ja) | 撮像装置 | |
JP2004157059A (ja) | 撮像装置およびレンズ光学系 | |
JP2005303520A (ja) | キャリブレーション用カメラ装置 | |
JP2002158913A (ja) | 撮像装置及び撮像方法 | |
JP5040628B2 (ja) | 撮像装置、印刷システム、撮像装置制御プログラム及び撮像装置制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |