CN106504218A - 控制方法、控制装置及电子装置 - Google Patents
控制方法、控制装置及电子装置 Download PDFInfo
- Publication number
- CN106504218A CN106504218A CN201611092363.8A CN201611092363A CN106504218A CN 106504218 A CN106504218 A CN 106504218A CN 201611092363 A CN201611092363 A CN 201611092363A CN 106504218 A CN106504218 A CN 106504218A
- Authority
- CN
- China
- Prior art keywords
- pixel
- image
- unit
- merging
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 77
- 238000009434 installation Methods 0.000 title claims abstract description 39
- 238000006243 chemical reaction Methods 0.000 claims description 68
- 230000008859 change Effects 0.000 claims description 35
- 238000003384 imaging method Methods 0.000 claims description 31
- 230000009467 reduction Effects 0.000 claims description 24
- 238000012545 processing Methods 0.000 claims description 21
- 230000008569 process Effects 0.000 claims description 13
- 238000004364 calculation method Methods 0.000 claims description 11
- 238000012937 correction Methods 0.000 claims description 7
- 238000003491 array Methods 0.000 claims description 5
- 230000006870 function Effects 0.000 abstract description 10
- 238000010586 diagram Methods 0.000 description 14
- 238000012546 transfer Methods 0.000 description 7
- 238000005286 illumination Methods 0.000 description 6
- 239000003086 colorant Substances 0.000 description 5
- 206010034960 Photophobia Diseases 0.000 description 4
- 208000013469 light sensitivity Diseases 0.000 description 4
- 239000000463 material Substances 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000012512 characterization method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 210000003733 optic disk Anatomy 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 102220124597 rs374821619 Human genes 0.000 description 1
- 102220078862 rs77460377 Human genes 0.000 description 1
- 102220062292 rs786203886 Human genes 0.000 description 1
- 102220178161 rs886049987 Human genes 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
- H04N25/58—Control of the dynamic range involving two or more exposures
- H04N25/581—Control of the dynamic range involving two or more exposures acquired simultaneously
- H04N25/585—Control of the dynamic range involving two or more exposures acquired simultaneously with pixels having different sensitivities within the sensor, e.g. fast or slow pixels or pixels having different sizes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/62—Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2209/00—Details of colour television systems
- H04N2209/04—Picture signal generators
- H04N2209/041—Picture signal generators using solid-state devices
- H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
- H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
- H04N2209/046—Colour interpolation to calculate the missing colour values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Color Television Image Signal Generators (AREA)
- Image Processing (AREA)
Abstract
本发明公开一种电子装置的控制方法。首先,控制图像传感器输出合并图像。然后,识别合并图像是否存在人脸。最后,当存在人脸时,将合并图像转化成合并真彩图像。此外,本发明还公开一种控制装置和电子装置。本发明的控制方法、控制装置及电子装置通过识别图像中是否出现人脸,控制图像传感器输出合适的图像,避免图像传感器固定输出高质量图像带来的大量工作,从而减少电子装置工作时长,提高工作功率,提高用户满意度。
Description
技术领域
本发明涉及成像技术,特别涉及一种控制方法、控制装置及电子装置。
背景技术
现有的一种图像传感器包括感光像素单元阵列和设置在感光像素单元阵列上的滤光片单元阵列,每个滤光片单元阵列覆盖对应一个感光像素单元,每个感光像素单元包括多个感光像素。工作时,可以控制图像传感器曝光输出合并图像,合并图像可以通过图像处理方法转化成合并真彩图像并保存下来。合并图像包括合并像素阵列,同一感光像素单元的多个感光像素合并输出作为对应的合并像素。如此,可以提高合并图像的信噪比,然而,合并图像的解析度降低。当然,也可以控制图像传感器曝光输出高像素的色块图像,色块图像包括原始像素阵列,每个感光像素对应一个原始像素。然而,由于同一滤光片单元对应的多个原始像素颜色相同,同样无法提高色块图像的解析度。因此,需要通过插值计算的方式将高像素色块图像转化成高像素的仿原图像,仿原图像可以包括呈贝尔阵列排布的仿原像素。仿原图像可以通过图像处理方法转化成仿原真彩图像并保存下来。然而,插值计算耗费资源且耗时,而且并非所有场景都适用或者需要输出仿原真彩图像。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一。为此,本发明需要提供一种控制方法、控制装置及电子装置。
一种控制方法,用于控制电子装置,所述电子装置包括成像装置和显示器,所述成像装置包括图像传感器,所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列,每个所述滤光片单元阵列覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述控制方法包括以下步骤:
控制所述图像传感器输出合并图像,所述合并图像包括合并像素阵列,同一所述感光像素单元的多个感光像素合并输出作为一个所述合并像素;
识别所述合并图像是否存在人脸;和
当存在人脸时,将所述合并图像转化成合并真彩图像。
在某些实施方式中,所述控制方法包括以下步骤:
当不存在人脸时,判断环境亮度是否小于等于预定阈值;
在所述环境亮度小于等于所述预定阈值时,将所述合并图像转化成所述合并真彩图像。
在某些实施方式中,所述控制方法包括以下步骤:
在所述环境亮度大于所述预定阈值时,控制所述图像传感器输出色块图像,所述色块图像包括预定阵列排布的图像像素单元,所述图像像素单元包括多个原始像素,每个所述感光像素对应一个所述原始像素;
将所述色块图像转化成仿原图像,所述仿原图像包括阵列排布的仿原像素,所述仿原像素包括当前像素,所述原始像素包括与所述当前像素对应的关联像素,所述将所述色块图像转化成所述仿原图像的步骤包括以下步骤:
判断所述当前像素的颜色与所述关联像素的颜色是否相同;
在所述当前像素的颜色与所述关联像素的颜色相同时,将所述关联像素的像素值作为所述当前像素的像素值;和
在所述当前像素的颜色与所述关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值,所述图像像素单元包括所述关联像素单元,所述关联像素单元的颜色与所述当前像素相同且与所述当前像素相邻;和
将所述仿原图像转化成仿原真彩图像。
在某些实施方式中,所述预定阵列包括贝尔阵列。
在某些实施方式中,所述图像像素单元包括2*2阵列的所述原始像素。
在某些实施方式中,所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤包括以下步骤:
计算所述关联像素各个方向上的渐变量;
计算所述关联像素各个方向上的权重;和
根据所述渐变量及所述权重计算所述当前像素的像素值。
在某些实施方式中,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前包括以下步骤:
对所述色块图像做白平衡补偿;
所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤后包括以下步骤:
对所述仿原图像做白平衡补偿还原。
在某些实施方式中,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前包括以下步骤:
对所述色块图像做坏点补偿。
在某些实施方式中,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前包括以下步骤:
对所述色块图像做串扰补偿。
在某些实施方式中,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤后包括如下步骤:
对所述仿原图像进行镜片形状校正、去马赛克、降噪和边缘锐化处理。
在某些实施方式中,所述将所述合并图像转化成合并真彩图像的步骤包括以下步骤:
利用第二插值算法将所述合并图像转化成与所述仿原图像对应的还原图像,所述第二插值算法的复杂度小于所述第一插值算法;和
将所述还原图像转化成所述合并真彩图像。
一种控制装置,用于控制电子装置,所述电子装置包括成像装置和显示器,所述成像装置包括图像传感器,所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列,每个所述滤光片单元阵列覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述控制装置包括第一控制模块、识别模块和第一转化模块。
所述第一控制模块用于控制所述图像传感器输出合并图像,所述合并图像包括合并像素阵列,同一所述感光像素单元的多个感光像素合并输出作为一个所述合并像素。
所述识别模块用于识别所述合并图像是否存在人脸。
所述第一转化模块用于当存在人脸时,将所述合并图像转化成合并真彩图像。
在某些实施方式中,所述控制装置包括判断模块和第二转化模块。
所述判断模块用于当不存在人脸时,判断环境亮度是否小于等于预定阈值。
所述第二转化模块用于在所述环境亮度小于等于预定阈值时,将所述合并图像转化成所述合并真彩图像。
在某些实施方式中,所述控制装置包括第二控制模块、第三转化模块和第四转化模块。
所述第二控制模块用于在所述环境亮度大于所述预定阈值时,控制所述图像传感器输出色块图像,所述色块图像包括预定阵列排布的图像像素单元,所述图像像素单元包括多个原始像素,每个所述感光像素对应一个所述原始像素。
所述第三转化模块用于将所述色块图像转化成仿原图像,所述仿原图像包括阵列排布的仿原像素,所述仿原像素包括当前像素,所述原始像素包括与所述当前像素对应的关联像素,所述第三转化模块包括判断单元、第一计算单元和第二计算单元。
所述判断单元用于判断所述当前像素的颜色与所述关联像素的颜色是否相同。
所述第一计算单元用于在所述当前像素的颜色与所述关联像素的颜色相同时,将所述关联像素的像素值作为所述当前像素的像素值。
所述第二计算单元用于在所述当前像素的颜色与所述关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值,所述图像像素单元包括所述关联像素单元,所述关联像素单元的颜色与所述当前像素相同且与所述当前像素相邻。
所述第四转化模块用于将所述仿原图像转化成仿原真彩图像。
在某些实施方式中,所述预定阵列包括贝尔阵列。
在某些实施方式中,所述图像像素单元包括2*2阵列的所述原始像素。
在某些实施方式中,所述第二计算单元包括第一计算子单元、第二计算子单元和第三计算子单元。
所述第一计算子单元用于计算所述关联像素各个方向上的渐变量。
所述第二计算子单元用于计算所述关联像素各个方向上的权重。
所述第三计算子单元用于根据所述渐变量及所述权重计算所述当前像素的像素值。
在某些实施方式中,所述第三转化模块包括白平衡补偿单元和白平衡补偿还原单元。
所述白平衡补偿单元用于对所述色块图像做白平衡补偿。
所述白平衡补偿还原单元用于对所述仿原图像做白平衡补偿还原。
在某些实施方式中,所述第三转化模块包括坏点补偿单元。
所述坏点补偿单元用于对所述色块图像做坏点补偿。
在某些实施方式中,所述第三转化模块包括串扰补偿单元。
所述串扰补偿单元用于对所述色块图像做串扰补偿。
在某些实施方式中,所述第三转化模块包括处理单元。
所述处理单元用于对所述仿原图像进行镜片形状校正、去马赛克、降噪和边缘锐化处理。
在某些实施方式中,所述第一转化模块包括第一转化单元和第二转化单元。
所述第一转化单元用于利用第二插值算法将所述合并图像转化成与所述仿原图像对应的还原图像,所述第二插值算法的复杂度小于所述第一插值算法。
所述第二转化单元用于将所述还原图像转化成所述合并真彩图像。
一种电子装置包括成像装置、显示器和所述控制装置。
在某些实施方式中,所述电子装置包括手机或平板电脑。
在某些实施方式中,所述成像装置包括前置相机或后置相机。
本发明的控制方法、控制装置及电子装置通过识别图像中是否出现人脸,控制图像传感器输出合适的图像,避免图像传感器固定输出高质量图像带来的大量工作,从而减少电子装置工作时长,提高工作功率,提高用户满意度。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解,其中:
图1是本发明实施方式的控制方法的流程示意图。
图2是本发明实施方式的控制装置的功能模块示意图。
图3是本发明实施方式的电子装置的功能模块示意图。
图4是本发明某些实施方式的控制方法的流程示意图。
图5是本发明某些实施方式的控制装置的功能模块示意图。
图6是本发明某些实施方式的控制方法的流程示意图。
图7是本发明某些实施方式的控制方法的流程示意图。
图8是本发明某些实施方式的控制装置的功能模块示意图。
图9是本发明某些实施方式的第三转化模块的功能模块示意图。
图10是本发明实施方式的图像传感器的模块示意图。
图11是本发明实施方式的图像传感器的电路示意图。
图12是本发明实施方式的滤光片单元的示意图
图13是本发明实施方式的图像传感器的结构示意图。
图14是本发明实施方式的合并图像状态示意图。
图15是本发明实施方式的色块图像的状态示意图。
图16是本发明实施方式的控制方法的状态示意图。
图17是本发明某些实施方式的控制方法的流程示意图。
图18是本发明某些实施方式的第二计算单元的功能模块示意图。
图19是本发明某些实施方式的控制方法的流程示意图。
图20是本发明某些实施方式的第三转化模块的功能模块示意图。
图21是本发明某些实施方式的色块图像的图像像素单元示意图.
图22是本发明某些实施方式的控制方法的流程示意图。
图23是本发明某些实施方式的第三转化模块的功能模块示意图。
图24是本发明某些实施方式的控制方法的流程示意图。
图25是本发明某些实施方式的第一转化模块的功能模块示意图。
主要元件符号说明:
电子装置1000、成像装置100、图像传感器10、感光像素单元阵列12、感光像素单元12a、感光像素子单元120、感光像素122、感光器件1222、传输管1224、源极跟随器124、模数转换器126、加法器128、滤光片单元阵列14、滤光片单元14a、控制装置200、第一控制模块212、识别模块214、第一转化模块216、判断模块217、第二转化模块218、第二控制模块219、第三转化模块220、第四转化模块230、判断单元221、第一计算单元222、第二计算单元223、第一计算子单元2232、第二计算子单元2234、第三计算子单元2236、白平衡补偿单元224、白平衡补偿还原单元225、坏点补偿单元226、串扰补偿单元227、处理单元228、第一转化单元2162、第二转化单元2164。
具体实施方式
下面详细描述本发明的实施方式,所述实施方式的实施方式在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
请参阅图1,本发明实施方式的控制方法,用于控制电子装置1000,电子装置1000包括成像装置100和显示器,成像装置100包括图像传感器10,图像传感器10包括感光像素单元阵列12和设置在感光像素单元阵列12上的滤光片单元阵列14,每个滤光片单元阵列14覆盖对应一个感光像素单元12a,每个感光像素单元12a包括多个感光像素122,控制方法包括以下步骤:
S212:控制图像传感器输出合并图像,合并图像包括合并像素阵列,同一感光像素单元的多个感光像素合并输出作为一个合并像素;
S214:识别合并图像是否存在人脸;和
S216:当存在人脸时,将合并图像转化成合并真彩图像。
请参阅图2,本发明实施方式的控制装置200,用于控制电子装置1000,电子装置1000包括成像装置100和显示器,成像装置100包括图像传感器10,图像传感器10包括感光像素单元阵列12和设置在感光像素单元阵列12上的滤光片单元阵列14,每个滤光片单元阵列14覆盖对应一个感光像素单元12a,每个感光像素单元12a包括多个感光像素122,控制装置200包括第一控制模块212、识别模块214和第一转化模块216。第一控制模块212用于控制图像传感器10输出合并图像,合并图像包括合并像素阵列,同一感光像素单元12a的多个感光像素122合并输出作为一个合并像素。识别模块214用于识别合并图像是否存在人脸。第一转化模块216用于当存在人脸时,将合并图像转化成合并真彩图像。
也即是说,步骤S212可以由第一控制模块212实现,步骤S214可以由划分模块214实现,步骤S216可以由计算模块216实现。
请参阅图3,本发明实施方式的电子装置1000包括成像装置100、显示器和本发明实施方式的控制装置200,也即是说,本发明实施方式的控制装置200可以应用于本发明实施方式的电子装置1000。
本发明的控制方法、控制装置200及电子装置1000通过识别图像中是否出现人脸,控制图像传感器10输出合适的图像,避免图像传感器10固定输出高质量图像带来的大量工作,从而减少电子装置1000工作时长,提高工作功率,提高用户满意度。
在某些实施方式中,电子装置1000包括手机或平板电脑等具备成像装置的电子设备,在此不做任何限制。本发明实施方式的电子装置1000是手机。
在某些实施方式中,成像装置100包括前置相机或后置相机。
在某些实施方式中,用户在自拍或者拍摄人像时,并不需要太高的图像质量,因此,当检测到合并图像中存在人脸时,控制装置200控制图像传感器10输出合并图像,并将合并图像转化成合并真彩图像。
请参阅图4,在某些实施方式中,控制方法包括以下步骤:
S217:当不存在人脸时,判断环境亮度是否小于等于预定阈值;
S218:在环境亮度小于等于预定阈值时,将合并图像转化成合并真彩图像。
请参阅图5,在某些实施方式中,控制装置200包括判断模块217和第二转化模块218。判断模块217用于当不存在人脸时,判断环境亮度是否小于等于预定阈值。第二转化模块218用于在环境亮度小于等于预定阈值时,将合并图像转化成合并真彩图像。
在某些实施方式中,环境亮度是决定输出合并图像还是色块图像的重要决定因素。因此,可以在环境亮度小于等于预定阈值时,控制装置200控制图像传感器10输出合并图像,并将合并图像转化成合并真彩图像。在环境亮度大于预定阈值时,控制装置200控制图像传感器10输出色块图像,并先将色块图像转化成仿原图像,再将仿原图像转化成仿原真彩图像。
在某些实施方式中,环境亮度的获取方法可以是控制装置200计算合并图像中每个合并像素的亮度值,也可以是控制装置200将合并图像划分出亮度分析区域,然后计算每个亮度分析区域的亮度值。
在某些实施方式中,环境亮度的获取方法还可以是通过电子装置1000上的其他感光装置感光获得,在此不做任何限制。
在某些实施方式中,环境亮度的预定阈值可以由用户根据自身的喜好进行设置,如此,用户可以根据对图像的不同需求而采用不同的拍摄模式,从而获得较为理想的图像。
在某些实施方式中,环境亮度的预定阈值也可以是电子装置1000的存储器存储的多个不同阈值,以提供用户选择,在此不做任何限制。
请参阅图6,在某些实施方式中,控制方法包括以下步骤:
S219:在环境亮度大于预定阈值时,控制图像传感器输出色块图像,色块图像包括预定阵列排布的图像像素单元,图像像素单元包括多个原始像素,每个感光像素对应一个原始像素;
S220:将色块图像转化成仿原图像,仿原图像包括阵列排布的仿原像素,仿原像素包括当前像素,原始像素包括与当前像素对应的关联像素;和
S230:将仿原图像转化成仿原真彩图像。
请参阅图7,在某些实施方式中,步骤S220包括以下步骤:
S221:判断当前像素的颜色与关联像素的颜色是否相同;
S222:在当前像素的颜色与关联像素的颜色相同时,将关联像素的像素值作为当前像素的像素值;和
S223:在当前像素的颜色与关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算当前像素的像素值,图像像素单元包括关联像素单元,关联像素单元的颜色与当前像素相同且与当前像素相邻。
请参阅图8和图9,在某些实施方式中,控制装置200包括第二控制模块219、第三转化模块220和第四转化模块230。第二控制模块219用于在环境亮度大于预定阈值时,控制图像传感器10输出色块图像,色块图像包括预定阵列排布的图像像素单元,图像像素单元包括多个原始像素,每个感光像素对应一个原始像素。第三转化模块220用于将色块图像转化成仿原图像,仿原图像包括阵列排布的仿原像素,仿原像素包括当前像素,原始像素包括与当前像素对应的关联像素,第三转化模块220包括判断单元221、第一计算单元222和第二计算单元223。判断单元221用于判断当前像素的颜色与关联像素的颜色是否相同。第一计算单元222用于在当前像素的颜色与关联像素的颜色相同时,将关联像素的像素值作为当前像素的像素值。第二计算单元223用于在当前像素的颜色与关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算当前像素的像素值,图像像素单元包括关联像素单元,关联像素单元的颜色与当前像素相同且与当前像素相邻。第四转化模块230用于将仿原图像转化成仿原真彩图像。
可以理解,在环境亮度大于预定阈值的情况下,控制装置200控制图像传感器输出色块图像,并最终转化成仿原真彩图像并保存下来,从而用户可以获得高质量的图像。
请一并参阅图10至图13,本发明实施方式的图像传感器10包括感光像素单元阵列12和设置在感光像素单元阵列12上的滤光片单元阵列14。
进一步地,感光像素单元阵列12包括多个感光像素单元12a,每个感光像素单元12a包括多个相邻的感光像素122。每个感光像素122包括一个感光器件1222和一个传输管1224,其中,感光器件1222可以是光电二极管,传输管1224可以是MOS晶体管。
滤光片单元阵列14包括多个滤光片单元14a,每个滤光片单元14a覆盖对应一个感光像素单元12a。
具体地,在某些示例中,滤光片单元阵列14包括拜耳阵列,也即是说,相邻的四个滤光片单元14a分别为一个红色滤光片单元、一个蓝色滤光片单元和两个绿色滤光片单元。
每一个感光像素单元12a对应同一颜色的滤光片单元14a,若一个感光像素单元12a中一共包括n个相邻的感光器件1222,那么一个滤光片单元14a覆盖一个感光像素单元12a中的n个感光器件1222,该滤光片单元14a可以是一体构造,也可以由n个独立的子滤光片组装连接在一起。
在某些实施方式中,每个感光像素单元12a包括四个相邻的感光像素122,相邻两个感光像素122共同构成一个感光像素子单元120,感光像素子单元120还包括一个源极跟随器124及一个模数转换器126。感光像素单元12a还包括一个加法器128。其中,一个感光像素子单元120中的每个传输管1224的一端电极被连接到对应感光器件1222的阴极电极,每个传输管1224的另一端被共同连接至源极跟随器124的闸极电极,并通过源极跟随器124源极电极连接至一个模数转换器126。其中,源极跟随器124可以是MOS晶体管。两个感光像素子单元120通过各自的源极跟随器124及模数转换器126连接至加法器128。
也即是说,本发明实施方式的图像传感器10的一个感光像素单元12a中相邻的四个感光器件1222共用一个同颜色的滤光片单元14a,每个感光器件1222对应连接一个传输管1224,相邻两个感光器件1222共用一个源极跟随器124和一个模数转换器126,相邻的四个感光器件1222共用一个加法器128。
进一步地,相邻的四个感光器件1222呈2*2阵列排布。其中,一个感光像素子单元120中的两个感光器件1222可以处于同一列。
在成像时,当同一滤光片单元14a下覆盖的两个感光像素子单元120或者说四个感光器件1222同时曝光时,可以对像素进行合并进而可输出合并图像。
具体地,感光器件1222用于将光照转化为电荷,且产生的电荷与光照强度成比例关系,传输管1224用于根据控制信号来控制电路的导通或断开。当电路导通时,源极跟随器124用于将感光器件1222经光照产生的电荷信号转化为电压信号。模数转换器126用于电压信号转换为数字信号。加法器128用于将两路数字信号相加共同输出。
请参阅图14,以16M的图像传感器10举例来说,本发明实施方式的图像传感器10可以将16M的感光像素122合并成4M,或者说,输出合并图像,合并后,感光像素122的大小相当于变成了原来大小的4倍,从而提升了感光像素122的感光度。此外,由于图像传感器10中的噪声大部分都是随机噪声,对于合并之前的感光像素122的来说,有可能其中一个或两个像素中存在噪点,而在将四个感光像素122合并成一个大的感光像素122后,减小了噪点对该大像素的影响,也即是减弱了噪声,提高了信噪比。
但在感光像素122大小变大的同时,由于像素值降低,合并图像的解析度也将降低。
在成像时,当同一滤光片单元14a下覆盖的四个感光器件1222依次曝光时,可以输出色块图像。
具体地,感光器件1222用于将光照转化为电荷,且产生的电荷与光照强度成比例关系,传输管1224用于根据控制信号来控制电路的导通或断开。当电路导通时,源极跟随器124用于将感光器件1222经光照产生的电荷信号转化为电压信号。模数转换器126用于电压信号转换为数字信号。
请参阅图15,以16M的图像传感器10举例来说,本发明实施方式的图像传感器200还可以保持16M的感光像素122输出,或者说输出色块图像,色块图像包括图像像素单元,图像像素单元包括2*2阵列排布的原始像素,该原始像素的大小与感光像素122大小相同,然而由于覆盖相邻四个感光器件1222的滤光片单元14a为同一颜色,也即时说,虽然四个感光器件1222分别曝光,但覆盖其的滤光片单元14a颜色相同,因此,输出的每个图像像素单元的相邻四个原始像素颜色相同,仍然无法提高图像的解析度。
本发明实施方式的控制方法,可以用于对输出的色块图像进行处理,以得到仿原图像。
可以理解,合并图像在输出时,四个相邻的同色感光像素122以合并像素输出,如此,合并图像中的四个相邻的合并像素仍可看作是典型的拜耳阵列,可以直接被控制装置200处理以输出合并真彩图像。而色块图像在输出时每个感光像素122分别输出,由于相邻四个感光像素122颜色相同,因此,一个图像像素单元的四个相邻原始像素的颜色相同,是非典型的拜耳阵列。而控制装置200无法对非典型拜耳阵列直接进行处理,也即是说,在图像传感器10采用同一控制装置200时,为兼容两种模式的真彩图像输出即合并模式下的合并真彩图像输出及色块模式下的仿原真彩图像输出,需将色块图像转化为仿原图像,或者说将非典型拜耳阵列的图像像素单元转化为典型拜耳阵列的像素排布。
仿原图像包括呈拜耳阵列排布的仿原像素。仿原像素包括当前像素,原始像素包括与当前像素对应的关联像素。
请参阅图16,以图16为例,当前像素为R3’3’和R5’5’,对应的关联像素分别为R33和B55。
在获取当前像素R3’3’时,由于R3’3’与对应的关联像素R33的颜色相同,因此在转化时直接将R33的像素值作为R3’3’的像素值。
在获取当前像素R5’5’时,由于R5’5’与对应的关联像素B55的颜色不相同,显然不能直接将B55的像素值作为R5’5’的像素值,需要根据R5’5’的关联像素单元通过插值的方式计算得到。
需要说明的是,以上及下文中的像素值应当广义理解为该像素的颜色属性数值,例如色彩值。
关联像素单元包括多个,例如4个,颜色与当前像素相同且与当前像素相邻的图像像素单元中的原始像素。
需要说明的是,此处相邻应做广义理解,以图16为例,R5’5’对应的关联像素为B55,与B55所在的图像像素单元相邻的且与R5’5’颜色相同的关联像素单元所在的图像像素单元分别为R44、R74、R47、R77所在的图像像素单元,而并非在空间上距离B55所在的图像像素单元更远的其他的红色图像像素单元。其中,与B55在空间上距离最近的红色原始像素分别为R44、R74、R47和R77,也即是说,R5’5’的关联像素单元由R44、R74、R47和R77组成,R5’5’与R44、R74、R47和R77的颜色相同且相邻。
如此,针对不同情况的当前像素,采用不同方式的将原始像素转化为仿原像素,从而将色块图像转化为仿原图像,由于拍摄图像时,采用了特殊的拜耳阵列结构的滤光片,提高了图像信噪比,并且在图像处理过程中,通过插值算法对色块图像进行插值处理,提高了图像的分辨率及解析度。
请参阅图17,在某些实施方式中,步骤S223包括以下步骤:
S2232:计算关联像素单元各个方向上的渐变量;
S2234:计算关联像素单元各个方向上的权重;和
S2236:根据渐变量及权重计算当前像素的像素值。
请参阅图18,在某些实施方式中,第二计算单元223包括第一计算子单元2232、第二计算子单元2234和第三计算子单元2236。步骤S2232可以由第一计算子单元2232实现,步骤S2234可以由第二计算子单元2234实现,步骤S2236可以由第三计算子单元2236实现。或者说,第一计算子单元2232用于计算关联像素单元各个方向上的渐变量,第二计算子单元2234用于计算关联像素单元各个方向上的权重,第三计算子单元2236用于根据渐变量及权重计算当前像素的像素值。
具体地,插值处理方式是参考图像在不同方向上的能量渐变,将与当前像素对应的颜色相同且相邻的关联像素单元依据在不同方向上的渐变权重大小,通过线性插值的方式计算得到当前像素的像素值。其中,在能量变化量较小的方向上,参考比重较大,因此,在插值计算时的权重较大。
在某些示例中,为方便计算,仅考虑水平和垂直方向。
R5’5’由R44、R74、R47和R77插值得到,而在水平和垂直方向上并不存在颜色相同的原始像素,因此需首根据关联像素单元计算在水平和垂直方向上该颜色的分量。其中,水平方向上的分量为R45和R75、垂直方向的分量为R54和R57可以分别通过R44、R74、R47和R77计算得到。
具体地,R45=R44*2/3+R47*1/3,R75=2/3*R74+1/3*R77,R54=2/3*R44+1/3*R74,R57=2/3*R47+1/3*R77。
然后,分别计算在水平和垂直方向的渐变量及权重,也即是说,根据该颜色在不同方向的渐变量,以确定在插值时不同方向的参考权重,在渐变量小的方向,权重较大,而在渐变量较大的方向,权重较小。其中,在水平方向的渐变量X1=|R45-R75|,在垂直方向上的渐变量X2=|R54-R57|,W1=X1/(X1+X2),W2=X2/(X1+X2)。
如此,根据上述可计算得到,R5’5’=(2/3*R45+1/3*R75)*W2+(2/3*R54+1/3*R57)*W1。可以理解,若X1大于X2,则W1大于W2,因此计算时水平方向的权重为W2,而垂直方向的权重为W1,反之亦反。
如此,可根据插值算法计算得到当前像素的像素值。依据上述对关联像素的处理方式,可将原始像素转化为呈典型拜耳阵列排布的仿原像素,也即是说,相邻的四个2*2阵列的仿原像素包括一个红色仿原像素,两个绿色仿原像素和一个蓝色仿原像素。
需要说明的是,插值的方式包括但不限于本实施例中公开的在计算时仅考虑垂直和水平两个方向相同颜色的像素值的方式,例如还可以参考其他颜色的像素值。
请参阅图19和图20,在某些实施方式中,步骤S223前包括步骤:
S224:对色块图像做白平衡补偿;
步骤S223后包括步骤:
S225:对仿原图像做白平衡补偿还原。
在某些实施方式中,第三转化模块220包括白平衡补偿单元224和白平衡补偿还原单元225。步骤S224可以由白平衡补偿单元224实现,步骤S225可以由白平衡补偿还原单元225实现。或者说,白平衡补偿单元224用于对色块图像做白平衡补偿,白平衡补偿还原单元225用于对仿原图像做白平衡补偿还原。
具体地,在一些示例中,在将色块图像转化为仿原图像的过程中,在插值过程中,红色和蓝色仿原像素往往不仅参考与其颜色相同的通道的原始像素的颜色,还会参考绿色通道的原始像素的颜色权重,因此,在插值前需要进行白平衡补偿,以在插值计算中排除白平衡的影响。为了不破坏色块图像的白平衡,因此,在插值之后需要将仿原图像进行白平衡补偿还原,还原时根据在补偿中红色、绿色及蓝色的增益值进行还原。
如此,可排除在插值过程中白平衡的影响,并且能够使得插值后得到的仿原图像保持色块图像的白平衡。
请再次参阅图19和图20,在某些实施方式中,步骤S223前包括步骤:
S226:对色块图像做坏点补偿。
在某些实施方式中,第三转化模块220包括坏点补偿单元226。步骤S226可以由坏点补偿单元226实现。或者说,坏点补偿单元226用于对色块图像做坏点补偿。
可以理解,受限于制造工艺,图像传感器10可能会存在坏点,坏点通常不随感光度变化而始终呈现同一颜色,坏点的存在将影响图像质量,因此,为保证插值的准确,不受坏点的影响,需要在插值前进行坏点补偿。
具体地,坏点补偿过程中,可以对原始像素进行检测,当检测到某一原始像素为坏点时,可根据其所在的图像像素单元的其他原始像的像素值进行坏点补偿。
如此,可排除坏点对插值处理的影响,提高图像质量。
请再次参阅图19和图20,在某些实施方式中,步骤S223前包括步骤:
S227:对色块图像做串扰补偿。
在某些实施方式中,第三转化模块220包括串扰补偿单元227。步骤S227可以由串扰补偿单元227实现。或者说,串扰补偿单元227用于对色块图像做串扰补偿。
具体的,一个感光像素单元12a中的四个感光像素122覆盖同一颜色的滤光片,而感光像素122之间可能存在感光度的差异,以至于以仿原图像转化输出的仿原真彩图像中的纯色区域会出现固定型谱噪声,影响图像的质量。因此,需要对色块图像进行串扰补偿。
在某些实施方式中,设定补偿参数包括以下步骤:提供预定光环境;设置成像装置的成像参数;拍摄多帧图像;处理多帧图像以获得串扰补偿参数;和将串扰补偿参数保存在所述图像处理装置内。
如上述解释说明,进行串扰补偿,需要在成像装置100的图像传感器10制造过程中获得补偿参数,并将串扰补偿的相关参数预置于成像装置100的存储器中或装设成像装置100的电子装置1000例如手机或平板电脑中。
预定光环境例如可包括LED匀光板,5000K左右的色温,亮度1000勒克斯左右,成像参数可包括增益值,快门值及镜头位置。设定好相关参数后,进行串扰补偿参数的获取。
处理过程中,首先在设定的光环境中以设置好的成像参数,获取多张色块图像,并合并成一张色块图像,如此可减少以单张色块图像作为校准基础的噪声影响。
请参阅图21,以图21中的图像像素单元Gr为例,其包括Gr1、Gr2、Gr3和Gr4,串扰补偿目的在于将感光度可能存在差异的感光像素通过补偿进本校准至同一水平。该图像像素单元的平均像素值为Gr_avg=(Gr1+Gr2+Gr3+Gr4)/4,可基本表征这四个感光像素的感光度的平均水平,以此平均值作为基础值,分别计算Gr1/Gr_avg,Gr2/Gr_avg,Gr3/Gr_avg和Gr4/Gr_avg,可以理解,通过计算每一个原始像素的像素值与该图像像素单元的平均像素值的比值,可以基本反映每个原始像素与基础值的偏差,记录四个比值并作为补偿参数记录到相关装置的存储器中,以在成像时进行调取对每个原始像素进行补偿,从而减少串扰,提高图像质量。
通常,在设定串扰补偿参数后还应当验证所设定的参数是否准确。
验证过程中,首先以相同的光环境和成像参数获取一张色块图像,依据计算得到的补偿参数对该色块图像进行串扰补偿,计算补偿后的Gr’_avg、Gr’1/Gr’_avg、Gr’2/Gr’_avg、Gr’3/Gr’_avg和Gr’4/Gr’_avg。根据计算结果判断补偿参数是否准确,判断可根据宏观与微观两个角度考虑。微观是指某一个原始像素在补偿后仍然偏差较大,成像后易被使用者感知,而宏观则从全局角度,也即是在补偿后仍存在偏差的原始像素的总数目较多时,此时即便单独的每一个原始像素的偏差不大,但作为整体仍然会被使用者感知。因此,应当设置针对微观设置一个比例阈值即可,针对宏观需设置一个比例阈值和一个数量阈值。如此,可对设置的串扰补偿参数进行验证,确保补偿参数的正确,以减少串扰对图像质量的影响。
请参阅图22和图23,在某些实施方式中,步骤S223后还包括步骤:
S228:对仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
在某些实施方式中,第三转化模块220包括处理单元228。步骤S228可以由处理单元228实现,或者说,处理单元228用于对仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
可以理解,将色块图像转化为仿原图像后,仿原像素排布为典型的拜耳阵列,可采用处理装置200进行处理,处理过程中包括镜片阴影校正、去马赛克、降噪和边缘锐化处理,如此,处理后即可得到仿原真彩图像输出给用户。
请参阅图24和图25,在某些实施方式中,步骤S216包括以下步骤:
S2162:利用第二插值算法将合并图像转化成与仿原图像对应的还原图像,第二插值算法的复杂度小于第一插值算法;和
S2164:将还原图像转化成合并真彩图像。
在某些实施方式中,第一转化模块216包括第一转化单元2162和第二转化单元2164。第一转化单元2162用于利用第二插值算法将合并图像转化成与仿原图像对应的还原图像,第二插值算法的复杂度小于第一插值算法。第二转化单元2164用于将还原图像转化成合并真彩图像。也即是说,步骤S2162可以由第一转化单元2162实现,步骤S2164可以由第二转化单元2164实现。
在某些实施方式中,第二插值算法的时间复杂度和空间复杂度都比第一插值算法小。算法的复杂度包括时间复杂度和空间复杂度,时间复杂度用来度量算法需要耗费的时间,空间复杂度是用来度量算法需要耗费的存储空间。时间复杂度小说明算法需要耗费的时间少,空间复杂度小说明算法需要耗费的存储空间小,因此,利用第二插值算法有利于提高运算速度,使得拍照过程更加流畅,提高用户体验。
在某些实施方式中,第二插值算法可以是简单地将合并图像放大四倍而不需要经过其他的复杂运算,从而得到与仿原图像对应的还原图像。
可以理解,通过第一转化单元2162和第二转化单元2164转化得到仿原真彩图像后,可以对仿原真彩图像进行降噪和边缘锐化处理,如此,处理后即可得到质量较佳的仿原真彩图像输出给用户。
在本发明的实施方式的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明的实施方式和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的实施方式的限制。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本发明的实施方式的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
在本发明的实施方式的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接或可以相互通讯;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明的实施方式中的具体含义。
在本发明的实施方式中,除非另有明确的规定和限定,第一特征在第二特征之“上”或之“下”可以包括第一和第二特征直接接触,也可以包括第一和第二特征不是直接接触而是通过它们之间的另外的特征接触。而且,第一特征在第二特征“之上”、“上方”和“上面”包括第一特征在第二特征正上方和斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”包括第一特征在第二特征正下方和斜下方,或仅仅表示第一特征水平高度小于第二特征。
上文的公开提供了许多不同的实施方式或例子用来实现本发明的实施方式的不同结构。为了简化本发明的实施方式的公开,上文中对特定例子的部件和设置进行描述。当然,它们仅仅为示例,并且目的不在于限制本发明。此外,本发明的实施方式可以在不同例子中重复参考数字和/或参考字母,这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施方式和/或设置之间的关系。此外,本发明的实施方式提供了的各种特定的工艺和材料的例子,但是本领域普通技术人员可以意识到其他工艺的应用和/或其他材料的使用。
在本说明书的描述中,参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理模块的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的实施方式的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明的各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施方式进行变化、修改、替换和变型。
Claims (25)
1.一种控制方法,用于控制电子装置,其特征在于,所述电子装置包括成像装置和显示器,所述成像装置包括图像传感器,所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列,每个所述滤光片单元阵列覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述控制方法包括以下步骤:
控制所述图像传感器输出合并图像,所述合并图像包括合并像素阵列,同一所述感光像素单元的多个感光像素合并输出作为一个所述合并像素;
识别所述合并图像是否存在人脸;和
当存在人脸时,将所述合并图像转化成合并真彩图像。
2.如权利要求1所述的控制方法,其特征在于,所述控制方法包括以下步骤:
当不存在人脸时,判断环境亮度是否小于等于预定阈值;
在所述环境亮度小于等于所述预定阈值时,将所述合并图像转化成所述合并真彩图像。
3.如权利要求2所述的控制方法,其特征在于,所述控制方法包括以下步骤:
在所述环境亮度大于所述预定阈值时,控制所述图像传感器输出色块图像,所述色块图像包括预定阵列排布的图像像素单元,所述图像像素单元包括多个原始像素,每个所述感光像素对应一个所述原始像素;
将所述色块图像转化成仿原图像,所述仿原图像包括阵列排布的仿原像素,所述仿原像素包括当前像素,所述原始像素包括与所述当前像素对应的关联像素,所述将所述色块图像转化成所述仿原图像的步骤包括以下步骤:
判断所述当前像素的颜色与所述关联像素的颜色是否相同;
在所述当前像素的颜色与所述关联像素的颜色相同时,将所述关联像素的像素值作为所述当前像素的像素值;和
在所述当前像素的颜色与所述关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值,所述图像像素单元包括所述关联像素单元,所述关联像素单元的颜色与所述当前像素相同且与所述当前像素相邻;和
将所述仿原图像转化成仿原真彩图像。
4.如权利要求3所述的控制方法,其特征在于,所述预定阵列包括贝尔阵列。
5.如权利要求3所述的控制方法,其特征在于,所述图像像素单元包括2*2阵列的所述原始像素。
6.如权利要求3所述的控制方法,其特征在于,所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤包括以下步骤:
计算所述关联像素各个方向上的渐变量;
计算所述关联像素各个方向上的权重;和
根据所述渐变量及所述权重计算所述当前像素的像素值。
7.如权利要求3所述的控制方法,其特征在于,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前包括以下步骤:
对所述色块图像做白平衡补偿;
所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤后包括以下步骤:
对所述仿原图像做白平衡补偿还原。
8.如权利要求3所述的控制方法,其特征在于,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前包括以下步骤:
对所述色块图像做坏点补偿。
9.如权利要求3所述的控制方法,其特征在于,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤前包括以下步骤:
对所述色块图像做串扰补偿。
10.如权利要求3所述的控制方法,其特征在于,所述控制方法在所述根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值的步骤后包括如下步骤:
对所述仿原图像进行镜片形状校正、去马赛克、降噪和边缘锐化处理。
11.如权利要求3所述的控制方法,其特征在于,所述将所述合并图像转化成合并真彩图像的步骤包括以下步骤:
利用第二插值算法将所述合并图像转化成与所述仿原图像对应的还原图像,所述第二插值算法的复杂度小于所述第一插值算法;和
将所述还原图像转化成所述合并真彩图像。
12.一种控制装置,用于控制电子装置,其特征在于,所述电子装置包括成像装置和显示器,所述成像装置包括图像传感器,所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列,每个所述滤光片单元阵列覆盖对应一个所述感光像素单元,每个所述感光像素单元包括多个感光像素,所述控制装置包括:
第一控制模块,所述第一控制模块用于控制所述图像传感器输出合并图像,所述合并图像包括合并像素阵列,同一所述感光像素单元的多个感光像素合并输出作为一个所述合并像素;
识别模块,所述识别模块用于识别所述合并图像是否存在人脸;和
第一转化模块,所述第一转化模块用于当存在人脸时,将所述合并图像转化成合并真彩图像。
13.如权利要求12所述的控制装置,其特征在于,所述控制装置包括:
判断模块,所述判断模块用于当不存在人脸时,判断环境亮度是否小于等于预定阈值;
第二转化模块,所述第二转化模块用于在所述环境亮度小于等于预定阈值时,将所述合并图像转化成所述合并真彩图像。
14.如权利要求13所述的控制装置,其特征在于,所述控制装置包括:
第二控制模块,所述第二控制模块用于在所述环境亮度大于所述预定阈值时,控制所述图像传感器输出色块图像,所述色块图像包括预定阵列排布的图像像素单元,所述图像像素单元包括多个原始像素,每个所述感光像素对应一个所述原始像素;
第三转化模块,所述第三转化模块用于将所述色块图像转化成仿原图像,所述仿原图像包括阵列排布的仿原像素,所述仿原像素包括当前像素,所述原始像素包括与所述当前像素对应的关联像素,所述第三转化模块包括:
判断单元,所述判断单元用于判断所述当前像素的颜色与所述关联像素的颜色是否相同;
第一计算单元,所述第一计算单元用于在所述当前像素的颜色与所述关联像素的颜色相同时,将所述关联像素的像素值作为所述当前像素的像素值;和
第二计算单元,所述第二计算单元用于在所述当前像素的颜色与所述关联像素的颜色不同时,根据关联像素单元的像素值通过第一插值算法计算所述当前像素的像素值,所述图像像素单元包括所述关联像素单元,所述关联像素单元的颜色与所述当前像素相同且与所述当前像素相邻;和
第四转化模块,所述第四转化模块用于将所述仿原图像转化成仿原真彩图像。
15.如权利要求14所述的控制装置,其特征在于,所述预定阵列包括贝尔阵列。
16.如权利要求14所述的控制装置,其特征在于,所述图像像素单元包括2*2阵列的所述原始像素。
17.如权利要求14所述的控制装置,其特征在于,所述第二计算单元包括:
第一计算子单元,所述第一计算子单元用于计算所述关联像素各个方向上的渐变量;
第二计算子单元,所述第二计算子单元用于计算所述关联像素各个方向上的权重;和
第三计算子单元,所述第三计算子单元用于根据所述渐变量及所述权重计算所述当前像素的像素值。
18.如权利要求14所述的控制装置,其特征在于,所述第三转化模块包括:
白平衡补偿单元,所述白平衡补偿单元用于对所述色块图像做白平衡补偿;
白平衡补偿还原单元,所述白平衡补偿还原单元用于对所述仿原图像做白平衡补偿还原。
19.如权利要求14所述的控制装置,其特征在于,所述第三转化模块包括:
坏点补偿单元,所述坏点补偿单元用于对所述色块图像做坏点补偿。
20.如权利要求14所述的控制装置,其特征在于,所述第三转化模块包括:
串扰补偿单元,所述串扰补偿单元用于对所述色块图像做串扰补偿。
21.如权利要求14所述的控制装置,其特征在于,所述第三转化模块包括:
处理单元,所述处理单元用于对所述仿原图像进行镜片形状校正、去马赛克、降噪和边缘锐化处理。
22.如权利要求14所述的控制装置,其特征在于,所述第一转化模块包括:
第一转化单元,所述第一转化单元用于利用第二插值算法将所述合并图像转化成与所述仿原图像对应的还原图像,所述第二插值算法的复杂度小于所述第一插值算法;和
第二转化单元,所述第二转化单元用于将所述还原图像转化成所述合并真彩图像。
23.一种电子装置,其特征在于包括:
成像装置;
显示器;和
如权利要求12-22任意一项所述的控制装置。
24.如权利要求23所述的电子装置,其特征在于,所述电子装置包括手机或平板电脑。
25.如权利要求23所述的电子装置,其特征在于,所述成像装置包括前置相机或后置相机。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611092363.8A CN106504218B (zh) | 2016-11-29 | 2016-11-29 | 控制方法、控制装置及电子装置 |
PCT/CN2017/085211 WO2018099007A1 (zh) | 2016-11-29 | 2017-05-19 | 控制方法、控制装置及电子装置 |
US15/727,761 US10432905B2 (en) | 2016-11-29 | 2017-10-09 | Method and apparatus for obtaining high resolution image, and electronic device for same |
EP17199021.1A EP3328071B1 (en) | 2016-11-29 | 2017-10-27 | Image processing method and apparatus, and electronic device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611092363.8A CN106504218B (zh) | 2016-11-29 | 2016-11-29 | 控制方法、控制装置及电子装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106504218A true CN106504218A (zh) | 2017-03-15 |
CN106504218B CN106504218B (zh) | 2019-03-12 |
Family
ID=58329456
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611092363.8A Active CN106504218B (zh) | 2016-11-29 | 2016-11-29 | 控制方法、控制装置及电子装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10432905B2 (zh) |
EP (1) | EP3328071B1 (zh) |
CN (1) | CN106504218B (zh) |
WO (1) | WO2018099007A1 (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018099007A1 (zh) * | 2016-11-29 | 2018-06-07 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
WO2018099005A1 (zh) * | 2016-11-29 | 2018-06-07 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
WO2018098977A1 (zh) * | 2016-11-29 | 2018-06-07 | 广东欧珀移动通信有限公司 | 图像处理方法、图像处理装置、成像装置、制造方法和电子装置 |
WO2018099011A1 (zh) * | 2016-11-29 | 2018-06-07 | 广东欧珀移动通信有限公司 | 图像处理方法、图像处理装置、成像装置及电子装置 |
US10382709B2 (en) | 2016-11-29 | 2019-08-13 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Image processing method and apparatus, and electronic device |
US10440265B2 (en) | 2016-11-29 | 2019-10-08 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Image processing method and apparatus, electronic device and control method |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106454288B (zh) | 2016-11-29 | 2018-01-19 | 广东欧珀移动通信有限公司 | 控制方法、控制装置、成像装置及电子装置 |
KR20210158201A (ko) * | 2020-06-23 | 2021-12-30 | 삼성전자주식회사 | 이미지 센서를 포함하는 전자 장치 및 이에 대한 제어 방법 |
WO2022181995A1 (en) * | 2021-02-25 | 2022-09-01 | Samsung Electronics Co., Ltd. | A method for capturing a high resolution high dynamic range image |
DE102022205949A1 (de) * | 2022-06-13 | 2023-12-14 | Zf Friedrichshafen Ag | Sensorvorrichtung, insbesondere für Fahrzeugkameras |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1890688A (zh) * | 2003-12-10 | 2007-01-03 | 索尼株式会社 | 图像判别方法和图像处理装置 |
US20150010242A1 (en) * | 2013-07-08 | 2015-01-08 | Augmented Reality Lab LLC | System and Method for Computer Vision Item Recognition and Target Tracking |
CN105611258A (zh) * | 2015-12-18 | 2016-05-25 | 广东欧珀移动通信有限公司 | 图像传感器的成像方法、成像装置和电子装置 |
CN105825479A (zh) * | 2016-01-31 | 2016-08-03 | 西安电子科技大学 | 一种环境光下的图像增强方法 |
Family Cites Families (103)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5011261A (en) * | 1989-04-17 | 1991-04-30 | Photon Imaging Corp. | Color page scanner using fiber optic bundle and a photosensor array |
US6999119B1 (en) * | 1998-04-10 | 2006-02-14 | Nikon Corporation | Image-capturing element, image-capturing circuit for processing signal from image-capturing element, image-capturing device, driving method of image-capturing element |
US7088392B2 (en) | 2001-08-27 | 2006-08-08 | Ramakrishna Kakarala | Digital image system and method for implementing an adaptive demosaicing method |
TW563365B (en) | 2001-09-24 | 2003-11-21 | Winbond Electronics Corp | Image compensation processing method of digital camera |
US7319487B2 (en) * | 2002-04-10 | 2008-01-15 | Olympus Optical Co., Ltd. | Focusing apparatus, camera and focus position detecting method |
JP4458236B2 (ja) | 2003-09-30 | 2010-04-28 | パナソニック株式会社 | 固体撮像装置 |
JP2005215750A (ja) | 2004-01-27 | 2005-08-11 | Canon Inc | 顔検知装置および顔検知方法 |
US7564019B2 (en) * | 2005-08-25 | 2009-07-21 | Richard Ian Olsen | Large dynamic range cameras |
US20060125947A1 (en) | 2004-12-09 | 2006-06-15 | Packer Jimmy L | Imaging with clustered photosite arrays |
JP2007166456A (ja) | 2005-12-16 | 2007-06-28 | Fuji Xerox Co Ltd | 画像調整装置、画像調整方法及びプログラム |
US7773138B2 (en) | 2006-09-13 | 2010-08-10 | Tower Semiconductor Ltd. | Color pattern and pixel level binning for APS image sensor using 2×2 photodiode sharing scheme |
US7835569B2 (en) | 2006-10-13 | 2010-11-16 | Apple Inc. | System and method for raw image processing using conversion matrix interpolated from predetermined camera characterization matrices |
US7769230B2 (en) | 2006-11-30 | 2010-08-03 | Eastman Kodak Company | Producing low resolution images |
JP5053654B2 (ja) | 2007-02-09 | 2012-10-17 | オリンパスイメージング株式会社 | 画像処理装置およびその方法と電子カメラ |
JP4359634B2 (ja) | 2007-06-21 | 2009-11-04 | シャープ株式会社 | カラー固体撮像装置、および画素信号の読み出し方法 |
JP5446076B2 (ja) | 2007-07-17 | 2014-03-19 | 株式会社ニコン | デジタルカメラ |
JP5036482B2 (ja) | 2007-10-19 | 2012-09-26 | シリコン ヒフェ ベー.フェー. | 画像処理装置及び画像処理方法、画像処理プログラム |
JP5113514B2 (ja) | 2007-12-27 | 2013-01-09 | キヤノン株式会社 | ホワイトバランス制御装置およびホワイトバランス制御方法 |
JP5068158B2 (ja) | 2007-12-28 | 2012-11-07 | イーストマン コダック カンパニー | 撮像装置 |
US7745779B2 (en) | 2008-02-08 | 2010-06-29 | Aptina Imaging Corporation | Color pixel arrays having common color filters for multiple adjacent pixels for use in CMOS imagers |
JP2010034614A (ja) | 2008-06-25 | 2010-02-12 | Olympus Imaging Corp | 撮像装置及び撮像方法 |
JP2010028722A (ja) | 2008-07-24 | 2010-02-04 | Sanyo Electric Co Ltd | 撮像装置及び画像処理装置 |
JP2010035048A (ja) | 2008-07-30 | 2010-02-12 | Fujifilm Corp | 撮像装置及び撮像方法 |
JP5219778B2 (ja) | 2008-12-18 | 2013-06-26 | キヤノン株式会社 | 撮像装置及びその制御方法 |
US8345144B1 (en) | 2009-07-15 | 2013-01-01 | Adobe Systems Incorporated | Methods and apparatus for rich image capture with focused plenoptic cameras |
JP5075934B2 (ja) | 2010-03-25 | 2012-11-21 | 株式会社東芝 | 固体撮像装置および画像記録装置 |
JP5044673B2 (ja) * | 2010-03-25 | 2012-10-10 | 株式会社東芝 | 固体撮像装置および画像記録装置 |
JP5644177B2 (ja) | 2010-05-07 | 2014-12-24 | ソニー株式会社 | 固体撮像装置、および、その製造方法、電子機器 |
JP2011248576A (ja) | 2010-05-26 | 2011-12-08 | Olympus Corp | 画像処理装置、撮像装置、プログラム及び画像処理方法 |
JP5664141B2 (ja) | 2010-11-08 | 2015-02-04 | ソニー株式会社 | 固体撮像素子およびカメラシステム |
US8803994B2 (en) | 2010-11-18 | 2014-08-12 | Canon Kabushiki Kaisha | Adaptive spatial sampling using an imaging assembly having a tunable spectral response |
CN102638679B (zh) | 2011-02-12 | 2014-07-02 | 澜起科技(上海)有限公司 | 基于矩阵对图像进行插值的方法及图像处理系统 |
JP5701374B2 (ja) | 2011-02-21 | 2015-04-15 | 三菱電機株式会社 | 画像拡大装置及び方法 |
JP2012191465A (ja) | 2011-03-11 | 2012-10-04 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
US8619179B2 (en) | 2011-03-28 | 2013-12-31 | Canon Kabushiki Kaisha | Multi-modal image capture apparatus with a tunable spectral response |
JP5825817B2 (ja) | 2011-04-01 | 2015-12-02 | キヤノン株式会社 | 固体撮像素子及び撮像装置 |
JP5843486B2 (ja) | 2011-05-31 | 2016-01-13 | キヤノン株式会社 | 撮像装置およびその制御方法 |
JP5306563B2 (ja) | 2011-07-08 | 2013-10-02 | オリンパス株式会社 | 撮像装置及び画像生成方法 |
JP5528627B2 (ja) | 2011-07-13 | 2014-06-25 | 富士フイルム株式会社 | 撮像装置、撮像素子及び感度差補正方法 |
JP2013021660A (ja) | 2011-07-14 | 2013-01-31 | Sony Corp | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
JP2013066140A (ja) | 2011-08-31 | 2013-04-11 | Sony Corp | 撮像装置、および信号処理方法、並びにプログラム |
JP2013066146A (ja) | 2011-08-31 | 2013-04-11 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
JP5547349B2 (ja) | 2011-09-22 | 2014-07-09 | 富士フイルム株式会社 | デジタルカメラ |
JP5519083B2 (ja) | 2011-09-29 | 2014-06-11 | 富士フイルム株式会社 | 画像処理装置、方法、プログラムおよび撮像装置 |
JP5687608B2 (ja) | 2011-11-28 | 2015-03-18 | オリンパス株式会社 | 画像処理装置、画像処理方法、および画像処理プログラム |
JP5889049B2 (ja) | 2012-03-09 | 2016-03-22 | オリンパス株式会社 | 画像処理装置、撮像装置及び画像処理方法 |
CN104170376B (zh) | 2012-03-27 | 2016-10-19 | 索尼公司 | 图像处理设备、成像装置及图像处理方法 |
WO2014034486A1 (ja) | 2012-08-27 | 2014-03-06 | 富士フイルム株式会社 | 画像処理装置、方法、プログラム及び記録媒体並びに撮像装置 |
US9531961B2 (en) | 2015-05-01 | 2016-12-27 | Duelight Llc | Systems and methods for generating a digital image using separate color and intensity data |
CN102970482A (zh) | 2012-11-19 | 2013-03-13 | 广东欧珀移动通信有限公司 | 一种拍照中自动开启防红眼模式的方法及其拍照设备 |
KR101744761B1 (ko) | 2012-11-30 | 2017-06-09 | 한화테크윈 주식회사 | 영상처리장치 및 방법 |
CN103856617A (zh) | 2012-12-03 | 2014-06-11 | 联想(北京)有限公司 | 一种拍照方法和用户终端 |
WO2014125659A1 (ja) | 2013-02-15 | 2014-08-21 | 富士フイルム株式会社 | 画像処理装置、撮像装置、フィルタ生成装置、画像復元方法及びプログラム |
WO2014185238A1 (ja) | 2013-05-13 | 2014-11-20 | 富士フイルム株式会社 | カラー画像データの混入補正装置および撮像装置ならびにそれらの動作制御方法 |
JP6263035B2 (ja) | 2013-05-17 | 2018-01-17 | キヤノン株式会社 | 撮像装置 |
US20150062422A1 (en) | 2013-08-27 | 2015-03-05 | Semiconductor Components Industries, Llc | Lens alignment in camera modules using phase detection pixels |
CN103810675B (zh) | 2013-09-09 | 2016-09-21 | 深圳市华星光电技术有限公司 | 图像超分辨率重构系统及方法 |
US8917327B1 (en) | 2013-10-04 | 2014-12-23 | icClarity, Inc. | Method to use array sensors to measure multiple types of data at full resolution of the sensor |
CN103531603B (zh) | 2013-10-30 | 2018-10-16 | 上海集成电路研发中心有限公司 | 一种cmos图像传感器 |
WO2015083683A1 (ja) * | 2013-12-05 | 2015-06-11 | オリンパス株式会社 | 撮像装置、撮像装置の作動方法 |
KR102136852B1 (ko) | 2013-12-30 | 2020-07-22 | 삼성전자 주식회사 | Tfa 기반의 시모스 이미지 센서 및 그 동작방법 |
US9438866B2 (en) * | 2014-04-23 | 2016-09-06 | Omnivision Technologies, Inc. | Image sensor with scaled filter array and in-pixel binning |
CN103996170B (zh) | 2014-04-28 | 2017-01-18 | 深圳市华星光电技术有限公司 | 一种具有超高解析度的图像边缘锯齿消除方法 |
JP6415113B2 (ja) | 2014-05-29 | 2018-10-31 | オリンパス株式会社 | 撮像装置、画像処理方法 |
CN104468578B (zh) * | 2014-12-10 | 2017-12-26 | 怀效宁 | 一种无线通讯的优先通讯系统和通讯方法 |
US9888198B2 (en) | 2014-06-03 | 2018-02-06 | Semiconductor Components Industries, Llc | Imaging systems having image sensor pixel arrays with sub-pixel resolution capabilities |
US9438809B2 (en) | 2014-07-25 | 2016-09-06 | Samsung Electronics Co., Ltd. | Methodology for generating high fidelity digital zoom for mobile phone cameras |
US9344639B2 (en) | 2014-08-12 | 2016-05-17 | Google Technology Holdings LLC | High dynamic range array camera |
WO2016038958A1 (ja) | 2014-09-10 | 2016-03-17 | 三菱電機株式会社 | 画像処理装置及び画像処理方法、並びにプログラム及び記録媒体 |
JP6587380B2 (ja) | 2014-09-12 | 2019-10-09 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、プログラム、記憶媒体 |
KR102195311B1 (ko) | 2014-09-15 | 2020-12-24 | 삼성전자주식회사 | 이미지의 잡음 특성 개선 방법 및 그 전자 장치 |
JP5893713B1 (ja) | 2014-11-04 | 2016-03-23 | オリンパス株式会社 | 撮像装置、撮像方法、処理プログラム |
CN104580910B (zh) | 2015-01-09 | 2018-07-24 | 宇龙计算机通信科技(深圳)有限公司 | 基于前、后摄像头的图像合成方法及系统 |
JP6598496B2 (ja) | 2015-04-22 | 2019-10-30 | キヤノン株式会社 | 撮像装置及び信号処理方法 |
WO2016181476A1 (ja) | 2015-05-12 | 2016-11-17 | オリンパス株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
CN104881853B (zh) * | 2015-05-28 | 2018-10-16 | 厦门美图之家科技有限公司 | 一种基于色彩概念化的肤色矫正方法和系统 |
JP6508626B2 (ja) | 2015-06-16 | 2019-05-08 | オリンパス株式会社 | 撮像装置、処理プログラム、撮像方法 |
CN108141509B (zh) | 2015-10-16 | 2020-07-17 | 奥林巴斯株式会社 | 图像处理装置、摄像装置、图像处理方法和存储介质 |
US10148863B2 (en) | 2015-12-08 | 2018-12-04 | Canon Kabushiki Kaisha | Information processing apparatus and information processing method |
CN105578072A (zh) | 2015-12-18 | 2016-05-11 | 广东欧珀移动通信有限公司 | 成像方法、成像装置及电子装置 |
CN105592303B (zh) | 2015-12-18 | 2018-09-11 | 广东欧珀移动通信有限公司 | 成像方法、成像装置及电子装置 |
CN105516697B (zh) | 2015-12-18 | 2018-04-17 | 广东欧珀移动通信有限公司 | 图像传感器、成像装置、移动终端及成像方法 |
CN105430359B (zh) | 2015-12-18 | 2018-07-10 | 广东欧珀移动通信有限公司 | 成像方法、图像传感器、成像装置及电子装置 |
CN105592270B (zh) | 2015-12-18 | 2018-02-06 | 广东欧珀移动通信有限公司 | 图像亮度补偿方法、装置及终端设备 |
CN105578079B (zh) | 2015-12-18 | 2017-11-17 | 广东欧珀移动通信有限公司 | 图像传感器及画质调节方法、成像装置及方法和移动终端 |
CN105611185B (zh) * | 2015-12-18 | 2017-10-31 | 广东欧珀移动通信有限公司 | 图像生成方法、装置及终端设备 |
CN105611122B (zh) | 2015-12-18 | 2019-03-01 | Oppo广东移动通信有限公司 | 图像传感器及输出方法、相位对焦方法、成像装置和终端 |
CN105578006B (zh) | 2015-12-18 | 2018-02-13 | 广东欧珀移动通信有限公司 | 成像方法、成像装置及电子装置 |
CN105578078B (zh) | 2015-12-18 | 2018-01-19 | 广东欧珀移动通信有限公司 | 图像传感器、成像装置、移动终端及成像方法 |
CN105578067B (zh) * | 2015-12-18 | 2017-08-25 | 广东欧珀移动通信有限公司 | 图像生成方法、装置及终端设备 |
CN105430361B (zh) | 2015-12-18 | 2018-03-20 | 广东欧珀移动通信有限公司 | 成像方法、图像传感器、成像装置及电子装置 |
CN105430362B (zh) | 2015-12-18 | 2017-09-19 | 广东欧珀移动通信有限公司 | 成像方法、成像装置及电子装置 |
JP6711612B2 (ja) | 2015-12-21 | 2020-06-17 | キヤノン株式会社 | 画像処理装置、画像処理方法、および撮像装置 |
US9979942B2 (en) | 2016-06-30 | 2018-05-22 | Apple Inc. | Per pixel color correction filtering |
US11354008B2 (en) | 2016-08-10 | 2022-06-07 | Microsoft Technology Licensing, Llc | Visual notification |
CN106341670B (zh) | 2016-11-29 | 2017-09-22 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106507067B (zh) | 2016-11-29 | 2018-01-23 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106504218B (zh) | 2016-11-29 | 2019-03-12 | Oppo广东移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106507018B (zh) | 2016-11-29 | 2019-05-10 | Oppo广东移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106454289B (zh) | 2016-11-29 | 2018-01-23 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106454288B (zh) * | 2016-11-29 | 2018-01-19 | 广东欧珀移动通信有限公司 | 控制方法、控制装置、成像装置及电子装置 |
CN106454054B (zh) | 2016-11-29 | 2019-03-19 | Oppo广东移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106534822B (zh) | 2016-11-29 | 2018-06-29 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
-
2016
- 2016-11-29 CN CN201611092363.8A patent/CN106504218B/zh active Active
-
2017
- 2017-05-19 WO PCT/CN2017/085211 patent/WO2018099007A1/zh active Application Filing
- 2017-10-09 US US15/727,761 patent/US10432905B2/en active Active
- 2017-10-27 EP EP17199021.1A patent/EP3328071B1/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1890688A (zh) * | 2003-12-10 | 2007-01-03 | 索尼株式会社 | 图像判别方法和图像处理装置 |
US20150010242A1 (en) * | 2013-07-08 | 2015-01-08 | Augmented Reality Lab LLC | System and Method for Computer Vision Item Recognition and Target Tracking |
CN105611258A (zh) * | 2015-12-18 | 2016-05-25 | 广东欧珀移动通信有限公司 | 图像传感器的成像方法、成像装置和电子装置 |
CN105825479A (zh) * | 2016-01-31 | 2016-08-03 | 西安电子科技大学 | 一种环境光下的图像增强方法 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018099007A1 (zh) * | 2016-11-29 | 2018-06-07 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
WO2018099005A1 (zh) * | 2016-11-29 | 2018-06-07 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
WO2018098977A1 (zh) * | 2016-11-29 | 2018-06-07 | 广东欧珀移动通信有限公司 | 图像处理方法、图像处理装置、成像装置、制造方法和电子装置 |
WO2018099011A1 (zh) * | 2016-11-29 | 2018-06-07 | 广东欧珀移动通信有限公司 | 图像处理方法、图像处理装置、成像装置及电子装置 |
US10194126B2 (en) | 2016-11-29 | 2019-01-29 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Image processing method, imaging apparatus, and method performed thereby |
US10249021B2 (en) | 2016-11-29 | 2019-04-02 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Image processing method and apparatus, and electronic device |
US10382709B2 (en) | 2016-11-29 | 2019-08-13 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Image processing method and apparatus, and electronic device |
US10382675B2 (en) | 2016-11-29 | 2019-08-13 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Image processing method and apparatus, and electronic device including a simulation true-color image |
US10432905B2 (en) | 2016-11-29 | 2019-10-01 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Method and apparatus for obtaining high resolution image, and electronic device for same |
US10440265B2 (en) | 2016-11-29 | 2019-10-08 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Image processing method and apparatus, electronic device and control method |
US10438320B2 (en) | 2016-11-29 | 2019-10-08 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Image processing method and apparatus, and electronic device |
Also Published As
Publication number | Publication date |
---|---|
CN106504218B (zh) | 2019-03-12 |
WO2018099007A1 (zh) | 2018-06-07 |
US20180152685A1 (en) | 2018-05-31 |
EP3328071B1 (en) | 2020-09-30 |
EP3328071A1 (en) | 2018-05-30 |
US10432905B2 (en) | 2019-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106454289B (zh) | 控制方法、控制装置及电子装置 | |
CN106504218A (zh) | 控制方法、控制装置及电子装置 | |
CN106341670B (zh) | 控制方法、控制装置及电子装置 | |
CN106412407B (zh) | 控制方法、控制装置及电子装置 | |
CN106507067B (zh) | 控制方法、控制装置及电子装置 | |
CN106454054B (zh) | 控制方法、控制装置及电子装置 | |
CN106791477B (zh) | 图像处理方法、图像处理装置、成像装置及制造方法 | |
CN106507080B (zh) | 控制方法、控制装置及电子装置 | |
CN106412592B (zh) | 图像处理方法、图像处理装置、成像装置及电子装置 | |
CN106507069B (zh) | 控制方法、控制装置及电子装置 | |
CN106534822B (zh) | 控制方法、控制装置及电子装置 | |
CN106454288B (zh) | 控制方法、控制装置、成像装置及电子装置 | |
CN106604001A (zh) | 图像处理方法、图像处理装置、成像装置及电子装置 | |
CN106506984A (zh) | 图像处理方法及装置、控制方法及装置、成像及电子装置 | |
CN106507018B (zh) | 控制方法、控制装置及电子装置 | |
CN106507019B (zh) | 控制方法、控制装置、电子装置 | |
US20150194105A1 (en) | Method of more quickly calibrating display panels and calibration apparatus for performing the same | |
CN106507068B (zh) | 图像处理方法及装置、控制方法及装置、成像及电子装置 | |
CN106488203A (zh) | 图像处理方法、图像处理装置、成像装置及电子装置 | |
CN106713790B (zh) | 控制方法、控制装置及电子装置 | |
CN106504217A (zh) | 图像处理方法、图像处理装置、成像装置及电子装置 | |
CN116075882A (zh) | 用于实时led视角校正的系统和方法 | |
US11058282B2 (en) | Colour reference for calibrating a dental colour camera | |
CN110332991A (zh) | 一种光谱的重构方法、装置和电子设备 | |
CN118135917A (zh) | 显示方法、显示模组和显示设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong Applicant after: OPPO Guangdong Mobile Communications Co., Ltd. Address before: 523860 No. 18, Wu Sha Beach Road, Changan Town, Dongguan, Guangdong Applicant before: Guangdong OPPO Mobile Communications Co., Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |