CN106507080A - 控制方法、控制装置及电子装置 - Google Patents

控制方法、控制装置及电子装置 Download PDF

Info

Publication number
CN106507080A
CN106507080A CN201611079623.8A CN201611079623A CN106507080A CN 106507080 A CN106507080 A CN 106507080A CN 201611079623 A CN201611079623 A CN 201611079623A CN 106507080 A CN106507080 A CN 106507080A
Authority
CN
China
Prior art keywords
pixel
image
unit
color
patch image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611079623.8A
Other languages
English (en)
Other versions
CN106507080B (zh
Inventor
唐城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201611079623.8A priority Critical patent/CN106507080B/zh
Publication of CN106507080A publication Critical patent/CN106507080A/zh
Priority to PCT/CN2017/087557 priority patent/WO2018099031A1/zh
Priority to US15/805,355 priority patent/US10559069B2/en
Priority to ES17201321T priority patent/ES2734072T3/es
Priority to EP17201321.1A priority patent/EP3328079B1/en
Application granted granted Critical
Publication of CN106507080B publication Critical patent/CN106507080B/zh
Priority to US16/193,734 priority patent/US10559070B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G06T3/4015—Demosaicing, e.g. colour filter array [CFA], Bayer pattern
    • G06T5/90—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G06T3/4007—Interpolation-based scaling, e.g. bilinear interpolation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • G06T5/70—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/743—Bracketing, i.e. taking a series of images with varying exposure conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843—Demosaicing, e.g. interpolating colour pixel values
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/57—Control of the dynamic range
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/57—Control of the dynamic range
    • H04N25/58—Control of the dynamic range involving two or more exposures
    • H04N25/587—Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10141—Special mode during image acquisition
    • G06T2207/10144—Varying exposure
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing

Abstract

本发明公开了一种控制方法，用于控制电子装置。控制方法包括以下步骤：控制所述感光像素单元阵列以不同曝光参数曝光并输出多帧相对应的色块图像；合并所述多帧色块图像以得到宽动态范围色块图像；通过插值计算方式将所述宽动态范围色块图像转换成仿原图像，所述仿原图像包括预定阵列排布的仿原像素。此外，本发明还公开了一种控制装置和电子装置。本发明实施方式的控制方法、控制装置和电子装置，在应用宽动态范围功能时，首先对多帧色块图像进行宽动态范围合并，而后对合成的宽动态范围色块图像进行处理得到仿原图像，如此仅需将一帧宽动态范围色块图像转换为仿原图像，减少图像处理时间，提高宽动态范围功能的效率，改善用户体验。

Description

控制方法、控制装置及电子装置
技术领域
本发明涉及图像处理技术，特别涉及一种控制方法、控制装置及电子装置。
背景技术
现有的一种图像传感器包括感光像素单元阵列和设置在像素单元阵列上的滤光片单元阵列，每个滤光片单元阵列覆盖对应一个感光像素单元，每个像素单元包括多个感光像素。工作时，可以控制图像传感器曝光输出合并图像，合并图像包括合并像素阵列，同一感光像素单元的多个感光像素合并输出作为一个合并像素。如此，可以提高合并图像的信噪比，然而，合并图像的解析度降低。当然，也可以控制图像传感器曝光输出色块图像，色块图像包括图像像素单元阵列，图像像素单元包括原始像素，每个感光像素对应一个原始像素。然而，由于同一滤光片单元对应的多个原始像素颜色相同，同样无法提高色块图像的解析度。因此，需要通过插值计算的方式将色块图像转化成仿原图像，仿原图像可以包括呈拜耳阵列排布的仿原像素。然而，在应用宽动态范围(High Dynamic Range,HDR)功能时，需要多帧亮度不同的仿原图像，也即是需要进行多次插值计算，耗费资源且耗时。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一。为此，本发明需要提供一种控制方法、控制装置及电子装置。
本发明实施方式的控制方法，用于控制电子装置，所述电子装置包括成像装置和显示器，所述成像装置包括图像传感器，所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列，每个所述滤光片单元覆盖对应一个所述感光像素单元，每个所述感光像素单元包括多个感光像素；所述控制方法包括以下步骤：
控制所述感光像素单元阵列以不同曝光参数曝光并输出多帧相对应的色块图像，所述色块图像包括预定阵列排布的原始像素，每个所述感光像素对应一个所述原始像素；
合并所述多帧色块图像以得到宽动态范围色块图像；和
通过插值计算方式将所述宽动态范围色块图像转换成仿原图像，所述仿原图像包括预定阵列排布的仿原像素。
在某些实施方式中，所述色块图像包括预定阵列排布的图像像素单元，所述图像像素单元包括多个颜色相同的所述原始像素，所述仿原图像包括预定阵列的仿原像素，所述仿原像素包括当前像素，所述原始像素包括与所述当前像素对应的关联像素，所述通过插值计算方式将所述宽动态范围色块图像转换成仿原图像的步骤包括：
判断所述当前像素的颜色与所述关联像素的颜色是否相同；
在所述当前像素的颜色与所述关联像素的颜色相同时，将所述关联像素的像素值作为所述当前像素的像素值；和
在所述当前像素的颜色与所述关联像素的颜色不同时，根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值，所述图像像素单元的阵列包括所述关联像素单元，所述关联像素单元与所述当前像素颜色相同且与所述当前像素相邻。
在某些实施方式中，所述预定阵列包括拜耳阵列。
在某些实施方式中，所述图像像素单元包括2*2阵列的所述原始像素。
在某些实施方式中，所述根据关联像素单元的像素值通过插值方式计算当前像素的像素值的步骤包括以下步骤：
计算所述关联像素各个方向上的渐变量；
计算所述关联像素各个方向上的权重；和
根据所述渐变量及所述权重计算所述当前像素的像素值。
在某些实施方式中，所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤前包括以下步骤：
对所述宽动态范围色块图像做白平衡补偿；
所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤后包括以下步骤：
对所述仿原图像做白平衡补偿还原。
在某些实施方式中，所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤前包括以下步骤：
对所述宽动态范围色块图像做坏点补偿。
在某些实施方式中，所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤前包括以下步骤：
对所述宽动态范围色块图像做串扰补偿。
在某些实施方式中，所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤后包括以下步骤：
对所述仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
本发明实施方式的控制装置，用于控制电子装置，所述电子装置包括成像装置和显示器，所述成像装置包括图像传感器，所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列，每个所述滤光片单元覆盖对应一个所述感光像素单元，每个所述感光像素单元包括多个感光像素；所述控制装置包括：
控制模块，用于控制所述感光像素单元阵列以不同曝光参数曝光并输出多帧相对应的色块图像，所述色块图像包括预定阵列排布的原始像素，每个所述感光像素对应一个所述原始像素；
合并模块，用于合并所述多帧色块图像以得到宽动态范围色块图像；和
图像处理模块，用于通过插值计算方式将所述宽动态范围色块图像转换成仿原图像，所述仿原图像包括预定阵列排布的仿原像素。
在某些实施方式中，所述色块图像包括预定阵列排布的图像像素单元，所述图像像素单元包括多个颜色相同的原始像素，所述仿原图像包括预定阵列的仿原像素，所述仿原像素包括当前像素，所述原始像素包括与所述当前像素对应的关联像素，所述图像处理模块包括：
判断单元，用于判断所述当前像素的颜色与所述关联像素的颜色是否相同；
第一计算单元，用于在所述当前像素的颜色与所述关联像素的颜色相同时，将所述关联像素的像素值作为所述当前像素的像素值；和
第二计算单元，用于在所述当前像素的颜色与所述关联像素的颜色不同时，根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值，所述像素单元包括所述关联像素单元，所述关联像素单元与所述当前像素颜色相同且与所述当前像素相邻。
在某些实施方式中，所述预定阵列包括拜耳阵列。
在某些实施方式中，所述图像像素单元包括2*2阵列的所述原始像素。
在某些实施方式中，所述第二计算单元包括：
第一计算子单元，用于计算所述关联像素各个方向上的渐变量；
第二计算子单元，用于计算所述关联像素各个方向上的权重；和
第三计算子单元，用于根据所述渐变量及所述权重计算所述当前像素的像素值。
在某些实施方式中，所述图像处理模块包括：
白平衡补偿单元，用于对所述宽动态范围色块图像做白平衡补偿；和
白平衡补偿还原单元，用于对所述仿原图像做白平衡补偿还原。
在某些实施方式中，所述图像处理模块包括：
坏点补偿单元，用于对所述宽动态范围色块图像做换点补偿。
在某些实施方式中，所述图像处理模块包括：
串扰补偿单元，用于对所述宽动态范围色块图像做串扰补偿。
在某些实施方式中，所述图像处理模块包括：
处理单元，对所述仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
本发明实施方式的电子装置，包括成像装置、显示器和上述控制装置。
在某些实施方式中，所述电子装置包括手机或平板电脑。
在某些实施方式中，所述成像装置包括前置相机或后置相机。
本发明实施方式的控制方法、控制装置及电子装置，在应用宽动态范围功能时，首先对多帧色块图像进行宽动态范围合并，而后对合成的宽动态范围色块图像进行处理得到仿原图像，如此仅需将一帧宽动态范围色块图像转换为仿原图像，减少图像处理时间，提高宽动态范围功能的效率，改善用户体验。
本发明的附加方面的优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施方式的描述中将变得明显和容易理解，其中：
图1是本发明实施方式的控制方法的流程示意图。
图2是本发明实施方式的电子装置的功能模块示意图。
图3是本发明实施方式的图像传感器的模块示意图。
图4是本发明实施方式的图像传感器的电路示意图。
图5是本发明实施方式的滤光片单元的示意图
图6是本发明实施方式的图像传感器的结构示意图。
图7是本发明实施方式的色块图像的状态示意图。
图8是本发明某些实施方式的控制方法的流程示意图。
图9是本发明某些实施方式的图像处理模块的功能模块示意图。
图10是本发明某些实施方式的控制方法的状态示意图。
图11是本发明某些实施方式的控制方法的状态示意图。
图12是本发明某些实施方式的第二计算单元的功能模块示意图。
图13是本发明某些实施方式的控制方法的流程示意图。
图14是本发明某些实施方式的控制方法的流程示意图。
图15是本发明某些实施方式的控制方法的状态示意图。
具体实施方式
下面详细描述本发明的实施方式，所述实施方式的示例在附图中示出，其中相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的，仅用于解释本发明的实施方式，而不能理解为对本发明的实施方式的限制。
请参阅图1，本发明实施方式的控制方法，用于控制电子装置。电子装置包括成像装置和显示器。成像装置包括图像传感器，图像传感器包括感光像素阵列和设置在感光像素单元阵列上的滤光片单元阵列，每个滤光片单元覆盖对应一个感光像素单元，每个感光像素单元包括多个感光像素。控制方法包括步骤：
S10：控制感光像素单元阵列以不同曝光参数曝光并输出多帧相对应的色块图像；
S20：合并多帧色块图像以得到宽动态范围色块图像；
S30：通过插值计算方式将宽动态范围色块图像转换成仿原图像。
请参阅图2，本发明实施方式的控制装置100，用于控制电子装置1000，电子装置1000还包括成像装置和显示器。成像装置包括图像传感器200。控制装置100包括控制模块110、合并模块120和图像处理模块130。作为例子，本发明实施方式的控制在方法可以由本发明实施方式的控制装置100实现，可应用于电子装置1000并用于控制电子装置1000的成像装置的图像传感器200。
在一些示例中，电子装置1000包括手机或平板电脑。成像装置包括前置相机或后置相机。
请一并参阅图3至图6，本发明实施方式的图像传感器200包括感光像素单元阵列210和设置在感光像素单元阵列210上的滤光片单元阵列220。
进一步地，感光像素单元阵列210包括多个感光像素单元210a，每个感光像素单元210a包括多个相邻的感光像素212。每个感光像素212包括一个感光器件2121和一个传输管2122，其中，感光器件2121可以是光电二极管，传输管2122可以是MOS晶体管。
滤光片单元阵列220包括多个滤光片单元220a，每个滤光片单元220a覆盖对应一个感光像素单元210a。
具体地，在某些示例中，滤光片单元阵列220包括拜耳阵列，也即是说，相邻的四个滤光片单元220a分别为一个红色滤光片单元、一个蓝色滤光片单元和两个绿色滤光片单元。
每一个感光像素单元210a对应同一颜色的滤光片单元220a，若一个感光像素单元210a中一共包括n个相邻的感光器件2121，那么一个滤光片单元220a覆盖一个感光像素单元210a中的n个感光器件2121，该滤光片单元220a可以是一体构造，也可以由n个独立的子滤光片组装连接在一起。
在某些实施方式中，每个感光像素单元210a包括四个相邻的感光像素212，相邻两个感光像素212共同构成一个感光像素子单元2120，感光像素子单元2120还包括一个源极跟随器2123及一个模数转换器2124。感光像素单元210a还包括一个加法器213。其中，一个感光像素子单元2120中的每个传输管2122的一端电极被连接到对应感光器件2121的阴极电极，每个传输管2122的另一端被共同连接至源极跟随器2123的闸极电极，并通过源极跟随器2123源极电极连接至一个模数转换器2124。其中，源极跟随器2122可以是MOS晶体管。两个感光像素子单元2120通过各自的源极跟随器2123及模数转换器2124连接至加法器213。
也即是说，本发明实施方式的图像传感器200的一个感光像素单元210a中相邻的四个感光器件2121共用一个同颜色的滤光片单元220a，每个感光器件2121对应连接一个传输管2122，相邻两个感光器件2121共用一个源极跟随器2123和一个模数转换器2124，相邻的四个感光器件2121共用一个加法器213。
进一步地，相邻的四个感光器件2121呈2*2阵列排布。其中，一个感光像素子单元2120中的两个感光器件2121可以处于同一列。
在成像时，当同一滤光片单元220a下覆盖的四个感光器件2121依次曝光时，经过图像处理可以输出色块图像。
具体地，感光器件2121用于将光照转化为电荷，且产生的电荷与光照强度成比例关系，传输管2122用于根据控制信号来控制电路的导通或断开。当电路导通时，源极跟随器2123用于将感光器件2121经光照产生的电荷信号转化为电压信号。模数转换器2124用于电压信号转换为数字信号，以供与图像传感器200相连的图像处理模块处理。
请参阅图7，以16M的图像传感器200举例来说，本发明实施方式的图像传感器200可以保持16M的感光像素输出，或者说输出色块图像，色块图像包括图像像素单元，图像像素单元包括2*2阵列排布的原始像素，该原始像素的大小与感光像素大小相同，然而由于覆盖相邻四个感光器件2121的滤光片单元220a为同一颜色。
可以理解，色块图像在输出时每个感光像素分别输出，由于相邻四个感光像素颜色相同，因此，一个图像像素单元的四个相邻原始像素的颜色相同，是非典型的拜耳阵列。而图像处理单元无法对非典型拜耳阵列直接进行处理。因此，需将色块图像转化为仿原图像，仿原图像包括预定阵列或者说拜耳阵列排布的仿原像素。如此，可将非典型拜耳阵列的图像像素单元转化为典型拜耳阵列的仿原像素阵列。
进一步地，在应用宽动态范围(High Dynamic Range,HDR)模式时，将不同曝光参数下输出的多帧色块图像进行合并，得到在HDR模式下的色块图像，也即是宽动态范围色块图像。
如上述，色块图像中的每个图像像素单元以非典型拜耳阵列排布，因此无法直接使用图像处理单元进行处理，宽动态范围色块图像同样如此，也即是说，若输出HDR的真彩图像，需要对宽动态范围色块图像进行处理，例如可以通过插值计算方式将宽动态范围色块图像转换为仿原图像。
如此，本发明实施方式的控制方法、控制装置100及电子装置1000，在HDR模式下，对色块图像即进行合并，再对合并后的宽动态范围色块图像进转化，而无需对每一帧色块图像先转化为仿原图像，再进行合并。也即是说，本发明实施方式中，仅需要进行一次色块图像到仿原图像的转化即可，减小了图像处理的运算量和处理时间，提高宽HDR功能的效率，改善用户体验。
请参阅图8及图9，在某些实施方式中，仿原图像包括呈拜耳阵列排布的仿原像素。仿原像素包括当前像素，原始像素包括与当前像素对应的关联像素。
步骤S30包括步骤：
S32：判断当前像素的颜色与关联像素的颜色是否相同；
S34：在当前像素的颜色与关联像素的颜色相同时，将关联像素的像素值作为当前像素的像素值；和
S36：在当前像素的颜色与关联像素的颜色不同时，根据关联像素单元的像素值通过插值方式计算当前像素的像素值。
在某些实施方式中，图像处理模块130包括判断单元132、第一计算单元134和第二计算单元136。步骤S32可以由判断单元132实现，步骤S34可以由第一计算单元134实现，步骤S36可以由第二计算单元136实现。或者说，判断模块132用于判断当前像素的颜色与关联像素的颜色是否相同。第一计算单元134用于在当前像素的颜色与关联像素的颜色相同时，将关联像素的像素值作为当前像素的像素值。第二计算单元136用于在当前像素的颜色与关联像素的颜色不同时，根据关联像素单元的像素值通过插值方式计算当前像素的像素值。
请参阅图10，以图10为例，当前像素为R3’3’和R5’5’，对应的关联像素分别为R33和B55。
在获取当前像素R3’3’时，由于R33’与对应的关联像素R33的颜色相同，因此在转化时直接将R33的像素值作为R33’的像素值。
在获取当前像素R5’5’时，由于R5’5’与对应的关联像素B55的颜色不相同，显然不能直接将B55的像素值作为R5’5’的像素值，需要根据R5’5’的关联像素单元通过插值的方式计算得到。
需要说明的是，以上及下文中的像素值应当广义理解为该像素的颜色属性数值，例如色彩值。
关联像素单元包括多个，例如4个，颜色与当前像素相同且与当前像素相邻的图像像素单元中的原始像素。
需要说明的是，此处相邻应做广义理解，以图10为例，R5’5’对应的关联像素为B55，与B55所在的图像像素单元相邻的且与R5’5’颜色相同的关联像素单元所在的图像像素单元分别为R44、R74、R47、R77所在的图像像素单元，而并非在空间上距离B55所在的图像像素单元更远的其他的红色图像像素单元。其中，与B55在空间上距离最近的红色原始像素分别为R44、R74、R47和R77，也即是说，R55’的关联像素单元由R44、R74、R47和R77组成，R5’5’与R44、R74、R47和R77的颜色相同且相邻。
如此，针对不同情况的当前像素，采用不同方式的将原始像素转化为仿原像素，从而将宽动态范围色块图像转化为仿原图像，由于图像传感器200采用了特殊的拜耳阵列结构的滤光片，提高了图像信噪比，并且在图像处理过程中，通过插值方式对宽动态范围色块图像进行插值处理，提高了图像的分辨率及解析度。
请参阅图11，在某些实施方式中，步骤S36包括以下步骤：
S361：计算关联像素单元各个方向上的渐变量；
S362：计算关联像素单元各个方向上的权重；和
S363：根据渐变量及权重计算当前像素的像素值。
请参阅图12，在某些实施方式中，第二计算单元136包括第一计算子单元1361、第二计算子单元1362和第三计算单元1363。步骤S361可以由第一计算子单元1361实现，步骤S362可以由第二计算子单元1362实现，步骤S363可以由第三计算子单元1363实现。或者说，第一计算子单元1361用于计算关联像素单元各个方向上的渐变量，第二计算子单元1362用于计算关联像素单元各个方向上的权重，第三计算单元1363用于根据渐变量及权重计算当前像素的像素值。
具体地，插值处理方式是参考图像在不同方向上的能量渐变，将与当前像素对应的颜色相同且相邻的关联像素单元依据在不同方向上的渐变权重大小，通过线性插值的方式计算得到当前像素的像素值。其中，在能量变化量较小的方向上，参考比重较大，因此，在插值计算时的权重较大。
在某些示例中，为方便计算，仅考虑水平和垂直方向。
R5’5’由R44、R74、R47和R77插值得到，而在水平和垂直方向上并不存在颜色相同的原始像素，因此需首根据关联像素单元计算在水平和垂直方向上该颜色的分量。其中，水平方向上的分量为R45和R75、垂直方向的分量为R54和R57可以分别通过R44、R74、R47和R77计算得到。
具体地，R45＝R44*2/3+R47*1/3，R75＝2/3*R74+1/3*R77，R54＝2/3*R44+1/3*R74，R57＝2/3*R47+1/3*R77。
然后，分别计算在水平和垂直方向的渐变量及权重，也即是说，根据该颜色在不同方向的渐变量，以确定在插值时不同方向的参考权重，在渐变量小的方向，权重较大，而在渐变量较大的方向，权重较小。其中，在水平方向的渐变量X1＝|R45-R75|，在垂直方向上的渐变量X2＝|R54-R57|，W1＝X1/(X1+X2)，W2＝X2/(X1+X2)。
如此，根据上述可计算得到，R5’5’＝(2/3*R45+1/3*R75)*W2+(2/3*R54+1/3*R57)*W1。可以理解，若X1大于X2，则W1大于W2，因此计算时水平方向的权重为W2，而垂直方向的权重为W1，反之亦反。
如此，可根据插值方式计算得到当前像素的像素值。依据上述对关联像素的处理方式，可将原始像素转化为呈典型拜耳阵列排布的仿原像素，也即是说，相邻的四个2*2阵列的仿原像素包括一个红色仿原像素，两个绿色仿原像素和一个蓝色仿原像素。
需要说明的是，插值的方式包括但不限于本实施例中公开的在计算时仅考虑垂直和水平两个方向相同颜色的像素值的方式，例如还可以参考其他颜色的像素值。
请参阅图9和图13，在某些实施方式中，步骤S36前包括步骤：
S35a：对宽动态范围色块图像做白平衡补偿；
步骤S36后包括步骤：
S37a：对仿原图像做白平衡补偿还原。
在某些实施方式中，图像处理模块130包括白平衡补偿单元135a和白平衡补偿还原单元137a。步骤S35a可以由白平衡补偿单元135a实现，步骤S37a可以由白平衡补偿还原单元137a实现。或者说，白平衡补偿单元135a用于对宽动态范围色块图像做白平衡补偿，白平衡补偿还原单元137a用于对仿原图像做白平衡补偿还原。
具体地，在一些示例中，在将宽动态范围色块图像转化为仿原图像的过程中，也即是在插值过程中，红色和蓝色仿原像素往往不仅参考与其颜色相同的通道的原始像素的颜色，还会参考绿色通道的原始像素的颜色权重。因此，在插值前需要进行白平衡补偿，以在插值计算中排除白平衡的影响。为了不破坏色块图像的白平衡，因此，在插值之后需要将宽动态范围仿原图像进行白平衡补偿还原，还原时根据在补偿中红色、绿色及蓝色的增益值进行还原。
如此，可排除在插值过程中白平衡的影响，并且能够使得插值后得到的宽动态范围仿原图像保持色块图像的白平衡。
请再次参阅图9和图13，在某些实施方式中，步骤S36前包括步骤：
S35b：对色块图像做坏点补偿。
在某些实施方式中，图像处理模块130包括坏点补偿模块135b。步骤S35b可以由坏点补偿模块135b实现。或者说，坏点补偿模块135b用于对宽动态范围色块图像做坏点补偿。
可以理解，受限于制造工艺，图像传感器200可能会存在坏点，坏点通常不随感光度变化而始终呈现同一颜色，坏点的存在将影响图像质量，因此，为保证插值的准确，不受坏点的影响，需要在插值前进行坏点补偿。
具体地，坏点补偿过程中，可以对原始像素进行检测，当检测到某一原始像素为坏点时，可根据其所在的图像像素单元的其他原始像的像素值进行坏点补偿。
如此，可排除坏点对插值处理的影响，提高图像质量。
请再次参阅图9和图13，在某些实施方式中，步骤S36前包括步骤：
S35c：对色块图像做串扰补偿。
在某些实施方式中，图像处理模块130包括串扰补偿模块135c。步骤S35c可以由串扰补偿模块135c实现。或者说，串扰补偿模块135c用于对宽动态范围色块图像做串扰补偿。
具体的，一个感光像素单元中的四个感光像素覆盖同一颜色的滤光片，而感光像素之间可能存在感光度的差异，以至于以仿原图像转化输出的真彩图像中的纯色区域会出现固定型谱噪声，影响图像的质量。因此，需要对宽动态范围色块图像进行串扰补偿。
请参阅图14，如上述解释说明，进行串扰补偿，需要在图像传感器200制造过程中设定补偿参数，并将串扰补偿的相关参数预置于成像装置的存储器中或装设成像装置的电子装置1000例如手机或平板电脑中。
在某些实施方式中，设定补偿参数包括以下步骤：
S351：提供预定光环境；
S352：设置成像装置的成像参数；
S353：拍摄多帧图像；
S354：处理多帧图像以获得串扰补偿参数；和
S355：将串扰补偿参数保存在所述图像处理装置内。
预定光环境例如可包括LED匀光板，5000K左右的色温，亮度1000勒克斯左右，成像参数可包括增益值，快门值及镜头位置。设定好相关参数后，进行串扰补偿参数的获取。
处理过程中，首先在设定的光环境中以设置好的成像参数，获取多张色块图像，并合并成一张色块图像，如此可减少以单张色块图像作为校准基础的噪声影响。
请参阅图15，以图15中的图像像素单元Gr为例，其包括Gr1、Gr2、Gr3和Gr4，串扰补偿目的在于将感光度可能存在差异的感光像素通过补偿基本校准至同一水平。该图像像素单元的平均像素值为Gr_avg＝(Gr1+Gr2+Gr3+Gr4)/4，可基本表征这四个感光像素的感光度的平均水平，以此平均值作为基础值,分别计算Gr1/Gr_avg,Gr2/Gr_avg,Gr3/Gr_avg和Gr4/Gr_avg，可以理解，通过计算每一个原始像素的像素值与该图像像素单元的平均像素值的比值，可以基本反映每个原始像素与基础值的偏差，记录四个比值并作为补偿参数记录到相关装置的存储器中，以在成像时进行调取对每个原始像素进行补偿，从而减少串扰，提高图像质量。
通常，在设定串扰补偿参数后还应当验证所设定的参数是否准确。
验证过程中，首先以相同的光环境和成像参数获取一张色块图像，依据计算得到的补偿参数对该色块图像进行串扰补偿，计算补偿后的Gr’_avg、Gr’1/Gr’_avg、Gr’2/Gr’_avg、Gr’3/Gr’_avg和Gr’4/Gr’_avg。根据计算结果判断补偿参数是否准确，判断可根据宏观与微观两个角度考虑。微观是指某一个原始像素在补偿后仍然偏差较大，成像后易被使用者感知，而宏观则从全局角度，也即是在补偿后仍存在偏差的原始像素的总数目较多时，此时即便单独的每一个原始像素的偏差不大，但作为整体仍然会被使用者感知。因此，针对微观设置一个比例阈值即可，针对宏观需设置一个比例阈值和一个数量阈值。如此，可对设置的串扰补偿参数进行验证，确保补偿参数的正确，以减少串扰对图像质量的影响。
请参阅图9和图13，在某些实施方式中，步骤S36后还包括步骤：
S37b：对仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
在某些实施方式中，图像处理模块130包括处理单元137b。步骤S37b可以由处理单元137b实现，或者说，处理单元137b用于对仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
可以理解，将宽动态范围色块图像转化为仿原图像后，仿原像素排布为典型的拜耳阵列，可采用处理单元137b进行处理，处理过程中包括镜片阴影校正、去马赛克、降噪和边缘锐化处理，如此，处理后的图像可转化为真彩图像。
在本发明的实施方式的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明的实施方式和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的实施方式的限制。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本发明的实施方式的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
在本发明的实施方式的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接或可以相互通讯；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明的实施方式中的具体含义。
在本发明的实施方式中，除非另有明确的规定和限定，第一特征在第二特征之“上”或之“下”可以包括第一和第二特征直接接触，也可以包括第一和第二特征不是直接接触而是通过它们之间的另外的特征接触。而且，第一特征在第二特征“之上”、“上方”和“上面”包括第一特征在第二特征正上方和斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”包括第一特征在第二特征正下方和斜下方，或仅仅表示第一特征水平高度小于第二特征。
上文的公开提供了许多不同的实施方式或例子用来实现本发明的实施方式的不同结构。为了简化本发明的实施方式的公开，上文中对特定例子的部件和设置进行描述。当然，它们仅仅为示例，并且目的不在于限制本发明。此外，本发明的实施方式可以在不同例子中重复参考数字和/或参考字母，这种重复是为了简化和清楚的目的，其本身不指示所讨论各种实施方式和/或设置之间的关系。此外，本发明的实施方式提供了的各种特定的工艺和材料的例子，但是本领域普通技术人员可以意识到其他工艺的应用和/或其他材料的使用。
在本说明书的描述中，参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理模块的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
应当理解，本发明的实施方式的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
此外，在本发明的各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。
尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (21)

1.一种控制方法，用于控制电子装置，其特征在于，所述电子装置包括成像装置和显示器，所述成像装置包括图像传感器，所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列，每个所述滤光片单元覆盖对应一个所述感光像素单元，每个所述感光像素单元包括多个感光像素；所述控制方法包括以下步骤：
控制所述感光像素单元阵列以不同曝光参数曝光并输出多帧相对应的色块图像，所述色块图像包括预定阵列排布的原始像素，每个所述感光像素对应一个所述原始像素；
合并所述多帧色块图像以得到宽动态范围色块图像；和
通过插值计算方式将所述宽动态范围色块图像转换成仿原图像，所述仿原图像包括预定阵列排布的仿原像素。
2.如权利要求1所述的控制方法，其特征在于，所述色块图像包括预定阵列排布的图像像素单元，所述图像像素单元包括多个颜色相同的所述原始像素，所述仿原图像包括预定阵列的仿原像素，所述仿原像素包括当前像素，所述原始像素包括与所述当前像素对应的关联像素，所述通过插值计算方式将所述宽动态范围色块图像转换成仿原图像的步骤包括：
判断所述当前像素的颜色与所述关联像素的颜色是否相同；
在所述当前像素的颜色与所述关联像素的颜色相同时，将所述关联像素的像素值作为所述当前像素的像素值；和
在所述当前像素的颜色与所述关联像素的颜色不同时，根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值，所述图像像素单元的阵列包括所述关联像素单元，所述关联像素单元与所述当前像素颜色相同且与所述当前像素相邻。
3.如权利要求1或2所述的控制方法，其特征在于，所述预定阵列包括拜耳阵列。
4.如权利要求2所述的控制方法，其特征在于，所述图像像素单元包括2*2阵列的所述原始像素。
5.如权利要求2所述的控制方法，其特征在于，所述根据关联像素单元的像素值通过插值方式计算当前像素的像素值的步骤包括以下步骤：
计算所述关联像素各个方向上的渐变量；
计算所述关联像素各个方向上的权重；和
根据所述渐变量及所述权重计算所述当前像素的像素值。
6.如权利要求2所述的控制方法，其特征在于，所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤前包括以下步骤：
对所述宽动态范围色块图像做白平衡补偿；
所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤后包括以下步骤：
对所述仿原图像做白平衡补偿还原。
7.如权利要求2所述的控制方法，其特征在于，所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤前包括以下步骤：
对所述宽动态范围色块图像做坏点补偿。
8.如权利要求2所述的控制方法，其特征在于，所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤前包括以下步骤：
对所述宽动态范围色块图像做串扰补偿。
9.如权利要求2所述的控制方法，其特征在于，所述控制方法在所述根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值的步骤后包括以下步骤：
对所述仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
10.一种控制装置，用于控制电子装置，其特征在于，所述电子装置包括成像装置和显示器，所述成像装置包括图像传感器，所述图像传感器包括感光像素单元阵列和设置在所述感光像素单元阵列上的滤光片单元阵列，每个所述滤光片单元覆盖对应一个所述感光像素单元，每个所述感光像素单元包括多个感光像素；所述控制装置包括：
控制模块，用于控制所述感光像素单元阵列以不同曝光参数曝光并输出多帧相对应的色块图像，所述色块图像包括预定阵列排布的原始像素，每个所述感光像素对应一个所述原始像素；
合并模块，用于合并所述多帧色块图像以得到宽动态范围色块图像；和
图像处理模块，用于通过插值计算方式将所述宽动态范围色块图像转换成仿原图像，所述仿原图像包括预定阵列排布的仿原像素。
11.如权利要求10所述的控制装置，其特征在于，所述色块图像包括预定阵列排布的图像像素单元，所述图像像素单元包括多个颜色相同的原始像素，所述仿原图像包括预定阵列的仿原像素，所述仿原像素包括当前像素，所述原始像素包括与所述当前像素对应的关联像素，所述图像处理模块包括：
判断单元，用于判断所述当前像素的颜色与所述关联像素的颜色是否相同；
第一计算单元，用于在所述当前像素的颜色与所述关联像素的颜色相同时，将所述关联像素的像素值作为所述当前像素的像素值；和
第二计算单元，用于在所述当前像素的颜色与所述关联像素的颜色不同时，根据关联像素单元的像素值通过插值方式计算所述当前像素的像素值，所述像素单元包括所述关联像素单元，所述关联像素单元与所述当前像素颜色相同且与所述当前像素相邻。
12.如权利要求10或11所述的控制装置，其特征在于，所述预定阵列包括拜耳阵列。
13.如权利要求11所述的控制装置，其特征在于，所述图像像素单元包括2*2阵列的所述原始像素。
14.如权利要求11所述的控制装置，其特征在于，所述第二计算单元包括：
第一计算子单元，用于计算所述关联像素各个方向上的渐变量；
第二计算子单元，用于计算所述关联像素各个方向上的权重；和
第三计算子单元，用于根据所述渐变量及所述权重计算所述当前像素的像素值。
15.如权利要求11所述的控制装置，其特征在于，所述图像处理模块包括：
白平衡补偿单元，用于对所述宽动态范围色块图像做白平衡补偿；和
白平衡补偿还原单元，用于对所述仿原图像做白平衡补偿还原。
16.如权利要求11所述的控制装置，其特征在于，所述图像处理模块包括：
坏点补偿单元，用于对所述宽动态范围色块图像做换点补偿。
17.如权利要求11所述的控制装置，其特征在于，所述图像处理模块包括：
串扰补偿单元，用于对所述宽动态范围色块图像做串扰补偿。
18.如权利要求11所述的控制装置，其特征在于，所述图像处理模块包括：
处理单元，对所述仿原图像进行镜片阴影校正、去马赛克、降噪和边缘锐化处理。
19.一种电子装置，其特征在于，包括：
成像装置；
显示器；和
如权利要求10-18任意一项所述的控制装置。
20.如权利要求19所述的电子装置，其特征在于，所述电子装置包括手机或平板电脑。
21.如权利要求19所述的电子装置，其特征在于，所述成像装置包括前置相机或后置相机。
CN201611079623.8A 2016-11-29 2016-11-29 控制方法、控制装置及电子装置 Expired - Fee Related CN106507080B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201611079623.8A CN106507080B (zh) 2016-11-29 2016-11-29 控制方法、控制装置及电子装置
PCT/CN2017/087557 WO2018099031A1 (zh) 2016-11-29 2017-06-08 控制方法和电子装置
US15/805,355 US10559069B2 (en) 2016-11-29 2017-11-07 Image processing method and apparatus, and electronic device
ES17201321T ES2734072T3 (es) 2016-11-29 2017-11-13 Método y aparato de tratamiento de imágenes y dispositivo electrónico
EP17201321.1A EP3328079B1 (en) 2016-11-29 2017-11-13 Image processing method and apparatus, and electronic device
US16/193,734 US10559070B2 (en) 2016-11-29 2018-11-16 Image processing method and apparatus, and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611079623.8A CN106507080B (zh) 2016-11-29 2016-11-29 控制方法、控制装置及电子装置

Publications (2)

Publication Number Publication Date
CN106507080A true CN106507080A (zh) 2017-03-15
CN106507080B CN106507080B (zh) 2018-07-17

Family

ID=58327306

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611079623.8A Expired - Fee Related CN106507080B (zh) 2016-11-29 2016-11-29 控制方法、控制装置及电子装置

Country Status (5)

Country Link
US (2) US10559069B2 (zh)
EP (1) EP3328079B1 (zh)
CN (1) CN106507080B (zh)
ES (1) ES2734072T3 (zh)
WO (1) WO2018099031A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018098977A1 (zh) * 2016-11-29 2018-06-07 广东欧珀移动通信有限公司 图像处理方法、图像处理装置、成像装置、制造方法和电子装置
WO2018099031A1 (zh) * 2016-11-29 2018-06-07 广东欧珀移动通信有限公司 控制方法和电子装置
CN110677636A (zh) * 2019-10-11 2020-01-10 于志国 扩展式信号补偿平台
CN111432099A (zh) * 2020-03-30 2020-07-17 Oppo广东移动通信有限公司 图像传感器、处理系统及方法、电子设备和存储介质

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106488203B (zh) * 2016-11-29 2018-03-30 广东欧珀移动通信有限公司 图像处理方法、图像处理装置、成像装置及电子装置
CN108270942B (zh) * 2018-01-31 2020-09-25 威海华菱光电股份有限公司 图像扫描装置、控制图像扫描光信号的接收方法及装置
CN109523955B (zh) * 2019-01-03 2020-07-07 京东方科技集团股份有限公司 像素补偿方法及装置、存储介质、显示屏
CN112559389A (zh) * 2019-09-25 2021-03-26 阿里巴巴集团控股有限公司 存储控制装置、处理装置、计算机系统和存储控制方法
CN115883974B (zh) * 2023-03-08 2023-05-30 淄博凝眸智能科技有限公司 基于分块曝光的hdr图像生成方法、系统及可读介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW563365B (en) * 2001-09-24 2003-11-21 Winbond Electronics Corp Image compensation processing method of digital camera
CN102985808A (zh) * 2010-05-12 2013-03-20 利-考股份有限公司 宽动态范围成像
CN103004211A (zh) * 2010-04-20 2013-03-27 富士胶片株式会社 成像设备、处理拍摄图像的方法以及处理拍摄图像的程序
CN103190145A (zh) * 2010-11-12 2013-07-03 索尼公司 图像处理装置、成像装置、图像处理方法和程序
CN105578080A (zh) * 2015-12-18 2016-05-11 广东欧珀移动通信有限公司 成像方法、图像传感器、成像装置及电子装置
CN106162112A (zh) * 2016-07-29 2016-11-23 广东欧珀移动通信有限公司 图像色彩处理方法、装置及终端设备

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7034873B2 (en) * 2001-06-29 2006-04-25 Vanguard International Semiconductor Corporation Pixel defect correction in a CMOS active pixel image sensor
JP2006311240A (ja) * 2005-04-28 2006-11-09 Olympus Corp 撮像装置
US20080158396A1 (en) 2006-08-07 2008-07-03 Transchip, Inc. Image Signal Processor For CMOS Image Sensors
US8102435B2 (en) * 2007-09-18 2012-01-24 Stmicroelectronics S.R.L. Method for acquiring a digital image with a large dynamic range with a sensor of lesser dynamic range
KR101086501B1 (ko) 2008-11-26 2011-11-25 주식회사 하이닉스반도체 이미지 데이터 프로세싱 방법, 이미지센서 및 집적회로
JP5471117B2 (ja) * 2009-07-24 2014-04-16 ソニー株式会社 固体撮像装置とその製造方法並びにカメラ
JP2013026722A (ja) * 2011-07-19 2013-02-04 Toshiba Corp 画像処理装置
US8891866B2 (en) 2011-08-31 2014-11-18 Sony Corporation Image processing apparatus, image processing method, and program
JP2013066146A (ja) * 2011-08-31 2013-04-11 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
JP2013066140A (ja) * 2011-08-31 2013-04-11 Sony Corp 撮像装置、および信号処理方法、並びにプログラム
CN104253946B (zh) * 2013-06-27 2018-03-20 聚晶半导体股份有限公司 产生高动态范围图像的方法及其图像传感器
JP6286678B2 (ja) * 2013-07-12 2018-03-07 パナソニックＩｐマネジメント株式会社 撮像装置
JP6643250B2 (ja) * 2014-12-18 2020-02-12 ソニーセミコンダクタソリューションズ株式会社 撮像装置、撮像方法、およびプログラム
CN105578075A (zh) * 2015-12-18 2016-05-11 广东欧珀移动通信有限公司 高动态范围图像的生成方法、拍照装置和终端
CN106507080B (zh) * 2016-11-29 2018-07-17 广东欧珀移动通信有限公司 控制方法、控制装置及电子装置
CN106791477B (zh) * 2016-11-29 2019-07-19 Oppo广东移动通信有限公司 图像处理方法、图像处理装置、成像装置及制造方法
JP6887853B2 (ja) * 2017-04-03 2021-06-16 キヤノン株式会社 撮像装置、その制御方法、プログラム
CN109005392B (zh) * 2017-06-07 2021-01-12 联发科技股份有限公司 一种去马赛克方法及其电路

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW563365B (en) * 2001-09-24 2003-11-21 Winbond Electronics Corp Image compensation processing method of digital camera
CN103004211A (zh) * 2010-04-20 2013-03-27 富士胶片株式会社 成像设备、处理拍摄图像的方法以及处理拍摄图像的程序
CN102985808A (zh) * 2010-05-12 2013-03-20 利-考股份有限公司 宽动态范围成像
CN103190145A (zh) * 2010-11-12 2013-07-03 索尼公司 图像处理装置、成像装置、图像处理方法和程序
CN105578080A (zh) * 2015-12-18 2016-05-11 广东欧珀移动通信有限公司 成像方法、图像传感器、成像装置及电子装置
CN106162112A (zh) * 2016-07-29 2016-11-23 广东欧珀移动通信有限公司 图像色彩处理方法、装置及终端设备

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018098977A1 (zh) * 2016-11-29 2018-06-07 广东欧珀移动通信有限公司 图像处理方法、图像处理装置、成像装置、制造方法和电子装置
WO2018099031A1 (zh) * 2016-11-29 2018-06-07 广东欧珀移动通信有限公司 控制方法和电子装置
US10194126B2 (en) 2016-11-29 2019-01-29 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method, imaging apparatus, and method performed thereby
US10559070B2 (en) 2016-11-29 2020-02-11 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method and apparatus, and electronic device
US10559069B2 (en) 2016-11-29 2020-02-11 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing method and apparatus, and electronic device
CN110677636A (zh) * 2019-10-11 2020-01-10 于志国 扩展式信号补偿平台
CN111432099A (zh) * 2020-03-30 2020-07-17 Oppo广东移动通信有限公司 图像传感器、处理系统及方法、电子设备和存储介质

Also Published As

Publication number Publication date
US10559070B2 (en) 2020-02-11
US10559069B2 (en) 2020-02-11
WO2018099031A1 (zh) 2018-06-07
US20190122337A1 (en) 2019-04-25
EP3328079A1 (en) 2018-05-30
CN106507080B (zh) 2018-07-17
US20180150935A1 (en) 2018-05-31
EP3328079B1 (en) 2019-05-15
ES2734072T3 (es) 2019-12-04

Similar Documents

Publication Publication Date Title
CN106507080A (zh) 控制方法、控制装置及电子装置
CN106412407A (zh) 控制方法、控制装置及电子装置
CN106454289B (zh) 控制方法、控制装置及电子装置
CN106341670B (zh) 控制方法、控制装置及电子装置
CN106412592A (zh) 图像处理方法、图像处理装置、成像装置及电子装置
CN106504218A (zh) 控制方法、控制装置及电子装置
CN106791477B (zh) 图像处理方法、图像处理装置、成像装置及制造方法
CN106507067B (zh) 控制方法、控制装置及电子装置
CN106604001B (zh) 图像处理方法、图像处理装置、成像装置及电子装置
CN106507069B (zh) 控制方法、控制装置及电子装置
CN106454054A (zh) 控制方法、控制装置及电子装置
CN106454288B (zh) 控制方法、控制装置、成像装置及电子装置
CN106534822B (zh) 控制方法、控制装置及电子装置
CN106488203A (zh) 图像处理方法、图像处理装置、成像装置及电子装置
CN106506984A (zh) 图像处理方法及装置、控制方法及装置、成像及电子装置
CN103685992A (zh) 生成高动态范围图像的方法及图像传感器
CN106507068B (zh) 图像处理方法及装置、控制方法及装置、成像及电子装置
CN106507018A (zh) 控制方法、控制装置及电子装置
CN106504217A (zh) 图像处理方法、图像处理装置、成像装置及电子装置
CN106713790A (zh) 控制方法、控制装置及电子装置
CN106357967A (zh) 控制方法、控制装置和电子装置
CN102948152A (zh) 成像设备和成像方法
CN110036631A (zh) 摄像元件和相机

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Patentee after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Patentee before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

CP01 Change in the name or title of a patent holder
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180717

CF01 Termination of patent right due to non-payment of annual fee