CN104125408A - 一种高动态范围图像处理方法及装置 - Google Patents

一种高动态范围图像处理方法及装置 Download PDF

Info

Publication number
CN104125408A
CN104125408A CN201310154552.3A CN201310154552A CN104125408A CN 104125408 A CN104125408 A CN 104125408A CN 201310154552 A CN201310154552 A CN 201310154552A CN 104125408 A CN104125408 A CN 104125408A
Authority
CN
China
Prior art keywords
pixel
value
brightness value
color
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310154552.3A
Other languages
English (en)
Other versions
CN104125408B (zh
Inventor
刘花忍
毛水江
傅璟军
冯卫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BYD Semiconductor Co Ltd
Original Assignee
BYD Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BYD Co Ltd filed Critical BYD Co Ltd
Priority to CN201310154552.3A priority Critical patent/CN104125408B/zh
Priority to US14/783,474 priority patent/US9509918B2/en
Priority to PCT/CN2014/075781 priority patent/WO2014176994A1/en
Priority to EP14792324.7A priority patent/EP2992673B1/en
Publication of CN104125408A publication Critical patent/CN104125408A/zh
Application granted granted Critical
Publication of CN104125408B publication Critical patent/CN104125408B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3871Composing, repositioning or otherwise geometrically modifying originals the composed originals being of different kinds, e.g. low- and high-resolution originals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/587Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
    • H04N25/589Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields with different integration times, e.g. short and long exposures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0084Digital still camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明公开了一种高动态范围图像处理方法,通过对同一拍摄场景的长曝光图像和短曝光图像的亮度值和颜色值,进行目标亮度值计算处理和颜色值修正处理,然后将处理后的目标亮度值和修正颜色值进行合成,解决了现有技术中合成后的图像色彩比较暗淡的问题,提高了合成图像颜色艳丽程度。本发明还公开了一种高动态范围图像处理装置。

Description

一种高动态范围图像处理方法及装置
技术领域
本发明涉及图像处理技术领域,特别涉及一种高动态范围的图像处理方法及装置。
背景技术
自然场景的动态范围大大超出了现有数码设备的捕获能力,传统的低动态范围设备不能完全覆盖真实场景的动态范围,尤其在极度黑暗和光亮度很大的极限场景中。
通常在普通标准动态范围的成像系统上获取高动态范围图像都是利用了不同曝光参数对同一个准静态场景拍摄多张低动态范围图像,然后将该组图像进行合成,其中每一张低动态图像负责采集高动态场景的不同细节,曝光不足图像主要记录场景的高亮度细节,过度曝光图像用来记录场景的暗区部分。
现有的高动态范围图像合成方法为:首先,对同一场景拍摄两张不同曝光量图像,其中,曝光量较大的图像记为长曝光图像,曝光量较小的图像记为短曝光图像;然后,把两张图像中对应位置的长曝光图像像素值L和短曝光图像像素值S按照比例合成,公式如下:RESULT=L*(1-A)+S*A;其中短曝光图像所占比例A=K*Y_S_AVE/256, Y_S_AVE为短曝光图像的平均亮度,K为可调系数。处理完整幅图像数据后,得到具有高动态范围的图像。
采用该方法合成后的图像色彩比较暗淡,原因是:长曝光图像过曝区域亮度很大,但是没有提供颜色信息。短曝光图像亮度较小,提供了一定程度的颜色信息。合成之后的图像亮度和短曝光图像亮度相比要大很多,但是合成后的颜色信息都是短曝光图像提供的。因此颜色信息数值偏小,导致合成图像颜色暗淡。
发明内容
本发明的目的旨在至少解决上述的技术缺陷之一。
为此,本发明的第一个目的在于提出一种高动态范围图像处理方法,包括以下步骤:S11、设置拍摄设备的长曝光时间和短曝光时间,拍摄同一场景的长曝光图像和短曝光图像;S12、获取所述两幅图像中各个像素点的亮度值,并根据所述两幅图像中各个像素点的亮度值,生成各个像素点的目标亮度值;S13、获取所述两幅图像中各个像素点的颜色值,将两幅图像中相同位置像素点的颜色值相加,合成各个像素点的颜色值;S14、对所述合成后的各个像素点的颜色值进行修正,得到各个像素点的修正颜色值;S15、根据步骤S12和S14生成的各个像素点的目标亮度值和修正颜色值,得到合成后的各个像素点的数据;S16、将上述合成后的各个像素点的数据输出,得到高动态范围的图像。
根据本发明提出的高动态范围图像处理方法,通过对同一拍摄场景的长曝光图像和短曝光图像的亮度值和颜色值,进行目标亮度值计算处理和颜色值修正处理,然后将处理后的目标亮度值和修正颜色值进行合成,解决了现有技术中合成后的图像色彩比较暗淡的问题,提高了合成图像颜色艳丽程度。
为达到上述目的,本发明的另一目的在于提出一种高动态范围图像处理装置,该装置包括:图像拍摄单元,通过调节其曝光时间和增益值,获取同一拍摄场景的长曝光图像和短曝光图像;目标亮度值计算单元,获取上所述两幅图像中各个像素点的亮度值,并根据所述两幅图像中各个像素点的亮度值,计算各个像素点的目标亮度值;图像颜色计算单元,获取所述两幅图像中各个像素点的颜色值,将两幅图像中相同位置像素点的颜色值相加,合成各个像素点的颜色值;图像颜色值修正单元,将所述图像颜色计算单元中合成后的各个像素点的颜色值进行修正,得到各个像素点的修正颜色值;图像合成单元,根据上述目标亮度值计算单元、颜色值修正单元得到的各个像素点的目标亮度值和修正颜色值,计算合成后的各个像素点的数据;图像输出单元,将上述图像合成单元得到的合成后的各个像素点的数据输出,得到高动态范围的图像。
根据本发明提出的高动态范围图像处理装置,通过设置目标亮度计算单元和颜色修正单元,对同一拍摄场景的长曝光图像和短曝光图像的亮度值和颜色值,进行目标亮度值计算处理和颜色值修正处理,然后利用图像合成单元把图像处理后的目标亮度值和修正颜色值合成,解决了现有技术中合成后的图像色彩比较暗淡的问题,提高了合成图像颜色艳丽程度。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明高动态范围图像处理方法一实施例的流程图;
图2为本发明高动态范围图像处理方法步骤S12一实施例的流程图;
图3为本发明高动态范围图像处理方法步骤S14一实施例的流程图;
图4为本发明高动态范围图像处理装置一实施例的模块组成示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。
下文的公开提供了许多不同的实施例或例子用来实现本发明的不同结构。为了简化本发明的公开,下文中对特定例子的部件和设置进行描述。当然,它们仅仅为示例,并且目的不在于限制本发明。此外,本发明可以在不同例子中重复参考数字和/或字母。这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施例和/或设置之间的关系。此外,本发明提供了的各种特定的工艺和材料的例子,但是本领域普通技术人员可以意识到其他工艺的可应用于性和/或其他材料的使用。另外,以下描述的第一特征在第二特征之“上”的结构可以包括第一和第二特征形成为直接接触的实施例,也可以包括另外的特征形成在第一和第二特征之间的实施例,这样第一和第二特征可能不是直接接触。
在本发明的描述中,需要说明的是,除非另有规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是机械连接或电连接,也可以是两个元件内部的连通,可以是直接相连,也可以通过中间媒介间接相连,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语的具体含义。
参照下面的描述和附图,将清楚本发明的实施例的这些和其他方面。在这些描述和附图中,具体公开了本发明的实施例中的一些特定实施方式,来表示实施本发明的实施例的原理的一些方式,但是应当理解,本发明的实施例的范围不受此限制。相反,本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
下面参照图1-图3来对本发明一实施例提出的高动态范围图像处理方法进行详细描述。
本发明的一个实施例提出了一种高动态范围图像处理方法,如图1所示,该方法包括以下步骤:
S11、设置拍摄设备的长曝光时间和短曝光时间,拍摄同一场景的长曝光图像和短曝光图像。
本步骤中,长曝光时间和短曝光时间没有具体的数值,相对于正常曝光图像,长曝光图像曝光量较大,短曝光图像曝光不足。其中长曝光时间的长短以能够让场景中较暗的部分正确曝光,体现出足够多的细节为准;短曝光时间的长短以能够让场景中较亮的部分正确曝光,体现出足够多的细节为准。长曝光图像和短曝光图像必须达到像素级的严格对齐,防止最终合成的高动态范围图像上出现重影。
S12、获取所述两幅图像中各个像素点的亮度值,并根据所述两幅图像中各个像素点的亮度值,生成各个像素点的目标亮度值。
本步骤中,长曝光图像各个像素点的亮度值为Y_L,短曝光图像各个像素点的亮度值为Y_S。
于本实施例中,步骤S12具体包括以下步骤:
S121、根据所述两幅图像中各个像素点的亮度值,计算所述短曝光图像的平均亮度值Y_S_AVE,其中所述短曝光图像的平均亮度值Y_S_AVE为短曝光图像中所有像素点的亮度值相加,再除以像素点个数得到的数值。
本步骤中,短曝光图像整体亮度越大,记录场景信息就越多,因此短曝光图像数据所占比例A越大,合成后的图像越能体现这些场景信息。
S122、根据所述短曝光图像的平均亮度值Y_S_AVE确定短曝光图像数据所占比例A。具体地,短曝光图像数据所占比例A的计算公式为:A=K*Y_S_AVE/256,K为设置的系数,Y_S_AVE为短曝光图像的平均亮度值。
本步骤中,K值太小,则A偏小,不能充分记录短曝光图像所记录的场景信息。K值太大,则A偏大,导致合成后图像较暗。因此,设置K的取值范围在0.5到1.5之间,同时限制A的取值范围在20%到50%之间。
S123、根据所述短曝光图像数据所占比例A以及所述两幅图像中各个像素点的亮度值,生成各个像素点的目标亮度值Y_T。
本步骤中,具体地,各个像素点的目标亮度值Y_T的计算公式为:
Y_T=Y_L*(1-A)+Y_S*A,其中Y_L 为长曝光图像中各个像素点的亮度值,Y_S 为短曝光图像中各个像素点的亮度值,A为短曝光图像数据所占比例。
S13、获取所述两幅图像中各个像素点的颜色值,将两幅图像中相同位置像素点的颜色值相加,合成各个像素点的颜色值COLOR。
本步骤中,具体的合成步骤如下:首先获取长曝光图像某个像素点的颜色值COLOR_L,并获取短曝光图像中与该像素点位置对应的像素点的颜色值COLOR_S,然后把这两个像素点的颜色值相加,就得到了合成后的该像素点的颜色值COLOR。
S14、对所述合成后的各个像素点的颜色值COLOR进行修正,得到各个像素点的修正颜色值XCOLOR。
于本实施例中,步骤S14具体包括以下步骤:
S141、根据所述两幅图像中各个像素点的亮度值,生成两幅图像中各个像素点的特征权重值。
本步骤中,图像中各个像素点的亮度值越接近于128,越能体现图像的细节信息,所占权重应该越大。本实施例中,特征权重值为当前像素点的亮度值距离128的距离。具体地,各个像素点的特征权重值计算公式为:
Weight_L=128-abs(128-Y_L);
Weight_S=128-abs(128-Y_S),其中Weight_L为长曝光图像中各个像素点的特征权重值,Weight_S为短曝光图像中各个像素点的特征权重值。
S142、根据所述两幅图像中各个像素点特征权重值,生成各个像素点的特征亮度值Y_M,具体地,特征亮度值Y_M的计算公式为:
Y_M=(Y_L* Weight_L +Y_S*Weight_S)/( Weight_L+Weight_S)。
S143、利用公式XCOLOR = (Y_T/Y_M)*COLOR,对各个像素点的颜色值进行修正,其中Y_T 为各个像素点的目标亮度值,Y_M 为各个像素点的特征亮度值,COLOR 为合成后的各个像素点的颜色值。
S15、根据步骤S12和S14生成的各个像素点的目标亮度值Y_T和修正颜色值XCOLOR,得到合成后的各个像素点的数据RESULT,具体地,合成后的各个像素点的数据RESULT的计算公式为:
RESULT=Y_T+XCOLOR,其中Y_T 为各个像素点的目标亮度值,XCOLOR 为各个像素点的修正颜色值,RESULT为合成后的各个像素点的数据。
S16、将上述合成后的各个像素点的数据输出,得到高动态范围的图像。
在步骤S11之前还可以包括步骤S10,即判断是否需要对图像做高动态范围图像处理,如果需要,则执行步骤S11,否则,拍摄正常曝光的图像,并输出普通动态范围的图像。
根据本发明实施例中提出的高动态范围图像处理方法,通过对同一拍摄场景的长曝光图像和短曝光图像的亮度值和颜色值,进行目标亮度值计算处理和颜色值修正处理,然后将处理后的目标亮度值和修正颜色值进行合成,解决了现有技术中合成后的图像色彩比较暗淡的问题,提高了合成图像颜色艳丽程度。
本发明的另一个实施例还提出了一种高动态范围图像处理装置,如图4所示,该装置包括: 
图像拍摄单元10,通过调节其曝光时间和增益值,获取同一拍摄场景的长曝光图像和短曝光图像。
目标亮度值计算单元20,获取上所述两幅图像中各个像素点的亮度值,并根据所述两幅图像中各个像素点的亮度值,计算各个像素点的目标亮度值Y_T。其中,长曝光图像各个像素点的亮度值为Y_L,短曝光图像各个像素点的亮度值为Y_S。
于本实施例中,目标亮度值计算单元20包括:亮度计算单元201,获取上述两幅图像中各个像素点的亮度值,并根据其计算所述短曝光图像的平均亮度值Y_S_AVE。其中,所述短曝光图像的平均亮度值Y_S_AVE为短曝光图像中所有像素点的亮度值相加,再除以像素点个数得到的数值。
比例计算单元202,根据所述短曝光图像的平均亮度值Y_S_AVE确定短曝光图像数据所占比例A。具体地,短曝光图像数据所占比例A的计算公式为:A=K*Y_S_AVE/256,K为设置的系数,Y_S_AVE为短曝光图像的平均亮度值。K值太小,则A偏小,不能充分记录短曝光图像所记录的场景信息。K值太大,则A偏大,导致合成后图像较暗。因此,设置K的取值范围在0.5到1.5之间,同时限制A的取值范围在20%到50%之间。
亮度生成单元203,根据所述短曝光图像数据所占比例A以及所述两幅图像中各个像素点的亮度值,生成各个像素点的目标亮度值Y_T。具体地,各个像素点的目标亮度值Y_T的计算公式为:
Y_T=Y_L*(1-A)+Y_S*A,其中Y_L 为长曝光图像中各个像素点的亮度值,Y_S 为短曝光图像中各个像素点的亮度值,A为短曝光图像数据所占比例。
图像颜色计算单元30,获取所述两幅图像中各个像素点的颜色值,将两幅图像中相同位置像素点的颜色值相加,合成各个像素点的颜色值COLOR。
图像颜色值修正单元40,将所述图像颜色计算单元中合成后的各个像素点的颜色值进行修正,得到各个像素点的修正颜色值XCOLOR。于本实施例中,图像颜色值修正单元40包括: 
特征权重值计算单元401,根据所述两幅图像中各个像素点的亮度值,生成两幅图像中各个像素点的特征权重值。具体地,各个像素点的特征权重值计算公式为:
Weight_L=128-abs(128-Y_L);
Weight_S=128-abs(128-Y_S),其中Weight_L为长曝光图像中各个像素点的特征权重值,Weight_S为短曝光图像中各个像素点的特征权重值。
特征亮度值计算单元402,根据所述两幅图像中各个像素点特征权重值,生成各个像素点的特征亮度值Y_M。具体地,特征亮度值Y_M的计算公式为:
Y_M=(Y_L* Weight_L +Y_S*Weight_S)/( Weight_L+Weight_S)。
修正单元403,利用公式XCOLOR = (Y_T/Y_M)*COLOR,对各个像素点的颜色值进行修正,其中Y_T 为各个像素点的特征目标亮度值,Y_M 为各个像素点的特征亮度值,XCOLOR 为修正后的各个像素点的颜色值。
图像合成单元50,根据上述目标亮度值计算单元20、颜色值修正单元40得到的各个像素点的目标亮度值Y_T和修正颜色值XCOLOR,计算合成后的各个像素点的数据。
图像输出单元60,将上述图像合成单元得到的合成后的各个像素点的数据输出,得到高动态范围的图像。
本发明实施例的高动态范围图像处理装置还包括一功能选择开关,用于根据需要选择是否需要对图像进行高动态范围图像处理。当拍摄图像时场景中明亮部分曝光过度或者阴暗部分曝光不足,细节丢失,则可选择打开该功能选择开关,即对图像进行高动态范围图像处理,扩大图像的动态范围,增加可视细节信息。否则,可以选择关闭该功能选择开关。
根据本发明实施例提出的高动态范围图像处理装置,通过设置目标亮度计算单元和颜色修正单元,对同一拍摄场景的长曝光图像和短曝光图像的亮度值和颜色值,进行目标亮度值计算处理和颜色值修正处理,然后利用图像合成单元把图像处理后的目标亮度值和修正颜色值合成,解决了现有技术中合成后的图像色彩比较暗淡的问题,提高了合成图像颜色艳丽程度。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同限定。

Claims (12)

1.一种高动态范围图像处理方法,其特征在于,包括以下步骤:
S11、设置拍摄设备的长曝光时间和短曝光时间,拍摄同一场景的长曝光图像和短曝光图像;
S12、获取所述两幅图像中各个像素点的亮度值,并根据所述两幅图像中各个像素点的亮度值,生成各个像素点的目标亮度值;
S13、获取所述两幅图像中各个像素点的颜色值,将两幅图像中相同位置像素点的颜色值相加,合成各个像素点的颜色值;
S14、对所述合成后的各个像素点的颜色值进行修正,得到各个像素点的修正颜色值;
S15、根据步骤S12和S14生成的各个像素点的目标亮度值和修正颜色值,得到合成后的各个像素点的数据;
S16、将上述合成后的各个像素点的数据输出,得到高动态范围的图像。
2.如权利要求1所述的高动态范围图像处理方法,其特征在于,所述的步骤S12具体包括以下步骤:
S121、根据所述两幅图像中各个像素点的亮度值,计算所述短曝光图像的平均亮度值;
S122、根据所述短曝光图像的平均亮度值确定短曝光图像数据所占比例;
S123、根据所述短曝光图像数据所占比例以及所述两幅图像中各个像素点的亮度值,生成各个像素点的目标亮度值。
3.如权利要求2所述的高动态范围图像处理方法,其特征在于,所述短曝光图像数据所占比例A的计算公式为:
A=K*Y_S_AVE/256,K为设置的系数,Y_S_AVE为短曝光图像的平均亮度值。
4.如权利要求2所述的高动态范围图像处理方法,其特征在于,所述短曝光图像的平均亮度值为短曝光图像中所有像素点的亮度值相加,再除以像素点个数得到的数值。
5.如权利要求1所述的高动态范围图像处理方法,其特征在于,所述步骤S15中,得到合成后的各个像素点的数据的公式为:
RESULT=Y_T+XCOLOR,其中Y_T 为各个像素点的目标亮度值,XCOLOR 为各个像素点的修正颜色值,RESULT为合成后的各个像素点的数据。
6.如权利要求5所述的高动态范围图像处理方法,其特征在于,所述各个像素点的目标亮度值的计算公式为:
Y_T=Y_L*(1-A)+Y_S*A,其中Y_L 为长曝光图像中各个像素点的亮度值,Y_S 为短曝光图像中各个像素点的亮度值,A为短曝光图像数据所占比例。
7.如权利要求1所述的高动态范围图像处理方法,其特征在于,所述步骤S14具体包括以下步骤:
S141、根据所述两幅图像中各个像素点的亮度值,生成两幅图像中各个像素点的特征权重值;
S142、根据所述两幅图像中各个像素点特征权重值,生成各个像素点的特征亮度值;
S143、利用公式XCOLOR = (Y_T/Y_M)*COLOR,对各个像素点的颜色值进行修正,其中Y_T 为各个像素点的特征目标亮度值,Y_M 为各个像素点的特征亮度值,COLOR 为合成后的各个像素点的颜色值。
8.如权利要求7所述的高动态范围图像处理方法,其特征在于,所述步骤S141中,各个像素点的特征权重值计算公式为:
Weight_L=128-abs(128-Y_L);
Weight_S=128-abs(128-Y_S),其中Weight_L为长曝光图像中各个像素点的特征权重值,Weight_S为短曝光图像中各个像素点的特征权重值。
9.如权利要求8所述的高动态范围图像处理方法,其特征在于,所述步骤S142中,特征亮度值的计算公式为:
Y_M=(Y_L* Weight_L +Y_S*Weight_S)/( Weight_L+Weight_S)。
10.一种高动态范围图像处理装置,其特征在于,包括:
图像拍摄单元,通过调节其曝光时间和增益值,获取同一拍摄场景的长曝光图像和短曝光图像;
目标亮度值计算单元,获取上所述两幅图像中各个像素点的亮度值,并根据所述两幅图像中各个像素点的亮度值,计算各个像素点的目标亮度值;
图像颜色值计算单元,获取所述两幅图像中各个像素点的颜色值,将两幅图像中相同位置像素点的颜色值相加,合成各个像素点的颜色值;
图像颜色值修正单元,将所述图像颜色计算单元中合成后的各个像素点的颜色值进行修正,得到各个像素点的修正颜色值;
图像合成单元,根据上述目标亮度值计算单元、颜色值修正单元得到的各个像素点的目标亮度值和修正颜色值,计算合成后的各个像素点的数据;
图像输出单元,将上述图像合成单元得到的合成后的各个像素点的数据输出,得到高动态范围的图像。
11. 如权利要求10所述的高动态范围图像处理装置,其特征在于,所述目标亮度值计算单元包括:
亮度计算单元,获取上所述两幅图像中各个像素点的亮度值,并根据其计算所述短曝光图像的平均亮度值,
比例计算单元,所述短曝光图像的平均亮度值确定短曝光图像数据所占比例;
亮度生成单元,根据所述短曝光图像数据所占比例以及所述两幅图像中各个像素点的亮度值,生成各个像素点的目标亮度值。
12.如权利要求10所述的高动态范围图像处理装置,其特征在于,所述图像颜色值修正单元包括: 
特征权重值计算单元,根据所述两幅图像中各个像素点的亮度值,生成两幅图像中各个像素点的特征权重值;
特征亮度值计算单元,根据所述两幅图像中各个像素点特征权重值,生成各个像素点的特征亮度值;
修正单元,利用公式XCOLOR = (Y_T/Y_M)*COLOR,对各个像素点的颜色值进行修正,其中Y_T 为各个像素点的特征目标亮度值,Y_M 为各个像素点的特征亮度值,COLOR 为合成后的各个像素点的颜色值。
CN201310154552.3A 2013-04-28 2013-04-28 一种高动态范围图像处理方法及装置 Active CN104125408B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201310154552.3A CN104125408B (zh) 2013-04-28 2013-04-28 一种高动态范围图像处理方法及装置
US14/783,474 US9509918B2 (en) 2013-04-28 2014-04-21 Method and device for obtaining high dynamic range image
PCT/CN2014/075781 WO2014176994A1 (en) 2013-04-28 2014-04-21 Method and device for obtaining high dynamic range image
EP14792324.7A EP2992673B1 (en) 2013-04-28 2014-04-21 Method, device and computer program product for obtaining high dynamic range image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310154552.3A CN104125408B (zh) 2013-04-28 2013-04-28 一种高动态范围图像处理方法及装置

Publications (2)

Publication Number Publication Date
CN104125408A true CN104125408A (zh) 2014-10-29
CN104125408B CN104125408B (zh) 2018-06-12

Family

ID=51770660

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310154552.3A Active CN104125408B (zh) 2013-04-28 2013-04-28 一种高动态范围图像处理方法及装置

Country Status (4)

Country Link
US (1) US9509918B2 (zh)
EP (1) EP2992673B1 (zh)
CN (1) CN104125408B (zh)
WO (1) WO2014176994A1 (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104301624A (zh) * 2014-10-30 2015-01-21 青岛海信移动通信技术股份有限公司 一种图像拍摄亮度控制方法及装置
CN104869297A (zh) * 2015-06-15 2015-08-26 联想(北京)有限公司 图像处理方法和电子设备
CN105163047A (zh) * 2015-09-15 2015-12-16 厦门美图之家科技有限公司 一种基于色彩空间转换的hdr图像生成方法、系统及拍摄终端
CN106162131A (zh) * 2015-04-28 2016-11-23 艾韬 一种实时图像处理方法
CN106327444A (zh) * 2016-08-23 2017-01-11 凌云光技术集团有限责任公司 一种用于高动态范围图像合成中颜色合成的方法及装置
CN106791470A (zh) * 2016-12-28 2017-05-31 上海兴芯微电子科技有限公司 基于高动态范围摄像装置的曝光控制方法和装置
CN107071241A (zh) * 2015-12-28 2017-08-18 佳能株式会社 固态摄像元件和摄像设备
CN107077727A (zh) * 2014-11-21 2017-08-18 德克萨斯仪器股份有限公司 处理宽动态范围图像的有效方法
CN107734246A (zh) * 2016-08-12 2018-02-23 深圳市易瞳科技有限公司 一种图像处理方法、装置及相关电路
CN108320273A (zh) * 2017-01-16 2018-07-24 比亚迪股份有限公司 图片合成方法及图像合成装置
CN108989713A (zh) * 2017-06-02 2018-12-11 宏达国际电子股份有限公司 影像处理方法、电子装置及非暂态电脑可读取记录媒体
CN109712091A (zh) * 2018-12-19 2019-05-03 深圳市华星光电技术有限公司 图片处理方法、装置及电子设备
CN110677558A (zh) * 2018-07-02 2020-01-10 华晶科技股份有限公司 图像处理方法与电子装置

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9852531B2 (en) * 2014-07-11 2017-12-26 Samsung Electronics Co., Ltd. Electronic apparatus and method for controlling the same
US10257393B2 (en) 2016-02-12 2019-04-09 Contrast, Inc. Devices and methods for high dynamic range video
US10264196B2 (en) 2016-02-12 2019-04-16 Contrast, Inc. Systems and methods for HDR video capture with a mobile device
US10129485B2 (en) 2016-06-10 2018-11-13 Microsoft Technology Licensing, Llc Methods and systems for generating high dynamic range images
WO2018031441A1 (en) 2016-08-09 2018-02-15 Contrast, Inc. Real-time hdr video for vehicle control
US10560629B2 (en) 2017-05-23 2020-02-11 Google Llc Systems and methods for automatic exposure in high dynamic range video capture systems
US11265530B2 (en) 2017-07-10 2022-03-01 Contrast, Inc. Stereoscopic camera
US10951888B2 (en) 2018-06-04 2021-03-16 Contrast, Inc. Compressed high dynamic range video
CN108989700B (zh) * 2018-08-13 2020-05-15 Oppo广东移动通信有限公司 成像控制方法、装置、电子设备以及计算机可读存储介质
KR20210053377A (ko) 2019-11-01 2021-05-12 삼성전자주식회사 이미지 센서 및 이미지 신호 처리기를 포함하는 이미지 장치, 및 이미지 센서의 동작 방법
CN112019762B (zh) * 2020-07-23 2022-06-21 深圳市芯睿视科技有限公司 视频处理方法及装置、存储介质及电子设备
US11595589B2 (en) 2021-07-22 2023-02-28 Arthrex, Inc. Surgical camera system with high dynamic range

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3907173B2 (ja) * 2002-02-20 2007-04-18 富士フイルム株式会社 画像合成方法及びその装置並びにデジタルスチルカメラ
US20090153699A1 (en) * 2007-12-18 2009-06-18 Sony Corporation Imaging apparatus, imaging processing method, and imaging control program
CN102970549A (zh) * 2012-09-20 2013-03-13 华为技术有限公司 图像处理方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5375457B2 (ja) * 2008-09-03 2013-12-25 株式会社リコー 撮像装置及び撮像方法
US8885978B2 (en) 2010-07-05 2014-11-11 Apple Inc. Operating a device to capture high dynamic range images
US8810663B2 (en) * 2011-01-27 2014-08-19 Aptina Imaging Corporation Methods for motion correction for high-dynamic-range imaging systems
CN102420944B (zh) 2011-04-25 2013-10-16 展讯通信(上海)有限公司 一种高动态范围图像合成方法及装置
JP2012234393A (ja) * 2011-05-02 2012-11-29 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
JP2013066142A (ja) 2011-08-31 2013-04-11 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3907173B2 (ja) * 2002-02-20 2007-04-18 富士フイルム株式会社 画像合成方法及びその装置並びにデジタルスチルカメラ
US20090153699A1 (en) * 2007-12-18 2009-06-18 Sony Corporation Imaging apparatus, imaging processing method, and imaging control program
CN102970549A (zh) * 2012-09-20 2013-03-13 华为技术有限公司 图像处理方法及装置

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104301624B (zh) * 2014-10-30 2018-04-03 青岛海信移动通信技术股份有限公司 一种图像拍摄亮度控制方法及装置
CN104301624A (zh) * 2014-10-30 2015-01-21 青岛海信移动通信技术股份有限公司 一种图像拍摄亮度控制方法及装置
CN107077727A (zh) * 2014-11-21 2017-08-18 德克萨斯仪器股份有限公司 处理宽动态范围图像的有效方法
CN106162131A (zh) * 2015-04-28 2016-11-23 艾韬 一种实时图像处理方法
CN106162131B (zh) * 2015-04-28 2018-08-28 深圳市易瞳科技有限公司 一种实时图像处理方法
CN104869297A (zh) * 2015-06-15 2015-08-26 联想(北京)有限公司 图像处理方法和电子设备
CN105163047B (zh) * 2015-09-15 2018-11-06 厦门美图之家科技有限公司 一种基于色彩空间转换的hdr图像生成方法、系统及拍摄终端
CN105163047A (zh) * 2015-09-15 2015-12-16 厦门美图之家科技有限公司 一种基于色彩空间转换的hdr图像生成方法、系统及拍摄终端
CN107071241A (zh) * 2015-12-28 2017-08-18 佳能株式会社 固态摄像元件和摄像设备
CN107734246B (zh) * 2016-08-12 2020-09-15 深圳市易瞳科技有限公司 一种图像处理方法、装置及相关电路
CN107734246A (zh) * 2016-08-12 2018-02-23 深圳市易瞳科技有限公司 一种图像处理方法、装置及相关电路
CN106327444A (zh) * 2016-08-23 2017-01-11 凌云光技术集团有限责任公司 一种用于高动态范围图像合成中颜色合成的方法及装置
CN106791470B (zh) * 2016-12-28 2019-08-16 上海兴芯微电子科技有限公司 基于高动态范围摄像装置的曝光控制方法和装置
CN106791470A (zh) * 2016-12-28 2017-05-31 上海兴芯微电子科技有限公司 基于高动态范围摄像装置的曝光控制方法和装置
CN108320273A (zh) * 2017-01-16 2018-07-24 比亚迪股份有限公司 图片合成方法及图像合成装置
CN108320273B (zh) * 2017-01-16 2020-10-23 比亚迪股份有限公司 图片合成方法及图像合成装置
CN108989713A (zh) * 2017-06-02 2018-12-11 宏达国际电子股份有限公司 影像处理方法、电子装置及非暂态电脑可读取记录媒体
CN110677558A (zh) * 2018-07-02 2020-01-10 华晶科技股份有限公司 图像处理方法与电子装置
CN110677558B (zh) * 2018-07-02 2021-11-02 华晶科技股份有限公司 图像处理方法与电子装置
CN109712091A (zh) * 2018-12-19 2019-05-03 深圳市华星光电技术有限公司 图片处理方法、装置及电子设备

Also Published As

Publication number Publication date
EP2992673A1 (en) 2016-03-09
US20160057333A1 (en) 2016-02-25
EP2992673A4 (en) 2016-12-28
EP2992673B1 (en) 2019-10-16
CN104125408B (zh) 2018-06-12
US9509918B2 (en) 2016-11-29
WO2014176994A1 (en) 2014-11-06

Similar Documents

Publication Publication Date Title
CN104125408A (zh) 一种高动态范围图像处理方法及装置
WO2020029732A1 (zh) 全景拍摄方法、装置和成像设备
US8305487B2 (en) Method and apparatus for controlling multiple exposures
CN102447912B (zh) 图像处理装置、白平衡校正方法以及摄像装置
TWI491214B (zh) 影像擷取裝置及控制影像擷取裝置的方法
US8369654B2 (en) Developing apparatus, developing method and computer program for developing processing for an undeveloped image
CN110246101B (zh) 图像处理方法和装置
US8750608B2 (en) Image processing method and apparatus
CN106878624A (zh) 摄像装置和摄像方法
KR102243292B1 (ko) 컬러반응곡선을 이용한 hdr 영상 생성방법, hdr 영상 생성장치, 카메라 및 기록매체
CN104796621A (zh) 摄像装置以及摄像方法
WO2020034701A1 (zh) 成像控制方法、装置、电子设备以及可读存储介质
JP2020533883A (ja) ダブルカメラベースの撮像のための方法および装置
CN109040607A (zh) 成像控制方法、装置、电子设备和计算机可读存储介质
JP6611543B2 (ja) 画像処理装置、画像処理方法、およびプログラム
US20200364912A1 (en) Image processing apparatus, image processing method, and storage medium
US9413974B2 (en) Information processing apparatus, image sensing apparatus, control method, and recording medium for conversion processing
JP5854716B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP6316043B2 (ja) 装置、方法、及びプログラム
CN106537896B (zh) 成像控制器件、成像装置和成像控制方法
JP7397640B2 (ja) 画像処理装置および画像処理方法
US11057598B2 (en) Image processing apparatus, image capturing apparatus, image processing method, and storage medium
JP2006303967A (ja) 撮像装置および撮像装置の制御方法
JP2020136823A (ja) 画像処理装置、撮像装置、画像処理方法、撮像装置の制御方法、及びプログラム
JP2016127505A (ja) 画像処理装置及び画像処理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20191202

Address after: 518119 1 Yanan Road, Kwai Chung street, Dapeng New District, Shenzhen, Guangdong

Patentee after: SHENZHEN BYD MICROELECTRONICS Co.,Ltd.

Address before: BYD 518118 Shenzhen Road, Guangdong province Pingshan New District No. 3009

Patentee before: BYD Co.,Ltd.

TR01 Transfer of patent right
CP01 Change in the name or title of a patent holder

Address after: 518119 No.1 Yan'an Road, Kuiyong street, Dapeng New District, Shenzhen City, Guangdong Province

Patentee after: BYD Semiconductor Co.,Ltd.

Address before: 518119 No.1 Yan'an Road, Kuiyong street, Dapeng New District, Shenzhen City, Guangdong Province

Patentee before: BYD Semiconductor Co.,Ltd.

CP01 Change in the name or title of a patent holder
CP03 Change of name, title or address

Address after: 518119 No.1 Yan'an Road, Kuiyong street, Dapeng New District, Shenzhen City, Guangdong Province

Patentee after: BYD Semiconductor Co.,Ltd.

Address before: 518119 No.1 Yan'an Road, Kwai Chung street, Dapeng New District, Shenzhen City, Guangdong Province

Patentee before: SHENZHEN BYD MICROELECTRONICS Co.,Ltd.

CP03 Change of name, title or address