CN112367458A - Hdr图像的生成方法及装置、存储介质、图像处理设备 - Google Patents
Hdr图像的生成方法及装置、存储介质、图像处理设备 Download PDFInfo
- Publication number
- CN112367458A CN112367458A CN202010990213.9A CN202010990213A CN112367458A CN 112367458 A CN112367458 A CN 112367458A CN 202010990213 A CN202010990213 A CN 202010990213A CN 112367458 A CN112367458 A CN 112367458A
- Authority
- CN
- China
- Prior art keywords
- image
- exposure
- shooting
- frame
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000004590 computer program Methods 0.000 claims description 8
- 230000002194 synthesizing effect Effects 0.000 claims description 6
- 230000015572 biosynthetic process Effects 0.000 abstract description 21
- 238000003786 synthesis reaction Methods 0.000 abstract description 21
- 230000000694 effects Effects 0.000 abstract description 10
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 12
- 239000003086 colorant Substances 0.000 description 5
- 101100242909 Streptococcus pneumoniae (strain ATCC BAA-255 / R6) pbpA gene Proteins 0.000 description 1
- 101100269618 Streptococcus pneumoniae serotype 4 (strain ATCC BAA-334 / TIGR4) aliA gene Proteins 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 101150109310 msrAB1 gene Proteins 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/684—Vibration or motion blur correction performed by controlling the image sensor readout, e.g. by controlling the integration time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
- H04N25/58—Control of the dynamic range involving two or more exposures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
一种HDR图像的生成方法及装置、存储介质、图像处理设备,其中,所述方法包括:进行多次拍摄,每次拍摄时像素阵列中的像素的曝光参数不同,以使得各次拍摄得到的图像中包含空间域动态信息;对多次拍摄得到的图像做时间域动态处理,以得到高动态范围图像,其中,所述多次拍摄使用多种曝光参数。通过该方法,能够结合时间域和空间域两种维度,使得最后得到的HDR图像的动态范围更大、动态信息更多,有益于后续图像算法合成得到更好的动态图像效果。
Description
技术领域
本发明涉及图像处理领域,具体地涉及一种HDR图像的生成方法及装置、存储介质、图像处理设备。
背景技术
高动态范围(High-Dynamic Range,简称HDR)图像相比普通的图像可以提供更多的动态范围和图像细节,和人眼看到的图像比较接近。现有的HDR技术一般实施方式为:打开相机并切换到HDR模式,点击拍照,并连续获取多帧不同的曝光值(Exposure Value,简称EV)的图像数据,按照设定的合成算法合成HDR图像。
然而,现有的HDR图像的生成方法获取的HDR图像的动态范围仍不足以模拟人眼看到的图像,尤其在对运动目标进行跟踪拍摄时,拍摄到的HDR图像的效果较差,如产生重影、鬼影等现象。
发明内容
本发明解决的技术问题是如何提高HDR图像的动态范围,可以提高对运动目标进行跟踪拍摄的拍摄效果。
为解决上述技术问题,本发明实施例提供一种HDR图像的生成方法,所述方法包括:进行多次拍摄,每次拍摄时像素阵列中的像素的曝光参数不同,以使得各次拍摄得到的图像中包含空间域动态信息;对多次拍摄得到的图像做时间域动态处理,以得到高动态范围图像,其中,所述多次拍摄使用多种曝光参数。
可选的,所述对每次拍摄得到的图像做空间域动态处理,包括:在每次拍摄时,设置不同像素区域对应的曝光参数,以根据不同的像素区域的曝光参数进行曝光。
可选的,根据不同的像素区域的曝光参数进行曝光,包括:获取每次拍摄得到的图像中每个像素的颜色;为同颜色的若干个像素设置不同的曝光参数进行曝光
可选的,对单次拍摄得到的图像进行像素合成。
可选的,所述对单次拍摄得到的图像进行像素合成,包括:将曝光后同颜色的若干个像素合成为一个像素。
可选的,在每次拍摄时,设置不同像素区域对应的模拟增益以对不同像素区域进行不同的亮度调整。
可选的,在每次拍摄时,对拍摄得到的图像进行整帧曝光,在一帧图像曝光读出后,继续对下一帧图像曝光。
可选的,在每次拍摄时,对一帧的目标行完成曝光读出后,继续对下一帧图像中所述目标行进行曝光读出。
可选的,所述对一帧的目标行完成曝光读出后,继续对下一帧图像中所述目标行进行曝光读出,包括:在每帧图像的目标行曝光读出的预设时长之后,继续对下一帧图像中所述目标行进行曝光读出。
本发明实施例还提供一种HDR图像的生成装置,所述装置包括:空间域处理模块,用于进行多次拍摄,每次拍摄时像素阵列中的像素的曝光参数不同,以使得各次拍摄得到的图像中包含空间域动态信息;时间域处理模块,用于对多次拍摄得到的图像做时间域动态处理,以得到高动态范围图像,其中,所述多次拍摄使用多种曝光参数。
本发明实施例还提供一种存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述方法的步骤。
本发明实施例还提供一种图像处理设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述方法的步骤。
与现有技术相比,本发明实施例的技术方案具有以下有益效果:
本发明实施例提供的HDR图像的生成方法,对每次拍摄得到的包含空间域动态信息的多帧图像做时间域动态处理,生成该场景的高动态范围图像。结合时间域和空间域两种维度,使得最后得到的HDR图像的动态范围更大、动态信息更多,有益于后续图像算法合成得到更好的动态图像效果。
进一步地,将每帧图像的像素划分为不同的像素区域,并对每帧图像的多个像素区域设置不同的曝光参数或模拟增益,实现不同的曝光效果,使得各次拍摄得到的图像中包含空间域动态信息。进一步,可以选择对曝光后的图像进行像素合成,以实现该帧图像空间域上的高动态。
进一步地,在每次拍摄时,对一帧的目标行完成曝光读出后,继续对下一帧图像中所述目标行进行曝光读出。
进一步地,在第一帧图像未完成曝光读出前进行第二帧图像的曝光,从而可以缩短连续帧曝光的帧时间间隔,以减轻运动物体对图像的影响。
附图说明
图1为本发明实施例的一种HDR图像的生成方法的流程示意图;
图2为本发明实施例的第一种对多帧图像连续曝光的示意图;
图3是本发明实施例的第二种对多帧图像连续曝光的示意图;
图4为本发明实施例的一种Bayer pattern的示意图;
图5为本发明实施例的一种4cell pattern的示意图;
图6为本发明实施例的一种对多帧图像空间动态处理图像逐帧曝光的示意图;
图7为本发明实施例的另一种对多帧图像进行连续曝光的示意图;
图8为本发明实施例的一种HDR图像的生成装置的结构示意图。
具体实施方式
如背景技术所言,现有技术存在生成的HDR图像的动态范围较低,尤其在对运动目标进行跟踪拍摄时,得到的HDR图像的效果较差,如产生重影、鬼影等现象。
为解决上述问题,本发明实施例提供了一种HDR图像的生成方法及装置、存储介质、图像处理设备,HDR图像的生成方法包括:进行多次拍摄,每次拍摄时像素阵列中的像素的曝光参数不同,以使得各次拍摄得到的图像中包含空间域动态信息;对多次拍摄得到的图像做时间域动态处理,以得到高动态范围图像,其中,所述多次拍摄使用多种曝光参数。
通过HDR图像的生成方法,能够有效提高HDR图像的动态范围,以提高对运动目标进行跟踪拍摄的拍摄效果。
为使本发明的上述目的、特征和有益效果能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。
请参见图1,图1提供了本发明实施例的一种HDR图像的生成方法的流程示意图,该方法具体可以包括下述步骤S101和S102,其中:
步骤S101,进行多次拍摄,每次拍摄时像素阵列中的像素的曝光参数不同,以使得各次拍摄得到的图像中包含空间域动态信息;
通过拍摄设备对同一场景进行多次拍摄,获取每次拍摄得到的图像数据(以下简称图像)。其中,每次拍摄时,像素阵列中包含的多个像素(pixel)对应的曝光参数并不完全相同。由此,拍摄得到的图像中包含了空间域动态信息。空间域动态信息可用于根据多次拍摄得到的多帧图像实现空间域上的高动态的信息,一般可通过牺牲该图像的分辨率来实现空间域上的高动态。
可选的,曝光参数可包括曝光值(EV)、拍摄时相机感光元件(如图像传感器,简称sensor)的曝光时间等。
在实现空间域上的高动态时,可利用每帧图像不同像素区域或不同像素的曝光参数,将若干个像素合成一个像素,以实现空间域上的高动态。例如可采用现有的Z字形HDR,也称Zigzag HDR或ZZ HDR或棋盘格HDR。
可选的,进行多次拍摄获取多帧图像时,可对各帧图像先根据预设检测规则进行检测,以确定该图像的清晰度、分辨率等是否满足合成HDR图像的需求,若满足,则继续执行后续步骤S102,若不满足,则可忽略该帧图像或者重新采集一帧满足需求的图像。
步骤S102,对多次拍摄得到的图像做时间域动态处理,以得到高动态范围图像,其中,所述多次拍摄使用多种曝光参数。
时间域动态处理即对多次拍摄得到的多帧图像进行时间域上的高动态,即对同一场景采集得到的不同曝光参数的多帧图像进行合成,以提高采集到的该场景图像的动态范围。
可选的,时间域动态处理时需对采集到的多帧图像按照各自的曝光参数进行连续曝光,具体可以采用以下两种方式:
如图2所示,图2提供了第一种对多帧图像连续曝光的示意图。该曝光方式为对多帧图像(图2中以3帧图像为例,即第一帧Frame1、第二帧Frame2和第三帧Frame3)逐一进行整帧曝光(即图2中的第一次曝光exp1、第二次曝光exp2和第三次曝光exp3),即对一帧图像完成曝光以后再进行下一帧图像的曝光,这种方式不需要相机感光元件或图像传感器对各帧图像进行特殊处理,只需要利用软件调整曝光参数即可。
请参见图3,图3提供了第二种对多帧图像进行连续曝光的示意图;以连续两帧图像的曝光为例,该两帧图像按拍摄的时间顺序称为第一帧图像(对应图3中的白色区域)和第二帧图像(对应图3中的阴影区域),将该曝光方式是在对第一帧图像第一行(图3中白色区域的line1,以下白色区域省略)完成曝光读出以后,继续读第二行(line2)、第三行(line3)、第四行(line4)…第N行(lineN)、第N+1行(lineN+1)…第N+M行(lineN+M),在间隔一定时间(也即line1与灰色区域的line1之间的时间),再读一次第一行,此时该行为第二帧图像的第一行(图3中方块标注的区域的line1),间隔的时间就是第二帧图像与第一帧图像之间的帧时间间隔,对所有的行以此类推,得到第一帧图像和第二帧图像各行曝光后的数据,后续称为行数据,并对第一帧图像和第二帧图像各自的行数据进行分离,得到第一帧图像的数据和第二帧图像的数据。其中,第一帧图像的曝光参数为EXP,第二帧图像的曝光参数可以等于EXP,也可以不等于EXP。
可选的,通过调整曝光的帧时间间隔,同时进行多帧图像的曝光,此时的多帧包括但不限于两帧。
可选的,在第一帧图像未完成曝光读出前进行第二帧图像的曝光,此种方式可以把曝光的帧时间间隔做到最小,以减轻运动物体对图像的影响。
可选的,第二种方式在一些平台要求输出的不同曝光的两帧图像间隔时间固定可设,这就要求第二帧曝光的范围要小于这个间隔时间。
图1所述的HDR图像的生成方法,对每次拍摄得到的各帧图像做空间域动态处理后,再对多帧空间动态处理图像做时间域动态处理,生成该场景的高动态范围图像。结合时间域和空间域两种维度,使得最后得到的HDR图像的动态范围更大、动态信息更多,有益于后续图像算法合成得到更好的动态图像效果。
在一个实施例中,图1中步骤S101所述对每次拍摄得到的图像做空间域动态处理,可以包括:在每次拍摄时,设置不同像素区域对应的曝光参数,以根据不同的像素区域的曝光参数进行曝光。
在拍摄每帧图像时,将每帧图像的像素划分为不同的像素区域,每个像素区域可对应一个像素或多个像素,不同像素区域中像素的曝光参数可以设置为不同的参数。每一个像素对应相机的一个感光元件,为各个像素区域的像素的感光元件设置不同的曝光参数,拍摄得到包含多个不同曝光的像素区域组成的一帧图像。
可选的,可对单次拍摄得到的图像进行像素合成。进一步,可设置预设的合成规则,以按照预设的合成规则进行像素合成。
在一个实施例中,所述根据不同的像素区域的曝光参数进行曝光,包括:获取每次拍摄得到的图像中每个像素的颜色;为同颜色的若干个像素设置不同的曝光参数进行曝光。
预设的合成规则可基于该帧图像中各个像素的颜色设定,如对同颜色的若干个像素设置不同的曝光参数,并将曝光后的该若干个像素合成为一个像素。
可选的,各个像素的颜色可以是指以红(Red,简写为R)、绿(Green,简写为G)、蓝(Blue,简写为B)三个颜色通道表示拍摄得到的图像时,图像中的各个像素所属的颜色区间(也即R、G或B颜色区间)。
可选的,在本实施例中,为同颜色的若干个像素设置不同的曝光参数进行曝光,以完成单次拍摄并得到拍摄的图像后,也可对该图像进行像素合成,具体合成方式可以为:将曝光后的所述同颜色的若干个像素合成为一个像素。
可选的,图像传感器像素阵列为RGB拜耳(Bayer)阵列结构,请参见图4,图4提供了一种Bayer pattern的示意图。R、G、B颜色交替摆放,可选的是,第一行和第二行曝光参数相同,第三行第四行曝光参数相同,第五行和第六行与第一行和第二行曝光参数相同,以此类推。以R颜色为例,图中R1、R2、R3、R4合成为一个像素。其他颜色的合成与R颜色类似。
可选的,相邻同颜色的若干个像素为相邻同颜色的四个像素,此时也称为4单元块模式(4cell pattern),请参见图5,图5提供了一种4cell pattern的示意图,图5中构成一个大正方形的4个cell的颜色相同(图5中的R1、R2、R3、R4的颜色相同,G1、G2、G3、G4的颜色相同,B1、B2、B3、B4的颜色相同),可以将各个大正方形中的4个像素合成为一个像素。
需要说明的是,预设的合成规则包括但不限于基于该帧图像中各个像素的颜色设定的情况,也可根据需要设定其他的合成规则实现空间域动态处理。
同样地,同颜色的若干个像素包括但不限于四个像素。
在一个实施例中,图1中步骤S101所述对每次拍摄得到的图像做空间域动态处理,包括:在每次拍摄时,设置不同像素区域对应的模拟增益以对不同像素区域进行不同的亮度调整。
空间域上的高动态实现并不局限于曝光,不同的像素在该像素对应的图像传感器电路上可以采用不同的模拟增益(gain)读出该像素的数据,以实现不同的曝光效果,这样读出的图像数据中也包含了空间域动态信息。
可选的,可对读出后的图像进行像素合成,实现空间域动态处理。
上述实施例中,将每帧图像的像素划分为不同的像素区域,并对每帧图像的多个像素区域设置不同的曝光参数或模拟增益,实现不同的曝光效果,使得各次拍摄得到的图像中包含空间域动态信息。进一步,可以选择对曝光后的图像进行像素合成,以实现该帧图像空间域上的高动态。
在一个实施例中,请继续参见图1和图2,图1步骤S101中进行多次拍摄中,在每次拍摄时,对拍摄得到的图像进行整帧曝光,在一帧图像曝光读出后,继续对下一帧图像曝光。
具体地,对同一场景多次拍摄得到的多帧图像空间动态处理图像可利用图2所示的连续多帧曝光的方式进行逐帧的整帧曝光,对于每帧拍摄的图像,可根据该帧图像中不同像素区域的曝光参数进行曝光,得到对应的空间动态处理图像,并按照拍摄时间的先后顺序进行逐帧的整帧曝光。
以图5所示的4cell pattern,将一帧图像中对相邻同颜色的4个像素设置不同的曝光参数,并将曝光后的该4个像素合成为一个像素。则对多帧图像空间动态处理图像逐帧曝光的示意图可参见图6,图6中以拍摄的两帧图像为例,该两帧图像包括第一帧图像(Frame1)和第二帧图像(Frame2),可对每帧图像按图5所示的4cell pattern进行空间域高动态,并采用逐帧曝光的方式,对Frame1和Frame2逐帧曝光读出,并同时对该两帧做时间域动态处理,得到该场景最终的HDR图像。
需要说明的是,对拍摄得到的图像进行整帧曝光时,对各帧进行空间域动态处理的方式包括但不限于图6的方式,也可根为本发明是他实施例中空间域动态处理的方式。
本实施例中,对各帧图像的曝光读出仅需要软件控制各像素对应的感光器件即可实现。
在一个实施例中,在每次拍摄时,对一帧的目标行完成曝光读出后,继续对下一帧图像中所述目标行进行曝光读出。
可选的,所述对一帧的目标行完成曝光读出后,继续对下一帧图像中所述目标行进行曝光读出,包括:在每帧图像的目标行曝光读出的预设时长之后,继续对下一帧图像中所述目标行进行曝光读出。
具体地,还可以利用图3中提供的曝光方式进行多帧图像的连续曝光,也即同时对连续拍摄的两帧或者两帧以上的图像同时曝光。此时连续两帧图像曝光的帧时间间隔可根据需要设置,原则上在对前一帧的目标行完成曝光读出后,即可对下一帧该目标行进行曝光读出,也可根据需要设置连续两帧对目标行读出的间隔时间,也即预设时长。在连续两帧或多帧同时曝光的过程中,目标行可曝光读出的顺序变化,如从图3中的第1行(line1)逐行递增直至一帧图像的最后一行(如第N+M行(lineN+M))。
可选的,目标行的数量可以为1行或多行,请参见图7,图7提供了另一种对多帧图像进行连续曝光的示意图,此时将目标行设置为2行,在完成对第一帧图像第一行(line1)和第二行(line2)之后,在间隔一定时间(也即line1与灰色区域的line1之间的时间),再读一次第一行和第二行,此时该行为第二帧图像的第一行和第二行(图7阴影区域的line1和line2),并对所有行以此类推,直至完成连续多帧的曝光。
可选的,将目标行设置为多行时,该多行可以逐行曝光读出,也可同时曝光读出,本发明实施例在此不作限定。
本实施例中,在第一帧图像未完成曝光读出前进行第二帧图像的曝光,从而可以缩短连续帧曝光的帧时间间隔,以减轻运动物体对图像的影响。
本发明实施例还提供一种HDR图像的生成装置,请参见图8所述的该HDR图像的生成装置的结构示意图,所述装置可以包括:
空间域处理模块801,用于进行多次拍摄,每次拍摄时像素阵列中的像素的曝光参数不同,以使得各次拍摄得到的图像中包含空间域动态信息;
时间域处理模块802,用于对多次拍摄得到的图像做时间域动态处理,以得到高动态范围图像,其中,所述多次拍摄使用多种曝光参数。
在一个实施例中,空间域处理模块801,还可以用于在每次拍摄时,设置不同像素区域对应的曝光参数,以根据不同的像素区域的曝光参数进行曝光。
在一个实施例中,空间域处理模块801,还可以用于获取每次拍摄得到的图像中每个像素的颜色;为同颜色的若干个像素设置不同的曝光参数进行曝光。
在一个实施例中,所述HDR图像的生成装置还可以包括:像素合成模块,用于对单次拍摄得到的图像进行像素合成。
在一个实施例中,所述像素合成模块,还用于将曝光后的同颜色的若干个像素合成为一个像素:
在一个实施例中,空间域处理模块801,还用于在每次拍摄时,设置不同像素区域对应的模拟增益以对不同像素区域进行不同的亮度调整。
在一个实施例中,HDR图像的生成装置还可以包括:
整帧曝光模块,用于在每次拍摄时,对拍摄得到的图像进行整帧曝光,在一帧图像曝光读出后,继续对下一帧图像曝光。
在一个实施例中,HDR图像的生成装置还可以包括:
多帧连续曝光模块,用于在每次拍摄时,对一帧的目标行完成曝光读出后,继续对下一帧图像中所述目标行进行曝光读出。
可选的,多帧连续曝光模块,还可以用于在每帧图像的目标行曝光读出的预设时长之后,继续对下一帧图像中所述目标行进行曝光读出。
关于HDR图像的生成装置的工作原理、工作方式的更多内容,可以参照上述图1至图7中的相关描述,这里不再赘述。
进一步地,本发明实施例还公开一种存储介质,其上存储有计算机指令,计算机指令运行时执行上述图1至图7所示实施例中的HDR图像的生成方法的技术方案。优选地,存储介质可以包括诸如非挥发性(non-volatile)存储器或者非瞬态(non-transitory)存储器等计算机可读存储介质。存储介质可以包括ROM、RAM、磁盘或光盘等。
进一步地,本发明实施例还公开一种图像处理设备,包括存储器和处理器,存储器上存储有能够在处理器上运行的计算机指令,处理器运行计算机指令时执行上述图1至图7所示实施例中的HDR图像的生成方法的技术方案。该图像处理设备可指手机、电脑、服务器等。
具体地,在本发明实施例中,所述处理器可以为中央处理单元(centralprocessing unit,简称CPU),该处理器还可以是其他通用处理器、数字信号处理器(digital signal processor,简称DSP)、专用集成电路(application specificintegrated circuit,简称ASIC)、现成可编程门阵列(field programmable gate array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
还应理解,本申请实施例中的存储器可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(read-only memory,简称ROM)、可编程只读存储器(programmable ROM,简称PROM)、可擦除可编程只读存储器(erasable PROM,简称EPROM)、电可擦除可编程只读存储器(electricallyEPROM,简称EEPROM)或闪存。易失性存储器可以是随机存取存储器(random accessmemory,简称RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的随机存取存储器(random access memory,简称RAM)可用,例如静态随机存取存储器(staticRAM,简称SRAM)、动态随机存取存储器(DRAM)、同步动态随机存取存储器(synchronousDRAM,简称SDRAM)、双倍数据速率同步动态随机存取存储器(double data rate SDRAM,简称DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM,简称ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM,简称SLDRAM)和直接内存总线随机存取存储器(direct rambus RAM,简称DR RAM)。
应理解,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,表示前后关联对象是一种“或”的关系。
本申请实施例中出现的“多个”是指两个或两个以上。
本申请实施例中出现的第一、第二等描述,仅作示意与区分描述对象之用,没有次序之分,也不表示本申请实施例中对设备个数的特别限定,不能构成对本申请实施例的任何限制。
本申请实施例中出现的“连接”是指直接连接或者间接连接等各种连接方式,以实现设备间的通信,本申请实施例对此不做任何限定。
虽然本发明披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,均可作各种更动与修改,因此本发明的保护范围应当以权利要求所限定的范围为准。
Claims (12)
1.一种HDR图像的生成方法,其特征在于,所述方法包括:
进行多次拍摄,每次拍摄时像素阵列中的像素的曝光参数不同,以使得各次拍摄得到的图像中包含空间域动态信息;
对多次拍摄得到的图像做时间域动态处理,以得到高动态范围图像,其中,所述多次拍摄使用多种曝光参数。
2.根据权利要求1所述的方法,其特征在于,在每次拍摄时,设置不同像素区域对应的曝光参数,以根据不同的像素区域的曝光参数进行曝光。
3.根据权利要求2所述的方法,其特征在于,所述根据不同的像素区域的曝光参数进行曝光,包括:
获取每次拍摄得到的图像中每个像素的颜色;
为同颜色的若干个像素设置不同的曝光参数进行曝光。
4.根据权利要求3所述的方法,其特征在于,对单次拍摄得到的图像进行像素合成。
5.根据权利要求4所述的方法,其特征在于,所述对单次拍摄得到的图像进行像素合成,包括:将曝光后的同颜色的若干个像素合成为一个像素。
6.根据权利要求1所述的方法,其特征在于,在每次拍摄时,设置不同像素区域对应的模拟增益以对不同像素区域进行不同的亮度调整。
7.根据权利要求1所述的方法,其特征在于,在每次拍摄时,对拍摄得到的图像进行整帧曝光,在一帧图像曝光读出后,继续对下一帧图像曝光。
8.根据权利要求1所述的方法,其特征在于,在每次拍摄时,对一帧的目标行完成曝光读出后,继续对下一帧图像中所述目标行进行曝光读出。
9.根据权利要求8所述的方法,其特征在于,所述对一帧的目标行完成曝光读出后,继续对下一帧图像中所述目标行进行曝光读出,包括:
在每帧图像的目标行曝光读出的预设时长之后,继续对下一帧图像中所述目标行进行曝光读出。
10.一种HDR图像的生成装置,其特征在于,所述装置包括:
空间域处理模块,用于进行多次拍摄,每次拍摄时像素阵列中的像素的曝光参数不同,以使得各次拍摄得到的图像中包含空间域动态信息;
时间域处理模块,用于对多次拍摄得到的图像做时间域动态处理,以得到高动态范围图像,其中,所述多次拍摄使用多种曝光参数。
11.一种存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至9任一项所述方法的步骤。
12.一种图像处理设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至9任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010990213.9A CN112367458B (zh) | 2020-09-18 | 2020-09-18 | Hdr图像的生成方法及装置、存储介质、图像处理设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010990213.9A CN112367458B (zh) | 2020-09-18 | 2020-09-18 | Hdr图像的生成方法及装置、存储介质、图像处理设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112367458A true CN112367458A (zh) | 2021-02-12 |
CN112367458B CN112367458B (zh) | 2022-04-22 |
Family
ID=74516529
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010990213.9A Active CN112367458B (zh) | 2020-09-18 | 2020-09-18 | Hdr图像的生成方法及装置、存储介质、图像处理设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112367458B (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102780849A (zh) * | 2011-05-13 | 2012-11-14 | 索尼公司 | 图像处理装置、图像摄取装置、图像处理方法及程序 |
CN103297686A (zh) * | 2012-03-02 | 2013-09-11 | 卡西欧计算机株式会社 | 摄像装置及摄像方法 |
CN104243864A (zh) * | 2013-06-24 | 2014-12-24 | 格科微电子(上海)有限公司 | 图像传感器的图像数据读取方法 |
US20150062368A1 (en) * | 2013-08-27 | 2015-03-05 | Aptina Imaging Corporation | Imaging systems and methods for generating binned high-dynamic-range images |
US20160050354A1 (en) * | 2014-08-12 | 2016-02-18 | Google Technology Holdings LLC | High Dynamic Range Array Camera |
WO2016164242A1 (en) * | 2015-04-07 | 2016-10-13 | Rambus Inc. | Imaging system with dynamic reconstruction workload allocation |
US20180167544A1 (en) * | 2016-12-12 | 2018-06-14 | Samsung Electronics Co., Ltd. | Method of obtaining wide dynamic range image and image pickup device performing the same |
CN109788207A (zh) * | 2019-01-30 | 2019-05-21 | Oppo广东移动通信有限公司 | 图像合成方法、装置、电子设备及可读存储介质 |
CN110381263A (zh) * | 2019-08-20 | 2019-10-25 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110493538A (zh) * | 2019-08-16 | 2019-11-22 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN111432099A (zh) * | 2020-03-30 | 2020-07-17 | Oppo广东移动通信有限公司 | 图像传感器、处理系统及方法、电子设备和存储介质 |
CN112219391A (zh) * | 2018-06-07 | 2021-01-12 | 杜比实验室特许公司 | 从单拍摄hdr彩色图像传感器生成hdr图像 |
-
2020
- 2020-09-18 CN CN202010990213.9A patent/CN112367458B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102780849A (zh) * | 2011-05-13 | 2012-11-14 | 索尼公司 | 图像处理装置、图像摄取装置、图像处理方法及程序 |
CN103297686A (zh) * | 2012-03-02 | 2013-09-11 | 卡西欧计算机株式会社 | 摄像装置及摄像方法 |
CN104243864A (zh) * | 2013-06-24 | 2014-12-24 | 格科微电子(上海)有限公司 | 图像传感器的图像数据读取方法 |
US20150062368A1 (en) * | 2013-08-27 | 2015-03-05 | Aptina Imaging Corporation | Imaging systems and methods for generating binned high-dynamic-range images |
US20160050354A1 (en) * | 2014-08-12 | 2016-02-18 | Google Technology Holdings LLC | High Dynamic Range Array Camera |
WO2016164242A1 (en) * | 2015-04-07 | 2016-10-13 | Rambus Inc. | Imaging system with dynamic reconstruction workload allocation |
US20180167544A1 (en) * | 2016-12-12 | 2018-06-14 | Samsung Electronics Co., Ltd. | Method of obtaining wide dynamic range image and image pickup device performing the same |
CN112219391A (zh) * | 2018-06-07 | 2021-01-12 | 杜比实验室特许公司 | 从单拍摄hdr彩色图像传感器生成hdr图像 |
CN109788207A (zh) * | 2019-01-30 | 2019-05-21 | Oppo广东移动通信有限公司 | 图像合成方法、装置、电子设备及可读存储介质 |
CN110493538A (zh) * | 2019-08-16 | 2019-11-22 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110381263A (zh) * | 2019-08-20 | 2019-10-25 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN111432099A (zh) * | 2020-03-30 | 2020-07-17 | Oppo广东移动通信有限公司 | 图像传感器、处理系统及方法、电子设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112367458B (zh) | 2022-04-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106797437B (zh) | 使用多个图像的高动态范围图像合成 | |
US8878967B2 (en) | RGBW sensor array | |
CN102970549B (zh) | 图像处理方法及装置 | |
US11431915B2 (en) | Image acquisition method, electronic device, and non-transitory computer readable storage medium | |
CN107590791B (zh) | 图像增强方法以及图像处理装置 | |
US11223810B2 (en) | Color balance method and device, on-board equipment and storage medium | |
CN112219391A (zh) | 从单拍摄hdr彩色图像传感器生成hdr图像 | |
US9858644B2 (en) | Bayer color filter array based high dynamic range video recording method and device | |
WO2022116989A1 (zh) | 图像处理方法、装置、设备和存储介质 | |
CN108322651B (zh) | 拍摄方法和装置、电子设备、计算机可读存储介质 | |
US20220094838A1 (en) | Method, Electronic Device and Computer-Readable Storage Medium for Generating a High Dynamic Range Image | |
US10178326B2 (en) | Method and apparatus for shooting image and terminal device | |
US9282256B1 (en) | System and method for HDR imaging | |
Akyüz | Deep joint deinterlacing and denoising for single shot dual-ISO HDR reconstruction | |
US20220270345A1 (en) | Subject detection method and apparatus, electronic device, and computer-readable storage medium | |
US20220198625A1 (en) | High-dynamic-range image generation with pre-combination denoising | |
US11977319B2 (en) | Saliency based capture or image processing | |
CN110881108B (zh) | 图像处理方法及图像处理装置 | |
CN112351195A (zh) | 图像处理方法、装置和电子系统 | |
CN110428391B (zh) | 用以去除鬼影假象的图像融合方法及装置 | |
US8958649B2 (en) | Video generation with temporally-offset sampling | |
CN113379609A (zh) | 一种图像处理方法、存储介质及终端设备 | |
US20210224964A1 (en) | Apparatus and method for image processing | |
CN112367458B (zh) | Hdr图像的生成方法及装置、存储介质、图像处理设备 | |
GB2561163A (en) | Control systems and image sensors |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |