CN109525849B - 动态范围压缩装置及图像处理装置 - Google Patents

动态范围压缩装置及图像处理装置 Download PDF

Info

Publication number
CN109525849B
CN109525849B CN201810082220.1A CN201810082220A CN109525849B CN 109525849 B CN109525849 B CN 109525849B CN 201810082220 A CN201810082220 A CN 201810082220A CN 109525849 B CN109525849 B CN 109525849B
Authority
CN
China
Prior art keywords
data
color data
color
value
saturation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810082220.1A
Other languages
English (en)
Other versions
CN109525849A (zh
Inventor
细田宗一郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Toshiba Electronic Devices and Storage Corp
Original Assignee
Toshiba Corp
Toshiba Electronic Devices and Storage Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Electronic Devices and Storage Corp filed Critical Toshiba Corp
Publication of CN109525849A publication Critical patent/CN109525849A/zh
Application granted granted Critical
Publication of CN109525849B publication Critical patent/CN109525849B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/6058—Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98—Adaptive-dynamic-range coding [ADRC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component

Abstract

实施方式提供一种动态范围压缩装置，即使是帧图像中的颜色具有极端的偏差时，也不会产生数据压缩后的亮度值的下降。实施方式的动态范围压缩装置具有：饱和检测电路，根据从对应于第1亮度动态范围的颜色数据被转换成对应于第2亮度动态范围的颜色数据的帧图像中的各像素的颜色数据的值是否超过了规定的饱和值，检测每个像素的各颜色数据的饱和；以及数据分配电路，计算被检测出饱和的像素保持不饱和状态的亮度值所需要的数据量，对被检测出饱和的像素中除被检测出所述饱和的饱和颜色数据以外的未饱和的其它非饱和颜色数据进行分配并输出。

Description

动态范围压缩装置及图像处理装置
相关申请
本发明主张以日本专利申请第2017－180520号(申请日：2017年9月20日)为基础申请的优先权。本申请通过引用该基础申请而包含基础申请的全部内容。
技术领域
本发明的实施方式涉及动态范围压缩装置及图像处理装置。
背景技术
近年来，高动态范围(HDR)图像受到关注并得到实际应用。HDR图像通过将曝光时间等不同的多帧的图像合成而生成，具有较高的动态范围。
已有对该HDR图像进行HDR压缩处理的HDR压缩装置。HDR压缩装置用于在低动态范围的装置(例如显示装置)中显示HDR图像等。在HDR压缩装置中，例如将24比特的图像数据压缩成8比特的图像数据。在HDR压缩装置中，通过使用帧图像的亮度值的信息缩小动态范围进行数据压缩。
在帧图像具有颜色数据例如RGB数据的情况下，如果在帧图像中没有RGB颜色的极端的偏差，则在RGB数据间的像素值间的比率被保持的同时，将各像素的亮度值Y转换为亮度值Y1从而进行图像数据的压缩。
但是，当在原始的帧图像中RGB的颜色具有极端的偏差时，在根据转换后的亮度值Y1再次计算各像素的RGB的各颜色的像素值时，将不能保持RGB数据间的像素值间的比率，存在压缩后的亮度值大幅下降的问题。
例如，当在原始的图像中包括仅特定的一种颜色的亮度值(例如24比特数据)较大、其它颜色的像素值较低的像素的情况下，在再次计算与数据压缩后的亮度值Y1对应的各颜色的像素值时，由于其它颜色的像素值较低，因此仅特定的一种颜色的颜色数据增大并在内部寄存器中溢出，其结果是，存在该像素的亮度值极端下降、导致该像素成为黑点的情况。
发明内容
实施方式提供动态范围压缩装置及图像处理装置，即使是帧图像中的颜色具有极端的偏差时，也不会产生数据压缩后的亮度值的下降。
根据实施方式提供动态范围压缩装置，具有：饱和检测电路，根据从对应于第1亮度动态范围的颜色数据被转换成对应于第2亮度动态范围的颜色数据的帧图像中的各像素的颜色数据的值是否超过了规定的饱和值，检测每个像素的所述各颜色数据的饱和；以及数据分配电路，计算被检测出所述饱和的像素保持不饱和状态的亮度值所需要的数据量，对被检测出所述饱和的像素中除被检测出所述饱和的饱和颜色数据以外的未饱和的其它非饱和颜色数据进行分配并输出。
根据实施方式提供动态范围压缩装置，具有：饱和检测电路，根据从对应于第1亮度动态范围的颜色数据被转换成对应于第2亮度动态范围的颜色数据的帧图像中的各像素的颜色数据的值是否超过了规定的饱和值，检测每个像素的所述各颜色数据的饱和；以及数据分配电路，对被检测出所述饱和的像素中除被检测出所述饱和的饱和颜色数据以外的未饱和的其它非饱和颜色数据，以加上所述饱和颜色数据的一部分的方式分配并输出。
附图说明
图1是本发明的第1实施方式的图像处理系统1的框图。
图2是表示本发明的第1实施方式的ISP4的结构的框图。
图3是表示本发明的第1实施方式的HDR压缩电路14的结构的框图。
图4是用于说明本发明的第1实施方式的基于局部音调参数LTP的两个音调曲线的混合的图。
图5是用于说明本发明的第1实施方式的RGB信号的像素值的分配的图。
图6是表示在局部音调匹配处理电路24中不进行亮度校正时的显示图像的例子的图。
图7是用于说明本发明的第2实施方式的RGB信号的像素值的分配的图。
具体实施方式
下面，参照附图说明实施方式。
(第1实施方式)
(结构)
图1是本实施方式的图像处理系统1的框图。
图像处理系统1包括：摄像机2，具有CMOS图像传感器等的摄像元件2a；图像处理装置3，接收来自摄像机2的摄像信号并进行规定的图像处理。图像处理系统1例如是根据摄像机2的图像进行对象识别的装置。
图像处理装置3作为半导体装置安装于各种设备，对在摄像机得到的图像进行图像识别处理，并输出识别结果信息。
摄像机2能够驱动摄像元件2a并输出静态图像及动态图像的摄像信号，并且也能够输出曝光时间彼此不同的多个帧的摄像信号。
图像处理装置3是包括图像信号处理器(下面称为ISP)4、中央处理装置(下面称为CPU)5、作为主存储器的DRAM6的半导体装置即半导体芯片。图像处理装置3通过未图示的接口电路接收来自摄像机2的摄像信号。摄像机2和图像处理装置3例如进行基于MIPI通信协议的通信，图像处理装置3从摄像机2接收摄像信号。ISP4和CPU5和DRAM6通过总线7相连接，能够进行数据的发送或接收。
ISP4接收来自摄像机2的摄像信号并进行HDR合成处理，并且进行HDR压缩处理，将被压缩的图像数据通过总线7输出给DRAM6。
CPU5对在DRAM6存储的图像数据进行规定的图像处理，将图像处理的结果存储在DRAM6中。例如，CPU5读出在DRAM6中存储的图像数据并进行图像识别处理，将有关所识别的对象的信息写入DRAM6的规定的区域中。有关对象的信息通过总线7被未图示的装置读出来，并用于物体识别、文字识别等各种识别处理中。
图2是表示ISP4的结构的框图。
ISP4包括HDR合成电路(下面称为HDRS)11、选择器12、去马赛克(demosaic)电路13、HDR压缩电路(下面称为HDRC)14。
HDRS11从摄像机2接收曝光时间彼此不同的多个(此处为3个)帧的图像信号P1、P2、P3，进行HDR合成处理并输出给选择器12。图像信号P1、P2、P3例如是摄像机2的摄像元件2a的贝叶斯滤波器的各像素值的16比特的图像信号。HDRS11进行HDR合成并输出24比特的图像信号。
选择器12选择来自HDRS11的图像信号并输出给去马赛克电路13。
另外，在此处，选择器12能够选择来自摄像机2的图像信号PP和HDRS11的图像信号中任意一方并输出给去马赛克电路13。这是为了在摄像机2自身具有HDR合成处理电路的情况下，能够应对摄像机2输出的图像信号PP。
去马赛克电路13对HDRS11的图像信号进行去马赛克处理，对于各像素生成24比特的RGB的图像信号并输出给HDRC14。
HDRC14通过局部音调匹配对RGB的图像信号进行HDR压缩处理，并输出被压缩的图像信号。例如，24比特的RGB的图像信号被压缩转换成16比特的RGB的图像信号。
在HDRC14生成的图像信号被存储在DRAM6中，通过CPU5对图像信号进行各种处理。
图3是表示HDRC14的结构的框图。
HDRC14包括亮度计算电路21、局部音调参数计算电路22、存储器23、局部音调匹配处理电路24。
HDRC14对从去马赛克电路13输出的例如24比特的RGB的图像信号进行HDR压缩处理，并输出被压缩的图像信号(例如16比特)。
亮度计算电路21计算帧图像的各像素的亮度值。具体地讲，亮度计算电路21是根据RGB的三颜色的图像信号计算各像素的亮度值的电路。亮度值Y根据下面的式(1)进行计算。
Y＝Cr*R+Cg*G+Cb*B……(1)
Cr、Cg、Cb是系数，具有Cr+Cg+Cb＝1的关系。
亮度计算电路21输出各帧的各像素的亮度值。其结果是，亮度计算电路21是输出由各像素的亮度值构成的亮度图像的亮度图像生成电路。
局部音调参数计算电路22是计算帧图像的局部音调参数LTP的电路。具体地讲，局部音调参数计算电路22是根据帧图像中的明亮度分布或照明分布，计算作为局部音调匹配用的音调曲线的校正参数的局部音调参数LTP，并输出给局部音调匹配处理电路24的电路。
例如，局部音调参数计算电路22将帧图像分割成规定的多个区域，求出帧图像内的明亮度分布。并且，局部音调参数计算电路22根据各像素的周边的明亮度分布的信息抽取各像素的局部音调参数。
存储器23是临时存储前一帧图像的明亮度分布信息作为在局部音调参数计算电路22中使用的帧图像的明亮度分布信息用的存储器。因此，局部音调参数计算电路22在计算各像素的局部音调参数时，在需要前一帧图像的明亮度分布信息时，参照在存储器23存储的信息。
局部音调参数计算电路22在抽取各像素的局部音调参数时，对于不能得到当前的帧图像的明亮度分布信息的区域，使用在存储器23存储的前一帧图像的明亮度分布信息。
局部音调匹配处理电路24具有局部音调匹配电路25、RGB再次计算电路26、亮度校正电路27。
局部音调匹配电路25使用规定的音调曲线信息，根据来自局部音调参数计算电路22的局部音调参数LTP，通过音调匹配将帧图像的各像素的原始的亮度值(例如24比特)转换成低动态范围的亮度值。
在此，准备两个音调曲线，根据局部音调参数LTP，并根据将两个音调曲线混合而成的音调曲线转换各像素的亮度值。
图4是用于说明基于局部音调参数LTP的两个音调曲线的混合的图。横轴表示压缩前的像素的亮度值Y，纵轴表示压缩后的像素的亮度值Y1。
局部音调匹配电路25具有两个音调曲线LTC、HTC的信息。在图4中，用单点划线示出的音调曲线LTC表示低亮度区域用的音调曲线，用虚线示出的音调曲线HTC表示高亮度区域用的音调曲线。音调曲线LTC被设定成提高低亮度区域用的亮度值，音调曲线HTC被设定成降低高亮度区域用的亮度值。
局部音调参数LTP是有关各像素的周边区域的明亮度分布的信息，对应周边区域的明亮度分布，示出了低亮度区域用的音调曲线LTC和高亮度区域用的音调曲线HTC的混合比率。在图4中，用双点划线示出的音调曲线是被混合后的音调曲线。如果像素的周边的区域整体上较亮，则成为接近音调曲线HTC的音调曲线，如果像素的周边的区域整体上较暗，则成为接近音调曲线LTC的音调曲线，当在像素的周边的区域中混合存在较亮的区域和较暗的区域时，决定使成为音调曲线LTC和音调曲线HTC的中间的音调曲线的局部音调参数LTP。
局部音调匹配电路25根据局部音调参数LTP，决定将低亮度区域用的音调曲线LTC和高亮度区域用的音调曲线HTC混合而成的音调曲线，根据所决定的音调曲线压缩各像素的亮度值。
RGB再次计算电路26根据通过局部音调匹配电路25转换后的亮度值，再次计算与低动态范围对应的各像素的RGB的各颜色的像素值。
即，通过RGB再次计算电路26反算与通过局部音调匹配电路25被压缩后的亮度值对应的RGB的各颜色的像素值。
以往，将通过该RGB再次计算电路26得到的RGB的帧图像信号作为HDR压缩图像信号输出给显示装置等。
但是，本实施方式的局部音调匹配处理电路24包括亮度校正电路27，对通过RGB再次计算电路26得到的RGB的帧图像信号进行亮度校正。
下面，将从RGB再次计算电路26输出的RGB信号称为R1信号、G1信号及B1信号。
亮度校正电路27包括饱和检测电路31、数据分配电路32、混合电路33。
饱和检测电路31是判定从RGB再次计算电路26输出的R1、G1、B1的各颜色信号的像素值是否超过饱和值(最大值)的电路。
即，饱和检测电路31根据从对应第1亮度动态范围(例如24比特)的颜色数据被转换成对应第2亮度动态范围(例如16比特)的颜色数据的帧图像中的各像素的颜色数据的值是否超过规定的饱和值(后述的饱和值sat_val)，检测每个像素的各颜色数据的饱和。
在通过饱和检测电路31检测出饱和的颜色信号时，数据分配电路32对未饱和的颜色信号的像素值分配已饱和的颜色信号的像素值，并输出已饱和的颜色信号的饱和值、和未饱和的颜色信号的分配后的颜色信号的像素值。
即，数据分配电路32计算被检测出所述饱和的像素保持不饱和状态的亮度值所需要的数据量，并对被检测出饱和的像素中除被检测出饱和的饱和颜色数据以外的未饱和的其它非饱和颜色数据进行分配及输出。
下面，将从数据分配电路32输出的R信号、G信号、B信号分别称为R2信号、G2信号及B2信号。
混合电路33将从RGB再次计算电路26输出的R1、G1、B1信号和从数据分配电路32输出的R2、G2、B2信号进行混合。
局部音调匹配处理电路24输出在混合电路33被混合后的RGB的图像信号。
下面，具体说明数据分配电路32的处理。
图5是用于说明RGB信号的像素值的分配的图。此处是R1(红色)的信号超过饱和值sat_val的例子。图5的纵轴表示R、G、B的像素值或者其像素的亮度值。
在图5中，饱和值sat_val是在局部音调匹配电路25中计算出的该像素的压缩后的像素值(例如16比特)的最大值即饱和值。亮度值tgtY表示在局部音调匹配电路25中被压缩的该像素的亮度值Y1。
tgtY_rest表示HDR压缩后的亮度值tgtY(＝Y1)与饱和值sat_val之差。
hdrG_rest表示压缩后的G1信号的像素值与饱和值sat_val之差，换言之，表示G1信号相对于饱和值sat_val的富余值。同样，hdrB_rest表示压缩后的B1信号的像素值与饱和值sat_val之差，换言之，表示B1信号相对于饱和值sat_val的富余值。
首先，在数据分配电路32中使用下面的式(2)计算hdrY_rest。
hdrY_rest＝((Cg*hdrG_rest)+(Cb*hdrB_rest))……(2)
hdrY_rest表示能够使用系数(此处指Cg、Cb)将HDR信号的亮度值中未饱和的颜色信号(此处指G1信号和B1信号)提高亮度值Y1的数据量，即非饱和的颜色信号能够提高的最大量。
另外，数据分配电路32使用该hdrY_rest和tgtY_rest，使用下面的式(3)计算调整增益adj_gain。
adj_gain＝(tgtY_rest/hdrY_rest)……(3)
在数据分配电路32中，根据该调整增益adj_gain，使用下面的式(4)和(5)计算未饱和的两种颜色信号(此处指G1信号、B1信号)的像素值校正量。调整增益adj_gain是比1小的值。
adjG_rest＝(hdrG_rest*adj_gain)……(4)
adjB_rest＝(hdrB_rest*adj_gain)……(5)
在数据分配电路32中，使用下面的式(6)和(7)计算未饱和的两种颜色信号(此处指G1信号、B1信号)的校正像素值G2、B2。
G2＝(sat_val-adjG_rest)……(6)
B2＝(sat_val-adjB_rest)……(7)
根据式(6)和(7)计算出的G2、B2的各信号和饱和值的R2信号，从数据分配电路32被输出。
因此，在上述的R1信号饱和的情况下，使用调整增益adj_gain校正G1信号和B1信号使增加成为G2信号和B2信号。换言之，根据式(2)～(7)，可以说非饱和颜色的G2和B2的各数据是为了进行调整使得即使饱和颜色的R1饱和时亮度值也不下降用的值。
如上所述，数据分配电路32根据与其它的非饱和颜色数据相对于规定的饱和值sat_val之差对应的数据，计算被检测出饱和的像素保持不饱和状态的亮度值所需要的数据量，并分配给其它的非饱和颜色数据。在上述的例子中，帧图像包括RGB的三种颜色数据，在三种颜色数据中的一种颜色数据的值超过规定的饱和值sat_val时，数据分配电路32根据与有关三种颜色数据中的一种颜色数据以外的其它两种颜色数据相对于饱和值sat_val之差对应的数据，计算被检测出饱和的像素保持不饱和状态的亮度值所需要的数据量，并分配给其它的非饱和颜色数据即其它两种颜色数据。
另外，在三种颜色数据中的两种颜色数据的值超过规定的饱和值sat_val时，数据分配电路32根据与有关三种颜色数据中的两种颜色数据以外的另一种颜色数据相对于饱和值sat_val之差对应的数据，计算被检测出饱和的像素保持不饱和状态的亮度值所需要的数据量，并分配给其它的非饱和颜色数据即另一种颜色数据。
数据分配电路32将饱和值(sat_val)的R2信号、和根据式(6)和(7)计算出的G2信号和B2信号输出给混合电路33。
混合电路33接收来自RGB再次计算电路26的R1信号、G1信号、B1信号(亮度校正前的图像信号)、和来自数据分配电路32的R2信号、G2信号、B2信号(亮度校正后的图像信号)，根据所设定的混合系数OrgYbld，将亮度校正前的图像信号和亮度校正后的图像信号进行混合。
在此，混合系数OrgYbld是0～1024之间的任意一个数值，表示将来自RGB再次计算电路26的R1信号、G1信号、B1信号的各颜色的像素值进行混合的量。
混合电路33根据下面的式(8)～(10)输出R3信号、G3信号、B3信号，作为将亮度校正前的图像信号和亮度校正后的图像信号混合而成的图像信号。
R3＝((OrgYbld*R1)+((1024-OrgYbld)*R2))>>10……(8)
G3＝((OrgYbld*G1)+((1024-OrgYbld)*G2))>>10……(9)
B3＝((OrgYbld*B1)+((1024-OrgYbld)*B2))>>10……(10)
其中，“>>10”表示数据的右移，作为混合系数使用“1024”，因而表示通过右移10位，将各像素值除以1024。
在混合系数OrgYbld的值提高时，包括R3信号、G3信号及B3信号的图像能够成为与原始的图像具有的颜色接近的图像。在混合系数OrgYbld的值降低时，包括R3信号、G3信号及B3信号的图像的亮度提高。
如上所述，混合电路33根据所设定的混合参数，按照各像素的每种颜色，将第2亮度动态范围(16比特)的各像素的颜色数据R1、G1、B1、和被分配了在数据分配电路32中计算出的数据量的非饱和颜色的颜色数据R2、G2、B2进行混合。
通过调整该混合系数OrgYbld的值，能够调整亮度校正前的图像信号的影响度。
如上所述，在本实施方式中，通过在亮度校正电路27中使增加非饱和颜色的像素值，能够维持压缩后的亮度值Y1。
图6是表示在局部音调匹配处理电路24中不进行亮度校正时的显示图像的例子的图。图6表示在显示装置所显示的道路上设置的信号设备的图像DIM的例子。信号设备SIG具有三种颜色即绿色、黄色及红色的三个信号灯GL、BL、RL。
在图像DIM是颜色具有极端的偏差的图像时，如仅红色的信号RL的颜色较强、其它颜色极弱时，在以往没有亮度校正电路27的装置中，如图5所示，再次计算的像素的亮度值大幅下降，存在图像DIM中出现黑点BP的情况。
但是，根据上述的本实施方式，在局部音调匹配处理电路24中进行用于增加非饱和像素的像素值的亮度校正，并输出RGB的颜色信号，因而抑制如图6所示的黑点BP的发生。
在以上的例子中，说明了在RGB三种颜色中的R信号饱和时，对G信号和B信号进行亮度校正的情况，而在RGB三种颜色中的R信号以外的G信号(或B信号)饱和时，对G信号(或B信号)以外的两种颜色信号(R信号和B信号，或者R信号和G信号)进行亮度校正。
如上所述，根据本实施方式提供动态范围压缩装置及图像处理装置，即使是帧图像中的颜色具有极端的偏差时，也不会产生数据压缩后的亮度值的下降。
(第2实施方式)
在第1实施方式中，使用未饱和的非饱和像素的像素值相对于饱和值的富余值和HDR压缩后的亮度值的比率，进行非饱和像素的像素值的调整，而在本实施方式中进行如下的调整：将超过规定的饱和值的部分与未饱和的规定颜色的像素的像素值相加。
图7是用于说明RGB信号的像素值的分配的图。此处是R1(红色)的信号超过饱和值sat_val的例子。
数据分配电路32将R1信号超过饱和值sat_val的部分(用虚线表示的量)、与未饱和的规定颜色(此处在R1超过饱和值sat_val时是指G1)的像素值相加。
即，在本实施方式中，数据分配电路32将被检测出饱和的饱和颜色数据超过规定的饱和值sat_val的部分，作为饱和颜色数据的一部分与其它的非饱和颜色数据相加。
另外，在将R1信号超过饱和值sat_val的部分(用虚线表示的量)与未饱和的规定颜色(此处指G1)的像素值相加的结果是，该规定颜色(此处指G1)也超过饱和值sat_val时，将G1信号超过饱和值sat_val的部分与B1信号相加。
如上所述，帧图像包括RGB三种颜色数据，在三种颜色数据中的一种颜色数据的值超过规定的饱和值sat_val时，数据分配电路32将与一种颜色数据的值超过规定的饱和值的部分对应的数据，作为饱和颜色数据的一部分与其它的非饱和颜色数据中的一种或两种颜色数据相加。
另外，在非饱和的像素是两种颜色的情况下，也可以将超过饱和值的部分按照规定的比率分配给该非饱和的两种颜色的颜色数据。
其它的处理与第1实施方式相同，本实施方式也具有与第1实施方式相同的效果。
另外，在以上的两个实施方式中，说明了在RGB三种颜色中的一种颜色数据饱和时，对其它两种颜色数据进行亮度校正的情况，而在RGB三种颜色中的两种颜色数据饱和时，对剩余的一种颜色数据进行亮度校正。
如上所述，根据上述的两个实施方式提供动态范围压缩装置及图像处理装置，即使是帧图像中的颜色具有极端的偏差时，也不会产生数据压缩后的亮度值的下降。
其结果是，具有上述的动态范围压缩装置及图像处理装置的图像处理系统，能够高精度地进行物体识别、文字识别等各种识别处理。
以上说明了本发明的几个实施方式，但这些实施方式仅是作为示例而示出的，不能理解为限定发明的范围。这些新的实施方式可以通过其他各种方式来实施，能够在不脱离发明的主旨的范围中进行各种省略、替换、变更。这些实施方式及其变形包含在发明的范围和主旨中，并且包含在权利要求书所记载的发明及其均等的范围中。

Claims (8)

1.一种动态范围压缩装置，具有：
饱和检测电路，根据从对应于第1亮度动态范围的颜色数据被转换成对应于第2亮度动态范围的颜色数据的帧图像中的各像素的颜色数据的值是否超过了规定的饱和值，检测每个像素的所述各颜色数据的饱和；以及
数据分配电路，计算被检测出所述饱和的像素保持不饱和状态的亮度值所需要的数据量，对被检测出所述饱和的像素中除被检测出所述饱和的饱和颜色数据以外的未饱和的其它非饱和颜色数据进行分配并输出，
所述动态范围压缩装置具有混合电路，该混合电路根据设定好的混合参数，按照所述各像素的每种颜色，将所述第2亮度动态范围的所述各像素的颜色数据、和被分配了在所述数据分配电路中计算出的所述数据量的所述非饱和颜色的颜色数据进行混合，
在通过所述饱和检测电路检测出饱和的颜色信号时，所述数据分配电路对未饱和的颜色信号的像素值分配已饱和的颜色信号的像素值，并输出已饱和的颜色信号的饱和值、和未饱和的颜色信号的分配后的颜色信号的像素值。
2.根据权利要求1所述的动态范围压缩装置，
所述数据分配电路根据与所述其它非饱和颜色数据相对于所述规定的饱和值之差对应的数据计算所述数据量，分配给所述其它非饱和颜色数据。
3.根据权利要求2所述的动态范围压缩装置，
所述帧图像包括RGB的三种颜色数据，
在所述三种颜色数据中的一种或两种颜色数据的值超过所述规定的饱和值时，所述数据分配电路根据有关所述三种颜色数据中的所述一种或两种的颜色数据以外的其它颜色数据的与所述差对应的数据计算所述数据量，分配给作为所述其它非饱和颜色数据的所述其它颜色数据。
4.一种图像处理装置，具有权利要求1所述的动态范围压缩装置。
5.一种动态范围压缩装置，具有：
饱和检测电路，根据从对应于第1亮度动态范围的颜色数据被转换成对应于第2亮度动态范围的颜色数据的帧图像中的各像素的颜色数据的值是否超过了规定的饱和值，检测每个像素的所述各颜色数据的饱和；以及
数据分配电路，对被检测出所述饱和的像素中除被检测出所述饱和的饱和颜色数据以外的未饱和的其它非饱和颜色数据，以加上所述饱和颜色数据的一部分的方式分配并输出，
所述动态范围压缩装置具有混合电路，该混合电路根据设定好的混合参数，按照所述各像素的每种颜色，将所述第2亮度动态范围的所述各像素的颜色数据、和已在所述数据分配电路中被加上被检测出所述饱和的像素的颜色数据的一部分后的所述非饱和颜色的颜色数据进行混合。
6.根据权利要求5所述的动态范围压缩装置，
所述数据分配电路对所述其它非饱和颜色数据加上被检测出所述饱和的所述饱和颜色数据中超过所述规定的饱和值的部分。
7.根据权利要求6所述的动态范围压缩装置，
所述帧图像包括RGB的三种颜色数据，
在所述三种颜色数据中的一种颜色数据的值超过所述规定的饱和值时，所述数据分配电路将与所述一种颜色数据的值超过所述规定的饱和值的部分对应的数据，作为所述饱和颜色数据的一部分与所述其它非饱和颜色数据中的一种或两种的颜色数据相加。
8.一种图像处理装置，具有权利要求5所述的动态范围压缩装置。
CN201810082220.1A 2017-09-20 2018-01-29 动态范围压缩装置及图像处理装置 Active CN109525849B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017180520A JP6789904B2 (ja) 2017-09-20 2017-09-20 ダイナミックレンジ圧縮装置及び画像処理装置
JP2017-180520 2017-09-20

Publications (2)

Publication Number Publication Date
CN109525849A CN109525849A (zh) 2019-03-26
CN109525849B true CN109525849B (zh) 2023-07-04

Family

ID=61249508

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810082220.1A Active CN109525849B (zh) 2017-09-20 2018-01-29 动态范围压缩装置及图像处理装置

Country Status (4)

Country Link
US (1) US10631016B2 (zh)
EP (1) EP3460748B1 (zh)
JP (1) JP6789904B2 (zh)
CN (1) CN109525849B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190071020A (ko) * 2017-12-13 2019-06-24 삼성디스플레이 주식회사 영상 데이터 보정 방법 및 이를 수행하는 표시 장치
GB201904072D0 (en) * 2019-03-25 2019-05-08 Secr Defence Dazzle resilient video camera or video camera module
US20220020180A1 (en) * 2020-07-16 2022-01-20 Samsung Electronics Co., Ltd. Image compression method using saturated pixel, encoder, and electronic device
CN116249018B (zh) * 2023-05-11 2023-09-08 深圳比特微电子科技有限公司 图像的动态范围压缩方法、装置、电子设备和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0772158A2 (en) * 1995-10-30 1997-05-07 Hewlett-Packard Company Image processing system
CN101494797A (zh) * 2008-01-22 2009-07-29 株式会社理光 摄像装置及摄像方法
JP2010068331A (ja) * 2008-09-11 2010-03-25 Ricoh Co Ltd 撮像装置および撮像方法
GB2534929A (en) * 2015-02-06 2016-08-10 British Broadcasting Corp Method and apparatus for conversion of HDR signals

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1999033684A2 (en) * 1997-12-31 1999-07-08 Gentex Corporation Vehicle vision system
JP4065482B2 (ja) * 2001-09-18 2008-03-26 キヤノン株式会社 画像データ処理方法、装置、記憶媒体、及びプログラム
WO2008070269A2 (en) * 2006-10-06 2008-06-12 Novadaq Technologies, Inc. Methods, software and systems for imaging
JP4479709B2 (ja) * 2006-10-27 2010-06-09 セイコーエプソン株式会社 画像表示装置、画像表示方法、画像表示プログラム、及び画像表示プログラムを記録した記録媒体、並びに電子機器
CN101588436B (zh) 2008-05-20 2013-03-27 株式会社理光 一种压缩原始图像动态范围的方法、装置和数码相机
TW201011691A (en) * 2008-09-05 2010-03-16 Primax Electronics Ltd Method for adjusting brightness of images
US8339475B2 (en) 2008-12-19 2012-12-25 Qualcomm Incorporated High dynamic range image combining
BRPI1009443B1 (pt) 2009-03-13 2021-08-24 Dolby Laboratories Licensing Corporation Método de geração de parâmetros de mapeamento de tons inverso, método de compactação de dados de vídeo e método para geração de um fluxo de bits de saída a partir de um fluxo de bits de entrada
JP2012029029A (ja) 2010-07-23 2012-02-09 Seiko Epson Corp 画像処理装置、画像処理方法及び撮像装置
JP5713023B2 (ja) * 2010-12-03 2015-05-07 富士通株式会社 生体認証装置及び生体認証方法
ES2694806T3 (es) 2011-03-02 2018-12-27 Dolby Laboratories Licensing Corporation Operador de correlación de tonos multiescala local
US8947555B2 (en) 2011-04-18 2015-02-03 Qualcomm Incorporated White balance optimization with high dynamic range images
JP6032601B2 (ja) * 2011-12-21 2016-11-30 住友電工デバイス・イノベーション株式会社 半導体光増幅器の制御方法及び測定方法、並びに半導体光増幅装置
US9202433B2 (en) * 2012-03-06 2015-12-01 Apple Inc. Multi operation slider
JP5903979B2 (ja) * 2012-03-28 2016-04-13 リコーイメージング株式会社 撮像装置、動画作成方法及び動画作成プログラム
CN104364820B (zh) 2012-10-08 2018-04-10 皇家飞利浦有限公司 具有颜色约束的亮度改变图像处理
WO2015103770A1 (zh) * 2014-01-10 2015-07-16 富士通株式会社 图像处理装置、电子设备及方法
EP2913993B1 (en) * 2014-02-26 2016-02-17 Axis AB Method and control unit for controlling exposure of a camera
JP6086393B2 (ja) * 2014-05-27 2017-03-01 Ｎｌｔテクノロジー株式会社 制御信号生成回路，映像表示装置，制御信号生成方法，及びそのプログラム
US10275864B2 (en) 2016-09-09 2019-04-30 Kabushiki Kaisha Toshiba Image processing device and image processing method
WO2018156986A1 (en) * 2017-02-26 2018-08-30 Ring Inc. Automatic exposure control for audio/video recording and communication devices
CN107343156B (zh) * 2017-07-10 2020-03-13 Oppo广东移动通信有限公司 人脸区域自动曝光控制的调整方法和装置
JP6980456B2 (ja) * 2017-08-22 2021-12-15 キヤノン株式会社 放射線撮像システム
JP7021885B2 (ja) * 2017-09-11 2022-02-17 株式会社日立エルジーデータストレージ 距離測定装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0772158A2 (en) * 1995-10-30 1997-05-07 Hewlett-Packard Company Image processing system
CN101494797A (zh) * 2008-01-22 2009-07-29 株式会社理光 摄像装置及摄像方法
JP2010068331A (ja) * 2008-09-11 2010-03-25 Ricoh Co Ltd 撮像装置および撮像方法
GB2534929A (en) * 2015-02-06 2016-08-10 British Broadcasting Corp Method and apparatus for conversion of HDR signals

Also Published As

Publication number Publication date
US20190089993A1 (en) 2019-03-21
JP2019057080A (ja) 2019-04-11
EP3460748A1 (en) 2019-03-27
EP3460748B1 (en) 2021-03-24
CN109525849A (zh) 2019-03-26
US10631016B2 (en) 2020-04-21
JP6789904B2 (ja) 2020-11-25

Similar Documents

Publication Publication Date Title
CN109525849B (zh) 动态范围压缩装置及图像处理装置
EP2426928B1 (en) Image processing apparatus, image processing method and program
US10469760B2 (en) High dynamic range imaging
KR101563141B1 (ko) 화상표시 시스템 및 화상처리장치
US8508625B2 (en) Image processing apparatus
JP2015156615A (ja) 画像処理装置、画像処理方法、制御プログラム、および記録媒体
US8064693B2 (en) Methods of and apparatus for adjusting colour saturation in an input image
JP2008124928A (ja) オートホワイトバランスシステム
KR20090048191A (ko) 다이내믹 레인지를 확장하는 칼라 영상 처리장치 및 방법
JP2003520505A (ja) 電子的に取得した画像の色彩度を修正する方法及び装置
JP7296745B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP2010147895A (ja) 画像処理装置、集積回路装置及び電子機器
JP2018112936A (ja) Ｈｄｒ画像処理装置および方法
US8284316B2 (en) Real-time image processing circuit capable of enhancing brightness contrast and color saturation
KR102003777B1 (ko) 화상 처리 장치 및 화상 처리 방법
JP2008227959A (ja) 画像処理装置、画像処理方法および画像処理システム
US20130201371A1 (en) Image processing device, image processing method, and solid-state imaging device
JP2006270592A (ja) 画像処理装置
US10375304B2 (en) Image processing apparatus and image processing method
JP2014030083A (ja) 画像処理装置、画像表示装置及び画像処理方法
JP5582966B2 (ja) 画像処理装置、画像処理方法及び撮像装置
US20230162315A1 (en) Semiconductor device and image processing system
JP2017112421A (ja) 画像処理装置、撮像装置および画像処理プログラム
WO2019150860A1 (ja) ホワイトバランス調整装置及びホワイトバランス調整方法
JP2000078437A (ja) 映像信号処理装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant