CN105809639A - 一种老电影褪色闪烁的修复方法 - Google Patents
一种老电影褪色闪烁的修复方法 Download PDFInfo
- Publication number
- CN105809639A CN105809639A CN201610120743.1A CN201610120743A CN105809639A CN 105809639 A CN105809639 A CN 105809639A CN 201610120743 A CN201610120743 A CN 201610120743A CN 105809639 A CN105809639 A CN 105809639A
- Authority
- CN
- China
- Prior art keywords
- frame
- beta
- alpha
- prime
- sequence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 48
- 238000005562 fading Methods 0.000 title abstract description 7
- 238000012545 processing Methods 0.000 claims abstract description 12
- 238000012937 correction Methods 0.000 claims description 13
- 238000012546 transfer Methods 0.000 claims description 12
- 238000013507 mapping Methods 0.000 claims description 3
- 239000003086 colorant Substances 0.000 abstract description 2
- 230000005540 biological transmission Effects 0.000 abstract 1
- 230000003993 interaction Effects 0.000 abstract 1
- 238000012216 screening Methods 0.000 abstract 1
- 230000000694 effects Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Processing Of Color Television Signals (AREA)
- Studio Devices (AREA)
Abstract
本发明涉及一种老电影褪色闪烁的修复方法,该方法包括:(1)导入待处理序列,然后对待处理序列分镜,对每一组分镜序列通过RGB通道均值统计曲线判断序列是否存在闪烁;(2)在存在闪烁的分镜中挑选合适的参考帧,若无参考帧,则通过色彩校正产生参考帧,若有参考帧,则直接选定参考帧;(3)使用颜色传递算法进行闪烁修复直至该组分镜处理完成;(4)对下一组分镜序列重新筛选参考帧进行上述处理,直至所有分组序列全部处理完成。本方法交互简单,处理速度较快,能适用于大部分的全局褪色闪烁的修复。
Description
技术领域
本发明涉及计算机图像修复领域,具体涉及一种老电影褪色闪烁的修复方法。
背景技术
老电影是历史文化的缩影,也是一份极为珍贵的可视化资料。然而由于我国早期电影保存条件有限,再加上转印、播放次数过多等人为因素,现存的老电影基本受到了一定程度的损伤,直接影响了观看效果。随着数字图像处理技术的发展,修复老电影的损伤成为了可能。
闪烁是老电影损伤中一种最为常见的问题,现有的研究主要集中在亮度闪烁上,主要的修复方法都需要对图像序列中的闪烁进行建模,然后估计该模型的闪烁参数。周磊等设计了一种基于块的局部区域参数估计和补偿方法,通过对图像序列进行基于块的闪烁模型参数估计和当前帧补偿模型的设计,实现了参照模型下的受损图像亮度修复。谌安军等通过对图像序列中的局部闪烁进行基于余弦基的建模和逐次超松弛迭代的方法,实现了对严重局部亮度闪烁的电影的修复。JulieDelon基于尺度空间理论使用尺度时间均衡的方法实现了全局亮度闪烁的修复。
然而,经典老电影不仅有黑白老电影,还有诸多彩色老电影,此类电影同样存在闪烁现象,统称为褪色闪烁。在老电影修复中,相对于亮度闪烁修复,褪色闪烁的研究较少。
发明内容
针对现有技术中存在的问题,本发明提出了一种老电影的褪色闪烁修复方法。本方法基于颜色传递算法和色彩校正算法,首先对序列采用均值比较的方法进行闪烁判断,对判定闪烁的序列进行参考帧选取,若闪烁序列无参考帧,则采用色彩校正来产生参考帧,最后通过颜色传递进行全局褪色闪烁修复。
为达到上述目的,本发明才有如下技术方案:
一种老电影褪色闪烁的修复方法,包括如下步骤:
101:记整个待处理的序列为P,对序列P进行分镜处理,记分镜个数为n,分镜序列为Pi;
由于后期处理闪烁使用的颜色传递算法对图像的结构有一定要求,只有在参考图像帧与待处理帧之间的布局结构相似时,处理结果最为理想,故分镜是必须的步骤;
102:对分镜序列Pi进行RGB均值统计,判断是否存在闪烁;闪烁具有单帧不易观测的特点,只有连续放映时,才能明显发现,利用RGB均值统计,能客观判断Pi是否存在闪烁;
103:若判定Pi序列存在闪烁,则在Pi序列中筛选出一帧适合的参考帧;若无参考帧,则使用色彩校正算法产生参考帧;对于参考帧的选取具有主观因素影响,主要是通过修复人员判定是否在Pi序列存在褪色不明显的图像帧,在无法确定合适参考帧的情况下,在Pi序列中选择褪色现象较轻的一帧进行色彩校正;
104:使用颜色传递算法,对Pi序列的每一帧待修复图像进行处理;
105:在Pi序列处理完成后,对下一组分镜序列P(i+1)重复步骤102-104处理过程,直至Pi=Pn。
所述步骤103中的色彩校正算法的主要过程为:
1)将待处理帧的原始像素值范围映射到[0,1],并使用公式(1)将其从RGB空间转换到lαβ空间;
2)使用公式(2)在lαβ空间进行色彩校正处理:
其中,α,β表示lαβ颜色空间通道内所有像素的原始值;α′,β′表示处理好之后的所有像素值;mα,mβ表示α与β通道均值;Cα,Cβ表示实际需求的通道均值,若图像仅需要色彩校正,则Cα,Cβ均为0;
3)使用公式(3)将处理好的参考帧转回RGB空间,并将其像素值映射到原始值范围:
在进行映射前,利用公式(4)修正参考帧像素值的溢出,
其中,I表示参考帧图像,s表示其各通道像素值。
所述步骤104中的颜色传递算法,具体如下:
1)将参考帧与待修复帧转到lαβ颜色空间,计算参考帧的平均值参考帧的方差待修复帧的平均值待修复帧的方差
2)使用公式(5)弱化待修复帧的整体色彩信息;
其中,lS,αS,βS是待修复帧三通道的所有像素值,lS′,α′S,βS′是待修复帧三通道弱化后的像素值;
3)使用公式(6)将待修复帧与参考帧标准差之比作为通道值偏移量的系数,将参考帧的细节信息映射到待修复帧中;
4)使用公式(7)将参考帧的整体信息添加到处理后的待修复帧中;
5)将处理好的图像帧转回RGB颜色空间。
本发明与现有技术相比的优点在于:
(1)、本发明提供了一种彩色老电影闪烁的修复方案,其交互简单,公式简洁,效率较高,为修复褪色闪烁提供了可能;
(2)、采用了色彩校正的方案,在没有参考帧的情况下仍然可以进行修复,扩宽了可修复范围;
(3)、在有合适参考帧的前提下,忽略图像颜色空间的变换,本发明同样适用于全局亮度闪烁的修复。
附图说明
图1为一种彩色老电影闪烁修复方案的流程图。
图2为色彩校正对比图,其中(a)为色彩校正处理前图像,(b)为处理后图像。
图3为动画老电影序列《没头脑和不高兴》处理效果对比图,其中(a)为原始图像序列帧,(b)为修复后序列帧。
图4为动画老电影序列《没头脑和不高兴》的50帧RGB通道均值统计对比图,其中(a)为处理前统计图,(b)为处理后统计图。
具体实施方式
下面结合附图以及具体实施方式进一步说明本发明。
如图1所示,一种老电影褪色闪烁的修复方法,包括如下步骤:
101:记整个待处理的序列为P,对序列P进行分镜处理,记分镜个数为n,分镜序列为Pi;
由于后期处理闪烁使用的颜色传递算法对图像的结构有一定要求,只有在参考图像帧与待处理帧之间的布局结构相似时,处理结果最为理想,故分镜是必须的步骤;
102:对分镜序列Pi进行RGB均值统计,判断是否存在闪烁;闪烁具有单帧不易观测的特点,只有连续放映时,才能明显发现,利用RGB均值统计,能客观判断Pi是否存在闪烁;
103:若判定Pi序列存在闪烁,则在Pi序列中筛选出一帧适合的参考帧;若无参考帧,则使用色彩校正算法产生参考帧;对于参考帧的选取具有主观因素影响,主要是通过修复人员判定是否在Pi序列存在褪色不明显的图像帧,在无法确定合适参考帧的情况下,在Pi序列中选择褪色现象较轻的一帧进行色彩校正;具体步骤为:
1)将待处理帧的原始像素值范围映射到[0,1],并使用公式(1)将其从RGB空间转换到lαβ空间;
2)使用公式(2)在lαβ空间进行色彩校正处理:
其中,α,β表示lαβ颜色空间通道内所有像素的原始值;α′,β′表示处理好之后的所有像素值;mα,mβ表示α与β通道均值;Cα,Cβ表示实际需求的通道均值,若图像仅需要色彩校正,则Cα,Cβ均为0;
3)使用公式(3)将处理好的参考帧转回RGB空间,并将其像素值映射到原始值范围:
在进行映射前,利用公式(4)修正参考帧像素值的溢出,
其中,I表示参考帧图像,s表示其各通道像素值。
104:使用颜色传递算法,对Pi序列的每一帧待修复图像进行处理;具体如下:
1)将参考帧与待修复帧转到lαβ颜色空间,计算参考帧的平均值参考帧的方差待修复帧的平均值待修复帧的方差
2)使用公式(5)弱化待修复帧的整体色彩信息;
其中,lS,αS,βS是待修复帧三通道的所有像素值,lS′,α′S,βS′是待修复帧三通道弱化后的像素值;
3)使用公式(6)将待修复帧与参考帧标准差之比作为通道值偏移量的系数,将参考帧的细节信息映射到待修复帧中;
4)使用公式(7)将参考帧的整体信息添加到处理后的待修复帧中;
5)将处理好的图像帧转回RGB颜色空间。
105:在Pi序列处理完成后,对下一组分镜序列P(i+1)重复步骤102-104处理过程,直至Pi=Pn。
下面结合具体的实例证明本发明提供的一种老电影闪烁修复方法的可行性,详见下文描述:
本发明截取动画老电影《没头脑和不高兴》部分序列进行实验,每帧图像大小为2048×1556,分为4组镜头共578张图片。图2(a)取自第二组分镜序列第33帧,该序列共50帧图像,由于闪烁严重无法筛选出恰当参考帧,利用色彩校正算法对其进行校正,处理结果如图2(b)所示。对比原始图像,图2(a)的偏色现象得到明显改善。图3(a)取自第二组分镜序列第30帧至35帧,经过颜色传递算法处理后,效果如图3(b)所示,图3(a)中序列主色调逐渐变红的情况得到了极大改善,基本保持在同一色调上。图4是第二组序列的RGB均值统计,从处理前后对比来看,图4(b)的统计曲线趋近平滑,客观说明本发明的有效性。
Claims (3)
1.一种老电影褪色闪烁的修复方法,其特征在于,包括如下步骤:
101:记整个待处理的序列为P,对序列P进行分镜处理,记分镜个数为n,分镜序列为Pi;
由于后期处理闪烁使用的颜色传递算法对图像的结构有一定要求,只有在参考图像帧与待处理帧之间的布局结构相似时,处理结果最为理想,故分镜是必须的步骤;
102:对分镜序列Pi进行RGB均值统计,判断是否存在闪烁;闪烁具有单帧不易观测的特点,只有连续放映时,才能明显发现,利用RGB均值统计,能客观判断Pi是否存在闪烁;
103:若判定Pi序列存在闪烁,则在Pi序列中筛选出一帧适合的参考帧;若无参考帧,则使用色彩校正算法产生参考帧;对于参考帧的选取具有主观因素影响,主要是通过修复人员判定是否在Pi序列存在褪色不明显的图像帧,在无法确定合适参考帧的情况下,在Pi序列中选择褪色现象较轻的一帧进行色彩校正;
104:使用颜色传递算法,对Pi序列的每一帧待修复图像进行处理;
105:在Pi序列处理完成后,对下一组分镜序列P(i+1)重复步骤102-104处理过程,直至Pi=Pn。
2.根据权利要求1所述的老电影褪色闪烁的修复方法,其特征在于,所述步骤103中的色彩校正算法的主要过程为:
1)将待处理帧的原始像素值范围映射到[0,1],并使用公式(1)将其从RGB空间转换到lαβ空间;
2)使用公式(2)在lαβ空间进行色彩校正处理:
其中,α,β表示lαβ颜色空间通道内所有像素的原始值;α′,β′表示处理好之后的所有像素值;mα,mβ表示α与β通道均值;Cα,Cβ表示实际需求的通道均值,若图像仅需要色彩校正,则Cα,Cβ均为0;
3)使用公式(3)将处理好的参考帧转回RGB空间,并将其像素值映射到原始值范围:
在进行映射前,利用公式(4)修正参考帧像素值的溢出,
其中,I表示参考帧图像,s表示其各通道像素值。
3.根据权利要求1所述的老电影褪色闪烁的修复方法,其特征在于,所述步骤104中的颜色传递算法,具体如下:
1)将参考帧与待修复帧转到lαβ颜色空间,计算参考帧的平均值参考帧的方差待修复帧的平均值待修复帧的方差
2)使用公式(5)弱化待修复帧的整体色彩信息;
其中,lS,αS,βS是待修复帧三通道的所有像素值,l′S,α′S,β′S是待修复帧三通道弱化后的像素值;
3)使用公式(6)将待修复帧与参考帧标准差之比作为通道值偏移量的系数,将参考帧的细节信息映射到待修复帧中;
4)使用公式(7)将参考帧的整体信息添加到处理后的待修复帧中;
5)将处理好的图像帧转回RGB颜色空间。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610120743.1A CN105809639B (zh) | 2016-03-03 | 2016-03-03 | 一种老电影褪色闪烁的修复方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610120743.1A CN105809639B (zh) | 2016-03-03 | 2016-03-03 | 一种老电影褪色闪烁的修复方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105809639A true CN105809639A (zh) | 2016-07-27 |
CN105809639B CN105809639B (zh) | 2019-01-11 |
Family
ID=56465989
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610120743.1A Active CN105809639B (zh) | 2016-03-03 | 2016-03-03 | 一种老电影褪色闪烁的修复方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105809639B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107798666A (zh) * | 2017-11-17 | 2018-03-13 | 上海大学 | 基于稀疏颜色特征的老电影褪色闪烁修复方法 |
CN107945124A (zh) * | 2017-11-17 | 2018-04-20 | 上海大学 | 一种运动路径指引的老电影黑帧修复方法 |
CN110378860A (zh) * | 2019-07-30 | 2019-10-25 | 腾讯科技(深圳)有限公司 | 修复视频的方法、装置、计算机设备和存储介质 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101281642B (zh) * | 2008-05-12 | 2011-12-14 | 西安理工大学 | 基于自适应聚类颜色传递的雾天图像清晰化方法 |
JP5296112B2 (ja) * | 2011-02-04 | 2013-09-25 | パナソニック株式会社 | フリッカ補正装置、フリッカ補正方法、およびフリッカ補正プログラム |
-
2016
- 2016-03-03 CN CN201610120743.1A patent/CN105809639B/zh active Active
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107798666A (zh) * | 2017-11-17 | 2018-03-13 | 上海大学 | 基于稀疏颜色特征的老电影褪色闪烁修复方法 |
CN107945124A (zh) * | 2017-11-17 | 2018-04-20 | 上海大学 | 一种运动路径指引的老电影黑帧修复方法 |
CN107798666B (zh) * | 2017-11-17 | 2021-08-10 | 上海大学 | 基于稀疏颜色特征的老电影褪色闪烁修复方法 |
CN107945124B (zh) * | 2017-11-17 | 2021-12-03 | 上海大学 | 一种运动路径指引的老电影黑帧修复方法 |
CN110378860A (zh) * | 2019-07-30 | 2019-10-25 | 腾讯科技(深圳)有限公司 | 修复视频的方法、装置、计算机设备和存储介质 |
CN110378860B (zh) * | 2019-07-30 | 2023-08-18 | 腾讯科技(深圳)有限公司 | 修复视频的方法、装置、计算机设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN105809639B (zh) | 2019-01-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102063706B (zh) | 一种快速去雾方法 | |
CN102075688B (zh) | 单帧双曝光图像宽动态处理方法 | |
CN109584170B (zh) | 基于卷积神经网络的水下图像复原方法 | |
CN103491357B (zh) | 一种图像传感器白平衡处理方法 | |
CN105184754B (zh) | 图像对比度增强方法 | |
CN108009997B (zh) | 一种调整图像对比度的方法及装置 | |
CN110223251B (zh) | 适用于人工与自然光源的卷积神经网络水下图像复原方法 | |
CN105809639A (zh) | 一种老电影褪色闪烁的修复方法 | |
CN107424132A (zh) | 一种图像快速去雾的优化方法 | |
CN104867121A (zh) | 基于暗原色先验和Retinex理论的图像快速去雾法 | |
CN103973997A (zh) | 一种图像处理方法及装置 | |
CN104331867B (zh) | 图像去雾的方法、装置及移动终端 | |
US8896674B2 (en) | Video signal processing apparatus and video signal processing method | |
CN104299198A (zh) | 基于像素点暗通道的快速图像去雾方法 | |
CN107967671A (zh) | 结合数据学习和物理先验的图像去雾方法 | |
CN104683780B (zh) | 一种视频监控摄像机的自动白平衡方法和装置 | |
CN107977941A (zh) | 一种明亮区域色彩保真及对比度增强的图像去雾方法 | |
CN103208107A (zh) | 终端、图像的修复方法和装置 | |
CN110766622A (zh) | 基于亮度区分和Gamma平滑的水下图像增强方法 | |
CN112488968B (zh) | 一种分程度直方图均衡融合的图像增强方法 | |
CN114155173A (zh) | 一种图像去雾方法、设备及非易失性存储介质 | |
CN107451962A (zh) | 一种图像去雾方法及装置 | |
CN111353964B (zh) | 基于卷积神经网络的结构一致立体图像风格迁移方法 | |
CN112331140A (zh) | 一种显示屏幕色偏Mura修复方法及装置 | |
CN108765310B (zh) | 基于多尺度窗口的自适应透射率修复图像去雾方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20201125 Address after: Room 2004, building B, 547 Tianmu West Road, Jing'an District, Shanghai Patentee after: Shanghai film industry (Shanghai) Co., Ltd Address before: 200444 Baoshan District Road, Shanghai, No. 99 Patentee before: Shanghai University |