CN102034223A - 去方向性高速运动目标模糊的计算方法 - Google Patents

去方向性高速运动目标模糊的计算方法 Download PDF

Info

Publication number
CN102034223A
CN102034223A CN 201010568245 CN201010568245A CN102034223A CN 102034223 A CN102034223 A CN 102034223A CN 201010568245 CN201010568245 CN 201010568245 CN 201010568245 A CN201010568245 A CN 201010568245A CN 102034223 A CN102034223 A CN 102034223A
Authority
CN
China
Prior art keywords
speed moving
moving object
image
coding
directivity high
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN 201010568245
Other languages
English (en)
Inventor
戴琼海
付莹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN 201010568245 priority Critical patent/CN102034223A/zh
Publication of CN102034223A publication Critical patent/CN102034223A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

本发明提出一种去方向性高速运动目标模糊的计算方法,包括以下步骤:对传统相机的曝光方式进行伪随机二进制编码;用编码曝光的方式对方向性高速运动目标进行编码;获得方向性高速运动目标的模糊图像,并通过压缩约束获得方向性高速运动目标静止时的图像;和根据方向性高速运动目标静止时的图像对模糊图像进行优化解码以去除运动模糊。本发明利用计算摄像学的方法从采集端通过编码曝光的方式改变运动目标图像的获取方式,从而消除卷积核(也称模糊核)频域的零点,这样反卷积得到的图像就不会有振铃现象,这样就最终达到去除目标运动模糊获得清晰图像的目的。

Description

去方向性高速运动目标模糊的计算方法
技术领域
本发明涉及计算机图像处理技术领域,特别涉及一种去方向性高速运动目标模糊的计算方法。
背景技术
图像模糊一般是由于相机的散焦或是被拍摄目标的运动造成。模糊图像的基本模型是清晰图像与模糊核进行卷积。在模糊核已知的情况下可以通过反卷积得到,但是在实际情况中一般模糊核是不知道,这就需要用盲反卷的方法解卷积。现有技术存在的缺点是,即便是在模糊核已知的情况下,由于其频域存在零点,因此恢复出来图像常会有明显的振铃现象。
发明内容
本发明的目的旨在至少解决上述技术缺陷,特别提出了一种去方向性高速运动目标模糊的计算方法。
为达到上述目的,本发明一方面提出了一种去方向性高速运动目标模糊的计算方法,包括以下步骤:对传统相机的曝光方式进行伪随机二进制编码;用编码曝光的方式对方向性高速运动目标进行编码;获得方向性高速运动目标的模糊图像,并通过压缩约束获得所述方向性高速运动目标静止时的图像;和根据所述方向性高速运动目标静止时的图像对所述模糊图像进行优化解码以去除运动模糊。
在本发明的一个实施例中,所述对传统相机的曝光方式进行伪随机二进制编码进一步包括:对可进行编码曝光的相机直接进行伪随机二进制编码或是通过对传统相机外接控制曝光方式硬件等来实现编码曝光。
在本发明的一个实施例中,所述用编码曝光的方式对方向性高速运动目标进行编码以获得M个像素点的编码向量组成编码矩阵φ=[φ1 T,φ2 T,…,φM T]T
在本发明的一个实施例中,所述通过压缩约束获得方向性高速运动目标静止时的图像进一步包括:将相机采集到的模糊图像记为y,将所述方向性高速运动目标静止时的图像记为x;通过公式Y=φX获得方向性高速运动目标静止时的图像,其中Y=[y1,y2,…,yM],X=[x1,x2,…,xN]。
在本发明的一个实施例中,所述根据方向性高速运动目标静止时的图像对所述模糊图像进行优化解码以去除运动模糊进一步包括:建立优化模型
Figure BSA00000368577700021
s.t.Y=φX,其中,g(x)为优化函数,s.t.为约束条件;选择优化函数g(x),并求解以获得重建后的清晰图像。具体地,所述优化函数g(x)为满足上述约束条件的采用各种l1范数下的优化函数,优选地,g(x)=||ψTX||1或者g(x)=TV(X)。
本发明利用计算摄像学的方法从采集端通过编码曝光的方式改变运动目标图像的获取方式,从而消除卷积核(也称模糊核)频域的零点,这样反卷积得到的图像就不会有振铃现象,这样就最终达到去除目标运动模糊获得清晰图像的目的。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明实施例的去方向性高速运动目标模糊的计算方法流程图;
图2为本发明实施例的去方向性高速运动目标模糊的计算图例说明;
图3为传统曝光方式和本发明实施例的编码曝光方式示意图;
图4为本发明实施例示例性的编码方式;
图5为本发明实施例的以仅有4个像素的相机为例的示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。
如图1所示,为本发明实施例的去方向性高速运动目标模糊的计算方法流程图,如图2所示,为本发明实施例的去方向性高速运动目标模糊的计算图例说明。该方法包括以下步骤:
步骤S101,对传统相机的曝光方式进行伪随机二进制编码。在本发明的一个实施例中,既可以对可进行编码曝光的相机直接进行伪随机二进制编码,也可以通过对传统相机外接控制曝光方式硬件等来实现编码曝光,或者本领域技术人员还可选择其他的二进制编码方式。如图3所示,为传统曝光方式和本发明实施例的编码曝光方式示意图。
步骤S102,用编码曝光的方式对方向性高速运动目标进行编码,将被拍摄的方向性高速运动目标的运动速度记为S像素/单位时间。如图4所示,为本发明实施例示例性的编码方式,在此假设其速度为4像素/单位时间,同时由于方向性高速运动目标和相机运动是相对的,同样为了便于示例,在该图中以四像素相机运动为例。根据该图中给出的编码方式,则该四像素相机中第一个像素点的编码向量φ1=[11110000000011110000111111110000],这样M个像素点的编码向量组成编码矩阵φ=[φ1 T,φ2 T,…,φM T]T,这就完成了用编码曝光的方式编码方向性高速运动目标。
步骤S103,获得方向性高速运动目标的模糊图像,并通过压缩约束获得所述方向性高速运动目标静止时的图像。在本发明的一个实施例中,将相机采集到的数据记为y(模糊图像),假设目标静止时目标的表示记为x。根据S102在的编码曝光下相机采集到的数据Y=φX,其中Y=[y1,y2,…,yM],X=[x1,x2,…,xN],这样就通过压缩约束获得所述方向性高速运动目标静止时的图像x。如图5所示,为本发明实施例的以仅有4个像素的相机为例的示意图。
步骤S104,根据所述方向性高速运动目标静止时的图像利用优化方法解码模糊图像去除运动模糊,以达到重建高速运动目标的清晰图像的目的。在本发明的一个实施例中,根据S103采集到的运动模糊图像,建立优化模型:
X ^ = arg min g ( x ) s . t . Y = φX
其中,g(x)为优化函数,由于一般图像都在某个基ψ下满足稀疏性,这样根据压缩感知理论就可以通过优化l1范数来求解,可以采用各种l1范数下的优化函数,能够满足上述约束条件即可,例如g(x)=||ψTX||1,g(x)=TV(X)等,从中选择解得的最好的重建清晰图像的结果即可。对一般图像各函数重建结果相差不大,对图像的质量没有太高的要求时任意选择一个优化函数进行优化求解就好。
本发明利用计算摄像学的方法从采集端通过编码曝光的方式改变运动目标图像的获取方式,从而消除卷积核(也称模糊核)频域的零点,这样反卷积得到的图像就不会有振铃现象,这样就最终达到去除目标运动模糊获得清晰图像的目的。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同限定。

Claims (7)

1.一种去方向性高速运动目标模糊的计算方法,其特征在于,包括以下步骤:
对传统相机的曝光方式进行伪随机二进制编码;
用编码曝光的方式对方向性高速运动目标进行编码;
获得方向性高速运动目标的模糊图像,并通过压缩约束获得所述方向性高速运动目标静止时的图像;和
根据所述方向性高速运动目标静止时的图像对所述模糊图像进行优化解码以去除运动模糊。
2.如权利要求1所述的去方向性高速运动目标模糊的计算方法,其特征在于,所述对传统相机的曝光方式进行伪随机二进制编码进一步包括:
对可进行编码曝光的相机直接进行伪随机二进制编码或是通过对传统相机外接控制曝光方式硬件等来实现编码曝光。
3.如权利要求1所述的去方向性高速运动目标模糊的计算方法,其特征在于,所述用编码曝光的方式对方向性高速运动目标进行编码以获得M个像素点的编码向量组成编码矩阵φ=[φ1 T,φ2 T,…,φM T]T
4.如权利要求3所述的去方向性高速运动目标模糊的计算方法,其特征在于,所述通过压缩约束获得方向性高速运动目标静止时的图像进一步包括:
将相机采集到的模糊图像记为y,将所述方向性高速运动目标静止时的图像记为x;
通过公式Y=φX获得方向性高速运动目标静止时的图像,其中Y=[y1,y2,…,yM],X=[x1,x2,…,xN]
5.如权利要求4所述的去方向性高速运动目标模糊的计算方法,其特征在于,所述根据方向性高速运动目标静止时的图像对所述模糊图像进行优化解码以去除运动模糊进一步包括:
建立优化模型
Figure FSA00000368577600011
其中,g(x)为优化函数,s.t.为约束条件;
选择优化函数g(x),并求解以获得重建后的清晰图像。
6.如权利要求5所述的去方向性高速运动目标模糊的计算方法,其特征在于,所述优化函数g(x)为满足上述约束条件的采用各种l1范数下的优化函数。
7.如权利要求6所述的去方向性高速运动目标模糊的计算方法,其特征在于,其中,g(x)=||ψTX||1或者g(x)=TV(X)。
CN 201010568245 2010-11-26 2010-11-26 去方向性高速运动目标模糊的计算方法 Pending CN102034223A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010568245 CN102034223A (zh) 2010-11-26 2010-11-26 去方向性高速运动目标模糊的计算方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010568245 CN102034223A (zh) 2010-11-26 2010-11-26 去方向性高速运动目标模糊的计算方法

Publications (1)

Publication Number Publication Date
CN102034223A true CN102034223A (zh) 2011-04-27

Family

ID=43887076

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010568245 Pending CN102034223A (zh) 2010-11-26 2010-11-26 去方向性高速运动目标模糊的计算方法

Country Status (1)

Country Link
CN (1) CN102034223A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103595922A (zh) * 2013-11-04 2014-02-19 西北核技术研究所 一种基于电子快门曝光编码的成像方法
CN103595923A (zh) * 2013-11-04 2014-02-19 西北核技术研究所 一种基于曝光编码的双机高速成像系统及方法
CN104243837A (zh) * 2014-08-28 2014-12-24 浙江大学 基于单次曝光视频重建的颤振探测和遥感图像恢复方法
CN104820971A (zh) * 2015-04-22 2015-08-05 西北工业大学 一种基于分布式相机阵列的运动目标去模糊方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7580620B2 (en) * 2006-05-08 2009-08-25 Mitsubishi Electric Research Laboratories, Inc. Method for deblurring images using optimized temporal coding patterns

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7580620B2 (en) * 2006-05-08 2009-08-25 Mitsubishi Electric Research Laboratories, Inc. Method for deblurring images using optimized temporal coding patterns

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
《CVPR 2007》 20070622 Amit Agrawal et al Resolving Objects at Higher Resolution from a Single Motion-blurred Image 全文 1-7 , 2 *
《CVPR 2007》 20070622 Jiaya Jia Single Image Motion Deblurring Using Transparency 全文 1-7 , 2 *
《CVPR 2009》 20090625 Amit Agrawal et al Coded Exposure Deblurring: Optimized Codes for PSF Estimation and Invertibility 全文 1-7 , 2 *
《CVPR 2009》 20090625 Jian-Feng Cai et al High-quality Curvelet-based Motion Deblurring From An Image Pair 全文 1-7 , 2 *
《SIGGRAPH 2006》 20060731 Ramesh Raskar et al Coded Exposure Photography: Motion Deblurring using Fluttered Shutter 第797-800页第3节第1段第1-5行,第3.1-3.2节,第4.1节,第803页第7.1节第1段第5-9行,以及图3-6 1-7 第25卷, 第3期 2 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103595922A (zh) * 2013-11-04 2014-02-19 西北核技术研究所 一种基于电子快门曝光编码的成像方法
CN103595923A (zh) * 2013-11-04 2014-02-19 西北核技术研究所 一种基于曝光编码的双机高速成像系统及方法
CN104243837A (zh) * 2014-08-28 2014-12-24 浙江大学 基于单次曝光视频重建的颤振探测和遥感图像恢复方法
CN104243837B (zh) * 2014-08-28 2017-06-16 浙江大学 基于单次曝光视频重建的颤振探测和遥感图像恢复方法
CN104820971A (zh) * 2015-04-22 2015-08-05 西北工业大学 一种基于分布式相机阵列的运动目标去模糊方法
CN104820971B (zh) * 2015-04-22 2017-11-07 西北工业大学 一种基于分布式相机阵列的运动目标去模糊方法

Similar Documents

Publication Publication Date Title
US10701394B1 (en) Real-time video super-resolution with spatio-temporal networks and motion compensation
US10547873B2 (en) System and method for providing real-time super-resolution for compressed videos
CN112801901B (zh) 基于分块多尺度卷积神经网络的图像去模糊算法
CN105847797B (zh) 图像解码方法
Malviya et al. Image fusion of digital images
US20140092439A1 (en) Encoding images using a 3d mesh of polygons and corresponding textures
CN1435054A (zh) 用于进行视频图像解码的方法和装置
TW201031215A (en) Methods and apparatus for video image pruning
CN104284059A (zh) 用于稳定图像的设备和方法
CN103141097A (zh) 优化的去块滤波器
TW201436542A (zh) 利用內容資訊改善視訊編碼的系統與方法
CN102801993A (zh) 图像信号处理装置、图像信号处理方法
CN102034223A (zh) 去方向性高速运动目标模糊的计算方法
CN104243837A (zh) 基于单次曝光视频重建的颤振探测和遥感图像恢复方法
GB2548749A (en) Online training of hierarchical algorithms
JP2017527011A (ja) イメージをアップスケーリングする方法及び装置
CN110415173A (zh) 一种基于三维总变分的图像超分辨率方法
CN112200817A (zh) 基于图像的天空区域分割和特效处理方法、装置及设备
CN103747269B (zh) 一种滤波器插值方法及滤波器
CN104639834A (zh) 一种摄像头图像数据传输的方法及系统
CN112565603B (zh) 图像处理方法、装置及电子设备
CN103997651A (zh) 一种合成图像的数据压缩方法及装置
US20150234171A1 (en) Imaging system, imaging apparatus, and image processing apparatus
CN105357494B (zh) 视频编解码方法、装置
CN100544396C (zh) 图像信号处理方法和设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20110427