CN106385546A - 通过图像处理改善移动电子设备摄像效果的方法和系统 - Google Patents

通过图像处理改善移动电子设备摄像效果的方法和系统 Download PDF

Info

Publication number
CN106385546A
CN106385546A CN201610854828.2A CN201610854828A CN106385546A CN 106385546 A CN106385546 A CN 106385546A CN 201610854828 A CN201610854828 A CN 201610854828A CN 106385546 A CN106385546 A CN 106385546A
Authority
CN
China
Prior art keywords
image
electronic device
mobile electronic
module
depth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610854828.2A
Other languages
English (en)
Inventor
周卫星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China Normal University
Original Assignee
South China Normal University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China Normal University filed Critical South China Normal University
Priority to CN201610854828.2A priority Critical patent/CN106385546A/zh
Publication of CN106385546A publication Critical patent/CN106385546A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明公开一种通过图像处理改善移动电子设备摄像效果的方法和系统,在只使用单镜头的情况下,通过图像处理的方法,测量被摄场景各景物的景深信息,然后根据使用者的意愿设置背景虚化的程度,达到传统相机通过调整光圈使背景虚化的效果,增加了移动电子设备的相机的表现能力。

Description

通过图像处理改善移动电子设备摄像效果的方法和系统
技术领域
本发明涉及摄像技术领域,具体涉及一种通过图像处理改善移动电子设备摄像效果的方法和系统。
背景技术
利用手机进行照相,已是目前进行日常场景记录的主要手段。随着手机照相系统质量的不断提高,手机相机的成像质量已接近或达到传统相机的水平。但由于移动电子设备体积的限制,手机相机的光学镜头的孔径都很小,所以成像的景深很大,所照图像的前景与背景都很清晰,这对于一般目的的成像是没有问题的,但想达到传统相机通过调整光圈使背景虚化的效果,就无能为力了,这限制了移动电子设备相机的表象效果。为了改善这种情况,目前出现了双镜头的手机相机,利用两个镜头的空间位置差,测量出被摄场景中景物的景深信息,从而对属于背景的景物进行虚化,达到突出前景,虚化背景的效果,大大加强了手机相机的表象能力,进一步拓宽了相机的应用领域。但由于手机体积的限制,双镜头的空间位置的放置受到限制,同时也限制了对景深的测量,背景虚化的效果不很理想。另外,双镜头也增加了手机的成本和复杂度。
发明内容
本发明的目的是解决现有技术的缺陷,提供一种在只使用单镜头的情况下,通过图像处理增加移动电子设备相机的表现能力的方法,采用的技术方案如下:
一种通过图像处理改善移动电子设备摄像效果的方法,包括:
在用户在取景构图过程中,连续的获取场景的图像,并对相邻的两幅图像进行图像运动检测;
根据图像运动检测的结果计算场景中物体的景深信息;
根据用户意愿设置背景虚化的程度,对图像进行背景虚化。
进一步地,所述对两幅图像进行图像运动检测包括以下步骤:
将相邻的两幅图像中的第一幅图像分成若干小方块;
在第二幅图像中寻找与各个小方块最匹配的块;
计算各个物体在第一幅图像到第二幅图像的位置差。
进一步地,场景中物体的景深信息的计算公式如下:
其中,v为物体对应的块的运动距离,vmax,vmin分别为图像中方块的最大运动距离和最小运动距离。
进一步地,对图像进行背景虚化时,利用下式的点扩散函数对图像背景进行虚化:
式中R为点扩散函数的半价,i,j为点的坐标。
作为优选,本发明还包括对对背景虚化后的图像进行平滑滤波。
与现有技术相比,本发明的有益效果:
本发明在只使用单镜头的情况下,通过图像处理的方法,测量被摄场景各景物的景深信息,然后根据使用者的意愿设置背景虚化的程度,达到传统相机通过调整光圈使背景虚化的效果,增加了移动电子设备的相机的表现能力。
本发明的另一目的是解决现有技术的缺陷,提供一种在只使用单镜头的情况下,通过图像处理增加移动电子设备相机的表现能力的系统,采用的技术方案如下:
通过图像处理增加移动电子设备相机的表现能力的系统,其特征在于,包括依次连接的图像运动检测模块、景深信息计算模块和背景虚化模块,所述图像运动检测模块用于相邻的两幅图像进行运动检测,所述景深信息计算模块用于计算场景中物体的景深信息,所述背景虚化模块用于对图像背景进行虚化。
作为优选,所述图像运动检测模块包括图像分割模块、匹配模块和位置差计算模块,所述图像分割模块将相邻的两幅图像中的第一幅图像分成若干小方块;所述匹配模块用于在第二幅图像中寻找与各个小方块最匹配的块;所述位置差计算模块用于计算各个物体在第一幅图像到第二幅图像的位置差。
作为优选,所述景深信息计算模块按如下公式计算场景中物体的景深信息:
其中,v为物体对应的物体对应的块的运动距离,vmax,vmin分别为图像中方块的最大运动距离和最小运动距离。
作为优选,所述背景虚化模块点按如下扩散函数对图像背景进行虚化:
式中R为点扩散函数的半价,i,j为点的坐标。
作为优选,本发明还包括与背景虚化模块连接的图像合成模块,所述图像合成模块用于对背景虚化后的图像进行平滑滤波。
与现有技术相比,本发明的有益效果:
本发明在只使用单镜头的情况下,通过图像处理的方法,测量被摄场景各景物的景深信息,然后根据使用者的意愿设置背景虚化的程度,达到传统相机通过调整光圈使背景虚化的效果,增加了移动电子设备的相机的表现能力。
附图说明
图1是本发明的流程图;
图2是本发明图像运动检测的原理示意图。
具体实施方式
下面结合附图和实施例对本发明做进一步详细描述。
实施例1:
如图1所示,一种通过图像处理改善移动电子设备摄像效果的方法,包括:
在用户在取景构图过程中,连续的获取场景的图像,并对相邻的两幅图像进行图像运动检测;
根据图像运动检测的结果计算场景中物体的景深信息;
根据用户意愿设置背景虚化的程度,对图像进行背景虚化。
进一步地,所述对两幅图像进行图像运动检测包括以下步骤:
将相邻的两幅图像中的第一幅图像分成若干小方块;
在第二幅图像中寻找与各个小方块最匹配的块;
计算各个物体在第一幅图像到第二幅图像的位置差。
如图2所示,假设图像中有一物体6,由于移动电子设备的移动或抖动,在下一幅图像中产生了位移,到达了7的位置,图像运动检测的基本原理是:将原图像(第一幅图像)分成若干小方块,然后取一个方块,如第一幅图像中的8,并在第二幅图像中寻找与其最匹配的块。可以看出,当寻找到9的位置时,两个方块内的图像是一样的,这样就可以认为第一幅图像中的物体6,在第二幅图像中移动到了7的位置,其中10就是物体的运动矢量,矢量的模,就是物体的移动距离。当图像中的每个块都找到自己的匹配块后,整幅图像中各个物体的运动距离就确定了。根据透视原理,如果相机移动一个位置,那么离镜头越近的物体在图像中移动的距离就越大,离镜头越远的物体在图像中移动的距离就越小,所以测量物体的移动距离,就看得到场景中物体的景深信息。为了提高运动检测的精度,实际应用时块的大小一般为8*8或4*4个像素。
场景中物体的景深信息的计算公式如下:
其中,v为物体对应的块的运动距离,vmax,vmin分别为图像中方块的最大运动距离和最小运动距离。
对图像进行背景虚化时,利用下式的点扩散函数对图像背景进行虚化:
式中R为点扩散函数的半价,i,j为点的坐标。
本实施例还包括对对背景虚化后的图像进行平滑滤波。
实施例2:
通过图像处理增加移动电子设备相机的表现能力的系统,其特征在于,包括依次连接的图像运动检测模块、景深信息计算模块和背景虚化模块,所述图像运动检测模块用于相邻的两幅图像进行运动检测,所述景深信息计算模块用于计算场景中物体的景深信息,所述背景虚化模块用于对图像背景进行虚化。
所述图像运动检测模块包括图像分割模块、匹配模块和位置差计算模块,所述图像分割模块将相邻的两幅图像中的第一幅图像分成若干小方块;所述匹配模块用于在第二幅图像中寻找与各个小方块最匹配的块;所述位置差计算模块用于计算各个物体在第一幅图像到第二幅图像的位置差。
所述景深信息计算模块按如下公式计算场景中物体的景深信息:
其中,v为物体对应的块的运动距离,vmax,vmin分别为图像中方块的最大运动距离和最小运动距离。
所述背景虚化模块点按如下扩散函数对图像背景进行虚化:
式中R为点扩散函数的半价,i,j为点的坐标。
本发明还包括与背景虚化模块连接的图像合成模块,所述图像合成模块用于对背景虚化后的图像进行平滑滤波。

Claims (10)

1.通过图像处理改善移动电子设备摄像效果的方法,其特征在于,包括:
在用户在取景构图过程中,连续的获取场景的图像,并对相邻的两幅图像进行图像运动检测;
根据图像运动检测的结果计算场景中物体的景深信息;
根据用户意愿设置背景虚化的程度,对图像进行背景虚化。
2.根据权利要求1所述的通过图像处理改善移动电子设备摄像效果的方法,其特征在于,所述对两幅图像进行图像运动检测包括以下步骤:
将相邻的两幅图像中的第一幅图像分成若干小方块;
在第二幅图像中寻找与各个小方块最匹配的块;
计算各个物体在第一幅图像到第二幅图像的位置差。
3.根据权利要求1所述的通过图像处理改善移动电子设备摄像效果的方法,其特征在于,场景中物体的景深信息的计算公式如下:
其中,v为物体对应的块的运动距离,vmax,vmin分别为图像中方块的最大运动距离和最小运动距离。
4.根据权利要求1所述的通过图像处理改善移动电子设备摄像效果的方法,其特征在于,对图像进行背景虚化时,利用下式的点扩散函数对图像背景进行虚化:
式中R为点扩散函数的半价,i,j为点的坐标。
5.根据权利要求1所述的通过图像处理改善移动电子设备摄像效果的方法,其特征在于,还包括对对背景虚化后的图像进行平滑滤波。
6.通过图像处理增加移动电子设备相机的表现能力的系统,其特征在于,包括依次连接的图像运动检测模块、景深信息计算模块和背景虚化模块,所述图像运动检测模块用于相邻的两幅图像进行运动检测,所述景深信息计算模块用于计算场景中物体的景深信息,所述背景虚化模块用于对图像背景进行虚化。
7.根据权利要求6所述的通过图像处理增加移动电子设备相机的表现能力的系统,其特征在于,所述图像运动检测模块包括图像分割模块、匹配模块和位置差计算模块,所述图像分割模块将相邻的两幅图像中的第一幅图像分成若干小方块;所述匹配模块用于在第二幅图像中寻找与各个小方块最匹配的块;所述位置差计算模块用于计算各个物体在第一幅图像到第二幅图像的位置差。
8.根据权利要求6所述的通过图像处理增加移动电子设备相机的表现能力的系统,其特征在于,所述景深信息计算模块按如下公式计算场景中物体的景深信息:
其中,v为物体对应的块的运动距离,vmax,vmin分别为图像中方块的最大运动距离和最小运动距离。
9.根据权利要求6所述的通过图像处理增加移动电子设备相机的表现能力的系统,其特征在于,所述背景虚化模块点按如下扩散函数对图像背景进行虚化:
式中R为点扩散函数的半价,i,j为点的坐标。
10.根据权利要求6所述的通过图像处理增加移动电子设备相机的表现能力的系统,其特征在于,还包括与背景虚化模块连接的图像合成模块,所述图像合成模块用于对背景虚化后的图像进行平滑滤波。
CN201610854828.2A 2016-09-27 2016-09-27 通过图像处理改善移动电子设备摄像效果的方法和系统 Pending CN106385546A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610854828.2A CN106385546A (zh) 2016-09-27 2016-09-27 通过图像处理改善移动电子设备摄像效果的方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610854828.2A CN106385546A (zh) 2016-09-27 2016-09-27 通过图像处理改善移动电子设备摄像效果的方法和系统

Publications (1)

Publication Number Publication Date
CN106385546A true CN106385546A (zh) 2017-02-08

Family

ID=57935967

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610854828.2A Pending CN106385546A (zh) 2016-09-27 2016-09-27 通过图像处理改善移动电子设备摄像效果的方法和系统

Country Status (1)

Country Link
CN (1) CN106385546A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019120018A1 (zh) * 2017-12-22 2019-06-27 Oppo广东移动通信有限公司 照片的处理方法、装置、存储介质及电子设备
CN110663246A (zh) * 2017-05-24 2020-01-07 深圳市大疆创新科技有限公司 用于处理图像的方法和系统
CN111010514A (zh) * 2019-12-24 2020-04-14 维沃移动通信(杭州)有限公司 一种图像处理方法及电子设备
CN114216656A (zh) * 2021-12-13 2022-03-22 惠州Tcl移动通信有限公司 一种摄像头虚化效果性能测试卡、系统及制备方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103430529A (zh) * 2011-03-18 2013-12-04 索尼公司 图像处理设备和图像处理方法
WO2015002442A1 (ko) * 2013-07-02 2015-01-08 엘지전자 주식회사 다시점 영상이 제공되는 시스템에서 부가 오브젝트를 포함하는 3차원 영상 처리 방법 및 장치
CN104349049A (zh) * 2013-07-25 2015-02-11 联发科技股份有限公司 图像处理方法以及图像处理装置
CN104700414A (zh) * 2015-03-23 2015-06-10 华中科技大学 一种基于车载双目相机的前方道路行人快速测距方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103430529A (zh) * 2011-03-18 2013-12-04 索尼公司 图像处理设备和图像处理方法
WO2015002442A1 (ko) * 2013-07-02 2015-01-08 엘지전자 주식회사 다시점 영상이 제공되는 시스템에서 부가 오브젝트를 포함하는 3차원 영상 처리 방법 및 장치
CN104349049A (zh) * 2013-07-25 2015-02-11 联发科技股份有限公司 图像处理方法以及图像处理装置
CN104700414A (zh) * 2015-03-23 2015-06-10 华中科技大学 一种基于车载双目相机的前方道路行人快速测距方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
梁敏等: "一种鲁棒的散焦模糊图像点扩散函数参数估计方法", 《长春工程学院学报(自然科学版)》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110663246A (zh) * 2017-05-24 2020-01-07 深圳市大疆创新科技有限公司 用于处理图像的方法和系统
CN110663246B (zh) * 2017-05-24 2021-08-06 深圳市大疆创新科技有限公司 用于处理图像的方法和系统
WO2019120018A1 (zh) * 2017-12-22 2019-06-27 Oppo广东移动通信有限公司 照片的处理方法、装置、存储介质及电子设备
CN111010514A (zh) * 2019-12-24 2020-04-14 维沃移动通信(杭州)有限公司 一种图像处理方法及电子设备
CN114216656A (zh) * 2021-12-13 2022-03-22 惠州Tcl移动通信有限公司 一种摄像头虚化效果性能测试卡、系统及制备方法

Similar Documents

Publication Publication Date Title
Garg et al. Learning single camera depth estimation using dual-pixels
KR102213744B1 (ko) 선명하고 정확한 주밍 메커니즘 구현을 위한 광각 이미지 캡쳐링 요소 및 장초점 이미지 캡쳐링 요소의 활용방법
JP6395810B2 (ja) 動きゴーストフィルタリングのための基準画像選択
US9544574B2 (en) Selecting camera pairs for stereoscopic imaging
TWI554103B (zh) 影像擷取裝置及其數位變焦方法
TWI537875B (zh) 影像合成方法與影像處理裝置
US8229172B2 (en) Algorithms for estimating precise and relative object distances in a scene
US9288392B2 (en) Image capturing device capable of blending images and image processing method for blending images thereof
TWI433530B (zh) 具有立體影像攝影引導的攝影系統與方法及自動調整方法
CN103503436B (zh) 图像处理装置、图像处理方法
TWI538512B (zh) 調整對焦位置的方法及電子裝置
US20160301868A1 (en) Automated generation of panning shots
US20060120712A1 (en) Method and apparatus for processing image
TWI640199B (zh) 影像擷取裝置及其攝影構圖的方法
US20130113962A1 (en) Image processing method for producing background blurred image and image capturing device thereof
JP2017505004A (ja) 画像生成方法及びデュアルレンズ装置
CN106385546A (zh) 通过图像处理改善移动电子设备摄像效果的方法和系统
WO2015192547A1 (zh) 一种基于移动终端的三维照片拍摄方法及移动终端
WO2016184131A1 (zh) 基于双摄像头拍摄图像的方法、装置及计算机存储介质
CN112261387B (zh) 用于多摄像头模组的图像融合方法及装置、存储介质、移动终端
WO2017012372A1 (zh) 用于终端的拍照控制方法、装置和终端
CN105637852A (zh) 一种图像处理方法、装置及电子设备
CN109257540B (zh) 多摄镜头组的摄影校正方法及摄影装置
WO2016029380A1 (zh) 一种图像处理方法、计算机存储介质、装置及终端
US7899315B2 (en) Method of automatically adjusting the depth of field

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170208

RJ01 Rejection of invention patent application after publication