CN104333700B - 一种图像虚化方法和图像虚化装置 - Google Patents

一种图像虚化方法和图像虚化装置 Download PDF

Info

Publication number
CN104333700B
CN104333700B CN201410705732.0A CN201410705732A CN104333700B CN 104333700 B CN104333700 B CN 104333700B CN 201410705732 A CN201410705732 A CN 201410705732A CN 104333700 B CN104333700 B CN 104333700B
Authority
CN
China
Prior art keywords
image
pixel
mentioned
virtualization
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410705732.0A
Other languages
English (en)
Other versions
CN104333700A (zh
Inventor
孙剑波
张弓
蓝和
张学勇
韦怡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201410705732.0A priority Critical patent/CN104333700B/zh
Publication of CN104333700A publication Critical patent/CN104333700A/zh
Application granted granted Critical
Publication of CN104333700B publication Critical patent/CN104333700B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)

Abstract

本发明公开了一种图像虚化方法和图像虚化装置,其中,一种图像虚化方法包括:触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像,得到第一图像和第二图像;根据第一图像和第二图像获取第一图像的深度信息,其中,第一图像的深度信息包括第一图像上各个像素点对应的拍摄对象到上述平面的距离;从第一图像上选取一区域作为准焦区域;根据准焦区域分别计算第一图像的各个像素点的偏差值;根据各个像素点的偏差值的绝对值对所述各个像素点进行虚化处理,其中,像素点的虚化程度与像素点的偏差值的绝对值成正相关。本发明提供的技术方案能够实现对图像的自动化虚化。

Description

一种图像虚化方法和图像虚化装置
技术领域
本发明涉及图像处理领域,具体涉及一种图像虚化方法和图像虚化装置。
背景技术
随着科学技术的发展,移动终端(例如手机、平板电脑等)的功能也越来越丰富和强大,目前,大部分移动终端都配置有较高性能的摄像头,以便用户使用移动终端拍照或录像。
虽然移动终端配置有较高性能的摄像头,然而由于成本、体积等方面的原因,目前移动终端上所配备的摄像头与单反相机还存在一定的差距,在摄影效果上无法与单反相机媲美。因此,用户只能通过后期对移动终端拍摄的图像进行处理要改善图像的质量。
在图像处理的过程中,虚化背景是一个经常出现的手法,因其能迅速突出主体而被广大摄影爱好者所熟知和使用。虽然,目前通过图像处理工具能够使图像产生背景虚化效果,然而当用户需要对图像进行虚化处理时,要求用户手动框选图像中需要虚化的区域,之后图像处理工具对用户框选的区域进行相同或渐变尺度的高斯模糊,输出具有背景虚化效果的图像,整个操作过程繁琐,需要浪费用户大量时间。
发明内容
本发明提供一种图像虚化方法和图像虚化装置,用于实现对图像的自动化虚化。
本发明第一方面提供一种图像虚化方法,包括:
触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像,得到由上述第一摄像头采集的第一图像和由上述第二摄像头采集的第二图像,其中,在上述同步采集图像的过程中,上述第一摄像头和上述第二摄像头的焦距相等;
根据上述第一图像和上述第二图像获取上述第一图像的深度信息,其中,上述第一图像的深度信息包括上述第一图像上各个像素点对应的拍摄对象到上述平面的距离;
从上述第一图像上选取一区域作为准焦区域;
根据上述准焦区域分别计算上述第一图像的各个像素点的偏差值,其中,上述像素点的偏差值等于该像素点对应的拍摄对象到上述平面的距离,与上述准焦区域对应的拍摄对象到上述平面的距离两者的差值;
根据上述各个像素点的偏差值的绝对值对上述各个像素点进行虚化处理,其中,像素点的虚化程度与像素点的偏差值的绝对值成正相关。
基于本发明第一方面,在第一种可能的实现方式中,上述根据上述第一图像和上述第二图像获取上述第一图像的深度信息,包括:
根据对应于同一拍摄对象的像素点在上述第一图像和上述第二图像中的坐标差值,以及预设的坐标差值与距离的对应关系,确定该像素点对应的拍摄对象到上述平面的距离。
基于本发明第一方面或者本发明第一方面的第一种可能的实现方式,在第二种可能的实现方式中,上述根据上述各个像素点的偏差值的绝对值对上述各个像素点进行虚化处理,包括:
根据各个像素点的偏差值的绝对值所在的区间,以及预设的区间与滤波矩阵对应关系,分别获取上述各个像素点对应的滤波矩阵;
根据获取的滤波矩阵和第一公式对上述各个像素点进行虚化处理,其中,上述第一公式为:
其中,pout(x,y)表示上述第一图像上坐标点为(x,y)的像素点经虚化处理后的像素值,pin(x,y)表示上述第一图像上坐标点为(x,y)的像素点的原始像素值,M为坐标点为(x,y)的像素点对应的滤波矩阵的行数,N为坐标点为(x,y)的像素点对应的滤波矩阵的列数,ai,j表示位于坐标点为(x,y)的像素点对应的滤波矩阵中第i行第j列的滤波系数,M和N均为奇数。
基于本发明第一方面或者本发明第一方面的第一种可能的实现方式,在第三种可能的实现方式中,上述第一摄像头和上述第二摄像头设置于同一移动终端的同一平面上;
上述触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像具体为:上述移动终端触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像。
基于本发明第一方面的第三种可能的实现方式,在第四种可能的实现方式中,上述从上述第一图像上选取一区域作为准焦区域,包括:
接收输入的准焦区域选择指令;
将上述准焦区域选择指令指示的区域确定为准焦区域。
本发明第二方面提供一种图像虚化装置,包括:
触发单元,用于触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像,得到由上述第一摄像头采集的第一图像和由上述第二摄像头采集的第二图像,其中,在所述同步采集图像的过程中,上述第一摄像头和上述第二摄像头的焦距相等;
获取单元,用于根据上述第一图像和上述第二图像获取上述第一图像的深度信息,其中,上述第一图像的深度信息包括上述第一图像上各个像素点对应的拍摄对象到上述平面的距离;
选取单元,用于从上述第一图像上选取一区域作为准焦区域;
计算单元,用于根据上述选取单元选取的准焦区域,分别计算上述第一图像的各个像素点的偏差值,其中,上述像素点的偏差值等于该像素点对应的拍摄对象到上述平面的距离,与上述准焦区域对应的拍摄对象到上述平面的距离两者的差值;
虚化处理单元,用于根据上述各个像素点的偏差值的绝对值对上述各个像素点进行虚化处理,其中,像素点的虚化程度与像素点的偏差值的绝对值成正相关。
基于本发明第二方面,在第一种可能的实现方式中,上述获取单元具体用于:根据对应于同一拍摄对象的像素点在上述第一图像和上述第二图像中的坐标差值,以及预设的坐标差值与距离的对应关系,确定该像素点对应的拍摄对象到上述平面的距离。
基于本发明第二方面或者本发明第二方面的第一种可能的实现方式,在第二种可能的实现方式中,上述虚化处理单元包括:
子获取单元,用于根据各个像素点的偏差值的绝对值所在的区间,以及预设的区间与滤波矩阵对应关系,获取上述各个像素点对应的滤波矩阵;
子虚化处理单元,用于根据上述子获取单元获取的滤波矩阵和第一公式对上述各个像素点进行虚化处理,其中,上述第一公式为:
其中,pout(x,y)表示上述第一图像上坐标点为(x,y)的像素点经虚化处理后的像素值,pin(x,y)表示上述第一图像上坐标点为(x,y)的像素点的原始像素值,M为坐标点为(x,y)的像素点对应的滤波矩阵的行数,N为坐标点为(x,y)的像素点对应的滤波矩阵的列数,ai,j表示位于坐标点为(x,y)的像素点对应的滤波矩阵中第i行第j列的滤波系数,M和N均为奇数。
基于本发明第二方面或者本发明第二方面的第一种可能的实现方式,在第三种可能的实现方式中,上述图像虚化装置具体为移动终端,上述第一摄像头和上述第二摄像头设置于同一移动终端的同一平面上。
基于本发明第二方面的第三种可能的实现方式,在第四种可能的实现方式中,上述选取单元包括:
接收单元,用于接收输入的准焦区域选择指令,
确定单元,用于将上述准焦区域选择指令指示的区域确定为准焦区域。
由上可见,本发明中使用两个摄像头在同一平面沿同一拍摄方向(即针对同一拍摄场景)同步采集图像,根据两个摄像头同步采集得到的第一图像和第二图像获取第一图像的深度信息,结合第一图像的深度信息和选取的准焦区域计算出第一图像上的各个像素点的偏差值(即第一图像上的各个像素点所对应的拍摄对象与准焦区域所对应的拍摄对象间的距离),并根据第一图像上的各个像素点的偏差值对各个像素点进行虚化处理,且在虚化处理过程中,像素点的虚化程度与像素点的偏差值的绝对值成正相关,一方面,本发明无需用户手动框选图像中需要虚化的区域即可实现对图像的自动化虚化,另一方面,由于本发明结合了图像的深度信息和准焦区域,且在虚化处理过程中,像素点的虚化程度与像素点的偏差值的绝对值成正相关,因此,能够保证准焦区域的虚化程度最弱,而距离准焦区域最远的像素点虚化程度最强,从而凸显准焦区域对应的拍摄对象,虚化效果显著。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明提供的一种图像虚化方法一个实施例流程示意图;
图2为本发明提供的一种图像虚化装置一个实施例结构示意图。
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而非全部实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面对本发明实施例提供的一种图像虚化方法进行描述,请参阅图1,本发明实施例中的图像虚化方法包括:
101、触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像,得到第一图像和第二图像;
其中,上述第一图像由上述第一摄像头采集得到,上述第二图像由上述第二摄像头采集得到,且,在步骤101中,上述第一摄像头和上述第二摄像头的焦距相等。
本发明实施例中,第一摄像头和第二摄像头同步采集图像是指第一摄像头和第二摄像头同时触发拍摄快门或者触发拍摄快门的时间点近似相同(即触发拍摄快门的时间差小到可以忽略的程度)。
可选的,第一摄像头和第二摄像头固定设置于同一平面且拍摄方向一致,则在步骤101中,图像虚化装置无需对第一摄像头和第二摄像头的位置和拍摄方向进行调整。或者,第一摄像头和第二摄像头也可以是可活动的摄像头,则步骤101中,图像虚化装置先通过马达或其它驱动装置控制第一摄像头和第二摄像头移动到同一平面且保持拍摄方向一致,之后再触发第一摄像头和第二摄像头同步采集图像。或者,若第一摄像头和第二摄像头为可活动的摄像头,也可以由用户先调整好第一摄像头和第二摄像头的位置和拍摄方向,使得第一摄像头和第二摄像头处于同一平面且拍摄方向一致,之后控制图像虚化装置触发第一摄像头和第二摄像头同步采集图像。
102、根据上述第一图像和上述第二图像获取上述第一图像的深度信息;
其中,上述第一图像的深度信息包括上述第一图像上各个像素点对应的拍摄对象到上述平面的距离。
本发明实施例中,由于第一图像和第二图像是分别由第一摄像头和第二摄像头在同一平面沿同一拍摄方向采集得到的,因此,第一摄像头和第二摄像头可以模拟为人的左右眼,相应的,第一图像和第二图像可以模拟为人的左右眼分别看到的图像。通过研究发现,当物体离第一摄像头和第二摄像头所在平面(为便于描述,后续第一摄像头和第二摄像头所在平面简称为拍摄平面)越近,物体在第一图像和第二图像中的像素横坐标差越大,因此,本发明实施例可以根据上述第一图像和上述第二图像中的像素点的相位差获取上述第一图像的深度信息。可选的,基于上述研究发现,预设坐标差值与距离的对应关系,例如构建坐标差值与距离的对应关系表或者坐标差值与距离的对应关系曲线,在该坐标差值与距离的对应关系中,坐标差值与距离成负相关(即坐标差值越大,距离越小),图像虚化装置根据对应于同一拍摄对象的像素点在上述第一图像和上述第二图像中的坐标差值(实际为横坐标差值,因为纵坐标差值为0),以及预设的坐标差值与距离的对应关系,确定该像素点对应的拍摄对象到上述拍摄平面的距离。具体的,图像虚化装置可采用已有的特征点匹配算法确定出同一拍摄对象的像素点在上述第一图像和上述第二图像中的位置,此处不再赘述。
103、从上述第一图像上选取一区域作为准焦区域;
本发明实施例中,上述准焦区域可以由多个连续像素点组成,或者,也可以仅由一个像素点组成,此处不作限定。
可选的,图像虚化装置从上述第一图像中选取对焦区域作为上述准焦区域。
可选的,当上述第一图像中包含人物时,图像虚化装置根据人脸识别技术识别出第一图像中的人脸,从上述第一图像中选取该人脸距离摄像头最近的一只眼睛作为准焦区域。
可选的,上述准焦区域也可以由用户指定,图像虚化装置向用户提供准焦区域选择接口,用户通过该接口输入准焦区域选择指令,图像虚化装置接收输入的准焦区域选择指令,将该准焦区域选择指令指示的区域确定为准焦区域。举例说明,假设图像虚化装置包含触摸显示屏,则在步骤103中,图像虚化装置在触摸显示屏上显示第一图像,用户通过点击该第一图像上的某一区域输入准焦区域选择指令,用户所点击的区域即为准焦区域选择指令指示的区域,图像虚化装置将该区域确定为准焦区域;或者,图像虚化装置也可以不包含触摸显示,则在步骤103中,图像虚化装置向用户展示第一图像和光标,用户可通过图像虚化装置提供的实体按键或虚拟按键控制在第一图像上移动该光标,当用户将光标移动到第一图像的某一位置并确定输入准焦区域选择指令时,该光标所在位置即为准焦区域选择指令指示的区域,图像虚化装置将该区域确定为准焦区域。
当然,本发明实施例中的图像虚化装置也可以通过其它方式从上述第一图像上选取一区域作为准焦区域,此处不作限定。
104、根据上述准焦区域分别计算上述第一图像的各个像素点的偏差值;
其中,上述像素点的偏差值等于该像素点对应的拍摄对象到上述拍摄平面的距离,与上述准焦区域对应的拍摄对象到上述拍摄平面的距离两者的差值。
举例说明,假设上述第一图像上的某一像素点A的偏差值为SA,像素点A对应的拍摄对象到上述拍摄平面的距离为HA,与上述准焦区域对应的拍摄对象到上述拍摄平面的距离为H0,则SA=HA-H0
105、根据上述各个像素点的偏差值的绝对值对上述各个像素点进行虚化处理;
其中,像素点的虚化程度与像素点的偏差值的绝对值成正相关。
可选的,图像虚化装置根据上述第一图像中各个像素点的偏差值的绝对值所在的区间,以及预设的区间与滤波矩阵对应关系,获取各个像素点对应的滤波矩阵;根据获取的滤波矩阵和第一公式对上述各个像素点进行虚化处理,其中,上述第一公式为:
其中,pout(x,y)表示上述第一图像上坐标点为(x,y)的像素点经虚化处理后的像素值,pin(x,y)表示上述第一图像上坐标点为(x,y)的像素点的原始像素值,M为坐标点为(x,y)的像素点对应的滤波矩阵的行数,N为坐标点为(x,y)的像素点对应的滤波矩阵的列数,ai,j表示位于坐标点为(x,y)的像素点对应的滤波矩阵中第i行第j列的滤波系数,M和N均为奇数。
在本发明实施例中,对于M和N均相同但滤波系数不同的滤波矩阵,滤波矩阵的中间系数与周边系数的差值越小,该滤波矩阵对像素点的虚化程度更大。例如:滤波矩阵对像素点的虚化效果会比滤波矩阵对像素点的虚化程度要大。
对于M*N不相同的滤波矩阵,M*N越大,滤波矩阵对像素点的虚化程度更大,例如5*5的滤波矩阵比3*3的滤波矩阵对像素点的虚化程度要大。
下面以一具体应用例对步骤105进行说明,假设像素点的偏差值的绝对值为d,滤波矩阵为A,则基于上述滤波矩阵与像素点的虚化程度关系,预设的区间与滤波矩阵对应关系可以如下:
d<10时,A=1;
10<=d<30时,
30<=d<60时,
60<=d<100时,
100<=d<150时,
150<d时,
假设第一图像上的像素点P1的偏差值的绝对值d为20,则图像虚化装置根据像素点P1的偏差值获取像素点P1的滤波矩阵假设像素点P1的坐标点为(10,10),Pin(10,10)为像素点P1的原始像素值,Pout(10,10)为经虚化处理后的像素点P1的像素值,则:
Pout(10,10)=0.0041*Pin(9,9)+0.1215*Pin(10,9)+0.0041*Pin(11,9)+0.1215*Pin(9,10)+0.4974*Pin(10,10)+0.1215*Pin(11,10)+0.0041*Pin(9,11)+0.1215*Pin(10,11)+0.0041*Pin(11,1)
需要说明书的是,本发明实施例中基于上述各个像素点的偏差值的绝对值,也可以采用其它方式对上述各个像素点进行虚化处理,只需在对像素点的虚化过程中,满足像素点的虚化程度与像素点的偏差值的绝对值成正相关即可。
进一步,在步骤105之后,图像虚化装置输出经虚化处理后的图像,例如图像虚化装置将经虚化处理后的图像输出至显示屏幕,向用户展示经虚化处理后的图像。
需要说明的是,本发明实施例中是以对第一摄像头采集的第一图像进行虚化处理为例进行说明,在实际应用中,图像虚化处理装置可以选取像素较高的摄像头作为上述第一摄像头,将像素较低的摄像头作为上述第二摄像头;或者,图像虚化装置也可以随机选择两个摄像头中的一个作为上述第一摄像头,将另一个摄像头作为上述第二摄像头,此处不作限定。可选的,上述第一摄像头和上述第二摄像头为固定焦距且焦距相等的摄像头,或者,上述第一摄像头和/或上述第二摄像头也可以为焦距可调的摄像头,则步骤101中通过手动或自动调整的方式调整上述第一摄像头和上述第二摄像头的焦距,使上述第一摄像头和上述第二摄像头的焦距保持一致。
可选的,本发明实施例中的图像虚化装置集成在移动终端(例如智能手机、平板电脑、笔记本电脑等)中,且,上述第一摄像头和上述第二摄像头设置于该移动终端的同一平面上,可选的,上述第一摄像头和上述第二摄像头之间的距离与人左右眼间的正常距离相同。进一步,移动终端在拍摄应用设置图像虚化开关,用户可自行选择是否开启该图像虚化开关,当该图像虚化开关开启时,图1所示实施例中的流程才会执行,否则,移动终端不执行图1所示实施例中的流程。当然,本发明实施例中的图像虚化装置也可以是能够与配备有双摄像头的设备进行有线或无线通讯的独立装置,此处不作限定。
由上可见,本发明中使用两个摄像头在同一平面沿同一拍摄方向(即针对同一拍摄场景)同步采集图像,根据两个摄像头同步采集得到的第一图像和第二图像获取第一图像的深度信息,结合第一图像的深度信息和选取的准焦区域计算出第一图像上的各个像素点的偏差值(即第一图像上的各个像素点所对应的拍摄对象与准焦区域所对应的拍摄对象间的距离),并根据第一图像上的各个像素点的偏差值对各个像素点进行虚化处理,且在虚化处理过程中,像素点的虚化程度与像素点的偏差值的绝对值成正相关,一方面,本发明无需用户手动框选图像中需要虚化的区域即可实现对图像的自动化虚化,另一方面,由于本发明结合了图像的深度信息和准焦区域,且在虚化处理过程中,像素点的虚化程度与像素点的偏差值的绝对值成正相关,因此,能够保证准焦区域的虚化程度最弱,而距离准焦区域最远的像素点虚化程度最强,从而凸显准焦区域对应的拍摄对象,虚化效果显著。
应当理解,对于前述的方法实施例,为了简便描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其它顺序或者同时进行。
本发明实施例还提供一种图像虚化装置,如图2所示,本发明实施例中的图像虚化装置200,包括:
触发单元201,用于触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像,得到由上述第一摄像头采集的第一图像和由上述第二摄像头采集的第二图像;
获取单元202,用于根据上述第一图像和上述第二图像获取上述第一图像的深度信息,其中,上述第一图像的深度信息包括上述第一图像上各个像素点对应的拍摄对象到上述平面的距离;
选取单元203,用于从上述第一图像上选取一区域作为准焦区域;
计算单元204,用于根据选取单元203选取的准焦区域,分别计算上述第一图像的各个像素点的偏差值,其中,上述像素点的偏差值等于该像素点对应的拍摄对象到上述平面的距离,与上述准焦区域对应的拍摄对象到上述平面的距离两者的差值;
虚化处理单元205,用于根据上述各个像素点的偏差值的绝对值对上述各个像素点进行虚化处理,其中,像素点的虚化程度与像素点的偏差值的绝对值成正相关。
可选的,获取单元202具体用于:根据对应于同一拍摄对象的像素点在上述第一图像和上述第二图像中的坐标差值,以及预设的坐标差值与距离的对应关系,确定该像素点对应的拍摄对象到上述平面的距离。
可选的,虚化处理单元205包括:子获取单元,用于根据各个像素点的偏差值的绝对值所在的区间,以及预设的区间与滤波矩阵对应关系,获取上述各个像素点对应的滤波矩阵;子虚化处理单元,用于根据上述子获取单元获取的滤波矩阵和第一公式对上述各个像素点进行虚化处理,其中,上述第一公式为:
其中,pout(x,y)表示上述第一图像上坐标点为(x,y)的像素点经虚化处理后的像素值,pin(x,y)表示上述第一图像上坐标点为(x,y)的像素点的原始像素值,M为坐标点为(x,y)的像素点对应的滤波矩阵的行数,N为坐标点为(x,y)的像素点对应的滤波矩阵的列数,ai,j表示位于坐标点为(x,y)的像素点对应的滤波矩阵中第i行第j列的滤波系数,M和N均为奇数。
可选的,选取单元203选取单元包括:接收单元,用于接收输入的准焦区域选择指令,确定单元,用于将上述准焦区域选择指令指示的区域确定为准焦区域。
需要说明的是,本发明实施例中是以对第一摄像头采集的第一图像进行虚化处理为例进行说明,在实际应用中,图像虚化处理装置可以选取像素较高的摄像头作为上述第一摄像头,将像素较低的摄像头作为上述第二摄像头;或者,图像虚化装置也可以随机选择两个摄像头中的一个作为上述第一摄像头,将另一个摄像头作为上述第二摄像头,此处不作限定。
可选的,本发明实施例中的图像虚化装置集成在移动终端(例如智能手机、平板电脑、笔记本电脑等)中,且,上述第一摄像头和上述第二摄像头设置于该移动终端的同一平面上。进一步,移动终端在拍摄应用设置图像虚化开关,用户可自行选择是否开启该图像虚化开关,当该图像虚化开关开启时,图像虚化装置才会启动,否则,图像虚化装置不启动。当然,本发明实施例中的图像虚化装置也可以是能够与配备有双摄像头的设备进行有线或无线通讯的独立装置,此处不作限定。
需要说明的是,本发明实施例中的图像虚化装置可以如上述方法实施例中提及的图像虚化装置,可以用于实现上述方法实施例中的全部技术方案,其各个功能模块的功能可以根据上述方法实施例中的方法具体实现,其具体实现过程可参照上述实施例中的相关描述,此处不再赘述。
由上可见,本发明中使用两个摄像头在同一平面沿同一拍摄方向(即针对同一拍摄场景)同步采集图像,根据两个摄像头同步采集得到的第一图像和第二图像获取第一图像的深度信息,结合第一图像的深度信息和选取的准焦区域计算出第一图像上的各个像素点的偏差值(即第一图像上的各个像素点所对应的拍摄对象与准焦区域所对应的拍摄对象间的距离),并根据第一图像上的各个像素点的偏差值对各个像素点进行虚化处理,且在虚化处理过程中,像素点的虚化程度与像素点的偏差值的绝对值成正相关,一方面,本发明无需用户手动框选图像中需要虚化的区域即可实现对图像的自动化虚化,另一方面,由于本发明结合了图像的深度信息和准焦区域,且在虚化处理过程中,像素点的虚化程度与像素点的偏差值的绝对值成正相关,因此,能够保证准焦区域的虚化程度最弱,而距离准焦区域最远的像素点虚化程度最强,从而凸显准焦区域对应的拍摄对象,虚化效果显著。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例上述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定都是本发明所必须的。
以上为对本发明所提供的一种图像虚化方法和图像虚化装置的描述,对于本领域的一般技术人员,依据本发明实施例的思想,在具体实施方式及应用范围上均会有改变之处,综上,本说明书内容不应理解为对本发明的限制。

Claims (8)

1.一种图像虚化方法,其特征在于,包括:
触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像,得到由所述第一摄像头采集的第一图像和由所述第二摄像头采集的第二图像,其中,在所述同步采集图像的过程中,所述第一摄像头和所述第二摄像头的焦距相等;
根据所述第一图像和所述第二图像获取所述第一图像的深度信息,其中,所述第一图像的深度信息包括所述第一图像上各个像素点对应的拍摄对象到所述平面的距离;
从所述第一图像上选取一区域作为准焦区域;
根据所述准焦区域分别计算所述第一图像的各个像素点的偏差值,其中,所述像素点的偏差值等于该像素点对应的拍摄对象到所述平面的距离,与所述准焦区域对应的拍摄对象到所述平面的距离两者的差值;
根据所述各个像素点的偏差值的绝对值对所述各个像素点进行虚化处理,其中,像素点的虚化程度与像素点的偏差值的绝对值成正相关;
所述根据所述各个像素点的偏差值的绝对值对所述各个像素点进行虚化处理,包括:
根据各个像素点的偏差值的绝对值所在的区间,以及预设的区间与滤波矩阵对应关系,分别获取所述各个像素点对应的滤波矩阵;
根据获取的滤波矩阵和第一公式对所述各个像素点进行虚化处理,其中,所述第一公式为:
p o u t ( x , y ) = a 1 , 1 * P i n ( x - M - 1 2 , y - N - 1 2 ) + a 1 , 2 * P i n ( x - M - 3 2 , y - N - 1 2 ) + a i , j * P i n ( x - M - 2 j + 1 2 , y - N - 2 i + 1 2 ) ... ... + a M , N * P i n ( x - M - 2 N + 1 2 , y - N - 2 M + 1 2 ) ;
其中,pout(x,y)表示所述第一图像上坐标点为(x,y)的像素点经虚化处理后的像素值,pin(x,y)表示所述第一图像上坐标点为(x,y)的像素点的原始像素值,M为坐标点为(x,y)的像素点对应的滤波矩阵的行数,N为坐标点为(x,y)的像素点对应的滤波矩阵的列数,ai,j表示位于坐标点为(x,y)的像素点对应的滤波矩阵中第i行第j列的滤波系数,M和N均为奇数。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一图像和所述第二图像获取所述第一图像的深度信息,包括:
根据对应于同一拍摄对象的像素点在所述第一图像和所述第二图像中的坐标差值,以及预设的坐标差值与距离的对应关系,确定该像素点对应的拍摄对象到所述平面的距离。
3.根据权利要求1或2所述的方法,其特征在于,所述第一摄像头和所述第二摄像头设置于同一移动终端的同一平面上;
所述触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像具体为:所述移动终端触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像。
4.根据权利要求3所述的方法,其特征在于,所述从所述第一图像上选取一区域作为准焦区域,包括:
接收输入的准焦区域选择指令;
将所述准焦区域选择指令指示的区域确定为准焦区域。
5.一种图像虚化装置,其特征在于,包括:
触发单元,用于触发第一摄像头和第二摄像头在同一平面上沿同一拍摄方向同步采集图像,得到由所述第一摄像头采集的第一图像和由所述第二摄像头采集的第二图像,其中,在所述同步采集图像的过程中,所述第一摄像头和所述第二摄像头的焦距相等;
获取单元,用于根据所述第一图像和所述第二图像获取所述第一图像的深度信息,其中,所述第一图像的深度信息包括所述第一图像上各个像素点对应的拍摄对象到所述平面的距离;
选取单元,用于从所述第一图像上选取一区域作为准焦区域;
计算单元,用于根据所述选取单元选取的准焦区域,分别计算所述第一图像的各个像素点的偏差值,其中,所述像素点的偏差值等于该像素点对应的拍摄对象到所述平面的距离,与所述准焦区域对应的拍摄对象到所述平面的距离两者的差值;
虚化处理单元,用于根据所述各个像素点的偏差值的绝对值对所述各个像素点进行虚化处理,其中,像素点的虚化程度与像素点的偏差值的绝对值成正相关;
所述虚化处理单元包括:
子获取单元,用于根据各个像素点的偏差值的绝对值所在的区间,以及预设的区间与滤波矩阵对应关系,获取所述各个像素点对应的滤波矩阵;
子虚化处理单元,用于根据所述子获取单元获取的滤波矩阵和第一公式对所述各个像素点进行虚化处理,其中,所述第一公式为:
p o u t ( x , y ) = a 1 , 1 * P i n ( x - M - 1 2 , y - N - 1 2 ) + a 1 , 2 * P i n ( x - M - 3 2 , y - N - 1 2 ) + a i , j * P i n ( x - M - 2 j + 1 2 , y - N - 2 i + 1 2 ) ... ... + a M , N * P i n ( x - M - 2 N + 1 2 , y - N - 2 M + 1 2 ) ;
其中,pout(x,y)表示所述第一图像上坐标点为(x,y)的像素点经虚化处理后的像素值,pin(x,y)表示所述第一图像上坐标点为(x,y)的像素点的原始像素值,M为坐标点为(x,y)的像素点对应的滤波矩阵的行数,N为坐标点为(x,y)的像素点对应的滤波矩阵的列数,ai,j表示位于坐标点为(x,y)的像素点对应的滤波矩阵中第i行第j列的滤波系数,M和N均为奇数。
6.根据权利要求5所述的图像虚化装置,其特征在于,所述获取单元具体用于:根据对应于同一拍摄对象的像素点在所述第一图像和所述第二图像中的坐标差值,以及预设的坐标差值与距离的对应关系,确定该像素点对应的拍摄对象到所述平面的距离。
7.根据权利要求5或6所述的图像虚化装置,其特征在于,所述图像虚化装置具体为移动终端,所述第一摄像头和所述第二摄像头设置于同一移动终端的同一平面上。
8.根据权利要求7所述的图像虚化装置,其特征在于,
所述选取单元包括:
接收单元,用于接收输入的准焦区域选择指令,
确定单元,用于将所述准焦区域选择指令指示的区域确定为准焦区域。
CN201410705732.0A 2014-11-28 2014-11-28 一种图像虚化方法和图像虚化装置 Active CN104333700B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410705732.0A CN104333700B (zh) 2014-11-28 2014-11-28 一种图像虚化方法和图像虚化装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410705732.0A CN104333700B (zh) 2014-11-28 2014-11-28 一种图像虚化方法和图像虚化装置

Publications (2)

Publication Number Publication Date
CN104333700A CN104333700A (zh) 2015-02-04
CN104333700B true CN104333700B (zh) 2017-02-22

Family

ID=52408342

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410705732.0A Active CN104333700B (zh) 2014-11-28 2014-11-28 一种图像虚化方法和图像虚化装置

Country Status (1)

Country Link
CN (1) CN104333700B (zh)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104780313A (zh) * 2015-03-26 2015-07-15 广东欧珀移动通信有限公司 一种图像处理的方法及移动终端
CN105578026B (zh) * 2015-07-10 2017-11-17 宇龙计算机通信科技(深圳)有限公司 一种拍摄方法及用户终端
CN105100615B (zh) * 2015-07-24 2019-02-26 青岛海信移动通信技术股份有限公司 一种图像的预览方法、装置及终端
CN105141858B (zh) * 2015-08-13 2018-10-12 上海斐讯数据通信技术有限公司 照片背景虚化系统及其方法
CN105513105B (zh) * 2015-12-07 2018-05-29 天津大学 基于显著图的图像背景虚化方法
CN105744167B (zh) * 2016-03-28 2019-04-02 努比亚技术有限公司 图像拍摄方法、装置及移动终端
CN105898145A (zh) * 2016-05-03 2016-08-24 深圳市金立通信设备有限公司 一种拍照方法及终端
CN105979165B (zh) * 2016-06-02 2019-02-05 Oppo广东移动通信有限公司 虚化照片生成方法、装置和移动终端
CN106412421A (zh) * 2016-08-30 2017-02-15 成都丘钛微电子科技有限公司 一种快速生成大尺寸重对焦图像的系统与方法
CN106357980A (zh) * 2016-10-19 2017-01-25 广东欧珀移动通信有限公司 图像虚化处理方法、装置和移动终端
CN106454118A (zh) * 2016-11-18 2017-02-22 上海传英信息技术有限公司 照片虚化方法和移动终端
CN106651822A (zh) * 2016-12-20 2017-05-10 宇龙计算机通信科技(深圳)有限公司 图片复原方法及装置
WO2018161323A1 (zh) * 2017-03-09 2018-09-13 广东欧珀移动通信有限公司 基于深度的控制方法、控制装置及电子装置
CN106993112B (zh) * 2017-03-09 2020-01-10 Oppo广东移动通信有限公司 基于景深的背景虚化方法及装置和电子装置
CN106981044B (zh) * 2017-03-20 2020-06-23 成都通甲优博科技有限责任公司 一种图像虚化方法及系统
CN106960413A (zh) * 2017-03-24 2017-07-18 深圳市金立通信设备有限公司 一种图像虚化的方法及终端
CN107197138A (zh) * 2017-03-31 2017-09-22 努比亚技术有限公司 一种拍摄装置、方法和移动终端
EP3488603B1 (en) * 2017-05-24 2021-07-28 SZ DJI Technology Co., Ltd. Methods and systems for processing an image
CN107222676B (zh) 2017-05-26 2020-06-02 Tcl移动通信科技(宁波)有限公司 一种虚化照片的生成方法、存储设备及移动终端
CN107038681B (zh) 2017-05-31 2020-01-10 Oppo广东移动通信有限公司 图像虚化方法、装置、计算机可读存储介质和计算机设备
CN107277351A (zh) * 2017-06-30 2017-10-20 维沃移动通信有限公司 一种图像数据的处理方法和移动终端
CN107277360B (zh) * 2017-07-17 2020-07-14 惠州Tcl移动通信有限公司 一种双摄像头切换进行变焦的方法、移动终端及存储装置
CN107704798B (zh) * 2017-08-09 2020-06-12 Oppo广东移动通信有限公司 图像虚化方法、装置、计算机可读存储介质和计算机设备
CN107590828B (zh) * 2017-08-09 2020-01-10 Oppo广东移动通信有限公司 拍摄图像的虚化处理方法和装置
CN107454328B (zh) * 2017-08-24 2019-08-23 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
CN107707819B (zh) * 2017-09-29 2021-04-13 北京小米移动软件有限公司 图像拍摄方法、装置及存储介质
CN107948500A (zh) * 2017-11-01 2018-04-20 广东欧珀移动通信有限公司 图像处理方法和装置
CN108024056B (zh) 2017-11-30 2019-10-29 Oppo广东移动通信有限公司 基于双摄像头的成像方法和装置
CN107948516A (zh) * 2017-11-30 2018-04-20 维沃移动通信有限公司 一种图像处理方法、装置及移动终端
CN107948520A (zh) * 2017-11-30 2018-04-20 广东欧珀移动通信有限公司 图像处理方法和装置
CN107959778B (zh) 2017-11-30 2019-08-20 Oppo广东移动通信有限公司 基于双摄像头的成像方法和装置
CN107835372A (zh) * 2017-11-30 2018-03-23 广东欧珀移动通信有限公司 基于双摄像头的成像方法、装置、移动终端和存储介质
CN108008895A (zh) * 2017-12-18 2018-05-08 信利光电股份有限公司 一种背景虚化方法、装置、设备及计算机可读存储介质
CN108234867B (zh) * 2017-12-21 2020-06-30 维沃移动通信有限公司 图像处理方法及移动终端
CN108108008A (zh) * 2017-12-29 2018-06-01 深圳市金立通信设备有限公司 摄像头虚化控制方法、终端及计算机可读存储介质
CN108564528A (zh) * 2018-04-17 2018-09-21 福州大学 一种基于显著性检测的肖像照片自动背景虚化方法
CN108848367B (zh) * 2018-07-26 2020-08-07 宁波视睿迪光电有限公司 一种图像处理的方法、装置及移动终端
CN110175950A (zh) * 2018-10-24 2019-08-27 广东小天才科技有限公司 一种基于可穿戴设备的隐私保护方法及可穿戴设备
CN109151329A (zh) * 2018-11-22 2019-01-04 Oppo广东移动通信有限公司 拍照方法、装置、终端及计算机可读存储介质
CN109862262A (zh) * 2019-01-02 2019-06-07 上海闻泰电子科技有限公司 图像虚化方法、装置、终端及存储介质
CN109889724B (zh) * 2019-01-30 2020-11-06 北京达佳互联信息技术有限公司 图像虚化方法、装置、电子设备及可读存储介质
CN110830715B (zh) * 2019-10-31 2021-06-25 维沃移动通信(杭州)有限公司 一种拍照方法及电子设备
CN112313700A (zh) * 2019-11-26 2021-02-02 深圳市大疆创新科技有限公司 图像处理方法和装置
US11122198B2 (en) 2020-01-07 2021-09-14 International Business Machines Corporation Adjusting image capture parameters via machine learning
CN113766090B (zh) * 2020-06-02 2023-08-01 武汉Tcl集团工业研究院有限公司 一种图像处理方法、终端以及存储介质
CN113810624A (zh) * 2021-09-18 2021-12-17 维沃移动通信有限公司 视频生成的方法、装置和电子设备
CN113570501B (zh) * 2021-09-28 2021-12-28 泰山信息科技有限公司 一种图片虚化方法、装置及设备
CN115134532A (zh) * 2022-07-26 2022-09-30 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101472064A (zh) * 2007-12-25 2009-07-01 鸿富锦精密工业(深圳)有限公司 拍摄系统及其景深处理方法
CN101764925B (zh) * 2008-12-25 2011-07-13 华晶科技股份有限公司 数字图像的浅景深模拟方法
JP2013005091A (ja) * 2011-06-14 2013-01-07 Pentax Ricoh Imaging Co Ltd 撮像装置および距離情報取得方法
JP2013012820A (ja) * 2011-06-28 2013-01-17 Sony Corp 画像処理装置、および、画像処理装置の制御方法ならびに当該方法をコンピュータに実行させるプログラム
CN103945210B (zh) * 2014-05-09 2015-08-05 长江水利委员会长江科学院 一种实现浅景深效果的多摄像头拍摄方法

Also Published As

Publication number Publication date
CN104333700A (zh) 2015-02-04

Similar Documents

Publication Publication Date Title
CN104333700B (zh) 一种图像虚化方法和图像虚化装置
CN105100615B (zh) 一种图像的预览方法、装置及终端
CN104618640B (zh) 一种拍照方法及装置
CN104410783B (zh) 一种对焦方法及终端
CN103685905B (zh) 一种拍照方法及电子设备
CN103795934B (zh) 一种图像处理方法及电子设备
CN109118459A (zh) 图像显著性物体检测方法和装置
US20160301861A1 (en) Imaging device and shooting method
CN109379537A (zh) 滑动变焦效果实现方法、装置、电子设备及计算机可读存储介质
CN107635093A (zh) 一种图像处理方法、移动终端及计算机可读存储介质
CN109407936A (zh) 截图方法及相关装置
CN106713768A (zh) 人景图像合成方法、系统和计算机设备
CN108174082B (zh) 一种图像拍摄的方法和移动终端
CN107483834A (zh) 一种图像处理方法、连拍方法及装置和相关介质产品
CN107087102A (zh) 信息处理方法及电子设备
CN110177210B (zh) 拍照方法及相关装置
JP5687803B2 (ja) 画像処理装置及び方法並びに撮像装置
CN109993824A (zh) 图像处理方法、智能终端及具有存储功能的装置
CN106572295A (zh) 一种图片处理方法及装置
CN106572308A (zh) 局部动态图合成方法及系统
CN105635568A (zh) 一种移动终端中的图像处理方法和移动终端
CN106791456A (zh) 一种拍照方法及电子设备
CN107222737A (zh) 一种深度图像数据的处理方法及移动终端
CN103116631A (zh) 一种在手持电子设备上快捷查看批量图片的系统和方法
CN107886020A (zh) 一种扫码的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP03 Change of name, title or address

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Patentee after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS CORP., Ltd.

Address before: Changan town in Guangdong province Dongguan 523841 usha Beach Road No. 18

Patentee before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS CORP., Ltd.

CP03 Change of name, title or address