CN109727192B

CN109727192B - 一种图像处理的方法及装置

Info

Publication number: CN109727192B
Application number: CN201811652785.5A
Authority: CN
Inventors: 刘平; 聂旎
Original assignee: Beijing Kuangshi Technology Co Ltd
Current assignee: Beijing Kuangshi Technology Co Ltd
Priority date: 2018-12-28
Filing date: 2018-12-28
Publication date: 2023-06-27
Anticipated expiration: 2038-12-28
Also published as: CN109727192A

Abstract

本发明涉及图像处理技术领域，尤其涉及一种图像处理的方法及装置，该方法包括：基于原始图的深度图以及焦点位置，获得焦内主体图；对焦内主体图进行第一次引导滤波，获得焦内主体图的第一灰度图；对第一灰度图进行腐蚀处理，获得焦内主体图的第二灰度图；对第二灰度图进行第二次引导滤波，获得焦内主体图的第三灰度图；将第三灰度图的灰度值和第一灰度图的灰度值分别与各自设定的阈值进行比较，获得比较结果，基于比较结果，对焦内主体图的第三灰度图的灰度值进行调整，基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图，进而能够使得虚化效果的图中主体图像与背景图像之间的边界分割准确性，提高图片的虚化效果。

Description

一种图像处理的方法及装置

技术领域

本发明涉及图像处理技术领域，尤其涉及一种图像处理的方法及装置。

背景技术

现有通过手机等终端设备拍摄的照片具有背景虚化的效果，具体是图片中位于焦点区域的图像呈现清晰，其他区域的图像呈虚化，即焦内清晰焦外虚化，为用户呈现单反相机拍摄呈现的效果。

但是，由于对于焦点区域图像的分割不够准确，容易造成焦点处图像边外泄，或者焦点位置图像边缘模糊，进而造成焦内虚化焦外清晰，影响虚化效果。

因此，如何提高背景虚化效果的图像中主体图像与背景图像边缘分割的准确度是目前亟待解决的技术问题。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的图像处理的方法及装置。

第一方面，本发明实施例一种图像处理的方法，包括：

基于原始图的深度图以及焦点位置，获得焦内主体图；

对所述焦内主体图进行第一次引导滤波，获得所述焦内主体图的第一灰度图；

对所述第一灰度图进行腐蚀处理，获得所述焦内主体图的第二灰度图；

对所述第二灰度图进行第二次引导滤波，获得所述焦内主体图的第三灰度图；

将所述第三灰度图的灰度值和第一灰度图的灰度值分别与各自设定的阈值进行比较，获得比较结果；

基于所述比较结果，对所述焦内主体图的第三灰度图的灰度值进行调整；

基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图。

优选地，所述基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图，具体包括：

获得所述原始图的模糊半径图；

将所述调整后的第三灰度图与所述模糊半径图融合，获得虚化效果图。

优选地，所述基于所述比较结果，对所述焦内主体图的第三灰度图的灰度值进行调整，具体包括：

在所述第一灰度图的灰度值大于第一阈值，且所述第三灰度图的灰度值大于或等于第二阈值时，将所述第三灰度图的灰度值进行放大调整；

在所述第一灰度图的灰度值大于第三阈值且小于或等于所述第一阈值，且所述第三灰度图的灰度值小于所述第二阈值时，将所述第三灰度图的灰度值进行缩小调整；

在所述第一灰度图的灰度值大于所述第一阈值，且所述第三灰度图的灰度值小于所述第二阈值时，将所述第三灰度图的灰度值进行缩小调整；

其中，所述第三阈值小于所述第一阈值，所述第二阈值大于所述第三阈值且小于所述第一阈值。

优选地，对所述焦内主体图的第三灰度图的灰度值进行调整，具体包括：

将所述焦内主体图的第三灰度图的灰度值乘以调整系数，所述调整系数为所述焦内主体图的第三灰度图的灰度值与所述第二阈值的比值的三次方。

优选地，在所述基于原始图的深度图以及焦点位置，获得焦内主体图之前，还包括：

获得所述原始图的深度图；

基于所述原始图的深度图，获得引导图。

优选地，所述对所述焦内主体图进行第一次引导滤波，获得所述焦内主体图的第一灰度图，具体包括：

采用所述引导图对所述焦内主体图进行第一次引导滤波，获得所述焦内主体图的第一灰度图。

优选地，所述基于原始图的深度图以及焦点位置，获得焦内主体图，具体包括：

基于所述深度图以及焦点位置，获得所述原始图的模糊半径图；

对所述模糊半径图进行阈值分割，获得所述焦内主体图。

第二方面，本发明还提供一种图像处理的装置，包括：

焦内主体图获得模块，用于基于原始图的深度图以及焦点位置，获得焦内主体图；

第一灰度图获得模块，用于对所述焦内主体图进行第一次引导滤波，获得所述焦内主体图的第一灰度图；

第二灰度图获得模块，用于对所述第一灰度图进行腐蚀处理，获得所述焦内主体图的第二灰度图；

第三灰度图获得模块，用于对所述第二灰度图进行第二次引导滤波，获得所述焦内主体图的第三灰度图；

比较模块，用于将所述第三灰度图的灰度值和第一灰度图的灰度值分别与各自设定的预设阈值进行比较，获得比较结果，

调整模块，用于基于所述比较结果，对所述焦内主体图的第三灰度图的灰度值进行调整；

处理模块，用于基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图。

第三方面，本发明还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述的方法步骤。

第四方面，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现上述的方法步骤。

本发明实施例中的一个或多个技术方案，至少具有如下技术效果或优点：

本发明提供的一种图像处理的方法，包括根据原始图的深度图，获得焦内主体图，然后对该焦内主体图进行第一次引导滤波，获得该焦内主体图的第一灰度图，对该第一灰度图进行腐蚀处理，获得该焦内主体图的第二灰度图，对该第二灰度图进行第二次引导滤波，获得该焦内主体图的第三灰度图，将该第三灰度图的灰度值与第一灰度图的灰度值分别与各自设定的阈值进行比较，获得比较结果，基于该比较结果，对该焦内主体图的第三灰度图的灰度值进行调整，基于该调整后的第三灰度值对原始图进行虚化处理，获得虚化效果图，因而可以解决现有技术中在获得的虚化效果图中主体图像与背景图像边缘分割准确性不高的技术问题，进而能够使得虚化效果图中主体图像与背景图像之间的边界更加准确、清晰，提高图片的虚化效果。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考图形表示相同的部件。在附图中：

图1为一种可能的终端系统示意图；

图2示出了本发明实施例中图像处理的方法的步骤流程示意图；

图3示出了本发明实施例中实现对第三灰度图的灰度值进行调整的判断流程示意图；

图4示出了本发明实施例中图像处理的装置的示意图；

图5示出了现有技术获得的图像的效果图；

图6示出了采用本方案之后得到相较于图5的效果图。

具体实施方式

本发明实施例提供了一种图像处理的方法和装置，用于获得效果更佳的背景虚化效果图像。

为了解决上述技术问题，本发明提供的技术方案思路如下：

在本发明实施例的技术方案中，首先根据原始获得的图像，获得焦内主体图，对该焦内主体图进行一次引导滤波之后，获得第一灰度图，对该第一灰度图进行腐蚀处理之后，获得第二灰度图，对该第二灰度图进行二次引导滤波之后，获得第三灰度图，将该第三灰度图上的任意一个位置的灰度值以及第一灰度图上对应位置的灰度值分别与各自的阈值进行比较，获得比较结果，基于该比较结果，对第三灰度图的灰度值进行调整，基于该调整后的第三灰度图对原始图进行虚化处理，获得虚化效果图，经过上述处理之后，获得如图6所示的消除了边界毛刺的图像，该图6相较于采用现有技术获得的如图5所示的效果图，边界更加准确和清晰，进而解决了现有技术中背景虚化的图像中存在主体外泄、主体内糊，影响用户拍摄体验的技术问题，进而使得主体与背景之间的界限更加准确、清晰，获得效果更佳的背景虚化效果图。

下面通过附图以及具体实施例对本发明技术方案做详细的说明，应当理解本申请实施例以及实施例中的具体特征是对本申请技术方案的详细的说明，而不是对本申请技术方案的限定，在不冲突的情况下，本申请实施例以及实施例中的技术特征可以相互组合。

本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

为方便对本发明实施例中的技术方案进行介绍，首先对应用本发明实施例中图像处理的方法的终端系统进行介绍。请参考图1，为一种可能的终端系统示意图。在图1中，终端系统100为包括触摸式输入装置101的系统。然而，应当理解，该系统还可包括一个或多个其他物理用户接口设备，诸如物理键盘、鼠标和/或操纵杆。终端系统100的运行平台可适于运行一种或多种操作系统，例如Android(安卓)操作系统，Windows(视窗)操作系统，苹果IOS操作系统，BlackBerry(黑莓)操作系统，谷歌Chrome操作系统等通用型操作系统。然而，在其它实施例中，终端系统100也可以运行专用的操作系统而非通用操作系统。

在某些实施例中，终端系统100同时可支持运行一种或多种应用程序，包括但不限于以下应用程序中的一个或多个应用程序：磁盘管理应用程序、安全加密应用程序、权限管理应用程序、系统设置应用程序、文字处理应用程序、演示幻灯片应用程序、电子表格应用程序、数据库应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、照片管理应用程序、数字相机应用程序、数字视频相机应用程序、web浏览应用程序、数字音乐播放器应用程序和数字视频播放器应用程序等等。

在终端系统上运行的操作系统和各种应用程序可使用触摸式输入装置101作为用户的物理输入界面装置。触摸式输入装置101具有一触摸表面作为用户界面。可选的，触摸式输入装置101的触摸表面为一显示屏幕102表面，触摸式输入装置101和显示屏幕102共同形成了触敏显示屏120，然而在另一些实施例中，触摸式输入装置101具有一独立的，不与其他设备模块共用的触摸表面。触敏显示屏还进一步包括用于检测触摸式输入装置101上是否发生接触的一个或多个接触传感器106。

触敏显示屏120可选地使用LCD(液晶显示屏，Liquid Crystal Display)技术、LPD(发光聚合物显示器，Laser-powered Phosphor Display)技术或LED(发光二极管)技术，或其它任何可以实现图像显示的技术。触敏显示屏120进一步可使用现在已知或以后开发的多种触摸感测技术的任何一种来检测接触以及接触的任何移动或阻断，例如电容感测技术或电阻感测技术。在一些实施例中，触敏显示屏120可同时检测单个接触点或多个接触点及其移动变化状况。

除触摸式输入装置101与可选的显示屏幕102之外，终端系统100还可包括存储器103(其任选地包括一个或多个计算机可读存储介质)、存储器控制器104以及一个或多个处理器(Processor)105，以上组件可通过一个或多个信号总线107进行通信。

存储器103可包括缓存(Cache)、高速随机存取存储器(RAM)，例如常见的双倍数据率同步动态随机存取内存(DDR SDRAM)，并且还可包括非易失性存储器(NVRAM)，诸如一个或多个只读存储器(ROM)、磁盘存储设备、闪存(Flash)存储器设备、或其他非易失性固态存储器设备例如光盘(CD-ROM，DVD-ROM)，软盘或数据磁带等。存储器103可用于存储前述操作系统和应用程序软件，以及在系统工作过程中产生和接收的各种类型数据。存储控制器104可控制系统100的其他部件访问存储器103。

处理器105用于运行或执行被存储在内部存储器103中的操作系统，各种软件程序，以及自身的指令集，并用于处理来自于触摸式输入装置101或自其它外部输入途径接收到的数据和指令，以实现系统100的各种功能。处理器105可以包括但不限于中央处理器(CPU)、通用图像处理器(GPU)、微处理器(MCU)、数字信号处理器(DSP)、现场可编程逻辑门阵列(FPGA)，应用专用集成电路(ASIC)中的一种或多种。在一些实施例中，处理器105和存储器控制器104可在单个芯片上实现。在一些其他实施方案中，它们可分别在彼此独立的芯片上实现。

在图1中，信号总线107被配置为将终端系统100的各个组件连接进行通信。应该理解的是，图1所示的信号总线107的配置和连接方式是示例性的而非限制性的。视具体的应用环境和硬件配置要求，在其它实施例中，信号总线107可以采用其它不同但为本领域技术人员惯用的连接方式以及其常规组合或变化，以实现各个组件之间所需要的信号连接。

进一步的，在某些实施例中，终端系统100还可包含外围设备I/O接口111、RF电路112、音频电路113、扬声器114、麦克风115、摄像模块116。设备100还可包括一个或多个不同种类的传感器模块118。

RF(射频)电路112用于接收和发送射频信号以实现同其他通信设备进行通信。RF电路112可包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路112任选地通过无线通信来与网络以及其他设备进行通信，该网络为诸如互联网(也被称为万维网(WWW))、内联网和/或无线网(诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。RF电路112还可包括用于检测近场通信(NFC)场的电路。无线通信可选用一种或多种通信标准、协议和技术，包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、蓝牙低功耗、无线保真(Wi-Fi)(例如，IEEE802.11a、IEEE 802.11b、IEEE 802.11g、IEEE 802.11n和/或IEEE 802.11ac)、互联网协议语音(VoIP)、Wi-MAX、电子邮件协议(例如，互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如，可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS))、和/或短消息服务(SMS)、或者包括在本申请提交日期时还未开发出的通信协议的任何其他适当的通信协议。

音频电路113、扬声器114和麦克风115提供用户与终端系统100之间的音频接口。音频电路113从外部I/O端口111接收音频数据，将音频数据转换为电信号，并将电信号传输到扬声器114。扬声器114将电信号转换为人类可听的声波。音频电路113还接收由麦克风115根据声波转换的电信号。音频电路113可进一步将电信号转换为音频数据，并将音频数据传输到外部I/O端口111以发送给外部设备处理。音频数据可在处理器105与存储控制器104的控制下，被传输至存储器103和/或RF电路112。在一些实施方案中，音频电路113还可连接到耳麦接口。

摄像模块116用于根据来自处理器105的指令，进行静态图像和视频拍摄。摄像模块116可具有镜片装置1161和影像传感器1162，能够由镜头装置1161接收来自外界的光信号，并由影像传感器1162，例如金属-氧化物互补型光电晶体管(CMOS)传感器或电荷耦合器件(CCD)传感器，将光信号转换为电信号。摄像模块116可进一步具有影像处理器(ISP)1163，用于将前述电信号进行处理校正，并转换成特定的图像格式文件，例如JPEG(联合图像专家小组)图像文件，TIFF(标签图像文件格式)图像文件等等。图像文件可根据处理器105和存储控制器104的指令，被送至存储器103进行存储，或送至RF电路112发送给外部设备。

外部I/O端口111为终端系统100同其它外部设备或系统表面物理输入模块提供接口。表面物理输入模块可以为按键，键盘，转盘等等，例如音量按键，电源按键，返回按键和摄像按键。外部I/O端口111所提供的接口还可包括通用串行总线(USB)接口(可包括USB、Mini-USB、Micro-USB、USB Type-C等等)、雷电(Thunderbolt)接口、耳麦接口、视频传输接口(例如高清晰度多媒体HDMI接口，移动高清连接MHL接口)、外部存储接口(例如外置存储卡SD卡接口)，用户身份模块卡(SIM卡)接口等等。

传感器模块118可具有一个或多个传感器或传感器阵列，包括但不限于：1、位置传感器，例如全球卫星定位系统(GPS)传感器，北斗卫星定位传感器或格罗洛斯(GLONASS)卫星定位系统传感器，用于检测设备当前地理位置；2、加速度传感器，重力传感器，陀螺仪，用于检测设备运动状态并辅助定位；3、光线传感器，用于检测外部环境光；4、距离传感器，用于检测外部物体同系统的距离；5、压力传感器，用于检测系统接触的压力情况；6、温度与湿度传感器，用于检测环境温度和湿度。传感器模块118还可以视应用需要，添加任何其他种类和数量的传感器或传感器阵列。

在本发明一些实施例中，可由处理器105通过指令调用终端系统100的各个组件，执行本发明的图像处理方法。处理器105执行本发明的图像处理方法所需要的程序由存储器103进行存储。

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

实施例一

本发明实施例一提供了一种图像处理的方法，如图2所示，包括：S201，基于原始图的深度图以及焦点位置，获得焦内主体图；S202，对焦内主体图进行第一次引导滤波，获得焦内主体图的第一灰度图；S203，对第一灰度图进行腐蚀处理，获得焦内主体图的第二灰度图；S204，对第二灰度图进行第二次引导滤波，获得焦内主体图的第三灰度图；S205，将第三灰度图的灰度值和第一灰度图的灰度值分别与各自设定的阈值进行比较，获得比较结果；S206，基于比较结果，对焦内主体图的第三灰度图的灰度值进行调整；S207，基于调整后的第三灰度图对该原始图进行虚化处理，获得虚化效果图。

具体地，在S201之前，即在基于该原始图的深度图以及焦点位置，获得焦内主体图之前，还包括：获得所述原始图的深度图；基于该原始图的深度图，获得引导图。

首先是基于原始图获得其深度图。在基于原始图获得其深度图的过程中，首先基于双摄像头获得主摄图和副摄图，或者是一个摄像头分别从两个位置获得两幅图，一幅图为主摄图，另一幅图为副摄图，其中，副摄图的场景与主摄图的场景一致，副摄图相对于主摄图有一定的视差。然后，将主摄图和副摄图中的特征点进行立体匹配。基于立体匹配的结果，计算出每个像素点距离相机的距离，从而获得深度图，该深度图反映图像中的每个像素点对应的物体的点到相机的距离。

或者，在基于原始图获得其深度图的过程中，将主摄图和副摄图分别转换为灰度图，将这两幅图的灰度图经过立体匹配，从而获得一幅深度图。由于采用先获得灰度图，然后再由该灰度图获得深度图，从该灰度图上提取特征，来进行立体匹配，可以节约时间，加快匹配速度。

然后，基于该深度图，获得引导图。由该深度图获得引导图的过程中，该引导图如果是高斯模糊图，即对该深度图进行高斯模糊处理进而获得的引导图。高斯模糊图相对于原始图来说，去掉了噪声。由于该引导图与深度图的差异不大，引导图也可以是该深度图本身。

接着，执行S201，基于该原始图的深度图以及焦点位置，获得焦内主体图。

具体地，首先基于该深度图以及焦点位置，获得原始图的模糊半径图；然后，对该模糊半径图进行阈值分割，获得焦内主体图。

在具体的实施方式中，根据对焦点位置从深度图中找到对焦位置处的灰度值，然后，将该深度图上每个像素点的灰度值与该对焦点的灰度值作差，并取差值的绝对值，从而获得每个像素点的模糊半径。所有像素点的模糊半径就构成了原始图的模糊半径图。当该模糊半径在景深内时，该像素点被看作是主体，将该主体保持清晰，当该模糊半径不在景深范围，该像素点被看作是背景或前景，将背景或前景模糊。模糊半径的阈值即为该景深范围，而阈值的大小至少与光圈大小有关。

对该模糊半径图进行阈值分割，将小于等于阈值的像素点分割为主体，大于阈值的像素点分割为背景或前景。在具体实现过程中，对该模糊半径图中大于等于模糊半径的像素点取作X1(例如0)，小于模糊半径的像素点取值为X2(例如255)，X1和X2为不相等的整数，从而获得二值化的焦内的主体图。

接着，在S202中，对该焦内主体图进行第一次引导滤波，获得该焦内主体图的第一灰度图。

具体地，采用上述获得的引导图对该焦内主体图进行第一次引导滤波，获得该焦内主体图的第一灰度图。

该引导滤波的作用是降噪、细节平滑、HDR压缩、抠图、去雾等等，是保持边缘的滤波操作。

具体的操作过程中，基于模糊半径范围内的每个像素点的灰度值根据权重取平均，从而获得每个像素点的新的灰度值，进而获得第一灰度图。

然后，在S203中，对第一灰度图进行腐蚀处理，获得焦内主体图的第二灰度图。

该腐蚀处理是一种消除边界点，使边界向内部收缩的过程，可用来消除小且无意义的目标物。

接着，在S204中，对该第二灰度图进行第二次引导滤波，获得该焦内主体图的第三灰度图。

同第一次引导滤波的处理过程，在此就不再详细赘述了。

然后，执行S205和S206，将第三灰度图和灰度值和第一灰度图的灰度值分别与各自设定的阈值进行比较，获得比较结果；基于该比较结果，对该焦内主体图的第三灰度图的灰度值进行调整。

具体地，在第一灰度图的灰度值大于第一阈值，且第三灰度图的灰度值大于或等于第二阈值时，将第三灰度图的灰度值进行放大调整。

在第一灰度图的灰度值大于第三阈值且小于或等于第一阈值，且第三灰度图的灰度值小于第二阈值时，将第三灰度图的灰度值进行缩小调整。

在第一灰度图的灰度值大于第一阈值，且第三灰度图的灰度值小于第二阈值时，将该第三灰度图的灰度值进行缩小调整。

其中，第三阈值小于第一阈值，该第二阈值大于第三阈值且小于第一阈值。

在一些实施方式中，以th1表示第一阈值，th2表示第二阈值、th3表示第三阈值，alpha表示第一灰度图的像素点的灰度值，G₀表示第三灰度图中的像素点的灰度值。具体如图3所示。

将alpha作为第一灰度图中的像素点的灰度值，G₀作为第三灰度图中与该第一灰度图对应的像素点的灰度值。首先，执行S301，判断alpha是否大于th1，在alpha>th1时，执行S302，判断G₀是否大于或等于th2，在G₀>＝th2时，执行S303，将第三灰度图的灰度值进行放大调整。在G₀<th2时，执行S306，将第三灰度图的灰度值进行缩小调整。

在alpha<＝th1时，执行S304，判断alpha是否小于th3，在alpha<3时，执行S305，判断G₀是否小于th2，在G₀<th2时，执行S206，将第三灰度图的灰度值进行缩小调整。其中，该th1<th2<th3。

在执行S303之前，还包括判断该像素点区域是否是头发区域的过程。由于头发区域更容易出现边缘外泄或者边缘模糊的情况，因此，着重对头发区域进行调整。在判断是否是头发区域的过程中，根据头发区域的形状特征或者位置特征等等，从而确定是头发区域，比如，根据整体轮廓是圆形的区域的特征或者位于整体图像中的最上方的部位特征，确定是头发区域。当然，除此之外，还可以是其他毛发等等区域，例如毛衣边缘区域，在本发明实施例中就不再详细赘述了。

对焦内主体图的第三灰度图的灰度值进行调整，具体包括：将该焦内主体图的第三灰度图的灰度值乘以调整系数，该调整系数为该焦内主体图的第三灰度图的灰度值与第二阈值的比值的三次方。

具体地，基于如下计算式对焦内主体图的第三灰度图的灰度值进行调整：

其中，G₀为第三灰度图的像素点的灰度值，G₁为第四灰度图的灰度值，th2为第二阈值。

根据上述计算式获得对第三灰度图的灰度值进行调整，由此可见：对于大于th2的第三灰度值G₀，由于

三次方之后更加大于1，那么G₀乘以/>

的三次方后将增大，由此强化了第三灰度值G₀，从而使得该像素点更加靠近焦内主体区域；而对于小于th2的第三灰度值G₀，由于/>

三次方之后更加小于1，那么G₀乘以/>

的三次方后将减小，由此弱化了第三灰度值G₀，从而使得该像素点更加与焦内主体区域分离。经过上述调整后的第三灰度图，焦内主体区域和焦外区域分割更加明显、准确、清晰，如图6相对于图5的效果所示。

在获得了该调整后的第三灰度值之后，执行S206，基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图。

该处理过程具体包括：

获得原始图的模糊半径图；

将调整后的第三灰度图与模糊半径图融合，获得虚化效果图。

其中，该模糊半径图与在获得焦内主体图过程中获得的模糊半径图一样，该模糊半径图的每个位置模糊半径不一样，呈现的效果是根据光学原理，在离焦平面越远越模糊，离焦平面越近越清晰。

由于该焦内主体图已调整了灰度值，使得该焦内主体与焦外区域变得更清晰，故而将该焦内主体图与模糊半径图融合之后，得到的虚化效果图更加满足焦内清晰，焦外虚化的要求。

实施例二

基于与前述实施例中图像处理的方法同样的发明构思，本发明实施例二提供了一种图像处理的装置，如图4所示，包括：

焦内主体图获得模块401，用于基于原始图的深度图以及焦点位置，获得焦内主体图；

第一灰度图获得模块402，用于对所述焦内主体图进行第一次引导滤波，获得所述焦内主体图的第一灰度图；

第二灰度图获得模块403，用于对所述第一灰度图进行腐蚀处理，获得所述焦内主体图的第二灰度图；

第三灰度图获得模块404，用于对所述第二灰度图进行第二次引导滤波，获得所述焦内主体图的第三灰度图；

比较模块405，用于将所述第三灰度图的灰度值和第一灰度图的灰度值分别与各自设定的预设阈值进行比较，获得比较结果；

调整模块406，用于基于所述比较结果，对所述焦内主体图的第三灰度图的灰度值进行调整；

处理模块407，用于基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图。

进一步地，所述处理模块407具体包括：

第一获得单元，用于获得所述原始图的模糊半径图；

第二获得单元，用于将所述调整后的第三灰度图与所述模糊半径图融合，获得虚化效果图。

进一步地，所述调整模块406具体包括：

第一调整单元，用于在所述第一灰度图的灰度值大于第一阈值，且所述第三灰度图的灰度值大于或等于第二阈值时，将所述第三灰度图的灰度值进行放大调整；

第二调整单元，用于在所述第一灰度图的灰度值大于第三阈值且小于或等于所述第一阈值，且所述第三灰度图的灰度值小于所述第二阈值时，将所述第三灰度图的灰度值进行缩小调整；

第三调整单元，用于在所述第一灰度图的灰度值大于所述第一阈值，且所述第三灰度图的灰度值小于所述第二阈值时，将所述第三灰度图的灰度值进行缩小调整；

进一步地，所述调整模块406具体用于将所述焦内主体图的第三灰度图的灰度值乘以调整系数，所述调整系数为所述焦内主体图的第三灰度图的灰度值与所述第二阈值的比值的三次方。

进一步地，还包括：

深度图获得模块，用于获得所述原始图的深度图；

引导图获得模块，用于基于所述原始图的深度图，获得引导图。

进一步地，第一灰度图获得模块402具体用于采用所述引导图对所述焦内主体图进行第一次引导滤波，获得所述焦内主体图的第一灰度图。

进一步地，所述焦内主体图获得模块，具体包括：

第三获得单元，用于基于所述深度图以及焦点位置，获得所述原始图的模糊半径图；

第四获得单元，用于对所述模糊半径图进行阈值分割，获得所述焦内主体图。

实施例三

基于与前述实施例中图像处理的方法同样的发明构思，本发明实施例三还提供了一种计算机设备，如图所示，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现以下步骤：

基于原始图的深度图以及焦点位置，获得焦内主体图；

进一步地，所述基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图，具体包括：

获得所述原始图的模糊半径图；

进一步地，所述基于所述比较结果，对所述焦内主体图的第三灰度图的灰度值进行调整，具体包括：

进一步地，对所述焦内主体图的第三灰度图的灰度值进行调整，具体包括：

进一步地，在所述基于原始图的深度图以及焦点位置，获得焦内主体图之前，还包括：

获得所述原始图的深度图；

基于所述原始图的深度图，获得引导图。

进一步地，所述对所述焦内主体图进行第一次引导滤波，获得所述焦内主体图的第一灰度图，具体包括：

进一步地，所述基于原始图的深度图以及焦点位置，获得焦内主体图，具体包括：

对所述模糊半径图进行阈值分割，获得所述焦内主体图。

实施例四

基于与前述实施例中图像处理的方法同样的发明构思，本发明实施例四还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如下步骤：

基于原始图的深度图以及焦点位置，获得焦内主体图；

获得所述原始图的模糊半径图；

获得所述原始图的深度图；

基于所述原始图的深度图以及焦点位置，获得引导图。

对所述模糊半径图进行阈值分割，获得所述焦内主体图。

本发明提供的一种图像处理的方法，包括根据原始图的深度图，获得焦内主体图，然后对该焦内主体图进行第一次引导滤波，获得该焦内主体图的第一灰度图，对该第一灰度图进行腐蚀处理，获得该焦内主体图的第二灰度图，对该第二灰度图进行第二次引导滤波，获得该焦内主体图的第三灰度图，将该第三灰度图的灰度值与第一灰度图的灰度值分别与各自设定的阈值进行比较，获得比较结果，基于该比较结果，对该焦内主体图的第三灰度图的灰度值进行调整，基于该调整后的第三灰度值对原始图进行虚化处理，获得虚化效果图，因而可以解决现有技术中在获得的虚化效果图中主体图像与背景图像边缘分割准确度不高的技术问题，进而能够使得虚化效果图中主体图像与背景图像之间的边界更加准确、清晰，提高图片的虚化效果。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims

1.一种图像处理的方法，其特征在于，包括：

基于原始图的深度图以及焦点位置，获得焦内主体图；

基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图；

对所述焦内主体图的第三灰度图的灰度值进行调整，包括：

其中，所述第三阈值小于所述第一阈值，所述第二阈值大于所述第三阈值且小于所述第一阈值；

对所述焦内主体图的第三灰度图的灰度值进行调整，具体包括：

2.如权利要求1所述的方法，其特征在于，所述基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图，具体包括：

获得所述原始图的模糊半径图；

3.如权利要求1所述的方法，其特征在于，在所述基于原始图的深度图以及焦点位置，获得焦内主体图之前，还包括：

获得所述原始图的深度图；

基于所述原始图的深度图，获得引导图。

4.如权利要求3所述的方法，其特征在于，所述对所述焦内主体图进行第一次引导滤波，获得所述焦内主体图的第一灰度图，具体包括：

5.如权利要求1所述的方法，其特征在于，所述基于原始图的深度图以及焦点位置，获得焦内主体图，具体包括：

对所述模糊半径图进行阈值分割，获得所述焦内主体图。

6.一种图像处理的装置，其特征在于，包括：

比较模块，用于将所述第三灰度图的灰度值和第一灰度图的灰度值分别与各自设定的预设阈值进行比较，获得比较结果；

处理模块，用于基于调整后的第三灰度图对所述原始图进行虚化处理，获得虚化效果图；

所述调整模块，具体包括：

所述调整模块，具体用于：将所述焦内主体图的第三灰度图的灰度值乘以调整系数，所述调整系数为所述焦内主体图的第三灰度图的灰度值与所述第二阈值的比值的三次方。

7.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-5中任一权利要求所述的方法步骤。

8.一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-5中任一权利要求所述的方法步骤。