CN105430295A - 图像处理装置及方法 - Google Patents

Abstract

本发明公开了一种图像处理装置，所述图像处理装置包括：划分模块，用于获取待处理图像的深度信息，并根据获取的所述深度信息将所述待处理图像划分为前景图像和背景图像；变换模块，用于获取色彩传递的参考图像，并根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递，以使得所述前景图像与所述背景图像的颜色特征不同；合成模块，用于在完成色彩传递时，将所述前景图像以及所述背景图像融合为结果图像。本发明还公开了一种图像处理方法。本发明能够更灵活的进行图像的色彩传递。

Description

图像处理装置及方法

技术领域

本发明涉及图像处理技术领域，尤其涉及一种图像处理装置及方法。

背景技术

在图像处理领域，色彩传递是一种利用特定方法自动进行图像色彩添加或变更的方法，即指定原图像和参考图像，对原图像和目标图像的低阶统计特征进行线性变换，将参考图像中的色彩信息传递到原图像中，使原图像的色彩改变并具有与参考图像相似的颜色特征。

然而，现有技术在进行色彩传递时，通常是针对全局的色彩传递，即对原图像整体的色彩传递，例如，用户需求将拍摄的人像照片中的“人像”和“背景”进行不同参考图像的色彩传递时，现有技术将无法实现，存在色彩传递不够灵活的问题。

发明内容

本发明的主要目的在于提出一种图像处理装置及方法，旨在更灵活的进行图像的色彩传递。

为实现上述目的，本发明提供一种图像处理装置，该图像处理装置包括：

划分模块，用于获取待处理图像的深度信息，并根据获取的所述深度信息将所述待处理图像划分为前景图像和背景图像；

变换模块，用于获取色彩传递的参考图像，并根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递，以使得所述前景图像与所述背景图像的颜色特征不同；

合成模块，用于在完成色彩传递时，将所述前景图像以及所述背景图像融合为结果图像。

优选地，所述图像处理装置还包括：

拍摄模块，用于在侦测到拍摄指令时，对待拍摄场景进行拍摄，并获取所述待拍摄场景的深度信息；

关联模块，用于将所述待拍摄场景的深度信息与拍摄的图像关联，并将拍摄的所述图像作为所述待处理图像。

优选地，所述图像处理装置还包括羽化模块，用于在完成色彩传递时，对所述前景图像以及所述背景图像的分割边缘进行羽化处理；

所述合成模块还用于在完成羽化处理时，将所述前景图像以及所述背景图像融合为结果图像。

优选地，所述变换模块还用于显示参考图像的选择界面，以供用户基于所述选择界面选择对所述前景图像和/或所述背景图像进行色彩传递的参考图像；以及在接收到用户基于所述选择界面触发的选择指令时，获取所述选择指令对应的参考图像。

优选地，当所述参考图像为多个时，所述变换模块还用于采用所述前景图像以及所述背景图像各自对应的参考图像分别对所述前景图像和所述背景图像进行色彩传递。

此外，为实现上述目的，本发明还提出一种图像处理方法，该图像处理方法包括：

获取待处理图像的深度信息，并根据获取的所述深度信息将所述待处理图像划分为前景图像和背景图像；

获取色彩传递的参考图像，并根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递，以使得所述前景图像与所述背景图像的颜色特征不同；

在完成色彩传递时，将所述前景图像以及所述背景图像融合为结果图像。

优选地，所述获取待处理图像的深度信息，并根据获取的所述深度信息将所述待处理图像划分为前景图像和背景图像的步骤之前，还包括：

在侦测到拍摄指令时，对待拍摄场景进行拍摄，并获取所述待拍摄场景的深度信息；

将所述待拍摄场景的深度信息与拍摄的图像关联，并将拍摄的所述图像作为所述待处理图像。

优选地，所述将所述前景图像以及所述背景图像融合为结果图像的步骤之前，还包括：

在完成色彩传递时，对所述前景图像以及所述背景图像的分割边缘进行羽化处理；

在完成羽化处理时，执行所述将所述前景图像以及所述背景图像融合为结果图像的步骤。

优选地，所述获取色彩传递的参考图像包括：

显示参考图像的选择界面，以供用户基于所述选择界面选择对所述前景图像和/或所述背景图像进行色彩传递的参考图像；

在接收到用户基于所述选择界面触发的选择指令时，获取所述选择指令对应的参考图像。

优选地，当所述参考图像为多个时，所述根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递包括：

采用所述前景图像以及所述背景图像各自对应的参考图像分别对所述前景图像和所述背景图像进行色彩传递。

本发明提出的图像处理装置及方法，在进行待处理图像的色彩传递时，移动终端首先基于待处理图像的深度信息将待处理图像划分为前景图像和背景图像，然后对于所述前景图像和所述背景图像采用不同的参考图像应用色彩传递技术，或者仅对所述前景图像和所述背景图像之一采用参考图像应用色彩传递技术，在完成色彩传递之后，再将所述前景图像以及所述背景图像组合为结果图像，使得结果图像的前景部分和背景部分具有不同的颜色氛围，相较于现有技术仅能对待处理图像进行整体色彩传递的方式，本发明能够更灵活进行图像的色彩传递。

附图说明

图1为实现本发明各个实施例的移动终端的硬件结构示意图；

图2为如图1所示的移动终端的无线通信装置示意图；

图3为本发明图像处理装置第一实施例的功能模块示意图；

图4为本发明图像处理装置第一实施例中一待处理图像的示例图；

图5为本发明图像处理装置第一实施例中前景图像的示例图；

图6为本发明图像处理装置第一实施例中背景图像的示例图；

图7为本发明图像处理装置第一实施例中另一待处理图像的示例图；

图8为本发明图像处理装置第一实施例中用于色彩传递的参考图像的示例图；

图9为本发明图像处理装置第一实施例中另一待处理图像完成色彩传递的结果图像的示例图；

图10为本发明图像处理方法第一实施例的流程示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身并没有特定的意义。因此，“模块”与“部件”可以混合地使用。

移动终端可以以各种形式来实施。例如，本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面，假设终端是移动终端。然而，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本发明的实施方式的构造也能够应用于固定类型的终端。

图1为实现本发明各个实施例的移动终端的硬件结构示意。

移动终端100可以包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的移动终端，但是应理解的是，并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。

无线通信单元110通常包括一个或多个组件，其允许移动终端100与无线通信装置或网络之间的无线电通信。例如，无线通信单元可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的至少一个。

广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和/或地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器或者接收之前生成的广播信号和/或广播相关信息并且将其发送给终端的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等等。而且，广播信号可以进一步包括与TV或无线电广播信号组合的广播信号。广播相关信息也可以经由移动通信网络提供，并且在该情况下，广播相关信息可以由移动通信模块112来接收。广播信号可以以各种形式存在，例如，其可以以数字多媒体广播(DMB)的电子节目指南(EPG)、数字视频广播手持(DVB-H)的电子服务指南(ESG)等等的形式而存在。广播接收模块111可以通过使用各种类型的广播装置接收信号广播。特别地，广播接收模块111可以通过使用诸如多媒体广播-地面(DMB-T)、数字多媒体广播-卫星(DMB-S)、数字视频广播-手持(DVB-H)，前向链路媒体(MediaFLO)的数据广播装置、地面数字广播综合服务(ISDB-T)等等的数字广播装置接收数字广播。广播接收模块111可以被构造为适合提供广播信号的各种广播装置以及上述数字广播装置。经由广播接收模块111接收的广播信号和/或广播相关信息可以存储在存储器160(或者其它类型的存储介质)中。

移动通信模块112将无线电信号发送到基站(例如，接入点、节点B等等)、外部终端以及服务器中的至少一个和/或从其接收无线电信号。这样的无线电信号可以包括语音通话信号、视频通话信号、或者根据文本和/或多媒体消息发送和/或接收的各种类型的数据。

无线互联网模块113支持移动终端的无线互联网接入。该模块可以内部或外部地耦接到终端。该模块所涉及的无线互联网接入技术可以包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波互联接入)、HSDPA(高速下行链路分组接入)等等。

短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙^TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂^TM等等。

位置信息模块115是用于检查或获取移动终端的位置信息的模块。位置信息模块的典型示例是GPS(全球定位装置)。根据当前的技术，GPS模块115计算来自三个或更多卫星的距离信息和准确的时间信息并且对于计算的信息应用三角测量法，从而根据经度、纬度和高度准确地计算三维当前位置信息。当前，用于计算位置和时间信息的方法使用三颗卫星并且通过使用另外的一颗卫星校正计算出的位置和时间信息的误差。此外，GPS模块115能够通过实时地连续计算当前位置信息来计算速度信息。

A/V输入单元120用于接收音频或视频信号。A/V输入单元120可以包括相机121和麦克风122，相机121对在视频捕获模式或图像捕获模式中由图像捕获装置获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元151上。经相机121处理后的图像帧可以存储在存储器160(或其它存储介质)中或者经由无线通信单元110进行发送，可以根据移动终端的构造提供两个或更多相机121。麦克风122可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风接收声音(音频数据)，并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由移动通信模块112发送到移动通信基站的格式输出。麦克风122可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。

用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息，并且可以包括键盘、锅仔片、触摸板(例如，检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)、滚轮、摇杆等等。特别地，当触摸板以层的形式叠加在显示单元151上时，可以形成触摸屏。

感测单元140检测移动终端100的当前状态，(例如，移动终端100的打开或关闭状态)、移动终端100的位置、用户对于移动终端100的接触(即，触摸输入)的有无、移动终端100的取向、移动终端100的加速或将速移动和方向等等，并且生成用于控制移动终端100的操作的命令或信号。例如，当移动终端100实施为滑动型移动电话时，感测单元140可以感测该滑动型电话是打开还是关闭。另外，感测单元140能够检测电源单元190是否提供电力或者接口单元170是否与外部装置耦接。感测单元140可以包括接近传感器1410将在下面结合触摸屏来对此进行描述。

接口单元170用作至少一个外部装置与移动终端100连接可以通过的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。识别模块可以是存储用于验证用户使用移动终端100的各种信息并且可以包括用户识别模块(UIM)、客户识别模块(SIM)、通用客户识别模块(USIM)等等。另外，具有识别模块的装置(下面称为“识别装置”)可以采取智能卡的形式，因此，识别装置可以经由端口或其它连接装置与移动终端100连接。接口单元170可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端和外部装置之间传输数据。

另外，当移动终端100与外部底座连接时，接口单元170可以用作允许通过其将电力从底座提供到移动终端100的路径或者可以用作允许从底座输入的各种命令信号通过其传输到移动终端的路径。从底座输入的各种命令信号或电力可以用作用于识别移动终端是否准确地安装在底座上的信号。输出单元150被构造为以视觉、音频和/或触觉方式提供输出信号(例如，音频信号、视频信号、警报信号、振动信号等等)。输出单元150可以包括显示单元151、音频输出模块152、警报单元153等等。

显示单元151可以显示在移动终端100中处理的信息。例如，当移动终端100处于电话通话模式时，显示单元151可以显示与通话或其它通信(例如，文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时，显示单元151可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。

同时，当显示单元151和触摸板以层的形式彼此叠加以形成触摸屏时，显示单元151可以用作输入装置和输出装置。显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看，这可以称为透明显示器，典型的透明显示器可以例如为TOLED(透明有机发光二极管)显示器等等。根据特定想要的实施方式，移动终端100可以包括两个或更多显示单元(或其它显示装置)，例如，移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。

音频输出模块152可以在移动终端处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时，将无线通信单元110接收的或者在存储器160中存储的音频数据转换音频信号并且输出为声音。而且，音频输出模块152可以提供与移动终端100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出模块152可以包括拾音器、蜂鸣器等等。

警报单元153可以提供输出以将事件的发生通知给移动终端100。典型的事件可以包括呼叫接收、消息接收、键信号输入、触摸输入等等。除了音频或视频输出之外，警报单元153可以以不同的方式提供输出以通知事件的发生。例如，警报单元153可以以振动的形式提供输出，当接收到呼叫、消息或一些其它进入通信(incomingcommunication)时，警报单元153可以提供触觉输出(即，振动)以将其通知给用户。通过提供这样的触觉输出，即使在用户的移动电话处于用户的口袋中时，用户也能够识别出各种事件的发生。警报单元153也可以经由显示单元151或音频输出模块152提供通知事件的发生的输出。

存储器160可以存储由控制器180执行的处理和控制操作的软件程序等等，或者可以暂时地存储己经输出或将要输出的数据(例如，电话簿、消息、静态图像、视频等等)。而且，存储器160可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。

存储器160可以包括至少一种类型的存储介质，所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且，移动终端100可以与通过网络连接执行存储器160的存储功能的网络存储装置协作。

控制器180通常控制移动终端的总体操作。例如，控制器180执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外，控制器180可以包括用于再现(或回放)多媒体数据的多媒体模块181，多媒体模块181可以构造在控制器180内，或者可以构造为与控制器180分离。控制器180可以执行模式识别处理，以将在触摸屏上执行的手写输入或者图片绘制输入识别为字符或图像。

电源单元190在控制器180的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。

这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施，这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施，在一些情况下，这样的实施方式可以在控制器180中实施。对于软件实施，诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施，软件代码可以存储在存储器160中并且由控制器180执行。

至此，己经按照其功能描述了移动终端。下面，为了简要起见，将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种类型的移动终端中的滑动型移动终端作为示例。因此，本发明能够应用于任何类型的移动终端，并且不限于滑动型移动终端。

参照图2，图2为图1中相机的电气结构框图。

摄影镜头1211由用于形成被摄体像的多个光学镜头构成，为单焦点镜头或变焦镜头。摄影镜头1211在镜头驱动器1221的控制下能够在光轴方向上移动，镜头驱动器1221根据来自镜头驱动控制电路1222的控制信号，控制摄影镜头1211的焦点位置，在变焦镜头的情况下，也可控制焦点距离。镜头驱动控制电路1222按照来自微型计算机1217的控制命令进行镜头驱动器1221的驱动控制。

在摄影镜头1211的光轴上、由摄影镜头1211形成的被摄体像的位置附近配置有摄像元件1212。摄像元件1212用于对被摄体像摄像并取得摄像图像数据。在摄像元件1212上二维且呈矩阵状配置有构成各像素的光电二极管。各光电二极管产生与受光量对应的光电转换电流，该光电转换电流由与各光电二极管连接的电容器进行电荷蓄积。各像素的前表面配置有拜耳排列的RGB滤色器。

摄像元件1212与摄像电路1213连接，该摄像电路1213在摄像元件1212中进行电荷蓄积控制和图像信号读出控制，对该读出的图像信号(模拟图像信号)降低重置噪声后进行波形整形，进而进行增益提高等以成为适当的信号电平。摄像电路1213与A/D转换器1214连接，该A/D转换器1214对模拟图像信号进行模数转换，向总线1227输出数字图像信号(以下称之为图像数据)。

总线1227是用于传送在相机的内部读出或生成的各种数据的传送路径。在总线1227连接着上述A/D转换器1214，此外还连接着图像处理器1215、JPEG处理器1216、微型计算机1217、SDRAM(SynchronousDynamicrandomaccessmemory，同步动态随机存取内存)1218、存储器接口(以下称之为存储器I/F)1219、LCD(LiquidCrystalDisplay，液晶显示器)驱动器1220。

图像处理器1215对基于摄像元件1212的输出的图像数据进行OB相减处理、白平衡调整、颜色矩阵运算、伽马转换、色差信号处理、噪声去除处理、同时化处理、边缘处理等各种图像处理。JPEG处理器1216在将图像数据记录于记录介质1225时，按照JPEG压缩方式压缩从SDRAM1218读出的图像数据。此外，JPEG处理器1216为了进行图像再现显示而进行JPEG图像数据的解压缩。进行解压缩时，读出记录在记录介质1225中的文件，在JPEG处理器1216中实施了解压缩处理后，将解压缩的图像数据暂时存储于SDRAM1218中并在LCD1226上进行显示。另外，在本实施方式中，作为图像压缩解压缩方式采用的是JPEG方式，然而压缩解压缩方式不限于此，当然可以采用MPEG、TIFF、H.264等其他的压缩解压缩方式。

微型计算机1217发挥作为该相机整体的控制部的功能，统一控制相机的各种处理序列。微型计算机1217连接着操作单元1223和闪存1224。

操作单元1223包括但不限于实体按键或者虚拟按键，该实体或虚拟按键可以为电源按钮、拍照键、编辑按键、动态图像按钮、再现按钮、菜单按钮、十字键、OK按钮、删除按钮、放大按钮等各种输入按钮和各种输入键等操作控件，检测这些操作控件的操作状态，。

将检测结果向微型计算机1217输出。此外，在作为显示器的LCD1226的前表面设有触摸面板，检测用户的触摸位置，将该触摸位置向微型计算机1217输出。微型计算机1217根据来自操作单元1223的操作位置的检测结果，执行与用户的操作对应的各种处理序列。

闪存1224存储用于执行微型计算机1217的各种处理序列的程序。微型计算机1217根据该程序进行相机整体的控制。此外，闪存1224存储相机的各种调整值，微型计算机1217读出调整值，按照该调整值进行相机的控制。

SDRAM1218是用于对图像数据等进行暂时存储的可电改写的易失性存储器。该SDRAM1218暂时存储从A/D转换器1214输出的图像数据和在图像处理器1215、JPEG处理器1216等中进行了处理后的图像数据。

存储器接口1219与记录介质1225连接，进行将图像数据和附加在图像数据中的文件头等数据写入记录介质1225和从记录介质1225中读出的控制。记录介质1225例如为能够在相机主体上自由拆装的存储器卡等记录介质，然而不限于此，也可以是内置在相机主体中的硬盘等。

LCD驱动器1210与LCD1226连接，将由图像处理器1215处理后的图像数据存储于SDRAM1218，需要显示时，读取SDRAM1218存储的图像数据并在LCD1226上显示，或者，JPEG处理器1216压缩过的图像数据存储于SDRAM1218，在需要显示时，JPEG处理器1216读取SDRAM1218的压缩过的图像数据，再进行解压缩，将解压缩后的图像数据通过LCD1226进行显示。

LCD1226配置在相机主体的背面进行图像显示。该LCD1226LCD)，然而不限于此，也可以采用有机EL等各种显示面板(LCD1226)，然而不限于此，也可以采用有机EL等各种显示面板。

基于上述移动终端硬件结构以及相机的电气结构示意图，提出本发明图像处理装置各个实施例。

参照图3，在本发明图像处理装置的第一实施例中，所述图像处理装置包括：

划分模块10，用于获取待处理图像的深度信息，并根据获取的所述深度信息将所述待处理图像划分为前景图像和背景图像；

本实施例提供的图像处理装置可以应用于手机、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)等移动终端，例如，图像处理装置内置于手机运行，用户在通过手机对拍摄的照片进行色彩传递时，手机自动根据照片的深度信息将照片中的人像和背景分离，使用不同的参考图像分别对人像部分和背景部分进行色彩传递，或者只对背景部分进行色彩传递，增加了色彩传递的灵活性和视觉效果。

需要说明的是，在本实施例中，所述深度信息可用于描述所述待处理图像中任一点相对于拍摄所述待处理图像的镜头的距离，例如，所述待处理图像为手机拍摄的人像照片，所述待处理图像的深度信息可以描述照片中的“人”在拍摄时与手机的距离，以及描述照片中“背景”在拍摄时与手机的距离。

具体的，本实施例中，划分模块10获取所述待处理图像预先关联的深度信息，并将获取的所述深度信息作为所述待处理图像的深度信息，例如，可搜索本地或者云端是否存在所述待处理图像预先关联的深度信息，在搜索到所述待处理图像预先关联的深度信息时，将搜索到的所述深度信息作为所述待处理图像的深度信息。

在获取到所述待处理图像的深度信息之后，所述划分模块10根据获取的所述深度信息对所述待处理图像的各像素进行聚类，将所述待处理图像划分为前景图像以及背景图像，例如，结合参照图4至图6，所述待处理图像为人像照片(如图4所示)，手机将前述人像照片划分为“人”(前景图像，如图5所示)和“背景”(背景图像，如图6所示)。

变换模块20，用于获取色彩传递的参考图像，并根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递，以使得所述前景图像与所述背景图像的颜色特征不同；

本实施例中，在所述划分模块10将所述待处理图像划分为所述前景图像以及所述背景图像之后，变换模块20获取色彩传递的参考图像，其中，所述参考图像可以包括第一参考图像和第二参考图像，所述第一参考图像用于对所述前景图像进行色彩传递，所述第二参考图像用于对所述背景图像进行色彩传递；或者所述参考图像仅用于对所述前景图像进行色彩传递；或者所述参考图像仅用于对所述背景图像进行色彩传递。需要说明的是，所述参考图像的获取具体按照预先设置进行，例如手机缺省设置仅对背景图像进行色彩传递，则所述变换模块20将获取到用于对所述背景图像进行色彩传递的参考图像；又例如，用户预设设置同时对背景图像及前景图像进行色彩传递，则所述变换模块20将获取到用于对所述前景图像进行色彩传递的第一参考图像，以及获取到用于对所述背景图像进行色彩传递的第二参考图像。

在获取到色彩传递的参考图像之后，所述变换模块20根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递，以使得所述前景图像与所述背景图像的颜色特征不同。以下以获取到第一参考图像以及第二参考图像时，变换模块20基于低阶统计信息对所述背景图像的色彩传递进行说明。

需要说明的是，由于Lαβ颜色空间相较于RGB颜色空间更符合人类视觉感知系统，将其运用到自然场景中时，Lαβ颜色空间能够显著降低各颜色通道之间的相关性，使各通道之间具有一定的相互独立性，可以最大限度地减小一个通道的变化给另外两个通道造成的影响，从而可以在不同的颜色通道进行不同的运算，而不会出现通道交叉的问题。因此，为了达到较好的色彩传递效果，所述变换模块20首先将所述背景图像以及所述第二参考图像由RGB颜色空间转换至Lαβ颜色空间，将Lαβ颜色空间作为色彩传递的执行空间。其中，L通道表示非彩色通道，即亮度通道，α表示彩色的黄蓝通道，β表示彩色的红绿通道。

在完成所述背景图像以及所述第二参考图像的颜色空间转换之后，所述变换模块20首先计算所述背景图像的L通道均值α通道均值β通道均值以及所述第二参考图像的L通道均值α通道均值β通道均值以及所述背景图像的L通道标准差α通道标准差β通道标准差以及所述第二参考图像的L通道标准差α通道标准差β通道标准差然后所述变换模块20从所述背景图像中移走均值，将剩余部分按照标准差的比值缩放，最后加入所述第二参考图像的均值，其变换公式如下：

$l_{dst}^{*}=({\mathrm{\σ}}_{ref}^l/{\mathrm{\σ}}_{dst}^l)*l_{dst}^{\′}+m_{ref}^l$

${\mathrm{\α}}_{dst}^{*}=({\mathrm{\σ}}_{ref}^{\mathrm{\α}}/{\mathrm{\σ}}_{dst}^{\mathrm{\α}})*{\∂}_{dst}^{\′}+m_{ref}^{\mathrm{\α}}$

${\mathrm{\β}}_{dst}^{*}=({\mathrm{\σ}}_{ref}^{\mathrm{\β}}/{\mathrm{\σ}}_{dst}^{\mathrm{\β}})*{\mathrm{\β}}_{dst}^{\′}+m_{ref}^{\mathrm{\β}}$

$l_{dst}^{\′}=l_{dst}-m_{dst}^l$

${\mathrm{\α}}_{dst}^{\′}={\mathrm{\α}}_{dst}-m_{dst}^{\mathrm{\α}}$

${\mathrm{\β}}_{dst}^{\′}={\mathrm{\β}}_{dst}-m_{dst}^{\mathrm{\β}}$

其中，l_dst、α_dst和β_dst分别表示选中的像素的各通道值，和分别表示选中的像素变换后的各通道值。

经过上述运算即可使得所述背景图像和所述第二参考图像的各通道的低阶统计信息一致，达到将所述第二参考图像的颜色特征传递到所述背景图像的目的，然后将运算后的背景图像由Lαβ颜色空间转换为RGB颜色空间，有利于移动终端显示。

采用第一参考图像对所述前景图像进行的色彩传递具体可参照上述技术方案实施，此处不再赘述。本领域技术人员可以理解的是，在其他实施例中，可以按实际需要选取色彩传递的方式，例如，可以采用基于高阶统计信息的色彩传递，或者采用基于聚类的区域色彩传递。

合成模块30，用于在完成色彩传递时，将所述前景图像以及所述背景图像融合为结果图像。

需要说明的是，所述图像处理装置还包括记录模块，用于在所述划分模块10对所述待处理图像进行分割时，记录所述前景图像以及所述背景图像间的连接信息(即分割边缘)。在完成色彩传递时，所述合成模块30根据所述记录模块记录的所述前景图像以及所述背景图像间的连接信息将所述前景图像以及所述背景图像融合为结果图像。

例如，结合参照图7至图9，图7为用户拍摄的待处理图像，图8为对图7背景部分进行色彩传递的参考图像，图9为完成色彩传递的结果图像，如图9所示，本实施例利用色彩传递将图8所示的夕阳背光特效场景的颜色氛围传递给图7所示待处理图像的背景部分，并保持前景部分(人像)原有的颜色特征，给人一种全新的视觉感和特殊的艺术效果。

进一步的，在本实施例中，所述图像处理装置还包括显示模块，用于显示所述结果图像。

在所述合成模块30将所述前景图像以及所述背景图像融合为结果图像之后，显示模块在其所在移动终端显示所述结果图像，使得用户能够立即查看对所述待处理图像进行色彩传递的结果。

可选地，所述显示模块在显示所述结果图像的同时，还可以显示提示信息显示界面，供用户基于所述提示信息显示界面确认是否存储所述结果图像；以及在接收到用户基于所述提示信息显示界面输入的确认信息时，所述显示模块将所述结果图像存储至预设的存储路径指向的存储区域。此外，若用户不满意色彩传递的结果图像，可选择不存储。

本实施例提出的图像处理装置，内置于移动终端运行，使得移动终端在进行色彩传递时，首先基于待处理图像的深度信息将待处理图像划分为前景图像和背景图像，然后对于所述前景图像和所述背景图像采用不同的参考图像应用色彩传递技术，或者仅对所述前景图像和所述背景图像之一采用参考图像应用色彩传递技术，在完成色彩传递之后，再将所述前景图像以及所述背景图像组合为结果图像，使得结果图像的前景部分和背景部分具有不同的颜色氛围，相较于现有技术仅能对待处理图像进行整体色彩传递的方式，本发明能够更灵活进行图像的色彩传递。

进一步的，基于第一实施例，提出本发明图像处理装置的第二实施例，在本实施例中，所述图像处理装置还包括：

拍摄模块，用于在侦测到拍摄指令时，对待拍摄场景进行拍摄，并获取所述待拍摄场景的深度信息；

关联模块，用于将所述待拍摄场景的深度信息与拍摄的图像关联，并将拍摄的所述图像作为所述待处理图像。

需要说明的是，本实施例将第一实施例所述的色彩传递方案应用到拍摄中，例如，图像处理装置内置于移动终端运行，移动终端在拍摄时，利用色彩传递将夕阳背光特效场景的颜色氛围传递给拍摄的图像，使得拍摄图像呈现出对比度鲜明的夕阳氛围效果，或者将秋天金黄的颜色氛围传递给拍摄的图像，使得拍摄图像出现季节变幻的效果。

本实施例中，拍摄模块在拍摄(调用移动终端的摄像头进行拍摄)时，通过其所在移动终端预先设置的双目摄像头或者深度传感器获取待拍摄场景的深度信息，其中，双目摄像头是指位于移动终端同一面且相距一定距离的两个摄像头。需要说明的是，在采用双目摄像头获取待拍摄场景的深度信息时，可按移动终端的缺省设置将双目摄像头中任一摄像头拍摄的场景图像作为所述待处理图像，或者按用户设置将用户指定的摄像头拍摄的场景图像作为所述待处理图像。

例如，所述拍摄模块通过其所在移动终端设置的双目摄像头分别拍摄两幅场景图像，通过两幅场景图像的灰度信息和成象几何来生成深度图，深度图中的每一个像素值表示场景中某一点与所述移动终端之间的距离。又例如，所述拍摄模块通过其所在移动终端设置的深度传感器接收来自待拍摄场景发射或反射的光能量，形成有关待拍摄场景的光能量分布函数，即灰度图像，然后在这些图像的基础上恢复拍摄场景的深度信息；或者所述拍摄模块通过所述深度传感器向待拍摄场景发射能量，然后接收待拍摄场景对所发射能量的反射能量，形成有关待拍摄场景的光能量分布函数，即灰度图像，然后在这些图像的基础上恢复拍摄场景的深度信息。

此外，在所述移动终端包括除所述双目摄像头之外的其它摄像头时，所述拍摄模块还可将所述其它摄像头指定用于待拍摄场景的拍摄，将所述双目摄像头指定用于待拍摄场景深度信息的获取。

进一步的，基于前述任一实施例，提出本发明图像处理装置的第三实施例，在本实施例中，所述图像处理装置还包括羽化模块，用于在完成色彩传递时，对所述前景图像以及所述背景图像的分割边缘进行羽化处理；

所述合成模块还用于在完成羽化处理时，将所述前景图像以及所述背景图像融合为结果图像。

本领域技术人员可以理解的是，在前述实施例中，在所述划分模块10将所述待处理图像划分为前景图像以及背景图像之后，所述变换模块20对所述前景图像和所述背景图像之一进行了色彩传递的线性变换，或者分别采用不同的参考图像对所述前景图像以及所述背景图像进行了色彩传递的线性变换，所述前景图像和所述背景图像存在一定的颜色反差，若直接将所述前景图像以及所述背景图像进行融合，所述前景图像和所述背景图像的融合边缘(即前述分割边缘)处的过渡将比较生硬，影响结果图像的显示效果。因此，在本实施例中，在所述合成模块30对所述前景图像以及所述背景图像进行融合之前，羽化模块先对所述前景图像以及所述背景图像的分割边缘按预设的羽化值(可由移动终端缺省设定，或者用户自定义)进行羽化处理，在所述羽化模块完成羽化处理后，所述合成模块30再将所述前景图像以及所述背景图像融合为结果图像。需要说明的是，羽化处理原理是将图像融合边缘处虚化，起到渐变的作用从而达到自然衔接的效果，其中，羽化值越大，虚化范围越宽，也就是说颜色递变更柔和，羽化值越小，虚化范围越窄，颜色递变更剧烈，具体可根据实际情况进行调节。

本实施例通过在将所述前景图像以及所述背景图像进行融合之前，先对所述前景图像以及所述背景图像的分割边缘进行羽化处理，使得融合得到的结果图像的融合边缘过渡比较自然，能够提高结果图像的显示效果。

进一步的，基于前述任一实施例，提出本发明图像处理装置的第四实施例，在本实施例中，所述变换模块20还用于显示参考图像的选择界面，以供用户基于所述选择界面选择对所述前景图像和/或所述背景图像进行色彩传递的参考图像；以及在接收到用户基于所述选择界面触发的选择指令时，获取所述选择指令对应的参考图像。

本实施例中，在进行所述前景图像以及所述背景图像的色彩传递的线性变换时，用户可分别指定所述前景图像以及所述背景图像各自对应的参考图像，也可仅为二者之一指定对应的参考图像。具体的，在所述划分模块10将所述待处理图像划分为前景图像以及背景图像之后，所述变换模块20显示参考图像的选择界面，以供用户基于所述选择界面选择对所述前景图像和/或所述背景图像进行色彩传递的参考图像，例如，用户可选择对所述前景图像进行色彩变换的第一参考图像，以及选择对所述背景图像进行色彩变换的第二参考图像；或者用户仅为所述前景图像和所述背景图像之一选择进行色彩变换的参考图像。

在接收到用户基于所述选择界面触发的选择指令时，所述变换模块20根据所述选择指令获取所述前景图像对应的第一参考图像，以及获取所述背景图像对应的第二参考图像；

或者，在接收到用户基于所述选择界面触发的选择指令时，所述变换模块20根据所述选择指令获取所述前景图像和所述背景图像之一所对应的参考图像。

例如，图像处理装置内置于手机运行，所述待处理图像为用户拍摄的包括人像的风景照片，手机将照片中的“人”(前景部分)划分为前景图像，将照片中的“风景”背景部分划分为背景图像，用户可为“风景”选择秋天金黄的颜色氛围的参考图像，不为“人”选择参考图像，在完成选择后，手机将秋天金黄的颜色氛围传递给“风景”，最终使得拍摄的照片出现季节变换的效果。

本实施例通过响应用户操作分别为待处理图像的前景部分和背景部分指定不同的参考图像，或者仅为待处理图像的前景部分和背景部分之一指定参考图像，能够提升用户体验。

进一步的，基于前述任一实施例，提出本发明图像处理装置的第五实施例，在本实施例中，当所述参考图像为多个时，所述变换模块20还用于采用所述前景图像以及所述背景图像各自对应的参考图像分别对所述前景图像和所述背景图像进行色彩传递。

在本实施例中，所述变换模块20获取到所述前景图像对应的第一参考图像，以及获取到所述背景图像对应的第二参考图像，并采用获取的所述第一参考图像对所述前景图像进行色彩传递，采用获取的所述第二参考图像对所述背景图像进行色彩传递。以下以基于低阶统计信息，所述变换模块20采用获取的所述第二参考图像对所述背景图像的色彩传递进行说明。

需要说明的是，由于Lαβ颜色空间相较于RGB颜色空间更符合人类视觉感知系统，将其运用到自然场景中时，Lαβ颜色空间能够显著降低各颜色通道之间的相关性，使各通道之间具有一定的相互独立性，可以最大限度地减小一个通道的变化给另外两个通道造成的影响，从而可以在不同的颜色通道进行不同的运算，而不会出现通道交叉的问题。因此，为了达到较好的色彩传递效果，所述变换模块20首先将所述背景图像以及所述第二参考图像由RGB颜色空间转换至Lαβ颜色空间，将Lαβ颜色空间作为色彩传递的执行空间。其中，L通道表示非彩色通道，即亮度通道，α表示彩色的黄蓝通道，β表示彩色的红绿通道。

在完成所述背景图像以及所述第二参考图像的颜色空间转换之后，所述变换模块20首先计算所述背景图像的L通道均值α通道均值β通道均值以及所述第二参考图像的L通道均值α通道均值β通道均值以及所述背景图像的L通道标准差α通道标准差β通道标准差以及所述第二参考图像的L通道标准差α通道标准差β通道标准差然后所述变换模块20从所述背景图像中移走均值，将剩余部分按照标准差的比值缩放，最后加入所述第二参考图像的均值，其变换公式如下：

$l_{dst}^{*}=({\mathrm{\σ}}_{ref}^l/{\mathrm{\σ}}_{dst}^l)*l_{dst}^{\′}+m_{ref}^l$

${\mathrm{\α}}_{dst}^{*}=({\mathrm{\σ}}_{ref}^{\mathrm{\α}}/{\mathrm{\σ}}_{dst}^{\mathrm{\α}})*{\∂}_{dst}^{\′}+m_{ref}^{\mathrm{\α}}$

${\mathrm{\β}}_{dst}^{*}=({\mathrm{\σ}}_{ref}^{\mathrm{\β}}/{\mathrm{\σ}}_{dst}^{\mathrm{\β}})*{\mathrm{\β}}_{dst}^{\′}+m_{ref}^{\mathrm{\β}}$

$l_{dst}^{\′}=l_{dst}-m_{dst}^l$

${\mathrm{\α}}_{dst}^{\′}={\mathrm{\α}}_{dst}-m_{dst}^{\mathrm{\α}}$

${\mathrm{\β}}_{dst}^{\′}={\mathrm{\β}}_{dst}-m_{dst}^{\mathrm{\β}}$

其中，l_dst、α_dst和β_dst分别表示选中的像素的各通道值，和分别表示选中的像素变换后的各通道值。

经过上述运算即可使得所述背景图像和所述第二参考图像的各通道的低阶统计信息一致，达到将所述第二参考图像的颜色特征传递到所述背景图像的目的，然后将运算后的背景图像由Lαβ颜色空间转换为RGB颜色空间，有利于移动终端显示。

采用第一参考图像对所述前景图像进行的色彩传递具体可参照上述技术方案实施，此处不再赘述。本领域技术人员可以理解的是，在其他实施例中，可以按实际需要选取色彩传递的方式，例如，可以采用基于高阶统计信息的色彩传递，或者采用基于聚类的区域色彩传递。

本发明进一步提供一种图像处理方法，参照图10，在本发明图像处理方法的第一实施例中，所述图像处理方法包括：

步骤S10，获取待处理图像的深度信息，并根据获取的所述深度信息将所述待处理图像划分为前景图像和背景图像；

本实施例提供的图像处理方法可以应用于手机、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)等移动终端，例如，用户在通过手机对拍摄的照片进行色彩传递时，手机自动根据照片的深度信息将照片中的人像和背景分离，使用不同的参考图像分别对人像部分和背景部分进行色彩传递，或者只对背景部分进行色彩传递，增加了色彩传递的灵活性和视觉效果。

需要说明的是，在本实施例中，所述深度信息可用于描述所述待处理图像中任一点相对于拍摄所述待处理图像的镜头的距离，例如，所述待处理图像为手机拍摄的人像照片，所述待处理图像的深度信息可以描述照片中的“人”在拍摄时与手机的距离，以及描述照片中“背景”在拍摄时与手机的距离。

具体的，本实施例中，移动终端获取所述待处理图像预先关联的深度信息，并将获取的所述深度信息作为所述待处理图像的深度信息，例如，可搜索本地或者云端是否存在所述待处理图像预先关联的深度信息，在搜索到所述待处理图像预先关联的深度信息时，将搜索到的所述深度信息作为所述待处理图像的深度信息。

在获取到所述待处理图像的深度信息之后，所述移动终端根据获取的所述深度信息对所述待处理图像的各像素进行聚类，将所述待处理图像划分为前景图像以及背景图像，例如，结合参照图4至图6，所述待处理图像为人像照片(如图4所示)，手机将前述人像照片划分为“人”(前景图像，如图5所示)和“背景”(背景图像，如图6所示)。

步骤S20，获取色彩传递的参考图像，并根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递，以使得所述前景图像与所述背景图像的颜色特征不同；

本实施例中，所述移动终端在将所述待处理图像划分为所述前景图像以及所述背景图像之后，获取色彩传递的参考图像，其中，所述参考图像可以包括第一参考图像和第二参考图像，所述第一参考图像用于对所述前景图像进行色彩传递，所述第二参考图像用于对所述背景图像进行色彩传递；或者所述参考图像仅用于对所述前景图像进行色彩传递；或者所述参考图像仅用于对所述背景图像进行色彩传递。需要说明的是，所述参考图像的获取具体按照预先设置进行，例如手机缺省设置仅对背景图像进行色彩传递，则所述手机将获取到用于对所述背景图像进行色彩传递的参考图像；又例如，用户预设设置同时对背景图像及前景图像进行色彩传递，则所述手机将获取到用于对所述前景图像进行色彩传递的第一参考图像，以及获取到用于对所述背景图像进行色彩传递的第二参考图像。

在获取到色彩传递的参考图像之后，所述移动终端根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递，以使得所述前景图像与所述背景图像的颜色特征不同。以下以获取到第一参考图像以及第二参考图像时，基于低阶统计信息对所述背景图像的色彩传递进行说明。

需要说明的是，由于Lαβ颜色空间相较于RGB颜色空间更符合人类视觉感知系统，将其运用到自然场景中时，Lαβ颜色空间能够显著降低各颜色通道之间的相关性，使各通道之间具有一定的相互独立性，可以最大限度地减小一个通道的变化给另外两个通道造成的影响，从而可以在不同的颜色通道进行不同的运算，而不会出现通道交叉的问题。因此，为了达到较好的色彩传递效果，所述移动终端首先将所述背景图像以及所述第二参考图像由RGB颜色空间转换至Lαβ颜色空间，将Lαβ颜色空间作为色彩传递的执行空间。其中，L通道表示非彩色通道，即亮度通道，α表示彩色的黄蓝通道，β表示彩色的红绿通道。

在完成所述背景图像以及所述第二参考图像的颜色空间转换之后，所述移动终端首先计算所述背景图像的L通道均值α通道均值β通道均值以及所述第二参考图像的L通道均值α通道均值β通道均值以及所述背景图像的L通道标准差α通道标准差β通道标准差以及所述第二参考图像的L通道标准差α通道标准差β通道标准差然后所述移动终端从所述背景图像中移走均值，将剩余部分按照标准差的比值缩放，最后加入所述第二参考图像的均值，其变换公式如下：

$l_{dst}^{*}=({\mathrm{\σ}}_{ref}^l/{\mathrm{\σ}}_{dst}^l)*l_{dst}^{\′}+m_{ref}^l$

${\mathrm{\α}}_{dst}^{*}=({\mathrm{\σ}}_{ref}^{\mathrm{\α}}/{\mathrm{\σ}}_{dst}^{\mathrm{\α}})*{\∂}_{dst}^{\′}+m_{ref}^{\mathrm{\α}}$

${\mathrm{\β}}_{dst}^{*}=({\mathrm{\σ}}_{ref}^{\mathrm{\β}}/{\mathrm{\σ}}_{dst}^{\mathrm{\β}})*{\mathrm{\β}}_{dst}^{\′}+m_{ref}^{\mathrm{\β}}$

$l_{dst}^{\′}=l_{dst}-m_{dst}^l$

${\mathrm{\α}}_{dst}^{\′}={\mathrm{\α}}_{dst}-m_{dst}^{\mathrm{\α}}$

${\mathrm{\β}}_{dst}^{\′}={\mathrm{\β}}_{dst}-m_{dst}^{\mathrm{\β}}$

其中，l_dst、α_dst和β_dst分别表示选中的像素的各通道值，和分别表示选中的像素变换后的各通道值。

经过上述运算即可使得所述背景图像和所述第二参考图像的各通道的低阶统计信息一致，达到将所述第二参考图像的颜色特征传递到所述背景图像的目的，然后将运算后的背景图像由Lαβ颜色空间转换为RGB颜色空间，有利于移动终端显示。

采用第一参考图像对所述前景图像进行的色彩传递具体可参照上述技术方案实施，此处不再赘述。本领域技术人员可以理解的是，在其他实施例中，可以按实际需要选取色彩传递的方式，例如，可以采用基于高阶统计信息的色彩传递，或者采用基于聚类的区域色彩传递。

步骤S30，在完成色彩传递时，将所述前景图像以及所述背景图像融合为结果图像。

需要说明的是，本实施例在对所述待处理图像进行分割时，记录了所述前景图像以及所述背景图像间的连接信息(即分割边缘)。在完成色彩传递时，所述移动终端根据记录的所述前景图像以及所述背景图像间的连接信息将所述前景图像以及所述背景图像融合为结果图像。

例如，结合参照图7至图9，图7为用户拍摄的待处理图像，图8为对图7背景部分进行色彩传递的参考图像，图9为完成色彩传递的结果图像，如图9所示，本实施例利用色彩传递将图8所示的夕阳背光特效场景的颜色氛围传递给图7所示待处理图像的背景部分，并保持前景部分(人像)原有的颜色特征，给人一种全新的视觉感和特殊的艺术效果。

进一步的，在本实施例中，上述步骤S30之后，还包括：

显示所述结果图像。

在将所述前景图像以及所述背景图像融合为结果图像之后，所述移动终端显示所述结果图像，使得用户能够立即查看对所述待处理图像进行色彩传递的结果。

可选地，所述移动终端在显示所述结果图像的同时，还可以显示提示信息显示界面，供用户基于所述提示信息显示界面确认是否存储所述结果图像；以及在接收到用户基于所述提示信息显示界面输入的确认信息时，所述移动终端将所述结果图像存储至预设的存储路径指向的存储区域。此外，若用户不满意色彩传递的结果图像，可选择不存储。

本实施例提出的图像处理方法，移动终端首先基于待处理图像的深度信息将待处理图像划分为前景图像和背景图像，然后对于所述前景图像和所述背景图像采用不同的参考图像应用色彩传递技术，或者仅对所述前景图像和所述背景图像之一采用参考图像应用色彩传递技术，在完成色彩传递之后，再将所述前景图像以及所述背景图像组合为结果图像，使得结果图像的前景部分和背景部分具有不同的颜色氛围，相较于现有技术仅能对待处理图像进行整体色彩传递的方式，本发明能够更灵活进行图像的色彩传递。

进一步的，基于第一实施例，提出本发明图像处理方法的第二实施例，在本实施例中，上述步骤S10之前，还包括：

在侦测到拍摄指令时，对待拍摄场景进行拍摄，并获取所述待拍摄场景的深度信息；

将所述待拍摄场景的深度信息与拍摄的图像关联，并将拍摄的所述图像作为所述待处理图像。

需要说明的是，本实施例将第一实施例所述的色彩传递方案应用到拍摄中，例如，移动终端在拍摄时，利用色彩传递将夕阳背光特效场景的颜色氛围传递给拍摄的图像，使得拍摄图像呈现出对比度鲜明的夕阳氛围效果，或者将秋天金黄的颜色氛围传递给拍摄的图像，使得拍摄图像出现季节变幻的效果。

本实施例中，移动终端在拍摄时，通过预先设置的双目摄像头或者深度传感器获取待拍摄场景的深度信息，其中，双目摄像头是指位于移动终端同一面且相距一定距离的两个摄像头。需要说明的是，在采用双目摄像头获取待拍摄场景的深度信息时，可按移动终端的缺省设置将双目摄像头中任一摄像头拍摄的场景图像作为所述待处理图像，或者按用户设置将用户指定的摄像头拍摄的场景图像作为所述待处理图像。

例如，所述移动终端通过设置的双目摄像头分别拍摄两幅场景图像，通过两幅场景图像的灰度信息和成象几何来生成深度图，深度图中的每一个像素值表示场景中某一点与所述移动终端之间的距离。又例如，所述移动终端通过深度传感器接收来自待拍摄场景发射或反射的光能量，形成有关待拍摄场景的光能量分布函数，即灰度图像，然后在这些图像的基础上恢复拍摄场景的深度信息；或者所述移动终端通过深度传感器向待拍摄场景发射能量，然后接收待拍摄场景对所发射能量的反射能量，形成有关待拍摄场景的光能量分布函数，即灰度图像，然后在这些图像的基础上恢复拍摄场景的深度信息。

此外，在所述移动终端还包括与所述双目摄像头位于同一面的其它摄像头时，还可将所述其它摄像头指定用于待拍摄场景的拍摄，将所述双目摄像头指定用于待拍摄场景深度信息的获取。

进一步的，基于前述任一实施例，提出本发明图像处理方法的第三实施例，在本实施例中，上述步骤S30之前，还包括：

在完成色彩传递时，对所述前景图像以及所述背景图像的分割边缘进行羽化处理；

在完成羽化处理时，执行所述将所述前景图像以及所述背景图像融合为结果图像的步骤。

本领域技术人员可以理解的是，在前述实施例中，在将所述待处理图像划分为前景图像以及背景图像之后，对所述前景图像和所述背景图像之一进行了色彩传递的线性变换，或者分别采用不同的参考图像对所述前景图像以及所述背景图像进行了色彩传递的线性变换，所述前景图像和所述背景图像存在一定的颜色反差，若直接将所述前景图像以及所述背景图像进行融合，所述前景图像和所述背景图像的融合边缘(即前述分割边缘)处的过渡将比较生硬，影响结果图像的显示效果。因此，在本实施例中，在对所述前景图像以及所述背景图像进行融合之前，先对所述前景图像以及所述背景图像的分割边缘按预设的羽化值(可由移动终端缺省设定，或者用户自定义)进行羽化处理，在完成羽化处理后，再将所述前景图像以及所述背景图像融合为结果图像。需要说明的是，羽化处理原理是将图像融合边缘处虚化，起到渐变的作用从而达到自然衔接的效果，其中，羽化值越大，虚化范围越宽，也就是说颜色递变更柔和，羽化值越小，虚化范围越窄，颜色递变更剧烈，具体可根据实际情况进行调节。

本实施例通过在将所述前景图像以及所述背景图像进行融合之前，先对所述前景图像以及所述背景图像的分割边缘进行羽化处理，使得融合得到的结果图像的融合边缘过渡比较自然，能够提高结果图像的显示效果。

进一步的，基于前述任一实施例，提出本发明图像处理方法的第四实施例，在本实施例中，上述步骤S20中所述获取色彩传递的参考图像包括：

显示参考图像的选择界面，以供用户基于所述选择界面选择对所述前景图像和/或所述背景图像进行色彩传递的参考图像；

在接收到用户基于所述选择界面触发的选择指令时，获取所述选择指令对应的参考图像。

本实施例中，在进行所述前景图像以及所述背景图像的色彩传递的线性变换时，用户可分别指定所述前景图像以及所述背景图像各自对应的参考图像，也可仅为二者之一指定对应的参考图像。具体的，所述移动终端在将所述待处理图像划分为前景图像以及背景图像之后，显示参考图像的选择界面，以供用户基于所述选择界面选择对所述前景图像和/或所述背景图像进行色彩传递的参考图像，例如，用户可选择对所述前景图像进行色彩变换的第一参考图像，以及选择对所述背景图像进行色彩变换的第二参考图像；或者用户仅为所述前景图像和所述背景图像之一选择进行色彩变换的参考图像。

在接收到用户基于所述选择界面触发的选择指令时，所述移动终端根据所述选择指令获取所述前景图像对应的第一参考图像，以及获取所述背景图像对应的第二参考图像；

或者，在接收到用户基于所述选择界面触发的选择指令时，所述移动终端根据所述选择指令获取所述前景图像和所述背景图像之一所对应的参考图像。

例如，所述待处理图像为用户拍摄的包括人像的风景照片，手机将照片中的“人”(前景部分)划分为前景图像，将照片中的“风景”背景部分划分为背景图像，用户可为“风景”选择秋天金黄的颜色氛围的参考图像，不为“人”选择参考图像，在完成选择后，手机将秋天金黄的颜色氛围传递给“风景”，最终使得拍摄的照片出现季节变换的效果。

本实施例通过响应用户操作分别为待处理图像的前景部分和背景部分指定不同的参考图像，或者仅为待处理图像的前景部分和背景部分之一指定参考图像，能够提升用户体验。

进一步的，基于前述任一实施例，提出本发明图像处理方法的第五实施例，在本实施例中，当所述参考图像为多个时，上述步骤S20中所述根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递包括：

采用所述前景图像以及所述背景图像各自对应的参考图像分别对所述前景图像和所述背景图像进行色彩传递。

在本实施例中，所述移动终端获取到所述前景图像对应的第一参考图像，以及获取到所述背景图像对应的第二参考图像，并采用获取的所述第一参考图像对所述前景图像进行色彩传递，采用获取的所述第二参考图像对所述背景图像进行色彩传递。以下以基于低阶统计信息，采用获取的所述第二参考图像对所述背景图像的色彩传递进行说明。

需要说明的是，由于Lαβ颜色空间相较于RGB颜色空间更符合人类视觉感知系统，将其运用到自然场景中时，Lαβ颜色空间能够显著降低各颜色通道之间的相关性，使各通道之间具有一定的相互独立性，可以最大限度地减小一个通道的变化给另外两个通道造成的影响，从而可以在不同的颜色通道进行不同的运算，而不会出现通道交叉的问题。因此，为了达到较好的色彩传递效果，所述移动终端首先将所述背景图像以及所述第二参考图像由RGB颜色空间转换至Lαβ颜色空间，将Lαβ颜色空间作为色彩传递的执行空间。其中，L通道表示非彩色通道，即亮度通道，α表示彩色的黄蓝通道，β表示彩色的红绿通道。

在完成所述背景图像以及所述第二参考图像的颜色空间转换之后，所述移动终端首先计算所述背景图像的L通道均值α通道均值β通道均值以及所述第二参考图像的L通道均值α通道均值β通道均值以及所述背景图像的L通道标准差α通道标准差β通道标准差以及所述第二参考图像的L通道标准差α通道标准差β通道标准差然后所述移动终端从所述背景图像中移走均值，将剩余部分按照标准差的比值缩放，最后加入所述第二参考图像的均值，其变换公式如下：

$l_{dst}^{*}=({\mathrm{\σ}}_{ref}^l/{\mathrm{\σ}}_{dst}^l)*l_{dst}^{\′}+m_{ref}^l$

${\mathrm{\α}}_{dst}^{*}=({\mathrm{\σ}}_{ref}^{\mathrm{\α}}/{\mathrm{\σ}}_{dst}^{\mathrm{\α}})*{\∂}_{dst}^{\′}+m_{ref}^{\mathrm{\α}}$

${\mathrm{\β}}_{dst}^{*}=({\mathrm{\σ}}_{ref}^{\mathrm{\β}}/{\mathrm{\σ}}_{dst}^{\mathrm{\β}})*{\mathrm{\β}}_{dst}^{\′}+m_{ref}^{\mathrm{\β}}$

$l_{dst}^{\′}=l_{dst}-m_{dst}^l$

${\mathrm{\α}}_{dst}^{\′}={\mathrm{\α}}_{dst}-m_{dst}^{\mathrm{\α}}$

${\mathrm{\β}}_{dst}^{\′}={\mathrm{\β}}_{dst}-m_{dst}^{\mathrm{\β}}$

其中，l_dst、α_dst和β_dst分别表示选中的像素的各通道值，和分别表示选中的像素变换后的各通道值。

经过上述运算即可使得所述背景图像和所述第二参考图像的各通道的低阶统计信息一致，达到将所述第二参考图像的颜色特征传递到所述背景图像的目的，然后将运算后的背景图像由Lαβ颜色空间转换为RGB颜色空间，有利于移动终端显示。

采用第一参考图像对所述前景图像进行的色彩传递具体可参照上述技术方案实施，此处不再赘述。本领域技术人员可以理解的是，在其他实施例中，可以按实际需要选取色彩传递的方式，例如，可以采用基于高阶统计信息的色彩传递，或者采用基于聚类的区域色彩传递。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种图像处理装置，其特征在于，所述图像处理装置包括：

划分模块，用于获取待处理图像的深度信息，并根据获取的所述深度信息将所述待处理图像划分为前景图像和背景图像；

变换模块，用于获取色彩传递的参考图像，并根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递，以使得所述前景图像与所述背景图像的颜色特征不同；

合成模块，用于在完成色彩传递时，将所述前景图像以及所述背景图像融合为结果图像。

2.如权利要求1所述的图像处理装置，其特征在于，所述图像处理装置还包括：

拍摄模块，用于在侦测到拍摄指令时，对待拍摄场景进行拍摄，并获取所述待拍摄场景的深度信息；

关联模块，用于将所述待拍摄场景的深度信息与拍摄的图像关联，并将拍摄的所述图像作为所述待处理图像。

3.如权利要求1所述的图像处理装置，其特征在于，所述图像处理装置还包括羽化模块，用于在完成色彩传递时，对所述前景图像以及所述背景图像的分割边缘进行羽化处理；

所述合成模块还用于在完成羽化处理时，将所述前景图像以及所述背景图像融合为结果图像。

4.如权利要求1-3任一项所述的图像处理装置，其特征在于，所述变换模块还用于显示参考图像的选择界面，以供用户基于所述选择界面选择对所述前景图像和/或所述背景图像进行色彩传递的参考图像；以及在接收到用户基于所述选择界面触发的选择指令时，获取所述选择指令对应的参考图像。

5.如权利要求1-3任一项所述的图像处理装置，其特征在于，当所述参考图像为多个时，所述变换模块还用于采用所述前景图像以及所述背景图像各自对应的参考图像分别对所述前景图像和所述背景图像进行色彩传递。

6.一种图像处理方法，其特征在于，所述图像处理方法包括：

获取待处理图像的深度信息，并根据获取的所述深度信息将所述待处理图像划分为前景图像和背景图像；

获取色彩传递的参考图像，并根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递，以使得所述前景图像与所述背景图像的颜色特征不同；

在完成色彩传递时，将所述前景图像以及所述背景图像融合为结果图像。

7.如权利要求6所述的图像处理方法，其特征在于，所述获取待处理图像的深度信息，并根据获取的所述深度信息将所述待处理图像划分为前景图像和背景图像的步骤之前，还包括：

在侦测到拍摄指令时，对待拍摄场景进行拍摄，并获取所述待拍摄场景的深度信息；

将所述待拍摄场景的深度信息与拍摄的图像关联，并将拍摄的所述图像作为所述待处理图像。

8.如权利要求6所述的图像处理方法，其特征在于，所述将所述前景图像以及所述背景图像融合为结果图像的步骤之前，还包括：

在完成色彩传递时，对所述前景图像以及所述背景图像的分割边缘进行羽化处理；

在完成羽化处理时，执行所述将所述前景图像以及所述背景图像融合为结果图像的步骤。

9.如权利要求6-8任一项所述的图像处理方法，其特征在于，所述获取色彩传递的参考图像包括：

显示参考图像的选择界面，以供用户基于所述选择界面选择对所述前景图像和/或所述背景图像进行色彩传递的参考图像；

在接收到用户基于所述选择界面触发的选择指令时，获取所述选择指令对应的参考图像。

10.如权利要求6-8任一项所述的图像处理方法，其特征在于，当所述参考图像为多个时，所述根据获取的所述参考图像对所述前景图像和/或所述背景图像进行色彩传递包括：

采用所述前景图像以及所述背景图像各自对应的参考图像分别对所述前景图像和所述背景图像进行色彩传递。