CN106603903A - 照片处理方法及装置 - Google Patents

Abstract

本发明提供了一种照片处理方法及装置，其中，该方法包括：识别待处理照片中的预定物体图像；擦除上述待处理照片中的其他物体图像，其中，该其他物体图像为上述待处理照片中除识别的预定物体图像之外的与该预定物体图像同类的物体图像；对擦除了上述其他物体图像的待处理照片进行修复处理。通过本发明，解决了相关技术中存在的需要人工干预从而导致无法及时消除照片中的无关图像，用户体验度低的问题，进而实现了拍照完成后由终端智能识别并消除照片中的无关图像，提高照片处理效率，改善用户体验的效果。

Description

照片处理方法及装置

技术领域

本发明涉及通信领域，具体而言，涉及一种照片处理方法及装置。

背景技术

随着科技的发展，终端上的功能越来越多，给人们的生活带来了许多便利，以手机上的照相机为例，手机上的照相机的像素已有了显著的提高，从而使得使用者能够清楚的拍摄记录生活中的风景。

其中，景点拍照是用户使用手机拍照的一个重要场景，而在景点游客较多，所拍照片上经常会不小心将陌生人拍进画面，这成为用户使用手机拍照的一大痛点。在相关技术中，在使用手机拍照后，不能利用手机在拍照之后，即对拍摄的照片进行去除陌生人图像的处理，只能通过后期的专用的软件，如美图秀秀、photoshop，并且需要人为选择出需要去除的陌生人图像，进而通过抠图、图片组合等方式才能去除陌生人图像，处理周期长，用户体验度低。

针对相关技术中存在的需要人工干预从而导致无法及时消除照片中的无关图像，用户体验度低的问题，目前尚未提出有效的解决方案。

发明内容

本发明提供了一种照片处理方法及装置，以至少解决相关技术中存在的需要人工干预从而导致无法及时消除照片中的无关图像，用户体验度低的问题。

根据本发明的一个方面，提供了一种照片处理方法，包括：识别待处理照片中的预定物体图像；擦除所述待处理照片中的其他物体图像，其中，所述其他物体图像为所述照片中除识别的所述预定物体图像之外的与所述预定物体图像同类的物体图像；对擦除了所述其他物体图像的待处理照片进行修复处理。

可选地，识别所述待处理照片中的所述预定物体图像包括：根据预先保存的第一照片识别所述待处理照片中的所述预定物体图像；或者，通过扫描所述预定物体图像对应的预定物体的方式识别所述待处理照片中的所述预定物体图像。

可选地，根据所述第一照片识别所述待处理照片中的所述预定物体图像包括：调用预先保存的所述第一照片；将所述第一照片中的物体图像与所述待处理照片中的物体图像进行一一对比；确定所述待处理照片中与所述第一照片中的物体图像相似度大于或等于预定值的物体图像为所述预定物体图像。

可选地，对擦除了所述其他物体图像的待处理照片进行修复处理包括以下至少之一：根据预先保存的第二照片对擦除了所述其他物体图像的待处理照片进行修复处理，其中，所述第二照片包括所述待处理照片中除所述物体图像之外的背景图像；根据所述待处理照片中所述其他物体图像周围的图像对所述待处理照片进行修复处理。

可选地，根据预先保存的所述第二照片对擦除了所述其他物体图像的待处理照片进行修复处理包括：获取所述第二照片中与所述待处理照片中的所述其他物体图像的位置对应的背景图像；将所述第二照片中的与所述其他物体图像的位置对应的背景图像填充到所述待处理照片中擦除了所述其他物体图像的位置。

根据本发明的另一方面，提供了一种照片处理装置，包括：识别模块，用于识别待处理照片中的预定物体图像；擦除模块，用于擦除所述待处理照片中的其他物体图像，其中，所述其他物体图像为所述照片中除识别的所述预定物体图像之外的与所述预定物体图像同类的物体图像；处理模块，用于对擦除了所述其他物体图像的待处理照片进行修复处理。

可选地，所述识别模块包括：识别单元，用于根据预先保存的第一照片识别所述待处理照片中的所述预定物体图像；或者，通过扫描所述预定物体图像对应的预定物体的方式识别所述待处理照片中的所述预定物体图像。

可选地，所述识别单元包括：调用子单元，用于调用预先保存的所述第一照片；对比子单元，用于将所述第一照片中的物体图像与所述待处理照片中的物体图像进行一一对比；确定子单元，用于确定所述待处理照片中与所述第一照片中的物体图像相似度大于或等于预定值的物体图像为所述预定物体图像。

可选地，所述处理模块包括以下至少之一：第一处理单元，用于根据预先保存的第二照片对擦除了所述其他物体图像的待处理照片进行修复处理，其中，所述第二照片包括所述待处理照片中除所述物体图像之外的背景图像；第二处理单元，用于根据所述待处理照片中所述其他物体图像周围的图像对所述待处理照片进行修复处理。

可选地，所述第一处理单元包括：获取子单元，用于获取所述第二照片中与所述待处理照片中的所述其他物体图像的位置对应的背景图像；填充子单元，用于将所述第二照片中的与所述其他物体图像的位置对应的背景图像填充到所述待处理照片中擦除了所述其他物体图像的位置。

通过本发明，采用识别待处理照片中的预定物体图像；擦除所述待处理照片中的其他物体图像，其中，所述其他物体图像为所述待处理照片中除识别的所述预定物体图像之外的与所述预定物体图像同类的物体图像；对擦除了所述其他物体图像的待处理照片进行修复处理。解决了相关技术中存在的需要人工干预从而导致无法及时消除照片中的无关图像，用户体验度低的问题，进而实现了拍照完成后由终端智能识别并消除照片中的无关图像，提高照片处理效率，改善用户体验的效果。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的照片处理方法的流程图；

图2是根据本发明实施例的照片处理装置的结构框图；

图3是根据本发明实施例的照片处理装置中识别模块22的结构框图；

图4是根据本发明实施例的照片处理装置中识别单元32的结构框图；

图5是根据本发明实施例的照片处理装置中处理模块26的结构框图；

图6是根据本发明实施例的照片处理装置中第一处理单元52的结构框图；

图7是根据本发明实施例的照片修复整体流程图；

图8是根据本发明实施例的预置参考人像的流程图；

图9是根据本发明实施例的用户拍摄一张景点照片的完整操作流程图。

具体实施方式

下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。

在本实施例中提供了一种照片处理方法，图1是根据本发明实施例的照片处理方法的流程图，如图1所示，该流程包括如下步骤：

步骤S102，识别待处理照片中的预定物体图像；

步骤S104，擦除上述待处理照片中的其他物体图像，其中，该其他物体图像为上述待处理照片中除识别的预定物体图像之外的与该预定物体图像同类的物体图像；

步骤S106，对擦除了上述其他物体图像的待处理照片进行修复处理。

其中，执行上述操作的可以是终端，并且，上述操作可以是终端拍照完后，在保存照片之前执行的操作，通过上述步骤，智能识别需要保留的物体图像，并将其他的无关图像擦除，无需人工干预，从而实现了智能保留用户希望存在的图像，并且，上述处理流程可以是在终端中直接进行的，从而无需倒出照片，并利用专门的修图软件进行修图的，节省照片修复时间，解决了相关技术中存在的需要人工干预从而导致无法及时消除照片中的无关图像，用户体验度低的问题，进而实现了拍照完成后由终端智能识别并消除照片中的无关图像，提高照片处理效率，改善用户体验的效果。

在一个可选的实施例中，识别上述待处理照片中的预定物体图像包括：根据预先保存的第一照片识别该待处理照片中的预定物体图像。在该实施例中，可以预先拍摄预定数量的需要保留的上述预定物体图像，从而在后续拍照之后，可以利用预先拍摄的照片识别后续拍照的照片中的上述预定物体图像，提高预定物体图像的识别精度，当然，上述预先保存的第一照片的获取方式还可以是其他的方式，除了可以是终端本身拍摄的之外，也可以是接收的其他终端传送的照片，也可以是下载的照片等等。或者，也可以通过扫描上述预定物体图像对应的预定物体的方式识别上述待处理照片中的预定物体图像，在该实施例中，可以根据需要触发终端中的扫描功能，通过扫描预定物体的方式确定预定物体的图像，从而依据扫描确定的预定物体的图像识别待处理照片中的预定物体图像。

在一个可选的实施例中，根据上述第一照片识别待处理照片中的预定物体图像包括：调用预先保存的第一照片；将该第一照片中的物体图像与待处理照片中的物体图像进行一一对比；确定待处理照片中与上述第一照片中的物体图像相似度大于或等于预定值的物体图像为预定物体图像。其中，在进行对比时，可以采用人脸识别算法进行对比，也可以采用人物相貌特征识别算法进行对比，或者还可以采用其他的方式进行对比。

在一个可选的实施例中，对擦除了上述其他物体图像的待处理照片进行修复处理包括以下至少之一：根据预先保存的第二照片对擦除了上述其他物体图像的待处理照片进行修复处理，其中，上述第二照片包括上述待处理照片中除上述物体图像之外的背景图像。即，在拍摄上述预定物体图像和背景图像之前，可以单独拍摄预定数量的背景图像的照片，从而在修复照片时，可以利用预先拍照的背景图像进行照片修复，从而提高修复准确度。还可以采用根据上述待处理照片中其他物体图像周围的图像对该待处理照片进行修复处理，即，可以根据周围的图像估计出需要修复的位置上的背景图像，从而进行填充。

在一个可选的实施例中，根据预先保存的第二照片对擦除了上述其他物体图像的待处理照片进行修复处理包括：获取上述第二照片中与上述待处理照片中的其他物体图像的位置对应的背景图像；将上述第二照片中的与其他物体图像的位置对应的背景图像填充到上述待处理照片中擦除了上述其他物体图像的位置。从而可以得到理想的单人照片。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

在本实施例中还提供了一种照片处理装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。

图2是根据本发明实施例的照片处理装置的结构框图，如图2所示，该装置包括识别模块22、擦除模块24和处理模块26，下面对该装置进行说明。

识别模块22，用于识别待处理照片中的预定物体图像；擦除模块24，连接至上述识别模块22，用于擦除上述待处理照片中的其他物体图像，其中，上述其他物体图像为上述待处理照片中除识别的预定物体图像之外的与该预定物体图像同类的物体图像；处理模块26，连接至上述擦除模块24，用于对擦除了上述其他物体图像的待处理照片进行修复处理。

图3是根据本发明实施例的照片处理装置中识别模块22的结构框图，如图3所示，该识别模块22包括识别单元32，下面对该识别单元32进行说明。

识别单元32，用于根据预先保存的第一照片识别待处理照片中的上述预定物体图像；或者，通过扫描上述预定物体图像对应的预定物体的方式识别该待处理照片中的预定物体图像。

图4是根据本发明实施例的照片处理装置中识别单元32的结构框图，如图4所示，该识别单元32包括调用子单元42、对比子单元44和确定子单元46，下面对该识别单元32进行说明。

调用子单元42，用于调用预先保存的上述第一照片；对比子单元44，连接至上述调用子单元42，用于将上述第一照片中的物体图像与待处理照片中的物体图像进行一一对比；确定子单元46，连接至上述对比子单元44，用于确定上述待处理照片中与第一照片中的物体图像相似度大于或等于预定值的物体图像为上述预定物体图像。

图5是根据本发明实施例的照片处理装置中处理模块26的结构框图，如图5所示，该处理模块26包括第一处理单元52和/或第二处理单元54，下面对该处理模块26进行说明。

第一处理单元52，用于根据预先保存的第二照片对擦除了上述其他物体图像的待处理照片进行修复处理，其中，该第二照片包括上述待处理照片中除物体图像之外的背景图像；第二处理单元54，用于根据上述待处理照片中其他物体图像周围的图像对该待处理照片进行修复处理。

图6是根据本发明实施例的照片处理装置中第一处理单元52的结构框图，如图6所示，该第一处理单元52包括获取子单元62和填充子单元64，下面对该修复单元52进行说明。

获取子单元62，用于获取上述第二照片中与待处理照片中的其他物体图像的位置对应的背景图像；填充子单元64，连接至上述获取子单元62，用于将上述第二照片中的与其他物体图像的位置对应的背景图像填充到上述待处理照片中擦除了上述其他物体图像的位置。

其中，上述的预定物体图像可以是人物图像，也可以是其他的动物图像等等，下面以上述预定物体图像为人物图像为例，对本发明进行说明。

本发明实施例中主要是利用整合人物识别和人像擦除技术实现的一种智能人物识别的景点拍照模式，即在目前的拍照模块中增加一个景点拍照模式，用户无需手动勾选照片上要去除的内容，只需进行正常拍照操作，系统即可智能去除照片中的多余人物。整个发明可以通过如下四个功能模块实现：预置参考人像、人物识别(对应于上述的识别模块22)、人物擦除(对应于上述的擦除模块24)和图片修复(对应于上述的处理模块26)。下面结合该四个模块对整体操作流程进行说明，该流程包括如下步骤：

第一步：用户进入拍照的景点拍照模式，在拍照前需要利用预置参考人像模块先预置参考人物照片；

第二步：用户开始拍摄人物景点照，首先对屏幕进行手动对焦；

第三步：当系统识别出有对焦时，自动拍摄一张照片，利用人物识别模块进行人物识别，当预览窗口显示绿色对焦框表示识别完成；

第四步：用户看到绿色对焦框后点击拍照按键拍照，此时系统拍摄一张照片，并利用人物擦除模块对照片上未识别成功的人物进行擦除，再利用图片修复模块对擦除人像的照片景物进行图片修复，最终将修改后的照片自动保存。

下面结合上述各模块对本发明的整流流程进行说明：图7是根据本发明实施例的照片修复整体流程图，如图7所示，该流程包括如下步骤：

步骤S701：预置参考人像，用于搜索照片中要保留的人物；

步骤S702：人物识别用于将拍摄到的照片里的人物与参考人像库的人像进行对比，识别出要保留在照片上的人物，实现机制是在取景框时自动拍摄一张照片，通过与参考人像库中的人像照片一一对比，主要是进行人物的体貌特征对比，提取到多个相似体貌则判定为同一人；

步骤S703：人物擦除，用于将拍摄到的照片上未识别成功的人像进行擦除；

步骤S704：图像修复，用于对擦除人像后的照片进行细节修复。

以用户同时预置N张(N为自然数)不同人物的参考人像为例介绍一个完整的预置参考人像操作流程，图8是根据本发明实施例的预置参考人像的流程图，如图8所示，该流程包括如下步骤：

步骤S801：用户启动拍照的景点拍照模块；

步骤S802：系统检测人像库是否为空；

步骤S803：检测到人像库为空，系统默认开启预置参考人像功能，界面显示为人物扫描；

步骤S804：检测到人像库不为空，系统进入正常拍照界面；

步骤S805：若人像库中的人物图像不正确或不清楚时，也可以重新扫描人物，以得到正确清楚的人物图像，此时用户可以通过界面上的设置菜单启动预置功能，执行扫描操作；

步骤S806：用户通过后置(或前置)摄像头对准要预置的人物全身(或上半身)，系统界面自动显示自上而下扫描过程，同时后台自动保存一张人物照片，界面显示扫描完成。用户可按相同的操作连续扫描N个人物(N为自然数)；

步骤S807：用户点击完成按键，退出人像预置界面。

图9是根据本发明实施例的用户拍摄一张景点照片的完整操作流程图，如图9所示，该流程图包括如下步骤：

步骤S901：用户打开拍照，进入景点拍照模式；

步骤S902：用户点击取景框对焦；

步骤S903：系统后台自动先拍摄十张照片(第一张作为参考人像库对比照，十张照片全部临时保存，作为后续图片修复参考)，将第一张照片与参考人像库的照片进行一一对比，通过寻找相似体貌特征的方法进行人物识别；

步骤S904：系统判断人物识别是否成功，在照片中识别到与参考人像库相同的人物为成功，否则为失败；

步骤S905：当识别成功时，对已识别人物在预览窗口显示绿色对焦框；

步骤S906：当识别失败时，进行预览窗口常规自动对焦，并显示绿色对焦框；

步骤S907：当用户看到屏幕出现绿色对焦框时，点击拍照按键；

步骤S908：系统自动去除照片上未识别成功的人物，仅保留与参考人像库相同的人物；

步骤S909：系统自动对擦除多余人像的照片进行景物修复，修复方法是通过将之前临时保存的十张照片与被抠图照片进行对比，修补出被抠图部分的景物细节；

步骤S910：照片修复完成后，系统自动保存照片，拍照完成。

在上述实施例中，在取景框对焦后，进行人物识别时，可以使用人脸识别的算法，但人脸识别相较人物体貌特征识别具有局限性，人物体貌特征识别在预置参考人像时同一人物仅需内置一张照片即可。

本发明主要是整合人物识别、人像擦除和图片修复技术，实现一种智能人物识别的景点拍照模式，此模式能自动识别出要拍摄的人物，自动去除照片中的其他闲杂人，改善用户在拍景点照片时容易拍到闲杂人的痛点。

针对相关技术中的，用户只能通过手动选取或系统自动识别动态背景的方式删除照片中的多余人物，删除内容具有一定局限性。而本发明实施例中的技术方案具有一定的改善效果：通过本发明实施例中的方案可以自动识别出照片中要保留的人物，其他未被识别成功的人物均作为多余人物删除，同时保留景物细节，整个操作更加智能化。可以同时擦除照片中动态和静态的多余人物，删除效果更充分。识别参考人像是根据体貌特征进行识别，在预置参考人像时同一人物仅需预置一张照片即可，用户无需一次预置多角度照片，操作更便捷。

需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述模块分别位于多个处理器中。

本发明的实施例还提供了一种存储介质。可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的程序代码：

S1，识别待处理照片中的预定物体图像；

S2，擦除上述待处理照片中的其他物体图像，其中，该其他物体图像为上述待处理照片中除识别的预定物体图像之外的与该预定物体图像同类的物体图像；

S3，对擦除了上述其他物体图像的待处理照片进行修复处理。

可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

可选地，在本实施例中，处理器根据存储介质中已存储的程序代码执行上述步骤S1-S3。

可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。

显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种照片处理方法，其特征在于，包括：

识别待处理照片中的预定物体图像；

擦除所述待处理照片中的其他物体图像，其中，所述其他物体图像为所述待处理照片中除识别的所述预定物体图像之外的与所述预定物体图像同类的物体图像；

对擦除了所述其他物体图像的待处理照片进行修复处理。

2.根据权利要求1所述的方法，其特征在于，识别所述待处理照片中的所述预定物体图像包括：

根据预先保存的第一照片识别所述待处理照片中的所述预定物体图像；或者，

通过扫描所述预定物体图像对应的预定物体的方式识别所述待处理照片中的所述预定物体图像。

3.根据权利要求2所述的方法，其特征在于，根据所述第一照片识别所述待处理照片中的所述预定物体图像包括：

调用预先保存的所述第一照片；

将所述第一照片中的物体图像与所述待处理照片中的物体图像进行一一对比；

确定所述待处理照片中与所述第一照片中的物体图像相似度大于或等于预定值的物体图像为所述预定物体图像。

4.根据权利要求1所述的方法，其特征在于，对擦除了所述其他物体图像的待处理照片进行修复处理包括以下至少之一：

根据预先保存的第二照片对擦除了所述其他物体图像的待处理照片进行修复处理，其中，所述第二照片包括所述待处理照片中除所述物体图像之外的背景图像；

根据所述待处理照片中所述其他物体图像周围的图像对所述待处理照片进行修复处理。

5.根据权利要求4所述的方法，其特征在于，根据预先保存的所述第二照片对擦除了所述其他物体图像的待处理照片进行修复处理包括：

获取所述第二照片中与所述待处理照片中的所述其他物体图像的位置对应的背景图像；

将所述第二照片中的与所述其他物体图像的位置对应的背景图像填充到所述待处理照片中擦除了所述其他物体图像的位置。

6.一种照片处理装置，其特征在于，包括：

识别模块，用于识别待处理照片中的预定物体图像；

擦除模块，用于擦除所述待处理照片中的其他物体图像，其中，所述其他物体图像为所述待处理照片中除识别的所述预定物体图像之外的与所述预定物体图像同类的物体图像；

处理模块，用于对擦除了所述其他物体图像的待处理照片进行修复处理。

7.根据权利要求6所述的装置，其特征在于，所述识别模块包括：

识别单元，用于根据预先保存的第一照片识别所述待处理照片中的所述预定物体图像，或者通过扫描所述预定物体图像对应的预定物体的方式识别所述待处理照片中的所述预定物体图像。

8.根据权利要求7所述的装置，其特征在于，所述识别单元包括：

调用子单元，用于调用预先保存的所述第一照片；

对比子单元，用于将所述第一照片中的物体图像与所述待处理照片中的物体图像进行一一对比；

确定子单元，用于确定所述待处理照片中与所述第一照片中的物体图像相似度大于或等于预定值的物体图像为所述预定物体图像。

9.根据权利要求6所述的装置，其特征在于，所述处理模块包括以下至少之一：

第一处理单元，用于根据预先保存的第二照片对擦除了所述其他物体图像的待处理照片进行修复处理，其中，所述第二照片包括所述待处理照片中除所述物体图像之外的背景图像；

第二处理单元，用于根据所述待处理照片中所述其他物体图像周围的图像对所述待处理照片进行修复处理。

10.根据权利要求9所述的装置，其特征在于，所述第一处理单元包括：

获取子单元，用于获取所述第二照片中与所述待处理照片中的所述其他物体图像的位置对应的背景图像；

填充子单元，用于将所述第二照片中的与所述其他物体图像的位置对应的背景图像填充到所述待处理照片中擦除了所述其他物体图像的位置。