CN105513098A - 一种图像处理的方法和装置 - Google Patents

Abstract

本发明公开了一种图像处理的方法和装置，属于计算机技术领域。所述方法包括：获取目标视频中的目标图像帧；在所述目标图像帧中，检测具有边缘的图像区域；根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧；在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中。采用本发明，可以提高图片展示的灵活性。

Description

一种图像处理的方法和装置

技术领域

本发明涉及计算机技术领域，特别涉及一种图像处理的方法和装置。

背景技术

随着计算机技术的发展，图像技术和数码拍摄技术也得到了快速的发展和广泛的应用，人们经常会使用数码相机等设备进行拍摄。随着终端存储的照片数量的增多，电子相册功能成为了一种非常常用的功能。

电子相册的生成方式一般是，在电子相册的应用程序中，选择预先设置的多个背景图片中的一个，然后选择一张或多张照片，将这些照片设置在已经选好的背景图片之上，并且，可以为这些图片设置幻灯片切换的显示效果，或者，设置在同一界面同时展示多张照片的显示效果。

在实现本发明的过程中，发明人发现现有技术至少存在以下问题：

通过上述方式制作的电子相册，在进行图片展示时，只能在较为死板的背景图片上层展示照片，进行图片展示的灵活性较差。

发明内容

为了解决现有技术的问题，本发明实施例提供了一种图像处理的方法和装置。所述技术方案如下：

第一方面，提供了一种图像处理的方法，所述方法包括：

获取目标视频中的目标图像帧；

在所述目标图像帧中，检测具有边缘的图像区域；

根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧；

在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中。

第二方面，提供了一种图像处理的装置，所述装置包括：

获取模块，用于获取目标视频中的目标图像帧；

检测模块，用于在所述目标图像帧中，检测具有边缘的图像区域；

选取模块，用于根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧；

添加模块，用于在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中。

本发明实施例提供的技术方案带来的有益效果是：

本发明实施例中，获取目标视频中的目标图像帧，在目标图像帧中，检测具有边缘的图像区域，根据该边缘的图像特征，在目标视频中，选取目标图像帧之外的包含该边缘的其它图像帧，在目标图像帧和其它图像帧中，将待展示的图片添加到该边缘内的图像区域中。这样，可以灵活地将待展示的图片添加到视频中的某图像区域中进行展示，可以提高进行图片展示的灵活性。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种图像处理的方法流程图；

图2a、图2b、图2c是本发明实施例提供的一种界面显示示意图；

图3a、图3b是本发明实施例提供的一种界面显示示意图；

图4是本发明实施例提供的一种图像处理的装置结构示意图；

图5是本发明实施例提供的一种终端结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。

实施例一

本发明实施例提供了一种图像处理的方法，如图1所示，该方法的处理流程可以包括如下的步骤：

步骤101，获取目标视频中的目标图像帧。

步骤102，在目标图像帧中，检测具有边缘的图像区域。

步骤103，根据该边缘的图像特征，在目标视频中，选取目标图像帧之外的包含该边缘的其它图像帧。

步骤104，在目标图像帧和其它图像帧中，将待展示的图片添加到该边缘内的图像区域中。

本发明实施例中，获取目标视频中的目标图像帧，在目标图像帧中，检测具有边缘的图像区域，根据该边缘的图像特征，在目标视频中，选取目标图像帧之外的包含该边缘的其它图像帧，在目标图像帧和其它图像帧中，将待展示的图片添加到该边缘内的图像区域中。这样，可以灵活地将待展示的图片添加到视频中的某图像区域中进行展示，可以提高进行图片展示的灵活性。

实施例二

本发明实施例提供了一种图像处理的方法，该方法的执行主体可以为终端。其中，终端可以是手机、平板电脑、台式计算机等。本实施例中，结合制作电子相册的应用场景，以执行主体为手机为例进行方案的详细说明，其他终端的情况与之类似，本实施例不再累述。

下面将结合具体实施方式，对图1所示的处理流程进行详细的说明，内容可以如下：

步骤101，获取目标视频中的目标图像帧。

在实施中，可以在终端中安装并开启电子相册的应用程序，在应用程序的电子相册制作页面中，可以设置有添加背景视频的选项，用户可以通过该选项从本地或网络侧获取视频(即目标视频)导入该应用程序中。导入目标视频后，在目标视频中获取目标图像帧，其获取的方式可以是由应用程序在目标视频中随机挑选图像帧作为目标图像帧，也可以是按照预设的时间或帧数等挑选图像帧作为目标图像帧。

可选地，可以在播放目标视频时由用户选择目标图像帧，相应地，步骤101的处理过程可以如下：播放目标视频，当接收到视频暂停指令时，获取当前显示的图像帧作为目标图像帧。

在实施中，在上述电子相册制作页面中，可以设置有用于播放视频的播放按键和用于暂停视频的暂停按键，当用户选择并导入目标视频后，可以点击该播放按键播放目标视频，在目标视频播放的过程中，用户可以点击暂停按键，暂停目标视频的播放，此时，当前界面上会显示目标视频中的某一图像帧(即目标图像帧)。另外，如果用户认为当前界面上显示的图像帧不符合其要求，则可以点击播放按键继续播放目标视频，然后点击暂停按键获取当前显示的图像帧，直至其选定符合其要求的图像帧。

可选的，可以预先设置获取目标图像帧的位置，相应地，步骤101的处理过程可以如下：获取目标视频中预设位置处的目标图像帧。

在实施中，在上述应用程序中，可以预先设置获取目标图像帧的位置，该预设位置可以为在目标视频中的帧数，如第30帧，该预设位置也可以为目标视频中的播放时间点，如1秒。当用户导入目标视频后，应用程序可以自动获取预设位置的图像帧(即目标图像帧)。

步骤102，在目标图像帧中，检测具有边缘的图像区域。

其中，边缘可以是图像中的线条或区域边界等，该边缘可以是封闭边缘或不封闭边缘。本实施例中以封闭边缘为例进行方案的详细说明，不封闭边缘的情况与之类似，本实施例不再累述。封闭边缘在实际中可以是视频中某个相框的内框，或者可以是视频中某个街边的广告牌等。

在实施中，当获取到目标图像帧之后，终端可以基于边缘检测算法，对目标图像帧进行封闭边缘(如矩形、近似矩形、圆形、近似圆形等)检测，在检测的过程中，如果在目标图像帧中存在完整的封闭边缘，则判定该目标图像帧中存在具有封闭边缘的图像区域；如果在目标图像帧中存在某封闭边缘的一部分，且此部分与图像帧的边缘形成封闭图形，则可以对该边缘进行延长处理，计算其延长线能否在一个预设长度范围内构成一个封闭图形，如果能够组成一个封闭图形，则判定该目标图像帧中存在具有封闭边缘的图像区域，否则，判定该目标图像帧中不存在具有封闭边缘的图像区域；如果在目标图像帧中不存边缘，则判定该目标图像帧中不存在具有封闭边缘的图像区域。

另外，在该步骤的处理过程中，还可以对封闭边缘的形状进行限定，如近似矩形、近似菱形等。

可选地，可以在目标图像帧中，根据用户选取的区域，检测具有封闭边缘的图像区域，相应地，步骤102的处理过程可以如下：在显示目标图像帧的状态下，接收区域选取指令；在目标图像帧中，根据区域选取指令对应的图像区域，基于边缘检测算法，检测具有边缘的图像区域。

在实施中，当点击暂停按键使正在播放的目标视频暂停后，界面上会显示目标图像帧，在此状态下，用户可以用手指在目标图像帧的显示区域中进行滑动触碰操作，涂抹想要添加照片的图像区域，终端检测并标记触碰信号的运动轨迹覆盖的图像区域。用户在选择完毕后，可以点击确定按键，终端则会接收到检测指令，这时，终端可以在轨迹覆盖的图像区域内，使用边缘检测算法，检测封闭边缘，也可以在该图像区域扩大一定范围后的图像区域内，检测封闭边缘。如果终端检测到封闭边缘，则可以在目标图像帧中标识出该封闭边缘；如果终端未检测到封闭边缘，则可以显示相应的提示信息，以提示用户重新进行区域选取。

另外，也可以不用设置上述的确定按键，在终端检测到触碰信号消失后，可以直接触发终端在轨迹覆盖的图像区域内或在该图像区域扩大一定范围后的图像区域内，使用边缘检测算法，检测封闭边缘。其它步骤与点击确定按键的情况相类似，在此不作赘述。

步骤103，根据该边缘的图像特征，在目标视频中，选取目标图像帧之外的包含该边缘的其它图像帧。

其中，封闭边缘的图像特征是指封闭边缘附近像素点的像素值的数据特征，以及封闭边缘整体的特征，例如，封闭边缘内外侧像素点的各通道的像素值的取值范围，封闭边缘的尺寸等。根据这些图像特征，终端可以基于一定的近似度，在多个相似的图像帧中辨别出该封闭边缘。

在实施中，当终端在目标图像帧中检测到上述封闭边缘后，可以对该封闭边缘的图像特征进行记录。在上述电子相册制作页面中，可以设置有制作启动按键，当用户点击制作启动按键时，终端会接收到启动指令，这时，终端可以根据该封闭边缘的图像特征，对目标视频的其它的图像帧进行检测，可以对目标视频帧之外的所有视频帧进行检测，也可以对部分视频帧进行检测，如果某图像帧中具有与该封闭边缘的图像特征相同或相近似的图像特征，则选取该图像帧(即上述其它图像帧)，并可以记录该图像帧中的封闭边缘的位置。选取的图像帧和目标图像帧为待添加图片的图像帧。

另外，在其它图像帧中，该封闭边缘可能会发生位置变化，在其它图像帧中该封闭边缘的一部分可能移出了图像帧，即该图像帧中只包含该封闭边缘的一部分，此时，终端可以根据该封闭边缘的的当前图像以及之前记录的该封闭边缘的尺寸，通过计算确定完整的封闭边缘。

可选地，可以在目标视频中检测与目标图像帧相邻的能够连接成视频片段的且都包含上述边缘的图像帧，相应地，步骤103的处理过程可以如下：根据边缘的图像特征，在目标视频中，由目标图像帧开始，向前和/或向后逐个检测图像帧中是否包含边缘；当检测到不包含边缘的图像帧时，停止检测，并选取已检测到的目标图像帧之外的包含边缘的其它图像帧。

在实施中，以向后检测为例，可以根据封闭边缘的图像特征，对目标视频中的目标图像帧的后一个图像帧，进行检测，确定其中是否包含该封闭边缘，如果后一个图像帧中不包含上述封闭边缘，则停止检测；如果后一个图像帧中包含上述封闭边缘，则进一步检测此后一个图像帧的后一个图像帧是否包含上述封闭边缘，如果包含上述封闭边缘，则继续向后逐个检测，直至某一个图像帧不包含上述封闭边缘时，停止检测。在停止检测后，选取已检测到的目标图像帧之外的包含上述封闭边缘的其它图像帧。向前检测的处理方式与向后检测的处理方式相类似，在此不做累述。

可选地，可以利用图像运动估计法辅助检测图像帧中是否包含上述边缘，相应的处理过程可以如下：根据上述边缘的图像特征，在目标视频中，由目标图像帧开始，向前和/或向后逐个检测图像帧，根据图像运动估计法，估计该边缘在检测的图像帧中的位置，并根据估计的位置，确定检测的图像帧中是否包含该边缘。

其中，图像运动估计法可以是一种根据相邻图像帧中的某局部图像(如封闭边缘)的位置变化估算出该局部图像的运动规律，进而确定该局部图像在其它图像帧中位置的方法。如图2a、2b、2c所示，为某局部图像(图中的相框)在连续图像帧中的运动效果示意。

在实施中，以向后检测为例，在目标视频中，以目标图像帧为起始帧，根据上述封闭边缘的图像特征，检测其后一个图像帧(可称作第一图像帧)中是否包含该封闭边缘，如果检测到该封闭边缘，则获取该封闭边缘的位置，将该位置与该封闭边缘在目标图像帧中的位置进行比较，确定该封闭边缘运动的方向和距离，然后，根据该方向、距离以及该封闭边缘在第一图像帧中的位置，计算该封闭边缘继续运动后在第一图像帧的后一个图像帧(可称作第二图像帧)中的位置，进而在第二图像帧中，在该位置附近的图像区域中，根据该封闭边缘的图像特征，检测该封闭边缘。依此类推，直至某一个图像帧不包含上述封闭边缘时，停止检测。在停止检测后，选取已检测到的目标图像帧之外的包含上述封闭边缘的其它图像帧。向前检测的处理方式与向后检测的处理方式相类似，在此不做累述。

步骤104，在目标图像帧和其它图像帧中，将待展示的图片添加到该边缘内的图像区域中。

其中，待展示的图片可以包括一张或多张，可以是独立的图片，或者是某个待展示的视频中的图像帧。本实施例以制作电子相册的应用场景为例，所以待展示的图片可以为待制作电子相册的图片。

在实施中，在上述电子相册制作页面中，可以设置有添加图片(如照片)的选项，用户可以通过该选项在本地获取图片或通过拍照、下载等方式获取图片，并将获取的图片(即待展示的图片)进行缓存，该获取过程可以在播放目标视频之前进行，也可以在确定包含上述封闭边缘的图像帧之后进行。终端在确定待添加图片的图像帧后，可以将缓存的图片添加到这些图像帧中的封闭边缘内的图像区域中，缓存的图片可以为一张或多张，可以按照一定的分配规则将图片分配到各个图像帧中，每张图片可以分配多个图像帧。在将某张图片添加到某个图像帧中时，可以将图片置于图像帧中的上述封闭边缘内的图像区域的上层。如图3a所示为添加图片之前的图像帧，图3b所示为添加图片之后的图像帧。添加完毕后，应用程序将添加图片后的目标视频进行输出，可以以视频文件的形式输出，此即为最终得到的电子相册，该电子相册可以使图片在视频中得到多样而自然的展示。

可选地，步骤104的处理过程可以如下：在目标图像帧和其它图像帧中，将待展示的图片设置在上述边缘内的图像区域中的原图像的下层；对该边缘内的图像区域中的原图像进行透明化处理。

在实施中，首先，可以将检测出的封闭边缘内的图像区域中原图像的像素点都设置成同一颜色，此颜色可以是当前图像帧中没有出现或出现很少(该颜色的像素点数目小于预设阈值)的颜色。然后，可以将上述缓存的待展示的图片设置在原图像的下层。再后，可以将上层的单色图像的透明度设置为100％，即设置为全透明，这样，下层的图片就可以显示出来。这种处理方式可以减少处理资源的使用，提高处理效率。

可选地，将待展示的图片添加到上述边缘内的图像区域中时，可以先对待展示的图片进行尺寸调整，相应地，步骤104的处理过程可以如下：在目标图像帧和其它图像帧中，根据上述边缘的尺寸，对待展示的图片的尺寸进行调整，并将调整尺寸后的图片添加到该边缘内的图像区域中。

在实施中，在将某张图片向某个图像帧添加时，可以先获取该图像帧中上述封闭边缘的尺寸，然后通过缩放、变形、剪切等方式，将该图片的尺寸调整为该封闭边缘的尺寸，最后再将调整尺寸后的图片添加到封闭边缘中。

可选地，在添加图片时，可以根据人脸的位置对图片尺寸进行调整，相应的处理过程可以如下：根据上述边缘的尺寸，以及待展示的图片中的人脸位置，对待展示的图片的尺寸进行调整。

在实施中，在将某张图片向某个图像帧添加时，可以根据人脸识别算法，确定该图片中是否包含人脸，如果包含人脸则可以进一步确定人脸在图片中的位置，根据人脸的位置对图片进行剪切，将人脸置于剪切后图片的中部，还可以对图片进行缩放、变形等处理，最后，将调整后的图片添加到上述封闭边缘中。

可选地，对于获取多张目标图像帧的情况，上述步骤101-104的处理流程还可以如下：获取目标视频中的多个目标图像帧；分别在多个目标图像帧中，检测具有边缘的图像区域；分别根据每个边缘的图像特征，在目标视频中，选取目标图像帧之外的包含每个边缘的其它图像帧；在目标图像帧和其它图像帧中的具有相同的边缘的图像帧中，在相同的边缘内的图像区域中，添加同一张待展示的图片。

在实施中，在目标视频播放的过程中，用户可以将目标视频暂停于任一图像帧(即一个目标图像帧)，并在该图像帧中进行区域选取，然后终端基于上述的方法检测图像帧中具有封闭边缘的图像区域。检测完毕后，可以继续播放目标视频，用户可以将目标视频暂停于其它的图像帧(即第二个目标图像帧)处，用户可以在其中进行区域选取，然后终端基于上述的方法检测图像帧中具有封闭边缘的图像区域。按照此方式，可以选取多个目标图像帧，并确定每个目标图像帧中的封闭边缘。每当终端在一个目标图像帧中根据用户的选取区域检测出封闭边缘之后，终端可以按照步骤103中的方式自动检测该目标图像帧相邻的包含有相同封闭边缘的其它图像帧并记录，该目标图像帧和检测到的其它图像帧可以形成一个视频片段。对于具有相同封闭边缘的图像帧，它们属于同一视频片段。

然后，用户可以进行待展示的图片的导入，此时终端可以确定上述具有相同封闭边缘的视频片段的数目n，并提示用户导入图片的数目不要超过n。当用户导入图片完毕后，可以在上述具有相同封闭边缘的视频帧中添加同一张图片，即每个视频片段中只添加同一张图片。如果待展示的图片的数目小于上述具有相同封闭边缘的视频片段的数目n，可以将某一张图多个图片添加到多个视频片段中。这样，在每一个片段中，封闭边缘内的图片不会发生变化，可以增强电子相册的真实感。

另外，当用户来查看制作完毕的电子相册时，检查视频中添加的图片的位置是否存在错误，如果出现错误，则可以返回制作界面，将目标视频暂停到所有出现错误的图像帧中最前面的图像帧或最后面的图像帧，并选择进行重新检测的方向(向前或向后)，在其中进行区域选择，并由终端根据选择的图像区域，检测封闭边缘，并进一步执行上述流程后续步骤的处理，在进行步骤103的选取图像帧的处理时，可以根据用户选择的进行重新检测的方向，逐个对图像帧进行封闭边缘的检测，以选取包含该封闭边缘的图像帧。

可选的，可以对图像帧中包含的多个具有边缘的图像区域分别添加图片，相应的处理过程可以如下：在目标图像帧中，检测多个具有边缘的图像区域；分别根据检测出的每个图像区域对应的边缘的图像特征，在目标视频中，选取目标图像帧之外的包含多个边缘中任一边缘的其它图像帧。

在实施中，在获取到目标图像帧之后，如果目标图像帧中存在多个封闭边缘，例如，目标图像帧中存在一个相框和一个笔记本，可以通过与步骤102处记载的处理方式类似的方式检测目标图像帧中的多个封闭边缘，具体可以由用户进行多次区域选取的操作，每一次区域选取操作后，终端在用户选取的区域处，检测一个具有封闭边缘的图像区域，多次区域选取操作后，则可以检测出多个具有封闭边缘的图像区域。进而，终端可以获取每个封闭边缘的图像特征，在目标图像帧之外的图像帧中，分别检测每个封闭边缘，以选取图像帧，选取的图像帧中包括多个封闭边缘中至少一个。具体的选取方式与步骤103中类似，可以参见上面的相关内容。在选取图像帧之后，可以在目标图像帧和选取的图像帧中，在每个不同的封闭边缘内的图像区域中，添加不同的待展示的图片，或者，也可以添加相同的待展示的图片。

本发明实施例中，获取目标视频中的目标图像帧，在目标图像帧中，检测具有边缘的图像区域，根据该边缘的图像特征，在目标视频中，选取目标图像帧之外的包含该边缘的其它图像帧，在目标图像帧和其它图像帧中，将待展示的图片添加到该边缘内的图像区域中。这样，可以灵活地将待展示的图片添加到视频中的某图像区域中进行展示，可以提高进行图片展示的灵活性。

实施例三

基于相同的技术构思，本发明实施例还提供了一种图像处理的装置，如图4所示，该装置包括：

获取模块410，用于获取目标视频中的目标图像帧；

检测模块420，用于在所述目标图像帧中，检测具有边缘的图像区域；

选取模块430，用于根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧；

添加模块440，用于在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中。

可选地，所述获取模块410，用于：

播放目标视频，当接收到视频暂停指令时，获取当前显示的图像帧作为目标图像帧；或者，

获取目标视频中预设位置处的目标图像帧。

可选地，所述检测模块420，用于：

在显示所述目标图像帧的状态下，接收区域选取指令；

在所述目标图像帧中，根据所述区域选取指令对应的图像区域，基于边缘检测算法，检测具有边缘的图像区域。

可选地，所述选取模块430，用于：

根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧中是否包含所述边缘；

当检测到不包含所述边缘的图像帧时，停止检测，并选取已检测到的所述目标图像帧之外的包含所述边缘的其它图像帧。

可选地，所述选取模块430，用于：

根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧，根据图像运动估计法，估计所述边缘在检测的图像帧中的位置，并根据估计的位置，确定所述检测的图像帧中是否包含所述边缘。

可选地，所述添加模块440，用于：

在所述目标图像帧和所述其它图像帧中，将所述待展示的图片设置在所述边缘内的图像区域中的原图像的下层；

对所述边缘内的图像区域中的原图像进行透明化处理。

可选地，所述添加模块440，用于：

在所述目标图像帧和所述其它图像帧中，根据所述边缘的尺寸，对所述待展示的图片的尺寸进行调整，并将调整尺寸后的图片添加到所述边缘内的图像区域中。

可选地，所述添加模块440，用于：

根据所述边缘的尺寸，以及所述待展示的图片中的人脸位置，对所述待展示的图片的尺寸进行调整。

可选地，所述获取模块410，用于：获取目标视频中的多个目标图像帧；

所述检测模块420，用于：分别在所述多个目标图像帧中，检测具有边缘的图像区域；

所述选取模块430，用于：分别根据每个边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述每个边缘的其它图像帧；

所述添加模块440，用于：在所述目标图像帧和所述其它图像帧中的具有相同的边缘的图像帧中，在所述相同的边缘内的图像区域中，添加同一张待展示的图片。

可选地，所述检测模块420，用于：在所述目标图像帧中，检测多个具有边缘的图像区域；

所述选取模块430，用于：分别根据检测出的每个图像区域对应的边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含多个边缘中任一边缘的其它图像帧。

可选地，所述边缘为封闭边缘。

本发明实施例中，获取目标视频中的目标图像帧，在目标图像帧中，检测具有边缘的图像区域，根据该边缘的图像特征，在目标视频中，选取目标图像帧之外的包含该边缘的其它图像帧，在目标图像帧和其它图像帧中，将待展示的图片添加到该边缘内的图像区域中。这样，可以灵活地将待展示的图片添加到视频中的某图像区域中进行展示，可以提高进行图片展示的灵活性。

需要说明的是：上述实施例提供的图像处理的装置在图像处理时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的图像处理的装置与图像处理的方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。

实施例四

请参考图5，其示出了本发明实施例所涉及的终端的结构示意图，该终端可以用于实施上述实施例中提供的图像处理的方法。具体来讲：

终端900可以包括RF(RadioFrequency，射频)电路110、包括有一个或一个以上计算机可读存储介质的存储器120、输入单元130、显示单元140、传感器150、音频电路160、WiFi(wirelessfidelity，无线保真)模块170、包括有一个或者一个以上处理核心的处理器180、以及电源190等部件。本领域技术人员可以理解，图5中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：

RF电路110可用于收发信息或通话过程中，信号的接收和发送，特别地，将基站的下行信息接收后，交由一个或者一个以上处理器180处理；另外，将涉及上行的数据发送给基站。通常，RF电路110包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(LowNoiseAmplifier，低噪声放大器)、双工器等。此外，RF电路110还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议，包括但不限于GSM(GlobalSystemofMobilecommunication，全球移动通讯系统)、GPRS(GeneralPacketRadioService，通用分组无线服务)、CDMA(CodeDivisionMultipleAccess，码分多址)、WCDMA(WidebandCodeDivisionMultipleAccess,宽带码分多址)、LTE(LongTermEvolution,长期演进)、电子邮件、SMS(ShortMessagingService，短消息服务)等。

存储器120可用于存储软件程序以及模块，处理器180通过运行存储在存储器120的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器120可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据终端900的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器120还可以包括存储器控制器，以提供处理器180和输入单元130对存储器120的访问。

输入单元130可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，输入单元130可包括触敏表面131以及其他输入设备132。触敏表面131，也称为触摸显示屏或者触控板，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面131上或在触敏表面131附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选地，触敏表面131可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器180，并能接收处理器180发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面131。除了触敏表面131，输入单元130还可以包括其他输入设备132。具体地，其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端900的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元140可包括显示面板141，可选地，可以采用LCD(LiquidCrystalDisplay，液晶显示器)、OLED(OrganicLight-EmittingDiode,有机发光二极管)等形式来配置显示面板141。进一步的，触敏表面131可覆盖显示面板141，当触敏表面131检测到在其上或附近的触摸操作后，传送给处理器180以确定触摸事件的类型，随后处理器180根据触摸事件的类型在显示面板141上提供相应的视觉输出。虽然在图5中，触敏表面131与显示面板141是作为两个独立的部件来实现输入和输入功能，但是在某些实施例中，可以将触敏表面131与显示面板141集成而实现输入和输出功能。

终端900还可包括至少一种传感器150，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板141的亮度，接近传感器可在终端900移动到耳边时，关闭显示面板141和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于终端900还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

音频电路160、扬声器161，传声器162可提供用户与终端900之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号，传输到扬声器161，由扬声器161转换为声音信号输出；另一方面，传声器162将收集的声音信号转换为电信号，由音频电路160接收后转换为音频数据，再将音频数据输出处理器180处理后，经RF电路110以发送给比如另一终端，或者将音频数据输出至存储器120以便进一步处理。音频电路160还可能包括耳塞插孔，以提供外设耳机与终端900的通信。

WiFi属于短距离无线传输技术，终端900通过WiFi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图5示出了WiFi模块170，但是可以理解的是，其并不属于终端900的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。

处理器180是终端900的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器120内的软件程序和/或模块，以及调用存储在存储器120内的数据，执行终端900的各种功能和处理数据，从而对手机进行整体监控。可选地，处理器180可包括一个或多个处理核心；优选地，处理器180可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器180中。

终端900还包括给各个部件供电的电源190(比如电池)，优选地，电源可以通过电源管理系统与处理器180逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源190还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

尽管未示出，终端900还可以包括摄像头、蓝牙模块等，在此不再赘述。具体在本实施例中，终端900的显示单元是触摸屏显示器，终端900还包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行述一个或者一个以上程序包含用于进行以下操作的指令：

获取目标视频中的目标图像帧；

在所述目标图像帧中，检测具有边缘的图像区域；

根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧；

在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中。

可选地，所述获取目标视频中的目标图像帧，包括：

播放目标视频，当接收到视频暂停指令时，获取当前显示的图像帧作为目标图像帧；或者，

获取目标视频中预设位置处的目标图像帧。

可选地，所述在所述目标图像帧中，检测具有边缘的图像区域，包括：

在显示所述目标图像帧的状态下，接收区域选取指令；

在所述目标图像帧中，根据所述区域选取指令对应的图像区域，基于边缘检测算法，检测具有边缘的图像区域。

可选地，所述根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧，包括：

根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧中是否包含所述边缘；

当检测到不包含所述边缘的图像帧时，停止检测，并选取已检测到的所述目标图像帧之外的包含所述边缘的其它图像帧。

可选地，所述根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧中是否包含所述边缘，包括：

根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧，根据图像运动估计法，估计所述边缘在检测的图像帧中的位置，并根据估计的位置，确定所述检测的图像帧中是否包含所述边缘。

可选地，所述在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中，包括：

在所述目标图像帧和所述其它图像帧中，将所述待展示的图片设置在所述边缘内的图像区域中的原图像的下层；

对所述边缘内的图像区域中的原图像进行透明化处理。

可选地，所述在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中，包括：

在所述目标图像帧和所述其它图像帧中，根据所述边缘的尺寸，对所述待展示的图片的尺寸进行调整，并将调整尺寸后的图片添加到所述边缘内的图像区域中。

可选地，所述根据所述边缘的尺寸，对所述待展示的图片的尺寸进行调整，包括：

根据所述边缘的尺寸，以及所述待展示的图片中的人脸位置，对所述待展示的图片的尺寸进行调整。

可选地，所述获取目标视频中的目标图像帧，包括：获取目标视频中的多个目标图像帧；

所述在所述目标图像帧中，检测具有边缘的图像区域，包括：分别在所述多个目标图像帧中，检测具有边缘的图像区域；

所述根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧，包括：分别根据每个边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述每个边缘的其它图像帧；

所述在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中，包括：在所述目标图像帧和所述其它图像帧中的具有相同的边缘的图像帧中，在所述相同的边缘内的图像区域中，添加同一张待展示的图片。

可选地，所述在所述目标图像帧中，检测具有边缘的图像区域，包括：在所述目标图像帧中，检测多个具有边缘的图像区域；

所述根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧，包括：分别根据检测出的每个图像区域对应的边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含多个边缘中任一边缘的其它图像帧。

可选地，所述边缘为封闭边缘。

本发明实施例中，获取目标视频中的目标图像帧，在目标图像帧中，检测具有边缘的图像区域，根据该边缘的图像特征，在目标视频中，选取目标图像帧之外的包含该边缘的其它图像帧，在目标图像帧和其它图像帧中，将待展示的图片添加到该边缘内的图像区域中。这样，可以灵活地将待展示的图片添加到视频中的某图像区域中进行展示，可以提高进行图片展示的灵活性。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (22)

1.一种图像处理的方法，其特征在于，所述方法包括：

获取目标视频中的目标图像帧；

在所述目标图像帧中，检测具有边缘的图像区域；

根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧；

在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中。

2.根据权利要求1所述的方法，其特征在于，所述获取目标视频中的目标图像帧，包括：

播放目标视频，当接收到视频暂停指令时，获取当前显示的图像帧作为目标图像帧；或者，

获取目标视频中预设位置处的目标图像帧。

3.根据权利要求1所述的方法，其特征在于，所述在所述目标图像帧中，检测具有边缘的图像区域，包括：

在显示所述目标图像帧的状态下，接收区域选取指令；

在所述目标图像帧中，根据所述区域选取指令对应的图像区域，基于边缘检测算法，检测具有边缘的图像区域。

4.根据权利要求1所述的方法，其特征在于，所述根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧，包括：

根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧中是否包含所述边缘；

当检测到不包含所述边缘的图像帧时，停止检测，并选取已检测到的所述目标图像帧之外的包含所述边缘的其它图像帧。

5.根据权利要求4所述的方法，其特征在于，所述根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧中是否包含所述边缘，包括：

根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧，根据图像运动估计法，估计所述边缘在检测的图像帧中的位置，并根据估计的位置，确定所述检测的图像帧中是否包含所述边缘。

6.根据权利要求1所述的方法，其特征在于，所述在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中，包括：

在所述目标图像帧和所述其它图像帧中，将所述待展示的图片设置在所述边缘内的图像区域中的原图像的下层；

对所述边缘内的图像区域中的原图像进行透明化处理。

7.根据权利要求1所述的方法，其特征在于，所述在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中，包括：

在所述目标图像帧和所述其它图像帧中，根据所述边缘的尺寸，对所述待展示的图片的尺寸进行调整，并将调整尺寸后的图片添加到所述边缘内的图像区域中。

8.根据权利要求7所述的方法，其特征在于，所述根据所述边缘的尺寸，对所述待展示的图片的尺寸进行调整，包括：

根据所述边缘的尺寸，以及所述待展示的图片中的人脸位置，对所述待展示的图片的尺寸进行调整。

9.根据权利要求1所述的方法，其特征在于，所述获取目标视频中的目标图像帧，包括：获取目标视频中的多个目标图像帧；

所述在所述目标图像帧中，检测具有边缘的图像区域，包括：分别在所述多个目标图像帧中，检测具有边缘的图像区域；

所述根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧，包括：分别根据每个边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述每个边缘的其它图像帧；

所述在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中，包括：在所述目标图像帧和所述其它图像帧中的具有相同的边缘的图像帧中，在所述相同的边缘内的图像区域中，添加同一张待展示的图片。

10.根据权利要求1所述的方法，其特征在于，所述在所述目标图像帧中，检测具有边缘的图像区域，包括：在所述目标图像帧中，检测多个具有边缘的图像区域；

所述根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧，包括：分别根据检测出的每个图像区域对应的边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含多个边缘中任一边缘的其它图像帧。

11.根据权利要求1所述的方法，其特征在于，所述边缘为封闭边缘。

12.一种图像处理的装置，其特征在于，所述装置包括：

获取模块，用于获取目标视频中的目标图像帧；

检测模块，用于在所述目标图像帧中，检测具有边缘的图像区域；

选取模块，用于根据所述边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述边缘的其它图像帧；

添加模块，用于在所述目标图像帧和所述其它图像帧中，将待展示的图片添加到所述边缘内的图像区域中。

13.根据权利要求12所述的装置，其特征在于，所述获取模块，用于：

播放目标视频，当接收到视频暂停指令时，获取当前显示的图像帧作为目标图像帧；或者，

获取目标视频中预设位置处的目标图像帧。

14.根据权利要求12所述的装置，其特征在于，所述检测模块，用于：

在显示所述目标图像帧的状态下，接收区域选取指令；

在所述目标图像帧中，根据所述区域选取指令对应的图像区域，基于边缘检测算法，检测具有边缘的图像区域。

15.根据权利要求12所述的装置，其特征在于，所述选取模块，用于：

根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧中是否包含所述边缘；

当检测到不包含所述边缘的图像帧时，停止检测，并选取已检测到的所述目标图像帧之外的包含所述边缘的其它图像帧。

16.根据权利要求15所述的装置，其特征在于，所述选取模块，用于：

根据所述边缘的图像特征，在所述目标视频中，由所述目标图像帧开始，向前和/或向后逐个检测图像帧，根据图像运动估计法，估计所述边缘在检测的图像帧中的位置，并根据估计的位置，确定所述检测的图像帧中是否包含所述边缘。

17.根据权利要求12所述的装置，其特征在于，所述添加模块，用于：

在所述目标图像帧和所述其它图像帧中，将所述待展示的图片设置在所述边缘内的图像区域中的原图像的下层；

对所述边缘内的图像区域中的原图像进行透明化处理。

18.根据权利要求12所述的装置，其特征在于，所述添加模块，用于：

在所述目标图像帧和所述其它图像帧中，根据所述边缘的尺寸，对所述待展示的图片的尺寸进行调整，并将调整尺寸后的图片添加到所述边缘内的图像区域中。

19.根据权利要求18所述的装置，其特征在于，所述添加模块，用于：

根据所述边缘的尺寸，以及所述待展示的图片中的人脸位置，对所述待展示的图片的尺寸进行调整。

20.根据权利要求12所述的装置，其特征在于，所述获取模块，用于：获取目标视频中的多个目标图像帧；

所述检测模块，用于：分别在所述多个目标图像帧中，检测具有边缘的图像区域；

所述选取模块，用于：分别根据每个边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含所述每个边缘的其它图像帧；

所述添加模块，用于：在所述目标图像帧和所述其它图像帧中的具有相同的边缘的图像帧中，在所述相同的边缘内的图像区域中，添加同一张待展示的图片。

21.根据权利要求12所述的装置，其特征在于，所述检测模块，用于：在所述目标图像帧中，检测多个具有边缘的图像区域；

所述选取模块，用于：分别根据检测出的每个图像区域对应的边缘的图像特征，在所述目标视频中，选取所述目标图像帧之外的包含多个边缘中任一边缘的其它图像帧。

22.根据权利要求12所述的装置，其特征在于，所述边缘为封闭边缘。