CN109872388A - 一种图像处理方法及装置 - Google Patents

Abstract

本发明提供了一种图像处理方法及装置，涉及数据处理技术领域。所述方法包括：获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；检索与所述参数信息匹配的第二图像；基于所述第二图像进行立体建模和场景重构，得到立体图像；基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；基于所述第一图像和所述第三图像，得到第四图像。基于第一图像的拍摄角度，将立体图像投影为第三图像，该第三图像为对象在拍摄角度对应的质量较好的图像，基于第一图像和第三图像，得到第四图像，基于该第一图像方便地得到了质量较好的第四图像。

Description

一种图像处理方法及装置

技术领域

本发明涉及数据处理技术领域，特别是涉及一种图像处理方法及装置。

背景技术

图像能够提供更多的信息，娱乐性能好，极大丰富了用户的生活，因此，应用广泛。

在先技术中，在获取图像的过程中，由于遮挡物的存在，或实际情况的限制等，用户可能无法获得某些对象质量较好的图像等。

发明人在研究过程中发现，上述现有技术方案存在如下缺点：在图像中对象对应的图像质量不好情况下，如不完整或不清晰等，无法基于该图像为用户生成对象质量较好的图像。

发明内容

本发明提供一种图像处理方法及装置，旨在解决在图像中对象对应的图像质量不好情况下，无法基于该图像为用户生成对象质量较好的图像的问题。

第一方面，本发明实施例提供了一种图像处理方法，包括：

获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；

检索与所述参数信息匹配的第二图像；

基于所述第二图像进行立体建模和场景重构，得到立体图像；

基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；

基于所述第一图像和所述第三图像，得到第四图像。

第二方面，本发明实施例还提供了一种图像处理装置，所述装置包括：

参数信息获取模块，用于获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；

第二图像检索模块，用于检索与所述参数信息匹配的第二图像；

立体图像重构模块，用于基于所述第二图像进行立体建模和场景重构，得到立体图像；

投影模块，用于基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；

处理模块，用于基于所述第一图像和所述第三图像，得到第四图像。

第三方面，本发明实施例还提供了一种移动终端，该移动终端包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现本发明所述的图像处理方法的步骤。

第四方面，本发明实施例还提供了一种计算机可读存储介质，该计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现本发明所述的图像处理方法的步骤。

在本发明实施例中，获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；检索与所述参数信息匹配的第二图像；基于所述第二图像进行立体建模和场景重构，得到立体图像；基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；基于所述第一图像和所述第三图像，得到第四图像。获取与参数信息匹配的第二图像，基于第二图像进行立体建模和场景重构，得到立体图像，基于第一图像的拍摄角度，将立体图像进行平面投影，得到第三图像，该第三图像为第一图像中对象在拍摄角度对应的质量较好的图像，基于第一图像和第三图像，得到第四图像，进而基于该第一图像方便地得到了质量较好的第四图像。

附图说明

图1示出了本发明实施例一中提供的图像处理方法的流程图；

图2示出了本发明实施例一中提供的一种第一图像的示意图；

图3示出了本发明实施例一中提供的针对图2的立体图像示意图；

图4示出了本发明实施例一中提供的针对图2中第一图像的拍摄角度，对图3中立体图像进行平面投影，得到第三图像的示意图；

图5示出了本发明实施例一中提供的针对图2中第一图像和图4中第三图像，得到第四图像的示意图；

图6示出了本发明实施例二中提供的图像处理方法的流程图；

图7示出了示出了本发明实施例二中提供的一种第一图像的示意图；

图8示出了根据本发明实施例三提供的图像处理装置的结构框图；

图9示出了根据本发明实施例三提供的另一图像处理装置的结构框图；

图10是本发明实施例中的一种移动终端的硬件结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例一

参照图1，示出了本发明实施例一中提供的图像处理方法的流程图，具体可以包括如下步骤：

步骤101，获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息。

在本发明实施例中，该第一图像可以为用户拍摄的照片、或者下载的图像、接收的图像等，在本发明实施例中，对此不作具体限定。

在本发明实施例中，对象可以为第一图像中所包含的任意一个物体或多个物体等。在本发明实施例中，对此不作具体限定。

在本发明实施例中，可选的，该对象可以为第一图像中所包含的物体中位置相对固定的物体等，或者，该第一图像中所包含的物体可以为某些景点等。在本发明实施例中，对此不作具体限定。例如，该对象可以为建筑、植物等。

例如，参照图2所示，图2示出了本发明实施例一中提供的一种第一图像的示意图，该第一图像中包含的物体有人、塔11，该第一图像中的对象可以为位置相对固定的塔11等。

在本发明实施例中，可以获取第一图像的参数信息。该参数信息可以包括位置信息以及对象特征信息等。该位置信息可以为该第一图像中对象对应的地理坐标信息等，该对象特征信息可以为该第一图像中该对象的轮廓特征、颜色特征、角度特征等。在本发明实施例中，对此不作具体限定。

例如，针对上述例子，若第一图像中包含的物体有人、塔等，若该第一图像中的对象为塔，则该第一图像的参数信息可以包括：该塔的位置信息以及塔的特征信息等，如，塔的位置信息可以为塔的地理坐标信息，塔的特征信息可以为：该第一图像中塔的轮廓特征、颜色特征、角度特征等。

在本发明实施例中，第一图像中可能包含多个对象，为了便于用户方便地从上述多个对象中选择出其关注的对象等，可以接收到用户针对第一图像中对象的选择操作，在接收到针对第一图像中对象的选择操作后，获取第一图像的参数信息等。上述选择操作可以为针对第一图像中对象的滑动、点击、选取等操作，在本发明实施例中，对此不作具体限定。

例如，该选择操作可以为针对第一图像中包括对象的框选操作等，该框选操作所框选的对象，即可以为用户从第一图像中包含的多个对象中，选择出的其关注的对象。

步骤102，检索与所述参数信息匹配的第二图像。

在本发明实施例中，可以检索与上述参数信息匹配的第二图像，该第二图像可以为与上述位置信息以及对象特征信息匹配度超过预设匹配度的第二图像等，该第二预设匹配度可以根据实际需要进行设定等，在本发明实施例中，该第二图像可以为包括该对象的图像。在本发明实施例中，对此不作具体限定。

具体的，可以在预设图库中，或者，在预设网络中，或者在预设应用中，获取与上述参数信息匹配的第二图像。在本发明实施例中，对此不作具体限定。

例如，可以在互联网中获取与上述参数信息匹配的第二图像，或者，可以借助于有关地图应用，获取与上述参数信息匹配的第二图像等。

在本发明实施例中，与参数信息匹配的第二图像可以为该对象各个不同方位的图像，例如，若该对象为塔，则与参数信息匹配的第二图像可以为该塔各个不同侧面、底面或不同角度的图像等。

在本发明实施例中，可选的，该第二图像可以为质量符合预设要求的图像，例如，该第二图像可以为对象的轮廓完整度超过预设完整度的图像，或者，该第二图像可以为对象的清晰度度超过预设清晰度的图像等。在本发明实施例中，对此不作具体限定。

在本发明实施例中，可选的，该第二图像的数量，该第二图像对应的方位等，可以根据实际需要等进行设定，在本发明实施例中，对此不作具体限定。

步骤103，基于所述第二图像进行立体建模和场景重构，得到立体图像。

在本发明实施例中，基于上述第二图像进行立体建模和场景重构，得到立体图像。该立体图像可以包括三维立体图像等。在本发明实施例中，对此不作具体限定。

具体的，可以提取上述第二图像中对象的轮廓特征等，根据上述轮廓特征，在上述第二图像中选取匹配的图像对，对上述图像进行角度、大小等调整，将上述图像对进行拼接，使得图像对中，匹配的特征点等对应重叠等，进而拼接得到包括该对象的立体图像的各个表面等，以进行立体建模，然后可以提取上述对应图像对的相关纹理特征等，在上述立体图像的各个表面填充相应纹理特征等，以进行场景重构，进而得到立体图像，具体的可以得到包括该对象的立体图像。在本发明实施例中，对此不作具体限定。

例如，针对上述例子，参照图3，图3示出了本发明实施例一中提供的针对图2的立体图像示意图。图3中的12可以为针对图2的立体图像，更为具体的，图3中12可以为针对图2中的对象塔11的立体图像。

步骤104，基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像。

在本发明实施例中，可以基于第一图像的拍摄角度，对立体图像进行平面投影，得到第三图像。即，将立体图像投影为与第一图像的拍摄角度一致的第三图像，例如，可以将该立体图像进行平面投影，得到与第一图像中对象的拍摄角度一致的第三图像。

具体的，可以获取该第一图像的拍摄角度，将立体图像在该拍摄角度上进行平面投影，得到第三图像。该第一图像的拍摄角度的获取可以根据该第一图像的拍摄坐标、该第一图像中一些参照对象的地理位置等进行换算，进而得到该第一图像的拍摄角度。在本发明实施例中，对此不作具体限定。

例如，针对上述例子，参照图4，图4示出了本发明实施例一中提供的针对图2中第一图像的拍摄角度，对图3中立体图像进行平面投影，得到第三图像的示意图。图4中的13可以为针对图2的第一图像的拍摄角度，对图3中的立体图像平面投影，得到的第三图像，更为具体的，图4中的13可以为针对图2的第一图像中的对象塔11的立体图像12，基于图2的拍摄角度，平面投影得到的第三图像。

在本发明实施例中，可选的，该第三图像可以为质量符合预设要求的图像，例如，该第三图像可以为第一图像的拍摄角度上，对象的轮廓完整度超过预设完整度的图像，或者，该第三图像可以为第一图像的拍摄角度上，对象的清晰度度超过预设清晰度的图像等。在本发明实施例中，对此不作具体限定。

步骤105，基于所述第一图像和所述第三图像，得到第四图像。

在本发明实施例中，上述第三图像与第一图像的拍摄角度一致，可以基于将上述第三图像与上述第一图像，得到第四图像。

具体的，可以根据上述第一图像中对象的尺寸参数等，将上述第三图像的尺寸参数调整为与对象的尺寸参数一致，可以将第一图像中对象的全部图像或部分图像，用上述尺寸参数调整后的第三图像对应的区域进行替换，进而得到该第四图像。在本发明实施例中，对此不作具体限定。

例如，针对上述例子，参照图5，图5示出了本发明实施例一中提供的针对图2中第一图像和图4中第三图像，得到第四图像的示意图，图5中对象14相对于图2中的对象11，至少完整度更好，进而得到第四图像中对象的图像质量更好。

在本发明实施例中，若某个对象部分被其它对象所遮挡，在基于第一图像和第三图像，得到第四图像的过程中，如果第三图像的对应部分将上述其它对象又进行了遮挡，而其它对象被第三图像的对应部分遮挡后，只剩余部分图像，此种情况下，该其它对象的剩余图像可能会不符合客观规律，此种情况下，可以将该其它对象的未被遮挡的区域用其周围的像素进行替换，进而消除此种情况。在本发明实施例中，对此不作具体限定。

在本发明实施例中，若第一图像为用户拍摄的照片，若第一图像中某些对象图像质量较差，例如，对象被遮挡或对象的清晰度低等，可以通过该第一图像中对象的位置信息、对象特征信息等对应的参数信息，匹配第二图像，基于该第二图像立体建模并重构针对包括该对象的立体图像，然后将包括该对象的立体图像在第一图像的拍摄角度上，进行平面投影，获得与第一图像的拍摄角度一致的第三图像，用该第三图像和第一图像，得到第四图像，进而用户无需重新对该对象进行拍摄，即可便捷地得到图像质量较好的对象的图像。特别是用户已从该对象对应的地理位置处离去等情况下，基于该第一图像即可便捷地得到图像质量较好的对象的图像。

在本发明实施例中，获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；检索与所述参数信息匹配的第二图像；基于所述第二图像进行立体建模和场景重构，得到立体图像；基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；基于所述第一图像和所述第三图像，得到第四图像。基于第一图像的参数信息获取与参数信息匹配的第二图像，基于第二图像进行立体建模和场景重构，得到立体图像，基于第一图像的拍摄角度，将立体图像进行平面投影，得到第三图像，该第三图像为对象在拍摄角度对应的质量较好的图像，基于第一图像和第三图像，得到第四图像，进而基于该第一图像方便地得到了质量较好的第四图像。

实施例二

参照图6，示出了本发明实施例二中提供的图像处理方法的流程图，具体可以包括如下步骤：

步骤201，获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息。

在本发明实施例中，上述步骤201可以参照上述步骤101，为了避免重复，此处不再赘述。

步骤202，在预设网站或预设数据库中，检索与所述位置信息对应的第一数量的第七图像。

在本发明实施例中，该预设网站可以为能够提供图像的网站等。在本发明实施例中，对此不作具体限定。该预设网站可以为包括相关地图应用的网站等。例如，该预设网站可以为：虚拟地球等应用对应的网站等。

在本发明实施例中，该预设数据库可以为存储有图像的数据库等，例如，该预设数据库可以为存储有名胜古迹建筑图像的数据库等。在本发明实施例中，对此不作具体限定。

在本发明实施例中，可以在上述预设网站或预设数据库中，检索与上述位置信息对应的第一数量的第七图像。该第一数量可以根据实际需要进行设定等，在本发明实施例中，对此不作具体限定。

具体的，可以在上述网站或预设数据库中，基于该位置信息搜索对应的第一数量的第七图像。例如，若位置信息为中国××市××区××街道××景区，则可以基于该位置信息，在上述网站或预设数据库中，搜索对应的第一数量的第七图像。

在本发明实施例中，可选的，可以将搜索结果中，排序靠前的第一数量的图像，确定为第七图像。具体的，排序靠前的图像与该第一图像中对象的相关性可能更高，将上述图像作为该第七图像可以提升匹配的准确性。

在本发明实施例中，可选的，该第七图像可以为质量符合预设要求的图像，例如，该第七图像可以为轮廓完整度超过预设完整度的图像，或者，该第七图像可以为清晰度度超过预设清晰度的图像等。在本发明实施例中，对此不作具体限定。

步骤203，从所述第一数量的第七图像中，选取与所述对象特征信息匹配的第二数量的第八图像。

在本发明实施例中，可以从上述第一数量的第七图像中，选取与上述对象特征信息匹配的第二数量的第八图像。即，在与第一图像或第一图像中对象位置信息匹配的第七图像中，再根据对象的图像特征，匹配第二数量的第八图像，进而可以尽可能的保证上述第八图像与该对象的相关度和匹配度。

具体的，可以基于第一图像中对象的轮廓特征、纹理特征、颜色特征等，从上述第一数量的第七图像中，选取与上述第一图像中的对象特征信息匹配的第二数量的第八图像。

在本发明实施例中，该第二数量可以根据实际需要进行设定，在本发明实施例中，对此不作具体限定。

在本发明实施例中，可选的，该第八图像可以为质量符合预设要求的图像，例如，该第八图像可以为对象轮廓完整度超过预设完整度的图像，或者，该第八图像可以为对象清晰度度超过预设清晰度的图像等。在本发明实施例中，对此不作具体限定。

步骤204，从所述第二数量的第八图像中，选择所述对象不同预设方位的第二图像。

在本发明实施例中，可以从上述第二数量的第八图像中，选择该对象不同预设方位的第二图像。该不同预设方位具体可以根据实际需要进行设定，在本发明实施例中，对此不作具体限定。

例如，该不同预设方位可以包括：上、下，以及连接上下两个方位的各个侧面对应的方位等。在本发明实施例中，对此不作具体限定。

在本发明实施例中，可选的，该第二图像可以为质量符合预设要求的图像，例如，该第二图像可以为对象轮廓完整度超过预设完整度的图像，或者，该第二图像可以为对象清晰度度超过预设清晰度的图像等。在本发明实施例中，对此不作具体限定。

步骤205，提取各个所述第二图像中对象的轮廓特征。

在本发明实施例中，该第二图像包括上述对象，可以提取各个上述第二图像中对象的轮廓特征。

该对象的轮廓特征可以包括：对象的边缘特征、顶点特征等，在发明实施例中，对此不过具体限定。

具体的，可以通过相应的物体检测模型等，提取各个第二图像中对象的轮廓特征等，在发明实施例中，对此不过具体限定。例如，该物体检测模型可以为SIFT模型(Scale-invariant feature transform，尺度不变特征变换模型)等。

步骤206，从所述第二图像中，选取所述轮廓特征匹配的图像对。

在本发明实施例中，可以从所述第二图像中，选取轮廓特征匹配的图像对。即，从上第二图像中，选取轮廓特征相匹配的图像对。例如，从第二图像中，选取具有重叠区域的图像对。

具体的，可以计算不同第二图像中，对象的轮廓特征之间的距离等，将距离小于预设距离的特征点，确定为匹配点，将匹配点的个数超过预设个数的两个第二图像，确定为轮廓特征匹配的图像对。该预设距离、预设个数等，可以根据实际需要进行设定，在本发明实施例中，对此不作具体限定。

步骤207，基于所述图像对，立体建模，得到所述对象的立体图像的各个表面。

在本发明实施例中，可以基于上述图像对，立体建模，得到该对象的立体图像的各个表面。

具体的，可以将上述图像对中，对应的匹配点或匹配轮廓等，进行对应拼接，进而立体建模得到对象的立体图像的各个表面。在本发明实施例中，对此不作具体限定。

在本发明实施例中，对象的立体图像的各个表面可以为对象的立体图像的各个外表面等，在本发明实施例中，对此不作具体限定。

步骤208，基于所述第二图像，对所述各个表面进行场景重构，获得所述立体图像。

在本发明实施例中，可以基于上述第二图像，对上述各个表面进行场景重构，获得立体图像，如，可以获得第一图像中对象的立体图像。

具体的，在得到上述对象的立体图像的各个表面后，可以提取第二图像相应的纹理特征等，如第二图像中图像对的纹理特征等，对上述各个表面进行场景重构，例如，可以对上述各个表面进行纹理映射等，进而获得立体图像。在本发明实施例中，对此不作具体限定。

步骤209，获取所述第一图像对应的拍摄坐标信息。

在本发明实施例中，该拍摄坐标信息可以为第一图像对应的拍摄地理坐标、空间坐标等，例如，该拍摄坐标信息可以包括：拍摄第一图像的经纬度、拍摄高度、焦距等。在本发明实施例中，对此不作具体限定。

具体的，可以根据第一图像的参数信息以及第一图像中所包含的各个对象，确定该第一图像对应的拍摄坐标信息。如，拍摄第一图像的经纬度可以从第一图像的参数信息中获取等，例如，可以根据第一图像中包含的位置相对固定的对象，以及其他对象等，确定上述拍摄坐标信息等。

步骤210，获取所述第一图像中所述对象对应的地理坐标信息。

在本发明实施例中，该第一图像中对象的地理坐标信息，可以为该对象在实际的地理空间中的坐标信息等。

在本发明实施例中，该对象的地理坐标信息，可以基于上述位置信息，以及该对象的对象特征信息等，获取对象的地理坐标信息。在本发明实施例中，对此不作具体限定。

步骤211，基于所述拍摄坐标信息和所述地理坐标信息，确定所述第一图像的拍摄角度。

在本发明实施例中，可以基于拍摄坐标信息和地理坐标信息，换算得到第一图像的拍摄角度，如可以得到第一图像中该对象的拍摄角度。

具体的，可以通过计算拍摄坐标信息和地理坐标信息之间的相对距离和相对位置关系等，根据上述相对距离和相对位置关系等，换算得到第一图像的拍摄角度，如可以得到第一图像中该对象的拍摄角度。本发明实施例中，对此不作具体限定。

步骤212，基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像。

在本发明实施例中，步骤212可以参照上述步骤104，为了避免重复，此处不再赘述。

步骤213，接收针对所述第一图像中重构区域的选取操作；所述重构区域与所述对象具有重叠区域。

在本发明实施例中，针对所述第一图像中重构区域的选取操作可以包括针对第一图像中重构区域的滑动操作、点击操作、选取操作等，在本发明实施例中，对此不作具体限定。

在本发明实施例中，该重构区域可以与上述第一图像中对象具有重叠区域。如，该重构区域可以包括对象的一部分或全部等。

例如，参照上述例子，参照图7所示，图7示出了示出了本发明实施例二中提供的一种第一图像的示意图。图7中矩形框15对应的区域可以为重构区域，该重构区域与上述对象塔11具有重叠区域。

步骤214，获取所述重叠区域的尺寸参数。

在本发明实施例中，可以获取上述重叠区域的尺寸参数，该重叠区域的尺寸参数可以包括该重叠区域内对象的缩放参数、该重叠区域的形状参数等，如，该尺寸参数可以包括该重叠区域的长、宽参数等。在本发明实施例中，对此不作具体限定。

步骤215，从所述第三图像中截取所述重叠区域对应的第五图像。

在本发明实施例中，可以从上述第三图像中截取上述重叠区域对应的第五图像。即，从上述第三图像中截取内容对应或位置对应的第五图像。

例如，从第三图像中，截取与上述重叠区域显示内容匹配或位置匹配的第五图像。如，若，第一图像中对象未被遮挡，若上述重叠区域未被遮挡，则可以从上述第三图像中截取与上述重叠区域显示内容对应的第五图像。

如参照图7中15对应的重构区域，重构区域15与上述第一图像中对象具有重叠区域，如，重构区域15与上述第一图像中对象塔11具有重叠区域。参照图4中的第三图像，第五图像可以为第三图像中，与该重叠区域显示内容对应的图像，该第五图像可以为第三图像中对象的全部图像，或第三图像中对象的部分图像等，具体根据重叠区域对应确定。在本发明实施例中，对此不作具体限定。

步骤216，将所述第五图像调整为与所述尺寸参数一致的第六图像。

在本发明实施例中，在获得与上述重叠区域对应的第五图像后，可以将该第五图像调整为与上述尺寸参数一致的第六图像。即，将与上述重叠区域对应的第五图像调整为与上述重叠区域的尺寸参数。

例如，可以将上述第五图像调整为与所述尺寸参数中缩放参数一致的第六图像。

步骤217，在所述第一图像中，用所述第六图像填充所述重叠区域，得到第四图像。

在本发明实施例中，在第一图像中，用上述第六图像填充上述重叠区域，得到第四图像。即，在上述第一图像中，填充与上述重叠区域尺寸参数等一致的第六图像，进而得到第四图像。

在本发明实施例中，该方法可以应用于终端上，该终端可以包括移动终端等。可选的，若上述方法应用于移动终端上，为了减小上述操作对移动终端进程的占用，上述某些步骤可以借助于服务器进行，例如，步骤202-204等可以借助服务器进行。在本发明实施例中，对此不作具体限定。

在本发明实施例中，获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；检索与所述参数信息匹配的第二图像；基于所述第二图像进行立体建模和场景重构，得到立体图像；基于所述第一图像的拍摄角度，将所述立体图像进行平面投影，得到第三图像；基于所述第一图像和所述第三图像，得到第四图像。基于参数信息获取与参数信息匹配的第二图像，基于第二图像进行立体建模和场景重构，得到立体图像，基于第一图像的拍摄角度，将立体图像进行平面投影，得到第三图像，该第三图像为对象在拍摄角度对应的质量较好的图像，基于第一图像和第三图像，得到第四图像，进而基于该第一图像方便地得到了质量较好的第四图像。

需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请实施例并不受所描述的动作顺序的限制，因为依据本申请实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定都是本申请实施例所必须的。

实施例三

参照图8所示，为本发明实施例三提供的图像处理装置300的结构框图，上述图像处理装置300具体可以包括：

参数信息获取模块301，用于获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；

第二图像检索模块302，用于检索与所述参数信息匹配的第二图像；

立体图像重构模块303，用于基于所述第二图像进行立体建模和场景重构，得到立体图像；

投影模块307，用于基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；

处理模块310，用于基于所述第一图像和所述第三图像，得到第四图像。

可选的，所述立体图像重构模块303，可以包括：

轮廓特征提取单元3031，用于提取各个所述第二图像中对象的轮廓特征；

图像对提取单元3032，用于从所述第二图像中，选取所述轮廓特征匹配的图像对；

立体建模单元3033，用于基于所述图像对，立体建模，得到所述对象的立体图像的各个表面；

立体图像重构单元3034，用于基于所述第二图像，对所述各个表面进行场景重构，获得所述立体图像。

可选的，在上述图8的基础上，参照图9，所述装置300还可以包括：

拍摄坐标信息获取模块304，用于获取所述第一图像对应的拍摄坐标信息；

地理坐标信息获取模块305，用于获取所述第一图像中所述对象对应的地理坐标信息；

拍摄角度获取模块306，用于基于所述拍摄坐标信息和所述地理坐标信息，确定所述第一图像的拍摄角度。

可选的，所述装置300还可以包括：

选取操作接收模块308，用于接收针对所述第一图像中重构区域的选取操作；所述重构区域与所述对象具有重叠区域；

尺寸参数获取模块309，用于获取所述重叠区域的尺寸参数；

所述处理模块310，可以包括：

第五图像获取单元3101，用于从所述第三图像中截取所述重叠区域对应的第五图像；

尺寸参数调整单元3102，用于将所述第五图像调整为与所述尺寸参数一致的第六图像；

处理单元3103，用于在所述第一图像中，用所述第六图像填充所述重叠区域，得到第四图像。

可选的，所述第二图像检索模块302，可以包括：

第七图像检索单元3021，用于在预设网站或预设数据库中，检索与所述位置信息对应的第一数量的第七图像；

第八图像选取单元3022，用于从所述第一数量的第七图像中，选取与所述对象特征信息匹配的第二数量的第八图像；

第二图像检索单元3023，用于从所述第二数量的第八图像中，选择所述对象不同预设方位的第二图像。

本发明实施例提供的图像处理装置能够实现图1至图7的方法实施例中图像处理装置实现的各个过程，为避免重复，这里不再赘述。

这样，在本发明实施例中，获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；检索与所述参数信息匹配的第二图像；基于所述第二图像进行立体建模和场景重构，得到立体图像；基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；基于所述第一图像和所述第三图像，得到第四图像。基于参数信息获取与参数信息匹配的第二图像，基于第二图像进行立体建模和场景重构，得到立体图像，基于第一图像的拍摄角度，对立体图像进行平面投影，得到第三图像，该第三图像为对象在拍摄角度对应的质量较好的图像，基于第一图像和第三图像，得到第四图像，进而基于该第一图像方便地得到了质量较好的第四图像。

图10为实现本发明各个实施例中的一种移动终端的硬件结构示意图，该移动终端700包括但不限于：射频单元701、网络模块702、声音输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、处理器710、以及电源711等部件。本领域技术人员可以理解，图10中示出的移动终端结构并不构成对移动终端的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

其中，处理器710，用于获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；

检索与所述参数信息匹配的第二图像；

基于所述第二图像进行立体建模和场景重构，得到立体图像；

基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；

基于所述第一图像和所述第三图像，得到第四图像。

本发明实施例，获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；检索与所述参数信息匹配的第二图像；基于所述第二图像进行立体建模和场景重构，得到立体图像；基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；基于所述第一图像和所述第三图像，得到第四图像。基于参数信息获取与参数信息匹配的第二图像，基于第二图像进行立体建模和场景重构，得到立体图像，基于第一图像的拍摄角度，对立体图像进行平面投影，得到第三图像，该第三图像为对象在拍摄角度对应的质量较好的图像，将第一图像和第三图像，合并为第四图像，进而基于该第一图像方便地得到了质量较好的第四图像。

应理解的是，本发明实施例中，射频单元701可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器710处理；另外，将上行的数据发送给基站。通常，射频单元701包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元701还可以通过无线通信系统与网络和其他设备通信。

移动终端通过网络模块702为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

声音输出单元703可以将射频单元701或网络模块702接收的或者在存储器709中存储的声音数据转换成声音信号并且输出为声音。而且，声音输出单元703还可以提供与移动终端700执行的特定功能相关的声音输出(例如，呼叫信号接收声音、消息接收声音等等)。声音输出单元703包括扬声器、蜂鸣器以及受话器等。

输入单元704用于接收声音或视频信号。输入单元704可以包括图形处理器(Graphics Processing Unit，GPU)7041和麦克风7042，图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元706上。经图形处理器7041处理后的图像帧可以存储在存储器709(或其它存储介质)中或者经由射频单元701或网络模块702进行发送。麦克风7042可以接收声音，并且能够将这样的声音处理为声音数据。处理后的声音数据可以在电话通话模式的情况下转换为可经由射频单元701发送到移动通信基站的格式输出。

移动终端700还包括至少一种传感器705，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板7061的亮度，接近传感器可在移动终端700移动到耳边时，关闭显示面板7061或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器705还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

显示单元706用于显示由用户输入的信息或提供给用户的信息。显示单元706可包括显示面板7061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板7061。

用户输入单元707可用于接收输入的数字或字符信息，以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元707包括触控面板7071以及其他输入设备7072。触控面板7071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板7071上或在触控面板7071附近的操作)。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器710，接收处理器710发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板7071。除了触控面板7071，用户输入单元707还可以包括其他输入设备7072。具体地，其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

进一步的，触控面板7071可覆盖在显示面板7061上，当触控面板7071检测到在其上或附近的触摸操作后，传送给处理器710以确定触摸事件的类型，随后处理器710根据触摸事件的类型在显示面板7061上提供相应的视觉输出。虽然在图10中，触控面板7071与显示面板7061是作为两个独立的部件来实现移动终端的输入和输出功能，但是在某些实施例中，可以将触控面板7071与显示面板7061集成而实现移动终端的输入和输出功能，具体此处不做限定。

接口单元708为外部装置与移动终端700连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、声音输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元708可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端700内的一个或多个元件或者可以用于在移动终端700和外部装置之间传输数据。

存储器709可用于存储软件程序以及各种数据。存储器709可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如声音数据、电话本等)等。此外，存储器709可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器710是移动终端的控制中心，利用各种接口和线路连接整个移动终端的各个部分，通过运行或执行存储在存储器709内的软件程序或模块，以及调用存储在存储器709内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。处理器710可包括一个或多个处理单元；优选的，处理器710可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器110中。

移动终端700还可以包括给各个部件供电的电源711(比如电池)，优选的，电源711可以通过电源管理系统与处理器710逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

另外，移动终端700包括一些未示出的功能模块，在此不再赘述。

优选的，本发明实施例还提供一种移动终端，包括处理器710，存储器709，存储在存储器709上并可在上述处理器710上运行的计算机程序，该计算机程序被处理器710执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

基于上述移动终端的硬件结构，以下对本发明各实施例进行详细详述。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，上述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护之内。

Claims (10)

1.一种图像处理方法，其特征在于，所述方法包括：

获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；

检索与所述参数信息匹配的第二图像；

基于所述第二图像进行立体建模和场景重构，得到立体图像；

基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；

基于所述第一图像和所述第三图像，得到第四图像。

2.根据权利要求1所述的方法，其特征在于，所述基于所述第二图像进行立体建模和场景重构，得到立体图像，包括：

提取各个所述第二图像中对象的轮廓特征；

从所述第二图像中，选取所述轮廓特征匹配的图像对；

基于所述图像对，立体建模，得到所述对象的立体图像的各个表面；

基于所述第二图像，对所述各个表面进行场景重构，获得所述立体图像。

3.根据权利要求1所述的方法，其特征在于，所述基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像之前，还包括：

获取所述第一图像对应的拍摄坐标信息；

获取所述第一图像中所述对象对应的地理坐标信息；

基于所述拍摄坐标信息和所述地理坐标信息，确定所述第一图像的拍摄角度。

4.根据权利要求1所述的方法，其特征在于，所述基于所述第一图像和所述第三图像，得到第四图像之前，还包括：

接收针对所述第一图像中重构区域的选取操作；所述重构区域与所述对象具有重叠区域；

获取所述重叠区域的尺寸参数；

所述基于所述第一图像和所述第三图像，得到第四图像，包括：

从所述第三图像中截取所述重叠区域对应的第五图像；

将所述第五图像调整为与所述尺寸参数一致的第六图像；

在所述第一图像中，用所述第六图像填充所述重叠区域，得到第四图像。

5.根据权利要求1所述的方法，其特征在于，所述检索与所述参数信息匹配的第二图像，包括：

在预设网站或预设数据库中，检索与所述位置信息对应的第一数量的第七图像；

从所述第一数量的第七图像中，选取与所述对象特征信息匹配的第二数量的第八图像；

从所述第二数量的第八图像中，选择所述对象不同预设方位的第二图像。

6.一种图像处理装置，其特征在于，所述装置包括：

参数信息获取模块，用于获取第一图像的参数信息；所述参数信息包括位置信息以及对象特征信息；

第二图像检索模块，用于检索与所述参数信息匹配的第二图像；

立体图像重构模块，用于基于所述第二图像进行立体建模和场景重构，得到立体图像；

投影模块，用于基于所述第一图像的拍摄角度，对所述立体图像进行平面投影，得到第三图像；

处理模块，用于基于所述第一图像和所述第三图像，得到第四图像。

7.根据权利要求6所述的装置，其特征在于，所述立体图像重构模块，包括：

轮廓特征提取单元，用于提取各个所述第二图像中对象的轮廓特征；

图像对提取单元，用于从所述第二图像中，选取所述轮廓特征匹配的图像对；

立体建模单元，用于基于所述图像对，立体建模，得到所述对象的立体图像的各个表面；

立体图像重构单元，用于基于所述第二图像，对所述各个表面进行场景重构，获得所述立体图像。

8.根据权利要求6所述的装置，其特征在于，还包括：

拍摄坐标信息获取模块，用于获取所述第一图像对应的拍摄坐标信息；

地理坐标信息获取模块，用于获取所述第一图像中所述对象对应的地理坐标信息；

拍摄角度获取模块，用于基于所述拍摄坐标信息和所述地理坐标信息，确定所述第一图像的拍摄角度。

9.根据权利要求6所述的装置，其特征在于，还包括：

选取操作接收模块，用于接收针对所述第一图像中重构区域的选取操作；所述重构区域与所述对象具有重叠区域；

尺寸参数获取模块，用于获取所述重叠区域的尺寸参数；

所述处理模块，包括：

第五图像获取单元，用于从所述第三图像中截取所述重叠区域对应的第五图像；

尺寸参数调整单元，用于将所述第五图像调整为与所述尺寸参数一致的第六图像；

处理单元，用于在所述第一图像中，用所述第六图像填充所述重叠区域，得到第四图像。

10.根据权利要求6所述的装置，其特征在于，所述第二图像检索模块，包括：

第七图像检索单元，用于在预设网站或预设数据库中，检索与所述位置信息对应的第一数量的第七图像；

第八图像选取单元，用于从所述第一数量的第七图像中，选取与所述对象特征信息匹配的第二数量的第八图像；

第二图像检索单元，用于从所述第二数量的第八图像中，选择所述对象不同预设方位的第二图像。