CN110266959B - 一种移动终端拍照的方法及移动终端 - Google Patents

Abstract

本申请提供了一种移动终端拍照的方法和移动终端，该方法包括：在第一拍摄预览界面中对界面场景进行扫描，以获得该界面场景的3D场景信息模型；在该第一拍摄预览界面中选择待处理物体所在的待处理区域；结合该3D场景信息模型，利用3D建模技术重构该待处理区域，获得第二拍摄预览界面；以及在该第二拍摄预览界面中进行拍照。通过该方法和移动终端，能够在拍摄照片之前，在预览界面即可快速抠图，为手拿杂物的用户提供了最大的便利，同时通过3D建模技术结合该场景的3D场景信息模型，可以使待处理区域与界面达到整体协调美观，不用考虑手拿杂物影响照片美观，也无需担心环境杂乱影响拍照效果。

Description

一种移动终端拍照的方法及移动终端

技术领域

本发明涉及图片处理技术领域，并且更具体地，涉及一种移动终端拍照的方法及以此方法拍照的移动终端。

背景技术

目前，电子产品种类繁多，具有拍摄功能的移动终端也越来越多，人们可以随时随地地拍摄图片。每个人几乎每天都在用移动终端(例如手机)拍照，来记录重要的或美好的时刻。然而，有时候例如当用户外出游玩时，难免手上会拿着很多东西，刚买的饮料、为了防晒带的遮阳伞、逛完超市拧的购物袋……各种各样的东西会影响到我们拍照的美观性。

针对上述问题，有技术人员将手机通过通讯模块获取手机外部镜头拍摄的照片后存储到手机上，依次加载存储照片，去除照片背景图像，存储只有模型图像的照片，实现去除背景的三维建模。而该现有技术是在已经拍摄的照片上抠图，无法根据拍摄场景，使得处理后的图片中，已处理的区域与周围环境不相符，图片质量不高。并且针对已拍摄的图片进行抠图类似于图像处理(PS)技术，对技术人员的技术要求较高。

发明内容

针对上述现有技术中的问题，本申请提出了一种利用移动终端拍摄的方法及移动终端，通过在拍摄之前进行抠图，并自动识别场景信息，使得拍摄后的图像更加自然，提高了照片质量。

第一方面，本申请提供了一种移动终端拍照的方法，该方法包括：在第一拍摄预览界面中对界面场景进行扫描，以获得该界面场景的3D场景信息模型；在该第一拍摄预览界面中选择待处理物体所在的待处理区域；结合该3D场景信息模型，利用3D建模技术重构该待处理区域，获得第二拍摄预览界面；以及在该第二拍摄预览界面中进行拍照。通过该第一方面，能够在拍摄照片之前，在预览界面即可快速抠图，为手拿杂物的用户提供了最大的便利，同时通过3D建模技术结合该场景的3D场景信息模型，可以使待处理区域与界面达到整体协调美观，不用考虑手拿杂物影响照片美观，也无需担心环境杂乱影响拍照效果。

在第一方面的一个实施方式中，该3D场景信息包括该第一拍摄预览界面中的环境色以及各个物体的轮廓信息、光影信息和背景色。

在第一方面的一个实施方式中，结合该3D场景信息模型，利用3D建模技术重构该待处理区域，包括：在该第一拍摄预览界面中移除该待处理区域，获得第一空白区域；以及结合该3D场景模型，通过3D建模技术填充该第一空白区域，使该第一空白区域具有与该待处理物体相同的背景色，并具有与该界面场景相同的环境色。通过该实施方式，能够将需要处理的物体(如杂物)从预览界面中移出，并对移除后的区域进行填充，使其与界面环境色相同，达到画面的整体协调美观。

在第一方面的一个实施方式中，结合该3D场景模型，利用3D建模技术重构该待处理区域，包括：在素材库中获取目标对象；在该待处理区域中，利用该目标对象替换该待处理物体；以及结合该3D场景模型，通过3D建模技术调节该目标对象，使其具有与该待处理物体相同的光影信息，并具有与该界面场景相同的环境色。通过该实施方式，能够将待处理的物体(如杂物)以另外的物体代替，并对该替换的物体进行调节，从而避免了用户手拿杂物拍照或环境杂乱而影响拍照效果。

在第一方面的一个实施方式中，结合该3D场景模型，利用3D建模技术重构该待处理区域，还包括：在素材库中获取目标对象；在该第一拍摄预览界面中移除该待处理区域，获得第一空白区域；在该第一空白区域中，利用该目标对象替换该待处理物体；以及结合该3D场景模型，通过3D建模技术调节该目标对象，使其与该待处理物体具有相同的光影信息，并具有该界面场景相同的环境色；结合该3D场景模型，通过3D建模技术填充该第一空白区域，使该第一空白区域具有与该待处理物体相同的背景色，并具有该界面场景相同的环境色。通过该实施方式，能够使得在所替代的物体大小小于该待处理的物体时，先将待处理物体移除，替换以后，调节目标形象并填充空区域，使画面协调美观。

在第一方面的一个实施方式中，该素材库为系统自带或者通过用户自定义获取。

在第一方面的一个实施方式中，该光影信息包括物体的色调与光照角度。

第二方面，本申请提供了一种利用第一方面及其实施方式的方法进行拍照的移动终端，该移动终端包括：扫描模块，其用于在第一拍摄预览界面中对界面场景进行扫描，以获得该界面场景的3D场景信息模型；选择模块，其用于在该第一拍摄预览界面中确定待处理物体所在的待处理区域；重构模块，其用于结合该3D场景信息模型，利用3D建模技术重构该待处理区域，获得第二拍摄预览界面；以及拍照模块，其用于在该第二拍摄预览界面中进行拍照。

在第二方面的一个实施方式中，该3D场景信息包括该第一拍摄预览界面中的环境色以及各个物体的轮廓信息、光影信息和背景色。

在第二方面的一个实施方式中，该移动终端为智能手机或者平板电脑。

基于本申请提供的移动终端拍照方法及移动终端，与现有技术相比，其具有如下的优点：

(1)在拍照之前即相机预览界面快速抠图，为手拿杂物的用户带来了很大的便利，不用考虑手拿杂物影响照片美观，也无需担心环境杂乱影响拍照效果；

(2)在拍照之前即相机预览界面，系统可以更好地感知现场环境、光罩、物体形态等参数，为后续移除或替换做好处理准备，保证了拍摄照片的效果；

(3)用户只需简单地在预览界面中选择需要待处理的物体，并确定进行移除或替换操作即可完成拍照前的准备工作，对用户的技术要求低，提高用户体验度。

上述技术特征可以各种适合的方式组合或由等效的技术特征来替代，只要能够达到本发明的目的。

附图说明

在下文中将基于实施例并参考附图来对本发明进行更详细的描述。其中：

图1显示了根据本发明实施例的移动终端拍照方法的示意性流程图；

图2显示了根据本发明另一实施例的移动终端拍照方法的示意性流程图；

图3和图4显示了根据本发明又一实施例的移动终端拍照方法的效果示意图；

图5显示了根据本发明又一实施例的移动终端的结构示意图。

在附图中，相同的部件使用相同的附图标记。附图并未按照实际的比例。

具体实施方式

下面将结合附图对本发明作进一步说明。

图1为根据本发明的移动终端拍照方法100的示意性流程图。如图1所示，该方法100包括如下的步骤：

S110，在第一拍摄预览界面中对界面场景进行扫描，以获得该界面场景的3D场景信息模型；

S120，在该第一拍摄预览界面中确定待处理物体所在的待处理区域；

S130，结合该3D场景信息模型，利用3D建模技术重构该待处理区域，获得第二拍摄预览界面；以及

S140，在该第二拍摄预览界面中进行拍照。

在本发明的实施例中，移动终端通过“勾除杂物”功能实现上述步骤100。在用户拍摄照片之前，只需在相机程序中简单地打开该功能选项，系统则进入“勾除杂物”拍照模式。可选地，用户可以在相机程序中设置该功能选项为默认打开状态，这样就可以节省每次拍照之前打开的步骤，在该功能选项下也可执行普通的拍照。

如图2所示，当被拍者手上拿着许多东西，如购物袋、矿泉水瓶、雨伞等物体的时候，或者被拍者所在环境场景杂乱的时候(这些物体或杂物会影响最终拍摄照片的美观)，拍摄者即可打开该“勾除杂物”功能选项。

在S110中，在打开该功能选项以后，在第一拍摄预览界面中，手机系统即刻对相机镜头中的界面场景进行扫描，对该界面场景进行3D建模，以获得该界面场景的3D场景信息模型，其中，该3D场景信息包括第一拍摄预览界面中的环境色以及各个物体的轮廓信息、光影信息和背景色，在这里，光影信息指的是物体的色调和光照角度。例如，拍摄预览界面中，用户手拿着一个矿泉水瓶，系统即可对该矿泉水瓶建立3D场景信息，包括其轮廓信息和光影信息(色调、光照角度)。理论上，该3D场景信息模型应当包括该第一预览拍摄界面中所有的物体和人物的场景信息，以为或许移除或替换准备好参数数据。

在S120中，拍摄者首先确定第一拍摄预览界面中的待处理的物体(如被拍者手里的矿泉水瓶)，然后在第一拍摄预览界面中选择该待处理的物体。系统根据该待处理物体的轮廓信息，将该物体选中(优选以虚线显示其轮廓)，轮廓内的区域则为待处理区域。

在这里应当理解的是，拍摄者可以通过多种方式选择该待处理的物体。例如，在待处理物体上轻轻触碰，系统感知触碰点所在的区域所对应的物体的轮廓信息，进而选择；可选地，拍摄者也可以通过移动终端的语音设备(如麦克风)发出语音指令(如“请选择矿泉水瓶”)，通过语音设备与相机程序的接口发送该语音指令，相机程序识别该指令后执行相应的选择操作。

在S130中，系统结合在S110中获取的界面场景的3D场景信息模型，利用3D建模技术重构该待处理区域，获得第二拍摄预览界面。

在S140中，在第二拍摄预览界面中进行拍照，获得美观协调的照片。

其中，在S120中在第一拍摄预览界面中选择好该待处理的物体以后，拍摄者可以根据需求选择对该待处理物体进行移除或替换操作。

在一个实施方式中，如图3所示，如果该待处理物体为环境中的杂物(如瓜皮果屑，如(a)所示)，该杂物会影响最终照片的美观，则拍摄者可以选择将该杂物从第一拍摄预览界面移除。具体地：

如图2所示，拍摄者可以在第一拍摄预览界面的下方点击“移除”选项，则系统会从第一拍摄预览界面中移除该杂物，该待处理区域则转变为第一空白区域；

接着，系统会根据在S110中获取的界面场景的3D场景信息模型对该第一空白区域进行重构，使该第一空白区域具有和界面场景相同的环境色，并具有与该杂物相同的背景色，从而使得移除杂物以后的区域能够和周围环境场景协调，不会破坏整体的美观和协调性，获得第二拍摄预览界面，如(b)所示。

在另一个实施方式中，如图4所示，如果该待处理物体为被拍者手中的杂物(如塑料袋，如(a)所示)，该杂物同样会影响最终照片的美观，则拍摄者可以选择将该杂物从第一拍摄预览界面中替换为其它物品。具体地，如图2所示，拍摄者可以在第一拍摄预览界面的下方电极“替换”选项，则系统会弹出请求框，该请求框只能够包括素材库，该素材库中包括多个可以用于替换的素材图片。拍摄者可以在其中选择与杂物最匹配的目标对象，则该目标图像会自动覆盖在第一预览界面的待处理杂物的待处理区域上方。

在这里应理解的是，可以由两种实施方式：

第一，如果该目标对象的尺寸小于待处理区域的尺寸，则首先在第一拍摄预览界面中移出该待处理区域，获得第一空白区域；在该第一空白区域中，利用目标对象替换该待处理物体；然后，结合3D场景模型，通过3D建模技术调节该目标对象，使其与待处理杂物具有相同的光影信息，并具有界面场景相同的环境色；应当理解，在替换以后，由于该目标对象的尺寸小于待处理区域的尺寸，在第一空白区域中会存在未能覆盖的区域，这也会影响最终的照片效果；最后，结合3D场景模型，通过3D建模技术填充第一空白区域，使第一空白区域具有与该待处理物体相同的背景色，并具有该界面场景相同的环境色。

当然，也可以直接在上文中提到的“移除”操作后，在已移除的区域直接选择替换目标对象，其过程于上述步骤类似，在此不作赘述。

第二，如果该目标对象的尺寸大于或等于待处理区域的尺寸，则首先利用该目标对象覆盖该待处理区域，以替换该待处理杂物；然后结合3D场景模型，通过3D建模技术调节目标对象，使其具有与待处理物体相同的光影信息，并具有与该界面场景相同的环境色。

应理解，在该过程中，系统可以选择移除该待处理杂物，也可以不移除该待处理杂物，本发明在此不作限定。

通过上述步骤，则可以获得第二预览界面，如图4中的(b)所示的。

应理解，上文中用户对杂物的移除或替换只是为了说明的目的。针对预览界面中的杂物，拍摄者选择将其移除或替换，完全去决定于用户的需求，本发明在此不作限定。

可选地，移动终端中预设的素材库可以通过多种方式获取，如系统自带或者通过用户自定义获取。其中，用户自定义获取可以为用户通过相机拍摄照片获取或者用户通过绘图工具绘制图案并保存为图片。

如图5所示，本申请还提供了一种移动终端200，其能够利用上文该的方法100进行拍照，已获得用户满意的照片，该移动终端200包括：

扫描模块210，其用于在第一拍摄预览界面中对界面场景进行扫描，以获得该界面场景的3D场景信息模型；

选择模块220，其用于在该第一拍摄预览界面中确定待处理物体所在的待处理区域；

重构模块230，其用于结合扫描模块获取的3D场景信息模型，利用3D建模技术重构该待处理区域，获得第二拍摄预览界面；以及

拍照模块240，其用于在该第二拍摄预览界面中进行拍照。

该移动终端200的上述模块所执行的步骤已经在上文中详细地描述，在此将不作赘述。

优选地，该移动终端为具有拍照功能的智能手机或者平板电脑。

通过本申请提供的移动终端拍照方法及移动终端，使得在拍照之前即相机预览界面快速抠图，为手拿杂物的用户带来了很大的便利，不用考虑手拿杂物影响照片美观，也无需担心环境杂乱影响拍照效果；同时，在拍照之前即相机预览界面，系统可以更好地感知现场环境、光罩、物体形态等参数，为后续移除或替换做好处理准备，保证了拍摄照片的效果；另外，用户只需简单地在预览界面中选择需要待处理的物体，并确定进行移除或替换操作即可完成拍照前的准备工作，对用户的技术要求低，提高用户体验度。

在本发明的描述中，需要理解的是，术语“上”、“下”、“底”、“顶”、“前”、“后”、“内”、“外”、“左”、“右”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。

虽然在本文中参照了特定的实施方式来描述本发明，但是应该理解的是，这些实施例仅仅是本发明的原理和应用的示例。因此应该理解的是，可以对示例性的实施例进行许多修改，并且可以设计出其他的布置，只要不偏离所附权利要求所限定的本发明的精神和范围。应该理解的是，可以通过不同于原始权利要求所描述的方式来结合不同的从属权利要求和本文中该的特征。还可以理解的是，结合单独实施例所描述的特征可以使用在其他该实施例中。

Claims (7)

1.一种移动终端拍照的方法，其特征在于，包括以下步骤：

在第一拍摄预览界面中对界面场景进行扫描，以获得所述界面场景的3D场景信息模型；

在所述第一拍摄预览界面中选择待处理物体所在的待处理区域；

结合所述3D场景信息模型，利用3D建模技术重构所述待处理区域，获得第二拍摄预览界面，在素材库中选择目标对象，所述目标对象自动覆盖在所述待处理区域上；以及

在所述第二拍摄预览界面中进行拍照；

其中，结合所述3D场景模型，利用3D建模技术重构所述待处理区域，包括：

在素材库中获取目标对象；

如果所述目标对象尺寸大于或等于所述待处理区域的尺寸，则利用所述目标对象覆盖所述待处理区域，以替换所述待处理物体；以及

结合所述3D场景模型，通过3D建模技术调节所述目标对象，使其具有与所述待处理物体相同的光影信息，并具有与所述界面场景相同的环境色；

或者

在素材库中获取目标对象；

如果所述目标对象尺寸小于所述待处理区域的尺寸，则在所述第一拍摄预览界面中移除所述待处理区域，获得第一空白区域；

在所述第一空白区域中，利用所述目标对象替换所述待处理物体；以及

结合所述3D场景模型，通过3D建模技术调节所述目标对象，使其与所述待处理物体具有相同的光影信息，并具有所述界面场景相同的环境色；

结合所述3D场景模型，通过3D建模技术填充所述第一空白区域，使所述第一空白区域具有与所述待处理物体相同的背景色，并具有所述界面场景相同的环境色。

2.根据权利要求1所述的方法，其特征在于，所述3D场景信息包括所述第一拍摄预览界面中的环境色以及各个物体的轮廓信息、光影信息和背景色。

3.根据权利要求1所述的方法，其特征在于，所述素材库为系统自带或者通过用户自定义获取。

4.根据权利要求2或3所述的方法，其特征在于，所述光影信息包括物体的色调与光照角度。

5.一种利用权利要求1至4中任一项所述的方法拍照的移动终端，其特征在于，包括：

扫描模块，其用于在第一拍摄预览界面中对界面场景进行扫描，以获得所述界面场景的3D场景信息模型；

选择模块，其用于在所述第一拍摄预览界面中确定待处理物体所在的待处理区域；

重构模块，其用于结合所述3D场景信息模型，利用3D建模技术重构所述待处理区域，获得第二拍摄预览界面；以及

拍照模块，其用于在所述第二拍摄预览界面中进行拍照。

6.根据权利要求5所述的移动终端，其特征在于，所述3D场景信息包括所述第一拍摄预览界面中的环境色以及各个物体的轮廓信息、光影信息和背景色。

7.根据权利要求5或6所述的移动终端，其特征在于，所述移动终端为智能手机或者平板电脑。

Images