CN108712603A - 一种图像处理方法及移动终端 - Google Patents

一种图像处理方法及移动终端 Download PDF

Info

Publication number
CN108712603A
CN108712603A CN201810392403.3A CN201810392403A CN108712603A CN 108712603 A CN108712603 A CN 108712603A CN 201810392403 A CN201810392403 A CN 201810392403A CN 108712603 A CN108712603 A CN 108712603A
Authority
CN
China
Prior art keywords
image
portrait
target
alternative image
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810392403.3A
Other languages
English (en)
Other versions
CN108712603B (zh
Inventor
周靖青
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xi'an Weiwo Software Technology Co ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201810392403.3A priority Critical patent/CN108712603B/zh
Publication of CN108712603A publication Critical patent/CN108712603A/zh
Application granted granted Critical
Publication of CN108712603B publication Critical patent/CN108712603B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供了一种图像处理方法及移动终端,属于移动终端技术领域。其中,移动终端可以根据接收到的拍摄操作获取目标视频,然后提取目标视频中包括的图像,得到多个备选图像,接着,获取每帧备选图像中的人像特征,从这些备选图像中选择一帧图像作为目标图像,基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整,并将调整后的目标图像确定为最终图像。这样,可以保证最终图像是目标视频中效果较好的图像,相较于现有技术中,直接将目标视频的最后一帧图像作为最终图像的方式,使得最终图像能够更加符合用户预期,提高了最终图像的显示效果。

Description

一种图像处理方法及移动终端
技术领域
本发明属于移动终端技术领域,特别是涉及一种图像处理方法及移动终端。
背景技术
随着移动终端技术的不断发展,用户使用移动终端拍照成为普遍现象。为了提升用户的拍照体验,动态拍摄技术逐渐进入用户的视野。终端可以在用户触发拍摄功能(例如,按下快门键)时,拍摄一张图像,并获取拍摄该图像之前,预设时长内的视频,然后将该图像,即,所获取视频的最后一帧图像作为显示的最终图像,由该图像以及该视频构成动态图像。用户可以通过选择显示的最终图像,控制终端播放该视频,使得用户能够生动形象的看到拍摄的内容。
但是,受到拍摄情况的影响,例如,用户在触发拍摄功能时没有拿稳终端,那么最终图像中的人像可能会模糊失真,或者,用户在触发拍摄功能时没有控制好表情,那么最终图像中的人像可能会不太符合用户的预期,进而导致最终图像的显示效果较差。
发明内容
本发明提供一种图像处理方法及移动终端,以便解决由于直接将触发拍摄功能时所拍摄的图像作为动态图像所显示的最终图像,导致显示效果较差的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,本发明实施例提供了一种图像处理方法,应用于移动终端,该方法可以包括:
若接收到拍摄操作,则获取所述移动终端拍摄的目标视频;
提取所述目标视频中包括的图像,得到至少两帧备选图像;
获取每帧备选图像中的人像特征;所述人像特征包括人像的躯干姿势和人脸的表情特征至少之一;
从所述至少两帧备选图像中选择一帧图像作为目标图像,并基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整;
将调整后的目标图像确定为最终图像。
第二方面,本发明实施例提供了一种移动终端,该移动终端可以包括:
第一获取模块,用于若接收到拍摄操作,则获取所述移动终端拍摄的目标视频;
提取模块,用于提取所述目标视频中包括的图像,得到至少两帧备选图像;
第二获取模块,用于获取每帧备选图像中的人像特征;所述人像特征包括人像的躯干姿势和人脸的表情特征至少之一;
调整模块,用于从所述至少两帧备选图像中选择一帧图像作为目标图像,并基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整;
第一确定模块,用于将调整后的目标图像确定为最终图像。
第三方面,本发明实施例提供了一种移动终端,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如第一方面所述的图像处理方法的步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的图像处理方法的步骤。
在本发明实施例中,移动终端可以根据接收到的拍摄操作获取目标视频,然后提取目标视频中包括的图像,得到多个备选图像,接着,获取每帧备选图像中的人像特征,从这些备选图像中选择一帧图像作为目标图像,基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整,并将调整后的目标图像确定为最终图像。这样,可以保证最终图像是目标视频中效果较好的图像,相较于现有技术中,直接将目标视频的最后一帧图像作为最终图像的方式,使得最终图像能够更加符合用户预期,提高了最终图像的显示效果。
附图说明
图1是本发明实施例一提供的一种图像处理方法的步骤流程图;
图2-1是本发明实施例二提供的一种图像处理方法的步骤流程图;
图2-2是本发明实施例二提供的一种微笑程度示意图;
图2-3是本发明实施例二提供的一种表情区域调整示意图;
图2-4是本发明实施例二提供的一种划分示意图;
图2-5是本发明实施例二提供的一种子图像示意图;
图3是本发明实施例三提供的一种移动终端的框图;
图4是本发明实施例四提供的一种移动终端的框图;
图5为实现本发明各个实施例的一种移动终端的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一
图1是本发明实施例一提供的一种图像处理方法的步骤流程图,如图1所示,该方法可以应用于移动终端,该方法可以包括:
步骤101、若接收到拍摄操作,则获取所述移动终端拍摄的目标视频。
本发明实施例中,该拍摄操作可以是用户通过触发移动终端的拍摄功能向移动终端发送的。具体的触发方式可以是通过点击移动终端显示界面上的拍照键进行触发,也可以是通过实体按钮进行触发。例如,当移动终端为手机时,用户可以通过按下该手机的音量键来触发手机的拍摄功能,进而向手机发送拍摄操作,本发明实施例对此不作限定。
进一步地,该目标视频可以是接收到拍摄操作的时刻之前的预设时长内的视频,其中,该预设时长可以是根据实际需求设定的,示例的,该预设时长可以为10秒(Second,S),本发明实施例对此不作限定。实际应用中,移动终端可以在进入拍摄模式之后,例如,用户打开移动终端的相机应用之后,开始录制视频,在接收到拍摄操作时,从该录制的视频中截取预设时长内的视频,进而得到目标视频。
步骤102、提取所述目标视频中包括的图像,得到至少两帧备选图像。
本发明实施例中,目标视频中包括的图像指的是组成该目标视频的图像。具体的。移动终端可以通过对目标视频进行解析,来获取组成目标视频的图像。示例的,移动终端可以利用内置的视频解析工具,对目标视频进行解析,进而将目标视频解析为静态图像,得到多帧备选图像。
步骤103、获取每帧备选图像中的人像特征。
本发明实施例中,人像特征可以包括人像的躯干姿势和/或人脸的表情特征,其中,人像的躯干姿势可以表示备选图像中的人体所展示的姿势,人脸的表情特征可以包括微笑程度值、闭眼程度值以及皱眉程度值中的至少一种。
步骤104、从所述至少两帧备选图像中选择一帧图像作为目标图像,并基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整。
本发明实施例中,移动终端可以随机从这多帧备选图像中选择一帧图像作为目标图像,示例的,移动终端可以选择最后一帧备选图像作为目标图像,当然,移动终端也可以选择第一帧备选图像作为目标图像,本发明实施例对此不作限定。相应地,目标图像中的人像特征区域可以包括嘴巴、眼睛、眉毛以及身体躯干中的至少一种。由于用户在拍摄过程中的表情,身体姿势会不断变化的,因此,组成目标视频的备选图像中,有些会拍摄到用户具有美感的表情、身体姿势,有些就会拍摄到用户不具有美感的表情、身体姿势,因此,本发明实施例中,移动终端基于每帧备选图像中的人像特征对目标图像中的人像特征区域进行调整的方式,可以使得目标图像中人像的表情、身体姿势,是用户整个拍摄过程中具有美感的表情、姿势,进而使得调整后的目标图像能够更加符合用户的预期。
步骤105、将调整后的目标图像确定为最终图像。
本发明实施例中,移动终端可以利用该最终图像以及目标视频组成动态图像。进一步地,由于最终图像中人像的表情、姿势等等,更加符合用户的预期,因此,使用该调整后的目标图像作为最终图像,可以提高最终图像的显示效果。
综上所述,本发明实施例一提供的图像处理方法,移动终端可以根据接收到的拍摄操作获取目标视频,然后提取目标视频中包括的图像,得到多个备选图像,接着,获取每帧备选图像中的人像特征,从这些备选图像中选择一帧图像作为目标图像,基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整,并将调整后的目标图像确定为最终图像。这样,可以保证最终图像是目标视频中效果较好的图像,相较于现有技术中,直接将目标视频的最后一帧图像作为最终图像的方式,使得最终图像能够更加符合用户预期,提高了最终图像的显示效果。
实施例二
图2-1是本发明实施例二提供的一种图像处理方法的步骤流程图,如图2-1所示,该方法可以包括:
步骤201、若接收到拍摄操作,则获取所述移动终端拍摄的目标视频。
具体的,本步骤的实现方式可以参考上述步骤101,本发明实施例在此不做赘述。
步骤202、提取所述目标视频中包括的图像,得到至少两帧备选图像。
具体的,本步骤的实现方式可以参考上述步骤102,本发明实施例在此不做赘述。
步骤203、获取每帧备选图像中的人像特征。
本发明实施例中,人像特征可以仅包括人像的躯干姿势,人像特征也可以仅包括人脸的表情特征,人像特征也可以包括人像的躯干姿势以及人脸的表情特征。
具体的,当人像特征仅包括人像的躯干姿势时,移动终端可以下述子步骤(1)来实现获取每帧备选图像中的人像特征:
子步骤(1)获取每帧备选图像中人像的躯干姿势。
具体的,对于每帧备选图像,移动终端可以先获取备选图像中人像的躯干形状。实际的应用场景中,人体的躯干形状可以由人体的轮廓来表示,具体的,移动终端可以利用预设的轮廓检测算法对备选图像进行特征点标记,该预设的轮廓检测算法可以是基于罗伯茨(Roberts)算子、一阶微分(prewitt)算子或拉普拉斯算子的轮廓检测算法,本发明实施例对此不作限定。然后连接所标记的特征点,进而得到备选图像中人像的轮廓,该轮廓即可表示备选图像中人像的躯干形状。进一步地,人体的躯干形状也可以由人体的骨骼形状来表示,因此,在本发明的另一可选实施例中,还可以预先为移动终端预置一个体感摄像头,这样,移动终端可以在拍摄目标视频时,基于关键点检测库openpose技术,检测每一帧图像中人物的骨骼的三维坐标,然后将该骨骼三维坐标进行转换,得到该图像中人物的骨骼图像,并在该图像上标记出相应的骨骼图像,这样,移动终端可以直接提取预先标记好的骨骼图像,该骨骼图像可以表示该备选图像中人像的躯干形状。
然后,移动终端可以将所述躯干形状与至少两个预设躯干形状分别进行对比,将与所述躯干形状相匹配的预设躯干形状对应的躯干姿势,确定为所述备选图像中人像的躯干姿势。
具体的,移动终端可以分别对备选图像中的躯干形状与每个预设躯干形状进行线性拟合,进而得到备选图像中的躯干形状与每个预设躯干形状的相似度,其中,相似度越高,可以认为两者的匹配程度越高,反之,则可以认为匹配程度越低。因此,本步骤中,移动终端可以将相似度最高的预设躯干形状确定为与备选图像中的躯干形状相匹配的预设躯干形状。示例的,假设有三个预设躯干形状,其中,预设躯干形状1对应的躯干姿势为“下蹲”,预设躯干形状2对应的躯干姿势为“站立挥手”,预设躯干形状3对应的躯干姿势为“跳跃”,假设备选图像1中的躯干形状与预设躯干形状3的相似度最高,那么移动终端可以确定备选图像1中人像的躯干姿势为“跳跃”。本发明实施例中,移动终端会分析每帧备选图像中人像的躯干姿势,以便于后续过程中对目标图像中的躯干姿势进行调整,进而使得目标图像中的人像能够更加符合用户的预期。
进一步地,当人像特征仅包括人脸的表情特征时,移动终端可以下述子步骤(2)来实现获取每帧备选图像中的人像特征:
子步骤(2)获取每帧备选图像中人脸的表情特征。
本步骤中,人脸的表情特征可以包括微笑程度值、闭眼程度值以及皱眉程度值中的至少一种。
对于每帧备选图像,移动终端在获取人脸的微笑程度值时,可以获取备选图像中人脸的嘴巴轮廓,得到第一轮廓;将第一轮廓与至少两个预设嘴巴轮廓分别进行匹配,确定与第一轮廓匹配度最高的预设嘴巴轮廓,得到目标嘴巴轮廓;其中,不同的预设嘴巴轮廓对应不同的微笑程度值;将目标嘴巴轮廓对应的微笑程度值,确定为备选图像中人像的微笑程度值。
具体的,移动终端可以先确定出备选图像中的人脸区域,然后利用预设的轮廓检测算法确定人脸区域中的嘴巴轮廓,得到第一轮廓,然后分别计算该第一轮廓与每个预设嘴巴轮廓的相似度,其中,相似度越高,匹配度越高,因此,可以将与第一轮廓的相似度最高的预设嘴巴轮廓确定为目标嘴巴轮廓。进一步地,本发明实施例中,可以定义微笑程度值越大,微笑程度越大,微笑程度值越小,微笑程度越小。示例的,图2-2是本发明实施例二提供的一种微笑程度示意图,图2-2中示出了人脸的部分五官,其中,人脸a中的预设嘴巴轮廓对应的微笑程度值为-1、人脸b中的预设嘴巴轮廓对应的微笑程度值为0、人脸c中的预设嘴巴轮廓对应的微笑程度值为+1,可以看出,人脸c中的预设嘴巴轮廓的微笑程度最大,人脸a中预设嘴巴轮廓的微笑程度最小。
进一步地,对于每帧备选图像,移动终端在获取人脸的闭眼程度值时,可以获取备选图像中人脸的眼睛轮廓,得到第二轮廓;将第二轮廓与至少两个预设眼睛轮廓分别进行匹配,确定与第二轮廓匹配度最高的预设眼睛轮廓,得到目标眼睛轮廓;其中,不同的预设眼睛轮廓对应不同的闭眼程度值;将目标眼睛轮廓对应的闭眼程度值,确定为备选图像中人像的闭眼程度值。
具体的,移动终端可以先确定出备选图像中的人脸区域,然后利用预设的轮廓检测算法确定人脸区域中的眼睛轮廓,得到第二轮廓,然后分别计算该第二轮廓与每个预设眼睛轮廓的相似度,其中,相似度越高,匹配度越高,因此,可以将与第二轮廓的相似度最高的预设眼睛轮廓确定为目标眼睛轮廓。进一步地,本发明实施例中,可以定义闭眼程度值越大,上下眼睑之间的距离越小,即闭眼程度越大,反之,闭眼程度值越小,上下眼睑之间的距离越大,即闭眼程度越小。
进一步地,对于每帧备选图像,移动终端在获取人脸的皱眉程度值时,可以获取备选图像中人脸的眉毛轮廓,得到第三轮廓;将第三轮廓与至少两个预设眉毛轮廓分别进行匹配,确定与第三轮廓匹配度最高的预设眉毛轮廓,得到目标眉毛轮廓;将目标眉毛轮廓对应的皱眉程度值,确定为备选图像中人像的皱眉程度值。
具体的,移动终端可以先确定出备选图像中的人脸区域,然后利用预设的轮廓检测算法确定人脸区域中的眉毛轮廓,得到第三轮廓,然后分别计算该第三轮廓与每个预设眉毛轮廓的相似度,其中,相似度越高,匹配度越高,因此,可以将与第三轮廓的相似度最高的预设眉毛轮廓确定为目标眉毛轮廓。进一步地,本发明实施例中,可以定义皱眉程度值越大,双眉之间的距离越小,即皱眉程度越大,反之,闭眼程度值越小,上下眼睑之间的距离越大,即皱眉程度越小。本发明实施例中,移动终端会分析每帧备选图像中人像的表情特征,以便于后续过程中对目标图像中的表情区域进行调整,进而使得目标图像中的人像能够更加符合用户的预期。
进一步地,当人像特征包括人像的躯干姿势以及人脸的表情特征时,移动终端可以下述子步骤(3)来实现获取每帧备选图像中的人像特征:
子步骤(3):获取每帧备选图像中人像的躯干姿势,以及,获取每帧备选图像中人脸的表情特征。
具体的,本步骤的实现方式可以参考上述子步骤(1)以及子步骤(2),本发明实施例在此不做赘述。
步骤204、从所述至少两帧备选图像中选择一帧图像作为目标图像,并基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整。
具体的,当人像特征仅包括人像的躯干姿势时,人像特征区域可以为人像的身体躯干,移动终端可以通过下述子步骤(4)~子步骤(5)来实现基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整:
子步骤(4):若接收到用户发送的躯干姿势调整指令,则获取对应的躯干姿势与预设的目标躯干姿势匹配度最高的备选图像,得到第一目标备选图像。
本步骤中,移动终端可以在显示界面中显示目标图像,用户可以在对目标图像中人像的躯干姿势不满意时,可以通过触发移动终端的躯干姿势调整功能,向移动终端发送躯干姿势调整指令,例如,用户可以通过点击目标图像中人像的躯干部分来触发该躯干姿势调整功能。当然,该躯干姿势调整功能也可以通过其他方式触发,例如,可以在状态栏中显示一个躯干姿势调整按钮,用户可以通过点击该躯干姿势调整按钮触发移动终端的躯干姿势调整功能。进一步地,该预设的目标躯干姿势可以是用户根据实际需求预先设定的,示例的,假设预设的目标躯干姿势为“站立挥手”,假设有4个备选图像,其中备选图像3对应的躯干姿势与“站立挥手”的姿势的相似度最高,那么可以将备选图像3确定为第一目标备选图像。
子步骤(5)将所述目标图像中人像的身体躯干,替换为所述第一目标备选图像中人像的身体躯干。
示例的,移动终端可以截取备选图像3中人像的身体躯干,然后利用备选图像3中人像的身体躯干替换目标图像中人像的身体躯干。本发明实施例中,移动终端可以对目标图像中人像的身体躯干进行调整,进而使得图像中的人像的姿势能够更加符合用户的预期,进而提高了调整后的目标图像的显示效果。需要说明的是,实际应用中,可能会出现目标图像中人像的躯干姿势为与预设的目标躯干姿势的匹配度最高的图像,那么此时,移动终端可以不对目标图像进行调整,并向用户显示提醒信息,该提醒信息可以用于指示当前目标图像中人像的躯干姿势已为最优躯干姿势。
进一步地,当人像特征仅包括人脸的表情特征时,人像特征区域可以为人像的表情区域,移动终端可以通过下述子步骤(6)~子步骤(7)来实现基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整:
子步骤(6):若接收到用户发送的表情区域调整指令,则获取对应的表情特征与预设的目标表情特征匹配度最高的备选图像,得到第二目标备选图像。
本步骤中,预设的目标表情特征可以是用户根据实际需求预先设定的,预设的目标表情特征可以包括目标微笑程度值、闭眼程度值以及皱眉程度值中的至少一种。进一步地,移动终端可以在显示界面中显示目标图像,用户可以在对目标图像中人像的表情区域不满意时,可以通过触发移动终端的表情区域调整功能,向移动终端发送表情区域调整指令,例如,用户可以通过点击目标图像中人像的嘴巴区域来触发该表情区域调整功能,进而向移动终端发送表情区域调整指令,相应地,移动终端可以获取对应的微笑程度值与预设的目标微笑程度值匹配度最高的备选图像,进而得到第二目标备选图像。
当然,该表情区域调整功能也可以通过其他方式触发,例如,可以在状态栏中显示一个表情区域调整按钮,其中,表情区域调整按钮关联表情区域,示例的,例如,该表情区域调整按钮可以关联有眼睛区域,进一步地,假设用户通过点击与眼睛区域关联的表情区域调整按钮,向移动终端发送了表情区域调整指令,那么移动终端可以获取对应的闭眼程度值与预设的目标闭眼程度值匹配度最高的备选图像,进而得到第二目标备选图像。
示例的,移动终端在获取对应的微笑程度值与预设的目标微笑程度值匹配度最高的备选图像时,可以先计算每帧备选图像对应的微笑程度值与目标微笑程度值的差值的绝对值,然后将对应的差值的绝对值最小的备选图像,确定为第二目标备选图像。相应的,在获取对应的闭眼程度值与预设的目标闭眼程度值匹配度最高的备选图像,以及获取对应的皱眉程度值与预设的目标皱眉程度值匹配度最高的备选图像时,可以采用相同的实现方式,本发明实施例在此不做赘述。
假设预设的目标微笑程度值为+1,假设有4个备选图像,其中,备选图像2对应的微笑程度值与目标微笑程度值的差值的绝对值最小,那么可以将备选图像2确定为第二目标备选图像。
子步骤(7):将所述目标图像中人像的表情区域,替换为所述第二目标备选图像中人像的表情区域;其中,所述人像的表情区域包括嘴巴、眼睛以及眉毛中的至少一种。
示例的,图2-3是本发明实施例二提供的一种表情区域调整示意图,如图2-3中所示,移动终端可以截取备选图像2中人像的嘴巴区域m,然后利用备选图像2中人像的嘴巴区域m替换目标图像中人像的嘴巴区域n。本发明实施例中,移动终端可以对目标图像中人像的表情区域进行调整,进而使得图像中的人像的表情能够更加符合用户的预期,进而提高了调整后的目标图像的显示效果。需要说明的是,实际应用中,可能会出现目标图像中人像的表情特征为与预设的目标表情特征的匹配度最高的图像,那么此时,移动终端可以不对目标图像进行调整,并向用户显示提醒信息,该提醒信息可以用于指示当前目标图像中人像的表情区域已达到最优状态。
进一步地,当人像特征包括人像的躯干姿势以及人脸的表情特征时,人像特征区域可以为人像的身体躯干以及人像的表情区域,移动终端可以通过下述子步骤(8)~子步骤(11)来实现基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整:
子步骤(8):若接收到用户发送的躯干姿势调整指令,则获取对应的躯干姿势与预设的目标躯干姿势匹配度最高的备选图像,得到第一目标备选图像。
具体的,本步骤的实现方式可以参考上述子步骤(4),本发明实施例在此不做赘述。
子步骤(9):将所述目标图像中人像的身体躯干,替换为所述第一目标备选图像中人像的身体躯干。
具体的,本步骤的实现方式可以参考上述子步骤(5),本发明实施例在此不做赘述。
子步骤(10):若接收到用户发送的表情区域调整指令,则获取对应的表情特征与预设的目标表情特征匹配度最高的备选图像,得到第二目标备选图像。
具体的,本步骤的实现方式可以参考上述子步骤(6),本发明实施例在此不做赘述。
子步骤(11):将所述目标图像中人像的表情区域,替换为所述第二目标备选图像中人像的表情区域;其中,所述人像的表情区域包括嘴巴、眼睛以及眉毛中的至少一种。
具体的,本步骤的实现方式可以参考上述子步骤(7),本发明实施例在此不做赘述。
步骤205、将调整后的目标图像确定为最终图像。
具体的,本步骤的实现方式可以参考上述步骤105,本发明实施例在此不做赘述。
步骤206、将每帧备选图像分割为N个子图像。
本发明实施例中,每帧备选图像表示的是从目标视频中提取的所有图像,N可以为不小于2的正整数。具体的,可以预先定义好分割方式,具体的,可以定义分割的子图像的个数、每个子图像的面积以及每个子图像的相对位置关系,等等。示例的,图2-4是本发明实施例二提供的一种划分示意图,图2-4所示的划分方式中,N等于9,每个子图像的面积均为备选图像面积的1/9,9个子图像以3个为一行,3个为一列,移动终端可以按照图2-4所示的方式,将每帧备选图像均分割为9个子图像(图2-4中未示出备选图像的具体内容)。
步骤207、将每帧备选图像中对应同一显示位置的子图像组合为一个子视频,得到N个子视频。
本发明实施例中,每帧备选图像包括的子图像都在移动终端的显示屏上对应有具有的显示位置,且每帧备选图像都是从目标视频中提取的,因此每帧备选图像的大小相等,这样,备选图像与备选图像之间会存在对应相同显示位置的子图像。示例的,假设目标图像中包括两帧备选图像:备选图像1以及备选图像2,相应地,图2-5是本发明实施例二提供的一种子图像示意图,图2-5中包括备选图像1以及备选图像2,其中,备选图像1的子图像1.a的显示位置为屏幕的左上角,备选图像2的子图像2.a的显示位置为屏幕的左上角,因此,移动终端可以将子图像1.a以及子图像2.a组合为子视频a,以此类推,可以将子图像1.b以及子图像2.b组合为子视频b,…将子图像1.i以及子图像2.i组合为子视频i,得到9个子视频。
步骤208、将所述N个子视频确定为最终视频。
本发明实施例中,移动终端可以将组合后得到的子视频作为最终视频,示例的,该最终视频可以由步骤207中得到的9个子视频:子步骤a~子步骤i组成。需要说明的是,实际应用中,步骤207步骤208的顺序不唯一,例如,步骤207步骤208还可以位于步骤202之后,本发明实施例对此不作限定。
步骤209、将所述最终图像与所述最终视频关联,并显示所述最终图像。
本发明实施例中,移动终端将最终图像与最终视频关联即可得到动态图像,进一步地,移动终端在关联之后,可以显示最终图像,以便于用户进行观看或操作。具体的,移动终端若检测到用户对所述最终图像的第一操作,则将所述第一操作在所述最终图像中对应的图像区域作为目标区域,对所述目标区域进行缩放。
由于最终图像也是目标图像中的一帧图像,这样,在上述步骤的划分过程中,最终图像也会被划分为N个子图像。相应的,第一操作在最终图像中对应的图像区域可以是最终图像中包括的某个子图像。示例的,该第一操作可以为单击操作或者双击操作,当然,该第一操作的具体操作方式还可以为其他方式,本发明实施例对此不作限定。假设用户单击了最终图像中位于左上角的子图像,那么移动终端可以将该左上角的子图像作为目标区域,对该目标区域进行放大;假设用户双击了最终图像中位于左上角的子图像,那么移动终端可以将该左上角的子图像作为目标区域,对该目标区域进行缩小。
进一步地,若检测到用户对所述最终图像的第二操作,则将用户执行所述第二操作的位置对应的子视频,确定为目标子视频,并播放所述目标子视频。具体的,该第二操作可以为通过至少两个手指执行的长按操作,当然,该第二操作的具体操作方式还可以为其他方式,本发明实施例对此不作限定。由于最终视频是由多个子视频组成的,这样,用户可以选择性的播放某个子视频,提高了用户的可操作性。示例的,假设用户在通过两个手指长按显示屏的左上角,那么移动终端可以将在左上角显示的子视频a确定为目标子视频,播放子视频a。在本发明的另一可选实施例中,用户还可以在播放目标子视频的过程中停止播放,并控制移动终端利用停止时所显示的子图像替换最终图像中对应同一显示位置的子图像,使得用户可以对最终图像中的其他区域进行调整,同时也简化了调整过程。
进一步地,若检测到用户对所述最终图像的第三操作,则同时播放所述N个子视频。具体的,该第三操作可以为通过单个手指执行的长按操作,当然,该第三操作的具体操作方式还可以为其他方式,本发明实施例对此不作限定。示例的,假设用户在通过单个手指长按显示屏,那么移动终端可以同时播放这9个子视频,进而实现播放整个最终视频的效果,使得用户能够看到完整的最终视频。
综上所述,本发明实施例二提供的图像处理方法,移动终端可以根据接收到的拍摄操作获取目标视频,然后提取目标视频中包括的图像,得到多个备选图像,接着,从这些备选图像中选择一帧图像作为目标图像,最后基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整,并将调整后的目标图像确定为最终图像。这样,可以保证最终图像是目标视频中效果较好的图像,相较于现有技术中,直接将目标视频的最后一帧图像作为最终图像的方式,使得最终图像能够更加符合用户预期,提高了最终图像的显示效果;同时,移动终端还可以利用每帧备选图像组合多个子视频,将这多个子视频确定为最终视频,使得后续过程中对最终视频的部分或者整体进行播放,进而提高了最终视频的显示效果。
实施例三
图3是本发明实施例三提供的一种移动终端的框图,如图3所示,该移动终端30可以包括:
第一获取模块301,用于若接收到拍摄操作,则获取所述移动终端拍摄的目标视频。
提取模块302,用于提取所述目标视频中包括的图像,得到至少两帧备选图像。
第二获取模块303,用于获取每帧备选图像中的人像特征;所述人像特征包括人像的躯干姿势和人脸的表情特征至少之一。
调整模块304,用于从所述至少两帧备选图像中选择一帧图像作为目标图像,并基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整。
第一确定模块305,用于将调整后的目标图像确定为最终图像。
综上所述,本发明实施例提供的移动终端能够实现图1的方法实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。本发明实施例提供的移动终端,第一获取模块可以根据接收到的拍摄操作获取目标视频,然后提取模块可以提取目标视频中包括的图像,得到多个备选图像,接着,第二获取模块可以获取每帧备选图像中的人像特征,调整模块可以从这些备选图像中选择一帧图像作为目标图像,基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整最后,第一确定模块可以将调整后的目标图像确定为最终图像。这样,可以保证最终图像是目标视频中效果较好的图像,相较于现有技术中,直接将目标视频的最后一帧图像作为最终图像的方式,使得最终图像能够更加符合用户预期,提高了最终图像的显示效果。
实施例四
图4是本发明实施例四提供的一种移动终端的框图,如图4所示,该移动终端40可以包括:
第一获取模块401,用于若接收到拍摄操作,则获取所述移动终端拍摄的目标视频。
提取模块402,用于提取所述目标视频中包括的图像,得到至少两帧备选图像。
第二获取模块403,用于获取每帧备选图像中的人像特征;所述人像特征包括人像的躯干姿势和人脸的表情特征至少之一。
调整模块404,用于从所述至少两帧备选图像中选择一帧图像作为目标图像,并基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整。
第一确定模块405,用于将调整后的目标图像确定为最终图像。
可选的,当所述人像特征包括人像的躯干姿势时,所述人像特征区域为人像的身体躯干。
上述第二获取模块403,包括:
第一获取子模块,用于获取每帧备选图像中人像的躯干姿势。
相应地,上述调整模块404,用于:
若接收到用户发送的躯干姿势调整指令,则获取对应的躯干姿势与预设的目标躯干姿势匹配度最高的备选图像,得到第一目标备选图像。
将所述目标图像中人像的身体躯干,替换为所述第一目标备选图像中人像的身体躯干。
可选的,当所述人像特征包括人脸的表情特征时,所述人像特征区域为人像的表情区域。
上述第二获取模块403,包括:
第二获取子模块,用于获取每帧备选图像中人脸的表情特征。
相应地,上述调整模块404,用于:
若接收到用户发送的表情区域调整指令,则获取对应的表情特征与预设的目标表情特征匹配度最高的备选图像,得到第二目标备选图像。
将所述目标图像中人像的表情区域,替换为所述第二目标备选图像中人像的表情区域;其中,所述人像的表情区域包括嘴巴、眼睛以及眉毛中的至少一种。
可选的,当所述人像特征包括人像的躯干姿势以及人脸的表情特征时,所述人像特征区域为人像的身体躯干以及人像的表情区域。
上述第二获取模块403,包括:
第一获取子模块,用于获取每帧备选图像中人像的躯干姿势,以及,第二获取子模块,用于获取每帧备选图像中人脸的表情特征。
相应地,上述调整模块404,用于:
若接收到用户发送的躯干姿势调整指令,则获取对应的躯干姿势与预设的目标躯干姿势匹配度最高的备选图像,得到第一目标备选图像。
将所述目标图像中人像的身体躯干,替换为所述第一目标备选图像中人像的身体躯干。
若接收到用户发送的表情区域调整指令,则获取对应的表情特征与预设的目标表情特征匹配度最高的备选图像,得到第二目标备选图像。
将所述目标图像中人像的表情区域,替换为所述第二目标备选图像中人像的表情区域;其中,所述人像的表情区域包括嘴巴、眼睛以及眉毛中的至少一种。
可选的,上述第一获取子模块,用于:
对于每帧备选图像,获取所述备选图像中人像的躯干形状。
将所述躯干形状与至少两个预设躯干形状分别进行对比,将与所述躯干形状相匹配的预设躯干形状对应的躯干姿势,确定为所述备选图像中人像的躯干姿势。
可选的,所述人脸的表情特征包括微笑程度值、闭眼程度值以及皱眉程度值中的至少一种。
上述第二获取子模块,用于:
对于每帧备选图像,获取所述备选图像中人脸的嘴巴轮廓,得到第一轮廓;将所述第一轮廓与至少两个预设嘴巴轮廓分别进行匹配,确定与所述第一轮廓匹配度最高的预设嘴巴轮廓,得到目标嘴巴轮廓;其中,不同的预设嘴巴轮廓对应不同的微笑程度值;将所述目标嘴巴轮廓对应的微笑程度值,确定为所述备选图像中人像的微笑程度值。
和/或,
对于每帧备选图像,获取所述备选图像中人脸的眼睛轮廓,得到第二轮廓;将所述第二轮廓与至少两个预设眼睛轮廓分别进行匹配,确定与所述第二轮廓匹配度最高的预设眼睛轮廓,得到目标眼睛轮廓;其中,不同的预设眼睛轮廓对应不同的闭眼程度值;将所述目标眼睛轮廓对应的闭眼程度值,确定为所述备选图像中人像的闭眼程度值。
和/或,
对于每帧备选图像,获取所述备选图像中人脸的眉毛轮廓,得到第三轮廓;将所述第三轮廓与至少两个预设眉毛轮廓分别进行匹配,确定与所述第三轮廓匹配度最高的预设眉毛轮廓,得到目标眉毛轮廓;将所述目标眉毛轮廓对应的皱眉程度值,确定为所述备选图像中人像的皱眉程度值。
可选的,上述移动终端40还包括:
分割模块406,用于将每帧备选图像分割为N个子图像;所述N为不小于2的正整数。
组合模块407,用于将每帧备选图像中对应同一显示位置的子图像进行组合,得到N个子视频。
第二确定模块408,用于将所述N个子视频确定为最终视频。
可选的,上述移动终端40还包括:
关联模块409,用于将所述最终图像与所述最终视频关联,并显示所述最终图像。
缩放模块,用于若检测到用户对所述最终图像的第一操作,则将所述第一操作在所述最终图像中对应的图像区域作为目标区域,对所述目标区域进行缩放。
第一播放模块,用于若检测到用户对所述最终图像的第二操作,则将用户执行所述第二操作的位置对应的子视频,确定为目标子视频,并播放所述目标子视频。
第二播放模块,用于若检测到用户对所述最终图像的第三操作,则同时播放所述N个子视频。
综上所述,本发明实施例提供的移动终端能够实现图1的方法实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。本发明实施例提供的移动终端,第一获取模块可以根据接收到的拍摄操作获取目标视频,然后提取模块可以提取目标视频中包括的图像,得到多个备选图像,接着,第二获取模块可以获取每帧备选图像中的人像特征,调整模块可以从这些备选图像中选择一帧图像作为目标图像,基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整最后,第一确定模块可以将调整后的目标图像确定为最终图像。这样,可以保证最终图像是目标视频中效果较好的图像,相较于现有技术中,直接将目标视频的最后一帧图像作为最终图像的方式,使得最终图像能够更加符合用户预期,提高了最终图像的显示效果;同时,组合模块还可以利用每帧备选图像组合多个子视频,第二确定模块可以将这多个子视频确定为最终视频,使得后续过程中对最终视频的部分或者整体进行播放,进而提高了最终视频的显示效果。
图5为实现本发明各个实施例的一种移动终端的硬件结构示意图,
该移动终端500包括但不限于:射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、处理器510、以及电源511等部件。本领域技术人员可以理解,图5中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器510,用于若接收到拍摄操作,则获取所述移动终端拍摄的目标视频。
处理器510,用于提取所述目标视频中包括的图像,得到至少两帧备选图像。
处理器510,用于获取每帧备选图像中的人像特征;所述人像特征包括人像的躯干姿势和人脸的表情特征至少之一。
处理器510,用于从所述至少两帧备选图像中选择一帧图像作为目标图像,并基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整。
处理器510,用于将调整后的目标图像确定为最终图像。
本发明实施例中,移动终端可以根据接收到的拍摄操作获取目标视频,然后提取目标视频中包括的图像,得到多个备选图像,接着,获取每帧备选图像中的人像特征,从这些备选图像中选择一帧图像作为目标图像,基于每帧备选图像中的人像特征,对目标图像中的人像特征区域进行调整,并将调整后的目标图像确定为最终图像。这样,可以保证最终图像是目标视频中效果较好的图像,相较于现有技术中,直接将目标视频的最后一帧图像作为最终图像的方式,使得最终图像能够更加符合用户预期,提高了最终图像的显示效果。
应理解的是,本发明实施例中,射频单元501可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器510处理;另外,将上行的数据发送给基站。通常,射频单元501包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元501还可以通过无线通信系统与网络和其他设备通信。
移动终端通过网络模块502为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元503可以将射频单元501或网络模块502接收的或者在存储器509中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元503还可以提供与移动终端500执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元503包括扬声器、蜂鸣器以及受话器等。
输入单元504用于接收音频或视频信号。输入单元504可以包括图形处理器(Graphics Processing Unit,GPU)5041和麦克风5042,图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器5041处理后的图像帧可以存储在存储器509(或其它存储介质)中或者经由射频单元501或网络模块502进行发送。麦克风5042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元501发送到移动通信基站的格式输出。
移动终端500还包括至少一种传感器505,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板5061的亮度,接近传感器可在移动终端500移动到耳边时,关闭显示面板5061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器505还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元506用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板5061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板5061。
用户输入单元507可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元507包括触控面板5071以及其他输入设备5072。触控面板5071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板5071上或在触控面板5071附近的操作)。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器510,接收处理器510发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板5071。除了触控面板5071,用户输入单元507还可以包括其他输入设备5072。具体地,其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板5071可覆盖在显示面板5061上,当触控面板5071检测到在其上或附近的触摸操作后,传送给处理器510以确定触摸事件的类型,随后处理器510根据触摸事件的类型在显示面板5061上提供相应的视觉输出。虽然在图5中,触控面板5071与显示面板5061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板5071与显示面板5061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元508为外部装置与移动终端500连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元508可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端500内的一个或多个元件或者可以用于在移动终端500和外部装置之间传输数据。
存储器509可用于存储软件程序以及各种数据。存储器509可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器509可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器510是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器509内的软件程序和/或模块,以及调用存储在存储器509内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器510可包括一个或多个处理单元;优选的,处理器510可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器510中。
移动终端500还可以包括给各个部件供电的电源511(比如电池),优选的,电源511可以通过电源管理系统与处理器510逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,移动终端500包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种移动终端,包括处理器510,存储器509,存储在存储器509上并可在所述处理器510上运行的计算机程序,该计算机程序被处理器510执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (12)

1.一种图像处理方法,应用于移动终端,其特征在于,所述方法包括:
若接收到拍摄操作,则获取所述移动终端拍摄的目标视频;
提取所述目标视频中包括的图像,得到至少两帧备选图像;
获取每帧备选图像中的人像特征;所述人像特征包括人像的躯干姿势和人脸的表情特征至少之一;
从所述至少两帧备选图像中选择一帧图像作为目标图像,并基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整;
将调整后的目标图像确定为最终图像。
2.根据权利要求1所述的方法,其特征在于,当所述人像特征包括人像的躯干姿势以及人脸的表情特征时,所述人像特征区域为人像的身体躯干以及人像的表情区域;
所述获取每帧备选图像中的人像特征的步骤,包括:
获取每帧备选图像中人像的躯干姿势,以及,获取每帧备选图像中人脸的表情特征;
相应地,所述基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整的步骤,包括:
若接收到用户发送的躯干姿势调整指令,则获取对应的躯干姿势与预设的目标躯干姿势匹配度最高的备选图像,得到第一目标备选图像;
将所述目标图像中人像的身体躯干,替换为所述第一目标备选图像中人像的身体躯干;
若接收到用户发送的表情区域调整指令,则获取对应的表情特征与预设的目标表情特征匹配度最高的备选图像,得到第二目标备选图像;
将所述目标图像中人像的表情区域,替换为所述第二目标备选图像中人像的表情区域;其中,所述人像的表情区域包括嘴巴、眼睛以及眉毛中的至少一种。
3.根据权利要求2所述的方法,其特征在于,所述获取每帧备选图像中人像的躯干姿势的步骤,包括:
对于每帧备选图像,获取所述备选图像中人像的躯干形状;
将所述躯干形状与至少两个预设躯干形状分别进行对比,将与所述躯干形状相匹配的预设躯干形状对应的躯干姿势,确定为所述备选图像中人像的躯干姿势。
4.根据权利要求2所述的方法,其特征在于,所述人脸的表情特征包括微笑程度值、闭眼程度值以及皱眉程度值中的至少一种;
所述获取每帧备选图像中人脸的表情特征的步骤,包括:
对于每帧备选图像,获取所述备选图像中人脸的嘴巴轮廓,得到第一轮廓;将所述第一轮廓与至少两个预设嘴巴轮廓分别进行匹配,确定与所述第一轮廓匹配度最高的预设嘴巴轮廓,得到目标嘴巴轮廓;其中,不同的预设嘴巴轮廓对应不同的微笑程度值;将所述目标嘴巴轮廓对应的微笑程度值,确定为所述备选图像中人像的微笑程度值;
和/或,
对于每帧备选图像,获取所述备选图像中人脸的眼睛轮廓,得到第二轮廓;将所述第二轮廓与至少两个预设眼睛轮廓分别进行匹配,确定与所述第二轮廓匹配度最高的预设眼睛轮廓,得到目标眼睛轮廓;其中,不同的预设眼睛轮廓对应不同的闭眼程度值;将所述目标眼睛轮廓对应的闭眼程度值,确定为所述备选图像中人像的闭眼程度值;
和/或,
对于每帧备选图像,获取所述备选图像中人脸的眉毛轮廓,得到第三轮廓;将所述第三轮廓与至少两个预设眉毛轮廓分别进行匹配,确定与所述第三轮廓匹配度最高的预设眉毛轮廓,得到目标眉毛轮廓;将所述目标眉毛轮廓对应的皱眉程度值,确定为所述备选图像中人像的皱眉程度值。
5.根据权利要求1所述的方法,其特征在于,在所述提取所述目标视频中包括的图像,得到至少两帧备选图像的步骤之后,所述方法还包括:
将每帧备选图像分割为N个子图像;所述N为不小于2的正整数;
将每帧备选图像中对应同一显示位置的子图像进行组合,得到N个子视频;
将所述N个子视频确定为最终视频。
6.一种移动终端,其特征在于,所述移动终端包括:
第一获取模块,用于若接收到拍摄操作,则获取所述移动终端拍摄的目标视频;
提取模块,用于提取所述目标视频中包括的图像,得到至少两帧备选图像;
第二获取模块,用于获取每帧备选图像中的人像特征;所述人像特征包括人像的躯干姿势和人脸的表情特征至少之一;
调整模块,用于从所述至少两帧备选图像中选择一帧图像作为目标图像,并基于每帧备选图像中的人像特征,对所述目标图像中的人像特征区域进行调整;
第一确定模块,用于将调整后的目标图像确定为最终图像。
7.根据权利要求6所述的移动终端,其特征在于,当所述人像特征包括人像的躯干姿势以及人脸的表情特征时,所述人像特征区域为人像的身体躯干以及人像的表情区域;
所述第二获取模块,包括:
第一获取子模块,用于获取每帧备选图像中人像的躯干姿势,以及,第二获取子模块,用于获取每帧备选图像中人脸的表情特征;
相应地,所述调整模块,用于:
若接收到用户发送的躯干姿势调整指令,则获取对应的躯干姿势与预设的目标躯干姿势匹配度最高的备选图像,得到第一目标备选图像;
将所述目标图像中人像的身体躯干,替换为所述第一目标备选图像中人像的身体躯干;
若接收到用户发送的表情区域调整指令,则获取对应的表情特征与预设的目标表情特征匹配度最高的备选图像,得到第二目标备选图像;
将所述目标图像中人像的表情区域,替换为所述第二目标备选图像中人像的表情区域;其中,所述人像的表情区域包括嘴巴、眼睛以及眉毛中的至少一种。
8.根据权利要求7所述的移动终端,其特征在于,所述第一获取子模块,用于:
对于每帧备选图像,获取所述备选图像中人像的躯干形状;
将所述躯干形状与至少两个预设躯干形状分别进行对比,将与所述躯干形状相匹配的预设躯干形状对应的躯干姿势,确定为所述备选图像中人像的躯干姿势。
9.根据权利要求7所述的移动终端,其特征在于,所述人脸的表情特征包括微笑程度值、闭眼程度值以及皱眉程度值中的至少一种;
所述第二获取子模块,用于:
对于每帧备选图像,获取所述备选图像中人脸的嘴巴轮廓,得到第一轮廓;将所述第一轮廓与至少两个预设嘴巴轮廓分别进行匹配,确定与所述第一轮廓匹配度最高的预设嘴巴轮廓,得到目标嘴巴轮廓;其中,不同的预设嘴巴轮廓对应不同的微笑程度值;将所述目标嘴巴轮廓对应的微笑程度值,确定为所述备选图像中人像的微笑程度值;
和/或,
对于每帧备选图像,获取所述备选图像中人脸的眼睛轮廓,得到第二轮廓;将所述第二轮廓与至少两个预设眼睛轮廓分别进行匹配,确定与所述第二轮廓匹配度最高的预设眼睛轮廓,得到目标眼睛轮廓;其中,不同的预设眼睛轮廓对应不同的闭眼程度值;将所述目标眼睛轮廓对应的闭眼程度值,确定为所述备选图像中人像的闭眼程度值;
和/或,
对于每帧备选图像,获取所述备选图像中人脸的眉毛轮廓,得到第三轮廓;将所述第三轮廓与至少两个预设眉毛轮廓分别进行匹配,确定与所述第三轮廓匹配度最高的预设眉毛轮廓,得到目标眉毛轮廓;将所述目标眉毛轮廓对应的皱眉程度值,确定为所述备选图像中人像的皱眉程度值。
10.根据权利要求6所述的移动终端,其特征在于,所述移动终端还包括:
分割模块,用于将每帧备选图像分割为N个子图像;所述N为不小于2的正整数;
组合模块,用于将每帧备选图像中对应同一显示位置的子图像进行组合,得到N个子视频;
第二确定模块,用于将所述N个子视频确定为最终视频。
11.一种移动终端,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。
CN201810392403.3A 2018-04-27 2018-04-27 一种图像处理方法及移动终端 Active CN108712603B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810392403.3A CN108712603B (zh) 2018-04-27 2018-04-27 一种图像处理方法及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810392403.3A CN108712603B (zh) 2018-04-27 2018-04-27 一种图像处理方法及移动终端

Publications (2)

Publication Number Publication Date
CN108712603A true CN108712603A (zh) 2018-10-26
CN108712603B CN108712603B (zh) 2021-02-09

Family

ID=63867541

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810392403.3A Active CN108712603B (zh) 2018-04-27 2018-04-27 一种图像处理方法及移动终端

Country Status (1)

Country Link
CN (1) CN108712603B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109598678A (zh) * 2018-12-25 2019-04-09 维沃移动通信有限公司 一种图像处理方法、装置和终端设备
CN110363170A (zh) * 2019-07-22 2019-10-22 北京华捷艾米科技有限公司 视频换脸方法和装置
CN110390704A (zh) * 2019-07-11 2019-10-29 深圳追一科技有限公司 图像处理方法、装置、终端设备及存储介质
CN111093026A (zh) * 2019-12-30 2020-05-01 维沃移动通信(杭州)有限公司 视频处理方法、电子设备及计算机可读存储介质
CN111222493A (zh) * 2020-01-20 2020-06-02 北京捷通华声科技股份有限公司 一种视频处理方法及装置
CN111246113A (zh) * 2020-03-05 2020-06-05 上海瑾盛通信科技有限公司 图像处理方法、装置、设备及存储介质
CN111263073A (zh) * 2020-02-27 2020-06-09 维沃移动通信有限公司 图像处理方法及电子设备
CN111696051A (zh) * 2020-05-14 2020-09-22 维沃移动通信有限公司 人像修复方法及电子设备
CN113542594A (zh) * 2021-06-28 2021-10-22 惠州Tcl云创科技有限公司 基于视频的高画质图像提取处理方法、装置、移动终端

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030206654A1 (en) * 2002-05-01 2003-11-06 Heng-Tun Teng Replacing method of an object in a dynamic image
CN1758735A (zh) * 2004-10-06 2006-04-12 欧姆龙株式会社 动态图像记录装置和动态图像再现装置
CN1764238A (zh) * 2004-10-18 2006-04-26 欧姆龙株式会社 摄像装置
CN101072289A (zh) * 2007-06-11 2007-11-14 北京中星微电子有限公司 一种图像特效的自动生成方法及装置
CN101807393A (zh) * 2010-03-12 2010-08-18 青岛海信电器股份有限公司 Ktv系统及其实现方法、电视机
CN105303161A (zh) * 2015-09-21 2016-02-03 广东欧珀移动通信有限公司 一种多人拍照的方法及装置
CN106791032A (zh) * 2016-11-30 2017-05-31 世优(北京)科技有限公司 静态图像转换为动态影像的方法和装置
CN107835367A (zh) * 2017-11-14 2018-03-23 维沃移动通信有限公司 一种图像处理方法、装置及移动终端

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030206654A1 (en) * 2002-05-01 2003-11-06 Heng-Tun Teng Replacing method of an object in a dynamic image
CN1758735A (zh) * 2004-10-06 2006-04-12 欧姆龙株式会社 动态图像记录装置和动态图像再现装置
CN1764238A (zh) * 2004-10-18 2006-04-26 欧姆龙株式会社 摄像装置
CN101072289A (zh) * 2007-06-11 2007-11-14 北京中星微电子有限公司 一种图像特效的自动生成方法及装置
CN101807393A (zh) * 2010-03-12 2010-08-18 青岛海信电器股份有限公司 Ktv系统及其实现方法、电视机
CN105303161A (zh) * 2015-09-21 2016-02-03 广东欧珀移动通信有限公司 一种多人拍照的方法及装置
CN106791032A (zh) * 2016-11-30 2017-05-31 世优(北京)科技有限公司 静态图像转换为动态影像的方法和装置
CN107835367A (zh) * 2017-11-14 2018-03-23 维沃移动通信有限公司 一种图像处理方法、装置及移动终端

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109598678B (zh) * 2018-12-25 2023-12-12 维沃移动通信有限公司 一种图像处理方法、装置和终端设备
CN109598678A (zh) * 2018-12-25 2019-04-09 维沃移动通信有限公司 一种图像处理方法、装置和终端设备
CN110390704A (zh) * 2019-07-11 2019-10-29 深圳追一科技有限公司 图像处理方法、装置、终端设备及存储介质
CN110363170B (zh) * 2019-07-22 2022-02-01 北京华捷艾米科技有限公司 视频换脸方法和装置
CN110363170A (zh) * 2019-07-22 2019-10-22 北京华捷艾米科技有限公司 视频换脸方法和装置
CN111093026A (zh) * 2019-12-30 2020-05-01 维沃移动通信(杭州)有限公司 视频处理方法、电子设备及计算机可读存储介质
CN111222493A (zh) * 2020-01-20 2020-06-02 北京捷通华声科技股份有限公司 一种视频处理方法及装置
CN111222493B (zh) * 2020-01-20 2023-07-28 北京捷通华声科技股份有限公司 一种视频处理方法及装置
CN111263073A (zh) * 2020-02-27 2020-06-09 维沃移动通信有限公司 图像处理方法及电子设备
CN111263073B (zh) * 2020-02-27 2021-11-09 维沃移动通信有限公司 图像处理方法及电子设备
CN111246113A (zh) * 2020-03-05 2020-06-05 上海瑾盛通信科技有限公司 图像处理方法、装置、设备及存储介质
CN111696051A (zh) * 2020-05-14 2020-09-22 维沃移动通信有限公司 人像修复方法及电子设备
CN113542594A (zh) * 2021-06-28 2021-10-22 惠州Tcl云创科技有限公司 基于视频的高画质图像提取处理方法、装置、移动终端
CN113542594B (zh) * 2021-06-28 2023-11-17 惠州Tcl云创科技有限公司 基于视频的高画质图像提取处理方法、装置、移动终端

Also Published As

Publication number Publication date
CN108712603B (zh) 2021-02-09

Similar Documents

Publication Publication Date Title
CN108712603A (zh) 一种图像处理方法及移动终端
CN108540724A (zh) 一种拍摄方法及移动终端
CN108228032A (zh) 一种显示屏的控制方法及移动终端
CN110248254A (zh) 显示控制方法及相关产品
CN107483836B (zh) 一种拍摄方法及移动终端
CN108495029A (zh) 一种拍照方法及移动终端
CN109461117A (zh) 一种图像处理方法及移动终端
CN107864353B (zh) 一种视频录制方法及移动终端
CN110365907A (zh) 一种拍照方法、装置及电子设备
CN108111754A (zh) 一种确定图像采集模式的方法及移动终端
CN108600647A (zh) 拍摄预览方法、移动终端及存储介质
CN107635110A (zh) 一种视频截图方法及终端
CN109218648A (zh) 一种显示控制方法及终端设备
CN107845057A (zh) 一种拍照预览方法及移动终端
CN109788204A (zh) 拍摄处理方法及终端设备
CN108924412A (zh) 一种拍摄方法及终端设备
CN108628515A (zh) 一种多媒体内容的操作方法和移动终端
CN109669611A (zh) 试衣方法及终端
CN109120800A (zh) 一种应用程序图标调整方法及移动终端
CN109819167A (zh) 一种图像处理方法、装置和移动终端
CN109671034A (zh) 一种图像处理方法及终端设备
CN109922294A (zh) 一种视频处理方法及移动终端
CN109448069A (zh) 一种模板生成方法及移动终端
CN108616687A (zh) 一种拍照方法、装置和移动终端
CN108174110A (zh) 一种拍照方法及柔性屏终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220810

Address after: 710077 Floor 9, block G4, HUanPu Science Park, No. 211, Tiangu 8th Road, high tech Zone, Xi'an, Shaanxi Province

Patentee after: Xi'an Weiwo Software Technology Co.,Ltd.

Address before: 523860 No. 283 BBK Avenue, Changan Town, Changan, Guangdong.

Patentee before: VIVO MOBILE COMMUNICATION Co.,Ltd.