CN110266942B - 图片的合成方法及相关产品 - Google Patents

图片的合成方法及相关产品 Download PDF

Info

Publication number
CN110266942B
CN110266942B CN201910478182.6A CN201910478182A CN110266942B CN 110266942 B CN110266942 B CN 110266942B CN 201910478182 A CN201910478182 A CN 201910478182A CN 110266942 B CN110266942 B CN 110266942B
Authority
CN
China
Prior art keywords
picture
type
circular
image
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201910478182.6A
Other languages
English (en)
Other versions
CN110266942A (zh
Inventor
张海平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oppo Chongqing Intelligent Technology Co Ltd
Original Assignee
Oppo Chongqing Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oppo Chongqing Intelligent Technology Co Ltd filed Critical Oppo Chongqing Intelligent Technology Co Ltd
Priority to CN201910478182.6A priority Critical patent/CN110266942B/zh
Publication of CN110266942A publication Critical patent/CN110266942A/zh
Application granted granted Critical
Publication of CN110266942B publication Critical patent/CN110266942B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06T3/04
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing

Abstract

本申请实施例公开了一种图片的合成方法及相关产品,应用于电子设备,电子设备包括前置摄像头、后置摄像头和显示屏;所述方法包括如下步骤:启动前置摄像头和后置摄像头时,获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片;识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型;依据第一类型与第二类型确定第一图片与第二图片的合成策略,依据该合成策略将该第一图片以及第二图片合成得到第三图片,将第三图片通过所述显示屏显示。通过前后摄像头的图片的类型对前后摄像头的图片进行合成,实现了用户的个性化,提高了用户的体验度。

Description

图片的合成方法及相关产品
技术领域
本申请涉及电子设备技术领域,具体涉及一种图片的合成方法及相关产品。
背景技术
随着电子设备(如手机、平板电脑等等)的大量普及应用,电子设备能够支持的应用越来越多,功能越来越强大,电子设备向着多样化、个性化的方向发展,成为用户生活中不可缺少的电子用品。
摄影,随着大众消费电子产品的水平越来越高,手机传感器的能力越来越强,已经不再是摄影师的专属,普通人越来越多地利用手里的设备记录自己的生活。现有的手机一般仅支持前摄或后摄拍摄摄像头采集的画面,并不能结合前后置摄像头拍摄的照片,无法满足用户的多样需求,影响了用户体验度。
发明内容
本申请实施例提供了一种图片的合成方法及相关产品,能够结合前后摄像头拍摄的照片,满足用户的多样需求,提高了用户体验度。
第一方面,本申请实施例提供一种电子设备,所述电子设备包括前置摄像头、后置摄像头、显示屏和处理器,其中,
所述前置摄像头,用于采集第一图片;
所述后置摄像头,用于采集第二图片;
所述处理器,用于获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片,识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型,依据所述第一类型与所述第二类型确定第一图片与第二图片的合成策略,依据所述合成策略将所述第一图片以及所述第二图片合成得到第三图片;
所述显示屏,用于显示所述第三图片。
第二方面,提供一种图片的合成方法,所述方法应用于电子设备,所述电子设备包括:前置摄像头、后置摄像头和显示屏;所述方法包括如下步骤:
启动前置摄像头和后置摄像头时,获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片;
识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型;
依据第一类型与第二类型确定第一图片与第二图片的合成策略,依据该合成策略将该第一图片以及第二图片合成得到第三图片,将第三图片通过所述显示屏显示。
第三方面,本申请实施例提供一种图片的合成装置,应用于电子设备,所述电子设备包括前置摄像头和后置摄像头,所述装置包括:
所述前置摄像头,用于采集第一图片;
所述后置摄像头,用于采集第二图片;
获取单元,用于获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片;
识别单元,用于识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型;
合成单元,用于依据所述第一类型与所述第二类型确定第一图片与第二图片的合成策略,依据所述合成策略将所述第一图片以及所述第二图片合成得到第三图片;
显示单元,用于显示所述第三图片。
第四方面,本申请实施例提供一种电子设备,包括处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行本申请实施例第二方面中的步骤的指令。
第五方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第二方面中所描述的部分或全部步骤。
第六方面,本申请实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第二方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出,本申请提供的技术方案在同时启动前置摄像头和后置摄像头时,采集前置摄像图的第一图片以及后置摄像头的第二图片,然后依据该第一图片以及第二图片的类型确定该合成策略,然后依据该合成策略对第一图片以及第二图片合成得到第三图片,从而实现了前置摄像头以及后置摄像头的合成显示,实现了用户个性化的选择,提高了用户体验度。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1A是本申请实施例提供的一种电子设备的结构示意图;
图1B是本申请实施例提供的一种图片的合成方法的流程示意图;
图1C是本申请实施例提供的另一种图片的合成方法的流程示意图;
图2A是本申请实施例提供的另一种图片的合成方法的流程示意图;
图2B是本申请实施例提供的另一种图片的合成方法的流程示意图;
图2C是本申请实施例提供的另一种图片的合成方法的流程示意图;
图3A是本申请实施例提供的另一种电子设备的结构示意图;
图3B是本申请实施例提供的另一种电子设备的结构示意图;
图4A是本申请实施例提供的一种图片的合成装置的功能单元组成框图;
图4B是本申请实施例提供的另一种图片的合成装置的功能单元组成框图;
图4C是本申请实施例提供的另一种图片的合成装置的功能单元组成框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
本申请实施例所涉及到的电子设备可以包括各种具有无线通信功能的手持设备(例如智能手机或平板电脑)、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(user equipment,UE),移动台(mobile station,MS),终端设备(terminal device)等等。
下面对本申请实施例进行详细介绍。
请参阅图1A,图1A是本申请实施例公开的一种电子设备的结构示意图,电子设备100包括存储和处理电路110,以及与所述存储和处理电路110连接的传感器170,传感器170包括前置摄像头和后置摄像头,其中:
电子设备100可以包括控制电路,该控制电路可以包括存储和处理电路110。该存储和处理电路110可以存储器,例如硬盘驱动存储器,非易失性存储器(例如闪存或用于形成固态驱动器的其它电子可编程只读存储器等),易失性存储器(例如静态或动态随机存取存储器等)等,本申请实施例不作限制。存储和处理电路110中的处理电路可以用于控制电子设备100的运转。该处理电路可以基于一个或多个微处理器,微控制器,数字信号处理器,基带处理器,功率管理单元,音频编解码器芯片,专用集成电路,显示驱动器集成电路等来实现。
存储和处理电路110可用于运行电子设备100中的软件,例如互联网浏览应用程序,互联网协议语音(Voice over Internet Protocol,VOIP)电话呼叫应用程序,电子邮件应用程序,媒体播放应用程序,操作系统功能等。这些软件可以用于执行一些控制操作,例如,基于照相机的图像采集,基于环境光传感器的环境光测量,基于接近传感器的接近传感器测量,基于诸如发光二极管的状态指示灯等状态指示器实现的信息显示功能,基于触摸传感器的触摸事件检测,与在多个(例如分层的)显示屏上显示信息相关联的功能,与执行无线通信功能相关联的操作,与收集和产生音频信号相关联的操作,与收集和处理按钮按压事件数据相关联的控制操作,以及电子设备100中的其它功能等,本申请实施例不作限制。
电子设备100可以包括输入-输出电路150。输入-输出电路150可用于使电子设备100实现数据的输入和输出,即允许电子设备100从外部设备接收数据和也允许电子设备100将数据从电子设备100输出至外部设备。输入-输出电路150可以进一步包括传感器170。传感器170静脉识别模组,还可以包括环境光传感器,基于光和电容的接近传感器,指纹识别模组,、触摸传感器(例如,基于光触摸传感器和/或电容式触摸传感器,其中,触摸传感器可以是触控显示屏的一部分,也可以作为一个触摸传感器结构独立使用),加速度传感器,摄像头,和其它传感器等,摄像头可以为前置摄像头或者后置摄像头,指纹识别模组可集成于显示屏下方,用于采集指纹图像,指纹识别模组可以为以下至少一种:光学指纹识别模组、或者超声波指纹识别模组等等,在此不作限定。上述前置摄像头可以设置前面显示屏的下方,上述后置摄像头可以设置在后面显示屏的下方。当然上述前置摄像头或后置摄像头也可以不和显示屏集成设置,当然在实际应用中,上述前置摄像头或后置摄像头还可以为升降结构,本申请具体实施方式并不限制上述前置摄像头或后置摄像头的具体结构。
输入-输出电路150还可以包括一个或多个显示屏,当为多个显示屏时,例如2个显示屏时,一个显示屏可以设置在电子设备的前面,另一个显示屏可以设置在电子设备的后面,例如显示屏130。显示屏130可以包括液晶显示屏,有机发光二极管显示屏,电子墨水显示屏,等离子显示屏,使用其它显示技术的显示屏中一种或者几种的组合。显示屏130可以包括触摸传感器阵列(即,显示屏130可以是触控显示屏)。触摸传感器可以是由透明的触摸传感器电极(例如氧化铟锡(ITO)电极)阵列形成的电容式触摸传感器,或者可以是使用其它触摸技术形成的触摸传感器,例如音波触控,压敏触摸,电阻触摸,光学触摸等,本申请实施例不作限制。
电子设备100还可以包括音频组件140。音频组件140可以用于为电子设备100提供音频输入和输出功能。电子设备100中的音频组件140可以包括扬声器,麦克风,蜂鸣器,音调发生器以及其它用于产生和检测声音的组件。
通信电路120可以用于为电子设备100提供与外部设备通信的能力。通信电路120可以包括模拟和数字输入-输出接口电路,和基于射频信号和/或光信号的无线通信电路。通信电路120中的无线通信电路可以包括射频收发器电路、功率放大器电路、低噪声放大器、开关、滤波器和天线。举例来说,通信电路120中的无线通信电路可以包括用于通过发射和接收近场耦合电磁信号来支持近场通信(Near Field Communication,NFC)的电路。例如,通信电路120可以包括近场通信天线和近场通信收发器。通信电路120还可以包括蜂窝电话收发器和天线,无线局域网收发器电路和天线等。
电子设备100还可以进一步包括电池,电力管理电路和其它输入-输出单元160。输入-输出单元160可以包括按钮,操纵杆,点击轮,滚动轮,触摸板,小键盘,键盘,照相机,发光二极管和其它状态指示器等。
用户可以通过输入-输出电路150输入命令来控制电子设备100的操作,并且可以使用输入-输出电路150的输出数据以实现接收来自电子设备100的状态信息和其它输出。
基于上述图1A所描述的电子设备,可以用于实现如下功能:
所述电子设备的前置摄像头,用于采集第一图片;
所述电子设备的后置摄像头,用于采集第二图片;
所述电子设备的存储和处理电路110,用于获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片,识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型,依据所述第一类型与所述第二类型确定第一图片与第二图片的合成策略,依据所述合成策略将所述第一图片以及所述第二图片合成得到第三图片;
所述电子设备的显示屏,用于显示所述第三图片。
在一种可选的技术方案中,
存储和处理电路110,具体用于依据第一类型与第二类型从类型与合成策略映射关系中查询得到该第一类型与第二类型对应的第一合成策略;
所述合成策略包括:背景叠加、分屏显示或人像叠加。
在一种可选的技术方案中,
存储和处理电路110,具体用于当所述合成策略为背景叠加时,将第一图片与第二图片叠加得到第三图片,其中,所述第二图片为所述第三图片的底层图片;
或,存储和处理电路110,具体用于当所述合成策略为分屏显示时,将第一图片的尺寸进行压缩得到第四图片,将第二图片的尺寸进行压缩得到第五图片,将第四图片以及第五图片拼接形成第三图片,将所述第三图片在所述显示屏的对应位置显示;
或,存储和处理电路110,具体用于当所述合成策略为人像叠加时,对第二图片进行人物轮廓识别确定第二图片中的人物轮廓,将所述人物轮廓的图像插入到第一图片的人物轮廓傍边得到第三图片。
在一种可选的技术方案中,
存储和处理电路110,具体用于将第一图片输入到分类器中计算得到第一类型,将第二图片输入到分类器中计算得到第二类型。
存储和处理电路110,还用于满足设定触发条件时,获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片。
请参阅图1B,图1B是本申请实施例提供的一种图片的合成方法的流程示意图,如图所示,应用于如图1A所示的电子设备,所述电子设备包括前置摄像头和后置摄像头,本图片的合成方法包括:
步骤S101、终端启动前置摄像头和后置摄像头时,获取前置摄像头采集的第一图片以及后置摄像头采集的第二图片;
上述终端启动前置摄像头和后置摄像头的方式可以有多种,例如在一种可选的实施例中,可以通过一个特定的按钮来确定是否同时启动前置摄像头和后置摄像头。当然在另一种可选的实施例中,可以通过满足设定触发条件时,启动或获取摄像头采集的图片,该触发条件可以是一个特定的操作来确定是否启动前置摄像头和后置摄像头,该特定的操作包括但不限于,特定的手势、或者生物识别验证,该生物识别验证包括但不限于:人脸识别验证、指纹识别验证、静脉识别验证等等。本申请具体实施方式并不限制上述启动前置摄像头和后置摄像头的方案。
上述静脉识别验证的方法具体可以包括:
B1、分析静脉图片中的目标静脉区域图像的特征点分布;
B2、按照M个不同圆心对所述目标静脉区域图像进行圆形图像截取,得到M个圆形静脉区域图像,所述M为大于3的整数;
B3、从所述M个圆形静脉区域图像中选出目标圆形静脉区域图像,所述目标圆形静脉区域图像所包含的特征点的数量大于所述M个圆形静脉区域图像中的其他圆形静脉区域图像;
B4,将所述目标圆形静脉区域图像划分得到N个圆环,所述N个圆环的环宽相同;
B5,从所述N个圆环中半径最小的圆环开始,将所述N个圆环依次与预设静脉模板进行特征点匹配,并累计已匹配圆环的匹配值;
B6,当累计的匹配值大于预设匹配阈值时立即停止进行特征点匹配,并输出启动前置摄像头和后置摄像头的命令。
可选的,上述方法在步骤S101与S102之间还可以包括:
将第一图片以及第二图片显示,上述显示的方式包括但不限于:分屏显示、放大浮层显示、画中画显示或其他显示等等。
上述将第一图片以及第二图片在显示屏显示的具体实现步骤如图1C所示,具体可以包括如下:
11、终端确定第一图片的第一尺寸以及第二图片的第二尺寸;
12、终端依据用户的选择确定该显示策略;
13、终端依据该显示策略对该第一尺寸的第一图片进行调整得到第四图片,对该第二尺寸的第二图片进行调整得到第五图片;
14、终端依据该显示策略显示第四图片和第五图片。
下面以一个实际的例子来说明。例如该显示策略为分屏显示,分别占一半的显示屏尺寸,假设第一图片以及第二图片均为竖直拍摄,则直接将第一尺寸的第一图片的高度值压缩一半得到第三图片,将第二图片的高度值压缩一半得到第四图片,然后将第三图片以及第四图片分别显示在显示屏的上半部分以及下半部分。
当然上述显示策略还可以为画中画显示,具体的,确定该画中画显示中的副画的第三尺寸,将第一图片或第二图片中的一个图片的尺寸压缩至该第三尺寸,然后将该第三尺寸的图片显示在画中画部分。
当然上述显示策略还可以为其他的显示策略,本申请具体实施方式并不限制上述显示策略的实际应用方式。
步骤S102、终端识别第一图片确定第一图片的第一类型,识别第二图片确定第二图片的第二类型;
上述步骤S102的实现方法具体可以包括:
终端将第一图片输入到分类器中识别得到第一类型,同理,也可以将第二图片输入到分类器中识别得到第二类型。
上述分类器包括但不限于:能够进行分类识别的模型,例如,支持向量机模型、神经网络模型等等。本申请对该分类器的实现方式并不限定。
步骤S103、终端依据第一类型与第二类型确定第一图片与第二图片的合成策略,依据该合成策略将该第一图片以及第二图片合成得到第三图片,将第三图片在显示屏显示。
本申请提供的技术方案在同时启动前置摄像头和后置摄像头时,采集前置摄像图的第一图片以及后置摄像头的第二图片,然后依据该第一图片以及第二图片的类型确定该合成策略,然后依据该合成策略对第一图片以及第二图片合成得到第三图片,从而实现了前置摄像头以及后置摄像头的合成显示,实现了用户个性化的选择,提高了用户体验度。
上述终端依据第一类型与第二类型确定第一图片与第二图片的合成策略具体可以包括:
终端依据第一类型与第二类型从类型与合成策略映射关系中查询得到该第一类型与第二类型对应的第一合成策略。
上述合成策略包括但不限于:背景叠加、分屏显示或人像叠加。
上述类型与合成策略映射关系可以如下表所示。
类型 合成策略
风景+人物 背景叠加
风景+风景 分屏显示
人物+人物 人像叠加
下面通过每种合成策略来分别说明对应的第一图片以及第二图片的合成策略的实现方式。
参阅图2A,图2A提供了一种图片的合成的方法的流程示意图,如图2A所示的图片的合成方法采用如图1A所示的电子设备执行,该方法如图2A所示,包括如下步骤:
步骤S201A、终端启动前置摄像头和后置摄像头时,获取前置摄像头的第一图片以及后置摄像头的第二图片;
步骤S202A、终端将第一图片的高度值压缩一半得到第四图片,对第二图片的高度值压缩一半得到第五图片,将第四图片以及第五图片分别在显示屏的上半部以及下半部显示;
步骤S203A、终端将第一图片输入预设的神经网络模型运算得到第一图片的第一类型为风景,终端将第二图片输入预设的神经网络模型运算得到第二图片的第二类型为人物;
步骤S204A、终端依据风景+人物确定该合成策略为背景叠加;
步骤S205A、终端确定第一图片为背景图片,将该第一图片与第二图片叠加得到第三图片,该第一图片设置在第三图片的底层。
本申请提供的技术方案在同时启动前置摄像头和后置摄像头时,采集前置摄像图的第一图片以及后置摄像头的第二图片,然后依据该第一图片以及第二图片的类型确定该合成策略,然后依据该合成策略对第一图片以及第二图片确定背景叠加时,将风景的第一图片确定为叠加后的第三图片的底层图片,从而实现了前置摄像头以及后置摄像头的合成显示,实现了用户个性化的选择,提高了用户体验度。
参阅图2B,图2B提供了一种图片的合成的方法的流程示意图,如图2B所示的图片的合成方法采用如图1A所示的电子设备执行,该方法如图2B所示,包括如下步骤:
步骤S201B、终端启动前置摄像头和后置摄像头时,获取前置摄像头的第一图片以及后置摄像头的第二图片;
步骤S202B、终端将第一图片的第一尺寸压缩值画中画的尺寸得到第六图片,将第四图片以及第二图片以画中画形式显示;
步骤S203B、终端将第一图片输入预设的神经网络模型运算得到第一图片的第一类型为风景,终端将第二图片输入预设的神经网络模型运算得到第二图片的第二类型为风景;
步骤S204B、终端依据风景+风景确定该合成策略为分屏显示;
步骤S205B、终端将第一图片的高度值压缩一半得到第四图片,将第二图片的高度值压缩一半得到第五图片,将第四图片以及第五图片拼接得到第三图片(拼接方式可以依据分屏的区域来进行拼接,例如上下对半显示,则将第四图片拼接在第三图片的上半部,第五图片拼接在第三图片的下半部),将所述第三图片在显示屏显示。
本申请提供的技术方案在同时启动前置摄像头和后置摄像头时,采集前置摄像图的第一图片以及后置摄像头的第二图片,然后依据该第一图片以及第二图片的类型确定该合成策略,然后依据该合成策略对第一图片以及第二图片确定分屏显示时,将第一图片以及第二图片的尺寸压缩后分别显示在显示屏的上半部分以及下半部分,从而实现了前置摄像头以及后置摄像头的合成显示,实现了用户个性化的选择,提高了用户体验度。
参阅图2C,图2C提供了一种图片的合成的方法的流程示意图,如图2C所示的图片的合成方法采用如图1A所示的电子设备执行,该方法如图2C所示,包括如下步骤:
步骤S201C、终端启动前置摄像头和后置摄像头时,获取前置摄像头的第一图片以及后置摄像头的第二图片;
步骤S202C、终端将第一图片的第一尺寸压缩值画中画的尺寸得到第六图片,将第四图片以及第二图片以画中画形式显示;
步骤S203C、终端将第一图片输入预设的神经网络模型运算得到第一图片的第一类型为人物,终端将第二图片输入预设的神经网络模型运算得到第二图片的第二类型为人物;
步骤S204C、终端依据人物+人物确定该合成策略为人像叠加;
步骤S205C、终端对第二图片进行人物轮廓识别确定第二图片中的人物轮廓,将该人物轮廓的图像插入到第一图片的人物轮廓傍边得到第三图片。
上述人物轮廓的实现方式可以采用现有的人物轮廓的方式,例如《小样本人物轮廓特征提取与识别方法》,又如《基于区域合并与轮廓模型的图像序列人物轮廓分割》等方式,本申请对于人物轮廓的确定方式并不限定。
本申请提供的技术方案在同时启动前置摄像头和后置摄像头时,采集前置摄像图的第一图片以及后置摄像头的第二图片,然后依据该第一图片以及第二图片的类型确定该合成策略,然后依据该合成策略对第一图片以及第二图片确定人像叠加时,确定该第二图片中的人物轮廓,然后将该人物轮廓的图像插入到第一人物轮廓傍边得到第三图片,从而实现了前置摄像头以及后置摄像头的合成显示,实现了用户个性化的选择,提高了用户体验度。此种方式类似合影的方式,即在无人状态下,能够实现拍摄人以及被拍摄人在该风景中实现人物的合影的效果,此技术方案比较适合在一些广阔的场景地实现图像的合成。例如在一些人较少的风景区,由于没有其他游客帮助拍摄照片,两个如果想合影是非常麻烦的,此种方式即能够非常容易的实现两个人的合影。
如图3A所示,图3A提供了另一种电子设备,该所述电子设备包括前置摄像头301、后置摄像头302、显示屏303、处理器304和存储器305,其中,
前置摄像头301,用于采集第一图片;
后置摄像头302,用于采集第二图片;
处理器304,用于获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片,识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型,依据所述第一类型与所述第二类型确定第一图片与第二图片的合成策略,依据所述合成策略将所述第一图片以及所述第二图片合成得到第三图片;
显示屏303,用于显示所述第三图片。
在一种可选的实施方案中,
处理器304,具体用于依据第一类型与第二类型从类型与合成策略映射关系中查询得到该第一类型与第二类型对应的第一合成策略;
所述合成策略包括:背景叠加、分屏显示或人像叠加。
在一种可选的实施方案中,
处理器304,具体用于当所述合成策略为背景叠加时,将第一图片与第二图片叠加得到第三图片,其中,所述第二图片为所述第三图片的底层图片;
或,处理器304,具体用于当所述合成策略为分屏显示时,将第一图片的尺寸进行压缩得到第四图片,将第二图片的尺寸进行压缩得到第五图片,将第四图片以及第五图片拼接形成第三图片,将所述第三图片在所述显示屏的对应位置显示;
或,处理器304,具体用于当所述合成策略为人像叠加时,对第二图片进行人物轮廓识别确定第二图片中的人物轮廓,将所述人物轮廓的图像插入到第一图片的人物轮廓傍边得到第三图片。
上述人物轮廓的实现方式可以采用现有的人物轮廓的方式,例如《小样本人物轮廓特征提取与识别方法》,又如《基于区域合并与轮廓模型的图像序列人物轮廓分割》等方式,本申请对于人物轮廓的确定方式并不限定。
在一种可选的方案中,
处理器304,具体用于将第一图片输入到分类器中计算得到第一类型,将第二图片输入到分类器中计算得到第二类型。
上述分类器包括但不限于:能够进行分类识别的模型,例如,支持向量机模型、神经网络模型等等。本申请对该分类器的实现方式并不限定。
在一种可选的方案中,处理器304,还用于满足设定触发条件时,获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片。
需要说明的是,上述电子设备中的显示屏可以为双面屏,如图3B所示,该双面屏具体可以包括:前显示屏3031以及后显示屏3032。
图4A是本申请实施例中所涉及的图片的合成装置400的功能单元组成框图。该图片的合成装置400,应用于电子设备,所述电子设备包括前置摄像头和后置摄像头,所述装置400包括:获取单元401、识别单元402、合成单元403和显示单元404,其中,
前置摄像头,用于采集第一图片;
后置摄像头,用于采集第二图片;
获取单元401,用于获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片;
识别单元402,用于识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型;
合成单元403,用于依据所述第一类型与所述第二类型确定第一图片与第二图片的合成策略,依据所述合成策略将所述第一图片以及所述第二图片合成得到第三图片;
显示单元404,用于显示所述第三图片。
在一种可选的方案中,如图4B所示,该识别单元402还可以包括:输入输出接口4021以及分类器4022;其中,
输入输出接口4021,用于接收第一图片以及第二图片,并将第一图片以及第二图片输入到分类器4022;
分类器4022,用于将第一图片执行计算得到第一图片的第一类型,将第二图片计算得到第二图片的第二类型。
在一种可选方案中,如图4C所示,合成单元403可以包括:查询模块4031和合成模块4032;其中,
查询模块4031,用于依据第一类型与第二类型从类型与合成策略映射关系中查询得到该第一类型与第二类型对应的第一合成策略;
合成模块4032,用于当所述合成策略为背景叠加时,将第一图片与第二图片叠加得到第三图片,其中,所述第二图片为所述第三图片的底层图片;
或,合成模块4032,用于当所述合成策略为分屏显示时,将第一图片的尺寸进行压缩得到第四图片,将第二图片的尺寸进行压缩得到第五图片,将第四图片以及第五图片拼接形成第三图片,将所述第三图片在所述显示屏的对应位置显示;
或,合成模块4032,用于当所述合成策略为人像叠加时,对第二图片进行人物轮廓识别确定第二图片中的人物轮廓,将所述人物轮廓的图像插入到第一图片的人物轮廓傍边得到第三图片。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤,上述计算机包括电子设备。
本申请实施例还提供一种计算机程序产品,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包,上述计算机包括电子设备。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (12)

1.一种电子设备,其特征在于,所述电子设备包括前置摄像头、后置摄像头、显示屏和处理器,其中,
所述前置摄像头,用于采集第一图片;
所述后置摄像头,用于采集第二图片;
所述处理器,用于获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片,识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型,依据所述第一类型与所述第二类型确定第一图片与第二图片的合成策略,依据所述合成策略将所述第一图片以及所述第二图片合成得到第三图片;
所述显示屏,用于显示所述第三图片;
其中,通过静脉识别验证触发启动摄像头,采集并获取图片;所述静脉识别验证包括:分析静脉图片中的目标静脉区域图像的特征点分布,按照M个不同圆心对所述目标静脉区域图像进行圆形图像截取,得到M个圆形静脉区域图像,所述M为大于3的整数,从所述M个圆形静脉区域图像中选出目标圆形静脉区域图像,所述目标圆形静脉区域图像所包含的特征点的数量大于所述M个圆形静脉区域图像中的其他圆形静脉区域图像,将所述目标圆形静脉区域图像划分得到N个圆环,所述N个圆环的环宽相同,从所述N个圆环中半径最小的圆环开始,将所述N个圆环依次与预设静脉模板进行特征点匹配,并累计已匹配圆环的匹配值,当累计的匹配值大于预设匹配阈值时立即停止进行特征点匹配,并输出启动前置摄像头和后置摄像头的命令。
2.根据权利要求1所述的电子设备,其特征在于,
所述处理器,具体用于依据第一类型与第二类型从类型与合成策略映射关系中查询得到该第一类型与第二类型对应的第一合成策略;
所述合成策略包括:背景叠加、分屏显示或人像叠加。
3.根据权利要求2所述的电子设备,其特征在于,
所述处理单元,具体用于当所述合成策略为背景叠加时,将第一图片与第二图片叠加得到第三图片,其中,所述第二图片为所述第三图片的底层图片;
或,所述处理单元,具体用于当所述合成策略为分屏显示时,将第一图片的尺寸进行压缩得到第四图片,将第二图片的尺寸进行压缩得到第五图片,将第四图片以及第五图片拼接形成第三图片,将所述第三图片在所述显示屏的对应位置显示;
或,所述处理单元,具体用于当所述合成策略为人像叠加时,对第二图片进行人物轮廓识别确定第二图片中的人物轮廓,将所述人物轮廓的图像插入到第一图片的人物轮廓旁边得到第三图片。
4.根据权利要求1所述的电子设备,其特征在于,
所述处理器,具体用于将第一图片输入到分类器中计算得到第一类型,将第二图片输入到分类器中计算得到第二类型。
5.根据权利要求1所述的电子设备,其特征在于,
所述处理器,还用于满足设定触发条件时,获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片。
6.一种图片的合成方法,其特征在于,所述方法应用于电子设备,所述电子设备包括:前置摄像头、后置摄像头和显示屏;所述方法包括如下步骤:
启动前置摄像头和后置摄像头时,获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片;
识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型;
依据第一类型与第二类型确定第一图片与第二图片的合成策略,依据该合成策略将该第一图片以及第二图片合成得到第三图片,将第三图片通过所述显示屏显示;
其中,通过静脉识别验证触发启动摄像头,采集并获取图片;所述静脉识别验证包括:分析静脉图片中的目标静脉区域图像的特征点分布,按照M个不同圆心对所述目标静脉区域图像进行圆形图像截取,得到M个圆形静脉区域图像,所述M为大于3的整数,从所述M个圆形静脉区域图像中选出目标圆形静脉区域图像,所述目标圆形静脉区域图像所包含的特征点的数量大于所述M个圆形静脉区域图像中的其他圆形静脉区域图像,将所述目标圆形静脉区域图像划分得到N个圆环,所述N个圆环的环宽相同,从所述N个圆环中半径最小的圆环开始,将所述N个圆环依次与预设静脉模板进行特征点匹配,并累计已匹配圆环的匹配值,当累计的匹配值大于预设匹配阈值时立即停止进行特征点匹配,并输出启动前置摄像头和后置摄像头的命令。
7.根据权利要求6所述的方法,其特征在于,所述依据第一类型与第二类型确定第一图片与第二图片的合成策略具体包括:
依据第一类型与第二类型从类型与合成策略映射关系中查询得到该第一类型与第二类型对应的第一合成策略;
所述合成策略包括:背景叠加、分屏显示或人像叠加。
8.根据权利要求7所述的方法,其特征在于,所述依据该合成策略将该第一图片以及第二图片合成得到第三图片具体包括:
如所述合成策略为背景叠加,将第一图片与第二图片叠加得到第三图片,其中,所述第二图片为所述第三图片的底层图片;
如所述合成策略为分屏显示,将第一图片的尺寸进行压缩得到第四图片,将第二图片的尺寸进行压缩得到第五图片,将第四图片以及第五图片拼接形成第三图片,将所述第三图片在所述显示屏的对应位置显示;
如所述合成策略为人像叠加,对第二图片进行人物轮廓识别确定第二图片中的人物轮廓,将所述人物轮廓的图像插入到第一图片的人物轮廓旁边得到第三图片。
9.根据权利要求6所述的方法,其特征在于,识别第一图片确定第一图片的第一类型,识别第二图片确定第二图片的第二类型具体包括:
将第一图片输入到分类器中计算得到第一类型,将第二图片输入到分类器中计算得到第二类型。
10.一种图片的合成装置,其特征在于,应用于电子设备,所述电子设备包括前置摄像头和后置摄像头,所述装置包括:
所述前置摄像头,用于采集第一图片;
所述后置摄像头,用于采集第二图片;
获取单元,用于获取所述前置摄像头采集的第一图片以及所述后置摄像头采集的第二图片;
识别单元,用于识别所述第一图片确定所述第一图片的第一类型,识别所述第二图片确定所述第二图片的第二类型;
合成单元,用于依据所述第一类型与所述第二类型确定第一图片与第二图片的合成策略,依据所述合成策略将所述第一图片以及所述第二图片合成得到第三图片;
显示单元,用于显示所述第三图片;
其中,通过静脉识别验证触发启动摄像头,采集并获取图片;所述静脉识别验证包括:分析静脉图片中的目标静脉区域图像的特征点分布,按照M个不同圆心对所述目标静脉区域图像进行圆形图像截取,得到M个圆形静脉区域图像,所述M为大于3的整数,从所述M个圆形静脉区域图像中选出目标圆形静脉区域图像,所述目标圆形静脉区域图像所包含的特征点的数量大于所述M个圆形静脉区域图像中的其他圆形静脉区域图像,将所述目标圆形静脉区域图像划分得到N个圆环,所述N个圆环的环宽相同,从所述N个圆环中半径最小的圆环开始,将所述N个圆环依次与预设静脉模板进行特征点匹配,并累计已匹配圆环的匹配值,当累计的匹配值大于预设匹配阈值时立即停止进行特征点匹配,并输出启动前置摄像头和后置摄像头的命令。
11.一种电子设备,其特征在于,包括处理器、存储器,所述存储器用于存储一个或多个程序,并且被配置由所述处理器执行,所述程序包括用于执行如权利要求6-9任一项所述的方法中的步骤的指令。
12.一种计算机可读存储介质,其特征在于,存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如权利要求6-9任一项所述的方法。
CN201910478182.6A 2019-06-03 2019-06-03 图片的合成方法及相关产品 Expired - Fee Related CN110266942B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910478182.6A CN110266942B (zh) 2019-06-03 2019-06-03 图片的合成方法及相关产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910478182.6A CN110266942B (zh) 2019-06-03 2019-06-03 图片的合成方法及相关产品

Publications (2)

Publication Number Publication Date
CN110266942A CN110266942A (zh) 2019-09-20
CN110266942B true CN110266942B (zh) 2021-04-09

Family

ID=67916518

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910478182.6A Expired - Fee Related CN110266942B (zh) 2019-06-03 2019-06-03 图片的合成方法及相关产品

Country Status (1)

Country Link
CN (1) CN110266942B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110958392A (zh) * 2019-12-13 2020-04-03 惠州Tcl移动通信有限公司 终端设备的拍摄方法、终端设备及存储介质
CN111063001B (zh) * 2019-12-18 2023-11-10 北京金山安全软件有限公司 图片合成方法、装置、电子设备以及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104134265A (zh) * 2014-08-08 2014-11-05 常熟安智生物识别技术有限公司 指静脉识别智能楼宇可视对讲系统
CN109376602A (zh) * 2018-09-21 2019-02-22 厦门中控智慧信息技术有限公司 一种指静脉识别方法、装置及终端设备
CN208781239U (zh) * 2018-06-12 2019-04-23 普联技术有限公司 静脉识别智能手表

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015231106A (ja) * 2014-06-04 2015-12-21 三菱電機株式会社 ヘッドマウントディスプレイ装置及びヘッドマウントディスプレイシステム
JP6033821B2 (ja) * 2014-09-12 2016-11-30 富士フイルム株式会社 画像処理装置、画像処理方法、プログラムおよび記録媒体
CN106488106B (zh) * 2015-08-31 2019-04-26 杭州华为数字技术有限公司 一种图像处理方法及装置
CN108965687B (zh) * 2017-05-22 2021-01-29 阿里巴巴集团控股有限公司 拍摄方向识别方法、服务器及监控方法、系统及摄像设备
CN107705251A (zh) * 2017-09-21 2018-02-16 努比亚技术有限公司 图片拼接方法、移动终端及计算机可读存储介质
CN107820016A (zh) * 2017-11-29 2018-03-20 努比亚技术有限公司 双屏终端的拍摄显示方法、双屏终端和计算机存储介质
CN109089045A (zh) * 2018-09-18 2018-12-25 上海连尚网络科技有限公司 一种基于多个摄像装置的摄像方法及设备及其终端

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104134265A (zh) * 2014-08-08 2014-11-05 常熟安智生物识别技术有限公司 指静脉识别智能楼宇可视对讲系统
CN208781239U (zh) * 2018-06-12 2019-04-23 普联技术有限公司 静脉识别智能手表
CN109376602A (zh) * 2018-09-21 2019-02-22 厦门中控智慧信息技术有限公司 一种指静脉识别方法、装置及终端设备

Also Published As

Publication number Publication date
CN110266942A (zh) 2019-09-20

Similar Documents

Publication Publication Date Title
CN110139033B (zh) 拍照控制方法及相关产品
CN109614865B (zh) 指纹识别方法及相关产品
CN110113515B (zh) 拍照控制方法及相关产品
CN110020622B (zh) 指纹识别方法及相关产品
CN117014567A (zh) 一种应用于电子设备的视频通话的显示方法及相关装置
CN110099219B (zh) 全景拍摄方法及相关产品
CN107241552B (zh) 一种图像获取方法、装置、存储介质和终端
CN110245607B (zh) 眼球追踪方法及相关产品
CN112449099B (zh) 一种图像处理方法、电子设备及云服务器
CN108833779B (zh) 拍摄控制方法及相关产品
CN107566746B (zh) 一种拍照方法及用户终端
JP2016511875A (ja) 画像サムネイルの生成方法、装置、端末、プログラム、及び記録媒体
CN106385579A (zh) 一种摄像头检测装置、方法及多摄像头终端
CN108984143B (zh) 一种显示控制方法及终端设备
CN108462826A (zh) 一种辅助拍照的方法及移动终端
CN107330391A (zh) 产品信息提示方法及装置
CN110266942B (zh) 图片的合成方法及相关产品
CN108616687A (zh) 一种拍照方法、装置和移动终端
CN110072057B (zh) 图像处理方法及相关产品
CN109561255B (zh) 终端拍照方法、装置及存储介质
CN108510266A (zh) 一种数字对象唯一标识符识别方法及移动终端
CN112578981A (zh) 具有柔性屏幕的电子设备的控制方法及电子设备
CN112287317B (zh) 一种用户信息输入方法及电子设备
CN111343402B (zh) 一种显示方法和电子设备
CN111416936B (zh) 图像处理方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210409

CF01 Termination of patent right due to non-payment of annual fee