CN110336940A - 一种基于双摄像头拍摄合成特效的方法和系统 - Google Patents
一种基于双摄像头拍摄合成特效的方法和系统 Download PDFInfo
- Publication number
- CN110336940A CN110336940A CN201910543803.4A CN201910543803A CN110336940A CN 110336940 A CN110336940 A CN 110336940A CN 201910543803 A CN201910543803 A CN 201910543803A CN 110336940 A CN110336940 A CN 110336940A
- Authority
- CN
- China
- Prior art keywords
- video
- special efficacy
- personage
- camera
- shooting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000015572 biosynthetic process Effects 0.000 title claims abstract description 42
- 230000009977 dual effect Effects 0.000 title claims abstract description 42
- 238000003786 synthesis reaction Methods 0.000 title claims abstract description 42
- 238000000034 method Methods 0.000 title claims abstract description 41
- 230000009471 action Effects 0.000 claims abstract description 41
- 238000005286 illumination Methods 0.000 claims description 10
- 230000004927 fusion Effects 0.000 claims description 9
- 238000004590 computer program Methods 0.000 claims description 8
- 230000007797 corrosion Effects 0.000 claims description 3
- 238000005260 corrosion Methods 0.000 claims description 3
- 230000002452 interceptive effect Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 25
- 230000006870 function Effects 0.000 description 6
- 235000013399 edible fruits Nutrition 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 210000000988 bone and bone Anatomy 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009172 bursting Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration using local operators
- G06T5/30—Erosion or dilatation, e.g. thinning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Psychiatry (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
Abstract
本发明提供了一种基于双摄像头拍摄合成特效的方法,包括:S1、采用第一摄像头拍摄人物视频;S2、采用第二摄像头识别所述人物视频中的人物动作并基于所述人物动作选择对应的特效视频;S3、基于所述人物视频,所述特效视频合成最终视频。本发明还涉及一种基于双摄像头拍摄合成特效的系统。实施本发明的基于双摄像头拍摄合成特效的方法和系统,能够识别人物动作并根据人物动作产生对应特效效果,从而很好地融合人物视频和特效视频,改善拍摄体验,提高拍摄效果。
Description
技术领域
本发明涉及视频拍摄领域,更具体地说,涉及一种基于双摄像头拍摄合成特效的方法和系统。
背景技术
随着最近几年视频录制的技术发展,目前的各种处理器终端已经可以支持在录制视频的同时加入特效,而且,针对不同的拍摄录制场景还可以加入不同的特效,以增强所拍摄视频的视觉效果或者趣味性。然而,现有技术的视频特效合成通常是在已经录制好的视频上简单地叠加特效图案,不但特效效果不佳,并且人物视频和特效视频无法很好的融合,影响拍摄体验和拍摄效果。
发明内容
本发明要解决的技术问题在于,针对现有技术的上述缺陷,提供基于双摄像头拍摄合成特效的方法和系统,其能够识别人物动作并根据人物动作产生对应特效效果,从而很好地融合人物视频和特效视频,改善拍摄体验,提高拍摄效果。
本发明解决其技术问题所采用的技术方案是:构造一种基于双摄像头拍摄合成特效的方法,包括:
S1、采用第一摄像头拍摄人物视频;
S2、采用第二摄像头识别所述人物视频中的人物动作并基于所述人物动作选择对应的特效视频;
S3、基于所述人物视频和所述特效视频合成最终视频。
在本发明所述的基于双摄像头拍摄合成特效的方法中,所述步骤S2进一步包括:
S21、去除所述人物视频中的背景以抠取人像视频;
S22、采用所述第二摄像头识别人体骨骼以识别所述人物动作;
S23、根据预先设置的人物动作和特效视频对应关系选择对应的特效视频。
在本发明所述的基于双摄像头拍摄合成特效的方法中,在所述步骤S22中,所述第二摄像头为采用结合自然交互应用程序的深度相机。
在本发明所述的基于双摄像头拍摄合成特效的方法中,所述步骤S21进一步包括:
S211、选择不同的灯光方案,并在选定的灯光方案下拍摄背景特效视频,并采用混合高斯模型表示所述背景特效视频的每个像素点的特征;
S212、并在选定的灯光方案下拍摄人物特效视频,并将所述人物特效视频中的每个像素点与所述混合高斯模型进行匹配,如果匹配成功将所述像素点定为背景点,否定将所述像素点定义为人物前景点;
S213、预处理所述人物前景点以生成所述人物前景视频。
在本发明所述的基于双摄像头拍摄合成特效的方法中,在所述步骤211中,所述混合高斯模型为:
其中,x是随机变量;K是高斯函数的个数,Wk是混合权重,0≤Wk≤1, 9(x|μk,∑k)是第k个高斯函数的分布。
在本发明所述的基于双摄像头拍摄合成特效的方法中,所述步骤S213进一步包括:
S2131、对所述人物前景点进行除噪处理、采用HSV颜色模型提高清晰度处理和融合处理;
S2132、基于处理后的所述人物前景点生成所述人物前景视频。
在本发明所述的基于双摄像头拍摄合成特效的方法中,所述除噪处理包括膨胀、腐蚀和开运算处理;所述HSV颜色模型为s=Sf×sin(2π×(Hb+Ho-Hf)):Sf为所述人物前景点的饱和度;Hb为所述背景点的色调;Ho为常值;Hf为所述人物前景点的色调;所述融合处理的公式为:f(x)=α×Pf+(1-α)×Pb;α是透明度;Pf是人物前景点;Pb是背景点。
在本发明所述的基于双摄像头拍摄合成特效的方法中,所述特效视频包括背景特效视频,手势特效视频和前景特效视频,所述步骤S3包括采用alpha透明通道上下组合所述背景特效视频、所述人物前景视频、所述手势特效视频和所述前景特效视频以生成所述最终视频。
在本发明所述的基于双摄像头拍摄合成特效的方法中,所述步骤S2进一步包括:
S24、将所述第二摄像头识别的人体骨骼绑定到卡通角色上,并在显示屏上显示带有所述卡通角色的对应的特效视频。
本发明解决其技术问题采用的另一技术方案是,构造一种基于双摄像头拍摄合成特效的系统,包括:第一摄像头、第二摄像头,以及处理器,所述处理器上存储有计算机程序,所述计算机程序在运行控制所述第一摄像头、所述第二摄像头和所述处理器实施所述的基于双摄像头拍摄合成特效的方法。
实施本发明的基于双摄像头拍摄合成特效的方法和系统,能够识别人物动作并根据人物动作产生对应特效效果,从而很好地融合人物视频和特效视频,改善拍摄体验,提高拍摄效果。进一步的,通过对背景点和人物前景点进行预处理,可以消除噪声,实现人物与特效色彩的融合,从而获得效果更优更真实的特效视频。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是本发明的基于双摄像头拍摄合成特效的方法的第一优选实施例的流程图;
图2是本发明的基于双摄像头拍摄合成特效的方法的第二优选实施例的流程图;
图3是本发明的基于双摄像头拍摄合成特效的系统的第一优选实施例的原理框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供了一种基于双摄像头拍摄合成特效的方法,包括:S1、采用第一摄像头拍摄人物视频;S2、采用第二摄像头识别所述人物视频中的人物动作并基于所述人物动作选择对应的特效视频;S3、基于所述人物视频,所述特效视频合成最终视频。实施本发明的基于双摄像头拍摄合成特效的方法,能够识别人物动作并根据人物动作产生对应特效效果,从而很好地融合人物视频和特效视频,改善拍摄体验,提高拍摄效果。
图1是本发明的基于双摄像头拍摄合成特效的方法的第一优选实施例的流程图。如图1所示,在步骤S1中,采用第一摄像头拍摄人物视频。在本发明的一个优选实施例中,所述第一摄像头可以是任何摄像装置,其可以正对被拍人物,以拍摄人物视频。在本发明的一个优选实施例中,可以提供至少一个显示屏,在所述显示屏上显示被拍摄者需要作出的动作,这样在所述第一摄像头进行拍摄人物视频时,被拍摄者可以根据显示屏上的提示作出相应的人物动作。当然,在本发明的其他优选实施例中,也可以采用语音提示或者图画提示,或者摄影师直接提示的方式。在本发明的进一步的优选实施例中,所述显示屏上还可以设置另一个窗口,其中实时显示所述第一摄像头所拍摄的人物视频。
在步骤S2中,采用第二摄像头识别所述人物视频中的人物动作并基于所述人物动作选择对应的特效视频。在本发明的优选实施例中,所述第二摄像头为采用结合自然交互应用程序的深度相机。例如其可以是深度摄像机加自然交互API(例如Kinect2、OpenNI),其可识别人物骨骼,手势与肢体动作,以追踪手的位置,辨识预先定义好的人物动作,例如手势。而在所述深度相机识别到预先定义的人物动作时,可以根据该人物动作选择的特效视频。在本实施例中,人物动作和其对应的特效视频时预先定义和存储的。例如,在本发明的一个优选实施例中,挥手的人物动作可以对应阳光灿烂的特效视频,鼓掌的人物动作可以对应掌声雷动全场欢呼的特效视频。例如,可以将人物动作和对应的特效视频以查找表的形式存储在处理器中,当所述第二摄像头识别到查找表中的人物动作时,选择调用对应的特效视频。在本发明的一个优选实施例中,还可以在显示屏上显示该特效视频,并且在该特效视频中可以嵌入至少一个卡通形象,将所述该深度相机识别的人体骨骼绑定到卡通角色上,并在显示屏上显示带有所述卡通角色的对应的特效视频。这些可以采用本领域中已经公开的相关开源技术来实现,在此就不再累述了。
在步骤S3中,基于所述人物视频,所述特效视频合成最终视频。例如可以采用按照顺序上下层组合的方式,将所述人物视频,所述特效视频以alpha透明通道为依据,生成所述最终视频。在本发明的优选实施例中,所述特效视频包括背景特效视频,手势特效视频和前景特效视频,可以采用alpha透明通道上下组合所述背景特效视频、所述人物前景视频、所述手势特效视频和所述前景特效视频以生成所述最终视频。在本发明的一个优选实施例中,例如所述背景特性视频可以是例如黑夜,白天,阴天或者晴天的天气背景视频,手势特效视频可以是例如专门配合手部动作的烟花,道具或者其他特效视频,而前景特效视频可以是例如专门设计造型特殊的前景特效视频,或者色彩突出的前景特效视频等等。如前所述,所述背景特效视频,手势特效视频和前景特效视频同样可以采用与特效动作一一对应的方式以查找表的形式预先存储在处理器中。
实施本发明的基于双摄像头拍摄合成特效的方法,能够识别人物动作并根据人物动作产生对应特效效果,从而很好地融合人物视频和特效视频,改善拍摄体验,提高拍摄效果。
图2是本发明的基于双摄像头拍摄合成特效的方法的第二优选实施例的流程图。如图2所示,在步骤S1中,采用第一摄像头拍摄人物视频。在本发明的一个优选实施例中,所述第一摄像头可以是任何摄像装置,其可以正对被拍人物,以拍摄人物视频。在本发明的一个优选实施例中,可以提供至少一个显示屏,在所述显示屏上显示被拍摄者需要作出的动作,这样在所述第一摄像头进行拍摄人物视频时,被拍摄者可以根据显示屏上的提示作出相应的人物动作。当然,在本发明的其他优选实施例中,也可以采用语音提示或者图画提示,或者摄影师直接提示的方式。在本发明的进一步的优选实施例中,所述显示屏上还可以设置另一个窗口,其中实时显示所述第一摄像头所拍摄的人物视频。
在步骤S2中,去除所述人物视频中的背景以抠取人像视频。在本发明的一个优选实施例中,用户可以自行选择所需的特效视频,并且基于所需的特效视频选择不同的灯光方案,例如通过手机APP等进行选择。又例如,用户也可以直接选择所需要或者喜欢的灯光方案。然后,灯光控制器根据该灯光方案控制灯光产生明暗,颜色变化。该灯光方案可以是预先存储在灯光控制器中的预设程序。然后,可以在选定的灯光方案下拍摄背景特效视频。可以采用混合高斯模型表示所述背景特效视频的每个像素点的特征。
在本发明的优选实施例中,所述混合高斯模型为:
其中,x是随机变量;K是高斯函数的个数,Wk是混合权重,0≤Wk≤1,g(x|μk,∑k)是第k个高斯函数的分布。在本优选实施例中,K=3。
在步骤S2中,用户可以进入拍摄区域并同样在选定的灯光方案下拍摄人物特效视频,并将所述人物特效视频中的每个像素点与所述混合高斯模型进行匹配,如果匹配成功将所述像素点定为背景点,否定将所述像素点定义为人物前景点。
在步骤S3中,预处理所述人物前景点以生成所述人物前景视频。该预处理可以包括对所述人物前景点进行除噪处理、采用HSV颜色模型提高清晰度处理和融合处理。然后基于处理后的所述人物前景点生成所述人物前景视频。在本发明的优选实施例中,所述除噪处理包括膨胀、腐蚀和开运算处理。例如在本发明的优选实施例中,可以采用本领域中已知的任何算法,例如OpenCV中dilate、erode、morphologyEx算法进行对所述人物前景视频的所述人物前景点蒙版图做膨胀、腐蚀以及开运算处理以消除噪点。对于所述人物前景点蒙版图的边缘处,则使用HSV颜色模型处理以达到人物边缘、发丝等提取清晰。进一步的,在本发明的优选实施例中,可以选择的所述HSV颜色模型为S=Sf×sin(2π×(Hb+Ho-Hf)):Sf为所述人物前景点的饱和度;Hb为所述背景点的色调;Ho为常值;Hf为所述人物前景点的色调。最后对所述人物前景点蒙版图色相、饱和度、曲线、色彩平衡等做调整,以实现人物与特效色彩效果融合。例如采用的所述融合处理的公式为:f(x)=α×Pf+(1-α)×Pb;α是透明度;Pf是人物前景点;Pb是背景点。
在步骤S4中,采用所述第二摄像头识别人体骨骼以识别所述人物动作。在本发明的优选实施例中,所述第二摄像头为采用结合自然交互应用程序的深度相机。例如其可以是深度摄像机加自然交互API(例如Kinect2、OpenNI),其可识别人物骨骼,手势与肢体动作,以追踪手的位置,辨识预先定义好的人物动作,例如手势。
在步骤S5中,根据预先设置的人物动作和特效视频对应关系选择对应的特效视频。在本实施例中,人物动作和其对应的特效视频时预先定义和存储的。例如,在本发明的一个优选实施例中,所述特效视频包括背景特效视频,手势特效视频和前景特效视频,可以采用alpha透明通道上下组合所述背景特效视频、所述人物前景视频、所述手势特效视频和所述前景特效视频以生成所述最终视频。在本发明的一个优选实施例中,例如所述背景特性视频可以是例如黑夜,白天,阴天或者晴天的天气背景视频,手势特效视频可以是例如专门配合手部动作的烟花,道具或者其他特效视频,而前景特效视频可以是例如专门设计造型特殊的前景特效视频,或者色彩突出的前景特效视频等等。如前所述,所述背景特效视频,手势特效视频和前景特效视频同样可以采用与特效动作一一对应的方式以查找表的形式预先存储在处理器中。
在步骤S6中,可以将所述第二摄像头识别的人体骨骼绑定到卡通角色上,并在显示屏上显示带有所述卡通角色的对应的特效视频。在本发明的一个优选实施例中,还可以在显示屏上显示该特效视频,并且在该特效视频中可以嵌入至少一个卡通形象,将所述该深度相机识别的人体骨骼绑定到卡通角色上,并在显示屏上显示带有所述卡通角色的对应的特效视频。这些可以采用本领域中已经公开的相关开源技术来实现,在此就不再累述了。
在步骤S7中,可以采用alpha透明通道上下组合所述背景特效视频、所述人物前景视频、所述手势特效视频和所述前景特效视频以生成所述最终视频。
实施本发明的基于双摄像头拍摄合成特效的方法,能够识别人物动作并根据人物动作产生对应特效效果,从而很好地融合人物视频和特效视频,改善拍摄体验,提高拍摄效果。进一步的,通过对背景点和人物前景点进行预处理,可以消除噪声,实现人物与特效色彩的融合,从而获得效果更优更真实的特效视频。
图3是本发明的基于双摄像头拍摄合成特效的系统的第一优选实施例的原理框图。如图3所示,构造一种基于双摄像头拍摄合成特效的系统,包括:第一摄像头100、第二摄像头200,以及处理器300,所述处理器300上存储有计算机程序,所述计算机程序在运行控制所述第一摄像头100、所述第二摄像头200和所述处理器300实施所述的基于双摄像头拍摄合成特效的方法。在本发明的一个优选实施例中,所述第一摄像头100可以是任何摄像装置,其可以正对被拍人物,以拍摄人物视频。所述第二摄像头200可以是深度摄像机加自然交互API(例如Kinect2、OpenNI),其可识别人物骨骼,手势与肢体动作,以追踪手的位置,辨识预先定义好的人物动作,例如手势。在本发明的进一步的优选实施例中,还可以包括显示屏,进行相应的视频显示。本发明的处理器可以采用本领域中已知的任何处理器。所述计算机程序,可以根据图1-2中所述的实施例进行构造,在此就不在累述了。
因此,本发明可以通过硬件、软件或者软、硬件结合来实现。本发明可以在至少一个计算机系统中以集中方式实现,或者由分布在几个互连的计算机系统中的不同部分以分散方式实现。任何可以实现本发明方法的计算机系统或其它设备都是可适用的。常用软硬件的结合可以是安装有计算机程序的通用计算机系统,通过安装和执行程序控制计算机系统,使其按本发明方法运行。
本发明还可以通过计算机程序产品进行实施,程序包含能够实现本发明方法的全部特征,当其安装到计算机系统中时,可以实现本发明的方法。本文件中的计算机程序所指的是:可以采用任何程序语言、代码或符号编写的一组指令的任何表达式,该指令组使系统具有信息处理能力,以直接实现特定功能,或在进行下述一个或两个步骤之后实现特定功能:a)转换成其它语言、编码或符号;b)以不同的格式再现。
实施本发明的基于双摄像头拍摄合成特效的系统,能够识别人物动作并根据人物动作产生对应特效效果,从而很好地融合人物视频和特效视频,改善拍摄体验,提高拍摄效果。进一步的,通过对背景点和人物前景点进行预处理,可以消除噪声,实现人物与特效色彩的融合,从而获得效果更优更真实的特效视频。
虽然本发明是通过具体实施例进行说明的,本领域技术人员应当明白,在不脱离本发明范围的情况下,还可以对本发明进行各种变换及等同替代。另外,针对特定情形或材料,可以对本发明做各种修改,而不脱离本发明的范围。因此,本发明不局限于所公开的具体实施例,而应当包括落入本发明权利要求范围内的全部实施方式。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种基于双摄像头拍摄合成特效的方法,其特征在于,包括:
S1、采用第一摄像头拍摄人物视频;
S2、采用第二摄像头识别所述人物视频中的人物动作并基于所述人物动作选择对应的特效视频;
S3、基于所述人物视频和所述特效视频合成最终视频。
2.根据权利要求1所述的基于双摄像头拍摄合成特效的方法,其特征在于,所述步骤S2进一步包括:
S21、去除所述人物视频中的背景以抠取人像视频;
S22、采用所述第二摄像头识别人体骨骼以识别所述人物动作;
S23、根据预先设置的人物动作和特效视频对应关系选择对应的特效视频。
3.根据权利要求2所述的基于双摄像头拍摄合成特效的方法,其特征在于,在所述步骤S22中,所述第二摄像头为采用结合自然交互应用程序的深度相机。
4.根据权利要求1所述的基于双摄像头拍摄合成特效的方法,其特征在于,所述步骤S21进一步包括:
S211、选择不同的灯光方案,并在选定的灯光方案下拍摄背景特效视频,并采用混合高斯模型表示所述背景特效视频的每个像素点的特征;
S212、并在选定的灯光方案下拍摄人物特效视频,并将所述人物特效视频中的每个像素点与所述混合高斯模型进行匹配,如果匹配成功将所述像素点定为背景点,否定将所述像素点定义为人物前景点;
S213、预处理所述人物前景点以生成所述人物前景视频。
5.根据权利要求4所述的基于双摄像头拍摄合成特效的方法,其特征在于,在所述步骤211中,所述混合高斯模型为:
其中,x是随机变量;K是高斯函数的个数,Wk是混合权重,0≤Wk≤1,g(x|μk,∑k)是第k个高斯函数的分布。
6.根据权利要求4所述的基于双摄像头拍摄合成特效的方法,其特征在于,所述步骤S213进一步包括:
S2131、对所述人物前景点进行除噪处理、采用HSV颜色模型提高清晰度处理和融合处理;
S2132、基于处理后的所述人物前景点生成所述人物前景视频。
7.根据权利要求6所述的基于双摄像头拍摄合成特效的方法,其特征在于,所述除噪处理包括膨胀、腐蚀和开运算处理;所述HSV颜色模型为S=Sf×sin(2π×(Hb+Ho-Hf)):Sf为所述人物前景点的饱和度;Hb为所述背景点的色调;Ho为常值;Hf为所述人物前景点的色调;所述融合处理的公式为:f(x)=α×Pf+(1-α)×Pb;α是透明度;Pf是人物前景点;Pb是背景点。
8.根据权利要求4-6中任意一项所述的基于双摄像头拍摄合成特效的方法,其特征在于,所述特效视频包括背景特效视频,手势特效视频和前景特效视频,所述步骤S3包括采用alpha透明通道上下组合所述背景特效视频、所述人物前景视频、所述手势特效视频和所述前景特效视频以生成所述最终视频。
9.根据权利要求1所述的基于双摄像头拍摄合成特效的方法,其特征在于,所述步骤S2进一步包括:
S24、将所述第二摄像头识别的人体骨骼绑定到卡通角色上,并在显示屏上显示带有所述卡通角色的对应的特效视频。
10.一种基于双摄像头拍摄合成特效的系统,其特征在于,包括:第一摄像头、第二摄像头,以及处理器,所述处理器上存储有计算机程序,所述计算机程序在运行控制所述第一摄像头、所述第二摄像头和所述处理器实施根据权利要求1-9中任意一项所述的基于双摄像头拍摄合成特效的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910543803.4A CN110336940A (zh) | 2019-06-21 | 2019-06-21 | 一种基于双摄像头拍摄合成特效的方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910543803.4A CN110336940A (zh) | 2019-06-21 | 2019-06-21 | 一种基于双摄像头拍摄合成特效的方法和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110336940A true CN110336940A (zh) | 2019-10-15 |
Family
ID=68140200
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910543803.4A Pending CN110336940A (zh) | 2019-06-21 | 2019-06-21 | 一种基于双摄像头拍摄合成特效的方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110336940A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110971839A (zh) * | 2019-11-18 | 2020-04-07 | 咪咕动漫有限公司 | 视频融合方法、电子设备及存储介质 |
CN113645476A (zh) * | 2021-08-06 | 2021-11-12 | 广州博冠信息科技有限公司 | 画面处理方法、装置、电子设备及存储介质 |
CN114339069A (zh) * | 2021-12-24 | 2022-04-12 | 北京百度网讯科技有限公司 | 视频处理方法、装置、电子设备及计算机存储介质 |
CN114915798A (zh) * | 2021-02-08 | 2022-08-16 | 阿里巴巴集团控股有限公司 | 实时视频生成方法、多摄像头直播方法及装置 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102611818A (zh) * | 2012-02-22 | 2012-07-25 | 华为技术有限公司 | 视频会议中电子名片交换方法及系统 |
CN102799856A (zh) * | 2012-06-15 | 2012-11-28 | 天津大学 | 基于双通道红外信息融合的人体动作识别方法 |
CN103955639A (zh) * | 2014-03-18 | 2014-07-30 | 深圳市中兴移动通信有限公司 | 一种体感游戏机及其体感游戏的登录方法和装置 |
CN104270580A (zh) * | 2014-09-28 | 2015-01-07 | 济南大学 | 一种视频特效快速实现方法 |
CN105187724A (zh) * | 2015-09-17 | 2015-12-23 | 努比亚技术有限公司 | 一种处理图像的移动终端和方法 |
KR20160038584A (ko) * | 2014-09-30 | 2016-04-07 | 김현태 | 촬영 영상 처리 장치 및 방법 |
CN107920203A (zh) * | 2017-11-23 | 2018-04-17 | 乐蜜有限公司 | 图像采集方法、装置和电子设备 |
CN108289180A (zh) * | 2018-01-30 | 2018-07-17 | 广州市百果园信息技术有限公司 | 根据肢体动作处理视频的方法、介质和终端装置 |
CN108421255A (zh) * | 2018-02-05 | 2018-08-21 | 腾讯科技(深圳)有限公司 | 场景图像的展示方法和装置、存储介质、电子装置 |
CN108924438A (zh) * | 2018-06-26 | 2018-11-30 | Oppo广东移动通信有限公司 | 拍摄控制方法及相关产品 |
CN109462776A (zh) * | 2018-11-29 | 2019-03-12 | 北京字节跳动网络技术有限公司 | 一种视频特效添加方法、装置、终端设备及存储介质 |
-
2019
- 2019-06-21 CN CN201910543803.4A patent/CN110336940A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102611818A (zh) * | 2012-02-22 | 2012-07-25 | 华为技术有限公司 | 视频会议中电子名片交换方法及系统 |
CN102799856A (zh) * | 2012-06-15 | 2012-11-28 | 天津大学 | 基于双通道红外信息融合的人体动作识别方法 |
CN103955639A (zh) * | 2014-03-18 | 2014-07-30 | 深圳市中兴移动通信有限公司 | 一种体感游戏机及其体感游戏的登录方法和装置 |
CN104270580A (zh) * | 2014-09-28 | 2015-01-07 | 济南大学 | 一种视频特效快速实现方法 |
KR20160038584A (ko) * | 2014-09-30 | 2016-04-07 | 김현태 | 촬영 영상 처리 장치 및 방법 |
CN105187724A (zh) * | 2015-09-17 | 2015-12-23 | 努比亚技术有限公司 | 一种处理图像的移动终端和方法 |
CN107920203A (zh) * | 2017-11-23 | 2018-04-17 | 乐蜜有限公司 | 图像采集方法、装置和电子设备 |
CN108289180A (zh) * | 2018-01-30 | 2018-07-17 | 广州市百果园信息技术有限公司 | 根据肢体动作处理视频的方法、介质和终端装置 |
CN108421255A (zh) * | 2018-02-05 | 2018-08-21 | 腾讯科技(深圳)有限公司 | 场景图像的展示方法和装置、存储介质、电子装置 |
CN108924438A (zh) * | 2018-06-26 | 2018-11-30 | Oppo广东移动通信有限公司 | 拍摄控制方法及相关产品 |
CN109462776A (zh) * | 2018-11-29 | 2019-03-12 | 北京字节跳动网络技术有限公司 | 一种视频特效添加方法、装置、终端设备及存储介质 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110971839A (zh) * | 2019-11-18 | 2020-04-07 | 咪咕动漫有限公司 | 视频融合方法、电子设备及存储介质 |
CN114915798A (zh) * | 2021-02-08 | 2022-08-16 | 阿里巴巴集团控股有限公司 | 实时视频生成方法、多摄像头直播方法及装置 |
CN113645476A (zh) * | 2021-08-06 | 2021-11-12 | 广州博冠信息科技有限公司 | 画面处理方法、装置、电子设备及存储介质 |
CN113645476B (zh) * | 2021-08-06 | 2023-10-03 | 广州博冠信息科技有限公司 | 画面处理方法、装置、电子设备及存储介质 |
CN114339069A (zh) * | 2021-12-24 | 2022-04-12 | 北京百度网讯科技有限公司 | 视频处理方法、装置、电子设备及计算机存储介质 |
CN114339069B (zh) * | 2021-12-24 | 2024-02-02 | 北京百度网讯科技有限公司 | 视频处理方法、装置、电子设备及计算机存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110336940A (zh) | 一种基于双摄像头拍摄合成特效的方法和系统 | |
US20210142543A1 (en) | Information processing apparatus, information processing method, and program | |
CN112419170B (zh) | 遮挡检测模型的训练方法及人脸图像的美化处理方法 | |
US20110115786A1 (en) | Image processing apparatus, image processing method, and program | |
CN108846807A (zh) | 光效处理方法、装置、终端及计算机可读存储介质 | |
CN101853498A (zh) | 图像合成方法及图像处理装置 | |
Wang et al. | Stylelight: Hdr panorama generation for lighting estimation and editing | |
CN109255841A (zh) | Ar图像呈现方法、装置、终端及存储介质 | |
US11581020B1 (en) | Facial synchronization utilizing deferred neural rendering | |
US20080018792A1 (en) | Systems and Methods for Interactive Surround Visual Field | |
CN106101576B (zh) | 一种增强现实照片的拍摄方法、装置及移动终端 | |
CN108470139A (zh) | 一种基于数据增强的小样本雷达图像人体动作分类方法 | |
KR20120038616A (ko) | 마커리스 실감형 증강현실 제공 방법 및 시스템 | |
CN111833257A (zh) | 视频动态换脸方法、装置、计算机设备及存储介质 | |
Tolosana et al. | An introduction to digital face manipulation | |
CN113395441A (zh) | 图像留色方法及设备 | |
CN114331918B (zh) | 图像增强模型的训练方法、图像增强方法及电子设备 | |
CN117975991B (zh) | 基于人工智能的数字人驱动方法及装置 | |
CN107368491A (zh) | 影像制作系统及方法 | |
CN112087664A (zh) | 一种移动端获得定制背景实时舞蹈视频的方法 | |
CN111968191A (zh) | 使用梳状神经网络架构的自动图像合成 | |
Lin et al. | DeflickerCycleGAN: learning to detect and remove flickers in a single image | |
CN112287909A (zh) | 一种随机生成检测点和交互要素的双随机活体检测方法 | |
CN116828129A (zh) | 一种超清2d数字人生成方法及系统 | |
Tsuchiya et al. | Generating Video from Single Image and Sound. |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191015 |
|
RJ01 | Rejection of invention patent application after publication |