CN114401443A - 特效视频处理方法、装置、电子设备及存储介质 - Google Patents

特效视频处理方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114401443A
CN114401443A CN202210080900.6A CN202210080900A CN114401443A CN 114401443 A CN114401443 A CN 114401443A CN 202210080900 A CN202210080900 A CN 202210080900A CN 114401443 A CN114401443 A CN 114401443A
Authority
CN
China
Prior art keywords
special effect
track
dimensional
dimensional track
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210080900.6A
Other languages
English (en)
Other versions
CN114401443B (zh
Inventor
田润稼
李沛霖
杨斯尧
厉维凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lemon Inc Cayman Island
Original Assignee
Lemon Inc Cayman Island
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lemon Inc Cayman Island filed Critical Lemon Inc Cayman Island
Priority to CN202210080900.6A priority Critical patent/CN114401443B/zh
Publication of CN114401443A publication Critical patent/CN114401443A/zh
Priority to PCT/SG2023/050020 priority patent/WO2023140786A2/zh
Application granted granted Critical
Publication of CN114401443B publication Critical patent/CN114401443B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability

Abstract

本公开实施例提供了一种特效视频处理方法、装置、电子设备及存储介质,该方法包括:响应于特效触发操作,获取目标触点的当前位置信息;根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效;若检测到满足三维展示条件时,多角度展示与所述二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示所述三维轨迹特效。本公开实施例提供的技术方案,可以使用户模拟现实世界中的材质绘制图像,并根据绘制图像生成对应的特效视频,增强了特效视频的丰富性、趣味性。

Description

特效视频处理方法、装置、电子设备及存储介质
技术领域
本公开实施例涉及图像处理技术领域,尤其涉及一种特效视频处理方法、装置、电子设备及存储介质。
背景技术
随着网络技术的发展,越来越多的应用程序进入了用户的生活,尤其是一系列可以拍摄短视频的软件,深受用户的喜爱。
为了提高视频拍摄的趣味性,软件开发商可以研发各种各样的特效道具,然而,目标为用户提供的特效道具十分有限,视频内容的丰富性有待进一步提升,尤其是在增强现实(Augmented Reality,AR)领域,基于相关的特效道具所生成的特效视频效果较差。
发明内容
本公开实施例提供一种特效视频处理方法、装置、电子设备及存储介质,满足了用户对现实世界中用特定材质绘制图案的过程进行模拟的需求,增强了所生成的特效视频的丰富性、趣味性。
第一方面,本公开实施例提供了一种特效视频处理方法,该方法包括:
响应于特效触发操作,获取目标触点的当前位置信息;
根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效;
若检测到满足三维展示条件时,多角度展示与所述二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示所述三维轨迹特效。
第二方面,本公开实施例还提供了一种特效视频处理装置,该装置包括:
位置信息确定模块,用于响应于特效触发操作,获取目标触点的当前位置信息;
二维轨迹确定模块,用于根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效;其中,所述绘制参数中包括糖画绘制材质;
视频显示模块,用于若检测到满足三维展示条件时,多角度展示与所述二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示所述三维轨迹特效。
第三方面,本公开实施例还提供了一种电子设备,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本公开实施例任一所述的特效视频处理方法。
第四方面,本公开实施例还提供了一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如本公开实施例任一所述的特效视频处理方法。
本公开实施例的技术方案,响应于特效触发操作,获取目标触点的当前位置信息,即在用户使用特效道具时,确定与特效道具对应的触点的位置;根据当前位置信息和绘制参数,确定目标触点的运动轨迹相一致的二维轨迹特效,即确定出特效道具所对应的特效材质,并基于触点的运动轨迹绘制出相应的二维特效;进一步的,若检测到满足三维展示条件时,多角度展示与二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示三维轨迹特效,在生成特效视频的过程中,为用户提供了一种基于特定材质绘制轨迹特效的道具,满足了用户对现实世界中用特定材质绘制图案的过程进行模拟的需求,提高了用户的使用体验,同时也增强了所生成的特效视频的丰富性、趣味性。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
图1为本公开实施例一所提供的一种特效视频处理方法的流程示意图;
图2为本公开实施例一所提供的在显示界面中展示多个待选择轨迹模板的示意图;
图3为本公开实施例一所提供的在显示界面中展示目标轨迹模板所对应引导图的示意图;
图4为本公开实施例二所提供的一种特效视频处理方法的流程示意图;
图5为本公开实施例二所提供的糖画特效视频在显示界面中进行展示的示意图;
图6为本公开实施例三所提供的一种特效视频处理装置的结构框图;
图7为本公开实施例四所提供的一种电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
在介绍本技术方案之前,可以先对应用场景进行示例性说明。可以将本公开技术方案应用在任意需要生成特效视频的场景中,例如,可以在通过相关应用拍摄视频的过程中,基于用户的绘制操作在显示界面中生成对应的图案,进而生成包含该图案所对应三维模型的特效视频,并将该特效视频在显示界面中进行展示。
实施例一
图1为本公开实施例一所提供的一种特效视频处理方法的流程示意图,本实施例可适用于用户利用特效道具,以特定的材质绘制图像并基于所绘制的图像生成相应的特效视频的情况,该方法可以由特效视频处理装置来执行,该装置可以通过软件和/或硬件的形式实现,该硬件可以是电子设备,如移动终端、PC端或服务器等。特效视频展示的场景通常是由客户端和服务器来配合实现的,本实施例所提供的方法可以由服务端来执行,客户端来执行,或者是客户端和服务端的配合来执行。
如图1,本实施例的方法包括:
S110、响应于特效触发操作,获取目标触点的当前位置信息。
其中,执行本公开实施例提供的特效视频处理方法的装置,可以集成在支持特效视频处理功能的应用软件中,且该软件可以安装至电子设备中,可选的,电子设备可以是移动终端或者PC端等。应用软件可以是对图像/视频处理的一类软件,其具体的应用软件在此不再一一赘述,只要可以实现图像/视频处理即可。还可以是专门研发的应用程序,来实现添加特效并将特效进行展示的软件中,亦或是集成在相应的页面中,用户可以通过PC端中集成的页面来实现对特效视频的处理。
在本实施例中,在支持特效视频处理功能的应用软件或应用程序中,可以预先开发用于触发特效的控件,当检测到用户触发该控件时,即可对特效触发操作进行响应,从而获取目标触点的当前位置信息。
具体来说,所触发的特效可以是具有交互性的特效,例如,当用户对特定控件执行触发操作,启用对应的绘画特效后,可以进一步基于当前所持的移动终端,在相关显示界面中以特定的材质(如,模拟现实世界中的糖画材质或墨水材质)绘制出任意形状的特效图像,当特效图像绘制完成后,相关数据经过应用软件或应用程序的处理,即可生成与用户所绘制的图像相对应的特效视频。
基于此可以理解,目标触点可以是用户在应用软件中触发某一种特效后,在显示界面中确定出来的、用于绘制特效图像的绘制点,该点同时也是与用户自身某一特征相关联的关键点。目标触点的当前位置信息,即是应用软件或应用程序针对目标触点在显示界面中的具体位置所确定出的数据,例如,目标触点在显示界面中的二维坐标。
可选的,针对于所触发的特效来说,用户可以利用面部的某一特征(如鼻子)确定出显示界面中作为“画笔”的绘制点的位置,在后续的过程中,用户还可以基于该面部特征控制绘制点在显示界面中进行移动,从而绘制出特定材质的特效图像;或者,用户可以通过手指在显示装置上的触控操作,确定出显示界面中绘制点的位置,从而在后续过程中通过手指的划动绘制出特定材质的特效图像。
在本实施例中,由于用户可以通过多种方式触发显示界面中的目标触点,因此,在获取目标触点的当前位置信息之前,可以确定当前图像采集方式,以根据当前图像采集方式确定目标触点的当前位置信息。
对于用户持有的移动终端来说,图像采集方式可以包括基于前置摄像装置的前置采集方式,以及基于后置摄像装置的后置采集方式。对应的,当确定当前图像采集方式为前置采集方式时,用户可以基于面部某一特征触发显示界面中的目标触点,也即是说,应用软件或应用程序可以在前置摄像头采集到用户面部图像时,在显示界面中确定出与用户面部某一个特征(如用户的鼻子)相对应的目标触点,进而确定出目标触点在显示界面中的位置;当确定当前图像采集方式为后置采集方式时,用户可以通过手指触控的方式触发显示界面中的目标触点,也即是说,应用仅通过后置摄像头采集当前时刻的图像,基于用户手指的触控操作确定相应的目标触点,进而确定出目标触点在显示界面中的位置。下面对上述两种确定目标触点当前当前位置信息的方式分别进行说明。
可选的,若当前图像采集方式为前置采集方式,在具体的获取目标触点当前位置信息的过程中,当检测到显示界面中包括面部图像时,确定面部图像中的目标关键点在显示界面中的当前位置信息。示例性的,预先设置用户的鼻子作为目标关键点,基于此,当用户通过移动设备的前置摄像头采集到面部图像时,可以基于预先训练好的面部识别算法对面部图像中的特征进行识别,当在面部图像中识别出可以作为目标关键点的鼻子这一特征时,即可将该特征在显示界面中的坐标作为当前位置信息。进一步的,可以基于前置摄像头检测用户鼻子的移动信息,从而控制目标触点在显示界面中移动,最终绘制出与目标触点移动轨迹相对应的图案。
可选的,若当前图像采集方式为后置采集方式,在具体的获取目标触点当前位置信息的过程中,将显示界面上按压点的位置信息作为当前位置信息,并将按压点作为目标触点。示例性的,当用户通过移动设备的后置摄像头拍摄任意画面时,可以对用户手指在移动终端触摸屏上的按压操作进行检测,当检测到上述操作后,即可将所确定的按压点在显示界面中的坐标作为当前位置信息。进一步的,基于用户手指在触摸屏上产生的按压力,可以使显示界面中的目标触点随用户手指的移动而移动,最终绘制出与目标触点移动轨迹相对应的图案。
在本实施例中,在用户以特定材质绘制相应的图像时,为了增强绘制过程的趣味性,减少特效道具的学习成本,在获取目标触点的当前位置信息之前,可以预先为用户提供用于辅助绘制的轨迹模板。
可选的,在用户选择某一种特效后,可以显示至少一个待选择轨迹模板;将预设时长内最后触发的待选择轨迹模板作为目标轨迹模板,并将与目标轨迹模板相对应的引导图展示在显示界面,以使目标触点基于引导图绘制二维轨迹特效。
其中,待选择轨迹模板可以有一个或多个,每个待选择轨迹模板都可以呈现出所关联图案的展示效果。如图2所示,当用户触发某一种特效后,应用可以在相关显示界面中显示出对应月亮图案的待选择轨迹模板1,以及对应星星图案的待选择轨迹模板2。在本实施例中,向用户提供特效相关联的待选择轨迹模板的同时,还会在显示界面中展示模板选择倒计时,倒计时时间即是预先设置的选择时长。可以理解,用户可以通过触发操作在多个待选择轨迹模版进行选择,当选择时长达到预设时长,即,模板选择倒计时归零时,用户在这一时刻选择的待选择轨迹模板即是目标轨迹模板。当然,在未达到预设时长时,用户也可以基于确定控件下发确认指令,从而直接结束模板选择倒计时的计时过程,并将当前选择的待选择轨迹模板作为目标轨迹模板,本领域技术人员应当理解,一方面,当待选择轨迹模版有多个时,用户可以按照自身意愿对多个模板依次进行选择,但选择的时间达到预设时长后,应用只会将用户最后选择的待选择轨迹模板作为目标轨迹模板;另一方面,具体的确定目标轨迹模板的方式可以根据实际情况进行选择,本公开实施例在此不做具体的限定。
进一步的,当确定出目标轨迹模板后,显示界面还可以显示目标轨迹模板对应的引导图,其中,引导图即是用于引导用户绘制相关图像的带有箭头的虚线。具体来说,在展示引导图的过程中,可以先确定目标轨迹模板的绘制路径,根据绘制路径生成引导图,并将引导图展示在显示界面上。
如图3所示,当用户选择包含月亮图案的待选择轨迹模板1作为目标轨迹模板后,可以先确定月亮对应的绘制路径,根据绘制路径即可在显示界面中显示出与月亮图案对应的虚线图作为引导图,同时,在引导图上还显示有用于对绘制方向进行引导的箭头。基于此可以理解,引导图可以在后续过程中辅助用户绘制月亮这一图案。在后续具体的绘制过程中,用户控制目标触点沿引导图上箭头的指向进行移动,即可在显示界面中绘制出目标轨迹模板所反映二维图像的轮廓或平面结构。
需要说明的是,在本实施例中,还针对用户未进行选择的情况预先部署了兜底策略。具体来说,若预设时长内未触发至少一个待选择轨迹模板,则将默认轨迹模板作为目标轨迹模板。其中,默认轨迹模板中包括预设轨迹模板或空白轨迹模板。可以理解,当预先在应用中导入一个轨迹模板作为预设轨迹模板后,如果用户在预设时长内没有选择任何待选择轨迹模板,则会在显示界面中显示与默认轨迹模板对应的引导图;当预先在应用中导入不包含任何实质内容的空白轨迹模板作为预设轨迹模板后,如果用户在预设时长内没有选择任何待选择轨迹模板,则会在显示界面中显示不包含任何引导图的图像绘制页面,在这种情况下,用户可以在图像绘制页面按照自己的意愿绘制任意形状的图像。
还需要说明的是,即使在应用确定出目标轨迹模板后,用户在后续控制目标触点绘制图案时,所绘制的线条可能与引导图存在偏差,此时,应用既可以以用户绘制的图案为准,也可以基于预先部署的、已经训练完毕的图像处理算法,对用户所绘制的图案进行优化,如,将图像中的相关线条进行平滑处理。
在实际应用过程中,在确定目标触点的当前位置信息后,还可以为目标触点添加特效绘笔,以基于特效绘笔绘制二维轨迹特效。
其中,特效绘笔可以是与当前特效相关的、与显示界面中目标触点绑定虚拟物体,可以理解,在后续过程中,显示界面中的特效绘笔可以随目标触点的移动而移动。例如,若当前特效为糖画特效,可以设置一个糖勺图案作为特效绘笔,用户在后续过程中绘制图像时,糖勺图案会随着目标触点移动而移动。在实际应用过程中,当用户选择糖画特效后,糖勺可以随着目标触点移动,并在移动轨迹上留下糖浆,最终生成虚拟的糖画,从而对现实世界中制作糖画的过程的模拟。
在本实施例中,添加特效绘笔进一步增强了特效的趣味性,同时,可视化的特效绘笔还可以使用户在图像绘制过程中时刻明确目标触点的实际位置,间接使所绘制的图像与目标轨迹模板中的轨迹更加贴合。本领域技术人员应当理解,除上述示例中的糖勺外,特效绘笔还可以多种拟物图案,例如,在多种特效之间通用的虚拟画笔,可以理解,特效绘笔具体的形状和样式可以根据各特效的需要进行调整,本公开实施例在此不做具体的限定。
S120、根据当前位置信息和绘制参数,确定与目标触点的运动轨迹相一致的二维轨迹特效。
其中,绘制参数是指与当前特效所模拟的材质相对应的属性信息,可以理解为,决定显示界面中用户所绘制图案的材质的参数。例如,当前特效为糖画特效时,绘制参数即是使图像呈现出糖画绘制材质的参数,当前特效为水墨画特效时,绘制参数即是使图像呈现出墨水材质的参数。
在本实施例中,当确定出目标触点的当前位置信息以及绘制参数后,即可根据目标触点的运动轨迹在显示界面中绘制出对应的二维轨迹特效。其中,二维轨迹特效即是用户最终绘制的图像,至少可以反映目标触点在显示界面中的运动轨迹。
具体的绘制二维轨迹特效的过程可以是,在检测到目标触点基于引导图移动时,以当前位置信息为绘制起点和糖画绘制材质为绘制材料绘制二维轨迹特效。以图3为例,当检测到目标触点沿月亮图案对应的引导图移动时,可以以目标触点的当前位置作为绘制起点,同时,基于绘制参数确定出糖画特效对应的糖画绘制材质,可以理解,基于糖画绘制材质所绘制的月亮图案可以呈现出与现实中的糖画相似的视觉效果,例如,绘制的图案与现实中的糖画呈现出相似的颜色和光泽。进一步的,显示界面中的目标触点在用户的控制下进行移动时,即可生成糖画绘制材质的月亮图案,该图案即是与目标轨迹图像相对应的二维轨迹特效。
由于在现实的绘制糖画的过程中,当糖勺中滴落的糖浆量不同时,糖画中所生成的点的大小、线条的粗细也会存在差异,因此,在本实施例中,为了使用户绘制的特效图像更加贴近于现实效果,绘制二维轨迹特效的过程还可以是,在目标触点运动过程中,确定目标触点的运动停顿点;根据相邻两个运动停顿点的停顿点属性,确定相邻两个运动停顿点之间的轨迹属性;基于轨迹宽度信息、糖色属性和运动轨迹,确定二维轨迹特效。
在本实施例中,用户在沿引导图绘制图案的过程中,需要针对图案中的各条线段逐条绘制,而在目标触点经过图案中各线条之间连接点时,难免会存在操作停顿的情况,因此,运动停顿点可以是所绘制的图案中的拐点。本领域技术人员应当理解,运动停顿点并非局限于图案中的拐点,还可以出现在图案的各线条中,也即是说,除图案中的拐点外,如果用户在绘制单一线条时出现操作停顿,对应的目标触点在显示界面中也会发生停顿,停顿处对应的的点同样可以为确定为运动停顿点,可以理解,图案上的点是否为运动停顿点实质上是由用户绘制过程中是否发生停顿这一事件而决定的。
在本实施例中,当特效为糖画特效时,停顿点属性不仅是反映用户操作发生停顿的信息,还是决定糖画图案最终视觉效果的信息,具体的,停顿点属性中包括停顿时长,即应用所记录的目标触点在停顿点发生停留的时长。轨迹属性信息包括轨迹宽度信息和糖色属性,其中,轨迹宽度信息即是反映图案中各线条宽度的信息,糖色属性为反映所生成的糖画中各线条粗细、光泽、质感的信息。
在目标触点移动的过程中,当确定出相邻两个运动停顿点的停顿点属性后,即可确定出两点之间的轨迹属性,进而得到二维轨迹特效。具体来说,确定当前停顿点的停顿时长,确定在当前停顿点的轨迹宽度信息以及糖色属性;根据当前停顿点到达下一停顿点的位移信息和运动时长信息,确定当前停顿点与下一停顿点之间的轨迹宽度信息、糖色深度信息、糖色亮度信息以及糖料厚度,作为轨迹属性。下面以图3为例对该过程进行说明。
参见图3,当确定月亮上下两个拐点作为运动停顿点时,可以在用户绘制图案的过程中记录上述两个运动停顿点的停顿时长,可以理解,对于任意一个运动停顿点来说,对应的停顿时长越长,在显示界面中所绘制的点越大,反之,在显示界面中所绘制的点越小。同时,为了进一步对现实世界中绘制糖画的过程进行模拟,还需要确定图案线条的宽度信息(即轨迹宽度信息)以及糖色属性。可以理解为,当目标触点从月亮上方拐点移动至月亮下方拐点的速度越快,对应线条的宽度越窄,糖色的颜色深度、糖色的亮度以及糖料的厚度都较小;当目标触点从月亮上方拐点移动至月亮下方拐点的速度越慢,对应的线条的宽度越宽,糖色的颜色深度、糖色的亮度以及糖料的厚度都较大。
在本实施例中,通过在绘制图案的过程确定上述轨迹属性,使最终得到的糖画更加贴近于现实世界中的糖画,增强了最终得到的虚拟糖画的真实感。
S130、若检测到满足三维展示条件时,多角度展示与二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示三维轨迹特效。
其中,三维轨迹特效即是对二维轨迹特效进行处理得到对应的三维模型后,从多个角度动态展示该三维模型的多帧画面。例如,当绘制出与月亮图案对应的二维轨迹特效后,应用软件可以基于二维的月亮图案生成对应的3D模型。当该三维轨迹特效向用户进行展示时,特效视频中月亮图案对应的3D模型可以在显示界面中呈现出不断旋转的视觉效果,从而实现对模型多角度画面的动态展示。
在本实施例中,在基于目标触点以及引导图绘制对应的糖画图的过程中,还可以对三维展示条件进行实时检测。其中,三维展示条件即是将所绘制的二维轨迹特效以三维的形式在AR场景内进行展示的触发条件,例如,可以将检测到的二维轨迹特效绘制完毕的事件作为三维展示条件。可以理解为,当检测到用户绘制完毕对应的二维轨迹特效后,基于预先编写的程序在三维空间中自动构建出与二维轨迹特效相对应的3D模型,再基于3D模型生成对应的特效视频,或者,将所确定的二维轨迹特效对应的数据上传至服务端,利用服务端的计算资源构建出与二维轨迹特效相对应的3D模型以及对应的特效视频,最后将特效视频相关的数据下发至客户端,即可在显示界面中显示该三维轨迹特效。
在本实施例中,为了避免三维轨迹特效一直显示在显示界面上,影响用户的使用体验,在三维轨迹特效的展示过程中还需要对特效视频停止播放的指令进行检测。其中,特效视频停止播放的指令有多种,例如,当检测到三维轨迹特效的展示时长达到预设时长时,可以自动生成特效视频停止播放的指令,或者,当检测到用户触发停止播放控件或退出应用控件时,基于相关控件生成特效视频停止播放指令。进一步的,当检测到停止播放指令后,三维轨迹特效即会在显示界面中停止展示。
本实施例的技术方案,响应于特效触发操作,获取目标触点的当前位置信息,即在用户使用特效道具时,确定与特效道具对应的触点的位置;根据当前位置信息和绘制参数,确定目标触点的运动轨迹相一致的二维轨迹特效,即确定出特效道具所对应的特效材质,并基于触点的运动轨迹绘制出相应的二维特效;进一步的,若检测到满足三维展示条件时,多角度展示与二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示三维轨迹特效,在生成特效视频的过程中,为用户提供了一种基于特定材质绘制轨迹特效的道具,满足了用户对现实世界中用特定材质绘制图案的过程进行模拟的需求,提高了用户的使用体验,同时也增强了所生成的特效视频的丰富性、趣味性。
实施例二
图4为本公开实施例二所提供的一种特效视频处理方法的流程示意图,在前述实施例的基础上,在检测到满足三维展示条件时,展示录入层的数据并删除未录入层的数据,减少了对缓存空间的占用;进一步的,为二维轨迹特效添加目标支撑特效,并在显示界面的目标区域中叠加节日特效,进一步丰富了特效视频的内容,增强了特效视频的趣味性。其具体的实施方式可以参见本实施例技术方案。其中,与上述实施例相同或者相应的技术术语在此不再赘述。
如图4所示,该方法具体包括如下步骤:
S210、响应于特效触发操作,获取目标触点的当前位置信息。
S220、根据当前位置信息和绘制参数,确定与目标触点的运动轨迹相一致的二维轨迹特效。
需要说明的是,在特效视频处理相关应用软件或应用程序中,可以针对数据所处的阶段划分出录入层和未录入层。其中,未录入层的数据即是不会在展示阶段所使用的数据,例如,与当前特效相关联的多个待选择轨迹模板,以及各待选择轨迹模板对应的引导图等数据。对应的,录入层的数据即是在展示阶段所使用的数据,例如,与用户所绘制的图案相关数据以及最终生成的三维轨迹特效相关数据。
具体的,在基于目标触点以及引导图绘制二维轨迹的过程中,将引导图显示在未录入层,将绘制的二维轨迹特效显示在录入层,以在检测到满足三维展示条件时,显示二维轨迹特效以及删除引导图。
示例性的,当用户确定出月亮图案对应的待选择轨迹模板作为目标轨迹模板后,在显示界面上所呈现的与目标轨迹模板相对应的引导图即是未录入层的数据,当用户控制目标触点在显示界面中绘制图案时,所生成的二维轨迹特效即是录入层的数据。基于此,在后续过程需要展示特效视频时,也只会显示与二维轨迹特效对应的数据,同时,可以将未录入层中的数据(即月亮图案对应的引导图)删除,从而减少对缓存空间的占用。
S230、若检测到满足三维展示条件时,为二维轨迹特效添加目标支撑特效,以更新二维轨迹特效。
需要说明的是,在实际应用过程中,三维展示条件包括下述至少一种,绘制二维轨迹特效的时长达到预设绘制时长;检测到二维轨迹特效绘制完成;在绘制二维轨迹特效的过程中,在停顿点的实际停留时长达到预设停留时长阈值。
以图3为例,在用户基于引导图控制目标触点在显示界面中绘制月亮图案时,界面上方会显示图像绘制倒计时为一分钟,该时长即是预先设置的绘制时长,可以理解,当实际绘制时长达到该时长后,无论图案是否绘制完成,应用都会停止对基于目标触点的绘制操作的响应,进而在显示界面中显示与二维轨迹特效对应的三维轨迹特效。或者,在用户基于目标触点在显示界面中绘制月亮图案时,基于预设时间间隔对绘制生成的二维轨迹特效进行检测,当检测到二维轨迹特效绘制完成,即,月亮图案对应的线条已经封闭时,停止对基于目标触点的绘制操作的响应,进而在显示界面中显示与二维轨迹特效对应的三维轨迹特效。或者,在用户基于目标触点在显示界面中绘制月亮图案时,对绘制过程中出现的各停顿点的停顿时长进行记录,对于任意停顿点来说,当停顿时长超过预设停留时长阈值,停止对基于目标触点的绘制操作的响应,进而在显示界面中显示与二维轨迹特效对应的三维轨迹特效。本领域技术人员应当理解,上述展示条件可以同时生效于应用软件中,也可以仅选择其中一个或多个生效于应用软件中,本公开实施例对此并未做具体的限定。
需要说明的是,当满足上述三维展示条件时,如果用户依然没有完成图案绘制,既可以按照本实施例的方案在显示界面中显示与未完成的二维轨迹特效对应的三维轨迹特效,也可以在显示界面中重新显示与目标轨迹模板对应的引导图,并引导用户重新绘制二维轨迹特效。
在本实施例中,为了使最终生成的三维轨迹特效所呈现的视觉效果更加丰富,在检测到满足三维展示条件时,还需要通过添加目标支撑特效以对二维轨迹特效进行更新,其中,目标支撑特效可以是在二维轨迹特效上新增的图案,在最终呈现的视图中,目标支撑特效至少用于承载所生成的三维轨迹特效。
以图5为例,在当前特效为糖画特效,并得到月亮图案的二维轨迹特效时,可以在该特效下方增加小木棍样式的目标支撑特效,进一步的,将作为目标支撑特效的小木棍与月亮图案对应的二维轨迹特效进行组合,从而实现对二维轨迹特效的更新。可以理解,在后续构建的特效视频中,小木棍也会随着月亮图案对应的3D模型在显示界面中旋转展示,通过这种方式,可以使最终得到的月亮图案的糖画模型更加贴近于现实。
可选的,得到二维轨迹特效后,还可以在显示界面的目标区域中叠加节日特效。其中,目标区域即是用于用于展示三维轨迹特效的区域,节日特效即是预先开发的与各种节日相关的静态特效和/或动态特效。以图5为例,在选择糖画特效并得到月亮图案对应的二维轨迹特效后,应用还可以基于系统时间确定出最接近当前时刻的节日“春节”。进一步的,调取与“春节”节日特效关联的对联以及横批,并将标注有相关文本信息的对联显示在目标区域内,同时,横批上可以适应性地显示当前特效的标识“糖画”。
通过在显示界面中叠加节日特效,进一步丰富了特效视频的内容,增强了特效视频的趣味性。
S240、调整虚拟相机的拍摄角度拍摄三维轨迹特效,得到各拍摄角度下的三维轨迹视图;将三维轨迹视图依次展示在显示界面上,以得到各视觉角度下的三维轨迹视图,直至检测到满足特效视频停止播放的指令时,停止展示三维轨迹特效。
在本实施例中,在应用所构建的AR场景中存在多个虚拟相机,这些虚拟相机至少用于从多个角度对三维轨迹特效进行拍摄,从而得到对应的三维轨迹视图,并将这些视图在显示界面中逐帧展示,可以理解为,AR场景内的虚拟相机通过旋转拍摄AR场景内的三维轨迹特效,即可得到多帧三维轨迹视图。其中,三维轨迹特效是基于二维轨迹特效的数据确定的。
以图5为例,当确定出月亮图案对应的三维轨迹特效后,可以基于场景内多个虚拟相机对该特效进行拍摄,得到对应的三维轨迹视图。进一步的,在显示过程中,逐帧显示上述三维轨迹视图,从而使月亮图案对应的三维轨迹特效在界面中呈现出旋转展示的效果,可以理解,在旋转展示的过程中,用户可以从各个视觉角度下对月亮图案对应的三维轨迹特效进行观察。
本实施例的技术方案,在检测到满足三维展示条件时,展示录入层的数据并删除未录入层的数据,减少了对缓存空间的占用;进一步的,为二维轨迹特效添加目标支撑特效,并在显示界面的目标区域中叠加节日特效,进一步丰富了特效视频的内容,增强了特效视频的趣味性。
实施例三
图6为本公开实施例三所提供的一种特效视频处理装置的结构框图,可执行本公开任意实施例所提供的特效视频处理方法,具备执行方法相应的功能模块和有益效果。如图6所示,该装置具体包括:位置信息确定模块310、二维轨迹确定模块320以及视频显示模块330。
位置信息确定模块310,用于响应于特效触发操作,获取目标触点的当前位置信息。
二维轨迹确定模块320,用于根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效。
视频显示模块330,用于若检测到满足三维展示条件时,多角度展示与所述二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示所述三维轨迹特效。
在上述各技术方案的基础上,特效视频处理装置还包括图像采集方式确定模块。
图像采集方式确定模块,用于确定当前图像采集方式,以根据所述当前图像采集方式确定所述目标触点的当前位置信息。
在上述各技术方案的基础上,特效视频处理装置还包括目标轨迹模板确定模块。
目标轨迹模板确定模块,用于显示至少一个待选择轨迹模板;将预设时长内最后触发的待选择轨迹模板作为目标轨迹模板,并将与所述目标轨迹模板相对应的引导图展示在显示界面,以使所述目标触点基于所述引导图绘制所述二维轨迹特效;或,若预设时长内未触发所述至少一个待选择轨迹模板,则将默认轨迹模板作为所述目标轨迹模板;其中,所述默认轨迹模板中包括预设轨迹模板或空白轨迹模板。
可选的,目标轨迹模板确定模块,还用于确定所述目标轨迹模板的绘制路径,根据所述绘制路径生成所述引导图,并将所述引导图展示在所述显示界面上。
可选的,所述当前图像采集方式包括前置采集方式,位置信息确定模块310,还用于当检测到显示界面中包括面部图像时,确定所述面部图像中的目标关键点在所述显示界面中的当前位置信息。
可选的,所述当前图像采集方式包括后置采集方式,位置信息确定模块310,还用于将显示界面上按压点的位置信息作为当前位置信息,并将所述按压点作为所述目标触点。
在上述各技术方案的基础上,特效视频处理装置还包括特效绘笔生成模块。
特效绘笔生成模块,用于为所述目标触点添加特效绘笔,以基于所述特效绘笔绘制所述二维轨迹特效。
可选的,二维轨迹确定模块320,还用于在检测到所述目标触点基于所述引导图移动时,以所述当前位置信息为绘制起点和糖画绘制材质为绘制材料绘制所述二维轨迹特效。
在上述各技术方案的基础上,二维轨迹确定模块320包括运动停顿点确定单元、轨迹属性确定单元以及二维轨迹特效确定单元。
运动停顿点确定单元,用于在所述目标触点运动过程中,确定所述目标触点的运动停顿点。
轨迹属性确定单元,用于根据相邻两个运动停顿点的停顿点属性,确定相邻两个运动停顿点之间的轨迹属性;其中,所述停顿点属性包括停顿时长,所述轨迹属性包括轨迹宽度信息和糖色属性。
二维轨迹特效确定单元,用于基于所述轨迹宽度信息、糖色属性和运动轨迹,确定所述二维轨迹特效。
可选的,轨迹属性确定单元,还用于确定当前停顿点的停顿时长,确定在所述当前停顿点的轨迹宽度信息以及糖色属性;根据当前停顿点到达下一停顿点的位移信息和运动时长信息,确定所述当前停顿点与所述下一停顿点之间的轨迹宽度信息、糖色深度信息、糖色亮度信息以及糖料厚度,作为所述轨迹属性。
可选的,二维轨迹确定模块320,还用于将所述引导图显示在未录入层,将绘制的二维轨迹特效显示在录入层,以在检测到满足三维展示条件时,显示所述二维轨迹特效以及删除所述引导图。
在上述各技术方案的基础上,所述三维展示条件包括下述至少一种:绘制所述二维轨迹特效的时长达到预设绘制时长;检测到所述二维轨迹特效绘制完成;在绘制二维轨迹特效的过程中,在停顿点的实际停留时长达到预设停留时长阈值。
在上述各技术方案的基础上,特效视频处理装置还包括目标支撑特效添加模块。
目标支撑特效添加模块,用于为所述二维轨迹特效添加目标支撑特效,以更新所述二维轨迹特效。
在上述各技术方案的基础上,特效视频处理装置还包括节日特效叠加模块。
节日特效叠加模块,用于在显示界面的目标区域中叠加节日特效。
可选的,视频显示模块330,还用于调整虚拟相机的拍摄角度拍摄所述三维轨迹特效,得到各拍摄角度下的三维轨迹视图;其中,所述三维轨迹特效是基于二维轨迹特效的数据确定的;将所述三维轨迹视图依次展示在所述显示界面上,以得到各视觉角度下的三维轨迹视图。
本实施例所提供的技术方案,响应于特效触发操作,获取目标触点的当前位置信息,即在用户使用特效道具时,确定与特效道具对应的触点的位置;根据当前位置信息和绘制参数,确定目标触点的运动轨迹相一致的二维轨迹特效,即确定出特效道具所对应的特效材质,并基于触点的运动轨迹绘制出相应的二维特效;进一步的,若检测到满足三维展示条件时,多角度展示与二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示三维轨迹特效,在生成特效视频的过程中,为用户提供了一种基于特定材质绘制轨迹特效的道具,满足了用户对现实世界中用特定材质绘制图案的过程进行模拟的需求,提高了用户的使用体验,同时也增强了所生成的特效视频的丰富性、趣味性。
本公开实施例所提供的特效视频处理装置可执行本公开任意实施例所提供的特效视频处理方法,具备执行方法相应的功能模块和有益效果。
值得注意的是,上述装置所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本公开实施例的保护范围。
实施例四
图7为本公开实施例四所提供的一种电子设备的结构示意图。下面参考图7,其示出了适于用来实现本公开实施例的电子设备(例如图7中的终端设备或服务器)400的结构示意图。本公开实施例中的终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图7示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图7所示,电子设备400可以包括处理装置(例如中央处理器、图案处理器等)401,其可以根据存储在只读存储器(ROM)402中的程序或者从存储装置406加载到随机访问存储器(RAM)403中的程序而执行各种适当的动作和处理。在RAM 403中,还存储有电子设备400操作所需的各种程序和数据。处理装置401、ROM 402以及RAM 403通过总线404彼此相连。编辑/输出(I/O)接口405也连接至总线404。
通常,以下装置可以连接至I/O接口405:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的编辑装置406;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置407;包括例如磁带、硬盘等的存储装置408;以及通信装置409。通信装置409可以允许电子设备400与其他设备进行无线或有线通信以交换数据。虽然图7示出了具有各种装置的电子设备400,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置409从网络上被下载和安装,或者从存储装置406被安装,或者从ROM 402被安装。在该计算机程序被处理装置401执行时,执行本公开实施例的方法中限定的上述功能。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
本公开实施例提供的电子设备与上述实施例提供的特效视频处理方法属于同一发明构思,未在本实施例中详尽描述的技术细节可参见上述实施例,并且本实施例与上述实施例具有相同的有益效果。
实施例五
本公开实施例提供了一种计算机存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述实施例所提供的特效视频处理方法。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:
响应于特效触发操作,获取目标触点的当前位置信息;
根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效;
若检测到满足三维展示条件时,多角度展示与所述二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示所述三维轨迹特效。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定,例如,第一获取单元还可以被描述为“获取至少两个网际协议地址的单元”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开的一个或多个实施例,【示例一】提供了一种特效视频处理方法,该方法包括:
响应于特效触发操作,获取目标触点的当前位置信息;
根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效;
若检测到满足三维展示条件时,多角度展示与所述二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示所述三维轨迹特效。
根据本公开的一个或多个实施例,【示例二】提供了一种特效视频处理方法,还包括:
可选的,确定当前图像采集方式,以根据所述当前图像采集方式确定所述目标触点的当前位置信息。
根据本公开的一个或多个实施例,【示例三】提供了一种特效视频处理方法,还包括:
可选的,显示至少一个待选择轨迹模板;
将预设时长内最后触发的待选择轨迹模板作为目标轨迹模板,并将与所述目标轨迹模板相对应的引导图展示在显示界面,以使所述目标触点基于所述引导图绘制所述二维轨迹特效;或,
若预设时长内未触发所述至少一个待选择轨迹模板,则将默认轨迹模板作为所述目标轨迹模板;其中,所述默认轨迹模板中包括预设轨迹模板或空白轨迹模板。
根据本公开的一个或多个实施例,【示例四】提供了一种特效视频处理方法,还包括:
可选的,确定所述目标轨迹模板的绘制路径,根据所述绘制路径生成所述引导图,并将所述引导图展示在所述显示界面上。
根据本公开的一个或多个实施例,【示例五】提供了一种特效视频处理方法,还包括:
可选的,所述当前图像采集方式包括前置采集方式;
当检测到显示界面中包括面部图像时,确定所述面部图像中的目标关键点在所述显示界面中的当前位置信息。
根据本公开的一个或多个实施例,【示例六】提供了一种特效视频处理方法,还包括:
可选的,所述当前图像采集方式围后置采集方式;
将显示界面上按压点的位置信息作为当前位置信息,并将所述按压点作为所述目标触点。
根据本公开的一个或多个实施例,【示例七】提供了一种特效视频处理方法,还包括:
可选的,为所述目标触点添加特效绘笔,以基于所述特效绘笔绘制所述二维轨迹特效。
根据本公开的一个或多个实施例,【示例八】提供了一种特效视频处理方法,还包括:
可选的,在检测到所述目标触点基于所述引导图移动时,以所述当前位置信息为绘制起点和糖画绘制材质为绘制材料绘制所述二维轨迹特效。
根据本公开的一个或多个实施例,【示例九】提供了一种特效视频处理方法,还包括:
可选的,在所述目标触点运动过程中,确定所述目标触点的运动停顿点;
根据相邻两个运动停顿点的停顿点属性,确定相邻两个运动停顿点之间的轨迹属性;其中,所述停顿点属性包括停顿时长,所述轨迹属性包括轨迹宽度信息和糖色属性;
基于所述轨迹宽度信息、糖色属性和运动轨迹,确定所述二维轨迹特效。
根据本公开的一个或多个实施例,【示例十】提供了一种特效视频处理方法,还包括:
可选的,确定当前停顿点的停顿时长,确定在所述当前停顿点的轨迹宽度信息以及糖色属性;
根据当前停顿点到达下一停顿点的位移信息和运动时长信息,确定所述当前停顿点与所述下一停顿点之间的轨迹宽度信息、糖色深度信息、糖色亮度信息以及糖料厚度,作为所述轨迹属性。
根据本公开的一个或多个实施例,【示例十一】提供了一种特效视频处理方法,还包括:
可选的,将所述引导图显示在未录入层,将绘制的二维轨迹特效显示在录入层,以在检测到满足三维展示条件时,显示所述二维轨迹特效以及删除所述引导图。
根据本公开的一个或多个实施例,【示例十二】提供了一种特效视频处理方法,还包括:
可选的,所述三维展示条件包括下述至少一种:
绘制所述二维轨迹特效的时长达到预设绘制时长;
检测到所述二维轨迹特效绘制完成;
在绘制二维轨迹特效的过程中,在停顿点的实际停留时长达到预设停留时长阈值。
根据本公开的一个或多个实施例,【示例十三】提供了一种特效视频处理方法,还包括:
可选的,为所述二维轨迹特效添加目标支撑特效,以更新所述二维轨迹特效。
根据本公开的一个或多个实施例,【示例十四】提供了一种特效视频处理方法,还包括:
可选的,在显示界面的目标区域中叠加节日特效。
根据本公开的一个或多个实施例,【示例十五】提供了一种特效视频处理方法,还包括:
可选的,调整虚拟相机的拍摄角度拍摄所述三维轨迹特效,得到各拍摄角度下的三维轨迹视图;其中,所述三维轨迹特效是基于二维轨迹特效的数据确定的;
将所述三维轨迹视图依次展示在所述显示界面上,以得到各视觉角度下的三维轨迹视图。
根据本公开的一个或多个实施例,【示例十六】提供了一种特效视频处理装置,包括:
位置信息确定模块,用于响应于特效触发操作,获取目标触点的当前位置信息;
二维轨迹确定模块,用于根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效;
视频显示模块,用于若检测到满足三维展示条件时,多角度展示与所述二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示所述三维轨迹特效。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (18)

1.一种特效视频处理方法,其特征在于,包括:
响应于特效触发操作,获取目标触点的当前位置信息;
根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效;
若检测到满足三维展示条件时,多角度展示与所述二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示所述三维轨迹特效。
2.根据权利要求1所述的方法,其特征在于,在所述获取目标触点的当前位置信息之前,还包括:
确定当前图像采集方式,以根据所述当前图像采集方式确定所述目标触点的当前位置信息。
3.根据权利要求2所述的方法,其特征在于,在所述获取目标触点的当前位置信息之前,还包括:
显示至少一个待选择轨迹模板;
将预设时长内最后触发的待选择轨迹模板作为目标轨迹模板,并将与所述目标轨迹模板相对应的引导图展示在显示界面,以使所述目标触点基于所述引导图绘制所述二维轨迹特效;或,
若预设时长内未触发所述至少一个待选择轨迹模板,则将默认轨迹模板作为所述目标轨迹模板;其中,所述默认轨迹模板中包括预设轨迹模板或空白轨迹模板。
4.根据权利要求3所述的方法,其特征在于,所述将与所述目标轨迹模板相对应的引导图展示在显示界面,包括:
确定所述目标轨迹模板的绘制路径,根据所述绘制路径生成所述引导图,并将所述引导图展示在所述显示界面上。
5.根据权利要求2所述的方法,其特征在于,所述当前图像采集方式包括前置采集方式,所述获取目标触点的当前位置信息,包括:
当检测到显示界面中包括面部图像时,确定所述面部图像中的目标关键点在所述显示界面中的当前位置信息。
6.根据权利要求2所述的方法,其特征在于,所述当前图像采集方式围后置采集方式,所述获取目标触点的当前位置信息,包括:
将显示界面上按压点的位置信息作为当前位置信息,并将所述按压点作为所述目标触点。
7.根据权利要求5或6所述的方法,其特征在于,在确定目标触点的当前位置信息之后,还包括:
为所述目标触点添加特效绘笔,以基于所述特效绘笔绘制所述二维轨迹特效。
8.根据权利要求3所述的方法,所述根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效,包括:
在检测到所述目标触点基于所述引导图移动时,以所述当前位置信息为绘制起点和糖画绘制材质为绘制材料绘制所述二维轨迹特效。
9.根据权利要求8所述的方法,其特征在于,绘制所述二维轨迹特效,包括:
在所述目标触点运动过程中,确定所述目标触点的运动停顿点;
根据相邻两个运动停顿点的停顿点属性,确定相邻两个运动停顿点之间的轨迹属性;其中,所述停顿点属性包括停顿时长,所述轨迹属性包括轨迹宽度信息和糖色属性;
基于所述轨迹宽度信息、糖色属性和运动轨迹,确定所述二维轨迹特效。
10.根据权利要求9所述的方法,其特征在于,所述根据相邻两个运动停顿点的停顿点属性,确定相邻两个运动停顿点之间的轨迹属性,包括:
确定当前停顿点的停顿时长,确定在所述当前停顿点的轨迹宽度信息以及糖色属性;
根据当前停顿点到达下一停顿点的位移信息和运动时长信息,确定所述当前停顿点与所述下一停顿点之间的轨迹宽度信息、糖色深度信息、糖色亮度信息以及糖料厚度,作为所述轨迹属性。
11.根据权利要求3所述的方法,其特征在于,在基于所述目标触点基于所述引导图绘制所述二维轨迹特效的过程中,包括:
将所述引导图显示在未录入层,将绘制的二维轨迹特效显示在录入层,以在检测到满足三维展示条件时,显示所述二维轨迹特效以及删除所述引导图。
12.根据权利要求1所述的方法,其特征在于,所述三维展示条件包括下述至少一种:
绘制所述二维轨迹特效的时长达到预设绘制时长;
检测到所述二维轨迹特效绘制完成;
在绘制二维轨迹特效的过程中,在停顿点的实际停留时长达到预设停留时长阈值。
13.根据权利要求1所述的方法,其特征在于,在检测到满足三维展示条件之后,在多角度展示与所述二维轨迹特效相对应的三维轨迹特效之前,还包括:
为所述二维轨迹特效添加目标支撑特效,以更新所述二维轨迹特效。
14.根据权利要求13所述的方法,其特征在于,在得到所述二维轨迹特效后,还包括:
在显示界面的目标区域中叠加节日特效。
15.根据权利要求14所述的方法,其特征在于,所述多角度展示与所述二维轨迹特效相对应的三维轨迹特效,包括:
调整虚拟相机的拍摄角度拍摄所述三维轨迹特效,得到各拍摄角度下的三维轨迹视图;其中,所述三维轨迹特效是基于二维轨迹特效的数据确定的;
将所述三维轨迹视图依次展示在所述显示界面上,以得到各视觉角度下的三维轨迹视图。
16.一种特效视频处理装置,其特征在于,包括:
位置信息确定模块,用于响应于特效触发操作,获取目标触点的当前位置信息;
二维轨迹确定模块,用于根据所述当前位置信息和绘制参数,确定与所述目标触点的运动轨迹相一致的二维轨迹特效;
视频显示模块,用于若检测到满足三维展示条件时,多角度展示与所述二维轨迹特效相对应的三维轨迹特效,直至检测到满足特效视频停止播放的指令时,停止展示所述三维轨迹特效。
17.一种电子设备,其特征在于,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-15中任一所述的特效视频处理方法。
18.一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-15中任一所述的特效视频处理方法。
CN202210080900.6A 2022-01-24 2022-01-24 特效视频处理方法、装置、电子设备及存储介质 Active CN114401443B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210080900.6A CN114401443B (zh) 2022-01-24 2022-01-24 特效视频处理方法、装置、电子设备及存储介质
PCT/SG2023/050020 WO2023140786A2 (zh) 2022-01-24 2023-01-11 特效视频处理方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210080900.6A CN114401443B (zh) 2022-01-24 2022-01-24 特效视频处理方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN114401443A true CN114401443A (zh) 2022-04-26
CN114401443B CN114401443B (zh) 2023-09-01

Family

ID=81232488

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210080900.6A Active CN114401443B (zh) 2022-01-24 2022-01-24 特效视频处理方法、装置、电子设备及存储介质

Country Status (2)

Country Link
CN (1) CN114401443B (zh)
WO (1) WO2023140786A2 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024016924A1 (zh) * 2022-07-20 2024-01-25 北京字跳网络技术有限公司 视频处理方法、装置、电子设备及存储介质
WO2024051756A1 (zh) * 2022-09-08 2024-03-14 北京字跳网络技术有限公司 特效图像绘制方法、装置、设备及介质

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103403650A (zh) * 2012-10-31 2013-11-20 华为终端有限公司 绘图控制方法、装置及移动终端
CN106559660A (zh) * 2015-09-29 2017-04-05 杭州海康威视数字技术股份有限公司 2d视频中展示目标3d信息的方法及装置
US20170286567A1 (en) * 2013-10-10 2017-10-05 Barbara Hana Interactive Digital Drawing and Physical Realization
US20180081484A1 (en) * 2016-09-20 2018-03-22 Sony Interactive Entertainment Inc. Input method for modeling physical objects in vr/digital
CN109324749A (zh) * 2018-09-10 2019-02-12 Oppo(重庆)智能科技有限公司 绘图方法、装置、存储介质及电子设备
CN109993836A (zh) * 2019-03-18 2019-07-09 浙江大学 一种实现虚拟现实三维烟花形状可控的方法
CN110533687A (zh) * 2018-05-11 2019-12-03 深眸科技(深圳)有限公司 多目标三维轨迹跟踪方法及装置
CN110639204A (zh) * 2019-10-18 2020-01-03 网易(杭州)网络有限公司 游戏数据处理方法、装置以及终端设备
CN111399729A (zh) * 2020-03-10 2020-07-10 北京字节跳动网络技术有限公司 图像的绘制方法、装置、可读介质和电子设备
CN112035041A (zh) * 2020-08-31 2020-12-04 北京字节跳动网络技术有限公司 一种图像处理方法、装置、电子设备和存储介质
CN112686990A (zh) * 2021-01-07 2021-04-20 腾讯科技(深圳)有限公司 一种三维模型显示方法、装置、存储介质和计算机设备
CN112929582A (zh) * 2021-02-04 2021-06-08 北京字跳网络技术有限公司 一种特效展示方法、装置、设备及介质
CN113850746A (zh) * 2021-09-29 2021-12-28 北京字跳网络技术有限公司 图像处理方法、装置、电子设备及存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106204696B (zh) * 2016-07-05 2019-05-28 网易(杭州)网络有限公司 一种特效实现方法及装置
CN109847360B (zh) * 2019-03-14 2023-03-21 网易(杭州)网络有限公司 游戏道具的3d效果处理方法、装置、电子设备及介质
CN112116690B (zh) * 2019-06-19 2023-07-07 腾讯科技(深圳)有限公司 视频特效生成方法、装置及终端
CN113706709A (zh) * 2021-08-10 2021-11-26 深圳市慧鲤科技有限公司 文本特效生成方法及相关装置、设备、存储介质

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103403650A (zh) * 2012-10-31 2013-11-20 华为终端有限公司 绘图控制方法、装置及移动终端
US20170286567A1 (en) * 2013-10-10 2017-10-05 Barbara Hana Interactive Digital Drawing and Physical Realization
CN106559660A (zh) * 2015-09-29 2017-04-05 杭州海康威视数字技术股份有限公司 2d视频中展示目标3d信息的方法及装置
US20180081484A1 (en) * 2016-09-20 2018-03-22 Sony Interactive Entertainment Inc. Input method for modeling physical objects in vr/digital
CN110533687A (zh) * 2018-05-11 2019-12-03 深眸科技(深圳)有限公司 多目标三维轨迹跟踪方法及装置
CN109324749A (zh) * 2018-09-10 2019-02-12 Oppo(重庆)智能科技有限公司 绘图方法、装置、存储介质及电子设备
CN109993836A (zh) * 2019-03-18 2019-07-09 浙江大学 一种实现虚拟现实三维烟花形状可控的方法
CN110639204A (zh) * 2019-10-18 2020-01-03 网易(杭州)网络有限公司 游戏数据处理方法、装置以及终端设备
CN111399729A (zh) * 2020-03-10 2020-07-10 北京字节跳动网络技术有限公司 图像的绘制方法、装置、可读介质和电子设备
CN112035041A (zh) * 2020-08-31 2020-12-04 北京字节跳动网络技术有限公司 一种图像处理方法、装置、电子设备和存储介质
CN112686990A (zh) * 2021-01-07 2021-04-20 腾讯科技(深圳)有限公司 一种三维模型显示方法、装置、存储介质和计算机设备
CN112929582A (zh) * 2021-02-04 2021-06-08 北京字跳网络技术有限公司 一种特效展示方法、装置、设备及介质
CN113850746A (zh) * 2021-09-29 2021-12-28 北京字跳网络技术有限公司 图像处理方法、装置、电子设备及存储介质

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
CHUNYU LIN ET AL.: "Main vertical objects detecting algorithm for real-time 2D-to-3D conversion", 《2012 IEEE 11TH INTERNATIONAL CONFERENCE ON SIGNAL PROCESSING》 *
刘春香 等: "视频制作中计算机技术的应用", 《消费电子》, no. 18 *
樊玉凤: "二维与三维相结合在动画制作中的作用" *
王少豪: "摄像机三维技术在AE视频特效中的应用", 《电脑知识与技术》, vol. 11, no. 26 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024016924A1 (zh) * 2022-07-20 2024-01-25 北京字跳网络技术有限公司 视频处理方法、装置、电子设备及存储介质
WO2024051756A1 (zh) * 2022-09-08 2024-03-14 北京字跳网络技术有限公司 特效图像绘制方法、装置、设备及介质

Also Published As

Publication number Publication date
CN114401443B (zh) 2023-09-01
WO2023140786A3 (zh) 2023-09-28
WO2023140786A2 (zh) 2023-07-27

Similar Documents

Publication Publication Date Title
CN110058685B (zh) 虚拟对象的显示方法、装置、电子设备和计算机可读存储介质
CN111857923B (zh) 特效展示方法、装置、电子设备及计算机可读介质
CN114401443B (zh) 特效视频处理方法、装置、电子设备及存储介质
WO2023051185A1 (zh) 图像处理方法、装置、电子设备及存储介质
CN109600559B (zh) 一种视频特效添加方法、装置、终端设备及存储介质
CN112035046B (zh) 榜单信息显示方法、装置、电子设备及存储介质
CN113055611B (zh) 图像处理方法及装置
CN114677386A (zh) 特效图像处理方法、装置、电子设备及存储介质
WO2022171024A1 (zh) 图像显示方法、装置、设备及介质
CN114567805A (zh) 确定特效视频的方法、装置、电子设备及存储介质
WO2023169201A1 (zh) 基于虚拟资源的交互方法、装置、设备和存储介质
CN108845741B (zh) 一种ar表情的生成方法、客户端、终端和存储介质
CN112672185A (zh) 基于增强现实的显示方法、装置、设备及存储介质
CN113806306A (zh) 媒体文件处理方法、装置、设备、可读存储介质及产品
CN114598823A (zh) 特效视频生成方法、装置、电子设备及存储介质
CN112906553B (zh) 图像处理方法、装置、设备及介质
CN113163135B (zh) 视频的动画添加方法、装置、设备及介质
WO2024051540A1 (zh) 特效处理方法、装置、电子设备及存储介质
WO2024016924A1 (zh) 视频处理方法、装置、电子设备及存储介质
CN110084306B (zh) 用于生成动态图像的方法和装置
CN114697568B (zh) 特效视频确定方法、装置、电子设备及存储介质
WO2022183967A1 (zh) 视频画面的显示方法、装置、设备、介质及程序产品
CN115002359A (zh) 视频处理方法、装置、电子设备及存储介质
CN116030221A (zh) 增强现实画面的处理方法、装置、电子设备及存储介质
US20240163392A1 (en) Image special effect processing method and apparatus, and electronic device and computer readable storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant