CN115100259A - 一种视频的重映射方法和相关设备 - Google Patents
一种视频的重映射方法和相关设备 Download PDFInfo
- Publication number
- CN115100259A CN115100259A CN202210600243.3A CN202210600243A CN115100259A CN 115100259 A CN115100259 A CN 115100259A CN 202210600243 A CN202210600243 A CN 202210600243A CN 115100259 A CN115100259 A CN 115100259A
- Authority
- CN
- China
- Prior art keywords
- video
- remapping
- frame
- initial
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 48
- 238000013507 mapping Methods 0.000 claims abstract description 46
- 238000007781 pre-processing Methods 0.000 claims abstract description 34
- 230000004927 fusion Effects 0.000 claims description 47
- 238000012790 confirmation Methods 0.000 claims description 20
- 238000012545 processing Methods 0.000 claims description 18
- 230000006870 function Effects 0.000 claims description 16
- 238000004891 communication Methods 0.000 claims description 10
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 241000283973 Oryctolagus cuniculus Species 0.000 description 3
- 241000282326 Felis catus Species 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000796 flavoring agent Substances 0.000 description 1
- 235000019634 flavors Nutrition 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/40—Analysis of texture
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种视频的重映射方法和相关设备,方法包括:获取待处理的原始视频;对所述原始视频进行预处理,得到初始视频;根据预设的重映射信息,确定所述初始视频中的每一个初始帧对应的映射参数;根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频。本发明能够方便用户快速地制作有趣的视频。
Description
技术领域
本发明涉及视频处理技术领域,特别涉及一种视频的重映射方法和相关设备。
背景技术
视频通过剪辑处理能够为视频本身增加不同的风味,提高视频的吸引力。以往视频的剪辑处理都需要使用计算处理能力较强的硬件和专门的处理软件,例如AE、Pr实现。视频重映射是对视频的显示效果进行重新编辑的视频处理方法,例如将视频的节奏加快,将视频的节奏减慢。
随着短视频使用的普及,越来越多的用户通过手机进行视频拍摄和分享,而手机终端的计算能力较差,一般只能使用较为简单的视频处理。此外,虽然专业的视频处理软件较多的功能,但是存在一定的入门门槛,因此对于没有学习过使用手册或接受相关的培训的用户而言,具有较高门槛。因此,目前的视频重映射方法仍然存在使用不便、对普通用户不友好等问题。
发明内容
本发明要解决的技术问题在于视频重映射使用复杂,对于手机端和一般用户难度较高,针对现有技术的不足,提供一种视频的重映射方法和相关设备。
为了解决上述技术问题,本发明所采用的技术方案如下:
一种视频的重映射方法,所述方法包括:
获取待处理的原始视频;
对所述原始视频进行预处理,得到初始视频;
根据预设的重映射信息,确定所述初始视频中的每一个初始帧对应的映射参数;
根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频。
可选地,所述预处理包括抠图处理;所述对所述原始视频进行预处理,得到初始视频包括:
当检测到抠图指令时,对所述原始视频中的每一个原始帧进行物体识别,得到若干张候选物品图像;
当检测到针对所述候选物品图像的确认指令时,将所述确认指令对应的候选物品图像作为抠图对象;
根据所述抠图对象,对所述原始视频中的原始帧进行抠图处理,得到初始视频。
可选地,所述根据预设的重映射信息,确定所述初始视频中的每一个初始帧对应的映射参数包括:
当检测到针对所述初始视频的时间选择指令时,根据所述时间选择指令,确定所述初始视频中的待处理视频;
显示预设的若干个重映射信息对应的重映射名称;
当检测到针对所述重映射名称的确认指令时,根据所述确认指令,确定与所述待处理视频对应的重映射数据;
根据所述重映射数据,确定所述待处理视频中的每一个初始帧对应的映射参数。
可选地,所述背景视频包括空白画布组成的空白视频。
可选地,所述映射参数包括参数数组。
可选地,所述目标视频包括若干个目标帧和每一个所述目标帧对应的时间戳;所述根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频包括:
针对每一个背景帧,根据所述映射参数中的时间序号,确定图像帧中与该背景帧对应的融合图像;
利用所述融合图像,对该背景帧进行纹理更新,得到目标帧;
将该背景帧对应的时间戳作为所述目标帧对应的时间戳,得到目标视频。
可选地,所述目标视频包括若干个目标帧和每一个所述目标帧对应的时间戳,所述映射参数还包括重映射函数;所述根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频包括:
针对每一个背景帧,根据所述映射参数中的时间序号,确定图像帧中与该背景帧对应的融合图像;
针对每一个所述融合图像,根据所述重映射函数,计算所述融合图像中的每一个像素点对应的融合位置;
针对每一个所述融合图像,根据所述重映射函数,计算所述融合图像中的每一个像素点对应的融合位置;
根据所述时间序号的顺序和所述融合位置,利用该融合图像对与该融合图像对应的背景帧进行纹理更新,得到目标帧。
一种视频的重映射装置,所述装置包括:
获取模块,用于获取待处理的原始视频;
预处理模块,用于对所述原始视频进行预处理,得到初始视频;
确定模块,用于根据预设的重映射信息,确定所述初始视频中的每一个初始帧对应的映射参数;
融合模块,用于根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频。
一种计算机可读存储介质,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现如上任一所述的视频的重映射方法中的步骤。
一种终端设备,其包括:处理器、存储器及通信总线;所述存储器上存储有可被所述处理器执行的计算机可读程序;
所述通信总线实现处理器和存储器之间的连接通信;
所述处理器执行所述计算机可读程序时实现如上任一所述的视频的重映射方法中的步骤。
有益效果:本发明提供一种视频的重映射方法,首先获取需要进行重映射处理的原始视频,对该原始视频进行预处理,得到原始视频中的初始视频,根据预先为初始视频设计的重映射信息,可计算初始视频中的每一个初始帧对应的映射参数。通过这种方式,客户端可实现自动对初始视频的重映射。最后根据映射参数,将初始帧和背景视频融合。由于初始帧是根据映射参数进行融合的,因此融合后的视频能够具有原有的原始视频不具备的特效。整个过程操作简单且快速,且不需要大量的计算,因此能够在手机客户端实现,方便用户使用。
附图说明
图1为本发明提供的视频的重映射方法的流程图。
图2为本发明提供的视频的重映射方法中原始视频中的四个连续的图像帧的示意图(从上到下为播放顺序)。
图3为本发明提供的视频的重映射方法中背景视频中的一个背景帧的示意图。
图4为本发明提供的视频的重映射方法中目标视频中四个连续的图像帧的示意图(从上到下为播放顺序)。
图5为本发明提供的视频的重映射装置的示意图。
图6为本发明提供的终端设备的结构原理图。
具体实施方式
本发明提供一种视频的重映射方法,为使本发明的目的、技术方案及效果更加清楚、明确,以下参照附图并举实施例对本发明进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术语和科学术语),具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
如图1所示,本实施提供了一种视频的重映射方法,为方便说明,本实施例以安装有执行该视频重映射方法的应用程序为执行主体进行描述,此外,电脑、手机、平板等电子设备都可作为本方案的执行主体,本方案的应用范围不局限于本实施例的主体之上。视频的重映射方法包括以下步骤:
S10、获取待处理的原始视频。
具体地,用户先将预先拍摄或保存在本地的视频上传至客户端的应用程序中。本实施例将这种需要应用程序处理的视频称为原始视频,如图2所示,本实施例提供的原始视频中包含女孩和兔子,为随着时间推移(time=1~time=5),女孩的表情从开心到不适。
S20、对所述原始视频进行预处理,得到初始视频。
具体地,得到原始视频后,原始视频与后续需要融合的背景视频可能存在尺寸不一致、清晰度不一致等情形,因此需要对原始视频进行预处理,以保证预处理后得到的初始视频可融合至背景视频中。
得到原始视频后,应用程序会展示预处理窗口,并对预处理窗口进行监听。预处理窗口包括一些预处理方式对应的名称,例如剪切、裁剪、旋转。
在一种预处理的方式中,预处理窗口包括视频剪切键,用户仅想对原始视频中的一段视频进行重映射处理,因此用户会点击视频剪切键,并可通过滑动进度条、输入剪切的起点或终点等方式指定原始视频中的起始帧和终止帧。根据起始帧和终止帧,对原始视频进行剪切,得到初始视频。
在第二种预处理方式中,预处理窗口包括图像裁剪键,当监听到用户点击图像裁剪键时,可显示裁剪框或裁剪坐标窗口等,以便用户通过裁剪框指定裁剪后的图像的画面坐标,或者在裁剪坐标窗口输入裁剪后图像的坐标值确定裁剪后的图像画面坐标。根据图像画面坐标,应用程序对原始视频中的每一个视频帧进行裁剪,得到初始视频。
以上两种处理方式中,原始视频中的图像信息大多数都保留在初始视频中,而想要制作更有趣味的视频,或者想要保存一部分背景视频中的信息,仅融合原始视频中的一部分信息,故在本实施例的第三种预处理方式中,预处理包括抠图处理,其具体步骤包括:
A10、当检测到抠图指令时,对所述原始视频中的每一个原始帧进行物体识别,得到若干张候选物品图像。
具体地,预处理窗口包括抠图键。当监听到用户点击抠图键时,原始视频中的每一个原始帧进行物体识别,得到候选物品图像。物品识别中的识别对象可包括人体、人脸、动物、桌子等,识别后的候选物品图像即指包含识别得到的物品的图像。
例如物品识别中包含人,进行物体识别后,可显示包含人像的图像,并将其作为候选物品图像。图1为本实施例上传的原始视频中的一个图像内容,包含一个女孩和一只兔子。进行物体识别后,可提取出包含该人物的图像和包含兔子的图像,将这两张图像作为候选物品图像。
A20、当检测到针对所述候选物品图像的确认指令时,将所述确认指令对应的候选物品图像作为抠图对象。
具体地,展示候选物品图像并进行监听,当监听到针对某一个或某几个候选物品图像的确认指令时,将该候选物品图像中的物品作为抠图对象。
本实施例中,用户所期望实现的是将原始视频中的人物融合至背景视频中,因此,用户针对包含人物的候选物品图像发送确认指令。应用程序根据确认指令,确定包含女孩的候选物品图像为抠图对象。
A30、根据所述抠图对象,对所述原始视频中的原始帧进行抠图处理,得到初始视频。
具体地,得到抠图对象后,即确定每一个原始帧中需要抠图的对象,因此根据抠图对象,可对所有原始帧中的抠图对象进行抠图处理,得到初始视频。
上述三种预处理的方式外,本实施例中预还可包括旋转、色温调整、灰度化等多种不同的预处理方式。除了上述用户点击选择不同的预处理方式外,还可预先将这些预处理方式作为默认处理保存在应用程序中,当用户上传原始视频后,基于默认处理,自动对原始视频执行上述的任意一种预处理方式、其他常见的预处理方式及其结合。仍以人像抠图为例,当默认处理中包含对人像进行抠图这一处理方式,在用户上传原始视频后,基于默认处理,应用程序可自动生成初始视频。
此外,本实施例中的初始视频仅包含顺序排队的多张初始帧,并不包含背景音乐,音乐可在后期处理得到。例如得到目标视频后用户再自行选择背景音乐并插入到目标视频中,或者,将原始视频本身的背景音乐插入到目标视频中;抑或每一个不同的模板信息都有其对应的背景音乐,得到目标视频后,可自动插入目标信息中的背景音乐。
S30、根据预设的重映射信息,确定所述初始视频中的每一个初始帧对应的映射参数。
具体地,重映射信息是指重新为视频中的每一个初始帧设定对应的信息。本实施例中的重映射信息包括时间重映射信息和图像重映射信息。重映射信息可以是服务器下发至应用程序中,也可以是应用程序本身保存的。
以时间重映射信息为例,时间重映射信息是为视频中每一个初始帧设定对应的时间序号的信息。相对于时间重映射信息,映射参数为时间序号。
一般每一个初始帧对应的时间序号是与其在初始视频中的顺序一致,例如按照初始视频中的顺序,即帧数序号,第一张初始帧对应的时间序号为1,第二张初始帧对应的时间序号为2,第三张初始帧对应的时间序号为3……。而时间重映射会打破初始帧对应的时间序号,例如第一张图像对应的时间序号为3,第二张初始帧对应的时间序号为4,第三张初始帧对应的时间序号为1……。故此例中,初始帧对应的时间序号分别为3、4、1……。
在重映射中,不同的时间序号可对应同一张初始帧,也可能某些初始帧对应的时间序号为空。例如,第一张图帧像对应时间序号为1,第二张初始帧对应时间序号为空,第三张初始帧对应的时间序号为2,最终呈现的视觉效果是视频的播放速度会加快;再例如,第一张初始帧对应的时间序号为1、2、3,最终呈现的视觉效果为视频的播放速度会减慢。故在此例中,第一张图像对应的时间序号为(1,2,3)。
由于后续是采用时间序号的顺序,对初始帧进行重映射,因此为了快速地实现融合,本实施例中,将映射参数表示为参数数组的形式。例如参数数组(remap:1,time:1)表示时间序号(remap)为1,初始帧在初始视频中的顺序(time)为1,即第一张初始帧对应的时间序号为1。进一步,固定参数数组的结构,将参数数组中的第一位作为时间序号,将参数数组中的第二位作为初始帧的帧数序号,上例中的参数数据即可缩写为(1,1)。这种方式能够减少服务器下发的数据量,提高处理效率。因此服务器发送的重映射信息的伪代码可为:
除了时间重映射外,重映射信息和重映射数据中还可包括图像重映射。图像重映射是指将某一个图像中的各个像素按照一定的规则映射到另一张图像对应的位置上,以得到一张新的图像,例如反向、扭曲、放大。若重映射信息包含图像重映射,则该重映射信息可采用重映射函数。相对地,重映射函数可写在参数数组中,例如写在第三位,紧挨着time的后面。
在一种实现方式中,重映射信息为应用程序默认的,只能采用一种固定的重映射方式,确定每一个初始帧对应的时间序号。这种方式灵活性较差,且最后合成的目标视频显示效果单一,因此在本实施例的另一种实施方式中,采用用户可自行选定初始视频对应的重映射方案。此外,初始视频在后续可采用不同的重映射方案进行融合,因此,确定每一个初始帧对应的映射参数可包括以下过程:
B10、当检测到针对所述初始视频的时间选择指令时,根据所述时间选择指令,确定所述初始视频中的待处理视频。
具体地,首先用户针对初始视频发送时间选择指令,例如初始视频的长度为1分钟,用户发送的时间选择指令为10秒到20秒,则将初始视频中的10秒到20秒这一个时间段的视频作为待处理视频。此外,用户也可选择初始视频的全部内容作为待处理视频。
B20、显示预设的若干个重映射信息对应的重映射名称。
具体地,应用程序中预先存储了多个不同的重映射信息以及重映射的名称,在用户选择了初始视频中的待处理视频后,显示重映射名称,以便用户根据需求进行选择。以时间重映射为例,每一个从映射数据对应的显示名称为“加快”、“减慢”、“停顿”、“重复”等,根据显示的名称,用户可选择不同的重映射方案。
B30、当检测到针对所述重映射名称的确认指令时,根据所述确认指令,确定与所述待处理视频对应的重映射数据。
具体地,当检测到针对重映射名称的确认指令时,说明用户希望在这一段待处理视频上应用与该重映射名称对应的重映射信息,将此处对应的重映射信息作为与该处理视频对应的重映射数据。
B40、根据所述重映射数据,确定所述待处理视频中的每一个初始帧对应的映射参数。
具体地,最后根据重映射数据,确定待处理视频中的每一个初始帧对应的映射参数,此过程与前文的确定初始视频中的每一个初始帧的方式类似,故在此不再赘述。
S40、根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频。
具体地,预先设置一个背景视频,背景视频为预先设定的视频,用于后续初始帧融合至该背景视频上。如图3所示,背景视频可以为具有场景内容的视频(猫),也可以由不包含内容的空白画布组成的空白视频。
以时间重映射为例,得到了每一个初始帧的映射参数后,由于重映射相当于对初始帧进行重新排列,因此根据时间序号,确定背景视频中的每一个背景帧对应的初始帧,将与背景帧对应的初始帧称为融合图像。针对每一个背景帧,根据所述时间序号,确定初始帧中与该背景帧对应的融合图像。
例如第一张背景帧,按照背景视频的帧数序号,可确定第一张背景帧对应的时间序号为1,然后根据时间序号,确定与该时间序号对应的初始帧作为第一张背景帧对应的融合图像。
最后利用融合图像,对该背景帧进行纹理更新,以将融合图像融合至背景帧中,得到目标帧。根据时间序号的顺序,将所有的融合图像融合至背景帧中,即可得到多个目标帧。
视频能播放的原因,除了有多个图像外,还包括每一个图像对应的时间戳,因此目标视频包括若干个目标帧和每一个目标视频对应的时间戳。最后将背景帧对应的时间戳作为目标帧的时间戳,即可得到可动画播放的目标视频。
以图像重映射为例,首先根据时间序号,确定所述初始帧中与每一个背景帧对应的融合图像。然后针对每一个背景帧,根据与该背景帧对应的重映射函数,计算与该背景帧对应的融合图像中的每一个像素点对应的融合位置。由于背景帧对应的时间序号,同时对应着帧数序号,因此,根据时间序号,可确定每一个背景帧对应的重映射函数,然后以融合图像中的每一个像素点为对象,基于重映射函数,计算融合位置。例如重映射函数为x2=x1+2,即同一个像素点,在融合图像中的坐标若为(x1),则在背景帧中的融合位置需要向坐标轴的正方向偏移2个像素单位。基于融合位置,可对背景帧进行纹理更新,从而得到目标帧。最后与上述时间重映射的方式相同,将该背景帧对应的时间戳作为目标帧对应的时间戳,得到目标视频。
图4中采用了两种重映射形式,一种是时间重映射,帧数序号为1的初始帧在目标视频中对应的时间序号为5,帧数序号为2的初始帧对应的时间序号为3……以此实现目标视频中的女孩表情和原始视频中不同。另一种是图像重映射,随着播放时间的推移,女孩和猫之间的距离越来越远,改变视频的含义,增加趣味性。
图像重映射和时间重映射可同时使用,在根据时间序号,确定融合图像时,初始帧可基于时间重映射的映射参数,确定背景帧对应的融合图像。
通过此方式,应用程序可对用户上传的原始视频进行快速地重映射,得到重构后的目标视频。以重映射为时间重映射为例,目标视频相较于原有的原始视频,可实现加速、减速、重复等多种特殊效果。用户在此期间操作较少,且对手机终端不需要太大的算力,因此方便快捷。
基于上述视频的重映射方法,如图5所示,本发明还提供一种视频的重映射装置100,该装置包括:
获取模块110,用于获取待处理的原始视频;
预处理模块120,用于对所述原始视频进行预处理,得到初始视频;
确定模块130,用于根据预设的重映射信息,确定所述初始视频中的每一个初始帧对应的映射参数;
融合模块140,用于根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频。
其中,所述预处理包括抠图处理;所述预处理模块120具体用于:
当检测到抠图指令时,对所述原始视频中的每一个原始帧进行物体识别,得到若干张候选物品图像;
当检测到针对所述候选物品图像的确认指令时,将所述确认指令对应的候选物品图像作为抠图对象;
根据所述抠图对象,对所述原始视频中的原始帧进行抠图处理,得到初始视频。
其中,所述确定模块130具体用于:
当检测到针对所述初始视频的时间选择指令时,根据所述时间选择指令,确定所述初始视频中的待处理视频;
显示预设的若干个重映射信息对应的重映射名称;
当检测到针对所述重映射名称的确认指令时,根据所述确认指令,确定与所述待处理视频对应的重映射数据;
根据所述重映射数据,确定所述待处理视频中的每一个初始帧对应的映射参数。
其中,所述背景视频包括空白画布组成的空白视频。
其中,所述映射参数包括参数数组。
其中,所述目标视频包括若干个目标帧和每一个所述目标帧对应的时间戳;所述融合模块140具体用于:
针对每一个背景帧,根据所述映射参数中的时间序号,确定图像帧中与该背景帧对应的融合图像;
利用所述融合图像,对该背景帧进行纹理更新,得到目标帧;
将该背景帧对应的时间戳作为所述目标帧对应的时间戳,得到目标视频。
其中,所述融合模块140还可用于:
针对每一个背景帧,根据所述映射参数中的时间序号,确定图像帧中与该背景帧对应的融合图像;
针对每一个所述融合图像,根据所述重映射函数,计算所述融合图像中的每一个像素点对应的融合位置;
针对每一个所述融合图像,根据所述重映射函数,计算所述融合图像中的每一个像素点对应的融合位置;
根据所述时间序号的顺序和所述融合位置,利用该融合图像对与该融合图像对应的背景帧进行纹理更新,得到目标帧。
基于上述视频的重映射方法,本发明还提供了一种终端设备,如图6所示,其包括至少一个处理器(processor)20;显示屏21;以及存储器(memory)22,还可以包括通信接口(Communications Interface)23和总线24。其中,处理器20、显示屏21、存储器22和通信接口23可以通过总线24完成相互间的通信。显示屏21设置为显示初始设置模式中预设的用户引导界面。通信接口23可以传输信息。处理器20可以调用存储器22中的逻辑命令,以执行上述实施例中的方法。
此外,上述的存储器22中的逻辑命令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取计算机可读存储介质中。
存储器22作为一种计算机可读存储介质,可设置为存储软件程序、计算机可执行程序,如本公开实施例中的方法对应的程序命令或模块。处理器20通过运行存储在存储器22中的软件程序、命令或模块,从而执行功能应用以及数据处理,即实现上述实施例中的方法。
存储器22可包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端设备的使用所创建的数据等。此外,存储器22可以包括高速随机存取存储器,还可以包括非易失性存储器。例如,U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等多种可以存储程序代码的介质,也可以是暂态计算机可读存储介质。
此外,上述计算机可读存储介质以及终端设备中的多条命令处理器加载并执行的具体过程在上述方法中已经详细说明,在这里就不再一一陈述。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种视频的重映射方法,其特征在于,所述方法包括:
获取待处理的原始视频;
对所述原始视频进行预处理,得到初始视频;
根据预设的重映射信息,确定所述初始视频中的每一个初始帧对应的映射参数;
根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频。
2.根据权利要求1所述视频的重映射方法,其特征在于,所述预处理包括抠图处理;所述对所述原始视频进行预处理,得到初始视频包括:
当检测到抠图指令时,对所述原始视频中的每一个原始帧进行物体识别,得到若干张候选物品图像;
当检测到针对所述候选物品图像的确认指令时,将所述确认指令对应的候选物品图像作为抠图对象;
根据所述抠图对象,对所述原始视频中的原始帧进行抠图处理,得到初始视频。
3.根据权利要求1所述视频的重映射方法,其特征在于,所述根据预设的重映射信息,确定所述初始视频中的每一个初始帧对应的映射参数包括:
当检测到针对所述初始视频的时间选择指令时,根据所述时间选择指令,确定所述初始视频中的待处理视频;
显示预设的若干个重映射信息对应的重映射名称;
当检测到针对所述重映射名称的确认指令时,根据所述确认指令,确定与所述待处理视频对应的重映射数据;
根据所述重映射数据,确定所述待处理视频中的每一个初始帧对应的映射参数。
4.根据权利要求1所述视频的重映射方法,其特征在于,所述背景视频包括空白画布组成的空白视频。
5.根据权利要求1所述视频的重映射方法,其特征在于,所述映射参数包括参数数组。
6.根据权利要求1~5中任意一项所述视频的重映射方法,其特征在于,所述目标视频包括若干个目标帧和每一个所述目标帧对应的时间戳;所述根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频包括:
针对每一个背景帧,根据所述映射参数中的时间序号,确定图像帧中与该背景帧对应的融合图像;
利用所述融合图像,对该背景帧进行纹理更新,得到目标帧;
将该背景帧对应的时间戳作为所述目标帧对应的时间戳,得到目标视频。
7.根据权利要求1~5中任意一项所述视频的重映射方法,其特征在于,所述目标视频包括若干个目标帧和每一个所述目标帧对应的时间戳,所述映射参数还包括重映射函数;所述根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频包括:
针对每一个背景帧,根据所述映射参数中的时间序号,确定图像帧中与该背景帧对应的融合图像;
针对每一个所述融合图像,根据所述重映射函数,计算所述融合图像中的每一个像素点对应的融合位置;
针对每一个所述融合图像,根据所述重映射函数,计算所述融合图像中的每一个像素点对应的融合位置;
根据所述时间序号的顺序和所述融合位置,利用该融合图像对与该融合图像对应的背景帧进行纹理更新,得到目标帧。
8.一种视频的重映射方法装置,其特征在于,所述视频的重映射方法装置包括:
获取模块,用于获取待处理的原始视频;
预处理模块,用于对所述原始视频进行预处理,得到初始视频;
确定模块,用于根据预设的重映射信息,确定所述初始视频中的每一个初始帧对应的映射参数;
融合模块,用于根据所述映射参数,将所述初始帧与预设的背景视频进行融合,得到目标视频。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现如权利要求1~7任意一项所述的视频的重映射方法中的步骤。
10.一种终端设备,其特征在于,包括:处理器、存储器及通信总线;所述存储器上存储有可被所述处理器执行的计算机可读程序;
所述通信总线实现处理器和存储器之间的连接通信;
所述处理器执行所述计算机可读程序时实现如权利要求1~7任意一项所述的视频的重映射方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210600243.3A CN115100259A (zh) | 2022-05-27 | 2022-05-27 | 一种视频的重映射方法和相关设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210600243.3A CN115100259A (zh) | 2022-05-27 | 2022-05-27 | 一种视频的重映射方法和相关设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115100259A true CN115100259A (zh) | 2022-09-23 |
Family
ID=83289721
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210600243.3A Pending CN115100259A (zh) | 2022-05-27 | 2022-05-27 | 一种视频的重映射方法和相关设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115100259A (zh) |
-
2022
- 2022-05-27 CN CN202210600243.3A patent/CN115100259A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109727303B (zh) | 视频展示方法、系统、计算机设备、存储介质和终端 | |
CN110956691B (zh) | 一种三维人脸重建方法、装置、设备及存储介质 | |
CN109035288B (zh) | 一种图像处理方法及装置、设备和存储介质 | |
CN110572706B (zh) | 视频截屏方法、终端及计算机可读存储介质 | |
EP4276738A1 (en) | Image display method and apparatus, and device and medium | |
CN112102157A (zh) | 视频换脸方法、电子设备和计算机可读存储介质 | |
CN113965773A (zh) | 直播展示方法和装置、存储介质及电子设备 | |
CN104333699A (zh) | 自定义拍照区域合成方法及装置 | |
CN114758027A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN111028318A (zh) | 一种虚拟人脸合成方法、系统、装置和存储介质 | |
CN112906553B (zh) | 图像处理方法、装置、设备及介质 | |
US10924637B2 (en) | Playback method, playback device and computer-readable storage medium | |
CN114170472A (zh) | 图像处理方法、可读存储介质及计算机终端 | |
CN110719415B (zh) | 一种视频图像处理方法、装置、电子设备及计算机可读介质 | |
CN112604279A (zh) | 一种特效显示方法及装置 | |
CN112330728A (zh) | 图像处理方法、装置、电子设备以及可读存储介质 | |
CN115100259A (zh) | 一种视频的重映射方法和相关设备 | |
CN115967854A (zh) | 拍照方法、装置及电子设备 | |
CN114025237A (zh) | 视频生成方法、装置和电子设备 | |
CN116745741A (zh) | 修剪用于多视频片段捕获的视频 | |
CN114125297A (zh) | 视频拍摄方法、装置、电子设备及存储介质 | |
CN113408452A (zh) | 表情重定向训练方法、装置、电子设备和可读存储介质 | |
CN112887796A (zh) | 视频生成方法、装置、设备及介质 | |
CN111935493B (zh) | 主播相册处理方法及装置、存储介质、电子设备 | |
CN115426505B (zh) | 基于面部捕捉的预设表情特效触发方法及相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 518000 Building 1901, 1902, 1903, Qianhai Kexing Science Park, Labor Community, Xixiang Street, Bao'an District, Shenzhen, Guangdong Province Applicant after: Shenzhen Flash Scissor Intelligent Technology Co.,Ltd. Address before: 518000 Unit 9ABCDE, Building 2, Haihong Industrial Plant Phase II, Haihong Industrial Plant, West Side of Xixiang Avenue, Labor Community, Xixiang Street, Bao'an District, Shenzhen, Guangdong Applicant before: Shenzhen big brother Technology Co.,Ltd. |
|
CB02 | Change of applicant information |