CN113301409B - 视频合成方法、装置、电子设备和可读存储介质 - Google Patents

视频合成方法、装置、电子设备和可读存储介质 Download PDF

Info

Publication number
CN113301409B
CN113301409B CN202110558579.3A CN202110558579A CN113301409B CN 113301409 B CN113301409 B CN 113301409B CN 202110558579 A CN202110558579 A CN 202110558579A CN 113301409 B CN113301409 B CN 113301409B
Authority
CN
China
Prior art keywords
video
frame
similarity
determining
segment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110558579.3A
Other languages
English (en)
Other versions
CN113301409A (zh
Inventor
赵明瑶
舒科
闫嵩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dami Technology Co Ltd
Original Assignee
Beijing Dami Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dami Technology Co Ltd filed Critical Beijing Dami Technology Co Ltd
Priority to CN202110558579.3A priority Critical patent/CN113301409B/zh
Publication of CN113301409A publication Critical patent/CN113301409A/zh
Application granted granted Critical
Publication of CN113301409B publication Critical patent/CN113301409B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42653—Internal components of the client ; Characteristics thereof for processing graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Databases & Information Systems (AREA)
  • Image Analysis (AREA)

Abstract

本申请实施例提供了一种视频合成方法、装置、电子设备和可读存储介质，涉及计算机技术领域，通过本申请实施例，可以根据视频合成指令以及数据库中各备选视频片段之间的帧对信息，将特定的目标视频片段以特定的顺序进行合成。其中，帧对信息用于表征对应的两个备选视频片段之间的关联关系，也就是说，本申请实施例在进行视频合成的过程中，是将具有关联关系的备选视频片段作为目标视频片段进行合成，得到合成视频。这样，可以确保在合成视频中，相邻两个目标视频片段之间是具有相关性的，即增加了合成视频整体的流畅程度，相较于直接合成的视频，本申请实施例基于视频合成指令、各备选视频片段以及帧对信息得到的合成视频具有连贯、流畅的优点。

Description

视频合成方法、装置、电子设备和可读存储介质
技术领域
本申请涉及计算机技术领域，特别是涉及一种视频合成方法、装置、电子设备和可读存储介质。
背景技术
目前，随着互联网技术的发展，线上服务平台的数量越来越多，人们可以通过终端设备来与线上服务平台进行交互，以获取相应的线上服务。
在线上服务的过程中，为了使得用户能够获得更好的体验，线上服务平台可以通过相应的应用程序在用户侧终端设备的显示屏显示一段合成视频。例如，该合成视频可以是带有虚拟人物形象的合成视频(该虚拟人物形象可以是在线客服界面所展示的虚拟客服人员，也可以是在线课堂界面所展示的虚拟老师等等)，再例如，该合成视频也可以是带有虚拟卡通形象的合成视频。
然而，在相关技术中，合成视频往往存在不连贯、不流畅的问题，因此，如何使得合成视频更加连贯、流畅是目前亟需解决的问题。
发明内容
有鉴于此，本申请实施例提供一种视频合成方法、装置、电子设备和可读存储介质，以使得合成视频具有较好的连贯性和流畅性。
第一方面，提供了一种视频合成方法，所述方法应用于电子设备，所述方法包括：
响应于接收到视频合成指令，根据所述视频合成指令从数据库中确定多个目标视频片段，所述数据库包括多个备选视频片段和备选视频片段之间的帧对信息，所述帧对信息用于表征对应的两个备选视频片段之间的关联关系，所述视频合成指令用于指定各目标视频片段的连接顺序。
基于所述视频合成指令指定的连接顺序，对各目标视频片段进行合成操作，确定合成视频。
第二方面，提供了一种视频合成装置，所述装置应用于电子设备，所述装置包括：
第一确定模块，用于响应于接收到视频合成指令，根据所述视频合成指令从数据库中确定多个目标视频片段，所述数据库包括多个备选视频片段和备选视频片段之间的帧对信息，所述帧对信息用于表征对应的两个备选视频片段之间的关联关系，所述视频合成指令用于指定各目标视频片段的连接顺序。
合成模块，用于基于所述视频合成指令指定的连接顺序，对各目标视频片段进行合成操作，确定合成视频。
第三方面，本申请实施例提供了一种电子设备，包括存储器和处理器，所述存储器用于存储一条或多条计算机程序指令，其中，所述一条或多条计算机程序指令被所述处理器执行以实现如第一方面所述的方法。
第四方面，本申请实施例提供了一种计算机可读存储介质，其上存储计算机程序指令，所述计算机程序指令在被处理器执行时实现如第一方面所述的方法。
通过本申请实施例，可以根据视频合成指令以及数据库中各备选视频片段之间的帧对信息，将特定的目标视频片段以特定的顺序进行合成。其中，帧对信息用于表征对应的两个备选视频片段之间的关联关系，也就是说，本申请实施例在进行视频合成的过程中，是将具有关联关系的备选视频片段作为目标视频片段进行合成，得到合成视频。这样，可以确保在合成视频中，相邻两个目标视频片段之间是具有相关性的，即增加了合成视频整体的流畅程度，相较于直接合成的视频，本申请实施例基于视频合成指令、各备选视频片段以及帧对信息得到的合成视频具有连贯、流畅的优点。
附图说明
通过以下参照附图对本申请实施例的描述，本申请实施例的上述以及其它目的、特征和优点将更为清楚，在附图中：
图1为本申请实施例的视频合成系统的示意图；
图2为本申请实施例的视频合成方法的流程图；
图3为本申请实施例提供的确定目标视频片段过程的流程图；
图4为本申请实施例的另一种视频合成方法的流程图；
图5为本申请实施例的另一种视频合成方法的流程图；
图6为本申请实施例提供的第一视频帧的人物区域图像和第二视频帧的人物区域图像的示意图；
图7为本申请实施例提供的基于色彩相似度判断是否生成帧对信息的流程图；
图8为本申请实施例提供的基于比例相似度判断是否生成帧对信息的流程图；
图9为本申请实施例提供的生成帧对信息过程的流程图；
图10为本申请实施例提供的图形数据库的示意图；
图11为本申请实施例提供的确定待处理视频片段的流程图；
图12为本申请实施例提供的确定合成视频过程的流程图；
图13为本申请实施例提供的一种视频合成装置的结构示意图；
图14为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
以下基于实施例对本申请进行描述，但是本申请并不仅仅限于这些实施例。在下文对本申请的细节描述中，详尽描述了一些特定的细节部分。对本领域技术人员来说没有这些细节部分的描述也可以完全理解本申请。为了避免混淆本申请的实质，公知的方法、过程、流程、元件和电路并没有详细叙述。
此外，本领域普通技术人员应当理解，在此提供的附图都是为了说明的目的，并且附图不一定是按比例绘制的。
除非上下文明确要求，否则在说明书的“包括”、“包含”等类似词语应当解释为包含的含义而不是排他或穷举的含义；也就是说，是“包括但不限于”的含义。
在本申请的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。此外，在本申请的描述中，除非另有说明，“多个”的含义是两个或两个以上。
为了解决上述问题，本申请实施例提供一种视频合成系统，如图1所示，图1为本申请实施例的一种视频合成系统的示意图，该示意图包括：数据库11、用于视频合成的电子设备12和视频合成指令13。
其中，数据库11中包括多个备选视频片段(备选视频片段111、备选视频片段112、备选视频片段113)和帧对信息114。需要说明的，数据库11中备选视频片段的数量不限定于图1所示的3个，另外，帧对信息114用于表征两个备选视频片段之间的关联关系，该关联关系可以用于表征对应两个备选视频片段可以进行拼接合成。
在实际应用中，数据库11中两个备选视频片段之间可以存在帧对信息，也可以不存在帧对信息。例如，在数据库11中，备选视频片段111和备选视频片段112之间存在帧对信息，备选视频片段112和备选视频片段113之间存在帧对信息，备选视频片段111和备选视频片段113之间不存在帧对信息。
需要说明的，数据库11可以是电子设备12本地的数据库，也可以是电子设备12外部的数据库，若数据库11是电子设备12外部的数据库，则数据库11和电子设备12之间可以通过网络进行数据交换。
电子设备12可以是终端，也可以是服务器。其中，终端可以是智能手机、平板电脑或者个人计算机(Personal Computer，PC)等，服务器可以是单个服务器，也可以是以分布式方式配置的服务器集群，还可以是云服务器。
视频合成指令13可以是电子设备12从外部接收的指令，也可以是工作人员在电子设备12本地输入的指令。其中，视频合成指令13可以用于指定备选视频片段以及指定的备选视频片段的连接顺序。
在实际应用中，视频合成指令13可以指定备选视频片段的类别，也可以针对备选视频片段进行指定。
在视频合成系统进行视频合成过程中，当电子设备12接收到视频合成指令13后，电子设备12可以在数据库11中获取视频合成指令13所对应的备选视频片段(被获取的备选视频片段即为目标视频片段)，然后根据视频合成指令13所指定的连接顺序对各目标视频片段进行视频合成，得到合成视频。
通过本申请实施例，可以根据视频合成指令以及数据库中各备选视频片段之间的帧对信息，将特定的目标视频片段以特定的顺序进行合成。其中，帧对信息用于表征对应的两个备选视频片段之间的关联关系，也就是说，本申请实施例在进行视频合成的过程中，是将具有关联关系的备选视频片段作为目标视频片段进行合成，得到合成视频。这样，可以确保在合成视频中，相邻两个目标视频片段之间是具有相关性的，即增加了合成视频整体的流畅程度，相较于直接合成的视频，本申请实施例基于视频合成指令、各备选视频片段以及帧对信息得到的合成视频具有连贯、流畅的优点。
下面将结合具体实施方式，对本申请实施例提供的一种视频合成方法进行详细的说明，如图2所示，具体步骤如下：
在步骤21，响应于接收到视频合成指令，根据视频合成指令从数据库中确定多个目标视频片段。
其中，数据库包括多个备选视频片段和备选视频片段之间的帧对信息，帧对信息用于表征对应的两个备选视频片段之间的关联关系，视频合成指令用于指定各目标视频片段的连接顺序。
在一种优选的实施方式中，每个备选视频片段均可以对应一个类别，也就是说，在数据库中可以存在多个备选视频片段的分类，每个分类下可以包括多个备选视频片段。在此情况下，视频合成指令所指定的内容为备选视频片段的类别，当用于视频合成的电子设备接收到该视频合成指令后，可以根据视频合成指令所指定的分类确定目标视频。当然，视频合成指令也可以直接指定备选视频片段。
其中，备选视频片段对应的类别可以用于表征该类别下的备选视频片段的主要内容。例如，备选视频片段对应的类别可以包括：“OK手势”的备选视频片段、“挥手”的备选视频片段、“点头”的备选视频片段等等。
例如，如图3所示，图3为本申请实施例提供的一种确定目标视频片段过程的流程图。
在确定目标视频片段的过程中，用于视频合成的电子设备32可以接收视频合成指令31，其中，视频合成指令31中包括指定的视频片段类别(类别A、类别C和类别D)和指定的连接顺序(C-D-A)。
当电子设备32接收到该视频合成指令31后，可以根据视频合成指令31所指定的视频片段类别和视频片段的连接顺序从数据库33中检索并获取对应的备选视频片段作为目标视频片段34。
其中，数据库33中包括多个类别的备选视频片段以及各备选视频片段对应的帧对信息，目标视频片段34包括视频片段a1、a3、c1、c2和d3。另外，数据库33中类别的数量不仅限于图3所示的4个类别。
由图3可知，数据库33中的帧对信息可以用于表征2个备选视频片段之间的关联关系，其中，该关联关系可以表征该2个备选视频片段可以进行拼接，同时，关联关系还可以包括该2个备选视频片段的连接顺序。例如，帧对信息“a1-b1”可以用于表征备选视频片段a1和备选视频片段b1可以进行拼接，同时备选视频片段a1和备选视频片段b1的连接顺序为a1在前、b1在后。
基于上述图3所示的内容，电子设备32可以基于视频合成指令31所指定的视频片段类别、视频合成指令31所指定的视频片段连接顺序和数据库33中的帧对信息，从数据库33中确定各目标视频片段34。
需要说明的，视频合成指令可以指定备选视频片段的类别，也可以针对备选视频片段进行指定。
在本申请实施例中，电子设备可以通过视频合成指令以及数据库中的帧对信息来确定各目标视频片段。在一种优选的实施方式中，数据库中的帧对信息可以基于视频片段中的视频帧预先确定，具体的，如图4所示，该过程可以包括如下步骤：
在步骤41，确定第一视频片段和第二视频片段。
其中，第一视频片段包括至少一个第一视频帧，第二视频片段包括至少一个第二视频帧。
在本申请实施例中，帧对信息是用于表征2个视频片段可以进行拼接的信息，因此，可以通过2个视频片段中适当位置的视频帧来判断该2个视频片段是否可以进行拼接。
例如，在步骤41中，第一视频帧可以是第一视频片段的最后n帧，第二视频帧可以是第二视频片段的起始m帧。当然，第一视频帧也可以是第一视频片段的起始n帧，第二视频帧也可以是第二视频片段的最后m帧。其中，m和n为自然数，其数值可以根据实际情况进行设置。
在步骤42，计算各第一视频帧分别与各第二视频帧之间的合成评价参数。
其中，合成评价参数包括像素相似度、色彩相似度、比例相似度和光流值中的至少一种。
在本申请实施例中，合成评价参数是用于评价各第一视频帧与各第二视频帧之间相似度的参数，其中，电子设备可以基于像素点的像素值的相似度来评价各第一视频帧与各第二视频帧的相似程度。电子设备还可以基于各第一视频帧与各第二视频帧的色差来评价各第一视频帧与各第二视频帧的相似程度。电子设备还可以基于各第一视频帧与各第二视频帧的尺寸来评价各第一视频帧与各第二视频帧的相似程度。电子设备还可以基于各第一视频帧与各第二视频帧的光流值来评价各第一视频帧与各第二视频帧的相似程度。
需要说明的，在本申请实施例中，电子设备可以基于上述合成评价参数中的一项来评价各第一视频帧与各第二视频帧的相似程度，也可以结合上述合成评价参数中的多项来评价各第一视频帧与各第二视频帧的相似程度。
针对上述合成评价参数，在一种优选的实施方式中，确定像素相似度的过程可以执行为：确定第一视频帧的人物区域图像和第二视频帧的人物区域图像，以及基于第一视频帧的人物区域图像和第二视频帧的人物区域图像确定第一视频帧和第二视频帧之间的像素相似度。
进一步的，如图5所示，基于人物区域图像确定像素相似度的过程可以包括如下步骤：
在步骤51，确定第一视频帧的人物区域图像和第二视频帧的人物区域图像之间的重叠度。
在一种优选的实施方式中，步骤51中的重叠度可以是第一视频帧的人物区域图像和第二视频帧的人物区域图像之间的交并比(Intersection over Union，IoU)。
在本申请实施例中，IoU可以用于确定第一视频帧的人物区域图像和第二视频帧的人物区域图像之间的重叠程度，具体的，如图6所示，图6为本申请实施例提供的一种第一视频帧的人物区域图像和第二视频帧的人物区域图像的示意图，该示意图包括：视频帧61、视频帧62以及阴影部分63。其中，视频帧61用于表征第一视频帧人物图像区域，视频帧62用于表征第二视频帧人物图像区域，阴影部分63用于表征视频帧61和视频帧62之间重叠的部分。
根据图6所示的内容可知，视频帧61和视频帧62之间的IoU可以通过阴影部分63所占的面积确定，具体的，视频帧61和视频帧62之间的IoU可以通过如下公式确定：
Figure BDA0003078234520000041
其中，a用于表征视频帧61的面积，b用于表征视频帧62的面积。因此，视频帧61和视频帧62之间的IoU即为：阴影部分63占视频帧61和视频帧62所占所有面积的总和。
在本申请实施例中，通过确定第一视频帧的人物区域图像和第二视频帧的人物区域图像之间的重叠度，可以从空间的维度确定第一视频帧的人物区域图像和第二视频帧的人物区域图像的相似程度，提高了确定第一视频帧和第二视频帧之间的像素相似度的准确性。
在步骤52，响应于重叠度大于预定重叠度阈值，确定第一视频帧和第二视频帧之间的像素比。
在本申请实施例中，若上述重叠度大于预定重叠度阈值，则表征第一视频帧和第二视频帧在空间维度具有较高的相似程度，然后，可以进一步的确定第一视频帧和第二视频帧之间的像素比，以判断第一视频帧和第二视频帧在像素值维度的相似度。
具体的，步骤52具体可以执行为：确定第一视频帧的人物区域图像和第二视频帧的人物区域图像中相应位置像素值差值为0的像素数量，以及基于像素值差值为0的像素数量和像素总数量，确定第一视频帧和第二视频帧之间的像素比。
也就是说，在本申请实施例中，可以将第一视频帧的人物区域图像和第二视频帧的人物区域图像进行对齐，然后确定对应位置像素点的像素值差值，然后通过像素值差值为0的像素数量和像素总数量，确定第一视频帧和第二视频帧之间的像素比。具体的，可以通过如下公式确定第一视频帧和第二视频帧之间的像素比：
像素比＝像素值差值为0的像素数量/像素总数量
通过本申请实施例，通过确定第一视频帧的人物区域图像和第二视频帧的人物区域图像之间的像素比，可以从像素值的维度来确定第一视频帧的人物区域图像和第二视频帧的人物区域图像的相似程度，提高了确定第一视频帧和第二视频帧之间的像素相似度的准确性。
在步骤53，响应于像素比大于预定像素比阈值，确定第一视频帧和第二视频帧之间的像素相似度。
在本申请实施例中，若上述像素比大于预定像素比阈值，则表征第一视频帧和第二视频帧在像素值维度具有较高的相似程度，然后，可以进一步的确定第一视频帧和第二视频帧之间的像素相似度。
具体的，步骤53具体可以执行为：确定第一视频帧的人物区域图像的第一平均哈希编码，确定第二视频帧的人物区域图像的第二平均哈希编码，以及基于第一平均哈希编码和第二平均哈希编码之间的汉明距离，确定第一视频帧和第二视频帧之间的像素相似度。
其中，平均哈希编码可以通过预设的哈希算法对图像数据进行计算，然后输出一个定长的数据key，该数据key只用于表征对应的图像数据，也就是说，通过哈希算法确定的数据key为对应图像数据的唯一标识。
需要说明的，确定第一平均哈希编码的过程和确定第二平均哈希编码的过程没有固定的执行顺序，也就是说，在本申请实施例中可以先确定第一平均哈希编码再确定第二平均哈希编码，也可以先确定第二平均哈希编码再确定第一平均哈希编码，还可以同时确定第一平均哈希编码和第二平均哈希编码。
然后，本申请实施例可以基于第一平均哈希编码和第二平均哈希编码之间的汉明距离，确定第一视频帧和第二视频帧之间的像素相似度。其中，汉明距离可以用于确定两段二进制数之间的相似程度，在本申请实施例中，在计算第一平均哈希编码和第二平均哈希编码之间的汉明距离后，可以将该汉明距离作为第一视频帧和第二视频帧之间的像素相似度。
通过本申请实施例，基于第一视频帧的人物区域图像和第二视频帧的人物区域图像之间的重叠度，可以确定第一视频帧和第二视频帧在空间维度的相似程度。基于第一视频帧的人物区域图像和第二视频帧的人物区域图像之间的像素比，可以确定第一视频帧和第二视频帧在像素值维度的相似程度。因此，通过上述重叠度和上述像素比可以对第一视频帧和第二视频帧进行初步筛选，进而，本申请实施例可以仅针对相似度高的第一视频帧和第二视频帧计算像素相似度，提高了确定像素相似度的效率。
另一方面，针对上述合成评价参数，在一种优选的实施方式中，确定色彩相似度的过程可以执行为：确定第一视频帧的背景区域图像和第二视频帧的背景区域图像之间的色差作为色彩相似度。
在本申请实施例中，背景区域图像通常为一个统一的背景样式，例如，以在线课堂为例，在线课堂界面所展示的内容可以包括虚拟老师人物区域图像和在线课堂背景区域图像。
因此，通过对比第一视频帧的背景区域图像和第二视频帧的背景区域图像之间的色差，可以反映第一视频帧和第二视频帧之间的整体色差。
具体的，上述色差可以通过LAB颜色空间的色差进行表示，其中，L用于表征明度，A用于表征红绿色差，B用于表征蓝黄色差。
在一种优选的实施方式中，可以在RGB颜色空间中通过预定公式来计算出第一视频帧的背景区域图像中预定位置颜色，以及第二视频帧的背景区域图像中相应位置颜色的加权的欧氏距离，进而将该欧氏距离作为第一视频帧的背景区域图像和第二视频帧的背景区域图像之间的色差。其中，R用于表征红色，G用于表征绿色，B用于表征蓝色。
其中，该预定公式如下：
Figure BDA0003078234520000061
其中，C用于表征颜色1和颜色2之间的色差，颜色1可以用于表征第一视频帧的背景区域图像中预定位置的颜色，颜色2可以用于表征第二视频帧的背景区域图像中相应位置的颜色。
Figure BDA0003078234520000062
用于表征颜色1红色通道与颜色2红色通道的平均值，具体的，可以由如下公式进行表示：
Figure BDA0003078234520000063
其中，C1,R用于表征颜色1的红色通道，C2,R用于表征颜色2的红色通道。
ΔR用于表征颜色1红色通道与颜色2红色通道之间的差值，具体的，可以由如下公式进行表示：
ΔR＝C1,R-C2,R
ΔG用于表征颜色1绿色通道与颜色2绿色通道之间的差值，具体的，可以由如下公式进行表示：
ΔG＝C1,G-C2,G
其中，C1,G用于表征颜色1的绿色通道，C2,G用于表征颜色2的绿色通道。
ΔB用于表征颜色1蓝色通道与颜色2蓝色通道之间的差值，具体的，可以由如下公式进行表示：
ΔB＝C1,B-C2,B
其中，C1,B用于表征颜色1的蓝色通道，C2,B用于表征颜色2的蓝色通道。
在本申请实施例中，由于背景区域图像往往是颜色较为统一的区域，因此，通过第一视频帧的背景区域图像和第二视频帧的背景区域图像之间的色差，可以较为准确的反映第一视频帧和第二视频帧之间的相似程度，也即可以较为准确的反映第一视频片段和第二视频片段之间的相似程度。
另一方面，针对上述合成评价参数，在一种优选的实施方式中，确定比例相似度的过程可以执行为：确定第一视频帧中人物头部区域图像的像素数量，确定第二视频帧中人物头部区域图像的像素数量，以及基于第一视频帧中人物头部区域图像的像素数量和第二视频帧中人物头部区域图像的像素数量，确定比例相似度。
需要说明的，确定头部区域图像的像素数量的过程没有固定的执行顺序，也就是说，在本申请实施例中可以先确定第一视频帧中人物头部区域图像的像素数量再确定第二视频帧中人物头部区域图像的像素数量，也可以先确定第二视频帧中人物头部区域图像的像素数量再确定第一视频帧中人物头部区域图像的像素数量，还可以同时确定第一视频帧和第二视频帧中人物头部区域图像的像素数量。
在本申请实施例中，由于人体的比例是一个较为固定的数值，因此，通过人物头部区域图像所占的像素数量，可以判断人物与镜头之间的距离。如果第一视频帧中人物到镜头之间的距离和第二视频帧中人物到镜头之间的距离差距过大，则表征第一视频帧和第二视频帧不适合进行拼接，反之，则表征第一视频帧和第二视频帧适合进行拼接。
具体的，可以基于如下公式确定比例相似度：
Figure BDA0003078234520000064
其中，abs用于表征统计函数，也就是说，基于上述公式，可以通过统计第一视频帧和第二视频帧人物头部区域图像的像素数量来评价第一视频帧和第二视频帧的比例相似度。
在本申请实施例中，由于人体的比例是一个较为固定的数值，因此，通过第一视频帧和第二视频帧人物头部区域图像的像素数量，可以较为准确的反映第一视频帧和第二视频帧中人物与镜头之间的距离，进而，可以基于人物与镜头之间的距离，较为准确的反映第一视频片段和第二视频片段之间的相似程度。
另一方面，针对上述合成评价参数中的光流值，光流值用于表征一个场景中的物体，由于运动(物体本身运动或者镜头运动)而产生的动态变化，光流值越大，则表示两帧之间由于运动产生的变化越大，光流值越小，则表示两帧之间由于运动产生的变化越小。
在本申请实施例中，由于光流值可以反映两个视频帧之间的动态变化，因此，基于光流值的大小，可以判断第一视频帧和第二视频帧之间的动态变化，进而可以较为准确的反映第一视频片段和第二视频片段之间的相似程度。
在步骤43，响应于合成评价参数满足预定条件，生成第一视频片段和第二视频片段之间的帧对信息。
在本申请实施例中，当确定合成评价参数中的一项或多项后，可以基于该一项或多项合成评价参数以及预定条件进行判断，若该一项或多项合成评价参数满足预定条件，则可以生成第一视频片段和第二视频片段之间的帧对信息，以表征第一视频片段和第二视频片段可以进行拼接。
在一种情况下，本申请实施例可以基于合成评价参数中的像素相似度来判断是否可以生成第一视频片段和第二视频片段之间的帧对信息，具体的，该过程可以执行为：响应于像素相似度大于预定像素相似度阈值，生成第一视频片段和第二视频片段之间的帧对信息。
在本情况下，第一视频帧和第二视频帧之间的像素相似度可以表征二者各个像素点之间的相似度，因此，当像素相似度大于预定像素相似度阈值时，可以表征第一视频帧和第二视频帧具有较高的相似度，进而可以生成第一视频片段和第二视频片段之间的帧对信息，以表征第一视频片段和第二视频片段可以进行拼接。
在另一种情况下，本申请实施例可以基于合成评价参数中的色彩相似度来判断是否可以生成第一视频片段和第二视频片段之间的帧对信息，具体的，该过程可以执行为：响应于色彩相似度小于第一预定色彩相似度阈值，生成第一视频片段和第二视频片段之间的帧对信息。
在本情况下，第一视频帧和第二视频帧之间的色彩相似度可以表征二者颜色之间的相似度，当色彩相似度小于第一预定色彩相似度阈值时，表征第一视频帧和第二视频帧具有较高的相似度，进而可以生成第一视频片段和第二视频片段之间的帧对信息，以表征第一视频片段和第二视频片段可以进行拼接。
在另一种情况下，当色彩相似度大于第一预定色彩相似度阈值，本申请实施例可以对第一视频片段和第二视频片段进行色彩转换，具体的，该过程可以执行为：响应于色彩相似度大于等于第一预定色彩相似度阈值且小于第二预定色彩相似度阈值，针对第一视频片段和第二视频片段进行色彩转换，以及生成色彩转换后的第一视频片段和色彩转换后的第二视频片段之间的帧对信息。
其中，第二预定色彩相似度阈值大于第一预定色彩相似度阈值。
在本情况下，第一视频帧和第二视频帧之间的色彩相似度可以表征二者颜色之间的相似度，当色彩相似度大于等于第一预定色彩相似度阈值时，表征第一视频帧和第二视频帧之间具有一定的色彩差异，但是，本申请实施例可以通过第二预定色彩相似度阈值对该色彩差异进行限定。也就是说，当色彩相似度大于等于第一预定色彩相似度阈值且小于第二预定色彩相似度阈值时，第一视频帧和第二视频帧之间的色彩差异仍在可控范围之内。因此，本申请实施例可以对在此情况下的第一视频片段和第二视频片段进行色彩转换，然后生成色彩转换后的第一视频片段和色彩转换后的第二视频片段之间的帧对信息。
在本情况下，本申请实施例可以基于颜色直方图对第一视频片段和第二视频片段进行色彩转换，其中，颜色直方图用于表征图像的颜色分布特征，利用颜色直方图的特性，可以实现对第一视频片段和第二视频片段进行颜色调整，以使得二者的色彩互相统一。
结合上述关于色彩相似度的两种情况，如图7所示，图7为本申请实施例提供的一种基于色彩相似度判断是否生成帧对信息的流程图，具体包括如下步骤：
在步骤71，确定第一视频帧和第二视频帧之间的色彩相似度。
在步骤72，判断色彩相似度是否大于等于第二预定色彩相似度阈值，若色彩相似度大于等于第二预定色彩相似度阈值，则结束当前流程，若色彩相似度小于第二预定色彩相似度阈值，则执行步骤73。
在步骤73，判断色彩相似度是否小于第一预定色彩相似度阈值，若色彩相似度小于第一预定色彩相似度阈值，则执行步骤75，若色彩相似度大于等于第一预定色彩相似度阈值，则执行步骤74。
其中，由于在步骤72将大于等于第二预定色彩相似度阈值的色彩相似度进行滤除，所以在步骤73中，大于等于第一预定色彩相似度阈值的色彩相似度均小于第二预定色彩相似度阈值。
在步骤74，针对第一视频帧对应的第一视频片段和第二视频帧对应的第二视频片段进行色彩转换。
在步骤75，生成帧对信息。
其中，该帧对信息可以是第一视频片段和第二视频片段的帧对信息，也可以是色彩转换后的第一视频片段和色彩转换后的第二视频片段的帧对信息。
通过本申请实施例，可以基于合成评价参数中的色彩相似度生成第一视频片段和第二视频片段的帧对信息，在此过程中，本申请实施例可以根据处于不同数值范围内的色彩相似度进行不同的处理，这样，既可以提高生成帧对信息的数量，也可以提高帧对信息对应的第一视频片段和第二视频片段的相似度。
在另一种情况下，本申请实施例可以基于合成评价参数中的比例相似度来判断是否可以生成第一视频片段和第二视频片段之间的帧对信息，具体的，该过程可以执行为：响应于比例相似度小于第一预定比例相似度阈值，生成第一视频片段和第二视频片段之间的帧对信息。
在本情况下，通过人物头部区域图像所占的像素数量，可以判断人物与镜头之间的距离，当比例相似度小于第一预定比例相似度阈值时，表征第一视频帧和第二视频帧具有较高的相似度，进而可以生成第一视频片段和第二视频片段之间的帧对信息，以表征第一视频片段和第二视频片段可以进行拼接。
在另一种情况下，当比例相似度大于第一预定比例相似度阈值，本申请实施例可以对第一视频片段和第二视频片段进行比例调整，具体的，该过程可以执行为：响应于比例相似度大于等于第一预定比例相似度阈值且小于第二预定比例相似度阈值，针对第一视频片段和第二视频片段进行比例调整，以及生成比例调整后的第一视频片段和比例调整后的第二视频片段之间的帧对信息。
其中，第二预定比例相似度阈值大于第一预定比例相似度阈值。
在本情况下，当比例相似度大于等于第一预定比例相似度阈值时，表征第一视频帧和第二视频帧之间具有一定的比例差异，但是，本申请实施例可以通过第二预定比例相似度阈值对该比例差异进行限定。也就是说，当比例相似度大于等于第一预定比例相似度阈值且小于第二预定比例相似度阈值时，第一视频帧和第二视频帧之间的比例差异仍在可控范围之内。因此，本申请实施例可以对在此情况下的第一视频片段和第二视频片段进行比例调整，然后生成比例调整后的第一视频片段和比例调整后的第二视频片段之间的帧对信息。
在本情况下，本申请实施例可以对第一视频片段和第二视频片段进行尺寸缩放，以使得二者的比例互相统一。
结合上述关于比例相似度的两种情况，如图8所示，图8为本申请实施例提供的一种基于比例相似度判断是否生成帧对信息的流程图，具体包括如下步骤：
在步骤81，确定第一视频帧和第二视频帧之间的比例相似度。
在步骤82，判断比例相似度是否大于等于第二预定比例相似度阈值，若比例相似度大于等于第二预定比例相似度阈值，则结束当前流程，若比例相似度小于第二预定比例相似度阈值，则执行步骤83。
在步骤83，判断比例相似度是否小于第一预定比例相似度阈值，若比例相似度小于第一预定比例相似度阈值，则执行步骤85，若比例相似度大于等于第一预定比例相似度阈值，则执行步骤84。
其中，由于在步骤82将大于等于第二预定比例相似度阈值的比例相似度进行滤除，所以在步骤83中，大于等于第一预定比例相似度阈值的比例相似度均小于第二预定比例相似度阈值。
在步骤84，针对第一视频帧对应的第一视频片段和第二视频帧对应的第二视频片段进行比例调整。
在步骤85，生成帧对信息。
其中，该帧对信息可以是第一视频片段和第二视频片段的帧对信息，也可以是比例调整后的第一视频片段和比例调整后的第二视频片段的帧对信息。
通过本申请实施例，可以基于合成评价参数中的比例相似度生成第一视频片段和第二视频片段的帧对信息，在此过程中，本申请实施例可以根据处于不同数值范围内的比例相似度进行不同的处理，这样，既可以提高生成帧对信息的数量，也可以提高帧对信息对应的第一视频片段和第二视频片段的相似度。
在另一种情况下，本申请实施例可以基于合成评价参数中的光流值来判断是否可以生成第一视频片段和第二视频片段之间的帧对信息，具体的，该过程可以执行为：确定第一视频帧和第二视频帧之间光流值大于预定光流值阈值的像素数量，以及响应于光流值大于预定光流值阈值的像素数量小于预定像素数量阈值，生成第一视频片段和第二视频片段之间的帧对信息。
在本情况下，由于光流值可以反映两个视频帧之间的动态变化，因此，基于光流值的大小，可以判断第一视频帧和第二视频帧之间的相似程度，然后，基于该相似程度，可以判断是否生成第一视频片段和第二视频片段之间的帧对信息。
在另一种情况下，本申请实施例可以基于合成评价参数中的多种参数来判断是否可以生成第一视频片段和第二视频片段之间的帧对信息，在一种优选的实施方式中，该过程可以执行为：响应于像素相似度大于预定像素相似度阈值，确定第一视频帧和第二视频帧之间的色彩相似度，响应于色彩相似度满足预定色彩相似度条件，确定第一视频帧和第二视频帧之间的比例相似度，响应于比例相似度满足预定比例相似度条件，确定第一视频帧和第二视频帧之间的光流值，以及响应于光流值大于预定光流值阈值的像素数量小于预定像素数量阈值，生成第一视频片段和第二视频片段之间的帧对信息。
需要说明的，上述过程为本申请实施例的一种举例，在实际应用中，对合成评价参数中各参数的判断顺序可以根据实际情况进行调整。
如图9所示，图9为本申请实施例提供的一种生成帧对信息过程的流程图，具体包括如下步骤：
在步骤91，确定第一视频帧和第二视频帧之间的像素相似度。
在步骤92，判断像素相似度是否满足预定像素相似度条件，若像素相似度满足预定像素相似度条件，则执行步骤93，若像素相似度不满足预定像素相似度条件，则结束当前流程。
其中，预定像素相似度条件可以是像素相似度大于预定像素相似度阈值。
在步骤93，确定第一视频帧和第二视频帧之间的色彩相似度。
在步骤94，判断色彩相似度是否满足预定色彩相似度条件，若色彩相似度满足预定色彩相似度条件，则执行步骤95，若色彩相似度不满足预定色彩相似度条件，则结束当前流程。
其中，基于色彩相似度进行判断的流程可以参照上述图7所述内容，本申请实施例在此不做赘述。
另外，若参照上述图7所述内容对色彩相似度进行判断，则可以将图7中的步骤75替换为图9中的步骤95-步骤99。
在步骤95，确定第一视频帧和第二视频帧之间的比例相似度。
在步骤96，判断比例相似度是否满足预定比例相似度条件，若比例相似度满足预定比例相似度条件，则执行步骤97，若比例相似度不满足预定比例相似度条件，则结束当前流程。
其中，基于比例相似度进行判断的流程可以参照上述图8所述内容，本申请实施例在此不做赘述。
另外，若参照上述图8所述内容对比例相似度进行判断，则可以将图8中的步骤85替换为图9中的步骤97-步骤99。
在步骤97，确定第一视频帧和第二视频帧之间的光流值。
在步骤98，判断光流值是否满足预定光流值条件，若光流值满足预定光流值条件，则执行步骤99，若光流值不满足预定光流值条件，则结束当前流程。
其中，预定光流值条件可以是光流值大于预定光流值阈值的像素数量小于预定像素数量阈值。
在步骤99，生成帧对信息。
通过本申请实施例，基于合成评价参数中的多种参数来判断是否可以生成第一视频片段和第二视频片段之间的帧对信息，可以有效筛选出相似度较高的第一视频片段和第二视频片段，进而可以提高合成视频的质量。
在步骤44，将帧对信息、第一视频片段和第二视频片段存储至数据库。
其中，该数据库可以是图3所示的数据库。
在一种优选的实施方式中，数据库为图形数据库(Graph Database，Graph DB)，其中，建立该图形数据库的步骤可以执行为：确定多个帧对信息和每个帧对信息对应的视频片段，基于各帧对信息建立关联矩阵，以及以每个帧对信息对应的视频片段作为数据库节点，以关联矩阵作为各数据库节点之间的关联关系，建立图形数据库。
其中，在本申请实施例中，关联矩阵为各帧对信息的集合。
如图10所示，图10为本申请实施例提供的一种图形数据库的示意图，该示意图包括多个节点(节点101-节点108)以及各节点之间的关联关系。
其中，每个节点可以分别对应一个视频片段，该视频片段即为数据库中的备选视频片段。图10中的箭头用于表征两个节点之间存在关联关系，而且，箭头的方向用于表征在对应的关联关系中视频拼接的顺序。
需要说明的，在图10所示的图形数据库中可以存在没有关联关系的2个节点，例如，节点104和节点106之间没有直接的关联关系。
因此，在本申请实施例中，图形数据库中的各个节点之间可以存在关联关系，也可以不存在关联关系。但是，上述图形数据库中的每个节点都与至少一个其它节点存在关联关系。
在本申请实施例中，通过图形数据库中的节点以及关联关系，可以清楚简要的表示图形数据库中各个备选视频片段之间的关系。另外，由于图形数据库相较于传统数据库具有结构简单的优点，所以，通过图形数据库可以实现快速的存储以及快速查询，进而，在本申请实施例中，当需要存储或者检索大量视频片段以及大量帧对信息时，基于图形数据库可以实现快速存储视频片段以及快速检索视频片段。
在另一种情况下，图形数据库中还可以包括视频片段类别节点，在此情况下，图形数据库中的一部分节点可以分别对应一个备选视频片段，另一部分节点可以分别对应一个视频片段类别，此时，对应视频片段类别的节点即为视频片段类别节点。其中，该视频片段类别节点可以对应至少一个备选视频片段(即可以对应至少一个备选视频片段的节点)。
当视频合成指令指定的内容为备选视频片段的类别时，通过在图像数据库中设置视频片段类别节点，可以使得电子设备能够快速检索到视频合成指令所对应的类别，提高了视频检索的效率。
结合上述方法步骤，当确定第一视频片段和第二视频片段之间的帧对信息之后，可以将第一视频片段、第二视频片段以及二者之间的帧对信息存储至图形数据库。
在一种优选的实施方式中，第一视频片段和第二视频片段可以是预先确定的多个待处理视频片段中的视频片段，具体的，确定待处理视频片段的过程可以执行为：确定原始视频，针对原始视频进行目标检测，确定各目标帧，以及基于各目标帧之间的间隔对各目标帧进行合并，确定各待处理视频片段。
其中，目标帧至少包括人物图像区域，第一视频片段和第二视频片段为各待处理视频片段中的视频片段，针对原始视频的目标检测可以是手势检测，例如，本申请实施例可以检测原始视频中的“OK”手势、“挥手”手势等。
如图11所示，图11为本申请实施例提供的一种确定待处理视频片段的流程图，具体包括如下步骤：
在步骤111，确定原始视频。
在步骤112，对原始视频进行目标检测，确定目标检测结果。
其中，目标检测结果可以用于表征原始视频各视频帧中是否存在被检测的目标，具体的，目标检测结果可以通过数值进行表示，若目标检测结果大于0，则表征原始视频的视频帧中存在被检测的目标，反之则不存在。
需要说明的，本申请实施例可以对原始视频的各个视频帧同时进行目标检测，也可以对原始视频的各个视频帧逐个进行目标检测，图11将以逐个进行目标检测的方式进行说明。
在步骤113，判断目标检测结果是否大于0，若目标检测结果大于0，则执行步骤114，若目标检测结果小于等于0，则执行步骤111。
在步骤114，确定目标帧，并将目标帧的帧序号加入预定列表。
在本申请实施例中，预定列表用于存储目标帧的帧序号，也就是说，预定列表中的帧序号对应的视频帧中均存在被检测的目标。
在步骤115，确定预定列表中相邻目标帧之间的间隔。
其中，该间隔可以通过相邻目标帧之间视频帧的数量表示，也可以通过相邻目标帧之间的时间间隔表示，也可以通过其它适用的方式进行表示，在本申请实施例中，将以相邻目标帧之间视频帧的数量为例进行说明。
在步骤116，判断相邻目标帧之间的间隔是否小于5帧，若相邻目标帧之间的间隔小于5帧，则执行步骤117，若相邻目标帧之间的间隔大于等于5帧，则执行步骤118。
其中，步骤116对应判断条件中的5帧为本申请实施例的一种优选的举例，在实际应用中，可以使用其它适用的帧数进行判断，例如4帧、6帧等等。
在步骤117，将目标帧加入临时列表。
在本申请实施例中，临时列表用于存储满足步骤116对应条件的目标帧，也就是说，临时列表中所存储的各目标帧可以用于组成一段连续的视频片段。
在步骤118，基于临时列表生成待处理视频片段。
在基于临时列表生成待处理视频片段的过程中，可以对临时列表所存储的目标帧进行补帧处理，具体的，若相邻目标帧之间存在视频帧间隔，则可以在该相邻目标帧之间进行补帧，以使得待处理视频片段具有良好的连贯性。
在步骤119，确定待处理视频片段的类别并存储待处理视频片段。
通过本申请实施例，可以通过对原始视频的目标检测确定多个目标帧，然后基于各目标帧之间的间隔对各目标帧进行合并，确定各待处理视频片段。通过上述过程，可以使得每个单独的待处理视频片段内容统一且连贯，然后，在根据第一视频片段和第二视频片段建立数据库之后，可以使得数据库中每个单独的备选视频片段具有统一且连贯的内容，进而，可以使得基于备选视频片段确定的合成视频具有连贯、流畅的优点。
在步骤22，基于视频合成指令指定的连接顺序，对各目标视频片段进行合成操作，确定合成视频。
通过本申请实施例，可以根据视频合成指令以及数据库中各备选视频片段之间的帧对信息，将特定的目标视频片段以特定的顺序进行合成。其中，帧对信息用于表征对应的两个备选视频片段之间的关联关系，也就是说，本申请实施例在进行视频合成的过程中，是将具有关联关系的备选视频片段作为目标视频片段进行合成，得到合成视频。这样，可以确保在合成视频中，相邻两个目标视频片段之间是具有相关性的，即增加了合成视频整体的流畅程度，相较于直接合成的视频，本申请实施例基于视频合成指令、各备选视频片段以及帧对信息得到的合成视频具有连贯、流畅的优点。
在一种优选的实施方式中，上述步骤22可以执行为：根据视频合成指令指定的各目标视频片段，确定至少一个视频序列，以及根据预定筛选规则，在至少一个视频序列中确定合成视频。
由上述方法步骤可知，视频合成指令可以对数据库中的类别进行指定，由于一个类别可能存在多个备选视频片段，所以，用于视频合成的电子设备可以根据视频合成指令从数据库中确定多个目标视频片段的视频序列。然后，该电子设备可以根据预定筛选规则，在至少一个视频序列中确定合成视频。
其中，预定筛选规则可以是任意适用的规则，例如，预定筛选规则可以是先确定各视频序列的评分，然后选取评分最高的视频序列作为确定合成视频的视频序列。再例如，预定筛选规则也可以是选取排序第一位的视频序列作为确定合成视频的视频序列。
另外，在基于视频合成指令和各目标视频片段确定合成视频时，还可以针对各目标视频片段进行优化处理，具体的，上述步骤22可以执行为：确定各目标视频片段中的人物区域图像，对各目标视频片段中的人物区域图像进行色彩转换，以使得各目标视频片段中的人物区域图像颜色统一，以及对视频合成指令指定的连接顺序、各目标视频片段中色彩转换后的人物区域图像以及预存背景进行合成操作，确定合成视频。
其中，由于各个目标视频片段可能存在一定程度的色差差异，所以，在本申请实施例中可以针对各目标视频片段中的人物区域图像和背景区域图像进行优化处理，以得到各视频帧颜色统一的合成视频。
例如，如图12所示，图12为本申请实施例提供的一种确定合成视频过程的流程图。
由图12可知，图12中包括目标视频片段121、目标视频片段122和目标视频片段123。其中，目标视频片段121包括人物区域图像1211和背景区域图像1212，目标视频片段122包括人物区域图像1221和背景区域图像1222，目标视频片段123包括人物区域图像1231和背景区域图像1232。
需要说明的，为了清楚的进行解释说明，本申请实施例在图12中通过不同的填充表征不同区域图像之间的色彩差异，也就是说，相同的填充表征不同区域图像之间不存在色彩差异，不同的填充表征不同区域图像之间存在色彩差异。其中，色彩差异为同种颜色之间的色彩差异，例如红色与红色之间的色彩差异、蓝色与蓝色之间的色彩差异。
如图12所示，在确定合成视频的过程中，可以先各目标视频片段中的人物区域图像，即确定人物区域图像1211、人物区域图像1221和人物区域图像1231。
然后，本申请实施例可以对各目标视频片段中的人物区域图像进行色彩转换，以使得各目标视频片段中的人物区域图像颜色统一，其效果如图12所示，各目标视频片段中的人物区域图像由不同的填充转换为统一的填充。
其中，对各目标视频片段中的人物区域图像进行色彩转换时，可以将各人物区域图像转换为其中一个人物区域图像的颜色，也可以将各人物区域图像转换为预定标准的颜色。
然后，本申请实施例可以对视频合成指令指定的连接顺序、各目标视频片段中色彩转换后的人物区域图像以及预存背景124进行合成操作，确定合成视频125。
通过本申请实施例，可以在确定合成视频时对各目标视频片段进行优化处理，以使得合成视频中各视频帧的颜色统一，进一步提高了合成视频的质量。
基于相同的技术构思，本申请实施例还提供了一种视频合成装置，如图13所示，该装置包括：第一确定模块131和合成模块132。
第一确定模块131，用于响应于接收到视频合成指令，根据所述视频合成指令从数据库中确定多个目标视频片段，所述数据库包括多个备选视频片段和备选视频片段之间的帧对信息，所述帧对信息用于表征对应的两个备选视频片段之间的关联关系，所述视频合成指令用于指定各目标视频片段的连接顺序。
合成模块132，用于基于所述视频合成指令指定的连接顺序，对各目标视频片段进行合成操作，确定合成视频。
在一些优选的实施例中，所述方法还包括：
第二确定模块，用于确定第一视频片段和第二视频片段，所述第一视频片段包括至少一个第一视频帧，所述第二视频片段包括至少一个第二视频帧。
合成评价参数模块，用于计算各所述第一视频帧分别与各所述第二视频帧之间的合成评价参数，所述合成评价参数包括像素相似度、色彩相似度、比例相似度和光流值中的至少一种。
帧对信息模块，用于响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
存储模块，用于将所述帧对信息、所述第一视频片段和所述第二视频片段存储至所述数据库。
在一些优选的实施例中，所述像素相似度基于如下模块确定：
第三确定模块，用于确定所述第一视频帧的人物区域图像和所述第二视频帧的人物区域图像。
像素相似度模块，用于基于所述第一视频帧的人物区域图像和所述第二视频帧的人物区域图像确定所述第一视频帧和所述第二视频帧之间的像素相似度。
在一些优选的实施例中，所述像素相似度模块，具体用于：
确定所述第一视频帧的人物区域图像和所述第二视频帧的人物区域图像之间的重叠度。
响应于所述重叠度大于预定重叠度阈值，确定所述第一视频帧和所述第二视频帧之间的像素比。
响应于所述像素比大于预定像素比阈值，确定所述第一视频帧和所述第二视频帧之间的像素相似度。
在一些优选的实施例中，所述像素相似度模块，具体用于：
确定所述第一视频帧的人物区域图像和所述第二视频帧的人物区域图像中相应位置像素值差值为0的像素数量。
基于像素值差值为0的像素数量和像素总数量，确定所述第一视频帧和所述第二视频帧之间的像素比。
在一些优选的实施例中，所述像素相似度模块，具体用于：
确定所述第一视频帧的人物区域图像的第一平均哈希编码。
确定所述第二视频帧的人物区域图像的第二平均哈希编码。
基于所述第一平均哈希编码和所述第二平均哈希编码之间的汉明距离，确定所述第一视频帧和所述第二视频帧之间的像素相似度。
在一些优选的实施例中，所述帧对信息模块，具体用于：
响应于所述像素相似度大于预定像素相似度阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
在一些优选的实施例中，所述色彩相似度基于如下模块确定：
第四确定模块，用于确定所述第一视频帧的背景区域图像和所述第二视频帧的背景区域图像之间的色差作为色彩相似度。
在一些优选的实施例中，所述帧对信息模块，具体用于：
响应于所述色彩相似度小于第一预定色彩相似度阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
在一些优选的实施例中，所述帧对信息模块，具体用于：
响应于所述色彩相似度大于等于所述第一预定色彩相似度阈值且小于第二预定色彩相似度阈值，针对所述第一视频片段和所述第二视频片段进行色彩转换，所述第二预定色彩相似度阈值大于所述第一预定色彩相似度阈值。
生成色彩转换后的第一视频片段和色彩转换后的第二视频片段之间的帧对信息。
在一些优选的实施例中，所述比例相似度基于如下模块确定：
第五确定模块，用于确定所述第一视频帧中人物头部区域图像的像素数量。
第六确定模块，用于确定所述第二视频帧中人物头部区域图像的像素数量。
比例相似度模块，用于基于所述第一视频帧中人物头部区域图像的像素数量和所述第二视频帧中人物头部区域图像的像素数量，确定比例相似度。
在一些优选的实施例中，所述帧对信息模块，具体用于：
响应于所述比例相似度小于第一预定比例相似度阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
在一些优选的实施例中，所述帧对信息模块，具体用于：
响应于所述比例相似度大于等于所述第一预定比例相似度阈值且小于第二预定比例相似度阈值，针对所述第一视频片段和所述第二视频片段进行比例调整，所述第二预定比例相似度阈值大于所述第一预定比例相似度阈值。
生成比例调整后的第一视频片段和比例调整后的第二视频片段之间的帧对信息。
在一些优选的实施例中，所述帧对信息模块，具体用于：
确定所述第一视频帧和所述第二视频帧之间光流值大于预定光流值阈值的像素数量。
响应于光流值大于预定光流值阈值的像素数量小于预定像素数量阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
在一些优选的实施例中，所述帧对信息模块，具体用于：
响应于所述像素相似度大于预定像素相似度阈值，确定所述第一视频帧和所述第二视频帧之间的色彩相似度。
响应于所述色彩相似度满足预定色彩相似度条件，确定所述第一视频帧和所述第二视频帧之间的比例相似度。
响应于所述比例相似度满足预定比例相似度条件，确定所述第一视频帧和所述第二视频帧之间的光流值。
响应于光流值大于预定光流值阈值的像素数量小于预定像素数量阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
在一些优选的实施例中，所述装置还包括：
第七确定模块，用于确定原始视频。
目标检测模块，用于针对所述原始视频进行目标检测，确定各目标帧，所述目标帧至少包括人物图像区域。
合并模块，用于基于各目标帧之间的间隔对各目标帧进行合并，确定各待处理视频片段，所述第一视频片段和所述第二视频片段为各待处理视频片段中的视频片段。
在一些优选的实施例中，所述数据库为图形数据库Graph Database，所述图形数据库基于如下模块建立：
第八确定模块，用于确定多个帧对信息和每个帧对信息对应的视频片段。
关联矩阵模块，用于基于各帧对信息建立关联矩阵。
图形数据库模块，用于以每个帧对信息对应的视频片段作为数据库节点，以所述关联矩阵作为各数据库节点之间的关联关系，建立图形数据库。
在一些优选的实施例中，所述合成模块132，具体用于：
根据所述视频合成指令指定的各目标视频片段，确定至少一个视频序列。
根据预定筛选规则，在至少一个视频序列中确定合成视频。
在一些优选的实施例中，所述合成模块132，具体用于：
确定各目标视频片段中的人物区域图像。
对各目标视频片段中的人物区域图像进行色彩转换，以使得各目标视频片段中的人物区域图像颜色统一。
对所述视频合成指令指定的连接顺序、各目标视频片段中色彩转换后的人物区域图像以及预存背景进行合成操作，确定合成视频。
通过本申请实施例，可以根据视频合成指令以及数据库中各备选视频片段之间的帧对信息，将特定的目标视频片段以特定的顺序进行合成。其中，帧对信息用于表征对应的两个备选视频片段之间的关联关系，也就是说，本申请实施例在进行视频合成的过程中，是将具有关联关系的备选视频片段作为目标视频片段进行合成，得到合成视频。这样，可以确保在合成视频中，相邻两个目标视频片段之间是具有相关性的，即增加了合成视频整体的流畅程度，相较于直接合成的视频，本申请实施例基于视频合成指令、各备选视频片段以及帧对信息得到的合成视频具有连贯、流畅的优点。
图14是本申请实施例的电子设备的示意图。如图14所示，图14所示的电子设备为通用地址查询装置，其包括通用的计算机硬件结构，其至少包括处理器141和存储器142。处理器141和存储器142通过总线143连接。存储器142适于存储处理器141可执行的指令或程序。处理器141可以是独立的微处理器，也可以是一个或者多个微处理器集合。由此，处理器141通过执行存储器142所存储的指令，从而执行如上所述的本申请实施例的方法流程实现对于数据的处理和对于其它装置的控制。总线143将上述多个组件连接在一起，同时将上述组件连接到显示控制器144和显示装置以及输入/输出(I/O)装置145。输入/输出(I/O)装置145可以是鼠标、键盘、调制解调器、网络接口、触控输入装置、体感输入装置、打印机以及本领域公知的其他装置。典型地，输入/输出装置145通过输入/输出(I/O)控制器146与系统相连。
本领域的技术人员应明白，本申请的实施例可提供为方法、装置(设备)或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可读存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品。
本申请是参照根据本申请实施例的方法、装置(设备)和计算机程序产品的流程图来描述的。应理解可由计算机程序指令实现流程图中的每一流程。
这些计算机程序指令可以存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现流程图一个流程或多个流程中指定的功能。
也可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程中指定的功能的装置。
本申请的另一实施例涉及一种非易失性存储介质，用于存储计算机可读程序，所述计算机可读程序用于供计算机执行上述部分或全部的方法实施例。
即，本领域技术人员可以理解，实现上述实施例方法中的全部或部分步骤是可以通过程序来指定相关的硬件来完成，该程序存储在一个存储介质中，包括若干指令用以使得一个设备(可以是单片机，芯片等)或处理器(processor)执行本申请各实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本申请的优选实施例，并不用于限制本申请，对于本领域技术人员而言，本申请可以有各种改动和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (21)

1.一种视频合成方法，其特征在于，所述方法包括：
响应于接收到视频合成指令，根据所述视频合成指令从数据库中确定多个目标视频片段，所述数据库包括多个备选视频片段和备选视频片段之间的帧对信息，所述帧对信息用于表征对应的两个备选视频片段之间的关联关系，所述视频合成指令用于指定各目标视频片段的连接顺序；以及
基于所述视频合成指令指定的连接顺序，对各目标视频片段进行合成操作，确定合成视频；
其中，所述方法还包括：
确定第一视频片段和第二视频片段，所述第一视频片段包括至少一个第一视频帧，所述第二视频片段包括至少一个第二视频帧；
计算各所述第一视频帧分别与各所述第二视频帧之间的合成评价参数，所述合成评价参数包括像素相似度、色彩相似度、比例相似度和光流值中的至少一种；
响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息；以及
将所述帧对信息、所述第一视频片段和所述第二视频片段存储至所述数据库。
2.根据权利要求1所述的方法，其特征在于，所述像素相似度基于如下步骤确定：
确定所述第一视频帧的人物区域图像和所述第二视频帧的人物区域图像；以及
基于所述第一视频帧的人物区域图像和所述第二视频帧的人物区域图像确定所述第一视频帧和所述第二视频帧之间的像素相似度。
3.根据权利要求2所述的方法，其特征在于，所述基于所述第一视频帧的人物区域图像和所述第二视频帧的人物区域图像确定所述第一视频帧和所述第二视频帧之间的像素相似度，包括：
确定所述第一视频帧的人物区域图像和所述第二视频帧的人物区域图像之间的重叠度；
响应于所述重叠度大于预定重叠度阈值，确定所述第一视频帧和所述第二视频帧之间的像素比；以及
响应于所述像素比大于预定像素比阈值，确定所述第一视频帧和所述第二视频帧之间的像素相似度。
4.根据权利要求3所述的方法，其特征在于，所述确定所述第一视频帧和所述第二视频帧之间的像素比，包括：
确定所述第一视频帧的人物区域图像和所述第二视频帧的人物区域图像中相应位置像素值差值为0的像素数量；以及
基于像素值差值为0的像素数量和像素总数量，确定所述第一视频帧和所述第二视频帧之间的像素比。
5.根据权利要求3所述的方法，其特征在于，所述确定所述第一视频帧和所述第二视频帧之间的像素相似度，包括：
确定所述第一视频帧的人物区域图像的第一平均哈希编码；
确定所述第二视频帧的人物区域图像的第二平均哈希编码；以及
基于所述第一平均哈希编码和所述第二平均哈希编码之间的汉明距离，确定所述第一视频帧和所述第二视频帧之间的像素相似度。
6.根据权利要求1-5中任一项所述的方法，其特征在于，所述响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息，包括：
响应于所述像素相似度大于预定像素相似度阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
7.根据权利要求1所述的方法，其特征在于，所述色彩相似度基于如下步骤确定：
确定所述第一视频帧的背景区域图像和所述第二视频帧的背景区域图像之间的色差作为色彩相似度。
8.根据权利要求1或7所述的方法，其特征在于，所述响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息，包括：
响应于所述色彩相似度小于第一预定色彩相似度阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
9.根据权利要求1或7所述的方法，其特征在于，所述响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息，包括：
响应于所述色彩相似度大于等于第一预定色彩相似度阈值且小于第二预定色彩相似度阈值，针对所述第一视频片段和所述第二视频片段进行色彩转换，所述第二预定色彩相似度阈值大于所述第一预定色彩相似度阈值；以及
生成色彩转换后的第一视频片段和色彩转换后的第二视频片段之间的帧对信息。
10.根据权利要求1所述的方法，其特征在于，所述比例相似度基于如下步骤确定：
确定所述第一视频帧中人物头部区域图像的像素数量；
确定所述第二视频帧中人物头部区域图像的像素数量；以及
基于所述第一视频帧中人物头部区域图像的像素数量和所述第二视频帧中人物头部区域图像的像素数量，确定比例相似度。
11.根据权利要求1或10所述的方法，其特征在于，所述响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息，包括：
响应于所述比例相似度小于第一预定比例相似度阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
12.根据权利要求1或10所述的方法，其特征在于，所述响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息，包括：
响应于所述比例相似度大于等于第一预定比例相似度阈值且小于第二预定比例相似度阈值，针对所述第一视频片段和所述第二视频片段进行比例调整，所述第二预定比例相似度阈值大于所述第一预定比例相似度阈值；以及
生成比例调整后的第一视频片段和比例调整后的第二视频片段之间的帧对信息。
13.根据权利要求1所述的方法，其特征在于，所述响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息，包括：
确定所述第一视频帧和所述第二视频帧之间光流值大于预定光流值阈值的像素数量；以及
响应于光流值大于预定光流值阈值的像素数量小于预定像素数量阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
14.根据权利要求1所述的方法，其特征在于，所述响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息，包括：
响应于所述像素相似度大于预定像素相似度阈值，确定所述第一视频帧和所述第二视频帧之间的色彩相似度；
响应于所述色彩相似度满足预定色彩相似度条件，确定所述第一视频帧和所述第二视频帧之间的比例相似度；
响应于所述比例相似度满足预定比例相似度条件，确定所述第一视频帧和所述第二视频帧之间的光流值；以及
响应于光流值大于预定光流值阈值的像素数量小于预定像素数量阈值，生成所述第一视频片段和所述第二视频片段之间的帧对信息。
15.根据权利要求1所述的方法，其特征在于，所述方法还包括：
确定原始视频；
针对所述原始视频进行目标检测，确定各目标帧，所述目标帧至少包括人物图像区域；以及
基于各目标帧之间的间隔对各目标帧进行合并，确定各待处理视频片段，所述第一视频片段和所述第二视频片段为各待处理视频片段中的视频片段。
16.根据权利要求1所述的方法，其特征在于，所述数据库为图形数据库GraphDatabase，所述图形数据库基于如下步骤建立：
确定多个帧对信息和每个帧对信息对应的视频片段；
基于各帧对信息建立关联矩阵；以及
以每个帧对信息对应的视频片段作为数据库节点，以所述关联矩阵作为各数据库节点之间的关联关系，建立图形数据库。
17.根据权利要求1所述的方法，其特征在于，所述基于所述视频合成指令指定的连接顺序，对各目标视频片段进行合成操作，确定合成视频，包括：
根据所述视频合成指令指定的各目标视频片段，确定至少一个视频序列；以及
根据预定筛选规则，在至少一个视频序列中确定合成视频。
18.根据权利要求1或17所述的方法，其特征在于，所述基于所述视频合成指令指定的连接顺序，对各目标视频片段进行合成操作，确定合成视频，包括：
确定各目标视频片段中的人物区域图像；
对各目标视频片段中的人物区域图像进行色彩转换，以使得各目标视频片段中的人物区域图像颜色统一；以及
对所述视频合成指令指定的连接顺序、各目标视频片段中色彩转换后的人物区域图像以及预存背景进行合成操作，确定合成视频。
19.一种视频合成装置，其特征在于，所述装置包括：
第一确定模块，用于响应于接收到视频合成指令，根据所述视频合成指令从数据库中确定多个目标视频片段，所述数据库包括多个备选视频片段和备选视频片段之间的帧对信息，所述帧对信息用于表征对应的两个备选视频片段之间的关联关系，所述视频合成指令用于指定各目标视频片段的连接顺序；以及
合成模块，用于基于所述视频合成指令指定的连接顺序，对各目标视频片段进行合成操作，确定合成视频；
其中，所述装置还包括：
第二确定模块，用于确定第一视频片段和第二视频片段，所述第一视频片段包括至少一个第一视频帧，所述第二视频片段包括至少一个第二视频帧；
合成评价参数模块，用于计算各所述第一视频帧分别与各所述第二视频帧之间的合成评价参数，所述合成评价参数包括像素相似度、色彩相似度、比例相似度和光流值中的至少一种；
帧对信息模块，用于响应于所述合成评价参数满足预定条件，生成所述第一视频片段和所述第二视频片段之间的帧对信息；以及
存储模块，用于将所述帧对信息、所述第一视频片段和所述第二视频片段存储至所述数据库。
20.一种电子设备，包括存储器和处理器，其特征在于，所述存储器用于存储一条或多条计算机程序指令，其中，所述一条或多条计算机程序指令被所述处理器执行以实现如权利要求1-18中任一项所述的方法。
21.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-18中任一项所述的方法。
CN202110558579.3A 2021-05-21 2021-05-21 视频合成方法、装置、电子设备和可读存储介质 Active CN113301409B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110558579.3A CN113301409B (zh) 2021-05-21 2021-05-21 视频合成方法、装置、电子设备和可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110558579.3A CN113301409B (zh) 2021-05-21 2021-05-21 视频合成方法、装置、电子设备和可读存储介质

Publications (2)

Publication Number Publication Date
CN113301409A CN113301409A (zh) 2021-08-24
CN113301409B true CN113301409B (zh) 2023-01-10

Family

ID=77323707

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110558579.3A Active CN113301409B (zh) 2021-05-21 2021-05-21 视频合成方法、装置、电子设备和可读存储介质

Country Status (1)

Country Link
CN (1) CN113301409B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113784060B (zh) * 2021-09-09 2023-06-30 北京跳悦智能科技有限公司 一种手势视频拼接方法及系统、计算机设备
CN114286198B (zh) * 2021-12-30 2023-11-10 北京爱奇艺科技有限公司 一种视频关联方法、装置、电子设备和存储介质
CN114615513B (zh) * 2022-03-08 2023-10-20 北京字跳网络技术有限公司 视频数据生成方法、装置、电子设备及存储介质
CN114900733B (zh) * 2022-04-28 2023-07-21 北京生数科技有限公司 一种视频生成方法、相关装置及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105828125A (zh) * 2016-03-31 2016-08-03 北京奇艺世纪科技有限公司 一种视频推送方法及装置
CN108227950A (zh) * 2016-12-21 2018-06-29 北京搜狗科技发展有限公司 一种输入方法和装置
CN109309860A (zh) * 2018-10-16 2019-02-05 腾讯科技（深圳）有限公司 提示信息的展示方法和装置、存储介质、电子装置
CN110891192A (zh) * 2018-09-11 2020-03-17 传线网络科技（上海）有限公司 视频剪辑方法及装置
WO2021031210A1 (zh) * 2019-08-22 2021-02-25 深圳市铂岩科技有限公司 视频处理方法和装置、存储介质和电子设备
CN112738558A (zh) * 2021-01-19 2021-04-30 深圳市前海手绘科技文化有限公司 一种分布式视频合成方法与装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108966004B (zh) * 2018-06-27 2022-06-17 维沃移动通信有限公司 一种视频处理方法及终端
US10956746B1 (en) * 2018-12-27 2021-03-23 Facebook, Inc. Systems and methods for automated video classification

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105828125A (zh) * 2016-03-31 2016-08-03 北京奇艺世纪科技有限公司 一种视频推送方法及装置
CN108227950A (zh) * 2016-12-21 2018-06-29 北京搜狗科技发展有限公司 一种输入方法和装置
CN110891192A (zh) * 2018-09-11 2020-03-17 传线网络科技（上海）有限公司 视频剪辑方法及装置
CN109309860A (zh) * 2018-10-16 2019-02-05 腾讯科技（深圳）有限公司 提示信息的展示方法和装置、存储介质、电子装置
WO2021031210A1 (zh) * 2019-08-22 2021-02-25 深圳市铂岩科技有限公司 视频处理方法和装置、存储介质和电子设备
CN112738558A (zh) * 2021-01-19 2021-04-30 深圳市前海手绘科技文化有限公司 一种分布式视频合成方法与装置

Also Published As

Publication number Publication date
CN113301409A (zh) 2021-08-24

Similar Documents

Publication Publication Date Title
CN113301409B (zh) 视频合成方法、装置、电子设备和可读存储介质
CN110288614B (zh) 图像处理方法、装置、设备及存储介质
CN113301408B (zh) 视频数据处理方法、装置、电子设备和可读存储介质
WO2016127883A1 (zh) 一种图像区域检测方法及装置
US11037275B2 (en) Complex architecture for image processing
CN114187633B (zh) 图像处理方法及装置、图像生成模型的训练方法及装置
Du et al. Saliency-guided color-to-gray conversion using region-based optimization
US20110292051A1 (en) Automatic Avatar Creation
CN114025219B (zh) 增强现实特效的渲染方法、装置、介质及设备
WO2014187223A1 (en) Method and apparatus for identifying facial features
CN113301385B (zh) 视频数据处理方法、装置、电子设备和可读存储介质
CN110969170A (zh) 一种图像主题色提取方法、装置及电子设备
US20180247431A1 (en) Process, system and apparatus for machine colour characterisation of digital media
CN112150347A (zh) 从有限的修改后图像集合中学习的图像修改样式
JP5914046B2 (ja) 画像処理装置および画像処理方法
CN113297416A (zh) 视频数据存储方法、装置、电子设备和可读存储介质
CN116563570B (zh) 一种颜色识别方法、装置、电子设备及存储介质
CN115294162B (zh) 目标识别方法、装置、设备及存储介质
US11055881B2 (en) System and a method for providing color vision deficiency assistance
US11200708B1 (en) Real-time color vector preview generation
KR101329136B1 (ko) 영상 시퀀스 디스플레이에 대한 몰입감 향상 방법 및시스템
WO2021129213A1 (zh) 主题图标的生成方法及其装置、计算机设备
CN115965848B (zh) 一种图像处理方法和相关装置
CN111918000B (zh) 一种描边方法、设备及可读存储介质
CN108882022B (zh) 推荐电影的方法、装置、介质和计算设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant