CN111464833A - 目标图像生成方法、目标图像生成装置、介质及电子设备 - Google Patents

目标图像生成方法、目标图像生成装置、介质及电子设备 Download PDF

Info

Publication number
CN111464833A
CN111464833A CN202010207668.9A CN202010207668A CN111464833A CN 111464833 A CN111464833 A CN 111464833A CN 202010207668 A CN202010207668 A CN 202010207668A CN 111464833 A CN111464833 A CN 111464833A
Authority
CN
China
Prior art keywords
target
video
key frame
main body
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010207668.9A
Other languages
English (en)
Other versions
CN111464833B (zh
Inventor
邵和明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010207668.9A priority Critical patent/CN111464833B/zh
Publication of CN111464833A publication Critical patent/CN111464833A/zh
Application granted granted Critical
Publication of CN111464833B publication Critical patent/CN111464833B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请提供一种目标图像生成方法、目标图像生成装置、计算机可读存储介质及电子设备;涉及计算机技术领域;包括:按照预设时长对待处理视频进行关键帧抽取得到关键帧集合;根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并得到合并结果;根据预设评分规则确定各关键帧中的主体对应的评分,并根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧;根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体并根据目标主体生成目标图像;其中,重要程度由各主体对应的视频时长或出现频率决定。上述方法可以根据待处理视频自动生成相对应的目标图像(如,封面图像),提升目标图像的制作效率,降低人工成本。

Description

目标图像生成方法、目标图像生成装置、介质及电子设备
技术领域
本申请涉及视频处理技术领域及图像处理技术领域,具体而言,涉及一种目标图像生成方法、目标图像生成装置、计算机可读存储介质及电子设备。
背景技术
对于视频类的内容,视频封面通常具有代表性,浏览者通常是通过视频封面对视频进行初步的了解,因此,对于一个视频来说,视频封面的表达能力尤为重要。通常情况下,为了使得视频封面能够更好的表达视频内容,设计人员会通过剪辑视频内容的方式从中采集一些具有代表性的人物或画面,以此作为封面素材制作视频封面,但是,这种方式通常会导致视频封面的制作效率较低,并且,这种方式也会造成人工成本较高的问题。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本申请的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本申请的目的在于提供一种目标图像生成方法、目标图像生成装置、计算机可读存储介质及电子设备,可以根据待处理视频自动生成相对应的目标图像(如,封面图像),提升目标图像的制作效率,降低人工成本。
本申请的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本申请的实践而习得。
根据本申请的第一方面,提供一种目标图像生成方法,包括:
按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合;
根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果;
根据预设评分规则确定各关键帧中的主体对应的评分,并根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧;
根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体,并根据目标主体生成目标图像;其中,重要程度由各主体对应的视频时长或出现频率决定。
在本申请的一种示例性实施例中,按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合,包括:
按照预设时长对待处理视频进行切分,得到视频片段集合;
对视频片段集合中各视频片段进行关键帧抽取,得到关键帧集合。
在本申请的一种示例性实施例中,视频片段集合中各视频片段与关键帧集合中各关键帧一一对应。
在本申请的一种示例性实施例中,根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果,包括:
检测关键帧集合中各关键帧的主体,并对各关键帧的主体进行比对,得到比对结果;
将比对结果表示主体一致的关键帧对应的视频片段进行合并,得到合并结果;其中,合并结果中的视频片段数量小于等于视频片段集合中的视频片段数量。
在本申请的一种示例性实施例中,根据预设评分规则确定各关键帧中的主体对应的评分,包括:
根据预设评分规则计算各关键帧中的主体分别对应的清晰度评分、主体完整度评分以及美学评分;
根据清晰度评分、主体完整度评分以及美学评分计算各关键帧中的主体对应的评分。
在本申请的一种示例性实施例中,根据清晰度评分、主体完整度评分以及美学评分计算各关键帧对应的评分,包括:
确定待处理视频对应的视频类型以及视频类型对应的评分权重;
根据评分权重计算关键帧对应的清晰度评分、主体完整度评分以及美学评分的加权和;
将各关键帧中的主体对应的加权和确定为各关键帧中的主体的评分。
在本申请的一种示例性实施例中,根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧,包括:
根据关键帧集合确定合并结果中各视频片段分别对应的至少一个参考关键帧;
根据评分从所述至少一个参考关键帧中选取大于预设评分的参考关键帧作为目标关键帧,目标关键帧与至少一个参考关键帧所属的视频片段相对应。
在本申请的一种示例性实施例中,根据评分从关键帧集合中选取目标关键帧之后,上述方法还可以包括以下步骤:
提取目标关键帧中的主体,并将目标关键帧中的主体输出至时间轴对应的区域;其中,时间轴与待处理视频相对应。
在本申请的一种示例性实施例中,根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体,包括:
确定待处理视频中的所有主体;根据所有主体中各主体所对应的视频帧计算各主体对应的视频时长;根据各主体对应的视频时长确定各目标关键帧中主体对应的目标视频时长;根据目标视频时长从目标关键帧中提取目标主体;其中,目标主体对应的目标视频时长大于第一预设阈值;或者,
确定待处理视频中的所有主体;计算各主体在待处理视频中的出现频率;根据出现频率确定各目标关键帧中主体对应的目标出现频率;根据目标出现频率从目标关键帧中提取目标主体;其中,目标主体对应的目标出现频率大于第二预设阈值。
在本申请的一种示例性实施例中,根据目标主体生成目标图像,包括:
根据主体处理规则对目标主体进行处理;其中,主体处理规则包括对目标主体进行描边、对目标主体进行虚化、对目标主体进行缩小以及对目标主体进行放大中至少一种;
根据处理后的目标主体以及图像生成规则生成目标图像。
在本申请的一种示例性实施例中,根据处理后的目标主体以及图像生成规则生成目标图像,包括:
将处理后的目标主体按照图像生成规则合成在预设背景图像上,以得到目标图像。
在本申请的一种示例性实施例中,根据目标主体生成目标图像之后,上述方法还可以包括以下步骤:
根据检测到的用户操作对目标图像中的目标主体进行调整,并对调整后的目标图像进行存储;用户操作包括移动主体操作、删除主体操作以及增加主体操作中至少一种。
根据本申请的第二方面,提供一种目标图像生成装置,包括关键帧抽取单元、视频片段合并单元、评分计算单元、关键帧选取单元、主体提取单元以及图像生成单元,其中:
关键帧抽取单元,用于按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合;
视频片段合并单元,用于根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果;
评分计算单元,用于根据预设评分规则确定各关键帧中的主体对应的评分;
关键帧选取单元,用于根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧;
主体提取单元,用于根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体;其中,重要程度由各主体对应的视频时长或出现频率决定;
图像生成单元,用于根据目标主体生成目标图像。
在本申请的一种示例性实施例中,关键帧抽取单元按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合的方式具体可以为:
关键帧抽取单元按照预设时长对待处理视频进行切分,得到视频片段集合;
关键帧抽取单元对视频片段集合中各视频片段进行关键帧抽取,得到关键帧集合。
在本申请的一种示例性实施例中,视频片段集合中各视频片段与关键帧集合中各关键帧一一对应。
在本申请的一种示例性实施例中,视频片段合并单元根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果的方式具体可以为:
视频片段合并单元检测关键帧集合中各关键帧的主体,并对各关键帧的主体进行比对,得到比对结果;
视频片段合并单元将比对结果表示主体一致的关键帧对应的视频片段进行合并,得到合并结果;其中,合并结果中的视频片段数量小于等于视频片段集合中的视频片段数量。
在本申请的一种示例性实施例中,评分计算单元根据预设评分规则确定各关键帧中的主体对应的评分的方式具体可以为:
评分计算单元根据预设评分规则计算各关键帧中的主体分别对应的清晰度评分、主体完整度评分以及美学评分;
评分计算单元根据清晰度评分、主体完整度评分以及美学评分计算各关键帧中的主体对应的评分。
在本申请的一种示例性实施例中,评分计算单元根据清晰度评分、主体完整度评分以及美学评分计算各关键帧中的主体对应的评分的方式具体可以为:
评分计算单元确定待处理视频对应的视频类型以及视频类型对应的评分权重;
评分计算单元根据评分权重计算关键帧对应的清晰度评分、主体完整度评分以及美学评分的加权和;
评分计算单元将各关键帧中的主体对应的加权和确定为各关键帧中的主体的评分。
在本申请的一种示例性实施例中,关键帧选取单元根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧的方式具体可以为:
关键帧选取单元根据关键帧集合确定合并结果中各视频片段分别对应的至少一个参考关键帧;
关键帧选取单元根据评分从所述至少一个参考关键帧中选取大于预设评分的参考关键帧作为目标关键帧,目标关键帧与至少一个参考关键帧所属的视频片段相对应。
在本申请的一种示例性实施例中,上述装置还可以包括主体输出单元,其中:
主体输出单元,用于在关键帧选取单元根据评分从关键帧集合中选取目标关键帧之后,提取目标关键帧中的主体,并将目标关键帧中的主体输出至时间轴对应的区域;其中,时间轴与待处理视频相对应。
在本申请的一种示例性实施例中,主体提取单元根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体的方式具体可以为:
主体提取单元确定待处理视频中的所有主体;根据所有主体中各主体所对应的视频帧计算各主体对应的视频时长;根据各主体对应的视频时长确定各目标关键帧中主体对应的目标视频时长;根据目标视频时长从目标关键帧中提取目标主体;其中,目标主体对应的目标视频时长大于第一预设阈值;或者,
主体提取单元确定待处理视频中的所有主体;计算各主体在待处理视频中的出现频率;根据出现频率确定各目标关键帧中主体对应的目标出现频率;根据目标出现频率从目标关键帧中提取目标主体;其中,目标主体对应的目标出现频率大于第二预设阈值。
在本申请的一种示例性实施例中,图像生成单元根据目标主体生成目标图像的方式具体可以为:
图像生成单元根据主体处理规则对目标主体进行处理;其中,主体处理规则包括对目标主体进行描边、对目标主体进行虚化、对目标主体进行缩小以及对目标主体进行放大中至少一种;
图像生成单元根据处理后的目标主体以及图像生成规则生成目标图像。
在本申请的一种示例性实施例中,根据处理后的目标主体以及图像生成规则生成目标图像,包括:
将处理后的目标主体按照图像生成规则合成在预设背景图像上,以得到目标图像。
在本申请的一种示例性实施例中,上述装置还可以包括主体调整单元,其中:
主体调整单元,用于在图像生成单元根据目标主体生成目标图像之后,根据检测到的用户操作对目标图像中的目标主体进行调整,并对调整后的目标图像进行存储;用户操作包括移动主体操作、删除主体操作以及增加主体操作中至少一种。
根据本申请的第三方面,提供一种电子设备,包括:处理器;以及存储器,用于存储所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行上述任意一项所述的方法。
根据本申请的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任意一项所述的方法。
本申请示例性实施例可以具有以下部分或全部有益效果:
在本申请的一示例实施方式所提供的目标图像生成方法中,可以按照预设时长(如,15s)对待处理视频进行关键帧抽取,得到关键帧集合;根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果;根据预设评分规则确定各关键帧中的主体对应的评分,并根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧;根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体(如,主人公),并根据目标主体生成目标图像,目标图像可以为封面图像;其中,重要程度由各主体对应的视频时长或出现频率决定。依据上述方案描述,本申请一方面可以根据待处理视频自动生成相对应的目标图像(如,封面图像),提升目标图像的制作效率,降低人工成本;另一方面,还能够提升目标图像的质量,使得目标图像能够更好的表达待处理视频的视频内容。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了可以应用本申请实施例的一种目标图像生成方法及目标图像生成装置的示例性系统架构的示意图;
图2示出了适于用来实现本申请实施例的电子设备的计算机系统的结构示意图;
图3示意性示出了根据本申请的一个实施例的目标图像生成方法的流程图;
图4示意性示出了根据本申请的一个实施例中主体一致的关键帧的示意图;
图5示意性示出了根据本申请的一个实施例中目标关键帧、蒙版主体以及主体的示意图;
图6示意性示出了根据本申请的一个实施例中主体输出至时间轴对应区域的示意图;
图7示意性示出了根据本申请的一个实施例目标图像的生成示意图;
图8示意性示出了根据本申请的另一个实施例的目标图像生成方法的流程图;
图9示意性示出了根据本申请的一个实施例中的目标图像生成装置的结构框图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本申请将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中,提供许多具体细节从而给出对本申请的实施方式的充分理解。然而,本领域技术人员将意识到,可以实践本申请的技术方案而省略所述特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知技术方案以避免喧宾夺主而使得本申请的各方面变得模糊。
此外,附图仅为本申请的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
图1示出了可以应用本申请实施例的一种目标图像生成方法及目标图像生成装置的示例性应用环境的系统架构的示意图。
如图1所示,系统架构100可以包括终端设备101、102、103中的一个或多个,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。终端设备101、102、103可以是具有显示屏的各种电子设备,包括但不限于台式计算机、便携式计算机、智能手机和平板电脑等等。应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。比如服务器105可以是多个服务器组成的服务器集群等。
本申请实施例所提供的目标图像生成方法一般由终端设备101、102或103执行,相应地,目标图像生成装置一般设置于终端设备101、102或103中。但本领域技术人员容易理解的是,本申请实施例所提供的目标图像生成方法也可以由服务器105执行,相应的,目标图像生成装置也可以设置于服务器105中,本示例性实施例中对此不做特殊限定。举例而言,在一种示例性实施例中,服务器105可以按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合;根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果;根据预设评分规则确定各关键帧中的主体对应的评分,并根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧;根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体,并根据目标主体生成目标图像。
图2示出了适于用来实现本申请实施例的电子设备的计算机系统的结构示意图。
需要说明的是,图2示出的电子设备的计算机系统200仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图2所示,计算机系统200包括中央处理单元(CPU)201,其可以根据存储在只读存储器(ROM)202中的程序或者从存储部分208加载到随机访问存储器(RAM)203中的程序而执行各种适当的动作和处理。在RAM 203中,还存储有系统操作所需的各种程序和数据。CPU201、ROM 202以及RAM 203通过总线204彼此相连。输入/输出(I/O)接口205也连接至总线204。
以下部件连接至I/O接口205:包括键盘、鼠标等的输入部分206;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分207;包括硬盘等的存储部分208;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分209。通信部分209经由诸如因特网的网络执行通信处理。驱动器210也根据需要连接至I/O接口205。可拆卸介质211,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器210上,以便于从其上读出的计算机程序根据需要被安装入存储部分208。
特别地,根据本申请的实施例,下文参考流程图描述的过程可以被实现为计算机软件程序。例如,本申请的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分209从网络上被下载和安装,和/或从可拆卸介质211被安装。在该计算机程序被中央处理单元(CPU)201执行时,执行本申请的方法和装置中限定的各种功能。
对于视频类的内容,用户了解该视频的方法主要是通过对标题和封面的了解,进而判断自己对该视频是否感兴趣,因此,对于视频而言,视频封面非常重要。通常情况下,视频封面需要人工手动制作,例如,在视频中截取一小段视频或者一帧封面的方式作为视频封面,或者是用户可以自己手动在相册中上传一张图片作为视频封面图。但是,这种方式通常会造成视频封面制作效率较低以及人工成本较高的问题。
基于上述问题,本示例实施方式提供了一种目标图像生成方法。该目标图像生成方法可以应用于上述服务器105,也可以应用于上述终端设备101、102、103中的一个或多个,本示例性实施例中对此不做特殊限定。参考图3所示,该目标图像生成方法可以包括以下步骤S310至步骤S340:
步骤S310:按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合。
步骤S320:根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果。
步骤S330:根据预设评分规则确定各关键帧中的主体对应的评分,并根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧。
步骤S340:根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体,并根据目标主体生成目标图像;其中,重要程度由各主体对应的视频时长或出现频率决定。
下面,对于本示例实施方式的上述步骤进行更加详细的说明。
在步骤S310中,按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合。
其中,待处理视频可以为待生成封面图像的视频,封面图像可以为本申请中的目标图像。另外,预设时长用于抽取待处理视频中的关键帧,如,15秒;关键帧集合中按照时间顺序相邻的关键帧所对应的时刻相隔时长相同,如,每两个相邻的关键帧相隔15秒,举例来说,可以按照15s的时间间隔对待处理视频进行关键帧抽取。另外,关键帧集合中的关键帧数量为一个或多个,本申请实施例不作限定。
本申请实施例中,可选的,上述方法还可以包括以下步骤:当接收到用户上传的视频文件时,将视频文件确定为待处理视频。
其中,视频文件的格式可以为rm、rmvb、mpeg1-4、mov、mtv、dat、wmv、avi、3gp、amv、dmv、flv、mpg、mpe、mpa、m15、m1v或mp2,本申请实施例不作限定。
具体地,当接收到用户上传的视频文件时,将视频文件确定为待处理视频的方式具体可以为:客户端接收用户上传的本地视频文件;读取本地视频文件对应的文件参数,其中,文件参数包括文件名、文件格式、视频时长等;根据文件参数确定该本地视频文件是否符合待处理视频标准,如果是,则将该本地视频文件确定为待处理视频,如果否,则将本地视频文件存储至服务器。
可见,实施该可选的实施例,能够将用户上传的视频文件确定为待处理视频,进而便于对该待处理视频进行图像分析,从而生成与待处理视频相对应的具有代表性的目标图像。
本申请实施例中,可选的,按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合,包括:按照预设时长对待处理视频进行切分,得到视频片段集合;对视频片段集合中各视频片段进行关键帧抽取,得到关键帧集合。
其中,视频片段集合中的视频片段数量可以为一个或多个,本申请实施例不作限定。另外,视频片段集合中所有视频片段进行拼接,可以得到完整的待处理视频,视频片段集合中各视频片段与关键帧集合中各关键帧一一对应。
具体地,按照预设时长对待处理视频进行切分,得到视频片段集合的方式可以为:按照预设时长以及待处理视频的时间顺序对待处理视频进行切分,得到视频片段集合。其中,需要说明的是视频片段集合中的各视频片段的时长可以相同可以不同,举例来说,如果待处理视频的时长为3分10秒,而预设时长为1分钟,那么,可以切分得到4个视频片段,其中,前3个视频片段分别对应的时长为1分钟,第4个视频片段对应的时长为10秒。
进一步地,对视频片段集合中各视频片段进行关键帧抽取,得到关键帧集合的方式具体可以为:对视频片段集合中各视频片段的预设时刻(如,第15秒)进行关键帧抽取,得到关键帧集合。举例来说,可以将每个视频片段中的第15秒确定为关键帧并进行抽取。
另外,可选的,视频片段集合中视频片段集合数量可以与关键帧集合中的关键帧数量不相同。基于该限定,对视频片段集合中各视频片段进行关键帧抽取,得到关键帧集合的方式具体可以为:对视频片段集合中各视频片段进行至少一个关键帧的抽取,得到关键帧集合;其中,各视频片段分别对应至少一个关键帧。例如,待处理视频中包括视频片段A和视频片段B;视频片段A中包括2个关键帧,视频片段B中包括3个关键帧,或者,视频片段A中包括2个关键帧,视频片段B中包括2个关键帧。
进一步地,对视频片段集合中各视频片段进行至少一个关键帧的抽取,得到关键帧集合的方式具体可以为:按照主体出现频率确定视频片段集合中各视频片段中的参考主体,对视频片段集合中各视频片段进行主体对应的关键帧抽取,得到关键帧集合;其中,主体出现频率(如,50%)可以为该参考主体在该视频片段中出现的时长。举例来说,如果视频片段A中包括2个参考主体,视频片段B中包括3个参考主体,那么,则可以在视频片段A中抽取2个关键帧,分别用于代表2个参考主体,以及,在视频片段B中抽取3个关键帧,分别用于代表3个参考主体;其中,视频片段A中包括的2个参考主体和视频片段B中包括的3个参考主体的主体出现频率大于50%。
可见,实施该可选的实施例,能够通过对关键帧的抽取从待处理视频中选取用于生成目标图像的素材,可以提升生成目标图像的效率。
在步骤S320中,根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果。
其中,合并结果中包括一个或多个视频片段。另外,待处理视频中的主体包括各关键帧的主体,待处理视频中的主体可以为人、动物、植物、物品、图形等,本申请实施例不作限定。另外,各关键帧的主体可以相同也可以不同,各关键帧对应的视频片段不相同。
本申请实施例中,可选的,根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果,包括:检测关键帧集合中各关键帧的主体,并对各关键帧的主体进行比对,得到比对结果;将比对结果表示主体一致的关键帧对应的视频片段进行合并,得到合并结果;其中,合并结果中的视频片段数量小于等于视频片段集合中的视频片段数量。
其中,比对结果用于表征一组或多组对应于同一主体的关键帧。
具体地,检测关键帧集合中各关键帧的主体的方式可以为:根据相邻像素的差值对关键帧集合中各关键帧进行主体描绘,从而确定出关键帧集合中各关键帧对应的主体。
进一步地,若主体为人物,对各关键帧的主体进行比对,得到比对结果的方式可以为:根据人脸识别算法以及各关键帧中主体的五官识别各关键帧中的人物,比对各关键帧中的人物;将人物相同的关键帧确定为一类关键帧,得到多类关键帧;将多类关键帧确定为比对结果;其中,每类关键帧中对应的人物相同。举例来说,关键帧A对应人物A,关键帧B对应人物A,关键帧C对应人物B,那么,关键帧A和关键帧B为同一类关键帧,均对应于人物A,关键帧C为一类关键帧,对应于人物B。
另外,可选的,在得到合并结果之后,上述实施例还可以包括以下步骤:生成用于表示视频分段情况的分段信息。当检测到分段信息的调用请求时,可以调用该分段信息。
请参阅图4,图4示意性示出了根据本申请的一个实施例中主体一致的关键帧的示意图。图4中包括关键帧A 401、关键帧B 402、关键帧C 403以及关键帧D 404;其中,关键帧A401、关键帧B 402、关键帧C 403以及关键帧D 404均对应于同一主体,即,关键帧A 401、关键帧B 402、关键帧C 403以及关键帧D 404中的主体一致。进而,可以将关键帧A 401、关键帧B 402、关键帧C 403以及关键帧D 404分别对应的视频片段进行合并。举例来说,若关键帧A 401对应的视频片段为1分31秒-2分30秒,关键帧B 402对应的视频片段为2分31秒-3分30秒,关键帧C 403对应的视频片段为3分31秒-4分30秒,关键帧D 404对应的视频片段为4分31秒-5分30秒,由于主体一致,因此可以将上述视频片段进行合并,得到1分31秒-5分30秒的视频片段,该视频片段为合并结果。
可见,实施该可选的实施例,能够通过对主体一致的关键帧对应的视频片段进行合并,提升目标图像的生成效率。
在步骤S330中,根据预设评分规则确定各关键帧中的主体对应的评分,并根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧。
其中,预设评分规则中包括对于关键帧的多个维度的评分方式。目标关键帧的数量可以为一个或多个。
本申请实施例中,可选的,根据预设评分规则确定各关键帧中的主体对应的评分,包括:根据预设评分规则计算各关键帧中的主体分别对应的清晰度评分、主体完整度评分以及美学评分;根据清晰度评分、主体完整度评分以及美学评分计算各关键帧中的主体对应的评分。其中,清晰度评分用于表征关键帧中的主体的清晰程度,清晰度评分通常通过分辨率进行表示;主体完整度评分用于表征关键帧中的主体的完成程度,通常通过数值进行表示,该数值可以为整数或小数;美学评分用于表征关键帧中的主体的艺术性程度,美学评分通常通过数值进行表示。
其中,可选的,根据预设评分规则计算各关键帧中的主体分别对应的清晰度评分、主体完整度评分以及美学评分的方式可以为:
确定各关键帧分别对应的待评分主体;
结合预设评分规则和待评分主体的分辨率计算该待评分主体的清晰度评分,结合预设评分规则和待评分主体的完整度计算该待评分主体的主体完整度评分,结合预设评分规则和待评分主体的美观程度计算该待评分主体的美学评分,直到计算出所有待评分主体对应的清晰度评分、主体完整度评分以及美学评分;
将所有待评分主体对应的清晰度评分、主体完整度评分以及美学评分分别作为各待评分主体对应的关键帧的清晰度评分、主体完整度评分以及美学评分。
另外,可选的,根据清晰度评分、主体完整度评分以及美学评分计算各关键帧中的主体对应的评分的方式可以为:对清晰度评分、主体完整度评分以及美学评分进行求和,将求和结果确定为各关键帧中的主体对应的评分。
可见,实施该可选的实施例,能够对关键帧对应的评分进行计算,从而有利于确定出最优的关键帧,进而提升目标图像的生成质量。
进一步可选的,根据清晰度评分、主体完整度评分以及美学评分计算各关键帧中的主体对应的评分,包括:确定待处理视频对应的视频类型以及视频类型对应的评分权重;根据评分权重计算关键帧对应的清晰度评分、主体完整度评分以及美学评分的加权和;将各关键帧对应的加权和确定为各关键帧中的主体的评分。
其中,视频类型可以包括综艺、纪录片、电影、电视剧等,本申请实施例不作限定。评分权重可以表示为比值,如,3:3:4。
具体地,确定待处理视频对应的视频类型的方式可以为:确定待处理视频的上传分区以及该分区对应的标签,将该标签对应的视频类型确定为待处理视频对应的视频类型。
另外,举例来说,根据评分权重计算关键帧对应的清晰度评分、主体完整度评分以及美学评分的加权和的方式可以为:若评分权重为3:3:4,清晰度评分为90、主体完整度评分为80、美学评分为70,那么,90*3+80*3+70*4=790为该关键帧对应的加权和,即该关键帧的评分。
可见,实施该可选的实施例,能够计算各关键帧对应的加权和确定各关键帧的评分,进而便于根据该评分确定出更优的关键帧,提升目标图像的生成质量。
本申请实施例中,可选的,根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧,包括:根据关键帧集合确定合并结果中各视频片段分别对应的至少一个参考关键帧;根据评分从所述至少一个参考关键帧中选取大于预设评分(如,700分)的参考关键帧作为目标关键帧,目标关键帧与至少一个参考关键帧所属的视频片段相对应。
其中,目标关键帧可以用于代表对应的视频片段,该视频片段属于合并结果。另外,参考关键帧的数量与关键帧集合中的关键帧数量相同,合并结果中每个视频片段可以对应一个参考关键帧,也可以对应多个参考关键帧,本申请实施例不作限定。另外,合并结果中每个视频片段分别对应一个目标关键帧。
具体地,根据关键帧集合确定合并结果中各视频片段分别对应的至少一个参考关键帧的方式可以为:确定合并结果中各视频片段对应的合并处理结果,将合并处理结果中各视频片段分别对应的关键帧确定为合并结果中各视频片段对应的至少一个参考关键帧。举例来说,合并结果中包括视频片段A、视频片段B和视频片段C,其中,视频片段A对应的合并处理结果中包括视频片段1、视频片段2和视频片段3,也就是说,视频片段A是由视频片段1、视频片段2和视频片段3合并处理得到的,视频片段1、视频片段2和视频片段3对应的主体一致,那么,视频片段1、视频片段2和视频片段3分别对应的关键帧即为视频片段A对应的参考关键帧,可以将视频片段1、视频片段2和视频片段3分别对应的关键帧中评分最高的关键帧作为视频片段A对应的目标关键帧。视频片段B和视频片段C同理。
可见,实施该可选的实施例,确定出合并处理后的视频片段对应的目标关键帧,也就是选择出了一个主体对应的一个最优关键帧,有利于提升目标图像的生成质量。
本申请实施例中,可选的,根据评分从关键帧集合中选取目标关键帧之后,上述方法还可以包括以下步骤:提取目标关键帧中的主体,并将目标关键帧中的主体输出至时间轴对应的区域;其中,时间轴与待处理视频相对应。
其中,时间轴用于体现待处理视频的各录制时刻。时间轴对应的区域可以为时间轴上方的显示区域,显示区域用于显示主体。
具体地,提取目标关键帧中的主体的方式可以为:识别目标关键帧对应的主体部分,并对该主体部分进行蒙版抠图处理,得到目标关键帧对应的主体;其中,所得到的目标关键帧对应的主体为背景透明的主体图形。
请参阅图5,图5示意性示出了根据本申请的一个实施例中目标关键帧、蒙版主体以及主体的示意图。图5中包括目标关键帧501、蒙版主体502以及主体503。具体地,首先可以识别目标关键帧501中主体部分,进而对该主体部分进行蒙版处理,得到蒙版主体502,进而,可以通过对蒙版主体502进行抠图处理,得到主体503。
另外,将目标关键帧中的主体输出至时间轴对应的区域的方式可以为:根据目标关键帧中的主体的输出时刻将该主体输出至时间轴对应的区域。
请参阅图6,图6示意性示出了根据本申请的一个实施例中主体输出至时间轴对应区域的示意图。如图6所示,在确定出目标关键帧的主体之后,可以将主体601、主体602以及主体603输出至时间轴600对应的区域,如,时间轴上方。主体601、主体602以及主体603所输出的位置分别对应于时间轴的1分5秒处、2分20秒处以及2分50秒处;其中,待处理视频时长为3分10秒,即,时间轴600的时长。
可见,实施该可选的实施例,可以确定出多个主体,多个主体可以用于生成目标图像,通过将多个主体输出至时间轴对应的区域,可以方便用户从中进行选择需要应用于目标图像的主体,从而实现对于目标图像个性化定制,改善用户的使用体验,进而提升用户的使用黏度。
在步骤S340中,根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体,并根据目标主体生成目标图像;其中,重要程度由各主体对应的视频时长或出现频率决定。
其中,目标图像可以为RGBα图像,RGBα是代表Red(红色)、Green(绿色)、Blue(蓝色)和α(Alpha)的色彩空间,α用于表示目标图像的不透明程度,如,100%完全不透明、0%完全透明。另外,目标主体的数量可以为一个或多个。目标图像用于代表性表示待处理视频。
本申请实施例中,可选的,根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体,包括:
确定待处理视频中的所有主体;根据所有主体中各主体所对应的视频帧计算各主体对应的视频时长;根据各主体对应的视频时长确定各目标关键帧中主体对应的目标视频时长;根据目标视频时长从目标关键帧中提取目标主体;其中,目标主体的目标视频时长大于预设阈值;或者,
确定待处理视频中的所有主体;计算各主体在待处理视频中的出现频率;根据出现频率确定各目标关键帧中主体对应的目标出现频率;根据目标出现频率从目标关键帧中提取目标主体;其中,目标主体对应的目标出现频率大于第二预设阈值。
此外,出现频率用于表示一段时间内不同主体分别出现的次数。
其中,根据所有主体中各主体所对应的视频帧计算各主体对应的视频时长的方式具体可以为:对所有主体中各主体所对应的视频帧的时间进行加和,得到各主体对应的视频时长。
另外,根据目标视频时长从目标关键帧中提取目标主体的方式具体可以为:确定出大于预设阈值(如,40s)的目标视频时长,提取该目标视频时长对应的目标关键帧中的目标主体。
可见,实施该可选的实施例,能够通过确定出对应视频时长较长的目标主体,从而根据该目标主体可以生成与待处理视频对应的目标图像。
本申请实施例中,可选的,根据目标主体生成目标图像,包括:
根据主体处理规则对目标主体进行处理;其中,主体处理规则包括对目标主体进行描边、对目标主体进行虚化、对目标主体进行缩小以及对目标主体进行放大中至少一种;根据处理后的目标主体以及图像生成规则生成目标图像。
其中,主体处理规则用于将目标主体处理为可以用于生成目标图像的主体图形;图像生成规则用于规定目标主体在目标图像中的排布方式,排布方式可以包括平均分布式、横向排布式、纵向排布式、叠加排布式等,本申请实施例不作限定。
具体地,根据处理后的目标主体以及图像生成规则生成目标图像的方式可以为:将处理后的目标主体按照图像生成规则排布于预设背景中,以得到目标图像;其中,预设背景可以为用户选定的背景也可以为系统默认背景。
此外,可选的,根据处理后的目标主体以及图像生成规则生成目标图像,包括:将处理后的目标主体按照图像生成规则合成在预设背景图像上,以得到目标图像。
其中,预设背景图像可以是从多个预存图像中选取得到的,选取规则可以为:基于调用频率进行选取。
另外,可选的,在根据处理后的目标主体以及图像生成规则生成目标图像之后,上述方法还可以包括以下步骤:根据目标图像中的元素生成与目标图像相适应的图像名称并输出。
请参阅图7,图7示意性示出了根据本申请的一个实施例目标图像的生成示意图。如图7所示,待处理视频时长为3分10秒,在时间轴700中,1分5秒处对应主体701,2分20秒处对应主体702,2分50秒处对应主体703。主体702和主体703为目标主体,即,主体702和主体703对应的视频时长大于预设阈值(如,40s)。进而,根据主体702和主体703可以生成目标图像704。
可见,实施该可选的实施例,可以根据目标主体生成用于代表待处理视频的目标图像,该目标图像可以作为待处理视频的视频封面,相较于传统的人工设计视频封面,可以降低人工成本,提升视频封面的制作效率以及制作效果。
本申请实施例中,可选的,根据目标主体生成目标图像之后,上述方法还可以包括以下步骤:
根据检测到的用户操作对目标图像中的目标主体进行调整,并对调整后的目标图像进行存储;用户操作包括移动主体操作、删除主体操作以及增加主体操作中至少一种。
其中,根据检测到的用户操作对目标图像中的目标主体进行调整的方式可以为:根据检测到的用户操作对目标图像中的目标主体进行重新布局,进而生成新的目标图像。进一步可选的,当检测到针对新的目标图像的用户确认操作,则执行上述的对调整后的目标图像进行存储的步骤;其中,对调整后的目标图像进行存储的方式可以为:将调整后的目标图像发送至远程服务器进行存储。
可见,实施该可选的实施例,可以响应用户操作对生成的目标图像进行调整,使得用户可以根据需求定制所需的目标图像,改善用户的使用体验,提升用户的使用黏度。
可见,实施图3所示的目标图像生成方法,可以根据待处理视频自动生成相对应的目标图像(如,封面图像),提升目标图像的制作效率,降低人工成本。此外,还能够提升目标图像的质量,使得目标图像能够更好的表达待处理视频的视频内容。
请参阅图8,图8示意性示出了根据本申请的另一个实施例的目标图像生成方法的流程图。如图8所示,另一个实施例的目标图像生成方法包括:步骤S800~S836,其中:
步骤S800:当接收到用户上传的视频文件时,将视频文件确定为待处理视频。
步骤S802:按照预设时长对待处理视频进行切分,得到视频片段集合。
步骤S804:对视频片段集合中各视频片段进行关键帧抽取,得到关键帧集合视频片段集合中各视频片段与关键帧集合中各关键帧一一对应。
步骤S806:检测关键帧集合中各关键帧的主体,并对各关键帧的主体进行比对,得到比对结果。
步骤S808:将比对结果表示主体一致的关键帧对应的视频片段进行合并,得到合并结果;其中,合并结果中的视频片段数量小于等于视频片段集合中的视频片段数量;其中,待处理视频包括各关键帧对应的视频片段。
步骤S810:根据预设评分规则计算各关键帧分别对应的清晰度评分、主体完整度评分以及美学评分。
步骤S812:确定待处理视频对应的视频类型以及视频类型对应的评分权重。
步骤S814:根据评分权重计算关键帧对应的清晰度评分、主体完整度评分以及美学评分的加权和。
步骤S816:将各关键帧对应的加权和确定为各关键帧的评分。
步骤S818:根据关键帧集合确定合并结果中各视频片段分别对应的至少一个参考关键帧。
步骤S820:根据评分从所述至少一个参考关键帧中选取大于预设评分的参考关键帧作为目标关键帧,目标关键帧与至少一个参考关键帧所属的视频片段相对应。
步骤S822:提取目标关键帧中的主体,并将目标关键帧中的主体输出至时间轴对应的区域;其中,时间轴与待处理视频相对应。
步骤S824:确定待处理视频中的所有主体。
步骤S826:根据所有主体中各主体所对应的视频帧计算各主体对应的视频时长。
步骤S828:根据各主体对应的视频时长确定各目标关键帧中主体对应的目标视频时长。
步骤S830:根据目标视频时长从目标关键帧中提取目标主体;其中,目标主体的目标视频时长大于预设阈值。
步骤S832:根据主体处理规则对目标主体进行处理;其中,主体处理规则包括对目标主体进行描边、对目标主体进行虚化、对目标主体进行缩小以及对目标主体进行放大中至少一种。
步骤S834:根据处理后的目标主体以及图像生成规则生成目标图像。
步骤S836:根据检测到的用户操作对目标图像中的目标主体进行调整,并对调整后的目标图像进行存储;用户操作包括移动主体操作、删除主体操作以及增加主体操作中至少一种。
需要说明的是,步骤S800~S836与图3中的步骤及其实施例相对应,针对步骤S800~S836的具体实施方式,请参阅图3中的步骤及其实施例,此处不再赘述。
可见,实施图8所示的目标图像生成方法,可以根据待处理视频自动生成相对应的目标图像(如,封面图像),提升目标图像的制作效率,降低人工成本。此外,还能够提升目标图像的质量,使得目标图像能够更好的表达待处理视频的视频内容。
进一步的,本示例实施方式中,还提供了一种目标图像生成装置。参考图9所示,该目标图像生成装置900可以包括关键帧抽取单元901、视频片段合并单元902、评分计算单元903、关键帧选取单元904、主体提取单元905以及图像生成单元906,其中:
关键帧抽取单元901,用于按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合;
视频片段合并单元902,用于根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果;其中,待处理视频包括各关键帧对应的视频片段;
评分计算单元903,用于根据预设评分规则确定各关键帧中的主体对应的评分;
关键帧选取单元904,用于根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧;
主体提取单元905,用于根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体;其中,重要程度由各主体对应的视频时长或出现频率决定;
图像生成单元906,用于根据目标主体生成目标图像。
可见,实施图9所示的目标图像生成装置,可以根据待处理视频自动生成相对应的目标图像(如,封面图像),提升目标图像的制作效率,降低人工成本。此外,还能够提升目标图像的质量,使得目标图像能够更好的表达待处理视频的视频内容。
在本申请的一种示例性实施例中,上述装置还可以包括视频接收单元,其中:
视频接收单元,用于当接收到用户上传的视频文件时,将视频文件确定为待处理视频。
可见,实施该可选的实施例,能够将用户上传的视频文件确定为待处理视频,进而便于对该待处理视频进行图像分析,从而生成与待处理视频相对应的具有代表性的目标图像。
在本申请的一种示例性实施例中,关键帧抽取单元901按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合的方式具体可以为:
关键帧抽取单元901按照预设时长对待处理视频进行切分,得到视频片段集合;
关键帧抽取单元901对视频片段集合中各视频片段进行关键帧抽取,得到关键帧集合。
其中,视频片段集合中各视频片段与关键帧集合中各关键帧一一对应。可见,实施该可选的实施例,能够通过对关键帧的抽取从待处理视频中选取用于生成目标图像的素材,可以提升生成目标图像的效率。
在本申请的一种示例性实施例中,视频片段合并单元902根据关键帧集合中各关键帧的主体对各关键帧对应的视频片段进行合并,得到合并结果的方式具体可以为:
视频片段合并单元902检测关键帧集合中各关键帧的主体,并对各关键帧的主体进行比对,得到比对结果;
视频片段合并单元902将比对结果表示主体一致的关键帧对应的视频片段进行合并,得到合并结果;其中,合并结果中的视频片段数量小于等于视频片段集合中的视频片段数量。
可见,实施该可选的实施例,能够通过对主体一致的关键帧对应的视频片段进行合并,提升目标图像的生成效率。
在本申请的一种示例性实施例中,评分计算单元903根据预设评分规则确定各关键帧中的主体对应的评分的方式具体可以为:
评分计算单元903根据预设评分规则计算各关键帧中的主体分别对应的清晰度评分、主体完整度评分以及美学评分;
评分计算单元903根据清晰度评分、主体完整度评分以及美学评分计算各关键帧中的主体对应的评分。
可见,实施该可选的实施例,能够对关键帧对应的评分进行计算,从而有利于确定出最优的关键帧,进而提升目标图像的生成质量。
在本申请的一种示例性实施例中,评分计算单元903根据清晰度评分、主体完整度评分以及美学评分计算各关键帧中的主体对应的评分的方式具体可以为:
评分计算单元903确定待处理视频对应的视频类型以及视频类型对应的评分权重;
评分计算单元903根据评分权重计算关键帧对应的清晰度评分、主体完整度评分以及美学评分的加权和;
评分计算单元903将各关键帧中的主体对应的加权和确定为各关键帧中的主体的评分。
可见,实施该可选的实施例,能够计算各关键帧对应的加权和确定各关键帧的评分,进而便于根据该评分确定出更优的关键帧,提升目标图像的生成质量。
在本申请的一种示例性实施例中,关键帧选取单元904根据评分从关键帧集合中选取与合并结果中各视频片段相对应的目标关键帧的方式具体可以为:
关键帧选取单元904根据关键帧集合确定合并结果中各视频片段分别对应的至少一个参考关键帧;
关键帧选取单元904根据评分从所述至少一个参考关键帧中选取大于预设评分的参考关键帧作为目标关键帧,目标关键帧与至少一个参考关键帧所属的视频片段相对应。
可见,实施该可选的实施例,确定出合并处理后的视频片段对应的目标关键帧,也就是选择出了一个主体对应的一个最优关键帧,有利于提升目标图像的生成质量。
在本申请的一种示例性实施例中,上述装置还可以包括主体输出单元(未图示),其中:
主体输出单元,用于在关键帧选取单元904根据评分从关键帧集合中选取目标关键帧之后,提取目标关键帧中的主体,并将目标关键帧中的主体输出至时间轴对应的区域;其中,时间轴与待处理视频相对应。
可见,实施该可选的实施例,可以确定出多个主体,多个主体可以用于生成目标图像,通过将多个主体输出至时间轴对应的区域,可以方便用户从中进行选择需要应用于目标图像的主体,从而实现对于目标图像个性化定制,改善用户的使用体验,进而提升用户的使用黏度。
在本申请的一种示例性实施例中,主体提取单元905根据待处理视频中各主体的重要程度从目标关键帧中提取目标主体的方式具体可以为:
主体提取单元905确定待处理视频中的所有主体;根据所有主体中各主体所对应的视频帧计算各主体对应的视频时长;根据各主体对应的视频时长确定各目标关键帧中主体对应的目标视频时长;根据目标视频时长从目标关键帧中提取目标主体;其中,目标主体对应的目标视频时长大于第一预设阈值;或者,
主体提取单元905确定待处理视频中的所有主体;计算各主体在待处理视频中的出现频率;根据出现频率确定各目标关键帧中主体对应的目标出现频率;根据目标出现频率从目标关键帧中提取目标主体;其中,目标主体对应的目标出现频率大于第二预设阈值。
可见,实施该可选的实施例,能够通过确定出对应视频时长较长的目标主体,从而根据该目标主体可以生成与待处理视频对应的目标图像。
在本申请的一种示例性实施例中,图像生成单元906根据目标主体生成目标图像的方式具体可以为:
图像生成单元906根据主体处理规则对目标主体进行处理;其中,主体处理规则包括对目标主体进行描边、对目标主体进行虚化、对目标主体进行缩小以及对目标主体进行放大中至少一种;
图像生成单元906根据处理后的目标主体以及图像生成规则生成目标图像。
其中,根据处理后的目标主体以及图像生成规则生成目标图像,包括:将处理后的目标主体按照图像生成规则合成在预设背景图像上,以得到目标图像。
可见,实施该可选的实施例,可以根据目标主体生成用于代表待处理视频的目标图像,该目标图像可以作为待处理视频的视频封面,相较于传统的人工设计视频封面,可以降低人工成本,提升视频封面的制作效率以及制作效果。
在本申请的一种示例性实施例中,上述装置还可以包括主体调整单元(未图示),其中:
主体调整单元,用于在图像生成单元906根据目标主体生成目标图像之后,根据检测到的用户操作对目标图像中的目标主体进行调整,并对调整后的目标图像进行存储;用户操作包括移动主体操作、删除主体操作以及增加主体操作中至少一种。
可见,实施该可选的实施例,可以响应用户操作对生成的目标图像进行调整,使得用户可以根据需求定制所需的目标图像,改善用户的使用体验,提升用户的使用黏度。
应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本申请的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
由于本申请的示例实施例的目标图像生成装置的各个功能模块与上述目标图像生成方法的示例实施例的步骤对应,因此对于本申请装置实施例中未披露的细节,请参照本申请上述的目标图像生成方法的实施例。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该电子设备执行时,使得该电子设备实现上述实施例中所述的方法。
需要说明的是,本申请所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现,所描述的单元也可以设置在处理器中。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。

Claims (15)

1.一种目标图像生成方法,其特征在于,包括:
按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合;
根据所述关键帧集合中各关键帧的主体对所述各关键帧对应的视频片段进行合并,得到合并结果;
根据预设评分规则确定所述各关键帧中的主体对应的评分,并根据所述评分从所述关键帧集合中选取与所述合并结果中各视频片段相对应的目标关键帧;
根据所述待处理视频中各主体的重要程度从所述目标关键帧中提取目标主体,并根据所述目标主体生成目标图像;其中,所述重要程度由所述各主体对应的视频时长或出现频率决定。
2.根据权利要求1所述的方法,其特征在于,按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合,包括:
按照所述预设时长对待处理视频进行切分,得到视频片段集合;
对所述视频片段集合中各视频片段进行关键帧抽取,得到关键帧集合。
3.根据权利要求2所述的方法,其特征在于,所述视频片段集合中各视频片段与所述关键帧集合中各关键帧一一对应。
4.根据权利要求2所述的方法,其特征在于,根据所述关键帧集合中各关键帧的主体对所述各关键帧对应的视频片段进行合并,得到合并结果,包括:
检测所述关键帧集合中各关键帧的主体,并对所述各关键帧的主体进行比对,得到比对结果;
将所述比对结果表示主体一致的关键帧对应的视频片段进行合并,得到合并结果;其中,所述合并结果中的视频片段数量小于等于所述视频片段集合中的视频片段数量。
5.根据权利要求1所述的方法,其特征在于,根据预设评分规则确定所述各关键帧中的主体对应的评分,包括:
根据预设评分规则计算所述各关键帧中的主体分别对应的清晰度评分、主体完整度评分以及美学评分;
根据所述清晰度评分、所述主体完整度评分以及所述美学评分计算所述各关键帧中的主体对应的评分。
6.根据权利要求5所述的方法,其特征在于,根据所述清晰度评分、所述主体完整度评分以及所述美学评分计算所述各关键帧对应的评分,包括:
确定所述待处理视频对应的视频类型以及所述视频类型对应的评分权重;
根据所述评分权重计算所述关键帧对应的所述清晰度评分、所述主体完整度评分以及所述美学评分的加权和;
将所述各关键帧中的主体对应的加权和确定为所述各关键帧中的主体的评分。
7.根据权利要求1所述的方法,其特征在于,根据所述评分从所述关键帧集合中选取与所述合并结果中各视频片段相对应的目标关键帧,包括:
根据所述关键帧集合确定所述合并结果中各视频片段分别对应的至少一个参考关键帧;
根据所述评分从所述至少一个参考关键帧中选取大于预设评分的参考关键帧作为目标关键帧,所述目标关键帧与所述至少一个参考关键帧所属的视频片段相对应。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
提取所述目标关键帧中的主体,并将所述目标关键帧中的主体输出至时间轴对应的区域;其中,所述时间轴与所述待处理视频相对应。
9.根据权利要求1所述的方法,其特征在于,根据所述待处理视频中各主体的重要程度从所述目标关键帧中提取目标主体,包括:
确定所述待处理视频中的所有主体;根据各主体所对应的视频帧计算所述各主体对应的视频时长;根据所述各主体对应的视频时长确定各所述目标关键帧中主体对应的目标视频时长;根据所述目标视频时长从所述目标关键帧中提取目标主体;其中,所述目标主体对应的目标视频时长大于第一预设阈值;或者,
确定所述待处理视频中的所有主体;计算各主体在所述待处理视频中的出现频率;根据所述出现频率确定各所述目标关键帧中主体对应的目标出现频率;根据所述目标出现频率从所述目标关键帧中提取目标主体;其中,所述目标主体对应的目标出现频率大于第二预设阈值。
10.根据权利要求1所述的方法,其特征在于,根据所述目标主体生成目标图像,包括:
根据主体处理规则对所述目标主体进行处理;其中,所述主体处理规则包括对所述目标主体进行描边、对所述目标主体进行虚化、对所述目标主体进行缩小以及对所述目标主体进行放大中至少一种;
根据处理后的目标主体以及图像生成规则生成目标图像。
11.根据权利要求10所述的方法,其特征在于,根据处理后的目标主体以及图像生成规则生成目标图像,包括:
将处理后的目标主体按照图像生成规则合成在预设背景图像上,以得到目标图像。
12.根据权利要求1所述的方法,其特征在于,根据所述目标主体生成目标图像之后,所述方法还包括:
根据检测到的用户操作对所述目标图像中的所述目标主体进行调整,并对调整后的目标图像进行存储;所述用户操作包括移动主体操作、删除主体操作以及增加主体操作中至少一种。
13.一种目标图像生成装置,其特征在于,包括:
关键帧抽取单元,用于按照预设时长对待处理视频进行关键帧抽取,得到关键帧集合;
视频片段合并单元,用于根据所述关键帧集合中各关键帧的主体对所述各关键帧对应的视频片段进行合并,得到合并结果;
评分计算单元,用于根据预设评分规则确定所述各关键帧中的主体对应的评分;
关键帧选取单元,用于根据所述评分从所述关键帧集合中选取与所述合并结果中各视频片段相对应的目标关键帧;
主体提取单元,用于根据所述待处理视频中各主体的重要程度从所述目标关键帧中提取目标主体;其中,所述重要程度由所述各主体对应的视频时长或出现频率决定;
图像生成单元,用于根据所述目标主体生成目标图像。
14.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-12任一项所述的方法。
15.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1-12任一项所述的方法。
CN202010207668.9A 2020-03-23 2020-03-23 目标图像生成方法、目标图像生成装置、介质及电子设备 Active CN111464833B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010207668.9A CN111464833B (zh) 2020-03-23 2020-03-23 目标图像生成方法、目标图像生成装置、介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010207668.9A CN111464833B (zh) 2020-03-23 2020-03-23 目标图像生成方法、目标图像生成装置、介质及电子设备

Publications (2)

Publication Number Publication Date
CN111464833A true CN111464833A (zh) 2020-07-28
CN111464833B CN111464833B (zh) 2023-08-04

Family

ID=71680818

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010207668.9A Active CN111464833B (zh) 2020-03-23 2020-03-23 目标图像生成方法、目标图像生成装置、介质及电子设备

Country Status (1)

Country Link
CN (1) CN111464833B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111862936A (zh) * 2020-07-28 2020-10-30 游艺星际(北京)科技有限公司 生成及发布作品的方法、装置、电子设备和存储介质
CN112149575A (zh) * 2020-09-24 2020-12-29 新华智云科技有限公司 从视频中自动筛选具有汽车部位片段的方法
CN112383830A (zh) * 2020-11-06 2021-02-19 北京小米移动软件有限公司 视频封面确定方法及装置、存储介质
CN112468843A (zh) * 2020-10-26 2021-03-09 国家广播电视总局广播电视规划院 视频去重方法及装置
CN112653918A (zh) * 2020-12-15 2021-04-13 咪咕文化科技有限公司 预览视频生成方法、装置、电子设备及存储介质
CN112911281A (zh) * 2021-02-09 2021-06-04 北京三快在线科技有限公司 一种视频质量评价方法及装置
CN112954450A (zh) * 2021-02-02 2021-06-11 北京字跳网络技术有限公司 视频处理方法、装置、电子设备和存储介质
CN113761276A (zh) * 2021-09-09 2021-12-07 平安科技(深圳)有限公司 视频封面选取方法、装置、设备及存储介质
CN114845158A (zh) * 2022-04-11 2022-08-02 广州虎牙科技有限公司 视频封面的生成方法、视频发布方法及相关设备
CN115278221A (zh) * 2022-07-29 2022-11-01 重庆紫光华山智安科技有限公司 一种视频质量评估方法、装置、设备及介质
CN115278355A (zh) * 2022-06-20 2022-11-01 北京字跳网络技术有限公司 视频剪辑方法、装置、设备、计算机可读存储介质及产品
CN116580427A (zh) * 2023-05-24 2023-08-11 武汉星巡智能科技有限公司 包含人与宠物互动内容的电子相册制作方法、装置及设备

Citations (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103442252A (zh) * 2013-08-21 2013-12-11 宇龙计算机通信科技(深圳)有限公司 视频处理方法及装置
US20140310748A1 (en) * 2011-10-14 2014-10-16 Google Inc. Creating cover art for media browsers
CN104244024A (zh) * 2014-09-26 2014-12-24 北京金山安全软件有限公司 一种视频封面生成方法、装置及终端
CN104751107A (zh) * 2013-12-30 2015-07-01 中国移动通信集团公司 一种视频关键数据确定方法、装置及设备
CN105323634A (zh) * 2014-06-27 2016-02-10 Tcl集团股份有限公司 一种视频的缩略图生成方法及系统
US20160070962A1 (en) * 2014-09-08 2016-03-10 Google Inc. Selecting and Presenting Representative Frames for Video Previews
CN105704559A (zh) * 2016-01-12 2016-06-22 深圳市茁壮网络股份有限公司 一种海报生成方法及装置
US20160345035A1 (en) * 2015-05-18 2016-11-24 Zepp Labs, Inc. Multi-angle video editing based on cloud video sharing
US20170164027A1 (en) * 2015-12-03 2017-06-08 Le Holdings (Beijing) Co., Ltd. Video recommendation method and electronic device
CN107147939A (zh) * 2017-05-05 2017-09-08 百度在线网络技术(北京)有限公司 用于调整视频直播封面的方法和装置
US20180061459A1 (en) * 2016-08-30 2018-03-01 Yahoo Holdings, Inc. Computerized system and method for automatically generating high-quality digital content thumbnails from digital video
CN107832725A (zh) * 2017-11-17 2018-03-23 北京奇虎科技有限公司 基于评价指标的视频封面提取方法及装置
CN107832724A (zh) * 2017-11-17 2018-03-23 北京奇虎科技有限公司 从视频文件中提取人物关键帧的方法及装置
WO2018108047A1 (zh) * 2016-12-15 2018-06-21 腾讯科技(深圳)有限公司 信息展示图片的生成方法及装置
CN108632668A (zh) * 2018-05-04 2018-10-09 百度在线网络技术(北京)有限公司 视频处理方法及装置
CN108833942A (zh) * 2018-06-28 2018-11-16 北京达佳互联信息技术有限公司 视频封面选取方法、装置、计算机设备及存储介质
CN109165301A (zh) * 2018-09-13 2019-01-08 北京字节跳动网络技术有限公司 视频封面选择方法、装置和计算机可读存储介质
CN109257645A (zh) * 2018-09-11 2019-01-22 传线网络科技(上海)有限公司 视频封面生成方法及装置
CN110381368A (zh) * 2019-07-11 2019-10-25 北京字节跳动网络技术有限公司 视频封面生成方法、装置及电子设备
CN110399848A (zh) * 2019-07-30 2019-11-01 北京字节跳动网络技术有限公司 视频封面生成方法、装置及电子设备
CN110602554A (zh) * 2019-08-16 2019-12-20 华为技术有限公司 封面图像确定方法、装置及设备

Patent Citations (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140310748A1 (en) * 2011-10-14 2014-10-16 Google Inc. Creating cover art for media browsers
CN103442252A (zh) * 2013-08-21 2013-12-11 宇龙计算机通信科技(深圳)有限公司 视频处理方法及装置
CN104751107A (zh) * 2013-12-30 2015-07-01 中国移动通信集团公司 一种视频关键数据确定方法、装置及设备
CN105323634A (zh) * 2014-06-27 2016-02-10 Tcl集团股份有限公司 一种视频的缩略图生成方法及系统
US20160070962A1 (en) * 2014-09-08 2016-03-10 Google Inc. Selecting and Presenting Representative Frames for Video Previews
CN104244024A (zh) * 2014-09-26 2014-12-24 北京金山安全软件有限公司 一种视频封面生成方法、装置及终端
US20160345035A1 (en) * 2015-05-18 2016-11-24 Zepp Labs, Inc. Multi-angle video editing based on cloud video sharing
US20170164027A1 (en) * 2015-12-03 2017-06-08 Le Holdings (Beijing) Co., Ltd. Video recommendation method and electronic device
CN105704559A (zh) * 2016-01-12 2016-06-22 深圳市茁壮网络股份有限公司 一种海报生成方法及装置
US20180061459A1 (en) * 2016-08-30 2018-03-01 Yahoo Holdings, Inc. Computerized system and method for automatically generating high-quality digital content thumbnails from digital video
WO2018108047A1 (zh) * 2016-12-15 2018-06-21 腾讯科技(深圳)有限公司 信息展示图片的生成方法及装置
CN107147939A (zh) * 2017-05-05 2017-09-08 百度在线网络技术(北京)有限公司 用于调整视频直播封面的方法和装置
CN107832725A (zh) * 2017-11-17 2018-03-23 北京奇虎科技有限公司 基于评价指标的视频封面提取方法及装置
CN107832724A (zh) * 2017-11-17 2018-03-23 北京奇虎科技有限公司 从视频文件中提取人物关键帧的方法及装置
CN108632668A (zh) * 2018-05-04 2018-10-09 百度在线网络技术(北京)有限公司 视频处理方法及装置
CN108833942A (zh) * 2018-06-28 2018-11-16 北京达佳互联信息技术有限公司 视频封面选取方法、装置、计算机设备及存储介质
CN109257645A (zh) * 2018-09-11 2019-01-22 传线网络科技(上海)有限公司 视频封面生成方法及装置
CN109165301A (zh) * 2018-09-13 2019-01-08 北京字节跳动网络技术有限公司 视频封面选择方法、装置和计算机可读存储介质
CN110381368A (zh) * 2019-07-11 2019-10-25 北京字节跳动网络技术有限公司 视频封面生成方法、装置及电子设备
CN110399848A (zh) * 2019-07-30 2019-11-01 北京字节跳动网络技术有限公司 视频封面生成方法、装置及电子设备
CN110602554A (zh) * 2019-08-16 2019-12-20 华为技术有限公司 封面图像确定方法、装置及设备

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111862936A (zh) * 2020-07-28 2020-10-30 游艺星际(北京)科技有限公司 生成及发布作品的方法、装置、电子设备和存储介质
CN112149575A (zh) * 2020-09-24 2020-12-29 新华智云科技有限公司 从视频中自动筛选具有汽车部位片段的方法
CN112149575B (zh) * 2020-09-24 2024-05-24 新华智云科技有限公司 从视频中自动筛选具有汽车部位片段的方法
CN112468843A (zh) * 2020-10-26 2021-03-09 国家广播电视总局广播电视规划院 视频去重方法及装置
CN112383830A (zh) * 2020-11-06 2021-02-19 北京小米移动软件有限公司 视频封面确定方法及装置、存储介质
CN112653918B (zh) * 2020-12-15 2023-04-07 咪咕文化科技有限公司 预览视频生成方法、装置、电子设备及存储介质
CN112653918A (zh) * 2020-12-15 2021-04-13 咪咕文化科技有限公司 预览视频生成方法、装置、电子设备及存储介质
CN112954450A (zh) * 2021-02-02 2021-06-11 北京字跳网络技术有限公司 视频处理方法、装置、电子设备和存储介质
CN112911281A (zh) * 2021-02-09 2021-06-04 北京三快在线科技有限公司 一种视频质量评价方法及装置
CN112911281B (zh) * 2021-02-09 2022-07-15 北京三快在线科技有限公司 一种视频质量评价方法及装置
CN113761276A (zh) * 2021-09-09 2021-12-07 平安科技(深圳)有限公司 视频封面选取方法、装置、设备及存储介质
CN114845158A (zh) * 2022-04-11 2022-08-02 广州虎牙科技有限公司 视频封面的生成方法、视频发布方法及相关设备
CN114845158B (zh) * 2022-04-11 2024-06-21 广州虎牙科技有限公司 视频封面的生成方法、视频发布方法及相关设备
CN115278355A (zh) * 2022-06-20 2022-11-01 北京字跳网络技术有限公司 视频剪辑方法、装置、设备、计算机可读存储介质及产品
CN115278355B (zh) * 2022-06-20 2024-02-13 北京字跳网络技术有限公司 视频剪辑方法、装置、设备、计算机可读存储介质及产品
CN115278221B (zh) * 2022-07-29 2024-05-07 重庆紫光华山智安科技有限公司 一种视频质量评估方法、装置、设备及介质
CN115278221A (zh) * 2022-07-29 2022-11-01 重庆紫光华山智安科技有限公司 一种视频质量评估方法、装置、设备及介质
CN116580427A (zh) * 2023-05-24 2023-08-11 武汉星巡智能科技有限公司 包含人与宠物互动内容的电子相册制作方法、装置及设备
CN116580427B (zh) * 2023-05-24 2023-11-21 武汉星巡智能科技有限公司 包含人与宠物互动内容的电子相册制作方法、装置及设备

Also Published As

Publication number Publication date
CN111464833B (zh) 2023-08-04

Similar Documents

Publication Publication Date Title
CN111464833B (zh) 目标图像生成方法、目标图像生成装置、介质及电子设备
CN109145784B (zh) 用于处理视频的方法和装置
CN111327945B (zh) 用于分割视频的方法和装置
CN107911753B (zh) 用于在视频中添加数字水印的方法和装置
CN109844736B (zh) 概括视频内容
CN112954450B (zh) 视频处理方法、装置、电子设备和存储介质
US10796438B2 (en) Method and apparatus for tracking target profile in video
JP4370387B2 (ja) ビデオシーケンスのラベルオブジェクト映像生成装置及びその方法
US9036977B2 (en) Automatic detection, removal, replacement and tagging of flash frames in a video
CN111523566A (zh) 目标视频片段定位方法和装置
US9002175B1 (en) Automated video trailer creation
CN107220652B (zh) 用于处理图片的方法和装置
CN114025219B (zh) 增强现实特效的渲染方法、装置、介质及设备
CN109255035B (zh) 用于构建知识图谱的方法和装置
US10897658B1 (en) Techniques for annotating media content
CN109102484B (zh) 用于处理图像的方法和装置
CN103984778A (zh) 一种视频检索方法及系统
CN114299088A (zh) 图像处理方法及装置
CN109919220B (zh) 用于生成视频的特征向量的方法和装置
CN110248195B (zh) 用于输出信息的方法和装置
CN109816023B (zh) 用于生成图片标签模型的方法和装置
CN113112422B (zh) 图像处理方法、装置、电子设备、计算机可读介质
CN116527956B (zh) 基于目标事件触发的虚拟对象直播方法、装置及系统
JP2005302059A (ja) デジタル映像処理方法及びその装置
CN111311604A (zh) 用于分割图像的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40026163

Country of ref document: HK

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant