CN114598919A - 视频处理方法、装置、计算机设备和存储介质 - Google Patents

视频处理方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN114598919A
CN114598919A CN202210196971.2A CN202210196971A CN114598919A CN 114598919 A CN114598919 A CN 114598919A CN 202210196971 A CN202210196971 A CN 202210196971A CN 114598919 A CN114598919 A CN 114598919A
Authority
CN
China
Prior art keywords
target
video
key frame
frame
adjacent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210196971.2A
Other languages
English (en)
Other versions
CN114598919B (zh
Inventor
程俊彰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202210196971.2A priority Critical patent/CN114598919B/zh
Publication of CN114598919A publication Critical patent/CN114598919A/zh
Application granted granted Critical
Publication of CN114598919B publication Critical patent/CN114598919B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Image Analysis (AREA)

Abstract

本申请涉及一种视频处理方法、装置、计算机设备和存储介质。所述方法包括:获取待处理视频的目标关键帧;对目标关键帧进行对象识别,得到目标关键帧的对象识别结果,对象识别结果包括各识别对象;若目标关键帧中存在目标对象,对目标视频帧中的目标对象进行抹除处理,获得处理后视频,目标对象根据各识别对象的属性信息确定,目标视频帧基于目标关键帧确定。采用本申请实施例的方法,能够有效快速识别出视频的关键帧中是否包含不合理的穿帮镜头,并快速修复视频中的穿帮镜头,提高视频中穿帮镜头的处理效率。

Description

视频处理方法、装置、计算机设备和存储介质
技术领域
本申请涉及人工智能技术领域,特别是涉及一种视频处理方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
背景技术
穿帮是指视频中出现与其设定的背景不相符的场景或物品,例如,古装剧中出现飞机、电线杆、轮胎及拍摄现场的摄像机、收音筒、摄影师和围观群众等。穿帮镜头会对视频的艺术水平、口碑及收视率造成影响。
传统技术中对视频中穿帮镜头的识别和处理,是将视频分发给不同的人进行人工审核,依靠人眼观察,检查出的穿帮镜头仍然保留在视频中,通过后期制作人员进行人工修复,然而这种方式容易遗漏,穿帮镜头的处理效率低。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高视频中穿帮镜头的处理效率的视频处理方法、装置、计算机可读存储介质和计算机程序产品。
一种视频处理方法,所述方法包括:
获取待处理视频的目标关键帧;
对所述目标关键帧进行对象识别,得到所述目标关键帧的对象识别结果,所述对象识别结果包括各识别对象;
若所述目标关键帧中存在目标对象,对目标视频帧中的所述目标对象进行抹除处理,获得处理后视频,所述目标对象根据各所述识别对象的属性信息确定,所述目标视频帧基于所述目标关键帧确定。
在其中一个实施例中,所述对所述目标关键帧进行对象识别,得到所述目标关键帧的对象识别结果,包括:
通过物品识别模型对所述目标关键帧进行对象识别,得到所述目标关键帧的对象识别结果;
所述物品识别模型的训练方式包括:
获取初始图片识别模型,所述初始图片识别模型为利用预定类型物品图像进行训练获得的模型;
利用目标类别视频画面,对所述初始图片识别模型进行训练,获得训练后的所述物品识别模型。
一种视频处理装置,所述装置包括:
关键帧获取模块,用于获取待处理视频的目标关键帧;
对象识别模块,用于对所述目标关键帧进行对象识别,得到所述目标关键帧的对象识别结果,所述对象识别结果包括各识别对象;
视频帧处理模块,用于若所述目标关键帧中存在目标对象,对目标视频帧中的所述目标对象进行抹除处理,获得处理后视频,所述目标对象根据各所述识别对象的属性信息确定,所述目标视频帧基于所述目标关键帧确定。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述的方法的步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述的方法的步骤。
一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现上述的方法的步骤。
上述视频处理方法、装置、计算机设备、计算机可读存储介质和计算机程序产品,通过获取待处理视频的目标关键帧,从而,对目标关键帧进行对象识别,得到目标关键帧的对象识别结果,对象识别结果包括各识别对象,进而若目标关键帧中存在目标对象,对目标视频帧中的目标对象进行抹除处理,获得处理后视频,其中,目标对象根据各识别对象的属性信息确定,目标视频帧基于目标关键帧确定。采用上述实施例方法,可以有效快速识别出视频的关键帧中是否包含不合理的穿帮镜头,在确定存在目标对象时,抹除目标视频帧中的目标对象,可以快速修复视频中的穿帮镜头,提高视频中穿帮镜头的处理效率。
附图说明
图1为一个实施例中视频处理方法的应用环境图;
图2为一个实施例中视频处理方法的流程示意图;
图3为一个具体实施例中视频处理方法的架构示意图;
图4为一个具体实施例中视频处理方法的流程示意图;
图5为一个具体实施例中视频处理方法的处理效果示意图;
图6为一个实施例中视频处理装置的结构框图;
图7为一个实施例中计算机设备的内部结构图;
图8为另一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
在一个实施例中,本申请实施例提供的视频处理方法,可以应用于如图1所示的应用环境中,该应用环境可以涉及到终端102和服务器104,在其他一些实施例中,该应用环境还可以同时涉及到终端106。其中,终端102和终端106通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上,也可以放在云上或其他网络服务器上。
具体地,用户可以通过终端102或终端106将待处理视频上传至服务器104,该待处理视频可以是终端102或终端106自己拍摄得到的视频,也可以是通过其他设备拍摄得到视频后,通过网络传输或者第三方设备传输至终端102或终端106的视频,例如影视剧拍摄时,摄影设备拍摄到视频后,将拍摄的视频传输给终端102或终端106,也可以是终端102或终端106从其他设备获得视频后对其进行进一步处理后得到短视频,例如影视剧拍摄时,摄影设备拍摄到视频后,将拍摄的视频传输给终端102或终端106,终端102或终端106对这些视频进行剪切、组合或者其他处理后得到的视频。
服务器104获取待处理视频的目标关键帧,对目标关键帧进行对象识别,得到目标关键帧的对象识别结果,对象识别结果包括各识别对象。若服务器104根据对象识别结果确定目标关键帧中存在目标对象,则可以对目标视频帧中的目标对象进行抹除处理,其中,目标对象可以根据各识别对象的属性信息确定,目标视频帧可以基于目标关键帧确定。从而,在服务器104中可以生成处理后视频。服务器104可以将处理后视频发送至终端102或终端106,以供终端102或终端106播放或者做其他处理,例如通过发布平台将处理后视频发布到对应的平台上。
在一个实施例中,本申请实施例提供的视频处理方法,在终端102和终端106的数据处理能力可以满足数据处理要求时,应用环境可以只涉及到终端102或终端106。以应用于终端102为例,具体地,用户可以通过终端102获得待处理视频(待处理视频的获取方式可与上述实施例中的相同),终端102可以对目标关键帧进行对象识别,得到目标关键帧的对象识别结果,通过对象识别结果,确定目标关键帧中是否存在目标对象。若确定目标关键帧中存在目标对象,则可以对目标视频帧中的目标对象进行抹除处理,其中,目标对象根据各识别对象的属性信息确定,目标视频帧基于目标关键帧确定。从而,在终端102中可以生成处理后视频,并可以对处理后视频进行播放或者做其他处理,例如通过发布平台将处理后视频发布到对应的平台上。
其中,终端102和终端106可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备,物联网设备可为智能电视、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环等。服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在其中一个实施例中,如图2所示,提供了一种视频处理方法,以该方法应用于图1中的终端102和/或服务器104为例进行说明,包括以下步骤S202至步骤S206:
步骤S202,获取待处理视频的目标关键帧。
其中,目标关键帧是指获取的待处理视频中的关键帧,可以表示为I帧。一个实施例中,待处理视频可以是历史拍摄的视频,还可以是实时拍摄的视频。关键帧是指视频中的角色或者物体运动变化中关键动作所处的一帧视频帧。具体地,当视频中的角色或者物体等产生了任何的变化,包括但不限于是角色或者物体的姿态、数量等产生了变化,则该变化发生时刻和该变化结束时刻所处的视频帧均为关键帧。
在获取待处理视频后,需要先确定待处理视频中的关键帧,进而从关键帧中选择确定目标关键帧。具体地,一个实施例中,可以通过解码的方式确定视频中的关键帧,解码的具体方式可以根据实际技术需要进行选择。其中,解码确定视频中所有的视频帧对应的视频帧信息,根据各视频帧信息确定视频中的关键帧。视频帧信息包括但不限于是视频帧对应的大小、角度、透明度、帧时间、帧类型和帧格式等相关信息。
一个实施例中,若待处理视频是历史拍摄的视频,则可以直接对该待处理视频进行解码,从而确定待处理视频中的所有的关键帧,从而,可以将待处理视频中的任意的关键帧确定为目标关键帧。若待处理视频是实时拍摄的视频,可以对视频流进行解码,则目标关键帧可以是视频流中最近获得的视频帧之前的任意的关键帧。
需要说明的是,目标关键帧可以是获取的待处理视频中的任意一帧关键帧,还可以是相邻的预定数目关键帧。其中,预定数目可以根据实际技术需要进行设置,一个实施例中,预定数目至少为两帧。即目标关键帧为至少一帧关键帧或者是相邻的至少两帧关键帧,也即目标关键帧包括一帧或多帧。
进一步地,无论获取的目标关键帧的数目为多少,在选择确定目标关键帧后,后续的处理过程中,可以按照关键帧对应的时间先后顺序依次确定下一次需要处理的目标关键帧,以避免视频处理过程中遗漏关键帧。
步骤S204,对目标关键帧进行对象识别,得到目标关键帧的对象识别结果,对象识别结果包括各识别对象。
一个实施例中,确定目标关键帧后,需要先对目标关键帧中包含的对象进行对象识别,进而在后续确定目标关键帧中是否存在目标对象。其中,目标关键帧中包含的对象是指角色或者物品,对目标关键帧进行对象识别,将识别到的目标关键帧中包含的对象称为识别对象,获得的对象识别结果包括各识别对象的相关信息,包括但不限于是各识别对象的名称、类型、所属地理位置、生产地点等属性信息,还包括各识别对象在目标关键帧中所在的位置区域等。
其中,可以通过任何可能的方式对目标关键帧进行对象识别,得到目标关键帧的对象识别结果。一些实施例中,可以通过物品识别模型对目标关键帧进行对识别,得到目标关键帧的对象识别结果。物品识别模型的模型结构和模型类型可以根据实际技术需要进行选择和设置。其中,物品识别模型的训练方式可以按照以下步骤S2041和步骤S2042的方式进行,具体包括:
步骤S2041,获取初始图片识别模型,初始图片识别模型为利用预定类型物品图像进行训练获得的模型。
其中,预定类型物品图像可以是获取的第三方公开的数据集,还可以来自常见的生活物品图像,还可以是人工标记的图像集等,预定类型物品图像的来源不限,预定类型可以包括预定年代类型、预定地理位置类型等,例如,预定年代类型可以包括古代类型和现代类型,预定地理位置类型可以包括国内相应的地理位置类型、国外相关的地理位置类型,每种类型下可以包括多种多样的物品,例如,服装、道具、雕塑、建筑等。将利用预定类型物品图像进行训练获得的模型称为初始图片识别模型。
一个实施例中,初始图片识别模型的模型结构和模型类型可以根据实际技术需要进行选择和设置,初始图片识别模型可以通过对待训练图片识别模型进行训练得到,训练过程可以包括步骤S20411至步骤S20413:
步骤S20411,获取训练样本集和测试样本集,训练样本集和测试样本集中的样本为预定类型物品图像。
其中,获取预定类型物品图像后,可以按照预定比例将预定类型物品图像划分为训练样本集和测试样本集,预定比例可以根据实际技术需要进行设置,例如,随机选取预定类型物品图像的90%作为训练样本集,预定类型物品图像的10%作为测试样本集。
步骤S20412,采用训练样本集对待训练图片识别模型进行训练,通过训练得到的图片识别模型对测试样本集中的样本进行检测,获得测试样本集中的样本的图片检测结果。
其中,图片检测结果可以是样本中包含的各识别物品、各识别物品的类型和识别物品所在的位置区域等相关属性信息。
步骤S20413,若根据图片检测结果确定满足训练结束条件,将训练得到的图片识别模型确定为初始图片识别模型,否则,调整待训练图片识别模型的模型参数,返回采用训练样本集对待训练图片识别模型进行训练的步骤。
其中,训练结束条件可以根据实际技术需要进行设置,例如,可以设置为达到预设的迭代次数,还可以设置为测试样本集的损失收敛等条件。若根据图片检测结果确定未满足训练结束条件,则调整待训练图片识别模型的模型参数,并返回步骤S20412进行训练,若根据图片检测结果确定满足训练结束条件,则将最后得到的图片识别模型确定为初始图片识别模型。
步骤S2042,利用目标类别视频画面,对初始图片识别模型进行训练,获得训练后的物品识别模型。
例如,若视频为古代类型的影视剧视频,则其中的一些物品在现代生活中不常见,因此,还需要结合具体的视频类型画面对初始图片识别模型进行优化训练,以提高该模型进行物品识别的效果。
具体地,利用目标类别视频画面,对初始图片识别模型进行训练,获得训练后的物品识别模型。物品识别模型的训练方式可以与上述实施例中初始图片识别模型的训练方式相同,在此不再赘述。
其中,目标类别视频画面包括但不限于是需要进行视频处理的各种类型的影视剧视频画面。例如,若需要对古代类型的影视剧视频进行穿帮镜头的识别时,目标类别视频画面可以是古代类型的影视剧视频画面,若需要对现代类型的影视剧视频进行穿帮镜头的识别时,目标类别视频画面可以是现代类型的影视剧视频画面。若需要对国内相关的影视剧视频进行穿帮镜头的识别时,目标类别视频画面可以是国内相关的影视剧视频画面,若需要对国外相关的影视剧视频进行穿帮镜头的识别时,目标类别视频画面可以是国外相关的影视剧视频画面。
需要说明的是,此处所指的目标类型视频画面主要为单一类型的影视剧视频画面,例如,古代类型的影视剧视频画面和现代类型的影视剧视频画面,或者,国内相关的影视剧视频画面和国外相关的影视剧视频画面。对于复合类型的影视剧视频画面,例如,穿越类型的影视剧视频画面,或者,国内外交错的影视剧视频画面。在对目标关键帧进行对象识别之前还需要进行部分附加处理,附加处理的方式可以是分段处理、标记处理等方式,具体可根据实际技术需要进行设置。例如,当穿越类型的影视剧视频需要进行视频处理时,可以先将其中的古代类型部分视频和现代类型部分视频进行划分,或者,当国内外交错的影视剧视频需要进行视频处理时,可以先将其中的国内相关部分视频和国外相关部分视频进行划分,再针对划分后的视频段分别执行相应处理,以提高视频处理的准确性。
步骤S206,若目标关键帧中存在目标对象,对目标视频帧中的目标对象进行抹除处理,获得处理后视频,目标对象根据各识别对象的属性信息确定,目标视频帧基于目标关键帧确定。
其中,目标对象是指出现在目标关键帧中的不合理的对象,也可以称为是穿帮物品。例如,若视频为古代类型的影视剧视频,在该视频的目标关键帧中出现了现代类型的对象,包括但不限于是飞机、电线杆、轮胎及拍摄现场的摄像机、收音筒、摄影师和围观群众等,则上述的现代类型的对象即为该目标关键帧中的不合理的对象,也即目标对象。若目标关键帧中存在目标对象,也可以称为该目标关键帧中存在穿帮镜头。
一个实施例中,在对目标关键帧进行对象识别,得到目标关键帧的对象识别结果后,可以通过视频相关的属性信息,确定目标关键帧中是否存在目标对象,即,目标对象可以根据各识别对象的属性信息确定。其中,属性信息包括但不限于是视频所属的年代信息、地理位置信息等或者任何可能的其他属性信息。目标关键帧中的目标对象具体可以采用步骤S2061至步骤S2062的方式确定,包括:
步骤S2061,将各识别对象对应的属性信息,与目标关键帧所属视频段的视频段属性类别进行匹配。
其中,在获得目标关键帧的对象识别结果后,可以根据对象识别结果中包含的各识别对象的类型,确定目标关键帧中的各识别对象对应的属性信息。具体地,预先创建了识别对象数据库,在识别对象数据库中预先存储了各识别对象的预设类型以及预设类型对应的属性信息,通过各识别对象的类型进行匹配确定即可。需要说明的是,该识别对象数据库可以实时进行更新,以扩充数据库内容。
一个实施例中,存在虽然目标关键帧中的各识别对象处于同一属性,但是各识别对象所属的属性信息与目标关键帧所在的视频所属的属性信息完全不符的情况,例如,若属性信息是指年代信息,以穿越类型的影视剧视频为例,古代类型的影视剧视频段与现代类型的影视剧视频段穿插交错,一个现代类型的物品,对于古代类型的影视剧视频段而言不合理,对于现代类型的影视剧视频段而言合理,因此,在确定目标关键帧中的各识别对象对应的属性信息后,还需要将其与目标关键帧所属视频段的视频段属性类别进行匹配,以提高目标对象确定的准确性。
其中,可以采用任意一种可实现的方式确定目标关键帧所属视频段的视频段属性类别。具体地,一个实施例中,目标关键帧所属视频段的视频段属性类别的确定方式,可以是根据目标关键帧的帧时间确定,其中,帧时间是指目标关键帧的时间戳,具体可以包括以下步骤S20611至步骤S20612:
步骤S20611,根据目标关键帧的帧时间,确定目标关键帧所属的视频段。
其中,可以通过目标关键帧对应的视频帧信息,确定目标关键帧的帧时间,并根据目标关键帧的帧时间,确定该帧时间所处的视频段的帧时间范围,以确定该目标关键帧所属的视频段。
步骤S20612,根据预设的视频段与属性类别的对应关系,确定目标关键帧所属视频段的视频段属性类别。
其中,预设了视频段与属性类别的对应关系,在确定目标关键帧所属的视频段后,即可确定目标关键帧所属的该视频段对应的视频段属性类型。例如,若属性信息是指年代信息,以穿越类型的影视剧视频为例,预先确定该视频的第一视频段为古代类型,该视频的第二视频段为现代类型,若目标关键帧的帧时间处于第一视频段对应的第一帧时间范围内,则确定目标视频帧所属的视频段为第一视频段,对应的视频段年代类别为古代类型,若目标关键帧的帧时间处于第二视频段对应的第二帧时间范围内,则确定目标视频帧所属的视频段为第二视频段,对应的视频段年代类别为现代类型。
一个实施例中,目标关键帧所属视频段的视频段属性类别的确定方式,可以是根据视频段的关键帧中的各识别对象的属性信息确定,具体可以包括以下步骤S20613至步骤S20614:
步骤S20613,统计目标识别对象的属性信息;目标识别对象包括目标关键帧的各识别对象,或者,目标识别对象包括目标关键帧所属视频段的各关键帧的识别对象。
其中,目标识别对象是指需要进行属性信息统计的识别对象。由于视频段的关键帧中的各识别对象,可以是已经确定的识别对象,还可以是实时确定的识别对象。因此,目标识别对象可以是一帧目标关键帧包含的各识别对象,或者,还可以是目标关键帧所属的视频段中的各关键帧分别包含的各识别对象。
例如,若待处理视频为历史获得的视频,则可以确定目标关键帧所属的视频段中的所有的关键帧,对所有的关键帧进行对象识别,此时,可以统计的是目标关键帧所属的视频段中的各关键帧分别包含的各识别对象。若待处理视频为实时获得的视频,则可以对该目标关键帧进行对象识别,此时,可以统计的是目标关键帧的各识别对象。
具体地,可以通过统计目标识别对象的属性信息,以进一步确定其中的大部分识别对象的属性信息,用以表征该目标视频帧所属视频段的视频段属性类别。
步骤S20614,根据大于或等于预定比例的识别对象的属性信息的共通属性,确定目标关键帧所属视频段的视频段属性类别。
其中,预定比例可以根据实际技术需要进行设置,其可以是预设的固定参数,还可以在物品识别模型进行对象识别的过程中进行实时调整,一个实施例中预设比例可以设置为95%左右。具体地,在统计目标识别对象的属性信息后,根据大于或等于预设比例的识别对象的属性信息的共通属性,确定目标视频帧所属视频段的视频段属性类型。
其中,共通属性是指多个识别对象的属性信息之间共同属于的属性,是各识别对象的属性信息的共同子集,或者说各识别对象的属性信息共同覆盖的属性。以属性信息是年代信息为例,共通属性可以是共通年代时间段,即共通年代时间段是指多个识别对象的年代信息之间共同属于的年代时间段,是各识别对象的年代信息的共同子集,或者说各识别对象的年代信息共同覆盖的时间段。
例如,各识别对象包括识别对象1、识别对象2、识别对象3,识别对象1所属年代的时间段为T1-T9,识别对象2所属年代的时间段为T2-T8,而识别对象3所属年代的时间段为T3-T10,则识别对象1、识别对象2、识别对象3所属的共通时间段为T3-T8,则将该时间段T3-T8确定为共通年代时间段,并结合共通年代时间段T3-T8确定目标视频帧所属视频段的视频段年代类型。
一个实施例中,目标关键帧所属视频段的视频段属性类别的确定方式,还可以是手动预设确定。具体地,预先设置目标关键帧所在视频的属性类别,并将预设的目标关键帧所在视频的属性类别,确定为目标关键帧所属视频段的视频段属性类别。
其中,在将各识别对象对应的属性信息,与目标关键帧所属视频段的视频段属性类别进行匹配后,即可通过下述步骤确定目标关键帧中的目标对象。
步骤S2062,若存在与视频段属性类别不一致的属性信息,确定目标关键帧中存在目标对象,并将不一致的属性信息对应的识别对象确定为目标对象。
其中,若在各识别对象中存在任意一个识别对象对应的属性信息与视频段属性类别不一致,即存在与视频段属性类别不一致的属性信息,此时,即确定该目标关键帧中存在目标对象,并将不一致的属性信息对应的该识别对象确定为目标对象,该目标对象即为该目标关键帧中的不合理的对象,即在后续过程中需要对该目标关键帧以及该目标对象进行相应的处理。
一个实施例中,由于目标关键帧中存在的目标对象为不合理的对象,因此,需要将该目标对象进行抹除处理,进一步地,为了确保视频画面的连贯性和美观性,提高用户的观影体验,可以将抹除处理后的该目标对象的区域进行修复处理。
需要说明的是,由于视频中不仅包含关键帧,在相邻的两个关键帧之间还存在非关键帧,这类非关键帧也可以称之为过渡帧,因此,若目标关键帧中存在目标对象,除了可以将该目标关键帧中的该目标对象进行处理,还可以针对各过渡帧进行相应处理。
一个实施例中,若目标关键帧中存在目标对象,则需要确定待处理的目标视频帧,并抹除目标视频帧中的目标对象。其中,目标视频帧可以是目标关键帧,或者,目标视频帧还可以包括目标关键帧、以及目标视频帧与相邻的相邻关键帧之间的非关键帧,即过渡帧,也即目标视频帧基于目标关键帧确定。具体地,对该目标对象进行处理的方式可以是抹除处理,抹除处理的具体方式可以根据实际技术需要进行设置,例如,可以采用软件的方式,可以是删除该目标对象的信息,或者,还可以是采用任何可能的方式将该目标对象的图像进行覆盖等。
一个实施例中,在对目标视频帧中的目标对象进行抹除处理,且抹除后的该目标对象所在区域无需修复处理时,对目标视频帧中的目标对象进行抹除处理,进一步获得处理后视频,可以包括以下步骤S2063至步骤S2064:
步骤S2063,对各目标视频帧中的目标对象进行抹除处理。
其中,目标视频帧包括:目标关键帧与相邻的相邻关键帧之间的视频帧、以及目标关键帧。与目标关键帧相邻的关键帧称为相邻关键帧,相邻关键帧可以是目标关键帧的相邻的上一个关键帧,还可以是目标关键帧相邻的下一个关键帧。需要说明的是,若目标关键帧为相邻的预定数目关键帧,例如,相邻的两帧关键帧,则上述的相邻关键帧也可以称为是目标关键帧,此时,目标关键帧与相邻的相邻关键帧之间的视频帧,即两帧目标关键帧之间的视频帧。
具体地,对各目标视频帧中的目标对象进行抹除处理,即抹除目标关键帧、以及目标视频帧与相邻的相邻关键帧之间的视频帧中的目标对象。此时,对于各视频帧,视频帧的内容产生了变化,而视频帧的数量、帧时间等未产生变化。
步骤S2064,用抹除处理了目标对象的视频帧,分别替换对应的各目标视频帧,获得修复后的目标视频帧。
其中,上述处理步骤中,视频帧的数量、帧时间等未产生变化,因此,若对各目标视频帧中的目标对象进行抹除处理后,该目标对象所在区域无需修复处理,则可以直接用抹除处理了目标对象的视频帧,分别替换对应的各目标视频帧,将替换后的目标视频帧称为修复后的目标视频帧,即可获得处理后视频。
采用上述实施例的方法,在对各目标视频帧中的目标对象进行抹除处理后,无需进行修复处理时,可以不改变各目标视频帧的数量、帧时间等信息,直接采用抹除处理了目标对象的视频帧对各目标视频帧进行对应替换,可以提高目标视频帧的处理效率。
一个实施例中,在对目标视频帧中的目标对象进行抹除处理,抹除处理后的该目标对象所在区域需要修复处理时,对目标视频帧中的目标对象进行抹除处理,进一步获得处理后视频,可以包括以下步骤S2065至步骤S2067:
步骤S2065,抹除各目标视频帧中的目标对象。
其中,目标视频帧包括:目标关键帧与相邻的相邻关键帧之间的视频帧、以及目标关键帧。与目标关键帧相邻的关键帧称为相邻关键帧,相邻关键帧可以是目标关键帧的相邻的上一个关键帧,还可以是目标关键帧相邻的下一个关键帧。需要说明的是,若目标关键帧为相邻的预定数目关键帧,例如,相邻的两帧关键帧,则上述的相邻关键帧也可以称为是目标关键帧。此时,目标关键帧与相邻的相邻关键帧之间的视频帧,即两帧目标关键帧之间的视频帧。
具体地,对各目标视频帧中的目标对象进行抹除处理,即抹除目标关键帧、以及目标视频帧与相邻的相邻关键帧之间的视频帧中的目标对象。此时,对于各视频帧,视频帧的内容产生了变化,而视频帧的数量、帧时间等未产生变化。
步骤S2066,对抹除后的各目标视频帧中目标对象对应的区域进行修复,获得修复后的各目标视频帧。
其中,在对各目标视频帧中的目标对象进行抹除处理后,对抹除后的各目标视频帧中目标对象对应的区域进行修复处理,以增强视觉质量。修复处理的具体方式可以根据实际技术需要进行设置,一个实施例中,修复处理可以是填充处理,即对抹除后的各目标视频帧中目标对象对应的区域进行填充。
一个实施例中,可以根据未抹除目标对象之前的各目标视频帧中目标对象的相邻识别对象的信息,对抹除后的各目标视频帧中目标对象对应的区域进行修复。相邻识别对象是指与目标对象的边界相邻的预设范围内的识别对象。预设范围可以根据实际技术需要确定,例如,预设范围可以是360°范围。相邻识别对象的信息包括但不限于是相邻识别对象的名称、颜色、纹理等信息。
步骤S2067,使用修复后的各目标视频帧,分别替换对应的目标视频帧,获得处理后视频。
其中,上述处理步骤中,视频帧的数量、帧时间等未产生变化,因此,可以使用修复后的各目标视频帧,分别替换对应的目标视频帧,即可获得处理后视频。
采用上述实施例的方法,在抹除各目标视频帧中的目标对象后,需要进行修复处理时,针对每个目标视频帧进行修复处理,进而获得修复后的各目标视频帧,可以提高目标视频帧的处理效果。
一个实施例中,在对目标视频帧中的目标对象进行抹除处理,且抹除后的该目标对象所在区域无需修复处理时,对目标视频帧中的目标对象进行抹除处理,进一步获得处理后视频,可以包括以下步骤S2068至步骤S2070:
步骤S2068,对目标关键帧中的目标对象进行抹除处理,获得处理后目标关键帧。
其中,目标视频帧包括目标关键帧,目标关键帧可以是一帧关键帧,还可以是相邻的预定数目关键帧。具体地,对目标视频帧中的目标对象进行抹除处理,即对目标关键帧中的目标对象进行抹除处理,从而,获得处理后目标关键帧。
步骤S2069,根据处理后目标关键帧、以及相邻的相邻关键帧,进行视频帧插值处理,获得插值处理后的视频帧。
其中,与目标关键帧相邻的关键帧称为相邻关键帧,相邻关键帧可以是目标关键帧的相邻的上一个关键帧,还可以是目标关键帧相邻的下一个关键帧。需要说明的是,若目标关键帧为相邻的预定数目关键帧,例如,相邻的两帧关键帧,则上述的相邻关键帧也可以称为是目标关键帧。
一个实施例中,在对目标关键帧中的目标对象进行抹除处理后,还需要确定相邻关键帧中是否存在不合理的目标对象,以便确定后续的视频帧插值处理所使用的是何种关键帧。
需要说明的是,确定与目标关键帧相邻的相邻关键帧是否存在目标对象的方式,可以与确定目标关键帧中是否存在目标对象的方式相同。若相邻关键帧中不存在目标对象,则后续的视频帧插值处理所使用的相邻关键帧为原始的相邻关键帧,可以根据处理后目标关键帧,以及该相邻关键帧进行后续处理即可。若相邻关键帧中存在目标对象,则可以对相邻关键帧执行步骤S2068中的方式,以获得相邻关键帧对应的处理后相邻关键帧,再执行后续处理。即,若相邻关键帧中存在目标对象,相邻关键帧需要为对相邻关键帧中的目标对象进行抹除处理后获得的处理后相邻关键帧。
具体地,根据处理后目标关键帧、以及与目标关键帧相邻的相邻关键帧,生成该处理后目标关键帧与该相邻关键帧之间的各视频帧,也即过渡帧,用以提高帧速率,提高视觉平滑度,增强视觉质量。一个实施例中,可以采用视频帧插值处理的方式生成各视频帧,将生成的各视频帧称为插值处理后的视频帧。其中,视频帧插值处理的方式可以采用任意一种可实现的方式,在此不做限制。
步骤S2070,用处理后目标关键帧替换目标关键帧,用插值处理后的视频帧替换目标关键帧与相邻关键帧之间的视频帧,获得处理后视频。
其中,用处理后目标关键帧替换不合理的目标关键帧,用插值处理后的视频帧替换目标关键帧与相邻关键帧之间的视频帧,此时,该目标关键帧、以及该目标关键帧与相邻关键帧之间的视频帧均为合理的视频帧,即可获得处理后视频。
需要说明的是,若生成的插值处理后的视频帧与原始的视频帧相对应,即插值处理后的视频帧的数量、视频帧之间的时间间隔、视频帧对应的帧时间等参数与原始的视频帧的参数一致,此时,则可以根据插值处理后的视频帧的参数,依次用插值处理后的视频帧替换目标关键帧与相邻关键帧之间的视频帧即可。若生成的插值处理后的视频帧与原始的视频帧不对应,即插值处理后的视频帧的数量、视频帧之间的时间间隔、视频帧对应的帧时间等参数与原始的视频帧的参数不一致,此时,则可以先将目标关键帧与相邻关键帧之间的视频帧进行删除,并根据插值处理后的视频帧的参数,将插值处理后的视频帧插入至处理后目标关键帧与相邻关键帧之间。
一个实施例中,在对目标视频帧中的目标对象进行抹除处理,抹除后的该目标对象所在区域需要修复处理时,对目标视频帧中的目标对象进行抹除处理,进一步获得处理后视频,可以包括以下步骤S2071至步骤S2073:
步骤S2071,对目标关键帧中的目标对象进行抹除处理,并对抹除后的目标关键帧中目标对象对应的区域进行修复,获得修复后目标关键帧。
其中,目标视频帧包括目标关键帧,目标关键帧可以是一帧关键帧,还可以是相邻的预定数目关键帧。具体地,对目标视频帧中的目标对象进行抹除处理,即对目标关键帧中的目标对象进行抹除处理。
在对目标关键帧中的目标对象进行抹除处理后,还可以对该目标对象所在的区域进行修复处理,以增强视觉质量。修复处理的具体方式可以根据实际技术需要进行设置,一个实施例中,修复处理可以是填充处理,即对抹除后的目标关键帧中目标对象对应的区域进行填充。将修复处理后获得的目标关键帧称为修复后目标关键帧。
一个实施例中,可以是根据未抹除目标对象之前的目标关键帧中目标对象的相邻识别对象的信息,对抹除后的目标关键帧中目标对象对应的区域进行修复。其中,相邻识别对象是指与目标对象的边界相邻的预设范围内的识别对象。预设范围可以根据实际技术需要确定,例如,预设范围可以是360°范围。相邻识别对象的信息包括但不限于是相邻识别对象的名称、颜色、纹理等信息。
步骤S2072,根据修复后目标关键帧、以及与目标关键帧相邻的相邻关键帧,进行视频帧插值处理,获得插值处理后的视频帧。
其中,与目标关键帧相邻的关键帧称为相邻关键帧,相邻关键帧可以是目标关键帧的相邻的上一个关键帧,还可以是目标关键帧相邻的下一个关键帧。一个实施例中,在对目标关键帧中的目标对象进行抹除处理后,还需要确定相邻关键帧中是否存在不合理的目标对象,以便确定后续的视频帧插值处理所使用的是何种关键帧。
需要说明的是,确定与目标关键帧相邻的相邻关键帧是否存在目标对象的方式,可以与确定目标关键帧中是否存在目标对象的方式相同。若相邻关键帧中不存在目标对象,则后续的视频帧插值处理所使用的相邻关键帧为原始的相邻关键帧,可以根据处理后目标关键帧,以及该相邻关键帧进行后续处理即可。若相邻关键帧中存在目标对象,则可以对相邻关键帧执行步骤S2071中的方式,以获得相邻关键帧对应的修复后相邻关键帧,再执行后续处理。即,若相邻关键帧中存在目标对象,相邻关键帧需要为对相邻关键帧中的目标对象进行抹除处理和修复处理后获得的处理后相邻关键帧。
具体地,根据修复后目标关键帧、以及与目标关键帧相邻的相邻关键帧,生成该修复后目标关键帧与该相邻关键帧之间的各视频帧,也即过渡帧,用以提高帧速率,提高视觉平滑度,增强视觉质量。一个实施例中,可以采用视频帧插值处理的方式生成各视频帧,将生成的各视频帧称为插值处理后的视频帧。其中,视频帧插值处理的方式可以采用任意一种可实现的方式,在此不做限制。
步骤S2073,用修复后目标关键帧替换目标关键帧,用插值处理后的视频帧替换目标关键帧与相邻关键帧之间的视频帧,获得处理后视频。
其中,用修复后目标关键帧替换不合理的目标关键帧,用插值处理后的视频帧替换目标关键帧与相邻关键帧之间的视频帧,此时,该目标关键帧、以及该目标关键帧与相邻关键帧之间的视频帧均为合理的视频帧,即可获得处理后视频。
采用上述实施例的方法,通过先对目标关键帧中的目标对象进行抹除处理,再通过修复处理后获得修复后目标关键帧,进而通过视频帧插值处理的方式生成关键帧之间的视频帧,而不是对每个视频帧中的目标对象也执行相应的抹除处理和修复处理,可以有效提高视频帧处理的效率。
需要说明的是,一个实施例中,确定相邻视频帧中是否存在目标对象的方式,还可以通过以下方式确定。具体地,若目标关键帧中不存在目标对象,可以直接获取与目标关键帧相邻的预设间隔关键帧。其中,预设间隔可以根据实际技术需要进行设置,例如,可以设置为目标关键帧的相邻关键帧的相邻关键帧,即预设间隔为2。具体地,若相邻关键帧为目标关键帧的下一个关键帧,可以直接获取与相邻关键帧相邻的下一个关键帧中是否存在目标对象。例如,视频包括关键帧1、关键帧2、关键帧3……关键帧N,若目标关键帧为关键帧1,目标关键帧的相邻关键帧为关键帧2,目标关键帧的相邻的预设间隔关键帧为关键帧3。
具体地,若目标关键帧的预设间隔关键帧中也不存在目标对象,则确定与目标关键帧相邻的相邻关键帧中不存在目标对象,采用本实施例的方式,可以不必针对每一个关键帧进行目标对象的确定,以此提高视频帧的处理效率。
上述视频处理方法中,通过获取待处理视频的目标关键帧,从而,对目标关键帧进行对象识别,得到目标关键帧的对象识别结果,对象识别结果包括各识别对象,进而若目标关键帧中存在目标对象,对目标视频帧中的目标对象进行抹除处理,获得处理后视频,其中,目标对象根据各识别对象的属性信息确定,目标视频帧基于目标关键帧确定。采用上述实施例方法,可以有效快速识别出视频的关键帧中是否包含不合理的穿帮镜头,在确定存在目标对象时,抹除目标视频帧中的目标对象,可以快速修复视频中的穿帮镜头,提高视频中穿帮镜头的处理效率,进一步地,还可以确保视频画面的连贯性和美观性,提高用户的观影体验。
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及一个具体实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
一个具体实施例中,以该视频处理方法应用于单一类型的影视剧视频的穿帮镜头的识别和处理为例,单一类型的影视剧视频可以是古代类型的影视剧视频或者现代类型的影视剧视频。用户可以通过终端将待处理的视频上传至计算机设备中,在该计算机设备中对上传的影视剧视频进行处理的具体步骤如下:
获取待处理视频,通过解码的方式获得该视频的所有的关键帧。例如,通过解码后,待处理视频包括:关键帧1、视频帧2、视频帧3、关键帧4、视频帧5、视频帧6、关键帧7等,则第1、4和7帧为关键帧。以按照时间先后顺序进行视频处理为例,则关键帧1相邻的相邻关键帧为关键帧4,关键帧4相邻的相邻关键帧为关键帧7,关键帧1与关键帧4之间的非关键帧为视频帧2和视频帧3,关键帧4与关键帧7之间的非关键帧为视频帧5和视频帧6。
通过预先训练的物品识别模型分别对各关键帧进行对象识别,获得对象识别结果,对象识别结果为各关键帧中的识别对象的名称、类型、所属地理位置、生产地点等属性信息,还包括识别对象在关键帧中所在的位置区域;一个实施例中,该物品识别模型的训练方式包括:获取初始图片识别模型,初始图片识别模型为利用预定类型物品图像进行训练获得的模型;利用目标类别视频画面,对初始图片识别模型进行训练,获得训练后的物品识别模型。
以下实施例以识别出待处理视频中识别对象的年代穿帮为例,例如,现代物品在古代类型影视剧视频中属于穿帮物品,该物品所对应的镜头为穿帮镜头。
根据各识别对象的名称和类型,确定各识别对象对应的年代信息,并统计目标识别对象的年代信息,其中,目标识别对象包括该视频的所有的关键帧中的识别对象,根据大于或等于预定比例的识别对象的年代信息的共通年代时间段,确定该视频的视频段年代类别;一个实施例中,以识别确定该视频的视频段年代类别是古代类型为例。
以每次选取一帧关键帧为例,即目标关键帧为一帧关键帧。将该视频的各关键帧中的任意一帧关键帧确定为目标关键帧Ia,确定目标关键帧Ia中是否存在目标对象;其中,将该目标视频帧Ia中的各识别对象对应的年代信息,与视频段年代类别进行匹配,若存在与视频段年代类别不一致的年代信息,确定存在目标对象,并将不一致的年代信息对应的识别对象确定为目标对象。
若目标关键帧Ia中存在目标对象,对目标关键帧Ia中的目标对象进行抹除处理,并对抹除后的目标关键帧Ia中目标对象对应的区域进行修复,获得修复后目标关键帧Ia′。需要说明的是,在对目标关键帧Ia中的目标对象进行抹除处理后,是否需要对目标对象对应的区域进行修复可以根据实际情况确定,可以进行修复处理,也可以不进行修复处理。
根据修复后目标关键帧Ia′,以及与目标关键帧Ia相邻的相邻关键帧Ib所对应的修复后相邻关键帧Ib′,进行视频帧插值处理,生成P帧或B帧,P帧可以表示本视频帧与相邻的之前的一个关键帧(或P帧)的差别,B帧可以记录本视频帧与前后视频帧的差别;一个实施例中,若相邻关键帧Ib中不存在目标对象,该修复后相邻关键帧Ib′即为相邻关键帧Ib本身,若相邻关键帧Ib中存在目标对象,则执行与目标关键帧Ia相同的处理方式,获得修复后相邻关键帧Ib’。
用修复后目标关键帧Ia′替换目标关键帧Ia,用插值处理后的视频帧替换目标关键帧Ia与相邻关键帧Ib之间的视频帧。
然后,将修复后相邻关键帧Ib′确定为下一个目标关键帧,直至视频中所有的关键帧处理完毕,最终获得处理后视频。
一个具体实施例中,以该视频处理方法应用于复合类型的影视剧视频的穿帮镜头的识别和处理为例,复合类型的影视剧视频可以是穿越类型的影视剧视频,该视频中的古代类型和现代类型的视频画面交错存在。用户可以通过终端将待处理的视频上传至计算机设备中,在该计算机设备中对上传的影视剧视频进行处理的具体步骤如下:
获取待处理视频,通过解码的方式获得该视频的所有的关键帧。
通过预先训练的物品识别模型分别对各关键帧进行对象识别,获得对象识别结果,对象识别结果为各关键帧中的识别对象的名称、类型、所属地理位置、生产地点等属性信息,还包括识别对象在关键帧中所在的位置区域。
以下实施例以识别出待处理视频中识别对象的年代穿帮为例,例如,现代物品在古代类型影视剧视频中属于穿帮物品,该物品所对应的镜头为穿帮镜头。
根据各识别对象的名称和类型,确定各识别对象对应的年代信息,并统计目标识别对象的年代信息,其中,目标识别对象包括该视频的所有的关键帧中的识别对象,根据大于或等于预定比例的识别对象的年代信息的共通年代时间段,确定视频段年代类别,根据确定的视频段年代类别,对该视频进行划分,分别针对不同类型的视频段年代类别的视频段进行处理。
以每次选取一帧关键帧为例,即目标关键帧为一帧关键帧。将该视频的各关键帧中的任意一帧关键帧确定为目标关键帧Ia,确定目标关键帧Ia中是否存在目标对象;其中,根据该目标视频帧Ia的帧时间,确定该目标视频帧Ia的所属的视频段,确定该视频段对应的视频段年代类别;将该目标视频帧Ia中的各识别对象对应的年代信息,与视频段年代类别进行匹配,若存在与视频段年代类别不一致的年代信息,确定存在目标对象,并将不一致的年代信息对应的识别对象确定为目标对象。
若目标关键帧Ia中存在目标对象,对目标关键帧Ia中的目标对象进行抹除处理,并对抹除后的目标关键帧Ia中目标对象对应的区域进行修复,获得修复后目标关键帧Ia′。需要说明的是,在对目标关键帧Ia中的目标对象进行抹除处理后,是否需要对目标对象对应的区域进行修复可以根据实际情况确定,可以进行修复处理,也可以不进行修复处理。
根据修复后目标关键帧Ia′,以及与目标关键帧Ia相邻的相邻关键帧Ib所对应的修复后相邻关键帧Ib′,进行视频帧插值处理,生成P帧或B帧;一个实施例中,若相邻关键帧Ib中不存在目标对象,该修复后相邻关键帧Ib′即为相邻关键帧Ib本身,若相邻关键帧Ib中存在目标对象,则执行与目标关键帧Ia相同的处理方式,获得修复后相邻关键帧Ib’。
用修复后目标关键帧Ia′替换目标关键帧Ia,用插值处理后的视频帧替换目标关键帧Ia与相邻关键帧Ib之间的视频帧。
然后,将修复后相邻关键帧Ib′确定为下一个目标关键帧,直至视频中所有的关键帧处理完毕,最终获得处理后视频。
一个具体实施例中,以该视频处理方法涉及一台计算机设备,计算机设备包括视频编辑平台和图像处理平台为例,如图3所示为视频处理方法的架构示意图,在视频编辑平台和图像处理平台中可以分别执行数据处理,如图4所示为视频处理方法的流程示意图,该视频处理方法的具体步骤如下:
用户通过视频编辑平台上传视频,以该视频是古代类型的影视剧视频为例,视频编辑平台获取用户上传的视频,并将视频存储在视频平台数据服务器中,通过解码的方式获得该视频的关键帧。
以每次选取两帧关键帧为例,即目标关键帧包括相邻的两帧关键帧。从关键帧中选取确定其中一个目标关键帧Ia,以及确定与该目标关键帧相邻的相邻关键帧Ib,其中,确定的相邻关键帧Ib也为目标关键帧。在以下实施例中为了方便描述,将两帧关键帧仍然分别称为目标关键帧Ia与相邻关键帧Ib。
将目标关键帧Ia与相邻关键帧Ib发送至图像处理平台中进行图像处理;其中,若视频是历史拍摄的视频,通过解码的方式可以确定视频中的所有的关键帧,可以将视频中的任意相邻的两帧关键帧确定为目标关键帧,若视频是实时拍摄的视频,可以对视频流进行解码,目标关键帧可以是视频流中最近获得的视频帧之前的任意相邻的两帧关键帧。
在图像处理平台中,通过预先训练的物品识别模型分别对目标关键帧Ia与相邻关键帧Ib进行对象识别,获得对应的对象识别结果;其中,对象识别结果为关键帧中分别存在的识别对象的名称、类型、所属地理位置、生产地点等属性信息,以及识别对象在关键帧中所在的位置区域;物品识别模型是结合预定类型物品图像、古代类型的影视剧视频画面进行训练得到的模型。
分别判断目标关键帧Ia与相邻关键帧Ib中存在的识别对象是否合理,若存在不合理的目标对象,需要将该目标对象抹除,例如,若目标关键帧Ia中存在目标对象,则需要抹除目标关键帧Ia中的目标对象,若相邻关键帧Ib中存在目标对象,则需要抹除相邻关键帧Ib中的目标对象;其中,将各识别对象对应的年代信息,与目标关键帧所属视频段的视频段年代类别进行匹配,视频段年代类别即为古代类型,若存在与视频段年代类别不一致的识别对象的年代信息,则确定不一致的年代信息对应的该识别对象确定为目标对象。
在视频编辑平台中,需要根据未抹除目标对象之前的目标关键帧Ia中、与目标对象的边界相邻的360°范围内的相邻识别对象的信息,对抹除后的目标关键帧Ia中目标对象的区域进行修复,获得修复后目标关键帧Ia’,获得修复后相邻关键帧Ib’的处理方式相同。
根据修复后目标关键帧Ia’,以及相邻关键帧Ib的修复后相邻关键帧Ib’,进行视频帧插值处理,获得插值处理后的视频帧,即生成修复后目标关键帧Ia’与修复后相邻关键帧Ib’之间的P帧或B帧。
用修复后目标关键帧Ia’替换目标关键帧Ia,修复后相邻关键帧Ib’替换相邻关键帧Ib,用插值处理后的视频帧替换目标关键帧Ia与相邻关键帧Ib之间的视频帧,获得目标关键帧Ia与相邻关键帧Ib之间的合理的视频段。然后,视频编辑平台将修复后相邻关键帧Ib’确定为下一个目标关键帧,直至视频中所有的关键帧处理完毕,最终获得处理后视频。
需要说明的是,在上述的具体实施例中,若选取的是一帧目标关键帧Ia,以及与目标视频帧相邻的预设间隔关键帧Ic,若目标关键帧Ia不存在目标对象,且预设间隔关键帧Ic中也不存在目标对象,则确定与目标关键帧Ia相邻的相邻关键帧Ib中不存在目标对象,无需对目标关键帧Ia相邻的相邻关键帧Ib进行穿帮镜头的识别和处理,若目标关键帧Ia和预设间隔关键帧Ic中的任意一个关键帧存在目标对象,则需要对目标关键帧Ia相邻的相邻关键帧Ib进行穿帮镜头的识别和处理,以此有效提高视频帧的处理效率。
一个具体实施例中,如图5所示为本申请实施例的视频处理方法的处理效果示意图,以该视频是古代类型的影视剧视频为例,图5-1为该视频中的一帧原始的关键帧画面,通过物品识别模型对图5-1进行对象识别,对象识别结果如图5-2所示,识别到有士兵、长矛、杆、直升机、白马、头盔、铠甲、手等。根据常识参数、视频类型等判断直升机是不合理的物品,将该物品从画面中抹除,并对该物品对应的区域进行修复处理,获得处理后的关键帧,如图5-3所示,采用上述实施例的方式,可以达到修复穿帮镜头的目的,提高视频画面的处理效果。
应该理解的是,虽然上述实施例涉及的各流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,上述实施例涉及的各流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思,本申请还提供了一种用于实现上述涉及的视频处理方法的视频处理装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的一个或多个视频处理装置实施例中的具体限定可以参见上文中对于视频处理方法的限定,在此不再赘述。
在其中一个实施例中,如图6所示,提供了一种视频处理装置600,该装置可以采用软件模块或硬件模块,或者是二者的结合成为计算机设备的一部分,该装置具体包括:关键帧获取模块610,对象识别模块620和视频帧处理模块630,其中:
关键帧获取模块610,用于获取待处理视频的目标关键帧。
对象识别模块620,用于对所述目标关键帧进行对象识别,得到所述目标关键帧的对象识别结果,所述对象识别结果包括各识别对象。
视频帧处理模块630,用于若所述目标关键帧中存在目标对象,对目标视频帧中的所述目标对象进行抹除处理,获得处理后视频,所述目标对象根据各所述识别对象的属性信息确定,所述目标视频帧基于所述目标关键帧确定。
在其中一个实施例中,所述视频帧处理模块630,用于将各所述识别对象对应的属性信息,与所述目标关键帧所属视频段的视频段属性类别进行匹配;若存在与所述视频段属性类别不一致的属性信息,确定所述目标关键帧中存在目标对象,将所述不一致的属性信息对应的识别对象确定为所述目标对象。
在其中一个实施例中,所述视频帧处理模块630,用于根据所述目标关键帧的帧时间,确定所述目标关键帧所属的视频段;根据预设的视频段与属性类别的对应关系,确定所述目标关键帧所属视频段的视频段属性类别。
在其中一个实施例中,所述视频帧处理模块630,用于统计目标识别对象的属性信息;所述目标识别对象包括所述目标关键帧的各所述识别对象,或者,所述目标识别对象包括所述目标关键帧所属视频段的各关键帧的识别对象;根据大于或等于预定比例的所述识别对象的属性信息的共通属性,确定所述目标关键帧所属视频段的视频段属性类别。
在其中一个实施例中,所述视频帧处理模块630,用于将预设的所述目标关键帧所在视频的属性类别,确定为所述目标关键帧所属视频段的视频段属性类别。
在其中一个实施例中,所述目标视频帧包括所述目标关键帧;所述视频帧处理模块630,用于对所述目标关键帧中的目标对象进行抹除处理,获得处理后目标关键帧;根据所述处理后目标关键帧、以及相邻的相邻关键帧,进行视频帧插值处理,获得插值处理后的视频帧;用所述处理后目标关键帧替换所述目标关键帧,用所述插值处理后的视频帧替换所述目标关键帧与所述相邻关键帧之间的视频帧,获得处理后视频。
在其中一个实施例中,所述视频帧处理模块630,还用于在确定所述相邻关键帧中存在目标对象时,确定所述相邻关键帧为对所述相邻关键帧中的所述目标对象进行抹除处理后获得的处理后相邻关键帧;在所述目标关键帧为相邻的预定数目关键帧时,所述目标关键帧包括所述相邻关键帧。
在其中一个实施例中,所述视频帧处理模块620,还用于在所述目标关键帧中不存在目标对象时,获取与所述目标关键帧相邻的预设间隔关键帧;在所述预设间隔关键帧中不存在目标对象时,则确定与所述目标关键帧相邻的所述相邻关键帧中不存在目标对象。
在其中一个实施例中,所述目标视频帧包括:所述目标关键帧与相邻的相邻关键帧之间的视频帧、以及所述目标关键帧;所述视频帧处理模块620,用于对各所述目标视频帧中的所述目标对象进行抹除处理;用抹除处理了所述目标对象的视频帧,分别替换对应的各所述目标视频帧,获得处理后视频。
在其中一个实施例中,所述视频帧处理模块620,还用于对抹除后的目标视频帧中所述目标对象对应的区域进行修复。
在其中一个实施例中,所述视频帧处理模块620,用于根据未抹除所述目标对象之前的目标视频帧中所述目标对象的相邻识别对象的信息,对抹除后的目标视频帧中所述目标对象对应的区域进行修复。
关于视频处理装置600的具体限定可以参见上文中对于视频处理方法的限定,在此不再赘述。上述视频处理装置600中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在其中一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图7所示。该计算机设备包括处理器、存储器、输入/输出(Input/Output,简称I/O)接口和通信接口。其中,处理器、存储器和输入/输出接口通过系统总线连接,通信接口通过输入/输出接口连接到系统总线。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储视频处理数据,例如,待处理的视频、视频中的各关键帧和视频帧等。该计算机设备的输入/输出接口用于处理器与外部设备之间交换信息。该计算机设备的通信接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种视频处理方法。
在其中一个实施例中,提供了一种计算机设备,该计算机设备可以是终端,其内部结构图可以如图8所示。该计算机设备包括处理器、存储器、输入/输出接口、通信接口、显示单元和输入装置。其中,处理器、存储器和输入/输出接口通过系统总线连接,通信接口、显示单元和输入装置通过输入/输出接口连接到系统总线。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的输入/输出接口用于处理器与外部设备之间交换信息。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种视频处理方法。该计算机设备的显示单元用于形成视觉可见的画面,可以是显示屏、投影装置或虚拟现实成像装置,显示屏可以是液晶显示屏或电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图7和图8中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在其中一个实施例中,还提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在其中一个实施例中,提供了一种计算机可读存储介质,存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
在其中一个实施例中,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述各方法实施例中的步骤。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (14)

1.一种视频处理方法,其特征在于,所述方法包括:
获取待处理视频的目标关键帧;
对所述目标关键帧进行对象识别,得到所述目标关键帧的对象识别结果,所述对象识别结果包括各识别对象;
若所述目标关键帧中存在目标对象,对目标视频帧中的所述目标对象进行抹除处理,获得处理后视频,所述目标对象根据各所述识别对象的属性信息确定,所述目标视频帧基于所述目标关键帧确定。
2.根据权利要求1所述的方法,其特征在于,确定目标关键帧中存在目标对象的方式,包括:
将各所述识别对象对应的属性信息,与所述目标关键帧所属视频段的视频段属性类别进行匹配;
若存在与所述视频段属性类别不一致的属性信息,确定所述目标关键帧中存在目标对象,将所述不一致的属性信息对应的识别对象确定为所述目标对象。
3.根据权利要求2所述的方法,其特征在于,所述目标关键帧所属视频段的视频段属性类别的确定方式,包括:
根据所述目标关键帧的帧时间,确定所述目标关键帧所属的视频段;
根据预设的视频段与属性类别的对应关系,确定所述目标关键帧所属视频段的视频段属性类别。
4.根据权利要求2所述的方法,其特征在于,所述目标关键帧所属视频段的视频段属性类别的确定方式,还包括:
统计目标识别对象的属性信息;所述目标识别对象包括所述目标关键帧的各所述识别对象,或者,所述目标识别对象包括所述目标关键帧所属视频段的各关键帧的识别对象;
根据大于或等于预定比例的所述识别对象的属性信息的共通属性,确定所述目标关键帧所属视频段的视频段属性类别。
5.根据权利要求2所述的方法,其特征在于,所述目标关键帧所属视频段的视频段属性类别的确定方式,还包括:
将预设的所述目标关键帧所在视频的属性类别,确定为所述目标关键帧所属视频段的视频段属性类别。
6.根据权利要求1所述的方法,其特征在于,所述目标视频帧包括所述目标关键帧;所述对目标视频帧中的所述目标对象进行抹除处理,获得处理后视频,包括:
对所述目标关键帧中的目标对象进行抹除处理,获得处理后目标关键帧;
根据所述处理后目标关键帧、以及相邻的相邻关键帧,进行视频帧插值处理,获得插值处理后的视频帧;
用所述处理后目标关键帧替换所述目标关键帧,用所述插值处理后的视频帧替换所述目标关键帧与所述相邻关键帧之间的视频帧,获得处理后视频。
7.根据权利要求6所述的方法,其特征在于,
若所述相邻关键帧中存在目标对象,所述相邻关键帧为对所述相邻关键帧中的所述目标对象进行抹除处理后获得的处理后相邻关键帧;
若所述目标关键帧为相邻的预定数目关键帧,所述目标关键帧包括所述相邻关键帧。
8.根据权利要求7所述的方法,其特征在于,确定所述相邻关键帧中是否存在目标对象的方式,包括:
若所述目标关键帧中不存在目标对象,获取与所述目标关键帧相邻的预设间隔关键帧;
若所述预设间隔关键帧中不存在目标对象,则确定与所述目标关键帧相邻的所述相邻关键帧中不存在目标对象。
9.根据权利要求1所述的方法,其特征在于,所述目标视频帧包括:所述目标关键帧与相邻的相邻关键帧之间的视频帧、以及所述目标关键帧;所述对目标视频帧中的所述目标对象进行抹除处理,获得处理后视频,包括:
对各所述目标视频帧中的所述目标对象进行抹除处理;
用抹除处理了所述目标对象的视频帧,分别替换对应的各所述目标视频帧,获得处理后视频。
10.根据权利要求1所述的方法,其特征在于,在所述对目标视频帧中的所述目标对象进行抹除处理之后,还包括:
对抹除后的目标视频帧中所述目标对象对应的区域进行修复。
11.根据权利要求10所述的方法,其特征在于,所述对抹除后的目标视频帧中所述目标对象对应的区域进行修复,包括:
根据未抹除所述目标对象之前的目标视频帧中所述目标对象的相邻识别对象的信息,对抹除后的目标视频帧中所述目标对象对应的区域进行修复。
12.一种视频处理装置,其特征在于,所述装置包括:
关键帧获取模块,用于获取待处理视频的目标关键帧;
对象识别模块,用于对所述目标关键帧进行对象识别,得到所述目标关键帧的对象识别结果,所述对象识别结果包括各识别对象;
视频帧处理模块,用于若所述目标关键帧中存在目标对象,对目标视频帧中的所述目标对象进行抹除处理,获得处理后视频,所述目标对象根据各所述识别对象的属性信息确定,所述目标视频帧基于所述目标关键帧确定。
13.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至11中任一项所述的方法的步骤。
14.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至11中任一项所述的方法的步骤。
CN202210196971.2A 2022-03-01 2022-03-01 视频处理方法、装置、计算机设备和存储介质 Active CN114598919B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210196971.2A CN114598919B (zh) 2022-03-01 2022-03-01 视频处理方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210196971.2A CN114598919B (zh) 2022-03-01 2022-03-01 视频处理方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN114598919A true CN114598919A (zh) 2022-06-07
CN114598919B CN114598919B (zh) 2024-03-01

Family

ID=81807580

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210196971.2A Active CN114598919B (zh) 2022-03-01 2022-03-01 视频处理方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN114598919B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115529483A (zh) * 2022-08-25 2022-12-27 北京达佳互联信息技术有限公司 一种视频处理方法、装置、电子设备及存储介质
CN116894893A (zh) * 2023-09-11 2023-10-17 山东捷瑞数字科技股份有限公司 一种基于三维引擎的非线性动画调控方法和系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1452408A (zh) * 2002-04-18 2003-10-29 华为技术有限公司 一种图象的平滑显示方法
CN103136780A (zh) * 2013-03-18 2013-06-05 北京工业大学 基于关键帧的手语语流音变动画合成方法
CN105357475A (zh) * 2015-10-28 2016-02-24 小米科技有限责任公司 用于视频播放的方法及装置
CN108428214A (zh) * 2017-02-13 2018-08-21 阿里巴巴集团控股有限公司 一种图像处理方法及装置
CN110008910A (zh) * 2019-04-10 2019-07-12 江西理工大学 一种影视剧穿帮镜头的检测方法
CN111178167A (zh) * 2019-12-12 2020-05-19 咪咕文化科技有限公司 穿帮镜头审核方法、装置、电子设备及存储介质
CN111416991A (zh) * 2020-04-28 2020-07-14 Oppo(重庆)智能科技有限公司 特效处理方法和设备,及存储介质
CN112052357A (zh) * 2020-04-15 2020-12-08 上海摩象网络科技有限公司 一种视频片段标记方法、设备及手持相机
CN113963295A (zh) * 2021-10-22 2022-01-21 北京爱奇艺科技有限公司 视频片段中地标识别方法、装置、设备及存储介质
CN114025105A (zh) * 2021-12-15 2022-02-08 北京达佳互联信息技术有限公司 视频处理方法、装置、电子设备、存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1452408A (zh) * 2002-04-18 2003-10-29 华为技术有限公司 一种图象的平滑显示方法
CN103136780A (zh) * 2013-03-18 2013-06-05 北京工业大学 基于关键帧的手语语流音变动画合成方法
CN105357475A (zh) * 2015-10-28 2016-02-24 小米科技有限责任公司 用于视频播放的方法及装置
CN108428214A (zh) * 2017-02-13 2018-08-21 阿里巴巴集团控股有限公司 一种图像处理方法及装置
CN110008910A (zh) * 2019-04-10 2019-07-12 江西理工大学 一种影视剧穿帮镜头的检测方法
CN111178167A (zh) * 2019-12-12 2020-05-19 咪咕文化科技有限公司 穿帮镜头审核方法、装置、电子设备及存储介质
CN112052357A (zh) * 2020-04-15 2020-12-08 上海摩象网络科技有限公司 一种视频片段标记方法、设备及手持相机
CN111416991A (zh) * 2020-04-28 2020-07-14 Oppo(重庆)智能科技有限公司 特效处理方法和设备,及存储介质
CN113963295A (zh) * 2021-10-22 2022-01-21 北京爱奇艺科技有限公司 视频片段中地标识别方法、装置、设备及存储介质
CN114025105A (zh) * 2021-12-15 2022-02-08 北京达佳互联信息技术有限公司 视频处理方法、装置、电子设备、存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115529483A (zh) * 2022-08-25 2022-12-27 北京达佳互联信息技术有限公司 一种视频处理方法、装置、电子设备及存储介质
CN116894893A (zh) * 2023-09-11 2023-10-17 山东捷瑞数字科技股份有限公司 一种基于三维引擎的非线性动画调控方法和系统

Also Published As

Publication number Publication date
CN114598919B (zh) 2024-03-01

Similar Documents

Publication Publication Date Title
US10368123B2 (en) Information pushing method, terminal and server
CN106231434B (zh) 一种基于人脸检测的直播互动特效实现方法及系统
US11475666B2 (en) Method of obtaining mask frame data, computing device, and readable storage medium
CN108124194B (zh) 一种视频直播方法、装置及电子设备
CN114598919B (zh) 视频处理方法、装置、计算机设备和存储介质
CN107959863B (zh) 一种视频审核方法及系统
US11871086B2 (en) Method of displaying comment information, computing device, and readable storage medium
CN112312231B (zh) 一种视频图像编码方法、装置、电子设备及介质
CN114025219B (zh) 增强现实特效的渲染方法、装置、介质及设备
US11451858B2 (en) Method and system of processing information flow and method of displaying comment information
WO2023193521A1 (zh) 一种视频修复的方法、相关装置、设备以及存储介质
WO2023217138A1 (zh) 一种参数配置方法、装置、设备、存储介质及产品
CN106231411B (zh) 主播类互动平台客户端场景切换、加载方法及装置、客户端
CN115190357B (zh) 一种视频摘要生成方法和装置
CN111353965B (zh) 图像修复方法、装置、终端及存储介质
Xing et al. DVL2021: An ultra high definition video dataset for perceptual quality study
CN109327736B (zh) 一种基于节目观看表情与用户信息的节目推荐方法
CN115293994B (zh) 图像处理方法、装置、计算机设备和存储介质
Yang et al. Exploring the influence of view and camera path selection for dynamic mesh quality assessment
CN111954082B (zh) 蒙版文件结构、蒙版文件的读取方法、计算机设备及可读存储介质
CN112055247B (zh) 一种视频播放方法、装置、系统及存储介质
CN112449249A (zh) 视频流处理方法及装置、电子设备及存储介质
CN113628121A (zh) 数据处理、训练多媒体数据的方法和装置
JP6148785B1 (ja) 情報処理システム、情報処理装置及びプログラム
CN114095763B (zh) 视频列表推送方法及播放质量评估方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant