CN113207039A - 视频处理方法、装置、电子设备及存储介质 - Google Patents

视频处理方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN113207039A
CN113207039A CN202110502299.0A CN202110502299A CN113207039A CN 113207039 A CN113207039 A CN 113207039A CN 202110502299 A CN202110502299 A CN 202110502299A CN 113207039 A CN113207039 A CN 113207039A
Authority
CN
China
Prior art keywords
video
parameters
information
clip
segment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110502299.0A
Other languages
English (en)
Other versions
CN113207039B (zh
Inventor
张云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202110502299.0A priority Critical patent/CN113207039B/zh
Publication of CN113207039A publication Critical patent/CN113207039A/zh
Application granted granted Critical
Publication of CN113207039B publication Critical patent/CN113207039B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Abstract

本申请提供了一种视频处理方法、装置、电子设备及计算机可读存储介质;方法包括:播放视频;响应于针对视频的编辑操作,确定视频中被编辑的视频片段,并在编辑界面显示针对视频片段输入的标注信息;获取与视频片段的内容相关的视频参数,并在编辑界面显示视频参数;将标注信息、视频参数分别与视频片段关联。通过本申请,能够对视频中的视频片段进行信息标注和补充,以实现视频中的多样化的信息互动。

Description

视频处理方法、装置、电子设备及存储介质
技术领域
本申请涉及计算机应用技术,尤其涉及一种视频处理方法、装置、电子设备及计算机可读存储介质。
背景技术
随着计算机技术的发展,电子设备可以实现更加丰富的和形象的视频画面。相比于文字与图片,视频携带了更丰富更具表现力的信息,从而越来越受到用户的喜爱。
然而,用户在观看影视剧或综艺节目等视频时,经常会对视频的某段视频内容感兴趣,此时用户可能想记录该段视频片段。相关技术中,可以通过截图记录视频片段,但是这种方式难以在短时间内帮助用户查看所记录的感兴趣的视频片段,且截图的方式记录的信息有限,影响了用户体验。
发明内容
本申请实施例提供一种视频处理方法、装置、电子设备及计算机可读存储介质,能够对视频中的视频片段进行信息标注和补充,以实现视频中的多样化的信息互动。
本申请实施例的技术方案是这样实现的:
本申请实施例提供一种视频处理方法,包括:
播放视频;
响应于针对所述视频的编辑操作,确定所述视频中被编辑的视频片段,并在编辑界面显示针对所述视频片段输入的标注信息;
获取与所述视频片段的内容相关的视频参数,并在所述编辑界面显示所述视频参数;
将所述标注信息、所述视频参数分别与所述视频片段关联。
上述技术方案中,所述获取与所述视频片段的内容相关的视频参数,包括:
基于用户的特征信息以及所述视频片段的播放场景的上下文调用偏好识别模型,得到所述用户在所述播放场景中对多个类型的候选视频参数的偏好程度;
基于所述用户对多个类型的候选视频参数的偏好程度,对所述多个类型的候选视频参数进行降序排序;
基于所述降序排序的结果获取与所述视频片段的内容相关的视频参数。
上述技术方案中,所述获取与所述视频片段的内容相关的视频参数,包括:
基于所述标注信息构造输入语句,并基于所述输入语句调用意图识别模型,得到所述标注信息表征的意图;
从与所述视频片段的内容相关的多个候选视频参数中,识别出与所述意图匹配的候选视频参数,以作为与所述视频片段的内容相关的视频参数。
本申请实施例提供一种视频处理方法,包括:
播放视频,所述视频包括至少一个被标注信息的视频片段;
响应于播放至被标注的视频片段,获取与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,并显示所述标注信息以及所述视频参数;
其中,所述视频片段和所述标注信息是通过响应于对所述视频进行的编辑操作获取的,所述视频参数是自动获取的。
上述技术方案中,在响应于播放至被标注的视频片段之前,所述方法还包括:
在所述视频的时间轴上显示所述视频中被标注的多个视频片段的时间信息,其中,所述时间信息包括所述视频片段的起始时间点以及结束时间点;
响应于针对所述时间轴的触发操作,根据所述多个视频片段的时间信息确定被触发的视频片段,并跳转到所述被触发的视频片段的起始时间点。
上述技术方案中,在所述播放视频时,所述方法还包括:
在所述视频的时间轴上,通过不同的显示样式显示所述视频中未被标注的视频片段、以及所述被标注的视频片段;
其中,所述显示样式包括以下至少之一:颜色、尺寸、特效。
上述技术方案中,所述获取与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,包括:
获取配置信息,所述配置信息包括预先配置的所述标注信息的来源标识、所述视频参数的目标种类;
基于所述视频片段从关联关系文件中查询到与所述来源标识适配的标注信息,并作为与所述视频片段关联的标注信息;
基于所述视频片段从所述关联关系文件中查询到与所述目标种类适配的视频参数,并作为与所述视频片段的内容相关的视频参数;
其中,所述关联关系文件包括:不同的所述视频片段分别与不同来源的所述标注信息、不同种类的所述视频参数之间的对应关系。
上述技术方案中,在获取与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数之前,所述方法还包括:
获取配置信息;
当所述配置信息表征在播放所述视频时需要显示所述标注信息时,确定将执行获取与所述视频片段关联的标注信息的操作;
当所述配置信息表征在播放所述视频时需要显示所述视频参数时,确定将执行获取与所述视频片段的内容相关的视频参数的操作。
本申请实施例提供一种视频处理装置,所述装置包括:
第一播放模块,用于播放视频;
编辑模块,用于响应于针对所述视频的编辑操作,确定所述视频中被编辑的视频片段,并在编辑界面显示针对所述视频片段输入的标注信息;
获取模块,用于获取与所述视频片段的内容相关的视频参数,并在所述编辑界面显示所述视频参数;
关联模块,用于将所述标注信息、所述视频参数分别与所述视频片段关联。
上述技术方案中,所述编辑操作包括选择操作和标注操作;所述编辑模块还用于响应于所述选择操作,获取被设定的时间信息,所述时间信息包括所述视频片段的起始时间点以及结束时间点,根据所述时间信息确定对应的视频片段;
响应于所述标注操作,在所述编辑界面显示所述标注操作针对所述视频片段输入的标注信息。
上述技术方案中,所述编辑操作包括选择操作和标注操作;所述编辑模块还用于将所述视频划分为多个候选视频片段,每个所述候选视频片段对应一个情节单元,在所述视频的时间轴中显示所述多个候选视频片段的时间信息,所述时间信息包括所述候选视频片段的起始时间点以及结束时间点;
响应于所述选择操作,将被选择的候选视频片段作为所述视频中被编辑的视频片段;
响应于所述标注操作,在所述编辑界面显示所述标注操作针对所述视频片段输入的标注信息。
上述技术方案中,所述编辑模块还用于通过以下方式至少之一,将所述视频划分为多个候选视频片段:
按照所述视频中视频参数的分布对所述视频进行划分;
按照所述视频的场景对所述视频进行划分;
按照用户对所述视频的偏好对所述视频进行划分。
上述技术方案中,所述编辑模块还用于响应于编辑位置设定操作,确定所述视频的画面中被设定的编辑位置,所述编辑位置是用于后续播放所述视频片段时显示所述标注信息所使用的位置;
在所述编辑位置上显示针对所述视频片段的编辑界面。
上述技术方案中,所述获取模块还用于根据所述视频片段的时间信息,从预先存储的视频存档文件中查找与所述视频片段的时间信息对应的视频参数,所述视频存档文件包括所述视频的每个时间点、以及与所述每个时间点相关的视频参数;
将与所述时间信息对应的视频参数作为与所述视频片段的内容相关的视频参数。
上述技术方案中,所述获取模块还用于在播放所述视频之前,通过下载的或录制的方式从服务器获取所述视频;
在获取所述视频的过程中,从所述服务器获取与所述视频中每个时间点的内容相关的视频参数,并基于所述每个时间点、以及与所述每个时间点的内容相关的视频参数的关联关系,生成所述视频存档文件。
上述技术方案中,所述关联模块还用于对所述视频进行解码处理,得到与所述视频对应的视频帧;
根据所述视频片段的时间信息将所述标注信息、所述视频参数嵌入到与所述视频片段对应的视频帧中;
对嵌入后得到的视频帧以及所述视频中的其他视频帧进行编码处理,得到嵌入有所述标注信息、所述视频参数的所述视频。
上述技术方案中,所述关联模块还用于基于所述标注信息、所述视频参数分别与所述视频片段的时间信息的关联关系,生成关联关系文件;
其中,所述关联关系文件用于在后续播放所述视频时被读取,并用于根据所述时间信息显示关联的所述标注信息和所述视频参数。
上述技术方案中,所述关联模块还用于解析所述视频参数的类型,所述视频参数的类型包括时效性视频参数和非时效性视频参数;
基于所述标注信息、所述非时效性视频参数分别与所述视频片段的时间信息的关联关系,生成关联关系文件;
其中,所述时效性视频参数是在后续再次播放所述视频时被实时获取的,且用于与所述非时效性视频参数整合后在所述视频片段中显示。
上述技术方案中,所述获取模块还用于基于用户的特征信息以及所述视频片段的播放场景的上下文调用偏好识别模型,得到所述用户在所述播放场景中对多个类型的候选视频参数的偏好程度;
基于所述用户对多个类型的候选视频参数的偏好程度,对所述多个类型的候选视频参数进行降序排序;
基于所述降序排序的结果获取与所述视频片段的内容相关的视频参数。
上述技术方案中,所述获取模块还用于基于所述标注信息构造输入语句,并基于所述输入语句调用意图识别模型,得到所述标注信息表征的意图;
从与所述视频片段的内容相关的多个候选视频参数中,识别出与所述意图匹配的候选视频参数,以作为与所述视频片段的内容相关的视频参数。
本申请实施例提供一种视频处理装置,所述装置包括:
第二播放模块,用于播放视频,所述视频包括至少一个被标注信息的视频片段;
显示模块,用于响应于播放至被标注的视频片段,获取与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,并显示所述标注信息以及所述视频参数;
其中,所述视频片段和所述标注信息是通过响应于对所述视频进行的编辑操作获取的,所述视频参数是自动获取的。
上述技术方案中,所述显示模块还用于在所述视频的时间轴上显示所述视频中被标注的多个视频片段的时间信息,其中,所述时间信息包括所述视频片段的起始时间点以及结束时间点;
响应于针对所述时间轴的触发操作,根据所述多个视频片段的时间信息确定被触发的视频片段,并跳转到所述被触发的视频片段的起始时间点。
上述技术方案中,所述播放模块还用于在所述视频的时间轴上,通过不同的显示样式显示所述视频中未被标注的视频片段、以及所述被标注的视频片段;
其中,所述显示样式包括以下至少之一:颜色、尺寸、特效。
上述技术方案中,所述显示模块还用于对所述视频片段进行解码处理,得到所述视频片段包括的多个视频帧;
基于所述多个视频帧调用视频渲染接口,以显示所述多个视频帧;
其中,所述多个视频帧的画面的编辑位置中嵌入有与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,所述编辑位置是在所述视频的标注阶段通过编辑位置设定操作设定的。
上述技术方案中,所述显示模块还用于基于所述视频片段的时间信息查询关联关系文件,得到与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数;
其中,所述关联关系文件包括:不同的所述视频片段的时间信息分别与不同的所述视频片段的标注信息、不同的所述视频片段的视频参数之间的对应关系;
在所述视频的画面中叠加显示与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数。
上述技术方案中,所述视频参数的类型包括时效性视频参数和非时效性视频参数;所述显示模块还用于解析从所述关联关系文件中查询到的所述视频参数;
当所述视频参数未包括所述视频片段的时效性视频参数时,从服务器获取所述视频片段的时效性视频参数,将从所述关联关系文件中查询到的所述视频片段的非时效性视频参数、与从所述服务器查询到的所述视频片段的时效性视频参数进行整合,得到与所述视频片段的内容相关的视频参数。
上述技术方案中,所述视频参数的类型包括时效性视频参数和非时效性视频参数,所述关联关系文件中至少包括非时效性视频参数;所述显示模块还用于从服务器获取所述视频片段的时效性视频参数,并与从所述关联关系文件中查询到的所述视频片段的时效性视频参数进行更新验证;
当通过所述更新验证确定所述时效性视频参数发生更新时,将从所述服务器获取的所述视频片段的时效性视频参数、与从所述关联关系文件中查询到的所述视频片段的非时效性视频参数进行整合,得到所述视频片段的内容相关的视频参数。
上述技术方案中,所述显示模块还用于获取配置信息,当所述配置信息表征自动更新开启时,基于从所述服务器获取所述视频片段的时效性视频参数,并基于所述时效性视频参数更新所述关联关系文件;
其中,所述关联关系文件以先存储先删除的方式存储设定多个不同版本的时效性视频参数。
上述技术方案中,所述显示模块还用于获取配置信息,所述配置信息包括预先配置的所述标注信息的来源标识、所述视频参数的目标种类;
基于所述视频片段从关联关系文件中查询到与所述来源标识适配的标注信息,并作为与所述视频片段关联的标注信息;
基于所述视频片段从所述关联关系文件中查询到与所述目标种类适配的视频参数,并作为与所述视频片段的内容相关的视频参数;
其中,所述关联关系文件包括:不同的所述视频片段分别与不同来源的所述标注信息、不同种类的所述视频参数之间的对应关系。
上述技术方案中,所述显示模块还用于获取配置信息;
当所述配置信息表征在播放所述视频时需要显示所述标注信息时,确定将执行获取与所述视频片段关联的标注信息的操作;
当所述配置信息表征在播放所述视频时需要显示所述视频参数时,确定将执行获取与所述视频片段的内容相关的视频参数的操作。
本申请实施例提供一种用于视频处理的电子设备,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现本申请实施例提供的视频处理方法。
本申请实施例提供一种计算机可读存储介质,存储有可执行指令,用于引起处理器执行时,实现本申请实施例提供的视频处理方法。
本申请实施例具有以下有益效果:
将针对视频片段编辑的标注信息以及与视频片段相关的视频参数分别与视频片段关联,从而,在视频播放阶段能够快速定位有观看价值的视频片段以及标注信息,并通过视频参数丰富视频的展示形式,增进用户对于视频的了解,节约了用户额外了解视频所耗费的通信资源和计算资源,保证了视频观看体验的连续性。
附图说明
图1是相关技术提供的视频播放的示意图;
图2是本申请实施例提供的视频处理系统的架构示意图;
图3是本申请实施例提供的用于视频处理的电子设备的结构示意图;
图4A-图4B是本申请实施例提供的视频处理方法的流程示意图;
图5A是本申请实施例提供的时间轴点击的示意图;
图5B是本申请实施例提供的输入框输入的示意图;
图5C是本申请实施例提供的自动编辑视频片段的示意图;
图6是本申请实施例提供的编辑位置设定的示意图;
图7A-图7B是本申请实施例提供的视频处理方法的流程示意图;
图8是本申请实施例提供的被标注的视频片段的示意图;
图9是本申请实施例提供的视频片段选择的示意图;
图10是本申请实施例提供的自动更新开关的示意图;
图11A是本申请实施例提供的标注信息的配置项的示意图;
图11B是本申请实施例提供的视频参数的配置项的示意图;
图12是本申请实施例提供的显示开关的示意图;
图13是本申请实施例提供的视频编辑的流程示意图;
图14是本申请实施例提供的视频播放的流程示意图;
图15A-图15B是本申请实施例提供的视频画面中标注信息的示意图;
图16A-图16B是本申请实施例提供的选择视频片段的示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请作进一步地详细描述,所描述的实施例不应视为对本申请的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在以下的描述中,所涉及的术语“第一\第二”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的,不是旨在限制本申请。
对本申请实施例进行进一步详细说明之前,对本申请实施例中涉及的名词和术语进行说明,本申请实施例中涉及的名词和术语适用于如下的解释。
1)云技术(Cloud Technology):在广域网或局域网内将硬件、软件、网络等系列资源统一起来,实现数据的计算、储存、处理和共享的一种托管技术。
2)区块链:包括一系列按照产生的先后时间顺序相互接续的区块(Block),新区块一旦加入到区块链中就不会再被移除,区块中记录了区块链系统中节点提交的记录数据。
3)响应于:用于表示所执行的操作所依赖的条件或者状态,当满足所依赖的条件或状态时,所执行的一个或多个操作可以是实时的,也可以具有设定的延迟;在没有特别说明的情况下,所执行的多个操作不存在执行先后顺序的限制。
4)视频参数:视频中与内容相关的参数,例如游戏视频中,视频参数为游戏参数(如角色的战斗值、击杀数、角色释放的技能等);商品直播视频中,视频参数为商品参数(如商品的价格、购买链接等);电视剧中,视频参数为人物简介(例如人物在剧中的名称、职业、人物在剧外的真实名称等)。
相关技术中,有以下两种方式呈现视频中游戏问题(bug)或者高光时刻:
方式1、通过视频呈现游戏bug或者高光时刻
如图1所示,当用户进入视频详情页后,播放视频,听讲解或看评论,然后根据视频的标题、评论101寻找并观看视频的内容,当用户遇到感兴趣的内容会反复拖动时间轴102,并重复播放。
这种方式用户无法直观快速了解视频中的哪个片段是讲解游戏bug或者高光时刻,需要用户自己去发现感兴趣的内容,找到对应片段进行观看;查找过程较为繁琐,需要不断拖动、不断加载,体验不佳;快进或者拖动过快时,查找过程中容易错过内容;查找时长不定,较难给出预期,需要根据视频长度而定;观看时无法了解更为详细的游戏参数等信息。
方式2、通过截图呈现游戏bug或者高光时刻
用户通过游戏截图和文字描述了解视频中可能感兴趣的信息。
这种方式游戏截图和文字描述不丰富、不连贯、不直观;无法通过游戏截图和文字描述了解更为详细的游戏参数信息。
为了解决上述问题,本申请实施例提供了一种视频处理方法、装置、电子设备及计算机可读存储介质,能够对视频中的视频片段进行信息标注和补充,以实现视频中的多样化的信息互动。
本申请实施例所提供的视频处理方法,可以由终端独自实现;也可以由终端和服务器协同实现,例如终端独自承担下文所述的视频处理方法,或者,终端向服务器发送针对视频的编辑请求,服务器根据接收的针对视频的编辑请求执行视频处理方法,对视频进行编辑,得到带有标注信息的视频,并在播放视频阶段,当播放至被标注的视频片段时,显示视频片段的标注信息以及视频参数,以便用户能够定位更有观看价值的视频片段,通过视频参数以及标注信息了解视频。
下面说明本申请实施例提供的电子设备的示例性应用,本申请实施例提供的电子设备可以实施为笔记本电脑,平板电脑,台式计算机,机顶盒,移动设备(例如,移动电话,便携式音乐播放器,个人数字助理,专用消息设备,便携式游戏设备)等各种类型的用户终端。下面,将说明电子设备实施为终端时示例性应用。
参见图2,图2是本申请实施例提供的视频处理系统100的架构示意图,终端(示例性示出终端200-1以及终端200-2)通过网络300连接服务器100,其中,网络300可以是广域网或者局域网,又或者是二者的组合。
在一些实施例中,以电子设备是终端为例,本申请实施例提供的视频处理方法可以单独由终端实现。例如,终端200-1运行客户端(如视频播放客户端、短视频客户端、视频剪辑客户端等),用户针对视频进行编辑操作,调用视频处理插件,以实现视频的编辑功能,得到带有标注信息的视频,并在播放视频阶段,当播放至被标注的视频片段时,显示视频片段的标注信息以及视频参数,以便用户能够定位更有观看价值的视频片段,通过视频参数以及标注信息了解视频。
在一些实施例中,本申请实施例提供的视频处理方法也可以由服务器和终端协同实现。例如,终端200-1运行客户端(如视频播放客户端、短视频客户端、视频剪辑客户端等),用户针对视频进行编辑操作,终端200-1自动生成针对视频的编辑请求,并将针对视频的编辑请求发送至服务器100,服务器100接收到针对视频的编辑请求后,对视频进行编辑,得到带有标注信息的视频,当服务器100接收到终端200-2发送的针对视频的播放请求后,将带有标注信息的视频发送至终端200-2,在播放视频阶段,当播放至被标注的视频片段时,显示视频片段的标注信息以及视频参数,以便用户能够定位更有观看价值的视频片段,通过视频参数以及标注信息了解视频。
在一些实施例中,终端或服务器可以通过运行计算机程序来实现本申请实施例提供的视频处理方法,例如,计算机程序可以是操作系统中的原生程序或软件模块;可以是本地(Native)应用程序(APP,Application),即需要在操作系统中安装才能运行的程序;也可以是小程序,即只需要下载到浏览器环境中就可以运行的程序;还可以是能够嵌入至任意APP中的小程序。总而言之,上述计算机程序可以是任意形式的应用程序、模块或插件。
本申请实施例可以借助于云技术(Cloud Technology)实现,云技术是基于云计算商业模式应用的网络技术、信息技术、整合技术、管理平台技术、以及应用技术等的总称,可以组成资源池,按需所用,灵活便利。云计算技术将变成重要支撑。技术网络系统的后台服务需要大量的计算、存储资源。
在一些实施例中,服务器100可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器,其中,云服务可以是告警处理服务,供终端200进行调用。终端200可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能电视、智能手表等,但并不局限于此。终端以及服务器可以通过有线或无线通信方式进行直接或间接地连接,本申请实施例中不做限制。
在一些实施例中,多个服务器可组成为一区块链,而服务器100为区块链上的节点,区块链中的每个节点之间可以存在信息连接,节点之间可以通过上述信息连接进行信息传输。其中,本申请实施例提供的视频处理方法所相关的数据(例如视频处理的逻辑、待标注信息的视频)可保存于区块链上。
下面说明本申请实施例提供的用于视频处理的电子设备的结构,参见图3,图3是本申请实施例提供的用于视频处理的电子设备500的结构示意图。需要说明的是,电子设备500可以仅用于实现编辑视频功能,或者仅用于实现播放视频功能,还可以用于既实现编辑视频功能,又实现播放视频功能。以电子设备500是终端为例说明,图3所示的用于视频处理的电子设备500包括:至少一个处理器510、存储器550、至少一个网络接口520和用户接口530。电子设备500中的各个组件通过总线系统540耦合在一起。可理解,总线系统540用于实现这些组件之间的连接通信。总线系统540除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图3中将各种总线都标为总线系统540。
处理器510可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
存储器550包括易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(ROM,Read Only Memory),易失性存储器可以是随机存取存储器(RAM,Random Access Memory)。本申请实施例描述的存储器550旨在包括任意适合类型的存储器。存储器550可选地包括在物理位置上远离处理器510的一个或多个存储设备。
在一些实施例中,存储器550能够存储数据以支持各种操作,这些数据的示例包括程序、模块和数据结构或者其子集或超集,下面示例性说明。
操作系统551,包括用于处理各种基本系统服务和执行硬件相关任务的系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务;
网络通信模块552,用于经由一个或多个(有线或无线)网络接口520到达其他计算设备,示例性的网络接口520包括:蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB,Universal Serial Bus)等;
在一些实施例中,本申请实施例提供的视频处理装置可以采用软件方式实现,本申请实施例提供的视频处理装置可以提供为各种软件实施例,包括应用程序、软件、软件模块、脚本或代码在内的各种形式。
图3示出了存储在存储器550中的视频处理装置555,其可以是程序和插件等形式的软件,并包括一系列的模块,包括第一播放模块5551、编辑模块5552、获取模块5553、关联模块5554,用于实现视频的编辑功能;或者,第二播放模块5555以及显示模块5556,用于实现视频的播放功能;或者,第一播放模块5551、编辑模块5552、获取模块5553、关联模块5554,第二播放模块5555以及显示模块5556,用于实现视频的编辑功能以及播放功能,即编辑功能以及播放功能集成一体,这些模块是逻辑上的,因此根据所实现的功能可以进行任意的组合或进一步拆分,将在下文中说明各个模块的功能。
如前,本申请实施例提供的视频处理方法可以由各种类型的电子设备实施。参见图4A,图4A是本申请实施例提供的视频处理方法的流程示意图,结合图4A示出的步骤进行说明。
需要说明的是,图4A示出的方法可以由终端200-1运行的各种形式计算机程序执行,并不局限于上述终端200-1运行的客户端,例如上文的操作系统551、软件模块、脚本和小程序,因此下文中以客户端的示例不应视为对本申请实施例的限定。
在步骤101中,播放视频。
例如,用户在打开客户端(如视频播放客户端、短视频客户端、视频剪辑客户端等)后,进入视频详情页进行视频播放。
在步骤102中,响应于针对视频的编辑操作,确定视频中被编辑的视频片段,并在编辑界面显示针对视频片段输入的标注信息。
例如,该视频为游戏视频时,在播放游戏视频的过程,用户针对游戏视频进行编辑操作,调用视频处理插件,基于针对游戏视频的编辑操作,确定视频中被编辑的游戏片段,并突出显示被编辑的游戏片段,在编辑界面显示针对游戏片段输入的标注信息,以实现游戏的编辑功能,在游戏视频中添加标注信息。
在一些实施例中,编辑操作包括选择操作和标注操作;响应于针对视频的编辑操作,确定视频中被编辑的视频片段,并在编辑界面显示针对视频片段输入的标注信息,包括:响应于选择操作,获取被设定的时间信息,时间信息包括视频片段的起始时间点以及结束时间点,根据时间信息确定对应的视频片段;响应于标注操作,在编辑界面显示标注操作针对视频片段输入的标注信息。
例如,通过手动编辑的方式选择视频片段,其中,选择操作可以是时间轴点击设定操作,还可以是在输入框输入视频片段的起始时间点以及结束时间点的操作,以获取被设定的时间信息,并根据时间信息在视频的时间轴上突出显示对应的视频片段,例如将对应的视频片段进行高亮显示,在确定了对应的视频片段之后,可以在对应的视频片段呈现编辑界面,并在编辑界面输入标注信息,并在编辑界面显示针对视频片段输入的标注信息。
如图5A所示,通过时间轴点击设定操作获取被设定的时间信息,显示视频的时间轴501,响应于针对起始时间点的选择操作,将被选择的起始时间点502作为被编辑的视频片段的起始时间点,响应于针对结束时间点的选择操作,将被选择的结束时间点503作为被编辑的视频片段的结束时间点。
如图5B所示,通过在输入框输入视频片段的起始时间点以及结束时间点获取被设定的时间信息,在视频播放的显示界面呈现视频编辑入口504,响应于视频编辑入口504的触发操作,在显示界面呈现针对时间信息的输入框505,响应于针对输入框505的输入操作,获取在输入框中输入的起始时间点以及结束时间点,其中,输入框中可以输入至少一个视频片段的时间信息,例如当在视频播放至5秒时,视频编辑入口504被触发,则在输入框505中自动填充第一个视频片段的起始时间点为5秒。
在一些实施例中,编辑操作包括选择操作和标注操作;响应于针对视频的编辑操作,确定视频中被编辑的视频片段,并在编辑界面显示针对视频片段输入的标注信息,包括:将视频划分为多个候选视频片段,每个候选视频片段对应一个情节单元,在视频的时间轴中显示多个候选视频片段的时间信息,时间信息包括候选视频片段的起始时间点以及结束时间点;响应于选择操作,将被选择的候选视频片段作为视频中被编辑的视频片段;响应于标注操作,在编辑界面显示标注操作针对视频片段输入的标注信息。
如图5C所示,在等待时间内未接收手动编辑的操作时,采用自动划分视频的方式,获取视频的多个候选视频片段,在视频播放的显示界面呈现视频编辑入口504,响应于视频编辑入口504的触发操作,在视频的时间轴中突出显示多个候选视频片段的时间信息(包括起始时间点以及结束时间点),响应于针对多个候选视频片段的选择操作,将被选择的候选视频片段作为视频中被编辑的视频片段。
作为示例,在等待时间内未接收手动编辑的操作时,采用自动划分视频的方式,获取视频的多个候选视频片段,
在一些实施例中,将视频划分为多个候选视频片段,包括:通过以下方式至少之一,将视频划分为多个候选视频片段:按照视频中视频参数的分布对视频进行划分;按照视频的场景对视频进行划分;按照用户对视频的偏好对视频进行划分。
例如,按照视频中视频参数的分布对视频进行划分处理,可以通过以下技术方案实现:获取视频中视频参数的分布,并基于视频参数的分布对视频进行划分,例如将属于相同视频参数且播放时间连续的多个视频帧确定为属于同一个情节单元,并将多个视频帧具有的最小时间戳和最大时间戳之间的时间段,确定为候选视频片段。
例如,按照场景对视频进行划分处理,可以通过以下技术方案实现:通过场景识别模型对视频中的每个视频帧进行场景识别处理,得到每个视频帧所属的场景;将属于相同场景且播放时间连续的多个视频帧确定为属于同一个情节单元,并将多个视频帧具有的最小时间戳和最大时间戳之间的时间段,确定为候选视频片段。其中,场景识别模型可以为经过训练的神经网络模型,神经网络模型可以是基于视频帧样本以及标记的场景训练得到的,假设视频中有120个视频帧,对120个视频帧进行场景识别处理,得到每个视频帧所属的场景,若存在30个视频帧处于相同场景且播放时间接续,则将这30个视频帧确定为属于同一个情节单元,从而既保证对应每个场景的情节单元内容播放的连贯性,还能够为用户提供稳定的观看体验。
例如,按照用户对视频的偏好对视频进行划分处理,可以通过以下技术方案实现:通过偏好识别模型对视频中的每个视频帧进行偏好识别处理,得到每个视频帧的偏好程度;将属于同一偏好程度且播放时间连续的多个视频帧确定为属于同一个情节单元,并将多个视频帧具有的最小时间戳和最大时间戳之间的时间段,确定为候选视频片段。其中,偏好识别模型可以为经过训练的神经网络模型,神经网络模型可以是基于视频帧样本以及标记的偏好训练得到的,假设视频中有100个视频帧,对100个视频帧进行偏好识别处理,得到每个视频帧的偏好,若存在20个视频帧属于同一偏好程度且播放时间接续,则将这20个视频帧确定为属于同一个情节单元,从而既保证对应每个场景的情节单元内容播放的连贯性,还能够为用户提供稳定的观看体验。
例如,按照视频的热度对视频进行划分处理,可以通过以下技术方案实现:获取每个视频帧被评价的次数;将被评价次数属于同一次数阶段且播放时间连续的多个视频帧确定为属于同一个情节单元,并将多个视频帧具有的最小时间戳和最大时间戳之间的时间段,确定为候选视频片段,从而将视频中处于相同热度的视频帧划分为同一视频片段,以便用户可以快速定位热度较高的视频片段,进而进行视频编辑。
在一些实施例中,在响应于标注操作,在编辑界面显示标注操作针对视频片段输入的标注信息之前,响应于编辑位置设定操作,确定视频的画面中被设定的编辑位置,编辑位置是用于后续播放视频片段时显示标注信息所使用的位置;在编辑位置上显示针对视频片段的编辑界面。
如图6所示,设定操作可以是单击操作、双击操作、滑动操作等,在视频的画面中选定浮动在视频上的编辑位置601,并在编辑位置601上显示针对视频片段的编辑界面,后续播放视频时,也在编辑位置601上显示标记信息以及视频参数。如果在等待时间内没有接收到编辑位置设定操作,则自动选择固定位置(例如右上角)显示编辑界面,或者自动选择视频画面中空白位置显示编辑界面。
在步骤103中,获取与视频片段的内容相关的视频参数,并在编辑界面显示视频参数。
例如,视频为游戏视频,在获取了标注信息后,还可以获取与游戏片段的内容相关的游戏参数,并在编辑界面显示游戏参数,将游戏参数作为辅助参数,补充理解标注信息,以便用户更快理解游戏的标注。
在一些实施例中,获取与视频片段的内容相关的视频参数,包括:根据视频片段的时间信息,从预先存储的视频存档文件中查找与视频片段的时间信息对应的视频参数,视频存档文件包括视频的每个时间点、以及与每个时间点相关的视频参数;将与时间信息对应的视频参数作为与视频片段的内容相关的视频参数。
例如,在标注视频之前,预先获取视频中每个时间点的视频参数,并将视频的每个时间点、以及与每个时间点相关的视频参数存储至视频存档文件。当确定标注的视频片段后,基于视频片段的时间信息从视频存档文件中查找到与时间信息对应的视频参数,并将与时间信息对应的视频参数作为与视频片段的内容相关的视频参数。
作为示例,视频存档文件存储有0秒至15秒的视频参数,当视频片段的起始时间点为5秒、结束时间点为7秒,则在视频存档文件中查找5秒至7秒的视频参数,并将5秒至7秒的视频参数作为与视频片段的内容相关的视频参数。
在一些实施例中,在从预先存储的视频存档文件中查找与视频片段的时间信息对应的视频参数之前,在播放视频之前,通过下载的或录制的方式从服务器获取视频;在获取视频的过程中,从服务器获取与视频中每个时间点的内容相关的视频参数,并基于每个时间点、以及与每个时间点的内容相关的视频参数的关联关系,生成视频存档文件。
例如,在播放视频之前,通过下载的方式从服务器获取视频以及与视频中每个时间点的内容相关的视频参数,基于每个时间点、以及本地或云端中与每个时间点的内容相关的视频参数的关联关系进行存档,生成视频存档文件;或者,通过录制的方式从服务器获取视频以及与视频中每个时间点的内容相关的视频参数,基于每个时间点、以及本地或云端中与每个时间点的内容相关的视频参数的关联关系进行存档,生成视频存档文件。
在一些实施例中,获取与视频片段的内容相关的视频参数,包括:基于用户的特征信息以及视频片段的播放场景的上下文调用偏好识别模型,得到用户在播放场景中对多个类型的候选视频参数的偏好程度;基于用户对多个类型的候选视频参数的偏好程度,对多个类型的候选视频参数进行降序排序;基于降序排序的结果获取与视频片段的内容相关的视频参数。
作为示例,视频参数的类型可以是用户或后台预先设置的,也可以是通过偏好识别模型选择的。例如,通过偏好识别模型选择视频参数的方案如下:获取视频片段的上下文,例如视频片段对应的已播放序列、视频片段对应的将播放的序列等,通过偏好识别模型结合用户的画像信息以及视频片段的播放场景的上下文,对20个类型的候选视频参数进行偏好识别处理,得到每个类型的候选视频参数的偏好程度,基于用户对多个类型的候选视频参数的偏好程度,对50个类型的候选视频参数进行降序排序,将前5个类型的候选视频参数作为与视频片段的内容相关的视频参数。其中,偏好识别模型可以为经过训练的神经网络模型,神经网络模型可以是基于视频样本、视频参数样本以及标记的偏好训练得到的。
在一些实施例中,获取与视频片段的内容相关的视频参数,包括:基于标注信息构造输入语句,并基于输入语句调用意图识别模型,得到标注信息表征的意图;从与视频片段的内容相关的多个候选视频参数中,识别出与意图匹配的候选视频参数,以作为与视频片段的内容相关的视频参数。
作为示例,通过意图识别模型选择视频参数的方案如下:基于用户输入的标注信息构造意图识别模型的输入语句,通过意图识别模型提取输入语句的语义信息,并基于语义信息进行意图理解,得到标注信息表征的意图,对标注信息表征的意图与多个候选视频参数进行匹配,确定与标注信息表征的意图匹配的至少一个候选视频参数,并将至少一个候选视频参数作为与视频片段的内容相关的视频参数。
例如,用户输入的标注信息为“这个游戏画面好多怪兽”,通过意图识别模型获取该标注信息的意图为介绍怪兽。因此,在多个候选的游戏参数中筛选出与怪兽相关的参数,例如怪兽种类、数量、战斗力、血量等。
例如,用户输入的标注信息为“这个击杀真漂亮”,通过意图识别模型获取该标注信息的意图为分析击杀过程。因此,在多个候选的游戏参数中筛选出角色释放的技能、释放时间、角色占位、击杀对象方位等击杀过程的相关参数。
例如,获取与视频片段的内容相关的视频参数,包括:在视频的画面上显示多个候选的视频参数的类型,响应于视频参数的选择操作,显示被选中的视频参数的类型,获取与类型对应、且与视频片段的内容相关的视频参数。
在步骤104中,将标注信息、视频参数分别与视频片段关联。
例如,在获取了标注信息以及视频参数后,将标注信息、视频参数分别与视频片段关联,以在后续播放视频片段的过程中,同时显示关联的标注信息以及视频参数。
在一些实施例中,将标注信息、视频参数分别与视频片段关联,包括:对视频进行解码处理,得到与视频对应的视频帧;根据视频片段的时间信息将标注信息、视频参数嵌入到与视频片段对应的视频帧中;对嵌入后得到的视频帧以及视频中的其他视频帧进行编码处理,得到嵌入有标注信息、视频参数的视频。
例如,先对视频进行解码从,得到每个时间点的视频帧,获取与视频片段的时间信息对应的视频帧,将该视频片段对应的标注信息以及视频参数嵌入到与视频片段对应的视频帧中的编辑位置,并对嵌入有标注信息以及视频参数的视频帧、以及视频中的未嵌入标注信息以及视频参数的视频帧进行编码,得到嵌入有标注信息、视频参数的视频,在后续播放视频片段的过程中,同时显示嵌入的标注信息以及视频参数。
参见图4B,图4B是本申请实施例提供的视频处理方法的流程示意图,图4B示出图4A的步骤104还可以通过步骤1041实现:在步骤1041中,基于标注信息、视频参数分别与视频片段的时间信息的关联关系,生成关联关系文件;其中,关联关系文件用于在后续播放视频时被读取,并用于根据时间信息显示关联的标注信息和视频参数。
例如,基于标注信息、视频参数分别与视频片段的时间信息的关联关系,生成独立于视频的关联关系文件,关联关系文件包括:不同的视频片段的时间信息分别与不同的视频片段的标注信息、不同的视频片段的视频参数之间的对应关系。在后续播放视频片段的过程中,读取关联关系文件,基于视频片段的时间信息查找到与时间信息关联的标注信息以及视频参数,并显示关联的标注信息以及视频参数,通过关联关系文件实现视频的关联显示,以便后续灵活显示标注信息以及视频参数。
在一些实施例中,基于标注信息、视频参数分别与视频片段的时间信息的关联关系,生成关联关系文件,包括:解析视频参数的类型,视频参数的类型包括时效性视频参数和非时效性视频参数;基于标注信息、非时效性视频参数分别与视频片段的时间信息的关联关系,生成关联关系文件;其中,时效性视频参数是在后续再次播放视频时被实时获取的,且用于与非时效性视频参数整合后在视频片段中显示。
例如,由于视频参数的类型包括时效性视频参数和非时效性视频参数,时效性视频参数需要在播放视频片段时,或播放视频片段之前实时获取,而非时效性视频参数无需实时获取,因此可以在视频播放前,基于标注信息、非时效性视频参数分别与视频片段的时间信息的关联关系,生成独立于视频的关联关系文件,关联关系文件包括:不同的视频片段的时间信息分别与不同的视频片段的标注信息、不同的视频片段的非时效性视频参数之间的对应关系。在后续播放视频片段的过程中,读取关联关系文件,基于视频片段的时间信息查找到与时间信息关联的标注信息以及非时效性视频参数,并将实时获取的时效性视频参数与非时效性视频参数整合后,在播放视频片段时显示标注信息以及整合后的视频参数。
如前,本申请实施例提供的视频处理方法可以由各种类型的电子设备实施。参见图7A,图7A是本申请实施例提供的视频处理方法的流程示意图,结合图7A示出的步骤进行说明。
需要说明的是,图7A示出的方法可以由终端200-1运行的各种形式计算机程序执行,并不局限于上述终端200-1运行的客户端,例如上文的操作系统551、软件模块、脚本和小程序,因此下文中以客户端的示例不应视为对本申请实施例的限定。
在步骤201中,播放视频,视频包括至少一个被标注信息的视频片段。
例如,在视频编辑完成之后,用户打开客户端(如视频播放客户端、短视频客户端、视频剪辑客户端等),进入视频详情页进行视频播放。在视频的时间轴上,通过不同的显示样式显示视频中未被标注的视频片段、以及被标注的视频片段;其中,显示样式包括以下至少之一:颜色、尺寸、特效,如图8所示,通过黄色高亮显示被标注的视频片段801,通过灰色显示未被标注的视频片段802。
在步骤202中,响应于播放至被标注的视频片段,获取与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数,并显示标注信息以及视频参数。
其中,视频片段和标注信息是通过响应于对视频进行的编辑操作获取的,视频参数是自动获取的。
例如,当视频播放至每个被标注的视频片段时,都会进行自动响应,即显示标注信息以及视频参数。
在一些实施例中,在响应于播放至被标注的视频片段之前,在视频的时间轴上显示视频中被标注的多个视频片段的时间信息,其中,时间信息包括视频片段的起始时间点以及结束时间点;响应于针对时间轴的触发操作,根据多个视频片段的时间信息确定被触发的视频片段,并跳转到被触发的视频片段的起始时间点。
如图9所示,在视频的时间轴上显示视频中被标注的多个视频片段的时间信息,例如“00:01”、“00:03”,用户通过鼠标控制点击时间轴上的被标注的视频片段901,则视频跳转到被触发的视频片段901的起始时间点,即“00:01”进行视频播放,通过手动选择被标注的视频片段,用户可以快速播放可能感兴趣的视频片段。
在一些实施例中,获取与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数,并显示标注信息以及视频参数,包括:对视频片段进行解码处理,得到视频片段包括的多个视频帧;基于多个视频帧调用视频渲染接口,以显示多个视频帧;其中,多个视频帧的画面的编辑位置中嵌入有与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数,编辑位置是在视频的标注阶段通过编辑位置设定操作设定的。
例如,当视频中嵌入有标注信息以及视频参数时,则播放到被标注的视频片段时,对视频片段进行解码处理,得到视频片段包括的多个视频帧,调用视频渲染接口,以显示嵌入的标注信息以及视频参数的多个视频帧。通过在视频帧的画面的编辑位置中嵌入与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数的方式,可以在播放视频时,仅通过解码、渲染的过程即可显示标注信息以及视频参数,从而节省从服务器单独获取视频参数以及标注信息的时间,提高视频播放的效率。
参见图7B,图7B是本申请实施例提供的视频处理方法的流程示意图,图7B示出图7A的步骤202还可以通过步骤2021-步骤2022实现:在步骤2021中,基于视频片段的时间信息查询关联关系文件,得到与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数;其中,关联关系文件包括:不同的视频片段的时间信息分别与不同的视频片段的标注信息、不同的视频片段的视频参数之间的对应关系;在步骤2022中,在视频的画面中叠加显示与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数。
例如,通过关联关系文件获取与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数,并在视频画面中通过独立于视频的方式叠加显示与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数,例如通过具有透明度的浮层、弹幕等方式显示标注信息以及视频参数。通过关联关系文件将标注信息以及视频参数从视频中解耦,后续可以灵活控制标注信息以及视频参数的显示时机、显示位置等。
在一些实施例中,视频参数的类型包括时效性视频参数和非时效性视频参数;解析从关联关系文件中查询到的视频参数;当视频参数未包括视频片段的时效性视频参数时,从服务器获取视频片段的时效性视频参数,将从关联关系文件中查询到的视频片段的非时效性视频参数、与从服务器查询到的视频片段的时效性视频参数进行整合,得到与视频片段的内容相关的视频参数。
例如,针对当前的视频片段(即当前播放的视频片段)之后的所有视频片段或者部分视频片段,预先查询是否缺失时效性视频参数,其中,部分视频片段的具体数量可以是根据学习用户的观看习惯确定的,例如基于视频片段的跳跃频率、平均跳跃长度等确定需要具体数量,即基于视频片段的跳跃频率、平均跳跃长度与具体数量正相关,当视频片段的跳跃频率越快、平均跳跃长度越长,则具体数量越大。当关联关系文件中未存储时效性视频参数时,需要从服务器获取视频片段的时效性视频参数,并关联关系文件中存储的视频片段的非时效性视频参数、与从服务器查询到的视频片段的时效性视频参数进行整合,得到与视频片段的内容相关的视频参数,进而在播放视频片段时,同时显示非时效性视频参数以及时效性视频参数。
作为示例,需要预先查询当前的视频片段之后的1个视频片段是否缺失时效性视频参数,例如,连续的视频片段1和视频片段2,当前正在播放视频片段1,则预先从关联关系文件中查询视频片段2的视频参数,当视频片段2的视频参数未包括时效性视频参数时,从服务器获取视频片段2的时效性视频参数,将从关联关系文件中查询到的视频片段2的非时效性视频参数、与从服务器查询到的视频片段2的时效性视频参数进行整合,得到与视频片段2的内容相关的视频参数,进而在播放视频片段2时,同时显示视频片段2的非时效性视频参数以及时效性视频参数。
在一些实施例中,视频参数的类型包括时效性视频参数和非时效性视频参数,关联关系文件中至少包括非时效性视频参数,从服务器获取视频片段的时效性视频参数,并与从关联关系文件中查询到的视频片段的时效性视频参数进行更新验证;当通过更新验证确定时效性视频参数发生更新时,将从服务器获取的视频片段的时效性视频参数、与从关联关系文件中查询到的视频片段的非时效性视频参数进行整合,得到视频片段的内容相关的视频参数。
例如,针对当前的视频片段之后的所有视频片段或者部分视频片段,预先从服务器获取视频片段的时效性视频参数,并从关联关系文件中查询的视频片段的时效性视频参数,将从服务器获取的视频片段的时效性视频参数与从关联关系文件中查询到的视频片段的时效性视频参数进行更新验证,当从服务器获取的视频片段的时效性视频参数与从关联关系文件中查询到的视频片段的时效性视频参数不同时,确定时效性视频参数发生更新,则将从服务器获取的视频片段的时效性视频参数、与从关联关系文件中查询到的视频片段的非时效性视频参数进行整合,得到视频片段的内容相关的视频参数。
在一些实施例中,获取配置信息,当配置信息表征自动更新开启时,基于从服务器获取视频片段的时效性视频参数,并基于时效性视频参数更新关联关系文件;其中,关联关系文件以先存储先删除的方式存储设定多个不同版本的时效性视频参数。
如图10所示,在视频的显示界面呈现自动更新的开关1001,当用户点击开关1001,使开关1001处于开启状态,则将配置信息中的自动更新状态置为自动更新开启,在播放视频的过程中,实时获取配置信息,当配置信息表征自动更新开启时,基于从服务器获取视频片段的时效性视频参数,并基于时效性视频参数更新关联关系文件,其中,时效性视频参数的版本数量可以是用户设定的,还可以是根据电子设备的可用存储空间弹性伸缩。
例如,关联关系文件中可存储3个版本的时效性视频参数,即第一个存储的第一版本的时效性视频参数、第二个存储的第二版本的时效性视频参数以及第三个存储的第三版本的时效性视频参数,当基于从服务器获取视频片段的第四个版本的时效性视频参数,则将四个版本的时效性视频参数存储至关联关系文件,并将第一版本的时效性视频参数删除,则关联关系文件中存储有第二版本的时效性视频参数、第三版本的时效性视频参数以及第四版本的时效性视频参数。
在一些实施例中,获取与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数,包括:获取配置信息,配置信息包括预先配置的标注信息的来源标识、视频参数的目标种类;基于视频片段从关联关系文件中查询到与来源标识适配的标注信息,并作为与视频片段关联的标注信息;基于视频片段从关联关系文件中查询到与目标种类适配的视频参数,并作为与视频片段的内容相关的视频参数;其中,关联关系文件包括:不同的视频片段分别与不同来源的标注信息、不同种类的视频参数之间的对应关系。
如图11A所示,在视频的显示界面呈现配置入口1101,响应于配置入口1101的触发操作,在显示界面呈现针对视频的配置界面,其中,配置界面包括标注信息的配置项1102,在标注信息的配置项可以显示标注信息的所有来源标识(例如用户标识),用户可以在所有来源标识中选择部分来源标识,响应于针对来源标识的选择操作,更新配置信息,在播放视频的过程中,实时获取配置信息,基于视频片段从关联关系文件中查询到与来源标识适配的标注信息,并作为与视频片段关联的标注信息,并在视频片段显示与来源标识适配的标注信息。通过配置标注信息的来源标识,在播放视频时,灵活显示标注信息。
如图11B所示,在视频的显示界面呈现配置入口1101,响应于配置入口1101的触发操作,在显示界面呈现针对视频的配置界面,其中,配置界面包括视频参数的配置项1103,在视频参数的配置项可以显示视频参数的所有种类(例如时效性、非时效性、操作解说、人物解说等),用户可以在所有种类中选择部分目标种类,响应于针对种类的选择操作,更新配置信息,在播放视频的过程中,实时获取配置信息,基于视频片段从关联关系文件中查询到与目标种类适配的视频参数,并作为与视频片段的内容相关的视频参数,并在视频片段显示与目标种类适配的视频参数。通过配置视频参数的种类,在播放视频时,灵活显示视频参数。
在一些实施例中,在获取与视频片段关联的标注信息、以及与视频片段的内容相关的视频参数之前,获取配置信息;当配置信息表征在播放视频时需要显示标注信息时,确定将执行获取与视频片段关联的标注信息的操作;当配置信息表征在播放视频时需要显示视频参数时,确定将执行获取与视频片段的内容相关的视频参数的操作。
如图12所示,在视频的显示界面呈现显示标注信息的开关1201以及显示视频参数的开关1202,当用户点击开关1201,使开关1201处于开启状态,则将配置信息中的显示标注信息的状态置为开启,当用户点击开关1202,使开关1202处于开启状态,则将配置信息中的显示视频参数的状态置为开启,在播放视频的过程中,实时获取配置信息,当配置信息表征显示标注信息开启时,基于从服务器获取视频片段的标注信息,并显示标注信息,当配置信息表征显示视频参数开启时,基于从服务器获取视频片段的视频参数,并显示视频参数。
下面,将说明本申请实施例在一个实际的应用场景中的示例性应用。
相关技术中,通过视频呈现游戏bug或者高光时刻,用户无法直观快速了解视频中的哪个片段是讲解游戏bug或者高光时刻,观看时无法了解更为详细的游戏参数等信息;通过截图呈现游戏bug或者高光时刻,游戏截图和文字描述不丰富、不连贯、不直观,无法通过游戏截图和文字描述了解更为详细的游戏参数信息。
为了解决上述问题,本申请实施例提出一种视频处理方法,当遇到视频中的问题或想记录的高光时刻时,可以通过标注的方式记录下来,并将标注信息与视频时间关联,在播放视频时,显示与视频时间关联的标注信息以及游戏参数,方便快速回看和分享。
需要说明的是,本申请实施例提供的视频处理方法包含两个阶段,即视频标注阶段以及视频播放阶段。下面具体解释视频标注阶段以及视频播放阶段:
A)视频标注阶段
如图13所示,标注游戏问题或者高光时刻的流程如下:
步骤11、在游戏过程中自动录制视频。
步骤12、在录制视频的过程中,保存游戏的时间、操作、路径、游戏数值等游戏参数,并将游戏参数存档,生成游戏存档文件。
步骤13、游戏存档通过时间信息与视频关联,即基于时间信息将游戏参数和视频关联。
步骤14、生成关联了游戏参数的视频后,对视频进行编辑。
步骤15、用户编辑视频片段区(即选取视频中的标注片段),获取视频片段区中关联的游戏参数,并在视频片段区的编辑界面中显示关联的游戏参数,用户在视频片段区的编辑界面中添加文字描述,以实现标注信息的编辑。
步骤16、关联视频片段区中的标注信息以及游戏参数,生成包括标注信息以及游戏参数的游戏视频。
步骤17、允许用户继续在视频中添加标注,以在一段视频中生成多段带有标注的视频片段。
B)视频播放阶段
如图14所示,查看带有标注的视频片段的处理流程如下所示:
步骤21、用户进入视频详情页进行视频播放,其中,在视频播放的时间轴上,通过高亮的形式显示带有标注信息的视频片段。
步骤22、在播放过程中,用户基于视频的时间轴中高亮的部分可以清晰了解到哪些视频片段有标注信息,如图15A所示,当正常播放至时间轴上非高亮的部分1501时,视频的播放画面上没有标注信息;如图15B所示,当播放至时间轴上高亮的部分1502时,在视频的播放画面上显示标注信息1503。
步骤23、用户点击高亮的视频片段,则视频播放跳转至对应的视频片段。
步骤24、在该视频片段的画面中显示该视频片段对应的标注信息。
步骤25、除了显示标注信息,还会显示在视频录制时自动获取的游戏参数。
如图16A所示,视频中存在2个高亮的视频片段(即标注的视频片段),当用户点击第一个标注的视频片段1601时,视频定位到第一个标注的视频片段1601的起始阶段,播放第一个标注的视频片段1601,并显示第一个标注的视频片段1601对应的标注信息1602和游戏参数1603;如图16B所示,当用户点击第二个标注的视频片段1604时,视频定位到第二个标注的视频片段1604的起始阶段,播放第二个标注的视频片段1604,并显示第二个标注的视频片段1604对应的标注信息1605和游戏参数1606。
综上,本申请实施例提出一种视频处理方法具有以下有益效果:
1)快速标注游戏bug或者游戏内的高光时刻。
2)便捷查看视频中带有标注信息的视频片段,可快速跳转至带有标注信息的视频片段,操作高效。
3)通过视频标注可了解对应的标注信息以及游戏参数。
至此已经结合本申请实施例提供的终端的示例性应用和实施,说明本申请实施例提供的视频处理方法,下面继续说明本申请实施例提供的视频处理装置555中各个模块(第一播放模块5551、编辑模块5552、获取模块5553以及关联模块5554)配合实现视频处理的方案。
第一播放模块5551,用于播放视频;编辑模块5552,用于响应于针对所述视频的编辑操作,确定所述视频中被编辑的视频片段,并在编辑界面显示针对所述视频片段输入的标注信息;获取模块5553,用于获取与所述视频片段的内容相关的视频参数,并在所述编辑界面显示所述视频参数;关联模块5554,用于将所述标注信息、所述视频参数分别与所述视频片段关联。
在一些实施例中,所述编辑操作包括选择操作和标注操作;所述编辑模块5552还用于响应于所述选择操作,获取被设定的时间信息,所述时间信息包括所述视频片段的起始时间点以及结束时间点,根据所述时间信息确定对应的视频片段;响应于所述标注操作,在所述编辑界面显示所述标注操作针对所述视频片段输入的标注信息。
在一些实施例中,所述编辑操作包括选择操作和标注操作;所述编辑模块5552还用于将所述视频划分为多个候选视频片段,每个所述候选视频片段对应一个情节单元,在所述视频的时间轴中显示所述多个候选视频片段的时间信息,所述时间信息包括所述候选视频片段的起始时间点以及结束时间点;响应于所述选择操作,将被选择的候选视频片段作为所述视频中被编辑的视频片段;响应于所述标注操作,在所述编辑界面显示所述标注操作针对所述视频片段输入的标注信息。
在一些实施例中,所述编辑模块5552还用于通过以下方式至少之一,将所述视频划分为多个候选视频片段:按照所述视频中视频参数的分布对所述视频进行划分;按照所述视频的场景对所述视频进行划分;按照用户对所述视频的偏好对所述视频进行划分。
在一些实施例中,所述编辑模块5552还用于响应于编辑位置设定操作,确定所述视频的画面中被设定的编辑位置,所述编辑位置是用于后续播放所述视频片段时显示所述标注信息所使用的位置;在所述编辑位置上显示针对所述视频片段的编辑界面。
在一些实施例中,所述获取模块5553还用于根据所述视频片段的时间信息,从预先存储的视频存档文件中查找与所述视频片段的时间信息对应的视频参数,所述视频存档文件包括所述视频的每个时间点、以及与所述每个时间点相关的视频参数;将与所述时间信息对应的视频参数作为与所述视频片段的内容相关的视频参数。
在一些实施例中,所述获取模块5553还用于在播放所述视频之前,通过下载的或录制的方式从服务器获取所述视频;在获取所述视频的过程中,从所述服务器获取与所述视频中每个时间点的内容相关的视频参数,并基于所述每个时间点、以及与所述每个时间点的内容相关的视频参数的关联关系,生成所述视频存档文件。
在一些实施例中,所述关联模块5554还用于对所述视频进行解码处理,得到与所述视频对应的视频帧;根据所述视频片段的时间信息将所述标注信息、所述视频参数嵌入到与所述视频片段对应的视频帧中;对嵌入后得到的视频帧以及所述视频中的其他视频帧进行编码处理,得到嵌入有所述标注信息、所述视频参数的所述视频。
在一些实施例中,所述关联模块5554还用于基于所述标注信息、所述视频参数分别与所述视频片段的时间信息的关联关系,生成关联关系文件;其中,所述关联关系文件用于在后续播放所述视频时被读取,并用于根据所述时间信息显示关联的所述标注信息和所述视频参数。
在一些实施例中,所述关联模块5554还用于解析所述视频参数的类型,所述视频参数的类型包括时效性视频参数和非时效性视频参数;基于所述标注信息、所述非时效性视频参数分别与所述视频片段的时间信息的关联关系,生成关联关系文件;其中,所述时效性视频参数是在后续再次播放所述视频时被实时获取的,且用于与所述非时效性视频参数整合后在所述视频片段中显示。
在一些实施例中,所述获取模块5553还用于基于用户的特征信息以及所述视频片段的播放场景的上下文调用偏好识别模型,得到所述用户在所述播放场景中对多个类型的候选视频参数的偏好程度;基于所述用户对多个类型的候选视频参数的偏好程度,对所述多个类型的候选视频参数进行降序排序;基于所述降序排序的结果获取与所述视频片段的内容相关的视频参数。
在一些实施例中,所述获取模块5553还用于基于所述标注信息构造输入语句,并基于所述输入语句调用意图识别模型,得到所述标注信息表征的意图;从与所述视频片段的内容相关的多个候选视频参数中,识别出与所述意图匹配的候选视频参数,以作为与所述视频片段的内容相关的视频参数。
下面继续说明本申请实施例提供的视频处理装置555中各个模块(第二播放模块5555以及显示模块5556)配合实现视频处理的方案。
第二播放模块5555,用于播放视频,所述视频包括至少一个被标注信息的视频片段;显示模块5556,用于响应于播放至被标注的视频片段,获取与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,并显示所述标注信息以及所述视频参数;其中,所述视频片段和所述标注信息是通过响应于对所述视频进行的编辑操作获取的,所述视频参数是自动获取的。
在一些实施例中,所述显示模块5556还用于在所述视频的时间轴上显示所述视频中被标注的多个视频片段的时间信息,其中,所述时间信息包括所述视频片段的起始时间点以及结束时间点;响应于针对所述时间轴的触发操作,根据所述多个视频片段的时间信息确定被触发的视频片段,并跳转到所述被触发的视频片段的起始时间点。
在一些实施例中,所述播放模块还用于在所述视频的时间轴上,通过不同的显示样式显示所述视频中未被标注的视频片段、以及所述被标注的视频片段;其中,所述显示样式包括以下至少之一:颜色、尺寸、特效。
在一些实施例中,所述显示模块5556还用于对所述视频片段进行解码处理,得到所述视频片段包括的多个视频帧;基于所述多个视频帧调用视频渲染接口,以显示所述多个视频帧;其中,所述多个视频帧的画面的编辑位置中嵌入有与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,所述编辑位置是在所述视频的标注阶段通过编辑位置设定操作设定的。
在一些实施例中,所述显示模块5556还用于基于所述视频片段的时间信息查询关联关系文件,得到与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数;其中,所述关联关系文件包括:不同的所述视频片段的时间信息分别与不同的所述视频片段的标注信息、不同的所述视频片段的视频参数之间的对应关系;在所述视频的画面中叠加显示与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数。
在一些实施例中,所述视频参数的类型包括时效性视频参数和非时效性视频参数;所述显示模块5556还用于解析从所述关联关系文件中查询到的所述视频参数;当所述视频参数未包括所述视频片段的时效性视频参数时,从服务器获取所述视频片段的时效性视频参数,将从所述关联关系文件中查询到的所述视频片段的非时效性视频参数、与从所述服务器查询到的所述视频片段的时效性视频参数进行整合,得到与所述视频片段的内容相关的视频参数。
在一些实施例中,所述视频参数的类型包括时效性视频参数和非时效性视频参数,所述关联关系文件中至少包括非时效性视频参数;所述显示模块5556还用于从服务器获取所述视频片段的时效性视频参数,并与从所述关联关系文件中查询到的所述视频片段的时效性视频参数进行更新验证;当通过所述更新验证确定所述时效性视频参数发生更新时,将从所述服务器获取的所述视频片段的时效性视频参数、与从所述关联关系文件中查询到的所述视频片段的非时效性视频参数进行整合,得到所述视频片段的内容相关的视频参数。
在一些实施例中,所述显示模块5556还用于获取配置信息,当所述配置信息表征自动更新开启时,基于从所述服务器获取所述视频片段的时效性视频参数,并基于所述时效性视频参数更新所述关联关系文件;其中,所述关联关系文件以先存储先删除的方式存储设定多个不同版本的时效性视频参数。
在一些实施例中,所述显示模块5556还用于获取配置信息,所述配置信息包括预先配置的所述标注信息的来源标识、所述视频参数的目标种类;基于所述视频片段从关联关系文件中查询到与所述来源标识适配的标注信息,并作为与所述视频片段关联的标注信息;基于所述视频片段从所述关联关系文件中查询到与所述目标种类适配的视频参数,并作为与所述视频片段的内容相关的视频参数;其中,所述关联关系文件包括:不同的所述视频片段分别与不同来源的所述标注信息、不同种类的所述视频参数之间的对应关系。
在一些实施例中,所述显示模块5556还用于获取配置信息;当所述配置信息表征在播放所述视频时需要显示所述标注信息时,确定将执行获取与所述视频片段关联的标注信息的操作;当所述配置信息表征在播放所述视频时需要显示所述视频参数时,确定将执行获取与所述视频片段的内容相关的视频参数的操作。
本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行本申请实施例上述的视频处理方法。
本申请实施例提供一种存储有可执行指令的计算机可读存储介质,其中存储有可执行指令,当可执行指令被处理器执行时,将引起处理器执行本申请实施例提供的视频处理方法,例如,如图4A-图4B示出的视频处理方法。
在一些实施例中,计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器;也可以是包括上述存储器之一或任意组合的各种设备。
在一些实施例中,可执行指令可以采用程序、软件、软件模块、脚本或代码的形式,按任意形式的编程语言(包括编译或解释语言,或者声明性或过程性语言)来编写,并且其可按任意形式部署,包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。
作为示例,可执行指令可以但不一定对应于文件系统中的文件,可以可被存储在保存其它程序或数据的文件的一部分,例如,存储在超文本标记语言(HTML,Hyper TextMarkup Language)文档中的一个或多个脚本中,存储在专用于所讨论的程序的单个文件中,或者,存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。
作为示例,可执行指令可被部署为在一个计算设备上执行,或者在位于一个地点的多个计算设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算设备上执行。
以上所述,仅为本申请的实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和范围之内所作的任何修改、等同替换和改进等,均包含在本申请的保护范围之内。

Claims (20)

1.一种视频处理方法,其特征在于,所述方法包括:
播放视频;
响应于针对所述视频的编辑操作,确定所述视频中被编辑的视频片段,并在编辑界面显示针对所述视频片段输入的标注信息;
获取与所述视频片段的内容相关的视频参数,并在所述编辑界面显示所述视频参数;
将所述标注信息、所述视频参数分别与所述视频片段关联。
2.根据权利要求1所述的方法,其特征在于,
所述编辑操作包括选择操作和标注操作;
所述响应于针对所述视频的编辑操作,确定所述视频中被编辑的视频片段,并在编辑界面显示针对所述视频片段输入的标注信息,包括:
响应于所述选择操作,获取被设定的时间信息,所述时间信息包括所述视频片段的起始时间点以及结束时间点,根据所述时间信息确定对应的视频片段;
响应于所述标注操作,在所述编辑界面显示所述标注操作针对所述视频片段输入的标注信息。
3.根据权利要求1所述的方法,其特征在于,
所述编辑操作包括选择操作和标注操作;
所述响应于针对所述视频的编辑操作,确定所述视频中被编辑的视频片段,并在所述编辑界面显示针对所述视频片段输入的标注信息,包括:
将所述视频划分为多个候选视频片段,每个所述候选视频片段对应一个情节单元,在所述视频的时间轴中显示所述多个候选视频片段的时间信息,所述时间信息包括所述候选视频片段的起始时间点以及结束时间点;
响应于所述选择操作,将被选择的候选视频片段作为所述视频中被编辑的视频片段;
响应于所述标注操作,在所述编辑界面显示所述标注操作针对所述视频片段输入的标注信息。
4.根据权利要求3所述的方法,其特征在于,所述将所述视频划分为多个候选视频片段,包括:
通过以下方式至少之一,将所述视频划分为多个候选视频片段:
按照所述视频中视频参数的分布对所述视频进行划分;
按照所述视频的场景对所述视频进行划分;
按照用户对所述视频的偏好对所述视频进行划分。
5.根据权利要求3或4所述的方法,其特征在于,在响应于所述标注操作,在所述编辑界面显示所述标注操作针对所述视频片段输入的标注信息之前,所述方法还包括:
响应于编辑位置设定操作,确定所述视频的画面中被设定的编辑位置,所述编辑位置是用于后续播放所述视频片段时显示所述标注信息所使用的位置;
在所述编辑位置上显示针对所述视频片段的编辑界面。
6.根据权利要求1所述的方法,其特征在于,所述获取与所述视频片段的内容相关的视频参数,包括:
根据所述视频片段的时间信息,从预先存储的视频存档文件中查找与所述视频片段的时间信息对应的视频参数,所述视频存档文件包括所述视频的每个时间点、以及与所述每个时间点相关的视频参数;
将与所述时间信息对应的视频参数作为与所述视频片段的内容相关的视频参数。
7.根据权利要求6所述的方法,其特征在于,在从预先存储的视频存档文件中查找与所述视频片段的时间信息对应的视频参数之前,所述方法还包括:
在播放所述视频之前,通过下载的或录制的方式从服务器获取所述视频;
在获取所述视频的过程中,从所述服务器获取与所述视频中每个时间点的内容相关的视频参数,并基于所述每个时间点、以及与所述每个时间点的内容相关的视频参数的关联关系,生成所述视频存档文件。
8.根据权利要求1所述的方法,其特征在于,所述将所述标注信息、所述视频参数分别与所述视频片段关联,包括:
对所述视频进行解码处理,得到与所述视频对应的视频帧;
根据所述视频片段的时间信息将所述标注信息、所述视频参数嵌入到与所述视频片段对应的视频帧中;
对嵌入后得到的视频帧以及所述视频中的其他视频帧进行编码处理,得到嵌入有所述标注信息、所述视频参数的所述视频。
9.根据权利要求1所述的方法,其特征在于,所述将所述标注信息、所述视频参数分别与所述视频片段关联,包括:
基于所述标注信息、所述视频参数分别与所述视频片段的时间信息的关联关系,生成关联关系文件;
其中,所述关联关系文件用于在后续播放所述视频时被读取,并用于根据所述时间信息显示关联的所述标注信息和所述视频参数。
10.根据权利要求9所述的方法,其特征在于,所述基于所述标注信息、所述视频参数分别与所述视频片段的时间信息的关联关系,生成关联关系文件,包括:
解析所述视频参数的类型,所述视频参数的类型包括时效性视频参数和非时效性视频参数;
基于所述标注信息、所述非时效性视频参数分别与所述视频片段的时间信息的关联关系,生成关联关系文件;
其中,所述时效性视频参数是在后续再次播放所述视频时被实时获取的,且用于与所述非时效性视频参数整合后在所述视频片段中显示。
11.一种视频处理方法,其特征在于,所述方法包括:
播放视频,所述视频包括至少一个被标注信息的视频片段;
响应于播放至被标注的视频片段,获取与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,并显示所述标注信息以及所述视频参数;
其中,所述视频片段和所述标注信息是通过响应于对所述视频进行的编辑操作获取的,所述视频参数是自动获取的。
12.根据权利要求11所述的方法,其特征在于,所述获取与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,并显示所述标注信息以及所述视频参数,包括:
对所述视频片段进行解码处理,得到所述视频片段包括的多个视频帧;
基于所述多个视频帧调用视频渲染接口,以显示所述多个视频帧;
其中,所述多个视频帧的画面的编辑位置中嵌入有与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,所述编辑位置是在所述视频的标注阶段通过编辑位置设定操作设定的。
13.根据权利要求11所述的方法,其特征在于,所述获取与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,并显示与所述标注信息以及所述视频参数,包括:
基于所述视频片段的时间信息查询关联关系文件,得到与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数;
其中,所述关联关系文件包括:不同的所述视频片段的时间信息分别与不同的所述视频片段的标注信息、不同的所述视频片段的视频参数之间的对应关系;
在所述视频的画面中叠加显示与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数。
14.根据权利要求13所述的方法,其特征在于,
所述视频参数的类型包括时效性视频参数和非时效性视频参数;
所述方法还包括:
解析从所述关联关系文件中查询到的所述视频参数;
当所述视频参数未包括所述视频片段的时效性视频参数时,从服务器获取所述视频片段的时效性视频参数,将从所述关联关系文件中查询到的所述视频片段的非时效性视频参数、与从所述服务器查询到的所述视频片段的时效性视频参数进行整合,得到与所述视频片段的内容相关的视频参数。
15.根据权利要求13所述的方法,其特征在于,
所述视频参数的类型包括时效性视频参数和非时效性视频参数,所述关联关系文件中至少包括非时效性视频参数;
所述方法还包括:
从服务器获取所述视频片段的时效性视频参数,并与从所述关联关系文件中查询到的所述视频片段的时效性视频参数进行更新验证;
当通过所述更新验证确定所述时效性视频参数发生更新时,将从所述服务器获取的所述视频片段的时效性视频参数、与从所述关联关系文件中查询到的所述视频片段的非时效性视频参数进行整合,得到所述视频片段的内容相关的视频参数。
16.根据权利要求15所述的方法,其特征在于,所述方法还包括:
获取配置信息,当所述配置信息表征自动更新开启时,基于从所述服务器获取所述视频片段的时效性视频参数,并基于所述时效性视频参数更新所述关联关系文件;
其中,所述关联关系文件以先存储先删除的方式存储设定多个不同版本的时效性视频参数。
17.一种视频处理装置,其特征在于,所述装置包括:
第一播放模块,用于播放视频;
编辑模块,用于响应于针对所述视频的编辑操作,确定所述视频中被编辑的视频片段,并在编辑界面显示针对所述视频片段输入的标注信息;
获取模块,用于获取与所述视频片段的内容相关的视频参数,并在所述编辑界面显示所述视频参数;
关联模块,用于将所述标注信息、所述视频参数分别与所述视频片段关联。
18.一种视频处理装置,其特征在于,所述装置包括:
第二播放模块,用于播放视频,所述视频包括至少一个被标注信息的视频片段;
显示模块,用于响应于播放至被标注的视频片段,获取与所述视频片段关联的标注信息、以及与所述视频片段的内容相关的视频参数,并显示所述标注信息以及所述视频参数;
其中,所述视频片段和所述标注信息是通过响应于对所述视频进行的编辑操作获取的,所述视频参数是自动获取的。
19.一种电子设备,其特征在于,所述电子设备包括:
存储器,用于存储可执行指令;
处理器,用于执行所述存储器中存储的可执行指令时,实现权利要求1至16任一项所述的视频处理方法。
20.一种计算机可读存储介质,其特征在于,存储有可执行指令,用于被处理器执行时,实现权利要求1至16任一项所述的视频处理方法。
CN202110502299.0A 2021-05-08 2021-05-08 视频处理方法、装置、电子设备及存储介质 Active CN113207039B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110502299.0A CN113207039B (zh) 2021-05-08 2021-05-08 视频处理方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110502299.0A CN113207039B (zh) 2021-05-08 2021-05-08 视频处理方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN113207039A true CN113207039A (zh) 2021-08-03
CN113207039B CN113207039B (zh) 2022-07-29

Family

ID=77030700

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110502299.0A Active CN113207039B (zh) 2021-05-08 2021-05-08 视频处理方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN113207039B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114866805A (zh) * 2022-04-25 2022-08-05 阿里巴巴(中国)有限公司 视频处理方法、设备及存储介质
CN115334354A (zh) * 2022-08-15 2022-11-11 北京百度网讯科技有限公司 视频标注方法和装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101127870A (zh) * 2007-09-13 2008-02-20 深圳市融合视讯科技有限公司 一种视频流媒体书签的创建及使用方法
US20080046925A1 (en) * 2006-08-17 2008-02-21 Microsoft Corporation Temporal and spatial in-video marking, indexing, and searching
US20120110455A1 (en) * 2010-11-01 2012-05-03 Microsoft Corporation Video viewing and tagging system
CN103491450A (zh) * 2013-09-25 2014-01-01 深圳市金立通信设备有限公司 一种媒体流回放片段的设置方法及终端
CN104618806A (zh) * 2014-03-17 2015-05-13 腾讯科技(北京)有限公司 获取视频的评论信息的方法、装置及系统
CN105898375A (zh) * 2016-07-01 2016-08-24 上海幻电信息科技有限公司 一种弹幕推送系统及推送方法
CN108156528A (zh) * 2017-12-18 2018-06-12 北京奇艺世纪科技有限公司 一种视频处理方法及装置
US20190289359A1 (en) * 2018-03-14 2019-09-19 Bharath Sekar Intelligent video interaction method
CN112221118A (zh) * 2020-11-09 2021-01-15 腾讯科技(深圳)有限公司 人机交互的感知处理方法、装置及电子设备

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080046925A1 (en) * 2006-08-17 2008-02-21 Microsoft Corporation Temporal and spatial in-video marking, indexing, and searching
CN101127870A (zh) * 2007-09-13 2008-02-20 深圳市融合视讯科技有限公司 一种视频流媒体书签的创建及使用方法
US20120110455A1 (en) * 2010-11-01 2012-05-03 Microsoft Corporation Video viewing and tagging system
CN103491450A (zh) * 2013-09-25 2014-01-01 深圳市金立通信设备有限公司 一种媒体流回放片段的设置方法及终端
CN104618806A (zh) * 2014-03-17 2015-05-13 腾讯科技(北京)有限公司 获取视频的评论信息的方法、装置及系统
CN105898375A (zh) * 2016-07-01 2016-08-24 上海幻电信息科技有限公司 一种弹幕推送系统及推送方法
CN108156528A (zh) * 2017-12-18 2018-06-12 北京奇艺世纪科技有限公司 一种视频处理方法及装置
US20190289359A1 (en) * 2018-03-14 2019-09-19 Bharath Sekar Intelligent video interaction method
CN112221118A (zh) * 2020-11-09 2021-01-15 腾讯科技(深圳)有限公司 人机交互的感知处理方法、装置及电子设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114866805A (zh) * 2022-04-25 2022-08-05 阿里巴巴(中国)有限公司 视频处理方法、设备及存储介质
CN115334354A (zh) * 2022-08-15 2022-11-11 北京百度网讯科技有限公司 视频标注方法和装置
CN115334354B (zh) * 2022-08-15 2023-12-29 北京百度网讯科技有限公司 视频标注方法和装置

Also Published As

Publication number Publication date
CN113207039B (zh) 2022-07-29

Similar Documents

Publication Publication Date Title
CN113207039B (zh) 视频处理方法、装置、电子设备及存储介质
US20130272679A1 (en) Video Generator System
CN111654749B (zh) 视频资料制作方法及装置、电子设备、计算机可读介质
CN113268226A (zh) 页面数据生成方法、装置、存储介质及设备
CN113395605B (zh) 视频笔记生成方法及装置
CN113010698B (zh) 多媒体的交互方法、信息交互方法、装置、设备及介质
CN107547922B (zh) 信息处理方法、装置、系统及计算机可读存储介质
CN111800668A (zh) 弹幕的处理方法、装置、设备及存储介质
CN112528203A (zh) 基于网页的在线文档制作方法及系统
CN112104908A (zh) 音视频文件播放方法、装置、计算机设备及可读存储介质
CN112612690A (zh) 一种用户界面信息处理方法、装置、电子设备及存储介质
CN109116718B (zh) 设置闹钟的方法及设备
US8234657B1 (en) System and method for communicating state and title information between a browser and a rich internet application with browser forward and back button support
CN113259708A (zh) 基于短视频介绍商品的方法、计算机设备和介质
CN114647412A (zh) 内容显示方法及终端设备
CN113709575B (zh) 视频编辑处理方法、装置、电子设备及存储介质
CN115379136A (zh) 特效道具处理方法、装置、电子设备及存储介质
CN113282268B (zh) 音效配置方法和装置、存储介质及电子设备
CN112379805B (zh) 待编辑对象的处理方法、系统及装置
CN107728785A (zh) 机器人交互方法及其系统
US20200402539A1 (en) Method and device of playing video, and computing device
CN113934959A (zh) 一种程序预览方法、装置、计算机设备和存储介质
CN112328152A (zh) 媒体文件的播放控制方法、装置、电子设备及存储介质
CN115037960B (zh) 互动视频的生成方法及装置
CN114339285B (zh) 知识点的处理方法、视频处理方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40051673

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant