CN116962785A - 视频处理方法、装置、电子设备、存储介质及程序产品 - Google Patents
视频处理方法、装置、电子设备、存储介质及程序产品 Download PDFInfo
- Publication number
- CN116962785A CN116962785A CN202310673165.4A CN202310673165A CN116962785A CN 116962785 A CN116962785 A CN 116962785A CN 202310673165 A CN202310673165 A CN 202310673165A CN 116962785 A CN116962785 A CN 116962785A
- Authority
- CN
- China
- Prior art keywords
- video
- comment
- comment information
- time
- displaying
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 36
- 230000004044 response Effects 0.000 claims abstract description 62
- 238000000034 method Methods 0.000 claims abstract description 47
- 238000012545 processing Methods 0.000 claims abstract description 32
- 238000004590 computer program Methods 0.000 claims abstract description 23
- 238000012937 correction Methods 0.000 claims description 29
- 230000015654 memory Effects 0.000 claims description 20
- 238000012549 training Methods 0.000 claims description 13
- 239000000523 sample Substances 0.000 claims 4
- 239000000758 substrate Substances 0.000 claims 4
- 238000011156 evaluation Methods 0.000 claims 1
- 230000006870 function Effects 0.000 description 26
- 238000010586 diagram Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 230000000644 propagated effect Effects 0.000 description 5
- 238000013473 artificial intelligence Methods 0.000 description 4
- 238000003062 neural network model Methods 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 3
- 238000013515 script Methods 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000009189 diving Effects 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000004931 aggregating effect Effects 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004883 computer application Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请提供了一种视频处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品;方法包括:显示视频播放界面;响应于编辑操作,在评论编辑区域中显示评论信息,其中,评论信息关联有根据编辑操作设定的显示参数,显示参数包括用于在视频播放界面中显示评论信息的时间参数、位置参数中的至少之一;响应于针对评论信息的发布操作、且显示参数与视频中对应编辑操作的视频事件不匹配,基于与视频事件匹配的目标显示参数,在视频播放界面中显示已发布的评论信息。通过本申请,能够提高评论的有效性。
Description
技术领域
本申请涉及计算机应用技术,尤其涉及一种视频处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品。
背景技术
随着计算机技术的发展,电子设备可以实现更加丰富的和形象的视频画面。相比于文字与图片,视频携带了更丰富更具表现力的信息,从而越来越受到用户的喜爱。
然而,用户在观看影视剧或游戏等视频时,经常会对视频的某段视频内容感兴趣,此时用户可能想评论该段视频片段。相关技术中,可以通过选择视频播放时的某一时间点进行评论,但是这种方式难以准确定位视频片段,并对视频片段进行评论,影响了用户体验。
发明内容
本申请实施例提供一种视频处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品,能够准确地将评论信息与视频事件对应起来,提高评论的有效性。
本申请实施例的技术方案是这样实现的:
本申请实施例提供一种视频处理方法,包括:
显示视频播放界面;
响应于编辑操作,在评论编辑区域中显示评论信息,其中,所述评论信息关联有根据所述编辑操作设定的显示参数,所述显示参数包括用于在所述视频播放界面中显示所述评论信息的时间参数、位置参数中的至少之一;
响应于针对所述评论信息的发布操作、且所述显示参数与视频中对应所述编辑操作的视频事件不匹配,基于与所述视频事件匹配的目标显示参数,在所述视频播放界面中显示已发布的所述评论信息。
本申请实施例提供一种视频处理装置,包括:
第一显示模块,用于显示视频播放界面;
评论模块,用于响应于编辑操作,在评论编辑区域中显示评论信息,其中,所述评论信息关联有根据所述编辑操作设定的显示参数,所述显示参数包括用于在所述视频播放界面中显示所述评论信息的时间参数、位置参数中的至少之一;
第二显示模块,用于响应于针对所述评论信息的发布操作、且所述显示参数与视频中对应所述编辑操作的视频事件不匹配,基于与所述视频事件匹配的目标显示参数,在所述视频播放界面中显示已发布的所述评论信息。
本申请实施例提供一种用于视频处理的电子设备,所述电子设备包括:
存储器,用于存储计算机程序或计算机可执行指令;
处理器,用于执行所述存储器中存储的计算机程序或计算机可执行指令时,实现本申请实施例提供的视频处理方法。
本申请实施例提供一种计算机可读存储介质,存储有计算机程序或计算机可执行指令,所述计算机程序或计算机可执行指令被处理器执行时实现本申请实施例提供的视频处理方法。
本申请实施例提供一种计算机程序产品,包括计算机程序或计算机可执行指令,所述计算机程序或计算机可执行指令被处理器执行时实现本申请实施例提供的视频处理方法。
本申请实施例具有以下有益效果:
当评论信息关联的显示参数与视频中对应编辑操作的视频事件不匹配时,说明评论信息可能并未与需要评论的视频事件关联,则基于与视频事件匹配的目标显示参数,在视频播放界面中显示已发布的评论信息,以准确地将评论信息与视频事件对应,提高评论信息与视频事件之间的关联性,进而提高评论的有效性。
附图说明
图1是本申请实施例提供的视频播放系统的架构示意图;
图2是本申请实施例提供的用于视频处理的电子设备的结构示意图;
图3A-图3F是本申请实施例提供的视频处理方法的流程示意图;
图4A是本申请实施例提供的确定时间参数的界面示意图;
图4B是本申请实施例提供的移动默认位置的界面示意图;
图4C是本申请实施例提供的时间校正控件的示意图;
图4D是本申请实施例提供的位置校正控件的示意图;
图5是本申请实施例提供的视频处理方法的流程示意图;
图6是本申请实施例提供的视频处理方法的界面示意图;
图7是本申请实施例提供的评论记录的界面示意图;
图8是本申请实施例提供的发布评论后的界面示意图;
图9是本申请实施例提供的气泡展示的时间示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请作进一步地详细描述,所描述的实施例不应视为对本申请的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在以下的描述中,所涉及的术语“第一\第二”仅仅是是区别类似的对象,不代表针对对象的特定排序,可以理解地,“第一\第二”在允许的情况下可以互换特定的顺序或先后次序,以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。
在以下的描述中,涉及到“一些实施例”,其描述了所有可能实施例的子集,但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集,并且可以在不冲突的情况下相互结合。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的,不是旨在限制本申请。
对本申请实施例进行进一步详细说明之前,对本申请实施例中涉及的名词和术语进行说明,本申请实施例中涉及的名词和术语适用于如下的解释。
1)响应于:用于表示所执行的操作所依赖的条件或者状态,当满足所依赖的条件或状态时,所执行的一个或多个操作可以是实时的,也可以具有设定的延迟;在没有特别说明的情况下,所执行的多个操作不存在执行先后顺序的限制。
2)客户端:终端中运行的用于提供各种服务的应用程序,例如视频播放客户端、直播客户端等。
3)视频事件:表示视频中的事项,例如电视剧中某一情节(如都市剧中的上班情节)、游戏视频中的对抗事项(如打怪事项)。
4)游戏对局标识(BattleID):用于标识游戏中的对局场景。
5)游戏数据存储服务器:指存储有游戏战绩的服务器,用于存储游戏沉淀数据。
6)即时通信游戏服务器:指即时通信应用中的游戏业务使用的服务器,该服务器与游戏数据存储服务器可以是同一个服务器,也可以是不同的服务器。
本申请实施例提供一种视频处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品,能够准确地将评论信息与视频事件对应起来,提高评论的有效性。
本申请实施例所提供的视频处理方法,可以由终端独自实现;也可以由终端和服务器协同实现,例如终端独自承担下文所述的视频处理方法,或者,终端向服务器发送针对评论信息的发布操作,服务器根据接收的针对评论信息的发布操作,判断评论信息关联的显示参数与视频中对应的视频事件是否匹配,当显示参数与视频中对应的视频事件不匹配时,确定基于与视频事件匹配的目标显示参数,来显示已发布的评论信息,并将与视频事件匹配的目标显示参数下发至进入视频播放界面的其他终端,以在其他终端上基于与视频事件匹配的目标显示参数,显示已发布的评论信息,以实现准确地将评论信息与视频事件对应起来,提高评论的有效性。
下面说明本申请实施例提供的电子设备的示例性应用,本申请实施例提供的电子设备可以实施为笔记本电脑、平板电脑、台式计算机、机顶盒、移动设备(例如,移动电话,便携式音乐播放器,个人数字助理,专用消息设备,便携式游戏设备,车载设备)、智能手机、智能音箱、智能手表、智能电视、车载终端等各种类型的用户终端。下面,将说明电子设备实施为终端时示例性应用。
参见图1,图1是本申请实施例提供的视频播放系统10的架构示意图,终端(示例性示出终端200-1以及终端200-2)通过网络300连接服务器100,其中,网络300可以是广域网或者局域网,又或者是二者的组合。
在一些实施例中,以电子设备是终端为例,本申请实施例提供的视频处理方法可以由终端实现。例如,终端200-1显示视频播放界面,响应于编辑操作,在评论编辑区域中显示评论信息,其中,评论信息关联有根据编辑操作设定的显示参数,显示参数包括用于在视频播放界面中显示评论信息的时间参数、位置参数中的至少之一,响应于针对评论信息的发布操作、且显示参数与视频中对应编辑操作的视频事件不匹配,基于与视频事件匹配的目标显示参数,在视频播放界面中显示已发布的评论信息,从而准确地将评论信息与视频事件对应起来,提高评论的有效性。
在一些实施例中,本申请实施例提供的视频处理方法也可以由服务器和终端协同实现。例如,终端200-1显显示视频播放界面,响应于编辑操作,在评论编辑区域中显示评论信息,其中,评论信息关联有根据编辑操作设定的显示参数,显示参数包括用于在视频播放界面中显示评论信息的时间参数、位置参数中的至少之一,获取针对评论信息的发布操作,并向服务器100发送针对评论信息的发布操作以及显示参数,服务器100根据接收的针对评论信息的发布操作以及显示参数,判断评论信息关联的显示参数与视频中对应的视频事件是否匹配,当显示参数与视频中对应的视频事件不匹配时,确定基于与视频事件匹配的目标显示参数,来显示已发布的评论信息,并将与视频事件匹配的目标显示参数下发至终端200-1以及进入多媒体播放界面的终端200-2,以在终端200-1以及终端200-2上基于与视频事件匹配的目标显示参数,显示已发布的评论信息,从而准确地将评论信息与视频事件对应起来,提高评论的有效性。
在一些实施例中,终端或服务器可以通过运行各种计算机可执行指令或计算机程序来实现本申请实施例提供的视频处理方法。举例来说,计算机可执行指令可以是微程序级的命令、机器指令或软件指令。计算机程序可以是操作系统中的原生程序或软件模块;可以是本地(Native)应用程序(APP,Application),即需要在操作系统中安装才能运行的程序,如直播类的应用程序或者视频播放应用程序;也可以是嵌入至任意APP中的小程序,即只需要下载到浏览器环境中就可以运行的程序。总而言之,上述的计算机可执行指令可以是任意形式的指令,上述计算机程序可以是任意形式的应用程序、模块或插件。
在一些实施例中,服务器100可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content DeliveryNetwork,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器,其中,云服务可以是视频处理服务,供终端进行调用。
在一些实施例中,多个服务器可组成为一区块链,而服务器100为区块链上的节点,区块链中的每个节点之间可以存在信息连接,节点之间可以通过上述信息连接进行信息传输。其中,本申请实施例提供的视频处理方法所相关的数据(例如视频处理的逻辑、目标显示参数)可保存于区块链上。
下面说明本申请实施例提供的用于视频处理的电子设备的结构,参见图2,图2是本申请实施例提供的用于视频处理的电子设备500的结构示意图。以电子设备500是终端为例说明,图2所示的用于视频处理的电子设备500包括:至少一个处理器510、存储器550、至少一个网络接口520和用户接口530。电子设备500中的各个组件通过总线系统540耦合在一起。可理解,总线系统540用于实现这些组件之间的连接通信。总线系统540除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图2中将各种总线都标为总线系统540。
处理器510可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
存储器550包括易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(ROM,Read Only Memory),易失性存储器可以是随机存取存储器(RAM,Random Access Memory)。本申请实施例描述的存储器550旨在包括任意适合类型的存储器。存储器550可选地包括在物理位置上远离处理器510的一个或多个存储设备。
在一些实施例中,存储器550能够存储数据以支持各种操作,这些数据的示例包括程序、模块和数据结构或者其子集或超集,下面示例性说明。
操作系统551,包括用于处理各种基本系统服务和执行硬件相关任务的系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务;
网络通信模块552,用于经由一个或多个(有线或无线)网络接口520到达其他电子设备,示例性的网络接口520包括:蓝牙、无线相容性认证(WiFi)、和通用串行总线(USB,Universal Serial Bus)等;
在一些实施例中,本申请实施例提供的视频处理装置可以采用软件方式实现,本申请实施例提供的视频处理装置可以提供为各种软件实施例,包括应用程序、软件、软件模块、脚本或代码在内的各种形式。
图2示出了存储在存储器550中的视频处理装置555,其可以是程序和插件等形式的软件,并包括一系列的模块,包括第一显示模块5551、评论模块5552以及第二显示模块5553,这些模块是逻辑上的,因此根据所实现的功能可以进行任意的组合或进一步拆分,将在下文中说明各个模块的功能。
如前所述,本申请实施例提供的视频处理方法可以由各种类型的电子设备实施,例如终端、服务器,又或者是二者的结合。因此下文中不再重复说明各个步骤的执行主体。参见图3A,图3A是本申请实施例提供的视频处理方法的流程示意图,结合图3A示出的步骤进行说明。
在步骤101中,显示视频播放界面。
其中,视频播放界面用于播放视频。视频播放界面中的视频可以处于播放状态,还可以是处于暂停状态。在视频播放界面中可以显示视频的时间轴,时间轴用于指示视频播放的时间点。
在步骤102中,响应于编辑操作,在评论编辑区域中显示评论信息,其中,评论信息关联有根据编辑操作设定的显示参数,显示参数包括用于在视频播放界面中显示评论信息的时间参数、位置参数中的至少之一。
其中,编辑操作用于针对视频播放界面中显示的视频进行评论编辑。时间参数可以是用于在视频播放界面中显示评论信息的起始时间点,还可是用于在视频播放界面中显示评论信息的时间段,时间段包括起始时间点以及结束时间点。
参见图3B,图3B是本申请实施例提供的视频处理方法的又一流程示意图,图3B示出图3A中的步骤102可以通过步骤1021A-步骤1023A实现:编辑操作包括输入操作,在步骤1021A中,显示评论控件;在步骤1022A中,响应于针对评论控件的触发操作,显示评论编辑区域;在步骤1023A中,响应于针对评论编辑区域的输入操作,在评论编辑区域中显示输入的评论信息。
其中,本申请实施例并不限定步骤1022A中触发操作的形式,例如点击操作、双击操作等。如图6所示,在视频播放界面中显示评论控件601,其中,评论控件601包括视频播放的时间点,在观看视频时,当用户想在此刻针对视频内容发表评论时,响应于针对评论控件601的触发操作,显示评论编辑区域602。响应于针对评论编辑区域602的输入操作,在评论编辑区域602中显示输入的评论信息604,从而实现手动编辑评论信息。当然,本申请实施例还可以在视频播放界面中直接显示评论编辑区域,无需通过评论控件触发显示评论编辑区域。
在一些实施例中,当显示参数包括时间参数时,步骤1023A还包括:将接收到针对评论编辑区域的输入操作的时间点,作为时间参数。
参见图3C,图3C是本申请实施例提供的视频处理方法的又一流程示意图,图3C示出图3A中的步骤102可以通过步骤1021B-步骤1022B实现:编辑操作包括评论触发操作,在步骤1021B中,显示评论控件;在步骤1022B中,响应于针对评论控件的评论触发操作,在评论编辑区域中显示自动填充的评论信息。从而通过步骤1021B-步骤1022B实现自动编辑评论信息的方案。其中,本申请实施例并不限定步骤1022B中评论触发操作的形式,例如点击操作、双击操作等。
在一些实施例中,当显示参数包括时间参数时,步骤1022B还包括:将接收到评论触发操作的时间点作为时间参数,同时显示评论编辑区域。
在一些实施例中,在步骤1022B之前,通过以下方式确定自动填充的评论信息:调用内容识别模型,对视频中显示参数对应的视频画面进行内容识别处理,得到自动填充的评论信息,其中,内容识别模型是通过视频画面样本以及评论信息批注训练得到的。
其中,本申请实施例并不局限于内容识别模型的模型结构,例如内容识别模型可以是卷积神经网络、深度神经网络等。
需要说明的是,在应用内容识别模型之前,需要训练初始的内容识别模型,然后将训练好的内容识别模型投入应用,通过人工智能技术预测用户可能输入的评论信息。其中,内容识别模型是通过视频画面样本以及评论信息批注训练得到的。例如,基于视频画面样本,调用初始的内容识别模型进行内容识别处理,得到预测的自动填充的评论信息样本,通过预测的自动填充的评论信息样本以及评论信息标注,确定内容识别模型的损失函数的值后,可以判断损失函数的值是否超出预设阈值,当损失函数的值超出预设阈值时,基于损失函数确定内容识别模型的误差信号,将误差信息在内容识别模型中反向传播,并在传播的过程中更新各个层的模型参数。其中,本申请实施例并不局限于损失函数的形式,例如可以是交叉熵损失函数、L2损失函数等。
这里,对反向传播进行说明,将训练样本数据输入到神经网络模型的输入层,经过隐藏层,最后达到输出层并输出结果,这是神经网络模型的前向传播过程,由于神经网络模型的输出结果与实际结果有误差,则计算输出结果与实际值之间的误差,并将该误差从输出层向隐藏层反向传播,直至传播到输入层,在反向传播的过程中,根据误差调整模型参数的值,即根据输出结果与实际值之间的误差构建损失函数,并逐层求出损失函数对模型参数的偏导数,生成损失函数对各层模型参数的梯度,由于梯度的方向表明误差扩大的方向,因此对模型参数的梯度取反,与以各层模型的原始参数求和,将得到的求和结果作为更新后的各层模型参数,从而减小模型参数引起的误差;不断迭代上述过程,直至收敛。其中,内容识别模型为一种神经网络模型。
在一些实施例中,在步骤1022B之前,通过以下方式确定自动填充的评论信息:获取评论信息的发布账号的历史评论信息;基于历史评论信息以及视频中显示参数对应的视频画面,调用第一文本生成模型进行文本生成处理,得到自动填充的评论信息,其中,第一文本生成模型是通过账号样本的历史评论信息、视频画面样本以及评论信息批注训练得到的。
其中,本申请实施例并不局限于第一文本生成模型的模型结构,例如第一文本生成模型可以是卷积神经网络、深度神经网络等。
需要说明的是,在应用第一文本生成模型之前,需要训练初始的第一文本生成模型,然后将训练好的第一文本生成模型投入应用,以实现结合当前用户的评论习惯,通过人工智能技术预测需要用户当前可能输入的评论信息。其中,第一文本生成模型是通过账号样本的历史评论信息、视频画面样本以及评论信息批注训练得到的。例如,基于账号样本的历史评论信息、视频画面样本,调用初始的第一文本生成模型进行文本生成处理,得到预测的自动填充的评论信息样本,通过预测的自动填充的评论信息样本以及评论信息批注,确定第一文本生成模型的损失函数的值后,可以判断损失函数的值是否超出预设阈值,当损失函数的值超出预设阈值时,基于损失函数确定第一文本生成模型的误差信号,将误差信息在第一文本生成模型中反向传播,并在传播的过程中更新各个层的模型参数。其中,本申请实施例并不局限于损失函数的形式,例如可以是交叉熵损失函数、L2损失函数等。
在一些实施例中,在步骤1022B之前,通过以下方式确定自动填充的评论信息:获取其他账号针对显示参数对应的视频画面的其他评论信息,其中,其他账号为视频中除评论信息的发布账号之外的账号;基于其他历史评论信息以及视频中显示参数对应的视频画面,调用第二文本生成模型进行文本生成处理,得到自动填充的评论信息,其中,第二文本生成模型是通过视频画面样本、针对视频画面样本的评论信息样本以及评论信息批注训练得到的。
其中,本申请实施例并不局限于第二文本生成模型的模型结构,例如第二文本生成模型可以是卷积神经网络、深度神经网络等。
需要说明的是,在应用第二文本生成模型之前,需要训练初始的第二文本生成模型,然后将训练好的第二文本生成模型投入应用,以实现结合其他账号的评论信息,通过人工智能技术预测需要用户当前可能输入的评论信息。其中,第二文本生成模型是通过视频画面样本、针对视频画面样本的评论信息样本以及评论信息批注训练得到的。例如,基于视频画面样本、针对视频画面样本的评论信息样本,调用初始的第二文本生成模型进行文本生成处理,得到预测的自动填充的评论信息样本,通过预测的自动填充的评论信息样本以及评论信息批注,确定第二文本生成模型的损失函数的值后,可以判断损失函数的值是否超出预设阈值,当损失函数的值超出预设阈值时,基于损失函数确定第二文本生成模型的误差信号,将误差信息在第二文本生成模型中反向传播,并在传播的过程中更新各个层的模型参数。其中,本申请实施例并不局限于损失函数的形式,例如可以是交叉熵损失函数、L2损失函数等。
在一些实施例中,当步骤102中的评论信息关联的显示参数包括时间参数时,可以通过以下方式确定时间参数:在视频播放界面中显示视频的时间轴;响应于针对时间轴的选择操作,将选中的时间信息作为时间参数,其中,时间信息包括以下之一:用于在视频播放界面中显示评论信息的起始时间点、用于在视频播放界面中显示评论信息的时间段,时间段包括起始时间点以及结束时间点。
如图4A所示,在视频播放界面中显示视频的时间轴400,当时间参数为用于在视频播放界面中显示评论信息的起始时间点时,响应于针对时间轴400上时间点的选择操作,将选中的时间点401作为时间参数;当时间参数为用于在视频播放界面中显示评论信息的时间段时,响应于针对时间轴的选择操作,将选中的时间点401作为用于在视频播放界面中显示评论信息的时间段中的起始时间点,将选中的时间点402作为用于在视频播放界面中显示评论信息的时间段中的结束时间点。
参见图3D,图3D是本申请实施例提供的视频处理方法的又一流程示意图,当图3A中的步骤102中的评论信息关联的显示参数包括位置参数时,图3D示出图3A还包括步骤104:在步骤104中,响应于针对评论信息在视频播放界面中显示位置的设定操作,将视频播放界面中被设定的显示位置作为位置参数。
这里,步骤104可以通过各种操作实现针对评论信息在视频播放界面中显示位置的设定操作,例如可以直接在视频播放界面中选择一个显示位置。
在一些实施例中,步骤104可以通过以下方式实现:显示评论控件;响应于针对评论控件的触发操作,在视频播放界面中显示默认位置,其中,默认位置用于在视频播放界面中显示输入的评论信息;响应于针对默认位置的移动操作,将移动后形成的新位置作为位置参数。
其中,默认位置可以是视频播放界面中的中心位置,还可以是空闲位置(即未被对象覆盖的位置)等。如图4B所示,在视频播放界面中显示评论控件401,在观看视频时,当用户想在此刻针对视频内容发表评论时,响应于针对评论控件401的触发操作,在视频播放界面中显示默认位置402,其中,默认位置402通过显示区域(例如可编辑的气泡,其中,用户输入的评论信息也会同步到气泡中)呈现,即气泡所在的位置即为默认位置402,用户可以移动气泡来改变评论信息在视频画面中的显示位置,响应于将默认位置402移动到新位置403,将新位置403作为位置参数,其中,新位置403包括视频播放界面中的横坐标以及纵坐标。
在步骤103中,响应于针对评论信息的发布操作、且显示参数与视频中对应编辑操作的视频事件不匹配,基于与视频事件匹配的目标显示参数,在视频播放界面中显示已发布的评论信息。
这里,当评论信息关联的显示参数与视频中对应编辑操作的视频事件不匹配时,说明评论信息可能并未与需要评论的视频事件关联,则基于与视频事件匹配的目标显示参数,在视频播放界面中显示已发布的评论信息,以准确地将评论信息与视频事件对应,提高评论信息与视频事件之间的关联性,进而提高评论的有效性。
其中,与视频中对应编辑操作的视频事件包括以下至少之一:与时间参数在时间上最接近的视频事件、与评论信息的内容最匹配的视频事件。
参见图3E,图3E是本申请实施例提供的视频处理方法的又一流程示意图,当显示参数包括时间参数,目标显示参数包括视频中发生视频事件的时间时,图3E示出图3A中的步骤103可以通过步骤1031A实现:在步骤1031A中,响应于针对评论信息的发布操作、且时间参数与发生视频事件的时间满足时间不匹配条件,基于发生视频事件的时间,在视频播放界面中显示已发布的评论信息,其中,时间不匹配条件包括以下之一:时间参数与视频事件的目标时间参数的取值不同、时间参数与视频事件的目标时间参数之间的差值小于时间差值阈值。
例如,与视频中对应编辑操作的视频事件为与时间参数在时间上最接近的视频事件,当确定发布评论信息后,确定时间参数与视频事件的目标时间参数之间的差值小于时间差值阈值时,表明时间参数与发生视频事件的时间不对应,则评论信息可能与视频画面不对应,因此,需要基于发生视频事件的时间校正在视频播放界面中显示已发布的评论信息的时间。
在一些实施例中,步骤1031A可以通过将时间参数校正为发生视频事件的时间实现,如下所示:当时间参数包括用于显示已发布的评论信息的起始时间点时,响应于视频播放至起始时间点,在视频播放界面中开始显示已发布的评论信息;当时间参数包括用于显示已发布的评论信息的时间段时,在时间段内,显示已发布的评论信息。
在一些实施例中,时间参数包括第一起始时间点以及第一结束时间点,发生视频事件的时间包括第二起始时间点以及第二结束时间点,步骤1031A可以通过以下方式实现:将第一起始时间点校正为第一起始时间点、第二起始时间点中的最小值,并将第一结束时间点校正为第一结束时间点、第二结束时间点中的最大值;按照校正后的第一起始时间点以及校正后的第一结束时间点,在视频播放界面中显示已发布的评论信息。从而综合考虑用户选择的时间参数以及发生视频事件的时间,既能考虑到用户的想法,又能评论信息与视频事件对应。
在一些实施例中,步骤1031A之前,显示时间校正控件,其中,时间校正控件用于指示将基于发生视频事件的时间校正时间参数;响应于针对时间校正控件的触发操作,将执行基于发生视频事件的时间,在视频播放界面中显示已发布的评论信息。
如图4C所示的时间校正控件401,当时间参数与发生视频事件的时间满足时间不匹配条件时,在视频播放界面中显示时间校正控件401,时间校正控件401包括提示信息402,提示信息402用于指示将基于发生视频事件的时间校正时间参数,例如文本提示信息“将评论时间3:15校正为对抗事件3:16”,响应于针对时间校正控件401的触发操作,确定基于发生视频事件的时间校正时间参数,并将执行基于发生视频事件的时间,在视频播放界面中显示已发布的评论信息。
参见图3F,图3F是本申请实施例提供的视频处理方法的又一流程示意图,当显示参数包括位置参数,目标显示参数包括视频事件涉及的对象在视频画面中的位置坐标时,图3F示出图3A中的步骤103可以通过步骤1031B实现:在步骤1031B中,响应于针对评论信息的发布操作、且位置参数与位置坐标满足位置不匹配条件,基于位置坐标,在视频播放界面中显示已发布的评论信息,其中,位置不匹配条件包括以下之一:位置参数与位置坐标不同、位置参数与位置坐标之间的差值小于距离差值阈值。
例如,与视频中对应编辑操作的视频事件为与时间参数在时间上最接近的视频事件,当确定发布评论信息后,确定位置参数与视频事件涉及的对象在视频画面中的位置坐标之间的差值小于距离差值阈值时,表明位置参数与视频事件涉及的对象在视频画面中的位置坐标不对应,则评论信息可能与视频画面不对应,因此,需要基于视频事件涉及的对象在视频画面中的位置坐标校正在视频播放界面中显示已发布的评论信息的位置。
在一些实施例中,步骤1031B可以通过将位置参数校正为视频事件涉及的对象在视频画面中的位置坐标实现,如下所示:在视频播放界面中的位置坐标显示已发布的评论信息。
在一些实施例中,步骤1031B可以通过以下方式实现:在视频播放界面中的聚合坐标显示已发布的评论信息,其中,聚合坐标为位置参数以及位置坐标聚合后的坐标。
其中,聚合过程可以是对位置参数以及位置坐标进行平均处理,还可以是对位置参数以及位置坐标进行加权求和处理。
在一些实施例中,步骤1031B之前,显示位置校正控件,其中,位置校正控件用于指示将基于位置坐标校正位置参数;响应于针对位置校正控件的触发操作,将执行基于位置坐标,在视频播放界面中显示已发布的评论信息。
如图4D所示的位置校正控件401,当位置参数与位置坐标满足位置不匹配条件时,在视频播放界面中显示位置校正控件401,位置校正控件401包括提示信息402,提示信息402用于指示将基于位置坐标校正位置参数,例如文本提示信息“将指定位置校正为角色所在的位置”,响应于针对位置校正控件401的触发操作,确定基于位置坐标校正位置参数,并将执行基于位置坐标,在视频播放界面中显示已发布的评论信息。
在一些实施例中,在步骤101之前,从视频存储文件中获取视频的至少一个视频事件,其中,视频存储文件用于预先存储从视频划分出的视频事件。从而通过在评论之前预先获取视频事件,能够节约视频事件的加载时间。
在一些实施例中,在执行步骤102时,还基于划分因素对视频进行划分处理,得到视频的至少一个视频事件,其中,划分因素包括以下至少之一:视频的不同情节、视频所在的不同场景、视频涉及的不同对象。从而通过评论时实时获取视频事件,能够节约视频事件的存储空间。
其中,情节可以是通过对视频中的图像识别结果和语音识别结果进行理解得到的剧情,场景可以是对视频中的图像进行识别得到的背景,对象可以是通过对视频中的图像进行识别得到的目标。以情节为例,将视频中的每个情节作为一个视频事件,例如电视剧中有吵架情节以及和好情节,则对电视剧进行划分,得到吵架事件以及和好事件;以场景为例,将视频中的每个场景作为一个视频事件,例如游戏视频中有丛林背景以及潜水背景,则对游戏视频进行划分,得到丛林游戏事件以及潜水游戏事件;以对象为例,将视频中的每个对象作为一个视频事件,例如游戏视频中有XX角色以及YY角色,则对游戏视频进行划分,得到XX角色对抗事件以及YY角色对抗事件。
下面,将说明本申请实施例在一个实际的应用场景中的示例性应用。
本申请实施例可应用于各种能够发布评论的视频场景,例如针对游戏视频中的高光时刻进行评论的场景、针对视频中播放的感兴趣人物进行评论的场景、针对直播中感兴趣的商品进行评论的场景。
下面以游戏视频为例进行说明。
相关技术中,在播放游戏视频时,用户可以选择在游戏视频的指定位置以及指定时间点发布评论。但是,这种发布评论的方式,容易造成用户的评论信息与游戏视频中视频内容的对应关系较差。当视频内容较为复杂时,其他观众难以将用户的评论内容与视频内容准确对应上。
为了解决上述问题,本申请实施例提供一种视频处理方法,在确定评论信息在视频的指定位置(即位置参数)、指定时间点(即时间参数)后,当指定时间点与匹配的视频事件对应的时间点不匹配时,通过匹配的视频事件对应的时间点校正指定时间点,当指定位置与匹配的视频事件对应的位置坐标不匹配时,通过匹配的视频事件对应的位置坐标校正指定位置。
参见图5,图5是本申请实施例提供的视频处理方法的流程示意图,结合图5示出的步骤进行说明.
在步骤201中,获取视频事件。
例如,在进入视频播放界面后,读取视频文件信息中保存的BattleID,并向即时通信游戏服务器请求BattleID的原始数据。从该原始数据中,读取所有的视频事件(即游戏视频中的事件)以及每个游戏事件对应的时间点。
在步骤202中,获取指定位置、指定时间点以及输入的评论信息。
例如,在视频播放界面实时记录当前视频播放的时间点。如图6所示,在观看游戏视频时,当用户想在此刻针对视频内容发表评论时,响应于针对评论控件601的触发操作,保存此刻的时间点,并此刻的时间点作为指定时间点,并显示评论编辑区域602,并在视频画面中的默认位置603显示可编辑的气泡,其中,用户在评论编辑区域602中输入的内容也会同步到气泡中,用户可以移动气泡来改变评论信息在视频画面中的位置。响应于针对评论编辑区域602的输入操作,在评论编辑区域602中显示输入的评论信息604,并在气泡中也显示评论信息604。当用户评论编辑完成后,响应于针对发布控件605的触发操作,保存输入的评论信息、发布评论信息时气泡在视频播放界面中的位置(即指定位置,包括横坐标与纵坐标)、以及指定时间点。
在步骤203中,校正指定时间点与指定位置。
例如,发布评论后,将指定时间点与步骤201中获取的视频事件的时间点一一对比,获得与指定时间点的时间相距最近的视频事件,并将与指定时间点的时间相距最近的视频事件作为匹配的视频事件。当匹配的视频事件的时间点与指定时间点的差值小于设定阈值(如1秒),则将指定时间点自动校正为匹配的视频事件的时间点;当匹配的视频事件涉及的对象在视频画面中的位置坐标与指定位置的差值小于设定阈值(如1厘米),则将指定位置自动校正为匹配的视频事件涉及的对象在视频画面中的位置坐标。
在步骤204中,展示校正后的指定时间点与指定位置。
例如,用户播放视频时,读取已保存的评论信息、校正后的指定时间点与指定位置(用于显示气泡的横坐标以及纵坐标)。如图7所示,以指定时间点为3:15、匹配的视频事件的时间点为3:16为例,则在发布评论信息后,在视频播放界面中显示评论记录701(包括校正后的指定时间点以及评论信息),响应于针对评论记录701的触发操作,视频将跳转至校正后的指定时间点(3:16)播放。
如图8所示,当评论信息已发布后,在观看游戏视频时,在视频即将播放到校正后的指定时间点,在视频画面中显示包括评论内容的气泡801。当然,可以考虑气泡的显示特性(例如气泡出现时的动效、静态展示所占时间),动态调整视频画面中气泡的出现时间,如图9所示,需要提前2.150秒开始在校正后的指定位置显示气泡的动效,因此,在视频时间轴上,将指定时间点901校正为视频事件的时间点902后,提前2.150秒至标记起始点903,在标记起始点903处开始在校正后的指定位置显示气泡的动效,在校正后的指定位置显示气泡的动效150毫秒后,静态展示2秒至视频事件的时间点902,然后继续静态展示1秒后,通过150毫秒动效消失。
综上,本申请实施例提供的视频处理方法,能够自动校正指定时间点以及指定位置,使得评论信息与视频事件的时间点以及视频事件涉及的对象在视频画面中的位置坐标对应,提高评论信息与视频事件之间的关联性,进而提高评论的有效性。
至此已经结合本申请实施例提供的电子设备的示例性应用和实施,说明本申请实施例提供的视频处理方法,下面继续说明本申请实施例提供的视频处理装置555中各个模块配合实现视频处理方案。
第一显示模块5551,用于显示视频播放界面;评论模块5552,用于响应于编辑操作,在评论编辑区域中显示评论信息,其中,所述评论信息关联有根据所述编辑操作设定的显示参数,所述显示参数包括用于在所述视频播放界面中显示所述评论信息的时间参数、位置参数中的至少之一;第二显示模块5553,用于响应于针对所述评论信息的发布操作、且所述显示参数与视频中对应所述编辑操作的视频事件不匹配,基于与所述视频事件匹配的目标显示参数,在所述视频播放界面中显示已发布的所述评论信息。
在一些实施例中,所述编辑操作包括输入操作;所述评论模块5552还用于显示评论控件;响应于针对所述评论控件的触发操作,显示所述评论编辑区域;响应于针对所述评论编辑区域的所述输入操作,在所述评论编辑区域中显示输入的评论信息。
在一些实施例中,所述编辑操作包括评论触发操作;所述评论模块5552还用于显示评论控件;响应于针对所述评论控件的所述评论触发操作,在所述评论编辑区域中显示自动填充的评论信息。
在一些实施例中,当所述显示参数包括所述时间参数时,所述评论模块5552还用于将接收到所述评论触发操作的时间点作为所述时间参数。
在一些实施例中,当所述显示参数包括所述时间参数时,所述评论模块5552还用于将接收到针对所述评论编辑区域的所述输入操作的时间点,作为所述时间参数。
在一些实施例中,当所述显示参数包括所述时间参数时,所述评论模块5552还用于在所述视频播放界面中显示所述视频的时间轴;响应于针对所述时间轴的选择操作,将选中的时间信息作为所述时间参数,其中,所述时间信息包括以下之一:用于在所述视频播放界面中显示所述评论信息的起始时间点、用于在所述视频播放界面中显示所述评论信息的时间段,所述时间段包括所述起始时间点以及结束时间点。
在一些实施例中,当所述显示参数包括所述位置参数时,所述评论模块5552还用于响应于针对所述评论信息在所述视频播放界面中显示位置的设定操作,将所述视频播放界面中被设定的显示位置作为所述位置参数。
在一些实施例中,所述评论模块5552还用于显示评论控件;响应于针对所述评论控件的触发操作,在所述视频播放界面中显示默认位置,其中,所述默认位置用于在所述视频播放界面中显示输入的所述评论信息;响应于针对所述默认位置的移动操作,将移动后形成的新位置作为所述位置参数。
在一些实施例中,所述响应于针对所述评论控件的所述评论触发操作,在所述评论编辑区域中显示自动填充的评论信息之前,所述评论模块5552还用于调用内容识别模型,对所述视频中所述显示参数对应的视频画面进行内容识别处理,得到所述自动填充的评论信息,其中,所述内容识别模型是通过视频画面样本以及评论信息批注训练得到的。
在一些实施例中,所述响应于针对所述评论控件的所述评论触发操作,在所述评论编辑区域中显示自动填充的评论信息之前,所述评论模块5552还用于获取所述评论信息的发布账号的历史评论信息;基于所述历史评论信息以及所述视频中所述显示参数对应的视频画面,调用第一文本生成模型进行文本生成处理,得到所述自动填充的评论信息,其中,所述第一文本生成模型是通过账号样本的历史评论信息、视频画面样本以及评论信息批注训练得到的。
在一些实施例中,所述响应于针对所述评论控件的所述评论触发操作,在所述评论编辑区域中显示自动填充的评论信息之前,所述评论模块5552还用于获取其他账号针对所述显示参数对应的视频画面的其他评论信息,其中,所述其他账号为所述视频中除所述评论信息的发布账号之外的账号;基于所述其他历史评论信息以及所述视频中所述显示参数对应的视频画面,调用第二文本生成模型进行文本生成处理,得到所述自动填充的评论信息,其中,所述第二文本生成模型是通过视频画面样本、针对所述视频画面样本的评论信息样本以及评论信息批注训练得到的。
在一些实施例中,与视频中对应所述编辑操作的视频事件包括以下至少之一:与所述时间参数在时间上最接近的视频事件、与所述评论信息的内容最匹配的视频事件;当所述显示参数包括所述时间参数,所述目标显示参数包括所述视频中发生所述视频事件的时间时,所述第二显示模块5553还用于响应于针对所述评论信息的发布操作、且所述时间参数与发生所述视频事件的时间满足时间不匹配条件,基于发生所述视频事件的时间,在所述视频播放界面中显示已发布的所述评论信息,其中,所述时间不匹配条件包括以下之一:所述时间参数与所述视频事件的目标时间参数的取值不同、所述时间参数与所述视频事件的目标时间参数之间的差值小于时间差值阈值。
在一些实施例中,所述第二显示模块5553还用于当所述时间参数包括用于显示已发布的所述评论信息的起始时间点时,响应于所述视频播放至所述起始时间点,在所述视频播放界面中开始显示已发布的所述评论信息;当所述时间参数包括用于显示已发布的所述评论信息的时间段时,在所述时间段内,显示已发布的所述评论信息。
在一些实施例中,所述时间参数包括第一起始时间点以及第一结束时间点,发生所述视频事件的时间包括第二起始时间点以及第二结束时间点;所述第二显示模块5553还用于将所述第一起始时间点校正为所述第一起始时间点、所述第二起始时间点中的最小值,并将所述第一结束时间点校正为所述第一结束时间点、所述第二结束时间点中的最大值;按照校正后的所述第一起始时间点以及校正后的所述第一结束时间点,在所述视频播放界面中显示已发布的所述评论信息。
在一些实施例中,所述基于发生所述视频事件的时间,在所述视频播放界面中显示已发布的所述评论信息之前,所述第二显示模块5553还用于显示时间校正控件,其中,所述时间校正控件用于指示将基于发生所述视频事件的时间校正所述时间参数;响应于针对所述时间校正控件的触发操作,将执行基于发生所述视频事件的时间,在所述视频播放界面中显示已发布的所述评论信息。
在一些实施例中,与视频中对应所述编辑操作的视频事件包括以下至少之一:与所述时间参数在时间上最接近的视频事件、与所述评论信息的内容最匹配的视频事件;当所述显示参数包括所述位置参数,所述目标显示参数包括所述视频事件涉及的对象在视频画面中的位置坐标时,所述第二显示模块5553还用于响应于针对所述评论信息的发布操作、且所述位置参数与所述位置坐标满足位置不匹配条件,基于所述位置坐标,在所述视频播放界面中显示已发布的所述评论信息,其中,所述位置不匹配条件包括以下之一:所述位置参数与所述位置坐标不同、所述位置参数与所述位置坐标之间的差值小于距离差值阈值。
在一些实施例中,所述第二显示模块5553还用于在所述视频播放界面中的所述位置坐标显示已发布的所述评论信息。
在一些实施例中,所述第二显示模块5553还用于在所述视频播放界面中的聚合坐标显示已发布的所述评论信息,其中,所述聚合坐标为所述位置参数以及所述位置坐标聚合后的坐标。
在一些实施例中,所述基于所述位置坐标,在所述视频播放界面中显示已发布的所述评论信息之前,所述第二显示模块5553还用于显示位置校正控件,其中,所述位置校正控件用于指示将基于所述位置坐标校正所述位置参数;响应于针对所述位置校正控件的触发操作,将执行基于所述位置坐标,在所述视频播放界面中显示已发布的所述评论信息。
在一些实施例中,所述响应于编辑操作,在评论编辑区域中显示评论信息之前,所述第一显示模块5551还用于从视频存储文件中获取所述视频的至少一个视频事件,其中,所述视频存储文件用于预先存储从所述视频划分出的视频事件。
在一些实施例中,所述响应于编辑操作,在评论编辑区域中显示评论信息时,所述评论模块5552还用于基于划分因素对所述视频进行划分处理,得到所述视频的至少一个视频事件,其中,所述划分因素包括以下至少之一:所述视频的不同情节、所述视频所在的不同场景、所述视频涉及的不同对象。
本申请实施例提供了一种计算机程序产品,该计算机程序产品包括计算机程序或计算机可执行指令,该计算机程序或计算机可执行指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机程序或计算机可执行指令,处理器执行该计算机程序或计算机可执行指令,使得该电子设备执行本申请实施例上述的视频处理方法。
本申请实施例提供一种存储有计算机可执行指令的计算机可读存储介质,其中存储有计算机可执行指令或者计算机程序,当计算机可执行指令或者计算机程序被处理器执行时,将引起处理器执行本申请实施例提供的视频处理方法,例如,如图3A-图3F示出的视频处理方法。
在一些实施例中,计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器;也可以是包括上述存储器之一或任意组合的各种设备。
在一些实施例中,计算机可执行指令可以采用程序、软件、软件模块、脚本或代码的形式,按任意形式的编程语言(包括编译或解释语言,或者声明性或过程性语言)来编写,并且其可按任意形式部署,包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。
作为示例,计算机可执行指令可以但不一定对应于文件系统中的文件,可以可被存储在保存其它程序或数据的文件的一部分,例如,存储在超文本标记语言(HTML,HyperText Markup Language)文档中的一个或多个脚本中,存储在专用于所讨论的程序的单个文件中,或者,存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。
作为示例,计算机可执行指令可被部署为在一个电子设备上执行,或者在位于一个地点的多个电子设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个电子设备上执行。
可以理解的是,在本申请实施例中,涉及到用户信息等相关的数据,当本申请实施例运用到具体产品或技术中时,需要获得用户许可或者同意,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
以上所述,仅为本申请的实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和范围之内所作的任何修改、等同替换和改进等,均包含在本申请的保护范围之内。
Claims (25)
1.一种视频处理方法,其特征在于,所述方法包括:
显示视频播放界面;
响应于编辑操作,在评论编辑区域中显示评论信息,其中,所述评论信息关联有根据所述编辑操作设定的显示参数,所述显示参数包括用于在所述视频播放界面中显示所述评论信息的时间参数、位置参数中的至少之一;
响应于针对所述评论信息的发布操作、且所述显示参数与视频中对应所述编辑操作的视频事件不匹配,基于与所述视频事件匹配的目标显示参数,在所述视频播放界面中显示已发布的所述评论信息。
2.根据权利要求1所述的方法,其特征在于,
所述编辑操作包括输入操作;
所述响应于编辑操作,在评论编辑区域中显示评论信息,包括:
显示评论控件;
响应于针对所述评论控件的触发操作,显示所述评论编辑区域;
响应于针对所述评论编辑区域的所述输入操作,在所述评论编辑区域中显示输入的评论信息。
3.根据权利要求1所述的方法,其特征在于,
所述编辑操作包括评论触发操作;
所述响应于编辑操作,在评论编辑区域中显示评论信息,包括:显示评论控件;
响应于针对所述评论控件的所述评论触发操作,在所述评论编辑区域中显示自动填充的评论信息。
4.根据权利要求3所述的方法,其特征在于,当所述显示参数包括所述时间参数时,所述方法还包括:
将接收到所述评论触发操作的时间点作为所述时间参数。
5.根据权利要求2所述的方法,其特征在于,当所述显示参数包括所述时间参数时,所述方法还包括:
将接收到针对所述评论编辑区域的所述输入操作的时间点,作为所述时间参数。
6.根据权利要求2或3所述的方法,其特征在于,
当所述显示参数包括所述时间参数时,所述方法还包括:
在所述视频播放界面中显示所述视频的时间轴;
响应于针对所述时间轴的选择操作,将选中的时间信息作为所述时间参数,其中,所述时间信息包括以下之一:用于在所述视频播放界面中显示所述评论信息的起始时间点、用于在所述视频播放界面中显示所述评论信息的时间段,所述时间段包括所述起始时间点以及结束时间点。
7.根据权利要求2或3所述的方法,其特征在于,
当所述显示参数包括所述位置参数时,所述方法还包括:
响应于针对所述评论信息在所述视频播放界面中显示位置的设定操作,将所述视频播放界面中被设定的显示位置作为所述位置参数。
8.根据权利要求7所述的方法,其特征在于,所述响应于针对所述评论信息在所述视频播放界面中显示位置的设定操作,将所述视频播放界面中被设定的显示位置作为所述位置参数,包括:
显示评论控件;
响应于针对所述评论控件的触发操作,在所述视频播放界面中显示默认位置,其中,所述默认位置用于在所述视频播放界面中显示输入的所述评论信息;
响应于针对所述默认位置的移动操作,将移动后形成的新位置作为所述位置参数。
9.根据权利要求3所述的方法,其特征在于,所述响应于针对所述评论控件的所述评论触发操作,在所述评论编辑区域中显示自动填充的评论信息之前,所述方法还包括:
调用内容识别模型,对所述视频中所述显示参数对应的视频画面进行内容识别处理,得到所述自动填充的评论信息,其中,所述内容识别模型是通过视频画面样本以及评论信息批注训练得到的。
10.根据权利要求3所述的方法,其特征在于,所述响应于针对所述评论控件的所述评论触发操作,在所述评论编辑区域中显示自动填充的评论信息之前,所述方法还包括:
获取所述评论信息的发布账号的历史评论信息;
基于所述历史评论信息以及所述视频中所述显示参数对应的视频画面,调用第一文本生成模型进行文本生成处理,得到所述自动填充的评论信息,其中,所述第一文本生成模型是通过账号样本的历史评论信息、视频画面样本以及评论信息批注训练得到的。
11.根据权利要求3所述的方法,其特征在于,所述响应于针对所述评论控件的所述评论触发操作,在所述评论编辑区域中显示自动填充的评论信息之前,所述方法还包括:
获取其他账号针对所述显示参数对应的视频画面的其他评论信息,其中,所述其他账号为所述视频中除所述评论信息的发布账号之外的账号;
基于所述其他历史评论信息以及所述视频中所述显示参数对应的视频画面,调用第二文本生成模型进行文本生成处理,得到所述自动填充的评论信息,其中,所述第二文本生成模型是通过视频画面样本、针对所述视频画面样本的评论信息样本以及评论信息批注训练得到的。
12.根据权利要求1所述的方法,其特征在于,
与视频中对应所述编辑操作的视频事件包括以下至少之一:与所述时间参数在时间上最接近的视频事件、与所述评论信息的内容最匹配的视频事件;
当所述显示参数包括所述时间参数,所述目标显示参数包括所述视频中发生所述视频事件的时间时,所述响应于针对所述评论信息的发布操作、且所述显示参数与视频中对应所述编辑操作的视频事件不匹配,基于与所述视频事件匹配的目标显示参数,在所述视频播放界面中显示已发布的所述评论信息,包括:
响应于针对所述评论信息的发布操作、且所述时间参数与发生所述视频事件的时间满足时间不匹配条件,基于发生所述视频事件的时间,在所述视频播放界面中显示已发布的所述评论信息,其中,所述时间不匹配条件包括以下之一:所述时间参数与所述视频事件的目标时间参数的取值不同、所述时间参数与所述视频事件的目标时间参数之间的差值小于时间差值阈值。
13.根据权利要求12所述的方法,其特征在于,所述基于发生所述视频事件的时间,在所述视频播放界面中显示已发布的所述评论信息,包括:
当所述时间参数包括用于显示已发布的所述评论信息的起始时间点时,响应于所述视频播放至所述起始时间点,在所述视频播放界面中开始显示已发布的所述评论信息;
当所述时间参数包括用于显示已发布的所述评论信息的时间段时,在所述时间段内,显示已发布的所述评论信息。
14.根据权利要求12所述的方法,其特征在于,
所述时间参数包括第一起始时间点以及第一结束时间点,发生所述视频事件的时间包括第二起始时间点以及第二结束时间点;
所述基于发生所述视频事件的时间,在所述视频播放界面中显示已发布的所述评论信息,包括:
将所述第一起始时间点校正为所述第一起始时间点、所述第二起始时间点中的最小值,并将所述第一结束时间点校正为所述第一结束时间点、所述第二结束时间点中的最大值;
按照校正后的所述第一起始时间点以及校正后的所述第一结束时间点,在所述视频播放界面中显示已发布的所述评论信息。
15.根据权利要求12-14任一项所述的方法,其特征在于,所述基于发生所述视频事件的时间,在所述视频播放界面中显示已发布的所述评论信息之前,所述方法还包括:
显示时间校正控件,其中,所述时间校正控件用于指示将基于发生所述视频事件的时间校正所述时间参数;
响应于针对所述时间校正控件的触发操作,将执行基于发生所述视频事件的时间,在所述视频播放界面中显示已发布的所述评论信息。
16.根据权利要求1所述的方法,其特征在于,
与视频中对应所述编辑操作的视频事件包括以下至少之一:与所述时间参数在时间上最接近的视频事件、与所述评论信息的内容最匹配的视频事件;
当所述显示参数包括所述位置参数,所述目标显示参数包括所述视频事件涉及的对象在视频画面中的位置坐标时,所述响应于针对所述评论信息的发布操作、且所述显示参数与视频中对应所述编辑操作的视频事件不匹配,基于与所述视频事件匹配的目标显示参数,在所述视频播放界面中显示已发布的所述评论信息,包括:
响应于针对所述评论信息的发布操作、且所述位置参数与所述位置坐标满足位置不匹配条件,基于所述位置坐标,在所述视频播放界面中显示已发布的所述评论信息,其中,所述位置不匹配条件包括以下之一:所述位置参数与所述位置坐标不同、所述位置参数与所述位置坐标之间的差值小于距离差值阈值。
17.根据权利要求16所述的方法,其特征在于,所述基于所述位置坐标,在所述视频播放界面中显示已发布的所述评论信息,包括:
在所述视频播放界面中的所述位置坐标显示已发布的所述评论信息。
18.根据权利要求16所述的方法,其特征在于,所述基于发生所述视频事件的时间,在所述视频播放界面中显示已发布的所述评论信息,包括:
在所述视频播放界面中的聚合坐标显示已发布的所述评论信息,其中,所述聚合坐标为所述位置参数以及所述位置坐标聚合后的坐标。
19.根据权利要求16-18任一项所述的方法,其特征在于,所述基于所述位置坐标,在所述视频播放界面中显示已发布的所述评论信息之前,所述方法还包括:
显示位置校正控件,其中,所述位置校正控件用于指示将基于所述位置坐标校正所述位置参数;
响应于针对所述位置校正控件的触发操作,将执行基于所述位置坐标,在所述视频播放界面中显示已发布的所述评论信息。
20.根据权利要求1-19任一项所述的方法,其特征在于,所述响应于编辑操作,在评论编辑区域中显示评论信息之前,所述方法还包括:
从视频存储文件中获取所述视频的至少一个视频事件,其中,所述视频存储文件用于预先存储从所述视频划分出的视频事件。
21.根据权利要求1-19任一项所述的方法,其特征在于,所述响应于编辑操作,在评论编辑区域中显示评论信息时,所述方法还包括:
基于划分因素对所述视频进行划分处理,得到所述视频的至少一个视频事件,其中,所述划分因素包括以下至少之一:所述视频的不同情节、所述视频所在的不同场景、所述视频涉及的不同对象。
22.一种视频处理装置,其特征在于,所述装置包括:
第一显示模块,用于显示视频播放界面;
评论模块,用于响应于编辑操作,在评论编辑区域中显示评论信息,其中,所述评论信息关联有根据所述编辑操作设定的显示参数,所述显示参数包括用于在所述视频播放界面中显示所述评论信息的时间参数、位置参数中的至少之一;
第二显示模块,用于响应于针对所述评论信息的发布操作、且所述显示参数与视频中对应所述编辑操作的视频事件不匹配,基于与所述视频事件匹配的目标显示参数,在所述视频播放界面中显示已发布的所述评论信息。
23.一种电子设备,其特征在于,所述电子设备包括:
存储器,用于存储计算机程序或计算机可执行指令;
处理器,用于执行所述存储器中存储的计算机程序或计算机可执行指令时,实现权利要求1至21任一项所述的视频处理方法。
24.一种计算机可读存储介质,其特征在于,存储有计算机程序或者计算机可执行指令,所述计算机程序或计算机可执行指令被处理器执行时实现权利要求1至21任一项所述的视频处理方法。
25.一种计算机程序产品,包括计算机程序或计算机可执行指令,其特征在于,所述计算机程序或计算机可执行指令被处理器执行时实现权利要求1至21任一项所述的视频处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310673165.4A CN116962785A (zh) | 2023-06-07 | 2023-06-07 | 视频处理方法、装置、电子设备、存储介质及程序产品 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310673165.4A CN116962785A (zh) | 2023-06-07 | 2023-06-07 | 视频处理方法、装置、电子设备、存储介质及程序产品 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116962785A true CN116962785A (zh) | 2023-10-27 |
Family
ID=88448268
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310673165.4A Pending CN116962785A (zh) | 2023-06-07 | 2023-06-07 | 视频处理方法、装置、电子设备、存储介质及程序产品 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116962785A (zh) |
-
2023
- 2023-06-07 CN CN202310673165.4A patent/CN116962785A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111294663B (zh) | 弹幕处理方法、装置、电子设备及计算机可读存储介质 | |
US9357267B2 (en) | Synchronizing video content with extrinsic data | |
CN111327917B (zh) | 直播内容的预览方法、装置、设备及存储介质 | |
US11580158B2 (en) | Methods, systems, and media for associating scenes depicted in media content with a map of where the media content was produced | |
US11620784B2 (en) | Virtual scene display method and apparatus, and storage medium | |
CN113253880B (zh) | 互动场景的页面的处理方法、装置及存储介质 | |
US20190230311A1 (en) | Video interface display method and apparatus | |
CN112866787A (zh) | 弹幕设置方法、装置及系统 | |
CN111966441A (zh) | 基于虚拟资源的信息处理方法、装置、电子设备及介质 | |
EP4080507A1 (en) | Method and apparatus for editing object, electronic device and storage medium | |
CN111031399B (zh) | 弹幕处理方法和系统 | |
CN114679621A (zh) | 一种视频展示方法、装置及终端设备 | |
CN112543365B (zh) | 媒体信息的播放方法、装置、设备及计算机可读存储介质 | |
CN103220582A (zh) | 一种视频文件管理方法 | |
CN108124188B (zh) | 一种影音系统运行方法 | |
CN116962785A (zh) | 视频处理方法、装置、电子设备、存储介质及程序产品 | |
CN110446096A (zh) | 一种同时进行录制的视频播放方法、装置和存储介质 | |
CN113727125B (zh) | 直播间的截图方法、装置、系统、介质以及计算机设备 | |
US20170134781A1 (en) | Method and apparatus for realizing custom menu, client and server | |
CN113676761A (zh) | 一种多媒体资源播放方法、装置及主控设备 | |
CN114286158B (zh) | 直播间的虚拟资源活动显示方法、装置、介质以及设备 | |
CN117061814A (zh) | 视频播放方法、装置、设备、存储介质及程序产品 | |
CN113132813A (zh) | 一种视频播放方法、装置、智能电视及存储介质 | |
CN116785722A (zh) | 虚拟场景的参数处理方法、装置、设备、存储介质 | |
CN117641072A (zh) | 内容生成的方法、装置、设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |