CN113507630B - 比赛视频的拆条方法和装置 - Google Patents

比赛视频的拆条方法和装置 Download PDF

Info

Publication number
CN113507630B
CN113507630B CN202110773441.5A CN202110773441A CN113507630B CN 113507630 B CN113507630 B CN 113507630B CN 202110773441 A CN202110773441 A CN 202110773441A CN 113507630 B CN113507630 B CN 113507630B
Authority
CN
China
Prior art keywords
video
processed
tear
determining
split
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110773441.5A
Other languages
English (en)
Other versions
CN113507630A (zh
Inventor
白雪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN202110773441.5A priority Critical patent/CN113507630B/zh
Publication of CN113507630A publication Critical patent/CN113507630A/zh
Application granted granted Critical
Publication of CN113507630B publication Critical patent/CN113507630B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)

Abstract

本公开提供了一种比赛视频的拆条方法和装置，涉及包括视频处理的人工智能技术领域。具体实施方式包括：对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段；基于待处理拆条片段的记分牌区域，确定多个待处理拆条片段中的目标拆条片段；生成包括目标拆条片段的比赛视频拆条结果。本公开实现了对比赛视频进行准确的拆条。

Description

比赛视频的拆条方法和装置
技术领域
本公开涉及计算机技术领域，具体涉及包括视频处理的人工智能技术领域，尤其涉及比赛视频的拆条方法和装置。
背景技术
比赛视频拆条是应网络电视新媒体和短视频内容平台的需要，对传统体育比赛进行二次加工的技术。它将原来完整的一场比赛内容，拆分成多条视频。视频内容的主要来源包括传统体育类电视转播节目、各类机构的体育视频成品等。
拆条结果可以用于深度挖掘有价值的信息，重新编目后，可用于网络电视新媒体和短视频平台等，满足新媒体视听节目碎片化要求，是视音频编目行业一个新的尝试和探索。
发明内容
提供了一种比赛视频的拆条方法、装置、电子设备以及存储介质。
根据第一方面，提供了一种比赛视频的拆条方法，包括：对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段；基于待处理拆条片段的记分牌区域，确定多个待处理拆条片段中的目标拆条片段；生成包括目标拆条片段的比赛视频拆条结果。
根据第二方面，提供了一种比赛视频的拆条装置，包括：划分单元，被配置成对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段；确定单元，被配置成基于待处理拆条片段的记分牌区域，确定多个待处理拆条片段中的目标拆条片段；生成单元，被配置成生成包括目标拆条片段的比赛视频拆条结果。
根据第三方面，提供了一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行比赛视频的拆条方法中任一实施例的方法。
根据第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，计算机指令用于使计算机执行根据比赛视频的拆条方法中任一实施例的方法。
根据第五方面，提供了一种计算机程序产品，包括计算机程序，计算机程序在被处理器执行时实现根据比赛视频的拆条方法中任一实施例的方法。
根据本公开的方案克服了相关技术中，视频拆条仅专注于精彩片段集锦，而不关注常规比赛回合片段拆分的问题。本公开针对比赛视频中存在记分牌的特点，基于比赛视频的记分牌区域，对比赛视频的回合进行准确的拆条。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本公开的其它特征、目的和优点将会变得更明显：
图1是本公开一些实施例可以应用于其中的示例性系统架构图；
图2是根据本公开的比赛视频的拆条方法的一个实施例的流程图；
图3A是根据本公开的比赛视频的拆条方法的一个应用场景的示意图；
图3B是根据本公开的比赛视频的拆条方法的包含规范比赛场地的视频帧的示意图；
图3C是根据本公开的比赛视频的拆条方法的包含规范比赛场地的视频帧的示意图；
图4A是根据本公开的比赛视频的拆条方法的又一个实施例的流程图；
图4B是根据本公开的比赛视频的拆条方法的又一个流程图；
图4C是根据本公开的比赛视频的拆条方法的背景图像的示意图；
图5A是根据本公开的比赛视频的拆条方法的又一个实施例的流程图；
图5B是根据本公开的比赛视频的拆条方法的又一个实施例的流程图；
图6是根据本公开的比赛视频的拆条装置的一个实施例的结构示意图；
图7是用来实现本公开实施例的比赛视频的拆条方法的电子设备的框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
本公开的技术方案中，所涉及的用户个人信息的获取，存储和应用等，均符合相关法律法规的规定，采取了必要保密措施，且不违背公序良俗。
需要说明的是，在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本公开。
图1示出了可以应用本公开的比赛视频的拆条方法或比赛视频的拆条装置的实施例的示例性系统架构100。
如图1所示，系统架构100可以包括终端设备101、102、103，网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用，例如视频类应用、直播应用、即时通信工具、邮箱客户端、社交平台软件等。
这里的终端设备101、102、103可以是硬件，也可以是软件。当终端设备101、102、103为硬件时，可以是具有显示屏的各种电子设备，包括但不限于智能手机、平板电脑、电子书阅读器、膝上型便携计算机和台式计算机等等。当终端设备101、102、103为软件时，可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务的多个软件或软件模块)，也可以实现成单个软件或软件模块。在此不做具体限定。
服务器105可以是提供各种服务的服务器，例如对终端设备101、102、103提供支持的后台服务器。后台服务器可以对接收到的比赛视频等数据进行分析等处理，并将处理结果(例如比赛视频拆条结果)反馈给终端设备。
需要说明的是，本公开实施例所提供的比赛视频的拆条方法可以由服务器105或者终端设备101、102、103执行，相应地，比赛视频的拆条装置可以设置于服务器105或者终端设备101、102、103中。
应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。
继续参考图2，示出了根据本公开的比赛视频的拆条方法的一个实施例的流程200。该比赛视频的拆条方法，包括以下步骤：
步骤201，对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段。
在本实施例中，上述执行主体可以对比赛视频的待处理视频帧进行划分，得到多个待处理拆条片段。所得到的多个待处理拆条片段可以是聚合结果，也可以是聚合结果经过预处理后得到的。比如，预处理可以是去除播放时长过短的聚合结果，也即，该聚合结果小于预设时长。具体地，这里的多个可以包括两个。
可选的，待处理视频帧不包括比赛视频的全部视频帧，相对于比赛视频，待处理视频帧可以是比赛视频的一些帧被删除、抽走之后的结果。所以，仅有一些待处理视频帧之间是连续的。待处理视频帧可以采用各种方式得到，比如如果在视频帧中检测到人脸或人体，则将该视频帧作为待处理视频帧。
步骤202，基于待处理拆条片段的记分牌区域，确定多个待处理拆条片段中的目标拆条片段。
在本实施例中，上述执行主体可以基于待处理拆条片段的记分牌区域，在多个待处理拆条片段中确定出至少一个拆条片段，并将该至少一个拆条片段，作为目标拆条片段。
多个待处理拆条片段中，存在包含记分牌区域的拆条片段，此外，也可以存在不包含记分牌区域的拆条片段。
在实践中，上述执行主体可以采用各种方式，基于待处理拆条片段的记分牌区域，确定多个待处理拆条片段中的至少一个拆条片段。举例来说，上述执行主体可以将包含记分牌区域的视频帧所占比例最低的待处理拆条片段，作为待删除拆条片段，并将待处理拆条片段中，待删除拆条片段以外的拆条片段作为目标拆条片段。或者，上述执行主体可以基于待处理拆条片段的记分牌区域的记分(或者记分变化情况)，确定多个待处理拆条片段中的目标拆条片段。
步骤203，生成包括目标拆条片段的比赛视频拆条结果。
在实施例中，上述执行主体可以生成比赛视频拆条结果，该比赛视频拆条结果中包括上述目标拆条片段。
本公开的上述实施例提供的方法可以克服相关技术中，视频拆条仅专注于精彩片段集锦，而不关注常规比赛回合片段拆分的问题。本公开针对比赛视频中存在记分牌的特点，基于比赛视频的记分牌区域，对比赛视频的回合进行准确的拆条。
继续参见图3A，图3A是根据本实施例的比赛视频的拆条方法的应用场景的一个示意图。在图3的应用场景中，执行主体301对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段302。执行主体301基于待处理拆条片段302的记分牌区域，确定多个待处理拆条片段中的目标拆条片段303。执行主体301生成包括目标拆条片段303的比赛视频拆条结果304。
在本申请任一实施例的一些可选的实现方式中，上述方法还可以包括：确定比赛视频中包含规范比赛场地的视频帧，将视频帧作为待处理视频帧，其中，包含规范比赛场地的视频帧指采用预设的规范全局拍摄角度拍摄的视频帧。
在这些可选的实现方式中，可以确定比赛视频中，包含规范比赛场地的视频帧，并将这些视频帧作为待处理视频帧。这样，不包含规范比赛场地的视频帧则被去除。不包含规范比赛场地的视频帧可以呈现参赛选手的特写、广告画面、观众画面等等。不包含规范比赛场地的视频帧中，也可能出现比赛场地的局部或规范全局拍摄角度以外的角度拍摄的比赛场地全局，但是不是完整、规范的比赛场地。
包含规范比赛场地的视频帧指针对比赛场地、采用预设的规范全局拍摄角度拍摄的视频帧。该拍摄角度可以拍摄到比赛场地的全局。
如图3B和3C所示，图中示出了体育比赛中，参赛者在规范比赛场地进行比赛的视频帧，也即这两个图为包含规范比赛场地的视频帧。
这些实现方式可以找到在规范比赛场地拍摄的内容，有助于准确筛选出混杂在比赛视频中的比赛无关内容。
可选地，上述对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段，可以包括：对比赛视频的待处理视频帧中连续的视频帧进行聚合，得到多个待处理拆条片段。
在这些可选的实现方式中，不包含规范比赛场地的视频帧的播放时间，可能先于得分过程或者后于得分过程。并且在比赛视频中，这些不包含规范比赛场地的视频帧会在一定程度上将包含规范比赛场地的连续视频帧间隔开。上述执行主体可以对比赛视频中连续的待处理视频帧进行聚合。每一段连续的待处理视频帧对应一个待处理拆条片段，由多段连续的待处理视频帧可以得到多个待处理拆条片段。
这些可选的实现方式可以对连续的视频帧进行聚合，有助于按照回合对视频进行拆条。在这些可选实现方式的一些应用场景中，上述对比赛视频的待处理视频帧中连续的视频帧进行聚合，得到多个待处理拆条片段，可以包括：对待处理视频帧中连续的视频帧进行聚合，生成至少两个聚合结果；对至少两个聚合结果执行以下至少一个步骤，将执行后得到的聚合结果作为多个待处理拆条片段：响应于确定至少两个聚合结果中，存在播放时间间隔时长小于预设间隔的两个聚合结果，对两个聚合结果进行合并；响应于确定至少两个聚合结果中，存在时长小于预设时长的聚合结果，删除该聚合结果。
在这些可选的应用场景中，上述的多个待处理聚合结果可以通过合并间隔较短的聚合结果成新的聚合结果的方式得到，也可以通过过滤掉过短聚合结果的方式得到。
这些应用场景可以进一步提高确定比赛视频的拆条片段的准确度。
进一步参考图4A，其示出了比赛视频的拆条方法的又一个实施例的流程400。该流程400，包括以下步骤：
步骤401，对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段。
步骤402，在多个待处理拆条片段的至少两个待处理拆条片段中，确定播放时间相邻的相邻拆条片段，并确定相邻拆条片段的记分牌区域的记分变化情况。
在本实施例中，上述执行主体可以在待处理拆条片段中的至少两个拆条片段中，确定播放时间相邻的待处理拆条片段作为相邻拆条片段，并确定相邻拆条片段的记分牌区域的记分变化情况。具体地，记分变化情况可以包括变化或无变化。至少两个待处理拆条片段可以采用各种方式获得，比如，上述执行主体可以从各个待处理拆条片段中随机抽取，或者将所有待处理拆条片段作为至少两个待处理拆条片段。
对于播放时间相邻的相邻拆条片段，举例来说，至少两个待处理拆条片段按照播放时间排序包括待处理拆条片段A、待处理拆条片段B、待处理拆条片段C，其中，播放时间相邻的(每两个)相邻拆条片段，指A和B、B和C。
步骤403，基于记分变化情况，确定多个待处理拆条片段中的目标拆条片段。
在本实施例中，上述执行主体可以基于记分变化情况，确定待处理拆条片段中的目标拆条片段。
在实践中，上述执行主体可以采用各种方式基于记分变化情况，确定待处理拆条片段。比如，上述执行主体可以获取通过记分变化情况和待处理拆条片段的标识，预测目标拆条片段的模型。上述执行主体将记分变化情况和待处理拆条片段的标识，输入该模型中，从而得到从该模型输出的目标拆条片段的标识。
步骤404，生成包括目标拆条片段的比赛视频拆条结果。
上述步骤401、步骤404的执行过程分别与步骤201、步骤203相同或相似，在此不再赘述。
本实施例可以通过记分牌区域的记分变化情况，提高进行拆条的准确度。
在本实施例的一些可选的实现方式中，步骤403可以包括：在各相邻拆条片段中，确定记分变化情况指示记分无变化的相邻拆条片段，并确定该相邻拆条片段中的在先拆条片段；将至少两个待处理拆条片段中，在先拆条片段以外的待处理拆条片段，确定为目标拆条片段。
在这些可选的实现方式中，上述执行主体可以在各相邻拆条片段中，确定记分变化情况指示记分无变化的相邻拆条片段，并在该相邻拆条片段中确定出播放时间在先的在先拆条片段。之后，上述执行主体可以将上述至少两个待处理拆条片段中，上述在先拆条片段以外的待处理拆条片段，确定为目标拆条片段。
具体地，如果相邻拆条片段的记分变化情况指示记分有变化，即指示在先拆条片段和在后拆条片段两者在不同比赛回合。如果相邻拆条片段的记分变化情况指示记分无变化，即指示在先拆条片段和在后拆条片段两者在相同比赛回合。
上述的在先拆条片段可以包括与比赛视频指示的比赛无关的内容。举例来说，比赛无关内容可以包括以下的至少一项：工作人员擦地、参赛双方换球、参赛双方交换场地、比赛画面回放。
举例来说，相邻的两个拆条片段B和C的比分都是1比2，比分变化情况是记分无变化。与该相邻拆条片段中的在先拆条片段相邻的另一个拆条片段是拆条片段A。A的比分是1比1，A中记录了从1比1到1比2的全过程，也即，记录了得分“2”中后一分的得分者的得分过程。拆条片段B则不包括得分“2”的得分过程。而记分无变化的B和C中，B不包括得分“2”的得分过程，也与下一个得分的得到过程有较长的播放时间差距，因此很可能包括了比赛无关内容。
这些实现方式可以通过比分的长时间停留，准确地确定出比赛无关内容所在的拆条片段。
在本实施例的一些可选的实现方式中，步骤402中的确定相邻拆条片段的记分牌区域的记分变化情况，可以包括：在各相邻拆条片段中，将相邻拆条片段的记分牌区域的像素变化情况，作为记分变化情况。
在这些可选的实现方式中，上述执行主体可以将像素变化情况，作为记分变化情况。在实践中，像素变化情况可以指像素点的像素值变化数值或灰度变化数值。如果像素变化情况达到变化阈值，则记分变化情况指示记分变化。如果未达到变化阈值，则记分变化情况指示记分无变化。
这些实现方式可以通过像素值的变化，准确地检测出记分变化情况。
在这些实现方式的一些可选的应用场景中，上述在多个待处理拆条片段的至少两个待处理拆条片段中，确定播放时间相邻的相邻拆条片段，并确定相邻拆条片段的记分牌区域的记分变化情况，可以包括：针对至少两个待处理拆条片段中分别确定的目标视频帧，将播放时间相邻的每两个目标视频帧作为视频帧对；确定视频帧对的两个视频帧中记分牌区域的记分变化情况，将该记分变化情况作为该视频帧对所对应的相邻拆条片段的记分变化情况；以及在各相邻拆条片段中，确定记分变化情况指示记分无变化的相邻拆条片段，并确定该相邻拆条片段中的在先拆条片段，可以包括：确定各个视频帧对中记分变化情况指示记分无变化的视频帧对的在先视频帧；将在先视频帧所在的待处理拆条片段，作为在先拆条片段。
在这些可选的应用场景中，上述执行主体可以在至少两个待处理拆条片段中的待处理拆条片段(比如每个待处理拆条片段)中，均确定出目标视频帧(一个视频帧)。并且，上述执行主体可以将播放时间相邻的每两个视频帧，作为视频帧对。相邻的视频帧指在对至少两个待处理拆条片段分别确定的目标视频帧组成的集合中，任意目标视频帧与该任意目标视频帧的播放时间最近的在先视频帧，和/或与该任意目标视频帧的播放时间最近的在后视频帧。记分变化情况指从视频帧对的在先视频帧到在后视频帧，记分牌区域的记分变化情况。
上述执行主体可以采用各种方式确定上述目标视频帧。比如，上述执行主体可以从待处理拆条片段中随机抽取任一视频帧，作为目标视频帧。
相邻拆条片段的两个拆条片段分别对应上述视频帧对。上述执行主体可以确定视频帧对中的在先视频帧，该在先视频帧所在的待处理拆条片段则是在先拆条片段。
这些实现方式可以通过待处理拆条片段中的目标视频帧，确定记分变化情况，从而提高确定记分变化情况的速度。
在本实施例的一些可选的实现方式中，上述方法还可以包括：将多个待处理拆条片段中存在记分牌区域的待处理拆条片段，作为至少两个待处理拆条片段，其中，若在待处理拆条片段确定的目标视频帧存在记分牌区域，则该待处理拆条片段存在记分牌区域。
在这些可选的实现方式中，上述执行主体可以将存在记分牌区域的待处理拆条片段作为上述至少两个待处理拆条片段，有助于从至少两个待处理拆条片段中准确地确定要过滤掉的与记分比赛的比赛内容无关的拆条片段。
可选地，目标视频帧的确定步骤，包括：在至少两个待处理拆条片段的待处理拆条片段中，确定中间视频帧作为目标视频帧。
具体地，上述执行主体可以将待处理拆条片段的中间视频帧，作为上述目标视频帧。中间视频帧指时长在待处理拆条片段的时长中间(或视频帧位置在待处理拆条片段的中间)的视频帧。比如一个待处理拆条片段的时长是90毫秒，则中间视频帧是第45毫秒的最后一帧或第46毫秒的第一帧，或者中间视频帧也可以是这最后一帧和第一帧的平均。再比如，一个待处理拆条片段有191帧，中间帧可以是第96帧。
这些可选的实现方式可以将中间帧作为目标视频帧，从而可以确保进行拆条的准确度。
在本实施例的一些可选的实现方式中，方法还可以包括：对比赛视频的视频帧进行背景提取，得到背景图像；并基于该记分牌区域确定目标视频帧的记分牌区域。
在这些可选的实现方式中，上述执行主体可以对比赛视频中的至少两个视频帧进行背景提取，提取的结果是背景图像。上述执行主体还可以确定背景图像中的记分牌区域，并基于该记分牌区域确定目标视频帧的记分牌区域。举例来说，上述执行主体可以将该背景图像中的记分牌区域作为目标视频帧的记分牌区域。或者，上述执行主体可以将该记分牌区域进行预设处理，比如输入模型或乘以目标系数，将预设处理的结果作为目标视频帧的记分牌区域。在实践中，记分牌区域可以表示为记分牌的坐标位置。待处理拆条片段的记分牌区域为目标视频帧的记分牌区域。
如图4B，该图是比赛视频的拆条方法的又一个流程图。图中示出了场地检测模块、记分牌区域识别模块和记分牌变化识别模块。场地检测模块中的场地检测模型(深度神经网络)可以对比赛视频中的规范比赛场地进行检测，从而找到无规范视频帧，并将无规范视频帧作为负样本，得到检测结果为负样本的视频帧组成的负样本列表。此外，各个包含规范比赛场地的视频帧(待处理视频帧)还可以被划分也即聚合，得到待处理拆条片段，也即粗拆条片段。场地检测模块可以对粗拆条片段进行后处理，也即进行过滤以及合并，得到至少两个待处理拆条片段。其中，过滤指响应于确定至少两个聚合结果中，存在时长小于预设时长的聚合结果，删除该聚合结果。合并指响应于确定至少两个聚合结果中，存在播放时间间隔时长小于预设间隔的两个聚合结果，对两个聚合结果进行合并。之后，记分牌变化识别模块可以获取至少两个待处理拆条片段中每个拆条片段的中点帧也即中间视频帧，得到中间列表。
针对上述负样本列表，上述记分牌区域识别模块可以对负样本列表中的无规范视频帧进行背景提取，之后对提取的背景图像进行图形学处理，也即进行灰度化处理、提取边缘信息以及合并包络矩形。图形学处理后可以得到记分牌区域也即记分牌坐标。之后，记分牌区域识别模块可以截取出背景图像中的记分牌区域。
记分牌变化识别模块可以根据截取出的记分牌区域，通过检测待处理拆条片段的中点帧中与该记分牌区域对应的图像区域，确定中点帧是否存在记分牌区域。若存在，则记分牌变化识别模块可以截取该中点帧的记分牌区域。
记分牌变化识别模块对于中间列表中存在记分牌区域的相邻中点帧，可以确定记分牌区域是否存在记分变化。若无变化，则可以删除该相邻中点帧中的在先视频帧。
如图4C，该图是背景图像的示意图。图中的左上位置示出了记分牌区域。
这些实现方式可以利用视频帧的背景，确定拆条片段的记分牌区域，从而可以避免比赛场景图像中对象过多，检测记分牌区域难度大、准度低的问题。
进一步参考图5A，其示出了比赛视频的拆条方法的又一个实施例的流程500。该流程500，包括以下步骤：
步骤501，对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段。
步骤502，基于待处理拆条片段的记分牌区域，确定多个待处理拆条片段中的目标拆条片段。
步骤503，确定比赛视频中无规范比赛场地的视频帧，将该视频帧作为无规范视频帧，其中，无规范比赛场地的视频帧指采用预设的规范全局拍摄角度以外的角度拍摄的视频帧。
在本实施例中，上述执行主体可以确定比赛视频中有规范比赛场地的视频帧以外的视频帧，也即无规范比赛场地的视频帧，并将该视频帧作为无规范视频帧。
步骤504，对无规范视频帧中至少两个无规范视频帧进行划分，得到无规范拆条片段。
在本实施例中，上述执行主体可以对无规范视频帧中至少两个无规范视频帧进行划分，从而得到多个无规范拆条片段。
在实践中，上述执行主体可以采用各种方式进行对无规范视频帧中至少两个无规范视频帧的划分。比如，上述执行主体可以将各个无规范视频帧输入预设模型，并得到从该模型输出的划分结果，也即各个无规范拆条片段。该预设模型可以通过无规范视频帧，预测无规范拆条片段。
步骤505，生成包括目标拆条片段和无规范拆条片段的比赛视频拆条结果。
在本实施例中，上述执行主体可以生成比赛视频拆条结果，该比赛视频拆条片段包括目标拆条片段和上述的多个无规范拆条片段。
上述步骤501、步骤502的执行过程分别与步骤201、步骤202相同或相似，在此不再赘述。
本实施例可以针对不包括规范比赛场地的视频内容进行拆条，避免无规范比赛场地的视频段过长的问题，从而实现对于视频更加全面、细致的拆条。
在本实施例的一些可选的实现方式中，方法还包括：将多个无规范拆条片段中存在记分牌区域的无规范拆条片段，作为至少两个无规范拆条片段，其中，若在无规范拆条片段确定的目标视频帧存在记分牌区域，则该无规范拆条片段存在记分牌区域。
在这些可选的实现方式中，上述执行主体可以将多个无规范拆条片段中存在记分牌区域的无规范拆条片段，作为至少两个无规范拆条片段。这些实现方式有助于准确地对无规范比赛场地的视频帧进行划分。
在本实施例的一些可选的实现方式中，步骤504中的对无规范视频帧中至少两个无规范视频帧进行划分，得到无规范拆条片段，可以包括：在各个至少两个无规范视频帧中，确定播放时间相邻的相邻视频帧作为视频帧对；确定该视频帧对的两个视频帧中记分牌区域的记分变化情况；将至少两个无规范视频帧的各个视频帧对中，记分变化情况指示记分牌存在记分变化的视频帧对之间，确定为比赛视频中拆条片段的划分位置；按照划分位置，对无规范视频帧中至少两个无规范视频帧进行划分，得到无规范拆条片段。
在这些可选的实现方式中，记分牌存在记分变化，则可以判断该视频帧对的在先视频帧和在后视频帧是不同回合的分界位置，分别对应不同的比赛回合。这样，这些实现方式可以准确地将不同比赛回合之间作为拆条的划分位置。
在本实施例的一些可选的实现方式中，方法还包括：对比赛视频的视频帧进行背景提取，得到背景图像；确定该背景图像中的记分牌区域，将该记分牌区域确定为无规范视频帧的记分牌区域。
在这些可选的实现方式中，上述执行主体可以对比赛视频的视频帧进行背景提取，并确定提取的背景图像中的记分牌区域，将该记分牌区域，作为无规范视频帧的记分牌区域。
在实践中，上述执行主体对比赛视频提取了背景图像，就可以将该背景图像的记分牌区域，作为目标视频帧、待处理拆条片段、无规范视频帧的记分牌区域。
这些实现方式可以利用视频帧的背景，确定无规范视频帧的记分牌区域，从而可以避免比赛场景图像中对象过多，检测记分牌区域难度大、准度低的问题。
如图5B，图中的帧序列为无规则视频帧组成的帧序列。在帧序列中，无规则视频帧按照在比赛视频中的播放时间顺序排列。记分牌区域识别模块可以对帧序列中的各个无规则视频帧进行背景提取，并并提取的背景图像进行图形学处理，得到记分牌区域也即记分牌坐标。之后，记分牌区域识别模块可以截取出背景图像中的记分牌区域，并通过检测无规则视频帧中与该记分牌区域对应的图像区域，确定该无规则视频帧是否存在记分牌区域。若存在，则记分牌变化识别模块可以截取该无规则视频帧的记分牌区域。
上述记分牌区别识别模块对于帧序列中存在记分牌区域的相邻无规范视频帧(视频帧对)，可以确定记分牌区域是否存在记分变化。若有记分变化，则将该相邻的无规范视频帧之间作为划分位置，输出该划分位置对应的时间点。这样，进行拆条的执行主体可以按照该划分位置对无规范视频帧进行划分。
在本申请任一实施例的一些可选的实现方式中，方法还包括：确定记分牌区域在目标视频帧中对应的图像区域与背景图像中记分牌区域之间的颜色直方图的相似度；响应于确定相似度达到预设阈值，确定目标视频帧存在记分牌区域。
在这些可选的实现方式中，上述执行主体可以确定背景图像中的记分牌区域，在目标视频帧中对应的区域，并分别确定这两个区域的颜色直方图，进而确定这两个颜色直方图之间的相似度。该相似度达到预设阈值，则可以确定目标视频帧存在记分牌区域。这里的区域之间的对应指坐标位置的对应。
在实践中，上述执行主体还可以将这些实现方式中的目标视频帧替换为无规范视频帧，进而执行以下步骤：确定记分牌区域在无规范视频帧中对应的图像区域与背景图像中记分牌区域之间的颜色直方图的相似度，并响应于确定该相似度达到预设阈值，确定无规范视频帧存在记分牌区域。
这些实现方式可以通过视频帧与背景之间颜色直方图的相似度，准确地确定出视频帧中是否存在记分牌区域。
在本申请任一实施例的一些可选的实现方式中，对比赛视频的视频帧进行背景提取，可以包括：响应于比赛视频中存在包含规范比赛场地的视频帧，在比赛视频的无规范视频帧中，选取视频帧进行背景提取。
在这些可选的实现方式中，上述执行主体可以在比赛视频的无规范视频帧中，选取视频帧进行背景提取。参与背景提取的视频帧的数量需达到预设数量，比如100。
这些实现方式可以避免因包含规范比赛场地的视频帧较多，采用包含规范比赛场地的视频帧所造成的提取的背景图像中呈现规范比赛场地的问题。
在本申请任一实施例的一些可选的实现方式中，背景图像中的记分牌区域的确定步骤包括：对背景图像进行灰度化处理；提取灰度化处理后的背景图像的边缘信息，并对边缘信息进行包络矩形合并，得到背景图像中的记分牌区域。
在这些可选的实现方式中，上述执行主体可以对背景图像进行灰度化处理，并对灰度化处理的结果进行边缘提取。之后，上述执行主体可以对提取的边缘信息进行包络矩形的合并，从而得到背景图像中的记分牌区域。
在实践中，上述执行主体可以对包络矩形的合并结果进行小幅度的收缩(比如按照预设比例进行收缩)，并将收缩结果作为背景图像中的记分牌区域。
这些实现方式可以提高对记分牌区域的提取准确度。
进一步参考图6，作为对上述各图所示方法的实现，本公开提供了一种比赛视频的拆条装置的一个实施例，该装置实施例与图2所示的方法实施例相对应，除下面所记载的特征外，该装置实施例还可以包括与图2所示的方法实施例相同或相应的特征或效果。该装置具体可以应用于各种电子设备中。
如图6所示，本实施例的比赛视频的拆条装置600包括：划分单元601、确定单元602和生成单元603。其中，划分单元601，被配置成对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段；确定单元602，被配置成基于待处理拆条片段的记分牌区域，确定多个待处理拆条片段中的目标拆条片段；生成单元603，被配置成生成包括目标拆条片段的比赛视频拆条结果。
在本实施例中，比赛视频的拆条装置600的划分单元601、确定单元602和生成单元603的具体处理及其所带来的技术效果可分别参考图2对应实施例中步骤201、步骤202和步骤203的相关说明，在此不再赘述。
在本实施例的一些可选的实现方式中，装置还包括：全局确定单元，被配置成确定比赛视频中包含规范比赛场地的视频帧，将视频帧作为待处理视频帧。
在本实施例的一些可选的实现方式中，划分单元，进一步被配置成按照如下方式执行对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段：对比赛视频的待处理视频帧中连续的视频帧进行聚合，得到多个待处理拆条片段。
在本实施例的一些可选的实现方式中，确定单元，进一步被配置成按照如下方式执行基于待处理拆条片段的记分牌区域，确定多个待处理拆条片段中的目标拆条片段：在多个待处理拆条片段的至少两个待处理拆条片段中，确定播放时间相邻的相邻拆条片段，并确定相邻拆条片段的记分牌区域的记分变化情况；基于记分变化情况，确定多个待处理拆条片段中的目标拆条片段。
在本实施例的一些可选的实现方式中，确定单元，进一步被配置成按照如下方式执行基于记分变化情况，确定多个待处理拆条片段中的目标拆条片段：在各相邻拆条片段中，确定记分变化情况指示记分无变化的相邻拆条片段，并确定该相邻拆条片段中的在先拆条片段；将至少两个待处理拆条片段中，在先拆条片段以外的待处理拆条片段，确定为目标拆条片段，其中，在先拆条片段包括比赛无关内容。
在本实施例的一些可选的实现方式中，确定单元，进一步被配置成按照如下方式执行在多个待处理拆条片段的至少两个待处理拆条片段中，确定播放时间相邻的相邻拆条片段，并确定相邻拆条片段的记分牌区域的记分变化情况：对在至少两个待处理拆条片段分别确定的目标视频帧，将播放时间相邻的每两个目标视频帧作为视频帧对；确定视频帧对的两个视频帧中记分牌区域的记分变化情况，将该记分变化情况作为视频帧对所对应的相邻拆条片段的记分变化情况；以及确定单元，进一步被配置成按照如下方式执行在各相邻拆条片段中，确定记分变化情况指示记分无变化的相邻拆条片段，并确定该相邻拆条片段中的在先拆条片段：确定各个视频帧对中记分变化情况指示记分无变化的视频帧对的在先视频帧；将在先视频帧所在的待处理拆条片段，作为在先拆条片段。
在本实施例的一些可选的实现方式中，确定单元，进一步被配置成按照如下方式执行确定相邻拆条片段的记分牌区域的记分变化情况：在各相邻拆条片段中，将相邻拆条片段的记分牌区域的像素变化情况，作为记分变化情况。
在本实施例的一些可选的实现方式中，装置还包括：区域确定单元，被配置成将多个待处理拆条片段中存在记分牌区域的待处理拆条片段，作为至少两个待处理拆条片段，其中，若在待处理拆条片段确定的目标视频帧存在记分牌区域，则该待处理拆条片段存在记分牌区域。
在本实施例的一些可选的实现方式中，目标视频帧的确定步骤，包括：在至少两个待处理拆条片段中，确定中间视频帧作为目标视频帧。
在本实施例的一些可选的实现方式中，装置还包括：背景提取单元，被配置成对比赛视频的视频帧进行背景提取，得到背景图像；记分牌确定单元，被配置成确定该背景图像中的记分牌区域，并基于该记分牌区域，确定目标视频帧的记分牌区域。
在本实施例的一些可选的实现方式中，划分单元，进一步被配置成按照如下方式执行对比赛视频的待处理视频帧中连续的视频帧进行聚合，得到多个待处理拆条片段：对待处理视频帧中连续的视频帧进行聚合，生成至少两个聚合结果；对至少两个聚合结果执行以下至少一个步骤，将执行后得到的聚合结果作为多个待处理拆条片段：响应于确定至少两个聚合结果中，存在播放时间间隔时长小于预设间隔的两个聚合结果，对两个聚合结果进行合并；响应于确定至少两个聚合结果中，存在时长小于预设时长的聚合结果，删除该聚合结果。
在本实施例的一些可选的实现方式中，装置还包括：无规范单元，被配置成确定比赛视频中无规范比赛场地的视频帧，将该视频帧作为无规范视频帧；片段划分单元，被配置成对无规范视频帧中至少两个无规范视频帧进行划分，得到无规范拆条片段；以及生成单元，进一步被配置成按照如下方式执行生成包括目标拆条片段的比赛视频拆条结果：生成包括目标拆条片段和无规范拆条片段的比赛视频拆条结果。
在本实施例的一些可选的实现方式中，装置还包括：片段确定单元，被配置成将多个无规范拆条片段中存在记分牌区域的无规范拆条片段，作为至少两个无规范拆条片段，其中，若在无规范拆条片段确定的目标视频帧存在记分牌区域，则该无规范拆条片段存在记分牌区域。
在本实施例的一些可选的实现方式中，片段划分单元，进一步被配置成按照如下方式执行对无规范视频帧中至少两个无规范视频帧进行划分，得到无规范拆条片段：在各个至少两个无规范视频帧中，确定播放时间相邻的相邻视频帧作为视频帧对；确定该视频帧对的两个视频帧中记分牌区域的记分变化情况；将至少两个无规范视频帧的各个视频帧对中，记分变化情况指示记分牌存在记分变化的视频帧对之间，确定为比赛视频中拆条片段的划分位置；按照划分位置，对无规范视频帧中至少两个无规范视频帧进行划分，得到无规范拆条片段。
在本实施例的一些可选的实现方式中，装置还包括：图像生成单元，被配置成对比赛视频的视频帧进行背景提取，得到背景图像；区域生成单元，被配置成确定该背景图像中的记分牌区域，将该记分牌区域确定为无规范视频帧的记分牌区域。
在本实施例的一些可选的实现方式中，装置还包括：相似度确定单元，被配置成确定记分牌区域在目标视频帧中对应的图像区域与背景图像中记分牌区域之间的颜色直方图的相似度；指定单元，被配置成响应于确定相似度达到预设阈值，确定目标视频帧存在记分牌区域。
在本实施例的一些可选的实现方式中，图像生成单元，进一步被配置成按照如下方式执行对比赛视频的视频帧进行背景提取：响应于比赛视频中存在包含规范比赛场地的视频帧，在比赛视频的无规范视频帧中选取视频帧进行背景提取。
在本实施例的一些可选的实现方式中，背景图像中的记分牌区域的确定步骤包括：对背景图像进行灰度化处理；提取灰度化处理后的背景图像的边缘信息，对边缘信息进行包络矩形的合并，并根据合并结果得到背景图像中的记分牌区域。
根据本公开的实施例，本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。
如图7所示，是根据本公开实施例的比赛视频的拆条方法的电子设备的框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图7所示，该电子设备包括：一个或多个处理器701、存储器702，以及用于连接各部件的接口，包括高速接口和低速接口。各个部件利用不同的总线互相连接，并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在电子设备内执行的指令进行处理，包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如，耦合至接口的显示设备)上显示GUI的图形信息的指令。在其它实施方式中，若需要，可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样，可以连接多个电子设备，各个设备提供部分必要的操作(例如，作为服务器阵列、一组刀片式服务器、或者多处理器系统)。图7中以一个处理器701为例。
存储器702即为本公开所提供的非瞬时计算机可读存储介质。其中，存储器存储有可由至少一个处理器执行的指令，以使至少一个处理器执行本公开所提供的比赛视频的拆条方法。本公开的非瞬时计算机可读存储介质存储计算机指令，该计算机指令用于使计算机执行本公开所提供的比赛视频的拆条方法。
存储器702作为一种非瞬时计算机可读存储介质，可用于存储非瞬时软件程序、非瞬时计算机可执行程序以及模块，如本公开实施例中的比赛视频的拆条方法对应的程序指令/模块(例如，附图6所示的划分单元601、确定单元602和生成单元603)。处理器701通过运行存储在存储器702中的非瞬时软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述方法实施例中的比赛视频的拆条方法。
存储器702可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据比赛视频的拆条电子设备的使用所创建的数据等。此外，存储器702可以包括高速随机存取存储器，还可以包括非瞬时存储器，例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些实施例中，存储器702可选包括相对于处理器701远程设置的存储器，这些远程存储器可以通过网络连接至比赛视频的拆条电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
比赛视频的拆条方法的电子设备还可以包括：输入装置703和输出装置704。处理器701、存储器702、输入装置703和输出装置704可以通过总线或者其他方式连接，图7中以通过总线连接为例。
输入装置703可接收输入的数字或字符信息，以及产生与比赛视频的拆条电子设备的用户设置以及功能控制有关的键信号输入，例如触摸屏、小键盘、鼠标、轨迹板、触摸板、指示杆、一个或者多个鼠标按钮、轨迹球、操纵杆等输入装置。输出装置704可以包括显示设备、辅助照明装置(例如，LED)和触觉反馈装置(例如，振动电机)等。该显示设备可以包括但不限于，液晶显示器(LCD)、发光二极管(LED)显示器和等离子体显示器。在一些实施方式中，显示设备可以是触摸屏。
此处描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、专用ASIC(专用集成电路)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
这些计算程序(也称作程序、软件、软件应用、或者代码)包括可编程处理器的机器指令，并且可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。如本文使用的，术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如，磁盘、光盘、存储器、可编程逻辑装置(PLD))，包括，接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务("Virtual Private Server"，或简称"VPS")中，存在的管理难度大，业务扩展性弱的缺陷。服务器也可以为分布式系统的服务器，或者是结合了区块链的服务器。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中，例如，可以描述为：一种处理器包括划分单元、确定单元和生成单元。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定，例如，划分单元还可以被描述为“对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段的单元”。
作为另一方面，本公开还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的装置中所包含的；也可以是单独存在，而未装配入该装置中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该装置执行时，使得该装置：对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段；基于待处理拆条片段的记分牌区域，确定多个待处理拆条片段中的目标拆条片段；生成包括目标拆条片段的比赛视频拆条结果。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (20)

1.一种比赛视频的拆条方法，所述方法包括：
对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段；
基于所述待处理拆条片段的记分牌区域，确定所述多个待处理拆条片段中的目标拆条片段；
生成包括所述目标拆条片段的比赛视频拆条结果；
基于所述待处理拆条片段的记分牌区域，确定所述多个待处理拆条片段中的目标拆条片段，包括：
在所述多个待处理拆条片段的至少两个待处理拆条片段中，确定播放时间相邻的相邻拆条片段，并确定所述相邻拆条片段的记分牌区域的记分变化情况；
基于所述记分变化情况，确定所述多个待处理拆条片段中的目标拆条片段；
所述基于所述记分变化情况，确定所述多个待处理拆条片段中的目标拆条片段，包括：
在各相邻拆条片段中，确定记分变化情况指示记分无变化的相邻拆条片段，并确定该相邻拆条片段中的在先拆条片段；
将所述至少两个待处理拆条片段中，所述在先拆条片段以外的待处理拆条片段，确定为所述目标拆条片段。
2.根据权利要求1所述的方法，其中，所述方法还包括：
确定所述比赛视频中包含规范比赛场地的视频帧，将所述视频帧作为所述待处理视频帧，其中，包含规范比赛场地的视频帧指采用预设的规范全局拍摄角度拍摄的视频帧。
3.根据权利要求1或2所述的方法，其中，所述对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段，包括：
对所述比赛视频的待处理视频帧中连续的视频帧进行聚合，得到多个待处理拆条片段。
4.根据权利要求1所述的方法，其中，所述在所述多个待处理拆条片段的至少两个待处理拆条片段中，确定播放时间相邻的相邻拆条片段，并确定所述相邻拆条片段的记分牌区域的记分变化情况，包括：
针对所述至少两个待处理拆条片段中分别确定的目标视频帧，将播放时间相邻的每两个目标视频帧作为视频帧对；
确定所述视频帧对的两个视频帧中记分牌区域的记分变化情况，将该记分变化情况作为所述视频帧对所对应的相邻拆条片段的记分变化情况；以及
所述在各相邻拆条片段中，确定记分变化情况指示记分无变化的相邻拆条片段，并确定该相邻拆条片段中的在先拆条片段，包括：
确定各个视频帧对中记分变化情况指示记分无变化的视频帧对的在先视频帧；
将所述在先视频帧所在的待处理拆条片段，作为所述在先拆条片段。
5.根据权利要求1所述的方法，其中，所述方法还包括：
将所述多个待处理拆条片段中存在记分牌区域的待处理拆条片段，作为所述至少两个待处理拆条片段，其中，若在待处理拆条片段确定的目标视频帧存在记分牌区域，则该待处理拆条片段存在记分牌区域。
6.根据权利要求4所述的方法，其中，所述目标视频帧的确定步骤，包括：
在所述至少两个待处理拆条片段中，确定中间视频帧作为所述目标视频帧。
7.根据权利要求4所述的方法，其中，所述方法还包括：
对所述比赛视频的视频帧进行背景提取，得到背景图像；
确定该背景图像中的记分牌区域，并基于该记分牌区域确定所述目标视频帧的记分牌区域。
8.根据权利要求3所述的方法，其中，所述对所述比赛视频的待处理视频帧中连续的视频帧进行聚合，得到多个待处理拆条片段，包括：
对所述待处理视频帧中连续的视频帧进行聚合，生成至少两个聚合结果；
对所述至少两个聚合结果执行以下至少一个步骤，将执行后得到的聚合结果作为所述多个待处理拆条片段：
响应于确定所述至少两个聚合结果中，存在播放时间间隔时长小于预设间隔的两个聚合结果，对所述两个聚合结果进行合并；
响应于确定所述至少两个聚合结果中，存在时长小于预设时长的聚合结果，删除该聚合结果。
9.根据权利要求1所述的方法，其中，所述方法还包括：
确定所述比赛视频中无规范比赛场地的视频帧，将该视频帧作为无规范视频帧，其中，无规范比赛场地的视频帧指采用预设的规范全局拍摄角度以外的角度拍摄的视频帧；
对所述无规范视频帧中至少两个无规范视频帧进行划分，得到无规范拆条片段；以及
所述生成包括所述目标拆条片段的比赛视频拆条结果，包括：
生成包括所述目标拆条片段和所述无规范拆条片段的比赛视频拆条结果。
10.根据权利要求9所述的方法，其中，所述对所述无规范视频帧中至少两个无规范视频帧进行划分，得到无规范拆条片段，包括：
在各个至少两个无规范视频帧中，确定播放时间相邻的相邻视频帧作为视频帧对；
确定该视频帧对的两个视频帧中记分牌区域的记分变化情况；
将所述至少两个无规范视频帧的各个视频帧对中，记分变化情况指示记分牌存在记分变化的视频帧对之间，确定为所述比赛视频中拆条片段的划分位置；
按照所述划分位置，对所述无规范视频帧中至少两个无规范视频帧进行划分，得到无规范拆条片段。
11.根据权利要求7所述的方法，其中，所述方法还包括：
确定记分牌区域在所述目标视频帧中对应的图像区域与背景图像中记分牌区域之间的颜色直方图的相似度；
响应于确定所述相似度达到预设阈值，确定所述目标视频帧存在记分牌区域。
12.根据权利要求7所述的方法，其中，所述对所述比赛视频的视频帧进行背景提取，包括：
响应于所述比赛视频中存在包含规范比赛场地的视频帧，在所述比赛视频的无规范视频帧中选取视频帧进行背景提取。
13.根据权利要求7所述的方法，其中，所述确定该背景图像中的记分牌区域包括：
对背景图像进行灰度化处理；
提取灰度化处理后的背景图像的边缘信息，对所述边缘信息进行包络矩形的合并，并根据合并结果得到背景图像中的记分牌区域。
14.一种比赛视频的拆条装置，所述装置包括：
划分单元，被配置成对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段；
确定单元，被配置成基于所述待处理拆条片段的记分牌区域，确定所述多个待处理拆条片段中的目标拆条片段；
生成单元，被配置成生成包括所述目标拆条片段的比赛视频拆条结果；
所述确定单元，进一步被配置成按照如下方式执行所述基于所述待处理拆条片段的记分牌区域，确定所述多个待处理拆条片段中的目标拆条片段：
在所述多个待处理拆条片段的至少两个待处理拆条片段中，确定播放时间相邻的相邻拆条片段，并确定所述相邻拆条片段的记分牌区域的记分变化情况；
基于所述记分变化情况，确定所述多个待处理拆条片段中的目标拆条片段；
所述确定单元，进一步被配置成按照如下方式执行所述基于所述记分变化情况，确定所述多个待处理拆条片段中的目标拆条片段：
在各相邻拆条片段中，确定记分变化情况指示记分无变化的相邻拆条片段，并确定该相邻拆条片段中的在先拆条片段；
将所述至少两个待处理拆条片段中，所述在先拆条片段以外的待处理拆条片段，确定为所述目标拆条片段。
15.根据权利要求14所述的装置，其中，所述装置还包括：
全局确定单元，被配置成确定所述比赛视频中包含规范比赛场地的视频帧，将所述视频帧作为所述待处理视频帧。
16.根据权利要求14或15所述的装置，其中，所述划分单元，进一步被配置成按照如下方式执行所述对比赛视频的各个待处理视频帧进行划分，得到多个待处理拆条片段：
对所述比赛视频的待处理视频帧中连续的视频帧进行聚合，得到多个待处理拆条片段。
17.根据权利要求14所述的装置，其中，所述确定单元，进一步被配置成按照如下方式执行所述在所述多个待处理拆条片段的至少两个待处理拆条片段中，确定播放时间相邻的相邻拆条片段，并确定所述相邻拆条片段的记分牌区域的记分变化情况：
针对所述至少两个待处理拆条片段中分别确定的目标视频帧，将播放时间相邻的每两个目标视频帧作为视频帧对；
确定所述视频帧对的两个视频帧中记分牌区域的记分变化情况，将该记分变化情况作为所述视频帧对所对应的相邻拆条片段的记分变化情况；以及
所述确定单元，进一步被配置成按照如下方式执行所述在各相邻拆条片段中，确定记分变化情况指示记分无变化的相邻拆条片段，并确定该相邻拆条片段中的在先拆条片段：
确定各个视频帧对中记分变化情况指示记分无变化的视频帧对的在先视频帧；
将所述在先视频帧所在的待处理拆条片段，作为所述在先拆条片段。
18.根据权利要求14所述的装置，其中，所述装置还包括：
区域确定单元，被配置成将所述多个待处理拆条片段中存在记分牌区域的待处理拆条片段，作为所述至少两个待处理拆条片段，其中，若在待处理拆条片段确定的目标视频帧存在记分牌区域，则该待处理拆条片段存在记分牌区域。
19.一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-13中任一项所述的方法。
20.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1-13中任一项所述的方法。
CN202110773441.5A 2021-07-08 2021-07-08 比赛视频的拆条方法和装置 Active CN113507630B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110773441.5A CN113507630B (zh) 2021-07-08 2021-07-08 比赛视频的拆条方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110773441.5A CN113507630B (zh) 2021-07-08 2021-07-08 比赛视频的拆条方法和装置

Publications (2)

Publication Number Publication Date
CN113507630A CN113507630A (zh) 2021-10-15
CN113507630B true CN113507630B (zh) 2023-06-20

Family

ID=78012182

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110773441.5A Active CN113507630B (zh) 2021-07-08 2021-07-08 比赛视频的拆条方法和装置

Country Status (1)

Country Link
CN (1) CN113507630B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113766268B (zh) * 2021-11-08 2022-04-15 阿里巴巴达摩院(杭州)科技有限公司 视频处理方法、装置、电子设备和可读介质
CN115002529A (zh) * 2022-05-07 2022-09-02 咪咕文化科技有限公司 视频拆条方法、装置、设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263907A (zh) * 2011-08-04 2011-11-30 央视国际网络有限公司 比赛视频的播放控制方法及其片段信息的生成方法和装置
CN110611841A (zh) * 2019-09-06 2019-12-24 Oppo广东移动通信有限公司 整合方法、终端和可读存储介质
CN111988670A (zh) * 2020-08-18 2020-11-24 腾讯科技（深圳）有限公司 视频播放方法及装置、电子设备和计算机可读存储介质
CN112911239A (zh) * 2021-01-28 2021-06-04 北京市商汤科技开发有限公司 视频处理方法及装置、电子设备和存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7983442B2 (en) * 2007-08-29 2011-07-19 Cyberlink Corp. Method and apparatus for determining highlight segments of sport video
CN102306279B (zh) * 2011-07-12 2014-07-02 央视国际网络有限公司 视频比分的识别方法及装置
US20170228600A1 (en) * 2014-11-14 2017-08-10 Clipmine, Inc. Analysis of video game videos for information extraction, content labeling, smart video editing/creation and highlights generation
CN109145784B (zh) * 2018-08-03 2022-06-03 百度在线网络技术（北京）有限公司 用于处理视频的方法和装置
CN109344292B (zh) * 2018-09-28 2022-04-22 百度在线网络技术（北京）有限公司 赛事得分片段的生成方法、装置、服务器和存储介质
CN110267116A (zh) * 2019-05-22 2019-09-20 北京奇艺世纪科技有限公司 视频生成方法、装置、电子设备和计算机可读介质
CN110830847B (zh) * 2019-10-24 2022-05-06 杭州威佩网络科技有限公司 一种截取比赛视频片段的方法、装置及电子设备
CN111488847B (zh) * 2020-04-17 2024-02-02 上海媒智科技有限公司 体育比赛视频进球片段获取系统及方法、终端
CN111757148B (zh) * 2020-06-03 2022-11-04 苏宁云计算有限公司 体育赛事视频处理方法、装置和系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263907A (zh) * 2011-08-04 2011-11-30 央视国际网络有限公司 比赛视频的播放控制方法及其片段信息的生成方法和装置
CN110611841A (zh) * 2019-09-06 2019-12-24 Oppo广东移动通信有限公司 整合方法、终端和可读存储介质
CN111988670A (zh) * 2020-08-18 2020-11-24 腾讯科技（深圳）有限公司 视频播放方法及装置、电子设备和计算机可读存储介质
CN112911239A (zh) * 2021-01-28 2021-06-04 北京市商汤科技开发有限公司 视频处理方法及装置、电子设备和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于记分牌时间和新闻文本提取足球视频精彩事件;胡胜红;谭生龙;桂超;孙宝林;;济南大学学报(自然科学版)(05);全文 *

Also Published As

Publication number Publication date
CN113507630A (zh) 2021-10-15

Similar Documents

Publication Publication Date Title
US10424341B2 (en) Dynamic video summarization
CN110610510B (zh) 目标跟踪方法、装置、电子设备及存储介质
CN106663196B (zh) 用于识别主体的方法、系统和计算机可读存储介质
CN112464814A (zh) 视频处理方法、装置、电子设备及存储介质
CN113507630B (zh) 比赛视频的拆条方法和装置
US8805123B2 (en) System and method for video recognition based on visual image matching
CN110659600B (zh) 物体检测方法、装置及设备
CN111209897B (zh) 视频处理的方法、装置和存储介质
CN112381104A (zh) 一种图像识别方法、装置、计算机设备及存储介质
CN112561053B (zh) 图像处理方法、预训练模型的训练方法、装置和电子设备
WO2022089170A1 (zh) 字幕区域识别方法、装置、设备及存储介质
US20180205989A1 (en) Determining Audience Engagement
CN111429341B (zh) 一种视频处理方法、设备及计算机可读存储介质
WO2015165524A1 (en) Extracting text from video
CN111836118B (zh) 视频处理方法、装置、服务器及存储介质
KR20220126264A (ko) 비디오 흔들림 검출 방법, 장치, 전자 기기 및 저장 매체
CN111783639A (zh) 图像检测方法、装置、电子设备及可读存储介质
CN111444819B (zh) 切割帧确定方法、网络训练方法、装置、设备及存储介质
CN108921138B (zh) 用于生成信息的方法和装置
CN112560772B (zh) 人脸的识别方法、装置、设备及存储介质
CN112036373B (zh) 训练视频文本分类模型的方法、视频文本分类方法和装置
CN111918073B (zh) 直播间的管理方法和装置
CN113361303B (zh) 临时交通标志牌识别方法、装置及设备
CN113301382A (zh) 视频处理方法、设备、介质及程序产品
CN111783644A (zh) 检测方法、装置、设备和计算机存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant